At han valgte at fratræde i 2012, skyldtes et ønske om at reducere arbejdsmængden og få mere tid til familien og sig selv.
Peter Skov Hansen er på 49. år gift med Grethe. De har sønnen Mikael, som sammen med Pernille har skænket dem børnebørnene Thorbjørn og Frida, som bor 500 meter væk.
Hvad fritidsinteresser angår, har sport altid fyldt meget. I de yngre år spillede han fodbold og badminton. Senere kom cykling og triatlon til, og i dag dyrker han mest badminton, løb, golf og cykelture i Nordsjælland og på Bornholm.
Fødselsdagen bliver fejret sammen med den nærmeste familie.