Han er sønn av færøyske Sunneva Davidsen og den britiske soldaten Frank Albert Seward, som tjenestegjorde på Færøyene under andre verdenskrig. Han vokste opp hos moren i Sørvágur. Han giftet seg i 1963 med Anny Elisa Frederiksen fra Miðvágur. Frank Davidsen var reservepoliti og tollbetjent i noen år før han ble tollkontrollør på Vágar lufthavn i 1979.