Davidson var født i 1922 i Hull som en av ni barn av en jødisk innvandrer. Han sluttet tidlig i skolen og fikk jobb som kontorgutt i s London-kontor. Senere arbeidet han for Keystone Press Agency. Under den andre verdenskrig tjenestegjorde han i den britiske marines ubåtvåpen.