Manifold ble utdannet ved Geelong Grammar School og han studerte moderne språk ved Jesus College i Cambridge. Mens han bodde i Cambridge ble han medlem av partiet Communist Party of Great Britain. Deretter arbeidet han i en periode i Tyskland før han kom tilbake til Storbritannia. Under den andre verdenskrig tjenestegjorde Manifold i etterretningstjenesten i den britiske hæren og han var utstasjonert i Midtøsten, Afrika og Frankrike. I 1949 vendte Manifold tilbake til Australia og han slo seg ned i Brisbane der han bodde resten av livet.