Blunts far ble tilknyttet den britiske Paris-ambassades kapell og tok med seg familien slik at Anthony tilbragte mange år av oppveksten i den franske hovedstad. Der ble han kunstinteressert, og lærte seg fransk.