Antônio de Castro Mayer ble født som et av tolv barn av Johann (João) Mayer, en bayersk steinhugger, og hans kone Francisca de Castro, av brasiliansk bondeslekt. Antônio hjalp moren med å passe på og brødfø familien etter at faren døde i 1910.