Diaz ble født i Bordeaux av spanske foreldre, som han mistet da han var i tiårsalderen. Noe venner av moren tok ham til seg. De bodde nær Sèvres, hvor han ble bitt av et krypdyr. Såret ble infisert, og han mistet foten og gikk med trebein resten av livet.