Acabada la Guerra de Perusa l'any 40 aC, el seu pare es va divorciar de la seva mare, ja que Octavi la culpava d'haver instigat el seu cunyat Luci Antoni a fer-li la guerra. El nen es va quedar a viure amb Fúlvia, la qual va morir poc temps després a l'exili. Marc Antoni es va casar amb Octàvia Menor i el nen va anar a viure amb ells.