Sus padres se divorciaron antes de la Revolución Cubana en la cual Castro tomó el poder en ese país, y Mirta se mudó a Miami, Estados Unidos, con la familia Díaz-Balart, llevándose a su hijo con ella. Fidel hijo regresó a Cuba cuando era niño para visitar a su padre, pero se mantuvo allí después por el resto de su infancia.