Fernando fue casado en dos oportunidades: primero con Francisca de Carvajal Osorio, hija de los Señores de Jódar, y después, al quedar viudo, con María Carrillo de Mendoza.