Junto con su hermano mayor Juan de Castro (II señor de Cadaval), D. Fernando participó en la Batalla de Ceuta en 1415. Se decía que los hermanos Castro eran los principales impulsores de la expulsión de los ciudadanos musulmanes de la ciudad.