Procreo tres hijos con su esposa Juana Chinchilla: Manuel María Castro, José Mariano Castro y José Domingo Castro, todos músicos.