Castro Madriz giftet seg med Pacífica Fernández Oreamuno, datter av Manuel José Fernández Chacón, og hun sydde en rød stripe av det liberale parti på flagget til Den mellomamerikanske føderasjon, som representerte fargene til tricoloren. I 1850, på en reise til Frankrike, ble Castro dekorert med Æreslegionen.