Siendo niño, José María Torres Caicedo pierde a sus padres, Julián Torres y Peña y Tadea Caicedo Villegas, quedando bajo la protección de Monseñor Manuel José Mosquera.