Su madre abrió una pequeña tienda que no prosperó, por lo que José Alfredo tuvo que contribuir a la economía familiar y desempeñó múltiples oficios, entre ellos, el de camarero; fue además jugador de fútbol.