En sus años en el Harlem, Lancaster pasaba muchas horas en la calle, donde desarrolló su interés y su habilidad por el ejercicio físico y la gimnasia.