Durante sus primeros años vivió en Louisville (Kentucky, Estados Unidos) y cuando regresó a su ciudad natal, su padre lo inició en el violín, instrumento que abandonaría por el piano después de la muerte de este en 1921 y tras haber escuchado tocar a Jimmy Yancey.