康邨出生和长大，有三姊一兄。父亲在中环摆花街一带附近开设木箱搬运的店舖。童年阶段主要到屋邨后山位置玩金丝猫，或者与胞兄钱小豪跑到赛西湖游水。小学二年级时向楼下邻居、1970-1980年代着名职业赛拳手冼林沃及其堂弟冼灏英学习大圣噼挂功夫。钱嘉乐曾就读高主教书院（小学部），毕业于岭南小学（1978年；寄宿）。后因成绩不错考入玫瑰岗学校，但在1979年完成中一课程后由于不明白学校英语授课的内容而辍学成为龙虎武师，并被当时已加入邵氏武术训练班的兄长引荐，参与其中成为学员。同期的学员计有谷轩昭。他于1980年至