，父亲拿督翁惹化是巫来由人统一组织（巫统）创办人兼第一任主席，母亲是拿汀哈丽玛·胡先（)，祖父嘉化·莫哈末是柔佛王朝立宪后的第一任州务大臣，其伯叔及父亲也曾先后出任柔佛州务大臣，是个官宦世家。 祖母罗凯雅·哈宁是一位来自土耳其的女子，其长子希山慕丁曾任内政部长与国防部长，现今为慕尤丁内阁的外交部长。
青年时代.胡先翁分别在新加坡及柔佛的「英文学院」(，今）完成他的中小学教育，毕业后在1940年加入了柔佛御林军而成为一名学员。次年，他被送往印度德拉敦的（）受训，毕业后加入印度陆军，并