末是柔佛王朝立宪后的第一任州务大臣，其伯叔及父亲也曾先后出任柔佛州务大臣，是个官宦世家。 祖母罗凯雅·哈宁是一位来自土耳其的女子，其长子希山慕丁曾任内政部长与国防部长，现今为慕尤丁内阁的外交部长。
青年时代.胡先翁分别在新加坡及柔佛的「英文学院」(，今）完成他的中小学教育，毕业后在1940年加入了柔佛御林军而成为一名学员。次年，他被送往印度德拉敦的（）受训，毕业后加入印度陆军，并在第二次世界大战期间前往中东服役。战后，由于个人实战经验丰富，胡先翁获得了英国政府的赏识，并被聘请为（英