仁，是廖文毅大哥。母亲廖蔡秀鸾出身台中清水望族，十八岁与就读东北帝国大学医学院的廖温仁结婚。廖史豪在京都就读京都第一锦仁小学校。昭和十一年（1936年）6月23日父亲廖温仁病逝，当时廖史豪就读同志社中学。1936年7月，母亲带他们兄妹七人返台，9月转入台南州州立嘉义中学。昭和十五年（1940年）搬至东京，就读关东中学五年级。1942年考上立教大学文学系。1944年因二次世界大战的战时征兵，住在关西的台湾人必须回台湾受训；住在关东的台湾人在日本内地受训。廖史豪于东京荒川河堤防空阵地当初年兵，廖史豪与李登辉