用为白直队主。孝建元年（454年），黄回随臧质起兵反对宋孝武帝，在兵败后逃到豫章，被军主谢承祖抓住并送到江州作部处作役，期间遇到大赦而得免罪。获赦后黄回到了建康，却在宣阳门处与人殴斗，他假称自己是江夏王刘义恭的马客，遂被鞭打二百并送到右尚方处作役。当时中书舍人戴明宝也因罪而被送到右尚方，就以黄回为户伯差遣，黄回为人勤快又善于奉迎，一直尽心事奉明宝。不久，明宝获得孝武帝原谅赦罪，官复原职，也上奏免掉了黄回的罪，并由他领随身队，主理宅第及江西墅事。又因黄回多才多艺，明宝就更加宠信他。黄回亦因其有武勇而在江西