2005年，霍震霆支持政府將現時香港體育學院嘅部分設施，改建為2008年夏季奧林匹克運動會馬術項目嘅比賽場館，體院被迫臨時遷至烏溪沙青年新村嘅臨時場館，受到香港精英運動員協會為首嘅港隊成員嚴厲批評。