建筑扩大至别墅附近的整个地段，成为地区的名称，范围约为现今落路下至沙田马场一带。1966年，香港政府收回大宅北方的一片土地（位于现时骏景园处），改为兴建九铁车厂及员工宿舍。工程于1968年完成，其后一直成为铁路车厂，现为港铁东铁线的何东楼车厂。随着沙田海的填海工程于1970年代起开展，何东楼大宅已不再位于海旁，成为内陆的一部分。至1975年后，何东楼车厂向南扩展，何东楼大宅不久拆卸，改建为车厂及上盖物业银禧花园。大宅的位置为现时的银禧花园2至6座的范围。