山顶一所已弃置的疗养院之地皮，改建成避暑别墅，即总督山顶别墅。而别墅曾于1892年及1902年进行翻修。但在1930年代起由于别墅交通不便，已没有港督居住。别墅更于日治时期香港保衞战遭受战火损毁，最后在1946年拆卸。原别墅之守卫室及基石则被保留，其中守卫室更于1995年被列为香港法定古蹟。原址辟作山顶公园。1950年，港英政府将别墅改建成公园，山顶公园正式启用。1978年，政府派出专家寻回别墅的石碑，并放置于公园东北面。而山顶公园凉亭于1979年加建，前身为别墅遗址，凉亭前后都放有一对石狮子；不少电影