则位于基地高度离水面约30公尺的小山上，东侧、西侧及南侧皆紧临陡峭的悬崖，北侧连接鼓山，形成背面靠山、三面环水的形势。领事馆与领事官邸之间建有石阶相通。1895年甲午战争后，台湾进入日治时期，1901年，英国政府进行领事官邸整修，外墙红砖敷以水泥，以避免空气中海盐成分对砖面的侵蚀。1908年，日本积极建设高雄港，哨船头及旗后山均被划入港口要塞之范围，英国因此放弃打狗领事建物的使用权。1925年，由日人接收使用，领事馆改作为高雄水产试验所，领事官邸改作高雄海洋观测所。日治时期结束后又逢多次风灾，处处断垣残壁。