1933年瞭望臺再被賣畀助理律政司傅瑞憲（John Alexander Fraser）日治期間，傅瑞憲被日軍囚禁重死喺赤柱拘留營裏面，而瞭望臺就俾日軍徵用嚟嚴刑拷問啲囚犯。