竹堑城西门的中山路。1919年（大正八年）2月，将具有北白川宫能久亲王御遗迹地地位的潜园爽吟阁拆除，移到新竹神社社域内重建。1919年，新竹州依照史蹟名胜天然纪念物保存法将位于西门的「潜园址」以及「淡水厅署址」、「新竹孔子庙」、「迎曦门」指定为新竹州史蹟，一同受到保存。1939年，日治时期，因林占梅家族不支持日本殖民地政府，日本人以开路为借口，于1939年拆除潜园大厝。只剩下潜园大门，与八角井等遗址。1945年，二次世界大战后，重建后的爽吟阁随同新竹神社由警备总部新竹区分队、新竹市团管部进驻