在土墼埕尾，曰：『下太子宫』；一在长兴里；俱伪时建。」庙址原建于道台台军装仓库前，座东向西，正面临海。《台湾府志》：「昆沙宫在凤山县土墼埕。」《台南市下林建安宫简介》记载昔日村民于农历每月十五日都会到昆沙宫祭拜，当时出入必经因宵禁会在六时关闭的小西门，让村民匆促返回。为了祭祀之便，洪百万发起分香，而建立下林建安宫。
日治时期.日本人后将清朝的军装局改为刑务所，二年后征收庙址，该庙逐被拆除迁入现址。于1899年到1900年重建。1915年调查，地址为下太子街丙1600番地。1