西階城
城取りは、北流する五ヶ瀬川と南流する大瀬川の2本に五ヶ瀬川が分流する分岐点の丘陵を選地している。金堂ヶ池周辺の「本城」、天正6年(1578年)の大友合戦直前に縣土持氏の武道指南役となった伊賀系忍びの系統という竜仙寺のある「東の城」、県立高校生徒寮の西に現在はすっかり公園化された「南の城」の3郭で構成され、すぐ東を走る当時の幹線「川辺街道」に睨みを利かせていた。城の北、旧延岡西高校の西にあって現在サンヒルズ野地団地が造成された丘陵も「北の城」であったといわれているが、開発の名の下に完全に破壊されてしまった。これらを総合すると、城域は従来曲輪I-IV程度にしか認識されていなかったが、南北約600メートル、東西約400メートルに拡大・展開することとなった。
城の周辺部はかつては低湿地に囲まれていたようで、「本城」の北側には河跡湖と考えられる沼池があり、「東の城」の北東の団地は膝までぬかるむ迫田であったという。『有馬家中延岡城下屋敷付絵図』でもこの周辺には現存しない河川や河跡湖と考えられる沼池が点在しており、金堂ヶ池もそのような河跡湖の1つであると考えられる。五ヶ瀬川と大瀬川そのものも堀としての防御性を持っている。
「本城」の最高所の標高は61.7メートル、比高約50メートル。曲輪I・IIIに立つと、西から流れて2キロメートル北の松尾城方面へ流れる五ヶ瀬川が一望のもとにあり、南端の曲輪Dからは大瀬川をはさんで2キロメートル東の井上城を見渡すことができる。