边约1.1公里处的山麓则是多气御所（国司之馆）。陡峭的山嵴中设有两条护城河，而在长120米乘以阔30米的范围内建有东北郭和西南郭，总共两个城郭，其中东北郭三面建有土垒，西南郭位处的地方则高于东北郭，而且四面均由土垒包围。因此，推测城池以西南郭为中心，而在本丸附近则设有钟楼。无论古今，登上雾山城绝非易事，因此北畠氏平时居于多气御所，有需要时才前往雾山城。雾山城的四周建有支城以及保佑城池的经冢屋敷。津市美杉町丹生俣的杉峠和松坂市饭高町赤桶的章路越的隘口处设有砦，而松坂市饭南町上仁柿的柜坂峠和津市美杉町奥