三河物语》等史书记载，1535年（天文四年），守山城为织田信秀的弟弟织田信光（的女婿）的居城。在三河国的松平清康进军尾张时，为打倒自己的兄长信秀，信光与松平军内应，让出居城守山城予清康。结果在清康的军势布阵于守山之时，清康突然被家臣阿部正丰暗杀，史称“守山崩”。据《信长公记》记载，1555年（弘治元年），织田信光与织田信秀之子织田信长消灭了清洲织田氏(织田大和守家)的织田信友后，信光迁至，织田信光将守山城让给弟弟居住。但是很快就因为家臣洲贺才藏杀害了信长的弟弟信田秀孝而出奔。城下被织田信长之弟、秀孝之兄