主生涯结束于1564年（永禄7年），因为与织田信长的对立，犬山城终于被信长以武力夺取（犬山城之战），此后，先后由信长的家臣池田恒兴和织田胜长担任城主。本能寺之变以后织田家分裂，犬山城归属于织田信雄，其家臣中川定成为城主。1584年，倒向羽柴秀吉（即丰臣秀吉）的前城主池田恒兴奇袭并占领犬山城，此事成为小牧、长久手之战的导火索之一。战后根据协议，臣从于秀吉的织田信雄重新得到了犬山城，但数年后因故被流放，此后犬山城归属于大名丰臣秀次，由其家臣三好吉房任城主。丰臣政权时代，石川贞清任城主。长久以来有传说在这