永禄6年(1563年)上杉輝虎に私市城を攻められ落城した。