941年6月，日本军舰侵袭披山岛，并在岛上抢作恶，岛上人民伤亡惨重。中华人民共和国成立后，国军残部退居披山。1950年7月11日，解放军华东军区海军5艘炮艇、4艘登陆艇发动突击，浙江省黄岩县金清港起航，直奔披山岛。7月12日攻占披山岛。当时由于美国海军第七舰队侵驻台湾海峡，国军转退为进，同年7月再次攻占披山岛。1953年，国军在岛上成立玉环县政府。1955年2月9日，岛内驻军及居民900余人随大陈岛撤退迁往台湾。1955年2月13日，中国人民解放军陆、海、空军协同作战，攻佔包括披山岛在内的多个岛屿，共军至此