驻守约三年后撤退。
受累除封.至文禄4年（1595年），服部一忠折返日本后，因为上司秀次受到秀吉疏远，秀次被放逐至高野山，一忠亦难免受到牵连，被中止在聚乐第的政务，最终更遭罢去所有领地，并移交到越后予上杉景胜看管，不久之后就受命切腹自尽，其城主生涯只有约3年半时间，而松坂城则改由古田重胜统领。此后，一忠的遗孤、次男服部胜长，辗转被大崎长行认领为养子，出仕德川家成为纪州藩士。