Le château est à nouveau assiégé pendant la Guerre de Livonie de 1558-1583; il est d'abord pris par l'alliance des Polonais et des Lituaniens en 1559 et pendant une courte période par les Russes en 1577. Il était encore debout en 1633, mais n'était plus qu'une ruine en 1680, sa raison d'être ayant disparu. Aujourd'hui il reste les fondations et les ruines d'un rempart.