Tras varias vicisitudes la torre es comprada por Pedro Pérez de Lazarraga y doña Teresa de Berganzos, fortificándola y reedificándola.