Como consecuencia de las constantes luchas con otras familias rivales, la edificación pasa de una mano a otra, quedando como testimonio dos pequeños escudos de armas pertenecientes a la familia Velasco, y que en la actualidad se pueden contemplar sobre el vano de dos ventanales.