En los últimos años del siglo , Antonio Ortiz Vega mandó construir un palacio de grandes proporciones, con amplio jardín, cuyo perímetro se extendía desde la calle del Duque de la Victoria (antigua Olleros) hasta la nueva vía de Menéndez y Pelayo (antes Mendizábal); en 1900, dicho palacio pasó a ser la sede del Banco Castellano, y tras ser este absorbido por el Banco de Bilbao, actualmente sigue perteneciendo a su sucesor, el BBVA.