En 1549 la Real Chancillería de Valladolid da permiso para levantar el citado palacio, con la condición de que lo haga al otro lado del río.