Ésta fue demolida por Carlos I para edificar el actual palacio, que fue ampliándose y reformándose en siglos posteriores.