El primer edificio que ocupó este espacio fue el convento de San Francisco, que fue construido sobre unas casas que regaló a los miembros de la orden de san Francisco la reina Violante, mujer de Alfonso X.