Para su construcción se utilizó parte de un solar propiedad del Conde de Orgaz situado en las cercanías de la "calle ancha de la Puerta del Sol" (así se denominaba a la Puerta), que lo cedió a la Orden a cambio de una capilla.