El arquitecto responsable fue Antonio López Aguado, discípulo de Juan de Villanueva, quien realizó las obras por encargo de María Manuela Pignatelli y Gonzaga, viuda del XI duque de Villahermosa, Juan Pablo de Aragón-Azlor.