El palacio fue construido en 1765 por Ventura Rodríguez, uno de los arquitectos más prolíficos y destacados del siglo XVIII español, quien concibió así una de las obras más importantes del neoclasicismo madrileño.