主教亚历山德罗·斯福尔扎遇到经济困难，当时这个半郊区的地点在1625年由巴贝里尼家族的马费奥·巴贝里尼购买，后来他登上了教宗宝座，即乌尔班八世。 三个伟大的建筑师创造了这座宫殿，每个都为这座建筑贡献了自己的风格和特色。卡洛·马代尔诺，当时正在延伸圣伯多禄大殿的走道，受命修建带花园的巨大别墅。 1627年开始，马代尔诺的远房表亲博罗米尼成为他的助手。当马代尔诺于1629年去世后，博罗米尼和济安·贝尼尼两位建筑师一起工作，于1633年完成工程。卡斯特罗战争和乌尔班八世去世后，这座宫殿被英诺森十世没收