一个富裕贵族，之后多利亚家族又将宫殿转手给家族旁支，统治图尔西的多利亚-图尔西系，这是宫殿名称的由来，而在1820年时萨伏依家族由多利亚-图尔西家族手中将宫殿购买下来，并在1838年委託耶稣会管理，图尔西宫被短暂的当作修道院直到1848年，这时正值1848年革命，市民赶走了耶稣会修士，并选定图尔西宫为新的市政厅所在。1874年，布里尼奥莱-萨莱家族的末代继承人女公爵决定将红宫包含里面的藏品、装饰全数捐赠给热那亚市政府，并表明政府需在宫殿中设立画廊，1888年玛丽亚去世，在遗嘱中她将白宫同样也捐赠给了市政