Bygget i 1828 etter ønske fra den neoklassissistiske maleren François-Xavier Fabre. Museet var stengt på grunn av oppussing, utbygging og reorganisering fra 2003 til 2007. Arbeidene kostet 62,7 millioner euro. Det er 9200 kvadratmeter stort, over 3 etasjer, og regnes som et av de vakreste i Frankrike og resten av Europa. Museets samling består av nærmere 1800 malerier, 4000 tegninger, 1500 graveringer og flere hundre skulpturer. Etter gjenåpningen er utstillingskapasiteten på rundt 800 verker; 300 mer enn før.