杉矶市长，市会议员和当地慈善家出席在比佛利山酒店举行的慈善会上碰巧坐在一起，于是讨论设立一个新的博物馆，筹备委员会同年成立，1983年由美国建筑师法兰克·盖瑞设计的博物馆正式对外开放。1988年由日本建筑师矶崎新设计的博物馆新馆建成开放，2000年位于西好莱坞太平洋设计中心的第三座展馆也建成开放。