終戦直後の時期は、美術館の状況は最悪であった。1947年から1948年にかけては、アメリカ軍の兵士が展示室を宿泊場所として使った。戦災のため、建物は美術品の展示には使用できない状態であり、その中でも1946年、他の場所でコレクションの展覧会が行われた。1948年、芸術協会125周年を祝って、2階の10室が一般公開を再開した。修復を重ね、2階の全ての部屋が使用可能になったのが1951年であった。1961年、大規模な修復工事が行われ、階段とエントランスが近代的な姿となった。
美術館は、第2次世界大戦の勃発後間もなく閉鎖され、コレクションは地下室に運ばれた。1942年9月5日の夜、空襲で中央階段と2階の6室が破壊された。この時、大きさの都合上運ぶことができなかったエマヌエル・ロイツェの『デラウェア川を渡るワシントン』が焼失した。今日、同作品の第2バージョンがニューヨークのメトロポリタン美術館に展示されている。この被害があってから、コレクションの大半は、ブレーメン州立銀行と北ドイツ信用銀行の地下の防護エリアに運び込まれた。空襲の激化に伴い、市長は、コレクションを市外の安全な場所に保管することを決定した。1943年から搬出作業が行われ、絵画、素描、版画は、KyritzのKarnzow城、SalzwedelのNeumühle城、ハーメルンのSchwöbber城の3か所に分散され、彫刻はビュッケブルク城に運ばれた。Karnzow城は、ベルリンに近いブランデンブルク辺境伯領にあり、絵画50点、素描1715点、版画3000点を保管した。この城は1945年5月、ソ連軍によって接収され、その撤収時に略奪された。また、ソ連軍は保管場所を開放したまま立ち去ったため、一般人が立ち入ることができる状態となってしまった。ベルリン市評議会長Kurt Reuttiは、懸命の捜索とブラック・マーケットからの買戻しによって、何点かを取り戻すことに成功した。それでも、ブレーメン美術館の損失は、プロイセン文化遺産基金とドレスデン美術コレクションの損失と並んで、ドイツの美術館の戦時被害の中で最大級のものであった。ブレーメン美術館収蔵作品のうち1500点以上が現在でも行方不明である。
拡張の必要が高まり、1898年、コンペティションの結果、建築家Albert Dunkelが内装に、Eduard Gildemeisterがファサードに選ばれた。装飾は著名な彫刻家Georg RoemerとGeorg Wrbaが選ばれた。1899年に着工し、1902年2月15日に完成式典が開かれた。ファサードは1904年まで工事が続いた。資金は、基金とブレーメンの実業家から拠出された。
芸術協会では、コレクションを展示するための美術館の建設を計画し、コンペティションの結果、若手建築家Lueder Rutenbergが選ばれた。旧市街の近くのもとゴミ集積場だった土地に、1847年に着工し、1849年完成した。中央にアーチのある2階建ての建物であった。コレクションの大半は芸術協会の所有であったが、建物は市の所有であった。入口には、彫刻家Adolph Steinhäuserが制作した、ラファエロ・サンティ、ミケランジェロ・ブオナローティ、アルブレヒト・デューラー、ピーテル・パウル・ルーベンスという4巨匠の石像が立てられた。
1823年、ブレーメンで、34人の実業家が、美的感覚の普及を掲げて、芸術協会を発足させた。こうした芸術協会としては、ドイツでは最も古いものに属する。当初は、参加者限定の美術展覧会を行っており、入場券の売上げや寄付をもとに作品の取得を進めた。発足10年後の時点で、油彩画13点、素描585点、版画3917点を有していた。油彩画の多くはオールド・マスターによるもので、マソリーノの有名な『マドンナ』のほか、ヤン・ファン・ホーイェンやPieter Wouwermanといった17世紀ドイツの画家の一連の作品が含まれていた。1843年以降、ハノーファー、リューベック、グライフスヴァルト、ロストック、シュトゥットガルトといった近隣都市の芸術協会と共同して大規模の公開展覧会を開催した。1846年までには、協会の会員は575人にまで増えていた。ブレーメン芸術協会は、現在に至るまでブレーメン美術館の単独所有者であり、現在8000人以上の会員を擁する。資金は、基金、寄付、遺贈、ブレーメン市からの補助金でまかなわれている。
『新撰姓氏録』によれば、紀伊国造の流れをくむ紀氏と同族で、天道根命の後裔とされ、旧姓は楢原造（ならはらのみやつこ）、次いで伊蘇志臣（いそしのおみ）。同時に、天道根命は神魂神の5世の孫で、伊蘇氏（伊蘇志）・楢原氏・滋野氏の祖と伝わる。天平勝宝2年（750年）に駿河守として駿河国へ赴任した一族の楢原東人が駿河国庵原郡田子の浦で黄金を発見し、これを朝廷に献上したことからその功を賞した孝謙天皇が「かいがいしく勤める者」という意味で伊蘇志臣（勤臣とも作る）と賜姓し（「いそし」は「勤（いそし）む」の「いそし」）、延暦17年（798年）に伊蘇志家訳が滋野宿祢と賜姓されて以後、宿祢姓の滋野氏となり、さらに弘仁14年（823年）には家訳とその子の貞主が滋野朝臣姓を賜っている。なお、「滋野」の氏名（うじな）の意味について、未詳ながら草木の茂る野にちなんで一族の繁栄を願った美称ではないかとされる。『姓氏録』には同族として上記紀氏の他、大村（右京、和泉国）、大家（大宅）（右京）、大坂、伊蘇志（以上大和国）、川瀬、直尻、高野（以上和泉国）の諸氏を掲げいる。紀伊国には同じく天道根命を祖神とする紀伊国造家や名草氏がおり、和泉国に著名な物部氏（饒速日命の後裔）とは別系統と思われる物部氏（姓は連）もいた。