Schließlich errichtete die Museumsgesellschaft von 1823 bis 1826 ein repräsentatives spätklassizistisches Gebäude in der Münstergasse am Ort des ehemaligen im spätgotischen Stil erbauten Bürgerspital zum Heiligen Geist. Das markante Gebäude – das Museum – besaß einen der schönsten Konzertsäle Freiburgs, oft genutzt zu großen und kleinen Konzerten und Tagungen. Es bildete bis zu seiner Zerstörung beim Bombenangriff auf Freiburg 1944 allein schon durch das allgemein beliebte Café Museum ein Mittelpunkt des gesellschaftlichen Lebens der Stadt.