El museo y su edificio de estilo expresionista deben su existencia a una iniciativa del benefactor local Ludwig Roselius, que encargó a Bernhard Hoetger trazar los planos e instaló allí su colección personal de lienzos.