1894 gründete der Confiseur Henry Schwermer, der zuvor im Café Kranzler in Berlin gelernt hatte, das Unternehmen in Königsberg in Ostpreußen. Bald spezialisierte sich der Kaffeehausbetrieb mit Confiserie auf die Herstellung von Königsberger Marzipan, Pralinen und Baumkuchen. Für seine Baumkuchen-Kreationen erhielt Henry Schwermer auf der Pariser Weltausstellung im Jahre 1900 die Goldmedaille.