Paviljongen ble ifølge tradisjonen i familien Wegner oppført på Fossum hovedgård ved Blaafarveværket som en bryllupsgave fra Blaafarveværkets direktør og medeier Benjamin Wegner (1795–1864) til ektefellen Henriette Seyler (1805–75). Benjamin og Henriette ble gift i Nikolaikirken i Hamburg 15. mai 1824; hun tilhørte det kjente bankierdynastiet Berenberg i Hamburg som eide Berenberg Bank og var barnebarn av den kjente sveitsiskfødte teaterlederen Abel Seyler. Hun var også selv en kort periode medeier i familiens bank. Benjamin Wegner flyttet til Norge i 1822 etter å ha kjøpt Blaafarveværket på vegne av et tysk konsortium, som utnevnte ham til direktør for bedriften.