Den opprinnelige planløsning viser store likheter med Malmøhus slott, hvorfor det har vært spekulert i om Kompanihusets byggherre også har vært innblandet i byggingen av slottet. Bygningen består av kjeller, to etasjer og loft. Murene er av tegl og hviler på store natursten. Den østre gavlen og nordre langside er frittstående, mens den vestre gavlen er delvis dekket av et to-etasjes hus. Søndre langside er helt dekket av en høy brannmur. Av tidlig interiør finnes to peiser fra 1600-tallet. Den ene bærer huseiernes initialer for Willum Efvert Dichmand og hustru Karine Pedersdatter, og er satt opp på 1630-tallet. Den andre peisen har to konsollstener med to uthuggede indianerhoder.