Kirkestedet i Svelvik ligger ved Svelvikstrømmen, hvor det fra gammelt av har vært et fergested. I seilskutetiden vokste det også fram et lossested og vinterhavn her, da den indre delen av Drammensfjorden gjerne var islagt vinterstid.