Hovedfestningen, Oscarsborg, ble anlagt på Søndre Kaholmen i Drøbaksundet i 1848. Det viste seg snart at den alene var utilstrekkelig, og forsvaret ble bygd ut ytterligere med flere batteristillinger på begge sider av fjorden. I 1890-årene ble også Svelvikstrømmen i Drammensfjorden befestet, og dette ble også lagt under Oscarsborg festning.