Etter at menigheten kjøpte kirka i 1755 ble bygningen godt vedlikeholdt, og så seint som i 1812 ble den erklært å være i god stand. Tettstedet Svelvik var imidlertid i sterk vekst, og i 1845 fikk stedet status som ladested. Folketallet var økende, og den gamle kirka var ikke stor nok. I 1847 drøfta herredsstyret i Strømm å utvide den gamle kirka, men flertallet ville i stedet rive det gamle, og bygge ei helt ny, og mer prangende kirke. Tillatelse til nybygging ble gitt ved kgl. res. av 10. desember 1855, og rivinga av den gamle kirka var fullført da grunnarbeidene til den nye kirka begynte 19. juni 1856. Noe av steinen fra den gamle kirka ble brukt som grunnmur for den nye, og noe av steinen ble også brukt til å reparere kirkegårdsmuren.