Finne fikk etter hvert økonomiske problemer og måtte selge verftet i 1876. Verftet ble drevet videre av med Finnes sønn, Andreas Fredrik Finne, som disponent. I 1913 ble Holmens Verft lagt ut for salg, og i 1914 ble Holmen kjøpt av Risør kommune. Båtbyggerne Martin Jepsen og Jens Olsen inngikk leieavtale med kommunen, og drev verfttradisjonen videre med virksomheten Risør Båtbyggeri.