Finne var gift med Alexander Kiellands kusine Axeliane (kalt «Assa»), hun var eldste datter av Gabriel Schanche Kielland og Anna Henriette, født Schram.