Han var sønn av ordfører i Trondhjem Jacob Roll, bror av justisminister og høyesterettsdommer Ferdinand Roll og av industrimannen Oluf Nicolai Roll, og onkel til forfatteren Nini Roll Anker. Han var gift med Anna Johanna Parelius, som var datter av Jacob von der Lippe Parelius d.y. De var foreldre til idrettsfunksjonærene Emil Oluf Roll og Karl Roll. Han var dermed også tippoldefar til visesanger Ole Paus.