Hans far var gårdbruker og skipsreder, og Peder Rinde gikk på fylkeslandbruksskole og på tegneskole i Skien. Han var handelsmann, reder og trelasthandler 1873–1886. Fra 1886 eide han gården Kalstad i Skåtøy. I 1921 flyttet han til Løvdal i samme kommune.