Han var sønn av lærer, klokker og sparebankkasserer Jakob Bae og hustru Anna Fladvad. Blant hans søsken var stortingsrepresentant og sparebankdirektør Ivar Bae i Kristiansund.