Han vokste opp i en adventistfamilie i Sandefjord og gikk Tyrifjord videregående skole i Buskerud. Rytman er utdannet innen markedskommunikasjon fra BI i Drammen (2000–2005). Han har blant annet vært selger, gründer, vekter og partifunksjonær. Høsten 2005 var han med på å etablere Gründerforeningen, hvor han har vært styreleder.