Rife er bosatt i Los Angeles i California. Han datet den engelske skuespillerinnen Kate Beckinsale i 2017 og 2018. Rife nevnte i sin komediespesial (2021) at han har klinisk depresjon og en angstlidelse.