Sonnentempler
Vuarnet war mit der (ehemaligen) Skifahrerin Edith Bonlieu, der Schwester des späteren Riesenslalom-Olympiasiegers François Bonlieu, verheiratet, mit der er drei Kinder hatte. Seine Frau und Sohn Patrick kamen im Dezember 1995 bei einem Massaker der Sonnentempler-Sekte ums Leben.