Raffi Hovannisian 20 Kasım 1959'da Fresno, Kaliforniya'da doğdu. 'ndan Babası Ermeni Soykırımı uzmanı Richard Hovannisian, annesi ise Vartiter Hovannisian (née Kotcholosian). Raffi Hovannisian 1977'de Los Angeles'taki Palisades Charter Lisesi'nden mezun oldu. Hovannisian gençlik yıllarında Daşnak'ın gençlik örgütü olan Ermeni Gençlik Federasyonu’nun California bölümünün bir üyesiydi.