Åsa Rytter Evensen var datter av Sverre Rytter (1912–1980) og Marianne von Krogh (1913–1993). Hun giftet seg i 1966 med lege Stein A. Evensen.