Nylander er datter av distriktslege John Gabriel Nylander og fysioterapeut Gerda Nylander, født Winther, og hun er født i Skien. Etter et par år i Telemark og Oslo flyttet familien til fiskeværet Mehamn i etterkrigstidens nedbrente Finnmark. Hun vokste opp der, i Oslo og senere i skogsbygden Snertingdal. Hun var gift med lege Harald Tov Rivrud (1941–1971) fra 1964. Etter at hun ble enke i 1971 ble hun gift på nytt i 1975 med arkitekt Øyvind B. Almaas. Hun er mor til Dag Halvor Nylander og er bonusmor til Jon Almaas.