Jane Asher ble i 1981 gift med illustratøren Gerald Scarfe, som hun møtte og fikk fast forhold til allerede i 1971. De har tre barn sammen; Katie (født 1974), Alex (født 1981) og Rory (født 1984).