Paret levde tilbaketrukket. Den 30. desember 1999 ble de angrepet av en psykisk syk mann, og George Harrison ble stukket omtrent 40 ganger. Olivia Harrison klarte til slutt å slå ned voldsmannen med en lampe. Angrepet kan ha forverret Harrisons kamp mot kreften. George Harrison døde i november 2001 av tilbakevendende kreft.