Lady Byron døde av brystkreft den 16. mai 1860, åtte år etter sin datter og en dag før sin 68 års fødselsdag. Hun ble gravlagt i gravlunden Kensal Green Cemetery ved Kensal Green i London. Før hennes død hadde hun delt hennes fortelling om sitt ekteskap med Byron til Harriet Beecher Stowe som utga denne opptegnelsen i 1869, noe som grusla Lord Byrons rykte og omdømme. Dette var første gang mistanken om et incestiøst forhold til hans halvsøster ble satt på trykk.