Således var hun den første , og deretter . Hennes onkel hadde både titlene vicomte og baron som ble arvet forskjellig: vicomte ble opphevet og baroniet falt i midlertidig herreløs eller bero mellom hennes mor og hennes fetter, Nathaniel Curzon, 3. baron Scarsdale. Da hennes fetter døde uten en arving i 1856 kunne hun bli baronesse Wentworth som eneste fordringshaver, men hun brukte ikke tittelen. Hun signerte sine brev «A. I. Noel Byron» og i hennes testamente som «Baroness Noel-Byron». Hun var kjent for verden som Lady Byron og for sine venner ved kallenavnet Annabella.