Elizabeth Boleyn valgte side med resten av familien da hennes eldste datter Mary ble forvist i 1535 for å ha rømt og giftet seg med en vanlig borger. Mary hadde opprinnelig forventet støtte fra sin søster ved at Anne hadde vært Marys eneste fortrolige innenfor Boleyn-familien siden 1529, men Anne var rasende over bruddet på etikette og nektet å se henne.