Forholdet ble brutt i 1523 da Henry Percys far nektet å støtte forlovelsen. En romantisk myte har påstått at forholdet ble brutt av kardinal Thomas Wolsey, kong Henriks førsteminister, ettersom kongen begjærte Anne selv. Det er ikke mulig å avgjøre dette, og historikerne er delt i synet på dette spørsmålet.