I 1456 reiste Henrik til Midlands, og Margaret lot ham ikke komme tilbake til London. Kongeparet var populære i Midlands, men deres stjerne var fallende i hovedstaden, hvor kjøpmennene var svært misfornøyde med nedgangen i handel og den utbredte lovløsheten i byen. Kongen satte opp sitt hoff i Coventry, og den nye hertugen av Somerset trådte frem som hans nye yndling. Margaret fikk Henrik til å omgjøre utnevnelser gjort av York i regenttiden, mens York selv ble sendt til Irland. Mens lovløshet i hovedstaden og sjørøveri langs sørkysten var voksende problemer, var kongeparets eneste interesse å sikre seg selv. Margaret innførte verneplikt for første gang i Englands historie. I London vendte folket seg til en annen, Richard Neville, jarl av Warwick, som senere ble kjent som «Kongemakeren».