Brummel blir sønderknust av dette. Han blir snart venn med prinsen av Wales, og forlater militæret. Men etter hvert faller Brummel i unåde, og det er bare Lady Margery som har noen mulighet til å hjelpe ham.