Das jakobinische Herrenhaus von Hartwell in der Nähe von Aylesbury war die Residenz von Ludwig XVIII. während seines Exils (1810–1814). Die Stadt erhielt auch in den 1960er Jahren internationale Aufmerksamkeit, als die Täter des großen Eisenbahnraubs von 1963 in Aylesbury verurteilt wurden.