Den militære forlægning kom til slottet i 1717, hvor et kavaleriregiment overtog ladegården, og de gamle stalde blev ombygget til kavaleriets heste. I 1728 efter branden i København rømmedes nogle af Københavns kaserner til de husvilde, hvorefter nogle af Livgardens regimenter blev forlagt til Jægersborg.