Gyldenløve bodde på Frederiksborg Slot, men måtte flytte til Kronborg slott i 1640, da den gamle kommandanten døde. På sin vei til Kronborg besøkte Gyldenløve kroer og bordeller, som han nærmest «utplyndret» for kvinner, mat og drikke. Kong Christian IV mottok ti dager etter en regning på nesten to tusen rigsdaler som Gyldenløve skyldte en kroeier.