Han var sønn av Truid Gregersen Ulfstand (d.1545) og dennes 1. hustru Ida Lagesdatter Brock. Fra faren arvet han Torup, fra moren Barsebæk og Gammel Estrup. Sammen med broren Jens gikk han i 1534 i skole i Malmø. Etter at byens borgere hadde overrumplet Malmøhus, holdt de begge brødrene, sammen med andre adelige barn, ni uger i fangenskap.