Bildt-slekten antas å ha immigrert til Danmark fra Skottland på 1400-tallet. I reformasjonstiden reiste så en av ætten, Daniel Bildt, som så mange danske adelsmenn, til Norge for å søke lykken. Og Daniel og hans etterkommere ble da blant de heldigere, Daniel selv ble gift med Blancheflor Lunge, datter av Vincent Lunge og datterdatter av fru Inger til Østraat - den mest innflytelsesrike kvinne i Norge på denne tiden. Daniel blir eier av Nes herregård ved Fredriksstad, og han hadde flere forleninger i Smaalenene. Familien samlet etter hvert betydelig jordegods øst for Oslofjorden, som av storgårder foruten Nes, omfattet Hafslund og Torsø. Sønnen Otto Bildt hadde ti barn. Den niende av dem var Vincents Bildt.