I 1643 kom Vincens Bildt (1606-1658) og tok over embete, han og hustruen, Else Andersdatter Friis (1611-1677), ble boende på Sem i tre år. Han hadde tidligere vært lensherre i Brunla len, 1637-43, og ble etter Eker len lensherre for Tunsberg len, 1646-58. miniatyr|Hannibal Sehested|253x253pk Hans Lange (?-1654), som var Nils Langes eldre bror, overtok embete i 1646 og han og hustruen Dorte Jakobsdatter Lykke (?-1647) flyttet inn på Sem. Dorte døde året etter og samme år mistet Hans Lange lenet.