陷入财务困难，因而在1612年将这座当时名为「大小伯明顿」（）的庄园卖给。伍斯特伯爵刚买下的伯明顿庄园时，庄园是一幢不规则的大型庭院建筑。伍斯特伯爵将庄园分配给他最小的儿子汤玛士·索美塞特，汤姆斯在1620年代末期主持改建伯明顿庄园，并设置了新的T型山墙。1655年，汤姆斯的女儿伊丽莎白将庄园遗留给他的姪子勋爵，也就是后来的第一代博福特公爵。亨利·赫伯特的父亲和祖父在英国内战时都是保皇党，索美塞特家族的房地产因而遭英国议会查禁；他在1650年成为英国下议院议员，并结识奥立佛·克伦威尔，到1655年继承伯