4代伯爵はイングランド庶民院との両方で議員を務めたほか、、ハンプシャー統監を歴任し、5代伯爵はを務めたが、5代伯爵の息子ヘンリーが父に先立って死去したため、男系男子しか継承できないフィッツウォルター子爵とサセックス伯爵は初代伯爵の三男ハンフリーの息子が、女系継承ができるフィッツウォルター男爵は2代伯爵の娘フランシスの息子サー・ヘンリー・マイルドメイが継承した。