ブラウンロー・カスト (初代ブラウンロー男爵)
第3代準男爵サー・ジョン・カストと妻エゼルドレッド(Etheldred、1775年1月27日没、旧姓ペイン(Paine)、トマス・ペインの娘)の息子として、1744年12月5日にロンドンのノーフォーク・ストリート(英語版)で生まれた。1758年から1760年までイートン・カレッジで教育を受けた後、1762年10月28日にケンブリッジ大学コーパス・クリスティ・カレッジ(英語版)に入学、1765年にM.A.の学位を修得した。1773年7月7日、オックスフォード大学よりD.C.L.(英語版)の学位を授与された。
1768年イギリス総選挙でイルチェスター選挙区(英語版)から出馬して当選した。このとき、投票者がほぼ全員一致でカストに投票しており、1人だけはほかの人に投票しようとしたもののすぐに撤回したという。また、ラトランド公爵家と1議席ずつ掌握していたグランサム選挙区(英語版)では1765年末に成人するとグランサムの自由市民(freeman)になり、1766年1月にグランサムの地方自治体や自由市民を盛大な晩餐会に招き、1768年1月にグランビー侯爵ジョン・マナーズ(英語版)(ラトランド公爵位の推定相続人)とともに選挙活動を行った。