ウィルズ・ヒル (初代ダウンシャー侯爵)
1768年1月からは第一通商卿に復職するとともに植民地大臣に就任し、以降第3代グラフトン公爵オーガスタス・フィッツロイ内閣とノース卿フレデリック・ノース内閣と三代の内閣にわたって同職に在職し続けた。植民地大臣としてアメリカ植民地に強硬姿勢をとり、アメリカ植民地との関係を悪化させた。特に1768年2月にマサチューセッツ議会が採択した各植民地一致してタウンゼンド諸法に反対しようという内容のマサチューセッツ回状を警戒し、総督フランシス・バーナードに対してマサチューセッツ議会にマサチューセッツ回状を撤回させるよう指示し、また他の総督にも植民地議会でマサチューセッツ回状を討議させないよう命令を発した。これによりマサチューセッツ回状を討議した植民地議会は次々と停会の憂き目にあった。また同年6月にはボストンで関税委員が襲撃される事件があったが、彼はそれを理由に10月に正規軍四個連隊を派遣した。こうした彼の対植民地強硬姿勢がアメリカ独立戦争への機運を高めることになった。
1772年8月にはオハイオ開拓計画の断念に反対して植民地大臣を辞した。この退任に際してグレートブリテン貴族ヒルズバラ伯爵に叙された。
下野後もアメリカ植民地に対する強硬姿勢をとり続けた。1779年から1782年にかけてはノース卿内閣の南部国務大臣を務めた。
1789年にはアイルランド貴族爵位ダウンシャー侯爵に叙せられたが、1793年10月7日に死去した。爵位は生存している唯一の男子アーサー・ヒル(英語版)が継承した。
1747年に第19代リンスター公爵ロバート・フィッツジェラルドの娘マーガレッタと結婚し、彼女との間に以下の2男2女を儲けた。
第1子(長女)エミリー・メアリー・ヒル (1750-1835) 初代ソールズベリー侯爵ジェイムズ・セシルと結婚
第2子(長男)マーカス・ヒル (1752-1756) 儀礼称号でキルワーリン子爵。夭折
第3子(次男)アーサー・ヒル(英語版) (1753-1801) 第2代ダウンシャー侯爵位を継承。政治家
第4子(次女)シャーロット・ヒル (1754-1804) 初代タルボット伯爵ジョン・チェットウィンド=タルボットと結婚
1768年に第4代ストーウェル男爵(英語版)エドワード・ストーウェルの娘メアリー・ストーウェルと再婚。彼女との間には子供はない。