ジェームズ・ゴールドスミス
三女ジェマイマ(英語版)(1974年生、ユネスコ大使)は、クリケット界のスーパースターで、現在はパキスタンの政治家(2018年より、同国首相)であるイムラン・カーンと離婚後に、人気俳優のヒュー・グラントと婚約するなど(のち解消)、イギリスの社交界や芸能ゴシップ誌を騒がせる美人セレブとして有名な存在である。次男ザカリアス(英語版)(1975年生、環境活動家から保守党の国会議員へ転身)は、シーシェパードへの最大級の寄付金を援助する支援者として知られている。三男ベンジャミン(英語版)(1980年生、ファイナンシャー)はアナベルとの間の子供である。
1980年以降、ジェームズは愛人であるフランス貴族のロール・ブレイとアメリカのニューヨークへ移住する。彼女との間にシャーロット(1983年生)とジェスロ(1987年生)の2子をもうけた。亡くなるまで、ロールを公私ともに妻として扱っていた。