ディープフェイク（）とは、「ディープラーニング（深層学習）」と「フェイク（偽物）」を組み合わせた造語。詐欺などを目的に悪意を持って本物のように合成された偽画像、偽音声、偽映像を指す。

この用語は人工知能を応用したメディア合成技術全般を指して使用されることもあるが、一般的には悪意を持って使われた場合にのみディープフェイクと呼び、そうでない場合にはとして区別する。

ディープフェイクによるフェイクニュース、デマ、プロパガンダは、民主的な意思決定を妨げ、民主主義の機能や規範を損なうと指摘されており、規制を求める意見が増えている。ほかにも詐欺、いじめ、児童ポルノ、フェイクポルノ、リベンジポルノなどへの利用が現実の脅威となっている。

技術的には「敵対的生成ネットワーク（GANs）」を使用して、既存の画像や映像を、ある意図に沿った別の画像または映像に重ね合わせて（スーパーインポーズ）結合する手法や、生成的人工知能を用いたテキストなどのプロンプトから生成する手法などがある。

 問題点 

 信頼性の喪失 

写真の偽造は歴史上数多く存在していたが、精巧な偽造は手間がかかり、動画の偽造はより困難だった。しかし、ディープフェイク技術の進化により偽造のコストが低下し、さらに偽の動画を作成することが可能となってきている。

ディープフェイクは偽情報の拡散だけでなく、標的が絞られた名誉毀損、なりすまし、デマやリベンジポルノなどの犯罪応用がされている。ディープフェイクはデータに対する疑念を生み出し、社会的な課題の特定、問題の議論、決定、政治的意志の行使による問題の解決など、社会における民主的機能を妨害すると指摘されている。

また、ディープフェイクは真偽の判断の難しいメディアや信念に影響を与えるのに十分に説得力のあるメディアを作成することで、世論に悪影響を与えることができる。

 詐欺・なりすまし 
著名人や政治家の肖像を用いディープフェイクを作成して投資詐欺、金融詐欺の嘘の信頼性を向上させることや、声を含めた個人情報がフィッシング、特殊詐欺などの巧妙化に悪用されている。 

は、詐欺などに悪用されている。2023年の時点では、数秒から1分ほどの音声データから個人の声を複製できるディープフェイク技術と、テキスト生成ツールの組み合わせにより、友人や家族のデジタルクローンを作成して被害者を狙うなりすまし詐欺を自動化することが可能になった。 

 フェイクポルノ 
有名人の肖像を悪用してフェイクポルノ動画が作成されることがある。エマ・ワトソン、スカーレット・ヨハンソン、テイラー・スウィフトなど女性有名人がフェイクポルノ被害に遭っている。また、ディープフェイク技術により、既存の児童ポルノから新たな児童性的虐待コンテンツ（CSAM）を作成したり、存在しないCSAMを作成できるようになった。ディープフェイクで作成された児童ポルノは名誉毀損、グルーミング、恐喝、いじめに応用され、子供に現実的な悪影響を与えている。

 冤罪、脅迫 

ディープフェイクは、冤罪を生み出すために使用される可能性がある。合衆国議会調査局の報告書は、スパイ行為等を目的に政治家や機密情報にアクセスできる人物を脅迫するためにディープフェイクが使用される可能性があると警告した。

 プロパガンダ、フェイクニュース 

ディープフェイクは、オンラインを含むメディアで架空のデータやメディアを用いたフェイクニュースや架空の人物（ソックパペット）を作成するために使用され、政治的な虚偽報道や悪意のあるでっち上げを作成するためにも使用される 。選挙運動で対立候補を陥れるネガティブ・キャンペーン、政権政党への批判、戦時下における扇動などの工作にも使われている。

 事例 

 詐欺・なりすまし 
 2019年、英国のエネルギー企業のCEOが音声ディープフェイク技術により同社の親会社の最高経営責任者の声になりすました人物から電話を受け、ハンガリーのある銀行口座に22万ユーロを送金した。
 2023年、日本テレビは同局で製作・放送されているニュース番組や同局所属のアナウンサーを生成AIで加工して投資を呼びかける偽動画（なりすまし広告）が確認されているとして、同局は同動画の制作に関与しておらず、投資の推奨も行っていないことを表明する事態になった。
 2024年、香港でディープフェイクを使った詐欺事件が発生した。ディープフェイクを使って上司および複数の会社員になりすまし、従業員に送金を要求することに成功した。
 2023年ごろから著名人（森永卓郎、堀江貴文など）が主催していると偽り架空のインターネット投資講座の広告を打ち出し、ディープフェイクによる著名人の偽音声で投資アプリに誘導して振り込まれた金銭を横領する詐欺が増えた。この投資アプリも表示上儲かっているように見せるだけで実際には投資が行われていないと見られる。
 テイラー・スウィフト、トム・ハンクス、オプラ・ウィンフリー、イーロン・マスクなどの有名人が、提示した金額より大幅に高額な料金を請求するダイエットグミ、偽のiPhoneのプレゼント企画、詐欺的な情報商材、投資ネタ、および暗号通貨の儲け話などを推奨しているかのように見せるフェイク動画が詐欺広告としてYouTube、Facebook、TikTokの広告に掲載されていた。これらの有名人を用いたディープフェイクのひとつでは、数千のビデオが作成され1億9500万回以上視聴されているなど広く拡散された。
 セキュリティソフトメーカーのマカフィーが2023年5月15日に発表した調査では、調査対象の7,000 人のうち4人に1人の割合で自分もしくは知人が被害に遭遇した経験があるとし、被害者の77 %が騙されて金銭を支払ったと回答した。

 フェイクポルノ 
 2024年1月頃には歌手のテイラー・スウィフトが性的なディープフェイクを画像生成AIで作成されてソーシャルメディア上で拡散する事案があった。この画像はマイクロソフトの画像生成AI「マイクロソフト・デザイナー」により作成された疑いがある。
 サイバーセキュリティ会社「DeepTrace」の2019年10月の調査によると、過去7か月で1万4,678件のディープフェイク動画が確認され、1年で倍増しており、その96 %がポルノ動画だった。

 プロパガンダ 

 アルゼンチン大統領のマウリシオ・マクリの顔はアドルフ・ヒトラーの顔に、そしてアンゲラ・メルケルの顔はドナルド・トランプの顔に置き換えられた。
 トランプが中国を訪問していた2017年11月に中国企業のは流暢な中国語を話して自社とAIを褒めたたえるトランプのディープフェイクを披露して波紋を呼んだ。
 2018年4月、ジョーダン・ピールとは、ディープフェイクの危険性に関する公共広告として、バラク・オバマを使ったディープフェイクを作成した。
 2019年1月、KCPQは、オーバルオフィス（大統領執務室）におけるトランプの演説のディープフェイクを放映し、彼の外観と肌の色をあざけった。
 2020年9月29日、超党派の政治団体RepresentUsが作成した北朝鮮の指導者金正恩とロシアのウラジーミル・プーチン大統領のディープフェイクがYouTubeにアップロードされた。金とプーチンのディープフェイクは、外国勢力による米国選挙への干渉は米国の民主主義に有害であるという考えを伝えるコマーシャルとして一般に放映されることを意図していた。このコマーシャルはまた、アメリカ人に民主主義がいかに脆いものであるか、またメディアやニュースが信頼性に関係なく国の進路にいかに大きな影響を与える可能性があるかを認識させ、ショックを与えることを目的としていた。コマーシャルには映像が本物ではないことを説明するコメントが含まれていたが、混乱を恐れた結果、最終的に放送されなかった。

 2022年3月16日、2022年のロシアによるウクライナ侵攻の最中、ウクライナ大統領のヴォロディミル・ゼレンスキーが兵士らに武器を捨てて降伏するよう指示しているかのような様子を描いた1分間のディープフェイク動画がソーシャルメディア上で拡散された。ロシアのメディア企業がそれを拡散したが、フェイクが暴かれた後に削除された。ツイッターは、フェイクであることを明示したツイートで動画を投稿することを許可したが、騙す目的で投稿された場合は削除するとの方針を示した。ハッカーらはウクライナのテレビ局のニューススクロールにゼレンスキーが首都キーウから逃亡したとする虚偽の情報を挿入し、そのビデオは同局のウェブサイトに一時的に掲載された。ディープフェイクを作成した犯人はすぐには明らかにならなかったが、ゼレンスキーは自身の動画で「武器を放棄するつもりはない。勝利するまでは」と述べた。
 2022年から始まったロシアのウクライナ侵攻では、当初からディープフェイクとみられる複数の映像が拡散されている 

 2023年、AI技術を駆使しニュース番組の画面に見せかけた上で当時の日本の内閣総理大臣岸田文雄が卑猥な言葉を発してるように見せたディープフェイク動画がSNSで拡散された。
 2023年6月5日、謎の情報源により複数のラジオおよびテレビでプーチン大統領のディープフェイクが放送された。この映像では、プーチン大統領がロシアの侵攻を発表し、軍の総動員を呼びかける演説を行っているように見せていた。
 2023年3月、匿名の人物がMidjourneyを利用して、バレンシアガの白いジャケットを着たローマ教皇フランシスコの偽画像を作成した。この画像は急速に広まり、2000万回以上の閲覧数を記録した。作家のライアン・ブロデリックはこれを「初の本格的な大衆レベルのAI誤報事件」と呼んだ。 オンラインメディアのSlateから相談を受けた専門家は、この画像は洗練されていないとして、「5年前ならPhotoshopで作成できたかもしれない」と述べた。

 架空の人物をでっち上げたプロパガンダ 

オリバー・テイラーという架空の人物は、新聞に意見記事を投稿し、オンラインメディアでイギリスのある法学者とその妻を「テロリストの同調者」として攻撃する活動を行った。この学者は2018年、イスラエルのスパイウェア企業NSO Groupの電話ハッキング技術の被害者であるとされるメキシコ人を代表して、NSO Groupに対してイスラエルで訴訟を起こし国際的な注目を集めた。ロイターはオリバー・テイラーに関するわずかな記録しか見つけられず、「彼の」大学には所属を示す記録が存在しなかった。プロフィール写真がディープフェイクであることについて多くの専門家の意見が一致した。新聞社は、同人物によるとされる記事を撤回したり、ウェブサイトから削除した。このような手法が偽情報の新たな戦場となることが懸念されている。
 ソーシャルネットワーク上の存在しない人物のディープフェイクは、イスラエル右派プロパガンダの一環として展開されている。 フェイスブックのページ「シオニストの春」には、その架空の人物がいかにして左派から右派に転向したのかを説明すると称する「証言」とともに、実在しない人物の写真が掲載されており、そのページにはイスラエルのベンヤミン・ネタニヤフ首相とその息子、そして他のイスラエル右翼筋からの情報が多数掲載されていた。写真の多くは、実在の人物の写真からデータを取得して、存在しない人物のリアルな合成画像を生成するディープフェイクによるものと見られる。 「証言」の多くでは、右派を支持する理由として、ネタニヤフに対する暴力への扇動を知ったショックが挙げられている。イスラエルの右派メディアは、実在しない人物であるにもかかわらず、これらの「証言」を放送した。他のフェイスブックの架空のプロフィールには、右派の政治家に対する攻撃を促しているとも見れる内容が含まれており、これに反応してネタニヤフは首相殺害計画があったと訴えた。

 風刺 
ハリウッドの名作映画の俳優を別人に入れ替える際にディープフェイクを用いることで、笑いを取るものがある。コントローラーシフトフェイスというYouTuberは映画『ホーム・アローン』の主演であるマコーレ・カルキンをシルバー・スタローンに入れ替えた動画を作成したり、ダープフェイクスというYouTuberが映画『サウンド・オブ・ミュージック』から『ファイト・クラブ』まで出演者の顔をニコラス・ケイジの顔に替えた映画を集めた「ニコラス・ケイジ・メガ・ミックス」を作成した。