(57)【要約】  本開示は、異なる地点で撮像された出演者どうしをバランスよく合成した動画像を容易に生成することができるようにする情報処理装置および情報処理方法、並びにプログラムに関する。第２の動画像に対する画像解析が行われて、第２の動画像に写されている第２の被写体の位置を解析結果とし、その解析結果に基づいて、第１の被写体が第２の被写体に重なることを回避して、第１の動画像を第２の動画像に合成する合成位置を合成条件として調整する処理が行われる。また、第１の被写体として第１の動画像に写されている第１の人物の顔の大きさ、および、第２の被写体として第２の動画像に写されている第２の人物の顔の大きさを解析結果とし、その解析結果に基づいて、第１の人物の顔の大きさが第２の人物の顔の大きさと略同一となるように合成条件を調整する処理が行われる。本技術は、例えば、動画像を配信する配信システムに適用できる。
2016152634.tif 000002
【特許請求の範囲】
【請求項１】
第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、前記第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる解析結果に基づいて、前記第１の動画像と前記第２の動画像とを合成する合成条件を調整する調整部と
を備える情報処理装置。
【請求項２】
前記画像解析処理部は、前記第２の動画像に写されている第２の被写体の位置を前記解析結果とする画像解析を行い、
前記調整部は、前記第２の動画像における前記第２の被写体の位置に基づいて、前記第１の被写体が前記第２の被写体に重なることを回避して、前記第１の動画像を前記第２の動画像に合成する合成位置を前記合成条件として調整する
請求項１に記載の情報処理装置。
【請求項３】
前記画像解析処理部は、前記第２の動画像に写されている第２の被写体の大きさを前記解析結果とする画像解析を行い、
前記調整部は、前記第２の動画像における前記第２の被写体の大きさに基づいて、前記第２の動画像に対する前記第１の動画像の大きさを前記合成条件として調整する
請求項１に記載の情報処理装置。
【請求項４】
前記画像解析処理部は、前記第１の被写体として前記第１の動画像に写されている第１の人物の顔の大きさ、および、前記第２の被写体として前記第２の動画像に写されている第２の人物の顔の大きさを前記解析結果とする画像解析を行い、
前記調整部は、前記第１の人物の顔の大きさが前記第２の人物の顔の大きさと略同一となるように前記合成条件を調整する
請求項３に記載の情報処理装置。
【請求項５】
前記画像解析処理部は、前記第１の被写体として前記第１の動画像に写されている第１の人物の顔の大きさ、および、前記第２の被写体として前記第２の動画像に写されている所定の物体の大きさを前記解析結果とする画像解析を行い、
前記調整部は、前記第１の人物の顔の大きさと前記物体の大きさとの比較結果に基づいて前記合成条件を調整する
請求項３に記載の情報処理装置。
【請求項６】
前記画像解析処理部は、前記第１の被写体の画質、および、前記第２の動画像に写されている第２の被写体の画質を前記解析結果とする画像解析を行い、
前記調整部は、前記第１の被写体の画質と前記第２の被写体の画質とを前記合成条件として調整する
請求項１に記載の情報処理装置。
【請求項７】
前記画像解析処理部は、前記第１の被写体における色の性質、および、前記第２の動画像に写されている第２の被写体における色の性質を前記解析結果とする画像解析を行い、
前記調整部は、前記第１の被写体における色の性質と前記第２の被写体における色の性質とを前記合成条件として調整する
請求項１に記載の情報処理装置。
【請求項８】
前記色の性質は、明度であり、
前記調整部は、前記第１の被写体の明度と前記第２の被写体の明度とを前記合成条件として調整する
請求項７に記載の情報処理装置。
【請求項９】
前記色の性質は、彩度であり、
前記調整部は、前記第１の被写体の彩度と前記第２の被写体の彩度とを前記合成条件として調整する
請求項７に記載の情報処理装置。
【請求項１０】
前記色の性質は、色相であり、
前記調整部は、前記第１の被写体の色相と前記第２の被写体の色相とを前記合成条件として調整する
請求項７に記載の情報処理装置。
【請求項１１】
前記第１の被写体が撮像された撮像動画像が供給されるのに応じて逐次的に、前記画像解析処理部による画像解析および前記調整部による合成条件の調整が行われ、前記第１の動画像と前記第２の動画像とが合成された合成動画像が生成される
請求項１に記載の情報処理装置。
【請求項１２】
前記第１の被写体が撮像された撮像動画像から、前記第１の被写体が写された領域を切り抜く画像処理を行い、前記第１の動画像を生成する切り抜き処理部
をさらに備える請求項１に記載の情報処理装置。
【請求項１３】
前記第１の動画像を前記第２の動画像に合成したときに、前記第１の被写体の身体の一部分が不足している場合、その一部分を補完する補完画像を作成する処理を行う補完画像作成処理部と、
前記補完画像作成処理部により作成された前記補完画像を、前記第２の動画像における前記第１の被写体の身体の不足している部分を隠すように合成する合成処理を行う合成処理部と
をさらに備える請求項１に記載の情報処理装置。
【請求項１４】
前記第２の動画像に写されている物体を検出し、その検出した物体の、前記第１の被写体に対する前方または後方の位置関係を示すレイヤを設定する処理を行うレイヤ設定処理部と、
前記レイヤ設定処理部により前記第１の被写体に対して前方にレイヤが設定された前記物体が前記第１の被写体と重なる場合、前記第１の動画像を前記第２の動画像に合成した後に、前記第２の動画像から前記物体を切り抜いた動画像を合成する合成処理を行う合成処理部と
をさらに備える請求項１に記載の情報処理装置。
【請求項１５】
前記第１の動画像と前記第２の動画像とが合成された合成動画像に対する画像解析を行った結果に基づいて、前記第１の被写体として前記第１の動画像に写されている人物に対する指示を提示する処理を行う指示処理部
をさらに備える請求項１に記載の情報処理装置。
【請求項１６】
第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、前記第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる解析結果に基づいて、前記第１の動画像と前記第２の動画像とを合成する合成条件を調整する
ステップを含む情報処理方法。
【請求項１７】
第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、前記第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる解析結果に基づいて、前記第１の動画像と前記第２の動画像とを合成する合成条件を調整する
ステップを含む情報処理をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、情報処理装置および情報処理方法、並びにプログラムに関し、特に、異なる地点で撮像された出演者どうしをバランスよく合成した動画像を容易に生成することができるようにした情報処理装置および情報処理方法、並びにプログラムに関する。
【背景技術】
【０００２】
従来、映画やテレビ放送で使用されるクロマキー合成技術は、主にグリーンバックまたはブルーバックを背景として出演者が撮像される。そして、撮像された動画像から出演者を切り出す作業を行った後、別途用意された動画像を背景に合成され、適切な大きさおよび位置に来るように修正または調整する操作が行われる。また、リアルタイムに合成を行って放送する場合では、合成先動画の構成と出演者を撮像する構成とを一致させておく必要があった。【０００３】
例えば、特許文献１には、背景となる動画像の内容に合わせた適切な人物合成レイアウトを指定するデータに基づいて、撮像された動画像から切り出した人物部分の位置や大きさを、背景となる動画像の内容に応じて調整する合成方法が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−３２８７８８
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に開示されている合成方法では、人物合成レイアウトを指定するデータを登録する手間が必要であったため、異なる地点で撮像された出演者どうしをバランスよく合成した動画像を生成するには、様々な手間を要することになっていた。そのため、より容易な手段で、異なる地点で撮像された出演者どうしをバランスよく合成した動画像を生成することが求められていた。【０００６】
本開示は、このような状況に鑑みてなされたものであり、異なる地点で撮像された出演者どうしをバランスよく合成した動画像を容易に生成することができるようにするものである。
【課題を解決するための手段】
【０００７】
本開示の一側面の情報処理装置は、第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、前記第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる解析結果に基づいて、前記第１の動画像と前記第２の動画像とを合成する合成条件を調整する調整部とを備える。【０００８】
本開示の一側面の情報処理方法またはプログラムは、第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、前記第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる解析結果に基づいて、前記第１の動画像と前記第２の動画像とを合成する合成条件を調整するステップを含む。【０００９】
本開示の一側面においては、第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる解析結果に基づいて、第１の動画像と第２の動画像とを合成する合成条件が調整される。
【発明の効果】
【００１０】
本開示の一側面によれば、異なる地点で撮像された出演者どうしをバランスよく合成した動画像を容易に生成することができる。
【図面の簡単な説明】
【００１１】
【図１】本技術を適用した配信システムの一実施の形態の構成例を示すブロック図である。
【図２】出演者側情報処理装置の構成例を示すブロック図である。
【図３】合成位置調整処理について説明する図である。
【図４】レイヤ設定処理について説明する図である。
【図５】サイズ調整処理およびパーツ作成処理について説明する図である。
【図６】案内処理について説明する図である。
【図７】画質調整処理について説明する図である。
【図８】画像処理部による画像処理を説明するフローチャートである。
【図９】本技術を適用したコンピュータの一実施の形態の構成例を示すブロック図である。
【発明を実施するための形態】
【００１２】
以下、本技術を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。
【００１３】
図１は、本技術を適用した配信システムの一実施の形態の構成例を示すブロック図である。
【００１４】
図１に示すように、配信システム１１は、インターネットなどのネットワーク１２を介して、出演者側情報処理装置１３−１および１３−２、配信サーバ１４、並びに、Ｎ台の視聴者側情報処理装置１５−１乃至１５−Ｎが接続されて構成される。
【００１５】
配信システム１１では、例えば、出演者側情報処理装置１３−１または１３−２において撮像された動画像が、ネットワーク１２を介して逐次的に配信サーバ１４に送信され、配信サーバ１４からネットワーク１２を介して視聴者側情報処理装置１５−１乃至１５−Ｎに配信される。これにより、視聴者側情報処理装置１５−１乃至１５−Ｎの視聴者は、出演者側情報処理装置１３−１または１３−２のユーザが出演者として出演している動画像を視聴することができる。
【００１６】
また、配信システム１１では、出演者側情報処理装置１３−１の出演者と出演者側情報処理装置１３−２の出演者とが合成された合成動画像を配信することができる。例えば、出演者側情報処理装置１３−２は、出演者を撮像した動画像を、配信サーバ１４を介して出演者側情報処理装置１３−１に送信する。そして、出演者側情報処理装置１３−１は、例えば、出演者側情報処理装置１３−２から送信されてくる動画像に写されている出演者の隣に並ぶように、出演者側情報処理装置１３−１の出演者を合成した合成動画像を生成し、配信サーバ１４に送信する。これにより、異なる地点で撮像された出演者どうしが合成された合成動画像が、配信サーバ１４を介して、視聴者側情報処理装置１５−１乃至１５−Ｎに配信される。
【００１７】
次に、図２は、出演者側情報処理装置１３−１の構成例を示すブロック図である。
【００１８】
図２に示すように、出演者側情報処理装置１３−１は、撮像部２１、通信部２２、ディスプレイ２３、スピーカ２４、および画像処理部２５を備えて構成される。
【００１９】
撮像部２１は、図示しない光学系や撮像素子を備えて構成され、出演者側情報処理装置１３−１の出演者を被写体として撮像した動画像を画像処理部２５に供給する。
【００２０】
通信部２２は、ネットワーク１２を介して、出演者側情報処理装置１３−２および配信サーバ１４と通信を行う。例えば、通信部２２は、出演者側情報処理装置１３−２から送信されてくる動画像を受信して画像処理部２５に供給したり、画像処理部２５から出力される合成動画像を配信サーバ１４に送信したりする。
【００２１】
ディスプレイ２３は、画像処理部２５の合成処理部３６から供給される合成動画像を表示したり、画像処理部２５の案内部３８から供給される案内画像を表示したりする。
【００２２】
スピーカ２４は、画像処理部２５の案内部３８から供給される案内音声を出力する。
【００２３】
画像処理部２５は、撮像部２１により撮像された動画像（以下適宜、撮像動画像と称する）から出演者を切り抜き、通信部２２から供給される動画像（以下適宜、合成先動画像と称する）に合成する画像処理を行う。そして、画像処理部２５は、画像処理を行うことにより生成される合成動画像を、通信部２２およびディスプレイ２３に供給する。また、図示するように、画像処理部２５は、切り抜き部３１、合成位置調整部３２、レイヤ設定部３３、サイズ調整部３４、画質調整部３５、合成処理部３６、パーツ作成部３７、および案内部３８を備えて構成される。
【００２４】
切り抜き部３１は、撮像部２１から供給される撮像動画像に対して顔検出処理および人物検出処理を行い、撮像動画像に写されている出演者（以下適宜、撮像出演者と称する）を検出する。そして、切り抜き部３１は、撮像動画像から撮像出演者が写されている領域を切り抜く画像処理を行い、撮像出演者の輪郭に沿って形成される撮像出演者の切り抜き動画像（撮像動画像に含まれる、撮像出演者が写された領域の動画像）を生成してサイズ調整部３４に供給する。
【００２５】
合成位置調整部３２は、切り抜き部３１により生成される撮像出演者の切り抜き動画像を合成先動画像に合成する際の合成位置（合成条件）が適切な配置となるように調整し、合成先動画像に合成位置を設定する。例えば、図３を参照して後述するように、合成位置調整部３２は、通信部２２から供給される合成先動画像に対する画像解析を行い、合成先動画像に写されている出演者（以下適宜、合成先出演者と称する）を認識する。これにより、合成位置調整部３２は、合成先動画像に写されている合成先出演者の位置を解析結果として取得する。そして、合成位置調整部３２は、解析結果に基づいて、撮像出演者および合成先出演者を並べたときの構図を考慮し、合成先出演者に対して撮像出演者がバランスよく配置されるように、合成位置を調整する。
【００２６】
レイヤ設定部３３は、通信部２２から供給される合成先動画像に対して物体検出処理を行い、図４を参照して後述するように、合成先動画像から検出された物体の、撮像出演者に対する前方または後方の位置関係を示すレイヤを、合成先動画像に設定する。
【００２７】
サイズ調整部３４は、切り抜き部３１から供給される撮像出演者の切り抜き動画像を合成先動画像の合成位置に合成する際における大きさ（合成条件）を調整する画像処理を行い、大きさを調整した撮像出演者の切り抜き動画像を、画質調整部３５に供給する。例えば、図５を参照して後述するように、撮像出演者の顔の大きさと合成先出演者の顔の大きさとを考慮して、それらの大きさが略同一となるように、撮像出演者の切り抜き動画像のサイズを調整する。即ち、サイズ調整部３４は、撮像出演者の切り抜き動画像と合成先動画像とに対する画像解析を行って、撮像出演者の切り抜き動画像における撮像出演者の顔の大きさ、および、合成先動画像に写されている合成先出演者の顔の大きさを解析結果として取得し、その解析結果に基づいて、撮像出演者の切り抜き動画像のサイズを調整する。
【００２８】
画質調整部３５は、合成先動画像の合成先出演者の画質に合わせて、合成先動画像に合成する際の撮像出演者の切り抜き動画像の画質（例えば、明度、彩度、および色相からなる色の性質や、解像度などの合成条件）を調整する画像処理を行って、合成処理部３６に供給する。例えば、図７を参照して後述するように、撮像出演者が逆光で撮像されている場合、撮像出演者と合成先出演者との明るさのバランスを考慮して、画質調整部３５は、撮像出演者の切り抜き動画像の明るさを増加させる画像処理を行う。即ち、画質調整部３５は、撮像出演者の切り抜き動画像と合成先動画像とに対する画像解析を行って、それぞれの出演者の画質を解析結果として取得し、その解析結果に基づいて、撮像出演者の切り抜き動画像の画質を調整する。
【００２９】
合成処理部３６は、撮像出演者の切り抜き動画像を合成先動画像に重畳させて合成する合成処理を行い、合成動画像を生成する。このとき、合成処理部３６は、サイズ調整部３４により調整された大きさで、画質調整部３５により調整された画質の撮像出演者の切り抜き動画像を、合成位置調整部３２により合成先動画像に設定された合成位置に合成する。また、レイヤ設定部３３により、合成先動画像から検出された物体について、撮像出演者に対する前方の位置関係を示すレイヤが設定されている場合、合成処理部３６は、そのレイヤが設定されている物体を合成先動画像から切り抜いて、撮像出演者の切り抜き動画像を合成した後に、物体を切り抜いた動画像を重畳させる。
【００３０】
パーツ作成部３７は、図５を参照して後述するように、合成処理部３６が合成動画像に対する構図解析を行った結果、合成先動画像に合成した撮像出演者の身体の一部分が不足している場合、その不足している一部分（不足パーツ）を補完するためのパーツ（補間画像）を生成して合成処理部３６に供給する。これにより、合成処理部３６は、パーツ作成部３７により生成されたパーツを撮像出演者の不足パーツを隠すように合成する合成処理を行う。
【００３１】
案内部３８は、図６を参照して後述するように、合成処理部３６により生成された合成動画像に対する画像解析を行い、その解析結果に基づいて、撮像出演者および合成先出演者が不自然とならないように、撮像出演者に対して各種の指示を行う案内を出力（指示を提示）する。例えば、案内部３８は、撮像出演者の向きを指示したり、撮像部２１を配置する位置を指示したり、撮像出演者を撮像している周辺環境の明るさを指示する案内画像をディスプレイ２３に供給して表示させ、または、案内音声をスピーカ２４に供給して出力させる。
【００３２】
以上のように出演者側情報処理装置１３−１は構成されており、画像処理部２５において、撮像出演者および合成先出演者の位置や大きさなどの兼ね合いを考慮し、撮像出演者および合成先出演者をバランスよく合成した合成動画像を生成することができる。また、出演者側情報処理装置１３−１は、撮像部２１が撮像出演者を撮像した撮像動画像が画像処理部２５に供給されるのに応じて逐次的に、画像処理部２５における画像処理が行われ、撮像出演者の撮像とリアルタイム（処理による多少のタイムラグを含む）に、合成動画像を出力することができる。そして、画像処理部２５から出力される合成動画像は、通信部２２を介して配信サーバ１４に送信され、ネットワーク１２を介して、視聴者側情報処理装置１５−１乃至１５−Ｎに配信される。
【００３３】
次に、図３を参照して、合成位置調整部３２による合成位置調整処理について説明する。
【００３４】
図３の左側には、撮像部２１により撮像された撮像動画像Ａ１と、出演者側情報処理装置１３−２から送信されてくる合成先動画像Ｂ１とが示されており、図３の右側には、合成処理部３６により合成処理が施された合成動画像Ｃ１が示されている。
【００３５】
図示するように、撮像動画像Ａ１における撮像出演者Ｄ１の位置と、合成先動画像Ｂ１における合成先出演者Ｅ１の位置とが、互いに重なるような位置関係となっている場合について説明する。この場合、撮像動画像Ａ１から撮像出演者Ｄ１を切り出して、位置調整を行わずにそのまま合成すると、撮像出演者Ｄ１が合成先出演者Ｅ１に重なるように合成され、図示しないが、撮像出演者Ｄ１の背後に合成先出演者Ｅ１が隠れるような合成動画像が生成される。従って、従来、撮像出演者Ｄ１は、合成先出演者Ｅ１が隠れることがないように、合成先動画像Ｂ１をよく理解しながら撮像時の立ち位置を変える必要があり、適切な位置合わせを行うことが困難であった。
【００３６】
これに対し、出演者側情報処理装置１３−１では、合成位置調整部３２が合成先動画像Ｂ１に対する画像解析（例えば、人物検出処理や、顔検出処理、構図認識など）を行って、合成先動画像Ｂ１に写されている合成先出演者Ｅ１の位置を特定することができる。そして、合成位置調整部３２は、撮像出演者Ｄ１が合成先出演者Ｅ１に重なることを回避した適切な配置となるように、撮像出演者Ｄ１の合成位置を調整することができる。図３の例では、合成位置調整部３２は、合成先動画像Ｂ１に破線で示されているように、合成先出演者Ｅ１の隣に並ぶような配置に初期の合成位置を設定する。
【００３７】
このように、画像処理部２５では、合成位置調整部３２により自動的に、つまり、撮像出演者Ｄ１が自身の立ち位置を調整することなく、撮像出演者Ｄ１の合成位置が適切な配置となるように設定される。これにより、画像処理部２５は、合成先出演者Ｅ１と撮像出演者Ｄ１とが重ならないように配置された合成動画像Ｃ１を容易に生成することができる。
【００３８】
なお、例えば、合成位置調整部３２は、合成先動画像Ｂ１に距離情報が付加されている場合には、その距離情報を用いることで合成先出演者Ｅ１の位置を正確に認識することができ、より適切に合成位置を設定することができる。また、合成位置調整部３２は、例えば、二人以上の多数の出演者を合成する場合においても同様に、それぞれの出演者が重ならないような適切な配置で合成位置を調整することができる。
【００３９】
次に、図４を参照して、レイヤ設定部３３によるレイヤ設定処理について説明する。
【００４０】
図４の左側には、撮像部２１により撮像された撮像動画像Ａ２と、出演者側情報処理装置１３−２から送信されてくる合成先動画像Ｂ２とが示されており、図４の右側には、合成処理部３６により合成処理が施された合成動画像Ｃ２が示されている。
【００４１】
図示するように、撮像動画像Ａ２における撮像出演者Ｄ２の位置と、合成先動画像Ｂ２に写されている物体Ｆ（図４の例ではマイクスタンド）の位置とが、互いに重なるような位置関係となっている場合について説明する。この場合、撮像動画像Ａ２から撮像出演者Ｄ２を切り出して、そのまま合成すると、物体Ｆが合成先出演者Ｅ１に重なるように合成され、図示しないが、撮像出演者Ｄ１の背後に物体Ｆが隠れるような前後関係が反転された合成動画像が生成される。つまり、本来であれば、物体Ｆが撮像出演者Ｄ１の前方に配置される構図が望ましいが、そのような構図の合成動画像を生成することは困難であった。
【００４２】
そこで、出演者側情報処理装置１３−１では、レイヤ設定部３３が、合成先動画像Ｂ２に対して物体検出処理を行い、物体Ｆの撮像出演者Ｄ２に対する前後関係を示すレイヤを合成先動画像Ｂ２に設定する。例えば、レイヤ設定部３３は、合成先動画像Ｂ２から検出された物体Ｆを囲う領域（破線で図示される領域）を、レイヤを設定することができる領域としてディスプレイ２３に表示する。そして、レイヤ設定部３３は、その領域を撮像出演者Ｄ２に対して前方または後方のどちらに表示するかを指示するグラフィカルなユーザインタフェースをディスプレイ２３に表示して、ユーザの操作に従ってレイヤを設定することができる。
【００４３】
また、レイヤ設定部３３は、合成先動画像Ｂ２に写されている被写体までの距離が測距技術を用いて求められ、その距離情報が合成先動画像Ｂ２に付加されている場合、距離情報を参照して、レイヤを設定することができる。例えば、レイヤ設定部３３は、物体Ｆまでの距離が所定値未満であれば、撮像出演者Ｄ２に対して前方のレイヤを設定し、物体Ｆまでの距離が所定値以上であれば、撮像出演者Ｄ２に対して後方のレイヤを設定する。
【００４４】
このように、画像処理部２５では、レイヤ設定部３３により撮像出演者Ｄ１の前方に表示すべき物体Ｆにレイヤが設定される。これにより、画像処理部２５は、物体Ｆが撮像出演者Ｄ１の前方に配置される本来の望ましい構図の合成動画像Ｃ２を生成することができる。
【００４５】
次に、図５を参照して、サイズ調整部３４によるサイズ調整処理、および、パーツ作成部３７によるパーツ作成処理について説明する。
【００４６】
図５の左側には、撮像部２１により撮像された撮像動画像Ａ３と、出演者側情報処理装置１３−２から送信されてくる合成先動画像Ｂ３とが示されている。また、図５の中央には、サイズ調整部３４によるサイズ調整処理が施されて合成処理部３６により合成処理が施された合成動画像Ｃ３が示されており、図５の右側には、合成動画像Ｃ３に対してパーツ作成部３７において作成されたパーツが合成された合成動画像Ｃ３’が示されている。
【００４７】
図示するように、撮像動画像Ａ３における撮像出演者Ｄ３が、合成先動画像Ｂ３における撮像出演者Ｄ３よりも大きく写されている場合について説明する。この場合、撮像動画像Ａ３から撮像出演者Ｄ３を切り出して、サイズ調整を行わずにそのまま合成すると、図示しないが、撮像出演者Ｄ３が合成先出演者Ｅ３に対して非常に大きくなりアンバランスな合成動画像が生成される。従って、従来、撮像出演者Ｄ３は、合成先出演者Ｅ３と同程度の大きさとなるように、撮像部２１から離れた立ち位置に移動する必要があった。
【００４８】
これに対し、出演者側情報処理装置１３−１では、合成位置調整部３２が合成位置を設定する際に、合成先動画像Ｂ３に写されている合成先出演者Ｅ３の顔の大きさを認識して、サイズ調整部３４に通知することができる。そして、サイズ調整部３４は、切り抜き部３１から供給される撮像出演者Ｄ３の顔の大きさ（破線の円形）が、合成先出演者Ｅ３の顔の大きさ（破線の円形）と略同一となるように撮像出演者Ｄ３のサイズ調整（拡大演算または縮小演算）を行う画像処理を行う。
【００４９】
なお、例えば、合成先動画像Ｂ３に写されている物体Ｇ（図４の例では花）の大きさと顔の大きさとの比率が予め合成先動画像Ｂ３に設定されている場合、サイズ調整部３４は、撮像出演者Ｄ３の顔の大きさと物体Ｇの大きさとを比較し、その比較結果に基づいて、撮像出演者Ｄ３のサイズを調整してもよい。また、図示するような花以外に、椅子やテーブルとのサイズの比較を行ってもよい。
【００５０】
これにより、合成処理部３６において、サイズ調整部３４によりサイズが調整された撮像出演者Ｄ３を合成先動画像Ｂ３に合成することで、撮像出演者Ｄ３と合成先出演者Ｅ３とがバランスよく合成された合成動画像Ｃ３を生成することができる。
【００５１】
ところで、撮像動画像Ａ３では、撮像出演者Ｄ３の胸部より上側の部分だけが撮像されているのに対し、合成先動画像Ｂ３では、合成先出演者Ｅ３の全身が撮像されている。このため、合成動画像Ｃ３に示すように、撮像出演者Ｄ３および合成先出演者Ｅ３の顔の高さを揃えた配置で合成した場合、撮像出演者Ｄ３の撮像されていない身体の一部分（胸部より下側の部分）が不足パーツとなってしまう。このため、合成動画像Ｃ３では、撮像出演者Ｄ３の胸部より上側の部分が宙に浮いているような不自然な状態となっている。
【００５２】
そこで、出演者側情報処理装置１３−１では、合成処理部３６は、合成動画像Ｃ３に合成された撮像出演者Ｄ３に対する骨格推定を行い、撮像出演者Ｄ３の不足パーツ（図５の例では、胸部より下側の部分）を認識する。そして、合成処理部３６は、認識した撮像出演者Ｄ３の不足パーツを補うようなパーツを生成するようにパーツ作成部３７に対して要求する。例えば、合成処理部３６は、合成動画像Ｃ３に対する画像認識を行って撮像出演者Ｄ３の下方の床を認識すると、その床の上に配置され、撮像出演者Ｄ３の不足パーツを隠すようなパーツをパーツ作成部３７に対して要求する。
【００５３】
これに応じて、パーツ作成部３７は、合成処理部３６からの要求に応じたパーツＨ（図５の例では、演説台）をコンピュータグラフィックにより作成して合成処理部３６に供給する。そして、合成処理部３６は、パーツ作成部３７により作成されたパーツＨが、合成動画像Ｃ３の床の上に配置され、撮像出演者Ｄ３の不足パーツを補うように合成した合成動画像Ｃ３’を生成する。
【００５４】
このように、画像処理部２５では、サイズ調整部３４により撮像出演者Ｄ３のサイズ調整が行われ、パーツ作成部３７により作成されたパーツＨが撮像出演者Ｄ３の不足パーツを隠すように合成される。これにより、画像処理部２５は、撮像出演者Ｄ３が不自然な状態となるようなことを回避した合成動画像Ｃ３’を生成することができる。
【００５５】
次に、図６を参照して、案内部３８による案内処理について説明する。
【００５６】
図６には、ディスプレイ２３に表示される表示画像Ｊが示されている。ディスプレイ２３には、合成処理部３６から出力される合成動画像Ｃ４に、案内部３８から出力される案内画像Ｋが重畳された表示画像Ｊが表示される。
【００５７】
例えば、図示するように、出演者側情報処理装置１３−１の撮像出演者Ｄ４が、合成先出演者Ｅ４の方向を向いていない場合について説明する。この場合、上述したような位置調整処理やサイズ調整処理では不自然な状態を適切に回避することができないため、案内部３８が、撮像出演者Ｄ４に対して各種の指示をするための案内を行う。
【００５８】
例えば、案内部３８は、合成処理部３６から供給される合成動画像Ｃ４を解析することにより、撮像出演者Ｄ４および合成先出演者Ｅ４の顔を検出し、それぞれの顔の向きを認識する。そして、案内部３８は、自然な会話を行っているような構図となるように、合成先出演者Ｅ４の方向を示す矢印、および、「こちらを見て話してください」というメッセージからなる案内画像Ｋをディスプレイ２３に出力する。なお、案内画像Ｋは、ディスプレイ２３においてに合成動画像Ｃ４に重ねて表示されるだけであり、通信部２２を介して送信されることはない。
【００５９】
このように、画像処理部２５では、案内部３８が、例えば、撮像出演者Ｄ４および合成先出演者Ｅ４が会話を行っているような構図となるように、案内画像Ｋにより撮像出演者Ｄ４に対する案内を行うことができる。これにより、画像処理部２５は、撮像出演者Ｄ４および合成先出演者Ｅ４について、より違和感のない自然な構図の合成動画像Ｃ４を生成することができる。
【００６０】
なお、案内部３８は、図６に示したような撮像出演者Ｄ４および合成先出演者Ｅ４の顔の向きを指示する他、例えば、出演者側情報処理装置１３−１の撮像出演者Ｄ４に対して、撮像部２１の設置を指示するような案内を出力することができる。具体的には、案内部３８は、「カメラの高さを高くしてください」や、「カメラをもう少し右に置いてください」、「カメラから少し離れてください」などのメッセージを、ディスプレイ２３に表示させ、または、スピーカ２４から出力させることができる。
【００６１】
また、案内部３８は、撮像出演者Ｄ４のホワイトバランスを解析し、極端に暗い場所で撮像されていることが検出された場合には、部屋の暗さを指摘して明るくするような案内、例えば、「部屋を明るくしてください」というメッセージを、ディスプレイ２３に表示させ、または、スピーカ２４から出力させることができる。
【００６２】
次に、図７を参照して、画質調整部３５による画質調整処理について説明する。
【００６３】
図７では、撮像動画像から切り抜かれた撮像出演者Ｄ５、および、合成先動画像から切り抜かれた合成先出演者Ｅ５を、それらの背景となる背景静止画像Ｌに対して合成する処理について説明する。図７の左側には、撮像出演者Ｄ５および合成先出演者Ｅ５と、背景静止画像Ｌとが示されている。図７の右側には、背景静止画像Ｌを背景として合成処理部３６により撮像出演者Ｄ５および合成先出演者Ｅ５が合成された合成動画像Ｃ５が示されている。
【００６４】
例えば、撮像出演者Ｄ５および合成先出演者Ｅ５それぞれを撮像する環境（光源方向や明るさなど）が異なる場合、図示するように、撮像出演者Ｄ５および合成先出演者Ｅ５の明るさが異なることがある。例えば、撮像出演者Ｄ５は逆光の環境で撮像され、合成先出演者Ｅ５と比較して暗い画像となっており、撮像出演者Ｄ５および合成先出演者Ｅ５をそのまま合成すると、図示しないが、それぞれの明るさが異なる不自然な合成動画像が生成される。
【００６５】
そこで、画像処理部２５では、画質調整部３５が、撮像出演者Ｄ５および合成先出演者Ｅ５が同等の明るさとなるように撮像出演者Ｄ５のホワイトバランスを調整する。これにより、画像処理部２５は、撮像出演者Ｄ５および合成先出演者Ｅ５が同等の明るさで背景静止画像Ｌに合成され、不自然さが解消された合成動画像Ｃ５を生成することができる。また、画質調整部３５は、撮像出演者Ｄ５および合成先出演者Ｅ５が同程度の明るさとなるように相対的に調整を行ってもよい。さらに、画質調整部３５は、明るさ以外にも、彩度や色相などについて、撮像出演者Ｄ５および合成先出演者Ｅ５が同程度となるように調整することができる。
【００６６】
次に、図８は、画像処理部２５による画像処理を説明するフローチャートである。
【００６７】
例えば、出演者側情報処理装置１３−１の出演者を合成先動画像に対して合成するように、図示しない操作部に対する操作が行われると処理が開始される。ステップＳ１１において、切り抜き部３１は、撮像部２１から供給される撮像動画像から撮像出演者が写されている領域を切り抜く画像処理を行い、撮像出演者の切り抜き動画像を生成してサイズ調整部３４に供給する。
【００６８】
ステップＳ１２において、合成位置調整部３２は、通信部２２から供給される合成先動画像に対する画像解析を行い、撮像出演者の切り抜き動画像を合成先動画像に合成する際の合成位置が適切な位置となるように調整し、合成先動画像に合成位置を設定する。そして、合成位置調整部３２は、合成位置を設定した合成先動画像を画質調整部３５に供給する。また、合成位置調整部３２は、合成先動画像に写されている合成先出演者の顔の大きさを認識して、合成先出演者の顔の大きさをサイズ調整部３４に通知する。
【００６９】
ステップＳ１３において、サイズ調整部３４は、ステップＳ１１で切り抜き部３１から供給される撮像出演者の切り抜き動画像のサイズを、撮像出演者の顔の大きさが合成先出演者の顔の大きさと略同一となるように調整して、画質調整部３５に供給する。
【００７０】
ステップＳ１４において、画質調整部３５は、ステップＳ１２で合成位置調整部３２から供給される合成先動画像の合成先出演者の画質に合わせて、ステップＳ１３でサイズ調整部３４から供給される撮像出演者の切り抜き動画像の画質を調整する画像処理を行って、合成処理部３６に供給する。
【００７１】
ステップＳ１５において、レイヤ設定部３３は、通信部２２から供給される合成先動画像に対して物体検出処理を行い、合成先動画像から検出された物体の、撮像出演者に対する前方または後方の位置関係を示すレイヤを合成先動画像に設定して、合成処理部３６に供給する。
【００７２】
ステップＳ１６において、合成処理部３６は、ステップＳ１３でサイズ調整部３４により調整された大きさで、ステップＳ１４で画質調整部３５により調整された画質の撮像出演者の切り抜き動画像を、ステップＳ１２で合成位置調整部３２により合成先動画像に設定された合成位置に合成する合成処理を行う。このとき、合成処理部３６は、ステップＳ１５でレイヤ設定部３３により撮像出演者に対する前方の位置関係を示すレイヤが設定されている場合、そのレイヤが設定されている物体を合成先動画像から切り抜いて、撮像出演者の切り抜き動画像を合成した後に、物体を切り抜いた画像を重畳させる合成処理を行う。そして、合成処理部３６は、このような合成処理により生成した合成動画像に対する構図解析を行う。
【００７３】
ステップＳ１７において、合成処理部３６は、ステップＳ１６で合成動画像に対する構図解析を行った結果に基づいて、図５を参照して説明したように、合成先動画像に合成した撮像出演者に不足パーツがあるか否かを判定する。
【００７４】
ステップＳ１７において、合成処理部３６が撮像出演者に不足パーツがあると判定した場合、処理はステップＳ１８に進み、合成処理部３６は、その不足パーツを補うようなパーツを作成するようにパーツ作成部３７に対して要求する。パーツ作成部３７は、合成処理部３６からの要求に応じてコンピュータグラフィックによるパーツを作成して合成処理部３６に供給し、合成処理部３６は、撮像出演者の不足パーツを補うように、パーツ作成部３７により生成されたパーツを合成先動画像に合成した合成動画像を生成する。
【００７５】
ステップＳ１８の処理後、または、ステップＳ１７において合成処理部３６が撮像出演者に不足パーツがないと判定した場合、処理はステップＳ１９に進み、合成処理部３６は、合成動画像をディスプレイ２３に出力して表示させる。また、合成処理部３６は、合成動画像を通信部２２に供給し、ネットワーク１２を介して配信サーバ１４に送信させる。
【００７６】
ステップＳ２０において、案内部３８は、合成処理部３６において生成された合成動画像を解析し、案内を出力する必要があるか否かを判定する。
【００７７】
ステップＳ２０において、案内部３８が案内を出力する必要があると判定した場合、処理はステップＳ２１に進み、案内部３８は、案内画像をディスプレイ２３に表示させ、または、案内音声をスピーカ２４から出力させる。
【００７８】
ステップＳ２１の処理後、または、ステップＳ２０において案内部３８が案内を出力する必要がないと判定した場合、処理はステップＳ１１に戻り、以下、同様の処理が繰り返される。
【００７９】
以上のように、画像処理部２５は、撮像出演者と合成先出演者との位置、大きさ、画質などが適切となるように考慮して、撮像出演者の切り抜き動画像を合成先動画像に合成する際の条件を調整することで、異なる地点で撮像された出演者どうしをバランスよく合成した画像を容易に生成することができる。
【００８０】
なお、例えば、配信システム１１では、上述した全ての処理を出演者側情報処理装置１３−１において行う必要はなく、例えば、出演者側情報処理装置１３−２が、合成先動画像を撮像する際に画像解析を行って、合成位置を設定した合成先動画像を送信してもよい。同様に、出演者側情報処理装置１３−２において、測距技術を用いて合成先動画像に写されている物体を検出し、レイヤ設定を行ってもよい。また、出演者側情報処理装置１３−１は、撮像出演者の切り抜き動画像を配信サーバ１４に送信し、配信サーバ１４において合成先動画像との合成処理を行ってもよい。
【００８１】
さらに、例えば、配信サーバ１４において、画像処理部２５による画像処理を施してもよい。即ち、出演者側情報処理装置１３−１および１３−２は、それぞれ出演者を撮像した動画像を配信サーバ１４に送信する。そして、配信サーバ１４は、出演者側情報処理装置１３−１の動画像から出演者を切り抜き、出演者側情報処理装置１３−２の動画像を合成先動画像として合成処理を行う。このとき、配信サーバ１４において、上述したようなレイヤ設定処理、サイズ調整処理、画質調整処理、およびパーツ作成処理を行うことができる。
【００８２】
また、例えば、パーツ作成部３７により撮像出演者の不足パーツを補うようなパーツを生成する他、撮像出演者の不足パーツとなる領域をトリミングして、合成先動画像の一部を拡大して撮像出演者を合成するようにしてもよい。
【００８３】
なお、本実施の形態において、異なる地点で撮像された出演者の撮像動画像としては、物理的に遠距離にある箇所で出演者の撮像が行われた撮像動画像の他、ある程度の近距離（例えば、同じ室内）で、それぞれの出演者を異なる撮像装置で撮像した撮像動画像も含まれる。また、同一の撮像装置を用いた場合であっても、撮像時間または撮像場所が異なって撮像が行われた撮像動画像も含まれる。例えば、同じ室内で同一の撮像装置を用いて、合成先動画像を先に撮像して記録（録画）しておき、リアルタイム配信時に、出演者を写した撮像動画像を、再生した合成先動画像に合成して配信することができる。このように、撮像動画像と合成先動画像とが異なるものであれば、異なる地点で撮像されたものに限定されることはない。
【００８４】
また、例えば、画像のサイズまたは画質を調整する際に、撮像出演者の切り抜き動画像のサイズまたは画質を合成先動画像に合わせるように調整する他、撮像出演者の切り抜き動画像と合成先動画像とに対し相対的な調整を行ってもよい。
【００８５】
なお、上述のフローチャートを参照して説明した各処理は、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含むものである。また、プログラムは、１のCPUにより処理されるものであっても良いし、複数のCPUによって分散処理されるものであっても良い。
【００８６】
また、上述した一連の処理（情報処理方法）は、ハードウエアにより実行することもできるし、ソフトウエアにより実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラムが記録されたプログラム記録媒体からインストールされる。
【００８７】
図９は、上述した一連の処理をプログラムにより実行するコンピュータのハードウエアの構成例を示すブロック図である。
【００８８】
コンピュータにおいて、CPU（Central Processing Unit）１０１，ROM（Read Only Memory）１０２，RAM（Random Access Memory）１０３は、バス１０４により相互に接続されている。
【００８９】
バス１０４には、さらに、入出力インタフェース１０５が接続されている。入出力インタフェース１０５には、キーボード、マウス、マイクロホンなどよりなる入力部１０６、ディスプレイ、スピーカなどよりなる出力部１０７、ハードディスクや不揮発性のメモリなどよりなる記憶部１０８、ネットワークインタフェースなどよりなる通信部１０９、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア１１１を駆動するドライブ１１０が接続されている。
【００９０】
以上のように構成されるコンピュータでは、CPU１０１が、例えば、記憶部１０８に記憶されているプログラムを、入出力インタフェース１０５及びバス１０４を介して、RAM１０３にロードして実行することにより、上述した一連の処理が行われる。
【００９１】
コンピュータ（CPU１０１）が実行するプログラムは、例えば、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)等）、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア１１１に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供される。
【００９２】
そして、プログラムは、リムーバブルメディア１１１をドライブ１１０に装着することにより、入出力インタフェース１０５を介して、記憶部１０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部１０９で受信し、記憶部１０８にインストールすることができる。その他、プログラムは、ROM１０２や記憶部１０８に、あらかじめインストールしておくことができる。
【００９３】
なお、本技術は以下のような構成も取ることができる。
（１）
第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、前記第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる画像解析における解析結果に基づいて、前記第１の動画像と前記第２の動画像とを合成する合成条件を調整する調整部と
を備える情報処理装置。
（２）
前記画像解析処理部は、前記第２の動画像に写されている第２の被写体の位置を前記解析結果とする画像解析を行い、
前記調整部は、前記第２の動画像における前記第２の被写体の位置に基づいて、前記第１の被写体が前記第２の被写体に重なることを回避して、前記第１の動画像を前記第２の動画像に合成する合成位置を前記合成条件として調整する
上記（１）に記載の情報処理装置。
（３）
前記画像解析処理部は、前記第２の動画像に写されている第２の被写体の大きさを前記解析結果とする画像解析を行い、
前記調整部は、前記第２の動画像における前記第２の被写体の大きさに基づいて、前記第２の動画像に対する前記第１の動画像の大きさを前記合成条件として調整する
上記（１）または（２）に記載の情報処理装置。
（４）
前記画像解析処理部は、前記第１の被写体として前記第１の動画像に写されている第１の人物の顔の大きさ、および、前記第２の被写体として前記第２の動画像に写されている第２の人物の顔の大きさを前記解析結果とする画像解析を行い、
前記調整部は、前記第１の人物の顔の大きさが前記第２の人物の顔の大きさと略同一となるように前記合成条件を調整する
上記（３）に記載の情報処理装置。
（５）
前記画像解析処理部は、前記第１の被写体として前記第１の動画像に写されている第１の人物の顔の大きさ、および、前記第２の被写体として前記第２の動画像に写されている所定の物体の大きさを前記解析結果とする画像解析を行い、
前記調整部は、前記第１の人物の顔の大きさと前記物体の大きさとの比較結果に基づいて前記合成条件を調整する
上記（３）に記載の情報処理装置。
（６）
前記画像解析処理部は、前記第１の被写体の画質、および、前記第２の動画像に写されている第２の被写体の画質を前記解析結果とする画像解析を行い、
前記調整部は、前記第１の被写体の画質と前記第２の被写体の画質とを前記合成条件として調整する
上記（１）から（５）までのいずれかに記載の情報処理装置。
（７）
前記画像解析処理部は、前記第１の被写体における色の性質、および、前記第２の動画像に写されている第２の被写体における色の性質を前記解析結果とする画像解析を行い、
前記調整部は、前記第１の被写体における色の性質と前記第２の被写体における色の性質とを前記合成条件として調整する
上記（１）から（６）までのいずれかに記載の情報処理装置。
（８）
前記色の性質は、明度であり、
前記調整部は、前記第１の被写体の明度と前記第２の被写体の明度とを前記合成条件として調整する
上記（７）に記載の情報処理装置。
（９）
前記色の性質は、彩度であり、
前記調整部は、前記第１の被写体の彩度と前記第２の被写体の彩度とを前記合成条件として調整する
上記（７）または（８）に記載の情報処理装置。
（１０）
前記色の性質は、色相であり、
前記調整部は、前記第１の被写体の色相と前記第２の被写体の色相とを前記合成条件として調整する
上記（７）から（９）までのいずれかに記載の情報処理装置。
（１１）
前記第１の被写体が撮像された撮像動画像が供給されるのに応じて逐次的に、前記画像解析処理部による画像解析および前記調整部による合成条件の調整が行われ、前記第１の動画像と前記第２の動画像とが合成された合成動画像が生成される
上記（１）から（１０）までのいずれかに記載の情報処理装置。
（１２）
前記第１の被写体が撮像された撮像動画像から、前記第１の被写体が写された領域を切り抜く画像処理を行い、前記第１の動画像を生成する切り抜き処理部
をさらに備える上記（１）から（１１）までのいずれかに記載の情報処理装置。
（１３）
前記第１の動画像を前記第２の動画像に合成したときに、前記第１の被写体の身体の一部分が不足している場合、その一部分を補完する補完画像を作成する処理を行う補完画像作成処理部と、
前記補完画像作成処理部により作成された前記補完画像を、前記第２の動画像における前記第１の被写体の身体の不足している部分を隠すように合成する合成処理を行う合成処理部と
をさらに備える上記（１）から（１２）までのいずれかに記載の情報処理装置。
（１４）
前記第２の動画像に写されている物体を検出し、その検出した物体の、前記第１の被写体に対する前方または後方の位置関係を示すレイヤを設定する処理を行うレイヤ設定処理部と、
前記レイヤ設定処理部により前記第１の被写体に対して前方にレイヤが設定された前記物体が前記第１の被写体と重なる場合、前記第１の動画像を前記第２の動画像に合成した後に、前記第２の動画像から前記物体を切り抜いた動画像を合成する合成処理を行う合成処理部と
をさらに備える上記（１）から（１３）までのいずれかに記載の情報処理装置。
（１５）
前記第１の動画像と前記第２の動画像とが合成された合成動画像に対する画像解析を行った結果に基づいて、前記第１の被写体として前記第１の動画像に写されている人物に対する指示を提示する処理を行う指示処理部
をさらに備える上記（１）から（１４）までのいずれかに記載の情報処理装置。
（１６）
第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、前記第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる解析結果に基づいて、前記第１の動画像と前記第２の動画像とを合成する合成条件を調整する
ステップを含む情報処理方法。
（１７）
第１の動画像に含まれる、第１の被写体が写された領域の画像解析、および、前記第１の動画像とは異なる第２の動画像に対する画像解析のうち、少なくとも一方の画像解析により得られる解析結果に基づいて、前記第１の動画像と前記第２の動画像とを合成する合成条件を調整する
ステップを含む情報処理をコンピュータに実行させるプログラム。
【００９４】
なお、本実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
【符号の説明】
【００９５】
１１  配信システム，  １２  ネットワーク，  １３−１および１３−２  出演者側情報処理装置，  １４  配信サーバ，  １５−１乃至１５−Ｎ  視聴者側情報処理装置，  ２１  撮像部，  ２２  通信部，  ２３  ディスプレイ，  ２４  スピーカ，  ２５  画像処理部，  ３１  切り抜き部，  ３２  合成位置調整部，  ３３  レイヤ設定部，  ３４  サイズ調整部，  ３５  画質調整部，  ３６  合成処理部，  ３７  パーツ作成部，  ３８  案内部
【図１】
2016152634.tif 000003
【図２】
2016152634.tif 000004
【図３】
2016152634.tif 000005
【図４】
2016152634.tif 000006
【図５】
2016152634.tif 000007
【図６】
2016152634.tif 000008
【図７】
2016152634.tif 000009
【図８】
2016152634.tif 000010
【図９】
2016152634.tif 000011
【国際調査報告】
2016152634.tif 000012
2016152634.tif 000013
2016152634.tif 000014
2016152634.tif 000015