(57)【要約】【課題】所望の作品の１カットについて、再現率の高い合成画像を作製することができる合成画像作製システムを提供する。【解決手段】合成画像作製システムＳは、撮影部１１と、撮影予定画像を表示する表示部１２と、準画像を格納している端末側記憶部１０ａと、基準画像に対し半透明化処理を施す第１画像処理部１０ｂと、合成画像を作製する第２画像処理部１０ｃとを備える。表示部１２は、半透明化処理が施された基準画像を、撮影予定画像に重畳させて表示する。第２画像処理部１０ｃは、撮影画像に基準画像のキャラクタ画像を合成して、合成画像を作製する。【選択図】図１
2019008576.tif 000002
【特許請求の範囲】
【請求項１】
背景画像にキャラクタ画像を重畳させた合成画像を作製する合成画像作製システムであって、
撮影部と、
前記撮影部によって撮影される撮影予定画像を表示する表示部と、
前記キャラクタ画像、及び、現実の景色に基づいて作製された基準背景画像からなる基準画像を格納しているデータベースと、
前記基準画像に対し、少なくとも前記基準背景画像を半透明化する半透明化処理を施す第１画像処理部と、
前記撮影部によって撮影された撮影画像及び前記基準画像に基づいて、前記合成画像を作製する第２画像処理部とを備え、
前記表示部は、前記第１画像処理部によって半透明化処理が施された前記基準画像を、前記撮影予定画像に重畳させて表示し、
前記第２画像処理部は、前記撮影画像に前記基準画像の前記キャラクタ画像を合成して、前記合成画像を作製することを特徴とする合成画像作製システム。
【請求項２】
請求項１に記載の合成画像作製システムにおいて、
前記データベースは、前記基準画像とともに、該基準画像に対応する撮影設定情報を格納し、
前記表示部は、前記撮影設定情報を表示することを特徴とする合成画像作製システム。
【請求項３】
請求項２に記載の合成画像作製システムにおいて、
前記撮影設定情報は、前記基準背景画像の元となる前記現実の景色を撮影した際の撮影モードであることを特徴とする合成画像作製システム。
【請求項４】
請求項１〜請求項３いずれか１項に記載の合成画像作製システムにおいて、
前記合成画像に、前記基準画像に対応する所定の画像処理を施す第３画像処理部を備えていることを特徴とする合成画像作製システム。
【請求項５】
請求項４に記載の合成画像作製システムにおいて、
前記データベースは、前記基準画像とともに、該基準画像に対応するエフェクト情報を格納し、
前記第３画像処理部によって施される画像処理には、前記エフェクト情報に基づく、前記キャラクタ画像に対するエフェクトの付加が含まれていることを特徴とする合成画像作製システム。
【請求項６】
請求項４又は請求項５に記載の合成画像作製システムにおいて、
前記データベースは、前記基準画像とともに、該基準画像に対応する色調情報を格納し、
前記第３画像処理部によって施される画像処理には、前記色調情報に基づく、前記撮影画像に対する色調補正が含まれていることを特徴とする合成画像作製システム。
【請求項７】
背景画像にキャラクタ画像を重畳させた合成画像を作製する合成画像作製方法であって、
前記キャラクタ画像、及び、現実の景色に基づいて作製された基準背景画像からなる基準画像に対し、少なくとも前記基準背景画像を半透明化する半透明化処理を施す半透明化処理工程と、
撮影部によって撮影される撮影予定画像を表示する表示部に、半透明化処理の施された前記基準画像を、該撮影予定画像に重畳させて表示する重畳表示工程と、
前記撮影部が撮影画像を取得する撮影画像取得工程と、
認識された前記撮影画像に、前記基準画像の前記キャラクタ画像を合成して、前記合成画像を作製する合成画像作製工程とを備えていることを特徴とする合成画像作製方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、背景画像にキャラクタ画像を重畳させた合成画像を作製する合成画像作製システム及び合成画像作製方法に関する。
【背景技術】
【０００２】
近年、国内外におけるアニメーション、漫画等の人気上昇に伴い、それらの作品の舞台となった場所にファンが実際に訪れるという行為が注目を集めている。そして、一部の地方自治体では、その場所を観光資源として利用して、地域振興を図っている。
【０００３】
そのように作品の舞台となった場所を訪れるファンの中には、その場所で撮影を行うだけでなく、その場所で撮影した現実の画像（以下、単に「撮影画像」という。）にその作品の登場人物等（以下、「キャラクタ」という。）の画像を合成し、作品の１カットを再現した合成画像を作製したいという要望があった。
【０００４】
そのような合成画像の作製に用いられる合成画像作製システムとしては、撮影画像に予めデータベースに格納されている画像データを合成するものが知られている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平１１−１４６３１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかし、特許文献１に記載の合成画像作製システムは、撮影画像に対して装飾枠等の画像データを重畳させるものであるので、撮影画像と再現したいカットの背景との一致率（例えば、構造物同士の配置関係、撮影角度、色調等の一致率）が低かった場合、作製される合成画像は、そのカットについての再現率の低いものになってしまうという問題があった。
【０００７】
本発明は以上の点に鑑みてなされたものであり、所望の作品の１カットについて、再現率の高い合成画像を作製することができる合成画像作製システム又は合成画像作製方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明の合成画像作製システムは、
背景画像にキャラクタ画像を重畳させた合成画像を作製する合成画像作製システムであって、
撮影部と、
前記撮影部によって撮影される撮影予定画像を表示する表示部と、
前記キャラクタ画像、及び、現実の景色に基づいて作製された基準背景画像からなる基準画像を格納しているデータベースと、
前記基準画像に対し、少なくとも前記基準背景画像を半透明化する半透明化処理を施す第１画像処理部と、
前記撮影部によって撮影された撮影画像及び前記基準画像に基づいて、前記合成画像を作製する第２画像処理部とを備え、
前記表示部は、前記第１画像処理部によって半透明化処理が施された前記基準画像を、前記撮影予定画像に重畳させて表示し、
前記第２画像処理部は、前記撮影画像に前記基準画像の前記キャラクタ画像を合成して、前記合成画像を作製することを特徴とする。
【０００９】
また、上記目的を達成するために、本発明の合成画像作製方法は、
背景画像にキャラクタ画像を重畳させた合成画像を作製する合成画像作製方法であって、
前記キャラクタ画像、及び、現実の景色に基づいて作製された基準背景画像からなる基準画像に対し、少なくとも前記基準背景画像を半透明化する半透明化処理を施す半透明化処理工程と、
撮影部によって撮影される撮影予定画像を表示する表示部に、半透明化処理の施された前記基準画像を、該撮影予定画像に重畳させて表示する重畳表示工程と、
前記撮影部が撮影画像を取得する撮影画像取得工程と、
認識された前記撮影画像に、前記基準画像の前記キャラクタ画像を合成して、前記合成画像を作製する合成画像作製工程とを備えていることを特徴とする。
【００１０】
このように、本発明の合成画像作製システム及び合成画像作製方法では、表示部に、キャラクタ画像、及び、現実の景色に基づいて作製された基準背景画像からなる基準画像（すなわち、合成画像によって再現しようとしている作品の１カットの画像）に対し、少なくとも基準背景画像を半透明化する半透明化処理を施して、撮影予定画像に重畳させて表示している。
【００１１】
これにより、ユーザは、撮影予定画像を基準画像に近づけるための調整（例えば、撮影部の位置の変更、撮影設定の変更等）を直感的に行うことができるようになる。その結果、取得される撮影画像と基準画像の基準背景画像との一致率（例えば、構造物同士の配置関係（すなわち、撮影角度）、色調等の一致率）を容易に向上させることができる。
【００１２】
したがって、本発明の合成画像作製システム及び合成画像作製方法によれば、基準画像の基準背景画像との一致率の高い撮影画像を取得することができるので、その撮影画像を用いることによって、所望の作品の１カットについて、再現率の高い合成画像を作製することができる。
【００１３】
また、本発明の合成画像作製システムにおいては、
前記データベースは、前記基準画像とともに、該基準画像に対応する撮影設定情報を格納し、
前記表示部は、前記撮影設定情報を表示することが好ましい。
【００１４】
このように、基準画像に対応する撮影設定情報をデータベースに格納しておき（すなわち、予め定めておき）、その撮影設定情報を表示部に表示するように構成すると、ユーザが適切な撮影設定を容易に把握できるようになる。これにより、さらに容易に基準画像の背景との一致率の高い撮影画像を取得することができるようになる。
【００１５】
また、本発明の合成画像作製システムにおいては、撮影設定を表示する構成である場合、
前記撮影設定情報は、前記基準背景画像の元となる前記現実の景色を撮影した際の撮影モードであることが好ましい。
【００１６】
撮影設定情報としては、基準画像を参照して決定された個別の撮影設定等も含まれるが、このように予め基準背景画像の元となる現実の景色を撮影した際の撮影モードが判明している場合には、それを用いてもよい。
【００１７】
また、本発明の合成画像作製システムにおいては、
前記合成画像に、前記基準画像に対応する所定の画像処理を施す第３画像処理部を備えていることが好ましい。
【００１８】
このように、合成画像に対し、基準画像に対して施されている画像処理に対応するような画像処理を施すことができるように構成すると、作製された合成画像の再現率をさらに高めることができるようになる。
【００１９】
なお、合成画像に対して施す画像処理としては、後述するキャラクタ画像に対するアニメーション化、及び、撮影画像に対する色調補正に限定されるものではなく、音声を付加する処理等の種々の処理が含まれる。
【００２０】
また、本発明の合成画像作製システムにおいては、合成画像に画像処理を施す第３画像処理部を備えている場合、
前記データベースは、前記基準画像とともに、該基準画像に対応するエフェクト情報を格納し、
前記第３画像処理部によって施される画像処理には、前記エフェクト情報に基づく、前記キャラクタ画像に対するエフェクトの付加が含まれていることが好ましい。
【００２１】
このように、基準画像に対応するエフェクト情報に基づいて、キャラクタ画像にエフェクトを付加すると、合成画像の再現率をさらに高めることができるようになる。なお、合成画像に対して付加するエフェクトを、キャラクタ画像を連続的に変化させるエフェクト（すなわち、アニメーション化）とした場合には、複数のカットからなる作品の１シーンを再現した合成動画を得ることができるようになる。
【００２２】
また、本発明の合成画像作製システムにおいては、合成画像に画像処理を施す第３画像処理部を備えている場合、
前記データベースは、前記基準画像とともに、該基準画像に対応する色調情報を格納し、
前記第３画像処理部によって施される画像処理には、前記色調情報に基づく、前記撮影画像に対する色調補正が含まれていることが好ましい。
【００２３】
このように、基準画像に対応する色調情報に基づいて撮影画像に色調補正を施すと、基準画像の背景と撮影画像との一致率をさらに高めることができるようになるので、合成画像の再現率をさらに高めることができるようになる。具体的には、例えば、基準画像がモノクロ画像である場合には、撮影画像にモノクロ化処理を施せばよい。
【図面の簡単な説明】
【００２４】
【図１】本実施形態に係る合成画像作製システムの概略構成を示す模式図。
【図２】図１の合成画像作製システムが撮影画像を取得する際に行う処理を示すフローチャート。
【図３】図１の合成画像作製システムが合成画像を作製する際に行う処理を示すフローチャート。
【図４】図１の合成画像作製システムのデータベースに格納されている基準画像の模式図。
【図５】図３の基準画像の基準背景画像の元となる元画像を示す模式図。
【図６】図１の合成画像作製システムの携帯情報端末の表示部に、撮影時に表示される画像を示す模式図。
【図７】図１の合成画像作製システムで作製される一次合成画像を示す模式図。
【図８】図１の合成画像作製システムで作製される二次合成画像を示す模式図。
【図９】図１の合成画像作製システムで作製される三次合成画像を示す模式図。
【発明を実施するための形態】
【００２５】
以下、図面を参照して、実施形態に係る合成画像作製システムＳ、及び、その合成画像作製システムＳを用いて行われる合成画像作製方法について説明する。
【００２６】
合成画像作製システムＳは、パソコン、タブレット等である携帯端末１に実装されたハードウェア構成又はプログラムにより実現される機能によって構成されており、そのプログラムは、サーバ２からインターネット回線等を通じて、携帯端末１にダウンロードされたものである。
【００２７】
まず、図１を参照して、合成画像作製システムＳの構成について説明する。
【００２８】
合成画像作製システムＳは、合成画像（後述する一次合成画像Ｃ１、二次合成画像Ｃ２又は三次合成画像Ｃ３）を作製するための各種処理を行う処理部１０と、現実の景色を撮影するための撮影部１１と、ユーザに認識させるために各種情報及び画像を表示する表示部１２と、ユーザからの入力を受け付ける入力部１３とで構成されている。
【００２９】
撮影部１１は、携帯端末１に搭載されているカメラによって構成されている。表示部１２は、携帯端末１に搭載されているディスプレイによって構成されており、スピーカ等が併用されていてもよい。入力部１３は、携帯端末１に搭載されているタッチパネル及び各種ボタン等で構成されており、音声入力も可能となるようにマイク等が併用されていてもよい。
【００３０】
処理部１０は、携帯端末１に搭載されているＣＰＵ、ＲＡＭ、ＲＯＭ、インターフェース回路等を含む１つ又は複数の電子回路ユニットにより構成されている。
【００３１】
処理部１０は、実装されたハードウェア構成又はプログラムにより実現される機能として、複数の基準画像Ｐ１（図４参照）及び各々の基準画像Ｐ１に関連する各種データを格納している端末側記憶部１０ａ（データベース）と、画像処理を行って合成画像を作製する第１画像処理部１０ｂ、第２画像処理部１０ｃ及び第３画像処理部１０ｄとを備えている。
【００３２】
ここで、「基準画像」とは、アニメーション、漫画等の所定の作品の１カットの画像であり、その作品のキャラクタ画像（例えば、図４におけるキャラクタ画像Ｐ１ａ）、及び、基準背景画像（例えば、図４における基準背景画像Ｐ１ｂ）からなる画像である。また、ここで、「基準背景画像」とは、現実の景色（例えば、図５における元画像Ｐ２）に基づいて作製されたイラスト又はＣＧ等の画像である。
【００３３】
合成画像作製システムＳでは、所望の基準画像Ｐ１の基準背景画像Ｐ１ｂを、撮影部１１で現実の景色を撮影して取得した撮影画像Ｐ５に置き換えた画像（すなわち、撮影画像Ｐ５を背景画像とした画像）を作製するためのものである。
【００３４】
また、基準画像Ｐ１に関連する各種データには、基準画像Ｐ１の基準背景画像Ｐ１ｂと撮影画像Ｐ５との一致率を高めるために参照される情報、及び、一致率を高めるための処理に関する情報が含まれる。例えば、各種データには、各々の基準画像Ｐ１ごとに規定された撮影設定情報（例えば、撮影モード）、エフェクト情報、色調情報、使用が推奨される対物レンズの種類等が含まれる。
【００３５】
端末側記憶部１０ａは、サーバ２から携帯端末１にプログラムをダウンロードする際に、サーバ２のサーバ側記憶部２０から、複数の基準画像Ｐ１及び各々の基準画像Ｐ１に関連する各種データを取得して、格納する。
【００３６】
第１画像処理部１０ｂは、ユーザが選択した基準画像Ｐ１に対し、半透明化処理を施し、半透明化画像Ｐ３（図６において二点鎖線で示した画像）を作製する。
【００３７】
ここで、「半透明化処理」とは、基準画像Ｐ１を他の画像に重畳させた際に、少なくとも基準背景画像Ｐ１ｂ（すなわち、キャラクタ画像Ｐ１ａを除く部分）を半透明化して、半透明化した部分を透過して、他の画像を認識できるようにする処理をいう（図６参照）。そのため、キャラクタ画像Ｐ１ａに関しては、半透明化処理を行ってもよいし、行わなくてもよい。
【００３８】
第２画像処理部１０ｃは、基準画像Ｐ１からキャラクタ画像Ｐ１ａを抽出し、そのキャラクタ画像Ｐ１ａを撮影部１１による撮影画像Ｐ５に合成して、一次合成画像Ｃ１を作製する（図７参照）。
【００３９】
なお、合成するキャラクタ画像Ｐ１ａは、必ずしも基準画像Ｐ１から抽出したものでなくてもよい。例えば、基準画像Ｐ１とは独立して、その基準画像Ｐ１に対応するキャラクタ画像Ｐ１ａが予め準備されている場合には、その予め準備されているキャラクタ画像Ｐ１ａを用いて合成画像を作製してもよい。
【００４０】
第３画像処理部１０ｄは、基準画像Ｐ１に関連する各種データに含まれるエフェクト情報に基づいて、一次合成画像Ｃ１に対して所定のエフェクトを付加して、二次合成画像Ｃ２（図８参照）を作製する。また、第３画像処理部１０ｄは、基準画像Ｐ１に関連する各種データに含まれる色調情報に基づいて、二次合成画像Ｃ２に対して色調の調整を行って、三次合成画像Ｃ３（図９参照）を作製する。
【００４１】
次に、図１〜図９を参照して、合成画像作製システムＳが行う処理（すなわち、合成画像作製方法）について説明する。図２は、合成画像作製システムＳで撮影画像Ｐ５を取得する際に行われる処理を示すフローチャートである。また、図３は、合成画像作製システムＳで合成画像を作製する際に行われる処理を示すフローチャートである。
【００４２】
まず、図１、図２、図４〜図６を参照して、合成画像作製システムＳで撮影画像Ｐ５を取得する際に行われる処理について説明する。
【００４３】
撮影画像Ｐ５を撮影するに際しては、まず、表示部１２が、端末側記憶部１０ａに格納されている複数の基準画像Ｐ１のうち選択対象となる基準画像Ｐ１を取得し、その基準画像Ｐ１を表示する（図２／ＳＴＥＰ１１）。
【００４４】
各々の基準画像Ｐ１は、図４に示すように、キャラクタ画像Ｐ１ａ及び基準背景画像Ｐ１ｂからなる画像であり、アニメーション、漫画等の所定の作品の１カットの画像である。また、基準背景画像Ｐ１ｂは、図５に示す元画像Ｐ２のような現実の景色に基づいて作製されたイラスト又はＣＧ等の画像である。
【００４５】
ユーザは、表示部１２に表示されて提示された複数の基準画像Ｐ１のうちから、作製しようとしている合成画像（すなわち、再現したい１カットの画像）に対応する基準画像Ｐ１を選択し、入力部１３を介して、その基準画像Ｐ１を指定する。
【００４６】
次に、処理部１０が、選択された基準画像Ｐ１を認識するとともに、その基準画像Ｐ１に関連する各種データを、端末側記憶部１０ａから取得して、認識する（図２／ＳＴＥＰ１２）。
【００４７】
ここで、認識する各種データとしては、選択された基準画像Ｐ１の基準背景画像Ｐ１ｂの元となる現実の背景を撮影した際の撮影モードの種類等を含む撮影設定情報、後述する処理において合成画像に付加するエフェクトの種類を指定するエフェクト情報、及び、合成画像に施す色調補正に関する色調情報が含まれる。
【００４８】
次に、第１画像処理部１０ｂが、選択された基準画像Ｐ１の基準背景画像Ｐ１ｂに半透明化処理を施して、半透明化画像Ｐ３を作製する（図２／ＳＴＥＰ１３）。このＳＴＥＰ１３が、合成画像作製方法における半透明化処理工程に該当する。
【００４９】
次に、撮影部１１が、その時点で撮影を行った場合に撮影画像として取得される画像である撮影予定画像Ｐ４を取得する（図２／ＳＴＥＰ１４）。
【００５０】
次に、表示部１２が、半透明化画像Ｐ３と撮影予定画像Ｐ４とを重畳して表示する（図２／ＳＴＥＰ１５）。このＳＴＥＰ１５が、合成画像作製方法における重畳表示工程に該当する。
【００５１】
具体的には、図６に示すように、携帯端末１の表示部１２に、表示部１２の内部で固定されている半透明化画像Ｐ３と、携帯端末１の位置等によってリアルタイムで変動する撮影予定画像Ｐ４とが、重畳して表示される。また、このとき、選択された基準画像Ｐ１に関連する撮影設定情報で指定されている撮影モードが、表示部１２の推奨モード表示部１２ａに表示される。
【００５２】
ユーザは、表示部１２に表示されている半透明化画像Ｐ３、撮影予定画像Ｐ４及び推奨される撮影モードを参照しつつ、撮影予定画像Ｐ４を半透明化画像Ｐ３に近づけるための調整（例えば、携帯端末１の位置の変更、撮影設定の変更等）を行い、撮影を行う。
【００５３】
次に、撮影部１１が、ユーザが入力部１３を介して入力した指示に従って、撮影画像Ｐ５（図７参照）を取得する（図２／ＳＴＥＰ１６）。このＳＴＥＰ１６が、合成画像作製方法における撮影画像取得工程に該当する。
【００５４】
このように、合成画像作製システムＳでは、表示部１２に、キャラクタ画像Ｐ１ａ、及び、現実の景色（元画像Ｐ２）に基づいて作製された基準背景画像Ｐ１ｂからなる基準画像Ｐ１（すなわち、合成画像によって再現しようとしている作品の１カットの画像）を半透明化画像Ｐ３に変換して、撮影予定画像Ｐ４に重畳させて表示している。
【００５５】
これにより、ユーザは、撮影予定画像Ｐ４を基準画像Ｐ１に近づけるための調整を直感的に行うことができるようになっている。その結果、取得される撮影画像Ｐ５と基準画像Ｐ１の基準背景画像Ｐ１ｂとの一致率（例えば、構造物同士の配置関係（すなわち、撮影角度）、色調等の一致率）を容易に向上させることができる。
【００５６】
次に、図１、図３、図７〜図９を参照して、合成画像作製システムＳで合成画像を作製する際に行われる処理について説明する。
【００５７】
合成画像を作製するに際しては、まず、第２画像処理部１０ｃが、選択された基準画像Ｐ１から、キャラクタ画像Ｐ１ａを抽出する（図３／ＳＴＥＰ２１）。
【００５８】
次に、第２画像処理部１０ｃが、取得された撮影画像Ｐ５に抽出されたキャラクタ画像Ｐ１ａを合成して、一次合成画像Ｃ１を作製する（図３／ＳＴＥＰ２２）。このＳＴＥＰ２１が、合成画像作製方法における合成画像作製工程に該当する。
【００５９】
具体的には、第２画像処理部１０ｃは、基準画像Ｐ１の基準背景画像Ｐ１ｂに対するキャラクタ画像Ｐ１ａの配置位置を参照して、撮影画像Ｐ５に対するキャラクタ画像Ｐ１ａの配置位置を認識した後、認識された配置位置に基づいて、背景画像Ｐ５上にキャラクタ画像Ｐ１ａを配置する。
【００６０】
これにより、図７に示すように、基準画像Ｐ１（図４参照）と同様の構図を有し、基準背景画像Ｐ１ｂを撮影画像Ｐ５に置き換えた合成画像が、一次合成画像Ｃ１として作製される。
【００６１】
次に、第３画像処理部１０ｄが、選択された基準画像Ｐ１に関連する各種データに含まれるエフェクト情報を認識し、そのエフェクト情報で指定されているエフェクトを一次合成画像Ｃ１に適用して、二次合成画像Ｃ２を作製する（図３／ＳＴＥＰ２３）。
【００６２】
例えば、再現しようとする１カットに含まれるキャラクタ画像が、幽霊のようなキャラクタの画像である場合、第３画像処理部１０ｄは、一次合成画像Ｃ１のキャラクタ画像Ｐ１ａに対し、時間とともに、部分ごとに色調を変化させる処理（キャラクタ画像Ｐ１ａの下方側ほど、明るさが暗く、シャープネスが低く、透過率が高くなる処理）を行う。すなわち、キャラクタ画像Ｐ１ａそのものを連続的に変化させるエフェクトを付加する（すなわち、アニメーション化する）。
【００６３】
これにより、図８に示すように、複数のカットからなる作品の１シーンを再現した合成画像（換言すれば、合成動画）が、二次合成画像Ｃ２として作製される。
【００６４】
次に、第３画像処理部１０ｄが、選択された基準画像Ｐ１に関連する各種データに含まれる色調情報を認識し、その色調情報に含まれる色調（明るさ、コントラスト、彩度、カラーバランス等）と、二次合成画像Ｃ２の背景画像Ｐ５の色調とを比較する（図３／ＳＴＥＰ２４）。
【００６５】
比較の結果、色調の一致率が所定の閾値を超える場合（図３／ＳＴＥＰ２５でＮＯの場合）には、合成画像作製システムＳは、処理を終了する。
【００６６】
一方、比較の結果、色調の一致率が所定の閾値以下である場合（図３／ＳＴＥＰ２５でＹＥＳの場合）には、第３画像処理部１０ｄが、二次合成画像Ｃ２の色調が色調情報に含まれる色調（明るさ、コントラスト、彩度、カラーバランス等）に近づくように、二次合成画像Ｃ２の色調を補正して、三次合成画像Ｃ３を作製する（図３／ＳＴＥＰ２６）。
【００６７】
例えば、基準画像Ｐ１（すなわち、再現しようとしている１カット）が夕方の画像であり、撮影画像Ｐ５が昼間に撮影された画像であるような場合、撮影画像Ｐ５全体の明るさを下げるように色調を補正する。
【００６８】
これにより、図９に示すように、背景画像である基準画像Ｐ５の色調が再現しようとしている１カットの色調に近づけられた合成画像が、三次合成画像Ｃ３として作製される。
【００６９】
なお、本実施形態では、合成画像作製システムＳで合成画像を作製する際に行われる処理として、第２画像処理部１０ｃによるエフェクトの付加（ＳＴＥＰ２１〜ＳＴＥＰ２２の処理）を行った後、第３画像処理部１０ｄによる色調補正（ＳＴＥＰ２３〜ＳＴＥＰ２６）を示したが、本発明において、合成画像を作製する際に行われる処理は、そのような処理に限定されるものではない。
【００７０】
例えば、色調補正を行った後にエフェクトの付加を行ってもよい。また、エフェクトの付加及び色調補正のいずれか一方を省略してもよい。また、エフェクトの付加及び色調補正を省略して、一次合成画像Ｃ１を作製した段階で処理を終了してもよい。
【００７１】
以上説明したように、合成画像作製システムＳ、及び、その合成画像作製システムＳを用いて行われる合成画像作製方法によれば、撮影画像Ｐ５を取得する際に、基準画像Ｐ１の基準背景画像Ｐ１ｂとの一致率の高い撮影画像Ｐ５を取得することができる。また、その撮影画像Ｐ５を用いて作製した合成画像を作製する際に、その合成画像に対し、基準画像Ｐ１に近づけるための種々の処理（エフェクトの付加、色調補正等）が施される。
【００７２】
これにより、合成画像作製システムＳ、及び、その合成画像作製システムＳを用いて行われる合成画像作製方法によって作製された合成画像は、所望の作品の１カットについて、再現率の高いものとなる。
【００７３】
以上、図示の実施形態について説明したが、本発明はこのような形態に限られるものではない。
【００７４】
例えば、上記実施形態においては、携帯端末１のみを用いて合成画像作製システムＳが構成されている。しかし、本発明の合成画像作製システムは、携帯端末のみによって構成されるものに限定されるものではなく、有線又は無線によって接続されている複数の電子回路ユニットによって構成されていてもよい。
【００７５】
例えば、携帯端末１の撮影部１１、表示部１２に代わり、携帯端末１とは独立したデジタルカメラ等の撮影装置、ディスプレイ等の表示装置を採用してもよい。また、処理部１０の第１画像処理部１０ｂ、第２画像処理部１０ｃ及び第３画像処理部１０ｄを、携帯端末１ではなく、サーバ２に実装されたハードウェア構成又はプログラムにより実現される機能として構成してもよい。また、データベースとして、携帯端末１の端末側記憶部１０ａに代わり、サーバ２のサーバ側記憶部２０を直接用いてもよい。
【００７６】
また、上記実施形態においては、第３画像処理部１０ｄによって、キャラクタ画像Ｐ１ａに対し、エフェクトを付加してアニメーション化するとともに、背景画像とした撮影画像Ｐ５に対し、色調補正を施している。しかし、本発明の合成画像作製システムは、このような構成に限定されるものではない。
【００７７】
例えば、付加するエフェクトは、アニメーション化するためのものに限定されるものではなく、また、１種類だけに限定されるものでもない。例えば、アニメーション化とともに、音声を付加してもよい。
【００７８】
また、例えば、色調補正の種類は、基準画像で規定されている光源の位置に基づいて、撮影画像の領域ごとの明るさ、コントラスト、彩度、カラーバランス等を調整するものに限定されるものではなく、再現したいカットの再現率を高めるためのものであればよい。具体的には、再現したいカットがモノクロである場合には、背景画像に対し、モノクロ化処理を施せばよい。
【００７９】
また、上記実施形態においては、表示部１２に、半透明化画像Ｐ３及び撮影予定画像Ｐ４とともに、推奨される撮影設定として推奨される撮影モードを表示している。これは、ユーザに適切な撮影設定を容易に把握させて、取得される撮影画像Ｐ５と基準背景画像Ｐ１ｂとの一致率を高めるためである。しかし、本発明の合成画像作製システムはそのような構成に限定されるものではない。
【００８０】
例えば、撮影設定情報として撮影モードではなく、シャッタースピード、開口数等が１つ１つ具体的に規定されている場合には、それらを個別に表示してもよい。一方、基準画像とともに認識される各種データに撮影設定情報が含まれていない場合等には、表示部に推奨される撮影設定を表示しなくてもよい。
【符号の説明】
【００８１】
１…携帯端末、２…サーバ、１０…処理部、１０ａ…端末側記憶部（データベース）、１０ｂ…第１画像処理部、１０ｃ…第２画像処理部、１０ｄ…第３画像処理部、１１…撮影部、１２…表示部、１２ａ…推奨モード表示部、１３…入力部、２０…サーバ側記憶部、Ｃ１…一次合成画像、Ｃ２…二次合成画像、Ｃ３…三次合成画像、Ｐ１…基準画像、Ｐ１ａ…キャラクタ画像、Ｐ１ｂ…基準背景画像、Ｐ２…元画像、Ｐ３…半透明化画像、Ｐ４…撮影予定画像、Ｐ５…撮影画像、Ｓ…合成画像作製システム。
【図１】
2019008576.tif 000003
【図２】
2019008576.tif 000004
【図３】
2019008576.tif 000005
【図４】
2019008576.tif 000006
【図５】
2019008576.tif 000007
【図６】
2019008576.tif 000008
【図７】
2019008576.tif 000009
【図８】
2019008576.tif 000010
【図９】
2019008576.tif 000011