(57)【特許請求の範囲】
【請求項１】
予め設定された変身キャラクタの画像データにユーザ登録された人物画像を対応付けて記憶する変身役柄データ記憶手段と、
動画撮影された一連の撮影画像データを取得する撮影画像取得手段と、
この撮影画像取得手段により取得された一連の撮影画像データ中に、前記ユーザ登録された人物画像による所定の変身身振りが有るか否かを検出する登録人物身振検出手段と、
この登録人物身振検出手段により前記ユーザ登録された人物画像による所定の変身身振りが検出された場合に、当該検出された人物画像を前記変身役柄データ記憶手段により対応付け記憶されている変身キャラクタの画像データに基づき、当該人物画像と同じ姿勢の変身キャラクタの画像データにその顔部分をそのままにして置き換えた合成画像データを生成する合成画像生成手段と、
この合成画像生成手段により生成された合成画像データを出力する合成画像出力手段と、
予め設定された変身身振りデータと前記ユーザ登録された人物画像とを対応付けて記憶する変身身振データ記憶手段と、
を備え、
前記登録人物身振検出手段は、前記変身身振データ記憶手段に記憶された人物画像による対応する変身身振りが有るか否かを検出することを特徴とする合成画像出力装置。
【請求項２】
前記合成画像生成手段は、前記登録人物身振検出手段によりユーザ登録された人物画像による所定の変身身振りが検出された場合に、以後の撮影画像データについて、当該検出された人物画像を前記変身役柄データ記憶手段により対応付け記憶されている変身キャラクタの画像データに基づき、当該人物画像と同じ姿勢の変身キャラクタの画像データにその顔部分をそのままにして置き換えた合成画像データを生成することを特徴とする請求項１に記載の合成画像出力装置。
【請求項３】
前記合成画像生成手段は、前記登録人物身振検出手段によりユーザ登録された人物画像による所定の変身身振りが検出された場合に、当該人物画像と同じ姿勢の変身キャラクタの画像データに当該人物画像の顔部分をそのままにして置き換えると共に、該変身キャラクタの音声データを対応付けた合成画像データを生成する、
ことを特徴とする請求項１又は２に記載の合成画像出力装置。
【請求項４】
前記合成画像生成手段は、
前記登録人物身振検出手段によりユーザ登録された人物画像による所定の変身身振りが検出された場合に、当該人物画像に対応させて変身キャラクタを示すマークデータを付加したマーク付き撮影画像データを生成するマーク付き撮影画像生成手段を有し、
このマーク付き撮影画像生成手段により生成されたマーク付き撮影画像データに基づいて、前記変身キャラクタを示すマークデータが付加された人物画像を、当該人物画像と同じ姿勢の変身キャラクタの画像データに当該人物画像の顔部分をそのままにして置き換えると共に、該変身キャラクタの音声データを対応付けた合成画像データを生成し、
前記撮影画像取得手段による一連の撮影画像データの取得に伴い、前記マーク付き撮影画像生成手段により生成されたマーク付き撮影画像データを表示させるマーク付き撮影画像表示制御手段と、
このマーク付き撮影画像表示制御手段による前記マーク付き撮影画像データの表示制御に伴い、当該マーク付き撮影画像データのマークデータに対応付けられた変身キャラクタの音声データを出力させる音声出力制御手段と、
をさらに備えたことを特徴とする請求項１〜３のいずれか１項に記載の合成画像出力装置。
【請求項５】
コンピュータを、
予め設定された変身キャラクタの画像データにユーザ登録された人物画像を対応付けてメモリに記憶する変身役柄データ記憶手段、
動画撮影された一連の撮影画像データを取得する撮影画像取得手段、
この撮影画像取得手段により取得された一連の撮影画像データ中に、前記ユーザ登録された人物画像による所定の変身身振りが有るか否かを検出する登録人物身振検出手段、
この登録人物身振検出手段により前記ユーザ登録された人物画像による所定の変身身振りが検出された場合に、当該検出された人物画像を前記変身役柄データ記憶手段により対応付け記憶されている変身キャラクタの画像データに基づき、当該人物画像と同じ姿勢の変身キャラクタの画像データにその顔部分をそのままにして置き換えた合成画像データを生成する合成画像生成手段、
この合成画像生成手段により生成された合成画像データを出力する合成画像出力手段、
予め設定された変身身振りデータと前記ユーザ登録された人物画像とを対応付けて記憶する変身身振データ記憶手段、
として機能させ、
前記登録人物身振検出手段は、前記変身身振データ記憶手段に記憶された人物画像による対応する変身身振りが有るか否かを検出するように機能させるようにしたコンピュータ読み込み可能な合成画像出力処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画撮影された人物画像を他のキャラクタ画像に置き換えた合成画像を生成して出力するための合成画像出力装置および合成画像出力処理プログラムに関する。
【背景技術】
【０００２】
近年、特殊撮影の技術の進歩により、ミニチュア撮影、人物と背景画像の合成、コンピュータグラフィックと撮影画像の合成等により、現実にはない情景を画面上に作り出すことが可能となった。そして最近では、モーションキャプチャ技術と３Ｄ画像処理技術によって、予め動画撮影されたモデル（対象人物）の動きにそのまま対応させた任意のキャラクタ画像を動画表示させることができるようになっている。また動画にコメントを追加する画像合成もネットサービスを用いて一般に行なわれるようになってきた。
【０００３】
また従来、同一出願人において、デジタルカメラにより撮影された撮影画像に含まれる各画像部分までの距離情報に応じて、当該撮影画像から置き換え対象となる人物画像を抽出し、この抽出された対象人物画像をそのポーズ（姿勢）に応じた他のキャラクタ画像からなるまね画像に置き換え合成して表示する画像出力装置が考えられている（例えば、特許文献１参照。）。
【０００４】
また、同一出願人において、通信ネットワーク上の端末装置から送られてくる撮影画像から抽出された置き換え対象となる人物画像の姿勢を示すポーズ情報を受信し、このポーズ情報に対応した姿勢のキャラクタ画像をデータベースから読み出して前記端末装置へ送信提供する画像配信サーバも考えられている（例えば、特許文献２参照。）。
【０００５】
このような従来の画像出力装置や画像配信サーバによれば、撮影画像の中の任意の対象人物画像を他のキャラクタ画像に置き換え合成して表示あるいはプリントすることが可能となり、ユーザ本人や知人を他のキャラクタ画像に置き換えて楽しんだり、あるいは他人に見られてはいけない人物を対象に他のキャラクタ画像に置き換え偽装したりして、撮影画像を様々な状況でより効果的に利用することができる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特許第３９０１０１５号公報
【特許文献２】特許第３９１８６３２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
前記従来における撮影人物画像の他のキャラクタ画像への置き換え合成技術では、静止画、動画、何れの場合でも、その対象人物画像をそのまま置き換え合成しているだけなので、特に、動画撮影された人物画像について、特撮やアニメーションにあるように、登場人物の意志をもって対象人物を変身させるなど、一連のシーンとなるような合成画像を生成することは困難な問題がある。
【０００８】
近年、特に実写やアニメーションの映像の途中で、所定の登場人物の魔法によって他の登場人物を変身させるシーンが多用されるようになっているが、このような変身画像を生成するには、変身のための衣装・小道具・メイクの準備や撮影映像の編集等、多大な労力や専門技術が必要とされた。
【０００９】
本発明は、このような課題に鑑みなされたもので、動画撮影された人物画像について、所定の人物の意志に従って、他の人物を変身させた変身合成画像を容易に生成することが可能になる合成画像出力装置および合成画像出力処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
請求項１に記載の合成画像出力装置は、予め設定された変身キャラクタの画像データにユーザ登録された人物画像を対応付けて記憶する変身役柄データ記憶手段と、動画撮影された一連の撮影画像データを取得する撮影画像取得手段と、この撮影画像取得手段により取得された一連の撮影画像データ中に、前記ユーザ登録された人物画像による所定の変身身振りが有るか否かを検出する登録人物身振検出手段と、この登録人物身振検出手段により前記ユーザ登録された人物画像による所定の変身身振りが検出された場合に、当該検出された人物画像を前記変身役柄データ記憶手段により対応付け記憶されている変身キャラクタの画像データに基づき、当該人物画像と同じ姿勢の変身キャラクタの画像データにその顔部分をそのままにして置き換えた合成画像データを生成する合成画像生成手段と、この合成画像生成手段により生成された合成画像データを出力する合成画像出力手段と、予め設定された変身身振りデータと前記ユーザ登録された人物画像とを対応付けて記憶する変身身振データ記憶手段と、を備え、前記登録人物身振検出手段は、前記変身身振データ記憶手段に記憶された人物画像による対応する変身身振りが有るか否かを検出することを特徴としている。
【発明の効果】
【００１１】
本発明によれば、ユーザ登録された人物画像について動画撮影された際に、その人物の意志に従って、動画撮影中の人物画像を変身キャラクタに変身させた変身合成画像を容易に生成することが可能になる合成画像出力装置および合成画像出力処理プログラムを提供できる。
【図面の簡単な説明】
【００１２】
【図１】本発明の合成画像出力装置の第１実施形態に係るデジタルカメラ１０を利用した動画像の撮影状態と合成画像の生成状態を示す概念図である。
【図２】前記デジタルカメラ１０（通信端末Ａ）の電子回路の構成を示すブロック図。
【図３】前記デジタルカメラ１０の第１実施形態の変身データメモリ１４に予め記憶される変身データの内容を示す図。
【図４】前記デジタルカメラ１０の第１実施形態の特殊効果データメモリ２３Ａに予め記憶される特殊効果データの内容を示す図。
【図５】前記デジタルカメラ１０の第１実施形態の防御効果データメモリ２３Ｂに予め記憶される防御効果データの内容を示す図。
【図６】前記デジタルカメラ１０の第１実施形態の変身役柄データメモリ２４Ａに記憶される変身役柄データの内容を示す図。
【図７】本発明の合成画像出力装置に係るサーバ装置３０の電子回路の構成を示すブロック図。
【図８】前記第１実施形態の合成画像出力装置による合成画像出力処理の全体過程を示すフローチャート。
【図９】前記第１実施形態の合成画像出力処理に伴い撮影画像（Ｇ）中に存在する人物（Ｐ，Ｊ，Ｋ）の対象画像を抽出する対象画像抽出処理を示すフローチャート。
【図１０】前記第１実施形態の合成画像出力処理に伴い役柄登録された人物画像（Ｐ）に変身マーク（２４Ｍｗ）を付加する役柄変身マーク処理を示すフローチャート。
【図１１】前記第１実施形態の合成画像出力処理に伴い変身モーション（１４Ｐ）の検出された人物画像（Ｊ，Ｋ）に変身マーク（１４Ｍｕ）を付加すると共に対応音声（１４Ｓｕ）を出力するモーション変身マーク処理を示すフローチャート。
【図１２】前記第１実施形態の合成画像出力処理に伴い特殊効果モーション（２３Ｐ）の検出された人物画像（Ｐ，Ｊ，Ｋ）に特殊効果マーク（２３Ｍｕ）を付加すると共に対応音声（２３Ｓｕ）を出力する特殊効果マーク処理を示すフローチャート。
【図１３】前記第１実施形態の合成画像出力処理に伴い変身マーク（２４Ｍｗ）（１４Ｍｕ）の付加された人物画像（Ｐ）（Ｊ，Ｋ）を変身画像（２４Ｇｗ）（１４Ｇｕ）に置き換え合成すると共に対応音声（２４Ｓｗ）（１４Ｓｕ）の出力を設定する変身マーク合成処理を示すフローチャート。
【図１４】前記第１実施形態の合成画像出力処理に伴い特殊効果マーク（２３Ｍｕ）の付加された人物画像（Ｐ，Ｊ，Ｋ）の所定位置に特殊効果画像２３Ｇｕを追加合成すると共に対応音声（２３Ｓｕ）の出力を設定する特殊効果マーク合成処理を示すフローチャート。
【図１５】前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その１）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図１６】前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その２）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図１７】前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その３）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図１８】前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その４）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図１９】前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その５）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図２０】前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その６）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図２１】前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その７）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図２２】前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その８）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図２３】本発明の合成画像出力装置の第２実施形態に係るデジタルカメラ１０を利用した動画像の撮影状態と合成画像の生成状態を示す概念図。
【図２４】前記デジタルカメラ１０の第２実施形態の変身役柄データメモリ２４Ａに記憶される変身役柄データの内容を示す図。
【図２５】前記デジタルカメラ１０の第２実施形態の変身データメモリ１４に予め記憶される変身データの内容を示す図。
【図２６】前記デジタルカメラ１０の第２実施形態の特殊効果データメモリ２３Ａに予め記憶される特殊効果データの内容を示す図。
【図２７】前記デジタルカメラ１０の第２実施形態の防御効果データメモリ２３Ｂに予め記憶される防御効果データの内容を示す図。
【図２８】第２実施形態の合成画像出力処理に伴い変身モーション（１４Ｐ）の検出された人物画像（Ｊ，Ｋ）に変身マーク（２４Ｍ′）を付加すると共に対応音声（２４Ｓ′）を出力するモーション変身マーク処理を示すフローチャート。
【図２９】第２実施形態の合成画像出力処理に伴い特殊／防御効果モーション（２３Ｐ／２３′Ｐ）の検出された人物画像（Ｐ，Ｊ，Ｋ）に特殊／防御効果マーク（２３Ｍｕ／２３′Ｍｕ）を付加すると共に対応音声（２３Ｓｕ／２３′Ｓｕ）を出力する特殊効果マーク処理を示すフローチャート。
【図３０】第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その１）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図３１】第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その２）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図３２】第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その３）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図３３】第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その４）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図３４】第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その５）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図３５】第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その６）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図３６】第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その７）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【図３７】第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その８）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図。
【発明を実施するための形態】
【００１３】
以下図面により本発明の実施の形態について説明する。
【００１４】
（第１実施形態）
図１は、本発明の合成画像出力装置の第１実施形態に係るデジタルカメラ１０を利用した動画像の撮影状態と合成画像の生成状態を示す概念図である。
【００１５】
このデジタルカメラ１０は、その背面にＬＣＤ表示部１１、入力部１２、音声出力部（スピーカ）１３を備え、入力部１２の操作に応じて撮影される動画像（撮影画像）Ｇは、リアルタイムで表示部１１に表示される。
【００１６】
このデジタルカメラ１０は、主要な機能として、撮影中の動画像Ｇに含まれる人物画像（Ｐ，Ｊ，Ｋ）を抽出する機能、抽出された人物画像が予め登録された人物画像（Ｐ）であるか否かを顔画像を認識処理して識別する機能、抽出された人物画像が予め登録された人物画像（Ｐ）である場合にその登録人物画像（Ｐ）に対応付けて予め設定された役柄画像（２４Ｇｗ）のマーク（役柄変身マーク２４Ｍｗ）を付加する機能、前記役柄変身マーク２４Ｍｗの付加された人物画像（Ｐ）を同予め設定された役柄画像（２４Ｇｗ）に置き換える機能、抽出された人物画像の予め設定された身振り（モーション）を検出する機能、予め設定された身振りが検出された人物画像（Ｋ）について、予め設定された変身画像（１４Ｇｕ２）のマーク（変身マーク１４Ｍｕ２）を付加する機能、前記変身マーク１４Ｍｕの付加された人物画像（Ｋ）から顔画像（Ｋｆ）を抽出する機能、さらにこの顔画像のまま（Ｋｆ’）で顔以外の部分を同予め設定された変身画像（１４Ｇｕ２）に置き換える機能、予め登録された人物画像（Ｐ）の予め設定された身振りが検出された際に対する相手の人物画像（Ｊ）を変身画像（Ｇｋ）にする機能、そして、前記抽出された人物画像（Ｐ，Ｊ，Ｋ）の動きを捉えて前記役柄画像（２４Ｇｗ）や変身画像（１４Ｇｕ）の３Ｄ画像に変換するためのモーションキャプチャ処理機能、３Ｄ画像処理機能などを有する。
【００１７】
なお、前記顔画像認識処理、モーションキャプチャ処理、３Ｄ画像処理については、周知の画像処理技術であるためその詳細な説明を省略する。
【００１８】
このような主要な機能を有するデジタルカメラ１０を、例えば家族で利用してその男の子Ｐを死神役、妹Ｋを美少女戦士Ｂ役（主人公）、姉Ｊを美少女戦士Ａ役（脇役）とした一連のシーンを母親が動画撮影して遊ぶ場合に、当該デジタルカメラ１０において、男の子Ｐの顔画像を死神画像（役柄画像２４Ｇｗ）に対応付けて予め登録する。
【００１９】
そして、死神の鎌に見立てた棒Ｂを振って近づく男の子Ｐと、死神のモーション（身振り）によって仮面少女に変身された設定でふらふら近づく姉Ｊに遭遇して、妹Ｋが魔法スティックに見立てたペンＤを振って自己変身のためのモーション（身振り）をして美少女戦士Ｂに変身しようとする一連のシーンを、母親がデジタルカメラ１０により動画撮影する。
【００２０】
撮影中の動画像Ｇは、図１（Ａ）に示すように、リアルタイムで表示部１１に表示されると共に、本デジタルカメラ１０が有する前記各種の機能によって解析され、男の子Ｐの人物画像には、対応する死神画像（役柄画像２４Ｇｗ）を示す役柄変身マーク２４Ｍｗが付加表示され、妹Ｋの人物画像には、予め設定された身振り（モーション）が検出された時点以降、対応する美少女戦士Ｂ（変身画像１４Ｇｕ２）を示す身振変身マーク１４Ｍｕ２が付加表示される。なお、姉Ｊの人物画像には、すでに予め設定された身振り（モーション）が検出されており、美少女戦士Ａ（変身画像１４Ｇｕ１）を示す身振変身マーク１４Ｍｕ１が付加表示されるとともに、死神役として予め登録された男の子Ｐの予め設定された身振り（モーション）に応じて仮面少女に変身された仮面画像（Ｇｋ）を示す仮面マークＭｋが付加表示される。
【００２１】
これにより撮影中の母親は、男の子Ｐや妹Ｋや姉Ｊの人物画像がその役柄通りに変身処理されていることがわかり、しかも姉Ｊについては美少女戦士Ａへの変身処理からさらに仮面少女への変身処理がされていることがわかる。
【００２２】
またこの際、前記美少女戦士Ｂ（変身画像１４Ｇｕ２）と仮面付きの美少女戦士Ａ（変身画像１４Ｇｕ１）、死神画像（役柄画像２４Ｇｗ）にそれぞれ対応付けられて予め記憶されている音声データ「キュート♪キュート♪」「クックック」「ザクッ、ザクッ」が読み出され音声出力部１３から出力されることで、各役柄を演じている最中の妹Ｋや男の子Ｐや姉Ｊにあっても、自らがその役柄通りに変身処理されていることを容易に認識することができる。
【００２３】
なお、前記撮影された動画像（撮影画像）Ｇに対して役柄変身マーク２４Ｍｗや身振変身マーク１４Ｍｕが付加された動画像をマーク付き撮影画像Ｇｍと称する。
【００２４】
この後、前記一連のシーンの動画像Ｇの撮影が終了すると共にそのマーク付き撮影画像Ｇｍが生成されると、当該マーク付き撮影画像Ｇｍが前記各種の機能によって解析され、図１（Ｂ）に示すように、前記役柄変身マーク２４Ｍｗの付加された男の子Ｐの人物画像に対応する死神の役柄画像２４Ｇｗ１と、前記身振変身マーク１４Ｍｕ２の付加された妹Ｋの人物画像に対応する元の顔画像Ｋｆ’での美少女戦士Ｂの変身画像１４Ｇｕ２、前記身振変身マーク１４Ｍｕ１と仮面マークＭｋの付加された姉Ｊの人物画像に対応する仮面画像Ｇｋ付きの美少女戦士Ａの変身画像１４Ｇｕ１が、予め設定された背景画像ＢＧに合成されてなる合成動画像ＧＧが生成される。また、各変身マークに対応する音声データを対応づけて保存するようにしたので、適切な効果音がついた合成画像を容易に作成することができる。
【００２５】
これによりユーザ家族は、容易に特撮風の合成動画像ＧＧを作ることができ、当該生成された合成動画像ＧＧを表示部１１に出力表示させて見たり、外部のモニタに出力させて視聴することで、これまでにない楽しみを得ることができる。この際、予め顔画像の登録された役柄となる人物画像の人だけが予め設定された身振り（モーション）を行い検知させることで、他の人物画像を変身させた変身画像を作成することができる。また元の顔を付けて衣装を変えた変身画像を生成するようにしたので、撮影画像そのままの表情の変身画像が容易に作成できる。
【００２６】
図２は、前記デジタルカメラ１０（通信端末Ａ）の電子回路の構成を示すブロック図である。
【００２７】
このデジタルカメラ１０は、コンピュータであるＣＰＵ１６を備えている。
【００２８】
ＣＰＵ１６は、メモリ１７に予め記憶されたシステムプログラム、あるいはメモリカード  などの外部記録媒体１８からカードスロットなどの記録媒体読取部１９を介して前記メモリ１７に読み込まれたカメラ制御プログラム、あるいは通信ネットワーク（Ｎ）上のサーバ装置３０（この場合はプログラムサーバ）から電送制御部２０を介して前記メモリ１７に読み込まれたカメラ制御プログラムに従い回路各部の動作を制御する。
【００２９】
ＣＰＵ１６には、前記ＬＣＤ表示部１１、入力部１２、音声出力部１３、メモリ１７、記録媒体読取部１９、電送制御部２０が接続される他に、固体撮像素子（ＣＣＤ）や撮像光学系および距離センサや照度センサを備えた画像撮影部２ｌが接続される。
【００３０】
前記メモリ１７のプログラムメモリ２２には、本デジタルカメラ１０の全体の動作を司るシステムプログラムや撮影動作を司るカメラ制御プログラム、通信ネットワークＮ上のサーバ装置３０や外部の通信端末Ｂ（ＰＣ:personal computer）４０との通信動作を司る通信制御プログラムが記憶されると共に、前記画像撮影部２１により撮影された撮影画像Ｇに基づいて、前述したマーク付き撮影画像Ｇｍや合成画像ＧＧを生成したり出力したりするための前記各種の機能を司る画像処理プログラムが予め記憶される。
【００３１】
そして、前記プログラムメモリ２２に記憶された各種のプログラムは、入力部１２からのキー入力信号や画像撮影部２１からの撮影入力信号、電送制御部２０を介した外部機器（３０，４０）からの受信入力信号に応じて起動される。
【００３２】
また、前記メモリ１７には、変身データメモリ１４、特殊効果データメモリ２３Ａ、防御効果データメモリ２３Ｂ、変身役柄データメモリ２４Ａ、役柄別変身状態メモリ２４Ｂ、撮影画像データメモリ２５、マーク付き撮影画像データメモリ２６、合成画像データメモリ２７、およびその他の作業用データメモリなどが備えられる。
【００３３】
図３は、前記デジタルカメラ１０の第１実施形態の変身データメモリ１４に予め記憶される変身データの内容を示す図である。
【００３４】
この変身データメモリ１４は、変身モーションモデルデータ１４Ｐと変身画像データ１４Ｇｕと変身マークデータ１４Ｍｕの記憶領域を有し、変身画像データ１４Ｇｕの記憶領域には、複数種類の変身画像データ（変身キャラクタ）、その音声データおよび顔合成位置データが記憶される。例えば美少女戦士Ａの変身画像データ１４Ｇｕ１、その音声データ「レモン♪レモン♪」１４Ｓｕ１、および顔合成位置データ１４Ｆ１、美少女戦士Ｂの変身画像データ１４Ｇｕ２、その音声データ「キュート♪キュート♪」１４Ｓｕ２、および顔合成位置データ１４Ｆ２として記憶される。
【００３５】
また、変身マークデータ１４Ｍｕの記憶領域には、前記複数種類の変身画像データ１４Ｇｕ１，１４Ｇｕ２をそれぞれ簡易表現する変身マークデータ１４Ｍｕ１，１４Ｍｕ２が記憶される。
【００３６】
そして、変身モーションモデルデータ１４Ｐの記憶領域には、前記複数種類の変身画像データ１４Ｇｕ１，１４Ｇｕ２にそれぞれ変身するための一連のモーション（身振り）からなる変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃ（回転しながら両手を丸く上げていくモーション），１４Ｐ２ａ〜１４Ｐ２ｃ（回転しながらペンを持つ右手を上げていくモーション）が記憶される。なお美少女戦士Ｂの変身モーションモデルデータ１４Ｐ２ａ〜１４Ｐ２ｃには、ペンを振るモーションモデルデータ部分１４Ｐ２ａＤ〜１４Ｐ２ｃＤが含まれており、ペンの物品を持って行われた特定モーションのみが変身モーションとして検出される。このため美少女戦士Ｂ役のペンを持った人のみが美少女戦士Ｂに変身できることとなる。
【００３７】
なお、前記変身画像データ１４Ｇｕ１，１４Ｇｕ２は、様々な動きを表現した画像データそのもの、又は手足の骨格や顔の特徴点の移動データと３Ｄ画像生成用データとの組み合わせとして記憶される。また前記変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃ，１４Ｐ２ａ〜１４Ｐ２ｃは、当該変身モーションを表現した画像データそのもの、又は手足の骨格や顔の特徴点の移動データとして記憶される。
【００３８】
図４は、前記デジタルカメラ１０の第１実施形態の特殊効果データメモリ２３Ａに予め記憶される特殊効果データの内容を示す図である。
【００３９】
本実施形態の特殊効果には、相手を悩乱状態から正常状態に戻すキュア（癒し）効果２３Ｋ１，２３Ｋ２と、相手を正常状態から悩乱状態にするデス（死神）効果２３Ｋ３とがある。
【００４０】
前記特殊効果データメモリ２３Ａは、特殊効果モーションモデルデータ２３Ｐと特殊効果画像データ２３Ｇｕと効果の内容２３Ｗと特殊効果マークデータ２３Ｍｕの記憶領域を有し、特殊効果画像データ２３Ｇｕの記憶領域には、前記複数種類の変身画像データ１４Ｇｕ１，１４Ｇｕ２，２４Ｇｗ１にそれぞれ対応する特殊効果Ａ，Ｂ，Ｃについて、特殊効果画像データおよびその音声データが記憶される。例えば美少女戦士Ａ用の特殊効果画像データ２３Ｇｕ１およびその音声データ「キュアーハート」２３Ｓｕ１、美少女戦士Ｂ用の特殊効果画像データ２３Ｇｕ２およびその音声データ「キュアースター」２３Ｓｕ２、死神用の特殊効果画像データ２３Ｇｕ３およびその音声データ「デスムーン」２３Ｓｕ３として記憶される。
【００４１】
効果の内容２３Ｗの記憶領域は、効果の種類２３Ｋと効果の対象２３Ｔの記憶領域を有し、効果の種類２３Ｋの記憶領域には、美少女戦士Ａ，Ｂに対応させて相手（効果対象）を悩乱状態から正常状態に戻すキュア（癒し）効果２３Ｋ１，２３Ｋ２と、死神に対応させて相手（効果対象）を正常状態から悩乱状態にするデス（死神）効果２３Ｋ３が記憶される。
【００４２】
効果の種類２３Ｗの記憶領域の中の効果の対象２３Ｔの記憶領域には、前記特殊効果Ａ，Ｂ，Ｃについて、「特殊効果が出る相手」として、例えば「特殊効果モーションを向けた相手」２３Ｔ１、「周辺の敵すべて」２３Ｔ２、「周辺の敵すべて」２３Ｔ３が記憶される。ここで周辺の敵とは、美少女戦士Ａ、美少女戦士Ｂに対しては、死神、仮面付（悩乱状態）の美少女戦士をいう。逆に死神、仮面付（悩乱状態）の美少女戦士に対しては、正常な美少女戦士Ａ、美少女戦士Ｂをいう。
【００４３】
また、特殊効果マークデータ２３Ｍｕの記憶領域には、前記複数種類の特殊効果画像データ２３Ｇｕ１，２３Ｇｕ２，２３Ｇｕ３をそれぞれ簡易表現する特殊効果マークデータ２３Ｍｕ１，２３Ｍｕ２，２３Ｍｕ３が記憶される。そして、特殊効果モーションモデルデータ２３Ｐの記憶領域には、前記複数種類の特殊効果画像データ２３Ｇｕ１，２３Ｇｕ２，２３Ｇｕ３を、それぞれ対応する変身画像データ１４Ｇｕ１，１４Ｇｕ２，２３Ｇｗの所定の位置から発生させて付加するための一連のモーション（身振り）からなる特殊効果モーションモデルデータ２３Ｐ１ａ〜２３Ｐ１ｃ（両腕を左右に離した状態から両手を手前で合わせて特殊効果を与える相手に向けて突き出すモーション），２３Ｐ２ａ〜２３Ｐ２ｃ（左手を腰につけて右手でペンを持ち頭上でくるくる回すモーション），２３Ｐ３ａ〜２３Ｐ３ｃ（右手で棒を前方に振り下ろすモーション）が記憶される。なお美少女戦士Ｂの特殊効果モーションモデルデータ２３Ｐ２ａ〜２３Ｐ２ｃには、ペンを振るモーションモデルデータ部分２３Ｐ２ａＤ〜２３Ｐ２ｃＤが含まれている。このため、ペンの物品を持って行われた特定モーションのみが特殊効果モーションとして検出されるので、美少女戦士Ｂ役のペンを持った人のみが美少女戦士Ｂの特殊効果を出せることとなる。
【００４４】
なお、前記特殊効果画像データ２３Ｇｕ１，２３Ｇｕ２，２３Ｇｕ３は、画像データそのもの、又は３Ｄ画像生成用データとして記憶される。また前記特殊効果モーションモデルデータ２３Ｐ１ａ〜２３Ｐ１ｃ，２３Ｐ２ａ〜２３Ｐ２ｃ，２３Ｐ３ａ〜２３Ｐ３ｃは、当該特殊効果モーションを表現した画像データそのもの、又は手足の骨格や顔の特徴点の移動データとして記憶される。
【００４５】
図５は、前記デジタルカメラ１０の第１実施形態の防御効果データメモリ２３Ｂに予め記憶される防御効果データの内容を示す図である。
【００４６】
防御効果は、相手から受けた特殊効果を無効化する効果である。例えば相手の特殊効果モーションによって、「キュア効果」２３Ｋ１，２３Ｋ２や、デス効果２３Ｋ３等をされた人が、この防御効果モーションを行うことにより、相手の特殊効果を防御して、無効化するものである。
【００４７】
この防御効果データメモリ２３Ｂは、防御効果モーションモデルデータ２３'Ｐと防御効果画像データ２３'Ｇｕと防御効果マークデータ２３'Ｍｕの記憶領域を有し、防御効果画像データ２３'Ｇｕの記憶領域には、防御効果Ａ，Ｂについて、防御効果画像データおよびその音声データが記憶される。例えば死神Ｐ用のデス効果２３Ｋ３を無効にする防御効果画像データ２３'Ｇｕ１およびその音声データ「バキン」２３'Ｓｕ１、美少女戦士Ａ用のキュア効果２３Ｋ１を無効にする防御効果画像データ２３'Ｇｕ２およびその音声データ「パーン」２３'Ｓｕ２として記憶される。また、防御効果マークデータ２３'Ｍｕの記憶領域には、前記複数種類の防御効果画像データ２３'Ｇｕ１，２３'Ｇｕ２をそれぞれ簡易表現する防御効果マークデータ２３'Ｍｕ１，２３'Ｍｕ２が記憶される。そして、防御効果モーションモデルデータ２３'Ｐの記憶領域には、前記特殊効果画像データ２３Ｇｕ１，２３Ｇｕ３をそれぞれ対応する変身画像データ２４Ｇｗ１，１４Ｇｕ２の所定の位置で防御するための一連のモーション（身振り）からなる防御効果モーションモデルデータ２３'Ｐ２ａ〜２３'Ｐ２ｃ（棒を突き出したり頭上手前に傾けたりするモーション），２３'Ｐ１ａ〜２３'Ｐ１ｃ（顔の前方で右手でペンを回転させるモーション）が記憶される。
【００４８】
なお美少女戦士Ｂの防御効果モーションモデルデータ２３'Ｐ１ａ〜２３Ｐ１ｃには、ペンを振るモーションモデルデータ部分２３'Ｐ１ａＤ〜２３'Ｐ１ｃＤが含まれている。そして、ペンの物品を持って行われた特定モーションのみが防御効果モーションとして検出され、美少女戦士Ｂ役のペンを持った人のみが美少女戦士Ｂの防御の防御効果を出せることとなる。また死神（Ｐ）の防御効果モーションモデルデータ２３'Ｐ２ａ〜２３'Ｐ２ｃには、棒を振るモーションモデルデータ部分２３'Ｐ２ａＢ〜２３'Ｐ２ｃＢが含まれている。そして、棒の物品を持って行われた特定モーションのみが防御効果モーションとして検出され、死神役（Ｐ）の棒を持った人のみが死神役（Ｐ）の防御の防御効果を出せることとなる。
【００４９】
前記特殊効果と防御効果を用いることにより、例えば美少女戦士Ａ（Ｊ）が死神（Ｐ）に向けてキュア効果モーション２３Ｐ１ａ〜２３Ｐ１ｃを行ってキュア効果２３Ｋ１を出したり（図１７）、死神（Ｐ）が美少女戦士Ａ（Ｊ）から受けたキュア効果２３Ｋ１に対し防御効果モーション２３′Ｐ２ａ〜２３′Ｐ２ｃを行って防御効果を出し、そのキュア効果を無効化したり（図１７）、死神（Ｐ）が美少女戦士Ａ（Ｊ）に対しデス効果モーション２３Ｐ３ａ〜２３Ｐ３ｃを行ってデス効果２３Ｋ３を出し、その美少女戦士Ａ（Ｊ）を悩乱状態の仮面（Ｇｋ）付き少女に変身させたり（図１８）、美少女戦士Ｂが悩乱状態の仮面付き美少女戦士Ａ（Ｊ）と死神（Ｐ）に対しキュア効果モーション２３Ｐ２ａ〜２３Ｐ２ｃを行ってキュア効果２３Ｋ２を出し（図２１）、該美少女戦士Ａ（Ｊ）を仮面なしの正常状態に戻すと共に死神（Ｐ）を王子（Ｐ）に変身させたり（図２２）、といったシナリオを、特殊効果モーションをつけて演技するだけで実現でき、事前の準備なしに、特撮風の変身合成画像の動画を作成できることとなる。
【００５０】
図６は、前記デジタルカメラ１０の第１実施形態の変身役柄データメモリ２４Ａに記憶される変身役柄データの内容を示す図である。
【００５１】
この変身役柄データメモリ２４Ａは、ユーザ登録される変身対象画像データ２４Ｔ、変身（１）画像データ２４Ｇｗと変身（１）マークデータ２４Ｍｗ、変身（２）画像データ２４Ｇｗ′と変身（２）マークデータ２４Ｍｗ′、変身条件データ２４Ｈの記憶領域を有し、変身（１）画像データ２４Ｇｗの記憶領域には、複数種類の第１段階の変身画像データ（変身キャラクタ）およびその音声データが記憶される。
【００５２】
変身対象（顔）画像データ２４Ｔの記憶領域には、役柄別に複数種類の変身画像データ２４Ｇｗｎに変身させて置き換えるための対象となる人物の顔画像が、例えば登録Ａ；男の子Ｐの顔画像２４Ｔ１として予めユーザ登録され記憶される。
【００５３】
これにより、登録Ａの男の子Ｐの画像に対応して前記変身（１）画像データ２４Ｇｗの記憶領域には、役柄-死神の変身（１）画像データ２４Ｇｗ１およびその音声データ「ザクッ、ザクッ」２４Ｓｗ１として記憶される。また、変身（１）マークデータ２４Ｍｗの記憶領域には、前記変身（１）画像データ２４Ｇｗ１を簡易表現する変身（１）マークデータ２４Ｍｗ１が記憶される。
【００５４】
また、変身（２）画像データ２４Ｇｗ′の記憶領域には、前記第１段階の変身（１）画像データ２４Ｇｗ１に対応する第２段階の変身（２）画像データ２４Ｇｗ１′およびその音声データ２４Ｓｗ１′が記憶される。また、変身（２）マークデータ２４Ｍｗ′の記憶領域には、前記変身（２）画像データ２４Ｇｗ１′を簡易表現する変身（２）マークデータ２４Ｍｗ１′が記憶される。さらに、変身条件データ２４Ｈの記憶領域には、前記第１段階の変身（１）画像データ２４Ｇｗ１から第２段階の変身（２）画像データ２４Ｇｗ１′に変身するための条件データ２４Ｈ１が記憶される。
【００５５】
例えば、男の子Ｐの画像に対応した第２段階の変身（２）画像データ２４Ｇｗ′として、役柄-王子の変身画像データ２４Ｇｗ１′およびその音声データ「キラリ、キラリ、」２４Ｓｗ１′が設定されている。そして、変身条件データ２４Ｈ１として「美少女戦士Ｂのキュア効果」が設定されている。
【００５６】
また、前記図２における役柄別変身状態メモリ２４Ｂには、前記変身役柄データメモリ２４Ａに登録された登録者（登録Ａ〜登録Ｄ）についての現時点での変身状態（変身（１）又は変身（２））を記憶しており、初期状態では、変身（１）を記憶している。各役柄別の変身条件２４Ｈが満たされた時点（例えば、登録Ａでは「美少女戦士Ｂのキュア効果２３Ｋ２が検出された後」）で、この役柄別の変身状態が「変身（２）」に変更して記憶される。なお本第１実施形態では、役柄の（登録Ｂ〜登録Ｄ）は、未登録となっている。
【００５７】
なお、前記変身（１）（２）画像データ２４Ｇｗ，２４Ｇｗ′は、様々な動きを表現した画像データそのもの、又は手足の骨格や顔の特徴点の移動データと３Ｄ画像生成用データとの組み合わせとして記憶される。
【００５８】
撮影画像データメモリ２５には、画像撮影部２１により静止画または動画撮影されて入力された撮影画像データＧが記憶される。
【００５９】
マーク付き撮影画像データメモリ２６には、前記撮影画像データメモリ２５に動画撮影されて記憶された撮影画像データＧに基づき、前記画像処理プログラムに従い撮影にリアルタイムで生成されたマーク付き撮影画像データＧｍ（図１（Ａ）参照）が順次記憶される。
【００６０】
合成画像データメモリ２７には、前記マーク付き撮影画像データメモリ２６に生成記憶されたマーク付き撮影画像データＧｍに基づき、前記画像処理プログラムに従い生成された合成画像データＧＧ（図１（Ｂ）参照）が記憶される。
【００６１】
なお、前記構成のデジタルカメラ１０は、当該デジタルカメラ１０自体により動画撮影される撮影画像データＧに基づいて、前記マーク付き撮影画像データＧｍ（図１（Ａ）参照）をリアルタイムに生成表示し、この後に当該マーク付き撮影画像データＧｍから前記合成画像データＧＧ（図１（Ｂ）参照）を生成して表示あるいは外部に出力するものである。
【００６２】
これに対し、前記デジタルカメラ１０が有する撮影機能以外の前記動画撮影された撮影画像データＧからマーク付き撮影画像データＧｍ（図１（Ａ）参照）を生成し、このマーク付き撮影画像データＧｍから合成画像データＧＧ（図１（Ｂ）参照）を生成するための各種の機能を、通信ネットワークＮ上のサーバ装置３０に備えさせ、通信機能付きのデジタルカメラ（通信端末Ａ）１０′やＰＣ（通信端末Ｂ）４０から転送された動画撮影データＧに基づき、当該サーバ装置３０が前記マーク付き撮影画像データＧｍおよび合成画像データＧＧを生成し、前記各通信端末（Ａ）１０′，（Ｂ）４０に応答配信してサービスを提供する構成としてもよい。
【００６３】
図７は、本発明の合成画像出力装置に係るサーバ装置３０の電子回路の構成を示すブロック図である。
【００６４】
このサーバ装置３０は、コンピュータであるＣＰＵ３１を備えている。
【００６５】
ＣＰＵ３１は、メモリ３２に予め記憶されたシステムプログラム、あるいはＣＤ−ＲＯＭなどの外部記録媒体３３から光ディスクドライブなどの記録媒体読取部３４を介して前記メモリ３２に読み込まれたサーバ制御プログラムに従い回路各部の動作を制御する。
【００６６】
ＣＰＵ３１には、前記メモリ３２、記録媒体読取部３４が接続される他に、通信ネットワークＮ上の通信端末Ａ（デジタルカメラ）１０′や通信端末Ｂ（ＰＣ）４０との間でデータの電送制御を行うための電送制御部３５、キーボード・マウスなどの入力部３６、ＬＣＤ表示部３７が接続される。
【００６７】
前記メモリ３２のプログラムメモリ３２Ａには、本サーバ装置３０の全体の動作を司るシステムプログラム、通信ネットワークＮ上の各通信端末Ａ（デジタルカメラ）１０′や通信端末Ｂ（ＰＣ）４０との通信動作を司る通信制御プログラムが記憶されると共に、当該外部の各通信端末Ａ１０′，Ｂ４０から転送された動画撮影画像データＧに基づいて、前述したデジタルカメラ１０と同様にマーク付き撮影画像Ｇｍや合成画像ＧＧを生成したり出力（配信）したりするための前記図１を参照して説明した各種の機能を司る画像処理プログラムが予め記憶される。
【００６８】
そして、前記プログラムメモリ３２Ａに記憶された各種のプログラムは、入力部３６からの入力信号、電送制御部３５を介した外部の各通信端末Ａ１０′，Ｂ４０からの受信入力信号に応じて起動される。
【００６９】
また、前記メモリ３２には、前記図１〜図６を参照して説明したデジタルカメラ１０におけるそれと略同一のデータ内容である、変身データメモリ３２Ｂ、特殊効果データメモリ３２ＣＡ、特殊効果データメモリ３２ＣＢ、変身役柄データメモリ３２Ｄ、役柄別変身状態メモリ３２Ｅ、撮影画像データメモリ３２Ｆ、マーク付き撮影画像データメモリ３２Ｇ、合成画像データメモリ３２Ｈ、およびその他の作業用データメモリなどが備えられる。
【００７０】
これにより、サーバ装置３０では、通信ネットワークＮに接続された通信端末Ａ（デジタルカメラ）１０′や通信端末Ｂ（ＰＣ）４０から転送された動画撮影画像データＧに基づき、前記同様のマーク付き撮影画像データＧｍ（図１（Ａ）参照）および合成画像データＧＧ（図１（Ｂ）参照）を生成すると共に、前記撮影画像データＧの転送元である各通信端末Ａ１０′，Ｂ４０に応答配信してサービスを提供できる。
【００７１】
次に、前記構成の第１実施形態のデジタルカメラ１０あるいはサーバ装置３０による合成画像出力装置の動作について説明する。
【００７２】
図８は、前記第１実施形態の合成画像出力装置による合成画像出力処理の全体過程を示すフローチャートである。
【００７３】
図９は、前記第１実施形態の合成画像出力処理に伴い撮影画像（Ｇ）中に存在する人物（Ｐ，Ｊ，Ｋ）の対象画像を抽出する対象画像抽出処理を示すフローチャートである。
【００７４】
図１０は、前記第１実施形態の合成画像出力処理に伴い役柄登録された人物画像（Ｐ）に変身マーク（２４Ｍｗ）を付加する役柄変身マーク処理を示すフローチャートである。
【００７５】
図１１は、前記第１実施形態の合成画像出力処理に伴い変身モーション（１４Ｐ）の検出された人物画像（Ｊ，Ｋ）に変身マーク（１４Ｍｕ）を付加すると共に対応音声（１４Ｓｕ）を出力するモーション変身マーク処理を示すフローチャートである。
【００７６】
図１２は、前記第１実施形態の合成画像出力処理に伴い特殊効果モーション（２３Ｐ）の検出された人物画像（Ｐ，Ｊ，Ｋ）に特殊効果マーク（２３Ｍｕ）を付加すると共に対応音声（２３Ｓｕ）を出力する特殊効果マーク処理を示すフローチャートである。
【００７７】
図１３は、前記第１実施形態の合成画像出力処理に伴い変身マーク（２４Ｍｗ）（１４Ｍｕ）の付加された人物画像（Ｐ）（Ｊ，Ｋ）を変身画像（２４Ｇｗ）（１４Ｇｕ）に置き換え合成すると共に対応音声（２４Ｓｗ）（１４Ｓｕ）の出力を設定する変身マーク合成処理を示すフローチャートである。
【００７８】
図１４は、前記第１実施形態の合成画像出力処理に伴い特殊効果マーク（２３Ｍｕ）の付加された人物画像（Ｐ，Ｊ，Ｋ）の所定位置に特殊効果画像２３Ｇｕを追加合成すると共に対応音声（２３Ｓｕ）の出力を設定する特殊効果マーク合成処理を示すフローチャートである。
【００７９】
図１５〜図２２は、前記第１実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その１）〜（その８）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図である。
【００８０】
前記図８における合成画像出力処理のステップＳ１〜Ｓ３の処理は、前記図１５（Ａ）〜図２２（Ａ）に示すように、動画撮影される各コマの撮影画像（Ｇ）が取得されるのに伴い繰り返し実行され、前記図１５（Ｂ）〜図２２（Ｂ）に示すようなマーク付き撮影画像（Ｇｍ）が生成出力される。
【００８１】
そして、前記図８における合成画像出力処理のステップＳ４〜Ｓ７の処理は、前記図１５（Ｂ）〜図２２（Ｂ）に示すように生成された一連のマーク付き撮影画像（Ｇｍ）に基づき実行され、前記図１５（Ｃ）〜図２２（Ｃ）に示すような合成画像（ＧＧ）が生成出力される。
【００８２】
なお、ここでは前記デジタルカメラ１０（図２参照）において図８における合成画像出力処理を実行した場合を主体にして説明し、前記サーバ装置３０（図７参照）において同合成画像出力処理を実行した場合については、略同じ処理内容となるためその説明を省略する。
【００８３】
デジタルカメラ１０の画像撮影部２１により、例えば図１５（Ａ）〜図２２（Ａ）で示すように家族によって演じられる一連のシーンが撮影されると、その撮影画像Ｇ１〜Ｇ８は順次撮影画像データメモリ２５に記憶され保存され（ステップＳ１）、リアルタイムで図９における対象画像抽出処理へ移行される（ステップＳＡ）。
【００８４】
この対象画像抽出処理は、２通りの方式があり、図９（Ａ）に示す対象画像抽出処理（方式１）では、前記撮影画像データメモリ２５に順次保存される撮影画像データＧｎが作業用メモリに一時転送記憶され（ステップＡ１１）、前回の撮影画像データＧｎ−１と今回の撮影画像データＧｎとの画像の変化部分がブロック化されて抽出される（ステップＡ１２）。
【００８５】
すると、前記撮影画像データＧｎ上でブロック化された位置情報が、人物や物体である対象画像の位置情報となり、当該撮影画像データＧｎの付加情報として前記撮影画像データメモリ２５に記憶される（ステップＡ１３）。
【００８６】
一方、図９（Ｂ）に示す対象画像抽出処理（方式２）では、前記撮影画像データメモリ２５に順次保存される撮影画像データＧｎの付加情報である前記画像撮影部２１の距離センサにより取得された被写体までの距離情報が読み出され（ステップＡ２１）、その中で近距離に存在する画像部分がブロック化されて抽出される（ステップＡ２２）。
【００８７】
すると、前記撮影画像データＧｎ上でブロック化された位置情報が、人物や物体である対象画像の位置情報となり、当該撮影画像データＧｎの付加情報として前記撮影画像データメモリ２５に記憶される（ステップＡ２３）。
【００８８】
すなわち、図９（Ｂ）で示した対象画像抽出処理（方式２）は、撮影画像データＧｎの付加情報として被写体までの距離情報が必要になるため、デジタルカメラ１０での処理に適し、また、図９（Ａ）で示した対象画像抽出処理（方式１）は、逆に前記撮影画像データＧｎにおける被写体までの距離情報を必要としないので、サーバ装置３０での処理に適している。
【００８９】
このように、前記対象画像抽出処理（ステップＳＡ）により、撮影画像データＧｎの中に存在する人物画像（Ｊ，Ｐ，Ｋ）が抽出されると、図１０における役柄変身マーク処理へ移行される（ステップＳＢ）。
【００９０】
この役柄変身マーク処理では、前記対象画像抽出処理により抽出された撮影画像データＧｎの中の人物画像（Ｊ，Ｐ，Ｋ）について、前記変身役柄データメモリ２４Ａ（図６参照）にユーザ登録された変身対象（顔）画像データ２４Ｔとしての人物画像（Ｊ）が含まれるか否かが前記顔画像認識処理を用いて識別される（ステップＢ１）。
【００９１】
ここで、変身対象（顔）画像データ２４Ｔとしての男の子Ｐの顔画像２４Ｔ１を有する人物画像が含まれていないことが識別されると（ステップＢ１（Ｎｏ））、本処理を終了し、モーション変身マーク処理（ステップＳＤ）に進む。また、図１５（Ａ）〜図２２（Ａ）の撮影画像データＧ１〜Ｇ８にそれぞれ示すように、変身対象（顔）画像データ２４Ｔとしての男の子Ｐの顔画像２４Ｔ１を有する人物画像が含まれていることが識別されると（ステップＢ１（Ｙｅｓ））、役柄別変身状態メモリ２４Ｂ内の変身状態フラグが検出され、現在の男の子の人物画像Ｐに対応する登録Ａの役柄状態が検出される（ステップＢ２）。
【００９２】
そして、変身（２）の状態でない（変身（１）の状態である）と判断されると（ステップＢ２（Ｎｏ））、変身対象画像が含まれる一連の撮影画像中に、特殊効果モーション２３Ｐが検出されたか否かが判断される（ステップＢ６）。（この特殊効果については後述の特殊効果マーク処理（ステップＳＥ）で詳述する。）
例えば図１５（Ａ）に示す撮影画像Ｇ１では、特殊効果モーション２３Ｐは検出されないので（ステップＢ６（Ｎｏ））、前記変身役柄データメモリ２４Ａ（図６参照）に対応付けられて記憶されている変身（１）の死神用の変身（１）マークデータ２４Ｍｗ１が読み出されると共に、前記識別された男の子の人物画像Ｐの顔画像認識された位置に対応して付加され、図１５（Ｂ）〜図２１（Ｂ）に示すようなマーク付き撮影画像データＧｍ１〜Ｇｍ７として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ８）。
【００９３】
なお、前記登録された人物画像Ｐの顔画像の位置に対応付加される変身（１）マークデータ２４Ｍｗ１は、当該顔画像に重ねて付加されるか、または当該顔画像の近傍に付加されるかの何れであってもよい。
【００９４】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＢ４（Ｙｅｓ））、前記変身役柄データメモリ２４Ａ（図６参照）に対応付けられて記憶されている音声データ「ザクッ、ザクッ」２４Ｓｗ１が読み出され、同図１５（Ｂ）〜図２１（Ｂ）に示すように音声出力部１３から出力される（ステップＢ５）。
【００９５】
また、前記同様に現在の男の子の人物画像Ｐに対応する登録Ａの変身状態が検出され、変身（２）の状態ではない（変身（１）の状態である）と判断された場合であっても（ステップＢ２（Ｎｏ））、変身対象画像が含まれる一連の撮影画像中に、例えば図２１，図２２に示すように、特殊効果モーション２３Ｐ２が妹Ｋによって行われたことが検出された場合には（ステップＢ６（Ｙｅｓ））、役柄別変身状態メモリ２４Ｂ内の役柄状態フラグが変身（２）の状態に変更されると共に（ステップＢ７）、変身対象画像（Ｐ）に対応する位置に変身（２）マーク２４Ｍｗ１′が付加され、図２２（Ｂ）に示すようなマーク付き撮影画像データＧｍ８として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ３）。
【００９６】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＢ４（Ｙｅｓ））、前記変身役柄データメモリ２４Ａ（図６参照）に対応付けられて記憶されている変身（２）の音声データ「キラリ、キラリ」２４Ｓｗ１′が読み出され、同図２２（Ｂ）に示すように音声出力部１３から出力される（ステップＢ５）。
【００９７】
一方、現在の男の子の人物画像Ｐに対応する登録Ａの変身状態が検出され、変身（２）の状態であると判断された場合には（ステップＢ２（Ｙｅｓ））、変身対象画像に対応する位置に変身（２）マーク２４Ｍｗ１′が付加され、図２２（Ｂ）に示すようなマーク付き撮影画像データＧｍ１〜Ｇｍ８として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ３）。
【００９８】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＢ４（Ｙｅｓ））、前記変身役柄データメモリ２４Ａ（図６参照）に対応付けられて記憶されている音声データ「キラリ、キラリ」２４Ｓｗ１′が読み出され、同図２２（Ｂ）に示すように音声出力部１３から出力される（ステップＢ５）。
【００９９】
すると次に、図１１におけるモーション変身マーク処理へ移行される（ステップＳＤ）。
【０１００】
このモーション変身マーク処理では、前記対象画像抽出処理により抽出される一連の撮影画像データＧｎの中の人物画像（Ｊ，Ｐ，Ｋ）について、前記変身データメモリ１４（図３参照）に予め記憶された美少女戦士Ａの一連の変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃや美少女戦士Ｂの一連の変身モーションモデルデータ１４Ｐ２ａ〜１４Ｐ２ｃと一致する画像部分が検出されたか否か判断される。この際、美少女戦士Ｂ用の変身モーションモデルデータ１４Ｐ２ａ〜１４Ｐ２ｃには、ペンを振るモーションモデルデータ部分１４Ｐ２ａＤ〜１４Ｐ２ｃＤが含まれているので、ペンの物品を持って行われた特定モーションのみが変身モーションとして検出される。このため美少女戦士Ｂ役のペンを持った人物（Ｋ）のみが美少女戦士Ｂに変身できることとなる。（ステップＤ１）。
【０１０１】
すなわち、図１６（Ａ）の撮影画像データＧ２に示すように、前記対象画像抽出処理により抽出される一連の姉の人物画像Ｊについて、前記変身データメモリ１４（図３参照）に予め記憶された美少女戦士Ａの一連の変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃと身振りが一致する画像部分であると検出されると（ステップＤ１（Ｙｅｓ））、当該変身データメモリ１４（図３参照）に対応付けられて記憶されている美少女戦士Ａの変身マークデータ１４Ｍｕ１が読み出されると共に、前記モーション検出された姉の人物画像Ｊの顔画像認識された位置に対応して付加され、図１６（Ｂ）に示すようなマーク付き撮影画像データＧｍ２として作業用データメモリに一時保存され表示部１１に表示される（ステップＤ２）。一方、変身モーションモデルデータ１４Ｐに身振りが一致する画像部分が検出されない場合は（ステップＤ１（Ｎｏ））、本処理を終了し、図１２における特殊効果マーク処理（ステップＳＥ）へ移行される。
【０１０２】
なお、前記モーション検出された人物画像Ｊの顔画像の位置に対応付加される変身マークデータ１４Ｍｕ１は、当該顔画像に重ねて付加されるか、または当該顔画像の近傍に付加されるかの何れであってもよい。
【０１０３】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＤ３（Ｙｅｓ））、前記変身データメモリ１４（図３参照）に対応付けられて記憶されている美少女戦士Ａの音声データ「レモン♪レモン♪」１４Ｓｕ１が読み出され、同図１６（Ｂ）に示すように音声出力部１３から出力される（ステップＤ４）。
【０１０４】
また、図２０（Ａ）の撮影画像データＧ６に示すように、前記対象画像抽出処理により抽出される一連の妹の人物画像Ｋについて、前記変身データメモリ１４（図３参照）に予め記憶された美少女戦士Ｂの一連のペンを振るモーションモデルデータ部分１４Ｐ２ａＤ〜１４Ｐ２ｃＤを含む変身モーションモデルデータ１４Ｐ２ａ〜１４Ｐ２ｃと身振りが一致する画像部分であると判断された場合には（ステップＤ１（Ｙｅｓ））、当該美少女戦士Ｂ役のペンを持った人物のみが美少女戦士Ｂに変身できることとなる。これにより、変身データメモリ１４（図３参照）に対応付けられて記憶されている美少女戦士Ｂの変身マークデータ１４Ｍｕ２が読み出されると共に、前記モーション検出された妹の人物画像Ｋの顔画像認識された位置に対応して付加され、図２０（Ｂ）〜図２２（Ｂ）に示すようなマーク付き撮影画像データＧｍ６〜Ｇｍ８として作業用データメモリに一時保存され表示部１１に表示される（ステップＤ２）。
【０１０５】
なお、前記モーション検出された人物画像Ｋの顔画像の位置に対応付加される変身マークデータ１４Ｍｕ２は、当該顔画像に重ねて付加されるか、または当該顔画像の近傍に付加されるかの何れであってもよい。
【０１０６】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＤ３（Ｙｅｓ））、前記変身データメモリ１４（図３参照）に対応付けられて記憶されている美少女戦士Ｂの音声データ「キュート♪キュート♪」１４Ｓｕ２が読み出され、同図２０（Ｂ）〜図２２（Ｂ）に示すように音声出力部１３から出力される（ステップＤ４）。
【０１０７】
すると次に、図１２における特殊効果マーク処理へ移行される（ステップＳＥ）。
【０１０８】
本合成画像出力装置の実施形態における特殊効果（図４参照）には、相手を悪の状態から正常状態に変身させて戻すキュア（癒し）効果２３Ｋ１，２３Ｋ２と、相手を正常状態から悪の状態に変身させるデス（死神）効果２３Ｋ３とがある。
【０１０９】
この特殊効果マーク処理では、前記対象画像抽出処理により抽出される一連の撮影画像データＧｎの中の人物画像（Ｐ，Ｊ，Ｋ）について、前記特殊効果データメモリ２３Ａ（図４参照）に予め記憶された特殊効果Ａの一連の変身モーションモデルデータ２３Ｐ１ａ〜２３Ｐ１ｃや特殊効果Ｂの一連の変身モーションモデルデータ２３Ｐ２ａ〜２３Ｐ２ｃや特殊効果Ｃの一連の変身モーションモデルデータ２３Ｐ３ａ〜２３Ｐ３ｃと一致する画像部分が検出されたか否か判断される。この際、特殊効果Ｂや特殊効果Ｃのように、特殊効果モーションモデルデータ２３Ｐ２や２３Ｐ３にペンや棒が含まれる場合は、ペンや棒を持つ人物による一致モーションのみ特殊効果モーションとして検出される（ステップＥ１）。
【０１１０】
すなわち、図１７（Ａ）の撮影画像データＧ３に示すように、前記対象画像抽出処理により抽出される一連の姉の人物画像Ｊについて、前記特殊効果データメモリ２３Ａ（図４参照）に予め記憶された特殊効果Ａの一連の変身モーションモデルデータ２３Ｐ１ａ〜２３Ｐ１ｃと身振りが一致する画像部分であると検出されると（ステップＥ１（Ｙｅｓ））、当該特殊効果データメモリ２３Ａ（図４参照）に対応付けられて記憶されている特殊効果Ａの特殊効果マークデータ２３Ｍｕ１が読み出されると共に、前記モーション検出された姉の人物画像Ｊの所定位置（例えば画像上部から３分の１の位置）に対応して、効果の対象２３Ｔ１（特殊効果モーションを向けた相手）である前記死神Ｐの変身マークデータ２４Ｍｗ１が付加されている人物画像（男の子）Ｐの方向へ向けて付加され、図１７（Ｂ）に示すようなマーク付き撮影画像データＧｍ３として作業用データメモリに一時保存され表示部１１に表示される（ステップＥ２）。
【０１１１】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＥ３（Ｙｅｓ））、前記特殊効果データメモリ２３Ａ（図４参照）に対応付けられて記憶されている特殊効果Ａの音声データ「キュアーハート」２３Ｓｕ１が読み出され、同図１７（Ｂ）に示すように音声出力部１３から出力される（ステップＥ４）。このようにデジタルカメラ１０から特殊効果Ａの音声データ「キュアーハート」２３Ｓｕ１が出力されることで、特殊効果の処理が適切にコンピュータに実行されていることが、演技者（姉Ｊ、男の子Ｐ）により容易に認識でき、リアルな感覚で演技をすることができる。
【０１１２】
なお、前記モーション検出された人物画像Ｊの所定位置に対応付加される特殊効果マークデータ２３Ｍｕ１は、当該人物画像Ｊに重ねて付加されるか、または当該人物画像Ｊの近傍に付加されるかの何れであってもよい。これにより撮影中の母親は、姉（Ｊ）が、特殊効果モーションを行った結果、コンピュータにより特殊効果処理が適切に実行され、当該特殊効果の画像を付加した合成画像が作成されることを容易に認識できる。
【０１１３】
また、図１８（Ａ）の撮影画像データＧ４に示すように、前記対象画像抽出処理により抽出される顔画像登録された男の子の一連の人物画像Ｐについて、前記特殊効果データメモリ２３Ａ（図４参照）に予め記憶された特殊効果Ｃの一連の変身モーションモデルデータ２３Ｐ３ａ〜２３Ｐ３ｃと、棒を持つ部分（２３Ｐ３ａＢ〜２３Ｐ３ｃＢ）も含めて、身振りが一致する画像部分であると検出されると（ステップＥ１（Ｙｅｓ））、当該特殊効果データメモリ２３Ａに対応付けられて記憶されている特殊効果Ｃの特殊効果マークデータ２３Ｍｕ３が読み出されると共に、前記モーション検出された男の子の人物画像Ｐの所定位置（例えば画像上部から３分の１の位置）に対応して、効果の対象２３Ｔ３（周辺の敵すべて）である前記美少女戦士Ａの変身マークデータ１４Ｍｕ１が付加されている人物画像（姉）Ｊの方向へ向けて付加され、図１８（Ｂ）に示すようなマーク付き撮影画像データＧｍ４として作業用データメモリに一時保存され表示部１１に表示される（ステップＥ２）。
【０１１４】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＥ３（Ｙｅｓ））、前記特殊効果データメモリ２３Ａ（図４参照）に対応付けられて記憶されている特殊効果Ｃの音声データ「デスムーン」２３Ｓｕ３が読み出され、同図１８（Ｂ）に示すように音声出力部１３から出力される（ステップＥ４）。このようにデジタルカメラ１０から特殊効果Ｃの音声データ「デスムーン」２３Ｓｕ３が出力されることで、特殊効果の処理が適切にコンピュータに実行されていることが、演技者（姉Ｊ、男の子Ｐ）により容易に認識できる。
【０１１５】
また、図２１（Ａ）の撮影画像データＧ７に示すように、前記対象画像抽出処理により抽出される一連の妹の人物画像Ｋについて、前記特殊効果データメモリ２３Ａに予め記憶された特殊効果Ｂの一連の特殊効果モーションモデルデータ２３Ｐ２ａ〜２３Ｐ２ｃと、ペンを持つ部分（２３Ｐ２ａＤ〜２３Ｐ２ｃＤ）も含めて、身振りが一致する画像部分であると検出されると（ステップＥ１（Ｙｅｓ））、当該特殊効果データメモリ２３Ａ（図４参照）に対応付けられて記憶されている特殊効果Ｂの特殊効果マークデータ２３Ｍｕ２が読み出されると共に、前記モーション検出された妹の人物画像Ｋの所定位置（例えば画像上部から３分の１の位置）に対応して、効果の対象２３Ｔ２（周辺の敵すべて）である仮面マークデータＭｋ付き（悩乱状態）美少女戦士Ａの人物画像（姉）Ｊと死神の変身マークデータ２４Ｍｗ１が付加されている人物画像（男の子）Ｐの方向へ向けて付加され、図２１（Ｂ）に示すようなマーク付き撮影画像データＧｍ７として作業用データメモリに一時保存され表示部１１に表示される（ステップＥ２）。
【０１１６】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＥ３（Ｙｅｓ））、前記特殊効果データメモリ２３Ａ（図４参照）に対応付けられて記憶されている特殊効果Ｂの音声データ「キュアースター」２３Ｓｕ２が読み出され、同図２１（Ｂ）に示すように音声出力部１３から出力される（ステップＥ４）。このようにデジタルカメラ１０から特殊効果Ｂの音声データ「キュアースター」２３Ｓｕ２が出力されることで、特殊効果の処理が適切にコンピュータに実行されていることが、演技者（妹Ｋ、姉Ｊ、男の子Ｐ）により容易に認識できる。
【０１１７】
ここで、特殊効果（図４参照）には、効果の対象２３Ｔである相手を悩乱状態から正常状態に戻すキュア（癒し）効果２３Ｋ１，２３Ｋ２と、正常状態から悩乱状態にするデス（死神）効果２３Ｋ３とがあり、一方で防御効果（図５参照）は、相手から受けた特殊効果を無効化する。この特殊効果や防御効果に伴う変身処理（ステップＥ５〜Ｅ２３）について、以下で説明する。
【０１１８】
すなわち、図１７（Ｂ）のマーク付き撮影画像データＧｍ３で示したように、美少女戦士Ａの変身マークデータ１４Ｍｕ１が付加されている姉（Ｊ）の位置から特殊効果Ａ（キュア効果２３Ｋ１）に伴う特殊効果マークデータ２３Ｍｕ１が表示出力された場合において（ステップＥ１，Ｅ２）、前記特殊効果データメモリ２３Ａ（図４参照）に予め記憶された特殊効果Ａの効果の対象２３Ｔが、周辺の敵すべてではない特殊効果モーションを向けた相手２３Ｔ１であると判断されると（ステップＥ５（Ｎｏ））、当該画面（Ｇｍ３）内で特殊効果モーション２３Ｐ１を向けた相手（死神役の男の子である人物画像Ｐ）が検出され、効果の対象者として設定される（ステップＥ１２）。このように人物画像の身振り（モーション）で示した相手の人物画像を特殊効果の対象者として検出設定するようにしたので、当該特殊効果を行う演技者の思い通りの相手に、適宜、その特殊効果を出すことができ相手を変身させた合成画像を容易に作成できる。
【０１１９】
そして、前記特殊効果Ａの効果の種類２３Ｋがキュア効果２３Ｋ１であると判断されると（ステップＥ７（Ｙｅｓ））、前記検出設定された効果の対象は、仮面マークＭｋ付き美少女戦士の人物画像ではないと判断されると共に（ステップＥ１３（Ｎｏ））、死神マーク２４Ｍｗ１付きの人物画像Ｐであると判断される（ステップＥ１５（Ｙｅｓ））。
【０１２０】
そして、効果の対象である男の子（死神役）の人物画像Ｐについて、図５における防御効果モーションモデルデータ２３'Ｐ２ａ〜２３'Ｐ２ｃと、棒を持つ部分（２３'Ｐ２ａＢ〜２３'Ｐ２ｃＢ）も含めて、身振りが一致する画像部分であると検出されると（ステップＥ１６（Ｙｅｓ））、対応するハート形の特殊効果マークデータ２３Ｍｕ１の隣に、当該特殊効果が無効化されたことを示すハートが割れた形の防御効果マークデータ２３'Ｍｕ２が読み出されて付加される（ステップＥ１７）。この場合、死神役の男の子（Ｐ）の防御効果が出されたことで、当該死神の変身状態は継続されることとなる。
【０１２１】
すると、前記防御効果マークデータ２３'Ｍｕ２に対応する音声データ「パーン」２３'Ｓｕ２が読み出されて音声出力部１３から出力される（ステップＥ２２）。
【０１２２】
このように、特殊効果が無効化されたことを示す防御効果マーク２３'Ｍｕ２がマーク付き撮影画像Ｇｍ３として表示されることによりにより、カメラ画面（１１）を見て撮影している母親は、防御効果が適切に出され、特殊効果が無効化されたことを視覚的に確認できる。しかも、前記防御効果マーク２３'Ｍｕ２に対応する音声データ「パーン」２３'Ｓｕ２が出力されることにより、母親だけでなく演技者全員において、防御効果が適切に出され、特殊効果が無効化されたことを聴覚的に確認できる。
【０１２３】
また、図１８（Ｂ）のマーク付き撮影画像データＧｍ４で示したように、死神の変身マークデータ２４Ｍｗ１が付加されている顔画像登録された男の子（Ｐ）の位置から特殊効果Ｃ（デス効果２３Ｋ３）に伴う特殊効果マークデータ２３Ｍｕ３が表示出力された場合において（ステップＥ１，Ｅ２）、前記特殊効果データメモリ２３Ａ（図４参照）に予め記憶された特殊効果Ｃの効果の対象２３Ｔが、周辺の敵すべて２３Ｔ３であると判断されると（ステップＥ５（Ｙｅｓ））、当該画面（Ｇｍ４）内で敵役の相手（美少女戦士Ａ役の姉である人物画像Ｊ）が検出され、効果の対象者として設定される（ステップＥ６）。
【０１２４】
そして、前記特殊効果Ｃの効果の種類２３Ｋがデス効果２３Ｋ３であると判断されると（ステップＥ７（Ｎｏ））、前記検出設定された効果の対象は、美少女戦士の変身マークデータ１４Ｍｕ１付きであると判断される（ステップＥ８（Ｙｅｓ））。
【０１２５】
ここで、効果の対象である姉（美少女戦士Ａ役）の人物画像Ｊについて、防御効果Ａの防御効果モーション（図５参照）が検出されない場合には（ステップＥ９（Ｎｏ））、当該美少女戦士Ａに対応する変身マークデータ１４Ｍｕ１の隣に、美少女戦士Ａが悩乱状態に変身させられたことを示す仮面マークデータＭｋが付加される（ステップＥ１０）。
【０１２６】
すなわちこの場合、美少女戦士Ａ役の姉の人物画像Ｊは、変身役柄データメモリ２４Ａに予め登録された死神役の男の子の人物画像Ｐによる特殊効果Ｃのモーション２３Ｐ３ａ〜２３Ｐ３ｃに対応したデス（死神）効果によって、悩乱状態の仮面付き美少女戦士に変身させられたことになる。
【０１２７】
すると、前記仮面マークデータＭｋに対応する音声データ「クックック」Ｓｋが音声出力部１３から出力される（ステップＥ１９）。
【０１２８】
なお、前記ステップＥ９において、前記デス効果２３Ｋの対象２３Ｔ３である姉（美少女戦士Ａ役）の人物画像Ｊについて、防御効果Ａのモーションモデルデータ２３'Ｐ１ａ〜２３'Ｐ１ｃ（図５参照）と、ペンを持つ部分（２３'Ｐ１ａＤ〜２３'Ｐ１ｃＤ）も含めて、身振りが一致する画像部分であると検出されると（ステップＥ９（Ｙｅｓ））、対応する月形の特殊効果マークデータ２３Ｍｕ３の隣に、当該特殊効果が無効化されたことを示す月が割れた形の防御効果マークデータ２３'Ｍｕ１が読み出されて付加される（ステップＥ１１）。この場合、美少女戦士Ａ役の姉Ｊから防御効果が出されたことで、美少女戦士Ａのままの変身状態が継続されることとなる。
【０１２９】
すると、前記防御効果マークデータ２３'Ｍｕ１に対応する音声データ「バキン」２３'Ｓｕ１が読み出されて音声出力部１３から出力される（ステップＥ２０）。ただし、本実施形態のように、役柄上ペンを持つのは美少女戦士Ｂのみと決めている場合には、美少女戦士Ａ役の姉（Ｊ）は、ペンを持たないので前記防御効果モーション２３'Ｐ１ａ〜２３'Ｐ１ｃと一致する身振りが検出されることはなく、当該防御効果Ａを出すことはできないことになる。
【０１３０】
また、図２１（Ｂ）のマーク付き撮影画像データＧｍ７で示したように、美少女戦士Ｂの変身マークデータ１４Ｍｕ２が付加されている妹（Ｋ）の位置から特殊効果Ｂ（キュア効果２３Ｋ２）に伴う特殊効果マークデータ２３Ｍｕ２が表示出力された場合において（ステップＥ１，Ｅ２）、前記特殊効果データメモリ２３Ａ（図４参照）に予め記憶された特殊効果Ｂの効果の対象２３Ｔが、周辺の敵すべて２３Ｔ２であると判断されると（ステップＥ５（Ｙｅｓ））、当該画面（Ｇｍ７）内での敵役の相手として、悩乱した仮面Ｍｋ付きの美少女戦士Ａに変身させられている姉の人物画像Ｊと、死神役の変身マークデータ２４Ｍｗ１が付加されている男の子の人物画像Ｐとが検出され、効果の対象者として設定される（ステップＥ６）。
【０１３１】
そして、前記特殊効果Ｂの効果の種類２３Ｋ２がキュア効果であると判断されると（ステップＥ７（Ｙｅｓ））、前記検出設定された効果の対象である姉の人物画像Ｊの場合、仮面マークＭｋ付きの美少女戦士Ａであると判断される（ステップＥ１３（Ｙｅｓ））。
【０１３２】
すると、図２２（Ｂ）のマーク付き撮影画像データＧｍ８で示すように、当該仮面マークＭｋ付きの美少女戦士Ａのその仮面マークデータＭｋが削除される（ステップＥ１４）。
【０１３３】
すなわちこの場合、美少女戦士Ａ役の姉の人物画像Ｊは、美少女戦士Ｂ役の妹の人物画像Ｋによる特殊効果Ｂのモーション２３Ｐ２ａ〜２３Ｐ２ｃに対応したキュア（癒し）効果によって、仮面付きの悩乱した美少女戦士Ａから元の正常な美少女戦士Ａに戻されたことになる。
【０１３４】
そして、元の美少女戦士Ａの変身マークデータ１４Ｍｕ１に対応する音声データ１４Ｓｕ１「レモン♪レモン♪」が読み出され音声出力部１３から出力される（ステップＥ２１）。
【０１３５】
一方、前記特殊効果Ｂの効果の種類２３Ｋ２がキュア効果であると判断された際に（ステップＥ７（Ｙｅｓ））、前記検出設定された効果の対象である死神役の男の子の人物画像Ｐの場合には、死神マーク２４Ｍｗ１付きであると判断される（ステップＥ１５（Ｙｅｓ））。
【０１３６】
ここで、前記効果の対象である男の子（死神役）の人物画像Ｐについて、防御効果Ｂの防御効果モーション（図５参照）が検出されない場合には（ステップＥ１６（Ｎｏ））、図２２（Ｂ）のマーク付き撮影画像データＧｍ８で示すように、当該男の子（死神役）の人物画像Ｐから死神の変身マークデータ２４Ｍｗ１が削除されると共に、星の王子である変身（２）マークデータ２４Ｍｗ１′が付加される（ステップＥ１８）。
【０１３７】
すなわちこの場合、死神役の男の子の人物画像Ｐは、美少女戦士Ｂ役の妹の人物画像Ｋによる特殊効果Ｂのモーション２３Ｐ２ａ〜２３Ｐ２ｃに対応したキュア（癒し）効果によって、死神から元の星の王子に変身させられて戻されたことになる。
【０１３８】
そして、星の王子の変身（２）マークデータ２４Ｍｗ１′に対応する音声データ２４Ｓｗ１′「キラリ、キラリ」が読み出され音声出力部１３から出力される（ステップＥ２３）。
【０１３９】
このように、撮影画像Ｇ中の人物画像（Ｐ，Ｊ，Ｋ）による特殊効果モーション２３Ｐや防御効果モーション２３′Ｐの検出に基づいた特殊効果マーク処理（ステップＥ１〜Ｅ２３）が完了すると、前記図１５（Ｂ）〜図２２（Ｂ）で示したように、前記ステップＳＡ〜ＳＥの処理に従い作業用データメモリ上に生成されたマーク付きの連続した撮影画像データＧｍ１〜Ｇｍ８がマーク付き撮影画像データメモリ２６に記憶され保存される（ステップＳ２）。
【０１４０】
そして、画像撮影部２１からの一連の撮影画像データＧ１〜Ｇ８の撮影入力が終了したと判断されると（ステップＳ３（Ｙｅｓ））、前記マーク付き撮影画像データメモリ２６に生成保存された一連のマーク付き撮影画像データＧｍ１〜Ｇｍ８に基づく合成画像の生成処理に進むか否か判断される（ステップＳ４）。
【０１４１】
ここで、入力部１２に対する合成画像生成のためのユーザ操作に応じて、あるいは前記一連の撮影画像データの取得終了に伴い自動的に、合成画像の生成処理に進むと判断されると（ステップＳ４（Ｙｅｓ））、前記マーク付き撮影画像データメモリ２６から前記一連のマーク付き撮影画像データＧｍ１〜Ｇｍ８が作業用メモリに読み出され（ステップＳ５）、図１３における変身マーク合成処理へ移行される（ステップＳＦ）。
【０１４２】
この変身マーク合成処理では、まず、前記マーク付き撮影画像データメモリ２６から作業用メモリに読み出されたマーク付き撮影画像データＧｍ１〜Ｇｍ８について、前記変身役柄データメモリ２４Ａ（図６参照）に予め記憶されている変身マークデータ２４Ｍｗや前記変身データメモリ１４（図３参照）に予め記憶されている変身マークデータ１４Ｍｕが付加された画像が含まれているか否か判断される（ステップＦ１）。
【０１４３】
ここで、前記変身役柄データメモリ２４Ａ（図６参照）に予め記憶されている変身マークデータ２４Ｍｗや前記変身データメモリ１４（図３参照）に予め記憶されている変身マークデータ１４Ｍｕが付加された画像が含まれていないと判断された場合には（ステップＦ１（Ｎｏ））、本処理を終了し特殊効果マーク合成処理（ステップＳＨ）へ移行される。
【０１４４】
また、図１５（Ｂ）〜図２１（Ｂ）で示すように死神の変身（１）マークデータ２４Ｍｗ１が付加された画像、図２２（Ｂ）で示すように星の王子に戻った変身（２）マークデータ２４Ｍｗ１'が付加された画像、また、図１６（Ｂ）〜図２２（Ｂ）で示すように美少女戦士Ａの変身マークデータ１４Ｍｕ１が付加された画像、また、図２０（Ｂ）〜図２２（Ｂ）で示すように美少女戦士Ｂの変身マークデータ１４Ｍｕ２が付加された画像が存在すると判断された場合には（ステップＦ１（Ｙｅｓ））、当該各変身マークデータ２４Ｍｗ１，２４Ｍｗ１′，１４Ｍｕ１，１４Ｍｕ２が対応付加されている該マーク近傍の人物画像Ｐ，Ｊ，Ｋの位置が、前記対象画像抽出処理（ステップＳＡ）により撮影画像データＧｎの付加情報として得られているブロックの位置情報から特定される（ステップＦ２）。
【０１４５】
すると、前記特定された人物画像Ｐ，Ｊ，Ｋがモーションキャプチャ処理され、変身役柄データメモリ２４Ａ（図６参照）に記憶されている前記死神の変身マークデータ２４Ｍｗ１や星の王子の変身マークデータ２４Ｍｗ１′に対応するところの変身（１）画像データ２４Ｇｗ１や変身（２）画像データ２４Ｇｗ１′、変身データメモリ１４（図３参照）に記憶されている前記美少女戦士Ａ，美少女戦士Ｂの変身マークデータ１４Ｍｕ１，１４Ｍｕ２に対応するところの変身画像データ１４Ｇｕ１，１４Ｇｕ２に基づき、図１５（Ｃ）〜図２１（Ｃ）に示すように当該人物画像（男の子）Ｐと同じポーズ（姿勢）の死神の変身（１）画像データ２４Ｇｗ１、図２２（Ｃ）に示すように当該人物画像（男の子）Ｐと同じポーズ（姿勢）の星の王子の変身（２）画像データ２４Ｇｗ１′、図１６（Ｃ）〜図２２（Ｃ）に示すように当該人物画像（姉）Ｊと同じポーズ（姿勢）の美少女戦士Ａの変身画像データ１４Ｇｕ１、図２０（Ｃ）〜図２２（Ｃ）に示すように当該人物画像（妹）Ｋと同じポーズ（姿勢）の美少女戦士Ｂの変身画像データ１４Ｇｕ２にそれぞれ予め設定された背景画像ＢＧ上で置き換えられて合成される（ステップＦ３）。この際、合成画像データＧＧ１〜ＧＧ８が生成される（ステップＦ３）。
【０１４６】
すると、前記各マークデータに対応して置き換えられた変身画像データに顔合成位置データがあるか否かが判断される（ステップＦ４）。
【０１４７】
これ場合、死神の変身（１）画像データ２４Ｇｗ１に対応する顔合成位置データは記憶されてなく、ステップＦ８へ進む。また、星の王子の変身（２）画像データ２４Ｇｗ１′に対応した顔合成位置データ２４Ｆ′（図６参照）はあると判断され、また、美少女戦士Ａの変身画像データ１４Ｇｕ１に対応した顔合成位置データ１４Ｆ１（図３参照）はあると判断され、美少女戦士Ｂの変身画像データ１４Ｇｕ２に対応した顔合成位置データ１４Ｆ２（図３参照）はあると判断される（ステップＦ４（Ｙｅｓ））。
【０１４８】
すると、前記顔合成位置データ２４Ｆ′，１４Ｆ１，１４Ｆ２が読み出されて（ステップＦ５）、各対応する撮影画像Ｇｎ中の対象画像における顔画像部分（Ｐｆ，Ｊｆ，Ｋｆ）が抽出され（ステップＦ６）、この抽出された各顔画像部分（Ｐｆ，Ｊｆ，Ｋｆ）が各対応する変身画像データ２４Ｇｗ１′，１４Ｇｕ１，１４Ｇｕ２の顔合成位置（２４Ｆ′，１４Ｆ１，１４Ｆ２）に合わせてサイズ変更され（Ｐｆ′，Ｊｆ′，Ｋｆ′）、図１６（Ｃ）〜図２２（Ｃ）に示すように、当該変身キャラクタの画像データ（２４Ｇｗ１′，１４Ｇｕ１，１４Ｇｕ２）に合成される（ステップＦ７）。
【０１４９】
このように、撮影画像データＧｎから抽出された顔画像部分（Ｐｆ，Ｊｆ，Ｋｆ）を、前記顔合成位置データに対応する位置に合わせてサイズ変更し、各対応する変身キャラクタの画像データ（２４Ｇｗ１′，１４Ｇｕ１，１４Ｇｕ２）に合成するようにしたので、変身キャラクタの顔サイズに合わせて実写の顔部分が適切に合成され、実写の顔で変身キャラクタを合成表示できることとなる。
【０１５０】
このため、変身キャラクタの画像を妖精のように小さく合成表示させたり、巨人のように大きく合成表示させたりすることも容易に行うことができる。
【０１５１】
なお、前述したように、各変身画像データ（２４Ｇｗ１′，１４Ｇｕ１，１４Ｇｕ２）の顔合成位置（２４Ｆ′，１４Ｆ１，１４Ｆ２）に合わせて各対応する顔画像部分（Ｐｆ，Ｊｆ，Ｋｆ）をサイズ変更して合成するのではなく、変身画像データ（２４Ｇｗ１′，１４Ｇｕ１，１４Ｇｕ２）を、顔部分を省いた衣装部分のみの変身画像データとし、これを対応する人物画像（男の子Ｐ，姉Ｊ，妹Ｋ）に簡易に合成するようにしてもよい。
【０１５２】
次に、この変身マーク合成処理では、処理対象であるマーク付き撮影画像データＧｍｎに仮面マークデータＭｋが含まれているかが判断される（ステップＦ８）。
【０１５３】
すなわち、前記図１８（Ｂ）〜図２１（Ｂ）で示したマーク付き撮影画像データＧｍ４〜Ｇｍ７のように、美少女戦士Ａ役の姉の人物画像Ｊに対して仮面マークデータＭｋが付加されていると判断された場合には（ステップＦ８（Ｙｅｓ））、図１８（Ｃ）〜図２１（Ｃ）で示すように、同姉の人物画像Ｊにおける顔画像部分の顔合成位置１４Ｆ１に合わせて仮面画像Ｇｋが合成された合成画像ＧＧが生成される（ステップＦ９）。
【０１５４】
すると、前記各変身画像データ（２４Ｇｗ１′，１４Ｇｕ１，１４Ｇｕ２）に対応付けられて変身役柄データメモリ２４Ａ（図６参照）に記憶されている死神の音声データ「ザクッ、ザクッ」２４Ｓｗ１、星の王子の音声データ「キラリ、キラリ」２４Ｓｗ１′、変身データメモリ１４（図３参照）に記憶されている美少女戦士Ａ，美少女戦士Ｂの音声データ「レモン♪レモン♪」１４Ｓｕ１，「キュート♪キュート♪」１４Ｓｕ２が読み出され、前記図１５（Ｃ）〜図２２（Ｃ）に示すように生成された合成画像ＧＧ１〜ＧＧ８に対応付けられて保存される（ステップＦ１０）。ここで、前記美少女戦士Ａ役の姉の人物画像Ｊや美少女戦士Ｂ役の妹の人物画像Ｋに対して仮面マークデータＭｋが付加されている場合には、当該美少女戦士Ａ，美少女戦士Ｂの前記音声データ「レモン♪レモン♪」１４Ｓｕ１，「キュート♪キュート♪」１４Ｓｕ２に替えて、仮面マークデータＭｋに対応する音声データ「クックック」Ｓｋが同合成画像ＧＧ１〜ＧＧ８に対応付けられて保存される。（ステップＦ１０）。
【０１５５】
なお、処理対象であるマーク付き撮影画像データＧｍｎに仮面マークデータＭｋが含まれていないと判断された場合には（ステップＦ８（Ｎｏ））、前記仮面画像Ｇｋの合成処理および音声設定処理（ステップＦ９，Ｆ１０）をスキップする。
【０１５６】
すると次に、図１４における特殊効果マーク合成処理へ移行される（ステップＳＨ）。
【０１５７】
この特殊効果マーク合成処理では、まず、前記マーク付き撮影画像データメモリ２６から作業用メモリに読み出されたマーク付き撮影画像データＧｍ１〜Ｇｍ８について、前記特殊効果データメモリ２３Ａ（図４参照）に予め記憶されている特殊効果マークデータ２３Ｍｕまたは防御効果データメモリ２３Ｂ（図５参照）に予め記憶されている防御効果マークデータ２３′Ｍｕが付加された画像データＧｍｎが含まれているか否か判断される（ステップＨ１）。
【０１５８】
ここで、図１５（Ｂ），図１６（Ｂ），図１９（Ｂ），図２０（Ｂ）で示すように、特殊効果マークデータ２３Ｍｕや防御効果マークデータ２３′Ｍｕが付加された画像データＧｍが存在しないと判断された場合には（ステップＨ１（Ｎｏ））、処理を終了し、ステップＳ６に進む。
【０１５９】
一方、図１７（Ｂ），図１８（Ｂ），図２１（Ｂ），図２２（Ｂ）で示すように、特殊効果Ａに対応する特殊効果マークデータ２３Ｍｕ１、防御効果Ｂに対応する防御効果マークデータ２３′Ｍｕ２、特殊効果Ｃに対応する特殊効果マークデータ２３Ｍｕ３、特殊効果Ｂに対応する特殊効果マークデータ２３Ｍｕ２が存在すると判断された場合には（ステップＨ１（Ｙｅｓ））、当該特殊効果マークデータ２３Ｍｕ１，２３Ｍｕ２，２３Ｍｕ３、または防御効果マークデータ２３′Ｍｕ２が対応付加されている当該マーク近傍の人物画像（姉、妹、男の子）Ｊ，Ｋ，Ｐの位置が、前記対象画像抽出処理（ステップＳＡ）により撮影画像データＧｎの付加情報として得られているブロックの位置情報から特定される（ステップＨ２）。
【０１６０】
すると、前記特殊効果データメモリ２３Ａ（図４参照）の特殊効果マークデータ２３Ｍｕ１，２３Ｍｕ２，２３Ｍｕ３、または防御効果データメモリ２３Ｂ（図５参照）の防御効果マークデータ２３′Ｍｕ２に対応付けられて記憶されている特殊効果画像データ２３Ｇｕ１，２３Ｇｕ２，２３Ｇｕ３、または防御効果画像データ２３′Ｇｕ２が読み出され、前記特定された各人物画像（Ｊ，Ｋ，Ｐ）の所定位置（例えば画像上部から３分の１の位置）に対応して、敵役（相手）の変身マークデータが付加されている人物画像の方向へ向けて追加合成され、合成画像データＧＧが生成される（ステップＨ３）。
【０１６１】
例えば、図１７（Ｂ）（Ｃ）で示すように、特殊効果マークデータ２３Ｍｕ１が付加されている美少女戦士Ａ役の人物画像Ｊの腕の位置からは、その特殊効果画像データ２３Ｇｕ１が死神役の人物画像Ｐの方向へ向けて追加合成される。一方、防御効果マークデータ２３′Ｍｕ２が付加されている死神役の人物画像Ｐの腕の位置からは、その防御効果画像データ２３′Ｇｕ２が前記美少女戦士Ａ役の人物画像Ｊの方向へ向けて追加合成される。
【０１６２】
また、図１８（Ｂ）（Ｃ）で示すように、特殊効果マークデータ２３Ｍｕ３が付加されている死神役の人物画像Ｐの腕の位置からは、その特殊効果画像データ２３Ｇｕ３が前記美少女戦士Ａ役の人物画像Ｊの方向へ向けて追加合成される。
【０１６３】
また、図２１（Ｂ）（Ｃ）で示すように、特殊効果マークデータ２３Ｍｕ２が付加されている美少女戦士Ｂ役の人物画像Ｋの腕の位置からは、その特殊効果画像データ２３Ｇｕ２が悩乱した仮面付きの美少女戦士Ａ役の人物画像Ｊの方向へ向けて追加合成される（ステップＨ３）。
【０１６４】
さらに、特殊効果によっては、その特殊効果画像データ２３Ｇｕの先端部を爆発効果画像にして敵役である相手の人物画像の変身画像データに到達する位置まで延長させて追加合成するようにしてもよい（ステップＨ４）。
【０１６５】
そして、前記特殊効果データメモリ２３Ａ（図４参照）に対応付けられて記憶されている特殊効果Ａの音声データ「キュアーハート」２３Ｓｕ１、特殊効果Ｂの音声データ「キュアースター」２３Ｓｕ２、特殊効果Ｃの音声データ「デスムーン」２３Ｓｕ３が読み出され、また前記防御効果データメモリ２３Ｂ（図５参照）に対応付けられて記憶されている防御効果Ｂの音声データ「パーン」２３′Ｓｕ２が読み出され、前記図１７（Ｃ），図１８（Ｃ），図２１（Ｃ），図２２（Ｃ）に示すように生成された各合成画像ＧＧ３，ＧＧ４，ＧＧ７，ＧＧ８に対応付けられて保存される（ステップＨ５）。
【０１６６】
すると、前記図１５（Ｃ）〜図２２（Ｃ）で示したように、前記ステップＳＦ〜ＳＨの処理に従い作業用データメモリ上に生成された一連の合成画像データＧＧ１〜ＧＧ８が合成画像データメモリ２７に記憶され保存される（ステップＳ６）。
【０１６７】
そして、前記合成画像データメモリ２７に記憶された一連の合成画像データ（対応付けられた音声データを含む）ＧＧ１〜ＧＧ８が、前記図１５（Ｃ）〜図２２（Ｃ）で示すように、表示部１１により再生表示されると共に音声出力部１３により再生出力される（ステップＳ７）。なお、本合成画像出力装置がサーバ装置３０（図７参照）として構成されている場合には、前記ステップＳ１において受信された一連の撮影画像データＧ１〜Ｇ８の送信元である通信ネットワークＮ上の通信端末Ａ（デジタルカメラ）１０′や通信端末Ｂ（ＰＣ）４０に対して、前記合成画像データメモリ２７に記憶された一連の合成画像データ（対応付けられた音声データを含む）ＧＧ１〜ＧＧ８が読み出されて応答送信される（ステップＳ７）。
【０１６８】
したがって、前記構成のデジタルカメラ１０あるいはサーバ装置３０による第１実施形態の合成画像出力装置によれば、画像撮影部２１により動画撮影された一連の撮影画像データＧｎが入力されると、当該撮影画像データＧｎに含まれる人物画像（Ｐ，Ｊ，Ｋ）が抽出され、そのうちの変身役柄データメモリ２４Ａに予め顔画像により登録されている死神役の人物画像Ｐについて、当該死神の変身（１）画像データ２４Ｇｗ１に置き換えられた合成画像ＧＧ１が生成されると共に、特殊効果データメモリ２３Ａに予め設定されたデス効果２３Ｋ３の特殊効果モーション（身振り）２３Ｐ３ａ〜２３Ｐ３ｃをしているか否かが検出判断される。そして、前記撮影画像データＧ４に含まれる死神役の人物画像Ｐについて、予め設定されたデス効果２３Ｋ３の特殊効果モーション（身振り）２３Ｐ３ａ〜２３Ｐ３ｃをしていることが検出判断された場合には、当該デス効果２３Ｋ３に対応する特殊効果画像データ２３Ｇｕ３がその効果の対象２３Ｔ３として設定された美少女戦士Ａ役の人物画像Ｊの方向へ向けて画像合成されると共に、当該美少女戦士Ａ役の人物画像Ｊに仮面画像Ｇｋが付加合成されて仮面付きの美少女戦士Ａに変身させられた合成画像ＧＧ４として生成出力される。
【０１６９】
つまり、このような第１実施形態の合成画像出力装置によれば、予め顔画像により登録されている死神役の人物画像Ｐについて、予め設定されたデス効果２３Ｋ３の特殊効果モーション（身振り）２３Ｐ３ａ〜２３Ｐ３ｃをしていることが検出判断されると、当該デス効果の対象２３Ｔ３として設定された美少女戦士Ａ役の人物画像Ｊに仮面画像Ｇｋが付加合成されて仮面付きの美少女戦士Ａに変身させられた合成画像ＧＧ４として生成出力されるものである。
【０１７０】
これにより、動画撮影された撮影画像Ｇｎから抽出された人物画像（Ｐ，Ｊ，Ｋ）のうちで、予め役柄登録された男の子の人物画像Ｐによる所定の特殊効果モーション２３Ｐ３だけに応じて、当該特殊効果の対象２３Ｔ３として設定されている相手役の人物画像Ｊを変身画像に置き換えた合成画像を生成することができ、事前に定めた配役通りの登場人物がその意志を持って所定の身振り（モーション）を行うことで、特定の相手役を変身させるという特撮映画やアニメーションなどにある変身合成画像を、素人の誰でもが容易に生成することができる。そして、当該生成された合成動画像ＧＧｎを表示部１１に出力表示させて見たり、外部のモニタに出力表示させて見たりすることで、これまでにない楽しみを得ることができる。
【０１７１】
また、前記構成のデジタルカメラ１０あるいはサーバ装置３０による第１実施形態の合成画像出力装置によれば、予め死神役として登録された男の子の人物画像Ｐが撮影画像Ｇｎから検出され、その身振り（モーション）に対応した死神の変身（１）画像データ２４Ｇｗ１に前記人物画像Ｐを置き換え合成した合成画像ＧＧｎを生成した際には、前記変身役柄データメモリ２４Ａに記憶されている当該変身（１）画像データ２４Ｇｗ１の音声データ「ザクッ、ザクッ、…」２４Ｓｗ１を、前記合成画像ＧＧｎに対応付けて保存し出力させるので、容易且つよりリアルに特撮風の合成動画像ＧＧｎを作ることができる。
【０１７２】
また、前記構成のデジタルカメラ１０による第１実施形態の合成画像出力装置によれば、前記動画撮影中に表示部１１にリアルタイムに表示される撮影画像データＧｎについて、前記予め死神役として登録された男の子の人物画像Ｐが撮影画像Ｇｎから検出された際には、当該人物画像Ｐに対して死神の変身（１）画像データ２４Ｇｗ１への変身対象となったことを示す変身（１）マークデータ２４Ｍｗ１を付加したマーク付き撮影画像データＧｍｎとして表示部１１に表示させ、しかも前記変身（１）画像データ２４Ｇｗ１の音声データ「ザクッ、ザクッ、…」２４Ｓｗ１も共に音声出力部１３から出力させるので、例えば撮影操作中の家族は、被写体の人物画像（男の子）Ｐがその登録された役柄通りに変身され置き換え処理されていることを容易に認識することができ、またこれを演じている最中の被写体自身（男の子Ｐ）にあっても、自らがその登録された役柄通りに変身処理されていることを音声により容易に認識することができる。
【０１７３】
なお、前記第１実施形態の合成画像出力装置では、変身役柄データメモリ２４Ａには、死神役となる男の子の変身対象（顔）画像データ２４Ｔ１だけを予め登録し、撮影画像Ｇｎから検出された当該男の子の人物画像Ｐについては、そのまま同変身役柄データメモリ２４Ａに対応付けられて記憶された死神の変身（１）画像データ２４Ｇｗ１に置き換えた合成画像ＧＧｎを生成した。そして、他の役柄である美少女戦士ＡやＢについては変身対象の人物を予め登録することなく、撮影画像Ｇｎから抽出された人物画像の身振り（モーション）が、変身データメモリ１４に記憶された美少女戦士ＡやＢの変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃや１４Ｐ２ａ（+D）〜１４Ｐ２ｃ（+D）と一致した場合に、当該美少女戦士ＡやＢの変身画像データ１４Ｇｕ１や１４Ｇｕ２に置き換えた合成画像ＧＧｎを生成した。
【０１７４】
これに対し、次の第２実施形態の合成画像出力装置で説明するように、変身役柄データメモリ２４Ａ（図２４参照）には、死神役、美少女Ａ役、美少女Ｂ役のそれぞれについて、その変身対象（顔）画像データ２４Ｔ１，２４Ｔ２，２４Ｔ３を予め登録し、この登録された人物画像（Ｐ，Ｊ，Ｋ）だけを各対応する変身画像データ２４Ｇｗ１，２４Ｇｕ１，２４Ｇｕ２に置き換え合成する。そして、この登録された各人物画像（Ｐ，Ｊ，Ｋ）による特殊効果の（身振り）モーション２３Ｐ３ａ〜２３Ｐ３ｃ，２３Ｐ１ａ〜２３Ｐ１ｃ，２３Ｐ２ａ〜２３Ｐ２ｃ（図２６参照）を検出してその効果対象として設定された相手役の人物画像（Ｐ，Ｊ，Ｋ）を、仮面Ｇｋ付き美少女戦士Ａの変身画像データ２４Ｇｕ１′に置き換え合成したり（図３３参照）、当該仮面Ｇｋ付き美少女戦士Ａから通常の美少女戦士Ａの変身画像データ２４Ｇｕ１′に置き換え合成したり（図３７参照）、死神から星の王子様の変身画像データ２４Ｇｗ１′に置き換え合成したり（図３７参照）して、予め役柄登録された各人物だけがそれぞれその所定の身振り（モーション）によって相手役を変身させることのできる構成としてもよい。
【０１７５】
（第２実施形態）
図２３は、本発明の合成画像出力装置の第２実施形態に係るデジタルカメラ１０を利用した動画像の撮影状態と合成画像の生成状態を示す概念図である。
【０１７６】
この第２実施形態のデジタルカメラ１０でも、前記第１実施形態と同様に、各役柄を演じている人物（Ｐ，Ｊ，Ｋ）を撮影すると、同図（Ａ）に示すように、その撮影画像Ｇに含まれる各人物画像Ｐ，Ｊ，Ｋが抽出され、この抽出された人物画像Ｐ，Ｊ，Ｋがそれぞれ変身すべき役柄のキャラクタ（変身画像データ２４Ｇｗ１，２４Ｇｕ１′（＋Ｇｋ），２４Ｇｕ２′）に置き換えられることを示す変身マークデータ（２４Ｍｗ１，２４Ｍｕ１′（＋Ｍｋ）、２４Ｍｕ２′）を付加したマーク付き撮影画像Ｇｍがリアルタイムに生成されて表示部１１に表示される。
【０１７７】
すると、前記マーク付き撮影画像Ｇｍの各人物画像Ｐ，Ｊ，Ｋに付加された変身マークデータ（２４Ｍｗ１，２４Ｍｕ１′（＋Ｍｋ）、２４Ｍｕ２′）に従って、同図（Ｂ）に示すように、当該各人物画像Ｐ，Ｊ，Ｋが各対応する変身画像データ（２４Ｇｗ１，２４Ｇｕ１′（＋Ｇｋ），２４Ｇｕ２′）に置き換えられた合成画像ＧＧが生成される。
【０１７８】
これに伴い、例えば美少女戦士Ｂの変身画像データ２４Ｇｕ２′に置き換えられる人物画像Ｋの身振りについて、同図（Ａ）（Ｂ）に示すように、特殊効果（キュア効果）のモーション２３Ｐ２が一致検出されると、当該特殊効果（キュア効果）のマークデータ２３Ｍｕ２が付加されたマーク付き撮影画像Ｇｍが生成表示されると共に、このマークデータ２３Ｍｕ２に対応して特殊効果（キュア効果）の画像データ２３Ｇｕ２に置き換えられた合成画像ＧＧが生成される。
【０１７９】
すると、同図（Ｂ）（Ｃ）に示すように、前記特殊効果（キュア効果）の効果対象として設定されている仮面付き美少女戦士Ａの仮面画像Ｇｋが削除されて元の美少女戦士Ａの変身画像データ２４Ｇｕ１′に置き換えられると共に、死神である変身（１）画像データ２４Ｇｗ１が星の王子である変身（２）画像データ２４Ｇｗ１′に置き換えられた合成画像ＧＧが生成される。
【０１８０】
ここで、本第２実施形態の合成画像出力装置では、死神役、美少女（美少女戦士）Ａ役、美少女（美少女戦士）Ｂ役である各変身対象の人物画像Ｐ，Ｊ，Ｋそれぞれについて、予め顔画像登録して前記撮影画像Ｇから抽出判断するので、予め役柄登録された各人物だけがそれぞれその所定の身振り（モーション）によって相手役を変身させた画像合成を行わせることができる。
【０１８１】
なお、この第２実施形態のデジタルカメラ１０とサーバ装置３０の電子回路の構成については、前記図２と図７を参照して説明した第１実施形態のそれと同一であるため、ここでの説明を省略する。
【０１８２】
図２４は、前記デジタルカメラ１０の第２実施形態の変身役柄データメモリ２４Ａに記憶される変身役柄データの内容を示す図である。
【０１８３】
この第２実施形態の変身役柄データメモリ２４Ａは、ユーザ登録される変身対象画像データ２４Ｔ、変身（１）画像データ２４Ｇと変身（１）マークデータ２４Ｍ、変身（２）画像データ２４Ｇ′と変身（２）マークデータ２４Ｍ′、変身条件データ２４Ｈの記憶領域を有し、変身（１）画像データ２４Ｇの記憶領域には、複数種類の第１段階の変身画像データ（変身キャラクタ）およびその音声データと顔合成位置データが記憶される。
【０１８４】
変身対象（顔）画像データ２４Ｔの記憶領域には、役柄別に複数種類の変身画像データ２４Ｇ…に変身させて置き換えるための対象となる人物の顔画像が、例えば登録Ａ；男の子Ｐの顔画像２４Ｔ１、登録Ｂ；姉Ｊの顔画像２４Ｔ２、登録Ｃ；妹Ｋの顔画像２４Ｔ３として予めユーザ登録され記憶される。
【０１８５】
これにより、登録Ａの男の子Ｐの画像に対応して前記変身（１）画像データ２４Ｇの記憶領域には、役柄-死神の変身（１）画像データ２４Ｇｗ１およびその音声データ「ザクッ、ザクッ」２４Ｓｗ１として記憶され、変身（１）マークデータ２４Ｍの記憶領域には、前記変身（１）画像データ２４Ｇｗ１を簡易表現する変身（１）マークデータ２４Ｍｗ１が記憶される。
【０１８６】
また、登録Ｂの姉Ｊの画像に対応して前記変身（１）画像データ２４Ｇの記憶領域には、役柄-美少女Ａの変身（１）画像データ２４Ｇｕ１およびその音声データ「レモ、レモ、…」２４Ｓｕ１と顔合成位置データ２４Ｆ１として記憶され、変身（１）マークデータ２４Ｍの記憶領域には、前記変身（１）画像データ２４Ｇｕ１を簡易表現する変身（１）マークデータ２４Ｍｕ１が記憶される。
【０１８７】
さらに、登録Ｃの妹Ｋの画像に対応して前記変身（１）画像データ２４Ｇの記憶領域には、役柄-美少女Ｂの変身（１）画像データ２４Ｇｕ２およびその音声データ「キュ、キュ、…」２４Ｓｕ２と顔合成位置データ２４Ｆ２として記憶され、変身（１）マークデータ２４Ｍの記憶領域には、前記変身（１）画像データ２４Ｇｕ２を簡易表現する変身（１）マークデータ２４Ｍｕ２が記憶される。
【０１８８】
また、変身（２）画像データ２４Ｇ′の記憶領域には、前記第１段階の変身（１）画像データ２４Ｇに対応する第２段階の変身（２）画像データ２４Ｇ′およびその音声データ２４Ｓ′と顔合成位置データが記憶される。また、変身（２）マークデータ２４Ｍ′の記憶領域には、前記変身（２）画像データ２４Ｇ′を簡易表現する変身（２）マークデータ２４Ｍ′が記憶される。
【０１８９】
これにより、登録Ａの男の子Ｐの画像に対応して前記変身（２）画像データ２４Ｇ′の記憶領域には、前記死神役が元の星の王子に戻った変身（２）画像データ２４Ｇｗ１′およびその音声データ「キラリ、キラリ」２４Ｓｗ１′と顔合成位置データ２４Ｆ′として記憶され、変身（２）マークデータ２４Ｍ′の記憶領域には、前記変身（２）画像データ２４Ｇｗ１′を簡易表現する変身（２）マークデータ２４Ｍｗ１′が記憶される。
【０１９０】
また、登録Ｂの姉Ｊの画像に対応して前記変身（２）画像データ２４Ｇ′の記憶領域には、前記美少女Ａがさらに美少女戦士Ａに変身した変身（２）画像データ２４Ｇｕ１′およびその音声データ「レモン、レモン、…」２４Ｓｕ１′と顔合成位置データ２４Ｆ１′として記憶され、変身（２）マークデータ２４Ｍ′の記憶領域には、前記変身（２）画像データ２４Ｇｕ１′を簡易表現する変身（２）マークデータ２４Ｍｕ１′が記憶される。
【０１９１】
さらに、登録Ｃの妹Ｋの画像に対応して前記変身（２）画像データ２４Ｇ′の記憶領域には、前記美少女Ｂがさらに美少女戦士Ｂに変身した変身（２）画像データ２４Ｇｕ２′およびその音声データ「キュート、キュート、…」２４Ｓｕ２′と顔合成位置データ２４Ｆ２′として記憶され、変身（２）マークデータ２４Ｍ′の記憶領域には、前記変身（２）画像データ２４Ｇｕ２′を簡易表現する変身（２）マークデータ２４Ｍｕ２′が記憶される。
【０１９２】
そして、変身条件データ２４Ｈの記憶領域には、前記第１段階の変身（１）画像データ２４Ｇから第２段階の変身（２）画像データ２４Ｇ′に変身するための条件データ２４Ｈが記憶される。
【０１９３】
具体的には、登録Ａの男の子Ｐの画像に対応した第１段階（死神）の変身（１）画像データ２４Ｇｗ１から第２段階（星の王子）の変身（２）画像データ２４Ｇｗ１′への変身条件データ２４Ｈ１として「美少女戦士Ｂのキュア効果」が設定され、登録Ｂの姉Ｊの画像に対応した第１段階（美少女Ａ）の変身（１）画像データ２４Ｇｕ１から第２段階（美少女戦士Ａ）の変身（２）画像データ２４Ｇｕ１′への変身条件データ２４Ｈ２として「本人の変身モーション」が設定され、登録Ｃの妹Ｋの画像に対応した第１段階（美少女Ｂ）の変身（１）画像データ２４Ｇｕ２から第２段階（美少女戦士Ｂ）の変身（２）画像データ２４Ｇｕ２′への変身条件データ２４Ｈ３として「本人の変身モーション」が設定される。
【０１９４】
図２５は、前記デジタルカメラ１０の第２実施形態の変身データメモリ１４に予め記憶される変身データの内容を示す図である。
【０１９５】
この変身データメモリ１４は、ユーザ登録される変身対象画像データ２４Ｔ、変身モーションモデルデータ１４Ｐ、変身画像データ２４Ｇ′、変身マークデータ２４Ｍ′の記憶領域を有する。
【０１９６】
変身画像データ２４Ｇ′と変身マークデータ２４Ｍ′の記憶領域には、前記変身役柄データメモリ２４Ａ（図２４参照）における変身条件２４Ｈが「本人の変身モーション」２４Ｈ２，２４Ｈ３であるところの、第２段階の変身（２）画像データ２４Ｇ′と変身（２）マークデータ２４Ｍ′に対応している、美少女戦士Ａの変身画像データ２４Ｇｕ１′、音声データ「レモン♪レモン♪」２４Ｓｕ１′、顔合成位置データ２４Ｆ１′、変身マークデータ２４Ｍｕ１′、また、美少女戦士Ｂの変身画像データ２４Ｇｕ２′、音声データ「キュート♪キュート♪」２４Ｓｕ２′、顔合成位置データ２４Ｆ２′、変身マークデータ２４Ｍｕ２′が記憶される。
【０１９７】
そして、変身モーションモデルデータ１４Ｐの記憶領域には、前記２種類の第２段階の変身画像データ２４Ｇｕ１′，２４Ｇｕ２′にそれぞれ変身するための一連のモーション（身振り）からなる変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃ（回転しながら両手を丸く上げていくモーション），１４Ｐ２ａ〜１４Ｐ２ｃ（回転しながら右手を上げていくモーション）が記憶される。
【０１９８】
そして、変身対象画像データ２４Ｔの記憶領域には、前記変身役柄データメモリ２４Ａにて予め登録された美少女Ａ役である姉Ｊの顔画像データ２４Ｔ２がそのまま、前記第２段階の変身画像データ（美少女戦士Ａ）２４Ｇｕ１′に変身するための変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃに対応付けられて記憶され、また、同予め登録された美少女Ｂ役である妹Ｋの顔画像データ２４Ｔ３がそのまま、前記第２段階の変身画像データ（美少女戦士Ｂ）２４Ｇｕ２′に変身するための変身モーションモデルデータ１４Ｐ２ａ〜１４Ｐ２ｃに対応付けられて記憶される。
【０１９９】
図２６は、前記デジタルカメラ１０の第２実施形態の特殊効果データメモリ２３Ａに予め記憶される特殊効果データの内容を示す図である。
【０２００】
この第２実施形態の特殊効果データメモリ２３Ａには、前記第１実施形態と同様に、３種類の特殊効果モーションモデルデータ２３Ｐ１ａ〜２３Ｐ１ｃ，２３Ｐ２ａ〜２３Ｐ２ｃ，２３Ｐ３ａ〜２３Ｐ３ｃのそれぞれに対応して、その特殊効果画像データ２３Ｇｕ１，２３Ｇｕ２，２３Ｇｕ３、音声データ「キュアーハート」２３Ｓｕ１，「キュアースター」２３Ｓｕ２，「デスムーン」２３Ｓｕ３、効果の種類「キュア効果」２３Ｋ１，「キュア効果」２３Ｋ２，「デス効果」２３Ｋ３、効果の対象「特殊効果モーションを向けた相手」２３Ｔ１，「周辺の敵すべて」２３Ｔ２，「周辺の敵すべて」２３Ｔ３、特殊効果マークデータ２３Ｍｕ１，２３Ｍｕ２，２３Ｍｕ３が記憶される。
【０２０１】
そして、同特殊効果データメモリ２３Ａにおける変身対象（顔）画像データ２４Ｔの記憶領域には、前記変身役柄データメモリ２４Ａにおいて第２段階の変身（２）画像データ２４Ｇｕ１′として記憶された美少女戦士Ａが行える特殊効果モーションモデルデータ２３Ｐ１ａ〜２３Ｐ１ｃに対応付けて、姉Ｊの顔画像データ２４Ｔ２が登録され、また、第２段階の変身（２）画像データ２４Ｇｕ２′として記憶された美少女戦士Ｂが行える特殊効果モーションモデルデータ２３Ｐ２ａ〜２３Ｐ２ｃに対応付けて、妹Ｋの顔画像データ２４Ｔ３が登録され、さらに、第１段階の変身（１）画像データ２４Ｇｗ１として記憶された死神が行える特殊効果モーションモデルデータ２３Ｐ３ａ〜２３Ｐ３ｃに対応付けて、男の子Ｐの顔画像データ２４Ｔ１が登録される。
【０２０２】
図２７は、前記デジタルカメラ１０の第２実施形態の防御効果データメモリ２３Ｂに予め記憶される防御効果データの内容を示す図である。
【０２０３】
この第２実施形態の防御効果データメモリ２３Ｂには、前記第１実施形態と同様に、２種類の防御効果モーションモデルデータ２３′Ｐ１ａ〜２３′Ｐ１ｃ，２３′Ｐ２ａ〜２３′Ｐ２ｃのそれぞれに対応して、その防御効果画像データ２３′Ｇｕ１，２３′Ｇｕ２、音声データ「バキン」２３′Ｓｕ１，「パーン」２３′Ｓｕ２、防御効果マークデータ２３′Ｍｕ１，２３′Ｍｕ２が記憶される。
【０２０４】
そして、同防御効果データメモリ２３Ｂにおける変身対象（顔）画像データ２４Ｔの記憶領域には、前記変身役柄データメモリ２４Ａにおいて第２段階の変身（２）画像データ２４Ｇｕ２′として記憶された美少女戦士Ｂが行える防御効果モーションモデルデータ２３′Ｐ１ａ〜２３′Ｐ１ｃに対応付けて、妹Ｋの顔画像データ２４Ｔ３が登録され、さらに、第１段階の変身（１）画像データ２４Ｇｗ１として記憶された死神が行える防御効果モーションモデルデータ２３′Ｐ２ａ〜２３′Ｐ２ｃに対応付けて、男の子Ｐの顔画像データ２４Ｔ１が登録される。
【０２０５】
なお、この第２実施形態の合成画像出力装置において、前記図２５で示した変身モーションモデルデータ１４Ｐ、前記図２６で示した特殊効果モーションモデルデータ２３Ｐ、前記図２７で示した防御効果モーションモデルデータ２３′Ｐには、それぞれ個々のモーションモデルデータについて当該モーション（身振り）の検出対象となる特定の人物（顔）画像２４Ｔが予め登録されるので、前記第１実施形態の合成画像出力装置における同モーションモデルデータにて必要とした、特定の人物のモーション（身振り）をある程度識別して検出するためのペンＤや棒Ｂを含んでいる各モーションモデルデータ（変身；１４Ｐ２ａＤ〜１４Ｐ２ｃＤ）（特殊効果；２３Ｐ２ａＤ〜２３Ｐ２ｃＤ，２３Ｐ３ａＢ〜２３Ｐ３ｃＢ）（防御効果；２３′Ｐ１ａＤ〜２３′Ｐ１ｃＤ，２３′Ｐ２ａＢ〜２３′Ｐ２ｃＢ）を必要としない。
【０２０６】
よって、この第２実施形態の合成画像出力装置によれば、死神役、美少女戦士Ａ役、美少女戦士Ｂ役など、各役柄を特定の人物に定めておくための小道具を一切必要としない。
【０２０７】
次に、前記構成の第２実施形態のデジタルカメラ１０あるいはサーバ装置３０による合成画像出力装置の動作について説明する。
【０２０８】
この第２実施形態の合成画像出力装置において、合成画像出力処理の全体過程を示すフローチャート（図８参照）、当該合成画像出力処理に伴い撮影画像（Ｇ）中に存在する人物（Ｐ，Ｊ，Ｋ）の対象画像を抽出する対象画像抽出処理のフローチャート（図９参照）、当該合成画像出力処理に伴い役柄登録された人物画像（Ｐ，Ｊ，Ｋ）に変身マーク（２４Ｍ／２４Ｍ′）を付加する役柄変身マーク処理を示すフローチャート（図１０参照）、当該合成画像出力処理に伴い変身マーク（２４Ｍ／２４Ｍ′）の付加された人物画像（Ｐ，Ｊ，Ｋ）を変身画像（２４Ｇ／２４Ｇ′）に置き換え合成すると共に対応音声（２４Ｓ／２４Ｓ′）の出力を設定する変身マーク合成処理を示すフローチャート（図１３参照）、当該合成画像出力処理に伴い特殊／防御効果マーク（２３Ｍｕ／２３′Ｍｕ）の付加された人物画像（Ｐ，Ｊ，Ｋ）の所定位置に特殊／防御効果画像（２３Ｇｕ／２３′Ｇｕ）を追加合成すると共に対応音声（２３Ｓｕ／２３′Ｓｕ）の出力を設定する特殊効果マーク合成処理を示すフローチャート（図１４参照）については、何れの処理ステップも前記第１実施形態の合成画像出力処理と同様であるためその図示を省略する。
【０２０９】
図２８は、前記第２実施形態の合成画像出力処理に伴い変身モーション（１４Ｐ）の検出された人物画像（Ｊ，Ｋ）に変身マーク（２４Ｍ′）を付加すると共に対応音声（２４Ｓ′）を出力するモーション変身マーク処理を示すフローチャートである。
【０２１０】
図２９は、前記第２実施形態の合成画像出力処理に伴い特殊／防御効果モーション（２３Ｐ／２３′Ｐ）の検出された人物画像（Ｐ，Ｊ，Ｋ）に特殊／防御効果マーク（２３Ｍｕ／２３′Ｍｕ）を付加すると共に対応音声（２３Ｓｕ／２３′Ｓｕ）を出力する特殊効果マーク処理を示すフローチャートである。
【０２１１】
図３０〜図３７は、前記第２実施形態の合成画像出力処理に伴う動画撮影画像（Ｇ）に基づいた画像処理状態を順次代表的なコマ送り（その１）〜（その８）にして示す図であり、同図（Ａ）は撮影画像Ｇを示す図、同図（Ｂ）はマーク付き撮影画像Ｇｍを示す図、同図（Ｃ）は合成画像ＧＧを示す図である。
【０２１２】
前記図８における合成画像出力処理のステップＳ１〜Ｓ３の処理は、前記第１実施形態と同様に、前記図３０（Ａ）〜図３７（Ａ）に示すように、動画撮影される各コマの撮影画像（Ｇ）が取得されるのに伴い繰り返し実行され、前記図３０（Ｂ）〜図３７（Ｂ）に示すようなマーク付き撮影画像（Ｇｍ）が生成出力される。
【０２１３】
そして、前記図８における合成画像出力処理のステップＳ４〜Ｓ７の処理は、前記第１実施形態と同様に、前記図３０（Ｂ）〜図３７（Ｂ）に示すように生成された一連のマーク付き撮影画像（Ｇｍ）に基づき実行され、前記図３０（Ｃ）〜図３７（Ｃ）に示すような合成画像（ＧＧ）が生成出力される。
【０２１４】
なお、この第２実施形態でも、前記デジタルカメラ１０（図２参照）において図８における合成画像出力処理を実行した場合を主体にして説明し、前記サーバ装置３０（図７参照）において同合成画像出力処理を実行した場合については、略同じ処理内容となるためその説明を省略する。
【０２１５】
デジタルカメラ１０の画像撮影部２１により、例えば図３０（Ａ）〜図３７（Ａ）で示すように家族によって演じられる一連のシーンが撮影されると、その撮影画像Ｇ１〜Ｇ８は順次撮影画像データメモリ２５に記憶され保存され（ステップＳ１）、リアルタイムで図９における対象画像抽出処理へ移行される（ステップＳＡ）。
【０２１６】
この対象画像抽出処理（ステップＳＡ）により、撮影画像データＧｎの中に存在する人物画像（Ｐ，Ｊ，Ｋ）が抽出されると、図１０における役柄変身マーク処理へ移行される（ステップＳＢ）。
【０２１７】
この役柄変身マーク処理では、前記対象画像抽出処理により抽出された撮影画像データＧｎの中の人物画像（Ｐ，Ｊ，Ｋ）について、前記変身役柄データメモリ２４Ａ（図２４参照）にユーザ登録された変身対象（顔）画像データ２４Ｔとしての人物画像（Ｐ）（Ｊ）（Ｋ）が含まれるか否かが前記顔画像認識処理を用いて識別される（ステップＢ１）。
【０２１８】
ここで、図３０（Ａ）〜図３７（Ａ）の撮影画像データＧ１〜Ｇ８にそれぞれ示すように、変身対象（顔）画像データ２４Ｔとしての男の子Ｐの顔画像２４Ｔ１を有する人物画像、あるいは姉Ｊの顔画像２４Ｔ２を有する人物画像、あるいは妹Ｋの顔画像２４Ｔ３を有する人物画像が含まれていることが識別されると（ステップＢ１（Ｙｅｓ））、役柄別変身状態メモリ２４Ｂ内の各対応する変身状態フラグが検出され、現在の男の子の人物画像Ｐに対応する登録Ａの役柄状態、あるいは現在の姉の人物画像Ｊに対応する登録Ｂの役柄状態、あるいは現在の妹の人物画像Ｋに対応する登録Ｃの役柄状態が検出される（ステップＢ２）。
【０２１９】
そして、変身（２）の状態でない（変身（１）の状態である）と判断された場合には（ステップＢ２（Ｎｏ））、各対応する変身対象画像が含まれる一連の撮影画像中に、特殊効果モーション２３Ｐ（男の子の人物画像Ｐの場合にはデス効果のモーション２３Ｐ３ａ〜２３Ｐ３ｃ、姉の人物画像Ｊの場合にはキュア効果のモーション２３Ｐ１ａ〜２３Ｐ１ｃ、妹の人物画像Ｋの場合にはキュア効果のモーション２３Ｐ２ａ〜２３Ｐ２ｃ）が検出されたか否かが判断される（ステップＢ６）。（この特殊効果については後述の特殊効果マーク処理（ステップＳＥ）で詳述する。）
例えば図３０（Ａ）に示す撮影画像Ｇ１に含まれる男の子の人物画像Ｐの場合は、その特殊効果モーション２３Ｐは検出されないので（ステップＢ６（Ｎｏ））、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている変身（１）の死神用の変身（１）マークデータ２４Ｍｗ１が読み出されると共に、前記識別された男の子の人物画像Ｐの顔画像認識された位置に対応して付加され、図３０（Ｂ）〜図３６（Ｂ）に示すようなマーク付き撮影画像データＧｍ１〜Ｇｍ７として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ８）。
【０２２０】
また、例えば図３０（Ａ）に示す撮影画像Ｇ１に含まれる姉の人物画像Ｊの場合も、その特殊効果モーション２３Ｐは検出されないので（ステップＢ６（Ｎｏ））、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている変身（１）の美少女Ａ用の変身（１）マークデータ２４Ｍｕ１が読み出されると共に、前記識別された姉の人物画像Ｊの位置に対応して付加され、図３０（Ｂ）に示すようなマーク付き撮影画像データＧｍ１として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ８）。
【０２２１】
また、例えば図３４（Ａ）に示す撮影画像Ｇ５に含まれる妹の人物画像Ｋの場合も、その特殊効果モーション２３Ｐは検出されないので（ステップＢ６（Ｎｏ））、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている変身（１）の美少女Ｂ用の変身（１）マークデータ２４Ｍｕ２が読み出されると共に、前記識別された妹の人物画像Ｋの位置に対応して付加され、図３４（Ｂ）に示すようなマーク付き撮影画像データＧｍ５として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ８）。
【０２２２】
なお、前記登録された人物画像Ｐ，Ｊ，Ｋそれぞれの位置に対応付加される変身（１）マークデータ２４Ｍｗ１，２４Ｍｕ１，２４Ｍｕ２は、当該人物画像Ｐ，Ｊ，Ｋに重ねて付加されるか、または当該人物画像Ｐ，Ｊ，Ｋの近傍に付加されるかの何れであってもよい。
【０２２３】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合に（ステップＢ４（Ｙｅｓ））、例えば図３０（Ｂ）〜図３６（Ｂ）に示すように、死神用の変身（１）マークデータ２４Ｍｗ１が付加された場合には、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている音声データ「ザクッ、ザクッ」２４Ｓｗ１が読み出され、音声出力部１３から出力される（ステップＢ５）。
【０２２４】
また、同様に例えば図３０（Ｂ）に示すように、美少女Ａ用の変身（１）マークデータ２４Ｍｕ１が付加された場合には、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている音声データ「レモ、レモ」２４Ｓｕ１が読み出され、音声出力部１３から出力される（ステップＢ５）。
【０２２５】
また、同様に図３４（Ｂ）に示すように美少女Ｂ用の変身（１）マークデータ２４Ｍｕ２が付加された場合には、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている音声データ「キュ、キュ」２４Ｓｕ２が読み出され、音声出力部１３から出力される（ステップＢ５）。
【０２２６】
また、前記同様に現在の男の子の人物画像Ｐに対応する登録Ａの変身状態が検出され、変身（２）の状態ではない（変身（１）の状態である）と判断された場合であっても（ステップＢ２（Ｎｏ））、変身対象画像が含まれる一連の撮影画像中に、例えば図３６，図３７に示すように、顔画像登録された妹の人物画像Ｋについて特殊効果モーション２３Ｐ２ａ〜２３Ｐ２ｃとの一致が検出された場合には（ステップＢ６（Ｙｅｓ））、役柄別変身状態メモリ２４Ｂ内の男の子Ｐの役柄状態フラグが変身（２）の状態に変更されると共に（ステップＢ７）、変身対象画像（Ｐ）に対応する位置に変身（２）マーク２４Ｍｗ１′が付加され、図３７（Ｂ）に示すようなマーク付き撮影画像データＧｍ８として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ３）。
【０２２７】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＢ４（Ｙｅｓ））、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている変身（２）の音声データ「キラリ、キラリ」２４Ｓｗ１′が読み出され、同図３７（Ｂ）に示すように音声出力部１３から出力される（ステップＢ５）。
【０２２８】
一方、現在の男の子の人物画像Ｐに対応する登録Ａの変身状態が検出され、変身（２）の状態であると判断された場合には（ステップＢ２（Ｙｅｓ））、変身対象画像に対応する位置に変身（２）マーク２４Ｍｗ１′が付加され、図３７（Ｂ）に示すようなマーク付き撮影画像データＧｍ８として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ３）。
【０２２９】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＢ４（Ｙｅｓ））、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている音声データ「キラリ、キラリ」２４Ｓｗ１′が読み出され、同図３７（Ｂ）に示すように音声出力部１３から出力される（ステップＢ５）。
【０２３０】
また、現在の姉の人物画像Ｊに対応する登録Ｂの変身状態が検出され、変身（２）の状態であると判断された場合には（ステップＢ２（Ｙｅｓ））、変身対象画像に対応する位置に変身（２）マーク２４Ｍｕ１′が付加され、図３１（Ｂ）〜図３７（Ｂ）に示すようなマーク付き撮影画像データＧｍ２〜Ｇｍ８として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ３）。
【０２３１】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＢ４（Ｙｅｓ））、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている音声データ「レモン、レモン」２４Ｓｕ１′が読み出され、同図３１（Ｂ）〜図３７（Ｂ）に示すように音声出力部１３から出力される（ステップＢ５）。
【０２３２】
また、現在の妹の人物画像Ｋに対応する登録Ｃの変身状態が検出され、変身（２）の状態であると判断された場合には（ステップＢ２（Ｙｅｓ））、変身対象画像に対応する位置に変身（２）マーク２４Ｍｕ２′が付加され、図３５（Ｂ）〜図３７（Ｂ）に示すようなマーク付き撮影画像データＧｍ６〜Ｇｍ８として作業用データメモリに一時保存されると共に表示部１１に表示される（ステップＢ３）。
【０２３３】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＢ４（Ｙｅｓ））、前記変身役柄データメモリ２４Ａ（図２４参照）に対応付けられて記憶されている音声データ「キュート、キュート」２４Ｓｕ２′が読み出され、図３５（Ｂ）〜図３７（Ｂ）に示すように音声出力部１３から出力される（ステップＢ５）。
【０２３４】
すると次に、図２８におけるモーション変身マーク処理へ移行される（ステップＳＤ′）。
【０２３５】
このモーション変身マーク処理では、前記対象画像抽出処理により抽出される一連の撮影画像データＧｎの中の人物画像（Ｐ，Ｊ，Ｋ）において、前記変身データメモリ１４（図２５参照）に予め登録された姉の顔の人物画像Ｊによる美少女戦士Ａの一連の変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃや妹の顔の人物画像Ｋによる美少女戦士Ｂの一連の変身モーションモデルデータ１４Ｐ２ａ〜１４Ｐ２ｃと一致する画像部分が検出されたか否か判断される（ステップＤ１′）。
【０２３６】
すなわち、図３１（Ａ）の撮影画像データＧ２に示すように、前記対象画像抽出処理により抽出される顔画像登録された姉の一連の人物画像Ｊについて、前記変身データメモリ１４（図２５参照）に記憶された美少女戦士Ａの一連の変身モーションモデルデータ１４Ｐ１ａ〜１４Ｐ１ｃと身振りが一致する画像部分であると検出されると（ステップＤ１′（Ｙｅｓ））、当該変身データメモリ１４（図２５参照）に対応付けられて記憶されている美少女戦士Ａの変身マークデータ２４Ｍｕ１′が読み出されると共に、前記モーション検出された姉の人物画像Ｊの顔画像認識された位置に対応して付加され、図３１（Ｂ）に示すようなマーク付き撮影画像データＧｍ２として作業用データメモリに一時保存され表示部１１に表示される（ステップＤ２）。一方、変身モーションモデルデータ１４Ｐに身振りが一致する画像部分が検出されない場合は（ステップＤ１（Ｎｏ））、本処理を終了し、図２９における特殊効果マーク処理（ステップＳＥ′）へ移行される。
【０２３７】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＤ３（Ｙｅｓ））、前記変身データメモリ１４（図２５参照）に対応付けられて記憶されている美少女戦士Ａの音声データ「レモン♪レモン♪」２４Ｓｕ１′が読み出され、同図３１（Ｂ）に示すように音声出力部１３から出力される（ステップＤ４）。
【０２３８】
また、図３５（Ａ）の撮影画像データＧ６に示すように、前記対象画像抽出処理により抽出される顔画像登録された妹の一連の人物画像Ｋについて、前記変身データメモリ１４（図２５参照）に記憶された美少女戦士Ｂの一連の変身モーションモデルデータ１４Ｐ２ａ〜１４Ｐ２ｃと身振りが一致する画像部分であると判断された場合には（ステップＤ１（Ｙｅｓ））、変身データメモリ１４（図２５参照）に対応付けられて記憶されている美少女戦士Ｂの変身マークデータ２４Ｍｕ２′が読み出されると共に、前記モーション検出された妹の人物画像Ｋの顔画像認識された位置に対応して付加され、図３５（Ｂ）〜図３７（Ｂ）に示すようなマーク付き撮影画像データＧｍ６〜Ｇｍ８として作業用データメモリに一時保存され表示部１１に表示される（ステップＤ２）。
【０２３９】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＤ３（Ｙｅｓ））、前記変身データメモリ１４（図２５参照）に対応付けられて記憶されている美少女戦士Ｂの音声データ「キュート♪キュート♪」２４Ｓｕ２′が読み出され、同図３５（Ｂ）〜図３７（Ｂ）に示すように音声出力部１３から出力される（ステップＤ４）。
【０２４０】
すると次に、図２９における特殊効果マーク処理へ移行される（ステップＳＥ′）。
【０２４１】
この特殊効果マーク処理では、前記対象画像抽出処理により抽出される一連の撮影画像データＧｎの中の人物画像（Ｐ，Ｊ，Ｋ）について、前記特殊効果データメモリ２３Ａ（図２６参照）に予め顔画像登録された人物画像による特殊効果Ａの一連の変身モーションモデルデータ２３Ｐ１ａ〜２３Ｐ１ｃや特殊効果Ｂの一連の変身モーションモデルデータ２３Ｐ２ａ〜２３Ｐ２ｃや特殊効果Ｃの一連の変身モーションモデルデータ２３Ｐ３ａ〜２３Ｐ３ｃと一致する画像部分が検出されたか否か判断される（ステップＥ１′）。
【０２４２】
すなわち、図３２（Ａ）の撮影画像データＧ３に示すように、前記対象画像抽出処理により抽出される顔画像登録された姉の一連の人物画像Ｊについて、前記特殊効果データメモリ２３Ａ（図２６参照）に予め記憶された特殊効果Ａの一連の変身モーションモデルデータ２３Ｐ１ａ〜２３Ｐ１ｃと身振りが一致する画像部分であると検出されると（ステップＥ１′（Ｙｅｓ））、当該特殊効果データメモリ２３Ａ（図２６参照）に対応付けられて記憶されている特殊効果Ａの特殊効果マークデータ２３Ｍｕ１が読み出されると共に、前記モーション検出された姉の人物画像Ｊの所定位置に対応して、効果の対象２３Ｔ１（特殊効果モーションを向けた相手）である死神の変身マークデータ２４Ｍｗ１が付加されている人物画像（男の子）Ｐの方向へ向けて付加され、図３２（Ｂ）に示すようなマーク付き撮影画像データＧｍ３として作業用データメモリに一時保存され表示部１１に表示される（ステップＥ２）。
【０２４３】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＥ３（Ｙｅｓ））、前記特殊効果データメモリ２３Ａ（図２６参照）に対応付けられて記憶されている特殊効果Ａの音声データ「キュアーハート」２３Ｓｕ１が読み出され、同図３２（Ｂ）に示すように音声出力部１３から出力される（ステップＥ４）。このようにデジタルカメラ１０から特殊効果Ａの音声データ「キュアーハート」２３Ｓｕ１が出力されることで、特殊効果の処理が適切にコンピュータに実行されていることが、演技者（姉Ｊ、男の子Ｐ）により容易に認識でき、リアルな感覚で演技をすることができる。
【０２４４】
なお、前記モーション検出された人物画像Ｊの所定位置に対応付加される特殊効果マークデータ２３Ｍｕ１は、当該人物画像Ｊに重ねて付加されるか、または当該人物画像Ｊの近傍に付加されるかの何れであってもよい。これにより撮影中の母親は、予め顔画像登録した姉（Ｊ）が、特殊効果モーションを行った結果、コンピュータにより特殊効果処理が適切に実行され、当該特殊効果の画像を付加した合成画像が作成されることを容易に認識できる。
【０２４５】
また、図３３（Ａ）の撮影画像データＧ４に示すように、前記対象画像抽出処理により抽出される顔画像登録された男の子の一連の人物画像Ｐについて、前記特殊効果データメモリ２３Ａ（図２６参照）に予め記憶された特殊効果Ｃの一連の変身モーションモデルデータ２３Ｐ３ａ〜２３Ｐ３ｃと身振りが一致する画像部分であると検出されると（ステップＥ１′（Ｙｅｓ））、当該特殊効果データメモリ２３Ａに対応付けられて記憶されている特殊効果Ｃの特殊効果マークデータ２３Ｍｕ３が読み出されると共に、前記モーション検出された男の子の人物画像Ｐの所定位置に対応して、効果の対象２３Ｔ３（周辺の敵すべて）である前記美少女戦士Ａの変身マークデータ２４Ｍｕ１′が付加されている人物画像（姉）Ｊの方向へ向けて付加され、図３３（Ｂ）に示すようなマーク付き撮影画像データＧｍ４として作業用データメモリに一時保存され表示部１１に表示される（ステップＥ２）。
【０２４６】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＥ３（Ｙｅｓ））、前記特殊効果データメモリ２３Ａ（図２６参照）に対応付けられて記憶されている特殊効果Ｃの音声データ「デスムーン」２３Ｓｕ３が読み出され、同図３３（Ｂ）に示すように音声出力部１３から出力される（ステップＥ４）。このようにデジタルカメラ１０から特殊効果Ｃの音声データ「デスムーン」２３Ｓｕ３が出力されることで、特殊効果の処理が適切にコンピュータに実行されていることが、演技者（姉Ｊ、男の子Ｐ）により容易に認識できる。
【０２４７】
また、図３６（Ａ）の撮影画像データＧ７に示すように、前記対象画像抽出処理により抽出される顔画像登録された妹の一連の人物画像Ｋについて、前記特殊効果データメモリ２３Ａに予め記憶された特殊効果Ｂの一連の特殊効果モーションモデルデータ２３Ｐ２ａ〜２３Ｐ２ｃと身振りが一致する画像部分であると検出されると（ステップＥ１′（Ｙｅｓ））、当該特殊効果データメモリ２３Ａ（図２６参照）に対応付けられて記憶されている特殊効果Ｂの特殊効果マークデータ２３Ｍｕ２が読み出されると共に、前記モーション検出された妹の人物画像Ｋの所定位置（例えば画像上部から３分の１の位置）に対応して、効果の対象２３Ｔ２（周辺の敵すべて）である仮面マークデータＭｋ付き（悩乱状態）美少女戦士Ａの人物画像（姉）Ｊと死神の変身マークデータ２４Ｍｗ１が付加されている人物画像（男の子）Ｐの方向へ向けて付加され、図３６（Ｂ）に示すようなマーク付き撮影画像データＧｍ７として作業用データメモリに一時保存され表示部１１に表示される（ステップＥ２）。
【０２４８】
そして、現在デジタルカメラ１０による撮影中にあると判断された場合には（ステップＥ３（Ｙｅｓ））、前記特殊効果データメモリ２３Ａ（図２６参照）に対応付けられて記憶されている特殊効果Ｂの音声データ「キュアースター」２３Ｓｕ２が読み出され、同図３６（Ｂ）に示すように音声出力部１３から出力される（ステップＥ４）。このようにデジタルカメラ１０から特殊効果Ｂの音声データ「キュアースター」２３Ｓｕ２が出力されることで、特殊効果の処理が適切にコンピュータに実行されていることが、演技者（妹Ｋ、姉Ｊ、男の子Ｐ）により容易に認識できる。
【０２４９】
ここで、特殊効果（図２６参照）には、前記第１実施形態と同様に、効果の対象２３Ｔである相手を悩乱状態から正常状態に戻すキュア（癒し）効果２３Ｋ１，２３Ｋ２と、正常状態から悩乱状態にするデス（死神）効果２３Ｋ３とがあり、一方で防御効果（図２７参照）は、これも前記第１実施形態と同様に、相手から受けた特殊効果を無効化する。この特殊効果や防御効果に伴う変身処理（ステップＥ５〜Ｅ２３）について、以下で説明する。
【０２５０】
すなわち、図３２（Ｂ）のマーク付き撮影画像データＧｍ３で示したように、美少女戦士Ａの変身マークデータ２４Ｍｕ１′が付加されている顔画像登録された姉（Ｊ）の位置から特殊効果Ａ（キュア効果２３Ｋ１）に伴う特殊効果マークデータ２３Ｍｕ１が表示出力された場合において（ステップＥ１′，Ｅ２）、前記特殊効果データメモリ２３Ａ（図２６参照）に予め記憶された特殊効果Ａの効果の対象２３Ｔが、周辺の敵すべてではない特殊効果モーションを向けた相手２３Ｔ１であると判断されると（ステップＥ５（Ｎｏ））、当該画面（Ｇｍ３）内で特殊効果モーション２３Ｐ１を向けた相手（死神役の男の子である人物画像Ｐ）が検出され、効果の対象者として設定される（ステップＥ１２）。このように顔画像登録された人物画像の身振り（モーション）で示した相手の人物画像を特殊効果の対象者として検出設定するようにしたので、当該特殊効果を行う登録済み演技者の思い通りの相手に、適宜、その特殊効果を出すことができ相手を変身させた合成画像を容易に作成できる。
【０２５１】
そして、前記特殊効果Ａの効果の種類２３Ｋがキュア効果２３Ｋ１であると判断されると（ステップＥ７（Ｙｅｓ））、前記検出設定された効果の対象は、仮面マークＭｋ付き美少女戦士の人物画像ではないと判断されると共に（ステップＥ１３（Ｎｏ））、死神マーク２４Ｍｗ１付きの人物画像Ｐであると判断される（ステップＥ１５（Ｙｅｓ））。
【０２５２】
そして、効果の対象である顔画像登録された男の子（死神役）の人物画像Ｐについて、図２７における防御効果モーションモデルデータ２３'Ｐ２ａ〜２３'Ｐ２ｃと身振りが一致する画像部分であると検出されると（ステップＥ１６′（Ｙｅｓ））、対応するハート形の特殊効果マークデータ２３Ｍｕ１の隣に、当該特殊効果が無効化されたことを示すハートが割れた形の防御効果マークデータ２３'Ｍｕ２が読み出されて付加される（ステップＥ１７）。この場合、顔画像登録された死神役の男の子（Ｐ）の防御効果が出されたことで、当該死神の変身状態は継続されることとなる。
【０２５３】
すると、前記防御効果マークデータ２３'Ｍｕ２に対応する音声データ「パーン」２３'Ｓｕ２が読み出されて音声出力部１３から出力される（ステップＥ２２）。
【０２５４】
このように、特殊効果が無効化されたことを示す防御効果マーク２３'Ｍｕ２がマーク付き撮影画像Ｇｍ３として表示されることによりにより、カメラ画面（１１）を見て撮影している母親は、防御効果が適切に出され、特殊効果が無効化されたことを視覚的に確認できる。しかも、前記防御効果マーク２３'Ｍｕ２に対応する音声データ「パーン」２３'Ｓｕ２が出力されることにより、母親だけでなく演技者全員において、防御効果が適切に出され、特殊効果が無効化されたことを聴覚的に確認できる。
【０２５５】
また、図３３（Ｂ）のマーク付き撮影画像データＧｍ４で示したように、死神の変身マークデータ２４Ｍｗ１が付加されている顔画像登録された男の子（Ｐ）の位置から特殊効果Ｃ（デス効果２３Ｋ３）に伴う特殊効果マークデータ２３Ｍｕ３が表示出力された場合において（ステップＥ１′，Ｅ２）、前記特殊効果データメモリ２３Ａ（図２６参照）に予め記憶された特殊効果Ｃの効果の対象２３Ｔが、周辺の敵すべて２３Ｔ３であると判断されると（ステップＥ５（Ｙｅｓ））、当該画面（Ｇｍ４）内で敵役の相手（美少女戦士Ａ役の姉である人物画像Ｊ）が検出され、効果の対象者として設定される（ステップＥ６）。
【０２５６】
そして、前記特殊効果Ｃの効果の種類２３Ｋがデス効果２３Ｋ３であると判断されると（ステップＥ７（Ｎｏ））、前記検出設定された効果の対象は、美少女戦士の変身マークデータ２４Ｍｕ１′付きであると判断される（ステップＥ８（Ｙｅｓ））。
【０２５７】
ここで、効果の対象である顔画像登録された姉（美少女戦士Ａ役）の人物画像Ｊについて、防御効果Ａの防御効果モーション（図２７参照）が検出されない場合には（ステップＥ９′（Ｎｏ））、当該美少女戦士Ａに対応する変身マークデータ２４Ｍｕ１′の隣に、美少女戦士Ａが悩乱状態に変身させられたことを示す仮面マークデータＭｋが付加される（ステップＥ１０）。
【０２５８】
すなわちこの場合、美少女戦士Ａ役の姉の人物画像Ｊは、変身役柄データメモリ２４Ａに予め登録された死神役の男の子の人物画像Ｐによる特殊効果Ｃのモーション２３Ｐ３ａ〜２３Ｐ３ｃに対応したデス（死神）効果によって、悩乱状態の仮面付き美少女戦士に変身させられたことになる。
【０２５９】
すると、前記仮面マークデータＭｋに対応する音声データ「クックック」Ｓｋが音声出力部１３から出力される（ステップＥ１９）。
【０２６０】
なお、前記ステップＥ９′において、前記デス効果２３Ｋの対象２３Ｔ３である顔画像登録された姉（美少女戦士Ａ役）の人物画像Ｊについて、防御効果Ａのモーションモデルデータ２３'Ｐ１ａ〜２３'Ｐ１ｃ（図２７参照）と身振りが一致する画像部分であると検出されると（ステップＥ９′（Ｙｅｓ））、対応する月形の特殊効果マークデータ２３Ｍｕ３の隣に、当該特殊効果が無効化されたことを示す月が割れた形の防御効果マークデータ２３'Ｍｕ１が読み出されて付加される（ステップＥ１１）。この場合、美少女戦士Ａ役の顔画像登録された姉Ｊから防御効果が出されたことで、美少女戦士Ａのままの変身状態が継続されることとなる。
【０２６１】
すると、前記防御効果マークデータ２３'Ｍｕ１に対応する音声データ「バキン」２３'Ｓｕ１が読み出されて音声出力部１３から出力される（ステップＥ２０）。
【０２６２】
また、図３６（Ｂ）のマーク付き撮影画像データＧｍ７で示したように、美少女戦士Ｂの変身マークデータ２４Ｍｕ２′が付加されている顔画像登録された妹（Ｋ）の位置から特殊効果Ｂ（キュア効果２３Ｋ２）に伴う特殊効果マークデータ２３Ｍｕ２が表示出力された場合において（ステップＥ１′，Ｅ２）、前記特殊効果データメモリ２３Ａ（図２６参照）に予め記憶された特殊効果Ｂの効果の対象２３Ｔが、周辺の敵すべて２３Ｔ２であると判断されると（ステップＥ５（Ｙｅｓ））、当該画面（Ｇｍ７）内での敵役の相手として、悩乱した仮面Ｍｋ付きの美少女戦士Ａに変身させられている姉の人物画像Ｊと、死神役の変身マークデータ２４Ｍｗ１が付加されている男の子の人物画像Ｐとが検出され、効果の対象者として設定される（ステップＥ６）。
【０２６３】
そして、前記特殊効果Ｂの効果の種類２３Ｋ２がキュア効果であると判断されると（ステップＥ７（Ｙｅｓ））、前記検出設定された効果の対象である姉の人物画像Ｊの場合、仮面マークＭｋ付きの美少女戦士Ａであると判断される（ステップＥ１３（Ｙｅｓ））。
【０２６４】
すると、図３７（Ｂ）のマーク付き撮影画像データＧｍ８で示すように、当該仮面マークＭｋ付きの美少女戦士Ａのその仮面マークデータＭｋが削除される（ステップＥ１４）。
【０２６５】
すなわちこの場合、美少女戦士Ａ役の姉の人物画像Ｊは、美少女戦士Ｂ役として予め顔画像登録された妹の人物画像Ｋによる特殊効果Ｂのモーション２３Ｐ２ａ〜２３Ｐ２ｃに対応したキュア（癒し）効果によって、仮面付きの悩乱した美少女戦士Ａから元の正常な美少女戦士Ａに変身にされ戻されたことになる。
【０２６６】
そして、元の美少女戦士Ａの変身マークデータ２４Ｍｕ１′に対応する音声データ２４Ｓｕ１′「レモン♪レモン♪」が読み出され音声出力部１３から出力される（ステップＥ２１）。
【０２６７】
一方、前記特殊効果Ｂの効果の種類２３Ｋ２がキュア効果であると判断された際に（ステップＥ７（Ｙｅｓ））、前記検出設定された効果の対象である死神役の男の子の人物画像Ｐの場合には、死神マーク２４Ｍｗ１付きであると判断される（ステップＥ１５（Ｙｅｓ））。
【０２６８】
ここで、前記効果の対象である顔画像登録された男の子（死神役）の人物画像Ｐについて、防御効果Ｂの防御効果モーション（図２７参照）が検出されない場合には（ステップＥ１６′（Ｎｏ））、図３７（Ｂ）のマーク付き撮影画像データＧｍ８で示すように、当該男の子（死神役）の人物画像Ｐから死神の変身マークデータ２４Ｍｗ１が削除されると共に、星の王子である変身（２）マークデータ２４Ｍｗ１′が付加される（ステップＥ１８）。
【０２６９】
すなわちこの場合、死神役の男の子の人物画像Ｐは、美少女戦士Ｂ役として予め顔画像登録された妹の人物画像Ｋによる特殊効果Ｂのモーション２３Ｐ２ａ〜２３Ｐ２ｃに対応したキュア（癒し）効果によって、死神から元の星の王子に変身させられて戻されたことになる。
【０２７０】
そして、星の王子の変身（２）マークデータ２４Ｍｗ１′に対応する音声データ２４Ｓｗ１′「キラリ、キラリ」が読み出され音声出力部１３から出力される（ステップＥ２３）。
【０２７１】
このように、撮影画像Ｇ中の予め顔画像登録された人物画像（Ｐ，Ｊ，Ｋ）による特殊効果モーション２３Ｐや防御効果モーション２３′Ｐの検出に基づいた特殊効果マーク処理（ステップＥ１〜Ｅ２３）が完了すると、前記図３０（Ｂ）〜図３７（Ｂ）で示したように、前記ステップＳＡ〜ＳＥ′の処理に従い作業用データメモリ上に生成されたマーク付きの連続した撮影画像データＧｍ１〜Ｇｍ８がマーク付き撮影画像データメモリ２６に記憶され保存される（ステップＳ２）。
【０２７２】
そして、画像撮影部２１からの一連の撮影画像データＧ１〜Ｇ８の撮影入力が終了したと判断されると（ステップＳ３（Ｙｅｓ））、前記マーク付き撮影画像データメモリ２６に生成保存された一連のマーク付き撮影画像データＧｍ１〜Ｇｍ８に基づく合成画像の生成処理に進むか否か判断される（ステップＳ４）。
【０２７３】
ここで、入力部１２に対する合成画像生成のためのユーザ操作に応じて、あるいは前記一連の撮影画像データの取得終了に伴い自動的に、合成画像の生成処理に進むと判断されると（ステップＳ４（Ｙｅｓ））、前記マーク付き撮影画像データメモリ２６から前記一連のマーク付き撮影画像データＧｍ１〜Ｇｍ８が作業用メモリに読み出され（ステップＳ５）、図１３における変身マーク合成処理へ移行される（ステップＳＦ）。
【０２７４】
この変身マーク合成処理では、まず、前記マーク付き撮影画像データメモリ２６から作業用メモリに読み出されたマーク付き撮影画像データＧｍ１〜Ｇｍ８について、前記変身役柄データメモリ２４Ａ（図２４参照）に予め記憶されている変身（１）（２）マークデータ２４Ｍ，２４Ｍ′や前記変身データメモリ１４（図２５参照）に予め記憶されている変身マークデータ２４Ｍ′が付加された画像が含まれているか否か判断される（ステップＦ１）。
【０２７５】
ここで、前記変身役柄データメモリ２４Ａ（図２４参照）に予め記憶されている変身マークデータ２４Ｍ，２４Ｍ′や前記変身データメモリ１４（図２５参照）に予め記憶されている変身マークデータ２４Ｍ′が付加された画像が含まれていないと判断された場合には（ステップＦ１（Ｎｏ））、本処理を終了し特殊効果マーク合成処理（ステップＳＨ）へ移行される。
【０２７６】
また、図３０（Ｂ）〜図３７（Ｂ）で示すように死神の変身（１）マークデータ２４Ｍｗ１が付加された画像、図３７（Ｂ）で示すように星の王子に戻った変身（２）マークデータ２４Ｍｗ１'が付加された画像、また、図３０（Ｂ）で示すように美少女Ａの変身マークデータ２４Ｍｕ１が付加された画像、図３１（Ｂ）〜図３７（Ｂ）で示すように美少女戦士Ａの変身マークデータ２４Ｍｕ１′が付加された画像、また、図３４（Ｂ）で示すように美少女Ｂの変身マークデータ２４Ｍｕ２が付加された画像、図３５（Ｂ）〜図３７（Ｂ）で示すように美少女戦士Ｂの変身マークデータ２４Ｍｕ２′が付加された画像が存在すると判断された場合には（ステップＦ１（Ｙｅｓ））、当該各変身マークデータ２４Ｍｗ１，２４Ｍｗ１′，２４Ｍｕ１，２４Ｍｕ１′，２４Ｍｕ２，２４Ｍｕ２′が対応付加されている該マーク近傍の人物画像Ｐ，Ｊ，Ｋの位置が、前記対象画像抽出処理（ステップＳＡ）により撮影画像データＧｎの付加情報として得られているブロックの位置情報から特定される（ステップＦ２）。
【０２７７】
すると、前記特定された人物画像Ｐ，Ｊ，Ｋがモーションキャプチャ処理され、変身役柄データメモリ２４Ａ（図２４参照）に記憶されている前記死神の変身マークデータ２４Ｍｗ１や星の王子の変身マークデータ２４Ｍｗ１′に対応するところの変身（１）画像データ２４Ｇｗ１や変身（２）画像データ２４Ｇｗ１′、同変身役柄データメモリ２４Ａ（図２４参照）あるいは変身データメモリ１４（図２５参照）に記憶されている前記美少女Ａ，Ｂの変身マークデータ２４Ｍｕ１，２４Ｍｕ２や美少女戦士Ａ，Ｂの変身マークデータ２４Ｍｕ１′，２４Ｍｕ２′に対応するところの変身（１）画像データ２４Ｇｕ１，２４Ｇｕ２や変身（２）画像データ２４Ｇｕ１′，２４Ｇｕ２′に基づき、図３０（Ｃ）〜図３６（Ｃ）に示すように当該人物画像（男の子）Ｐと同じポーズ（姿勢）の死神の変身（１）画像データ２４Ｇｗ１、図３７（Ｃ）に示すように当該人物画像（男の子）Ｐと同じポーズ（姿勢）の星の王子の変身（２）画像データ２４Ｇｗ１′、図３０（Ｃ）〜図３７（Ｃ）に示すように当該人物画像（姉）Ｊと同じポーズ（姿勢）の美少女Ａの変身（１）画像データ２４Ｇｕ１や美少女戦士Ａの変身（２）画像データ２４Ｇｕ１′、図１９（Ｃ）〜図３７（Ｃ）に示すように当該人物画像（妹）Ｋと同じポーズ（姿勢）の美少女Ｂの変身（１）画像データ２４Ｇｕ２や美少女戦士Ｂの変身（２）画像データ２４Ｇｕ２′にそれぞれ予め設定された背景画像ＢＧ上で置き換えられて合成される（ステップＦ３）。この際、合成画像データＧＧ１〜ＧＧ８が生成される（ステップＦ３）。
【０２７８】
すると、前記各マークデータに対応して置き換えられた変身画像データに顔合成位置データがあるか否かが判断される（ステップＦ４）。
【０２７９】
これ場合、死神の変身（１）画像データ２４Ｇｗ１に対応する顔合成位置データは記憶されてなく、ステップＦ８へ進む。また、星の王子の変身（２）画像データ２４Ｇｗ１′に対応した顔合成位置データ２４Ｆ′（図２４参照）はあると判断され、また、美少女Ａの変身（１）画像データ２４Ｇｕ１に対応した顔合成位置データ２４Ｆ１や美少女戦士Ａの変身（２）画像データ２４Ｇｕ１′に対応した顔合成位置データ２４Ｆ１′、美少女Ｂの変身（１）画像データ２４Ｇｕ２に対応した顔合成位置データ２４Ｆ２や美少女戦士Ｂの変身（２）画像データ２４Ｇｕ２′に対応した顔合成位置データ２４Ｆ２′（図２４，図２５参照）もあると判断される（ステップＦ４（Ｙｅｓ））。
【０２８０】
すると、前記顔合成位置データ２４Ｆ′，２４Ｆ１，２４Ｆ１′，２４Ｆ２，２４Ｆ２′が読み出されて（ステップＦ５）、各対応する撮影画像Ｇｎ中の対象画像における顔画像部分（Ｐｆ，Ｊｆ，Ｋｆ）が抽出され（ステップＦ６）、この抽出された各顔画像部分（Ｐｆ，Ｊｆ，Ｋｆ）が各対応する変身画像データ２４Ｇｗ１′，２４Ｇｕ１，２４Ｇｕ１′，２４Ｇｕ２，２４Ｇｕ２′の顔合成位置（２４Ｆ′，２４Ｆ１，２４Ｆ１′，２４Ｆ２，２４Ｆ２）に合わせてサイズ変更され（Ｐｆ′，Ｊｆ′，Ｋｆ′）、図３０（Ｃ）〜図３７（Ｃ）に示すように、当該変身キャラクタの画像データ（２４Ｇｗ１′，２４Ｇｕ１，２４Ｇｕ１′，２４Ｇｕ２，２４Ｇｕ２′）に合成される（ステップＦ７）。
【０２８１】
このように、撮影画像データＧｎから抽出された顔画像部分（Ｐｆ，Ｊｆ，Ｋｆ）を、前記顔合成位置データに対応する位置に合わせてサイズ変更し、各対応する変身キャラクタの画像データ（２４Ｇｗ１′，２４Ｇｕ１，２４Ｇｕ１′，２４Ｇｕ２，２４Ｇｕ２′）に合成するようにしたので、変身キャラクタの顔サイズに合わせて実写の顔部分が適切に合成され、実写の顔で変身キャラクタを合成表示できることとなる。
【０２８２】
次に、この変身マーク合成処理では、処理対象であるマーク付き撮影画像データＧｍｎに仮面マークデータＭｋが含まれているかが判断される（ステップＦ８）。
【０２８３】
すなわち、前記図３２（Ｂ）〜図３６（Ｂ）で示したマーク付き撮影画像データＧｍ４〜Ｇｍ７のように、美少女戦士Ａ役の顔画像登録された姉の人物画像Ｊに対して仮面マークデータＭｋが付加されていると判断された場合には（ステップＦ８（Ｙｅｓ））、図３２（Ｃ）〜図３６（Ｃ）で示すように、同姉の人物画像Ｊにおける顔画像部分の顔合成位置２４Ｆ１に合わせて仮面画像Ｇｋが合成された合成画像ＧＧが生成される（ステップＦ９）。
【０２８４】
すると、前記各変身画像データ（２４Ｇｗ１′，２４Ｇｕ１，２４Ｇｕ１′，２４Ｇｕ２，２４Ｇｕ２′）に対応付けられて変身役柄データメモリ２４Ａ（図２４参照）に記憶されている死神の音声データ「ザクッ、ザクッ」２４Ｓｗ１、星の王子の音声データ「キラリ、キラリ」２４Ｓｗ１′、同変身役柄データメモリ２４Ａ（図２４参照）あるいは変身データメモリ１４（図２５参照）に記憶されている美少女Ａ，美少女戦士Ａの音声データ「レモ，レモ」２４Ｓｕ１，「レモン♪レモン♪」２４Ｓｕ１′、美少女Ｂ，美少女戦士Ｂの音声データ「キュ，キュ」２４Ｓｕ２，「キュート♪キュート♪」２４Ｓｕ２′が読み出され、前記図３０（Ｃ）〜図３７（Ｃ）に示すように生成された合成画像ＧＧ１〜ＧＧ８に対応付けられて保存される（ステップＦ１０）。ここで、前記美少女Ａ役または美少女戦士Ａ役の姉の人物画像Ｊや美少女Ｂ役または美少女戦士Ｂ役の妹の人物画像Ｋに対して仮面マークデータＭｋが付加されている場合には、当該美少女Ａ，美少女戦士Ａ，美少女Ｂ，美少女戦士Ｂの前記音声データ「レモ，レモ」２４Ｓｕ１，「レモン♪レモン♪」２４Ｓｕ１′，「キュ，キュ」２４Ｓｕ２，「キュート♪キュート♪」２４Ｓｕ２′に替えて、仮面マークデータＭｋに対応する音声データ「クックック」Ｓｋが同合成画像ＧＧ１〜ＧＧ８に対応付けられて保存される。（ステップＦ１０）。
【０２８５】
なお、処理対象であるマーク付き撮影画像データＧｍｎに仮面マークデータＭｋが含まれていないと判断された場合には（ステップＦ８（Ｎｏ））、前記仮面画像Ｇｋの合成処理および音声設定処理（ステップＦ９，Ｆ１０）をスキップする。
【０２８６】
すると次に、図１４における特殊効果マーク合成処理へ移行される（ステップＳＨ）。
【０２８７】
この特殊効果マーク合成処理では、まず、前記マーク付き撮影画像データメモリ２６から作業用メモリに読み出されたマーク付き撮影画像データＧｍ１〜Ｇｍ８について、前記特殊効果データメモリ２３Ａ（図２６参照）に予め記憶されている特殊効果マークデータ２３Ｍｕまたは防御効果データメモリ２３Ｂ（図２７参照）に予め記憶されている防御効果マークデータ２３′Ｍｕが付加された画像データＧｍｎが含まれているか否か判断される（ステップＨ１）。
【０２８８】
ここで、図３０（Ｂ），図３１（Ｂ），図３４（Ｂ），図３５（Ｂ）で示すように、特殊効果マークデータ２３Ｍｕや防御効果マークデータ２３′Ｍｕが付加された画像データＧｍが存在しないと判断された場合には（ステップＨ１（Ｎｏ））、処理を終了し、ステップＳ６に進む。
【０２８９】
一方、図３２（Ｂ），図３３（Ｂ），図３６（Ｂ），図３７（Ｂ）で示すように、特殊効果Ａに対応する特殊効果マークデータ２３Ｍｕ１、防御効果Ｂに対応する防御効果マークデータ２３′Ｍｕ２、特殊効果Ｃに対応する特殊効果マークデータ２３Ｍｕ３、特殊効果Ｂに対応する特殊効果マークデータ２３Ｍｕ２が存在すると判断された場合には（ステップＨ１（Ｙｅｓ））、当該特殊効果マークデータ２３Ｍｕ１，２３Ｍｕ２，２３Ｍｕ３、または防御効果マークデータ２３′Ｍｕ２が対応付加されている当該マーク近傍の人物画像（姉、妹、男の子）Ｊ，Ｋ，Ｐの位置が、前記対象画像抽出処理（ステップＳＡ）により撮影画像データＧｎの付加情報として得られているブロックの位置情報から特定される（ステップＨ２）。
【０２９０】
すると、前記特殊効果データメモリ２３Ａ（図２６参照）の特殊効果マークデータ２３Ｍｕ１，２３Ｍｕ２，２３Ｍｕ３、または防御効果データメモリ２３Ｂ（図２７参照）の防御効果マークデータ２３′Ｍｕ２に対応付けられて記憶されている特殊効果画像データ２３Ｇｕ１，２３Ｇｕ２，２３Ｇｕ３、または防御効果画像データ２３′Ｇｕ２が読み出され、前記特定された各人物画像（Ｊ，Ｋ，Ｐ）の所定位置（例えば画像上部から３分の１の位置）に対応して、敵役（相手）の変身マークデータが付加されている人物画像の方向へ向けて追加合成され、合成画像データＧＧが生成される（ステップＨ３）。
【０２９１】
例えば、図３２（Ｂ）（Ｃ）で示すように、特殊効果マークデータ２３Ｍｕ１が付加されている美少女戦士Ａ役の顔画像登録された人物画像Ｊの腕の位置からは、その特殊効果画像データ２３Ｇｕ１が死神役の人物画像Ｐの方向へ向けて追加合成される。一方、防御効果マークデータ２３′Ｍｕ２が付加されている死神役の顔画像登録された人物画像Ｐの腕の位置からは、その防御効果画像データ２３′Ｇｕ２が前記美少女戦士Ａ役の人物画像Ｊの方向へ向けて追加合成される。
【０２９２】
また、図３３（Ｂ）（Ｃ）で示すように、特殊効果マークデータ２３Ｍｕ３が付加されている死神役の顔画像登録された人物画像Ｐの腕の位置からは、その特殊効果画像データ２３Ｇｕ３が前記美少女戦士Ａ役の人物画像Ｊの方向へ向けて追加合成される。
【０２９３】
また、図３６（Ｂ）（Ｃ）で示すように、特殊効果マークデータ２３Ｍｕ２が付加されている美少女戦士Ｂ役の顔画像登録された人物画像Ｋの腕の位置からは、その特殊効果画像データ２３Ｇｕ２が悩乱した仮面付きの美少女戦士Ａ役の人物画像Ｊの方向へ向けて追加合成される（ステップＨ３）。
【０２９４】
さらに、特殊効果によっては、その特殊効果画像データ２３Ｇｕの先端部を爆発効果画像にして敵役である相手の人物画像の変身画像データに到達する位置まで延長させて追加合成するようにしてもよい（ステップＨ４）。
【０２９５】
そして、前記特殊効果データメモリ２３Ａ（図２６参照）に対応付けられて記憶されている特殊効果Ａの音声データ「キュアーハート」２３Ｓｕ１、特殊効果Ｂの音声データ「キュアースター」２３Ｓｕ２、特殊効果Ｃの音声データ「デスムーン」２３Ｓｕ３が読み出され、また前記防御効果データメモリ２３Ｂ（図２７参照）に対応付けられて記憶されている防御効果Ｂの音声データ「パーン」２３′Ｓｕ２が読み出され、前記図３２（Ｃ），図３３（Ｃ），図３６（Ｃ），図３７（Ｃ）に示すように生成された各合成画像ＧＧ３，ＧＧ４，ＧＧ７，ＧＧ８に対応付けられて保存される（ステップＨ５）。
【０２９６】
すると、前記図３０（Ｃ）〜図３７（Ｃ）で示したように、前記ステップＳＦ〜ＳＨの処理に従い作業用データメモリ上に生成された一連の合成画像データＧＧ１〜ＧＧ８が合成画像データメモリ２７に記憶され保存される（ステップＳ６）。
【０２９７】
そして、前記合成画像データメモリ２７に記憶された一連の合成画像データ（対応付けられた音声データを含む）ＧＧ１〜ＧＧ８が、前記図３０（Ｃ）〜図３７（Ｃ）で示すように、表示部１１により再生表示されると共に音声出力部１３により再生出力される（ステップＳ７）。なお、本第２実施形態の合成画像出力装置がサーバ装置３０（図７参照）として構成されている場合には、前記ステップＳ１において受信された一連の撮影画像データＧ１〜Ｇ８の送信元である通信ネットワークＮ上の通信端末Ａ（デジタルカメラ）１０′や通信端末Ｂ（ＰＣ）４０に対して、前記合成画像データメモリ２７に記憶された一連の合成画像データ（対応付けられた音声データを含む）ＧＧ１〜ＧＧ８が読み出されて応答送信される（ステップＳ７）。
【０２９８】
したがって、前記構成のデジタルカメラ１０あるいはサーバ装置３０による第２実施形態の合成画像出力装置によれば、画像撮影部２１により動画撮影された一連の撮影画像データＧｎが入力されると、当該撮影画像データＧｎに含まれる人物画像（Ｐ，Ｊ，Ｋ）が抽出され、そのうちの変身役柄データメモリ２４Ａに予め顔画像により登録されている死神役の人物画像Ｐについては、当該死神の変身（１）画像データ２４Ｇｗ１に置き換えられた合成画像ＧＧ１〜ＧＧ７が生成されると共に、特殊効果データメモリ２３Ａに予め設定されたデス効果２３Ｋ３の特殊効果モーション（身振り）２３Ｐ３ａ〜２３Ｐ３ｃをしているか否かが検出判断され、また、同変身役柄データメモリ２４Ａに予め顔画像により登録されている美少女戦士Ａ役の人物画像Ｊについては、その顔画像をそのままにして当該美少女戦士Ａの変身画像データ２４Ｇｕ１′に置き換えられた合成画像ＧＧ２〜ＧＧ８が生成されると共に、特殊効果データメモリ２３Ａに予め設定されたキュア効果２３Ｋ１の特殊効果モーション（身振り）２３Ｐ１ａ〜２３Ｐ１ｃをしているか否かが検出判断され、また、同変身役柄データメモリ２４Ａに予め顔画像により登録されている美少女戦士Ｂ役の人物画像Ｋについては、その顔画像をそのままにして当該美少女戦士Ｂの変身画像データ２４Ｇｕ２′に置き換えられた合成画像ＧＧ６〜ＧＧ８が生成されると共に、特殊効果データメモリ２３Ａに予め設定されたキュア効果２３Ｋ２の特殊効果モーション（身振り）２３Ｐ２ａ〜２３Ｐ２ｃをしているか否かが検出判断される。
【０２９９】
そして、前記撮影画像データＧ４に含まれる死神役の人物画像Ｐについて、予め設定されたデス効果２３Ｋ３の特殊効果モーション（身振り）２３Ｐ３ａ〜２３Ｐ３ｃをしていることが検出判断された場合には、当該デス効果２３Ｋ３に対応する特殊効果画像データ２３Ｇｕ３がその効果の対象２３Ｔ３として設定された美少女戦士Ａ役の人物画像Ｊの方向へ向けて画像合成されると共に、当該美少女戦士Ａ役の人物画像Ｊに仮面画像Ｇｋが付加合成されて仮面付きの美少女戦士Ａに変身させられた合成画像ＧＧ４として生成出力される。また、例えば前記撮影画像データＧ７に含まれる美少女戦士Ｂ役の人物画像Ｊについて、予め設定されたキュア効果２３Ｋ２の特殊効果モーション（身振り）２３Ｐ２ａ〜２３Ｐ２ｃをしていることが検出判断された場合には、当該キュア効果２３Ｋ２に対応する特殊効果画像データ２３Ｇｕ２がその効果の対象２３Ｔ２として設定された仮面Ｇｋ付き美少女戦士Ａ役の人物画像Ｊおよび死神役の人物画像Ｐの方向へ向けて画像合成されると共に、当該仮面Ｇｋ付き美少女戦士Ａ役の人物画像Ｊからはその仮面画像Ｇｋが削除されて元の美少女戦士Ａに変身させられ、また当該死神の変身（１）画像データ２４Ｇｗ１は星の王子の変身（２）画像データ２４Ｇｗ１′に変身させられた合成画像ＧＧ８として生成出力される。
【０３００】
つまり、このような第２実施形態の合成画像出力装置によれば、予め顔画像により登録されている死神役の人物画像Ｐについて、予め設定されたデス効果２３Ｋ３の特殊効果モーション（身振り）２３Ｐ３ａ〜２３Ｐ３ｃをしていることが検出判断されると、当該デス効果の対象２３Ｔ３として設定された美少女戦士Ａ役の人物画像Ｊに仮面画像Ｇｋが付加合成されて仮面付きの美少女戦士Ａに変身させられた合成画像ＧＧ４として生成出力されるものである。またそればかりでなく、予め顔画像により登録されている美少女戦士Ｂ役の人物画像Ｊについても、予め設定されたキュア効果２３Ｋ２の特殊効果モーション（身振り）２３Ｐ２ａ〜２３Ｐ２ｃをしていることが検出判断されると、当該キュア効果の対象２３Ｔ２として設定された仮面Ｇｋ付き美少女戦士Ａ役の人物画像Ｊからはその仮面画像Ｇｋが削除されて元の美少女戦士Ａに変身させられ、また同キュア効果の対象２３Ｔ２として設定された死神役の人物画像Ｐは星の王子の変身（２）画像データ２４Ｇｗ１′に変身させられた合成画像ＧＧ８として生成出力されるものである。
【０３０１】
これにより、動画撮影された撮影画像Ｇｎから抽出された人物画像（Ｐ，Ｊ，Ｋ）のうちで、予め役柄登録された男の子や姉や妹の人物画像Ｐ，Ｊ，Ｋによる所定の特殊効果モーション２３Ｐ３，２３Ｐ１，２３Ｐ２だけに応じて、当該特殊効果の対象２３Ｔ３，２３Ｔ１，２３Ｔ２として設定されている相手役の人物画像（Ｊ）（Ｐ）（Ｐ，Ｊ）を変身画像に置き換えた合成画像を生成することができ、事前に定めた配役通りの登場人物がその意志を持って所定の身振り（モーション）を行うことで、特定の相手役を変身させるという特撮映画やアニメーションなどにある変身合成画像を、素人の誰でもが容易に生成することができる。そして、当該生成された合成動画像ＧＧｎを表示部１１に出力表示させて見たり、外部のモニタに出力表示させて見たりすることで、これまでにない楽しみを得ることができる。
【０３０２】
また、前記構成のデジタルカメラ１０あるいはサーバ装置３０による第２実施形態の合成画像出力装置によれば、予め死神役として登録された男の子の人物画像Ｐが撮影画像Ｇｎから検出され、その身振り（モーション）に対応した死神の変身（１）画像データ２４Ｇｗ１に前記人物画像Ｐを置き換え合成した合成画像ＧＧｎを生成した際には、前記変身役柄データメモリ２４Ａに記憶されている当該変身（１）画像データ２４Ｇｗ１の音声データ「ザクッ、ザクッ、…」２４Ｓｗ１を、前記合成画像ＧＧｎに対応付けて保存し出力させ、また、予め美少女戦士Ａ役として登録された姉の人物画像Ｊが撮影画像Ｇｎから検出され、その身振り（モーション）に対応した美少女戦士Ａの変身画像データ２４Ｇｕ１′に前記人物画像Ｊを置き換え合成した合成画像ＧＧｎを生成した際には、前記変身役柄データメモリ２４Ａに記憶されている当該変身画像データ２４Ｇｕ１′の音声データ「レモン、レモン、…」２４Ｓｕ１′を、前記合成画像ＧＧｎに対応付けて保存し出力させ、また、美少女戦士Ｂ役として登録された妹の人物画像Ｋが撮影画像Ｇｎから検出され、その身振り（モーション）に対応した美少女戦士Ｂの変身画像データ２４Ｇｕ２′に前記人物画像Ｋを置き換え合成した合成画像ＧＧｎを生成した際には、前記変身役柄データメモリ２４Ａに記憶されている当該変身画像データ２４Ｇｕ２′の音声データ「キュート、キュート、…」２４Ｓｗ２′を、前記合成画像ＧＧｎに対応付けて保存し出力させるので、容易且つよりリアルに特撮風の合成動画像ＧＧｎを作ることができる。
【０３０３】
また、前記構成のデジタルカメラ１０による第２実施形態の合成画像出力装置によれば、前記動画撮影中に表示部１１にリアルタイムに表示される撮影画像データＧｎについて、前記予め死神役として登録された男の子の人物画像Ｐが撮影画像Ｇｎから検出された際には、当該人物画像Ｐに対して死神の変身（１）画像データ２４Ｇｗ１への変身対象となったことを示す変身（１）マークデータ２４Ｍｗ１を付加したマーク付き撮影画像データＧｍｎとして表示部１１に表示させ、しかも前記変身（１）画像データ２４Ｇｗ１の音声データ「ザクッ、ザクッ、…」２４Ｓｗ１も共に音声出力部１３から出力させ、また、前記予め美少女戦士Ａ役として登録された姉の人物画像Ｊが撮影画像Ｇｎから検出された際には、当該人物画像Ｊに対して美少女戦士Ａの変身画像データ２４Ｇｕ１′への変身対象となったことを示す変身マークデータ２４Ｍｕ１′を付加したマーク付き撮影画像データＧｍｎとして表示部１１に表示させ、しかも前記変身画像データ２４Ｇｕ１′の音声データ「レモン、レモン、…」２４Ｓｕ１′も共に音声出力部１３から出力させ、また、前記予め美少女戦士Ｂ役として登録された妹の人物画像Ｋが撮影画像Ｇｎから検出された際には、当該人物画像Ｋに対して美少女戦士Ｂの変身画像データ２４Ｇｕ２′への変身対象となったことを示す変身マークデータ２４Ｍｕ２′を付加したマーク付き撮影画像データＧｍｎとして表示部１１に表示させ、しかも前記変身画像データ２４Ｇｕ２′の音声データ「キュート、キュート、…」２４Ｓｕ２′も共に音声出力部１３から出力させるので、例えば撮影操作中の家族は、被写体の人物画像（男の子，姉，妹）Ｐ，Ｊ，Ｋがその登録された役柄通りに変身され置き換え処理されていることを容易に認識することができ、またこれを演じている最中の被写体自身（男の子Ｐ，姉Ｊ，妹Ｋ）にあっても、自らがその登録された役柄通りに変身処理されていることを音声により容易に認識することができる。
【０３０４】
なお、前記各実施形態において記載した合成画像出力装置による各処理の手法、すなわち、図８のフローチャートに示す合成画像出力処理、図９のフローチャートに示す前記合成画像出力処理に伴う対象画像抽出処理、図１０のフローチャートに示す前記合成画像出力処理に伴う役柄変身マーク処理、図１１のフローチャートに示す前記合成画像出力処理に伴う第１実施形態のモーション変身マーク処理、図１２のフローチャートに示す前記合成画像出力処理に伴う第１実施形態の特殊効果マーク処理、図１３のフローチャートに示す前記合成画像出力処理に伴う変身マーク合成処理、図１４のフローチャートに示す前記合成画像出力処理に伴う特殊効果マーク合成処理、図２８のフローチャートに示す前記合成画像出力処理に伴う第２実施形態のモーション変身マーク処理、図２９のフローチャートに示す前記合成画像出力処理に伴う第２実施形態の特殊効果マーク処理等の各手法は、何れもコンピュータに実行させることができるプログラムとして、メモリカード（ＲＯＭカード、ＲＡＭカード等）、磁気ディスク（フロッピディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ等）、半導体メモリ等の外部記憶媒体１８（３３）に格納して配布することができる。そして、変身データ１４（３２Ｂ）、特殊効果データ２３Ａ（３２ＣＡ）、防御効果データ２３Ｂ（３２ＣＢ）、変身役柄データ２４Ａ（３２Ｄ）をメモリ１７（３２）に記憶した種々のコンピュータ端末は、この外部記憶媒体１８（３３）に記憶されたプログラムをプログラムメモリ２２（３２Ａ）に読み込み、この読み込んだプログラムによって動作が制御されることにより、前記各実施形態において説明した動画撮影画像データＧｎからの役割登録された人物画像の抽出とその変身画像を用いた合成画像ＧＧｎの作成・出力機能を実現し、前述した手法による同様の処理を実行することができる。
【０３０５】
また、前記各手法を実現するためのプログラムのデータは、プログラムコードの形態として通信ネットワーク（インターネット）Ｎ上を伝送させることができ、この通信ネットワーク（インターネット）Ｎに接続されたコンピュータ端末（プログラムサーバ）から前記のプログラムデータを取り込み、前述した動画撮影画像データＧｎからの役割登録された人物画像の抽出とその変身画像を用いた合成画像ＧＧｎの作成・出力機能を実現することもできる。
【０３０６】
なお、本願発明は、前記各実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。さらに、前記各実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせにより種々の発明が抽出され得る。例えば、各実施形態に示される全構成要件から幾つかの構成要件が削除されたり、幾つかの構成要件が異なる形態にして組み合わされても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除されたり組み合わされた構成が発明として抽出され得るものである。
【符号の説明】
【０３０７】
１０  …デジタルカメラ（通信端末Ａ）
１１（３７）…表示部
１２（３６）…入力部
１３  …音声出力部
１４（３２Ｂ）…変身データメモリ
１４Ｐ…変身モーションモデルデータ
１４Ｇｕ（２４Ｇ′）…変身画像データ
１４Ｓｕ（２４Ｓ′）…変身音声データ
１４Ｍｕ（２４Ｍ′）…変身マークデータ
１４Ｆ（２４Ｆ′）…顔合成値データ
１６（３１）…ＣＰＵ
１７（３２）…メモリ
１８（３３）…外部記録媒体
１９（３４）…記録媒体読取部
２０（３５）…電送制御部
２１  …画像撮影部
２２（３２Ａ）…プログラムメモリ
２３Ａ（３２ＣＡ）…特殊効果データメモリ
２３Ｐ…特殊効果モーションモデルデータ
２３Ｇｕ…特殊効果画像データ
２３Ｓｕ…特殊効果音声データ
２３Ｋ…効果の種類
２３Ｔ…効果の対象
２３Ｍｕ…特殊効果マークデータ
２３Ｂ（３２ＣＢ）…防御効果データメモリ
２３′Ｐ…防御効果モーションモデルデータ
２３′Ｇｕ…防御効果画像データ
２３′Ｓｕ…防御効果音声データ
２３′Ｍｕ…防御効果マークデータ
Ｍｋ  …仮面マークデータ
２４Ａ（３２Ｄ）…変身役柄データメモリ
２４Ｔ…変身対象（顔）画像データ
２４Ｇｗ（２４Ｇ）…変身（１）画像データ
２４Ｓｗ（２４Ｓ）…変身（１）音声データ
２４Ｍｗ（２４Ｍ）…変身（１）マークデータ
２４Ｇｗ′（２４Ｇ′）…変身（２）画像データ
２４Ｓｗ′（２４Ｓ′）…変身（２）音声データ
２４Ｍｗ′（２４Ｍ′）…変身（２）マークデータ
２４Ｈ…変身条件データ
２４Ｂ（３２Ｅ）…役柄別変身状態
２５（３２Ｆ）…撮影画像データメモリ
２６（３２Ｇ）…マーク付き撮影画像データメモリ
２７（３２Ｈ）…合成画像データメモリ
３０  …サーバ装置
４０  …通信端末Ｂ（ＰＣ）
Ｎ  …通信ネットワーク（インターネット）
ＢＧ  …背景画像データ
Ｇｎ…撮影画像データ
Ｇｍｎ…マーク付き撮影画像データ
ＧＧｎ…合成画像データ
Ｐ  …人物画像（男の子）
Ｊ  …人物画像（姉）
Ｋ  …人物画像（妹）
【図１】
0005252068.tif 000002
【図２】
0005252068.tif 000003
【図３】
0005252068.tif 000004
【図４】
0005252068.tif 000005
【図５】
0005252068.tif 000006
【図６】
0005252068.tif 000007
【図７】
0005252068.tif 000008
【図８】
0005252068.tif 000009
【図９】
0005252068.tif 000010
【図１０】
0005252068.tif 000011
【図１１】
0005252068.tif 000012
【図１２】
0005252068.tif 000013
【図１３】
0005252068.tif 000014
【図１４】
0005252068.tif 000015
【図１５】
0005252068.tif 000016
【図１６】
0005252068.tif 000017
【図１７】
0005252068.tif 000018
【図１８】
0005252068.tif 000019
【図１９】
0005252068.tif 000020
【図２０】
0005252068.tif 000021
【図２１】
0005252068.tif 000022
【図２２】
0005252068.tif 000023
【図２３】
0005252068.tif 000024
【図２４】
0005252068.tif 000025
【図２５】
0005252068.tif 000026
【図２６】
0005252068.tif 000027
【図２７】
0005252068.tif 000028
【図２８】
0005252068.tif 000029
【図２９】
0005252068.tif 000030
【図３０】
0005252068.tif 000031
【図３１】
0005252068.tif 000032
【図３２】
0005252068.tif 000033
【図３３】
0005252068.tif 000034
【図３４】
0005252068.tif 000035
【図３５】
0005252068.tif 000036
【図３６】
0005252068.tif 000037
【図３７】
0005252068.tif 000038