(57)【要約】【課題】ＡＲ技術を用いた新たなコンテンツの提供方法を提示し、視聴者の興趣を向上させることを課題とする。【解決手段】図柄表示具は、識別図柄が複数描かれた第１部材と、当該識別図柄を表示する表示窓を備える第２部材と、を有し、表示窓に表示される識別図柄が第１部材の動きに伴って変動する構成とする。一方、合成画像表示装置は、撮影手段により図柄表示具を撮影した撮影画像に含まれている識別図柄を特定し、当該識別図柄に対応する仮想オブジェクト画像を撮影画像に重ねて合成画像を生成し表示する。【選択図】図５
2012181748.tif 000002
【特許請求の範囲】
【請求項１】
撮影手段と、
前記撮影手段により撮影された撮影画像に含まれている識別図柄を特定する識別図柄特定手段と、
前記特定された識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を取得する仮想オブジェクト画像取得手段と、
前記取得された仮想オブジェクト画像を、前記識別図柄を含む撮影画像に重ねて合成画像を生成する合成画像生成手段と、
前記生成された合成画像を表示手段に表示させる表示制御部と、
を備える合成画像表示装置における前記識別図柄特定手段が特定可能な前記識別図柄が複数描かれた第１部材と、
前記第１部材に描かれた識別図柄を表示する表示窓を備える第２部材と、
を有する図柄表示具であって、
前記表示窓に表示される識別図柄が前記第１部材の動きに伴って変動することを特徴とする図柄表示具。
【請求項２】
請求項１に記載の図柄表示具であって、
前記第１部材に描かれる複数の識別図柄は、それぞれ所定のストーリーの進行段階に応じた、各進行段階を表す前記仮想オブジェクト画像と対応する識別図柄であり、各識別図柄は当該所定のストーリーの進行に応じた順序で描かれており、
前記第１部材は、前記順序通りに前記識別図柄が前記表示窓に表示されるように動くことを特徴とする図柄表示具。
【請求項３】
請求項１又は２に記載の図柄表示具であって、
前記第２部材における前記表示窓の周囲の少なくとも一部には、所定の図柄の一部が描かれており、
前記第１部材に描かれる識別図柄は、前記表示窓に表示された際、前記第２部材に描かれた図柄の一部とともに前記所定の図柄を形成することを特徴とする図柄表示具。
【請求項４】
合成画像表示装置と、識別図柄を表示する図柄表示具とを有する合成画像表示システムであって、
前記合成画像表示装置は、
撮影手段と、
前記撮影手段により撮影された撮影画像に含まれている識別図柄を特定する識別図柄特定手段と、
前記特定された識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を取得する仮想オブジェクト画像取得手段と、
前記取得された仮想オブジェクト画像を、前記識別図柄を含む撮影画像に重ねて合成画像を生成する合成画像生成手段と、
前記生成された合成画像を表示手段に表示させる表示制御部と、
を備え、
前記図柄表示具は、
前記合成画像表示装置における前記識別図柄特定手段が特定可能な前記識別図柄が複数描かれた第１部材と、
前記第１部材に描かれた識別図柄を表示する表示窓を備える第２部材と、
を有し、
前記表示窓に表示される識別図柄が前記第１部材の動きに伴って変動することを特徴とする合成画像表示システム。
【請求項５】
請求項４に記載の合成画像表示システムであって、
前記第１部材に描かれる複数の識別図柄は、それぞれ所定のストーリーの進行段階に応じた、各進行段階を表す前記仮想オブジェクト画像と対応する識別図柄であり、各識別図柄は当該所定のストーリーの進行に応じた順序で描かれており、
前記第１部材は、前記順序通りに前記識別図柄が前記表示窓に表示されるように動くことを特徴とする合成画像表示システム。
【請求項６】
請求項４又は５に記載の合成画像表示システムであって、
前記第２部材における前記表示窓の周囲の少なくとも一部には、所定の図柄の一部が描かれており、
前記第１部材に描かれる識別図柄は、前記表示窓に表示された際、前記第２部材に描かれた図柄の一部とともに前記所定の図柄を形成することを特徴とする合成画像表示システム。
【請求項７】
請求項４乃至６の何れか一項に記載の合成画像表示システムであって、
前記合成画像表示装置は、
前記識別図柄に対応する前記仮想オブジェクト画像を記憶する仮想オブジェクト画像記憶手段、
を更に備え、
前記仮想オブジェクト画像取得手段は、前記識別図柄特定手段により特定された識別図柄に対応する仮想オブジェクト画像が前記仮想オブジェクト画像記憶手段に記憶されていない場合に、所定のサーバ装置から当該特定された識別図柄に対応する仮想オブジェクト画像をダウンロードすることを特徴とする合成画像表示システム。
【請求項８】
撮影手段と、
前記撮影手段により撮影された撮影画像を合成画像生成サーバに送信する撮影画像送信手段と、
前記合成画像生成サーバが前記撮影画像に含まれている識別図柄を特定し、当該特定した識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を当該撮影画像に重ねて生成した合成画像を、当該合成画像生成サーバから受信する合成画像受信手段と、
前記受信した合成画像を表示手段に表示させる表示制御部と、
を備える合成画像表示装置とネットワークを介して接続される前記合成画像生成サーバが特定可能な前記識別図柄が複数描かれた第１部材と、
前記第１部材に描かれた識別図柄を表示する表示窓を備える第２部材と、
を有する図柄表示具であって、
前記表示窓に表示される識別図柄が前記第１部材の動きに伴って変動することを特徴とする図柄表示具。
【請求項９】
合成画像表示装置と、合成画像生成サーバと、識別図柄を表示する図柄表示具とを有する合成画像表示システムであって、
前記合成画像表示装置は、
撮影手段と、
前記撮影手段により撮影された撮影画像を前記合成画像生成サーバに送信する撮影画像送信手段と、
前記合成画像生成サーバが生成した合成画像を当該合成画像生成サーバから受信する合成画像受信手段と、
前記受信した合成画像を表示手段に表示させる表示制御部と、
を備え、
前記合成画像生成サーバは、
前記合成画像表示装置から受信した撮影画像に含まれている識別図柄を特定する識別図柄特定手段と、
前記特定された識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を取得する仮想オブジェクト画像取得手段と、
前記取得された仮想オブジェクト画像を、前記識別図柄を含む撮影画像に重ねて合成画像を生成する合成画像生成手段と、
前記生成した合成画像を前記合成画像表示装置に送信する合成画像送信手段と、
を備え、
前記図柄表示具は、
前記合成画像生成サーバにおける前記識別図柄特定手段が特定可能な前記識別図柄が複数描かれた第１部材と、
前記第１部材に描かれた識別図柄を表示する表示窓を備える第２部材と、
を有し、
前記表示窓に表示される識別図柄が前記第１部材の動きに伴って変動することを特徴とする合成画像表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、現実世界の映像に仮想的なオブジェクトの画像を重ね合わせることによって、その仮想オブジェクトがあたかも現実世界の中に存在するかのように表現するAugmented Reality（以下、「ＡＲ」）の技術分野に関する。
【背景技術】
【０００２】
従来、スマートフォンで表現される動画コンテンツ及び音楽コンテンツを、絵本と組み合わせて視聴者に視聴させるフォンブック（登録商標）が好評を博している。フォンブックでは、絵本の一部にスマートフォンを据え付けられるようになっており、視聴者は絵本のページをめくりつつ、開かれたページと関連したコンテンツをスマートフォンで視聴できるようになっている。
【０００３】
一方で、現実世界を強化するＡＲと呼ばれる技術が開示されている（例えば、特許文献１乃至３）。ＡＲとは、現実世界の映像に、仮想的なオブジェクト（以下、「仮想オブジェクト」と称する）の画像を重ね合わせることによって、その仮想オブジェクトがあたかも現実世界の中に存在するかのような画像を提供するものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−２１３６７３号公報
【特許文献２】特表２００４−５３４９６３号公報
【特許文献３】特表２００５−５０７１０９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、ＡＲ技術を用いた新たなコンテンツの提供方法を提示し、視聴者の興趣を向上させることを課題とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、請求項１に記載の発明は、撮影手段と、前記撮影手段により撮影された撮影画像に含まれている識別図柄を特定する識別図柄特定手段と、前記特定された識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を取得する仮想オブジェクト画像取得手段と、前記取得された仮想オブジェクト画像を、前記識別図柄を含む撮影画像に重ねて合成画像を生成する合成画像生成手段と、前記生成された合成画像を表示手段に表示させる表示制御部と、を備える合成画像表示装置における前記識別図柄特定手段が特定可能な前記識別図柄が複数描かれた第１部材と、前記第１部材に描かれた識別図柄を表示する表示窓を備える第２部材と、を有する図柄表示具であって、前記表示窓に表示される識別図柄が前記第１部材の動きに伴って変動することを特徴とする。
【０００７】
この構成によれば、合成画像表示装置は、撮影手段が撮影した撮影画像に含まれている識別図柄を特定し、当該特定した識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を取得し、当該取得した仮想オブジェクト画像を、識別図柄を含む撮影画像に重ねて合成画像を生成し、当該生成した合成画像を表示手段に表示させる。また、図柄表示具の表示窓に表示される識別図柄は第１部材の動きに伴って変動する。
【０００８】
この発明によれば、現実世界の画像に仮想オブジェクト画像を重ねた合成画像が表示手段に表示され、当該表示される合成画像の仮想オブジェクト画像は第１部材の動きに伴って変化するので、視聴者の興趣を向上させることができる。
【０００９】
請求項２に記載の発明は、請求項１に記載の図柄表示具であって、前記第１部材に描かれる複数の識別図柄は、それぞれ所定のストーリーの進行段階に応じた、各進行段階を表す前記仮想オブジェクト画像と対応する識別図柄であり、各識別図柄は当該所定のストーリーの進行に応じた順序で描かれており、前記第１部材は、前記順序通りに前記識別図柄が前記表示窓に表示されるように動くことを特徴とする。
【００１０】
この発明によれば、表示手段に表示される合成画像の仮想オブジェクト画像は、所定のストーリーの各進行段階を表す画像であるとともに、仮想オブジェクト画像が当該所定のストーリーの進行に応じた順序で変化するので、視聴者はストーリーを楽しむことができる。
【００１１】
請求項３に記載の発明は、請求項１又は２に記載の図柄表示具であって、前記第２部材における前記表示窓の周囲の少なくとも一部には、所定の図柄の一部が描かれており、前記第１部材に描かれる識別図柄は、前記表示窓に表示された際、前記第２部材に描かれた図柄の一部とともに前記所定の図柄を形成することを特徴とする。
【００１２】
この発明によれば、表示窓に識別図柄が表示された際に所定の図柄が図柄表示具に表示されることから、視聴者は図柄表示具全体を、或いは表示手段に表示される合成画像を違和感なく視聴することができる。
【００１３】
請求項４に記載の発明は、合成画像表示装置と、識別図柄を表示する図柄表示具とを有する合成画像表示システムであって、前記合成画像表示装置は、撮影手段と、前記撮影手段により撮影された撮影画像に含まれている識別図柄を特定する識別図柄特定手段と、前記特定された識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を取得する仮想オブジェクト画像取得手段と、前記取得された仮想オブジェクト画像を、前記識別図柄を含む撮影画像に重ねて合成画像を生成する合成画像生成手段と、前記生成された合成画像を表示手段に表示させる表示制御部と、を備え、前記図柄表示具は、前記合成画像表示装置における前記識別図柄特定手段が特定可能な前記識別図柄が複数描かれた第１部材と、前記第１部材に描かれた識別図柄を表示する表示窓を備える第２部材と、を有し、前記表示窓に表示される識別図柄が前記第１部材の動きに伴って変動することを特徴とする。
【００１４】
この発明によれば、現実世界の画像に仮想オブジェクト画像を重ねた合成画像が表示手段に表示され、当該表示される合成画像の仮想オブジェクト画像は第１部材の動きに伴って変化するので、視聴者の興趣を向上させることができる。
【００１５】
請求項５に記載の発明は、請求項４に記載の合成画像表示システムであって、前記第１部材に描かれる複数の識別図柄は、それぞれ所定のストーリーの進行段階に応じた、各進行段階を表す前記仮想オブジェクト画像と対応する識別図柄であり、各識別図柄は当該所定のストーリーの進行に応じた順序で描かれており、前記第１部材は、前記順序通りに前記識別図柄が前記表示窓に表示されるように動くことを特徴とする。
【００１６】
この発明によれば、表示手段に表示される合成画像の仮想オブジェクト画像は、所定のストーリーの各進行段階を表す画像であるとともに、仮想オブジェクト画像が当該所定のストーリーの進行に応じた順序で変化するので、視聴者はストーリーを楽しむことができる。
【００１７】
請求項６に記載の発明は、請求項４又は５に記載の合成画像表示システムであって、前記第２部材における前記表示窓の周囲の少なくとも一部には、所定の図柄の一部が描かれており、前記第１部材に描かれる識別図柄は、前記表示窓に表示された際、前記第２部材に描かれた図柄の一部とともに前記所定の図柄を形成することを特徴とする。
【００１８】
この発明によれば、表示窓に識別図柄が表示された際に所定の図柄が図柄表示具に表示されることから、視聴者は図柄表示具全体を、或いは表示手段に表示される合成画像を違和感なく視聴することができる。
【００１９】
請求項７に記載の発明は、請求項４乃至６の何れか一項に記載の合成画像表示システムであって、前記合成画像表示装置は、前記識別図柄に対応する前記仮想オブジェクト画像を記憶する仮想オブジェクト画像記憶手段、を更に備え、前記仮想オブジェクト画像取得手段は、前記識別図柄特定手段により特定された識別図柄に対応する仮想オブジェクト画像が前記仮想オブジェクト画像記憶手段に記憶されていない場合に、所定のサーバ装置から当該特定された識別図柄に対応する仮想オブジェクト画像をダウンロードすることを特徴とする。
【００２０】
この発明によれば、仮想オブジェクト画像が仮想オブジェクト画像記憶手段に記憶されていない場合であっても、合成画像を生成し表示させることができる。また、仮想オブジェクト画像記憶手段に全ての識別図柄に対応する仮想オブジェクト画像を記憶させなくてもよいので、仮想オブジェクト画像記憶手段の記憶領域を節約することができる。
【００２１】
請求項８に記載の発明は、撮影手段と、前記撮影手段により撮影された撮影画像を合成画像生成サーバに送信する撮影画像送信手段と、前記合成画像生成サーバが前記撮影画像に含まれている識別図柄を特定し、当該特定した識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を当該撮影画像に重ねて生成した合成画像を、当該合成画像生成サーバから受信する合成画像受信手段と、前記受信した合成画像を表示手段に表示させる表示制御部と、を備える合成画像表示装置とネットワークを介して接続される前記合成画像生成サーバが特定可能な前記識別図柄が複数描かれた第１部材と、前記第１部材に描かれた識別図柄を表示する表示窓を備える第２部材と、を有する図柄表示具であって、前記表示窓に表示される識別図柄が前記第１部材の動きに伴って変動することを特徴とする。
【００２２】
この構成によれば、合成画像表示装置は、合成画像生成サーバが生成した合成画像を受信し、当該受信した合成画像を表示手段に表示させる。また、図柄表示具の表示窓に表示される識別図柄は第１部材の動きに伴って変動する。したがって、現実世界の画像に仮想オブジェクト画像を重ねた合成画像が表示手段に表示され、当該表示される合成画像の仮想オブジェクト画像は第１部材の動きに伴って変化するので、視聴者の興趣を向上させることができる。
【００２３】
請求項９に記載の発明は、合成画像表示装置と、合成画像生成サーバと、識別図柄を表示する図柄表示具とを有する合成画像表示システムであって、前記合成画像表示装置は、撮影手段と、前記撮影手段により撮影された撮影画像を前記合成画像生成サーバに送信する撮影画像送信手段と、前記合成画像生成サーバが生成した合成画像を当該合成画像生成サーバから受信する合成画像受信手段と、前記受信した合成画像を表示手段に表示させる表示制御部と、を備え、前記合成画像生成サーバは、前記合成画像表示装置から受信した撮影画像に含まれている識別図柄を特定する識別図柄特定手段と、前記特定された識別図柄に対応する仮想オブジェクトの画像である仮想オブジェクト画像を取得する仮想オブジェクト画像取得手段と、前記取得された仮想オブジェクト画像を、前記識別図柄を含む撮影画像に重ねて合成画像を生成する合成画像生成手段と、前記生成した合成画像を前記合成画像表示装置に送信する合成画像送信手段と、を備え、前記図柄表示具は、前記合成画像生成サーバにおける前記識別図柄特定手段が特定可能な前記識別図柄が複数描かれた第１部材と、前記第１部材に描かれた識別図柄を表示する表示窓を備える第２部材と、を有し、前記表示窓に表示される識別図柄が前記第１部材の動きに伴って変動することを特徴とする。
【００２４】
この発明によれば、現実世界の画像に仮想オブジェクト画像を重ねた合成画像が表示手段に表示され、当該表示される合成画像の仮想オブジェクト画像は第１部材の動きに伴って変化するので、視聴者の興趣を向上させることができる。
【発明の効果】
【００２５】
本発明によれば、現実世界の画像に仮想オブジェクト画像を重ねた合成画像が表示手段に表示され、当該表示される合成画像の仮想オブジェクト画像は第１部材の動きに伴って変化するので、視聴者の興趣を向上させることができる。
【図面の簡単な説明】
【００２６】
【図１】（ａ）ストーリーボード１の外観の一例を示す図である。（ｂ）ストーリーシート２の外観の一例を示す図である。
【図２】ストーリーボードセットの使用例を示す図である。
【図３】携帯端末Ｍの概要構成を示すブロック図である。
【図４】コンテンツテーブル１０２４に記述される内容の一例を示す図である。
【図５】ストーリーボードセットを携帯端末Ｍのカメラ１０６で撮影した際の画面例を示す図である。
【図６】ストーリーボードセットを携帯端末Ｍのカメラ１０６で撮影した際の画面例を示す図である。
【図７】ストーリーボードセットを携帯端末Ｍのカメラ１０６で撮影した際の画面例を示す図である。
【図８】携帯端末Ｍの動作例を示すフローチャートである。
【図９】（ａ）変形例１におけるストーリーボード１Ａの外観の一例を示す図である。（ｂ）変形例１におけるストーリーシート２の外観の一例を示す図である。（ｃ）変形例１におけるストーリーシート４の外観の一例を示す図である。
【図１０】コンテンツテーブル１０２４Ａに記述される内容の一例を示す図である。
【図１１】変形例１におけるストーリーボードセットを携帯端末Ｍのカメラ１０６で撮影した際の画面例を示す図である。
【図１２】変形例１におけるストーリーボードセットを携帯端末Ｍのカメラ１０６で撮影した際の画面例を示す図である。
【図１３】（ａ）変形例２におけるストーリーボードセット１Ｂの外観の一例を示す図である。（ｂ）変形例２におけるストーリーシート５の外観の一例を示す図である。
【図１４】変形例３における携帯端末Ｍの動作例を示すフローチャートである。
【図１５】変形例４におけるコンテンツ処理サーバＳＶの概要構成を示すブロック図である。
【発明を実施するための形態】
【００２７】
以下、図面を参照して本発明の実施形態について説明する。なお、以下に説明する実施形態は、ストーリー提供システムについて本発明を適用した場合の実施形態である。
【００２８】
本実施形態のストーリー提供システムは、ストーリーボードセットと、ストーリー提供アプリケーションプログラム（「ストーリー提供アプリ」）がインストールされた携帯端末Ｍとを含み、ユーザに所定のストーリーを提供するシステムである。
【００２９】
［１．ストーリーボードセットの構成］
先ず、図１及び図２を用いて本実施形態に係るストーリーボードセットの構成について説明する。
【００３０】
ストーリーボードセットは、図１（ａ）に示すストーリーボード１と、図１（ｂ）に示すストーリーシート２とを有する。ストーリーボード１の絵表示部１１には所定のストーリーを表す絵の一部が印刷されている。また、ストーリーボード１にはストーリーシート２を差し込んで通せるようなスリット１２ＬＳ、１２ＲＳが設けられ、スリット１２ＬＳとスリット１２ＲＳの間に表示窓１２が形成されている。ストーリーボードセットにおいては、ストーリーシート２を、矢印２９の向きにストーリーボード１の裏面からスリット１２ＬＳに差し込み、ストーリーボード１の表面の表示窓１２を通過させて、スリット１２ＲＳに差し込み裏面に通すことにより、ストーリーシート２をストーリーボード１にセットすることができる。
【００３１】
ストーリーシート２にはマーカー図柄２１〜２３が印刷されている。ストーリーシート２がストーリーボード１にセットされ、所定の位置にスライドされると、マーカー図柄２１〜２３が表示窓１２に表示されるようになっている。また、マーカー図柄２１〜２３は絵表示部１１に印刷された絵の一部と組み合わせることにより一つの絵を形成するようになっている。
【００３２】
図２（ａ）に示すように、ストーリーシート２をストーリーボード１にセットし、右へスライドさせると、表示窓１２にマーカー図柄２１が表示される。このとき、ストーリーボード１を眺めると、絵表示部１１に印刷された絵の一部（少年の頭部と上半身を表す絵）と、マーカー図柄２１を兼ねる絵（少年の口とお菓子を持った手を表す絵）とによって、一つの絵（少年がお菓子を食べる様子を表す絵）を形成するようになっている。
【００３３】
次いで、更にストーリーシート２を右へスライドさせると、図２（ｂ）に示すように、表示窓１２にマーカー図柄２２が表示される。このとき、ストーリーボード１を眺めると、絵表示部１１に印刷された絵の一部（少年の頭部と上半身を表す絵）と、マーカー図柄２２を兼ねる絵（少年の手と、虫歯菌を示すキャラクタを表す絵）とによって、一つの絵（少年が虫歯になった様子を表す絵）を形成するようになっている。
【００３４】
次いで、更にストーリーシート２を右へスライドさせると、図２（ｃ）に示すように、表示窓１２にマーカー図柄２３が表示される。このとき、ストーリーボード１を眺めると、絵表示部１１に印刷された絵の一部（少年の頭部と上半身を表す絵）と、マーカー図柄２３を兼ねる絵（少年の口と歯ブラシを持った手を表す絵）とによって、一つの絵（少年が歯を磨いている様子を表す絵）を形成するようになっている。
【００３５】
このように、本実施形態におけるストーリーボードセットは、ストーリーシート２をストーリーボード１にセットし、右へスライドさせることにより、（１）少年がお菓子を食べ、（２）虫歯になり、（３）歯を磨くようになる、という一連のストーリーをユーザに提供するようになっている。
【００３６】
［２．携帯端末Ｍの構成］
次に、図３及び図４を用いて携帯端末Ｍの構成について説明する。
【００３７】
図３に示すように、携帯端末Ｍは、制御部１０１、記憶部１０２、通信部１０３、タッチパネル１０４、ボタン操作部１０５、及びカメラ１０６を有する。
【００３８】
通信部１０３は、インターネット、移動体通信網（基地局等を含む）、及びゲートウェイ等により構築されたネットワークを介した、他の電話機との通話やデータ通信、又はサーバ等とのデータ通信に関する制御等を行う。
【００３９】
カメラ１０６は、所謂デジタルカメラであり、静止画及び動画を撮影することができる。また、後述するストーリー提供アプリが起動されるとカメラ１０６も起動するようになっており、ストーリー提供アプリの起動中は、レンズ及び画像素子等により取得される撮影画像を１秒間に所定フレーム数（例えば、３０フレーム）分ずつ取得するようになっている。これらの取得された撮影画像は、制御部１０１の制御の下、リアルタイムでタッチパネル１０４に連続して表示される。また、これらの撮影画像は、タッチパネル１０４に表示させるため、及び後述する比較用画像と比較するため、一時的に記憶部１０２に記憶される。
【００４０】
タッチパネル１０４は、例えば、静電容量方式のタッチセンサと表示装置とからなり、入力装置及び表示装置として機能する。また、ボタン操作部１０５は、ユーザが押下することによりボタン押下信号が制御部１０１に送信され、例えば、表示装置により表示されている画面が閉じられるようになっている。つまり、ユーザは、タッチパネル１０４とボタン操作部１０５に対する入力操作により、携帯端末Ｍに情報を入力することができるようになっている。
【００４１】
記憶部１０２は、例えば、不揮発性メモリ等により構成されており、オペレーティングシステムや、アプリケーションプログラム等の各種プログラムを記憶する。特に、本実施形態の記憶部１０２には、ストーリー提供アプリがインストールされている。なお、各種プログラムは、例えば、他のサーバ装置等からネットワークＮＷを介して取得されるようにしても良いし、記録媒体に記録されて外付けドライブ装置を介して読み込まれるようにしても良い。
【００４２】
また、記憶部１０２には、ストーリー提供アプリの一部として、ストーリーシート２に印刷されたマーカー図柄２１〜２３をそれぞれデジタル化した比較用画像２１Ｃ〜２３Ｃが記憶されている。また、記憶部１０２には、ストーリー提供アプリの一部として、各比較用画像にそれぞれ対応するコンテンツファイル１０２１〜１０２３が記憶されている。更に、記憶部１０２には、ストーリー提供アプリの一部として、図４に示すコンテンツテーブル１０２４が記憶されている。コンテンツテーブル１０２４は、撮影画像の一部と一致する比較用画像の種別に応じて、コンテンツファイルを取得できるように、比較用画像ＩＤとコンテンツファイルＩＤとを対応付けている。なお、比較用画像ＩＤは、比較用画像を識別するためのＩＤであり、コンテンツファイルＩＤは、コンテンツファイル１０２１〜１０２３を識別するためのＩＤである。
【００４３】
コンテンツファイル１０２１〜１０２３は、カメラ１０６によって撮影された撮影画像に仮想オブジェクト画像を重ねて表示させるなどの諸機能を実現するコンテンツ実行プログラムと、当該仮想オブジェクト画像とを含んでいる。
【００４４】
制御部１０１は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等により構成されている。そして、ＣＰＵが、ＲＯＭや記憶部１０２に記憶された各種プログラムを読み出し実行することにより各種機能を実現する。
【００４５】
制御部１０１は、ストーリー提供アプリの起動中において、カメラ１０６により撮影された撮影画像内に、比較用画像２１Ｃ〜２３Ｃと一致する部分が含まれているかを所定時間毎に確認する。制御部１０１は、一致する部分が含まれていることを確認した場合には、コンテンツテーブル１０２４を参照して、当該比較用画像２１Ｃ〜２３Ｃの比較用画像ＩＤに対応するコンテンツファイルＩＤを特定し、コンテンツファイル１０２１〜１０２３を取得する。制御部１０１は、コンテンツファイル１０２１〜１０２３を取得すると、これに含まれるコンテンツ実行プログラムを実行し、カメラ１０６により撮影された撮影画像に、取得したコンテンツファイル１０２１〜１０２３に含まれる仮想オブジェクト画像を重ねることにより合成画像を生成し、タッチパネル１０４に表示させる。なお、コンテンツ実行プログラムには、撮影画像に含まれる比較用画像２１Ｃ〜２３Ｃの中心を原点とする何れの座標位置に仮想オブジェクト画像を重ねるかが規定されている。また、撮影画像は上述したように１秒間に所定フレーム数分ずつ撮影されるので、制御部１０１は、それぞれの撮影画像に仮想オブジェクト画像を重ねて合成画像を生成し、タッチパネル１０４に連続表示させる。
【００４６】
［３．ストーリーボードセット及びストーリー提供アプリの利用方法］
次に、図５乃至７を用いてストーリーボードセット及びストーリー提供アプリの利用方法について説明する。なお、図５は、表示窓１２にマーカー図柄２１が表示された状態のストーリーボード１を、ストーリー提供アプリが起動された携帯端末Ｍのカメラ１０６により撮影した場合における、タッチパネル１０４に表示される画面例を説明するための図である。同様に、図６及び図７は、それぞれ、表示窓１２にマーカー図柄２２、２３が表示された状態のストーリーボード１を、カメラ１０６により撮影した場合におけるタッチパネル１０４に表示される画面例を説明するための図である。
【００４７】
まず、ユーザは携帯端末Ｍのストーリー提供アプリを起動させ、カメラ１０６により、表示窓１２がフレーム内に含まれるようにストーリーボード１を撮影しながら、ストーリーボード１にセットしたストーリーシート２をスライドさせる。このとき、携帯端末Ｍの制御部１０１はカメラ１０６により撮影された撮影画像内に比較用画像２１Ｃ〜２３Ｃと一致する部分が含まれているかを所定時間毎に確認する。
【００４８】
そして、図５に示すように、表示窓１２にマーカー図柄２１が表示されると、制御部１０１は撮影画像に比較用画像２１Ｃと一致する部分が含まれていることを確認し、比較用画像２１Ｃに対応するコンテンツファイル１０２１を取得する。次いで、制御部１０１は、コンテンツファイル１０２１に含まれるコンテンツ実行プログラムに従って、カメラ１０６により撮影された撮影画像に、コンテンツファイル１０２１に含まれる「音符」を表す仮想オブジェクト画像３Ａ（「音符オブジェクト３Ａ」）を重ねて合成画像を生成し、タッチパネル１０４に表示させる。このとき、連続撮影された撮影画像毎に少しずつ音符オブジェクト３Ａの位置を変化させるアニメーション演出や、音符オブジェクト３Ａを点滅させる点滅演出を加えたり、更には、図示しないスピーカから、お菓子を食べるときに相応しい音楽を出力させたりしてもよい。これらにより、ユーザは、少年が鼻歌を歌いながらお菓子を食べる様子を、タッチパネル１０４等を通して視聴することができる。
【００４９】
次いで、ユーザが更にストーリーシート２を右にスライドさせ、図６に示すように、表示窓１２にマーカー図柄２２が表示されると、制御部１０１は撮影画像に比較用画像２２Ｃと一致する部分が含まれていることを確認し、比較用画像２２Ｃに対応するコンテンツファイル１０２２を取得する。次いで、制御部１０１は、コンテンツファイル１０２２に含まれるコンテンツ実行プログラムに従って、カメラ１０６により撮影された撮影画像に、コンテンツファイル１０２２に含まれる「涙」を表す仮想オブジェクト画像３Ｂ（「涙オブジェクト３Ｂ」）及び「星型七角形」を表す仮想オブジェクト画像３Ｃ（「星型七角形オブジェクト３Ｃ」）を重ねて合成画像を生成し、タッチパネル１０４に表示させる。このとき、連続撮影された撮影画像毎に少しずつ、涙オブジェクト３Ｂ及び星型七角形オブジェクト３Ｃの少なくとも何れか一方の位置を変化させるアニメーション演出や点滅させる点滅演出を加えたり、更には、図示しないスピーカから、痛みを表すのに相応しい音楽を出力させたりしてもよい。これらにより、ユーザは、少年が虫歯になって痛がっている様子を、タッチパネル１０４等を通して視聴することができる。
【００５０】
次いで、ユーザが更にストーリーシート２を右にスライドさせ、図７に示すように、表示窓１２にマーカー図柄２３が表示されると、制御部１０１は撮影画像に比較用画像２３Ｃと一致する部分が含まれていることを確認し、比較用画像２３Ｃに対応するコンテンツファイル１０２３を取得する。次いで、制御部１０１は、コンテンツファイル１０２３に含まれるコンテンツ実行プログラムに従って、カメラ１０６により撮影された撮影画像に、コンテンツファイル１０２３に含まれる「星型四角形」を表す仮想オブジェクト画像３Ｄ（「星型四角形オブジェクト３Ｄ」）を重ねて合成画像を生成し、タッチパネル１０４に表示させる。このとき、連続撮影された撮影画像毎に少しずつ星型四角形オブジェクト３Ｄの位置を変化させるアニメーション演出や点滅させる点滅演出を加えたり、更には、図示しないスピーカから、楽しい様子或いは歯を磨いている様子を表すのに相応しい音楽を出力させたりしてもよい。これらにより、ユーザは、少年が楽しそうに歯を磨いている様子を、タッチパネル１０４等を通して視聴することができる。
【００５１】
［４．携帯端末Ｍの動作例］
次に、図８に示すフローチャートを用いて、ストーリー提供アプリ起動中における携帯端末Ｍの動作例について説明する。なお、図８に示す処理は、携帯端末Ｍの制御部１０１が、ユーザによるストーリー提供アプリを起動させるために操作（「アプリ起動操作」）を検出した場合に開始され、ユーザによるストーリー提供アプリを終了させるための操作（「アプリ終了操作」）、或いは携帯端末Ｍの電源を切断するための操作（「電源オフ操作」）が検出された場合などに終了する。
【００５２】
まず、携帯端末Ｍの制御部１０１は、アプリ起動操作を検出するとストーリー提供アプリを起動させる（ステップＳ１）。次いで、制御部１０１は、カメラ１０６を起動させる（ステップＳ２）。カメラ１０６が起動すると、カメラ１０６により連続撮影された各撮影画像がタッチパネル１０４に連続表示される。このとき、ユーザはタッチパネル１０４に映し出される画像（映像）を確認しながら、フレーム内に表示窓１２が含まれるように携帯端末Ｍの位置や向きを変位させる。
【００５３】
制御部１０１は、カメラ１０６を起動させると、カメラ１０６により撮影された撮影画像と、各比較用画像２１Ｃ〜２３Ｃを比較し（ステップＳ３）、撮影画像に、何れかの比較用画像２１Ｃ〜２３Ｃが含まれているか否かを判定する（ステップＳ４）。制御部１０１は、撮影画像に、何れの比較用画像２１Ｃ〜２３Ｃも含まれていないと判定した場合には（ステップＳ４：ＮＯ）、ステップＳ３の処理に移行する。一方、制御部１０１は、撮影画像に、何れかの比較用画像２１Ｃ〜２３Ｃが含まれていると判定した場合には（ステップＳ４：ＹＥＳ）、コンテンツファイルテーブル１０２４を参照し、当該含まれていると判定した比較用画像の比較用画像ＩＤに対応するコンテンツファイルＩＤを特定し、当該特定したコンテンツファイルＩＤに基づいてコンテンツファイルを取得する（ステップＳ５）。
【００５４】
次いで、制御部１０１は、ステップＳ５の処理で取得したコンテンツファイルに含まれるコンテンツ実行プログラムを実行し、仮想オブジェクト画像を撮影画像に重ねて合成画像を生成し、タッチパネル１０４に表示させる（ステップＳ６）。このとき、制御部１０１は、カメラ１０６により連続撮影された各撮影画像に仮想オブジェクト画像を重ねた合成画像を生成し、タッチパネル１０４に連続表示させる。
【００５５】
次いで、制御部１０１は、その時点で撮影された撮影画像内にステップＳ４の処理で含まれていると判定した比較用画像が未だに含まれているか否かを判定する（ステップＳ７）。制御部１０１は、撮影画像内に比較用画像がまだ含まれていると判定した場合には（ステップＳ７：ＹＥＳ）、ステップＳ７の処理を繰り返す。一方、ストーリーシート２がスライドさせられたなどの理由により、制御部１０１は、撮影画像内に比較用画像が含まれていないと判定した場合には（ステップＳ７：ＮＯ）、ステップＳ３の処理に移行する。
【００５６】
以上説明したように、本実施形態のストーリー提供システムは、携帯端末Ｍ（「合成画像表示装置」の一例）と、マーカー図柄２１〜２３（「識別図柄」の一例）を表示するストーリーボードセット（「図柄表示具」の一例）とを有する。携帯端末Ｍの制御部１０１（「識別図柄特定手段」、「仮想オブジェクト画像取得手段」、「合成画像生成手段」、「表示制御部」の一例）は、カメラ１０６（「撮影手段」の一例）により撮影された撮影画像に含まれているマーカー図柄２１〜２３を特定し、当該特定したマーカー図柄２１〜２３に対応する仮想オブジェクトの画像である仮想オブジェクト画像３Ａ〜３Ｄを取得し、当該取得した仮想オブジェクト画像３Ａ〜３Ｄを、マーカー図柄２１〜２３を含む撮影画像に重ねて合成画像を生成し、当該生成した合成画像をタッチパネル１０４（「表示手段」の一例）に表示させる。一方、ストーリーボードセットは、携帯端末Ｍの制御部１０１が特定可能なマーカー図柄２１〜２３が複数描かれたストーリーシート２（「第１部材」の一例）と、ストーリーシート２に描かれたマーカー図柄２１〜２３を表示する表示窓１２を備えるストーリーボード１（「第２部材」の一例）と、を有し、表示窓１２に表示されるマーカー図柄２１〜２３はストーリーシート２の動き（スライド）に伴って変動するようになっている。
【００５７】
したがって、ストーリー提供システムによれば現実世界の画像（撮影画像）に仮想オブジェクト画像３Ａ〜３Ｄを重ねた合成画像がタッチパネル１０４に表示され、当該表示される合成画像の仮想オブジェクト画像３Ａ〜３Ｄはストーリーシート２の動きに伴って変化するので、視聴者の興趣を向上させることができる。
【００５８】
また、ストーリーシート２に描かれる複数のマーカー図柄２１〜２３は、それぞれ所定のストーリーの進行段階に応じた、各進行段階を表す仮想オブジェクト画像３Ａ〜３Ｄと対応するマーカー図柄２１〜２３であり、各マーカー図柄２１〜２３は当該所定のストーリーの進行に応じた順序で描かれており、ストーリーシート２は、当該順序通りにマーカー図柄２１〜２３が表示窓１２に表示されるように動く（スライドする）ようになっている。
【００５９】
したがって、タッチパネル１０４に表示される合成画像の仮想オブジェクト画像３Ａ〜３Ｄは、所定のストーリーの各進行段階を表す画像であるとともに、仮想オブジェクト画像３Ａ〜３Ｄが当該所定のストーリーの進行に応じた順序で変化するので、視聴者は所定のストーリーを楽しむことができる。
【００６０】
また、ストーリーボード１における表示窓１２の周囲の少なくとも一部には、所定の絵（図柄）の一部が描かれており、ストーリーシート２に描かれるマーカー図柄２１〜２３は、表示窓１２に表示された際、ストーリーボード１に描かれた絵（図柄）の一部とともに所定の絵（図柄）を形成するようになっている。
【００６１】
したがって、表示窓１２にマーカー図柄２１〜２３が表示された際に所定の絵（図柄）がストーリーボード１に表示されることから、視聴者はストーリーボード１全体を、或いはタッチパネル１０４に表示される合成画像を違和感なく視聴することができる。なお、後述する変形例３で説明するように、マーカー図柄２１〜２３の代わりに２次元コードを用いた場合には、表示窓１２に２次元コードが表示されるので、視聴者に違和感を与える場合があるが、本実施形態では違和感なく視聴させることができる。
【００６２】
なお、コンテンツファイル１０２１〜１０２３に含まれるコンテンツ実行プログラムは、撮影画像に仮想オブジェクト画像を重ねた合成画像を表示させた後、所定の条件（例えば、表示開始から所定時間が経過したことという条件、又は、ユーザによる所定の操作が検出されたことという条件など）が満足された場合に、携帯端末Ｍにインストールされているｗｅｂブラウザアプリケーションを起動させ、所定のｗｅｂサイトにアクセスすることとしてもよい。
【００６３】
［５．変形例］
次いで、本実施形態の変形例について説明する。なお、変形例の説明では、上述した実施形態との差異点を中心に説明することとし、同様の点については説明を省略する。また、同一の部材については同じ符号を用いて説明する。
【００６４】
［５．１．変形例１］
［５．１．１．ストーリーボードセットの構成］
まず、図９乃至１２を用いて変形例１について説明する。変形例１におけるストーリーボードセットは、図９（ａ）に示すストーリーボード１Ａと、図９（ｂ）に示すストーリーシート２と、図９（ｃ）に示すストーリーシート４と、を有する。ストーリーボード１Ａは、上記実施形態におけるストーリーボード１を大きくし、新たにストーリーシート４を差し込んで通せるようなスリット１３ＬＳ、１３ＲＳを設けたものであり、スリット１３ＬＳとスリット１３ＲＳの間に表示窓１３が形成されている。
【００６５】
ストーリーシート４にはマーカー図柄４１、４２が印刷されている。ストーリーシート４がストーリーボード１Ａにセットされ、所定の位置にスライドされると、マーカー図柄４１、４２が表示窓１３に表示されるようになっている。なお、マーカー図柄４１、４２は、上記実施形態におけるマーカー図柄２１〜２３とは異なり、絵表示部１１に印刷された絵の一部と組み合わせることにより一つの絵を形成するようにはなっていないが、絵表示部１１に印刷された絵の一部と組み合わせることにより一つの絵を形成するようにしてもよい。
【００６６】
［５．１．２．携帯端末Ｍの構成］
一方、変形例１における携帯端末Ｍの記憶部１０２には、ストーリーシート４に印刷されたマーカー図柄４１、４２をそれぞれデジタル化した比較用画像４１Ｃ、４２Ｃが記憶されている。また、記憶部１０２には、ストーリー提供アプリの一部として、比較用画像４１Ｃ、４２Ｃにそれぞれ対応するコンテンツファイルが記憶されている。
【００６７】
また、変形例１における記憶部１０２には、図１０に示すコンテンツテーブル１０２４Ａが記憶されている。コンテンツテーブル１０２４Ａは、撮影画像の一部と一致する比較用画像の数とその種別に応じて、コンテンツファイルを取得できるように、比較用画像ＩＤとコンテンツファイルＩＤとを対応付けている。例えば、撮影画像の一部と一致する比較用画像が比較用画像ＩＤ「PIC0021」の画像一枚である場合には、コンテンツファイルＩＤ「CN0021」のコンテンツファイルが取得されるようになっている。また、撮影画像の一部と一致する比較用画像が比較用画像ＩＤ「PIC0021」、「PIC0041」の二枚である場合には、コンテンツファイルＩＤ「CN0021」、「CN00X1」の２つのコンテンツファイルが取得されるようになっている。
【００６８】
変形例１における制御部１０１は、ストーリー提供アプリの起動中において、カメラ１０６により撮影された撮影画像内に、比較用画像と一致する部分が含まれているかを所定時間毎に確認する。このとき、制御部１０１は、撮影画像内に、比較用画像と一致する部分が２つ（すなわち、表示窓１２及び表示窓１３に対応する部分）あることを確認した場合には、コンテンツテーブル１０２４Ａを参照して、２つのコンテンツファイルを取得する。また、制御部１０１は、２つのコンテンツファイルを取得した場合には、それぞれに含まれるコンテンツ実行プログラムを実行する。なお、撮影画像内に、比較用画像と一致する部分が一つあることを確認した場合については、上記実施形態と同様であるので説明を省略する。
【００６９】
［５．１．３．ストーリーボードセット及びストーリー提供アプリの利用方法］
次に、図１１及び図１２を用いて、変形例１におけるストーリーボードセット及びストーリー提供アプリの利用方法について説明する。なお、図１１は、表示窓１２にマーカー図柄２２が表示され、表示窓１３にマーカー図柄４１が表示された状態のストーリーボード１Ａを、ストーリー提供アプリが起動された携帯端末Ｍのカメラ１０６により撮影した場合における、タッチパネル１０４に表示される画面例を説明するための図である。同様に、図１２は、表示窓１３にマーカー図柄４２が表示された状態のストーリーボード１Ａを、カメラ１０６により撮影した場合における、タッチパネル１０４に表示される画面例を説明するための図である。
【００７０】
図１１に示すように、表示窓１２にマーカー図柄２２が表示されるとともに、表示窓１３にマーカー図柄４１が表示されると、制御部１０１は、撮影画像内にこれらに対応する比較用画像が含まれていることを確認し、コンテンツテーブル１０２４Ａを参照して、それぞれの比較用画像ＩＤ「PIC0022」、「PIC0041」に基づいてコンテンツファイルＩＤ「CN0022」及び「CN00Y1」を特定し、コンテンツファイルを取得する。そして、制御部１０１は、コンテンツファイルＩＤが「CN0022」であるコンテンツファイル１０２２に基づいて涙オブジェクト３Ｂ及び星型七角形オブジェクト３Ｃを撮影画像に重ねるとともに、コンテンツファイルＩＤが「CN00Y1」であるコンテンツファイルに基づいて「虫歯メッセージ」を表す仮想オブジェクト画像３Ｅ（「虫歯メッセージオブジェクト３Ｅ」）を撮影画像に重ねて、タッチパネル１０４に表示させる。
【００７１】
次いで、ユーザが更にストーリーシート４を右にスライドさせ、図１２に示すように、表示窓１２にマーカー図柄２２が表示されるとともに、表示窓１３にマーカー図柄４２が表示されると、制御部１０１は、撮影画像内にマーカー図柄２２に対応する比較用画像（比較用画像ＩＤ：「PIC0022」）及びマーカー図柄４２に対応する比較用画像（比較用画像ＩＤ：「PIC0042」）が含まれていることを確認し、コンテンツテーブル１０２４Ａを参照して、それぞれの比較用画像ＩＤ「PIC0022」、「PIC0042」に基づいてコンテンツファイルＩＤ「CN0022」及び「CN00Y2」を特定し、コンテンツファイルを取得する。そして、制御部１０１は、コンテンツファイルＩＤが「CN0022」であるコンテンツファイル１０２２に基づいて涙オブジェクト３Ｂ及び星型七角形オブジェクト３Ｃを撮影画像に重ねるとともに、コンテンツファイルＩＤが「CN00Y2」であるコンテンツファイルに基づいて「歯磨きメッセージ」を表す仮想オブジェクト画像３Ｆ（「歯磨きメッセージオブジェクト３Ｆ」）を撮影画像に重ねて合成画像を生成し、タッチパネル１０４に表示させる。
【００７２】
このように変形例１では、表示窓１２及び表示窓１３にそれぞれ表示されたマーカー図柄の組合せによって、それぞれ異なるメッセージを表す仮想オブジェクト画像が撮影画像に重ねられるようになっている。すなわち、多種多様な仮想オブジェクト画像を撮影画像に重ねることができ、ユーザに提供するストーリーを多様化させることができる。
【００７３】
なお、変形例１では、撮影画像内に比較用画像と一致する部分が２つある場合に、それぞれに対応するコンテンツファイルを取得することとしたが、両者のコンテンツファイルの機能を統合したコンテンツファイルを作成し、２つの比較用画像ＩＤに基づいて当該統合した一つのコンテンツファイルを取得するようにしてもよい。この場合、制御部１０１は、２つのコンテンツファイルに含まれる各コンテンツ実行プログラムを実行する必要が無く、統合された一つのコンテンツファイルに含まれる各コンテンツ実行プログラムを実行すればよい。
【００７４】
また、携帯端末Ｍの制御部１０１の処理に関して、変形例１と上述した実施形態との主な差異点は、カメラ１０６により撮影された撮影画像内に、比較用画像と一致する部分が２つある場合に、それらの組合せに基づいてコンテンツファイルを取得する点である。
【００７５】
［５．２．変形例２］
次に、変形例２について説明する。変形例２におけるストーリーボードセットは、図１３（ａ）に示すように、表示窓１４が設けられたストーリーボード１Ｂと、ストーリーボード１Ｂの裏側にピンＰにより回転可能に取り付けられたストーリーシート５とを有する。図１３（ｂ）に示すように、ストーリーシート５は円形であり、マーカー図柄５１〜５４が表示窓１４から視認できるように、中心から所定距離の位置に印刷されている。なお、図１３（ａ）では、ストーリーボード１Ｂの絵表示部１１Ｂに印刷された絵を図示することを省略しているが、実際には絵表示部１１Ｂには絵が印刷されているものとする。
【００７６】
変形例２における携帯端末Ｍの構成及び動作については、上記実施形態と同様なので詳細な説明は省略するが、携帯端末Ｍの記憶部１０２には、マーカー図柄５１〜５４にそれぞれ対応する比較用画像及びコンテンツファイルが記憶されている。そして、携帯端末Ｍの制御部１０１は、カメラ１０６により撮影された撮影画像に記憶部１０２に記憶された比較用画像と一致する部分が含まれているかを確認し、含まれている場合には当該比較用画像に対応するコンテンツファイルを取得し、コンテンツ実行プログラムを実行するようになっている。
【００７７】
変形例２におけるストーリーボードセットにおいては、ユーザはカメラ１０６により表示窓がフレーム内に含まれるように撮影しながら、ストーリーシート５を回転させる。これにより、表示窓１４内にマーカー図柄５１〜５４が表示された際、携帯端末Ｍのタッチパネル１０４には、カメラ１０６により撮影された撮影画像に、マーカー図柄５１〜５４に対応する仮想オブジェクト画像が重ねられて表示される。
【００７８】
［５．３．変形例３］
次に、変形例３について説明する。上記実施形態では、ストーリーシート２に絵柄を表したマーカー図柄２１〜２３を印刷しておき、携帯端末Ｍの制御部１０１がマーカー図柄２１〜２３に対応する仮想オブジェクト画像を撮影画像に重ねることとしていたが、変形例３では、絵柄を表したマーカー図柄２１〜２３の代わりに２次元コードを用いることとする。変形例３における２次元コードは、コンテンツファイルＩＤを所定の規則に従ってエンコードすることにより得られ、所定の規則に従ってデコードすることにより元のコンテンツファイルＩＤを取得可能な２次元コードである。このような２次元コードとしては、公知の２次元コードを用いることができ、例えば「Cyber Code（登録商標）」を用いることができる。
【００７９】
［５．３．１．携帯端末Ｍの構成］
変形例３において、携帯端末Ｍにインストールされるストーリー提供アプリには、ストーリーシート２に印刷された２次元コードをデコードし、元のコンテンツファイルＩＤを取得するための２次元コード解析プログラムが組み込まれている。また、携帯端末Ｍの制御部１０１は、２次元コード解析プログラムを実行し、カメラ１０６により撮影された撮影画像に含まれる２次元コードからコンテンツファイルＩＤを取得すると、当該取得したコンテンツファイルＩＤに対応するコンテンツファイルを記憶部１０２にて検索する。制御部１０１は、記憶部１０２にコンテンツファイルＩＤに対応するコンテンツファイルが記憶されていない場合には、通信部１０３を介して、図示しない所定のコンテンツサーバにアクセスし、コンテンツファイルＩＤに対応するコンテンツファイルをダウンロードする。なお、このとき、制御部１０１は、ダウンロード対象のコンテンツファイルに関連するコンテンツファイル（例えば、ダウンロード対象のコンテンツファイルに対応する２次元コードが印刷されたストーリーシートに含まれる他の２次元コードに対応するコンテンツファイル）も併せて一括ダウンロードすることとする。これにより、携帯端末Ｍがコンテンツサーバに繰り返しアクセスする必要がなくなる。
【００８０】
［５．３．２．携帯端末Ｍの動作例］
次に、図１４に示すフローチャートを用いて、ストーリー提供アプリ起動中における携帯端末Ｍの動作例について説明する。なお、図１４に示す処理は、携帯端末Ｍの制御部１０１が、ユーザによるアプリ起動操作を検出した場合に開始され、ユーザによるアプリ終了操作或いは電源オフ操作が検出された場合などに終了する。
【００８１】
まず、携帯端末Ｍの制御部１０１は、アプリ起動操作を検出するとストーリー提供アプリを起動させる（ステップＳ１０１）。次いで、制御部１０１は、カメラ１０６を起動させる（ステップＳ１０２）。
【００８２】
次いで、制御部１０１は、カメラ１０６により撮影された撮影画像を解析し（ステップＳ１０３）、撮影画像にデコード可能な２次元コードが含まれているか否かを判定する（ステップＳ１０４）。制御部１０１は、撮影画像にデコード可能な２次元コードが含まれていないと判定した場合には（ステップＳ１０４：ＮＯ）、ステップＳ１０３の処理に移行する。一方、制御部１０１は、撮影画像にデコード可能な２次元コードが含まれていると判定した場合には（ステップＳ１０４：ＹＥＳ）、２次元コードからコンテンツファイルＩＤを取得する（ステップＳ１０５）。
【００８３】
次いで、制御部１０１は、取得したコンテンツファイルＩＤに対応するコンテンツファイルを記憶部１０２に記憶されているコンテンツファイルの中から検索する（ステップＳ１０６）。次いで、制御部１０１は、コンテンツファイルが見つかったか否かを判定し（ステップＳ１０７）、見つかった場合には（ステップＳ１０７：ＹＥＳ）、ステップＳ１０９の処理に移行する。一方、制御部１０１は、コンテンツファイルが見つからなかった場合には（ステップＳ１０７：ＮＯ）、コンテンツサーバにアクセスし、ステップＳ１０５の処理で取得したコンテンツファイルＩＤに対応するコンテンツファイルをダウンロードする（ステップＳ１０８）。
【００８４】
次いで、制御部１０１は、ステップＳ１０６の処理で検索したコンテンツファイル、又は、ステップＳ１０８の処理でダウンロードしたコンテンツファイルに含まれるコンテンツ実行プログラムを実行し、仮想オブジェクト画像を、撮影画像に重ねて合成画像を生成し、タッチパネル１０４に表示させる（ステップＳ１０９）。
【００８５】
次いで、制御部１０１は、その時点で撮影された撮影画像内にステップＳ１０４の処理でデコード可能と判定した２次元コードが含まれているか否かを判定する（ステップＳ１１０）。制御部１０１は、撮影画像内にデコード可能と判定した２次元コードが含まれていると判定した場合には（ステップＳ１１０：ＹＥＳ）、ステップＳ１１０の処理を繰り返す。一方、制御部１０１は、撮影画像内にデコード可能と判定した２次元コードが含まれていないと判定した場合には（ステップＳ１１０：ＮＯ）、ステップＳ１０３の処理に移行する。
【００８６】
以上説明した変形例３においては、携帯端末Ｍの記憶部１０２（「仮想オブジェクト画像記憶手段」の一例）は、２次元コード（「識別図柄」の一例）に対応するコンテンツファイルを記憶し、制御部１０１は、撮影画像に含まれる２次元コードに対応するコンテンツファイルが記憶部１０２に記憶されていない場合に、コンテンツサーバ（「所定のサーバ装置」の一例）から当該２次元コードに対応するコンテンツファイルをダウンロードする。
【００８７】
したがって変形例３によれば、携帯端末Ｍはコンテンツファイルが記憶部１０２に記憶されていない場合であっても、合成画像を生成し表示させることができる。また、記憶部１０２に全ての２次元コードに対応するコンテンツファイルを記憶させなくてもよいので、記憶部１０２の記憶領域を節約することができる。
【００８８】
［５．４．変形例４］
次に、変形例４について説明する。上記実施形態では、携帯端末Ｍが、カメラ１０６により撮影された撮影画像に含まれるマーカー図柄２１〜２３（比較用画像２１Ｃ〜２３Ｃ）に基づいて対応するコンテンツファイルを取得し、当該撮影画像に仮想オブジェクト画像を重ねて合成画像を生成し、タッチパネル１０４に表示させることとしたが、変形例４では、仮想オブジェクト画像を重ねる処理などの一部の処理を、ネットワークを介して接続可能なコンテンツ処理サーバに行わせることとする。
【００８９】
ここで、変形例４におけるコンテンツ処理サーバＳＶについて説明する。図１５に示すように変形例４におけるコンテンツ処理サーバＳＶは、制御部１２１、記憶部１２２、及び通信部１２３を有している。通信部１２３は、ネットワークを介した携帯端末Ｍとの通信に関する制御等を行う。
【００９０】
記憶部１２２には、比較用画像２１Ｃ〜２３Ｃや、各比較用画像にそれぞれ対応する仮想オブジェクト画像と、各比較用画像にそれぞれ対応するストーリーを表す文章テキストが記憶されている。
【００９１】
制御部１２１は、携帯端末Ｍから撮影画像が添付されたＥメールを受け付ける。次いで、制御部１２１は、受信したＥメールに添付された撮影画像に比較用画像２１Ｃ〜２３Ｃと一致する部分が含まれているか否かを判定し、含まれていると判定した場合には、当該一致した比較用画像に対応する仮想オブジェクト画像を撮影画像に重ねて合成画像を生成する画像合成処理を行う。次いで、制御部１２１は、一致した比較用画像２１Ｃ〜２３Ｃに対応する文章テキストを本文とする返信Ｅメールを作成し、画像合成処理により生成した合成画像を添付して、送信元の携帯端末Ｍに送信する。
【００９２】
一方、変形例４における携帯端末Ｍの制御部１０１は、ユーザの操作に基づいて撮影されたマーカー図柄２１〜２３を含む撮影画像を、Ｅメールに添付してコンテンツ処理サーバＳＶに送信する。すると、コンテンツ処理サーバＳＶから返信Ｅメールが送信されるので、携帯端末Ｍの制御部１０１は、ユーザの操作に基づいて、返信Ｅメールの本文や、返信Ｅメールに添付されている合成画像をタッチパネル１０４に表示させる。
【００９３】
すなわち、変形例４におけるストーリー提供システムは、携帯端末Ｍ（「合成画像表示装置」の一例）と、コンテンツ処理サーバＳＶ（「合成画像生成サーバ」の一例）と、マーカー図柄２１〜２３（「識別図柄」の一例）を表示するストーリーボードセットとを有する。携帯端末Ｍの制御部１０１（「撮影画像送信手段」、「合成画像受信手段」、「表示制御部」の一例）は、カメラ１０６（「撮影手段」の一例）により撮影された撮影画像をコンテンツ処理サーバＳＶに送信し、コンテンツ処理サーバＳＶが生成した合成画像をコンテンツ処理サーバＳＶから受信し、当該受信した合成画像をタッチパネル１０４（「表示手段」の一例）に表示させる。また、コンテンツ処理サーバＳＶの制御部１２１（「識別図柄特定手段」、「仮想オブジェクト画像取得手段」、「合成画像生成手段」、「合成画像送信手段」の一例）は、携帯端末Ｍから受信した撮影画像に含まれているマーカー図柄２１〜２３を特定し、特定したマーカー図柄２１〜２３に対応する仮想オブジェクト画像を取得し、当該取得した仮想オブジェクト画像を、マーカー図柄２１〜２３を含む撮影画像に重ねて合成画像を生成し、当該生成した合成画像を携帯端末Ｍに送信する。さらに、ストーリーボードセットは、コンテンツ処理サーバＳＶの制御部１２１が特定可能なマーカー図柄２１〜２３が複数描かれたストーリーシート２（「第１部材」の一例）と、ストーリーシート２に描かれたマーカー図柄２１〜２３を表示する表示窓１２を備えるストーリーボード１（「第２部材」の一例）と、を有し、表示窓１２に表示されるマーカー図柄２１〜２３はストーリーシート２の動き（スライド）に伴って変動するようになっている。
【００９４】
このように、変形例４においては、携帯端末Ｍの制御部１０１の代わりに、コンテンツ処理サーバＳＶの制御部１２１が画像合成処理を行うことにより、処理能力の低い携帯端末Ｍであっても仮想オブジェクト画像が重ねられた合成画像をタッチパネル１０４に表示することができる。
【００９５】
なお、変形例４において、コンテンツ処理サーバＳＶの制御部１２１は、画像合成処理により生成された合成画像を返信Ｅメールに添付するのではなく、記憶部１２２に記憶させておくこととし、当該記憶された位置を示すＵＲＬ（Uniform Resource Locator）を返信Ｅメールに記述して送信することとしてもよい。この場合、携帯端末Ｍの制御部１０１は、ユーザの操作に基づいて、返信Ｅメールに記述されたＵＲＬを用いて記憶部１２２にアクセスし、合成画像をダウンロードすることとなる。
【００９６】
また、変形例４において、コンテンツ処理サーバＳＶの制御部１２１が行う処理は、複数のサーバで分担して行うこととしてもよい。例えば、携帯端末Ｍとの間でＥメールを送受信するサーバ、画像合成処理を行うサーバ、返信ＥメールにＵＲＬを記述する場合における合成画像を記憶するサーバなどに分担することができる。
【符号の説明】
【００９７】
１、１Ａ、１Ｂ  ストーリーボード
１１  絵表示部
１２、１３、１４  表示窓
２、４、５  ストーリーシート
２１〜２３、４１、４２  マーカー図柄
Ｍ  携帯端末
１０１  制御部
１０２  記憶部
２１Ｃ〜２３Ｃ  比較用画像
１０２１〜１０２３  コンテンツファイル
１０２４、１０２４Ａ  コンテンツテーブル
１０３  通信部
１０４  タッチパネル
１０５  ボタン操作部
１０６  カメラ
３Ａ〜３Ｆ  仮想オブジェクト画像
ＳＶ  コンテンツ処理サーバ
１２１  制御部
１２２  記憶部
１２３  通信部
【図１】
2012181748.tif 000003
【図２】
2012181748.tif 000004
【図３】
2012181748.tif 000005
【図４】
2012181748.tif 000006
【図５】
2012181748.tif 000007
【図６】
2012181748.tif 000008
【図７】
2012181748.tif 000009
【図８】
2012181748.tif 000010
【図９】
2012181748.tif 000011
【図１０】
2012181748.tif 000012
【図１１】
2012181748.tif 000013
【図１２】
2012181748.tif 000014
【図１３】
2012181748.tif 000015
【図１４】
2012181748.tif 000016
【図１５】
2012181748.tif 000017