(57)【要約】【課題】  現実の視界情報の表示上に仮想三次元映像をアノテーションして表示すると言う技術を革新する。【解決手段】  カメラ１１で撮影されたＡＲマーカである写真３０の撮影画像３１で、画像記憶部５１に記録された画像を検索して、索出された画像に予め対応付けされている仮想三次元映像３２を仮想三次元映像記憶部５３から読み出し、写真３０にアノテーションしてディスプレイ１０に表示するようにした。また各々ＡＲマーカ３４が印刷された複数のカード３２をカメラで撮影し、このＡＲマーカ３４でＡＲマーカ記憶部７１に記録されたＡＲマーカを検索して、索出されたＡＲマーカに予め対応付けされている仮想三次元映像３６を仮想三次元映像記憶部７３から読み出し、カード３２にアノテーションしてディスプレイ１０に表示するようにした。【選択図】図１
2015146173.tif 000002
【特許請求の範囲】
【請求項１】
ＡＲマーカである画像が印刷されたカードを撮影するためのカメラと、このカメラで撮影された画像を受け取りこの画像にマッチングする画像を画像記憶装置に記録された画像の中から検索してこの索出画像に対応する仮想三次元映像を決定する映像決定装置と、映像記憶装置から読み出された前記仮想三次元映像を受け取り前記画像にアノデーションして表示する表示装置と、から成るアノテーションシステム。
【請求項２】
前記受け取ってマッチング処理する画像が圧縮画像であることを特徴とする、請求項１に記載のアノテーションシステム。
【請求項３】
映像決定装置により、カメラで撮影されたＡＲマーカである画像が印刷されたカードの前記画像を受け取りこの画像で画像記憶装置に記録された画像を検索してマッチングする画像を索出すると共にこの索出画像に予め対応付けされている仮想三次元映像を決定し、映像記憶装置から読み出された前記仮想三次元映像を受け取って、表示装置で前記画像にアノテーションして表示する、アノテーション方法。
【請求項４】
前記受け取ってマッチング処理する画像に圧縮画像を用いることを特徴とする、請求項３に記載のアノテーション方法。
【請求項５】
請求項３または請求項４に記載のアノテーション方法をコンピュータに実行させるプログラム。
【請求項６】
請求項３または請求項４に記載のアノテーション方法をコンピュータに実行させるためのプログラムを記録した、コンピュータ読み取り可能な記録媒体。
【請求項７】
各々にＡＲマーカが印刷された複数の印刷媒体を撮影するためのカメラと、このカメラで撮影された複数の前記マーカを受け取って、これ等のマーカにマッチングするマーカをマーカ記憶装置に記録されたマーカの中から検索してこの索出マーカに対応する仮想三次元映像を決定する映像決定装置と、映像記憶装置から読み出された前記仮想三次元映像を受け取って複数の前記画像にアノテーション表示する表示装置と、から成るアノテーションシステム。
【請求項８】
前記ＡＲマーカの画像をスタンプ画像とし、前記印刷媒体は、複数のスタンプを重ならないように捺すための区分けされたスペースが設けられていることにより実質的に複数の印刷媒体と見なし得る印刷媒体である、請求項７に記載のアノテーションシステム。
【請求項９】
複数の前記印刷媒体の内の少なくとも一が異なる種類の印刷媒体である、請求項７に記載のアノテーションシステム。
【請求項１０】
前記ＡＲマーカが画像であって、索出画像は複数の前記画像が重ならないで撮影された画像にマッチングするものである、請求項７に記載のアノテーションシステム。
【請求項１１】
ＡＲマーカとして画像を用い、前記受け取ってマッチング処理する画像に圧縮画像を用いることを特徴とする、請求項７に記載のアノテーションシステム。
【請求項１２】
映像決定装置により、カメラで撮影された各々ＡＲマーカが印刷された複数の印刷媒体の前記マーカを受け取り、これ等のマーカで画像記憶装置に記録されたマーカを検索してマッチングするマーカを索出すると共に、この索出マーカに予め対応付けされている仮想三次元映像を決定し、映像記憶装置から読み出された前記仮想三次元映像を受け取って、表示装置で複数の前記ＡＲマーカにアノテーション表示する、アノテーション方法。
【請求項１３】
前記ＡＲマーカの画像をスタンプ画像とし、複数のスタンプを重ならないように捺すための区分けされたスペースが設けられていることにより実質的に複数の印刷媒体と見なし得る印刷媒体を用いる、請求項１２に記載のアノテーション方法。
【請求項１４】
複数の前記印刷媒体の内の少なくとも一に異なる種類の印刷媒体を用いる、請求項１２に記載のアノテーション方法。
【請求項１５】
前記ＡＲマーカが画像であって、前記索出画像は、複数の前記画像が重ならないで撮影された画像にマッチングするものとした、請求項１２に記載のアノテーション方法。
【請求項１６】
ＡＲマーカとして画像を用い、前記受け取ってマッチング処理する画像に圧縮画像を用いることを特徴とする、請求項１２に記載のアノテーション方法。
【請求項１７】
請求項１２乃至請求項１６の何れか１に記載のアノテーション方法をコンピュータに実行させるプログラム。
【請求項１８】
請求項１２乃至請求項１６の何れか１に記載のアノテーション方法をコンピュータに実行させるためのプログラムを記録した、コンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】  この発明は、写真や図柄が印刷されたカードや各種媒体をカメラで撮影した映像上に、この映像に関連付けられた三次元映像を重ね合わせるようにして表示する、アノテーションシステム、方法、プログラムおよび記録媒体に関する。
【背景技術】
【０００２】  特開２０１１−２４２８１６号のように、カメラで撮影した現実の視界情報の表示上に仮想三次元映像をアノテーションして表示する拡張現実（ＡＲ：Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ）の技術が公開されている。一般的にこのＡＲ技術では、ＡＲマーカと呼ばれる一次元コードや二次元コードなどの識別子を用い、カメラがこのＡＲマーカを含む現実の視界を撮影して、ＡＲマーカに対応付けられている仮想三次元映像を探し出し、この仮想三次元映像を上記撮影された現実の視界情報にアノテーションで表示するが、特開２０１１−２４２８１６号ではＡＲマーカにＧＰＳ位置情報と方位情報とが用いられている。【０００３】  また特開２０１３−１９８５２０号は、現実世界のカードに記された情報をゲーム装置で実行される処理に反映させるべく、カメラで撮影した現実のカードの複数枚から図形を検出し、この内からいずれか１つ以上の図形をユーザーに選択させ、この選択された図形に対応付けられている処理を実行すると言うものである。従ってユーザーは、自身が所持するカードの情報を仮想世界に取り入れ、検出した図形のうちユーザーが選択した図形に応じてゲームの進行を変化させてゲームを楽しむことができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１１−２４２８１６号
【特許文献２】特開２０１３−１９８５２０号
【発明の概要】
【発明が解決しようとする課題】
【０００５】  現実の視界情報の表示上に仮想三次元映像をアノテーションして表示すると言う技術は斬新であり楽しいものである。しかしながらＡＲマーカに例えばＱＲコード（登録商標、以下同様）などの識別子が用いられる技術、例えば特開２０１３−１９８５２０号の技術には次のような幾つかの問題があることが分かった。【０００６】  すなわちＡＲマーカにはＱＲコードなどの識別子が用いられるが、カードが美しいイラストや写真が印刷されたものであると、ＱＲコードなどの識別子をその中に見ることには美観的な点で違和感を覚えるのである。【０００７】  またＡＲ技術ではカメラをかざした現実の視界情報の表示上に仮想三次元映像が自動的にアノテーション表示されるのが楽しいのであるが、上述の美観的な問題点が残っている場合でも解決されている場合でも、また特開２０１３−１９８５２０号の場合でも、検出した図形の内からユーザーに図形を選択させてこの図形に対応する処理を実行するものとしたのでは、図形選択と言う作業がユーザーに要求されるためこの操作が面倒である。【０００８】  従ってこの発明は、このような問題の何れか一をまたは両方共を解決することを課題とするものである。
【課題を解決するための手段】
【０００９】  現実の視界情報の表示上に仮想三次元映像をアノテーションして表示するに際し、上記美観的な問題を解決すべく、映像決定装置により、カメラで撮影されたＡＲマーカである画像が印刷されたカードの前記画像を受け取りこの画像で画像記憶装置に記録された画像を検索してマッチングする画像を索出すると共にこの索出画像に予め対応付けされている仮想三次元映像を決定し、映像記憶装置から読み出された前記仮想三次元映像を受け取って、表示装置で前記画像にアノテーションして表示するようにした。ＡＲマーカは美麗な画像そのものである。【００１０】  この発明の特徴は画像そのものをＡＲマーカとしている点にある。ＡＲマーカの媒体としてカードが使用され、カメラで撮影したカードに印刷されている美麗なイラストや写真などの画像が画像記憶装置に予め記録されている画像とマッチングしている場合に、その画像に対応する仮想三次元映像をカメラで撮影した画像に畳重させてアノテーション表示する。従ってカードにはバーコードやカラーコードなどの無粋なものがなく、イラストや写真などの美しさをそのまま保つことができるのである。【００１１】  また前記受け取ってマッチング処理する画像に圧縮画像を用いることができる。例えばこの発明のアノテーションシステムを、スマートフォンなどの携帯端末のカメラで撮影した上記画像を、インターネットなどのネットワークを介して映像決定装置のあるサーバに送信し、ここで得られた仮想三次元映像を携帯端末に送信し、この表示装置で上記画像にアノテーションで表示するネットワークシステムに構成する場合、ネットワークの負荷を考えるのであれ上記画像は圧縮されている方が好ましい。この圧縮画像は映像決定装置でマッチング処理を行うに先立って解凍処理されるが、画像記憶装置に記録された画像にも同一のアルゴリズムで圧縮処理を施しておき、両の画像を解凍せずにそのまま比較処理するように構成する方式も実現可能である。【００１２】  さて、現実の視界情報の表示上に仮想三次元映像をアノテーションして表示するのに際して、上述した図形の選択がユーザーを煩わせると言う問題を解決すべく、映像決定装置によって、カメラで撮影された各々ＡＲマーカが印刷された複数の印刷媒体の前記マーカを受け取りこれ等のマーカで画像記憶装置に記録されたマーカを検索してマッチングするマーカを索出すると共にこの索出マーカに予め対応付けされている仮想三次元映像を決定し、映像記憶装置から読み出された前記仮想三次元映像を受け取り表示装置で複数の前記ＡＲマーカにアノテーションして表示するようにした。これ等の一連の処理は、カメラを複数の印刷媒体にただかざすだけで、仮想三次元映像が印刷媒体上に全自動的にアノテーション表示される。【００１３】  この発明の特徴はＡＲマーカは画像に限定されずＱＲコードやカメレオンコード（登録商標）などマーカとなり得るものであれば良く、ＡＲマーカの媒体もカードに限定されず雑誌や広告ちらしやうちわなどのマーカが印刷可能なものであれば良い。そして各々ＡＲマーカが印刷された複数の印刷媒体から複数のマーカを受け取り、このマーカのセットに付き画像記憶装置に記録された同じセットのマーカとマッチングしてい��場合に、その同じセットに対応する仮想三次元映像をカメラで撮影した画像に畳重させてアノテーション表示する。【００１４】  映像決定装置が複数のＡＲマーカの個々に付いてマッチングを取り、その個数の全てのマーカでマッチングが得られた場合にのみこれに対応する仮想三次元映像を決定するようにも、その個数の幾つかのマーカでマッチングが得られた場合にこの部分セットに対応する仮想三次元映像を決定するようにも、あるいは個々のマーカのマッチングを取るのではなく総体としてマッチングを取るようにも構成することができるが、どの構成で設計するかは自由である。なお複数のＡＲマーカの組み合わせに関しては上述のようなことが実現された上で、それぞれの印刷媒体の１枚ごとに特定の仮想三次元映像を割り当てておき、１枚でもアノテーションを楽しむことができるように設計して良い。また印刷媒体の裏面を利用するようにしても良く、この場合には印刷媒体の表裏の組み合わせによってアノテーション表示し得る仮想三次元映像の数を大きく増やしたり、表示の質そのものを変えたりすることができる。【００１５】  ここで複数の印刷媒体と言うことに付いて説明する。印刷媒体がカードである例では、例えば各々ＡＲマーカが印刷された４枚のいわゆるトレーディングカードを縦横２枚ずつ並べたり、横一列に４枚を並べたりしてカメラで撮影することになるが、この発明では、ただ１枚のカードを４つの区画に分けておき、各々の区画にそれぞれＡＲマーカを追加して行くものも、複数の印刷媒体であると定義する。何となれば、ＡＲマーカが追加された後のこの１枚のカードをそれぞれの区画を壊さないようにして分離すれば、複数のカードすなわち印刷媒体となるからである。【００１６】  例えば、前記ＡＲマーカの画像をスタンプ画像とし、複数のスタンプを重ならないように捺すための区分けされたスペースが設けられていることにより実質的に複数の印刷媒体と見なし得る印刷媒体を用いるようにすることができる。この用途の一例としてスタンプラリーカードを想定し得る。チェックポイントを回って上記区分けされたスペースにスタンプを捺して行くゲームでは、映像決定装置が集まったスタンプに応じた仮想三次元映像を決定し、この特定の仮想三次元映像がスタンプラリーカードの上にアノテーションして表示される。スタンプが捺されたスタンプラリーカードは複数のＡＲマーカを有することになる。【００１７】  次に、複数の前記印刷媒体の内の少なくとも一に異なる種類の印刷媒体を用いるようにすることができる。例えばカードとＣＤジャケットを組合わせたり、ポケットティッシュの包装紙と雑誌の表紙と宣伝用のうちわを組合わせたり、更にはカードとペットボトルのシュリンクフィルムとを組合わせたりと、まったく自由な発想でこの発明を活用することが可能である。【００１８】  次に、ＡＲマーカが画像であって索出画像は複数の前記画像が重ならないで撮影された画像にマッチングするものとすることができる。ＡＲマーカがイラストや写真などの画像であるものに付いてはすでに説明したが、複数の画像が重ならないように撮影されることで、映像決定装置がこれ等の画像の組み合わせに合致する仮想三次元映像を、より正確に決定すること���できるようになる。なお重なった画像でマッチングを取り得るように映像決定装置を設計しても良いのであるが、するとアノテーション表示の土台となるべき写真やイラストなどの美しさを損ねるおそれがある。【００１９】  次に、ＡＲマーカとして画像を用い、前記受け取ってマッチング処理する画像に圧縮画像を用いるようにすることができる。この発明では複数のＡＲマーカを処理するが、ＡＲマーカが画像であると、例えばこの発明のアノテーションシステムを、スマートフォンなどの携帯端末のカメラで撮影した上記画像を、インターネットなどのネットワークを介して映像決定装置のあるサーバに送信し、ここで得られた仮想三次元映像を携帯端末に送信し、この表示装置で上記画像にアノテーションで表示するネットワークシステムに構成する場合、ネットワークの負荷を考えるのであれ上記画像は圧縮されている方が好ましい。この圧縮画像は映像決定装置でマッチング処理を行うに先立って解凍処理されるが、画像記憶装置に記録された画像にも同一のアルゴリズムで圧縮処理を施しておき、両の画像を解凍せずにそのまま比較処理するように構成する方式も実現可能である。【００２０】  なお上記２つの独立した発明は、そのアノテーション方法の全体をまたはパートごとにコンピュータに実行させるプログラムとして提供することができる。パートとは、マーカを撮影するカメラでの処理、カメラで撮影されたマーカを受け取って、これ等のマーカにマッチングするマーカを索出しこれに対応する仮想三次元映像を決定する映像決定装置での処理、仮想三次元映像を受け取ってこれをマーカが記された媒体にアノテーション表示する表示装置での処理、のことである。またこのプログラムを記録したコンピュータ読み取り可能な記録媒体として提供することができる。
【発明の効果】
【００２１】  第１の発明によれば、映像決定装置により、カメラで撮影されたＡＲマーカである画像が印刷されたカードの前記画像を受け取りこの画像で画像記憶装置に記録された画像を検索してマッチングする画像を索出すると共にこの索出画像に予め対応付けされている仮想三次元映像を決定し、映像記憶装置から読み出された前記仮想三次元映像を受け取って、表示装置で前記画像にアノテーションして表示するようにしたので、従来のＱＲコードなどの識別子を用いたＡＲマーカがカードの美麗なイラストや写真を損なってしまうと言う問題を解決することに成功している。【００２２】  第２の発明によれば、映像決定装置により、カメラで撮影された各々ＡＲマーカが印刷された複数の印刷媒体の前記マーカを受け取りこれ等のマーカで画像記憶装置に記録されたマーカを検索してマッチングするマーカを索出すると共にこの索出マーカに予め対応が付けられた仮想三次元映像を決定し、映像記憶装置から読み出された前記仮想三次元映像を受け取り表示装置で複数の前記ＡＲマーカにアノテーションして表示するようにしたので、カメラを複数の印刷媒体にただかざすだけで、仮想三次元映像が印刷媒体上に全自動的にアノテーション表示がなされるようになり、従来のように撮影した印刷媒体の内からユーザーに印刷媒体を選択させる必要がなくなると言う効果を奏する。
【図面の簡単な説明】
【００２３】
【図１】  実施例１のシステムの説明図である。
【図２】  実施例１のＡＲ表示部をブロック図で表した説明図である。
【図３】  実施例１のＡＲ処理部をブロック図で表した説明図である。
【図４】  実施例１のＡＲ表示部の処理ステップを表す説明図である。
【図５】  実施例１のＡＲ処理部の処理ステップを表す説明図である。
【図６】  実施例１のＡＲ表示部の処理ステップを表す説明図である。
【図７】  実施例１の動作原理の説明図である。
【図８】  実施例１のアノテーション表示を模式的に表す説明図である。
【図９】  実施例２のＡＲ表示部をブロック図で表した説明図である。
【図１０】  実施例２のＡＲ処理部をブロック図で表した説明図である。
【図１１】  実施例２のＡＲ表示部の処理ステップを表す説明図である。
【図１２】  実施例２のＡＲ処理部の処理ステップを表す説明図である。
【図１３】  実施例２の動作原理の説明図である。
【図１４】  実施例２のアノテーション表示を模式的に表す説明図である。
【図１５】  実施例３の印刷媒体の説明図である。
【図１６】  実施例４の印刷媒体の説明図である。
【発明を実施するための形態】
【００２４】  この発明は、パーソナルコンピュータやテレビゲームマシンやスマートフォンやテレビジョン受像機などのスタンドアローンな機器で実施することができるが、以下ではネットワーク越しに処理を分散して実施する例に付き実例を以て説明することにする。しかしながらこの発明は、スタンドアローンな機器で実施することも権利範囲であると主張するものである。
【実施例１】
【００２５】  図１乃至図８でこの実施例を説明する。表側にディスプレイ１０を、裏側にカメラ１１を備えたスマートフォン１は無線にてインターネットに接続されている。インターネットにはまたアノテーションサーバ２が接続されている（図１）。【００２６】  スマートフォン１のＡＲ表示部４を図２のブロック図で表すと、ＡＲ表示部４は撮像部４０と表示部４１と送受信部４２とから構成されている。一方アノテーションサーバ２のＡＲ処理部５を図３のブロック図で表すと、ＡＲ処理部５は検索部５０と画像記憶部５１と映像決定部５２と仮想三次元映像記憶部５３と送受信部５４とから構成されている。【００２７】  各々のブロックの動作は次のようである。すなわち図１で表すようにスマートフォン１のカメラ１１でカード３を撮影すると（ステップＳ１）、この映像をＡＲ表示部４の撮像部４０が処理してディスプレイ１０に表示すると共に、この映像からカード３に印刷された写真３０の部分を切り出して圧縮処理を行い（ステップＳ２）、この写真３０の圧縮した画像データを送受信部４２を以てインターネット経由でアノテーションサーバ２に宛てて送信する（ステップＳ３）。【００２８】  図７で表すようにアノテーションサーバ２で注目すべきは画像記憶部５１と仮想三次元映像記憶部５３とである。アノテーションサーバ２では、送受信部５４が上記圧縮された画像データを受信すると（ステップＳ４）、映像決定部５２は検索部５０を以てこの受信した圧縮画像に合致する圧縮画像を画像記憶部５１の中から索出して（ステップＳ５）、索出された圧縮画像に紐付けられた仮想三次元映像３２を仮想三次元映像記憶部５３の中から読み出し（ステップＳ６）、このようにして決定された仮想三次元映像３２を送受信部５４を以てスマートフォン１に宛てて送信する（ステップＳ７）。画像記憶部５１の中の圧縮画像データにはカード３に印刷された写真３０の画像データと同じものを用意しておく。従って、このカード３が用いられる限り相当の仮想三次元映像のデータを得ることができるのである。なお画像記憶部５１の中の圧縮画像は写真３０の圧縮時に用いられたものと同じ圧縮アルゴリズムで処理されたものであるから、圧縮後の両者は大凡合致することになる。なおこの合致割合は任意に設定して良い。【００２９】  いま撮影画像（ｃ）のデータをアノテーションサーバ２に送信すると、画像記憶部５１の中に記録されている画像（ａ、ｂ、ｃ、ｄ、ｅ、ｆ、ｇ・・）を当たって画像ｃを索出するが、画像（ｃ）には仮想三次元映像（Ｃ）が紐付けられているため、この仮想三次元映像３２（Ｃ）をスマートフォン１に送信する。するとスマートフォン１の側ではディスプレイ１０に先ほど表示した撮影画像３１（ｃ）に重ね合わせるようにしてこの仮想三次元映像３２（Ｃ）を表示する（図８）。【００３０】  なおこの実施例では検索部５０にて圧縮画像同士を比較しているが、圧縮することなく比較したり、圧縮されたものであっても一旦解凍した上で比較するように構成することが可能である。
【実施例２】
【００３１】  図９乃至図１４でこの実施例を説明する。スマートフォンのＡＲ表示部６を図９のブロック図で表すと、ＡＲ表示部６は撮像部６０と表示部６１とＡＲマーカ読取部６２と送受信部６３とから構成されている。一方、アノテーションサーバのＡＲ処理部７を図１０のブロック図で表わすと、ＡＲ処理部７は検索部７０とＡＲマーカ記憶部７１と映像決定部７２と仮想三次元映像記憶部７３と送受信部７４とから構成されている。【００３２】  この実施例で用いるスマートフォンは、表側にディスプレイ１０を、裏側に図示しないカメラを備え、無線にてインターネットに接続されている。上記アノテーションサーバのＡＲ処理部７もインターネットに接続されている。【００３３】  この実施例は４枚のトレーディングカード３３を用いるものである。スマートフォンのカメラでＡＲマーカ３４が印刷されたカード３３を撮影すると（ステップＳ１０）、この撮影画像をＡＲ表示部６の撮像部６０が処理してディスプレイ１０に表示すると共にこの撮影画像からカード３３に印刷されたＡＲマーカ３４をＡＲマーカ読取部６２で読み取り（ステップＳ１１）、このＡＲマーカ３４のデータを送受信部６３からインターネットを経由してアノテーションサーバに宛て送信する（ステップＳ１２）。なおこの実施例ではＡＲマーカ３４にＱＲコードを用いている。【００３４】  アノテーションサーバ側では、ＡＲ処理部７の送受信部７４がＡＲマーカ３４のデータを受信すると（ステップＳ１３）、映像決定部７２は検索部７０を以てこの受信したＡＲマーカ３４のデータに合致するマーカーデータをＡＲマーカ記憶部７１の中から索出して（ステップＳ１４）、索出されたＡＲマーカに紐付けられている所の仮想三次元映像３６を仮想三次元映像記憶部７３の中から読み出し（ステップＳ１５）、このようにして決定された仮想三次元映像３６を送受信部７４を以てスマートフォンに宛てて送信する（ステップＳ１６）。ＡＲマーカ記憶部７１の中のマーカーデータにはカード３３に印刷されたＡＲマーカ３４のデータと同じものを用意しておく。従って、このカード３３が用いられる限り相当の仮想三次元映像３６のデータを得ることができるのである。【００３５】  ところで４枚のカード３３（１、２、３、４）には、各々独自の写真と共に各々独自のＡＲマーカ３４（ｉ、ｉｉ、ｉｉｉ、ｉｖ）が印刷されている。そこで例えば１枚のカード３３（１）に付いてカメラで撮影して、このカード３３（１）のマーカ３４（ｉ）のデータをアノテーションサーバに送信すると、ＡＲマーカ記憶部７１の中に記録されている単独のマーカーデータおよび組み合わせのマーカーデータからマーカ（ｉ）を索出するが、このマーカ（ｉ）には仮想三次元映像（Ｉ）が紐付けられているため、これをスマートフォンに送信することになる。するとスマーフォンの側ではディスプレイ１０に先ほど表示した撮影画像３５に重ね合わせるようにしてこの仮想三次元映像３６（Ｉ）を再生表示するのである。カード３３（２、３、４）の各々に付いても同様の処理を行う。【００３６】  しかしながらこの実施例は上述した処理に止まらず、４枚のカード３３（１、２、３、４）を任意に組合わせてカメラで撮影した場合にも映像決定の処理が決められているのである。すなわち４枚のカード３３の内の何れか２枚の組合わせ、何れか３枚の組合わせ、あるいは４枚揃いで撮影すると、アノテーションサーバ側では各々の組み合わせにマッチする仮想三次元映像をスマートフォン側に返す処理を行うように構成した。図１３および図１４を用いて４枚揃いの場合を説明すると、スマートフォンのディスプレイには図１４のように縦横２列に整列させた４枚のカード３３（１、２、３、４）が表示されるのであるが、各々に印刷されたマーカ３４（ｉ、ｉｉ、ｉｉｉ、ｉｖ）の画像からこの組み合わせに対応する仮想三次元映像３６（ＩＶ）が仮想三次元映像３６（Ｉ、ＩＩ、ＩＩＩ、ＩＶ、・・）の中から選択決定されてスマートフォンの側に返され、この仮想三次元映像３６（ＩＶ）が上記４枚のカード３３（１、２、３、４）にアノテーションするように再生表示されるのである。【００３７】  この他、マーカ３４の並び順を判別してそれに対応する仮想三次元映像３６を再生するように構成することも可能である。例えば縦一列配列や横一列配列などを判別し得るように設計するのである。
【実施例３】
【００３８】  上述の実施例２では、４枚のカード３３（１、２、３、４）を集めて並べてカメラをかざすと言うことを行っている。すなわち複数の印刷媒体の撮影により複数のマーカを得るのである。そしてこの範疇にはこの実施例のようなスタンプカードが含まれることをここに説明する。【００３９】  図１５はこの実施例のスタンプラリーシート３７であり、この表面には３行３列の区画３８が印刷されている。この状態でカメラをかざしても特段何も起こらないが、スタンプ３９を区画３８内に捺して行くことで、スタンプ３９の数に応じた仮想三次元映像をこのシート３７のスタンプ３９にアノテーション表示するように設計されている。すなわち、この実施例のシート３７では各々の区画３８を独立した印刷媒体に見立てることができるのである。
【実施例４】
【００４０】  さてこれまでは印刷媒体にカード様のものを組合わせて用いる例を取り上げたが、印刷媒体は何もカードに限定されるものではなく、また複数の印刷媒体の種類が異なっていても良いわけである。【００４１】  図１６では印刷媒体としてＣＤジャケット３００とポケットティッシュ３０１とトレーディングカード３０２との組み合わせを用いる実施例を表している。すなわちこの３種類を集めて初めて、カメラをかざした時にこの３種類の印刷媒体の画像に仮想三次元映像がアノテーション表示されるのである。
【産業上の利用可能性】
【００４２】  この発明は、ＡＲマーカが付された印刷媒体に限定されず、例えば風景中に集められた所定の組み合わせの人物や物体などにも広く応用し得る。これもまたこの発明の権利範囲内のものである。
【符号の説明】
【００４３】１：スマートフォン  １０：ディスプレイ  １１：カメラ
２：アノテーションサーバ
３：カード  ３０：写真  ３１：撮影画像  ３２：仮想三次元映像  ３３：カード
３４：ＡＲマーカ  ３５：撮影画像  ３６：仮想三次元映像  ３７：シート
３８：区画  ３９：スタンプ  ３００：ＣＤジャケット
３０１：ポケットティッシュ  ３０２：トレーディングカード
４：ＡＲ表示部  ４０：撮像部  ４１：表示部  ４２：送受信部
５：ＡＲ処理部  ５０：検索部  ５１：画像記憶部  ５２：映像決定部
５３：仮想三次元映像記憶部  ５４：送受信部
６：ＡＲ表示部  ６０：撮像部  ６１：表示部  ６２：ＡＲマーカ読取部
６３：送受信部
７：ＡＲ処理部  ７０：検索部  ７１：ＡＲマーカ記憶部  ７２：映像決定部
７３：仮想三次元映像記憶部  ７４：送受信部
【図１】
2015146173.tif 000003
【図２】
2015146173.tif 000004
【図３】
2015146173.tif 000005
【図４】
2015146173.tif 000006
【図５】
2015146173.tif 000007
【図６】
2015146173.tif 000008
【図７】
2015146173.tif 000009
【図８】
2015146173.tif 000010
【図９】
2015146173.tif 000011
【図１０】
2015146173.tif 000012
【図１１】
2015146173.tif 000013
【図１２】
2015146173.tif 000014
【図１３】
2015146173.tif 000015
【図１４】
2015146173.tif 000016
【図１５】
2015146173.tif 000017
【図１６】
2015146173.tif 000018