(57)【要約】      （修正有）【課題】拡張現実を利用して、天然オブジェ、特に立体標本について学習したい人に学習の支援できるとともに、天然オブジェに関連したインパクトのある演出もできる拡張現実システムを提供する。【解決手段】アプリケーションソフトウェア１９を起動し、ＡＲマーカ１１付きの基台２０にアンモナイト２１付の撮影対象物１２をスマートフォン１５のカメラ１３で撮影した後、マーカ検出プログラムによりカメラ画像データからＡＲマーカ１１を検出し、データ要求プログラムからの要求で、サーバ側記憶部の３次元動画像データを、インターネット回線１６を介してサーバ１７からスマートフォン１５へ送信する。スマートフォン１５ではこのデータを受信し、データから得られた仮想物体の恐竜１８を、マーカ位置・方向検出プログラムが検出したＡＲマーカ１１の３次元位置および方向に基づき、ディスプレイ１４のカメラ画像中に重畳して表示する。【選択図】図１
0003221378.tif 000002
【実用新案登録請求の範囲】
【請求項１】
ＡＲマーカを含む撮影対象物を撮像するカメラ、該カメラが撮像したカメラ画像を表示するディスプレイが配設された携帯端末と、該携帯端末にインターネット回線を利用して通信可能なサーバと、前記ディスプレイに表示された前記カメラ画像中の前記ＡＲマーカの位置および方向に基づき、仮想物体を前記カメラ画像中に重畳するアプリケーションソフトウェアとを備えた拡張現実システムにおいて、
前記撮影対象物は、前記ＡＲマーカを有する基台に、立体標本を含む天然オブジェが取り付けられたもので、
前記仮想物体は、前記立体標本を含む天然オブジェに関連したもので、
前記サーバは、前記仮想物体に関する３次元画像データを記憶するサーバ側記憶部と、前記インターネット回線を利用して前記携帯端末とデータ通信するサーバ側通信部とを有し、
前記携帯端末は、前記カメラと、前記ディスプレイとの他に、前記インターネット回線を利用して前記サーバとデータ通信する端末側通信部を有し、
前記アプリケーションソフトウエアは、
前記ＡＲマーカを含む撮影対象物のカメラ画像データから前記ＡＲマーカを検出するマーカ検出プログラムと、
前記インターネット回線を利用して、前記端末側通信部から前記サーバに要求することで、前記インターネット回線を利用して、前記サーバ側記憶部に記憶された前記３次元画像データの前記携帯端末への送信を求めるデータ要求プログラムと、
前記ＡＲマーカを含む撮影対象物のカメラ画像データから、前記ＡＲマーカの３次元位置および方向の検出を行うマーカ位置・方向検出プログラムと、
前記データ要求プログラムにより前記携帯端末に送信された前記３次元画像データから得られた前記仮想物体を、前記マーカ位置・方向検出プログラムが検出した前記ＡＲマーカの３次元位置および方向に基づき、前記ディスプレイに表示された前記カメラ画像中に重畳する仮想物体重畳プログラムとを有したことを特徴とする拡張現実システム。
【請求項２】
前記ＡＲマーカは、前記基台の露出面に表示される平面的なもの、または、前記基台そのものを含む立体的なものであることを特徴とする請求項１に記載の拡張現実システム。
【請求項３】
前記３次元画像データは、前記仮想物体の静止画または動画のデータのみ、またはこれらに前記立体標本を含む天然オブジェと前記仮想物体とのうちの少なくとも１つについての解説文のテキストデータを付加したものである請求項１または請求項２に記載の拡張現実システム。
【請求項４】
前記携帯端末には、バイブレータおよびスピーカが配設され、
前記アプリケーションソフトウエアは、前記ディスプレイに前記仮想物体が表示された際に、前記バイブレータにより前記携帯端末を振動させる端末振動プログラムと、前記スピーカから音を発生させる音発生プログラムとを有したことを特徴とする請求項１〜請求項３のうち、何れか１項に記載の拡張現実システム。
【請求項５】
前記立体標本は化石または隕石で、
このうち、前記化石の際の前記仮想物体は恐竜で、前記隕石の際の前記仮想物体は、太陽系の惑星群を含む星であることを特徴とする請求項１〜４のうち、何れか１項に記載の拡張現実システム。
【請求項６】
前記天然オブジェは花束で、
前記基台は、前記花束を包む包装シートで、
前記ＡＲマーカは、前記包装シートに貼着されるマーカーシールであることを特徴とする請求項１〜４のうち、何れか1項に記載の拡張現実システム。
【請求項７】
前記マーカーシールは、湾曲自在で裏面が貼着面となった基材シールと、表面にＡＲマーカが表示された平坦なマーカ表示板とを、互いの中央部のみで連結したことを特徴とする請求項６に記載の拡張現実システム。
【考案の詳細な説明】
【技術分野】
【０００１】
この考案は、実空間に仮想物体を重畳させる拡張現実（Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ）の技術を利用した拡張現実システムに関する。
【背景技術】
【０００２】
近年、３次元画像技術の向上に伴い、スマートフォン（携帯端末）のディスプレイの画面において、３次元位置を認識するＡＲマーカを付けたカード（撮影対象物）の表面上に、そのカードに描かれたキャラクタの仮想物体を重畳させる拡張現実感システムが開発されている（例えば、特許文献１など）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１４−７１８３８号公報
【考案の開示】
【考案が解決しようとする課題】
【０００４】
しかしながら、従来の拡張現実システムにあっては、このようにスマートフォンのディスプレイの画面上で、カードの表面に仮想物体であるキャラクタを立体的に表示するだけであった。
ところで、地学的な立体標本として化石や隕石が知られている。従来の立体標本は、単に箱の中に化石や隕石が収納され、ガラスの蓋がされたものであった。そのため、化石や隕石についての時代背景等が解りにくく、例えば小学生や中学生などが恐竜や宇宙について学習する際に、十分な手助けとなりにくかった。
また、例えば、誕生日やパーティなどで花束を贈るとき、花束にメッセージカードを付けることがある。しかしながら、カードを使って思いを伝えるという方法は一般的で、インパクトにかけていた。
【０００５】
本考案は、このような問題点に鑑みなされたもので、拡張現実を利用して、天然オブジェ、特に立体標本について学習したい人に学習の支援をすることができるとともに、天然オブジェに関連したインパクトのある演出を行うことができる拡張現実システムを提供することを目的としている。
【課題を解決するための手段】
【０００６】
請求項１に記載の考案は、ＡＲマーカを含む撮影対象物を撮像するカメラ、該カメラが撮像したカメラ画像を表示するディスプレイが配設された携帯端末と、該携帯端末にインターネット回線を利用して通信可能なサーバと、前記ディスプレイに表示された前記カメラ画像中の前記ＡＲマーカの位置および方向に基づき、仮想物体を前記カメラ画像中に重畳するアプリケーションソフトウェアとを備えた拡張現実システムにおいて、前記撮影対象物は、前記ＡＲマーカを有する基台に、立体標本を含む天然オブジェが取り付けられたもので、前記仮想物体は、前記立体標本を含む天然オブジェに関連したもので、前記サーバは、前記仮想物体に関する３次元画像データを記憶するサーバ側記憶部と、前記インターネット回線を利用して前記携帯端末とデータ通信するサーバ側通信部とを有し、前記携帯端末は、前記カメラと、前記ディスプレイとの他に、前記インターネット回線を利用して前記サーバとデータ通信する端末側通信部を有し、前記アプリケーションソフトウエアは、前記ＡＲマーカを含む撮影対象物のカメラ画像データから前記ＡＲマーカを検出するマーカ検出プログラムと、前記インターネット回線を利用して、前記端末側通信部から前記サーバに要求することで、前記インターネット回線を利用して、前記サーバ側記憶部に記憶された前記３次元画像データの前記携帯端末への送信を求めるデータ要求プログラムと、前記ＡＲマーカを含む撮影対象物のカメラ画像データから、前記ＡＲマーカの３次元位置および方向の検出を行うマーカ位置・方向検出プログラムと、前記データ要求プログラムにより前記携帯端末に送信された前記３次元画像データから得られた前記仮想物体を、前記マーカ位置・方向検出プログラムが検出した前記ＡＲマーカの３次元位置および方向に基づき、前記ディスプレイに表示された前記カメラ画像中に重畳する仮想物体重畳プログラムとを有したことを特徴とする拡張現実システムである。
【０００７】
撮影対象物は、ＡＲマーカを有する基台に、立体標本を含む天然オブジェが取り付けられたものであれば任意である。
ＡＲマーカの種類は限定されない。各種の２次元マーカ（例えば、ＱＲコード（登録商標）、文字、図形等）でも、各種の３次元マーカ（例えば、基台等の物体）でもよい。
仮想物体は、立体表現可能なものであれば任意である。また、仮想物体は静止画でも動画でもよい。
立体標本の種類は限定されない。例えば、化石、隕石、鉱物、生物等のような天然のオブジェ（天然物）であればよい。
ここでいう基台とは、ＡＲマーカを付すことができ、かつ立体標本を含む天然オブジェを取り付けることができる物であれば限定されない。例えば、各種の取り付け台、ブロック台、枠台、包装シート、本等でもよい。
基台の素材も限定されない。例えば、金属、セラミックス、木、合成樹脂などを採用することができる。
基台の形状やサイズも任意である。基台の形状としては、例えばキューブ状、ボール状でもよい。
【０００８】
携帯端末の種類は限定されない。例えば、スマートフォン、タブレット、ノートパソコンなどを採用することができる。
携帯端末のカメラは、デジタルカメラであれば任意である。ここでいうカメラ画像とは、一般的にビデオ画像（動画像）であるが、静止画でもよい。
ディスプレイの種類は限定されない。例えば、液晶ディスプレイ、有機ＥＬディスプレイなどでもよい。
サーバは、拡張現実システムのサービスを提供できるものであれば限定されない。
サーバ側記憶部の種類は限定されない。例えば、パソコンのハードディスク、各種のメモリ（ＲＯＭ，ＲＡＭ等）などを採用することができる。
サーバ側記憶部に記憶されるデータは、３次元画像データ、マーカ画像データに限定されない。例えば、仮想物体に関連した各種のデータ、仮想物体をディスプレイ画面に表示する際に利用される各種の演出データ等を含んでもよい。
【０００９】
アプリケーションソフトウェアが記憶される記録媒体の種類は任意である。例えば、ＣＤ−ＲＯＭ、ＤＶＤ、ＵＳＢメモリ、ＳＤカードの他、サーバ（クラウドサーバを含む）のデータベースなどを採用することができる。
アプリケーションソフトウエアの携帯端末への取得方法としては、例えば、このサーバ（クラウドを含む）からインターネット回線を介してインストールすることができる。その他、アプリケーションソフトウエアが記憶されたＣＤ、ＤＶＤ、ＵＳＢメモリ、ＳＤカード等から取得してもよい。
取得後のアプリケーションソフトウエアは、例えば、端末側記憶部に記憶させてもよい。
【００１０】
マーカ検出プログラムは、携帯端末のカメラが撮影したカメラ画像（カメラ画像データ）からＡＲマーカ（ＡＲマーカデータ）を検出（検索）するロジックである。ＡＲマーカの検出方法は任意である。
画像データ要求プログラムは、インターネット回線を利用して、端末側通信部からサーバへの要求により、インターネット回線を利用して、サーバ側記憶部に記憶された３次元画像データの携帯端末への送信を求めるロジックである。例えば、ＡＲマーカ付きの撮影対象物のカメラ画像データを含む３次元動画像データ要求信号、または、このカメラ画像データを含まない３次元動画像データ要求信号を、インターネット回線を介して携帯端末からサーバに送信することにより、サーバに対して、サーバ側記憶部に記憶する３次元画像データの携帯端末へのインターネット回線を介した送信を求めてもよい。
マーカ位置・方向検出プログラムは、ＡＲマーカを含む撮影対象物のカメラ画像データから、ＡＲマーカの３次元位置および方向の検出を行うロジックである。
【００１１】
また、請求項２に記載の考案は、前記ＡＲマーカは、前記基台の露出面に表示される平面的なもの、または、前記基台そのものを含む立体的なものであることを特徴とする請求項１に記載の拡張現実システムである。
平面的なＡＲマーカは任意である。例えば、文字、数字、記号、模様（デザイン）、バーコード、ＱＲコード（登録商標）等を採用することができる。
立体的なＡＲマーカも任意である。例えば、基台そのものでもよい。その他、基台に設けられた各種の立体物でもよい。
【００１２】
さらに、請求項３に記載の考案は、前記３次元画像データは、前記仮想物体の静止画または動画のデータのみ、またはこれらに前記立体標本を含む天然オブジェと前記仮想物体とのうちの少なくとも１つについての解説文のテキストデータを付加したものである請求項１または請求項２に記載の拡張現実システムである。
【００１３】
３次元画像データは、仮想物体の静止画データのみでも、仮想物体の動画データのみでもよい。その他、仮想物体の静止画データとテキストデータとを組み合わせたものでも、仮想物体の動画データとテキストデータとを組み合わせたものでもよい。
テキストデータは、立体標本を含む天然オブジェの解説文のみでも、仮想物体の解説文のみでもよい。または、これらの両方でもよい。
【００１４】
請求項４に記載の考案は、前記携帯端末には、バイブレータおよびスピーカが配設され、前記アプリケーションソフトウエアは、前記ディスプレイに前記仮想物体が表示された際に、前記バイブレータにより前記携帯端末を振動させる端末振動プログラムと、前記スピーカから音を発生させる音発生プログラムとを有したことを特徴とする請求項１〜請求項３のうち、何れか１項に記載の拡張現実システムである。
【００１５】
バイブレータおよびスピーカとしては、例えば、携帯端末に内蔵されたものをそれぞれ採用することができる。
端末振動プログラムとは、ディスプレイに仮想物体が表示された際に、バイブレータにより携帯端末を振動させるロジックである。振動の強さ、振動時間の長さや間隔などは任意である。
音発生プログラムとは、スピーカから音を発生させるロジックである。音の種類は任意である。例えば、音楽、ブザー、チャイムなどでもよい。
振動と音とは、例えば、携帯端末のディスプレイ画面に仮想物体が表示されたと同時に発生させても、タイミングをずらして別々に発生させてもよい。
【００１６】
請求項５に記載の考案は、前記立体標本は化石または隕石で、このうち、前記化石の際の前記仮想物体は恐竜で、前記隕石の際の前記仮想物体は、太陽系の惑星群を含む星であることを特徴とする請求項１〜４のうち、何れか１項に記載の拡張現実システムである。
【００１７】
立体標本は化石でも、隕石でもよい。このうち、化石のときの仮想物体は恐竜である。また、隕石のときの仮想物体は星である。星の種類は限定されない。例えば、太陽系の惑星群でもよい。
【００１８】
請求項６に記載の考案は、前記天然オブジェは花束で、前記基台は、前記花束を包む包装シートで、前記ＡＲマーカは、前記包装シートに貼着されるマーカーシールであることを特徴とする請求項１〜４のうち、何れか1項に記載の拡張現実システムである。
【００１９】
花束の種類は任意である。
包装シートの素材は任意である。例えば、紙でもプラスチックシートでもよい。また、包装シートのサイズも任意である。
マーカーシールの素材、形状、サイズなどは任意である。ただし、マーカーシールの一部に板状の平坦部を設け、この平坦部の表面に表示した方が、ＡＲマーカの読み取り精度が高まるために好ましい。
ここでいう板状の平坦部とは、例えば、花束をコーン状にラッピングした包装シートにマーカーシールを貼着した際であっても、ＡＲマーカが表示される面（表面または裏面）の平坦性を維持可能な硬さを有した部分をいう。
【００２０】
請求項７に記載の考案は、前記マーカーシールは、湾曲自在で裏面が貼着面となった基材シールと、表面にＡＲマーカが表示された平坦なマーカ表示板とを、互いの中央部のみで連結したことを特徴とする請求項６に記載の拡張現実システムである。
【００２１】
基材シールの素材は、湾曲自在なものであれば任意である。例えば、各種のプラスチックフィルム、各種の紙、各種の布帛（織布、不織布、網布）等を採用することができる。
基材シールの形状は任意である。例えば、円形、楕円形、三角形以上の多角形、その他任意形状でもよい。
基材シールのサイズは任意である。
マーカ表示板は、ＡＲマーカが表示される表面が平坦な板材であれば、その素材、形状およびサイズ等は任意である。
ここでのＡＲマーカは、平面的な２次元マーカである。
基材シールとマーカ表示板との連結方法としては、例えば、接着、融着、部材同士の一体形成等を採用することができる。
基材シールとマーカ表示板とは、互いの中央部同士を、例えばスポット（点）的に連結しても、線状に連結してもよい。
【考案の効果】
【００２２】
本考案の拡張現実システムによれば、携帯端末にインストールされたアプリケーションソフトウェアを起動し、ＡＲマーカ付きの基台に立体標本等の天然オブジェが取り付けられた撮影対象物をカメラ撮影する。その後、マーカ検出プログラムにより、携帯端末のカメラが撮影して得られたカメラ画像データからＡＲマーカを検出し、その後、画像データ要求プログラムからの要求により、サーバ側記憶部に記憶された３次元画像データが、インターネット回線を介してサーバから携帯端末へと送信される。
次に、携帯端末では、サーバからの３次元画像データを受信し、この画像データから得られた仮想物体を、マーカ位置・方向検出プログラムが検出したＡＲマーカの３次元位置および方向に基づき、ディスプレイに表示されたカメラ画像中に重畳して画像表示する。
【００２３】
このように、拡張現実を利用して、実在する撮影対象物が映ったディスプレイ画面にバーチャルの仮想物体を重ね合わせて表示することにより、天然オブジェ、特に立体標本等について学習したい人に対して学習の支援をすることができる。
しかも、この天然オブジェに関連した仮想物体を利用して、インパクトのある演出を行うこともできる。
また、撮影対象物と立体標本とが重畳的にディスプレイ表示された映像をその携帯端末によりカメラ撮影し、撮影データとしてその携帯端末に保存したり、またＳＮＳ（Ｓｏｃｉａｌ  Ｎｅｔｗｏｒｋｉｎｇ  Ｓｅｒｖｉｃｅ）を利用して、それをインターネット上に発信・共有・拡散することもできる。
【００２４】
特に、請求項２に記載の考案によれば、ＡＲマーカを、基台の露出面に表示される平面的なものとした場合には、ＡＲマーカの作成が容易となる。また、ＡＲマーカを基台そのものとした場合には、専用のＡＲマーカを作製する必要がない。
【００２５】
また、請求項３に記載の考案によれば、３次元画像データを仮想物体の静止画データとすることで、３次元画像データの容量が小さくなり、安価に仮想物体を作成することができる。
また、３次元画像データを仮想物体の動画データとした場合には、仮想物体のリアリティが高まるとともに、仮想物体を利用してさらにインパクトのある演出を行うことができる。
これらの静止画データや動画データに、仮想物体を説明するテキストデータを付加した際には、ディプレイの画面に、撮影された天然オブジェや仮想物体についての解説文を表示し、これらについての理解を深めることもできる。
【００２６】
また、請求項４に記載の考案によれば、ディスプレイに仮想物体が表示された際に、端末振動プログラムにより携帯端末を振動させるとともに、音発生プログラムにより携帯端末のスピーカから所定の音を発生させる。これにより、天然オブジェ付きの撮影対象物が映ったディスプレイ画面上の風景に、バーチャルの仮想物体を重ね合わせて表示する際に、所定の音と振動とを任意に発生させ、仮想物体の出現時の演出効果を高めることができる。
【００２７】
さらにまた、請求項５に記載の考案によれば、ＡＲマーカ付きの基台に設けた化石を携帯端末によりカメラ撮影することにより、例えば、撮影対象物を手にした子供等に、化石の生物が生きていた時代、例えば中生代の三畳紀、ジュラ紀、白亜紀に繁栄していた恐竜を、携帯端末のディスプレイのカメラ画像中に重畳して、化石や恐竜に対する学習の支援をすることができる。
また、立体標本として隕石を採用し、仮想物体として太陽系の惑星群を含む星を採用した場合には、例えば、隕石の立体標本を手にした子供等に対して、隕石の起源である太陽系の惑星群等を、携帯端末のディスプレイのカメラ画像中に重畳して、隕石や惑星群を含む星についての学習の支援をすることができる。
【００２８】
また、請求項６に記載の考案によれば、天然オブジェである花束を、ＡＲマーカのマーカーシールを貼着した包装シートによりラッピングする。その後、例えば、誕生日やパーティなどで花束を贈るときに、携帯端末のディスプレイ画面を通して、花束の近くに誕生日やパーティに関連した仮想物体を重畳的に表示することができる。その結果、従来のような花束にメッセージカードを付ける等に比べて、インパクトのある演出を現出することができる。
【００２９】
また、請求項７に記載の考案によれば、使用時、花束をラッピングした包装シートの一部にマーカーシールを貼着すれば、湾曲自在な基材シールと中央部同士が連結した平坦なマーカー表示板が、この平坦な状態を維持したままで外方へ突出する。そのため、携帯端末のカメラによりマーカー表示板のＡＲマーカをカメラ撮像して、ＡＲマーカ検出プログラムによりＡＲマーカを検索（検出）するとき、例えば湾曲自在な基材シールの表面にＡＲマーカを直接印刷したものに比べて、ＡＲマーカの認識率（検出率）が高まる。
【図面の簡単な説明】
【００３０】
【図１】本考案の実施例１に係る拡張現実システムの全体構成図である。
【図２】本考案の実施例１に係る拡張現実システムの一部を構成する携帯端末のディスプレイ画面に恐竜を重畳した状態を示す拡大正面図である。
【図３】本考案の実施例１に係る拡張現実システムの構成を示すブロック図である。
【図４】本考案の実施例１に係る拡張現実システムのアプリケーションソフトウエアの構成を示すブロック図である。
【図５】本考案の実施例１に係る拡張現実システムを利用した恐竜等の学習支援方法を示すフローシートである。
【図６】本考案の実施例２に係る拡張現実システムの全体構成図である。
【図７】本考案の実施例２に係る拡張現実システムの一部を構成する携帯端末のディスプレイ画面に太陽系の惑星群を重畳した状態を示す拡大正面図である。
【図８】本考案の実施例２に係る拡張現実システムのアプリケーションソフトウエアの構成を示すブロック図である。
【図９】本考案の実施例２に係る拡張現実システムを利用した太陽系の惑星群等の学習支援方法を示すフローシートである。
【図１０】本考案の実施例３に係る拡張現実システムの全体構成図である。
【考案を実施するための形態】
【００３１】
以下、この考案の実施例を具体的に説明する。
【実施例】
【００３２】
図１において、１０は本考案の実施例１に係る拡張現実システムで、この拡張現実システム１０は、ＡＲマーカ１１を含む撮影対象物１２を撮像するカメラ１３、および、カメラ１３が撮像したカメラ画像を表示するディスプレイ１４が配設されたスマートフォン（携帯端末）１５と、スマートフォン１５にインターネット回線１６を利用して通信可能なサーバ１７と、ディスプレイ１４に表示されたカメラ画像中のＡＲマーカ１１の位置および方向に基づき、仮想物体であるクリョロフォサウルス１８（恐竜）をカメラ画像中に重畳するアプリケーションソフトウェア１９とを備えたものである。
【００３３】
以下、これらの構成体を具体的に説明する。
図２に示すように、撮影対象物１２は、ＡＲマーカ１１を有する開口が下向きの矩形容器状で、かつセラミックス製の基台２０を有し、この基台２０の上面の中央部に、化石のアンモナイト（立体標本を含む天然オブジェ）２１が内側からねじ止めされたものである。
ＡＲマーカ１１は、各外側面にそれぞれ異なる意匠（図形、文字等）がプリントまたは刻設された基台２０そのもの（立体マーカ）であり、その形状、色、図形、文字等のパターンの認識により、マーカの種類を特定し、重畳する仮想物体を決定する。また、パターンの大きさや傾きから、ＡＲマーカ１１が置かれた３次元位置や方向を検出し、撮影画像上でのクリョロフォサウルス１８の合成位置や表示方向を決定する。
クリョロフォサウルス１８は、例えば、ジュラ紀のアンモナイト２１と同時代に生息した恐竜で、ここではその立体動画がディスプレイ１４に表示される。もちろん、クリョロフォサウルス１８は動かない立体静止画でもよい。その場合でも、スマートフォン１５を移動させることにより、視点を変更してこれを観察できるようした方が好ましい。
【００３４】
図１および図３のブロック図に示すように、サーバ（ＡＲコンテンツサーバ）１７は、拡張現実システム１０のサービス提供側のパソコンである。
サーバ１７は、クリョロフォサウルス１８に関する３次元動画像データ（３次元画像データ）、クリョロフォサウルス１８についての解説文２２のテキストデータをそれぞれ記憶するサーバ側記憶部２３と、インターネット回線１６を利用してスマートフォン１５と通信するサーバ側通信部２４と、サーバ側記憶部２３からクリョロフォサウルス１８の３次元動画像データや演出データを取得してスマートフォン１５に送信するデータ取得送信部２５と、これらを制御するサーバ側制御部２６とを有している。
サーバ側記憶部２３はパソコンのハードディスクで、拡張現実システム１０に関する各種情報がデータベースとして記憶されている。
サーバ側制御部２６は、パソコンの中央演算装置（ＣＰＵ）である。
【００３５】
図３に示すように、スマートフォン１５は、カメラ１３と、ディスプレイ１４と、インターネット回線１６を利用してサーバ１７とデータ通信する端末側通信部２７と、サーバ１７から送信されたクリョロフォサウルス１８の３次元動画像データおよびその解説文２２のテキストデータを記憶する端末側記憶部２８と、スピーカ５０と、バイブレータ５１と、これらを制御する端末側制御部２９とを有している。
カメラ１３はデジタルカメラ１３である。また、ディスプレイ１４は液晶ディスプレイである。さらに、端末側記憶部２８はＲＯＭである。さらにまた、端末側制御部２９は、スマートフォン１５の中央演算装置（ＣＰＵ）である。
【００３６】
図４のブロック図に示すように、アプリケーションソフトウェア１９は、クラウド上のコンテンツサービス会社から取得でき、かつ拡張現実システム１０のサービスを利用者に提供するためのコンピュータプログラムである。
アプリケーションソフトウェア１９は、ＡＲマーカ検出プログラム３０と、データ要求プログラム３１と、マーカ位置・方向検出プログラム３２と、仮想物体重畳プログラム３３とを有している。
ＡＲマーカ検出プログラム３０は、スマートフォン１５のカメラ１３により撮影されたカメラ画像データからＡＲマーカ（データ）１１を検出（検索）するためのロジックである。
【００３７】
データ要求プログラム３１は、インターネット回線１６を利用して、スマートフォン１５の端末側通信部からサーバ１７にクリョロフォサウルス１８の３次元動画像データとそれの解説文２２のテキストデータとを要求することにより、インターネット回線１６を利用して、サーバ側記憶部２３に記憶された３次元動画像データおよびテキストデータの、スマートフォン１５への送信を求めるためのロジックである。
マーカ位置・方向検出プログラム３２は、ＡＲマーカ１１を含む撮影対象物１２のカメラ画像データから、ＡＲマーカ１１の３次元位置および方向の検出を行うロジックである。
仮想物体重畳プログラム３３は、データ要求プログラム３１によりスマートフォン１５に送信された３次元動画像データから取得した立体動画のクリョロフォサウルス１８と、テキストデータから取得したクリョロフォサウルス１８の解説文２２とを、マーカ位置・方向検出プログラム３２が検出したＡＲマーカ１１の３次元位置および方向に基づき、ディスプレイ１４に表示されたカメラ画像中にそれぞれ重畳するロジックである。
【００３８】
次に、図１〜図５を参照しながら、本考案の実施例１に係る拡張現実システム１０を利用して行う、アンモナイト２１やクリョロフォサウルス１８、これらが生息していた時代（ジュラ紀）を学びたい人への学習支援方法を説明する。
まず、図１に示すように、予めクラウド上のコンテンツサービス会社からアプリケーションソフトウェア１９を取得しておく。
【００３９】
以下、図５のフローシートを参照しながら具体的に説明する。
ステップ１００において、携帯端末にインストールされたアプリケーションソフトウェア１９を起動させる。
次に、ステップ１０１において、ＡＲマーカ１１付きの基台２０にアンモナイト２１が取り付けられた撮影対象物１２を、スマートフォン１５のカメラ１３により動画（ビデオ）撮影する。
ステップ１０２において、撮影された撮影対象物１２をディスプレイ１４に画像表示するとともに、ＡＲマーカ検出プログラム３０によって、そのディスプレイ１４に表示された画像データから、基台２０のＡＲマーカ１１の画像データの検出（検索）を行う。
次いで、ステップ１０３において、ＡＲマーカ検出プログラム３０によりＡＲマーカ１１が検出された際には、データ要求プログラム３１に基づく端末側制御部２９からの指令により、データ要求信号が、端末側通信部２７、インターネット回線１６を介してサーバ１７に送信される。
【００４０】
ステップ１０４において、サーバ１７では、データ要求信号をサーバ側通信部２４が受信し、これがインターネット回線１６を介してサーバ側制御部２６へ送られる。
ステップ１０５において、サーバ側制御部２６からの指令に基づき、データ取得送信部２５がサーバ側記憶部２３から、クリョロフォサウルス１８の３次元動画像データとその解説文２２のテキストデータとを取得する。
ステップ１０６において、データ取得送信部２５により取得した３次元動画像データを、サーバ側通信部２４およびインターネット回線１６を介して、サーバ１７からスマートフォン１５に送信する。
【００４１】
ステップ１０７において、サーバ１７からの３次元動画像データおよびテキストデータをスマートフォン１５の端末側通信部２７が受信する。
ステップ１０８において、受信したマーカ画像データおよびテキストデータを、いったん端末側記憶部２８に記憶する。
ステップ１０９において、その後、仮想物体重畳プログラム３３によって、端末側記憶部２８からマーカ画像データおよびテキストデータを取り出すとともに、３次元動画像データから得られた立体動画のクリョロフォサウルス１８と、テキストデータから得られた解説文２２とを、マーカ位置・方向検出プログラム３２が検出したＡＲマーカ１１の３次元位置および方向に基づき、ディスプレイ１４に表示された現実のカメラ画像中に重畳して画像表示する。この画像表示は、マーカ位置・方向検出プログラム３２を利用したラッキングにより、アプリケーションソフトウエア１９の作動中、継続される。
また、この拡張現実システム１０を停止したい場合には、ステップ１１０において、アプリケーションソフトウエアを停止する。
【００４２】
このように、例えば、小学生等が手に持って観察ができる実物のアンモナイト２１が付いた撮影対象物１２と、拡張現実を利用して、この撮影対象物１２が映ったディスプレイ１４の画面上に、バーチャルなクリョロフォサウルス１８の立体動画を重畳することにより、アンモナイト２１やクリョロフォサウルス１８、その他、これらが生息していた時代（ジュラ紀）について学びたい人に対して、学習の支援を行うことができる。
また、撮影対象物１２とクリョロフォサウルス１８とがディスプレイ１４に重畳された映像を、スマートフォン１５のカメラ機能を利用して撮影（動画撮影また静止画撮影）することにより、それを画像データとして端末側記憶部２８に保存したり、それをＳＮＳ（Ｓｏｃｉａｌ  Ｎｅｔｗｏｒｋｉｎｇ  Ｓｅｒｖｉｃｅ）を利用して、インターネット上に発信・共有・拡散することもできる。
【００４３】
さらに、ここではＡＲマーカ１１として基台２０そのもの（立体マーカ）を採用したため、専用のＡＲマーカ１１を作製する必要がない。
さらにまた、３次元画像データとして動画像データを採用したため、クリョロフォサウルス１８のリアリティが高まるとともに、クリョロフォサウルス１８を利用してさらにインパクトのある演出を行うことができる。
また、この３次元動画像データにテキストデータを付加したため、ディスプレイ１４の画面に、クリョロフォサウルス１８についての解説文２２を表示することができ、これにより恐竜についての理解をさらに深めることができる。
【００４４】
次に、図６〜図９を参照して、本考案の実施例２に係る拡張現実システムについて説明する。
図６〜図８に示すように、実施例２の拡張現実システム１０Ａは、実施例１のものとは異なる、以下の３つの構成要件を特徴としている。
第１の構成要件の特徴は、アンモナイト２１付きの撮影対象物１２に代えて、ＡＲマーカ１１を有する縦長な矩形容器状の基台２０Ａに、隕石（立体標本を含む天然オブジェ）２１Ａがねじ止めされた撮影対象物１２Ａを採用した点である。
【００４５】
また、第２の構成要件の特徴は、サーバ１７として、サーバ側記憶部２３に、太陽系の惑星群（仮想物体）１８Ａに関する３次元動画像データ（３次元画像データ）と、隕石２１Ａや太陽系の惑星群（太陽系の惑星群を含む星）１８Ａの星々についての解説文２２Ａのテキストデータとが記憶されたものを採用した点である。
さらに、第３の構成要件の特徴は、アプリケーションソフトウエアとして、サーバ側記憶部２３に記憶された、これらの太陽系の惑星群１８Ａの３次元動画像データと解説文２２Ａのテキストデータとを、スマートフォン１５のディスプレイ１４に表示させるとともに、ディスプレイ１４の画面上に、太陽系の惑星群１８Ａ等が表示されるにあたって、バイブレータ５１によりスマートフォン１５を振動させる演出を行う端末振動プログラム５２と、スピーカ５０から音を発生させる演出を行う音発生プログラム５３とを含むアプリケーションソフトウエア１９Ａを採用した点である。
【００４６】
次に、図９のフローシートを参照して、本考案の実施例２に係る拡張現実システムを利用して行う、隕石２１Ａや太陽系の惑星群１８Ａを学びたい人への学習支援方法を説明する。
まず、アプリケーションソフトウエア１９Ａの起動する（Ｓ１００）。
その後、データ要求プログラム３１により、サーバ側記憶部２３に記憶された太陽系の惑星群１８Ａの３次元動画像データと解説文２２Ａのテキストデータとを、インターネット回線１６を介して、スマートフォン１５に送信する（Ｓ１０３〜Ｓ１０６）。
次いで、太陽系の惑星群１８Ａと解説文２２Ａとをディスプレイ１４に画像表示する（Ｓ１０９Ａ）。
このとき、端末振動プログラム５２によりバイブレータ５１を作動させ、スマートフォン１５を予め設定されたリズムにより振動させる。さらには、この振動と同時または所定の時間差をつけて、音発生プログラム５３により、スピーカ５０から幻想的なクラシック音楽（音）を所定時間だけ発生させる。
このように、隕石２１Ａが付いた撮影対象物１２Ａが表示されたディスプレイ１４の画面上に、バーチャルの太陽系の惑星群１８Ａを重畳する際に、所定の音と振動とを発生させることにより、太陽系の惑星群１８Ａの出現時の演出効果を高めることができる。
その他の構成、作用および効果は、実施例１から推測可能な範囲であるため、説明を省略する。
【００４７】
次に、図１０を参照して、本考案の実施例３に係る拡張現実システムについて説明する。
図１０に示すように、この実施例３の拡張現実システム１０Ｂは、撮影対象物１２Ｂの天然オブジェとして花束６０を採用した点と、基台として花束６０を包む包装シート６１を採用した点と、ＡＲマーカとして、包装シート６１に貼着されるマーカーシール６２を採用した点とを特徴としている。
【００４８】
花束６０は結婚式用のもので、包装シート６１は透明なポリプロピレン製である。
マーカーシール６２は、湾曲自在で裏面が貼着面となった円形シール６３の表面に、図形的なマークであるＡＲマーカ１１が印刷されたものである。
使用に際しては、まず花束６０を包装シート６１によりコーン状にラッピングし、包装シート６１の一部にマーカーシール６２を貼着する。その後、結婚式で新婚の夫婦に贈られた花束６０を、アプリケーションソフトウエアを起動したスマートフォン１５のカメラ１３で動画撮影する。これにより、ディスプレイ１４の画面を通して、花束６０の上方に、ハート形フレーム（仮想物体）６５の立体静止画を重畳的に表示することができる。その結果、従来のような花束にメッセージカードを付ける場合に比べて、インパクトのある演出効果が得られる。
【００４９】
また、図１０の部分拡大図（ａ）に示すように、別のマーカーシール６２Ａとして、湾曲自在で裏面が貼着面となったプラスチック製の円形シール（基材シール）６３Ａと、これと同一直径で、表面にＡＲマーカ１１が印刷された薄肉で平坦な円形のプラスチック板（マーカー表示板）６４とを、互いの中央部６２ａのみで融着（接着でも可能）したものを採用してもよい。
使用時、マーカーシール６２Ａを、コーン状に湾曲する包装シート６１の前面に貼着すれば、円形シール６３Ａは包装シート６１の曲がりや折れに合わせて変形するものの、円形シール６３Ａと中央部６２ａ同士が融着した平坦な円形のプラスチック板６４は、この平坦な状態を維持したまま前方へ突出する（図１０の部分拡大図（ｂ）を参照）。そのため、スマートフォン１５のカメラ１３によりＡＲマーカ１１付きの撮影対象物１２Ｂを撮像して、ＡＲマーカ検出プログラム３０によりＡＲマーカ１１を検索するとき、例えば湾曲自在な円形シール６３の表面にＡＲマーカ１１を直接印刷したものに比べて、ＡＲマーカ１１の認識率（検出率）が高まる。
その他の構成、作用および効果は、実施例１および実施例２から推測可能な範囲であるため、説明を省略する。
【産業上の利用可能性】
【００５０】
この考案は、実空間に仮想物体を重畳させる拡張現実の技術を利用した拡張現実の技術として有用である。
【符号の説明】
【００５１】
１０，１０Ａ，１０Ｂ  拡張現実システム
１１  ＡＲマーカ
１２，１２Ａ，１２Ｂ  撮影対象物
１３  カメラ
１４  ディスプレイ
１５  スマートフォン（携帯端末）
１６  インターネット回線
１７  サーバ
１８  恐竜（仮想物体）
１８Ａ  太陽系の惑星群（仮想物体）
１９，１９Ａ  アプリケーションソフトウェア
２０，２０Ａ  基台
２１  アンモナイト（化石、立体標本を含む天然オブジェ）
２１Ａ  隕石（立体標本を含む天然オブジェ）
２２  解説文
２３  サーバ側記憶部
２４  サーバ側通信部
２７  端末側通信部
３０  マーカ検出プログラム
３１  データ要求プログラム
３２  マーカ位置・方向検出プログラム
３３  仮想物体重畳プログラム
５０  スピーカ
５１  バイブレータ
５２  端末振動プログラム
５３  音発生プログラム
６０  花束（立体標本を含む天然オブジェ）
６１  包装シート（基台）
６２，６２Ａ  マーカーシール
６３Ａ  円形シール（基材シール）
６４  プラスチック板（マーカ表示板）
【図１】
0003221378.tif 000003
【図２】
0003221378.tif 000004
【図３】
0003221378.tif 000005
【図４】
0003221378.tif 000006
【図５】
0003221378.tif 000007
【図６】
0003221378.tif 000008
【図７】
0003221378.tif 000009
【図８】
0003221378.tif 000010
【図９】
0003221378.tif 000011
【図１０】
0003221378.tif 000012