(57)【要約】【課題】  電波が届かない環境下であっても適用させることができるＡＲシステムを提供する。【解決手段】  撮影装置３２と、表示部３４とを具備する携帯通信機器３０に、１又は複数のＡＲマーカをあらかじめ記憶しているＡＲマーカ記憶装置３６と、記憶されているＡＲマーカと対応づけされた表示用データが記憶されている表示用データ記憶装置３７と、撮影された画像にＡＲマーカ記憶装置３６に記憶されているＡＲマーカが含まれているか否か識別し、撮影された画像にＡＲマーカが含まれていると識別した場合に、ＡＲマーカに対応する表示用データを表示用データ記憶装置３７から取り出して表示部３４に表示させる制御部３８とを備える。【選択図】        図２
2017191245.tif 000002
【特許請求の範囲】
【請求項１】
撮影装置と、撮影装置と連動して画像を表示する表示部とを具備する携帯通信機器に、
１又は複数のＡＲマーカをあらかじめ記憶しているＡＲマーカ記憶装置と、
ＡＲマーカ記憶装置に記憶されているＡＲマーカと対応づけされた表示用データが記憶されている表示用データ記憶装置と、
撮影された画像に前記ＡＲマーカ記憶装置に記憶されているＡＲマーカが含まれているか否かを判断し、撮影された画像に前記ＡＲマーカ記憶装置に記憶されているＡＲマーカが含まれていると判断した場合には、ＡＲマーカに対応する表示用データを表示用データ記憶装置から取り出して前記表示部に表示させるように制御する制御部とを備えることを特徴とするＡＲシステム。
【請求項２】
前記表示用データは、画像データ及び音声データの組み合わせであることを特徴とする請求項１記載のＡＲシステム。
【請求項３】
前記ＡＲマーカはシールであることを特徴とする請求項１又は請求項２記載のＡＲシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＡＲマーカを使用したＡＲシステムに関する。
【背景技術】
【０００２】
ＡＲ（Augmented Reality）マーカを利用した拡張現実システム（本明細書中ではＡＲシステムと称する）が近年よく用いられている。
ＡＲシステムは、例えばスマートフォン、タブレットＰＣなどの携帯通信機器にあらかじめＡＲマーカを認識可能なアプリケーションソフトをインストールしておき、また拡張させるデータを携帯通信機器とデータ通信可能なサーバに記憶させておく。
【０００３】
携帯通信機器で、ＡＲマーカを含む箇所を撮影すると、ＡＲマーカを認識可能なアプリケーションソフトがＡＲマーカを認識する。認識されたＡＲマーカの種類に応じて、アプリケーションソフトは、サーバから必要なデータを受信する。
サーバから受信したデータは、携帯通信機器において、現実の撮影画像中の画像に重ねあわせて表示される（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−１４１７７９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
従来のＡＲシステムによれば、携帯通信機器は撮影されたＡＲマーカの種類を認識し、ＡＲマーカの種類に基づいてサーバから必要なデータを受け取って表示させるようにしている。
しかし、例えば携帯通信機器の電波が届かない場所では、データをサーバから受け取ることができず、画像を重ねあわせて表示できないという課題がある。
【０００６】
そこで、本発明は上記課題を解決すべくなされ、その目的とするところは、で電波が届かない環境下であっても適用させることができるＡＲシステムを提供することにある。
【課題を解決するための手段】
【０００７】
本発明にかかるＡＲシステムによれば、撮影装置と、撮影装置と連動して画像を表示する表示部とを具備する携帯通信機器に、１又は複数のＡＲマーカをあらかじめ記憶しているＡＲマーカ記憶装置と、ＡＲマーカ記憶装置に記憶されているＡＲマーカと対応づけされた表示用データが記憶されている表示用データ記憶装置と、撮影された画像に前記ＡＲマーカ記憶装置に記憶されているＡＲマーカが含まれているか否かを判断し、撮影された画像にＡＲマーカが含まれていると判断した場合に、ＡＲマーカに対応する表示用データを表示用データ記憶装置から取り出して前記表示部に表示させる制御部とを備えることを特徴としている。
この構成を採用することによって、あらかじめ携帯通信機器にＡＲマーカと表示用データを対応づけて記憶させておくので、電波が届かない環境であってもＡＲマーカを認識すれば表示部に表示用データを表示させることができる。
【０００８】
また、前記表示用データは、画像データ及び音声データの組み合わせであることを特徴としてもよい。
【０００９】
また、前記ＡＲマーカはシールであることを特徴としてもよい。
この構成によれば、あらかじめ必要と思われる箇所又は場所にＡＲマーカのシール貼っておけばよい。
【発明の効果】
【００１０】
本発明によれば、電波が届かない場所でも画像を重ねあわせて表示できる。
【図面の簡単な説明】
【００１１】
【図１】ＡＲシステムの全体構成を示す説明図である。
【図２】携帯通信機器の内部構成を示すブロック図である。
【図３】ＡＲシステムの動作を説明するフローチャートである。
【発明を実施するための形態】
【００１２】
本実施形態のＡＲシステムについて図面に基づいて説明する。
図１には、システム全体の概要について示す。
本実施形態のＡＲシステム２０は、携帯通信機器３０と、所定の場所に貼り付けられたＡＲマーカ１０とを有している。本実施形態のＡＲシステム２０としては、携帯通信機器３０とデータ通信可能なサーバは備えていなくてもよい。また、本実施形態のＡＲシステム２０においては、サーバを備えていてもよいが、必ずしもサーバと通信できなくても運用できる点が従来と異なっている。
【００１３】
また、図１ではＡＲマーカ１０の例として単にＭの字が記載されたものを図示しているが、通常は種々の図形などが考えられる。
例を挙げると、例えば何らのイベントの告知に用いるのであれば当該イベントのマスコットキャラクター、宗教の情報提供であれば当該宗教のシンボルマーク、災害時の避難経路提示であれば災害に関するマーク、ハラール認証に関する情報提供であればハラール認証マークなど、目的・用途に合わせて様々な図形を採用できる。
【００１４】
携帯通信機器３０は、スマートフォン、タブレットＰＣ、ウェアラブル端末、デジタルカメラなどを採用することができる。ＡＲシステム２０を構成するための携帯通信機器３０としては、カメラ等の撮影装置３２と、撮影装置３２によって撮影されている画像を表示する表示部３４とが設けられていればよい。したがって、本願の携帯通信機器３０としては、デジタルカメラも含まれるものであるとする。表示部３４としては液晶モニタを例として挙げることができ、さらにタッチパネル方式の液晶モニタを採用してもよい。
【００１５】
図２に、携帯通信機器の内部構成のブロック図を示す。
携帯通信機器３０は、撮影装置３２と、表示部３４とを備えることは上記のとおりである。そのほか、携帯通信機器３０は、１又は複数のＡＲマーカをあらかじめ記憶しているＡＲマーカ記憶装置３６と、１又は複数の表示用データをあらかじめ記憶している表示用データ記憶装置３７とを備えている。
ＡＲマーカ記憶装置３６に記憶されているＡＲマーカと、表示用データ記憶装置３７に記憶されている表示用データは、互いに対応付けされている。
【００１６】
なお、ＡＲマーカ記憶装置３６と表示用データ記憶装置３７は、物理的に別の記憶装置として設けられていなくてもよく、物理的に１つの記憶装置に対して、ＡＲマーカとＡＲマーカに対応づけされた表示用データとが記憶されていてもよい。
記憶装置としては、ＲＯＭやＲＡＭなどの半導体メモリなどを採用できる。
【００１７】
撮影装置３２は、レンズと、ＣＣＤイメージセンサ又はＣ−ＭＯＳイメージセンサなどの撮像素子とが用いられている。ＣＣＤイメージセンサ又はＣ−ＭＯＳイメージセンサなどの撮像素子に入射した撮影対象は、画像データとして出力される。
撮影装置３２から出力される画像データは、表示部３４に入力されて表示される。
【００１８】
携帯通信機器３０は、さらにＣＰＵなどの半導体演算処理装置からなる制御部３８を備えている。制御部３８は、携帯通信機器３０全体の動作制御を実行するとともに、ＡＲシステムの動作制御を実行する。
制御部３８は所定のプログラムを読み込むことによって、所定の動作制御を実行することができる。ここで、携帯通信機器３０をスマートフォン又はタブレットＰＣであるとすると、このプログラムがいわゆるＡＲシステムのアプリ（アプリケーションソフトウェア）である。
【００１９】
携帯通信機器３０は、操作者が何らかの情報を入力できる入力部４０を有しているが、表示部３４がタッチパネル方式の場合、表示部３４と入力部４０が兼用することもできる。
【００２０】
また、携帯通信機器３０は、画像を表示する表示部３４のほかに音声出力可能な音声出力部４２を有している。
音声出力部４２は、スピーカであってもよいし、イヤホン端子（ヘッドホン端子）であってもよい。
【００２１】
表示用データとしては、画像データだけでなく、画像データと音声データとの組み合わせ、及び音声データのみの場合も含めるものとする。
【００２２】
次に、図３に基づいて本実施形態のＡＲシステムの動作について説明する。
操作者は、携帯通信機器３０のＡＲシステムのアプリを起動し、任意の箇所に撮影装置３２を向ける。
撮影装置３２のイメージセンサに入射している撮影対象は、撮影装置３２がシャッターを切らなくても画像データとして制御部３８と表示部３４に入力される（ステップＳ１００）。
【００２３】
制御部３８では、入力されてくる画像データに、ＡＲマーカ記憶装置３６に記憶されているＡＲマーカが含まれているか否かを判断する（ステップＳ１０２）。本実施形態では、例としてＡＲマーカ記憶装置３６には、３つのＡＲマーカが記憶されているので、制御部３８は入力されてくる画像データに３つのＡＲマーカのうちのいずれかが含まれているかどうかを判断する。
【００２４】
撮影装置３２によって撮影された画像データにＡＲマーカが含まれていると制御部３８が判断した場合、制御部３８は、該当するＡＲマーカに対応づけされた表示用データを表示用データ記憶装置３７から抽出する（ステップＳ１０４）。
なお、ここでの表示用データとしては、画像データ及び音声データを組み合わせたものであるとする。また、画像データは動画であっても静止画であってもよいが、ＡＲシステムとしては動画の方が一般的である。
【００２５】
制御部３８が抽出した表示用データは、画像データが表示部３４に入力されて表示され、音声データが音声出力部４２から音声出力される（ステップＳ１０６）。
画像データと音声データとの組み合わせの例としては、アニメーションなどがあげられる。この場合、ＡＲマーカを取り付ける例として、書店においてビニールが被せられて立ち読みができない状態で陳列された漫画のビニール表面に取り付けるようにすればよい。表示用データとして、当該漫画をアニメーション化した内容にすることによって、立ち読みができない状態であっても漫画の内容を確認できるので、消費者の購買意欲を惹起することができる。
【００２６】
表示部３４における表示用データの表示は、撮影装置３２で撮影している画像データの表示に重ねあわせて表示させることができる。
【００２７】
また、本実施形態のように、あらかじめ複数のＡＲマーカに対する表示用データを携帯通信機器３０内に記憶させておくことで、データ通信できない環境下においても表示用データを表示可能である。
このため、特に災害時に中継基地の被害で電波が届かない場合、又は電波が届かない地下等に閉じ込められた場合など、避難経路を提示する表示用データとすればよい。避難経路を提示する表示用データとすることで、災害時には確実に避難することができる。特に都会の地下街などで災害に遭遇した場合には、避難経路の表示がきわめて役立つと考えられる。
【００２８】
なお、表示用データとしては、上記の実施形態のように画像データと音声データの組み合わせに限定するものではなく、画像データのみであってもよい。
【符号の説明】
【００２９】
１０    ＡＲマーカ
２０    ＡＲシステム
３０    携帯通信機器
３２    撮影装置
３４    表示部
３６    ＡＲマーカ記憶装置
３７    表示用データ記憶装置
３８    制御部
４０    入力部
４２    音声出力部
【図１】
2017191245.tif 000003
【図２】
2017191245.tif 000004
【図３】
2017191245.tif 000005