(57)【要約】【課題】自然物名データや建造物名データ等の各種のデータを予め記憶部に記憶させておく必要がなく、簡単に実景色と自然物や建造物に関する情報とを対応させることができる情報表示装置を提供する。【解決手段】半透過処理部５２は、自然物または建造物の位置に対応して前記自然物または前記建造物に関する情報が記載された案内物の撮影画像を半透過処理して半透過画像を生成する。表示部４に実景色の撮影画像及び半透過画像を表示させ、実景色の撮影画像と半透過画像との対応関係を固定させる指示がなされたら対応関係の固定位置を記憶させる。制御部１は、センサ３によって情報表示装置１０が移動したことが検出されたら、移動に伴って変化する表示部４に表示される実景色の撮影画像と対応させるように、固定位置を基準として表示部４に表示させる半透過画像の部分を移動させる。【選択図】図１
2013214022.tif 000002
【特許請求の範囲】
【請求項１】
撮像部と、
装置の移動の方向及び移動の大きさを検出するセンサと、
前記撮像部によって撮影している実景色の撮影画像を表示する表示部と、
前記撮像部によって撮影した、自然物または建造物の位置に対応して前記自然物または前記建造物に関するする情報が記載された案内物の撮影画像を半透過処理して半透過画像を生成する半透過処理部と、
前記表示部に前記実景色の撮影画像及び前記半透過画像を表示させ、前記実景色の撮影画像と前記半透過画像との対応関係を固定させる指示がなされたら対応関係の固定位置を記憶させると共に、前記センサによって前記装置が移動したことが検出されたら、前記装置の移動に伴って変化する前記表示部に表示される前記実景色の撮影画像と対応させるように、前記固定位置を基準として前記表示部に表示させる前記半透過画像の部分を移動させるよう制御する制御部と、
を備えることを特徴とする情報表示装置。
【請求項２】
前記対応関係の固定位置を記憶させる際に、前記撮像部によって撮影した前記案内物の撮影画像の歪みを補正する第１の歪み補正部をさらに備えることを特徴とする請求項１記載の情報表示装置。
【請求項３】
前記対応関係の固定位置を記憶させる際に、前記表示部に表示する前記半透過画像を拡大または縮小する拡大縮小部をさらに備えることを特徴とする請求項１または２に記載の情報表示装置。
【請求項４】
前記対応関係の固定位置を記憶させた後、前記センサによって前記装置が移動したことが検出された際に、前記表示部に表示される前記実景色の撮影画像と前記表示部に表示させる前記半透過画像とのずれを少なくするように前記移動の方向または移動の大きさに対応付けて前記半透過画像を補正する第２の歪み補正部をさらに備えることを特徴とする請求項１〜３のいずれか１項に記載の情報表示装置。
【請求項５】
撮像部によって自然物または建造物の位置に対応して前記自然物または前記建造物に関するする情報が記載された案内物を撮影し、
前記案内情報を撮影した撮影画像を半透過処理して半透過画像を生成し、
前記撮像部によって前記案内物が案内する前記自然物または前記建造物を含む景色に対応した実景色を撮影し、
表示部に前記実景色の撮影画像及び前記半透過画像を表示させ、
前記実景色の撮影画像と前記半透過画像との対応関係を固定させる指示がなされたら対応関係の固定位置を記憶させ、
センサによって装置の移動の方向及び移動の大きさを検出し、
前記センサによって前記装置が移動したことが検出されたら、前記装置の移動に伴って変化する前記表示部に表示される前記実景色の撮影画像と対応させるように、前記固定位置を基準として前記表示部に表示させる前記半透過画像を移動させる
ことを特徴とする情報表示方法。
【請求項６】
コンピュータに、
シャッタボタンが押下されたら、撮像部によって被写体を撮影させるステップと、
自然物または建造物の位置に対応して前記自然物または前記建造物に関するする情報が記載された案内物を撮影する案内物撮影モードに設定されているとき、前記被写体として撮影した前記案内情報の撮影画像を半透過処理して半透過画像を生成するステップと、
前記半透過画像を、実景色を撮影した撮影画像に重ね合わせる実景色重ね合わせモードに設定されているとき、表示部に前記実景色の撮影画像及び前記半透過画像を表示させるステップと、
前記実景色の撮影画像と前記半透過画像との対応関係を固定させる指示がなされたら対応関係の固定位置を記憶させるステップと、
センサによって装置の移動の方向及び移動の大きさを検出するステップと、
前記センサによって前記装置が移動したことが検出されたら、前記装置の移動に伴って変化する前記表示部に表示される前記実景色の撮影画像と対応させるように、前記固定位置を基準として前記表示部に表示させる前記半透過画像の部分を移動させるステップと、
を実行させることを特徴とする情報表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、山や建物等の観光地の風景を見る際に好適な情報表示装置、情報表示方法、情報表示プログラムに関する。
【背景技術】
【０００２】
観光地において、複数の山を含む自然の景色や複数の建物を含む景色を眺めることがある。このような場合、山や建物の名前が分からない場合がある。特許文献１には、山等の自然物名データや建造物名データ等を撮影装置内の記憶部に記憶しておき、自然物や建造物を撮影する際に、それらのデータを読み出して撮影画像に重畳することが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１２２１８８号公報
【特許文献２】特開２０００５−１０２２６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載の技術では、自然物名データや建造物名データ等の各種のデータを記憶部に記憶しておかなければならない。そのようなデータが存在しない場合には何も表示させることができない。そこで、記憶部に予め自然物名データや建造物名データ等の各種のデータを記憶させておく必要がなく、簡単に自然物や建造物に関する情報と実景色とを対応させることができる技術が求められている。
【０００５】
本発明はこのような要望に対応するため、自然物名データや建造物名データ等の各種のデータを予め記憶部に記憶させておく必要がなく、簡単に実景色と自然物や建造物に関する情報とを対応させることができる情報表示装置、情報表示方法、情報表示プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明は、上述した従来の技術の課題を解決するため、撮像部（２）と、装置（１０）の移動の方向及び移動の大きさを検出するセンサ（３）と、前記撮像部によって撮影している実景色の撮影画像を表示する表示部（４）と、前記撮像部によって撮影した自然物または建造物の位置に対応して前記自然物または建造物に関する情報を記載した案内物の撮影画像を半透過処理して半透過画像を生成する半透過処理部（５２）と、前記表示部に前記実景色の撮影画像及び前記半透過画像を表示させ、前記実景色の撮影画像と前記半透過画像との対応関係を固定させる指示がなされたら対応関係の固定位置を記憶させると共に、前記センサによって前記装置が移動したことが検出されたら、前記装置の移動に伴って変化する前記表示部に表示される前記実景色の撮影画像と対応させるように、前記固定位置を基準として前記表示部に表示させる前記半透過画像の部分を移動させるよう制御する制御部（１）とを備えることを特徴とする情報表示装置（１０）を提供する。
【０００７】
上記の情報表示装置において、前記対応関係の固定位置を記憶させる際に、前記撮像部によって撮影した前記案内物の撮影画像の歪みを補正する第１の歪み補正部（５１）をさらに備えることが好ましい。
【０００８】
上記の情報表示装置において、前記対応関係の固定位置を記憶させる際に、前記表示部に表示する前記半透過画像を拡大または縮小する拡大縮小部（５３）をさらに備えることが好ましい。
【０００９】
上記の情報表示装置において、前記対応関係の固定位置を記憶させた後、前記センサによって前記装置が移動したことが検出された際に、前記表示部に表示される前記実景色の撮影画像と前記表示部に表示させる前記半透過画像とのずれを少なくするように前記移動の方向または移動の大きさに対応付けて前記半透過画像を補正する第２の歪み補正部（５１）をさらに備えることが好ましい。
【００１０】
また、本発明は、上述した従来の技術の課題を解決するため、撮像部によって自然物または建造物の位置に対応して自然物または建造物に関する情報を記載した案内物を撮影し、前記案内物を撮影した撮影画像を半透過処理して半透過画像を生成し、前記撮像部によって前記案内物が案内する自然物または建造物を含む景色に対応した実景色を撮影し、表示部に前記実景色の撮影画像及び前記半透過画像を表示させ、前記実景色の撮影画像と前記半透過画像との対応関係を固定させる指示がなされたら対応関係の固定位置を記憶させ、センサによって装置の移動の方向及び移動の大きさを検出し、前記センサによって前記装置が移動したことが検出されたら、前記装置の移動に伴って変化する前記表示部に表示される前記実景色の撮影画像と対応させるように、前記固定位置を基準として前記表示部に表示させる前記半透過画像の部分を移動させることを特徴とする情報表示方法を提供する。
【００１１】
さらに、本発明は、上述した従来の技術の課題を解決するため、コンピュータに、シャッタボタンが押下されたら、撮像部によって被写体を撮影させるステップと、自然物名または建造物名を含む案内物を撮影する案内物撮影モードに設定されているとき、前記被写体として撮影した前記案内物の撮影画像を半透過処理して半透過画像を生成するステップと、前記半透過画像を、実景色を撮影した撮影画像に重ね合わせる実景色重ね合わせモードに設定されているとき、表示部に前記実景色の撮影画像及び前記半透過画像の一部を表示させるステップと、前記実景色の撮影画像と前記半透過画像の一部との対応関係を固定させる指示がなされたら対応関係の固定位置を記憶させるステップと、センサによって装置の移動の方向及び移動の大きさを検出するステップと、前記センサによって前記装置が移動したことが検出されたら、前記装置の移動に伴って変化する前記表示部に表示される前記実景色の撮影画像と対応させるように、前記固定位置を基準として前記表示部に表示させる前記半透過画像の部分を移動させるステップとを実行させることを特徴とする情報表示プログラムを提供する。
【発明の効果】
【００１２】
本発明の情報表示装置、情報表示方法、情報表示プログラムによれば、自然物名データや建造物名データ等の各種の案内情報を予め記憶部に記憶させておく必要がなく、簡単に実景色と案内情報とを対応させることができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の情報表示装置の一実施形態を示すブロック図である。
【図２】観光案内板の一例を示す斜視図である。
【図３】一実施形態における案内板撮影モードにおける処理を示すフローチャートである。
【図４】一実施形態における実景色重ね合わせモードにおける処理を示すフローチャートである。
【図５】観光案内板を撮影した撮影画像と画面に表示される表示範囲との対応関係の例を示す図である。
【図６】実景色と観光案内板を撮影した撮影画像とを重ね合わせた状態の例を示す図である。
【発明を実施するための形態】
【００１４】
以下、本発明の情報表示装置、情報表示方法、情報表示プログラムの一実施形態について、添付図面を参照して説明する。本実施形態の情報表示装置１０は、一例として、いわゆるデジタルスチルカメラのような撮影装置である。図１において、制御部１は情報表示装置１０内の各部を制御している。撮像部２は、ズームレンズと、ＣＣＤまたはＣＭＯＳよりなる撮像素子とを有する。制御部１は、ズームレンズを制御し、被写体を広角または望遠で撮像するよう撮像部２を制御する。撮像部２の撮像素子より出力された撮像信号は撮像部２内でデジタル信号に変換され、各種の信号処理が施されて画像データとして制御部１へと入力される。
【００１５】
センサ３は例えば加速度センサやジャイロセンサを含み、センサ３からのセンサデータは制御部１に入力される。センサ３は、情報表示装置１０内の移動の方向及び大きさを検出する。表示部４は、例えば情報表示装置１０の背面に配置された液晶パネルであり、制御部１による制御に基づいて、撮像部２で被写体を撮影した画像信号が表示される。制御部１には画像処理部５が接続されている。画像処理部５は、歪み補正部５１と半透過処理部５２と拡大縮小部５３とを有する。画像処理部５は、制御部１による制御に基づいて、撮像部２からの画像データに対して後述するような画像処理を施す。
【００１６】
制御部１には、各種の操作を行う操作ボタンを有する入力部６と、種々のデータを記憶する記憶部７とが接続されている。
【００１７】
観光地には、図２に示すような観光案内板５０が設置されていることが多い。図２に示す観光案内板５０は一例として複数の山を含む自然の景色の自然物名を案内する看板である。図２に示す例では、景色を撮影した写真または景色を描いた絵に、○○山，△○山，○×岳，△△高原，○△湖と名前が記載されている。複数の建物を含む景色の建造物名を案内する看板であってもよい。本実施形態においては、案内物の一例として、このような観光案内板５０を撮影することによって以下のように実際の景色と自然物や建造物の名前とを対応させることとする。
【００１８】
なお、ここでは、自然物や建造物の名前としているが、自然物や建造物に関する案内情報であれば、厳密に名前でなくともよく、例えば、山の標高や、ビルを所有する会社のロゴなど、文字や記号や絵などで表された情報であってもよい。
【００１９】
情報表示装置１０は、観光案内板５０を撮影する際の案内板撮影モードと、撮影した観光案内板５０の画像データを用いながら景色を眺めるための実景色重ね合わせモードとを有する。まず、図３を用いて案内板撮影モードにおける動作について説明する。入力部６による所定の操作によって案内板撮影モードに移行する指示がなされたら、制御部１は、ステップＳ１にて、案内板撮影モードに設定する。制御部１は、ステップＳ２にて、入力部６に含まれる操作ボタンの１つであるシャッタボタンが押下されたか否かを判定する。
【００２０】
ユーザは、図２に示すような観光案内板５０を撮影するためにシャッタボタンを押下する。なお、ユーザは、ズームを操作して、観光案内板５０の自然物名や建造物名が記載されている写真または絵のほぼ全体を撮影すればよい。すると、制御部１は、ステップＳ３にて、撮像部２を制御して被写体である観光案内板５０を撮影する。制御部１は、撮像部２から取り込んだ画像データを画像処理部５に入力する。制御部１は、ステップＳ４にて、歪み補正部５１（第１の歪補正部）によって撮影画像の画像データの歪みを補正させ、半透過処理部５２によって撮影画像に基づいて半透過画像を生成させる。
【００２１】
歪み補正部５１による歪み補正とは、台形歪み補正、樽形補正，レンズ収差補正等である。歪み補正部５１による歪み補正には、観光案内板５０の撮影画像を実景色重ね合わせモードにおいて実景色の撮影画像と重ね合わせる際に、実景色の撮影画像とよりよく一致させるための任意の補正が含まれる。歪みが許容範囲内であれば、歪み補正部５１による歪み補正は省略可能である。
【００２２】
制御部１は、ステップＳ５にて、半透過画像の画像データを取り込んで、表示部４に表示させる。制御部１は、ステップＳ６にて、実景色重ね合わせモードに移行する指示がなされたか否かを判定する。例えば表示部４の画面上に、“すぐ実景色重ね合わせモードに移行させますか”と表示させ、“はい”と“いいえ”の選択ボタンを表示させる。そして、入力部６に含まれるカーソルボタンによってどちらかを選択し、決定ボタンによって選択した一方を決定させる。“はい”が選択された場合（YES）には、制御部１は、ステップＳ７に移行させる。
【００２３】
“いいえ”が選択された場合（NO）には、制御部１は、ステップＳ８にて、半透過画像の画像データを記憶部７に記憶させて、案内板撮影モードを終了させる。ステップＳ６を省略し、ステップＳ５からステップＳ７へと自動的に移行させるようにしてもよい。ステップＳ８は、案内板撮影モードを終了させて、後に実景色重ね合わせモードに設定して、半透過画像の画像データを利用するために設けている。
【００２４】
図４を用いて、ステップＳ７の実景色重ね合わせモードにおける処理の詳細について説明する。まずユーザが、情報表示装置１０を観光案内板５０が案内する景色の写真または絵に対応する実景色に向けると、情報表示装置１０の表示部４には実景色の撮影画像を表示されることになる。ユーザは情報表示装置１０を動かしたり、自身が位置を移動したりして、表示部４に表示されている半透過画像の一部を実景色の撮影画像に位置合わせしておく。なお、半透過画像の全部を実景色の撮影画像に位置合わせしてもよい。
【００２５】
図４において、制御部１は、ステップＳ701にて、入力部６に含まれる拡大ボタンが押下されたか否かを判定する。拡大ボタンが押下されたら（YES）、制御部１は、ステップＳ702にて、拡大縮小部５３によって半透過画像を拡大させ、拡大ボタンが押下されなかったら（NO）、制御部１は、ステップＳ703にて、入力部６に含まれる縮小ボタンが押下されたか否かを判定する。縮小ボタンが押下されたら（YES）、制御部１は、ステップＳ704にて、拡大縮小部５３によって半透過画像を縮小させる。
【００２６】
ユーザは、表示部４に表示されている撮影した観光案内板５０に対応する実景色を見ながら、半透過画像を拡大または縮小し、実景色と半透過画像とを一致させる。完全に一致しないことがあるが、実景色と半透過画像とのずれが少なくなるように大方一致させれば本実施形態による目的を達成することは可能である。実景色と半透過画像とを一致させたら、ユーザは、入力部６に含まれる固定ボタンを押す。上記の決定ボタンを固定ボタンとしてもよい。
【００２７】
制御部１は、ステップＳ705にて、固定ボタンが押下されたか否かを判定する。固定ボタンが押下されなかったら（NO）、ステップＳ701に処理を戻し、ステップＳ701以降を繰り返す。固定ボタンが押下されたら（YES）、制御部１は、ステップＳ706にて、情報表示装置１０内の座標空間上で半透過画像の位置を固定し、座標空間に対する半透過画像の固定位置を制御部１または記憶部７に記憶させる。これによって、実景色の撮影画像と半透過画像の一部との対応関係が固定させることになる。座標空間において、対応関係を固定した位置を半透明画像の基準位置とする。
【００２８】
制御部１は、ステップＳ707にて、情報表示装置１０がパン（水平方向の移動）またはチルト（垂直方向の移動）されたか否かを判定する。制御部１は、センサ３からのセンサデータによって、情報表示装置１０のパンまたはチルトの方向及び大きさを算出することができる。パンまたはチルトされたら（YES）、制御部１は、ステップＳ708にて、半透過画像を、基準位置を記憶したときの情報表示装置１０の位置からのパンまたはチルトの方向及び大きさに対応させて移動させる。ユーザが立ち止まって情報表示装置１０を手に持ちパンまたはチルトさせた場合、情報表示装置１０はユーザの位置を中心として回転することになる。すると、半透明画像は、基準位置と座標空間において基準位置の周辺の位置である周辺位置とで撮影対象からの距離の違いによって歪みが生じる。従って、実景色と半透過画像とにずれが生じることになる。
【００２９】
そこで、制御部１は、ステップＳ709にて、実景色と半透過画像とのずれを解消するよう、歪み補正部５１（第２の歪み補正部）によって半透過画像の歪みを補正させる。ここでも、ずれを完全に解消させなくてもよく、ずれが少なくなるように補正すればよい。歪み補正部５１は、例えば水平方向の右側にパンした場合、表示する半透過画像を半透過画像の右側ほど小さくするように補正する。同様に、歪み補正部５１は、例えば水平方向の左側にパンした場合、半透過画像を半透過画像の左側ほど小さくするように補正する。本実施形態では、図３のステップＳ４における画像データの歪み補正と、図４のステップＳ709における半透過画像の歪み補正とをいずれも歪み補正部５１で行っているが、異なる歪み補正部で補正してもよい。
【００３０】
制御部１は、ステップＳ710にて、実景色重ね合わせモードを終了させる指示があるか否かを判定する。入力部６に含まれる所定のボタンの押下によって実景色重ね合わせモードを終了させることができる。ステップＳ707にてパンまたはチルトされなかった場合（NO）も、ステップＳ710に移行させる。実景色重ね合わせモードを終了させる指示があったら（YES）、制御部１は、実景色重ね合わせモードを終了させ、実景色重ね合わせモードを終了させる指示がなかったら（NO）、処理をステップＳ707に戻す。
【００３１】
なお、制御部１は、ステップＳ707にて、情報表示装置１０が「パンまたはチルトされたか」に加えて、「情報表示装置１０の撮影画像をズーム（拡大）またはワイド（縮小）されたか」を判定することもできる。撮影画像をズーム（拡大）またはワイド（縮小）された場合、例えば、制御部１は、ステップＳ708にて、実景色のズームまたはワイドに対応させて、半透過画像を拡大・縮小させる。
【００３２】
また、パンまたはチルトによって、半透明画像がないエリアに実景色の撮影画像が近づいた場合、「これより先に観光案内情報はありません」等の警告を出すようにしてもよい。なお、パンまたはチルトによって、実景色の撮影画像が半透明画像のないエリアに侵入した場合は、半透明画像が存在するエリアのみ半透明画像と実景色の撮影画像を重ねて表示し、半透明画像が存在しないエリアでは実景色の撮影画像のみを表示する。
【００３３】
さらにまた、「実景色重ね合わせモード」で表示部に半透明画像と実景色を重ねて表示しているときに、シャッタボタンが押下された場合、半透明画像を一緒に記録するか、実景色のみを記録するかを撮影後にユーザに選択させる選択部を備えてもよい。
【００３４】
図５は、案内板撮影モードにおいて観光案内板５０を撮影した撮影画像６０と、表示部４の画面に表示される表示範囲７０との対応関係の例を示している。表示部４の画面に表示される撮影画像６０は半透過画像であるが、図示の都合上、ここでは半透過としていない撮影画像６０を示している。
【００３５】
図６（Ａ），（Ｂ）は、情報表示装置１０によって実景色１００を撮影し、表示部４に表示される実景色１００の撮影画像と、図５の撮影画像６０の一部とを重ね合わせた状態の例を示している。図６（Ａ）に示すように、表示部４の画面には、実景色１００の一部が撮影画像として表示されており、この撮影画像に対応させるように、半透過画像である撮影画像６０が重畳されている。図６（Ｂ）は、図６（Ａ）の状態から右方向にパンした状態を示している。
【００３６】
このように、情報表示装置１０を移動させると、制御部１は、情報表示装置１０の移動に伴って変化する表示部４に表示される実景色の撮影画像と対応させるように、上記の固定位置を基準として表示部４に表示させる半透過画像の部分を移動させる。従って、ユーザは、情報表示装置１０の表示部４を介して実景色を眺めると、実景色に含まれている自然物や建造物の名前を容易に確認することができる。
【００３７】
本発明は以上説明した本実施形態に限定されることはなく、本発明の要旨を逸脱しない範囲において種々変更可能である。制御部１をマイクロコンピュータによって構成し、本実施形態をコンピュータプログラム（情報表示プログラム）によって実現することも可能である。この場合、記憶部７に情報表示プログラムを記憶させておき、制御部１が情報表示プログラムを実行させればよい。情報表示プログラムを記録媒体に記録して提供してもよいし、インターネット等の通信回線によって情報表示プログラムを提供してもよい。例えば、通信回線によって提供された情報表示プログラムを、カメラを有する携帯型装置にインストールすることで、カメラを有する携帯型装置で本実施形態が実施可能となる。
【００３８】
観光案内板５０が横長や縦長の形状で、一度に観光案内板５０の全体を撮影できないような場合には、観光案内板５０を複数回に分けて撮像し、画像処理部５において複数の撮影画像を合成していわゆるパノラマ画像を生成してもよい。パノラマ画像に基づいて半透過画像を生成すればよい。画像処理部５において観光案内板５０以外の不要部分を削除する等、付加的な画像処理を行ってもよい。また、案内物として、観光案内板５０ではなく、パンフレット、山岳誌、星座早見盤等を撮影してもよい。
【符号の説明】
【００３９】
１  制御部
２  撮像部
３  センサ
４  表示部
５  画像処理部
６  入力部
７  記憶部
１０  情報表示装置
５０  観光案内板
５１  歪み補正部（第１の歪み補正部，第２の歪み補正部）
５２  半透過処理部
５３  拡大縮小部
６０  撮影画像（半透過画像）
７０  表示範囲
１００  実景色
【図１】
2013214022.tif 000003
【図２】
2013214022.tif 000004
【図３】
2013214022.tif 000005
【図４】
2013214022.tif 000006
【図５】
2013214022.tif 000007
【図６】
2013214022.tif 000008