(57)【要約】【課題】  全天球画像に空間認識の基準となる注目物体が少ない、または存在しないような場合においては、ユーザーは全球面画像の空間的なイメージを把握することが難しい。【解決手段】  全天球画像を表示する表示手段と、前記全天球画像の表示中心が使用者の操作入力に応じて変更されるように、前記全天球画像の表示を制御する表示制御手段と、前記全天球画像の表示中心の位置を取得する取得手段と、を備え、前記取得手段は、前記表示中心が変更される前後の表示中心の位置を取得し、前記表示手段は、前記表示中心が変更される前後の表示中心の相対的な位置関係を示すガイドを表示することを特徴とする。【選択図】  図２
2015230625.tif 000002
【特許請求の範囲】
【請求項１】
全天球画像を表示する表示手段と、
前記全天球画像の表示中心がユーザーの操作入力に応じて変更されるように、前記全天球画像の表示を制御する表示制御手段と、
前記全天球画像の表示中心の位置を取得する取得手段と、を備え、
前記取得手段は、前記表示中心が変更される前後の表示中心の位置を取得し、
前記表示手段は、前記表示中心が変更される前後の表示中心の相対的な位置関係を示すガイドを表示することを特徴とする画像表示装置。
【請求項２】
表示中心が複数回変更された場合、
前記取得手段は、変更ごとに表示中心の位置を取得し、
前記表示手段は、変更ごとのガイドを表示することを特徴とする請求項１に記載の画像表示装置。
【請求項３】
前記表示手段は、前記全天球画像の全体を示す球体上に、前記ガイドを表示することを特徴とする請求項１または２に記載の画像表示装置。
【請求項４】
前記表示手段は、前記球体上に、前記表示中心が変更される前の前記表示中心の位置から表示中心が変更された後の表示中心の位置にむかう印を表示することで、前記ガイドを表示することを特徴とする請求項３に記載の画像表示装置。
【請求項５】
前記表示手段は、前記球体の手前側の半球と奥側の半球とで色を変えて、前記ガイドを表示することを特徴とすることを特徴とする請求項３または４に記載の画像表示装置。
【請求項６】
前記取得手段は、前記表示中心の変更途中に前記表示中心の位置を逐次的に取得し、
前記表示手段は、前記全天球画像の表示の変更にあわせて前記ガイドを表示することを特徴とする請求項１から５の何れか１項に記載の画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置に関し、特に全天球画像を表示する画像表示装置に関するものである。
【背景技術】
【０００２】
従来から、複数の広角レンズを用いて撮像した広角画像を合成することで全天球画像を取得する技術がある（特許文献１を参照）。
【０００３】
また、全天球画像を表示する際に、全天球画像に含まれる物体の位置関係を分かりやすく表示する技術が特許文献２によって開示されている。
【０００４】
特許文献２では、全球面画像に含まれる注目物体を抽出し、注目物体の全球面画像の中心からの距離に基づいて全球面画像と交わる方向に注目物体を立ちあげて配置し、３次元的に表示することで注目物体の位置関係を分かりやすくする。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１３−４５０８９号公報
【特許文献２】特開２０１１−５９８５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献２で開示された従来技術では、全天球画像に空間認識の基準となる注目物体が少ない、または存在しないような場合においては、ユーザーは全球面画像の空間的なイメージを把握しにくいという問題がある。
【０００７】
そこで、本発明の目的は、ユーザーが全天球画像の空間的なイメージを容易に把握できるように全天球画像を表示する表示装置を提供することである。
【課題を解決するための手段】
【０００８】
本発明の１実施態様によれば、全天球画像を表示する表示手段と、前記全天球画像の表示中心が使用者の操作入力に応じて変更されるように、前記全天球画像の表示を制御する表示制御手段と、前記全天球画像の表示中心の位置を取得する取得手段と、を備え、前記取得手段は、前記表示中心が変更される前後の表示中心の位置を取得し、前記表示手段は、前記表示中心が変更される前後の表示中心の相対的な位置関係を示すガイドを表示する。
【発明の効果】
【０００９】
本発明によれば、ユーザーが全天球画像の空間的なイメージを容易に把握できるようにすることができる。
【図面の簡単な説明】
【００１０】
【図１】画像表示装置１００の構成を説明するブロック図である。
【図２】第１の実施形態におけるガイド画像を説明する図である。
【図３】第１の実施形態におけるガイド画像を表示するためのフロー図である。
【図４】第２の実施形態におけるガイド画像を説明する図である。
【図５】第２の実施形態におけるガイド画像を表示するためのフロー図である。
【図６】第３の実施形態におけるガイド画像を説明する図である。
【図７】第３の実施形態におけるガイド画像を表示するためのフロー図である。
【図８】第４の実施形態におけるガイド画像を説明する図である。
【図９】第４の実施形態におけるガイド画像を表示するためのフロー図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して、本発明の実施形態を詳細に説明する。本発明の実施形態にかかる画像処理装置は、全天球画像を撮影可能なカメラなどの撮影装置から取得した全天球画像を表示する画像表示装置である。なお、画像表示装置は、撮影装置に内蔵される表示装置であってもよく、撮影装置とは別の独立した表示装置であってもよい。
【００１２】
（第１の実施形態）
本発明の第１の実施形態にかかる画像表示装置を、図１から図３を用いて説明する。
【００１３】
図１は、画像表示装置の構成を説明するためのブロック図である。図１を用いて、画像表示装置１００の構成について説明する。
【００１４】
１０１は、全天球画像を撮像する撮像装置である。なお、撮像装置１０１に代えて、全天球画像を記録した記憶装置でもよい。１０２は、ユーザーによる操作入力を受け付ける操作入力部である。１０３は、全天球画像の表示領域の位置情報を取得する座標取得部である。１０４は、全天球画像の表示領域を制御する全天球画像表示制御部である。
【００１５】
１０５は、全天球画像の表示領域を示すガイド画像の表示を制御するガイド画像表示制御部である。なお、全天球画像表示制御部１０４とガイド画像表示制御部１０５を１つの画像表示制御部としても構成してもよい。１０６は、全天球画像とガイド画像を表示する表示部である。なお、表示部１０６は、全天球画像を表示する表示部とガイド画像を表示する表示部とが、別個独立した表示部であってもよい。
【００１６】
次に、画像表示装置１００における全天球画像の表示処理について説明する。
【００１７】
撮像装置１０１から画像表示装置１０１への全天球画像のデータ送信は、たとえばＷｉ−Ｆｉなどの無線通信で実行される。
【００１８】
操作入力部１０２は、例えばタッチパネル式のパネルインターフェースであり、ユーザーの指による操作入力を受け付ける。表示部１０６がタッチパネル式のディスプレイである場合には、表示部１０６が操作入力部としての機能も兼ねることができる。
【００１９】
座標取得部１０３は、操作入力部１０２からの操作入力に応じて、全天球画像の表示領域を示す代表的な位置情報を取得する。本実施形態では、表示部１０６に表示される全天球画像の表示中心の位置情報として、表示中心の座標を取得する。また、座標取得部１０３は、ユーザーの操作入力によって全天球画像の表示中心が変更された前後における、それぞれの表示中心の座標を取得する。または、全天球画像の表示中心の座標を所定の時間間隔で逐次的に取得する構成にしてもよい。
【００２０】
全天球画像表示制御部１０４は、操作入力部１０２のユーザーの操作入力に応じて、全天球画像の表示領域の制御を行う。ガイド画像表示制御部１０５は、座標取得部１０３で取得した全天球画像の表示中心の座標に応じて、ガイド画像の表示制御を行う。表示部１０６は、全天球画像表示制御部１０４で制御した全天球画像と、ガイド画像表示制御部１０５で制御したガイド画像を表示する。ガイド画像の表示については、後述する。
【００２１】
次に、図２を参照して、本実施形態における全天球画像とガイド画像の表示例を示す。ガイド画像は、全天球画像の表示領域の代表位置である表示中心を、全天球画像の全体を示す球体フレームに表示する。
【００２２】
２０１は、全天球画像の表示領域を変更する前のパネルインターフェースであり、ユーザーが全天球画像の表示領域を指で自由に操作することによって変更することができる。２０２は、全天球画像の表示領域を変更する前の全球面画像の表示中心である。
【００２３】
２０３は、全天球画像の表示領域を変更する前のガイド画面である。２０４は、全天球画像の表示領域の表示中心を示すための球体フレームである。２０５は、球体上において表示中心２０２に対応する位置を示すＳＴＡＲＴ位置である。
【００２４】
２０６は、全天球画像の表示領域を１回目に変更した際のパネルインターフェースである。２０７は、全天球画像の表示領域を１回目に変更した後の全天球画像の表示中心である。
【００２５】
２０８は、全天球画像の表示領域を１回目に変更した後のガイド画面である。２０９は、球体上において表示中心２０７に対応する位置を示すＣＵＲＲＥＮＴ位置である。２１０は、ＳＴＡＲＴ位置２０５からＣＵＲＲＥＮＴ位置２０９の軌跡を示す矢印である。
【００２６】
２１１は、全天球画像の表示領域を２回目に変更した際のパネルインターフェースである。２１２は、全天球画像の表示領域を２回目に変更した後の全天球画像の表示中心である。
【００２７】
２１３は、全天球画像の表示領域を２回目に変更した後のガイド画面である。２１４は、球体上において表示中心２１２に対応する位置を示すＣＵＲＲＥＮＴ位置である。２１５は、ＳＴＡＲＴ位置２０５からＣＵＲＲＥＮＴ位置２１４の軌跡を示す矢印である。
【００２８】
全天球画像の表示領域を変更する前の状態をパネルインターフェース２０１とする。その際、ガイド画面２０３では、表示領域を変更する前の表示中心２０２に対応するＳＴＡＲＴ位置２０５が球体フレーム２０４に表示される。ユーザーの操作入力を受けて、全天球画像の表示領域を、パネルインターフェース２０１からパネルインターフェース２０６のように変更すると、表示領域の変更によって表示中心２０２が移動して変更された結果となる表示中心２０７の座標を座標取得部１０３が取得する。
【００２９】
それと同時に、ガイド画面２０８では、表示中心２０２が表示中心２０７まで移動したことを、ＳＴＡＲＴ位置２０５とＣＵＲＲＥＮＴ位置２０９によって表現し、ＳＴＡＲＴ位置２０５からＣＵＲＲＥＮＴ位置２０９へ移動の軌跡を示す矢印２１０を表示する。このようにすることで、ユーザーは全天球画像の表示領域の変更が空間的なイメージで相対的に位置関係を把握することが可能となる。
【００３０】
更に、全天球画像の表示領域をパネルインターフェース２０６からパネルインターフェース２１１のように変更すると、表示中心２０７が動いた結果となる表示中心２１２の座標を座標取得部１０３が取得する。それと同時に、ガイド画面２１３では、表示中心２１２に対応するＣＵＲＲＥＮＴ位置２１４を表示し、全天球画像の表示領域を動かしている間は、ＳＴＡＲＴ位置２０５からＣＵＲＲＥＮＴ位置２１４へ、前回のＣＵＲＲＥＮＴ位置２０９も含めた移動の軌跡を示す矢印２１５を表示する。ＳＴＡＲＴ位置２０５から最新のＣＵＲＲＥＮＴ位置までの軌跡を表示することができる。
【００３１】
次に、図３を用いて、全天球画像の表示領域を変更した際のガイド画面の表示フローについて説明する。
【００３２】
Ｓ３０１において、操作入力部１０２から表示開始の指示があるとＳ３０２に遷移し、なければＳ３０１を繰り返す。Ｓ３０２において、座標取得部１０３が全天球画像の表示領域の表示中心２０２の座標を取得する。Ｓ３０３において、表示中心２０２の座標に対応するＳＴＡＲＴ位置２０５を、ガイド画面２０３へ表示する。
【００３３】
Ｓ３０４において、操作入力部１０２から、パネルインターフェース２０１の全天球画像の表示領域を変更する操作入力がある場合はＳ３０５へ遷移し、操作入力がなければＳ３０４を繰り返す。Ｓ３０５において、全天球画像の表示領域を１回目に変更した後の表示領域の中心である表示中心２０７の座標を取得する。
【００３４】
Ｓ３０６において、表示中心２０７の座標に対応するＣＵＲＲＥＮＴ位置２０９を、ガイド画面２０８へ表示する。Ｓ３０７において、ＳＴＡＲＴ位置２０５からＣＵＲＲＥＮＴ位置２０９への軌跡の矢印を、ガイド画面２０８へ表示する。Ｓ３０８において、操作入力部１０２から表示終了の指示がなければＳ３０４へ戻り、表示終了の指示があれば表示を終了する。
【００３５】
以上述べたように、全天球画像の表示中心がユーザーの操作入力に応じて変更されるように、全天球画像表示部１０４が全天球画像の表示を制御した場合、表示中心が変更される前後の表示中心の位置を取得して、表示中心が変更される前後の表示中心の相対的な位置関係を示すガイドを表示する。このようにガイド表示することで、ユーザーは、全天球画像を示す空間のイメージを容易に把握できるようにすることができる。
【００３６】
なお、上記実施の形態においては、全天球画像の表示中心が２回変更された場合を示したが、２回以上の複数回変更されてもよい。表示中心が複数回変更された場合、変更ごとの表示中心の位置を取得して変更ごとのガイドを表示することで、画像中心の変化を把握しやすくなる。
【００３７】
さらになお、ガイド表示は、表示中心の位置を表示中心の変更途中に逐次的に取得することで、ユーザーの操作入力を受けて変更される表示中心の変化を、全天球画像の回転などの表示変更に同期させてリアルタイムで表示することも可能となる。
【００３８】
（第２の実施形態）
以下、図４を参照して、本発明の第２の実施形態による、全天球画像とガイド画像の表示例を示す。画像表示装置１００の構成は第１の実施形態と同様である。ガイド画像は、撮像装置１０１で撮像した全天球画像の表示領域の位置（表示中心）を球体フレームに表示する。図２と同じ構成には、同じ符号を付してあり、説明を省略する。
【００３９】
４０１は、全天球画像の表示領域を２回目に変更した際のパネルインターフェースである。４０２は、パネルインターフェース２１１の１つ前の全天球画像の表示領域の表示中心に対応するＰＲＥ位置であり、ＣＵＲＲＥＮＴ位置２０９の位置に相当する。４０３は、表示中心２１２に対応するＣＵＲＲＥＮＴ位置である。４０４は、ＰＲＥ位置４０２からＣＵＲＲＥＮＴ位置４０３への軌跡を示す矢印である。
【００４０】
全天球画像の表示領域を、パネルインターフェース２０１からパネルインターフェース２０６のように変更した際の全天球画像とガイド画像の表示例は、第１の実施形態と同様である。
【００４１】
表示中心２０７が動いた結果となる表示中心２１２の座標を座標取得部１０３が取得する。ガイド画面４０１では、表示中心２１２に対応するＣＵＲＲＥＮＴ位置４０３と、ＣＵＲＲＥＮＴ位置２０９の位置にＰＲＥ位置４０２を表示する。同時に、全天球画像の表示領域を動かしている間は、ＰＲＥ位置４０２からＣＵＲＲＥＮＴ位置４０４へ移動の軌跡を示す矢印４０５を表示する。
【００４２】
次に、図５を用いて、全天球画像の表示領域を変更した際のガイド画面の表示フローについて説明する。図３と同じ処理ステップには、同じ番号を付してあり、説明を省略する。
【００４３】
Ｓ５０１において、パネルインターフェース２０１の全天球画像の表示領域から１回目に表示領域を変更した場合はＳ３０６に遷移し、そうではない場合はＳ５０２に遷移する。
【００４４】
Ｓ５０２において、表示中心２１２の座標に対応するＣＵＲＲＥＮＴ位置４０３、ＰＲＥ位置４０２をガイド画面４０１へ表示する。
【００４５】
Ｓ５０３において、ＰＲＥ位置４０２からＣＵＲＲＥＮＴ位置４０３への軌跡の矢印をガイド画面４０１へ表示する。
【００４６】
以上、本実施形態によれば、全天球画像の表示領域が複数回変更された場合であっても、変更ごとに表示中心の位置を取得しているので、変更ごとのガイドを表示することが可能となる。なお、本実施形態においては、表示領域が２回変更された例を示しているが、２回以上の複数回変更されてもよい。その場合には、ガイド画像において、何回目の変更による表示中心の移動かを分かるように符号などを付して表示してもよい。
【００４７】
（第３の実施形態）
以下、図６を参照して、本発明の第３の実施形態による、全球面画像とガイド画像の表示例を示す。画像表示装置１００の構成は第１の実施形態と同様である。ガイド画像は、撮像装置１０１で撮像した全天球画像の表示領域の位置（表示中心）を球体フレームに表示する。図２と同じ部分には同じ符号を付してあり、説明を省略する。
【００４８】
６０１は、全天球画像の表示領域を変更する前のガイド画面である。６０２は、表示中心２０２に対応するＳＴＡＲＴ位置である。
【００４９】
６０３は、全天球画像の表示領域を１回目に変更した際のガイド画面である。６０４は、全天球画像の表示領域を１回目に変更した際の球体フレームである。６０５は、全天球画像の表示領域を１回目に変更した際のＳＴＡＲＴ位置である。６０６は、全天球画像の表示領域を１回目に変更した際のＣＵＲＲＥＮＴ位置である。６０７は、ＳＴＡＲＴ位置６０５からＣＵＲＲＥＮＴ位置６０６の軌跡を示す矢印である。
【００５０】
６０８は、全天球画像の表示領域を２回目に変更した際のガイド画面である。６０９は、全天球画像の表示領域を２回目に変更した際のガイド画面における球体フレームである。６１０は、全天球画像の表示領域を２回目に変更した際のガイド画面におけるＳＴＡＲＴ位置である。６１１は、ＳＴＡＲＴ位置６１０からＣＵＲＲＥＮＴ位置６０６の軌跡を示す矢印である。
【００５１】
全天球画像の表示領域を変更する前の状態をパネルインターフェース２０１とする。その際、ガイド画面６０１には、球体フレーム２０４の緯度０度、経度０度へ中心２０２に対応するＳＴＡＲＴ位置６０２を表示する。全天球画像の表示領域をパネルインターフェース２０１からパネルインターフェース２０６のように変更すると、表示中心２０２から表示中心２０７の緯度および経度の変化量を、座標標取得部１０３が取得する。それと同時に、ガイド画面６０３では、緯度および経度の変化量に基づいて、ＳＴＡＲＴ位置６０５とＣＵＲＲＥＮＴ位置６０６を球体フレーム６０４へ表示する。
【００５２】
なお、ＣＵＲＲＥＮＴ位置６０６はガイド画面６０１におけるＳＴＡＲＴ位置６０２の座標に固定され、球体フレーム６０４とＳＴＡＲＴ位置６０５が動く。また、ＳＴＡＲＴ位置６０５からＣＵＲＲＥＮＴ位置６０６へ移動の軌跡を示す矢印６０７を表示する。
【００５３】
更に、全天球画像の表示領域をパネルインターフェース２０６からパネルインターフェース２１１のように変更すると、表示中心２０７から表示中心２１２の緯度および経度の変化量を、座標取得部１０３が取得する。それと同時に、ガイド画面６０８では、緯度および経度の変化量に基づいて、ＳＴＡＲＴ位置６１０とＣＵＲＲＥＮＴ位置６０６を球体フレーム６０９へ表示する。また、全球面表示領域を動かしている間は、ＳＴＡＲＴ位置６１０からＣＵＲＲＥＮＴ位置６０６へ移動の軌跡を示す矢印６１１を表示する。
【００５４】
次に、図７を用いて、全天球画像の表示領域を変更した際のガイド画面の表示フローについて説明する。図３と同じフローには、同じ番号を付してあり、説明を省略する。
【００５５】
Ｓ７０１において、球体フレーム２０４の緯度０度、経度０度へＳＴＡＲＴ位置６０２を表示する。Ｓ７０２において、ガイド画面６０３には、緯度０度、経度０度にＣＵＲＲＥＮＴ位置６０６が表示されるように、取得した緯度、経度の変化量だけ球体フレーム６０４とＳＴＡＲＴ位置６０５を動かす。
【００５６】
以上、本実施形態によれば、ガイド表示の表示方法として、最新の表示中心が球体上の特定の点（緯度０度、経度０度）に位置するように表示する。このようにすることで、ユーザーは現在の表示中心を基準として、表示領域の変更を把握することが可能となる。なお、最新の表示中心が位置する特定の点は、球体上の緯度０度、経度０度の点に限らない。
【００５７】
（第４の実施形態）
以下、図８を参照して、本発明の第４の実施形態による、全天球画像とガイド画像の表示例を示す。画像表示装置１００の構成は第１の実施形態と同様である。図２と同じ部分には同じ符号を付してあり、説明を省略する。
【００５８】
８０１は、全天球画像の表示領域を変更する前のガイド画面である。８０２は、全天球画像の表示領域を１回目に変更した際のガイド画面である。８０３は、全天球画像の表示領域を２回目に変更した際のガイド画面である。
【００５９】
全天球画像の表示領域を変更する前の状態をパネルインターフェース２０１とする。その際、表示中心２０２の緯度および経度を座標標取得部１０３が取得し、ガイド画面８０１へ表示する。全天球画像の表示領域をパネルインターフェース２０１からパネルインターフェース２０６のように変更すると、表示中心２０２が動いた結果となる表示中心２０７の緯度および経度を座標標取得部１０３が取得し、ガイド画面８０２へ表示する。
【００６０】
更に、全天球画像の表示領域をパネルインターフェース２０６からパネルインターフェース２１１のように変更すると、表示中心２０７が動いた結果となる表示中心２１２の緯度および経度を座標取得部１０３が取得し、ガイド画面８０３へ表示する。なお、ガイド画面には、全球面画像表示領域が動いた緯度および経度の差分を表示してもよい。
【００６１】
次に、図９を用いて、全天球画像の表示領域を変更した際のガイド画面の表示フローについて説明する。図３と同じフローには、同じ番号を付してあり、説明を省略する。
【００６２】
Ｓ９０１において、ガイド画面へ、Ｓ３０２において取得した経度、緯度を表示する。
【００６３】
Ｓ９０２において、操作入力部１０２からパネルインターフェースの全天球画像の表示領域を変更する操作入力がある場合はＳ３０２へ戻り、操作入力がない場合はＳ３０８へ遷移する。
【００６４】
以上、本実施形態によれば、表示中心を数値で表示することができるので、球体などを用いてマップでガイド表示する形態と比較して容易に実現することができる。
【００６５】
また、上述したいずれの実施形態においても、ガイド画面における開始位置、現在位置、現在位置より１つ前の表示位置、およびガイド画面における開始位置、現在位置、現在位置より１つ前の表示位置のいずれかを結ぶ印の全てまたは一部を、球体フレームの奥側の半球上に表示した場合と手前側の半球に表示した場合で色を変えてもよい。
【００６６】
また、全天球画像を球体フレームの背景に貼り付けるなど、全天球画像とガイド画像を同時に確認できるように表示することによって、全天球画像の表示領域の位置を分かりやすくしてもよい。
【００６７】
以上のように、本発明によれば、全球面画像に注目物体が少ないまたは存在しない場合でも、ガイド画面を表示することでユーザーが全天球画像の空間的なイメージを把握しやすくなることを可能にした全天球画像の画像表示装置を提供することができる。
【００６８】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【符号の説明】
【００６９】
１０１  撮像装置
１０２  操作入力部
１０３  座標取得部
１０４  全天球画像表示制御部
１０５  ガイド画像表示制御部
１０６  表示部
【図１】
2015230625.tif 000003
【図２】
2015230625.tif 000004
【図３】
2015230625.tif 000005
【図４】
2015230625.tif 000006
【図５】
2015230625.tif 000007
【図６】
2015230625.tif 000008
【図７】
2015230625.tif 000009
【図８】
2015230625.tif 000010
【図９】
2015230625.tif 000011