【手続補正書】
【提出日】平成24年11月6日(2012.11.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
地磁気センサにより検出された地磁気情報と、加速度センサにより検出された加速度情報に基づいて、被写体を撮像して撮像画像を出力する撮像部による撮像方向の方位を算出する方位算出部と、
前記加速度情報に基づいて、撮像装置のロール方向の回転角を算出し、前記ロール方向の回転角に基づいて、前記撮像方向の方位を表示用の方位に変換する方位変換部と、
前記表示用の方位を表す画像を、前記撮像画像とともに表示する表示部と、
を備える、表示装置。
【請求項２】
前記撮像方向の方位を表す方位情報を、前記撮像画像に関連づけて記録媒体に記録する記録部をさらに備え、
前記表示用の方位を表す画像は、前記表示用の方位を表すコンパス画像であり、
前記方位算出部は、前記加速度情報に基づいて、前記撮像装置のピッチ方向の回転角を算出し、前記ピッチ方向の回転角に基づいて、前記撮像方向が略鉛直方向であるか否かを検出し、
前記撮像方向が略鉛直方向である場合、
前記方位算出部は、前記撮像方向の方位に代えて、前記撮像方向に対して垂直な方向の方位を算出し、
前記表示部は、前記表示用の方位を表すコンパス画像に代えて、前記撮像方向に対して垂直な方向の方位を表すコンパス画像を、前記撮像画像とともに表示し、
前記記録部は、前記撮像方向の方位を表す方位情報に代えて、前記撮像方向に対して垂直な方向の方位を表す方位情報を、前記撮像画像に関連づけて前記記録媒体に記録する、請求項１に記載の表示装置。
【請求項３】
前記方位算出部は、前記加速度情報に基づいて、前記撮像装置のピッチ方向の回転角を算出し、前記ピッチ方向の回転角に基づき、前記撮像方向が略鉛直下方であるか否かを検出し、
前記撮像方向が略鉛直下方である場合、
前記方位算出部は、前記撮像方向の方位に代えて、前記撮像装置の天面方向の方位を算出し、
前記表示部は、前記表示用の方位を表すコンパス画像に代えて、前記天面方向の方位を表すコンパス画像を、前記撮像画像とともに表示し、
前記記録部は、前記撮像方向の方位を表す方位情報に代えて、前記天面方向の方位を表す方位情報を、前記撮像画像に関連づけて前記記録媒体に記録する、請求項２に記載の表示装置。
【請求項４】
前記方位算出部は、前記加速度情報に基づいて、前記撮像装置のピッチ方向の回転角を算出し、前記ピッチ方向の回転角に基づき、前記撮像方向が略鉛直上方であるか否かを検出し、
前記撮像方向が略鉛直上方である場合、
前記方位算出部は、前記撮像方向の方位に代えて、前記撮像装置の底面方向の方位を算出し、
前記表示部は、前記表示用の方位を表すコンパス画像に代えて、前記底面方向の方位を表すコンパス画像を、前記撮像画像とともに表示し、
前記記録部は、前記撮像方向の方位を表す方位情報に代えて、前記底面方向の方位を表す方位情報を、前記撮像画像に関連づけて前記記録媒体に記録する、請求項２に記載の表示装置。
【請求項５】
前記記録媒体に記録された前記撮像画像及び前記方位情報を再生する再生部をさらに備え、
前記表示部は、前記再生部により再生された前記方位情報の方位を表すコンパス画像を、前記再生部により再生された前記撮像画像とともに表示する、請求項２〜４のいずれか一項に記載の表示装置。
【請求項６】
撮像部により被写体を撮像しながら、地磁気センサにより検出された地磁気情報と、加速度センサにより検出された加速度情報に基づいて、前記撮像部による撮像方向の方位を算出するステップと、
前記加速度情報に基づいて、撮像装置のロール方向の回転角を算出し、前記ロール方向の回転角に基づいて、前記撮像方向の方位を表示用の方位に変換するステップと、
前記表示用の方位を表す画像を、前記撮像部から出力された撮像画像とともに表示するステップと、
を含む、表示方法。
【請求項７】
撮像部により被写体を撮像しながら、地磁気センサにより検出された地磁気情報と、加速度センサにより検出された加速度情報に基づいて、前記撮像部による撮像方向の方位を算出するステップと、
前記加速度情報に基づいて、撮像装置のロール方向の回転角を算出し、前記ロール方向の回転角に基づいて、前記撮像方向の方位を表示用の方位に変換するステップと、
前記表示用の方位を表す画像を、前記撮像部から出力された撮像画像とともに表示するステップと、
をコンピュータに実行させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】表示装置、表示方法及びプログラム
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
本発明は、表示装置、表示方法及びプログラムに関する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
上記課題を解決するために、本発明のある観点によれば、地磁気センサにより検出された地磁気情報と、加速度センサにより検出された加速度情報に基づいて、被写体を撮像して撮像画像を出力する撮像部による撮像方向の方位を算出する方位算出部と、前記加速度情報に基づいて、撮像装置のロール方向の回転角を算出し、前記ロール方向の回転角に基づいて、前記撮像方向の方位を表示用の方位に変換する方位変換部と、前記表示用の方位を表す画像を、前記撮像画像とともに表示する表示部と、を備える、表示装置が提供される。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
前記撮像方向の方位を表す方位情報を、前記撮像画像に関連づけて記録媒体に記録する記録部をさらに備え、前記表示用の方位を表す画像は、前記表示用の方位を表すコンパス画像であり、前記方位算出部は、前記加速度情報に基づいて、前記撮像装置のピッチ方向の回転角を算出し、前記ピッチ方向の回転角に基づいて、前記撮像方向が略鉛直方向であるか否かを検出し、前記撮像方向が略鉛直方向である場合、前記方位算出部は、前記撮像方向の方位に代えて、前記撮像方向に対して垂直な方向の方位を算出し、前記表示部は、前記表示用の方位を表すコンパス画像に代えて、前記撮像方向に対して垂直な方向の方位を表すコンパス画像を、前記撮像画像とともに表示し、前記記録部は、前記撮像方向の方位を表す方位情報に代えて、前記撮像方向に対して垂直な方向の方位を表す方位情報を、前記撮像画像に関連づけて前記記録媒体に記録するようにしてもよい。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
また、上記課題を解決するために、本発明の別の観点によれば、撮像部により被写体を撮像しながら、地磁気センサにより検出された地磁気情報と、加速度センサにより検出された加速度情報に基づいて、前記撮像部による撮像方向の方位を算出するステップと、前記加速度情報に基づいて、撮像装置のロール方向の回転角を算出し、前記ロール方向の回転角に基づいて、前記撮像方向の方位を表示用の方位に変換するステップと、前記表示用の方位を表す画像を、前記撮像部から出力された撮像画像とともに表示するステップと、を含む、表示方法が提供される。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
また、上記課題を解決するために、本発明の別の観点によれば、撮像部により被写体を撮像しながら、地磁気センサにより検出された地磁気情報と、加速度センサにより検出された加速度情報に基づいて、前記撮像部による撮像方向の方位を算出するステップと、前記加速度情報に基づいて、撮像装置のロール方向の回転角を算出し、前記ロール方向の回転角に基づいて、前記撮像方向の方位を表示用の方位に変換するステップと、前記表示用の方位を表す画像を、前記撮像部から出力された撮像画像とともに表示するステップと、をコンピュータに実行させるためのプログラムが提供される。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００５６
【補正方法】変更
【補正の内容】
【００５６】
具体的には、まず、方位変換部２０２は、加速度センサ１７２が検出した加速度情報から、上述したように、地面に対する撮像装置１０の姿勢（ロール角α、ピッチ角β、ヨー角γ）を算出する。次いで、方位変換部２０２は、予め保存されている表示部設置情報２２６と、上記で算出した撮像装置１０の姿勢の情報とから、撮像装置１０に伴ってロール方向に回転した表示部１３０の回転角（ロール角α）を算出する。ここで、表示部設置情報２２６は、撮像装置１０に設置されている表示部１３０の設置姿勢（撮像装置１０に対する表示部１３０の向き）を表す情報である。当該表示部１３０の設置姿勢は、撮像装置１０の製造時に既知である。方位変換部２０２は、この表示部１３０の設置姿勢（デフォルトの回転角）に、地面に対する撮像装置１０の姿勢（ロール角α、ピッチ角β、ヨー角γ）を加算することで、表示部１３０のロール角αを求める。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００９３
【補正方法】変更
【補正の内容】
【００９３】
具体的には、方位算出部２００は、上述した地磁気センサ設置情報２２２と、上記で算出した撮像装置１０の姿勢の情報とから、地磁気センサ１７０の姿勢を算出する。さらに、方位算出部２００は、地磁気センサ１７０が測位した地磁気情報と、上記で算出した地磁気センサ１７０の姿勢の情報とから、地磁気の水平ベクトルを抽出し、基準方位（例えば北方向）を算出する。次いで、方位算出部２００は、上述した光学系設置情報２２４と、先に算出した撮像装置１０の姿勢の情報とから、撮像方向のベクトルを算出する。さらに、方位算出部２００は、当該撮像方向のベクトルに対してピッチ方向に上向き９０°のベクトル（即ち、天面方向のベクトル）を求める。その後、方位算出部２００は、上記で算出した基準方位のベクトルと、天面方向のベクトルとの差分から、天面方向の水平方位（即ち、天面方位）を求める。例えば、方位算出部２００は、この天面方位として、基準方位（例えば北）を基準とした方位角ψ（ψ＝０°〜３６０°）を求める。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】０１１３
【補正方法】変更
【補正の内容】
【０１１３】
また、第２の実施形態によれば、撮像装置１０の撮像方向に応じて、撮像方位、天面方位及び底面方位を使い分け、撮影方向が略鉛直方向でない場合にのみ、上記の撮像方位と表示用の方位を使用する。一方、撮像方向が略鉛直下方又は略鉛直上方である場合は、天面方位又は底面方位を使用し、表示部１３０がロール方向に回転しても、該天面方位又は底面方位をロール角αに応じて変換しない。これにより、ユーザが方位磁石を見ているような自然な表示態様で、天面方位又は底面方位を表すコンパス画像３１２を表示することが可能になり、ユーザに対して直感的に把握しやすい方位情報を提示できる。