(57)【特許請求の範囲】
【請求項１】
撮像画像を処理し、表示装置に表示される表示画像を生成する画像処理部と、
前記表示装置の角度に関する情報に基づき、前記撮像画像における表示画像の位置を決定する表示領域決定部と、
前記表示装置に対する押引力に関する情報に基づき、前記撮像画像の拡大縮小率を決定する拡大縮小率決定部と、を備え、
前記画像処理部は、撮像画像における表示画像の位置と、前記拡大縮小率と、あらかじめ定められた拡大縮小の中心位置とを用いて表示画像を生成する、
画像処理装置。
【請求項２】
前記あらかじめ定められた拡大縮小の中心位置は、前記表示画像の領域の中央部である、
請求項１記載の画像処理装置。
【請求項３】
撮像画像を処理し、表示装置に表示される表示画像を生成する画像処理部と、
前記表示装置の角度に関する情報に基づき、前記撮像画像における表示画像の位置を決定する表示領域決定部と、
前記表示装置の角度に関する情報に基づき、前記表示画像における拡大縮小の中心位置を決定する拡大縮小中心決定部と、
前記拡大縮小の中心位置を表す情報を提示する位置情報提示部と、
前記表示装置に対する押引力に関する情報に基づき、前記撮像画像の拡大縮小率を決定する拡大縮小率決定部と、
前記表示装置から入力されたモード切替信号に基づいて前記表示領域決定部が前記表示装置の角度に関する情報に基づき、撮像画像における表示画像の位置を決定する表示領域決定モードと、前記拡大縮小中心決定部が前記表示装置の角度に関する情報に基づき表示画像における拡大縮小の中心位置を決定する中心決定モードとの切替えを行うモード切替部と、を備え、
前記画像処理部は、前記撮像画像における表示画像の位置と、前記拡大縮小の中心位置と、前記拡大縮小率とを用いて表示画像を生成する、
画像処理装置。
【請求項４】
前記モード切替信号が、前記表示装置に設けられたモード切替信号入力装置から入力され、
前記モード切替信号入力装置は、前記モード切替信号入力装置を操作しながら前記表示装置の角度変更と押引きとが可能な位置に設けられている、
請求項３記載の画像処理装置。
【請求項５】
前記中心決定モードにおいて、前記拡大縮小の中心位置を、表示装置の角度に応じた位置とする、
請求項３、４のいずれか一項に記載の画像処理装置。
【請求項６】
前記中心決定モードにおいて、前記拡大縮小の中心位置を、表示装置の角度に応じた速さで移動させる、
請求項３、４のいずれか一項に記載の画像処理装置。
【請求項７】
撮像画像を処理し、表示装置に表示される表示画像を生成する画像処理部と、
前記表示装置の角度に関する情報に基づき、前記撮像画像における表示画像の位置を決定する表示領域決定部と、
前記表示装置にかかる移動力に関する情報に基づき、前記表示画像における拡大縮小の中心位置を決定する拡大縮小中心決定部と、
前記拡大縮小の中心位置を表す情報を提示する位置情報提示部と、
前記表示装置に対する押引力に関する情報に基づき、前記撮像画像の拡大縮小率を決定する拡大縮小率決定部と、を備え、
前記画像処理部は、前記撮像画像における表示画像の位置と、前記拡大縮小の中心位置と、前記拡大縮小率とを用いて表示画像を生成する、
画像処理装置。
【請求項８】
前記移動力に関する情報は、前記表示装置にかかる上下左右方向への圧力に関する情報である、
請求項７に記載の画像処理装置。
【請求項９】
前記拡大縮小中心決定部は、前記表示装置にかけられた移動力の回数に基づき拡大縮小の中心位置を決定する、
請求項７に記載の画像処理装置。
【請求項１０】
前記拡大縮小中心決定部は、移動力がかけられた時間に基づき拡大縮小の中心位置を決定する、
請求項７に記載の画像処理装置。
【請求項１１】
前記拡大縮小中心決定部は、押引力に応じて撮像画像の拡大縮小率を決定する、
請求項３から１０のいずれか一項に記載の画像処理装置。
【請求項１２】
前記表示装置は、車室内のルームミラーの取付位置に設置される、
請求項１から１１のいずれか一項に記載の画像処理装置。
【請求項１３】
撮像画像を処理し、表示装置に表示される表示画像を生成する画像処理装置の制御方法であって、
前記表示装置の角度に関する情報に基づき、前記撮像画像における表示画像の位置を決定するステップと、
前記表示装置に対する押引力に関する情報に基づき、前記撮像画像の拡大縮小率を決定するステップと、
前記撮像画像における表示画像の位置と、前記拡大縮小率と、あらかじめ定められた拡大縮小の中心位置とを用いて表示画像を生成するステップと、を備えた、
制御方法。
【請求項１４】
撮像画像を処理し、表示装置に表示される表示画像を生成する画像処理装置の制御方法であって、
前記表示装置の角度に関する情報に基づき、前記撮像画像における表示画像の位置を決定するステップと、
前記表示装置の角度に関する情報に基づき、前記表示画像における拡大縮小の中心位置を決定し、決定された前記中心位置を表す情報を提示するステップと、
前記撮像画像における前記表示画像の位置の決定と前記中心位置を表す情報の提示とを切替えるステップと、
前記表示装置に対する押引力に関する情報に基づき、前記撮像画像の拡大縮小率を決定するステップと、
前記撮像画像における表示画像の位置と、前記拡大縮小の中心位置と、前記拡大縮小率とを用いて表示画像を生成するステップと、を備えた、
制御方法。
【請求項１５】
撮像画像を処理し、表示装置に表示される表示画像を生成する画像処理装置の制御方法であって、
前記表示装置の角度に関する情報に基づき、前記撮像画像における表示画像の位置を決定するステップと、
前記表示装置にかかる移動力に関する情報に基づき、前記表示画像における拡大縮小の中心位置を決定するステップと、
前記拡大縮小の中心位置を表す情報を提示するステップと、
前記表示装置に対する押引力に関する情報に基づき、前記撮像画像の拡大縮小率を決定するステップと、
前記撮像画像における表示画像の位置と、前記拡大縮小の中心位置と、前記拡大縮小率を用いて表示画像を生成するステップと、を備えた、
制御方法。
【請求項１６】
請求項１３から請求項１５のいずれか１項に記載の制御方法をコンピュータに実行させるためのプログラム。
【請求項１７】
角度情報と押引力情報とを検出するセンサーと、
撮像画像を表示画像として表示する表示画面と、を備え、
表示画像は、
前記センサーの角度情報に基づき決定された撮像画像における表示画像の位置と
表示画面においてあらかじめ定められた拡大縮小の中心位置と
前記センサーの押引力情報に基づき決定された拡大縮小率とを用いて生成されている、
表示装置。
【請求項１８】
角度情報と押引力情報とを検出するセンサーと、
第１のモードと第２のモードを切り替えるためのモード切替信号入力装置と、
撮像画像を表示画像として表示する表示画面と、を備え、
表示画像は、
第１のモードにおいて前記センサーの角度情報に基づき決定された撮像画像における表示画像の位置と、
第２のモードにおいて前記センサーの角度情報に基づき決定された表示画像における撮像画像の拡大縮小の中心位置と、
前記センサーの押引力情報に基づき決定された拡大縮小率とを用いて生成されている、
表示装置。
【請求項１９】
角度情報と押引力情報と移動力情報とを検出するセンサーと、
撮像画像を表示画像として表示する表示画面と、を備え、
表示画像は、
前記センサーの角度情報に基づき決定された撮像画像における表示画像の位置と、
前記センサーの移動力情報に基づき決定された表示画像における撮像画像の拡大縮小の中心位置と、
前記センサーの押引力情報とを用いて生成されている、
表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車室内に設置された表示装置に表示する表示画像を、カメラが撮像した車両後方の撮像画像から生成する画像処理装置に関する。
【背景技術】
【０００２】
従来、表示装置の設置角度を変えることにより表示される撮像画像の位置を決定し、表示装置に設けられたタッチパネルの操作により撮像画像を拡大縮小する画像処理装置が知られている（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１００１８０号公報
【発明の概要】
【０００４】
本発明は、ドライバーが簡易な操作により、表示される撮像画像の位置を決定したり、撮像画像を拡大縮小したりすることが可能な画像処理装置を提供する。
【０００５】
本発明の第１の画像処理装置は、画像処理部と、表示領域決定部と、拡大縮小率決定部とを有する。表示領域決定部は、表示装置の角度に関する情報に基づき、撮像画像における表示画像の位置を決定する。拡大縮小率決定部は、表示装置に対する押引力に関する情報に基づき、撮像画像の拡大縮小率を決定する。画像処理部は、撮像画像における表示画像の位置と、拡大縮小率と、あらかじめ定められた拡大縮小の中心位置とを用いて撮像画像を処理し、表示装置に表示される表示画像を生成する。
【０００６】
本発明の第２の画像処理装置は、画像処理部と、表示領域決定部と、拡大縮小中心決定部と、位置情報提示部と、拡大縮小率決定部と、モード切替部とを有する。表示領域決定部は、表示装置の角度に関する情報に基づき、撮像画像における表示画像の位置を決定する。拡大縮小中心決定部は、表示装置の角度に関する情報に基づき、表示画像における拡大縮小の中心位置を決定する。位置情報提示部は、拡大縮小の中心位置を表す情報を提示する。拡大縮小率決定部は、表示装置に対する押引力に関する情報に基づき、撮像画像の拡大縮小率を決定する。モード切替部は表示領域決定モードと中心決定モードとを切り替える。表示領域決定モードでは、表示装置から入力されたモード切替信号に基づいて表示領域決定部が表示装置の角度に関する情報に基づき、撮像画像における表示画像の位置を決定する。中心決定モードでは、拡大縮小中心決定部が表示装置の角度に関する情報に基づき表示画像における拡大縮小の中心位置を決定する。画像処理部は、撮像画像における表示画像の位置と、拡大縮小の中心位置と、拡大縮小率とを用いて撮像画像を処理し、表示装置に表示される表示画像を生成する。
【０００７】
本発明の第３の画像処理装置は、画像処理部と、表示領域決定部と、拡大縮小中心決定部と、位置情報提示部と、拡大縮小率決定部とを有する。表示領域決定部は、表示装置の角度に関する情報に基づき、撮像画像における表示画像の位置を決定する。拡大縮小中心決定部は、表示装置にかかる移動力に関する情報に基づき、表示画像における拡大縮小の中心位置を決定する。位置情報提示部は、拡大縮小の中心位置を表す情報を提示する。拡大縮小率決定部は、表示装置に対する押引力に関する情報に基づき、撮像画像の拡大縮小率を決定する。画像処理部は、撮像画像における表示画像の位置と、拡大縮小の中心位置と、拡大縮小率とを用いて撮像画像を処理し、表示装置に表示される表示画像を生成する。
【０００８】
本発明によれば、ドライバーは簡易な操作により、表示される撮像画像の領域を決定したり、撮像画像を拡大縮小したりすることが可能となる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施の形態１における画像処理装置の構成を示すブロック図
【図２Ａ】本発明の実施の形態１における表示装置の設置状態を示す概念図
【図２Ｂ】本発明の実施の形態１における表示装置の設置状態を示す概念図
【図３Ａ】本発明の実施の形態１における表示領域決定部の動作を説明する図
【図３Ｂ】本発明の実施の形態１における表示領域決定部の動作を説明する図
【図４】本発明の実施の形態１における画像処理装置の動作の一例を示すフローチャート
【図５Ａ】本発明の実施の形態１における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す図
【図５Ｂ】本発明の実施の形態１における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す図
【図５Ｃ】本発明の実施の形態１における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す図
【図５Ｄ】本発明の実施の形態１における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す図
【図６】本発明の実施の形態２における画像処理装置の構成を示すブロック図
【図７】本発明の実施の形態２における画像処理装置の動作の一例を示すフローチャート
【図８Ａ】本発明の実施の形態２における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第１の図
【図８Ｂ】本発明の実施の形態２における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第１の図
【図８Ｃ】本発明の実施の形態２における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第１の図
【図９Ａ】本発明の実施の形態２における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第２の図
【図９Ｂ】本発明の実施の形態２における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第２の図
【図９Ｃ】本発明の実施の形態２における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第２の図
【図１０】本発明の実施の形態３における画像処理装置の構成を示すブロック図
【図１１】本発明の実施の形態３における画像処理装置の動作の一例を示すフローチャート
【図１２Ａ】本発明の実施の形態３における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第１の図
【図１２Ｂ】本発明の実施の形態３における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第１の図
【図１２Ｃ】本発明の実施の形態３における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第１の図
【図１３Ａ】本発明の実施の形態３における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第２の図
【図１３Ｂ】本発明の実施の形態３における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第２の図
【図１３Ｃ】本発明の実施の形態３における表示装置の操作に伴う表示装置の表示画面の遷移の一例を示す第２の図
【発明を実施するための形態】
【００１０】
しかしながら、従来の画像処理装置では、表示される撮像画像の位置を決定するために、ドライバーは表示装置を手で掴んでその設置角度を変更する必要があった。また、撮像画像を拡大縮小するために、ドライバーは表示装置の表示画面に指などで触れ、その触れた位置によって拡大縮小の中心位置を指定する必要があった。
【００１１】
すなわち、従来の画像処理装置においては、表示装置に表示される撮像画像の位置を決定する場合と撮像画像を拡大縮小する場合では、ドライバーは異なる扱い方で表示装置を操作する必要があった。
【００１２】
（実施の形態１）
以下、本発明の実施の形態１における画像処理装置について図面を参照しながら説明する。
【００１３】
図１は、本発明の実施の形態１における画像処理装置１００の構成を示すブロック図である。
【００１４】
図１において画像処理部１０１は、車両に搭載されたカメラ１１０が撮像した車両後方の撮像画像を入力とする。画像処理部１０１は、表示領域決定部１０２と拡大縮小率決定部１０３とから取得した画像処理パラメータに基づいて撮像画像を処理することにより、表示装置１１１が表示する表示画像を生成する。
【００１５】
表示装置１１１は、画像処理部１０１によって生成された表示画像を表示する。表示装置１１１の表示画面（以後、単に「表示画面」と呼ぶ）には、撮像画像を拡大縮小する場合にその中心となる撮像画像上の位置座標を決定するための位置があらかじめ定められている。あらかじめ定められた表示画面の位置に対応する撮像画像の位置座標が、撮像画像を拡大縮小する場合の中心となる。表示画面は、例えば液晶ディスプレイにより構成される。
【００１６】
表示装置１１１は、センサー１０４を有している。センサー１０４は、表示装置１１１の水平角と垂直角に関する情報（以後、角度情報と呼ぶ）と、表示装置１１１に対する押引力に関する情報（以後、押引力情報と呼ぶ）とを検出する。
【００１７】
表示装置１１１の水平角と垂直角とは、それぞれ表示画面の水平方向の角度と垂直方向の角度であり、ドライバーの操作によって変化する。また、表示装置１１１に対する押引力とは、ドライバーが表示装置１１１を車両のフロントガラス側へ押す力（押力）と、表示装置１１１をドライバー側へ引く力（引力）である。
【００１８】
表示領域決定部１０２は、角度情報に基づき、基本表示領域を決定する。基本表示領域については、後述する。
【００１９】
拡大縮小率決定部１０３は、押引力情報に基づき、撮像画像の拡大縮小率を決定する。
【００２０】
図２Ａ、図２Ｂは、車室内における表示装置１１１の設置状態を示す概念図である。
【００２１】
図２Ａは、運転席を横から見た図である。図２Ｂは運転席上部から見た図である。表示装置１１１は、車室内のルームミラーの取付位置に取付部材２０３により設置されている。表示装置１１１は、図２Ａにおいて破線によって示される垂直方向２１０に対し垂直角Θ１、図２Ｂにおいて破線によって示される水平方向２２０に対し水平角Θ２で設置されている。
【００２２】
図２Ａ、図２Ｂは、ドライバーによって角度を調整された表示装置１１１の初期状態を示している。
【００２３】
角度情報は、図２Ａ、図２Ｂに示す状態を例えば、垂直角（Θ１）０度、水平角（Θ２）０度として表現される。
【００２４】
図３Ａ、図３Ｂは、表示領域決定部１０２の動作を説明する図である。
【００２５】
図３Ａの撮像画像３００は、画像処理部１０１に入力される撮像画像の一例を示している。
【００２６】
図３Ａにおいて破線で示される領域は、基本表示領域３０３である。基本表示領域３０３とは、拡大縮小がない場合に、表示画面に表示される撮像画像の領域であり、表示装置１１１の角度に応じて撮像画像３００上を移動する。
【００２７】
表示領域決定部１０２は、角度情報に基づき、基本表示領域３０３の撮像画像３００上の位置を特定するための座標、例えば四隅の点の撮像画像３００上の位置座標を算出する。
【００２８】
表示領域決定部１０２は、例えば角度１度の変化に対し、元の位置から１０ピクセル移動させた位置座標を基本表示領域３０３として算出する。
【００２９】
ドライバーが表示装置１１１を（垂直角０度、水平角０度）の状態から、ドライバーから向かって右端を奥方向に３度回転させた場合、表示領域決定部１０２は、元の位置から右方向に３０ピクセル移動させた位置座標を基本表示領域３０３として算出する。
【００３０】
ドライバーがさらに表示装置１１１を下方向へ１度傾けた場合、表示領域決定部１０２は、算出した座標から、さらに下方向に１０ピクセル移動させた位置座標を基本表示領域３０３として算出する。
【００３１】
図３Ａにおける基本表示領域３０３内の×印は、表示画面上で予め定められた拡大縮小の中心３０４である。拡大縮小の中心３０４は、基本表示領域３０３における相対的な位置が固定されており、撮像画像３００における基本表示領域３０３の位置の移動に伴い、撮像画像３００上の位置座標が移動する。
【００３２】
したがって、ドライバーは表示装置１１１の角度を変更して、撮像画像３００における基本表示領域３０３の位置を移動させることにより、表示画面上の拡大縮小の中心３０４の撮像画像３００上の位置座標を変更することができる。
【００３３】
図３Ｂは、拡大縮小がない場合の表示画面を示している。
【００３４】
次に、図を用いて画像処理装置１００の実施の形態１に関する主要な動作の一例を説明する。
【００３５】
図４は、画像処理装置１００の表示領域決定部１０２と拡大縮小率決定部１０３が画像処理パラメータである基本表示領域の位置座標と拡大縮小率を更新する動作の一例を示すフローチャートである。
【００３６】
表示領域決定部１０２に新たな角度情報が入力された場合（ステップＳ４０１、ＹＥＳ）、表示領域決定部１０２は、入力された角度情報に基づき基本表示領域の位置を決定し、その位置座標を算出する（ステップＳ４０２）。
【００３７】
表示領域決定部１０２に新たな角度情報が入力されない場合（ステップＳ４０１、ＮＯ）、または、表示領域決定部１０２が基本表示領域の位置座標を算出した（ステップＳ４０２）後に、拡大縮小率決定部１０３に押引力情報が入力された場合（ステップＳ４０３、ＹＥＳ）、拡大縮小率決定部１０３は、入力された押引力情報に基づき撮像画像の拡大縮小率を決定する。入力された押引力情報が押力であった場合、拡大縮小率決定部１０３は撮像画像３００の拡大縮小率を例えば５０％に決定する。また、入力された押引力情報が引力であった場合、拡大縮小率決定部１０３は撮像画像３００の拡大縮小率を例えば２００％に決定する（ステップＳ４０４）。
【００３８】
拡大縮小率決定部１０３に押引力情報が入力されない場合（ステップＳ４０３、ＮＯ）、または、拡大縮小率決定部１０３が拡大縮小率を決定した場合、処理を終了する。
【００３９】
画像処理部１０１はカメラ１１０から撮像画像３００の入力があると、画像処理パラメータ、具体的には表示領域決定部１０２が決定した基本表示領域３０３の位置座標と、拡大縮小率決定部１０３が決定した拡大縮小率を取得する。そして、画像処理部１０１は取得した画像処理パラメータに基づいて、撮像画像３００を画像処理し、表示画像を生成する。
【００４０】
具体的には、画像処理部１０１はまず、表示画面すなわち基本表示領域にあらかじめ定められている、撮像画像を拡大縮小する場合にその中心となる位置と、基本表示領域の位置座標とに基づいて、撮像画像において拡大縮小する中心の位置座標を算出する。そして、画像処理部１０１は、撮像画像において拡大縮小する中心の位置座標を中心に、撮像画像を画像処理パラメータである拡大縮小率で拡大縮小する。最後に、画像処理部１０１は、拡大縮小された撮像画像から基本表示領域の位置座標で示される領域を抽出して、表示画像とする。
【００４１】
また、画像処理部１０１はまず、撮像画像を拡大縮小した後に表示画像とすべき領域の抽出をしたが、領域を抽出した後に撮像画像を拡大縮小してもよい。その場合、画像処理部１０１はまず、表示画面すなわち基本表示領域にあらかじめ定められている、撮像画像を拡大縮小する場合にその中心となる位置と、基本表示領域の位置座標と、拡大縮小率とに基づいて、撮像画像において拡大縮小すべき領域を抽出する。そして、画像処理部１０１は、抽出した領域を拡大縮小率で拡大縮小し、表示画像とする。
【００４２】
カメラ１１０からは一定の頻度、例えば１秒間に３０フレームの撮像画像３００が画像処理部１０１に入力される。画像処理部１０１は、例えば、カメラ１１０から撮像画像の入力があるたびに画像生成パラメータを取得し、表示画像を生成する。生成された表示画像は表示装置１１１によって表示される。
【００４３】
図５Ａ〜図５Ｄは、ドライバーによる表示装置１１１の扱いに伴う表示画面の遷移の一例を示す図である。撮像画像の拡大縮小の中心の表示画面上の位置は、表示画面の中心としている。
【００４４】
図５Ａは、初期状態の表示画面である。図５Ｂは、ドライバーが表示装置１１１をドライバーから向かって右端を奥方向（左端を手前方向）に回転させた後の表示画面である。この場合、表示画面上の後方車両の右ヘッドライトの位置が拡大縮小の中心となっている。
【００４５】
図５Ｃは、図５Ｂの状態において表示装置１１１を手前に引いた（表示装置１１１に引力を加えた）後の表示画面である。表示画面上の後方車両の右ヘッドライトの位置を中心に撮像画像が拡大され、表示画面に表示されている。
【００４６】
図５Ｄは、図５Ｂの状態において、表示装置１１１をフロントガラス側に押した（表示装置１１１に押力を加えた）後の表示画面である。後方車両の右ヘッドライトの位置を中心に撮像画像が縮小され、背景を含む広い範囲の撮像画像が表示画面に表示されている。
【００４７】
以上のように本実施の形態における画像処理装置１００では、表示装置１１１の角度に基づいて表示画面に表示する基本表示領域を算出し、あらかじめ表示画面上に定められたた拡大縮小の中心に対応する撮像画像上の位置座標を算出し、表示装置１１１への押引力により拡大縮小率を決定し、算出された基準表示領域と、撮像画像上の拡大縮小中心座標および拡大縮小率に基づいて、撮像画像を画像処理し、表示画像を生成する。
【００４８】
本実施の形態における画像処理装置１００を用いれば、ドライバーは、表示画面に表示される撮像画像の領域を決定する際と、撮像画像を拡大縮小する際とで、同じように表示装置１１１を手に掴んで操作できる。よって、ドライバーは表示装置１１１装置の扱い方を変えることなく、表示される撮像画像の領域を決定したり、撮像画像を拡大縮小したりすることが可能となる。また、ドライバーは、画像装置を押したり引いたりという直観的な操作により、撮像画像を拡大したり縮小したりすることができる。よって、簡易な操作により、表示される撮像画像の領域を決定したり、撮像画像を拡大縮小したりすることが可能となる。
【００４９】
なお、本発明の実施の形態にかかる画像処理装置は、専用のハードウェアによって実現される他に、その機能を実現するためのプログラムをコンピュータが読み取り可能な記録媒体に記録し、この記憶媒体に記録されたプログラムをコンピュータシステムに読み込ませて、実行するものであってもよい。
【００５０】
また、表示領域決定部１０２は、基本表示領域３０３の撮像画像３００上の位置を特定するための座標として、例えば四隅の点の撮像画像３００上の位置座標を算出するとしたが、基本表示領域３０３の撮像画像３００上の位置を特定できるものなら何でもよい。表示領域決定部１０２が、例えば基本表示領域３０３の撮像画像３００上の位置を特定するための座標として、基本表示領域３０３の中心の撮像画像３００上の位置座標を算出するとした場合、画像処理部１０１は、あらかじめ保持する基本表示領域３０３の幅と高さを用いて、表示画像を生成する。
【００５１】
また、あらかじめ定められた倍率で拡大縮小すると説明したが、押引力の強弱に応じて倍率を変化させるように構成してもよい。
【００５２】
また、撮像画像の拡大縮小後に表示装置の角度が変化しても、表示画像が変更されないように構成してもよい。ドライバーは表示画像が拡大縮小された状態で表示装置１１１の角度を初期状態、例えば、自身と正対するように変更し、見やすい角度で拡大縮小された表示画像を見ることが可能となる。
【００５３】
（実施の形態２）
以下、本発明の実施の形態２における画像処理装置について図面を参照しながら説明する。
【００５４】
図６は、本発明の実施の形態２における画像処理装置６００の構成を示すブロック図である。
【００５５】
本実施の形態において、実施の形態１と同様の構成については同一符号を付し、その詳細な説明は省略する。
【００５６】
実施の形態２と実施の形態１との相違点は、実施の形態２における画像処理装置６００が、拡大縮小中心決定部６０１、位置情報提示部６０２、およびモード切替部６０３を有する点である。
【００５７】
拡大縮小中心決定部６０１は、初期値として定められている表示装置１１１の表示画面（以後、単に「表示画面」と呼ぶ）における拡大縮小の中心となる位置を、角度情報に基づき表示画面内を移動させる。
【００５８】
拡大縮小中心決定部６０１は、例えば角度変化１度に対し、表示画面における拡大縮小の中心となる位置を１０ピクセル移動させた位置座標を算出する。
【００５９】
ドライバーが表示装置１１１の角度を変更することによって撮像画像の基本表示領域を決定したあと、表示装置１１１をドライバーから向かって右端を奥方向に３度回転させた場合、拡大縮小中心決定部６０１は、表示画面における拡大縮小の中心の位置として、初期値、または直前の拡大縮小の中心を左方向に３０ピクセル移動させ、その位置座標を位置情報提示部６０２へ出力する。表示画面における拡大縮小の中心の位置座標は、画像処理パラメータとして画像処理部１０１へ入力される。
【００６０】
ドライバーがさらに表示装置１１１を下方向へ１度傾けた場合、拡大縮小中心決定部６０１は、算出した表示画面における拡大縮小の中心の位置から、さらに上方向に１０ピクセル移動させた位置を算出し、位置情報提示部６０２へ出力する。表示画面における拡大縮小の中心の位置座標は、画像処理パラメータとして画像処理部１０１へ入力される。
【００６１】
位置情報提示部６０２は、拡大縮小中心決定部６０１が決定した表示画面における拡大縮小の中心の位置座標をドライバーに提示する。
【００６２】
モード切替部６０３は、画像処理装置６００の外部からモード切替信号を取得する。モード切替部６０３は、外部からのモード切替信号に基づき、角度情報に基づいて表示領域決定部１０２が基本表示領域を決定する表示領域決定モードと、角度情報に基づいて拡大縮小中心決定部６０１が拡大縮小の中心となる位置を決定する中心決定モードとの切替えを行う。
【００６３】
次に、図面を参照しながら画像処理装置６００の実施の形態２に関する主要な動作の一例を説明する。
【００６４】
図７は、画像処理装置６００の表示領域決定部１０２と拡大縮小率決定部１０３、および拡大縮小中心決定部６０１が画像処理パラメータを更新する動作の一例を示すフローチャートである。表示領域決定部１０２と拡大縮小中心決定部６０１の動作はモード切替部６０３によって切り替えられる。
【００６５】
画像処理装置６００に、新たな角度情報が入力された場合（ステップＳ７０１、ＹＥＳ）、モード切替部６０３は、現在のモードに応じて以降の処理を切り替える（ステップＳ７０２）。
【００６６】
現在のモードが表示領域決定モードである場合（ステップＳ７０２、ＹＥＳ）、表示領域決定部１０２は、角度情報に基づき基準表示領域の位置座標を算出する（ステップＳ７０３）。
【００６７】
現在のモードが中心決定モードである場合（ステップＳ７０２、ＮＯ）、拡大縮小中心決定部６０１は、角度情報に基づき表示画面における拡大縮小の中心の位置を算出する（ステップＳ７０４）。
【００６８】
次に、拡大縮小率決定部１０３に押引力情報が入力された場合（ステップＳ７０５、ＹＥＳ）、拡大縮小率決定部１０３は、入力された押引力情報に基づき撮像画像の拡大縮小率を決定する。入力された押引力情報が押力であった場合、拡大縮小率決定部１０３は撮像画像３００の拡大縮小率を例えば５０％に決定する。また、入力された押引力情報が引力であった場合、拡大縮小率決定部１０３は撮像画像３００の拡大縮小率を例えば２００％に決定する（ステップＳ７０６）。
【００６９】
拡大縮小率決定部１０３に押引力情報が入力されない場合（ステップＳ７０５、ＮＯ）、または、拡大縮小率決定部１０３が拡大縮小率を決定した場合、処理を終了する。
【００７０】
画像処理部１０１はカメラ１１０から撮像画像３００の入力があると、画像処理パラメータ、具体的には表示領域決定部１０２が決定した基本表示領域３０３の位置座標、拡大縮小率決定部１０３が決定した拡大縮小率、および拡大縮小中心決定部６０１が決定した表示画面における拡大縮小の中心の位置座標を取得する。そして、画像処理部１０１は取得した画像処理パラメータに基づいて、撮像画像３００から表示画像を生成する。
【００７１】
実施の形態１では、画像処理部１０１は、表示画面すなわち基本表示領域にあらかじめ定められている、撮像画像を拡大縮小する場合にその中心となる位置と、基本表示領域の位置座標とに基づいて、撮像画像において拡大縮小する中心の位置座標を算出している。
【００７２】
実施の形態２では、表示画面すなわち基本表示領域にあらかじめ定められている、撮像画像を拡大縮小する場合にその中心となる位置ではなく、拡大縮小中心決定部６０１が決定した表示画面における拡大縮小の中心の位置と、基本表示領域の位置座標とに基づいて、撮像画像において拡大縮小する中心の位置座標を算出する点が実施の形態１とは異なる。
【００７３】
位置情報提示部６０２は、拡大縮小中心決定部６０１が決定した表示画面における拡大縮小の中心の位置に基づいて、表示画面に拡大縮小の中心の位置を示す情報を重畳表示する。例えば、位置情報提示部６０２は表示装置１１１が表示する表示画面に拡大縮小の中心位置を示す図形、例えば黒丸を重畳表示することによって、拡大縮小の中心位置を表す情報をドライバーに提示する。
【００７４】
図８Ａ〜図９Ｃは本発明の実施の形態２におけるドライバーによる表示装置１１１の扱いに伴う表示画面の遷移の一例を示す図である。
【００７５】
図８Ａは初期状態の表示画面である。図において表示装置１１１にモードを切り替えるためのスイッチ８０１が設けられている。スイッチ８０１は、ドライバーがスイッチ８０１を押しながら、表示画面の角度変更と押引きが可能な位置に設置されている。
【００７６】
ドライバーによってスイッチ８０１が押されることにより、モード切替部６０３がモード切替信号を取得する。スイッチ８０１が押されている間、モード切替部６０３は、モードを中心決定モードにする。スイッチ８０１が押されていない場合、モード切替部６０３は、モードを表示領域決定モードにする。
【００７７】
図８Ｂは、表示領域決定モードにおいて、ドライバーが表示装置１１１をドライバーから向かって右端を奥方向に回転させた後の表示画面である。この場合、表示画面上の後方車両の右ヘッドライトの位置が拡大縮小の中心となっている。表示領域決定モードにおける画像処理装置６００の動作は、実施の形態１と同様である。
【００７８】
図８Ｃは、図８Ｂの状態で、ドライバーがスイッチ８０１を押し、モードを表示領域決定モードから中心決定モードに切り替えた状態を示している。図には、初期値として決められている表示画面内の撮像画像の拡大縮小の中心となる位置を表す情報が表示されている。図８Ｃ中の黒丸印が拡大縮小の中心となる位置８０２を表す情報である。
【００７９】
図９Ａは、中心決定モードにおいて、ドライバーが表示装置１１１の角度を変更し、拡大縮小の中心を後方車両の右ヘッドライトの位置に設定した状態を示している。
【００８０】
図９Ｂは、図９Ａの状態の後に、表示装置１１１を手前に引いた後（表示装置１１１に引力を与えた後）の表示画面である。後方車両の右ヘッドライトを中心に撮像画像が拡大されて表示されている。
【００８１】
図９Ｃは、図９Ａの状態の後に、表示装置１１１をフロントガラス側に押した後（表示装置１１１に押力を与えた後）の表示画面である。後方車両の右ヘッドライトを中心に撮像画像が縮小され、背景を含む広い範囲の撮像画像が表示されている。
【００８２】
以上のように本実施の形態における画像処理装置６００では、表示装置１１１に設けられたスイッチ８０１の押下の有無でモードを切り替える。そして、表示装置１１１の角度の変化に基づいて、表示画面に表示する基本表示領域と、表示画面における拡大縮小の中心の位置を決定する。また、表示装置１１１への押引力により拡大縮小率を決定する。そして、表示領域決定部１０２が決定した基準表示領域と、拡大縮小中心決定部６０１が決定した表示画面における拡大縮小中心座標、および拡大縮小率決定部１０３が決定した拡大縮小率に基づいて撮像画像から表示画像を生成する。また、位置情報提示部６０２は、例えば拡大縮小の中心座標を表示画面に重畳表示することにより、拡大縮小の中心となる位置を表す情報をドライバーに提示する。
【００８３】
これにより、ドライバーは、表示画面に表示される撮像画像の領域を決定する際と、撮像画像を拡大縮小する際と、拡大縮小の中心を決定する際とで、同じように表示装置１１１を手に掴んで操作できる。よって、表示装置１１１の扱い方を変えることなく、表示装置１１１に表示する撮像画像の領域を決定したり、撮像画像を拡大縮小したり、拡大縮小の中心を決定したりすることが可能となる。また、拡大縮小の中心座標を示す情報が提示されるため、ドライバーはその情報を確認しながら拡大縮小の中心座標を決定することができる。よって、簡易な操作により、表示される撮像画像の領域を決定したり、撮像画像を拡大縮小したりすることが可能となる。
【００８４】
また、拡大縮小の中心を表示装置１１１の角度に応じた位置として決定したが、拡大縮小の中心を角度に応じた速度で移動させるように構成してもよい。
【００８５】
また、位置情報提示部６０２が拡大縮小の中心の位置を表す情報を提示する形態として、表示画面上に図形、例えば黒丸を重畳表示する例を用いて説明したが、図形の形状に限定されるものではなく、また、位置を表す情報として図形に限定されるものでもない。表示画面において拡大縮小の中心の輝度を変化させるなど、位置を表すものであれば何でもよい。また、位置情報提示部６０２は表示画面上を移動し、その交点によって拡大縮小の中心位置を示す表示画面の枠に平行な直線状の２本の棒や、拡大縮小の中心位置から表示画面の枠におろした垂線と表示画面の枠との交点の位置が点灯するＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｓｓｉｏｎ  Ｄｉｏｄｅ）などでその機能を実現してもよい。
【００８６】
また、拡大縮小を予め定められた倍率で行うと説明したが、押引力の強弱に応じて拡大縮小率を変化させるように構成してもよい。
【００８７】
また、スイッチ８０１を表示装置１１１のドライバーから向かって左上部に設けて構成を説明したが、スイッチ８０１は、ドライバーがスイッチ８０１を押しながら、表示装置１１１を回転、押引きが可能な位置であればよく、例えば表示画面に対抗する面（裏側）等でもよい。
【００８８】
また、本実施の形態では、スイッチ８０１が押されている間、モードを中心決定モードとしているが、スイッチ８０１が押されている間、モードを表示領域決定モードにしてもよいし、スイッチ８０１を押されるたびにモードを切り替えてもよい。
【００８９】
また、本発明の実施の形態にかかわる画像処理装置は、専用のハードウェアによって実現される他に、その機能を実現するためのプログラムをコンピュータが読み取り可能な記録媒体に記録し、この記憶媒体に記録されたプログラムをコンピュータシステムに読み込ませて、実行するものであってもよい。
【００９０】
（実施の形態３）
以下、本発明の実施の形態３における画像処理装置について図面を参照しながら説明する。
【００９１】
図１０は、本発明の実施の形態３における画像処理装置１０００の構成を示すブロック図である。本実施の形態において、実施の形態１、実施の形態２と同様の構成については同一符号を付し、その詳細な説明は省略する。
【００９２】
実施の形態３と実施の形態１との相違点は、実施の形態３における画像処理装置１０００が、拡大縮小中心決定部１００１、および位置情報提示部６０２を有する点である。
【００９３】
また、実施の形態３と実施の形態１とのさらなる相違点は、実施の形態３における表示装置１１１のセンサー１００４が、角度情報、押引力情報に加え、表示装置１１１にかかる移動力に関する情報（以後、移動力情報と呼ぶ）を検出する点である。
【００９４】
表示装置１１１にかかる移動力とは、ドライバーが表示装置１１１を上下左右方向へ移動させようとする力である。
【００９５】
実施の形態３において、表示装置１１１のセンサー１００４は、移動力として、例えば表示装置１１１と取付部材との間に発生する上下左右方向の圧力の変化を検出する。
【００９６】
拡大縮小中心決定部１００１は、初期値として決められている表示装置１１１の表示画面（以後、単に「表示画面」と呼ぶ）において撮像画像の拡大縮小の中心となる位置を、移動力情報に基づき移動させ、決定する。拡大縮小中心決定部１００１は、例えば、入力された移動力の回数に基づき、拡大縮小の中心となる位置を移動させる。実施の形態２における拡大縮小中心決定部６０１は、モードが中心決定モードである場合に、初期値として定められている表示画面における拡大縮小の中心となる位置を、角度情報に基づき表示画面内を移動させ、決定する。本実施の形態においてはモードは存在せず、拡大縮小中心決定部１００１は、初期値として定められている表示画面における拡大縮小の中心となる位置を移動力情報に基づき表示画面内を移動させ、決定する。
【００９７】
拡大縮小中心決定部１００１は、例えば、１回の移動力の入力に対し表示画面において拡大縮小の中心となる位置を１０ピクセル移動させた位置座標を算出する。
【００９８】
ドライバーが表示装置１１１をドライバーから向かって右方向に３回移動力をかけた場合、拡大縮小中心決定部１００１は、画像拡大縮小の中心となる位置の座標として、初期値、または直前の中心となる位置から右方向に３０ピクセル移動させた位置座標を算出し、位置情報提示部６０２へ出力する。表示画面における拡大縮小の中心の位置座標は、画像処理パラメータとして画像処理部１０１へ入力される。
【００９９】
ドライバーがさらに表示装置１１１を下方向へ１回移動力をかけた場合、拡大縮小中心決定部１００１は、算出した座標から、さらに下方向に１０ピクセル移動させた座標を算出し、位置情報提示部６０２へ出力する。表示画面における拡大縮小の中心の位置座標は、画像処理パラメータとして画像処理部１０１へ入力される。
【０１００】
位置情報提示部６０２の動作は、実施の形態２と同様である。
【０１０１】
次に、図面を参照しながら画像処理装置１０００の実施の形態３に関する主要な動作の一例を説明する。
【０１０２】
図１１は、画像処理装置１０００の表示領域決定部１０２と拡大縮小率決定部１０３、および拡大縮小中心決定部１００１が画像処理パラメータを更新する動作の一例を示すフローチャートである。
【０１０３】
ステップＳ４０１、Ｓ４０２の動作は、実施の形態１と同様である。次に、拡大縮小中心決定部１００１に移動力情報が入力された場合（ステップＳ１１０１、ＹＥＳ）、拡大縮小中心決定部１００１は、移動力情報に基づき表示画像における拡大縮小の中心となる位置を決定し、位置情報提示部６０２へ出力する（ステップＳ１１０２）。
【０１０４】
拡大縮小中心決定部１００１に移動力情報の入力がない場合（ステップＳ１１０１、ＮＯ）、または、ステップＳ１１０２において拡大縮小の中心となる位置が決定された場合の終了までの動作（ステップＳ７０５、ステップＳ７０６）は実施の形態２と同様である。
【０１０５】
カメラ１１０から撮像画像３００が入力された画像処理部１０１が、画像生成パラメータに基づいて撮像画像３００から表示画像を生成する処理については、実施の形態２と同様である。
【０１０６】
図１２Ａ〜図１３Ｂは本発明の実施の形態３におけるドライバーによる表示装置１１１の扱いに伴う表示画面の遷移の一例を示す図である。
【０１０７】
図１２Ａは、初期状態の表示画面である。図１２Ｂは、ドライバーが表示装置１１１をドライバーに向かって右端を奥方向に回転させた後の表示画面である。表示画面における後方車両の右ヘッドライトの位置が拡大縮小の中心となっている。
【０１０８】
図１２Ｃは、図１２Ｂの状態で、ドライバーが表示装置１１１に左方向に移動力をかけた状態を示す図である。図における黒丸は、初期値として決められている表示画面において撮像画像の拡大縮小の中心１２０１となる位置を表す情報である。
【０１０９】
図１３Ａは、図１２Ｃにおいて、ドライバーが表示装置１１１をドライバーに対し左方向に移動力をかけ、拡大縮小の中心を右ヘッドライトの位置に設定した状態を示している。
【０１１０】
図１３Ｂは、図１３Ａの状態で、表示装置１１１を手前に引いた場合（表示装置１１１に引力を加えた場合）の表示画面である。表示画面における後方車両の右ヘッドライトの位置を中心に撮像画像が拡大されて表示されている。
【０１１１】
図１３Ｃは、図１３Ａの状態で、表示装置１１１をフロントガラス側に押した場合（表示装置１１１に押力を加えた場合）の表示画面である。表示画面における後方車両の右ヘッドライトの位置を中心に撮像画像が縮小され、背景を含む広い範囲の撮像画像が表示されている。
【０１１２】
以上のように本実施の形態における画像処理装置１０００では、表示装置１１１の角度の変化に基づいて表示画面に表示する基本表示領域を決定し、表示装置１１１にかかる左右上下方向の移動力に基づいて表示画像において撮像画像の拡大縮小の中心となる位置を決定し、表示装置１１１に対する押引力により撮像画像を拡大縮小させる。
【０１１３】
これにより、ドライバーは、表示画面に表示される撮像画像の領域を決定する際と、撮像画像を拡大縮小する際と、拡大縮小の中心を決定する際とで、同じように表示装置１１１を手に掴んで操作できる。よって、表示装置１１１の扱い方を変えることなく、表示装置１１１に表示する撮像画像の領域を決定したり、撮像画像を拡大縮小したり、拡大縮小の中心を決定したりすることが可能となる。例えば、ドライバーは表示装置１１１を手で掴んだ状態で、表示画面の角度を変更することにより表示画面に表示される基本表示領域を変更し、表示画面を左右上下方向に移動させようとすることで拡大縮小の中心位置を変更し、表示画面を手前に引いたり奥に押したりすることで表示画面に表示される表示画像を拡大したり縮小したりすることができる。よって、簡易な操作により、表示される撮像画像の領域を決定したり、撮像画像を拡大縮小したりすることが可能となる。
【０１１４】
なお、本実施の形態では拡大縮小中心決定部１００１に入力された移動力の回数に基づき表示画像における撮像画像の拡大縮小の中心となる位置を移動させたが、センサー１００４が検出した移動力がかかる時間の長さ、移動力値に基づき、表示画像における撮像画像の拡大縮小の中心となる位置を移動させる構成としてもよい。
【０１１５】
また、表示装置１１１を左方向に押すことで、表示画像における撮像画像の拡大縮小の中心となる位置が右に移動する例を示したが、表示画像における撮像画像の拡大縮小の中心となる位置は左に移動してもよい。
【０１１６】
また、本発明の実施の形態にかかわる車載用表示装置は、専用のハードウェアによって実現される他に、その機能を実現するためのプログラムをコンピュータが読み取り可能な記録媒体に記録し、この記憶媒体に記録されたプログラムをコンピュータシステムに読み込ませて、実行するものであってもよい。
【産業上の利用可能性】
【０１１７】
本発明の画像処理装置は、車両の電子ミラーとして有用である。
【符号の説明】
【０１１８】
１００，６００，１０００    画像処理装置
１０１    画像処理部
１０２    表示領域決定部
１０３    拡大縮小率決定部
１０４，１００４    センサー
１１０    カメラ
１１１    表示装置
２０３    取付部材
２１０    垂直方向
２２０    水平方向
３００    撮像画像
３０３    基本表示領域
３０４，１２０１    中心
６０１，１００１    拡大縮小中心決定部
６０２    位置情報提示部
６０３    モード切替部
８０１    スイッチ
８０２    位置
【図１】
0005938703.tif 000002
【図４】
0005938703.tif 000003
【図６】
0005938703.tif 000004
【図７】
0005938703.tif 000005
【図１０】
0005938703.tif 000006
【図１１】
0005938703.tif 000007
【図２Ａ】
0005938703.tif 000008
【図２Ｂ】
0005938703.tif 000009
【図３Ａ】
0005938703.tif 000010
【図３Ｂ】
0005938703.tif 000011
【図５Ａ】
0005938703.tif 000012
【図５Ｂ】
0005938703.tif 000013
【図５Ｃ】
0005938703.tif 000014
【図５Ｄ】
0005938703.tif 000015
【図８Ａ】
0005938703.tif 000016
【図８Ｂ】
0005938703.tif 000017
【図８Ｃ】
0005938703.tif 000018
【図９Ａ】
0005938703.tif 000019
【図９Ｂ】
0005938703.tif 000020
【図９Ｃ】
0005938703.tif 000021
【図１２Ａ】
0005938703.tif 000022
【図１２Ｂ】
0005938703.tif 000023
【図１２Ｃ】
0005938703.tif 000024
【図１３Ａ】
0005938703.tif 000025
【図１３Ｂ】
0005938703.tif 000026
【図１３Ｃ】
0005938703.tif 000027