(57)【要約】【課題】画像データの解像度変換に伴う画質劣化を抑制すること。【解決手段】画像補間装置３１０は、補間対象領域に位置する画素および該画素の近傍画素に対する当該画素の特徴量を算出する特徴量算出部３１３と、補間対象領域に位置する画素のうち特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値以上であれば、当該画素の画素値を前記補間画素の画素値として決定する画像補間処理部３１４と、画像補間処理部３１４によって補間画素が補間された画像データに対して解像度変換をおこなう解像度変換処理部３１５と、解像度変換処理部３１５によって解像度変換処理がおこなわれた画像データが少なくとも１つ含まれた複数の画像データを所定の表示形態に並べ替えて表示するように制御する表示制御処理部３１６とを備える。【選択図】        図１０
2006154759.tif 000002
【特許請求の範囲】
【請求項１】
補間対象領域に位置する画素および該画素の近傍画素の画素値をもとに、補間対象領域に補間する補間画素の画素値を決定する画像補間処理をおこなう画像補間装置であって、
前記補間対象領域に位置する画素および該画素の近傍画素に基づき当該画素の特徴量を算出する特徴量算出手段と、
前記特徴量算出手段によって算出された補間対象領域に位置する画素の特徴量をもとに、前記補間画素の画素値を決定する画像補間処理をおこなう画素補間処理手段と、
を備えたことを特徴とする画像補間装置。
【請求項２】
前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴量算出手段によって算出された特徴量が閾値以上である画素の画素値を前記補間画素の画素値として決定することを特徴とする請求項１に記載の画像補間装置。
【請求項３】
前記特徴量算出手段は、前記補間対象領域に位置する画素間の画素値の差を算出し、
前記画像補間処理手段は、前記特徴量算出手段によって算出された補間対象領域に位置する画素間の画素値の差の絶対値が閾値以上であれば、該補間対象領域に位置する画素の画素値を平均化した画素値を前記補間画素の画素値として決定することを特徴とする請求項１または２に記載の画像補間装置。
【請求項４】
前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴量算出手段によって算出された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値以上であれば、当該画素の画素値を前記補間画素の画素値として決定することを特徴とする請求項１、２または３に記載の画像補間装置。
【請求項５】
前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴量算出手段によって算出された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値未満であれば、前記補間対象領域に位置する画素の画素値を平均化した画素値を前記補間画素の画素値として決定することを特徴とする請求項４に記載の画像補間装置。
【請求項６】
前記画像補間処理手段によって補間画素が補間された画像データに対して解像度変換処理をおこなう解像度変換処理手段をさらに備えたことを特徴とする請求項１〜５のいずれか一つに記載の画像補間装置。
【請求項７】
前記解像度変換処理手段によって解像度変換処理がおこなわれた画像データが少なくとも１つ含まれた複数の画像データを所定の表示形態に並べ替えて表示するように制御する表示制御手段をさらに備えたことを特徴とする請求項６に記載の画像補間装置。
【請求項８】
複数の視方向に対し個別の画像を単一画面上に表示する表示手段と、
前記画像の補間対象領域に位置する画素および該画素の近傍画素に基づき当該画素の特徴量を算出する特徴量算出手段と、
前記特徴量算出手段によって算出された補間対象領域に位置する画素の特徴量をもとに、補間画素の画素値を決定する画素補間処理手段と、
前記画素補間処理手段によって決定された補間画素の画素値によって補間画像を生成し、前記表示手段に該補間画像を表示させる表示制御手段とを備えることを特徴とする表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、補間対象領域に位置する画素および該画素の近傍画素の画素値をもとに、補間対象領域に補間する補間画素の画素値を決定する画像補間処理をおこなう画像補間装置、および画像補間処理を行なった画像を表示する表示装置に関する。
【背景技術】
【０００２】
特許文献１及び特許文献２は、１台の液晶ディスプレイ（ＬＣＤ）で２画面を同時に表示することができ、例えば、運転席と助手席とからそれぞれ異なる画面を見ることができる表示装置を開示している。また特許文献３及び特許文献４は、２種類の映像を、同時に、同一画面に表示することできる２画面表示装置を開示している。
【０００３】
ところで、複数の映像ソースから表示部に対する表示要求を受け付けた場合に、それぞれの映像を表示しようとしたならば、各映像の画像データに対して解像度変換（例えば、各映像の画像データの水平解像度を１／２にして「２画面表示」にする解像度変換）をおこなう必要がある。この時、単純に画素を間引く解像度変換をおこなったのでは、映像の表示内容によっては、理解不可能な映像になってしまうことがある。
【０００４】
このため、特許文献５に開示された画像表示装置のように、補間対象領域に位置する画素および該画素の近傍画素の画素値をもとに、補間対象領域に補間する補間画素の画素値を決定する画像補間処理がおこなわれている。具体的には、画素データを補間する位置の周辺の複数画素データの平均または加重平均を算出して補間データを作成する。
【０００５】
【特許文献１】特開平６−１８６５２６号公報
【特許文献２】特開２０００−１３７４４３号公報
【特許文献３】特開平１１−３３１８７６号公報
【特許文献４】特開平９−４６６２２号公報
【特許文献５】特開２００４−１０４３６８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
この従来技術（特許文献５）によれば、単純に画素を間引く解像度変換をおこなうのに比較して、解像度変換に伴う画質劣化を抑制することができる。
【０００７】
しかしながら、上記の従来技術では、画素データを補間する位置の周辺の複数画素データを平均または加重平均した補間データを画一的に作成するので、画像を特徴付ける画素が不明瞭に加工された補間データが作成されることとなり、画像データの解像度変換に伴って画質が著しく劣化するという問題点があった。
【０００８】
例えば、上記の従来技術は、隣接画素で輝度レベルが乖離している場合でも、この画素と周辺の画素とが平均または加重平均された補間データを作成するため、オリジナル画像で画像を特徴付ける画素の輝度レベルが周辺の画素の輝度レベルと平滑化され、画像を特徴付ける画素が不明瞭に加工された補間データが作成されることとなり、画像データに解像度変換がおこなわれた場合に、画質が著しく劣化するという問題点があった。
【０００９】
そこで、本発明は、上述した従来技術による課題（問題点）を解消するためになされたものであり、画像データの解像度変換に伴う画質劣化を抑制することができる画像補間装置および表示装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上述した課題を解決し、目的を達成するために、請求項１の発明に係る画像補間装置は、補間対象領域に位置する画素および該画素の近傍画素の画素値をもとに、補間対象領域に補間する補間画素の画素値を決定する画像補間処理をおこなう画像補間装置であって、前記補間対象領域に位置する画素および該画素の近傍画素に基づき当該画素の特徴量を算出する特徴量算出手段と、前記特徴量算出手段によって算出された補間対象領域に位置する画素の特徴量をもとに、前記補間画素の画素値を決定する画像補間処理をおこなう画素補間処理手段と、を備えたことを特徴とする。
【００１１】
また、請求項２の発明に係る画像補間装置は、請求項１の発明において、前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴量算出手段によって算出された特徴量が閾値以上である画素の画素値を前記補間画素の画素値として決定することを特徴とする。
【００１２】
また、請求項３の発明に係る画像補間装置は、請求項１または２の発明において、前記特徴量算出手段は、前記補間対象領域に位置する画素間の画素値の差を算出し、前記画像補間処理手段は、前記特徴量算出手段によって算出された補間対象領域に位置する画素間の画素値の差の絶対値が閾値以上であれば、該補間対象領域に位置する画素の画素値を平均化した画素値を前記補間画素の画素値として決定することを特徴とする。
【００１３】
また、請求項４の発明に係る画像補間装置は、請求項１、２または３の発明において、前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴量算出手段によって算出された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値以上であれば、当該画素の画素値を前記補間画素の画素値として決定することを特徴とする。
【００１４】
また、請求項５の発明に係る画像補間装置は、請求項４の発明において、前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴量算出手段によって算出された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値未満であれば、前記補間対象領域に位置する画素の画素値を平均化した画素値を前記補間画素の画素値として決定することを特徴とする。
【００１５】
また、請求項６の発明に係る画像補間装置は、請求項１〜５のいずれか一つの発明において、前記画像補間処理手段によって補間画素が補間された画像データに対して解像度変換処理をおこなう解像度変換処理手段をさらに備えたことを特徴とする。
【００１６】
また、請求項７の発明に係る画像補間装置は、請求項６の発明において、前記解像度変換処理手段によって解像度変換処理がおこなわれた画像データが少なくとも１つ含まれた複数の画像データを所定の表示形態に並べ替えて表示するように制御する表示制御手段をさらに備えたことを特徴とする。
【００１７】
また、請求項８の発明に係る表示装置は、複数の視方向に対し個別の画像を単一画面上に表示する表示手段と、前記画像の補間対象領域に位置する画素および該画素の近傍画素に基づき当該画素の特徴量を算出する特徴量算出手段と、前記特徴量算出手段によって算出された補間対象領域に位置する画素の特徴量をもとに、補間画素の画素値を決定する画素補間処理手段と、前記画素補間処理手段によって決定された補間画素の画素値によって補間画像を生成し、前記表示手段に該補間画像を表示させる表示制御手段とを備えることを特徴とする。
【発明の効果】
【００１８】
本発明によれば、補間対象領域に位置する画素および該画素の近傍画素に基づき当該画素の特徴量を算出し、算出された補間対象領域に位置する画素の特徴量をもとに、補間画素の画素値を決定する画像補間処理をおこなうこととしたので、画像データの解像度変換に伴う画質劣化を抑制することが可能な画像補間装置が得られるという効果を奏する。
【００１９】
また、本発明によれば、補間対象領域に位置する画素のうち特徴量が閾値以上である画素の画素値を補間画素の画素値として決定することとしたので、オリジナル画像で画像を特徴付ける画素の画素値を補間画素の画素値として優先的に採用することができ、画像データの解像度変換に伴う画質劣化を抑制することが可能な画像補間装置が得られるという効果を奏する。さらに、これに関連して、オリジナル画像で画像を特徴付ける画素の画素値を平均または加重平均などの加工をおこなわず採用することで、オリジナル画像（すなわち、解像度変換をおこなわれる前の元画像）のイメージを容易に維持することが可能になる。
【００２０】
また、本発明によれば、補間対象領域に位置する画素間の画素値の差を算出し、算出された補間対象領域に位置する画素間の画素値の差の絶対値が閾値以上であれば、該補間対象領域に位置する画素の画素値を平均化した画素値を補間画素の画素値として決定することとしたので、局部的に生じる輝度レベルの大差を平滑化することができ、画像データの解像度変換に伴う画質劣化を効果的に抑制することが可能な画像補間装置が得られるという効果を奏する。
【００２１】
また、本発明によれば、補間対象領域に位置する画素のうち特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値以上であれば、当該画素の画素値を補間画素の画素値として決定することとしたので、オリジナル画像で画像を特徴付けている蓋然性が高い画素を補間対象領域の中から抽出し、該抽出した画素の画素値を補間画素の画素値としてより優先的に採用することができ、画像データの解像度変換に伴う画質劣化をより実効的に抑制することが可能な画像補間装置が得られるという効果を奏する。
【００２２】
また、本発明によれば、補間対象領域に位置する画素のうち特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値未満であれば、補間対象領域に位置する画素の画素値を平均化した画素値を補間画素の画素値として決定することとしたので、隣接画素の輝度レベルが乖離していない場合に大局的な画像補間処理をおこなうことができ、画像データの解像度変換に伴う画質劣化を効果的に抑制することが可能な画像補間装置が得られるという効果を奏する。
【００２３】
また、本発明によれば、補間画素が補間された画像データに対して解像度変換処理をおこなうこととしたので、画像データの画質劣化を抑制しつつ、解像度変換をおこなうことが可能な画像補間装置が得られるという効果を奏する。
【００２４】
また、本発明によれば、解像度変換処理がおこなわれた画像データが少なくとも１つ含まれた複数の画像データを所定の表示形態に並べ替えて表示するように制御することとしたので、新たな構成を設けることなく、１つの表示部に複数の画像データを多様な表示形態で表示することが可能な画像補間装置が得られるという効果を奏する。
【００２５】
また、本発明によれば、複数の視方向に対し個別の画像を単一画面上に表示する場合に、画像の補間対象領域に位置する画素および該画素の近傍画素に基づき当該画素の特徴量を算出し、算出された補間対象領域に位置する画素の特徴量をもとに補間画素の画素値を決定する画像補間処理をおこない、補間画素の画素値によって補間画像を生成することとしたので、画像データの解像度変換に伴う画質劣化を抑制することが可能な表示装置が得られるという効果を奏する。
【発明を実施するための最良の形態】
【００２６】
以下、本発明の実施の形態を図面にしたがって説明する。但し、本発明の技術的範囲はそれらの実施の形態に限定されず、特許請求の範囲に記載された発明とその均等物に及ぶ物である。
【００２７】
図１は、本発明に係る表示装置の概念図である。図中、１は第１の画像ソース、２は第２の画像ソース、３は第１の画像ソースからの第１の画像データ、４は第２の画像ソースからの第２の画像データ、５は表示制御部、６は表示データ、７は表示部（例えば液晶パネル等）、８は第１の画像ソース１に基づく第１の表示画像、９は第２の画像ソース２に基づく第２の表示画像、１０は表示部７に対して左側に位置する観察者（利用者）、１１は表示部７に対して右側に位置する観察者（利用者）である。
【００２８】
図１の概念図は、表示部７に対する観察者１０、１１の相対的位置に応じて、換言すれば表示部７に対する視野角に応じて、観察者１０は第１の表示画像８を、観察者１１は第２の表示画像９を実質的に同時に見ることができ、しかも各々の表示画像８、９は表示部７の表示面全体に渡ってみることができることを概念的に示している。図１において、第１の画像ソース１は例えばＤＶＤプレーヤの映画画像やテレビ受信機の受信画像等、第２の画像ソース２は例えばカーナビゲーション装置の地図やルート案内画像等であり、それぞれの第１の画像データ３及び第２の画像データ４は表示制御部５に供給され、それらを表示部７で実質的に同時に表示できるように処理される。
【００２９】
表示制御部５から表示データ６を供給される表示部７は、後述する視差バリアを備えた液晶パネル等で構成される。表示部７の横方向の総画素の半数が第１の画像ソース１に基づく第１の表示画像８の表示に、残りの半数の画素が第２の画像ソース２に基づく第２の表示画像９の表示に使用される。表示部７に対して左側に位置する観察者１０には、第１の表示画像８に対応する画素のみが見え、第２の表示画像９は表示部７の表面に形成されている視差バリアによって遮られて実質的に見えない。一方、表示部７に対して右側に位置する観察者１１には、第２の表示画像９に対応する画素のみが見え、第１の表示画像８は視差バリアにより遮られて実質的に見えない。尚、視差バリアについては、例えば特許文献６、特許文献７に開示された構成を応用できる。
【００３０】
【特許文献６】特開平１０−１２３４６２号公報
【特許文献７】特開平１１−８４１３１号公報
【００３１】
係る構成により、単一の画面で左右の利用者に異なる情報やコンテンツを提供することができる。もちろん、第１、第２の画像ソースが同じであれば、従来どおり左右の利用者が同じ画像を見ることもできる。
【００３２】
図２は、本発明に係るマルチビュー表示装置の車両への搭載例を示す斜視図である。図中、１２は助手席、１３は運転席、１４はウインドシールド、１５は操作部、１６はスピーカである。
【００３３】
図１のマルチビュー表示装置の表示部７は、例えば図２に示すように、運転席１３と助手席１２とのほぼ中央のダッシュボード部分に配置される。マルチビュー表示装置に対する各種操作は、表示部７の表面に一体的に形成したタッチパネル（図示せず）や操作部１５又は、赤外線又は無線リモートコントローラ（図示せず）の操作によって行なわれる。車両の各ドアにはスピーカ１６が配置され、表示画像に連動した音声や警告音等が出力される。
【００３４】
運転席１３に図１の観察者１１が、助手席１２には観察者１０が座る。表示部７に対する第１視方向（運転席側）から見ることができる画像は例えばカーナビゲーション装置の地図等の画像であり、実質的に同時に第２視方向（助手席側）から見ることができる画像は例えばテレビ受信画像やＤＶＤムービー画像である。従って、運転席１３の運転者がカーナビゲーションによる運転支援を受けるのと同時に助手席１２の同乗者はテレビやＤＶＤを楽しむことができる。しかもそれぞれの画像は例えば７インチの画面全体を使用して表示されるため、従来のマルチウインドウ表示のように画面サイズが小さくなることもない。つまり、運転者、同乗者にとっては、あたかも各々に独立した専用のディスプレイがあるかの如く、それぞれに最適な情報やコンテンツが提供されるのである。
【００３５】
図３は、表示部７の断面構造の概略図である。図中、１００は液晶パネル、１０１はバックライト、１０２は液晶パネルのバックライト側に設置された偏光板、１０３は液晶パネルの発光方向側の前面に配置された偏光板、１０４はＴＦＴ（Thin Film Transistor）基板、１０５は液晶層、１０６はカラーフィルター基板、１０７はガラス基板、１０８は視差バリアである。液晶パネル１００は、ＴＦＴ基板１０４とそれに対向して配置されるカラーフィルター基板１０６の間に液晶層１０５を挟持した一対の基板と、その発光方向側の前面に配置された視差バリア１０８とガラス基板１０７とを、２枚の偏光板１０２・１０３の間に挟んだ構成となっており、バックライト１０１からやや離隔して配設される。また、液晶パネル１００は、ＲＧＢ色（三原色）構成される画素を有する。
【００３６】
液晶パネル１００の各画素は、左側（助手席側）表示用と、右側（運転席側）表示用に分けられて表示制御される。そして、左側（助手席側）表示用画素は、視差バリア１０８により右側（運転席側）への表示は遮断され、左側（助手席側）からは見えるようになっている。また、右側（運転席側）表示用画素は、視差バリア１０８により左側（助手席側）への表示が遮断され、右側（運転席側）からは見えるようになっている。これによって、運転席と同乗者に異なった表示を提供することが可能となる。つまり、運転者にはナビゲーションの地図情報を与え、同時に同乗者にはＤＶＤの映画等を見せることが可能となる。なお、視差バリア１０８、前記液晶パネルの各画素の構成を変更すれば、３方向等、複数方向に異なった画像を表示する構成も可能である。また、視差バリア自体を電気的に駆動可能な液晶シャッター等で構成して視野角を可変するようにしてもよい。
【００３７】
図４は、表示パネルを正面から見た構造の概略図であり、図３は図４中のＡ−Ａ’断面である。図中、１０９は左側（助手席側）表示用の画素、１１０は右側（運転席側）表示用の画素である。図３及び図４は、例えば横方向に８００画素、縦方向に４８０画素並べられた液晶パネル１００の一部を表す。左側（助手席側）表示用の画素１０９と右側（運転席側）表示用の画素１１０は縦方向にグループ化され、交互に並んでいる。視差バリア１０８は、横方向にある間隔で配置され、縦方向には一様である。これによって、左側から表示パネルを見ると、視差バリア１０８が右側用画素１１０を覆い隠して、左側用画素１０９が見える。また同様に右側から見ると、視差バリア１０８が左側用画素１０９を覆い隠して、右側用画素１１０が見える。さらに正面付近では、左側用画素１０９と右側用画素１１０の両方が見えるため、左側表示画像と右側表示画像とが実質的に重なって見える。ここで、図４中の交互に並んだ左側用画素１０９及び右側用画素１１０は、図３のようにＲＧＢ色を有しているが、各グループ縦方向内は、Ｒ列、Ｇ列、Ｂ列のように単色で構成されていても良いし、ＲＧＢが複数混じった例として構成されていてもよい。
【００３８】
図５はＴＦＴ基板１０４の概略を示す回路図である。１１１は表示パネル駆動部、１１２は走査線駆動回路、１１３はデータ線駆動回路、１１４はＴＦＴ素子、１１５〜１１８はデータ線、１１９〜１２１は走査線、１２２は画素電極、１２３はサブピクセルである。図５に示すように、サブピクセル１２３は各データ線１１５〜１１８及び各走査線１１９〜１２１によって囲まれた領域を一単位とし、複数形成される。各サブピクセルには、液晶層１０５に電圧を印加する画素電極１２２とそれをスイッチング制御するＴＦＴ素子１１４が形成されている。表示パネル駆動部１１１は走査線駆動回路１１２及びデータ線駆動回路１１３の駆動タイミングを制御する。走査線駆動回路１１２はＴＦＴ素子１１４の選択走査を行い、またデータ線駆動回路１１３は画素電極１２２への印加電圧を制御する。
【００３９】
前記複数のサブピクセルは、第１の画像データと第２の画像データの合成データもしくは、第１と第２の個々の画像データに基づいて、例えばデータ線１１５と１１７に第１の画素データ（左側画像表示用）を、またデータ線１１６と１１８に第２の画素データ（右側画像表示用）を送信することによって、第１の画像を表示する第１の画像データ群と第２の画像を表示する第２の画像データ群が形成される。
【００４０】
図６は、本発明に係わる表示装置の概略を示すブロック図であり、いわゆる Audio Visual Navigation 複合機への適用例である。図中、１２４はタッチパネル、２００は制御部、２０１はＣＤ／ＭＤ再生部、２０２はラジオ受信部、２０３はＴＶ受信部、２０４はＤＶＤ再生部、２０５はＨＤ（Hard Disk）再生部、２０６はナビゲーション部、２０７は分配回路、２０８は第１の画像調整回路、２０９は第２の画像調整回路、２１０は音声調整回路、２１１は画像出力部、２１２はＶＩＣＳ情報受信部、２１３はＧＰＳ情報受信部、２１４はセレクタ、２１５は操作部、２１６はリモコン送受信部、２１７はリモコン、２１８はメモリ、２１９は外部音声／映像入力部、２２０はカメラ、２２１は明るさ検知手段、２２２は乗員検知手段、２２３はリア表示部、２２４はＥＴＣ車載器、２２５は通信ユニットである。
【００４１】
表示部７は、タッチパネル１２４、液晶パネル１００及びバックライト１０１から構成される。表示部７の液晶パネル１００は、これまでに述べてきたように、第１視方向として運転席側から見られる画像と、第２視方向として助手席側から見られる画像とを、実質的に同時に表示することが可能となっている。尚、表示部７には、液晶パネル以外のフラットパネルディスプレイ、例えば有機ＥＬディスプレイパネル、プラズマディスプレイパネル、冷陰極フラットパネルディスプレイ等を用いることもできる。
【００４２】
制御部２００は、各種ソース（ＣＤ／ＭＤ再生部２０１、ラジオ受信部２０２、ＴＶ受信部２０３、ＤＶＤ再生部２０４、ＨＤ再生部２０５及びナビゲーション部２０６）からの画像や音声を、分配回路２０７により、画像であれば第１の画像調整回路２０８及び第２の画像調整回路２０９に、音声であれば音声調整回路２１０にそれぞれ分配させる。そして、第１及び第２の画像調整回路２０８、２０９では、輝度や色調、コントラストなどが調整され、調整された各画像を画像出力部２１１にて、表示部７に表示させる。また音声調整回路２１０では、各スピーカへの分配や音量、音声が調整され、調整された音声が、スピーカ１６から出力される。
【００４３】
図７は、画像出力部２１１の概略を示すブロック図である。図中、２２６は第１の書込回路、２２７は第２の書込回路、２２８はＶＲＡＭ（Video RAM）である。
【００４４】
画像出力部２１１は、例えば図７に示すように、第１の書込回路２２６と第２の書込回路２２７とＶＲＡＭ（Video RAM）２２８と表示パネル駆動部１１１とを備えている。例えば、第１の書込回路２２６は、第１の画像調整回路２０８で調整された画像データのうち奇数列に対応する画像データ（即ち、図１の第１の表示画像８用の画像データ）を、第２の書込回路２２７は、（第２の画像調整回路２０９で調整された画像データのうち偶数列に対応する画像データ（即ち、図１の第２の表示画像９用の画像データ）をもとにし、それぞれＶＲＡＭ２２８における該当する領域に書き込む。また表示パネル駆動部１１１は液晶パネル１００を駆動する回路であり、ＶＲＡＭ２２８に保持されている画像データ（第１の画像データと第２の画像データの合成データ）に基づいて、液晶表示パネル１００の対応する画素を駆動する。尚、ＶＲＡＭ２２８には第１の画像データと第２の画像データの合成されたマルチビュー表示用の画像に対応するように画像データの書き込みが行なわれているので、駆動回路は一つでよく、その動作も通常の液晶表示装置の駆動回路の動作と同じである。また別の構成として、第１の画像データと第２の画像データを合成せずに、それぞれの画像データに基づいて、液晶表示パネルの対応する画素を駆動する第１の表示パネル駆動回路及び第２の表示パネル駆動回路を用いることも考えられる。
【００４５】
ここで、図６で示した各種ソースの一例について説明をすると、ＨＤ再生部２０５を選択した場合、ハードディスク（ＨＤ）に記憶されたＭＰ３ファイル等の音楽データやＪＰＥＧファイル等の画像データ、ナビゲーション用の地図データ等か読み出され、音楽データを選択するためのメニュー表示や画像データを表示部７に表示させることができる。
【００４６】
ナビゲーション部２０６は、ナビゲーションの為に利用される地図情報を記憶した地図情報記憶部を備え、ＶＩＣＳ情報受信部２１２、ＧＰＳ情報受信部２１３から情報を入手し、ナビゲーション動作の為の画像を作成し、表示させることができる。またＴＶ受信部２０３は、アンテナからセレクタ２１４を介して、アナログＴＶ放送波及びデジタルＴＶ放送波を受信する。
【００４７】
図８は制御部２００の概略を示すブロック図である。図中、２２９はインターフェース、２３０はＣＰＵ、２３１は記憶部、２３２はデータ記憶部である。
【００４８】
制御部２００は分配回路２０７並びに各種ソースを制御し、選択された２つのソースもしくは１つのソースについて表示を行なわせる。また制御部２００は、これら各種ソースをコントロールするための操作メニュー表示を表示部７に表示させることも行なっている。ここで、図８で示すように、制御部２００はマイクロプロセッサなどで構成され、インターフェース２２９を介して、表示装置内の各部や各回路を統括的に制御しているＣＰＵ２３０を備えている。このＣＰＵ２３０には、表示装置の動作に必要な各種プログラムを保持するＲＯＭからなるプログラム記憶部２３１と、各種データを保持するＲＡＭからなるデータ記憶部２３２とが設けられている。なお、ＲＯＭやＲＡＭ等は、ＣＰＵに内蔵されたものでも、外部に設けたものでも使用することが可能である。又、ＲＯＭはフラッシュメモリの様に電気的に書き換え可能な不揮発性メモリでもよい。
【００４９】
ユーザは、上記各種ソースのコントロールを、表示部７の表面に取り付けられているタッチパネル１２４や表示部７の周囲に設けられたスイッチ、もしくは音声認識等の入力操作や選択操作を操作部２１５によって行なうことができる。またリモコン送受信部２１６を介して、リモコン２１７により入力もしくは選択操作をしてもよい。制御部２００は、このタッチパネル１２４や操作部２１５の操作に従って、各種ソースを含めた制御を行なっている。また、制御部２００は、図２のように車両内に複数備え付けられたスピーカ１６の各音量等を、音声調整回路２１０を用いて制御することができるように構成されている。また制御部２００は、メモリ２１８に画質設定情報やプログラム、車両情報等の各種設定情報を記憶させることも行なっている。
【００５０】
図９は、メモリ２１８の概略を示すブロック図である。図中、２３３は第１の画面ＲＡＭ、２３４は第２の画面ＲＡＭ、２３５は画質設定情報記憶手段、２３６は対環境調整値保持手段である。
【００５１】
メモリ２１８は、例えば図９に示すように、使用者が設定した第１の画像及び第２の画像の画質の調整値がそれぞれ書き込み可能な第１の画面ＲＡＭ２３３および第２の画面ＲＡＭ２３４と、第１の画像及び第２の画像の各画質調整用に予め複数段階の調整値が選択可能に記憶されている画質設定情報記憶手段２３５や、周囲環境に対する第１の映像及び第２の映像の画質の調整状態を保持する対環境調整値保持手段２３６を有している。画質設定情報記憶手段２３５及び対環境調整値保持手段２３６は、フラッシュメモリなどの電気的書き換え可能不揮発性メモリ又はバッテリバックアップされた揮発性メモリにより構成される。
【００５２】
外部音声／画像入力部２１９に接続された、例えば後方監視用のカメラ２２０からの画像を表示部７に表示するようにしてもよい。なお、後方監視用カメラ２２０以外に、ビデオカメラ及びゲーム機等を外部音声／画像入力部２１９に接続してもよい。
【００５３】
制御部２００は、明るさ検知手段２２１（例えば、車両のライトスイッチや光センサ）や乗員検知手段２２２（例えば、座席に設けられる感圧センサ）により検知された情報を元に、出力画像や音声の定位位置等の設定を変更させることが可能である。
【００５４】
２２３は車両の後席用に設けられたリア表示部であり、画像出力部２１１を介して、表示部７に表示される画像と同じもの、もしくは運転席用の画像か助手席用の画像の一方が表示可能である。
【００５５】
制御部２００は、ＥＴＣ車載器２５０からの料金表示等を表示させることを行っている。また制御部２００は、携帯電話などと無線接続するための通信ユニット２２５を制御し、これに関する表示がされるようにしてもよい。
【００５６】
つづいて、表示装置における画像補間処理について説明する。この画像補間処理を表示装置内で実行するのは、図１における概念図では表示制御部５であり、図６におけるブロック図では第１の画像調整回路および第２の画像調整回路であるが、以下では説明を簡明にするため、画像補間処理に関わる部分を特に抽出した画像補間装置について説明を行なう。
【００５７】
以下に添付図面を参照して、本発明に係る画像補間装置を車両に搭載した場合の好適な実施例を詳細に説明する。なお、以下では、本発明に係る画像補間装置の概要および特徴を説明した後、本実施例１に係る画像補間装置を説明し、最後に、他の実施例として種々の変形例（実施例２）を説明することとする。
【００５８】
（概要および特徴）
まず最初に、本発明に係る画像補間装置の概要および特徴を説明する。図１０は、本実施例１に係る画像補間装置の構成を示すブロック図である。同図に示すように、この画像補間装置３１０は、ＡＶユニット３２０とナビゲーションユニット３３０に接続された構成となる。
【００５９】
このうち、ＡＶユニット３２０は、ＤＶＤディスク（図示せず）に記憶された映像信号などを読み出して画像補間装置３１０に出力するＤＶＤプレイヤーである。具体的には、車両の乗員の指示に基づいて「ＤＶＤ」映像の表示要求をおこなうとともに、この「ＤＶＤ」映像の画像データを画像補間装置３１０に出力する。なお、このＡＶユニット３２０は、ＤＶＤプレイヤーに限らず、コンパクトディスク、ハードディスク、ラジオ、テレビなどの機能を有するものであっても良い。
【００６０】
また、ナビゲーションユニット３３０は、予め設定された予定経路情報および自車両の位置情報をもとに、経路誘導をおこなう装置である。具体的には、車両の乗員（例えば、運転者）によって設定された自車両の予定経路情報およびＧＰＳ受信機によって取得された人工衛星から発信される位置情報に基づいて「ナビゲーション」映像を作成し、該作成された「ナビゲーション」映像の画像データを画像補間装置３１０に出力する。
【００６１】
このように、ＡＶユニット３２０およびナビゲーションユニット３３０が車両に搭載されている場合、画像補間装置３１０における表示部３１７では、ＡＶユニット３２０によって出力された「ＤＶＤ」映像、並びにナビゲーションユニット３３０によって出力された「ナビゲーション」映像が表示されることとなる。なお、本実施例１では、表示部３１７の解像度を「８００×４８０」、「ＤＶＤ」映像の画像データの解像度を「８００×４８０」、「ナビゲーション」映像の画像データの解像度を「８００×４８０」とする。
【００６２】
このとき、かかる表示部３１７において、ＡＶユニット３２０およびナビゲーションユニット３３０双方から表示要求を受け付けたならば、解像度が「８００×４８０」である表示部３１７に「８００×４８０」の画像を２つ表示する必要がある。
【００６３】
このため、それぞれの映像が重ならぬように「２画面表示形態」や「２視野表示形態」で表示しようとすると、表示対象となる「ＤＶＤ」映像および「ナビゲーション」映像の画像データそれぞれに１／２水平解像度変換をおこなう必要がある。
【００６４】
このうち、「２画面表示形態」は、図１１−１に示すように、運転席側および助手席側の乗員が双方から２つの画像を鑑賞できるように、表示部３１７の画面を左右に分割して「ＤＶＤ」映像ｖ１および「ナビゲーション」映像ｖ２を表示する形態であり、運転席側および助手席側の乗員双方に両方の映像を鑑賞させたい場合などに好適な表示形態である。
【００６５】
また、「２視野表示形態」は、図１１−２に示すように、運転席側および助手席側の乗員がそれぞれで異なる映像を鑑賞できるように、表示部３１７に視差光学機器（例えば、垂直透過スリット）を設けて、表示部３１７に相対して右方向の鑑賞者（すなわち、運転席側の乗員）には、「ナビゲーション」映像ｖ２を鑑賞させ、表示部３１７に相対して左方向の鑑賞者（すなわち、助手席側の乗員）には、「ＤＶＤ」映像ｖ１を鑑賞させる表示形態であり、運転席側の乗員による運転時のわき見を防止する場合などに好適な表示形態である。
【００６６】
なお、本実施例１では、「ナビゲーション」映像の画像データのみに「画像補間処理」をおこなうこととする。このように、「画像補間処理」の処理対象を「ナビゲーション」映像のみに絞った理由は、「ナビゲーション」映像の画像データに解像度変換がおこなわれることによって「文字」や「記号」などの画素欠けが生じ、この画素欠けが生じることによって映像の内容が理解不可能になるという事態が起こりやすい趣旨からである。しかしながら、他の実施の形態としては、「ＤＶＤ」映像ｖ１と「ナビゲーション」映像ｖ２の両方に対して画像補間処理を行なってもよいことはいうまでもない。
【００６７】
ここで、本発明に係る画像補間装置３１０は、補間対象領域に位置する画素および該画素の近傍画素に対する当該画素の特徴量を算出し、算出された補間対象領域に位置する画素の特徴量をもとに、補間画素の画素値を決定する「画像補間処理」に主たる特徴があり、かかる「画像補間処理」によって、画像データの解像度変換に伴う画質劣化を抑制することができるようにしている。
【００６８】
この主たる特徴を具体的に説明すると、この画像補間装置３１０は、「ナビゲーション」映像ｖ２の元画像データにおいて、図１２に示すように、補間対象領域に位置する画素および該画素の近傍画素に対する当該画素の特徴量を算出する。なお、本実施例１では、１／２水平解像度変換をおこなうため、補間対象領域を奇数ドットおよび偶数ドットのペアの２ドットとし、補間画素の画素値を決定する際に参照する近傍画素の範囲を補間対象領域の右側の１ドットとしている。また、この「特徴量」の算出は、ＲＧＢデジタル信号のそれぞれの成分についておこなわれることとなる。
【００６９】
かかる「特徴量」とは、補間対象領域に位置する画素が他の補間対象領域に位置する画素および近傍画素に比較してどの程度画素値が乖離しているかを表す指標であり、具体的には、補間対象領域に位置する画素の中の注目画素の画素値と、補間対象領域に位置する各画素の画素値および近傍画素の画素値の平均値との差の絶対値を求めることで算出される。例えば、「特徴量」が大きければ、近傍画素と比較して変化が際立っている画素（すなわち、画像を特徴付ける画素）であること示し、「特徴量」が小さければ、近傍画素と変化が少ない画素であることを示す。
【００７０】
図１２の例を用いて説明すると、画像補間装置３１０は、まず、元のＲＧＢデジタル信号の「Ｒ」のデジタル信号について、補間対象領域Ａに位置する「ピクセル１」の画素値「Ｐ１」と、補間対象領域Ａに位置する「ピクセル１」および「ピクセル２」の画素値「Ｐ１」、「Ｐ２」および近傍画素「ピクセル３」の画素値「Ｐ３」の平均値との差の絶対値を求めて「ピクセル１」の特徴量｜Ｐ１−（Ｐ１＋Ｐ２＋Ｐ３）／３｜を算出し、同様に、「ピクセル２」の特徴量｜Ｐ２−（Ｐ１＋Ｐ２＋Ｐ３）／３｜を算出する。なお、このようにして、「Ｇ」および「Ｂ」のデジタル信号における「ピクセル１」および「ピクセル２」の特徴量についても同様に算出する。
【００７１】
また、この画像補間装置３１０は、補間対象領域Ｂに位置する「ピクセル３」および「ピクセル４」の特徴量、補間対象領域Ｃに位置する「ピクセル５」および「ピクセル６」の特徴量、並びに補間対象領域Ｎに位置する「ピクセルｍ」および「ピクセルｎ」の特徴量についても同様に算出する。
【００７２】
続いて、画像補間装置３１０は、オリジナル画像で画像を特徴付ける画素の画素値を補間画素の画素値として優先的に採用するために、補間対象領域に位置する画素の特徴量もとに、補間画素の画素値を決定する。具体的には、補間対象領域に位置する画素のうち特徴量が閾値を超えた画素の画素値を補間画素の画素値として決定する。
【００７３】
このように、オリジナル画像で画像を特徴付ける画素と倣なすのに妥当な閾値を超えた画素の画素値を補間画素の画素値として決定することで、オリジナル画像で画像を特徴付ける画素の画素値を補間画素の画素値として優先的に採用し、画像データの解像度変換に伴う画質劣化を抑制することができるようにしている。さらに、これに関連して、オリジナル画像で画像を特徴付ける画素の画素値を平均または加重平均などの加工をおこなわず採用することで、オリジナル画像（すなわち、解像度変換をおこなわれる前の元画像）のイメージを容易に維持できるようにしている。
【００７４】
例えば、補間対象領域Ａのように、「ピクセル１」の特徴量｜Ｐ１−（Ｐ１＋Ｐ２＋Ｐ３）／３｜が閾値「ＴＨＲＥＳＨ」以上である場合には、この「ピクセル１」の画素値「Ｐ１」を補間画素（すなわち、補間対象領域Ａ）の画素値と決定する。なお、「ピクセル１」および「ピクセル２」のいずれの特徴量も閾値以上である場合には、特徴量がより大きい画素の画素値を補間画素の画素値として採用することが好ましい。
【００７５】
また、補間対象領域Ｃのように、「ピクセル５」の特徴量および「ピクセル６」の特徴量がいずれも閾値「ＴＨＲＥＳＨ」に満たない場合には、補間対象領域Ｃに位置する「ピクセル５」および「ピクセル６」の画素値「Ｐ５」および「Ｐ６」それぞれを補間画素（すなわち、補間対象領域Ｃ）の画素値と決定する。
【００７６】
したがって、上記の従来技術の例で言えば、画素データを補間する位置の周辺の複数画素データを平均または加重平均した補間データを画一的に作成することで、画像を特徴付ける画素が不明瞭に加工された補間データが作成するのではなく、オリジナル画像で画像を特徴付ける画素と倣なすのに妥当な閾値を超えた画素の画素値を補間画素の画素値として決定することで、オリジナル画像で画像を特徴付ける画素の画素値を補間画素の画素値として優先的に採用し、上記の主たる特徴のように、画像データの解像度変換に伴う画質劣化を抑制することが可能になる。
【００７７】
さらに、これに関連して、オリジナル画像で画像を特徴付ける画素の画素値を平均または加重平均などの加工をおこなわず採用することで、オリジナル画像（すなわち、解像度変換をおこなわれる前の元画像）のイメージを容易に維持することが可能になる。
【実施例１】
【００７８】
次に、本実施例１に係る画像補間装置について説明する。なお、ここでは、本実施例１に係る画像補間装置の構成を説明した後に、この画像補間装置の各種処理の手順について説明することとする。
【００７９】
（画像補間装置の構成）
図１０は、本実施例１に係る画像補間装置の構成を示すブロック図である。同図に示すように、この画像補間装置３１０は、画像データ入力部３１１と、画像データ入力制御部３１２と、特徴量算出部３１３と、画像補間処理部３１４と、解像度変換処理部３１５と、表示制御処理部３１６と、表示部３１７とを備える。
【００８０】
このうち、画像データ入力部３１１は、画像データ入力制御部３１２の画像データ入力指示に基づいてＡＶユニット３２０および／またはナビゲーションユニット３３０によって出力された画像データを特徴量算出部３１３に入力する処理部である。なお、本実施例１では、ＡＶユニット３２０から「ＤＶＤ」映像（画像の解像度は、「８００×４８０」とする。）が入力され、ナビゲーションユニット３３０から「ナビゲーション」映像（同様に、画像の解像度は、「８００×４８０」とする。）が入力される実施例を掲げる。
【００８１】
画像データ入力制御部３１２は、ＡＶユニット３２０および／またはナビゲーションユニット３３０からの表示要求に応じて画像データ入力部３１１から特徴量算出部３１３に入力される画像データの入力系統数を制御する処理部である。
【００８２】
例えば、ＡＶユニット３２０から「ＤＶＤ」映像の表示要求を受け付けた場合には、画像データ入力部３１１に「ＤＶＤ」映像ｖ１の画像データを入力するように指示し、ナビゲーションユニット３３０から「ナビゲーション」映像の表示要求を受け付けた場合には、画像データ入力部３１１に「ナビゲーション」映像ｖ２の画像データを入力するように指示する。また、ＡＶユニット３２０およびナビゲーションユニット３３０から「ＤＶＤ」映像の表示要求および「ナビゲーション」映像の表示要求を受け付けた場合には、画像データ入力部３１１から「ＤＶＤ」映像ｖ１および「ナビゲーション」映像ｖ２の画像データを入力するように指示する。
【００８３】
特徴量算出部３１３は、画像データ入力部３１１から入力された画像データをもとに、補間対象領域に位置する画素および該画素の近傍画素に対する当該画素の特徴量を算出する処理部である。具体的には、図１２に示すように、まず、元のＲＧＢデジタル信号の「Ｒ」のデジタル信号について、補間対象領域Ａに位置する「ピクセル１」の画素値「Ｐ１」と、補間対象領域Ａに位置する「ピクセル１」および「ピクセル２」の画素値「Ｐ１」、「Ｐ２」および近傍画素「ピクセル３」の画素値「Ｐ３」の平均値との差の絶対値を求めて「ピクセル１」の特徴量｜Ｐ１−（Ｐ１＋Ｐ２＋Ｐ３）／３｜を算出し、同様に、「ピクセル２」の特徴量｜Ｐ２−（Ｐ１＋Ｐ２＋Ｐ３）／３｜を算出する。なお、このようにして、「Ｇ」および「Ｂ」のデジタル信号における「ピクセル１」および「ピクセル２」の特徴量についても同様に算出する。
【００８４】
また、特徴量算出部３１３は、補間対象領域Ｂに位置する「ピクセル３」および「ピクセル４」の特徴量、補間対象領域Ｃに位置する「ピクセル５」および「ピクセル６」の特徴量、並びに補間対象領域Ｎに位置する「ピクセルｍ」および「ピクセルｎ」の特徴量についても同様に算出する。なお、上述した趣旨から、ここでは特徴量算出部３１３および画像補間処理部３１４は、「ナビゲーション」映像の画像データのみを処理対象とするが、「ＤＶＤ」映像ｖ１と「ナビゲーション」映像ｖ２の両方に対して画像補間処理を行なってもよい。
【００８５】
画像補間処理部３１４は、補間対象領域に位置する画素の特徴量もとに、補間画素の画素値を決定する。具体的には、補間対象領域に位置する画素のうち、特徴量算出部３１３によって算出された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値以上であれば、当該画素の画素値を補間画素の画素値として決定する。
【００８６】
図１３に示す補間対象領域Ａの例で言えば、まず、画像補間処理部３１４は、「ピクセル１」の特徴量｜Ｐ１−（Ｐ１＋Ｐ２＋Ｐ３）／３｜と、「ピクセル２」の特徴量｜Ｐ２−（Ｐ１＋Ｐ２＋Ｐ３）／３｜との大小関係を比較し、このうち、特徴量が最も大きい画素（例えば、「ピクセル１」）を抽出する。そして、抽出された「ピクセル１」の特徴量が閾値「ＴＨＲＥＳＨ」以上である場合には、この「ピクセル１」の画素値「Ｐ１」を補間画素（すなわち、補間対象領域Ａ）の画素値と決定する。
【００８７】
また、補間対象領域Ｂのように、抽出された「ピクセル４」の特徴量が閾値「ＴＨＲＥＳＨ」に満たない場合には、補間対象領域Ｂに位置する「ピクセル３」および「ピクセル４」の画素値「Ｐ３」および「Ｐ４」それぞれを補間画素（すなわち、補間対象領域Ｂ）の画素値と決定する。
【００８８】
このように、補間対象領域に位置する画素のうち特徴量が最も大きい画素を抽出することで、オリジナル画像で画像を特徴付けている蓋然性が高い画素を補間対象領域の中から抽出することができ、オリジナル画像で画像を特徴付ける画素の画素値を補間画素の画素値としてより優先的に採用することが可能になる。
【００８９】
解像度変換処理部３１５は、画像補間処理部３１４によって補間画素が補間された複数の画像データに対して解像度変換をおこなう処理部である。例えば、画像補間処理部３１４から入力された「ＤＶＤ」映像ｖ１の画像データおよび「ナビゲーション」映像ｖ２の画像データを「２視野表示形態」で表示部３１７に表示する場合には、ＲＧＢデジタル信号は、図１４に示すようなドット配置になる。
【００９０】
このため、解像度変換処理部３１５は、「ＤＶＤ」映像ｖ１の画像データにおける奇数ドットの「Ｇ」を間引くとともに、偶数ドットの「Ｒ」および「Ｂ」を間引く１／２水平解像度変換をおこなう。
【００９１】
これに対応して、解像度変換処理部３１５は、「ナビゲーション」映像ｖ２の画像データにおける奇数ドットの「Ｒ」および「Ｂ」を間引くとともに、偶数ドットの「Ｇ」を間引く１／２水平解像度変換をおこなう。
【００９２】
このように、画像補間処理によって補間画素が補間された複数の画像データに対して解像度変換をおこなうことで、画像データの画質劣化を抑制しつつ、解像度変換をおこなうことが可能になる。
【００９３】
表示制御処理部３１６は、解像度変換処理部３１５によって解像度変換がおこなわれた画像データを所定の表示形態（本実施例１では、「２視野表示形態」）に並べ替えて表示するように制御する処理部である。具体的には、解像度変換処理部３１５によって解像度変換がおこなわれた「ＤＶＤ」映像ｖ１および「ナビゲーション」映像ｖ２のＲＧＢデジタル信号を図１４に示すドット配列に並び替える並び替え処理（すなわち、「ＤＶＤ」映像のデジタル信号「Ｒ」、「Ｂ」、「Ｇ」を１つおきに、「ナビゲーション」映像のデジタル信号「Ｇ」、「Ｒ」、「Ｂ」を１つおきに並び替える処理）をおこなって表示する。
【００９４】
図１４に示す例では、表示部３１７に相対して右方向の鑑賞者を対象にした１ドットついて、Ｇ不灯、Ｒ点灯、Ｂ点灯となるため、表示部３１７に相対して右方向の鑑賞者（運転席側の乗員）に「Ｒ」＋「Ｂ」の補色であるマジェンダ色が表示されることとなる。
【００９５】
これらの処理によって生成された映像画素データは、単に元画素を偶数配列の画素または奇数配列の画素の何れかの画素群を１フレームに亘って抽出する図１５−１に示すようなものに比べて、図１５−２に示すように、画素間の変化が高い（大きい）ことを示す高域成分が残されるので大きく画質が劣化するようなことが無く、ある程度の良好な視認性を確保することができる。
【００９６】
このように、解像度変換がおこなわれた画像データが少なくとも１つ含まれた複数の画像データを所定の表示形態に並べ替えて表示するように制御することで、新たな構成を設けることなく、１つの表示部に複数の画像データを多様な表示形態で表示することが可能になる。
【００９７】
（各種処理の手順）
次に、本実施例１に係る画像補間装置の各種処理の手順を説明する。図１６は、画像補間処理の手順を示すフローチャートである。この「画像補間処理」は、ＡＶユニット３２０およびナビゲーション装置３３０から「ＤＶＤ」映像の表示要求および「ナビゲーション」映像の表示要求を受け付けた際に、かかる複数の表示要求に係る表示形態の設定が排他表示設定ではなく「２画面表示」や「２視野表示」などの共存表示形態であるならば、開始されることとなる。
【００９８】
同図に示すように、ＡＶユニット３２０およびナビゲーション装置３３０から「ＤＶＤ」映像の表示要求および「ナビゲーション」映像の表示要求を受け付けた場合（ステップＳ６０１肯定）に、画像データ入力部３１１は、「ＤＶＤ」映像ｖ１および「ナビゲーション」映像ｖ２の入力系統ごとに、これらの画像データを特徴量算出部３１３に入力する（ステップＳ６０２）。
【００９９】
そして、特徴量算出部３１３は、画像データ入力部３１１から入力された画像データをもとに、補間対象領域に位置する画素の特徴量を順次算出する（ステップＳ６０３）。続いて、画像補間処理部３１４は、補間対象領域に位置する画素のうち、特徴量算出部３１３によって算出された特徴量が最も大きい画素を抽出する（ステップＳ６０４）。
【０１００】
ここで、抽出された画素の特徴量が閾値以上である場合（ステップＳ６０５肯定）には、画像補間処理部３１４は、当該画素の画素値を補間画素の画素値として決定し（ステップＳ６０６）、一方、抽出された画素の特徴量が閾値未満である場合（ステップＳ６０５否定）には、補間対象領域に位置する各画素の画素値それぞれを補間画素の画素値と決定する（ステップＳ６０７）。
【０１０１】
そして、全ての補間対象領域について補間画素の画素値が決定された場合（ステップＳ６０８肯定）には、画像補間処理部３１４は、各補間画素の画素値が反映された画像データを生成する（ステップＳ６０９）。なお、全ての補間対象領域について補間画素の画素値が決定されていない場合（ステップＳ６０８否定）には、全ての補間対象領域について補間画素の画素値が決定されるまで、上記のステップＳ６０３〜Ｓ６０７の処理を再帰的におこなう。
【０１０２】
続いて、解像度変換処理部３１５は、画像補間処理部３１４によって補間画素が補間された「ナビゲーション」映像の画像データと、「ＤＶＤ」映像の画像データとにそれぞれ１／２水平解像度変換処理を実行する（ステップＳ６１０）。
【０１０３】
そして、表示制御処理部３１６は、解像度変換処理部３１５によって１／２水平解像度変換処理がおこなわれた「ナビゲーション」映像の画像データおよび「ＤＶＤ」映像の画像データを所定の表示形態に並び替えて表示する（ステップＳ６１１）。
【０１０４】
最後に、「ナビゲーション」映像または「ＤＶＤ」映像のいずれか、或いは「ナビゲーション」映像および「ＤＶＤ」映像の双方が終了した場合（ステップＳ６１２肯定）には、処理を終了し、「ナビゲーション」映像および「ＤＶＤ」映像の双方が終了していない場合（ステップＳ６１２否定）には、上記のステップＳ６０２〜Ｓ６１１までの処理を繰り返す。
【０１０５】
上述してきたように、本実施例１に係る画像補間装置３１０によれば、補間対象領域に位置する画素のうち特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値以上であれば、当該画素の画素値を補間画素の画素値として決定することとしたので、オリジナル画像で画像を特徴付けている蓋然性が高い画素を補間対象領域の中から抽出し、該抽出した画素の画素値を補間画素の画素値としてより優先的に採用することができ、画像データの解像度変換に伴う画質劣化をより実効的に抑制することが可能になる。
【実施例２】
【０１０６】
さて、これまで本発明の実施例について説明したが、本発明は上述した実施例１以外にも、上記特許請求の範囲に記載した技術的思想の範囲内において種々の異なる実施例にて実施されてもよいものである。
【０１０７】
例えば、実施例１では、複数の表示要求（すなわち、「ＤＶＤ」映像および「ナビゲーション」映像の表示要求）を受け付けた場合に、本発明に係る「画像補間処理」をおこなう実施例について説明したが、本発明はこれに限定されるものではなく、表示要求が単数であっても複数であっても同様に本発明を適用することができる。特に、本発明は、表示要求が単数であっても、解像度変換のニーズ（例えば、携帯電話など比較的小さい表示部にあわせた解像度変換が求められる場合）がある画像データに対して本発明に係る「画像補間処理」を適用することで一層高い効果を得られる。
【０１０８】
また、実施例１では、補間対象領域に位置する画素のうち、特徴量算出部３１３によって算出された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値未満であれば、補間対象領域に位置する各画素の画素値それぞれを補間画素の画素値と決定する実施例について説明したが、本発明はこれに限定されるものではなく、抽出された画素の特徴量が閾値未満であれば、補間対象領域に位置する画素の画素値を平均化した画素値を補間画素の画素値として決定するようにしても良い。
【０１０９】
図１７の例で言えば、補間対象領域Ｂのように、抽出された「ピクセル４」の特徴量が閾値「ＴＨＲＥＳＨ」に満たない場合には、補間対象領域Ｂに位置する「ピクセル３」および「ピクセル４」を平均した画素値「（Ｐ３＋Ｐ４）／２」それぞれを補間画素（すなわち、補間対象領域Ｂ）の画素値と決定する。
【０１１０】
このように、補間対象領域に位置する画素のうち、特徴量算出部３１３によって算出された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値未満であれば、補間対象領域に位置する画素の画素値を平均化した画素値を補間画素の画素値として決定することで、隣接画素の輝度レベルが乖離していない場合に大局的な画像補間処理をおこなうことができ、画像データの解像度変換に伴う画質劣化を効果的に抑制することが可能になる。
【０１１１】
また、本発明では、補間対象領域に位置する画素間の画素値の差を算出し、補間対象領域に位置する画素間の画素値の差の絶対値が閾値以上であれば、該補間対象領域に位置する画素の画素値を平均化した画素値を補間画素の画素値として決定するようにしても良い。
【０１１２】
例えば、図１８の例で言えば、補間対象領域Ａに位置する画素「ピクセル１」および「ピクセル２」間の画素値の差（すなわち、「Ｐ１−Ｐ２」）を算出し、補間対象領域に位置する画素間の画素値の差の絶対値（すなわち、｜Ｐ１−Ｐ２｜）が閾値「ＴＨＲＥＳＨ」以上であれば、該補間対象領域Ａに位置する画素「ピクセル１」および「ピクセル２」の画素値を平均した画素値「（Ｐ１＋Ｐ２）／２」を補間画素の画素値として決定する。また、補間対象領域Ｂ、補間対象領域Ｃ・・・補間対象領域Ｎについても同様にして画像補間処理がおこなわれる。
【０１１３】
このように、補間対象領域に位置する画素間の画素値の差を算出し、補間対象領域に位置する画素間の画素値の差の絶対値が閾値以上であれば、該補間対象領域に位置する画素の画素値を平均化した画素値を補間画素の画素値として決定することで、局部的に生じる輝度レベルの大差を平滑化することができ、画像データの解像度変換に伴う画質劣化を効果的に抑制することが可能になる。
【０１１４】
なお、実施例１では、画像補間装置３１０に入力される映像信号がコンポジット信号（ＲＧＢ形式）である例について説明したが、本発明はこれに限定されるものではなく、ＹＣ形式など他の形式の映像信号が入力された場合であっても本発明を同様に適用することができる。
【０１１５】
また、本実施例において説明した各処理のうち、自動的におこなわれるものとして説明した処理の全部または一部を手動的におこなうこともでき、あるいは、手動的におこなわれるものとして説明した処理の全部または一部を公知の方法で自動的におこなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータ（例えば、解像度や解像度変換率など）を含む情報については、特記する場合を除いて任意に変更することができる。
【０１１６】
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。さらに、各装置にて行なわれる各処理機能は、その全部または任意の一部が、ＣＰＵおよび当該ＣＰＵにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。
【０１１７】
また、本実施例では単一ディスプレイ上に２つの画面を表示する２画面表示形態と、２つの方向に異なる２つの映像を出力する２視野表示形態とを例に説明を行なったが、３以上の複数の画面を表示す多画面表示形態や、３以上の複数の方向に異なる映像を出力する多方向表示形態として実施することもできる。
【０１１８】
また、本実施例では車載用の装置を例に説明を行なったが、本発明の利用はこれに限定されるものではなく、例えば家用など車載用途以外の表示装置にも適用することが可能である。
【図面の簡単な説明】
【０１１９】
【図１】本発明に係る表示装置の概念図である。
【図２】表示装置の搭載例を示す斜視図である。
【図３】表示部の断面構造の概略図である。
【図４】表示パネルを正面から見た構造の概略図である。
【図５】ＴＦＴ基板の概略を示す回路図である。
【図６】本発明に係る表示装置の概略を示すブロック図である。
【図７】画像出力部２１１の概略を示すブロック図である。
【図８】制御部２００の概略を示すブロック図である。
【図９】メモリ２１８の概略を示すブロック図である。
【図１０】本実施例１に係る画像補間装置の構成を示すブロック図である。
【図１１−１】２画面表示形態を説明するための説明図である。
【図１１−２】２視野表示形態を説明するための説明図である。
【図１２】概要および特徴を説明するための説明図である。
【図１３】特徴量算出部および画像補間処理部の処理内容を説明するための概念図である。
【図１４】解像度変換処理部および表示制御処理部の処理内容を説明するための概念図である。
【図１５−１】画像補間処理の具体例を説明する説明図である（その１）。
【図１５−２】画像補間処理の具体例を説明する説明図である（その２）。
【図１６】画像補間処理の手順を示すフローチャートである。
【図１７】本発明に係る変形例を説明するための説明図である。
【図１８】本発明に係る変形例を説明するための説明図である。
【符号の説明】
【０１２０】
１    第１の画像ソース
２    第２の画像ソース
３    第１の画像データ
４    第２の画像データ
５    表示制御部
６    表示データ
７    表示部
８    第１の表示画像
９    第２の表示画像
１０    観察者
１１    観察者
１２    助手席
１３    運転席
１４    ウインドシールド
１５    操作部
１６    スピーカ
１００    液晶パネル
１０１    バックライト
１０２    偏光板
１０３    偏光板
１０４    ＴＦＴ基板
１０５    液晶層
１０６    カラーフィルター基板
１０７    ガラス基板
１０８    視差バリア
１０９    左側（助手席側）表示用の画素
１１０    右側（運転席側）表示用の画素
１１１    表示パネル駆動部
１１２    走査線駆動回路
１１３    データ線求道回路
１１４    ＴＦＴ素子
１１５〜１１８    データ線
１１９〜１２１    走査線
１２２    画素電極
１２３    サブピクセル
１２４    タッチパネル
２００    制御部
２０１    ＣＤ／ＭＤ再生部
２０２    ラジオ受信部
２０３    ＴＶ受信部
２０４    ＤＶＤ再生部
２０５    ＨＤ（Hard Disk）再生部
２０６    ナビゲーション部
２０７    分配回路
２０８    第１の画像調整回路
２０９    第２の画像調整回路
２１０    音声調整回路
２１１    画像出力部
２１２    ＶＩＣＳ情報受信部
２１３    ＧＰＳ情報受信部
２１４    セレクタ
２１５    操作部
２１６    リモコン送受信部
２１７    リモコン
２１８    メモリ
２１９    外部音声／映像入力部
２２０    カメラ
２２１    明るさ検知手段
２２２    乗員検知手段
２２３    リア表示部
２２４    ＥＴＣ車載器
２２５    通信ユニット
２２６    第１の書込回路
２２７    第２の書込回路
２２８    ＶＲＡＭ（Video RAM）
２２９    インターフェース
２３０    ＣＰＵ
２３１    記憶部
２３２    データ記憶部
２３３    第１の画面ＲＡＭ
２３４    第２の画面ＲＡＭ
２３５    画質設定情報記憶手段
２３６    対環境調整値保持手段
３１０    画像補間装置
３１１    画像データ入力部
３１２    画像データ入力制御部
３１３    特徴量算出部
３１４    画像補間処理部
３１５    解像度変換処理部
３１６    表示制御処理部
３１７    表示部
３２０    ＡＶユニット
３３０    ナビゲーションユニット
【図１】
2006154759.tif 000003
【図２】
2006154759.tif 000004
【図３】
2006154759.tif 000005
【図４】
2006154759.tif 000006
【図５】
2006154759.tif 000007
【図６】
2006154759.tif 000008
【図７】
2006154759.tif 000009
【図８】
2006154759.tif 000010
【図９】
2006154759.tif 000011
【図１０】
2006154759.tif 000012
【図１１−１】
2006154759.tif 000013
【図１１−２】
2006154759.tif 000014
【図１２】
2006154759.tif 000015
【図１３】
2006154759.tif 000016
【図１４】
2006154759.tif 000017
【図１５−１】
2006154759.tif 000018
【図１５−２】
2006154759.tif 000019
【図１６】
2006154759.tif 000020
【図１７】
2006154759.tif 000021
【図１８】
2006154759.tif 000022