(57)【要約】【課題】複数の画像データの処理を効率よく行うことができる画像表示システム及び中継装置の提供。【解決手段】複数のカメラが接続されるカメラ系情報ＬＡＮ２０と、ＡＶ機器が接続されるＡＶ系情報ＬＡＮ３０とを接続するための通信インタフェース１３ａ，１３ｂを有し、該通信インタフェース１３ａ，１３ｂに入力された画像データを中継処理ＡＳＩＣ１２により中継すると共に、画像処理ＡＳＩＣ１４にて画像処理を行う。画像処理された画像データは、通信インタフェース１３ａ，１３ｂを通じて出力されるか、又はモニタインタフェース１５を介してモニタ装置へ出力される。【選択図】　　　　図４
2004015235.tif 000002
【特許請求の範囲】
【請求項１】
画像データを生成する手段及び生成した画像データを送出する手段を有する複数の画像生成装置と表示装置とを中継装置を介して接続してあり、前記画像生成装置にて生成された画像データを前記表示装置にて表示すべくなしてある画像表示システムにおいて、
前記中継装置は、前記画像生成装置から受付けた複数の画像データを一の表示用データに変換するデータ変換手段と、変換して得られた表示用データを前記表示装置へ送出する手段とを備え、前記表示装置は、前記中継装置から受付けた表示用データを表示すべくなしてあることを特徴とする画像表示システム。
【請求項２】
前記中継装置は、前記画像データの画素毎に対応した変換情報を含む変換テーブルを記憶する記憶手段を更に備え、前記データ変換手段は、前記変換テーブルに基づき、前記画像生成装置から受付けた画像データを表示用データに変換すべくなしてあることを特徴とする請求項１に記載の画像表示システム。
【請求項３】
前記変換テーブルは、前記画像データを鏡像反転する際に利用する鏡像反転テーブル、複数の前記画像データを合成する際に利用する合成テーブル、前記画像データの視点方向を変更する際に利用する視点変更テーブル、前記画像データを拡大又は縮小する際に利用する拡大縮小テーブル、前記画像データに図を付加する際に利用する図付加テーブル、又は前記画像データに係る画像の歪みを補正する際に利用する歪み補正テーブルの何れかを含むことを特徴とする請求項２に記載の画像表示システム。
【請求項４】
前記変換テーブルは、前記鏡像反転テーブル、前記合成テーブル、前記視点変更テーブル、前記拡大縮小テーブル、前記図付加テーブル、前記歪み補正テーブルの何れか２つ以上を複合した複合テーブルを備えることを特徴とする請求項３に記載の画像表示システム。
【請求項５】
前記中継装置は、情報を送出する手段を有する情報機器を接続することが可能な接続手段と、該接続手段に接続された情報機器から受付けた情報に基づいて、前記表示用データに付加すべきデータを生成する手段と、該手段にて生成したデータを前記表示用データに付加する手段とを更に備えることを特徴とする請求項１乃至請求項４の何れかに記載の画像表示システム。
【請求項６】
前記中継装置は、受付けた画像データの解像度を変換する手段を更に備えることを特徴とする請求項１乃至請求項５の何れかに記載の画像表示システム。
【請求項７】
前記画像生成装置は、生成した画像データを所定の圧縮方式にて圧縮する手段と、圧縮した画像データを送出する手段とを備え、前記中継装置は、前記圧縮方式にて圧縮された画像データを他の圧縮方式にて圧縮された画像データに変換する手段を更に備えることを特徴とする請求項１乃至請求項６の何れかに記載の画像表示システム。
【請求項８】
外部の通信回線を接続することが可能な接続手段を更に備えることを特徴とする請求項１乃至請求項７の何れかに記載の画像表示システム。
【請求項９】
前記中継装置は、前記通信回線を介して変換テーブルに係る情報を受信する手段と、受信した変換テーブルに係る情報に基づき、前記記憶手段に記憶されている変換テーブルを更新する手段とを更に備えることを特徴とする請求項８に記載の画像表示システム。
【請求項１０】
前記通信回線に対応した通信規約と他の通信規約との間の変換をする手段を更に備えることを特徴とする請求項８又は請求項９に記載の画像表示システム。
【請求項１１】
画像データの画素毎に対応した変換情報を含む変換テーブルを記憶する手段と、前記変換テーブルに基づき、外部から受付けた複数の画像データを一の表示用データに変換するデータ変換手段と、変換して得られた表示用データを外部へ送出する手段とを備えることを特徴とする中継装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は複数の画像データを合成して表示する画像表示システム及び中継装置に関する。
【０００２】
【従来の技術】
従来、車両内に構築された情報系ＬＡＮにビデオカメラ等の後付機器用の接続ポートを用意しておき、接続ポートに接続されたビデオカメラと情報系ＬＡＮに接続された車載機器との間で音楽データ、画像データ等の送受信を行うシステムが開発されている。
【０００３】
図１５は、従来の画像表示システムの構成を示すブロック図である。車両が備えるゲートウェイ装置１は、情報系ＬＡＮ２に接続された情報機器と制御系ＬＡＮ３に接続された制御装置との間にて送受信される情報、データ等を中継する。
【０００４】
情報系ＬＡＮ２は、例えば、ＩＥＥＥ１３９４の規格に準拠した通信ネットワークであり、ナビゲーション装置４及びモニタ装置５が接続されている。また、制御系ＬＡＮ３は、例えば、ＣＡＮ（Ｃｏｎｔｒｏｌｌｅｒ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）のような比較的低速の通信ネットワークであり、制御ＥＣＵ７のような制御装置が接続されている。ナビゲーション装置４は２つの接続ポート４ａ，４ｂを備えており、一方の接続ポート４ａを介してゲートウェイ装置１が接続され、他方の接続ポート４ｂを介してモニタ装置５が接続されている。モニタ装置５も同様に２つの接続ポート５ａ，５ｂを備えており、一方の接続ポート５ａにナビゲーション装置４が接続されており、他方の接続ポート５ｂは後付機器の接続用に利用される。
また、モニタ装置５は、ビデオカメラ６を接続するための接続ポート５ｃを有しており、該接続ポート５ｃに接続されたビデオカメラ６からの画像データをモニタ装置５にて表示できるようにしている。
【０００５】
更に、車両の後方を撮像するバックカメラ、運転席側から死角となる領域を撮像するドアミラーカメラ、車両の右側前方及び左側前方を撮像するブラインドコーナカメラ等を車両の適宜位置に設置し、各カメラから出力されるアナログ映像信号を画像処理ＥＣＵ（不図示）に取り込み、各カメラに応じた画像処理を施した上でモニタ装置５に出力する画像表示システムが考案されている。
【０００６】
【発明が解決しようとする課題】
前述の画像表示システムでは、制御ＥＣＵ７からの制御信号に基づいてグラフィックスを作成し、ナビゲーション装置４からの地図画像データ、又はビデオカメラ６により得られた画像データに作成したグラフィックスを上書表示させることも可能である。
【０００７】
しかしながら、制御ＥＣＵ７からの制御信号に基づいてグラフィックスを作成するためには、専用のグラフィックスＬＳＩが別途必要になり、コスト的に高価になっていた。また、複数のカメラが設置された画像表示システムでは、各カメラのアナログ映像信号を画像処理ＥＣＵにてＡＤ変換する必要があり、高価なＡＤ変換器をカメラの台数分だけ用意する必要がある。したがって、画像表示システムの構築に要するコストを押し上げるという問題点が生じていた。
【０００８】
更に、画像処理ＥＣＵは、種々の表示形式及び各カメラに対応した変換処理用の電子部品及びフレームメモリを多数設けているため画像処理ＥＣＵ自体のコストを押し上げると共に、多数の電子部品の切替え制御が必要になり、データ変換処理が複雑になる問題がある。
【０００９】
更に、各カメラと画像処理ＥＣＵとの接続に低通信速度のＬＡＮケーブルを用いた場合、各カメラから出力する画像データをＭＰＥＧ等の圧縮率の高い圧縮方式で圧縮したとき、圧縮に掛かる処理に時間を要し、データ表示に関してリアルタイム性を損なう場合が生じる。
【００１０】
本発明は斯かる事情に鑑みてなされたものであり、画像生成装置から受付けた複数の画像データを一の表示用データに変換するデータ変換手段と、変換して得られた表示用データを表示装置へ送出する手段とを中継装置が備える構成とすることにより、コストを押し上げることなく複数の画像生成装置からの画像データを表示することが可能な画像表示システム及び中継装置を提供することを目的とする。
【００１１】
本発明の他の目的は、画像データの画素毎に対応した変換情報を含む変換テーブルを記憶する手段を備え、変換テーブルに従い画像データを表示用データに変換する構成とすることにより、複数の画像データから表示用データに変換する際の時間を短縮することが可能な画像表示システム及び中継装置を提供することにある。
【００１２】
【課題を解決するための手段】
第１発明に係る画像表示システムは、画像データを生成する手段及び生成した画像データを送出する手段を有する複数の画像生成装置と表示装置とを中継装置を介して接続してあり、前記画像生成装置にて生成された画像データを前記表示装置にて表示すべくなしてある画像表示システムにおいて、前記中継装置は、前記画像生成装置から受付けた複数の画像データを一の表示用データに変換するデータ変換手段と、変換して得られた表示用データを前記表示装置へ送出する手段とを備え、前記表示装置は、前記中継装置から受付けた表示用データを表示すべくなしてあることを特徴とする。
【００１３】
第２発明に係る画像表示システムは、第１発明に係る画像表示システムにおいて、前記中継装置は、前記画像データの画素毎に対応した変換情報を含む変換テーブルを記憶する記憶手段を更に備え、前記データ変換手段は、前記変換テーブルに基づき、前記画像生成装置から受付けた画像データを表示用データに変換すべくなしてあることを特徴とする。
【００１４】
第３発明に係る画像表示システムは、第２発明に係る画像表示システムにおいて、前記変換テーブルは、前記画像データを鏡像反転する際に利用する鏡像反転テーブル、複数の前記画像データを合成する際に利用する合成テーブル、前記画像データの視点方向を変更する際に利用する視点変更テーブル、前記画像データを拡大又は縮小する際に利用する拡大縮小テーブル、前記画像データに図を付加する際に利用する図付加テーブル、又は前記画像データに係る画像の歪みを補正する際に利用する歪み補正テーブルの何れかを含むことを特徴とする。
【００１５】
第４発明に係る画像表示システムは、第３発明に係る画像表示システムにおいて、前記変換テーブルは、前記鏡像反転テーブル、前記合成テーブル、前記視点変更テーブル、前記拡大縮小テーブル、前記図付加テーブル、前記歪み補正テーブルの何れか２つ以上を複合した複合テーブルを備えることを特徴とする。
【００１６】
第５発明に係る画像表示システムは、第１発明乃至第４発明の何れかの画像表示システムにおいて、前記中継装置は、情報を送出する手段を有する情報機器を接続することが可能な接続手段と、該接続手段に接続された情報機器から受付けた情報に基づいて、前記表示用データに付加すべきデータを生成する手段と、該手段にて生成したデータを前記表示用データに付加する手段とを更に備えることを特徴とする。
【００１７】
第６発明に係る画像表示システムは、第１発明乃至第５発明の何れかの画像表示システムにおいて、前記中継装置は、受付けた画像データの解像度を変換する手段を更に備えることを特徴とする。
【００１８】
第７発明に係る画像表示システムは、第１発明乃至第６発明の何れかの画像表示システムにおいて、前記画像生成装置は、生成した画像データを所定の圧縮方式にて圧縮する手段と、圧縮した画像データを送出する手段とを備え、前記中継装置は、前記圧縮方式にて圧縮された画像データを他の圧縮方式にて圧縮された画像データに変換する手段を更に備えることを特徴とする。
【００１９】
第８発明に係る画像表示システムは、第１発明乃至第７発明の何れかの画像表示システムにおいて、外部の通信回線を接続することが可能な接続手段を更に備えることを特徴とする。
【００２０】
第９発明に係る画像表示システムは、第８発明に係る画像表示システムにおいて、前記中継装置は、前記通信回線を介して変換テーブルに係る情報を受信する手段と、受信した変換テーブルに係る情報に基づき、前記記憶手段に記憶されている変換テーブルを更新する手段とを更に備えることを特徴とする。
【００２１】
第１０発明に係る画像表示システムは、第８発明又は第９発明に係る画像表示システムにおいて、前記通信回線に対応した通信規約と他の通信規約との間の変換をする手段を更に備えることを特徴とする。
【００２２】
第１１発明に係る中継装置は、画像データの画素毎に対応した変換情報を含む変換テーブルを記憶する手段と、前記変換テーブルに基づき、外部から受付けた複数の画像データを一の表示用データに変換するデータ変換手段と、変換して得られた表示用データを外部へ送出する手段とを備えることを特徴とする。
【００２３】
第１発明及び第１１発明にあっては、受付けた複数の画像データから一の表示用データに変換する処理を中継装置にて行うようにしている。したがって、撮像装置等の画像生成装置から複数の画像データを同時的に入力して画像処理を施す場合、撮像装置毎に画像処理ＬＳＩ、ＡＤ変換器、フレームメモリ等を設ける必要がないため、コストを削減することが可能となる。
【００２４】
第２発明にあっては、変換テーブルを利用した画像処理を行うようにしている。したがって、各種画像処理の手法を共通化することが可能となり、画像処理ＬＳＩ、ＡＤ変換器、フレームメモリ等を共用できるため、コストを削減することが可能となる。また、変換テーブルは、画像データの画素毎に変換情報を含んでいるので、種々の表示形式に容易に対応できる。
【００２５】
第３発明にあっては、データ変換用の各種変換テーブルを揃えることで基本的な変換形式に対応することができ、変換処理を標準化して変換効率を向上することが可能となる。なお、各種変換テーブルは、画像表示システムに含まれる撮像装置の種類等に応じて必要な表示形式に対応するものを備えることが必要である。
【００２６】
第４発明にあっては、各種の基本的な変換テーブルを複合した複合テーブルを利用できるため、複雑な画像処理を迅速に行うことができる。
【００２７】
第５発明にあっては、接続した情報機器からの情報に基づき、表示用データに所要のデータを付加することができる。したがって、例えば、オーディオ装置のような情報機器からの制御コマンドを取得した場合、曲順、演奏時間、選曲情報等の各種の情報に基づいたグラフィックスを作成して、表示すべき画像データに付加した上で表示することが可能となる。
【００２８】
第６発明にあっては、受付けた画像データの解像度を変更できるようにしている。したがって、解像度が異なる機器から送出された画像データも表示装置に表示させることが可能となる。
【００２９】
第７発明にあっては、圧縮方式の変換を行うようにしている。したがって、ＤＶ圧縮（ＤＶ　：　Ｄｉｇｉｔａｌ　Ｖｉｄｅｏ）、ＭＰＥＧ等の圧縮方式の変換を行うため、片方の圧縮方式にしか対応していない機器でも画像データの受け渡しを行うことができる。
【００３０】
第８発明にあっては、外部の通信回線に接続できるため、例えば、インタネット網に接続されたサーバ装置等から画像データを取得し、表示装置にて表示することが可能となる。
【００３１】
第９発明にあっては、外部の通信回線を介して変換テーブルを取得することが可能となる。したがって、撮像装置等の画像生成装置を新規に接続した場合、その画像生成装置に対応した変換テーブルを容易に取得することが可能となる。また、変換テーブルに基づき作成されるグラフィックスを最新のものに更新することが可能となる。
【００３２】
第１０発明にあっては、通信規約の変更を可能にしている。したがって、中継装置に接続された情報機器に夫々インタネット向けのプロトコル・コーデックを持たせる必要がなく、インターネット上の画像データ、映像データを交換することが可能となる。
【００３３】
【発明の実施の形態】
以下、本発明をその実施の形態を示す図面に基づいて具体的に説明する。
実施の形態１．
図１は本実施の形態に係る画像表示システムの構成を説明するブロック図である。本実施の形態では、自動車等の車両内部に構築されたシステムに適用して説明する。図中１０は、カメラ系情報ＬＡＮ２０とＡＶ系情報ＬＡＮ３０との間に接続され、各ＬＡＮの間にて情報を中継してゲートウェイ処理を行うゲートウェイ装置である。ゲートウェイ装置１０には、カメラ系情報ＬＡＮ２０を介して、ブラインドコーナカメラ２１、前方補助カメラ２２、ドアミラーカメラ２３、バックカメラ２４，２５等の各種カメラが接続されていると共に、ＡＶ系情報ＬＡＮ３０を介してオーディオ装置３１、ナビゲーション装置３２、後席モニタ装置３３、制御パネル３４等の情報機器が接続されている。更に、ゲートウェイ装置１０には液晶ディスプレイのようなモニタ装置４０が接続されており、各カメラ２１〜２５により得られた画像データ（映像データ）、オーディオ装置３１、ナビゲーション装置３２等の情報機器から得られた情報を確認できる構成となっている。
【００３４】
オーディオ装置３１は、ラジオの受信機能、複数の音楽ＣＤを適宜入れ替えるＣＤチェンジャ機能、音楽ＣＤを再生する機能、カセットテープレコーダを再生する機能等を有する複合機である。なお、前記オーディオ装置３１を利用する代わりに、ラジオ受信機、ＣＤチェンジャ、ＤＳＰ（Ｄｉｇｉｔａｌ　Ｓｉｇｎａｌ　Ｐｒｏｃｅｓｓｏｒ）、アンプ等の各機器をＡＶ系情報ＬＡＮ３０に接続し、各機器間でオーディオデータを共有する形態としても良いことは勿論である。
【００３５】
ナビゲーション装置３２は、ＧＰＳ信号（ＧＰＳ　：　Ｇｌｏｂａｌ　Ｐｏｓｉｔｉｏｎｉｎｇ　Ｓｙｓｔｅｍ）を受信するためのＧＰＳ受信部、地図画像データ等を記憶してあるＣＤ−ＲＯＭ、ＤＶＤ等の記録媒体から地図画像データ等を読取るための読取装置等を備えている。ナビゲーション装置３２では、ＧＰＳ受信部にて受信したＧＰＳ信号に基づき、車両の現在位置に関する情報（位置情報）を算出し、算出した位置情報が含まれる地図画像データを前記記録媒体から読取る。そして、ナビゲーション装置３２は、算出した位置情報及び該位置情報が含まれる地図画像データを、ＡＶ系情報ＬＡＮ３０を介してゲートウェイ装置１０へ送信し、モニタ装置４０にて位置情報及び該位置情報が含まれる地図画像データを表示する。
【００３６】
後席モニタ３３は、運転席又は助手席の背面部に設置された液晶ディスプレイ等の表示装置であり、モニタ装置４０に表示されるような画像データが表示される。なお、モニタ装置４０に表示される画像データと後席モニタ３３に表示される画像データは必ずしも同一のものである必要はなく、互いに異なる画像データが表示される形態であってもよい。
【００３７】
制御パネル３４は、画像処理を行う際の各種設定及びデータを入力するためのハードウェアであり、図に示していないカーソルキー、機能キー、入力確定キー等の入力装置を有している。制御パネル３４から入力する設定としては、例えば、利用するカメラの選択、モニタ装置４０にて映像データを表示する際の表示形式等がある。制御パネル３４から入力された各種設定及びデータは、ゲートウェイ装置１０を介してモニタ装置４０へ送出され、モニタ装置４０にて確認しながら各種設定を行うことが可能となる。また、制御パネル３４が液晶ディスプレイ等の表示装置を備えている場合、入力された各種設定及びデータをモニタ装置４０に送出せずに、前記表示装置にて表示する形態であってもよい。更に、カメラの選択は、図に示していないジョイスティック、ジョグダイヤル等の多方向スイッチによって選択されるようにしても良い。
【００３８】
カメラ系情報ＬＡＮ２０又はＡＶ系情報ＬＡＮ３０は、ＩＥＥＥ１３９４又は車両内のネットワークに特化したＩＤＢ−１３９４を用いて構築されたものであり、各カメラ２１〜２５にて得られた画像データがストリームデータとして送受信される。なお、本実施の形態では、各カメラ２１〜２５は、１３９４　Ｄｉｇｉｔａｌ　Ｃａｍｅｒａ　Ｓｐｅｃｉｆｉｃａｔｉｏｎによる非圧縮伝送、又はＤＶ圧縮してＩＥＣ−６１８８３（ＡＶ／Ｃプロトコル）に基づく伝送を用いて、画像データに係るストリームデータをゲートウェイ装置１０へ送出するようにしている。また、本実施の形態にあっては、各カメラ２１〜２５からの画像データをゲートウェイ装置１０の内部にて画像処理すると共に、ナビゲーション装置３２から送出された地図画像データに対する画像処理、オーディオ装置３１から送信された制御コマンドに基づくグラフィックスの生成等を行う。
【００３９】
図２は、各カメラ２１〜２５の取付位置を示す概略平面図である。ブラインドコーナカメラ２１は、車両Ｃの前端中央近傍に取付けられており、車両Ｃの左側前方及び右側前方を撮像できるようになっている。前方補助カメラ２２は、助手席側ドアミラーの近傍に取付けられており、運転手から死角となる助手席側前輪付近を撮像するようにしている。ドアミラーカメラ２３は、ドアミラー内部に設置されており、運転手から死角となる助手席側後方を撮像するようにしている。バックカメラ２４，２５は車両Ｃの後端中央近傍に取付けられており、バックカメラ２４は車両Ｃの真後ろ方向に対して右側の領域を撮像するようにしており、バックカメラ２５は車両Ｃの真後ろ方向に対して左側の領域を撮像するようにしている。
【００４０】
図３は、ブラインドコーナカメラ２１の概略構成図であり、図３（ａ）にその平面図、図３（ｂ）にその側面図を示した。撮像レンズ２１ａの前方に左右及び前方下方の計３方向の画像を取り込むプリズム２１ｂを設けており、プリズム２１ｂは左方向からの光線Ｌ１、右方向からの光線Ｌ２、及び前方下方からの光線Ｌ３を撮像レンズ２１ａへ導いている。なお、本実施の形態のブラインドコーナカメラ２１では、プリズム２１ｂの構成上、プリズム１５ｂを通過した光線Ｌ３の画像のみが反転する。
【００４１】
図４は、ゲートウェイ装置１０の内部構成を説明するブロック図である。ゲートウェイ装置１０では、各カメラ２１〜２５から取得した画像データをモニタ装置４０の表示用データに変換すると共に、変換した表示用データをモニタ装置４０へ送出する。
【００４２】
ゲートウェイ装置１０は、中継処理ＡＳＩＣ（ＡＳＩＣ　：　Ａｐｐｌｉｃａｔｉｏｎ　ＳｐｅｃｉｆｉｅｄＩＣ）１２を有しており、該中継処理ＡＳＩＣ１２には、マイクロコンピュータ１１、通信インタフェース１３ａ，１３ｂ、画像処理ＡＳＩＣ１４が接続されている。また、画像処理ＡＳＩＣ１４には、モニタ装置４０を接続するためのモニタインタフェース１５、画像データを一時的に記憶するためのフレームメモリ１６、画像処理を行う際に利用される変換テーブルが記憶されている変換テーブル用メモリ１７が接続されている。
【００４３】
マイクロコンピュータ１１に接続されたメモリ１９には各種の制御プログラムが格納されており、ＡＶ系情報ＬＡＮ３０に接続された各種情報機器からなされた入力操作に従い必要な制御プログラムがマイクロコンピュータ１１に読込まれ、マイクロコンピュータ１１は、読込まれた制御プログラムに従って各種制御及び処理を行う。マイクロコンピュータ１１が行う具体的な制御及び処理内容には、画像処理を行う際に利用する変換テーブルの選択処理、選択されている変換テーブルの切替処理、ＡＶ系情報ＬＡＮ３０からの指示に応じたグラフィックスを生成するグラフィックス生成処理等がある。
【００４４】
変換テーブルの選択処理は、カメラ系情報ＬＡＮ２０に接続されている各カメラ２１〜２５に対して予め作成した各種変換テーブルを各カメラ２１〜２５及び表示形式に対応付けてから変換テーブル用メモリ１７に記憶させると共に、前記対応付けに基づき所要の変換テーブルをテーブル用メモリ１７から選択して読み出す処理のことである。なお、各カメラ２１〜２５と変換テーブルとの対応付けは、各カメラ２１〜２５の識別情報と変換テーブルとを夫々対応付けることで行っている。これらの対応付けに係る情報は、マイクロコンピュータ１１に接続されているメモリ１９に記憶される。
【００４５】
選択されている変換テーブルの切替処理は、ＡＶ系情報ＬＡＮ３０に接続されているオーディオ装置３１、ナビゲーション装置３２、後席モニタ３３、制御パネル３４等の情報機器からの制御信号に基づいて行う。例えば、制御パネル３４を操作して利用するカメラ、変換テーブルを選択できるようにしてあり、制御パネル３４により選択されたカメラに対応付けられている変換テーブル、又は制御パネル３４により直接選択された変換テーブルに切り替えられる。
【００４６】
グラフィックス生成処理は、ＡＶ系情報ＬＡＮ３０に接続されている各種情報機器から送信された制御コマンド等に基づいて、グラフィックスの生成を行う処理をいう。例えば、オーディオ装置３１により音楽ＣＤを再生している場合、そのときの制御コマンドをゲートウェイ装置１０にて取得するようにしており、取得した制御コマンドに基づいて曲番、演奏時間、ボリューム等の再生中の情報を表したグラフィックスを生成する。
【００４７】
各カメラ２１〜２５により生成された画像データは、カメラ系情報ＬＡＮ２０を介して通信インタフェース１３ａに入力される。また、ナビゲーション装置３２から出力された地図画像データ、オーディオ装置３１から出力された制御コマンド等は、ＡＶ系情報ＬＡＮ３０を介して通信インタフェース１３ｂに入力される。通信インタフェース１３ａ，１３ｂに入力された各種画像データは、中継処理ＡＳＩＣ１２を介して画像処理ＡＳＩＣ１４に入力される。また、通信インタフェース１３ｂにオーディオ装置３１等からの制御信号が入力された場合、マイクロコンピュータ１１は画像処理ＡＳＩＣ１４に指示を与え、前記制御信号に応じたグラフィックスを生成させる。
【００４８】
画像処理ＡＳＩＣ１４は、画像処理専用のカスタムＩＣであり、入力された画像データを変換テーブル用メモリ１７に記憶させている変換テーブルに基づいて６４０画素（横）×４８０画素（縦）の表示用データに変換する。画像処理ＡＳＩＣ１４により変換された表示用データは、モニタインタフェース１５にてアナログデータに変換された後、モニタ装置４０へ送出される。
【００４９】
変換テーブル用メモリ１７は、例えば、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ　Ｅｒａｓａｂｌｅ　ＰＲＯＭ）であり、複数の変換テーブルを記憶すると共に、記憶している変換テーブルの中からマイクロコンピュータ１１の選択処理により所要の変換テーブルを選択して画像処理ＡＳＩＣ１４へ出力するようにしている。
【００５０】
変換テーブル用メモリ１７に記憶されている変換テーブルには、各カメラ２１〜２５からの画像データをデータ変換せずにそのまま表示するためのオリジナル表示テーブル、２つの画像データを左右又は上下に並列して表示する際に利用される画面並列テーブル、２つの画像データから１つの画像データに合成する際に利用される画面合成テーブ、画像データを鏡像反転する際に利用される鏡像反転テーブル、入力された画像データの視点を変更する際に利用される視点変更テーブル、及び図形、文字等のグラフィックスを追加するためのオーバレイテーブルがあり、必要に応じて画像処理ＡＳＩＣ１４に読込まれて、データ変換処理の際に利用される。なお、前述のような変換テーブルの他、各カメラ２１〜２５が備えるレンズの歪みに伴う画像歪みを補正するための歪み補正テーブル、画像データを拡大縮小するための拡大縮小テーブル等の変換テーブルを備えるようにしてもよい。
【００５１】
フレームメモリ１６は、各カメラ２１〜２５及び各表示形式に対して共用されており、オリジナル画像記憶領域と変換画像記憶領域とを有している。オリジナル画像記憶領域には各カメラ２１〜２５から出力された画像データが１画面単位で一時的に記憶されると共に、変換画像記憶領域には画像処理ＡＳＩＣ１４にて変換された表示用データが１画面単位で記憶される。
【００５２】
なお、オリジナル画像記憶領域は、画像処理ＡＳＩＣ１４が同時処理可能なデータ量に応じた記憶容量を確保している。また、変換画像記憶領域には画像処理ＡＳＩＣ１４が変換した表示用データを随時記憶させることができ、１画面分の表示用データを蓄積した後、モニタインタフェース１５へ順次出力するようにしている。なお、変換画像記憶領域の一部にはシステム起動時の初期化画面の画像データ、表示用データに上書表示するグラフィックスの画像データも記憶している。
【００５３】
また、モニタインタフェース１５にはモニタ装置４０が接続されており、表示用データをアナログ画像信号の形態でモニタ装置４０へ送出する。なお、モニタ装置４０がデジタル画像信号を表示できる場合には、モニタインタフェース１５にてアナログ化する必要はなくなるため、デジタル化された表示用データをそのままモニタインタフェース１５から出力するようにしても良い。
【００５４】
図５は、制御パネル３４から各種の設定を行う際にモニタ装置４０に表示される画面の一例を示す模式図である。図５（ａ）は利用するカメラを変更する際に表示される画面例を示しており、図５（ｂ）は表示形式を変更する際に表示される画面例を示している。
【００５５】
図５（ａ）に示した如く、画面の中央には車両Ｃのグラフィックス４０１が表示されており、各カメラ２１〜２５の位置が該グラフィックス４０１の上に模式的に表示されている。また、画面の下段には、カメラ変更ボタン４０３、表示形式変更ボタン４０４、設定ボタン４０５、及びキャンセルボタン４０６が表示されており、例えば、制御パネル３４が有するカーソルキーにより押下操作して選択することができるようなっている。
【００５６】
カメラ変更ボタン４０３が選択された場合、制御パネル３４のカーソルキーを操作することにより星印で表されたカーソル４０２ａ，４０２ｂが画面上にて移動するようになっており、ユーザが所望のカメラの上にカーソル４０２ａ，４０２ｂの位置を合わせた後、設定ボタン４０５を押下操作をすることによって、利用するカメラを選択することができる。図５（ａ）に示した例では、バックカメラ２４，２５の位置に２つのカーソル４０２ａ，４０２ｂの位置が合わせされているので、バックカメラ２４，２５が選択されている。選択されたカメラの情報は、マイクロコンピュータ１１に接続されたメモリ１９に記憶される。
なお、設定ボタン４０５を押下操作せずにキャンセルボタン４０６を押下操作した場合、設定されたカメラの情報は記憶されずにカメラの変更処理を終了する。
【００５７】
表示形式変更ボタン４０４が押下操作された場合には、図５（ｂ）に示した如き画面がモニタ装置４０に表示される。画面の中央には表示形式を選択するための表示形式選択フィールド４０７が表示され、その下にはグラフィックスを上書表示するか否かの選択をするためのグラフィックオーバレイボタン４０８が表示される。操作パネル３４を操作することによって、表示形式の選択、及びグラフィックスを上書表示するか否かの選択を行うことができる。
【００５８】
選択可能な表示形式は、ゲートウェイ装置１０の変換テーブル用メモリ１７に記憶されている各種変換テーブルに対応したものであり、各カメラ２１〜２５から得られた画像データを並列して表示する形式、２画面を合成して表示する形式、鏡像反転して表示する形式、視点を変更して表示する形式等がある。
【００５９】
カメラからの画像データに上書表示するグラフィックスは、フレームメモリ１６に予め記憶させているグラフィックスを表示する形式であっても良く、また、ユーザが制御パネル３４、外部の情報機器を利用して作成したグラフィックスを表示させる形態であってもよい。
【００６０】
また、画面の下段には、デフォルトボタン４０９、設定ボタン４１０、及びキャンセルボタン４１１が配されており、設定ボタン４１０を押下操作することによって表示形式選択フィールド４０７及びグラフィックオーバレイボタン４０８で選択された内容はマイクロコンピュータ１１に接続されたメモリ１９に記憶される。設定ボタン４１０が押下操作されずにキャンセルボタン４１１が押下操作された場合には、選択された内容は記憶されずに、カメラの変更画面（図５（ａ））に戻る。
【００６１】
マイクロコンピュータ１１は、利用するカメラ（２１〜２５）とその表示形式との対応関係のデフォルト値を記憶しており、デフォルトボタン４０９を押下操作することによって、対応関係のデフォルト値を呼出すことができる。例えば、一台のバックカメラ２４（又はバックカメラ２５）が選択された場合、デフォルトでは鏡像反転した画像を表示させるようにしており、また、２台のバックカメラ２４，２５選択された場合、鏡像反転と画面合成とを行った画像を表示させるようにしている。また、ブラインドコーナカメラ２１が選択された場合、デフォルトではブラインドコーナカメラ２１から出力された画像データにグラフィックスを上書表示するようにしている。マイクロコンピュータ１１に接続されたメモリ１９は、カメラ（２１〜２５）が選択された場合のデフォルトの表示形式を記憶している。すなわち、カメラ（２１〜２５）が選択された場合に利用する変換テーブルを予め規定しており、ユーザが制御パネル３４から表示形式の変更を行わない限りデフォルトの設定を利用する。
【００６２】
図６は、画像変換処理の一例を説明する模式図である。ゲートウェイ装置１０にはカメラ系情報ＬＡＮ２０を介して５つのカメラ２１〜２５が接続されており、例えば、各カメラ２１〜２５により得られて画像データのうち２つの画像データを取込み、フレームメモリ１６のオリジナル画像記憶領域に記憶させることができる。オリジナル画像記憶領域に記憶された画像データは、画像処理ＡＳＩＣ１４により画像処理がなされた後、モニタインタフェース１５へ出力される。バックカメラ２５で撮像された車両Ｃの後方左側の画像データ（図６（ａ））と、バックカメラ２４で撮像された車両Ｃの後方右側の画像データ（図６（ｂ））とを取込み、図６（ｃ）に示したような画像合成を行う場合、本実施の形態では、変換テーブル用メモリ１７に記憶してある画面合成テーブルを利用して画像合成を行う。
【００６３】
図７は、変換テーブルの一例を示す概念図である。図７（ａ）はオリジナル表示テーブル１７ａの概念図を示しており、図７（ｂ）は画面合成テーブル１７ｂの概念図を示している。各変換テーブルは、モニタ装置４０の表示解像度（６４０×４８０画素）に対応して６４０×４８０個の要素を有しており、各要素毎に変換情報を含んでいる。ここで、各要素に含まれる変換情報は、変換する画像データを識別するためのフラグ及び変換後の画素値に関する情報により構成されている。
【００６４】
本実施の形態では、通信インタフェース１３ａ，１３ｂを通じて複数の画像データを取得できるようにしてあるため、データ変換の際に用いる画像データを識別する必要がある。画像データの識別は、カメラ２１〜２５、ナビゲーション装置３２等の画像データの送出元に予め付与した識別情報に基づいて行うことができる。すなわち、各カメラ２１〜２５、ナビゲーション装置３２等は、画像データを送信する際、自身の識別情報をヘッダ情報として含めるようにしており、ゲートウェイ装置１０では、通信インタフェース１３ａ，１３ｂにて受信したパケットのヘッダ情報に基づいて画像データを識別することができる。
【００６５】
例えば、受信したパケットのヘッダ情報を検出した結果、バックカメラ２５からの画像データであると判断した場合、その画像データにフラグ「１」を付与し、受信したパケットのヘッダ情報を検出した結果、バックカメラ２４からの画像データであると判断した場合、その画像データにフラグ「２」を付与する。また、ゲートウェイ装置１０が予め用意しているグラフィックスにはフラグ「０」を付与する。
【００６６】
変換テーブルの各要素は、例えば、２４ビットの数値によって表すことができる。図７に示した変換テーブルでは、便宜的に各要素を（ｉ，ｘ，ｙ）のベクトル量で表したが、第１列の数値ｉ（２ビット）により画像データのフラグを示し、第２列及び第３列の数値ｘ，ｙ（各１１ビット）により変換した画像データにおける各画素の読込み先を示している。
したがって、図７（ａ）に示した如きオリジナル表示テーブル１７ａによりデータ変換を行う場合、画像処理ＡＳＩＣ１４はフレームメモリ１６から変換元の画像データとしてフラグ「１」が付与されている画像データを読込み、変換前の画素値（ｘ，ｙ）におけるＲＧＢ値を、変換後の画像データの画素値（ｘ，ｙ）のＲＧＢ値として変換後画像記憶領域に記憶する。すなわち、オリジナル表示テーブル１７ａによる場合は、フレームメモリ１６から読込まれた画像データをそのままモニタ装置４０へ送出するようにしているため、画像データの変換は行わない形態となっている。
【００６７】
一方、図７（ｂ）に示した如き画面合成テーブル１７ｂによりデータ変換を行う場合、画像処理ＡＳＩＣ１４はフレームメモリ１６から変換元の画像データとしてフラグ「１」、及びフラグ「２」が付与されている画像データを読込む。画素値（０，０）、（４００，０）、（４００，４７９）、（０，４７９）で囲まれる矩形領域についてはフラグ「１」が付されている画像データを使用し、（４０１，０）、（６３９，４７９）、（６３９，４７９）、（４０１，４７９）で囲まれる矩形領域についてはフラグ「２」が付されている画像ソースを使用する。すなわち、画像の左側およそ２／３の領域をフラグ「１」の画像データで形成し、画像の右側およそ１／３の領域をフラグ「２」の画像データで形成した合成画像を作成する。
【００６８】
このように、変換元の画像データ、及び変換後の画素値の読込み先を指定した変換テーブルを利用することで、画像データの変換が容易になり、画像処理の処理速度を向上することが可能となる。
【００６９】
本実施の形態では、モニタ装置４０の表示解像度は６４０×４８０画素としたが、必ずしもこの表示解像度に限定されるものではなく、７２０×５２５画素、８００×６００画素等の表示解像度を持つものでも良い。なお、モニタ装置４０の表示解像度に対応させて変換テーブルの記憶容量（全要素数）を確保しなければならないのは勿論である。
【００７０】
図８は、モニタ装置４０に表示される画面の一例を説明する模式図である。図８（ａ）は、ブラインドコーナカメラ２１により得られた画像データにグラフィックスを上書きした画像を示している。前述したようにブラインドコーナカメラ２１は、プリズム２１ｂを利用して、異なる複数の方向を１つのＣＣＤにより撮像する構成であり、撮像して得られた画像には大きな歪みを有する領域、物理的に撮像されていない領域、ユーザにとって不要な情報を含んだ領域等が撮像されている場合がある。そこで、ブラインドコーナカメラ２１が選択されている場合にはグラフィックスを上書表示し、ブラインドコーナカメラ２１の映像を見やすくするようにしている。図８（ａ）に示した例では、車両Ｃのグラフィックス４２０とハッチングによって示されたマスク画像４２１ａ，４２１ｂ，４２１ｃとを上書表示することによって、あたかも２つのカメラによって撮像されたかのような映像を表示することが可能となる。
【００７１】
車両Ｃのグラフィックス４２０及びマスク画像４２１ａ，４２１ｂ，４２１ｃ等のグラフィックスは、画像処理システムの製造時又は組込時に予め作成してフレームメモリ１６に記憶させたものであり、カメラ２１〜２５からの画像データと区別するためにフラグ「０」が付与されている。このような画像データを作成する場合、オーバレイテーブルを利用して画像データの変換を行う。オーバレイテーブルは、カメラ２１〜２５の画像データを表すフラグ「１」（又は「２」）と、グラフィックスを表すフラグ「０」とが混在した要素を有する。
【００７２】
図８（ｂ）は、バックカメラ２４（又はバックカメラ２５）により得られた画像データの視点変更を行った画像である。バックカメラ２４（又はバックカメラ２５）により得られた画像データを視点変更テーブルにより変換すると共に、前述と同様に車両Ｃの後部を示すグラフィック４２２を表示する画像データに追加する。このような画像データは、各種変換テーブルを利用しても一度に作成されないものであるため、マイクロコンピュータ１１は、２つの変換テーブル（視点変更テーブル及びオーバレイテーブル）を合成した変換テーブルを新たに作成し、作成した変換テーブルを利用して画像データの変換を行うようにしている。
【００７３】
図９は、モニタ装置４０に表示される画面の一例を示す模式図である。前述したようにゲートウェイ装置１０に入力される画像データは、カメラ２１〜２５から出力された画像データだけでなく、ナビゲーション装置３２が出力した地図画像データが入力される場合もある。また、オーディオ装置３１から出力された制御信号に基づいて画像処理ＡＳＩＣ１２は、前記制御信号に応じたグラフィックスを生成することができる。
【００７４】
ゲートウェイ装置１０では、変換テーブルを利用することによって、ナビゲーション装置３２からの地図画像データ上に、オーディオ装置３１からの制御信号に基づき生成されたグラフィックスを上書表示することが可能となる（図９（ａ））。このような画像データを生成する場合、ナビゲーション装置３２からの画像データにフラグ「１」を与え、オリジナル表示テーブル１７ａを利用して画像変換せずに表示すると共に、オーディオ装置３１から出力された選曲情報、ボリューム情報等の制御信号に基づくグラフィックスにはフラグ「０」を与え、オリジナル表示テーブル１７ａの一部を更新することによって、地図画像データの一部を前記グラフィックスに差し替える。
【００７５】
なお、ナビゲーション装置３２によっては、地図画像データを映像ストリームとして出力せずに、描画コマンドのみを出力し、モニタ装置４０にてその描画コマンドを元に映像ストリームを生成させる形態のものも存在する。この場合、ゲートウェイ装置１０の画像処理ＡＳＩＣ１４で描画コマンドを解釈して、映像ストリームを生成させるようにすることによって、モニタ装置４０及び後席モニタ装置３３は描画コマンドを解釈する機能が不要となり、コスト的に有利となる。
【００７６】
図１０は、モニタ装置４０に表示される画面の一例を示す模式図である。ＡＶ系情報ＬＡＮ３０に接続されたオーディオ装置３１、図に示していない空気調和機、時計等からの制御信号に基づいてグラフィックスを生成し、モニタ装置４０に表示させることも可能である。表示させるグラフィックスの基本的部分は固定であるが、例えば、音楽ＣＤを再生している間の選曲情報、演奏時間等の時間に対して変化する部分のみをマイクロコンピュータ１１により変換テーブルを作成して更新するようにしている。
【００７７】
本実施の形態では、オーディオ装置３１、空気調和機、時計からの制御信号に基づいて生成されたグラフィックスを表示する例について説明したが、車速センサ、エンジンＥＣＵから車速、ガソリン残量情報等を取得し、それらの情報を元にゲートウェイ装置１０にて変換テーブルデータを逐次更新し、モニタ装置４０に表示させることも可能である。
【００７８】
図１１は、本実施の形態に係る画像表示システムの処理手順を説明するフローチャートである。本フローチャートでは、画像データの表示先をモニタ装置４０から後席モニタ装置３３へ切替える処理について説明する。まず、ゲートウェイ装置１０、モニタ装置４０、カメラ系情報ＬＡＮ２０に接続された各カメラ２１〜２５、ＡＶ系情報ＬＡＮ３０に接続されたオーディオ装置３１、ナビゲーション装置３２の電源を投入することによって、本画像表示システムを起動する（ステップＳ１）。
【００７９】
画像処理システムの起動直後に利用するカメラとして指定されたカメラ（例えば、ブラインドコーナカメラ２１）に対して画像データの送信開始指示を行う（ステップＳ２）。そして、そのカメラで利用する変換テーブルの選択を行い（ステップＳ３）、選択された変換テーブルを利用して生成した表示データをモニタ装置４０へ送出する（ステップＳ４）。
【００８０】
次いで、マイクロコンピュータ１１は、制御パネル３４からの制御信号が通信インタフェース１３ｂに入力されたか否かを判断する（ステップＳ５）。制御パネル３４からの制御信号が通信インタフェース１３ｂに入力されていない場合（Ｓ５：ＮＯ）、制御信号が入力されるまで待機する。制御パネル３４からの制御信号が通信インタフェース１３ｂに入力された場合（Ｓ５：ＹＥＳ）、モニタ装置４０に対して画像データの送信停止を指示する（ステップＳ６）。
【００８１】
そして、後席モニタ装置３３に対して画像データの送信停止を指示する（ステップＳ７）。次いで、マイクロコンピュータ１１は、変換テーブル用メモリ１７に記憶されている変換テーブルを選択する（ステップＳ８）。そして、後席モニタ装置３３への表示データを送出開始する（ステップＳ９）。
【００８２】
本実施の形態では、このように、オーディオ装置３１、ナビゲーション装置３２、後席モニタ装置３３等をＡＶ系情報ＬＡＮ３０に接続し、各種カメラ２１〜２５をカメラ系情報ＬＡＮ２０に接続するようにしている。そして、ゲートウェイ装置１０にて画像処理を行い、処理結果のみをＡＶ系情報ＬＡＮ３０へ送出することも可能であるため、ＡＶ系情報ＬＡＮ３０の帯域を節約できるという利点を有する。例えば、２つのカメラ（例えば、バックカメラ２４，２５）からの画像データを合成して一の表示用データを生成する処理をゲートウェイ装置１０にて行う場合、１つの画像データ当たりの情報量を３０Ｍｂｐｓと仮定したとき、カメラ系情報ＬＡＮ２０には６０Ｍｂｐｓのデータが流れるが、ＡＶ系情報ＬＡＮ３０には３０Ｍｂｐｓのデータしか流さなくて済む。
【００８３】
また、本実施の形態では、カメラ系情報ＬＡＮ２０とＡＶ系情報ＬＡＮ３０とをゲートウェイ装置１０に接続する形態としたが、メーカ又はディーラの純正ＡＶ機器をＯＥＭ系ＬＡＮに接続し、量販店が販売するＡＶ機器をＯＰＥＮ系ＬＡＮに接続し、夫々をゲートウェイ装置１０に接続することも可能である。この場合、例えば、ＯＰＥＮ系ＬＡＮに接続されたナビゲーション装置の地図画像データをＯＥＭ系ＬＡＮに接続されたモニタ装置に表示することができる。とりわけ、両ＬＡＮをＩＥＥＥ１３９４の通信規格に適応させたネットワークとして構築した場合、ＩＥＥＥ１３９４では接続ポートから電源供給ができるため、予備の接続ポートを予め準備しておくだけでシステムの拡張を容易にすることが可能となる。
【００８４】
また、ＯＥＭ系ＬＡＮの通信プロトコルは各メーカ間で互換性がなく、しかも非公開にされている場合が多い。しかし、ＯＰＥＮ系ＬＡＮにＩＥＥＥ１３９４又はＩＤＢ−１３９４等の国際標準化されたプロトコルを使用した場合、量販店で販売されるＡＶ機器を何れのメーカの車両にも接続することができ、また、プロトコルが公開されているためＡＶ機器の開発がしやすいという利点を有する。
【００８５】
ＯＰＥＮ系ＬＡＮに接続されたＡＶ機器の画像データをモニタ装置４０にしか表示しない場合、中継処置ＡＳＩＣ１２は画像処理ＡＳＩＣ１４にのみ画像データを出力する。したがって、ＯＥＭ系ＬＡＮには画像データを送信しないようにすることができるため、ＯＥＭ系ＬＡＮの帯域を節約することが可能である。また、逆にＯＥＭ系ＬＡＮに接続されたＡＶ機器の画像データをモニタ装置４０でのみ表示する場合は、ＯＰＥＮ系ＬＡＮの帯域を節約することが可能となる。
【００８６】
また、ＯＰＥＮ系ＬＡＮに不正な処理を行うＡＶ機器が接続された場合でも、ゲートウェイ装置１０に認定機能を用意しておくことにより、ＯＥＭ系ＬＡＮに接続されたＡＶ機器に対して悪影響を与えないようにすることもできる。
【００８７】
また、ナビゲーション装置３２が出力する地図画像データの解像度とモニタ装置４０にて表示できる解像度とが異なる場合があるが、ゲートウェイ装置１０の画像処理ＡＳＩＣ１２に解像度変換機能を持たせておくことにより、解像度が異なる機器間で画像データを共用することが可能となる。
【００８８】
更に、ＯＰＥＮ系ＬＡＮにデジタルビデオカメラ、テレビゲーム機等の後付機器を接続する場合、これらの後付機器を抜き差しする際に生じるバスリセットの影響をＯＥＭ系ＬＡＮに接続された機器に与えないようにすることが可能となる。また、不正な処理を行う後付機器が接続された場合であっても、ゲートウェイ装置１０に認証機能を準備しておくことにより、ＯＥＭ系ＬＡＮに接続された機器に対して悪影響を与えないようにすることが可能となる。
【００８９】
また、本発明の中継装置であるゲートウェイ装置１０は、車内に構築された車内情報系ＬＡＮとインターネット網のような外部情報系ＬＡＮとの間にて、情報の中継処理及びゲートウェイ処理を行う装置として利用することも可能である。例えば、ゲートウェイ装置１０にて、ＡＶ／ＣプロトコルとＴＣＰ／ＩＰプロトコルとの間のプロトコル変換処理、ＤＶ圧縮方式とＭＰＥＧ４圧縮方式との間の圧縮方式の変換処理を行うことで、インターネット網から受信した動画像を車内情報系ＬＡＮに接続されたモニタ装置に表示することができ、また、車載カメラで撮像した画像データをインターネット網に接続されたサーバ装置へ送信することも可能となる。
【００９０】
具体的なアプリケーションとして、車両Ｃの前方に設置したブラインドコーナカメラ２１による画像データをインターネット網に接続されたサーバ装置へ送信することにより、それらの画像データを道路交通情報、渋滞情報として利用することが可能となる。また、各家庭内に設置されたカメラの画像データをインターネット網を介して車両Ｃへ送信し、車内情報系ＬＡＮに接続されたモニタ装置に表示させることによって、車内から家庭内の状況を知ることができるホームセキュリティシステムとして利用することも可能である。
【００９１】
このように、ゲートウェイ装置１０にプロトコル変換機能、圧縮方式変換機能を持たせることにより、車内情報系ＬＡＮに接続された機器が個々にプロトコル変換機能、圧縮方式変換機能を有している必要がなく、これらの処理を行うコーデック等の部品を省略できるため、システム構築のコストを削減できる。更に、オーディオ装置等からの制御信号に基づいてグラフィックスを作成する際の変換テーブルに係る情報をインターネット経由でダウンロードし、更新することも可能である。
【００９２】
実施の形態２．
実施の形態１では、カメラ系情報ＬＡＮ２０とＡＶ系情報ＬＡＮ３０との間にて送受信される各種画像データ、制御信号等を中継するゲートウェイ装置１０について説明したが、通信速度が比較的低速な情報が送受信される低速情報系ＬＡＮ、ボディ系ＬＡＮ、制御系ＬＡＮを接続できるようにしてもよい。
【００９３】
図１２は、本実施の形態に係るゲートウェイ装置の内部構成を示すブロック図である。本実施の形態に係るゲートウェイ装置１００は、実施の形態１と同様に、中継処理ＡＳＩＣ１０２を有しており、該中継処理ＡＳＩＣ１０２には、マイクロコンピュータ１０１、通信インタフェース１０３ａ，１０３ｂ、画像処理ＡＳＩＣ１０４が接続されている。また、画像処理ＡＳＩＣ１０４には、モニタ装置（不図示）を接続するためのモニタインタフェース１０５、画像データを一時的に記憶するためのフレームメモリ１０６、画像処理を行う際に利用される変換テーブルが記憶されている変換テーブル用メモリ１０７が接続されている。
【００９４】
更に、マイクロコンピュータ１０１には通信インタフェース１０３ｃ，１０３ｄが接続されており、通信インタフェース１０３ｃには低速情報系ＬＡＮが接続され、通信インタフェース１０３ｄにはボディ系ＬＡＮ、制御系ＬＡＮが接続される。低速情報系ＬＡＮには、例えば、空気調和機等の制御コマンドのみを送受信して動作する車載器が接続され、制御系ＬＡＮには、車速センサ、タイヤの空気圧センサ、温度センサ等が接続され、ゲートウェイ装置１００にて各種の制御信号、センサからの信号を取得できるようになっている。ゲートウェイ装置１００では、このような制御信号、センサからの信号に基づきグラフィックスを生成するようにしている。例えば、空気調和機から設定温度情報をゲートウェイ装置から取得し、グラフィックデータを生成するための変換テーブルを更新して、モニタ装置にて表示される画像データとして生成することが可能である。
【００９５】
また、ボディ系ＬＡＮを介して制御パネルを接続し、前記制御パネルからの制御信号に基づいて、利用するカメラの切替え、及び変換テーブルの切替えを行うようにしても良い。
【００９６】
実施の形態３．
実施の形態１では、ＡＶ系情報ＬＡＮ３０に接続された制御パネル３４により、利用するカメラ、変換テーブルを変更する形態であったが、ゲートウェイ装置に制御パネルを直付けすることも可能である。
【００９７】
図１３は、本実施の形態に係るゲートウェイ装置の内部構成を示すブロック図である。本実施の形態に係るゲートウェイ装置２００は、前述と同様に、中継処理ＡＳＩＣ２０２を有しており、該中継処理ＡＳＩＣ２０２には、マイクロコンピュータ２０１、通信インタフェース２０３ａ，２０３ｂ、画像処理ＡＳＩＣ２０４が接続されている。また、画像処理ＡＳＩＣ２０４には、モニタ装置（不図示）を接続するためのモニタインタフェース２０５、画像データを一時的に記憶するためのフレームメモリ２０６、画像処理を行う際に利用される変換テーブルが記憶されている変換テーブル用メモリ２０７が接続されている。また、マイクロコンピュータ２０１には、前述した低速通信用の２つの通信インタフェース２０３ｃ，２０３ｄが接続されている。
【００９８】
また、本実施の形態では、制御パネル２１０を接続するための制御パネルインタフェース２０８がマイクロコンピュータ２０１に接続されている。各カメラの切替え、利用する変換テーブルの切替え等を制御パネル２１０から行うことが可能となる。
【００９９】
実施の形態４．
各カメラ、ナビゲーション装置からの画像データをストリームとして伝送する場合、ＭＰＥＧ、ＤＶ圧縮方式により圧縮された状態で各ＬＡＮを伝送することも考えられる。
【０１００】
図１４は、本実施の形態に係るゲートウェイ装置の内部構成を示すブロック図である。本実施の形態に係るゲートウェイ装置３００は、前述と同様に、中継処理ＡＳＩＣ３０２を有しており、該中継処理ＡＳＩＣ３０２には、マイクロコンピュータ３０１、通信インタフェース３０３ａ，３０３ｂ、画像処理ＡＳＩＣ３０４が接続されている。また、画像処理ＡＳＩＣ３０４には、モニタ装置（不図示）を接続するためのモニタインタフェース３０５、画像データを一時的に記憶するためのフレームメモリ３０６、画像処理を行う際に利用される変換テーブルが記憶されている変換テーブル用メモリ３０７が接続されている。また、マイクロコンピュータ３０１には、前述した低速通信用の２つの通信インタフェース３０３ｃ，３０３ｄ、制御パネル３１０のための制御パネルインタフェース３０８が接続されている。
【０１０１】
本実施の形態では、更に、中継処理ＡＳＩＣ３０２と画像処理ＡＳＩＣ３０４との間に、ＤＶコーデック３０９ａ及びＭＰＥＧコーデック３０９ｂが接続されている。ＤＶ圧縮されたデータ、又はＭＰＥＧデータが通信インタフェース３０３ａ，３０３ｂに入力された場合、それぞれＤＶコーデック３０９ａ、又はＭＰＥＧコーデック３０９ｂにより圧縮を展開して非圧縮形式（ＩＴＵ−Ｒ　ＢＴ．６５６等）のデータに変換した後に画像処理を行う。
【０１０２】
また、ＡＶ系情報ＬＡＮ３０に接続された後席モニタ装置３３がＤＶデコーダのみしか有していない場合、ゲートウェイ装置３００にて圧縮形式の変換を行った上で後席モニタ装置３３にストリームデータを転送することもできる。
【０１０３】
また、ＭＰＥＧには、ＭＰＥＧ１，ＭＰＥＧ２，ＭＰＥＧ４等の複数の規格が存在するが、ゲートウェイ装置３００に各規格に準拠したコーデックを搭載しておくことにより、各規格間の変換が可能となる。例えば、インターネット網から送信されてきたＭＰＥＧ４圧縮されたＴＣＰ／ＩＰパケット（ＭＰＥＧ４プログラムストリーム）をＭＰＥＧ２（トランスポートストリーム）に変換することによって、ＢＳデジタルチューナで受信したＭＰＥＧ２−ＴＳ映像と同様の処理を行うことが可能となる。
【０１０４】
なお、本実施の形態では、制御パネルインタフェース３０８は必ずしもゲートウェイ装置３００の必須の構成要件ではなく、ＡＶ系情報ＬＡＮ３０又はボディ系ＬＡＮに制御パネル接続し、該制御パネルからの制御信号に基づいて、カメラの切替え、変換テーブルの切替えを行うようにしても良い。
【０１０５】
【発明の効果】
以上、詳述したように、第１発明及び第１１発明による場合は、受付けた複数の画像データから一の表示用データに変換する処理を中継装置にて行うようにしている。したがって、撮像装置等の画像生成装置から複数の画像データを同時的に入力して画像処理を施す場合、撮像装置毎に画像処理ＬＳＩ、ＡＤ変換器、フレームメモリ等を設ける必要がないため、コストを削減することが可能となる。
【０１０６】
第２発明による場合は、変換テーブルを利用した画像処理を行うようにしている。したがって、各種画像処理の手法を共通化することが可能となり、画像処理ＬＳＩ、ＡＤ変換器、フレームメモリ等を共用できるため、コストを削減することが可能となる。また、変換テーブルは、画像データの画素毎に変換情報を含んでいるので、種々の表示形式に容易に対応できる。
【０１０７】
第３発明による場合は、データ変換用の各種変換テーブルを揃えることで基本的な変換形式に対応することができ、変換処理を標準化して変換効率を向上することが可能となる。なお、各種変換テーブルは、画像表示システムに含まれる撮像装置の種類等に応じて必要な表示形式に対応するものを備えることが必要である。
【０１０８】
第４発明による場合は、各種の基本的な変換テーブルを複合した複合テーブルを利用できるため、複雑な画像処理を迅速に行うことができる。
【０１０９】
第５発明による場合は、接続した情報機器からの情報に基づき、表示用データに所要のデータを付加することができる。したがって、例えば、オーディオ装置のような情報機器からの制御コマンドを取得した場合、曲順、演奏時間、選曲情報等の各種の情報に基づいたグラフィックスを作成して、表示すべき画像データに付加した上で表示することが可能となる。
【０１１０】
第６発明による場合は、受付けた画像データの解像度を変更できるようにしている。したがって、解像度が異なる機器の画像データも表示装置に表示させることが可能となる。
【０１１１】
第７発明による場合は、圧縮方式の変換を行うようにしている。したがって、ＤＶ圧縮（ＤＶ　：　Ｄｉｇｉｔａｌ　Ｖｉｄｅｏ）、ＭＰＥＧ等の圧縮方式の変換を行うため、片方の圧縮方式にしか対応していない機器でも画像データの受け渡しを行うことができる。
【０１１２】
第８発明による場合は、外部の通信回線に接続できるため、例えば、インタネット網に接続されたサーバ装置等から画像データを取得し、表示装置にて表示することが可能となる。
【０１１３】
第９発明による場合は、外部の通信回線を介して変換テーブルを取得することが可能となる。したがって、撮像装置等の画像生成装置を新規に接続した場合、その画像生成装置に対応した変換テーブルを容易に取得することが可能となる。また、変換テーブルに基づき作成されるグラフィックスを最新のものに更新することが可能となる。
【０１１４】
第１０発明による場合は、通信規約の変更を可能にしている。したがって、中継装置に接続された情報機器に夫々インタネット向けのプロトコル・コーデックを持たせる必要がなく、インターネット上の画像データ、映像データを交換することが可能となる等、本発明は優れた効果を奏する。
【図面の簡単な説明】
【図１】本実施の形態に係る画像表示システムの構成を説明するブロック図である。
【図２】各カメラの取付位置を示す概略平面図である。
【図３】ブラインドコーナカメラの概略構成図である。
【図４】ゲートウェイ装置の内部構成を説明するブロック図である。
【図５】制御パネルから各種の設定を行う際にモニタ装置に表示される画面の一例を示す模式図である。
【図６】画像変換処理の一例を説明する模式図である。
【図７】変換テーブルの一例を示す概念図である。
【図８】モニタ装置に表示される画面の一例を説明する模式図である。
【図９】モニタ装置に表示される画面の一例を示す模式図である。
【図１０】モニタ装置に表示される画面の一例を示す模式図である。
【図１１】本実施の形態に係る画像表示システムの処理手順を説明するフローチャートである。
【図１２】本実施の形態に係るゲートウェイ装置の内部構成を示すブロック図である。
【図１３】本実施の形態に係るゲートウェイ装置の内部構成を示すブロック図である。
【図１４】本実施の形態に係るゲートウェイ装置の内部構成を示すブロック図である。
【図１５】従来の画像表示システムの構成を示すブロック図である。
【符号の説明】
１０　ゲートウェイ装置
１１　マイクロコンピュータ
１２　中継処理ＡＳＩＣ
１３ａ，１３ｂ　通信インタフェース
１４　画像処理ＡＳＩＣ
１５　モニタインタフェース
１６　フレームメモリ
１７　変換テーブル用メモリ
２０　カメラ系情報ＬＡＮ
２１　ブラインドコーナカメラ
２２　前方補助カメラ
２３　ドアミラーカメラ
２４　バックカメラ
２５　バックカメラ
３０　ＡＶ系情報ＬＡＮ
３１　オーディオ装置
３２　ナビゲーション装置
３３　後席モニタ装置
３４　制御パネル
４０　モニタ装置
【図１】
2004015235.tif 000003
【図２】
2004015235.tif 000004
【図３】
2004015235.tif 000005
【図４】
2004015235.tif 000006
【図５】
2004015235.tif 000007
【図６】
2004015235.tif 000008
【図７】
2004015235.tif 000009
【図８】
2004015235.tif 000010
【図９】
2004015235.tif 000011
【図１０】
2004015235.tif 000012
【図１１】
2004015235.tif 000013
【図１２】
2004015235.tif 000014
【図１３】
2004015235.tif 000015
【図１４】
2004015235.tif 000016
【図１５】
2004015235.tif 000017