(57)【特許請求の範囲】
【請求項１】
複数系統の画像信号を入力する入力手段と、
前記複数系統の画像信号を処理する画像処理手段と、
前記画像処理手段より出力される複数系統の画像信号を表示装置に出力する出力手段と、
前記複数系統の画像信号に係る画像属性情報を検出する検出手段と、
前記検出手段によって検出された画像属性情報と前記表示装置に係る表示属性情報とから前記画像信号を前記表示装置上に表示した際の画像サイズを算出するとともに、前記画像サイズと表示設定情報とに基づいて、前記複数系統の画像信号のそれぞれに対応する画像変換情報を生成する生成手段と、
前記生成手段により生成された画像変換情報に基づいて前記画像処理手段による前記複数系統の画像信号の処理を制御する制御手段とを備える画像処理装置。
【請求項２】
前記画像属性情報は前記画像信号の解像度の情報を含み、前記表示属性情報は前記表示装置の解像度の情報を含むことを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記画像処理手段は前記画像変換情報に基づいて前記画像信号の解像度を変換することを特徴とする請求項２記載の画像処理装置。
【請求項４】
複数系統の画像信号を入力し、前記複数系統の画像信号を処理して表示装置に出力する方法であって、
前記複数系統の画像信号に係る画像属性情報を検出し、
前記検出された画像属性情報と前記表示装置に係る表示属性情報とから前記画像信号を前記表示装置上に表示した際の画像サイズを算出するとともに、前記画像サイズと表示設定情報とに基づいて、前記複数系統の画像信号のそれぞれに対応する画像変換情報を生成し、
前記生成された画像変換情報に基づいて前記複数系統の画像信号の処理を制御することを特徴とする画像処理方法。
【請求項５】
複数系統の画像信号を入力し、前記複数系統の画像信号を処理して表示装置に出力する処理において、
前記複数系統の画像信号に係る画像属性情報を検出し、
前記検出された画像属性情報と前記表示装置に係る表示属性情報とから前記画像信号を前記表示装置上に表示した際の画像サイズを算出するとともに、前記画像サイズと表示設定情報とに基づいて、前記複数系統の画像信号のそれぞれに対応する画像変換情報を生成し、
前記生成された画像変換情報に基づいて前記複数系統の画像信号を制御する処理をコンピュータに実行させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は画像処理装置、画像処理方法及び記憶媒体に関し、特には、複数系統の画像信号の処理に関する。
【０００２】
【従来の技術】
近年、通信技術の発達により、オフィスでのネットワーク化が進み、PCを中心に様々な機器が相互接続されて機能の共有が実現されるようになっている。また、ＨＡＶｉやＪｉｎｉ規格に代表されるような、ＩＥＥＥ１３９４やＵＳＢあるいは無線インターフェースを用いた機器間の通信の規格化により家庭内のあらゆる機器に対してもネットワーク化の基礎が出来上がりつつある。
【０００３】
一方、以前はテレビジョン（ＴＶ）受信機とパーソナルコンピュータ（ＰＣ）のディスプレイは全くの別物であったが、相互の融合化が進み、ＰＣの画像を表示できるＴＶや、ＴＶの信号を入力できるＰＣのディスプレイが現れてきた。
【０００４】
さらに、ワイド対応のＴＶやプラズマディスプレイ、リア型プロジェクションＴＶや投射型のプロジェクターなどの大画面の表示装置において、映画やＴＶ放送、ホームビデオ、プレゼンテーション、ＴＶ会議、各種資料の表示などのさまざまな映像ソースをオフィスや家庭で利用する場面が増加している。
【０００５】
このような機器間のネットワーク化の進行、また、入力ソースの多様化に伴い、ディスプレイには、１つの画面内に複数の異なる画像信号源の画像を画面内に分割して表示を行うマルチ画面表示機能の要求が有る。
【０００６】
こうした家庭用のネットワーク化の動きは、ＡＶ機器に限らず家庭内のすべての機器に対して進んでおり，例えば冷蔵庫、洗濯機、電子レンジ、エアコン等の家庭用電気機器やパソコン周辺機器（ＦＡＸ、プリンタ、デジタルカメラ等）、携帯端末なども視野に置かれている。
【０００７】
こうした動きの中で，これら機器から出力される画像情報をネットワーク上で直接やり取りしてディスプレイ上にマルチ表示を行うことが考えられる。
【０００８】
現在は、ＡＶ機器からの映像信号をネットワーク経由でディスプレイに表示することが中心であるが，将来的には家庭用電気機器の制御画像等も同じディスプレイ上で表示してコントロールすることや、パソコン周辺機器からのアプリケーション画像を直接ディスプレイに伝送して表示を行うことが行われると予想される。
【０００９】
また、最近は携帯電話のカラー表示化と多機能化やＰＤＡ(パーソナルデータアシスタント)と呼ばれる携帯型の情報端末の高性能化にともない、こうした携帯端末がインターネットやＰＣとの間で通信を経由して画像の取得をする機会が増えているが、将来的には、これら携帯端末の画像もネットワーク経由で直接ディスプレイに伝送して表示を行うことにより、携帯端末の家庭内やオフィス内での用途も飛躍的に広がると考えられる。
【００１０】
【発明が解決しようとする課題】
しかしながら、現在のディスプレイはネットワーク経由で種々の画像データを直接やり取りする上で以下に述べる問題点がある。
【００１１】
まず、第一に、もともと視聴距離や用途の異なる複数の機器からの画像を同一画面上に混在表示する場合に表示文字や画像の大きさ等の表示品位がまちまちになる欠点がある。
【００１２】
例えば、ＰＣ用の表示装置などは、表示画素数をＸＧＡ（１０２４×７６８），ＳＸＧＡ（１２８０×１０２４）からＵＧＡ（１６００×１２００），ＱＸＧＡ（２０４８×１５３６）と高精細化して文字や画像の表示品位をあげる方向であり、表示密度が高いのに対して、ＰＤＡや携帯電話などの機器の画面は、必要性能や端末の制約から限られた画素数と表示領域の画像を扱っているため表示密度が比較的低い。
【００１３】
また視聴距離も、PC用の表示装置が、６０ｃｍ以上離れた距離で見ることが一般的なのに対して、携帯端末は２０〜４０ｃｍくらいで見るなど大きく異なる。
【００１４】
このため、こうした比較的粗い画素密度の携帯機器の画像を、高精細表示装置に転送してそのままの画素数当たりで表示したのでは画像が小さすぎて情報を見るのに不適切な大きさとなってしまう。
【００１５】
また、現在のＰＣ用の表示装置は、表示画面解像度（画素数）に対する入力信号の解像度（画素数）の比率をもとに解像度変換する構成になっているが、これを携帯端末の画像にそのまま適用すると、表示画像の解像度に変換すると画像が情報量の割に大きすぎて粗い画面となってしまい、この場合も不適切な大きさとなってしまう。
【００１６】
さらに、こうした携帯端末はその形態、仕様が多岐にわたるため、送信される画像の大きさや解像度などの表示属性が統一されていないので、結果として表示画面上の文字や画像の大きさ、表示品位がまちまちになる。
【００１７】
第二の問題点として、ネットワーク独特の多対一や多対多接続における新規の画像入力や同一信号源からの信号属性の変化に柔軟に対応できない問題がある。
【００１８】
例えば、１つのＰＣ上でそれぞれのアプリケーション画像（たとえばＴＶ電話の画像や、ネットワークを介した文字通信（チャット）、デジタルカメラの画像表示など）に適したウインドウの大きさと位置を画面上に設定することは可能であるが、こうしたアプリケーションに対して表示属性を設定する方式は、新しい入力を表示する場合は、その都度自分でウインドウの大きさと位置を画面上に設定しなくてはならない。また、一旦設定した場合、その信号源の出力が変化しても同じ設定で表示しつづけてしまう。
【００１９】
また、セットトップボックス（ＳＴＢ）や多画面ＴＶのように、入力系統やチャンネル毎に適したウインドウの大きさと位置を画面上に設定する方法もあるが、こうした表示装置において入力系統やチャンネルに対して表示属性を設定する方式でも同様に、新しい画像入力や信号源の出力が変化に対応できず、たえずユーザー設定を必要としていた。
【００２０】
本発明は前述の如き問題点を解決することを目的とする。
【００２１】
本願の他の目的は、複数の入力画像信号に係る画像を最適に表示可能とする処にある。
【００２２】
【課題を解決するための手段】
前記目的を達成するため、本発明にあっては、装置外部より複数系統の画像信号を入力する入力手段と、前記複数系統の画像信号を処理する画像処理手段と、前記画像処理手段より出力される複数系統の画像信号を表示装置に出力する出力手段と、前記複数系統の画像信号に係る画像属性情報を検出する検出手段と、前記検出手段によって検出された画像属性情報と前記表示装置に係る表示属性情報とから前記画像信号を前記表示装置上に表示した際の画像サイズを算出するとともに、前記画像サイズと表示設定情報とに基づいて、前記複数系統の画像信号のそれぞれに対応する画像変換情報を生成する生成手段と、前記生成手段によって生成された画像変換情報に基づいて前記画像処理手段による前記複数系統の画像信号の処理動作を制御する制御手段とを備える構成とした。
【００２３】
【発明の実施の形態】
以下、本発明の実施の形態を図面と共に説明する。
【００２４】
図１に、本発明における第一の実施例として、ネットワーク接続された２台の画像信号源装置と１台の画像表示装置の構成図を示す。ここでは、簡単化のため、ネットワークに接続される複数の機器のうち３台の間の構成のみを取り出して示している。
【００２５】
１００は画像表示装置としてのディスプレイ、２００，３００は画像信号源としてのＰＣやＤＶＤ、デジタルテレビ用チューナー、携帯機器などの画像を出力する装置である。図１のシステムでは、画像信号と音声信号とをそれぞれデジタル信号として伝送する。
【００２６】
まず、装置２００，３００において、２０１，３０１がＣＰＵ（中央演算装置）であり、２０２，３０２がこのＣＰＵ２０１，３０１の制御信号を装置各部に伝えると共に、全体のデータバス、制御バスを制御するバスコントロール部である。２１１，３１１が各部を接続するデータバスおよび制御バスからなるシステムバス配線である。２１２，３１２がＣＰＵ２０１，３０１とバスコントロール部２０２，３０２との間のバス配線である。２０３，３０３は各ＰＣのメインメモリ部であり、２０４，３０４はハードディスク（ＨＤＤ）などの記録媒体部である。２０５，３０５はディスプレイ１００用の画像信号を作成するグラフィック描画部であり、ここで、出力するべき画像信号に対してディスプレイ１００への出力画像属性（解像度、画素周波数、画面の更新周波数、ガンマ特性、階調数、色特性など）にあわせた処理が行われる。
【００２７】
２０６，３０６はグラフィック描画部２０５，３０５の画像処理時に用いられる画像メモリ部である。２１３，３１３はグラフィック描画部２０５，３０５と画像メモリ部２０６，３０６との間のデータバスおよび制御バスである。
【００２８】
２０７，３０７は通信部である。ここで、ディスプレイ１００と装置２００，３００との間での通信に関しては、ＤＤＣ（Display Data Channel）という標準が有る。ＤＤＣとは、ディスプレイ関連の標準化団体であるＶＥＳＡ（Video Electronic Standard Association）が勧告した、コンピュータが表示装置を認識および制御するためのやりとりの標準である。この通信方法にのっとって、同じくＶＥＳＡが標準化したＥＤＩＤ（Extended Display Identification Data）形式のディスプレイの表示属性情報が、ディスプレイ側からPC側に伝送される。
【００２９】
通信部２０７，３０７はこのＥＤＩＤ情報などの画像属性情報やエラー信号などとともに、ディスプレイ１００からの情報量制御信号を受信する。２０８，３０８は画像属性情報としてのＥＤＩＤ情報を記憶する記憶部であり、通信部２０７，３０７により取得したディスプレイ１００のＥＤＩＤ情報を格納する部分である。
【００３０】
２０９，３０９はディスプレイ１００に対して送出する画像信号および音声信号に画像信号の識別信号を付加する識別信号付加部である。ここで、識別信号はネットワーク上の各機器に対して独立に付与された通信アドレスや識別番号（ID）、あるいは画像信号自身にあたえた通信アドレスや識別番号（ID）などであり、画像信号の送出先を表示装置やネットワーク上の画像受信装置に通知する信号である。この識別信号は信号源、あるいは後述の出力モード等に応じて異なる値を持つ。
【００３１】
２１０，３１０はグラフィック描画部２０５，３０５で作成された画像信号と、不図示の音源部で作成された音声信号を、ディスプレイ１００に伝送するための画像・音声送信部である。具体的には、ディスプレイの規格化団体ＤＤＷＧ（Digital Display Working Group）が策定したＤＶＩ（Digital Video Interface）規格などの採用したＴＭＤＳ規格の伝送素子や、画像信号、音声信号をＭＰＥＧ方式で圧縮・符号化すると共に部分書き変え信号を作成するエンコード素子とプロトコル信号を伝送するＩＥＥＥ１３９４の送信素子などである。
【００３２】
２０１ａ，３０１ａは画像制御部であり、ディスプレイ１００から受信したＥＤＩＤ情報を受けて、グラフィック描画部２０５，３０５を制御する。また、２０１ｂ、３０１ｂは画像属性情報作成部であり、送信する画像の画像属性情報を作成する部分である。ここで、画像属性情報とは、画像の解像度、画像の大きさ、使用文字フォントの大きさ、画面の更新周期、階調数、色、アスペクト比や伝送方式、圧縮方式、圧縮率、書き換え周期などである。
【００３３】
なお、画像制御部２０１ａ，３０１ａ及び、画像属性作成部２０１ｂ、３０１ｂによる処理はＣＰＵ２０１によるソフトウェア処理で実現される。
【００３４】
次に、ディスプレイ１００において、１０１がディスプレイ１００の処理を制御するマイコン部であり、１１５がこのマイコン部１０１からの制御バスおよびデータバスからなる配線群である。バス配線群１１５は図に示したように、ディスプレイ１００の各処理回路を相互に接続し、データのやり取りを可能としている。
【００３５】
１０２は装置２００，３００の画像音声送信部２１０，３１０から伝送された画像信号と音声信号を受信するとともに、ＴＭＤＳやＩＥＥＥ１３９４フォーマットの信号をデコードし、圧縮データを伸長する画像・音声受信部である。
【００３６】
１０３は装置２００，３００からの画像の画素数をディスプレイ１００の表示画素数にあわせるための解像度変換や画面更新周波数（フレームレート）の変換を行うための画像処理部である。１０４は画像処理部１０３の処理に用いられる画像メモリであり、１１６がこのメモリのデータバスおよび制御バスからなる配線群である。
【００３７】
１０５は画像表示部１０６にて用いられる液晶やＣＲＴなどの特性にあわせてガンマ特性や色特性などを変換し、オンスクリーンディスプレイなどの文字表示を行う表示処理部である。１０６は液晶やＣＲＴ，ＰＤＰ，ＥＬ，ＬＥＤなどの素子で構成される画像表示部である。１１８，１１９，１２０は画像のデータバスである。
【００３８】
１０７が受信した音声信号をスピーカーで再生するための信号に変換や増幅を行う音声処理部であり、１０８がスピーカーである。また、１１７がその間の配線である。
【００３９】
１０９がこのディスプレイ固有のＥＤＩＤ情報を記憶するＥＤＩＤ情報格納部であり、通信部１１０はこのＥＤＩＤ情報格納部１０９に記憶されたＥＤＩＤ情報などの画像属性情報やエラー信号を装置２００，３００に送信する。
【００４０】
１１１はディスプレイ１００のさまざまな設定を行うための本体の操作部やマウス、キーボード、リモコンなどのユーザー入力部である。１１２はこの入力部１１１などでユーザ等に設定された表示状態を記憶する記憶部である。本形態のディスプレイ１００では、複数の入力画像毎に表示エリアの大きさ等を設定可能であり、表示設定記憶部１１２は各入力画像の表示設定状態を各表示画像の種類に対応付けて記憶している。
【００４１】
また、マイコン１０１において、１０１ａは画像音声受信部１０２より出力される各入力画像信号に付随した識別信号を取得する識別信号取得部であり、１０１ｂは画像音声受信部１０２から出力される各入力画像信号に付随した属性信号を取得する、あるいは画像音声受信部１０２からの画像情報から属性信号を演算により抽出する属性取得部である。属性取得部１０１ｂで取得された属性情報は識別信号取得部１０１ａにより得られた識別信号と対応付けられて属性記憶部１１３に記憶される。
【００４２】
１０１ｃは表示設定記憶部１１２に記憶された表示設定情報と、属性取得部１０１ｂにより得られた入力信号属性情報、及びＥＤＩＤ情報格納部１０９に記憶されたＥＤＩＤ情報から、画像処理部１０３において入力画像信号を表示に適当な状態に変換するための画像変換情報を作成する画像変換情報作成部である。また、１１４がこの画像変換情報を入力信号の識別信号に対応付けて記憶する画像変換情報記憶部である。
【００４３】
ここで、識別信号取得部１０１ａ，属性取得部１０１ｂ，及び画像変換情報作成部１０１ｃは、マイコン内部で実現される処理を模式的に表わしており、これらの処理はマイコン１０１内のソフトウェア処理により実現される。
【００４４】
また、１２１は装置２００，３００とディスプレイ１００との間の画像信号及び音声信号の伝送線路であり、１２２は装置２００，３００とディスプレイ１００との間のＤＤＣ通信などの伝送線路である。
【００４５】
ここで、１２１と１２２とは別系統の信号として図示しているが、ＴＭＤＳやＩＥＥＥ１３９４などの信号線をカスケード接続やツリー接続を行った同一のネットワーク通信線路上で、同一の送受信手段により実現される。
【００４６】
ここで、装置２００，３００から送信される画像信号の例を図２に示す。
【００４７】
図２において、４０１が、受信先の通信アドレスであり、例えばディスプレイ１００に対して付与された通信アドレスや識別番号（ID）、あるいはディスプレイ１００のチャンネルや表示されるウインドウ画面に対して与えられた通信アドレスや識別番号（ID）などである。この受信先アドレス４０１はａバイトの信号で、たとえば4バイト程度の大きさとなる。
【００４８】
また、４０２は送信元の通信アドレスであり、例えば信号源としての装置２００あるいは装置３００に対して付与された通信アドレスや識別番号（ID）、あるいは画像信号自身にあたえた通信アドレスや識別番号（ID）である。この送信元アドレス４０２はｂバイトの信号で、たとえば4バイト程度の大きさとなる。前述したディスプレイ１００において検出する入力識別信号は、この部分のデータに相当する。
【００４９】
また、４０６が画像情報部分であり、４０３と４０４に大別される。ここで、４０３は画像信号の属性情報であり、４０４が画像データである。前述した入力画像の属性情報は、属性情報４０３を検出したものか、あるいは４０４の画像データそのものから所定の演算で抽出した情報である。ここでは、属性情報４０３をｃバイト、画像データをｄバイトとしてあるが、実際のデータ量は画像の伝送方式や圧縮方式により大きく異なり、任意に設定可能である。
【００５０】
また、４０５はデータの終了などを示す部分であり、たとえばチェックサム部分等である。本形態ではｅバイトとするが、実際は1バイト程度である。
【００５１】
図３に図１のディスプレイ１００での表示例を示す。ここでは、図１で示した２つの装置２００，３００以外に、ネットワークに接続される他の２つの信号源からの画像を表示する例を示している。
【００５２】
図３（ａ）において、ディスプレイ１００はＱＸＧＡの画素数を有した２０インチの表示装置であり、５０１がこの表示領域全体を示している。また、５０２はディスプレイ１００に接続した画像信号源１としてのＰＣ２００の表示画像を示している。ここで、ＰＣ１００の画像は、ＱＸＧＡで、５０１の画面全体に表示が行われている。また、画像内容としては、ＰＣ２００の表示画像がそのまま表示されている。
【００５３】
また、５０３の子画面領域は、図１には不図示の、ディスプレイ１００にネットワーク接続した別のＰＣの表示画像を示している。ここでは、この他のＰＣの送出する解像度ＸＧＡの画面をそのままの解像度で表示している。
【００５４】
また、５０４の子画面領域は、図１には不図示の、ディスプレイ１００にネットワーク接続したデジタルテレビチューナーで受信したＨＤＴＶ（１９２０×１０８０画素）の映画の画像を、７２０×４８０画素の解像度に縮小変換して表示を行っている。
【００５５】
図３の如く画像が表示されているディスプレイ１００に対して、図４に示す携帯情報機器としてのＰＤＡ６００の画像６０１を送信した場合の様子を図３（ｂ）及び図３（ｃ）に示す。ここで、この携帯情報機器としてのＰＤＡが、図１の装置３００に相当する。ここでは、ＰＤＡ６００の画面を４インチ、３２０×２４０画素とする。
【００５６】
図３（ｂ）の５０５および、図３（ｃ）の５０６がディスプレイ１００にて表示されるＰＤＡ６００から送信された表示画像である。ここで、図３（ｂ）はディスプレイ１００においてＰＤＡ６００の入力信号に対して本発明の構成による画像変換を行わない場合の表示画面であり、図３（ｃ）はディスプレイ１００においてＰＤＡ６００の入力信号に対して本発明による制御を行った場合の表示画面である。
【００５７】
図３（ｂ）においては、ＰＤＡ６００の画像５０５上の文字が他の５０２，５０３，５０４の画像中の文字に比べ小さすぎて判読しずらいのに対して、図３（ｃ）においては、ＰＤＡ６００の画像が適当な値に拡大変換されて、文字が判読可能になっている。
【００５８】
これは、拡大変換をしない場合は、表示画面全体２０インチに対して、画素数の比率でＰＤＡ６００の画像を表示すると３２０／２０４８＝０．１５６倍になるためＰＤＡ６００の画像が３．１インチに小さく表示されることに加え、ＰＤＡ６００は携帯機器のため近距離で画像を見ていたものが、２０インチのディスプレイ１００の場合はその数倍離れた距離から見るというように視聴距離が遠くなり、表示している文字の大きさが不適切になっているためである。
【００５９】
例えば、印刷業界の文字の大きさの基準であるポイント（１ポイント＝１／７２インチ）であらわすと、ＰＤＡ６００においては８ポイントに近い１０ドット程度で表示することが適切な文字も、ディスプレイ１００においてはより大きなポイント数（例えば１０ポイントなど）で表示することが望まれるためである。
【００６０】
本形態では、ネットワーク接続された複数の信号源の画像を表示する際に、このような機器毎の信号の特性に合わせて柔軟に最適表示する表示装置を例示している。
【００６１】
次に、図１のディスプレイ１００によるこのような表示制御に関する処理について、図５のフローチャートを用いて説明する。
【００６２】
ディスプレイ１００に対して画像、音声信号が入力されると、識別信号取得部１０１ａにより入力信号中の識別信号を取得する（Ｓ７０１）。また、入力属性信号取得部１０１ｂにより前述のように入力信号から属性情報を取得する（Ｓ７０２）。
【００６３】
そして、Ｓ７０３において、いま入力した画像、音声信号から取得した識別信号が新規かどうか、即ち、今まで受信したことがなく、画像変換情報記憶部１１４においてその識別信号が記憶されているかどうかを判断して、新規の場合はＳ７１０に、新規でない場合はＳ７０４に進む。
【００６４】
Ｓ７０３において既に受信したことがある信号であった場合、入力信号属性記憶部１１３において識別信号に対応付けて記憶されている入力信号属性情報を読み出し、Ｓ７０２において入力属性取得部１０１ａで取得した入力属性情報と比較することにより、以前に受信したときから入力属性情報が変化したかどうかを判断する。
【００６５】
入力属性が変化していない場合、表示設定記憶部１１２から入力識別信号に対応した表示設定を読み出し（Ｓ７０６）、更に、表示設定確認ルーチンを行う（Ｓ７０７）。
【００６６】
その後、Ｓ７０８において画像変換情報記憶部１１４から入力識別信号に対応した画像変換情報を読み出す。そして、こうして得られた画像変換情報に従い、画像処理部１０３を制御して入力画像信号を処理して終了する（Ｓ７０９）。
【００６７】
また、Ｓ７０３において、新規の入力信号であった場合、あるいは、Ｓ７０５において入力属性が変化した場合は、Ｓ７１０において、入力信号属性記憶部１１３に識別信号と対応付けて新しい入力信号属性情報を格納する。次にＳ７１１において表示設定確認ルーチンを行う。そして、次のＳ７１２において、表示設定記憶部１１２に記憶されたこの入力画像についての表示設定情報とＥＤＩＤ情報格納部１０９内の表示属性情報、及び前述の入力属性情報を用いて画像変換情報を作成する。
【００６８】
このように作成した画像変換情報を入力識別信号と対応させて画像変換情報記憶部１１４に格納する（Ｓ７１３）。そして、この画像変換情報に従い、画像処理部１０３を制御して入力画像信号処理して終了する（Ｓ７０９）。
【００６９】
ここで、表示設定確認ルーチンＳ７０７、Ｓ７１１について図６のフローチャートを用いて説明する。
【００７０】
図６において、ユーザ入力部１１１と画面に表示されるメニュー画面表示等を用いて表示設定を変更するかどうかを判断する（Ｓ８０１）。表示設定を変更しない場合は、表示設定が適当かどうかを判断して（Ｓ８０２）、適当な場合は表示設定確認ルーチンを終了する。
【００７１】
ここで、表示設定記憶部１１２には入力識別信号が伝えられるが、入力信号属性記憶部１１３や画像変換情報記憶部１１４と異なり、入力識別信号に対して1対１に記憶されるとは限らない。
【００７２】
例えば、ＰＣのフォーマットと携帯機器のフォーマットでの入力信号に対して、それぞれの表示設定値を記憶する、あるいは、ＩＥＥＥ１３９４経由の画像入力の場合と無線インターフェース経由での画像入力の場合とでそれぞれの表示設定値を記憶するなど、入力識別信号と入力属性信号に応じた場合分けをして設定することにより、既知の入力信号以外の新規の入力信号に対して、画像変換情報を自動作成可能にしている。
【００７３】
また、Ｓ８０１で表示設定を変更する場合と、Ｓ８０２で表示設定が不適当な場合は、Ｓ８０３においてその旨を表示してユーザに警告を促し、ユーザ入力部１１１と画面に表示されるメニュー画面表示等を用いて新規に表示設定を変更し、表示設定記憶部１１２に記憶する（Ｓ８０４）。
【００７４】
図７に、図１の装置３００としてＰＤＡの画像を新規接続して、図３（ｃ）のように表示する場合のディスプレイ１００におけるマイコン部１０１による処理フロー例を示す。
【００７５】
図７において、ＰＤＡ６００（装置３００）より画像、音声信号が入力すると、Ｓ９０１において識別信号取得部１０１ａにより入力信号の識別信号としてＰＤＡ６００の通信アドレスを取得する。この通信アドレスは図２の送信元アドレス４０２に相当し、図７では、「ｘｘｘ．ｙｙｙ．ｚｚｚ．００３」とする。
【００７６】
次に、Ｓ９０３において、入力属性信号取得部１０１ｂにより入力属性情報を取得する。ここでは、画像に含まれる文字サイズが文字ドット数＝10ドットであることを、画像データに付随する画像属性部（図２の４０３）から読み出すか、あるいは画像データ自身から表示装置の入力信号属性取得手段により演算処理により抽出する。
【００７７】
更に、Ｓ９０３においてＰＤＡ６００の表示に対応する表示設定記憶部１１２内の表示設定情報を読み出す。ここでは、携帯機器の入力に対しては、表示画面上の文字の大きさを10ポイント以上で表示する設定および、携帯機器の入力に対しては、表示画面上の表示位置の始点を（ｂ，ｄ）とする設定であるとする。
【００７８】
また、Ｓ９０４において、ＥＤＩＤ情報格納部１０９内の表示属性情報を読み出す。ここでは、表示部の画面の解像度がＱＸＧＡであり、画面の大きさが２０インチであるという情報などが得られる。
【００７９】
Ｓ９０５において、このようにして得られた入力属性情報、表示設定情報、ＥＤＩＤ情報から画像変換情報を自動作成する。
【００８０】
以下、画像変換情報の作成処理について説明する。
【００８１】
ＰＤＡ６００の文字を、ＱＸＧＡの表示画面上にそのまま表示した場合の１０ドット文字の大きさは、縦方向で1画素＝１２インチ／１５３６＝０．００８７インチより、０．０７８インチとなる。
【００８２】
一方、印刷における１０ポイント文字（１ポイント＝０．０１３９インチ）に相当する文字を画面上に表示した場合、その文字の大きさは０．１３９インチとなる。
【００８３】
従って、拡大率は０．１３９／０．０７８より、１．７８倍と演算される。
【００８４】
また、元の信号の座標（Ｘ０，Ｙ０）に対して画像変換後の座標（Ｘ１，Ｙ１）、表示画面上の始点座標を（ｂ，ｄ）、水平、垂直の信号の拡大率を各ａ，ｂとすると、入力信号の座標は
Ｘ１＝ａＸ０＋ｂ・・・（１）
Ｙ１＝ｃＹ０＋ｄ・・・（２）
の２式で出力画像の座標に変換される。ただし、ａ＝ｃ＝１．７８とする。このようにして、画像変換情報が自動作成される。
【００８５】
このように得られた画像変換情報を、入力識別信号であるＰＤＡ６００の通信アドレスに対応して画像変換情報記憶部１１４に格納する（Ｓ９０６）。そして、Ｓ９０７において、この画像変換情報に従い、画像処理部１０３を制御して入力画像信号を処理して終了する（Ｓ９０７）。
【００８６】
次に、図１の画像処理部１０３について説明する。図８は画像処理部１０３及びメモリ部１０４の構成を示す図である。
【００８７】
図８に示したように、画像処理部１０３は主にアドレスデコーダ１０３ａ，データスイッチ部１０３ｂ及び拡大・縮小補間演算部１０３ｃから構成される。
【００８８】
図８において、アドレスデコーダ１０３ａには入力画像信号に同期した水平同期信号、垂直同期信号及びクロックが入力する。アドレスデコーダ１０３ａはこれらの同期信号及びクロックを基準に、マイコン部１０１から出力される画像変換情報ｓ１０３に従ってメモリ制御用の書きこみアドレス信号および読み出しアドレス信号を生成する。
【００８９】
また、同時にデータスイッチ部１０３ｂに対するスイッチ制御信号も生成し、書きこみアドレス信号および読み出しアドレス信号に応じて、メモリ部１０４と画像処理部１０３との間のデータバス１０３ｄ上のデータを、メモリ部１０４への書きこみデータと、メモリ部１０４から拡大・縮小補間演算部１０３ｃへの読み出しデータとに切り替える処理を行う。
【００９０】
図３（ｃ）の例では、画図データの書き込み時においてはメモリ部１０４に対して（Ｘ０，Ｙ０）座標から画像データを書きこむように書きこみアドレスを制御して、メモリ部１０４からの読み出し時においては（Ｘ１，Ｙ１）座標から読み出すようにアドレスデコーダ１０３ａによるアドレス制御が行われる。
【００９１】
更に、メモリ部１０４より読み出された画像データは、拡大・縮小補間演算部１０３ｃにおいて画像データの拡大・縮小変換にともなう補間処理が施される。
【００９２】
図３（ｃ）の例では、前述の如く演算された倍率（水平ａ，垂直ｃ）に応じて、補間係数が選択されて、出力信号が演算により生成される。
【００９３】
図９に、本実施形態で図３（ｃ）で示した表示装置上の多画面画像を実現するための、入力信号毎の入力識別信号、入力属性情報、表示設定、表示部属性、画像変換情報の各情報の例を示す。入力は、ＰＣ１およびＰＣ２の２台のＰＣと、ＨＤＴＶ用のチューナ、携帯機器としてのＰＤＡとする。
【００９４】
入力信号の識別信号は、ＰＣ１，ＰＤＡは各機器に与えられた通信アドレスであり、ＰＣ２はＰＣ２から出力する信号自体に与えられた識別番号（ＩＤ）である。また、チューナは、チューナの出力チャンネルに通信アドレスが与えられて、チューナ本体とチャンネルまでが識別できる。識別信号は、信号源やそのチャンネル、あるいは信号自体に与えられた識別番号や通信アドレスの他にも、ＨＤＴＶとＳＤＴＶ（７２０×４８０）のように、出力モード毎に識別番号を割り振る、あるいは、ウインドウなど画面の一部の領域毎に識別番号を割り振ることが考えられる。また、使用者に与えられた識別番号や通信アドレスなど、信号の発信元を特定できるものであれば、なんでもよい。
【００９５】
また、入力属性としては、図９のように各信号に対応したフォーマットの別、解像度、画像の大きさ、文字のドット数などが取得される。他にも表示領域に限らず、画像の更新周波数、圧縮率、色特性、階調特性（ガンマ特性）、アスペクト比などが取得されるが、本実施例では簡単化のため、画像変換情報の作成例として画像表示領域の大きさと位置に関わる部分について例示する。
【００９６】
また、表示設定はＰＣ１ではＰＣ１の識別信号に対して、全画面で最後面配置設定されるが、他の機器では、直接入力識別信号に対して表示設定をふらず、新規の入力に対しても、柔軟な画像変換情報の自動作成を可能にしている。たとえば、ＰＣ１の識別信号以外のＰＣフォーマットの信号に対しては、表示領域の大きさを１／４ＱＸＧＡと表示位置を指定している。
【００９７】
これに従い、ＰＣ２の入力は設定され、他のＰＣ入力がきた場合もその表示位置に同じ大きさで重ねて表示される。また、チューナ本体のアドレスに対して、表示領域の範囲を１／４ＱＸＧＡ内、また表示位置を指定している。チューナの各チャンネルの表示はこの表示設定に従い、同じ表示位置にほぼ同じ大きさで表示される。また、携帯機器のフォーマットに対しては、他の入力と異なり表示領域の大きさや範囲を指定するのではなく、画像内の文字の大きさと表示位置を指定する。ＰＤＡや他の携帯電話から文字情報を含んだ画像は、この表示設定に従う。
【００９８】
このように、新規の信号源の接続や、従来の機器からの信号の入力属性の変化があった場合も、これらの表示設定に従って画像変換情報が自動作成される。
【００９９】
ここで、表示設定も、各映像信号の表示領域の大きさと位置に関する点以外にも、各画面領域の配置関係、画面の更新の割合、色特性、階調特性（ガンマ特性）、アスペクト比などが想定される。
【０１００】
表示部属性は、表示部によってきまるので信号源によらない。解像度、画面サイズ以外にも、表示部の画面更新周波数、色特性、階調特性（ガンマ特性）、アスペクト比などがある。
【０１０１】
これらの各情報に従い作成される画像変換情報は以下のようになる。
【０１０２】
ＰＣ１信号に対しては、そのままの解像度で表示するので、解像度変換倍率が１であり表示位置も変換しない。ＰＣ２信号に対しては、表示領域１／４ＱＸＧＡに対して、ＸＧＡの解像度であり、画素数が一致するので、これも解像度変換倍率が１であり、表示座標のみを変換する。
【０１０３】
チューナ信号に対しては、ＨＤＴＶの画像を、１／４ＱＸＧＡの範囲には収めることができないので、ＳＤＴＶにフォーマット変換（解像度変換）を行う。また、ＰＤＡ信号に対しては、前述のように１０ポイントの大きさで表示をするために、解像度変換倍率を１．７８として、表示座標も変換する。
【０１０４】
図９では、表示領域に関わる項目のみを例示しているので、これらの画像変換は図８の画像処理部１０３により制御されるが、実際には、画面更新周波数、色特性、階調特性（ガンマ特性）、アスペクト比等、さまざまな画像変換を行うので、実際の画像変換部も図８の構成はごく一部の回路を例示したに過ぎない。
【０１０５】
このようにして、１つの画像表示装置上に、４つの信号源からの画像に対して入力信号の属性をもとに画像変換を自動で行い、最適化した多画面表示を行う。
【０１０６】
次に、図１に示したディスプレイ１００が使用される環境について説明する。
【０１０７】
図１０は、現在策定が進められているＨＡＶｉやＪｉｎｉといった家庭内でネットワーク接続される機器間での通信の規格における各機器間の接続形態の例を示す。
【０１０８】
図１０において、１００１及び１０１３はデジタルテレビ放送の受信可能なデジタルテレビ受信機である。ここで、ＤＴＶ１００１はセットトップボックス１００２を介してＩＥＥＥ１３９４などのネットワークに接続され、ＳＴＢ１００２とは１０１９で示されるＤ端子などの画像専用のケーブルで接続される。また、ＤＴＶ１０１３は、ＩＥＥＥ１３９４のインターフェースを内蔵しているため、直接ネットワークに接続されている。
【０１０９】
また、１００４がＰＣ、１００３がそのディスプレイ、１０１８ａがその専用画像ケーブルである。また、同様に１０１０がＰＣ、１００９がそのディスプレイ、１０１８ｂがその専用画像ケーブルである。ここで、ＰＣ１００４、ＰＣ１０１０ともＩＥＥＥ１３９４のネットワークに接続されるが、これはディスプレイ１００３，１００９への画像信号ではなく、その他の信号の伝送に使用される。
【０１１０】
その他に、１００５が別系統のデジタルテレビのチューナであり、１００６がデジタルＶＴＲ、１０１１がＤＶＤプレーヤ、１０１２が番組録画のためのハードディスクからなるサーバであり、これらのＡＶ機器はＩＥＥＥ１３９４ネットワークで接続されて、相互に接続して画像信号をやり取りする。１０１４は公衆網１０１５に接続するモデムであり、１０１６が公衆網に接続する電話回線などである。
【０１１１】
１００７と１００８はＩＥＥＥ１３９４ネットワーク上の信号を分岐接続するためのハブである。１０１７ａ〜１０１７ｊはＩＥＥＥ１３９４規格の通信線である。
【０１１２】
このように接続された家庭内ネットワークで、ユーザはＤＴＶ１００１や１０１３で、様々なソース（チューナ１００５、デジタルＶＴＲ１００６、ＤＶＤプレーヤ１０１１、ＨＤＤ１０１２）を離れた場所から使用可能な環境が実現する。
【０１１３】
本形態のディスプレイ１００は、例えば、ＤＴＶ１００１あるいは１０１３の表示用モニタとして適用可能となる。
【０１１４】
このように、本実施形態によれば、複数の画像信号を同時に入力し、これら複数の入力画像信号に係る画像を同一画面上に表示する際、各入力画像信号の識別信号に対応付けて入力画像信号の最適な表示に必要な画像変換情報を記憶しておき、画像信号の入力があった場合にこの入力信号に応じた最適な処理を迅速に行うことができる。
【０１１５】
そのため、複数の画像信号が入力される場合でも常に良好な画像表示を実現可能となる。
【０１１６】
また、入力画像信号に付加された属性情報と、表示デバイス自身の表示属性情報、及び、ユーザによる表示設定情報に従って画像変換情報を自動的に生成し、これを入力画像信号の識別情報と対応付けて記憶することで、入力画像信号の属性が変化した場合にもこれを迅速に検出でき、入力画像信号の変化に応じて迅速かつ最適な画像表示を行うことができる。
【０１１７】
次に、本発明の第２の実施形態について説明する。
【０１１８】
本形態では、ＩＥＥＥ１３９４と無線インターフェース（Ｉ／Ｆ）などの複数の伝送系からなるネットワーク上で、ＩＥＥＥ１３９４経由のＰＣからの画像信号と無線Ｉ／Ｆ経由のデジタルカメラからのＪＰＥＧ圧縮信号といった異なるフォーマットの信号を、１つのディスプレイ上に多画面表示する画像処理装置に本発明を適用した例を示す。
【０１１９】
図１１は本形態における画像処理装置が適用されるネットワークの構成図を示す図である。
【０１２０】
図１１において、１１０１および１１１３が多画面表示を行うディスプレイである。ここで、ディスプレイ１１０１はセットトップボックス１１０２を介してＩＥＥＥ１３９４などのネットワークに接続され、ＳＴＢ１１０２とはＴＭＤＳ伝送方式などの画像専用のケーブル１１１９で接続される。また、ディスプレイ１１１３はＩＥＥＥ１３９４Ｉ／Ｆを内蔵しているため、直接ネットワークに接続されている。
【０１２１】
ここで、ＳＴＢ１１０２とディスプレイ１１１３に対して本発明の表示制御処理が適用される。
【０１２２】
また、１１０４がＰＣ（ＰＣ１）であり、１１０６がＰＣ（ＰＣ２）である。
ＰＣ１１０４およびＰＣ１１０６の画像データもネットワークを介してディスプレイ１１０１及びディスプレイ１１１３に送信され、表示される。
【０１２３】
その他に、１１０５がデジタルテレビのチューナであり、１１１１がＤＶＤプレーヤ、１１１２が番組録画のためのハードディスクからなるサーバである。これらのＡＶ機器はＩＥＥＥ１３９４ネットワークで接続されて、相互に接続して画像信号をやり取りする。
【０１２４】
また１１０３、冷蔵庫やエアコン、電子レンジなどの家電機器である。１１１４は公衆網１１１５に接続するモデムであり、１１１６が公衆網に接続する電話回線などである。１１０７と１１０８はＩＥＥＥ１３９４ネットワークを流れるデータを分岐接続するためのハブである。１１１７ａ〜１１１７ｊは、ＩＥＥＥ１３９４規格の通信線である。
【０１２５】
更に、１１０９がデジタルカメラであり、１１１０がＰＤＡなどの携帯機器である。１１１８ａ及び１１１８ｂが無線通信規格による無線通信Ｉ／Ｆである。
【０１２６】
このように接続された家庭内ネットワークで、ユーザはディスプレイ１１０１や１１１３により、様々なソース（ＰＣ１１０４，ＰＣ１１０６，チューナ１１０５、ＤＶＤプレーヤ１１１１、ＨＤＤ１１１２、デジタルカメラ１１０９、ＰＤＡ１１１０等）、さまざまな通信形態の画像を離れた場所から使用可能な環境を実現する。また、家電機器１１０３の制御も同じディスプレイ１１０１，１１１３上で行うことができる。
【０１２７】
また、ＰＣ１１０４、ＰＣ１１０６のキーボードやマウスなどの操作入力手段は不図示であるが、各ディスプレイ１１０１，１１１３の近くからネットワークを介して操作を行うことが可能である。
【０１２８】
次に、図１２を用いて、本実施形態において実現する表示画像を説明する。
【０１２９】
図１２において、１２０１がＱＸＧＡの画素数を有するディスプレイの画面である。１２０２がこの画面全域に親画面として表示されている、ＰＣ１のＱＸＧＡの解像度の表示画像である。１２０３がＸＧＡの解像度で、親画面の１／４の領域に子画面として表示されている、ＰＣ２の画像である。１２０４がＨＤＴＶの１９２０×１０８０画素の解像度の映像を７２０×４８０画素に解像度変換して親画面の１／４の領域に表示されている、デジタルテレビチューナの画像である。
【０１３０】
１２０５、無線Ｉ／Ｆで圧縮画像を受信した場合に表示を行う領域として表示設定されている８００×６００画素の表示領域である。
【０１３１】
いま、図１２（ｂ）に示すＱＳＸＧＡ（２５６０×２０４８画素）の圧縮画像が、無線Ｉ／Ｆを介してデジタルカメラから送信されるとする。
【０１３２】
そのままＱＳＸＧＡの画像を表示した場合、画面は図１２（ｃ）のようになり、一部がかけた画像となってしまうばかりでなく、他の画像が表示できない。
【０１３３】
そこで、本形態における画像処理装置は、前述の第１の実施形態と同様、無線Ｉ／Ｆから受信した新規の信号であるデジタルカメラの画像に与えられた識別番号と、入力属性である圧縮フォーマットと画像の画素数から、８００×６００画素の表示領域１２０５への画像変換を行うための解像度変換倍率と表示座標変換の情報を自動作成する。これにより、図１２（ｄ）に示す多画面表示が実現される。
【０１３４】
次に、本形態の画像処理装置及びその周辺装置について、図１３を用いて説明する。図１３は本実施形態における画像処理装置１５００及びディスプレイ１６００と、その周辺装置１３００，１４００の構成を示す図である。
【０１３５】
図１３において、１３００はＰＣ２であり、図１１のＰＣ１１０６に相当する。また、１４００はデジタルカメラ（ＤＣ）であり、図１１のデジタルカメラ１１０９に相当する。また、１５００がネットワークを介した各信号源からの画像信号を合成するとともに、ディスプレイ１６００にて表示を行うために適した形式の信号に変換する画像処理装置としてのセットトップボックスであり、図１１のＳＴＢ１１０２に相当する。また、１６００がディスプレイであり図１１のディスプレイ１１０１に相当する。なお、図１３においては、各機器における表示画像の処理に関するブロックのみについて記載、説明し、他の構成、例えば、ＤＣ１４００においては撮像部、記録再生部等の構成についての説明は省略する。
【０１３６】
ＰＣ１３００およびＤＣ１４００において、１３０１，１４０１がＣＰＵであり、１３０２，１４０２がこのＣＰＵ１３０１，１４０１の制御信号を装置各部に伝えると共に、全体のデータバス、制御バスを制御するバスコントロール部である。１３０３，１４０３が各部を接続するデータバスおよび制御バスからなるシステムバス配線である。１３０４，１４０４がＣＰＵ１３０１，１４０１とバスコントロール部１３０２，１４０２とのバス配線である。
【０１３７】
１３０５，１４０５はそれぞれ各機器のメインメモリ部であり、１３０６，１４０６はハードディスクやフラッシュメモリなどの記録媒体部である。１３０７，１４０７がディスプレイ１６００への表示用の画像信号を作成するグラフィック描画部であり、ここで、ディスプレイ１６００への出力画像属性（解像度、画素周波数、画面の更新周波数、ガンマ特性、階調数、色特性など）にあわせた出力が行われる。
【０１３８】
１３０８，１４０８は、グラフィック描画部１３０７，１４０７の画像処理時に用いられる画像メモリであり、データバス１３０９，１４０９によりグラフィック描画部１３０７，１４０７と接続される。１３１０，１４１０はグラフィック作成部１３０７，１４０７で作成された画像信号を、ディスプレイ１６００（ＳＴＢ１５００）に伝送するための部分書き換え信号や圧縮信号に変換圧縮するための画像エンコード部であり、バス１３１１，１４１１によりそれぞれグラフィック描画部１３０７，１４０７との間のデータのやり取りを行う。
【０１３９】
１３１２は、画像エンコード部１３１０により生成された画像信号をＩＥＥＥ１３９４に規定されるフォーマットに変換して通信するＩＥＥＥ１３９４通信部である。また、１４１２は、画像エンコード部１４１０により生成された画像信号を無線Ｉ／Ｆ規格に規定されるフォーマットの通信用信号に変換して通信する無線Ｉ／Ｆ部である。また、１３１３はディスプレイ１６００（ＳＴＢ１５００）から通信されたＥＤＩＤ情報の記憶部である。
【０１４０】
また、ＣＰＵ１３０１において、１３０１ａはＰＣ１３００の画像制御部であり、ＳＴＢ１５００から受信したディスプレイのＥＤＩＤ情報を受けて、グラフィック描画部１３０７を制御する。１３０１ｂは画像属性情報作成部であり、ＰＣ１３００より送信する画像の画像属性情報を作成する。ここで、画像属性情報とは、画像の解像度、画像の大きさ、使用文字フォントの大きさ、画面の更新周期、階調数、色、アスペクト比や伝送方式、圧縮方式、圧縮率、書き換え周期などである。
【０１４１】
同様に、ＣＰＵ１４０１においても、１４０１ａは画像制御部、１４０１ｂは画像属性情報作成部であるが、ＤＣ１４００においてはＰＣ１３００とは異なりＥＤＩＤ通信を行わず、記録媒体部１４０６に記録されている複数の静止画像データをグラフィック描画部１４０７にて表示に適した形態の信号に変換する処理を画像制御部１４０１ａにて制御する。また、画像属性情報作成部１４０１ｂは伝送する画像信号は静止画像であるため、画像の解像度、画像の大きさ、階調数、アスペクト比や伝送方式、圧縮方式、圧縮率などを属性情報として生成する。
【０１４２】
なお、画像制御部１３０１ａ，１４０１ａ及び、画像属性情報作成部１３０１ｂ、１４０１ｂの処理は実際にはＣＰＵ１３０１，１４０１内部においてソフトウェア処理にて実現される。
【０１４３】
次に、ＳＴＢ１５００において、１５０１がこのＳＴＢ１５００を制御するマイコンであり、１５０２がこのマイコン１５０１からの制御バス及びデータバスからなる配線群である。
【０１４４】
また、１５０３はＩＥＥＥ１３９４通信部であり、ＰＣ１３００のほか、ＩＥＥＥ１３９４ネットワーク１５１７を介して他の接続機器との間で画像データおよび他のデータの送受信を行う。１５０４は無線Ｉ／Ｆであり、ＤＣ１４００との間で無線Ｉ／Ｆ規格に従いデータ１５１８の送受信を行う。
【０１４５】
１５０５はＩＥＥＥ１３９４通信部１５０３から出力される画像データを復号してもとの画像データに変換すると共に、画像データに付加されている識別情報や属性情報を抽出し、画像合成部１５０７に送る。１５０６も同様に、無線Ｉ／Ｆ１５０４から出力される画像データを復号してもとの画像データに変換すると共に、画像データに付加されている識別信号や属性情報を検出し、画像合成部１５０７に出力する。
【０１４６】
１５０７はこれらのデコーダ１５０５，１５０６からの出力を画像メモリ部１５０８を用いて合成する画像合成部である。また、画像合成部１５０７はバス１５０２を介してマイコン１５０１と接続しており、デコーダ１５０５，１５０６から出力される各入力画像データの識別信号と属性情報とをバス１５０２を介してマイコン１５０１に出力する。
【０１４７】
１５０９は画像合成部１５０７により合成処理された画像信号をディスプレイ１６００に用いられる液晶やＣＲＴなどの特性にあわせて、ガンマ特性や色特性などを変換し、オンスクリーンディスプレイなどの文字表示を行う画像表示用処理部である。１５１０は画像信号処理部１５０９から出力された画像信号をＶＧＡ規格やＤＶＩ規格に従って処理し、ディスプレイ１６００に出力する画像送信部である。
【０１４８】
また、１５１１がディスプレイ１６００との間でＥＤＩＤ情報を通信するためのＤＤＣ通信部であり、ＤＤＣ通信部１５１１は受信したＥＤＩＤ情報をバス１５０２を介してＥＤＩＤ情報格納部１５１２に記憶する。
【０１４９】
また、ＣＰＵ部１５０１において、１５０１ａはデコーダ１５０５，１５０６にてデコードされ、画像合成部１５０７を介して出力される各入力画像信号に付随した識別信号を取得する識別信号取得部であり、１５０１ｂは同様に入力画像信号に付随した属性信号を取得する属性情報取得部である。
【０１５０】
また、１５１３は属性情報取得部１５０１ｂにより得られた属性情報を欠く入力信号の種類に対応付けて記憶する属性情報記憶部であり、１５１４はユーザ操作部１５１５により設定された表示設定情報を各入力画像信号の識別信号に対応付けて記憶する表示設定記憶部である。
【０１５１】
また、マイコン１５０１における１５０１ｃはこれら表示設定情報と、入力信号属性情報、及び画像表示属性であるＥＤＩＤ情報から、画像合成部１５０７において入力画像信号を表示に適当な表示信号に変換するための制御信号である画像変換情報を作成する画像変換情報作成部である。ここで作成された画像変換情報は各入力画像信号の識別信号に対応付けて画像変換情報記憶部１５１６に記憶される。
【０１５２】
なお、識別信号取得部１５０１ａ，属性情報取得部１５０１ｂ及び画像変換情報作成部１５０１ｃの処理はマイコン１５０１にてソフトウェア処理にて実現される。
【０１５３】
次に、ディスプレイ１６００において、１６０１はこのディスプレイ１６００を制御するマイコン部であり、１６０２はこのマイコン１６０１からの制御バスおよびデータバスからなる配線群である。
【０１５４】
１６０３は画像受信部であり、ＳＴＢ１５００の画像送信部１５１０より送信された画像データを受信し、ＲＧＢ各色8ビットのデジタル信号等の信号処理に適したフォーマットに変換する画像受信部である。１６０４はメモリ１６０５を用いて画像受信部１６０３より出力される画像データの画素数を画像表示部１６０７の表示画素数にあわせるための解像度変換や画面更新周波数の変換を行うための解像度変換部である。
【０１５５】
１６０６は画像表示部１６０７に用いられる液晶やＣＲＴなどの表示デバイスの特性にあわせて、ガンマ特性や色特性などを変換し、オンスクリーンディスプレイなどの文字表示を行う画像表示用処理部である。１６０７は液晶やＣＲＴなどの素子で構成される画像表示部である。また、１６０８はディスプレイ１６００の表示属性情報であるＥＤＩＤ情報をＳＴＢ１５００に通信するＤＤＣ通信部である。
【０１５６】
本形態では、前述の第１の実施形態においてディスプレイ１００が行っていた識別信号、属性情報の取得処理、画像変換情報の生成処理及びこの画像変換情報を用いた画像処理の制御をＳＴＢ１５００にて行い、ディスプレイ１６００に対してはこのように処理された画像信号を画像送信部１５１０により送信する。従って、ディスプレイ１６００は従来の通り、ＤＶＩ規格やＶＧＡ規格の画像データを受信し、これを表示する機能を持つものでよい。
【０１５７】
次に、図１３のＳＴＢ１５００によるこのような表示制御に関する処理について、図１４のフローチャートを用いて説明する。図１４の処理は基本的には図５の処理と同様である。
【０１５８】
ＳＴＢ１５００に対して画像、音声信号が入力されると、識別信号取得部１５０１ａにより入力信号中の識別信号を取得する（Ｓ１７０１）。また、入力属性信号取得部１５０１ｂにより前述のように入力信号から属性情報を取得する（Ｓ１７０２）。
【０１５９】
そして、Ｓ１７０３において、いま入力した画像、音声信号から取得した識別信号が新規かどうか、即ち、今まで受信したことがなく、画像変換情報記憶部１１４においてその識別信号が記憶されているかどうかを判断して、新規の場合はＳ１７１０に、新規でない場合はＳ１７０４に進む。
【０１６０】
Ｓ１７０３において既に受信したことがある信号であった場合、入力信号属性記憶部１５１３において識別信号に対応付けて記憶されている入力信号属性情報を読み出し、Ｓ１７０２において入力属性取得部１５０１ａで取得した入力属性情報と比較することにより、以前に受信したときから入力属性情報が変化したかどうかを判断する。
【０１６１】
入力属性が変化していない場合、表示設定記憶部１５１４から入力識別信号に対応した表示設定を読み出し（Ｓ１７０６）、更に、表示設定確認ルーチンを行う（Ｓ１７０７）。
【０１６２】
その後、Ｓ１７０８において画像変換情報記憶部１５１６から入力識別信号に対応した画像変換情報を読み出す。そして、こうして得られた画像変換情報に従い、画像合成部１５０７を制御して入力画像信号を処理して終了する（Ｓ１７０９）。
【０１６３】
また、Ｓ１７０３において、新規の入力信号であった場合、あるいは、Ｓ１７０５において入力属性が変化した場合は、Ｓ１７１０において、入力信号属性記憶部１５１３に識別信号と対応付けて新しい入力信号属性情報を格納する。次にＳ１７１１において表示設定確認ルーチンを行う。そして、次のＳ１７１２において、表示設定記憶部１５１４に記憶されたこの入力画像についての表示設定情報とＥＤＩＤ情報格納部１５１２内の表示属性情報、及び前述の入力属性情報を用いて画像変換情報を作成する。
【０１６４】
このように作成した画像変換情報を入力識別信号と対応させて画像変換情報記憶部１５１６に格納する（Ｓ１７１３）。そして、この画像変換情報に従い、画像合成部１５０３を制御して入力画像信号処理して終了する（Ｓ１７０９）。
【０１６５】
図１３に入力される各画像信号についての識別情報、属性情報、表示設定、画像変換情報の例を図１５に示す。ＰＣ１，ＰＣ２，ＴＶチューナに関しては、図９と同一である。本形態では新たにＤＣ１４００からの画像信号を受信する。図１２（ｄ）に示した如く新たにＤＣ１４００からの画像を表示する場合には、新たな入力画像信号の識別信号としてＤＣ１４００からの出力画像の識別ＩＤ、及び入力属性情報を取得し、この属性情報とＤＣ画像についての表示設定情報、及びＥＤＩＤ情報に従って画像変換情報を新たに生成する。図１５の例では、ＤＣ画像の属性が２５６０×２０４８画素であるのに対して、表示設定が８００×６００画素なので、得られる解像度変換倍率は０．３になる。
【０１６６】
そして、画像変換情報作成部１５０１ｃはこの解像度変換率と、表示設定情報にて規定されるＤＣ画像の表示アドレスとに基づき、前記式（１）と式（２）に従って画像変換情報を作成する。
【０１６７】
このように、本実施形態においても、複数の画像信号を同時に入力し、これら複数の入力画像信号に係る画像をディスプレイにおいて同一画面上に表示する際、各入力画像信号の識別信号に対応付けて入力画像信号の最適な表示に必要な画像変換情報を記憶しておき、画像信号の入力があった場合にこの入力信号に応じた最適な処理を迅速に行うことができる。
【０１６８】
そのため、複数の画像信号が入力される場合でも常に良好な画像表示を実現可能となる。
【０１６９】
また、入力画像信号に付加された属性情報と、表示デバイス自身の表示属性情報、及び、ユーザによる表示設定情報に従って画像変換情報を自動的に生成し、これを入力画像信号の識別情報と対応付けて記憶することで、入力画像信号の属性が変化した場合にもこれを迅速に検出でき、入力画像信号の変化に応じて迅速かつ最適な画像表示を行うことができる。
【０１７０】
以上説明したように、本発明の実施形態によれば、多様な入力画像信号に対して、入力識別信号と入力信号属性を取得して、対応するあらかじめ決められた表示設定にしたがって、画面上に表示するための画像変換を自動処理する表示装置を実現する。これにより、複数の映像信号の表示属性（画像領域（画像の大きさ、位置）、文字の大きさ、解像度、画面の更新周期、階調数、色、アスペクト比等）を自動制御可能な構成とすることにより、見やすくまた用途に応じた表示特性を実現する多画面表示装置を提供できる。
【０１７１】
また、従来アプリケーション毎や表示装置のウインドウやチャンネル毎に画像表示情報を設定していた点に対して、入力信号の識別信号に対して画像変換情報を自動作成して記憶する手段を設けたことにより、新規の画像入力や同一信号源からの信号属性の変化に対して追従して自動対応可能な表示装置を実現する。これにより、ネットワーク独特の多対一や多対多接続における新規の画像入力や同一信号源からの信号属性の変化に柔軟に対応できて、しかもユーザの扱いやすいネットワーク型の表示装置を提供できる。
【０１７２】
なお、前述の各実施形態においては、マイコン部、あるいはＣＰＵ部により装置の制御が行われるが、これらの制御のために用いられるプログラムを記憶したＲＯＭ，ＨＤＤ等の記憶媒体も本発明を構成する。
【０１７３】
【発明の効果】
以上説明したように、本発明によれば、複数の画像信号を入力し、これらの画像信号に係る画像を表示する際、最適な表示を行うことができる。
【図面の簡単な説明】
【図１】本発明が適用されるディスプレイシステムの構成を示す図である。
【図２】図１のディスプレイにて扱うデータの様子を示す図である。
【図３】図１のディスプレイによる表示例を示す図である。
【図４】ＰＤＡの表示画像を示す図である。
【図５】図１のディスプレイの動作を説明するためのフローチャートである。
【図６】図５の表示設定確認ルーチンを示すフローチャートである。
【図７】図１のディスプレイによる具体的な表示処理を説明するためのフローチャートである。
【図８】図１のディスプレイにおける画像処理部の構成を示す図である。
【図９】図１のディスプレイにて扱う各種の情報の例を示す図である。
【図１０】本発明が適用されるネットワークの様子を示す図である。
【図１１】本発明が適用される他のネットワークの様子を示す図である。
【図１２】本発明の実施形態による他の表示例を示す図である。
【図１３】本発明が適用されるディスプレイシステムの他の例を示す図である。
【図１４】図１３のＳＴＢによる処理を説明するためのフローチャートである。
【図１５】図１４のＳＴＢにて扱う各種の情報の例を示す図である。
【図１】
0004541506.tif 000002
【図２】
0004541506.tif 000003
【図３】
0004541506.tif 000004
【図４】
0004541506.tif 000005
【図５】
0004541506.tif 000006
【図６】
0004541506.tif 000007
【図７】
0004541506.tif 000008
【図８】
0004541506.tif 000009
【図９】
0004541506.tif 000010
【図１０】
0004541506.tif 000011
【図１１】
0004541506.tif 000012
【図１２】
0004541506.tif 000013
【図１３】
0004541506.tif 000014
【図１４】
0004541506.tif 000015
【図１５】
0004541506.tif 000016