(57)【特許請求の範囲】
【請求項１】
入力された画像信号に基づき画像を表示する表示部、及び、時系列的に複数の画像からなる画像信号を前記表示部へ順次入力する処理を行なう信号処理部を備える表示システムにおいて、
画像を表示している前記表示部を撮像する撮像部を更に備え、
入力する画像信号に基づく複数の画像の内、予め定められた輝度又は色を有する領域を所定の割合以上含む画像を特定する手段と、
前記輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成する作成手段と、
該作成手段が作成した較正用画像を、前記表示部へ入力する画像信号に基づく複数の画像の内、特定された画像の前若しくは後に挿入するか、又は、特定された画像若しくは前後の画像を、前記較正用画像に置換するかのいずれかにより、前記較正用画像を含む新たな画像信号を生成する生成手段と、
該生成手段が生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定する手段と、
該手段が特定したタイミングで前記撮像部による撮像を実行させる手段と、
前記較正用画像における輝度又は色と、前記撮像部により撮像された画像における輝度又は色とを比較する比較手段と、
該比較手段による比較結果に基づき、画像信号を補正する補正手段と
を備えることを特徴とする表示システム。
【請求項２】
入力された画像信号に基づき画像を表示する表示部、及び、時系列的に複数の画像からなる画像信号を前記表示部へ順次入力する処理を行なう信号処理部を備える表示システムにおいて、
画像を表示している前記表示部を撮像する撮像部を更に備え、
時系列に連続する複数の画像の内、画像の特徴量が所定量以上異なる対の画像を特定する手段と、
該手段が特定した画像に含まれる領域が有する輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成する作成手段と、
該作成手段が作成した較正用画像を、特定された前記対の画像の間に挿入するか、又は、特定された前記対の画像のいずれか若しくは両方を、前記較正用画像に置換するかのいずれかにより、前記較正用画像を含む新たな画像信号を生成する生成手段と、
該生成手段が生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定する手段と、
該手段が特定したタイミングで前記撮像部による撮像を実行させる手段と、
前記較正用画像における輝度又は色と、前記撮像部により撮像された画像における輝度又は色とを比較する比較手段と、
該比較手段による比較結果に基づき、画像信号を補正する補正手段と
を備えることを特徴とする表示システム。
【請求項３】
前記生成手段は、前記較正用画像が複数連続するように新たな画像信号を生成するようにしてあること
を特徴とする請求項１又は２に記載の表示システム。
【請求項４】
前記作成手段は、複数の異なる輝度又は色別に、前記輝度又は色を有する領域を含む較正用画像を作成するようにしてあり、
新たに作成された画像信号中の較正用画像の順序を特定する情報、及び、前記較正用画像が含む領域の輝度又は色の情報を記憶する手段を更に備えること
を特徴とする請求項１から３のいずれか１つに記載の表示システム。
【請求項５】
前記表示部は、入力された画像信号に基づく画像を各表示する複数のパネルが並設されており、
前記信号処理部は、１つの画像の画像信号を前記複数のパネルの配置に対応させて複数に分割した画像信号を夫々、前記複数のパネルへ入力する手段を備え、
前記比較手段は、
前記撮像部により撮像された撮像画像の画像信号を、前記複数のパネルの配置に対応させて分割する手段と、
前記較正用画像の画像信号を前記複数のパネルの配置に対応させて分割する手段と
を備え、
分割された撮像画像の画像信号及び較正用画像の画像信号の内、前記パネルの配置に基づき対応する画像信号間で夫々、輝度又は色を比較するようにしてあること
を特徴とする請求項１から３のいずれか１つに記載の表示システム。
【請求項６】
入力された画像信号に基づき画像を表示する表示部、時系列に複数の画像からなる画像信号を前記表示部へ順次入力する処理を行なう信号処理部、及び、前記表示部を撮像する撮像部を備える表示システムにて、入力する画像信号が示す輝度又は色と、前記画像信号に基づき前記表示部で表示される画像の輝度又は色との関係を較正する較正方法であって、
入力する画像信号に基づく複数の画像の内、予め定められた輝度又は色を有する領域を所定の割合以上含む画像を特定し、
前記輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成し、
作成した較正用画像を、前記表示部へ入力する画像信号に基づく複数の画像の内、特定された画像の前若しくは後に挿入するか、又は、特定された画像若しくは前後の画像を、前記較正用画像に置換することにより、前記較正用画像を含む新たな画像信号を生成し、
生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定し、
生成した新たな画像信号を前記表示部へ入力し、
特定したタイミングで前記撮像部により撮像を実行させ、
前記較正用画像における輝度又は色と、撮像された画像における輝度又は色とを比較し、
比較結果に基づき、入力する画像信号を補正する
ことを特徴とする表示システムの較正方法。
【請求項７】
入力された画像信号に基づき画像を表示する表示部、時系列に複数の画像からなる画像信号を前記表示部へ順次入力する処理を行なう信号処理部、及び、前記表示部を撮像する撮像部を備える表示システムにて、入力する画像信号が示す輝度又は色と、前記画像信号に基づき前記表示部で表示される画像の輝度又は色との関係を較正する較正方法であって、
時系列に連続する複数の画像の内、画像の特徴量が所定量以上異なる対の画像を特定し、
特定された画像に含まれる領域が有する輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成し、
作成した較正用画像を、特定された前記対の画像の間に挿入するか、又は、特定された前記対の画像のいずれか若しくは両方を、前記較正用画像に置換することにより、前記較正用画像を含む新たな画像信号を生成し、
生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定し、
生成した新たな画像信号を前記表示部へ入力し、
特定したタイミングで前記撮像部により撮像を実行させ、
前記較正用画像における輝度又は色と、撮像された画像における輝度又は色とを比較し、
比較結果に基づき、入力する画像信号を補正する
ことを特徴とする表示システムの較正方法。
【請求項８】
入力された画像信号に基づき画像を表示する表示部へ、時系列に複数の画像からなる画像信号を順次入力する処理を行なう信号処理装置、及び、前記表示部を撮像する撮像装置に接続され、前記信号処理装置及び前記撮像装置を制御するコンピュータに、入力する画像信号が示す輝度又は色と、前記画像信号に基づき前記表示装置で表示される画像の輝度又は色との間の関係の較正処理を実行させるコンピュータプログラムにおいて、
前記コンピュータに、
入力する画像信号に基づく複数の画像の内、予め定められた輝度又は色を有する領域を所定の割合以上含む画像を特定するステップ、
前記輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成するステップ、
作成した較正用画像を、前記表示部へ入力する画像信号に基づく複数の画像の内、特定された画像の前若しくは後に挿入するか、又は、特定された画像若しくは前後の画像を、前記較正用画像に置換することにより、前記較正用画像を含む新たな画像信号を生成するステップ、
生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定するステップ、
特定したタイミングで前記撮像部による撮像を実行させるステップ、
前記較正用画像における輝度又は色と、前記撮像部により撮像された画像における輝度又は色とを比較するステップ、及び、
比較結果に基づき画像信号を補正するステップ
とを実行させることを特徴とするコンピュータプログラム。
【請求項９】
入力された画像信号に基づき画像を表示する表示部へ、時系列に複数の画像からなる画像信号を順次入力する処理を行なう信号処理装置、及び、前記表示部を撮像する撮像装置に接続され、前記信号処理装置及び前記撮像装置を制御するコンピュータに、入力する画像信号が示す輝度又は色と、前記画像信号に基づき前記表示装置で表示される画像の輝度又は色との間の関係の較正処理を実行させるコンピュータプログラムにおいて、
前記コンピュータに、
時系列に連続する複数の画像の内、画像の特徴量が所定量以上異なる対の画像を特定するステップ、
特定された画像に含まれる領域が有する輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成するステップ、
作成した較正用画像を、特定された前記対の画像の間に挿入するか、又は、特定された前記対の画像のいずれか若しくは両方を、前記較正用画像に置換することにより、前記較正用画像を含む新たな画像信号を生成するステップ、
生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定するステップ、
特定したタイミングで前記撮像部による撮像を実行させるステップ、
前記較正用画像における輝度又は色と、前記撮像部により撮像された画像における輝度又は色とを比較するステップ、及び、
比較結果に基づき画像信号を補正するステップ
とを実行させることを特徴とするコンピュータプログラム。
【請求項１０】
請求項８又は９に記載されたコンピュータプログラムが、コンピュータによって読み取り可能に記録されてあることを特徴とする記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示部の輝度ムラ又は色ムラなどの較正を行なう表示システムに関する。特に、コンテンツを表示している間に較正を実施することができる表示システム、表示システムの較正方法、コンピュータに前記較正方法を実施させるコンピュータプログラム、及び該コンピュータプログラムが記録された記録媒体に関する。
【背景技術】
【０００２】
近年、ＬＣＤ（Liquid Crystal Display）又はプラズマディスプレイを表示部に用いた表示装置を複数台並べ、１つの大型表示画面を構成するマルチディスプレイシステム（又はマルチビジョンシステム）が使用されている。マルチディスプレイシステムは、複数台で大型表示画面を構成することで、大きな画像を表示するだけでなく、各表示装置で表示させる画像を変えたり、対称的に配置された表示装置が同一の画像を表示したりするなど、様々な視覚的効果を演出することができる。このような効果により、マルチディスプレイシステムは、大きな宣伝効果を得るために電子看板（デジタルサイネージ）に利用される。また、マルチディスプレイシステムは、催し物会場又は公共施設等の広い場所で、効果的な映像中継、又は演出の用途で利用されることもある。
【０００３】
マルチディスプレイシステムでは、複数台の表示装置の表示部で１つの画像を表示するなど、隣り合う表示装置で画像が連続する場合があるので、各々の表示部間の色差及び輝度差の低減を必要とする。これに対し、表示部の色表現や輝度階調特性などの表示特性には個体差がある。更には、表示特性の温度変化や経年劣化により、色ズレ又は輝度の変化が起こる。したがって、マルチディスプレイシステムでは、複数台の表示装置の表示部間の色差及び輝度差を低減するための較正を、定期的に実施する必要がある。このような較正を簡易且つ効率的に実施できることが、マルチディスプレイシステムの普及に伴って重要度を増している。
【０００４】
簡易な較正方法の例として、特許文献１には、表示部に基準となるカラーチャートを表示させてデジタルカメラで撮像した画像の画像信号から、表示部のプロファイルを取得する方法が開示されている。なお、特許文献１における方法では、撮像した画像の画像信号から撮像デバイスに依存しない色空間で表現される画像信号、即ち、較正対象の表示部固有の色空間の画像信号を取得するために、撮像デバイス（イメージセンサ）のプロファイルを画像信号に適用してイメージセンサ固有の色空間の要素を除去するように変換している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−２０８６２９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１に開示された方法によれば、表示装置の表示部の色を検知する高価な測色機を用いることなしに、デジタルカメラを用いる簡易な構成にてキャリブレーションを実行することができる。
【０００７】
しかしながら、特許文献１におけるカラーチャートなど、特定のキャリブレーション用の画像を表示させて較正を行なう方法では、表示中の静止画像又は動画像などの画像コンテンツを一旦停止させる必要がある。特に、電子看板として常時的に使用しているマルチディスプレイシステムの表示部を較正対象とする場合、広告用の画像コンテンツの再生を停止させなければならず、一時的に電子看板としての機能を失わせることになる。これに対し、夜間など、人間がマルチディスプレイシステムの表示部を注視しない時間帯に、較正を行なうことが考えられる。ただし、この場合、較正が行なわれる夜間までの一定期間、色ズレなどが起こって画質が低下している状態のまま、画像コンテンツが再生されることになる。
【０００８】
本発明は斯かる事情に鑑みてなされたものであり、画像コンテンツを再生中であっても効率的に較正を行なうことが可能であり、較正の実行に要する時間とコストを低減させることができる表示システム、該表示システムの較正方法、コンピュータに前記較正方法を実施させるコンピュータプログラム、及び該コンピュータプログラムが記録された記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明に係る表示システムは、入力された画像信号に基づき画像を表示する表示部、及び、時系列的に複数の画像からなる画像信号を前記表示部へ順次入力する処理を行なう信号処理部を備える表示システムにおいて、画像を表示している前記表示部を撮像する撮像部を更に備え、入力する画像信号に基づく複数の画像の内、予め定められた輝度又は色を有する領域を所定の割合以上含む画像を特定する手段と、前記輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成する作成手段と、該作成手段が作成した較正用画像を、前記表示部へ入力する画像信号に基づく複数の画像の内、特定された画像の前若しくは後に挿入するか、又は、特定された画像若しくは前後の画像を、前記較正用画像に置換するかのいずれかにより、前記較正用画像を含む新たな画像信号を生成する生成手段と、該生成手段が生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定する手段と、該手段が特定したタイミングで前記撮像部による撮像を実行させる手段と、前記較正用画像における輝度又は色と、前記撮像部により撮像された画像における輝度又は色とを比較する比較手段と、該比較手段による比較結果に基づき、画像信号を補正する補正手段とを備えることを特徴とする。
【００１１】
本発明に係る表示システムは、入力された画像信号に基づき画像を表示する表示部、及び、時系列的に複数の画像からなる画像信号を前記表示部へ順次入力する処理を行なう信号処理部を備える表示システムにおいて、画像を表示している前記表示部を撮像する撮像部を更に備え、時系列に連続する複数の画像の内、画像の特徴量が所定量以上異なる対の画像を特定する手段と、該手段が特定した画像に含まれる領域が有する輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成する作成手段と、該作成手段が作成した較正用画像を、特定された前記対の画像の間に挿入するか、又は、特定された前記対の画像のいずれか若しくは両方を、前記較正用画像に置換するかのいずれかにより、前記較正用画像を含む新たな画像信号を生成する生成手段と、該生成手段が生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定する手段と、該手段が特定したタイミングで前記撮像部による撮像を実行させる手段と、前記較正用画像における輝度又は色と、前記撮像部により撮像された画像における輝度又は色とを比較する比較手段と、該比較手段による比較結果に基づき、画像信号を補正する補正手段とを備えることを特徴とする。
【００１２】
本発明に係る表示システムは、前記生成手段は、前記較正用画像が複数連続するように新たな画像信号を生成するようにしてあることを特徴とする。
【００１３】
本発明に係る表示システムは、前記作成手段は、複数の異なる輝度又は色別に、前記輝度又は色を有する領域を含む較正用画像を作成するようにしてあり、新たに作成された画像信号中の較正用画像の順序を特定する情報、及び、前記較正用画像が含む領域の輝度又は色の情報を記憶する手段を更に備えることを特徴とする。
【００１４】
本発明に係る表示システムは、前記表示部は、入力された画像信号に基づく画像を各表示する複数のパネルが並設されており、前記信号処理部は、１つの画像の画像信号を前記複数のパネルの配置に対応させて複数に分割した画像信号を夫々、前記複数のパネルへ入力する手段を備え、前記比較手段は、前記撮像部により撮像された撮像画像の画像信号を、前記複数のパネルの配置に対応させて分割する手段と、前記較正用画像の画像信号を前記複数のパネルの配置に対応させて分割する手段とを備え、分割された撮像画像の画像信号及び較正用画像の画像信号の内、前記パネルの配置に基づき対応する画像信号間で夫々、輝度又は色を比較するようにしてあることを特徴とする。
【００１５】
本発明に係る表示システムの較正方法は、入力された画像信号に基づき画像を表示する表示部、時系列に複数の画像からなる画像信号を前記表示部へ順次入力する処理を行なう信号処理部、及び、前記表示部を撮像する撮像部を備える表示システムにて、入力する画像信号が示す輝度又は色と、前記画像信号に基づき前記表示部で表示される画像の輝度又は色との関係を較正する較正方法であって、入力する画像信号に基づく複数の画像の内、予め定められた輝度又は色を有する領域を所定の割合以上含む画像を特定し、前記輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成し、作成した較正用画像を、前記表示部へ入力する画像信号に基づく複数の画像の内、特定された画像の前若しくは後に挿入するか、又は、特定された画像若しくは前後の画像を、前記較正用画像に置換することにより、前記較正用画像を含む新たな画像信号を生成し、生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定し、生成した新たな画像信号を前記表示部へ入力し、特定したタイミングで前記撮像部により撮像を実行させ、前記較正用画像における輝度又は色と、撮像された画像における輝度又は色とを比較し、比較結果に基づき、入力する画像信号を補正することを特徴とする。
また、本発明に係る表示システムの較正方法は、入力された画像信号に基づき画像を表示する表示部、時系列に複数の画像からなる画像信号を前記表示部へ順次入力する処理を行なう信号処理部、及び、前記表示部を撮像する撮像部を備える表示システムにて、入力する画像信号が示す輝度又は色と、前記画像信号に基づき前記表示部で表示される画像の輝度又は色との関係を較正する較正方法であって、時系列に連続する複数の画像の内、画像の特徴量が所定量以上異なる対の画像を特定し、特定された画像に含まれる領域が有する輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成し、作成した較正用画像を、特定された前記対の画像の間に挿入するか、又は、特定された前記対の画像のいずれか若しくは両方を、前記較正用画像に置換することにより、前記較正用画像を含む新たな画像信号を生成し、生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定し、生成した新たな画像信号を前記表示部へ入力し、特定したタイミングで前記撮像部により撮像を実行させ、前記較正用画像における輝度又は色と、撮像された画像における輝度又は色とを比較し、比較結果に基づき、入力する画像信号を補正することを特徴とする。
【００１６】
本発明に係るコンピュータプログラムは、入力された画像信号に基づき画像を表示する表示部へ、時系列に複数の画像からなる画像信号を順次入力する処理を行なう信号処理装置、及び、前記表示部を撮像する撮像装置に接続され、前記信号処理装置及び前記撮像装置を制御するコンピュータに、入力する画像信号が示す輝度又は色と、前記画像信号に基づき前記表示装置で表示される画像の輝度又は色との間の関係の較正処理を実行させるコンピュータプログラムにおいて、前記コンピュータに、入力する画像信号に基づく複数の画像の内、予め定められた輝度又は色を有する領域を所定の割合以上含む画像を特定するステップ、前記輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成するステップ、作成した較正用画像を、前記表示部へ入力する画像信号に基づく複数の画像の内、特定された画像の前若しくは後に挿入するか、又は、特定された画像若しくは前後の画像を、前記較正用画像に置換することにより、前記較正用画像を含む新たな画像信号を生成するステップ、生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定するステップ、特定したタイミングで前記撮像部による撮像を実行させるステップ、前記較正用画像における輝度又は色と、前記撮像部により撮像された画像における輝度又は色とを比較するステップ、及び、比較結果に基づき画像信号を補正するステップとを実行させることを特徴とする。
また、本発明に係るコンピュータプログラムは、入力された画像信号に基づき画像を表示する表示部へ、時系列に複数の画像からなる画像信号を順次入力する処理を行なう信号処理装置、及び、前記表示部を撮像する撮像装置に接続され、前記信号処理装置及び前記撮像装置を制御するコンピュータに、入力する画像信号が示す輝度又は色と、前記画像信号に基づき前記表示装置で表示される画像の輝度又は色との間の関係の較正処理を実行させるコンピュータプログラムにおいて、前記コンピュータに、時系列に連続する複数の画像の内、画像の特徴量が所定量以上異なる対の画像を特定するステップ、特定された画像に含まれる領域が有する輝度又は色を略均一に有する領域を含み、前記表示部における輝度又は色の較正に用いる較正用画像を作成するステップ、作成した較正用画像を、特定された前記対の画像の間に挿入するか、又は、特定された前記対の画像のいずれか若しくは両方を、前記較正用画像に置換することにより、前記較正用画像を含む新たな画像信号を生成するステップ、生成した画像信号に基づく画像が前記表示部に表示されている間に、前記較正用画像が表示されるタイミングを特定するステップ、特定したタイミングで前記撮像部による撮像を実行させるステップ、前記較正用画像における輝度又は色と、前記撮像部により撮像された画像における輝度又は色とを比較するステップ、及び、比較結果に基づき画像信号を補正するステップとを実行させることを特徴とする。
【００１７】
本発明に係る記録媒体は、上記発明に係るコンピュータプログラムが、コンピュータによって読み取り可能に記録されてあることを特徴とする。
【００１８】
本発明では、較正用画像が作成され、表示部に入力される画像信号を基に作成された較正用画像が含まれる新たな画像信号が生成される。また、生成された画像信号を表示部にて表示中に、含まれる較正用画像が表示されるタイミングが特定され、特定されたタイミングに前記表示部が撮像される。これにより、表示部に表示中の前記較正用画像が撮像される。更に、較正用画像を撮像した撮像画像と、較正用画像自体との間で輝度又は色を比較し、比較結果に基づき画像信号の補正が行なわれる。コンテンツデータに基づく画像の表示中に較正用画像が表示されるので、表示中に較正が可能となり、以後入力する画像信号に対する補正が可能となる。
【００１９】
本発明では、時系列に連続する複数の画像の画像信号、即ち映像信号に基づく画像を表示部で表示している間に較正を行なうために、表示する複数の画像の内、予め定められた輝度又は色を有する画像を特定され、特定された画像に基づき較正用画像が作成される。表示するコンテンツデータに含まれる画像から較正用画像が作成され、類似する画像の前後に表示されるので、違和感を持たせることはない。
【００２０】
本発明では、時系列に連続する複数の画像の内、画像の特徴量が所定量以上異なる対の画像、即ち、画像の特徴が著しく変化する所謂シーンチェンジ、カット点の前後の画像が特定され、特定された画像のいずれか一方に基づき較正用画像が作成される。シーンチェンジ、カット点前又は後の画像に類似する較正用画像が作成され、シーンチェンジ、カット点の前後に表示されるので、表示中に較正を行なっていても違和感を持たせない。
【００２１】
本発明では、較正用画像を複数連続して表示させ、較正用画像が表示されている期間が長くなる。これにより、撮像部による撮像タイミングに猶予が生じ、較正が容易になる。
【００２２】
本発明では、表示する映像信号の内の較正用画像の順序を特定するための情報が、較正用画像が含む輝度又は色の情報と共に記憶される。記憶されてある情報に基づき、当該映像信号に基づく較正が可能となる。
【００２３】
本発明では、表示部が複数のパネルを並置させて構成され、１つの画像が前記複数のパネルの配置に応じて分割され、表示部全体で１つの画像が表示される。この場合に、較正用画像も、較正用画像を表示部に表示している間に撮像して得られた撮像画像も各パネルに対応させた分割画像となり、比較がされる。これにより、複数のパネルからなる表示部で１つの画像を表示中であっても、各パネルにおける表示色又は輝度を適切に補正することが可能である。
【発明の効果】
【００２４】
本発明による場合、較正に用いるフレーム画像がコンテンツデータに基づく複数の画像中に挿入されるか、差し替えられるかされる。挿入されたフレーム画像が表示されるタイミングに表示部を撮像して較正を実施するので、所望の画像を表示中に較正することが可能である。表示中に較正が可能であるから、較正のために画像の表示を停止する必要もない。特に、常時的にコンテンツを出力する必要がある電子看板などの用途に用いられる表示システムにて、電子看板の機能を失わせることなく輝度又は色の較正が可能である点、優れた効果を奏する。
【図面の簡単な説明】
【００２５】
【図１】実施の形態１における表示システムの構成を示すブロック図である。
【図２】実施の形態１における制御装置にて実現される機能を示す機能ブロック図である。
【図３】実施の形態１における制御装置の較正用画像作成部により実施される処理手順の一例を示すフローチャートである。
【図４】図３のステップＳ３における較正用画像を作成できるか否かの判断処理の一例を示すフローチャートである。
【図５】較正用画像作成部により作成される較正用画像の一例を示す説明図である。
【図６】較正用画像作成部により作成される較正用画像の一例を示す説明図である。
【図７】較正用画像作成部により作成される較正用画像の一例を示す説明図である。
【図８】較正用画像作成部により作成される較正用画像の一例を示す説明図である。
【図９】画像信号の生成処理手順の一例を示すフローチャートである。
【図１０】実施の形態１の画像信号生成部により生成される画像信号の一例を模式的に示す説明図である。
【図１１】実施の形態１の画像信号生成部により生成される画像信号の一例を模式的に示す説明図である。
【図１２】制御装置のタイミング特定部及び較正部によって実行される処理手順の一例を示すフローチャートである。
【図１３】図１２のステップＳ２７における較正処理の詳細な処理手順の一例を示すフローチャートである。
【図１４】実施の形態２における制御装置の較正用画像作成部により実施される処理手順の一例を示すフローチャートである。
【図１５】実施の形態３における制御装置の較正用画像作成部により実施される処理手順の一例を示すフローチャートである。
【図１６】カット点が検出されるフレーム画像の例を示す説明図である。
【図１７】実施の形態３の画像信号生成部により生成される画像信号の一例を模式的に示す説明図である。
【図１８】実施の形態３の画像信号生成部により生成される画像信号の一例を模式的に示す説明図である。
【図１９】実施の形態３の画像信号生成部により生成される画像信号の一例を模式的に示す説明図である。
【図２０】実施の形態３の画像信号生成部により生成される画像信号の一例を模式的に示す説明図である。
【図２１】実施の形態４における画像信号の生成処理手順の一例を示すフローチャートである。
【図２２】実施の形態４の画像信号生成部により生成される画像信号の一例を模式的に示す説明図である。
【図２３】実施の形態４の画像信号生成部により生成される画像信号の一例を模式的に示す説明図である。
【図２４】実施の形態４の画像信号生成部により生成される画像信号の他の一例を模式的に示す説明図である。
【発明を実施するための形態】
【００２６】
以下、本発明をその実施の形態を示す図面に基づき具体的に説明する。
【００２７】
（実施の形態１）
図１は、実施の形態１における表示システムの構成を示すブロック図である。表示システムは、複数の表示装置１０からなる表示部１と、表示装置１０へ入力する画像信号に対する処理を行なう信号処理装置２と、表示部１を撮像する撮像装置３と、表示装置１０群にて表示される表示画像の輝度又は色の較正を実施する制御装置４とを含む。
【００２８】
表示システムは電子看板として利用され、そのため表示部１は、人が集まる街中の視認しやすい場所に設置されている。信号処理装置２は、例えば表示部１の近傍に設置されており、後述する方式に対応したケーブルにて表示部１の各表示装置１０と接続されている。撮像装置３は、表示部１全体を撮像範囲とするように設置されている。例えば、撮像装置３は、電子看板である表示部１の正面上方の壁面又は天井などに取り付けられている。制御装置４は、信号処理装置２及び撮像装置３の両者と接続されている。制御装置４は例えば信号処理装置２と共に表示部１の近傍に設置されている。図１及び以下の説明では表示装置１０群、信号処理装置２、撮像装置３、及び制御装置４は夫々、有線にて接続される構成とする。なお本発明では、これらは無線によって信号の送受信を行なう構成であってもよい。
【００２９】
このように構成される表示システムは、信号処理装置２が、制御装置４から出力されたコンテンツデータから画像信号を生成して表示部１の表示装置１０へ各入力して画像を表示する。実施の形態１におけるコンテンツは動画像とする。又は音声と多重化されたストリームデータでもよい。いずれも広告宣伝用のコンテンツである。
【００３０】
特に、本実施の形態１における表示システムは、表示部１にて表示される画像の品質を向上又は画質を維持するため、画像信号が示す画像の輝度又は色の階調値と、実際に表示部１の表示装置１０夫々に表示される画像の輝度又は色との間の関係を特定し、これに基づき画像信号を補正する較正機能を有する。特に、表示システムは、並置された表示装置１０間の輝度差、又は色差を低減させるように補正し、画質の高いコンテンツを出力する。表示システムで実現される較正機能の概要は以下である。制御装置４が、電子看板のために利用するコンテンツに基づく画像を表示している表示部１を撮像装置３で撮像し、表示されるべき画像の輝度又は色の階調値と、撮像画像から得られる輝度又は色の階調値とを比較し、入力した画像信号の階調値と表示された画像の画像信号の階調値との間の関係を特定し、求めた関係から入力する画像信号に対する補正量を算出して補正する。このため制御装置４は、宣伝広告用のコンテンツに基づく画像の中に、較正に用いる較正用画像が表示されるようにコンテンツを生成し、較正用画像が表示部１に表示されるタイミングを特定し、特定したタイミングに、撮像装置３で撮像処理を行ない、撮像された画像中の対応する領域の輝度又は色の情報を夫々取得して、入力した画像信号の輝度又は色と比較し、表示装置１０毎に補正量を算出して補正を行なう。
【００３１】
以下、各構成部及び各構成部によって実行される処理について詳細を説明する。
【００３２】
表示部１は、４台の表示装置１０を用いる。表示装置１０は２段２列に碁盤目状に並置され、並置表示装置１０群を構成している。なお表示部１は、１台の表示装置１０にて構成されてもよいし、３段３列、２段３列など任意の数で並置表示装置１０群が構成されてもよい。
【００３３】
表示装置１０は、パネル１１を備える。パネル１１は、ＬＣＤ又はプラズマディスプレイを用いる。表示装置１０は後述するように信号処理装置２から出力される画像信号に基づきパネル１１に画像を表示する。なお表示装置１０は夫々スピーカを備えて、信号処理装置２から出力される音声信号に基づき音声を出力するようにしてもよい。ただし、スピーカは表示部１とは別に設置されてもよい。
【００３４】
信号処理装置２は、制御部２０、記憶部２１、入出力部２２、画像処理部２３、音声処理部２４、操作部２５、及び電源制御部２６を備える。
【００３５】
制御部２０は、ＣＰＵ（Central Processing Unit）を用い、図示しないコンピュータプログラムに基づき各構成部を制御する。
【００３６】
記憶部２１は、ハードディスクドライブ又はＳＳＤ（Solid State Drive）等の外部記憶装置を用いる。記憶部２１は、フラッシュメモリを用いてもよい。記憶部２１には、表示部１で表示画像と出力する音声とが多重化されたデータなどが記憶されてもよいし、後述するように各表示装置１０へ入力される画像信号に対して各適用される補正量の情報が記憶されてもよい。
【００３７】
入出力部２２は、信号処理装置２と、各表示装置１０及び制御装置４との間の画像信号、並びに、制御用のデータを入出力するためのインタフェースである。具体的には入出力部２２は、ＤＶＩ（Digital Visual Interface）端子及びＨＤＭＩ（High-Definition Multimedia Interface）端子を有する。これにより信号処理装置２は、制御装置４と所定の方式としてＴＭＤＳ（Transition Minimized Differential Signaling ）方式でシリアル通信を行ない、表示部１の複数の表示装置１０夫々へ画像信号を出力する。また入出力部２２は、ＴＣＰ（Transmission Control Protocol ）又はＵＤＰ（User Datagram Protocol）などの通信プロトコルで画像信号を送受信するためのＬＡＮ端子を有し、外部装置と通信により制御用のデータを送受信する。なお、入出力部２２はＬＡＮ端子を介して、制御装置４から画像信号のデータを受信してもよい。入出力部２２は更に、ＵＳＢ（Universal Serial Bus）端子又はＩＥＥＥ１３９４端子を有する構成としてもよい。
【００３８】
画像処理部２３は画像処理用の集積回路を用い、入出力部２２にて入力した画像信号に対して輝度又は色、色空間等の補正、及び各種フィルタ処理を含む所定の画像処理を実行する。画像処理部２３は、制御部２０からの指示に基づき、画像処理後の画像信号を入出力部２２から表示部１の各表示装置１０へ出力させる。このとき画像処理部２３は、制御部２０により取得されてある並置表示装置１０群の配列情報に基づき、各表示装置１０へ各々に対応する画像信号を出力する。配列情報とは、例えば表示部１の、向かって左上の表示装置１０を０（ゼロ）段目０（ゼロ）列（０，０）の表示装置１０とし、右下の表示装置１０を１段目１列（１，１）の表示装置１０と識別する情報である。制御部２０は、予め記憶部２１に記憶されている配列情報を取得してもよいし、外部から入力される配列情報を取得してもよい。また画像処理部２３は、制御部２０によってソフトウェア的に実現されてもよい。
【００３９】
音声処理部２４は、入出力部２２により音声信号を入力し、入力した音声信号に対し、補正及びフィルタ処理を含む所定の処理を実行する。音声処理部２４は、制御部２０からの指示に基づき処理後の音声信号を図示しないスピーカへ出力し、音声を出力させる。なお、信号処理装置２は、音声処理部２４を備えていなくともよい。
【００４０】
操作部２５は、電源スイッチ、切替スイッチ、及び再生／停止スイッチを少なくとも含む。操作部２５の電源スイッチ、切替スイッチ、及び再生／停止スイッチは、表示システムのオペレータが操作することが可能に信号処理装置２に形成されている。電源スイッチは、信号処理装置２の電源のオン及びオフを切り替えるためのスイッチである。切替スイッチは、表示部１を構成する複数の表示装置１０の内のいずれか１つの制御を行なうためのスイッチであり、同時に、複数の表示装置１０を選択するためのスイッチである。再生／停止スイッチは、オペレータがコンテンツの再生／停止を指示するスイッチであり、画像処理部２３及び音声処理部２４への画像信号及び音声信号の入力を開始／停止させるためのスイッチ、即ち表示部１への画像信号の入力を開始／停止させるためのスイッチである。操作部２５は、いずれのスイッチが押下されたかを検知すると、制御部２０へ通知する。
【００４１】
なお操作部２５は、信号処理装置２と無線で通信することが可能なリモートコントローラに備えられる構成としてもよい。この場合、リモートコントローラは操作部の各スイッチが押下されることに対応する無線信号を信号処理装置２へ送信する。無線通信の通信媒体は赤外光であってもよいし、電磁波であってもよい。また、操作部２５の各スイッチの押下に対応する信号を後述の制御装置４から、オペレータの操作に応じて操作指示として送信し、信号処理装置２がこれを受信し、操作指示に基づき動作するようにしてもよい。
【００４２】
電源制御部２６は、外部の電力供給源（図示せず）から供給される電力を制御する。操作部２５の電源スイッチが押下されたことを通知された制御部２０は、電源制御部２６に外部から電力を供給させるか、又は電力の供給を遮断する。電源制御部２６は、電力の供給を受けると信号処理装置２全体に電力を供給する。逆に、電源制御部２６は、電力の供給が遮断されるときは信号処理装置２全体への電力の供給が遮断される。
【００４３】
更に信号処理装置２は、例えばテレビジョン放送のアンテナ及びチューナを備え、制御装置４から出力される画像信号及び音声信号のみならず、放送信号を受信して放送信号に基づく画像信号及び音声信号を表示部１で表示すべく出力するようにしてもよい。
【００４４】
撮像装置３は、例えばＵＳＢ端子を有するデジタルカメラを用い、ＵＳＢ端子にて後述の制御装置４と接続される。制御装置４との接続はＵＳＢに限られない。撮像装置３は、ＵＳＢ端子を介して制御装置４から撮像要求信号を入力し、撮像要求信号を入力した場合に表示部１を全体的に撮像する。撮像装置３は、撮像画像の画像信号を、ＵＳＢ端子を介して制御装置４へ出力する。なお、撮像装置３が表示部１を適切に撮像できるように、フォーカスの設定、シャッター速度、絞り、ホワイトバランス、色空間、撮像画像のファイルフォーマット等の設定が予めしてある。特に、動画像であるコンテンツのデータに基づく画像が表示部１で表示されている間に撮像を行なうため、シャッター速度は、映像のフレームレートよりも速く設定されてある。
【００４５】
制御装置４は、パーソナルコンピュータを用い、制御部４０、記憶部４１、一時記憶部４２、読出部４３、入出力部４４、及び接続部４５を備える。
【００４６】
制御部４０は、ＣＰＵを用い、記憶部４１に記憶してある制御プログラム４Ｐに基づき、後述するような各機能を実現することによって表示システムの制御、及び表示システムの表示部１における輝度又は色の較正を実現する。
【００４７】
記憶部４１は、ハードディスクドライブ又はＳＳＤ等の外部記憶装置を用いる。記憶部４１は、フラッシュメモリを用いてもよい。記憶部４１には上述した制御プログラム４Ｐが記憶されているほか、制御部４０が処理時に参照する情報が予め記憶されてもよい。また記憶部４１は、制御部４０の処理により求められる情報を記憶する。特に、記憶部４１は、制御部４０が後述する処理を行なって得られるコンテンツ毎の較正情報４１１を記憶し、後に制御部４０が参照することが可能である。更に記憶部４１は、較正によって求められる補正情報４１２を記憶する。
【００４８】
一時記憶部４２は、ＳＲＡＭ（Static Random Access Memory）又はＤＲＡＭ（Dynamic Random Access Memory）等のＲＡＭを用いる。一時記憶部４２は、制御部４０が記憶部４１から制御プログラム４Ｐを読み出す際に用いられる。また、一時記憶部４２は、制御部４０の処理により発生した情報、例えば処理中の画像データ、画像データから抽出された情報などを一時的に記憶する。
【００４９】
読出部４３は、ディスクドライブを用いる。読出部４３は、ＣＤ（Compact Disk）、ＤＶＤ（Digital Versatile Disk）、ＢＤ（Blu-Ray（登録商標） Disk）、フラッシュメモリ、又はフレキシブルディスクなどである記録媒体６に記録されている情報を読み出す。記録媒体６には、制御プログラム６Ｐが記録されている。制御部４０は、読出部４３によって記録媒体６に記録されている情報を読み出し、記憶部４１又は一時記憶部４２に記憶する。記憶部４１に記憶されている制御プログラム４Ｐは、記録媒体６から読み出された制御プログラム６Ｐの複製であってもよい。
【００５０】
記録媒体６は制御装置４から分離可能に構成される記録媒体であればよく、他に、磁気テープ又はカセットテープ等のテープ系、ハードディスク又は上述のフレキシブルディスク等の磁気ディスク系、上述のＣＤ、ＤＶＤ、ＢＤ等の光ディスク系、メモリカード又は光カードなどのカード系、マスクＲＯＭ（Read Only Memory）、ＥＰＲＯＭ（Erasable Programmable ROM ）、ＥＥＰＲＯＭ（登録商標；Electrically EPROM）、又はフラッシュＲＯＭなどの半導体メモリであってもよい。また、制御装置４が備える入出力部４４は、後述するようにＬＡＮ端子を有してもよいから、制御プログラム６Ｐは、通信網を介して外部からダウンロードされてもよく、電子的な伝送で具現化された搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【００５１】
入出力部４４は、制御装置４と、信号処理装置２及び外部の記憶装置５との間のインタフェースである。具体的には入出力部４４は、ＤＶＩ端子及びＨＤＭＩ端子を有し、これにより制御装置４は、記憶装置５からコンテンツデータを読み出し、信号処理装置２へ画像信号、音声信号及び制御用の情報を送信する。入出力部４４は、ＬＡＮ端子を有し、外部機器との通信を行なってもよいし、ＬＡＮ端子を介して信号処理装置２との間でデータを送受信してもよい。入出力部４４は更に、ＵＳＢ端子又はＩＥＥＥ１３９４端子を有する構成としてもよい。
【００５２】
接続部４５は、例えばＵＳＢ端子を有し、撮像装置３と接続される。接続部４５は、制御装置４が撮像装置３と接続し、撮像装置３における撮像を制御するための信号を入出力できればＵＳＢ端子に限られない。制御装置４は、接続部４５を介して撮像装置３へ撮像要求信号を送信し、撮像画像の画像信号を受信する。
【００５３】
記憶装置５は、大容量のＨＤＤ又はＳＳＤ等を用いてコンテンツデータを記憶する。記憶装置５が記憶するコンテンツデータは、制御装置４から読み出しが可能である。なお記憶装置５はＤＶＤ等の記録媒体であって、制御装置４から読み出しが可能な構成であってもよい。記憶装置５は、制御装置４が備える記憶部４１であってもよい。コンテンツデータは、電子看板として機能する表示部１に表示される宣伝広告用の動画像及び音声を含むコンテンツである。
【００５４】
図２は、実施の形態１における制御装置４にて実現される機能を示す機能ブロック図である。制御装置４の制御部４０は、記憶部４１に記憶されている制御プログラム４Ｐを読み出して実行することにより、較正用画像作成部４０１、画像信号生成部４０２、タイミング特定部４０３、及び較正部４０４として機能し、パーソナルコンピュータを表示システムの制御装置４として動作させ、以下に説明する各処理を実施して較正を行なう。なお、較正用画像作成部４０１、画像信号生成部４０２、タイミング特定部４０３、及び較正部４０４は、集積回路としてハードウェア的に構成されてもよい。
【００５５】
較正用画像作成部４０１は、制御部４０が読み出したコンテンツデータからフレーム単位で画像を取得する。較正用画像作成部４０１は、取得したフレーム画像を用いて、表示される輝度又は色のキャリブレーション（較正）を行なうための均一な輝度又は色の画素からなる較正用画像を作成する。なお較正用画像作成部４０１は、較正用画像を、予め定めてある複数の異なる輝度又は色について行なう。勿論、全領域で均一とは限らず、８０％以上などの所定の割合以上、均一な輝度又は色である画像でもよい。予め較正用画像を作成して記憶部４１に記憶しておき、較正用画像作成部４０１が選択するようにしてもよい。異なる色又は異なる輝度の情報は、予め記憶部４１に記憶しておき、較正用画像作成部４０１が参照可能としておく。例えば較正用画像作成部４０１は、輝度０（ゼロ）から最大輝度までを４段階、１０段階、又は１８段階等の複数段階に区別し、夫々の段階の輝度の較正用画像を作成する。具体的には、最大輝度が（２５５，２５５，２５５）であって４段階に区別する場合であれば、ＲＧＢ値が（０，０，０）、（８５，８５，８５）、（１７０，１７０，１７０）、（２５５，２５５，２５５）の４段階夫々の領域を含む較正用画像を作成する。また、較正用画像作成部４０１は、例えば１８色の異なる色の画素からなる較正用画像を作成する。例えば較正用画像作成部４０１は、ＲＧＢ値が赤（２５５，０，０）、橙（２５５，１０２，０）、黄（２５５，２５５，０）、緑（０，２５５，０）、青（０，０，２５５）、紫（１５３，０，１５３）、…等である画素からなる較正用画像を夫々作成する。
【００５６】
較正用画像作成部４０１は、較正用画像を作成する元にしたフレーム画像を特定するフレーム番号と、作成した較正用画像の輝度又は色を示す情報とを含む較正情報４１１を記憶部４１に記憶する。このとき、同一の較正用画像について、即ち同一の輝度又は色について較正用画像が作成可能であると判断されたフレーム画像が複数存在する場合、最初に可能であると判断されたフレーム画像の前又後のフレーム画像のフレーム番号が記憶される。
【００５７】
画像信号生成部４０２は、作成された較正用画像を、制御部４０が読み出すコンテンツデータに基づくフレーム画像間に挿入するか、又はいずれかのフレーム画像に置換し、新たな画像信号として入出力部４４から信号処理装置２へ出力する。具体的には画像信号生成部４０２は、記憶部４１に記憶してある較正情報４１１に基づき、記憶されているフレーム番号に、対応する輝度又は色の較正用画像を出力する。
【００５８】
タイミング特定部４０３は、記憶された較正情報４１１に基づいて実際に較正を行なうにあたり、画像信号生成部４０２が画像信号の出力を開始した場合に、表示部１に較正用画像が表示される時刻（画像の表示開始からの経過時間）を算出する。タイミング特定部４０３は、表示時刻を、例えば以下のように算出できる。
表示時刻＝フレーム番号×フレームレート
フレーム番号は、記憶部４１に記憶した較正情報４１１により特定されるフレーム番号の前又は後である。タイミング特定部４０３は、以後、前記画像信号が制御部４０により信号処理装置２へ出力されたときに、出力されたことを表す信号を撮像装置３へ出力して起動させ、算出された時刻に基づいて撮像を行なうべき時点で撮像要求信号を出力する。これによりタイミング特定部４０３は、較正用画像が表示されたときにこれを撮像部で撮像するように、撮像のタイミングを制御する。
【００５９】
なお、タイミング特定部４０３は、表示部１に較正用画像が表示されるタイミングと、撮像装置３による撮像タイミングとの同期の制御について、入出力部４４及び接続部４５、並びに信号処理装置２における入出力部２２における伝送遅延及び測定（撮像処理）遅延に係る遅延時間を測定しておき、遅延時間を考慮して撮像要求信号を出力する。また、タイミング特定部４０３は、画像信号のフレームレートに比較して、遅延時間が微小である（例えばフレームレートの１／１０以下）シャッターを使用できる撮像装置３を用い、遅延時間を考慮せずに撮像要求信号を出力する構成としてもよい。
【００６０】
較正部４０４は、制御部４０の処理によって較正に用いるコンテンツデータの入出力部４４からの出力が開始されると、記憶された較正情報４１１に基づいて較正処理を行なう。較正部４０４は、コンテンツデータの出力が開始された場合、タイミング特定部４０３の制御により撮像された撮像画像信号を接続部４５から入力する。較正部４０４は、入力した画像信号に基づく撮像画像と、対応する較正用画像とを比較し、輝度又は色の差分を特定して補正量を求め、画像信号の補正を行なう。較正部４０４は、撮像画像及び較正用画像を比較するに際し、並置表示装置１０群の配列情報に基づき、ブロック画像に分割し、ブロック画像毎に比較して表示装置１０毎に差分を特定して補正量を求める。なお配列情報は、制御部４０が予め信号処理装置２から取得して記憶部４１に記憶しておいてもよいし、較正部４０４が信号処理装置２から取得してもよい。
【００６１】
このように構成される表示システムにて、表示部１における輝度又は色が較正される手順を、順を追って詳細に説明する。図３は、実施の形態１における制御装置４の較正用画像作成部４０１により実施される処理手順の一例を示すフローチャートである。制御装置４の制御部４０は、較正用画像作成部４０１により、記憶装置５から読み出すコンテンツデータを用いて較正を行なう前に予め、以下に示す手順により各処理を実行する。
【００６２】
制御部４０は、記憶装置５からコンテンツデータを入出力部４４により読み出し（ステップＳ１）、最初のフレーム画像（フレーム番号０（ゼロ））を較正用画像の作成対象とする（ステップＳ２）。具体的には制御部４０は、較正用画像の作成対象のフレーム画像のフレーム番号に０（ゼロ）を代入する。
【００６３】
制御部４０は、暫定的な較正用画像の作成対象のフレーム画像に対し、実際に較正用画像を作成できるか否かの判断を行なうための処理を行なう（ステップＳ３）。制御部４０は、処理の結果、較正用画像の作成が可能であるか否かを判断する（ステップＳ４）。制御部４０は、較正用画像の作成が可能であると判断した場合（Ｓ４：ＹＥＳ）、可能と判断されたフレーム画像のフレーム番号、及び較正用画像の輝度又は色の情報を含む較正情報４１１を記憶部４１に記憶し（ステップＳ５）、全ての較正対象の輝度又は色についての処理が完了したか否かを判断する（ステップＳ６）。制御部４０は、全ての輝度又は色について処理が完了したと判断した場合（Ｓ６：ＹＥＳ）、処理を終了する。
【００６４】
ステップＳ４にて較正用画像の作成が不可能であると判断した場合（Ｓ４：ＮＯ）、及びステップＳ６にて全ての輝度又は色について処理が完了していないと判断した場合（Ｓ６：ＮＯ）、制御部４０は、次のフレーム画像が存在するか否かを判断する（ステップＳ７）。制御部４０は、次のフレーム画像が存在すると判断した場合（Ｓ７：ＹＥＳ）、次のフレーム画像を較正用画像の作成対象とし（ステップＳ８）、処理をステップＳ３へ戻す。制御部４０は、次のフレーム画像が存在しないと判断した場合（Ｓ７：ＮＯ）、そのまま処理を終了する。
【００６５】
図４は、図３のステップＳ３における較正用画像を作成できるか否かの判断処理の一例を示すフローチャートである。制御部４０は、較正用画像作成部４０１として以下の処理を行なう。
【００６６】
制御部４０は、カウント用の変数Ｍに１を代入する（ステップＳ３１）。制御部４０は、較正用画像作成部４０１の機能により、フレーム画像の画素を走査して順次、各画素の輝度又は色の強度を表す値を順次参照し（ステップＳ３２）、許容される範囲で較正対象の輝度又は色に合致するか、即ち略均一な輝度又は色に合致するか否かを判定する（ステップＳ３３）。
【００６７】
詳細には、フレーム画像の画素の色がＲＧＢ（Ｒ：赤、Ｇ：緑、Ｂ：青）夫々の強度を示す階調値で表わされる場合、較正対象のＲＧＢ値を（Ｒｃ，Ｇｃ，Ｂｃ）とすると、制御部４０は、較正用画像作成部４０１の機能により、各画素の色について以下の三式を全て満たすものを合致と判断する。
Ｒｃ−δR ≦Ｒ≦Ｒｃ＋δR 
Ｇｃ−δG ≦Ｇ≦Ｇｃ＋δG 
Ｂｃ−δB ≦Ｂ≦Ｂｃ＋δB 
このときδR 、δG 、δB の値夫々は、ＲＧＢ値の最大値の１／３２程度を目安とする。例えば、ＲＧＢ値が夫々８ビットのデジタル信号で表わされる場合、ＲＧＢ値は０〜２５５であるからδR 、δG 、δB の値は夫々「８」となる。なお、δR 、δG 、δB の値は、輝度のステップを細かく設定する場合には小さい値に設定するなど、適宜設定すればよい。
【００６８】
またステップＳ３２において、較正用画像作成部４０１は、エッジが多い画像を基にしないように、各フレーム画像に対し、全画素を１画素ずつ参照して特定の輝度又は色に合致するか否かを判断するのではなく、複数の画素よりなる例えば３×３画素のブロック毎に参照するようにしてもよい。このときブロック毎の輝度又は色は、平均値又は中央値等を算出して用いてもよい。また、較正用画像作成部４０１は、処理の迅速化を図るため、各フレーム画像の全画素を参照するのではなく、４画素毎に１画素を参照するなどの間引き処理を行なって代表的な画素を参照してもよい。また、較正用画像作成部４０１は、３×３画素などのブロックに分割し、ブロック毎に輝度又は色の平均値等を算出し、更にブロックを間引きして参照するようにしてもよい。
【００６９】
制御部４０は、ステップＳ３３にて合致すると判断した場合（Ｓ３３：ＹＥＳ）、変数Ｍに１を加算し（ステップＳ３４）、対象画素を全て参照したか否かを判断する（ステップＳ３５）。制御部４０は、ステップＳ３３にて合致しないと判断した場合（Ｓ３３：ＮＯ）、そのまま処理をステップＳ３５へ進める。
【００７０】
制御部４０は、ステップＳ３５にて全て参照していないと判断した場合（Ｓ３５：ＮＯ）、処理をステップＳ３２へ戻し、次の画素の輝度又は色を参照する。
【００７１】
制御部４０は、ステップＳ３５にて全て参照したと判断した場合（Ｓ３５：ＹＥＳ）、変数Ｍに基づき、較正用の輝度又は色に合致する画素又はブロックの数は所定の閾値ｐ以上であるか否かを判断する（ステップＳ３６）。閾値ｐは例えば５０％などの割合又は画素数である。制御部４０は、所定の閾値ｐ以上であると判断した場合（Ｓ３６：ＹＥＳ）、較正用画像を作成可能と判断し（ステップＳ３７）、処理を図３のフローチャートのステップＳ４へ戻す。
【００７２】
なおステップＳ３６にて制御部４０は、水平方向に所定の画素数及び垂直方向に所定の画素数以上連続する均一な輝度又は色の領域、即ち所定サイズ以上の均一な領域を抽出した場合に、閾値ｐ以上であると判断し、較正に使用可能と判断してもよい（Ｓ３７）。
【００７３】
制御部４０は、所定の閾値ｐ未満であると判断した場合（Ｓ３６：ＮＯ）、較正用画像を作成不可能であると判断し（ステップＳ３８）、処理を図３のフローチャートのステップＳ４へ戻す。
【００７４】
図５から図８は、較正用画像作成部４０１により作成される較正用画像の一例を示す説明図である。いずれも図の上段に、較正用画像の基となるコンテンツデータ中のフレーム画像を示し、下段に、当該フレーム画像を用いて作成される較正用画像を示す。いずれも、８ビットのＲＧＢ値を予め定めてあるモノクロの４段階（２５５，２５５，２５５）、（１７０，１７０，１７０）、（８５，８５，８５）、（０，０，０）に区別した場合に、夫々のＲＧＢ値について作成される較正用画像の例を示す。
【００７５】
図５の上段に示した例は、広告宣伝用のあるコンテンツデータのフレーム番号「Ｎ１」のフレーム画像である。このフレーム画像は、「○○株式会社」のコーポレートステートメントを表示するフレーム画像であり、背景に「白」が使われている。上段に示したフレーム画像からは、ＲＧＢ値が最大輝度となる（２５５，２５５，２５５）である画素が閾値以上抽出され、下段に示すような「白」の較正用画像が作成される。
【００７６】
図６の上段に示した例は、図５のフレーム画像と同一のコンテンツデータ中のフレーム番号「Ｎ２」のフレーム画像を示す。このフレーム画像は、商品の画像を含み、背景に「薄いグレー」が使われている。上段に示したフレーム画像からは、ＲＧＢ値が（１７０，１７０，１７０）である画素が閾値以上抽出され、下段に示すような「薄いグレー」の較正用画像が作成される。
【００７７】
図７の上段には、図５及び図６に示したフレーム画像と同一のコンテンツデータ中のフレーム番号「Ｎ３」のフレーム画像を示す。このフレーム画像は、商品又はサービスのイメージを表す風景画像を含み、背景に「濃いグレー」を含む。上段に示したフレーム画像からは、ＲＧＢ値が（８５，８５，８５）である画素が閾値以上抽出され、下段に示すような「濃いグレー」の較正用画像が作成される。
【００７８】
図８の上段には、図５から図７に示したフレーム画像と同一のコンテンツデータ中のフレーム番号「Ｎ４」のフレーム画像を示す。このフレーム画像は、企業のコーポレートステートメントを表示するフレーム画像であり、背景に「黒」が使われている。上段に示したフレーム画像からは、ＲＧＢ値が（０，０，０）である黒の画素が閾値以上抽出され、下段に示すような「黒」の較正用画像が作成される。
【００７９】
次に、図５から図８に示したような較正用画像を用いて行なわれる実際の較正処理について説明する。まず制御部４０は、画像信号生成部４０２の機能により、画像信号を生成して出力する。
【００８０】
図９は、画像信号の生成処理手順の一例を示すフローチャートである。信号処理装置２が操作部２５にて、オペレータによりコンテンツの再生を指示する操作がされた場合、制御部２０が操作部２５からの通知を受けてこれを認識し、画像信号の出力開始を要求する制御用のデータを制御装置４へ出力する。制御装置４の制御部４０は、入出力部４４から画像信号の出力開始を要求する制御用データを入力したときに、以下の処理を実行する。
【００８１】
制御部４０は、較正用画像を作成する基となったコンテンツデータを記憶装置５から読み出し、入出力部４４を介した信号処理装置２への出力を開始する（ステップＳ１１）。これにより、表示部１にてコンテンツの再生が開始される。なお制御部４０は、信号処理装置２からの画像信号の出力及び表示部１での表示レートに間に合うように、適切な送信レートで画像信号を出力し続ける。
【００８２】
次に制御部４０は、信号処理装置２からの画像信号の出力停止を要求する制御用のデータを入力したか否かを判断する（ステップＳ１２）。制御部４０は、画像信号の出力停止を要求する制御用のデータを入力した場合（Ｓ１２：ＹＥＳ）、画像信号の出力の処理を終了する。なお、画像信号の出力停止を要求する制御用のデータは、信号処理装置２の操作部２５にて、オペレータによりコンテンツの停止を指示する操作がされ、制御部２０が操作部２５からの通知を受けてこれを認識したときに、信号処理装置２から制御装置４へ出力される。
【００８３】
制御部４０は、上述の画像信号の出力停止を要求する制御用のデータを入力していないと判断した場合（Ｓ１２：ＮＯ）、入力するまで、以下の処理を繰り返す。
【００８４】
制御部４０は、画像信号生成部４０２の機能により、較正用画像を出力するタイミングであるか否かを判断する（ステップＳ１３）。ステップＳ１３において制御部４０は、具体的には、出力中の画像信号のフレーム番号を特定し、較正情報４１１に記憶してある較正用画像を作成する基となったフレーム画像のフレーム番号の前の番号であるか、又はフレーム番号そのものであるかを判断する。
【００８５】
制御部４０は、較正用画像を出力するタイミングであると判断した場合（Ｓ１３：ＹＥＳ）、画像信号生成部４０２の機能により、較正情報４１１に基づき、フレーム番号に対応する較正用画像を挿入又は置換して出力する（ステップＳ１４）。具体的には制御部４０は、較正用画像を、基となったフレーム画像の前に挿入する場合、基となったフレーム画像のフレーム番号の前の番号であると判断したときに、当該フレーム番号の後に、フレームレートに基づき、１／２フレーム時間で表示されるように表示時刻を指定して出力する。又は、基となったフレーム画像を較正用画像に置換する場合、制御部４０は、基となったフレーム画像のフレーム番号であると判断したときに、基となったフレーム画像の替わりに較正用画像を出力する。又は、較正用画像を基となったフレーム画像の後に挿入する場合、基となったフレーム画像のフレーム番号の後に、フレームレートに基づき、１／２フレーム時間で表示されるように表示時刻を指定して出力する。
【００８６】
制御部４０は、較正用画像を出力すると処理をステップＳ１２へ戻す。一方で制御部４０は、較正用画像を出力するタイミングでないと判断した場合（Ｓ１３：ＮＯ）、そのまま処理をステップＳ１２へ戻す。
【００８７】
これにより、較正用画像を挿入又は置換した新たな画像信号がリアルタイムに生成されて出力される。本発明はこれに限らず、画像信号生成部４０２は、読み出したコンテンツデータに基づき較正用画像を挿入又は置換した新たな画像信号を生成し、一旦記憶部４１又は記憶装置５に記憶しておき、較正処理を行なう際に記憶されてある新たな画像信号を読み出して出力する構成としてもよい。
【００８８】
図１０及び図１１は、実施の形態１の画像信号生成部４０２により生成される画像信号の一例を模式的に示す説明図である。図１０及び図１１ではいずれも、画像信号に基づくフレーム画像を時系列に示している。フレームレートは３０フレーム／秒であり、各フレーム画像について、表示時刻（最初のフレーム画像からの経過時間）が秒［ｓ］単位で示されている。
【００８９】
図１０は、較正用画像がフレーム画像間に挿入される場合の、前後のフレーム画像を時系列的に示している。図１０に示す例では、較正情報４１１に、フレーム番号「Ｎ２」が記憶されている。画像信号生成部４０２の機能により制御部４０は、出力中のフレーム番号を特定し、フレーム番号が「Ｎ２−１」であると特定できた場合に、次のフレーム番号「Ｎ２」の前に、１／２フレーム時間（０．０１７秒）の較正用画像を挿入して出力する。図１０に示すように、較正用画像と、次のフレーム画像とでは、背景が略同一の輝度又は色となる。このため、較正用画像が表示されたとしても、視聴者は違和感を持つことはない。なおここで略同一の輝度又は色という表現を用いたが、較正用画像と、次のフレーム画像とで、背景の輝度又は色は、同一でなくてもよく、視聴者が、表示される画像に対して違和感を持たない範囲に収まっていればよい。違和感を持たない範囲とは、種々の画像を用い、また、多くの視聴者に参加してもらうことで定めるものでよい。この意味で、上述に、「略」同一の輝度又は色と表現している。
【００９０】
図１１は、フレーム画像を較正用画像に置換した場合の前後のフレーム画像を時系列的に示している。図１１に示す例でも較正情報４１１に、フレーム番号「Ｎ２」が記憶されている。画像信号生成部４０２の機能により制御部４０は、出力中のフレーム番号を特定し、出力するフレーム番号が「Ｎ２」であると特定できた場合に、較正用画像を出力する。制御部４０は、元のフレーム画像（Ｎ２）の画像信号は出力しない。図１１に示すように、較正用画像と、次のフレーム画像とでは、背景が略同一の輝度又は色となる。このため、較正用画像が表示されたとしても、視聴者は違和感を持つことはない。
【００９１】
なお図１１に示す例では、較正用画像が表示されるフレーム時間は、図１０に示した例の場合の０．０１７秒よりも、長く、０．０３３秒である。したがって、後述する撮像装置３による撮像タイミングに、１フレーム時間（０．０３３秒）程度のばらつきがあったとしても、較正用画像を撮像することができる。ただし、シャッター速度と撮像する時刻のばらつきは、１フレーム時間内に収める必要がある。
【００９２】
なお、較正用画像を挿入する場合であっても、図１１に示したように１フレーム時間分に挿入するようにしてもよい。ただし、これにより出力する画像信号が長くなる。撮像するタイミングの制御を複雑化しないよう、また、表示される動画像に不自然さが生じないよう、図１０に示したようなフレーム間に、１／２フレーム時間表示されるように出力することが好ましい。なお、電子看板として機能させる場合、テレビジョン放送などと比べて、再生されるコンテンツの長さは視聴者にとっては無視できるので、較正用画像を確実に撮像できるように、１フレーム時間分挿入する構成としても問題はないと考えられる。
【００９３】
次に、図１０及び図１１に示したように表示される画像に基づき較正が実行される手順を説明する。図１２は、制御装置４のタイミング特定部４０３及び較正部４０４によって実行される処理手順の一例を示すフローチャートである。制御部４０が信号処理装置２へ新たな画像信号の出力を開始すると、制御部４０はタイミング特定部４０３及び較正部４０４の機能により、以下の処理を実行し、較正を行なう。
【００９４】
制御部４０は、画像信号の出力を開始してからの経過時間を測定開始する（ステップＳ２１）。
【００９５】
制御部４０は、タイミング特定部４０３の機能により、画像信号の出力を開始してからの経過時間に基づき、較正用画像の表示時刻であるか否かを判断する（ステップＳ２２）。表示時刻は、制御部４０が画像信号生成部４０２により較正用画像を出力するに際して、表示時刻を指定して出力するので、これを記憶しておき、参照すればよい。
【００９６】
制御部４０は、表示時刻であると判断した場合（Ｓ２２：ＹＥＳ）、撮像要求信号を接続部４５から撮像装置３へ出力して撮像を実行させる（ステップＳ２３）。制御部４０は、表示時刻でないと判断した場合（Ｓ２２：ＮＯ）、処理をステップＳ２２へ戻す。
【００９７】
制御部４０は、撮像装置３での撮像を実行させた後、全ての較正用画像を撮像したか否かを判断する（ステップＳ２４）。具体的には制御部４０は、予め定めてある異なる複数の輝度又は色全ての較正用画像を撮像したか否か、撮像回数が較正情報４１１に記憶してあるフレーム番号の数と一致するかなどの方法によって判断すればよい。制御部４０は、全て撮像していないと判断した場合（Ｓ２４：ＮＯ）、処理をステップＳ２２へ戻す。制御部４０は、全ての較正用画像を撮像したと判断した場合（Ｓ２４：ＹＥＳ）、較正部４０４の機能により、全ての撮像画像の画像信号を撮像装置３から取得する（ステップＳ２５）。なお、制御部４０は、撮像を実行させる都度に、画像信号を取得してもよい。
【００９８】
なおステップＳ２５にて取得された撮像画像が、実際に較正用画像を撮像できた画像であり、後述する測定値が正当な値となるか否かを、事前に以下のように評価することが好ましい。制御部４０は、撮像画像の全画素からＲＧＢ値の夫々の最大値Ｒmax 、Ｇmax 、Ｂmax と最小値Ｒmin 、Ｇmin 、Ｂmin を抽出する。制御部４０は、ＲＧＢ値夫々に対する判定許容値としてΔR 、ΔG 、ΔB とし、以下の三式を全て満たした場合に、実際に較正用画像を撮像して測色が出来たと判定し、いずれか１つでも満たしていない場合、測色出来ていないと判定する。
Ｒmax −Ｒmin ≦ΔR 
Ｇmax −Ｇmin ≦ΔG 
Ｂmax −Ｂmin ≦ΔB 
なおΔR 、ΔG 、ΔB は夫々、例えば「５」などのように設定しておく。
【００９９】
制御部４０は、較正部４０４の機能により、取得した撮像画像を夫々、並置表示装置１０群の配列に応じてブロック画像に分割する（ステップＳ２６）。各ブロック画像には、並置表示装置１０を夫々識別する情報を対応付けておく。制御部４０は、較正部４０４の機能により、分割されたブロック画像に基づき表示装置１０毎の較正処理の実行を開始する（ステップＳ２７）。なお、較正処理が完了した後は、出力される画像信号は、較正部４０４による補正処理（後述のＳ７０６及びＳ７１０）、又は出力される補正情報４１２に基づき信号処理装置２で実行される補正処理によって補正される。
【０１００】
図１３は、図１２のステップＳ２７における較正処理の詳細な処理手順の一例を示すフローチャートである。制御部４０は、較正部４０４として以下の処理を行なう。
【０１０１】
制御部４０は、一の表示装置１０を選択し（ステップＳ７０１）、選択した表示装置１に対応するブロック画像から所定の演算により測定値（輝度値又は色値）を算出する（ステップＳ７０２）。所定の演算としては例えば、制御部４０は、較正部４０４の機能により、較正用領域を撮像した領域の画素の画素値（ＲＧＢ値）の平均値を算出する。中央値を算出するなど他の演算方法を用いてもよい。
【０１０２】
次に制御部４０は、較正部４０４の機能により、選択している表示装置１０についての測定値と表示されるべき輝度の輝度値とを比較する（ステップＳ７０３）。制御部４０は、差分が閾値以上であるか否かを判断し（ステップＳ７０４）、閾値以上であると判断した場合（Ｓ７０４：ＹＥＳ）、差分が閾値以上である測定値に対応する補正量を算出し（ステップＳ７０５）、輝度の補正を実施する（ステップＳ７０６）。制御部４０は、輝度について閾値未満であると判断した場合（Ｓ７０４：ＮＯ）、選択している表示装置１０については輝度の補正をする必要はなく、処理をそのまま次のステップＳ７０７へ進める。
【０１０３】
制御部４０は、選択している表示装置１０についての測定値と表示されるべき色の色値とを比較する（ステップＳ７０７）。制御部４０は、差分が閾値以上であるか否かを判断し（ステップＳ７０８）、閾値以上であると判断した場合（Ｓ７０８：ＹＥＳ）、差分が閾値以上である測定値に対応する補正量を算出し（ステップＳ７０９）、色値の補正を実施する（ステップＳ７１０）。制御部４０は、色について閾値未満であると判断した場合（Ｓ７０８：ＮＯ）、処理をそのまま次のステップＳ７１１へ進める。
【０１０４】
実施される補正には種々の方法が考えられる。制御部４０は、算出した表示装置１０毎の測定値同士を比較し、最大の測定値と最小の測定値との間の差分が所定の閾値以上である場合に、補正する方法でもよい。また差分に対する閾値は、目視により差異が認められる値を予め設定しておいてもよいし、予め測色器を用いて測定した結果に基づき設定される構成としてもよい。制御部４０は、較正部４０４の機能により、並置表示装置１０群に夫々対応する測定値の内、最も輝度値が低い表示装置１０に対応する測定値に合うように、他の表示装置１０へ入力する画像信号の輝度を補正する。つまり、他の表示装置１０にて表示される輝度を低下させる補正を行なう。そのほか較正部４０４は、各測定値と表示されるべき輝度値又は色値との間の差分が所定値以上である表示装置１０へ入力する画像信号を、表示されるべき輝度又は色となるように補正してもよい。特に、表示部１が１つの表示装置１０からなる場合は、この方法がとられる。
【０１０５】
なお、各表示装置１０に対応する輝度又は色毎の補正量を補正情報４１２として記憶部４１に記憶し、制御部４０が画像信号を出力するとともに、較正部４０４は補正情報４１２を表示装置１０毎の情報として信号処理装置２へ出力し、信号処理装置２の画像処理部２３にて、各表示装置１０に対応する補正情報４１２に基づき、入力する画像信号に対して補正を行なってもよい。信号処理装置２は、入力される種々の画像信号のＲＧＢ値に対し、較正部４０４から得た補正情報４１２を汎用的に用いて補正することが可能である。
【０１０６】
制御部４０は、全ての表示装置１０について補正処理を実施したか否か判断し（Ｓ７１１）、否と判断した場合（Ｓ７１１：ＮＯ）、処理をステップＳ７０１へ戻して次の表示装置１０を選択し（Ｓ７０１）、以後の処理を繰り返す。
【０１０７】
制御部４０は、全ての表示装置１０について補正処理を実施したと判断した場合（Ｓ７１１：ＹＥＳ）、補正処理を終了し、図１２のフローチャートのステップＳ２１へ処理を戻す。以後、表示部１の表示装置１０群に入力される画像信号に補正がされる。
【０１０８】
このように、電子看板の機能を発揮するべく表示部１に表示する宣伝広告用のコンテンツデータに基づく画像信号中に較正用画像を違和感なく表示させ、較正にも用いることが可能となる。
【０１０９】
（実施の形態２）
実施の形態１では、較正用画像を作成可能であると最初に判断されたフレーム画像の前後に較正用画像が挿入されるか、又は置換される構成であった。実施の形態２では、最も類似するフレーム画像の前後に較正用画像を挿入又は置換する。
【０１１０】
実施の形態２における表示システムの構成は、制御装置４の制御部４０により実施される以下の処理手順以外、実施の形態１と同様である。したがって、共通する構成には同一の符号を付し、詳細な説明を省略する。
【０１１１】
図１４は、実施の形態２における制御装置４の較正用画像作成部４０１により実施される処理手順の一例を示すフローチャートである。実施の形態２における制御装置４の制御部４０は、較正用画像作成部４０１の機能により、記憶装置５から読み出すコンテンツデータを用いて較正を行なう前に予め、以下に示す手順により処理を実行する。なお以下に示す処理手順の内、図３のフローチャートに示した処理手順と同一の処理手順については、同一のステップ番号を付して詳細な説明を省略する。
【０１１２】
制御部４０は、記憶装置５からコンテンツデータを読み出し（Ｓ１）、最初のフレーム画像（フレーム番号０（ゼロ））を較正用画像の作成対象とする（Ｓ２）。
【０１１３】
制御部４０は、暫定的な較正用画像の作成対象のフレーム画像に対し、実際に較正用画像を作成できるか否かの判断を行なうための処理（Ｓ３）、較正用画像の作成が可能であるか否かを判断する（Ｓ４）。制御部４０は、較正用画像の作成が不可能であると判断した場合（Ｓ４：ＮＯ）、そのまま処理を次のステップＳ７へ進める。
【０１１４】
制御部４０は、較正用画像の作成が可能であると判断した場合（Ｓ４：ＹＥＳ）、可能と判断されたフレーム画像のフレーム番号、及び較正用画像の輝度又は色の情報を含む較正情報４１１を記憶部４１に記憶する（Ｓ５）。このとき制御部４０は、ステップＳ３内の詳細処理でカウントされる変数Ｍの情報も記憶しておくとよい。
【０１１５】
次に制御部４０は、次のフレーム画像が存在するか否かを判断する（Ｓ７）。次のフレーム画像が存在すると判断した場合（Ｓ７：ＹＥＳ）、次のフレーム画像を較正用画像の作成対象とし（Ｓ８）、処理をステップＳ３へ戻す。
【０１１６】
制御部４０は、次のフレーム画像が存在しないと判断した場合（Ｓ７：ＮＯ）、全フレーム画像について較正用画像の作成判断処理を行なったので、記憶部４１に記憶されている較正情報４１１を参照し、同一の較正対象の輝度又は色について、複数のフレーム画像のフレーム番号が記憶されているか否かを判断する（ステップＳ４１）。制御部４０は、複数のフレーム番号が記憶されていないと判断した場合（Ｓ４１：ＮＯ）、そのまま処理を終了する。
【０１１７】
制御部４０は、複数のフレーム画像のフレーム番号が記憶されていると判断した場合（Ｓ４１：ＹＥＳ）、最も類似するフレーム画像のフレーム番号を特定する（ステップＳ４２）。このとき、制御部４０は、ステップＳ３の処理によってカウントする変数Ｍの値が最も大きいフレーム画像のフレーム番号を特定することによって類似するフレーム画像を特定してもよい。又は他の公知な手法を用いて各フレーム画像の類似度に優先順位を付与し、優先順位が高いフレーム画像のフレーム番号を特定するようにしてもよい。
【０１１８】
制御部４０は、最も類似しているとして特定したフレーム番号を較正情報４１１に記憶し（ステップＳ４３）、処理を終了する。
【０１１９】
これにより、記憶してある較正情報４１１に基づいて新たな画像信号が生成されるに際し、較正用画像は、最も類似すると判断されたフレーム画像の前後に挿入されるか、又は当該フレーム画像自体若しくは前後に置換される。したがって、較正用画像は、視聴者に最も違和感を持たれないように表示される。
【０１２０】
（実施の形態３）
実施の形態３では、コンテンツデータに基づく画像信号から、シーンが変化したフレーム画像の検出、所謂カット点検出を実行し、カット点の前後のフレーム画像に較正用画像を挿入又は置換する。
【０１２１】
実施の形態３における表示システムの構成は、制御装置４の制御部４０により実施される以下の処理手順以外、実施の形態１と同様である。したがって、共通する構成には同一の符合を付し、詳細な説明を省略する。
【０１２２】
図１５は、実施の形態３における制御装置４の較正用画像作成部４０１により実施される処理手順の一例を示すフローチャートである。実施の形態３における制御装置４の制御部４０は、較正用画像作成部４０１の機能により、記憶装置５から読み出すコンテンツデータを用いて較正を行なう前に予め、以下に示す手順により処理を実行する。
【０１２３】
制御部４０は、記憶装置５からコンテンツデータを読み出し（Ｓ１）、最初のフレーム画像を、カット点検出対象とする（ステップＳ５１）。
【０１２４】
制御部４０は、カット点検出対象としたフレーム画像に対し、カット点検出処理を行なう（ステップＳ５２）。
【０１２５】
ステップＳ５２におけるカット点検出の方法としては、前のフレーム画像との間で、輝度又は色の分布（ヒストグラム）を比較する方法、動きベクトル予測など、既知のアルゴリズムを用いればよい。具体的には、ヒストグラムの比較の方法として、色空間ヒストグラムのバタチャリヤ（Bhattacharyya ）距離を用いる方法がある。この場合制御部４０は、１つのフレーム画像毎に、全画素の輝度のヒストグラム（所定の区間に区切った輝度レベル毎の当該輝度レベルである画素の数の分布）を生成する。制御部４０は、生成したヒストグラムを、全画素数（例えば１００００）で正規化し、前のフレーム画像に対して生成下ヒストグラムとの間で所定のバタチャリヤ距離を算出し、距離の値が閾値（例えば０．３など）を超えるならば、当該フレーム画像と前のフレーム画像との間にカット点が存在すると判断する。なお、フレーム画像の各画素の色がＲＧＢ値で表れる場合、輝度は以下の色を用いて算出できる。
輝度Ｙ＝0.29891×Ｒ＋0.58661×Ｇ＋0.11448×Ｂ
なお、ヒストグラムの生成は必須ではなく、フレーム画像における輝度の値Ｙの分散値を算出すればよい。また、輝度を用いる代わりに、Ｒ、Ｇ、Ｂの色成分毎に分散値を算出し、複数の色成分（Ｒ、Ｇ、Ｂ）の内、いずれかの分散値が閾値以上であるか否かによってカット点が存在するか否かを判断するようにしてもよい。
【０１２６】
次に制御部４０は、カット点検出対象としたフレーム画像に対し、カット点が実際に検出されたか否かを判断する（ステップＳ５３）。制御部４０は、カット点が検出されたと判断した場合（Ｓ５３：ＹＥＳ）、カット点検出対象としたフレーム画像の１つ前のフレーム画像を、較正用画像の作成対象とし（ステップＳ５４）、以後の作成判断処理（Ｓ３）、作成の可否の判断（Ｓ４）、較正情報４１１の記憶（Ｓ５）、及び全ての輝度又は色について処理を完了したか否かの判断（Ｓ６）を行なう。
【０１２７】
なお、制御部４０はステップＳ５４において、カット点検出対象としたフレーム画像を較正用画像の作成対象としてもよい。
【０１２８】
制御部４０は、カット点が検出されないと判断した場合（Ｓ５３：ＮＯ）、次のフレーム画像が存在するか否かを判断し（Ｓ７）、存在すると判断した場合（Ｓ７：ＹＥＳ）、次のフレーム画像をカット点検出対象とし（ステップＳ５５）、処理をステップＳ５２へ戻す。
【０１２９】
これにより、カット点が検出されたフレーム画像、即ちシーン変化の前後のフレーム画像のみが、較正用画像を作成できるか否かの判断処理の対象となる。したがって、カット点が検出されたフレーム画像から較正用画像が作成される。
【０１３０】
図１６は、カット点が検出されるフレーム画像の例を示す説明図である。図１６中の各矩形は、フレーム画像を示し、フレーム番号「Ｎ２−４」のフレームから、フレーム番号「Ｎ２＋１」のフレームが時系列に並べて表示されている。制御部４０は、カット点検出の方法により、フレーム番号「Ｎ２」のフレーム画像で、シーンが変化しており、前のフレーム画像（Ｎ２−１）との間にカット点が存在すると判断することが可能である。
【０１３１】
カット点が検出されたフレーム画像が較正用画像の作成対象となることにより、以後、作成された較正用画像は当該カット点前後に挿入、又は置換されても、表示されたときに視聴者は違和感を持つことはない。
【０１３２】
図１７から図２０は、実施の形態３の画像信号生成部４０２により生成される画像信号の一例を模式的に示す説明図である。図１７から図２０ではいずれも、画像信号に基づくフレーム画像を時系列に示している。フレームレートは３０フレーム／秒であり、各フレーム画像について、表示時刻（最初のフレーム画像からの経過時間）が秒［ｓ］単位で示されている。
【０１３３】
図１７及び図１８は、較正用画像がフレーム画像間に挿入される場合の、前後のフレーム画像を時系列的に示している。
【０１３４】
図１７に示す例では、フレーム番号「Ｎ２」のフレーム画像にて、前のフレーム画像との間のカット点が検出されている。これにより、フレーム番号「Ｎ２−１」のフレーム画像が較正用画像の作成対象となった。フレーム番号「Ｎ２−１」のフレーム画像は、多くの領域を「白」が占めており、制御部４０は、ＲＧＢ値が（２５５，２５５，２５５）の「白」の較正用画像を作成することが可能であると判断する。較正情報４１１には、フレーム番号「Ｎ２−１」が記憶される。実施の形態３でも、制御部４０は、画像信号生成部４０２の機能により、図９のフローチャートに示した処理手順を実行する。このとき制御部４０は、出力中のフレーム番号を特定し、記憶されている較正情報４１１に基づき、フレーム番号が「Ｎ２−１」であると特定できた場合に、較正用画像の出力タイミングであると判断し、次のフレーム番号「Ｎ２」のフレーム画像の前に、１／２フレーム時間（０．０１７秒）の較正用画像を挿入して出力し、新たな画像信号とする。
【０１３５】
図１８に示す例では、フレーム番号「Ｎ３」のフレーム画像にて、カット点が検出されている。これにより、フレーム番号「Ｎ３−１」のフレーム画像が較正用画像の作成対象となった。フレーム番号「Ｎ３−１」のフレーム画像は、多くの領域を「薄いグレー」が占めており、制御部４０は、ＲＧＢ値が（１７０，１７０，１７０）の較正用画像を作成することが可能であると判断する。較正情報４１１には、フレーム番号「Ｎ３−１」が記憶される。そして画像信号を生成するに際し、制御部４０は、出力中のフレーム画像がフレーム番号「Ｎ３−１」であるときに、次のフレーム番号「Ｎ３」のフレーム画像の前に、１／２フレーム時間（０．０１７秒）の較正用画像を挿入して出力する。
【０１３６】
図１９及び図２０は、フレーム画像を較正用画像に置換した場合の前後のフレーム画像を時系列的に示している。
【０１３７】
図１９に示す例では、フレーム番号「Ｎ２」のフレーム画像にて、前のフレーム画像との間のカット点が検出されている。これにより、フレーム番号「Ｎ２−１」のフレーム画像が較正用画像の作成対象となり、ＲＧＢ値（２５５，２５５，２５５）の較正用画像が作成される。較正情報４１１には、フレーム番号「Ｎ２−１」が記憶される。そして画像信号を生成するに際し、制御部４０は、出力するフレーム画像がフレーム番号「Ｎ２」のフレーム画像であるときに、「白」の較正用画像に置換して出力する。
【０１３８】
図２０に示す例では、フレーム番号「Ｎ３」のフレーム画像にて、前のフレーム画像との間のカット点が検出されている。これにより、フレーム番号「Ｎ３−１」のフレーム画像が較正用画像の作成対象となり、ＲＧＢ値（１７０，１７０，１７０）の較正用画像が作成される。較正情報４１１には、フレーム番号「Ｎ３−１」が記憶される。そして画像信号を生成するに際し、制御部４０は、出力するフレーム画像がフレーム番号「Ｎ３」のフレーム画像であるときに、「白」の較正用画像に置換して出力する。
【０１３９】
図１７から図２０に示すように、較正用画像と、前のフレーム画像とでは、背景が略同一の輝度又は色となる。しかも、カット点が検出された時点、即ちシーンが変化するときに較正用画像が表示される。このため、較正用画像が表示されたとしても、視聴者はなおさら違和感を持つことはない。
【０１４０】
（実施の形態４）
実施の形態４では更に、較正用画像を出力するに際し、複数回連続して出力する。
【０１４１】
実施の形態４における表示システムの構成は、制御装置４の制御部４０により実施される以下の処理手順以外、実施の形態１と同様である。したがって、共通する構成には同一の符合を付し、詳細な説明を省略する。
【０１４２】
図２１は、実施の形態４における画像信号の生成処理手順の一例を示すフローチャートである。なお以下に示す処理手順の内、実施の形態１における図９のフローチャートに示した処理手順と同一の処理手順については、同一のステップ番号を付して詳細な説明を省略する。
【０１４３】
制御部４０は、コンテンツデータを記憶装置５から読み出して信号処理装置２への出力を開始し（Ｓ１１）、信号処理装置２からの画像信号の出力停止を要求する制御用のデータを入力したか否かを判断し（Ｓ１２）、上述の画像信号の出力停止を要求する制御用のデータを入力したと判断するまで、以下の処理を繰り返す。
【０１４４】
制御部４０は、画像信号生成部４０２の機能により、較正用画像を出力するタイミングであるか否かを判断し（Ｓ１３）、較正用画像を出力するタイミングであると判断した場合（Ｓ１３：ＹＥＳ）、画像信号生成部４０２の機能により、較正情報４１１に基づき、フレーム番号に対応する較正用画像を、複数回、挿入又は置換して出力する（ステップＳ１５）。
【０１４５】
制御部４０は、較正用画像を出力すると処理をステップＳ１２へ戻し、較正用画像を出力するタイミングでないと判断した場合（Ｓ１３：ＮＯ）、そのまま処理をステップＳ１２へ戻す。
【０１４６】
図２２及び図２３は、実施の形態４の画像信号生成部４０２により生成される画像信号の一例を模式的に示す説明図である。図２２及び図２３ではいずれも、画像信号に基づくフレーム画像を時系列に示している。フレームレートは３０フレーム／秒であり、各フレーム画像について、表示時刻（最初のフレーム画像からの経過時間）が秒［ｓ］単位で示されている。
【０１４７】
図２２では、フレーム番号「Ｎ２」のフレーム画像にて、前のフレーム画像との間のカット点が検出されている。これにより、フレーム番号「Ｎ２−１」のフレーム画像が較正用画像の作成対象となり、ＲＧＢ値（２５５，２５５，２５５）の較正用画像が作成される。較正情報４１１には、フレーム番号「Ｎ２−１」が記憶される。そして画像信号を生成するに際し、制御部４０は、出力中のフレーム画像が、記憶されているフレーム番号「Ｎ２−１」である場合に、その後に、作成した較正用画像を複数回（図２２では４回）、連続させて出力する。これにより、図２２に示すように、元のコンテンツデータにおけるフレーム番号「Ｎ２−１」のフレーム画像と、フレーム番号「Ｎ２」のフレーム画像との間に、較正用画像が４フレーム時間分表示される。
【０１４８】
図２３では、フレーム番号「Ｎ３」のフレーム画像にて、前のフレーム画像との間のカット点が検出されている。これにより、フレーム番号「Ｎ３−１」のフレーム画像が較正用画像の作成対象となり、ＲＧＢ値（１７０，１７０，１７０）の較正用画像が作成される。較正情報４１１には、フレーム番号「Ｎ３−１」が記憶される。そして画像信号を生成するに際し、制御部４０は、出力中のフレーム画像が、記憶されているフレーム番号「Ｎ３−１」である場合に、その後に、作成した較正用画像を複数回、連続させて出力する。これにより、図２３に示すように、元のコンテンツデータにおけるフレーム番号「Ｎ３−１」のフレーム画像と、フレーム番号「Ｎ３」のフレーム画像との間に、較正用画像が４フレーム時間分表示される。
【０１４９】
このように、同一の輝度又は色について作成した較正用画像を、連続して出力することにより、タイミング特定部４０３により制御される撮像タイミングに、猶予が生まれる。複数回連続して較正用画像を出力する場合、タイミング特定部４０３は、先頭の較正用画像が表示される時刻を表示時刻とし、表示されるタイミングを特定する。３０フレーム／秒で、４回連続出力される場合では、較正用画像は４フレーム時間（０．１３３秒）、表示される。したがって、撮像するまでの遅延があっても、より確実に較正用画像を撮像することが可能となる。
【０１５０】
なお、画像信号生成部４０２の機能により、較正情報４１１に基づき、フレーム番号に対応する較正用画像を、複数回、挿入又は置換するに際し、輝度を変化させながら複数の較正用画像を挿入してもよい。図２４は、実施の形態４の画像信号生成部４０２により生成される画像信号の他の一例を模式的に示す説明図である。図２４でも、画像信号に基づくフレーム画像を時系列に示している。フレームレートは３０フレーム／秒であり、各フレーム画像について、表示時刻（最初のフレーム画像からの経過時間）が秒［ｓ］単位で示されている。
【０１５１】
図２４では、フレーム番号「Ｎ４」のフレーム画像にて、前のフレーム画像との間のカット点が検出されている。制御部４０は、較正用画像作成部４０１の機能により、カット点検出対象としたフレーム画像の１つ前のフレーム画像、即ちフレーム番号「Ｎ４−１」のフレーム画像のみならず、カット点検出対象としたフレーム画像、即ちフレーム番号「Ｎ４」のフレーム画像についても較正用画像の作成対象とし、夫々ＲＧＢ値（２５５，２５５，２５５）の較正用画像、及びＲＧＢ値（０，０，０）の較正用画像を作成できると判断する。較正情報４１１には、フレーム番号「Ｎ４−１」及び「Ｎ４」が記憶される。そして画像信号を生成するに際し、制御部４０は、出力中のフレーム画像が、記憶されているフレーム番号「Ｎ４−１」であり、次は「Ｎ４」であって、夫々に対応する較正用画像の輝度又は色が異なる場合、二つの較正用画像間の輝度又は色を少しずつ変化させた較正用画像を連続させて出力する。これにより、図２４に示すように、元のコンテンツデータにおけるフレーム番号「Ｎ４−１」のフレーム画像と、フレーム番号「Ｎ４」のフレーム画像との間に、輝度が異なる較正用画像が連続して表示される。
【０１５２】
このようにして、輝度が少しずつ異なる較正用画像を連続して出力させたとしても、視聴者は違和感を持たせることはない。
【０１５３】
このようにして、表示システムの表示部１に実際に表示するために利用するコンテンツを用い、コンテンツデータに基づく画像を表示している間に較正を実施し、補正量を特定して補正することができる。較正のためにコンテンツの再生を停止する必要もない。特に、常時的にコンテンツを出力する必要がある電子看板などの用途に用いられる表示システムにて、電子看板の機能を失わせることなく輝度又は色の較正が可能である点、優れた効果を奏する。
【０１５４】
実施の形態１から４に示した構成は、適宜組み合わせて実施することも可能である。
【０１５５】
なお、開示された実施の形態は、全ての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上述の説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内での全ての変更が含まれることが意図される。
【符号の説明】
【０１５６】
１  表示部
１０  表示装置
１１  パネル
２  信号処理装置
２２  入出力部
３  撮像装置
４  制御装置
４０  制御部
４０１  較正用画像作成部
４０２  画像信号生成部
４０３  タイミング特定部
４０４  較正部
４１  記憶部
４１１  較正情報
４４  入出力部
４５  接続部
４Ｐ  制御プログラム
６  記録媒体
６Ｐ  制御プログラム
【図１】
0005539297.tif 000002
【図２】
0005539297.tif 000003
【図３】
0005539297.tif 000004
【図４】
0005539297.tif 000005
【図５】
0005539297.tif 000006
【図６】
0005539297.tif 000007
【図７】
0005539297.tif 000008
【図８】
0005539297.tif 000009
【図９】
0005539297.tif 000010
【図１０】
0005539297.tif 000011
【図１１】
0005539297.tif 000012
【図１２】
0005539297.tif 000013
【図１３】
0005539297.tif 000014
【図１４】
0005539297.tif 000015
【図１５】
0005539297.tif 000016
【図１６】
0005539297.tif 000017
【図１７】
0005539297.tif 000018
【図１８】
0005539297.tif 000019
【図１９】
0005539297.tif 000020
【図２０】
0005539297.tif 000021
【図２１】
0005539297.tif 000022
【図２２】
0005539297.tif 000023
【図２３】
0005539297.tif 000024
【図２４】
0005539297.tif 000025