(57)【特許請求の範囲】
【請求項１】
映像全体を視聴者の有効視野並びに誘導視野又は／及び補助視野に呈示する映像呈示システムであって、
主たる映像を有効視野に呈示する第一の表示部と、前記主たる映像に関連する周辺映像を誘導視野又は／及び補助視野に呈示する第二の表示部とを備えた映像呈示システムにおいて、
前記第二の表示部は、前記第一の表示部より解像度の低いことを特徴とする映像呈示システム。
【請求項２】
前記請求項１に記載の映像呈示システムにおいて、
前記第二の表示部は、複数の映像表示装置から成ることを特徴とする映像呈示システム。
【請求項３】
前記請求項２に記載の映像呈示システムにおいて、
前記第二の表示部を構成する複数の映像表示装置は、視聴者の視野の周辺部に位置する映像表示装置ほど解像度が低いことを特徴とする映像呈示システム。
【請求項４】
前記請求項２に記載の映像呈示システムにおいて、
前記第二の表示部を構成する複数の映像表示装置は、該表示装置全体が単一の色を表示し得ることを特徴とする映像呈示システム。
【請求項５】
前記請求項４に記載の映像呈示システムにおいて、
前記第二の表示部を構成する複数の映像表示装置は、該映像表示装置が位置する視聴者の視野領域によって大きさが異なることを特徴とする映像呈示システム。
【請求項６】
前記請求項５に記載の映像呈示システムにおいて、
前記第二の表示部を構成する複数の映像表示装置は、視聴者の周辺部の視野領域に位置する映像表示装置ほど大きさが大きいことを特徴とする映像呈示システム。
【請求項７】
前記請求項４に記載の映像呈示システムにおいて、
前記第二の表示部を構成する複数の映像表示装置は、該映像表示装置が位置する視聴者の視野領域によって同時に制御される該映像表示装置の数が異なることを特徴とする映像呈示システム。
【請求項８】
前記請求項７に記載の映像呈示システムにおいて、
前記第二の表示部を構成する複数の映像表示装置は、視聴者の周辺部の視野領域に位置する映像表示装置ほど同時に制御される該映像表示装置の数が大きいことを特徴とする映像呈示システム。
【請求項９】
前記請求項４乃至８のいずれかに記載の映像呈示システムにおいて、
前記映像表示装置は、輝度・色相・彩度のうち一つ以上を調節可能であることを特徴とする映像呈示システム。
【請求項１０】
前記請求項４乃至９のいずれかに記載の映像呈示システムにおいて、
前記主たる映像に基づいて前記映像表示装置を制御する制御データを生成することを特徴とする映像呈示システム。
【請求項１１】
前記請求項１乃至１０のいずれかに記載の映像呈示システムにおいて、
前記第二の表示部へ出力する映像データの解像度と、前記第二の表示部の解像度とが異なる場合、前記映像データの解像度を前記第二の表示部の解像度に変換してから出力することを特徴とする映像呈示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像呈示システムに関し、特に、放送で受信される映像や記録媒体に記録された映像を呈示するときに、臨場感を高められる映像呈示システムに関するものである。
【背景技術】
【０００２】
非特許文献１によると、図１に示すように人間の視野は視機能の働きにより、弁別視野１０１、有効視野１０２、誘導視野１０３、補助視野１０４に分類される。弁別視野１０１は、図形識別など高密度な情報を正確に受容できる範囲である。有効視野１０２は、弁別能力は弁別視野１０１より低下するが眼球運動のみで自然な情報受容ができる範囲である。誘導視野１０３は、呈示刺激の存在や簡単な識別ができる程度の認識能力しかないが、全体的な外界情報を判断する際に影響を持つ範囲である。補助視野１０４は、刺激の存在のみが判別できる範囲である。
【０００３】
ところで、現在のハイビジョンテレビは、上記のうち有効視野１０２を覆う範囲に映像（本明細書ではこの映像を有効視野映像と呼ぶ）を呈示するよう設計されている。つまり誘導視野１０３や補助視野１０４には映像を呈示していない。誘導視野１０３や補助視野１０４にも映像（本明細書ではこのように誘導視野１０３や補助視野１０４に呈示する映像を周辺映像と呼ぶ）を呈示することで、より臨場感が高まることが期待できる。
【０００４】
さらに、最近ではより臨場感が高まる高精細映像システムの研究が行われている。例えば、特許文献１の技術は、画像表示装置の画面に映し出された画像の臨場感が高まるように、該画像表示装置に映し出される画像に連動して、該画像を鑑賞する鑑賞者が存在する鑑賞空間の照明を制御する。この場合、レベル、光色、配光、及び方向のうちの少なくとも一つのパラメータを、前記画像表示装置に映し出される前記画像から仮想される仮想画像空間における対応するパラメータにほぼ一致させるように、該鑑賞空間に設けられている一つ以上の光源を制御する。
【特許文献１】特開２０００−１７３７８３号公報
【非特許文献１】畑田豊彦，坂田晴夫，日下秀夫，“画面サイズによる方向感覚誘導効果‐大画面による臨場感の基礎実験‐”，テレビジョン学会誌，Ｖｏｌ．３３，Ｎｏ．５，ｐｐ．４０７−４１３  （１９７９）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、周辺映像を呈示しようとすると、映像呈示装置は非常に大規模なものになる。家庭にそのような装置を導入することは、コストの面でも設置スペースの面でも困難であるという課題がある。また、周辺映像を加えたためにデータ量が増加することも問題となる。
【０００６】
本発明は、上記課題に鑑みてなされたものであり、データ量を増加させることなく、また、コストや設置スペースを気にすることなく、周辺映像を簡易的に呈示して臨場感を高められる映像呈示システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本願の第１の発明は、映像全体を視聴者の有効視野並びに誘導視野又は／及び補助視野に呈示する映像呈示システムであって、主たる映像を有効視野に呈示する第一の表示部と、前記主たる映像に関連する周辺映像を誘導視野又は／及び補助視野に呈示する第二の表示部とを備えた映像呈示システムにおいて、前記第二の表示部は、前記第一の表示部より解像度の低いことを特徴とする。
【０００８】
本願の第２の発明は、前記第二の表示部は、複数の映像表示装置から成ることを特徴とする。
【０００９】
本願の第３の発明は、前記第二の表示部を構成する複数の映像表示装置は、視聴者の視野の周辺部に位置する映像表示装置ほど解像度が低いことを特徴とする。
【００１０】
本願の第４の発明は、前記第二の表示部を構成する複数の映像表示装置は、該表示装置全体が単一の色を表示し得ることを特徴とする。
【００１１】
本願の第５の発明は、前記第二の表示部を構成する複数の映像表示装置は、該映像表示装置が位置する視聴者の視野領域によって大きさが異なることを特徴とする。
【００１２】
本願の第６の発明は、前記第二の表示部を構成する複数の映像表示装置は、視聴者の周辺部の視野領域に位置する映像表示装置ほど大きさが大きいことを特徴とする。
【００１３】
本願の第７の発明は、前記第二の表示部を構成する複数の映像表示装置は、該映像表示装置が位置する視聴者の視野領域によって同時に制御される該映像表示装置の数が異なることを特徴とする。
【００１４】
本願の第８の発明は、前記第二の表示部を構成する複数の映像表示装置は、視聴者の周辺部の視野領域に位置する映像表示装置ほど同時に制御される該映像表示装置の数が大きいことを特徴とする。
【００１５】
本願の第９の発明は、前記映像表示装置は、輝度・色相・彩度のうち一つ以上を調節可能であることを特徴とする。
【００１６】
本願の第１０の発明は、前記主たる映像に基づいて前記映像表示装置を制御する制御データを生成することを特徴とする。
【００１７】
本願の第１１の発明は、前記第二の表示部へ出力する映像データの解像度と、前記第二の表示部の解像度とが異なる場合、前記映像データの解像度を前記第二の表示部の解像度に変換してから出力することを特徴とする。
【発明の効果】
【００２３】
本発明によれば、データ量を増加させることなく、また、コストや設置スペースを気にすることなく、周辺映像を簡易的に呈示して臨場感を高めることが可能となる。
【発明を実施するための最良の形態】
【００２４】
以下、図面を参照して本発明の好適な実施形態について説明する。
【００２５】
＜第１の実施形態＞
図２は、本発明の第１の実施形態に係る映像呈示システムを示したものであり、表示部が設置された部屋を後方（映された映像を見る視聴者の位置）から見た様子を示している。
【００２６】
この部屋の中には、第一の表示部１０５、第二の表示部１０６ａ〜１０６ｈ、映像処理装置１１４が設置されている。第二の表示部１０６ｂは、第一の表示部１０５の後背に設置されており、第一の表示部１０５の脚部で一部画面が隠されている様子を図示している。
【００２７】
映像処理装置１１４は、放送やストリーミングの受信あるいは記録媒体からの映像再生などにより各表示部１０５，１０６に映像を出力する機能や、後述する解像度変換機能を持つ装置である。
【００２８】
また、図３は、第１の実施形態に係る映像呈示システムを上部から見た図であり、視聴者１１５の視野を覆うように各表示部１０５，１０６が設置されている様子を示している。図中で第二の表示部１０６ａと第二の表示部１０６ｂとは、上から見ると重なって見えるため、そのように図示している。また、図１で示した有効視野１１６、誘導視野（左）１１７、誘導視野（右）１１８、補助視野（左）１１９、補助視野（右）１２０を重ねて図示している。
【００２９】
第一の表示部１０５は、主に有効視野１１６に映像を呈示するための映像表示装置であり、ブラウン管テレビ、液晶テレビ、プラズマテレビ、リアプロジェクションテレビ、プロジェクタによる投影画面など、様々な種類の映像表示装置を使うことができる。
【００３０】
第二の表示部１０６ａ〜１０６ｈは、主に誘導視野１１７，１１８や補助視野１１９，１２０に映像を呈示するための映像表示装置であり、こちらも様々な種類の映像表示装置を使うことができる。ここで、第二の表示部１０６ａ〜１０６ｈに呈示する映像は、第一の表示部１０５に呈示する主たる映像に関連（従属）するものであり、第一の表示部１０５による表示映像の視聴時における臨場感を増大させることが可能なものである。
【００３１】
また、これら第二の表示部１０６の解像度（空間解像度）は、第一の表示部１０５と同じでもよいが、第一の表示部１０５の解像度（空間解像度）より低い方が望ましい。補助視野や誘導視野においては、人間の視機能の認識能力が低いことを考慮すると、補助視野や誘導視野には、有効視野に呈示している映像より解像度を落とした映像情報を呈示することでも、臨場感を高める十分な効果があると考えられるからである。
【００３２】
したがって、第二の表示部１０６に第一の表示部１０５より解像度の低い表示装置を用いれば、臨場感を高める効果を損ねることなく、より安価に映像呈示システムを構築することが可能である。
【００３３】
さらに、複数ある第二の表示部１０６が全て同じ解像度では無く、異なる解像度の表示装置を混在させて使用しても良い。例えば、第二の表示部１０６ａ〜１０６ｄの解像度より、第二の表示部１０６ｅ〜１０６ｆの方が低く、さらに第二の表示部１０６ｇ〜１０６ｈの方が低く、というような構成にしてもかまわない。この場合、有効視野、誘導視野、補助視野の順に解像度が低くなる。人間の視力もこの順に詳細な判別能力が低下するため、このような解像度設定でも、全て同じ解像度で表示した場合と比較して同等の、臨場感を高める効果が期待できる。
【００３４】
なお、第１の本実施形態における第一の表示部１０５のサイズや配置および複数の第二の表示部１０６のサイズや配置や数や設置密度は、あくまで一例であり、これに限られないことは言うまでもない。
【００３５】
また、第１の実施形態では、視野の分割数やその角度について、上述の非特許文献１による視野の分類やその角度を用いているが、これは便宜的なものであり、この分割や角度に限るものではない。例えば、誘導視野や補助視野をさらに分割して、第二の表示部１０６を設置するようにしてもよい。本実施形態においても、図３に示したように、誘導視野１１７，１１８をそれぞれさらに２つに分割して、第２の表示部１０６ｃ，１０６ｅ、第二の表示部１０６ｄ，１０６ｆを設置している。
【００３６】
さらに、本実施形態を示す図２や図３では、視聴者１１５が第一の表示部１０５の方向を向いている時は視聴者１１５の背中側は視野に入らないため、背中側には第二の表示部１０６を設置していない。しかし、視聴者１１５が視聴中に振り返ることもあることを考慮し、背中側に第二の表示部１０６を設置するようにしてもよい。また、音響再生装置を設置して、さらに臨場感を高めることもできる。
【００３７】
＜第２の実施形態＞
上述したように、第二の表示部１０６の解像度（空間解像度）をだんだん落としていくと、最後には表示部全体が１色の色を表示する表示装置へと行き着く。このような表示装置は、照明装置を使って実現可能である。このような低解像度の映像呈示でも、ある程度の臨場感を高める効果は期待できる。これに関し、本発明の第２の実施形態として図４及び図５とともに説明するが、上述した第１の実施形態と同一部分には同一符号を付し、その説明は省略する。
【００３８】
図４は、本発明の第２の実施形態に係る映像呈示システムを示したものであり、表示部が設置された部屋を後方（映された映像を見る視聴者の位置）から見た様子を示している。
【００３９】
部屋の中には、第一の表示部１０５、映像処理装置１１４、第二の表示部１２１ａ〜１２１ｇが設置されている。
【００４０】
また、図５は、本発明の第２の実施形態に係る映像呈示システムを上部から見た図であり、視聴者１１５の視野を覆うように第二の表示部１２１ａ〜１２１ｇが設置されている様子を示している。また、図１で示した有効視野１１６、誘導視野（左）１１７、誘導視野（右）１１８、補助視野（左）１１９、補助視野（右）１２０を重ねて図示している。
【００４１】
第一の表示部１０５は、主に有効視野に映像を呈示するための映像表示装置であり、実施形態１と同様、ブラウン管テレビ、液晶テレビ、プラズマテレビ、リアプロジェクションテレビ、プロジェクタによる投影画面など、様々な種類の映像表示装置を使うことができる。
【００４２】
第二の表示部１２１ａ〜１２１ｇは照明装置であり、主に誘導視野１１７，１１８や補助視野１１９，１２０に解像度を落とした映像を照明として呈示するためのものである。各々の照明装置１２１ａ〜１２１ｇは独立して照明光の制御を行うことが可能である。
【００４３】
図４では、それぞれの照明装置１２１の下部の壁面を照らすよう照明装置１２１を配置した例を示しているが、これはあくまで一例であり、他にも下側に設置し照明装置の上部の壁面を照らすもの、照明装置の周りの壁面を照らすもの、照明装置自体が光るものなど、様々な照明装置を用いることが考えられ、それらのいずれを使用しても良いし、組み合わせて使用しても良い。
【００４４】
また、これらの照明装置は、単に照明の輝度を変更できるだけのものの他、照明光の色相、彩度、輝度を制御可能なものなど、様々な種類の照明装置を使っても良い。例えば、所定の色相をもった例えばＲＧＢの三原色の光を発光するＬＥＤを用いることができるが、これに限られず、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。
【００４５】
ここで、第２の実施形態では、図４及び図５に示すように、前記第二の表示部として、大きさ（水平方向のサイズ）が異なる複数の照明装置１２１ａ〜１２１ｇを含む構成としている。例えば、照明装置１２１ａ〜１２１ｅより照明装置１２１ｆ〜１２１ｇの方が、その水平方向のサイズが大きい。これは、上述したとおり、人間の視力は、有効視野、誘導視野、補助視野の順に詳細な判別能力が低下するため、この順で照明光の解像度を低くしても、臨場感を高める効果が期待できるからである。
【００４６】
このように、人間の視覚の判別能力がより低い領域には、より少ない照明装置を設置するだけでも同等の効果を得られるため、例えば、補助視野の領域に配置する照明装置の大きさを、誘導視野の領域に配置する照明装置の大きさより大きくして、補助視野の領域に配置する照明装置の数を、誘導視野の領域に配置する照明装置の数より少なくすればよい。ただし、これら照明装置の配置や数、大きさに関しては、本実施形態に示したものに限られないことは言うまでもない。
【００４７】
また、本実施形態では、視野の水平方向のみで視野を分割して照明装置を設置しているが、垂直方向に視野を分割して照明装置を設置してももちろんかまわない。この場合、垂直方向のサイズが異なる複数の照明装置を用いて第二の表示部１２１を構成するようにすればよい。また、本実施形態では、視野の分割数やその角度について非特許文献１による視野の分類やその角度を用いているが、これは便宜的なものであり、この分割や角度に限るものではない。
【００４８】
さらに、本実施形態では、視聴者１１５が第一の表示部１０５の方向を向いている時は視聴者１１５の背中側は視野に入らないため、背中側には照明装置を設置していない。しかし視聴者１１５が視聴中に振り返ることもあることを考慮し、背中側に照明装置を設置することももちろんかまわない。また、音響再生装置を設置して、さらに臨場感を高めることもできる。
【００４９】
＜第３の実施形態＞
上述したように、人間の視覚の判別能力がより低い領域には、より少ない照明装置を設置するだけでも同等の効果を得られるため、視野の領域によって設置する照明装置の密度を変えるようにしてもよい。これに関し、本発明の第３の実施形態として図６とともに説明するが、上述した第２の実施形態と同一部分には同一符号を付し、その説明は省略する。
【００５０】
図６は、本発明の第３の実施形態に係る映像呈示システムを上部から見た図であり、視聴者１１５の視野を覆うように第二の表示部１２２ａ〜１２２ｒが設置されている様子を示している。また、図１で示した有効視野１１６、誘導視野（左）１１７、誘導視野（右）１１８、補助視野（左）１１９、補助視野（右）１２０を重ねて図示している。
【００５１】
第二の表示部１２２ａ〜１２２ｒは照明装置であり、主に誘導視野１１７，１１８や補助視野１１９，１２０に解像度を落とした映像を照明として呈示するためのものである。各々の照明装置１２２ａ〜１２２ｒは独立して照明光の制御を行うことが可能である。
【００５２】
図６では、それぞれの照明装置１２２の下部の壁面を照らすよう照明装置１２２を配置した例を示しているが、これはあくまで一例であり、他にも下側に設置し照明装置の上部の壁面を照らすもの、照明装置の周りの壁面を照らすもの、照明装置自体が光るものなど、様々な照明装置を用いることが考えられ、それらのいずれを使用しても良いし、組み合わせて使用しても良い。
【００５３】
また、これらの照明装置は、単に照明の輝度を変更できるだけのものの他、照明光の色相、彩度、輝度を制御可能なものなど、様々な種類の照明装置を使っても良い。例えば、所定の色相をもった例えばＲＧＢの三原色の光を発光するＬＥＤを用いることができるが、これに限られず、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。
【００５４】
ここで、第３の実施形態では、図６に示すように、前記第二の表示部として、設置密度（水平方向の設置密度）が異なる複数の照明装置１２２ａ〜１２２ｒを含む構成としている。例えば、照明装置１２２ａ〜１２２ｄの設置密度より照明装置１２２ｅ〜１２２ｌの設置密度の方が、さらに照明装置１２２ｍ〜１２２ｒの設置密度の方が低い。これは、上述したとおり、人間の視力は、有効視野、誘導視野、補助視野の順に詳細な判別能力が低下するため、この順で照明光の解像度を低くしても、臨場感を高める効果が期待できるからである。
【００５５】
このように、人間の視覚の判別能力がより低い領域には、より少ない照明装置を設置するだけでも同等の効果を得られるため、例えば、補助視野の領域に配置する照明装置の密度を、誘導視野の領域に配置する照明装置の密度より低くして、補助視野の領域に配置する照明装置の数を、誘導視野の領域に配置する照明装置の数より少なくすればよい。ただし、これら照明装置の配置や数、大きさに関しては、本実施形態に示したものに限られないことは言うまでもない。
【００５６】
また、本実施形態では、視野の水平方向のみで視野を分割して照明装置を設置しているが、垂直方向に視野を分割して照明装置を設置してももちろんかまわない。この場合、垂直方向の設置密度が異なる複数の照明装置を用いて第二の表示部１２２を構成するようにすればよい。また、本実施形態では、視野の分割数やその角度について非特許文献１による視野の分類やその角度を用いているが、これは便宜的なものであり、この分割や角度に限るものではない。
【００５７】
さらに、本実施形態では、視聴者１１５が第一の表示部１０５の方向を向いている時は視聴者１１５の背中側は視野に入らないため、背中側には照明装置を設置していない。しかし視聴者１１５が視聴中に振り返ることもあることを考慮し、背中側に照明装置を設置することももちろんかまわない。また、音響再生装置を設置して、さらに臨場感を高めることもできる。
【００５８】
＜第４の実施形態＞
上述したように、人間の視覚の判別能力がより低い領域では、照明光の解像度をより低くしても同等の効果を得られるため、視野の領域によって同時に制御される照明装置の数を変えるようにしてもよい。これに関し、本発明の第４の実施形態として図７とともに説明するが、上述した第２の実施形態と同一部分には同一符号を付し、その説明は省略する。
【００５９】
図７は、本発明の第４の実施形態に係る映像呈示システムを上部から見た図であり、視聴者１１５の視野を覆うように第二の表示部１２３ａ〜１２３ｔが設置されている様子を示している。また、図１で示した有効視野１１６、誘導視野（左）１１７、誘導視野（右）１１８、補助視野（左）１１９、補助視野（右）１２０を重ねて図示している。
【００６０】
第二の表示部１２３ａ〜１２３ｔは照明装置であり、主に誘導視野１１７，１１８や補助視野１１９，１２０に解像度を落とした映像を照明として呈示するためのものである。各々の照明装置１２３ａ〜１２３ｔは後述する制御単位で独立して照明光の制御を行うことが可能である。
【００６１】
図７では、それぞれの照明装置１２３の下部の壁面を照らすよう照明装置１２３を配置した例を示しているが、これはあくまで一例であり、他にも下側に設置し照明装置の上部の壁面を照らすもの、照明装置の周りの壁面を照らすもの、照明装置自体が光るものなど、様々な照明装置を用いることが考えられ、それらのいずれを使用しても良いし、組み合わせて使用しても良い。
【００６２】
また、これらの照明装置は、単に照明の輝度を変更できるだけのものの他、照明光の色相、彩度、輝度を制御可能なものなど、様々な種類の照明装置を使っても良い。例えば、所定の色相をもった例えばＲＧＢの三原色の光を発光するＬＥＤを用いることができるが、これに限られず、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。
【００６３】
ここで、第４の実施形態では、図７に示すように、前記第二の表示部として、均一な密度で配置された複数の照明装置１２３ａ〜１２３ｔを含む構成としているが、同時に照明光が制御される照明装置の数が視聴者の視野領域によって異なっている。すなわち、各照明装置１２３ａ〜１２３ｔは、図７中の一点鎖線で示す単位でグループ分けされており、このグループ単位で独立して制御することが可能となっている。
【００６４】
例えば、照明装置１２３ａ〜１２３ｄは１個単位で、照明装置１２３ｅ〜１２３ｌは２個単位で、照明装置１２３ｍ〜１２３ｔは４個単位で同時に独立制御される。これは、上述したとおり、人間の視力は、有効視野、誘導視野、補助視野の順に詳細な判別能力が低下するため、この順で照明光の解像度を低くしても、臨場感を高める効果が期待できるからである。
【００６５】
このように、人間の視覚の判別能力がより低い領域では、照明光の解像度をより低くしても同等の効果を得られるため、例えば、補助視野の領域に配置する照明装置の同時制御可能数を、誘導視野の領域に配置する照明装置の同時制御可能数より多くして、補助視野の領域に配置する照明装置の数を、誘導視野の領域に配置する照明装置の数より擬似的に減らせばよい。ただし、これら照明装置の配置や数、大きさに関しては、本実施形態に示したものに限られないことは言うまでもない。
【００６６】
また、本実施形態では、視野の水平方向のみで視野を分割して照明装置を設置しているが、垂直方向に視野を分割して照明装置を設置してももちろんかまわない。この場合、垂直方向で同時に制御できる数が異なる複数の照明装置を用いて第二の表示部１２３を構成するようにすればよい。また、本実施形態では、視野の分割数やその角度について非特許文献１による視野の分類やその角度を用いているが、これは便宜的なものであり、この分割や角度に限るものではない。
【００６７】
さらに、本実施形態では、視聴者１１５が第一の表示部１０５の方向を向いている時は視聴者１１５の背中側は視野に入らないため、背中側には照明装置を設置していない。しかし視聴者１１５が視聴中に振り返ることもあることを考慮し、背中側に照明装置を設置することももちろんかまわない。また、音響再生装置を設置して、さらに臨場感を高めることもできる。
【００６８】
＜第５の実施形態＞
上記第１の実施形態における第二の表示部は映像表示装置のみ、上記第１乃至第４の実施形態における第二の表示部は照明装置のみとなっているが、第二の表示部として、映像表示装置と照明装置とを混在して構成するようにしてもよい。これに関し、本発明の第５の実施形態として図８とともに説明するが、上述した第１、第２の実施形態と同一部分には同一符号を付し、その説明は省略する。
【００６９】
図８は、本発明の第５の実施形態に係る映像呈示システムを示したものであり、表示部が設置された部屋を後方（映された映像を見る視聴者の位置）から見た様子を示している。
【００７０】
部屋の中には、第一の表示部１０５、映像処理装置１１４、第二の表示部１０６ａ〜１０６ｆ、第二の表示部１２１ｆ，１２１ｇが設置されている。
【００７１】
本発明では、映像表示装置も照明装置も同様に映像情報を表示する装置であり、表示解像度が異なるだけとして扱っているため、これらを混在させて用いてもかまわないことは当然である。
【００７２】
次に、上述した各実施形態の映像処理装置１１４が各表示部に出力するデータについて説明する。
【００７３】
現在ＴＶ放送やＤＶＤなどの記録媒体によって提供されている映像は、ひとつの画面に表示して視聴者の有効視野に呈示することを想定したものであり、第一の表示部１０５に呈示する映像に相当するものであるが、第二の表示部１０６，１２１，１２２，１２３に呈示するための映像情報は存在していない。この第二の表示部１０６，１２１，１２２，１２３に呈示するための映像を得るには、例えば、（１）第一の表示部に呈示する映像から第二の表示部に呈示するための映像を推定する、または、（２）撮影時に、第一の表示部に呈示する映像と第二の表示部に呈示する映像を同時に取得し、それを用いる、などの方法がある。
【００７４】
本発明では、第二の表示部に呈示するための映像を得る手段に関しては特に限定されず、何らかの手段によって第二の表示部に呈示するための映像を得ることができればよい。ただし、現在のＴＶ放送などのように、第二の表示部に呈示するための情報が存在しない場合は、第一の表示部に呈示する映像に基づいて第二の表示部に呈示するための情報を生成することで、容易に視聴環境の臨場感を増大させることができる。例えば、第一の表示部に呈示する映像に含まれる所定領域の輝度や色相などから第二の表示部に呈示するための情報を生成するようにしてもよい。
【００７５】
また、本発明では、第二の表示部として様々な表示解像度の映像表示装置を用いたり、低解像度の映像表示装置として照明装置を用いたりする方法について述べてきた。そこで、典型的な例として、３通りの解像度の第二の表示部を持つ映像呈示システムを考える。また、それに対応して、３通りの解像度の第二の表示部用映像データを考える。
【００７６】
図９は、第二の表示部の解像度と第二の表示部用映像データの解像度との相互関係を示している。図９において、映像データの解像度と第二の表示部の解像度が一致している場合、即ち（１）、（５）、（９）の場合は、そのまま第二の表示部に表示出力すればよい。
【００７７】
また、映像データの解像度が第二の表示部の解像度より高い場合、即ち（２）、（３）、（６）の場合は、映像データをダウンサンプリングして解像度を落としてから第二の表示部に表示出力すればよい。例えば、極端な例として、映像データがある程度の解像度を持つデータであり、第二の表示部が照明装置であった場合は、画素数１ピクセルまでダウンサンプリング処理を行う、即ち映像データ全体の平均色を求め、それを照明装置に出力することになる。
【００７８】
さらに、映像データの解像度が第二の表示部の解像度より低い場合、即ち（４）、（７）、（８）の場合は、映像データをアップサンプリングして解像度を高くしてから第二の表示部に表示出力すればよい。こちらも極端な例として、映像データが照明装置用のデータ、すなわち１ピクセルの映像データであり、第二の表示部がある程度の解像度を持つ表示装置であった場合は、その１ピクセルの映像データをアップサンプリングし、第二の表示部全体で同じ色を出力することになる。
【００７９】
このように、ダウンサンプリングないしアップサンプリングという解像度変換の処理を加えることで、映像データと第二の表示部の解像度が異なる場合にも映像を呈示することが可能となる。
【００８０】
通常、コンテンツ製作者側の意図やデータ量の問題から、様々な解像度の映像データが存在しうる。また、コストや設置スペースの問題から様々な解像度の映像呈示システムが存在しうる。これに対して、上記のような解像度の変換処理を行うことにより、それら全ての組み合わせに対応することが可能であり、様々な解像度のデータと様々な表示解像度のシステムをシームレスに繋ぐことができる。
【００８１】
この解像度変換機能は、映像処理装置１１４に備えれば良い。なお、第一の表示部に関しても、映像データの解像度と表示部の解像度が異なる場合が起こりうるので、解像度変換機能を入れておけばよい。
【００８２】
次に、映像データが放送によって配信される場合と、映像データを記録した記録媒体によって配信される場合、これらの映像データをどのように上述した実施形態の映像呈示システムで表示させるかについて説明する。
【００８３】
（Ａ）映像データが放送により配信される場合：
まず、映像データが放送として配信された場合について説明する。図１０は、放送局側における映像配信システムの機能構成を示すブロック図である。図１０において、映像配信システムは、複数のカメラ２０１、広視野角映像データ生成部２０２、複数のエンコード処理部２０３、多重化処理部２０４、送信部２０５とから構成される。
【００８４】
複数のカメラ２０１で撮られた映像の情報をもとに、広視野角映像データ生成部２０２で第一の表示部および１つ以上の第二の表示部に出力するための複数の映像情報を生成する。この複数の映像情報をエンコード処理部２０３で圧縮し映像ストリームにする。多重化処理部２０４で複数の映像ストリームを多重化してひとつの多重化ストリームにする。送信部２０５は、放送電波にこの多重化ストリームデータを乗せる。なお、この処理は一例であり、映像を圧縮せずに処理する方法や、多重化しないで複数のストリームの形のまま送信する方法も考えられる。
【００８５】
図１１は、受信した映像データを上記の各実施形態で説明した映像呈示システムで呈示するための機能構成を示すブロック図である。図１１において、映像呈示システムは、アンテナ２０６、映像処理装置２０７、第一の表示部２１２、複数の第二の表示部２１３で構成されている。この映像処理装置２０７は、上述した各実施形態で説明した映像処理装置１１４に相当する装置である。第一の表示部２１２は、上述の各実施形態で説明した第一の表示部１０５に相当する装置である。第二の表示部２１３は、上述の各実施形態で説明した第二の表示部１０６，１２１，１２２，１２３、或いはこれらの組み合わせである。
【００８６】
また、映像処理装置２０７は、チューナー２０８、多重化データ分離処理部２０９、複数のデコード処理部２１０、複数の解像度変換処理部２１１とから構成されている。アンテナ２０６で受信した電波は、映像処理装置２０７に入力される。映像処理装置２０７の内部では、まず、受信した電波をチューナー２０８で処理して多重化ストリームを取り出す。この多重化ストリームを多重化データ分離処理部２０９で第一の表示部用の映像ストリームと、それぞれの第二の表示部用の映像ストリームに分離する。
【００８７】
これらの分離された映像ストリームは、圧縮されたデータなので、映像ストリームに対応するデコード処理部２１０で展開し、解像度変換処理部２１１で上述した解像度変換処理を行う。解像度変換処理された映像データは、それぞれ対応する第一の表示部２１２あるいは第二の表示部２１３に出力する。
【００８８】
このようにして、本発明の映像呈示システムを放送により映像再生に適用することが可能である。なお、ネットワークによるストリーミング放送についても同様に適用することができる。
【００８９】
（Ｂ）映像データが記録媒体により配信される場合：
次に、映像データが記録媒体に記録されて配信された場合について説明する。図１２は、記録媒体作製側における映像記録システムの機能構成を示すブロック図である。図１２において、映像記録システムは、複数のカメラ２０１、広視野角映像データ生成部２０２、複数のエンコード処理部２０３、多重化処理部２０４、データ書き込み部２１４、記録媒体２１５とから構成される。
【００９０】
複数のカメラ２０１で撮られた映像の情報をもとに、広視野角映像データ生成部２０２で第一の表示部および１つ以上の第二の表示部に出力するための複数の映像情報を生成する。この複数の映像情報をエンコード処理部２０３で圧縮し映像ストリームにする。多重化処理部２０４で複数の映像ストリームを多重化してひとつの多重化ストリームにする。
【００９１】
この多重化ストリームデータをデータ書き込み部２１４によって記録媒体２１５に記録する。なお、この処理は一例であり、映像を圧縮せずに処理する方法や、多重化しないで複数のストリームの形のまま記録媒体２１４に記録する方法も考えられる。
【００９２】
図１３は、記録媒体に記録された映像データを上記の各実施形態で説明した映像呈示システムで呈示するための機能構成を示すブロック図である。図１３において、映像呈示システムは、記録媒体２１５、映像処理装置２１６、第一の表示部２１２、複数の第二の表示部２１３で構成されている。この映像処理装置２１６は、上述の各実施形態で説明した映像処理装置１１４に相当する装置である。第一の表示部２１２は、上述の各実施形態で説明した第一の表示部１０５に相当する装置である。第二の表示部２１３は、上述の各実施形態で説明した第二の表示部１０６，１２１，１２２，１２３、あるいはこれらの組み合わせである。
【００９３】
また、映像処理装置２１６は、データ読み出し部２１７、多重化データ分離処理部２０９、複数のデコード処理部２１０、複数の解像度変換処理部２１１とから構成されている。記録媒体２１５を映像処理装置２１６に接続あるいは挿入する。映像処理装置２１６の内部では、まず、データ読み出し部２１７で記録媒体２１５内の多重化ストリームデータを読み出す。この多重化ストリームを多重化データ分離処理部２０９で第一の表示部用の映像ストリームと、それぞれの第二の表示部用の映像ストリームに分離する。
【００９４】
これらの分離された映像ストリームは、圧縮されたデータなので、映像ストリームに対応するデコード処理部２１０で展開し、解像度変換処理部２１１で上述した解像度変換処理を行う。解像度変換処理された映像データは、それぞれ対応する第一の表示部２１２あるいは第二の表示部２１３に出力する。
【００９５】
このようにして、本発明の映像呈示システムを記録媒体による映像再生に適用することが可能である。
【００９６】
以上、詳述したように、本発明の映像呈示システムは、以下のような構成を備えている。すなわち、映像呈示システムは、主たる映像を呈示する第一の表示部と、前記主たる映像に従属する第二の情報を呈示する第二の表示部を備えている。
【００９７】
前記第一の表示部と前記第二の表示部とは、同じ解像度の映像表示装置であってもよいし、異なる解像度の映像表示装置であってもよい。さらに、前記第二の表示部が、１つ或いは複数の映像表示装置、照明装置あるいはそれらの組み合わせであって、これらは同じ解像度のものでも、また、異なる解像度のものでもよい。前記第二の表示部が異なる解像度を持つ場合には、視聴者の視野の周辺部に位置するほど解像度を低くするようにしてもよい。また、前記第二の表示部が照明装置である場合、輝度・色相・彩度のうち一つ以上を調節可能なものであってもよい。
【００９８】
また、前記第二の表示部を設置する場合には、視聴者の視野領域によって設置密度を変えてもよい。また特に、視聴者の周辺部の視野領域になるほど設置密度を低くしてもよい。
【００９９】
さらに、前記第一の表示部および前記１つ或いは複数の第二の表示部に呈示する映像データの解像度の種類が１つ以上あり、前記第二の表示部へ出力する映像データの解像度と、前記第二の表示部の解像度とが異なる場合、前記映像データの解像度を前記第二の表示部の解像度に変換してから出力するようにする。
【０１００】
以上のような構成とすることによって、本発明によれば、データ量を増加させることなく、また、コストや設置スペースを気にすることなく、周辺映像を簡易的に呈示して臨場感を高めることが可能となる。また、以下のことも実現することができる。
【０１０１】
（１）主たる映像を呈示する第一の表示部に加え、前記主たる映像に従属する第二の情報を呈示する第二の表示部を備えることで、広視野角の映像を呈示し高い臨場感を与えることができる。
【０１０２】
（２）第二の表示部として、第一の表示部より解像度の低い表示装置を用いることで、臨場感を高める機能を損なうことなく装置を簡略化でき、またデータ量を減らすことができる。
【０１０３】
（３）第二の表示部として、様々な解像度の映像表示装置や照明装置を自由に組み合わせて用いることができる仕組みを提供することで、設置スペースや予算に合わせて柔軟にシステムを構築することができる。
【０１０４】
（４）第二の表示部に呈示するための映像データとして、ある解像度のデータが存在するとき、そのデータの想定する解像度と異なる表示解像度の第二の表示部に対して、解像度変換して出力するので、様々な解像度の映像データが存在し、様々な解像度の映像呈示システムが存在する場合にもそれら全ての組み合わせに対応することが可能であり、様々な解像度のデータと様々な表示解像度のシステムをシームレスに繋ぐことができる。
【図面の簡単な説明】
【０１０５】
【図１】視野の分類を示す図である。
【図２】本発明の第１の実施形態に係る映像呈示システムを示す説明図である。
【図３】本発明の第１の実施形態に係る映像呈示システムを上部から見た図である。
【図４】本発明の第２の実施形態に係る映像呈示システムを示す説明図である。
【図５】本発明の第２の実施形態に係る映像呈示システムを上部から見た図である。
【図６】本発明の第３の実施形態に係る映像呈示システムを上部から見た図である。
【図７】本発明の第４の実施形態に係る映像呈示システムを上部から見た図である。
【図８】本発明の第５の実施形態に係る映像呈示システムを示す説明図である。
【図９】第二の表示部の解像度と第二の表示部用映像データの解像度との相互関係を示す図である。
【図１０】放送局側における映像配信システムの機能構成を示すブロック図である。
【図１１】受信した映像データを上記の各実施形態で説明した映像呈示システムで呈示するための機能構成を示すブロック図である。
【図１２】記録媒体作製側における映像記録システムの機能構成を示すブロック図である。
【図１３】記録媒体に記録された映像データを上記の各実施形態で説明した映像呈示システムで呈示するための機能構成を示すブロック図である。
【符号の説明】
【０１０６】
１０１…弁別視野
１０２…有効視野
１０３…誘導視野
１０４…補助視野
１０５…第一の表示部
１０６，１０６ａ〜１０６ｈ…第二の表示部
１１４…映像処理装置
１１５…視聴者
１１６…有効視野
１１７…誘導視野（左）
１１８…誘導視野（右）
１１９…補助視野（左）
１２０…補助視野（右）
１２１，１２１ａ〜１２１ｇ…第二の表示部
１２２，１２２ａ〜１２２ｒ…第二の表示部
１２３，１２３ａ〜１２３ｔ…第二の表示部
２０１…カメラ
２０２…広視野角映像データ生成部
２０３…エンコード処理部
２０４…多重化処理部
２０５…送信部
２０６…アンテナ
２０７…映像処理装置
２０８…チューナー
２０９…多重化データ分離処理部
２１０…デコード処理部
２１１…解像度変換処理部
２１２…第一の表示部
２１３…第二の表示部
２１４…データ書き込み部
２１５…記録媒体
２１６…映像処理装置
２１７…データ読み出し部
【図１】
0004769122.tif 000002
【図２】
0004769122.tif 000003
【図３】
0004769122.tif 000004
【図４】
0004769122.tif 000005
【図５】
0004769122.tif 000006
【図６】
0004769122.tif 000007
【図７】
0004769122.tif 000008
【図８】
0004769122.tif 000009
【図９】
0004769122.tif 000010
【図１０】
0004769122.tif 000011
【図１１】
0004769122.tif 000012
【図１２】
0004769122.tif 000013
【図１３】
0004769122.tif 000014