(57)【要約】【課題】２次元画像（平面画像）を任意形状の曲面上の表示パネルに出力しても、歪みのない表示画像を生成して表示装置に表示することができる表示制御装置および方法を提供する。【解決手段】２次元画像（平面画像）をスクリーン形状のモデルに基づいて曲面上に単にマッピング処理を行うだけでなく、パネル間の位置ずれ補正も考慮した変換テーブルを用いて平面画像から表示画像を生成するようにしたので、平面画像を任意形状の曲面上の表示パネルに出力しても、歪みのない表示画像を生成して表示することができる。【選択図】図１
2014157324.tif 000002
【特許請求の範囲】
【請求項１】
１つ以上の素材を含むコンテンツからなる表示画像を、平面かつ自発光型の表示パネルを複数枚並べて構成される任意形状のパネル型表示装置に表示する表示制御装置において、
前記コンテンツで使用する素材の情報と当該各素材のレイアウト情報を含む表示コンテンツ情報を受け付ける表示内容指示部と、
前記表示内容指示部から取得した表示コンテンツ情報を解析し、前記各素材のレイアウト情報に基づいて平面画像を作成する平面画像生成部と、
前記平面画像生成部が作成した平面画像に対して、前記表示画像の各画素の座標と前記平面画像の各画素の座標との対応を示す変換テーブル情報に基づいて画像変形処理を行い、前記パネル型表示装置に表示する前記表示画像を生成する平面画像変形部と、
前記表示パネルの各々と前記表示画像内の矩形領域とを対応付けるパネル・出力画面対応情報に基づいて、前記平面画像変形部が生成した前記表示画像から前記表示パネルの各々に対応する前記矩形領域の画像を抽出して、前記パネル型表示装置の各々の前記表示パネルに出力する表示パネル制御部と、を備えた
ことを特徴とする表示制御装置。
【請求項２】
前記表示内容指示部は、前記表示コンテンツ情報に加え、前記コンテンツの配置および描画順序を含む表示レイヤ情報を受け付けるものであり、
前記平面画像生成部は、前記表示コンテンツ情報に基づいて、前記各コンテンツの画像であるコンテンツ画像を作成するコンテンツ生成部と、前記表示レイヤ情報を用いてすべての前記コンテンツ画像を合成して前記平面画像を生成する画像合成部とを備える
ことを特徴とする請求項１記載の表示制御装置。
【請求項３】
１つ以上の素材を含むコンテンツからなる表示画像を、平面かつ自発光型の表示パネルを複数枚並べて構成される任意形状のパネル型表示装置に表示する表示制御装置において、
前記コンテンツで使用する素材の情報と当該各素材のレイアウト情報を含む表示コンテンツ情報と、前記各コンテンツの配置および描画順序を含む表示レイヤ情報を受け付ける表示内容指示部と、
前記表示内容指示部から取得した表示コンテンツ情報を解析し、前記各素材のレイアウト情報に基づいて前記各素材を合成して、前記各コンテンツの画像であるコンテンツ画像を生成するコンテンツ生成部と、
前記コンテンツ生成部が生成した前記コンテンツ画像に対して、コンテンツ変形画像の各画素の座標と前記コンテンツ画像の各画素の座標との対応を示す変換テーブル情報に基づいて画像変形処理を行い、前記コンテンツ変形画像を生成するコンテンツ画像変形部と、
前記表示レイヤ情報を用いて前記コンテンツ画像変形部で生成したすべての前記コンテンツ変形画像を合成し、前記パネル型表示装置に表示する前記表示画像を生成する画像合成部と、
前記表示パネルの各々と前記表示画像内の矩形領域とを対応付けるパネル・出力画面対応情報に基づいて、前記画像合成部が生成した前記表示画像から前記表示パネルの各々に対応する矩形領域の画像を抽出して、前記パネル型表示装置の各々の前記表示パネルに出力する表示パネル制御部と、を備えた
ことを特徴とする表示制御装置。
【請求項４】
前記パネル・出力画面対応情報と、前記パネル型表示装置を構成するすべての前記表示パネルの物理的な位置関係を示すパネル３次元位置情報と、前記パネル型表示装置が構築する理想曲面上へ前記平面画像をマッピングする方式を示すマッピング方式情報を用いて、前記変換テーブル情報を作成する変換テーブル生成部をさらに備えた
ことを特徴とする請求項１から請求項３のうちのいずれか１項記載の表示制御装置。
【請求項５】
前記表示コンテンツ情報には、前記パネル型表示装置が構築する理想曲面上へ前記平面画像をマッピングする方式を示すマッピング方式情報を指定する変換テーブル識別情報も含まれており、
前記変換テーブル情報の生成に使用されるパラメータを取得するパラメータ取得部と、
前記パネル・出力画面対応情報と、前記パネル３次元位置情報と、前記変換テーブル識別情報により指定されたマッピング方式情報と、前記パラメータ取得部が取得したパラメータとに基づいて、前記変換テーブル情報を作成する変換テーブル生成部と、をさらに備えた
ことを特徴とする請求項１から請求項３のうちのいずれか１項記載の表示制御装置。
【請求項６】
前記表示コンテンツ情報には、前記変換テーブル情報を識別する変換テーブル識別情報も含まれており、
前記コンテンツ生成部は、前記変換テーブル識別情報を前記表示コンテンツ情報から取得する処理も行うものであり、
前記コンテンツ生成部から取得した前記変換テーブル識別情報に示された前記変換テーブル情報を読み込む変換テーブル読込部をさらに備えた
ことを特徴とする請求項２から請求項５のうちのいずれか１項記載の表示制御装置。
【請求項７】
１つ以上の素材を含むコンテンツからなる表示画像を、平面かつ自発光型の表示パネルを複数枚並べて構成される任意形状のパネル型表示装置に表示する表示制御方法であって、
表示内容指示部が、前記コンテンツで使用する素材の情報と当該各素材のレイアウト情報を含む表示コンテンツ情報を受け付けるステップと、
平面画像生成部が、前記表示内容指示部から取得した表示コンテンツ情報を解析し、前記各素材のレイアウト情報に基づいて平面画像を作成するステップと、
平面画像変形部が、前記平面画像生成部が作成した平面画像に対して、前記表示画像の各画素の座標と前記平面画像の各画素の座標との対応を示す変換テーブル情報に基づいて画像変形処理を行い、前記パネル型表示装置に表示する前記表示画像を生成するステップと、
表示パネル制御部が、前記表示パネルの各々と前記表示画像内の矩形領域とを対応付けるパネル・出力画面対応情報に基づいて、前記平面画像変形部が生成した前記表示画像から前記表示パネルの各々に対応する前記矩形領域の画像を抽出して、前記パネル型表示装置の各々の前記表示パネルに出力するステップと、を備えた
ことを特徴とする表示制御方法。
【請求項８】
１つ以上の素材を含むコンテンツからなる表示画像を、平面かつ自発光型の表示パネルを複数枚並べて構成される任意形状のパネル型表示装置に表示する表示制御方法であって、
表示内容指示部が、前記コンテンツで使用する素材の情報と当該各素材のレイアウト情報を含む表示コンテンツ情報と、前記各コンテンツの配置および描画順序を含む表示レイヤ情報を受け付けるステップと、
コンテンツ生成部が、前記表示内容指示部から取得した表示コンテンツ情報を解析し、前記各素材のレイアウト情報に基づいて前記各素材を合成して、前記各コンテンツの画像であるコンテンツ画像を生成するステップと、
コンテンツ画像変形部が、前記コンテンツ生成部が生成した前記コンテンツ画像に対して、コンテンツ変形画像の各画素の座標と前記コンテンツ画像の各画素の座標との対応を示す変換テーブル情報に基づいて画像変形処理を行い、前記コンテンツ変形画像を生成するステップと、
画像合成部が、前記表示レイヤ情報を用いて前記コンテンツ画像変形部で生成したすべての前記コンテンツ変形画像を合成し、前記パネル型表示装置に表示する前記表示画像を生成するステップと、
表示パネル制御部が、前記表示パネルの各々と前記表示画像内の矩形領域とを対応付けるパネル・出力画面対応情報に基づいて、前記画像合成部が生成した前記表示画像から前記表示パネルの各々に対応する矩形領域の画像を抽出して、前記パネル型表示装置の各々の前記表示パネルに出力するステップと、を備えた
ことを特徴とする表示制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、平面画像を任意形状の表示パネルに出力しても、歪みのない表示画像を生成して表示装置に表示する表示制御装置および方法に関するものである。
【背景技術】
【０００２】
従来より、任意形状のスクリーンに対して歪みなく画像を投影する技術は、仮想現実感生成装置で既に実用化されており、それらの技術では表示する平面ディスプレイ用の画像（平面画像）に歪み補正処理を行った表示画像を投影することで、任意形状のスクリーン上に歪みなく画像を表示することを可能にしている。
【０００３】
例えば、特許文献１には、プロジェクタにより投影される投影仮想平面モデルとスクリーン形状のモデルとの対応マップ（歪み補正テーブル）をプロジェクタの位置と視点位置とスクリーン形状のモデルを用いて作成し、この歪み補正テーブルに基づいて平面画像の各画素値を変換して、歪み補正した画像を生成することが記載されている。これにより、任意形状スクリーン投影時の平面画像の歪み補正を実現している。
【０００４】
このように、プロジェクタや１枚の表示スクリーンを用いた任意形状スクリーンの場合は、スクリーン上の画素の位置関係と表示画像の位置関係は同じであり、スクリーンに表示される画像は連続的に表示される。そのため、平面画像に対して歪み補正処理を行うだけで、想定通りの画像を表示させることができる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１２−１０１２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
一方、任意形状スクリーンを構成する手法の一つに、ＬＥＤやＯＬＥＤ等で構成される平面の自発光型表示パネルを貼り合わせて任意形状を構築するパネル型任意形状表示装置がある。パネル型任意形状表示装置は、表示制御装置から出力される２次元画像（表示画像）の中の小領域を各表示パネル上に表示する仕組みとなっている。表示パネルを貼り合わせて構成する表示装置の形状が２次元平面であれば、表示パネルの画素の位置関係が表示画像の画素の位置関係と同じため、平面画像をそのまま表示画像として表示パネルに出力しても問題はない。
【０００７】
しかしながら、３次元曲面上に配置した場合、表示パネルの画素の位置関係は、表示画像の画素の位置関係と一致せず、パネル間で位置ずれが生じる。そのため、仮に２次元画像のマッピング処理を行ったとしてもパネル間で画像が不連続に表示され、画像が崩れて見えてしまう、という課題があった。
【０００８】
この発明は、上記のような課題を解決するためになされたものであり、２次元画像（平面画像）を任意形状の曲面上の表示パネルに出力しても、歪みのない表示画像を生成して表示装置に表示することができる表示制御装置および方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記目的を達成するため、この発明は、１つ以上の素材を含むコンテンツからなる表示画像を、平面かつ自発光型の表示パネルを複数枚並べて構成される任意形状のパネル型表示装置に表示する表示制御装置において、前記コンテンツで使用する素材の情報と当該各素材のレイアウト情報を含む表示コンテンツ情報を受け付ける表示内容指示部と、前記表示内容指示部から取得した表示コンテンツ情報を解析し、前記各素材のレイアウト情報に基づいて平面画像を作成する平面画像生成部と、前記平面画像生成部が作成した平面画像に対して、前記表示画像の各画素の座標と前記平面画像の各画素の座標との対応を示す変換テーブル情報に基づいて画像変形処理を行い、前記パネル型表示装置に表示する前記表示画像を生成する平面画像変形部と、前記表示パネルの各々と前記表示画像内の矩形領域とを対応付けるパネル・出力画面対応情報に基づいて、前記平面画像変形部が生成した前記表示画像から前記表示パネルの各々に対応する前記矩形領域の画像を抽出して、前記パネル型表示装置の各々の前記表示パネルに出力する表示パネル制御部と、を備えたことを特徴とする。
【発明の効果】
【００１０】
この発明によれば、２次元画像（平面画像）をスクリーン形状のモデルに基づいて曲面上に単にマッピング処理を行うだけでなく、パネル間の位置ずれ補正も考慮した変換テーブルを用いて平面画像から表示画像を生成するようにしたので、平面画像を任意形状の曲面上の表示パネルに出力しても、歪みのない表示画像を生成して表示することができる。
【図面の簡単な説明】
【００１１】
【図１】実施の形態１における表示システムの構成を示すブロック図である。
【図２】実施の形態１におけるパネル型表示装置の外形を示す図である。
【図３】パネル・出力画面対応情報記憶部に記憶されているパネル・出力画面対応情報を示す表である。
【図４】図３に示すパネル・出力画面対応情報に基づく表示画像内の各パネルへの割当例を示す図である。
【図５】表示画像上に変形処理を行わずに平面画像を表示した際のパネル型表示装置上での見え方を示した図である。
【図６】表示パネルの画素構成を示す図である。
【図７】実施の形態１のパネル型表示装置が構成する理想の曲面モデルを示す図である。
【図８】パネル３次元位置情報を示した表である。
【図９】実施の形態１のパネル型表示装置に平面画像をマッピングする場合に用いるマッピング方式の一例であり、平行投影方式を示す図である。
【図１０】実施の形態１のパネル型表示装置に平面画像をマッピングする場合に用いるマッピング方式の他の例であり、曲座標方式を示す図である。
【図１１】変換テーブル情報記憶部に記憶されている変換テーブル情報を示す表である。
【図１２】変換テーブルの作成方法を示すフローチャートである。
【図１３】実施の形態１におけるコンテンツ表示処理の処理手順を示すフローチャートである。
【図１４】図１３に示したコンテンツ表示手順に基づいて作成される画像の移り変わりの例を示す図である。
【図１５】実施の形態２における表示システムの構成を示すブロック図である。
【図１６】実施の形態２におけるコンテンツ表示処理の処理手順を示すフローチャートである。
【図１７】図１６に示したコンテンツ表示手順に基づいて作成される画像の移り変わりの例を示す図である。
【図１８】実施の形態３における表示システムの構成を示すブロック図である。
【図１９】実施の形態３におけるコンテンツ表示処理の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００１２】
以下、この発明の実施の形態について、図面を参照しながら詳細に説明する。
実施の形態１．
図１は、この発明の実施の形態１におけるコンテンツ表示システムの構成を示すブロック図である。このコンテンツ表示システムは、表示制御装置１０、表示装置２０、変換テーブル情報記憶部３００、マッピング方式情報記憶部４００、パネル３次元位置情報記憶部５００、パネル・出力画面対応情報記憶部６００、変換テーブル生成部７００から構成されており、１つ以上の静止画、動画、グラフィックス、文字列等の素材の画像グループから構成されるコンテンツ（１つ以上の素材を含むコンテンツ）からなる表示画像を、表示装置２０に表示するものである。
【００１３】
表示装置２０は、表示制御装置１０から出力された表示画像を表示する、３次元曲面を含む任意形状のパネル型表示装置である。このパネル型表示装置２０は、平面かつ自発光型の表示パネルを複数枚並べて構成される任意形状のパネル型表示装置であり、平面形状の表示パネルを表面に張り付けることにより、任意の形状を構築する。なお、この実施の形態１では、球面の一部を切り取ったレンズ型の形状であるものとする（図２参照）。
【００１４】
表示制御装置１０は、表示装置２０に表示する画像である表示画像を生成し出力する制御装置であり、表示内容指示部１００、コンテンツ生成部１１０、画像合成部１２０、変換テーブル読込部１３０、平面画像変形部１４０、データ記憶部１６０、表示パネル制御部８００から構成される。なお、図１においては、表示制御装置１０はこのように簡易なものとして示したが、表示制御装置１０が変換テーブル情報記憶部３００、マッピング方式情報記憶部４００、パネル３次元位置情報記憶部５００、パネル・出力画面対応情報記憶部６００、変換テーブル生成部７００も備えるようにしてもよい。
【００１５】
表示内容指示部１００は、１つ以上の表示したいコンテンツの表示コンテンツ情報と、各コンテンツの表示レイヤ情報を受け付けて、コンテンツ生成部１１０に出力する。コンテンツとは、動画ファイル、画像ファイル、グラフィックス等の素材から作られる映像を示す。表示コンテンツ情報は、表示するコンテンツ生成に使用する複数の素材データのファイル名等の素材識別情報と、各素材の表示位置、コンテンツ内における奥行情報、透過度等のレイアウト情報を含む。ここで、表示レイヤ情報とは、コンテンツの表示位置、表示画面内の奥行情報等、コンテンツの配置および描画順序を含む情報である。
【００１６】
コンテンツ生成部１１０は、表示内容指示部１００から取得した表示コンテンツ情報から得られる素材識別情報に基づいて、後述するデータ記憶部１６０から素材データを取得、再生し、表示コンテンツ情報を解析して得られる各素材のレイアウト情報に基づいて、合成して各コンテンツの画像であるコンテンツ画像を作成する。ここで、コンテンツ画像とは、コンテンツの任意の１フレーム分の画像データを示す。
【００１７】
画像合成部１２０は、表示内容指示部１００から取得した表示レイヤ情報を用いて、コンテンツ生成部１１０から取得したすべてのコンテンツ画像を合成して、平面画像を生成する。
なお、コンテンツ生成部１１０と画像合成部１２０とが、平面画像生成部２００を構成する。
変換テーブル読込部１３０は、後述する変換テーブル情報記憶部３００から、変換テーブル情報を読み込む。
【００１８】
平面画像変形部１４０は、変換テーブル読込部１３０から変換テーブル情報を取得し、画像合成部１２０が作成した平面画像に対して、取得した変換テーブル情報に基づいて画像変形処理を行い、パネル型表示装置２０に表示する表示画像を生成し、表示パネル制御部８００へ出力する。
データ記憶部１６０は、素材データやレイアウト情報を記憶している記憶部である。
【００１９】
変換テーブル情報記憶部３００は、平面画像変形部１４０が生成する表示画像の各画素の座標と画像合成部１２０が生成した平面画像の各画素の座標との対応を示す変換テーブル情報を記憶する記憶部である。
マッピング方式情報記憶部４００は、パネル型表示装置２０が構築しようとする理想曲面に対して、平面画像をマッピングする方式を選択するための識別情報であるマッピング方式情報（パネル型表示装置２０が構築する理想曲面上へ平面画像をマッピングする計算方法を示すマッピング方式情報）を記憶している。
【００２０】
パネル３次元位置情報記憶部５００は、パネル型表示装置２０を構成するすべての表示パネルの各々の物理的な配置（位置関係）を示すパネル３次元位置情報を記憶している。なお、この実施の形態１では、パネル３次元位置情報はグローバル座標系で示すものとする。また、この実施の形態１におけるグローバル座標系は、パネル型表示装置２０のローカル座標系、理想曲面モデルのローカル座標系と同一とし、理想曲面モデルである球面の中心を原点とした座標系とする。
【００２１】
パネル・出力画面対応情報記憶部６００は、パネル型表示装置２０を構成するすべての表示パネルの各々のパネル識別情報と、各表示パネルに入力される表示画像領域内の矩形領域情報とを対応付けるパネル・出力画面対応情報を記憶している。
【００２２】
変換テーブル生成部７００は、マッピング方式情報記憶部４００に記憶されているマッピング方式情報と、パネル３次元位置情報記憶部５００に記憶されているパネル３次元位置情報、パネル・出力画面対応情報記憶部６００に記憶されているパネル・出力画面対応情報から変換テーブル情報を生成し、変換テーブル情報記憶部３００に出力する。
【００２３】
表示パネル制御部８００は、パネル・出力画面対応情報記憶部６００に記憶されているパネル・出力画面対応情報に基づいて、平面画像変形部１４０が生成した表示画像から表示パネル毎に対応する矩形領域の画像を抽出して（切り出して）、パネル型表示装置２０の各々の表示パネルに出力する。
【００２４】
次に、図２を用いて、この実施の形態１のパネル型表示装置２０について説明する。
図２（ａ）は、表示装置２０を側面から見た時の形状を示す図である。図２（ｂ）は、表示装置２０を正面から見た時の形状を示す図である。図２（ａ），図２（ｂ）に示すように、この実施の形態１における表示装置２０は、球面の一部を切り取ったレンズ形状となっている。図２（ｃ）は、図２（ｂ）の一部（図２（ｂ）の黒枠部分）を拡大した拡大図である。図２（ｃ）上の各平行四辺形は、各々の形状は長方形であるパネルであるが、奥行き方向にも回転しているため、図２（ｃ）においては長方形ではなく平行四辺形の形状に見える。さらに、表示パネルによって奥行き方向への回転角度が異なるため、図２（ｃ）に示すように、各パネル間で各々異なる隙間が生じている。
【００２５】
図３は、パネル・出力画面対応情報記憶部５００に記憶されているパネル・出力画面対応情報を示す表である。パネル・出力画面対応情報は、図３に示す通り、パネル識別情報と表示画像領域内で割り当てられる対応矩形領域の左上頂点の座標との対応テーブルとなる。なお、この実施の形態１では表示パネルの解像度が全て固定であり、水平画素数ｗ画素、垂直画素数ｈ画素とするものとして、図３に示す形態とする。しかし、もし表示パネルの解像度が全パネルで固定ではない場合は、必ずしも本形式である必要はない。例えば、左上座標だけでなく、表示画像領域内の対応矩形領域の左上頂点座標とパネルの水平解像度と垂直解像度の組合せや、左上頂点座標と右下頂点座標の組合せのように、各パネルに対応する表示画像領域内の矩形領域が明確化できる対応テーブルであればよい。
【００２６】
図４は、図３に示すパネル・出力画面対応情報に基づく表示画像内の各パネルへの割当例を示す図である。図４に示すように、表示パネル制御部８００は、各表示パネルに対して、対応する表示画像上の矩形領域の画像を与える。例えば、この実施の形態１では、パネル識別番号ｉの表示パネルは、対応矩形の左上頂点の座標が（ｌi，ｔi）であるため、表示画像上の座標系（Ｘ，Ｙ）において、ｌi≦Ｘ≦ｌi＋ｗ、かつ、ｔr≦Ｙ≦ｔr＋ｈを満たす領域を表示する。なお、Ｐiは、パネル識別番号ｉの表示パネルを示す。また、表示画像上のパネル対応矩形領域の配置は任意である。ただし、この実施の形態１では、説明をわかりやすくするため、各パネルの上下左右の関係をできるだけ保存し、平面画像に近い画像が表示画像上に生成できるようにパネル毎の対応矩形領域を配置した。
【００２７】
図５は、表示画像上に変形処理を行わずに平面画像（パネルｐからパネルｕにかかる直線画像）を表示した際のパネル型表示装置２０上での見え方を示した図である。図４に示されるように表示画像上の各パネル対応矩形領域の配置を行った場合、パネル型表示装置の形状が平面の場合は、パネル型表示装置２０上も表示画像（図５（ｂ））と同じ画素配置となるため、パネルｐからパネルｕにかかる直線が表示される。しかし、この実施の形態１のようにパネル型表示装置の形状が３次元曲面の場合は、図５（ａ）に示すように、パネル間の物理的な隙間によって、パネル毎に直線が分断され、１本の直線には見えないことがわかる。そのため、パネルの３次元位置を考慮した補正が必要となる。
【００２８】
図６は、表示パネルの画素構成を示す図である。表示パネル上には、画素が水平方向にｐｗ個、垂直方向にｐｈ個、配列されている。この実施の形態１では、表示パネル上の画素は全て画素間距離ｇで等間隔に並んでいるものとし、パネルの端と画素の中心の間隔は、ｇ／２とする。パネルＰiの左上の画素を１行１列の画素としてｍ行ｎ列目の画素Ｐimnの位置（ａimn，ｂimn）は、左上隅を原点とした表示パネルのローカル座標系において、
2014157324.tif 000003
となる。
【００２９】
なお、この実施の形態１では、表示パネルの画素配置を図６に示すように全画素間で等間隔として説明したが、画素毎に間隔が異なった場合でも、各々表示パネル上のローカル座標系にて画素位置が示せれば、同様に変換テーブルを計算することができる。
また、図６では１画素が１つの丸（光源）で表現されているが、複数の色の光源で１画素を構成する場合でも理論上の画素中心に対して同様の扱いをすることが可能であることは明らかである。一方、各色の光源を各々１画素と判断して変形処理を行うことも可能であることも明らかである。
【００３０】
図７は、この実施の形態１のパネル型表示装置２０が構成する理想の曲面モデルを示す図である。パネル型表示装置２０は、この実施の形態１では、半径Ｒの球面のうち、中心との距離Ｄの平面で切断したレンズ形状のモデルとする。この理想曲面モデルは、以下に示す式（２）で表せることとする。
2014157324.tif 000004
【００３１】
また、この実施の形態１では、式（２）で示される理想曲面モデルに対して、パネル型表示装置２０では、表示パネルの４頂点を理想曲面上に配置するように表示パネルを配置する。そのため、表示パネルＰi上の任意の１画素Ｐimnは、必ずしも理想曲面上に配置されない。そこで、画素Ｐimnを、理想曲面上でＰimnの位置に最も近い１点Ｐimn'であると仮定して扱う。この実施の形態１における理想曲面モデルの場合、任意の表示パネルＰi上の画素Ｐimnの位置をグローバル座標系上で座標をｐimnとすると、この実施の形態１における理想曲面上の１点Ｐimn'のグローバル座標系上での座標ｐimn'は、以下に示す式（３）で求めることができる。
2014157324.tif 000005
【００３２】
なお、この実施の形態１では、表示パネルのグローバル座標系上の配置を図７のようにしたが、表示パネルの４頂点を理想スクリーンモデル上に配置しなくともよい。その場合は、表示パネル上の各画素の３次元位置を、スクリーンモデル上の任意の一点にあるものと仮定して計算すればよいことは明らかである。例えば、表示パネルの中心をスクリーンモデル上に配置し、パネル平面がスクリーンモデルの曲面に接するように配置してもよい。
【００３３】
また、式（２）のようにスクリーンモデルを式で表現できない場合は、表示パネルの３次元位置情報と同じグローバル座標系上でポリゴンを用いて表現し、メッシュモデルで構成された各ポリゴンあるいは曲面のモデルを求め、例えばメッシュモデル上の表示パネルの各画素との距離が最も近い点Ｐimn'を、表示パネルの各画素Ｐimnと仮定して計算してもよい。
【００３４】
図８は、パネル３次元位置情報を示した表である。具体的には設計図面より、物理的な各パネルの位置を抽出した情報であり、ｌｔi＝（ｌｔｘi，ｌｔｙi，ｌｔｚi）、ｒｔi＝（ｒｔｘi，ｒｔｙi，ｒｔｚi）、ｌｂi＝（ｌｂｘi，ｌｂｙi，ｌｂｚi）、ｒｂi＝（ｒｂｘi，ｒｂｙi，ｒｂｚi）は各々パネル識別情報ｉのパネルにおける４隅の位置をグローバル座標系で示している。なお、ここで左上端は、表示画像上の指定矩形領域における左上の画素を表示する表示パネルの画素が最も近い位置になる角を示す。
【００３５】
これにより、表示パネルＰiのローカル座標系上で座標（Ａ，Ｂ）の１点のグローバル座標系上での座標は、式（４）にて求めることができる。
2014157324.tif 000006
【００３６】
図９および図１０は、この実施の形態１で構成するパネル型表示装置に平面画像をマッピングする場合に用いるマッピング方式の例である。
図９には、グローバル座標系のｚ方向の無限遠を視点とした平行投影によってマッピングする平行投影方式を示す。
【００３７】
理想曲面上の任意の１点Ｐ1’のグローバル座標系における座標を（ｘ，ｙ，ｚ）とし、視点位置から表示装置を見た時に画像があるように見える仮想平面上の1点Ｑのグローバル座標系における座標を（ｘ’，ｙ’，ｚ’）とすると、点Ｑにマッピングされる平面画像上の座標（ｕ，ｖ）は、（５）式に示すとおりである。
2014157324.tif 000007
なお、Ｗは平面画像の水平画素数、Ｈは平面画像の垂直画素数を示す。
【００３８】
これにより、理想曲面上の任意の１点Ｐ'に表示する平面画像上の座標Ｓ（ｕ，ｖ）を求めるマッピング計算式は、以下に示す式（６）となる。ここで、ｃ，ｄは、マッピングする際の仮想平面上での水平方向、垂直方向への移動量を示す任意の定数であり、α，βは、マッピングする際の水平方向への拡大率、垂直方向への拡大率を示す任意の定数である。
2014157324.tif 000008
【００３９】
また、図１０には、この実施の形態１における理想曲面モデルである半径Ｒの球に対して平面画像の水平座標を経度、垂直座標を緯度として平面画像をマッピングする極座標方式を示す。
理想曲面上の任意の１点Ｐ’の座標を極座標で表現すると、式（７）のようになる。
2014157324.tif 000009
【００４０】
これを、平面画像上の１点Ｓの座標（ｕ，ｖ）を、中心を原点とした経度θ、緯度φに変換すると、式（８）となるので、Ｐ’上にマッピングする平面画像情報の座標（ｕ，ｖ）を求めるマッピング計算式は、式（９）となる。なお、ここでのｃ，ｄは、マッピングする際の理想モデルの極座標上での経度方向、緯度方向への移動量を示す任意の定数であり、α，βは、マッピングする際の経度方向への拡大率、緯度方向への拡大率を示す任意の定数である。
2014157324.tif 000010
2014157324.tif 000011
【００４１】
なお、マッピング方式は、図９、図１０記載の方式に限らない。平面画像をパネル型表示装置２０が構築する任意の曲面モデルに対して平面画像上の各画素をマッピングする方式であれば、マッピング計算式が式（１０）のようになり、いずれに対しても適用できることは明らかである。
2014157324.tif 000012
ここで、Ｕ（ｘ，ｙ，ｚ）、Ｖ（ｘ，ｙ，ｚ）は、理想曲面上の任意の１点Ｐ’を入力とした任意の関数となる。
【００４２】
図１１は、変換テーブル情報記憶部３００に記憶されている変換テーブル情報を示す表である。変換テーブル情報は、平面画像変形部１４０が表示画像の各画素の画素値を計算する際に取得する平面画像上の画素の座標を指示するテーブル情報である。図１１では、表示画像の各画素に対応する平面画像上の２次元座標系であるｕｖ座標を示しているが、ｕ座標とｖ座標を別個のテーブルとして扱ってもよい。また、変換テーブル情報においてｕｖ座標を（−１，−１）としている表示画像の画素は、表示パネル制御部８００で各表示パネルに割り当てられるパネルが存在しないため、任意の色を表示してもよいし、何も処理しなくてもよい。また、非表示領域に割り当てられる情報をこの実施の形態１では、（−１，−１）としているが、座標値としては実際に座標値として使用されない任意の数値、文字列であればこれに限らない。
【００４３】
次に、図１２を用いて、変換テーブル生成部７００における変換テーブルの作成方法を説明する。図１２は、変換テーブルの作成方法を示すフローチャートである。なお、この実施の形態１では、変換テーブルの作成は、事前に変換テーブル生成部７００において実施しておくものとする。
【００４４】
まず、パネル３次元位置情報記憶部５００からパネル３次元位置情報を読み込み、パネル３次元位置情報、式（１）および式（４）を用いて得られる以下の式（１１）に基づいて、パネルｉ上の画素（ｍ、ｎ）のグローバル座標系上の座標を求める（ステップＳＴ１）。
2014157324.tif 000013
【００４５】
この式（１１）を、理想曲面上の点への近似式（３）に代入した式（１２）によって、表示パネルｉ上の画素（ｍ，ｎ）の理想曲面上の近似点の座標を求める（ステップＳＴ２）。
2014157324.tif 000014
【００４６】
そして、マッピング方式情報を読み込み、マッピング計算式と式（１２）から求められる式に基づいて、パネルｉ上の画素（ｍ，ｎ）に対応する理想曲面上の座標にマッピングされる平面画像上の座標を計算する（ステップＳＴ３）。なお、マッピング方式情報は、あらかじめ変換テーブル生成部７００にて式（６）や式（９）の変換式による計算が実装されている場合は、この実施の形態１のようにマッピング方式識別情報でもよいが、式（６）や式（９）に基づいて作成されたスクリプトファイルのようなものでもよい。
【００４７】
ここで、マッピング計算式を一般化すると式（１０）となるので、式（１０）と式（１２）から求まる以下の式（１３)に基づき、マッピングされる平面画像上の座標を計算する。なお、（Ｐimn’＿ｘ，Ｐimn’＿ｙ，Ｐimn'＿ｚ）は各々パネルｉ上の画素（ｍ，ｎ）の理想曲面上の近似点の座標Ｐimn’のグローバル座標系における（ｘ，ｙ，ｚ）座標を示す。
2014157324.tif 000015
【００４８】
その後、パネル・出力画面対応情報記憶部６００からパネル・出力画面対応情報を読み込み、パネルｉ上の画素（ｍ，ｎ）に表示される表示画像上の座標（Ｘ，Ｙ）と、式（１２）で求めたパネルｉ上の画素（ｍ，ｎ）にマッピングされる平面画像上の画素の座標（式（１４）参照）とを対応付けた変換テーブルを作成する（ステップＳＴ４）。
2014157324.tif 000016
【００４９】
なお、この実施の形態１では、わかりやすくするため、ステップＳＴ１〜ＳＴ３について分けて説明したが、実際は、まずパネル３次元位置情報とマッピング方式情報を読み込み、式（１１）、式（１２）、式（１３）をまとめて計算してもよい。
また、表示画像の各座標（Ｘ，Ｙ）とパネルｉ上の画素（ｍ，ｎ）の理想曲面上の近似点の座標ｐimn'を対応付けたテーブルを一回だけ作成し、その後は当該テーブルを読み込むことで式（１１）、式（１２）を省略してもよい。
【００５０】
図１３および図１４を用いて、表示制御装置１０におけるコンテンツ表示処理に関する動作手順を説明する。図１３は、この実施の形態１におけるコンテンツ表示処理の処理手順を示すフローチャートである。また、図１４は、図１３に示したコンテンツ表示手順に基づいて作成される画像の移り変わりの例を示す図である。なお、説明を容易にするため、図１４（ａ）に示すようにパネル型表示装置２０は４個のパネルで構成されるレンズ形状であるものとする。
【００５１】
まず初めに、表示内容指示部１００が、次に表示する１つ以上のコンテンツの表示コンテンツ情報と各コンテンツの表示レイヤ情報の登録を受け付ける（ステップＳＴ１１）。なお、表示コンテンツ情報と表示レイヤ情報の登録は、ユーザが直接入力してもよい。また、再生開始時刻と１つ以上の表示コンテンツ情報、表示レイヤ情報のグループを記載したスケジュールファイルに基づいて指定時間に表示コンテンツ情報を登録するスケジュール処理部であってもよい。
【００５２】
具体的には、コンテンツ１とコンテンツ２の表示コンテンツ情報と表示レイヤ情報を登録する。コンテンツ１とコンテンツ２は、平面画像の領域内で同じ領域に配置され、かつ、コンテンツ２、コンテンツ１の順に配置されているものとする。なお、コンテンツを平面画像の領域に配置する場合、オフセットを付けたり、透明度を付けてもよい。
【００５３】
次に、表示内容指示部１００が、受け付けた全ての表示コンテンツ情報と表示レイヤ情報をコンテンツ生成部１１０に出力する（ステップＳＴ１２）。
そして、コンテンツ生成部１１０が、１つの表示コンテンツ情報から１つ以上の素材識別情報と各素材のレイアウト情報を抽出する（ステップＳＴ１３）。
【００５４】
具体的には、まずコンテンツ１の表示コンテンツ情報から素材Ａと素材Ｂの素材識別情報と、レイアウト情報を抽出する。コンテンツ１の表示コンテンツ情報は、平面画像と同じサイズの領域に対して、素材Ａと素材Ｂをコンテンツ１の画像領域の中心に、素材Ａ、素材Ｂの順に配置するというものとする。次に、コンテンツ２の表示コンテンツ情報から素材Ａと素材Ｂの素材識別情報と、レイアウト情報を抽出する。コンテンツ２の表示コンテンツ情報は、平面画像と同じサイズの領域に対して、素材Ｃをコンテンツ2の画像全体に拡大して配置するというものとする。
【００５５】
さらに、コンテンツ生成部１１０が、各素材のレイアウト情報に基づいた場所、順序で、素材識別情報から得られる素材データをデータ記憶部１６０から取得し、画像データに展開、合成してコンテンツ画像を生成する（ステップＳＴ１４）。
具体的には、図１４において素材Ａ画像（図１４（ｂ））と素材Ｂ画像（図１４（ｃ））からコンテンツ１のコンテンツ画像（図１４（ｅ））を生成する。次に、素材Ｃ画像（図１４（ｄ））からコンテンツ２のコンテンツ画像（図１４（ｆ））を生成する。
【００５６】
これらステップＳＴ１３およびＳＴ１４の処理については、与えられた表示コンテンツ情報の数だけ（ステップＳＴ１５のＮＯの場合）、各々繰り返される。
なお、ここでは、１コンテンツ毎にステップＳＴ１３〜ＳＴ１４の処理を実施して、次のコンテンツについて再びステップＳＴ１３〜ＳＴ１４の処理を実施、ということをすべての表示コンテンツ情報について繰り返すものとして説明したが、各ステップ毎に、すべての表示コンテンツ情報の数だけその処理を行ってから、次のステップへ進むようにしてもよい。
【００５７】
そして、すべての表示コンテンツ情報について、ステップＳＴ１３およびＳＴ１４の処理が終了したら（ステップＳＴ１５のＹＥＳの場合）、画像合成部１２０が、コンテンツ生成部１１０が生成したコンテンツ画像とコンテンツ生成部１１０から得られる表示レイヤ情報に基づいて、平面画像を合成する（ステップＳＴ１６）。
図１４においては、コンテンツ１のコンテンツ画像（図１４（ｅ））とコンテンツ２のコンテンツ画像（図１４（ｆ））から平面画像（図１４（ｇ））を生成する。
【００５８】
次に、平面画像変形部１４０が、表示画像の各画素に対して、変換テーブル読込部１３０から得た変換テーブルで対応付けられた座標の画素値を平面画像から取得、入力して、表示画像を生成する（ステップＳＴ１７）。
なお、ここで、表示画像の各画素に対応する平面画像上の座標値が小数値の場合、座標値を切り捨て、あるいは、切り上げ、あるいは、四捨五入して計算後の座標の平面画像の画素値を取得してもよいし、座標周辺画素の平面画像の画素値を取得して線形補間等の一般的な補間方法を用いて画素値を計算してもよい。
図１４においては、平面画像（図１４（ｇ））を変形して表示画像（図１４（ｈ））を生成する。なお、図１４におけるマッピング方式においては図をわかりやすくするため、平行投影方式を用いている。
【００５９】
そして最後に、表示パネル制御部８００が、表示画像とパネル・出力画面対応情報記憶部６００に記憶されているパネル・出力画面対応情報とに基づいて、パネル型３次曲面表示装置上の各表示パネルに対して対応する矩形領域の画像データを送出する（ステップＳＴ１８）。
図１４においては、表示画像（図１４（ｈ））をパネル型表示装置に表示した結果、パネル型表示装置２０が図１４（ｊ）のように曲面であっても正しい形状の画像が表示される。なお、平面画像（図１４（ｇ））を変換テーブル情報による変換なしに表示装置に表示した場合は、図１４（ｈ）のように画像が崩れて表示されてしまう。
【００６０】
ステップＳＴ１６〜ＳＴ１８の処理が、１フレームの表示処理であり、コンテンツに動画が含まれたり、素材のレイアウト情報がフレーム毎に変更されたりする場合は、これらの処理を各コンテンツの再生終了まで繰返す。ただし、コンテンツが動画を含む場合は、ステップＳＴ１３、ＳＴ１４は各々個別に全てコンテンツが終了するまで繰り返すものとし、ステップＳＴ１４〜ＳＴ１８の処理を１フレームの表示処理としてもよい。
【００６１】
以上のように、この実施の形態１によれば、平面形状の表示パネルを貼り合わせて構築するパネル型３次元曲面表示装置においても、パネル間の位置ずれを補正し、パネル間で不連続な部分なく２次元画像を３次元曲面形状に指定の方式でマッピングした画像を表示することができる。
【００６２】
なお、この実施の形態１では球面の一部を切り取った形状を例として説明したが、円柱状や扇型、波状等、パネル型表示装置２０の形状は球面形状に限らない。また、この実施の形態１では、例として図２に記載のパネル配置について説明したが、同じ形状を構築する場合でも、パネル３次元位置情報を取得できれば、パネル配置はこれに限らない。以降の実施の形態２，３においても同様である。
【００６３】
また、変換テーブル情報は、この実施の形態１のように、あらかじめ作成しておいて、平面画像変形部１４０では作成済みの変換テーブル情報を読み込んでもよいし、図１３のステップＳＴ１５とＳＴ１６の間で、毎フレーム変換テーブル情報を作成して読み込むようにしてもよい。後者の場合は、マッピング方式のパラメータを毎フレーム変更していくような場合にも対応できるという効果がある。
さらに、コンテンツ生成部１１０が複数存在して、表示コンテンツ情報毎のコンテンツ画像の生成を並列で処理するようにしてもよい。
【００６４】
また、図１３に示されるコンテンツ表示処理において、一度だけ作成済みの変換テーブル情報を変換テーブル読込部１３０が読み込んでデータ記憶部１６０に保存しておき、平面画像変形部１４０は、データ記憶部１６０から変換テーブル情報を読み込むようにしてもよい。
なお、表示コンテンツ情報に、変換テーブル情報を識別する変換テーブル識別情報を含め、コンテンツ生成部１１０がこの変換テーブル識別情報を表示コンテンツ情報から取得して変換テーブル読込部１３０に出力することにより、コンテンツに合わせて変換テーブルを変更するようにしてもよい。
【００６５】
なお、この実施の形態１では変換テーブル読込部１３０が読み込む変換テーブル情報を変換テーブル生成部７００が作成して変換テーブル情報記憶部３００に記憶するものとして説明したが、図１１に示すような変換テーブル情報があらかじめ変換テーブル情報記憶部３００に記憶されている場合には、表示制御装置１０の変換テーブル読込部１３０はその情報を読み込んで使用するだけでよい。
また、処理手順は、実施の形態１では、図１３のフローチャートに基づいて説明したが、毎フレーム処理するステップの範囲やコンテンツ毎にまとめて処理するステップの範囲についても、同様の結果が得られるのであれば説明した手順に限らない。
【００６６】
実施の形態２．
図１５は、実施の形態２におけるコンテンツ表示システムの構成を示すブロック図である。このコンテンツ表示システムは、表示制御装置１０Ａ、表示装置２０、変換テーブル情報記憶部３００、マッピング方式情報記憶部４００、パネル３次元位置情報記憶部５００、パネル・出力画面対応情報記憶部６００、変換テーブル生成部７００から構成されている。なお、実施の形態１で説明したものと同様の構成には、同一の符号を付して重複した説明を省略する。
【００６７】
以下に示す実施の形態２のコンテンツ表示システムにおける表示制御装置１０Ａは、実施の形態１における表示制御装置１０と比べると、平面画像変形部１４０に代えて、コンテンツ画像変形部１７０を備えており、また、その後に画像合成部１２０を配置している。この実施の形態２では、コンテンツ毎に、異なるマッピング方式を適用することが可能である。また、同時に再生する複数のコンテンツに対して異なるマッピング方式を適用する場合について示すものである。
【００６８】
また、この実施の形態２における表示コンテンツ情報には、変換テーブル情報を識別する変換テーブル識別情報も含まれる。
コンテンツ生成部１１０は、表示内容指示部１００から取得した表示コンテンツ情報から得られる素材識別情報に基づいて、データ記憶部１６０から素材データを取得、再生するとともに、表示コンテンツ情報から得られる変換テーブル識別情報を、変換テーブル読込部１３０に出力する処理も行う。
変換テーブル読込部１３０は、コンテンツ生成部１１０から取得した変換テーブル識別情報に示された変換テーブル情報を、変換テーブル情報記憶部３００から読み込む。
【００６９】
コンテンツ画像変形部１７０は、変換テーブル読込部１３０から変換テーブル情報を取得し、コンテンツ生成部１１０から取得したコンテンツ画像に対して、取得した変換テーブル情報に基づいた画像変形処理を行い、コンテンツ変形画像を生成して、画像合成部１２０に出力する。
【００７０】
画像合成部１２０は、コンテンツ画像変形部１７０から取得した１つ以上のコンテンツ変形画像を表示レイヤ情報に基づいて合成し、平面画像を生成する。
変換テーブル情報記憶部３００は、コンテンツ画像変形部１７０が生成するコンテンツ変形画像の各画素とコンテンツ生成部１１０が生成したコンテンツ画像の各画素の対応テーブル情報である変換テーブル情報を記憶している。
【００７１】
図１６および図１７を用いて、表示制御装置１０Ａにおけるコンテンツ表示処理に関する動作手順を説明する。図１６は、この実施の形態２におけるコンテンツ表示処理の処理手順を示すフローチャートである。また、図１７は、図１６に示したコンテンツ表示手順に基づいて作成される画像の移り変わりの例を示す図である。なお、説明を容易にするため、図１７（ａ）に示すようにパネル型表示装置２０は４個のパネルで構成されるレンズ形状であるものとする。なお、この実施の形態２では、あらかじめ変換テーブル生成部４００において、１つ以上のマッピング方式情報から、１つ以上の変換テーブル情報を作成しておくものとする。
【００７２】
まず初めに、表示内容指示部１００が、次に表示する１つ以上のコンテンツの表示コンテンツ情報と各コンテンツの表示レイヤ情報の登録を受け付ける（ステップＳＴ２１）。なお、表示コンテンツ情報と表示レイヤ情報の登録は、ユーザが直接入力してもよい。また、再生開始時刻と１つ以上の表示コンテンツ情報・表示レイヤ情報のグループを記載したスケジュールファイルに基づいて指定時間に表示コンテンツ情報を登録するスケジュール処理部であってもよい。
【００７３】
具体的には、コンテンツ１とコンテンツ２の表示コンテンツ情報と表示レイヤ情報を登録する。コンテンツ１とコンテンツ２は、平面画像の領域内で同じ領域に配置され、かつ、コンテンツ２、コンテンツ１の順に配置されているものとする。なお、コンテンツを平面画像の領域に配置する場合、オフセットを付けたり、透明度を付けてもよい。
【００７４】
次に、表示内容指示部１００が、受け付けた全ての表示コンテンツ情報と表示レイヤ情報をコンテンツ生成部１１０に出力する（ステップＳＴ２２）。
そして、コンテンツ生成部１１０が、１つの表示コンテンツ情報から１つ以上の素材識別情報と各素材のレイアウト情報と変換テーブル識別情報を抽出する（ステップＳＴ２３）。
【００７５】
具体的には、まずコンテンツ１の表示コンテンツ情報から素材Ａと素材Ｂの素材識別情報と、レイアウト情報と、変換テーブル識別情報を抽出する。コンテンツ１の表示コンテンツ情報は、平面画像と同じサイズの領域に対して、素材Ａと素材Ｂをコンテンツ１の画像領域の中心に、素材Ａ、素材Ｂの順に配置するというものとする。また、コンテンツ１に対する変換テーブル識別情報は、平行投影方式に基づく変換テーブル情報を示すものとする。次に、コンテンツ２の表示コンテンツ情報から素材Ｃの素材識別情報と、レイアウト情報を抽出する。コンテンツ２の表示コンテンツ情報は、平面画像と同じサイズの領域に対して、素材Ｃをコンテンツ２の画像全体に拡大して配置するというものとする。なお、素材Ｃは変換なしで表示することを前提とした動画とし、変換テーブル識別情報は、変形を行わないことを示す変換テーブル情報とする。なお、変形を行わない変換テーブル情報を示す変換テーブル識別情報は、特に変換テーブル情報自体を示すのではなく、変換テーブル情報を用いないことを示す識別情報でもよい。
【００７６】
さらに、コンテンツ生成部１１０が、各素材のレイアウト情報に基づいた場所、順序で、素材識別情報から得られる素材データをデータ記憶部１６０から取得し、画像データに展開、合成してコンテンツ画像を生成する（ステップＳＴ２４）。なお、ＳＴ２４は、与えられた表示コンテンツ情報の数だけ各々繰返される。
具体的には、図１７において素材Ａ画像（図１７（ｂ））と素材Ｂ画像（図１７（ｃ））からコンテンツ１のコンテンツ画像（図１７（ｅ））を生成する。次に、素材Ｃ画像（図１７（ｄ））からコンテンツ２のコンテンツ画像（図１７（ｆ））を生成する。
【００７７】
次に、ステップＳＴ２３で抽出した各コンテンツに対しうる変換テーブル識別情報に基づいて、使用する変換テーブル情報を、あらかじめ作成して変換テーブル情報記憶部３００に記憶しておいた変換テーブル情報から選択し、読み込む（ステップＳＴ２５）。
具体的には、図１７において、コンテンツ１の変換テーブル識別情報である平行投影方式に基づく変形テーブル情報と、コンテンツ２の変換テーブル識別情報である無変形の変形テーブル情報を取得する。
【００７８】
その後、コンテンツ画像変形部１７０が、変換テーブル読込部１３０から得た変換テーブル情報に基づいて、コンテンツ変形画像の各画素に対して、コンテンツ画像から変換テーブルで対応付けられた座標の画素値を入力して、コンテンツ変形画像を生成する（ステップＳＴ２６）。
【００７９】
また、ここでコンテンツ変形画像の各画素に対して与えるコンテンツ画像の座標が小数値の場合は、座標値を切り捨て、あるいは、切り上げ、あるいは、四捨五入した画素値を与えてもよいし、座標周辺画素の画素値を用いて線形補間等の一般的な補間方法を用いて画素値を計算してもよい。
図１７においては、コンテンツ１について、コンテンツ１画像（図１７（ｅ））を変形してコンテンツ１変形画像（図１７（ｇ））を生成する。次に、コンテンツ２については、コンテンツ２画像（図１７（ｆ））を変形してコンテンツ２変形画像（図１７（ｈ））を生成する。
【００８０】
これらステップＳＴ２３〜ＳＴ２６の処理については、与えられた表示コンテンツ情報の数だけ（ステップＳＴ２７のＮＯの場合）、各々繰り返される。
なお、ここでは、１コンテンツ毎にステップＳＴ２３〜ＳＴ２６の処理を実施して、次のコンテンツについて再びステップＳＴ２３〜ＳＴ２６の処理を実施、ということを、すべての表示コンテンツ情報について繰り返すものとしているが、ステップ毎に、すべての表示コンテンツ情報の数だけその処理を行ってから、次のステップへ進むようにしてもよい。
【００８１】
すべての表示コンテンツ情報について、ステップＳＴ２３〜ＳＴ２６の処理が終了したら（ステップＳＴ２７のＹＥＳの場合）、画像合成部１２０が、コンテンツ画像変形部１７０が生成したコンテンツ変形画像を、コンテンツ画像変形部１７０から得られる表示レイヤ情報に基づいて、合成して表示画像を生成する（ステップＳＴ２８）。
図１７においては、コンテンツ１変形画像（図１７（ｇ））とコンテンツ２変形画像（図１４（ｈ））から表示画像（図１４（ｉ））を生成する。
【００８２】
そして、表示パネル制御部８００が、表示画像からパネル・出力画面対応情報記憶部６００に記憶されているパネル・出力画面対応情報とに基づいて、パネル型３次曲面表示装置上の各表示パネルに対して対応する矩形領域の画像データを抽出して送出する（ステップＳＴ２９）。
図１７においては、表示画像（図１７（ｉ））をパネル型表示装置２０に表示した結果、パネル型表示装置２０が図１７（ｊ）のように曲面であっても正しい形状の画像が表示される。
【００８３】
ステップＳＴ２８〜ＳＴ２９の処理が、１フレームの表示処理であり、コンテンツに動画が含まれたり、素材のレイアウト情報がフレーム毎に変更されたりする場合は、これらの処理を各コンテンツの再生終了まで繰り返す。ただし、毎フレーム変形テーブルが変更される場合は、ステップＳＴ２３〜ＳＴ２４とステップＳＴ２５〜ＳＴ２６を別々に全てコンテンツが終了するまで繰り返すものとし、ステップＳＴ２５〜ＳＴ２９の処理を１フレームの表示処理としてもよい。また、コンテンツが動画を含む場合は、ステップＳＴ２３とステップＳＴ２４〜ＳＴ２６を別々に全てコンテンツが終了するまで繰り返すものとし、ステップＳＴ２４〜ＳＴ２９の処理を１フレームの表示処理としてもよい。
【００８４】
以上のように、この実施の形態２によれば、平面形状の表示パネルを貼り合わせて構築するパネル型３次元曲面表示装置においても、パネル間の位置ずれを補正し、パネル間で不連続な部分なく２次元画像を３次元曲面形状に指定の方式でマッピングした画像を表示することができるとともに、同時あるいは順番に表示する複数のコンテンツに対して異なるマッピング処理を行うことができるという効果がある。
【００８５】
なお、コンテンツ毎に異なるマッピング方式を適用する効果としては、例えば広告映像のように大きな歪みが望まれないコンテンツに対しては、平行投影方式のような比較的視点によっては平面形状の表示装置に表示した場合と同じように見えるマッピング方式を選択し、一方、文字列やグラフィックスに見られるように曲面に巻きつけたような見え方が望まれるコンテンツの場合は、極座標方式のようなマッピング方式を選択すると、より効果的なコンテンツ表示が可能となる。
【００８６】
また、図１６に示されるコンテンツ表示処理において、一度だけ作成済みの変換テーブル情報を変換テーブル読込部１３０が読み込んでデータ記憶部１６０に保存しておき、変換テーブル読込部１３０は、コンテンツ画像変形部１７０に対してデータ記憶部１６０から変換テーブル情報を読み込んで出力するようにしてもよい。
さらに、この実施の形態２では、コンテンツ生成部１１０とコンテンツ画像変形部１７０は、各々１つであり、順に１つずつコンテンツを処理する手順で説明したが、コンテンツ生成部１１０とコンテンツ画像変形部１７０が各々複数の同処理部を含む構成とし、複数のコンテンツを並列に同時に処理を行うようにしてもよい。
また、処理手順は、実施の形態２では、図１６のフローチャートに基づいて説明したが、毎フレーム処理するステップの範囲やコンテンツ毎にまとめて処理するステップの範囲についても、同様の結果が得られるのであれば説明した手順に限らない。
【００８７】
実施の形態３．
図１８は、実施の形態３におけるコンテンツ表示システムの構成を示すブロック図である。このコンテンツ表示システムは、表示制御装置１０Ｂ、表示装置２０、マッピング方式情報記憶部４００、パネル３次元位置情報記憶部５００、パネル・出力画面対応情報記憶部６００から構成されている。なお、実施の形態１，２で説明したものと同様の構成には、同一の符号を付して重複した説明を省略する。
【００８８】
以下に示す実施の形態３のコンテンツ表示システムは、実施の形態１のコンテンツ表示システムと比べると、変換テーブル生成部７００と変換テーブル情報記憶部３００と表示制御装置１０の中の変換テーブル読込部１３０を備えておらず、これらに代えて、表示制御装置１０Ｂが、変換テーブル生成部７００と変換テーブル読込部１３０の機能を合わせリアルタイムに変換テーブルを生成する変換テーブル生成部１８０と、パラメータ取得部１９０を備えている。この実施の形態３では、例えば、変換テーブル生成部１８０においてフレーム毎にパラメータに応じた変換テーブル情報を更新することが可能となる形態を示す。
【００８９】
なお、この実施の形態３では、上述のとおり、変換テーブル生成部７００と変換テーブル読込部１３０の機能を合わせた変換テーブル生成部１８０を用いるものとして説明するが、実施の形態１同様、変換テーブル生成部と変換テーブル読込部とに分かれている構成としてもよい。
また、ここでは実施の形態１と比較して説明したが、実施の形態２における変換テーブル生成部７００、変換テーブル情報記憶部３００、変換テーブル読込部１３０に代えて、変換テーブル生成部１８０とパラメータ取得部１９０を備えるようにしてもよいことは、言うまでもない。
【００９０】
また、この実施の形態３における表示コンテンツ情報には、１つ以上あるマッピング方式情報から指定のマッピング方式情報を識別するための情報である変換テーブル識別情報を含むものとする。
コンテンツ生成部１１０は、表示内容指示部１００から取得した表示コンテンツ情報から得られる素材識別情報に基づいて、データ記憶部１６０から素材データを取得、再生するとともに、表示コンテンツ情報から得られる素材のレイアウト情報に基づいて、コンテンツ画像を作成し、かつ、表示コンテンツ情報から得られる変換テーブル識別情報を、変換テーブル生成部１８０に出力する。
【００９１】
変換テーブル生成部１８０は、マッピング方式情報記憶部４００に記憶されているマッピング方式情報と、パネル３次元位置情報記憶部５００に記憶されているパネル３次元位置情報と、パネル・出力画面対応情報記憶部６００に記憶されているパネル・出力画面対応情報と、変換テーブル識別情報と、変換用パラメータから、変換テーブル情報を生成し、平面画像変形部１４０に出力する。なお、変換テーブル生成部１８０は、変換テーブル読込手段と変換テーブル生成手段を合わせた機能を持ち、中間データである変換テーブル情報を出力（記憶）せずに最終的な変換テーブル情報を直接、平面画像変形部１４０に出力するものである。
【００９２】
パラメータ取得部１９０は、変換テーブル生成部１８０に対して変換テーブル情報を作成するために使用するパラメータである変換テーブル用パラメータを取得する。また、この実施の形態３では、変換テーブル用パラメータをコンテンツ再生開始時刻からの相対時刻とし、パラメータ取得部１９０は、このコンテンツ再生開始時刻からの相対時刻を取得するものとする。
なお、変換テーブル用パラメータは、相対時刻に限らず、例えば、表示コンテンツ情報に含まれる任意の数値でもよい。その場合には、パラメータ取得部１９０が、表示内容指示部１００から表示コンテンツ情報を取得する。また、パラメータ取得部１９０に数値を入力してもよい。
【００９３】
図１９を用いて、表示制御装置１０Ｂにおけるコンテンツ表示処理に関する動作手順を説明する。図１９は、この実施の形態３におけるコンテンツ表示処理の処理手順を示すフローチャートである。なお、図１９に示したコンテンツ表示手順に基づいて作成される画像の移り変わりの例を示す図は、実施の形態１において使用した図１４と同じであるため、図示を省略する。
【００９４】
ここで、ステップＳＴ３１〜ＳＴ３２の処理については、実施の形態１における図１３で示したフローチャートのステップＳＴ１１〜ＳＴ１２と同じであるため、説明を省略する。
次に、コンテンツ生成部１１０が、１つの表示コンテンツ情報から１つ以上の素材識別情報と各素材のレイアウト情報と変換テーブル識別情報と変換テーブル用パラメータを抽出する（ステップＳＴ３３）。
【００９５】
また、ステップＳＴ３４〜ＳＴ３６の処理についても、実施の形態１における図１３で示したフローチャートのステップＳＴ１４〜ＳＴ１６と同じであるため、説明を省略する。
そして、パラメータ取得部１９０が、変換テーブル用パラメータとしてコンテンツ再生開始時刻からの相対時刻を取得し、変換テーブル生成部１８０に出力する（ステップＳＴ３７）。
【００９６】
その後、変換テーブル生成部１８０が、パネル・出力画面対応情報と、パネル３次元位置情報と、変換テーブル識別情報により指定されたマッピング方式情報と、パラメータ取得部１９０から得られた変換テーブル用パラメータから、図１２に基づき変換テーブル情報を生成する（ステップＳＴ３８）。
【００９７】
例えば、選択したマッピング方式情報が極座標方式によるものだとして、パラメータでマッピング先を球面に沿って１フレーム毎に経度方向に回転させる場合は、マッピング計算式を式（１５）とし、コンテンツ再生開始時刻からの相対時刻を変換テーブル用パラメータとすればよい。なお、ここでは、ｔは時刻であり、ｆ（ｔ）はｔに応じて計算される経度方向への移動量を示す。また、他の変数は全て式（９）と同様であるものとする。
2014157324.tif 000017
【００９８】
そして、最後のステップＳＴ３９〜ＳＴ４０における表示画像を出力する処理についても、実施の形態１における図１３で示したフローチャートのステップＳＴ１７〜ＳＴ１８と同じであるため、説明を省略する。
【００９９】
以上のように、この実施の形態３によれば、平面形状の表示パネルを貼り合わせて構築するパネル型３次元曲面表示装置においても、パネル間の位置ずれを補正し、パネル間で不連続な部分なく２次元画像を３次元曲面形状に指定の方式でマッピングした画像を表示することができるとともに、変換テーブル計算時に、パラメータを用いてフレーム毎に変換テーブル情報を更新して表示内容を変更することができるという効果もある。
【０１００】
なお、変換テーブル用パラメータは、コンテンツ再生開始時刻からの相対時刻ではなく、タッチパネル・マウス・キーボード等の入力インタフェースから得られる入力座標やカメラで取得・認識した視聴者の位置情報等の数値や情報であってもよい。
また、処理手順は、実施の形態３では、図１９のフローチャートに基づいて説明したが、毎フレーム処理するステップの範囲やコンテンツ毎にまとめて処理するステップの範囲についても、同様の結果が得られるのであれば説明した手順に限らない。
【０１０１】
また、この実施の形態３は、実施の形態１における変換テーブル生成部７００と変換テーブル情報記憶部３００と変換テーブル読込部１３０に代えて、変換テーブル生成部１８０およびパラメータ取得部１９０を備えたものとして説明したが、実施の形態２における変換テーブル生成部７００と変換テーブル情報記憶部３００と変換テーブル読込部１３０に代えて、変換テーブル生成部１８０およびパラメータ取得部１９０を備えた構成としてもよいことは、言うまでもない。
なお、実施の形態１〜３においては、表示パネル制御部８００は表示制御装置１０内に備える形で説明した。しかし、表示パネル制御部８００は、表示制御装置１０の外にある表示パネル制御装置でもよいことは明らかである。
【０１０２】
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
【符号の説明】
【０１０３】
１０，１０Ａ，１０Ｂ  表示制御装置、２０  表示装置（パネル型表示装置）、１００  表示内容指示部、１１０  コンテンツ生成部、１２０  画像合成部、１３０  変換テーブル読込部、１４０  平面画像変形部、１６０  データ記憶部、１７０  コンテンツ画像変形部、１８０，７００  変換テーブル生成部、１９０  パラメータ取得部、２００  平面画像生成部、３００  変換テーブル情報記憶部、４００  マッピング方式情報記憶部、５００  パネル３次元位置情報記憶部、６００  パネル・出力画像対応情報記憶部、８００  表示パネル制御部。
【図１】
2014157324.tif 000018
【図２】
2014157324.tif 000019
【図３】
2014157324.tif 000020
【図４】
2014157324.tif 000021
【図５】
2014157324.tif 000022
【図６】
2014157324.tif 000023
【図７】
2014157324.tif 000024
【図８】
2014157324.tif 000025
【図９】
2014157324.tif 000026
【図１０】
2014157324.tif 000027
【図１１】
2014157324.tif 000028
【図１２】
2014157324.tif 000029
【図１３】
2014157324.tif 000030
【図１４】
2014157324.tif 000031
【図１５】
2014157324.tif 000032
【図１６】
2014157324.tif 000033
【図１７】
2014157324.tif 000034
【図１８】
2014157324.tif 000035
【図１９】
2014157324.tif 000036