(57)【要約】【課題】復号化処理の負荷を低減することが可能な画像再生装置を提供することである。【解決手段】本発明にかかる画像再生装置１は、複数の位置から撮影された複数の視点画像からなる多視点画像を再生する画像再生装置であって、多視点画像を復号化する画像データ処理部１６と、復号化された多視点画像の視点画像を所定の表示方向に表示する表示部２０と、表示部２０における視点画像の表示方向と、視点画像に含まれる画像識別情報とを対応付けた視点対応情報３４を生成する視点対応情報生成部１３と、を備える。画像データ処理部１６は、視点対応情報３４に基づいて視点画像を復号化する処理を実行する。【選択図】図１
2015195515.tif 000002
【特許請求の範囲】
【請求項１】
複数の位置から撮影された複数の視点画像からなる多視点画像を再生する画像再生装置であって、
多視点画像を復号化する画像データ処理部と、
前記復号化された多視点画像の視点画像を所定の表示方向に表示する表示部と、
前記表示部における前記視点画像の前記表示方向と、前記視点画像に含まれる画像識別情報とを対応付けた視点対応情報を生成する視点対応情報生成部と、
を備え、
前記画像データ処理部は、前記視点対応情報に基づいて視点画像を復号化する処理を実行する、
ことを特徴とする画像再生装置。
【請求項２】
前記表示部に表示された多視点画像を視聴する視聴者の視聴位置に関する視聴位置情報を取得する視聴位置情報取得部と、
前記多視点画像の中から前記画像データ処理部で復号化する視点画像を選択する画像データ選択部と、を備え、
前記画像データ選択部は、前記視点対応情報と前記視聴位置情報とを用いて、前記視聴者の視聴位置に対応した視点画像を選択し、
前記画像データ処理部は、前記画像データ選択部で選択された、前記視点対応情報に基づく視点画像を復号化する処理を実行する、
ことを特徴とする請求項１に記載の画像再生装置。
【請求項３】
前記多視点画像の撮影位置情報を取得する撮影情報取得部を更に備え、
前記視点対応情報生成部は、前記撮影情報取得部で取得した撮影位置情報に基づいて、前記視点画像の前記表示方向と、前記視点画像に含まれる画像識別情報または撮影位置情報とを対応付けた視点対応情報を生成する、
ことを特徴とする請求項１または２に記載の画像再生装置。
【請求項４】
前記画像データ処理部で復号化する視点画像の優先順位を決定する優先順位決定部を更に備え、
前記優先順位決定部は、前記視点対応情報に基づいて、前記視聴者の視聴位置に対応した表示方向に近似する画像識別情報を備える視点画像の優先順位を高くし、
前記画像データ選択部は、前記優先順位決定部で決定された順位に基づいて、前記画像データ処理部で復号化する視点画像を選択する、
ことを特徴とする請求項２または３に記載の画像再生装置。
【請求項５】
前記画像再生装置が前記多視点画像を早送り再生または巻き戻し再生する際に、前記画像データ選択部は、前記視聴者の視聴位置に対応した視点画像を選択する
ことを特徴とする請求項２乃至４のいずれか一項に記載の画像再生装置。
【請求項６】
複数の位置から撮影された複数の視点画像からなる多視点画像を再生する画像再生方法であって、
表示部における前記視点画像の表示方向と、前記視点画像に含まれる画像識別情報とを対応付けた視点対応情報を生成し、
前記視点対応情報に基づいて多視点画像を復号化する処理を実行し、
前記復号化された多視点画像の視点画像を所定の表示方向に表示する、
ことを特徴とする画像再生方法。
【請求項７】
複数の位置から撮影された複数の視点画像からなる多視点画像を再生するためのプログラムであって、
表示部における前記視点画像の表示方向と、前記視点画像に含まれる画像識別情報とを対応付けた視点対応情報を生成し、
前記視点対応情報に基づいて多視点画像を復号化する処理を実行し、
前記復号化された多視点画像の視点画像を所定の表示方向に表示させる、
処理をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像再生装置、画像再生方法、及びプログラムに関する。
【背景技術】
【０００２】
左右２つの視点の画像からなる立体画像をさらに拡張し、複数の視点から撮影して得られる画像（ストリーム）を効率よく符号化するＭＶＣ（Multi View Coding）が知られている。この符号化技術を利用することで、複数の視点から撮影された画像（多視点画像）を効率よく符号化することができる。
【０００３】
特許文献１には、特殊な眼鏡などを必要としない裸眼タイプの立体表示ディスプレイにおいて、特定の視聴位置に適切な立体映像を投影するための技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第２８１２２５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
高精細な多視点画像や立体画像を得るためには、多くの視点からの画像を表示部に表示する必要がある。しかしながら、ビュー間予測など、他の画像ビットストリームとの依存関係によって成り立つＭＶＣ等の符号化方式では、いくつかのビットストリームを復号化してからでないと復号化することができないビットストリームがある。このようなビットストリームは、表示する画像が高精細になるほど増加するため、画像再生装置における復号化処理の負荷が大きくなる。
【０００６】
特に、早送り再生や巻き戻し再生などの特殊再生では、現在の再生区間のビットストリームを復号化する前に次の再生区間のビットストリームを復号化しなければならない場合がある。このような特殊再生では、画像再生装置における復号化処理の負荷が大きくなるため、多視点画像を復号化する処理が追いつかず、表示部に画像が表示されない場合がある。
【０００７】
上記課題に鑑み本発明の目的は、復号化処理の負荷を低減することが可能な画像再生装置、画像再生方法、及びプログラムを提供することである。
【課題を解決するための手段】
【０００８】
本発明にかかる画像再生装置は、複数の位置から撮影された複数の視点画像からなる多視点画像を再生する画像再生装置であって、多視点画像を復号化する画像データ処理部と、前記復号化された多視点画像の視点画像を所定の表示方向に表示する表示部と、前記表示部における前記視点画像の前記表示方向と、前記視点画像に含まれる画像識別情報とを対応付けた視点対応情報を生成する視点対応情報生成部と、を備え、前記画像データ処理部は、前記視点対応情報に基づいて視点画像を復号化する処理を実行する、ことを特徴とする画像再生装置である。
【０００９】
本発明にかかる画像再生方法は、複数の位置から撮影された複数の視点画像からなる多視点画像を再生する画像再生方法であって、表示部における前記視点画像の表示方向と、前記視点画像に含まれる画像識別情報とを対応付けた視点対応情報を生成し、前記視点対応情報に基づいて多視点画像を復号化する処理を実行し、前記復号化された多視点画像の視点画像を所定の表示方向に表示する、ことを特徴とする画像再生方法である。
【００１０】
本発明にかかるプログラムは、複数の位置から撮影された複数の視点画像からなる多視点画像を再生するためのプログラムであって、表示部における前記視点画像の表示方向と、前記視点画像に含まれる画像識別情報とを対応付けた視点対応情報を生成し、前記視点対応情報に基づいて多視点画像を復号化する処理を実行し、前記復号化された多視点画像の視点画像を所定の表示方向に表示させる、処理をコンピュータに実行させるためのプログラムである。
【発明の効果】
【００１１】
本発明により、復号化処理の負荷を低減することが可能な画像再生装置、画像再生方法、及びプログラムを提供することができる。
【図面の簡単な説明】
【００１２】
【図１】実施の形態にかかる画像再生装置を示すブロック図である。
【図２】実施の形態にかかる画像再生装置の動作を説明するためのフローチャートである。
【図３】実施の形態にかかる画像再生装置の動作を説明するためのフローチャートである。
【図４】実施の形態にかかる画像再生装置の動作を説明するためのフローチャートである。
【図５】実施の形態にかかる画像再生装置が備える表示部の一例を示す図である。
【図６】視点対応情報の一例を示す表である。
【発明を実施するための形態】
【００１３】
以下、図面を参照して本発明の実施の形態について説明する。
図１は、本実施の形態にかかる画像再生装置を示すブロック図である。図１に示す本実施の形態にかかる画像再生装置１は、複数の位置から撮影された複数の視点画像からなる多視点画像を再生する画像再生装置であり、画像データ記憶部１１、撮影情報取得部１２、視点対応情報生成部１３、表示方向情報取得部１４、データ処理部１５、表示部２０、視聴位置情報取得部２１、及びインターフェース２２を備える。データ処理部１５は、画像データ処理部１６、画像データ選択部１７、及び優先順位決定部１８を備える。
【００１４】
画像データ記憶部１１は、多視点画像データを記録する。画像データ記憶部１１は、多視点画像データを記録するために必要な容量を備える記録媒体であればよく、例えばハードディスクドライブ、光ディスク、不揮発性メモリ等を用いて構成することができる。また、画像データ記憶部１１に記録されている多視点画像データは、磁気記録ヘッド、光ピックアップなど画像データ記憶部１１に応じた読み取り手段を用いて、画像データ記憶部１１から読み出すことができる。また、磁気記録ヘッド、光ピックアップなど、画像データ記憶部１１に応じた書き込み手段を用いて、画像データ記憶部１１に多視点画像データを書き込むことができるように構成してもよい。
【００１５】
多視点画像データは符号化された多視点画像であり、符号化はＨ．２６４のＭＶＣ（Multi View Coding）等を用いて行われている。つまり、多視点画像データは、複数の視点画像を視点間補償および時間補償等を用いて符号化した画像データであり、独立して復号化できる視点画像と、他の視点画像を復号化したのちに復号化できる視点画像とがあり、いずれの視点画像も、多視点画像における複数の視点画像の中から特定の視点画像を識別するための画像識別情報（View ID）が設定されているものとする。
【００１６】
画像データ記憶部１１に記録されている多視点画像データ３１は、撮影情報取得部１２およびデータ処理部１５に供給される。なお、本実施の形態では、インターフェース２２を介して多視点画像データ３１を取得するように構成してもよい。
【００１７】
撮影情報取得部１２は、多視点画像を撮影した撮影位置に関する情報を取得し、取得した撮影位置情報３２を視点対応情報生成部１３に出力する。なお、撮影情報取得部１２は、視点画像に設定されている画像識別情報（View ID）を取得してもよく、また取得した画像識別情報（View ID）を視点対応情報生成部１３に出力してもよい。
【００１８】
なお、撮影位置情報は符号化されていてもよい。また、特定の被写体を撮影した空間上の位置が撮影位置情報によって一意に決まる情報であれば、撮影位置情報はどのような情報であってもよい。
【００１９】
表示方向情報取得部１４は、表示部２０における多視点画像の表示方向２５ａ〜２５ｃに関する情報を取得し、取得した表示方向情報３３を視点対応情報生成部１３に出力する。
【００２０】
視点対応情報生成部１３は、撮影情報取得部１２で取得した撮影位置情報３２に基づいて、画像識別情報と表示方向情報取得部１４で取得した表示方向情報３３とを対応付けた視点対応情報を生成し、生成した視点対応情報３４をデータ処理部１５に出力する。つまり、視点対応情報３４は、符号化された多視点画像のどの視点画像が、表示部２０のどの表示方向に表示されるかを対応付けている情報である。視点対応情報生成部１３で生成された視点対応情報３４は、所定の記憶部（不図示）に記録されるようにしてもよい。また、撮影位置情報と表示方向とを対応づけて視点対応情報を生成してもよい。
【００２１】
視聴位置情報取得部２１は、表示部２０に表示された多視点画像を視聴する視聴者２６ａ〜２６ｃの視聴位置に関する情報を取得し、取得した視聴位置情報３５をデータ処理部１５に出力する。例えば、視聴位置情報取得部２１は、視聴者２６ａ〜２６ｃの顔を検出することができるカメラを用いて構成してもよい。顔検出を用いる場合は、顔検出用のカメラを設け、このカメラで撮影された画像に対して顔検出処理を行う。また、視聴者２６ａ〜２６ｃが自身の視聴位置を入力手段（不図示）を用いて入力するような構成としてもよく、視聴者２６ａ〜２６ｃが座っている位置を電気的に取得する構成としてもよい。なお、視聴位置情報取得部２１はこれらに限定されることはなく、視聴者２６ａ〜２６ｃの視聴位置を取得することができるのであればどのような構成であってもよい。
【００２２】
データ処理部１５は、画像データ処理部１６、画像データ選択部１７、及び優先順位決定部１８を備える。
【００２３】
画像データ処理部１６は、符号化された多視点画像３１を復号化する。具体的には、画像データ処理部１６は、多視点画像３１のうち、画像データ選択部１７で選択された視点画像を復号化する。また、画像データ処理部１６は、多視点画像３１として、符号化されていない多視点画像が供給された場合、符号化されていない多視点画像を符号化するように構成してもよい。
【００２４】
画像データ選択部１７は、符号化された多視点画像の中から画像データ処理部１６で復号化する視点画像を選択する。具体的には、画像データ選択部１７は、視点対応情報３４と視聴位置情報３５とを用いて、視聴者２６ａ〜２６ｃの視聴位置に対応した視点画像を選択する。換言すると、画像データ選択部１７は、表示部２０における多視点画像の表示方向２５ａ〜２５ｃに対応した視点画像を選択する。
【００２５】
優先順位決定部１８は、画像データ処理部１６で復号化する視点画像の優先順位を決定する。つまり、優先順位決定部１８は、視点対応情報に基づいて、視聴者２６ａ〜２６ｃの視聴位置に対応した表示方向２５ａ〜２５ｃに近似する画像識別情報を備える視点画像の優先順位が高くなるように、視点画像の優先順位を決定する。例えば、優先順位決定部１８は、視点画像の画像識別情報が、視聴者２６ａ〜２６ｃの視聴位置に対応した表示方向２５ａ〜２５ｃに近い程、当該視点画像の優先順位を高くする。
【００２６】
そして、画像データ選択部１７は、優先順位決定部１８で決定された優先順位に基づいて、画像データ処理部１６で復号化する視点画像を選択する。つまり、画像データ選択部１７は、優先順位が高い視点画像を優先して選択する。
【００２７】
画像データ処理部１６で復号化された多視点画像３６は、表示部２０に供給される。表示部２０は、復号化された多視点画像３６を所定の表示方向２５ａ〜２５ｃに表示する。
【００２８】
次に、本実施の形態にかかる画像再生装置１の動作（画像再生方法）について説明する。まず、図２に示すフローチャートを用いて、視点対応情報の生成方法について説明する。視点対応情報を生成する際は、まず、多視点画像データを取得する（ステップＳ１）。多視点画像データは、画像再生装置１の外部からインターフェース２２を介して取得してもよく、また画像データ記憶部１１に予め記録された多視点画像データを読み出して取得してもよい。
【００２９】
インターフェース２２を介して多視点画像データを取得する場合は、ＵＳＢ（Universal Serial Bus）やＩＥＥＥ１３９４等の規格に応じた、通信信号の変調処理、デコード処理、暗号の復号化処理などを実施してもよい。また、多視点画像データが符号化されていない場合には、データ処理部１６において多視点画像データの符号化処理を実施してもよい。更に、実際にカメラで撮影した画像間における視点の画像（中間視差）を生成する構成としてもよい。
【００３０】
次に、撮影情報取得部１２において、多視点画像データ３１の撮影位置情報を取得する（ステップＳ２）。
【００３１】
次に、表示方向情報取得部１４において表示方向情報を取得する（ステップＳ３）。表示方向情報とは、表示部２０で表示される多視点画像の表示方向２５ａ〜２５ｃに関する情報である。図５は、画像再生装置１が備える表示部２０の一例を示す図である。図５に示す表示部２０は、ＩＰ（インテグラル・フォトグラフィ）立体と呼ばれる表示システム系であり、スクリーン４１と、複数のプロジェクタ４３とを備えている。スクリーン４１は、例えばレンチキュラーレンズ方式のスクリーンであり、当該スクリーン４１にプロジェクタ４３から映像４２を投影することで、視聴者（スクリーン４１を挟んで、プロジェクタ４３と反対側の位置にいる）は立体画像を視聴することができる。
【００３２】
例えば、図５に示す表示部２０の場合は、表示方向情報は個々のプロジェクタ４３と表示方向２５ａ〜２５ｃとの関係を示している。つまり、データ処理部１５からプロジェクタ４３に供給される特定の視点画像が一定の方向に表示される場合、個々のプロジェクタ４３と表示方向２５ａ〜２５ｃは一対一に対応しており、表示方向情報取得部１４は、この対応関係に関する情報を表示方向情報として取得する。
【００３３】
本実施の形態では、このように表示部２０を解析することで表示方向情報を取得してもよく、また画像再生装置１の外部から表示方向情報を取得する構成であってもよい。また、水平方向に視差がある場合に限らず、鉛直方向に視差があるように構成してもよい。なお、表示部２０の構成に変更がない場合は、表示方向情報を任意の記憶媒体に記憶するような構成としてもよい。このような構成とすることで、視点対応情報を生成する度に、表示方向情報を取得する必要がなくなる。つまり、ステップＳ３を省略することができる。
【００３４】
次に、視点対応情報生成部１３は、撮影情報取得部１２で取得した撮影位置情報３２に基づいて、画像識別情報と表示方向情報取得部１４で取得した表示方向情報３３とを対応付けた視点対応情報３４を生成する（ステップＳ４）。図６は、視点対応情報３４の一例を示す表である。図６に示すように、視点対応情報３４は、表示部２０の表示方向と視点画像の画像識別情報（この場合は、View ID）とを対応付けたテーブルである。換言すると、視点対応情報３４は、符号化された多視点画像のどの視点画像が、表示部２０のどの表示方向に表示されるかを対応付けている情報である。なお、このようにして作成された視点対応情報３４は、所定の記憶媒体（不図示）に記憶するようにしてもよい。
【００３５】
次に、図３に示すフローチャートを用いて、画像再生装置１を用いて多視点画像を再生する際の動作について説明する。まず、画像再生装置１は、再生開始の指示を取得する（ステップＳ１１）。再生開始の指示は、画像再生装置１の外部から受けることができる。例えば、視聴者が画像再生装置１に対して再生開始の指示をしてもよく、また既定の動作に基づいて画像再生装置１が再生開始の指示を取得するようにしてもよい。外部から再生指示を取得する際は、複数ある多視点画像データのうちのいずれの多視点画像データを再生するか、またどの位置から再生するか等の指示を取得する構成としてもよい。
【００３６】
例えば、再生する多視点画像データを選択したり、再生開始位置を指定したりするために、再生開始、再生停止、一時停止、早送り、巻き戻しなどの入力ボタンや、再生開始位置を複数の選択肢の中から選択するための十字キーや、選択した再生開始位置を実行するための決定ボタンや数字キー等が、本体または赤外線リモコンに設けられているものとする。また、複数の選択肢（再生開始位置）を表示するためのディスプレイを備えていてもよい。
【００３７】
次に、ステップＳ１１で指定された多視点画像データを、画像データ記録部１１から読み出す（ステップＳ１２）。そして、ステップＳ１１で指定された再生開始位置（ｋ＝０）を設定する（ステップＳ１３）。次に、視聴位置情報取得部２１を用いて視聴位置情報３５を取得する（ステップＳ１４）。例えば、視聴位置情報取得部２１は顔検出用のカメラを備えており、視聴者２６ａ〜２６ｃの顔の位置が検出された場合に、検出したカメラの画角と、画面内の顔が検出された位置とを用いて視聴者２６ａ〜２６ｃと表示部２０との位置関係を取得することができる。
【００３８】
次に、視点対応情報生成部１３から視点対応情報３４を取得する（ステップＳ１５）。例えば、視点対応情報３４は、図２で説明した方法を用いて、視点対応情報生成部１３において予め生成されており、生成された視点対応情報３４は、記憶媒体（不図示）に記憶されているものとする。
【００３９】
次に、画像データ処理部１６で復号化する視点画像の優先順位を決定するか否かについて判断する（ステップＳ１６）。例えば、視聴者の数が少ない場合は、画像データ処理部１６で復号化する視点画像の量も少ないので、優先順位をつけなくても、多視点画像を画像データ処理部１６で復号化できる。このような場合は、優先順位を決定しないと判断することができる（ステップＳ１６：Ｎｏ）。一方、視聴者の数が多い場合は、画像データ処理部１６で復号化する視点画像の量も多くなる。この場合は、画像データ処理部１６で復号化する視点画像を少なくするために、優先順位を決定すると判断することができる（ステップＳ１６：Ｙｅｓ）。
【００４０】
優先順位を決定しないと判断した場合は（ステップＳ１６：Ｎｏ）、画像データ選択部１７において、多視点画像の中から画像データ処理部１６で復号化する視点画像を選択する（ステップＳ１７）。つまり、ステップＳ１４で取得した視聴位置情報３５によって、視聴者２６ａ〜２６ｃが表示部２０のどの表示方向の画像を見ているかがわかる。また、ステップＳ１５で取得した視点対応情報３４によって、表示部２０の表示方向２５ａ〜２５ｃと各視点画像の画像識別情報（View ID）との対応関係がわかる。よって、画像データ選択部１７は、視聴者２６ａ〜２６ｃが存在する表示方向２５ａ〜２５ｃに対応した視点画像を、画像データ処理部１６で復号化する視点画像として選択する。
【００４１】
次に、画像データ選択部１７で選択された視点画像を、画像データ処理部１６で復号化する（ステップＳ１８）。そして、画像データ処理部１６で復号化された多視点画像を表示部２０に表示する（ステップＳ１９）。このとき、表示部２０は、視聴者２６ａ〜２６ｃが存在する表示方向２５ａ〜２５ｃに対応した視点画像を表示する。
【００４２】
次に、表示した多視点画像が最終再生位置か否か判断する（ステップＳ２１）。表示した多視点画像が最終再生位置である場合は（ステップＳ２１：Ｙｅｓ）、画像の再生を終了する。一方、表示した多視点画像が最終再生位置でない場合は、ｋの値をインクリメントし（ステップＳ２０）、ステップＳ１４以降の動作を繰り返す。
【００４３】
また、ステップＳ１６において、優先順位を決定すると判断した場合は（ステップＳ１６：Ｙｅｓ）、復号化する視点画像の優先順位（ｉ）を決定する（図４のステップＳ３１）。このとき、優先順位決定部１８は、視聴者２６ａ〜２６ｃの視聴位置に対応した表示方向２５ａ〜２５ｃに近似する画像識別情報を備える視点画像の優先順位が高くなるように、視点画像の優先順位を決定する。例えば、優先順位決定部１８は、多視点画像の画像識別情報（この場合は、View ID）と対応づけられた表示方向が、視聴者２６ａの視聴位置に対応した表示方向２５ａに近い程、当該視点画像の優先順位を高くする。このとき、ｉ（ｉは０以上の整数とする）は優先順位を示し、ｉの値が０に近い程、優先順位が高い視点画像を示しているものとする。
【００４４】
次に、ｉ＝０とし（ステップＳ３２）、その後、画像データ選択部１７において、多視点画像の中から画像データ処理部１６で復号化する視点画像を選択する（ステップＳ３３）。ｉ＝０の場合は優先順位が最も高いので、画像データ選択部１７は、視聴者２６ａ〜２６ｃが存在する表示方向２５ａ〜２５ｃに対応した視点画像を、画像データ処理部１６で復号化する視点画像として選択する。
【００４５】
次に、画像データ選択部１７で選択された視点画像を、画像データ処理部１６で復号化する（ステップＳ３４）。そして、画像データ処理部１６で復号化された多視点画像を表示部２０に表示する（ステップＳ３５）。その後、ｉが最終順位か否かを判断する（ステップＳ３６）。ｉが最終順位である場合は、図３のステップＳ２１へと進む。一方、ｉが最終順位でない場合は、ｉの値をインクリメントし（ステップＳ３７）、ステップＳ３３以降の動作を繰り返す。
【００４６】
背景技術で説明したように、高精細な多視点画像や立体画像を得るためには、多くの視点からの画像を表示部に表示する必要がある。しかしながら、ビュー間予測など、他の画像ビットストリームとの依存関係によって成り立つＭＶＣ等の符号化方式では、いくつかのビットストリームを復号化してからでないと復号化することができないビットストリームがある。このようなビットストリームは、表示する画像が高精細になるほど増加するため、画像再生装置における復号化処理の負荷が大きくなる。
【００４７】
特に、早送り再生や巻き戻し再生などの特殊再生では、現在の再生区間のビットストリームを復号化する前に次の再生区間のビットストリームを復号化しなければならない場合がある。このような特殊再生では、画像再生装置における復号化処理の負荷が大きくなるため、多視点画像を復号化する処理が追いつかず、表示部に画像が表示されない場合があった。
【００４８】
そこで本実施の形態では、表示部２０における多視点画像の表示方向２５ａ〜２５ｃと、視点画像に含まれる画像識別情報とを対応付けた視点対応情報３４を生成し、生成した視点対応情報３４に基づいて多視点画像を復号化する処理を実行し、復号化された多視点画像の視点画像を所定の表示方向に表示している。よって、表示方向（視聴者の視聴位置に対応）に応じた視点画像を選択的に復号化することができるので、復号化処理の負荷を低減することが可能な画像再生装置、画像再生方法、及びプログラムを提供することができる。特に、本実施の形態では、復号化処理の負荷が大きい特殊再生であっても、高精細な画像を表示部に表示することができる。
【００４９】
また、復号化する視点画像の優先順位を決定することで、視聴者の視聴位置に対応した画像データの読込み、復号化処理、及びデータ伝送量を低減することができる。よって、画像データ処理部１６における復号化処理の負荷を低減することができる。
【００５０】
また、特殊再生の場合は、すべての視点画像を復号化する前に再生位置の変更がなされる。この場合は、途中の視点画像で復号化を中断し、指定された再生位置まで移動して、優先順位にしたがって優先順位の上位の視点画像から復号化を行う。このような動作によって、優先順位で上位の特定の視点画像のみが再生される状態となり、特殊再生など復号化処理の負荷が大きい処理でも、高精細な画像を途切れることなく再生することができる。また、任意の再生時間の画像を頭出しする場合でも、再生画像が出るまでの時間を最短にすることができる。
【００５１】
上述の実施の形態では、画像再生装置をハードウェアの構成として説明したが、本発明は、これに限定されるものではない。本発明は、任意の処理を、ＣＰＵ（Central Processing Unit）にコンピュータプログラムを実行させることにより実現することも可能である。
【００５２】
以上、本発明を上記実施の形態に即して説明したが、本発明は上記実施の形態の構成にのみ限定されるものではなく、本願特許請求の範囲の請求項の発明の範囲内で当業者であればなし得る各種変形、修正、組み合わせを含むことは勿論である。
【符号の説明】
【００５３】
１  画像再生装置
１１  画像データ記憶部
１２  撮影情報取得部
１３  視点対応情報生成部
１４  表示方向情報取得部
１５  データ処理部
１６  画像データ処理部
１７  画像データ選択部
１８  優先順位決定部
２０  表示部
２１  視聴位置情報取得部
２２  インターフェース
２５ａ〜２５ｃ  表示方向
２６ａ〜２６ｃ  視聴者
３１  多視点画像データ
３２  撮影位置情報
３３  表示方向情報
３４  視点対応情報
３５  視聴位置情報
３６  多視点画像
【図１】
2015195515.tif 000003
【図２】
2015195515.tif 000004
【図３】
2015195515.tif 000005
【図４】
2015195515.tif 000006
【図５】
2015195515.tif 000007
【図６】
2015195515.tif 000008