(57)【要約】【課題】全方位映像の再生において、ユーザーが意図せず輝度値の最も高い視点方向から再生を開始した場合のユーザーストレスを、撮影時の臨場感を損なうことなく低減できる、表示装置を提供すること。【解決手段】映像データを送出する映像送出機と、映像データを受信し表示する映像表示機と、で構成され、全方位映像を仮想空間にマッピングして表示する表示部と、前記全方位映像の光源位置を取得する光源位置取得部と、前記方位映像の再生を開始、停止する再生制御部と、前記光源位置取得部から取得した光源位置から前記表示部に表示する前記全方位映像の範囲を決定する映像表示範囲決定手段と、を備えることを特徴とする。【選択図】図１
2019179048.tif 000002
【特許請求の範囲】
【請求項１】
全方位映像を仮想空間にマッピングして表示する表示部と、
前記全方位映像の光源位置を取得する光源位置取得部と、
前記方位映像の再生を開始、停止する再生制御部と、
前記光源位置取得部から取得した光源位置から前記表示部に表示する前記全方位映像の範囲を決定する映像表示範囲決定手段と、
を備えることを特許とする表示装置。
【請求項２】
前記映像表示範囲決定手段は、前記再生制御部による前記方位映像の再生開始時に、前記方位映像の表示範囲を決定することを特徴とする請求項１に記載の表示装置。
【請求項３】
前記表示装置は更に、前記方位映像の現在再生時刻に対して一定時間後の再生を行うスキップ再生制御部を備え、前記映像表示範囲決定手段は、前記スキップ再生制御部による前記全方位映像の一定時間後の再生開始時に、前記方位映像の表示範囲を決定することを特徴とする請求項１に記載の表示装置。
【請求項４】
前記表示装置は更に、前記スキップ再生制御による一定時間後の再生開始前の光源位置と、前記全方位映像の表示範囲と前記光源との位置関係を記憶する光源位置関係記憶部と、を備え、前記映像表示範囲決定手段は、前記スキップ再生制御部による一定時間後の再生開始時の、前記全方位映像の表示範囲と光源位置との関係が、前記光源位置関係記憶部に記憶した前記全方位映像の表示範囲と前記光源との位置関係と一致するように表示範囲を決定することを特徴とする請求項１又は請求項３に記載の表示装置。
【請求項５】
前記表示装置は更に、撮影時の人物位置を特定する情報を取得する人物位置取得部を備え、前記映像表示範囲決定手段は、前記人物位置取得部で取得した人物位置と前記光源位置取得部で取得した光源位置とから前記表示部に表示する前記全方位映像の範囲を決定することを特徴とする請求項１に記載の表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置及びその制御方法に関する。
【背景技術】
【０００２】
複数の撮像レンズにより全方位の映像（以下、全方位映像と記載する。）を撮影可能な撮像装置が普及している。
【０００３】
一方で、ジャイロセンサーを備えたＨｅａｄ  Ｍｏｕｎｔ  Ｄｉｓｐｌａｙ（以下、ＨＭＤと記載する）では、全方位映像を視聴する際に、ユーザーが上下左右の方向をむくことで任意の視点方向での視聴することが可能となっている。
【０００４】
また、全方位映像はその全方位を撮影できるというその特性から、光源の位置や撮影の条件によってＨＭＤでの視聴時の視点方向による明暗の差が激しいコンテンツとなることもある。
【０００５】
また、光源等の撮影条件から、映像を加工する技術として、特許文献１では、撮影時の光源情報から、映像にグラフィックスを合成する際に、グラフィックスにつける影の付与方法を決定する制御を開示している。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特許第５２１４７３０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上述したように、明暗の差が激しい全方位映像をＨＭＤで視聴する際に、ユーザーが意図せず輝度値の最も高い視点方向から再生を開始した場合に、直ぐに暗部方向に視点方向を移動しても目が順応するまでに時間がかかることでユーザーのストレスとなる可能性がある。
【０００８】
特許文献１の技術では、光源情報から一定値以上の輝度の映像を加工することで暗い映像を生成することで、ユーザーが輝度値の高い映像を視聴することを低減できる。
【０００９】
しかし、先行技術ではオリジナルの映像を加工することによって撮影時の臨場感を損なう可能性があるという課題があった。
【課題を解決するための手段】
【００１０】
（１）上記の課題を解決するために、本発明に係る表示装置は、
全方位映像を仮想空間にマッピングして表示する表示部と、
前記全方位映像の光源位置を取得する光源位置取得部と、
前記方位映像の再生を開始、停止する再生制御部と、
前記光源位置取得部から取得した光源位置から前記表示部に表示する前記全方位映像の範囲を決定する映像表示範囲決定手段と、
を備えることを特徴とする。
【００１１】
（２）上記の（１）において、前記映像表示範囲決定手段は、前記再生制御部による前記方位映像の再生開始時に、前記方位映像の表示範囲を決定することを特徴とする。
【００１２】
（３）上記の（１）において、前記表示装置は更に、前記方位映像の現在再生時刻に対して一定時間後の再生を行うスキップ再生制御部を備え、前記映像表示範囲決定手段は、前記スキップ再生制御部による前記全方位映像の一定時間後の再生開始時に、前記方位映像の表示範囲を決定することを特徴とする。
【００１３】
（４）上記の（１）と（３）において、前記表示装置は更に、前記スキップ再生制御による一定時間後の再生開始前の光源位置と、前記全方位映像の表示範囲と前記光源との位置関係を記憶する光源位置関係記憶部と、を備え、前記映像表示範囲決定手段は、前記スキップ再生制御部による一定時間後の再生開始時の、前記全方位映像の表示範囲と光源位置との関係が、前記光源位置関係記憶部に記憶した前記全方位映像の表示範囲と前記光源との位置関係と一致するように表示範囲を決定することを特徴とする。
【００１４】
（５）上記の（１）において、前記表示装置は更に、撮影時の人物位置を特定する情報を取得する人物位置取得部を備え、前記映像表示範囲決定手段は、前記人物位置取得部で取得した人物位置と前記光源位置取得部で取得した光源位置とから前記表示部に表示する前記全方位映像の範囲を決定することを特徴とする。
【発明の効果】
【００１５】
本発明に係る表示装置によれば、光源情報から再生開始時の視点方向を決定することで、撮影時の臨場感を損なうことなく、輝度の高い視点方向から再生を開始することによるユーザーのストレスを低減する全方位映像の再生が容易となる。
【図面の簡単な説明】
【００１６】
【図１】本発明の実施形態１における表示装置の構成を示すブロック図である。
【図２】本発明の実施形態１における撮像装置の構成を示すブロック図である。
【図３】本発明の実施形態１における表示装置の処理を説明するフロー図である。
【図４】本発明の実施形態２における表示装置の構成を示すブロック図である。
【図５】本発明の実施形態３における表示装置の構成を示すブロック図である。
【図６】本発明の実施形態４における表示装置の構成を示すブロック図である。
【図７】本発明の実施形態４における撮像装置の構成を示すブロック図である。
【図８】本発明の実施形態４における表示装置の処理を説明するフロー図である。
【発明を実施するための形態】
【００１７】
以下、本発明を実施するための形態について、図面を参照しながら説明する。
【００１８】
＜第１の実施形態＞
「表示装置１０１の説明」
図１は、本発明の実施の形態１に係る表示装置１０１の構成を示している。表示装置１０１の各処理部について図１を用いて説明する。
【００１９】
表示装置１０１は、ＨＭＤであり、ユーザーが上下左右の方向を向くことで、全方位映像を任意の視点方向で視聴をすることが可能となる表示装置である。
【００２０】
記憶部１０２は全方位映像を記憶する記憶部である。記憶部１０２は、図示しない通信インターフェース等により全方位映像を外部装置から取り込む。
【００２１】
視点映像生成部１０３は、記憶部１０２から読みだした全方位映像を３６０度空間にマッピングを行う。そして、視点方向決定部１０６で決定された視点方向の範囲の表示映像を生成する処理部である。そして、生成した映像を表示部１０４に送信する。この生成された映像を、以降では再生視点方向映像と記載する。
【００２２】
表示部１０４は、視点映像生成部１０３で生成された映像の表示を行う処理部である。
【００２３】
光源位置情報抽出部１０５は、記憶部１０２に記憶されている全方位映像の各フレームのブランキングエリアに付与されている光源位置情報を抽出する処理部である。光源位置情報とは、全方位映像の各フレームにおいて光源の位置を示す情報である。光源位置情報は、撮像装置２０１によって撮影時に付与される情報である。
【００２４】
視点方向決定部１０６は、表示部１０４に表示する全方位映像の再生視点方向映像となる範囲である視点方向を決定する処理部である。視点方向決定部１０６が決定する視点方向は、ジャイロセンサー１０７により検出したユーザーの向いた方向と、再生開始視点方向決定部１０８で決定される視点方向と、から決定される。視点方向決定部１０６が決定する視点方向について、全方位映像再生中の視点方向は、ジャイロセンサー１０７により検出したユーザーの向いた方向と一致する方向を視点方向とする。ユーザーが再生を開始した場合の再生開始時の視点方向は、再生開始視点方向決定部１０８により決定される。再生開始時の視点方向の決定処理については後述する。
【００２５】
再生開始視点方向決定部１０８は、再生制御受付部１１１が受け付けたユーザーの再生制御と、視点方向切換問合せ部１０９での問合せ結果と、再生停止時視点方向記憶部１１０で記憶されている再生停止時の視点方向と、光源位置情報抽出部１０５が抽出した光源位置情報とから、再生開始時の視点方向を決定する処理部である。再生開始時の視点方向の決定処理については後述する。
【００２６】
視点方向切換問合せ部１０９は、ユーザーに視点方向切換えを行うかの問合せを行う処理部である。問合せ結果は、再生開始視点方向決定部１０８へ通知される。再生開始時の視点方向の決定処理については後述する。
【００２７】
再生停止時視点方向記憶部１１０は、ユーザーが再生を停止した際に、再生停止時の再生視点方向を記憶する処理部である。
【００２８】
再生制御受付部１１１は、ユーザーの図示しないリモコン等による再生制御を受け付ける処理部である。再生制御とは、再生開始、再生停止、早送り、巻戻し、一定時間スキップ再生、など再生に関する制御である。
【００２９】
「撮像装置２０１の説明」
図２は、本発明の実施の形態１に係る撮像装置２０１の構成を示している。撮像装置２０１の各処理部について図２を用いて説明する。
【００３０】
撮像部２０２は、複数のレンズにより取り込まれた被写体の光学像を、撮像素子により画像信号に変換し、アナログデジタル変換、画像調整処理などを行い、全方位映像の画像データを生成する。
【００３１】
記憶部２０３は、光源位置情報付与部２０５により付与された光源位置情報を付与された撮像部２０２から出力される全方位映像を記憶する処理部である。記憶部２０３に記憶された全方向映像は、図示しない通信インターフェースにより表示装置１０１に送信可能である。
【００３２】
光源位置情報取得部２０４は、撮像部２０２で撮影された全方位映像の画素値から光源位置とその輝度値を取得する処理部である。光源位置は画素値の輝度値が高い位置を光源と判定して、その位置と、その位置での輝度値とを、光源位置情報として取得する。光源位置取得部２０４は、取得した光源情報を光源位置情報付与部２０５に送信する。
【００３３】
光源位置情報付与部２０５は、光源位置情報取得部２０４により取得した光源情報を、記憶部２０３に保存されている全方位映像のブランキングエリアに付与する処理部である。
【００３４】
「再生開始時の視点方向の決定処理」
再生開始時の視点方向の決定処理について図３のフロー図を用いて説明する。
【００３５】
表示装置１０１は、再生制御受付部１１１によりユーザーからの再生開始を受け付ける（Ｓ３０２）と、光源位置情報抽出部１０５により、再生対象の全方位映像の光源位置情報を取得する（Ｓ３０３）。
【００３６】
そして、再生開始を行う全方位映像が初回再生である場合（Ｓ３０４がＹＥＳ）は、再生開始視点方向決定部１０８は、光源位置情報抽出部１０５から取得する光源が順光となる視点方向を再生開始時の視点方向と決定する。順光となる視点方向とは、光源となる画素の位置が、視点方向の背後となる位置である。つまり、光源となる画素の位置は表示部１０４には配置されないことになる。また、逆光とは、光源となる画素の位置が、視点方向の正面となる位置である。つまり逆光の場合は、光源となる画素の位置が表示部１０４のほぼ中央の位置となる。再生開始視点方向決定部１０８は、上記順光となる視点方向の範囲で、視点方向を決定する。
【００３７】
そして視点方向決定部１０６は、再生開始視点方向決定部１０８で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向で再生を開始する（Ｓ３０５）。
【００３８】
再生開始を行うコンテンツが初回再生ではない場合（Ｓ３０４がＮＯ）は、表示装置１０１は前回再生停止を行った再生時刻から再生を開始する。このとき、再生開始視点方向決定部１０８は、再生停止時視点方向記憶部１１０より前回再生を停止した時の再生視点方向を取得する（Ｓ３０６）。再生開始視点方向決定部１０８は、再生開始となる再生時刻での再生視点方向を取得し（Ｓ３０６）、かつ、その再生開始時の光源位置情報を光源位置情報抽出部１０５より取得する。
【００３９】
そして、前回再生停止時視点方向記憶部１１０から取得した視点方向が、光源位置に対して逆光となる視点方向である場合（Ｓ３０７がＹＥＳ）、再生開始視点方向決定部１０８は、視点方向切換問合せ部１０９により、ユーザーに「逆光からの再生開始となるが再生開始時の視点方向を前回再生停止時の視点方向から切換えるか」の問合せを行う（Ｓ３０８）。
【００４０】
ユーザーへの問合せの結果ユーザーが視点方向を切換えると選択した場合（Ｓ３０９がＹＥＳ）、再生開始視点方向決定部１０８は、視点方向切換問合せ部１０９により、「視点方向を切換える際に、再生停止時の視点方向をある程度保って視点方向の切換えを行うか」をユーザーに問合せを行う（Ｓ３１０）。
【００４１】
ユーザーへの問合せの結果、ユーザーが視点方向を保つ（Ｓ３１１がＹＥＳ）を選択した場合、再生開始視点方向決定部１０８は、前回再生停止時の視点方向から光源の位置が視野の端に行く程度の視点方向を再生開始時の視点方向と決定する。
【００４２】
そして視点方向決定部１０６は、再生開始視点方向決定部１０８で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向での再生を開始する（Ｓ３１２）。視野の端とは、正面の方向に対して９０度左に回転させた位置とする。一番高い画素の位置が視野の端に行く程度の視点方向で再生を開始することで、再生停止時の視点方向をある程度保ちつつ、輝度値の高い画素が正面にくる視点方向での再生開始を回避することができる。
【００４３】
ユーザーへの問合せの結果、ユーザーが視点方向を保たない（Ｓ３１１がＮＯ）を選択した場合、再生開始視点方向決定部１０８は、光源位置情報抽出部１０５から取得する光源が順光となる視点方向を再生開始時の視点方向と決定する。
【００４４】
そして視点方向決定部１０６は、再生開始視点方向決定部１０８で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向で再生を開始する（Ｓ３１３）。
【００４５】
一方、再生開始視点方向決定部１０８は、前回再生停止時での再生視点方向を取得し（Ｓ３０６）、かつ、その再生開始時刻の光源位置情報を取得した結果、前回再生停止の視点方向が、逆光とならない視点方向である場合（Ｓ３０７がＮＯ）、前回再生停止時での再生視点方向を再生開始時の視点方向と決定する。
【００４６】
そして視点方向決定部１０６は、再生開始視点方向決定部１０８で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向で再生を開始する（Ｓ３１４）。
【００４７】
もしくは、前回再生停止の視点方向が逆光となるが、ユーザーへの問合せの結果ユーザーが視点方向を切換えないと選択した場合（Ｓ３０９がＮＯ）、前回再生停止時での再生視点方向を再生開始時の視点方向と決定する。
【００４８】
そして視点方向決定部１０６は、再生開始視点方向決定部１０８で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向で再生を開始する（Ｓ３１４）。
【００４９】
本実施例では、輝度値の一番高い位置を光源位置として視点方向を決定する処理を行ったが、光源位置の輝度値や、表示装置の種類に応じて、光源位置を考慮して視点の切換えを行うか否かの行ってもよい。
【００５０】
「第１の実施形態の効果」
以上のように、第１の実施形態の表示装置は、再生開始時の視点方向を、撮影時の光源位置の方向と、ユーザーへの問合せ結果から決定することで、再生開始時にいきなり輝度値の高い視点方向から再生することによるユーザーストレスを低減することが可能となる。
【００５１】
＜第２の実施形態＞
図４は、本発明の実施の形態２に係る表示装置４０１の構成を示している。表示装置４０１の各処理部について、図４を用いて説明する。
【００５２】
表示装置４０１において、実施の形態１に係る表示装置１０１と同じ番号の処理部は、表示装置１０１と同等の処理を行う処理部である。
【００５３】
再生開始視点方向決定部４０２は、再生制御部１１１でユーザーが一定時間スキップ再生の指定を行った際の、スキップ後の再生視点方向の決定を行う。スキップ再生は、ユーザーが一定時間の再生時刻を進めて再生を行う再生方法である。再生開始視点方向決定部４０２についての説明を後述する。
【００５４】
スキップ前光源位置関係記憶部４０３は、ユーザーが一定時間スキップ再生の指定を行った際のスキップ前の視点方向と、光源位置との位置関係を記憶する処理部である。
【００５５】
スキップ再生時視点方向モード選択部４０４は、図示しないユーザーインターフェースにより、ユーザーがスキップ再生時視点方向モードを選択する処理部である。
選択できるキップ再生時視点方向モードは、視点方向一定モードと、光源位置関係一定モードである。
【００５６】
再生開始視点方向決定部４０２は、ユーザーが選択したスキップ再生時視点方向モードが視点方向一定モードである場合、スキップ再生前後で視点方向が同一となる視点法をスキップ後の再生視点方向とする。つまり、再生開始視点方向決定部４０２は、撮影時の特定のレンズ正面に対して、スキップ後の再生視点方向が、スキップ前の視点方向と同一となるようにして視点方向を決定する。再生開始視点方向決定部４０２は、ユーザーが選択したスキップ再生時視点方向モードが光源位置関係一定モードである場合、スキップ再生前後で光源位置関係が同一となる視点方向をスキップ後の再生視点方向とする。つまり、再生開始視点方向決定部４０２は、スキップ再生受付時、スキップ前光源位置関係記憶部４０３から取得したスキップ前の光源の位置と視点方方向の位置関係と、スキップ後の光源の位置と視点方方向の位置関係と、が同一となるように視点方向を決定する。
【００５７】
「第２の実施形態の効果」
以上のように、第２の実施形態の表示装置は、スキップ再生時のスキップ後の視点方向を、スキップ前の光源位置と視点方向との位置関係から決定することで、スキップ再生前後での急激な輝度値変化を低減した再生を行うことができる。それによって、ユーザーストレスを低減することが可能となる。
【００５８】
＜第３の実施形態＞
図５は、本発明の実施の形態３に係る表示装置５０１の構成を示している。表示装置５０１の各処理部について、図５を用いて説明する。
【００５９】
表示装置５０１において、実施の形態２に係る表示装置４０１と同じ番号の処理部は、表示装置４０１と同等の処理を行う処理部である。表示装置５０１について、表示装置４０１と異なる処理部は、スキップ前光源位置関係記憶部４０３が存在せず、再生開始視点方向決定部５０２の処理と、スキップ再生時視点方向モード選択部５０３の処理と、が異なる点である。
【００６０】
スキップ再生時視点方向モード選択部５０３は、図示しないユーザーインターフェースにより、ユーザーがスキップ再生時視点方向モードを選択する処理部である。選択できるキップ再生時視点方向モードは、視点方向一定モードと、順光モードである。
【００６１】
再生開始視点方向決定部５０２は、ユーザーが選択したスキップ再生時視点方向モードが視点方向一定モードである場合、スキップ再生前後で視点方向が同一となる視点法をスキップ後の再生視点方向とする。つまり、再生開始視点方向決定部５０２は、撮影時の特定のレンズ正面に対して、スキップ後の再生視点方向が、スキップ前の視点方向と同一となるようにして視点方向を決定する。再生開始視点方向決定部５０２は、ユーザーが選択したスキップ再生時視点方向モードが順光モードである場合、スキップ再生後で光源位置が順光となる視点方向をスキップ後の再生視点方向とする。
【００６２】
「第３の実施形態の効果」
以上のように、第３の実施形態の表示装置は、スキップ再生時のスキップ後の視点方向を、順光となる視点方向とすることで、スキップ再生時のスキップ後に急激に輝度値が高い視点方向で再生を行うことを低減することができる。それによって、ユーザーストレスを低減することが可能となる。
【００６３】
＜第４の実施形態＞
「第４の実施形態の効果」
「表示装置の説明」
図６は、本発明の実施の形態４に係る表示装置６０１の構成を示している。表示装置６０１の各処理部について、図６を用いて説明する。
【００６４】
表示装置６０１において、実施の形態１に係る表示装置１０１と同じ番号の処理部は、表示装置１０１と同等の処理を行う処理部である。
【００６５】
表示装置６０１において、実施の形態１に係る表示装置１０１と異なる点は、人物位置情報抽出部６０３と、撮影モード情報抽出部６０３と、を備え、再生開始処理視点方向決定部６０４の処理が異なる点である。
【００６６】
撮影モード情報抽出部６０３は、記憶部１０２に記憶されている全方位映像の各フレームのブランキングエリアに付与されている撮影モード情報を抽出する処理部である。撮影モード情報とは、全方位映像撮影時の撮影モードを示す情報である。撮影モードの種類は、風景モードと、人物モードと、がある。
【００６７】
撮像装置７０１は、撮影モードが人物モードの場合は撮影時にユーザーが指定した人物を検出し、その人物が全方位映像の各フレームのどの位置に映っているかを座標で示す情報を付与する。撮像装置７０１は、撮影モードが風景モードの場合は人物の検出を行わず、人物の映っている位置の情報は付与しない。
【００６８】
人物位置情報抽出部６０２は、記憶部１０２に記憶されている全方位映像の各フレームのブランキングエリアに付与されている人物位置情報を抽出する処理部である。人物位置情報とは、撮影モードが人物モードである場合に、ユーザーが指定した人物を検出し、その人物が全方位映像の各フレームのどの位置に映っているかを座標で示す情報である。
【００６９】
再生開始視点方向決定部６０４は、再生制御受付部１１１が受け付けたユーザーの再生制御と、視点方向切換問合せ部１０９での問合せ結果と、光源位置情報抽出部１０５から取得した光源位置情報と、撮影モード情報抽出部６０３から取得した撮影モードと、人物位置情報抽出部６０２から取得した人物位置情報と、から、再生開始時時の視点方向を決定する処理部である。再生開始時の視点方向の決定処理については後述する。
【００７０】
「撮像装置の説明」
図７は、本発明の実施の形態４に係る表示装置７０１の構成を示している。
撮像装置７０１の各処理部について、図７を用いて説明する。
【００７１】
撮像装置７０１において、実施の形態１に係る撮像装置２０１と同じ番号の処理部は、撮像装置２０１と同等の処理を行う処理部である。
【００７２】
撮影モード切換部７０２は、ユーザーが図示しないユーザーインターフェースで指定した撮影モードに切換える処理部である。撮影モードは、風景モードと、人物モードと、がある。各モードの説明は前述の通りである。
【００７３】
撮影モード情報付与部７０３は、撮影モード切換部７０２から通知される撮影モードを撮影モード情報として、撮影記録中の全方位映像のブランキングエリアに付与する処理部である。
【００７４】
人物位置検出部７０４は、撮影モード切換部７０２から通知される撮影モードが人物モードである場合に、ユーザーが指定した人物の位置を検出する処理部である。ユーザーはタッチパネル等の図示しないユーザーインターフェース等により検出して欲しい人部を指定する。
【００７５】
人物位置検出部７０４は、撮影された全方位映像を画像解析し、ユーザーが指定した人物とのパターン一致によりユーザーを識別し、全方位映像上のどこにその人物が存在するか検出する。
【００７６】
人物位置情報付与部７０５は、人物位置検出部７０４から通知される人物位置を人物位置情報として、撮影記録中の全方位映像のブランキングエリアに付与する処理部である。
【００７７】
「再生開始時の視点方向の決定処理」
再生開始時の視点方向の決定処理について図８のフロー図を用いて説明する。
【００７８】
表示装置６０１は、再生制御受付部１１１によりユーザーからの再生開始を受け付ける（Ｓ８０２）と、再生開始視点方向決定部１０８は、光源位置情報抽出部１０５により、再生対象のコンテンツの光源位置情報を取得する（Ｓ８０３）。
【００７９】
そして、再生開始視点方向決定部１０８は、撮影モード情報抽出部６０３から撮影モードを取得する（Ｓ８０４）。
【００８０】
撮影モードが人物モードである場合（Ｓ８０５がＹＥＳ）、再生開始視点方向決定部１０８は、人物位置情報抽出部６０２から、全方位映像のどの位置に人物が映っているかの情報を取得する。
【００８１】
そして、再生開始視点方向決定部１０８は、取得した光源位置と人物位置とから、人物の位置を視点方向とした場合に逆光となると判断した場合（Ｓ８０７がＹＥＳ）、再生開始時の視点方向を人物位置の方向とするか？順光となる方向とするか？の問合せを行う（Ｓ８０８）。
【００８２】
問合せの結果、ユーザーが人物位置を視点方向とすると選択した場合（Ｓ８０９がＹＥＳ）、再生開始視点方向決定部６０４は、人物位置の方向を再生開始視点方向と決定する。
【００８３】
そして視点方向決定部１０６は、再生開始視点方向決定部６０４で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向で再生を開始する（Ｓ８１０）。
【００８４】
また、問合せの結果、ユーザーが順光となる視点方向とすると選択した場合（Ｓ８０９がＮＯ、再生開始視点方向決定部６０４は、再生開始視点方向を順光となる視点方向と決定する。
【００８５】
そして視点方向決定部１０６は、再生開始視点方向決定部６０４で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向で再生を開始する（Ｓ８１１）。
【００８６】
また、再生開始視点方向決定部１０８は、取得した光源位置と人物位置とから、人物の位置を視点方向とした場合に逆光とならないと判断した場合（Ｓ８０７がＮＯ）、再生開始視点方向決定部６０４は、人物位置の方向を再生開始視点方向と決定する。
【００８７】
そして視点方向決定部１０６は、再生開始視点方向決定部６０４で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向で再生を開始する（Ｓ８１２）。
【００８８】
また、撮影モードが風景モードである場合（Ｓ８０５がＮＯ）、再生開始視点方向決定部６０４は、再生開始視点方向を順光となる視点方向と決定する。
【００８９】
そして視点方向決定部１０６は、再生開始視点方向決定部６０４で決定された視点方向を視点映像生成部１０３に通知することで、決定された視点方向で再生を開始する。（Ｓ８１３）。
【００９０】
「第４の実施形態の効果」
以上のように、第４の実施形態の表示装置は、撮影モードと、人物検出位置と、光源位置と、ユーザー選択と、から再生開始時の視点方向の決定を行うことで、よりユーザーの要求に応じた視点方向での再生開始が可能となり、ユーザーストレスを低減することが可能となる。
【００９１】
＜その他の実施例＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００９２】
１０１，４０１，５０１，６０１  表示装置、２０１，７０１  撮像装置、
１０２  記憶部、１０３  視点映像生成部、１０４  表示部、
１０５  光源位置情報抽出部、１０６  視点方向決定部、
１０７  ジャイロセンサー、１０８  再生開始視点方向決定部、
１０９  視点方向切換問合せ部、１１０  再生停止時視点方向記憶部、
１１１  再生制御受付部、２０２  撮像部、２０３  記憶部、
２０４  光源位置情報取得部、２０５  光源位置情報付与部、
４０２  再生開始視点方向決定部、４０３  スキップ前光源位置関係記憶部、
４０４  スキップ再生時視点方向モード選択部、５０２  再生開始視点方向決定部、
５０３  スキップ再生時視点方向モード選択部、６０２  人物位置情報抽出部、
６０３  撮影モード情報抽出部、６０４  再生開始視点方向決定部、
７０２  撮影モード切換部、７０３  撮影モード情報付与部、７０４  人物位置検出部、
７０５  人物位置情報付与部
【図１】
2019179048.tif 000003
【図２】
2019179048.tif 000004
【図３】
2019179048.tif 000005
【図４】
2019179048.tif 000006
【図５】
2019179048.tif 000007
【図６】
2019179048.tif 000008
【図７】
2019179048.tif 000009
【図８】
2019179048.tif 000010