(57)【要約】【課題】３次元動画データの視差量を一覧表示を行うことにより容易に確認する。【解決手段】視差量に応じてサムネイルの位置、又は、大きさを変え、サムネイルを時系列で一覧表示する。【選択図】図５
2016021672.tif 000002
【特許請求の範囲】
【請求項１】
３次元動画データから複数のサムネイルを生成するサムネイル生成手段と、
前記サムネイル生成手段によって生成された複数のサムネイルを時系列で一覧表示する表示手段と、
３次元動画データの各サムネイル位置の視差を取得する視差取得手段と
を有する３次元動画データを再生可能な再生装置において、
前記視差取得手段によって取得した視差量を、一覧表示している各サムネイルに対応づけて、視差量を識別可能に表示するよう制御する表示制御手段を有することを特徴とする再生装置。
【請求項２】
各サムネイルに対応づけるとは、視差量に応じて表示するサムネイルの大きさを変えることを特徴とする請求項１に記載の再生装置。
【請求項３】
各サムネイルに対応づけるとは、視差量に応じて表示するサムネイルの位置を変えることを特徴とする請求項１に記載の再生装置。
【請求項４】
表示されているサムネイルの位置、又は、大きさを変更する変更手段を有し、前記変更手段によってサムネイルの位置、又は、大きさが変更された場合には、３次元動画データの視差量を補正する視差補正手段を有することを特徴とする請求項１に記載の再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、３次元動画データを取り扱うことが可能な再生装置に関し、特に３次元動画データの視差量に応じたサムネイル表示手段を有する再生装置に関するものである。
【背景技術】
【０００２】
近年、撮像装置にレンズを２つ並べて配置し、それぞれのレンズから入力された映像信号を、左右の眼に対して再生し、視差を利用して映像信号を立体的に認識させる３次元撮像装置が提案されている。
【０００３】
また、３次元映像の再生に関し、３次元映像を立体的に認識するため、偏光メガネや電子シャッター付きメガネをかけて視聴する方法や、メガネなしで３次元映像を立体的に認識するため、レンチキュラを用いた方法が提案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平０７−０７５１３５
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記従来例において、左右の眼の視差量によって映像信号を立体的に認識させるため、視差量が適切でない場合や、視差量が急激に変化する場合においては、立体感が適切に出来なかったり、ユーザーが疲労、不快感を感じる場合がある。
【課題を解決するための手段】
【０００６】
本発明は上記の課題を解決するため、請求項１の発明は、３次元動画データから複数のサムネイルを生成するサムネイル生成手段と、前記サムネイル生成手段によって生成された複数のサムネイルを時系列で一覧表示する表示手段と、３次元動画データの各サムネイル位置の視差を取得する視差取得手段とを有する３次元動画データを再生可能な再生装置において、
前記視差取得手段によって取得した視差量を、一覧表示している各サムネイルに対応づけて、視差量を識別可能に表示するよう制御する表示制御手段を有することを特徴とする。
【０００７】
また、請求項２の発明は、各サムネイルに対応づけるとは、視差量に応じて表示するサムネイルの大きさを変えることを特徴とする。
【０００８】
また、請求項３の発明は、各サムネイルに対応づけるとは、視差量に応じて表示するサムネイルの位置を変えることを特徴とする。
【０００９】
また、請求項４の発明は、表示されているサムネイルの位置、又は、大きさを変更する変更手段を有し、前記変更手段によってサムネイルの位置、又は、大きさが変更された場合には、３次元動画データの視差量を補正する視差補正手段を有することを特徴とする。
【発明の効果】
【００１０】
本発明によれば、３次元動画データから複数のサムネイルを生成し、生成したサムネイルを視差量に応じて大きさ、又は、位置を変え、一覧表示することにより、３次元動画データの視差量を一覧で確認することが可能となり、視差変化が容易に確認できる。
【００１１】
また、ユーザー操作によって表示されているサムネイルの位置、大きさを変更することにより、視差量を調整することが可能となるため、視差量が適切でない場合や、視差量が急激に変化する場合に視差を調整することでユーザーが感じる疲労感や不快感を軽減することが可能となる。
【図面の簡単な説明】
【００１２】
【図１】本発明を適用したデジタルカメラの外観図
【図２】本発明を適用したデジタルカメラの構成図
【図３】本発明を適用した視差量に関するメタデータ
【図４】本発明を適用したデジタルカメラの制御フローチャート
【図５】本発明を適用したデジタルカメラの表示制御
【図６】本発明を適用したデジタルカメラの制御フローチャート
【図７】本発明を適用したデジタルカメラの表示制御
【図８】本発明を適用したデジタルカメラの視差調整制御
【発明を実施するための形態】
【００１３】
以下、図面を参照して本発明の好適な実施形態を説明する。
【００１４】
図１に本発明の撮像装置の一例としてのデジタルカメラの外観図を示す。表示部２８は画像や各種情報を表示する表示部である。ＳＴＡＲＴ／ＳＴＯＰスイッチ６１は動画を記録するための撮影指示を行うための操作部である。モードダイアル６０は各種モードを切り替えるための操作部である。コネクタ１１２は接続ケーブルとデジタルカメラ１００とのコネクタである。操作部７０はユーザーからの各種操作を受け付ける各種スイッチ、ボタン、タッチパネル等の操作部材より成る操作部である。
【００１５】
コントローラーホイール７３は操作部７０に含まれる回転操作可能な操作部材である。７２は電源スイッチであり、電源オン、電源オフを切り替える。記録媒体は２００はメモリカードやハードディスク等の記録媒体である。記録媒体スロット２０１は記録媒体２００を格納するためのスロットである。記録媒体スロット２０１に格納された記録媒体２００は、デジタルカメラ１００との通信が可能となる。蓋２０２は記録媒体スロット２０１の蓋である。
【００１６】
図２は、本実施形態によるデジタルカメラ１００の構成例を示すブロック図である。図２において、１０３はフォーカスレンズを含む撮影レンズ、１０１は絞り機能を備えるシャッター、２２は光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像部である。撮影レンズ１０３、シャッター１０１、撮像部２２は、左右それぞれの眼に対する信号を生成するため、２個で構成されている。２３はＡ／Ｄ変換器であり、アナログ信号をデジタル信号に変換する。Ａ／Ｄ変換器２３は、撮像部２２から出力されるアナログ信号をデジタル信号に変換するために用いられる。１０２はバリアであり、デジタルカメラ１００の、撮影レンズ１０３を含む撮像部を覆うことにより、撮影レンズ１０３、シャッター１０１、撮像部２２を含む撮像系の汚れや破損を防止する。
【００１７】
２４は画像処理部であり、Ａ／Ｄ変換器２３からのデータ、又は、メモリ制御部１５からのデータに対し所定の画素補間、縮小といったリサイズ処理や色変換処理を行う。また、画像処理部２４では、撮像した画像データを用いて所定の演算処理が行われ、得られた演算結果に基づいてシステム制御部５０が露光制御、測距制御を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理が行われる。画像処理部２４では更に、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。
【００１８】
また、画像処理部２４は、左右のそれぞれの眼に対する画像データを合成し、立体視が可能な３次元画像データを生成する。また、３次元画像データの生成時に画像データの一定時間毎に視差量を算出し、システム制御部５０が算出した視差量をメタデータとして、後述する記録媒体２００に記録を行う。
【００１９】
また、画像処理部２４は、画像データを読み出し、サムネイルファイルを生成する。サムネイルファイルの生成方法として、読み出した画像データをデコード、復号化し、復号化された画像データの任意のフレームを抽出し、任意のサイズにリサイズを行いＪＰＥＧデータとして符号化してサムネイルファイルを生成する。
【００２０】
Ａ／Ｄ変換器２３からの出力データは、画像処理部２４及びメモリ制御部１５を介して、或いは、メモリ制御部１５を介してメモリ３２に直接書き込まれる。メモリ３２は、撮像部２２によって得られＡ／Ｄ変換器２３によりデジタルデータに変換された画像データや、表示部２８に表示するための画像データを格納する。メモリ３２は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。
【００２１】
また、メモリ３２は画像表示用のメモリ（ビデオメモリ）を兼ねている。１３はＤ／Ａ変換器であり、メモリ３２に格納されている画像表示用のデータをアナログ信号に変換して表示部２８に供給する。こうして、メモリ３２に書き込まれた表示用の画像データはＤ／Ａ変換器１３を介して表示部２８により表示される。表示部２８は、ＬＣＤ等の表示器上に、Ｄ／Ａ変換器１３からのアナログ信号に応じた表示を行う。Ａ／Ｄ変換器２３によって一度Ａ／Ｄ変換されメモリ３２に蓄積されたデジタル信号をＤ／Ａ変換部１３においてアナログ変換し、表示部２８に逐次転送して表示することで、電子ビューファインダ（スルー画像表示）として機能する。
【００２２】
不揮発性メモリ５６は、電気的に消去・記録可能なメモリであり、例えばＥＥＰＲＯＭ等が用いられる。不揮発性メモリ５６には、システム制御部５０の動作用の定数、プログラム等が記憶される。ここでいう、プログラムとは、本実施形態にて後述する各種フローチャートを実行するためのプログラムのことである。
【００２３】
５０はシステム制御部であり、デジタルカメラ１００全体を制御する。前述した不揮発性メモリ５６に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。５２はシステムメモリであり、ＲＡＭが用いられる。システムメモリ５２には、システム制御部５０の動作用の定数、変数、不揮発性メモリ５６から読み出したプログラム等を展開する。また、システム制御部はメモリ３２、Ｄ／Ａ変換器１３、表示部２８等を制御することにより表示制御も行う。
【００２４】
システムタイマー５３は各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。
【００２５】
モード切替スイッチ６０、ＳＴＡＲＴ／ＳＴＯＰスイッチ６１、操作部７０はシステム制御部５０に各種の動作指示を入力するための操作手段である。
【００２６】
モード切替スイッチ６０は、システム制御部５０の動作モードを静止画記録モード、動画記録モード、再生モード等のいずれかに切り替える。
【００２７】
ＳＴＡＲＴ／ＳＴＯＰスイッチ６１は、動画記録の開始、停止の動作を行う。
【００２８】
操作部７０の各操作部材は、表示部２８に表示される種々の機能アイコンを選択操作することなどにより、場面ごとに適宜機能が割り当てられ、各種機能ボタンとして作用する。機能ボタンとしては、例えば終了ボタン、戻るボタン、画像送りボタン、ジャンプボタン、絞込みボタン、属性変更ボタン、画像輪郭強調ボタン、フォーカス位置拡大ボタン等がある。例えば、メニューボタンが押されると各種の設定可能なメニュー画面が表示部２８に表示される。利用者は、表示部２８に表示されたメニュー画面と、４方向ボタンやＳＥＴボタンとを用いて直感的に各種設定を行うことができる。
【００２９】
コントローラホイール７３は、操作部７０に含まれる回転操作可能な操作部材であり、方向ボタンと共に選択項目を指示する際などに使用される。コントローラホイール７３を回転操作すると、操作量に応じて電気的なパルス信号が発生し、このパルス信号に基づいてシステム制御部５０はデジタルカメラ１００の各部を制御する。このパルス信号によって、コントローラホイール７３が回転操作された角度や、何回転したかなどを判定することができる。
【００３０】
なお、コントローラホイール７３は回転操作が検出できる操作部材であればどのようなものでもよい。例えば、ユーザの回転操作に応じてコントローラホイール７３自体が回転してパルス信号を発生するダイヤル操作部材であってもよい。また、タッチセンサよりなる操作部材で、コントローラホイール７３自体は回転せず、コントローラホイール７３上でのユーザの指の回転動作などを検出するものであってもよい（いわゆる、タッチホイール）。
【００３１】
８０は電源制御部であり、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部８０は、その検出結果及びシステム制御部５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２００を含む各部へ供給する。
【００３２】
３０は電源部であり、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。１８はメモリカードやハードディスク等の記録媒体２００とのインターフェースである。記録媒体２００は、メモリカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。
【００３３】
次に図３に基づいて、本発明を実施した記録媒体２００に記録された視差量のメタデータのファイル形式について説明する。図３のＩには、動画像のファイルパスを示す情報を記載する。図３のＩＩには、動画像のタイムスタンプを記載する。図３のＩＩＩには、ＩＩに記載のタイムスタンプにおける視差量を記載する。
【００３４】
次に図４に基づいて、本発明を実施したサムネイル表示について説明する。図４は視差量に応じてサムネイルの大きさを変更し表示するフローチャートである。
【００３５】
ステップ４０１において、システム制御部５０表示する対象の画像が３次元動画像か否かを判断する。３次元動画像と判断した場合はステップ４０３へ進む。３次元動画像で無い場合にはステップ４０２へ進む。
【００３６】
ステップ４０２において、３次元動画像で無いと判断された場合、あらかじめ決められている値でサムネイルのリサイズ処理を行う。処理が終了すれば、ステップ４０６へ進む。
【００３７】
ステップ４０３において、一定時間毎に動画像からサムネイルを生成する。処理が終了すれば、ステップ４０４へ進む。
【００３８】
ステップ４０４では生成したサムネイルの位置における視差量を記録媒体２００に記録されているメタデータから読みだす。処理が終了すれば、ステップ４０５へ進む。
【００３９】
ステップ４０５では読みだした視差量に応じたサイズにサムネイルのリサイズ処理を行う。メタデータ記載の視差量の最大値と最小値を参照し、リサイズを行うサムネイルサイズを、最大値と最小値を基準とし相対的に視差量が大きいほど大きくする。処理が終了すれば、ステップ４０６へ進む。
【００４０】
ステップ４０６では、リサイズされたサムネイルの表示を行う。
【００４１】
次に図５に基づいて、本発明を実施したサムネイル表示について説明する。図５は視差量に応じてサムネイルの大きさを変え、時系列に一覧表示している図である。図５に示すように、視差量が大きいほどサムネイルのサイズを大きくすることにより、動画像の視差の変化を容易に認識することが可能となる。
【００４２】
次に図６に基づいて、本発明を実施したサムネイル表示について説明する。図６は視差量に応じてサムネイルの表示位置を変更し表示するフローチャートである。
【００４３】
ステップ６０１において、システム制御部５０表示する対象の画像が３次元動画像か否かを判断する。３次元動画像と判断した場合はステップ６０３へ進む。３次元動画像で無い場合にはステップ６０２へ進む。
【００４４】
ステップ６０２において、３次元動画像で無いと判断された場合、サムネイルの表示位置をあらかじめ決められている値に設定する。処理が終了すれば、ステップ６０７へ進む。
【００４５】
ステップ６０３において、一定時間毎に動画像からサムネイルを生成する。処理が終了すれば、ステップ６０４へ進む。
【００４６】
ステップ６０４では生成したサムネイルの位置における視差量を記録媒体２００に記録されているメタデータから読みだす。処理が終了すれば、ステップ６０５へ進む。
【００４７】
ステップ６０５では読みだした視差量に応じてサムネイルの表示位置の算出を行う。
メタデータ記載の視差量の最大値と最小値を参照し、サムネイルの表示位置を、最大値と最小値を基準とし相対的に視差量が大きいほど表示部２８の下側方向へ配置されるよう位置算出を行う。処理が終了すれば、ステップ６０６へ進む。
【００４８】
ステップ６０６では、サムネイルの表示位置をステップ６０５で算出された値に設定する。処理が終了すれば、ステップ６０７へ進む。
【００４９】
ステップ６０７では、設定されている表示位置にサムネイルの表示を行う。
【００５０】
次に図７に基づいて、本発明を実施したサムネイル表示について説明する。図７は視差量に応じてサムネイルの表示位置を変え、時系列に一覧表示している図である。
【００５１】
図７に示すように、視差量が大きいほどサムネイルを下側方向へ表示配置することにより、動画像の視差の変化を容易に認識することが可能となる。
【００５２】
次に図８に基づいて、本発明を実施した視差調整方法について説明する。図８は操作部７０のタッチパネルを介して、ユーザ操作によりサムネイルの位置を変更し、視差調整を行う方法を示す図である。
【００５３】
図８のＩに示すようにユーザーが操作部７０のタッチパネルを介して視差調整を行いたい位置のサムネイルを上へ動かすことにより、視差量を小さく補正することが可能である。また、サムネイルを下へ動かすことにより、視差量を大きくすることも可能である。
【００５４】
サムネイルを動かすとＩＩに示すように調整前の視差量ＸＸと調整後の視差量ＹＹを表示部２８へ表示する。また、記録媒体２００に記録されているメタデータを調整後の視差量ＹＹで更新処理を行う。また、画像処理部２４を介し、補正した視差量を用いて動画像の画像処理を行い、視差量の調整を行う。
【００５５】
（他の実施形態）
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。
【符号の説明】
【００５６】
１３  Ｄ／Ａ、１５  メモリ制御部、１８  Ｉ／Ｆ、２２  撮像部、２３  Ａ／Ｄ、
２４  画像処理部、２８  表示部、３０  電源部、３２  メモリ、
５０  システム制御部、５２  システムタイマー、５３  システムメモリ、
５６  不揮発性メモリ、６０  モード切替スイッチ、
６１  ＳＴＡＲＴ／ＳＴＯＰスイッチ、７０  操作部、７２  電源スイッチ、
８０  電源制御部、１００  デジタルカメラ、１０１  シャッター、
１０２  バリア、１０３  レンズ、１１１  ケーブル、１１２  コネクタ、
２００  記録媒体、２０１  記録媒体スロット、２０２  蓋
【図４】
2016021672.tif 000003
【図６】
2016021672.tif 000004
【図１】
2016021672.tif 000005
【図２】
2016021672.tif 000006
【図３】
2016021672.tif 000007
【図５】
2016021672.tif 000008
【図７】
2016021672.tif 000009
【図８】
2016021672.tif 000010