(57)【特許請求の範囲】
【請求項１】
動画を記録し、前記記録された動画を再生する機能を備えると共に、前記動画に関連する画像をインデックス表示する機能を備える動画表示装置において、
前記動画を駒落ちしたインデックス用動画を記録するインデックス用動画記録手段と、前記記録されたインデックス用動画をインデックス表示するインデックス用動画再生手段を備え、
前記動画表示装置に係る画像データの記録フォーマットは、少なくとも、前記動画のヘッダ情報を記録する領域と、前記動画の記録と同時に前記動画を駒落ちしたインデックス用動画およびそのヘッダ情報を記録する領域と、からなるヘッダ領域を有し、
前記インデックス用動画およびそのヘッダ情報を記録する領域に書かれている、タイムスタンプと何倍で再生するかを表す倍数が記録された倍数情報とに基づいて、インデックス用動画の再生途中から、この再生途中のインデックス用動画と一番近い画像データからの動画再生をスタートさせることを特徴とする動画表示装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、動画表示装置に係わり、特に、動画カメラ等の動画表示装置においてインデックス表示機能を改善した動画表示装置に関する。
【０００２】
【従来技術】
従来、動画カメラ等においてインデックス表示する場合は、図５に示すように、静止画のインデックス表示と同様に、動画の先頭画像や動画の途中画像を複数枚静止画として並べるものであった。従って、利用者は動画を再生する際には、このようなインデックス表示された静止画を見て所望の動画を予測し選択し再生していた。
【０００３】
図６は、従来の動画カメラにおける動画データの記録フォーマットの一例を示す図である。
【０００４】
同図に示すように、この記録フォーマットでは、へッダー領域３０１、画像タイムスタンプ領域３０２、およびフレームデータ領域３０３から構成され、さらに音声が入る場合には、音声タイムスタンプ領域３０４および音声データ領域３０５を有している。
【０００５】
【発明が解決しようとする課題】
ところで、従来の静止画によるインデックス表示では、動画が時々刻々と変化するものであるため先頭の静止画や途中の静止画を見ただけではその先に何が写っているかを予測することは難しく、実際再生して見ると自分の予測していた動画とは違っていたということが多々起こっていた。
【０００６】
そこで、動画によってインデックス表示することが考えられるが、例えば、１分間の動画をインデックス表示する際に１分かけて表示したのでは、記録されている動画の概要を知ることを目的としたインデックス表示の役目を果たすことはできない。そこで、動画カメラ等のインデックス表示において、記録されている動画を駒落とし形式で再生したり、または駒落とし形式で記録されたものを再生することにより、短時間で記録されている動画の概要を理解することが可能となる。ここで、前者の方法では従来撮影されたデータフォーマットにおいても実現可能なものであり、例えば、動画においてＭＰＥＧ圧縮を用いている場合には、それぞれのフレームはＩピクチャ、Ｐピクチャ、Ｂピクチャ等から構成されているので、このうちＩピクチャによって画像単体を再生することにより、この画像のみを再生することによりインデックス表示において動画を駒落としして再生することが可能である。しかし、このＩピクチャは、圧縮率により間隔が異なってくるため、圧縮率の異なる画像毎にインデックス表示上での再生時間が異なってきてしまい、前者の方法では問題がある。
【０００７】
本発明の目的は、上記の種々の問題点に鑑みて、動画撮影の際に、通常撮影と同時に駒落とし形式でのインデックス用動画を記録し、このインデックス用動画を動画データのへッダー領域に埋め込み、動画表示装置においてインデックス表示する際に、インデックス用動画を再生することにより短時間で所望の動画の概要を理解することを可能にした動画表示装置を提供することにある。
【０００８】
【課題を解決するための手段】
本発明は、上記の課題を解決するために、動画を記録し、前記記録された動画を再生する機能を備えると共に、前記動画に関連する画像をインデックス表示する機能を備える動画表示装置において、
前記動画を駒落ちしたインデックス用動画を記録するインデックス用動画記録手段と、前記記録されたインデックス用動画をインデックス表示するインデックス用動画再生手段を備え、
前記動画表示装置に係る画像データの記録フォーマットは、少なくとも、前記動画のヘッダ情報を記録する領域と、前記動画の記録と同時に前記動画を駒落ちしたインデックス用動画およびそのヘッダ情報を記録する領域と、からなるヘッダ領域を有し、
前記インデックス用動画およびそのヘッダ情報を記録する領域に書かれている、タイムスタンプと何倍で再生するかを表す倍数が記録された倍数情報とに基づいて、インデックス用動画の再生途中から、この再生途中のインデックス用動画と一番近い画像データからの動画再生をスタートさせる、
ように構成される。
【００１６】
【発明の実施の形態】
以下に、本発明の一実施形態を図１乃至図４を用いて説明する。
【００１７】
図１は、本実施形態に係る動画表示装置の一例としての動画カメラの構成を示すブロック図である。
【００１８】
同図において、２０１はＣＣＤ，ＡＧＣ等を含む画像入力部、２０２はＹ（輝度）信号、Ｕ（赤の色差）信号、Ｖ（青の色差）信号からなるＹＵＶ信号を生成する信号処理部、２０３はシステム全体を制御するシステム制御部、２０４はＤＭＡ（ｄｉｒｃｔ  ｍｅｍｏｒｙ  ａｃｃｅｓｓ）コントローラ、２０５はメモリ、２０６はキー入力等を扱うユーザーインターフェイス、２０７は画像圧縮伸張部、２０８は圧縮データをメディアに記録、読み出しする記録読み出し部、２０９は記録媒体、２１０は表示部インターフェイス（ＩＦ）、２１１はディスプレイである。
【００１９】
図２は、上記のシステム制御部２０３の詳細な構成を示すブロック図である。
【００２０】
同図において、１０１は動画データのへッダーを作成するヘッダー生成部、１０２は信号処理部２０２を制御する信号処理部制御部、１０３は表示部ＩＦ２０６を制御する表示ＩＦ制御部、１０４はＤＭＡコントローラ２０４を制御するＤＭＡコントローラ制御部、１０５はシステム制御部２０３全体の制御を行うＣＰＵ、１０６は記録読出し部２０８を制御する記録読出し部制御部、１０７は画像圧縮伸張部２０７を制御する画像圧縮伸張部制御部、１０８はユーザーインターフェイス２０６を制御するユーザーインターフェイス制御部、１０９はプログラムメモリ、１１０は音声コーデック制御部、１１１は画像圧縮伸張部制御部１０７に設けられるインデックス圧縮伸張制御部である。
【００２１】
図３は、上記の記録媒体２０９に記録される動画データおよびインデックス用動画データの記録フォーマットを示す図である。
【００２２】
同図に示すように、この記録フォーマットは、へッダー領域３０１、画像タイムスタンプ領域３０２、およびフレームデータ領域３０３から構成されると共に、音声を入れる場合には、音声タイムスタンプ領域３０４および音声データ領域３０５で構成され、ここまでの構成は従来のものと相違しないが、本実施形態では、さらにへッダー領域３０１にインデックス用の動画領域を設ける。
【００２３】
このインデックス用の動画領域は、インデックス用のへッダー領域３０６、画像タイムスタンプ領域３０７、フレームデータ領域３０８、およびインデックス用のへッダー領域３０６に設けられる倍数情報領域３０９とから構成される。なお、音声についてはインデックス用のデータは持たない。
【００２４】
このように、本実施形態の記録フォーマットでは、ヘッダー情報には、動画とインデックス用に記録されたインターバル動画のヘッダー情報が含まれており、インデックス用のデータには音声データは含まれない以外は通常のデータフォーマットと同じである。インデックス用ヘッダー領域３０６の情報によりインデックス用動画の再生が行われる。タイムスタンプ領域３０７の後にフレームデータ領域３０８を有し、また、インデックス用のへッダー領域３０６の倍数情報領域３０９には、何倍で再生するかを表す倍数が記録される。この倍数情報はインデックス再生途中から通常再生に入るときに用いられる。
【００２５】
図４は、上記のディスプレイ２１１に表示されるインデックス表示画面４０１を示す図である。
【００２６】
同図において、インデックス表示画面４０１には複数の動画１〜９の表示が可能となっている。
【００２７】
次に、本実施形態に係る動画表示装置における記録および再生動作について図１乃至図４を用いて説明する。
【００２８】
通常の動画の記録は、図示せぬユーザによって、撮影開始の命令がユーザーインターフェイス２０６に入力され、システム制御部２０３に備えたユーザーインターフェイス制御部１０８を経由して、ＣＰＵ１０５に入力され、入力されたデータに基づいて撮影が行われる。
【００２９】
撮影された被写体（図示せず）の光信号は画像入力部２０１に入力され、光電変換されてアナログ映像信号となり、ＡＧＣ等の処理を施され信号処理部２０２へ出力にされる。信号処理部２０２に入力にされた映像信号は、Ａ／Ｄ変換されデジタル信号に変換されるとともに、ガンマ補正，フィルタリング，輪郭強調処理等の処理が施され、ＹＵＶ信号が生成される。システム制御部２０３は、内部に備えたＣＰＵ１０５がプログラムメモリ１０９のプログラムに基づいて、信号処理部制御部１０２，ＤＭＡコントローラ制御部１０４を制御し、生成されたＹＵＶ信号をＤＭＡコントローラ１０４を介してメモリ２０５に記憶する。
【００３０】
メモリ２０５に記憶されたデジタル映像信号は、ＤＭＡコントローラ２０４を介して画像圧縮伸張部２０７へ読み出され圧縮処理される。これは、ＣＰＵ１０５がＤＭＡコントローラ制御部１０４に命令することによって、ＤＭＡコントローラ２０４が制御され、またＣＰＵ１０５が画像圧縮伸張部制御部１０７を介して画像圧縮伸張部２０７へ圧縮命令がなされることで行われる。図３に示すタイムスタンプ３０２はこの画像圧縮伸張部２０７で付加される。システム制御部２０３と画像圧縮伸張部２０７は圧縮・伸張開始等の制御信号、および圧縮・伸張終了等の応答信号でやり取りを行う。圧縮処理されたデータは、一旦メモリ２０５に記憶される。
【００３１】
また、音声データはマイク２１３より入力され音声コーデック２１２により圧縮され、タイムスタンプ３０４が付けられた後に一旦メモリ２０５に格納される。
【００３２】
その後、音声および画像の各データは、システム制御部２０３のヘッダー生成部１０１によりフォーマットに従って作成されるヘッダー情報と共に、記録読出し部２０８に送られ記録媒体２０９に記録される。この際、音声データ、画像データの順番はタイムスタンプ３０２，３０４の時系列順となるため、音声、画像のデータ順は不規則となる。
【００３３】
この際の制御もシステム制御部２０３により行われ、ＣＰＵ１０５の画像圧縮伸張部制御部１０７，ＤＭＡコントローラ制御部１０４，へッダー生成部１０１，記録読出し部制御部１０６の制御にて行われる。記録読出し部２０８は、記録読出し部制御部１０６へ終了等の制御信号を通知する。長い動画記録の場合は、数回に分けて圧縮が行われ、記録媒体２０９に記録する時に、１つのフアィルとして記録される。従って、この場合、へッダーはヘッダー情報がそろったときに１回だけ付けられる。
【００３４】
また、同時にシステム制御部２０３のＣＰＵ１０５が表示ＩＦ制御部１０３を制御することにより、表示インターフェイス（ＩＦ）２１０が制御され、信号処理部２０２より取り込まれたメモリ２０５上の画像は、表示インターフェイス（ＩＦ）２１０を介して、ディスプレイ２１１に表示される。表示インターフェイス２１０は、ＯＳＤＣ（０ｎ  Ｓｃｒｅｅｎ  Ｄｉｓｐｌａｙ  Ｃｏｎｔｒｏｌ）機能を備えており、メモリ２０５上のＯＳＤ表示データ領域に表示したいデータを書き込むことで、ＯＳＤ表示ができる。
【００３５】
次に、インデックス用動画の記録は、通常の画像の記録と同時に、通常の動画の駒落とししたインデックス用動画として圧縮し記録される。インデックス画像圧縮伸張制御部１１１は駒落しを行いながら画像の圧縮を行い、図３に示す記録フォーマットのへッダー領域３０１に記録する。この処理は上記の通常の画像の撮影とほぼ同時に行われ、ＣＰＵ１０５が画像圧縮伸張部制御部１０７に対して命令を出して行ったと同様に、ＣＰＵ１０５がインデックス画像圧縮伸張制御部１１１に対して命令を出し、圧縮伸張を行う。通常の画像撮影と異なる点は、駒落としを行うために、命令数が少なくなることであり、例えば、倍数情報領域３０９に１０倍速でインデックス再生を行うように設定されている場合は、通常撮影の１／１０の命令がインデックス画像圧縮伸張制御部１１１に送られることになる。このインデックス用データの圧縮タイミングは、通常画像圧縮時とほぼ同時刻となるが、通常画像の圧縮数フレームに対して１フレーム圧縮が行われるので、通常画像の圧縮に支障をきたすことはない。インデックス用データの圧縮伸張処理は処理系統が２つあれば並列に行うこともできるが、１系統の場合には通常画像圧縮処理との処理時間を時分割して行う。つまり通常画像圧縮処理の合間を縫って行われることになる。
【００３６】
インデックス用動画の記録は、上記したように駒落としを行った画像であるが、これを通常の再生スピードで再生すると、早再生を行える。例えば、インデックス表示における動画の再生時間を１０倍とし、再生時のフレームレートを１０フレーム／秒とした場合には、１秒間隔で撮影し、再生時間間隔が１／１０秒となるようなタイムスタンプをもつデータをインデックス用データとしてメモリ２０５に記録しておき、これを再生すると１０倍速のインデックス用動画を１０フレーム／秒で再生することができる。なお、インデックス用画像を記録する際には、インデックス用のヘッダー領域３０６の倍数情報領域３０９に倍数情報（１０倍）も記録しておく。この倍数情報は、タイムスタンプに乗算することで実際の時間を知ることができるため、通常画像においてどの画像に相当するかを知ることができる。
【００３７】
また、ヘッダー領域３０１に記録されるインデックス用動画はインデックス表示における再生のみを目的としているので、このときの圧縮レートをできるだけ押さえ、通常圧縮に比べてＤＣＴ変換した後の量子を高周波成分が落ちるように行う。これは、図４に示すようにインデックス用の動画１〜９のサイズが、通常動画サイズの１／９（ただし、表示枚数によって異なる）になり、高周波成分が必要なくなるためである。
【００３８】
次に、インデックス用動画の再生動作について説明する。
【００３９】
インデックス表示は、初期状態では図４に示すように複数枚の動画１〜９を１枚のインデックス表示画面４０１上に並べられたものが表示される。それぞれの動画１〜９は通常撮影された動画の先頭または途中のものが表示されている。ここで、ユーザがインデックス表示された画像１〜９のいずれかを選択すると、例えば、選択された動画２についてインデックス用動画の再生が行われる。この再生に使用される画像データはへッダー領域３０１に組み込まれたものを用いるので、１０倍での撮影が記録されていれば１０倍の速度で再生される。再生時のデータの流れについては、以下に示す通常再生の場合とほぼ同等であり、異なる点は音声再生がないこととへッダー領域３０１内の画像データが再生されるという点である。また、通常再生と同様の動作を行わせることができるので、高速再生や高速逆再生もでき、さらに動画の概要を把握し易やすくなる。
【００４０】
通常動画の再生動作は、図４に示すインデックス表示画面４０１上で動画１〜９の中から選択された画像について、通常動画を再生するためにキー操作等の所定の操作を行うことによって開始される。通常動画の再生のスタート地点は、インデックス表示された動画の先頭からスタートしたり、またインデックス表示された動画再生の途中からスタートすることもできるが、このような場合は、インデックス用データ上に書かれているタイムスタンプ３０７とインデックス用へッダー領域３０６に記録されている倍数情報（１０倍）３０９を利用して、この倍数にタイムスタンプを乗じることにより、インデックス表示の再生時点が通常動画のどの地点に位置するかを知ることができる。そのため、通常動画データのタイムスタンプを検索していき、一番近い画像データ（計算した再生時点より前のものを選ぶ）でＩピクチャである画像データから再生を開始することができる。
【００４１】
なお、インデックス表示画面４０１には複数のインデックス用の動画を同時に再生表示すると共に、その中から選択したインデックス用動画に係わる通常動画の再生を行なうようにすることもできる。
【００４２】
さらに、インデックス表示によって選択された通常動画のデータは、記録媒体２０９から記録読出し部２０８によって読み出され、ＤＭＡコントローラ２０４を介して、メモリ２０５に書き込まれる。この際の制御もシステム制御部２０３により行われ、ＣＰＵ１０５のＤＭＡコントローラ制御部１０４，記録読出し部制御部１０７の制御によって行われる。メモリ２０５に書き込まれた画像データは、メモリ２０５からＤＭＡコントローラ２０４を介して、画像圧縮伸張部２０７に送られ伸張処理され、再びメモリ２０５へ書き込まれる。この際の制御もシステム制御部２０３により行われ、ＣＰＵ１０５のＤＭＡコントローラ制御部１０４，画像圧縮伸張部制御部１０７への制御によって行われる。
【００４３】
その後、メモリ２０５上の画像データの伸張処理の結果は、ＤＭＡコントローラ２０４を介し、表示インターフェース２１０に送られ、ディスプレイ２１１に通常動画が再生表示される。この制御もシステム制御部２０３により行われ、ＣＰＵ１０５のＤＭＡコントローラ制御部１０４，表示ＩＦ制御部１０３への制御によって行われる。
【００４４】
一方、音声データは音声コーデック２１２に送られ、伸張処理された後、スピーカーに送られる。
【００４５】
以上説明したように、本発明の動画表示装置によれば、インデックス表示上でインデックス用動画の再生を行い、それを見ることによって再生すべき通常動画の概要を知ることができるので、ユーザは再生したい動画を容易に選択することができる。
【００４６】
【発明の効果】
本発明によれば、通常撮影された動画と共に、インデックス用動画を、記録して再生させることができるので、インデックス表示において、インデックス用動画を再生し表示することにより、再生しようとしている動画の概略を容易に知ることができ、ユーザーにとって再生すべき動画を容易に選択することができる。また、従来の画像データの記録フォーマットを大幅に変更することなく、ヘッダ情報を記録する領域に、通常撮影された動画のヘッダ情報と、インデックス用動画およびそのヘッダ情報とを同時に記録することができる。また、インデックス用動画およびそのヘッダ情報を記録する領域に書かれている、タイムスタンプと何倍で再生するかを表す倍数が記録された倍数情報とに基づいて、倍数にタイムスタンプを乗じることにより、インデックス表示の再生時点が通常動画のどの時点に位置するかを知ることができるので、インデックス用動画の再生途中から、この再生途中のインデックス用動画と一番近い画像データからの、通常動画の再生をスタートさせることができる。
【図面の簡単な説明】
【図１】本発明の一実施形態に係る動画表示装置の構成を示すブロック図である。
【図２】図１に示すシステム制御部２０３の詳細な構成を示すブロック図である。
【図３】図１に示す記録媒体２０９に記録される動画データおよびインデックス用動画データの記録フォーマットを示す図である。
【図４】図１に示すディスプレイ２１１に表示されるインデックス表示画面４０１を示す図である。
【図５】従来技術に係るインデックス表示画面を示す図である。
【図６】従来技術に係る動画カメラにおける動画データの記録フォーマットを示す図である。
【符号の説明】
１０１  ヘッダー生成部
１０２  信号処理部制御部
１０３  表示ＩＦ制御部
１０４  ＤＭＡコントローラ制御部
１０５  ＣＰＵ
１０６  記録読出し部制御部
１０７  画像圧縮伸張部制御部
１０８  ユーザーインターフェイス制御部
１０９  プログラムメモリ
１１０  音声コーデック制御部
１１１  インデックス画像圧縮伸張制御部
２０１  画像入力部
２０２  信号処理部
２０３  システム制御部
２０４  ＤＭＡコントローラ
２０５  メモリ
２０６  ユーザーインターフェイス
２０７  画像圧縮伸張部
２０８  記録読み出し部
２０９  記録媒体
２１０  表示インターフェイス
２１１  ディスプレイ
２１２  音声コーデック
２１３  マイク
２１４  スピーカー
３０１  へッダー領域
３０２  タイムスタンプ領域
３０３  フレームデータ領域
３０４  タイムスタンプ領域（音声データ用）
３０５  音声データ領域
３０６  インデックス用へッダー領域
３０７  インデックス用タイムスタンプ領域
３０８  インデックス用フレームデータ領域
３０９  倍数情報領域
４０１  インデックス表示画面
【図１】
0003683462.tif 000002
【図２】
0003683462.tif 000003
【図３】
0003683462.tif 000004
【図４】
0003683462.tif 000005
【図５】
0003683462.tif 000006
【図６】
0003683462.tif 000007