(57)【要約】【課題】所望する映像の再生や編集が容易に行う。【解決手段】複数のフレームを含む動画フレームを再生する動画再生装置１００であって、前記動画フレーム内の任意のオブジェクトを選択するオブジェクト選択部２０と、選択したオブジェクトの情報を取得するオブジェクト情報取得部１１と、取得したオブジェクト情報に基づいて前記動画フレームを検索し、選択したオブジェクトを含む画像を抽出するオブジェクト抽出１２と、抽出した画像を再生する動画再生部３０とを備える。【選択図】  図１
2006060279.tif 000002
【特許請求の範囲】
【請求項１】
複数のフレームを含む動画フレームを再生する動画再生装置であって、
前記動画フレーム内の任意のオブジェクトを選択するオブジェクト選択手段と、
選択したオブジェクトの情報を取得するオブジェクト情報取得手段と、
取得したオブジェクト情報に基づいて前記動画フレームを検索し、選択したオブジェクトを含む画像を抽出するオブジェクト抽出手段と、
抽出した画像を再生する再生手段と、
を備える動画再生装置。
【請求項２】
前記オブジェクト情報取得手段は、オブジェクト名を取得する請求項１記載の動画再生装置。
【請求項３】
前記オブジェクト情報取得手段は、オブジェクトの表示開始時間及び表示継続時間または表示終了時間を示す時間情報を取得する請求項１又は２記載の動画再生装置。
【請求項４】
前記オブジェクト選択手段は、レーザーポインタまたはタッチパネルセンサー等の画面に表示されたオブジェクトを直接指示する請求項１から３のいずれか一項記載の動画再生装置。
【請求項５】
前記オブジェクト情報取得手段は、動画再生中に現在表示中のオブジェクトを示すオブジェクト名情報のリストを生成する請求項１から４のいずれか一項記載の動画再生装置。
【請求項６】
前記オブジェクト情報取得手段は、取得したオブジェクト情報を記憶する請求項１から５のいずれか一項記載の動画再生装置。
【請求項７】
前記オブジェクト情報取得手段は、動画ストリーム上にある全てのオブジェクトのオブジェクト情報を予め取得し、オブジェクト管理情報として前記記憶手段に格納する請求項６記載の動画再生装置。
【請求項８】
前記オブジェクト抽出手段は、前記オブジェクト選択手段で選択した複数のオブジェクトの論理積検索を行う請求項１から７のいずれか一項記載の動画再生装置。
【請求項９】
前記オブジェクト抽出手段は、前記オブジェクト選択手段で選択した複数のオブジェクトの論理和検索を行う請求項１から７のいずれか一項記載の動画再生装置。
【請求項１０】
前記オブジェクト抽出手段は、前記オブジェクト選択手段で選択した複数のオブジェクトの論理差検索を行う請求項１から７のいずれか一項記載の動画再生装置。
【請求項１１】
前記オブジェクト抽出手段は、前記論理積検索、前記論理和検索及び前記論理差検索から選択した少なくとも２つを組み合わせによる検索を行う請求項８から１０のいずれか一項記載の動画再生装置。
【請求項１２】
前記オブジェクト抽出手段は、検索したオブジェクトが含まれるシーンの動画像を抽出する請求項１から１１のいずれか一項記載の動画再生装置。
【請求項１３】
前記オブジェクト抽出手段は、検索したオブジェクトが含まれるシーンの動画像から１フレーム画像を抽出する請求項１から１１のいずれか一項記載の動画再生装置。
【請求項１４】
前記オブジェクト抽出手段は、抽出した１フレーム画像のサムネイル画像を生成する請求項１３記載の動画再生装置。
【請求項１５】
前記オブジェクト抽出手段は、抽出した１フレーム画像内のオブジェクトのみのサムネイル画像を生成する請求項１４記載の動画再生装置。
【請求項１６】
前記再生手段は、前記オブジェクト抽出手段で抽出したシーンの動画像を時系列で連続して再生する請求項１から１５のいずれか一項記載の動画再生装置。
【請求項１７】
請求項１記載の動画再生装置を搭載する半導体装置。
【請求項１８】
複数のフレームを含む動画フレームを再生する動画再生プログラムであって、コンピュータを、
前記動画フレーム内の任意のオブジェクトを選択するオブジェクト選択手段、
選択したオブジェクトの情報を取得するオブジェクト情報取得手段、
取得したオブジェクト情報に基づいて前記動画フレームを検索し、選択したオブジェクトを含む画像を抽出するオブジェクト抽出手段、
抽出した画像を再生する再生手段、
として機能させる動画再生プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数のフレームを含む動画フレームを再生する動画再生装置に関する。
【背景技術】
【０００２】
近年は、マルチメディア機器の発達に伴い、ビデオカセットレコーダー、ＤＶＤ（ディジタル多用途ディスク）レコーダー、ビデオカメラといった各種映像機器を用いて、動画情報を自在に記録、蓄積できるようになった。動画の再生や編集が手軽に行えるようになると、今度は、録画した画像の中から所望の映像を即座に的確に検索したいという要求が高まってくる。特定の人物や物体が映っているシーンだけを選んで視聴したい場合、これまでは機器の早送りや巻き戻しの機能を駆使しても、最終的には目視で該当シーンを探す必要があり、映像が長時間になるほど大変な手間と時間がかかり検索作業が煩雑であるという課題があった。
【０００３】
ところで、従来、画像内の撮影対象（以下、オブジェクトと称する）に関連する情報を画像データに付加して記録し、動画再生時にオブジェクト関連情報を提供することができる動画システムが提案されている（例えば、特許文献１参照）。このシステムによれば、動画ストリームと共に少なくとも１個のフレームに関する付加情報を含むストリームを用意することで、画像内のオブジェクトを特定する情報を提供することが可能となる。
【特許文献１】特開２０００−６９４４２号公報（第１１−２６頁、第１図）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記従来の動画システムでは、同システムで録画された動画データから所望するオブジェクトが含まれるシーンを抽出して、再生または編集に供するという応用については言及されていない。
【０００５】
本発明は、所望する映像の再生や編集が容易に行える動画再生装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の動画再生装置は、複数のフレームを含む動画フレームを再生する動画再生装置であって、前記動画フレーム内の任意のオブジェクトを選択するオブジェクト選択手段と、選択したオブジェクトの情報を取得するオブジェクト情報取得手段と、取得したオブジェクト情報に基づいて前記動画フレームを検索し、選択したオブジェクトを含む画像を抽出するオブジェクト抽出手段と、抽出した画像を再生する再生手段とを備える。この構成によれば、オブジェクト情報に基づく検索を行うことで、所望のオブジェクトを含むシーンの動画像を抽出することができる。
【０００７】
本発明において、前記オブジェクト情報取得手段は、オブジェクト名を取得する。この構成によれば、オブジェクト名が一致するシーンの動画像を検出することができる。
【０００８】
本発明において、前記オブジェクト情報取得手段は、オブジェクトの表示開始時間及び表示継続時間または表示終了時間を示す時間情報を取得する。この構成によれば、オブジェクトの表示時間情報に基づいて、オブジェクト名が一致するシーンの動画像や代表的なフレーム画像を抽出することができる。
【０００９】
本発明において、前記オブジェクト選択手段は、レーザーポインタまたはタッチパネルセンサー等の画面に表示されたオブジェクトを直接指示する。この構成によれば、再生中に、表示されているオブジェクトを画面上で直接選択することができる。
【００１０】
本発明において、前記オブジェクト情報取得手段は、動画再生中に現在表示中のオブジェクトを示すオブジェクト名情報のリストを生成する。この構成によれば、オブジェクト名情報のリストから所望のオブジェクトを選択することができる。
【００１１】
本発明において、前記オブジェクト情報取得手段は、取得したオブジェクト情報を記憶する。この構成によれば、記憶したオブジェクト情報を以降のオブジェクト検索で使用することができる。
【００１２】
本発明において、前記オブジェクト情報取得手段は、動画ストリーム上にある全てのオブジェクトのオブジェクト情報を予め取得し、オブジェクト管理情報として前記記憶手段に格納する。この構成によれば、動画データの再生を行わずに、オブジェクト管理情報でオブジェクト情報の検索を行うことができる。
【００１３】
本発明において、前記オブジェクト抽出手段は、前記オブジェクト選択手段で選択した複数のオブジェクトの論理積検索を行う。この構成によれば、複数のオブジェクトに関連する高度なシーン検索が行える。
【００１４】
本発明において、前記オブジェクト抽出手段は、前記オブジェクト選択手段で選択した複数のオブジェクトの論理和検索を行う。この構成によれば、複数のオブジェクトに関連する高度なシーン検索が行える。
【００１５】
本発明において、前記オブジェクト抽出手段は、前記オブジェクト選択手段で選択した複数のオブジェクトの論理差検索を行う。この構成によれば、複数のオブジェクトに関連する高度なシーン検索が行える。
【００１６】
本発明において、前記オブジェクト抽出手段は、前記論理積検索、前記論理和検索及び前記論理差検索から選択した少なくとも２つを組み合わせによる検索を行う。この構成によれば、複数のオブジェクトに関連する高度なシーン検索を組み合わせて行える。
【００１７】
本発明において、前記オブジェクト抽出手段は、検索したオブジェクトが含まれるシーンの動画像を抽出する。この構成によれば、所望のオブジェクトが含まれるシーンの動画像を抽出することができる。
【００１８】
本発明において、前記オブジェクト抽出手段は、検索したオブジェクトが含まれるシーンの動画像から１フレーム画像を抽出する。この構成によれば、所望のオブジェクトが含まれるシーンの中の代表的な静止画像を抽出することができる。
【００１９】
本発明において、前記オブジェクト抽出手段は、抽出した１フレーム画像のサムネイル画像を生成する。この構成によれば、所望のオブジェクトが含まれるシーンの中の代表的な静止画像をサムネイル表示することができる。
【００２０】
本発明において、前記オブジェクト抽出手段は、抽出した１フレーム画像内のオブジェクトのみのサムネイル画像を生成する。この構成によれば、所望のオブジェクトが認識可能に表示されたサムネイル画像とすることができる。
【００２１】
本発明において、前記再生手段は、前記オブジェクト抽出手段で抽出したシーンの動画像を時系列で連続して再生する。この構成によれば、所望のオブジェクトが含まれるシーンの動画像を連続で視聴することができる。
【発明の効果】
【００２２】
本発明によれば、オブジェクト情報に基づく検索を行うことで、所望のオブジェクトを含むシーンの動画像を抽出することができる。
【発明を実施するための最良の形態】
【００２３】
以下、添付図面を参照しながら本発明の実施形態に係る動画再生装置について詳細に説明する。尚、実施の形態を説明するための全図において、同一機能を有するものは同一符号を付与し、説明は繰り返さないこととする。
【００２４】
［実施の形態１］図１は、本発明の実施の形態１における動画再生装置の内部構成を示す図である。動画再生装置１００は、主に、制御部１０、オブジェクト選択部２０、動画再生部３０、メモリ４０、表示部５０、などで構成される。
【００２５】
制御部１０は、動画再生装置全体の動作を統括制御するブロックで、ＣＰＵ、ＲＯＭ、ＲＡＭなどで構成される。制御部１０は更に、画像データに付加されたオブジェクト情報（後述）を、動画再生部３０で再生される動画データ３１から取得するオブジェクト情報取得部１１と、取得したオブジェクト情報に基づいて動画データ３１の検索を行い、当該オブジェクトを含む動画像または代表的な静止画像（フレーム画像）を抽出するオブジェクト抽出部１２を含む。
【００２６】
オブジェクト選択部２０は、再生中の動画像から所望のオブジェクトを選択するブロックで、画面上に表示されたオブジェクトを直接選択するためのレーザーポインタや表示部上に配置されたタッチパネルセンターなどのオブジェクト指示手段２１を含む。また、オブジェクト選択部２０は、画面上に表示されるカーソルを移動させて選択操作を実行するためのマウスやキーボードなどの入力手段も含む。
【００２７】
動画再生部３０は、読み出した動画データ３１の再生処理を行う。圧縮された動画データ３１の伸長及び再生処理は公知の手法を用いてよく、従って動画再生部３０の詳細な構成と動作については説明を省略する。尚、映像や音声など共に動画データに記録されている、画像内のオブジェクトに関するオブジェクト情報もこの動画再生部３０で再生される。また、再生を行う動画データ３１は、動画再生装置に装着された記録媒体（図示省略）から読み込んでもよいし、予めメモリ４０に格納しておき、そこから読み込んでもよい。
【００２８】
メモリ４０は、オブジェクト情報取得部１１が再生した動画データ３１から取得したオブジェクト情報４１や、それらから構成されるオブジェクト管理情報４２を格納する。また、オブジェクト抽出部１２が検索により抽出した部分的な動画データも一時的に格納される。オブジェクト情報４１やオブジェクト管理情報４２の詳細については後述する。
【００２９】
表示部５０は、ＣＲＴや液晶ディスプレイ、有機ＥＬディスプレイなどで構成され、動画再生部３０で再生された動画像または静止画像を出力する。尚、動画再生部３０で画像と共に再生された音声はスピーカ（図示省略）から出力される。
【００３０】
次に、上記構成の動画再生装置１００の画像抽出動作について説明する。尚、ここでは、映像や音声などと共に画像内のオブジェクトに関するオブジェクト情報が記録された動画データを用いる。
【００３１】
はじめに、本動画再生装置で再生する動画データの映像構成について説明する。図２は、本発明の実施の形態１における動画再生装置で再生する動画データの、映像とオブジェクトの関係を説明するタイムチャートである。動画データの映像は開始から３つのシーンで構成され、シーン１は先頭画像１０１を、シーン２は先頭画像１０２を、シーン３は先頭画像１０３を含む。また、画像内にはオブジェクトＡ１０４、オブジェクトＢ１０５、オブジェクトＣ１０６、オブジェクトＤ１０７、が含まれる。
【００３２】
オブジェクトＡ１０４とオブジェクトＢ１０５は、動画の再生開始から０分２０秒後に画面に表示され、オブジェクトＡ１０４は２分３０秒間表示され続ける（シーン１）。オブジェクトＡ１０４が表示されてから２分３０秒後、即ち、動画の再生開始から２分５０秒後、オブジェクトＡ１０４は画面から消え、次にオブジェクトＣ１０６が画面に表示される。一方、オブジェクトＢ１０５は継続して画面に表示される。オブジェクトＢ１０５とオブジェクトＣ１０６はオブジェクトＡ１０４が消えてから１分３０秒間画面に表示され続ける（シーン２）。
【００３３】
オブジェクトＣ１０６が画面に表示されてから１分３０秒後、即ち、動画の再生開始から４分２０秒後、オブジェクトＡ１０４が再び画面に表示される。また、同時にオブジェクトＤ１０７が画面に表示され、オブジェクトＢ１０５とオブジェクトＣ１０６は画面から消える。オブジェクトＡ１０４とオブジェクトＤ１０７が画面に表示されてから１分３０秒後、即ち、動画の再生開始から５分５０秒後に再生映像が終了する（シーン３）。
【００３４】
次に、以上のような映像構成の動画データから、所望のオブジェクトの登場するシーンだけを選んで視聴したい場合の画像抽出動作について説明する。
【００３５】
図３は、本発明の実施の形態１における動画再生装置の画像抽出手順を示すフローチャートである。始めに、動画再生装置の操作者が所定のキーを押下するなどして動画再生開始の操作を実行すると、制御部１０は、動画再生部３０に動画再生を開始させる（ステップＳ１０１）。操作者は、動画再生中に所望のオブジェクトを画面上で選択する。例えば操作者が、オブジェクト指示手段２１であるレーザーポインタを用いて、画面上に表示されているオブジェクトＡ１０４を指示すると（ステップＳ１０２）、オブジェクト選択部２０は、レーザーポインタが指示した画面の座標情報（選択情報）を制御部１０へ出力する（ステップＳ１０３）。オブジェクト抽出部１２は、取得した座標情報から選択されたオブジェクトがオブジェクトＡ１０４であることを把握する（ステップＳ１０４）。
【００３６】
ところで、上記のオブジェクトの指示は様々な方法を用いてよい。例えば、動画再生装置の操作者が画面上のオブジェクトにマウスカーソルを合わせて、マウスのクリック動作でオブジェクトを指定してもよい。また、予め設定された所定のキー押下で現在画面に表示されているオブジェクト名のリストを表示させ、リストからオブジェクトを選択するような構成としてもよい。
【００３７】
図４は、動画再生中に、オブジェクト名のリスト表示が実行されたときの画面表示例を示す図である。動画再生装置の操作者の所定キー押下などによりリスト表示が指示されると、オブジェクト情報取得部１１が現在画面上に表示されているオブジェクトのオブジェクト名リストを生成し、表示部５０に表示する。図の例では、画面上にオブジェクトＡ１０４とオブジェクトＢ１０５が表示されているので、オブジェクトリスト２０１には、オブジェクトＡ１０４を表すオブジェクト名２０２と、オブジェクトＢ１０５を表すオブジェクト名２０３がリスト表示される。また、操作者がオブジェクトを指定するために用いるカーソル２０４も表示される。
【００３８】
操作者がオブジェクトＡ１０４を選択する場合、キー操作などでオブジェクトリスト２０１のオブジェクト名２０２にカーソル２０４を合わせて選択する。カーソル２０４の位置するオブジェクト名に対応するオブジェクトは、図に示すようにカーソル２０５で囲まれ、選択されていることを報知する。従って、操作者は、どのオブジェクトが選択されているかを容易に把握することができる。尚、上記の報知は、オブジェクトをカーソル２０５で囲む以外にも、該当するオブジェクト自体を点滅させるなど、選択されているオブジェクトを操作者が視覚的に容易に認識できるものであればどのような報知方法を採用してもかまわない。
【００３９】
ここで、オブジェクト情報について説明する。図５は、本発明の実施の形態１における動画再生装置で再生する動画データの、オブジェクトと当該オブジェクトが保持するオブジェクト情報の関係を説明するタイムチャートである。図２と同様に、動画データの映像は開始から３つのシーンで構成される。開始から０分２０秒後に画面内に表示されるオブジェクトＡ１０４にはオブジェクト情報３０１が、同じくオブジェクトＢ１０５にはオブジェクト情報３０２が対応するように記録されている。同様に、開始から２分５０秒後に画面内に表示されるオブジェクトＣ１０６にはオブジェクト情報３０３が、開始から４分２０秒後に画面内に表示されるオブジェクトＡ１０４とオブジェクトＤ１０７にはそれぞれオブジェクト情報３０４とオブジェクト情報３０５が記録されている。
【００４０】
図に示すように、オブジェクト情報は、オブジェクト名と、動画の再生開始からオブジェクトが画面上に表示されるまでの絶対時間を表す表示開始時間３１１と、オブジェクトが画面に表示されてから画面上から消えるまでの経過時間（相対時間）を表す表示継続時間３１２で構成されている。
【００４１】
図３のフローチャートに戻り、オブジェクト抽出部１２は、選択されたオブジェクトがオブジェクトＡ１０４であることを把握すると（ステップＳ１０４）、動画ストリームの最初からオブジェクトＡ１０４のオブジェクト情報の検索を開始する（ステップＳ１０５）。動画再生の開始から０分２０秒後にオブジェクトＡ１０４のオブジェクト情報３０１を検出すると（ステップＳ１０６）、オブジェクト抽出部１２は、オブジェクト名、表示開始時間３１１、表示継続時間３１２の情報を取得して、オブジェクトＡ１０４の表示が開始されるシーン１の先頭画像１０１と共にメモリ４０に記憶させる（ステップＳ１０７）。
【００４２】
制御部１０は、動画データの再生が終了したか否かを判断し（ステップＳ１０８）、終了していない場合は、ステップＳ１０６からステップＳ１０８までの手順を再生終了まで繰り返す。つまり、図５で動画再生開始の４分２０秒以降５分５０秒までのシーン３でオブジェクトＡ１０４が再び表示されるので、シーン３におけるオブジェクトＡ１０４のオブジェクト情報３０４とシーン３の先頭画像１０３もメモリ４０に記憶される。
【００４３】
一方、動画データの再生が終了した場合、オブジェクト抽出部１２は、抽出してメモリ４０に格納した画像データの表示処理を行って（ステップＳ１０９）、一連の画像抽出処理を終了する。
【００４４】
図６は、オブジェクト抽出部１２が抽出した画像データの表示処理手順を示すフローチャートである。オブジェクト抽出部１２は、抽出してメモリ４０に格納したフレーム画像についてサムネイル画像を生成し（ステップＳ２０１）、当該オブジェクトに関するオブジェクト情報と共にリスト表示する（ステップＳ２０２）。
【００４５】
図７及び図８は、オブジェクトＡ１０５に関して抽出したフレーム画像をサムネイル画像でリスト表示する場合の画面表示例を示す図である。記録したオブジェクトＡ１０４のオブジェクト情報３０１、３０４と、オブジェクトＡ１０４の登場シーンの先頭画像１０１、１０３がメモリ４０から読み出され、図７のようにリスト表示される。尚、サムネイル画像は、シーン先頭の全体画像ではなく、シーンに登場するオブジェクトのみの画像にしてもよい。オブジェクトが拡大されるので、サムネイル表示でもオブジェクトを確認しやすい利点がある。
【００４６】
また、検出するシーンが多い場合、図８に示すように先頭画像のサムネイル画像だけをリスト表示して、カーソルで選択されたサムネイル画像のみについて、拡大した先頭画像とそれに関するオブジェクト情報を表示させるようにしてもよい。
【００４７】
更に、動画再生装置の操作者が、所望のサムネイル画像を画面上で選択すると、当該シーンの動画を再生できるような構成としてもよい。また、サムネイル画像のリストと同じ順番で当該シーンの動画像を時系列で自動的に連続再生するような構成としてもかまわない。図９は、オブジェクト抽出部１２が抽出した画像データの表示処理手順を示すもう一つのフローチャートである。動画生成部３０は、オブジェクト抽出部１２が抽出してメモリ４０に格納したフレーム画像を含む動画データをすべて取得し（ステップＳ２１１）、連続再生する（ステップＳ２１２）。図１０は、本発明の実施の形態１における動画再生装置で再生する動画データについて、同じオブジェクト情報を含むシーンだけを再生する場合の再生映像の順番を説明するタイムチャートである。図に示すように、例えば、オブジェクトＡでオブジェクト情報の検索と画像データの抽出を行った場合、動画再生部３０は、オブジェクトＡが含まれないシーン２をスキップさせて、オブジェクトＡが含まれるシーン１と３だけを連続再生する。
【００４８】
次に、オブジェクト抽出部１２がオブジェクト情報の検索を行う場合の特別な検索方法について説明する。
【００４９】
動画再生装置の操作者がオブジェクトを選択する際に（図３のフローチャートのステップＳ１０２）、複数のオブジェクトの選択を検知すると、オブジェクト抽出部１２は、設定に応じて当該複数のオブジェクト同士の論理積（ＡＮＤ）検索、論理和（ＯＲ）検索、及び論理差（ＮＯＴ）検索を行う。図２のタイムチャートに示す動画データの例で説明すると、例えば、オブジェクトの選択でオブジェクトＡ１０４とオブジェクトＢ１０５が選択され、ＡＮＤ検索が設定されていると、「オブジェクトＡ１０４が表示されていて、且つ、オブジェクトＢ１０５が表示されているシーン」が検索され、シーン１が該当する。
【００５０】
一方、ＯＲ検索が設定されている場合は、「オブジェクトＡ１０４が表示されているか、またはオブジェクトＢ１０５が表示されているシーン」が検索され、シーン１、シーン２、シーン３が該当する。
【００５１】
また、過去の検索結果と新規に選択したオブジェクトについてのＡＮＤ検索やＯＲ検索を実施することも可能である。既にひとつのオブジェクトについての検索が実施済みであるので、より早く条件に該当するシーンの検索を行うことができる点で有効である。
【００５２】
[実施の形態２]次に、任意の動画データに対して、画像内のオブジェクトに関わるオブジェクト情報をすべて取得して生成したオブジェクト管理情報を予め保持している動画再生装置について説明する。動画再生装置の構成は、実施の形態１のそれと同じであるため、説明を省略する。
【００５３】
図１１は、本発明の実施の形態２における動画再生装置の、オブジェクト管理情報の生成手順を示すフローチャートである。はじめに、動画再生部３０は、所定の動画データを読み込み、動画の再生を開始する（ステップＳ３０１）。再生中、オブジェクト情報取得部１１は、オブジェクト情報を逐次取得してメモリ４０に格納する（ステップＳ３０２）。再生が終了したら取得したすべてのオブジェクト情報からオブジェクト管理情報を生成し（ステップＳ３０３）、同じくメモリ４０内に格納する（ステップＳ３０４）。尚、以上の手順において、再生する動画データの動画像は表示部５０に表示される必要はない。
【００５４】
図１２は、本発明の実施の形態２における動画再生装置が、再生する動画データに関わるオブジェクト管理情報を保持している場合の、映像と管理情報の関係を説明するタイムチャートである。メモリ４０に格納されている管理情報４０１は、再生する動画ストリームに記録されている全てのオブジェクトのオブジェクト情報を管理する。オブジェクト抽出部１２は、このオブジェクト管理情報を参照してオブジェクト情報の検索を行う。例えば、選択されたオブジェクトがオブジェクトＡ１０４であることを把握すると、オブジェクト抽出部１２は、管理情報４０１でオブジェクトＡ１０４に関するオブジェクト情報を検索し、取得したオブジェクト情報４０２、４０３の表示開始時間情報に基づいて、オブジェクトＡ１０４が表示されるシーンの先頭画像１０１、１０３を動画ストリームから抽出する。
【００５５】
次に、オブジェクト管理情報を保持する動画再生装置の画像抽出動作について説明する。
【００５６】
図１３は、本発明の実施の形態２における動画再生装置の画像抽出手順を示すフローチャートである。ステップＳ４０１からステップＳ４０４までの手順は、図３に示すフローチャートのステップＳ１０１から１０４までの手順と同じであるので説明を省略する。オブジェクト抽出部１２は、選択されたオブジェクトがオブジェクトＡ１０４であることを把握すると（ステップＳ４０４）、メモリ４０に格納されたオブジェクト管理情報４０１を参照して、オブジェクトＡ１０４のオブジェクト情報を検索する（ステップＳ４０５）。
【００５７】
オブジェクト抽出部１２は、オブジェクト名、表示開始時間、表示継続時間の情報を取得して、オブジェクトＡ１０４の表示が開始されるシーン１の先頭画像１０１と共にメモリ４０に記憶させる（ステップＳ４０６）。更に、オブジェクト抽出部１２は、抽出してメモリ４０に格納した画像データの表示処理を行って（ステップＳ４０７）、一連の画像抽出処理を終了する。
【００５８】
尚、上記実施の形態の画像抽出処理において、指定したオブジェクトのオブジェクト情報に基づく画像データの検索を動画再生中のいつ開始するかは任意に設定してよい。
【産業上の利用可能性】
【００５９】
本発明の動画再生装置は、オブジェクト情報に基づく検索を行うことで、所望のオブジェクトを含むシーンの動画像を抽出することができるという効果を有し、複数のフレームを含む動画フレームを再生する動画再生装置等として有用である。
【図面の簡単な説明】
【００６０】
【図１】本発明の実施の形態１における動画再生装置の内部構成を示す図
【図２】本発明の実施の形態１における動画再生装置で再生する動画データの、映像とオブジェクトの関係を説明するタイムチャート
【図３】本発明の実施の形態１における動画再生装置の画像抽出手順を示すフローチャート
【図４】動画再生中に、オブジェクト名のリスト表示が実行されたときの画面表示例を示す図
【図５】本発明の実施の形態１における動画再生装置で再生する動画データの、オブジェクトと当該オブジェクトが保持するオブジェクト情報の関係を説明するタイムチャート
【図６】オブジェクト抽出部が抽出した画像データの表示処理手順を示すフローチャート
【図７】オブジェクトＡに関して抽出したフレーム画像をサムネイル画像でリスト表示する場合の画面表示例を示す図
【図８】オブジェクトＡに関して抽出したフレーム画像をサムネイル画像でリスト表示する場合の画面表示例を示す図
【図９】オブジェクト抽出部が抽出した画像データの表示処理手順を示すもう一つのフローチャートである。
【図１０】本発明の実施の形態１における動画再生装置で再生する動画データについて、同じオブジェクト情報を含むシーンだけを再生する場合の再生映像の順番を説明するタイムチャート
【図１１】本発明の実施の形態２における動画再生装置の、オブジェクト管理情報の生成手順を示すフローチャート
【図１２】本発明の実施の形態２における動画再生装置が、再生する動画データに関わるオブジェクト管理情報を保持している場合の、映像と管理情報の関係を説明するタイムチャート
【図１３】本発明の実施の形態２における動画再生装置の画像抽出手順を示すフローチャート
【符号の説明】
【００６１】
１０  制御部
１１  オブジェクト情報取得部
１２  オブジェクト抽出部
２０  オブジェクト選択部
２１  オブジェクト指示手段
３０  動画再生部
３１  動画データ
４０  メモリ
４１  オブジェクト情報
４２  オブジェクト管理情報
１０１  シーン１先頭画像
１０２  シーン２先頭画像
１０３  シーン３先頭画像
１０４  オブジェクトＡ
１０５  オブジェクトＢ
１０６  オブジェクトＣ
１０７  オブジェクトＤ
２０１  オブジェクトリスト
２０４  カーソル
３０１  オブジェクトＡのオブジェクト情報
３０２  オブジェクトＢのオブジェクト情報
３０３  オブジェクトＣのオブジェクト情報
３０４  オブジェクトＡのオブジェクト情報
３０５  オブジェクトＤのオブジェクト情報
３１１  オブジェクトＡの表示開始時間
３１２  オブジェクトＡの表示継続時間
４０１  オブジェクト管理情報
４０２  オブジェクトＡのオブジェクト情報
４０３  オブジェクトＡのオブジェクト情報
【図１】
2006060279.tif 000003
【図２】
2006060279.tif 000004
【図３】
2006060279.tif 000005
【図４】
2006060279.tif 000006
【図５】
2006060279.tif 000007
【図６】
2006060279.tif 000008
【図７】
2006060279.tif 000009
【図８】
2006060279.tif 000010
【図９】
2006060279.tif 000011
【図１０】
2006060279.tif 000012
【図１１】
2006060279.tif 000013
【図１２】
2006060279.tif 000014
【図１３】
2006060279.tif 000015