(57)【要約】      （修正有）【課題】ビデオカメラ等において映像音声データの記録時に被写体の人物の顔を認識し、その情報をデータベースに記録する際、映像音声データの処理及び記録が支障なく継続して実行される。【解決手段】顔認識などで得る二次データをデータベースに登録する際、記録媒体に映像音声データを記録する際に顔認識などによって得たデータのデータ量に応じて転送量を調整する。これによりデータベースを利用した使い勝手の良い記録再生装置を提供する。また、映像音声データを記録する記録媒体にデータベースを構築することで異なる機器でもそのデータベースを扱うことを可能とする。記録時に取得した顔認識の情報を利用して様々機能に活かすことも可能となる。【選択図】図１
2010212821.tif 000002
【特許請求の範囲】
【請求項１】
記録媒体へのデータの記録及び前記データの再生をする記録再生装置であって、
記録媒体に入力される入力データに、予め決めた所定の特徴が含まれるかを検知する検知手段と、
前記入力データ及び前記検知手段より得た前記入力データに関連する二次データをデータ集合として管理するデータ管理手段と、
前記データ管理手段で管理する前記データ集合を前記記録媒体に記録する記録手段と、
を有することを特徴とする記録再生装置。
【請求項２】
請求項１に記載の記録再生装置であって、
前記記録手段が前記記録媒体にデータを記録する際に、前記検知手段によって得た二次データのデータ量に応じてデータ転送量を調整することを特徴とする記録再生装置。
【請求項３】
請求項１に記載の記録再生装置であって、
前記記録手段が前記記録媒体にデータを記録する際に、前記記録媒体のデータ転送速度の性能に応じてデータ転送量を調整することを特徴とする記録再生装置。
【請求項４】
請求項１に記載の記録再生装置であって、
映像音声データを圧縮する圧縮手段と、
前記圧縮手段により圧縮された圧縮データを前記記録媒体に記録する記録手段と、
記録媒体に記録された前記圧縮データを取得する取得手段と、
前記取得手段により取得した圧縮データを伸張して前記映像音声データを得る伸張手段とを有することを特徴とする記録再生装置。
【請求項５】
請求項４に記載の記録再生装置であって、
記録再生装置の外部から映像音声データを入力されて前記圧縮手段でデータを圧縮し前記記録手段で圧縮データを前記記録媒体に記録すること、前記検知手段により特徴を検知することを並行して処理することを特徴とする記録再生装置。
【請求項６】
請求項４に記載の記録再生装置であって、
前記取得手段により前記記録媒体から圧縮データを取得し前記伸張手段で圧縮データを映像音声データに伸張することと、前記検知手段により特徴を検知することを並行して処理することを特徴とする記録再生装置。
【請求項７】
請求項４に記載の記録再生装置であって、
前記伸張手段により伸張された映像音声データを表示する表示手段を有することを特徴とする記録再生装置。
【請求項８】
請求項２に記載の記録再生装置であって、
外部表示装置を接続できる表示装置接続手段を有することを特徴とする記録再生装置。
【請求項９】
請求項２に記載の記録再生装置であって、
前記記録媒体に記録されたデータ集合を所定の条件で検索する検索手段と、
前記検索手段による検索結果に該当する映像データをサムネイル生成するサムネイル生成手段と、を有することを特徴とする記録再生装置。
【請求項１０】
請求項１に記載の記録再生装置であって、
前記検知手段による検知機能の稼動と停止を制御する制御手段と、を有することを特徴とする記録再生装置。
【請求項１１】
請求項１０記載の記録再生装置であって、
前記制御手段による検知機能の稼動状況と連動して前記サムネイル生成手段が動作することを特徴とする記録再生装置。
【請求項１２】
請求項２に記載の記録再生装置であって、
撮像部を有し、
入力データが、前記撮像部より得られた映像データであることを特徴とする記録再生装置。
【請求項１３】
請求項２に記載の記録再生装置であって、
放送波を受信しその放送波を復調する復調手段を有し、
入力データが前記復調手段によって得られた映像音声データであることを特徴とする記録再生装置。
【請求項１４】
請求項１に記載の記録再生装置であって、
前記記録媒体のデータ転送性能に応じて前記第二の記録手段で前記記録媒体に記録するデータ量を調整することを特徴とする記録再生装置。
【請求項１５】
請求項１に記載の記録再生装置であって、
前記検知手段が画像解析によって行われることを特徴とする記録再生装置。
【請求項１６】
請求項１に記載の記録再生装置であって、
前記検知手段が音声解析によって行われることを特徴とする記録再生装置。
【請求項１７】
請求項１に記載の記録再生装置であって、
前記データ管理手段によって管理する二次データが日時であることを特徴とする記録再生装置。
【請求項１８】
請求項１に記載の記録再生装置であって、
前記データ管理手段によって管理する二次データが、検知した画像の座標とサイズであることを特徴とする記録再生装置。
【請求項１９】
請求項１に記載の記録再生装置であって、
前記入力データと前記二次データが前記記録手段によって記録される記憶媒体を有することを特徴とする記録再生装置。
【請求項２０】
請求項１に記載の記録再生装置であって、
外部記憶媒体を接続できる記憶媒体接続手段を有し、
前記記憶媒体接続手段によって接続された着脱可能な外部記憶媒体に前記入力データと前記二次データを前記記憶媒体記録手段によって記録することを特徴とする記録再生装置。
【請求項２１】
請求項２、１５、１６いずれか一項記載の記録再生装置であって、
映像音声データを記録媒体に記録しながら二次データを記録する際に、映像音声データの記録が破綻しないように二次データのデータ量を調整することを特徴とする記録再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録媒体にデータを記録しその記録したデータを再生する記録再生装置に関する。
【背景技術】
【０００２】
顔認識技術に関する文献として例えば特許文献１（特開２００５−１９７９１４）が挙げられる。特許文献１では「高速で信頼性の高い顔画像認識を行うことができる顔画像認識装置及びそれを備えたデジタルカメラを提供する。」という課題に対し、「顔画像認識装置２は、撮像手段３と顔位置特定手段４と顔パターン検出手段５とを備える。撮像手段３は、被写体を撮影して赤外線画像データＰｉ及び可視光画像データＰｖを生成する。顔位置特定手段４は、赤外線画像データＰｉに基づき、画面内における人物の顔画像に相当するデータ領域を特定する。顔パターン検出手段５は、このデータ領域に対応して可視光画像データＰｖ中に顔画像領域を割り当てるとともに、この顔画像領域の画像データが人物の顔パターンに相当するか否かを検出する。また、デジタルカメラに顔画像認識装置２を組み込み、顔画像領域の画像データが人物の顔パターンに相当する場合に、人物の顔画像の撮影に適した所定の撮影準備処理を行うようにする。」との解決手段を用いることが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１９７９１４
【発明の概要】
【発明が解決しようとする課題】
【０００４】
顔認識技術は、デジタル画像から人物の顔を識別する技術である。カメラから入力される画像に顔と思われる部分を抽出し、顔の画像テンプレートと比較することで識別を行う。顔認識は、生体認証技術としてセキュリティシステムに利用されたり、デジタルスチルカメラやデジタルビデオカメラなどのコンシューマ機器でも顔認識機能が利用されている。カメラの場合の顔認識機能は、自動で人の顔を判断するとそこに焦点を合わせたり、露出やホワイトバランス、フラッシュ調光、赤目補正など、認識した人の顔に合わせたりして自動的に設定する。
【０００５】
一方、コンシューマ機器ではその高機能化に伴い、扱うデータの種類やデータ量が飛躍的に増大している。これにより、コンシューマ機器のような組み込み機器分野でもデータベースを利用する必要性が増してきたと言える。前述の顔認識などの認識機能によってもデータはさらに増大することからもその必要性が認識できる。
【０００６】
様々なデータを扱うためにデータベースを利用するにしても記録再生装置としては、入力される映像音声データのリアルタイム記録が第一の目的であるため、その記録を妨げるようなことをしてはならない。例えば、ビデオカメラにおいて映像音声データの記録時に被写体の人物の顔を認識しその情報をデータベースに記録する際、顔認識情報の記録によって、本来継続して処理をしなければならない映像音声データの記録が停止することは許されない。
【０００７】
この点、前述の特許文献１ではこのような課題について考慮されていない。そこで、本発明の目的は、上記課題を解決して、データベースを利用した使い勝手の良い記録再生装置を提供することにある。
【課題を解決するための手段】
【０００８】
本発明では、前記課題を例えば特許請求の範囲記載の構成を用いて解決する。
【発明の効果】
【０００９】
本発明によれば、二次データのデータ量に応じて記録媒体へデータを記録するデータ量を調整することができ、使い勝手のよい記録再生装置を提供することが可能となる。
【図面の簡単な説明】
【００１０】
【図１】記録再生装置の構成の一例を示す図である。
【図２】記録再生装置のソフトウェア構成の一例を示す図である。
【図３】記録時に目的の画像を認識した時に認識情報をデータベースに登録する処理フローを示す図である。
【図４】データベースに登録する項目の一例を示す図である。
【図５】データベースに登録するデータの一例を示す図である。
【図６】短時間の認識が繰り返された場合のデータベース登録タイミングを示す図である。
【図７】一定時間以上の認識ができた場合のデータベース登録タイミングを示す図である。
【図８】表示部及びサムネイル生成部を含む記録再生装置の構成の一例を示す図である。
【図９】映像入力部の映像データを表示している表示部を示す図である。
【図１０】記録媒体に記録されたシーンをサムネイルで表示している表示部を示す図である。
【図１１】記録媒体に記録された各シーンで顔認識した場合のサムネイル表示をしている表示部を示す図である。
【図１２】あるシーンの中で複数回の顔認識した場合のサムネイル表示をしている表示部を示す図である。
【図１３】表示部に表示される画面遷移図を示す図である。
【発明を実施するための形態】
【００１１】
以下、本発明の記録再生装置の実施例について図面を用いて詳細に説明する。
【実施例１】
【００１２】
(1)記録再生装置
図1は、本発明における記録再生装置の構成の一例を示す図である。実線矢印はデータの方向を示す。
【００１３】
図1において、100は記録再生装置である。この記録再生装置100は、映像データ入力部101、映像圧縮伸張部102、音声データ入力部103、音声圧縮伸張部104、多重分離部105、記録媒体制御部106、認識部107、認識制御部108、メモリ109、データベース管理部111から主に構成されている。
【００１４】
記録再生装置100は、入力された映像データと音声データを記録媒体110に記録することが可能であり、記録媒体110に記録される映像音声データを再生することが可能である。なお、映像データや音声データを記録する際には、定められた規格に従って記録を行う。
【００１５】
映像データ入力部101は、例えばカメラの撮像部から入力された映像信号のデジタル信号が入力され、音声データ入力部103は、例えば、マイクより入力された音声信号がAD変換されたデジタル信号の音声データが入力される。映像データ入力部101と音声データ入力部103に入力するデータは、カメラ以外であっても良い。例えば、テレビチューナより復調した映像データや音声データがある。映像圧縮伸張部102は、映像データ入力部101より入力された映像データを圧縮したり、多重分離部105より入力される圧縮された映像データを伸張したりする。音声圧縮伸張部104は、音声データ入力部103より入力された音声データを圧縮したり、多重分離部105より入力される圧縮された音声データを伸張したりする。多重分離部105は、映像圧縮伸張部102で圧縮された映像データと音声圧縮伸張部104で圧縮された音声データとを時間軸に沿って同期させ、１つのデータとして合成されたストリームデータを生成する。また、記録媒体110より得たストリームデータを映像データと音声データに分離する。なお、ストリームデータとは、動画データや静止画データを言い、記録媒体110内に記録されるデータを言う。記録媒体制御部106は、ストリームデータを記録媒体110に格納するデータ量や格納タイミングを制御する。記録媒体110は、ストリームデータが格納されたファイルを格納する。その他に、記録媒体110は、データベースを格納する。本実施例では、記録媒体110は、記録装置100に着脱可能なものとしたが、記録装置に内蔵されていても良い。また、本実施例では、記録媒体としてフラッシュメモリを利用したメモリカードを想定しているが、本発明においてはメモリカード以外のストレージなどにも適用可能である。例えば、Blu-ray DiscやDVD等の光ディスク、HDD、SSDが挙げられる。また、これらのストレージを記録装置100に一つ又は複数接続することも可能である。認識部107は、映像データや音声データからある特徴（：予め決めた所定の特徴）を抽出し条件に合致した場合に「認識」する。認識部107における認識は、映像データであれば画像解析し、音声データであれば周波数解析などを行う。例えば、入力された映像データを画像解析して、人の顔を認識する。メモリ109は、認識部109が映像データや音声データを解析するためのデータを保持する。認識制御部108は、認識部107の機能を稼動させたり、停止させたり、制御する。データベース管理部111は、認識部107で得た認識データをデータ集合として記録媒体110に構築されるデータベースに格納したり、反対にデータを取り出したりと、データベースを管理する。
【００１６】
ここで、映像圧縮伸張部102、音声圧縮伸張部104、多重分離部105、記録媒体制御部106、認識部107、及び認識制御部108は、回路としてハードウェア的に動作を実行する構成にしても良いし、プログラムとしてメモリに記憶させソフトウェア的に処理を実行する構成としても良い。
【００１７】
図2は、記録再生装置のソフトウェア構成の一例を示す図である。実線矢印はデータや制御の方向を示す。
【００１８】
図2において、200は記録再生装置100の記録再生ソフトウェアである。記録再生ソフトウェア200は、システムタスク201、シーン管理タスク202、データベース管理タスク203、認識タスク204、記録再生タスク205、映像音声圧縮伸張タスク206、記録媒体ドライバ207から主に構成される。
【００１９】
システムタスク201は、各タスクの動作を制御する。例えば、映像データの記録を実行する場合は、映像圧縮伸張タスクに映像データを圧縮するよう指示し、記録再生タスクに映像圧縮データをストリームファイルとして記録媒体110に記録するよう指示する。反対に、映像データの再生を実行する場合は、記録再生タスクに記録媒体110に記録されている映像データのファイルを読み出すよう指示し、映像圧縮伸張タスクに読み出された映像データを伸張するよう指示する。シーン管理タスク202は、記録が実行されるごとにシーン情報を作成する。本発明ではさらに、シーン管理タスクは認識タスク連動し、映像データの記録中に認識タスクが認識した際、通知を受け、その通知があった場合、データベースに認識に関するデータの項目を記録する処理を行う。データベースを制御するのは、データベース管理タスクである。従って、シーン管理タスクは、データベース管理タスクにデータの編集を指示することになる。認識タスク204は、映像圧縮伸張タスクが得た映像データを画像解析して目的とする画像の特長を抽出する。目的画像を認識することができたらシーン管理タスクに通知する。記録再生タスク205は、映像データの記録や再生を制御する。その際、MPEG、AVCHDなどの規格に従った制御を行う。記録媒体ドライバ207は、記録媒体110へのデータの書き込み、読み出しなどを制御する。記録再生タスクやデータベース管理タスクは、直接記録媒体110にデータを書き込んだり読み出したりするのではなく、記録媒体ドライバを介してデータアクセスする。記録媒体110は、映像データ209やデータベース210を保持する。
【００２０】
図3は、記録時に目的の画像を認識した時に認識情報をデータベースに登録する処理フローを示す図である。
【００２１】
認識タスクは、まず、認識機能がオンになっているかどうかを確認する（S301）。認識機能がオフ（S301：NO）であれば処理を終了し、認識機能がオン（S301：YES）であれば次の処理（S302）を実行する。認識機能のオンとオフの切り替えは、認識制御部108が行う。映像データ入力部101より入力された映像データを画像解析し（S302）、解析した結果、認識部107が目的の画像を認識すれば（S303：YES）、シーン管理タスクに認識したことを通知し（S303）、次の処理（S304）を実行する。認識しない場合は、次の処理（S304）を実行する。記録再生装置100が記録停止したかどうかを確認する（S304）。記録停止していなければ（S304：NO）、再度S302の処理に戻り、継続して処理を続ける。記録停止していれば（S304：YES）、処理を終了する。
【００２２】
一方、シーン管理タスクは、認識タスクから通知される認識通知を待つ（S310）。通知が来たら次の処理（S311）を実行する。データベースに登録する条件に合致するかどうかを確認する（S311）。条件に合致すれば（S311：YES）データベースに情報を登録し（S312）、次の処理（S313）を実行する。条件に合致しなければ（S311：NO）、次の処理（S313）を実行する。記録停止していなければ（S313：NO）、再度S310の処理に戻り、継続して処理を続ける。記録停止していれば（S313：YES）、処理を終了する。
【００２３】
(2)データベース
図4は、認識部107で認識した時にデータベース210に登録するデータの項目410を示す。411は項目410の意味を示し、412は項目410のデータサイズを示す。データベース登録項目400の項目410は、ファイル識別番号401、記録日時402、認識時間403、認識位置（x座標）404、認識位置（y座標）405、認識サイズ（x座標）406、認識サイズ（y座標）407、認識確度408、サムネイル409から構成される。
【００２４】
ファイル識別番号401は、認識した時に記録中のストリームファイルを識別する番号である。記録日時402は認識した日時であり、認識時間403は認識し続けた時間である。認識位置（x座標）404は認識した時の画像データのx座標の位置であり、認識位置（y座標）はその時のy座標の位置である。また、認識サイズ(x座標)406は認識位置（x座標）404から認識した画像データのx座標方向のサイズである。同様に、認識サイズ(y座標)407は認識位置（y座標）405から認識した画像データのy座標方向のサイズである。認識確度408は、認識の確からしさを示す指標を値で表したものである。サムネイル409は、認識した時の画像データを縮小した画像データである。図4では、画像データのサイズが10Kbyteを例にしている。サムネイル409の画像データは、生成されていない場合は何もデータがない状態となる。
【００２５】
図5は、データベースに登録するデータの一例を示す図である。
データベース500は、図4で示した各データの項目410に値が入っている。認識部107が目的の画像を認識し、データベース500へ認識情報を登録する条件を満足するたびに、データベース管理部111と記録媒体制御部106を介して記録媒体110が保持するデータベース500に記録される。
【００２６】
(3)データベース登録タイミング
図6は、短い時間の間に目的画像の認識が繰り返された場合のデータベース登録タイミングを示す図である。
【００２７】
シーン600は、記録再生装置100が記録したひとつのまとまった映像音声データであり、記録再生装置100に入力された映像データの記録開始位置601から記録停止位置602までを指す。記録開始位置601は記録再生装置100の操作で例えば記録ボタンを押下することで決定され、記録停止位置602は記録再生装置100の操作例えば記録中に再度記録ボタンを押下することで決定される。認識なし映像610は、記録中のシーンにおいて目的画像を認識部107が認識できなかった瞬間の映像である。一方、認識あり映像611は、記録中のシーンにおいて目的画像を認識部107が認識した瞬間の映像である。データベース登録位置603は、認識部107が目的画像を認識した場合、データベース管理部111がデータベース210に認識情報を登録するタイミング位置を示す。この時のシーンの映像は、認識あり映像611である。
【００２８】
記録再生装置100に入力された映像データを記録中は、認識部107が目的画像を認識したとしてもすぐに認識からはずれてしまうことがある。この場合、誤認識である可能性があるため、すぐに認識からはずれてしまうような場合、その時の認識情報をデータベース登録をしない。しかしながら、認識した後にすぐ認識がはずれても再度認識すると言うように、認識と認識解除が繰り返されるようなことがある。これは、目的画像が認識可能と不可能のちょうど中間にあるような画像であるためにこのような状況になると考えられる。このように認識と認識解除を繰り返した場合は、繰り返した回数が予め定めたある回数に達したら認識したとみなし、認識情報をデータベースに登録する。図6の例では、3回目の認識でデータベースに登録している。この回数はソフトウェアで自由に設定可能である。
【００２９】
図7は、一定時間以上の認識ができた場合のデータベース登録タイミングを示す図である。
【００３０】
シーン700は、記録再生装置100が記録したひとつのまとまった映像音声データであり、記録再生装置100に入力された映像データの記録開始位置701から記録停止位置702までを指す。記録開始位置701は記録再生装置100の操作で例えば記録ボタンを押下することで決定され、記録停止位置702は記録再生装置100の操作例えば記録中に再度記録ボタンを押下することで決定される。認識なし映像610は、記録中のシーンにおいて目的画像を認識部107が認識できなかった瞬間の映像である。一方、認識あり映像611は、記録中のシーンにおいて目的画像を認識部107が認識した瞬間の映像である。データベース登録位置703は、認識部107が目的画像を認識した場合、データベース管理部111がデータベース210に認識情報を登録するタイミング位置を示す。この時のシーンの映像は、認識あり映像711である。
【００３１】
認識部107が記録再生装置100に入力された映像データを解析して目的画像を認識したらすぐに認識情報をデータベースに登録するのではなく、ある時間経過後に登録する。これは、図6で説明した誤認識防止のためとデータベース登録を制限するためである。データベース登録を制限する理由は、記録停止後に記録したシーン中に認識した目的画像の一覧をサムネイル表示する場合、データベースに登録し過ぎるとこのサムネイル表示がユーザーにとって見難くなってしまうためである。そこでデータベース登録を制限することによって、目的画像の一覧をサムネイル表示が見やすくなる。
【００３２】
(4)サムネイル表示
図8は、表示部及びサムネイル生成部を含む記録再生装置の構成の一例を示す図である。
【００３３】
図8において、800は記録再生装置の第二の形態である。第二の記録再生装置800は、図1に示した第一の記録再生装置100に表示部801とサムネイル生成部802を追加している。従って、この記録装置800は、映像データ入力部101、映像圧縮伸張部102、音声データ入力部103、音声圧縮伸張部104、多重分離部105、記録媒体制御部106、認識部107、認識制御部108、メモリ109、データベース管理部111、表示部801、サムネイル生成部802から主に構成されている。
【００３４】
表示部801は、液晶モニタなどの映像を表示するデバイスである。映像圧縮伸張部102で伸張した映像データを表示したり、サムネイル生成部802で生成したサムネイルを表示する。サムネイル生成部801は、記録媒体110に記録された映像データのサムネイルを生成する。サムネイルは通常記録開始時の映像を切り出した静止画を縮小したものを指すが、目的画像を認識した時刻の映像を使ってサムネイルを生成する機能も本案を適用することで可能となる。
また、この例では表示部801を記録再生装置800の一部としたが、表示部が外部にあっても良い。その場合は、表示部800の代わりに映像外部出力部を備えることとなる。
【００３５】
図9は、映像入力部の映像データを表示している表示部を示す図である。入力映像表示画面900は、表示部801に表示される映像である。
【００３６】
図10は、記録媒体110に記録されたシーンをサムネイルで表示している表示部801を示す図である。
【００３７】
ディスクナビゲーション表示画面1000は、図9で示した映像入力部からの映像データの表示と区別するために上部にタイトルバー1001を表示し、記録媒体110に記録済みのシーンのサムネイル画像をシーンの数だけ表示する。シーン選択枠1002は、現在選択中のシーンであることを示す。記録再生装置800の再生機能を実行させるとシーン選択枠1002で選択されたシーンが表示部801にて再生される。
【００３８】
図11は、記録媒体110に記録された各シーンで顔認識した場合のサムネイル表示をしている表示部801を示す図である。
【００３９】
図10で示したディスクナビゲーションなどのサムネイル表示と区別するために上部にタイトルバー1101を表示し、記録媒体110に記録済みのシーンのサムネイル画像をシーンの数だけ表示する。シーン選択枠1102は、現在選択中のシーンであることを示す。
【００４０】
図10との違いは、表示されるサムネイル画像が各シーンの先頭画像ではなく、そのシーンを記録した際に最初に認識部107が目的画像を認識した時の画像をサムネイル表示している。なお、このサムネイル画像は、最初のサムネイル表示の際にサムネイル生成部802で生成され、データベース管理部111を解して、記録媒体110のデータベースに記録される。
【００４１】
図12は、あるシーンの中で複数回の顔認識した場合のサムネイル表示をしている表示部801を示す図である。
【００４２】
図10で示したディスクナビゲーションなどのサムネイル表示と区別するために上部にタイトルバー1101を表示する。記録再生装置800の再生機能を実行させるとシーン選択枠1202で選択している画像から表示部801にて再生される。つまり、あるシーンの途中からの再生となる。これは、各サムネイルは目的画像を認識した時の画像であり、この認識したときの時刻をデータベースに記録しているため途中からの再生が可能となる。
【００４３】
図13は、表示部801に表示される画面遷移図を示す図である。
【００４４】
入力映像表示状態1300では、図9で示した映像が表示部801で表示される。ディスクナビゲーション表示状態1301では、図10で示したディスクナビゲーション表示が表示部801で表示される。顔サムネイル表示状態1302では、図11で示したサムネイル表示が表示部801で表示される。顔インデックス表示状態1303では、図12で示したあるシーン内で認識した目的画像のサムネイル表示が表示部801で表示される。
【００４５】
記録再生装置800の最初の画面表示は、入力映像表示状態1300である。この状態の時に、記録再生装置が持つディスクナビゲーションボタンを押下するなどするとディスクナビゲーション表示1301に画面遷移する（1310）。反対に、ディスクナビゲーション表示1301の状態の時に、ディスクナビゲーションボタンを押下すると入力映像表示状態1300に画面遷移する（1311）。ただし1310および1311の画面遷移は認識機能をオフにしていた場合である。
【００４６】
認識機能をオンにしていた場合は次のようになる。
【００４７】
入力映像表示状態1300の状態の時に、ディスクナビゲーションボタンを押下すると顔サムネイルリスト表示状態1302に画面遷移する（1312）。反対に、顔サムネイルリスト表示状態1302の状態の時に、ディスクナビゲーションボタンを押下すると入力映像表示状態1300に画面遷移する（1313）。
【００４８】
また、顔サムネイルリスト表示状態の時に、画面表示ボタンを押下すると、顔インデックス表示状態1303に画面遷移する（1314）。反対に顔インデックス表示状態1303の時に画面表示ボタンを押下すると、顔サムネイルリスト表示状態1302に画面遷移し（1315）、またディスクナビゲーションボタンを押下すると入力映像表示状態1300に画面遷移する（1316）。
【符号の説明】
【００４９】
100…記録再生装置、101…映像データ入力部、102…映像圧縮伸張部、103…音声データ入力部、104…音声圧縮伸張部、105…多重分離部、106…記録媒体制御部、107…認識部、108…認識制御部、109…メモリ、110…記録媒体、111…データベース管理部、200…記録再生ソフトウェア、201…システムタスク、202…シーン管理タスク、203…データベース管理タスク、204…認識タスク、205…記録タスク、206…映像音声圧縮タスク、207…記録媒体ドライバ、208…記録媒体、209…映像データ、210…データベース、211…映像音声データ入力部、400…データベース登録項目、401…ファイル識別番号、402…記録日時、403…認識時間、404…認識位置（x座標）、405…認識位置（y座標）、406…認識サイズ（x座標）、407…認識サイズ（y座標）、408…認識確度、409…サムネイル、500…データベース、600…シーン、601…記録開始位置、602…記録停止位置、603…データベース登録位置、610…認識なし映像、611…認識あり映像、700…シーン、701…記録開始位置、702…記録停止位置、703…データベース登録位置、710…認識なし映像、711…認識あり映像、800…第二の記録再生装置、801…表示部、802…サムネイル生成部、900…入力映像表示画面、1000…ディスクナビゲーション表示画面、1001…タイトルバー、1002…シーン選択枠、1100…顔サムネイルリスト表示画面、1101…タイトルバー、1102…シーン選択枠、1110…人物Aのサムネイル、1111…人物Bのサムネイル、1200…顔インデックス表示画面、1201…タイトルバー、1202…シーン選択枠、1300…入力映像表示状態、1301…ディスクナビゲーション表示状態、1302…顔サムネイル表示状態、1303…顔インデックス表示状態
【図１】
2010212821.tif 000003
【図２】
2010212821.tif 000004
【図３】
2010212821.tif 000005
【図４】
2010212821.tif 000006
【図５】
2010212821.tif 000007
【図６】
2010212821.tif 000008
【図７】
2010212821.tif 000009
【図８】
2010212821.tif 000010
【図９】
2010212821.tif 000011
【図１０】
2010212821.tif 000012
【図１１】
2010212821.tif 000013
【図１２】
2010212821.tif 000014
【図１３】
2010212821.tif 000015