(57)【要約】【課題】録画したコンテンツの中の視聴したいシーンを簡単に見つけ出すことができるようにする。【解決手段】ステップＳ２で、ブックマーク情報の取得が開始される。ステップＳ３で、再生中のシーンにブックマークを付すブックマーク操作がなされた旨が入力されるまで待機し、その旨が入力されたと判定した場合、ステップＳ４で、例えばブックマーク操作がなされたときのシーンの直前に検出されたシーンチェンジ位置を取得し、シーンチェンジがあったシーンをブックマークを付すシーンとして、そのシーンの位置が検出される。ステップＳ５で、ブックマークを付すシーンから取得されたサムネイル画像および付加情報が抽出され、メニュー画面を生成するためのブックマーク情報として記憶される。本発明は、例えば、ビデオレコーダに適用できる。【選択図】図５
2008312183.tif 000002
【特許請求の範囲】
【請求項１】
記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付け手段と、
前記受け付け手段により前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定手段と、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得手段と、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示手段と
を備える情報処理装置。
【請求項２】
前記取得手段は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツのシーンチェンジを検出する検出手段を備え、
前記設定手段は、前記受け付け手段により前記指定入力が受け付けられたタイミングの直前の前記検出手段により検出されたシーンチェンジから始まるシーンを、前記注目シーンとして設定する
請求項１に記載の情報処理装置。
【請求項３】
前記取得手段は、前記注目シーンの画像特徴量に基づいて文字情報を抽出する抽出手段を備え、
前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項４】
前記映像コンテンツに文字情報が多重化されている場合において、前記取得手段は、前記注目シーンの近傍に重畳された文字情報を抽出する抽出手段を備え、
前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示する
請求項１に記載の情報処理装置。
【請求項５】
記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付けステップと、
前記受け付けステップの処理で前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定ステップと、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得ステップと、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示ステップと
を含む情報処理方法。
【請求項６】
記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付けステップと、
前記受け付けステップの処理で前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定ステップと、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得ステップと、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示ステップと
を含む情報処理をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置および方法、並びにプログラムに関し、特に、録画したコンテンツの中の視聴したいシーンを簡単に見つけ出すことができるようにする情報処理装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
図１は、テレビジョン放送番組を録画した録画再生装置において表示される録画番組一覧（以下、メニュー画面と称する）の例を示している。
【０００３】
図１の例では、録画された各番組のサムネイル画像とタイトルが表示されている。このサムネイル画像は、例えば録画が開始されたときに取り込まれた番組の画像データから生成されたものであって、番組の放送開始から録画が開始された場合番組冒頭の画像のサムネイル画像となる。タイトルの表示は、例えばEPG（Electronic Program Guide)情報から抽出されたタイトル情報によって生成される。
【０００４】
ユーザによるリモートコントローラなどの操作により、メニュー画面の所定の番組に対応するサムネイル画像やタイトルの表示が選択されて、視聴する番組が指定されると、指定された番組のデータが記録媒体から読み出されて再生される。
【０００５】
このようにしてユーザは、メニュー画面から視聴した番組を見つけ出し、それを視聴することができる。
【０００６】
例えば録画予約される番組に設定された番組の有効期限に基づいて、番組を分類し、分類された番組毎に録画番組一覧を表示する方法など、録画番組一覧表示方法が各種存在するが、この方法においてもその表示単位は、番組となっている（特許文献１）。
【特許文献１】特開２００６−１７３７６６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところで、このメニュー画面は、上述したように、番組（図１の例では、野球番組、クイズ番組、サッカー番組）毎に、サムネイル画像とタイトルの表示が配置され、番組単位で構成されているので、ユーザは、番組単位でしか、視聴する番組を指定することができない。
【０００８】
しかしながらこのように番組単位でしか視聴する番組を指定することができないと、ある番組のあるシーンを視聴したい場合（例えば、野球番組で放送されたある選手がホームランを打ったシーンから視聴したい場合）、ユーザは、まずメニュー画面からその番組の表示を選択して番組を再生させた後、そのシーンまで視聴する必要があった。
【０００９】
すなわち従来の録画番組等のメニュー画面では、簡単に、視聴したシーンを見つけ出し視聴することができなかった。
【００１０】
本発明では、録画したコンテンツの中の視聴したいシーンを簡単に見つけ出すことができるようにするものである。
【課題を解決するための手段】
【００１１】
本発明の一側面の情報処理装置は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付け手段と、前記受け付け手段により前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定手段と、前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得手段と、前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示手段とを備える。
【００１２】
前記取得手段は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツのシーンチェンジを検出する検出手段を備え、前記設定手段は、前記受け付け手段により前記指定入力が受け付けられたタイミングの直前の前記検出手段により検出されたシーンチェンジから始まるシーンを、前記注目シーンとして設定することができる。
【００１３】
前記取得手段は、前記注目シーンの画像特徴量に基づいて文字情報を抽出する抽出手段を備え、前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示することができる。
【００１４】
前記映像コンテンツに文字情報が多重化されている場合において、前記取得手段は、前記注目シーンの近傍に重畳された文字情報を抽出する抽出手段を備え、前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示することができる。
【００１５】
本発明の一側面の情報処理方法、又はプログラムは、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付けステップと、前記受け付けステップの処理で前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定ステップと、前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得ステップと、前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示ステップとを含む。
【００１６】
本発明の一側面の情報処理装置、情報処理方法、又はプログラムにおいては、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力が受け付けられ、前記指定入力が受け付けられたタイミングに対応するシーンが、ユーザが注目したい注目シーンとして設定され、前記注目シーンの内容を示す表示を生成するための付加情報が取得され、前記付加情報に基づいて前記注目シーンの内容を示す表示が生成され、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面が表示される。
【発明の効果】
【００１７】
本発明の一側面によれば、録画したコンテンツの中の視聴したいシーンを簡単に見つけ出すことができる。
【発明を実施するための最良の形態】
【００１８】
以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書又は図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書又は図面に記載されていることを確認するためのものである。従って、明細書又は図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
【００１９】
本発明の一側面の情報処理装置は、
記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付け手段（例えば、図２の制御部２０）と、
前記受け付け手段により前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定手段（例えば、図２のメニュー画面表示制御部１３）と、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得手段（例えば、図２のブックマーク情報取得部１２とメニュー画面表示制御部１３）と、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示手段（例えば、図２のメニュ画面表示制御部１３）と
を備える。
【００２０】
前記取得手段は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツのシーンチェンジを検出する検出手段（例えば、図２のシーンチェンジ検出部３１）を備え、
前記設定手段は、前記受け付け手段により前記指定入力が受け付けられたタイミングの直前の前記検出手段により検出されたシーンチェンジから始まるシーンを、前記注目シーンとして設定することができる。
【００２１】
前記取得手段は、前記注目シーンの画像特徴量に基づいて文字情報を抽出する抽出手段（例えば、図２の付加情報抽出部３３）を備え、
前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示することができる。
【００２２】
前記映像コンテンツに文字情報が多重化されている場合において、前記取得手段は、前記注目シーンの近傍に重畳された文字情報を抽出する抽出手段（例えば、図２の付加情報抽出部３３）を備え、
前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示することができる。
【００２３】
本発明の一側面の情報処理方法およびプログラムは、
記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付けステップ（例えば、図５のステップＳ３）と、
前記受け付けステップの処理で前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定ステップ（例えば、図５のステップＳ４）と、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得ステップ（例えば、図５のステップＳ５）と、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示ステップ（例えば、図７のステップＳ１１およびステップＳ１２）と  を含む。
【００２４】
図２は、本発明を適用した記録再生装置１の構成例を示している。この記録再生装置１は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンを指定する操作（以下、ブックマーク操作）を受け付け、そのブックマーク操作のタイミングに対応する注目シーン（以下、ブックマークが付されたシーンと称する）の所定の情報に基づいて、ブックマークが付されたシーンを表すサムネイル画像やコメント（以下、ブックマーク表示と称する）を生成し、例えば、図３に示すような、ブックマークが付されたシーン毎にブックマーク表示が配置された録画番組の一覧画面（すなわち、メニュー画面）を表示する。
【００２５】
図３の例では、野球番組視聴中のブックマーク操作により指定された、所定の選手である「竹坂選手」がホームランを打ったときのシーンのサムネイル画像、そのシーンの所定の情報から生成されたコメント（竹坂のホームラン）および野球番組のタイトル（図中、カッコ書き）、野球番組視聴中のブックマーク操作により指定された、所定の選手である「竹坂選手」が三振したときのシーンのサムネイル画像、そのシーンの所定の情報から生成されたコメント（竹坂の三振）および野球番組のタイトル、クイズ番組視聴中のブックマーク操作により指定された、解答者が最終問題に挑戦しているときのシーンのサムネイル画像、そのシーンの所定の情報から生成されたコメント（最終問題１００万円に挑戦）およびクイズ番組のタイトル、並びにサッカー番組視聴中のブックマーク操作により指定された、所定の選手である「小田選手」がゴールを入れたときのサムネイル画像、そのシーンの所定の情報から生成されたコメント（小田選手のゴール）およびサッカー番組のタイトルが、シーン毎に表示されている。
【００２６】
このようなブックマークが付されたシーン毎のブックマーク表示からなるメニュー画面が操作されて、所定のブックマーク表示が指定されると、記録再生装置１は、例えばその指定されたシーンからその番組の再生を開始する。
【００２７】
なおここでは、録画する又は既に録画されているテレビジョン放送番組にブックマークを付す場合を例として説明するが、画像データを含んで構成される他のコンテンツについても同様に本発明を適用することができる。
【００２８】
図２に戻り入力部１１には、再生部１７により再生されている、記録中の番組の画像データ又は既に記録媒体１６に記録されている番組の画像データを入力し、ブックマーク情報取得部１２と記録制御部１５に供給する。
【００２９】
ブックマーク情報取得部１２は、制御部２０の制御に従って、入力部１１から供給された画像データ等から、ブックマーク表示を生成するために必要な情報（以下、ブックマーク情報と称する）を取得し、メニュー画面表示制御部１３に供給する。
【００３０】
メニュー画面表示制御部１３は、制御部２０の制御に従って、ブックマーク情報取得部１２から供給されるブックマーク情報から、メニュー画面を生成するためのブックマーク情報を抽出し、記憶部１４に記憶させる。
【００３１】
メニュー画面表示制御部１３はまた、制御部２０の制御に従って、記憶部１４に記憶されているブックマーク情報からブックマーク表示を生成するとともに、図３に示したような、生成したブックマーク表示をブックマークが付されたシーン毎に配置してメニュー画面を生成し、表示部１８に表示させる。
【００３２】
記録制御部１５は、制御部２０の制御に従って、入力部１１から供給された画像データを記録媒体１６に記録させる。
【００３３】
再生部１７は、制御部２０の制御に従って、別途入力される画像データや記録媒体１６に記録されている画像データを再生し、表示部１８および入力部１１に供給する。
【００３４】
操作部１９は、各種ボタンやリモートコントローラからのコントロール信号を受信する受信部等から構成されており、ユーザの各種ボタン等に対する操作内容を入力し、制御部２０に通知する。
【００３５】
制御部２０は、各部を制御し、後述するブックマーク処理等を実行させる。
【００３６】
次に、ブックマーク情報取得部１２の構成例について説明する。
【００３７】
シーンチェンジ検出部３１は、入力部１１から供給された画像データを解析し、シーンチェンジを検出する。例えば、番組の本編からコマーシャルに切り替わるポイント、夜のシーンから昼間のシーンに切り替わるポイント、又は登場している人物や物体が替わるポイントが、シーンチェンジとして検出される。
【００３８】
シーンチェンジ検出部３１は、シーンチェンジを検出したとき、その旨を、サムネイル画像生成部３２とメニュー画面表示制御部１３に供給する。
【００３９】
サムネイル画像生成部３２は、例えばシーンチェンジ検出部３１からシーンチェンジが検出された旨が通知されたとき、シーンチェンジがあった画像データからサムネイル画像を生成し、メニュー画面表示制御部１３に供給する。
【００４０】
付加情報抽出部３３には、入力部１１からの画像データと、EPG情報が別途入力される。付加情報抽出部３３は、図４に示すように構成され、タイトル抽出部５１は、入力されたEPG情報から番組のタイトル情報を抽出し、メニュー画面表示制御部１３に供給する。
【００４１】
特徴量抽出部５２は、入力された画像データの所定の特徴量を抽出し、抽出した特徴量をキーワード抽出部５３およびメニュー画面表示制御部１３に供給する。
【００４２】
キーワード抽出部５３は、特徴量抽出部５２から供給された特徴量からキーワードを抽出し、メニュー画面表示制御部１３に供給する。
【００４３】
例えば付加情報抽出部３３に供給された画像にクローズドキャプション(closed captioning)の文字情報が多重化されている場合には、特徴量抽出部５２からは、その文字情報に対応する特徴量が供給されるので、キーワード抽出部５３は、その特徴量に対応する文字情報（すなわちテキスト）を生成し、メニュー画面表示制御部１３に供給する。
【００４４】
また文字情報が含まれていなくても、例えば、「山」や「城」等の所定の物体の像が含まれている場合、特徴量抽出部５２からそれらの像に対応する特徴量が供給されるので、キーワード抽出部５３は、その特徴量に対応するキーワード（例えば、「山」と「城」という言葉、またその「山」や「城」の名称を特定できる場合はその名称）を抽出し、メニュー画面表示制御部１３に供給する。
【００４５】
次に、記録再生装置１のブックマーク処理を、図５のフローチャートを参照して説明する。
【００４６】
ステップＳ１において、記録再生装置１の制御部２０は、再生部１７を制御して、別途入力される画像データ又は記録媒体１６に既に記録されている画像データを再生させる。
【００４７】
これにより再生部１７により再生された画像データが表示部１８に表示されるとともに、入力部１１に入力される。入力部１１は、入力した画像データを、記録制御部１５およびブックマーク情報取得部１２に供給する。なお記録媒体１６に記録されている画像データが再生される場合、入力部１１は、記録制御部１５への画像データの供給を行わない。
【００４８】
次に、ステップＳ２において、制御部２０は、ブックマーク情報取得部１２を制御して、ブックマーク情報の取得を開始させる。
【００４９】
これにより、ブックマーク情報取得部１２は、入力部１１から供給された画像データ等からのブックマーク情報の取得を開始する。
【００５０】
すなわちシーンチェンジ検出部３１は、シーンチェンジの検出を開始し、サムネイル画像生成部３２は、サムネイル画像の生成を開始し、付加情報抽出部３３は、付加情報の抽出を開始する。
【００５１】
ステップＳ３において、制御部２０は、操作部１９から、再生中の画像にブックマークを付すためのブックマーク操作がなされた旨が入力されるまで待機し、その旨が入力されたと判定した場合、ステップＳ４において、メニュー画面表示制御部１３に、メニュー画面を生成するためのブックマーク情報の取得を指示する。これによりメニュー画面表示制御部１３は、例えばブックマーク操作がなされたときのシーンの直前に検出されたシーンチェンジ位置を取得し、シーンチェンジがあった画像をブックマークを付す画像として、その画像の位置を検出する。
【００５２】
例えば図６に示すようなシーンが図中左側のシーンＣ１から順に再生されて表示部１８に表示される場合において、上向きの矢印Ａが示すシーンＣ６が表示されているときにブックマーク操作がなされた場合、上向きの矢印Ｂが示す、シーンチェンジ検出部３１により検出された、山の風景の画像から人の顔の画像へのシーンチェンジがあったシーンＣ４に、ブックマークが付される。
【００５３】
次にステップＳ５において、メニュー画面表示制御部１３は、ブックマーク情報取得部１２（のサムネイル画像生成部３２および付加情報抽出部３３）から供給されたサムネイル画像および付加情報の中から、ブックマークが付された画像（図６の例では、フレームＣ４）から取得されたサムネイル画像および付加情報を抽出し、メニュー画面を生成するためのブックマーク情報として記憶部１４に記憶させる。
【００５４】
ブックマークが付される映像コンテンツにクローズドキャプションの文字情報が多重化されている場合には、ブックマーク情報取得部１２から供給される、その文字画像から抽出された文字情報（すなわちテキスト）が記憶部１４に記憶される。
【００５５】
また文字情報が含まれていなくても、例えば、「山」や「城」等の物体の像が含まれている場合、ブックマーク情報取得部１２から供給される、その画像から抽出された、その物体を意味する言葉（例えば、「山」や「城」の言葉）、又はその物体の名称等が記憶部１４に記憶される。
【００５６】
次に、ステップＳ６において、制御部２０は、画像データの再生を終了する旨の指令が操作部１９から入力されたか否かを判定し、入力されていないと判定した場合、ステップＳ３に戻り、再度、ブックマーク操作がなされるまで待機する。
【００５７】
ステップＳ６で、画像データの再生を終了する指令が入力されたとき、制御部２０は、ブックマーク処理を終了させる。
【００５８】
次に、メニュー画面の表示処理を、図７のフローチャートを参照して説明する。
【００５９】
メニュー画面表示制御部１３は、制御部２０から、メニュー画面表示の指令を受け付けると、ステップＳ１１において、記憶部１４から、上述したブックマーク処理で記憶されたメニュー画面を生成するためのブックマーク情報を読み出す。
【００６０】
ステップＳ１２において、メニュー画面表示制御部１３は、ステップＳ１１で読み出したブックマーク情報から、ブックマーク表示を生成する。例えばブックマーク情報として文字情報が記憶されている場合、その文字情報から所定の言葉（例えば、図３の例では、「竹坂のホームラン」等）を抽出したり、サムネイル画像やタイトルを表示するためのデータを生成する。
【００６１】
メニュー画面表示制御部１３は、生成したブックマーク表示を、図３に示したように、ブックマークが付されたシーン毎に表示されるように配置してメニュー画面を生成し、表示部１８に表示させる。
【００６２】
このようにしてブックマークが付されたシーン毎にブックマーク表示が表示されるメニュー画面がユーザに提示される。
【００６３】
以上のように、記録媒体１６に記録される画像データ又は記録媒体１６に既に記録されている画像データの再生処理中において、ユーザからの、再生中のシーンに対するブックマーク操作を受け付け、その操作のタイミングに対応するシーンにブックマークを付与し、そのシーンから得られた付加情報に基づいてブックマーク表示を生成し、ブックマークが付されたシーン毎にブックマーク表示が表示されるように配置されたメニュー画面を表示するようにしたので、ユーザは、そのメニュー画面から、視聴したいシーンを容易に見つけ出すことができる。
【００６４】
またブックマーク操作のタイミングが遅れても、例えば直前のシーンチェンジがあったシーンにブックマークが遡って付されるので、ブックマークを適切に付することができる。図６の例では、人の顔の画像が表示され始めたシーンＣ４にブックマークを付すことができる。
【００６５】
またブックマークが付されたシーンにクローズドキャプションの文字情報が多重化されている場合には、その文字情報をブックマーク表示として表示することができるので、クローズドキャプションの文字はそのシーンの内容を説明していることから、そのシーンを適切に表すコメント（図３の例では、「竹坂のホームラン」等）を、ブックマーク表示として表示することができる。
【００６６】
なおユーザの操作部１９に対する操作により、図３に示したようなメニュー画面の所定のブックマーク表示が選択されると、そのブックマーク表示に対応するシーンから再生が開始されるが、例えばブックマーク情報として、ブックマークが付されたシーンの後のシーンチェンジ点を保持しておき、そのシーンチェンジ点まで再生し、その後は、再生を停止するようにすることもできる。
【００６７】
図８は、記録再生装置１の他の構成例を示している。この記録再生装置には、図２の記録再生装置１に、画像分割部６１がさらに設けられている。
【００６８】
図８の記録再生装置１は、図９に示すように、ユーザの操作部１９に対する所定の操作によりポインタ１９Ａで、再生中のシーンの任意の位置が指定されると、その位置に対応する領域の画像データから付加情報が抽出されるようになされている。
【００６９】
すなわち制御部２０は、再生中に、操作部１９からポインタ１９Ａで所定の位置が指定された旨が入力されると、その位置を画像分割部６１に通知する。
【００７０】
画像分割部６１は、入力部１１から供給された画像データから、制御部２０から通知された位置に対応する領域（図９の例では、人の画像の領域）の画像データを抽出し、その画像データを、サムネイル画像生成部３２および付加情報抽出部３３に供給する。
【００７１】
サムネイル画像生成部３２は、画像分割部６１から供給された分割画像からサムネイル画像を生成し、メニュー画面表示制御部１３に供給する。
【００７２】
付加情報抽出部３３は、画像分割部６１から供給された分割画像の特徴量から付加情報を抽出し、メニュー画面表示制御部１３に供給する。図９の例の場合、付加情報抽出部３３は、画像分割部６１から供給された画像データから、人の像であることを認識し、人の像であることをメニュー画面表示制御部１３に通知する。また画像分割部６１から供給された人の画像データを顔認識し、認識した人の名前等を特定できる場合には、特定した名前等を、メニュー画面表示制御部１３に通知することもできる。
【００７３】
メニュー画面表示制御部１３は、サムネイル画像生成部３２から供給されたサムネイル画像および付加情報抽出部３３から供給された付加情報を、メニュー画面を生成するためのブックマーク情報として記憶部１４に記憶させる。
【００７４】
このように注目したいシーンとともに、その所定の領域を指定することができるようにしたので、例えば図１０に示すように、図３の例において、ブックマークが付されたシーンについて、ポインタ１９Ａでそのときのピッチャーの像を指定すると、図１１に示すように、そのピッチャーに応じたコメント（例えば、「上野、ホームラン打たれる」）をブックマーク表示として表示させることができる。
【００７５】
図１２は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。
【００７６】
コンピュータにおいて、CPU（Central Processing Unit）２０１，ROM（Read Only Memory）２０２，RAM（Random Access Memory）２０３は、バス２０４により相互に接続されている。
【００７７】
バス２０４には、さらに、入出力インタフェース２０５が接続されている。入出力インタフェース２０５には、キーボード、マウス、マイクロホンなどよりなる入力部２０６、ディスプレイ、スピーカなどよりなる出力部２０７、ハードディスクや不揮発性のメモリなどよりなる記憶部２０８、ネットワークインタフェースなどよりなる通信部２０９、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどのリムーバブルメディア２１１を駆動するドライブ２１０が接続されている。
【００７８】
以上のように構成されるコンピュータでは、CPU２０１が、例えば、記憶部２０８に記憶されているプログラムを、入出力インタフェース２０５およびバス２０４を介して、RAM２０３にロードして実行することにより、上述した一連の処理が行われる。
【００７９】
コンピュータ（CPU２０１）が実行するプログラムは、例えば、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)等）、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア２１１に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線又は無線の伝送媒体を介して提供される。
【００８０】
そして、プログラムは、リムーバブルメディア２１１をドライブ２１０に装着することにより、入出力インタフェース２０５を介して、記憶部２０８にインストールすることができる。また、プログラムは、有線又は無線の伝送媒体を介して、通信部２０９で受信し、記憶部２０８にインストールすることができる。その他、プログラムは、ROM２０２や記憶部２０８に、あらかじめインストールしておくことができる。
【００８１】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【図面の簡単な説明】
【００８２】
【図１】従来のメニュー画面の表示例を示す図である。
【図２】本発明を適用した記録再生装置１の構成例を示すブロック図である。
【図３】図２の記録再生装置１のメニュー画面の表示例を示す図である。
【図４】図２の付加情報抽出部３３の構成例を示すブロック図である。
【図５】ブックマーク処理を説明するフローチャートである。
【図６】ブックマーク位置の検出処理を説明する図である。
【図７】メニュー画面表示処理を説明するフローチャートである。
【図８】本発明を適用した記録再生装置１の他の構成例を示すブロック図である。
【図９】図８の記録再生装置１の画像分割処理を説明する図である。
【図１０】図８記録再生装置１の画像分割処理を説明する他の図である。
【図１１】図８の記録再生装置１のメニュー画面の表示例を示す図である。
【図１２】パーソナルコンピュータの構成例を示すブロック図である。
【符号の説明】
【００８３】
１１  入力部，  １２  ブックマーク情報取得部，  １３  メニュー画面表示制御部，  １４  記憶部，  １５  記録制御部，  １６  記録媒体，  １７  再生部，  １８  表示部，  １９  操作部，  ２０  制御部，  ３１  シーンチェンジ検出部，  ３２  サムネイル画像生成部，  ３３  付加情報抽出部，  ５１  タイトル抽出部，  ５２  特徴量抽出部，  ５３  キーワード抽出部，  ６１  画像分割部
【図１】
2008312183.tif 000003
【図２】
2008312183.tif 000004
【図３】
2008312183.tif 000005
【図４】
2008312183.tif 000006
【図５】
2008312183.tif 000007
【図６】
2008312183.tif 000008
【図７】
2008312183.tif 000009
【図８】
2008312183.tif 000010
【図９】
2008312183.tif 000011
【図１０】
2008312183.tif 000012
【図１１】
2008312183.tif 000013
【図１２】
2008312183.tif 000014