(57)【要約】 【課題】  録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができる画像再生装置を提供する。【解決手段】  指示入力部７３は、入力された開始指示と操作指示を中央制御部７１に通知する。通知された中央制御部７１は、操作指示に従って、補助記憶メモリ７２３に格納されている録画データを基にサムネール画像を生成し、生成したサムネール画像を、補助記憶メモリ７２３に格納するとともに、映像出力部７５の表示画面に表示する。ユーザは、表示されたサムネール画像を見て、次の操作指示を指示入力部７３から指示する。新たな操作指示を指示された中央制御部７１は、現在停止している再生位置から、新たな操作指示に従ってサムネール画像を生成し、生成したサムネール画像を、最初に表示したサムネール画像に置き替えて表示する。【選択図】      図９
2005260862.tif 000002
【特許請求の範囲】
【請求項１】
画像データの任意の位置の静止画像を縮小したサムネール画像を生成する生成手段と、前記生成手段により生成されたサムネール画像を表示する表示手段とを有する画像再生装置において、
前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを、予め定められた組合せの中から選択する選択手段を有し、
前記生成手段は、画像データの現在の再生停止位置から、前記選択された組合せの再生方向に、前記選択された組合せの時間間隔のサムネール画像を予め定められた枚数分生成することを特徴とする画像再生装置。
【請求項２】
前記組合せは、ビデオ機器における再生、早送り、巻戻し、およびスローに相当する再生方向と時間間隔との組合せを含むことを特徴とする請求項１記載の画像再生装置。
【請求項３】
前記画像再生装置は、画像データの再生開始位置、および／または、サムネール画像を生成する時間間隔を指定する指定手段を有し、
前記生成手段は、前記再生開始位置の指定があったときは、前記指定された再生開始位置から、および／または、前記時間間隔の指定があったときは、前記指定された時間間隔のサムネール画像を、予め定められた枚数分生成することを特徴とする請求項１または２記載の画像再生装置。
【請求項４】
前記画像再生装置は、前記生成手段が前記選択手段により選択された組合せに基づいてサムネール画像を生成した後、前記生成手段が次に選択されると予測される組合せに基づいて生成したサムネール画像を保持する保持手段を有し、
前記表示手段は、次に選択された組合せが前記予測した組合せと同じときに、前記保持手段に保持したサムネール画像を表示することを特徴とする請求項１または２記載の画像再生装置。
【請求項５】
前記画像再生装置は、前記生成手段が前記選択手段により選択された組合せに基づいてサムネール画像を生成した後、前記生成手段が以後指定されると予測される再生開始位置の前後予め定められた範囲について生成したサムネール画像を保持する保持手段を有し、
前記表示手段は、次に指定された再生開始位置から生成されるサムネール画像が、前記保持手段が保持したサムネール画像の中にあるときは、前記保持手段が保持したサムネール画像を、次に指定された再生開始位置から生成されるサムネール画像として表示することを特徴とする請求項３記載の画像再生装置。
【請求項６】
前記画像再生装置は、前記画像データがＣＭの映像を含むかどうかを検出する検出手段を有し、
前記検出手段がＣＭ部分の画像データを検出したときは、前記生成手段は、ＣＭ部分の画像データに対してはサムネール画像を生成せずに、ＣＭ部分に引続く画像データに対してサムネール画像を生成することを特徴とする請求項１または２記載の画像再生装置。
【請求項７】
前記画像再生装置は、画像データの現在の再生停止位置の前後予め定められた範囲の画像データの中に文字表示が含まれているかどうかを検索する検索手段を有し、
前記生成手段は、前記検索手段が文字表示を検索したときは、検索された文字表示を含む範囲の画像データからサムネール画像を生成し、生成したサムネール画像を優先して予め定められた枚数に含めることを特徴とする請求項１または２記載の画像再生装置。
【請求項８】
前記画像再生装置は、前記生成手段が生成する最初のサムネール画像の再生位置から、予め定められた時間分の音声データを取得する取得手段と、
前記表示手段がサムネール画像を表示する際に、前記取得手段により取得した音声データを出力する音声出力手段を有することを特徴とする請求項１または２記載の画像再生装置。
【請求項９】
前記画像再生装置は、放送局から放送されている映像コンテンツの中から選択された複数の映像コンテンツを並行して受信する受信手段と、
受信した前記複数の映像コンテンツから並行して画像データを作成する作成手段とを有し、
前記生成手段は、作成された画像データのうち選択された映像コンテンツの画像データに対して、前記選択手段により選択された組合せに基づいて、サムネール画像を生成することを特徴とする請求項１または２記載の画像再生装置。
【請求項１０】
前記画像再生装置は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを選択して受信する受信手段と、
受信した映像コンテンツを画像データとして作成する作成手段とを有し、
前記生成手段は、作成された画像データに対して、前記選択手段により選択された組合せに基づいて、サムネール画像を生成することを特徴とする請求項１または２記載の画像再生装置。
【請求項１１】
前記受信手段は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間づつ順次選択して受信し、
前記録画手段は、順次選択されて受信した映像コンテンツから画像データを作成し、
前記生成手段は、前記選択手段により選択された組合せに基づいて、作成された画像データのうち選択された映像コンテンツの画像データに対して、サムネール画像を生成することを特徴とする請求項１０記載の画像再生装置。
【請求項１２】
前記画像再生装置は、生成されたサムネール画像を、前記生成されたサムネール画像の基になった映像コンテンツを放送した放送局と関連付けて保存する保存手段を有し、
前記表示手段は、複数の放送局に対応するサムネール画像を表示し、
前記受信手段は、表示されたサムネール画像の中から選択されたサムネール画像に関連付けられた放送局を選択することを特徴とする請求項１１記載の画像再生装置。
【請求項１３】
画像データの任意の位置の静止画像を縮小したサムネール画像を生成する生成手段と生成されたサムネール画像を送信する録画通信手段とを有する録画再生装置と、
前記録画再生装置から送信されたサムネール画像を受信する端末通信手段と受信したサムネール画像を表示する表示手段とを有する端末装置とを含んで構成される画像再生システムにおいて、
前記端末装置は、前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを、予め定められた組合せの中から選択する選択手段を有し、
前記端末通信手段は、選択された組合せを示す情報を前記録画再生装置に送信し、
前記録画通信手段は、前記端末通信手段が送信した前記組合せを示す情報を受信し、
前記録画再生装置の生成手段は、画像データの現在の再生停止位置から、前記受信した情報に含まれる組合せの再生方向に、前記受信した情報に含まれる組合せの時間間隔のサムネール画像を予め定められた枚数分生成することを特徴とする画像再生システム。
【請求項１４】
前記録画再生装置は、生成したサムネール画像の画像データ内の再生位置を特定する位置特定情報と、サムネール画像を特定するサムネール特定情報とを、前記生成したサムネール画像とともに保存する特定情報保存手段を有し、
前記録画通信手段は、サムネール画像を送信する際に、前記サムネール特定情報を前記サムネール画像とともに送信し、
前記端末通信手段は、送信されたサムネール画像の中から選択されたサムネール画像を特定するサムネール特定情報を前記録画再生装置に送信し、
前記録画再生装置は、受信したサムネール特定情報により、予め定められた前記録画再生装置の操作が行なわれたものであるとして、前記サムネール画像の開始位置から前記予め定められた操作に伴う動作を行なうことを特徴とする請求子１３記載の画像再生システム。
【請求項１５】
前記録画再生装置は、生成したサムネール画像の画像データ内の再生位置を特定する位置特定情報と、サムネール画像を特定するサムネール特定情報とを、前記生成したサムネール画像とともに保存する特定情報保存手段を有し、
前記録画通信手段は、サムネール画像を送信する際に、前記サムネール特定情報を前記サムネール画像とともに送信し、
前記端末通信手段は、送信されたサムネール画像の中から選択されたサムネール画像を特定するサムネール特定情報を前記録画再生装置に送信し、
前記録画通信手段は、受信したサムネール特定情報が特定するサムネール画像の開始位置からの画像データを前記端末装置に送信し、
前記表示手段は、送信された画像データを再生して表示することを特徴とする請求項１３記載の画像再生システム。
【請求項１６】
前記録画再生装置は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間づつ順次選択して受信する受信手段と、
前記順次選択して受信した映像コンテンツから画像データを作成する作成手段と、
作成した録像データを、前記作成した録像データの基になった映像コンテンツを放送した放送局を特定する放送局特定情報とともに保存する保存手段を有し、
前記生成手段は、作成された画像データに対して、前記選択手段により選択された組合せに基づいて、サムネール画像を生成し、
前記録画通信手段は、生成されたサムネール画像を送信する際に、前記放送局特定情報を、前記生成されたサムネール画像とともに送信し、
前記端末装置の表示手段は、前記放送局特定情報により特定される放送局毎に順次サムネール画像を表示し、
前記端末通信手段は、表示されたサムネール画像の中から選択されたサムネール画像の放送局を示す前記放送局特定情報を前記録画再生装置に送信し、
前記録画再生装置の受信手段は、受信した放送局特定情報が特定する放送局を選択することを特徴とする請求項１４記載の画像再生システム。
【請求項１７】
画像データの任意の位置の静止画像を縮小したサムネール画像を生成することができる録画再生装置から送信されたサムネール画像を受信する通信手段と、
受信したサムネール画像を表示する表示手段とを有する端末装置において、
前記端末装置は、前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを、予め定められた組合せの中から選択する選択手段を有し、
前記通信手段は、選択された組合せを示す情報を前記録画再生装置に送信することにより、前記録画再生装置に、前記送信した情報に含まれる組合せに基づいて、サムネール画像を生成させることができることを特徴とする端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
録画データから生成したサムネール画像を更新表示できる画像再生装置、画像再生システムおよび端末装置に関する。
【背景技術】
【０００２】
携帯電話やモバイルＰＣ（Personal Computer）などの端末装置を使用し、外出先からインターネット、公衆回線、無線回線などを経由して、テレビ放送の録画操作を行なうことのできる映像録画装置が実現している。また、高速のネットワーク環境においては、外出先からネットワーク経由で映像録画装置に接続し、映像録画装置に格納された録画データをデジタルデータとして受信し、再生することができる端末装置が実現している。
【０００３】
しかしながら、転送速度の低いネットワーク環境、または、データの転送量や通信時間に応じて高額な課金が発生するようなネットワーク環境しか使用できない状況、あるいは、処理能力の低い端末装置しか使用できないといった状況が依然として存在し、この場合、番組の録画予約など映像録画装置の簡単な操作を行なう程度であれば問題ないが、録画された映像コンテンツを楽しむといったことは難しかった。
【０００４】
このような状況の中で、録画された映像を携帯端末側で見る方法として、録画された映像コンテンツを再生した映像を見るのではなく、録画された映像コンテンツの特定時刻の静止画像、あるいは、その静止画像の縮小画像（以下、サムネール画像という）だけを端末装置側に送信し、送信されたサムネール画像を表示して見ることができる装置が提案されている。
【０００５】
たとえば、映像録画装置が生成した特定時刻のサムネール画像を端末装置が受信して表示し、それに対して、ユーザが次の操作、たとえば、指定された時間後のサムネール画像を表示する要求を行なう操作を行なうと、映像録画装置が指定された時間後のサムネール画像を生成して送信し、端末装置が送信されたサムネール画像を表示する第１の従来技術である映像録画装置がある。
【０００６】
また、元の映像データの映像フレーム群を時間的に任意の間隔で、かつ、任意の大きさにしてサンプリングした標本画像フレームを作成し、さらに、各標本画像フレームに対応する元の映像フレーム間の画面変化量を、作成された標本画像フレームとともに保存しておき、保存された標本画像フレームを順次表示する際に、画面変化量に応じて次に表示する標本画像フレームの表示タイミングを変えて表示することにより、ＣＰＵの能力の低い機器でも、標本画像フレームによる映像の内容を確認して検索を容易に行なうことができる第２の従来技術である映像検索装置および映像再生装置がある（たとえば、特許文献１参照）。
【０００７】
また、動画像データに属する複数のフレームから、シーンチェンジ毎に、または、一定時間間隔毎に、一連のサムネール画像を作成しておき、作成された一連のサムネール画像を、先頭から一定枚数表示し、継続するサムネール画像を、既に表示されている先頭のサムネール画像から順次入れ替えて表示することにより、動画像データがどのような内容のものなのかを容易に理解することができる第３の従来技術であるサムネール作成方法およびサムネール表示方法がある（たとえば、特許文献２参照）。
【０００８】
また、動画ファイルの各シーンの先頭画像の位置を示す時間軸データと各シーンの内容に対応するインデックス名を表示し、ユーザがインデックス名を指定すると、指定されたインデックスに対応するシーンの先頭画像を表示するとともに、その画像データの再生を可能とすることにより、特定シーンへのアクセスを容易にした第４の従来技術であるデジタル画像管理検索システムがある（たとえば、特許文献３参照）。
【０００９】
また、ユーザにより指定された開始時刻と終了時刻とを予め定められた値で当分割した時刻のサムネール画像を生成して表示し、ユーザは、表示されたサムネール画像を見て、新たに開始時刻と終了時刻とを指定することを繰り返すことにより、または、ユーザにより指定された開始時刻と生成するサムネール画像の時間間隔により予め定められた枚数のサムネール画像を生成して表示し、ユーザは、表示されたサムネール画像を見て、新たに開始時刻と時間間隔とを指定することを繰り返すことにより、ユーザが所望するポイントに到達することができる第５の従来技術である映像録画装置がある。
【００１０】
また、サムネール画像を扱ったものではないが、映像を要約する際に、一定時間以上継続するシーンやダイジェスト部分に類似する本編のシーンを代表画像として抽出しておき、抽出しておいた代表画像を一括表示、あるいは、その代表画像に対応する部分映像を順次再生し、ユーザが選択した代表画像のシーンから再生できるようにした第６の従来技術である映像要約方法および映像表示方法がある（たとえば、特許文献４参照）。
【００１１】
図１１は、第５の従来技術による映像録画装置の一実施例におけるサムネール画像の表示例とそれに対する操作を説明するための図である。画面９０〜９４は、携帯電話やモバイルＰＣといった端末装置の表示部、たとえば、液晶ディスプレイの画面であり、それぞれ、異なった時刻からの複数のサムネール画像が表示されている。
【００１２】
画面９０は、最初（１回目）に表示される画面であり、時刻ｔ＝０．０から時刻ｔ＝２５０．０までの、時間間隔５０．０の時刻の６枚のサムネール画像が表示されており、それぞれに、各サムネール画像の時刻が表示されている。
【００１３】
ユーザは、第１の目的の映像が時刻ｔ＝５０．０（灰色表示のサムネール画像）の近傍にあると判断し、端末装置から、時刻ｔ＝５０．０から、時間間隔１０．０で表示することを指示すると、２回目のサムネール画像を表示した画面９１が表示される。この例では、画面９１には、時刻ｔ＝５０．０から時間間隔１０．０の５枚のサムネール画像が表示されている。
【００１４】
ユーザは、さらに、第１の目的の映像が時刻ｔ＝６０．０（灰色表示のサムネール画像）の近傍にあると判断し、端末装置から、時刻ｔ＝６０．０から、時間間隔２．０で表示することを指示すると、３回目のサムネール画像を表示した画面９２が表示される。この例では、画面９２には、時刻ｔ＝６０．０から時間間隔２．０の５枚のサムネール画像が表示されている。この中の時刻ｔ＝６２．０のサムネール画像（灰色表示のサムネール画像）が、第１の目的の映像である。
【００１５】
また、ユーザは、第２の目的の映像を見たい場合は、また、最初の画面表示を指示すると、再び、画面９０が表示される。今回も、同様に、第２の目的の映像が時刻ｔ＝２００．０（灰色表示のサムネール画像）の近傍にあると判断し、端末装置から、時刻ｔ＝２００．０から、時間間隔１０．０で表示することを指示すると、２回目のサムネール画像を表示した画面９３が表示される。さらに、第２の目的の映像が時刻ｔ＝２２０．０（灰色表示のサムネール画像）の近傍にあると判断し、端末装置から、時刻ｔ＝２２０．０から、時間間隔２．０で表示することを指示すると、３回目のサムネール画像を表示した画面９４が表示される。時刻ｔ＝２２２．０に第２の目的の映像であるサムネール画像（灰色表示のサムネール画像）がある。
【００１６】
【特許文献１】特開２０００−２８７１６５号公報
【特許文献２】特開平１１−２８４９４８号公報
【特許文献３】特開平１０−１３７７３号公報
【特許文献４】特開平１０−１１２８３５号公報
【発明の開示】
【発明が解決しようとする課題】
【００１７】
上述した第１の従来技術では、サムネール画像を１枚づつ表示し、かつ、次のサムネール画像を表示するために毎回ユーザの操作が必要であり、目的の画像に到達するためには、相当の労力をユーザに強いることになるという問題がある。
【００１８】
また、上述した第２〜４の従来技術によるサムネール画像による映像表示が、映像のハンドリング、たとえば、映像の編集ポイントの設定やチャプター分割の分割ポイントの設定のための補助手段として利用されることが多く、シーンチェンジ毎や一定時間間隔毎に予め作成しておいたサムネール画像を表示することで、十分その目的が達成されていたが、サムネール画像により表示される映像コンテンツの内容を楽しむためには、十分なものではなかった。
【００１９】
つまり、シーンチェンジ毎や一定時間間隔毎に予め作成しておいたサムネール画像を表示するという従来技術は、映像の概要を理解できる程度にサムネール画像間の継続性が維持されていないことがあるといった問題、または、ユーザが希望する映像のサムネール画像が予め作成されたサムネール画像に含まれていないことがあるといった問題がある。
【００２０】
また、上述した第５の従来技術では、目的の映像に到達することはできるが、最初に表示されるサムネール画像間の時間間隔が粗いために、表示されているサムネール画像の中から目的の映像に最も近いサムネール画像がどれかを特定できない場合があり、この場合、何回かの試行錯誤が要求されるという問題がある。
【００２１】
また、上述した第６の従来技術では、予め抽出しておいた代表画像を表示するので、その代表画像の中に目的の画像の近辺の画像が含まれていないと、目的の画像を見つけることができないことがあるという問題がある。
【００２２】
また、いずれの従来技術も、ビデオ機器での操作とは異なった操作であり、映像の概要を理解したり、目的の映像にたどり着いたりするような映像を楽しむといった目的のためには、操作性がよくないという問題がある。
【００２３】
本発明の目的は、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができる画像再生装置、画像再生システムおよび端末装置を提供することである。
【課題を解決するための手段】
【００２４】
本発明は、画像データの任意の位置の静止画像を縮小したサムネール画像を生成する生成手段と、前記生成手段により生成されたサムネール画像を表示する表示手段とを有する画像再生装置において、
前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを、予め定められた組合せの中から選択する選択手段を有し、
前記生成手段は、画像データの現在の再生停止位置から、前記選択された組合せの再生方向に、前記選択された組合せの時間間隔のサムネール画像を予め定められた枚数分生成することを特徴とする画像再生装置である。
【００２５】
また本発明は、前記組合せは、ビデオ機器における再生、早送り、巻戻し、およびスローに相当する再生方向と時間間隔との組合せを含むことを特徴とする。
【００２６】
また本発明は、前記画像再生装置は、画像データの再生開始位置、および／または、サムネール画像を生成する時間間隔を指定する指定手段を有し、
前記生成手段は、前記再生開始位置の指定があったときは、前記指定された再生開始位置から、および／または、前記時間間隔の指定があったときは、前記指定された時間間隔のサムネール画像を、予め定められた枚数分生成することを特徴とする。
【００２７】
また本発明は、前記画像再生装置は、前記生成手段が前記選択手段により選択された組合せに基づいてサムネール画像を生成した後、前記生成手段が次に選択されると予測される組合せに基づいて生成したサムネール画像を保持する保持手段を有し、
前記表示手段は、次に選択された組合せが前記予測した組合せと同じときに、前記保持手段に保持したサムネール画像を表示することを特徴とする。
【００２８】
また本発明は、前記画像再生装置は、前記生成手段が前記選択手段により選択された組合せに基づいてサムネール画像を生成した後、前記生成手段が以後指定されると予測される再生開始位置の前後予め定められた範囲について生成したサムネール画像を保持する保持手段を有し、
前記表示手段は、次に指定された再生開始位置から生成されるサムネール画像が、前記保持手段が保持したサムネール画像の中にあるときは、前記保持手段が保持したサムネール画像を、次に指定された再生開始位置から生成されるサムネール画像として表示することを特徴とする。
【００２９】
また本発明は、前記画像再生装置は、前記画像データがＣＭの映像を含むかどうかを検出する検出手段を有し、
前記検出手段がＣＭ部分の画像データを検出したときは、前記生成手段は、ＣＭ部分の画像データに対してはサムネール画像を生成せずに、ＣＭ部分に引続く画像データに対してサムネール画像を生成することを特徴とする。
【００３０】
また本発明は、前記画像再生装置は、画像データの現在の再生停止位置の前後予め定められた範囲の画像データの中に文字表示が含まれているかどうかを検索する検索手段を有し、
前記生成手段は、前記検索手段が文字表示を検索したときは、検索された文字表示を含む範囲の画像データからサムネール画像を生成し、生成したサムネール画像を優先して予め定められた枚数に含めることを特徴とする。
【００３１】
また本発明は、前記画像再生装置は、前記生成手段が生成する最初のサムネール画像の再生位置から、予め定められた時間分の音声データを取得する取得手段と、
前記表示手段がサムネール画像を表示する際に、前記取得手段により取得した音声データを出力する音声出力手段を有することを特徴とする。
【００３２】
また本発明は、前記画像再生装置は、放送局から放送されている映像コンテンツの中から選択された複数の映像コンテンツを並行して受信する受信手段と、
受信した前記複数の映像コンテンツから並行して画像データを作成する作成手段とを有し、
前記生成手段は、作成された画像データのうち選択された映像コンテンツの画像データに対して、前記選択手段により選択された組合せに基づいて、サムネール画像を生成することを特徴とする。
【００３３】
また本発明は、前記画像再生装置は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを選択して受信する受信手段と、
受信した映像コンテンツを画像データとして作成する作成手段とを有し、
前記生成手段は、作成された画像データに対して、前記選択手段により選択された組合せに基づいて、サムネール画像を生成することを特徴とする。
【００３４】
また本発明は、前記受信手段は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間づつ順次選択して受信し、
前記録画手段は、順次選択されて受信した映像コンテンツから画像データを作成し、
前記生成手段は、前記選択手段により選択された組合せに基づいて、作成された画像データのうち選択された映像コンテンツの画像データに対して、サムネール画像を生成することを特徴とする。
【００３５】
また本発明は、前記画像再生装置は、生成されたサムネール画像を、前記生成されたサムネール画像の基になった映像コンテンツを放送した放送局と関連付けて保存する保存手段を有し、
前記表示手段は、複数の放送局に対応するサムネール画像を表示し、
前記受信手段は、表示されたサムネール画像の中から選択されたサムネール画像に関連付けられた放送局を選択することを特徴とする。
【００３６】
また本発明は、画像データの任意の位置の静止画像を縮小したサムネール画像を生成する生成手段と生成されたサムネール画像を送信する録画通信手段とを有する録画再生装置と、
前記録画再生装置から送信されたサムネール画像を受信する端末通信手段と受信したサムネール画像を表示する表示手段とを有する端末装置とを含んで構成される画像再生システムにおいて、
前記端末装置は、前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを、予め定められた組合せの中から選択する選択手段を有し、
前記端末通信手段は、選択された組合せを示す情報を前記録画再生装置に送信し、
前記録画通信手段は、前記端末通信手段が送信した前記組合せを示す情報を受信し、
前記録画再生装置の生成手段は、画像データの現在の再生停止位置から、前記受信した情報に含まれる組合せの再生方向に、前記受信した情報に含まれる組合せの時間間隔のサムネール画像を予め定められた枚数分生成することを特徴とする画像再生システムである。
【００３７】
また本発明は、前記録画再生装置は、生成したサムネール画像の画像データ内の再生位置を特定する位置特定情報と、サムネール画像を特定するサムネール特定情報とを、前記生成したサムネール画像とともに保存する特定情報保存手段を有し、
前記録画通信手段は、サムネール画像を送信する際に、前記サムネール特定情報を前記サムネール画像とともに送信し、
前記端末通信手段は、送信されたサムネール画像の中から選択されたサムネール画像を特定するサムネール特定情報を前記録画再生装置に送信し、
前記録画再生装置は、受信したサムネール特定情報により、予め定められた前記録画再生装置の操作が行なわれたものであるとして、前記サムネール画像の開始位置から前記予め定められた操作に伴う動作を行なうことを特徴とする。
【００３８】
また本発明は、前記録画再生装置は、生成したサムネール画像の画像データ内の再生位置を特定する位置特定情報と、サムネール画像を特定するサムネール特定情報とを、前記生成したサムネール画像とともに保存する特定情報保存手段を有し、
前記録画通信手段は、サムネール画像を送信する際に、前記サムネール特定情報を前記サムネール画像とともに送信し、
前記端末通信手段は、送信されたサムネール画像の中から選択されたサムネール画像を特定するサムネール特定情報を前記録画再生装置に送信し、
前記録画通信手段は、受信したサムネール特定情報が特定するサムネール画像の開始位置からの画像データを前記端末装置に送信し、
前記表示手段は、送信された画像データを再生して表示することを特徴とする。
【００３９】
また本発明は、前記録画再生装置は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間づつ順次選択して受信する受信手段と、
前記順次選択して受信した映像コンテンツから画像データを作成する作成手段と、
作成した録像データを、前記作成した録像データの基になった映像コンテンツを放送した放送局を特定する放送局特定情報とともに保存する保存手段を有し、
前記生成手段は、作成された画像データに対して、前記選択手段により選択された組合せに基づいて、サムネール画像を生成し、
前記録画通信手段は、生成されたサムネール画像を送信する際に、前記放送局特定情報を、前記生成されたサムネール画像とともに送信し、
前記端末装置の表示手段は、前記放送局特定情報により特定される放送局毎に順次サムネール画像を表示し、
前記端末通信手段は、表示されたサムネール画像の中から選択されたサムネール画像の放送局を示す前記放送局特定情報を前記録画再生装置に送信し、
前記録画再生装置の受信手段は、受信した放送局特定情報が特定する放送局を選択することを特徴とする。
【００４０】
また本発明は、画像データの任意の位置の静止画像を縮小したサムネール画像を生成することができる録画再生装置から送信されたサムネール画像を受信する通信手段と、
受信したサムネール画像を表示する表示手段とを有する端末装置において、
前記端末装置は、前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを、予め定められた組合せの中から選択する選択手段を有し、
前記通信手段は、選択された組合せを示す情報を前記録画再生装置に送信することにより、前記録画再生装置に、前記送信した情報に含まれる組合せに基づいて、サムネール画像を生成させることができることを特徴とする端末装置である。
【発明の効果】
【００４１】
本発明によれば、録画データの現在の再生停止位置から、再生方向とサムネール画像を生成する時間間隔との組合せを選択できるので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、録画データのサムネール画像をサムネール画像間での映像の概要の継続性を損なうことなく更新して表示し、目的の映像に到達することができる。
【００４２】
また本発明によれば、ビデオ機器での再生、早送り、巻戻し、およびスローに相当する再生方向と時間間隔との組合せを選択できるので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、通常のビデオ機器と同等の簡単な操作でサムネール画像を表示することができる。
【００４３】
また本発明によれば、録画データを再生する再生開始位置を指定できるので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、既に目的の映像の位置をある程度把握している場合には、より早く目的の映像に到達することができ、より柔軟な画像再生が行なえるようになる。
【００４４】
また本発明によれば、次に選択されると予測される組合せに応じてサムネール画像を生成するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、次に選択された組合せが予測した組合せと一致した場合は、早くサムネール画像を表示することができる。
【００４５】
また本発明によれば、以後指定されると予測される再生開始位置の前後予め定められた時間の範囲のサムネール画像を生成して保持するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、次に選択された再生開始位置が予測した再生開始位置と一致した場合は、早くサムネール画像を表示することができる場合がある。
【００４６】
また本発明によれば、ＣＭ（Commercial）部分の録画データについては、サムネール画像を作成しないので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、ＣＭ部分を無くしたサムネール画像を表示でき、より早く目的の映像に到達できる。
【００４７】
また本発明によれば、録画データに文字表示を含む部分を検索し、検索した部分からサムネール画像を生成し、優先して表示するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像だけでは内容を把握しにくいときに、より内容を理解することができるようになる。
【００４８】
また本発明によれば、表示画面の最初のサムネール画像の再生位置からの音声データを取得して出力するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像だけでは内容を把握しにくいときに、少ないデータ通信量の増加だけで、映像の内容を理解することができるようになる。
【００４９】
また本発明によれば、放送局から放送されている映像コンテンツの中から選択された複数の映像コンテンツから録画データを作成するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、放送されている映像コンテンツを選択してサムネール画像を表示することができる。
【００５０】
また本発明によれば、複数の放送局から放送されている映像コンテンツの中から選択された一つの映像コンテンツから録画データを作成するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、選択されている映像コンテンツのサムネール画像を表示することができる。
【００５１】
また本発明によれば、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間づつ順次選択して作成した録画データに基づいてサムネール画像を生成するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、放送されている映像コンテンツを選択してサムネール画像を表示することができる。
【００５２】
また本発明によれば、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間づつ順次選択して作成した録画データに基づいてサムネール画像を生成し、複数の放送局の生成されたサムネール画像を表示するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像を選択することにより放送局を選択することができる。
【００５３】
また本発明によれば、録画データの現在の再生停止位置から、再生方向とサムネール画像を生成する時間間隔との組合せを選択できるので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、録画データのサムネール画像をサムネール画像間での映像の概要の継続性を損なうことなく更新して表示し、目的の映像に到達することができる。
【００５４】
また本発明によれば、生成したサムネール画像の録画データ内の再生位置を特定する特定情報を、前記サムネール画像と関連付けて保存しているので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像が選択されたことにより、サムネール画像の開始位置から、予め定められた録画再生装置の操作を行なうことができる。
【００５５】
また本発明によれば、生成したサムネール画像の録画データ内の再生位置を特定する特定情報を、前記サムネール画像と関連付けて保存し、選択されたサムネール画像の再生位置からの録画データを端末装置に送信するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、選択したサムネール画像からの録画データの再生映像を端末装置側で見ることができる。
【００５６】
また本発明によれば、複数の放送局から放送されている映像コンテンツの中から選択された一つの映像コンテンツからサムネール画像を生成し、生成されたサムネール画像の基になった映像コンテンツを放送する放送局を特定する放送局特定情報とともに送信するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像が選択されたことにより、選択されたサムネール画像に対応する放送局を選択することができる。
【００５７】
また本発明によれば、録画データの現在の再生停止位置から、再生方向とサムネール画像を生成する時間間隔との組合せを選択できるので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、録画データのサムネール画像をサムネール画像間での映像の概要の継続性を損なうことなく更新して表示し、目的の映像に到達することができる。
【００５８】
また本発明によれば、映像を再生する装置の処理能力が不足している場合や、ネットワークの通信帯域が不足している場合にも、サムネール画像により映像を見ることができ、また、高速なネットワークで通信料金が高い場合は、サムネール画像を用いることにより料金を抑えることができる。
【００５９】
また本発明によれば、二つの映像を再生できない装置において、既に一つの映像を再生していても、サムネール画像として他の映像を見ることができ、他の映像の検索や頭出しを行なうことができる。
【発明を実施するための最良の形態】
【００６０】
図１は、本発明の実施の一形態である画像再生システム１のハードウエア構成を示す図である。画像再生システム１は、ＰＶＲ（Personal Video Recorder）に代表される、たとえば、テレビ放送を録画データとして記録媒体に録画保存し、記録媒体に保存した録画データを再生することができる録画再生装置１０と、録画保存した録画データを遠隔から操作することができる、たとえば、携帯電話やモバイルＰＣ（Personal Computer）といった個人用の持ち運び可能な端末装置２０とを含んで構成される。また、端末装置２０は、録画再生装置１０を本体装置としたとき、本体装置を遠隔で操作するための外部の機器、たとえば、液晶ディスプレイなどの表示部を備えたリモコン機器のような外部の機器でもよい。
【００６１】
録画再生装置１０は、中央制御部１１、記憶部１２、通信部１３、指示入力部１４、映像出力部１５、および映像入力部１６を含んで構成され、記憶部１２には、プログラムメモリ１２１、作業用メモリ１２２、および補助記憶メモリ１２３がある。端末装置２０は、中央制御部２１、記憶部２２、通信部２３、指示入力部２４、および映像出力部２５を含んで構成され、記憶部２２には、プログラムメモリ２２１、作業用メモリ２２２、および補助記憶メモリ２２３がある。
【００６２】
中央制御部１１は、録画再生装置１０全体を制御する制御部で、たとえば、マイクロコンピュータで実現されるＣＰＵ（Central Processing Unit）により構成され、プログラムを格納するメモリであるプログラムメモリ１２１に格納されている種々のプログラムを実行し、また、処理に必要な情報を一時的に格納するためのメモリである作業用メモリ１２２に格納することにより、種々の処理を行なう。
【００６３】
また、中央制御部２１は、端末装置２０全体を制御する制御部で、たとえば、マイクロコンピュータで実現されるＣＰＵにより構成され、プログラムを格納するメモリであるプログラムメモリ２２１に格納されている種々のプログラムを実行し、また、処理に必要な情報を一時的に格納するためのメモリである作業用メモリ２２２に格納することにより、種々の処理を行なう。
【００６４】
録画データなどを格納する補助記憶メモリ１２３、および、録画データから取得した静止画像を縮小したサムネール画像などを格納する補助記憶メモリ２２３は、内臓型のＨＤＤ（Hard Disk Drive）などの記憶媒体を用いるが、外付け型のＨＤＤや、分離可能な記録媒体、たとえば、磁気テープなどを装填して書込みや読取りが可能な記憶装置を接続して用いてもよい。
【００６５】
指示入力部２４は、ユーザが録画再生装置１０や携帯端末２０に対する操作を行なうための入力部であり、たとえば、携帯電話などに備えられている数字や文字などを入力するボタンや電源投入切断などを行なう操作ボタン、または、モバイルＰＣなどのキーボードやマウスが用いられる。
【００６６】
ユーザは、指示入力部２４からサムネール画像の表示を開始するための開始指示と種々の操作を指示する操作指示を行なうと、指示入力部２４は、入力された開始指示と操作指示を中央制御部２１に通知する。中央制御部２１は、通知された開始指示と操作指示を、無線通信を行なう通信部２３から録画再生装置１０に送信する。
【００６７】
録画再生装置１０の無線通信を行なう通信部１３は、送信された開始指示と操作指示を受信すると、中央制御部１１に通知する。開始指示と操作指示を通知された中央制御部１１は、操作指示に従って、補助記憶メモリ１２３に格納されている録画データを基にサムネール画像を生成し、生成したサムネール画像を、通信部１３を介して、端末装置２０に送信する。
【００６８】
端末装置２０の通信部２３は、送信されたサムネール画像を受信し、中央制御部２１に転送する。中央制御部２１は、転送されたサムネール画像を、補助記憶メモリ２２３に格納するとともに、液晶ディスプレイやモニタといった表示を行なうための出力部である映像出力部２５の表示画面に表示する。
【００６９】
ユーザは、表示されたサムネール画像を見て、次の操作指示を指示入力部２４から指示する。新たに指示された操作指示は、中央制御部２１により、録画再生装置１０に送られ、録画再生装置１０は、現在、つまり、新たな操作指示を受けたときに、停止している再生位置から、新たな操作指示に従ってサムネール画像を生成し、携帯端末２０に送信する。携帯端末２０は、新たな操作指示に従って生成されたサムネール画像を、最初に表示したサムネール画像に置き替えて表示する。以後、ユーザが目的の映像に到達するまで、この動作が繰り返される。
【００７０】
映像入力部１６は、テレビ放送を受信するためのアンテナやチューナ、あるいは、映像や音声の入力端子、Ａ−Ｄ（Analog-Digital）変換を行なう部位などで実現されるものである。映像出力部１５は、テレビ放送の映像や録画データを再生した映像を表示するための表示部で、たとえば、液晶ディスプレイやモニタが用いられる。指示入力部１４は、テレビ放送のチャンネルを選択する指示や、録画再生を行なうため指示を入力するための入力部である。
【００７１】
録画再生装置１０の通信部１３と端末装置２０の通信部２３との通信は、無線通信である必要は無く、電話回線など有線通信や赤外線、あるいは、インターネットを経由するものでもよい。この間の通信は、たとえば、インターネットであれば、ＴＣＰ／ＩＰ（
Transmission Control Protocol/Internet Protocol）上に実装されたプロトコル、たとえば、ＨＴＴＰ（Hyper Text Transfer Protocol）などで行なえばよい。また、赤外線を用いる場合は、ＩｒＯＢＥＸ（Infrared Data Association Object Extended Protocol）などのプロトコルを用いて行なえばよい。
【００７２】
端末装置２０からの指示で、補助記憶メモリに格納されている録画データを読出し、サムネール画像の表示を行なう場合は、映像入力部１６、映像出力部１５、および指示入力部１４は、不要である。
【００７３】
図２は、本発明の実施の一形態である録画再生システム１の表示画面の表示例を示す図である。図２（ａ）は、録画再生装置１０の表示画面の一例を示す図であり、モニタ３０は、録画再生装置１０の映像出力部１５に相当し、モニタ３０の表示画面３１にテレビ放送の映像や録画データの再生映像が表示される。
【００７４】
図２（ｂ）は、端末装置２０の表示画面の一例を示す図であり、端末装置２０の一種であるリモコン機器４０の表示画面４１に、５つのサムネール画像４１ａ〜４１ｅが表示されている。ユーザは、操作ボタン４２ａ〜４２ｊを操作して、サムネール画像を表示し、表示されたサムネール画像を見ることにより、録画データの概要を理解したり、目的の映像を探したりすることができる。
【００７５】
操作ボタン４２ａ〜４２ｊを用いて行なう操作の中には、ビデオ機器で用いられている再生、早送り、巻戻し、スローといった操作が含まれている。
【００７６】
また、受信したサムネール画像は、一度にすべて表示する必要はなく、小さい画面であれば、受信したサムネール画像を、数枚づつスクロール表示してもよい。
【００７７】
図３は、本発明の実施の一形態における端末装置２０から指示できる操作の一覧の一例を示す図であり、操作ボタンの表示、キーコード、および生成するサムネール画像の時間間隔と枚数を１１種類の操作ボタンの表示毎に、一覧表にしたものである。
【００７８】
蘭５０、５１、および５２には、それぞれ、「操作ボタンの表示」、「キーコード」、および「生成するサムネール画像の時間間隔と枚数」と記載されており、５３ａ〜５３ｋの各行には、各操作ボタンの表示に対応するキーコードおよび生成するサムネール画像の時間間隔と枚数が示されている。たとえば、行５３ａには、操作ボタンの表示「＞」に対応するキーコード「００」と、サムネール画像の時間間隔と枚数「１．０（ｓ）／５枚」と記載されている。
【００７９】
行５３ａは、ビデオ機器の再生に相当する操作であり、行５３ｂ〜５３ｅは、早送りに相当する機能であり、それぞれ、５倍速、１０倍速、３０倍速、１５０倍速の早送りに対応する。行５３ｆ〜５３ｉは、巻戻しに相当する操作であり、それぞれ、５倍速、１０倍速、３０倍速、１５０倍速の早送りに対応し、行５３ｊは、０．５倍速のスロー再生、行５３ｋは、０．５倍速のスロー巻戻し再生である。
【００８０】
ユーザが押した操作ボタンに対応するキーコードが、端末装置２０から、録画再生装置１０に、操作指示として送信される。図３に示した一覧表は、端末装置２０の作業用メモリ２２２に格納されているが、「操作ボタンの表示」の蘭５０が無い一覧表が、つまり、「キーコード」と「生成するサムネール画像の時間間隔と枚数」との対応を示す一覧表が、録画再生装置１０の作業用メモリ１２２に格納されており、録画再生装置１０は、キーコードから、ユーザが指示した操作を把握することができる。
【００８１】
リモコン機器４０などの端末装置は、携帯性が重要であり、装置の大きさを小さくするために、操作ボタンの数を限定しており、上述した１１種類の操作にそれぞれ個別の操作ボタンを割り当てることができない場合が多い。このような場合は、ボタン操作の組合せや、ボタンを押している時間などに対応させて、指示させてもよい。
【００８２】
上述した実施形態では、生成する枚数を５枚としたが、表示画面の大きさに応じて増減してもよい。また、早送り、巻戻し、スローの再生速度や種類は、使用される形態を考慮して変更や増減をしてもよい。
【００８３】
また、予め用意した操作だけでなく、ユーザが、再生方向と生成するサムネール画像の時間間隔を指定できるようにして、指定された再生方向と生成するサムネール画像の時間間隔を、操作指示として、録画再生装置に指示してもよい。
【００８４】
また、録画データの再生開始位置（録画データの再生を開始するときの映像の時刻）や生成する枚数を指定できるようにして、指定された再生開始位置や生成する枚数を、操作指示として、録画再生装置１０に指示してもよい。この場合、録画再生装置１０は、現在停止している再生位置からサムネール画像を生成するのではなく、指定された再生開始位置からサムネール画像を生成する。
【００８５】
図４は、本発明の実施の一形態におけるメモリに格納されているプログラムまたは格納されるデータの記憶領域の構成を示す図である。図４（ａ）は、録画再生装置１０のプログラムメモリ１２１に格納されているプログラムを示しており、格納されているプログラムには、映像録画制御プログラム１２１ａ、映像再生制御プログラム１２１ｂ、サムネール画像生成制御プログラム１２１ｃ、およびサムネール画像生成プログラム１２１ｄなどがある。
【００８６】
映像録画制御プログラム１２１ａは、映像入力部１６から送られてくる映像を録画データとして作成し、補助記憶メモリ１２３に格納するといった制御を行なうプログラムである。映像再生制御プログラム１２１ｂは、補助記憶メモリ１２３に格納された録画データを再生し、映像表示部１５に表示するといった制御を行なうプログラムである。
【００８７】
サムネール画像生成制御プログラム１２１ｃは、サムネール画像を生成する処理の中心の役割を持つプログラムである。携帯端末２０の指示入力部２４から指示された操作指示を解釈して、解釈した内容をサムネール画像生成プログラム１２１ｄに指示する。つまり、携帯端末２０からの操作指示は、キーコードとして送信されるので、サムネール画像生成制御プログラム１２１ｃは、作業用メモリ１２２に保持している図３に示した一覧表に対応する一覧表に基づいて、送信されたキーコードから、サムネール画像を生成する時間間隔と枚数を求めて、作業用メモリ１２２に設定する。たとえば、携帯端末２０から受け取った操作指示のキーコードが、「００」であるときは、「１秒間隔」および「５枚」という情報を作業用メモリ１２２に設定する。
【００８８】
サムネール画像生成制御プログラム１２１ｃは、サムネール画像生成プログラム１２１ｄに、作業用メモリ１２２に設定した時間間隔と枚数で、サムネール画像を生成するように指示する。サムネール画像生成プログラム１２１ｄは、録画データの現在停止している再生位置から、作業用メモリ１２２に設定された時間間隔のサムネール画像を、作業用メモリ１２２に設定された枚数分生成し、生成したサムネール画像を補助記憶メモリ１２３に格納する。
【００８９】
また、サムネール画像生成制御プログラム１２１ｃは、補助記憶メモリ１２３から生成されたサムネール画像を読出し、端末装置２０に送信する。
【００９０】
図４（ｂ）は、録画再生装置１０の補助記憶メモリ１２３に格納されるデータの記憶領域を示しており、格納されるデータの記憶領域には、インデックスデータ記憶部１２３ａ、録画データ記憶部１２３ｂ、およびサムネール画像データ記憶部１２３ｃなどがある。
【００９１】
インデックスデータ記憶部１２３ａは、生成したサムネール画像を特定する情報であるインデックス番号と、そのインデックス番号が特定するサムネール画像の録画データ上の位置情報（時刻）とを関連付けて格納する記憶領域である。録画データ記憶部１２３ｂは、録画データを格納する記憶領域であり、サムネール画像データ記憶部１２３ｃは、サムネール画像を格納する記憶領域である。
【００９２】
図４（ｃ）は、端末装置２０のプログラムメモリ２２１に格納されているプログラムを示しており、格納されているプログラムには、映像表示制御プログラム２２１ａといったプログラムがある。
【００９３】
映像表示制御プログラム２２１ａは、補助記憶メモリ２２３に格納されているサムネール画像を映像出力部２５に表示するプログラムである。
【００９４】
図４（ｄ）は、端末装置２０の補助記憶メモリ２２３に格納されるデータの記憶領域を示しており、格納されるデータの記憶領域には、インデックスデータ記憶部２２３ａおよびサムネール画像データ記憶部２２３ｃなどがある。
【００９５】
図５は、本発明の実施の一形態における録画再生装置１０のサムネール画像生成制御プログラム１２１ｃの主たる処理を示すフローチャートである。この処理は、録画再生装置１０が、端末装置２０から開始指示を受信したときに開始される。
【００９６】
ステップＳ１では、端末装置２０から受信した操作指示にキーコードが含まれているかどうかを確認する。キーコードが含まれているときは、再生、早送り、巻戻し、または、スローといった操作指示がされた場合であり、ステップＳ２に進み、キーコードが含まれていないときは、ステップＳ５に進む。ステップＳ２では、最後に送信したサムネール画像の次に生成するサムネール画像の開始位置を、作業用メモリ１２２に設定する。
【００９７】
ステップＳ３では、作業用メモリ１２２に格納されている一覧表を参照し、キーコードに対応する生成するサムネール画像の時間間隔と枚数を、作業用メモリ１２２に設定する。ステップＳ４では、作業用メモリ１２２に設定された開始位置と時間間隔と枚数に基づいて、サムネール画像を生成するために、サムネール画像生成プログラム１２１ｄを呼び出した後、終了する。
【００９８】
ステップＳ５では、操作指示に再生開始位置と時間間隔が含まれているかどうかを確認する。再生開始位置と時間間隔が含まれているときは、ステップＳ６に進み、含まれていないときは、ステップＳ８に進む。
【００９９】
ステップＳ６では、操作指示に含まれる指定された再生開始位置をサムネール画像を生成する開始位置として、作業用メモリ１２２に設定する。ステップＳ７では、操作指示に含まれる指定された時間間隔と枚数を、作業用メモリ１２２に設定した後、ステップＳ４に進む。
【０１００】
ステップＳ８では、操作指示が無く、単に開始指示だけのときであり、サムネール画像を生成する開始位置として、デフォルト値を作業用メモリ１２２に設定する。ステップＳ９では、デフォルト値の時間間隔と枚数を、作業用メモリ１２２に設定した後、ステップＳ４に進む。
【０１０１】
図６は、本発明の実施の一形態における録画再生装置１０のサムネール画像生成プログラム１２１ｄの処理を示すフローチャートである。この処理は、サムネール画像生成制御プログラム１２１ｃから呼び出されたときに開始される。ステップＳ１０では、作業用メモリ１２２に設定された開始位置から、設定された枚数のサムネール画像を、設定された時間間隔で、録画データの静止画像を抽出する。
【０１０２】
ステップＳ１１では、幾何学変換や線形補間などの処理を行なって、抽出した静止画像を縮小した縮小画像を生成する。画像を縮小する処理は、静止画像を構成する各画素のＸ座標とＹ座標を、予め定められた倍率（縮小率）を乗じた位置に移動させることにより行なわれる。たとえば、元の画素サイズが２５６ｘ２５６のものを、縦方向および横方法ともに、サイズを１／２に縮小することを考えた場合、Ｘ，Ｙ座標（１００，５０）に位置する画素は、Ｘ，Ｙ座標（５０，２５）に移動する。この処理を元の静止画像を構成するすべての画素について行なうことにより、縮小処理が行なわれる。
【０１０３】
なお、この処理を行なう際、変換後の座標位置が整数値の位置に対応しなかったり、あるいは、誤差により複数の画素が同じ画素位置に対応したりするために歪が生じることがあり、変換後の画素値に対して線形補間の処理を行なってもよい。線形補間処理は、たとえば、求めるべき変換後のそれぞれの画素値を、縮小して移動した画素のうち近傍の４画素との距離に応じて重み付けを施すことにより決定する線形補間処理を用いる。
【０１０４】
ステップＳ１２では、生成した縮小画像に対して、減色処理を行い、画像のデータ量を削減する。減色処理は、元の色に近い色で近似したり、別の色を組み合わせて元の色に近い色を表現したりすることによって行なわれ、たとえば、誤差拡散法やディザ法などの方法を用いて行なう。なお、減色処理は、通信で送るデータ量を削減するためのものであり、必ずしも行なう必要はない。
【０１０５】
上述した実施例では、設定された枚数のサムネール画像を生成したが、次に要求されると予測される再生位置、たとえば、生成した最後のサムネール画像の再生位置の前後の予め定められた範囲について、サムネール画像を生成して、作業用メモリ１２２に格納しておき、次にサムネール画像生成制御プログラム１２１ｃから呼び出されたときに、作業用メモリ１２２に設定された指示により生成しようとするサムネール画像が、既に作業用メモリ１２２にあれば、作業用メモリに格納されているサムネール画像を、新たに生成したサムネール画像としてもよい。これにより、次のサムネール画像をより早く表示することができるようになる。
【０１０６】
また、サムネール画像を生成する位置の録画データが、ＣＭ（Commercial）部分のときは、ＣＭ部分の映像については、サムネール画像を作成せず、ＣＭ部分が経過した後から、継続してサムネール画像を生成してもよい。ＣＭ部分を識別するための手段は、たとえば、音声のステレオ／モノラルが切り替わったことを検出するといった手段がある。
【０１０７】
また、文字認識プログラムをプログラムメモリ１２１に格納しておき、サムネール画像を生成する位置の前後の予め定められた範囲の映像について、この文字認識プログラムを用いて、映像中に文字があるかないかを検索し、テロップなどの識別可能な文字が含まれる映像については、優先してサムネール画像を生成するようにしてもよい。
【０１０８】
文字の検索は、たとえば、テロップは、白い表示であることが多いという特性、さらに、表示される位置がほぼ決まっているという特性があり、その表示される部分の映像について、各画素のＲＧＢ（Red Green Blue）の３色の諧調を用いて、映像間の諧調の変化を算出し、予め定めた敷居値を越えたときに、文字を検出したと判断することにより文字を含む映像を検索することができる。これにより、サムネール画像だけでは内容を把握しにくいときに、より内容を理解することができるようになる。
【０１０９】
また、サムネール画像を生成する際に、先頭のサムネール画像に対応する映像から、予め定められた時間分の音声を、音声データとして、作業用メモリ１２２に格納し、端末装置２０にサムネール画像とともに送信し、サムネール画像を表示する際に、スピーカやイヤホンといった図示されていない音声出力部から音声を出力してもよい。音声データは、映像データより情報量が少なく、サムネール画像だけでは内容を把握しにくいときに、少ないデータ通信量で、映像の内容を理解することができるようになる。
【０１１０】
また、サムネール画像を生成するときに、各サムネール画像を特定するインデックス番号を生成し、サムネール画像と関連付けてインデックデータ記憶部１２３ａに格納しておき、端末装置２０にサムネール画像を送信する際に、このインデックス番号も送信し、ユーザが、端末装置２０の表示画面で、一つのサムネール画像を特定したときに、端末装置２０は、このサムネール画像に対応するインデックス番号のみを、録画再生装置１０に送信すれば、録画再生装置１０は、どのサムネール画像が指定されたかを把握することができ、指定されたサムネール画像の再生位置から、予め定められた処理、たとえば、映像を再生するといった処理を行なうことができる。
【０１１１】
これにより、録画再生装置１０で再生している映像を停止することなく、次に再生したい映像の検索と頭出しを行なうことができる。
【０１１２】
また、指定されたサムネール画像の再生位置から再生される映像を、たとえば、ＭＰＥＧ２形式に圧縮された映像データとして、端末装置２０に送信し、端末装置２０で映像を再生してもよい。映像データを送信する方式は、ストリーミングと呼ばれる方式を用いて、ＲＴＰ（Real-time Transport Protocol）などのプロトコルで送信すればよく、録画再生装置１０にＲＴＰサーバプログラム、端末装置２０にＲＴＰクライアントプログラムを、それぞれ、プログラムメモリ１２１、２２１に格納して実行できるようにしておくことに実現可能である。
【０１１３】
これにより、特にデータ通信量に応じて課金されるような通信手段を経由して映像を再生したい場合に、課金される金額を抑えることができ、比較的高速な通信手段において、不要な部分の映像は、サムネール画像により通信のデータ量を抑え、必要な部分の映像のみ、ストリーミング方式で映像を再生するといった利用形態に適している。
【０１１４】
また、映像録画制御プログラム１２１ａが選局された放送局から放送される映像から作成した録画データに対して、サムネール画像を生成して、サムネール画像データ記憶部１２３ｃに格納してくことにより、ユーザは、格納されたサムネール画像に対して、再生、早送り、巻戻し、スローといった操作を行なって、現在選局して放送されている放送の過去の映像をサムネール画像として見ることができる。
【０１１５】
また、映像録画制御プログラム１２１ａが複数の放送局から放送される映像から作成した録画データに対して、サムネール画像を生成して、サムネール画像データ記憶部１２３ｃに格納してくことにより、ユーザは、現在放送されている複数の放送の過去の映像を、ほぼリアルタイムに選択して見ることにより、放送局を選局することができ、また、格納されたサムネール画像に対して、再生、早送り、巻戻し、スローといった操作を行なって、複数の放送局から放送されている放送の過去の映像をサムネール画像として見ることができる。
【０１１６】
複数の放送局の映像を録画するために、複数のチューナを搭載して並行して録画データを作成してもよいし、複数の放送局に対し一つのチューナにより、時分割で放送局を切り替えて録画データを作成してもよい。サムネール画像は、もともと、断続的なものであり、一つの放送局の映像が断続的なものであっても、実用上特に支障はない。
【０１１７】
図７は、本発明の実施の一形態における録画再生装置１０のサムネール画像生成プログラム１２１ｄが行なう静止画像の抽出処理を説明するための図であり、動画像を圧縮する技術、たとえば、ＭＰＥＧ２（Moving Picture Experts Group phase 2）で記録された録画データを時系列に表示したものである。ＭＰＥＧ２は、放送局で必要とされる程度の品質の符号化技術であり、３種類のフレーム画像、つまり、過去や未来のフレーム画像との関係を用いずに元の画像を復元できるキーフレームと呼ばれるＩピクチャ、過去のＩピクチャあるいはＰピクチャとの関係を基に生成されるＰピクチャ、および、前後のＩピクチャ又はＰピクチャとの関係を基に生成されるＢピクチャから構成される。
【０１１８】
静止画像を抽出する際、抽出したい位置のフレーム画像が、Ｉピクチャ、たとえば、Ｉピクチャ６１である場合には、単にそのフレーム画像を復号して抽出するだけでよい。抽出したい位置のフレーム画像が、Ｐピクチャ、たとえば、Ｐピクチャ６４である場合には、Ｉピクチャ６１を基に復号する必要があり、また、抽出したい位置のフレーム画像が、Ｂピクチャ、たとえば、Ｂピクチャ６２である場合には、Ｉピクチャ６１又はＰピクチャ６４を基に復号する必要がある。
【０１１９】
図８は、本発明の実施の一形態におけるサムネール画像の表示例とそれに対する操作を説明するための図である。画面８０〜８４は、５つのサムネール画像を表示した端末装置２０の表示画面を、５つ示したものである。
【０１２０】
画面８０は、再生指示によって、最初（１回目）に表示される画面であり、時刻ｔ＝０．０から時刻ｔ＝４．０までの、時間間隔１．０の時刻の５枚のサムネール画像が表示されており、それぞれに、各サムネール画像の時刻が表示されている。
【０１２１】
ユーザが目的の映像はもっと先にあると思い、端末装置２０から１０倍速の早送りを指示すると、画面８１が表示され、時刻ｔ＝１４．０から時刻ｔ＝５４．０までの、時間間隔１０．０の時刻の５枚のサムネール画像が表示される。これは、前回の最終のサムネール画像の時刻ｔ＝４．０を基点に、時間間隔１０．０で生成されたサムネール画像である。
【０１２２】
ユーザが、目的の画像が時刻ｔ＝４４．０付近にあると思い、端末装置２０から３倍速の巻戻しを指示すると、画面８２が表示され、時刻ｔ＝５１．０から時刻ｔ＝３９．０までの、時間間隔３．０の時刻の５枚のサムネール画像が表示される。
【０１２３】
ユーザが、目的の画像がこの付近にあると思い、端末装置２０から再生を指示すると、画面８３が表示され、時刻ｔ＝４０．０から時刻ｔ＝４４．０までの、時間間隔１．０の時刻の５枚のサムネール画像が表示される。
【０１２４】
この中に目的の画像がないので、ユーザは、引き続き再生を指示すると、画面８４が表示され、時刻ｔ＝４５．０から時刻ｔ＝４９．０までの、時間間隔１．０の時刻の５枚のサムネール画像が表示される。この中の時刻ｔ＝４６．０のサムネール画像（灰色表示のサムネール画像）が、目的の画像であり、ユーザは、見たかったシーンを見ることができる。
【０１２５】
上述した操作を行なうことにより目的の画像に到達できるので、つまり、ユーザの意思によって、表示の時間間隔を自由に変化させながら、ビデオ機器の操作感で表示時刻を前後に操作できるので、従来技術に比べて、より自然な操作感でサムネール画像の表示が可能となる。
【０１２６】
上述した実施例では、つまり、録画再生装置１０と端末装置２０とを含んで構成される画像再生システム１について説明したが、本発明は、この構成に限定されるものではなく、たとえば、液晶モニタとＰＶＲ機能が備えられた単一の装置で、放送を受信し、録画と再生が行なえる装置であってもよい。
【０１２７】
図９は、本発明の実施の他の形態である画像再生装置７０のハードウエア構成を示す図であり、単一の装置からなるものである。画像再生装置７０は、中央制御部７１、記憶部７２、指示入力部７３、映像入力部７４、および映像出力部７５を含んで構成され、記憶部７２には、プログラムメモリ７２１、作業用メモリ７２２、および補助記憶メモリ７２３がある。
【０１２８】
中央制御部７１は、画像再生装置７０全体を制御する制御部で、たとえば、マイクロコンピュータで実現されるＣＰＵにより構成され、プログラムを格納するメモリであるプログラムメモリ７２１に格納されている種々のプログラムを実行し、また、処理に必要な情報を一時的に格納するためのメモリである作業用メモリ７２２に格納することにより、種々の処理を行なう。
【０１２９】
プログラムメモリ７２１の中には、録画再生装置１０のプログラムメモリ１２１内に格納されている映像録画制御プログラム１２１ａ、映像再生制御プログラム１２１ｂ、サムネール画像生成制御プログラム１２１ｃ、およびサムネール画像生成プログラム１２１ｄと同じプログラムと、端末装置２０のプログラムメモリ２２１に格納されている画像表示制御プログラム２２１ａと同じプログラムなどが格納されている。
【０１３０】
録画データと録画データから取得した静止画像を縮小したサムネール画像などを格納する補助記憶メモリ７２３は、内臓型のＨＤＤなどの記憶媒体を用いるが、外付け型のＨＤＤや、分離可能な記録媒体、たとえば、磁気テープなどを装填して書込みや読取りが可能な記憶装置を接続して用いてもよい。補助記憶メモリ７２３に格納されるデータの記憶領域には、録画再生装置１０の補助記憶メモリ１２３内の記憶領域であるインデックスデータ記憶部１２３ａ、録画データ記憶部１２３ｂ、およびサムネール画像データ記憶部１２３ｃと同じ記憶領域がある。
【０１３１】
指示入力部７３は、ユーザが画像再生装置７０に対する操作を行なうための入力部であり、たとえば、携帯電話などに備えられている数字や文字などを入力するボタンや電源投入切断などを行なう操作ボタン、または、モバイルＰＣなどのキーボードやマウスが用いられる。
【０１３２】
ユーザは、指示入力部７３からサムネール画像の表示を開始するための開始指示と種々の操作を指示する操作指示を行なうと、指示入力部７３は、入力された開始指示と操作指示を中央制御部７１に通知する。
【０１３３】
開始指示と操作指示を通知された中央制御部７１は、操作指示に従って、補助記憶メモリ７２３に格納されている録画データを基にサムネール画像を生成し、生成したサムネール画像を、補助記憶メモリ７２３に格納するとともに、液晶ディスプレイやモニタといった表示を行なうための出力部である映像出力部７５の表示画面に表示する。
【０１３４】
ユーザは、表示されたサムネール画像を見て、次の操作指示を指示入力部７３から指示する。新たな操作指示を指示された中央制御部７１は、現在停止している再生位置から、新たな操作指示に従ってサムネール画像を生成し、生成したサムネール画像を、最初に表示したサムネール画像に置き替えて表示する。以後、ユーザが目的の映像に到達するまで、この動作が繰り返される。
【０１３５】
映像入力部７４は、テレビ放送を受信するためのアンテナやチューナ、あるいは、映像や音声の入力端子、Ａ−Ｄ変換を行なう部位などで実現されるものである。映像出力部７５は、テレビ放送の映像や録画データを再生した映像を表示するための表示部で、たとえば、液晶ディスプレイやモニタが用いられる。
【０１３６】
図１０は、本発明の実施の他の形態である画像再生装置７０の表示画面の表示例を示す図である。図１０（ａ）は、録画データから生成したサムネール画像を表示しており、映像出力部７５は、サムネール画像を表示する際、表示画面７６の下部にサムネール画像表示領域７７を確保して、そこにサムネール画像、たとえば、５枚のサムネール画像７７ａ〜７７ｅを表示する。背景には、テレビ放送を表示しておいてもよいし、別の画像やメニュー画面を表示してもよいし、あるいは、サムネール画像を拡大して順次表示してもよい。
【０１３７】
図１０（ｂ）は、複数の放送局のサムネール画像を表示した表示画面であり、映像出力部７５は、サムネール画像を表示する際、表示画面に、たとえば、３つの放送局のサムネール画像を表示するために、３つのサムネール画像表示領域７７〜７９を確保して、それぞれ、５つのサムネール画像を表示する。
【０１３８】
ユーザが表示されているサムネール画像を選択すると、中央制御部７１は、選択されたサムネール画像の放送局を選局したり、または、選択されたサムネール画像の再生位置から予め定められた動作、たとえば、サムネール画像の再生といった動作を行なう。
【０１３９】
上述した実施の形態では、録画データに対してサムネール画像を生成したが、複数の静止画像から構成される画像データ、たとえば、録画データから作成された複数の静止画像から構成される画像データからサムネール画像を生成して表示する場合にも適用できる。
【０１４０】
また、サムネール画像は、録画データ内の特定の時刻（録画データの特定の再生位置）の静止画像に限定されるものではなく、任意の位置、たとえば、ある範囲の位置、すなわち、ある範囲の時刻の静止画像についてサムネール画像を生成して表示してもよい
【図面の簡単な説明】
【０１４１】
【図１】本発明の実施の一形態である画像再生システム１のハードウエア構成を示す図である。
【図２】本発明の実施の一形態である録画再生システム１の表示画面の表示例を示す図である。
【図３】本発明の実施の一形態における端末装置２０から指示できる操作の一覧の一例を示す図である。
【図４】本発明の実施の一形態におけるメモリに格納されているプログラムまたは格納されるデータの記憶領域の構成を示す図である。
【図５】本発明の実施の一形態における録画再生装置１０のサムネール画像生成制御プログラム１２１ｃの主たる処理を示すフローチャートである。
【図６】本発明の実施の一形態における録画再生装置１０のサムネール画像生成プログラム１２１ｄの処理を示すフローチャートである。
【図７】本発明の実施の一形態における録画再生装置１０のサムネール画像生成プログラム１２１ｄが行なう静止画像の抽出処理を説明するための図である。
【図８】本発明の実施の一形態におけるサムネール画像の表示例とそれに対する操作を説明するための図である。
【図９】本発明の実施の他の形態である画像再生装置７０のハードウエア構成を示す図である。
【図１０】本発明の実施の他の形態である画像再生装置７０の表示画面の表示例を示す図である。
【図１１】第５の従来技術による映像録画装置の一実施例におけるサムネール画像の表示例とそれに対する操作を説明するための図である。
【符号の説明】
【０１４２】
１  画像再生システム
１０  録画再生装置
１１，２１，７１  中央制御部
１２，２２，７２  記憶部
１３，２３  通信部
１４，２４，７３  指示入力部
１５，２５，７５  映像出力部
１６，７４  映像入力部
２０  端末装置
３０  モニタ
３１，４１，７６  表示画面
４０  リモコン機器
４１ａ〜４１ｅ，７７ａ〜７７ｅ  サムネール画像
４２ａ〜４２ｊ  操作ボタン
７７〜７９  サムネール画像表示領域
１２１，２２１，７２１  プログラムメモリ
１２１ａ  映像録画制御プログラム
１２１ｂ  映像再生制御プログラム
１２１ｃ  サムネール画像生成制御プログラム
１２１ｄ  サムネール画像生成プログラム
１２２，２２２，７２２  作業用メモリ
１２３，２２３，７２３  補助記憶メモリ
１２３ａ，２２３ａ  インデックスデータ記憶部
１２３ｂ  録画データ記憶部
１２３ｃ，２２３ｂ  サムネール画像データ記憶部
２２１ａ  映像表示制御プログラム
【図１】
2005260862.tif 000003
【図２】
2005260862.tif 000004
【図３】
2005260862.tif 000005
【図４】
2005260862.tif 000006
【図５】
2005260862.tif 000007
【図６】
2005260862.tif 000008
【図７】
2005260862.tif 000009
【図８】
2005260862.tif 000010
【図９】
2005260862.tif 000011
【図１０】
2005260862.tif 000012
【図１１】
2005260862.tif 000013