【手続補正書】
【提出日】平成26年9月26日(2014.9.26)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
コンテンツを、時間的に連続する１フレーム以上のフレームの集まりである動画セグメントに区分することにより得られる前記動画セグメントを代表する画像であるセグメント代表画像を配置したマップであるセグメントマップを、表示装置に表示させる表示制御部と、
前記セグメント代表画像に対する、再生を要求するユーザの再生操作に応じて、そのセグメント代表画像に対応する前記動画セグメントの再生を制御する再生制御部と
を備え、
コンテンツの動画セグメントの再生中に、そのコンテンツの、他の動画セグメントのセグメント代表画像に対する再生操作が行われた場合、前記再生制御部は、再生中の動画セグメントの再生を維持したまま、再生操作が行われた前記セグメント代表画像に対応する動画セグメントである前記他の動画セグメントを再生する
画像処理装置。
【請求項２】
前記セグメントマップを生成するマップ生成部と、
コンテンツの各フレームを、複数のクラスタのうちのいずれかのクラスタにクラスタリングするクラスタリング部と、
前記複数のクラスタそれぞれについて、前記クラスタに属するフレームを、時間的に連続する１フレーム以上のフレームの集まりである前記動画セグメントに区分するセグメント区分部と、
前記動画セグメントを代表するセグメント代表画像を生成するセグメント代表画像生成部と
をさらに備え、
前記マップ生成部は、
前記複数のクラスタそれぞれについて、前記クラスタに、そのクラスタに属する動画セグメントのセグメント代表画像を対応付け、前記クラスタに対応付けられたセグメント代表画像から、そのクラスタを代表するクラスタ代表画像を選択し、
前記クラスタ代表画像に選択された前記セグメント代表画像を、前記セグメントマップに配置する
請求項１に記載の画像処理装置。
【請求項３】
前記クラスタリング部は、
状態と状態遷移とを有する状態遷移モデルを用い、前記コンテンツのフレームの時系列の特徴量が観測される最尤状態系列を求め、
前記コンテンツの各フレームを、前記最尤状態系列において、そのフレームの特徴量が観測される状態に対応するクラスタにクラスタリングする
請求項２に記載の画像処理装置。
【請求項４】
前記マップ生成部は、
前記状態遷移モデルを２次元平面又は３次元空間に投射したマップであるモデルマップを生成し、
前記モデルマップの各状態の位置に、その状態に対応するクラスタのクラスタ代表画像に選択された前記セグメント代表画像を配置することで、前記セグメントマップを生成する
請求項３に記載の画像処理装置。
【請求項５】
前記マップ生成部は、前記状態に対応するクラスタに対応付けられた前記セグメント代表画像のうちの、フレーム数が最大の動画セグメントのセグメント代表画像、又は、再生時刻が最も早い動画セグメントのセグメント代表画像を、前記クラスタ代表画像に選択する
請求項４に記載の画像処理装置。
【請求項６】
前記マップ生成部は、前記モデルマップの各状態の位置に、その状態に対応するクラスタのクラスタ代表画像に選択された前記セグメント代表画像を、その状態の重要度に対応するサイズで配置する
請求項４又は５に記載の画像処理装置。
【請求項７】
前記マップ生成部は、前記状態に対応するクラスタに対応付けられた前記セグメント代表画像に対応する動画セグメントの最大のフレーム数を、前記状態の重要度として求める
請求項６に記載の画像処理装置。
【請求項８】
前記状態を登録することを要求するユーザのお気に入り操作に応じて、前記状態を、登録状態として記憶する記憶部をさらに備え、
前記表示制御部は、前記セグメントマップの、前記登録状態に対応するクラスタの前記クラスタ代表画像に選択された前記セグメント代表画像を強調表示する
請求項４ないし７のいずれかに記載の画像処理装置。
【請求項９】
前記登録状態に対応するクラスタの前記クラスタ代表画像に選択された前記セグメント代表画像に対する再生操作が行われた場合、前記再生制御部は、前記記憶部に記憶されたすべての登録状態に対応するクラスタに対応付けられた前記セグメント代表画像に対応する動画セグメントを、時系列に再生する
請求項８に記載の画像処理装置。
【請求項１０】
前記表示制御部は、ユーザが指示する指示位置に最も近いセグメントマップ上の状態を、注目する注目状態として、前記注目状態に対応するクラスタに対応付けられた前記セグメント代表画像の一覧の画像であるタイル画像を、前記表示装置に表示する表示制御を行う
請求項４ないし９のいずれかに記載の画像処理装置。
【請求項１１】
前記表示制御部は、前記タイル画像の前記セグメント代表画像のうちの、前記指示位置に最も近い前記セグメント代表画像を、注目する注目画像として、前記注目画像を強調表示する
請求項１０に記載の画像処理装置。
【請求項１２】
前記表示制御部は、ユーザの所定の操作に応じて、前記注目状態に対応付けられた前記セグメント代表画像のうちの、前記注目画像と、前記注目画像の前後に続く所定の数の前記セグメント代表画像とを、前記注目画像を中心として、時系列に配置したタイムライン画像を、前記表示装置に表示する表示制御を行う
請求項１１に記載の画像処理装置。
【請求項１３】
前記表示制御部は、ユーザの操作に応じて、前記タイムライン画像に配置される前記セグメント代表画像をスクロールする
請求項１２に記載の画像処理装置。
【請求項１４】
コンテンツを、時間的に連続する１フレーム以上のフレームの集まりである動画セグメントに区分することにより得られる前記動画セグメントを代表する画像であるセグメント代表画像を配置したマップであるセグメントマップを、表示装置に表示させ、
前記セグメント代表画像に対する、再生を要求するユーザの再生操作に応じて、そのセグメント代表画像に対応する前記動画セグメントの再生を制御する
ステップを含み、
前記動画セグメントの再生の制御では、コンテンツの動画セグメントの再生中に、そのコンテンツの、他の動画セグメントのセグメント代表画像に対する再生操作が行われた場合、再生中の動画セグメントの再生を維持したまま、再生操作が行われた前記セグメント代表画像に対応する動画セグメントである前記他の動画セグメントを再生する
画像処理方法。
【請求項１５】
コンテンツを、時間的に連続する１フレーム以上のフレームの集まりである動画セグメントに区分することにより得られる前記動画セグメントを代表する画像であるセグメント代表画像を配置したマップであるセグメントマップを、表示装置に表示させる表示制御部と、
前記セグメント代表画像に対する、再生を要求するユーザの再生操作に応じて、そのセグメント代表画像に対応する前記動画セグメントの再生を制御する再生制御部と
して、コンピュータを機能させるためのプログラムであり、
コンテンツの動画セグメントの再生中に、そのコンテンツの、他の動画セグメントのセグメント代表画像に対する再生操作が行われた場合、前記再生制御部は、再生中の動画セグメントの再生を維持したまま、再生操作が行われた前記セグメント代表画像に対応する動画セグメントである前記他の動画セグメントを再生する
プログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０１０６
【補正方法】変更
【補正の内容】
【０１０６】
フレームから抽出された特徴量そのものを、HMMの観測値oとして用いる場合には、観測値oである特徴量が連続値であり、学習部４４では、連続HMMの学習の結果得られる連続HMMが、クラスタリングモデルとして求められる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０２４５
【補正方法】変更
【補正の内容】
【０２４５】
なお、ユーザが操作を行う操作手段としては、マウスの他、タッチパネルその他のポインティングデバイス等を採用することができる。操作手段として、タッチパネルを採用する場合、タッチパネルのタップ、及び、ダブルタップは、例えば、それぞれ、マウスのクリック、及び、ダブルクリックに対応させることができる。
【手続補正４】
【補正対象書類名】図面
【補正対象項目名】図５
【補正方法】変更
【補正の内容】
【図５】
2013090119.tif 000001