(57)【要約】【課題】  映像コンテンツを指定することにより、当該映像コンテンツを撮影しているユーザが被写体として撮影された映像コンテンツを自動抽出することができる映像コンテンツ管理装置を提供する。【解決手段】  ２以上の映像コンテンツを保持する映像コンテンツ記憶部２１と、映像コンテンツの撮影者、被写体及び撮影場所を含むコンテンツ情報を映像コンテンツに対応づけて記憶するコンテンツ情報記憶部２２と、映像コンテンツのいずれかを検索用コンテンツとして指定した検索要求を受信する検索要求受信部２３と、検索要求に基づいて、映像コンテンツ記憶部２１に保持されている映像コンテンツの中から、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像コンテンツを抽出するコンテンツ検索部２４により構成される。【選択図】  図６
2015099421.tif 000002
【特許請求の範囲】
【請求項１】
２以上の映像コンテンツを保持する映像コンテンツ記憶手段と、
上記映像コンテンツの撮影者、被写体及び撮影場所を上記映像コンテンツに対応づけて記憶するコンテンツ情報記憶手段と、
上記映像コンテンツのいずれかを検索用コンテンツとして指定した検索要求を受信する検索要求受信手段と、
上記検索要求に基づいて、上記映像コンテンツ記憶手段に保持されている上記映像コンテンツの中から、上記検索用コンテンツの撮影者を被写体とし、かつ、上記検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像コンテンツを抽出するコンテンツ検索手段とを備えたことを特徴とする映像コンテンツ管理装置。
【請求項２】
上記コンテンツ情報記憶手段は、上記映像コンテンツの撮影時刻を上記映像コンテンツに対応づけて記憶し、
上記コンテンツ検索手段は、上記検索用コンテンツの撮影者を被写体とし、かつ、上記検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられ、かつ、上記検索用コンテンツの撮影時刻との時間差が所定値以下となる撮影時刻に対応づけられた映像コンテンツを抽出することを特徴とする請求項１に記載の映像コンテンツ管理装置。
【請求項３】
上記コンテンツ情報記憶手段は、上記映像コンテンツにおける時間軸上の一部分からなる映像ブロックに対応づけて被写体及び撮影場所を記憶し、
上記コンテンツ検索手段は、上記検索用コンテンツの撮影者を被写体とし、かつ、上記検索用コンテンツの撮影場所までの距離が上記所定値以下となる撮影場所に対応づけられた上記映像ブロックを含む映像コンテンツを抽出することを特徴とする請求項１又は２に記載の映像コンテンツ管理装置。
【請求項４】
上記コンテンツ検索手段により抽出された映像コンテンツのうち、上記検索用コンテンツの撮影者を被写体とする上記映像ブロックであって、上記検索用コンテンツの撮影場所までの距離が上記所定値以下となる撮影場所に対応づけられた上記映像ブロックを上記検索要求の要求元へ送信する映像ブロック送信手段を備えたことを特徴とする請求項３に記載の映像コンテンツ管理装置。
【請求項５】
２以上の映像コンテンツのいずれかが検索用コンテンツとして指定されれば、上記検索用コンテンツの撮影者を被写体とし、かつ、上記検索用コンテンツの撮影場所までの距離が所定値以下となる場所で撮影された映像コンテンツを抽出する映像コンテンツ管理装置と通信する携帯通信端末において、
被写体を撮影し、映像コンテンツを生成する撮像手段と、
上記映像コンテンツの撮影場所を検出する撮影場所検出手段と、
上記映像コンテンツの撮影者を示す撮影者情報を保持する撮影者情報記憶手段と、
映像共有メンバーの外観上の特徴を示すメンバー特徴情報を保持する共有メンバー情報記憶手段と、
上記メンバー特徴情報に基づいて、上記映像コンテンツ内に現れる被写体を識別する被写体識別手段と、
上記映像コンテンツ、上記撮影場所、上記撮影者情報及び上記被写体の識別結果を上記映像コンテンツ管理装置へ送信するコンテンツ送信手段と、
ユーザ操作に基づいて、上記映像コンテンツ管理装置が保持する映像コンテンツのいずれかを検索用コンテンツとして指定した検索要求を生成する検索要求生成手段と、
上記映像コンテンツ管理装置が上記検索要求に基づいて抽出した映像コンテンツを取得する映像コンテンツ取得手段と、
上記映像コンテンツ取得手段により取得された映像コンテンツを再生する映像コンテンツ再生手段とを備えたことを特徴とする携帯通信端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像コンテンツ管理装置及び携帯通信端末に係り、さらに詳しくは、２以上の映像コンテンツの中から所望の映像コンテンツを抽出する映像コンテンツ管理装置の改良に関する。
【背景技術】
【０００２】
ライフログは、ユーザの生活、行動、体験を映像、音声などのデジタルデータに変換して位置及び時刻と共に記録する技術である。この様なライフログには、ユーザ自身が記録装置を操作してデジタルデータを記録する手動記録方式と、デジタルデータを常時記録する自動記録方式がある。いわゆるライフログカメラは、自動記録方式のカメラであり、衣服や身体に装着して被写体を常時撮影し、撮影映像を自動的に記録する。この様なライフログカメラによれば、撮影者視点の映像を記録し続けるので、ユーザは、所望のシーンに遭遇した際に慌ててカメラを構える必要がなく、シャッターチャンスを逃すことがない。また、ユーザは、過去の撮影映像を閲覧することにより、撮影時点にかかわらず曖昧な記憶を補完することができる。
【０００３】
通常、撮影者は、自分自身が撮影した映像を閲覧し、或いは、編集することができる。また、撮影映像をネットワーク上のサーバー装置にアップロードすれば、撮影映像を撮影者以外のユーザに公開することもできる。近年、撮影映像の公開対象を特定のユーザに制限する技術が提案されている（例えば、特許文献１）。この特許文献１には、固定カメラが撮影した映像を公開する際の公開対象を、映像撮影時に固定カメラの設置位置付近にいたユーザに絞り込むことが記載されている。また、長時間の撮影映像に対し、所望の映像シーンの検索を容易化する技術が提案されている（例えば、特許文献２）。この特許文献２には、地図上で領域を指定することにより、撮影映像から当該領域が撮影されている映像シーンを抽出することが記載されている。
【０００４】
ライフログカメラの撮影映像は、衣服などに装着したカメラで撮影されることから、撮影者を視点とする画像からなり、撮影者自身が映像内に登場することはない。このため、上述した様な従来の撮影システムでは、自分自身を被写体として撮影したければ、その都度、カメラを自分自身に向けて撮影し、撮影終了後に元の位置に戻さなければならず、煩雑であるという問題があった。
【０００５】
一方、ネットワーク上のサーバー装置に保持されている撮影映像の中には、ユーザ自身が被写体として登場する映像シーンを含むものが存在する場合がある。例えば、２以上の構成メンバーからなる家族や友人グループ内で撮影映像を共有するシステムでは、構成メンバー同士で撮影し合えば、ある構成メンバーが撮影した撮影映像に他の構成メンバーが被写体として登場する映像シーンが含まれることになる。この様な映像シーンを含む撮影映像をサーバー装置からダウンロードして表示すれば、ユーザは、他人を視点とする撮影映像によって自分自身の生活や行動を確認することができる。また、ユーザは、自分のカメラの撮影範囲に入らず撮影出来ていないが、他人のカメラでは撮影出来ている物を撮影映像によって確認し、或いは、その様な物が被写体として撮影された映像を共有することができる。しかしながら、サーバー装置上の多数の撮影映像の中から、所望の映像シーンを含む撮影映像を探し出すのは、容易ではなかった。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１３−９２５６号公報
【特許文献２】特開２０１１−２５９２６５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
本発明は、上記事情に鑑みてなされたものであり、映像コンテンツを指定することにより、当該映像コンテンツを撮影中のユーザが被写体として撮影された映像コンテンツを抽出することができる映像コンテンツ管理装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明による映像コンテンツ管理装置は、２以上の映像コンテンツを保持する映像コンテンツ記憶手段と、上記映像コンテンツの撮影者、被写体及び撮影場所を上記映像コンテンツに対応づけて記憶するコンテンツ情報記憶手段と、上記映像コンテンツのいずれかを検索用コンテンツとして指定した検索要求を受信する検索要求受信手段と、上記検索要求に基づいて、上記映像コンテンツ記憶手段に保持されている上記映像コンテンツの中から、上記検索用コンテンツの撮影者を被写体とし、かつ、上記検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像コンテンツを抽出するコンテンツ検索手段とを備えて構成される。
【０００９】
この映像コンテンツ管理装置は、映像コンテンツの撮影者、被写体及び撮影場所を映像コンテンツに対応づけて記憶するため、検索要求を受信した場合に、検索要求で指定された検索用コンテンツに対応づけて記憶する撮影者、被写体及び撮影場所を元に映像コンテンツを検索することができる。従って、ユーザは、映像コンテンツのいずれかを検索用コンテンツとして指定することにより、検索用コンテンツを撮影中のユーザが被写体として撮影された映像コンテンツを抽出することができる。特に、検索用コンテンツの撮影場所までの距離に基づいて映像コンテンツを抽出するので、検索用コンテンツを撮影中のユーザ自身が撮影された映像コンテンツを正しく抽出することができる。
【発明の効果】
【００１０】
本発明は、映像コンテンツのいずれかを検索用コンテンツとして指定することにより、検索用コンテンツを撮影中のユーザが被写体として撮影された映像コンテンツを抽出することができる映像コンテンツ管理装置を提供することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施の形態による撮影映像表示システム１の一構成例を示したシステム図である。
【図２】図１の携帯通信端末１０の構成例を示した斜視図であり、携帯通信端末１０の一例として、薄型筐体１１の背面にカメラ１６を備えた携帯電話機が示されている。
【図３】図２の携帯通信端末１０内の機能構成の一例を示したブロック図である。
【図４】図３の主制御部１００の構成例を示したブロック図である。
【図５】映像共有メンバー２間で撮影し合う様子を模式的に示した説明図である。
【図６】図１の映像コンテンツ管理装置２０の構成例を示したブロック図である。
【図７】図３の携帯通信端末１０における撮影時の動作の一例を示したフローチャートである。
【図８】図３の携帯通信端末１０における映像再生時の動作の一例を示したフローチャートである。
【図９】映像コンテンツ管理装置２０の他の構成例を示したブロック図である。
【発明を実施するための形態】
【００１２】
＜撮影映像表示システム１＞
図１は、本発明の実施の形態による撮影映像表示システム１の一構成例を示したシステム図である。この撮影映像表示システム１は、被写体を撮影して映像コンテンツを生成する２以上の携帯通信端末１０と、２以上の映像コンテンツを保持し、携帯通信端末１０からの検索要求に応じて、映像コンテンツを検索する映像コンテンツ管理装置２０とからなる。
【００１３】
携帯通信端末１０及び映像コンテンツ管理装置２０は、移動体電話回線網、ＬＡＮ（ローカルエリアネットワーク）、インターネットなどの通信ネットワーク３を介して互いに接続される。携帯通信端末１０により撮影された映像コンテンツは、映像コンテンツ管理装置２０へアップロードされる。また、携帯通信端末１０を使用するユーザは、自分自身が撮影した映像コンテンツであれば、映像コンテンツ管理装置２０からダウンロードすることにより、必要に応じて閲覧し、或いは、編集することができる。
【００１４】
この撮影映像表示システム１では、２以上の映像共有メンバー２、例えば、「ユーザＡ」、「ユーザＢ」及び「ユーザＣ」間で映像コンテンツが共有され、他人が撮影した映像コンテンツであっても、映像コンテンツ管理装置２０から取得して閲覧し、或いは、編集することができる。
【００１５】
＜携帯通信端末１０＞
図２は、図１の携帯通信端末１０の構成例を示した斜視図であり、携帯通信端末１０の一例として、薄型筐体１１の背面にカメラ１６を備えた携帯電話機が示されている。図中の（ａ）には、薄型筐体１１の前面が示され、（ｂ）には、背面が示されている。この携帯通信端末１０は、薄型筐体１１、画面表示部１２、受話用のレシーバ１３、送話用のマイクロホン１４、操作キー１５ａ〜１５ｃ及びカメラ１６を備えた端末装置である。
【００１６】
薄型筐体１１は、薄型の直方体形状からなり、一方の主面が前面であり、他方の主面が背面である。この薄型筐体１１は、端末操作者から見て、上下方向を長手方向とする縦長形状からなり、画面表示部１２、レシーバ１３、マイクロホン１４及び操作キー１５ａ〜１５ｃは、薄型筐体１１の前面に配置されている。
【００１７】
レシーバ１３は、薄型筐体１１の長手方向における一方の端部、すなわち、上端部に配置され、マイクロホン１４及び操作キー１５ａ〜１５ｃは、他方の端部、すなわち、下端部に配置されている。画面表示部１２は、文字や画像からなる各種情報を画面上に表示する表示装置である。レシーバ１３は、受話音を出力するための音声出力装置である。マイクロホン１４は、送話音を入力するための音声入力装置である。
【００１８】
操作キー１５ａ〜１５ｃは、いずれも押下型の接点式スイッチからなり、各種機能が割り当てられる。例えば、操作キー１５ａは、前の画面に戻るためのリターンキーである。また、操作キー１５ｂは、ホーム画面を表示するためのホームキーである。また、操作キー１５ｃは、メニュー画面を表示するためのメニューキーである。
【００１９】
カメラ１６は、被写体を撮影し、映像コンテンツを生成する撮像装置である。映像コンテンツには、静止画像と動画像とがあり、これらの画像種別を任意に指定することができる。カメラ１６の撮影倍率、絞り、画像種別などの撮影条件は、撮影パラメータによって指定される。カメラ１６によって撮影された映像コンテンツは、映像コンテンツ管理装置２０へアップロードされる。また、映像コンテンツ管理装置２０からダウンロードした映像コンテンツは、画面表示部１２に表示される。
【００２０】
図３は、図２の携帯通信端末１０内の機能構成の一例を示したブロック図である。この携帯通信端末１０は、画面表示部１２、レシーバ１３、マイクロホン１４、操作キー１５ａ〜１５ｃ、カメラ１６、主制御部１００、セルラー通信部１０１、操作部１０２、姿勢センサ１０３、表示制御部１０４、音声処理部１０５及びメモリ１０６により構成される。
【００２１】
主制御部１００は、通話制御などの主要な制御を行う。セルラー通信部１０１は、移動体電話回線網に接続し、セルラー基地局を介して相手先端末と通信する無線通信部である。操作部１０２は、ユーザ操作に応じた操作信号を生成し、主制御部１００へ出力する。表示制御部１０４は、画面表示部１２の表示制御を行う。音声処理部１０５は、マイクロホン１４により集音された音声信号を増幅し、デジタルデータに変換して主制御部１００へ出力する一方、主制御部１００から出力された音声データをアナログ信号に変換して駆動信号を生成し、レシーバ１３へ出力する。
【００２２】
メモリ１０６には、主制御部１００が上述した処理を実行するためのアプリケーションプログラム、カメラ１６により撮影された映像コンテンツ、撮影者情報が保持される。撮影者情報は、映像コンテンツの撮影者を示す情報、例えば、ユーザ名及びユーザＩＤであり、映像コンテンツに対応づけて記憶される。ユーザ名及びユーザＩＤは、映像共有メンバー２を特定するための識別情報である。ここでは、映像コンテンツは、一連の静止画像から構成され、動画像の撮影と同時にマイクロホン１４により集音された音声データを含むものとする。
【００２３】
姿勢センサ１０３は、映像コンテンツの撮影場所を特定するために、自端末の姿勢を検出するセンサであり、自端末の位置及びカメラ１６の向きを検出する。姿勢センサ１０３は、映像コンテンツの撮影中、一定の時間間隔で自端末の姿勢を繰り返し検出する。例えば、自端末の位置は、ＧＰＳ（Global Positioning System：全地球測位システム）衛星から送信される測位信号を受信し、複数のＧＰＳ衛星から受信した測位信号に基づいて、求められる。なお、位置の検出方法には、セルラー通信部１０１の受信信号からセルラー基地局の位置情報を取得し、この位置情報を利用して位置を検出する方式、ＷｉＦｉ（Wireless Fidelity）を利用して位置情報を取得し、この位置情報を利用して位置を検出する方式、或いは、これらの方式を組み合わせて位置を検出する方式を採用しても良い。
【００２４】
一方、カメラ１６の向きは、加速度を検出し、加速度の大きさ、向き、加速度の単位時間当たりの変化量に基づいて、求められる。例えば、加速度は、可動部の位置変化を静電容量の変化によって検出する静電容量型の加速度センサを用いて検出される。なお、向きの検出方法には、地磁気を検出する地磁気センサを用いて向きを検出する方式、角速度を検出するジャイロセンサを用いて向きを検出する方式、電子コンパスを用いて向きを検出する方式、或いは、これらのセンサを組み合わせてを用いて向きを検出する方式を採用しても良い。
【００２５】
＜主制御部１００＞
図４は、図３の主制御部１００の構成例を示したブロック図である。この主制御部１００は、撮影場所検出部１１０、共有メンバー情報記憶部１１１、被写体識別部１１２、コンテンツ情報生成部１１３、公開条件指定部１１４、検索要求生成部１１５、映像コンテンツ取得部１１６及び映像コンテンツ再生部１１７により構成される。
【００２６】
撮影場所検出部１１０は、姿勢センサ１０３により検出された自端末の位置及びカメラ１６の向きに基づいて、映像コンテンツの撮影場所を検出し、その検出結果をコンテンツ情報生成部１１３へ出力する。例えば、撮影場所検出部１１０は、まず、カメラ１６から撮影パラメータを取得して被写体までの距離を求める。そして、撮影場所検出部１１０は、自端末の地図上の位置、カメラ１６の向きを示す方位角及び仰俯角、被写体までの距離、並びに、撮影倍率に基づいて、地図上の撮像エリアを特定し、自端末の地図上の位置及び撮像エリアを撮影場所とする。
【００２７】
共有メンバー情報記憶部１１１には、映像共有メンバー２の外観上の特徴を示すメンバー特徴情報が保持される。例えば、顔や身体の外形形状、特徴点の位置がメンバー特徴情報として保持される。なお、メンバー特徴情報には、映像共有メンバー２の顔や身体が撮影された静止画像、例えば、サムネイル画像を用いても良い。
【００２８】
被写体識別部１１２は、メモリ１０６から映像コンテンツを読み出し、共有メンバー情報記憶部１１１内のメンバー特徴情報に基づいて、映像コンテンツ内に現れる被写体を識別し、その識別結果をコンテンツ情報生成部１１３へ出力する。被写体の識別は、エッジ検出などの手法を用いて映像コンテンツから被写体を抽出し、抽出された被写体をメンバー特徴情報と照合して被写体を特定することによって行われる。
【００２９】
なお、被写体識別には、メンバー特徴情報として予め保持された照合用の音声データと、映像コンテンツの撮影と共に録音された音声データとを比較して被写体を識別する方法を画像認識の上記方法と組み合わせて用いる構成を採用しても良い。
【００３０】
公開条件指定部１１４は、操作部１０２からの操作信号に基づいて、映像コンテンツの公開条件を指定する。この公開条件は、公開許可情報及び公開禁止情報からなる。公開許可情報には、公開を許可する映像共有メンバー２、撮影時間帯及び撮影場所が指定される。公開禁止情報には、公開を禁止する映像共有メンバー２、撮影時間帯及び撮影場所が指定される。つまり、ユーザは、映像コンテンツごとに、上記した公開許可情報及び公開禁止情報を指定することができる。
【００３１】
コンテンツ情報生成部１１３は、映像コンテンツの撮影場所及び被写体の識別結果に基づいて、コンテンツ情報を生成する。このコンテンツ情報は、検索用の付加情報であり、撮影者、被写体の識別結果、撮影場所、コンテンツ名、タイトル、撮影日時及び公開条件からなる。セルラー通信部１０１は、メモリ１０６から映像コンテンツを読み出し、映像コンテンツ及びコンテンツ情報を映像コンテンツ管理装置２０へ送信する。
【００３２】
検索要求生成部１１５は、操作部１０２からの操作信号に基づいて、映像コンテンツ管理装置２０が保持する映像コンテンツのいずれかを検索用コンテンツとして指定した検索要求を生成し、セルラー通信部１０１へ出力する。検索要求は、セルラー通信部１０１から映像コンテンツ管理装置２０へ送信される。映像コンテンツ取得部１１６は、セルラー通信部１０１を介し、検索用コンテンツと、映像コンテンツ管理装置２０が検索要求に基づいて抽出した目的コンテンツとを映像コンテンツ管理装置２０から取得する。
【００３３】
目的コンテンツは、映像コンテンツ管理装置２０が保持する映像コンテンツであり、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる場所で撮影された映像コンテンツからなる。
【００３４】
映像コンテンツ再生部１１７は、映像コンテンツ取得部１１６により取得された映像コンテンツを再生するためのビデオデータを生成し、表示制御部１０４及び音声処理部１０５へ出力する。画面表示部１２には、映像コンテンツを示す動画像が表示され、レシーバ１３から音声が出力される。検索用コンテンツ及び目的コンテンツは、その両方が同時に表示され、或いは、いずれか一方が切り替え可能に表示される。
【００３５】
ユーザは、映像コンテンツ管理装置２０が保持する映像コンテンツのいずれかを検索用コンテンツとして指定することにより、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所に近い場所で撮影された映像コンテンツを映像コンテンツ管理装置２０から取得して再生させることができる。例えば、ユーザは、自分自身が撮影した映像コンテンツを検索用コンテンツとして指定するだけで、検索用コンテンツを撮影中のユーザ自身が被写体として撮影された映像コンテンツを映像コンテンツ管理装置２０から取得して閲覧することができる。
【００３６】
図５は、映像共有メンバー２間で撮影し合う様子を模式的に示した説明図である。映像共有メンバー２のユーザＡは、映像共有メンバー２のユーザＢを被写体とし、ユーザＢの位置を含む撮像エリアＥａを撮影している。また、映像共有メンバー２のユーザＣは、映像共有メンバー２のユーザＡを被写体とし、ユーザＡの位置を含む撮像エリアＥｃを撮影している。
【００３７】
撮像エリアＥａ，Ｅｃは、地図上の領域からなり、撮影者の位置（携帯通信端末１０の位置）、カメラ１６の向き、被写体までの距離及び撮影倍率から求められる。各ユーザＡ〜Ｃは、携帯通信端末１０を用いて撮影した映像コンテンツを映像コンテンツ管理装置２０へアップロードする。
【００３８】
従って、ユーザＡは、自分自身が撮影した映像コンテンツを検索用コンテンツに指定するだけで、ユーザ自身が被写体として撮影され、しかも、検索用コンテンツの撮影場所に近い位置から撮影された映像コンテンツを映像コンテンツ管理装置２０から取得して閲覧することができる。この例では、ユーザＣにより撮影された映像コンテンツを映像コンテンツ管理装置２０から取得して閲覧することができる。
【００３９】
＜映像コンテンツ管理装置２０＞
図６は、図１の映像コンテンツ管理装置２０の構成例を示したブロック図である。この映像コンテンツ管理装置２０は、映像コンテンツ記憶部２１、コンテンツ情報記憶部２２、検索要求受信部２３、コンテンツ検索部２４及び映像コンテンツ送信部２５により構成される。映像コンテンツ記憶部２１には、アップロードされた２以上の映像コンテンツ２１ａが保持される。
【００４０】
コンテンツ情報記憶部２２には、コンテンツ情報２２ａが映像コンテンツに対応づけて記憶される。コンテンツ情報２２ａには、撮影者を示す撮影者情報と、映像コンテンツ内に現れる被写体を示す被写体情報と、撮影場所を示す撮影場所情報と、撮影時刻を示す撮影時刻情報とが含まれる。
【００４１】
検索要求受信部２３は、通信ネットワーク３を介して携帯通信端末１０に接続し、映像コンテンツ記憶部２１内に保持されている映像コンテンツ２１ａのいずれかを検索用コンテンツとして指定した検索要求を受信する。
【００４２】
コンテンツ検索部２４は、受信した検索要求に基づいて、コンテンツ情報記憶部２２を検索し、映像コンテンツ記憶部２１に保持されている映像コンテンツ２１ａの中から、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像コンテンツを目的コンテンツとして抽出する。例えば、検索用コンテンツの撮影者の位置を撮像エリア内に含む映像コンテンツが目的コンテンツとして抽出される。
【００４３】
映像コンテンツ送信部２５は、映像コンテンツ記憶部２１から、検索用コンテンツと、コンテンツ検索部２４により抽出された目的コンテンツとを読み出し、検索用コンテンツと共に目的コンテンツを検索要求の要求元の携帯通信端末１０へ送信する。コンテンツ検索部２４は、検索精度を上げるために、撮影時刻情報に基づいて、目的コンテンツを抽出する。
【００４４】
具体的には、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられ、かつ、検索用コンテンツの撮影時刻との時間差が所定値以下となる撮影時刻に対応づけられた映像コンテンツが目的コンテンツとして抽出される。撮影時刻情報を用いて目的コンテンツを特定することにより、被写体の識別精度が低くても、検索用コンテンツの撮影場所に近い位置から検索用コンテンツの撮影者が被写体として撮影された映像コンテンツを正しく抽出することができる。
【００４５】
図７のステップＳ１０１〜Ｓ１１３は、図３の携帯通信端末１０における撮影時の動作の一例を示したフローチャートである。まず、主制御部１００は、カメラ１６から映像データを取得するとともに、マイクロホン１４により集音された音声データを取得し、映像コンテンツとしてメモリ１０６内に格納する（ステップＳ１０１）。
【００４６】
次に、主制御部１００は、メモリ１０６内から映像コンテンツを読み出して被写体を抽出し、メンバー特徴情報と照合して被写体を特定する（ステップＳ１０２，Ｓ１０３）。主制御部１００は、前回の照合結果と今回の照合結果とを比較し、映像内の被写体に変化があれば、被写体を示す情報を更新する（ステップＳ１０４，Ｓ１０５）。例えば、前回の照合時にいなかった被写体が映像内に現れた場合、当該被写体に関連づけて撮影開始時刻が記憶される。また、前回の照合時にいた被写体が映像内からいなくなった場合は、当該被写体に関連づけて撮影終了時刻がコンテンツ情報として記憶される。
【００４７】
次に、主制御部１００は、撮影パラメータに変化があれば、撮影場所を示す情報を更新する（ステップＳ１０６，Ｓ１０７）。例えば、撮影倍率、絞りが変更された場合、変更後のパラメータ値及び変更時刻がコンテンツ情報に追加され、撮影場所情報が更新される。また、主制御部１００は、自端末の姿勢に所定レベルを越える変化があれば、撮影場所情報を更新する（ステップＳ１０８，Ｓ１０９）。例えば、自端末の位置、カメラ１６の向きが一定値以上変化した場合、変更後のパラメータ値及び変更時刻がコンテンツ情報に追加され、撮影場所情報が更新される。
【００４８】
主制御部１００は、撮影が継続している間、ステップＳ１０１からステップＳ１０９までの処理手順を繰り返す（ステップＳ１１０）。次に、主制御部１００は、撮影が終了すれば、ユーザ操作に基づいて、コンテンツ情報を編集する（ステップＳ１１１）。例えば、特定できなかった被写体に対し、ユーザ名、ユーザＩＤが指定される。次に、主制御部１００は、ユーザ操作に基づいて、公開条件を指定し、映像コンテンツ及びコンテンツ情報を映像コンテンツ管理装置２０へアップロードしてこの処理を終了する（ステップＳ１１２，Ｓ１１３）。
【００４９】
図８のステップＳ２０１〜Ｓ２０８は、図３の携帯通信端末１０における映像再生時の動作の一例を示したフローチャートである。まず、主制御部１００は、ユーザ操作に基づいて、映像コンテンツ管理装置２０が保持する映像コンテンツのいずれかを検索用コンテンツとして指定し、検索要求を映像コンテンツ管理装置２０へ送信する（ステップＳ２０１，Ｓ２０２）。例えば、ユーザ自身が撮影した映像コンテンツが検索用コンテンツに指定される。
【００５０】
次に、主制御部１００は、映像コンテンツ管理装置２０からの応答があれば、検索用コンテンツと目的コンテンツの映像ブロックとを映像コンテンツ管理装置２０から取得する（ステップＳ２０３，Ｓ２０４）。目的コンテンツは、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられ、さらに、検索用コンテンツの撮影時刻との時間差が所定値以下となる撮影時刻に対応づけられた映像コンテンツのうち、ユーザ自身への公開が許可されている映像コンテンツである。
【００５１】
次に、主制御部１００は、取得した検索用コンテンツを再生し（ステップＳ２０５）、ユーザによる表示切替の指示があれば、表示映像を目的コンテンツの映像ブロックに変更する（ステップＳ２０６，Ｓ２０７）。主制御部１００は、再生が継続している間、ステップＳ２０６からステップＳ２０７までの処理手順を繰り返す（ステップＳ２０８）。
【００５２】
本実施の形態による映像コンテンツ管理装置２０は、映像コンテンツの撮影者、被写体及び撮影場所を映像コンテンツに対応づけて記憶するので、検索要求を受信した場合に、検索要求で指定された検索用コンテンツに対応づけて記憶する撮影者、被写体及び撮影場所を元に映像コンテンツを検索することができる。従って、ユーザは、映像コンテンツのいずれかを検索用コンテンツとして指定することにより、検索用コンテンツを撮影中のユーザ自身が被写体として撮影された映像コンテンツを自動抽出することができる。特に、撮影場所及び撮影時刻を特定して映像コンテンツを抽出するので、検索用コンテンツを撮影中のユーザ自身が撮影された映像コンテンツを正しく抽出することができる。
【００５３】
例えば、ユーザは、他人を視点とする映像コンテンツによって自分自身の生活や行動を確認することができる。また、ユーザは、自分のカメラの撮影範囲に入らず撮影出来ていないが、他人のカメラでは撮影出来ている物を映像コンテンツによって確認し、或いは、その様な物が被写体として撮影された映像コンテンツを映像共有メンバー２内で共有することができる。
【００５４】
なお、本実施の形態では、携帯通信端末１０が手で保持する形状の携帯電話機である場合の例について説明したが、本発明は、携帯通信端末１０の構成をこれに限定するものではない。例えば、メガネのつる部分にカメラを収容した頭部装着型の端末装置や、電話機能を備えない端末装置にも本発明は適用することができる。
【００５５】
また、本実施の形態では、映像コンテンツに対応づけて、撮影者、被写体及び撮影場所を含むコンテンツ情報を記憶し、映像コンテンツ単位で被写体や撮影場所を検索用コンテンツと照合する場合の例について説明したが、本発明は、映像コンテンツの抽出方法をこれに限定するものではない。例えば、撮影時間、被写体又は撮影場所に基づいて映像コンテンツをブロック化した映像ブロックに対応づけてコンテンツ情報を記憶し、映像ブロック単位で被写体や撮影場所を検索用コンテンツと照合するような構成であっても良い。
【００５６】
図９は、映像コンテンツ管理装置２０の他の構成例を示したブロック図である。携帯通信端末１０のコンテンツ情報生成部１１３は、撮影時間、被写体又は撮影場所に基づいて映像コンテンツをブロック化した映像ブロックごとに、コンテンツ情報を生成する。映像ブロックは、映像コンテンツにおける時間軸上の一部分からなる。
【００５７】
例えば、撮影時間が一定時間以上となり、或いは、撮影場所が一定距離以上変化し、或いは、被写体として現れる人物が変化するごとに、映像ブロックが区分される。各映像ブロックのコンテンツ情報は、被写体の識別結果、撮影開始時刻、撮影終了時刻及び撮影場所からなる。なお、映像ブロックは、映像が断片的になるのを避けるために、所定時間長以上の塊として区分される。
【００５８】
映像コンテンツ管理装置２０のコンテンツ情報記憶部２２には、上述した映像ブロックに対応づけてコンテンツ情報２２ａが記憶される。従って、撮影時間が長い映像コンテンツの場合、撮影場所が大きく変化する映像コンテンツの場合、又は、被写体として現れる人物が変化する映像コンテンツの場合は、１つの映像コンテンツ２１ａに２以上のコンテンツ情報２２ａが対応づけられる。
【００５９】
コンテンツ検索部２４は、映像コンテンツ記憶部２１に保持されている映像コンテンツ２１ａの中から、映像ブロック単位で被写体及び撮影場所を検索用コンテンツと照合して、目的コンテンツを抽出する。具体的には、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像ブロックを含む映像コンテンツを目的コンテンツとして抽出する。この様に構成することにより、映像ブロックを特定して映像コンテンツを抽出するので、検索精度を向上させることができる。
【００６０】
映像コンテンツ送信部２５は、コンテンツ検索部２４により抽出された目的コンテンツのうち、検索用コンテンツの撮影者を被写体とする映像ブロックであって、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像ブロックを検索要求の要求元へ送信する。検索用コンテンツの撮影者が被写体として撮影され、しかも、検索用コンテンツの撮影場所に近い場所から撮影された映像ブロックのみを送信することにより、目的コンテンツ全体を送信する場合に比べ、通信負荷を低減させることができる。
【００６１】
本発明の実施の形態による映像コンテンツ管理装置２０及び携帯通信端末１０の構成と対応する作用効果とを以下に整理してまとめる。
第１の本発明による映像コンテンツ管理装置２０は、２以上の映像コンテンツを保持する映像コンテンツ記憶部２１と、映像コンテンツの撮影者、被写体及び撮影場所を含むコンテンツ情報を映像コンテンツに対応づけて記憶するコンテンツ情報記憶部２２と、映像コンテンツのいずれかを検索用コンテンツとして指定した検索要求を受信する検索要求受信部２３と、検索要求に基づいて、映像コンテンツ記憶部２１に保持されている映像コンテンツの中から、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像コンテンツを抽出するコンテンツ検索部２４とを備えて構成される。この映像コンテンツ管理装置２０は、映像コンテンツの撮影者、被写体及び撮影場所を映像コンテンツに対応づけて記憶するので、検索要求を受信した場合に、検索要求で指定された検索用コンテンツに対応づけて記憶する撮影者、被写体及び撮影場所を元に映像コンテンツを検索することができる。
【００６２】
第２の本発明による映像コンテンツ管理装置２０は、上記構成に加え、コンテンツ情報記憶部２２が、映像コンテンツの撮影時刻を映像コンテンツに対応づけて記憶し、コンテンツ検索部２４が、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられ、かつ、検索用コンテンツの撮影時刻との時間差が所定値以下となる撮影時刻に対応づけられた映像コンテンツを抽出するように構成される。この映像コンテンツ管理装置２０では、撮影時刻を特定して映像コンテンツを抽出するので、被写体の識別精度が低くても、検索用コンテンツの撮影場所に近い場所から検索用コンテンツの撮影者が撮影された映像コンテンツを正しく抽出することができる。
【００６３】
第３の本発明による映像コンテンツ管理装置２０は、上記構成に加え、コンテンツ情報記憶部２２が、映像コンテンツにおける時間軸上の一部分からなる映像ブロックに対応づけて被写体及び撮影場所を記憶し、コンテンツ検索部２４が、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像ブロックを含む映像コンテンツを抽出するように構成される。この映像コンテンツ管理装置２０では、映像ブロックを特定して映像コンテンツを抽出するので、検索精度を向上させることができる。例えば、映像コンテンツが被写体及び撮影場所の異なる２以上の映像ブロックを含む場合に、検索用コンテンツの撮影者及び撮影場所とは一致しない映像ブロックしか含んでいない映像コンテンツが誤って抽出されるのを防止することができる。
【００６４】
第４の本発明による映像コンテンツ管理装置２０は、上記構成に加え、コンテンツ検索部２４により抽出された映像コンテンツのうち、検索用コンテンツの撮影者を被写体とする映像ブロックであって、検索用コンテンツの撮影場所までの距離が所定値以下となる撮影場所に対応づけられた映像ブロックを検索要求の要求元へ送信する映像コンテンツ送信部２５を備えて構成される。この映像コンテンツ管理装置２０では、映像コンテンツ全体を送信する場合に比べ、通信負荷を低減させることができる。
【００６５】
第５の本発明による携帯通信端末１０は、２以上の映像コンテンツのいずれかが検索用コンテンツとして指定されれば、検索用コンテンツの撮影者を被写体とし、かつ、検索用コンテンツの撮影場所までの距離が所定値以下となる場所で撮影された映像コンテンツを抽出する映像コンテンツ管理装置２０と通信する携帯通信端末であって、被写体を撮影し、映像コンテンツを生成するカメラ１６と、映像コンテンツの撮影場所を検出する撮影場所検出部１１０と、映像コンテンツの撮影者を示す撮影者情報を保持する撮影者情報記憶手段と、映像共有メンバーの外観上の特徴を示すメンバー特徴情報を保持する共有メンバー情報記憶部１１１と、メンバー特徴情報に基づいて、映像コンテンツ内に現れる被写体を識別する被写体識別部１１２と、映像コンテンツ、撮影場所、撮影者情報及び被写体の識別結果を映像コンテンツ管理装置２０へ送信するセルラー通信部１０１と、ユーザ操作に基づいて、映像コンテンツ管理装置２０が保持する映像コンテンツのいずれかを検索用コンテンツとして指定した検索要求を生成する検索要求生成部１１５と、映像コンテンツ管理装置２０が検索要求に基づいて抽出した映像コンテンツを取得する映像コンテンツ取得部１１６と、映像コンテンツ取得部１１６により取得された映像コンテンツを再生する映像コンテンツ再生部１１７とを備えて構成される。この携帯通信端末１０によれば、ユーザは、検索用コンテンツを指定して検索要求を送信することにより、検索用コンテンツを撮影中のユーザ自身が被写体として撮影された映像コンテンツを取得して閲覧することができる。
【符号の説明】
【００６６】
１  撮影映像表示システム
２  映像共有メンバー
１０  携帯通信端末
１２  画面表示部
１３  受話用のレシーバ
１４  送話用のマイクロホン
１５ａ〜１５ｃ  操作キー
１６  カメラ
１００  主制御部
１０１  セルラー通信部
１０２  操作部
１０３  姿勢センサ
１０４  表示制御部
１０５  音声処理部
１０６  メモリ
１１０  撮影場所検出部
１１１  共有メンバー情報記憶部
１１２  被写体識別部
１１３  コンテンツ情報生成部
１１４  公開条件指定部
１１５  検索要求生成部
１１６  映像コンテンツ取得部
１１７  映像コンテンツ再生部
２０  映像コンテンツ管理装置
２１  映像コンテンツ記憶部
２２  コンテンツ情報記憶部
２３  検索要求受信部
２４  コンテンツ検索部
２５  映像コンテンツ送信部
【図１】
2015099421.tif 000003
【図２】
2015099421.tif 000004
【図３】
2015099421.tif 000005
【図４】
2015099421.tif 000006
【図５】
2015099421.tif 000007
【図６】
2015099421.tif 000008
【図７】
2015099421.tif 000009
【図８】
2015099421.tif 000010
【図９】
2015099421.tif 000011