(57)【要約】【課題】携帯電話から送信された映像に映った物体に関する指示を出しやすく、円滑なコミュニケーションを可能にする。【解決手段】本発明は、携帯電話は撮影された映像データを専用端末に送信し、専用端末は、携帯電話から送信された映像データから、該携帯電話が静止している時点で撮影された静止画を抽出し、携帯電話から送信された映像データの映像と、抽出された少なくとも１つの静止画を表示手段に同時に表示する。また、専用端末において、表示された複数の静止画の中から任意の静止画を選択し、選択された静止画を携帯電話に送信し、携帯電話において、専用端末から受信した静止画を該専用端末からの指示として表示する。【選択図】図１
2009065370.tif 000002
【特許請求の範囲】
【請求項１】
テレビ電話機能を有する携帯電話と無線ネットワークを介して通信するテレビ電話機能を有する専用端末であって、
前記携帯電話から送信された映像データから該携帯電話が静止している時点の静止画を生成する映像処理手段と、
前記携帯電話から送信された前記映像データの映像と、少なくとも１つの前記静止画を表示手段に表示する表示制御手段と、
を有することを特徴とする専用端末。
【請求項２】
テレビ電話機能を有する携帯電話と無線ネットワークを介して通信するテレビ電話機能を有する専用端末であって、
前記携帯電話から静止画と該静止画毎に対応付けられたインデックス情報を少なくとも１回受信して、記憶手段に格納すると共に、表示手段に表示する表示制御手段と、
前記表示手段に表示された１つ以上の静止画からユーザが選択した静止画を前記表示手段に表示すると共に前記携帯電話に送信する静止画送信手段と、
前記携帯電話に送信した前記静止画に基づいて該携帯電話で再生された映像を受信して前記表示手段に表示する映像表示制御手段と、
を有することを特徴とする専用端末。
【請求項３】
テレビ電話機能を有する携帯電話と無線ネットワークを介して通信するテレビ電話機能を有する専用端末であって、
前記携帯電話から静止画と該静止画毎に対応付けられたインデックス情報を少なくとも１回受信して、記憶手段に格納する受信手段と、
受信した静止画を表示手段に表示すると共に、ユーザが該表示手段に表示された静止画から任意の静止画を選択する状況を示す選択状況画像を表示するのと共に、該選択状況画像を前記携帯電話に送信する表示制御手段と、
前記ユーザが選択した静止画を前記表示手段に表示し、選択された静止画を前記携帯電話に送信する選択画像送信手段と、
を有することを特徴とする専用端末。
【請求項４】
テレビ電話機能を有する専用端末と無線ネットワークを介して通信するテレビ電話機能を有する携帯電話であって、
前記テレビ電話機能に含まれるカメラ機能を用いて撮影した映像データを前記専用端末に送信する画像送信手段と、
前記専用端末で前記映像データから生成された静止画を受信し、表示手段に表示する静止画表示手段と、
を有することを特徴とする携帯電話。
【請求項５】
テレビ電話機能を有する専用端末と無線ネットワークを介して通信するテレビ電話機能を有する携帯電話であって、
前記テレビ電話機能に含まれるカメラ機能により撮影された映像を記憶手段に格納する映像蓄積手段と、
当該携帯電話の動きを監視し、該動きが静止したことを検知する加速度センサと、
当該携帯電話が静止した時点が検出される毎に、前記カメラ機能により撮影された静止画を表示手段に表示すると共に、該静止画毎に対応するインデックス情報を付与して記憶手段に格納し、前記専用端末に送信する静止画送信手段と、
前記専用端末において選択された静止画を受信し、前記表示手段に表示し、ユーザによるボタン操作により該静止画に対応する映像を前記記憶手段から読み出して再生して該表示手段に表示すると共に、該映像を前記専用端末に送信する映像検索手段と、
を有することを特徴とする携帯電話。
【請求項６】
テレビ電話機能を有する専用端末と無線ネットワークを介して通信するテレビ電話機能を有する携帯電話であって、
前記テレビ電話機能に含まれるカメラ機能により撮影された映像を記憶手段に格納すると共に表示手段に表示する映像表示手段と、
前記表示手段に表示された映像データからユーザのボタン操作に基づいて静止画を生成し、該静止画に対応するインデックス情報を付加して記憶手段に格納する静止画保存手段と、
前記インデックス情報が付加された静止画を前記専用端末に送信する静止画送信手段と、
前記専用端末において表示された複数の静止画から該専用端末のユーザが静止画を選択する選択状況画像を受信し、前記表示手段に表示する選択状況画像表示手段と、
前記専用端末から選択された静止画を受信し、前記表示手段に表示する静止画表示手段と、
を有することを特徴とする携帯電話。
【請求項７】
テレビ電話機能を有する携帯電話と無線ネットワークを介して接続されるテレビ電話機能を有する専用端末からなるシステムにおける携帯電話映像利用方法であって、
前記携帯電話は、
前記テレビ電話機能に含まれるカメラ機能により撮影された映像データを前記専用端末に送信し、
前記専用端末は、
映像処理手段において、前記携帯電話から送信された前記映像データから、該携帯電話が静止している時点の静止画を生成し、
前記携帯電話から送信された前記映像データの映像と、少なくとも１つの前記静止画を表示手段に表示する
ことを特徴とする携帯電話映像利用方法。
【請求項８】
テレビ電話機能を有する携帯電話と無線ネットワークを介して接続されるテレビ電話機能を有する専用端末からなるシステムにおける携帯電話映像利用方法であって、
前記携帯電話は、
前記テレビ電話機能に含まれるカメラ機能により撮影された映像を記憶手段に格納し、
加速度センサを用いて当該携帯電話の動きを監視し、該動きが静止したことが検出される毎に、前記カメラ機能により撮影された静止画を第１の表示手段に表示すると共に、該静止画毎に対応するインデックス情報を付与して記憶手段に格納すると共に、前記専用端末に送信し、
前記専用端末は、
前記携帯電話から受信した前記静止画を第２の表示手段に表示し、
前記専用端末において選択された静止画を受信し、前記第２の表示手段に表示し、ユーザによるボタン操作により該静止画に対応する映像を前記記憶手段から読み出して再生して該表示手段に表示すると共に、該映像を携帯電話に送信する処理を繰り返し、
前記受信した複数の静止画の中からユーザによって選択された静止画を前記携帯電話に送信し、
前記携帯電話は、
前記専用端末から受信した静止画を第１の表示手段に表示し、
ユーザのボタン操作により、受信した静止画に対応する映像を記憶手段から読み出して再生・表示すると共に、該映像を専用端末に送信する
ことを特徴とする携帯電話映像利用方法。
【請求項９】
テレビ電話機能を有する携帯電話と無線ネットワークを介して接続されるテレビ電話機能を有する専用端末からなるシステムにおける携帯電話映像利用方法であって、
前記携帯電話は、
前記テレビ電話機能に含まれるカメラ機能により撮影された映像を記憶手段に格納すると共に第１の表示手段に表示し、
前記第１の表示手段に表示された映像データからユーザのボタン操作に基づいて静止画を生成し、該静止画に対応するインデックス情報を付加して記憶手段に格納し、
前記インデックス情報が付加された静止画を前記専用端末に送信し、
前記専用端末は、
前記携帯電話から静止画と該静止画毎に対応付けられたインデックス情報を少なくとも１回受信して、記憶手段に格納し、受信した静止画を第２の表示手段に表示すると共に、ユーザが該表示手段に表示された静止画から任意の静止画を選択する状況を示す選択状況画像を表示し、前記携帯電話に送信し、
前記携帯電話は、
前記専用端末において表示された複数の静止画から該専用端末のユーザが静止画を選択する選択状況画像を受信し、前記第１の表示手段に表示し、
前記専用端末は、
前記ユーザが選択した静止画を前記第２の表示手段に表示し、選択された静止画を前記携帯電話に送信し、
前記携帯電話は、
前記専用端末から選択された静止画を受信し、前記第１の表示手段に表示する
ことを特徴とする携帯電話映像利用方法。
【請求項１０】
請求項１乃至３記載の専用端末を構成する各手段、または、請求項４乃至６記載の携帯電話を構成する各手段としてコンピュータを機能させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯電話及び専用端末及び携帯電話映像利用方法及びプログラムに係り、特に、携帯電話のテレビ電話機能の映像表示を行うための携帯電話及び専用端末及び携帯電話映像利用方法及びプログラムに関する。
【背景技術】
【０００２】
テレビ電話機能を有する携帯電話同士、または、テレビ電話機能を有する携帯電話と専用端末間において、音声以外に、映像データや静止画の送受信を行うシステムが普及している。
【０００３】
テレビ電話機能を有する携帯電話を携帯している子供が道に迷った時、遠隔にいる保護者が携帯電話で通話による道案内をしようとしても、子供がどこにいるか、どちらの方向に向かっているかを子供からの通話による言葉だけで把握することが難しいという問題がある。子供の通話相手となる親等が携帯電話のテレビ電話機能を用いることによって、子供の現在位置や向かっている方向を把握できるが、適確な道案内を行うための目安となる看板やランドマークになる建物が映るように子供にカメラを固定するよう指示するのは困難である。
【０００４】
また、テレビ電話機能付き携帯電話を用いて購入希望の商品の指定を行う際に、スーパーマーケットで買い物をしている人に、買い物を依頼する人が携帯電話のテレビ電話機能を用いて遠隔からどの商品を買うかを指示したい場合、商品をアップで映したときの映像が必要になるが、短い時間でも商品の映像を撮り続けるという負担を強いると共に、他の客の迷惑になることがあった。
【０００５】
また、静止画を添付したメールを複数送り、その中から所望の品物を選ばせることもできるが、その品物が写っている画像を特定するための表現が必要であり、表現を通じて使用者間の共通認識を引き出す困難さがあった。例えば、似たような品物が複数あった場合、その商品名が分からないと、どの品物を選べばよいか判断できない。
【０００６】
従来の携帯電話によるテレビ電話通信では、通信速度が制限されているため、利用者が動きながら複数の物体を撮影しようとすると著しく画像が変化し、会話の中で映像を受信した側が映し出されたものを指し示すためのタイミングをつかむのが困難であった。
【０００７】
また、テレビ電話の映像をハードディスクまたは、メモリに記録しておき、繰り返し再生できるようにすることは可能である。しかし、記録映像の特定シーンまで巻き戻す作業は煩雑で時間がかかるという問題がある。
【０００８】
上記のような携帯電話を用いて撮影された映像の中で画像内容が大きく変化したり、動いている被写体が大きく写ったときに、その画像を代表画像として一覧表示する方法が開示されている。この技術は、ホームビデオのような人を中心としたビデオで人が大写しになった場面を代表画像として抽出するものである（例えば、非特許文献１参照）。
【非特許文献１】鳥井陽介、森本正志："映像の動きを用いた動物体アップショット・フォローショット検出"、画像の認識・理解シンポジウム（ＭＩＲＵ２００５）、２００５年７月）
【発明の開示】
【発明が解決しようとする課題】
【０００９】
本発明では、テレビ電話機能を有する携帯電話の双方向通信機能を有効活用するような利用シーンを想定している。例えば、テレビ電話機能付きの携帯電話を利用して道案内を行うケースでは、進行方向を指示するために「右側に進んでください。」「八百屋の角を右に曲がって下さい。」といった言語情報を使うことが可能であるが、言葉でうまく表現できないランドマークが分かりにくい場合、特に、子どもを対象とした携帯電話のコミュニケーションにおいては、言葉での指示が難しいという問題がある。
【００１０】
本発明は、上記の点に鑑みなされたもので、携帯電話に搭載されているテレビ電話機能を用いたコミュニケーションにおいて、携帯電話から送信された映像に映った物体に関する指示を出しやすく、円滑なコミュニケーションを可能とする携帯電話及び専用端末及び携帯電話映像利用方法及びプログラムを提供することを目的とする。
【００１１】
詳しくは、携帯電話のテレビ電話機能を用いて撮影された映像を送信先の携帯電話に表示すると共に、その映像の動きが停止した時点の静止画像を表示し、静止画像を選択することにより、映像に対する指示として、映像送信元の携帯電話に伝えることが可能な携帯電話及び専用端末及び携帯電話映像利用方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
図１は、本発明の原理構成図である。
【００１３】
本発明（請求項１）は、テレビ電話機能を有する携帯電話１０と無線ネットワークを介して通信するテレビ電話機能を有する専用端末５０であって、
携帯電話１０から送信された映像データから該携帯電話１０が静止している時点の静止画を生成する映像処理手段５２と、
携帯電話１０から送信された映像データの映像と、少なくとも１つの静止画を表示手段５３に表示する表示制御手段５９と、を有する。
【００１４】
本発明（請求項２）は、テレビ電話機能を有する携帯電話と無線ネットワークを介して通信するテレビ電話機能を有する専用端末であって、
携帯電話から静止画と該静止画毎に対応付けられたインデックス情報を少なくとも１回受信して、記憶手段に格納すると共に、表示手段に表示する表示制御手段と、
表示手段に表示された１つ以上の静止画からユーザが選択した静止画を表示手段に表示すると共に、携帯電話に送信する静止画送信手段と、
携帯電話に送信した静止画に基づいて該携帯電話で再生された映像を受信して、表示手段に表示する映像表示制御手段と、を有する。
【００１５】
本発明（請求項３）は、テレビ電話機能を有する携帯電話と無線ネットワークを介して通信するテレビ電話機能を有する専用端末であって、
携帯電話から静止画と該静止画毎に対応付けられたインデックス情報を少なくとも１回受信して、記憶手段に格納する受信手段と、
受信した静止画を表示手段に表示すると共に、ユーザが該表示手段に表示された静止画から任意の静止画を選択する状況を示す選択状況画像を表示すると共に、該選択状況画像を携帯電話に送信する表示制御手段と、
ユーザが選択した静止画を表示手段に表示すると共に、選択された静止画を携帯電話に送信する選択画像送信手段と、を有する。
【００１６】
本発明（請求項４）は、テレビ電話機能を有する専用端末と無線ネットワークを介して通信するテレビ電話機能を有する携帯電話１０であって、
テレビ電話機能に含まれるカメラ機能を用いて撮影した映像データを専用端末に送信する画像送信手段１９と、
専用端末で映像データから生成された静止画を受信し、表示手段に表示する静止画表示手段と、を有する。
【００１７】
本発明（請求項５）は、テレビ電話機能を有する専用端末と無線ネットワークを介して通信するテレビ電話機能を有する携帯電話であって、
テレビ電話機能に含まれるカメラ機能により撮影された映像を記憶手段に格納する映像蓄積手段と、
当該携帯電話の動きを監視し、該動きが静止したことを検知する加速度センサと、
当該携帯電話が静止した時点が検出される毎に、カメラ機能により撮影された静止画を表示手段に表示すると共に、該静止画毎に対応するインデックス情報を付与して記憶手段に格納し、専用端末に送信する静止画送信手段と、
専用端末において選択された静止画を受信し、表示手段に表示し、ユーザによるボタン操作により該静止画に対応する映像を記憶手段から読み出して再生して該表示手段に表示すると共に、該映像を専用端末に送信する映像検索手段と、を有する。
【００１８】
本発明（請求項６）は、テレビ電話機能を有する専用端末と無線ネットワークを介して通信するテレビ電話機能を有する携帯電話であって、
テレビ電話機能に含まれるカメラ機能により撮影された映像を記憶手段に格納すると共に表示手段に表示する映像表示手段と、
表示手段に表示された映像データからユーザのボタン操作に基づいて静止画を生成し、該静止画に対応するインデックス情報を付加して記憶手段に格納する静止画保存手段と、
インデックス情報が付加された静止画を専用端末に送信する静止画送信手段と、
専用端末において表示された複数の静止画から該専用端末のユーザが静止画を選択する選択状況画像を受信し、表示手段に表示する選択状況画像表示手段と、
専用端末から選択された静止画を受信し、表示手段に表示する静止画表示手段と、を有する。
【００１９】
本発明（請求項７）は、テレビ電話機能を有する携帯電話と無線ネットワークを介して接続されるテレビ電話機能を有する専用端末からなるシステムにおける携帯電話映像利用方法であって、
携帯電話は、
テレビ電話機能に含まれるカメラ機能により撮影された映像データを専用端末に送信し（ステップ１）、
専用端末は、
映像処理手段において、携帯電話から送信された映像データから、該携帯電話が静止している時点の静止画を生成し（ステップ２）
携帯電話から送信された映像データの映像と、少なくとも１つの静止画を表示手段に表示する（ステップ３）。
【００２０】
本発明（請求項８）は、テレビ電話機能を有する携帯電話と無線ネットワークを介して接続されるテレビ電話機能を有する専用端末からなるシステムにおける携帯電話映像利用方法であって、
携帯電話は、
テレビ電話機能に含まれるカメラ機能により撮影された映像を記憶手段に格納し、
加速度センサを用いて当該携帯電話の動きを監視し、該動きが静止したことが検出される毎に、カメラ機能により撮影された静止画を第１の表示手段に表示すると同時に、該静止画毎に対応するインデックス情報を付与して記憶手段に格納し、専用端末に送信し、
専用端末は、
携帯電話から受信した静止画を第２の表示手段に表示し、
専用端末において選択された静止画を受信し、第２の表示手段に表示し、ユーザによるボタン操作により該静止画に対応する映像を記憶手段から読み出して再生して該第２の表示手段に表示すると共に、該映像を携帯電話に送信する処理を繰り返し、
受信した複数の静止画の中からユーザによって選択された静止画を携帯電話に送信し、
携帯電話は、
専用端末から受信した静止画を第１の表示手段に表示し、
ユーザのボタン操作により、受信した静止画に対応する映像を記憶手段から読み出して再生・表示すると共に、該映像を専用端末に送信する。
【００２１】
本発明（請求項９）は、テレビ電話機能を有する携帯電話と無線ネットワークを介して接続されるテレビ電話機能を有する専用端末からなるシステムにおける携帯電話映像利用方法であって、
携帯電話は、
テレビ電話機能に含まれるカメラ機能により撮影された映像を記憶手段に格納すると共に第１の表示手段に表示し、
第１の表示手段に表示された映像データからユーザのボタン操作に基づいて静止画を生成し、該静止画に対応するインデックス情報を付加して記憶手段に格納し、
インデックス情報が付加された静止画を専用端末に送信し、
専用端末は、
携帯電話から静止画と該静止画毎に対応付けられたインデックス情報を少なくとも１回受信して、記憶手段に格納し、受信した静止画を第２の表示手段に表示すると共に、ユーザが該表示手段に表示された静止画から任意の静止画を選択する状況を示す選択状況画像を表示すると共に、該選択状況画像を携帯電話に送信し、
携帯電話は、
専用端末において表示された複数の静止画から該専用端末のユーザが静止画を選択する選択状況画像を受信し、第１の表示手段に表示し、
専用端末は、
ユーザが選択した静止画を第２の表示手段に表示すると共に、選択された静止画を携帯電話に送信し、
携帯電話は、
専用端末から選択された静止画を受信し、第１の表示手段に表示する。
【００２２】
本発明（請求項１０）は、請求項１乃至３記載の専用端末を構成する各手段、または、請求項４乃至６記載の携帯電話を構成する各手段としてコンピュータを機能させるプログラムである。
【発明の効果】
【００２３】
上記のように本発明によれば、利用者Ａの携帯電話から映像が送信された場合に、当該映像を受信した利用者Ｂが所望する画像が、一瞬で消えてしまうことなく、画面に静止画として表示されることにより、静止画を元に相手の利用者Ｂに指示を確実かつ具体的に示すことができる。
【００２４】
画像の送信元の利用者Ａは、送信先の利用者Ｂによって指定された静止画の場所を探すために自分が判別できる場面まで画像を巻き戻すことができる。
【００２５】
利用者双方は、静止画を直接相手に見せることで、通常のテレビ電話では、具体的な説明が必要なものに対して、例えば、「これ」といった簡単な指示語で置き換えることができる。特に、複数の静止画を自在に指定できるため、撮影のために何度も同じ場所を行き来する必要がない。
【００２６】
また、買い物を依頼するときに買って欲しい商品を相手に伝える際に、依頼先から携帯電話を用いて撮影した画像を依頼元に送信することにより、依頼元では、複数の商品映像のアップの静止画を参照でき、所望の静止画を指定して送信することにより依頼先に対して指定商品を通知することができる。
【発明を実施するための最良の形態】
【００２７】
以下、図面と共に本発明の実施の形態を説明する。
【００２８】
本発明では、以下の図３、図４に示す２つのシステムに適用することが可能である。
【００２９】
図３は、本発明を適用するシステムの構成図（その１）である。
【００３０】
同図に示すシステムは、テレビ電話機能付き携帯電話（以下、携帯電話と記す）１０１、当該携帯電話１０１と同等の通信機能及び映像処理機能を具備する専用端末１０３が無線ネットワーク１０２を介して接続されている。
【００３１】
携帯電話１０１と専用端末１０３の間が通信状態の場合（携帯電話１０１、専用端末１０３のいずれからの発信でもよい）、専用端末１０３では、携帯電話１０１から送られてきた映像を映像処理機能を用いて処理し、送られてきた映像を表示すると共に、携帯電話１０１が静止した時の静止画像を複数表示する静止画像表示機能を有する。
【００３２】
図４は、本発明を適用するシステムの構成図（その２）である。
【００３３】
図４に示すシステムは、テレビ電話機能付携帯電話１０１、無線ネットワーク１０２、映像及び音声のアナログ出力インタフェースを備え、テレビ電話機能使用時に相手側の映像及び音声を外部出力可能なテレビ電話機能付携帯電話２０３、ビデオキャプチャユニット２０４、専用端末１０３から構成される。ビデオキャプチャユニット２０４は、専用端末１０３と接続され、専用端末１０３にアナログ映像入力インタフェースとして接続された機器から送られてくる映像信号及び音声信号を取り込ませることができる。
【００３４】
以下に、携帯電話１０１と専用端末１０３間の通信手段として、携帯電話会社の無線ネットワーク１０２を使用したテレビ電話通信に本発明を適用した例を説明する。
【００３５】
［第１の実施の形態］
本実施の形態では、携帯電話のテレビ電話機能により撮影された映像データを専用端末に送信し、専用端末では、取得した映像データから静止画を切り出して表示する例を説明する。
【００３６】
図５は、本発明の第１の実施の形態における詳細なシステム構成を示す。
【００３７】
図５に示すシステムにおける携帯電話１０は、利用者Ａが使用し、専用端末５０は利用者Ｂが使用する。以下では、携帯電話１０は、３Ｇ−３２４Ｍ規格に準拠するテレビ電話機能（図示せず）を有する携帯電話として説明するが、この規格に限定されるものではない。テレビ電話機能としては、動画・静止画の撮影が可能なカメラ１１、通信インタフェース１２、さらに、図示しないが、音声を集音する音声入力機能、音声を出力する音声出力機能、及びテレビ電話機能及びカメラ機能からの画像信号を表示するための表示機能を有しているものとする。
【００３８】
専用端末５０は、通信インタフェース５１、映像処理部５２、表示部５３、音声出力部５４、音声入力部５５、メモリ等の記憶部５８及び、制御部５９を有する。以下では、専用端末５０は、携帯電話１０と同じく３Ｇ−３２４Ｍ規格に準拠するものとして説明するが、この規格に限定されるものではない。当該専用端末５０は、映像処理部５２により加工された画像が表示部５３に表示されることを除き、従来のテレビ電話機能付携帯電話１０と同じ振る舞いをする。
【００３９】
携帯電話会社の無線ネットワーク１００には、複数の無線基地局３１０，３２０が接続され、図５の例では、携帯電話１０が基地局３１０を介して無線ネットワーク１００に接続されており、専用端末５０は、基地局３２０を介して携帯電話会社の無線ネットワーク１００に接続されている。
【００４０】
図６は、本発明の第１の実施の形態における動作のシーケンスチャートである。
【００４１】
今、利用者Ａが携帯電話１０からテレビ電話機能（図示せず）を用いて専用端末５０を呼び出したものとする（ステップ１０１）。
【００４２】
専用端末５０は、基地局及び無線ネットワーク１００を経由して携帯電話１０との間で音声データ及び映像データの送受信が可能である（ステップ１０２）。専用端末５０の映像処理部５２は、携帯電話１０から送られてくる通常の状態の映像を表示部５３の一部に表示する（ステップ１０３）。また、音声は、専用端末５０の音声出力部５４と音声入力部５５によって携帯電話１０と音声会話を行うことができる。ここまでは、従来のテレビ電話のシステムと同様である。
【００４３】
図７は、本発明の第１の実施の形態における表示部における表示例を示す。同図に示す表示部５３には、映像データを表示するための領域である映像表示部４１、静止画を表示する領域である静止画表示部４２，４３，４４が割り当てられている。
【００４４】
図５の携帯電話１０の利用者Ａが当該携帯電話１０を静止させ、既存のカメラ１１により物体等を撮影し（ステップ１０４）、通信インタフェース１２から映像データを専用端末５０に送信する（ステップ１０５）。
【００４５】
専用端末５０の映像処理部５２は通信インタフェース５１を介して、映像データを受信し、その時の静止画像を生成する（ステップ１０６）。
【００４６】
映像処理部５２における、静止画像生成方法に関しては、例えば、文献１「鳥井陽介、森本正志、日本電信電話株式会社ＮＴＴサイバーソリューション研究所"映像の動きを用いた動物体アップショット・フォローショット検出"」、または、文献２「紺谷精一、ＮＴＴアイティ株式会社、電子通信学会論文"画像の認識・理解シンポジウム（ＭＩＲＵ２００５）"２００５年７月」内のアップショット検出技術を用いる。あるいは、単純に隣り合う画像の間の差分を取り、差分の値が極小値を取るところを静止画と判断することも可能である。
【００４７】
映像処理部５２は、受信した影像を映像表示部４１に表示すると共に、記憶部５８に生成された静止画を一時的に格納し、また、静止画表示部４２に生成した最初の静止画を表示する（ステップ１０７）。
【００４８】
以降、利用者Ａが携帯電話１０を静止させてカメラ１１により撮影を繰り返し、映像データを専用端末５０に送信すると（ステップ１０８）、専用端末５０では、その都度当該受信データより上記の技術を用いて静止画を生成し、記憶部５８に格納すると共に、表示部５３の静止画表示部４２に表示する（ステップ１０６）。これにより、図７に示すように、最初に静止画表示部４２に静止画が表示されている場合には、順に静止画表示部４３、４４に処理された静止画が表示される（ステップ１０７）。以降、映像処理部５２で静止画が生成されると、静止画表示部４２，４３，４４の順で古い静止画が新しい静止画に書き換えられて表示される。
【００４９】
利用者Ｂは利用者Ａと会話をしながら、図７に示すような、過去に利用者Ａが携帯電話１０を静止させて撮影した静止画が表示されている静止画表示部４２，４３，４４を見ながら、音声入力部５５を介して利用者Ａに指示を伝えることができる。専用端末５０において３枚以上の静止画が検出された場合は、古い画像(すなわち、静止画表示部４２に表示される画像)を上書きするようしてもよいし、１枚ずつ記憶部５８の画像をシフトし、最も古い画像を削除し、静止画表示部４３の画像を静止画表示部４２に、静止画表示部４４の画像を静止画表示部４３に表示させ、静止画表示部４４に最新の画像を表示することもできる。
【００５０】
本実施の形態によれば、専用端末５０において、利用者Ａの携帯電話１０から取得した映像データから静止画を生成して表示すると共に、同時に携帯電話１０にも当該静止画を送信し、携帯電話１０に表示可能とすることにより、その静止画を利用者Ａ，Ｂで共有して見ることができるため、当該静止画を見ながら利用者Ｂから映像データの送信元である利用者Ａに対して音声で例えば、場所や買い物の対象商品の指示を行うことが可能となる。
【００５１】
［第２の実施の形態］
本実施の形態では、携帯電話において当該携帯電話の静止状態を検出し、その時点に撮影された複数の静止画を専用端末に送信し、専用端末で選択された静止画を双方で共有する例を説明する。
【００５２】
図８は、本発明の第２の実施の形態における詳細なシステム構成を示す。同図において、図５の構成と同一構成部分には同一符号を付し、その説明を省略する。
【００５３】
利用者Ａが使用するテレビ電話機能付携帯電話（以下、携帯電話と記す）２０は、以下では、３Ｇ−３２４Ｍ規格のテレビ電話機能付携帯電話として説明するが、この規格に限定されるものではない。携帯電話２０は、表示部２１、カメラ２２、通信インタフェース２３、操作ボタン２５、当該携帯電話２０の動きを検知する加速度センサ２６、撮影した静止画及び当該静止画に対応するインデックス情報をバッファリングする記憶部２７、制御部２９を有する。操作ボタン２５は、戻るボタン２５１、進むボタン２５２、リセットボタン２５３からなる。また、上記以外に図示しないが、音声入力機能、音声出力機能を有するものとする。
【００５４】
無線ネットワーク１００は、携帯電話会社の無線ネットワークであり、携帯電話２０と専用端末６０を接続するための基地局３１０，３２０が接続されている。
【００５５】
専用端末６０は、通信インタフェース５１、映像処理部５２、表示部５３、音声出力部５４、音声入力部５５、静止画像指示部５６、静止画記憶部５７、制御部５９から構成される。なお、以下では、当該専用端末６０は、携帯電話２０と同様に３Ｇ−３２４Ｍ規格に準拠しているものとして説明するが、この規格に限定されるものではない。専用端末６０は、映像処理部５２により加工された画像が表示部５３に表示されることを除き、携帯電話２０と同じ振る舞いをする。
【００５６】
図９は、本発明の第２の実施の形態における動作のシーケンスチャートである。
【００５７】
今、利用者Ａが携帯電話２０から専用端末６０をテレビ電話機能により呼び出したとする（ステップ２０１）。
【００５８】
携帯電話２０と専用端末６０は、それぞれの基地局を介して無線ネットワーク１００を経由して音声及び、映像データの送受信が可能である（ステップ２０２）。専用端末５０の映像処理部５２は、携帯電話２０から送信される通常の状態の映像データが、前述の図７と同様に表示部５３の映像表示部４１に表示されている（ステップ２０３）。音声は、携帯電話２０の音声入力機能（図示せず）、音声出力機能（図示せず）及び、専用端末６０の音声出力部５４と音声入力部５５によって音声会話を行うことができる。ここまでは従来のテレビ電話と同様である。なお、携帯電話２０では、カメラ２２で撮影した通常の映像データを記憶部２７に保存しているものとする。
【００５９】
携帯電話２０の加速度センサ２６が、当該携帯電話２０の動きが止まったことを検知すると、カメラ２２により自動的に静止画を撮影し（ステップ２０４）、制御部２９は、後から静止したときの画像を検索できるように撮影された静止画に対してインデックス情報を生成し（ステップ２０５）、静止画像と対応付けて記憶部２７に書き込む。これと同時に専用端末６０に対して、当該インデックス情報を識別するための特殊な信号と静止画像を送信する（ステップ２０６）。ステップ２０５において生成されるインデックス情報としては、例えば、タイムスタンプ情報を利用することができる。このようにインデックス情報を用いた静止画のやり取りを行うことで、直接静止画のみを行う方式と比較して遅延が少ない。
【００６０】
制御部２９は、加速度センサ２６からの出力が、負になり定常状態になることを検知することで、当該携帯電話２０の動きが止まったことを検知する。このように加速度センサ２６を利用することで、映像処理機能を用いないで簡易に静止状態を検知でき、このタイミングでカメラ２２が静止画を撮影することができる。
【００６１】
専用端末６０の制御部５９は、通信インタフェース５１を介して携帯電話２０からのインデックス情報が付加されている信号及び静止画像を受信すると、これらを静止画記憶部５７に格納すると共に、最初に受信した静止画を表示部５３の静止画表示部４２に表示し、以降、上記と同様に静止画を受信する度に静止画表示部に静止画を表示する（ステップ２０７）。図７の例では、静止画表示部４２、４３、４４と静止画が順番に表示される。３枚の静止画像が表示されると、静止画表示部４２，４３，４４の順で古い静止画が新しい静止画に書き換えられる（ステップ２０８）。
【００６２】
ここで、利用者Ｂは、利用者Ａと会話をしながら表示部５３の映像表示部４１に表示されている現在の状況の映像を見ると同時に、静止画表示部４２，４３，４４に表示されている過去に利用者Ａが携帯電話２０を静止させて撮影した静止画像を見る。このとき、利用者Ｂにより専用端末６０の静止画指示部５６を用いて表示部５３に表示されていた静止画の中から任意の画像が選択されると（ステップ２０９）、制御部５９は、選択された画像を識別するためのインデックス情報を特定するための特殊な信号を通信インタフェース５１を介して携帯電話２０に送信する（ステップ２１０）。静止画指示部５６を用いた静止画の選択方法は、例えば、マウスによるクリック操作、ボタン操作、タッチパネルによる直接指定等がある。
【００６３】
携帯電話２０は、この信号を通信インタフェース２３を介して受信すると、加速度センサ２６を停止させ（ステップ２１１）、利用者Ｂが静止画指定部５６で指定した静止画と同じものを、送信されたインデックスを特定するための特殊な信号に基づいて、記憶部２７から検索して、得られた静止画を表示部２１に表示する（ステップ２１２）。
【００６４】
利用者Ａは、表示部２１に表示された静止画に対応する映像を記憶部２７から読み出して再生し（ステップ２１３）、専用端末５０に送信する（ステップ２１４）。
【００６５】
利用者Ａは、再生時に、表示部２１に表示された静止画がどの時点で撮られたかを判別するために携帯電話２０上の戻るボタン２５１を押し続けることで、記憶部２７に蓄積された映像があれば、静止画が表示された時点から映像を巻き戻すことも可能である。戻るボタン２５１から指を離すと、その時点から記憶された映像の再生が始まる。なお、映像を巻き戻す速度は、例えば、通常の再生の２倍の速度である。また、記憶部２７に蓄積された映像のデータがない場合はこの操作は無効となる。また、進むボタン２５２を押し続ければ、映像を進めることも可能である。映像を進める速度は、例えば、通常の再生の２倍の速度である。進むボタン２５２から指を離すとその時点から再生が始まる。進むボタン２５２を押し続けた結果、画面の状態が現在までに追いつくと、通常のカメラ撮影状態に戻る。また、リセットボタン２５３を押した場合も通常の状態に戻る。
【００６６】
携帯電話２０は、加速度センサ２６を再起動させ、ステップ２０４の処理に移行する（ステップ２１５）。
【００６７】
ステップ２１４において専用端末６０では、携帯電話２０から受信した映像を表示部５３に表示する（ステップ２１６）。
【００６８】
本実施の形態によれば、例えば利用者Ｂが利用者Ａに対して買い物を依頼している場合に、利用者Ａが店舗で撮影した静止画を利用者Ｂの専用端末６０に送信することで、利用者Ｂは静止画の中から所望の商品を指定して利用者Ａの携帯電話２０に送信することができるため、商品の指定が容易に可能となる。また、利用者Ａが撮影した映像を記憶手段に保持しておくことにより、利用者Ａは利用者Ｂによって指定された静止画（例えば、商品ａ）の場所（商品ａの陳列棚）を探すときに、インデックス情報に基づいて、まず、当該静止画（例えば、商品ａ）を記憶部２７から探し、当該静止画に対応する映像（例えば、商品ａの陳列棚）を巻き戻しボタンにより巻き戻して探すことができる。
【００６９】
［第３の実施の形態］
本実施の形態では、携帯電話上の決定ボタンの押下を契機として、携帯電話の映像から静止画を取得して専用端末に送信する例を説明する。
【００７０】
図１０は、本発明の第３の実施の形態におけるシステム構成を示す。図８と同一構成部分には同一符号を付し、その説明を省略する。
【００７１】
同図において、図８の構成と異なる箇所は、利用者Ａの携帯電話３０において加速度センサが設けられておらず、映像のある時点の画像（静止画）を抽出する決定ボタン３３が設けられた点であり、その他の構成は、図８の構成と同様である。
【００７２】
図１１は、本発明の第３の実施の形態における動作のシーケンスチャートである。
【００７３】
今、利用者Ａが携帯電話３０から専用端末７０をテレビ電話機能により呼び出したとする（ステップ３０１）。
【００７４】
携帯電話３０と専用端末７０は、それぞれに接続された基地局を介して無線ネットワーク１００を経由して音声・映像データの送受信を行う（ステップ３０２）。
【００７５】
専用端末７０の映像処理部５２は、携帯電話３０で撮影された映像を受信すると、当該携帯電話３０から送られてくる通常の状態の映像を表示部５３の一部に表示する（ステップ３０３）。図１２は、専用端末７０上の表示部５３の表示例を示す。表示部５３には、携帯電話３０から送信された映像を表示する映像表示部５３１、利用者Ｂが選択した静止画及び携帯電話３０から受信した確認用の静止画が表示される静止画表示部５３２、携帯電話から受信した複数の静止画を一覧表示するサブ表示部５３３が表示される。静止画表示部５３２には、利用者Ｂが選択した静止画、または、携帯電話３０から送信された確認用の静止画のいずれであるかを判別するための送受信判別アイコン５３４が点滅表示される。これにより、静止画の送受信の衝突を避けることが可能となる。
【００７６】
携帯電話３０から受信した映像は、表示部５３の映像データを表示するための映像表示部５３１に表示される。また、音声は、携帯電話３０の音声入力機能（図示せず）、音声出力機能（図示せず）と専用端末７０の音声出力部５４と音声入力部５５を用いて音声会話を行う。
【００７７】
利用者Ａが携帯電話３０の決定ボタン３３を押すと、その時点で撮影された静止画を後から参照できるように制御部２９においてインデックス情報を生成して、当該静止画と共に記憶部２７に記憶する（ステップ３０４）。ここで、インデックス情報は、例えば、タイムスタンプである。更に、携帯電話３０は、静止画とインデックス情報を含む特殊な信号を専用端末７０に送信する（ステップ３０５）。
【００７８】
専用端末７０は、受信した静止画を表示部５３の静止画表示部５３２に表示する（ステップ３０６）。このとき、送受信判別アイコン５３４は、当該静止画の受信中であることがわかるように「受信中」を点滅表示するものとする。
【００７９】
利用者Ａが携帯電話３０の決定ボタン３３を何度も押していくと、当該決定ボタンの押下を契機として、その都度、決定ボタン３３押下時の静止画が専用端末７０に送信される。これにより、携帯電話３０の表示と同時に専用端末７０の静止画表示部５３２に静止画が表示される。
【００８０】
上記の携帯電話３０は、決定ボタン３３を押す手間は必要になるものの、加速度センサを持たない携帯電話にも適用可能となる。
【００８１】
専用端末７０上では、図１２において、静止画表示部５３２に最新の静止画が表示され、サブ表示部５３３に過去の静止画が新しい順番に表示されていく。専用端末７０の制御部５９は、受信した静止画を静止画記憶部５７にインデックス情報と共に記憶する（ステップ３０７）。
【００８２】
利用者Ｂは、図１２において、静止画記憶部５７に記憶された画像を静止画指示部５６を使って見ることができる。以下、静止画指示部５６を使って見ることができる。以下、静止画指示部５６をマウスとして説明する。
【００８３】
利用者Ｂは、利用者Ａと会話をしながら現在の状況である映像表示部５３１の映像を見ながら過去に利用者Ａが携帯電話３０を静止して撮影した複数の画像をサブ表示部５３３のスクロールバーをドラックすることで見ることができる。
【００８４】
利用者Ｂにより静止画指示部５６を用いてサブ表示部５３３に表示されている静止画の中から１つの画像がクリックされると（ステップ３０８）、専用端末７０は、その静止画を静止画表示部５３２に表示すると共に、利用者Ｂにより選択された静止画、または、当該静止画とそれに対応するインデックス情報を携帯電話３０に送信する（ステップ３０９）。
【００８５】
専用端末７０における、利用者Ｂに選択された静止画を送信する方法としては、サブ表示部５３３に表示された静止画の中から静止画指示部５６により選択された静止画を静止画表示部５３２に表示し、携帯電話３０に送信する。このとき、静止画表示部５３２の送受信判別アイコン５３４は、「送信中」を点滅表示するものとする。また、送信が終了すると、点滅を停止する。
【００８６】
専用端末７０から静止画を携帯電話３０に送信する方法として、直接通信インタフェース５１を介して静止画を携帯電話３０に送信する方法と、静止画記憶部５７に静止画と共に記憶されているインデックス情報を指定して通信インタフェース５１を介して携帯電話３０に送信し、携帯電話３０では、当該インデックス情報に基づいて記憶部２７を検索し、対応する静止画を取得する方法がある。インデックス情報を用いてやり取りを行うことにより、直接静止画を送信する方式と比較して遅延が少ない。
【００８７】
携帯電話３０は、専用端末７０で選択された静止画を受信し、表示部２１に表示する（ステップ３１０）。表示部２１の表示のさせ方の１つとして、専用端末７０から直接送信された静止画を表示する方法と、携帯電話３０の記憶部２７と専用端末７０の静止画記憶部５７に保存されている静止画に共通に割り当てられたインデックス情報を指定することで、携帯電話３０内の記憶部２７に保存されている画像を呼び出して表示する方法がある。本実施の形態では、インデックス情報を指定する方法を利用することとする。
【００８８】
なお、携帯電話３０の表示部２１に専用端末７０と同様の表示領域を設け、操作ボタン２５を用いて専用端末７０と同様の動作を行うことも可能である。
【００８９】
このように、本実施の形態では、携帯電話３０において、撮影された映像の中から決定ボタン３３を押すことにより静止画を生成し表示すると共に、専用端末７０に送信することにより、携帯電話３０と専用端末７０において同時に静止画を表示することができる。また、この処理を複数回繰り返すことにより、利用者Ｂにおいて選択候補となる静止画を複数送信することができる。
【００９０】
また、利用者Ｂが専用端末７０でスクロールバーをマウスなどを用いて動かして複数の静止画の中から選択した静止画を携帯電話３０に送信することにより、利用者Ａに対して所望の商品の指示等を行うことができる。上記の実施の形態では、専用端末７０が所望の静止画を選択して携帯電話３０に送信する例を説明したが、この例に限定されることなく、携帯電話３０に専用端末７０と同様の機能を持たせ、専用端末７０と同様の動作を行うようにすることも勿論可能である。
【００９１】
また、携帯電話３０と専用端末７０での表示が静止画・動画共に同時に表示されるため、利用者双方の意思の一致が容易になる。
【００９２】
なお、上記の各実施の形態において、テレビ電話機能及び専用端末の規格を３Ｇ−３２４Ｍとして説明したが、この例に限定されることなく、ＩＳＤＮ電話のＨ３２０、ＩＰ電話のＨ３２３等の一般的なテレビ電話の規格に適用可能である。
【００９３】
なお、上記の第１〜第３の実施の形態における携帯電話及び専用端末の各構成要素の動作をプログラムとして構築し、携帯電話内のコンピュータ及び専用端末として利用されるコンピュータにインストールして実行させる、または、ネットワークを介して流通させることが可能である。
【００９４】
なお、本発明は、上記の実施の形態及び実施例に限定されることなく、特許請求の範囲内において種々変更・応用が可能である。
【産業上の利用可能性】
【００９５】
本発明は、テレビ電話の機能を有する携帯電話間及び、テレビ電話の機能を有する携帯電話とテレビ電話の機能を有する専用端末間における静止画の表示技術に適用可能である。
【図面の簡単な説明】
【００９６】
【図１】本発明の原理構成図である。
【図２】本発明の原理を説明するための図である。
【図３】本発明を適用するシステムの構成図（その１）である。
【図４】本発明を適用するシステムの構成図（その２）である。
【図５】本発明の第１の実施の形態における詳細なシステム構成図である。
【図６】本発明の第１の実施の形態における動作のシーケンスチャートである。
【図７】本発明の第１の実施の形態における専用端末の表示部の表示領域を示す図である。
【図８】本発明の第２の実施の形態における詳細なシステム構成図である。
【図９】本発明の第２の実施の形態における動作のシーケンスチャートである。
【図１０】本発明の第３の実施の形態におけるシステム構成図である。
【図１１】本発明の第３の実施の形態における動作のシーケンスチャートである。
【図１２】本発明の第３の実施の形態における専用端末の表示部の例である。
【符号の説明】
【００９７】
１０  テレビ電話機能付き携帯電話
１１  カメラ
１２  通信インタフェース
１９  静止画送信手段
２１  表示部
２２  カメラ
２３  通信インタフェース
２５  操作ボタン
２６  加速度センサ
２７  記憶部
２９  制御部
３１  前ボタン
３２  次ボタン
３３  決定ボタン
３４  リセットボタン
４１  映像表示部
４２，４３，４４  静止画表示部
５０  専用端末
５１  通信インタフェース
５２  映像処理手段、映像処理部
５３  表示手段、表示手段
５４  音声出力部
５５  音声入力部
５６  静止画指示部
５７  静止画記憶部
５９  表示制御手段、制御部
７０  専用端末
１０１  テレビ電話機能付き携帯電話
１０２  無線ネットワーク
１０３  専用端末
２０３  テレビ電話機能付き携帯電話
２０４  ビデオキャプチャユニット
２５１  戻るボタン
２５２  進むボタン
２５３  リセットボタン
１００  携帯電話会社の無線ネットワーク
３１０，３２０  基地局
５３１，５３２  映像表示部
５３３  サブ表示部
【図１】
2009065370.tif 000003
【図２】
2009065370.tif 000004
【図３】
2009065370.tif 000005
【図４】
2009065370.tif 000006
【図５】
2009065370.tif 000007
【図６】
2009065370.tif 000008
【図７】
2009065370.tif 000009
【図８】
2009065370.tif 000010
【図９】
2009065370.tif 000011
【図１０】
2009065370.tif 000012
【図１１】
2009065370.tif 000013
【図１２】
2009065370.tif 000014