(57)【特許請求の範囲】
【請求項１】
撮像部を用いて被写体を撮像している一の端末装置から、当該一の端末装置の位置を示す位置情報、前記撮像部の撮像方向を示す撮像方向情報、および前記撮像部のズーム状態を示すズーム状態情報をそれぞれ受信する第一受信部と、
前記一の端末装置から受信した位置情報が示す位置を基準として、当該一の端末装置から受信した前記撮像方向情報が示す撮像方向及び前記ズーム状態情報が示すズーム状態に応じた領域を決定し、当該領域に存在する他の端末装置を、所定のデータの取得対象の端末装置として決定する決定部と、
前記音データの取得対象の端末装置から、当該端末装置が有する所定のデータを受信する第二受信部と、
前記所定のデータを、前記一の端末装置へ送信する送信部と
を備えることを特徴とする情報処理装置。
【請求項２】
前記決定部は、
決定した前記領域に存在する複数の他の端末装置のうち、予め定められた条件を満たす端末装置を、前記所定のデータの取得対象の端末装置として決定する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記決定部は、
決定した前記領域に存在する複数の他の端末装置のうち、いずれの端末装置を前記所定のデータの取得対象の端末装置とするかを前記一の端末装置のユーザに選択させ、当該ユーザによって選択された端末装置を、前記所定のデータの取得対象の端末装置として決定する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項４】
前記受信部が、前記一の端末装置から、前記位置情報、前記撮像方向情報、および前記ズーム状態情報を受信する度に、
前記決定部は、
前記受信部が新たに受信した各々の前記情報に応じた前記領域を決定し、当該領域に存在する他の端末装置を、前記所定のデータの取得対象の端末装置として新たに決定し、
前記第二受信部は、
新たに決定された所定のデータの取得対象の端末装置から前記所定のデータの受信を開始する
ことを特徴とする請求項１から３のいずれかに記載の情報処理装置。
【請求項５】
前記第二受信部は、
前記所定のデータの取得対象の端末装置から、当該端末装置が収集した音に関する音データを受信し、
前記送信部は、
前記音データを、前記一の端末装置へ送信する
ことを特徴とする請求項１から４のいずれかに記載の情報処理装置。
【請求項６】
前記前記第二受信部が受信した音データからテキストデータを生成する生成部と、
前記テキストデータが、前記一の端末装置について決められた母国語以外のテキストデータである場合には、当該母国語以外のテキストデータを翻訳し、母国語のテキストデータを生成する翻訳部と、
をさらに備え、
前記送信部は、
前記母国語のテキストデータを、前記一の端末装置へ送信する
ことを特徴とする請求項５に記載の情報処理装置。
【請求項７】
前記第二受信部は、
前記所定のデータの取得対象の端末装置から、当該端末装置が撮像した画像に関する画像データを受信し、
前記送信部は、
前記画像データを、前記一の端末装置へ送信する
ことを特徴とする請求項１から６のいずれかに記載の情報処理装置。
【請求項８】
複数の端末装置のそれぞれと通信が可能な情報処理装置による情報処理方法であって、
撮像部を用いて被写体を撮像している一の端末装置から、当該一の端末装置の位置を示す位置情報、前記撮像部の撮像方向を示す撮像方向情報、および前記撮像部のズーム状態を示すズーム状態情報をそれぞれ受信する第一受信工程と、
前記一の端末装置から受信した位置情報が示す位置を基準として、当該一の端末装置から受信した前記撮像方向情報が示す撮像方向及び前記ズーム状態情報が示すズーム状態に応じた領域を決定し、当該領域に存在する他の端末装置を、所定のデータの取得対象の端末装置として決定する決定工程と、
前記所定のデータの取得対象の端末装置から、当該端末装置が有する所定のデータを受信する第二受信工程と、
前記所定のデータを、前記一の端末装置へ送信する送信工程と
を備えることを特徴とする情報処理方法。
【請求項９】
複数の端末装置と、
前記複数の端末装置のそれぞれと通信が可能な情報処理装置と
を備え、
前記情報処理装置は、
撮像部を用いて被写体を撮像している一の端末装置から、当該一の端末装置の位置を示す位置情報、前記撮像部の撮像方向を示す撮像方向情報、および前記撮像部のズーム状態を示すズーム状態情報をそれぞれ受信する第一受信部と、
前記一の端末装置から受信した位置情報が示す位置を基準として、当該一の端末装置から受信した前記撮像方向情報が示す撮像方向及び前記ズーム状態情報が示すズーム状態に応じた領域を決定し、当該領域に存在する他の端末装置を、所定のデータの取得対象の端末装置として決定する決定部と、
前記所定のデータの取得対象の端末装置から、当該端末装置が有する所定のデータを受信する第二受信部と、
前記所定のデータを、前記一の端末装置へ送信する送信部と
を備えることを特徴とする情報処理システム。
【請求項１０】
コンピュータを、
撮像部を用いて被写体を撮像している一の端末装置から、当該一の端末装置の位置を示す位置情報、前記撮像部の撮像方向を示す撮像方向情報、および前記撮像部のズーム状態を示すズーム状態情報をそれぞれ受信する第一受信手段、
前記一の端末装置から受信した位置情報が示す位置を基準として、当該一の端末装置から受信した前記撮像方向情報が示す撮像方向及び前記ズーム状態情報が示すズーム状態に応じた領域を決定し、当該領域に存在する他の端末装置を、所定のデータの取得対象の端末装置として決定する決定手段、
前記所定のデータの取得対象の端末装置から、当該端末装置が有する所定のデータを受信する第二受信手段、
前記所定のデータを、前記一の端末装置へ送信する送信手段
として機能させることを特徴とするプログラム。
【請求項１１】
被写体を撮像する撮像部と、
当該端末装置の位置を検出する位置検出部と、
前記撮像部の撮像方向を検出する撮像方向検出部と、
前記撮像部のズーム状態を検出するズーム状態検出部と、
前記位置を示す位置情報、前記撮像方向を示す撮像方向情報、および前記ズーム状態を示すズーム状態情報を、請求項１〜７のいずれかに記載の情報処理装置へ送信する送信部と、
前記情報処理装置から送信されてくる所定のデータを受信する受信部と、
前記所定のデータに応じた情報を出力する出力部と
を備えることを特徴とする端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法、情報処理システム、プログラムおよび端末装置に関する。
【背景技術】
【０００２】
被写体が保持するマイクで収集した音声を、当該マイクから取得し、被写体の画像を撮像した画像とともに保存することができるデジタルカメラが考案されている（たとえば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−２９５５０２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記特許文献１に記載の技術では、デジタルカメラのユーザは、そのカメラが有る位置における音を保存することしかできない。従って、たとえば、歌手のコンサート会場でその歌手から遠い位置に居る場合には、会場に設置されたスピーカから発せられる歌手の声を聞いたり保存したりすることはできるが、その歌手の声をスピーカを介さずに直接聞くことは難しく、その歌手の近くにいるかのような臨場感を体感することはできない。
【０００５】
本発明の目的は、端末装置のユーザに対して、位置を移動させることなく、様々な位置における臨場感を体感させること。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、本発明に係る情報処理装置は、撮像部を用いて被写体を撮像している一の端末装置から、当該一の端末装置の位置を示す位置情報、前記撮像部の撮像方向を示す撮像方向情報、および前記撮像部のズーム状態を示すズーム状態情報をそれぞれ受信する第一受信部と、前記一の端末装置から受信した位置情報が示す位置を基準として、当該一の端末装置から受信した前記撮像方向情報が示す撮像方向及び前記ズーム状態情報が示すズーム状態に応じた領域を決定し、当該領域に存在する他の端末装置を、所定のデータの取得対象の端末装置として決定する決定部と、前記所定のデータの取得対象の端末装置から、当該端末装置が有する所定のデータを受信する第二受信部と、前記所定のデータを、前記一の端末装置へ送信する送信部とを備えることを特徴とする。
【０００７】
好ましくは、上記情報処理装置において、前記決定部は、決定した前記領域に存在する複数の他の端末装置のうち、予め定められた条件を満たす端末装置を、前記所定のデータの取得対象の端末装置として決定するとよい。
【０００８】
好ましくは、上記情報処理装置において、前記決定部は、決定した前記領域に存在する複数の他の端末装置のうち、いずれの端末装置を前記所定のデータの取得対象の端末装置とするかを前記一の端末装置のユーザに選択させ、当該ユーザによって選択された端末装置を、前記所定のデータの取得対象の端末装置として決定するとよい。
【０００９】
好ましくは、上記情報処理装置において、前記受信部が、前記一の端末装置から、前記位置情報、前記撮像方向情報、および前記ズーム状態情報を受信する度に、前記決定部は、前記受信部が新たに受信した各々の前記情報に応じた前記領域を決定し、当該領域に存在する他の端末装置を、前記所定のデータの取得対象の端末装置として新たに決定し、前記第二受信部は、新たに決定された所定のデータの取得対象の端末装置から前記所定のデータの受信を開始するとよい。
【００１０】
好ましくは、上記情報処理装置において、前記第二受信部は、前記所定のデータの取得対象の端末装置から、当該端末装置が収集した音に関する音データを受信し、前記送信部は、前記音データを、前記一の端末装置へ送信するとよい。
【００１１】
好ましくは、上記情報処理装置において、前記前記第二受信部が受信した音データからテキストデータを生成する生成部と、前記テキストデータが、前記一の端末装置について決められた母国語以外のテキストデータである場合には、当該母国語以外のテキストデータを翻訳し、母国語のテキストデータを生成する翻訳部と、をさらに備え、前記送信部は、前記母国語のテキストデータを、前記一の端末装置へ送信するとよい。
【００１２】
好ましくは、上記情報処理装置において、前記第二受信部は、前記所定のデータの取得対象の端末装置から、当該端末装置が撮像した画像に関する画像データを受信し、前記送信部は、前記画像データを、前記一の端末装置へ送信するとよい。
【００１３】
また、本発明に係る情報処理方法は、複数の端末装置のそれぞれと通信が可能な情報処理装置による情報処理方法であって、撮像部を用いて被写体を撮像している一の端末装置から、当該一の端末装置の位置を示す位置情報、前記撮像部の撮像方向を示す撮像方向情報、および前記撮像部のズーム状態を示すズーム状態情報をそれぞれ受信する第一受信工程と、前記一の端末装置から受信した位置情報が示す位置を基準として、当該一の端末装置から受信した前記撮像方向情報が示す撮像方向及び前記ズーム状態情報が示すズーム状態に応じた領域を決定し、当該領域に存在する他の端末装置を、所定のデータの取得対象の端末装置として決定する決定工程と、前記所定のデータの取得対象の端末装置から、当該端末装置が有する所定のデータを受信する第二受信工程と、前記所定のデータを、前記一の端末装置へ送信する送信工程とを備えることを特徴とする。
【００１４】
また、本発明に係る情報処理システムは、複数の端末装置と、前記複数の端末装置のそれぞれと通信が可能な情報処理装置とを備え、前記情報処理装置は、撮像部を用いて被写体を撮像している一の端末装置から、当該一の端末装置の位置を示す位置情報、前記撮像部の撮像方向を示す撮像方向情報、および前記撮像部のズーム状態を示すズーム状態情報をそれぞれ受信する第一受信部と、前記一の端末装置から受信した位置情報が示す位置を基準として、当該一の端末装置から受信した前記撮像方向情報が示す撮像方向及び前記ズーム状態情報が示すズーム状態に応じた領域を決定し、当該領域に存在する他の端末装置を、所定のデータの取得対象の端末装置として決定する決定部と、前記所定のデータの取得対象の端末装置から、当該端末装置が有する所定のデータを受信する第二受信部と、前記所定のデータを、前記一の端末装置へ送信する送信部とを備えることを特徴とする。
【００１５】
また、本発明に係るプログラムは、コンピュータを、撮像部を用いて被写体を撮像している一の端末装置から、当該一の端末装置の位置を示す位置情報、前記撮像部の撮像方向を示す撮像方向情報、および前記撮像部のズーム状態を示すズーム状態情報をそれぞれ受信する第一受信手段、前記一の端末装置から受信した位置情報が示す位置を基準として、当該一の端末装置から受信した前記撮像方向情報が示す撮像方向及び前記ズーム状態情報が示すズーム状態に応じた領域を決定し、当該領域に存在する他の端末装置を、所定のデータの取得対象の端末装置として決定する決定手段、前記所定のデータの取得対象の端末装置から、当該端末装置が有する所定のデータを受信する第二受信手段、前記所定のデータを、前記一の端末装置へ送信する送信手段として機能させることを特徴とする。
【００１６】
また、本発明に係る端末装置は、被写体を撮像する撮像部と、当該端末装置の位置を検出する位置検出部と、前記撮像部の撮像方向を検出する撮像方向検出部と、前記撮像部のズーム状態を検出するズーム状態検出部と、前記位置を示す位置情報、前記撮像方向を示す撮像方向情報、および前記ズーム状態を示すズーム状態情報を、請求項１〜７のいずれかに記載の情報処理装置へ送信する送信部と、前記情報処理装置から送信されてくる所定のデータを受信する受信部と、前記所定のデータに応じた情報を出力する出力部とを備えることを特徴とする。
【発明の効果】
【００１７】
本発明によれば、端末装置のユーザに対して、位置を移動させることなく、様々な位置における臨場感を体感させることができる。
【図面の簡単な説明】
【００１８】
【図１】第１実施形態に係る情報処理システム１０の構成を示す。
【図２】サーバ装置１００の機能構成を示す。
【図３】各携帯電話機１１０の許可情報および音量情報の一例を示す。
【図４】携帯電話機１１０の機能構成を示す。
【図５】第１実施形態に係るサーバ装置１００および携帯電話機１１０による処理の手順を示す。
【図６】携帯電話機１１０Ａの状態の一例を示す。
【図７】サーバ装置１００のハードウェア構成の一例を示す。
【図８】携帯電話機１１０のハードウェア構成の一例を示す。
【図９】音データの取得対象の携帯電話機１００を選択する方法の一例を示す。
【図１０】第３実施形態に係るサーバ装置１００および携帯電話機１１０による処理の手順を示す。
【図１１】第３実施形態にかかる携帯電話機１１０Ａの状態の一例を示す。
【図１２】第４実施形態に係るサーバ装置１００の機能構成を示す。
【図１３】第４実施形態にかかるサーバ装置１００および携帯電話機１１０による処理の手順を示す。
【図１４】第４実施形態にかかる携帯電話機１１０Ａの状態の一例を示す。
【発明を実施するための形態】
【００１９】
（第１実施形態）
図１は、第１実施形態に係る情報処理システム１０の構成を示す。情報処理システム１０は、情報処理装置としてのサーバ装置１００、および端末装置としての複数の携帯電話機１１０（携帯電話機１１０Ａ〜Ｅ）を備える。
【００２０】
サーバ装置１００は、通信回線１２０に、専用線やインターネットを介して接続されている。サーバ装置１００は、情報処理システム１０を利用して、複数の携帯電話機１１０に対して情報提供サービスを提供する。
【００２１】
携帯電話機１１０は、通信回線１２０による通信をおこなうことができる。たとえば、携帯電話機１１０は、通信エリア１３０Ａ内において、基地局１３０との無線通信をおこなうことにより、基地局１３０を介して通信回線１２０に接続し、通信回線１２０を利用してサーバ装置１００や他の携帯電話機１１０との通信をおこない、サーバ装置１００や他の携帯電話機１１０とのデータ通信をおこなうことができる。携帯電話機１１０のような電話機能を有するもの以外に、通信機能を有するＰＤＡ（Personal Digital Assistants）や携帯ゲーム機などをこの携帯電話機１１０に代えて使用することができる。
【００２２】
携帯電話機１１０は、カメラ１５８０およびディスプレイ１５６０を備えている。携帯電話機１１０は、カメラ１５８０によって被写体の画像を撮像し、このディスプレイ１５６０によって表示することができる。カメラ１５８０は、ズーム機能を有しており、ズームインすることで、画角が狭くなる一方、被写体が大きく写し出された画像を撮像する。反対に、カメラ１５８０は、ズームアウトすることで、画角が広くなる一方、被写体が小さく写し出された画像を撮像する。
【００２３】
また、携帯電話機１１０は、スピーカ１５７０を備えている。携帯電話機１１０は、このスピーカ１５７０から、他の携帯電話機１１０によって収集された音を発することができる。たとえば、図１に示す携帯電話機１１０Ａは、他の携帯電話機１１０Ｂ〜Ｅのいずれかで収集された音に関する音データを、サーバ装置１００を介して取得し、取得した音データに応じた音を、当該携帯電話機１１０が備えるスピーカから発することができる。
【００２４】
ここで、サーバ装置１００は、携帯電話機１１０Ａのカメラ１５８０によって撮像された画像の大きさ、すなわちカメラ１５８０のズーム状態に応じた領域で聞こえる音を、携帯電話機１１０Ａが発することができるように、複数の他の携帯電話機１１０Ｂ〜Ｅの中から、いずれか適切な携帯電話機１１０を、音データの取得対象（供給元）の携帯電話機１１０として決定する。ここでいう、ズーム状態とは、携帯電話機１１０においてズーム機能がどの程度発揮されている状態であるかということを示すものであり、たとえばズームの倍率である。
【００２５】
たとえば、携帯電話機１１０Ａにおいて、カメラ１５８０をズームインさせて、被写体が大きく写し出されている画像がディスプレイ１５６０に表示されている場合は、被写体をより近い位置で見たときの画像が表示されているとも言える。これに応じて、サーバ装置１００は、携帯電話機１１０Ａの位置よりも被写体により近い位置に位置している、他の携帯電話機１１０（たとえば、携帯電話機１１０Ｃ）を、音データの取得対象の携帯電話機１１０として決定し、この携帯電話機１１０によって収集された音の音データを、この携帯電話機１１０から受け取り、携帯電話機１１０Ａへ供給する。携帯電話機１１０Ａにおいては、サーバ装置１００から供給された音データにより、他の携帯電話機１１０によって収集された音、すなわち、被写体により近い位置で聞こえる音を、スピーカ１５７０から発することができる。
【００２６】
このようにすることで、携帯電話機１１０Ａのユーザは、ディスプレイ１５６０に表示されたズームイン状態の画像によって、視覚的に被写体により近い位置にいるかのような感覚を得ることができるうえ、スピーカ１５７０から発せられた音によって、聴覚的にも被写体により近い位置にいるかのような感覚を得ることができる。
【００２７】
図２は、サーバ装置１００の機能構成を示す。サーバ装置１００は、第一受信部２０２、決定部２０４、第二受信部２０６、および送信部２０８を備える。
【００２８】
第一受信部２０２は、被写体の画像を撮像している一の携帯電話機１１０から、当該一の携帯電話機１１０の位置を示す位置情報、被写体の画像を撮像している撮像方向を示す撮像方向情報、およびズーム状態を示すズーム状態情報をそれぞれ受信する。
【００２９】
決定部２０４は、前記一の携帯電話機１１０の位置を基準とする、前記撮像方向かつ前記ズーム状態に応じた位置に存在する他の携帯電話機１１０を、音データの取得対象の携帯電話機１１０として決定する。たとえば、決定部２０４は、前記位置および前記撮像方向に基づいて、一の携帯電話機１１０の位置から、前記撮像方向に向かって直線状あるいは放射状に伸びる領域を第一の領域として算出する。そして、決定部２０４は、前記ズーム状態に応じて、前記位置からの離間距離を算出する。具体的には、決定部２０４は、前記ズーム倍率が大きいほど、前記位置からの離間距離が長くなるように、前記位置からの距離を算出する。たとえば、ズーム状態としてのズーム倍率が２倍であれば離間距離がＸｍであり、ズーム倍率が４倍であれば離間距離が２Ｘｍであり、ズーム倍率が６倍であれば離間距離が３Ｘｍであり、といった具合である。この離間距離は、ズームイン状態がさらに進み、ズーム倍率が大きくなると、前記位置と被写体との間の距離よりも長くなることもある。一方、ズームアウト状態が進み、ズーム倍率が１よりも小さくなると、この離間距離はマイナス、すなわち、前記位置から被写体とは反対側の方向の距離になることもある。
【００３０】
さらに、決定部２０４は、算出した第一の領域のうちの算出した離間距離だけ離れた位置に該当する領域を第二の領域として決定する。このとき、決定部２０４は、算出した離間距離に前後の幅を持たせて、この離間距離だけ離れた位置に該当する領域を、第二の領域として決定してもよい。サーバ装置１００は、複数の携帯電話機１１０のそれぞれと常時通信をおこない、携帯電話機１１０の位置情報を取得しておくことで、複数の携帯電話機１１０のそれぞれの位置を予め把握している。決定部２０４は、算出した第二の領域と、サーバ装置１００が予め把握している複数の携帯電話機１１０のそれぞれの位置とに基づいて、第二の領域内に存在する携帯電話機１１０を、音データの取得対象の携帯電話機１１０として決定する。
【００３１】
第二受信部２０６は、決定部２０４が決定した音データの取得対象の携帯電話機１１０から、当該音データの取得対象の携帯電話機１１０が収集した音に関する音データを受信する。送信部２０８は、前記音データを、前記一の携帯電話機１１０へ送信することで、前記音データの取得対象の携帯電話機１１０が収集した音を、前記一の携帯電話機１１０から発せさせる。
【００３２】
ここで、決定部２０４は、算出した第二の領域に、複数の携帯電話機１１０が存在する場合、予め定められた条件を満たす携帯電話機１１０を、音データの取得対象の携帯電話機１１０として決定する。上記条件は、適切な音声データを供給できる携帯電話機１１０を選出することができるものであればどのようなものであってもよいが、本実施形態では、音声データの供給を許可しており、かつ収集した音の音量が適切であることを条件としている。
【００３３】
図３は、各携帯電話機１１０の許可情報および音量情報の一例を示す。図３に示すテーブル３００は、サーバ装置１００が有するデータベース・テーブルである。テーブル３００には、携帯電話機１１０ごとに、許可情報および音量情報が格納されている。許可情報とは、収集した音の供給を許可するか否かを示す情報である。音量情報とは、収集した音データの音量を示す情報である。たとえば、サーバ装置１００は、各携帯電話機１１０から、予め許可情報および音量情報を取得しておく。音量情報に関しては、サーバ装置１００は、各携帯電話機１１０から、当該携帯電話機１１０が収集した音をサンプリングし、サンプリングした音の音量を計測することによって、この音量情報を得るようにしてもよい。このとき、サーバ装置１００は、サンプリングした音に対して所定の加工を施し、加工が施された後の音の音量を計測することによって、この音量情報を得るようにしてもよい。たとえば、サーバ装置１００は、サンプリングした音に対してノイズ除去処理をおこない、ノイズが除去された後の音の音量を計測することによって、この音量情報を得るようにしてもよい。
【００３４】
たとえば、テーブル３００には、４台の携帯電話機１１０Ｂ〜Ｅの許可情報および音量情報が格納されている。ここで、携帯電話機１１０Ｂ〜Ｅのいずれもが、決定部２０４が算出した第二の領域内に存在していると仮定した場合、決定部２０４は、このテーブル３００に格納されている情報に基づいて、携帯電話機１１０Ｂ〜Ｅの中から、音データの取得対象の携帯電話機１１０を決定する。たとえば、携帯電話機１１０Ｂは、音データの供給が許可されておらず、携帯電話機１１０Ｃ〜Ｅは、音データの供給が許可されている。したがって、決定部２０４は、携帯電話機１１０Ｂを音データの取得対象の携帯電話機１１０の候補とせず、携帯電話機１１０Ｃ〜Ｅを音データの取得対象の携帯電話機１１０の候補とする。そして、決定部２０４は、候補とした各携帯電話機１１０Ｃ〜Ｅが収集した音の音量に基づいて、候補とした携帯電話機１１０Ｃ〜Ｅの中から、音データの取得対象の携帯電話機１１０を決定する。
【００３５】
たとえば、テーブル３００には、携帯電話機１１０Ｃが収集した音の音量として「１０ｄｂ」が格納されている。また、携帯電話機１１０Ｄが収集した音の音量として「２０ｄｂ」が格納されている。また、携帯電話機１１０Ｅが収集した音の音量として「３０ｄｂ」が格納されている。このとき、サーバ装置１００において、「音量基準値として「２０ｄｂ」が設定されており、この音量基準値に一番近い音量を有する携帯電話機１１０を、音データの取得対象の携帯電話機１１０とする」という条件が予め定められている場合、決定部２０４は、この条件に合致する携帯電話機１１０Ｄを、音データの取得対象の携帯電話機１１０の候補とする。なお、音量基準値は、上記のように予め定められている固定値であってもよく、何らかの条件にしたがって変動するものであってもよい。たとえば、音量基準値は、複数の携帯電話機１１０が収集した音量の平均値、最大値、最小値などであってもよい。また、音量基準値は、ズーム倍率が大きくなるにつれて、増加するものであってもよい。また、音量基準値は、携帯電話機１１０Ａのユーザが指定できるようにしてもよい。なお、決定部２０４が音データの取得対象の携帯電話機１１０を決定するために用いる条件は、上記した許可情報や音量情報によるものに限らない。
【００３６】
図４は、携帯電話機１１０の機能構成を示す。携帯電話機１１０は、撮像部３０２、表示部３０３、位置検出部３０４、方向検出部３０６、ズーム状態検出部３０７、集音部３０８、送信部３１０、受信部３２０、および発音部３２２を備える。
【００３７】
撮像部３０２は、被写体を撮像する。具体的には、携帯電話機１１０は撮像装置の一例としてのカメラ１５８０を備えており、このカメラ１５８０が撮像部３０２として機能し、被写体を撮像する。
【００３８】
表示部３０３は、撮像部３０２が撮像した画像を表示する。具体的には、携帯電話機１１０は表示装置の一例としてのディスプレイ１５６０を備えており、このディスプレイ１５６０が表示部３０３として機能し、撮像部３０２によって撮像された画像を表示する。
【００３９】
ここで、撮像部３０２は、ズーム機能を有している。たとえば、撮像部３０２は、ユーザによるズームイン操作を受け、ズームインすることで、画角が狭くなる一方、被写体が拡大された画像を撮像する。また、撮像部３０２は、ユーザによるズームアウト操作を受け、ズームアウトすることで、画角が広くなる一方、被写体が縮小された画像を撮像する。撮像部３０２が有するズーム機能は、光学的に画像を拡大または縮小する光学ズームであってもよく、画像処理によって画像を拡大または縮小するデジタルズームであってもよい。
【００４０】
位置検出部３０４は、携帯電話機１１０の位置を検出する。具体的には、携帯電話機１１０は位置検出装置の一例としてのＧＰＳ（Global Positioning System）ユニット１５８２を備えており、このＧＰＳユニット１５８２が位置検出部３０４として機能し、携帯電話機１１０の位置を検出する。位置検出部３０４は、検出した携帯電話機１１０の位置を示す位置情報を生成する。たとえば、位置情報には、携帯電話機１１０の位置を示す座標が示されている。
【００４１】
方向検出部３０６は、撮像部３０２による画像の撮像方向を検出する。具体的には、携帯電話機１１０は方向検出装置の一例としての方位センサ１５８４を備えており、この方位センサ１５８４が方向検出部３０６として機能し、撮像部３０２の撮像方向を検出する。方向検出部３０６は、検出した撮像部３０２の撮像方向を示す撮像方向情報を生成する。たとえば、撮像方向情報には、撮像部３０２の撮像方向を示す方位が示されている。
【００４２】
ズーム状態検出部３０７は、撮像部３０２のズーム状態、たとえばズームの倍率を検出する。そして、ズーム状態検出部３０７は、検出した当該撮像部３０２のズーム状態を示すズーム状態情報を生成する。たとえば、撮像部３０２のズーム状態は撮像部３０２自身がこれを把握しているため、この撮像部３０２が、ズーム状態検出部３０７として機能する。
【００４３】
集音部３０８は、携帯電話機１１０の周辺の音を収集する。具体的には、携帯電話機１１０は集音装置の一例としてのマイク１５８６を備えており、このマイク１５８６が集音部３０８として機能し、携帯電話機１１０の周辺の音を収集する。集音部３０８は、収集した音を示す音データを生成する。
【００４４】
送信部３１０は、サーバ装置１００に対して、各種情報を送信する。具体的には、当該携帯電話機１１０が音データの供給を要求する側の携帯電話機１１０として利用される場合、送信部３１０は、他の携帯電話機１１０が収集した音を当該携帯電話機１１０へ供給するようにサーバ装置１００へ要求するとともに、位置置検出部３０４が検出した位置に関する位置情報、方向検出部３０６が検出した撮像方向に関する撮像方向情報、およびズーム状態検出部３０７が検出したズーム状態に関するズーム状態情報を、サーバ装置１００へ送信する。
【００４５】
一方、当該携帯電話機１１０が音データを供給する側の携帯電話機１１０として利用される場合、送信部３１０は、当該携帯電話機１１０が収集した音を他の携帯電話機１１０へ供給するようにサーバ装置１００から要求された場合、集音部３０８が収集した音に関する音データを、サーバ装置１００へ送信する。
【００４６】
受信部３２０は、サーバ装置１００から、各種情報を受信する。具体的には、当該携帯電話機１１０が音データの供給を要求する側の携帯電話機１１０として利用される場合、受信部３２０は、他の携帯電話機１１０から供給された音データを、サーバ装置１００を介して受信する。
【００４７】
発音部３２２は、受信部３２０が受信した音データにより、他の携帯電話機１１０から供給された音、すなわち、他の携帯電話機１１０によって収集された音を発する。具体的には、当該携帯電話機１１０は、発音装置の一例としてのスピーカ１５７０を備えており、このスピーカ１５７０が発音部３２２として機能し、他の携帯電話機１１０から供給された音を発する。発音部３２２は、他の携帯電話機１１０によって収集された音を発していないときは、当該携帯電話機１１０の集音部３０８によって収集された音を発することもできる。
【００４８】
図５は、第１実施形態にかかるサーバ装置１００および携帯電話機１１０による処理の手順を示す。以降の説明では、携帯電話機１１０Ａを、他の携帯電話機１１０に対して音データの供給を要求する側の端末とし、携帯電話機１１０Ｄが、サーバ装置１００によって音データの取得対象の携帯電話機１１０として決定された場合の例を説明する。
【００４９】
まず、一の端末装置である携帯電話機１１０Ａにおいて、撮像部３０２が、被写体の画像の撮像を開始すると（ステップＳ５０２）、位置検出部３０４が、当該携帯電話機１１０Ａの位置を検出し（ステップＳ５０４）、方向検出部３０６が、当該携帯電話機１１０Ａの撮像方向を検出し（ステップＳ５０６）、ズーム状態検出部３０７が、当該撮像部３０２のズーム状態を検出する（ステップＳ５０８）。そして、送信部３１０が、他の携帯電話機１１０が収集した音の音データを供給するようにサーバ装置１００へ要求するとともに、ステップＳ５０４〜ステップＳ５０８で生成された各種情報をサーバ装置１００へ送信する（ステップＳ５１０）。
【００５０】
サーバ装置１００においては、第一受信部２０２が、ステップＳ５１０で送信された各種情報を受信し（ステップＳ５１２）、決定部２０４が、ステップＳ５１２で受信された各種情報に基づいて、他の端末装置である複数の携帯電話機１１０の中から、音データの取得対象の携帯電話機１１０を決定する（ステップＳ５１４）。この例では、上述したとおり、携帯電話機１１０Ｄを、音データの取得対象の携帯電話機１１０として決定する。そして、サーバ装置１００は、ステップＳ５１４で決定された音データの取得対象の携帯電話機１１０Ｄに対し、収集した音データを供給するように要求する（ステップＳ５１６）。
【００５１】
この要求を受けた携帯電話機１１０Ｄにおいては、集音部３０８が、音の収集を開始し（ステップＳ５１８）、送信部３１０が、集音部３０８によって収集された音の音データをサーバ装置１００へ送信することにより、当該音データの供給を開始する（ステップＳ５２０）。
【００５２】
サーバ装置１００は、第二受信部２０６が、携帯電話機１１０Ｄから供給された音データを受信すると（ステップＳ５２２）、送信部２０８が、この音データを携帯電話機１１０Ａへ送信する（ステップＳ５２４）。すなわち、サーバ装置１００は、携帯電話機１１０Ｄから供給された音データを、携帯電話機１１０Ａへ転送する。
【００５３】
そして、携帯電話機１１０Ａは、受信部３２０が、サーバ装置１００から送信された音データを受信すると（ステップＳ５２６）、発音部３２２が、この音データにより、携帯電話機１１０Ｄによって収集された音を発する（ステップＳ５２８）。
【００５４】
上記した一連の処理において、たとえば、携帯電話機１１０Ａにおいて音データの受け取りを停止する操作がなされたり、携帯電話機１１０Ｄにおいて音データの供給を停止する操作がなされる等の、なんらかの終了イベントが発生するまで、ステップＳ５１８〜ステップＳ５２８の処理が繰り返され、携帯電話機１１０Ｄは、収集した音の音データを携帯電話機１１０Ａへ供給し続け、携帯電話機１１０Ａは、携帯電話機１１０Ｄによって収集された音を発し続ける。
【００５５】
この間、携帯電話機１１０Ａの位置、方向、ズーム状態の少なくともいずれか一つが変更されると、この変更がおこなわれるごとに、サーバ装置１００の第一受信部２０２は、変更後の各々の情報を携帯電話機１１０Ａから受信し、サーバ装置１００の決定部２０４は、変更後の各々の情報によって定まる位置に存在する携帯電話機１１０を、音データの取得対象の携帯電話機１１０として新たに決定し、サーバ装置１００の第二受信部２０６は、新たに決定された音データの取得対象の携帯電話機１１０から音データの受信を開始する。
【００５６】
この場合、携帯電話機１１０Ａの位置、方向、ズーム状態の少なくともいずれか一つが変更されるだけではなく、さらに、携帯電話機１１０Ａのユーザがこれらの変更後に「確定」ボタンを押下するなど、この変更を確定する操作を行った場合に、サーバ装置１００の第一受信部２０２が、変更後の各々の情報を携帯電話機１１０Ａから受信し、サーバ装置１００の決定部２０４が、変更後の各々の情報によって定まる位置に存在する携帯電話機１１０を、音データの取得対象の携帯電話機１１０として新たに決定し、サーバ装置１００の第二受信部２０６が、新たに決定された音データの取得対象の携帯電話機１１０から音データの受信を開始するようにしてもよい。
【００５７】
図６は、携帯電話機１１０Ａの状態の一例を示す。携帯電話機１１０Ａには、図６での図示を省略するカメラ１５８０が設けられており、携帯電話機１１０Ａのディスプレイ１５６０には、このカメラ１５８０が撮像している被写体の画像６００が表示されている。携帯電話機１１０Ａの表面には、入力装置の一例としての各種入力ボタン１５５０が設けられており、この各種入力ボタン１５５０がユーザによって操作されることにより、カメラ１５８０による画像の撮像や、撮像部３０２のズーム状態設定を含む各種設定がおこなわれる。
【００５８】
また、携帯電話機１１０Ａには、図６での図示を省略するスピーカ１５７０が設けられており、このスピーカ１５７０からは、音６１０が発せられている。ここで、この音６１０は、当該携帯電話機１１０Ａによって収集された音ではなく、携帯電話機１１０Ｄによって収集された音である。
【００５９】
画像６００は、カメラ１５８０に対するズームイン操作がおこなわれたことによって拡大された画像である。このズームイン操作に応じて、サーバ装置１００によって、当該携帯電話機１１０Ａの位置を基準として、カメラ１５８０の撮像方向に存在し、当該携帯電話機１１０Ａよりも被写体に近い携帯電話機１１０Ｄが、音データの取得対象の携帯電話機１１０として決定されている。そして、携帯電話機１１０Ｄによって収集された音の音データが、サーバ装置１００を介して、当該携帯電話機１１０Ａへ供給され、これにより、当該携帯電話機１１０Ａは、携帯電話機１１０Ｄによって収集された音、すなわち、当該当該携帯電話機１１０Ａの位置よりも被写体に近い位置で収集された音を発している。
【００６０】
このように、第１実施形態によれば、当該携帯電話機１１０Ａのユーザは、カメラ１５８０に対するズームイン操作をおこなうことで、ディスプレイ１５６０に表示された画像６００によって、視覚的に携帯電話機１１０Ｄの位置にいるかのような感覚を得ることができるうえ、スピーカ１５７０から発せられた音６１０によって、聴覚的にも携帯電話機１１０Ｄの位置にいるかのような感覚を得ることができる。したがって、端末装置としての携帯電話機のユーザは、位置を移動することなく、カメラ１５８０の向きを変えたり、ズーム操作をおこなうことで、様々な位置における臨場感を体感することができる。
【００６１】
図７は、サーバ装置１００のハードウェア構成の一例を示す。サーバ装置１００は、ＣＰＵ２５０５、ＲＯＭ２５１０、ＲＡＭ２５２０、ＨＤ（ハードディスク）ドライブ２５２５、通信インターフェース２５３０、外部メモリドライブ２５４０、および外部メモリ２５４２を備える。
【００６２】
ＲＯＭ２５１０、ＲＡＭ２５２０、およびＨＤドライブ２５２５は、各種データおよび各種プログラムを格納する。ＣＰＵ２５０５は、ＲＯＭ２５１０、ＲＡＭ２５２０、またはＨＤドライブ２５２５に格納されたプログラムを実行することで、各種データ処理および各種ハードウェア制御をおこなう。
【００６３】
通信インターフェース２５３０は、通信ネットワークに接続し、通信ネットワークを介して外部との通信をおこなう。外部メモリドライブ２５４０は、外部メモリ２５４２に接続し、外部メモリ２５４２に対するデータの送受信をおこなう。外部メモリ２５４２としては、たとえば、メモリカードが挙げられる。外部メモリ２５４２は、フレキシブルディスク、ＣＤ、ＤＶＤ等の記録媒体であってもよい。
【００６４】
ＣＰＵ２５０５が実行するプログラムは、たとえば、コンピュータ読み取り可能な記録媒体に格納されてサーバ装置１００に提供され、サーバ装置１００に格納される。ＣＰＵ２５０５が実行するプログラムは、サーバ装置１００に予め格納されていてもよい。また、ＣＰＵ２５０５が実行するプログラムは、外部装置から通信ネットワークを介してサーバ装置１００に提供され、サーバ装置１００に格納されてもよい。
【００６５】
たとえば、サーバ装置１００が備えるＣＰＵ２５０５が、ＲＯＭ２５１０、ＲＡＭ２５２０、ＨＤドライブ２５２５、または外部メモリ２５４２に格納されているプログラムを実行することにより、サーバ装置１００は、決定部２０４として機能する。また、サーバ装置１００が備えるＣＰＵ２５０５が、ＲＯＭ２５１０、ＲＡＭ２５２０、ＨＤドライブ２５２５、または外部メモリ２５４２に格納されているプログラムを実行し、通信インターフェース２５３０を制御することにより、サーバ装置１００は、第一受信部２０２、第二受信部２０６、および送信部２０８として機能する。
【００６６】
図８は、携帯電話機１１０のハードウェア構成の一例を示す。携帯電話機１１０は、既に説明した、各種入力ボタン１５５０、ディスプレイ１５６０、スピーカ１５７０、カメラ１５８０、ＧＰＳユニット１５８２、方位センサ１５８４、およびマイク１５８６に加え、ＣＰＵ１５０５、ＲＯＭ１５１０、ＲＡＭ１５２０、ＨＤ（ハードディスク）ドライブ１５２５、通信インターフェース１５３０、外部メモリドライブ１５４０、および外部メモリ１５４２を備える。
【００６７】
ＲＯＭ１５１０、ＲＡＭ１５２０、およびＨＤドライブ１５２５は、各種データおよび各種プログラムを格納する。ＣＰＵ１５０５は、ＲＯＭ１５１０、ＲＡＭ１５２０、またはＨＤドライブ１５２５に格納されたプログラムを実行することで、各種データ処理および各種ハードウェア制御をおこなう。
【００６８】
通信インターフェース１５３０は、通信ネットワークに接続し、通信ネットワークを介して外部との通信をおこなう。外部メモリドライブ１５４０は、外部メモリ１５４２に接続し、外部メモリ１５４２に対するデータの送受信をおこなう。外部メモリ１５４２としては、たとえば、メモリカードが挙げられる。
【００６９】
ＣＰＵ１５０５が実行するプログラムは、たとえば、コンピュータ読み取り可能な記録媒体に格納されて携帯電話機１１０に提供され、携帯電話機１１０に格納される。ＣＰＵ１５０５が実行するプログラムは、携帯電話機１１０に予め格納されていてもよい。また、ＣＰＵ１５０５が実行するプログラムは、外部装置から通信ネットワークを介して携帯電話機１１０に提供され、携帯電話機１１０に格納されてもよい。
【００７０】
たとえば、携帯電話機１１０が備えるＣＰＵ１５０５が、ＲＯＭ１５１０、ＲＡＭ１５２０、ＨＤドライブ１５２５、または外部メモリ１５４２に格納されているプログラムを実行し、通信インターフェース１５３０を制御することにより、携帯電話機１１０は、送信部３１０および受信部３２０として機能する。
【００７１】
（第２実施形態）
次に、第２実施形態を説明する。この第２実施形態では、音データの取得対象の携帯電話機１１０をサーバ装置１００が自動的に決定するのではなく、音データの供給を要求する携帯電話機１１０Ａのユーザに決定させる例について説明する。
【００７２】
図９は、音データの取得対象の携帯電話機１００を選択する方法の一例を示す。第２実施形態では、サーバ装置１００の決定部２０４は、第一受信部２０２によって取得された各々の情報によって定まる位置に存在する複数の携帯電話機１００のうち、いずれの携帯電話機１００を音データの取得対象の携帯電話機１００とするかを、一の携帯電話機１００のユーザに選択させ、一の携帯電話機１００のユーザによって選択された携帯電話機１００を、音データの取得対象の携帯電話機１１０として決定する。
【００７３】
図９において、携帯電話機１１０Ａのディスプレイ１５６０には、音データの取得対象の携帯電話機１１０を選択するための画面９００が表示されている。この画面９００は、サーバ装置１００から送信された画面データに応じて表示されたものである。サーバ装置１００は、各々の携帯電話機から受信した位置情報、方位情報及びズーム状態情報から画面９００の画面データを生成する。画面９００において、線分Ｐ１及びＰ２に挟まれた領域が前述した第１の領域であり、そのうち、アイコン９２２、９２４、９２６、９２８が存在する領域が前述した第２の領域である。サーバ装置１００は、この画面９００の画面データを、携帯電話機１１０Ａへ送信して、携帯電話機１１０Ａに画面９００を表示させる。そして、この画面９００によって、音データの取得対象の携帯電話機１１０を、携帯電話機１１０Ａのユーザに選択させる。これにより、サーバ装置１００は、音データの取得対象の携帯電話機１１０を決定する。
【００７４】
たとえば、画面９００には、当該携帯電話機１１０Ａの位置を示すアイコン９１０と、他の４つの携帯電話機１１０の位置を示すアイコン９２２、９２４、９２６、９２８と、被写体の位置を示すアイコン９３０とが表示されている。当該携帯電話機１１０Ａのユーザは、各種入力ボタン１５５０を操作することにより、アイコン９２２〜９２８の中から、所望する位置のアイコンを選択する。当該携帯電話機１１０Ａは、この選択結果を、サーバ装置１００へ送信する。サーバ装置１００は、この選択結果に基づいて、４つの携帯電話機１１０の中から、音データの取得対象の携帯電話機１１０を決定する。
【００７５】
このように、第２実施形態によれば、音データの取得対象の携帯電話機１１０をユーザが選択できるようにしたので、ユーザは、音データの取得対象の携帯電話機１１０を切り替えることで、複数の携帯電話機１１０が存在する様々な位置のうち、ユーザが所望する位置で聞こえる音を、当該携帯電話機１１０Ａから聞くことができる。したがって、端末装置である携帯電話機のユーザは、位置を移動することなく、カメラ１５８０の向きを変えたり、ズーム操作をおこなうことで、様々な位置における臨場感を体感することができる。
【００７６】
なお、音データの取得対象の携帯電話機１１０を携帯電話機１１０Ａのユーザに選択させる場合、サーバ装置１００は、候補となる複数の携帯電話機１１０のそれぞれから取得した音を、携帯電話機１１０Ａへ送信し、携帯電話機１１０Ａが、候補となる複数の携帯電話機１１０の各々の音を試聴できるようにしてもよい。このようにすることで、携帯電話機１１０Ａのユーザにとって最も好ましい音を供給する携帯電話機１１０を、音データの取得対象の携帯電話機１１０として、携帯電話機１１０Ａのユーザに選択させることができる。
【００７７】
（第３実施形態）
次に、第３実施形態を説明する。この第３実施形態では、携帯電話機１１０Ａが、携帯電話機１１０Ｄから、音データだけでなく、画像データをも受け取る例について説明する。
【００７８】
第３実施形態では、サーバ装置１００の第二受信部２０６は、音データの取得対象の携帯電話機１１０Ｄから、当該音データの取得対象の携帯電話機１１０Ｄが撮像した画像に関する画像データを受信し、サーバ装置１００の送信部２０８は、音データの取得対象の携帯電話機１１０Ｄから受信した画像データを、携帯電話機１１０Ａへ送信することで、音データの取得対象の携帯電話機１１０Ｄが撮像した画像を、携帯電話機１１０Ａに表示させる。
【００７９】
図１０は、第３実施形態にかかるサーバ装置１００および携帯電話機１１０による処理の手順を示す。まず、携帯電話機１１０Ａにおいて、撮像部３０２が、被写体の画像の撮像を開始すると（ステップＳ１００２）、位置検出部３０４が、当該携帯電話機１１０Ａの位置を検出し（ステップＳ１００４）、方向検出部３０６が、当該携帯電話機１１０Ａの撮像方向を検出し（ステップＳ１００６）、ズーム状態検出部３０７が、当該撮像部３０２のズーム状態を検出する（ステップＳ１００８）。そして、送信部３１０が、他の携帯電話機１１０が収集した音の音データを供給するようにサーバ装置１００へ要求するとともに、ステップＳ１００４〜ステップＳ１００８で生成された各種情報をサーバ装置１００へ送信する（ステップＳ１０１０）。
【００８０】
サーバ装置１００においては、第一受信部２０２が、ステップＳ１０１０で送信された各種情報を受信し（ステップＳ１０１２）、決定部２０４が、ステップＳ１０１２で受信された各種情報に基づいて、音データの取得対象の携帯電話機１１０を決定する（ステップＳ１０１４）。この例では、上述したとおり、携帯電話機１１０Ｄを、音データの取得対象の携帯電話機１１０として決定する。そして、サーバ装置１００は、ステップＳ１０１４で決定された音データの取得対象の携帯電話機１１０Ｄに対し、収集した音データおよび撮像した画像データを供給するように要求する（ステップＳ１０１６）。
【００８１】
この要求を受けた携帯電話機１１０Ｄにおいては、集音部３０８が、音の収集を開始するとともに、撮像部３０２が、画像の撮像を開始し（ステップＳ１０１８）、送信部３１０が、集音部３０８によって収集された音の音データ、および撮像部３０２によって撮像された画像の画像データをサーバ装置１００へ送信することにより、当該音データおよび当該画像データの供給を開始する（ステップＳ１０２０）。
【００８２】
サーバ装置１００は、第二受信部２０６が、携帯電話機１１０Ｄから供給された音データおよび画像データを受信すると（ステップＳ１０２２）、送信部２０８が、この音データおよび画像データを携帯電話機１１０Ａへ送信する（ステップＳ１０２４）。すなわち、サーバ装置１００は、携帯電話機１１０Ｄから供給された音データおよび画像データを、携帯電話機１１０Ａへ転送する。
【００８３】
そして、携帯電話機１１０Ａは、受信部３２０が、サーバ装置１００から送信された音データおよび画像データを受信すると（ステップＳ１０２６）、発音部３２２が、この音データにより、携帯電話機１１０Ｄによって収集された音を発するとともに、表示部３０３が、この画像データにより、携帯電話機１１０Ｄによって撮像された画像を表示する（ステップＳ１０２８）。
【００８４】
図１１は、第３実施形態にかかる携帯電話機１１０Ａの状態の一例を示す。図１１（ａ）は、カメラ１５８０に対するズームイン操作がおこなわれる前の、携帯電話機１１０Ａの状態を示す。図１１（ａ）において、携帯電話機１１０Ａのディスプレイ１５６０には、被写体の画像１１００が表示されている。この画像１１００は、当該携帯電話機１１０Ａのカメラ１５８０によって撮像された画像である。また、図１１（ａ）において、携帯電話機１１０Ａのスピーカ１５７０からは、音１１１０が発せられている。この音６１０は、当該携帯電話機１１０Ａのマイク１５８６によって収集された音である。
【００８５】
携帯電話機１１０Ａにおいては、図１１（ａ）に示す状態から、カメラ１５８０に対するズームイン操作がおこなわれている。このズームイン操作に応じて、サーバ装置１００によって、当該携帯電話機１１０Ａの位置を基準として、カメラ１５８０の撮像方向に存在し、当該携帯電話機１１０Ａよりも被写体に近い携帯電話機１１０Ｄが、音データの取得対象の携帯電話機１１０として決定される。そして、携帯電話機１１０Ｄによって収集された音の音データ、および携帯電話機１１０Ｄによって撮像された画像の画像データが、サーバ装置１００を介して、当該携帯電話機１１０Ａへ供給され、これにより、当該携帯電話機１１０Ａは、携帯電話機１１０Ｄによって収集された音、すなわち、当該当該携帯電話機１１０Ａの位置よりも被写体に近い位置で収集された音を発するとともに、携帯電話機１１０Ｄによって撮像された画像、すなわち、当該当該携帯電話機１１０Ａの位置よりも被写体に近い位置で撮像された画像を表示する。
【００８６】
図１１（ｂ）は、カメラ１５８０に対するズームイン操作がおこなわれた後の、携帯電話機１１０Ａの状態を示す。図１１（ｂ）において、携帯電話機１１０Ａのディスプレイ１５６０には、被写体の画像１１０２が表示されている。この画像１１００は、当該携帯電話機１１０Ａのカメラ１５８０によって撮像された画像ではなく、携帯電話機１１０Ｄによって撮像され、携帯電話機１１０Ｄから供給されてきた画像である。また、図１１（ｂ）において、携帯電話機１１０Ａのスピーカ１５７０からは、音１１１２が発せられている。この音１１１２は、当該携帯電話機１１０Ａのマイク１５８６によって収集された音ではなく、携帯電話機１１０Ｄによって収集され、携帯電話機１１０Ｄから供給されてきた音である。
【００８７】
このように、第３実施形態によれば、当該携帯電話機１１０Ａのユーザは、カメラ１５８０に対するズームイン操作をおこなうことで、ディスプレイ１５６０に表示された画像１１０２によって、視覚的に携帯電話機１１０Ｄの位置にいるかのような感覚を得ることができるうえ、スピーカ１５７０から発せられた音１１１２によって、聴覚的にも携帯電話機１１０Ｄの位置にいるかのような感覚を得ることができる。特に、携帯電話機１１０Ｄの位置で撮像された画像をディスプレイ１５６０に表示しているので、当該携帯電話機１１０Ａの位置では、被写体を写し出すことができない状況であっても、携帯電話機１１０Ｄから供給された画像１１０２によって、被写体を視認することができる。したがって、端末装置のユーザは、位置を移動することなく、カメラ１５８０の向きを変えたり、ズーム操作をおこなうことで、様々な位置における臨場感を体感することができる。
【００８８】
（第４実施形態）
図１２は、第４実施形態に係るサーバ装置１００の機能構成を示す。第４実施形態に係るサーバ装置１００は、生成部２１０および翻訳部２２０をさらに備える点で、第１実施形態に係るサーバ装置１００と異なる。以下、第１実施形態に係るサーバ装置１００と異なる点を中心に説明する。
【００８９】
生成部２１０は、音データの取得対象の携帯電話機１１０Ｄから供給され、第二受信部２０６が受信した音データに含まれている音声データから、音声認識技術を用いて、テキストデータを生成する。翻訳部２２０は、テキストデータが携帯電話機１１０Ａについて決められた母国語以外の場合には、当該母国語以外のテキストデータを翻訳辞書などを用いて翻訳し、母国語のテキストデータを生成する。どの携帯電話機１１０のユーザがどの言語を母国語としているかについては、予め生成部２１０によって記憶されていてもよいし、後述するステップＳ１３１０（図１３）にて、携帯電話機１１０からその都度サーバ装置１００に通知されてもよい。
【００９０】
第４実施形態では、サーバ装置１００の送信部２０８は、翻訳部２２０によって生成された母国語のテキストデータを、携帯電話機１１０Ａへ送信することで、音データの取得対象の携帯電話機１１０Ｄが収集した音声の内容を母国語で示すテキストを、携帯電話機１１０Ａに表示させる。
【００９１】
図１３は、第４実施形態にかかるサーバ装置１００および携帯電話機１１０による処理の手順を示す。まず、携帯電話機１１０Ａにおいて、撮像部３０２が、被写体の画像の撮像を開始すると（ステップＳ１３０２）、位置検出部３０４が、当該携帯電話機１１０Ａの位置を検出し（ステップＳ１３０４）、方向検出部３０６が、当該携帯電話機１１０Ａの撮像方向を検出し（ステップＳ１３０６）、ズーム状態検出部３０７が、当該撮像部３０２のズーム状態を検出する（ステップＳ１３０８）。そして、送信部３１０が、他の携帯電話機１１０が収集した音の音データを供給するようにサーバ装置１００へ要求するとともに、ステップＳ１３０４〜ステップＳ１３０８で生成された各種情報をサーバ装置１００へ送信する（ステップＳ１３１０）。
【００９２】
サーバ装置１００においては、第一受信部２０２が、ステップＳ１３１０で送信された各種情報を受信し（ステップＳ１３１２）、決定部２０４が、ステップＳ１３１２で受信された各種情報に基づいて、音データの取得対象の携帯電話機１１０を決定する（ステップＳ１３１４）。この例では、上述したとおり、携帯電話機１１０Ｄを、音データの取得対象の携帯電話機１１０として決定する。そして、サーバ装置１００は、ステップＳ１３１４で決定された音データの取得対象の携帯電話機１１０Ｄに対し、収集した音データおよびこの音データから生成したテキストデータを供給するように要求する（ステップＳ１３１６）。
【００９３】
この要求を受けた携帯電話機１１０Ｄにおいては、集音部３０８が、音の収集を開始し（ステップＳ１３１８）、送信部３１０が、集音部３０８によって収集された音の音データをサーバ装置１００へ送信することにより、当該音データの供給を開始する（ステップＳ１３２０）。
【００９４】
サーバ装置１００は、第二受信部２０６が、携帯電話機１１０Ｄから供給された音データを受信すると（ステップＳ１３２２）、生成部２１０が、音声認識技術を用いて、この音データに含まれている音声データから、テキストデータを生成し（ステップＳ１３２４）、翻訳部２２０が、このテキストデータを翻訳し、母国語のテキストデータを生成する（ステップＳ１３２６）。そして、送信部３１０が、携帯電話機１１０Ｄから供給された音データ、および翻訳部２２０が生成した母国語のテキストデータをサーバ装置１００へ送信する（ステップＳ１３２８）。
【００９５】
そして、携帯電話機１１０Ａは、受信部３２０が、サーバ装置１００から送信された音データおよびテキストデータを受信すると（ステップＳ１３３０）、発音部３２２が、この音データにより、携帯電話機１１０Ｄによって収集された音を発するとともに、表示部３０３が、このテキストデータにより、携帯電話機１１０Ｄが収集した音に含まれる音声の内容を母国語で示すテキストを表示する（ステップＳ１３３２）。
【００９６】
図１４は、第４実施形態にかかる携帯電話機１１０Ａの状態の一例を示す。図１４は、カメラ１５８０に対するズームイン操作がおこなわれた後の、携帯電話機１１０Ａの状態を示す。このズームイン操作に応じて、サーバ装置１００によって、当該携帯電話機１１０Ａの位置を基準として、カメラ１５８０の撮像方向に存在し、当該携帯電話機１１０Ａよりも被写体に近い携帯電話機１１０Ｄが、音データの取得対象の携帯電話機１１０として決定されている。そして、携帯電話機１１０Ｄによって収集された音の音データ、この音データに含まれる音声を母国語でテキスト化したテキストデータが、サーバ装置１００を介して、当該携帯電話機１１０Ａへ供給され、これにより、当該携帯電話機１１０Ａは、携帯電話機１１０Ｄによって収集された音、すなわち、当該当該携帯電話機１１０Ａの位置よりも被写体に近い位置で収集された音を発するとともに、携帯電話機１１０Ｄが収集した音に含まれる音声の内容を母国語で示すテキストを表示する。
【００９７】
たとえば、図１４において、携帯電話機１１０Ａのディスプレイ１５６０には、被写体の画像１４００が表示されている。この画像１４００は、当該携帯電話機１１０Ａのカメラ１５８０によって撮像された画像であるが、第３実施形態で説明したように、携帯電話機１１０Ｄから供給されてきた画像を表示するようにしてもよい。また、図１４において、携帯電話機１１０Ａのスピーカ１５７０からは、音１４１０が発せられている。この音１４１０は、当該携帯電話機１１０Ａのマイク１５８６によって収集された音ではなく、携帯電話機１１０Ｄによって収集され、携帯電話機１１０Ｄから供給されてきた音である。さらに、携帯電話機１１０Ａのディスプレイ１５６０には、画像１４００上に重ねて、テキスト１４２０が表示されている。このテキスト１４２０は、音１４１０に含まれる音声の内容を母国語で示すものであり、サーバ装置１００において生成され、サーバ装置１００から供給されてきたものである。
【００９８】
このように、第４実施形態によれば、当該携帯電話機１１０Ａのユーザは、カメラ１５８０に対するズームイン操作をおこなうことで、ディスプレイ１５６０に表示された画像１４００によって、視覚的に携帯電話機１１０Ｄの位置にいるかのような感覚を得ることができるうえ、スピーカ１５７０から発せられた音１４１０によって、聴覚的にも携帯電話機１１０Ｄの位置にいるかのような感覚を得ることができる。さらに、ディスプレイ１５６０に表示されたテキスト１４２０によって、音１４１０に含まれる母語語以外の音声の内容を、容易に把握することができる。したがって、端末装置のユーザは、位置を移動することなく、カメラ１５８０の向きを変えたり、ズーム操作をおこなうことで、様々な位置における臨場感を体感することができる。
【００９９】
（変形例）
なお、本発明は、上記した形態での実施に限らず、以下のように変形させて実施してもよい。また、以下の変形例を組み合わせてもよい。
【０１００】
サーバ装置１００は、複数の携帯電話機１１０から音声データを受け取り、この音声データと、この音声データの供給元の携帯電話機１１０の位置とを対応付けて、ＲＯＭ２５１０、ＲＡＭ２５２０、ＨＤドライブ２５２５、外部メモリ２５４２などの格納部に格納しておいてもよい。この場合、サーバ装置１００は、携帯電話機１１０Ａから受信した各々の情報によって特定した領域に存在する携帯電話機１１０から音声データ等を受け取り、これを携帯電話機１１０Ａへ供給する代わりに、上記領域に含まれている位置に対応付けられて格納されている音声データを、携帯電話機１１０Ａへ供給してもよい。これにより、携帯電話機１１０Ａのユーザは、上記位置において、過去にどのような音声が聞こえていたかを知ることができる。
【０１０１】
また、サーバ装置１００は、複数の携帯電話機１１０から画像データを受け取り、この画像データと、この画像データの供給元の携帯電話機１１０の位置とを対応付けて、ＲＯＭ２５１０、ＲＡＭ２５２０、ＨＤドライブ２５２５、外部メモリ２５４２などの格納部に格納しておいてもよい。この場合、サーバ装置１００は、携帯電話機１１０Ａから受信した各々の情報によって特定した領域に存在する携帯電話機１１０から音声データ等を受け取り、これを携帯電話機１１０Ａへ供給する代わりに、上記領域に含まれている位置に対応付けられて格納されている画像データを、携帯電話機１１０Ａへ供給してもよい。これにより、携帯電話機１１０Ａのユーザは、上記位置において、過去にどのような被写体が撮像されていたかを知ることができる。
【０１０２】
各実施形態では、ズーム状態情報としてズームの倍率に関する情報を想定していたが、これ以外の情報をズーム状態情報として用いてもよい。たとえば、携帯電話機１１０やその部品ユニットであるカメラ１５７０の製造メーカに応じて、カメラレンズの画角そのものが違うことがあるし、ズームの倍率を評価する基準も異なることがある。そこで、携帯電話機１１０は、ズーム状態情報としてのズーム倍率とともに、携帯電話機１１０自身やその部品ユニットであるカメラ１５７０の製造メーカを特定するような識別情報（たとえばシリアルナンバー）をサーバ装置１００に通知する。サーバ装置１００は、このシリアルナンバー及びズーム倍率ごとに、前述した第２の領域を特定するための離間距離に関する情報を予め記憶しておき、この記憶内容に基づいて離間距離を特定する。このようにすれば、ズーム操作を行ったユーザが望む領域の音を収集することが可能となる。
【０１０３】
各実施形態では、携帯電話機１１０Ａから取得した各々の情報に基づいてサーバ装置１００が決定した領域内に、適切な音を供給することができる携帯電話機１１０が存在することを前提として説明したが、サーバ装置１００が決定した領域内に、適切な音（たとえばある一定音量以上の音など予め定められている基準を満たす音）を供給することができない携帯電話機１１０しか存在しない場合や、そもそも携帯電話機１１０が一台も存在しない場合も考えられる。このような場合、サーバ１００は、決定した領域を前後方向に移動させて、適切な音を供給することができる携帯電話機１１０が存在する領域を検出するようにしてもよい。そして、サーバ１００は、検出した領域に存在する携帯電話機１１０からこの携帯電話機１１０が収集した音を取得し、取得した音を携帯電話機１１０Ａへ供給して、携帯電話機１１０Ａから出力させるようにしてもよい。
【０１０４】
この場合、携帯電話機１１０Ａのカメラ１５７０のズーム状態と、携帯電話機１１０Ａから出力されている音が収集された位置との整合がとれなくなる。そこで、サーバ１００は、携帯電話機１１０Ａから出力されている音が収集された位置にあわせて、携帯電話機１１０Ａのカメラ１５７０のズーム状態を変更するように制御してもよい。たとえば、携帯電話機１１０Ａのカメラ１５７０のズーム倍率が２倍のときに、これに対応する領域に適切な音を供給することができる携帯電話機１１０が存在しなく、サーバ１００が、決定した領域を前後にずらし、適切な音を供給することができる携帯電話機１１０を検出したとする。この携帯電話機１１０が検出された領域が、携帯電話機１１０Ａのカメラ１５７０のズーム倍率が３倍のときに対応する領域である場合、サーバ１００は、携帯電話機１１０Ａのカメラ１５７０のズーム倍率を３倍に制御する。これにより、携帯電話機１１０Ａのディスプレイ１５６０には、３倍に拡大された被写体の画像（すなわち、上記によって決定された携帯電話機１１０の位置で見える画像）が自動的に表示され、携帯電話機１１０Ａのスピーカ１５７０からは、この画像に応じた適切な位置で聞こえる音（すなわち、上記によって決定された携帯電話機１１０の位置で聞こえる音）が発せられる。このようにすることで、携帯電話機１１０Ａのユーザは、音と画像のバランスが取れた心地よい臨場感を得ることができる。
【０１０５】
上記の場合において、サーバ装置１００は、適切な音を供給することができる携帯電話機１１０を、ズームイン方向・ズームアウト方向のいずれか一方向に探索してもよく、ズームイン方向・ズームアウト方向の双方向に探索してもよい。これらのうちのいずれを適用するかについては、予めサーバ装置１００に設定されていてもよく、携帯電話機１１０Ａのユーザに選択させるようにしてもよい。また、サーバ装置１００は、適切な音を供給することができる携帯電話機１１０が存在する領域を複数検出してもよく、この場合、いずれの領域に存在する携帯電話機１１０を音データの供給元の携帯電話機１１０とするかを、携帯電話機１１０Ａのユーザに選択させるようにしてもよく、たとえば、元の領域から最も近い位置にある領域に存在する携帯電話機１１０を音データの供給元の携帯電話機１１０とするなど、自動的に決定するようにしてもよい。
【０１０６】
各実施形態では、本発明に係る情報処理装置をサーバ装置に適用した例を示したが、これに限らず、本発明に係る情報処理装置は、パーソナルコンピュータなどにも適用することができる。なお、本発明に係る端末装置は、本発明に係る情報処理装置の機能を兼ね備えるものであってもよい。この場合、各実施形態で説明したようなサーバ装置を設けなくても、本発明に係る情報処理方法を実現することができる。
【０１０７】
また、各実施形態では、本発明に係る端末装置を携帯電話機に適用した例を示したが、これに限らず、本発明に係る端末装置は、ＰＤＡ（Personal Digital Assistant）、携帯音楽再生装置、携帯動画再生装置、携帯ナビゲーション装置などにも適用することができる。本発明に係る端末装置は、被写体が保持しているものも含めてよい。また、各実施形態では、音の取得対象として決定された携帯電話機１１０が撮像部を備えているが、音データを供給するだけであれば、撮像部を備えていなくてもよい。
【０１０８】
なお、各実施形態では、本発明にかかる「所定のデータ」の一例として、音データおよび画像データを用いて説明し、本発明にかかる「出力部」の一例として、発音部３２２および表示部３０３を用いて説明したが、これらに限定するものではない。すなわち、携帯電話機１１０Ａは、他の携帯電話機１１０から、音データおよび画像データ以外のデータを所定のデータとして受け取って出力するようにしてもよい。また、携帯電話機１１０Ａは、他の携帯電話機１１０から受け取ったデータを、発音部３２２および表示部３０３以外の出力部によって出力するようにしてもよい。
【符号の説明】
【０１０９】
１００…サーバ装置、１１０…携帯電話機、２０２…第一受信部、２０４…決定部、２０６…第二受信部、２０８…送信部、３０２…撮像部、３０３…表示部、３０４…位置検出部、３０６…方向検出部、３０７…ズーム状態検出部、３０８…集音部、３１０…送信部、３２０…受信部、３２２…発音部
【図１】
0005409471.tif 000002
【図２】
0005409471.tif 000003
【図３】
0005409471.tif 000004
【図４】
0005409471.tif 000005
【図５】
0005409471.tif 000006
【図６】
0005409471.tif 000007
【図７】
0005409471.tif 000008
【図８】
0005409471.tif 000009
【図９】
0005409471.tif 000010
【図１０】
0005409471.tif 000011
【図１１】
0005409471.tif 000012
【図１２】
0005409471.tif 000013
【図１３】
0005409471.tif 000014
【図１４】
0005409471.tif 000015