(57)【要約】【課題】複数のデータ形式のデータを含む情報の共有を容易に行うことが可能な携帯電話機を提供すること。【解決手段】本発明の携帯電話機１０は、画像データ及び音声データを含む通信データを通信相手先設備との間で送受信する無線通信部１０１と、通信データに含まれる画像データを、再生可能な画像再生データに復号化する画像復号化部１０３と、通信データに含まれる音声データを、再生可能な音声再生データに復号化する音声復号化部１０４と、音声再生データを、音声認識により文字データに変換する変換部１０５と、画像再生データと文字データとを合成することにより、合成画像データを生成する合成部１０８と、合成画像データを再生する画像再生部１０９と、合成画像データを視認可能に投射するプロジェクタ１１０とを備える。【選択図】  図１
2005012263.tif 000002
【特許請求の範囲】
【請求項１】
画像データ及び音声データを含む通信データを通信相手先設備との間で送受信する無線通信手段と、
前記無線通信手段によって受信された前記通信データに含まれる前記画像データを、再生可能な画像再生データに復号化する画像復号化手段と、
前記無線通信手段によって受信された前記通信データに含まれる前記音声データを、再生可能な音声再生データに復号化する音声復号化手段と、
前記音声復号化手段によって復号化された前記音声再生データを、音声認識により文字データに変換する変換手段と、
前記画像再生データと前記文字データとを合成することにより、合成画像データを生成する合成手段と、
前記合成手段によって合成された前記合成画像データを再生する再生手段と、
前記再生手段によって再生された前記合成画像データを視認可能に投射する投影手段と
を備えることを特徴とする携帯電話機。
【請求項２】
前記変換手段により変換された前記文字データの中から、予め登録されている登録文字列と関連性のある一部の抽出文字データを抽出する抽出手段をさらに備え、
前記合成手段は、前記画像再生データと前記抽出文字データとを合成することにより、合成画像データを生成する、
ことを特徴とする請求項１に記載の携帯電話機。
【請求項３】
前記無線通信手段は、通信相手先設備に関する通信相手先データをさらに受信し、
前記合成手段は、前記通信相手先データをさらに合成することにより、合成画像データを生成する、
ことを特徴とする請求項１又は２に記載の携帯電話機。
【請求項４】
前記通信相手先設備に送信する音声元データを近距離無線方式により受信する近距離無線手段と、
前記近距離無線手段によって受信された音声元データを伝送可能な音声データに符号化する音声符号化手段とをさらに備える、
ことを特徴とする請求項１〜３のいずれか１項に記載の携帯電話機。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、携帯電話機に関するものである。
【０００２】
【従来の技術】
近年、移動体通信ネットワークの大容量化やデータ圧縮技術の進歩に伴い、ネットワークを経由して携帯電話機間で送受信されるデータが、音声データのみならず、画像データ、文字データ等にまで多様化してきている。中でも画像データは、ＴＶ電話機能の使用時や地図データ等の画像コンテンツのダウンロード時等に頻繁に扱われるようになっている。
【０００３】
なお、携帯電話機において受信される画像データは、携帯電話機に搭載された小型ディスプレイに表示されるが、それだけでは、情報の内容によっては認識するのが困難になったり、複数人による情報の共有が困難になることがある。このような観点から、画像を外部のスクリーンや壁等に投射するプロジェクタ機能付きの携帯電話機が考案されている（例えば、特許文献１参照。）。
【０００４】
【特許文献１】
特開平７−５８８１４号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、上述した従来技術には以下のような問題があった。すなわち、画像データに音声データや文字データを含んで受信した場合は、投射された画像データとは別に、小型スピーカや小型ディスプレイ等で再生あるいは表示されるか、別画面で投射されることとなり、複数人での情報の共有を的確に行うことができない。
【０００６】
そこで、本発明は上記課題に鑑みてなされたものであり、複数のデータ形式のデータを含む情報の共有を容易に行うことが可能な携帯電話機を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明の携帯電話機は、画像データ及び音声データを含む通信データを通信相手先設備との間で送受信する無線通信手段と、無線通信手段によって受信された通信データに含まれる画像データを、再生可能な画像再生データに復号化する画像復号化手段と、無線通信手段によって受信された通信データに含まれる音声データを、再生可能な音声再生データに復号化する音声復号化手段と、音声復号化手段によって復号化された音声再生データを、音声認識により文字データに変換する変換手段と、画像再生データと文字データとを合成することにより、合成画像データを生成する合成手段と、合成手段によって合成された合成画像データを再生する再生手段と、再生手段によって再生された合成画像データを視認可能に投射する投影手段とを備える。
【０００８】
本発明の携帯電話機によれば、無線通信手段が通信データを送受信し、画像復号化手段がその通信データに含まれる画像データを画像再生データに復号化し、音声復号化手段が通信データに含まれる音声データを音声再生データに復号化する。そして、変換手段が音声再生データを文字データに変換し、合成手段が、変換された文字データと画像再生データを合成して合成画像データを生成し、再生手段がその合成画像データを再生し、投影手段が合成画像データを視認可能に投射するので、音声付き画像データを受信した場合であっても、それらに含まれる情報を一目で的確に把握することができる。
【０００９】
また、本発明の携帯電話機では、変換手段により変換された文字データの中から、予め登録されている登録文字列と一致あるいは類似している一部の抽出文字データを抽出する抽出手段をさらに備え、合成手段は、画像再生データと抽出文字データとを合成することも好ましい。この場合、変換された文字データの中から登録文字列と一致、類似しているものを抽出した後、画像再生データと合成するので、受信した音声データの中から一部の重要情報のみ切り出して文字として表示することができる。
【００１０】
また、本発明の携帯電話機では、無線通信手段は、通信相手先設備に関する通信相手先データをさらに受信し、合成手段は、通信相手先データをさらに加えることにより合成することも好ましい。この場合、相手先電話番号等の通信相手先データを受信して画像再生データと合成するので、画像データとその送信元に関する情報とを一目で的確に把握することができる。
【００１１】
また、本発明の携帯電話機では、通信相手先設備に送信する音声元データを近距離無線方式により受信する近距離無線手段と、近距離無線手段によって受信された音声元データを伝送可能な音声データに符号化する音声符号化手段とをさらに備えることも好ましい。この場合、近距離無線手段が通信相手先設備に送信する音声元データを近距離無線方式で受信し、音声符号化手段がその音声元データを音声データに符号化するので、携帯電話機から離れた位置から発せられた音声も合わせて通信相手先設備に伝えることができる。
【００１２】
【発明の実施の形態】
本発明の実施形態にかかる携帯電話機について図面を参照して説明する。なお、各図において、同一要素には同一符号を付して重複する説明を省略する。
【００１３】
図１は、本発明にかかる携帯電話機の構成図である。図１に示すように、本実施形態にかかる携帯電話機１０は、移動体通信ネットワーク２０を介して、他の通信設備（図示せず）との間でデータの送受信が可能なように構成されている。
【００１４】
携帯電話機１０は、音声通話とともに他の通信装置とデータ通信も可能な情報通信端末である。携帯電話機１０は、物理的には、ＣＰＵ（中央処理装置）、メモリ、周波数変換チップ、パワーアンプ、アナログ・デジタル変換チップ、ボタン等の入力装置、ディスプレイ（以上は図示せず）、スピーカ１１２、プロジェクタ１１０（投影手段）及びビデオカメラ１１３を備えた情報通信端末として構成されている。また、携帯電話機１０の外部には、通信相手先設備に送信する音声を集音して電気信号である音声元データに変換するための外部マイク３０が設けられている。この外部マイク３０は、赤外線通信、ブルートゥース（ＢｌｕｅＴｏｏｔｈ（登録商標））等をサポートする近距離無線機能を有しており、音声元データを近距離無線方式により送信することが可能となっている。また、携帯電話機１０においてプロジェクタ１１０を設ける位置としては、投影する画像がスクリーンや壁等の投射対象に投射可能な位置であれば特定の位置には限られない。
【００１５】
一方、携帯電話機１０の機能的な構成要素としては、図１に示すように、無線通信部１０１（無線通信手段）と、多重化部１０２と、画像復号化部１０３（画像復号化手段）と、音声復号化部１０４（音声復号化手段）と、変換部１０５（変換手段）と、情報加工部１０６（抽出手段）と、情報格納部１０７と、合成部１０８（合成手段）と、画像再生部１０９（再生手段）と、音声再生部１１１と、画像受信部１１４と、画像符号化部１１５と、近距離無線部１１６（近距離無線手段）と、音声符号化部１１７（音声符号化手段）とを備えて構成される。
【００１６】
以下、携帯電話機１０の各構成要素について詳細に説明する。
【００１７】
無線通信部１０１は、移動体通信ネットワーク２０を介して、画像データ、音声データ及びユーザデータを含む通信データを、通信相手先の携帯電話機（図示せず）等の通信相手先設備から受信、あるいは、通信相手先設備に送信する部分である。ここで、通信データは、画像データ、音声データ、及びユーザデータがそれそれのデータ形式に対応した方法で圧縮され、さらに多重化されたものである。また、ユーザデータには、通信相手先設備に関する通信相手先データが含まれる。通信相手先データとしては、通信相手先設備の電話番号、位置情報及びメールアドレス情報が挙げられる。
【００１８】
多重化部１０２は、無線通信部１０１によって受信された通信データから、画像データ、音声データ、及びユーザデータを分離して、それぞれを、画像復号化部１０３、音声復号化部１０４、情報加工部１０６に出力すると同時に、通信相手先設備に送信する画像データ、音声データ、及びユーザデータを多重化して無線通信部１０１に出力する部分である。
【００１９】
画像復号化部１０３は、多重化部１０２から出力された画像データを、携帯電話機１０において再生可能なデータ形式である画像再生データに復号化する部分である。画像復号化部１０３は、復号化した画像再生データを合成部１０８に出力する。
【００２０】
音声復号化部１０４は、多重化部１０２から出力された音声データを携帯電話機１０において再生可能なデータ形式である音声再生データに復号化する部分である。音声復号化部１０４は、復号化した音声再生データを変換部１０５及び音声再生部１１１に出力する。
【００２１】
音声再生部１１１は、音声復号化部１０４により出力された音声データを再生することにより、スピーカ１１２に音声出力させる部分である。
【００２２】
変換部１０５は、音声復号化部１０４により復号化された音声再生データを音声認識により文字データに変換する部分である。変換部１０５は、変換した文字データを情報加工部１０６に出力する。
【００２３】
情報加工部１０６は、変換部１０５により変換された文字データの中から、予め情報格納部１０７に登録されている登録文字列と一致あるいは類似している一部の文字データを抽出文字データとして抽出するとともに、多重化部１０２から出力されたユーザデータに基づいて情報格納部１０７から通信相手先データとしての相手先情報及び場所情報を検索する。情報加工部１０６は、抽出文字データと通信相手先データとを合成部１０８に出力する。
【００２４】
図２は、情報格納部１０７に格納されたデータの構成図の一例である。図２において、（ａ）は、上述した登録文字列を表すデータの一例を、（ｂ）〜（ｄ）は、通信相手先データを特定するためのデータの一例を示している。図２の例によれば、例えば、変換部１０５から、「今日の待ち合わせは、１３時に六本木駅で」という文字データが出力されると、この文字データと、図２（ａ）に示す登録文字列のそれぞれとを比較する。比較の結果、文字データの中から、登録文字列「六本木」及び「○○駅」と一致あるいは類似している文字データ「六本木駅」を、関連性のある抽出文字データとして抽出する。また、多重化部１０２から出力されたユーザデータとして、通信相手先設備の電話番号「０９０−ＸＸＸＸ−ＹＹＹ１」及び通信相手先設備の在圏基地局コード「ＢＳＩＤ１」が出力された場合を想定する。この場合、情報加工部１０６は、電話番号「０９０−ＸＸＸＸ−ＹＹＹ１」及び在圏基地局コード「ＢＳＩＤ１」に基づいて、図２（ｂ）、（ｃ）に示すような相手先情報及び場所情報を検索し、相手先情報「鈴木課長」と場所情報「新宿付近」とを取得する。また、情報加工部１０６は、図２（ｄ）に示されるデータを用いて検索することにより、ユーザデータとしての通信相手先設備のメールアドレス情報から相手先情報を取得することも可能である。
【００２５】
図１に戻って、合成部１０８は、画像復号化部１０３により出力された画像再生データと、情報加工部１０６により出力された抽出文字データ及び通信相手先データとを合成することにより、合成画像データを生成する部分である。図３は、抽出文字データと通信相手先データから生成される合成画像データを概略的に示す図である。図３に示すように、合成部１０８は、情報加工部１０６により出力された抽出文字データと通信相手先データとを合わせることにより、付加画像データ４０２に変換する。その後、合成部１０８は、この付加画像データ４０２と、画像復号化部１０３により出力された画像再生データ４０１とを合成して、合成画像データ４０３を生成する。図１に戻って、合成部１０８は、生成した合成画像データ４０３を、画像再生部１０９に出力する。
【００２６】
画像再生部１０９は、合成部１０８から出力された合成画像データ４０３を再生し、プロジェクタ１１０にその再生画像を出力する部分である。
【００２７】
プロジェクタ１１０は、画像再生部１０９により出力された再生画像を、スクリーンや壁等の投射対象に視認可能なように投射させる部分である。
【００２８】
画像受信部１１４は、ビデオカメラ１１３により撮影された画像を、通信相手先設備に送信する電気信号である画像元データに変換する部分である。画像受信部１１４は、変換した画像元データを画像符号化部１１５に出力する。
【００２９】
画像符号化部１１５は、画像受信部１１４から出力された画像元データを移動体通信ネットワーク２０において伝送させるための画像データに符号化する部分である。画像符号化部１１５は、符号化した画像データを多重化部１０２に出力する。
【００３０】
近距離無線部１１６は、近距離無線方式により、通信相手先設備に送信する音声元データを外部マイク３０から受信する部分である。近距離無線部１１６は、受信した音声元データを音声符号化部１１７に出力する。
【００３１】
音声符号化部１１７は、近距離無線部１１６から出力された音声元データを移動体通信ネットワーク２０において伝送させるための音声データに符号化する部分である。音声画像符号化部１１７は、符号化した音声データを多重化部１０２に出力する。
【００３２】
続いて、本実施形態にかかる携帯電話機１０の動作について説明する。図４〜図５は、本実施形態にかかる携帯電話機１０の動作を示すフローチャートである。まず、図４を用いて携帯電話機１０が通信相手先設備から通信データを受信する際の動作について説明する。
【００３３】
まず、携帯電話機１０の無線通信部１０１により、移動体通信ネットワーク２０を介して通信相手先設備から送信される通信データが受信される（ステップＳ０１）。受信された通信データは、多重化部１０２に出力され、画像データ、音声データ、ユーザデータに分離される（ステップＳ０２）。
【００３４】
分離された画像データ、音声データは、それぞれ、画像復号化部１０３、音声復号化部１０４により、画像再生データ、音声再生データに復号化される（ステップＳ０３）。次に、復号化された音声再生データは変換部１０５により文字データに変換される（ステップＳ０４）。
【００３５】
次に、情報加工部１０６により、変換された文字データの中から、予め情報格納部１０７に格納されている登録文字列と関連性のある一部の文字データが、抽出文字データとして抽出される（ステップＳ０５）。また、情報加工部１０６により、多重化部１０２において分離されたユーザデータに基づいて、情報格納部１０７に格納されているデータの中から通話相手先データが検索される（ステップＳ０６）。
【００３６】
抽出文字データと通話相手先データは、合成部１０８により、付加画像データに変換される（ステップＳ０７）。この付加画像データと画像再生データとが合成されることにより、合成画像データが生成される（ステップＳ０８）。合成された合成画像データは、画像再生部１０９により再生されることにより、プロジェクタ１１０から投射される（ステップＳ０９）。
【００３７】
次に、図５を用いて携帯電話機１０が通信相手先設備に通信データを送信する際の動作について説明する。
【００３８】
まず、通信相手先設備に送信する画像がビデオカメラ１１３により撮影されると同時に、送信する音声が外部マイク３０により集音される（ステップＳ１１）。ビデオカメラ１１３により撮影された画像は、画像受信部１１４により受信された後、通信相手先設備に送信する電気信号である画像元データに変換されると同時に、外部マイク３０により集音された音声は、電気信号に変換された音声元データとして近距離無線部１１６により受信される（ステップＳ１２）。
【００３９】
次に、画像元データと音声元データは、それぞれ、画像符号化部１１５，音声符号化部１１７により、画像データと音声データに符号化される（ステップＳ１３）。符号化された画像データと音声データは、ユーザデータとともに、多重化部１０２により、通信データに多重化される（ステップＳ１４）。最後に多重化された通信データは、無線通信部１０１により通信相手先設備に送信される（ステップＳ１５）。
【００４０】
以上述べた本実施形態にかかる携帯電話機１０によれば、無線通信部１０１が通信データを送受信し、画像復号化部１０３がその通信データに含まれる画像データを画像再生データに復号化し、音声復号化部１０４が通信データに含まれる音声データを音声再生データに復号化する。そして、変換部１０５が音声再生データを文字データに変換し、合成部１０８が、変換された文字データと画像再生データを合成して合成画像データを生成し、画像再生部１０９がその合成画像データを再生し、プロジェクタ１１０が合成画像データを視認可能に投射するので、音声付き画像データを受信した場合であっても、それらに含まれる情報を一目で的確に把握することができる。また、複数人で１台の携帯電話機１０を使用する場合であっても、受信した情報を十分に共有することが可能となる。
【００４１】
なお、上記実施形態に記載の態様は、本発明に係る携帯電話機の好適な例であり、様々な画像データの送受信に関して応用が可能である。例えば、携帯電話機１０を複数人で使用して、ＴＶ会議を実施することが可能である。この場合、受信した画像データ、一部の音声データ及び通信相手先データを、プロジェクタ１１０により画面に投射することにより、相手方から送信された内容を複数人が同時に把握することが可能である。また、相手方に送信する音声を外部マイク３０で集音して、携帯電話機１０が音声データを近距離無線により受信することにより、複数人の音声を確実に相手側に送信することができる。また、１台の携帯電話機１０を複数人で共有して使用することにより、全体としての設備投資額及び通信データ量の低減を図ることができる。
【００４２】
本実施形態にかかる携帯電話機１０においては、合成部１０８が、情報加工部１０６により抽出された抽出文字データを合成画像データに合成していたが、これは、変換部１０５により変換された文字データをそのまま合成画像データに合成しても良い。これにより、通信相手先から受信した音声データをそのまま画像データと合わせて投射するので、全体の会話の内容を多人数で同時に的確に把握することができる。
【００４３】
本実施形態にかかる携帯電話機１０においては、通信相手先設備との間で送受信する通信データに、画像データ、音声データ、及びユーザデータを多重化していたが、これは、画像データ、音声データ、及びユーザデータを別々にいわゆるマルチリンク伝送により送受信しても良い。
【００４４】
【発明の効果】
本発明の携帯電話機によれば、通信データを送受信し、その通信データに含まれる画像データを画像再生データに復号化し、通信データに含まれる音声データを音声再生データに復号化する。そして、音声再生データを文字データに変換し、変換された文字データと画像再生データを合成して合成画像データを生成し、その合成画像データを再生し、合成画像データを視認可能に投射するので、音声付き画像データを受信した場合であっても、それらに含まれる情報を一目で的確に把握することができる。その結果、複数のデータ形式のデータを含む情報の共有を容易に行うことが可能な携帯電話機を提供することができる。
【図面の簡単な説明】
【図１】本発明の実施形態である携帯電話機の構成図である。
【図２】（ａ）は、図１の情報格納部に格納された登録文字列を示すデータの構成図、（ｂ）〜（ｄ）は、図１の情報格納部に格納された通信相手先データを特定するためのデータの構成図である。
【図３】抽出文字データと通信相手先データから生成される合成画像データを概略的に示す図である。
【図４】通信相手先設備から通信データを受信する際の携帯電話機の動作を示すフローチャートである。
【図５】通信相手先設備に通信データを送信する際の携帯電話機の動作を示すフローチャートである。
【符号の説明】
１０…携帯電話機、２０…移動体通信ネットワーク、３０            …外部マイク、１０１…無線通信部、１０２…多重化部、１０３…画像復号化部、１０４…音声復号化部、１０５…変換部、１０６…情報加工部、１０７…情報格納部、１０８…合成部、１０９…画像再生部、１１０…プロジェクタ、１１１…音声再生部、１１２…スピーカ、１１３…ビデオカメラ、１１４…画像受信部、１１５…画像符号化部、１１６…近距離無線部、１１７…音声符号化部。
【図１】
2005012263.tif 000003
【図２】
2005012263.tif 000004
【図３】
2005012263.tif 000005
【図４】
2005012263.tif 000006
【図５】
2005012263.tif 000007