(57)【要約】【課題】  カメラ付き携帯電話機のカメラとＬＣＤ画面を利用した端末間データ通信において、データ送信側とデータ受信側との間でレスポンス確認が出来、従って連続的なデータ通信の場合に特に好適な技術を提供することである。【解決手段】  情報画像を表示する表示手段６と、  表示手段６に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号を受信する受信手段９，１１と、  受信手段９，１１が受信した信号を基にして表示手段６に表示されている情報画像を次の情報画像に置き換えるか、又は終了させる制御手段５とを具備するカメラ付き情報携帯端末装置。【選択図】    図１
2006270131.tif 000002
【特許請求の範囲】
【請求項１】
カメラ付き情報携帯端末装置において、
情報画像を表示する表示手段と、
前記表示手段に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号を受信する受信手段と、
前記受信手段が受信した信号を基にして前記表示手段を制御する制御手段
とを具備することを特徴とするカメラ付き情報携帯端末装置。
【請求項２】
カメラ付き情報携帯端末装置において、
情報画像を表示する表示手段と、
前記表示手段に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号を受信する受信手段と、
前記受信手段が受信した信号を基にして前記表示手段に表示されている情報画像を次の情報画像に置き換えるか、又は終了させる制御手段
とを具備することを特徴とするカメラ付き情報携帯端末装置。
【請求項３】
記憶手段と、前記記憶手段に記憶されている情報を情報画像として生成する情報画像生成手段とを更に具備することを特徴とする請求項１又は請求項２のカメラ付き情報携帯端末装置。
【請求項４】
受信手段によって受信された信号が既登録信号に該当するか否かの判断手段を更に具備することを特徴とする請求項１〜請求項３いずれかのカメラ付き情報携帯端末装置。
【請求項５】
表示手段に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号を受信する受信手段がマイクロホンであることを特徴とする請求項１〜請求項４いずれかのカメラ付き情報携帯端末装置。
【請求項６】
表示手段に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号を受信する受信手段がマイクロホンであり、判断手段が音声信号解析手段であることを特徴とする請求項４又は請求項５のカメラ付き情報携帯端末装置。
【請求項７】
表示手段に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号を受信する受信手段がカメラであることを特徴とする請求項１〜請求項４いずれかのカメラ付き情報携帯端末装置。
【請求項８】
カメラ付き情報携帯端末装置において、
他の情報携帯端末装置の表示手段に表示された情報画像を前記カメラによって写し取った際に撮影済信号を発信する発信手段
を具備することを特徴とするカメラ付き情報携帯端末装置。
【請求項９】
カメラ付き情報携帯端末装置において、
他の情報携帯端末装置の表示手段に表示された情報画像が前記カメラによって写し取られ、この写し取られたことが認識された際に撮影済信号を発信する発信手段
を具備することを特徴とするカメラ付き情報携帯端末装置。
【請求項１０】
撮影済信号が音声信号または／および画像信号であることを特徴とする請求項８又は請求項９のカメラ付き情報携帯端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はカメラ付き情報携帯端末装置（例えば、携帯電話機、ＰＨＳ（Personal Handyphone System）、ＰＤＡ（Personal Data Assistance，Personal Digital Assistants：個人向け携帯型情報通信機器）に関する。
【背景技術】
【０００２】
カメラ付き携帯電話機に関しては様々な技術が提案されている。
【０００３】
例えば、特開２００４−６４３５０では、それまでのカメラ付き携帯電話機では、１種類の撮像装置しか搭載していない為、利用者が撮像装置を選択することが出来ず、被写体や状況に応じて最適な撮像画像を得ることが出来なかったことから、相互に仕様の異なる複数の撮像装置と、これらの撮像装置の中、何れか一つの撮像装置を選択する選択手段と、選択された撮像装置による撮像画像を表示可能な表示部とを備えたことを特徴とする撮像装置搭載携帯電話機が提案されている。
【０００４】
又、特開２００３−８５６５８では、携帯電話の表示部に画像表示した二次元コード画像を読込み、変換出力された二次元コードデータを既存のＰＯＳ端末のバーコードスキャナ端子に優先的に送出するＰＯＳ取引管理方法とＰＯＳ取引管理システムの提案を目的として、物品販売、レンタル、サービス販売などを提供する店舗に設置され、バーコードを読取るバーコードスキャナを接続したＰＯＳ端末と、構内通信回線で接続された店舗サーバとでなるＰＯＳ取引管理システムの環境で、前記店舗の利用会員に会員サービス情報を二次元コード化して、公衆通信回線を経由で、配信するＥＣサーバと、前記二次元コード化した会員サービス情報を受信すると共に表示部に二次元コード画像を表示出力する携帯電話と、前記ＰＯＳ端末とバーコードスキャナとの間に割込接続され、前記携帯電話の表示部を装着する携帯装着窓を有し、表示出力された二次元コード画像を撮像し画像データを変換出力する携帯読取手段と、該画像データより二次元コードデータを復調すると共にヘッダ部を分離出力する二次元コード復調手段と、前記二次元コードデータを所定コード形式のデータに変換するデータ変換手段と、前記二次元コード復調手段が二次元コード入力と判断した場合、所定コード形式の二次元コードデータを前記ＰＯＳ端末に優先的に送出する入出力選択手段とを有する二次元スキャナユニットとで構成するＰＯＳ取引管理システムを用いて、前記携帯電話が、前記ＥＣサーバより公衆通信回線を経由して前記二次元コードデータを受信する段階と、該携帯電話が受信した二次元コードデータを表示部に二次元画像として表示する段階と、前記携帯読取手段が、該表示部を前記二次元スキャナユニットの携帯装着窓に装着すると、前記二次元コード画像を撮像入力すると共に画像データを変換出力する段階と、前記二次元コード復調手段が、該画像データより二次元コードデータを復調しヘッダ部を分離出力すると共に二次元コードデータ入力を判断通知する段階と、前記データ変換手段が、復調された二次元コードデータを所定コード形式のデータに変換する段階と、前記入出力選択手段が、前記二次元コードデータ入力の通知に基づき復調された二次元コードデータを優先して前記ＰＯＳ端末に入力する段階とで構成することを特徴とする携帯電話利用のＰＯＳ取引管理方法が提案されている。
【０００５】
又、特開２００３−６５７０では、簡単な構成としながらも、情報を通信することが出来、しかもシステム全体としてのコストを抑制することを目的として、第１の端末の表示手段が情報を２次元配列の画像として表示し、第２の端末の撮像手段が前記表示手段に表示された２次元配列の画像を撮像することによって、前記第１の端末から前記第２の端末に情報を送信する非接触通信システムであって、前記表示手段を、２次元配列の画像をスクロール表示するように構成し、前記撮像手段を、前記表示手段にスクロール表示された２次元配列の画像を１次元的に撮像する１次元配列センサから構成し、前記撮像手段により１次元的に撮像された画像に基づいて、前記表示手段にスクロール表示された元々の２次元配列の画像に記録されている情報を再生する再生手段を備えたことを特徴とする非接触通信システムが提案されている。
【０００６】
又、特開２００２−２９０６０７では、取り込んだ画像を認識して画像から必要な情報を抽出することを目的として、１次元コード又は２次元コードを撮像してコード画像を生成する撮像手段と、前記撮像手段により撮像されたコード画像に基づいてコード情報を認識する認識手段と、前記認識手段により認識されたコード情報を送信するコード情報送信手段とを備えた通信端末装置が提案されている。
【０００７】
又、特開２００２−１０９４２０では、データを送信する側およびデータを受信する側に、通信を行う為の専用の部品を不要として、データ通信を行うことを目的として、表示手段を有する第１の端末を具備した通信システムであって、前記第１の端末は、情報コードを表す情報コード画像を前記表示手段に表示するように構成され、前記第１の端末が表示した情報コード画像を読取る読取手段を有する第２の端末を具備したことを特徴とする通信システムが提案されている。
【０００８】
又、ＷＯ００／５５７３９では、２次元コードを、画像読取手段で読取ることによって、通信端末機を通じてメールサーバにアクセスする方法であって、
２次元コードは、少なくとも電子メールアドレスの文字列を含んだ構成とされ、 画像読取手段は、読取った２次元コードを、電子メールアドレスの文字コード列に変換してから、更に通信データとして通信端末機に送信し、
通信端末機は、画像読取手段から送信されてきた通信データから電子メールアドレスの文字コード列を抽出したときには、予め準備されたメーラーを起動するとともに、起動したメーラーに、抽出した電子メールアドレスの文字コード列をハンドリングすることによって、メッセージ入力画面を表示させることを特徴とする２次元コードを用いた電子メール送信方法が提案されている。
【０００９】
又、特開平２−２０３６２９では、無線通信を開始してから一定時間が経過したことを検出し、或いは音声信号に重畳されているシステムトーン断を検出したことにより通信を終了すると言う機能を備えた無線通信システムの回線中継器において、実行中の無線通信が試験通話であることを判断し、その場合は一定時間が経過したことを検出した場合、又はシステムトーン断を検出した場合にのみ通信を終了するようにしたことを特徴とする無線回線中継装置が提案されている。
【特許文献１】特開２００４−６４３５０
【特許文献２】特開２００３−８５６５８
【特許文献３】特開２００３−６５７０
【特許文献４】特開２００２−２９０６０７
【特許文献５】特開２００２−１０９４２０
【特許文献６】ＷＯ００／５５７３９
【特許文献６】特開平２−２０３６２９
【発明の開示】
【発明が解決しようとする課題】
【００１０】
ところで、従来のカメラ付き携帯電話機においては、端末間データ通信を実現する手段として、赤外線通信やシリアルケーブル接続、Bluetooth等の無線通信を使用する方法が知られている。しかしながら、これらの方法では、各々、専用の通信用デバイスが必要となる。そこで、このような問題を解決する手段の一つとして、上記提案された技術の如く、カメラ付き携帯端末のカメラとＬＣＤ画面を利用した方法が知られている。すなわち、データ送信側端末ではＬＣＤ画面にＱＲコード（２次元バーコード）等を表示し、データ受信側ではカメラにより送信側端末のＬＣＤ画面に表示されたＱＲコードを取り込むという方法である。
【００１１】
しかしながら、この方法では、データ送信側とデータ受信側との間でレスポンス確認が出来ない致命的な問題が有る。この為、特に、連続的なデータ通信の場合には適していない。
【００１２】
従って、本発明が解決しようとする課題は、カメラ付き携帯電話機のカメラとＬＣＤ画面を利用した端末間データ通信において、データ送信側とデータ受信側との間でレスポンス確認が出来、従って連続的なデータ通信の場合に特に好適な技術を提供することである。
【課題を解決するための手段】
【００１３】
前記の課題は、カメラ付き情報携帯端末装置において、
情報画像を表示する表示手段と、
前記表示手段に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号を受信する受信手段と、
前記受信手段が受信した信号を基にして前記表示手段を制御する制御手段
とを具備することを特徴とするカメラ付き情報携帯端末装置Ａによって解決される。
【００１４】
特に、カメラ付き情報携帯端末装置において、
情報画像を表示する表示手段と、
前記表示手段に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号を受信する受信手段と、
前記受信手段が受信した信号を基にして前記表示手段に表示されている情報画像を次の情報画像に置き換えるか、又は終了させる制御手段
とを具備することを特徴とするカメラ付き情報携帯端末装置Ｂによって解決される。
【００１５】
又、カメラ付き情報携帯端末装置において、
他の情報携帯端末装置の表示手段に表示された情報画像を前記カメラによって写し取った際に撮影済信号を発信する発信手段
を具備することを特徴とするカメラ付き情報携帯端末装置Ｃ1によって解決される。
【００１６】
特に、カメラ付き情報携帯端末装置において、
他の情報携帯端末装置の表示手段に表示された情報画像が前記カメラによって写し取られ、この写し取られたことが認識された際に撮影済信号を発信する発信手段
を具備することを特徴とするカメラ付き情報携帯端末装置Ｃ２によって解決される。
例えば、カメラ付き情報携帯端末装置において、
他の情報携帯端末装置の表示手段に表示された特定のＱＲコードの如きの情報画像が前記カメラによって写し取られ、この写し取られたＱＲコードの如きの情報画像が認識された際に撮影済信号を発信する発信手段
を具備することを特徴とするカメラ付き情報携帯端末装置Ｃ３によって解決される。
【００１７】
勿論、カメラ付き情報携帯端末装置Ａ，Ｂとカメラ付き情報携帯端末装置Ｃ1，2，３とを合体させたカメラ付き情報携帯端末装置Ｄによって解決される。
【００１８】
上記カメラ付き情報携帯端末装置Ａ，Ｂ，Ｄは、好ましくは、記憶手段と、前記記憶手段に記憶されている情報を情報画像として生成する情報画像生成手段とを更に具備する。又、好ましくは、受信手段によって受信された信号が既登録信号に該当するか否かの判断手段を更に具備する。
【００１９】
そして、上記表示手段に表示された情報画像が他のカメラ付き情報携帯端末装置のカメラによって写し取られた際に発信される信号（音声信号や画像信号）を受信する受信手段としては、例えばマイクロホンやカメラを用いることが出来る。そして、マイクロホンが用いられた場合には、上記判断手段として音声信号解析手段を用いることが出来る。
【発明の効果】
【００２０】
本発明によれば、送信側（自己側）は、受信側（相手側）が送信側（自己側）からの情報画像を受け取ったか否かが判るようになる。従って、次の動作にスムーズに移れる。従って、連続的なデータ通信の場合には、非常に、好都合である。
【発明を実施するための最良の形態】
【００２１】
図１〜図５は本発明になるカメラ付き情報携帯端末装置の一実施形態を示すもので、図１はカメラ付き情報携帯端末装置のブロック図、図２は送信データの説明図、図３は図２のデータが変換されたＱＲコード、図４は送信側（自己側）の情報携帯端末装置のフローチャート、図５は受信側（相手側）の情報携帯端末装置のフローチャートである。
【００２２】
各図中、１は、カメラ付き情報携帯端末装置のカメラである。特に、ＣＣＤ又はＣＭＯＳセンサ等による被写体の撮像信号をデジタル信号に変換して出力するカメラである。
【００２３】
２は、ＱＲコードを認識するＱＲコード認識部である。尚、このＱＲコード認識部２は、カメラ１より入力された画像データを１フレーム毎に後述の制御部５から受信し、例えば図３の如きのＱＲコードから図２の如きのデータに変換することが出来る。そして、この変換されたデータは、後述のデータメモリ４に格納されるようになる。
【００２４】
３は、例えば図３の如きのＱＲコードを生成するＱＲコード生成部である。尚、ＱＲコードの生成（変換）方式としては、ＪＩＳ規格や独自仕様があるものの、公知な技術であるから、詳細な説明は省略される。すなわち、後述のデータメモリ４に格納されている図２の如きの個人情報（例えば、名前・電話番号・メールアドレス・住所など）が図３の如きのＱＲコードに変換（生成）される。
【００２５】
４は、例えば図２の如きの個人情報（例えば、名前・電話番号・メールアドレス・住所など）に関するキャラクタデータが記憶されているデータメモリである。
５は制御部である。
６はＬＣＤ画面などの表示部である。
【００２６】
７は音声信号解析部である。この音声信号解析部７は、後述のマイクロホン９から入力された音声信号からＡ／Ｄ変換されたデジタルデータをデジタル信号処理により入力音声信号の周波数検出を行なうものである。尚、音声信号解析部７についても、公知であるから、詳細な説明は省略される。
８はスピーカ、９はマイクロホン、１０はテンキー等の操作部である。
【００２７】
このカメラ付き情報携帯端末装置の使用は次の通りである。
先ず、送信側（自己側）のカメラ付き情報携帯端末装置Ｘにあっては、ユーザーが操作部１０を操作することにより、データの送信機能が選択され、実行される。そして、操作部１０の操作により、表示部６に表示された機能メニューから送信しようとするキャラクタデータの選択が行なわれる（Ｓ１）。
【００２８】
次に、選択されたキャラクタデータの送信開始が選択される（Ｓ２）。
そうすると、制御部５によって、データメモリ４から選択されたキャラクタデータが読み出され、ＱＲコード生成部３に送られる（Ｓ３）。
【００２９】
ＱＲコード生成部３では、選択されたキャラクタデータからＱＲコードへの変換が行なわれる（Ｓ４）。そうすると、制御部５は、ＱＲコード生成部３で生成（変換）されたＱＲコードを表示部６に送る（Ｓ５）。
表示部６に送られたＱＲコードはＬＣＤ画面に表示される（Ｓ６）。
【００３０】
ところで、Ｓ６の画面表示と同時あるいは前後の時点で、制御部５はマイクロホン９をオンにさせる。これによって、マイクロホン９は音を拾うことが可能になり、マイク入力が可能（マイク有効化）になる（Ｓ７）。そして、制御部５は、マイクロホン９に入力された（マイクロホン９で受信した）音声信号をＡ／Ｄ変換器に送ってＡ／Ｄ変換し、このＡ／Ｄ変換された信号を音声信号解析部７に送り、音声信号解析部７を起動させる（Ｓ８）。
【００３１】
この音声信号解析部７は、デジタル信号処理により音声信号の周波数解析を行い、受信側（相手側）からＱＲコードを撮影済みの旨（相手側のカメラ付き情報携帯端末装置Ｙのユーザーからの撮影完了の音声、又は、相手側のカメラ付き情報携帯端末装置Ｙが発する撮影完了の告知音）の特定トーンの信号の検出を行なう。尚、音声信号の周波数解析については既知技術である。そして、音声信号解析部７では、予め、決定（登録）されている特定トーンの検出が行なわれるまで周波数解析を続ける（Ｓ９）。
【００３２】
音声信号解析部７が特定トーンを検出すると、制御部５に検出通知が出力される（Ｓ１０）。
この検出通知を受けて、制御部５は、次に送信すべき情報をデータメモリ４から読み出し、ＱＲコード生成部３に送る。そして、以後、上記と同様なステップが繰り返される。
【００３３】
そして、データメモリ４から選択・読み出され、生成されたＱＲコード全ての表示が終わり、そして送信が終わると、一連の動作は終了する。すなわち、選択されたキャラクタデータで未送信のものが有るか否かのチェックが行われ、有りの場合は、データメモリ４から読み出すところから繰り返し、無しの場合は、送信処理を終了する。
【００３４】
一方、上記送信側（自己側）のカメラ付き情報携帯端末装置Ｘに対して、受信側（相手側）のカメラ付き情報携帯端末装置Ｙにあっては、ユーザーが操作部１０を操作することにより、データの受信機能が選択され、実行される。
【００３５】
すなわち、図５に示される如く、カメラ１から入力された画像データからＱＲコードが検出できなかった場合にタイムアウトする為のタイマが設定される（Ｓ１）。
【００３６】
そして、カメラ付き情報携帯端末装置Ｙのカメラ１が起動され、画像データ（ＱＲコード）の撮影が開始される（Ｓ２）。撮影開始後、情報携帯端末装置Ｙの制御部５は、カメラ１で撮影（入力）した画像データ（ＱＲコード）を情報携帯端末装置ＹのＱＲコード認識部２に転送する（Ｓ３）。そして、ＱＲコード認識部２は、入力された画像データ（ＱＲコード）を認識する（Ｓ４）。この時、タイマ設定時間内に認識できなかった場合は、画像データ取り込み処理を中止し、データ受信処理を終了する。
【００３７】
ＱＲコードを認識できた場合には、制御部５は、スピーカ８を一定時間鳴動させる（Ｓ６）。尚、この鳴動音が送信側のカメラ付き情報携帯端末装置Ｘのマイクロホン９によって拾われ、カメラ付き情報携帯端末装置Ｘの音声信号解析部７によって特定トーンの検出がなされ、撮影完了の告知音として利用される。
【００３８】
そして、ＱＲコードの認識後に、カメラ付き情報携帯端末装置ＹのＱＲコード認識部２はＱＲコードをデコードし、対応する図２に示されるキャラクタデータに変換する。そして、デコードされたキャラクタデータをカメラ付き情報携帯端末装置Ｙのデータメモリ４に格納する（Ｓ７）。
【００３９】
そして、キャラクタデータがデータメモリ４に格納されると、或いはその前後の時点において、次のＱＲコードが受信され、上記と同様なステップで処理されて行く。最後のＱＲコードについて同様なステップが繰り返された後では、タイムアップにより受信処理が終了する（Ｓ５）。
【００４０】
すなわち、上述した通り、カメラ付き情報携帯端末装置ＹによるＱＲコード撮影の信号が発信されると、その信号をカメラ付き情報携帯端末装置Ｘは受信して次のステップに移ることから、情報の受け取りがスムーズに進んで行く。しかも、その為の手段としては、制御手段５を動作させるソフトウェアの他には、例えば音声信号解析部７の如きの手段で済み、従来のカメラ付き情報携帯端末装置に少しの手直しを施す程度で実施でき、コストアップの要因は小さく、低廉なコストで提供できる。
【００４１】
さて、上記第１実施形態においては、カメラ付き情報携帯端末装置ＹによるＱＲコード撮影済みの信号は音声信号であったが、映像信号を用いることも可能である。
【００４２】
すなわち、カメラ付き情報携帯端末装置の中には、図６に示される如く、カメラを、従来と同様な相手方撮影用のカメラ１と、ＴＶ電話などの自分撮り用カメラ１１と言った如く複数個実装しているものが有る。このようなカメラ付き情報携帯端末装置にあっては、図７に示される如く、カメラ付き情報携帯端末装置Ｘの一方のカメラ１１及びＬＣＤ画面６とカメラ付き情報携帯端末装置Ｙの一方のカメラ１１およびＬＣＤ画面６とを向かい合わせることが可能となる。
【００４３】
従って、前記実施形態におけるトーン検出に代えて、ＬＣＤ画像によりレスポンスを返すことが可能となる。すなわち、受信したことを通知する情報、例えばＱＲコードを記憶させておき、受信側のカメラ付き情報携帯端末装置Ｙのカメラ１１が送信側の表示部６に表示されたＱＲコードを撮影（受信）した場合、制御部は自己（受信側）のカメラ付き情報携帯端末装置Ｙの表示部６に上記受信済み旨のＱＲコードを表示させ、送信側のカメラ付き情報携帯端末装置Ｘのカメラ１１がこれを撮影して取り込み、解析部７によって解析し、登録されている受信済み旨のＱＲコードであることが判明した場合は、前記実施形態と同様に動作して行くようになっている。すなわち、前記実施形態と本実施形態とは、音声信号を解析するか画像信号を解析するかの相違に過ぎないから、詳細な説明は省略される。又、本実施形態の構成と前記実施形態の構成との双方の構成を持たせておいても良いことは勿論である。
【図面の簡単な説明】
【００４４】
【図１】カメラ付き情報携帯端末装置の第１実施形態のブロック図
【図２】キャラクタデータの説明図
【図３】図２のキャラクタデータに対応するＱＲコードの説明図
【図４】カメラ付き情報携帯端末装置Ｘの動作説明図
【図５】カメラ付き情報携帯端末装置Ｙの動作説明図
【図６】カメラ付き情報携帯端末装置の第２実施形態のブロック図
【図７】第２実施形態のカメラ付き情報携帯端末装置の使用方法の説明図
【符号の説明】
【００４５】
１，１１        カメラ
２              ＱＲコード認識部
３              ＱＲコード生成部
４              データメモリ
５              制御部
６              表示部
７              解析部
８              スピーカ
９              マイクロホン
１０            操作部
特許出願人  ＮＥＣアクセステクニカ株式会社
代  理  人  宇      高          克      己
【図１】
2006270131.tif 000003
【図２】
2006270131.tif 000004
【図３】
2006270131.tif 000005
【図４】
2006270131.tif 000006
【図５】
2006270131.tif 000007
【図６】
2006270131.tif 000008
【図７】
2006270131.tif 000009