(57)【要約】【課題】カメラ部を用いたユーザーインターフェース実現方法及びこのための移動通信端末機を提供する。【解決手段】移動通信端末機のカメラ部をアクティブにした状態において、ユーザーが所定のモーションを取ると、移動通信端末機は、ユーザーのモーションを認識し、そのモーションをパターン化してモーションパターンに応じる所定の動作を行う。このとき、モーションパターンに応じて行われる動作は、マウスモード時にはマウス制御に該当し、ゲームモード時にはゲーム制御に該当し、文字入力モード時には文字の入力に該当する。【選択図】図２
2007012055.tif 000002
【特許請求の範囲】
【請求項１】
移動通信端末機であって、
ユーザーのモーションが入力されるカメラ部と、
少なくとも一つのモーションパターンに応じる制御命令と所定の軌跡に応じる文字パターンとを記憶するメモリと、
ユーザーからモーションが入力されると、入力されたユーザーモーションをパターン化し、前記モーションパターンに対応する制御命令を前記メモリから読み出して遂行する制御部と、
を備えることを特徴とする移動通信端末機。
【請求項２】
前記制御部は、マウスモード時に、前記ユーザーモーションパターンに対応するマウス制御命令を前記メモリから読み出すことを特徴とする請求項１に記載の移動通信端末機。
【請求項３】
前記制御部は、マウスモード時に、カーソルを表示することを特徴とする請求項２に記載の移動通信端末機。
【請求項４】
前記制御部は、ゲームモード時に、前記ユーザーモーションパターンに対応するゲーム制御命令を前記メモリから読み出すことを特徴とする請求項１に記載の移動通信端末機。
【請求項５】
前記制御部は、文字入力モード時に、前記ユーザーモーションに対応する軌跡を生成し、その軌跡に対応する文字を前記メモリから読み出すことを特徴とする請求項１に記載の移動通信端末機。
【請求項６】
少なくとも一つのモーションパターンに応じる制御命令又は所定の軌跡に応じる文字パターンを記憶するメモリを含む移動通信端末機であって、
ユーザーのモーションが入力されるステップと、
ユーザーからモーションが入力されると、入力されたユーザーモーションをパターン化するステップと、
前記モーションパターンに対応する制御命令を前記メモリから読み出して遂行するステップと、
を含むことを特徴とする方法。
【請求項７】
前記制御命令を遂行するステップは、マウスモード時に、前記ユーザーモーションパターンに対応するマウス制御命令を前記メモリから読み出して遂行することを特徴とする請求項６に記載の移動通信端末機。
【請求項８】
前記制御命令を遂行するステップは、ゲームモード時に、前記ユーザーモーションパターンに対応するゲーム制御命令を前記メモリから読み出して遂行することを特徴とする請求項６に記載の方法。
【請求項９】
前記制御命令を遂行するステップは、文字入力モード時に、前記ユーザーモーションに対応する軌跡を生成し、その軌跡に対応する文字を前記メモリから読み出すことを特徴とする請求項６に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラ部を用いたユーザーインターフェース実現方法及びこのための移動通信端末機に関する。 
【背景技術】
【０００２】
最近、移動通信端末機の普及が一般化されて移動通信端末機の画面を通じて運転中に道路状況を知らせる交通情報サービス、独自の呼び出し音を登録して使用可能にするマイベル(MYBELL)サービス及び音声メールボックスのメッセージ到着を文字で通告する移動電話呼び出しサービスなどの多様なサービスが提供されている。かかる移動通信端末機には、音声メールボックス機能や特殊情報受信機能のような各種付加サービスをサービス提供者側から提供される機能が設計されているため、移動通信端末機のユーザーは固有な電話通話機能のみならず、多様な使用上の便宜が提供される。
【０００３】
このような多様なサービス及び付加機能が次第に拡大されるにつれて、移動通信システムは、音声及びデータだけでなく、ＩＳＤＮ(Integrated Service Digital Network)級の数Ｍｂ/ｓのマルチメディアサービスを提供し、このような移動通信システムに適合する端末機が開発されている。その一例として、被写体を撮影したイメージを記憶することのできるカメラ部を備える移動通信端末機が開発された。
【０００４】
移動通信端末機の大衆化に伴い、ユーザーは、移動通信端末機を用いて時間及び空間を問わず、便利に撮影することができる。また、ユーザーが常に携帯する移動通信端末機にカメラを装着したので、緊迫した場面を撮影することができ、その他にも、必要時に常に撮影が可能であるという長所がある。
【０００５】
したがって、このような長所に基づいてカメラ部を備えた移動通信端末機を、より効率的かつ多様な方法で活用することが好ましい。また、移動通信端末機の使用効率を高め、ユーザーの多様な要求を満たすために、カメラを備えた移動通信端末機に多様なサービス及び付加機能を加える必要がある。例えば、上述した移動通信端末機に備えられているカメラ部を用いて文書に印字された電話番号及びデータのような文字を認識可能にするＯＣＲ(Optical Character Recognition)機能がある。
【０００６】
しかしながら、移動通信端末機に備えられているカメラ部を用いた多様な応用が可能であるが、移動通信端末機のカメラ部の使用はＯＣＲ機能のみに限定されている。
【発明の開示】
【発明が解決しようとする課題】
【０００７】
したがって、本発明の目的は、カメラ部を用いてユーザーインターフェースを実現する方法及びこのための移動通信端末機を提供することである。
【課題を解決するための手段】
【０００８】
このような目的を達成するために、本発明の１つの特徴によれば、移動通信端末機であって、ユーザーのモーションが入力されるカメラ部と、少なくとも一つのモーションパターンに応じる制御命令と所定の軌跡に応じる文字とを記憶するメモリと、ユーザーからモーションが入力されると、入力されたユーザーモーションをパターン化し、該モーションパターンに対応する制御命令をメモリから読み出して遂行する制御部と、を備えることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、移動通信端末機に備えられているカメラ部を用いてユーザーインターフェースを実現することにより、カメラ部の応用範囲を拡大しながら、ユーザーの使用便宜も増大させることができる。
【発明を実施するための最良の形態】
【００１０】
以下、本発明の好適な実施形態について添付図面を参照しながら詳細に説明する。なお、下記の説明において、本発明の要旨のみを明瞭にするために関連した公知の機能や構成に関する詳細な説明は、適宜省略する。
【００１１】
本発明の実施形態によれば、移動通信端末機は、カメラ部を用いてユーザーインターフェースを実現することが可能である。移動通信端末機のカメラ部をアクティブにした状態において、ユーザーが所定のモーションを行うと、移動通信端末機は、ユーザーのモーションを認識し、そのモーションをパターン化してモーションパターンに応じる所定の動作を行う。
【００１２】
モーションパターンに応じて行われる動作は、マウスモード時にはマウスの制御となり、ゲームモード時にはゲーム制御となる。かつ、その動作は、文字入力モード時には文字の入力となる。
【００１３】
以下、移動通信端末機のブロック構成について図１を参照して説明する。
【００１４】
図１は、本発明の実施形態に応じた移動通信端末機のブロック構成図である。図１を参照すると、移動通信端末機１００は、ＲＦ(Radio Frequency)モジュール１１０、ベースバンド処理部１２０、ユーザーインターフェース１３０、音声処理部１４０、制御部１５０、メモリ１６０、ディスプレイ１７０、モーション認識部１８０、カメラ部１９０及び文字認識部２００を含む。
【００１５】
移動通信端末機１００の制御部１５０は、移動通信端末機を全般的に制御し、本発明の好ましい実施形態に応じるカメラ部を用いてユーザーインターフェースを実現するために、図１に示した各部を制御する。
【００１６】
制御部１５０の動作を詳しく説明すると、制御部１５０は、カメラ部１９０をアクティブにし、カメラ部１９０を通じてユーザーのモーションを認識し、ユーザーのモーションをパターン化する。
【００１７】
本発明の第１の実施形態に応じて、制御部１５０は、マウスモード時に、ユーザーモーションパターンに対応するマウス制御命令をメモリ１６０から読み出す。ユーザーは、移動通信端末機１００のカメラ部１９０の撮影可能な領域内で所定のモーションパターンに応じて手を動かす。この際、モーションパターンは、予めメモリ１６０に記憶されているモーションパターンであり、それに対応して制御命令が記憶されている。ユーザーが予め約束されているモーションパターンに基づいて所定のモーションパターンを行うと、移動通信端末機は該モーションパターンに対応する制御命令を行うことができる。例えば、ユーザーは実際にマウスをつかむことのように、クリック動作を取るか、マウスホイールを動かすモーションを取ることができる。制御部１５０は、該当モーションに対して実際にマウスをクリックするか、マウスホイールを動かす場合と同じマウス制御命令が行われるように制御動作を遂行する。
【００１８】
また、本発明の第２の実施形態に応じて、制御部１５０は、ゲームモード時に、ユーザーモーションパターンに対応するゲーム制御命令をメモリ１６０から読み出す。例えば、ユーザーは実際にゲームをすることのように、手を用いて物をつかみ、投げるか移動させるなどのモーションを取ると、制御部１５０は、ユーザーのモーションをパターン化し、ユーザーモーションパターンに対応するゲーム制御命令をメモリ１６０から読み出す。このようなゲーム制御命令も、メモリ１６０に対応するモーションパターンのように記憶されている。
【００１９】
また、本発明の第３の実施形態に応じて、制御部１５０は、文字入力モード時に、ユーザーモーションパターンに対応する軌跡に応じる文字を読み出してディスプレイ１７０に表示する。ユーザーは、移動通信端末機１００のカメラ部１９０の撮影可能な領域内で手などを所定の文字に応じるユーザーモーションパターンを生成するように動かす。例えば、ユーザーは、手を実際に文字を書くことのように動かすことができる。すると、制御部１５０は、ユーザーのモーションパターンに対応する軌跡に応じる文字をメモリ１６０から読み出してディスプレイ１７０に表示する。このような文字入力機能は、例えば、ＳＭＳ(Short Message Service)メッセージ伝送及びメモパッドなどに主に用いられる。
【００２０】
カメラ部１９０は、撮影可能な領域でユーザーの動き、すなわち、モーションを撮影して制御部１５０、モーション認識部１８０及び文字認識部２００に提供する。モーション認識部１８０は、ユーザーのモーションパターンを認識し、パターン化して制御部１５０に提供する。また、文字認識部２００は、軌跡の動きに対応する軌跡を生成して制御部１５０に提供する。メモリ１６０は、移動通信端末機１５０の動作制御に必要な多数のプログラムと情報とを記憶するためのＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)及び音声メモリなどからなる。さらに、メモリ１６０は、本発明に応じて少なくとも一つのモーションパターンに対応する制御命令を記憶し、所定の軌跡に対応する文字を記憶する。
【００２１】
また、ＲＦモジュール１１０は、アンテナを通じて基地局とＲＦ信号を送信/受信するが、受信されるＲＦ信号をＩＦ(Intermediate Frequency)信号に変換してベースバンド処理部１２０に出力し、ベースバンド処理部１２０から入力されるＩＦ信号をＲＦ信号に変換して送信する。ベースバンド処理部１２０は、制御部１５０とＲＦモジュール１１０との間のインターフェースを提供するＢＡＡ(Base band Analog ASIC(Application Specific Integrated Circuit))である。このベースバンド処理部１２０は、制御部１５０から印加されるベースバンドのデジタル信号をアナログＩＦ信号に変換してＲＦモジュール１１０に印加し、ＲＦモジュール１１０から印加されるアナログＩＦ信号をベースバンドのデジタル信号に変換して制御部１５０に印加する。音声処理部１４０は、制御部１５０の制御下で受信された音声データをスピーカーを通じて可聴音に変換して出力し、マイクを通じてユーザーからの音声を電気信号に変換して制御部１５０に提供する。ユーザーインターフェース１３０は、多数の数字キー及び機能キーを備えており、ユーザーが押下するキーに対応するキー入力データを制御部１５０に出力する。一般に、ディスプレイ１７０はＬＣＤ(Liquid Crystal Display)であり、制御部１７０の制御下で多様なメッセージ及びアイコンなどを表示する。
【００２２】
図２乃至図４は、本発明の実施形態に応じて、カメラ部を用いてユーザーインターフェースを実現するための制御過程を示したフローチャートであり、図２は、マウスモード時にカメラ部を用いてユーザーインターフェースを実現した場合を示す。
【００２３】
図２を参照すれば、移動通信端末機の制御部１５０は、マウスモードに進入すると、ステップ３１０でディスプレイ１７０の画面にカーソルを表示し、カメラ部１９０をアクティブにする。このとき、カーソルが表示されるか、あるいは表示されないことがある。その後、制御部１５０は、ステップ３２０で、ユーザーモーションが入力されるかどうかを判断する。ユーザーモーションが入力されると、制御部１５０はステップ３３０に進んでモーション認識部１８０を通じてユーザーモーションをパターン化するように制御する。モーション認識部１８０がユーザーモーションをパターン化して制御部１５０に提供すると、制御部１５０は、ステップ３４０で、モーションパターンに対応するマウス制御命令をメモリ１６０から読み出す。その後、制御部１５０は、ステップ３５０で読み出されたマウス制御命令に応じてマウス制御命令を遂行する。例えば、ユーザーは、手を用いて実際にマウスをつかむことのようにクリックすると、制御部１５０は、ディスプレイ１７０の画面に表示されたカーソルに対応するメニュー項目やインターネットアイコンをクリックした場合の制御動作を行う。ユーザーが実際にマウスホイールを動かすモーションを取ると、制御部１５０は、ディスプレイ１７０の画面に表示されたカーソルを該当するモーションに応じて移動させる。
【００２４】
図３は、ゲームモード時にカメラ部を用いてユーザーインターフェースを実現した場合を示す。
【００２５】
図３を参照すると、移動通信端末機の制御部１５０は、ゲームモードに進入すると、ステップ４１０でカメラ部１９０をアクティブにする。その後、制御部１５０は、ステップ４２０でユーザーモーションが入力されるかどうかを判断する。ユーザーモーションが入力されると、制御部１５０は、ステップ４３０に進んでモーション認識部１８０を通じてユーザーモーションをパターン化するように制御する。モーション認識部１８０がユーザーモーションをパターン化して制御部１５０に提供すると、制御部１５０は、ステップ４４０でモーションパターンに対応するゲーム制御命令をメモリ１６０から読み出す。その後、制御部１５０は、ステップ４５０で読み出されたゲーム制御命令に応じてゲーム制御命令を行う。例えば、ユーザーが実際にゲームをすることのように、手を用いて物をつかみ、投げるか移動させるなどのモーションを取ると、制御部１５０は、該当モーションに対応するゲーム制御命令をメモリ１６０から読み出し、そのゲーム制御命令を遂行する。
【００２６】
図４は、文字入力モード時にカメラ部を用いてユーザーインターフェースを実現した場合を示す。
【００２７】
図４を参照すると、移動通信端末機の制御部１５０は、文字入力モードに進入すると、ステップ５１０でカメラ部１９０をアクティブにする。その後、制御部１５０は、ステップ５２０でユーザーモーションが入力されるかどうかを判断する。ここで、ユーザーモーションが入力されると、制御部１５０はステップ５３０に進んで文字認識部２００がユーザーモーションに対応する軌跡を生成するように制御する。文字認識部２００がユーザーモーションに対応する軌跡を生成して制御部１５０に提供すると、制御部１５０は、ステップ５４０で軌跡に対応する文字をメモリ１６０から読み出し、ステップ５５０で読み出された文字を表示する。このような文字入力機能は、ＳＭＳメッセージの作成やスケジューラの作成に有用に用いられる。
【００２８】
以上、本発明の詳細について具体的な実施の形態に基づいて説明してきたが、本発明の範囲を逸脱しない限り、各種の変形が可能なのは明らかである。従って、本発明の範囲は、上記実施の形態に限定されるものではなく、特許請求の範囲の記載及び該記載と同等なものにより定められるべきである。
【図面の簡単な説明】
【００２９】
【図１】本発明の実施形態に応じる移動通信端末機のブロック構成図である。
【図２】本発明の第１の実施形態に応じるカメラ部を用いたユーザーインターフェース実現方法を示した図である。
【図３】本発明の第２の実施形態に応じるカメラ部を用いたユーザーインターフェース実現方法を示した図である。
【図４】本発明の第３の実施形態に応じるカメラ部を用いたユーザーインターフェース実現方法を示した図である。
【符号の説明】
【００３０】
１１０  ＲＦモジュール
１２０  ベースバンド処理部
１３０  ユーザーインターフェース
１４０  音声処理部
１５０  制御部
【図１】
2007012055.tif 000003
【図２】
2007012055.tif 000004
【図３】
2007012055.tif 000005
【図４】
2007012055.tif 000006