(57)【特許請求の範囲】
【請求項１】
タッチスクリーン基盤のデバイスにおけるオブジェクト管理方法において、
第１マルチタッチ入力に対応する任意のオブジェクトをピックアップする過程と、
前記ピックアップされたオブジェクトを保存する過程と、
第２マルチタッチ入力受信に対応して前記保存されたオブジェクトを呼び出し、前記第２マルチタッチのドラッグに対応して前記オブジェクトをタッチスクリーン上において徐々に表示する過程を含み、
前記オブジェクトをピックアップする過程は前記第１マルチタッチのドラッグに対応して前記ピックアップされたオブジェクトが前記タッチスクリーン上で徐々に消えるビジュアル効果を提供し、
前記ピックアップされて保存されたオブジェクトの状態を表すデータベース（ＤＢ）形態のオブジェクトを画面に表示することを特徴とするタッチスクリーンを利用したオブジェクト管理方法。
【請求項２】
前記ピックアップする過程は、
待機画面上に発生するタッチ信号を感知する過程と、
前記タッチ信号がオブジェクトピックアップのために設定された方式で入力される前記第１マルチタッチ信号である時、前記オブジェクトをピックアップする過程と、
前記ピックアップするオブジェクトが前記待機画面上で消えるビジュアルエフェクトを提供する過程と、
前記ピックアップするオブジェクトを保存する過程と、
前記第１マルチタッチの入力取消時、前記保存する前記オブジェクトを復元する過程と、を含むことを特徴とする請求項１に記載のタッチスクリーンを利用したオブジェクト管理方法。
【請求項３】
前記表示する過程は、
前記待機画面上に発生するタッチ信号を感知する過程と、
前記タッチ信号がオブジェクトリリースのために設定された方式で入力される前記第２マルチタッチ信号である時、前記ピックアップに応答して保存された前記オブジェクトを呼び出す過程と、
前記呼び出したオブジェクトを前記待機画面で前記第２マルチタッチが発生する特定領域にリリースする過程と、
前記リリース時、前記オブジェクトを移動、削除、コピー及び編集のうちいずれか１つの動作を処理する過程と、を含むことを特徴とする請求項２に記載のタッチスクリーンを利用したオブジェクト管理方法。
【請求項４】
前記第１マルチタッチが複数のオブジェクトの各々に対して連続して発生する時、前記複数の各オブジェクトがピックアップされる手順に対応して順次に保存する過程と、
前記第２マルチタッチが繰り返して発生する時、前記複数のオブジェクトが保存された手順の逆順によってオブジェクトを順次に呼び出してリリースする過程と、を含むことを特徴とする請求項２に記載のタッチスクリーンを利用したオブジェクト管理方法。
【請求項５】
マルチタッチ入力を感知する時、前記マルチタッチによるポイント間の距離値を算出する過程と、
前記距離値が設定された臨界値より大きいかまたは同一であれば、前記マルチタッチを前記第１マルチタッチとして認知する過程と、
前記距離値が設定された臨界値より小さければ、前記マルチタッチを前記第２マルチタッチとして認知する過程と、を含むことを特徴とする請求項２に記載のタッチスクリーンを利用したオブジェクト管理方法。
【請求項６】
前記第１マルチタッチ後、ピックアップジェスチャーによる２個のポイント間の間隔調節を通じてオブジェクトの量を決定して選択する過程を含むことを特徴とする請求項５に記載のタッチスクリーンを利用したオブジェクト管理方法。
【請求項７】
前記デバイスと外部デバイス間の連結が設定された状態で、
前記デバイスで発生する第１マルチタッチによって任意のオブジェクトを保存する過程と、
前記外部デバイスで発生する第２マルチタッチによって前記デバイスで第１マルチタッチによってピックアップされた前記オブジェクトを前記外部デバイスにリリースする過程と、
前記デバイスが前記外部デバイスから前記オブジェクトの伝送に対する結果メッセージを受信する時、前記保存するオブジェクトを設定方式によって除去するかまたは復元する過程と、を含むことを特徴とする請求項１に記載のタッチスクリーンを利用したオブジェクト管理方法。
【請求項８】
タッチスクリーン基盤のデバイスにおいて、
少なくとも１つのオブジェクトで構成された待機画面を表示し、マルチタッチを入力される表示部と、
マルチタッチと関連した設定情報を保存し、第１マルチタッチによってピックアップされるオブジェクトまたは前記オブジェクトに対するマクロ情報を保存し、第２マルチタッチに応答して以前にピックアップされて保存されたオブジェクトを提供する保存部と、
マルチタッチの種類を区分し、前記第１マルチタッチによって待機画面上の特定オブジェクトに対するピックアップを制御し、前記第２マルチタッチを感知する時、前記第１マルチタッチによってピックアップされて保存されたオブジェクトを呼び出し、前記第２マルチタッチのドラッグに対応して前記オブジェクトを表示部上に徐々に表示するように制御する制御部を含み、前記オブジェクトをピックアップする時、前記第１マルチタッチのドラッグに対応して前記ピックアップされたオブジェクトが前記表示部上で徐々に消えるビジュアル効果を提供し、
前記保存部に保存されたオブジェクトの状態を表すデータベース（ＤＢ）形態のオブジェクトを画面に表示することを特徴とするタッチスクリーンを利用したオブジェクト管理装置。
【請求項９】
前記制御部は、
前記第１マルチタッチによってピックアップする前記特定オブジェクトを前記保存部に保存し、前記表示部の待機画面上に存在する前記特定オブジェクトに消えるビジュアルエフェクト付与を制御し、前記第１マルチタッチの入力取消を感知する時、前記保存するオブジェクトの復元を制御し、
前記第２マルチタッチを感知する時、前記第１マルチタッチによって以前にピックアップされて保存された前記オブジェクトを呼び出し、前記呼び出すオブジェクトの移動、削除、コピー及び編集のうちいずれか１つのリリース動作を制御することを特徴とする請求項８に記載のタッチスクリーンを利用したオブジェクト管理装置。
【請求項１０】
前記制御部は、
前記第１マルチタッチが複数のオブジェクトの各々に対して連続して発生する時、前記複数の各オブジェクトがピックアップされる手順に対応して順次に保存し、
前記第２マルチタッチが繰り返して発生する時、前記複数のオブジェクトが保存された逆順によってオブジェクトを順次に呼び出してリリースすることを特徴とする請求項９に記載のタッチスクリーンを利用したオブジェクト管理装置。
【請求項１１】
前記制御部は、
マルチタッチ入力を感知する時、前記マルチタッチによるポイント間の距離値を算出し、前記距離値と設定された臨界値の比較によって前記第１マルチタッチ及び前記第２マルチタッチを区分し、
前記第１マルチタッチ後、ピックアップジェスチャーによる２個のポイント間の間隔調節を通じてオブジェクトの量を決定して選択することを特徴とする請求項９に記載のタッチスクリーンを利用したオブジェクト管理装置。
【請求項１２】
前記制御部は、
他の外部デバイスと連結が設定された状態で入力されるマルチタッチの種類によってピックアップするオブジェクトの移動またはコピーを制御することを特徴とする請求項９に記載のタッチスクリーンを利用したオブジェクト管理装置。
【請求項１３】
前記制御部は、
前記デバイスと前記外部デバイスとの連結が設定された状態で、
前記デバイス上の第１マルチタッチによって任意のオブジェクトをピックアップし、前記外部デバイス上の第２マルチタッチによって前記第１マルチタッチによってピックアップされた前記オブジェクトを前記外部デバイスにリリースすることを特徴とする請求項１２に記載のタッチスクリーンを利用したオブジェクト管理装置。
【請求項１４】
前記制御部は、
前記表示部のタッチスクリーンを通じて入力されるユーザのタッチ信号を感知し、シングルフィンガー基盤のシングルタッチとマルチフィンガー基盤のマルチタッチを区分するタッチ信号感知部と、
前記タッチ信号感知部から前記マルチタッチによる情報を受信する時、前記マルチタッチによる２個のポイント間の距離値とあらかじめ設定された臨界値の比較に基づいて前記マルチタッチの種類が第１マルチタッチであるかまたは第２マルチタッチであるかを区分し、前記マルチタッチ後に入力されるドラッグ信号識別によってピックアップジェスチャーまたはリリースジェスチャーを判断するマルチタッチ判断部と、
前記第１マルチタッチ及びピックアップジェスチャーによるマルチドラッグ信号によって待機画面の特定オブジェクトに対するピックアップを処理し、前記第２マルチタッチ及びリリースジェスチャーによるマルチドラッグ信号によって保存されたオブジェクトを呼び出し、リリースを処理するオブジェクト管理部と、を含むことを特徴とする請求項９に記載のタッチスクリーンを利用したオブジェクト管理装置。
【請求項１５】
前記制御部は、
外部デバイスとの有線または無線方式による連結設定を処理し、前記外部デバイスとの連結が設定される時、第１マルチタッチによってピックアップされるオブジェクトの伝送及びマルチタッチ種類に対応するメッセージ送受信を処理する同期処理部を含むことを特徴とする請求項１４に記載のタッチスクリーンを利用したオブジェクト管理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、タッチスクリーンを有するデバイスに関し、特にスクリーン上に表示された複数のオブジェクト（ｏｂｊｅｃｔｓ）を操作（ｈａｎｄｌｉｎｇ）することができるタッチスクリーンを有するデバイスのためのオブジェクト管理方法及び装置に関する。
【背景技術】
【０００２】
最近、タッチスクリーンは、携帯電話／ノートパソコン市場でタッチパネル搭載率が徐々に増加していて、大部分のスマートフォンにおいてタッチスクリーンパネルの採用が一般化されると見込まれ、携帯機器用タッチスクリーンが急成長する見込みである。また、家電部門でもタッチスクリーンパネルの採用が一般化していて、携帯機器に次いで、今後タッチスクリーンパネル採用分野として高い比重を占めるものと予想される。
【０００３】
最近、人間とタッチスクリーン間の自然な相互作用のために、視覚情報を基盤としたユーザ意図及び行為認識に対する研究が活発に進行している。例えば、指／ペンなどの入力ジェスチャーを認識し、ユーザフレンドリーなユーザインターフェースを具現している。また、現在では、タッチスクリーン上にシングルフィンガー（Ｓｉｎｇｌｅ−Ｆｉｎｇｅｒ）基盤のシングルタッチ（Ｓｉｎｇｌｅ−Ｔｏｕｃｈ）入力による動作を処理するユーザインターフェースにおいて、マルチフィンガー（Ｍｕｌｔｉ−Ｆｉｎｇｅｒ）基盤のマルチタッチ（Ｍｕｌｔｉ−Ｔｏｕｃｈ）入力による動作を処理するユーザインターフェースが具現されている。
【０００４】
一方、タッチスクリーンは、入力センシングをする表面と出力ディスプレイ役目をする表面が重なり合った構造を有する。したがって、前記タッチスクリーンでは、マルチタッチに基づいて入力されるユーザ意図を分析及び認知し、それによる結果を出力することができる。特に、マルチタッチ基盤のユーザインターフェースでは、タッチスクリーンと関連したハードウェア（Ｈ／Ｗ）及びソフトウェア（Ｓ／Ｗ）、そしてセンシング技術の発達に伴い、マルチタッチを支援する協力的な相互作用及び作業にその応用が拡大されている。これより、ユーザは、タッチスクリーン上で手のジェスチャーを直接使用して制御命令をデバイスに伝達し、デバイスは、手のジェスチャーによる入力センシングを通じてユーザ意図を分析及び認知し、それによる動作を処理した後、タッチスクリーンを通じてその結果を出力することができる。
【０００５】
以上のように、タッチスクリーンとは、ユーザが指やペン形状のタッチペン（ｔｏｕｃｈ  ｐｅｎ）を利用してタッチスクリーン上でジェスチャーを発生すれば、デバイスがタッチスクリーン上に接触が起きた部分を分析及び認知し、当該命令を実行するように設計されたディスプレイ装置を言う。
【０００６】
前記タッチスクリーンが作動する原理は、スクリーン表面に加えられる圧力に反応する減圧式、喪失した電荷を感知し、タッチがなされる箇所を把握する静電式、赤外線が遮断されることを感知し、タッチ位置を把握する赤外線式など多様である。
【０００７】
一方、タッチスクリーンを備えたデバイスでは、タッチスクリーン上で発生するユーザの入力ジェスチャーをボタンの代わりに使用するので、ユーザインターフェースの便宜性が多く改善されているが、直観的な面においてまだ改善すべき部分が多く存在するのが実情である。このような背景から、タッチスクリーンを備えたデバイスにおいて、一層便利なユーザインターフェース及び付加機能を提供するための研究が活発に進行中にある。
【発明の概要】
【発明が解決しようとする課題】
【０００８】
本発明の目的は、タッチスクリーン上にマルチタッチ入力による直観的な出力を提供することができるタッチスクリーンを利用したオブジェクト管理方法及び装置を提供することにある。
【０００９】
本発明の他の目的は、タッチスクリーンでマルチタッチ入力に対応してスクリーン上にオブジェクトを直観的にハンドリングすることができるタッチスクリーンを利用したオブジェクト管理方法及び装置を提供することにある。
【００１０】
本発明のさらに他の目的は、ユーザのマルチタッチ入力によりタッチスクリーン上に表示中のオブジェクトに対するピックアップまたはリリース（ｒｅｌｅａｓｅ）具現が可能なユーザインターフェースを提供することにある。
【００１１】
本発明のさらに他の目的は、マルチタッチによるジェスチャーを利用して画面上に存在するオブジェクトのピックアップ及びリリースが可能なユーザインターフェースを通じて、直観的で且つ便利にオブジェクトを管理することができるタッチスクリーンを利用したオブジェクト管理方法及び装置を提供することにある。
【課題を解決するための手段】
【００１２】
上記目的を達成するために、本発明の一実施形態による方法は、タッチスクリーン基盤のデバイスでオブジェクト管理方法において、第１マルチタッチ入力に対応する任意のオブジェクトをピックアップする過程と、前記ピックアップされたオブジェクトを保存する過程と、第２マルチタッチ入力に対応して前記保存されたオブジェクトを呼び出し、前記第２マルチタッチのドラッグに対応して前記オブジェクトをタッチスクリーン上において徐々に表示する過程を含み、
前記オブジェクトをピックアップする過程は前記第１マルチタッチのドラッグに対応して前記ピックアップされたオブジェクトが前記タッチスクリーン上で徐々に消えるビジュアル効果を提供する。
【００１３】
また、本発明の他の実施形態による装置は、タッチスクリーン基盤のデバイスにおいて、少なくとも１つのオブジェクトで構成された待機画面を表示し、マルチタッチを入力される表示部と、マルチタッチと関連した設定情報を保存し、第１マルチタッチによってピックアップされるオブジェクトまたは前記オブジェクトに対するマクロ情報を保存し、第２マルチタッチに応答して以前にピックアップされて保存されたオブジェクトを提供する保存部と、マルチタッチの種類を区分し、前記第１マルチタッチによって待機画面上の特定オブジェクトに対するピックアップを制御し、前記第２マルチタッチを感知する時、前記第１マルチタッチによってピックアップされて保存されたオブジェクトを呼び出し、前記第２マルチタッチのドラッグに対応して前記オブジェクトを表示部上に徐々に表示するように制御する制御部を含み、前記オブジェクトをピックアップする時、前記第１マルチタッチのドラッグに対応して前記ピックアップされたオブジェクトが前記表示部上で徐々に消えるビジュアル効果を提供する。
【発明の効果】
【００１４】
前述したように、本発明で提案するマルチタッチを利用したオブジェクト管理方法及び装置によれば、タッチスクリーンデバイス上でマルチフィンガー基盤の多様なタッチ入力により効率的で且つ直観的にオブジェクト管理が可能である。画面上に存在するオブジェクトを、指による直観的なマルチタッチを利用してピックアップすることや、リリースする実生活のジェスチャーを具現することができる。これにより、タッチスクリーン基盤のデバイスを利用するユーザの便宜性と楽しさを加えた使用性を増大させることができる効果がある。
【００１５】
本発明によれば、直観的で且つ便利なマルチタッチの使用性を具現し、ユーザがデバイスを運用するにあたって、革新的な環境を提供することができる。また、本発明によれば、テレビ、モバイル製品、パソコン、プリンタ、オーディオ機器、白色家電などすべてのデバイスに適用して差別化を図ることができる。
【図面の簡単な説明】
【００１６】
【図１】本発明の実施形態によるマルチタッチを利用したオブジェクト制御動作を示す図である。
【図２】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図である。
【図３】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図である。
【図４】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図である。
【図５】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図である。
【図６】図２〜図５のピックアップ手続によってオブジェクトを保存する過程の例を示す図である。
【図７】本発明の実施形態によるマルチタッチ入力時に提供される付加機能の画面例を示す図である。
【図８】本発明の実施形態によるマルチタッチ入力時に提供される付加機能の画面例を示す図である。
【図９】本発明の実施形態によるマルチタッチ入力時に提供される付加機能の画面例を示す図である。
【図１０】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。
【図１１】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。
【図１２】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。
【図１３】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをごみ箱機能のアイテムにリリースする過程の画面例を示す図である。
【図１４】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをごみ箱機能のアイテムにリリースする過程の画面例を示す図である。
【図１５】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをごみ箱機能のアイテムにリリースする過程の画面例を示す図である。
【図１６】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをごみ箱機能のアイテムにリリースする過程の画面例を示す図である。
【図１７】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図１８】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図１９】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図２０】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図２１】本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図２２】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。
【図２３】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。
【図２４】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。
【図２５】本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。
【図２６】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図２７】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図２８】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図２９】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図３０】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図３１】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図３２】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図３３】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図３４】本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【図３５】本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。
【図３６】本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。
【図３７】本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。
【図３８】本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。
【図３９】本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。
【図４０】本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。
【図４１】本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。
【図４２】本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。
【図４３】本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。
【図４４】本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。
【図４５】本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。
【図４６】本発明の実施形態によるマルチタッチを利用したオブジェクトの詳細制御動作を示す図である。
【図４７】本発明の実施形態によるマルチタッチを利用したオブジェクトの詳細制御動作を示す図である。
【図４８】本発明の実施形態によるマルチタッチを判別する方法を示す図である。
【図４９】本発明の実施形態よって前記マルチタッチを判別する動作例を示す図である。
【図５０】本発明の実施形態よって前記マルチタッチを判別する動作例を示す図である。
【図５１】本発明に実施形態による第１マルチタッチ及び第２マルチタッチを入力する動作の例を示す図である。
【図５２】本発明に実施形態による第１マルチタッチ及び第２マルチタッチを入力する動作の例を示す図である。
【図５３】本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する方法を示す図である。
【図５４】本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する方法を示す図である。
【図５５】本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する他の方法を示す図である。
【図５６】本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する他の方法を示す図である。
【図５７】本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する他の方法を示す図である。
【図５８】本発明の実施形態による第１マルチタッチ時にオブジェクトを認識する方法を示す図である。
【図５９】本発明の実施形態による第１マルチタッチ時にオブジェクトを認識する方法を示す図である。
【図６０】本発明の実施形態による第１マルチタッチ時にオブジェクトを認識する方法を示す図である。
【図６１】本発明の実施形態による第１マルチタッチ入力後にこれを解除する動作例を示す図である。
【図６２】本発明の実施形態による第１マルチタッチ入力後にこれを解除する動作例を示す図である。
【図６３】本発明の実施形態による第１マルチタッチをゲームに応用する場合の例を示す図である。
【図６４】本発明の実施形態による第１マルチタッチをゲームに応用する場合の例を示す図である。
【図６５】本発明の実施形態による第１マルチタッチをゲームに応用する場合の例を示す図である。
【図６６】本発明の実施形態によるマルチタッチを利用してデバイス間にオブジェクトを移動する動作例を示す図である。
【図６７】図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。
【図６８】図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。
【図６９】図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。
【図７０】図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。
【図７１】図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。
【図７２】本発明の実施形態によるデバイスのブロック構成を概略的に示す図である。
【発明を実施するための形態】
【００１７】
以下、添付の図面を参照して本発明の好ましい実施形態を詳しく説明する。なお、図面において同一の構成要素は、できるだけ同一の符号で示している。また、本発明の要旨を不明瞭にすることができる公知機能及び構成に対する詳細な説明は省略する。
【００１８】
本発明は、タッチスクリーンでマルチタッチ入力方法と、前記マルチタッチ入力によりスクリーン上のオブジェクトに対する移動、除去、コピー及び編集などの処理を直観的で且つ便利に提供することができる方法及びデバイスに関する。すなわち、本発明のマルチフィンガー（Ｍｕｌｔｉ−Ｆｉｎｇｅｒ）基盤のマルチタッチを利用してオブジェクトを直観的で且つ便利に管理することができるようにする方法及び装置に関する。
【００１９】
本発明の実施形態においては、基本的に２ポイント（ｐｏｉｎｔ）以上のタッチ入力をセンシングして動作することを基盤とする。本発明の実施形態においては、マルチフィンガーを入力によりピックアップ（Ｐｉｃｋｕｐ）及びリリース（Ｒｅｌｅａｓｅ）するジェスチャー（ｇｅｓｔｕｒｅ）を基盤にして様々な応用アルゴリズムが展開できる。特に、本発明の実施形態によれば、前記ピックアップジェスチャー（第１マルチタッチ入力）によってユーザがスクリーン上のオブジェクトを実際フィンガーでピックアップする効果を提供し、前記リリースジェスチャー（第２マルチタッチ入力）によってユーザが前記ピックアップジェスチャーによりピックアップしたオブジェクトを実際フィンガーでリリースする効果を提供する。
【００２０】
したがって、本発明のデバイスは、前記ユーザのピックアップジェスチャー（第１マルチタッチ入力）を認識し、スクリーン上にあるオブジェクトを仮想にピックアップする動作をする。また、前記デバイスは、前記ユーザのリリースジェスチャー（第２マルチタッチ入力）を認識し、前記ピックアップしたオブジェクトをスクリーン上に仮想にリリースする動作をする。このように、前記ピックアップジェスチャー及びリリースジェスチャーによって、ユーザは、デバイスのオブジェクトに対する移動、除去、コピーまたは編集などをより直観的で且つ便利に利用することができる。
【００２１】
本発明の実施形態において“シングルタッチ”は、タッチスクリーン上にシングルフィンガー基盤の１つのポイントがタッチされることを示すことができる。また、本発明の実施形態において“マルチタッチ”は、タッチスクリーン上にマルチフィンガー基盤の少なくとも２個のポイントがタッチされることを示すことができる。前記マルチタッチは、同時に発生するか、または１つのポイントに対するタッチが発生した後、他のポイントに対するタッチが発生するまで所要される時間があらかじめ設定された時間内に存在すれば、これをマルチタッチとして判断することができる。
【００２２】
このような本発明の動作は、大きく、スクリーン上の任意のオブジェクトを、第１マルチタッチ入力を通じてピックアップした後、第２マルチタッチ入力を通じてピックアップされたオブジェクトを対象に設定された方式の第２動作を行う。ここで、前記第２動作は、前記第２マルチタッチ入力により行われるピックアップされたオブジェクトの移動、削除、コピー及び編集などのような結果を示す。
【００２３】
以下、図面を参照して本発明の実施形態によるマルチタッチ入力方法及び前記マルチタッチを利用したオブジェクト管理方法について記述する。
【００２４】
図１は、本発明の実施形態によるタッチスクリーン上のマルチタッチ入力によるオブジェクト制御動作を示す図である。
【００２５】
図１を参照すれば、まず、デバイスは、待機画面表示中に（１０１段階）、ユーザの第１マルチタッチ入力を感知すれば（１０３段階）、前記第１マルチタッチ入力が感知される位置のオブジェクトをピックアップする（１０５段階）。ここで、前記待機画面は、特定オブジェクトを表示中の画面であることができ、またはいずれのオブジェクトをも含まない一般的な背景画面を表示する画面であることができる。前記オブジェクトは、デバイスの特定機能を行うためのアプリケーションのアイコン、メニューリスト、メニューリストの特定項目、メニューアイコン、イメージ、テキスト、背景画面など、タッチスクリーン上に表示されるすべての形態のデータ要素を含むことができる。
【００２６】
また、前記第１マルチタッチは、本発明の実施形態においてオブジェクトのピックアップ処理のためにあらかじめ設定された方式によって入力されるマルチフィンガー基盤の入力イベントを示す。前記第１マルチタッチ及びそれによる入力方法については後述する。この時、前記デバイスは、前記第１マルチタッチが前記待機画面上の特定オブジェクトに発生する時、前記特定オブジェクトに対するピックアップ処理を行うことができる。もし、前記待機画面上にいずれのオブジェクトをも存在しない時、前記デバイスは、前記第１マルチタッチに対応して前記待機画面の背景画面に対するピックアップ処理を行うことができる。すなわち、背景画面を１つのオブジェクトとして認識して前記ピックアップ処理を行うことができる。このような動作例については後述する。
【００２７】
次に、前記デバイスは、前記第１マルチタッチ入力に対応して特定オブジェクトをピックアップする時、前記オブジェクトを前記待機画面上で除去する（１０７段階）。この時、前記オブジェクトを待機画面上で除去する時、後述するように、前記オブジェクト（または前記オブジェクトを呼び出すことができるマクロ情報）は、保存部の特定領域に保存される。
【００２８】
前記保存は、スタック形態に保存され、前記保存するオブジェクトを呼び出すイベント発生時まで保存することができる。前記呼び出すイベントは、本発明の実施形態において前記保存されたオブジェクトの呼び出しのための第２マルチタッチ入力、または設定方式によって前記第１マルチタッチ入力による動作を取り消すなどの入力イベントを含むことができる。
【００２９】
次に、前記デバイスは、上記のように、オブジェクトが除去された待機画面表示中に第２マルチタッチ入力を感知することができる（１０９段階）。前記第２マルチタッチは、本発明の実施形態において第１マルチタッチによってピックアップされたオブジェクトのリリース（ｒｅｌｅａｓｅ）処理のためにあらかじめ設定された方式によって入力されるマルチフィンガー基盤の入力イベントを示す。すなわち、前記第２マルチタッチは、前記第１マルチタッチによってピックアップされた後、保存部に保存されたオブジェクトを呼び出し、前記第２マルチタッチが発生する位置にリリース処理のために入力される入力イベントを示す。前記第２マルチタッチによって呼び出すオブジェクトは、設定方式によって、最後にピックアップされた１つのオブジェクトまたは以前にピックアップされて保存されたすべてのオブジェクトを呼び出すことができる。前記第２マルチタッチ及びそれによる入力方法については後述する。
【００３０】
次に、前記デバイスは、前記第２マルチタッチ入力を感知すれば（１０９段階）、前記第２マルチタッチ入力が感知される位置に前記第１マルチタッチ入力によりピックアップされたオブジェクトをリリースする（１１１段階）。次に、前記デバイスは、前記待機画面上に前記オブジェクトを含んで表示する（１１３段階）。この時、前記第２マルチタッチがごみ箱機能を提供するアイコンに発生する時、前記オブジェクトは、待機画面上の表示ではない、前記デバイスで削除することができる。このような詳細動作については後述する。
【００３１】
前述した図１では、本発明のマルチタッチ入力によるオブジェクタのピックアップ／リリースを処理する概略的な動作を説明した。次に、以下では、前述したような本発明のマルチタッチ入力によるオブジェクトをピックアップまたはリリースする詳細動作の実施形態について記述する。
【００３２】
図２〜図５は、本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図であり、図６は、図２〜図５のオブジェクトピックアップ手続を通じてピックアップされるオブジェクトの保存過程の例を示す図である。
【００３３】
図２〜図５を参照すれば、まず、図２に示したように、デバイスは、ユーザ要請による待機画面１００を表示することができる。この時、前記待機画面１００は、複数のオブジェクト２００が配置されて表示されることができる。前記オブジェクト２００は、デバイスで提供する機能実行のためのアイコン、特定ミニアプリケーションのようなウィジェットまたはウィジェットアイコン、特定イメージ、写真ファイルリストのサムネイルイメージなどを含むことができる。
【００３４】
次に、図３及び図４に示したように、ユーザは、前記待機画面１００でユーザが希望する特定オブジェクト２５０に対してマルチタッチ入力を発生することができる。例えば、本発明の実施形態においてマニラファイルフォルダ（ｍａｎｉｌａ  ｆｉｌｅ  ｆｏｌｄｅｒ）のように見えるアイコンをピックアップすることができる。前記マルチタッチ入力は、前述したように、ユーザのピックアップジェスチャーに対応する前記第１マルチタッチ入力であることができる。すなわち、ユーザは、前記第１マルチタッチ入力を通じて前記複数のオブジェクト２００のうちユーザ自分が希望する特定オブジェクト２５０に対する第１マルチタッチ入力を発生することができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記特定オブジェクト２５０にピックアップ効果を適用する。
【００３５】
前記ピックアップ効果は、図４に示したように、前記第１マルチタッチ入力によりユーザが待機画面１００上の前記特定オブジェクト２５０を実際フィンガーでピックアップするようなビジュアル効果を示す。例えば、前記ピックアップ効果は、前記第１マルチタッチ入力によるピックアップジェスチャーに対応して前記特定オブジェクト２５０の形状が順次に消えるビジュアル効果でありうる。
【００３６】
これを詳しく説明すれば、まず、第１マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、図３に示したように、前記第１マルチタッチによる初期２個のポイントから前記オブジェクト２５０の中心にドラッグ入力が発生すれば、前記デバイスは、前記オブジェクト２５０を選択する。すなわち、前記オブジェクトをピック（ｐｉｃｋ）状態で処理する。
【００３７】
前記ドラッグ入力は、前記オブジェクト２５０選択のために設定されたジェスチャーであって、設定された臨界距離以上の２つのポイントにマルチタッチ後、前記２つのポイントの内側方向にドラッグが発生すれば、前記デバイスは、前記ドラッグをオブジェクト２５０選択のための信号として認知することができる。この時、前記オブジェクト２５０が選択されれば、前記デバイスは、前記オブジェクト２５０が選択されることを別に表示することができる。例えば、選択されるオブジェクト２５０に設定されたエフェクトを適用してハイライト表示するか、または別途の他の形態に変更して提供することができる。
【００３８】
次に、前記オブジェクト２５０が選択された状態で、図４に示したように、ユーザが待機画面１００上のマルチフィンガータッチ状態を終了すれば、すなわち、マルチフィンガーをタッチスクリーン上で取り外すアップ（Ｕｐ）ジェスチャーをすれば、デバイスは、前記オブジェクト２５０をアップ（Ｕｐ）状態で処理する。言い換えれば、前記Ｕｐジェスチャーは、前記オブジェクト２５０の選択が完了し、前記待機画面１００上で除去のための設定されたジェスチャーであることができる。
【００３９】
したがって、前記デバイスは、タッチされたマルチフィンガーのＵｐジェスチャーによる命令を認知し、それに応答して前記オブジェクト２５０をＵｐ状態によるエフェクトを処理する。例えば、前記オブジェクト２５０がユーザのＵｐジェスチャーに対応してピックアップされる形態のビジュアル効果を提供することができる。この時、前記待機画面１００上の前記オブジェクト２５０は、漸次に消える形態のビジュアル効果などを提供することができる。
【００４０】
一方、上記のように、本発明の第１マルチタッチ入力は、オブジェクトをピックする動作と前記ピックされるオブジェクトをアップ（Ｕｐ）する動作とに区分されることができる。
【００４１】
次に、図２〜図４で説明したように、前記第１マルチタッチ入力に対応して前記オブジェクト２５０に対するピックアップ過程を完了する時、デバイスは、図５に示したように、前記オブジェクト２５０を前記待機画面１００上で除去して表示する。また、前記デバイスは、前記オブジェクト２５０または前記オブジェクト２５０を呼び出すことができる前記オブジェクト２５０に対するマクロ情報を保存部に保存することができる。この時、前記オブジェクト２５０が保存される形態を記述すれば、図６のように示すことができる。
【００４２】
図６を参照すれば、前述したように、前記第１マルチタッチ入力により前記待機画面１００で消える前記オブジェクト２５０は、保存部の特定領域に保存される。この時、前記オブジェクト２５０は、前記保存部にスタック方式で保存される。例えば、ユーザが複数のオブジェクトを連続してピックアップする場合、前記保存部は、オブジェクトのピックアップされる手順に対応して順次に保存することができる。しかし、本発明が前記保存方式に限定されるものではない。
【００４３】
図６は、３個のオブジェクトがピックアップされた場合の例を示す図であり、オブジェクト２、オブジェクト４及びオブジェクト１の順に保存された場合を示している。すなわち、ユーザがオブジェクト２、オブジェクト４及びオブジェクト１に対して続いてピックアップジェスチャーを行った場合の保存部のオブジェクト保存状態例を示すものである。このような場合、本発明の実施形態によってリリースを命令する第２マルチタッチが発生する時、前記保存部のオブジェクト２、オブジェクト４及びオブジェクト１が一度に出力されることもでき、またはスタック方式に対応して最後にピックアップされ、最後に保存されたオブジェクト１から第２マルチタッチに対応して出力されることができる。また、連続される第２マルチタッチ入力に対応してオブジェクト１、オブジェクト４及びオブジェクト２が順次に出力されることもできる。
【００４４】
図７〜図９は、本発明の実施形態によるマルチタッチ入力時に提供される付加機能の画面例を示す図である。
【００４５】
図７〜図９に示したように、図７は、前述の第１マルチタッチ入力により特定オブジェクト２５０がピックアップされる時、ユーザのピックアップジェスチャーによるオブジェクトがピックアップされることを通知するアイテム３００を提供する場合の画面例を示すものである。図８は、前述の第１マルチタッチ入力によりピックアップされる特定オブジェクト２５０をデバイスで除去することができるごみ箱機能のアイテム４００を提供する場合の画面例を示すものである。図９は、ピックアップ状態を通知する前記アイテム３００とごみ箱機能の前記アイテム４００を同時に提供する場合の画面例を示すものである。
【００４６】
前記各アイテム３００、４００は、前述の特定オブジェクトの１つになることができる。すなわち、前記アイテム３００は、第１マルチタッチ入力によりピックアップされて保存部に保存されたオブジェクトの状態を表示するデータベースＤＢ形態のオブジェクトであることができ、前記アイテム４００は、第１マルチタッチ入力によりピックアップされて保存されたオブジェクトをデバイスで除去するためのごみ箱形態のオブジェクトであることができる。本発明の実施形態においては、前記各アイテム３００、４００をマルチタッチ入力に対応して自動で提供するか、またはユーザの呼び出しによって前記各アイテム３００、４００を提供することができる。
【００４７】
図７を参照すれば、前述したように、第１マルチタッチ入力に対応して保存部に少なくとも１つのオブジェクトが積層される時、デバイスは、それによる結果を前記アイテム３００を通じて待機画面１００に表示することができる。前記アイテム３００は、ユーザの第１マルチタッチによってピックアップされたオブジェクトがあることを通知するためのもので、データベース形態で各スタックが順次に積もる形態のビジュアル効果で提供することができる。すなわち、デバイスは、ユーザの第１マルチタッチ入力に対応して当該オブジェクトに対するピックアップ処理時、待機画面１００の特定領域に保存部にスタックされる状態の少なくとも１つのオブジェクトを、前記アイテム３００を通じてビジュアルに表示することができる。
【００４８】
このようなアイテム３００は、ユーザの選択によって提供するか、または設定方式によって第１マルチタッチ入力発生時に自動で提供されることができる。また、ユーザの選択によって提供される時、前記アイテム３００は、ユーザの特定メニュー選択を通じて呼び出されるか、または設定されたキーまたはタッチ入力により提供されることができる。
【００４９】
図８を参照すれば、本発明が前述したようにごみ箱機能を提供する時、第１マルチタッチによってピックアップするオブジェクトをごみ箱機能が付与された前記アイテム４００を通じて削除することができる。前記アイテム４００は、ユーザの第１マルチタッチによってピックアップされたオブジェクトをデバイスで削除することができる機能を提供するためのもので、ごみ箱形態をビジュアルに提供することができる。したがって、デバイスは、ユーザの第１マルチタッチ入力に対応して当該オブジェクトが保存された後、ごみ箱機能の前記アイテム４００を呼び出して前記オブジェクトを前記アイテム４００を通じて削除することができる。前記アイテム４００を利用した動作に関する詳細説明は、後述する。
【００５０】
このようなアイテム４００は、ユーザの選択によって提供されるか、設定方式によって第１マルチタッチ入力発生時に自動で提供されることができる。また、ユーザの選択によって提供される時、前記アイテム４００は、ユーザの特定メニュー選択を通じて呼び出されるか、設定されたキーまたはタッチ入力により提供されることができる。
【００５１】
図９を参照すれば、図７及び図８のように提供される各アイテム３００、４００は、一緒に表示されることもできる。これは、前述したように、ユーザ選択または設定方式によって自動で提供されることができる。
【００５２】
一方、以上では、図２〜図５、図６、図７〜図９を参照してユーザの第１マルチタッチ入力により特定オブジェクト２５０をピックアップし、ピックアップされたオブジェクトが保存部にスタックされた動作について説明した。次に、以下では、第１マルチタッチによってスタックされる特定オブジェクト２５０を第２マルチタッチ入力により呼び出してリリースする動作について図１０〜図１２及び図１３〜図１６を参照して記述する。
【００５３】
図１０〜図１２は、本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。
【００５４】
図１０〜図１２は、図２〜図５に対応する動作でピックアップされて保存された特定オブジェクト２５０を待機画面１００の特定領域にリリースする動作の画面例を示すものである。
【００５５】
まず、図１０は、図２〜図５のような手続によって特定オブジェクト２５０がピックアップされた状態の画面例を示すものである。この時、前述の図７のように、特定オブジェクトに対するピックアップ状態を通知する当該アイテム３００を待機画面１００の特定領域に示すこともできることは勿論である。
【００５６】
次に、ユーザは、以前にピックアップされたオブジェクト２５０を待機画面２００の特定領域に移動して示すことができる。すなわち、ユーザは、図１１に示したように、待機画面２００の特定領域にマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述の図１で第２マルチタッチ入力に対応し、デバイスは、前記第２マルチタッチ入力に対応して特定オブジェクト２５０を呼び出してリリース効果を適用する。前記リリース効果は、図１１及び図１２に示したように、ユーザのマルチフィンガーによるタッチ入力によるリリースジェスチャーに対応して特定オブジェクト２５０の形状が順次に現われる効果であることができる。
【００５７】
これを詳しく説明すれば、まず、図１１に示したように、マルチタッチ入力、すなわちタッチスクリーン上の特定領域にマルチフィンガー基盤の第２マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、前記第２マルチタッチによる初期２個のポイントから外側にドラッグ入力が発生すれば、前記デバイスは、以前にピックアップされたオブジェクト２５０を保存部から抽出し、当該オブジェクト２５０を第２マルチタッチが発生する位置にリリースする効果をビジュアルに提供することができる。
【００５８】
前記ドラッグ入力は、前記オブジェクト２５０のリリースのための設定されたジェスチャーであって、設定された臨界距離未満の２つのポイントにマルチタッチ後、前記２つのポインタの外側方向にドラッグが発生すれば、前記デバイスは、前記ドラッグをオブジェクト２５０リリースのための信号として認知することができる。この時、前記オブジェクト２５０が抽出されれば、前記デバイスは、前記オブジェクト２５０が抽出されることを別に表示することができる。例えば、抽出するオブジェクト２５０の形状が待機画面１００に徐々に出力されるビジュアル効果を提供することができる。
【００５９】
すなわち、前記待機画面１００の特定領域に前記オブジェクト２５０が割り当てられるビジュアル効果を提供することができる。前記デバイスは、前記特定領域に第２マルチタッチが発生することによって、図２〜図５で以前にピックアップされたオブジェクト２５０を保存部から抽出し、抽出されたオブジェクト２５０が徐々に現われるエフェクトを適用してビジュアルに提供する。
【００６０】
次に、上記のような手続が完了する時、前記待機画面１００に前記第２マルチタッチ入力に対応してリリースされたオブジェクト２５０が追加された待機画面を提供することができる。この時、前述したように、ピックアップされたオブジェクトのスタック状態を示すアイテム３００が存在する時、前記手続によって保存部に保存されたオブジェクトが除去されることによって、前記アイテム３００は、スタックされるオブジェクトが消えた形態をビジュアルに提供することができる。
【００６１】
図１３〜図１６は、本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。
【００６２】
図１３〜図１６は、図２ａ〜図２ｄに対応する動作でピックアップされて保存された特定オブジェクト２５０をごみ箱機能によってデバイスで提供する動作の画面例を示すものである。すなわち、本発明のごみ箱機能によって、図２〜図５を通じてピックアップするオブジェクト２５０をごみ箱機能が付与された当該アイテム４００にリリースする動作例を示すものである。
【００６３】
まず、図１３は、特定オブジェクト２５０がピックアップされた状態の画面例を示すものである。この時、前述の図８のように、特定オブジェクトを除去することができる当該アイテム４００を待機画面１００の特定領域に示すこともできることは勿論である。図１３〜図１６では、ユーザ選択によって前記アイテム４００を呼び出す動作として説明する。
【００６４】
次に、ユーザは、以前にピックアップされたオブジェクト２５０をデバイスで除去するためにごみ箱機能のアイテム４００に廃棄動作を行うことができる。このために、ユーザは、図１４に示したように、待機画面１００の特定領域にタッチ入力を発生することができる。ここで、前記タッチ入力は、シングルフィンガー基盤のタッチであることができ、特に本発明の実施形態において前記特定領域にロングプレス（ｌｏｎｇ  ｐｒｅｓｓ）によるタッチ入力を代表的な例として説明する。したがって、デバイスは、前記特定領域に前記タッチ入力を感知すれば、ごみ箱機能の前記アイテム４００を呼び出して表示することができる。この時、前記アイテム４００の呼び出しは、前記タッチ入力を通じて呼び出すものと説明するが、設定されたメニュー操作を通じて呼び出すか、または設定された特定キー入力を通じて呼び出すこともできることは勿論である。
【００６５】
次に、ユーザは、図１５に示したように、待機画面１００の前記アイテム４００にマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述の図１で第２マルチタッチ入力に対応し、デバイスは、前記第２マルチタッチ入力に対応して特定オブジェクト２５０を呼び出してリリース効果を適用する。前記リリース効果は、ユーザのマルチフィンガー基盤のタッチ入力によるリリースジェスチャーに対応して以前にピックアップされた特定オブジェクト２５０が前記アイテム４００に徐々に消える効果であることができる。
【００６６】
これを詳しく説明すれば、まず、マルチタッチ入力、すなわち前記ごみ箱機能のアイテム４００にマルチフィンガー基盤の第２マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、図１５及び図１６に示したように、前記第２マルチタッチによる初期２個のポイントから外側にドラッグ入力が発生すれば、前記デバイスは、以前にピックアップされたオブジェクト２５０を保存部から抽出し、当該オブジェクト２５０を第２マルチタッチが発生する位置、すなわち前記アイテム４００にリリースする効果をビジュアルに提供することができる。
【００６７】
この時、前記ごみ箱機能によって前記オブジェクト２５０をデバイスで除去する場合を仮定することによって、前記オブジェクト２５０が前記アイテム４００に割り当てられるビジュアル効果を提供することができる。例えば、前記アイテム４００が蓋体付きごみ箱形態を有する場合、ごみ箱の蓋体が開かれながら前記オブジェクト２５０が捨てられるビジュアル効果を提供することができる。
【００６８】
すなわち、デバイスは、前記ごみ箱機能のアイテム４００に第２マルチタッチが発生することによって、図２〜図５でピックアップされたオブジェクト２５０を保存部から抽出する。また、抽出するオブジェクト２５０が存在する時、図１５及び図１６に示したように、抽出するオブジェクト２５０を示すと共に、前記アイテム４００に対応するエフェクトが適用されたビジュアル効果を一緒に提供する。すなわち、前記抽出するオブジェクト２５０が前記アイテム４００に捨てられるアニメーション形態のビジュアル効果を提供することができる。これにより、ユーザは、自分が選択したオブジェクトがごみ箱に捨てられるビジュアル効果を通じて直観的に認知することができる。
【００６９】
次に、上記のような手続が完了する時、前記第２マルチタッチ入力が発生する前の待機画面１００を提供することができる。この時、前述したように、もしピックアップされたオブジェクトのスタック状態を示すアイテム３００が待機画面１００上に存在する時、前記手続によって保存部に保存されたオブジェクトの除去によって、前記アイテム３００は、スタックされるオブジェクトが消えた形態のビジュアル効果を提供することができる。
【００７０】
図１７〜図２１は、本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
【００７１】
図１７〜図２１を参照すれば、まず、図１７に示したように、デバイスは、ユーザ要請によるメニューリストを表示する待機画面１００を提供することができる。前記特定メニューリストは、前記特定メニューリストを構成する少なくとも１つの項目よりなることができる。前記特定メニューリスト及び前記特定メニューリストを構成する各項目は、本発明の実施形態においてオブジェクトに対応する。しかし、図１７〜図２１では、前記各項目をオブジェクトと命名して説明する。
【００７２】
次に、ユーザは、図１８〜図２０に示したように、前記待機画面１００の特定メニューリストでユーザが希望する特定オブジェクト３５０に対してマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述したように、ユーザのピックアップジェスチャーに対応する前記第１マルチタッチ入力であることができる。すなわち、ユーザは、前記第１マルチタッチ入力を通じて前記メニューリストを構成する複数のオブジェクトのうちユーザ自分が希望する特定オブジェクト３５０に対する第１マルチタッチ入力を発生することができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記特定オブジェクト３５０にピックアップ効果を適用する。
【００７３】
前記ピックアップ効果は、前記第１マルチタッチ入力によりユーザが待機画面１００上のメニューリストのうち前記特定オブジェクト３５０を実際フィンガーでピックアップするようなビジュアル効果を示す。例えば、前記ピックアップ効果は、前記第１マルチタッチ入力によるピックアップジェスチャーに対応して前記特定オブジェクト３５０の幅が徐々に小さくなりながら消えるビジュアル的な効果であることができる。
【００７４】
これを詳しく説明すれば、まず、図１８〜図２０に示したように、第１マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、前記第１マルチタッチによる初期２個のポイントから前記オブジェクト３５０の中心にドラッグ入力が発生すれば、前記デバイスは、前記オブジェクト３５０を選択する。すなわち、前記オブジェクトをピック状態で処理する。
【００７５】
前記ドラッグ入力は、前記オブジェクト３５０選択のための設定されたジェスチャーであって、前述の説明のように、デバイスは、前記ドラッグ入力が発生する時、前記オブジェクト３５０選択のための信号として認知することができる。この時、前記オブジェクト３５０が選択されれば、前記デバイスは、前記オブジェクト３５０が選択されることを別に表示することができる。例えば、選択されるオブジェクト３５０に設定されたエフェクトを適用してハイライト表示するか、または別途の他の形態に変更して提供することができる。
【００７６】
次に、前記オブジェクト３５０が選択された状態で、ユーザが待機画面１００上のマルチフィンガータッチ状態を終了すれば、すなわちマルチフィンガーをタッチスクリーン上で取り外すＵｐジェスチャーをすれば、デバイスは、前記オブジェクト３５０をＵｐ状態で処理する。言い換えれば、前記Ｕｐジェスチャーは、前記オブジェクト３５０の選択が完了し、前記待機画面１００上で除去のための設定されたジェスチャーであることができる。
【００７７】
したがって、前記デバイスは、タッチされたマルチフィンガーのＵｐジェスチャーによる命令を認知し、それに応答して前記オブジェクト３５０をＵｐ状態によるエフェクトを処理する。例えば、前記オブジェクト３５０がユーザのＵｐジェスチャーに対応してピックアップされる形態のビジュアル効果を提供することができる。この時、前記待機画面１００上の前記オブジェクト３５０は、漸次に消える形態のビジュアル効果などを提供することができる。また、前記オブジェクト３５０の消えるビジュアル効果に対応して、前記特定オブジェクト３５０が占めた位置に、前記特定オブジェクト３５０の上位及び／または下位のオブジェクトが移動しながら満たされるビジュアル効果を提供することができる。
【００７８】
次に、図１８〜図２０で説明したように、前記第１マルチタッチ入力に対応して前記オブジェクト３５０に対するピックアップ過程を完了する時、デバイスは、図２１に示したように前記オブジェクト３５０を前記メニューリスト上で除去する。また、前記オブジェクト３５０が消えることによって発生する空の空間を残りの他のオブジェクトによって満たし、メニューリストを整列して表示する。
【００７９】
例えば、図１７〜図２１を参照すれば、前記第１マルチタッチ入力による動作実行によって図１７のメニューリストで”ＤＤＤ”オブジェクトが図２１のように除去されて表示される。この時、前記“ＤＤＤ”オブジェクトの除去に対応して、前記“ＤＤＤ”オブジェクトの上側オブジェクトＣＣＣ及び／または下側オブジェクトＥＥＥが前記”ＤＤＤ”オブジェクトの空の空間を満たす、すなわち空の空間にシフトされ、“ＨＨＨ”オプゼックトが前記メニューリスト上に現われる整列過程をさらに行うことができる。
【００８０】
また、前記デバイスは、前記オブジェクト３５０または前記オブジェクト３５０を呼び出すことができる前記オブジェクト３５０に対するマクロ情報を保存部に保存することができる。この時、前記オブジェクト３５０が保存される形態は、図６を参照した説明部分で説明したものに対応する。
【００８１】
一方、図１７〜図２１を参照した説明部分では省略したが、上記のように、メニューリストで第１マルチタッチ入力による動作を行う場合にも、図７〜図９を参照した説明部分で説明したもののような付加機能を提供することもできることは勿論である。
【００８２】
以上では、図１７〜図２１を参照してユーザの第１マルチタッチ入力によりメニューリストの特定オブジェクト３５０をピックアップし、ピックアップされたオブジェクトが保存部にスタックされる動作について説明した。次に、以下では、図１７〜図２１のように、第１マルチタッチによってスタックされる特定オブジェクト３５０を第２マルチタッチ入力により呼び出してリリースする動作について図２２〜図２５を参照して記述する。
【００８３】
図２２〜図２５は、本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。
【００８４】
図２２〜図２５は、図１７〜図２０に対応する動作でピックアップされて保存された特定オブジェクト３５０を待機画面１００に表示中のメニューリストの特定位置にリリースする動作の画面例を示すものである。
【００８５】
まず、図２２は、図１７〜図２０と同様の手続によって特定オブジェクト３５０がピックアップされた状態の画面例を示すものである。この時、前述の図７のように、特定オブジェクトに対するピックアップ状態を通知する当該アイテム３００を待機画面１００の特定領域に示すこともできることは勿論である。
【００８６】
次に、ユーザは、以前にピックアップされたオブジェクト３５０を呼び出してメニューリストの特定位置に移動して示すことができる。すなわち、ユーザは、図２３に示したように、メニューリストの特定位置にマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述の図１で第２マルチタッチ入力に対応し、デバイスは、前記第２マルチタッチ入力に対応して特定オブジェクト３５０を呼び出してリリース効果を適用する。前記リリース効果は、ユーザのマルチフィンガーによるタッチ入力によるリリースジェスチャーに対応してピックアップされた特定オブジェクト３５０の形状が順次に現われる効果であることができる。
【００８７】
これを詳しく説明すれば、まず、図２３に示したように、マルチタッチ入力、すなわちタッチスクリーン上の特定領域にマルチフィンガー基盤の第２マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、図２３〜図２５に示したように、前記第２マルチタッチによる初期２個のポイントから外側にドラッグ入力が発生すれば、前記デバイスは、以前にピックアップされたオブジェクト３５０を保存部から抽出し、当該オブジェクト３５０を第２マルチタッチが発生する位置にリリースする効果をビジュアルに提供することができる。
【００８８】
前記ドラッグ入力は、前記オブジェクト３５０のリリースのための設定されたジェスチャーであって、前述の説明のように、デバイスは、前記ドラッグ入力が発生する時、前記オブジェクト３５０のリリースのための信号として認知することができる。この時、前記オブジェクト３５０が抽出されれば、前記デバイスは、前記オブジェクト３５０が抽出されることを別に表示することができる。例えば、抽出するオブジェクト３５０の形状がメニューリストの特定位置に徐々に出力されるビジュアル効果を提供することができる。
【００８９】
この時、図２４及び図２５では、前記オブジェクト３５０がメニューリスト内の特定位置の特定オブジェクトの間に前記オブジェクト３５０が割り当てられるビジュアル効果を提供することができる。例えば、特定位置の上位のオブジェクトＦＦＦと下位のオブジェクトＧＧＧの間隔が徐々に広くなりながらそれらの間に前記オブジェクト３５０が漸次に空間を占めることによって現われるビジュアル効果を提供することができる。
【００９０】
すなわち前記デバイスは、前記特定位置に第２マルチタッチが発生することによって、以前にピックアップされたオブジェクト３５０を保存部から抽出する。また、抽出するオブジェクトが存在する時、図２４及び図２５に示したように、抽出されたオブジェクト３５０が徐々に現われるエフェクトを適用してビジュアル効果を提供する。
【００９１】
次に、上記のような手続が完了する時、前記メニューリストで前記第２マルチタッチ入力に対応してリリースされたオブジェクト３５０が追加された待機画面１００を提供することができる。この時、前述したように、ピックアップされたオブジェクトのスタック状態を示すアイテム３００（図７）が存在する時、前記手続によって保存部に保存されたオブジェクトが除去されることによって、前記アイテム３００は、スタックされたオブジェクトが消えた形態のビジュアル効果を提供することができる。
【００９２】
一方、図２２〜図２５を参照した説明部分では省略したが、上記のように、メニューリストで第２マルチタッチ入力による動作を行う場合にも、図１３〜図１６を参照した説明部分で説明したような付加機能を利用したリリース動作を提供することもできることは勿論である。
【００９３】
図２６〜図３４は、本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。特に、図２６〜図３４は、本発明の実施形態による第１マルチタッチの繰り返し入力により複数のオブジェクト各々を連続してピックアップする過程の例を示す図である。
【００９４】
図２６〜図３４を参照すれば、まず、図２６に示したように、デバイスは、ユーザ要請によるイメージを表示する待機画面１００を提供することができる。この時、前記イメージは、前記イメージを構成する少なくとも１つのサブイメージを備えてなることができる。前記イメージ及びイメージを構成するサブイメージは、本発明の実施形態においてオブジェクトに対応する。しかし、図２６〜図３４では、前記サブイメージをオブジェクトと命名して説明する。
【００９５】
次に、図２６のような状態で、ユーザは、図２７〜図２９に示したように、前記待機画面１００のイメージでユーザが希望する第１オブジェクト４５０に対してマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述したように、ユーザのピックアップジェスチャーに対応する前記第１マルチタッチ入力であることができる。すなわち、ユーザは、前記第１マルチタッチ入力を通じて前記イメージを構成する複数のオブジェクト４５０、５５０、６５０のうちユーザ自分が希望する前記第１オブジェクト４５０に対する第１マルチタッチ入力を発生することができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記第１オブジェクト４５０にピックアップ効果を適用する。
【００９６】
前記ピックアップ効果は、図２７〜図２９に示したように、前記第１マルチタッチ入力によりユーザが前記第１オブジェクト４５０を実際フィンガーでピックアップするようなビジュアル効果を示す。例えば、前記ピックアップ効果は、前記第１マルチタッチ入力によるピックアップジェスチャーに対応して前記第１オブジェクト４５０の大きさが徐々に小さくなりながら消えるビジュアル的な効果であることができる。
【００９７】
すなわち、前記デバイスは、前記第１マルチタッチ入力が発生すれば、本発明の機能活性化信号として認知することができる。次に、前記第１マルチタッチによる初期２個のポイント（図２７）から前記第１オブジェクト４５０の中心にドラッグ入力（図２８）が発生すれば、前記デバイスは、前記第１オブジェクト４５０を選択する（図２９）。すなわち、ピック状態で処理する。次に、前記第１オブジェクト４５０が選択された状態で、ユーザが前記待機画面１００上のマルチフィンガータッチ状態を終了すれば、すなわち、マルチフィンガーをタッチスクリーン上で取り外すＵｐジェスチャーをすれば、デバイスは、前記第１オブジェクト４５０をＵｐ状態で処理する。すなわち、前記Ｕｐジェスチャーは、前記第１オブジェクト４５０の選択が完了し、前記待機画面１００上で除去のための設定されたジェスチャーであることができる。
【００９８】
したがって、前記デバイスは、タッチされたマルチフィンガーのＵｐジェスチャーによる命令を認知し、それに応答して前記第１オブジェクト４５０をＵｐ状態によるエフェクトを処理する。例えば、前記第１オブジェクト４５０がユーザのＵｐジェスチャーに対応してピックアップされる形態のビジュアル効果を提供することができる。この時、前記待機画面１００上の前記第１オブジェクト４５０は、漸次に消える形態のビジュアル効果などを提供することができる。
【００９９】
次に、図２７〜図２９で説明したように、前記第１マルチタッチ入力に対応して前記第１オブジェクト４５０に対するピックアップ過程を完了する時、デバイスは、図３０に示したように、前記第１オブジェクト４５０を前記待機画面１００のイメージ上で除去して表示する。また、前記デバイスは、前記第１オブジェクト４５０または前記第１オブジェクト４５０を呼び出すことができる前記第１オブジェクト４５０に対するマクロ情報を保存部に保存することができる。
【０１００】
次に、図３０のような状態で、ユーザは、図３１〜図３４に示したように、前述の過程に対応するピックアップ動作を通じて第２オブジェクト５５０及び第３オブジェクト６５０に対しても前記イメージ上で除去することができる。この時、前記デバイスは、前記第２オブジェクト５５０及び第３オブジェクト６５０を呼び出すことができる各々のマクロ情報を保存部にピックアップされる手順によって保存することができる。この時、前記第１〜第３オブジェクト４５０、５５０、６５０が保存される形態は、図６を参照した説明部分で説明したものに対応する。
【０１０１】
以上のように、本発明の実施形態によれば、複数のオブジェクトよりなるイメージを、第１マルチタッチの繰り返し入力に対応して連続してピックアップされるオブジェクトをピックアップ手順によって保存部に保存することができる。すなわち、デバイスは、第１マルチタッチ入力に対応して選択される第１オブジェクト４５０をピックアップして保存し、前記第１マルチタッチ入力の連続動作によって第２オブジェクト５５０及び第３オブジェクト６５０をもピックアップして保存することができる。
【０１０２】
一方、前記第１〜第３オブジェクト４５０、５５０、６５０をピックアップして保存することだけで説明したが、もし前記イメージを構成するオブジェクトをピックアップした後、前記イメージ自体に対して第１マルチタッチによるピックアップジェスチャーが発生する時、それに応答して前記イメージ自体をピックアップして保存部に保存することもできる。すなわち、本発明の実施形態によれば、背景画面（イメージ）やブランク画面をオブジェクトとして認識してピックアップすることもできる。
【０１０３】
このような例を記述すれば、背景画面（イメージ）が表示された状態で前記背景画面自体が第１マルチタッチによってピックアップされる時、前記背景画面が巻かれるか折れ上がりながら前記ブランク画面に転換されるビジュアル効果を提供することができる。反対に、前記ブランク画面が表示された状態で前記ブランク画面自体が第１マルチタッチによってピックアップされる時、前記ブランク画面が巻かれるか折れ上がりながら設定された背景画面イメージに転換されるビジュアル効果を提供することができる。
【０１０４】
また、図２６〜図３４を参照した説明部分では省略したが、上記のように、メニューリストで第１マルチタッチ入力による動作を行う場合にも、図７〜図９を参照した説明部分で説明したような付加機能を提供することもできることは勿論である。
【０１０５】
以上では、図２６〜図３４を参照してユーザの第１マルチタッチ入力によりイメージを構成する複数のオブジェクト４５０、５５０、６５０を連続してピックアップし、ピックアップされたオブジェクトが所定の手順によって保存部にスタックされる動作について説明した。次に、以下では、図２６〜図３４のように、第１マルチタッチによってスタックされる複数のオブジェクト４５０、５５０、６５０を第２マルチタッチ入力により呼び出してリリースする動作について図３５〜図４１を参照して記述する。
【０１０６】
図３５〜図４１は、本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の例を示す図である。
【０１０７】
特に、図３５〜図４１は、本発明の実施形態による第２マルチタッチの繰り返し入力により複数のオブジェクト各々を保存された手順の逆順によって連続してリリースする過程の例を示す図である。
【０１０８】
図３５〜図４１は、図２６〜図３４に対応する動作にピックアップされて保存された複数のオブジェクト４５０、５５０、６５０を待機画面１００に表示中のイメージの特定領域にリリースする動作の画面例を示すものである。
【０１０９】
まず、図３５は、前記複数のオブジェクト４５０、５５０、６５０がピックアップされた状態の画面例を示すものである。この時、前述の図７のように、特定オブジェクトに対するピックアップ状態を通知する当該アイテム３００を待機画面１００の特定領域に示すこともできることは勿論である。
【０１１０】
次に、ユーザは、以前にピックアップされたオブジェクト４５０、５５０、６５０を保存された手順の逆順に呼び出し、前記イメージのユーザが希望する特定領域に移動して示すことができる。
【０１１１】
すなわち、ユーザは、図３６及び図３７に示したように、イメージの特定領域にマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述したように、ユーザのリリースジェスチャーに対応する前記第２マルチタッチ入力であることができる。デバイスは、前記第２マルチタッチ入力に対応して前記イメージを構成する複数のオブジェクト４５０、５５０、６５０のうち保存手順の逆順によって第３オブジェクト６５０を呼び出してリリース効果を適用する。前記リリース効果は、ユーザのマルチフィンガーによるタッチ入力によるリリースジェスチャーに対応して図３２〜図３４で最後にピックアップされて保存された第３オブジェクト６５０の形状が順次に現われる効果であることができる。
【０１１２】
これを詳しく説明すれば、もし、タッチスクリーン上の特定領域にマルチフィンガー基盤の第２マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、前記第２マルチタッチによる初期２個のポイントから外側にドラッグ入力が発生すれば、前記デバイスは、以前に保存された手順の逆順による第３オブジェクト６５０を保存部から抽出し、抽出された前記第３オブジェクト６５０を第２マルチタッチが発生する位置にリリースする効果をビジュアルに提供することができる。
【０１１３】
前記ドラッグ入力は、前記第３オブジェクト６５０のリリースのための設定されたジェスチャーであって、前述の説明のように、デバイスは、前記ドラッグ入力が発生する時、前記第３オブジェクト６５０のリリースのための信号として認知することができる。この時、前記第３オブジェクト６５０が抽出されれば、前記デバイスは、前記第３オブジェクト６５０が抽出されることを別に表示することができる。例えば、抽出する第３オブジェクト６５０の形状がイメージの当該位置に徐々に出力されるビジュアル効果を提供することができる。
【０１１４】
次に、上記のような手続が完了する時、前記イメージで前記第２マルチタッチ入力に対応してリリースされた第３オブジェクト６５０が追加された待機画面１００を提供することができる。この時、前述したように、ピックアップされたオブジェクトのスタック状態を示すアイテム３００が存在する時、前記手続によって保存部に保存された第３オブジェクト６５０が除去されることによって、前記アイテム３００は、スタックされたオブジェクト４５０、５５０、６５０のうち前記第３オブジェクト６５０が消えた形態のビジュアル効果を提供することができる．
【０１１５】
次に、図３７のような状態で、ユーザは、図３８〜図４１に示したように、前述の過程に対応するリリース動作を通じて第２オブジェクト５５０及び第１オブジェクト４５０に対しても前記イメージ上に示すことができる。この時、前記第２オブジェクト５５０及び第１オブジェクト４５０が保存部に保存された手順の逆順によって呼び出して示すことができる。
【０１１６】
以上のように、本発明の実施形態によれば、第２マルチタッチの繰り返し入力に対応して以前に連続してピックアップされて保存された複数のオブジェクトを保存された手順の逆順によって呼び出して示すことができる。すなわち、デバイスは、第２マルチタッチ入力に対応して第３オブジェクト６５０をリリースして表示し、前記第２マルチタッチ入力の連続動作によって第２オブジェクト５５０及び第１オブジェクト４５０をもリリースして示すことができる。
【０１１７】
一方、図３５〜図４１を参照した説明部分では省略したが、上記のように、イメージで第２マルチタッチ入力による動作を行う場合にも、図１３〜図１６を参照した説明部分で説明したような付加機能を利用したリリース動作を提供することもできることは勿論である。例えば、前記第２オブジェクト５５０を除去しようとする時、デバイスは、ユーザ要請に応答して前記第３オブジェクト６５０に対するリリースを行う。その後、前記デバイスは、ユーザ要請に応答して前述の図１４〜図１６のように、ごみ箱機能をアイテム４００を呼び出し、前記アイテム４００に発生する第２マルチタッチによって前記第２オブジェクト５５０を除去する。次に、前記デバイスは、ユーザ要請に応答して前記第１オブジェクト４５０に対するリリースを行う。このような場合、最終表示されるイメージは、第１オブジェクト４５０及び第３オブジェクト６５０のみを含んで示す。
【０１１８】
以上で説明したように、本発明の実施形態によれば、各々のオブジェクトよりなるイメージをマルチタッチによるピックアップ及びリリースジェスチャーを通じてさらに簡便に編集を行うことができる。
【０１１９】
図４２〜図４５は、本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。特に、図１１ａ〜図１１ｄでは、本発明の第１マルチタッチを利用してイメージ編集のためのオブジェクトをピックアップし、第２マルチタッチによるオブジェクトのピックアップ及びリリースを通じてイメージを編集する過程の画面例を示す図である。
【０１２０】
図４２〜図４５を参照すれば、まず、図４２に示したように、デバイスは、ユーザ要請によるイメージを表示する待機画面１００を提供することができる。次に、図４３に示したように、ユーザは、イメージ編集のための編集ツール５００を呼び出すことができる。前記編集ツール５００の呼び出しは、設定されたタッチ入力を通じて呼び出すか、または設定されたメニュー操作を通じて呼び出すか、または設定された特定キー入力を通じて呼び出すことができる。
【０１２１】
次に、ユーザは、図４３に示した前記編集ツール５００で前記イメージに追加しようとする特定オブジェクト７５０を選択することができる。すなわち、ユーザは、前記編集ツール５００の前記特定オブジェクト７５０に第１マルチタッチ入力を通じて前記特定オブジェクト７５０をピックアップすることができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記特定オブジェクト５００にピックアップ効果を適用する。
【０１２２】
このようなピックアップ効果は、前述のものに対応することができる。但し、前記編集ツール５００に対する第１マルチタッチ入力時、当該オブジェクトを編集ツール５００で除去することなく、当該オブジェクトのピックアップに対応して保存部に保存のみを行うことができる。すなわち、イメージ編集のための編集ツール５００で当該オブジェクトの繰り返し使用のために第１マルチタッチ入力によるエフェクトを付与しても、実際編集ツール５００では除去しない。
【０１２３】
次に、前記第１マルチタッチ入力に対応して前記特定オブジェクト７５０に対するピックアップ過程を完了する時、デバイスは、前記第１オブジェクト７５０または前記特定オブジェクト７５０を呼び出すことができる前記特定オブジェクト７５０に対するマクロ情報を保存部に保存することができる。
【０１２４】
次に、ユーザは、ピックアップされて保存された前記特定オブジェクト７５０のリリースのための第２マルチタッチ入力を発生することができる。すると、前記デバイスは、前記第２マルチタッチ入力に応答して前記特定オブジェクト７５０を呼び出し、前記第２マルチタッチが発生する当該位置にリリース効果を適用する。前記リリース効果は、前述のものに対応することができる。
【０１２５】
次に、前記のような手続が完了する時、前記イメージで前記第１マルチタッチ及び第２マルチタッチによってピックアップされてリリースされた前記特定オブジェクト７５０が追加されたイメージの待機画面１００を提供することができる。
【０１２６】
一方、図４４で、前記第２マルチタッチのための動作時に、前記編集ツール５００を維持した状態で前記第２マルチタッチを発生することもできる。すなわち、前記編集ツール５００は、前記第１及び第２マルチタッチする時、ユーザ要請に対応して続いて維持するか、またはオープン／クローズを繰り返して示すこともできる。
【０１２７】
図４６及び図４７は、本発明の実施形態によるマルチタッチを利用したオブジェクト制御動作を示す図である。
【０１２８】
図４６及び図４７を参照すれば、まず、デバイスは、待機画面表示中に（１２０１段階）、ユーザのタッチ入力を感知すれば（１２０３段階）、前記タッチの種類を判別する（１２０５段階）。この時、図４６で、前記タッチの種類判別結果、第１マルチタッチでなければ、前記１２０１段階に進行し、待機画面を表示するものと示したが、前記第１マルチタッチではない時、前記デバイスは、前記タッチの種類が第２マルチタッチに対応するものであるかを判別することもできる。また、前記第２マルチタッチとして判断する時、以前にピックアップされて保存されたオブジェクトがないから、エラーを出力する動作をさらに行うこともできる。このようなタッチ種類を判別する詳細動作については、図面を参照して後述する。
【０１２９】
一方、前記タッチの種類が第１マルチタッチなら、前記デバイスは、前記第１マルチタッチが感知される位置の当該オブジェクトをピックアップして保存する（１２０７段階）。また、前記デバイスは、前記第１マルチタッチによって前記オブジェクトをピックアップして保存する時、前記オブジェクトのピックアップによる当該動作を処理することができる（１２０９段階）。すなわち、前述の第１マルチタッチと関連して説明された当該動作を処理することができる。また、前記デバイスは、前記第１マルチタッチによって前記オブジェクトを保存する時、前記オブジェクトを前記待機画面上で除去することができる（１２１１段階）。
【０１３０】
一方、前記１２０７段階〜前記１２１１段階は、説明の便宜のために順次に示すものであるが、本発明が必ず前記手続に基づいて動作するものではない。したがって、前記１２０７段階〜前記１２１１段階のうちいずれかの段階を先に実行してもよく、また、前記デバイスは、前記１２０７段階〜前記１２１１段階を一度に処理してもよいは勿論である。
【０１３１】
次に、上記のように、第１マルチタッチ入力に対応して前記オブジェクトをピックアップして保存した状態で、前記デバイスは、新しいタッチ入力を感知することができる（１２１３段階）。次に、前記デバイスは、前記タッチ入力を感知する時、前記タッチの種類を判別する（１２１５段階）。
【０１３２】
図４７を参照すれば、前記１２１５段階の判別結果、タッチの種類が第２マルチタッチなら、前記デバイスは、前記１２０７段階で保存された前記オブジェクトを抽出する（１２１７段階）。次に、前記デバイスは、前記第２マルチタッチによる設定されたリリース方式が順次リリース方式であるか、全体リリース方式であるかを判別する（１２１９段階）。
【０１３３】
もし、１２１９段階で順次リリース方式の場合、前記デバイスは、保存部の上位に保存された１つのオブジェクトを呼び出し、リリースによる当該動作を処理することができる（１２２１段階）。すなわち、前述の第２マルチタッチと関連して説明された当該動作を処理することができる。この時、前記１つのオブジェクト呼び出しは、前記保存部にオブジェクトが保存された手順の逆順によって呼び出すことができる。また、前記デバイスは、前記第２マルチタッチによって前記オブジェクトをリリースする時、保存部で前記オブジェクトを除去することができる（１２２３段階）。
【０１３４】
一方、全体リリース方式の場合、前記デバイスは、保存部に保存されたすべてのオブジェクトを呼び出し、リリースによる当該動作を処理することができる（１２２５段階）。すなわち、前述の説明部分で、第２マルチタッチと関連して説明された当該動作を処理することができる。この時、前記呼び出しは、前記保存部に保存されるオブジェクト手順に関係なく、保存されたすべてのオブジェクトを一度に呼び出すことができる。また、前記デバイスは、前記第２マルチタッチによってすべてのオブジェクトをリリースする時、保存部で前記すべてのオブジェクトを除去することができる（１２２７段階）。
【０１３５】
一方、前記１２１５段階の判別結果、タッチの種類が第２マルチタッチではなければ、前記デバイスは、前記タッチの種類が新しい第１マルチタッチであるかを判別することができる（１２２９段階）。この時、前記新しい第１マルチタッチなら、前記デバイスは、前述の１２０７段階に進行し、前述の動作を行うことができる。この時、前記保存部に保存されるオブジェクトは、前記１２０７段階で保存されたオブジェクトに積層されて保存される。
【０１３６】
一方、前記タッチの種類が前記新しい第１マルチタッチではなければ、前記デバイスは、前記１２０５段階で判別する前記第１マルチタッチの入力取消であるかを判別することができる（１２３１段階）。前記入力取消は、ユーザ要請による取消であることができる。
【０１３７】
前記タッチの種類が前記第１マルチタッチの入力取消である時、前記デバイスは、前記保存部に保存されたオブジェクトを除去することができる（１２３５段階）。ここで、前記除去は、前記保存部に保存されたオブジェクトが複数個である時、設定方式によって上位にある１つのオブジェクトを除去し、また、連続される取消入力により保存された手順の逆順によって除去することができる。または前記除去は、設定方式によって前記保存部に保存されたすべてのオブジェクトを一度に除去することもできる。
【０１３８】
次に、前記デバイスは、前記除去する当該オブジェクトを復元することができる（１２３７段階）。ここで、前記オブジェクト復元は、前記オブジェクトがピックアップされて保存される以前の元々の状態に戻ることを意味することができる。
【０１３９】
前記タッチの種類が前記第１マルチタッチの入力取消ではない時、前記デバイスは、ユーザ要請に対応する当該動作を行うことができる（１２３３段階）。例えば、第１マルチタッチまたは第２マルチタッチ入力を待機するか、または前述の動作を終了するなどの動作を行うことができる。この時、前述の動作を終了する時、以前にピックアップされて保存されているオブジェクトは復元されることができる。
【０１４０】
次に、以下では、本発明のマルチタッチ入力によるピックアップ命令またはリリース命令を認知する方法について記述する。  
【０１４１】
図４８は、本発明の実施形態によるマルチタッチを判別する方法を示す図であり、図４９及び図５０は、本発明の実施形態によって前記マルチタッチを判別する動作例を示す図である。
【０１４２】
図４８、図４９及び図５０を参照すれば、まず、デバイスは、マルチタッチ入力を感知する時（１３０１段階）、前記マルチタッチ入力による各ポイントを認識する（１３０３段階）。すなわち、図４９及び図５０に示したように、前記マルチタッチによる２個のポイントの各座標を認識する。次に、前記デバイスは、前記２個のポイント間の距離値Ｌを算出する（１３０５段階）。前記距離値Ｌの算出は、前記各ポイントの座標間の距離を計算することによって算出することができる。
【０１４３】
次に、前記デバイスは、前記算出する距離値Ｌとあらかじめ設定された臨界値Ｔｈとを比較する（１３０７段階）。すなわち、前記デバイスは、前記距離値Ｌと前記臨界値Ｔｈの比較に基づいて前記マルチタッチの種類を判別することができる。
【０１４４】
前記デバイスは、図４９に示したように前記距離値Ｌが前記臨界値Ｔｈより大きいか、または同一であれば（１３０７段階）、前記マルチタッチを第１マルチタッチとして認知し、前記第１マルチタッチによる機能を活性化することができる（１３０９段階）。この時、前記第１マルチタッチによる機能活性化に対応して、前記デバイスは、前記第１マルチタッチによる領域設定及び設定する領域内のオブジェクトを認知することができる（１３１１段階）。前記１３１１段階の領域設定及び領域内のオブジェクトを認知する方法については、図面を参照して後述する。また、前記１３１１段階は、本発明の実施形態において必ず実行すべき過程ではなく、機能具現上、省略することもできることは勿論である。
【０１４５】
次に、前記デバイスは、マルチドラッグの入力可否をチェックすることができる（１３１３段階）。すなわち、前記デバイスは、図４９に示したように、初期２個のポイントからオブジェクトの中心にドラッグ入力があるか否かをチェックすることができる。もし、マルチドラッグ入力があれば、前記デバイスは、当該オブジェクトに対するピックアップ処理を行うことができる（１３１５段階）。ここで、前記第１マルチタッチ認知後、前記マルチドラッグが初期２個のポイントからオブジェクトの外側に移動するドラッグ入力である時、エラーとして判断することができる。
【０１４６】
もし、１３１３段階で、前記マルチドラッグ入力がなければ、前記デバイスは、入力を待機し（１３１７段階）、その後、ユーザ要請による当該動作を行うことができる（１３１９段階）。例えば、前記第１マルチタッチ入力を取り消すなどの動作を行うことができる。
【０１４７】
以上のように、本発明の実施形態による第１マルチタッチは、初期の２個のポイントからオブジェクトの中心に前記２個のポイント間の距離を狭めた後にリフトするジェスチャーによってオブジェクトに対するピックアップ処理を行うことができる。
【０１４８】
一方、前記１３０７段階の比較結果、前記距離値Ｌが前記臨界値Ｔｈより小さければ、前記デバイスは、前記マルチタッチを第２マルチタッチとして認知し、前記第２マルチタッチによる機能を活性化することができる（１３２１段階）。この時、前記第２マルチタッチによる機能活性化に対応して、前記デバイスは、以前に第１マルチタッチによってピックアップされて保存されたオブジェクトを抽出することができる（１３２３段階）。
【０１４９】
次に、前記デバイスは、マルチドラッグの入力可否をチェックすることができる（１３２５段階）。すなわち、前記デバイスは、図５０に示したように、初期２個のポイントからオブジェクトの外側にドラッグ入力があるか否かをチェックすることができる。
【０１５０】
もし、マルチドラッグ入力があれば、前記デバイスは、前記抽出するオブジェクトに対するリリース処理を行うことができる（１３２７段階）。ここで、前記第２マルチタッチの認知後、前記マルチドラッグが初期２個のポイントからオブジェクトの中心に移動するドラッグ入力である時、エラーとして判断することができる。
【０１５１】
もし、１３２５段階で、前記マルチドラッグ入力がなければ、前記デバイスは、入力を待機し（１３１７段階）、その後、ユーザ要請による当該動作を行うことができる（１３１９段階）。例えば、前記第２マルチタッチ入力を取り消すか、または前記第２マルチタッチ取消した後、新しい第１マルチタッチ入力により新しいオブジェクトをピックアップするなどの動作を行うことができる。
【０１５２】
以上のように、本発明の実施形態による第２マルチタッチは、初期の２個のポイントからオブジェクトの外側に前記２個のポイント間の距離を広げた後にリリースするジェスチャーによってオブジェクトに対するリリース処理を行うことができる。
【０１５３】
図５１及び図５２は、本発明に実施形態による第１マルチタッチ及び第２マルチタッチを入力する動作の例を示す図である。
【０１５４】
図５１は、本発明の第１マルチタッチを入力する動作の例を示すものである。本発明の前記第１マルチタッチは、２個のポイントが垂直ポジション（ｐｏｓｉｔｉｏｎ）、水平ポジション及び左右対角ポジションのうちいずれか１つのポジションに入力されることができる。また、前記のようなポジションからオブジェクト中心にドラッグが発生する時、本発明の実施形態によるピックアップ処理を行うようになる。この時、ピックアップされるオブジェクトのビジュアル効果は、第１マルチタッチによる前記のような初期ポジションで動く方向に表現されることができる。
【０１５５】
図５２は、本発明の第２マルチタッチを入力する動作の例を示すものである。本発明の前記第２マルチタッチは、２個のポイントが垂直ポジション、水平ポジション及び左右対角ポジションのうちいずれか１つのポジションに入力されることができる。また、前記のようなポジションからオブジェクト外側にドラッグが発生する時、本発明の実施形態によるリリース処理を行うようになる。この時、リリースされるオブジェクトのビジュアル効果は、第２マルチタッチによる前記のような初期ポジションで動く方向に表現されることができる。
【０１５６】
図５３及び図５４は、本発明の実施形態による第１マルチタッチを利用したオブジェクト選択方法の例を示す図である。図５５〜図５７は、本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する他の方法の例を示す図である。
【０１５７】
本発明の実施形態において前記第１マルチタッチによるピックアップジェスチャーは、設定方式によって１つのオブジェクトを選択するか、または複数のオブジェクトを選択することができる。すなわち、本発明の実施形態によれば、第１マルチタッチ後、ピックアップジェスチャーによる２個のポイント間の間隔調節を通じてオブジェクトの量を決定して選択することができる。例えば、電子本（ｅ−ｂｏｏｋ）のようなオブジェクトの場合、ユーザがめくりたいページ量を決定し、第１マルチタッチを利用したページめくりが可能である。
【０１５８】
図５３に示したように、デバイスは、第１マルチタッチによる初期２個のポイントからオブジェクト中心にドラッグが発生した時、前記ドラッグ後の距離値Ｌ１とあらかじめ設定された第２臨界値Ｔｈ２とを比較することができる。この時、前記ドラッグ後の距離値Ｌ１が前記第２臨界値より小さければ、デバイスは、前記ドラッグ後の最終２個のポイント内に存在する１つのオブジェクトを選択することができる。
【０１５９】
図５４に示したように、デバイスは、第１マルチタッチによる初期２個のポイントからオブジェクト中心にドラッグが発生した時、前記ドラッグ後の距離値Ｌ２とあらかじめ設定された第２臨界値Ｔｈ２とを比較することができる。この時、前記ドラッグ後の距離値Ｌ２が前記第２臨界値より大きければ、デバイスは、前記ドラッグ後の最終２個のポイント内に存在する複数のオブジェクトを選択することができる。すなわち、前記２個のポイント間の距離値Ｌ２内に存在するすべてのオブジェクトを選択することができる。
【０１６０】
図５５〜図５７は、複数のアイテム（オブジェクト）のメニューリストでピックアップジェスチャーを利用して複数のオブジェクトを選択する動作を示している。
【０１６１】
図５５は、２個のポイントのドラッグ後の距離値Ｌ１が設定された前記第２臨界値Ｔｈ２より小さい時、最終２個のポイント内に属する１つのオブジェクトＥＥＥを選択することができる。
【０１６２】
これとは異なって、設定方式によって初期２個のポイントを認知し、そのポイント内に属するすべてのオブジェクトＣＣＣ、ＥＥＥ、ＦＦＦを選択することもでき、このような例が図５６に示している。
【０１６３】
図５６に示したように、２個ポイントの距離値に関係なく、第１マルチタッチによる初期２個のポイントを認知し、前記２個のポイントから内側にドラッグが発生した時、前記認知する２個のポイント内に存在する複数のオブジェクトＣＣＣ、ＥＥＥ、ＦＦＦを一度に選択することができる。
【０１６４】
図５７は、２個のポイントのドラッグ後の距離値Ｌ２が設定された前記第２臨界値Ｔｈ２より大きい時、最終２個のポイントが位置する箇所のオブジェクトＣＣＣ、ＦＦＦと前記最終２個ポイント内に存在するすべてのオブジェクトＥＥＥを選択することができる。
【０１６５】
図５８〜図６０は、本発明の実施形態による第１マルチタッチ時オブジェクトを認識する方法を示す図である。この時、２個のフィンガータッチポイントによってマルチタッチが行われる場合を仮定して説明する。
【０１６６】
図５８〜図６０を参照すれば、マルチフィンガーによるマルチタッチが行われる場合、デバイスは、初期２個のポイント（初期ポイント）からピックアップジェスチャーによるドラッグ後に発生する２個のポイント（ドラッグポイント）６００を認知し、前記ドラッグポイント６００を投影（ｓｈａｄｏｗ）し、仮想の２個ポイント（仮想ポイント）７００を生成することができる。
【０１６７】
次に、前記デバイスは、前記ドラッグポイント６００と前記仮想ポイント７００による４個のポイント６００、７００を連結し、四角領域８００を生成する。その後、前記デバイスは、前記四角領域８００内に含まれる少なくとも１つのオブジェクトを第１マルチタッチによって選択するオブジェクトとして認知することができる。
【０１６８】
この時、図６０は、オブジェクトが４個のポイント６００、７００を連結して生成する前記四角領域８００を脱する場合の例を示すものである。すなわち、本発明の実施形態においては、前記四角領域８００の内部に存在するオブジェクトと前記四角領域８００にかけられるオブジェクトの両方を認知することができる。
【０１６９】
図６１及び図６２は、本発明の実施形態による第１マルチタッチ入力後にこれを解除する動作例を示す図である。
【０１７０】
図６１及び図６２に示したように、デバイスは、初期２個のポイント（初期ポイント）からピックアップジェスチャーによるドラッグ後に発生する２個のポイント（ドラッグポイント）６００を認知する。その後、デバイスは、第１マルチタッチの入力が終了すれば、前述したように、当該オブジェクトをピックアップ処理することができる。
【０１７１】
一方、前記ドラッグポイント６００からさらに前記初期ポイント方向のように外側方向に移動するリリースジェスチャーに対応するドラッグが発生する時、前記デバイスは、前記第１マルチタッチの入力取消として判断することができる。すなわち、第１マルチタッチ入力によるピックアップジェスチャーによる動作を認知した後、引き続いてリリースジェスチャーによる動作を認知する時、前記デバイスは、前記入力する第１マルチタッチの取消として判断することができる。
【０１７２】
この時、前記デバイスは、前記第１マルチタッチ取消時、すなわち前記ピックアップジェスチャーに引き続くリリースジェスチャーを認知する時、当該オブジェクトが選択されてから取消されることを通知するエフェクトを適用することができる。例えば、前記リリースジェスチャーを認知する時、振動フィードバックを付与することができる。また、前記振動フィードバックと共に、前述のようなピックアップ効果を適用する逆順によって当該オブジェクトを原位置に復元するビジュアル効果を提供することもできる。
【０１７３】
以上では、本発明の実施形態による第１マルチタッチ及び第２マルチタッチによる動作実施形態と、それを利用したオブジェクト管理方法について記述した。次に、以下では、上記のような第１マルチタッチ及び第２マルチタッチを利用する実施形態について記述する。
【０１７４】
図６３〜図６５は、本発明の実施形態による第１マルチタッチをゲームに応用する場合の例を示す図である。
【０１７５】
図６３〜図６５を参照すれば、まず、図６３に示したように、デバイスは、ユーザ要請によるゲーム待機画面１００を表示することができる。この時、前記待機画面１００は、図６３〜図６５に示したように、複数のオブジェクトが当該ゲームの設定された方式によって多様な方向に各々動く形状の例を示すものである。また、図６３〜図６５では省略したが、前記待機画面１００は、前記ゲームに対応する設定されたユーザインターフェースをさらに提供することができる。例えば、前記ゲーム進行による時間情報、前記ゲーム進行による点数情報、前記ゲーム進行後の結果を示すランキング情報などのユーザインターフェースをさらに提供することもできる。
【０１７６】
次に、ユーザは、前記待機画面１００の動的オブジェクトのうちユーザがゲーム進行によって選択しようとする特定オブジェクト８５０に対して第１マルチタッチ入力を発生することができる。すなわち、図６４に示したように、ユーザは、前記第１マルチタッチ入力を通じて前記動的オブジェクトのうちユーザが希望する特定オブジェクト８５０をピックアップすることができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記特定オブジェクト８５０に前述のようなピックアップ効果を適用する。
【０１７７】
次に、前記デバイスは、前記特定オブジェクト８５０に対するピックアップ効果処理後、図６５に示したように、前記特定オブジェクト８５０を前記待機画面１００上で除去して表示する。
【０１７８】
もし、前記ゲームが制限された時間内に前記待機画面１００の動的オブジェクトを除去するものである場合、前記デバイスは、制限された時間をカウントするユーザインターフェースを表示することができる。また、前述の図７に示したように、前記第１マルチタッチによってオブジェクトがピックアップされることを通知するアイテム３００を前記待機画面１００の特定領域に表示することができる。この時、前記アイテム３００は、ユーザの上記のような動作によるゲーム進行に対応して、ピックアップされるオブジェクトを順次に積層して表示することができる。このような表示は、第１マルチタッチ入力に対応してピックアップされるオブジェクト発生時、それに対応してリアルタイムで適用して表示することができる。また、前記デバイスは、前記アイテム３００にオブジェクトを累積する時、設定された計算方式によってピックアップされた個数に対応する点数を算出し、待機画面１００の特定領域に提供することもできる。
【０１７９】
その後、制限された時間が満了する時、前記デバイスは、前記ゲーム進行による待機画面１００を終了し、点数情報、ランキング情報などのような設定されたユーザインターフェースの待機画面１００を提供することができる。前述したように、ユーザは、前述の第１マルチタッチ入力を利用して前記待機画面１００上の動的オブジェクトを除去するゲームを行うことができる。
【０１８０】
次に、以下では、第１マルチタッチ及び第２マルチタッチを利用する他の実施形態について記述する。特に、図６６と図６７〜図７１を参照して、第１デバイスで第１マルチタッチによってピックアップするオブジェクトを第２デバイスで第２マルチタッチによってリリースする実施形態について記述する。この時、前記第１デバイスの特定オブジェクトを前記第２デバイスに移動する動作の例を説明するが、本発明がこれに限定されるものではない。したがって、設定方式または設定されたキー入力の組合によって前記第１デバイスの特定オブジェクトを前記第２デバイスにコピーすることも可能であることは勿論である。
【０１８１】
図６６は、本発明の実施形態によるマルチタッチを利用してデバイス間にオブジェクトを移動する動作例を示す図である。また、図６７〜図７１は、図６６の実施形態によってデバイス間にオブジェクトを移動する画面例を示す図である。
【０１８２】
図６６と図６７〜図７１を参照すれば、まず、第１デバイス２０００と第２デバイス３０００は、支援する通信方式による手続によって相互間の連結を設定することができる（２１０１段階）。この時、前記連結設定時、各デバイス２０００、３０００は、本発明の実施形態による機能を活性化することができる（２１０１段階）。すなわち、前記各デバイス２０００、３０００は、図６７に示したように、ユーザ要請による待機画面１００、１０５を各々表示することができる。この時、参照符号９００は、前記第１デバイス２０００の待機画面１００の例を示すものであり、参照符号１０００は、前記第２デバイス３０００の待機画面１０５の例を示すものである。この時、前記各デバイス２０００、３０００の待機画面１００、１０５各々は、複数のオブジェクトが配置されて表示されることができる。
【０１８３】
一方、本発明の実施形態において、前記デバイス２０００、３０００間の連結は、ブルートゥース通信のような近距離無線通信による連結及びデータケーブルなどを利用した有線通信による連結が可能である。したがって、前記通信方式は、前記連結によって無線通信方式または有線通信方式のうちいずれか１つの通信方式であることができる。この時、図６６と図６７〜図７１では、無線通信を利用する場合を例にして説明する。
【０１８４】
また、本発明の実施形態において適用される前記無線通信は、  ブルートゥース通信、赤外線通信、ジグビー（Ｚｉｇｂｅｅ）通信及びその他の近距離で通信チャネルを形成し、信号を送受信することができる多様な無線通信の適用が可能であることは勿論である。
【０１８５】
次に、ユーザは、前記第１デバイス２０００の待機画面１００でユーザが希望する特定オブジェクト９５０に対して第１マルチタッチ入力を発生することができる。すると、前記第１デバイス２０００は、前記第１マルチタッチ入力に対応して前記特定オブジェクト９５０をピックアップ処理する（２１０３段階）。
【０１８６】
次に、前記第１デバイス２０００は、前記第１マルチタッチによってピックアップする前記特定オブジェクト９５０を前記待機画面１００上で除去して表示する。また、前記第１デバイス２０００は、前記特定オブジェクト９５０または前記特定オブジェクト９５０を呼び出すことができる前記特定オブジェクト９５０に対するマクロ情報を保存する（２１０７段階）。前記２１０３段階と２１０５段階による画面の例を図６８及び図６９に示す。
【０１８７】
この時、前記第１デバイス２０００の動作は、前述したものに対応するので、それに対する説明を省略する。但し、図６９に示したように、前記特定オブジェクト９５０に対するピックアップ状態を通知する図７に示したようなアイテム３００を待機画面１００の特定領域に示すことができる。
【０１８８】
前記第１デバイス２０００は、前記第１マルチタッチによる前記特定オブジェクト９５０を保存した後（２１０５段階）、前記特定オブジェクト９５０に対する情報メッセージを生成し（２１０７段階）、前記第２デバイス３０００に伝送する（２１０９段階）。ここで、前記情報メッセージは、前記特定オブジェクト９５０がピックアップされて伝送されるので、前記特定オブジェクト９５０を受信することができる受信モードを活性化すべきことを前記第２デバイス３０００に要請するメッセージであることができる。すなわち、前記情報メッセージは、前記第２デバイス３０００の受信モード活性化のための制御命令であることができる。
【０１８９】
この時、図６６では省略したが、前記第１デバイス２０００は、前記情報メッセージを生成する前に、前記第２デバイス３０００との連結状態をチェックする過程をさらに行うこともできる。
【０１９０】
次に、前記第２デバイス３０００は、前記第１デバイス２０００から前記情報メッセージを受信すれば（２１１１段階）、それに応答して前記情報メッセージをパーシングし、前記情報メッセージによってオブジェクト受信のための受信モードを活性化する（２１１３段階）。ここで、前記受信モードは、第２マルチタッチ入力が発生する時、前記第１デバイス２０００から伝達されるオブジェクトを受信して表示することができるモードを示すことができる。この時、前記デバイスは、前記情報メッセージ受信及び受信モード活性化のうち少なくともいずれか１つの動作時、ユーザにアラームを発生することができる。
【０１９１】
次に、ユーザは、前記第２デバイス３０００が受信モード活性化に対応して、前記第２デバイス３０００の待機画面１０５でユーザが希望する特定領域に第２マルチタッチ入力を発生することができる。すなわち、前記特定オブジェクト９５０をリリースするための第２マルチタッチによるリリースジェスチャーを行うことができる。すると、前記第２デバイス３０００は、前記第２マルチタッチ入力に対応して前記特定オブジェクト９５０をリリースするためのプロセッシングを行う（２１１５段階）。
【０１９２】
すなわち、前記第２デバイス３０００は、前記第２マルチタッチ入力を感知する時、要請メッセージを生成し（２１１７段階）、前記第１デバイス２０００に伝送する（２１１９段階）。ここで、前記要請メッセージは、前記受信モードで第２マルチタッチ入力に対応して前記第１デバイス２０００でピックアップされて保存された前記特定オブジェクト９５０の送信を要請するメッセージであることができる。すなわち、前記要請メッセージは、前記第１デバイス２０００にオブジェクト伝送を要請する制御命令であることができる。
【０１９３】
次に、前記第１デバイス２０００は、前記第２デバイス３０００から前記要請メッセージを受信すれば（２１２１段階）、それに応答して前記要請メッセージをパーシングし、前記要請メッセージによって以前にピックアップされて保存された前記特定オブジェクト９５０を呼び出す（２１２３段階）。次に、前記第１デバイス２０００は、前記呼び出す特定オブジェクト９５０を前記第２デバイス３０００に伝送する（２１２５段階）。
【０１９４】
次に、前記第２デバイス３０００は、前記第１デバイス２０００から前記特定オブジェクト９５０を受信すれば（２１２７段階）、前記特定オブジェクト９５０を前記待機画面１０５上で前記第２マルチタッチが発生する当該位置に表示する（２１２９段階）。この時、前記第２デバイスは、前記特定オブジェクト９５０を表示する時、前記第２マルチタッチが発生する位置に前述のようなリリース効果をビジュアルに提供しながら表示することができる。図６６の２１１５段階〜２１２９段階による画面例を図７０及び図７１に示す。この時、図７０及び図７１による動作説明は、前述したものに対応するので、それに対する説明を省略する。
【０１９５】
次に、前記第２デバイス３０００は、前記第２マルチタッチによる前記特定オブジェクト９５０に対するリリース処理後、それによる結果メッセージを生成し（２１３１段階）、前記第１デバイス２０００に伝送することができる（２１３３段階）。ここで、前記結果メッセージは、前記特定オブジェクト９５０のリリース処理による結果すなわち、成功／失敗可否に対する情報を含むメッセージであることができる。
【０１９６】
次に、前記第１デバイス２０００は、前記第２デバイス３０００から前記結果メッセージを受信すれば（２１３５段階）、それに応答して前記結果メッセージをパーシングし、前記結果メッセージによって以前にピックアップされて保存部に保存された前記特定オブジェクト９５０を前記第１デバイス２０００から削除する（２１３７段階）。この時、図６６では、設定された“移動方式”で前記手続によって前記特定オブジェクト９５０を前記第１デバイス２０００で削除する場合の例を説明した。しかし、もし設定された方式が“コピー方式”の場合、前記第１デバイス２０００は、前記結果メッセージを受信する時、前記保存部に保存された前記特定オブジェクト９５０を元々の位置に復元して示すこともできる。
【０１９７】
以上、図６６と図６７〜図７１を参照して記述したように、本発明の実施形態による第１デバイス２０００で第１マルチタッチを利用して特定オブジェクトをピックアップして、第２デバイス３０００で第２マルチタッチを利用して前記特定オブジェクトをリリースすることができる。これにより、デバイス２０００、３０００間にオブジェクトの移動またはコピーによる管理をさらに簡便に行うことができる。
【０１９８】
以上では、本発明の実施形態によるマルチタッチを利用したオブジェクト管理による全般的な動作及びそれを利用した多様な実施形態について記述した。以下では、前述のような本発明の動作を行う前記制御手段及びこのような制御手段を含むデバイスの構成について記述する。しかし、本発明が下記に記述する内容に限定されるものではないので、下記の実施形態に基づいて多様な実施形態に適用することができる。
【０１９９】
一方、以上で記述したような本発明の前記デバイスの例として、ＰＤＡ（ＰｅｒｓｏｎａｌＤｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ）、ＰＭＰ（Ｐｏｒｔａｂｌｅ  Ｍｕｌｔｉｍｅｄｉａ  Ｐｌａｙｅｒ）、ＭＰ３プレーヤー、デジタル放送プレーヤー、ノートパソコン、パソコン及び移動通信端末（ｍｏｂｉｌｅ  ｃｏｍｍｕｎｉｃａｔｉｏｎ  ｔｅｒｍｉｎａｌ）などのような情報通信機器とマルチメディア機器及びそれに対応する多様な応用機器を含むことができる。
【０２００】
しかし、本発明のデバイスは前記デバイスに限定されるものではなく、本発明の実施形態よってマルチフィンガー基盤のマルチタッチ入力が可能なディスプレイデバイスを含むすべての形態の中大型ディスプレイデバイスを含むことができる。例えば、前記デバイスは、ユーザの入力に対応する出力を提供するディスプレイユニットを含むすべての形態のデバイスを含むことができる。すなわち、本発明は、テレビ（Ｔｅｌｅｖｉｓｉｏｎ）、ＬＦＤ（Ｌａｒｇｅ  Ｆｏｒｍａｔ  Ｄｉｓｐｌａｙ）、ＤＳ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｇｅ）、メディアポール（ｍｅｄｉａ  ｐｏｌｅ）などの中大型デバイスに適用されることもできる。また、本発明では、タッチスクリーンを利用するものを例示した。しかし、本発明がこれに限定されるものではなく、ユーザ入力に応答して出力を支援するすべてのタイプのディスプレイユニットを含むことができる。
【０２０１】
以下では、本発明の前記デバイスに対する概略的な構造を、図７２を参照しながら説明する。
【０２０２】
図７２は、本発明の実施形態によるデバイスのブロック構成を概略的に示す図である。
【０２０３】
図７２を参照すれば、本発明の実施形態によるデバイスは、近距離通信モジュール２３１０と、入力部２３２０と、表示部２３３０と、保存部２３４０及び制御部２３５０などを含む。
【０２０４】
前記近距離通信モジュール２３１０は、前記デバイスの近距離無線通信を行う。前記近距離通信モジュール２３１０は、任意の他のデバイスと設定された方式の通信チャネルを形成し、データ信号の送受信を行う。前記近距離通信モジュール２３１０は、ブルートゥース通信、インフラレッド通信、ジグビー通信など前記デバイスで支援する少なくとも１つの無線通信を利用することができ、また、その他、近距離で通信チャネルを形成して信号を送受信することができる多様な無線通信モジュールの適用も可能であることは勿論である。本発明の実施形態においては、前記近距離通信モジュール２３１０がブルートゥースモジュールであることを代表的な例として説明する。
【０２０５】
したがって、前記近距離通信モジュール２３１０は、アンテナ（例えば、ブルートゥースアンテナなど）を通じて他のブルートゥース装置（例えば、第２デバイス３０００）とブルートゥースプロトコルによってブルートゥース通信を行うことができる。これにより、前記デバイスは、本発明の機能実行による前記ブルートゥース通信のような近距離無線通信を利用して他の外部デバイスと連結設定することができる。その後、前記デバイスは、本発明の実施形態によってピックアップする特定オブジェクトを無線通信で他の外部デバイスに伝送することができる。
【０２０６】
前記入力部２３２０は、多様な文字情報を入力され、各種機能の設定及び前記デバイスの機能制御と関連して入力される信号を前記制御部２３５０に伝達する。特に、前記入力部２３２０は、前記デバイスの提供形態によってタッチパッドを別に含むか、または前記タッチパッドで形成されることができる。また、前記入力部２３２０は、前記デバイスの提供形態によって前記タッチパッド、タッチスクリーン、一般的なキー配列のキーパッド、クォティ方式のキーパッド及び特定機能を行うように設定された機能キーなどのような入力手段のうちいずれか１つまたはこれらの組合で形成することができる。本発明のデバイスがタッチスクリーンだけによって動作するデバイスの場合、前記入力部２３２０の構成は省略することができる。
【０２０７】
前記表示部２３３０は、前記デバイスの機能実行中に発生する画面データを表示し、ユーザの入力イベント、操作及びキー操作などの状態情報を表示し、また前記デバイスの機能設定情報などを表示する。前記表示部２３３０は、前記制御部２３５０から出力される様々な信号と色情報を視覚的なエフェクトを適用して表示する。前記表示部２３３０は、液晶ディスプレイ（ＬＣＤ、Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）を使用することができ、このような場合、前記表示部２３３０は、ＬＣＤ制御部、映像を保存することができるメモリ及びＬＣＤ表示素子などを備えることができる。しかし、本発明がＬＣＤに限定されるものではなく、前記表示部２３３０は、発光ダイオード（ＬＥＤ、Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）、有機発光ダイオード（ＯＬＥＤ、Ｏｒｇａｎｉｃ  ＬＥＤ）、能動型ＯＬＥＤ（ＡＭＯＬＥＤ、Ａｃｔｉｖｅ  Ｍａｔｒｉｘ  ＯＬＥＤ）などのような他の表示装置が使用されることもできる。
【０２０８】
前記表示部２３３０は、本発明の実施形態によってタッチスクリーンで形成することができる。前記タッチスクリーンは、ユーザが指やペンなどの物体で入力イベント（タッチ、マルチタッチ、ドラッグ、タップ、フリックなどのイベント）を発生すれば、当該位置を入力されるようにする特殊な入力装置を装着したスクリーンを示す。すなわち、デバイスでキーパッドを使用せずにスクリーンに現われたオブジェクトやユーザインターフェースの特定位置などにユーザの入力イベントが発生すれば、当該位置を把握し、保存されたソフトウェアによって特定処理を行うことができるようにする。前記タッチスクリーンは、スクリーンで直接入力情報を入力されることができるようにする表示装置を示す。
【０２０９】
前記タッチスクリーンは、前記デバイスの表示部２３３０にタッチパネルという装置を付加して機能を発揮するもので、前記タッチパネルは、上下左右に目に見えない赤外線が流れるようにして、画面に複数の四角形格子が生ずるようにして、ユーザの手先やその他の物体で前記格子に前記入力イベントを発生すれば、当該位置を把握することができるようにする機能を有している。したがって、前記タッチパネルを装着したスクリーンにあらかじめ現われたデータ（ウィジェット、ウィジェットアイコン、ウィジェットセットアイコン、映像、ユーザインターフェースなどのオブジェクト）に入力イベントが発生すれば、前記制御部２３５０は、前記入力イベントが発生するスクリーンの位置によってユーザが選択した事項が何であるかを把握し、これに対応する命令を処理するようにする。これにより、ユーザが非常に容易に自分が希望する情報を得ることができる。
【０２１０】
例えば、ユーザがマルチフィンガーを利用してスクリーン上の特定領域に前記入力イベントを発生すれば、これによる位置情報を前記制御部２３５０が認識する。また、前記制御部２３５０は、前記入力イベントに対応してスクリーン上に表示されるオブジェクトを、前記入力イベントによるエフェクトを適用してスクリーン上で除去する機能を処理することができる。また、前記制御部２３５０は、前記入力イベントに対応して呼び出される特定オブジェクトを、前記入力イベントによるエフェクトを適用してスクリーン上に示す機能を処理することができる。
【０２１１】
すなわち、前記表示部２３３０は、前記タッチスクリーンを通じて本発明の機能実行による制御信号を入力されて前記制御部２３５０に伝達する。このようなタッチスクリーンを利用した前記表示部２３３０の構成及び動作は、前述の図１〜図７１に対応する。
【０２１２】
前記保存部２３４０は、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）とＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）などで構成されることができる。前記保存部２３４０は、前記デバイスで生成及び活用される多様なデータなどを保存することができる。前記多様なデータは、デバイスのアプリケーション実行によって発生するデータ及び前記デバイスを利用して生成するか、外部から受信して保存可能なすべての形態のユーザデータなどを含む。特に、前記多様なデータは、本発明で定義するウィジェット、ウィジェットアイコン、アイコン、メニュー、メニューリスト、イメージ、背景画面などのオブジェクトを含むことができる。また、前記多様なデータは、前記デバイスで提供されるユーザインターフェース及び前記デバイス利用による様々な設定情報などを含むことができる。
【０２１３】
特に、前記保存部２３４０は、本発明の実施形態によるマルチフィンガー基盤のマルチタッチ入力と関連した設定情報を保存することができる。このような設定情報は、マルチタッチ入力によるジェスチャー情報、マルチタッチ入力に対応して適用されるエフェクト情報、マルチタッチ入力に対応して提供する付加機能情報などであることができ、このような設定情報は、設定情報保存領域２３４１に保存することができる。また、前記保存部２３４０は、マルチタッチ入力によりピックアップされるオブジェクトを保存するオブジェクト保存領域２３４３を含むことができる。すなわち、オブジェクト保存領域２３４３は、図６を参照した説明部分で説明したように、本発明の第１マルチタッチ入力によりピックアップされる少なくとも１つのオブジェクトを保存することができる。
【０２１４】
前記保存部２３４０は、前記デバイスの一般的な動作を制御するためのアプリケーション及び本発明のマルチタッチ入力による動作を制御するためのアプリケーションを保存することができる。このようなアプリケーションは、前述の図１〜図７１で説明したような本発明の動作に対応するアプリケーションであることができる。このようなアプリケーションは、前記保存部２３４０のアプリケーション保存領域（図示せず）に保存することができる。
【０２１５】
また、前記保存部２３４０は、前述のアプリケーション実行中に発生するデータを一時保存する１つ以上のバッファーを含むことができる。また前記保存部２３４０は、前記デバイスの内部に構成されることができ、またスマートカードなどのように外部に構成されることができ、内部／外部のすべての保存媒体を含むことができることは勿論である。
【０２１６】
前記制御部２３５０は、前記デバイスに対する全般的な制御機能を実行し、前記デバイス内の前記ブロック間の信号流れを制御する。前記制御部２３５０は、前記近距離通信モジュール２３１０と、前記入力部２３２０と、前記表示部２３３０及び前記保存部２３４０などのような各構成間の信号流れを制御する。
【０２１７】
前記制御部２３５０は、前記デバイスが移動通信端末の場合、移動通信サービスのためのコーデック（ＣＯＤＥＣ）及び少なくとも１つのモデム（ＭＯＤＥＭ）よりなるデータ処理部を含むこともできる。この時、上記のように、前記デバイスが移動通信サービスを支援する時、前記デバイスは、無線周波数（ＲＦ、Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ）信号処理のためのＲＦ通信モジュールをさらに含むことができる。
【０２１８】
特に、前記制御部２３５０は、本発明の実施形態によるマルチフィンガー基盤のマルチタッチ入力を感知し、前記マルチタッチの種類によって待機画面上の特定オブジェクトに対するピックアップ及びリリースのうちいずれか１つの動作を制御する。また、前記制御部２３５０は、前記特定オブジェクトのピックアップまたはリリース制御時、入力されるマルチタッチに対応するエフェクトを適用してオブジェクトの出力または除去を制御する。また、前記制御部２３５０は、外部デバイスとの有線または無線連結設定時、入力されるマルチタッチに対応してオブジェクトの前記外部デバイスへの移動またはコピーを制御する。
【０２１９】
このような制御部２３５０は、前述の図１〜図７１を参照した説明部分で説明したような本発明の動作を制御することができる。前記制御部２３５０の前述の機能制御は、ソフトウェアで具現され、本発明の動作を処理することもできる。以下、前記制御部２３５０の制御動作を区分して記述する。
【０２２０】
すなわち、前記制御部２３５０は、タッチ信号感知部２３５１と、マルチタッチ判断部２３５３と、オブジェクト管理部２３５５及び同期処理部２３５７などを含むことができる。
【０２２１】
前記タッチ信号感知部２３５１は、前記表示部２３３０のタッチスクリーンを通じて入力されるユーザのタッチ信号を感知する。この時、前記タッチ信号感知部２３５１は、シングルフィンガー基盤のシングルタッチとマルチフィンガー基盤のマルチタッチを感知することができる。前記タッチ信号感知部２３５１は、マルチタッチを感知する時、それによる情報を前記マルチタッチ判断部２３５３に伝達することができる。
【０２２２】
前記マルチタッチ判断部２３５３は、前記タッチ信号感知部２３５１から前記マルチタッチによる情報を受信する時、前記マルチタッチの種類を判別することができる。すなわち、前記マルチタッチ判断部２３５３は、前記マルチタッチが本発明の実施形態による第１マルチタッチであるかまたは第２マルチタッチであるかを区分する。すなわち、前記マルチタッチ判断部２３５３は、前記マルチタッチによる２個のポイント間の距離値Ｌとあらかじめ設定された臨界値Ｔｈの比較に基づいて前記マルチタッチの種類を判別することができる。また、前記マルチタッチ判断部２３５３は、前記マルチタッチ後に発生するドラッグ信号を識別する。すなわち、前記マルチタッチ判断部２３５３は、マルチタッチ後に入力されるドラッグ信号の識別によってピックアップジェスチャーまたはリリースジェスチャーを判断する。このようなマルチタッチの種類判別及びドラッグ信号識別は、前述の図４８、図４９及び図５０を参照した説明部分で説明したものに対応する。
【０２２３】
前記オブジェクト管理部２３５５は、前記マルチタッチ判断部２３５３で判断する結果に対応して特定オブジェクトに対するピックアップまたはリリース動作を処理する。前記オブジェクト管理部２３５５は、第１マルチタッチ及びピックアップジェスチャーによるマルチドラッグ信号によって待機画面の特定オブジェクトに設定されたエフェクトを付与し、前記エフェクトによるピックアップ及び待機画面上での除去を処理する。前記オブジェクト管理部２３５５は、ピックアップされるオブジェクトの保存を管理する。また、前記オブジェクト管理部２３５５は、第２マルチタッチ及びリリースジェスチャーによるマルチドラッグ信号によって保存されたオブジェクトを呼び出し、呼び出すオブジェクトに設定されたエフェクトを付与し、前記エフェクトによるリリース及び待機画面上に表示を処理する。前記オブジェクト管理部２３５５は、第２マルチタッチ及びリリースジェスチャーによるマルチドラッグ信号によってピックアップされて保存されたオブジェクトの削除を処理する。また、前記オブジェクト管理部２３５５は、第２マルチタッチ及びリリースジェスチャーによるマルチドラッグ信号によって外部の他のデバイスから有線通信または無線通信で伝達されるオブジェクトのリリース動作を処理する。このようなオブジェクト管理部２３５５の動作は、前述の図１〜図７１を参照した説明部分で前記記述された関連動作を説明した部分に対応することができる。
【０２２４】
前記同期処理部２３５７は、前記デバイスと外部の他のデバイスとの有線または無線方式による連結設定を処理する。特に、前記同期処理部２３５７は、有線及び無線方式のうちいずれか１つの方式によって連結が設定される時、入力されるマルチタッチに対応するメッセージ送受信を処理する。
【０２２５】
すなわち、前記同期処理部２３５７は、外部デバイスと連結が設定され、前記デバイスが送信側動作を行う時、第１マルチタッチによって生成する情報メッセージの送信を処理する。前記同期処理部２３５７は、前記情報メッセージ送信に応答してピックアップされるオブジェクトを要請する要請メッセージを受信する時、ピックアップされて保存されたオブジェクトを前記外部デバイスに伝送する。また、前記同期処理部２３５７は、前記オブジェクト伝送に対応して伝送される結果メッセージが受信される時、前記結果メッセージを前記オブジェクト管理部２３５５に伝達することができる。すると、前記オブジェクト管理部２３５５は、前記結果メッセージに対応してピックアップされて保存されたオブジェクトに対する除去または復元などの動作を処理する。
【０２２６】
前記同期処理部２３５７は、前記デバイスが受信側動作を実行することによって外部デバイスから情報メッセージが受信される時、第２マルチタッチによって生成する要請メッセージの送信を処理する。前記同期処理部２３５７は、前記要請メッセージ送信に応答して伝送されるオブジェクトを受信する。また、前記同期処理部２３５７は、受信するオブジェクトの処理結果による結果メッセージを前記外部デバイスに伝送する。
【０２２７】
このような前記同期処理部２３５７の動作は、前述の図６６と図６７〜図７１を参照した説明部分で説明したものに対応する。
【０２２８】
一方、図２３では、説明の便宜のために前記デバイスの概略的な構成例を図示した。しかし、本発明の前記デバイスが必ず前記構成に限定されない。
【０２２９】
したがって、本発明の前記デバイスは、その提供形態によってデジタル放送受信モジュール、インターネット通信モジュール、カメラモジュール、オーディオ処理モジュール及び有線通信モジュール（有線連結のためのインターフェース）などのように上記で言及しない構成を追加的にさらに含むことができる。また、本発明の前記デバイスが移動通信サービスを支援する時、前記デバイスの前記移動通信サービスを支援するためのＲＦ通信モジュール及びデータ処理モジュールを含むことができる。前記データ処理部は、コーデック（ＣＯＤＥＣ）及びモデム（ＭＯＤＥＭ）を含むことができる。また、本発明の前記デバイスは、その提供形態によって前記構成で特定のブロックが除外されるか、他のブロックに代替されることもできることは勿論である。これは、本技術分野における通常の知識を有する者なら容易に理解することができる。
【０２３０】
例えば、本発明のデバイスがインターネット網を利用した通信を支援する時、このためのインターネットモジュールを含むことができ、前記インターネットモジュールは、前記制御部２３５０の制御によってインターネット網を通じて他のデバイス及びネットワークと無線通信を行うことができる。また、本発明のデバイスがデジタル放送と関連した機能を提供する時、このための放送受信モジュールを含むことができる。
【０２３１】
本明細書と図面に開示された本発明の実施例は、本発明の技術内容を容易に説明し、本発明の理解を助けるために特定例を提示したものに過ぎず、本発明の範囲を限定しようとするものではない。ここに開示された実施例以外にも、本発明の技術的思想に基づく他の変形例が実施可能であることは、本発明の属する技術分野における通常の知識を有する者に自明である。
【符号の説明】
【０２３２】
１００    待機画面
２００    オブジェクト
２５０    オブジェクト
３００    アイテム
３５０    特定オブジェクト
４００    アイテム
４５０    第１オブジェクト
５００    編集ツール
５５０    第２オブジェクト
６５０    第３オブジェクト
７５０    特定オブジェクト
２３１０  近距離通信モジュール
２３２０  入力部
２３３０  表示部
２３４０  保存部
２３４１  設定情報保存領域
２３４３  オブジェクト保存領域
２３５０  制御部
２３５１  タッチ信号感知部
２３５３  マルチタッチ判断部
２３５５  オブジェクト管理部
２３５７  同期処理部
【図１】
0005731979.tif 000002
【図２】
0005731979.tif 000003
【図３】
0005731979.tif 000004
【図４】
0005731979.tif 000005
【図５】
0005731979.tif 000006
【図６】
0005731979.tif 000007
【図７】
0005731979.tif 000008
【図８】
0005731979.tif 000009
【図９】
0005731979.tif 000010
【図１０】
0005731979.tif 000011
【図１１】
0005731979.tif 000012
【図１２】
0005731979.tif 000013
【図１３】
0005731979.tif 000014
【図１４】
0005731979.tif 000015
【図１５】
0005731979.tif 000016
【図１６】
0005731979.tif 000017
【図１７】
0005731979.tif 000018
【図１８】
0005731979.tif 000019
【図１９】
0005731979.tif 000020
【図２０】
0005731979.tif 000021
【図２１】
0005731979.tif 000022
【図２２】
0005731979.tif 000023
【図２３】
0005731979.tif 000024
【図２４】
0005731979.tif 000025
【図２５】
0005731979.tif 000026
【図２６】
0005731979.tif 000027
【図２７】
0005731979.tif 000028
【図２８】
0005731979.tif 000029
【図２９】
0005731979.tif 000030
【図３０】
0005731979.tif 000031
【図３１】
0005731979.tif 000032
【図３２】
0005731979.tif 000033
【図３３】
0005731979.tif 000034
【図３４】
0005731979.tif 000035
【図３５】
0005731979.tif 000036
【図３６】
0005731979.tif 000037
【図３７】
0005731979.tif 000038
【図３８】
0005731979.tif 000039
【図３９】
0005731979.tif 000040
【図４０】
0005731979.tif 000041
【図４１】
0005731979.tif 000042
【図４２】
0005731979.tif 000043
【図４３】
0005731979.tif 000044
【図４４】
0005731979.tif 000045
【図４５】
0005731979.tif 000046
【図４６】
0005731979.tif 000047
【図４７】
0005731979.tif 000048
【図４８】
0005731979.tif 000049
【図４９】
0005731979.tif 000050
【図５０】
0005731979.tif 000051
【図５１】
0005731979.tif 000052
【図５２】
0005731979.tif 000053
【図５３】
0005731979.tif 000054
【図５４】
0005731979.tif 000055
【図５５】
0005731979.tif 000056
【図５６】
0005731979.tif 000057
【図５７】
0005731979.tif 000058
【図５８】
0005731979.tif 000059
【図５９】
0005731979.tif 000060
【図６０】
0005731979.tif 000061
【図６１】
0005731979.tif 000062
【図６２】
0005731979.tif 000063
【図６３】
0005731979.tif 000064
【図６４】
0005731979.tif 000065
【図６５】
0005731979.tif 000066
【図６６】
0005731979.tif 000067
【図６７】
0005731979.tif 000068
【図６８】
0005731979.tif 000069
【図６９】
0005731979.tif 000070
【図７０】
0005731979.tif 000071
【図７１】
0005731979.tif 000072
【図７２】
0005731979.tif 000073