(57)【要約】【課題】マルチディスプレイ装置でユーザがアプリケーションを直観的で便利に制御できるように多様なツールセットを提供することができるマルチディスプレイ装置及びそのツール提供方法を提供する。【解決手段】マルチディスプレイ装置であって、第１ディスプレイ部を含む第１ボディと、第２ディスプレイ部を含む第２ボディと、前記第１及び前記第２ボディを連結するヒンジ部と、ツールセットの表示のためのユーザ操作が入力されると、前記マルチディスプレイ装置の動作状態に対応する複数のツールからなるツールセットを、前記第１ディスプレイ部及び前記第２ディスプレイ部の内の少なくとも一つの画面に表示し、前記ツールセットで一つのツールが選択されると選択されたツールに対応する動作を行う制御部とを有し、前記ツールセットに表示されるツールの表示位置は可変的である。【選択図】      図１
2014078235.tif 000002
【特許請求の範囲】
【請求項１】
マルチディスプレイ装置であって、
第１ディスプレイ部を含む第１ボディと、
第２ディスプレイ部を含む第２ボディと、
前記第１及び前記第２ボディを連結するヒンジ部と、
ツールセットの表示のためのユーザ操作が入力されると、前記マルチディスプレイ装置の動作状態に対応する複数のツールからなるツールセットを、前記第１ディスプレイ部及び前記第２ディスプレイ部の内の少なくとも一つの画面に表示し、前記ツールセットで一つのツールが選択されると選択されたツールに対応する動作を行う制御部とを有し、
前記ツールセットに表示されるツールの表示位置は可変的であることを特徴とするマルチディスプレイ装置。
【請求項２】
前記ツールセットは、前記マルチディスプレイ装置で実行中であるアプリケーションで使用可能なツールを含むことを特徴とする請求項１に記載のマルチディスプレイ装置。
【請求項３】
前記ツールセットは、前記アプリケーション専用に使われる専用ツール及び複数のアプリケーションで共通的に使用可能な共用ツールを含み、
前記制御部は、前記ツールセット内で前記専用ツールを前記共用ツールより優先的に配置することを特徴とする請求項２に記載のマルチディスプレイ装置。
【請求項４】
前記制御部は、前記ツールセットで前記実行中であるアプリケーションで使用可能なツールが選択されると、選択されたツールに対応するツールアイコンを表示し、ユーザ操作に従って前記ツールアイコンの表示位置を変更しながら前記ツールに対応する動作を行うことを特徴とする請求項２に記載のマルチディスプレイ装置。
【請求項５】
前記制御部は、前記選択されたツールに従属する第１下位レベルツールが存在する時、前記第１下位レベルツールを列挙した第１下位レベルツールセットを前記ツールセットの一側に表示し、
前記第１下位レベルツールセットで一つの第１下位レベルツールが選択され、前記選択された第１下位レベルツールに従属する第２下位レベルツールが存在する時、前記第２下位レベルツールを列挙した第２下位ツールセットを前記第１下位ツールセットの一側に表示することを特徴とする請求項１に記載のマルチディスプレイ装置。
【請求項６】
前記ツールセットの大きさ及び形態は、前記アプリケーションで使用可能なツールの個数に従って相違するよう調整されることを特徴とする請求項２に記載のマルチディスプレイ装置。
【請求項７】
前記ユーザ操作はタッチジェスチャーであり、
前記ツールセットは、前記タッチジェスチャーが終了した地点を基準に半円形態にツールを配列するグラフィックＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）であり、
前記第１下位ツールセットは、前記ツールセットの外側に表示される円形バー形状のグラフィックＵＩ又はボタン形状のグラフィックＵＩであることを特徴とする請求項５に記載のマルチディスプレイ装置。
【請求項８】
前記制御部は、ユーザの操作に従って、隠れた（ｈｉｄｄｅｎ）ツールを前記ツールセットに新しく表示可能なことを特徴とする請求項１に記載のマルチディスプレイ装置。
【請求項９】
前記ユーザ操作は、前記第１ボディの端領域から前記第１ディスプレイ部の方へ向かう第１方向、又は前記第２ボディの端領域から前記第２ディスプレイの方へ向かう第２方向に行われるタッチアンドドラッグジェスチャーであり、
前記制御部は、前記タッチアンドドラッグジェスチャーが行われた方向に従って前記第１ディスプレイ部又は前記第２ディスプレイ部に前記ツールセットを表示することを特徴とする請求項１に記載のマルチディスプレイ装置。
【請求項１０】
前記ユーザ操作は、前記第１ボディと前記第２ボディとの連結領域から前記第１ディスプレイ部の方へ向かう第１方向、又は前記第２ディスプレイ部の方へ向かう第２方向に行われるタッチアンドドラッグジェスチャーであり、
前記タッチアンドドラッグジェスチャーが行われた方向に従って前記第１ディスプレイ部又は前記第２ディスプレイ部に前記ツールセットを表示することを特徴とする請求項１に記載のマルチディスプレイ装置。
【請求項１１】
前記ツールセットは、前記マルチディスプレイ装置で実行可能なアプリケーションを選択するための少なくとも一つのアイコンを更に含み、
前記制御部は、前記ツールセットで前記アイコンが選択されると、前記選択されたアイコンに対応するアプリケーションを前記第１ディスプレイ部又は前記第２ディスプレイ部の任意の領域にて実行することを特徴とする請求項１に記載のマルチディスプレイ装置。
【請求項１２】
前記ツールセットは、ツールアップデート及びツール追加が可能であることを特徴とする請求項１に記載のマルチディスプレイ装置。
【請求項１３】
前記ユーザ操作は、外部オブジェクトによって前記第１ディスプレイ部又は前記第２ディスプレイ部をタッチする操作であり、
前記制御部は、前記タッチが行われると前記外部オブジェクトの種類に対応するツールを含む前記ツールセットをタッチ地点に表示し、前記ツールセットで選択されたツールの機能を前記外部オブジェクトに割り当てることを特徴とする請求項１に記載のディスプレイ装置。
【請求項１４】
前記制御部は、第１外部オブジェクトにパターニング道具が割り当てられ、第２外部オブジェクトに筆記道具が割り当てられ、前記第１又は第２ディスプレイ部の画面上で前記第１外部オブジェクト及び前記第２外部オブジェクトがタッチされる場合、タッチ地点にパターニング道具イメージ及び筆記道具イメージを表示し、
前記第２外部オブジェクトのタッチ地点が移動するとき、前記パターニング道具イメージ及び前記第２外部オブジェクトの移動経路に沿って描かれるラインを表示することを特徴とする請求項１３に記載のマルチディスプレイ装置。
【請求項１５】
第１ディスプレイ部を含む第１ボディと、第２ディスプレイ部を含む第２ボディとを含むマルチディスプレイ装置のツール提供方法において、
ツールセットの表示のためのユーザ操作が入力されると、前記マルチディスプレイ装置の動作状態に対応する複数のツールからなるツールセットを前記第１ディスプレイ部及び前記第２ディスプレイ部の内の少なくとも一つの画面に表示するステップと、
前記ツールセットから一つのツールが選択される時、選択されたツールに対応する動作を行うステップとを有し、
前記ツールセットに表示されるツールの表示位置は可変的であることを特徴とするマルチディスプレイ装置のツール提供方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、マルチディスプレイ装置及びそのツール提供方法に関し、特に、マルチディスプレイを通して作業画面を表示し、その作業画面上で使用可能なツールを提供するマルチディスプレイ装置及びそのツール提供方法に関する。
【背景技術】
【０００２】
近年、様々なタイプのディスプレイ装置が使用されている。
このようなディスプレイ装置には各種のアプリケーションが設置されユーザの選択に従って実行される。
ユーザは入力装置を用いてディスプレイ装置を制御することができる。特に、ユーザによって携帯できるように製造される携帯型電子機器は、その制限された大きさによってタッチスクリーン形態のユーザインターフェースを使用するディスプレイ装置として開発される場合が多い。これにより、ユーザがタッチできる多様な形態のグラフィックユーザインターフェース（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ：ＧＵＩ）が提供される。
【０００３】
グラフィックユーザインターフェースは、駆動中（ｒｕｎｎｉｎｇ）のアプリケーションの動作をユーザが直観的に知ることができ、またユーザが該当装置をより容易で素早く制御できるように最適化された形状で提供される。
しかし、従来のユーザインターフェースは、大体一つのディスプレイユニットを備えるディスプレイ装置のために生成されたものである。
これにより、複数個のディスプレイユニットを備えたマルチディスプレイ装置に適合したユーザインターフェース方法に対する研究は不足していることが事実であった。
【０００４】
特に、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｏｒ  Ｕｎｉｔ）及びソフトウェア技術が発達することによって、携帯機器は一つ或いは複数のアプリケーションを表示する複数の作業画面（ｔａｓｋ  ｓｃｒｅｅｎｓ）を提供することができるようになった。
複数の作業画面は、物理的或いはグラフィック的に区分される一つ或いはそれ以上のタッチスクリーンを通して提供されることができる。
従って、複数の作業画面を提供するマルチディスプレイ装置でユーザがより直観的で便利にマルチディスプレイ装置を使用することができる方法に対する必要性が出てきているという問題があった。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】米国特許第８３３０７３３号明細書
【特許文献２】米国特許第８４９００４７号明細書
【特許文献３】米国特許第７４７１８９０号明細書
【特許文献４】米国特許第８５４７３４７号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は上記従来のマルチディスプレイ装置における問題点に鑑みてなされたものであって、本発明の目的は、マルチディスプレイ装置でユーザがアプリケーションを直観的で便利に制御できるように多様なツールセットを提供することができるマルチディスプレイ装置及びそのツール提供方法を提供することにある。
【課題を解決するための手段】
【０００７】
上記目的を達成するためになされた本発明によるマルチディスプレイ装置は、マルチディスプレイ装置であって、第１ディスプレイ部を含む第１ボディと、第２ディスプレイ部を含む第２ボディと、前記第１及び前記第２ボディを連結するヒンジ部と、ツールセットの表示のためのユーザ操作が入力されると、前記マルチディスプレイ装置の動作状態に対応する複数のツールからなるツールセットを、前記第１ディスプレイ部及び前記第２ディスプレイ部の内の少なくとも一つの画面に表示し、前記ツールセットで一つのツールが選択されると選択されたツールに対応する動作を行う制御部とを有し、前記ツールセットに表示されるツールの表示位置は可変的であることを特徴とする。
【０００８】
前記ツールセットは、前記マルチディスプレイ装置で実行中であるアプリケーションで使用可能なツールを含むことが好ましい。
前記ツールセットは、前記アプリケーション専用に使われる専用ツール及び複数のアプリケーションで共通的に使用可能な共用ツールを含み、前記制御部は、前記ツールセット内で前記専用ツールを前記共用ツールより優先的に配置することが好ましい。
前記制御部は、前記ツールセットで前記実行中であるアプリケーションで使用可能なツールが選択されると、選択されたツールに対応するツールアイコンを表示し、ユーザ操作に従って前記ツールアイコンの表示位置を変更しながら前記ツールに対応する動作を行うことが好ましい。
前記制御部は、前記選択されたツールに従属する第１下位レベルツールが存在する時、前記第１下位レベルツールを列挙した第１下位レベルツールセットを前記ツールセットの一側に表示し、前記第１下位レベルツールセットで一つの第１下位レベルツールが選択され、前記選択された第１下位レベルツールに従属する第２下位レベルツールが存在する時、前記第２下位レベルツールを列挙した第２下位ツールセットを前記第１下位ツールセットの一側に表示することが好ましい。
前記ツールセットの大きさ及び形態は、前記アプリケーションで使用可能なツールの個数に従って相違するよう調整されることが好ましい。
前記ユーザ操作はタッチジェスチャーであり、前記ツールセットは、前記タッチジェスチャーが終了した地点を基準に半円形態にツールを配列するグラフィックＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）であり、前記第１下位ツールセットは、前記ツールセットの外側に表示される円形バー形状のグラフィックＵＩ又はボタン形状のグラフィックＵＩであることが好ましい。
前記制御部は、ユーザの操作に従って、隠れた（ｈｉｄｄｅｎ）ツールを前記ツールセットに新しく表示可能なことが好ましい。
【０００９】
前記ユーザ操作は、前記第１ボディの端領域から前記第１ディスプレイ部の方へ向かう第１方向、又は前記第２ボディの端領域から前記第２ディスプレイの方へ向かう第２方向に行われるタッチアンドドラッグジェスチャーであり、前記制御部は、前記タッチアンドドラッグジェスチャーが行われた方向に従って前記第１ディスプレイ部又は前記第２ディスプレイ部に前記ツールセットを表示することが好ましい。
前記ユーザ操作は、前記第１ボディと前記第２ボディとの連結領域から前記第１ディスプレイ部の方へ向かう第１方向、又は前記第２ディスプレイ部の方へ向かう第２方向に行われるタッチアンドドラッグジェスチャーであり、前記タッチアンドドラッグジェスチャーが行われた方向に従って前記第１ディスプレイ部又は前記第２ディスプレイ部に前記ツールセットを表示することが好ましい。
前記ツールセットは、前記マルチディスプレイ装置で実行可能なアプリケーションを選択するための少なくとも一つのアイコンを更に含み、前記制御部は、前記ツールセットで前記アイコンが選択されると、前記選択されたアイコンに対応するアプリケーションを前記第１ディスプレイ部又は前記第２ディスプレイ部の任意の領域にて実行することが好ましい。
前記ツールセットは、ツールアップデート及びツール追加が可能であることが好ましい。
前記ユーザ操作は、外部オブジェクトによって前記第１ディスプレイ部又は前記第２ディスプレイ部をタッチする操作であり、前記制御部は、前記タッチが行われると前記外部オブジェクトの種類に対応するツールを含む前記ツールセットをタッチ地点に表示し、前記ツールセットで選択されたツールの機能を前記外部オブジェクトに割り当てることが好ましい。
前記制御部は、第１外部オブジェクトにパターニング道具が割り当てられ、第２外部オブジェクトに筆記道具が割り当てられ、前記第１又は第２ディスプレイ部の画面上で前記第１外部オブジェクト及び前記第２外部オブジェクトがタッチされる場合、タッチ地点にパターニング道具イメージ及び筆記道具イメージを表示し、前記第２外部オブジェクトのタッチ地点が移動するとき、前記パターニング道具イメージ及び前記第２外部オブジェクトの移動経路に沿って描かれるラインを表示することが好ましい。
【００１０】
上記目的を達成するためになされた本発明によるマルチディスプレイ装置のツール提供方法は、第１ディスプレイ部を含む第１ボディと、第２ディスプレイ部を含む第２ボディとを含むマルチディスプレイ装置のツール提供方法において、ツールセットの表示のためのユーザ操作が入力されると、前記マルチディスプレイ装置の動作状態に対応する複数のツールからなるツールセットを前記第１ディスプレイ部及び前記第２ディスプレイ部の内の少なくとも一つの画面に表示するステップと、前記ツールセットから一つのツールが選択される時、選択されたツールに対応する動作を行うステップとを有し、前記ツールセットに表示されるツールの表示位置は可変的であることを特徴とする。
【発明の効果】
【００１１】
本発明に係るマルチディスプレイ装置及びそのツール提供方法によれば、ユーザがアプリケーションを直観的で便利に制御できるように多様なツールセットを提供することによりユーザ便利性が向上するという効果を有する。
【図面の簡単な説明】
【００１２】
【図１】本発明の一実施形態にかかるマルチディスプレイ装置の構成を示すブロック図である。
【図２】本発明の一実施形態にかかるマルチディスプレイ装置とスタイラスペンの構成を示す概略的なブロック図である。
【図３】本発明の一実施形態にかかるマルチディスプレイ装置のより詳細な構成を示すブロック図である。
【図４】本発明の一実施形態にかかるマルチディスプレイ装置に含まれる制御部の具体的な構成の一例を示すブロック図である。
【図５】本発明の一実施形態にかかるマルチディスプレイ装置のシステム階層構造を説明するための図である。
【図６】本発明の一実施形態にかかるマルチディスプレイ装置のディスプレイ部のハードウェア構成の一例を説明するためのブロック図である。
【図７】本発明の一実施形態にかかるマルチディスプレイ装置に適用可能なディスプレイ部の断面を説明するための断面図である。
【図８】本発明の一実施形態にかかるマルチディスプレイ装置のディスプレイ駆動部を示すブロック図である。
【図９】本発明の他の実施形態にかかるマルチディスプレイ装置のディスプレイ駆動部を示すブロック図である。
【図１０】本発明の一実施形態にかかるマルチディスプレイ装置の近接タッチを検知する方法の一例を説明するための図である。
【図１１】入力ペンの近接タッチを検知する方法の一例を説明するための図である。
【図１２】本発明の一実施形態にかかるマルチディスプレイ装置の詳細を示す斜視図である。
【図１３】本発明の一実施形態にかかるマルチディスプレイ装置の第１ボディと第２ボディとの間の相対角度によるスクリーンモードを示す図である。
【図１４】本発明の一実施形態にかかるマルチディスプレイ装置の第１ボディと第２ボディとの間の相対角度によるスクリーンモードを示す図である。
【図１５】本発明の一実施形態にかかるマルチディスプレイ装置の第１ボディと第２ボディとの間の相対角度によるスクリーンモードを示す図である。
【図１６】本発明の一実施形態にかかるマルチディスプレイ装置の第１ボディと第２ボディとの間の相対角度によるスクリーンモードを示す図である。
【図１７】本発明の一実施形態にかかるマルチディスプレイ装置の第１ボディと第２ボディとの間の相対角度によるスクリーンモードを示す図である。
【図１８】本発明の一実施形態にかかるマルチディスプレイ装置のカメラ配置構成の例を説明するための図である。
【図１９】本発明の一実施形態にかかるマルチディスプレイ装置のカメラ配置構成の例を説明するための図である。
【図２０】本発明の一実施形態にかかるツールセットの活性化を説明するための図である。
【図２１】本発明の一実施形態にかかるツールセットの活性化を説明するための図である。
【図２２】本発明の一実施形態にかかる下位レベルツールセットの活性化を説明するための図である。
【図２３】本発明の一実施形態にかかる下位レベルツールセットの活性化を説明するための図である。
【図２４】本発明の一実施形態にかかる下位レベルツールセットの終了を説明するための図である。
【図２５】本発明の一実施形態にかかる下位レベルツールセットの終了を説明するための図である。
【図２６】本発明の一実施形態にかかるツールセットの終了を説明するための図である。
【図２７】本発明の一実施形態にかかるツールセットの終了を説明するための図である。
【図２８】マルチディスプレイ装置のスクリーンモード別ツールセットの実行を説明するための図である。
【図２９】マルチディスプレイ装置のスクリーンモード別ツールセットの実行を説明するための図である。
【図３０】マルチディスプレイ装置のスクリーンモード別ツールセットの実行を説明するための図である。
【図３１】本発明の多様な実施形態にかかる第１ツールセットを説明するための図である。
【図３２】本発明の多様な実施形態にかかる第１ツールセットの下位レベルツールセットである第２ツールセットを説明するための図である。
【図３３】本発明の多様な実施形態にかかる第２ツールセットの下位レベルツールセットである第３ツールセット及びツールの実行を説明するための図である。
【図３４】本発明の一実施形態にかかるツールセットＵＩのフローを説明するための図である。
【図３５】本発明の一実施形態にかかる単一ディスプレイベースのアプリケーションを駆動するときにツールセット実行を説明するための図である。
【図３６】本発明の一実施形態にかかるデュアルディスプレイベースのアプリケーションを駆動するときにツールセット実行を説明するための図である。
【図３７】本発明の一実施形態にかかるツールセットドック（Ｄｏｃｋ）を説明するための図である。
【図３８】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図３９】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図４０】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図４１】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図４２】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図４３】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図４４】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明する図である。
【図４５】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図４６】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図４７】本発明の一実施形態にかかる各々のアプリケーションに対応するツールセットを説明するための図である。
【図４８】本発明の一実施形態にかかるスタイラスペンの構成の一例を示す図である。
【図４９】本発明の一実施形態にかかるスタイラスペンを利用したツールセットの活性化及び下位レベルツールセットの拡張を説明するための図である。
【図５０】本発明の一実施形態にかかるスタイラスペンを利用したツールセットの終了を説明するための図である。
【図５１】本発明の一実施形態にかかる近接センサを利用したツールセット実行を説明するための図である。
【図５２】本発明の一実施形態にかかる近接センサを利用したツールセット実行を説明するための図である。
【図５３】本発明の一実施形態にかかる手とペンのマルチタッチに対応するツールセットの提供を説明するための図である。
【図５４】本発明の一実施形態にかかる手とペンのマルチタッチに対応するツール利用方法を説明するための図である。
【図５５】本発明の一実施形態にかかるツールセットのアップデート動作を説明するための図である。
【図５６】本発明の一実施形態にかかるツールセットの配置を説明するための図である。
【図５７】本発明の一実施形態にかかる第２ディスプレイ部全体にツールセットが配置された場合ツールセット実行を説明するための図である。
【図５８】本発明の一実施形態にかかるマルチディスプレイ装置のツール提供動作を説明するためのフローチャートである。
【図５９】本発明の一実施形態にかかるマルチディスプレイ装置のツール提供動作を説明するためのフローチャートである。
【発明を実施するための形態】
【００１３】
次に、本発明に係るマルチディスプレイ装置及びそのツール提供方法を実施するための形態の具体例を図面を参照しながら説明する。
【００１４】
本発明を説明するにおいて、関連する公知機能或いは構成に対する具体的な説明が本発明の要旨を不明にすると判断された場合その詳細な説明は省略する。
そして、後述する用語は本発明での機能を考慮して定義された用語であり、これはユーザ、運用者の意図或いは慣例によって異なってもよい。そのため、その定義は本明細書の全般にかかった内容に基づいて定められるべきである。
【００１５】
マルチディスプレイ装置は、一つ或いはそれ以上のタッチスクリーンで構成されたディスプレイを備え、アプリケーションを実行したりコンテンツを表示できるように構成される装置を意味する。
例えば、タブレット（Ｔａｂｌｅｔ）パーソナルコンピュータ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ：ＰＣ）、ノートパソコン、ラップトップコンピュータ、携帯用マルチメディア再生装置（Ｐｏｒｔａｂｌｅ  Ｍｕｌｔｉｍｅｄｉａ  Ｐｌａｙｅｒ：ＰＭＰ）、個人情報端末機（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ：ＰＤＡ）、スマートフォン（Ｓｍａｒｔ  Ｐｈｏｎｅ）、携帯、デジタルフレームなどで実現することができる。
【００１６】
以下では、セルラーフォン或いはスマートフォンで構成されるマルチディスプレイ装置について本発明の実施形態を説明するが、本発明がこのような構成に限定されないことに留意すべきである。
【００１７】
図１は、本発明の一実施形態にかかるマルチディスプレイ装置１００の構成を示すブロック図である。
図１を参照すると、マルチディスプレイ装置１００は、第１ボディ２、第２ボディ４、及びヒンジ部１８５を含む。
第１ボディ２は、制御部１３０、第１ディスプレイ部１９０ａを含む一つの独立的な外観構成を意味し、第２ボディ４は、第２ディスプレイ部１９０ｂを含むまた別の独立的な外観構成を意味する。
【００１８】
図１では、制御部１３０が第１ボディ２に設けられる場合を示したが、制御部１３０は第２ボディ４に含まれてもよく、複数個で設けられ第１ボディ２及び第２ボディ４にそれぞれ含まれてもよい。第１ボディ２及び第２ボディ４に示した構成以外に多様な回路やチップ、信号線などが更に含まれ得るが、説明の便宜上、細部的な構成は図示を省略する。
【００１９】
第１ボディ２と第２ボディ４は、ヒンジ部１８５によって連結される。
ヒンジ部１８５は、第１ボディ２及び第２ボディ４がヒンジ部１８５を基準に回転可能のように第１ボディ２と第２ボディ４を支持する。
第１ボディ２及び第２ボディ４の回転角度はヒンジ部１８５の形状によって多様に決定されてもよい。
【００２０】
例えば、第１ボディ２及び第２ボディ４の内の少なくとも一つが回転するようになると第１及び第２ディスプレイ部１９０ａ、１９０ｂが相接する形態にクローズすることもでき、その反対方向に完全に返って第１及び第２ディスプレイ部１９０ａ、１９０ｂの背面が相接する形態にオープンすることもできる。
又は、ヒンジ部１８５の構成によっては１８０度に完全に広がる形態にオープンさせることもできる。ヒンジ部１８５を基準に第１ボディ２及び第２ボディ４が広がる形態については後述する多様な実施形態において具体的に説明する。
【００２１】
第１、第２ディスプレイ部１９０ａ、１９０ｂは、制御部１３０の制御によってマルチメディアコンテンツ再生画面、アプリケーション実行画面、アイコンを含むデスクトップ、ウェブブラウジング画面などを表示する。
第１、第２ディスプレイ部１９０ａ、１９０ｂは、タッチスクリーンで実現してもよい。これにより、ユーザの身体（例えば、親指を含む指）又は検知可能な入力手段（例えば、スタイラスペン）などが第１、第２ディスプレイ部１９０ａ、１９０ｂにタッチされると、制御部１３０はそのタッチ地点の座標値とタッチジェスチャーの形態に応じて多様な動作を行うことができる。
【００２２】
タッチジェスチャーには、単純タッチ、近接、タッチアンドドラッグ、ダブルタッチ、フリック、ラギング（ｒｕｇｇｉｎｇ）などのような多様なジェスチャーが含まれる。
ユーザはタッチジェスチャーを利用してマルチディスプレイ装置の動作を制御することができる。
その他にも、マルチディスプレイ装置にマイク、カメラ、ボタンなどが備えられている場合には、ユーザはマイクを通して音声コマンドを入力する音声操作、カメラを利用してモーションジェスチャーを入力するモーション操作、ボタン操作などのような多様なユーザ操作を利用して、マルチディスプレイ装置の動作を制御することができる。
【００２３】
このようなユーザ操作の形態とそれに対応する制御動作については、マルチディスプレイ装置の製作者或いはユーザが予め設定しておくことができる。
制御部１３０は、予め定義（設定）されたユーザ操作が入力されると、第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂを用いてユーザ操作に対応する動作を行う。
【００２４】
例えば、ツールセット表示動作を行うようにマッチングされたユーザ操作が入力されると、制御部１３０はマルチディスプレイ装置の動作状態に対応するツールセットを第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂの内の少なくとも一つに表示する。
ツールセットには多様なツールに対するアイコンや名称などのような識別子が表示することができる。
【００２５】
ツールとは、現在実行中の動作に関連してユーザが使用することができる多様な機能（ｆｕｎｃｔｉｏｎ）を意味する。
一例として、文書作成、閲覧、編集などが可能な文書作成プログラムでは、フォト調整、太さ調整、ペン、消しゴム、ルーラー（ｒｕｌｅｒ）などのような多様なツールが使用され得る。
従って、文書作成プログラムが実行中である状態でツールセット表示動作を行うように定められたユーザ操作が入力されると、制御部１３０は上述したツールを含むツールセットを第１及び第２ディスプレイ部１９０ａ、１９０ｂの内の少なくとも一つの画面上に表示する。
【００２６】
他の例として、各種のアイコンが含まれるホーム画面（ｈｏｍｅ  ｓｃｒｅｅｎ）が表示された状態でツールセット表示動作を行うためのユーザ操作が入力されると、ホーム画面上にアイコンを追加するためのツール、ウィジェット実行のためのツール、背景イメージ変更のためのツールなどを含むツールセットが表示させることもできる。
このようにツールセットは、マルチディスプレイ装置の現在動作状態によって相違したツールで構成させることができる。
【００２７】
ユーザはツールセットで少なくとも一つのツールを選択することができる。
ツールセットでツールが選択されると、制御部１３０は選択されたツールに対応する動作を行う。
上述した例で、ツールセット内のペンが選択された場合なら、その後はユーザがタッチして移動する軌跡に従ってペンによる線が描かれる。
【００２８】
このようなツールセットは、ユーザの操作に応じてツールセットに含まれるツールを可変的に表示することができる。
具体的には、ツールセットに含まれているツールの表示位置、表示可否はいつも固定されておらず、ユーザの操作によって表示される位置又は表示可否を調整することができる。一実施例として、表示されているツールセットのツールをユーザ操作によってその位置を変更することができる。
【００２９】
また別の実施例として、画面に表示されないツールセットの可変領域に配置されたツールをユーザのタッチ操作（一例として、ダイアルを回すようなドラッグジェスチャー）によってディスプレイ部の画面に表示されるツールセットの表示領域に表示することができる。
これについては、後述する図３１において具体的に説明することにする。
【００３０】
なお、ツールセットは必ず固定されるものではなく、アップデートによって変更、追加、削除などが可能であり、ツールを表示するためのアイコンや名称が変更されることもできる。
ツールアップデートに対する説明は、図５５において詳細に説明する。
【００３１】
以下では、制御部１３０の多様な制御動作について説明する。
ツールセットは、マルチディスプレイ装置１００で実行中であるアプリケーションで使用可能なツールを含む。
この場合、ツールセットは、専用ツール及び共用ツールを含むことができる。
専用ツールとは、マルチディスプレイ装置で現在実行中のアプリケーションでのみ使用可能なツールを意味する。一方、共用ツールとは、現在実行中のアプリケーションだけでなく、複数のアプリケーションで共通的に使用可能なツールを意味する。
【００３２】
制御部１３０は、ツールセットで専用ツールを共用ツールより優先的に配置して表示することができる。
例えば、カメラアプリケーションが実行中の状態であれば、専用ツールはフラッシュ設定、前後カメラ転換、動画撮影転換、焦点モード選定、タイマー設定などのようにカメラアプリケーションでのみ使用するツールで構成することができる。一方、共用ツールはメッセージ送信、デバイス環境設定、電話通話などのように、カメラアプリケーションとは関係なく実行可能なツールであることができる。
【００３３】
マルチディスプレイ装置１００は、実行中のアプリケーションの専用ツールを優先的に表示し、実行中のアプリケーションのツールを容易に利用できるようにする、一方、ツールの種類が多い場合、その性格によって上位レベルツールと下位レベルツールとに区分することができる。
下位レベルツールとは、上位レベルツールに従属されるサブツールを意味する。例えば、筆記道具を表すツールが上位レベルツールであれば、鉛筆、ペン、筆、クレパスなどのような具体的な筆記道具は下位レベルツールになることができる。最初表示されるツールセットに含まれるツールは上位レベルツールを意味することができる。
【００３４】
制御部１３０は、選択されたツールに従属した第１下位レベルツールが存在すると、第１下位レベルツールを列挙した第１下位レベルツールセットをツールセットの一側に表示することができる。
第１下位レベルツールセットで一つの第１下位レベルツールが選択され、選択された第１下位レベルツールに従属する第２下位レベルツールが存在すると、第２下位レベルツールを列挙した第２下位レベルツールセットを第１下位レベルツールセットの一側に表示することができる。
【００３５】
上述した例において、筆記道具ツールが最上位ツールであり、鉛筆、ペン、筆、クレパスなどのようなツールが筆記道具ツールに従属する第１下位レベルツールとしたら、これらのうちペンについては互いに異なる太さの様々なペンがまた第２下位レベルツールとして提供することができる。
ツールセットの大きさ及び形態は実行中のアプリケーションで使用可能なツールの個数に応じて相違に調整することができる。
【００３６】
一方、本発明の多様な実施形態によれば、ツールセットはタッチジェスチャーが終了した地点を基準に半円形態にツールを列挙したグラフィックＵＩでもよく、下位レベルのツールセットは上位レベルのツールセットの枠の外側に表示される円形バー形状のグラフィックＵＩ又はボタン形状のグラフィックＵＩでもよい。
この場合、ツールセット及び下位レベルのツールセットの内の少なくとも一つはユーザ操作に従って新たに表示される（隠れたツール）（ｈｉｄｄｅｎ  ｔｏｏｌｓ）を表示することができる。
【００３７】
隠れたツールとは、ディスプレイ上で表示されないツールセットの可変領域に配置されたツールを意味する。
基本的に多く使われるツールをツールセットの表示領域に配置することができ、その以外のツールを可変領域に配置することができる。
ツールセットの可変領域に配置される隠れたツールはツールセットアップデートを通して設置することができる。隠れたツールに対する具体的な説明は、図３１において後述する。
【００３８】
上述した説明ではツールセットＵＩを半円形態に説明したが、これに限定されず、水玉ＵＩ、カードポケットＵＩ、四角メニューバーＵＩ、及び四角グラフＵＩなどの形態で実現することができる。
ツールセットＵＩについては図３１〜図３３において詳細に説明する。
【００３９】
以下では、ツールセットを呼び出すユーザ操作による制御部１３０の動作について説明する。
本発明の一実施形態にかかるユーザ操作は、第１ボディ２及び第２ボディ４の連結領域をタッチして第１ディスプレイ部１９０ａの方へ向かう第１方向又は第２ディスプレイ部１９０ｂの方へ向かう第２方向にドラッギングするタッチアンドドラッグジェスチャーでもよい。
又は、第１ボディ２の端領域をタッチして第１ディスプレイ部１９０ａの方へ向かう第１方向にドラッギングするか、或いは第２ボディ４の端領域をタッチして第２ディスプレイ部１９０ｂの方へ向かう第２方向にドラッギングするタッチアンドドラッグジェスチャーでもよい。
制御部１３０は、タッチアンドドラッグジェスチャーが行われた方向やその位置に従って第１ディスプレイ部１９０ａ又は第２ディスプレイ部１９０ｂにツールセットを表示することができる。
【００４０】
また、本発明の多様な実施形態によれば、ツールセットはマルチディスプレイ装置１００で実行可能なアプリケーションを選択するための少なくとも一つのアイコンを更に含み、制御部１３０は、ツールセントでアイコンが選択されると、選択されたアイコンに対応するアプリケーションを第１ディスプレイ部１９０ａ又は第２ディスプレイ部１９０ｂの任意の領域に実行することができる。
【００４１】
また、本発明の多様な実施形態にかかる制御部１３０は、第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂの内の少なくとも一つにツール領域を設け、ツールセットに表示されたツールの中でユーザが選択したツールをツール領域に移動させて表示することができる。
上述した実施例については、図３７の早いツールセットドック（Ｄｏｃｋ）と共に具体的に説明する。
【００４２】
一方、本発明の多様な実施形態にかかる制御部１３０は、ユーザ操作が、外部オブジェクトが第１ディスプレイ部１９０ａ又は第２ディスプレイ部１９０ｂをタッチする操作である場合、タッチが行われると外部オブジェクトの種類に対応するツールを含むツールセットをタッチ地点に表示し、ツールセットで選択されたツールの機能を外部オブジェクトに割り当てることができる。
【００４３】
この場合、第１外部オブジェクトにパターニング道具が割り当てられ、第２外部オブジェクトに筆記道具が割り当てられた場合、第１又は第２ディスプレイ部１９０ａ、１９０ｂの画面上で第１外部オブジェクト及び第２外部オブジェクトがタッチされるとタッチ地点にパターニング道具イメージ及び筆記道具イメージを表示し、第２外部オブジェクトのタッチ地点が移動されるとパターニング道具イメージ及び第２外部オブジェクトの移動経路に沿って描かれるラインを表示する。
具体的に、パターニング道具の例として、多様な模様の直線定規、三角定規、波型定規、分度器、円形板などを挙げることができ、筆記道具の例として、多様な色を表示する鉛筆、ペン、筆、クレパスなどを挙げることができる。
上述した実施形態については図５３、図５４において具体的に説明する。
【００４４】
一方、発明の多様な実施形態にかかる制御部１３０は、スタイラスペンからツールセットを表示するための制御信号が入力されると、ユーザ操作が行われたものと判断することができる。
ツールセット表示に対する上述した多様な実施形態については後述する部分で図面と共に具体的に説明する。
【００４５】
図２は、本発明の一実施形態にかかるマルチディスプレイ装置１００とスタイラスペン４８００の構成を示した概略的なブロック図である。
図２を参照すると、マルチディスプレイ装置１００は、第１及び第２ディスプレイ部１９０ａ、１９０ｂ、ヒンジ部１８５、制御部１３０及び通信部１１０を含むことができ、スタイラスペン４８００から外部入力を受けることができる。
【００４６】
第１及び第２ディスプレイ部１９０ａ、１９０ｂ、ヒンジ部１８５、制御部１３０の動作については、図１で具体的に説明したため、重複説明は省略する。
通信部１１０は、スタイラスペン４８００からマルチディスプレイ装置１００を操作するための制御信号が入力される。
スタイラスペン４８００とは、筆記具形状でディスプレイ装置を操作するための補助器具を意味する。スタイラスペン４８００はマルチディスプレイ装置１００の通信部１１０にツールセットを表示するための制御信号を伝送する。スタイラスペン４８００に対する一般的な機能は図４８に対する説明部分で記述する。
【００４７】
〔マルチディスプレイ装置の一般的な構成〕
図３は、本発明の一実施形態にかかるマルチディスプレイ装置のより詳細な構成を示すブロック図である。
図３を参照すると、本発明の一実施形態であるマルチディスプレイ装置１００は、通信部１１０、マルチメディア部１２０、制御部１３０、撮像部１４０、センサ部１５０、入／出力部１６０、保存部１７０、電源部１８０、及び第１ディスプレイ部１９０ａ、第２ディスプレイ部１９０ｂを含む。
【００４８】
通信部１１０は、各種の有線及び／又は無線通信方式を用いて外部装置と情報を送受信する構成である。
ここで、「外部装置」は、他の装置、携帯、スマートフォン、タブレットＰＣ（Ｐｅｒｓｏｎａｌ）、コンピューターサーバ及びデジタルＴＶの内の少なくとも一つを含むことができ、これらの装置は通信ネットワークを通してマルチディスプレイ装置１００と接続することもできる。
【００４９】
通信部１１０は、セルラー通信モジュール１１１、無線ＬＡＮモジュール１１２、近距離通信モジュール１１３、ＧＰＳ通信モジュール１１５、放送通信モジュール１１６などの無線通信モジュールと、ＨＤＭＩ（登録商標）（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ）、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）、ＩＥＥＥ（Ｉｎｓｔｉｔｕｔｅ  ｏｆ  Ｅｌｅｃｔｒｉｃａｌ  ａｎｄ  Ｅｌｅｃｔｒｏｎｉｃｓ  Ｅｎｇｉｎｅｅｒｓ）１３９４などの有線通信モジュールのうち少なくとも一つを含むコネクタ１１４、ＧＰＳモジュール１１５、放送通信モジュール１１６を含むことができる。
【００５０】
セルラー通信モジュール１１１は、制御部１３０の制御に従ってセルラー通信プロトコールに従う無線アクセス技術を使用し、マルチディスプレイ装置１００が少なくとも一つ又は複数のアンテナ（不図示）を介して外部装置（特にセルラーシステムの基地局）と接続されるようにする。
なお、セルラー通信モジュール１１１は、携帯機器１００に入力される電話番号を有する携帯、スマートフォン、タブレットＰＣ又は他の装置のような通信可能な他の機器と、音声通話、画像通話、短文（Ｓｈｏｒｔ  Ｍｅｓｓａｇｉｎｇ  Ｓｅｒｖｉｃｅ：ＳＭＳ）メッセージ又はマルチメディア（Ｍｕｌｔｉｍｅｄｉａ  Ｍｅｓｓａｇｉｎｇ  Ｓｅｒｖｉｃｅ：ＭＭＳ）メッセージを含む無線信号を送／受信する。
【００５１】
無線ＬＡＮモジュール１１２は、制御部１３０の制御に従って予め設定された範囲内に存在する無線ＡＰ（Ａｃｃｅｓｓ  Ｐｏｉｎｔ）（不図示）に接続してインターネットと接続する構成である。
無線ＬＡＮモジュール１１２は米国電気電子学会（ＩＥＥＥ）の無線ＬＡＮ規格（ＩＥＥＥ８０２．１１ｘ）をサポートする。
【００５２】
近距離通信モジュール１１３は、制御部１３０の制御に従ってマルチディスプレイ装置１００と外部機器との間に無線で近距離通信を行う構成である。
近距離通信モジュール１１３は、ブルートゥース（登録商標）モジュール、赤外線通信モジュール、ＮＦＣ（Ｎｅａｒ  Ｆｉｅｌｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ）モジュール、Ｗｉ−Ｆｉモジュール、ジグビー（Ｚｉｇｂｅｅ（登録商標））モジュールの内の少なくとも一つを含むことができる。
【００５３】
ブルートゥース（登録商標）モジュールは、ＩＳＭ（Ｉｎｄｕｓｔｒｉａｌ  Ｓｃｉｅｎｔｉｆｉｃ  ａｎｄ  Ｍｅｄｉｃａｌ）２４００ＭＨｚ以後２ＭＨｚ、２４８３．５ＭＨｚ以前３．５ＭＨｚまでの範囲を除いた２４０２〜２４８０ＭＨｚ、全部で７９個のチャネルを用いてデータパケットの形態でデータストリームを伝送する。
複数のチャネルを特定パターンに従って早く移動してパケット（データ）を少しずつ伝送する周波数ホッピング（Ｆｒｅｑｕｅｎｃｙ  Ｈｏｐｐｉｎｇ）方式を利用する場合、７９個チャネルを１秒当たり１６００回ホッピングすることができる。
【００５４】
赤外線通信モジュールは、赤外線を用いてデータを伝送する。
赤外線は可視光線に比べて波長が長いため空気中に漂う微粒子を円滑に通過することができ、特に電波に比べて広い帯域幅を容易に確保することができ高速でデータを伝送することができるという長所がある。ＩｒＤＡ（Ｉｎｆｒａｒｅｄ  ｄａｔａ  ａｓｓｏｃｉａｔｉｏｎ）ＤＡＴＡ１．４規格に従う場合、マルチディスプレイ装置１００は外部装置と１メートル以内の距離で最大１６Ｍｂｐｓの速度で無線データ通信が可能となる。
【００５５】
ＮＦＣ通信モジュールは、１３．５６Ｍｚ周波数帯域を使用する非接触式近距離無線通信方式で通信する。
ＮＦＣ技術を利用すると、複数の端末機が約１０ｃｍ以内のように近距離で接近したときデータが送受信することができる。この場合、外部装置はＮＦＣタグを含むモジュールを含むことができ、マルチディスプレイ装置１００はＮＦＣリーダーを含み、タギングが行われる場合、データが外部装置からマルチディスプレイ装置１００に伝送される。
情報の送受信のために外部装置とマルチディスプレイ装置１００のそれぞれがＮＦＣタグ及びＮＦＣリーダーを含むこともできる。
【００５６】
Ｗｉ−Ｆｉモジュールは、ＩＥＥＥ８０２．１１技術規格に従う近距離通信を行う。
ＩＥＥＥ８０２．１１ｎ規格を従う場合、最大１５０Ｍｂｐｓでデータ伝送が可能であり、複数個のアンテナを使って出力を上げるＭＩＭＯ（Ｍｕｌｔｉｐｌｅ−ｉｎｐｕｔ  ａｎｄ  Ｍｕｌｔｉｐｌｅ−ｏｕｔｐｕｔ）技術を適用すると、最大６００Ｍｂｐｓのデータ伝送が可能である。特に、Ｗｉ−Ｆｉダイレクト方式の場合、上記のような速度を保障しながら別途のＡＰなしにも直接通信が可能である。
【００５７】
通信部１１０は、ジグビー（Ｚｉｇｂｅｅ（登録商標））モジュールを含むこともできる。
ジグビーとは、ＩＥＥＥ８０２．１５．４技術規格に従う近距離通信方式である、２５０Ｋｂｐｓ、２０Ｋｂｐｓ、４０Ｋｂｐｓの伝送速度を有する。この方式は比較的に単純なデータ伝送に適合している。
このように、通信部１１０は上述した多様な近距離通信方式によって実現することができ、必要に応じて本明細書に言及されてない別の通信技術を採用することができる。
【００５８】
コネクタ１１４は、ＵＳＢ２．０、ＵＳＢ３．０、ＨＤＭＩ（登録商標）、ＩＥＥＥ１３９４など多様な装置とのインターフェースを提供する構成である。
コネクタ１１４は、マルチディスプレイ装置１００と外部装置又は電源ソースとを接続するためにインターフェースとして利用される。
制御部１３０の制御に従ってコネクタ１１４に接続された有線ケーブルを通してマルチディスプレイ装置１００の保存部１７０に保存されたデータを外部装置に伝送するか又は外部装置からデータを受信することができる。コネクタ１１４に接続された有線ケーブルを通して電源ソースから電源が入力されるか、バッテリ（不図示）を充電することができる。
【００５９】
ＧＰＳモジュール１１５は、地球軌道上にある複数のＧＰＳ衛星（不図示）から電波を受信し、ＧＰＳ衛星（不図示）から携帯機器１００までの電波到達時間（Ｔｉｍｅ  ｏｆ  Ａｒｒｉｖａｌ）及びＧＰＳパラメータを用いて携帯機器１００の位置を算出することができる。
【００６０】
放送通信モジュール１１６は、制御部１３０の制御に従って放送通信アンテナ（不図示）を通して放送局から送出される放送信号（例えば、ＴＶ放送信号、ラジオ放送信号又はデータ放送信号）及び放送付加情報（例えば、ＥＰＳ（Ｅｌｅｃｔｒｉｃ  Ｐｒｏｇａｍ  Ｇｕｉｄｅ）又はＥＳＧ（Ｅｌｅｃｔｒｉｃ  Ｓｅｒｖｉｃｅ  Ｇｕｉｄｅ））を受信することができる。
【００６１】
マルチメディア部１２０は、動画コンテンツやオーディオコンテンツ、その他の多様なマルチメディアコンテンツを再生するための構成要素である。
マルチメディア部１２０は、パーサー（ｐａｒｓｅｒ）やコデックなどを用いてマルチメディアコンテンツを処理し、コンテンツ再生を行う。
マルチメディア部１２０は、オーディオ再生モジュール１２１及びビデオ再生モジュール１２２を含む。
【００６２】
オーディオ再生モジュール１２１は、制御部１３０の制御に従って保存されたり又は受信されるデジタルオーディオファイル（例えば、ファイル拡張子がｍｐ３、ｗｍａ、ｏｇｇ又はｗａｖであるファイル）を再生することができる。
ビデオ再生モジュール１２２は、制御部１３０の制御に従って保存されたり又は受信されるデジタル動画ファイル（例えば、ファイル拡張子がｍｐｅｇ、ｍｐｇ、ｍｐ４、ａｖｉ、ｍｏｖ、又はｍｋｖであるファイル）を再生することができる。
ビデオ再生モジュール１２２は、デジタルビデオファイルを再生することができるように多様な形式のコデックをサポートする。即ち、再生しようとするビデオファイルのエンコーディング方式に対応するコデックを利用してビデオデータをデコーディングする。
【００６３】
制御部１３０は、通信部１１０、マルチメディア部１２０、撮像部１４０、センサ部１５０、入／出力部１６０、保存部１７０、電源部１８０、及び第１、２ディスプレイ部１９０ａ、１９０ｂを制御する構成である。
制御部１３０はハードウェアにクロックを提供し、制御信号を送出するＣＰＵと、プロセスを一時的に、又は半永久的に保存するためのメモリ、グラフィック処理のためのＧＰＵ、メモリとＣＰＵ及びＧＰＵの間にデータ伝達のためのシステムバスを含む。
なお、ハードウェア構成を駆動するためのオペレーションシステム（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ：ＯＳ）、オペレーションシステム上でユーザインターフェースを提供してフレームワークで伝達するアプリケーションを含む。
制御部１３０の各構成については後で詳細に説明する。
【００６４】
撮像部１４０は、図３に示すように第１カメラ１４１及び第２カメラ１４２のうち少なくとも一つを含むことができる。只、図３では第１カメラ１４１と第２カメラ１４２のみを示したが、実施形態によって追加的なカメラを含むことができる。
各カメラは、シャッター（不図示）、レンズ部（図２３の５１１０参照）、絞り（不図示）及びＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）イメージセンサ（不図示）及びＡＤＣ（Ａｎａｌｏｇ／Ｄｏｇｉｔａｌ  Ｃｏｎｖｅｒｔｅｒ）を含む。
【００６５】
シャッターは、絞りと共に露光する光の量を調節する器具である。
レンズ部は、外部光源から光を受けて画像を処理する。このとき、絞りは開閉程度に応じて入射される光の量（光量）を調節する。
ＣＣＤイメージセンサは、レンズ部を通して入力される光量を蓄積し、その蓄積された光量に応じてレンズ部で撮像された画像を垂直同期信号に合わせて出力する。画像取得は被写体から反射される光を電気的な信号に変換させるＣＣＤイメージセンサによって行われる。
【００６６】
ＣＣＤイメージセンサを利用してカラー画像を得るためにはカラーフィルタを必要とし、ＣＦＡ（Ｃｏｌｏｒ  ｆｉｌｔｅｒ  ａｒｒａｙ）というフィルタを採用することができる。ＣＦＡは、一ピクセル毎に一カラーを表す光のみを通過させ規則的に配列された構造を持っており、配列構造によっていろいろな形態を持っている。ＡＤＣは、ＣＣＤイメージセンサから出力されるアナログ画像信号をデジタル信号に変換する。このような構成は一例に過ぎず、各カメラの構成は多様に変形されてもよい。例えば、各カメラはＣＣＤイメージセンサではなくＣＭＯＳ（Ｃｏｍｐｌｅｍｅｍｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサを用いて画像を撮像することができる。
【００６７】
第１カメラ１４１及び第２カメラ１４２は、携帯機器１００のハウジングに備えられるか或いは別途の接続手段を使って携帯機器１００に接続されてもよい。
第１カメラ１４１及び第２カメラ１４２のうち少なくとも一つは撮影に必要な光量を提供する補助光源（例えば、フラッシュ（不図示））を含むことができる。
【００６８】
一実施例として、第１カメラ１４１はマルチディスプレイ装置１００の前面に配置され、第２カメラ１４２はマルチディスプレイ装置１００の後面に配置されてもよい。
他の実施例として、第１カメラ１４１と第２カメラ１４２は隣接して（例えば、第１カメラ１４１と第２カメラ１４２との間隔が１ｃｍより大きく、８ｃｍより小さく）配置され、３次元静止画像又は３次元動画を撮影することができる。
また別の実施例として、第１カメラ１４１は第１パネル部に配置され、第２カメラ１４２は第２パネル部に配置されてもよい。
【００６９】
撮像部１４０は、第１カメラ１４１及び第２カメラ１４２のうち少なくとも一つを通して、ユーザの動き或いは形状を検知し、これをアプリケーションの実行或いは制御のための入力として制御部１３０に伝達することができる。
一例として、ユーザの動きとは、第１或いは第２カメラを通して検知されるユーザの手の動きを意味する。
ユーザの形状とは、第１或いは第２カメラを通して検知されるユーザの顔形状を意味することができる。
また別の実施例として、マルチディスプレイ装置１００は赤外線検知器のような他の手段を使ってユーザの動きを検知し、前記動きに応答してアプリケーションを実行又は制御することができる。
【００７０】
センサ部１５０は、マルチディスプレイ装置１００に対するユーザタッチ、ユーザ動き、マルチディスプレイ装置１００自体の動きなどのような多様な状態変化をセンシングするための構成要素である。
前述した実施形態において、センサ部１５０の一例としてタッチセンサ又は近接センサを説明した。前述した実施形態の以外にも、センサ部１５０は、タッチセンサ１５１、地磁気センサ１５２、加速度センサ１５３、ヒンジセンサ１５４、及び近接センサ１５５の内の少なくとも一つを含むことができる。
【００７１】
タッチセンサ１５１は、マルチディスプレイ装置１００のディスプレイ部に対するユーザオブジェクトの接触を検知することができるセンサである。即ち、タッチセンサ１５１は指のような身体又は検知可能な入力手段で第１又は第２ディスプレイ部１９０ａ、１９０ｂを接触してディスプレイ画面上に表示されたオブジェクトを選択する入力を検知することができるセンサのことを意味する。
タッチセンサ１５１は、ユーザのタッチを検知する方式によって静電方式と圧電方式に分けることができる。本発明の一実施形態にかかるタッチセンサ１５１は二つの方式のうちいずれの方式でも実現することができる。タッチセンサ１５１はディスプレイパネルと共にディスプレイ部に含まれて構成することができる。
【００７２】
地磁気センサ１５２は、磁場の流れを検出して方位角を探知することのできるセンサである。
地磁気センサ１５２は、マルチディスプレイ装置１００の方位座標を検出することができ、方位座標に基づいてマルチディスプレイ装置１００が置かれた方向を検出することができる。置かれた方向はそれに相応する制御入力として認識され制御部１３０が対応する出力を行う。
【００７３】
加速度センサ１５３は、マルチディスプレイ装置１００の加速度を検出するセンサであって、マルチディスプレイ装置１００上に仮想のｘ、ｙ、ｚ軸を設定し、各軸の傾いた程度によって変化する重力加速度値を検出することができる。
加速度センサ１５３は、移動する物体の加速度（動的な加速度）を検出することにも使われるが、主に重力加速度を検出することに活用されるセンサである。
【００７４】
ヒンジセンサ１５６は、ヒンジの角度又は動きなどを検出することができる。
近接センサ１５５は、ユーザのマルチディスプレイ装置１００に対する物体の接近有無を検出することができる。近接センサについては後で更に詳細に説明する。
【００７５】
図３には示していないが、マルチディスプレイ装置１００のセンサ部１５０は、重力がどの方向に作用するかを検出することのできる重力センサ、既存の加速度センサにそれぞれ回転を入れて全６軸を認識することのできるジャイロセンサ、イメージのようなコンテンツの横、縦フレームを自動で検知してコンテンツを自動回転及び整列させることのできるオリエンテーションセンサ、マルチディスプレイ装置１００周辺の光の量を検出する照度センサ、大気の圧力を測定することのできる高度測定センサ、物体の色を検出することのできるＲＧＢセンサ、超音波や赤外線を利用して距離を測定することのできる距離測定センサ、磁場の強さによる電圧変化を利用するホールセンサの内の少なくとも一つを更に含むことができる。
【００７６】
センサ部１５０の各センサは、状態を検出し、検出に対する信号を生成して制御部１３０に伝送する。
センサ部１５０のセンサは、マルチディスプレイ装置１００の性能に応じて追加又は削除することができる。
【００７７】
入／出力部１６０は、画面やその他の外部連結ポートを利用して入／出力を行うための構成要素である。
具体的には、入／出力部１６０は、マルチディスプレイ装置１００に接続されたマウスやキーボード、ジョイスティックのような入力手段や、リモコンなどのような無線入力手段から伝送される入力信号を受けて制御部１３０に伝送する。
又は、制御部１３０によって生成される各種信号やデータを外部装置に出力する。
入／出力部１６０は、ボタン部１６１、マイク１６２、スピーカ１６３及び振動モータ１６４を含む。
【００７８】
少なくとも一つのボタン部１６１は、マルチディスプレイ装置１００のハウジングの前面、側面、又は後面にプッシュ型或いはタッチ型で形成することができ、電源／ロックボタン、ボリューム調節ボタン、メニューボタン、ホームボタン、戻るボタン（ｂａｃｋ  ｂｕｔｔｏｎ）、及び検索ボタンの内の少なくとも一つを含むことができる。
ボタン部１６１が押される場合、対応する制御命令が生成され制御部１３０に伝達され、制御部１３０は対応する制御命令に従ってマルチディスプレイ装置１００の動作を制御する。
【００７９】
マイク１６２は、制御部１３０の制御に従って音声又はサウンドの入力を受けて電気的な信号を生成する。
スピーカ１６３は、制御部１３０の制御に従って、セルラー通信モジュール１１１、無線ＬＡＮモジュール１１２、近距離通信モジュール１１３、マルチメディア部１２０又は撮像部１４０の多様な信号（例えば、無線信号、放送信号、デジタルオーディオファイル、デジタル動画ファイル又は写真撮影など）に対応するサウンドをマルチディスプレイ装置１００の外部に出力する。
【００８０】
スピーカ１６３は、マルチディスプレイ装置１００が行う機能に対応するサウンド（例えば、電話通話に対応するボタン操作音、又は通話接続音）を出力することができる。
スピーカ１６３はマルチディスプレイ装置１００のハウジングの適切な位置又は複数の位置に一つ又は複数で形成することができる。一例として、スピーカ１６３は通話中にユーザの耳に近接するような適合した位置に配置される内部スピーカモジュールと、オーディオ／ビデオファイルの再生や放送の視聴時に使用できるようなより高い出力を持ち、マルチディスプレイ装置１００のハウジングの適切な位置に配置される外部スピーカモジュールを含んで構成することができる。
【００８１】
振動モータ１６４は、制御部１３０の制御に従って電気的信号を機械的振動に変換する。
例えば、振動モードにあるマルチディスプレイ装置１００は、他の装置（不図示）から音声通話が受信された場合、振動モータ１６４が動作する。
振動モータ１６４はマルチディスプレイ装置１００のハウジング内に一つ又は複数で形成することができる。振動モータ１６４は第１、第２ディスプレイ部１９０ａ、１９０ｂ上で検知されるユーザのタッチジェスチャー及び第１、第２ディスプレイ部１９０ａ、１９０ｂ上で検知されるタッチの連続的な動きに応答して動作することができる。
【００８２】
保存部１７０は、Ｏ／Ｓやアプリケーションなどのような各種プログラム及びデータを保存する構成である。
第１に、保存部１７０は、マルチディスプレイ装置１００の動作を制御するためのオペレーションシステムプログラムを保存する。
保存されたオペレーションシステムは、マルチディスプレイ装置１００がターンオンされた場合、保存部で読み取られ、コンパイルされ装置の各構成を動作させる。
【００８３】
第２に、保存部１７０はオペレーションシステムによって管理されオペレーションシステムの資源を利用してマルチディスプレイ装置１００の動作を行い、ユーザインターフェースを提供するアプリケーションプログラムを保存する。
アプリケーションプログラムは、ユーザの実行命令によってオペレーションシステムによって保存部で読み出され、実行可能な状態に転移され多様な動作を行う。
【００８４】
第３に、保存部１７０は、制御部１３０によって処理された各種のマルチメディアデータ、コンテンツデータ、外部ソースから受信されたデータなどを保存する。
即ち、保存部１７０は、制御部１３０の制御に従ってセルラー通信モジュール１１１、無線ＬＡＮモジュール１１２、近距離通信モジュール１１３、コネクタ１１４、ＧＰＳモジュール１１５、マルチメディア部１２０、撮像部１４０、センサ部１５０、入／出力部１６０、第１、第２ディスプレイ部１９０ａ、１９０ｂの動作に対応するように入／出力される信号、情報、又はデータを保存することができる。
【００８５】
例えば、保存部１７０は、入力ペン５００で検知結果に応じて伝送された情報を保存するか、制御部１３０が前記情報を分析した結果を保存する。
保存部１７０は、ロム（ＲＯＭ）、ラム（ＲＡＭ）、又はマルチディスプレイ装置１００に脱着／装着可能なメモリカード（例えば、ＳＤカード（登録商標）、メモリスティック（登録商標））、非揮発性メモリ、揮発性メモリ、ハードディスクドライブ（ＨＤＤ）又はソリッドステートドライブ（ＳＳＤ）の内の少なくとも一つで実現されることができる。
【００８６】
電源部１８０は、マルチディスプレイ装置１００で使われる電源を供給する。
電源部１８０は充電可能なバッテリで実現されてもよく、外部供給電源を変換して充電可能なバッテリに供給する電圧変換器を更に含むことができる。
電源部１８０は、制御部１３０の電源管理制御に従ってマルチディスプレイ装置１００に最大性能モード、一般モード、節電モード、待機モードなど多様なモードで電源を供給することができる。
【００８７】
第１、第２ディスプレイ部１９０ａ、１９０ｂは、前述したように、センサ部１５０に含まれ、フレームバッファに保存された画像を出力する構成である。
第１、第２ディスプレイ部１９０ａ、１９０ｂは、制御部１３０の制御によってマルチメディアコンテンツ、イメージ、動画、テキストなどを表示する。
第１ディスプレイ部１９０ａと第２ディスプレイ部１９０ｂは物理的に互いに分離されている。
【００８８】
第１ディスプレイ部１９０ａと第２ディスプレイ部１９０ｂに表示されるディスプレイ画面は互いに独立的に制御することができる。
例えば、第１ディスプレイ部１９０ａの解像度と第２ディスプレイ部１９０ｂの解像度は、それぞれ個別的に設定することができる。なお、第１ディスプレイ部１９０ａと第２ディスプレイ部１９０ｂに表示される画面の拡大、回転、画面移動、画面分割などをそれぞれ個別的に実行することができる。
なお、第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂは仮想統合フレームバッファを用いて単一ディスプレイ画面に表示することもできる。
【００８９】
第１、第２ディスプレイ部１９０ａ、１９０ｂは、制御部１３０によって実行される多様なアプリケーション（例えば、通話、データ伝送、放送、カメラなど）の実行画面を表示し、それに対応するユーザインターフェースを提供するディスプレイ装置である。
第１、第２ディスプレイ部１９０ａ、１９０ｂには前述したタッチセンサ１５１が内蔵されてもよく、この場合、ユーザの身体（例えば、親指を含む指）又は検知可能な入力手段（例えば、スタイラスペン）を通して少なくとも一つのタッチジェスチャーを入力することができる。
このようなユーザインターフェースは、所定タッチ領域、ソフトキー及びソフトメニューを含むことができる。
【００９０】
第１、第２ディスプレイ部１９０ａ、１９０ｂは、ユーザインターフェースを通して入力される少なくとも一つのタッチジェスチャーに対応する電子信号をＬＣＤコントローラー（不図示）を通して第１、第２ディスプレイ部１９０ａ、１９０ｂから伝送することができる。
なお、第１、第２ディスプレイ部１９０ａ、１９０ｂは、タッチの連続的な動きを検知し、タッチの連続的或いは不連続的な動きに対応する電子信号をＬＣＤコントローラーに伝送することができる。
前述したように、タッチセンサ１５１は、抵抗膜（ｒｅｓｉｓｔｉｖｅ）方式、静電容量（ｃａｐａｃｉｔｉｖｅ）方式、赤外線（ｉｎｆｒａｒｅｄ）方式、又は超音波（ａｃｏｕｓｔｉｃ  ｗａｖｅ）方式等で実現することができる。
【００９１】
第１、第２ディスプレイ部１９０ａ、１９０ｂは、タッチセンサを通して検知されたユーザ動作に関する検知信号をデジタル信号（例えば、ＸとＹ座標）に変換して制御部１３０に伝送する。制御部１３０は受信されたデジタル信号を用いて第１、第２ディスプレイ部１９０ａ、１９０ｂを通して入力されたユーザ動作に対応する制御動作を行うよう制御する。例えば、制御部１３０はユーザ動作に応答して第１、第２ディスプレイ部１９０ａ、１９０ｂに表示されたソフトキーが選択されるようにするか或いはソフトキーに対応するアプリケーションを実行することができる。
【００９２】
上述したユーザジェスチャーは、第１、第２ディスプレイ部１９０ａ、１９０ｂとユーザ身体又はタッチ可能な入力手段との直接的な接触（ｃｏｎｔａｃｔ）に限定されず、非接触による方式も含む。
第１、第２ディスプレイ部１９０ａ、１９０ｂで検出可能なユーザ動作の感度は、マルチディスプレイ装置１００の性能又は構造によって変更される。
【００９３】
〔タッチジェスチャータイプ〕
本発明の実施形態におけるタッチジェスチャーは、タッチスクリーンに直接接触或いは近接接近してマルチディスプレイ装置１００が検知可能とする全ての種類のユーザジェスチャーを含むことができる。
例えば、左手と右手の指（ｆｉｎｇｅｒ）（特に、人差し指）、親指又はタッチスクリーンによって検知可能なオブジェクト（例えば、スタイラスペン）を用いてタッチスクリーン上で一つの位置或いは連続的な複数の位置を選択するユーザの動作である。
以下の表を参照してタッチジェスチャーについて具体的に説明する。
【００９４】
【表１】
2014078235.tif 000003
【００９５】
表１は、一つの指を用いたジェスチャータイプについて説明する表である。
表１を参考すると、一つの指を用いたジェスチャータイプには、タップ（Ｔａｐ）、タッチ＆ホールド（Ｔｏｕｃｈ＆Ｈｏｌｄ）、ダブルタップ（Ｄｏｕｂｌｅ  Ｔａｐ）、ドラッグ（Ｄｒａｇ）、ドラッグ＆ドロップ（Ｄｒａｇ＆Ｄｒｏｐ）及びフリック（Ｆｌｉｃｋ）などがある。
【００９６】
タップ（Ｔａｐ）は、ユーザがタッチスクリーンを軽く叩く動作を意味し、タッチ＆ホールド（Ｔｏｕｃｈ＆Ｈｏｌｄ）は、ユーザが長時間タッチする動作であり、ダブルタップ（Ｄｏｕｂｌｅ  Ｔａｐ）は、ユーザが素早く２回タップする動作を意味する。そして、ドラッグ（Ｄｒａｇ）は、一方向に引きずる動作であり、ドラッグ＆ドロップ（Ｄｒａｇ＆Ｄｒｏｐ）は、タッチスクリーン上の任意のオブジェクトを押したまま、ある位置から他の位置に移動させる動作であり、フリック（Ｆｌｉｃｋ）は早くドラッグする動作である。
【００９７】
【表２】
2014078235.tif 000004
【００９８】
表２は、二本指を用いたジェスチャータイプについて説明する表である。
表２を参考すると、二本指を用いたジェスチャータイプには、ツーフィンガタップ（Ｔｗｏ  ｆｉｎｇｅｒ  Ｔａｐ）、タッチ＆スプレッド（Ｔｏｕｃｈ＆Ｓｐｒｅａｄ）、ピンチアウト（Ｐｉｎｃｈ  Ｏｕｔ）、ピンチイン（Ｐｉｎｃｈ  Ｉｎ）、ツーフィンガドラッグ（Ｔｗｏ  ｆｉｎｇｅｒ  Ｄｒａｇ）、クロスツーフィンガ（Ｃｒｏｓｓ  Ｔｗｏ  Ｆｉｎｇｅｒ）、タッチ＆ローテート（Ｔｏｕｃｈ＆Ｒｏｔａｔｅ）などがある。
【００９９】
ツーフィンガタップは二本指で同時にタップする動作であり、タッチ＆スプレッドは二本指で同時にタッチスクリーンを押し、一本指は動かずに他の一本指だけ直線で動く動作である。
ピンチアウトは同時に二本指でタッチスクリーンを押した後、互いに反対方向にドラッグする動作であり、ピンチインは同時に二本指でタッチスクリーンを押した後、向かい合う方向にドラッグする動作である。
ツーフィンガドラッグは二本指を同一方向にドラッグする動作であり、クロスツーフィンガは向かい合う方向に同時にドラッグして交差して横切る動作である。最後に、タッチ＆ローテートは一本指は動かず、別の一本指のみ固定した一本指を中心に回転させるタッチ動作を意味する。
【０１００】
【表３】
2014078235.tif 000005
【０１０１】
表３は、二本以上の指を用いたジェスチャー及び手の平を用いたジェスチャータイプについて説明する表である。
表３を参考すると、二本以上の指を用いたジェスチャータイプには、スリーフィンガタッチ、フォーフィンガタッチ、ファイブフィンガタッチなどがある。なお、二本以上の指を用いて上述した表１、表２のようにタップ、ドラッグ、ローテートのようなジェスチャー動作を行うことができる。
【０１０２】
制御部１３０は、上述した多様なタッチジェスチャーが認識されると、そのタッチジェスチャーに対応する動作を行う。
例えば、制御部１３０は保存部１７０に保存されたアプリケーション、ウィジェット、ウェブブラウザなどを実行させ、その実行画面を第１及び第２ディスプレイ部１９０ａ、１９０ｂのうち少なくとも一つに表示する。
【０１０３】
一方、上述した実施形態ではマルチディスプレイ装置１００のボディがヒンジ部によって連結されるものとして図示及び説明したが、ヒンジ部の代わりにフレキシブルな材質の連結部で連結してもよい。
以下では、図４を参照して、前述した制御部１３０の具体的な構成を詳細に説明する。
【０１０４】
図４は、多様な実施形態にかかるマルチディスプレイ装置に含まれる制御部の具体的な構成の一例を示すブロック図である。
図４によると、マルチディスプレイ装置は、通信部１１０、マルチメディア部１２０、制御部１３０、撮像部１４０、センサ部１５０、入／出力部１６０、保存部１７０、電源部１８０及びマルチディスプレイ部（デュアルディスプレイ部）１９０を含む。
【０１０５】
通信部１１０は、上述したように、多様な通信方式に従って外部装置と通信を行う構成要素である。通信部１１０については上述した部分で具体的に説明したため、重複説明は省略する。
マルチメディア部１２０は、動画コンテンツやオーディオコンテンツ、その他の多様なマルチメディアコンテンツを再生するための構成要素である。マルチメディア部１２０はパーサやコデックなどを用いてマルチメディアコンテンツを処理し、コンテンツ再生を行う。
【０１０６】
撮像部１４０は、ユーザ操作に従って撮像作業を行う構成要素である。撮像部１４０はマルチディスプレイ装置内で複数個で設けられてもよい。例えば、第１ディスプレイ部１９０ａが設けられた第１ボディに第１撮像部が設けられ、第２ディスプレイ部１９０ｂが設けられた第２ボディに第２撮像部が設けられてもよい。
制御部１３０は、撮像部１４０によって撮像されたイメージを保存するか、メール、メッセンジャー、メッセージなどに添付して外部へ伝送する。又は、撮像部１４０によって撮像されたイメージを分析してユーザのモーションジェスチャーを認識し、そのモーションジェスチャーに対応する制御動作を行うこともできる。
【０１０７】
入／出力部１６０は、画面やその他の外部連結ポートを利用して入／出力を行うための構成要素である。具体的には、入／出力部１６０は、マルチディスプレイ装置に接続されたマウスやキーボード、ジョイスティックのような入力手段や、リモコンなどのような無線入力手段から伝送される入力信号を受けて制御部１３０に伝送する。又は、制御部１３０によって生成される各種信号やデータを外部装置に出力することもできる。
センサ部１５０は、マルチディスプレイ装置に対するユーザタッチ、ユーザ動き、マルチディスプレイ装置自体の動きなどのような多様な状態変化をセンシングするための構成要素である。センサ部１５０については後述する部分でまた具体的に説明する。
電源部１８０は、マルチディスプレイ装置内部の各構成要素に電源を供給するための構成要素である。
【０１０８】
制御部１３０はこれらの各構成要素の動作を全般的に制御する。
制御部１３０は、ＣＰＵ１３１、ＧＰＵ１３３、ＲＡＭ１３５、ＲＯＭ１３７、及びシステムバス１３９を含む。
ＣＰＵ１３１は、制御部１３０を構成する内部構成要素だけでなくマルチディスプレイ装置に含まれた全般的な構成要素に対する制御を行う。
ＣＰＵ１３１、ＧＰＵ１３３、ＲＡＭ１３５、及びＲＯＭ１３７は、システムバス１３９を通して互いに接続され、各種データや信号などを送受信する。
【０１０９】
ＲＯＭ１３７にはシステムブーティングのための命令語セットなどが保存される。
ターンオン命令が入力され電源が供給されると、ＣＰＵ１３１はＲＯＭ１３７に保存された命令語に従って保存部１７０に保存されたＯ／ＳをＲＡＭ１３５にコピーし、Ｏ／Ｓを実行させてシステムをブーティングさせる。ブーティングが完了されると、ＣＰＵ１３１は保存部１７０に保存された各種アプリケーションプログラムをＲＡＭ１３５にコピーし、ＲＡＭ１３５にコピーされたアプリケーションプログラムを実行させて各種動作を行う。以上のように、ＣＰＵ１３１は保存部１７０に保存されたアプリケーションプログラムの実行に従って多様な動作を行うことができる。
【０１１０】
保存部１７０には各アプリケーションで使用可能なツールセットに対する情報が保存される。
ＣＰＵ１３１は、ツールセットを表示すべきイベントが発生すると保存部１７０に保存されたツールセット情報を用いて、ツールセットを表示する。
具体的にはツールセットメニューが選択されるイベント、ユーザの身体やスタイラスペン４８００が接近又はタッチされるイベント、ヒンジ部１８５によって予め設定された角度だけ第１及び第２ディスプレイ部１９０ａ、１９０ｂが広がるイベントなどが発生するとツールセットを表示することができる。
【０１１１】
ＧＰＵ１３３は、デコーダ（ｄｅｃｏｄｅｒ）、レンダラー（ｒｅｎｄｅｒｅｒ）、スケーラ（ｓｃａｌｅｒ）などを含むことができる。
これにより、保存されたコンテンツをデコーディングし、デコーディングされたコンテンツデータをレンダリングしてフレームを構成し、構成されたフレームのサイズをディスプレイコントローラ（不図示）の制御によってディスプレイサイズに合わせてスケーリングする。
もし、第１及び第２ディスプレイ部１９０ａ、１９０ｂのうち一つで表示される画面であればそのサイズに合わせてスケーリングし、２つのディスプレイで全面表示される画面であれば全面表示サイズに合わせてスケーリングする。
ＧＰＵ１３３は処理されたフレームをディスプレイ部に提供して表示する。
【０１１２】
制御部１３０は、周辺の構成要素とインターフェーシングするための多様な類型のインターフェース部などを更に含むことができる。
ＣＰＵ１３１はウェブブラウザプログラムが実行されると、ネットワークインターフェース（不図示）を通してウェブサーバにアクセスする。
ウェブサーバからウェブページデータが受信されると、ＣＰＵ１３１はＧＰＵ１３３を制御してウェブページ画面を構成し、構成されたウェブページ画面を上述した第１及び第２ディスプレイ部１９０ａ、１９０ｂのうち少なくとも一つを用いて表示する。
【０１１３】
上述したように、マルチディスプレイ装置１００でタッチ及びユーザ操作が検知されると、制御部１３０はユーザ操作が意図されたものであるか否かを判断することができる。
判断結果、意図されたユーザ操作であると判断されると、そのユーザ操作に対応する動作に対する情報を保存部１７０から読み出した後、その情報に対応する動作を行う。
以上のような制御部１３０の動作は、保存部１７０に保存された各種プログラムの実行によって実現することができる。
【０１１４】
〔制御部のソフトウェア構成〕
以下では、制御部１３０を構成するソフトウェアの階層図を説明する。
図５は、本発明の一実施形態にかかるマルチディスプレイ装置１００のシステム階層構造を説明するための図である。
図５を参照すると、マルチディスプレイ装置１００はハードウェア４１０とハードウェアを駆動するオペレーションシステム（Ｏｐｅｒａｔｉｎｇ  ｓｙｓｔｅｍ：ＯＳ）４２０と、オペレーションシステムによってプロセスで管理され資源を用いてユーザサービスを提供するアプリケーション階層４４１〜４４５と、オペレーションシステムとアプリケーションを中継するフレームワーク階層４３０を含む。
【０１１５】
オペレーションシステム（ＯＳ）４２０は、ハードウェア４１０の全般的な動作を制御し、ハードウェア４１０及び各アプリケーションに対応するプロセスを管理する機能を行う。
即ち、ＯＳ４２０はハードウェア管理とメモリ、保安などの基本的な機能を担当する階層である。
ＯＳ４２０はマルチディスプレイ部を駆動させるためのディスプレイドライバ、データ送受信のための通信ドライバ、カメラを駆動させるためのカメラドライバ、オーディオ部を駆動させるためのオーディオドライバ、電源管理者などのモジュールを含む。なお、開発者がアクセス可能なＡＰＩライブラリーとランタイム（ｒｕｎｔｉｍｅ）が含まれてもよい。ＯＳ４２０はアプリケーションの呼び出しを処理し、処理結果に従ってハードウェアを動作させる。
【０１１６】
ＯＳ４２０より上位階層としてフレームワーク（ｆｒａｍｅ  ｗｏｒｋ）階層４３０が存在する。
フレームワーク階層４３０はアプリケーション階層４４０とＯＳ４２０を接続する役割を行う。即ち、フレームワーク階層４３０はロケーションマネージャ（ｌｏｃａｔｉｏｎ  ｍａｎａｇｅｒ）、通知マネージャ（ｎｏｔｉｆｉｃａｔｉｏｎ  ｍａｎａｇｅｒ）及びタッチスクリーン部に映像を表示するためのフレームバッファ（ｆｒａｍｅ  ｂｕｆｆｅｒ）を含む。
【０１１７】
フレームワーク階層４３０の上部階層にはマルチディスプレイ装置１００の多様な機能を具現するアプリケーション階層４４０が存在する。
例えば、通話アプリケーション４４１、マルチメディアアプリケーション４４２、カメラアプリケーション４４３、ブラウザアプリケーション４４４、及びジェスチャーアプリケーション４４５など多様なアプリケーションプログラムが含まれる。
各アプリケーション（４４１〜４４５）は、ユーザインターフェースを提供し、ユーザから命令を受信してフレームワークを通してＯＳ４２０に伝達するか、ＯＳ４２０の資源を要請する。ＯＳ４２０はシステムコールを処理し、いろんなアプリケーションの作業を管理する。そして、システムコールの処理結果に従って第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂなどのような多様なハードウェアを動作させる。
【０１１８】
〔ディスプレイ部のハードウェア構成〕
以下では、ディスプレイ部のハードウェア構成を説明する。
図６は、第１ディスプレイ部１９０ａ又は第２ディスプレイ部１９０ｂのディスプレイ部の回路構成を示すブロック図である。
以下では、第１ディスプレイ部１９０ａを基準に説明するが、第２ディスプレイ部１９０ｂの場合も同一な構成を含み、同一に動作する。
ディスプレイ部は前述したように、第１ディスプレイ部１９０ａ、第２ディスプレイ部１９０ｂを含む。なお、タッチスクリーン部を更に含むことができる。
【０１１９】
図６によると、第１ディスプレイ部１９０ａの画像出力回路は、タイミングコントローラ２３１、ゲートドライバ２３２、データドライバ２３３、電圧駆動部２３４、表示パネル２３５を含むことができる。
タイミングコントローラ２３１は、外部からタッチスクリーン部の解像度に適合したクロック信号（ＤＬＣＫ）と水平同期信号（Ｈｓｙｎｃ）、垂直同期信号（Ｖｓｙｎｃ）などを受信してゲート制御信号（走査制御信号）、データ制御信号（データ信号）を生成し、受信したＲ、Ｇ、Ｂデータを再整列してデータドライバ２３３に供給する。
【０１２０】
タイミングコントローラ２３１は上述のゲート制御信号に関連して、ゲートシフトクロック（Ｇａｔｅ  Ｓｈｉｆｔ  Ｃｌｏｃｋ：ＧＳＣ）、ゲート出力イネーブル（Ｇａｔｅ  Ｏｕｔｐｕｔ  Ｅｎａｂｌｅ：ＧＯＥ）、ゲート開始パルス（Ｇａｔｅ  Ｓｔａｒｔ  Ｐｕｌｓｅ：ＧＳＰ）などを発生させることができるが、ここでＧＳＣはＲ、Ｇ、Ｂ有機発光素子（Ｏｒｇａｎｉｃ  Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ、ＯＬＥＤ）のような発光素子に接続された薄膜トランジスタ（Ｔｈｉｎ  Ｆｉｌｍ  Ｔｒａｎｓｉｓｔｏｒ：ＴＦＴ）がオン／オフ（Ｏｎ／Ｏｆｆ）する時間を決定する信号であり、ＧＯＥはゲートドライバ２３２の出力を制御する信号であり、ＧＳＰは一つの垂直同期信号の中で画面の一番目の駆動ラインを知らせる信号である。
【０１２１】
なお、タイミングコントローラ２３１はデータ制御信号に関連して、ソースサンプリングクロック（Ｓｏｕｒｃｅ  Ｓａｍｐｌｉｎｇ  Ｃｌｏｃｋ：ＳＳＣ）、ソース出力イネーブル（Ｓｏｕｒｃｅ  Ｏｕｔｐｕｔ  Ｅｎａｂｌｅ：ＳＯＥ）、ソース開始パルス（Ｓｏｕｒｃｅ  Ｓｔａｒｔ  Ｐｕｌｓｅ：ＳＳＰ）などを生成することができる。
ここで、ＳＳＣはデータドライバ２３３でデータをラッチ（ｌａｔｃｈ）させるためのサンプリングクロックとして使用され、データドライバＩＣの駆動周波数を決定する。
ＳＯＥはＳＳＣによってラッチされたデータを表示パネル２３５に伝達する。
ＳＳＰは一つの水平同期期間中にデータのラッチ又はサンプリング開始を知らせる信号である。
【０１２２】
ゲートドライバ２３２は走査信号を生成する構成で、走査線（Ｓ１，Ｓ２、Ｓ３、…Ｓｎ）を通して表示パネル２３５と接続される。
ゲートドライバ２３２は、タイミングコントローラ２３１によって生成されたゲート制御信号に従って電圧駆動部２３４から提供されたゲートオン／オフ電圧（Ｖｇｈ／Ｖｇｌ）を表示パネル２３５に印加する。
ゲートオン電圧（Ｖｇｈ）は表示パネル２３５に単位フレーム画像の具現のためにゲートライン１（ＧＬ１）からゲートラインＮ（ＧＬｎ）まで順次に提供される。
【０１２３】
データドライバ２３３はデータ信号を生成する構成で、データ線（Ｄ１、Ｄ２、Ｄ３、…Ｄｍ）を通して表示パネル２３５と接続される。
データドライバ２３３は、タイミングコントローラ２３１によって生成されたデータ制御信号に従ってスケーリングを完了させ、画像イメージフレームのＲＧＢデータを表示パネル２３５に入力する。
データドライバ２３３は、タイミングコントローラ２３１から直列（ｓｅｒｉａｌ）で提供されるＲＧＢの画像データを並列（ｐａｒａｌｌｅｌ）に変換し、デジタルデータをアナログ電圧に変換して一つの水平ライン分に該当する画像データを表示パネル２３５に提供する。この過程は各水平ライン別に順次行われる。
【０１２４】
電圧駆動部２３４は、ゲートドライバ２３２、データドライバ２３３、表示パネル２３５などにそれぞれの駆動電圧を生成して伝達する。
即ち、外部からの常用電源、即ち１１０Ｖ又は２２０Ｖの交流電圧を提供され、表示パネル２３５に必要な電源電圧（ＶＤＤ）を生成して提供するか、接地電圧（ＶＳＳ）を提供することができる。
なお、ゲートオン電圧（Ｖｇｈ）を生成してゲートドライバ２３２に提供することもできる。
【０１２５】
このために、電圧駆動部２３４は個別的に動作する複数の電圧駆動モジュール（不図示）を含むことができる。ここで、複数の電圧駆動モジュール（不図示）は制御部１３０の制御に従って互いに異なる電圧を提供するように動作することができ、制御部１３０は予め設定された情報に応じて複数の電圧駆動モジュールが互いに異なる駆動電圧を提供するように電圧駆動部２３４を制御することができる。
例えば、複数の電圧駆動モジュールのそれぞれは、制御部１３０の制御に従って予め設定された情報に応じて互いに異なる第１電圧及びデフォルトで設定された第２電圧を提供することができる。
【０１２６】
一実施形態によれば、電圧駆動部２３４は複数個の領域に区分された表示パネル２３５の各領域に対応する複数個の電圧駆動モジュールを含むことができる。
この場合、制御部１３０は、複数個の領域それぞれの画面情報（又は入力画像情報）に応じて互いに異なる第１電圧、即ち、ＥＬＶＤＤ電圧を提供するように複数個の電圧駆動モジュールを制御することができる。
即ち、データドライバ２３３に入力される画像信号を用いてＥＬＶＤＤ電圧の大きさを制御することができる。ここで、画面情報は、入力画像の輝度及び階調情報のうち少なくとも一つになることができる。
【０１２７】
表示パネル２３５は、互いに交差して画素領域を定義するための複数のゲートライン（ＧＬ１〜ＧＬｎ）とデータライン（ＤＬ１〜ＤＬｎ）が形成され、その交差する画素領域２３６にはＯＬＥＤのようなＲ、Ｇ、Ｂの発光素子が形成される。
そして、画素領域２３６の一領域、更に正確には角にはスイッチング素子即ちＴＦＴが形成される。このようなＴＦＴのターンオン動作時、データドライバ２３３から階調電圧がそれぞれのＲ、Ｇ、Ｂの発光素子に提供される。このとき、Ｒ、Ｇ、Ｂの発光素子は階調電圧に基づいて提供された電流量に相応して光を提供する。即ち、Ｒ、Ｇ、Ｂの発光素子は多くの電流量が提供されるとその分多くの光を提供するようになる。
【０１２８】
図７は、本発明の一実施形態にかかるマルチディスプレイ装置に適用可能なディスプレイ部の断面を説明するための断面図である。
図７を参考すると、第１ディスプレイ部１９０ａは、画像出力部とタッチスクリーン部を含む。
画像出力部は、上部基板３６２と下部基板３６１とが密着された表示パネル部３６０と、表示パネル部３６０の上部基板３６２上に設けられた上部偏光板３００と、上部偏光板３００の端領域に設けられた下部電極３１０を含む。そして、画像出力部は下部基板３６１下に設けられた下部偏光板３０１を含む。
【０１２９】
上述した上部基板３６２と下部基板３６１との間の領域には液晶層３６３が設けられる。上部基板３６２と下部基板３６１は画像を表示する表示領域と表示領域の端に設けられた周辺領域を含む。
下部基板３６１の表示領域には示していないが、複数のゲートラインと複数のデータライン、そして複数のゲートラインとデータラインの交差領域に設けられた薄膜トランジスタと、薄膜トランジスタに接続された画素電極が設けられる。
画素電極とその一部が重畳される維持電極が設けられる。そして、下部基板３６１の周辺領域にはゲートライン及びデータラインに接続された複数のパッド部が設けられる。
【０１３０】
上部基板３６２と下部基板３６１は、シーラントのような密封部材３６４を用いて密封されることが好ましい。密封部材３６４は上部基板３６２と下部基板３６１の周辺領域に設けられることが効果的である。
タッチスクリーン部は、下部電極３１０と接続され上部偏光板３００上に設けられた下部透明電極３３０と、上部透明電極３４２が設けられ上部基板３６２に付着されたタッチパッド部３４０と、上部透明電極３４２と下部透明電極３３０との間に設けられた突起部３５０を含む。
【０１３１】
タッチパッド３４０は、ベースフィルム３４１と、ベースフィルム３４１上に設けられた上部透明電極３４２と、上部透明電極上に設けられた上部電極３４３を含む。
外部でタッチパッド部３４０を所定の力で押す場合、力の印加された領域の突起部３５０が下部透明電極３３０に密着され、これにより、下部透明電極３３０と上部透明電極３４２との間が電気的に接続するようになる。
【０１３２】
電気的接続を通して上部透明電極３４２及び／又は下部透明電極３３０を流れる電流が変化するようになり、このような変化を別途の検知手段（不図示）を通して検知する。
検知手段は、検知された信号を別途に備えられた制御部１３０に伝達する。制御部１３０は検知された信号を用いて電流の流れが変化した領域の座標を生成し、これを所定のドライバ（不図示）に伝達する。ドライバは入力された座標に対応して表示パネル部３６０に表示された画像をマウスのような入力道具を用いて操作したものと同一の動作を行うことができる。
【０１３３】
〔マルチディスプレイのフレームバッファリング方式〕
一方、マルチディスプレイ装置１００の特性上、画像フレームバッファを多様な方式で備えることができる。
以下では、多様な方式の画像フレームバッファについて説明する。
図８は、本発明の一実施形態にかかるマルチディスプレイ装置１００のディスプレイ駆動部１７５を示すブロック図であり、図９は、本発明の他の実施形態にかかるディスプレイ駆動部１７５の構成を示すブロック図である。
【０１３４】
図８を参照すると、ディスプレイ駆動部１７５は第１フレームバッファ（１７５ａ−１）、第１ディスプレイドライバ（１７５ａ−２）、第２フレームバッファ（１７５ｂ−１）及び第２ディスプレイドライバ（１７５ｂ−２）を含む。
即ち、各ディスプレイ部１９０ａ、１９０ｂ別の別途のフレームバッファ（１７５ａ−１、１７５ｂ−１）と、ディスプレイドライバ（１７５ａ−２、１７５ｂ−２）を備えることができる。
【０１３５】
第１フレームバッファ（１７５ａ−１）は、第１ディスプレイ部１９０ａに表示されるイメージフレームをバッファリングするための構成であり、第２フレームバッファ（１７５ｂ−１）は、第２ディスプレイ部１９０ｂに表示されるイメージフレームをバッファリングするための構成である。
例えば、ＧＰＵ１３３によってデジタル信号処理されたイメージフレームは、第１、２フレームバッファ（１７５ａ−１、１７５ｂ−１）にビットマップ形態に保存される。
【０１３６】
この場合、各フレームバッファ（１７５ａ−１、１７５ｂ−１）のバッファリング領域は各ディスプレイ部（１９０ａ、１９０ｂ）でサポート可能な最大ピクセルサイズに合わせて割り当てられる。
第１ディスプレイドライバ（１７５ａ−２）は、第１フレームバッファ（１７５ａ−１）に保存されたイメージフレームを分析して第１イメージソース信号に変換する。第１ディスプレイドライバ（１７５ａ−２）は第１イメージソース信号を第１ディスプレイ部１９０ａに提供し、第１ディスプレイ部１９０ａがイメージフレームを表示するように駆動させる。
【０１３７】
同様に、第２ディスプレイドライバ（１７５ｂ−２）は、第２フレームバッファ（１７５ｂ−１）に保存されたイメージフレームを分析して第２イメージソース信号に変換し、これを第２ディスプレイ部１９０ｂに提供して表示させる。
このような二つのフレームバッファは、各ディスプレイ部（１９０ａ、１９０ｂ）に対する画像フレームを並列的に処理する場合に適切である。並列プロセッサが各ディスプレイ部１９０ａ、１９０ｂに対する映像信号を出力する場合、画像出力効率を高めることができる。
【０１３８】
しかし、上記とは異なって、図９に示すように各ディスプレイ部（１９０ａ、１９０ｂ）に対応する第１フレームバッファ（１７５ａ−１）と第２フレームバッファ（１７５ｂ−１）が別途設けられるのではなく、一つの統合フレームバッファを使用することもできる。
図９は、一つの統合フレームバッファを用いて各ディスプレイ部（１９０ａ、１９０ｂ）の動作を制御するマルチディスプレイ装置１００の構成を示すブロック図である。
フレームバッファが統合フレームバッファ（１７５−１）形態に実現される場合、第１、第２ディスプレイ部の最大解像度より大きいサイズに統合フレームバッファ（１７５−１）のサイズを割り当てて実現することができる。
【０１３９】
例えば、第１、第２ディスプレイ部が各々最大１０２４×８００の解像度で表示できる場合、統合フレームバッファ（１７５−１）は、１０２４×１６００の解像度を表示できるフレームバッファサイズで保存領域を割り当てる。
統合フレームバッファ（１７５−１）の第１領域には第１ディスプレイ部１９０ａに表示される第１イメージフレームが保存され、第２領域には第２ディスプレイ部１９０ｂに表示される第２イメージフレームが保存される。
ディスプレイドライバ（１７５−２）は、統合フレームバッファ（１７５−１）に保存された第１イメージフレームと第２イメージフレームのアドレスを用いて第１ディスプレイ部１９０ａ又は第２ディスプレイ部１９０ｂに第１、第２イメージフレームを提供してそれぞれのディスプレイ部を駆動させる。
【０１４０】
〔近接センシング手段〕
前述したように、マルチディスプレイ装置１００のセンサ部１５０は近接センサ１５５を含むことができる。
以下では、近接センサ１５５の構成及び動作を説明する。
図１０は、本発明の一実施形態にかかるマルチディスプレイ装置の近接タッチを説明するための図である。
【０１４１】
ユーザは、タッチスクリーンを直接タッチせず、指やその他のオブジェクトを接近させる動作のみでマルチディスプレイ装置１００に制御命令を入力させることができる。
マルチディスプレイ装置は、近接センサ１５５を用いて近接タッチをセンシングすることができる。
近接タッチは、タッチスクリーンを直接タッチせず空間上の一定の有効認識範囲で動きが認識される場合に一つのタッチジェスチャーとして認識することを意味する。
【０１４２】
図１０を参照すると、ディスプレイ部２９０は近接タッチ認識のための赤外線ソース部２９１及び赤外線センシング部２９２を含む。
赤外線ソース部２９１はディスプレイ部２９０の表面方向に赤外線を走査する。
具体的には、赤外線ソース部２９１は動画像又は静止画像を表示するディスプレイ部２９０の下部に配置され、赤外線をディスプレイ部２９０の表面方向に走査する。
ディスプレイ部２９０の表面上にユーザオブジェクト５０の接近を認識することができる一定の領域が存在する。この領域が近接タッチを認識することのできる有効認識領域５である。
【０１４３】
ユーザオブジェクトの意味は、マルチディスプレイ装置１００に命令を入力するための手段を意味するもので、例えば、手のような身体の一部とすることができる。
ユーザオブジェクト５０が有効認識領域５内に近接すると赤外線センシング部２９２はユーザオブジェクト５０の近接によって反射される赤外線を検知して赤外線スキャンイメージを生成する。
具体的には、赤外線センシング部２９２はアレイ形態に配置される複数の赤外線センシング素子を用いて、ユーザオブジェクト５０の接近によって反射される赤外線に対応する赤外線スキャンイメージを生成する。マルチディスプレイ装置１００は生成された赤外線スキャンイメージを用いて近接タッチ入力を検知することができる。
一方、後述する実施形態のように、入力ペン５００の近接と入力ペン５００以外のユーザオブジェクトの近接を区別する必要が生じることがある。
【０１４４】
図１１は、入力ペンを用いた近接タッチを検知する方法の一例を説明するための図である。
後述するように、入力ペン５００は、内部に磁場コイル（不図示）を含む。
そして、マルチディスプレイ装置１００は磁場コイルに従って磁場の変化を検知する磁場検知部２９５を更に含む。
磁場検知部２９５は入力ペン５００の磁場コイルによって入力ペン５００の近接のある地点の磁場が変化するため、対応する地点に入力ペン５００の近接入力があることを検知することができる。
【０１４５】
このとき、前述した近接センサ１５５もやはり検知するようになるが、近接センサ１５５と磁場検知部２９５が両方ともユーザオブジェクトの近接を検知した場合、近接センサ１５５による近接検知結果に対しては無視される。従って、磁場検知部２９５が入力ペン５００の近接を検知した場合にはペン入力モードとみなすことができるため、対応するメニューアイテムや画面を表示する。
その一方、磁場検知部２９５が入力ペン５００の近接を検知できなかった状態で近接センサ１５５が近接入力を検知した場合、これは磁場コイル（不図示）を備えた入力ペン５００を除いたユーザオブジェクトがマルチディスプレイ装置に近接した場合とみなすことができるため、ソフトキーボードを第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂのうち一つに表示するキーボード入力モードで動作する。
【０１４６】
〔マルチディスプレイ装置の外観構成〕
以下では、本発明の一実施形態にかかるマルチディスプレイ装置１００の外観を添付された斜視図と共に説明する。
図１２は、本発明の一実施形態にかかるマルチディスプレイ装置１００の詳細を示す斜視図である。
ここではマルチディスプレイ装置１００がヒンジ部１８５で連結される２つのディスプレイ部１９０ａ、１９０ｂを備える場合の構成を示した。
【０１４７】
図１２を参照すると、マルチディスプレイ装置１００は第１及び第２ボディ２、４で構成され、第１及び第２ボディ２、４はヒンジ部１８５によって連結され相対的に移動（回動）可能のように構成される。
第１ボディ２の一面には第１ディスプレイ部１９０ａが備えられ、第１ディスプレイ部１９０ａの一側面には少なくとも一つの物理的ボタンを配置することができる。
第２ボディ４の一面には第２ディスプレイ部１９０ｂが備えられ、第２ディスプレイ部１９０ｂの一側面には少なくとも一つの物理的ボタンを配置することができる。
【０１４８】
物理的ボタンは、プッシュボタン及びタッチボタンのうち少なくとも一つを含む。
一実施例として、スピーカ１６３及びマイク１６２を備えた第１ボディ２に配置される第１ディスプレイ部１９０ａはメインスクリーンとして動作し、そうでない第２ボディ４に配置される第２ディスプレイ部１９０ｂはサブスクリーンとして動作することができる。
一実施例として第１ボディ２は第１カメラ１４１を備え、第２ボディ４は第２カメラ１４２を備える。
【０１４９】
図１２に示すようにマルチディスプレイ装置１００が置かれた状態でそれぞれのディスプレイ部１９０ａ、１９０ｂはランドスケープモードで画面を表示する。
マルチディスプレイ装置１００は、第１ボディ２及び第２ボディ４がヒンジ部１８５によって連結され相対移動（回動）可能のように構成するのであれば、携帯、ノートパソコン、タブレットＰＣ、ＰＭＰなどどのような機器になってもよい。
【０１５０】
第１ディスプレイ部１９０ａと第２ディスプレイ部１９０ｂが第１ボディ２及び第２ボディ４にそれぞれ備えられるものと説明したが、後述する説明は、二つのパネルのうちいずれか一つのパネルにのみタッチスクリーンディスプレイが提供される機器にも適用可能である。
なお、各ディスプレイ部（１９０ａ、１９０ｂ）側面の物理的ボタンのうち少なくとも一つは省略してもよい。更に、第１ボディ２と第２ボディ４の連結はヒンジ部１８５によるものを例にとって説明したが、第１ボディ２と第２ボディ４が相対的移動（回動）を通して折りたたまれるように構成されていれば、他の構成要素の連結に代替することも可能である。
【０１５１】
一方、ヒンジ部１８５は図１２に示すように、第１ボディ２及び第２ボディ４の連結部の上下側に配置された２つのヒンジで構成することができる。
なお、ヒンジ部１８５は、第１ボディ２及び第２ボディ４の連結部全体に配置された１つのヒンジで構成することもできる。
【０１５２】
マルチディスプレイ装置１００は、物理的或いはグラフィック的に分離される第１ディスプレイ部１９０ａと第２ディスプレイ部１９０ｂで構成されたディスプレイ装置を備え、２つのディスプレイ部（１９０ａ、１９０ｂ）を活用して下記図１３〜図１７のような多様なスクリーンモード（Ｓｃｒｅｅｎ  Ｍｏｄｅ）をサポートすることができる。
【０１５３】
図１３〜図１７は、本発明の一実施形態にかかるマルチディスプレイ装置１００の第１ボディ２と第２ボディ４との間の相対角度によるスクリーンモードを示す図である。
相対角度（θ）は、第１ボディ２に対して所定方向（一例として反時計方向）に回転された第２ボディ４の回転角度である。
具体的には、相対角度（θ）は、ヒンジ部１８５自体に内蔵されたヒンジセンサを用いて検出することができる。
【０１５４】
ヒンジセンサは、ホールセンサ、圧力センサ、誘導検出センサ、電気コンタクトセンサ、及び光学センサのうちいずれか一つで行われ、ヒンジの動き及び相対的な位置を検出して相対角度（θ）を認識することができる。
なお、相対角度（θ）はヒンジセンサの以外にも、地磁気センサ、加速度センサで第１及び第２ボディ２、４のそれぞれの位置を検出して相対角度（θ）を認識することができる。
【０１５５】
図１３は、本発明の一実施形態にかかる折りたたまれたマルチディスプレイ装置１００を示す斜視図である。
図１３では、第１ボディ２と第２ボディ４上の第１及び第２ディスプレイ部１９０ａ、１９０ｂがそれぞれ外側に向きながら第１ボディ２と第２ボディ４とが相接している状態、即ち外側に完全に折りたたまれた状態を示した。
本明細書ではこのような状態をシングルモード（Ｓｉｎｇｌｅ  Ｍｏｄｅ）と称する。
この時の相対角度（θ）は０度である。
【０１５６】
一例として、第１及び第２ボディ２、４間の相対角度が０度〜６０度の間のとき、マルチディスプレイ装置はシングルモードと認知する。
シングルモードは、マルチディスプレイ装置１００が使われないロック状態のとき及び通話（Ｃａｌｌ）アプリケーションで有用に使用できる。
シングルモードでは前面の第１ディスプレイ部１９０ａが少なくとも一つのアプリケーションによる作業画面を表示し、後面の第２ディスプレイ部１９０ｂはターンオフされてもよい。一部アプリケーションはオプションメニューを使用して後面の第２ディスプレイ部１９０ｂをターンオンすることができる。
【０１５７】
図１４は、第１ボディ２に対する第２ボディ４の相対角度（θ）が１８０度を超過する状態、即ち、２つのディスプレイ部１９０ａ、１９０ｂが内側に少し折りたたまれた状態を示すものである。
本明細書では、このような状態をツールキットモード（Ｔｏｏｌ  Ｋｉｔ  Ｍｏｄｅ）と称する。
一例として、第１及び第２ボディ２、４間の相対角度が１８５度〜２６５度の間である場合ツールキットモードとして認知する。
【０１５８】
ツールキットモードは、両ディスプレイ部（１９０ａ、１９０ｂ）が内側を向くように少し折りたたまれた状態でマルチディスプレイ装置１００がノートパソコンと類似した形態で使われるときに有用である。
一例として、いずれか一つのディスプレイ部１９０ａに作業画面を表示し、他の一つのディスプレイ部１９０ｂにはキーボードなどのツール（Ｔｏｏｌ）を表示するなど多様な作業環境を提供することができる。
【０１５９】
図１５は、第１ボディ２と第２ボディ４とが並んで平行になった状態で相対角度（θ）が１８０度或いは所定範囲内で１８０度に近接した状態、即ち広げた状態（ｕｎｆｏｌｄｅｄ）を示す。
本明細書では、この状態をエクスペンディングモード（Ｅｘｐａｎｄｉｎｇ  Ｍｏｄｅ）と称する。
一例として、第１及び第２ボディ２、４間の相対角度が１７５度〜１８５度の範囲にあるとき、マルチディスプレイ装置１００は第１及び第２ボディ２、４が拡げられているものとみなすことができる。
【０１６０】
エクスペンディングモードは、２つのアプリケーションに対する２つの作業画面を２つのディスプレイ部（１９０ａ、１９０ｂ）にそれぞれ表示するか、一つのアプリケーションに対する２つの作業画面を２つのディスプレイ部（１９０ａ、１９０ｂ）のそれぞれに表示するか、或いは一つのアプリケーションに対する一つの作業画面を２つのディスプレイ部（１９０ａ、１９０ｂ）に渡って広く表示するなどの多様なビューモード（Ｖｉｅｗ  Ｍｏｄｅ）を提供することができる。
いずれか一つのディスプレイ部内で実行されるアプリケーションが存在しない場合、該ディスプレイ部はホーム画面を表示することができる。エクスペンディングモードはＥ−ｂｏｏｋ及び動画プレーヤーアプリケーションで有用に使用できる。
【０１６１】
図１６は、第１ボディ２に対する第２ボディ４の相対角度（θ）が１８０度未満の状態、即ち、両ディスプレイ部１９０ａ、１９０ｂが互いにほぼ反対方向を向くように外側にほぼ折りたたまれた状態を示すものである。
本明細書では、このような状態をスタンディングモード（Ｓｔａｎｄｉｎｇ  Ｍｏｄｅ）と称する。
一例として、第１及び第２ボディ２、４間の相対角度が３０度〜９０度の間である場合、マルチディスプレイ装置１００はスタンディングモードとして認知する。
【０１６２】
スタンディングモードは、両ディスプレイ部（１９０ａ、１９０ｂ）が外側を向くように折りたたまれた構造であって、マルチディスプレイ装置１００を地面に三角形形態に立てておくことができ、充電時、マルチディスプレイ装置１００をデジタル時計或いはフレームとして使うとき、個人放送、映画、動画などを長時間視聴するときに有用に使用できる。
【０１６３】
他の実施例として、スタンディングモードは二人以上のユーザによる協力或いは相互作用を必要とするアプリケーション、一例として画像会議、共同作業ゲーム（Ｃｏｌｌａｂｏｒａｔｉｖｅ  Ｇａｍｅ）などに適用することができる。一部アプリケーションはスタンディングモードで前面の第１ディスプレイ部１９０ａにのみ作業画面を表示し、後面の第２ディスプレイ部１９０ｂをターンオフすることができる。一部アプリケーションはオプションメニューを使用して後面の第２ディスプレイ部１９０ｂをターンオンすることができる。
【０１６４】
図１７は、図１６で説明したスタンディングモードの別の実施例であって、ヒンジの一部分が地面に着くようにマルチディスプレイ装置１００を立てておいた状態を示すものである。
本明細書ではこのような状態を縦向きモードと称する。
縦向きモードは第１及び第２ボディ２、４間の相対角度が３０度〜９０度の間であり、加速度センサによってマルチディスプレイ装置１００が縦に立てられていると判断される場合、縦向きモードとして認知する。
【０１６５】
具体的には、加速度センサはマルチディスプレイ装置の回転を検知する。
加速度センサはマルチディスプレイ装置１００の第１及び第２ディスプレイ部１９０ａ、１９０ｂが左右側に配置される縦向きモードと第１及び第２ディスプレイ部１９０ａ、１９０ｂが上下側に配置される横向きモード間の転換を検知する。
縦向きモードは二人以上のユーザに対してそれぞれ異なる画像を提供する必要があるアプリケーション、一例として、画像会議、マルチ動画プレーヤーなどに適用することができる。
【０１６６】
図１８及び図１９は、本発明の一実施形態にかかるマルチディスプレイ装置１００の２つのカメラ配置を説明するための図である。
図１８及び図１９は、マルチディスプレイ装置１００を正面から見たものである。カメラの配置を説明するための図であるため、カメラ以外の部分は省略した。
【０１６７】
まず、図１８を参照すると、マルチディスプレイ装置１００は第１ボディ２及び第２ボディ４で構成され、第１ボディ２は第１ディスプレイ部１９０ａを含み、第２ボディ４は第２ディスプレイ部１９０ｂを含む。
第１ボディ２及び第２ボディ４はヒンジ部１８５によって連結され相対的に移動（回動）可能のように構成される。第１カメラ１４１は第１ボディ２の端領域のうちヒンジ部１８５の向かい側の端領域の中央部に配置される。第２カメラ１４２は第２ボディ４の端領域のうちヒンジ部１８５の向かい側の端領域の中央部に配置される。
【０１６８】
次に、図１９を参照してカメラの配置を説明することにする。
説明の便宜のため、ユーザがマルチディスプレイ装置１００を見る方向を基準に説明する。
第１カメラ１４１’は第１ボディ２の左側の端領域の中央面に配置され、第２カメラ１４２’は第２ボディ４の左側の端領域の中央面に配置される。
他の実施例として、第１及び第２カメラはそれぞれ第１及び第２ボディ２、４の右側の端領域の中央面に配置することもできる。また別の実施例として、第１及び第２カメラはそれぞれ第１及び第２ボディ２、４の角領域に配置することもできる。
マルチディスプレイ装置１００は、前述したように横向き方向に使用可能であるだけでなく縦向き方向にも使用可能である。
上述したマルチディスプレイ装置１００を通してユーザは多様な入力を行い、マルチディスプレイ装置１００は入力に対応する出力を行う。
【０１６９】
〔マルチディスプレイ装置の基本的なツールセット実行〕
図２０及び図２１は、本発明の一実施形態にかかるツールセットの活性化を説明する図である。
図２０を参考すると、図２０はマルチディスプレイ装置１００が縦に配置された場合のツールセットの活性化動作を示す。
【０１７０】
図２０の（ａ）はディスプレイ部の初期化状態を示し、図２０の（ｂ）はツールセットが活性化された状態を表示する。
具体的には、ヒンジ領域２００１からツールセットを表示しようとするディスプレイ部方向にドラッグジェスチャー２００２が検知されると、図２０の（ｂ）に示すようにツールセットが表示される。
マルチディスプレイ装置１００はドラッグジェスチャー２００２に応答して、半円模様のツールセットＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）２００５をヒンジ領域２００１からドラッグされたディスプレイ部方向に表示する。
このとき、ドラッグされたディスプレイ部２００３の画面はディムド（Ｄｉｍｍｅｄ）２００４処理（淡色処理）することができる。
【０１７１】
上述した図２０は、マルチディスプレイ装置１００が縦に配置された場合のツールセット活性化の動作を示したもので、以下では図２１を参考してマルチディスプレイ装置２００が横に配置された場合のツールセット活性化の動作を説明する。
図２１の（ａ）はディスプレイ部の初期化状態を示し、図２１の（ｂ）はツールセットが活性化された状態を表示する。
【０１７２】
具体的に、ベゼルの短辺領域２１０１からツールセットを表示しようとするディスプレイ部方向にドラッグジェスチャー２１０２が検知されると、図２１の（ｂ）に示すようにツールセットが表示される。
マルチディスプレイ装置１００はドラッグジェスチャー２１０２に応答して、半円模様のツールセットＵＩ（２１０５）をベゼルの短辺領域２１０１からドラッグされたディスプレイ部方向に表示する。このとき、ドラッグされたディスプレイ部２１０３の画面はディムド（Ｄｉｍｍｅｄ）２１０４処理（淡色処理）することができる。
【０１７３】
一方、図２１ではベゼルの短辺領域２１０１でのツールセットの活性化動作を説明したが、マルチディスプレイ装置１００が横に配置された場合でも図２０で説明したようにヒンジ領域でもツールセット活性化機能を行うことができる。
なお、図２０のように、マルチディスプレイ装置１００が縦に配置された場合でも図２１で説明したように、ベゼルの短辺領域でもツールセット活性化機能を行うことができる。
【０１７４】
図２２及び図２３は、本発明の一実施形態にかかる下位レベルツールセットの活性化を説明するための図である。
図２２及び図２３のそれぞれは、マルチディスプレイ装置１００が縦及び横に配置された場合の下位レベルツールセットを活性化させる動作について説明する。
図２２の（ａ）及び図２３の（ａ）を参照すると、ユーザのツールセット活性化動作によって一番上位ツールセットである第１ツールセット２２０１、２３０１がディスプレイ部上に表示されている。
【０１７５】
第１ツールセット２２０１、２３０１からいずれか一つのツールが選択され、選択された一つのツール上でタップジェスチャー２２０２、２３０２が検知された場合、図２２の（ｂ）及び図２３の（ｂ）に進む。
図２２の（ｂ）及び図２３（ｂ）を参照すると、マルチディスプレイ装置１００はタップジェスチャーの検知に応答して第１ツールセット２２０１、２３０１で選択されたツールを第１ツールセットの半円から分離され少し拡張させて表示し（符号２２０３、２３０３）、選択されたツールに対応する下位レベルツールセットである第２ツールセット２２０４、２３０４を活性化させて表示する。
【０１７６】
また、ここで、第２ツールセット２２０４、２３０４からいずれか一つのツールが選択され、選択された一つのツール上でタップジェスチャー２２０５、２３０５が検知された場合、図２２の（ｃ）及び図２３の（ｃ）に進む。
図２２の（ｃ）及び図２３（ｃ）を参照すると、マルチディスプレイ装置１００はタップジェスチャーの検知に応答して選択されたツールに対応する下位レベルツールセットである第３ツールセット２２０６、２３０６を活性化させて表示する。
【０１７７】
図２４及び図２５は、本発明の一実施形態にかかる下位レベルツールセットの終了を説明するための図である。
図２４及び図２５のそれぞれは、マルチディスプレイ装置１００が縦及び横に配置された場合の下位レベルツールセットを消えるようにする動作を説明する。
【０１７８】
図２４の（ａ）及び図２５の（ａ）を参照すると、下位レベルツールセットの拡張によって第１ツールセット、第２ツールセット、及び第３ツールセットがディスプレイ部上に表示されている。
第１ツールセットの活性化されたツール領域２４０１、２５０１を除いた第１ツールセットの余白２４０２、２５０２上にダブルタップジェスチャー２４０３、２５０３が検知された場合、図２４の（ｂ）及び図２５の（ｂ）に進む。
【０１７９】
図２４の（ｂ）及び図２５の（ｂ）を参照すると、マルチディスプレイ装置１００はダブルタップジェスチャーの検知に応答して下位レベルツールセットである第２ツールセット及び第３ツールセットと第１ツールセットで活性化されたツール領域がディスプレイ部上で消える。
これにより、ディスプレイ部上に第１ツールセット２４０４、２５０５のみ表示される。
【０１８０】
図２６及び図２７は、本発明の一実施形態にかかるツールセットの終了を説明するための図である。
図２６及び図２７のそれぞれは、マルチディスプレイ装置１００が縦及び横に配置された場合のツールセットを終了させる動作を説明する。
【０１８１】
図２６の（ａ）及び図２７の（ａ）を参照すると、第１ツールセット２６０１、２７０１がディスプレイ部上に表示されている場合、第１ツールセット２６０１、２７０１でヒンジ領域２６０２、２７０２方向にドラッグジェスチャー２６０３、２７０３が検知されると、図２６の（ｂ）及び図２７の（ｂ）に進む。
【０１８２】
図２６の（ｂ）及び図２７（ｂ）を参照すると、マルチディスプレイ装置１００はドラッグジェスチャーの検知に応答して第１ツールセットをディスプレイ上で消えるようにし、ディムドされた画面２６０４、２７０４を解除して表示する（符号２６０５、２７０５）。
【０１８３】
以上、図２０〜図２７では、マルチディスプレイ装置１００がシングルモードである場合を仮定して、ツールセットの活性化などの動作を説明した。
しかし、ツールセット活性化は、上述した多様なモードで行うことができることは言うまでもない。
【０１８４】
図２８〜図３０は、マルチディスプレイ装置１００のスクリーンモード別のツールセット実行を説明するための図である。
図２８は、ツールキットモード２８００、図２９はエクスペンディングモード２９００、図３０はスタンディングモード３０００でツールセットの実行動作を説明する。
図２０〜図２７で説明したシングルモードでのツールセットの動作は、図２８〜図３０でも共通的に適用されるため、重複説明は省略する。
【０１８５】
〔マルチディスプレイ装置のツールセットＵＩ〕
図３１は、本発明の多様な実施形態に係る第１ツールセットを説明する図である。
第１ツールセットは、ユーザのツールセット活性化操作によって表示される基本ツールセットを意味する。
図３１を参照すると、本発明の多様な実施形態にかかる第１ツールセットＵＩを示す。
【０１８６】
第１実施形態として、半円ＵＩ（３１００−１）の第１ツールセットは、ディスプレイ部上で表示される表示領域３１１０とディスプレイ部上で表示されない可変領域３１２０に分けられている。
具体的には、表示領域３１１０はツールセットの活性化時に表示される半円部分で、予め設定されたツールが配置される。予め設定されたツールはユーザが直接設定することができ、マルチディスプレイ装置の基本的に提供されるツールであってもよい。例えば、カメラ、音楽鑑賞、動画撮影、ウェブブラウザ、ギャラリー、デジタルブック、メッセージ、メモ、連絡先、カレンダー及び機器設定などであってもよい。
【０１８７】
可変領域３１２０には、予め設定されたツール以外のツール、即ちヒドゥン（隠れた）ツールが配置される。
このような可変領域３１２０は、今後ツールセントアップデートを通してツールの拡張を可能とする。
第１ツールセット３１００は、上下ローリング３１３０されるダイアルＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）で構成され、ユーザの操作によって可変領域３１２０のヒドゥンツールを表示領域３１１０に表示することができる。
【０１８８】
一方、第１実施形態で説明したように、下記のそれぞれの実施形態によるツールセットにも表示領域と可変領域が存在することができ、ユーザの操作によって可変領域のヒドゥンツールを表示領域に表示される動作を適用することができる。
一方、本発明の多様な実施形態にかかる第１ツールセットは、カードポケットＵＩ（３１００−２）、水玉ＵＩ（３１００−３）及び四角棒グラフＵＩ（３１００−４）のうちいずれか一つで表示することもできる。
【０１８９】
図３２は、本発明の多様な実施形態にかかる第１ツールセットの下位レベルツールセットである第２ツールセットを説明するための図である。
図３２を参照すると、第１実施形態である半円ＵＩ（３２００−１）は第１ツールセット３２１０で一つのツールが選択されると、選択されたツールは活性化３２２０され、選択されたツールに対応する下位レベルツールセットである第２ツールセットが円形バー（Ｂａｒ）形態に第１ツールセットを囲みながら下りてくるように表示するか（符号３２４０）、又は第２ツールセットが、波がゆれるアニメーション効果と共に第１ツールセットを囲みながら下りてくるように表示することもできる（符号３２５０）。
【０１９０】
上記のように第２ツールセットが表示されるとき、アニメーション効果（例えば、波効果又は残像効果）を付加することでユーザの感性に合うＵＩを提供することができる。
第２ツールセットは、第２ツールセットに含まれるツールの個数に応じてバーの長さを可変的に調整することができ、第２ツールセットは第１ツールセットと区別されるように多様なレイアウトで表示することができる。
【０１９１】
第２実施形態にかかるカードポケットＵＩ（３２００−２）の第２ツールセットは、第１ツールセットでいずれか一つのツールが選択されると、カードポケットからカードを引き抜いて見ることのように第２ツールセットが表示される。
【０１９２】
第３実施形態にかかわる水玉ＵＩ（３２００−３）の第２ツールセットは、第１ツールセットでいずれか一つのツールが選択されると、図３２に示すように、選択されたツールに選択されなかったツールが蓄えられたようになる。そして、選択されたツールから第２ツールセットに該当するツールが第１ツールセットが蓄えられたこととは逆に表れ第２ツールセットを表示する。
【０１９３】
第４実施形態にかかる四角棒グラフＵＩ（３２００−４）の第２ツールセットは、第１ツールセットでいずれか一つのツールが選択されると、図３２に示すように、選択されたツールが第１ツールセットの表示されたディスプレイ部と反対方向のディスプレイ部側に移動する。そして、第２ツールセットは選択されたツールの表示されたディスプレイ部側に表示される。
【０１９４】
図３３は、本発明の多様な実施形態にかかる第２ツールセットの下位レベルツールセットである第３ツールセット及びツール実行を説明するための図である。
図３３を参照すると、第１実施形態である半円ＵＩ（３３００−１）は第２ツールセット３３３０で一つのツールが選択されると、選択されたツールに対応する下位レベルツールセットである第３ツールセットが円形バー（Ｂａｒ）３３４０形態に第２ツールセットを囲みながら下りてくる（符号３３６０）。第３ツールセットは第２ツールセットに含まれるツールの個数に応じてバーの長さを可変的に調整することができる。
【０１９５】
一方、第３ツールセット以下の下位レベルツールは円形ボタン３３５０形態に表示することができる。
只、第１実施形態では下位レベルツールを円形ボタン３３５０形態に表示するものと説明したが、第２実施形態（３３００−２）でのように別途の領域に下位レベルツールを提供して、特定機能を行うこともできる。
以下では、第１実施形態である半円ＵＩのツールセットを基準にツールセットの動作について説明することにする。このような動作は第２〜第４実施形態にも適用することができる。
【０１９６】
図３４は、本発明の一実施形態にかかるツールセットＵＩの流れを説明するための図である。
図３４の（ａ）を参照すると、マルチディスプレイ装置１００は予め決められたタッチジェスチャー、一例としてドラッグジェスチャー３４０１を検知すると図３４（ｂ）に進む。
図３４の（ｂ）を参照すると、マルチディスプレイ装置１００はドラッグジェスチャー３４０１に応答して第１ツールセット３４０２を表示する。
【０１９７】
第１ツールセット３４０２からいずれか一つのツールを選択して、選択されたツール上でタップジェスチャーが検知されるとマルチディスプレイ装置１００は図３４の（ｃ）に進む。
図３４の（ｃ）を参照すると、マルチディスプレイ装置１００はタップジェスチャーに対応して第１ツールセットで選択されたツールを活性化３４０３させ、第２ツールセット３４０３が第１ツールセット３４０２を囲みながら下りてくるように表示する。
この場合、第２ツールセット３４０４のいずれか一つのツール上でタップジェスチャー３４０５が検知された場合、図３４の（ｄ）又は図３４の（ｅ）に進む。
【０１９８】
第２ツールセット３４０４で選択されたツールが下位レベルツールセットを持っている場合、図３４の（ｄ）に進み、下位レベルツールセットを持っていない場合図３４の（ｅ）に進む。
図３４の（ｄ）を参照すると、マルチディスプレイ装置１００はタップジェスチャー３４０５の検知に対応して選択されたツールの下位レベルツールセットである第３ツールセット３４０６を表示する。
なお、図３５の（ｅ）を参考すると、選択されたツールが下位レベルツールセットを持たずｏｎ／ｏｆｆ又は＋／−などの動作を行うツールである場合、第２ツールセットの円形バーの外郭に円形ボタン３４０９を表示する。
【０１９９】
図３４（ｄ）及び図３４（ｅ）において、第１ツールセットでツール活性化領域を除いた余白３４０７、３４１０上にダブルタップジェスチャー３４０８、３４１１が検知された場合、第３ツールセット及び第２ツールセットが順次にヒンジ側にローテーションしながら消え、第１ツールセットが表示される図３４の（ｂ）に進む。
【０２００】
図３５は、本発明の一実施形態にかかる単一ディスプレイベースのアプリケーション駆動時におけるツールセット実行を説明するための図である。
図３５の（ａ）を参照すると、単一ディスプレイベースのアプリケーションが第１及び第２ディスプレイ３５０１、３５０２の各々で駆動されている。
【０２０１】
この時、ヒンジ領域で第２ディスプレイ部３５０２方向にドラッグジェスチャー３５１１が検知されると、図３５の（ｂ）に進む。
図３５の（ｂ）を参照すると、マルチディスプレイ装置１００はドラッグジェスチャー３５１１の方向と同一方向にツールセットを表示し（符号３５２０）、第２ディスプレイ部３５０２をディムド３５０３処理する。
【０２０２】
ここで、ツールセット３５２０の「設定」ツールを選択するユーザのジェスチャーが検知されると（符号３５１２）、図３５の（ｃ）に進む。
図３５の（ｃ）を参照すると、「設定」ツールを選択するユーザのジェスチャー３５１２に対応して下位レベルツールセットが表示され、下位レベルツールセットで「ＧＰＳ」ツール選択するユーザのジェスチャーが検知されると（符号３５１３）、図３５（ｄ）に進む。
図３５の（ｄ）を参照すると「ＧＰＳ」ツールを選択するユーザのジェスチャーに対応してマルチディスプレイ装置１００は第１ディスプレイ部１９０ａにＡｌｅｒｔメッセージを通してＧＰＳ  Ｏｆｆ状態を表示する（符号３５０４）。
【０２０３】
一方、ユーザがツールセットからいずれか一つのツールを選択するとき、選択されるツールを常にツールセットＵＩの上段に配置して同一な視線の動線を維持することで、ユーザに一貫した視線追跡環境を提供することができる。
一例として、図３５の（ｂ）及び図３５（ｃ）を参考すると、第２ツールセット３５２０で「設定」ツールを選択するユーザのジェスチャーが検知されると、選択された「設定」ツールが上にローリングされながら第２ツールセット上段に配置され、「設定」ツールに対応する下位レベルツールセットである第３ツールセットがワイプダウン（Ｗｉｐｅ  Ｄｏｗｎ）されて表示される。
【０２０４】
図３６は、本発明の一実施形態にかかるデュアルディスプレイベースのアプリケーション駆動時にツールセット実行を説明するための図である。
図３５と比較して、デュアルディスプレイベースのアプリケーションは第１ディスプレイ部及び第２ディスプレイ部３６０１、３６０２に一つのアプリケーションが駆動されるという相違点があるが、デュアルディスプレイベースのアプリケーションでツールセット実行は図３５の単一ディスプレイベースのアプリケーションのツールセット実行と同一に動作することができる。ツールセットが活性化される第２ディスプレイ部３５０２をディムド処理させてユーザがツールセットを明確に認知するように処理する。
【０２０５】
〔マルチディスプレイ装置のツールセットドック〕
図３７は、本発明の一実施形態にかかるツールセットドック（Ｄｏｃｋ）を説明するための図である。
図３７の（ａ）を参照すると、単一ディスプレイベースのアプリケーションが第１及び第２ディスプレイ部３７０１、３７０２の各々で駆動されている。
【０２０６】
この時、ヒンジ領域で第２ディスプレイ部３７０２方向にドラッグジェスチャー３７１１が検知されると、図３７の（ｂ）に進む。
図３７の（ｂ）を参照すると、マルチディスプレイ装置１００はドラッグジェスチャー３７１１の方向と同一方向にツールセットを表示し（符号３７２０）、第２ディスプレイ部３７０２をディムド処理３７０３する。ここで、ツールセット３５２０の「設定」ツール（３７１２）を選択するユーザのジェスチャーが検知されると、図３７の（ｃ）に進む。
【０２０７】
図３７の（ｃ）を参照すると、「設定」ツールを選択したユーザのジェスチャーに対応して下位レベルツールセットが表示され、下位レベルツールセットで「ディスプレイ拡張」ツール３７１３上にロングタップジェスチャーが検知されると、図３７の（ｄ）に進む。
図３７の（ｄ）を参照すると、ロングタップジェスチャーに従って「ディスプレイ拡張」ツール３７１３が移動型に活性化され（符号３７１４）、第１ディスプレイ部３７０１上段部３７３１にツールセットドック（Ｄｏｃｋ）３７３０が形成される。
【０２０８】
ツールセットドック３７３０とは、ユーザがよく利用するツールを早く実行させるために選択されたツールを保存し表示することのできるＵＩのことを意味する。
ユーザはツールセットドック３７３０を利用してツールセット実行なしでも、使用しようとするツールを早く実行させることができる。
ツールセットドックはアプリケーション実行中にユーザの特定ジェスチャーによって活性化させることができる。一例として、アプリケーション上段部上にタップジェスチャーが検知されると、マルチディスプレイ装置１００はアプリケーション上部にツールセットドックを一定時間の間に活性化させる。
【０２０９】
一方、ツールセットドックはユーザの設定に応じて保存できるツールの個数を可変的に調整することができる。
各々のアプリケーション毎に個別的なツールセットを有することができ、ユーザの嗜好に従ってツールを提供することができるため、アプリケーション利用に便宜性が増大する。
上述した図３１〜図３７では、ユーザ操作に対応するツールセットの基本的な動作を説明した。
ここで、ユーザ操作に該当するジェスチャー、ツールセットの位置、ツールセットのＵＩなどは本発明の一実施形態に過ぎず、本発明がこのような実施形態に限定されないことに留意すべきである。
【０２１０】
〔アプリケーション毎に提供されるツールセット〕
上述したように、ツールセットはマルチディスプレイ装置１００の動作状態に対応するツールからなっている。即ち、マルチディスプレイ装置１００がホーム画面を表示している状態であるか、アプリケーションを実行させている状態であるかに応じてツールセットが異なってくる。
特に、マルチディスプレイ装置１００がアプリケーションを実行している状態であれば、そのアプリケーションの種類に応じて相違したツールセットを表示することができる。
【０２１１】
図３８〜図４７は、マルチディスプレイ装置の動作状態に応じて相違して構成されるツールセットの例を説明するための図である。
図３８は、ウェブブラウザを実行させている状態で表示されるツールセットの構成例を説明する。
図３８を参考すると、基本的にインターネットブラウザツール３８１１が活性化されており、下位レベルツールセット縮小ツール３８１２が第１ツールセットＵＩに表示されている。
【０２１２】
下位レベルツールセット縮小ツールとは、現在表示されている下位レベルツールセットを終了させる動作を行うツールである。
一例として、図３８のように第１及び第２下位レベルツールが表示されている状態で下位レベルツールセット縮小ツール３８１２を選択すると、第２下位レベルツールを終了させることができる。
【０２１３】
一実施例として、インターネットブラウザツール３８１１の下位レベルツールセットは設定ツール３８２１、多重ウィンドウ分割ツール３８２２、検索ツール３８２３、添付ツール３８２４、印刷ツール３８２５、及び情報表示ツール３８２６を含むことができる。
ここで、設定ツール３８２１が選択されると、これに対応した下位レベルツールセットはディスプレイ拡張ツール３８３１、アップロード設定ツール３８２２、明るさ調整ツール３８３３、ＧＰＳ設定ツール３８３４、明暗調整ツール３８３５、暗号設定ツール３８３６、及び保安設定ツール３８３７を含むことができる。
【０２１４】
図３９は、一実施例として音楽プレーヤーツール３９１１に対応するツールセットを説明する。
図３９を参照すると、基本的に音楽プレーヤーツール３９１１が活性化されており、下位レベルツールセット縮小ツール３９１２が第１ツールセットＵＩに表示されている。
【０２１５】
一実施例として、音楽プレーヤーツール３９１１の下位レベルツールセットは、設定ツール３９２１、プレイリストツール３９２２、音楽情報閲覧ツール３９２３、検索ツール３９２４、音量調整ツール３９２５、及びゴミ箱ツール３９２６を含むことができる。
ここで、設定ツール３８２１が選択されると、これに対応した下位レベルツールセットはイコライザー設定ツール３９３１、音響効果設定ツール３９３２、プレイリスト設定ツール３９３３、及びタイマー設定ツール３９３４を含むことができる。
【０２１６】
図４０は、一実施例として動画プレーヤーツール４００１に対応するツールセットを説明する。
図４０を参照すると、基本的に動画プレーヤーツール４００１が活性化されており、下位レベルツールセット縮小ツール４００２が第１ツールセットＵＩに表示されている。
一実施例として、動画プレーヤーツール４００１の下位レベルツールセットはプレイリストツール４０１１、設定ツール４０１２、画面調整ツール４０１３、ごみ箱ツール４０１４、音量調整ツール４０１５、及び検索ツール４０１６を含むことができる。
【０２１７】
図４１は、一実施例としてカメラツール４１０１に対応するツールセットを説明する。
図４１を参照すると、基本的にカメラツール４１０１が活性化されており、下位レベルツールセット縮小ツール４１０２が第１ツールセットＵＩに表示されている。
一実施例として、カメラツール４１０１の下位レベルツールセットは設定ツール４１１１、フラッシュ設定ツール４１１２、前後カメラ転換ツール４１１３、動画撮影転換ツール４１１４、焦点モード設定ツール４１１５、及びタイマー設定ツール４１１６を含むことができる。
ここで、設定ツール４１１１が選択されると、これに対応した下位レベルツールセットは解像度設定ツール４１２１、フィルム設定ツール４１２２、ホワイトバランス設定ツール４１２３、及びＩＳＯ感度設定ツール４１２４を含むことができる。
【０２１８】
図４２は、一実施例としてメッセージツール４２０１に対応するツールセットを説明する。
図４２を参照すると、基本的にメッセージツール４２０１が活性化されており、下位レベルツールセット縮小ツール４２０２が第１ツールセットＵＩに表示されている。
一実施例として、メッセージツール４２０１の下位レベルツールセットは、新規メッセージ作成ツール４２１１、受信メッセージ閲覧ツール４２１２、ごみ箱ツール４２１３、検索ツール４２１４、及び設定ツール４２１５をふくむことができる。
【０２１９】
図４３は、一実施例としてメモツール４３０１に対応するツールセットを説明する。
図４３を参照すると、基本的にメモツール４３０１が活性化されており、下位レベルツールセット縮小ツール４３０２が第１ツールセットＵＩに表示されている。
一実施例として、メモツール４３０１の下位レベルツールセットは、新規メモ作成ツール４３１１、メモリストツール４３１２、印刷ツール４３１３、ごみ箱ツール４３１４、検索ツール４３１５、及び設定ツール４３１６を含むことができる。
ここで、新規メモ作成ツール４３１１が選択されると、これに対応した下位レベルツールセットは、添付ツール４３２１、ＳＮＳアップロードツール４３２２、ペン設定ツール４３２３、筆設定ツール４３２４、及び消しゴムツール４３２５を含むことができる。
【０２２０】
図４４は、一実施例としてギャラリーツール４４０１に対応するツールセットを説明する。
図４４を参照すると、基本的にギャラリーツール４４０１が活性化されており、下位レベルツールセット縮小ツール４４０２が第１ツールセットＵＩに表示されている。
一実施例として、ギャラリーツール４４０１の下位レベルツールセットは、ギャラリーリストツール４４１１、ＳＮＳアップロードツール４４１２、撮影モード転換ツール４４１３、印刷ツール４４１４、ごみ箱ツール４４１５、検索ツール４４１６、及び設定ツール４４１７を含むことができる。
【０２２１】
図４５は、一実施例としてデジタルブックツール４５０１に対応するツールセットを説明する。
図４５を参照すると、基本的にデジタルブックツール４５０１が活性化されており、下位レベルツールセット縮小ツール４５０２が第１ツールセットＵＩに表示されている。
一実施例として、デジタルブックツール４５０１の下位レベルツールセットは、リストツール４５１１、検索ツール４５１２、ＳＮＳアップロードツール４５１３、デジタルブックダウンロードツール４５１４、印刷ツール４５１５、及び設定ツール４５１６を含むことができる。
【０２２２】
図４６は、一実施例として連絡先ツール４６０１に対応するツールセットを説明する。
図４６を参照すると、基本的に連絡先ツール４６０１が活性化されており、下位レベルツールセット縮小ツール４６０２が第１ツールセットＵＩに表示されている。
一実施例として、連絡先ツール４６０１の下位レベルツールセットは、新規連絡先追加ツール４６１１、検索ツール４６１２、最近通話連絡先ツール４６１３、連絡先アップロードツール４６１４、連絡先ダウンロードツール４６１５、ごみ箱ツール４６１６、お気に入りツール４６１７、及び設定ツール４６１８を含むことができる。
【０２２３】
図４７は、一実施例としてカレンダーツール４７０１に対応するツールセットを説明する。
図４７を参照すると、基本的にカレンダーツール４７０１が活性化されており、下位レベルツールセット縮小ツール４７０２が第１ツールセットＵＩに表示されている。
一実施例として、カレンダーツール４７０１の下位レベルツールセットは、月間日程ツール４７１１、週間日程ツール４７１２、日間日程ツール４７１３、日程目録ツール４７１４、日程追加ツール４７１５、Ｄ−ｄａｙメニューツール４７１６、ごみ箱ツール４７１７、及び設定ツール４７１８を含むことができる。
【０２２４】
〔スタイラスペンを利用したツールセット実行〕
上述した実施形態ではマルチディスプレイ装置の動作状態によって異なるツールセットに対する例を説明したが、ツールセットはマルチディスプレイ装置をタッチするタッチ手段の種類によっても異なることができる。
例えば、手でタッチする場合と、ペンでタッチする場合に表示されるツールセットは互いに異なる。
以下では、スタイラスペン４８００を利用する場合に表示されるツールセットの構成に関連した多様な実施形態及びスタイラスペン４８００の構成について具体的に説明する。
【０２２５】
スタイラスペン４８００は、マルチディスプレイ装置１００の外部入力手段の一つであって、ユーザはタッチジェスチャーだけでなくスタイラスペン４８００を利用してマルチディスプレイ装置１００を操作することができる。
本発明の一実施形態にかかるスタイラスペン４８００は、検知部、制御部、通信部、ユーザインターフェース部を含む。
【０２２６】
検知部は、予め設定された範囲内に存在する少なくとも一つの物理量を検知する構成である。例えば、動画像を撮像することのできるカメラ、動きや姿勢を検出するジャイロセンサ（Ｇｙｒｏｓｃｏｐｅ）、移動する物体にくわえられる力による加速度を検出する加速度センサと、磁場の流れを検出して方位を探知することのできる地磁気センサ、物体の赤外光を検出する赤外線センサ（ＩＲ）、くわえられる圧力の強さを検出する圧力センサのうち少なくとも一つを含むことができる。
【０２２７】
ユーザインターフェース部は、スタイラスペン４８００の取っ手領域に、プッシュ型、タッチ型又はダイアル型に形成することができる。
制御部は、入力ペンの全般的な動作を制御し、特に、検知部の検知結果及びユーザインターフェース部のユーザ入力を受信し、検知結果及びユーザ入力に対する情報をマルチディスプレイ装置１００に伝送するように通信部を制御する。
制御部は、ＭＰＵ（Ｍｉｃｒｏ  ｐｒｏｃｅｓｓｏｒ  Ｕｎｉｔ）又はＣＰＵとこれを駆動するＯＳを含む。
【０２２８】
通信部は、マルチディスプレイ装置１００と通信を行う構成である。
具体的には、検知部を通して取得した検知結果及びユーザインターフェース部のユーザ入力に対する情報をマルチディスプレイ装置１００に伝送する。なお、必要に応じてマルチディスプレイ装置１００から制御信号を受信することができる。
通信部は、多様な近距離無線通信手段で実現されることができる。例えば、ブルートゥース（登録商標）、赤外線通信、ＮＦＣ（Ｎｅａｒ  Ｆｉｅｌｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、Ｗｉ−Ｆｉ、ジグビー（Ｚｉｇｂｅｅ（登録商標））などで実現することができる。
【０２２９】
上述したように、スタイラスペン４８００は、検知部を通して多様な情報を検知し、ユーザインターフェース部を通してユーザ入力を受信することができる。
検知結果及びユーザ入力情報は通信部を通してマルチディスプレイ装置１００に伝送するようになる。
マルチディスプレイ装置１００で受信された情報はイベントになり、マルチディスプレイ装置１００を操作することができる。
【０２３０】
図４８は、本発明の一実施形態にかかるスタイラスペン４８００の構成の一例を示す図である。
図４８を参照すると、本発明の一実施形態にかかるスタイラスペン４８００は、ユーザインターフェースとして取っ手部分に下段ボタン４８０１、上段ボタン４８０２、及びダイアル４８０３を含む。
具体的には、下段ボタン４８０１はマウスの左側ボタンのような選択、実行などの機能を行うことができ、上段ボタン４８０２はマウスの右側ボタンのようなメニュー、設定などの機能を行うことができる。
そして、ダイアル４８０３はマウスホイールのようにスクロールアップ／ダウンなどの機能を行うことができる。
以下では、図４８のスタイラスペン４８００を利用してマルチディスプレイ装置１００のツールセット実行を説明する。
【０２３１】
図４９は、本発明の一実施形態にかかるスタイラスペン４８００を利用したツールセットの活性化及び下位レベルツールセット拡張を説明するための図である。
図４９の（ａ）を参照すると、スタイラスペン４８００の上／下段ボタンのうちいずれか一つ（符号４９０１）をダブルクリック４９０２すると、図４９の（ｂ）進む。
図４９の（ｂ）を参照すると、マルチディスプレイ装置１００はスタイラスペン４８００の制御信号に応答して駆動しているアプリケーションに対応するツールセット４９１０を活性化させて表示する。
【０２３２】
図４９の（ｃ）を参照すると、ツールセットが活性化された後にスタイラスペン４８００のダイアル４９０５を回転させる（符号４９０４）ユーザ操作が入力されると、図４９の（ｄ）に進む。
図４９の（ｄ）を参照すると、マルチディスプレイ装置１００はスタイラスペン４８００のダイアル４９０５の回転（符号４９０４）に応答して選択表示を回転させて（符号４９１１）ツール選択４９１２を表示する。
【０２３３】
図４９の（ｅ）を参照すると、ツールセットで選択されたツールが表示されている状態でスタイラスペン４８００の下段ボタン４９０６をクリック４９０７すると、図４９の（ｆ）に進む。
図４９の（ｆ）を参照すると、マルチディスプレイ装置１００はスタイラスペン４８００のクリック４９０７に応答して選択されたツールの下位レベルツールセット４９１２を活性化させて表示する。
【０２３４】
図５０は、本発明の一実施形態にかかるスタイラスペン４８００を利用したツールセットの終了を説明するための図である。
図５０の（ａ）を参照すると、下位レベルツールセット５０１０が表示されているマルチディスプレイ装置１００で、スタイラスペン４８００の上／下段ボタンのうちいずれか一つ（符号５００１）をダブルクリック５００２すると、図５０の（ｂ）に進む。
図５０の（ｂ）を参照すると、マルチディスプレイ装置１００はスタイラスペン４８００の制御信号に応答してツールセットを終了させる。
【０２３５】
図５１及び図５２は、本発明の一実施形態にかかる近接センサ１５５を利用したツールセット実行を説明するための図である。
近接センサ１５５及び近接タッチに関する説明は、図７及び図１７において詳細に説明したため重複説明は省略する。
【０２３６】
図５１の（ａ）を参照すると、スタイラスペン４８００がマルチディスプレイ装置１００のツールを選択するためにツール５１０２近接接近５１０１すると、ツール５１０２に対応する下位レベルツールセットがＯｐａｃｉｔｙ（不透明）  ＵＩで少し露出する（符号５１０３）。
ここで、スタイラスペン４８００でツール５１０２をタップする（符号５１０４）と、図５１の（ｂ）に進む。
【０２３７】
図５１の（ｂ）を参照すると、スタイラスペン４８００のタップによって選択されたツール５１０２に対応する下位レベルツールセットが表示される（符号５１０５）。
以上の実施形態ではスタイラスペン４８００の接近を仮定したが、ユーザの手又は他のユーザオブジェクトの接近にも適用することができる。
【０２３８】
図５２は、ユーザの手の接近によってツールセット実行を説明するための図である。
図５２の（ａ）を参照すると、ユーザの左手５２０１がマルチディスプレイ装置１００に向かって接近５２０２する。
左手５２０１の一本指でマルチディスプレイ装置１００のディスプレイ上をタッチする場合、マルチディスプレイ装置１０は手の接近方向を考慮してタッチポイントを中心にツールセットを活性化させる（符号５２１１）。その後、ユーザはスタイラスペン５２２０又はユーザの右手を用いてツールセットのツールを選択することができる。
【０２３９】
図５２の（ｂ）は、ユーザの右手（５２０１−１）がマルチディスプレイ装置１００に向かって接近する実施形態を説明する。
この場合も、同様にユーザの手の接近方向を考慮してツールセットを活性化させる（符号５２１１−１）。
好ましくは、ユーザの視線を妨げないようにツールセットは手の接近方向と反対に活性化されなければならない。
【０２４０】
〔マルチタッチを利用したツールセット実行〕
以下では、マルチディスプレイ装置１００でマルチタッチを利用したツールセット実行について説明する。
図５３は、本発明の一実施形態にかかる手とペンのマルチタッチに対応するツールセット提供を説明するための図である。
図５３を参考すると、スタイラスペン４８００のタッチが認識された場合（符号５３１０）、マルチディスプレイ装置１００は駆動されているアプリケーションでスタイラスペン４８００が利用されるツールセット５３１５を表示する。
【０２４１】
一例として、ペイントアプリケーションでスタイラスペン４８００は細密な線を描く用途として利用することができ、これに該当するペンタイプを選択できるツールセット５３１５を提供する。
一方、手のタッチが認識された場合（符号５３２０）、マルチディスプレイ装置１００は駆動しているアプリケーションで手が利用されるツールセット５３２５を表示する。
一例として、ペイントアプリケーションで手は太い線又は色を塗る用途として利用することができ、これに該当する筆タイプを選択できるツールセット５３２５を提供する。
【０２４２】
図５４は、本発明の一実施形態にかかる手とペンのマルチタッチに対応するツール利用方法を説明するための図である。
図５３では、ペイントアプリケーションでスタイラスペン４８００には線を描くツールが提供され、手には太い線又は色を塗るツールが提供されるものと説明したが、図５４では、スタイラスペン４８００に筆記道具（一例として、多様な色を表示する鉛筆、ペン、筆、クレパス）のツールが提供され、手にパターニング道具（一例として、直線定規、三角定規、波型定規、分度器、円形板）のツールが提供されることを仮定して説明する。
【０２４３】
図５４を参考すると、マルチディスプレイ装置１００はペン５４１０と手５４２０のタッチをそれぞれ認識して、ペン５４１０のタッチに対応する動作（符号５４１１）を行い、手５４２０のタッチに対応する動作（符号５４２１）を行う。
一例として、ディスプレイ部上でペン５４１０のタッチが移動すると、移動経路に沿って一つの線が描かれ（符号５４１１）、手４５１９タッチが移動すると、移動経路に沿って三角定規５４２１が移動する。従って、ユーザは三角定規などのパターニング道具を用いて容易に所望する絵を描くことができる。
【０２４４】
〔ツールセットの拡張〕
図５５は、本発明の一実施形態にかかるツールセットのアップデート動作を説明するための図である。
マルチディスプレイ装置１００は、通信部１１０のそれぞれの通信モジュールを用いて外部装置又は外部ネットワークとデータを共有することができる。
マルチディスプレイ装置１００は予め設置されたツール以外にも、追加的なツールを外部装置又は外部ネットワークを通してアップデートすることができる。
【０２４５】
追加ツールはマルチディスプレイ装置１００のＯＳ、ＳＤＫ（Ｓｏｆｔｗａｒｅ  Ｄｅｖｅｌｏｐｍｅｎｔ  Ｋｉｔ）を用いて開発することができ、ユーザは開発された新しい追加ツール及びアップデートされたツールをインターネットなどのネットワークを通してマルチディスプレイ装置１００に追加することができる。
一例として、ユーザはアプリケーションストア等で開発されたツールを購入し、ツールセットを再構成することができる。
【０２４６】
図５５を参考すると、インターネットなどの外部ネットワーク５５３０からユーザは新しい追加ツール５５２０を伝送してもらうことができる。
ユーザは予め設置されたツール５５１０以外にもユーザの嗜好に合うツールを選択的に追加することができるようになる。
一方、追加ツール５５２０は、好ましくは、図３１の可変領域３１０１に配置され得る。
【０２４７】
〔ツールセットの配置〕
図５６は、本発明の一実施形態にかかるツールセットの配置を説明するための図である。
図２０〜図４７では、ヒンジ領域で一つのディスプレイ部の方向に配置される半円模様のツールセットＵＩについてのみ説明したが、下記のようにいろいろな形態に配置されてもよい。
【０２４８】
図５６を参考すると、エクスペンディングモードのマルチディスプレイ装置１００で第１及び第２ディスプレイ部が上下に配置された場合、下側に配置された第２ディスプレイ部全体５６１０又は下段５６２０にツールセットが配置されてもよい。この場合は、ノートパソコンのような作業環境をユーザに提供するツールセットに適用することができる。
一方、マルチディスプレイ装置１００で第１及び第２ディスプレイ部が左右に配置された場合、ヒンジ領域左右側のディスプレイ部の一部分５６３０又はディスプレイ部の反対端の一部分５６４０にツールセットが配置されてもよい。この場合は、図２０〜図４７で説明したように、両ディスプレイ部上でタッチジェスチャーなどユーザの操作が入力される作業環境のツールセットに提供することができる。
【０２４９】
図５７は、図５６の第２ディスプレイ部全体５６１０にツールセットが配置された場合、ツールセット実行を説明するための図である。
図５７の（ａ）を参照すると、マルチディスプレイ装置１００で第１ディスプレイ部の画面５７１０ではノートパソコンのモニタのように作業スクリーンを表示する。
【０２５０】
第２ディスプレイ部の画面５７２０の円はユーザの入力を受ける部分として使われ、第２ディスプレイ部の画面５７２０上に特定ユーザの操作、一例としてスリーフィンガフリックジェスチャー５７３０が検知されると、図５７の（ｂ）に進む。
図５７の（ｂ）を参照すると、マルチディスプレイ装置１００は特定ユーザの操作に応答して現在駆動しているアプリケーションに対応するツールセット５７２１を表示する。
この時、ユーザがツールセットからいずれか一つのツールを選択するジェスチャー、一例としてタップジェスチャー５７３１が入力された場合、図５７の（ｃ）に進む。
図５７の（ｃ）を参考すると、第２ディスプレイはいずれか一つのツールを選択するジェスチャーに応答して選択されたツールに転換される。
以上のように、タッチジェスチャーなどのユーザ操作によりツールセットを他の段階のプロセスなしに自動で実行させてユーザ中心の作業環境を提供することができるようになる。
【０２５１】
図５８は、本発明の一実施形態にかかるマルチディスプレイ装置１００のツール提供動作を説明するためのフローチャートである。
図５８を参照すると、予め定義されたユーザ操作が入力されると（ステップＳ５８１０で「Ｙ」）、第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂのうち少なくとも一つを用いて、現在実行中の動作に対応するツールセットを表示するステップＳ５８２０。
【０２５２】
ここで、予め定義されたユーザ操作は、第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂを連結するヒンジ部１８５から第１ディスプレイ部１９０ａへ向かう第１方向又は第２ディスプレイ部１９０ｂへ向かう第２方向に行われるタッチジェスチャーであり、タッチジェスチャーが行われた方向に従って第１ディスプレイ部１９０ａ又は第２ディスプレイ部１９０ｂにツールセットを表示することができる。
一方、ツールセットは、タッチジェスチャーが終了された地点を基準に半円形態にツールを列挙したグラフィックＵＩでもよい。
【０２５３】
一方、ツールセットは、インターネットブラウザ調整メニュー、音楽プレーヤー調整メニュー、動画プレーヤー調整メニュー、カメラオプション調整メニュー、メッセージ調整メニュー、メモ調整メニュー、ギャラリー調整メニュー、デジタルブック調整メニュー、連絡先調整メニュー、カレンダー調整メニュー、筆記特性調整メニュー、デジタル調整メニューの内の少なくとも一つを含むことができる。
【０２５４】
ツールセットで一つのツールが選択されると（ステップＳ５８３０で「Ｙ」）、選択されたツールを提供するステップＳ５８４０。
図５８のようなマルチディスプレイ装置のツール提供方法は、図１の構成を有するマルチディスプレイ装置１００で実施することができ、その他の構成を有するマルチディスプレイ装置でも実行することができる。
【０２５５】
図５９は、本発明の一実施形態にかかるマルチディスプレイ装置のツール提供動作を説明するためのフローチャートである。
図５９を参照すると、予め定義されたユーザ操作（即ち、ツールセット表示のためのユーザ操作）が入力されると（ステップＳ５９１０で「Ｙ」）、マルチディスプレイ装置の動作に対応するツールからなるツールセットを第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂのうち少なくとも一つの画面に表示するステップＳ５９２０。
ここで、ツールセットは、ユーザの操作に従ってツールセットに含まれるツールを可変的に表示することを特徴とする。
【０２５６】
ここで、ユーザ操作は、第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂを連結するヒンジ部１８５から第１ディスプレイ部１９０ａへ向かう第１方向又は第２ディスプレイ部１９０ｂへ向かう第２方向に行われるタッチジェスチャーであり、タッチジェスチャーが行われた方向に従って第１ディスプレイ部１９０ａ又は第２ディスプレイ部１９０ｂにツールセットを表示することができる。
【０２５７】
一方、ツールセットは、インターネットブラウザ調整メニュー、音楽プレーヤー調整メニュー、動画プレーヤー調整メニュー、カメラオプション調整メニュー、メッセージ調整メニュー、メモ調整メニュー、ギャラリー調整メニュー、デジタルブック調整メニュー、連絡先調整メニュー、カレンダー調整メニュー、筆記特性調整メニュー、デジタル調整メニューの内の少なくとも一つを含むことができる。
【０２５８】
ツールセットで一つのツールが選択され（ステップＳ５９３０で「Ｙ」）、選択されたツールに従属する下位レベルツールが存在するとき（ステップＳ５９４０で「Ｙ」）、下位レベルツールを列挙した下位ツールセットを表示する動作を行うことができるステップＳ５９５０。
なお、下位レベルツールセットで一つのツールが選択されると（ステップＳ５９６０で「Ｙ」）、ステップＳ５９４０に戻る。
【０２５９】
ここで、下位ツールセットは上位レベルのツールセットの外側に表示される円形バー形状のグラフィックＵＩ又はボタン形状のグラフィックＵＩでもよい。
一方、ツールセット及び下位ツールセットのうち少なくとも一つはユーザローリング操作に従ってスクロールされヒドゥン（隠れた）ツールを表示することができる。
【０２６０】
一方、選択されたツールに従属される下位レベルツールが存在しない場合（ステップＳ５９４０で「Ｎ」）、マルチディスプレイ装置１００の動作モードを選択するためのツールであるかを判断し、動作モードを選択するためのツールである場合（ステップＳ５９７０で「Ｙ」）、選択されたツールに対応する動作モードに転換されるステップＳ５９８０。
この場合、動作モードで予め定義されたユーザ操作がまた入力されると、ツールセット及び動作モードに対応する下位ツールを列挙した下位ツールセットをいっぺんに表示することができる。
【０２６１】
一方、動作モードを選択するためのツールでない場合（ステップＳ５９７０で「Ｎ」）、選択されたツールを提供するステップＳ５９９０。
この場合、ツールを提供するステップは、ツールセットで実行中のアプリケーションで使用可能なツールである場合、選択されたツールを第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂのうち少なくとも一つに表示することができる。
【０２６２】
図５９のようなマルチディスプレイ装置のツール提供方法は、図１の構成を有するマルチディスプレイ装置１００で実施することができ、その他の構成を有するマルチディスプレイ装置でも実行することができる。
【０２６３】
以上のように、本発明の多様な実施形態によれば、マルチディスプレイ装置１００でユーザがアプリケーションを直観的で便利に制御することができるようにアプリケーションのそれぞれに対応するツールセットを提供することができる。
【０２６４】
一方、このような多様な実施形態にかかる方法は、プログラミングされ各種の記録媒体に保存されてもよい。これにより、記録媒体を実行する多様な類型の電子装置で上述した多様な実施形態にかかる方法が実現することができる。
具体的には、本発明の一実施形態によると、予め定義されたユーザ操作が入力されると、第１ディスプレイ部１９０ａ及び第２ディスプレイ部１９０ｂのうち少なくとも一つを用いて、現在実行中の動作に対応するツールセットを表示するステップ及びツールセットで一つのツールが選択されると選択されたツールを提供するステップを順次的に行うプログラムの保存された非一時的コンピュータ読取可能記録媒体（Ｎｏｎ−ｔｒａｎｓｉｔｕｒｙ  ｃｏｍｐｕｔｅｒ  ｒｅａｄａｂｌｅ  ｍｅｄｉｕｍ）が提供され得る。
【０２６５】
非一時的コンピュータ読取可能記録媒体とは、レジスタ、キャッシュ、メモリなどのように短い瞬間データを保存する媒体ではなく、半永久的にデータを保存し、機器により読み取り可能な媒体を意味する。具体的に、上述した多様なアプリケーション又はプログラムは、ＣＤ、ＤＶＤ、ハードディスク、ブルーレイディスク、ＵＳＢ、メモリカード、ＲＯＭなどのような非一時的コンピュータ読取可能記録媒体に保存され提供することができる。
【０２６６】
尚、本発明は、上述の実施形態に限られるものではない。本発明の技術的範囲から逸脱しない範囲内で多様に変更実施することが可能である。
【符号の説明】
【０２６７】
２    第１ボディ
４    第２ボディ
１００    マルチディスプレイ装置
１１０    通信部
１１１    セルラー通信モジュール
１１２    無線ＬＡＮモジュール
１１３    近距離通信モジュール
１１４    コネクタ
１１５    ＧＰＳモジュール
１１６    放送通信モジュール
１２０    マルチメディア部
１２１    オーディオ再生モジュール
１２２    ビデオ再生モジュール
１３０    制御部
１３１    ＣＰＵ
１３３    ＧＰＵ
１３５    ＲＡＭ
１３７    ＲＯＭ
１３９    システムバス
１４０    撮像部
１４１    第１カメラ
１４２    第２カメラ
１５０    センサ部
１５１    タッチセンサ
１５２    地磁気センサ
１５３    加速度センサ
１５４    ヒンジセンサ
１５５    近接センサ
１６０    入／出力部
１６１    ボタン部
１６２    マイク
１６３    スピーカ
１６４    振動モータ
１７０    保存部
１８０    電源部
１８５    ヒンジ部
１９０ａ    第１ディスプレイ部
１９０ｂ    第２ディスプレイ部
４８００  スタイラスペン
【図１】
2014078235.tif 000006
【図２】
2014078235.tif 000007
【図３】
2014078235.tif 000008
【図４】
2014078235.tif 000009
【図５】
2014078235.tif 000010
【図６】
2014078235.tif 000011
【図７】
2014078235.tif 000012
【図８】
2014078235.tif 000013
【図９】
2014078235.tif 000014
【図１０】
2014078235.tif 000015
【図１１】
2014078235.tif 000016
【図１２】
2014078235.tif 000017
【図１３】
2014078235.tif 000018
【図１４】
2014078235.tif 000019
【図１５】
2014078235.tif 000020
【図１６】
2014078235.tif 000021
【図１７】
2014078235.tif 000022
【図１８】
2014078235.tif 000023
【図１９】
2014078235.tif 000024
【図２０】
2014078235.tif 000025
【図２１】
2014078235.tif 000026
【図２２】
2014078235.tif 000027
【図２３】
2014078235.tif 000028
【図２４】
2014078235.tif 000029
【図２５】
2014078235.tif 000030
【図２６】
2014078235.tif 000031
【図２７】
2014078235.tif 000032
【図２８】
2014078235.tif 000033
【図２９】
2014078235.tif 000034
【図３０】
2014078235.tif 000035
【図３１】
2014078235.tif 000036
【図３２】
2014078235.tif 000037
【図３３】
2014078235.tif 000038
【図３４】
2014078235.tif 000039
【図３５】
2014078235.tif 000040
【図３６】
2014078235.tif 000041
【図３７】
2014078235.tif 000042
【図３８】
2014078235.tif 000043
【図３９】
2014078235.tif 000044
【図４０】
2014078235.tif 000045
【図４１】
2014078235.tif 000046
【図４２】
2014078235.tif 000047
【図４３】
2014078235.tif 000048
【図４４】
2014078235.tif 000049
【図４５】
2014078235.tif 000050
【図４６】
2014078235.tif 000051
【図４７】
2014078235.tif 000052
【図４８】
2014078235.tif 000053
【図４９】
2014078235.tif 000054
【図５０】
2014078235.tif 000055
【図５１】
2014078235.tif 000056
【図５２】
2014078235.tif 000057
【図５３】
2014078235.tif 000058
【図５４】
2014078235.tif 000059
【図５５】
2014078235.tif 000060
【図５６】
2014078235.tif 000061
【図５７】
2014078235.tif 000062
【図５８】
2014078235.tif 000063
【図５９】
2014078235.tif 000064