(57)【要約】【課題】本発明の目的とするところは、ポインタを制御するための入力装置の種類によって異なるＵＩを提供することで、ユーザに入力装置の特性を反映してポインタを制御することができるようにするディスプレイ装置及びその制御方法を提供することにある。【解決手段】ディスプレイ装置及びその制御方法が提供される。本ディスプレイ装置の制御方法において、ポインタを制御するための複数の入力部のうちの一つからモード開始命令を入力されるステップと、モード開始命令が入力されると、入力部のタイプを決定するステップと、決定するステップに基づいて、ディスプレイ画面にポインタを表示するステップとを含む。【選択図】図９
2014130590.tif 000002
【特許請求の範囲】
【請求項１】
ディスプレイ装置の制御方法において、
ポインタを制御するための複数の入力部のうちの一つからモード開始命令を入力されるステップと、
前記モード開始命令が入力されると、入力部のタイプを決定するステップと、
前記決定するステップに基づいて、ディスプレイ画面に前記ポインタを表示するステップと
を含む制御方法。
【請求項２】
前記複数の入力部のうちの第１入力部を介してモード開始命令が入力されると、ディスプレイ画面に前記ポインタを表示し、前記複数の入力部のうちの第２入力部を介してモード開始命令が入力されると、前記ディスプレイ画面に前記ポインタ及び少なくとも一つのガイドＵＩを表示するステップを含むことを特徴とする請求項１に記載の制御方法。
【請求項３】
前記表示するステップは、
前記第２入力部を介してモード開始命令が入力された後、予め設定された時間が経過すると、表示された前記少なくとも一つのガイドＵＩを前記ディスプレイ画面から除去するステップを含むことを特徴とする請求項２に記載の制御方法。
【請求項４】
前記除去するステップの後、前記第２入力部を介して入力されたユーザモーションに応じて、前記ポインタが前記少なくとも一つのガイドＵＩが表示されていた領域のうちの一つに移動すると、前記移動された領域に表示されていたガイドＵＩに対応するディスプレイアイテムを表示するステップを含むことを特徴とする請求項３に記載の制御方法。
【請求項５】
前記少なくとも一つのガイドＵＩは、
音量調節アイコンを生成するためのガイドＵＩと、チャネル調節アイコンを生成するためのガイドＵＩと、メッセージ確認のためのガイドＵＩと、おすすめコンテンツをガイドするためのガイドＵＩと、ユーザのモーションに対応する機能をガイドするためのガイドＵＩ、及び、コンテンツ提供のためのモードに切り替えるためのガイドＵＩのうち、少なくとも一つを含むことを特徴とする請求項２に記載の制御方法。
【請求項６】
前記少なくとも一つのガイドＵＩは、
前記少なくとも一つのガイドＵＩに対応するディスプレイアイテムの一部領域が表示されることを特徴とする請求項２に記載の制御方法。
【請求項７】
前記アイテムの一部は、前記少なくとも一つのガイドＵＩのタイトルであることを特徴とする請求項６に記載の制御方法。
【請求項８】
前記少なくとも一つのガイドＵＩは、
前記ディスプレイ画面の外郭領域に表示されることを特徴とする請求項２に記載の制御方法。
【請求項９】
前記複数の入力部のうちの第３入力部を介してモード開始命令が入力されると、前記ディスプレイ画面に前記ポインタ及び前記少なくとも一つのガイドＵＩと異なる数のガイドＵＩを表示するステップを更に含むことを特徴とする請求項２に記載の制御方法。
【請求項１０】
前記第１入力部は、前記ディスプレイ装置を制御するリモートコントローラであり、
前記第２入力部は、ユーザのモーションを撮影してユーザのモーション情報を獲得するモーション入力部であり、
前記第３入力部は、マウスであることを特徴とする請求項９に記載の制御方法。
【請求項１１】
ディスプレイ装置において、
ポインタを制御するためのユーザ命令を入力される複数の入力部と、
前記ポインタを表示するディスプレイ部と、
モード開始命令が入力されると、入力部のタイプを決定し、前記決定に基づいて、前記ディスプレイ部に前記ポインタ及び少なくとも一つのガイドＵＩを表示するように前記ディスプレイ部を制御する制御部と
を含むディスプレイ装置。
【請求項１２】
前記制御部は、
前記複数の入力部のうちの第１入力部を介してモード開始命令が入力されると、ディスプレイ画面に前記ポインタを表示し、前記複数の入力部のうちの第２入力部を介してモード開始命令が入力されると、前記ディスプレイ画面に前記ポインタ及び少なくとも一つのガイドＵＩを表示することを特徴とする請求項１１に記載のディスプレイ装置。
【請求項１３】
前記制御部は、
前記第２入力部を介してモード開始命令が入力された後、予め設定された時間が経過すると、前記表示された少なくとも一つのガイドＵＩを除去するように前記ディスプレイ部を制御することを特徴とする請求項１２に記載のディスプレイ装置。
【請求項１４】
前記制御部は、
前記少なくとも一つのガイドＵＩが除去された後、前記第２入力部を介してユーザモーションが入力されると、前記ユーザモーションに応じて前記ポインタを移動し、前記ユーザモーションに応じて前記ポインタが前記少なくとも一つのガイドＵＩが表示されていた領域のうちの一つに移動すると、前記移動された領域に表示されていたガイドＵＩに対応するディスプレイアイテムを表示するように前記ディスプレイ画面を制御することを特徴とする請求項１３に記載のディスプレイ装置。
【請求項１５】
前記少なくとも一つのガイドＵＩは、
音量調節アイコンを生成するためのガイドＵＩと、チャネル調節アイコンを生成するためのガイドＵＩと、メッセージ確認のためのガイドＵＩと、おすすめコンテンツをガイドするためのガイドＵＩと、ユーザのモーションに対応する機能をガイドするためのガイドＵＩ、及び、コンテンツ提供のためのモードに切り替えるためのガイドＵＩのうち、少なくとも一つを含むことを特徴とする請求項１２に記載のディスプレイ装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ディスプレイ装置及びその制御方法に関し、より詳細には、複数の入力部を用いてディスプレイ画面に表示されたポインタを制御することができるディスプレイ装置及びその制御方法に関する。
【背景技術】
【０００２】
近来のディスプレイ装置は、単に放送受信機能を提供するだけでなく、テレビ通話機能、ウェブブラウジング機能、ゲーム機能等のような機能が採用されている。特に、多様な機能がディスプレイ装置に採用されることで、従来のリモコンのボタンのみでディスプレイ装置を制御するのに限界があった。このような問題点を解決するために、最近発売された多くのディスプレイ装置は、ポインタを用いて多様な機能を制御することができるようになった。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】米国特開第２０１０−０３０２３５７号公報
【特許文献２】韓国特開第２００４−１１０７１１号公報
【特許文献３】韓国特開第２０１１−０６８４２１号公報
【特許文献４】韓国特開第２０１１−０６０６５０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、従来のディスプレイ装置は、ポインタを制御するために、入力装置と関係なく、同じ動作を行うように構成されている。例えば、タッチスクリーンを備えたリモコンを用いてポインタを制御する場合、または、撮影されたユーザのモーションを用いてポインタを制御する場合のいずれにも、ディスプレイ画面に単にポインタのみを表示していた。しかし、リモコンを利用する場合、ポインタを利用しなくても、チャネルまたは音量調節が容易であるが、ユーザのモーションを用いてポインタを制御する場合、別途のアイコンなしには、チャネルまたは音量調節は容易でなく、チャネルまたは音量を調節するために、リモコンをもう一度探さなければならないという問題があった。
すなわち、従来のディスプレイ装置は、ポインタを制御するための入力装置による特性を反映することができないという問題点が発生していた。
【０００５】
本発明は、上記の課題に鑑みてなされたものであり、本発明の目的とするところは、ポインタを制御するための入力装置の種類によって異なるＵＩを提供することで、ユーザに入力装置の特性を反映してポインタを制御することができるようにするディスプレイ装置及びその制御方法を提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するための本発明の一実施形態に係るディスプレイ装置の制御方法は、ポインタを制御するための複数の入力部のうちの一つからモード開始命令を入力されるステップと、前記モード開始命令が入力されると、入力部のタイプを決定するステップと、前記決定するステップに基づいて、前記ディスプレイ画面に前記ポインタを表示するステップとを含む。
【０００７】
当該方法は、前記複数の入力部のうちの第１入力部を介してモード開始命令が入力されると、ディスプレイ画面に前記ポインタを表示し、前記複数の入力部のうちの第２入力部を介してモード開始命令が入力されると、前記ディスプレイ画面に前記ポインタ及び少なくとも一つのガイドＵＩを表示するステップを含んでよい。
【０００８】
なお、前記表示するステップは、前記第２入力部を介してモード開始命令が入力された後、予め設定された時間が経過すると、前記表示された少なくとも一つのガイドＵＩを前記ディスプレイ画面から除去するステップを含んでよい。
【０００９】
なお、前記除去するステップの後、前記第２入力部を介して入力されたユーザモーションに応じて、前記ポインタが前記少なくとも一つのガイドＵＩが表示されていた領域のうちの一つに移動すると、前記移動された領域に表示されていたガイドＵＩに対応するディスプレイアイテムを表示するステップを含んでよい。
【００１０】
そして、前記少なくとも一つのガイドＵＩは、音量調節アイコンを生成するためのガイドＵＩと、チャネル調節アイコンを生成するためのガイドＵＩと、メッセージ確認のためのガイドＵＩと、おすすめコンテンツをガイドするためのガイドＵＩと、ユーザのモーションに対応する機能をガイドするためのガイドＵＩ、及び、コンテンツ提供のためのモードに切り替えるためのガイドＵＩのうち、少なくとも一つを含んでよい。
なお、前記少なくとも一つのガイドＵＩは、前記少なくとも一つのガイドＵＩに対応するディスプレイアイテムの一部領域が表示されてよい。
そして、前記少なくとも一つのガイドＵＩは、前記ディスプレイ画面の外郭領域に表示されてよい。
【００１１】
なお、前記複数の入力部のうちの第３入力部を介してモード開始命令が入力されると、前記ディスプレイ画面に前記ポインタ及び前記少なくとも一つのガイドＵＩと異なる数のガイドＵＩを表示するステップを更に含んでよい。
【００１２】
そして、前記第１入力部は、前記ディスプレイ装置を制御するリモートコントローラであり、前記第２入力部は、ユーザのモーションを撮影してユーザのモーション情報を獲得するモーション入力部であり、前記第３入力部は、マウスであってよい。
【００１３】
一方、上記目的を達成するための本発明の一実施形態に係るディスプレイ装置において、ポインタを制御するためのユーザ命令を入力される複数の入力部と、前記ポインタを表示するディスプレイ部と、前記モード開始命令が入力されると、入力部のタイプを決定し、前記決定に基づいて、前記ディスプレイ部に前記ポインタ及び少なくとも一つのガイドＵＩを表示するように前記ディスプレイ部を制御する制御部とを含む。
【００１４】
なお、前記制御部は、前記複数の入力部のうちの第１入力部を介してモード開始命令が入力されると、ディスプレイ画面に前記ポインタを表示し、前記複数の入力部のうちの第２入力部を介してモード開始命令が入力されると、前記ディスプレイ画面に前記ポインタ及び少なくとも一つのガイドＵＩを表示してよい。
【００１５】
なお、前記制御部は、前記第２入力部を介してモード開始命令が入力された後、予め設定された時間が経過すると、前記表示された少なくとも一つのガイドＵＩを除去するように前記ディスプレイ部を制御してよい。
【００１６】
なお、前記制御部は、前記少なくとも一つのガイドＵＩが除去された後、前記第２入力部を介してユーザモーションが入力されると、前記ユーザモーションに応じて前記ポインタを移動し、前記ユーザモーションに応じて前記ポインタが前記少なくとも一つのガイドＵＩが表示されていた領域のうちの一つに移動すると、前記移動された領域に表示されていたガイドＵＩに対応するディスプレイアイテムを表示するように前記ディスプレイ部を制御してよい。
【００１７】
そして、前記少なくとも一つのガイドＵＩは、音量調節アイコンを生成するためのガイドＵＩと、チャネル調節アイコンを生成するためのガイドＵＩと、メッセージ確認のためのガイドＵＩと、おすすめコンテンツをガイドするためのガイドＵＩと、ユーザのモーションに対応する機能をガイドするためのガイドＵＩ、及び、コンテンツ提供のためのモードに切り替えるためのガイドＵＩのうち、少なくとも一つを含んでよい。
なお、前記少なくとも一つのガイドＵＩは、前記少なくとも一つのガイドＵＩに対応するディスプレイアイテムの一部領域が表示されてよい。
そして、前記少なくとも一つのガイドＵＩは、前記ディスプレイ画面の外郭領域に表示されてよい。
【００１８】
なお、前記制御部は、前記複数の入力部のうちの第３入力部を介してモード開始命令が入力されると、前記ディスプレイ画面に前記ポインタ及び前記少なくとも一つのガイドＵＩと異なる数のガイドＵＩを表示するように前記ディスプレイ部を制御してよい。
【００１９】
そして、前記第１入力部は、前記ディスプレイ装置を制御するリモートコントローラであり、前記第２入力部は、ユーザのモーションを撮影してユーザのモーション情報を獲得するモーション入力部であり、前記第３入力部は、マウスであってよい。
【発明の効果】
【００２０】
以上説明したように、本発明によれば、ユーザは入力装置の特性に応じてポインタを用いて、ディスプレイ装置の多様な機能を行うことができるようになる。
【図面の簡単な説明】
【００２１】
【図１】本発明の一実施形態に係るディスプレイ装置の構成を概略に示すブロック図である。
【図２】本発明の一実施形態に係るディスプレイ装置の構成を詳細に示すブロック図である。
【図３】本発明の一実施形態に係るリモートコントローラを用いてポインタを制御するモードを説明するための図である。
【図４】本発明の一実施形態に係るモーション入力部を用いてポインタを制御するモードを説明するための図である。
【図５】本発明の一実施形態に係るモーション入力部を用いてポインタを制御するモードを説明するための図である。
【図６】本発明の一実施形態に係るモーション入力部を用いてポインタを制御するモードを説明するための図である。
【図７】本発明の一実施形態に係るモーション入力部を用いてポインタを制御するモードを説明するための図である。
【図８】本発明の一実施形態に係るマウスを用いてポインタを制御するモードを説明するための図である。
【図９】本発明の一実施形態に係るディスプレイ装置の制御方法を説明するためのフローチャートである。
【発明を実施するための形態】
【００２２】
以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。
【００２３】
図１は、本発明の一実施形態に係るディスプレイ装置１００の構成を概略に示すブロック図である。図１に示すように、ディスプレイ装置１００は、ディスプレイ部１１０と、入力部１２０及び制御部１３０を含む。このとき、入力部１２０は、第１入力部１２０−１と第２入力部１２０−２とを含む。一方、本発明の一実施形態に係るディスプレイ装置１００は、デジタルテレビであってよいが、それは一実施形態に過ぎず、デスクトップパソコン、プロジェクタテレビ、タブレットパソコン、携帯電話等のような多様なディスプレイ装置で実現されてよい。
【００２４】
ディスプレイ部１１０は、制御部１３０に制御によって多様な映像データを出力する。特に、ポインタを用いて、ディスプレイ装置１００の機能を制御するためのモードにシフトする場合、ディスプレイ部１１０はポインタを表示することができる。なお、ディスプレイ部１１０は、少なくとも一つのガイドＵＩ及びガイドＵＩに対応するディスプレイアイテムを表示することができる。
【００２５】
入力部１２０には、ディスプレイ装置１００の機能全般を制御するためのユーザ命令が入力される。特に、本発明の一実施形態に係る入力部１２０は、ディスプレイ部１１０に表示されたポインタを制御するための入力部として、第１入力部１２０−１及び第２入力部１２０−２を含む。このとき、第１入力部１２０−１は、絶対ポインティング機能を含むリモートコントローラであってよく、第２入力部１２０−２は、ユーザのモーションを入力されるモーション入力部であってよい。
【００２６】
なお、入力部１２０には、ポインタを制御するためのモードにシフトするためのモード開始命令を入力してもよい。このとき、第１入力部１２０−１を介してのモード開始命令は、リモートコントローラに備えられた予め設定されたボタンを選択する命令であってもよく、第２入力部１２０−１を介してのモード開始命令は、ユーザの特定モーション（例えば、ユーザが手を左右に複数回振るモーション）であってもよい。
【００２７】
制御部１３０は、入力部１２０を介して入力されたユーザ命令に応じて、ディスプレイ装置１００の動作全般を制御する。特に、ポインタを制御するための複数の入力部１２０−１、１２０−２のうちの一方から、モード開始命令が入力されると、制御部１２０は、モード開始命令が入力された入力部１２０を判断する。そして、複数の入力部のうち、第１入力部１２０−１を介してモード開始命令が入力されると、制御部１３０は、ディスプレイ部１１０にポインタを表示する。そして、複数の入力部のうち、第２入力部１２０−２を介してモード開始命令が入力されると、制御部１３０は、ディスプレイ部にポインタ及び少なくとも一つのガイドＵＩを表示する。
【００２８】
具体的には、第１入力部１２０−１を介してモード開始命令が入力されると、制御部１３０は、第１入力部１２０−１を用いてポインタを制御する第１モードにシフトする。第１モードにシフトした場合、制御部１３０は、ディスプレイ部１１０の中央にポインタを表示することができる。そして、第１入力部１２０−１を介してポインタ移動命令が入力されると、制御部１３０は、ポインタ移動命令に応じて、ポインタをディスプレイ部１１０内で移動させることができ、ポインタ選択命令を通じて、制御部１３０は、ポインタの位置するアイテムを選択することができる。
【００２９】
しかし、第２入力部１２０−２を介してモード開始命令が入力されると、制御部１３０は、第２入力部１２０−２を用いてポインタを制御する第２モードにシフトすることができる。特に、第２入力部１２０−２は、第１入力部１２０−１と違って、別途のボタンを備えないため、第１入力部１２０−１に備えられたボタンと同一の機能を行うために、制御部１３０はポインタだけでなく、少なくとも一つのガイドＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）を表示することができる。このとき、ガイドＵＩは、ディスプレイ装置１００の特定機能に対応するディスプレイアイテムを生成するためのＵＩである。特に、ガイドＵＩは、音量調節アイコンを生成するためのＵＩと、チャネル調節アイコンを生成するためのガイドＵＩと、メッセージ確認のためのガイドＵＩと、おすすめコンテンツをガイドするためのガイドＵＩと、ユーザのモーションに対応する機能をガイドするためのガイドＵＩ、及び、コンテンツ提供のためのモードに切り替えるためのガイドＵＩのうち、少なくとも一つを含んでよい。
【００３０】
なお、少なくとも一つのガイドＵＩは、対応するディスプレイアイテムの一部の内容を含むことができるが、それは一実施形態に過ぎず、ディスプレイアイテムのタイトルを表示することができ、別途のインディケータ（ｉｎｄｉｃａｔｏｒ）なしに、レイアウトのみを表示することができる。なお、少なくとも一つのガイドＵＩは、ディスプレイ部１１０の外郭領域に表示されてよい。
【００３１】
そして、予め設定された時間（例えば、１秒）が経過すると、制御部１３０は、ディスプレイ部１１０に表示された少なくとも一つのガイドＵＩを除去するようにディスプレイ部１１０を制御することができる。
【００３２】
第２入力部１２０−２を介してポインタ移動命令が入力されると、制御部１３０は、表示されたポインタをポインタ移動命令に応じて移動させることができる。そして、ポインタ移動命令に応じて、ポインタが移動する間、少なくとも一つのガイドＵＩが表示されていた領域のうちの一つにポインタが移動されると、制御部１３０は、ポインタが移動された領域に表示されていたガイドＵＩに対応するディスプレイアイテムを表示するようにディスプレイ部１１０を制御することができる。例えば、ポインタが音量調節アイテムを生成するためのガイドＵＩが表示されていた領域に移動されると、制御部１３０は、音量調節アイテムを表示するようにディスプレイ部１１０を制御することができる。
【００３３】
ディスプレイアイテムが表示されると、制御部１３０は、ディスプレイアイテムを用いて、ディスプレイアイテムに対応する機能を行うことができる。例えば、音量調節アイコンが表示されると、制御部１３０は、音量調節アイコンを用いてディスプレイ装置１００の音量を調節することができる。
【００３４】
上述のように、ポインタを制御するための入力部の種類によって、ディスプレイ装置１００が異なるように動作することで、ユーザは入力部の特性によって、より便宜にディスプレイ装置１００を制御することができるようになる。
【００３５】
以下では、図２ないし図８を参照し、ディスプレイ装置についてより詳細に説明する。図２は、本発明の一実施形態に係るディスプレイ装置２００の構成を詳細に示すブロック図である。図２に示すように、ディスプレイ装置２００は、ディスプレイ部２１０と、通信部２２０と、映像受信部２３０と、オーディオ出力部２４０と、保存部２５０と、オーディオ処理部２６０と、ビデオ処理部２７０と、入力部２８０及び制御部２９０を含む。
【００３６】
一方、図２は、ディスプレイ装置２００が、通信機能、放送受信機能、動画再生機能、ディスプレイ機能等のように、多様な機能を備えた装置である場合を例に挙げて、各種構成要素を総合的に示すものである。よって、実施形態によっては、図２に示す構成要素の一部は、省略または変更されてよく、他の構成要素が更に追加されてよい。
【００３７】
ディスプレイ部２１０は、映像受信部２３０から受信した映像データをビデオ処理部２７０で処理したビデオフレーム及びグラフィック処理部２９３で生成された多様な画面のうち、少なくとも一つを表示する。特に、ディスプレイ部２１０は、ディスプレイ装置２００の機能を制御するためのポインタを表示することができる。なお、ディスプレイ部２１０は、ポインタを制御する入力部２８０の種類によって、少なくとも一つのガイドＵＩ及びディスプレイアイテムを表示することができる。
【００３８】
通信部２２０は、多様な通信方式に応じて多様な類型の外部機器と通信を行う構成である。通信部２２０は、Ｗｉ−Ｆｉチップ、ブルートゥースチップ、ＮＦＣチップ、無線通信チップ等のような多様な通信チップを含むことができる。このとき、Ｗｉ−Ｆｉチップ、ブルートゥースチップ、ＮＦＣチップは、それぞれＷｉ−Ｆｉ方式、ブルートゥース方式、ＮＦＣ方式で通信を行う。この中のＮＦＣチップは、１３５ｋＨｚ、１３．５６ＭＨｚ、４３３ＭＨｚ、８６０〜９６０ＭＨｚ、２．４５ＧＨｚ等のような多様なＲＦ−ＩＤ周波数帯域のうち、１３．５６ＭＨｚ帯域を使用するＮＦＣ（Ｎｅａｒ  Ｆｉｅｌｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ）方式で動作するチップを意味する。Ｗｉ−Ｆｉチップやブルートゥースチップを用いる場合には、ＳＳＩＤ及びセッションキー等のような各種接続情報を先に送受信し、それを用いて通信接続した後、各種情報を送受信することができる。無線通信チップは、ＩＥＥＥ、Ｚｉｇｂｅｅ（登録商標）、３Ｇ（３ｒｄ  Ｇｅｎｅｒａｔｉｏｎ）、３ＧＰＰ（３ｒｄ  Ｇｅｎｅｒａｔｉｏｎ  Ｐａｒｔｎｅｒｓｈｉｐ  Ｐｒｏｊｅｃｔ）、ＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）等のような多様な通信規格によって通信を行うチップを意味する。
【００３９】
映像受信部２３０は、多様なソースを通じて映像データを受信する。例えば、映像受信部２３０は、外部の放送局から放送データを受信することができ、外部装置（例えば、ＤＶＤ装置）から映像データを受信することができる。
オーディオ出力部２４０は、オーディオ処理部２６０で処理された各種オーディオデータだけでなく、各種報知音や音声メッセージを出力する構成である。
【００４０】
保存部２５０は、ディスプレイ装置２００を駆動するための多様なモジュールを保存する。例えば、保存部２５０には、ベースモジュール、センシングモジュール、通信モジュール、プレゼンテーションモジュール、ウェブブラウザモジュール、サービスモジュールを含むソフトウェアが保存されてよい。このとき、ベースモジュールは、ディスプレイ装置２００に含まれた各ハードウェアから伝達される信号を処理し、上位レイヤモジュールに伝達する基礎モジュールである。センシングモジュールは、各種センサから情報を収集し、収集された情報を分析及び管理するモジュールとして、顔認識モジュール、音声認識モジュール、モーション認識モジュール、ＮＦＣ認識モジュール等を含むこともできる。プレゼンテーションモジュールは、ディスプレイ画面を構成するためのモジュールとして、マルチメディアコンテンツを再生して出力するためのマルチメディアモジュール、ＵＩ及びグラフィック処理を行うＵＩレンダリングモジュールを含んでよい。通信モジュールは、外部と通信を行うためのモジュールである。ウェブブラウザモジュールは、ウェブブラウジングを行ってウェブサーバにアクセスするモジュールを意味する。サービスモジュールは、多様なサービスを提供するための各種アプリケーションを含むモジュールである。
【００４１】
上述のように、保存部２５０は、多様なプログラムモジュールを含むことができるが、各種プログラムモジュールを、ディスプレイ装置２００の種類及び特性に応じて一部省略したり、変形または追加してもよい。上述のディスプレイ装置２００がタブレットパソコンで実現された場合には、ベースモジュールには、ＧＰＳ基板の位置を判断するための位置判断モジュールを更に含み、センシングモジュールにはユーザの動作を検知するセンシングモジュールを更に含んでよい。
【００４２】
オーディオ処理部２６０は、オーディオデータに対する処理を行う構成要素である。オーディオ処理部２６０では、オーディオデータに対するデコードや増幅、ノイズフィルタリング等のような多様な処理が行われてよい。オーディオ処理部２６０で処理されたオーディオデータは、オーディオ出力部２４０に出力されてよい。
【００４３】
ビデオ処理部２７０は、映像受信部２３０から受信した映像データに対する処理を行う構成要素である。ビデオ処理部２７０では、映像データに対するデコード、スケーリング、ノイズフィルタリング、フレームレート変換、解像度変換等のような多様なイメージ処理を行うことができる。
【００４４】
入力部２８０は、ディスプレイ装置２００の動作全般を制御するためのユーザ命令を受信する。特に、本発明の一実施形態に係る入力部１２０は、ディスプレイ部１１０に表示されたポインタを制御するための入力部として、リモートコントローラ２８０−１と、モーション入力部２８０−２及びマウス２８０−３を含んでよい。
【００４５】
リモートコントローラ２８０−１は、ディスプレイ装置２００の機能を制御するための複数のボタン以外に、ポインタを制御するためのタッチスクリーンを含むことができる。タッチスクリーンにユーザのタッチが入力された場合、リモートコントローラ２８０−１は、ユーザのタッチが入力された地点に関する情報を制御部２９０に伝送することができる。このとき、制御部２９０は、ユーザのタッチが入力された地点に関する情報に基づいて、ポインタを移動させることができる。そして、タッチスクリーンにユーザの選択命令（例えば、連続して２回タッチ）が入力された場合、リモートコントローラ２８０−１は、選択命令を制御部２９０に伝送することができる。そして、制御部２９０は、ポインタの位置するディスプレイアイテムを選択する機能を行うことができる。
【００４６】
一方、本発明の一実施形態に係るリモートコントローラは、タッチスクリーンを用いてユーザ操作を受信することができるが、それは一実施形態に過ぎず、ポインティングデバイス機能を備えたリモートコントローラも、本発明の技術的思想が含まれてよい。
【００４７】
モーション入力部２８０−２は、ユーザモーションを撮像した映像信号（例えば、連続するフレーム）を受信して制御部２９０に提供する。例えば、モーション入力部２８０−２は、レンズ及びイメージセンサで構成されるカメラユニットで実現されてよい。なお、モーション入力部２８０−２は、ディスプレイ装置２００と一体型だけでなく、分離された形で実現されてよい。分離されたモーション入力部２８０−２は、ディスプレイ装置２００と有線または無線ネットワークを通じて接続されてよい。
【００４８】
モーション入力部２８０−２を介してモーションが入力される場合、制御部２９０は、保存部２５０に保存されたモーション検知モジュール及びモーションデータベースを用いてモーションを認識する。モーション認識（Ｍｏｔｉｏｎ  Ｒｅｃｏｇｎｉｔｉｏｎ）は、モーション入力部２８０−２を介して入力されるユーザのモーションに対応する映像（例えば、連続するフレーム）をモーション認識モジュールを用いて、周囲の背景と手（例えば、指を開いたり、指で拳を作る）領域に分離し、連続する手の動きを認識することができる。ユーザモーションが入力される場合、制御部２９０は受信された映像をフレーム単位で保存し、保存されたフレームを用いてユーザモーションの対象であるオブジェクト（例えば、ユーザの手）を検知する。制御部２９０は、フレームに含まれたオブジェクトの形、色、動きのうち、少なくともいずれか一つを検知してオブジェクトを検出する。制御部２９０は、複数のフレームに含まれた各々のオブジェクトの位置を用いて検出されたオブジェクトの動きを追跡することができる。
【００４９】
制御部２９０は、追跡されたオブジェクトの形及び動きに応じてモーションを判断する。例えば、制御部２９０は、オブジェクトの形の変化、速度、位置、方向のうち、少なくともいずれか一つを用いてユーザのモーションを判断する。ユーザのモーションは、手を握るモーションであるグラブ（Ｇｒａｂ）、表示されたカーソルを手で移動させるモーションであるポインティング移動（Ｐｏｉｎｔｉｎｇ  ｍｏｖｅ）、手を一定速度以上で一方向に動かすモーションであるスラップ（Ｓｌａｐ）、手を左／右または上／下に振るモーションであるシェイク（Ｓｈａｋｅ）、及び、手を回転させるモーションである回転（Ｒｏｔａｔｅ）を含む。上述の実施形態以外の他のモーションにも、本発明の技術的思想が適用されてよい。例えば、握られた手を開くスプレッド（Ｓｐｒｅａｄ）モーション等が更に含まれてよい。
【００５０】
制御部２９０は、ユーザのモーションがポインティング移動であるか、スラップであるかを判断するために、オブジェクトが定められた時間（例えば、８００ｍｓ）内に、定められた領域（例えば、４０ｃｍ×４０ｃｍの四角）から外れているかを判断する。オブジェクトが定められた時間内に定められた領域から外れていない場合、制御部２９０は、ユーザのモーションをポインティング移動と判断してよい。オブジェクトが定められた時間内に定められた領域から外れている場合、制御部２９０はユーザのモーションをスラップと判断してよい。別の一例として、オブジェクトの速度が予め設定された速度（例えば、３０ｃｍ／ｓ）以下であると判断された場合、制御部２９０はユーザのモーションをポインティング移動と判断する。オブジェクトの速度が予め設定された速度超過であると判断される場合、制御部２９０はユーザのモーションをスラップと判断する。
【００５１】
制御部２９０は、上述のように、認識されたモーションを用いて、ディスプレイ装置２００のタスク（Ｔａｓｋ）を行う。ディスプレイ装置２００のタスクは、チャネル変更、音量調節、コンテンツ（例えば、動画や音楽、写真等）の再生またはインターネットブラウジング等のように、ディスプレイ装置２００によって実行可能な機能のうち、少なくとも一つを含む。
マウス２８０−３は、ディスプレイ装置２００の本体と有線または無線で接続され、ユーザのポインタ移動命令及びポインタ選択命令を入力されてよい。
【００５２】
一方、入力部１２０は、ポインタを制御するためのモードにシフトするためのモード開始命令を入力されてよい。このとき、リモートコントローラ２８０−１を介してのモード開始命令は、リモートコントローラ２８０−１に備えられた予め設定されたボタンを選択する命令であってよく、モーション入力部２８０−２を介してのモード開始命令は、ユーザの特定モーション（例えば、ユーザが手を左右に複数回振るモーション）であってよく、マウス２８０−３を介してのモード開始命令は、マウス２８０−３をディスプレイ装置２００と接続する動作であってよい。
制御部２９０は、保存部２５０に保存された各種プログラムを用いてディスプレイ装置２００の動作全般を制御する。
【００５３】
制御部２９０は、図２に示すように、ＲＡＭ２９１と、ＲＯＭ２９２と、グラフィック処理部２９３と、メインＣＰＵ２９４と、第１ないしｎインターフェース２９５−１〜２９５−ｎ及びバス２９６を含む。このとき、ＲＡＭ２９１と、ＲＯＭ２９２と、グラフィック処理部２９３と、メインＣＰＵ２９４と、第１ないしｎインターフェース２９５−１〜２９５−ｎ等は、バス２９６を介して相互接続されてよい。
【００５４】
ＲＯＭ２９２には、システムブートのための命令語セット等が保存される。ターンオン命令が入力されて電源が供給されると、メインＣＰＵ２９４はＲＯＭ２９２に保存された命令語に従って保存部２５０に保存されたＯ／ＳをＲＡＭ２９１にコピーし、Ｏ／Ｓを実行させてシステムをブートさせる。ブートが完了すると、メインＣＰＵ２９４は、保存部２５０に保存された各種アプリケーションプログラムをＲＡＭ２９１にコピーし、ＲＡＭ２９１にコピーされたアプリケーションプログラムを実行させて各種動作を行う。
【００５５】
グラフィック処理部２９３は、演算部（図示せず）及びレンダリング部（図示せず）を用いて、アイコン、イメージ、テキスト等のような多様な客体を含む画面を生成する。演算部は、入力部２８０から受信された制御命令を用いて、画面のレイアウトに応じて各客体が表示される座標値、形、大きさ、カラー等のような属性値を演算する。レンダリング部は、演算部で演算した属性値に基づいて、客体を含む多様なレイアウトの画面を生成する。レンダリング部から生成された画面は、ディスプレイ部２１０のディスプレイ領域内に表示される。
【００５６】
メインＣＰＵ２９４は、保存部２５０にアクセスし、保存部２５０に保存されたＯ／Ｓを用いてブートを行う。そして、メインＣＰＵ２９４は、保存部２５０に保存された各種プログラム、コンテンツ、データ等を用いて多様な動作を行う。
【００５７】
第１ないしｎインターフェース２９５−１〜２９５−ｎは、上述の各種構成要素と接続される。インターフェースのうちの一つは、ネットワークを通じて外部装置と接続されるインターフェースであってよい。
【００５８】
特に、複数の入力部２８０−１、２８０−２、２８０−３のうちの一つからモード開始命令が入力された場合、制御部２９０は、モード開始命令が入力された入力部を判断することができる。例えば、リモートコントローラ２８０−１からモード開始命令が入力された場合、制御部２９０は、ディスプレイ装置２００のモードをリモートコントローラ２８０−１を用いて、ポインタを制御するリモートコントローラ制御モードに切り替える。または、モーション入力部２８０−２を介してモード開始命令が入力された場合、制御部２９０は、ディスプレイ装置２００のモードをモーション入力部２８０−２に入力されたユーザモーションを用いてポインタを制御するモーション制御モードに切り替える。または、マウス２８０−３を介してモード開始命令が入力された場合、制御部２９０は、ディスプレイ装置２００のモードをマウス制御モードに切り替える。
【００５９】
リモートコントローラ制御モードに切り替えられた場合、制御部２９０は、図３に示すように、ディスプレイ画面の中央にポインタ３１０を表示するようにディスプレイ部２１０を制御することができる。このとき、リモートコントローラでポインタを制御する場合、リモートコントローラにディスプレイ装置２００の機能（例えば、音量調節、チャネル変更等）を行うための複数のボタンが備えられているため、別途のガイドＵＩをディスプレイせずに、ポインタのみを用いてディスプレイ装置２００の多様な機能（例えば、アイテム選択）を行うことができる。
【００６０】
モーション制御モードに切り替わった場合、制御部２９０は、図４に示すように、ディスプレイ画面の中央にポインタ４１０を表示し、ディスプレイ画面の外郭（すなわち、角の部分）に複数のガイドＵＩ４２０〜４８０を表示するようにディスプレイ部２１０を制御することができる。このとき、ガイドＵＩは、ディスプレイ装置２００の特定機能を行うか、ディスプレイアイテムを生成するためのＵＩであってよい。
【００６１】
複数のガイドＵＩは、音量調節アイコンを生成するためのガイドＵＩ４２０と、前の画面に戻るためのＵＩ４３０と、メッセージ確認のためのガイドＵＩ４４０と、コンテンツ提供のためのモードに切り替えるためのガイドＵＩ４５０と、チャネル調節アイコンを生成するためのガイドＵＩ４６０と、ユーザのモーションに対応する機能をガイドするためのガイドＵＩ４７０と、おすすめコンテンツをガイドするためのガイドＵＩ４８０とを含んでよい。一方、本発明の一実施形態では、ガイドＵＩが上述のようなＵＩを含むものとして説明したが、それは一実施形態に過ぎず、ディスプレイ装置２００の他の機能を行うためのＵＩを含んでよい。例えば、電子マニュアルを生成するためのＵＩ、チャネルリストを生成するためのＵＩ等、多様なＵＩが含まれてよい。
【００６２】
ガイドＵＩは、別途のインディケータを表示しなくてよく、ガイドＵＩは、対応するディスプレイ装置２００の機能またはディスプレイアイテムのタイトルを表示することができる。例えば、音量調節アイコンを生成するためのガイドＵＩ４２０及びチャネル調節アイコンを生成するためのガイドＵＩ４６０は、それぞれの機能を示す「Ｖｏｌ」及び「ＣＨ」を表示することができるが、前の画面に戻るためのＵＩ４３０と、メッセージ確認のためのガイドＵＩ４４０と、コンテンツ提供のためのモードに切り替えるためのガイドＵＩ４５０と、ユーザのモーションに対応する機能をガイドするためのガイドＵＩ４７０と、おすすめコンテンツをガイドするためのガイドＵＩ４８０とは、別途のインディケータを表示しなくてよい。
一方、本発明の一実施形態に係るガイドＵＩは、対応するディスプレイアイテムの一部を表示することができる。
【００６３】
ポインタ４１０及び複数のガイド４２０〜４８０が表示された後、予め設定された時間（例えば、１秒）が経過すると、制御部２９０は、図５に示すように、ガイドＵＩをディスプレイ画面から除去し、ポインタ４１０だけが残るようにディスプレイ部２１０を制御することができる。
【００６４】
そして、モーション入力部２８０−２を介して入力されたユーザモーションが入力されると、制御部２９０は、表示されたポインタをユーザモーションに応じて移動させることができる。そして、ユーザモーションに応じてポインタが移動する間、複数のガイドＵＩ４２０〜４８０が表示されていた領域のうちの一つにポインタが移動されると、制御部２９０は、ポインタが移動された領域に表示されていたガイドＵＩに対応するディスプレイアイテムを表示するようにディスプレイ部２１０を制御することができる。
【００６５】
例えば、ポインタ４１０が音量調節アイコンを生成するためのガイドＵＩ４１０が表示されていた領域に移動されると、制御部２９０は、図６に示すように、音量調節アイコン６１０を表示するようにディスプレイ部２１０を制御することができる。このとき、音量調節アイコン６１０には、音量アップアイコン、音量ダウンアイコン及び現在の音量情報を含むことができる。
【００６６】
そして、モーション入力部２８０−２を介して入力されたユーザモーションに応じてポインタ４１０を音量アップアイコンに移動させた後、モーション入力部２８０−２を介して選択命令が入力されると、制御部２９０は、音量をワンステップ増加させることができる。モーション入力部２８０−２を介して入力されたユーザモーションに応じてポインタ４１０を音量ダウンアイコンに移動させた後、モーション入力部２８０−２を介して選択命令が入力されると、制御部２９０は、音量をワンステップ減少させることができる。
【００６７】
予め設定された時間（例えば、１０秒）の間、音量調節アイコン６１０を介しての音量調節命令が入力されていない場合、制御部２９０は、音量調節アイコン６１０をディスプレイ画面から再び除去するようにディスプレイ部２１０を制御することができる。
【００６８】
ポインタ４１０がユーザのモーションに対応する機能をガイドするためのガイドＵＩ４７０が表示されていた領域に移動されると、制御部２９０は、図７に示すように、モーションガイド情報７１０を表示するようにディスプレイ部２１０を制御することができる。モーションガイド情報７１０は、ユーザモーションに応じて、ディスプレイ装置２００で行われる機能を表示することができる。このとき、制御部２９０は、モーションガイド情報７１０をユーザのモーションに対応する機能をガイドするためのガイドＵＩ４７０が左方に次第に拡大して生成するようにディスプレイ部２１０を制御することができる。
【００６９】
上述のように、モーション入力部２８０−２を介してディスプレイ装置２００を制御する場合、ポインタ４１０と複数のガイドＵＩ４２０〜４８０を表示することで、ユーザが更なる入力装置を利用しなくても、ディスプレイ装置２００の機能を行うことができるようになる。
【００７０】
マウス制御モードに切り替わる場合、制御部２９０は、図８に示すように、ディスプレイ画面の中央にポインタ８１０を表示し、ディスプレイ画面の外郭に音量調節アイコンを生成するためのガイドＵＩ８２０及びチャネル調節アイコンを生成するためのガイドＵＩ８３０を表示するようにディスプレイ部２１０を制御することができる。すなわち、マウス制御モードに切り替わった場合、モーション制御モードより少ないガイドＵＩを表示することができる。
【００７１】
上述のように、ポインタを制御するための入力部２８０の種類によって異なるＵＩを表示することで、ユーザは入力装置の特性に応じてポインタを用いてディスプレイ装置の多様な機能を行うことができるようになる。
以下では、図９を参照して、ディスプレイ装置１００の制御方法について説明する。
【００７２】
まず、ディスプレイ装置１００は、複数の入力部１２０−１、１２０−２のうちの一方からモード開始命令を入力される（Ｓ９１０）。このとき、第１入力部１２０−１を介したモード開始命令はリモートコントローラに備えられた予め設定されたボタンを選択する命令であってよく、第２入力部１２０−２を介してのモード開始命令は、ユーザの特定モーション（例えば、ユーザが手を左右に複数回振るモーション）であってよい。
【００７３】
そして、ディスプレイ装置１００は、第１入力部１２０−１からモード開始命令が入力された否かを判断する（Ｓ９２０）。このとき、第１入力部１２０−１は、リモートコントローラであってよい。
【００７４】
第１入力部１２０−１からモード開始命令が入力された場合（Ｓ９２０−Ｙ）、ディスプレイ装置１００は、ディスプレイ画面にポインタを表示する（Ｓ９４０）。ディスプレイ装置１００は、第１入力部１２０−１を用いてポインタを制御することができる。
【００７５】
第１入力部１２０−１からモード開始命令が入力されていない場合（Ｓ９２０−Ｎ）、ディスプレイ装置１００は、第２入力部１２０−２からモード開始命令が入力されたと判断する（Ｓ９３０）。
【００７６】
第２入力部１２０−２からモード開始命令が入力された場合、ディスプレイ装置２００は、ディスプレイ画面にポインタ及び少なくとも一つのガイドＵＩを表示する（Ｓ９５０）。このとき、少なくとも一つのガイドＵＩは、ディスプレイ装置１００の機能を行ったり、ディスプレイアイテムを生成するためのＵＩであってよい。例えば、本発明の一実施形態に係るガイドＵＩは、音量調節アイコンを生成するためのガイドＵＩと、前の画面に戻るためのＵＩ、メッセージ確認のためのガイドＵＩと、コンテンツ提供のためのモードに切り替えるためのガイドＵＩ、チャネル調節アイコンを生成するためのガイドＵＩと、ユーザのモーションに対応する機能をガイドするためのガイドＵＩ、及び、おすすめコンテンツをガイドするためのガイドＵＩと、を含んでよい。
一方、上述の多様な実施形態に係るディスプレイ装置の制御方法は、プログラムで実現されてディスプレイ装置に提供されてよい。
【００７７】
具体的には、ポインタを制御するための複数の入力部のうちの一つからモード開始命令を入力されるステップと、モード開始命令が入力されると、入力部のタイプを決定するステップと、決定するステップに基づいて、ディスプレイ画面にポインタを表示するステップとを含むプログラムが保存された非一時的な読み取り可能な媒体（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ  ｃｏｍｐｕｔｅｒ  ｒｅａｄａｂｌｅ  ｍｅｄｉｕｍ）が提供されてよい。
【００７８】
非一時的な読み取り可能な媒体とは、レジスタやキャッシュ、メモリ等のように短い間だけデータを保存する媒体ではなく、半永久的にデータを保存し、機器によって読み取り（Ｒｅａｄｉｎｇ）が可能な媒体を意味する。具体的には、上述の多様なアプリケーションまたはプログラムは、ＣＤやＤＶＤ、ハードディスク、ブルーレイディスク、ＵＳＢ、メモリカード、ＲＯＭ等のような非一時的な読み取り可能な媒体に保存されて提供されてよい。
【００７９】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００８０】
１１０  ディスプレイ部
１２０−１  第１入力部
１２０−２  第２入力部
１３０  制御部
【図１】
2014130590.tif 000003
【図２】
2014130590.tif 000004
【図３】
2014130590.tif 000005
【図４】
2014130590.tif 000006
【図５】
2014130590.tif 000007
【図６】
2014130590.tif 000008
【図７】
2014130590.tif 000009
【図８】
2014130590.tif 000010
【図９】
2014130590.tif 000011