(57)【要約】【課題】本発明の目的とするところは、電子装置が接続された外部機器の種類および機能に応じて異なる音声ガイド情報またはモーションガイド情報を提供する電子装置の制御方法およびそれを用いた電子装置を提供することにある。【解決手段】電子装置及びその制御方法が提供される。本電子装置の制御方法は、電子装置を制御するためのユーザ音声をガイドする第１音声ガイド情報をディスプレイし、電子装置に接続された外部機器を制御するためのユーザ命令が入力されると、第１音声ガイド情報を、外部機器を制御するためのユーザ音声をガイドする第２音声ガイド情報に変更してディスプレイする。それにより、ユーザは音声認識を通じてより効率よくかつ直観的に外部機器を制御することができるようになる。【選択図】図８
2013141237.tif 000002
【特許請求の範囲】
【請求項１】
電子装置の制御方法において、
前記電子装置を制御するためのユーザ音声をガイドする第１音声ガイド情報をディスプレイするステップと、
前記電子装置に接続された外部機器を制御するためのユーザ命令が入力されるステップと、
前記ユーザ命令が入力されると、前記第１音声ガイド情報を、前記外部機器を制御するためのユーザ音声をガイドする第２音声ガイド情報に変更してディスプレイするステップと
を含む制御方法。
【請求項２】
前記電子装置に予め保存された複数の音声ガイド情報のうち、前記外部機器に対応する第２音声ガイド情報を検索して読み取るステップを更に含むことを特徴とする請求項１に記載の制御方法。
【請求項３】
前記電子装置がテレビである場合、
前記第１音声ガイド情報は、電源制御に関する音声命令語と、外部機器実行に関する音声命令語と、チャネル設定に関する音声命令語および音量設定に関する音声命令語のうち、少なくとも何れか一つを含み、
前記外部機器がＤＶＤプレーヤおよびＢＤプレーヤの何れかである場合、
前記第２音声ガイド情報は、電源制御に関する音声命令語と、外部機器実行に関する音声命令語および再生設定に関する音声命令語のうち、少なくとも何れか一つを含むことを特徴とする請求項１または２に記載の制御方法。
【請求項４】
前記第１音声ガイド情報がディスプレイされた場合、前記第１音声ガイド情報に含まれたユーザ音声命令語が入力されると、前記ユーザ音声命令語に従って、前記電子装置を制御するステップと、
前記第２音声ガイド情報がディスプレイされた場合、前記第２音声ガイド情報に含まれたユーザ音声命令語が入力されると、前記入力されたユーザ音声命令語に対応する制御信号を生成して、前記生成された制御信号を前記外部機器に伝送するステップと
を更に含むことを特徴とする請求項１ないし３の何れか一項に記載の制御方法。
【請求項５】
前記第２音声ガイド情報がディスプレイされた場合、前記第２音声ガイド情報に含まれた音声命令語のうちの一つに対応するユーザ音声命令語が入力されると、前記入力されたユーザ音声命令語に対応する制御信号を生成するステップと、
前記生成された制御信号を前記外部機器に伝送するための中継機器に無線で伝送するステップと
を更に含むことを特徴とする請求項１ないし３の何れか一項に記載の制御方法。
【請求項６】
前記生成された制御信号は、ブルートゥース通信によって前記中継機器に伝送され、
前記中継機器は、
前記伝送された制御信号をＩＲ信号に変換して前記外部機器に伝送することを特徴とする請求項５に記載の制御方法。
【請求項７】
前記第１音声ガイド情報および前記第２音声ガイド情報の各々は、前記電子装置のモードが音声制御モードであることを示すアイコンを含むことを特徴とする請求項１ないし６の何れか一項に記載の制御方法。
【請求項８】
前記第１音声ガイド情報および前記第２音声ガイド情報は、コンテンツがディスプレイされる画面の下段にディスプレイされることを特徴とする請求項１ないし７の何れか一項に記載の制御方法。
【請求項９】
前記ユーザ命令は、
外部機器を制御するための音声入力部を介して入力されたユーザ音声命令であることを特徴とする請求項１ないし８の何れか一項に記載の制御方法。
【請求項１０】
電子装置において、
ユーザ音声が入力される音声入力部と、
ディスプレイ部と、
前記電子装置を制御するためのユーザ音声をガイドする第１音声ガイド情報を前記ディスプレイ部にディスプレイし、前記電子装置に接続された外部機器を制御するためのユーザ命令が入力されると、前記第１音声ガイド情報を、前記外部機器を制御するためのユーザ音声をガイドする第２音声ガイド情報に変更してディスプレイするように前記ディスプレイ部を制御する制御部と
を含む電子装置。
【請求項１１】
複数の音声ガイド情報を保存する保存部を更に含み、
前記制御部は、
前記保存部に保存された複数の音声ガイド情報のうち、前記外部機器に対応する第２音声ガイド情報を検索して読み取ることを特徴とする請求項１０に記載の電子装置。
【請求項１２】
前記電子装置がテレビである場合、
前記第１音声ガイド情報は、電源制御に関する音声命令語と、外部機器実行に関する音声命令語と、チャネル設定に関する音声命令語および音量設定に関する音声命令語のうち、少なくとも何れか一つを含み、
前記外部機器がＤＶＤプレーヤおよびＢＤプレーヤの何れかである場合、
前記第２音声ガイド情報は、電源制御に関する音声命令語と、外部機器実行に関する音声命令語および再生設定に関する音声命令語のうち、少なくとも何れか一つを含むことを特徴とする請求項１０または１１に記載の電子装置。
【請求項１３】
前記外部機器と接続を行う外部端子入力部を更に含み、
前記制御部は、
前記第１音声ガイド情報がディスプレイされた場合、前記第１音声ガイド情報に含まれたユーザ音声命令語が入力されると、前記ユーザ音声命令語に従って、前記電子装置を制御し、
前記第２音声ガイド情報がディスプレイされた場合、前記第２音声ガイド情報に含まれたユーザ音声命令語が入力されると、前記入力されたユーザ音声命令語に対応する制御信号を生成して、前記生成された制御信号を前記外部端子入力部を介して前記外部機器に伝送することを特徴とする請求項１０ないし１２の何れか一項に記載の電子装置。
【請求項１４】
前記外部機器と通信を行う中継機器と通信を行うネットワークインターフェース部を更に含み、
前記制御部は、
前記第２音声ガイド情報がディスプレイされた場合、前記第２音声ガイド情報に含まれた音声命令語のうちの一つに対応するユーザ音声命令語が入力されると、前記入力されたユーザ音声命令語に対応する制御信号を生成し、前記生成された制御信号を前記ネットワークインターフェース部を介して前記中継機器に無線で伝送することを特徴とする請求項１０ないし１２の何れか一項に記載の電子装置。
【請求項１５】
前記生成された制御信号は、ブルートゥース通信によって前記中継機器に伝送され、
前記中継機器は、
前記伝送された制御信号をＩＲ信号に変換して前記外部機器に伝送することを特徴とする請求項１４に記載の電子装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子装置及びその制御方法に関し、より詳細には、ユーザ音声またはユーザモーションに応じて制御される電子装置及びその制御方法に関する。
【背景技術】
【０００２】
電子技術の発展により、多様な種類の電子装置が開発され普及している。特に、最近はテレビを始めとする多様な類型の電子装置が一般家庭でも使われている。これらの電子装置は、ユーザの要求に応じてより多様な機能を備えるようになっている。特に、テレビの場合、最近はインターネットと接続してインターネットサービスまでサポートしている。なお、ユーザはテレビを通じて数多くのデジタル放送チャネルも視聴できるようになっている。
【０００３】
よって、電子装置の多様な機能を効率的に使うための多様な入力方法が要求されている。例えば、リモコンを用いた入力方法、マウスを用いた入力方法、及びタッチパッドを用いた入力方法等が電子装置に適用されている。
【０００４】
ところが、このような単純な入力方法だけでは、電子装置の多様な機能を効果的に使いこなすことが困難であった。仮に、電子装置のすべての機能をリモコンだけで制御するように実現すると、リモコンのボタン数を増やさざるを得なかった。この場合、一般のユーザがリモコンの使用法を習得することは決して容易なことではない。なお、多様なメニューを画面上に表示してユーザが当該メニューを探し当てて選択する方法の場合、ユーザが複雑なメニューツリーを一々確認し、自分の望むメニューを選択しなければならないため、不便であった。
【０００５】
従って、近年では、電子装置を一層便利かつ直観的に制御するために、音声認識およびモーション認識を用いた技術が開発されている。特に、ユーザが音声認識またはモーション認識を用いてより効率よく電子装置を制御するために、電子装置は音声認識またはモーション認識をガイドするＵＩが必要となる。
【０００６】
しかし、従来の音声認識およびモーション認識をガイドするＵＩは、電子装置の機能および外部機器との接続状態によらず、同一の形態で提供されている。例えば、電子装置がテレビである場合、電子装置がセットトップボックスと接続されて放送受信機能を行うとしても、電子装置がＤＶＤと接続されて放送受信機能を行うとしても、同様の形態のＵＩが提供されるという問題点が存在している。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】韓国公開特許第２００７−００５５２１０号公報
【特許文献２】韓国公開特許第２０１０−０１０２３５４号公報
【特許文献３】韓国公開特許第２００６−００８４２５１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、電子装置が接続された外部機器の種類および機能に応じて異なる音声ガイド情報またはモーションガイド情報を提供する電子装置の制御方法およびそれを用いた電子装置を提供することにある。
【課題を解決するための手段】
【０００９】
前記目的を達成するための本発明の一実施形態に係る電子装置の制御方法は、前記電子装置を制御するためのユーザ音声をガイドする第１音声ガイド情報をディスプレイするステップと、前記電子装置に接続された外部機器を制御するためのユーザ命令が入力されるステップと、前記ユーザ命令が入力されると、前記第１音声ガイド情報を、前記外部機器を制御するためのユーザ音声をガイドする第２音声ガイド情報に変更してディスプレイするステップとを含む。
【００１０】
そして、前記電子装置に予め保存された複数の音声ガイド情報のうち、前記外部機器に対応する第２音声ガイド情報を検索して読み取るステップを更に含んでよい。
【００１１】
なお、前記電子装置がテレビである場合、前記第１音声ガイド情報は、電源制御に関する音声命令語と、外部機器実行に関する音声命令語と、チャネル設定に関する音声命令語および音量設定に関する音声命令語のうち、少なくとも何れか一つを含み、前記外部機器がＤＶＤプレーヤおよびＢＤプレーヤの何れかである場合、前記第２音声ガイド情報は、電源制御に関する音声命令語と、外部機器実行に関する音声命令語および再生設定に関する音声命令語のうち、少なくとも何れか一つを含んでよい。
【００１２】
そして、前記第１音声ガイド情報がディスプレイされた場合、前記第１音声ガイド情報に含まれたユーザ音声命令語が入力されると、前記ユーザ音声命令語に従って、前記電子装置を制御するステップと、前記第２音声ガイド情報がディスプレイされた場合、前記第２音声ガイド情報に含まれたユーザ音声命令語が入力されると、前記入力されたユーザ音声命令語に対応する制御信号を生成して、前記生成された制御信号を前記外部機器に伝送するステップとを更に含んでよい。
【００１３】
なお、前記第２音声ガイド情報がディスプレイされた場合、前記第２音声ガイド情報に含まれた音声命令語のうちの一つに対応するユーザ音声命令語が入力されると、前記入力されたユーザ音声命令語に対応する制御信号を生成するステップと、前記生成された制御信号を前記外部機器に伝送するための中継機器に無線で伝送するステップとを更に含んでよい。
【００１４】
そして、前記生成された制御信号は、ブルートゥース通信によって前記中継機器に伝送され、前記中継機器は、前記伝送された制御信号をＩＲ信号に変換して前記外部機器に伝送してよい。
【００１５】
なお、前記第１音声ガイド情報および前記第２音声ガイド情報の各々は、前記電子装置のモードが音声制御モードであることを示すアイコンを含んでよい。
【００１６】
そして、前記第１音声ガイド情報および前記第２音声ガイド情報は、コンテンツがディスプレイされる画面の下段にディスプレイされてよい。
【００１７】
なお、前記ユーザ命令は、外部機器を制御するための音声入力部を介して入力されたユーザ音声命令であってよい。
【００１８】
一方、前記目的を達成するための本発明の一実施形態に係る電子装置は、ユーザ音声が入力される音声入力部と、ディスプレイ部と、前記電子装置を制御するためのユーザ音声をガイドする第１音声ガイド情報を前記ディスプレイ部にディスプレイし、前記電子装置に接続された外部機器を制御するためのユーザ命令が入力されると、前記第１音声ガイド情報を、前記外部機器を制御するためのユーザ音声をガイドする第２音声ガイド情報に変更してディスプレイするように前記ディスプレイ部を制御する制御部とを含む。
【００１９】
そして、複数の音声ガイド情報を保存する保存部を更に含み、前記制御部は、前記保存部に保存された複数の音声ガイド情報のうち、前記外部機器に対応する第２音声ガイド情報を検索して読み取ってよい。
【００２０】
なお、前記電子装置がテレビである場合、前記第１音声ガイド情報は、電源制御に関する音声命令語と、外部機器実行に関する音声命令語と、チャネル設定に関する音声命令語および音量設定に関する音声命令語のうち、少なくとも何れか一つを含み、前記外部機器がＤＶＤプレーヤおよびＢＤプレーヤの何れかである場合、前記第２音声ガイド情報は、電源制御に関する音声命令語と、外部機器実行に関する音声命令語および再生設定に関する音声命令語のうち、少なくとも何れか一つを含んでよい。
【００２１】
そして、前記外部機器と接続を行う外部端子入力部を更に含み、前記制御部は、前記第１音声ガイド情報がディスプレイされた場合、前記第１音声ガイド情報に含まれたユーザ音声命令語が入力されると、前記ユーザ音声命令語に従って、前記電子装置を制御し、前記第２音声ガイド情報がディスプレイされた場合、前記第２音声ガイド情報に含まれたユーザ音声命令語が入力されると、前記入力されたユーザ音声命令語に対応する制御信号を生成して、前記生成された制御信号を前記外部端子入力部を介して前記外部機器に伝送してよい。
【００２２】
なお、前記外部機器と通信を行う中継機器と通信を行うネットワークインターフェース部を更に含み、前記制御部は、前記第２音声ガイド情報がディスプレイされた場合、前記第２音声ガイド情報に含まれた音声命令語のうちの一つに対応するユーザ音声命令語が入力されると、前記入力されたユーザ音声命令語に対応する制御信号を生成し、前記生成された制御信号を前記ネットワークインターフェース部を介して前記中継機器に無線で伝送してよい。
【００２３】
そして、前記生成された制御信号は、ブルートゥース通信によって前記中継機器に伝送され、前記中継機器は、前記伝送された制御信号をＩＲ信号に変換して前記外部機器に伝送してよい。
【００２４】
なお、前記第１音声ガイド情報および前記第２音声ガイド情報の各々は、前記電子装置のモードが音声制御モードであることを示すアイコンを含んでよい。
【００２５】
そして、前記第１音声ガイド情報および前記第２音声ガイド情報は、コンテンツがディスプレイされる画面の下段にディスプレイされてよい。
【００２６】
なお、前記ユーザ命令は、前記外部機器を制御するための前記音声入力部を介して入力されたユーザ音声命令であってよい。
【００２７】
一方、前記目的を達成するための本発明の一実施形態に係る電子装置の制御方法は、前記電子装置を制御するためのユーザモーションをガイドする第１モーションガイド情報をディスプレイするステップと、前記電子装置に接続された外部機器を制御するためのユーザ命令が入力されるステップと、前記ユーザ命令が入力されると、前記第１モーションガイド情報を、前記外部機器を制御するためのユーザモーションをガイドする第２モーションガイド情報に変更してディスプレイするステップとを含む。
【００２８】
一方、前記目的を達成するための本発明の一実施形態に係る電子装置は、ユーザモーションが入力されるモーション入力部と、ディスプレイ部と、前記電子装置を制御するためのユーザモーションをガイドする第１モーションガイド情報を前記ディスプレイ部にディスプレイし、前記電子装置に接続された外部機器を制御するためのユーザ命令が入力されると、前記第１モーションガイド情報を、前記外部機器を制御するためのユーザモーションをガイドする第２モーションガイド情報に変更してディスプレイするように前記ディスプレイ部を制御する制御部とを含む。
【発明の効果】
【００２９】
以上説明したように、本発明によれば、選択された外部機器の種類に応じて、音声ガイド情報が異なるようにディスプレイされることにより、ユーザは音声認識を用いて接続された外部機器をより便利かつ直観的に制御することができるようになる。
【図面の簡単な説明】
【００３０】
【図１】本発明の多様な実施形態に係る電子装置の構成を説明するためのブロック図である。
【図２】本発明の多様な実施形態に係る電子装置の構成を説明するためのブロック図である。
【図３】本発明の多様な実施形態に係る電子装置の構成を説明するためのブロック図である。
【図４】本発明の一実施形態に係る電子装置と接続された外部機器に応じて異なる音声ガイド情報を提供する方法を説明するための図である。
【図５】本発明の一実施形態に係る電子装置と接続された外部機器に応じて異なる音声ガイド情報を提供する方法を説明するための図である。
【図６】本発明の一実施形態に係る電子装置と接続された外部機器に応じて異なる音声ガイド情報を提供する方法を説明するための図である。
【図７】本発明の一実施形態に係る電子装置と接続された外部機器に応じて異なる音声ガイド情報を提供する方法を説明するための図である。
【図８】本発明の一実施形態に係る電子装置と接続された外部機器に応じて異なる音声ガイド情報を提供する方法を説明するためのフローチャートである。
【図９】本発明の一実施形態に係る電子装置と、外部機器および電子装置と外部機器とを中継する中継機器とを含むシステムを示す図である。
【発明を実施するための形態】
【００３１】
以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。
【００３２】
図１は、本発明の実施形態に係る電子装置を示す概略ブロック図である。
【００３３】
図１を参照すると、電子装置１００は、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０及びディスプレイ部１９３を含む。このとき、電子装置１００は、外部のネットワークと接続可能なスマートテレビ、セットトップボックス、ＰＣとして、又はデジタルテレビや携帯電話等で実現されてよいが、これらに限られるものではない。
【００３４】
音声入力部１１０には、ユーザが発話（Ｕｔｔｅｒａｎｃｅ）した音声が入力される。音声入力部１１０は、入力された音声信号を電気信号に変換して制御部１４０に出力する。例えば、音声入力部１１０は、マイクロフォンで実現されてよい。なお、音声入力部１１０は、電子装置１００と一体型（Ａｌｌ−ｉｎ−ｏｎｅ）だけでなく、分離した形で実現されてよい。分離された音声入力部１１０は、電子装置１００と有線又は無線ネットワークを通じて接続されてよい。
【００３５】
モーション入力部１２０は、ユーザのモーションを撮像した映像信号（例えば、連続するフレーム）が受信して制御部１４０に提供する。例えば、モーション入力部１２０は、レンズ及びイメージセンサで構成されるカメラユニットで実現されてよい。なお、モーション入力部１２０は、電子装置１００と一体型だけでなく、分離した形で実現されてよい。分離したモーション入力部１２０は、電子装置１００と有線又は無線ネットワークを通じて接続されてよい。
【００３６】
保存部１３０は、電子装置１００を駆動して制御するための多様なデータ及びプログラムを保存する。保存部１３０は、音声入力部１１０を介して入力された音声を認識するための音声認識モジュール及びモーション入力部１２０を介して入力されたモーションを認識するためのモーション認識モジュールを保存する。
【００３７】
保存部１３０は、音声データベース及びモーションデータベースを含んでよい。音声データベースは、予め設定された音声及び予め設定された音声にマッチする音声タスクが記録されたデータベースのことを意味する。モーションデータベースとは、予め設定されたモーション及び予め設定されたモーションにマッチするモーションタスクが記録されたデータベースのことを意味する。
【００３８】
ディスプレイ部１９３は、放送受信部を介して受信された放送信号に対応する映像を表示する。ディスプレイ部１９３は、外部端子入力部を介して入力される映像データ（例えば、動画）を表示することができる。ディスプレイ部１９３は、制御部１４０の制御に応じて音声タスクを行うための音声ガイド情報及びモーションタスクを行うためのモーションガイド情報を表示することができる。
【００３９】
制御部１４０は、音声入力部１１０と、モーション入力部１２０と、保存部１３０及びディスプレイ部１９３を制御する。ここで、制御部１４０は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）及び電子装置１００を制御するためのモジュール及びデータを保存するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）及びＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）を含んでよい。
【００４０】
制御部１４０は、音声入力部１１０を介して音声が入力される場合、音声認識モジュール及び音声データベースを用いて音声を認識する。音声認識（Ｖｏｉｃｅ  Ｒｅｃｏｇｎｉｔｉｏｎ）は入力される音声の形態によって、各々の単語を区分して発話した音声を認識する孤立単語認識（Ｉｓｏｌａｔｅｄ  Ｗｏｒｄ  Ｒｅｃｏｇｎｉｔｉｏｎ）、連続単語、連続文章及び会話体音声を認識する連続音声認識（Ｃｏｎｔｉｎｕｏｕｓ  ｓｐｅｅｃｈ  Ｒｅｃｏｇｎｉｔｉｏｎ）及び孤立単語認識と連続音声認識との中間形態で、予め定められたキーワードを検出して認識するキーワード検出（Ｋｅｙｗｏｒｄ  Ｓｐｏｔｔｉｎｇ）で区分されてよい。
【００４１】
ユーザ音声が入力される場合、制御部１４０は入力された音声信号内でユーザが発話した音声の始めと終わりを検出して音声区間を判断する。制御部１４０は、入力された音声信号のエネルギーを計算し、計算されたエネルギーに応じて音声信号のエネルギーレベルを分類し、動的プログラミングを通じて音声区間を検出することができる。制御部１４０は、検出された音声区間内の音声信号に音響モデル（Ａｃｏｕｓｔｉｃ  Ｍｏｄｅｌ）に基づいて、音声の最小単位である音素を検出して音素データを生成する。制御部１４０は、生成された音素データにＨＭＭ（Ｈｉｄｄｅｎ  Ｍａｒｋｏｖ  Ｍｏｄｅｌ）確率モデルを適用してテキスト情報を生成する。しかし、上述のように、ユーザの音声を認識する方法は一実施形態に過ぎず、他の方法を用いてユーザ音声を認識することができる。それにより、制御部１４０は、音声信号の中に含まれたユーザの音声を認識することができる。
【００４２】
制御部１４０は、モーション入力部１２０を介してモーションが入力される場合、モーション検知モジュール及びモーションデータベースを用いてモーションを認識する。モーション認識（Ｍｏｔｉｏｎ  Ｒｅｃｏｇｎｉｔｉｏｎ）は、モーション入力部１２０を介して入力される映像（例えば、連続するフレーム）を周囲の背景とユーザモーションの対象であるオブジェクト（例えば、ユーザの手）領域に分離し、連続するオブジェクトの動きを認識することができる。ユーザモーションが入力される場合、制御部１４０は受信された映像をフレーム単位で保存し、保存されたフレームを用いてオブジェクトを検知する。制御部１４０は、フレームに含まれたオブジェクトの形、色、動きのうち、少なくとも一つを検知してオブジェクトを検出する。制御部１４０は、複数のフレームに含まれた各々のオブジェクトの位置や各々のオブジェクトの形を用いて検出されたオブジェクトの動きを追跡することができる。
【００４３】
制御部１４０は、追跡されたオブジェクトの動きに応じてユーザモーションを判断する。例えば、制御部１４０は、オブジェクトの形の変化、速度、位置、方向のうち、少なくともいずれか一つを用いてユーザのモーションを判断する。ユーザのモーションは、手を握るモーションであるグラブ（Ｇｒａｂ）、表示されたカーソルを手で移動させるモーションであるポインティング移動（Ｐｏｉｎｔｉｎｇ  ｍｏｖｅ）、手を一定速度以上で一方向に動かすモーションであるスラップ（Ｓｌａｐ）、手を左／右又は上／下に振るモーションであるシェイク（Ｓｈａｋｅ）及び手を回転させるモーションである回転（Ｒｏｔａｔｅ）を含む。上述の実施形態以外の他のモーションにも本発明の技術的思想が適用されてよい。例えば、握られた手を開くスプレッド（Ｓｐｒｅａｄ）モーション等が更に含まれてよく、一定時間の間手が固定した位置にある場合にも特定モーションと判断してよい。
【００４４】
制御部１４０は、ユーザのモーションがポインティング移動であるか、スラップであるかを判断するために、オブジェクトが一定時間（例えば、８００ｍｓ）内に一定領域（例えば、４０ｃｍ×４０ｃｍの四角）から外れているかを判断する。オブジェクトが一定時間内に一定領域から外れていない場合、制御部１４０は、ユーザのモーションをポインティング移動と判断してよい。オブジェクトが決定された時間内に決定された領域から外れている場合、制御部１４０はユーザのモーションをスラップと判断してよい。別の一例として、オブジェクトの速度が予め設定された速度（例えば、３０ｃｍ／ｓ）以下であると判断された場合、制御部１４０はユーザのモーションをポインティング移動と判断する。オブジェクトの速度が予め設定された速度超過であると判断される場合、制御部１４０はユーザのモーションをスラップと判断する。
【００４５】
制御部１４０は、認識された音声およびモーションを用いて、電子装置１００のタスク（Ｔａｓｋ）を行う。電子装置１００のタスクは、電源制御、チャネル変更、音量調節、コンテンツ（例えば、動画や音楽、写真等）の再生、画面に表示されるＧＵＩ（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）の選択またはインターネットサービス（例えば、検索やブラウジング等）等のように、電子装置１００によって実行可能な機能の少なくとも一つを含む。
【００４６】
なお、制御部１４０は、音声タスクモードで電子装置１００を制御するための音声命令語をガイドする第１音声ガイド情報をディスプレイ部１９３にディスプレイする。このとき、音声タスクモードは、音声入力部１１０を介して音声開始命令が入力されると開始され、その後に入力された音声命令語によって電子装置１００が制御されるモードである。なお、音声タスクモードは、音声開始命令なしに入力された音声命令語によって電子装置１００が制御されるモードであってよい。この場合、音声開始命令の代わりに音声タスクモードを開始するための別の種類のユーザ命令を利用することができる。別の種類のユーザ命令は、リモコンの特定ボタン入力、電子装置１００の特定ボタン入力、ユーザの特定モーション等を含んでよい。
【００４７】
そして、電子装置１００に接続された外部機器を制御するためのユーザ命令が入力されると、制御部１４０は、第１音声ガイド情報を、外部機器を制御するためのユーザ音声をガイドする第２音声ガイド情報に変更してディスプレイするようにディスプレイ部１９３を制御する。特に、複数の音声ガイド情報が保存部１３０に保存されており、制御部１４０は、保存部１３０に保存された複数の音声ガイド情報のうち、外部機器に対応する第２音声ガイド情報を検索して読み取り、読み取られた第２音声ガイド情報をディスプレイ部１９３にディスプレイしてよい。複数の音声ガイド情報は、各々電子装置１００および電子装置１００に接続された複数の外部機器に対応する。仮に、ユーザが制御しようとする外部機器に対する音声ガイド情報が保存部１３０に保存されていない場合、外部端子入力部１６０と、ネットワークインターフェース部１８０を介して受信してよい。
【００４８】
このとき、第１音声ガイド情報と第２音声ガイド情報とは、異なる音声命令語を含んでよい。例えば、電子装置１００がテレビである場合、前記第１音声ガイド情報には、電源制御に関する音声命令語と、外部機器実行に関する音声命令語と、チャネル設定に関する音声命令語および音量設定に関する音声命令語等が含まれてよい。そして、外部機器がＤＶＤプレーヤおよびＢＤプレーヤの何れかである場合、前記第２音声ガイド情報には、テレビ電源制御に関する音声命令語と、外部機器電源制御に関する音声命令語および外部機器の機能実行に関する音声命令語が含まれてよい。
【００４９】
特に、第１音声ガイド情報がディスプレイされた場合、音声入力部１１０を介して第１音声ガイド情報に含まれた音声命令語が入力されると、制御部１４０は入力された音声命令語に従って電子装置１００を制御する。
【００５０】
しかし、第２音声ガイド情報がディスプレイされた場合、音声入力部１１０を介して第２音声ガイド情報に含まれた音声命令語が入力されると、制御部１３０は入力された音声命令語に対応する制御信号を生成し、生成された制御信号を外部端子入力部１６０を介して外部機器に伝送してよい。
【００５１】
電子装置１００と外部機器との通信のために設けられた中継機器が存在する場合、音声入力部１１０を介して第２音声ガイド情報に含まれた音声命令語が入力されると、制御部１４０は、入力された音声命令語に対応する制御信号を生成し、生成された制御信号を中継機器を通じて外部機器に伝送することができる。ここで、中継機器と電子装置１００とは、ネットワークインターフェース部１８０を介して通信でき、中継機器と外部機器とは、無線通信インターフェースを介して通信することができる。この場合、生成された制御信号は、ブルートゥース通信によって電子装置１００から中継機器に伝送されてよく、中継機器は伝送された制御信号をＩＲ（Ｉｎｆｒａｒｅｄ）信号に変換して外部機器に制御信号を伝送するように実現してよい。中継機器と外部機器とが通信するのに使われる無線通信インターフェースは、ＩＲ通信インターフェースの他にＲＦ通信インターフェースを含んでよく、ＲＦ（Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ）通信インターフェースは、ＮＦＣ（Ｎｅａｒ  Ｆｉｅｌｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ）通信インターフェース、Ｚｉｇｂｅｅ（登録商標）通信インターフェースおよびブルートゥース通信インターフェース等が使われてよい。中継機器と電子装置１００との間のインターフェースと、中継機器と外部機器との間のインターフェースとは、上述のインターフェースに限定されず、有線／無線通信インターフェースで実現可能であり、多様な種類の双方向通信インターフェースで実現可能である。特に、中継機器と外部機器との通信のために、外部機器のリモートコントロールに使用される従来のインターフェースを使用する場合、本発明の電子装置１００を介して入力される音声命令語やユーザのモーションを通じて外部機器を制御するように実現することが容易である。
【００５２】
接続された外部機器に応じて、音声ガイド情報を提供する具体的な実施形態については、今後図４ないし図７を参照して詳細に説明する。
【００５３】
図２は、本発明の別の実施形態に係る電子装置１００の構成を示すブロック図である。図２を参照すると、電子装置１００は、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０と、ネットワークインターフェース部１８０及び映像出力部１９０を含む。図２に示す電子装置１００は、セットトップボックス（Ｓｅｔ  Ｔｏｐ  Ｂｏｘ）やスマートテレビ等で実現されてよい。
【００５４】
一方、図２に示す音声入力部１１０と、モーション入力部１２０と、保存部１３０及び制御部１４０に対する説明は、図１において説明した音声入力部１１０と、モーション入力部１２０と、保存部１３０及び制御部１４０に対する説明と同様であるため、詳細な説明は省略する。
【００５５】
放送受信部１５０は、有／無線で外部から放送信号を受信する。放送信号は、映像（Ｖｉｄｅｏ）、オーディオ（Ａｕｄｉｏ）及び付加データ（例えば、ＥＰＧやメタデータ等）を含む。放送受信部１５０は、地上波放送、ケーブル放送、衛星放送、インターネット放送等のような多様なソースから放送信号を受信することができる。
【００５６】
外部端子入力部１６０は、電子装置１００の外部から映像データ（例えば、動画や写真等）、オーディオデータ（例えば、音楽等）等を受信する。外部端子入力部１６０は、ＨＤＭＩ入力端子（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ  Ｉｎｐｕｔ）、コンポーネント入力端子、ＰＣ入力端子、又はＵＳＢ入力端子の少なくとも一つを含んでよい。リモコン信号受信部１７０は、外部のリモコンから入力されるリモコン信号を受信する。リモコン信号受信部１７０は、電子装置１００が音声タスクモードか、モーションタスクモードでも、リモコン信号を受信することができる。リモコン信号受信部１７０は、有線または無線通信インターフェースで実現可能であり、片方向または双方向通信インターフェースで実現可能である。
【００５７】
ネットワークインターフェース部１８０は、制御部１４０の制御によって電子装置１００と外部装置（例えば、サーバ、他の電子装置等）を接続することができる。制御部１４０は、ネットワークインターフェース部１８０を介して接続された外部装置からアプリケーションをダウンロードしたり、ウェブブラウジング等インターネットサービスがユーザに提供するように制御することができ、外部装置から映像データ、オーディオデータ、テキストデータ等を受信するように制御してよい。ネットワークインターフェース部１８０は、有線／無線通信インターフェースで実現可能であり、多様な種類の双方向通信インターフェースで実現可能である。例えば、イーサネット（登録商標）（Ｅｔｈｅｒｎｅｔ（登録商標））、無線ＬＡＮ及びブルートゥース（Ｂｌｕｅｔｏｏｔｈ（登録商標））の少なくとも一つを提供することができる。
【００５８】
映像出力部１９０は、放送受信部１５０を介して受信される外部の放送信号、又は外部端子入力部１６０で入力される映像データ、または保存部１３０に保存されたデータ、またはネットワークインターフェース部１８０を介して受信されるデータを外部の電子装置（例えば、モニタやテレビ、スピーカ等）で出力する。なお、電子装置１００がディスプレイやスピーカ等を備えている場合には、電子装置１００のディスプレイやスピーカを通じて出力することができる。
【００５９】
図３は、本発明の更に別の実施形態に係る電子装置１００のブロック図を示す図である。図３に示すように、電子装置１００は、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０と、ネットワークインターフェース部１８０と、ディスプレイ部１９３及びオーディオ出力部１９６を含む。このとき、電子装置１００は、デジタルテレビであってよいが、それに限られるものではない。
【００６０】
一方、図３において、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０、ネットワークインターフェース部１８０及びディスプレイ部１９３に対する説明は、図１及び図２で同じ参照番号を有する構成に対する説明と同様であるため、詳細な説明は省略する。
【００６１】
オーディオ出力部１９６は、制御部１４０の制御によって放送信号に対応する音響を出力したり、ネットワークインターフェース部１８０を介して受信される音響を出力する。オーディオ出力部１９６は、スピーカ１９６ａ、ヘッドホン出力端子１９６ｂ又はＳ／ＰＤＩＦ出力端子１９６ｃの少なくともいずれか一つを含んでよい。
【００６２】
一方、保存部１３０は、図３に示すように、電源制御モジュール１３０ａ、チャネル制御モジュール１３０ｂ、音量制御モジュール１３０ｃ、外部入力制御モジュール１３０ｄ、画面制御モジュール１３０ｅ、オーディオ制御モジュール１３０ｆ、インターネット制御モジュール１３０ｇ、アプリケーションモジュール１３０ｈ、検索制御モジュール１３０ｉ、ＵＩ処理モジュール１３０ｊ、音声認識モジュール１３０ｋ、モーション認識モジュール１３０ｌ、音声データベース１３０ｍ及びモーションデータベース１３０ｎを含む。これらのモジュール１３０ａないし１３０ｎは、それぞれ、電源制御機能、チャネル制御機能、音量制御機能、外部入力制御機能、画面制御機能、オーディオ制御機能、インターネット制御機能、アプリケーション実行機能、検索制御機能、ＵＩ処理機能を行うためにソフトウェアで実現されてよい。制御部１４０は、保存部１３０に保存されたこれらのソフトウェアを実行させて当該機能を実行することができる。
【００６３】
上述のように、各制御モジュール１３０ａないし１３０ｎを保存部１３０に保存されているソフトウェアで実現されてよいが、別々のハードウェアで実現されてよい。
【００６４】
接続された外部機器に応じて音声ガイド情報を提供する具体的な実施形態については、図４ないし図７を参照して詳細に説明する。
【００６５】
制御部１４０は、放送受信部１５０を介して外部の放送局から送出される放送信号を受信し、受信された放送信号に対する信号処理を行う。そして、図４に示すように、制御部１４０は、信号処理された放送映像をディスプレイ部１９３にディスプレイし、信号処理された放送信号の音響をオーディオ出力部１９６を介して出力する。
【００６６】
そして、音声入力部１１０を介して音声開始命令が入力されると、制御部１４０は音声開始命令を認識して音声タスクモードに切り替える。このとき、音声開始命令は、音声タスクモードを開始するためのユーザ命令であり、音声タスクモードは、電子装置１００が音声入力部１１０に入力された音声命令語によって制御されるモードである。上述のように、音声開始命令の代わりに音声タスクモードを開始するための別の種類のユーザ命令を利用することができる。別の種類のユーザ命令は、リモコンの特定ボタン入力、電子装置１００の特定ボタン入力、ユーザの特定モーション等を含んでよい。
【００６７】
そして、音声タスクモードに切り替わると、制御部１４０は、図５に示すように、音声タスクモードを行うための第１音声ガイド情報５００をディスプレイする。このとき、第１音声ガイド情報５００は、放送映像がディスプレイされる画面の下段にディスプレイされる。なお、第１音声ガイド情報５００は、現在のディスプレイ装置のモードが音声タスクモードであることを報知するアイコン５１０およびユーザに音声命令語をガイドする複数の音声命令語５２１ないし５２６、５３０が含まれる。音声ガイド情報のディスプレイ位置は変更可能であり、音声ガイド情報内のアイコン５００および複数の音声命令語５２１ないし５２６、５３０がディスプレイされる位置は、変更可能である。  
【００６８】
複数の音声命令語には、電源オフの音声命令語５２１と、外部入力の音声命令語５２２と、チャネルショートカットの音声命令語５２３と、チャネルアップ／ダウン（ＵＰ／ＤＯＷＮ）の音声命令語５２４と、音量アップ／ダウンの音声命令語５２５と、消音の音声命令語５２６及びＭｏｒｅの音声命令語５３０が含まれる。Ｍｏｒｅの音声命令語５３０は、ディスプレイされた音声命令語以外の音声命令語を更に見るための命令語である。しかし、上述のような第１音声ガイド情報５００に含まれた音声命令語は、一実施形態に過ぎず、他の音声命令語（例えば、チャネルリスト音声命令語等）が含まれてよい。
【００６９】
第１音声ガイド情報５００がディスプレイされた状態で、音声入力部１１０を介して“Ｕｎｉｖｅｒｓａｌ  Ｃｏｎｔｒｏｌ”という音声命令語が入力されると、制御部１４０は、図６に示すような、制御しようとする外部機器を選択することができる第３音声ガイド情報６００が表示される。このとき、第３音声ガイド情報６００には、現在のディスプレイ装置のモードが、音声タスクモードであることを報知するアイコン６１０およびユーザの音声をガイドする複数の音声命令語６２１ないし６２５、６３０が含まれる。複数の音声アイテムには、Ｗａｔｃｈ  ＴＶの音声命令語６２１と、Ｗａｔｃｈ  Ｖｉｄｅｏの音声命令語６２２と、ＴＶの音声命令語６２３と、セットトップボックス（ＳＴＢ）の音声命令語６２４と、ブルーレイディスクプレーヤ（ＢＤ）の音声命令語６２５およびＭｏｒｅの音声命令語６３０が含まれる。しかし、上述のような第３音声ガイド情報６００に含まれた音声命令語は、一実施形態に過ぎず、他の音声命令語（例えば、ＤＶＤプレーヤの音声命令語やＵＳＢの音声命令語等）が含まれてよい。
【００７０】
第３音声ガイド情報がディスプレイされた状態で、音声入力部１１０を介して“ＢＤ”というユーザ音声が入力されると、制御部１４０は、ユーザ音声を用いてＢＤを制御することができる。そして、制御部１４０は、保存部１３０に保存された複数の音声ガイド情報の中から、ＢＤを制御するための音声ガイド情報を検索して、図７に示すようにディスプレイする。
【００７１】
即ち、制御部１４０は、放送受信機能を担う場合、図５に示すような第１音声ガイド情報５００をディスプレイするが、制御しようとする外部機器が選択されると、図７に示すような第２音声ガイド情報７００に変更してディスプレイする。このとき、第２音声ガイド情報７００には、現在のディスプレイ装置のモードが音声タスクモードであることを報知するアイコン７１０およびユーザの音声をガイドする複数の音声命令語７２１ないし７２６、７３０が含まれる。複数の音声命令語には、電源オフの音声命令語７２１と、外部入力の音声命令語７２２と、再生（一時停止）の音声命令語７２３と、以前のファイルへの音声命令語７２４と、次のファイルへの音声命令語７２５および音量アップ／ダウンの音声命令語７２６が含まれる。しかし、上述のような第２音声ガイド情報７００に含まれた音声命令語は、一実施形態に過ぎず、別の音声命令語（例えば、早送りの音声命令語、巻き戻しの音声命令語等）が含まれてよい。
【００７２】
したがって、上述のように、選択された外部機器の種類に応じて、相違なる音声ガイド情報を提供することにより、ユーザは音声認識を用いて、より便利かつ直観的に外部機器を制御することができる。
【００７３】
一方、上述の実施形態では、音声命令語を通じて制御しようとする外部機器にＢＤを選択したが、それは一実施形態に過ぎず、リモコン等を用いてＢＤを選択することができる。なお、上述の実施形態では、選択された外部機器の種類に応じて、音声タスクモードで音声ガイド情報が異なるように提供されると説明したが、それは一実施形態に過ぎず、選択された外部機器の種類に応じて、モーションタスクモードでモードガイド情報が異なるように提供されてよい。
【００７４】
以下では、図８を参照して、本発明の一実施形態に係る電子装置の制御方法を説明する。
【００７５】
まず、電子装置１００は、音声タスクモードに切り替える（Ｓ８１０）。具体的に、電子装置１００の音声入力部１１０を介して音声開始命令が入力されると、電子装置１００は、電子装置１００の制御モードをユーザ音声によって電子装置１００が制御される音声タスクモードに切り替える。
【００７６】
音声タスクモードに切り替わると、電子装置１００は、第１音声ガイド情報をディスプレイする（Ｓ８２０）。このとき、電子装置１００が放送受信機能を担う場合、第１音声ガイド情報は放送受信機能を制御するための音声命令語が含まれる。例えば、第１音声ガイド情報には、チャネル設定のための音声命令語が含まれてよい。
【００７７】
そして、電子装置１００には、外部機器を制御しようとするユーザ命令が入力されたか否かを判断する（Ｓ８３０）。このとき、ユーザ命令は、図６において説明したようなユーザ音声命令であってよく、電子装置１００と連動するリモコンに備えられた外部入力変更ボタンによる命令であってよい。
【００７８】
外部機器を制御しようとするユーザ命令が入力されると（Ｓ８３０−Ｙ）、電子装置１００は、第１音声ガイド情報を第２音声ガイド情報に変更してディスプレイする（Ｓ８４０）。このとき、外部機器の種類を選択することができるが、外部機器がＢＤ（Ｂｌｕｅ−ｒａｙ）プレーヤまたはＤＶＤプレーヤである場合、第２音声ガイド情報にはチャネル設定のための音声命令語が消え、映像再生のための音声命令語（例えば、再生停止のための音声命令語や、次のファイル再生のための音声命令語等）が含まれてよい。しかし、外部機器を制御しようとするユーザ命令が入力されなければ（Ｓ８３０−Ｎ）、第１音声ガイド情報は依然としてディスプレイされる（Ｓ８２０）。
【００７９】
上述のように、選択された外部機器の種類に応じて、音声ガイド情報が異なるようにディスプレイされることにより、ユーザは音声認識を用いて接続された外部機器をより便利かつ直観的に制御することができるようになる。
【００８０】
一方、上述の実施形態においては、電子装置１００が外部端子入力部１６０を介して直接外部機器と接続されると説明したが、それは一実施形態に過ぎず、電子装置１００がネットワークインターフェース部１８０を介して接続された中継機器を用いて外部機器と接続される実施形態も、本発明の技術的思想が適用され、外部端子入力部１６０と中継機器をすべて用いて電子装置１００と外部機器と接続される実施形態も本発明の技術的思想が適用される。具体的に、図９に示すようなシステム１０は、電子装置１００と、中継機器２００および外部機器３００を含む。このとき、電子装置１００は、中継機器２００を介して外部機器３００と接続されてよい。
【００８１】
具体的に、音声入力部１１０を介して第２音声ガイド情報に含まれた音声命令語に対応するユーザ音声が入力されると、電子装置１００は入力された音声命令語に対応する制御信号を生成する。そして、電子装置１００は、ネットワークインターフェース部１８０のブルートゥース通信を用いて中継機器２００に制御信号を伝送する。制御信号が伝送されると、中継機器２００は受信された制御信号をＩＲ信号の形態に変換して外部機器３００に伝送する。外部機器３００がＩＲ信号を受信すると、外部機器３００はＩＲ信号を復調し、電子装置１００に入力された音声命令語に従って制御される。
【００８２】
中継機器と電子装置１００との間のインターフェースと、中継機器と外部機器との間のインターフェースとは、上述のインターフェースに限定されるわけではなく、有線／無線通信インターフェースで実現可能であり、多様な種類の双方向通信インターフェースで実現可能である。
【００８３】
なお、以上のような多様な実施形態に係る制御方法を行うためのプログラムコードは、多様な類型の記録媒体に保存されてよい。具体的には、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、フラッシュメモリ、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｏｎｉｃａｌｌｙ  Ｅｒａｓａｂｌｅ  ａｎｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）、レジスタ、ハードディスク、リムーバブルディスク、メモリカード、ＵＳＢメモリ、ＣＤ−ＲＯＭ等のように、端末機で読み取り可能な多様な類型の記録媒体に保存されていてよい。
【００８４】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００８５】
１１０  音声入力部
１２０  モーション入力部
１３０  保存部
１３０ａ  電源制御モジュール
１３０ｂ  チャネル制御モジュール
１３０ｃ  音量制御モジュール
１３０ｄ  外部入力制御モジュール
１３０ｅ  画面制御モジュール
１３０ｆ  オーディオ制御モジュール
１３０ｇ  インターネット制御モジュール
１３０ｈ  アプリケーションモジュール
１３０ｉ  検索制御モジュール
１３０ｊ  ＵＩ処理モジュール
１３０ｋ  音声認識モジュール
１３０ｌ  モーション認識モジュール
１３０ｍ  音声データベース
１３０ｎ  モーションデータベース
１４０  制御部
１５０  放送受信部
１６０  外部端子入力部
１６１  ＨＤＭＩ端子
１６２  コンポーネント端子
１６３  ＰＣ端子
１６４  ＵＳＢ端子
１７０  リモコン信号受信部
１８０  ネットワークインターフェース部
１８２  無線ＬＡＮ
１８３  ブルートゥース
１９０  映像出力部
１９３  ディスプレイ部
１９６  オーディオ出力部
１９６ａ  スピーカ
１９６ｂ  ヘッドホン
【図１】
2013141237.tif 000003
【図２】
2013141237.tif 000004
【図３】
2013141237.tif 000005
【図４】
2013141237.tif 000006
【図５】
2013141237.tif 000007
【図６】
2013141237.tif 000008
【図７】
2013141237.tif 000009
【図８】
2013141237.tif 000010
【図９】
2013141237.tif 000011