(57)【要約】      （修正有）【課題】ユーザに対する向きで動作設定が必要な方向性デバイスを搭載する携帯式電子機器を提供する。【解決手段】携帯式電子機器は、表面１０２ａにはタッチスクリーン１０３を搭載し、表面２０２ａにはタッチスクリーン２０３を搭載する。ユーザが片手で筐体を保持するときに、タッチスクリーン２０３は１本の指を検出し、タッチスクリーン１０３は４本の指を検出する。携帯式電子機器はタッチスクリーン１０３が検出する指の本数で、表面１０２ａあるいは２０２ａのいずれがユーザを向くかを認識して、ユーザを向く表面を認識して、タッチスクリーンの動作、カメラ１０５、２０５の動作、ステレオ・スピーカ２０７ａ、２０７ｂ、１０７ａ、１０７ｂのパンニング、マイクロフォン・ペア２０９ａ、２０９ｂ、１０９ａ、１０９ｂのビーム・フォーミングなどを制御する。【選択図】図４
2017054471.tif 000002
【特許請求の範囲】
【請求項１】
筐体を手で保持する使用状態で第１の表面または第２の表面に配置され、ユーザに対する向きで動作設定が必要な方向性デバイスを搭載した携帯式電子機器であって、
前記第１の表面に配置した第1のタッチセンサと、
前記第２の表面に配置した第２のタッチセンサと、
前記第１のタッチセンサおよび前記第２のタッチセンサまたはいずれか一方のタッチセンサにタッチしている指の本数を計算してユーザまたは環境を向く表面を認識し前記方向性デバイスの動作設定をする制御部と
を有する携帯式電子機器。
【請求項２】
前記方向性デバイスが、第１のタッチスクリーンと第２のタッチスクリーンを含み、
前記第１のタッチセンサが前記第１のタッチスクリーンを構成する第１のタッチパネルで、前記第２のタッチセンサが前記第２のタッチスクリーンを構成する第２のタッチパネルである請求項１に記載の携帯式電子機器。
【請求項３】
前記筐体を相互にヒンジ機構で結合した第１の筐体と第２の筐体で構成し、前記ヒンジ機構を回動させて前記筐体を手で保持する使用状態に設定することが可能な請求項１または請求項２に記載の携帯式電子機器。
【請求項４】
前記制御部は、１本の指を検出したタッチセンサが存在する表面がユーザを向くと認識する請求項１に記載の携帯式電子機器。
【請求項５】
前記制御部は、前記１本の指の座標が前記筐体の周辺部を示すときに前記表面がユーザを向くと認識する請求項４に記載の携帯式電子機器。
【請求項６】
前記制御部は、前記筐体の両端の周辺部にそれぞれ１本の指を検出したタッチセンサが存在する表面がユーザを向くと認識する請求項１に記載の携帯式電子機器。
【請求項７】
前記制御部は、２本以上４本以下の指を検出したタッチセンサが存在する表面が環境を向くと認識する請求項１に記載の携帯式電子機器。
【請求項８】
前記制御部は、検出した複数の離散的な座標の集合が前記筐体を保持する指の形状に合致していることを示すときに前記表面が環境を向くと認識する請求項７に記載の携帯式電子機器。
【請求項９】
前記制御部は、前記筐体を保持する手のひらがタッチしている領域の形状に合致していることを示す座標の集合を検出したタッチセンサが存在する表面が環境を向くと認識する請求項１に記載の携帯式電子機器。
【請求項１０】
前記方向性デバイスが前記第１の表面に配置したカメラを含み、前記制御部は前記第１の表面が環境を向くと認識したときに前記第２のタッチスクリーンがプレビュー画面を表示するように動作設定をする請求項２に記載の携帯式電子機器。
【請求項１１】
前記制御部は、前記第１の表面がユーザを向くと認識したときに前記第１のタッチスクリーンがプレビュー画面を表示するように動作設定をする請求項１０に記載の携帯式電子機器。
【請求項１２】
前記方向性デバイスが前記第１の表面に配置した第１のカメラと前記第２の表面に配置した第２のカメラを含み、前記制御部は撮影モードが環境撮影に設定され、かつ、前記第１の表面がユーザを向くと認識したときに前記第２のカメラを動作させ前記第１のタッチスクリーンにプレビュー画面を表示するように動作設定をする請求項２に記載の携帯式電子機器。
【請求項１３】
前記方向性デバイスが前記第１の表面に配置した第１のステレオ・スピーカと前記第２の表面に配置した第２のステレオ・スピーカを含み、前記制御部はユーザを向くと認識した表面に配置したステレオ・スピーカのパンニングを設定し、環境を向くと認識したステレオ・スピーカを停止する請求項１に記載の携帯式電子機器。
【請求項１４】
前記方向性デバイスが前記第１の表面に配置した第１のマイクロフォン・ペアと前記第２の表面に配置した第２のマイクロフォン・ペアを含み、前記制御部はユーザを向くと認識した表面に配置したマイクロフォン・ペアと環境を向くと認識した表面に配置したマイクロフォン・ペアに対して異なるビーム・フォーミングを設定する請求項１に記載の携帯式電子機器。
【請求項１５】
第１の表面に第１のタッチスクリーンを搭載する第１の筐体と、第２の表面に第２のタッチスクリーンを搭載する第２の筐体がヒンジ機構で結合されたマルチ・ユース・モードの携帯式電子機器がユーザに対する向きで動作設定が必要な方向性デバイスの動作設定をする方法であって、
前記ヒンジ機構の回動により前記第１のタッチスクリーンと前記第２のタッチスクリーンが背中合わせに配置されるタブレット・モードに変更されたことを検出するステップと、
前記第１のタッチスクリーンを構成する第１のタッチパネルおよび前記第２のタッチスクリーンを構成する第２のタッチパネルまたはいずれか一方のタッチパネルが検出した前記携帯式電子機器を保持する指の本数からユーザまたは環境を向く表面を認識するステップと、
認識した前記表面に応じて前記方向性デバイスの動作設定をするステップと
を有する方法。
【請求項１６】
前記方向性デバイスが前記第１のタッチスクリーンおよび前記第２のタッチスクリーンを含み、
前記方向性デバイスの動作設定をするステップが、ユーザを向く表面に存在するタッチスクリーンを動作させ、環境を向く表面に存在するタッチスクリーンを停止するステップを含む請求項１５に記載の方法。
【請求項１７】
第１のタッチスクリーンとカメラを搭載する第１の筐体と、第２のタッチスクリーンを搭載する第２の筐体がヒンジ機構で結合されたマルチ・ユース・モードの携帯式電子機器が前記カメラおよびタッチスクリーンの動作設定をする方法であって、
前記ヒンジ機構の回動により前記第１のタッチスクリーンと前記第２のタッチスクリーンが背中合わせに配置されるタブレット・モードに変更されたことを検出するステップと、
前記第１のタッチスクリーンおよび前記第２のタッチスクリーンまたはいずれか一方のタッチスクリーンが検出した前記携帯式電子機器を保持する指の本数から前記第１のタッチスクリーンが環境を向くことを認識するステップと、
前記カメラを動作させるステップと、
前記第２のタッチスクリーンに前記カメラが撮影したプレビュー画面を表示するステップと
を有する方法。
【請求項１８】
第１のタッチスクリーンと第１のカメラを搭載する第１の筐体と、第２のタッチスクリーンと第２のカメラを搭載する第２の筐体がヒンジ機構で結合されたマルチ・ユース・モードの携帯式電子機器がカメラおよびタッチスクリーンの動作設定をする方法であって、
前記ヒンジ機構の回動により前記第１のタッチスクリーンと前記第２のタッチスクリーンが背中合わせに配置されるタブレット・モードに変更されたことを検出するステップと、
前記第１のタッチスクリーンを構成する第１のタッチパネルおよび前記第２のタッチスクリーンを構成する第２のタッチパネルまたはいずれか一方のタッチパネルが検出した前記携帯式電子機器を保持する指の本数から前記第１のタッチスクリーンが環境を向くことを認識するステップと、
撮影モードが環境撮影モードに設定されていることを認識するステップと、
撮影操作に応じて前記第１のカメラを動作させるステップと、
前記第２のタッチスクリーンに前記第１のカメラが撮影したプレビュー画面を表示するステップと
を有する方法。
【請求項１９】
前記撮影モードがユーザ撮影モードに設定されていることを認識するステップと、
撮影操作に応じて前記第２のカメラを動作させるステップと、
前記第２のタッチスクリーンに前記第２のカメラが撮影したプレビュー画面を表示するステップと
を有する請求項１８に記載の方法。
【請求項２０】
背中合わせに配置した第１のタッチセンサおよび第２のタッチセンサと、ユーザに対する表面の向きで動作設定が必要な方向性デバイスを搭載した筐体を手で保持して使用することが可能な携帯式電子機器に、
前記第1のタッチセンサと前記第２のタッチセンサが検出した指の座標を受け取るステップと、
前記第１のタッチセンサおよび前記第２のタッチセンサまたはいずれか一方のタッチセンサが検出した座標からタッチしている指の本数を計算してユーザまたは環境を向く表面を認識するステップと、
前記認識した表面に応じて前記方向性デバイスの動作を制御するステップと
を有する処理を実行させるためのコンピュータ・プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、手で保持して使用できる携帯式電子機器が搭載する、ユーザに対する向きで動作設定が必要な方向性デバイスの制御に関し、さらには、方向性デバイスの動作設定をするためにユーザに対する筐体の向きを検出する技術に関する。
【背景技術】
【０００２】
スマートフォン、タブレット端末、またはノートブック型パーソナル・コンピュータ（ノートＰＣ）のような携帯式電子機器は、一般的に１台のタッチスクリーンを備えており、ユーザはタッチスクリーンが自分に向くように筐体を保持して操作する。このような携帯式電子機器は、タッチスクリーン、カメラおよびオーディオ・デバイスのようなユーザに対する入出力のインターフェースとなるデバイス（以後、インターフェース・デバイス）を搭載する。ある種のインターフェース・デバイスは、タッチスクリーンがユーザを向くことを前提にして動作設定がされている。
【０００３】
特許文献１は、操作者の操作に応じて複数の表示装置の表示内容を連携して変更する表示システムを開示する。同文献には、マスタ表示装置が、表示装置の各々に割り当てられた画面ＩＤと、各々の表示装置に表示する画像の画像データとの対応関係を記憶し、タッチセンサから出力された操作信号に基づいて操作者の操作内容を判別し、判別した操作内容に応じて上記対応関係を変更することを記載している。
【０００４】
特許文献２は、２本の指のタッチパネル上の移動を検出し、移動量が少ない方を固定指に設定し、移動量が多い指を可動指に設定して、当該可動指の移動方向に基づいて、めくり方向を、左ページ若しくは右ページ、または、上ページ若しくは下ページに決定する情報処理装置を開示する。特許文献３は、タッチ操作により検出される指の本数によって異なるアプリケーション・プログラムを起動する携帯式電子機器を開示する。
【０００５】
特許文献４は、表面と裏面に設けたタッチパネルで操作する携帯式電子機器を開示する。特許文献５は、ラップトップ・モードとタブレット・モードで利用できるノートＰＣが搭載するマイクロフォンのビーム・フォーミングを制御する発明を開示する。同文献には、タブレット・モードに変更されたことを検出したシステムは、強調空間の指向軸の方向および指向範囲角が最適になるように設定することを記載する。非特許文献１は、ディスプレイ筐体を３６０度回動させてラップトップ・モード、テント・モード、スタンド・モードおよびタブレット・モードの４つの使用モードで利用することができるノートＰＣを開示する。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００９−２１１５４７号公報
【特許文献２】特開２０１１−０３９８４３号公報
【特許文献３】特開２０１５−０１２３４０号公報
【特許文献４】特開２０１２−２４２８５１号公報
【特許文献５】特開２０１０−０７２６９５号公報
【非特許文献】
【０００７】
【非特許文献１】ThinkPad Yoga、[online]、平成２５年８月１日検索、インターネット〈URL〈http://shopap.lenovo.com/jp/notebooks/thinkpad/yoga-series/yoga/#特長〉〉
【発明の概要】
【発明が解決しようとする課題】
【０００８】
非特許文献１に記載するようなノートＰＣのボトム側筐体にハードウェア・キーボードに代えてタッチスクリーンを設けてデュアル・スクリーン式のノートＰＣを構成すると薄型化が可能になる。ラップトップ・モードではボトム側筐体のタッチスクリーンにソフトウェア・キーボードを表示してノートＰＣのように利用でき、テント・モードでは、複数のユーザが異なる方向からいずれかのタッチスクリーンの画面を閲覧できるようになる。
【０００９】
ボトム側筐体は、電池ユニットやディスク・ドライブなどを搭載して重量が重くなるためユーザは、ラップトップ・モードのときにボトム側筐体が机上面に接するように配置することができる。したがって、ラップトップ・モードでは、トップ側筐体のタッチスクリーンがユーザを向き、ボトム側筐体のタッチスクリーンが上を向くといったように、ユーザに対する２つのタッチスクリーンの向きまたは姿勢が確定する。システムはラップ・モードを検出したときにユーザが確定させた姿勢を前提にして、システム筐体のタッチスクリーンにソフトウェア・キーボードを表示し、ディスプレイ筐体のタッチスクリーンにアプリケーション画面を表示することができる。
【００１０】
これに対してタブレット・モードでは、２つのタッチスクリーンが背中合わせに配置される状態になり、ユーザは筐体を手に保持して使用する。このときインターフェース・デバイスは表面または背面のいずれかに配置されることになる。デュアル・スクリーン式のノートＰＣが搭載するタッチスクリーン、カメラ、マイクロフォン、またはスピーカのようなインターフェース・デバイスのなかには、配置された位置に応じて動作設定をする必要があるものが存在する。
【００１１】
タブレット・モードのときに、ユーザがあらかじめ定めておいたいずれか一方のタッチスクリーンが自分を向くように保持することを前提にすれば、システムは適切にインターフェース・デバイスの設定をすることができる。しかし、全体的に統一した基調のデザインを採用するような場合は特に、ユーザが瞬時にあらかじめ定められたタッチスクリーンを自分に向けて保持することは困難であるか、または、失敗したときに持ち替えることは不便である。ユーザがいずれのタッチスクリーンを自分に向けて保持してもインターフェース・デバイスが適切に動作設定されることが望ましい。
【００１２】
タッチスクリーンについて具体的に説明すると、ユーザはタブレット・モードで自分を向いている表面側のタッチスクリーンに対してだけアクセスすればよいため、誤入力の防止や消費電力の低減を図るため背面側のタッチスクリーンは動作を停止することが望ましい。タブレット・モードを検出したシステムは、いずれか一方のタッチスクリーンを動作させ他方のタッチスクリーンを停止させることはできる。また、システムが一旦両方のタッチスクリーンを動作させた後に、ユーザが必要に応じて巨体を持ち替えて一方のタッチスクリーンを操作し、他方のタッチスクリーンを停止することもできる。しかし、ユーザにそのような筐体の持ち替えや操作を強いることは使用モードの円滑な変更を妨げる。
【００１３】
システム筐体とディスプレイ筐体にそれぞれカメラを搭載すれば、タブレット・モードのノートＰＣを保持しているユーザは、自分または環境を撮影することができる。システムが画像データを取り込む前には、プレビュー画面をいずれかのタッチスクリーンに表示する。環境を撮影することが多いユーザはカメラを動作させたときにプレビュー画面に環境が表示されることを望む。このときシステムは、２台のカメラのなかで環境を向いているカメラを特定する必要がある。これとは逆に、自分を撮影することが多いユーザの場合は、システムがユーザを向いているカメラを特定する必要がある。
【００１４】
カメラを１台しか設けない場合は、ユーザを向いているタッチスクリーンにプレビュー画面を表示してユーザを撮影することができる。しかし、反対側のタッチスクリーンの動作を停止させると、筐体の向きを変えて環境を撮影しようとしてもユーザを向くタッチスクリーンが停止しているため、プレビュー画面の表示ができないことになる。このように、タブレット・モードで利用できるデュアル・スクリーン式のノートＰＣには、システムがユーザを向くタッチスクリーンを判断しないと自動的に適切な動作設定ができないインターフェース・デバイスが存在する。なお、タッチスクリーンやカメラはユーザに対する筐体の向きに応じて設定する必要があるインターフェース・デバイスの例示であり本発明の課題を限定するものではない。
【００１５】
そこで本発明の目的は、ユーザに対する向きで動作設定が必要な方向性デバイスを搭載する携帯式電子機器を提供することにある。さらに本発明の目的は、ユーザによる筐体の保持の仕方を制約しない携帯式電子機器を提供することにある。さらに本発明の目的は、筐体を保持してからユーザによる方向性デバイスに対する設定操作を必要としない携帯式電子機器を提供することにある。さらに本発明の目的は、カメラ台数を削減できる携帯式電子機器を提供することにある。さらに本発明の目的は、そのような携帯式電子機器に適用する方向性デバイスの動作設定をする方法およびコンピュータ・プログラムを提供することにある。
【課題を解決するための手段】
【００１６】
本発明は、筐体を手で保持する使用状態で第１の表面または第２の表面に配置され、ユーザに対する向きで動作設定が必要な方向性デバイスを搭載した携帯式電子機器を提供する。携帯式電子機器は、第１の表面に配置した第１のタッチセンサと、第２の表面に配置した第２のタッチセンサと、第１のタッチセンサおよび第２のタッチセンサまたはいずれか一方のタッチセンサにタッチしている指の本数を計算してユーザまたは環境を向く表面を認識し方向性デバイスの動作設定をする制御部とを有する。
【００１７】
上記の構成により、ユーザが自然に筐体を保持すれば、ユーザに対する向きに応じて方向性デバイスの動作が制御される。筐体を手で保持する使用状態は、マルチ・ユース・モードの携帯式電子機器においてタブレット・モードに設定することで実現してもよいし、平板状の筐体の表面と裏面をそれぞれ第１の表面および第２の表面とするような携帯式電子機器で実現してもよい。方向性デバイスのユーザに対する向きで必要になる動作設定は、一例において、タッチスクリーンのような動作または停止の制御、ステレオ・スピーカのようなユーザに対する左右方向の位置を適応させる制御、およびマイクロフォン・ペアのような集音する空間の方向および範囲を適応させる制御とすることができる。
【００１８】
方向性デバイスが、第１のタッチスクリーンと第２のタッチスクリーンを含む場合は、第１のタッチセンサを第１のタッチスクリーンを構成する第１のタッチパネルとし、第２のタッチセンサを第２のタッチスクリーンを構成する第２のタッチパネルとすることができる。筐体を相互にヒンジ機構で結合した第１の筐体と第２の筐体で構成し、ヒンジ機構を回動させて筐体を手で保持する使用状態を設定するようにしてもよい。多くのユーザは、ユーザを向く表面を親指で保持すると想定でき。したがって制御部は１本の指を検出したタッチセンサが存在する表面がユーザを向くと認識することができる。
【００１９】
多くのユーザは、筐体の周辺部を保持すると想定できる。したがって制御部は、１本の指を検出したときの指の座標が筐体の周辺部を示すときに表面がユーザを向くと認識すると一層高い確率でユーザを向く表面を認識することができる。制御部は、筐体の両端の周辺部にそれぞれ１本の指を検出したタッチセンサが存在する表面がユーザを向くと認識することができる。この場合制御部は、ユーザが筐体を両手で保持してもユーザを向く表面を認識することができる。
【００２０】
多くのユーザは、環境を向く表面を親指以外の指で保持すると想定できる。したがって制御部は、２本以上４本以下の指を検出したタッチセンサが存在する表面が環境を向くと認識することができる。筐体を保持するときの親指以外の４本の指の長さ関係は一定の範囲にあると想定できる。したがって制御部は、検出した複数の離散的な座標の集合が筐体を保持する指の形状に合致していることを示すときに当該表面が環境を向くと認識することができる。制御部は、筐体を保持する手のひらがタッチしている領域の形状に合致していることを示す座標の集合を検出したタッチセンサが存在する表面が環境を向くと認識することができる。この場合、制御部はユーザが環境を向く表面を手のひらと前腕部に載せるように保持しても当該表面が環境を向くと認識することができる。
【００２１】
方向性デバイスが第１の表面に配置したカメラを含む場合は、制御部は第１の表面が環境を向くと認識したときに第２のタッチスクリーンがプレビュー画面を表示するように制御することができる。この場合、カメラを第１の表面にだけ搭載しても環境の撮影が可能になる。制御部は、第１の表面がユーザを向くと認識したときに第１のタッチスクリーンがプレビュー画面を表示するように制御することができる。
【００２２】
方向性デバイスが第１の表面に配置した第１のカメラと第２の表面に配置した第２のカメラを含む場合は、制御部は撮影モードが環境撮影モードに設定され、第１の表面がユーザを向くと認識したときに第２のカメラを動作させ第１のタッチスクリーンにプレビュー画面を表示することができる。
【００２３】
方向性デバイスが第１の表面に配置した第１のステレオ・スピーカと第２の表面に配置した第２のステレオ・スピーカを含む場合は、制御部はユーザを向くと認識した表面に配置したステレオ・スピーカを動作させてパンニングを制御し、環境を向くと認識したステレオ・スピーカを停止することができる。方向性デバイスが第１の表面に配置した第１のマイクロフォン・ペアと第２の表面に配置した第２のマイクロフォン・ペアを含む場合は、制御部はユーザを向くと認識した表面に配置したマイクロフォン・ペアと環境を向くと認識した表面に配置したマイクロフォン・ペアに対して異なるビーム・フォーミング制御をすることができる。
【発明の効果】
【００２４】
本発明により、ユーザに対する向きで動作設定が必要な方向性デバイスを搭載する携帯式電子機器を提供することができた。さらに本発明によりユーザによる筐体の保持の仕方を制約しない携帯式電子機器を提供することができた。さらに本発明により、筐体を保持してからユーザによる方向性デバイスに対する設定操作を必要としない携帯式電子機器を提供することができた。さらに本発明により、カメラ台数を削減できる携帯式電子機器を提供することができた。さらに本発明により、そのような携帯式電子機器に適用する方向性デバイスの動作設定をする方法およびコンピュータ・プログラムを提供することができた。
【図面の簡単な説明】
【００２５】
【図１】マルチ・ユース・モードを備えたデュアル・スクリーン式のノートＰＣ１０の外形を示す斜視図および背面図である。
【図２】ノートＰＣ１０の使用モードを説明するための図である。
【図３】タブレット・モードでいずれかの表面１０２ａ、２０２ａがユーザを向く様子を説明するための図である。
【図４】ユーザがタブレット・モードのノートＰＣ１０を保持するときの様子を説明するための図である。
【図５】ユーザがタブレット・モードのノートＰＣ１０を保持するときの様子を説明するための図である。
【図６】ユーザがタブレット・モードのノートＰＣ１０を保持するときの様子を説明するための図である。
【図７】ノートＰＣ１０の概略的な機能ブロック図である。
【図８】制御システム３００の動作手順を示すマスター・フローチャートである。
【図９】ユーザを向く表面を認識する手順を示すフローチャートである。
【図１０】ユーザを向く表面を認識する手順を説明するための図である。
【図１１】環境を向く表面を認識する手順を示すフローチャートである。
【図１２】環境を向く表面を認識する手順を説明するための図である。
【図１３】カメラ１０５、２０５の動作設定をする手順を示すフローチャートである。
【発明を実施するための形態】
【００２６】
［ノートＰＣ］
図１は、本実施の形態にかかるマルチ・ユース・モードを備えたデュアル・スクリーン式のノートＰＣ１０の斜視図と背面図である。ここにマルチ・ユース・モードとは、ディスプレイを搭載する筐体とキーボード（ソフトウェア・キーボードを含む）を搭載する筐体の相対的な姿勢および必要に応じて机上面に対する姿勢を変化させて複数の使用モードで使用できる機能をいう。マルチ・ユース・モードを備える携帯式電子機器はノートＰＣの他に、タブレット端末、またはスマートフォンなどの範疇に属する場合がある。ノートＰＣ１０のマルチ・ユース・モードについては、図２を参照して説明する。
【００２７】
ノートＰＣ１０は、トップ側筐体１０１とボトム側筐体２０１がヒンジ機構１１ａ、１１ｂで結合している。トップ側筐体１０１はタッチスクリーン１０３を収納し、ボトム側筐体２０１はタッチスクリーン２０３を収納している。トップ側筐体１０１にタッチスクリーン１０３の表示面側である表面１０２ａ、表面１０２ａの裏側に相当する背面１０２ｂ、およびヒンジ機構１１ａ、１１ｂに対向する位置に側面１０２ｃを定義する。
【００２８】
ボトム側筐体２０１にタッチスクリーン２０３の表示面側である表面２０２ａ、表面２０２ａの裏側に相当する背面２０２ｂ、およびヒンジ機構１１ａ、１１ｂに対向する位置に側面２０２ｃを定義する。表面１０２ａには、側面１０２ｃに隣接するタッチスクリーン１０３の縁枠にカメラ１０５、ステレオ・スピーカ１０７ａ、１０７ｂ、およびマイクロフォン・ペア１０９ａ、１０９ｂを設けている。トップ側筐体１０１の内部には、表面１０２ａに平行にＸ−Ｙ座標を定義した３軸の加速度センサ１１１を備えている。
【００２９】
表面２０２ａには、側面２０２ｃに隣接するタッチスクリーン２０３の縁枠にカメラ２０５、ステレオ・スピーカ２０７ａ、２０７ｂ、およびマイクロフォン２０９ａ、２０９ｂを設けている。ボトム側筐体２０１の内部には、表面２０２ａに平行にＸ−Ｙ座標を定義した３軸の加速度センサ２１１を備えている。一例においてボトム側筐体２０１は、内部にはＣＰＵ、ＧＰＵ、Ｉ／Ｏコントローラなどのシステム・デバイスを実装したマザー・ボード、電池ユニット、電源装置、および放熱ファンなどを実装し、トップ側筐体１０１よりも重量が重くなっている。
【００３０】
トップ側筐体１０１の表面１０２ａとボトム側筐体２０１の表面２０２ａが形成する角度を開閉角度θという。図１（Ａ）は開閉角度θが１４０度で、図１（Ｂ）は開閉角度θが１８０度の様子を示している。ヒンジ機構１１ａ、１１ｂは、０度から３６０度までの開閉角度θの範囲でトップ側筐体１０１を回動させることができるとともに、シャフトに適度なトルクを付与して任意の開閉角度θで筐体の姿勢を維持することができる。一例においてシステムは、加速度センサ１１１、２１１で開閉角度θを計算する。ヒンジ機構１１ｂには、加速度センサ１１１、２１１では計算し難い０度、１８０度または３６０度といった開閉角度θを検出するためのホール・センサ１３を備えている。ただし、開閉角度θを検出するデバイスは、本発明において加速度センサやホール・センサに限定する必要はない。
【００３１】
［マルチ・ユース・モード］
図２はマルチ・ユース・モードを説明するための図である。ノートＰＣ１０は、開閉角度θを変化させ、さらに所定の開閉角度θにおける机上面に対する全体の姿勢を変化させて７つの使用モードで利用できる。システムは、加速度センサ１１１、２１１およびホール・センサ１３の出力で使用モードを認識することができる。図２（Ａ）は、ノートＰＣ１０を閉じて開閉角度θを０度にしたクローズ・モード示している。図２（Ａ）では、タッチスクリーン１０３とタッチスクリーン２０３が対向している。クローズ・モードでは無線通信や、外部の入出力装置を接続してシステムを利用することができるがタッチスクリーン１０３、２０３は利用できない。
【００３２】
図２（Ｂ）は、開閉角度θを所定の範囲に開いたラップトップ・モードを示している。ラップトップ・モードでは、タッチスクリーン２０３にソフトウェア・キーボードを表示し、タッチスクリーン１０３に閲覧画面を表示して利用することができる。図２（Ｃ）は、開閉角度θが１８０度になるように開いたレイ・フラット・モード（Lay-Flat Mode）を示している。レイ・フラット・モードでは、たとえば、タッチスクリーン１０３、２０３に表示する画面の天地が反対方向を向くように表示して、対面するユーザと同じ画面を閲覧することができる。あるいはタッチスクリーン１０３、２０３を１画面として利用することもできる。
【００３３】
図２（Ｄ）は、開閉角度θが１８０度以上になるように開き、机上面に側面１０２ｃ、２０２ｃのコーナーが接して背面１０２ｂ、２０２ｂが机上面を向くように配置したテント・モードを示している。テント・モードでは、タッチスクリーン１０３をユーザから見やすいように傾斜させることができるためプレゼンテーションや対面するユーザとの同時閲覧に便利である。図２（Ｅ）は、開閉角度θを１８０度以上になるように開いて一方のタッチスクリーン２０３が机上面に接するように配置したスタンド・モードを示している。スタンド・モードは、タッチスクリーン１０３の前側にボトム側筐体２０１がないため、たとえばビデオ会議のときに前面のスペースが利用できて便利である。
【００３４】
図２（Ｆ）は、開閉角度θを３６０度まで開いたタブレット・モードを示している。タブレット・モードでは、ボトム側筐体１０１の背面１０２ｂとトップ側筐体２０１の背面２０２ｂが対向しており、タッチスクリーン１０３、２０３が外側に面している。タブレット・モードでは、表面１０２ａ、２０２ａのいずれかがユーザを向くように手で保持することでタッチスクリーン１０３、２０３に対する閲覧および操作をすることができる。
【００３５】
図２（Ｇ）は、開閉角度θが９０度〜１８０度の範囲になるように開いたブック・モードを示している。ブック・モードは、縦書きの本を読む感覚で画面を閲覧するときに便利である。ノートＰＣ１０は、インターフェース・デバイスとして、タッチスクリーン１０３、２０３、カメラ１０５、２０５、ステレオ・スピーカ１０７ａ、１０７ｂ、ステレオ・スピーカ２０７ａ、２０７ｂ、マイクロフォン・ペア１０９ａ、１０９ｂ、マイクロフォン・ペア２０９ａ、２０９ｂを備えている。
【００３６】
システムは使用モードを検出したときに、これらのインターフェース・デバイスが表面１０２ａ、２０２ａのいずれがユーザまたはその反対方向に相当する環境を向くかで異なる動作設定をする必要がある。ラップトップ・モードを検出したシステムは、たとえば、タッチスクリーン１０３に閲覧画面を表示し、タッチスクリーン２０３にキーボードを表示する。テント・モードを検出したシステムは、たとえば、タッチスクリーン１０３を停止してタッチスクリーン２０３を動作させる。
【００３７】
スタンド・モードを検出したシステムは、たとえば、タッチスクリーン１０３を動作させてタッチスクリーン２０３を停止する。あるいは、対面するユーザとの間で利用することが多い場合は、タッチスクリーン１０３、２０３に背中合わせに画面を表示する。ステレオ・スピーカ１０７ａ、１０７ｂ、ステレオ・スピーカ２０７ａ、２０７については、ユーザに対する向きを判断して左右のパンニング（panning）の制御をする。
【００３８】
マイクロフォン・ペア１０９ａ、１０９ｂ、マイクロフォン・ペア２０９ａ、２０９ｂについては、使用モードを検出したシステムは、たとえば、ユーザの音声を集音するマイクロフォン・ペアと周囲の多くのユーザの音声を集音するマイクロフォン・ペアを特定してそれぞれの強調空間の指向軸の方向および指向範囲角が最適になるようにビーム・フォーミングを制御する。一例においてシステムは、ユーザの音声を集音するマイクロフォン・ペアの指向範囲角を小さくし、環境からの音声を集音するマイクロフォン・ペアの指向範囲角を大きくする。
【００３９】
このように、マルチ・ユース・モードの携帯式電子機器に搭載するインターフェース・デバイスのなかで、ユーザを向いている表面１０２ａ、２０２ａを特定して動作設定する必要があるデバイスを方向性デバイスということにする。方向性デバイスの動作設定は、いずれか一方の表面１０２ａ、２０２ａがユーザを向く場合にはデフォルトの設定をし、他方の表面がユーザを向く場合にデフォルトとは異なる設定をすることでもよい。タッチスクリーン１０３、２０３、カメラ１０５、２０５、ステレオ・スピーカ１０７ａ、１０７ｂ、ステレオ・スピーカ２０７ａ、２０７ｂ、マイクロフォン・ペア１０９ａ、１０９ｂ、およびマイクロフォン・ペア２０９ａ、２０９ｂは方向性デバイスの一例である。
【００４０】
ラップトップ・モード、レイ・フラット・モード、テント・モード、およびスタンド・モードでは開閉角度θが開いているため、ボトム側筐体２０１とトップ側筐体１０１にデザイン上の一体性があってもユーザは重量の重いボトム側筐体２０１を認識して机上に配置することができる。したがってシステムは、ユーザがいずれの表面１０２ａ、２０２ａを自らに向けるかを想定して、検出した使用モードに応じて方向性デバイスの動作設定をすることができる。
【００４１】
しかし、タブレット・モードのときは、開閉角度θが３６０度であるため、ユーザは重量でトップ側筐体１０１とボトム側筐体２０１を認識することはできない。さらに全体的にデザイン上の一体性があると、短時間でタッチスクリーン１０３、２０３を区別して保持することは困難になる。そのときユーザが筐体を保持すると、図３に示すように表面２０２ａまたは表面１０２ａのいずれかがユーザを向く。タブレット・モードのときに動作するタッチスクリーン１０３、２０３をいずれか一方に決めておき他の方向性デバイスもそれと一致した設定にすることもできるが、ユーザによる筐体の持ち替えが必要になったり、ユーザによる設定操作が必要になったりするので、本実施の形態では、システムがユーザまたは環境を向いている表面１０２ａ、２０２ａを判断してデバイスを設定する。
【００４２】
［タブレット・モードでの方向性デバイスの設定］
タブレット・モードのときに、ユーザが筐体の表裏方向および天地方向を意識しないで自由に保持する場合は、方向性デバイスのユーザに対する向きに複数のパターンがでてくる。図４は、タブレット・モードのノートＰＣ１０を左手で保持しながら右手で操作するときの様子を示している。
【００４３】
図４は、表面２０２ａがユーザを向き、表面１０２ａが環境を向いて、カメラ１０５、２０５はユーザからみて上側に位置している。図５も表面２０２ａがユーザを向き、表面１０２ａが環境を向いているが天地方向が図４と逆になってカメラ１０５、２０５が下側に位置している。表示面１０２ａがユーザを向く場合にも同様に２とおりの天地方向が存在する。天地方向について注目すべきは、図４、図５でユーザに対するステレオ・スピーカ２０７ａ、２０７ｂの左右の配置が逆になっている点である。
【００４４】
このとき、システムは、後に説明する方法でユーザが筐体を保持した時点で表面１０２ａ、２０２ａのユーザに対する方向または環境に対する方向、および天地方向（以下、ユーザに対する向きまたは環境に対する向きという。）を判断して方向性デバイスの動作を設定する。なおタブレット・モードでは、ユーザを向く表面と環境を向く表面が相反する位置にあるため、一方の表面の向きが確定すると他方の表面の向きも確定する。以下においては、図４、図５に示すユーザに対する向きを例示して説明するが、表面１０２ａがユーザを向くように保持した場合も同様に理解することができる。
【００４５】
つぎに、タブレット・モードにおいて、ユーザに対する向きに応じた方向性デバイスの好ましい動作を説明する。タッチスクリーン１０３、２０３がユーザに対して同等のインターフェースを提供することを前提にすれば、誤操作の防止や消費電力の視点から、ユーザを向くタッチスクリーンだけが動作し、環境を向くタッチスクリーンは停止することが望ましい。
【００４６】
カメラ撮影には、音声通話（ＶｏＩＰ）のときにユーザが自分を撮影する自己撮影と周囲の静止画または動画を撮影する環境撮影がある。カメラ撮影の際にはユーザを向くタッチスクリーンにプレビュー画面を表示する。カメラをほとんど環境撮影に利用するユーザにとっては、カメラのアイコンにタッチ操作をしたときに、システムが環境を向く表面１０２ａに設けたカメラ１０５を動作させ、ユーザを向く表面２０２ａに設けたタッチスクリーン２０３にプレビュー画面を表示すると都合がよい。
【００４７】
カメラをほとんど自己撮影に利用するユーザにとっては、カメラのアイコンにタッチ操作をしたときに、システムがユーザを向く表面２０２ａに設けたカメラ２０５を動作させ、タッチスクリーン２０３にプレビュー画面を表示すると都合がよい。廉価なノートＰＣではカメラ台数を削減するために、たとえばトップ側筐体１０１のカメラ１０５だけを設ける場合がある。ユーザは、環境撮影か自己撮影かで筐体の持ち方を変える必要があるが、プレビュー画面は常にユーザを向くタッチスクリーンが表示する必要がある。自己撮影ではプレビュー画面を表示するタッチスクリーン１０３とカメラ１０５が同じ表面１０２ａに存在し、環境撮影ではプレビュー画面を表示するタッチスクリーン２０３の表面２０２ａとカメラが存在する表面１０２ａは異なるため、システムは表面１０２ａ、２０２ａのユーザに対する向きを検出する必要がある。
【００４８】
またほとんど一人で利用するユーザにとっては、タブレット・モードに設定したときにシステムは、ユーザを向くステレオ・スピーカ２０７ａ、２０７ｂを動作させ、環境を向くステレオ・スピーカ１０７ａ、１０７ｂを停止することが望ましい。あるいは、複数のユーザが音声を聴取することが多いユーザにとっては、タブレット・モードに設定したときに、システムがステレオ・スピーカ２０７ａ、２０７ｂに加えてステレオ・スピーカ１０７ａ、１０７ｂも動作させることが望ましい。また、ステレオ・スピーカ２０７ａ、２０７ｂは、図４、図５における左右方向の配置から明らかなように、システムが天地方向に応じて左右のパンニングを変更する必要がある。
【００４９】
ユーザおよび周囲の複数のユーザが発生した音声を集音することが多い場合は、システムがユーザを向くマイクロフォン・ペア２０９ａ、２０９ｂはユーザの音声の集音に適し、環境を向くマイクロフォン・ペア１０９ａ、１０９ｂは広い範囲の音声の集音に適するようにビーム・フォーミング制御をすることが望ましい。あるいは、ほとんど一人で利用するユーザにとっては、システムがユーザを向くマイクロフォン・ペア２０９ａ、２０９ｂに対してビーム・フォーミング制御をし、環境を向くマイクロフォン・ペア１０９ａ、１０９ｂを停止することが望ましい。このようにタブレット・モードでは、方向性デバイスに対してシステムが筐体を保持したときのユーザに対する向きに応じた動作設定をする必要がある。
【００５０】
［ユーザに対する向きの検出方法］
システムは、方向性デバイスに対して動作設定をするために、以下の方法でユーザに対する向きを認識する。図４、図５に示すように、タブレット・モードのときに一般的なユーザは筐体の左右の端部を一方の手で保持し他方の手でタッチ操作をする。図４、図５は、左手の親指がタッチスクリーン２０３を保持し、残りの４本の指がタッチスクリーン１０３を保持している様子を示している。
【００５１】
指の構造上ほとんどのユーザは、ユーザを向く表面２０２ａに存在するタッチスクリーン２０３を親指１本で保持すると考えてよい。環境を向く表面１０２ａに存在するタッチスクリーン１０３を保持する指の本数は、筐体の大きさによって異なることもあり得る。筐体が大きい場合は図４、図５に示すように４本の指で保持すると安定性がある。筐体が小さい場合は人差し指、中指、および薬指の３本または人差し指、中指の２本になるかもしれない。しかし、タッチスクリーン１０３を１本の指で保持して親指と挟むように保持することは安定しないので通常はあり得ないと考えてよい。
【００５２】
また特徴的には、親指が、タッチスクリーン２０３の周辺部を保持する。また、残りの４本の指は指の長さに従ってほぼ上下方向に並んでタッチスクリーン１０３を保持する。システムはタッチスクリーン１０３、２０３が何らかの座標を検出したときに、検出した島状の座標の集合の大きさおよび形状から周知の方法で指の腹であることを認識する。このときシステムは１本の指を認識した座標を検出したタッチスクリーン２０３があるときに、その指を親指であると想定してタッチスクリーン２０３が存在する表面２０２ａがユーザを向いていると判断することができる。また、併せてその座標がタッチスクリーン２０３の周辺部に存在することを判断要素に加えてもよい。システムは、複数の指を認識した座標を検出したタッチスクリーン１０３が環境を向いていると判断することができる。また、併せて複数の島状の座標の集合の配置が、指の形状に従っているかを判断要素に加えてもよい。
【００５３】
さらに、ユーザは、タッチスクリーン２０３の画面を閲覧したり音楽を聴いたりするだけのときは、一時的に右手も左手のようにタッチスクリーン２０３、１０３の反対側の周辺部を保持することがある。この場合システムは、タッチスクリーン２０３の両側に各１本の指を認識する。指２本を認識したときは、それらの座標がタッチスクリーン２０３の両側の周辺部の領域であることを判断要素に加えてユーザを向くタッチスクリーン２０３を認識することができる。タッチスクリーン１０３についても、５本の以上の指を認識したときに、左右両側の周辺部で検出した複数の島状の座標の集合の配置が、それぞれの指の形状に従っているかを判断要素に加えて環境を向くタッチスクリーン１０３を認識することができる。
【００５４】
システムは、タッチスクリーン２０３、１０３のいずれか一方が認識した指の本数、指のタッチ位置の座標、および指の形状に対する適合性などでユーザに対する向きを確定してもよいし、両方のタッチスクリーンによる判断の結果が一致したときに向きを確定してもよい。図６は、筐体の側面１０２ｃ、２０２ｃを左手で保持するときの様子を示している。ここでは、表面１０２ａを下から抱えるようにしながら側面１０２ｃ、２０２ｃの近辺を左手の５本の指で保持している。図７に示すように、タッチスクリーン１０３は、タッチパネル１０３ａとディスプレイ１０３ｂで構成し、タッチスクリーン２０３は、タッチパネル２０３ａとディスプレイ２０３ｂで構成している。
【００５５】
タッチパネル１０３ａ、２０３ａの領域は、ディスプレイ１０３ｂ、２０３ｂの領域よりも拡大して側面１０２ｃ、２０２ｃ近くまで延ばすことができる。図６では、システムがタッチパネル２０３ａの座標から左手の人差し指、中指、および薬指を認識し、タッチパネル１０３ａの座標から親指と小指を認識する。特徴的には、このとき左手の手のひらおよび指の根本がタッチパネル１０３ａに接触している。システムはユーザが図６のように保持したときに、タッチパネル１０３ａの座標から手のひらを認識することで、表面１０２ａが環境を向いていると判断することができる。
【００５６】
［制御システム］
図７は、使用モードを検出して方向性デバイスに対する動作設定をする制御システム３００の概略的な機能ブロック図である。ホール・センサ１３および加速度センサ１１１、１２１は、使用モードを特定するための信号を出力するデバイスの一例である。タッチパネル１０３、２０３、カメラ１０５、２０５、ステレオ・スピーカ１０７ａ、１０７ｂ、ステレオ・スピーカ２０７ａ、２０７ｂ、マイクロフォン・ペア１０９ａ、１０９ｂ、マイクロフォン・ペア２０９ａ、２０９ｂが、制御システム３００に接続されている。
【００５７】
タッチパネル１０３ａ、２０３ａは、タッチした指の座標を検出するデバイスの例示であり、静電容量式、赤外線式、電磁誘導式または抵抗膜式などのタッチセンサを採用することができる。制御システム３００を構成する使用モード判定部３０１、座標検出部３０３、デバイス制御部３０５、ユーザ・ファンクション３０７、座標検出部３０９および方向認識部３１１は、ＣＰＵ、システム・メモリ、およびチップセットのようなハードウェア資源と、デバイス・ドライバ、ＯＳ、およびアプリケーション・プログラムのようなソフトウェア資源の協働で構成することができる。ソフトウェア資源は、ノートＰＣ１０が保有するディスク・ドライブまたは不揮発性メモリに格納している。
【００５８】
使用モード判定部３０１は、ホール・センサ１３および加速度センサ１１１、１２１から受け取った信号に基づいて、開閉角度θと重力方向に対する筐体の姿勢を判断し、使用モードを認識する。使用モード判定部３０１は、認識した新しい使用モードがタブレット・モードのときはその識別子を方向認識部３１１に通知し、タブレット・モード以外のときは認識した使用モードの識別子をデバイス制御部３０５に通知する。
【００５９】
座標検出部３０３、３０９は、それぞれタッチパネル１０３ａ、２０３ａが検出した座標を方向認識部３１１に送る。デバイス制御部３０５は、使用モード判定部３０１または方向認識部３１１から受け取った使用モードの識別子に基づいて方向性デバイスの動作設定をする。ユーザ・ファンクション３０７は、タッチスクリーン１０３、２０３に表示する画像データ、マイクロフォン１０９ａ、１０９ｂ、２０９ａ、２０９ｂから出力する音声データなどをデバイス制御部３０５に送る。
【００６０】
デバイス制御部３０５は、受け取った画像データ、音声データを動作設定したディスプレイ１０３ｂ、２０３ｂ、ステレオ・スピーカ１０７ａ、１０７ｂ、ステレオ・スピーカ２０７ａ、２０７ｂに送る。デバイス制御部３０５は、動作設定したマイクロフォン・ペア１０９ａ、１０９ｂ、およびマイクロフォン・ペア２０９ａ、２０９ｂから受け取った音声データ、動作設定したカメラ１０５、２０５から受け取った画像データをユーザ・ファンクション３０７に送る。ユーザ・ファンクション３０７は受け取った音声データおよび画像データを不揮発性メモリに記録する。デバイス制御部３０５に対してユーザは、撮影モードを設定することができる。ユーザは、環境撮影を行うことが多い場合は環境撮影モードに設定し、ユーザ撮影を行うことが多い場合はユーザ撮影モードに設定する。
【００６１】
［制御システムの動作］
図８は、制御システム３００の動作手順を示すマスター・フローチャートで、図９はユーザを向く表面を認識する手順を示すフローチャートで、図１０は、ユーザを向く表面を認識する手順を説明するための図である。図１１は、環境を向く表面を認識する手順を示すフローチャートで、図１２は、環境を向く表面を認識する手順を説明するための図である。
【００６２】
ブロック４０１で、ノートＰＣ１０がいずれかの使用モードで動作している。ブロック４０３でユーザは開閉角度θおよび机上面に対する姿勢を変えてクローズ・モード以外の使用モードに変更する。使用モード判定部３０１は、加速度センサ１１１、２１１、およびホール・センサ１３の出力から認識した使用モードがタブレット・モード以外のときは、認識した使用モードの識別子をデバイス制御部３０５に通知してブロック４１５に移行する。
【００６３】
使用モード判定部３０１は、認識した使用モードがタブレット・モードのときは、その識別子を方向認識部３１１に通知してブロック４０５に移行する。ブロック４０３につづくブロック４１５でデバイス制御部３０５は、タブレット・モード以外の使用モードに対してあらかじめ想定したユーザに対する向きに対応するように方向性デバイスを設定する。
【００６４】
ブロック４０５で方向認識部３１１はデバイス制御部３０５にタブレット・モードの識別子を送る。識別子を受け取ったデバイス制御部３０５は、停止しているタッチスクリーンがあれば動作させる。ただし、方向認識部３１１がユーザを向く表面または環境を向く表面を特定するまではディスプレイ１０３ｂ、２０３ｂを動作させなくてもよい。したがってデバイス制御部３０５はタブレット・モードの識別子を受け取った時点では、タッチパネル１０３ａ、２０３ａだけを動作させ、方向認識部３１１から表面を示す識別子を受け取ったあとにブロック４１３でユーザを向くいずれかの一方のタッチスクリーン１０３、２０３を動作させ、他方のタッチスクリーン１０３、２０３を停止させるようにしてもよい。
【００６５】
座標検出部３０３、３０９は、相互に独立してタッチされた位置の座標を方向認識部３１１に送る。方向認識部３１１は、座標検出部３０３、３０９から受け取った座標について、ユーザを向く表面および環境を向く表面を特定する処理を開始する。ブロック４０７で方向認識部３１１が、いずれかのタッチパネル１０３ａ、２０３ａが検出した座標から、ユーザを向く表面を認識したときはブロック４２１に移行し、ユーザを向く表面を認識しないときはブロック４０９に移行する。ブロック４０７の手順は図９を参照して説明する。ブロック４２１であらかじめユーザが方向認識部３１１に対して、ユーザを向く表面と環境を向く表面の両方を認識してからユーザに対する向きを確定することを設定したときはブロック４０９に移行し、ユーザを向く表面だけを認識することを設定したときはブロック４２３に移行する。
【００６６】
ブロック４２３で方向認識部３１１は、ユーザを向く表面を認識したタッチパネルが存在するいずれかの表面１０２ａ、２０２ａを示す識別子をデバイス制御部３０５に送る。ブロック４０９で方向認識部３１１が、いずれかのタッチパネル１０３ａ、２０３ａが検出した座標から、環境を向く表面を認識したときはブロック４１１に移行し、環境を向く表面を認識しないときはブロック４１５に移行する。ブロック４０９の手順は図１０を参照して説明する。
【００６７】
ブロック４０９につづくブロック４１５でデバイス制御部３０５は、タブレット・モードの通知を受け取ってから一定の時間が経過してもいずれの表面１０２ａ、２０２ａを示す識別子を受け取らないときは、タブレット・モードに対してあらかじめ設定したいずれかの表面１０２ａ、２０２ａがユーザを向く表面であるとみなして方向性デバイスの動作設定をする。
【００６８】
ブロック４１１で方向認識部３１１は、環境を向く表面を認識したタッチパネルが存在するいずれかの表面１０２ａ、２０２ａを示す識別子をデバイス制御部３０５に送る。ブロック４１３に至るパスでは、方向認識部３１１が、ユーザを向く表面および環境を向く表面またはいずれか一方の表面を認識し、結果として表面１０２ａ、２０２ａがいずれを向くかを認識している。ブロック４１３でデバイス制御部３０５は、環境を向くタッチスクリーンを停止してそれ以後の誤入力を防ぐとともに、消費電力の低減を図る。ブロック４１５でデバイス制御部３０５は、ユーザに対する向きに適応するようにタッチスクリーン１０３、２０３以外の方向性デバイスの動作設定をする。
【００６９】
図９のブロック５０１で方向認識部３１１は、座標検出部３０３、３０９から受け取ったそれぞれの座標に基づいてユーザを向く表面を認識するための処理を開始する。表面２０２ａがユーザを向き、表面１０２ａが環境を向いている場合に、ブロック５０３で方向認識部３１１は、図１０（Ａ）に示すように、タッチパネル２０３ａが検出した座標の集合８０１から１本の指を認識した場合はブロック５２１に移行し、認識しないときはブロック５０５に移行する。
【００７０】
方向認識部３１１は図１０（Ａ）に示すように、ユーザを向く表面の認識精度を高めるためにタッチパネル２０３ａの周囲に座標領域２０４を定義することができる。座標領域２０４を定義しているときはブロック５２１で、認識した座標の集合８０１から指の少なくとも一部が座標領域２０４で認識したか否かを判断する。座標領域２０４を定義しないときは、ブロック５２１の手順はスキップする。
【００７１】
１本の指を座標領域２０４で認識したときは、タッチパネル２０３ａの一方の周辺部が保持されたと判断してブロック５２３に移行し、座標領域２０４で認識しないときはブロック５０５に移行する。ブロック５２３で方向認識部３１１は、タッチパネル２０３が存在する表面２０２ａがユーザを向くと認識する。ブロック５０５で方向認識部３１１は、図１０（Ｂ）に示すようにタッチパネル２０３ａが検出した座標の集合８０３、８０５から２本の指を認識した場合はブロック５０７に移行し、認識しないときはブロック５０９に移行する。
【００７２】
ブロック５０９では方向認識部３１１がユーザを向く表面を認識できないため、図８のブロック４０７からブロック４０９に手順が移行する。ブロック５０７で方向認識部３１１は図１０（Ｂ）に示すよう、タッチパネル２０３ａが認識した座標の集合８０３、８０５からそれぞれの指の少なくとも一部をタッチパネル２０３ａの両端の座標領域２０４ａ、２０４ｂで認識したか否かを判断する。２本の指を座標領域２０４ａ、２０４ｂで認識したときは、タッチパネル２０３ａの両端の周辺部が保持されたと判断してブロック５２３に移行し、座標領域２０４ａ、２０４ｂで認識しないときはブロック５０９に移行する。方向認識部３１１は、２本の指を座標領域２０４ｃ、２０４ｄで認識したときも両端の周辺部が保持されたと判断してよい。なお、座標領域２０４を定義しないときは、ブロック５０７の手順はスキップする。
【００７３】
図１１のブロック６０１で方向認識部３１１は、座標検出部３０３、３０９から受け取ったそれぞれの座標に基づいて環境を向く表面を認識するための処理を開始する。ブロック６０３で方向認識部３１１は、タッチパネル１０３ａの座標の集合８０７から２本以上４本以下の指を認識した場合はブロック６２１に移行し、認識しないときはブロック６０５に移行する。図１２（Ａ）は、左手の４本の指のタッチ位置を示している。
【００７４】
方向認識部３１１は、図１２（Ａ）に示すように片手で筐体を保持したときに環境を向くタッチパネル１０３ａが検出する標準的な指の配置に沿ったライン７０１を保持している。ブロック６２１で方向認識部３１１は、認識した複数の離散的な座標の集合８０７が、指の形状に沿っているか否かを判断する。方向認識部３１１は、ライン７０１と複数の座標の集合８０７を比較して、複数の座標の集合８０７の位置が指の形状に合致していると判断したときは片手で保持していると判断してブロック６２３に移行し、合致しないと判断したときはブロック６０９に移行する。ライン７０１と座標の集合８０７の比較は、たとえば各座標の集合８０７の重心を結ぶ線とライン７０１の近似度を計算して行うことができる。なお、ブロック６２１の手順はスキップすることができる。
【００７５】
ブロック６０５で方向認識部３１１は、図１２（Ｂ）に示すように、タッチパネル１０３ａの複数の離散的な位置に存在する座標の集合８０９、８１１から５本以上の指を認識したときはブロック６０７に移行し、認識しないときはブロック６０９に移行する。図１２（Ｂ）の座標の集合８０９、８１１は、左手と右手のそれぞれ４本の指のタッチ位置を示している。方向認識部３１１は、両手で筐体を保持したときに環境を向くタッチパネル１０３ａが検出する標準的な指の配置に沿ったライン７０２、７０３のデータを保持している。
【００７６】
ブロック６０７で方向認識部３１１は、認識した複数の離散的な座標の集合８０９、８１１の位置が、両手で筐体を保持するときの指の形状に沿っているか否かを判断する。方向認識部３１１は、ライン７０２、７０３と複数の座標の集合８０９、８１１を比較して、複数の座標の集合８０９、８１１の位置が、筐体の両端を保持する指の形状に合致していると判断したときにユーザが両手で保持していると判断してブロック６２３に移行し、合致しないと判断したときはブロック６０９に移行する。なお、ブロック６０７の手順はスキップすることができる。
【００７７】
ブロック６０９で方向認識部３１１は、図１２（Ｃ）に示すようにタッチパネル１０３ａが検出したまとまりのある座標の集合８１３から手のひらを認識したときはブロック６２３に移行し、認識しないときはブロック６１１に移行する。ブロック６１１では方向認識部３１１が環境を向く表面を認識できないため、図８のブロック４０９からブロック４１５に手順が移行する。
【００７８】
図１３は、カメラ１０５、２０５の動作設定をする手順を示すフローチャートである。ノートＰＣ１０が２台のカメラを搭載する場合は、ユーザはあらかじめ頻繁に利用する撮影モードをデバイス制御部３０５に設定しておくことができる。ブロック８０１でユーザは、ユーザを向くタッチスクリーン２０３が表示するカメラの起動オブジェクトにタッチ操作をして撮影を開始する。ブロック８０３でデバイス制御部３０５は、現在設定されている撮影モードが環境撮影モードと判断したときはブロック８０５に移行し、ユーザ撮影モードと判断したときはブロック８０９に移行する。
【００７９】
ブロック８０５でデバイス制御部３０５は、方向認識部３１１から受け取ったいずれかの表面を示す識別子に基づいて認識した環境を向く表面１０２ａに存在するカメラ１０５を動作させる。ブロック８０７でデバイス制御部３０５は、ユーザを向く表面２０２ａに存在するタッチスクリーン２０３にカメラ１０５のプレビュー画面を表示する。ブロック８０９でデバイス制御部３０５は、方向認識部３１１から受け取ったいずれかの表面を示す識別子に基づいて認識したユーザを向く表面２０２ａに存在するカメラ２０５を動作させ、ブロック８０７でタッチスクリーン２０３にカメラ２０５のプレビュー画面を表示する。この手順により、ユーザがカメラの方向を意識しないで筐体を保持したときに、起動操作以外の特別な操作をしなくてもあらかじめ設定しておいた撮影モードで利用できる。
【００８０】
カメラを１台だけ搭載する場合も、本発明を適用すると容易に環境撮影またはユーザ撮影をすることができる。たとえば、トップ側筐体１０１だけがカメラ１０５を搭載する場合に、ユーザは環境撮影をするときに表面１０２ａを環境に向けて保持する。デバイス制御部３０５は、方向認識部３１１からいずれかの表面を示す識別子を受け取ると、ユーザを向く表面２０２ａに存在するタッチスクリーン２０３にプレビュー画面を表示する。
【００８１】
また、ユーザはユーザ撮影をするときに表面１０２ａをユーザに向けて保持する。デバイス制御部３０５は、方向認識部３１１からいずれかの表面を示す識別子を受け取ると、ユーザを向く表面１０２ａに存在するタッチスクリーン１０３にプレビュー画面を表示する。カメラが１台の場合は、ユーザがカメラを撮影方向に向けて保持する必要があるが、本発明によりいずれの方向の撮影であっても、必ずユーザを向くタッチスクリーンにプレビュー画面を表示することができる。
【００８２】
図８、図９、図１１、図１３に示した手順は、制御システム３００の動作の一例を示すものであり、本発明の思想の範囲で順番を変更したりスキップしたりすることが可能である。たとえば、図８では先に環境を向く表面を認識してからユーザを向く表面の認識をしてもよい。また図８のブロック４２１の手順は省略して、ユーザを向く表面または環境を向く表面のいずれかを認識したことでユーザに対する向きを判断してもよい。
【００８３】
トップ側筐体１０１とボトム側筐体２０１がヒンジ機構１１ａ、１１ｂで結合されたマルチ・ユース・モードのノートＰＣ１０を例示して本実施の形態を説明したが、手で保持する使用状態でタッチセンサが背中合わせに配置される携帯式電子機器はこれに限定するものではない。たとえば本発明は、ボトム側筐体２０１の背面２０２ｂに背面１０２ｂが接するようにトップ側筐体１０１を補助タッチスクリーンとして着脱可能に取り付けることができる携帯式電子機器に適用することができる。また、本発明は２つのタッチスクリーンを折り曲げて背中合わせに配置することができるフレキシブルな折り畳み式のタブレット端末に適用することができる。いずれの場合も背中合わせの状態で、一方のタッチスクリーンの表示面側がノートＰＣ１０の表面１０２ａに対応し、他方のタッチスクリーンの表示面側が表面２０２ａに対応する。
【００８４】
これまで本発明について図面に示した特定の実施の形態をもって説明してきたが、本発明は図面に示した実施の形態に限定されるものではなく、本発明の効果を奏する限り、これまで知られたいかなる構成であっても採用することができることはいうまでもないことである。
【符号の説明】
【００８５】
１０  マルチ・ユース・モードのノートＰＣ
１１ａ、１１ｂ  ヒンジ機構
１３  ホール・センサ
１０１  トップ側筐体
１０２ａ  トップ側筐体の表面
１０２ｂ  トップ側筐体の背面
１０２ｃ  トップ側筐体の側面
１０３、２０３  タッチスクリーン
１０３ａ、２０３ａ  タッチパネル
１０３ｂ、２０３ｂ  ディスプレイ
１０５、２０５  カメラ
１０７ａ、１０７ｂ  ステレオ・スピーカ
２０７ａ、２０７ｂ  ステレオ・スピーカ
１０９ａ、１０９ｂ  マイクロフォン・ペア
２０９ａ、２０９ｂ  マイクロフォン・ペア
１１１、２１１  加速度センサ
２０１  ボトム側筐体
２０２ａ  ボトム側筐体の表面
２０２ｂ  ボトム側筐体の背面
２０２ｃ  ボトム側筐体の側面
８０７、８０９、８１１、８１３  タッチパネルが検出する座標の集合
【図１】
2017054471.tif 000003
【図２】
2017054471.tif 000004
【図３】
2017054471.tif 000005
【図４】
2017054471.tif 000006
【図５】
2017054471.tif 000007
【図６】
2017054471.tif 000008
【図７】
2017054471.tif 000009
【図８】
2017054471.tif 000010
【図９】
2017054471.tif 000011
【図１０】
2017054471.tif 000012
【図１１】
2017054471.tif 000013
【図１２】
2017054471.tif 000014
【図１３】
2017054471.tif 000015