(57)【要約】      （修正有）【課題】色の異なる複数本の筆記具を色鉛筆のような感覚で使用することができ、装置の面白みを増加させることができる情報端末装置を提供する。【解決手段】情報端末装置１は、画像を表示する液晶表示部３２と、液晶表示部３２に対するスタイラスペン２０によるタッチ入力を受け付けるタッチパッド３３と、画像を撮影するカメラ部４０と、制御部と、を備える。制御部は、カメラ部４０により撮影された画像に含まれるスタイラスペン２０のペン先部２２の色を特定し、スタイラスペン２０により液晶表示部３２に対してタッチ入力が行われると、液晶表示部３２におけるスタイラスペン２０の軌跡の位置にペン先部２２の色に応じた色を表示させる。【選択図】図４
2017091336.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示部と、
前記表示部に対する筆記具による入力を受け付ける入力受付部と、
画像を撮影する撮影部と、
制御部と、を備え、
前記制御部は、
前記撮影部により撮影された画像に含まれる筆記具の所定部位の色を特定し、
前記筆記具により前記表示部に対して入力が行われると、前記表示部における前記筆記具の軌跡の位置に前記所定部位の色に応じた色を表示させる、
ことを特徴とする情報端末装置。
【請求項２】
請求項１に記載の情報端末装置において、
前記所定部位は、前記筆記具の先端部である、
ことを特徴とする情報端末装置。
【請求項３】
請求項１に記載の情報端末装置において、
前記所定部位は、前記筆記具のボディ部である、
ことを特徴とする情報端末装置。
【請求項４】
請求項１または２に記載の情報端末装置において、
前記制御部は、前記筆記具の先端部の色に応じた色を、前記表示部における、前記筆記具による入力が行われる入力領域の背景色に設定する、
ことを特徴とする情報端末装置。
【請求項５】
画像を表示する表示部と、
前記表示部に対する筆記具による入力を受け付ける入力受付部と、
画像を撮影する撮影部と、
制御部と、を備え、
前記制御部は、
前記撮影部に撮影された画像に含まれる筆記具の先端部の色を特定し、
前記筆記具の先端部の色に応じた色を、前記表示部における、前記筆記具による入力が行われる入力領域の背景色に設定する、
ことを特徴とする情報端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、スタイラスペン等の筆記具を用いて手書き入力が可能な情報端末装置に関する。
【背景技術】
【０００２】
従来、タブレット端末等の情報端末装置では、スタイラスペン（タッチペン）等の筆記具を用いて、タッチパネルに手書き入力を行うことができる（特許文献１参照）。このような情報端末装置では、筆記具が描く軌跡の色は、筆記具のボディ部やペン先部の色とは無関係に定められ、軌跡の色を変更する場合には、手書き入力の画面に配されたパレットを筆記具でタッチするような構成とされていた。また、手書き入力が行われる手書き領域の背景色も、筆記具のボディ部やペン先部の色とは無関係に定められていた。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−２２６７１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
近年では、豊富なカラーバリエーションを有するスタイラスペン等の筆記具が市販されており、ユーザは、色の異なる複数の筆記具をまとめて購入することができる。このような場合に、情報端末装置において、色の異なる複数本の筆記具を色鉛筆のような感覚で使用することができると、情報端末装置の面白みを増加させることができる。
【０００５】
また、このように、様々な色の筆記具が使用される場合、筆記具のペン先部の色が手書き領域の背景色と同じ色あるいは近い色であると、筆記の際にペン先部が見えにくくなるため、ユーザが違和感を覚える虞がある。
【０００６】
そこで、本発明は、色の異なる複数本の筆記具を色鉛筆のような感覚で使用することができ、装置の面白みを増加させることができる情報端末装置を提供することを第１の目的とする。さらに、本発明は、様々な色の筆記具が使用されても、ユーザが違和感なく筆記を行うことができる情報端末装置を提供することを第２の目的とする。
【課題を解決するための手段】
【０００７】
本発明の第１の態様に係る情報端末装置は、画像を表示する表示部と、前記表示部に対する筆記具による入力を受け付ける入力受付部と、画像を撮影する撮影部と、制御部と、を備える。ここで、前記制御部は、前記撮影部により撮影された画像に含まれる筆記具の所定部位の色を特定し、前記筆記具により前記表示部に対して入力が行われると、前記表示部における前記筆記具の軌跡の位置に前記所定部位の色に応じた色を表示させる。
【０００８】
たとえば、前記所定部位は、前記筆記具の先端部とされ得る。あるいは、前記所定部位は、前記筆記具のボディ部とされ得る。
【０００９】
上記の構成によれば、ユーザは、色の異なる複数本の筆記具を用いて、色鉛筆を使用する感覚で、情報端末装置に手書き入力を行うことができる。
【００１０】
本態様に係る情報端末装置において、前記制御部は、前記筆記具の先端部の色に応じた色を、前記表示部における、前記筆記具による入力が行われる入力領域の背景色に設定するような構成とされ得る。
【００１１】
上記の構成によれば、ユーザは、手書き入力の際に筆記具の先端部を認識しやくなるので、筆記具を用いて違和感なく手書き入力を行うことができる。
【００１２】
本発明の第２の態様に係る情報端末装置は、画像を表示する表示部と、前記表示部に対する筆記具による入力を受け付ける入力受付部と、画像を撮影する撮影部と、制御部と、を備える。ここで、前記制御部は、前記撮影部に撮影された画像に含まれる筆記具の先端部の色を特定し、前記筆記具の先端部の色に応じた色を、前記表示部における、前記筆記具による入力が行われる入力領域の背景色に設定する。
【００１３】
上記の構成によれば、ユーザは、手書き入力の際に筆記具の先端部を認識しやくなるので、筆記具を用いて違和感なく手書き入力を行うことができる。
【発明の効果】
【００１４】
以上のとおり、本発明によれば、色の異なる複数の筆記具を色鉛筆のような感覚で使用することができ、携帯端末装置の面白みを増加させることができる。さらに、本発明によれば、様々な色の筆記具が使用されても、ユーザが違和感なく筆記を行うことができる。
【００１５】
本発明の効果ないし意義は、以下に示す実施形態の説明により更に明らかとなろう。ただし、以下に示す実施形態は、あくまでも、本発明を実施化する際の一つの例示であって、本発明は、以下の実施形態に記載されたものに何ら制限されるものではない。
【図面の簡単な説明】
【００１６】
【図１】図１（ａ）は、実施形態に係る、情報端末装置の正面図であり、図１（ｂ）は、実施形態に係る、情報端末装置の断面を示す図である。
【図２】図２は、実施形態に係る、情報端末装置の構成を示すブロック図である。
【図３】図３は、実施形態に係る、色対応テーブルの構成を示す図である。
【図４】図４（ａ）および（ｂ）は、実施形態に係る、ユーザが、手書きアプリケーションを起動して、スタイラスペンでタッチパネルに手書き入力を行う様子を示す図である。
【図５】図５は、実施形態に係る、色設定処理の制御動作を示すフローチャートである。
【図６】図６は、実施形態に係る、手書き入力処理の制御動作を示すフローチャートである。
【図７】図７は、変更例に係る、色設定処理の制御動作を示すフローチャートである。
【発明を実施するための形態】
【００１７】
本実施形態は、情報端末装置の一種であるタブレット端末に本発明を適用したものである。本実施形態の情報端末装置は、教育用として利用されることが想定されている。なお、本発明は、タブレット端末に限らず、携帯電話機、携帯用ゲーム機、ノートパソコン等、他の種類の情報端末装置に適用されても良い。
【００１８】
図１（ａ）は、情報端末装置１の正面図であり、図１（ｂ）は、情報端末装置１の断面を示す図である。図１（ａ）、（ｂ）には、便宜上、互いに直交するＸＹＺ軸が示されている。Ｘ軸方向は、後述する入力受付面３１ａの短辺が延びる方向であり、Ｙ軸方向は、入力受付面３１ａの長辺が延びる方向であり、Ｚ軸方向は、入力受付面３１ａに垂直な方向である。
【００１９】
図１（ａ）、（ｂ）に示すように、情報端末装置１は、筐体１０と、複数本のスタイラスペン２０と、タッチパネル３０と、カメラ部４０と、を備える。筐体１０には、各スタイラスペン２０を収容するための複数の収容部１１が設けられている。各スタイラスペン２０は、手で持たれる丸棒状のボディ部２１と、先端部であり、タッチパネル３０に対してタッチされるペン先部２２とを含む。ペン先部２２には、スタイラスペン２０ごとに異なる色が着けられている。
【００２０】
タッチパネル３０は、カバー３１と、液晶表示部３２と、タッチパッド３３と、がＺ軸方向に重ねられた構成となっている。
【００２１】
カバー３１は、透明であり、筐体１０を覆っている。カバー３１の表側面（Ｚ軸正側の面）は、平坦な面である。液晶表示部３２、即ちタッチパッド３３に対する入力は、カバー３１の入力受付面３１ａを介して行われる。入力受付面３１ａは、カバー３１の表側面の中央部分に位置する矩形形状の面であり、タッチパッド３３における、入力を受付可能な領域に対応する。入力受付面３１ａは、縦横の長さが異なるように構成されている。
【００２２】
液晶表示部３２は、液晶パネルと、液晶パネルを照明するＬＥＤバックライトとを含み、各種の画像を表示する。なお、情報端末装置１には、液晶表示部３２以外の表示部、たとえば、有機ＥＬタイプの表示部が用いられてもよい。
【００２３】
タッチパッド３３は、透明であり、液晶表示部３２の表示面上に配され、入力受付面３１ａを介してユーザの指等やスタイラスペン２０による液晶表示部３２に対しる入力（以下、「タッチ入力」という）を受け付ける。タッチパッド３３は、静電容量式のタッチパッドである。タッチパッド３３は、タッチ入力が行われると、静電容量の変化に基づいてタッチ入力を検出し、タッチされた位置、即ちタッチ入力の位置を示す座標信号と、タッチされた領域の面積、即ちタッチ面積を示す面積信号とを出力する。座標信号と面積信号は、後述する制御部５０に対して、ハードウェア割り込みにより送信される。たとえば、タッチされた領域の面積重心がタッチ入力の位置とされる。なお、タッチパッド３３が、複数のタッチを同時に検出できる、いわゆるマルチタッチに対応したタッチパッドである場合、タッチパッド３３は、上記のような座標信号および面積信号を、タッチの数だけ出力する。
【００２４】
カメラ部４０は、筐体１０におけるタッチパネル３０の周縁位置に配置されており、タッチパネル３０の前方の被写体を撮影し、撮影した画像の画像データを出力する。
【００２５】
図２は、情報端末装置１の構成を示すブロック図である。
【００２６】
情報端末装置１は、図１（ａ）、（ｂ）に示した液晶表示部３２、タッチパッド３３、スタイラスペン２０、カメラ部４０に加え、制御部５０および記憶部６０を備える。制御部５０および記憶部６０は、図１（ａ）に示す筐体１０内に収容されている。
【００２７】
制御部５０は、ＣＰＵ、タイマー等を含み、記憶部６０は、ＲＯＭ、ＲＡＭ、フラッシュメモリ等を含む。記憶部６０は、後述する手書きアプリケーションの他、各種のアプリケーションのプログラムを記憶している。また、記憶部６０は、色対応テーブル６１を記憶している。
【００２８】
制御部５０は、情報端末装置１の各部から信号を受信し、記憶部６０に記憶されたプログラムに従って、情報端末装置１の各部を制御する。
【００２９】
図３は、色対応テーブル６１の構成を示す図である。色対応テーブル６１には、スタイラスペン２０のペン先部２２の色（以下、「ペン先色」という）に対応付けて、ペン先部２２の軌跡の色（以下、「軌跡色」という）と、スタイラスペン２０による手書きの入力が行われる手書き入力領域の背景の色（以下「背景色」という）とが記憶されている。色対応テーブル６１では、たとえば、ペン先色と同じ色が軌跡色に設定され、ペン先色に対してコントラスト（色の差、明度の差）の大きな色が背景色に設定される。なお、手書き入力領域は、手書きアプリケーションの実行画面である手書き入力画面に含まれる。
【００３０】
さて、本実施形態では、ユーザは、手書きアプリケーションを利用することにより、ペン先部２２の色の異なる複数本のスタイラスペン２０を用いて、色鉛筆を使用する感覚で、情報端末装置１に手書き入力を行うことができる。
【００３１】
図４（ａ）および（ｂ）は、ユーザが、手書きアプリケーションを起動して、スタイラスペン２０でタッチパネル３０に手書き入力を行う様子を示す図である。図４（ａ）は、ペン先色が黒色のスタイラスペン２０を使用したときの様子を示し、図４（ｂ）は、ペン先色が白色のスタイラスペン２０を使用したときの様子を示す。
【００３２】
手書きアプリケーションが起動されるとタッチパネル３０（液晶表示部３２）に手書き入力画面Ｓが表示される。手書き入力画面Ｓは、手書き入力領域Ｓ１を含む。ユーザは、手書き入力領域Ｓ１内にスタイラスペン２０で手書き入力を行う。たとえば、図４（ａ）のように、ユーザが、ペン先色が黒色のスタイラスペン２０を持ち、そのスタイラスペン２０をタッチパネル３０に近づけると、手書き入力領域Ｓ１の背景色が、黒色に対してコントラストが大きい白色となる。その後、ユーザが、スタイラスペン２０のペン先部２２を手書き入力領域Ｓ１内でタッチさせたまま文字や絵の形に移動させると、ペン先部２２の軌跡の位置にペン先色と同じ黒色が表示される。
【００３３】
その後、図４（ｂ）のように、ユーザが、スタイラスペン２０を、ペン先色が黒色のものから白色のものに取り換え、そのスタイラスペン２０をタッチパネル３０に近づけると、手書き入力領域Ｓ１の背景色が、白色に対してコントラストが大きな黒色となる。その後、ユーザが、スタイラスペン２０のペン先部２２を手書き入力領域Ｓ１内でタッチさせたまま文字や絵の形に移動させると、ペン先部２２の軌跡の位置にペン先色と同じ白色が表示される。
【００３４】
図５は、色設定処理の制御動作を示すフローチャートであり、図６は、手書き入力処理の制御動作を示すフローチャートである。手書きアプリケーションが起動されると、制御部５０によって、色設定処理および手書き入力処理が並行して実行される。
【００３５】
まず、色設定処理について、図５を参照して説明する。
【００３６】
手書きアプリケーションの起動により、色設定処理が開始されると、制御部５０は、カメラ部４０を起動し（Ｓ１０１）、カメラ部４０から撮影画像（画像データ）を取得する（Ｓ１０２）。制御部５０には、画像解析エンジンが搭載されており、制御部５０は、画像解析エンジンを用いて、取得した撮影画像を解析する（Ｓ１０３）。制御部５０は、撮影画像の解析に基づいて、撮影画像中にスタイラスペン２０の画像が含まれているか否かを判別する（Ｓ１０４）。スタイラスペン２０が含まれていれば（Ｓ１０４：ＹＥＳ）、制御部５０は、スタイラスペン２０のペン先色を特定する（Ｓ１０５）。特定された色が、現在設定されている色（最初の場合はデフォルトの色）と異なる場合、即ち、色の変更がある場合（Ｓ１０６：ＹＥＳ）、制御部５０は、特定された色に対応付けられた軌跡色と背景色とを色対応テーブル６１から読み出す（Ｓ１０７）。そして、制御部５０は、読み出した軌跡色と背景色を新たな設定値に反映させる（Ｓ１０８）。
【００３７】
なお、特定した色が色対応テーブル６１にない場合は、特定した色に近い色がペン先色とみなされ、その色に対応付けられた軌跡色および背景色が、色対応テーブル６１から読み出される。特定した色が色対応テーブル６１にない場合、軌跡色については、類似するペン先色に対応付けられた軌跡色を色対応テーブル６１から読み出すのではなく、特定した色と同じ色を軌跡色に設定するようにしてもよい。
【００３８】
その後、制御部５０は、手書きアプリケーションの終了操作がなされたか否かを判定する（Ｓ１０９）。さらに、制御部５０は、Ｓ１０４でスタイラスペン２０が含まれていないと判定した場合（Ｓ１０４：ＮＯ）、および、Ｓ１０６で色の変更がないと判定した場合も（Ｓ１０６：ＮＯ）、終了操作の有無を判定する。
【００３９】
終了操作がなされていないと判定すると（Ｓ１０９：ＮＯ）、制御部５０は、Ｓ１０２の処理に戻って、再び撮影画像を取得する。このように、手書きアプリケーションの終了操作がなされるまで、制御部５０は、Ｓ１０２からＳ１０８の処理を繰り返す。終了操作がなされると（Ｓ１０９：ＹＥＳ）、制御部５０は、カメラ部４０を停止させる（Ｓ１１０）。これにより、色設定処理が終了する。
【００４０】
次に、手書き入力処理について、図６を参照して説明する。
【００４１】
手書きアプリケーションの起動により、色設定処理と並行して手書き入力処理が開始されると、制御部５０は、液晶表示部３２に手書き入力画面Ｓを表示させ（Ｓ２１１）、手書き入力領域Ｓ１にデフォルトの背景色を着ける（Ｓ２１２）。次に、制御部５０は、背景色の設定が変更されたか否かを判定し（Ｓ２１３）、変更された場合（Ｓ２１３：ＹＥＳ）、手書き入力領域Ｓ１に新たな背景色を着ける（Ｓ２１４）。さらに、制御部５０は、手書き入力領域Ｓ１にスタイラスペン２０によるタッチ入力があったか否かを判定し（Ｓ２１５）、タッチ入力があると（Ｓ２１５：ＹＥＳ）、設定されている軌跡色でスタイラスペン２０の軌跡位置に描線を行う（Ｓ２１６）。
【００４２】
制御部５０は、手書きアプリケーションの終了操作がなされるまで、Ｓ２１３からＳ２１６の処理を繰り返す。終了操作がなされると（Ｓ２１７：ＹＥＳ）、制御部５０は、手書き入力画面Ｓを閉じる（Ｓ２１８）。これにより、手書き入力処理が終了する。
【００４３】
＜実施形態の効果＞
以上、本実施形態によれば、以下の効果が奏される。
【００４４】
使用されるスタイラスペン２０のペン先色を特定し、特定したペン先色と同じ色（類似の色）の軌跡色で手書き入力領域Ｓ１に描画を行うようにしたので、ユーザは、ペン先部２２の色の異なる複数本のスタイラスペン２０を用いて、色鉛筆を使用する感覚で、情報端末装置１に手書き入力を行うことができる。
【００４５】
特に、スタイラスペン２０の全体部位のうち、ペン先部２２の色に軌跡色を合わせるようにしたので、ユーザに、一層、色鉛筆の使用に近い感覚を覚えさせることができる。
【００４６】
また、特定したペン先色に対してコントラストが大きな色の背景色を手書き入力領域Ｓ１に着けるようにしたので、ユーザは、手書き入力の際にペン先部２２を認識しやすくなり、スタイラスペン２０を用いて違和感なく手書き入力を行うことができる。
【００４７】
以上、本発明の実施形態について説明したが、本発明は、上記実施形態によって何ら制限されるものではなく、また、本発明の実施形態も、上記以外に種々の変更が可能である。
【００４８】
たとえば、上記実施形態では、ペン先部２２の色が異なる複数本のスタイラスペン２０を用い、ペン先部２２の色を特定して、特定された色に応じて軌跡色および背景色を設定するようにした。しかしながら、これに限られず、たとえば、ボディ部２１の色（以下、「ボディ色」という）が異なる複数本のスタイラスペン２０が用いられてもよい。この場合、記憶部６０に、ボディ色に対応付けられて軌跡色と背景色とが記憶された色対応テーブル６１が記憶される。そして、図５の色設定処理では、Ｓ１０５でボディ色が特定される。
【００４９】
また、ペン先色に応じて軌跡色および背景色を定めるのか、ボディ色に応じて軌跡色および背景色を定めるのかを、ユーザの設定操作により設定できるようにしてもよい。この場合、ペン先色に対応する色対応テーブルと、ボディ色に対応する色対応テーブルとが記憶部６０に記憶される。そして、図５のフローチャートに示す色設定処理に替えて、図７に示す色設定処理が、制御部５０により実行される。
【００５０】
図７の色設定処理では、図５の色設定処理からＳ１１１およびＳ１１２の処理が付加されている。即ち、制御部５０は、取得した撮影画像中にスタイラスペン２０が含まれている場合（Ｓ１０４：ＹＥＳ）、ペン先部２２かボディ部２１の何れが、色を特定する対象としてユーザに設定されたかを判定する（Ｓ１１１）。ペン先部２２が特定対象として設定されていれば（Ｓ１１１：ペン先部）、制御部５０は、撮影画像に基づいてペン先色を特定する。この場合、手書き入力領域Ｓ１の背景色およびスタイラスペン２０でタッチ入力したときの軌跡色は、ペン先色に応じた色とされる。一方、ボディ部２１が特定対象として設定されていれば（Ｓ１１１：ボディ部）、制御部５０は、撮影画像に基づいてボディ色を特定する。この場合、手書き入力領域Ｓ１の背景色およびスタイラスペン２０でタッチ入力したときの軌跡色は、ボディ色に応じた色とされる。即ち、背景色はボディ色とコントラストの大きな色とされ、軌跡色はボディ色と同じ色とされる。
【００５１】
さらに、上記実施形態では、スタイラスペン２０（タッチペン）が用いられたが、スタイラスペン２０に替えて、デジタイザペンが用いられてもよい。この場合、筐体１０内では、液晶表示部３２の下にデジタイザペンによるタッチ入力を検出するためのデジタイザセンサが配置されることとなる。
【００５２】
さらに、上記実施形態では、スタイラスペン２０の所定部位（ペン先部２２、ボディ部２１）に応じて軌跡色と背景色の双方が設定されたが、何れか一方のみが設定されてもよい。
【００５３】
さらに、上記実施形態では、背景色として、スタイラスペン２０のペン先部２２の色に対してコントラストの大きな色が選ばれたが、背景色に対してペン先部２２が認識されやすくなればよく、たとえば、ペン先部２２の色の補色となる色が背景色に選ばれてもよい。
【００５４】
さらに、上記実施形態では、色対応テーブル６１が設けられたが、かならずしも色対応テーブル６１が用いられなくてよい。この場合、たとえば、スタイラスペン２０のペン先部２２の色と同じ色を軌跡色に設定することができる。また、ペン先部２２の色の明度（輝度）が所定の閾値以下の場合に背景色を白色に設定し、所定の閾値より大きい場合に背景色を黒色に設定することができる。
【００５５】
さらに、上記実施形態では、手書き入力画面Ｓの一部の領域が、手書き入力領域Ｓ１とされたが、手書き入力画面Ｓ全体が、手書き入力領域Ｓ１とされてもよい。
【００５６】
さらに、上記実施形態では、情報端末装置１に複数本のスタイラスペン２０が装備されていたが、販売当初、携帯端末装置に１本のスタイラスペン２０が付属され、ユーザが、市販のスタイラスペン２０を買い足すことにより、複数本のスタイラスペン２０が揃えられるようにしてもよい。あるいは、販売当初、情報端末装置１にスタイラスペン２０が付属されていなくてもよい。
【００５７】
この他、本発明の実施形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。
【符号の説明】
【００５８】
１  情報端末装置
２０  スタイラスペン（筆記具）
２１  ボディ部
２２  ペン先部（先端部）
３２  液晶表示部（表示部）
３３  タッチパッド（入力受付部）
４０  カメラ部（撮影部）
５０  制御部
Ｓ１  手書き入力領域（入力領域）
【図１】
2017091336.tif 000003
【図２】
2017091336.tif 000004
【図３】
2017091336.tif 000005
【図４】
2017091336.tif 000006
【図５】
2017091336.tif 000007
【図６】
2017091336.tif 000008
【図７】
2017091336.tif 000009