(57)【要約】【課題】操作面に操作用の画像が表示された状態で、外部機器の遠隔操作も可能とする携帯装置を提供する。【解決手段】操作面と、前記操作面に接触した操作物の接触が所定時間以内に開放されたか否かを判定する判定部と、前記判定部により前記所定時間以内に接触が開放されたと判定されると、前記操作物により接触された位置に対応する前記操作面に表示された画像が操作されたとして、対応する制御を行う制御部と、前記判定部により前記所定時間以内に接触が開放されなかったと判定されると、前記操作面に接触している前記操作物の移動動作を認識する認識部と、前記認識部による認識結果に応じたコマンドを外部機器へ送信する送信部と、を備える携帯装置としている。【選択図】図２
2015225538.tif 000002
【特許請求の範囲】
【請求項１】
操作面と、
前記操作面に接触した操作物の接触が所定時間以内に開放されたか否かを判定する判定部と、
前記判定部により前記所定時間以内に接触が開放されたと判定されると、前記操作物により接触された位置に対応する前記操作面に表示された画像が操作されたとして、対応する制御を行う制御部と、
前記判定部により前記所定時間以内に接触が開放されなかったと判定されると、前記操作面に接触している前記操作物の移動動作を認識する認識部と、
前記認識部による認識結果に応じたコマンドを外部機器へ送信する送信部と、を備える携帯装置。
【請求項２】
前記認識部が前記操作物の一の移動動作を認識後、第２の所定時間以内に前記操作物の前記操作面への接触が無いと、前記送信部は前記一の移動動作の認識結果に対応する前記コマンドを送信し、
前記第２の所定時間以内に前記操作物の前記操作面への接触があると、前記認識部は前記操作物の他の移動動作の認識を試みることを特徴とする請求項１に記載の携帯装置。
【請求項３】
前記認識部による認識結果を前記操作面に表示させる表示制御部と、を備えることを特徴とする請求項１又は請求項２に記載の携帯装置。
【請求項４】
前記表示制御部により前記操作面に前記認識結果が表示されたときの操作に応じて前記送信部が前記コマンドを送信するか否かが切替えられることを特徴とする請求項３に記載の携帯装置。
【請求項５】
前記操作面に表示された前記画像は、放送番組に連動して通信によって得られた情報に基づき表示されたコンテンツ画面に含まれ、前記外部機器は、放送受信装置であることを特徴とする請求項１〜請求項４のいずれか１項に記載の携帯装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯装置に関する。
【背景技術】
【０００２】
昨今、日本国内においてはいわゆるハイブリッドキャスト（Hybridcast）（登録商標）と呼ばれる放送と通信を連携させたサービスが開始されており、当該サービスに対応したテレビ装置等も開発されている。
【０００３】
また、ハイブリッドキャストにおいては、テレビ装置とスマートフォン等の携帯端末とを連携させた端末連携サービスも登場している。これにより、ユーザはテレビ放送と連動したコンテンツを携帯端末において利用することが可能となっている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−１８１６４４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記端末連携サービスにより携帯端末に表示されたコンテンツ画面における例えばアイコン等の画像をタッチパネル等により操作しているときに、例えばテレビ装置の選局チャンネルや音量を変更したい場合、別途リモコン装置で操作する必要があった。
【０００６】
なお、特許文献１には、複数のタッチセンサーが十字状に配列され、タッチセンサーを縦方向又は横方向になぞると、例えばテレビ装置においてメニューの縦方向又は横方向スクロールを操作できるリモコン装置が開示されているが、上記携帯端末における問題点を解決するものではない。
【０００７】
上記状況に鑑み、本発明は、操作面に操作用の画像が表示された状態で、外部機器の遠隔操作も可能とする携帯装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために本発明の携帯装置は、
操作面と、
前記操作面に接触した操作物の接触が所定時間以内に開放されたか否かを判定する判定部と、
前記判定部により前記所定時間以内に接触が開放されたと判定されると、前記操作物により接触された位置に対応する前記操作面に表示された画像が操作されたとして、対応する制御を行う制御部と、
前記判定部により前記所定時間以内に接触が開放されなかったと判定されると、前記操作面に接触している前記操作物の移動動作を認識する認識部と、
前記認識部による認識結果に応じたコマンドを外部機器へ送信する送信部と、を備える構成としている。
【０００９】
このような構成によれば、操作面に操作用の画像が表示された状態で、前記画像の位置をユーザが操作物によりタッチしてすぐに離せば、前記画像が操作されたとして対応する制御が行われる。また、上記状態で、操作面上で操作物によるなぞり動作を行えば、操作物の移動動作が認識され、認識結果に応じたコマンドが外部機器へ送信される。従って、外部機器を遠隔操作することが可能となる。
【００１０】
また、上記構成において、前記認識部が前記操作物の一の移動動作を認識後、第２の所定時間以内に前記操作物の前記操作面への接触が無いと、前記送信部は前記一の移動動作の認識結果に対応する前記コマンドを送信し、
前記第２の所定時間以内に前記操作物の前記操作面への接触があると、前記認識部は前記操作物の他の移動動作の認識を試みることとしてもよい。
【００１１】
このような構成によれば、ユーザは、一の移動動作のみによって外部機器の遠隔操作を行うことと、一の移動動作とその後に行われる他の移動動作によって外部機器を遠隔操作することを切替えることができる。これにより、例えば、１けたの数字のなぞり動作や、２けたの数字のなぞり動作によって外部機器を遠隔操作できる。
【００１２】
また、上記いずれかの構成において、前記認識部による認識結果を前記操作面に表示させる表示制御部と、を備えることとしてもよい。
【００１３】
このような構成によれば、ユーザは、操作面におけるなぞり動作の認識結果を表示により確認できる。
【００１４】
また、上記構成において、前記表示制御部により前記操作面に前記認識結果が表示されたときの操作に応じて前記送信部が前記コマンドを送信するか否かが切替えられることとしてもよい。
【００１５】
このような構成によれば、ユーザは、なぞり動作の認識結果が所望するものではなかった場合に、外部機器の遠隔操作をやめることが可能となる。
【００１６】
また、上記いずれかの構成において、前記操作面に表示された前記画像は、放送番組に連動して通信によって得られた情報に基づき表示されたコンテンツ画面に含まれ、前記外部機器は、放送受信装置であることとしてもよい。
【００１７】
このような構成によれば、放送番組に関連したコンテンツ画面が操作面に表示された状態で、操作用の画像を選択してコンテンツを楽しむこともできるし、操作面においてなぞり動作を行えば、放送受信装置を遠隔操作することもできる。
【発明の効果】
【００１８】
本発明の携帯装置によると、操作面に操作用の画像が表示された状態で、外部機器の遠隔操作も可能とする。
【図面の簡単な説明】
【００１９】
【図１】本発明の第１実施形態に係るスマートフォンとテレビ装置から成るシステムの概略外観図である。
【図２】本発明の第１実施形態に係るスマートフォンのブロック構成図である。
【図３Ａ】本発明の第１実施形態に係るスマートフォンにおける操作制御に関するフローチャートである。
【図３Ｂ】本発明の第１実施形態に係るスマートフォンにおける操作制御に関するフローチャートである。
【図４】本発明の第１実施形態に係るコンテンツ画面における画像選択の様子の一例を示す図である。
【図５】本発明の第１実施形態に係るコンテンツ画面におけるなぞり動作の様子の一例を示す図である。
【図６】本発明の第３実施形態に係るなぞり動作の認識結果表示の一例を示す図である。
【発明を実施するための形態】
【００２０】
＜第１実施形態＞
以下に本発明の一実施形態について図面を参照して説明する。ここでは、ハイブリッドキャストに対応したスマートフォン（携帯装置の一例）とテレビ装置（放送受信装置の一例）から成るシステムを一例として説明する。
【００２１】
本発明の第１実施形態に係るスマートフォンとテレビ装置から成るシステムの概略外観を図１に示す。図１に示す利用者が携帯可能なスマートフォン１０は、外観で平板状の筐体を有し、当該筐体の前面側にタッチパネル１０３及び液晶パネル１０４が一体となった表示入力部を備える。タッチパネル１０３の表面が操作面となる。
【００２２】
テレビ装置２０は、デジタル放送を受信可能であり、受信した放送番組を表示画面２０１に表示させる。また、テレビ装置２０は、ハイブリッドキャスト機能によって、放送番組に関連したコンテンツ情報をインターネット経由で取得し、例えばWi-Fiの無線通信によってスマートフォン１０へコンテンツ情報を送信する。スマートフォン１０は、テレビ装置２０より取得したコンテンツ情報に基づきコンテンツを実行し、タッチパネル１０３を通じてコンテンツの画像が表示される。これにより、ユーザはテレビ装置２０に表示された放送番組に連動したコンテンツを楽しむことができる。
【００２３】
スマートフォン１０のブロック構成を図２に示す。図２に示すように、スマートフォン１０は、アンテナ１０１、第１無線通信部１０２、タッチパネル１０３、液晶パネル１０４、バックライト１０５、カメラ部１０６、操作部１０７、ＧＰＳ受信部１０８、記憶部１０９、スピーカ１１０、マイク１１１、第２無線通信部１１２、電源部１１３、及び制御部１１４を備えている。
【００２４】
第１無線通信部１０２は、移動通信網における基地局に対し無線通信を行う。この無線通信を用いて、音声データ、映像データ、電子メールデータ等の送受信や、Ｗｅｂデータやストリーミングデータ等の受信を行う。
【００２５】
液晶パネル１０４は制御部１１４によって駆動され、表示させる映像に応じて各画素に対応する液晶が駆動されることで光の透過率が調整される。バックライト１０５は、液晶パネル１０４を背後から照明するものであり、例えばＬＥＤと導光板を用いたエッジ型などが採用される。
【００２６】
タッチパネル１０３は、液晶パネル１０４の表示画面上に表示される映像を視認可能に構成されて液晶パネル１０４上に載置され、ユーザの指などの操作物のタッチを検出する。タッチパネル１０３から出力された検出信号に基づき、制御部１１４はタッチパネル１０３上の操作位置を検出する。
【００２７】
カメラ部１０６は、ＣＭＯＳイメージセンサーなどの撮像素子を用いて電子撮像するものであり、撮像された画像を例えばＪＰＥＧ形式で圧縮し、圧縮データを記憶部１０９に記憶させることができる。
【００２８】
操作部１０７は、ユーザからの入力を受け付けるハードウェアキーであり、例えば図１に示すように表示入力部（１０３、１０４）の下側に設けられる。
【００２９】
ＧＰＳ受信部１０８は、ＧＰＳ衛星から電波を受信し、位置情報を取得して制御部１１４に出力するものである。
【００３０】
記憶部１０９は、制御部１１４のための制御プログラムや制御データ、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータや、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータなどを一時的に記憶するものである。なお、記憶部１０９は、例えばフラッシュメモリ、ＲＡＭ、ＲＯＭなどにより構成される。
【００３１】
マイク１１１は、ユーザが発した音声を取り込み、取り込まれた音声は制御部１１４により所定の処理を行われ、第１無線通信部１０２により基地局へ送信される。また、第１無線通信部１０２により受信された音声は、制御部１１４により所定の処理を行われてスピーカ１１０から出力される。これにより、ユーザは通話を行うことができる。なお、スピーカ１１０は、通話の音声に限らず、例えば第１無線通信部１０２により受信されたストリーミングデータに基づく音声など各種音声を出力できる。
【００３２】
第２無線通信部１１２は、例えばWi-Fiなどによる無線通信を外部機器であるテレビ装置２０と行うものである。
【００３３】
電源部１１３は、スマートフォン１０の各部に不図示であるバッテリに蓄電された電力を供給する回路である。
【００３４】
制御部１１４は、マイクロプロセッサを備え、記憶部１０９に記憶された制御プログラムや制御データに従って動作し、スマートフォン１０の各部を統括制御するものである。
【００３５】
次に、ハイブリッドキャスト機能によりコンテンツ画面が表示されたスマートフォン１０においてコンテンツ操作とテレビ装置２０の遠隔操作を両立することができる操作制御について図３Ａ及び図３Ｂに示すフローチャートを用いて説明する。
【００３６】
ハイブリッドキャスト機能により第２無線通信部１１２がテレビ装置２０より受信したコンテンツ情報に基づき制御部１１４が液晶パネル１０４にコンテンツ画面を表示させている状態で、タッチパネル１０３に操作物（指など）が接触すると図３Ａに示す処理が開始される。
【００３７】
まず、ステップＳ１で、制御部１１４は、タッチパネル１０３から操作物が離れたか否かを判定し、もし離れていなければ（ステップＳ１のＮ）、ステップＳ２に進み、第１所定時間が経過したか否かを判定する。ここで、第１所定時間は、ユーザがコンテンツ画面をタッチにより操作する際のタッチパネル１０３への操作物の接触時間を考慮して設定される。第１所定時間が経過していなければ（ステップＳ２のＮ）、ステップＳ１へ戻る。
【００３８】
第１所定時間が経過する前に操作物がタッチパネル１０３から離れたと判定すれば（ステップＳ１のＹ）、ステップＳ９へ進む。ステップＳ９では、タッチパネル１０３の操作面に表示されたコンテンツ画面が操作されたものと判断し、制御部１１４は、操作物の接触位置に表示された画像に対応した処理を行う。
【００３９】
例えば、図４に示すようにタッチパネル１０３の操作面にコンテンツ画面としてアイコンＰがマトリクス状に配列されて表示された状態で、或るアイコンＰを操作物Ｓ（図４では指）によりタッチして即座に離した場合、ステップＳ９において、タッチされたアイコンＰに対応する動作が行われる。例えば、アイコンＰが放送番組の登場人物を示すものであって、その登場人物に関するテキスト情報が表示される等である。
【００４０】
一方、第１所定時間が経過しても操作物はタッチパネル１０３から離れていない場合（ステップＳ２のＹ）、タッチパネル１０３をなぞる動作が行われているとして、ステップＳ３に進む。ステップＳ３で、制御部１１４は、操作物がタッチパネル１０３から離れたか否かを判定し、離れていない間（ステップＳ３のＮ）、操作物による接触位置を監視する。
【００４１】
そして、操作物が離れたと判定されると（ステップＳ３のＹ）、ステップＳ４に進み、制御部１１４は、上記で監視した操作物による接触位置の軌跡に基づいて記号（数字など）の認識を試みる。もし、記号の認識が可能であった場合（ステップＳ４のＹ）、ステップＳ５に進み、制御部１１４は、次の記号を操作物により入力される可能性があるかを判定する。
【００４２】
入力される可能性がある場合とは、例えば、今回認識された記号が数字の「１」等であり、二けた目（十進数の１の位の数字）を入力される可能性がある場合や、今回認識された記号が「○」であり、もう一度「○」が入力される可能性がある場合である。一方、入力される可能性が無い場合とは、例えば、今回認識された記号が数字の「９」等であり、二けた目の入力が想定されていない場合や、二けた目まで認識されており、三けた目の入力は想定されていない場合や、今回認識された記号が「×」であり、これ以上記号が入力されることは想定されていない場合である。
【００４３】
ステップＳ５において、次の記号を入力される可能性がある場合（ステップＳ５のＹ）、ステップＳ６に進み、制御部１１４は、操作物はタッチパネル１０３に接触しているか否かを判定する。もし接触していない場合は（ステップＳ６のＮ）、ステップＳ７に進み、第２所定時間が経過したか否かを判定する。もし第２所定時間が経過していない場合は（ステップＳ７のＮ）、ステップＳ６に戻る。第２の所定時間が経過する前に操作物が接触すれば（ステップＳ６のＹ）、ステップＳ３に戻る。
【００４４】
また、ステップＳ５において、次の記号を入力される可能性が無い場合（ステップＳ５のＮ）、又は、操作物が接触しないまま第２所定時間が経過した場合（ステップＳ７のＹ）、ステップＳ８に進み、制御部１１４は、現状認識している記号に対応したコマンドを第２無線通信部１１２を介して外部機器であるテレビ装置２０へ送信する。これにより、外部機器を遠隔操作できる。
【００４５】
例えば、タッチパネル１０３の操作面において操作物により数字の「１」をなぞった場合、ステップＳ４で「１」が認識され、二けた目である「２」のなぞり動作が行われると（ステップＳ６のＹ）、ステップＳ４で二けた目の数字「２」が認識される（図５に一例を示す）。ここで、さらに次の記号を入力される可能性はないので（ステップＳ５のＮ）、今まで認識された「１」及び「２」に対応したチャンネル番号「１２」を選局するコマンドをテレビ装置２０に送信する。
【００４６】
一方、数字の「１」をなぞった後、操作面に操作物を接触させなければ（ステップＳ７のＹ）、そのままステップＳ８に進み、「１」に対応したチャンネル番号「１」を選局するコマンドをテレビ装置２０に送信する。
【００４７】
また、タッチパネル１０３の操作面において操作物により「○」をなぞった場合、ステップＳ４で「○」が認識され、操作面に操作物を接触させなければ（ステップＳ７のＹ）、そのままステップＳ８に進み、「○」に対応した音量を１段階上昇させるコマンドをテレビ装置２０に送信する。また、タッチパネル１０３の操作面において操作物により「○」を２回なぞった場合は、２回のステップＳ４において「○」が認識され、ステップＳ８に進み、２つの「○」に対応した音量を２段階上昇させるコマンドをテレビ装置２０に送信する。
【００４８】
ステップＳ４で記号を認識することができなかった場合（ステップＳ４のＮ）、ステップＳ１０に進む。ステップＳ１０で、制御部１１４は、上記で監視された操作物の接触位置の軌跡が記号の一部であるかを判定する。例えば、数字の「４」や「×」といった記号は、一筆書きができないため、操作物がタッチパネル１０３から離れたときの接触位置の軌跡が記号の一部である場合がある。もし、ステップＳ１０で記号の一部ではない場合は（ステップＳ１０のＮ）、操作物による誤入力があったとして、そのまま処理は終了となる（エンド）。
【００４９】
一方、ステップＳ１０で接触位置の軌跡が記号の一部であると判定された場合（ステップＳ１０のＹ）、ステップＳ１１（図３Ｂ）に進み、制御部１１４は、操作物はタッチパネル１０３に接触しているかを判定する。接触していなければ（ステップＳ１１のＮ）、ステップＳ１２に進み、制御部１１４は、第３所定時間が経過しているかを判定する。経過していなければ（ステップＳ１２のＮ）、ステップＳ１１に戻る。第３所定時間が経過する前に操作物がタッチパネル１０３に接触すれば（ステップＳ１１のＹ）、ステップＳ１３に進む。
【００５０】
ステップＳ１３で、制御部１１４は、操作物がタッチパネル１０３から離れたか否かを判定し、離れていない間（ステップＳ１３のＮ）、操作物による接触位置を監視する。
【００５１】
そして、操作物が離れたと判定されると（ステップＳ１３のＹ）、ステップＳ１４に進み、制御部１１４は、上記で監視した操作物による接触位置の軌跡に基づいて記号の認識を試みる（ステップＳ３で操作物がタッチパネル１０３から離れたときの軌跡も含めて認識する）。もし、記号の認識が可能であった場合（ステップＳ１４のＹ）、ステップＳ５（図３Ａ）に進み、次の記号を入力される可能性があるかが判定される。
【００５２】
一方、ステップＳ１４で記号を認識することができなかった場合は（ステップＳ１４のＮ）、誤入力があったとして、そのまま処理が終了する（エンド）。また、操作物のタッチパネル１０３への接触がないまま第３所定時間が経過した場合も（ステップＳ１２のＹ）、誤入力として、そのまま処理は終了となる（エンド）。
【００５３】
このような処理により、一筆書きできない記号を操作物によりなぞった場合でも、対応するコマンドをテレビ装置２０に送信できる（ステップＳ８）。例えば、「×」という記号をなぞった場合、電源をオフにするコマンドを送信することができる。
【００５４】
以上のように本実施形態によれば、ハイブリッドキャスト機能によりタッチパネル１０３の操作面にコンテンツ画面が表示された状態で、画像を選択操作することもできるし、なぞり動作によって外部機器であるテレビ装置２０を遠隔操作することもできる。
【００５５】
なお、コマンドについては、第２無線通信部１１２を用いずに、例えばスマートフォン１０に別途設けられた赤外線通信部によってテレビ装置２０に送信してもよい。
【００５６】
＜第２実施形態＞
次に、本発明の第２実施形態について説明する。本実施形態では、スマートフォン１０において、制御部１１４により液晶パネル１０４（即ちタッチパネル１０３の操作面）にＯＳ（オペレーティングシステム）のホーム画面（例えばAndroid（登録商標）のホーム画面）が表示された状態で、操作物によりタッチパネル１０３が接触されると図３Ａに示した処理が開始される。
【００５７】
これにより、ＯＳのホーム画面に表示された例えばアイコン等の画像が操作物によりタッチされて操作物が即座に離されると、図３ＡのステップＳ９に進んで、選択された画像に対応した処理を制御部１１４が行う。例えば、タッチされたアイコンに対応したアプリケーションを起動させる。
【００５８】
一方、操作面にホーム画面が表示された状態で操作物によりなぞる動作を行った場合は、認識された記号（ステップＳ４等）に応じたコマンドがテレビ装置２０に送信される。
【００５９】
このように本実施形態によれば、操作面にＯＳのホーム画面が表示された状態で画像を選択操作することもできるし、なぞり動作によって外部機器であるテレビ装置２０を遠隔操作することもできる。即ち、本発明は、先の第１実施形態のようなハイブリッドキャスト機能が必須ではない。
【００６０】
＜第３実施形態＞
次に、本発明の第３実施形態について説明する。本実施形態は、第１実施形態での図３Ａの処理における、ステップＳ８でのコマンド送信の前に、一度ユーザに確認を取るものである。
【００６１】
具体的には、ステップＳ８でのコマンド送信の前に、制御部１１４は、現状認識されている記号を液晶パネル１０４に表示させつつ、表示されている記号にてコマンド送信を決定してもよいかをユーザに確認する選択肢も液晶パネル１０４に表示させる。
【００６２】
例えば、図６に示す一例では、認識された記号である数字の「１２」がタッチパネル１０３の操作面に表示されつつ、ユーザへ確認するための選択肢Ｒ１、Ｒ２が表示されている。ここで、制御部１１４は、決定してもよいという選択肢Ｒ１が操作面でタッチされたと判定すれば、制御部１１４は対応するコマンドを送信し、もう一方の選択肢Ｒ２がタッチされたと判定すれば、コマンド送信は行わずに処理を終了する。
【００６３】
これにより、ユーザは、操作面をなぞった動作の認識結果を確認でき、自身が所望しない認識結果であれば、選択肢を選択することでコマンド送信をやめることができる。
【００６４】
なお、選択肢を設けず、認識結果が表示されてから所定時間以内に操作面がタッチされるとコマンド送信され、タッチされなければコマンド送信がされないようにしてもよい。
【００６５】
以上、本発明の実施形態について説明したが、本発明の趣旨の範囲内であれば、実施形態は種々の変形が可能である。
【符号の説明】
【００６６】
１０  スマートフォン
２０  テレビ装置
１０３  タッチパネル
１０４  液晶パネル
１０９  記憶部
１１２  第２無線通信部
１１４  制御部
Ｐ  アイコン
Ｓ  操作物
Ｒ１、Ｒ２  選択肢
【図１】
2015225538.tif 000003
【図２】
2015225538.tif 000004
【図３Ａ】
2015225538.tif 000005
【図３Ｂ】
2015225538.tif 000006
【図４】
2015225538.tif 000007
【図５】
2015225538.tif 000008
【図６】
2015225538.tif 000009