(57)【要約】【課題】表示している映像に余白を付加した映像を転送するモバイル装置の、位置入力の受け付けを正しく代行する「情報処理システム及び情報処理装置」を提供する。【解決手段】モバイル装置２００は車載装置１からの要求に応答して、４つの四角形のパターン３０１を四隅に配置した有効領域提示画像３００をディスプレイ２０２に表示する(ａ)。車載装置１は、モバイル装置２００から転送された転送映像４００（ｂ）に含まれる４つの四角形のパターン３０１を認識し、認識した４つの四角形のパターン３０１を内包する最小の四角形の領域を入力受付領域５００に設定する（ｃ）。以降、車載装置１は、モバイル装置２００から転送された転送映像４００を表示すると共に、転送映像４００上の位置入力が発生したならば、入力された位置の入力受付領域５００内の位置を示す座標をモバイル装置２００に通知する。【選択図】図３
2016051362.tif 000002
【特許請求の範囲】
【請求項１】
モバイル装置と、前記モバイル装置と接続可能な情報処理装置とを備えた情報処理システムであって、
前記情報処理装置は、
表示装置と、
接続された前記モバイル装置に有効領域提示画像要求を送信し、その後、前記モバイル装置から転送された映像である転送映像に含まれる所定の画像パターンを認識し、認識した画像パターンが示す前記転送映像中の四角形の領域を入力受付領域に設定する入力受付領域設定手段と、
接続された前記モバイル装置から転送された転送映像を前記表示装置に表示する表示手段と、
前記表示装置に表示している転送映像上の位置の入力を受け付け、入力を受け付けた位置の、前記入力受付領域内の位置を表す座標を入力受付座標として接続された前記モバイル装置に通知する入力位置通知手段とを有し、
前記モバイル装置は、
ディスプレイと、
接続している情報処理装置に、前記ディスプレイに表示している映像の周辺に余白を付加した映像を前記転送映像として転送する映像転送部と、
前記接続されている情報処理装置から受信した前記有効領域提示画像要求に応答して、前記所定の画像パターンを表す有効領域提示画像を前記ディスプレイに表示する有効領域提示画像出力部と、
前記接続されている情報処理装置から通知された入力受付座標を、前記ディスプレイに表示している映像内の位置を表す座標と見なして、当該入力受付座標が表す前記ディスプレイに表示している映像上の位置の位置入力を受け付ける位置入力受付部とを有し、
前記所定の画像パターンは、前記有効領域提示画像に前記余白を付加した前記転送映像中で当該有効領域提示画像の領域を示すパターンであることを特徴とする情報処理システム。
【請求項２】
請求項１記載の情報処理システムであって、
前記所定の画像パターンは、前記有効領域提示画像の４隅を示すマークを含む画像パターンであることを特徴とする情報処理システム。
【請求項３】
請求項１記載の情報処理システムであって、
前記所定の画像パターンは、前記有効領域提示画像の全体を前記転送映像の前記余白の色とは異なる色で表した画像パターンであることを特徴とする情報処理システム。
【請求項４】
請求項１、２または３記載の情報処理システムであって、
有効領域提示画像出力部は、前記所定の画像パターンとして用いる画像パターンを、複数の異なる画像パターンの間で時間的に切り替えることを特徴とする情報処理システム。
【請求項５】
請求項１、２、３または４記載の情報処理システムであって、
前記モバイル装置と前記情報処理装置とは、映像伝送用の通信規格である第１の通信規格で通信を行う第１の通信インタフェースと、当該第１の通信規格と異なる通信規格である第２の通信規格で通信を行う第２の通信インタフェースとで接続可能であり、
前記モバイル装置から前記情報処理装置への前記映像の転送は前記第１の通信インタフェースを用いて行われ、
前記情報処理装置から前記モバイル装置への前記有効領域提示画像要求の送信と、前記情報処理装置から前記モバイル装置への前記入力受付座標の通知は前記第２の通信インタフェースを用いて行われることを特徴とする情報処理システム。
【請求項６】
請求項５記載の情報処理システムであって、
前記入力受付領域設定手段は、前記有効領域提示画像要求を接続しているモバイル装置に送信した後に前記モバイル装置から転送された前記転送映像中の前記パターンを認識できなかった場合に、エラーメッセージを出力することを特徴とする情報処理システム。
【請求項７】
モバイル装置と接続可能な情報処理装置であって、
表示装置と、
接続された前記モバイル装置に有効領域提示画像要求を送信し、その後、前記モバイル装置から転送された映像である転送映像に含まれる所定の画像パターンを認識し、認識した画像パターンが示す前記転送映像中の四角形の領域を入力受付領域に設定する入力受付領域設定手段と、
接続された前記モバイル装置から転送された転送映像を前記表示装置に表示する表示手段と、
前記表示装置に表示している転送映像上の位置の入力を受け付け、入力を受け付けた位置の、前記入力受付領域内の位置を表す座標を入力受付座標として接続された前記モバイル装置に通知する入力位置通知手段とを有し、
前記所定の画像パターンは、前記転送映像に含まれる前記モバイル装置が自身のディスプレイに表示している映像の領域を当該転送映像中で示すパターンであることを特徴とする情報処理装置。
【請求項８】
情報処理装置と接続可能なモバイル装置であって、
ディスプレイと、
接続している情報処理装置に前記ディスプレイに表示している映像の周辺に余白を付加した映像を前記転送映像として転送する映像転送部と、
前記接続されている情報処理装置から受信した有効領域提示画像要求に応答して、前記所定の画像パターンを表す有効領域提示画像を前記ディスプレイに表示する有効領域提示画像出力部と、
前記接続されている情報処理装置から通知された入力受付座標を、前記ディスプレイに表示している映像内の位置を表す座標と見なして、当該入力受付座標が表す前記ディスプレイに表示している映像上の位置の位置入力を受け付ける位置入力受付部とを有し、
前記所定の画像パターンは、前記有効領域提示画像に前記余白を付加した前記転送映像中で当該有効領域提示画像の領域を示すパターンであることを特徴とするモバイル装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置において、当該情報処理装置に接続されたモバイル装置のユーザインタフェースを提供する技術に関するものである。
【背景技術】
【０００２】
情報処理装置において、当該情報処理装置に接続されたモバイル装置のユーザインタフェースを提供する技術としては、情報処理装置とモバイル装置とを、HDMI（High-Definition Multimedia Interface）（登録商標）とUSB（Universal Serial Bus）で二重に接続し、HDMIを用いてモバイル装置から情報処理装置に映像を転送して情報処理装置の表示装置に表示すると共に、情報処理装置からモバイル装置の動作をUSBを介して制御する技術が知られている（たとえば、特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３-１１９２６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
モバイル装置がモバイル装置のディスプレイに表示している映像を、情報処理装置に転送し、情報処理装置が転送された映像をそのまま表示装置に表示する場合、モバイル装置は、ディスプレイに表示している映像を、情報処理装置から通知された当該情報処理装置の表示装置に適合する画像サイズの映像に変換して情報処理装置に転送する必要がある。
【０００５】
また、モバイル装置によっては、このディスプレイに表示している映像の情報処理装置の表示装置に適合する画像サイズの映像への変換を、図５ａ１、２のようにモバイル装置のディスプレイに表示している映像７００の周辺に図５ｂ１、２のように帯状の余白４０１を付加した映像４００を、情報処理装置に転送する映像として生成することにより行う場合がある。
【０００６】
そして、モバイル装置がモバイル装置のディスプレイに表示している映像を、情報処理装置に転送し情報処理装置の表示装置に表示するシステムにおいて、以上のような帯状の余白４０１を付加した映像４００を転送するモバイル装置を用いる場合、図５ｃ１、ｃ２に示すように情報処理装置に表示される映像４００は、モバイル装置のディスプレイに表示される映像７００とは異った帯状の余白４０１部分を含むものとなる。
【０００７】
なお、図５ａ１、ｂ１、ｃ１は、モバイル装置が縦長の映像をディスプレイに表示する場合について、図５ａ２、ｂ２、ｃ２はモバイル装置が横長の映像をディスプレイに表示する場合について示している。
【０００８】
したがって、以上のような帯状の余白４０１を付加した映像を付加した映像４００を転送するモバイル装置のディスプレイに表示している映像７００上の位置入力の受け付けを、情報処理装置の表示装置に表示した映像４００上への位置入力の受け付けで代理する場合には、モバイル装置においてユーザが位置入力した映像７００上の位置を正しく認識できず、結果、ユーザの意図した操作を受け付けることができなくなってしまうという問題が生じる。
【０００９】
すなわち、たとえば、図５ｄ１に示すように情報処理装置の表示装置に表示されている映像４００中のボタン６００の操作を行うためにユーザが、映像４００中のボタン６００の表示領域内の位置の位置入力を行い、情報処理装置が位置入力を受け付けた座標（図５ｄ１では、横方向については、映像４００の横方向サイズに対して１５％の位置）をモバイル装置に通知した場合、モバイ装置において通知された座標をディスプレイに表示している映像７００上の位置に換算すると、図５ｄ２に示すように、換算した位置（図５ｄ２では、横方向については、映像７００の横方向サイズに対して１５％の位置）が映像７００中のボタン６００外の位置となってしまうことがあり、この場合、モバイル装置においてユーザの一入力をボタン６００の操作として認識できなくなってしまう。
【００１０】
そこで、本発明は、表示している映像に余白を付加した映像を転送するモバイル装置から転送された映像を表示装置に表示する情報処理装置において、モバイル装置のディスプレイに表示している映像上の位置入力の受け付けを正しく代行することを課題とする。
【課題を解決するための手段】
【００１１】
前記課題達成のために、本発明は、モバイル装置と、前記モバイル装置と接続可能な情報処理装置とを備えた情報処理システムを提供する。ここで、前記情報処理装置は、表示装置と、接続された前記モバイル装置に有効領域提示画像要求を送信し、その後、前記モバイル装置から転送された映像である転送映像に含まれる所定の画像パターンを認識し、認識した画像パターンが示す前記転送映像中の四角形の領域を入力受付領域に設定する入力受付領域設定手段と、接続された前記モバイル装置から転送された転送映像を前記表示装置に表示する表示手段と、前記表示装置に表示している転送映像上の位置の入力を受け付け、入力を受け付けた位置の、前記入力受付領域内の位置を表す座標を接続された前記モバイル装置に通知する入力位置通知手段とを含めて構成する。また、前記モバイル装置は、ディスプレイと、接続している情報処理装置に前記ディスプレイに表示している映像の周辺に余白を付加した映像を前記転送映像として転送する映像転送部と、前記接続されている情報処理装置から受信した前記有効領域提示画像要求に応答して、前記所定の画像パターンを表す有効領域提示画像を前記ディスプレイに表示する有効領域提示画像出力部と、前記接続されている情報処理装置から通知された入力受付座標を、前記ディスプレイに表示している映像内の位置を表す座標と見なして、当該入力受付座標が表す前記ディスプレイに表示している映像上の位置の位置入力を受け付ける位置入力受付部とを含めて構成する。そして、前記所定の画像パターンは、前記有効領域提示画像に前記余白を付加した前記転送映像中で当該有効領域提示画像の領域を示すパターンとする。
【００１２】
なお、このような情報処理システムにおいて、前記所定の画像パターンは、前記有効領域提示画像の４隅を示すマークを含む画像パターンであってもよいし、前記有効領域提示画像の全体を前記転送映像の前記余白の色とは異なる色で表した画像パターンであってもよい。
【００１３】
また、前記有効領域提示画像出力部は、前記所定の画像パターンとして用いる画像パターンを、複数の異なる画像パターンの間で時間的に切り替えるようにしてもよい。
また、以上の情報処理システムでは、前記モバイル装置と前記情報処理装置とを、映像伝送用の通信規格である第１の通信規格で通信を行う第１の通信インタフェースと、当該第１の通信規格と異なる通信規格である第２の通信規格で通信を行う第２の通信インタフェースとで接続可能なものとし、前記モバイル装置から前記情報処理装置への前記映像の転送を前記第１の通信インタフェースを用いて行い、前記情報処理装置から前記モバイル装置への前記有効領域提示画像要求の送信と、前記情報処理装置から前記モバイル装置への前記入力受付座標の通知は前記第２の通信インタフェースを用いて行うようにしてもよい。
【００１４】
また、この場合には、前記入力受付領域設定手段は、前記有効領域提示画像要求を接続しているモバイル装置に送信した後に前記モバイル装置から転送された前記転送映像中の前記パターンを認識できなかった場合に、エラーメッセージを出力するようにすることも好ましい。
【００１５】
以上のような情報処理システムによれば、情報処理装置において、モバイル装置から転送される転送映像中のモバイル装置がディスプレイに表示している映像部分を入力受付領域に設定し、前記表示装置に表示している転送映像上の位置の入力を受け付けた場合には、入力を受け付けた位置の、前記入力受付領域内の位置を表す座標を入力受付座標として前記モバイル装置に通知する。したがって、モバイル装置が、ディスプレイに表示している映像に余白を付加して転送映像として情報処理装置に転送するものであっても、情報処理装置は、表示装置している転送映像上で位置入力を受け付けた位置の、モバイル装置がディスプレイに表示している映像内の座標を、入力受付座標としてモバイル装置に通知することができるようになる。
【００１６】
よって、モバイル装置から転送された転送映像を表示装置に表示する情報処理装置において、モバイル装置のディスプレイに表示している映像上の位置入力の受け付けを、正しく代行することができる。
【発明の効果】
【００１７】
以上のように、本発明によれば、表示している映像に余白を付加した映像を転送するモバイル装置から転送された映像を表示装置に表示する情報処理装置において、モバイル装置のディスプレイに表示している映像上の位置入力の受け付けを正しく代行することができる。
【図面の簡単な説明】
【００１８】
【図１】本発明の実施形態に係る車載システムの構成を示すブロック図である。
【図２】本発明の実施形態に係る入力受付領域設定処理を示すフローチャートである。
【図３】本発明の実施形態に係る入力受付領域設定処理の処理例を示す図である。
【図４】本発明の実施形態に係る有効領域提示画像の他の例を示す図である。
【図５】従来の課題を示す図である。
【発明を実施するための形態】
【００１９】
以下、本発明の実施形態について説明する。
図１に、本実施形態に係る車載システムの構成を示す。
図示するように、車載システムは自動車に搭載された車載装置１と車載装置１に選択的に接続されるモバイル装置２００とより構成される。
車載装置１は、タッチパネルなどの入力装置１０１、表示装置１０２、マイクやスピーカなどを備えた音声入出力装置１０３、Bluetooth(登録商標)規格に従った無線通信インタフェースであるＢＴインタフェース１０４、HDMI（High-Definition Multimedia Interface）規格に従った有線通信インタフェースであるＨＤＭＩインタフェース１０５、記憶装置１０６、その他の周辺装置１０７、車載装置１のオペレーティングシステム１１０、オペレーティングシステム１１０によって管理されオペレーティングシステム１１０上で稼働する各種のアプリケーションを備えている。
【００２０】
ここで、このような車載装置１の周辺装置１０７は、ラジオ放送やテレビジョン放送の放送受信機やＧＰＳ受信機などである。
また、車載装置１は、アプリケーションとして、リモートコントロールアプリケーション１１１と、その他の各種アプリケーション１１２とを備えている。なお、その他のアプリケーションとしては、たとえば、放送受信機が受信した放送の音声入出力装置１０３と表示装置１０２への出力や、記憶装置１０６に記録されているオーディオコンテンツやビデオコンテンツの音声入出力装置１０３と表示装置１０２への再生出力などを行うメディアプレイヤアプリケーションや、カーナビゲーション機能を提供するカーナビゲーションアプリケーションなどを備える。
【００２１】
ただし、車載装置１は、ハードウエア的には、ＣＰＵやメモリなどを備えたコンピュータを用いて構成されるものであり、オペレーティングシステム１１０や、アプリケーションなどは、当該コンピュータが、所定のコンピュータプログラムを実行することにより実現されるものである。
【００２２】
さて、このような車載装置１の構成において、車載装置１のＢＴインタフェース１０４とＨＤＭＩインタフェース１０５には、モバイル装置２００を接続することができる。また、車載装置１のオペレーティングシステム１１０は、ＨＤＭＩインタフェース１０５を介してモバイル装置２００から転送された映像を表示装置１０２に表示する機能を備えている。
【００２３】
次にモバイル装置２００は、スマートフォンやタブレット装置などの、ユーザによって携帯される装置であり、図示するように、タッチパネルである操作部２０１、ディスプレイ２０２、マイクやスピーカなどを備えた音声入出力部２０３、Bluetooth(登録商標)規格に従った無線通信インタフェースであるＢＴインタフェース２０４、HDMI規格に従った有線通信インタフェースであるＨＤＭＩインタフェース２０５、記憶部２０６、移動電話網にアクセスするための移動通信装置２０７、その他の周辺デバイス２０８、モバイル装置２００のＯＳであるモバイルオペレーティングシステム２１０、モバイルオペレーティングシステム２１０によって管理されモバイルオペレーティングシステム２１０上で稼働するアプリケーションである各種のモバイルアプリケーションを備えている。
【００２４】
ここで、このような車載装置１の周辺デバイス２０８は、ＧＰＳ受信機や、ジャイロセンサなどである。
また、モバイル装置２００は、モバイルアプリケーションとして、移動通信装置２０７や音声入出力部２０３や操作部２０１を用いた移動電話機能を提供する移動電話アプリケーション２１１と、有効領域提示画像出力アプリケーション２１２と、その他のモバイルアプリケーション２１３を備えている。ここで、その他のモバイルアプリケーションとしては、記憶部２０６に記録されているオーディオコンテンツやビデオコンテンツの音声入出力部２０３とディスプレイ２０２への再生出力などを行うメディア再生アプリケーションや、ＧＰＳ受信機やジャイロセンサや記憶部２０６に記憶された地図データを用いてナビゲーション機能を提供するナビゲーションアプリケーションなどを備える。
【００２５】
そして、モバイル装置２００は、ＢＴインタフェース２０４とＨＤＭＩインタフェース２０５とを用いて、車載装置１と接続することができる。また、モバイル装置２００のモバイルオペレーティングシステム２１０は、ＨＤＭＩインタフェース２０５を介して、モバイルアプリケーションがディスプレイ２０２に表示している映像を、ＨＤＭＩインタフェース２０５に接続した車載装置１に転送する機能を備えている。
【００２６】
なお、モバイル装置２００は、ハードウエア的には、ＣＰＵやメモリなどを備えたコンピュータを用いて構成されるものあり、モバイルオペレーティングシステム２１０や、モバイルアプリケーションなどは、当該コンピュータが、所定のコンピュータプログラムを実行することにより実現されるものである。
【００２７】
さて、このような構成において、車載装置１の表示装置１０２に、モバイル装置２００のディスプレイ２０２に表示されている映像を表示する動作について説明する。
まず、車載装置１のリモートコントロールアプリケーション１１１は、ユーザからモバイル装置２００の映像の車載装置１の表示装置１０２への表示を指示されたならば、表示装置１０２の表示を、現在の表示内容の表示に固定、または、所定のメッセージの表示に固定し、図２に示す入力受付領域設定処理を行う。
【００２８】
図示するように、入力受付領域設定処理において、リモートコントロールアプリケーション１１１はＨＤＭＩインタフェース１０５とＢＴインタフェース１０４との双方にモバイル装置２００が接続されているかどうかをオペレーティングシステム１１０を介して調べ（ステップ２００）、接続されていなければ、モバイル装置２００が接続されていない旨を通知する所定のエラーメッセージを表示装置１０２に表示し（ステップ２１６）、入力受付領域設定処理を終了する。
【００２９】
一方、ＨＤＭＩインタフェース１０５とＢＴインタフェース１０４との双方にモバイル装置２００が接続されていれば（ステップ２００）、ＢＴインタフェース１０４を介してモバイル装置２００のモバイルオペレーティングシステム２１０に、モバイルオペレーティングシステム２１０にディスプレイ２０２に表示している映像のＨＤＭＩを介した車載装置１への転送開始を要求する（ステップ２０２）。
【００３０】
ここで、車載装置１への転送開始を要求されたモバイルオペレーティングシステム２１０は、ＨＤＭＩインタフェース２０５を介して車載装置１の表示装置１０２に適合する画像サイズを車載装置１から取得し、ディスプレイ２０２に表示している映像と同内容の、表示装置１０２に適合する画像サイズの映像を転送映像として生成し、ＨＤＭＩインタフェース２０５を介して車載装置１に転送する動作を開始する。なお、この時点で、車載装置１の表示装置１０２の表示は固定されているので、入力受付領域設定処理中に、車載装置１にモバイル装置２００から転送された転送映像は車載装置１の表示装置１０２には表示されない。
【００３１】
そして、次に、リモートコントロールアプリケーション１１１は、ＢＴインタフェース１０４を介してモバイル装置２００のモバイルオペレーティングシステム２１０に有効領域提示画像出力アプリケーション２１２の起動を要求する（ステップ２０４）。
【００３２】
ここで、モバイル装置２００のモバイルオペレーティングシステム２１０は、有効領域提示画像出力アプリケーション２１２の起動を要求されたならば、有効領域提示画像出力アプリケーション２１２を起動する。そして、起動された有効領域提示画像出力アプリケーション２１２は、有効領域提示画像のディスプレイ２０２への表示を開始する。
【００３３】
ここで、図３ａ１、ａ２に示すように、有効領域提示画像出力アプリケーション２１２がディスプレイ２０２に表示する有効領域提示画像３００は、４つの四角形のパターン３０１を有効領域提示画像３００の四隅に一つずつ、４つの四角形のパターン３０１を内包する最小の四角形の領域が有効領域提示画像３００の領域と一致するように配置した画像とする。なお、図３ａ１は、モバイル装置が縦長の映像をディスプレイに表示する場合について、図３ａ２はモバイル装置が横長の映像をディスプレイに表示する場合について示している。
【００３４】
さて、このようにしてディスプレイ表示された有効領域提示画像３００は、モバイルオペレーティングシステム２１０によって、転送映像４００としてＨＤＭＩインタフェース２０５を介して車載装置１に転送されるが、モバイル装置２００によっては、図３ｂ１、ｂ２に示すように、車載装置１に転送する転送映像４００として、有効領域提示画像３００の周辺に帯状の余白４０１を付加した内容の映像が、モバイルオペレーティングシステム２１０によって生成され、車載装置１に転送されることがある。そして、このような余白４０１をディスプレイ２０２に表示している映像に付加した内容の映像が転送映像４００として生成される場合、ディスプレイ２０２に有効領域提示画像３００が表示されているときには、有効領域提示画像３００の４つの四角形のパターン３０１が四隅ではなく余白４０１分、内側に配置された映像が転送映像４００として生成されることとなる。なお、図３ｂ１は、モバイル装置が縦長の映像をディスプレイに表示する場合について、図３ｂ２はモバイル装置が横長の映像をディスプレイに表示する場合について示している。
【００３５】
図２に戻り、車載装置１のリモートコントロールアプリケーション１１１は、有効領域提示画像出力アプリケーション２１２を起動したならば、オペレーティングシステム１１０を介してＨＤＭＩインタフェース１０５を介してモバイル装置２００から転送される転送映像４００に含まれる４つの四角形のパターン３０１の認識を開始する（ステップ２０６）。
【００３６】
そして、ステップ２０６で認識を開始してから、所定期間経過する前に（ステップ２０８）、４つの四角形のパターン３０１を認識できた場合には（ステップ２１０）、図３ｃ１、ｃ２に示すように、モバイル装置２００から転送される映像中の、認識した４つの四角形のパターン３０１の配置に応じて、認識した４つの四角形のパターン３０１を内包する最小の四角形の領域を入力受付領域５００に設定する（ステップ２１２）。なお、図３ｃ１は、モバイル装置が縦長の映像をディスプレイに表示する場合について、図３ｃ２はモバイル装置が横長の映像をディスプレイに表示する場合について示している。
【００３７】
この結果、図３ｃ１、ｃ２に示すように、転送映像４００の、モバイルオペレーティングシステム２１０によって付加された余白４０１を除く領域、すなわち、転送映像４００中の有効領域提示画像３００が占める領域が入力受付領域５００として設定される。
【００３８】
さて、以上のようにして、入力受付領域５００を設定したならば（ステップ２１２）、ＢＴインタフェース１０４を介してモバイル装置２００のモバイルオペレーティングシステム２１０に有効領域提示画像出力アプリケーション２１２の実行を終了させ（ステップ２１４）、入力受付領域設定処理を終了する。
【００３９】
一方、ステップ２０６で認識を開始してから、所定期間経過しても認識できなかった場合には（ステップ２０８）、ＢＴインタフェース１０４に接続されているモバイル装置２００と、ＨＤＭＩインタフェース１０５に接続されているモバイル装置２００が異なるモバイル装置２００であることが予想されるので、モバイル装置２００と車載装置１の接続を確認するよう促すメッセージを表示装置１０２に表示する（ステップ２１８）。また、ＢＴインタフェース１０４を介してモバイル装置２００のモバイルオペレーティングシステム２１０に有効領域提示画像出力アプリケーション２１２の実行を終了させ（ステップ２１４）、入力受付領域設定処理を終了する。
【００４０】
以上、車載装置１のリモートコントロールアプリケーション１１１が行う入力受付領域設定処理について説明した。
さて、車載装置１のリモートコントロールアプリケーション１１１は、以上のような入力受付領域設定処理を行ったならば、表示装置１０２に表示する映像ソースを、ＨＤＭＩインタフェース１０５を介してモバイル装置２００から転送される映像に切り替え、モバイル装置２００から車載装置１に転送される転送映像４００の車載装置１の表示装置１０２への表示を開始する。ただし、車載装置１のリモートコントロールアプリケーション１１１は、入力受付領域設定処理を行ったならば、所定のモバイルアプリケーション、または適当なメニュー画面を表示装置１０２に表示してユーザから選択を受け付けたモバイルアプリケーションを、ＢＴインタフェース１０４を介してモバイル装置２００のモバイルオペレーティングシステム２１０に起動させた上で、表示装置１０２に表示する映像ソースの、ＨＤＭＩインタフェース１０５を介してモバイル装置２００から転送される映像への切替を行い、モバイル装置２００から車載装置１に転送される転送映像４００の車載装置１の表示装置１０２への表示を開始するようにしてもよい。
【００４１】
そして、リモートコントロールアプリケーション１１１は、このようにして、モバイル装置２００から車載装置１に転送される転送映像４００の車載装置１の表示装置１０２への表示を開始したならば、表示装置１０２に表示している転送映像４００上の入力装置１０１を用いた位置入力を受け付け、位置入力を受け付けた位置の座標を算出する。
【００４２】
ここで、この位置入力の受け付けと、位置入力を受け付けた位置の座標の算出は以下のように行う。
すなわち、リモートコントロールアプリケーション１１１は、設定されている入力受付領域５００外の転送映像４００上の位置の位置入力は受け付けず、入力受付領域５００内の位置の位置入力のみを受け付ける。
【００４３】
そして、入力受付領域５００内の位置の位置入力を受け付けたならば、入力受付領域５００を映像の全体と見なして算出した映像上の座標、すなわち入力受付領域５００内の座標を、位置入力を受け付けた位置の座標として算出する。
【００４４】
より具体的には、位置入力を受け付けた位置の、入力受付領域５００の一つの角を原点として、位置入力を受け付けた位置の縦方向位置と横方向位置とを表す座標系上の座標を、位置入力を受け付けた位置の座標として算出する。
【００４５】
本実施形態では、図３ｄ１、２に示すように、入力受付領域５００の左上の角を原点Ｏとし、正のＸ方向を右方向、正のＹ方向を下方向として、位置入力を受け付けた位置の座標（Ｘ、Ｙ）を算出する。また、点ＰのＸ座標は、入力受付領域５００のＸ方向の長さＸmaxに対する、点Ｐまでの原点ＯからのＸ方向の距離の比（パーセント）として算出し、点ＰのＹ座標は、入力受付領域５００のＹ方向の長さＹmaxに対する、点Ｐまでの原点ＯからのＹ方向の距離の比（パーセント）として算出する。なお、図３ｄ１は、モバイル装置が縦長の映像をディスプレイに表示する場合について、図３ｄ２はモバイル装置が横長の映像をディスプレイに表示する場合について示している。
【００４６】
さて、以上のように、位置入力を受け付けた座標を算出したならば、リモートコントロールアプリケーション１１１は、算出した座標をＢＴインタフェース１０４を介してモバイル装置２００のモバイルオペレーティングシステム２１０に通知する。通知を受けたモバイル装置２００の、現在、ディスプレイ２０２への表示を行っているモバイルアプリケーションまたはモバイルオペレーティングシステム２１０は、ディスプレイ２０２に表示している映像内の、通知された座標相当の位置への位置入力が操作部２０１を用いて行われた場合と同様の処理を行う。
【００４７】
この結果、図３ｅ１に示すように、車載装置１の表示装置１０２に表示されている転送映像４００の中のボタン６００の操作を行うために、ユーザが、転送映像４００の中のボタン６００の表示領域内の位置の位置入力を行うと、位置入力を受け付けた位置Ｘの、入力受付領域５００を映像の全体として算出した縦方向位置と横方向位置とを表す座標（図３ｅ１では、Ｘ座標については、映像の横方向サイズに対して５％）がモバイル装置２００に通知される。そして、図３ｅ２に示すように、モバイル装置２００において通知された座標に相当する、ディスプレイ２０２に表示している映像７００上の位置の座標（図３ｅ２では、Ｘ座標については、映像７００の横方向サイズに対して５％）は、ボタン６００の表示領域内の位置となるので、モバイル装置２００においてボタン６００の操作が適正に受け付けられる。
【００４８】
以上、本発明の実施形態について説明した。
ところで、以上の実施形態では、４つの四角形のパターン３０１を四隅に配置した画像を有効領域提示画像３００として用いたが、有効領域提示画像３００としては、転送映像４００において、転送映像４００中の有効領域提示画像３００の領域の境界を提示するパターンを含むものであれば任意の画像を用いるようにしてよい。
【００４９】
すなわち、たとえば、有効領域提示画像３００に付加される余白４０１の色が既知であれば、図４ａ１に示すように、有効領域提示画像３００は、当該余白４０１の色と異なる色で一色に全体を塗りつぶした画像としてもよい。このようにしても、図４ａ２に示すように、転送映像４００中の有効領域提示画像３００の領域すなわち入力受付領域５００を、他部との色の相違より、転送映像４００より識別することができる。
【００５０】
また、モバイル装置２００によって余白４０１の色が異なる場合など、有効領域提示画像３００に付加される余白４０１の色を予め特定できない場合には、図４ｂ１に示すように、４隅の４つの四角形のパターン３０１とその背景の色との組み合わせを時間的に変化させるようにしてもよい。このようにすることにより、図４ｂ２に示すように、余白４０１の色に関わらず、四角形のパターン３０１の色が余白４０１の色と異なる時間帯が必ず発生し、当該時間帯において、四角形のパターン３０１の認識によって、転送映像４００中の有効領域提示画像３００の領域すなわち入力受付領域５００を容易に識別することができる。
【００５１】
同様に、全面を一色に塗りつぶした有効領域提示画像３００を用いるとともに、図４ｃ１に示すように、有効領域提示画像３００の塗りつぶし色を時間的に変化させるようにしてもよい。このようにすることにより、図４ｃ２に示すように、余白４０１の色に関わらず、塗りつぶし色が余白４０１の色と異なる時間帯が発生し、当該時間帯において、転送映像４００中の有効領域提示画像３００の領域すなわち入力受付領域５００を識別することができる。
【００５２】
また、以上の実施形態では、車載装置１とモバイル装置２００との映像の転送にHDMIを用いる場合について説明したが、当該映像の転送にはMHL（Mobile High-definition Link）などの他インタフェースを用いるようにしてもよい。または、映像の転送にモバイル装置２００はMHLを、車載装置１はHDMIを用い、モバイル装置２００と車載装置１との間でMHLとHDMIとのインタフェース変換を行うことにより、モバイル装置２００はMHLを、車載装置１はHDMIを用いて映像の転送を行うようにしてもよい。また、以上の実施形態では、車載装置１とモバイル装置２００との間の入力位置の座標などの制御の転送にBluetooth(登録商標)を用いる場合について説明したが、当該制御情報の転送にはＵＳＢ（Universal Serial Bus）、Wi-Fiなどの他のインタフェースを用いるようにしてもよい。
【符号の説明】
【００５３】
１…車載装置、１０１…入力装置、１０２…表示装置、１０３…音声入出力装置、１０４…ＢＴインタフェース、１０５…ＨＤＭＩインタフェース、１０６…記憶装置、１０７…周辺装置、１１０…オペレーティングシステム、１１１…コントロールアプリケーション、２００…モバイル装置、２０１…操作部、２０２…ディスプレイ、２０３…音声入出力部、２０４…ＢＴインタフェース、２０５…ＨＤＭＩインタフェース、２０６…記憶部、２０７…移動通信装置、２０８…周辺デバイス、２１０…モバイルオペレーティングシステム、２１１…移動電話アプリケーション、２１２…有効領域提示画像出力アプリケーション、３００…有効領域提示画像、４００…転送映像、５００…入力受付領域。
【図１】
2016051362.tif 000003
【図２】
2016051362.tif 000004
【図３】
2016051362.tif 000005
【図４】
2016051362.tif 000006
【図５】
2016051362.tif 000007