(57)【要約】【課題】携帯端末に画面表示された画像を電子機器に表示させて電子機器から携帯端末の操作を行うことができるようになされたシステムにおいて、電子機器に接続された複数の携帯端末の中から所望のアイテムを選択する操作の手間を軽減できる「電子機器および画像表示制御方法」を提供する。【解決手段】車載機１０にミラーリンク接続された複数の携帯端末２０-1，２０-2で表示中のホーム画面（アプリ選択画面）を車載機１０のディスプレイ３０に２画面表示させるようにすることにより、車載機１０におけるタッチパネルに対する操作によって、複数の携帯端末２０-1，２０-2の中から所望の携帯アプリを選択して実行しようとする場合、ディスプレイ３０上に同時に表示された各携帯端末２０-1，２０-2のホーム画面から所望の携帯アプリを効率的に探して選択することができるようにする。【選択図】図１
2015041245.tif 000002
【特許請求の範囲】
【請求項１】
タッチパネル付きの携帯端末で生成された画像データを受信して画像表示するとともに、上記携帯端末の操作を行うことができるようになされたタッチパネル付きの電子機器であって、
複数の携帯端末のディスプレイに表示中のアイテム選択画面に係る画像データを上記複数の携帯端末からそれぞれ受信する画像データ受信部と、
上記画像データ受信部により受信された画像データに基づいて、上記複数の携帯端末で表示中のそれぞれのアイテム選択画面をディスプレイに多画面表示させる画像表示制御部とを備えたことを特徴とする電子機器。
【請求項２】
上記画像表示制御部により上記アイテム選択画面が多画面表示されている状態において、複数の画面領域に跨るなぞり操作が行われたか否かを検出するなぞり操作検出部と、
上記なぞり操作検出部により上記複数の画面領域に跨るなぞり操作が行われたことが検出された場合、上記複数の画面領域のそれぞれにおいて所定の疑似座標列を生成して上記複数の携帯端末に送信する制御部とを備えたことを特徴とする請求項１に記載の電子機器。
【請求項３】
上記画像表示制御部により上記アイテム選択画面が多画面表示されている状態において、上記アイテム選択画面に表示されているアプリケーション起動用アイコンの選択操作が行われたか否かを検出するアプリ選択操作検出部を更に備え、
上記画像表示制御部は、上記アプリ選択操作検出部により上記アプリケーション起動用アイコンの選択操作が行われたことが検出された場合、上記アプリケーション起動用アイコンの選択操作に応じてアプリケーションが起動された携帯端末から送信され上記画像データ受信部により受信された画像データに基づいて、上記アプリケーションの実行画面を１画面表示させることを特徴とする請求項１または２に記載の電子機器。
【請求項４】
上記画像表示制御部により上記アプリケーションの画面が１画面表示されている状態において、上記アイテム選択画面に戻ることを指示するためのホームボタンの選択操作が行われたか否かを検出するホーム選択操作検出部を更に備え、
上記画像表示制御部は、上記ホーム選択操作検出部により上記ホームボタンの選択操作が行われたことが検出された場合、上記複数の携帯端末から送信され上記画像データ受信部により受信された画像データに基づいて、上記複数の携帯端末で表示中のそれぞれのアイテム選択画面を多画面表示させることを特徴とする請求項３に記載の電子機器。
【請求項５】
電子機器と携帯端末とを接続し、上記携帯端末に画面表示された画像を上記電子機器にも表示させるようになされたシステムにおいて、上記電子機器に対する画像の表示を制御する画像表示制御方法であって、
上記電子機器の画像データ受信部が、複数の携帯端末のディスプレイに表示中のアイテム選択画面に係る画像データを上記複数の携帯端末からそれぞれ受信する第１のステップと、
上記電子機器の画像表示制御部が、上記画像データ受信部により受信された画像データに基づいて、上記複数の携帯端末で表示中のそれぞれのアイテム選択画面をディスプレイに多画面表示させる第２のステップとを有することを特徴とする画像表示制御方法。
【請求項６】
上記電子機器のなぞり操作検出部が、上記アイテム選択画面が多画面表示されている状態において、上記電子機器が有するタッチパネル上で複数の画面領域に跨るなぞり操作が行われたか否かを検出する第３のステップと、
上記なぞり操作検出部により上記複数の画面領域に跨るなぞり操作が行われたことが検出された場合、上記電子機器の制御部が、上記複数の画面領域のそれぞれにおいて所定の疑似座標列を生成して上記複数の携帯端末に送信する第４のステップと、
上記電子機器の画像表示制御部が、上記画像データ受信部により上記複数の携帯端末から受信された画像データに基づいて、上記所定の疑似座標列に基づく処理によって上記複数の携帯端末において更新して表示されたそれぞれのアイテム選択画面を上記ディスプレイに多画面表示させる第５のステップとを更に有することを特徴とする請求項５に記載の画像表示制御方法。
【請求項７】
タッチパネル付きの携帯端末に画面表示された画像をタッチパネル付きの車載機に表示させて上記車載機から上記携帯端末の操作を行うことができるようになされた車載システムであって、
上記携帯端末は、
ディスプレイに表示中のアイテム選択画面に係る画像データを上記車載機に送信する画像データ送信部を備え、
上記車載機は、
複数の携帯端末のディスプレイに表示中の上記アイテム選択画面に係る画像データを上記複数の携帯端末からそれぞれ受信する画像データ受信部と、
上記画像データ受信部により受信された画像データに基づいて、上記複数の携帯端末で表示中のそれぞれのアイテム選択画面をディスプレイに多画面表示させる画像表示制御部とを備えたことを特徴とする車載システム。
【請求項８】
上記車載機は、
上記画像表示制御部により上記アイテム選択画面が多画面表示されている状態において、複数の画面領域に跨るなぞり操作が行われたか否かを検出するなぞり操作検出部と、
上記なぞり操作検出部により上記複数の画面領域に跨るなぞり操作が行われたことが検出された場合、上記複数の画面領域のそれぞれにおいて所定の疑似座標列を生成して上記複数の携帯端末に送信する制御部とを備え、
上記複数の携帯端末はそれぞれ、上記制御部により上記車載機から送られてきた上記疑似座標列をもとに、上記タッチパネル上で上記疑似座標列に対応する位置がなぞり操作されたのと同様の処理を行うことを特徴とする請求項７に記載の車載システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子機器、画像表示制御方法および車載システムに関し、特に、携帯端末に画面表示された画像を電子機器に表示させて電子機器から携帯端末の操作を行うことができるようになされたシステムに適用して好適なものである。
【背景技術】
【０００２】
従来、第１の機器に第２の機器を接続し、第２の機器に対する操作によって第１の機器に関する処理を実行可能にした技術が提供されている（例えば、特許文献１参照）。特許文献１に記載のシステムでは、携帯型メディアデバイスに他のデバイス（アクセサリ）を接続し、携帯型メディアデバイスは自身に表示されるＧＵＩ画像をアクセサリに与え、アクセサリがそのＧＵＩ画像を通じて入力制御部のユーザ動作を携帯型メディアデバイスに送信すると、携帯型メディアデバイスはこのユーザ動作に応答してＧＵＩ画像を更新する。
【０００３】
また、最近では、スマートフォンのような携帯端末と車載機とを連携させるミラーリンク（登録商標：以下同様）と呼ばれる技術が提供されている。ミラーリンクは、携帯端末に表示された画像を車載機のディスプレイに鏡のようにそのまま映すという仕組みで、車載機のディスプレイに表示された画像を通じて携帯端末の操作を行うことができるようになされている。これにより、携帯端末にインストールしたミラーリンク対応のアプリケーション（以下、携帯アプリという）を車載機のディスプレイ上で操作できるようになる。
【０００４】
例えば、図７に示すように、様々な携帯アプリがインストールされた携帯端末１０１から、携帯端末１０１にて表示中のホーム画面（各携帯アプリのアイコンが表示されたアプリ選択画面）を車載機１０２に送信し、車載機１０２のディスプレイに携帯端末１０１と同じホーム画面を表示させることが可能である。また、車載機１０２のタッチパネルに対するタッチ位置を表す座標情報を車載機１０２から携帯端末１０１に送信し、携帯端末１０１がこの座標情報をもとに、携帯端末１０１のタッチパネル上で車載機１０２と同じ位置がタッチ操作されたのと同様の処理（例えば、フリック操作によるページ捲り処理、アイコン上でのタップ操作による携帯アプリの起動処理など）を行うことも可能である。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許第５１３７８９９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
ミラーリンクに関する従来の技術では、１つの車載機に対して１つの携帯端末をミラーリンク接続することを前提としている。これに対して今後は、１つの車載機に対して複数の携帯端末をミラーリンク接続し、複数の携帯端末の中から所望の携帯アプリを選択して実行するシステムの開発が考えられる。
【０００７】
このようなシステムにおいて、ミラーリンク接続された複数の携帯端末から所望の携帯アプリを選択する方法として、以下のような方法が考えられる。すなわち、まずメニュー画面からミラーリンクを選択した後、複数の携帯端末の中から何れか１つを選択する。そして、選択した携帯端末にて表示中のホーム画面の画像データを車載機に送信して車載機のディスプレイにも同じホーム画面を表示させ、車載機のタッチパネルに対するアイコン選択操作によって所望の携帯アプリを選択する。
【０００８】
しかしながら、このような方法の場合、選択した携帯端末の中に所望の携帯アプリがなかった場合、複数の携帯端末の中から違う携帯端末を選択し直す必要がある。そのため、複数の携帯端末の中から所望の携帯アプリを見つけ出すまでの操作に手間がかかり、非常に面倒である。
【０００９】
本発明は、このような問題を解決するために成されたものであり、携帯端末に画面表示された画像を電子機器に表示させて電子機器から携帯端末の操作を行うことができるようになされたシステムにおいて、電子機器に接続された複数の携帯端末の中から所望のアイテムを選択する操作の手間を軽減できるようにすることを目的とする。
【課題を解決するための手段】
【００１０】
上記した課題を解決するために、本発明では、タッチパネル付きディスプレイを有する携帯端末で生成された画像データを受信して画像表示するとともに、携帯端末の操作を行うことができるようになされたタッチパネル付きの電子機器において、複数の携帯端末からそれらのディスプレイに表示中のアイテム選択画面に係る画像データを受信して、それらの画像データに基づいて、複数の携帯端末でそれぞれ表示中のアイテム選択画面をディスプレイに多画面表示させるようにしている。
【発明の効果】
【００１１】
上記のように構成した本発明によれば、電子機器に接続された複数の携帯端末の中から所望のアイテムを選択しようとする場合、ユーザは、電子機器のディスプレイ上に同時に表示された複数の携帯端末のアイテム選択画面から所望のアイテムを探すことができる。すなわち、１つの携帯端末のアイテム選択画面を表示させて所望のアイテムを探し、見つからなければ別の携帯端末のアイテム選択画面に表示を切り替えて所望のアイテムを探すといった面倒な操作を行う必要がなく、ユーザが普段、携帯端末のタッチパネルを操作しているのと同様の感覚で、電子機器のディスプレイ上に多画面表示された複数の携帯端末のアイテム選択画面の中から所望のアイテムを探して選択することができる。これにより、電子機器に接続された複数の携帯端末の中から所望のアイテムを選択する操作の手間を軽減し、効率よく所望のアイテムを選択することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の電子機器の一実施形態に係る車載機の機能構成例を示すブロック図である。
【図２】車載機のディスプレイにホーム画面が２画面表示される状態の一例を示す図である。
【図３】車載機のディスプレイに携帯アプリの実行画面が表示される状態の一例を示す図である。
【図４】複数の画面領域に跨るなぞり操作が行われた場合の動作例を示す図である。
【図５】複数の画面領域に跨るなぞり操作が行われた場合の動作例で、図４に示す動作との比較例を示す図である。
【図６】本実施形態による車載機の動作例を示すフローチャートである。
【図７】ミラーリンクで連携された車載機と携帯端末の動作を説明するための図である。
【発明を実施するための形態】
【００１３】
以下、本発明の一実施形態を図面に基づいて説明する。図１は、本発明の電子機器の一実施形態に係る車載機の機能構成例を示すブロック図である。本実施形態の車載機１０は、１つ以上の携帯端末２０-1，２０-2とミラーリンク接続することが可能である。図１の例では、車載機１０が２つの携帯端末２０-1，２０-2とミラーリンク接続された状態を示している。この場合、車載機１０は、各携帯端末２０-1，２０-2で生成された画像データを受信して画像表示するとともに、携帯端末２０-1，２０-2にインストールされているアプリケーション（携帯アプリ）の操作を車載機１０から行うことができるようになされている。
【００１４】
図１に示すように、本実施形態の車載機１０は、その機能構成として、画像データ受信部１１、画像表示制御部１２、なぞり操作検出部１３、アプリ選択操作検出部１４、ホーム選択操作検出部１５および制御部１６を備えている。ここで、車載機１０には、タッチパネル付きディスプレイ３０（以下、単にディスプレイ３０とも記す）が接続され、あるいは、一体として構成されている。
【００１５】
上記各機能ブロック１１〜１６は、ハードウェア、ＤＳＰ（Digital Signal Processor）、ソフトウェアの何れによっても構成することが可能である。例えばソフトウェアによって構成する場合、上記各機能ブロック１１〜１６は、実際には車載機１０が備えるコンピュータのＣＰＵ、ＲＡＭ、ＲＯＭなどを備えて構成され、ＲＡＭやＲＯＭ、ハードディスクまたは半導体メモリ等の記録媒体に記憶されたプログラムが動作することによって実現される。
【００１６】
画像データ受信部１１は、携帯端末２０-1，２０-2のタッチパネル付きディスプレイ２１-1，２１-2（以下、単にディスプレイ２１-1，２１-2とも記す）に表示中の画像に係る画像データを携帯端末２０-1，２０-2から受信する。画像表示制御部１２は、画像データ受信部１１により受信された画像データに基づいて、携帯端末２０-1，２０-2で表示中の画像をディスプレイ３０に表示させる。
【００１７】
なお、携帯端末２０-1，２０-2のディスプレイ２１-1，２１-2は縦長型であり、車載機１０に接続されたディスプレイ３０は横長型である。携帯端末２０-1，２０-2は、車載機１０とミラーリンク接続されたとき、ディスプレイ２１-1，２１-2に表示中の縦長型の画像を車載機１０のディスプレイ３０に表示すべき横長型の画像へと変換して自身のディスプレイ２１-1，２１-2の表示を横長型の画像に変更した上で、変換後の画像データを車載機１０に送信する。車載機１０の画像データ受信部１１は、この画像データを受信する。
【００１８】
ここで、車載機１０のディスプレイ３０に表示される携帯端末２０-1，２０-2の画像は、携帯端末２０-1，２０-2にインストールされている複数の携帯アプリの起動用アイコンが表示されたホーム画面（アプリ選択画面）、何れかのアイコンをタッチすることによって選択された携帯アプリによる処理の実行結果として表示される種々の実行画面の画像などである。
【００１９】
画像データ受信部１１によって携帯端末２０-1，２０-2から画像データが受信され、画像表示制御部１２によってその画像データに基づいてホーム画面やアプリ実行画面の画像がディスプレイ３０に表示されると、ディスプレイ３０上で画像が表示された位置を示す座標情報が車載機１０から携帯端末２０-1，２０-2に返される。携帯端末２０-1，２０-2では、車載機１０から返されてきたディスプレイ３０の座標情報と、ディスプレイ２１-1，２１-2の座標情報とを対応付けて記憶する（以下、この記憶する情報を「座標関連付け情報」という）。
【００２０】
これにより、車載機１０のタッチパネルに対するタッチ位置を表す座標情報を車載機１０から携帯端末２０-1，２０-2に送信し、携帯端末２０-1，２０-2がこの座標情報を座標関連付け情報に基づいて携帯端末２０-1，２０-2のタッチパネル上の座標情報に変換することにより、携帯端末２０-1，２０-2のタッチパネル上で車載機１０と同じ位置がタッチ操作されたのと同様の処理を行うことが可能な状態となる。
【００２１】
画像表示制御部１２は、画像データ受信部１１により２つの携帯端末２０-1，２０-2からそれぞれ受信された画像データに基づいて、２つの携帯端末２０-1，２０-2で表示中の画像を車載機１０の１つのディスプレイ３０に表示させる。本実施形態では、携帯端末２０-1，２０-2においてホーム画面が表示されているとき、画像表示制御部１２は、図２に示すように、それぞれのホーム画面をディスプレイ３０に多画面表示（この場合は２画面表示）させる。そして、そのことをなぞり操作検出部１３、アプリ選択操作検出部１４およびホーム選択操作検出部１５に通知する。図２の例では、第１の携帯端末２０-1のホーム画面をディスプレイ３０の左側画面３１に表示させ、第２の携帯端末２０-2のホーム画面を右側画面３２に表示させている。
【００２２】
この場合、車載機１０の制御部１６は、第１の携帯端末２０-1から送信された画像データに基づいてホーム画面の画像が表示された左側画面３１の座標情報（例えば、左側画面３１の四隅の座標情報）を第１の携帯端末２０-1に返信する。第１の携帯端末２０-1では、車載機１０から返されてきた左側画面３１の四隅の座標情報と、ディスプレイ２１-1の四隅の座標情報とを対応付けて座標関連付け情報として記憶する。
【００２３】
また、車載機１０の制御部１６は、第２の携帯端末２０-2から送信された画像データに基づいてホーム画面の画像が表示された右側画面３２の座標情報（例えば、右側画面３２の四隅の座標情報）を第２の携帯端末２０-2に返信する。第２の携帯端末２０-2では、車載機１０から返されてきた右側画面３２の四隅の座標情報と、ディスプレイ２１-2の四隅の座標情報とを対応付けて座標関連付け情報として記憶する。
【００２４】
このように各携帯端末２０-1，２０-2のホーム画面が２画面表示された状態において、タッチパネル付きディスプレイ３０の左側画面３１の領域がタッチ操作された場合、制御部１６は、そのタッチ操作に応じた座標情報（座標点または座標列）を第１の携帯端末２０-1に送信する。これにより、第１の携帯端末２０-1では、制御部１６により車載機１０から送られてきた座標情報をもとに座標関連付け情報を用いて座標変換を行うことにより、第１の携帯端末２０-1のタッチパネル上でその座標情報に対応する位置が操作されたのと同様の処理を行う。
【００２５】
一方、各携帯端末２０-1，２０-2のホーム画面が２画面表示された状態において、タッチパネル付きディスプレイ３０の右側画面３２の領域がタッチ操作された場合、制御部１６は、そのタッチ操作に応じた座標情報を第２の携帯端末２０-2に送信する。これにより、第２の携帯端末２０-2では、制御部１６により車載機１０から送られてきた座標情報をもとに座標関連付け情報を用いて座標変換を行うことにより、第２の携帯端末２０-2のタッチパネル上でその座標情報に対応する位置が操作されたのと同様の処理を行う。
【００２６】
また、携帯端末２０-1，２０-2の中の何れかの携帯アプリが選択されて実行されているとき、画像表示制御部１２は、図３に示すように、その携帯アプリの実行結果によって表示される実行画面をディスプレイ３０に１画面表示させる。図３の例では、第１の携帯端末２０-1において地図アプリが選択されて実行されており、その実行画面である地図画像が携帯端末２０-1のディスプレイ２１-1に表示されている。また、それと同じ地図画像が車載機１０のディスプレイ３０にも１画面表示されている。
【００２７】
この場合、車載機１０の制御部１６は、第１の携帯端末２０-1から送信された画像データに基づいて画像が表示されたディスプレイ３０の座標情報（例えば、ディスプレイ３０の四隅の座標情報）を第１の携帯端末２０-1に返信する。第１の携帯端末２０-1では、車載機１０から返されてきたディスプレイ３０の四隅の座標情報と、ディスプレイ２１-1の四隅の座標情報とを対応付けて座標関連付け情報として記憶する。
【００２８】
なぞり操作検出部１３は、画像表示制御部１２により各携帯端末２０-1，２０-2のホーム画面が２画面表示されている状態において、左右の画面領域に跨るなぞり操作が行われたか否かを検出する。左右の画面領域に跨るなぞり操作が行われたことがなぞり操作検出部１３により検出された場合、なぞり操作検出部１３はそのことを制御部１６に通知する。この場合、制御部１６は、左右の画面領域のそれぞれにおいて所定の疑似座標列を生成して携帯端末２０-1，２０-2に送信する。
【００２９】
なお、左側画面３１または右側画面３２のどちらか一方の領域上でなぞり操作が行われたことがなぞり操作検出部１３にて検出された場合、なぞり操作検出部１３はそのことを制御部１６に通知する。この場合、制御部１６は、上述したように、実際になぞり操作が行われた位置を表す座標列を生成して、なぞり操作が行われた側の画面領域に対応する携帯端末（携帯端末２０-1，２０-2の何れか）にその座標列を送信する。
【００３０】
図４は、左右の画面領域に跨るなぞり操作が行われた場合の動作例を示す図である。図４（ａ）は、矢印４１で示すように、左右の画面領域３１，３２に跨るなぞり操作が行われた状態を示している。図４（ｂ）は、左右の画面領域３１，３２のそれぞれにおいて２つの矢印４２，４３で示すような所定の疑似座標列を生成して携帯端末２０-1，２０-2に送信した状態を示している。
【００３１】
ここで生成する疑似座標列は、タッチパネル上の所定の開始位置から終了位置まで、右から左方向へと所定の長さだけ１本の指でフリック操作をした場合に得られる座標列である。フリック操作の長さは、車載機１０から送られてくる疑似座標列を受信した各携帯端末２０-1，２０-2が、その疑似座標列に基づいて、ホーム画面のページ捲り操作が行われたと認識可能となる必要十分な長さとする。
【００３２】
図４（ｃ）は、車載機１０から各携帯端末２０-1，２０-2に送信された疑似座標列に基づいて、各携帯端末２０-1，２０-2においてホーム画面のページ捲り処理がそれぞれ実行され、その実行結果である次ページのホーム画面が各携帯端末２０-1，２０-2から車載機１０に送信されて２画面表示された状態（２画面表示の内容が更新された状態）を示している。このように、疑似座標列を生成して各携帯端末２０-1，２０-2に送信することにより、ホーム画面のページ捲りを確実に行うことができる。
【００３３】
なお、図４に示した動作との比較例として、図５を示す。図５は、疑似座標列を生成して送信しない場合の動作例を示す図である。図５（ａ）は、矢印５１で示すように、左右の画面領域３１，３２に跨るなぞり操作が行われた状態を示している。図５（ｂ）は、左右の画面領域３１，３２のそれぞれにおいて実際になぞり操作が行われた位置から、２つの矢印５２，５３で示すような実際の座標列を生成して携帯端末２０-1，２０-2に送信した状態を示している。
【００３４】
図５（ａ）に示したように、２画面に跨るなぞり操作の操作量があまり大きくないと、図５（ｂ）のように左右の画面領域３１，３２からそれぞれ生成される座標列の長さが短いものとなってしまう。この場合、車載機１０から送られてくる座標列を受信した各携帯端末２０-1，２０-2では、ホーム画面のページ捲り操作が行われたことを認識することができない。
【００３５】
そのため、図５（ｃ）に示すように、各携帯端末２０-1，２０-2においてホーム画面のページ捲り処理が行われず、その結果、車載機１０のディスプレイ３０においても、ホーム画面の表示が切り替わらない。これに対して、本実施形態によれば、図４で説明したように、左右の画面領域３１，３２に跨るなぞり操作の操作量がそれほど大きくない場合であっても、ホーム画面のページ捲りを確実に行うことができる。
【００３６】
アプリ選択操作検出部１４は、画像表示制御部１２により各携帯端末２０-1，２０-2のホーム画面が２画面表示されている状態において、ホーム画面に表示されているアイコンの選択操作が行われたか否かを検出する。具体的には、アプリ選択操作検出部１４は、アイコンが表示されているタッチパネル上の位置においてタップ操作が行われたか否かを検出する。アプリ選択操作検出部１４は、アイコンの選択操作が行われたことを検出した場合、その旨と、左右の画面領域３１，３２のどちらでタップ操作が行われたのかを画像表示制御部１２に通知する。
【００３７】
画像表示制御部１２は、アイコンの選択操作が行われたことがアプリ選択操作検出部１４により検出された場合、アイコンの選択操作に応じて携帯アプリが起動された携帯端末（携帯端末２０-1，２０-2の何れか）から送信され画像データ受信部１１により受信された画像データに基づいて、携帯アプリの実行画面をディスプレイ３０上に１画面表示させる。
【００３８】
すなわち、所望のアイコンが表示された位置でタップ操作が行われた場合、制御部１６は、その操作位置を表す座標点を携帯端末２０-1，２０-2の何れか（タップ操作が行われた側の画面領域に対応する携帯端末）に送信する。例えば、図３に示すように、左側の画面領域３１に表示されていた地図アプリ起動用のアイコンの位置でタップ操作が行われた場合、その操作位置を表す座標点が第１の携帯端末２０-1に送信され、第１の携帯端末２０-1において地図アプリが起動される。そして、地図アプリの実行画面である地図画像に係る画像データが第１の携帯端末２０-1から車載機１０に送信され、画像データ受信部１１にて受信される。画像表示制御部１２は、この画像データに基づいて、第１の携帯端末２０-1に表示中の地図画像と同じ地図画像をディスプレイ３０に１画面表示させる。
【００３９】
なお、車載機１０では、各携帯端末２０-1，２０-2から送られてくる画像データに基づいて画像表示を行っているだけなので、タップ操作された位置に携帯アプリ起動用のアイコンが表示されているかどうかは認識できていない。しかし、タップ操作は何らかの処理実行を指示する際に行われる操作であることが多いので、タップ操作が行われた場合には、ホーム画面のページ捲りではない別の処理に関する指示が行われたと仮定することは可能である。
【００４０】
よって、アプリ選択操作検出部１４は、タッチパネル上の何れかの位置においてタップ操作が行われた場合にはアイコンの選択操作が行われたものとして、その旨と、左右の画面領域３１，３２のどちらでタップ操作が行われたかを画像表示制御部１２に通知する。画像表示制御部１２はこの通知を受けて、タップ操作が行われた画面領域に対応する携帯端末から送信され画像データ受信部１１にて受信された画像データに基づいて、携帯アプリの実行画面をディスプレイ３０上に１画面表示させる。
【００４１】
なお、携帯端末２０-1，２０-2では、車載機１０から送られてくる座標点に対応する位置に携帯アプリ起動用のアイコンが表示されているかどうかを認識することができる。そこで、携帯端末２０-1，２０-2から車載機１０に携帯アプリの実行画面に係る画像データを送信する際に、アイコンが選択されたことを知らせるアイコン選択通知情報を一緒に車載機１０に送信するようにしてもよい。この場合、アプリ選択操作検出部１４は、携帯端末２０-1，２０-2からアイコン選択通知情報を受信したときに、ホーム画面に表示されているアイコンの選択操作が行われたことを検出する。
【００４２】
あるいは、次のような方法によってアイコンの選択操作が行われたか否かを検出するようにしてもよい。すなわち、アプリ選択操作検出部１４は、画像データ受信部１１により受信される画像データに基づいて、ディスプレイ３０に表示される画像を画像認識する。ここで、矩形のオブジェクトがほぼ規則的に並んでいることを画像認識により検知できた場合、その画像はホーム画面の画像であると認識する。一方、矩形のオブジェクトが規則的に並んでいないことを画像認識により検知できた場合、その画像はホーム画面以外の何らかの画像であると認識する。アプリ選択操作検出部１４は、画像データ受信部１１により受信される画像データに係る画像がホーム画面からそれ以外の画像に切り替わったことを検知したときに、アイコンの選択操作が行われたことを検出する。
【００４３】
ホーム選択操作検出部１５は、画像表示制御部１２により携帯アプリの実行画面が１画面表示されている状態において、ホーム画面に戻ることを指示するためのホームボタンの選択操作が行われたか否かを検出する。このホームボタンは、車載機１０に設けられたハードウェアボタンであるものとする。画像表示制御部１２は、ホームボタンの選択操作が行われたことがホーム選択操作検出部１５により検出された場合、２つの携帯端末２０-1，２０-2から送信され画像データ受信部１１により受信された画像データに基づいて、当該２つの携帯端末２０-1，２０-2で表示中のホーム画面をディスプレイ３０に２画面表示させる。
【００４４】
すなわち、車載機１０のホームボタンが操作されたことがホーム選択操作検出部１５により検出された場合、そのことを画像表示制御部１２および制御部１６に通知する。この通知を受けた制御部１６は、ホームボタンが操作されたことを知らせるホーム選択通知情報を各携帯端末２０-1，２０-2に送信する。これにより、各携帯端末２０-1，２０-2のディスプレイ２１-1，２１-2にはホーム画面がそれぞれ表示される。そして、そのホーム画面の画像データが各携帯端末２０-1，２０-2から車載機１０に送信され、画像データ受信部１１にて受信される。画像表示制御部１２は、この画像データに基づいて、携帯端末２０-1，２０-2で表示中のホーム画面をディスプレイ３０に２画面表示させる。
【００４５】
図６は、上記のように構成した本実施形態による車載機１０の動作例を示すフローチャートである。なお、図６に示すフローチャートの処理は、車載機１０と２つの携帯端末２０-1，２０-2とを接続してミラーリンクで連携させたときに開始する。まず、画像データ受信部１１は、各携帯端末２０-1，２０-2のディスプレイ２１-1，２１-2に表示中のホーム画面に係る画像データを携帯端末２０-1，２０-2からそれぞれ受信する（ステップＳ１）。
【００４６】
そして、画像表示制御部１２は、画像データ受信部１１により受信された画像データに基づいて、各携帯端末２０-1，２０-2で表示中のホーム画面をディスプレイ３０に２画面表示させる（ステップＳ２）。その後、制御部１６は、第１の携帯端末２０-1から送信された画像データに基づいてホーム画面の画像が表示された左側画面３１の四隅の座標情報を第１の携帯端末２０-1に返信するとともに、第２の携帯端末２０-2から送信された画像データに基づいてホーム画面の画像が表示された右側画面３２の四隅の座標情報を第２の携帯端末２０-2に返信する（ステップＳ３）。
【００４７】
次に、なぞり操作検出部１３は、車載機１０のタッチパネル上でなぞり操作が行われたか否かを判定する（ステップＳ４）。なぞり操作が行われたと判定された場合、引き続きなぞり操作検出部１３は、それは左右の画面領域３１，３２に跨るなぞり操作であったか否かを判定する（ステップＳ５）。
【００４８】
ここで、左右の画面領域３１，３２に跨るなぞり操作が行われたとなぞり操作検出部１３により判定された場合、制御部１６は、左右の画面領域３１，３２のそれぞれにおいて所定の疑似座標列を生成して携帯端末２０-1，２０-2に送信する（ステップＳ６）。その後、処理はステップＳ１に戻る。これにより、各携帯端末２０-1，２０-2においてホーム画面のページ捲り処理が行われた結果として送られてくる次ページのホーム画面に係る画像データが画像データ受信部１１にて受信され（ステップＳ１）、ホーム画面の２画面表示が更新される（ステップＳ２）。つまり、車載機１０から各携帯端末２０-1，２０-2に送信された疑似座標列に基づくページ捲り処理によって各携帯端末２０-1，２０-2においてそれぞれ更新して表示されたホーム画面がディスプレイ３０に２画面表示される。
【００４９】
一方、左右の画面領域３１，３２に跨るなぞり操作が行われていない、すなわち、左右の画面領域３１，３２の何れか一方においてなぞり操作が行われたとなぞり操作検出部１３により判定された場合、制御部１６は、実際になぞり操作が行われた位置を表す座標列を生成し、なぞり操作が行われた画面領域に対応する携帯端末（携帯端末２０-1，２０-2の何れか）にその座標列を送信する（ステップＳ７）。その後、処理はステップＳ１に戻る。これにより、携帯端末２０-1，２０-2の何れか一方においてのみホーム画面のページ捲り処理が行われた結果として送られてくる次ページのホーム画面に係る画像データが画像データ受信部１１にて受信され（ステップＳ１）、２画面表示のうち一方のホーム画面が更新される（ステップＳ２）。
【００５０】
上記ステップＳ４において、なぞり操作が行われていないとなぞり操作検出部１３により判定された場合、アプリ選択操作検出部１４は、ホーム画面に表示されているアイコンの選択操作が行われたか否かを検出する（ステップＳ８）。具体的には、アプリ選択操作検出部１４は、タッチパネル上でタップ操作が行われたか否かを検出する。ここで、アイコンの選択操作が行われていないとアプリ選択操作検出部１４にて判定された場合、処理はステップＳ４に戻る。
【００５１】
一方、アイコンの選択操作が行われたとアプリ選択操作検出部１４にて判定された場合、制御部１６は、その操作位置を表す座標点を、タップ操作が行われた画面領域に対応する携帯端末（携帯端末２０-1，２０-2の何れか）に送信する（ステップＳ９）。その後、画像データ受信部１１は、座標点を送信した側の携帯端末において携帯アプリが起動された結果として送られてくる実行画面に係る画像データを受信する（ステップＳ１０）。そして、画像表示制御部１２は、画像データ受信部１１により受信された画像データに基づいて、携帯アプリの実行画面をディスプレイ３０上に１画面表示させる（ステップＳ１１）。さらに、制御部１６は、実行画面が表示されたディスプレイ３０の四隅の座標情報を、当該実行画面に係る画像データを送信してきた携帯端末（携帯端末２０-1，２０-2の何れか）に返信する（ステップＳ１２）。
【００５２】
その後、ホーム選択操作検出部１５は、ホームボタンの選択操作が行われたか否かを検出する（ステップＳ１３）。ここで、ホームボタンの選択操作が行われたとホーム選択操作検出部１５にて判定された場合、制御部１６は、ホームボタンが操作されたことを知らせるホーム選択通知情報を各携帯端末２０-1，２０-2に送信する（ステップＳ１４）。その後、処理はステップＳ１に戻る。これにより、携帯端末２０-1，２０-2においてそれぞれ表示されたホーム画面の画像データが画像データ受信部１１にて受信され（ステップＳ１）、当該ホーム画面が２画面表示される（ステップＳ２）。
【００５３】
一方、ホームボタンの選択操作が行われていないとホーム選択操作検出部１５にて判定された場合、車載機１０では、タッチパネル上において別の操作（なぞり操作やタップ操作など）が行われたか否かを判定する（ステップＳ１５）。ここで、別の操作が行われていないと判定された場合、処理はステップＳ１３に戻る。一方、別の操作が行われたと判定された場合、制御部１６は、その操作に応じた座標点または座標列を、現在ディスプレイ３０に表示している実行画面に係る画像データを送信してきた携帯端末に送信する（ステップＳ１６）。その後、処理はステップＳ１０に戻る。
【００５４】
これにより、座標点または座標列を送信した携帯端末において携帯アプリの処理が実行された結果として送られてくる新たな実行画面に係る画像データが画像データ受信部１１にて受信される（ステップＳ１０）。そして、当該画像データに基づいて新たな実行画面が画像表示制御部１２によりディスプレイ３０上に１画面表示される（ステップＳ１１）。
【００５５】
以上詳しく説明したように、本実施形態の車載機１０では、複数の携帯端末２０-1，２０-2で表示中のそれぞれのホーム画面をディスプレイ３０に２画面表示させるようにしている。このように構成した本実施形態によれば、車載機１０におけるタッチパネルに対する操作によって、複数の携帯端末２０-1，２０-2の中から所望の携帯アプリを選択して実行しようとする場合、ユーザは、ディスプレイ３０上に同時に表示された各携帯端末２０-1，２０-2のホーム画面から所望の携帯アプリを効率よく探して選択することができる。
【００５６】
すなわち、従来のように、例えば第１の携帯端末２０-1のホーム画面をディスプレイ３０に１画面表示させて所望の携帯アプリを探し、見つからなければ第２の携帯端末２０-2のホーム画面に表示を切り替えて所望の携帯アプリを探すといった面倒な操作を行う必要がなくなる。つまり、ユーザが普段、携帯端末２０-1，２０-2のタッチパネルを操作しているのと同様の感覚で、車載機１０のディスプレイ３０上に２画面表示された携帯端末２０-1，２０-2のホーム画面の中から所望の携帯アプリを探して選択することができる。これにより、車載機１０に接続された複数の携帯端末２０-1，２０-2の中から所望の携帯アプリを選択する操作の手間を軽減し、効率よく所望の携帯アプリを選択することができる。
【００５７】
また、本実施形態では、各携帯端末２０-1，２０-2のホーム画面が２画面表示されている状態において、左右の画面領域３１，３２に跨るなぞり操作が行われた場合には、左右の画面領域３１，３２のそれぞれにおいて所定の疑似座標列を生成して各携帯端末２０-1，２０-2に送信するようにしている。このように構成したことにより、左右の画面領域３１，３２に跨るなぞり操作の操作量がそれほど大きくない場合であっても、ホーム画面のページ捲りを確実に行うことができるというメリットを有する。
【００５８】
なお、上記実施形態では、アイテム選択画面の一例として、携帯端末２０-1，２０-2にインストールされている複数の携帯アプリの起動用アイコンが表示されたホーム画面（アプリ選択画面）について説明したが、本発明はこれに限定されない。例えば、複数のサムネイル画像が表示された画像選択画面、複数の楽曲リストが表示された楽曲選択画面、複数のフォルダやファイルが表示されたファイル選択画面など、何らかのアイテムを選択する画面であれば本発明を適用することが可能である。
【００５９】
また、上記実施形態では、電子機器の一例として車載機１０を挙げて説明したが、本発明を適用可能な電子機器は車載機１０に限定されない。すなわち、ミラーリンクまたはこれと同様の通信制御技術に対応した電子機器であれば何れにも適用することが可能である。
【００６０】
その他、上記実施形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
【符号の説明】
【００６１】
１０  車載機（電子機器）
１１  画像データ受信部
１２  画像表示制御部
１３  なぞり操作検出部
１４  アプリ選択操作検出部
１５  ホーム選択操作検出部
１６  制御部
２０-1，２０-2  携帯端末
３０  タッチパネル付きディスプレイ
【図１】
2015041245.tif 000003
【図２】
2015041245.tif 000004
【図３】
2015041245.tif 000005
【図４】
2015041245.tif 000006
【図５】
2015041245.tif 000007
【図６】
2015041245.tif 000008
【図７】
2015041245.tif 000009