(57)【要約】【課題】複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現する。【解決手段】テレビ２００と通信するタブレット１００は、画像認識されたテレビ領域４２０に基づいて、両装置の画面のいずれか一方におけるオブジェクトの消失位置（消失点または消失領域）と、他方の画面におけるオブジェクトの出現位置（出現点または出現領域）との少なくともいずれか一方の基準となるタブレット領域１２０上の基準位置を特定する座標処理部２１と、エフェクト出力部２２と、基準位置を指示し、両装置のエフェクト出力部の一方に対して、オブジェクトを消失させる第１エフェクトの出力を指示し、他方に対して、第１エフェクトの出力後に該オブジェクトを出現させる第２エフェクトの出力を指示する連携指示部２４とを備えていることを特徴としている。【選択図】図１
2013152642.tif 000002
【特許請求の範囲】
【請求項１】
表示装置と通信する端末装置であって、上記表示装置は、表示するオブジェクトに対して視覚的変化を付けることにより視覚的効果を出力する機能を備えており、
上記表示装置を撮像した画像データから該表示装置の表示装置画面を画像認識する画像認識手段と、
上記画像認識手段によって認識された上記画像データ上の表示装置画面に基づいて、
上記表示装置画面および自装置の端末装置画面の一方における、オブジェクトが視覚的効果によって消失する消失位置、および、
他方の画面における、オブジェクトが視覚的効果によって出現する出現位置、
の少なくともいずれか一方の基準となる、上記端末装置画面上の基準位置を特定する座標処理手段と、
上記視覚的効果を出力する視覚的効果出力手段と、
上記視覚的効果出力手段および上記表示装置の少なくとも一方に対して、上記基準位置を指示し、上記視覚的効果出力手段および上記表示装置の一方に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、他方に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示する連携指示手段とを備えていることを特徴とする端末装置。
【請求項２】
上記端末装置の上記視覚的効果出力手段が上記第１の視覚的効果を出力することを特徴とする請求項１に記載の端末装置。
【請求項３】
上記座標処理手段は、
オブジェクトが出現する上記表示装置画面上の出現位置を上記基準位置として、上記端末装置画面の座標系において特定し、
上記視覚的効果出力手段は、
上記端末装置画面上の消失位置にて、上記端末装置画面に表示中のオブジェクトを消失させる視覚的効果を出力し、
上記連携指示手段は、
上記視覚的効果出力手段に対して、上記座標処理手段によって特定された出現位置を消失位置にしてオブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記表示装置に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示することを特徴とする請求項１または２に記載の端末装置。
【請求項４】
上記座標処理手段は、
上記表示装置画面の中心を上記基準位置として特定することを特徴とする請求項３に記載の端末装置。
【請求項５】
上記座標処理手段は、
オブジェクトが消失する上記端末装置画面上の消失位置を上記基準位置として、上記表示装置画面の座標系において特定し、
上記視覚的効果出力手段は、
上記消失位置にて、上記端末装置画面に表示中のオブジェクトを消失させる視覚的効果を出力し、
上記連携指示手段は、
上記視覚的効果出力手段に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記表示装置に対して、上記第１の視覚的効果の出力開始後に上記座標処理手段によって特定された消失位置を出現位置にして上記オブジェクトを出現させる第２の視覚的効果の出力を指示することを特徴とする請求項１または２に記載の端末装置。
【請求項６】
上記視覚的効果出力手段は、
上記端末装置画面の中心へとオブジェクトを消失させる視覚的効果を出力するものであり、
上記座標処理手段は、
上記端末装置画面の中心を上記基準位置として特定することを特徴とする請求項５に記載の端末装置。
【請求項７】
上記座標処理手段は、
上記基準位置を、上記端末装置画面の座標系において特定するとともに、上記表示装置画面の座標系において特定し、
上記視覚的効果出力手段は、
上記消失位置にて、上記端末装置画面に表示中のオブジェクトを消失させる視覚的効果を出力し、
上記連携指示手段は、
上記視覚的効果出力手段に対して、上記座標処理手段によって特定された基準位置を消失位置にしてオブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記表示装置に対して、上記第１の視覚的効果の出力開始後に、上記基準位置を出現位置にして上記オブジェクトを出現させる第２の視覚的効果の出力を指示することを特徴とする請求項１または２に記載の端末装置。
【請求項８】
上記座標処理手段は、
上記画像認識手段によって認識された上記画像データ上の表示装置画面の中心と、上記端末装置画面の中心または該端末装置画面に表示中のオブジェクトの中心とを結ぶ線分の中点を、上記基準位置として特定することを特徴とする請求項７に記載の端末装置。
【請求項９】
上記座標処理手段は、上記消失位置と上記出現位置とが、上記表示装置を撮像した上記画像データ上で一致する位置を上記基準位置として特定することを特徴とする請求項１から８までのいずれか１項に記載の端末装置。
【請求項１０】
上記端末装置の上記視覚的効果出力手段が上記第２の視覚的効果を出力することを特徴とする請求項１に記載の端末装置。
【請求項１１】
上記座標処理手段は、
オブジェクトが消失する上記表示装置画面上の消失位置を上記基準位置として、上記端末装置画面の座標系において特定し、
上記視覚的効果出力手段は、
オブジェクトが出現する上記端末装置画面上の出現位置から、オブジェクトを出現させて表示させる視覚的効果を出力し、
上記連携指示手段は、
上記表示装置に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記視覚的効果出力手段に対して、上記第１の視覚的効果の出力開始後に上記座標処理手段によって特定された消失位置を出現位置にして上記オブジェクトを出現させる第２の視覚的効果の出力を指示することを特徴とする請求項１または１０に記載の端末装置。
【請求項１２】
上記座標処理手段は、
上記表示装置画面の中心を上記基準位置として特定することを特徴とする請求項１１に記載の端末装置。
【請求項１３】
上記座標処理手段は、
オブジェクトが出現する上記端末装置画面上の出現位置を上記基準位置として、上記表示装置画面の座標系において特定し、
上記視覚的効果出力手段は、
上記出現位置からオブジェクトを出現させて表示させる視覚的効果を出力し、
上記連携指示手段は、
上記表示装置に対して、上記座標処理手段によって特定された出現位置を消失位置にしてオブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記視覚的効果出力手段に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示することを特徴とする請求項１または１０に記載の端末装置。
【請求項１４】
上記視覚的効果出力手段は、
上記端末装置画面の中心からオブジェクトを出現させる視覚的効果を出力するものであり、
上記座標処理手段は、
上記端末装置画面の中心を上記基準位置として特定することを特徴とする請求項１３に記載の端末装置。
【請求項１５】
上記座標処理手段は、
上記基準位置を、上記端末装置画面の座標系において特定するとともに、上記表示装置画面の座標系において特定し、
上記視覚的効果出力手段は、
上記出現位置から、上記端末装置画面上にオブジェクトを出現させて表示させる視覚的効果を出力し、
上記連携指示手段は、
上記表示装置に対して、上記座標処理手段によって特定された基準位置を消失位置にしてオブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記視覚的効果出力手段に対して、上記第１の視覚的効果の出力開始後に、上記基準位置を出現位置にして上記オブジェクトを出現させる第２の視覚的効果の出力を指示することを特徴とする請求項１または１０に記載の端末装置。
【請求項１６】
上記座標処理手段は、
上記画像認識手段によって認識された上記画像データ上の表示装置画面の中心または該表示装置画面に表示中のオブジェクトの中心と、上記端末装置画面の中心とを結ぶ線分の中点を、上記基準位置として特定することを特徴とする請求項１５に記載の端末装置。
【請求項１７】
上記座標処理手段は、
上記基準位置を上記表示装置画面上に特定できない場合に、上記表示装置画面上に上記基準位置に代わる上記表示装置画面用の代替基準位置を特定するとともに、
上記基準位置を上記端末装置画面上に特定できない場合に、上記端末装置画面上に上記基準位置に代わる上記端末装置画面用の代替基準位置を特定することを特徴とする請求項１に記載の端末装置。
【請求項１８】
上記第１の視覚的効果、および、上記第２の視覚的効果の少なくともいずれか一方が、
オブジェクトを縮小させる視覚的効果、または、オブジェクトを拡大させる視覚的効果を含み、
上記第１の視覚的効果は、オブジェクトを縮小させる視覚的効果を含む場合に、表示中のオブジェクトを縮小しつつ上記消失位置に移動させるという視覚的効果を含み、
上記第２の視覚的効果は、オブジェクトを拡大させる視覚的効果を含む場合に、上記出現位置から出現させたオブジェクトを所定の大きさに拡大しつつ所定位置に移動させるという視覚的効果を含むことを特徴とする請求項１に記載の端末装置。
【請求項１９】
請求項１から１８までのいずれか１項に記載の端末装置と、
上記端末装置からの指示にしたがって、上記視覚的効果を出力する機能を備えた表示装置とを含むことを特徴とする表示システム。
【請求項２０】
表示装置と通信する端末装置の制御方法であって、上記表示装置は、表示するオブジェクトに対して視覚的変化を付けることにより視覚的効果を出力する機能を備えており、
上記表示装置を撮像した画像データから該表示装置の表示装置画面を画像認識する画像認識ステップと、
上記画像認識ステップにて認識された上記画像データ上の表示装置画面に基づいて、
上記表示装置画面および上記端末装置の端末装置画面の一方における、オブジェクトが視覚的効果によって消失する消失位置、および、
他方の画面における、オブジェクトが視覚的効果によって出現する出現位置、
の少なくともいずれか一方の基準となる、上記端末装置画面上の基準位置を特定する座標処理ステップと、
上記端末装置および上記表示装置の少なくとも一方に対して、上記座標処理ステップにて特定された上記基準位置を指示し、上記端末装置および上記表示装置の一方に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、他方に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示する連携指示ステップと、
上記連携指示ステップでの指示にしたがって、上記第１または第２の視覚的効果を出力する視覚的効果出力ステップとを含むことを特徴とする端末装置の制御方法。
【請求項２１】
コンピュータを、請求項１から１８までのいずれか１項に記載の端末装置の各手段として機能させるための制御プログラム。
【請求項２２】
請求項２１に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の装置間でオブジェクトを表示するための、端末装置、表示システム、端末装置の制御方法、端末装置の制御プログラム、および、該制御プログラムを記録した記録媒体に関するものである。
【背景技術】
【０００２】
従来、複数の装置が協働して、文字、文書、図形、アイコン、画像、動画などのあらゆる表示対象物（以下、オブジェクトと称する）を表示する技術が実現されている。
【０００３】
例えば、特許文献１には、機器をカメラで撮像することにより当該機器を識別し、当該機器との接続を確立することが可能な携帯型情報処理端末が開示されている。例えば、上記携帯型情報処理端末は、リモートのコンピュータを撮像して識別することにより、該コンピュータとの接続を確立して、該リモートのコンピュータの「キーボード」としてふるまうことができる。すなわち、上記携帯型情報処理端末にてキー入力された文字（オブジェクト）がリモートのコンピュータに表示される。ここで、上記携帯型情報処理端末は、自装置のディスプレイスクリーン上にキー入力された文字を表示する際、文字が、あたかも、上記リモートのコンピュータの設置場所に向かって飛んでいくようなアニメーションを表示することができる。
【０００４】
また、特許文献２には、リモコン装置と、該リモコン装置が通信可能な遠隔の映像表示装置とを含むリモコンシステムが開示されている。上記リモコンシステムでは、まず、手前にあるリモコン装置に表示されていた表示情報（オブジェクト）を、奥の映像表示装置に向かってドラッグさせる。すると、上記リモコン装置は、自装置の表示面上における上記表示情報の表示位置を映像表示装置に向かって移動させるとともに、上記表示情報を映像表示装置に表示させるためのコマンドを映像表示装置に送信する。ここで、映像表示装置における表示情報の表示は、リモコン装置側に表示されていた表示情報がリモコン装置から映像表示装置にあたかも物理的に移動するような視覚的効果を与えるように行なわれる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００１−１４２８２５号公報（２００１年５月２５日公開）
【特許文献２】特開２００３−０３２５０７号公報（２００３年１月３１日公開）
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の携帯型情報処理端末は、自装置のディスプレイにアニメーションを表示する構成であるが、通信相手の表示装置と連携してアニメーションを実現していない。そのため、携帯型情報処理端末から相手の装置に文字が送られたという物理的な現象を表現した視覚的効果であるとは言えず、現実味に欠けるという問題がある。
【０００７】
また、特許文献２に記載のリモコンシステムは、リモコン装置と相手の映像表示装置との間の空間における表示情報（オブジェクト）の移動について、これを視覚的効果によって表現しきれないという問題がある。また、特許文献２に記載のリモコンシステムは、視覚的効果を実現するためには、リモコン装置と相手の映像表示装置との位置関係、および、表示情報をドラッグさせる方向があらかじめ固定されていることが必要となる。そのため、装置間の位置関係が柔軟に変化するようなシステムにおいては、表示情報が物理的に移動したかのような視覚的効果を得ることはできないという問題がある。また、表示情報を画面上で任意に操作することができず、操作の自由度も損なわれる。
【０００８】
本発明は、上記の問題点に鑑みてなされたものであり、その目的は、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現する端末装置、表示システム、端末装置の制御方法、端末装置の制御プログラム、および、該制御プログラムを記録した記録媒体を実現することにある。
【課題を解決するための手段】
【０００９】
本発明の端末装置は、上記課題を解決するために、表示装置と通信する端末装置であって、上記表示装置は、表示するオブジェクトに対して視覚的変化を付けることにより視覚的効果を出力する機能を備えており、上記表示装置を撮像した画像データから該表示装置の表示装置画面を画像認識する画像認識手段と、上記画像認識手段によって認識された上記画像データ上の表示装置画面に基づいて、上記表示装置画面および自装置の端末装置画面の一方における、オブジェクトが視覚的効果によって消失する消失位置、および、他方の画面における、オブジェクトが視覚的効果によって出現する出現位置、の少なくともいずれか一方の基準となる、上記端末装置画面上の基準位置を特定する座標処理手段と、上記視覚的効果を出力する視覚的効果出力手段と、上記視覚的効果出力手段および上記表示装置の少なくとも一方に対して、上記基準位置を指示し、上記視覚的効果出力手段および上記表示装置の一方に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、他方に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示する連携指示手段とを備えていることを特徴としている。
【００１０】
上記構成によれば、端末装置と表示装置とを連携させて、それぞれの装置に、視覚的効果が付与された、変化のあるオブジェクトを表示させることができる。
【００１１】
具体的には、端末装置の上記連携指示手段は、自装置の視覚的効果出力手段、および、表示装置のいずれか一方に対し、表示中のオブジェクトを所定の消失位置へと消失させる第１の視覚的効果を出力するように指示する。次に、上記連携指示手段は、他方に対し、所定の出現位置からオブジェクトを出現させる第２の視覚的効果を、第１の視覚的効果が出力された後に出力するように指示する。さらに、上記連携指示手段は、基準位置を、自装置の視覚的効果出力手段、および、表示装置の少なくともいずれか一方に指示する。この基準位置は、上記消失位置および上記出現位置の少なくともいずれか一方を特定するための基準となる、端末装置の画面上の位置であり、上記座標処理手段が特定しておいたものである。
【００１２】
上記連携指示手段の指示にしたがって、端末装置の上記視覚的効果出力手段は、例えば、表示装置が、表示装置画面に表示中のオブジェクトを所定の消失位置へと消失させる第１の視覚的効果の出力を開始すると、その後に、端末装置画面の所定の出現位置からオブジェクトを出現させる第２の視覚的効果を出力する。あるいは、例えば、端末装置の上記視覚的効果出力手段は、上記連携指示手段の指示にしたがって、端末装置画面に表示中のオブジェクトを所定の消失位置へと消失させる第１の視覚的効果を出力する。この場合は、表示装置が、上記連携指示手段の指示にしたがって、第１の視覚的効果の出力開始後に、表示装置画面の所定の出現位置からオブジェクトを出現させる第２の視覚的効果を出力することになる。
【００１３】
ここで、端末装置の上記視覚的効果出力手段および表示装置の少なくとも一方が、上記消失位置と上記出現位置とを特定するために基準となる、端末装置画面上の基準位置を認識している。よって、一方の装置が、他方の装置の消失位置（または出現位置）に合わせて視覚的効果を出力することができる。つまり、端末装置と表示装置との間で、視覚的効果の連携がシームレスに引き継がれる。
【００１４】
これにより、一方の画面上の消失位置へとオブジェクトが消失し、続いて、他方の画面上の出現位置からオブジェクトが出現すると、端末装置画面を見ているユーザには、一連のオブジェクトの移動が連続して行われているように見える。
【００１５】
そのため、ユーザは、オブジェクトが一方の装置から他方の装置へと移動したかのように、違和感なく現実味をもって、端末装置画面上で視認することが可能となる。結果として、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現することが可能となる。
【００１６】
上記端末装置の上記視覚的効果出力手段が上記第１の視覚的効果を出力してもよい。
【００１７】
より詳細には、さらに、上記座標処理手段は、オブジェクトが出現する上記表示装置画面上の出現位置を上記基準位置として、上記端末装置画面の座標系において特定し、上記視覚的効果出力手段は、上記端末装置画面上の消失位置にて、上記端末装置画面に表示中のオブジェクトを消失させる視覚的効果を出力し、上記連携指示手段は、上記視覚的効果出力手段に対して、上記座標処理手段によって特定された出現位置を消失位置にしてオブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記表示装置に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示してもよい。
【００１８】
上記構成によれば、上記座標処理手段によって、表示装置の表示装置画面上のオブジェクトの出現位置が、自装置の端末装置画面の座標系において特定される。
【００１９】
上記連携指示手段は、上記視覚的効果出力手段に対して、上記出現位置を基準位置として指示し、その基準位置（表示装置にとっての出現位置）を消失位置にして、オブジェクトを消失させるように指示する。
【００２０】
端末装置の上記視覚的効果出力手段は、上記連携指示手段の指示にしたがって、端末装置画面に表示中のオブジェクトを上記の指示された消失位置へと消失させる第１の視覚的効果を出力する。この場合は、表示装置が、上記連携指示手段の指示にしたがって、第１の視覚的効果の出力後に、表示装置画面の上記出現位置からオブジェクトを出現させる第２の視覚的効果を出力することになる。
【００２１】
ここで、端末装置の上記視覚的効果出力手段は、連携指示手段から指示された基準位置にしたがって、表示装置の上記出現位置を認識することができ、その出現位置と端末装置画面上で見かけ上一致する位置を上記消失位置とすることができる。
【００２２】
よって、端末装置が、表示装置の出現位置に合わせて視覚的効果を出力することができる。つまり、端末装置と表示装置との間で、視覚的効果の連携がシームレスに引き継がれる。ここで、表示装置は、指示されたオブジェクトを指示されたタイミングで固定の出現位置から出現させるという単純な構成でよい。
【００２３】
以上により、ユーザは、オブジェクトが端末装置から表示装置へと移動したかのように、違和感なく現実味をもって、端末装置画面上で視認することが可能となる。結果として、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現することが可能となる。
【００２４】
さらに、上記座標処理手段は、上記表示装置画面の中心を上記基準位置として特定してもよい。
【００２５】
上記構成によれば、上記表示装置が、上記表示装置画面の中心からオブジェクトを出現させる視覚的効果を出力する機能を備えている場合に、表示装置の出現位置と、上記消失位置とを、端末装置画面上で見かけ上一致させることができる。
【００２６】
これにより、表示装置を、指示されたオブジェクトを指示されたタイミングで固定の出現位置（すなわち、表示装置画面の中心）から出現させるという単純な構成とすることができる。
【００２７】
あるいは、上記座標処理手段は、オブジェクトが消失する上記端末装置画面上の消失位置を上記基準位置として、上記表示装置画面の座標系において特定し、上記視覚的効果出力手段は、上記消失位置にて、上記端末装置画面に表示中のオブジェクトを消失させる視覚的効果を出力し、上記連携指示手段は、上記視覚的効果出力手段に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記表示装置に対して、上記第１の視覚的効果の出力開始後に上記座標処理手段によって特定された消失位置を出現位置にして上記オブジェクトを出現させる第２の視覚的効果の出力を指示してもよい。
【００２８】
上記構成によれば、上記座標処理手段によって、端末装置の端末装置画面上のオブジェクトの消失位置が、表示装置画面の座標系において特定される。
【００２９】
上記連携指示手段は、表示装置に対して、上記消失位置を基準位置として指示し、その基準位置（端末装置にとっての消失位置）を出現位置にして、オブジェクトを出現させるように指示する。
【００３０】
端末装置の上記視覚的効果出力手段は、上記連携指示手段の指示にしたがって、端末装置画面に表示中のオブジェクトを所定の消失位置へと消失させる第１の視覚的効果を出力する。この場合は、表示装置が、上記連携指示手段の指示にしたがって、第１の視覚的効果の出力開始後に、上記連携指示手段によって指示された出現位置からオブジェクトを出現させる第２の視覚的効果を出力することになる。
【００３１】
ここで、端末装置の上記視覚的効果出力手段は、指示されたオブジェクトを指示されたタイミングで固定の消失位置から消失させるという単純な構成でよい。
【００３２】
一方、表示装置は、連携指示手段から指示された基準位置にしたがって、端末装置の上記消失位置を認識することができ、その消失位置と端末装置画面上で見かけ上一致する位置を出現位置とすることができる。
【００３３】
よって、表示装置が、端末装置の消失位置に合わせて視覚的効果を出力することができる。つまり、端末装置と表示装置との間で、視覚的効果の連携がシームレスに引き継がれる。
【００３４】
以上により、ユーザは、オブジェクトが端末装置から表示装置へと移動したかのように、違和感なく現実味をもって、端末装置画面上で視認することが可能となる。結果として、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現することが可能となる。
【００３５】
さらに、上記視覚的効果出力手段は、上記端末装置画面の中心へとオブジェクトを消失させる視覚的効果を出力するものであり、上記座標処理手段は、上記端末装置画面の中心を上記基準位置として特定してもよい。
【００３６】
これにより、端末装置を、指示されたオブジェクトを指示されたタイミングで固定の消失位置（すなわち、端末装置画面の中心）へと消失させるという単純な構成とすることができる。
【００３７】
あるいは、上記座標処理手段は、上記基準位置を、上記端末装置画面の座標系において特定するとともに、上記表示装置画面の座標系において特定し、上記視覚的効果出力手段は、上記消失位置にて、上記端末装置画面に表示中のオブジェクトを消失させる視覚的効果を出力し、上記連携指示手段は、上記視覚的効果出力手段に対して、上記座標処理手段によって特定された基準位置を消失位置にしてオブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記表示装置に対して、上記第１の視覚的効果の出力開始後に、上記基準位置を出現位置にして上記オブジェクトを出現させる第２の視覚的効果の出力を指示してもよい。
【００３８】
上記構成によれば、上記座標処理手段によって、消失位置と出現位置とが見かけ上一致する基準位置が、自装置の端末装置画面の座標系において特定されるとともに、表示装置画面の座標系においても特定される。
【００３９】
上記連携指示手段は、上記視覚的効果出力手段に対して、自装置の端末装置画面の座標系において特定された上記基準位置を指示し、表示装置に対して、表示装置画面の座標系において特定された上記基準位置を指示する。
【００４０】
そして、上記連携指示手段は、上記視覚的効果出力手段に対して、上記基準位置（表示装置にとっての出現位置）を消失位置にして、オブジェクトを消失させるように指示する。一方、表示装置に対しては、上記基準位置（端末装置にとっての消失位置）を出現位置にして、オブジェクトを出現させるように指示する。
【００４１】
端末装置の上記視覚的効果出力手段は、上記連携指示手段の指示にしたがって、端末装置画面に表示中のオブジェクトを上記の指示された消失位置へと消失させる第１の視覚的効果を出力する。この場合は、表示装置が、上記連携指示手段の指示にしたがって、第１の視覚的効果の出力開始後に、オブジェクトを指示された出現位置から表示装置画面上に出現させる第２の視覚的効果を出力することになる。
【００４２】
ここで、端末装置の上記視覚的効果出力手段が認識している、連携指示手段から指示された基準位置（消失位置）と、表示装置が認識している、連携指示手段から指示された基準位置（出現位置）とは、端末装置画面上で見かけ上一致する位置である。
【００４３】
よって、端末装置および表示装置は、互いに共有された共通の基準位置に合わせて視覚的効果を出力することができる。つまり、端末装置と表示装置との間で、視覚的効果の連携がシームレスに引き継がれる。
【００４４】
以上により、ユーザは、オブジェクトが端末装置から表示装置へと移動したかのように、違和感なくより一層現実味をもって、端末装置画面上で視認することが可能となる。結果として、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現することが可能となる。
【００４５】
さらに、上記座標処理手段は、上記画像認識手段によって認識された上記画像データ上の表示装置画面の中心と、上記端末装置画面の中心または該端末装置画面に表示中のオブジェクトの中心とを結ぶ線分の中点を、上記基準位置として特定してもよい。
【００４６】
これにより、オブジェクトが端末装置から表示装置へとより自然な動きで移動しているかのような仮想的表現を実現することが可能となる。
【００４７】
なお、上記座標処理手段は、上記消失位置と上記出現位置とが、上記表示装置を撮像した上記画像データ上で一致する位置を上記基準位置として特定してもよい。
【００４８】
あるいは、上記端末装置の上記視覚的効果出力手段が上記第２の視覚的効果を出力してもよい。
【００４９】
より詳細には、上記座標処理手段は、オブジェクトが消失する上記表示装置画面上の消失位置を上記基準位置として、上記端末装置画面の座標系において特定し、上記視覚的効果出力手段は、オブジェクトが出現する上記端末装置画面上の出現位置から、オブジェクトを出現させて表示させる視覚的効果を出力し、上記連携指示手段は、上記表示装置に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記視覚的効果出力手段に対して、上記第１の視覚的効果の出力開始後に上記座標処理手段によって特定された消失位置を出現位置にして上記オブジェクトを出現させる第２の視覚的効果の出力を指示してもよい。
【００５０】
上記構成によれば、上記座標処理手段によって、表示装置の表示装置画面上のオブジェクトの消失位置が、自装置の端末装置画面の座標系において特定される。
【００５１】
上記連携指示手段は、上記視覚的効果出力手段に対して、上記消失位置を基準位置として指示し、その基準位置（表示装置にとっての消失位置）を出現位置にして、オブジェクトを出現させるように指示する。一方、表示装置に対しては、所定の消失位置へとオブジェクトを消失させる第１の視覚的効果の出力を指示する。
【００５２】
表示装置が、上記連携指示手段の指示にしたがって、所定の消失位置に基づいて第１の視覚的効果を出力すると、その後に、端末装置の上記視覚的効果出力手段は、第２の視覚的効果を出力する。ここでは、上記視覚的効果出力手段は、上記連携指示手段の指示にしたがって、端末装置画面上の指示された出現位置からオブジェクトを出現させる。
【００５３】
ここで、端末装置の上記視覚的効果出力手段は、連携指示手段から指示された基準位置にしたがって、表示装置の上記消失位置を認識することができ、その消失位置と端末装置画面上で見かけ上一致する位置を上記出現位置とすることができる。
【００５４】
よって、端末装置が、表示装置の消失位置に合わせて視覚的効果を出力することができる。つまり、端末装置と表示装置との間で、視覚的効果の連携がシームレスに引き継がれる。ここで、表示装置は、指示されたオブジェクトを指示されたタイミングで固定の消失位置へと消失させるという単純な構成でよい。
【００５５】
以上により、ユーザは、オブジェクトが表示装置から端末装置へと移動したかのように、違和感なく現実味をもって、端末装置画面上で視認することが可能となる。結果として、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現することが可能となる。
【００５６】
さらに、上記座標処理手段は、上記表示装置画面の中心を上記基準位置として特定してもよい。
【００５７】
上記構成によれば、上記表示装置が、上記表示装置画面の中心へとオブジェクトを消失させる視覚的効果を出力する機能を備えている場合に、表示装置の消失位置と、上記出現位置とを、端末装置画面上で見かけ上一致させることができる。
【００５８】
これにより、表示装置を、指示されたオブジェクトを指示されたタイミングで固定の消失位置（すなわち、表示装置画面の中心）へと消失させるという単純な構成とすることができる。
【００５９】
あるいは、上記座標処理手段は、オブジェクトが出現する上記端末装置画面上の出現位置を上記基準位置として、上記表示装置画面の座標系において特定し、上記視覚的効果出力手段は、上記出現位置からオブジェクトを出現させて表示させる視覚的効果を出力し、上記連携指示手段は、上記表示装置に対して、上記座標処理手段によって特定された出現位置を消失位置にしてオブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記視覚的効果出力手段に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示してもよい。
【００６０】
上記構成によれば、上記座標処理手段によって、端末装置の端末装置画面上のオブジェクトの出現位置が、表示装置画面の座標系において特定される。
【００６１】
上記連携指示手段は、表示装置に対して、上記出現位置を基準位置として指示し、その基準位置（端末装置にとっての出現位置）を消失位置にして、オブジェクトを消失させるように指示する。一方、端末装置の上記視覚的効果出力手段に対しては、所定の出現位置からオブジェクトを出現させる第２の視覚的効果の出力を指示する。
【００６２】
表示装置が、上記連携指示手段の指示にしたがって、表示装置画面上の指示された出現位置に基づいて第１の視覚的効果を出力することになる。その後に、上記視覚的効果出力手段は、第２の視覚的効果を出力する。ここでは、上記視覚的効果出力手段は、上記連携指示手段の指示にしたがって、所定の出現位置からオブジェクトを出現させる。つまり、端末装置の上記視覚的効果出力手段は、指示されたオブジェクトを指示されたタイミングで固定の出現位置から出現させるという単純な構成でよい。
【００６３】
ここで、表示装置は、連携指示手段から指示された基準位置にしたがって、端末装置の上記出現位置を認識することができ、その出現位置と端末装置画面上で見かけ上一致する位置を、表示装置画面上の消失位置とすることができる。
【００６４】
よって、表示装置が、端末装置の出現位置に合わせて視覚的効果を出力することができる。つまり、端末装置と表示装置との間で、視覚的効果の連携がシームレスに引き継がれる。
【００６５】
以上により、ユーザは、オブジェクトが表示装置から端末装置へと移動したかのように、違和感なく現実味をもって、端末装置画面上で視認することが可能となる。結果として、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現することが可能となる。
【００６６】
さらに、上記視覚的効果出力手段は、上記端末装置画面の中心からオブジェクトを出現させる視覚的効果を出力するものであり、上記座標処理手段は、上記端末装置画面の中心を上記基準位置として特定してもよい。
【００６７】
これにより、端末装置を、指示されたオブジェクトを指示されたタイミングで固定の出現位置（すなわち、端末装置画面の中心）から出現させるという単純な構成とすることができる。
【００６８】
あるいは、上記座標処理手段は、上記基準位置を、上記端末装置画面の座標系において特定するとともに、上記表示装置画面の座標系において特定し、上記視覚的効果出力手段は、上記出現位置から、上記端末装置画面上にオブジェクトを出現させて表示させる視覚的効果を出力し、上記連携指示手段は、上記表示装置に対して、上記座標処理手段によって特定された基準位置を消失位置にしてオブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、上記視覚的効果出力手段に対して、上記第１の視覚的効果の出力開始後に、上記基準位置を出現位置にして上記オブジェクトを出現させる第２の視覚的効果の出力を指示してもよい。
【００６９】
上記構成によれば、上記座標処理手段によって、消失位置と出現位置とが見かけ上一致する基準位置が、自装置の端末装置画面の座標系において特定されるとともに、表示装置画面の座標系においても特定される。
【００７０】
上記連携指示手段は、上記視覚的効果出力手段に対して、自装置の端末装置画面の座標系において特定された上記基準位置を指示し、表示装置に対して、表示装置画面の座標系において特定された上記基準位置を指示する。
【００７１】
そして、上記連携指示手段は、表示装置に対して、上記基準位置（端末装置にとっての出現位置）を消失位置にして、オブジェクトを消失させるように指示する。一方、上記視覚的効果出力手段に対して、上記基準位置（表示装置にとっての消失位置）を出現位置にして、オブジェクトを出現させるように指示する。
【００７２】
表示装置が、上記連携指示手段の指示にしたがって、上記の指示された消失位置に基づいて第１の視覚的効果を出力すると、その後に、端末装置の上記視覚的効果出力手段は、第２の視覚的効果を出力する。ここでは、上記視覚的効果出力手段は、上記連携指示手段の指示にしたがって、端末装置画面上の指示された出現位置からオブジェクトを出現させる。
【００７３】
ここで、表示装置が認識している、連携指示手段から指示された基準位置（消失位置）と端末装置の上記視覚的効果出力手段が認識している、連携指示手段から指示された基準位置（出現位置）とは、端末装置画面上で見かけ上一致する位置である。
【００７４】
よって、端末装置および表示装置は、互いに共有された共通の基準位置に合わせて視覚的効果を出力することができる。つまり、端末装置と表示装置との間で、視覚的効果の連携がシームレスに引き継がれる。
【００７５】
以上により、ユーザは、オブジェクトが表示装置から端末装置へと移動したかのように、違和感なくより一層現実味をもって、端末装置画面上で視認することが可能となる。結果として、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現することが可能となる。
【００７６】
さらに、上記座標処理手段は、上記画像認識手段によって認識された上記画像データ上の表示装置画面の中心または該表示装置画面に表示中のオブジェクトの中心と、上記端末装置画面の中心とを結ぶ線分の中点を、上記基準位置として特定することを特徴としている。
【００７７】
これにより、オブジェクトが端末装置から表示装置へとより自然な動きで移動しているかのような仮想的表現を実現することが可能となる。
【００７８】
本発明の端末装置において、さらに、上記座標処理手段は、上記基準位置を上記表示装置画面上に特定できない場合に、上記表示装置画面上に上記基準位置に代わる上記表示装置画面用の代替基準位置を特定するとともに、上記基準位置を上記端末装置画面上に特定できない場合に、上記端末装置画面上に上記基準位置に代わる上記端末装置画面用の代替基準位置を特定してもよい。
【００７９】
上記構成によれば、各装置は、表示装置画面のいずれかの位置、および、端末装置画面のいずれか位置にて、必ず、オブジェクトが消失（または出現）する視覚的効果を出力することができる。したがって、「オブジェクトが表示装置から端末装置へ（または、端末装置から表示装置へ）移動する」という視覚的効果を、途切れることなく現実味を損なわずにユーザに提供することが可能となる。
【００８０】
上記第１の視覚的効果は、表示中のオブジェクトを縮小しつつ上記消失位置に移動させるという視覚的効果を含んでいてもよい。
【００８１】
または、上記第２の視覚的効果は、上記出現位置から出現させたオブジェクトを所定の大きさに拡大しつつ所定位置に移動させるという視覚的効果を含んでいてもよい。
【００８２】
さらには、上記第１の視覚的効果が表示中のオブジェクトを縮小しつつ上記消失位置に移動させるという視覚的効果を含むとともに、上記第２の視覚的効果が、上記出現位置から出現させたオブジェクトを所定の大きさに拡大しつつ所定位置に移動させるという視覚的効果を含んでいてもよい。
【００８３】
上述の端末装置と、上記端末装置からの指示にしたがって、上記視覚的効果を出力する機能を備えた表示装置とを含む表示システムも本発明の範疇に入る。
【００８４】
本発明の端末装置の制御方法は、上記課題を解決するために、表示装置と通信する端末装置の制御方法であって、上記表示装置は、表示するオブジェクトに対して視覚的変化を付けることにより視覚的効果を出力する機能を備えており、上記表示装置を撮像した画像データから該表示装置の表示装置画面を画像認識する画像認識ステップと、上記画像認識ステップにて認識された上記画像データ上の表示装置画面に基づいて、上記表示装置画面および上記端末装置の端末装置画面の一方における、オブジェクトが視覚的効果によって消失する消失位置、および、他方の画面における、オブジェクトが視覚的効果によって出現する出現位置、の少なくともいずれか一方の基準となる、上記端末装置画面上の基準位置を特定する座標処理ステップと、上記端末装置および上記表示装置の少なくとも一方に対して、上記座標処理ステップにて特定された上記基準位置を指示し、上記端末装置および上記表示装置の一方に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、他方に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示する連携指示ステップと、上記連携指示ステップでの指示にしたがって、上記第１または第２の視覚的効果を出力する視覚的効果出力ステップとを含むことを特徴としている。
【００８５】
なお、上記端末装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記各手段として動作させることにより上記端末装置をコンピュータにて実現させる端末装置の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
【発明の効果】
【００８６】
本発明の端末装置は、上記課題を解決するために、表示装置と通信する端末装置であって、上記表示装置は、表示するオブジェクトに対して視覚的変化を付けることにより視覚的効果を出力する機能を備えており、上記表示装置を撮像した画像データから該表示装置の表示装置画面を画像認識する画像認識手段と、上記画像認識手段によって認識された上記画像データ上の表示装置画面に基づいて、上記表示装置画面および自装置の端末装置画面の一方における、オブジェクトが視覚的効果によって消失する消失位置と、他方の画面における、オブジェクトが視覚的効果によって出現する出現位置とが、上記端末装置画面上で見かけ上一致する基準位置を特定する座標処理手段と、上記視覚的効果を出力する視覚的効果出力手段と、上記視覚的効果出力手段および上記表示装置の少なくとも一方に対して、上記基準位置を指示し、上記視覚的効果出力手段および上記表示装置の一方に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、他方に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示する連携指示手段とを備えていることを特徴としている。
【００８７】
本発明の端末装置の制御方法は、上記課題を解決するために、表示装置と通信する端末装置の制御方法であって、上記表示装置は、表示するオブジェクトに対して視覚的変化を付けることにより視覚的効果を出力する機能を備えており、上記表示装置を撮像した画像データから該表示装置の表示装置画面を画像認識する画像認識ステップと、上記画像認識ステップにて認識された上記画像データ上の表示装置画面に基づいて、上記表示装置画面および上記端末装置の端末装置画面の一方における、オブジェクトが視覚的効果によって消失する消失位置と、他方の画面における、オブジェクトが視覚的効果によって出現する出現位置とが、上記端末装置画面上で見かけ上一致する基準位置を特定する座標処理ステップと、上記端末装置および上記表示装置の少なくとも一方に対して、上記座標処理ステップにて特定された上記基準位置を指示し、上記端末装置および上記表示装置の一方に対して、オブジェクトを消失させる第１の視覚的効果の出力を指示するとともに、他方に対して、上記第１の視覚的効果の出力開始後に上記オブジェクトを出現させる第２の視覚的効果の出力を指示する連携指示ステップと、上記連携指示ステップでの指示にしたがって、上記第１または第２の視覚的効果を出力する視覚的効果出力ステップとを含むことを特徴としている。
【００８８】
したがって、複数の装置を連携させて、現実味をより一層深めたオブジェクトの仮想的表現を実現することが可能となる。
【図面の簡単な説明】
【００８９】
【図１】本発明のタブレットの要部構成を示す機能ブロック図、および、本発明のテレビの要部構成を示す機能ブロック図である。
【図２】本発明の表示システムの概要を示す図である。
【図３】本発明のタブレット背面の外観を示す図である。
【図４】本発明のタブレットのハードウェア構成を示すブロック図である。
【図５Ａ】タブレットの画像認識部および座標処理部の動作を説明する図である。
【図５Ｂ】タブレットの画像認識部および座標処理部の動作を説明する図である。
【図６Ａ】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトを説明する図である。
【図６Ｂ】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトを説明する図である。
【図７】タブレットおよびテレビの動作タイミングを示すタイミングチャートである。
【図８】タブレットおよびテレビの処理の流れを示すフローチャートである。
【図９】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトの他の例を説明する図である。
【図１０】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトの他の例を説明する図である。
【図１１】本発明のタブレットの要部構成を示す機能ブロック図、および、本発明のテレビの要部構成を示す機能ブロック図である。
【図１２】タブレットの画像認識部および座標処理部の動作を説明する図である。
【図１３】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトを説明する図である。
【図１４】タブレットおよびテレビの処理の流れを示すフローチャートである。
【図１５】中心ＴＣに代わる基準点を特定するときの座標処理部の動作を説明する図である。
【図１６】タブレットの画像認識部および座標処理部の動作を説明する図である。
【図１７】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトを説明する図である。
【図１８】タブレットおよびテレビの処理の流れを示すフローチャートである。
【図１９】本発明の表示システムの概要を示す図である。
【図２０】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトを説明する図である。
【図２１】タブレットおよびテレビの処理の流れを示すフローチャートである。
【図２２】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトを説明する図である。
【図２３】タブレットおよびテレビの処理の流れを示すフローチャートである。
【図２４】タブレットおよびテレビのそれぞれのエフェクト出力部によって出力されるエフェクトを説明する図である。
【図２５】タブレットおよびテレビの処理の流れを示すフローチャートである。
【図２６】タブレットのエフェクト出力部によって出力されるエフェクトの他の例を説明する図である。
【発明を実施するための形態】
【００９０】
≪実施形態１≫
本発明の実施形態について、図１〜図１０に基づいて説明すると以下の通りである。なお、以下の図面において同一または相当する部分には、同一の参照符号を付すものとし、それらの説明は重複して行なわない。また、図面における長さ、大きさ、幅などの寸法関係は、図面の明瞭化と簡略化のために適宜に変更されており、実際の寸法を表してはいない。
【００９１】
本発明の表示システムは、互いに通信可能な複数の装置によって構成されている。複数の装置は、いずれもオブジェクトを表示する機能（表示部、表示画面）を備えている。複数の装置とは、１つは、連携表示を制御する本発明に係る端末装置であり、もう１つは、当該端末装置の制御下で、ともに連携表示を実行する表示装置である。表示システムにおいて、表示装置は、１または複数存在する。端末装置は、他に端末装置が存在する場合には、その端末装置に対して、表示装置として機能してもよい。
【００９２】
以下で説明する実施形態では、一例として、本発明の端末装置は、スマートフォン、タブレットＰＣなどの、いわゆるタブレット端末（以下、単にタブレットと称する）であり、表示装置は、デジタルテレビ（以下、単にテレビと称する）である。しかし、本発明の端末装置および表示装置は、タブレットおよびテレビに限定されず、上述の条件を満たすあらゆる情報処理装置に適用することが可能である。
【００９３】
〔表示システム概要〕
図２は、本実施形態における表示システムの概要を示す図である。図２に示すとおり、本発明の表示システムは、少なくとも１台の端末装置（ここでは、タブレット１００）と、１または複数の表示装置（ここでは、テレビ２００、ノートパソコン２００ａ、および、デジタルフォトフレーム２００ｂ）とを含む構成である。タブレット１００と、各表示装置とは、ＩｒＤＡ、ＩｒＳＳなどの赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信、ＷｉＦｉ（登録商標）通信、非接触型ＩＣカードなどの適宜の無線通信手段を介して、互いに通信可能である。本実施形態では、図示しないアクセスポイントおよび家庭内ＬＡＮ（Local Area Network）を介して、各装置は、互いに無線通信を行うことができる。
【００９４】
以下では、本発明の表示装置としての構成および機能について、テレビ２００を例に挙げて説明するが、他の表示装置も同様の構成および機能を備えているものとする。テレビ２００は、表示装置として、オブジェクトを表示するための表示部４２を備えている。
【００９５】
タブレット１００は、いわゆる拡張現実感（ＡＲ；Augmented Reality）を実現する機能を備えている。具体的には、例えば図３に示すように、タブレット１００は、背面に設けられた撮像部１３によって撮像された周辺環境の画像データ（ライブビュー画像）をリアルタイムで表示部１２に表示する。そして、タブレット１００は、画像データから認識された通信相手の装置と、無線通信手段を介して識別した各装置との対応付けを行って、画像データ内の通信相手となる装置に関する装置関連情報を重畳表示する。図２に示す例では、タブレット１００は、表示部１２にライブビュー画像を表示するとともに、例えば、当該ライブビュー画像に写る各装置の装置関連情報を重畳させてもよい。なお、装置関連情報を重畳させる構成は、本発明のタブレット１００において必須の構成ではない。ライブビュー画像に写る各装置とは、図２に示す例では、テレビ２００、ＢＤ（Blu-ray Disc）レコーダおよびノートパソコン２００ａである。装置関連情報は、ここでは、装置名であるが、他にも、その装置が実行できる機能を一覧表示したメニューリストなどが装置関連情報として重畳されてもよい。上記のＡＲを実現するための技術は、公知の適宜の技術を採用することができる。
【００９６】
なお、図２は、撮像部１３がタブレット１００の奥に広がる現実空間を撮影して得た画像データを、表示部１２に表示している例を示している。したがって、表示部１２に表示されている画像データと、奥に広がる現実空間とは、ユーザから見て必ずしもシームレスにつながらない。一方、タブレット１００が透明の表示部１２を備えており、表示部１２の奥に広がる現実空間を透かして見ることも考えられる。この場合には、タブレット１００の前面に設けられた別の撮像部（フロントカメラ）によって、ユーザの目の位置を検出し、ユーザが透かして見ている映像を、撮像部１３（メインカメラ）の映像を併せて用いて推定し、現実空間にマッチしたオブジェクトの表示を実現してもよい。
【００９７】
ユーザが、例えば、表示部１２に表示された１台の装置（例えばテレビ２００）を、入力部１１をタッチするなどして選択したとする。このとき、タブレット１００は、テレビ２００と通信して、テレビ２００が処理可能なコンテンツの一覧を、オブジェクトの一覧として表示部１２に表示することができる。例えば、テレビ２００が処理可能なコンテンツとは、テレビ２００にて再生表示可能な動画コンテンツであって、動画コンテンツのアイコンが、図２に示すオブジェクト１としてユーザに選択可能に表示される。このオブジェクト１は、タブレット１００がローカルに保存する動画コンテンツを表すアイコンであってもよいし、テレビ２００のＨＤＤまたはテレビ２００が接続するＢＤレコーダに記憶されている動画コンテンツを表すアイコンであってもよい。なお、タブレット１００は、すべてのオブジェクトを一度に表示部１２に表示しきれない場合には、別のオブジェクトを表示させるための矢印を表示し、ユーザにタップさせてもよい。
【００９８】
ユーザは、表示部１２に表示された所望のオブジェクト１をタッチするなどの簡単な操作を行うことにより、選択されたオブジェクト１に対応する動画コンテンツをテレビ２００に再生させることができる。つまり、ユーザは、自身が手元に保持しているタブレット１００を操作するだけで、奥にあるテレビ２００に所望の処理を実行させることができる。
【００９９】
上述の例では、手元のタブレット１００にて選択したオブジェクト１に対応する動画コンテンツが、奥にあるテレビ２００にて再生される。そこで、タブレット１００およびテレビ２００は、連携して、オブジェクト１が操作されたとき、オブジェクト１があたかもタブレット１００からテレビ２００へと物理的に移動したかのように見せる視覚的効果をオブジェクト１に付与する。これにより、ユーザは、自分が行った操作に伴う結果をより現実味のある表現によって確認することができる。つまり、ユーザは、まるで、オブジェクト１に対応する動画コンテンツそのものが、タブレット１００からテレビ２００へと物理的に移動したかのような感覚を得ることができる。
【０１００】
〔タブレットのハードウェア構成〕
図４は、本実施形態におけるタブレット１００のハードウェア構成を示すブロック図である。タブレット１００は、図４に示すとおり、少なくとも、制御部１０、入力部１１、表示部１２、撮像部１３、通信部１５および記憶部１９を備えている。さらに、タブレット１００は、本来備わっている機能を実現するために、外部インターフェース１４、音声出力部１７、および、音声入力部１８などを備えていてもよい。
【０１０１】
また、タブレット１００がスマートフォン、タブレットＰＣなどと同等の多機能携帯通信端末である場合には、ここでは省略したが、タブレット１００は、通話処理部、放送受像部（チューナ・復調部など）、ＧＰＳ、センサ（加速度センサ、傾きセンサなど）、および、電源を入れるスイッチ・キーなどの操作部、他、スマートフォンが標準的に備えている各種部品を備えていてもよい。その他にも、タブレット１００について、タブレットＰＣの一般的な機能であって、本発明に直接関係の無い部分については記載を省略した。
【０１０２】
入力部１１は、ユーザがタブレット１００を操作するための指示信号を、タッチパネルを介して入力するためのものである。入力部１１は、タッチ面とタッチセンサとで構成されている。タッチ面は、指示体（表示部１２の画面位置を指示するもの、ここでは、例えば、指またはペンなど）の接触を受け付けるものである。タッチセンサは、指示体とタッチ面との間の接触／非接触（接近／非接近）、および、その接触（接近）位置を検知するためものである。タッチセンサは、指示体とタッチ面との接触／非接触を検知できればどのようなセンサで実現されていてもかまわない。例えば、圧力センサ、静電容量センサ、光センサなどで実現される。
【０１０３】
表示部１２は、タブレット１００が情報処理するオブジェクト、撮像部１３が撮像した周辺環境の画像データ（ライブビュー画像）、および、ユーザがタブレット１００を操作するためのＧＵＩ（Graphical User Interface）画面などを表示するものである。表示部１２は、例えば、ＬＣＤ（液晶ディスプレイ）などの表示装置で実現される。
【０１０４】
本実施形態では、入力部１１と表示部１２とは一体に成形されており、これらがタッチパネルを構成している。
【０１０５】
例えば、本発明のタブレット１００のタッチパネルを投影型静電容量方式のタッチパネルで実現する場合、具体的には、上記タッチセンサは、ＩＴＯ（Indium Tin Oxide）などによるマトリクス状の透明電極パターンを、ガラス、プラスチックなどの透明基板上に形成したものとなる。タッチセンサに指示体（ユーザの指またはペン等）が接触または接近すると、その付近の複数の透明電極パターンにおける静電容量が変化する。従って、制御部１０は、上記透明電極パターンの電流または電圧の変化を検出することにより、上記指示体が接触または接近した位置を検出することができる。
【０１０６】
以下では、「接触」という用語は、指示体とタッチ面とが完全に接する（接している）状態のみならず、指示体とタッチ面とが、タッチセンサが検知可能な程度に接近する（接近している）状態も含んでいる。
【０１０７】
撮像部１３は、動画または静止画を撮像するものであり、レンズ、ミラー機構、撮像素子、Ａ／Ｄコンバータ、画像表示回路などの各種機構および回路で構成されている。なお、ライブビュー画像は、上記レンズを介して上記撮像素子において受光された像として取得される。本実施形態では、図３に示すとおり、撮像部１３は、タブレット１００の背面（タッチパネルがある側と反対の面）に設けられる。
【０１０８】
外部インターフェース１４は、外部の装置をタブレット１００に接続するためのインターフェースである。外部インターフェース１４は、例えば、これに限定されないが、外付けの記録媒体（メモリカードなど）を挿し込むためのソケット、ＨＤＭＩ（High Definition Multimedia Interface）端子、ＵＳＢ（Universal Serial Bus）端子などで実現される。タブレット１００の制御部１０は、外部インターフェース１４を介して、外部の装置とデータの送受信を行うことができる。図２および図３には図示していないが、外部インターフェース１４は、タブレット１００の側面または正面のタッチパネルの面以外の部分などに設けられる。
【０１０９】
通信部１５は、通信網を介して外部の装置と通信を行うものである。通信部１５は、通信網を介して、各種通信端末に接続し、タブレット１００と通信端末との間でのデータの送受信を実現する。さらに、タブレット１００が、携帯通信端末である場合には、通信部１５は、携帯電話回線網を介して、音声通話データ、電子メールデータなどを、他の装置との間で送受信する。
【０１１０】
さらに、通信部１５は、近距離無線通信部として実現されてもよい。この場合、近距離無線通信部としての通信部１５は、無線で近距離の外部の装置との通信を行う。通信部１５は、特に限定されないが、ＩｒＤＡ、ＩｒＳＳなどの赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信、ＷｉＦｉ（登録商標）通信、非接触型ＩＣカードのいずれかの無線通信技術を実現するものであってもよいし、これらの技術を複数実現するものであってもよい。タブレット１００の制御部１０は、通信部１５を介して、タブレット１００の周辺にある機器と通信し、それらの機器とデータの送受信を行うことができる。
【０１１１】
音声出力部１７は、タブレット１００が処理した音声データを、音声として出力するものであり、スピーカ、ヘッドフォン端子およびヘッドフォン等により実現される。
【０１１２】
音声入力部１８は、タブレット１００外部で発生した音声の入力を受け付けるものであり、マイク等により実現される。
【０１１３】
タブレット１００は、入力部１１とは別に、図示しない、操作部を備えていてもよい。操作部は、ユーザがタブレット１００に指示信号を直接入力するためのものである。例えば、操作部は、ボタン、スイッチ、キー、ジョグダイアルなどの適宜の入力機構で実現される。例えば、操作部は、タブレット１００の電源のオン／オフを行うスイッチである。なお、図２および図３には図示していないが、操作部は、タブレット１００の側面または正面のタッチパネルの面以外の部分などに設けられる。
【０１１４】
記憶部１９は、タブレット１００の制御部１０が実行する（１）制御プログラム、（２）ＯＳプログラム、（３）制御部１０が、タブレット１００が有する各種機能を実行するためのアプリケーションプログラム、および、（４）該アプリケーションプログラムを実行するときに読み出す各種データを記憶するものである。あるいは、（５）制御部１０が各種機能を実行する過程で演算に使用するデータおよび演算結果等を記憶するものである。例えば、上記の（１）〜（４）のデータは、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable ROM）、ＥＥＰＲＯＭ（Electrically EPROM）、ＨＤＤ（Hard Disc Drive）などの不揮発性記憶装置に記憶される。例えば、上記の（５）のデータは、ＲＡＭ（Random Access Memory）などの揮発性記憶装置に記憶される。どのデータをどの記憶装置に記憶するのかについては、タブレット１００の使用目的、利便性、コスト、物理的な制約などから適宜決定される。
【０１１５】
制御部１０は、タブレット１００が備える各部を統括制御するものである。制御部１０は、例えば、ＣＰＵ（central processing unit）などで実現され、タブレット１００が備える機能は、制御部１０としてのＣＰＵが、ＲＯＭなどに記憶されているプログラムを、ＲＡＭなどに読み出して実行することで実現される。制御部１０が実現する各種機能については、別図を参照しながら後述する。
【０１１６】
〔タブレットの機能、テレビの機能〕
図１は、本実施形態におけるタブレット１００の要部構成を示す機能ブロック図、および、本実施形態におけるテレビ２００の要部構成を示す機能ブロック図である。
【０１１７】
図１に示すとおり、タブレット１００の制御部１０は、機能ブロックとして、画像認識部２０、座標処理部２１、エフェクト出力部２２、操作受付部２３および連携指示部２４を備えている構成である。なおここでは図示しないが、制御部１０は、重畳処理部など、ＡＲを実現するために必要な各部を備えているものとする。その他にも、タブレット１００について、タブレットＰＣの一般的な機能であって、本発明に直接関係の無い部分については記載を省略した。
【０１１８】
テレビ２００は、図１に示すとおり、ハードウェア構成として、少なくとも、制御部４０、記憶部４１、表示部４２、無線通信部４３を備えている。そして、制御部４０は、機能ブロックとして、連携処理部５０、オブジェクト取得部５１およびエフェクト出力部５２を備えている構成である。その他にも、テレビ２００は、デジタルテレビの一般的な機能を備えているが、このうち本発明に直接関係の無い部分については記載を省略した。
【０１１９】
上述した制御部１０および制御部４０の各機能ブロックは、ＣＰＵ（Central Processing Unit）が、ＲＯＭ（Read Only Memory）等で実現された不揮発性記憶装置に記憶されているプログラムを不図示のＲＡＭ（Random Access Memory）等に読み出して実行することで実現できる。
【０１２０】
タブレット１００の機能について、画像認識部２０は、撮像部１３によって取得された周辺環境のライブビュー画像または静止画について画像認識処理を実行するものである。本実施形態では、画像認識部２０は、特に、通信相手としてタブレット１００が認識している表示装置（例えば、テレビ２００）の表示画面の領域を特定する。すなわち、画像認識部２０は、テレビ２００の表示部４２の表示画面の領域（以下、テレビ領域４２０と称する）を特定する。撮像部１３からライブビュー画像が供給される場合、画像認識部２０は、テレビ領域４２０をリアルタイムで追尾してもよい。あるいは、画像認識部２０は、操作受付部２３が所定の操作を受け付けたときなど、特定のイベントが発生したタイミングにおいて取得された静止画について、テレビ領域４２０を検出してもよい。
【０１２１】
なお、タブレット１００が、テレビ領域４２０を特定する方法として、タブレット１００は、通信相手から外観に関する特徴情報を受け取り、それに基づいて、ライブビュー画像から通信相手の表示画面の領域を特定してもよい。特に、通信相手がテレビ２００などのように矩形の表示画面で実現された表示部を備えている場合は、タブレット１００は、矩形の枠をマーカとして検出するようにしてもよい。
【０１２２】
座標処理部２１は、対象の領域または点を、複数の座標系におけるそれぞれの座標値によって特定するものである。
【０１２３】
複数の座標系とは、具体的には例えば、タブレット１００は、タッチパネル（表示部１２）の表示画面の領域（以下、タブレット領域１２０と称する）の左上端を原点（Ｘ、Ｙ）＝（０、０）とする二次元の座標系を記憶部１９において保持している。この座標系をタブレット座標系と称する。テレビ２００は、テレビ領域４２０の左上端を原点（Ｘ、Ｙ）＝（０、０）とする二次元の座標系を記憶部４１において保持している。この座標系をテレビ座標系と称する。
【０１２４】
また、対象の領域または点とは、具体的には、画像認識部２０が特定したテレビ領域４２０、テレビ領域４２０の中心、テレビ領域４２０の左上端、タブレット領域１２０、タブレット領域１２０の中心、および、タブレット領域１２０の左上端、などであるが、これに限定されない。
【０１２５】
座標処理部２１は、画像認識部２０によって特定されたテレビ領域４２０に基づいて、テレビ座標系の各点を、自身のタブレット座標系における座標値で特定することが可能である。反対に、座標処理部２１は、タブレット座標系における各点を、テレビ座標系における座標値に変換することが可能である。
【０１２６】
したがって、タブレット１００およびテレビ２００は、各々自身が保持する座標系において対象の領域または点の位置を認識することができるので、１つの対象の位置情報を２装置間で共有することができる。例えば、座標処理部２１は、画像データに写るテレビ領域４２０の原点および中心の座標値を、タブレット座標系において特定し、テレビ領域４２０の位置および中心を認識することができる。
【０１２７】
さらに、座標処理部２１は、テレビ領域４２０の原点（左上端）または中心が上記画像データに含まれていなくても、上記原点または中心の位置をタブレット座標系において特定することができる。座標処理部２１は、タブレット１００とテレビ２００との間の距離、撮像部１３のレンズのズーム率、ならびに、テレビ領域４２０のアスペクト比およびインチ数に基づいて、画像データには映らなかったテレビ領域４２０の形状を推測し、上記原点を求める。上記距離は、図示しない公知の測距部から取得されればよい。測距部は、例えば、近赤外光やツインカメラ等によって実現される。テレビ領域４２０のアスペクト比およびインチ数（または、テレビ領域４２０の縦横の実寸サイズ）は、予めタブレット１００の記憶部１９に登録されているものを読み出せばよい。
【０１２８】
多くの場合、タブレット１００の撮像部１３の撮影範囲にテレビ２００の全体が含まれることになり、表示部１２に表示されるライブビュー画像には、テレビ２００全体が写り込む。当然このような場合には、テレビ領域４２０の原点（左上端）または中心はもとより、テレビ領域４２０の全域がライブビュー画像から特定されるので、そのような場合には、座標処理部２１は、上記距離、アスペクト比およびズーム率を考慮することなく、単に、ライブビュー画像から、テレビ領域４２０、テレビ領域４２０の原点（左上端）、または、中心を特定するだけでよい。
【０１２９】
本実施形態では、座標処理部２１は、少なくとも、画像データに写されたテレビ２００のテレビ領域４２０に基づいて、テレビ領域４２０の中心座標をタブレット座標系における座標値にて求める機能を有している。
【０１３０】
エフェクト出力部２２は、連携指示部２４の制御にしたがい、指定されたオブジェクトに対して視覚的効果を付与しオブジェクトを表示するものである。以下では視覚的効果をエフェクトと称する。例えば、オブジェクトに対して付与されるエフェクトとしては、ある始点から終点に向かってオブジェクト１が移動するアニメーション、オブジェクトが所定の形状から別の形状へと変形するアニメーション、オブジェクトのサイズが拡大または縮小するアニメーション、オブジェクトの透明度または色が変化するアニメーションなどが含まれるが、エフェクトは、視覚的に認められるオブジェクトのあらゆる変化を含む。また、エフェクト出力部２２は、同時に、複数種類のエフェクトを一つのオブジェクトに付与してもよい。
【０１３１】
本実施形態では、エフェクト出力部２２は、少なくとも、座標処理部２１によって指定されたテレビ領域４２０の中心座標を基準位置として、オブジェクトに対して、移動および拡縮のエフェクトを付与する機能を有している。具体的には、上記中心座標に向かってオブジェクトが徐々に縮小し、該中心座標にて消失するというエフェクトをオブジェクトに付与する。この場合、中心座標が消失位置すなわち基準位置を指す。本実施形態では、オブジェクトを消失させるエフェクトとは、オブジェクトを消失点に向かって縮小するエフェクトであるが、これは一例であって、エフェクト出力部２２の構成を限定するものではない。エフェクト出力部２２は、オブジェクトの色を薄くしたり、透明度を上げたりすることによってオブジェクトを消失させるエフェクトを実現してもよい。また、本実施形態では、エフェクト出力部２２が、オブジェクトを点（消失点）にまで縮小することにより所定の位置にてオブジェクトを消失させているが、これも一例である。エフェクト出力部２２は、オブジェクトの形状を維持したまま所定のサイズまで縮小して消去することにより、オブジェクトを消失させるエフェクトを実現してもよい。この場合消失位置（基準位置）は、点ではなく領域で表される。すなわち、本実施形態では、一例として、座標処理部２１は、消失位置すなわち基準位置を、消失点（基準点）によって特定するが、座標処理部２１の構成はこれに限定されない。座標処理部２１は、オブジェクトが消失する消失位置を面すなわち領域によって特定してもよい。本明細書において、消失位置の用語は、消失点および消失領域の両方の意味で用いられ、基準位置の用語は、基準点および基準領域の両方の意味で用いられる。
【０１３２】
操作受付部２３は、タッチパネルに対するユーザ操作を受け付けるものである。操作受付部２３は、入力部１１のタッチセンサから出力される信号を取得して、表示部１２に表示されているどのオブジェクトに対してどのような操作（タップ、フリック、ピンチ、ドラッグなど）がなされたのかを認識する。本実施形態では、操作受付部２３は、テレビ２００に処理させるオブジェクト（例えば、オブジェクト１）が選択されたことを認識し、その旨をタブレット１００の各部（座標処理部２１、エフェクト出力部２２、連携指示部２４など）に伝達する。
【０１３３】
連携指示部２４は、タブレット１００のエフェクト出力部２２と、テレビ２００のエフェクト出力部５２との連携を制御するものである。具体的には、連携指示部２４は、どのオブジェクトに対してどのエフェクトをいつ出力するのかを、自装置のエフェクト出力部２２、および、テレビ２００に対して指定する。つまり、連携指示部２４は、エフェクト出力部２２およびエフェクト出力部５２が、それぞれエフェクトを開始するタイミングを制御する。
【０１３４】
本実施形態では、連携指示部２４は、タブレット１００のエフェクト出力部２２がオブジェクトに対してエフェクトの出力を終了した時点で、テレビ２００のエフェクト出力部５２がエフェクトの出力を開始するように、エフェクト開始のタイミングをテレビ２００に対して指示する機能を少なくとも有する。また、テレビ２００に対して、連携指示部２４は、操作受付部２３が特定したユーザによって選択されたオブジェクトの情報、すなわち、オブジェクトの指定情報をテレビ２００に送信する機能を有する。
【０１３５】
例えば、デュレーションが合計２秒間で、前半１秒間をエフェクト出力部２２が、後半１秒間をエフェクト出力部５２が担当すると決まっているエフェクトが記憶部１９に記憶されているとする。連携指示部２４は、操作受付部２３がユーザ操作（オブジェクト１の選択）を受け付けたとき、上記エフェクトのシナリオにしたがい、エフェクト出力部２２に対してすぐにオブジェクト１のエフェクトを出力するように指示する。それと同時に、連携指示部２４は、テレビ２００に対しては、コマンド受信から１秒後にエフェクトを開始するという命令が含まれたエフェクト開始コマンドと、上記オブジェクト１を指定する指定情報を送信する。
【０１３６】
これにより、エフェクト出力部２２とエフェクト出力部５２との間でエフェクトが円滑に引き継がれ、違和感のないシームレスなエフェクトを演出することが可能となる。
【０１３７】
なお、連携指示部２４は、指定されたオブジェクトに対応するコンテンツがテレビ２００に保存されておらず、タブレット１００の記憶部１９に保存されている場合には、当該コンテンツの指定情報ではなく、コンテンツの本体データ（例えば、動画コンテンツそのもの）をテレビ２００に対して送信する。なお、本体データの容量または通信事情などによって、エフェクトの所定のデュレーション内（例えば、１秒以内）に本体データ（またはサムネイル等）の送信完了が間に合わない場合も考えられる。このような場合に対処するため、連携指示部２４は、固定のタイミングを指定（例えば、○秒後に表示、など）するだけでなく、データ容量または転送速度を加味して、エフェクト開始タイミングを指定してもよい。あるいは、連携指示部２４は、本体データの転送が実際に完了した後、または転送完了時点で、エフェクト開始を指示してもよい。上記の構成によれば、見かけ上オブジェクトの移動の表現が完了しているにもかかわらず、移動先では、オブジェクトに対応するコンテンツの再生が行われない、と言った不自然な状況を回避することができる。
【０１３８】
テレビ２００の機能について、連携処理部５０は、無線通信部４３を介して、連携指示部２４からの指示を受信し、連携指示部２４の指示にしたがって、テレビ２００側におけるエフェクトの連携を制御するものである。
【０１３９】
連携指示部２４から送信される内容は、オブジェクトの指定情報（オブジェクト本体のデータ）、および、エフェクト開始コマンドである。連携処理部５０は、オブジェクトの指定情報によって指定されたオブジェクトを取得するようにオブジェクト取得部５１を制御する。また、連携処理部５０は、エフェクト開始コマンドによって指定されたタイミングでエフェクトが開始されるようにエフェクト出力部５２を制御する。
【０１４０】
オブジェクト取得部５１は、連携処理部５０の制御にしたがって、指定されたオブジェクトを取得するものである。指定されたオブジェクトがテレビ２００の記憶部４１に保存されている場合には、オブジェクト取得部５１は、指定されたオブジェクトを記憶部４１から取得する。指定されたオブジェクトが通信可能な他の装置に保存されている場合には、無線通信部４３を介して指定されたオブジェクトを上記他の装置から取得する。指定されたオブジェクトがタブレット１００から直接送信された場合には、それを取得する。
【０１４１】
エフェクト出力部５２は、連携処理部５０の制御にしたがって、指定されたオブジェクト、すなわち、オブジェクト取得部５１によって取得されたオブジェクトに対してエフェクトを付与し出力するものである。
【０１４２】
本実施形態では、エフェクト出力部５２は、少なくとも、指定されたオブジェクトを、自装置のテレビ領域４２０の中心から出現させて拡大して表示するエフェクトを出力する機能を有している。
【０１４３】
本実施形態では、オブジェクトを出現させるエフェクトとは、オブジェクトを出現点から出現させて拡大するエフェクトであるが、これは一例であって、エフェクト出力部５２の構成を限定するものではない。エフェクト出力部５２は、オブジェクトの色を濃くしたり、透明度を下げたりすることによってオブジェクトを出現させるエフェクトを実現してもよい。また、本実施形態では、エフェクト出力部５２が、オブジェクトを点（出現点）から拡大することにより所定のサイズおよび所定の位置にオブジェクトを表示しているが、これも一例である。エフェクト出力部５２は、オブジェクトの形状が維持された状態からスタートして所定のサイズまで拡大して表示することにより、オブジェクトを出現させるエフェクトを実現してもよい。この場合、出現位置（基準位置）は、点ではなく領域で表される。すなわち、本実施形態では、一例として、出現位置すなわち基準位置は、出現点（基準点）によって特定されるが、テレビ２００の構成はこれに限定されない。テレビ２００は、オブジェクトが出現する出現位置を面すなわち領域によって特定してもよい。本明細書において、出現位置の用語は、出現点および出現領域の両方の意味で用いられ、基準位置の用語は、基準点および基準領域の両方の意味で用いられる。
【０１４４】
〔処理フロー〕
次に、図５〜図８を参照しながら、具体例を挙げて、上述の各部の動作を説明する。
【０１４５】
図５Ａおよび図５Ｂは、画像認識部２０および座標処理部２１の動作を説明する図である。なお、図面に示すタブレット領域１２０、テレビ領域４２０および他の領域、ならびに、それぞれの領域内外に示される各点は、タブレット１００またはテレビ２００において認識されている情報であって、実際のタブレット１００の表示部１２およびテレビ２００の表示部４２の物理的な位置関係を反映するものではない。
【０１４６】
図６Ａおよび図６Ｂは、エフェクト出力部２２およびエフェクト出力部５２によって出力されるエフェクトを説明する図である。
【０１４７】
図７は、タブレット１００およびテレビ２００の動作タイミングを示すタイミングチャートである。
【０１４８】
図８は、タブレット１００およびテレビ２００の処理の流れを示すフローチャートである。
【０１４９】
例えば、図２に示すとおり、タブレット１００は、表示部１２にオブジェクト１を表示する（図８のＳ１０１）。ここでは、一例として、タブレット１００の通信相手はテレビ２００である。タブレット１００は、その通信相手であるテレビ２００で処理可能なコンテンツを予め把握しており、そのコンテンツに対応するオブジェクト１だけを表示部１２に表示してもよい。
【０１５０】
あるいは、タブレット１００は、テレビ２００が処理可能かどうかに関係なく、あらゆるコンテンツのオブジェクト１を表示部１２に表示してもよい。ここで、テレビ２００が処理できないコンテンツのオブジェクト１が選択された場合には、各装置は以下のように動作する。例えば、タブレット１００がテレビ２００に対して転送対象のオブジェクトを指定したら、テレビ２００はタブレット１００に対して処理不可の応答を返す。このような応答を受け取ったタブレット１００は、自装置側では、オブジェクトがテレビに向かって移動するエフェクトを実行するが、テレビ２００に対しては、オブジェクトがはじかれたり、跳ね返ったりするようなエフェクトを実行させることが考えられる。
【０１５１】
撮像部１３にて撮像されたライブビュー画像がタブレット領域１２０のベースに表示されており、画像認識部２０は、通信相手であるテレビ２００のテレビ領域４２０を追尾している（Ｓ１０２）。
【０１５２】
ここで、テレビ２００で処理されるオブジェクト１（図２の表示部１２の左下のオブジェクト１）がタップされたとする（Ｓ１０３においてＹＥＳ）。
【０１５３】
タブレット１００の画像認識部２０は、タップされたタイミングで撮像部１３によって取り込まれていた画像データにおいて、通信相手であるテレビ２００のテレビ領域４２０を特定している。なお、タップされたとき、上記画像データにおいてテレビ領域４２０の全域が写っていても、テレビ領域４２０の一部の領域が欠けていても、画像認識部２０は、仮想的なテレビ領域４２０を特定することができる。なお、これ以降、タブレット１００側にてエフェクトが出力される間は、表示部１２のベースに表示される画像データは、タップされたタイミングにおける画像データ（静止画）が表示されてもよい。そして、タブレット１００は、タブレット１００側でのエフェクトの出力が完了した後に、表示部１２に表示される内容を、上記静止画からその時点でのライブビュー画像に戻す。上記構成によれば、実際に動画などのコンテンツデータ本体を送る場合など、エフェクトを長時間表示する必要がある際に、ユーザがタブレット１００を動かしたために生じる、背景の環境映像とオブジェクトの移動の軌跡との不一致を回避することができる。逆の言い方をすれば、上記不一致が起こらないように、エフェクトの間、ユーザがタブレット１００の姿勢を変えずに保持し続ける必要がなくなる。また、ライブビュー画像にエフェクトを重畳させる必要がなくなるので、エフェクト表示時の処理負荷を大幅に抑えられるという効果がある。
【０１５４】
座標処理部２１は、タブレット領域１２０に表示された画像データの位置、および、画像データ上に特定されたテレビ領域４２０の位置に基づいて、タブレット座標系（図５Ａまたは図５Ｂのタブレット領域１２０上）におけるテレビ領域４２０の座標位置を特定する。座標処理部２１は、本実施形態では、少なくとも、テレビ領域４２０の中心ＶＣの中心座標（Ｘｖｃ、Ｙｖｃ）を特定すればよい（Ｓ１０４）。
【０１５５】
ここで、タップされたとき、上記画像データにおいてテレビ領域４２０の全域が写っている場合には、座標処理部２１は、図５Ａに示すとおり、画像認識部２０の画像認識結果に基づいて、テレビ領域４２０全域をすぐにタブレット座標系にプロットすることができる。
【０１５６】
一方、タップされたとき、テレビ領域４２０の一部の領域が欠けて写っている場合には、図５Ｂに示すとおり、まず、写っている部分だけがタブレット座標系にプロットされる（図５Ｂの実線の領域）。換言すれば、座標処理部２１は、テレビ領域４２０とタブレット領域１２０とが重なっている部分、つまり、画像データにおいて実際に撮影された部分についてのみ、画像認識部２０の画像認識結果に基づいて、テレビ領域４２０をタブレット座標系にプロットすることができる。さらに、座標処理部２１は、プロットされたテレビ領域４２０の大きさと、事前に登録されたテレビ領域４２０のアスペクト比とに基づいて、画像データに反映されなかった残りのテレビ領域４２０（タブレット領域１２０からはみ出る領域）を補ってもよい。これにより、座標処理部２１は、タブレット座標系における、テレビ領域４２０の中心座標（Ｘｖｃ、Ｙｖｃ）を導出することができる。
【０１５７】
本実施形態では、連携指示部２４は、「１秒間で、選択されたオブジェクトを、テレビ領域４２０の中心に向かって縮小し、最後に該中心にてオブジェクトを消去する」というエフェクトをエフェクト出力部２２に実行させる。連携指示部２４は、上記エフェクトをすぐさま実行するという命令をエフェクト出力部２２に供給する（Ｓ１０５）。なお、このときまでに、座標処理部２１が、テレビ領域４２０の中心座標を求めていることが好ましい。
【０１５８】
エフェクト出力部２２は、図６Ａまたは図６Ｂに示すとおり、オブジェクト１を、タブレット領域１２０における、中心ＶＣの座標（Ｘｖｃ、Ｙｖｃ）に向かって縮小し、消去するエフェクトを実行する（Ｓ１０６）。連携指示部２４の指示にしたがって、オブジェクト１が表示されているフレームｆｒ１の状態から、オブジェクト１がＶＣの位置で消去されるまでのデュレーションは１秒である。つまり、Ｓ１０５におけるエフェクト開始指示から１秒後にエフェクト出力部２２によるエフェクトの出力は終了する（Ｓ１０７）。
【０１５９】
一方、連携指示部２４は、自装置のエフェクト出力部２２に命令を供給するのと同時に、「１秒間で、選択されたオブジェクトを、テレビ領域４２０の中心から拡大し、最後にオブジェクトを全画面表示する」というエフェクトを、テレビ２００のエフェクト出力部５２に実行させる。連携指示部２４は、タブレット１００にてエフェクトが開始されてから１秒後に上記エフェクトを実行するという命令が含まれたエフェクト開始コマンドをテレビ２００に対して送信する（Ｓ１０５）。連携指示部２４は、このとき、オブジェクト１を指定する指定情報もテレビ２００に対して送信する。
【０１６０】
テレビ２００の連携処理部５０は、上記エフェクト開始コマンドおよび指定情報を受信する（Ｓ１０８においてＹＥＳ）。連携処理部５０は、指定されたオブジェクト１を取得するようにオブジェクト取得部５１を制御する一方、コマンド受信から１秒後に上記エフェクトを開始するようにエフェクト出力部５２を制御する。オブジェクト取得部５１は、連携処理部５０の指示にしたがって、ユーザによって選択されたオブジェクトを取得する（Ｓ１０９）。
【０１６１】
そして、エフェクト出力部５２は、コマンド受信から１秒後（Ｓ１１０においてＹＥＳ）、図６Ａまたは図６Ｂに示すとおり、テレビ領域４２０の中心ＶＣを始点（基準位置、出現位置）として、徐々にオブジェクト１を拡大し全画面表示するエフェクトを実行する（Ｓ１１１）。連携処理部５０の指示にしたがって、オブジェクト１の表示がＶＣの位置で開始されてから、テレビ領域４２０に全画面表示されているフレームｆｒ２に到達するまでのデュレーションは１秒である。つまり、Ｓ１０８のコマンド受信から１秒後にエフェクトが開始され、開始から１秒後にエフェクト出力部５２によるエフェクトの出力は終了する（Ｓ１１２）。
【０１６２】
タブレット１００およびテレビ２００の動作タイミングを図７のタイミングチャートを参照して説明する。
【０１６３】
タブレット１００の操作受付部２３が、時点ｔ０でオブジェクトを選択するユーザ操作を受け付ける。すると、連携指示部２４は、時点ｔ１で、選択されたオブジェクトに対してエフェクトを出力するように自装置のエフェクト出力部２２に指示する。さらに、連携指示部２４は、テレビ２００に対して、選択されたオブジェクトの指定情報と、エフェクト開始コマンドとを送信する。エフェクト出力部２２は、時点ｔ１（図６Ａまたは図６Ｂのｆｒ１）ですぐにエフェクトの出力を開始し、例えば１秒かけて（時点ｔ３まで）エフェクトを実行する。つまり、テレビ領域４２０の中心に向かってオブジェクト１を縮小する。
【０１６４】
一方、テレビ２００の連携処理部５０は、時点ｔ１からｎ秒後（ｎ秒はコマンドの送信から受信までにかかる時間）の時点ｔ２にて、エフェクト開始コマンドを受信する。エフェクト出力部５２は、コマンドが受信されてから１秒後（時点ｔ４）から、選択されたオブジェクトのエフェクト出力を開始し、１秒かけて（時点ｔ５（図６Ａまたは図６Ｂのｆｒ２）まで）エフェクトを実行する。つまり、テレビ領域４２０の中心からオブジェクト１を拡大する。
【０１６５】
ここで、コマンドの通信にかかるｎ秒は、０であることが理想である。なぜなら、タブレット１００とテレビ２００とが連携して行うエフェクトは、オブジェクト１が、タブレット１００からテレビ２００へと移動するかのような一続きのエフェクトであるからである。したがって、エフェクトが途切れることなく出力された方が、違和感のないより現実味のある表現を実現することができる。
【０１６６】
しかし、このｎ秒という期間が０でなくとも、人が認識できないほど極めて短い時間で無視できる程度であれば、連携指示部２４は、開始タイミングを補正せずに、「コマンド受信から１秒後」という開始タイミングをテレビ２００に伝達すればよい。
【０１６７】
一方、ｎ秒という期間が無視できない程度（人が違和感を感じる程度）に長い時間である場合には、連携指示部２４は、開始タイミングを補正して、すなわち、「コマンド受信から１−ｎ秒後」という開始タイミングをテレビ２００に伝達すればよい。これにより、コマンドの通信のタイムラグに起因するエフェクトの途切れ目のｎ秒を限りなく０に近づけることができる。なお、コマンドの通信にかかる期間ｎ秒は、タブレット１００とテレビ２００とが事前に通信することによりあらかじめ取得される。
【０１６８】
以上の構成および方法によれば、ユーザが、手元のタブレット１００に表示されたオブジェクト１を、奥のテレビ２００にて処理させる操作を行ったときに、オブジェクト１がタブレット１００からテレビ２００へと物理的に移動したかのような演出をユーザに提供することができる。
【０１６９】
具体的には、図６Ａまたは図６Ｂに示すとおり、オブジェクト１が、タブレット１００からテレビ２００のテレビ領域４２０の中心に向かって飛び出し、テレビ領域４２０の中心でぶつかってテレビ領域４２０の全面に広がるというエフェクトである。テレビ２００は、常に、テレビ領域４２０の中心を基準にしたエフェクトを実行するという単純な構成である。しかし、タブレット１００がテレビ領域４２０の中心をそのときの状況に応じて動的に把握することができ、そのときの中心を基準にしてエフェクトを実行することができる。そのため、タブレット１００とテレビ２００との位置関係がどのように変化しても、常に、共有されたテレビ領域４２０の中心を基準位置にして、タブレット１００からテレビ２００へとエフェクトがシームレスに引き継がれる。最も好ましくは、オブジェクトの消失位置と出現位置とが一致していることにより、エフェクトが最もシームレスに引き継がれる。ここで、消失位置と出現位置との一致とは、タブレット領域１２０に表示される画像データ上でユーザから見て、消失位置と出現位置とが見かけ上略一致していることを指す。
【０１７０】
したがって、現実味をより一層深めた仮想的表現が、タブレット１００とテレビ２００との連携によって実現可能となる。
【０１７１】
なお、本明細書において、消失位置と出現位置と一致するというとき、タブレット領域１２０の消失位置とテレビ領域４２０の出現位置とが完全に一致していることのみを意味しているわけではない。本明細書において、消失位置と出現位置とが一致する状態とは、ユーザが違和感なくシームレスにオブジェクトのエフェクトを目視できる程度に、消失位置と出現位置とが見かけ上略一致している状態も含む。
【０１７２】
〔変形例〕
上述の説明では、座標処理部２１が、タブレット領域１２０内においてテレビ領域４２０の中心座標を特定できたケースについて説明した。このケースでは、エフェクト出力部２２は、タブレット領域１２０上のいずれかの箇所にて、オブジェクトを消失させる（テレビ領域４２０上に着地させる）までの演出をユーザに提供することができる。しかしながら、撮像部１３の画角が、テレビ２００をごく一部しかとらえていないケース、すなわち、テレビ領域４２０の中心が画像データに含まれておらず、座標処理部２１が中心座標をタブレット領域１２０上で特定できないケースも考えられる。
【０１７３】
このようなケースでは、例えば、エフェクトＡまたはエフェクトＢを提供することが想定される。エフェクトＡとは、「タブレット領域１２０外の仮想的なテレビ領域４２０の中心座標に向かって縮小を行うエフェクト」である。エフェクトＢとは、「タブレット領域１２０外の中心座標に代わる、タブレット領域１２０の任意の点（代替基準位置、消失位置）に向かって縮小を行うエフェクト」である。
【０１７４】
図９は、エフェクト出力部２２およびエフェクト出力部５２によって出力されるエフェクトＡを説明する図である。
【０１７５】
図９に示す例では、撮像部１３によって撮像された表示部４２の表示画面の実際の領域は、テレビ領域４２０の右下の一部の領域であり、表示部１２には、テレビ領域４２０の中心ＶＣは写されなかった。座標処理部２１は、テレビ領域４２０との距離、ズーム率、および、表示部４２の仕様（すなわち、テレビ領域４２０のインチ数・アスペクト比など）に基づいて、タブレット座標系におけるテレビ領域４２０を仮想的に補って特定し、タブレット座標系における仮想的な中心ＶＣの座標値を求める。なお、テレビ領域４２０のインチ数・アスペクト比に代わって、テレビ領域４２０の縦横実寸サイズを使ってテレビ領域４２０の残りの領域を補ってもよい。
【０１７６】
連携指示部２４が、上述のエフェクトＡの実行を決定すると、エフェクト出力部２２は、その決定にしたがってエフェクトＡを実行する。具体的には、エフェクト出力部２２は、表示部１２に表示されているオブジェクト１を、１秒かけて、仮想的に求めた中心ＶＣの位置で消失するように、ＶＣに向かって移動させつつオブジェクト１を縮小する。
【０１７７】
エフェクトＡによれば、タブレット領域１２０上で、図９のオブジェクト１’の時点より後は、オブジェクトの一部が表示されない期間があったり、オブジェクト１”の時点以降は、オブジェクトがどちらの画面にも表示されない期間があったりする。
【０１７８】
しかし、上記構成によれば、「オブジェクトがオブジェクト１の位置からテレビ領域４２０の中心に向かって一直線に飛んでいき、オブジェクト１’、オブジェクト１”を経て、テレビ領域４２０の中心でぶつかって表示部４２の画面上で広がる」という演出を、違和感なく現実味を損なわずにユーザに提供することが可能となる。
【０１７９】
図１０は、エフェクト出力部２２およびエフェクト出力部５２によって出力されるエフェクトＢを説明する図である。
【０１８０】
図１０に示す例では、図９に示す例と同様に、座標処理部２１が、タブレット領域１２０内に入らなかったテレビ領域４２０の中心ＶＣを仮想的に求める。
【０１８１】
この例では、座標処理部２１は、中心ＶＣ（基準位置）がタブレット領域１２０外にて特定された場合に、仮想的な中心ＶＣの位置を考慮して、タブレット領域１２０上の任意の位置に、中心ＶＣの代わりの基準点Ｐ（代替基準位置）を特定する構成である。
【０１８２】
座標処理部２１が、基準点Ｐをどのようにして特定するのかについては特に限定されないが、一例を挙げると以下のとおりである。
【０１８３】
座標処理部２１は、仮想的に求めたテレビ領域４２０の中心ＶＣと、選択されたオブジェクトの中心ＯＣとをつなぐ線分（図１０の一点鎖線）を求め、この線分上の任意の位置に基準点Ｐを特定する。図１０に示す例では、オブジェクト１がタブレット領域１２０からはみ出さない位置で、中心ＶＣに最も近い位置に基準点Ｐを特定している。座標処理部２１は、特定した基準点Ｐの、タブレット座標系における座標値を、エフェクト出力部２２に供給する。
【０１８４】
連携指示部２４が、上述のエフェクトＢの実行を決定すると、エフェクト出力部２２は、その決定にしたがって、エフェクトＢを実行する。具体的には、エフェクト出力部２２は、タブレット領域１２０に表示されているオブジェクト１を、１秒かけて、中心ＶＣの代わりの基準点Ｐの位置で消失するように、基準点Ｐに向かって移動させつつオブジェクト１を縮小する。
【０１８５】
エフェクトＢによれば、タブレット領域１２０上でオブジェクト１が消失した位置（基準点Ｐ）と、テレビ領域４２０上でオブジェクト１が出現する位置（中心ＶＣ）とにずれが生じる。
【０１８６】
しかし、上記構成によれば、「オブジェクトがオブジェクト１の位置からテレビ２００に向かって飛んでいき、テレビ領域４２０の中心でぶつかってテレビ領域４２０画面上で広がる」という演出を、現実味を損なわずにユーザに提供することが可能となる。しかも、オブジェクトがどちらの画面にも表示されないという期間が生じないように上記の演出を実現することができる。
【０１８７】
≪実施形態２≫
本発明の表示システムにおける他の実施形態について、図１１〜図１５に基づいて説明すれば、以下のとおりである。
【０１８８】
実施形態１では、タブレット１００からテレビ２００へとオブジェクトを飛ばすエフェクトを出力する場合に、テレビ２００は、常に、自装置のテレビ領域４２０の中心からオブジェクトを拡大表示し始めるという単純な構成とした。このため、タブレット１００が、テレビ２００のテレビ領域４２０の中心を認識し、タブレット１００が、オブジェクトが中心に向かう移動の要素を担う構成であった。
【０１８９】
これに対し、本実施形態では、タブレット１００は、常に、自装置のタブレット領域１２０の中心に向かってオブジェクトを消失させる（中心に向かって飛ばす）構成である。また、本実施形態では、テレビ２００が、オブジェクトがぶつかった位置からオブジェクトを拡大表示し始めるという構成である。
【０１９０】
このため、本実施形態では、タブレット１００が、自装置のタブレット領域１２０の中心をテレビ２００に認識させて、テレビ２００が、ぶつかった位置から正常な位置へのオブジェクトの移動の要素を担う。
【０１９１】
〔タブレットの機能、テレビの機能〕
図１１は、本実施形態におけるタブレット１００の要部構成を示す機能ブロック図、および、本実施形態におけるテレビ２００の要部構成を示す機能ブロック図である。
【０１９２】
本実施形態におけるタブレット１００が、実施形態１におけるタブレット１００と異なる点について説明する。
【０１９３】
本実施形態では、座標処理部２１は、少なくとも、自装置のタブレット領域１２０の中心座標をテレビ座標系における座標値にて求める機能を有している。
【０１９４】
まず、座標処理部２１は、図１２に示すとおり、テレビ領域４２０の最左上端、すなわち、テレビ座標系の原点（０、０）の、タブレット座標系における座標位置を特定する。座標処理部２１は、テレビ領域４２０の最左上端が、画像データに写っていなくても（タブレット領域１２０からはみ出ていても）、実施形態１に記載したとおり、テレビ領域４２０の原点を仮想的に求めることが可能である。
【０１９５】
次に、座標処理部２１は、表示部１２のタブレット領域１２０の中心ＴＣについて、テレビ座標系における、中心ＴＣの座標値を特定する。座標処理部２１は、テレビ座標系における原点をすでに特定しているので、タブレット座標系において、上記原点の座標値と、中心ＴＣの座標値との差分から、中心ＴＣのテレビ座標系における座標値（Ｘｔｃ、Ｙｔｃ）を特定することが可能である。
【０１９６】
なお、座標処理部２１は、座標値（Ｘｔｃ、Ｙｔｃ）について、テレビ２００が認識する正確な座標値を算出してもよいが、この処理の簡略化してもよい。すなわち、座標処理部２１は、テレビ領域４２０の原点およびテレビ領域４２０の最右下端に基づいて、中心ＴＣの相対的な位置情報（Ｘｔｃ、Ｙｔｃ）を正確な座標値に代えて特定してもよい。いずれにしても、座標値（Ｘｔｃ、Ｙｔｃ）があれば、テレビ２００は、テレビ領域４２０上における中心ＴＣの位置を認識することができる。
【０１９７】
座標処理部２１は、特定したテレビ座標系における中心ＴＣの座標値（Ｘｔｃ、Ｙｔｃ）を連携指示部２４に供給する。
【０１９８】
本実施形態では、連携指示部２４は、オブジェクトを指定する情報、および、エフェクト開始コマンドに加えて、さらに、タブレット領域１２０の中心座標（Ｘｔｃ、Ｙｔｃ）をテレビ２００に送信する。連携指示部２４から伝達されるタブレット領域１２０の中心座標（Ｘｔｃ、Ｙｔｃ）は、エフェクト出力部５２にとって、オブジェクトの表示を開始する始点（出現位置）となる。
【０１９９】
エフェクト出力部２２は、連携指示部２４からの指示にしたがって、実施形態１と同様にすぐさま選択されたオブジェクトのエフェクト出力を開始する。本実施形態では、エフェクト出力部２２は、図１３に示すとおり、タブレット領域１２０の中心ＴＣに向かってオブジェクト１が徐々に縮小し、該中心において消失するというエフェクトをオブジェクト１に付与する。
【０２００】
一方、テレビ２００では、連携処理部５０は、受信したエフェクト開始コマンド、および、中心ＴＣの座標値（Ｘｔｃ、Ｙｔｃ）に基づいて、エフェクトの開始タイミングを制御するだけではなく、さらに、オブジェクトの出現位置（始点）を制御する。
【０２０１】
エフェクト出力部５２は、図１３に示すとおり、テレビ領域４２０の、指定された中心ＴＣの座標値（Ｘｔｃ、Ｙｔｃ）から、オブジェクトを拡大表示するエフェクトを出力する。
【０２０２】
〔処理フロー〕
図１４は、タブレット１００およびテレビ２００の処理の流れを示すフローチャートである。
【０２０３】
Ｓ２０１〜Ｓ２０３は、図８におけるＳ１０１〜Ｓ１０３と同様である。
【０２０４】
座標処理部２１は、タップされたタイミングにおける画像データに基づいて、タブレット座標系におけるテレビ領域４２０の座標位置を特定する。本実施形態では、座標処理部２１は、テレビ領域４２０の原点（０、０）のタブレット領域１２０における座標値を少なくとも特定すればよい（Ｓ２０４）。
【０２０５】
次に、座標処理部２１は、タブレット領域１２０の中心ＴＣのテレビ座標系における座標値（Ｘｔｃ、Ｙｔｃ）を特定する（Ｓ２０５）。
【０２０６】
本実施形態では、連携指示部２４は、「１秒間で、選択されたオブジェクトを、タブレット領域１２０の中心に向かって縮小し、最後に該中心にてオブジェクトを消去する」というエフェクトをエフェクト出力部２２に実行させる。連携指示部２４は、上記エフェクトをすぐさま実行するという命令をエフェクト出力部２２に供給する（Ｓ２０６）。
【０２０７】
エフェクト出力部２２は、図１３に示すとおり、オブジェクト１を、タブレット領域１２０の中心ＴＣに向かって縮小し、消去するエフェクトを実行する（Ｓ２０７）。このエフェクトのデュレーションは１秒であり、エフェクトの開始から１秒後、エフェクト出力部２２によるエフェクトの出力は終了する（Ｓ２０８）。
【０２０８】
一方、連携指示部２４は、自装置のエフェクト出力部２２に命令を供給するのと同時に、「１秒間で、選択されたオブジェクトを、タブレット領域１２０の中心ＴＣから拡大し、最後にオブジェクトを全画面表示する」というエフェクトを、テレビ２００のエフェクト出力部５２に実行させる。連携指示部２４は、タブレット１００にてエフェクトが開始されてから１秒後に上記エフェクトを実行するという命令が含まれたエフェクト開始コマンドをテレビ２００に対して送信する（Ｓ２０６）。連携指示部２４は、このとき、オブジェクト１を指定する指定情報、さらには、テレビ座標系における中心ＴＣの座標値（Ｘｔｃ、Ｙｔｃ）もテレビ２００に対して送信する。連携指示部２４がテレビ２００に送信する中心ＴＣの座標値とは、具体的には、図１２に示すとおり、タブレット領域１２０の中心ＴＣをテレビ座標系における座標値（Ｘｔｃ、Ｙｔｃ）に変換したものである。
【０２０９】
テレビ２００の連携処理部５０は、エフェクト開始コマンド、オブジェクトの指定情報、および、テレビ座標系における、タブレット領域１２０の中心ＴＣの座標値を受信する（Ｓ２０９においてＹＥＳ）。連携処理部５０は、指定されたオブジェクト１を取得するようにオブジェクト取得部５１を制御する一方、コマンド受信から１秒後に上記エフェクトを開始するようにエフェクト出力部５２を制御する。さらに、連携処理部５０は、連携指示部２４から送信された中心ＴＣの座標値（テレビ座標系における座標値（Ｘｔｃ、Ｙｔｃ））をエフェクトの始点（出現位置）としてエフェクト出力部５２に指定する。
【０２１０】
オブジェクト取得部５１は、連携処理部５０の指示にしたがって、ユーザによって選択されたオブジェクトを取得する（Ｓ２１０）。
【０２１１】
そして、エフェクト出力部５２は、コマンド受信から１秒後（Ｓ２１１においてＹＥＳ）、図１３に示すとおり、テレビ座標系における、タブレット領域１２０の中心ＴＣを始点として、徐々にオブジェクト１を拡大し全画面表示するエフェクトを実行する（Ｓ２１２）。Ｓ２０９のコマンド受信から１秒後にエフェクトが開始され、開始から１秒後にエフェクト出力部５２によるエフェクトの出力は終了する（Ｓ２１３）。
【０２１２】
以上の構成および方法によれば、ユーザが、手元のタブレット１００に表示されたオブジェクト１を、奥のテレビ２００にて処理させる操作を行ったときに、オブジェクト１がタブレット１００からテレビ２００へと物理的に移動したかのような演出をユーザに提供することができる。
【０２１３】
具体的には、図１３に示すとおり、「オブジェクト１が、タブレット１００から、タブレット領域１２０の中心（消失位置）で見えなくなるように（中心でテレビ領域４２０上に着地するように）、テレビ２００に向かって飛んでいく。そして、オブジェクト１がテレビ領域４２０で着地した位置（出現位置）から、テレビ領域４２０の全面に広がる」というエフェクトである。タブレット１００は、常に、タブレット領域１２０の中心を基準にしたエフェクトを実行するという単純な構成である。しかし、タブレット１００は、自装置の中心（オブジェクトの着地点）がテレビ領域４２０上のどの位置になるのかを、そのときの状況に応じて動的に把握することができ、そのときの着地点をテレビ２００に指示することができる。テレビ２００は、指定された着地点を始点にして、オブジェクト１がテレビ領域４２０上に広がるというエフェクトを実行することができる。そのため、タブレット１００とテレビ２００との位置関係がどのように変化しても、常に、共有された、タブレット領域１２０の中心（着地点）を基準位置にして、タブレット１００からテレビ２００へとエフェクトがシームレスに引き継がれる。最も好ましくは、オブジェクトの消失位置と出現位置とが一致していることにより、エフェクトが最もシームレスに引き継がれる。ここで、消失位置と出現位置との一致とは、タブレット領域１２０上でユーザから見て、消失位置と出現位置とが見かけ上一致していることを指す。
【０２１４】
したがって、現実味をより一層深めた仮想的表現が、タブレット１００とテレビ２００との連携によって実現可能となる。
【０２１５】
〔変形例〕
上述の説明では、座標処理部２１が、テレビ領域４２０内においてタブレット領域１２０の中心座標を特定できたケースについて説明した。このケースでは、エフェクト出力部２２は、テレビ領域４２０のいずれかの箇所にて、オブジェクトが消失する（テレビ領域４２０上に着地する）までの演出をユーザに提供することができる。しかしながら、タブレット領域１２０の中心が、画像データ上のテレビ領域４２０上に特定できないケースも考えられる。
【０２１６】
このようなケースでは、例えば、エフェクトＣ、すなわち、タブレット領域１２０の中心ＴＣ（基準位置）に代わる、テレビ領域４２０上の任意の基準点（代替基準位置）に向かって縮小、消去を行うエフェクトを提供することが想定される。
【０２１７】
図１５は、中心ＴＣに代わる基準点を特定するときの座標処理部２１の動作を説明する図である。
【０２１８】
図１５において、撮像部１３によって撮像されたテレビ画面の領域は、右下の一部の領域（斜線の領域）であるケース（テレビ領域４２０ａ）と、左下の一部の領域であるケース（テレビ領域４２０ｂ）とを一図で表している。いずれのケースでも、タブレット領域１２０の中心ＴＣはテレビ領域４２０に重ならなかった。
【０２１９】
この場合、座標処理部２１は、中心ＴＣの代わりに、画像データ上のテレビ領域４２０の任意の基準点Ｐを着地点（オブジェクトが消失するエフェクトの終点、すなわち、消失位置）として特定する。
【０２２０】
座標処理部２１が、基準点Ｐをどのようにして特定するのかについては特に限定されないが、一例を挙げると以下のとおりである。
【０２２１】
例えば、テレビ２００の表示部４２の表示画面が４２０ａの位置にある場合、座標処理部２１は、テレビ領域４２０の画像データから認識された領域（斜線の領域）のうち、中心ＴＣに最も近い基準点Ｐａをオブジェクトの終点（基準位置、消失位置）として特定する。
【０２２２】
連携指示部２４が、上述のエフェクトＣの実行を決定すると、エフェクト出力部２２は、その決定にしたがってエフェクトＣを実行する。具体的には、エフェクト出力部２２は、タブレット領域１２０に表示されているオブジェクト１を、１秒かけて、中心ＶＣの代わりの基準点Ｐａの位置で消失するように、基準点Ｐａに向かって移動させつつオブジェクト１を縮小する。
【０２２３】
なお、テレビ画面が４２０ｂの位置にある場合は、座標処理部２１は、基準点Ｐｂをオブジェクトの終点（基準位置、消失位置）として特定する。
【０２２４】
エフェクトＣによれば、タブレット領域１２０上でオブジェクト１が消失した位置（テレビ領域４２０上で着地したかのような位置）と、テレビ領域４２０上でオブジェクト１が出現する位置とにずれが生じる。
【０２２５】
しかし、上記構成によれば、「オブジェクトがオブジェクト１の位置からテレビ２００に向かって飛んでいき、テレビ領域４２０のいずれかの箇所でぶつかって（着地して）表示部４２の表示画面上で広がる」という演出を、現実味を損なわずにユーザに提供することが可能となる。しかも、オブジェクトがどちらの画面にも表示されないという期間が生じないように上記の演出を実現することができる。
【０２２６】
なお、上述の説明では、座標処理部２１は、中心ＴＣに代わる代替基準位置を、斜線の領域のうち中心ＴＣに最も近い点（基準点Ｐａまたは基準点Ｐｂ）に特定しているが、座標処理部２１の構成は上記に限定されない。座標処理部２１は、図１５に示すとおり、代替基準位置を斜線の領域の中心（基準点Ｐｃまたは基準点Ｐｄ）に特定してもよい。
【０２２７】
上記構成によれば、テレビ２００の表示部４２において、オブジェクトを出現させる位置を、テレビ領域４２０のより内側に指定することができるため、オブジェクトがぶつかって画面上で広がるという演出をより自然にユーザに提供することが可能となる。
【０２２８】
≪実施形態３≫
本発明の表示システムにおける他の実施形態について、図１６〜図１８に基づいて説明すれば、以下のとおりである。
【０２２９】
実施形態１および２では、タブレット１００およびテレビ２００のいずれか一方が、常に自装置の画面中心をオブジェクトの終点（消失位置）または始点（出現位置）とする単純な構成であった。そして、もう一方が、相手画面の中心を終点または始点として認識し、オブジェクトの移動の要素を担う構成であった。
【０２３０】
これに対し、本実施形態では、タブレット１００およびテレビ２００が互いにオブジェクトの）基準点（終点および始点）を持ち、オブジェクトの移動の要素を互いに担う構成である。本実施形態において最も好ましい構成は、タブレット１００にとってのオブジェクトの終点（消失位置）と、テレビ２００にとってのオブジェクトの始点（出現位置）とを、一致させて、両者に共有させる構成である。ここで、消失位置と出現位置との一致とは、表示部１２上でユーザから見て、消失位置と出現位置とが見かけ上一致していることを指す。
【０２３１】
〔タブレットの機能、テレビの機能〕
本実施形態におけるタブレット１００の要部構成およびテレビ２００の要部構成は、図１１に示すとおりである。
【０２３２】
本実施形態におけるタブレット１００およびテレビ２００が、実施形態１および２におけるタブレット１００およびテレビ２００と異なる点について説明する。
【０２３３】
本実施形態では、座標処理部２１は、少なくとも、タブレット領域１２０の中心ＴＣとテレビ領域４２０の中心ＶＣとをつなぐ線分の中点Ｍ（基準位置）について、タブレット座標系における座標値、および、テレビ座標系における座標値を求める機能を有している。
【０２３４】
まず、座標処理部２１は、図１６に示すとおり、テレビ領域４２０の原点（０、０）、および、中心ＶＣについて、タブレット座標系における座標位置を特定する。座標処理部２１は、テレビ領域４２０の原点および中心ＶＣが、画像データに写っていなくても（タブレット領域１２０からはみ出ていても）、実施形態１に記載したとおり、テレビ領域４２０の原点および中心ＶＣを仮想的に求めることが可能である。
【０２３５】
次に、座標処理部２１は、テレビ領域４２０の中心ＶＣと、タブレット領域１２０の中心ＴＣとをつなぐ線分（一点鎖線）を求め、該線分の中点Ｍ（基準位置）を特定する。座標処理部２１は、中点Ｍについて、タブレット座標系における中点の座標値（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））と、テレビ座標系における中点の座標値（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））とを求める。
【０２３６】
座標処理部２１は、上記それぞれの中点の座標値を連携指示部２４に供給する。
【０２３７】
本実施形態では、連携指示部２４は、中点座標（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））に基づいて、選択されたオブジェクトのエフェクトを開始するようにエフェクト出力部２２を制御する。同時に、連携指示部２４は、オブジェクトを指定する情報、および、エフェクト開始コマンドに加えて、さらに、中点座標（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））をテレビ２００に送信する。
【０２３８】
タブレット座標系における中点座標（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））は、タブレット１００のエフェクト出力部２２にとって、オブジェクトを消失させる基準位置、すなわち、エフェクトの終点（消失位置）となる。テレビ座標系における中点座標（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））は、テレビ２００のエフェクト出力部５２にとって、オブジェクトを出現させる基準位置、すなわち、エフェクトの始点（出現位置）となる。
【０２３９】
タブレット１００のエフェクト出力部２２は、連携指示部２４からの指示にしたがって、実施形態１と同様にすぐさま選択されたオブジェクトのエフェクト出力を開始する。本実施形態では、エフェクト出力部２２は、図１７に示すとおり、タブレット領域１２０の中点Ｍ（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））に向かってオブジェクト１が徐々に縮小し、該中点Ｍにおいて消失（着地）するというエフェクトをオブジェクト１に付与する。
【０２４０】
一方、テレビ２００のエフェクト出力部５２は、図１７に示すとおり、中点Ｍ（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））から、オブジェクトを拡大表示するエフェクトを出力する。
【０２４１】
〔処理フロー〕
図１８は、タブレット１００およびテレビ２００の処理の流れを示すフローチャートである。
【０２４２】
Ｓ３０１〜Ｓ３０３は、図８におけるＳ１０１〜Ｓ１０３と同様である。
【０２４３】
座標処理部２１は、タップされたタイミングにおける画像データに基づいて、タブレット座標系におけるテレビ領域４２０の座標位置を特定する。本実施形態では、座標処理部２１は、テレビ領域４２０の原点（０、０）および中心ＶＣのタブレット領域１２０における座標値を少なくとも特定すればよい（Ｓ３０４）。
【０２４４】
次に、座標処理部２１は、テレビ画面の中心ＶＣとタブレット画面の中心ＴＣとの中点Ｍを求める。つまり、タブレット座標系における中点Ｍの中点座標（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））を特定する（Ｓ３０５）。
【０２４５】
次に、座標処理部２１は、テレビ座標系における中点Ｍの中点座標（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））を特定する（Ｓ３０６）。
【０２４６】
本実施形態では、連携指示部２４は、「１秒間で、選択されたオブジェクトを、中点Ｍに向かって縮小し、最後に該中点にてオブジェクトを消去する」というエフェクトをエフェクト出力部２２に実行させる。連携指示部２４は、上記エフェクトをすぐさま実行するという命令をエフェクト出力部２２に供給する（Ｓ３０７）。
【０２４７】
エフェクト出力部２２は、図１７に示すとおり、オブジェクト１を、中点Ｍに向かって縮小し、消去するエフェクトを実行する（Ｓ３０８）。このエフェクトのデュレーションは１秒であり、エフェクトの開始から１秒後、エフェクト出力部２２によるエフェクトの出力は終了する（Ｓ３０９）。
【０２４８】
一方、連携指示部２４は、自装置のエフェクト出力部２２に命令を供給するのと同時に、「１秒間で、選択されたオブジェクトを、中点Ｍから拡大し、最後にオブジェクトを全画面表示する」というエフェクトを、テレビ２００のエフェクト出力部５２に実行させる。連携指示部２４は、タブレット１００にてエフェクトが開始されてから１秒後に上記エフェクトを実行するという命令が含まれたエフェクト開始コマンドをテレビ２００に対して送信する（Ｓ３０７）。連携指示部２４は、このとき、オブジェクト１を指定する指定情報、さらには、テレビ座標系における中点Ｍの座標値（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））もテレビ２００に対して送信する。
【０２４９】
テレビ２００の連携処理部５０は、エフェクト開始コマンド、オブジェクトの指定情報、および、テレビ座標系における、中点Ｍの座標値を受信する（Ｓ３１０においてＹＥＳ）。連携処理部５０は、指定されたオブジェクト１を取得するようにオブジェクト取得部５１を制御する一方、コマンド受信から１秒後に上記エフェクトを開始するようにエフェクト出力部５２を制御する。さらに、連携処理部５０は、連携指示部２４から送信された中点Ｍの座標値をエフェクトの始点としてエフェクト出力部５２に指定する。
【０２５０】
オブジェクト取得部５１は、連携処理部５０の指示にしたがって、ユーザによって選択されたオブジェクトを取得する（Ｓ３１１）。
【０２５１】
そして、エフェクト出力部５２は、コマンド受信から１秒後（Ｓ３１２においてＹＥＳ）、図１７に示すとおり、中点Ｍを始点として、徐々にオブジェクト１を拡大し全画面表示するエフェクトを実行する（Ｓ３１３）。Ｓ３１０のコマンド受信から１秒後にエフェクトが開始され、開始から１秒後にエフェクト出力部５２によるエフェクトの出力は終了する（Ｓ３１４）。
【０２５２】
以上の構成および方法によれば、ユーザが、手元のタブレット１００に表示されたオブジェクト１を、奥のテレビ２００にて処理させる操作を行ったときに、オブジェクト１がタブレット１００からテレビ２００へと物理的に移動したかのような演出をユーザに提供することができる。
【０２５３】
具体的には、図１７に示すとおり、「オブジェクト１が、タブレット１００から、中点Ｍ（消失位置、基準位置）で見えなくなるように（中点Ｍでテレビ領域４２０上に着地するように）、テレビ２００に向かって飛んでいく。そして、オブジェクト１がテレビ領域４２０で着地した位置、すなわち、同じ中点Ｍ（出現位置、基準位置）から、テレビ領域４２０の全面に広がる」というエフェクトである。
【０２５４】
タブレット１００およびテレビ２００は、互いにどのような位置関係にあろうとも、そのときの状況に応じて、動的に、中点Ｍを共有することができる。中点Ｍは、タブレット１００にとって、エフェクトの終点であり、テレビ２００にとってエフェクトの始点である。つまり、タブレット１００とテレビ２００との位置関係がどのように変化しても、常に、共有された、中点Ｍ（着地点であり出現点）を基準にして、タブレット１００からテレビ２００へとエフェクトがシームレスに引き継がれる。最も好ましくは、オブジェクトの消失位置と出現位置とが一致していることにより、エフェクトが最もシームレスに引き継がれる。ここで、消失位置と出現位置との一致とは、タブレット領域１２０上でユーザから見て、消失位置と出現位置とが見かけ上一致していることを指す。
【０２５５】
したがって、ユーザにとって違和感がない、現実味をより一層深めた仮想的表現が、タブレット１００とテレビ２００との連携によって実現可能となる。
【０２５６】
〔変形例〕
なお、中点Ｍが、タブレット領域１２０およびテレビ領域４２０のいずれか、あるいは、両方に重ならないケースが考えられる。
【０２５７】
このようなケースでは、座標処理部２１は、タブレット領域１２０とテレビ領域４２０とが重なる領域の任意の位置（望ましくは中点Ｍに最も近い位置、または、中心同士をつなぐ線分上）に中点Ｍに代わる基準点Ｐを特定してもよい。
【０２５８】
上記構成によれば、中点Ｍは、タブレット領域１２０およびテレビ領域４２０の両方画面において共有されるので、エフェクトの終点と始点とを一致させることができる。したがって、シームレスな仮想的表現が、タブレット１００とテレビ２００との連携によって実現可能となる。
【０２５９】
あるいは、上述のようなケースでは、座標処理部２１は、基準位置（終点と始点と）を、別々に特定してもよい。具体的には、座標処理部２１は、タブレット領域１２０上の中心同士をつなぐ線分上の任意の位置に、終点としての基準位置（消失位置）を特定してもよい。そして、座標処理部２１は、テレビ領域４２０上の中心同士をつなぐ線分上の任意の位置に始点としての基準位置（出現位置）を特定してもよい。
【０２６０】
なお、座標処理部２１が特定する基準位置は、中点Ｍに限定されない。図１６に示すとおり、座標処理部２１は、タブレット領域１２０の中心ＴＣの代わりに、タブレット領域１２０に表示されているオブジェクト１の中心ＯＣを求めてもよい。そして、座標処理部２１は、オブジェクト１の中心ＯＣと、テレビ領域４２０の中心ＶＣとの間の中点Ｍ’を基準位置として特定してもよい。この場合、基準位置（中点Ｍ’）は、エフェクト出力部２２にとってのオブジェクトの終点となり、エフェクト出力部５２にとってのオブジェクトの始点となる。
【０２６１】
≪実施形態４≫
本発明の表示システムにおける他の実施形態について、図１、図１９〜図２１に基づいて説明すれば、以下のとおりである。
【０２６２】
実施形態１〜３では、オブジェクトがタブレット１００からテレビ２００へ移動するかのように見せるエフェクトを出力するための構成について説明した。実施形態４〜６では、オブジェクトがテレビ２００からタブレット１００へ移動するかのように見せるエフェクトを出力するための構成について説明する。
【０２６３】
〔表示システム概要〕
図１９は、本実施形態における表示システムの概要を示す図である。本実施形態では、テレビ２００の表示部４２に表示されているオブジェクト２を、ユーザが手元のタブレット１００にて、タップなどで指定する操作を行ったとき、オブジェクト２があたかもテレビ２００からタブレット１００へと移動したかのように見せるエフェクトをオブジェクト２に付与する。これにより、ユーザは、自分が行った操作に伴う結果をより現実味のある表現によって確認することができる。
【０２６４】
本実施形態では、タブレット１００は、オブジェクトを自装置の表示部１２に表示していないにもかかわらず、タップ操作などで指定されたオブジェクト２が何であるのかを特定しなければならない。タブレット１００が指定されたオブジェクト２を特定する方法は特に限定されないが、以下に示すとおりいくつかの方法が考えられる。
【０２６５】
例えば、本実施形態では、画像認識部２０は、通信相手であるテレビ２００のテレビ領域４２０上に表示されているオブジェクト２（ＣＤのジャケット画像など）をそれぞれ画像認識してもよい。そして、画像認識されたオブジェクト２と、事前に登録されているオブジェクトの情報（ＣＤのジャケット画像）とを比較して、マッチしたオブジェクトをつきとめる（登録されているジャケット画像に紐付けられた音楽コンテンツのＩＤを特定する）。これにより、タブレット１００は、ライブビュー画像中に写っている表示部４２の中の各オブジェクトを一意に識別することができる。
【０２６６】
あるいは、タブレット１００は、テレビ２００と事前に通信して、表示されているそれぞれのオブジェクト２（に対応するコンテンツまたはそれを特定するためのＩＤ）をテレビ２００から予め取得する。これにより、タブレット１００は、画像認識されたオブジェクト２の領域と、取得したオブジェクト２とをそれぞれ紐付けて管理しておくことができる。
【０２６７】
あるいは、タブレット１００は、以下の構成であってもよい。すなわち、タブレット１００は、画像認識されたオブジェクト２の領域を、オブジェクトごとに個々に識別可能に管理する。そして、特定のオブジェクトの領域が操作されたときに、操作されたオブジェクトについてのみ、該オブジェクトの本体データをテレビ２００から受信する。
【０２６８】
あるいは、タブレット１００は、ライブビュー画像に写っているオブジェクト２を画像認識せずとも、タップ操作で指定された位置に対応するオブジェクト２を知ることが可能である。例えば、タブレット１００の座標処理部２１は、タブレット領域１２０におけるタップ操作された位置に関し、テレビ座標系における座標値を求める。そして、タブレット１００は、タップ位置のテレビ座標系における座標値をテレビ２００に送信し、当該タップ位置に対応するオブジェクト２がどのコンテンツのオブジェクトなのかについて問合せを行う。テレビ２００は、表示部４２において、問合せを受けた上記タップ位置に表示させているオブジェクト２を特定する。そして、テレビ２００は、その特定したオブジェクト２の画像データ（アイコン）と、オブジェクト２に対応するコンテンツ（本体データ）と、当該コンテンツのＩＤとをタブレット１００に対して返信する。これにより、タブレット１００は、負荷の高い画像認識処理を行わずに、タップ操作された位置に対応するオブジェクト２を特定することが可能となる。
【０２６９】
〔タブレットの機能、テレビの機能〕
本実施形態におけるタブレット１００の要部構成およびテレビ２００の要部構成は、図１に示すとおりである。
【０２７０】
本実施形態におけるタブレット１００およびテレビ２００が、実施形態１におけるタブレット１００およびテレビ２００と異なる点について説明する。
【０２７１】
本実施形態では、テレビ２００が先にエフェクトを出力し、タブレット１００が後に引き継いでエフェクトを出力する。
【０２７２】
操作受付部２３が、入力部１１を介して、オブジェクト２の選択操作をユーザから受け付けると、連携指示部２４は、選択されたオブジェクトを指定する指定情報と、エフェクト開始コマンドとをテレビ２００に送信する。本実施形態では、上記エフェクト開始コマンドは、コマンド受信後すぐにエフェクトを開始するという命令が含まれている。また、このエフェクトは、「テレビ領域４２０の中心に向かって指定されたオブジェクトを縮小し、該中心にてオブジェクトを消失させる」というエフェクトを指している。
【０２７３】
テレビ２００の連携処理部５０が上記エフェクト開始コマンドを受信すると、エフェクト出力部５２は、選択されたオブジェクト２にエフェクトを付与する。本実施形態では、具体的には、エフェクト出力部５２は、図２０に示すとおり、テレビ領域４２０の中心ＶＣに向かって指定されたオブジェクト２を縮小し、該中心ＶＣにてオブジェクトを消失させるというエフェクトを出力する機能を少なくとも有している。
【０２７４】
一方、連携指示部２４は、自装置のエフェクト出力部２２に対しては、上記エフェクト開始コマンド送信から１秒後に、エフェクトを開始するように、エフェクトの開始タイミングを制御する。
【０２７５】
本実施形態では、エフェクト出力部２２は、連携指示部２４にしたがって、上記エフェクト開始コマンド送信から１秒後にエフェクトを開始する。本実施形態では、図２０に示すとおり、エフェクト出力部２２は、テレビ領域４２０の中心座標（Ｘｖｃ、Ｙｖｃ）から、選択されたオブジェクト２を出現させて、徐々に全画面表示させるエフェクトを実行する。テレビ領域４２０の中心座標（Ｘｖｃ、Ｙｖｃ）は、実施形態１と同様に、座標処理部２１によって求められて、エフェクト出力部２２に供給されるものである。
【０２７６】
〔処理フロー〕
図２１は、タブレット１００およびテレビ２００の処理の流れを示すフローチャートである。
【０２７７】
例えば、図１９に示すとおり、タブレット１００の通信相手のテレビ２００が１以上のオブジェクト２を表示しているとする（Ｓ４０１）。この状態を、タブレット１００の撮像部１３が撮像し、図示しない重畳処理部が、撮像したライブビュー画像に付加的な情報を重畳させて表示部１２に表示させる（Ｓ４０２）。このとき、タブレット１００は、テレビ領域４２０に表示されていてなおかつライブビュー画像に写っているオブジェクトの各々について個々に識別できる状態になっている。画像認識部２０は、画像認識処理を実行し、テレビ領域４２０の領域、および、テレビ領域４２０上の個々のオブジェクトの領域を追尾している（Ｓ４０３）。
【０２７８】
ここで、テレビ２００に表示されているいずれかのオブジェクト２がタップされたとする（Ｓ４０４においてＹＥＳ）。
【０２７９】
座標処理部２１は、図２０に示すとおり、タブレット座標系における、テレビ領域４２０の中心座標（Ｘｖｃ、Ｙｖｃ）を特定する（Ｓ４０５）。
【０２８０】
連携指示部２４は、「１秒間で、選択されたオブジェクトを、テレビ領域４２０の中心から表示し始めて拡大し、最後に該オブジェクトを全画面表示する」というエフェクトを実行するようにエフェクト出力部２２に指示する（Ｓ４０６）。ここで、本実施形態では、連携指示部２４は、エフェクト開始コマンドをテレビ２００に対して送信した時点から１秒後に上記エフェクトを開始するように、開始タイミングをエフェクト出力部２２に対して指示する。
【０２８１】
連携指示部２４は、Ｓ４０６において、さらに、指定された（ピンチ操作された）オブジェクト２の指定情報と、エフェクト開始コマンドとをテレビ２００に送信する。本実施形態では、上記エフェクト開始コマンドは、「１秒間で、選択されたオブジェクトを、テレビ領域４２０の中心に向かって徐々に縮小し、最後に該オブジェクトを消失させる」というエフェクトを、該コマンド受信後すぐに実行することを指示する命令文を含んでいる。
【０２８２】
そこで、テレビ２００の連携処理部５０が、オブジェクトの指定情報および上記エフェクト開始コマンドをタブレット１００から受信すると（Ｓ４０７においてＹＥＳ）、エフェクト出力部５２は、連携処理部５０の制御にしたがって、エフェクト出力を開始する（Ｓ４０８）。すなわち、エフェクト出力部５２は、図２０に示すとおり、上記エフェクト開始コマンドが受信されてからすぐさま、指定されたオブジェクト２を、自装置のテレビ領域４２０の中心に向かって１秒かけて縮小させ、消失させる。そして、エフェクト出力は、１秒後に終了する（Ｓ４０９）。
【０２８３】
一方、エフェクト出力部２２は、連携指示部２４の指示にしたがって、連携指示部２４が上記エフェクト開始コマンドをテレビ２００に送信した時点から１秒後に（Ｓ４１０においてＹＥＳ）、エフェクトを開始する（Ｓ４１１）。すなわち、エフェクト出力部２２は、図２０に示すとおり、座標処理部２１によって特定されたテレビ領域４２０の中心ＶＣから、選択されたオブジェクト２を表示し始めて拡大し、１秒かけて全画面表示する。そして、エフェクト出力は、１秒後に終了する（Ｓ４１２）。
【０２８４】
以上の構成および方法によれば、ユーザが、奥のテレビ２００に表示されたオブジェクト２を、手元のタブレット１００にて、タップなどで指定する操作を行ったときに、オブジェクト２がテレビ２００からタブレット１００へと物理的に移動したかのような演出をユーザに提供することができる。
【０２８５】
具体的には、図２０に示すとおり、「オブジェクト２が、テレビ２００のテレビ領域４２０の中心（消失位置）に向かって吸い込まれる。そして、その地点（テレビ領域４２０の中心、出現位置）から、オブジェクト２が、タブレット領域１２０の全面に広がる」というエフェクトである。テレビ２００は、常に、テレビ領域４２０の中心を基準にしたエフェクトを実行するという単純な構成である。しかし、タブレット１００がテレビ領域４２０の中心をそのときの状況に応じて動的に把握することができ、そのときの中心を基準にしてエフェクトを実行することができる。そのため、タブレット１００とテレビ２００との位置関係がどのように変化しても、常に、共有されたテレビ領域４２０の中心を基準にして、テレビ２００からタブレット１００へとエフェクトがシームレスに引き継がれる。最も好ましくは、オブジェクトの消失位置と出現位置とが一致していることにより、エフェクトが最もシームレスに引き継がれる。ここで、消失位置と出現位置との一致とは、タブレット領域１２０上でユーザから見て、消失位置と出現位置とが見かけ上一致していることを指す。
【０２８６】
したがって、現実味をより一層深めた仮想的表現が、タブレット１００とテレビ２００との連携によって実現可能となる。
【０２８７】
なお、テレビ領域４２０の中心が画像データに含まれておらず、座標処理部２１が中心座標をタブレット領域１２０上で特定できないケースにおいては、実施形態１に記載した変形例を、本実施形態に適用することができる。
【０２８８】
≪実施形態５≫
本発明の表示システムにおける他の実施形態について、図１１、図１９、図２２、図２３に基づいて説明すれば、以下のとおりである。
【０２８９】
実施形態４では、テレビ２００からタブレット１００へとオブジェクトを飛ばすエフェクトを出力する場合に、テレビ２００は、常に、自装置のテレビ領域４２０の中心へとオブジェクトを縮小し消失させるという単純な構成とした。このため、タブレット１００が、テレビ２００のテレビ領域４２０の中心を認識し、タブレット１００が、オブジェクトをテレビ２００の中心から出現させて、最終的な表示位置に表示させるという移動の要素を担う構成であった。
【０２９０】
これに対し、本実施形態では、タブレット１００は、常に、自装置のタブレット領域１２０の中心からオブジェクトを拡大し全画面表示させる構成である。また、本実施形態では、テレビ２００が、オブジェクトがタブレット領域１２０の中心に向かってオブジェクトを縮小、消失させるという構成である。
【０２９１】
すなわち、本実施形態では、タブレット１００が、自装置のタブレット領域１２０の中心をテレビ２００に認識させる。そして、テレビ２００は、タブレット１００より伝達された中心に向かって、オブジェクトが吸い込まれるようにオブジェクトを移動させる要素を担当する。
【０２９２】
〔タブレットの機能、テレビの機能〕
本実施形態におけるタブレット１００の要部構成およびテレビ２００の要部構成は、図１１に示すとおりである。
【０２９３】
本実施形態におけるタブレット１００およびテレビ２００が、実施形態４におけるタブレット１００およびテレビ２００と異なる点について説明する。
【０２９４】
本実施形態では、操作受付部２３が、オブジェクト２の選択操作をユーザから受け付けると、座標処理部２１は、実施形態２と同様に、テレビ座標系におけるタブレット領域１２０の中心ＴＣの座標を特定する。
【０２９５】
連携指示部２４は、選択されたオブジェクトを指定する指定情報と、エフェクト開始コマンドと、さらに、座標処理部２１が特定したテレビ座標系における、タブレット領域１２０の中心座標をテレビ２００に送信する。
【０２９６】
本実施形態では、連携指示部２４がテレビ２００に対して送信するエフェクト開始コマンドには、「１秒かけて、タブレット領域１２０の中心座標に向かって指定されたオブジェクトを縮小し、該中心にてオブジェクトを消失させる」というエフェクトと、該エフェクトを、当該コマンドを受信後すぐに開始するという開始タイミングとが含まれている。
【０２９７】
また、本実施形態では、連携指示部２４が自装置のエフェクト出力部２２に対して以下の指示を行う。すなわち、「１秒かけて、タブレット領域１２０の中心から指定されたオブジェクトを拡大し、全画面表示する」というエフェクトを実行するよう指示する。また、該エフェクトを、上記エフェクト開始コマンドをテレビ２００宛に送信してから１秒後に開始するという開始タイミングを指示する。
【０２９８】
テレビ２００の連携処理部５０が上記エフェクト開始コマンドを受信すると、エフェクト出力部５２は、選択されたオブジェクト２にエフェクトを付与する。本実施形態では、具体的には、エフェクト出力部５２は、図２２に示すとおり、タブレット領域１２０の中心ＴＣに向かって指定されたオブジェクト２を縮小し、該中心ＴＣにてオブジェクトを消失させるというエフェクトを出力する機能を少なくとも有している。上記中心ＴＣは、実施形態２と同様に、連携指示部２４から供給された中心ＴＣの座標値（Ｘｔｃ、Ｙｔｃ）に基づいてテレビ２００において容易に特定される。
【０２９９】
本実施形態では、タブレット１００のエフェクト出力部２２は、連携指示部２４にしたがって、上記エフェクト開始コマンド送信から１秒後にエフェクトを開始する。本実施形態では、図２２に示すとおり、エフェクト出力部２２は、タブレット領域１２０の中心ＴＣから、選択されたオブジェクト２を出現させて、徐々に全画面表示させるエフェクトを実行する。
【０３００】
〔処理フロー〕
図２３は、タブレット１００およびテレビ２００の処理の流れを示すフローチャートである。
【０３０１】
Ｓ５０１〜Ｓ５０４は、図２１におけるＳ４０１〜Ｓ４０４と同様である。
【０３０２】
座標処理部２１は、オブジェクトがタップされたタイミングにおける画像データに基づいて、タブレット座標系におけるテレビ領域４２０の座標位置を特定する。本実施形態では、座標処理部２１は、テレビ領域４２０の原点（０、０）について、タブレット領域１２０における座標値を少なくとも特定すればよい（Ｓ５０５）。
【０３０３】
次に、座標処理部２１は、図２２に示すとおり、タブレット領域１２０の中心ＴＣのテレビ座標系における座標値（Ｘｔｃ、Ｙｔｃ）を特定する（Ｓ５０６）。
【０３０４】
本実施形態では、連携指示部２４は、「１秒間で、選択されたオブジェクトを、タブレット領域１２０の中心から表示し始めて拡大し、最後に該オブジェクトを全画面表示する」というエフェクトを実行するようにエフェクト出力部２２に指示する。ここで、連携指示部２４は、上記エフェクトを、エフェクト開始コマンドをテレビ２００に送信した時点から１秒後に開始するという命令をエフェクト出力部２２に供給する（Ｓ５０７）。
【０３０５】
連携指示部２４は、Ｓ５０７において、さらに、指定された（タップ操作された）オブジェクト２の指定情報と、エフェクト開始コマンドと、Ｓ５０６において求められた中心ＴＣの座標値をテレビ２００に送信する。本実施形態では、上記エフェクト開始コマンドは、「１秒間で、選択されたオブジェクトを、タブレット領域１２０の中心に向かって徐々に縮小し、最後に該オブジェクトを消失させる」というエフェクトを、該コマンド受信後すぐに実行することを指示する命令文を含んでいる。
【０３０６】
そこで、テレビ２００の連携処理部５０が、タブレット領域１２０の中心座標（Ｘｔｃ、Ｙｔｃ）、オブジェクトの指定情報および上記エフェクト開始コマンドをタブレット１００から受信すると（Ｓ５０８においてＹＥＳ）、エフェクト出力部５２は、連携処理部５０の制御にしたがって、エフェクト出力を開始する（Ｓ５０９）。すなわち、エフェクト出力部５２は、図２２に示すとおり、上記エフェクト開始コマンドが受信されてからすぐさま、指定されたオブジェクト２を、タブレット領域１２０の中心座標（Ｘｔｃ、Ｙｔｃ）に向かって１秒かけて縮小させ、消失させる。そして、エフェクト出力は、１秒後に終了する（Ｓ５１０）。
【０３０７】
一方、エフェクト出力部２２は、連携指示部２４の指示にしたがって、連携指示部２４が上記エフェクト開始コマンドをテレビ２００に送信した時点から１秒後に（Ｓ５１１においてＹＥＳ）、エフェクトを開始する（Ｓ５１２）。すなわち、エフェクト出力部２２は、図２２に示すとおり、自装置のタブレット領域１２０の中心ＴＣから、選択されたオブジェクト２を表示し始めて拡大し、１秒かけて全画面表示する。そして、エフェクト出力は、１秒後に終了する（Ｓ５１３）。
【０３０８】
以上の構成および方法によれば、ユーザが、奥のテレビ２００に表示されたオブジェクト２を、手元のタブレット１００にて、タップなどで指定する操作を行ったときに、オブジェクト２がテレビ２００からタブレット１００へと物理的に移動したかのような演出をユーザに提供することができる。
【０３０９】
具体的には、図２０に示すとおり、「タブレット領域１２０から見て、オブジェクト２が、テレビ２００のテレビ領域４２０上で、タブレット領域１２０の中心（消失位置）に向かって吸い込まれる。そして、その地点（出現位置）から、オブジェクト２が、タブレット１００に飛んできてぶつかり、タブレット領域１２０の全面に広がる」というエフェクトである。タブレット１００は、常に、タブレット領域１２０の中心を基準にしたエフェクトを実行するという単純な構成である。しかし、タブレット１００は、自装置の中心（オブジェクトの吸着地点）がテレビ領域４２０上のどの位置になるのかを、そのときの状況に応じて動的に把握することができ、そのときの吸着地点をテレビ２００に指示することができる。そのため、タブレット１００とテレビ２００との位置関係がどのように変化しても、常に、共有されたタブレット領域１２０の中心を基準位置にして、テレビ２００からタブレット１００へとエフェクトがシームレスに引き継がれる。最も好ましくは、オブジェクトの消失位置と出現位置とが一致していることにより、エフェクトが最もシームレスに引き継がれる。ここで、消失位置と出現位置との一致とは、タブレット領域１２０上でユーザから見て、消失位置と出現位置とが見かけ上一致していることを指す。
【０３１０】
したがって、現実味をより一層深めた仮想的表現が、タブレット１００とテレビ２００との連携によって実現可能となる。
【０３１１】
なお、タブレット領域１２０の中心が、画像データ上のテレビ領域４２０の上にて特定できないケースにおいて、実施形態２に記載した変形例を、本実施形態に適用することができる。
【０３１２】
≪実施形態６≫
本発明の表示システムにおける他の実施形態について、図１１、図１９、図２４、図２５に基づいて説明すれば、以下のとおりである。
【０３１３】
実施形態４および５では、タブレット１００およびテレビ２００のいずれか一方が、常に自装置の画面中心をオブジェクトの終点または始点とする単純な構成であった。そして、もう一方が、相手画面の中心を終点または始点として認識し、オブジェクトの移動の要素を担う構成であった。
【０３１４】
これに対し、本実施形態では、タブレット１００およびテレビ２００が互いにオブジェクトの）基準点（終点および始点）を持ち、オブジェクトの移動の要素を互いに担う構成である。本実施形態において最も好ましい構成は、テレビ２００にとってのオブジェクトの終点（吸着点）と、タブレット１００にとってのオブジェクトの始点（出現点）とを一致させて、両者に共有させる構成である。
【０３１５】
〔タブレットの機能、テレビの機能〕
本実施形態におけるタブレット１００の要部構成およびテレビ２００の要部構成は、図１１に示すとおりである。
【０３１６】
本実施形態におけるタブレット１００およびテレビ２００が、実施形態４および５におけるタブレット１００およびテレビ２００と異なる点について説明する。
【０３１７】
本実施形態では、座標処理部２１は、少なくとも、タブレット領域１２０の中心ＴＣとテレビ領域４２０の中心ＶＣとをつなぐ線分の中点Ｍについて、タブレット座標系における座標値、および、テレビ座標系における座標値にて求める機能を有している。
【０３１８】
座標処理部２１の上記機能の詳細については、実施形態３において既に説明したとおりである。
【０３１９】
図２４に示すとおり、実施形態３と同様に、座標処理部２１は、タブレット領域１２０の中心ＴＣと、テレビ領域４２０の中心ＶＣとの中点Ｍの座標値を求める。座標処理部２１は、中点Ｍについて、タブレット座標系における中点の座標値（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））と、テレビ座標系における中点の座標値（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））とを求める。求められた中点座標は、座標処理部２１から連携指示部２４に供給される。
【０３２０】
連携指示部２４は、中点座標（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））に基づいて、選択されたオブジェクトのエフェクトを開始するようにエフェクト出力部２２を制御する。同時に、連携指示部２４は、オブジェクトを指定する情報、および、エフェクト開始コマンドに加えて、さらに、中点座標（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））をテレビ２００に送信する。本実施形態では、連携指示部２４は、エフェクト出力部２２に対しては、上記エフェクト開始コマンドをテレビ２００に送信してから１秒後にエフェクトを開始するように開始タイミングを指示する。一方、連携指示部２４は、テレビ２００に対しては、上記エフェクト開始コマンドを連携処理部５０が受信後すぐさまエフェクトを開始するように開始タイミングを指示する。
【０３２１】
テレビ座標系における中点座標（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））は、テレビ２００のエフェクト出力部５２にとって、オブジェクトを吸着させる基準点、すなわち、エフェクトの終点となる。タブレット座標系における中点座標（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））は、タブレット１００のエフェクト出力部２２にとって、オブジェクトを出現させる基準点、すなわち、エフェクトの始点となる。
【０３２２】
テレビ２００のエフェクト出力部５２は、連携処理部５０の制御下で、すぐさま、図２４に示すとおり、中点Ｍ（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））に向かって、オブジェクト２が徐々に縮小し、該中点Ｍにおいて消失する（吸着される）エフェクトを、１秒かけて出力する。
【０３２３】
一方、タブレット１００のエフェクト出力部２２は、連携指示部２４からの指示にしたがって、エフェクト開始コマンド送信から１秒後、図２４に示すとおり、中点Ｍ（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））から、オブジェクトを拡大し、最終的に全画面表示するエフェクトを１秒かけて出力する。
【０３２４】
〔処理フロー〕
図２５は、タブレット１００およびテレビ２００の処理の流れを示すフローチャートである。
【０３２５】
Ｓ６０１〜Ｓ６０４は、図２１におけるＳ４０１〜Ｓ４０４と同様である。
【０３２６】
座標処理部２１は、タップされたタイミングにおける画像データに基づいて、タブレット座標系におけるテレビ領域４２０の座標位置を特定する。本実施形態では、座標処理部２１は、テレビ領域４２０の原点（０、０）および中心ＶＣについて、タブレット領域１２０における座標値を少なくとも特定すればよい（Ｓ６０５）。
【０３２７】
次に、座標処理部２１は、図２４に示すとおり、テレビ画面の中心ＶＣとタブレット画面の中心ＴＣとの中点Ｍを求める。つまり、タブレット座標系における中点Ｍの中点座標（Ｘｍ（ｔａｂ）、Ｙｍ（ｔａｂ））を特定する（Ｓ６０６）。
【０３２８】
次に、座標処理部２１は、テレビ座標系における中点Ｍの中点座標（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））を特定する（Ｓ６０７）。
【０３２９】
本実施形態では、連携指示部２４は、「１秒間で、選択されたオブジェクトを、中点Ｍから表示し始めて拡大し、最後に該オブジェクトを全画面表示する」というエフェクトを実行するようにエフェクト出力部２２に指示する。ここで、連携指示部２４は、上記エフェクトを、エフェクト開始コマンドをテレビ２００に送信した時点から１秒後に開始するという命令をエフェクト出力部２２に供給する（Ｓ６０８）。
【０３３０】
連携指示部２４は、Ｓ６０８において、さらに、指定された（タップ操作された）オブジェクト２の指定情報と、エフェクト開始コマンドと、Ｓ６０７において求められた中点Ｍの座標値（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））をテレビ２００に送信する。本実施形態では、上記エフェクト開始コマンドは、「１秒間で、選択されたオブジェクトを、中点Ｍに向かって徐々に縮小し、最後に該オブジェクトを消失させる」というエフェクトを、該コマンド受信後すぐに実行することを指示する命令文を含んでいる。
【０３３１】
そこで、テレビ２００の連携処理部５０が、中点座標（Ｘｍ（ｔｖ）、Ｙｍ（ｔｖ））、オブジェクトの指定情報および上記エフェクト開始コマンドをタブレット１００から受信すると（Ｓ６０９においてＹＥＳ）、エフェクト出力部５２は、連携処理部５０の制御にしたがって、エフェクト出力を開始する（Ｓ６１０）。すなわち、エフェクト出力部５２は、図２４に示すとおり、上記エフェクト開始コマンドが受信されてからすぐさま、指定されたオブジェクト２を、中点Ｍに向かって１秒かけて縮小させ、消失させる。そして、エフェクト出力は、１秒後に終了する（Ｓ６１１）。
【０３３２】
一方、エフェクト出力部２２は、連携指示部２４の指示にしたがって、連携指示部２４が上記エフェクト開始コマンドをテレビ２００に送信した時点から１秒後に（Ｓ６１２においてＹＥＳ）、エフェクトを開始する（Ｓ６１３）。すなわち、エフェクト出力部２２は、図２４に示すとおり、中点Ｍから、選択されたオブジェクト２を表示し始めて拡大し、１秒かけて全画面表示する。そして、エフェクト出力は、１秒後に終了する（Ｓ６１４）。
【０３３３】
以上の構成および方法によれば、ユーザが、奥のテレビ２００に表示されたオブジェクト２を、手元のタブレット１００にて、タップなどで指定する操作を行ったときに、オブジェクト２がテレビ２００からタブレット１００へと物理的に移動したかのような演出をユーザに提供することができる。
【０３３４】
具体的には、図２４に示すとおり、「オブジェクト２が、テレビ２００のテレビ領域４２０上で、中点Ｍ（消失位置）に向かって吸い込まれる。そして、その地点（出現位置）から、オブジェクト２が、タブレット１００に飛んできてぶつかり、タブレット領域１２０の全面に広がる」というエフェクトである。
【０３３５】
タブレット１００およびテレビ２００は、互いにどのような位置関係にあろうとも、そのときの状況に応じて、動的に、中点Ｍを共有することができる。中点Ｍは、テレビ２００にとって、エフェクトの終点であり、タブレット１００にとってエフェクトの始点である。つまり、タブレット１００とテレビ２００との位置関係がどのように変化しても、常に、共有された、中点Ｍ（吸着点であり出現点）を基準位置にして、テレビ２００からタブレット１００へとエフェクトがシームレスに引き継がれる。最も好ましくは、オブジェクトの消失位置と出現位置とが一致していることにより、エフェクトが最もシームレスに引き継がれる。ここで、消失位置と出現位置との一致とは、タブレット領域１２０上でユーザから見て、消失位置と出現位置とが見かけ上一致していることを指す。
【０３３６】
したがって、現実味をより一層深めた仮想的表現が、タブレット１００とテレビ２００との連携によって実現可能となる。
【０３３７】
なお、中点Ｍが、タブレット領域１２０およびテレビ領域４２０のいずれか、あるいは、両方に重ならないケースにおいて、実施形態３に記載した変形例を、本実施形態に適用することができる。
【０３３８】
なお、座標処理部２１は、テレビ領域４２０の中心ＶＣの代わりに、テレビ２００のテレビ領域４２０に表示されているオブジェクト２の中心ＯＣを求めてもよい。そして、座標処理部２１は、オブジェクト２の中心ＯＣと、タブレット領域１２０の中心ＴＣとの間の中点Ｍ’を、基準位置として特定してもよい。この場合、基準位置（中点Ｍ’）は、エフェクト出力部５２にとってのオブジェクトの終点となり、エフェクト出力部２２にとってのオブジェクトの始点となる。
【０３３９】
〔実施形態共通の変形例〕
実施形態１〜３では、タブレット１００のエフェクト出力部２２は、所定の位置に所定の大きさで表示されたオブジェクト１を所定の終点に向かって、縮小、消失させるエフェクトを実行する構成であった。しかし、エフェクト出力部２２は、上記構成に限定されず、全画面表示されたオブジェクト１を所定の終点に向かって、縮小、消失させるエフェクトを実行することもできる。
【０３４０】
実施形態１〜３では、テレビ２００のエフェクト出力部５２は、オブジェクト１を、所定の始点から拡大させて最終的に全画面表示されるようにオブジェクト１のエフェクトを実行する構成であった。しかし、エフェクト出力部５２は、上記構成に限定されず、オブジェクト１を、所定の始点から拡大を始めて、任意の所定位置および所定サイズで最終的に表示させるようにエフェクトを実行することもできる。
【０３４１】
実施形態４〜６では、テレビ２００のエフェクト出力部５２は、所定の位置に所定の大きさで表示されたオブジェクト２を所定の終点に向かって、縮小、消失させるエフェクトを実行する構成であった。しかし、エフェクト出力部５２は、上記構成に限定されず、全画面表示されたオブジェクト１を所定の終点に向かって、縮小、消失させるエフェクトを実行することもできる。
【０３４２】
実施形態４〜６では、タブレット１００のエフェクト出力部２２は、オブジェクト１を、所定の始点から拡大させて最終的に全画面表示されるようにオブジェクト２のエフェクトを実行する構成であった。しかし、エフェクト出力部２２は、上記構成に限定されず、所定の始点から拡大を始めて、任意の所定位置および所定サイズで最終的に表示させるようにエフェクトを実行することもできる。
【０３４３】
実施形態１〜６では、タブレット１００のタブレット領域１２０は、テレビ２００のテレビ領域４２０に対して略平行に保持されていて、長方形のテレビ領域４２０は、タブレット領域１２０上に、略長方形に写されているケースについて説明した。
【０３４４】
しかし、本発明のタブレット１００は、テレビ領域４２０に対して平行に保持されていないケースにおいても、テレビ２００との間で、違和感のないエフェクトの連携を実現することができる。
【０３４５】
例えば、図２６の（ａ）および（ｂ）に示すとおり、タブレット領域１２０とテレビ領域４２０とが平行でないために、テレビ領域４２０が、略台形状に歪んでタブレット領域１２０に写っているケースが想定される。このケースでは、長方形のオブジェクトも、台形状に歪んでタブレット領域１２０に写り込む。
【０３４６】
このような場合には、タブレット１００の座標処理部２１は、テレビ領域４２０（または選択されたオブジェクト）の最も近い辺とタブレット１００との距離、上記辺の長さ、および、アスペクト比に基づいて、テレビ領域４２０の本来の長方形の形状を復元してもよい。エフェクト出力部２２は、図２６の（ａ）に示すとおり、復元された長方形の形状に基づいて、オブジェクトを拡縮することができる。
【０３４７】
あるいは、タブレット１００のエフェクト出力部２２は、図２６の（ｂ）に示すとおり、自装置に表示された長方形のオブジェクトを、徐々に縮小する場合には、通信相手のテレビ領域４２０の台形の形状に徐々に近づけながら縮小するというエフェクトを実行することができる。また、エフェクト出力部２２は、通信相手に表示された台形のオブジェクトを、徐々に拡大する場合には、その台形の形状から、タブレット領域１２０に表示できるように、長方形の形状に徐々に修正しながら拡大するというエフェクトを実行することができる。
【０３４８】
上述の実施形態１〜６では、エフェクトの具体例として、「表示中のオブジェクトを縮小しつつ消失位置（点）に移動させて消失させるエフェクト」、および、「出現位置（点）からオブジェクトを出現させ、所定の大きさおよび位置にオブジェクトを移動させて表示するエフェクト」を挙げた。すなわち、タブレット１００およびテレビ２００の間の空間を見かけ上移動するオブジェクトについて、該オブジェクトの見かけ上の位置に応じて、オブジェクトの大きさを変化させるエフェクトである。しかし、本発明の表示システムによって実現されるエフェクトはこれに限定されない。例えば、オブジェクトの見かけ上の位置に応じて、オブジェクトの透明度、色、移動速度などが変化するエフェクトが実現されてもよい。
【０３４９】
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
【０３５０】
〔ソフトウェアによる実現例〕
最後に、タブレット１００およびテレビ２００の各ブロック、特に、画像認識部２０、座標処理部２１、エフェクト出力部２２、操作受付部２３および連携指示部２４、ならびに、連携処理部５０、オブジェクト取得部５１およびエフェクト出力部５２は、ハードウェアロジックによって構成してもよいし、次のようにＣＰＵを用いてソフトウェアによって実現してもよい。
【０３５１】
すなわち、タブレット１００およびテレビ２００は、各機能を実現する制御プログラムの命令を実行するＣＰＵ（central processing unit）、上記プログラムを格納したＲＯＭ（read only memory）、上記プログラムを展開するＲＡＭ（random access memory）、上記プログラムおよび各種データを格納するメモリ等の記憶装置（記録媒体）などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアであるタブレット１００またはテレビ２００の制御プログラムのプログラムコード（実行形式プログラム、中間コードプログラム、ソースプログラム）をコンピュータで読み取り可能に記録した記録媒体を、上記タブレット１００またはテレビ２００に供給し、そのコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。
【０３５２】
上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ系、フロッピー（登録商標）ディスク／ハードディスク等の磁気ディスクやＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ／ＣＤ−Ｒ等の光ディスクを含むディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ／ＥＰＲＯＭ／ＥＥＰＲＯＭ／フラッシュＲＯＭ等の半導体メモリ系などを用いることができる。
【０３５３】
また、タブレット１００またはテレビ２００を通信ネットワークと接続可能に構成し、上記プログラムコードを、通信ネットワークを介して供給してもよい。この通信ネットワークとしては、特に限定されず、例えば、インターネット、イントラネット、エキストラネット、ＬＡＮ、ＩＳＤＮ、ＶＡＮ、ＣＡＴＶ通信網、仮想専用網（virtual private network）、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、通信ネットワークを構成する伝送媒体としては、特に限定されず、例えば、ＩＥＥＥ１３９４、ＵＳＢ、電力線搬送、ケーブルＴＶ回線、電話線、ＡＤＳＬ回線等の有線でも、ＩｒＤＡやリモコンのような赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）、８０２．１１無線、ＨＤＲ（High Data Rate）、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【産業上の利用可能性】
【０３５４】
本発明は、複数の装置間で共通のオブジェクトを表示することが可能な表示システムに広く好適に用いることができる。
【符号の説明】
【０３５５】
１  オブジェクト
２  オブジェクト
１０  制御部
１１  入力部
１２  表示部
１３  撮像部
１４  外部インターフェース
１５  通信部
１７  音声出力部
１８  音声入力部
１９  記憶部
２０  画像認識部（画像認識手段）
２１  座標処理部（座標処理手段／基準位置特定手段）
２２  エフェクト出力部（視覚的効果出力手段）
２３  操作受付部（操作受付手段）
２４  連携指示部（連携指示手段）
４０  制御部
４１  記憶部
４２  表示部
４３  無線通信部
５０  連携処理部（連携処理手段）
５１  オブジェクト取得部（オブジェクト取得手段）
５２  エフェクト出力部（視覚的効果出力手段）
１００  タブレット（端末装置）
１２０  タブレット領域（端末装置画面）
２００  テレビ（表示装置）
２００ａ  ノートパソコン（表示装置）
２００ｂ  デジタルフォトフレーム（表示装置）
４２０  テレビ領域（表示装置画面）
【図１】
2013152642.tif 000003
【図２】
2013152642.tif 000004
【図３】
2013152642.tif 000005
【図４】
2013152642.tif 000006
【図５Ａ】
2013152642.tif 000007
【図５Ｂ】
2013152642.tif 000008
【図６Ａ】
2013152642.tif 000009
【図６Ｂ】
2013152642.tif 000010
【図７】
2013152642.tif 000011
【図８】
2013152642.tif 000012
【図９】
2013152642.tif 000013
【図１０】
2013152642.tif 000014
【図１１】
2013152642.tif 000015
【図１２】
2013152642.tif 000016
【図１３】
2013152642.tif 000017
【図１４】
2013152642.tif 000018
【図１５】
2013152642.tif 000019
【図１６】
2013152642.tif 000020
【図１７】
2013152642.tif 000021
【図１８】
2013152642.tif 000022
【図１９】
2013152642.tif 000023
【図２０】
2013152642.tif 000024
【図２１】
2013152642.tif 000025
【図２２】
2013152642.tif 000026
【図２３】
2013152642.tif 000027
【図２４】
2013152642.tif 000028
【図２５】
2013152642.tif 000029
【図２６】
2013152642.tif 000030