(57)【要約】【課題】表示機器に表示される映像の視認性を向上させることが容易となる情報送信機器を提供する。【解決手段】映像データを取得し、前記映像データに基づいた情報を外部機器へ送信する情報送信機器であって、前記外部機器から、前記映像データの一部領域を特定し得る領域情報を受信する領域情報受信部と、前記領域情報に応じて前記映像データを加工する映像データ加工部と、前記加工が行われた映像データを、前記外部機器へ送信する映像データ送信部と、を備える情報送信機器とする。【選択図】図５
2015019199.tif 000002
【特許請求の範囲】
【請求項１】
映像データを取得し、前記映像データに基づいた情報を外部機器へ送信する情報送信機器であって、
前記外部機器から、前記映像データの一部領域を特定し得る領域情報を受信する領域情報受信部と、
前記領域情報に応じて前記映像データを加工する映像データ加工部と、
前記加工が行われた映像データを、前記外部機器へ送信する映像データ送信部と、
を備えることを特徴とする情報送信機器。
【請求項２】
前記映像データ加工部は、
前記加工の処理として、前記領域情報に対応した部分を抽出する処理を行うことを特徴とする請求項１に記載の情報送信機器。
【請求項３】
画面を有する前記外部機器から、該画面のサイズ情報を取得し、
前記映像データ加工部は、
前記加工の処理として、前記抽出を行うとともに前記サイズ情報に基づいて表示サイズを変更させる処理を行うことを特徴とする請求項２に記載の情報送信機器。
【請求項４】
前記映像データ加工部は、前記表示サイズを変更させる処理として、
前記画面において特定の向きに略最大表示される表示サイズに変更させる処理を行うことを特徴とする請求項３に記載の情報送信機器。
【請求項５】
前記外部機器が縦向きと横向きの何れであるかを表す情報を、前記外部機器から受信し、
前記映像データ加工部は、前記表示サイズを変更させる処理として、
前記外部機器が縦向きのときには、前記画面において縦向きに略最大表示される表示サイズに変更させる処理を行い、
前記外部機器が横向きのときには、前記画面において横向きに略最大表示される表示サイズに変更させる処理を行うことを特徴とする請求項４に記載の情報送信機器。
【請求項６】
前記映像データを改変させる改変操作の情報を、前記外部機器から受信し、
前記映像データに前記改変の内容を反映させることを特徴とする請求項１から請求項５の何れかに記載の情報送信機器。
【請求項７】
ディスプレイを備え、
前記ディスプレイに、前記加工が行われていない前記映像データを表示することを特徴とする請求項１から請求項６の何れかに記載の情報送信機器。
【請求項８】
前記映像データ送信部は、
前記領域情報の受信前に、前記加工が行われていない前記映像データを、前記外部機器へ送信することを特徴とする請求項１から請求項７の何れかに記載の情報送信機器。
【請求項９】
前記領域情報受信部は、前記映像データの一部領域の撮影画像情報を、前記領域情報として受信し、
前記映像データ中の前記撮影画像情報に対応する部分を検出する検出部、を有することを特徴とする請求項７に記載の情報送信機器。
【請求項１０】
前記検出部は、
前記ディスプレイに表示させた前記映像データのフレームをバッファリングし、
前記バッファリングされたフレームの何れかと前記撮影画像情報との比較により、前記検出を行うことを特徴とする請求項９に記載の情報送信機器。
【請求項１１】
請求項１から請求項１０の何れかに記載の情報送信機器へ、前記領域情報を送信する領域情報送信部と、
前記情報送信機器から受信した映像データを表示する画面と、
を有することを特徴とする表示機器。
【請求項１２】
請求項８に記載の情報送信機器から受信した映像データを表示する画面と、
前記画面に表示された映像データの一部領域の指定を受付ける指定受付部と、
前記指定された領域に応じて前記領域情報を生成し、前記情報送信機器へ送信する領域情報送信部と、
を有することを特徴とする表示機器。
【請求項１３】
請求項９または請求項１０に記載の情報送信機器から受信した前記映像データを表示する画面と、
前記ディスプレイに表示された前記映像データの一部領域を撮影し、撮影画像情報を取得する撮影部と、
前記領域情報として、前記撮影画像情報を前記情報送信機器へ送信する領域情報送信部と、
を有することを特徴とする表示機器。
【請求項１４】
前記領域情報送信部は、
前記撮影画像情報とともに、該撮影画像情報に対応した撮影時刻の情報を送信することを特徴とする請求項１３に記載の表示機器。
【請求項１５】
映像データを取得する第１処理と、
前記外部機器から、前記映像データの一部領域を特定し得る領域情報を受信する第２処理と、
前記領域情報に応じて前記映像データを加工する第３処理と、
前記加工が行われた映像データを、前記外部機器へ送信する第４処理と、
を含むことを特徴とするデータ処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像データを送信する情報送信機器、映像を表示する表示機器、およびデータ処理方法に関する。
【背景技術】
【０００２】
従来、映像データを送信する情報送信機器と映像を表示する表示機器が通信を行い、これらが連携して動作するシステムが利用されている。情報送信機器としては、例えばテレビ放送受信機やパーソナルコンピュータ等が挙げられ、表示機器としては、タブレット型情報端末やスマートフォン等が挙げられる。
【０００３】
情報送信機器と表示機器が連携して行う動作としては、例えば、双方の機器において同じ内容を表示する動作（ミラーリング表示）が挙げられる。このミラーリング表示は、情報送信機器が映像データを表示機器へ送信し、表示機器がこのデータを用いて映像を表示することにより実現される。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−１６４３１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで表示機器は、例えば持ち運びに便利であるように、比較的小型の仕様であることが多い。このような事情から、表示機器の画面サイズも小さい傾向にあり、当該画面に表示される映像の視認性が問題となり易い。そのため、表示機器に表示される映像の視認性を向上させることが可能であれば、利便性が高まることになる。
【０００６】
なお、ある映像の全体が画面に表示される場合に比べ、当該画面にその映像の一部が拡大表示される場合には、表示される映像の範囲は狭くなるが視認性は向上する。例えば映像の一部分に文字が含まれるケースでは、映像全体が画面に表示される場合には文字が小さ過ぎて読取り難くても、当該画面にその部分が拡大表示されると、文字は拡大されて読取り易くなる。
【０００７】
本発明は上述した問題に鑑み、表示機器に表示される映像の視認性を向上させることが容易となる情報送信機器、およびこれに関する表示機器およびデータ処理方法の提供を目的とする。
【課題を解決するための手段】
【０００８】
本発明に係る情報送信機器は、映像データを取得し、前記映像データに基づいた情報を外部機器へ送信する情報送信機器であって、前記外部機器から、前記映像データの一部領域を特定し得る領域情報を受信する領域情報受信部と、前記領域情報に応じて前記映像データを加工する映像データ加工部と、前記加工が行われた映像データを、前記外部機器へ送信する映像データ送信部と、を備える構成とする。本構成によれば、表示機器に表示される映像の視認性を向上させることが容易となる。
【０００９】
また上記構成としてより具体的には、前記映像データ加工部は、前記加工の処理として、前記領域情報に対応した部分を抽出する処理を行う構成としてもよい。また当該構成としてより具体的には、画面を有する前記外部機器から、該画面のサイズ情報を取得し、前記映像データ加工部は、前記加工の処理として、前記抽出を行うとともに前記サイズ情報に基づいて表示サイズを変更させる処理を行う構成としてもよい。本構成によれば、抽出された映像のサイズが目標とするサイズとは異なっていても、映像データの表示サイズを適切に設定することが可能となる。
【００１０】
また上記構成としてより具体的には、前記映像データ加工部は、前記表示サイズを変更させる処理として、前記画面において特定の向きに略最大表示される表示サイズに変更させる処理を行う構成としてもよい。本構成によれば、表示機器に表示される映像の視認性を、出来るだけ良好なものとすることが可能となる。
【００１１】
また上記構成としてより具体的には、前記外部機器が縦向きと横向きの何れであるかを表す情報を、前記外部機器から受信し、前記映像データ加工部は、前記表示サイズを変更させる処理として、前記外部機器が縦向きのときには、前記画面において縦向きに略最大表示される表示サイズに変更させる処理を行い、前記外部機器が横向きのときには、前記画面において横向きに略最大表示される表示サイズに変更させる処理を行う構成としてもよい。本構成によれば、表示機器が縦向きと横向きの何れで使用される場合にも、表示機器に表示される映像の視認性を、出来るだけ良好なものとすることが可能となる。
【００１２】
また上記構成としてより具体的には、前記映像データを改変させる改変操作の情報を、前記外部機器から受信し、前記映像データに前記改変の内容を反映させる構成としてもよい。本構成によれば、利便性を更に向上させることが可能となる。また上記構成としてより具体的には、ディスプレイを備え、前記ディスプレイに、前記加工が行われていない前記映像データを表示する構成としてもよい。なお本願での「映像データを表示」は「映像データの映像を表示」を意味する。
【００１３】
また上記構成としてより具体的には、前記映像データ送信部は、前記領域情報の受信前に、前記加工が行われていない前記映像データを、前記外部機器へ送信する構成としてもよい。本構成によれば、例えば、加工前の映像データを利用して領域情報を取得する形態の表示機器と、連携することが容易となる。
【００１４】
また上記構成としてより具体的には、前記領域情報受信部は、前記映像データの一部領域の撮影画像情報を、前記領域情報として受信し、前記映像データ中の前記撮影画像情報に対応する部分を検出する検出部、を有する構成としてもよい。本構成によれば、例えば、映像データの一部領域の撮影画像情報を送信する形態の表示機器と、連携することが容易となる。
【００１５】
また上記構成としてより具体的には、前記検出部は、前記ディスプレイに表示させた前記映像データのフレームをバッファリングし、前記バッファリングされたフレームの何れかと前記撮影画像情報との比較により、前記検出を行う構成としてもよい。
【００１６】
また本発明に係る表示機器は、上記構成の情報送信機器へ、前記領域情報を送信する領域情報送信部と、前記情報送信機器から受信した映像データを表示する画面と、を有する構成とする。本構成によれば、上記構成の情報送信機器と連携し、視認性の良い映像を表示することが可能となる。
【００１７】
また本発明に係る表示機器は、上記構成の情報送信機器から受信した映像データを表示する画面と、前記画面に表示された映像データの一部領域の指定を受付ける指定受付部と、前記指定された領域に応じて前記領域情報を生成し、前記情報送信機器へ送信する領域情報送信部と、を有する構成とする。本構成によれば、例えば、領域情報の受信前に加工が行われていない映像データを送信する形態の情報送信機器と、連携することが容易となる。
【００１８】
また本発明に係る表示機器は、上記構成の情報送信機器から受信した前記映像データを表示する画面と、前記ディスプレイに表示された前記映像データの一部領域を撮影し、撮影画像情報を取得する撮影部と、前記領域情報として、前記撮影画像情報を前記情報送信機器へ送信する領域情報送信部と、を有する構成とする。
【００１９】
本構成によれば、例えば、映像データを表示するディスプレイを有するとともに、映像データ中の撮影画像情報に対応する部分を検出する形態の情報送信機器と、連携することが容易となる。また当該構成において、前記領域情報送信部は、前記撮影画像情報とともに、該撮影画像情報に対応した撮影時刻の情報を送信する構成としてもよい。
【００２０】
また本発明に係るデータ処理方法は、映像データを取得する第１処理と、前記外部機器から、前記映像データの一部領域を特定し得る領域情報を受信する第２処理と、前記領域情報に応じて前記映像データを加工する第３処理と、前記加工が行われた映像データを、前記外部機器へ送信する第４処理と、を含む方法とする。
【発明の効果】
【００２１】
本発明に係る情報送信機器およびデータ処理方法によれば、表示機器に表示される映像の視認性を向上させることが容易となる。また本発明に係る表示機器によれば、本発明に係る情報送信機器と連携し、視認性の良い映像を表示することが可能となる。
【図面の簡単な説明】
【００２２】
【図１】第１実施形態に係る映像表示システムのブロック図である。
【図２】映像処理部の周辺に関するより詳細なブロック図である
【図３】第１実施形態に係る情報送信機器の外観図である。
【図４】第１実施形態に係る表示機器の外観図である。
【図５】第１実施形態に係るミラーリング表示に関するフローチャートである。
【図６】注視領域を指定する操作に関する説明図である。
【図７】ミラーリング表示の動作に関する説明図である。
【図８】ミラーリング表示の動作に関する説明図である。
【図９】表示機器の使用状態に関する説明図である。
【図１０】表示機器の映像表示の向きに関する説明図である。
【図１１】第２実施形態に係る映像表示システムのブロック図である。
【図１２】第２実施形態に係る表示機器の外観図である。
【図１３】表示機器を用いた撮影に関する説明図である。
【図１４】第２実施形態に係るミラーリング表示に関するフローチャートである。
【発明を実施するための形態】
【００２３】
本発明の実施形態について、第１実施形態および第２実施形態を例に挙げ、図面を参照しながら以下に説明する。
【００２４】
１．第１実施形態
［映像表示システムの構成等］
まず第１実施形態について説明する。図１は、本実施形態に係る映像表示システム９の構成に関するブロック図である。本図に示すように映像表示システム９は、情報送信機器１および表示機器２を有している。なお情報送信機器１の具体例としては、テレビ放送受信機やパーソナルコンピュータ等が挙げられ、表示機器２の具体例としては、タブレット型情報端末やスマートフォン等が挙げられる。
【００２５】
情報送信機器１と表示機器２は互いに独立した機器であり、それぞれ単独で利用することが可能である。そして更に情報送信機器１と表示機器２は、互いに通信可能な状態となることにより、連携した動作を行うことも可能である。この連携した動作には、例えばWi-Fi Miracastによる、ミラーリング表示のための動作が含まれる。ミラーリング表示のための動作の詳細については、後述の説明により明らかとなる。
【００２６】
情報送信機器１は、デコーダ１１、ビデオメモリ１２、映像表示部１３、映像処理部１４、エンコーダ１５、通信部１６、操作受付部１７、およびメイン制御部１８を備えている。情報送信機器１には、外部から映像信号（例えばテレビ放送信号のように、映像のデータを含む信号）が入力されるようになっている。
【００２７】
デコーダ１１は、外部から入力される映像信号に対して復号化処理を施し、当該信号に含まれる映像のデータ（以下、便宜的に「元映像データ」と称することがある）をビデオメモリ１２へ送出する。
【００２８】
ビデオメモリ１２には、デコーダ１１から受ける元映像データのフレームが逐次格納される。ビデオメモリ１２に格納されるフレームは、デコーダ１１から元映像データが送られることに応じ、逐次最新のものに更新される。
【００２９】
映像表示部１３は、第１画面（ディスプレイ）１３ａを有しており、ビデオメモリ１２に格納されているフレームを第１画面１３ａに表示させる。第１画面１３ａの表示領域のサイズは、例えば横1024×縦768画素のサイズである。ビデオメモリ１２に格納されているフレームは、第１画面１３ａの表示領域の全体に表示される。すなわち元映像データの映像は、第１画面１３ａの表示領域の全体に表示される。
【００３０】
映像処理部１４は、元映像データに対して所定の処理を施して、表示機器２へ送信するための映像データＤiを生成する役割を果たす。図２は、映像処理部１４の周辺に関するより詳細なブロック図である。本図に示すように映像処理部１４は、クリッピング部１４ａ、スケーリング部１４ｂ、および仮想領域設定部１４ｃを有する。
【００３１】
クリッピング部１４ａは、ビデオメモリ１２に格納された元映像データのフレームが入力される。そしてクリッピング部１４ａは、入力されたフレームに対するクリッピング（一部分だけを切り抜く動作）を実行し、クリッピングしたフレームをスケーリング部１４ｂへ送出する。
【００３２】
なおクリッピング部１４ａは、メイン制御部１８が生成するクリッピング部分情報Ｉc（クリッピングすべき部分を示す情報であり、詳しくは後述する）を受け、クリッピング部分情報Ｉcに示される部分をクリッピングする。但しクリッピング部分情報Ｉcが未だ生成されていない段階では、クリッピングは実行されない。このときクリッピング部１４ａは、ビデオメモリ１２から入力される元映像データのフレームを、そのままスケーリング部１４ｂへ送出する。
【００３３】
スケーリング部１４ｂは、クリッピング部１４ａから入力されるフレームを、仮想領域ＩＲのサイズと合うようにスケーリング処理を施した上で、仮想領域ＩＲへ送出する。例えば、仮想領域ＩＲのサイズが600×450画素である場合、スケーリング部１４ｂに入力されるフレームは600×450画素のサイズにスケーリングされる。
【００３４】
なおスケーリング処理は、横方向のサイズ（画素数）と縦方向のサイズ（画素数）の比を固定したまま、フレームのサイズを変える（拡大または縮小する）処理であっても良く、当該比が変化するように、フレームのサイズを変える処理であっても良い。クリッピング部１４ａから入力されるフレームと仮想領域ＩＲの関係において、横方向のサイズと縦方向のサイズの比が異なる場合には、スケーリング処理は、当該比が変化するようにフレームのサイズを変える処理となる。
【００３５】
仮想領域ＩＲは、表示機器２側の映像表示領域を仮想して設定される領域であり、実体的には、情報送信機器１に設けられたメモリの一部（仮想領域用メモリ）である。仮想領域用メモリは、ビデオメモリ１２と共通であっても良く、別に用意されたメモリであっても良い。
【００３６】
仮想領域ＩＲには、スケーリング部１４ｂから受けるフレームが逐次格納される。仮想領域ＩＲに格納されるフレームは、スケーリング部１４ｂから継続的にフレームが送られることに応じ、逐次最新のものに更新される。
【００３７】
仮想領域設定部１４ｃは、サイズ情報Ｉs（後述する通り、第２画面２３ａの表示領域のサイズを表す情報）を受けるようになっている。そして仮想領域設定部１４ｃは、サイズ情報Ｉsとスケーリング対象映像サイズ（スケーリング部１４ｂへ入力されることになる映像のサイズ）に基づいて、サイズの仮想領域ＩＲを設定する。また仮想領域設定部１４ｃは、仮想領域ＩＲのサイズの情報をスケーリング部１４ｂへ送出し、仮想領域ＩＲのサイズに合わせるスケーリング処理が適切に行われるようにする。
【００３８】
仮想領域ＩＲに逐次格納されるフレームは、映像データＤiのフレームとして、後段のエンコーダ１５に逐次送出される。このように映像処理部１４は、映像データＤiを生成してエンコーダ１５へ送出するようになっている。
【００３９】
図１に戻り、エンコーダ１５は、映像処理部１４から受取った映像データＤiに対して符号化処理を施し、通信部１６へ送出する。通信部１６は、他機との通信を実行する機能を有し、表示機器２に接続されているときは、表示機器２との通信を実行する。例えば通信部１６は、エンコーダ１５から映像データＤiを受取ったときには、この映像データＤiを表示機器２へ送信する。なお通信部１６が行う通信の形態は、無線通信と有線通信の何れであっても良い。
【００４０】
操作受付部１７は、例えばリモートコントローラおよび第１画面１３ａに設けられたタッチパネルであり、ユーザの操作を受付ける機能を有する。操作受付部１７によって受付けられた操作の内容を示す情報は、メイン制御部１８へ送出される。
【００４１】
メイン制御部１８は、情報送信機器１が適切に動作するように、情報送信機器１の各部を制御する。なお情報送信機器１が行う主な動作については、改めて説明する。
【００４２】
また表示機器２は、通信部２１、デコーダ２２、映像表示部２３、操作受付部２４、およびメイン制御部２５を備えている。
【００４３】
通信部２１は、他機との通信を実行する機能を有し、情報送信機器１に接続されているときは、情報送信機器１との通信を実行する。通信部２１は、情報送信機器１から映像データＤiが送信されたときには、この映像データＤiを受信する。
【００４４】
デコーダ２２は、通信部２１が受信した映像データＤiに対して復号化処理を施し、映像表示部２３へ送出する。映像表示部２３は、第２画面（ディスプレイ）２３ａを有しており、デコーダ２２から受ける映像データＤiを第２画面２３ａに表示させる。
【００４５】
操作受付部２４は、例えば第２画面２３ａに設けられたタッチパネルであり、ユーザの操作を受付ける機能を有する。操作受付部２４によって受付けられた操作の内容を示す情報は、メイン制御部２５へ送出される。メイン制御部２５は、表示機器２が適切に動作するように、表示機器２の各部を制御する。
【００４６】
また図３は情報送信機器１の前側の外観図であり、図４は表示機器２の前側の外観図である。これらの図に示すように、第１画面１３ａと第２画面２３ａは、何れも矩形状の表示領域を有している。なお第２画面２３ａの表示領域は、縦方向のサイズ（画素数）が横方向のサイズ（画素数）よりも大きくなっている。また表示機器２（メイン制御部２５）は、第２画面２３ａの表示領域のサイズを表すサイズ情報Ｉsを所有している。
【００４７】
［ミラーリング表示の動作］
次に、情報送信機器１に表示されている映像を表示機器２へミラーリング表示させるための一連の動作について、図５に示すフローチャートを参照しながら以下に説明する。
【００４８】
ユーザは情報送信機器１と表示機器２に、互いに通信可能な状態とするための接続処理を行わせることが可能である（ステップＳ１１、ステップＳ２１）。表示機器２は、接続処理によって情報送信機器１へ接続されると（ステップＳ２１のＹ）、情報送信機器１へサイズ情報Ｉｓを送信する（ステップＳ２２）。情報送信機器１は、表示機器２からサイズ情報Ｉｓを受信することにより、サイズ情報Ｉｓを取得することができる。
【００４９】
一方で情報送信機器１は、接続処理によって表示機器２へ接続されると（ステップＳ１１のＹ）、サイズ情報Ｉｓおよびスケーリング対象映像サイズ（ここでは元映像データのサイズ）に基づいて、仮想領域ＩＲを設定する（ステップＳ１２）。
【００５０】
より具体的に説明すると、仮想領域設定部１４ｃは、映像データＤiが第２画面２３ａにおいて縦向きに最大表示（過不足なく表示）される場合の映像のサイズを算出する。なお算出される映像のサイズは、スケーリング対象映像サイズを基準として、横方向のサイズ（画素数）と縦方向のサイズ（画素数）の比を固定したサイズとしても良く、当該比を変化させたサイズとしても良い。また当該比を変化させたサイズとする例では、この変化の度合はユーザが任意に設定可能であっても良く、例えば映像データＤiが第２画面２３ａの表示領域一杯に表示されるサイズとなるように、自動的に設定されても良い。仮想領域設定部１４ｃは、このようにして算出したサイズの仮想領域ＩＲを設定する。
【００５１】
また当該比を固定したサイズとする例では、映像データＤiの映像はスケーリング部１４ｂへ入力される映像と相似の関係になり、当該映像を出来るだけ変形させずに第２画面２３ａへ表示させることが可能となる。なおこの例では、例えば、第２画面２３ａの表示領域が横600×縦800画素のサイズである場合に、スケーリング対象映像サイズにおける横方向のサイズ（画素数）と縦方向のサイズ（画素数）の比が４：３であるとき、横600×縦450画素のサイズの仮想領域ＩＲが設定される。
【００５２】
このように仮想領域ＩＲが設定されると、スケーリング処理部１４ｂは、第２画面２３ａにおいて縦向きに最大表示されるサイズとなるように、入力されるフレームにスケーリング処理を施すことになる。なおここでの「最大表示」は、厳密な意味での最大表示の他、これに準じた表示（例えば、表示領域の外縁に所定幅の余白を設けた表示）も含む概念である。
【００５３】
仮想領域ＩＲの設定後、情報送信機器１は、表示機器２への映像データＤiの送信を開始する（ステップＳ１３）。これにより情報送信機器１は、第１画面１３ａに元映像データを表示させつつ、表示機器２へ映像データＤi（現段階では、元映像データにスケーリング処理を施したもの）を送信する状態となる。映像データＤiの送信は、例えば送信停止の指示がなされたり、外部からの映像信号の入力が途絶えたりするまで継続される。
【００５４】
一方で表示機器２は、サイズ情報Ｉsを送信した後、情報送信機器１から映像データＤiを受信することになる。そこで表示機器２は、映像データＤiを第２画面へ縦向きに表示させる処理を開始する（ステップＳ２３）。これにより、第１画面１３ａに表示される映像についてのミラーリング表示が開始される。なお現段階では、第１画面１３ａに表示される映像全体がミラーリング表示されることになる。
【００５５】
また当該ミラーリング表示が行われている際に、表示機器２は、ユーザによる注視領域（映像データＤiのフレームにおける一部領域）を指定する操作を待機する（ステップＳ２４）。このときユーザは、第２画面２３ａに表示されている映像データＤiの中に注視したい領域がある場合には、その領域を注視領域として指定するように操作を行うことが出来る。
【００５６】
すなわちミラーリング表示が行われているとき、図６に示すように、第２画面２３ａには映像データＤiが表示されている。そこでユーザは、例えば図６に点線で示す矩形領域を、注視領域として指定することが出来る。
【００５７】
この指定のための操作は、例えば、第２画面２３ａに設けられたタッチパネルを使って行われる。また当該操作が行われるとき（例えばタッチパネルに指等が触れたとき）、注視領域を容易かつ的確に指定することが出来るように、第２画面２３ａに表示される映像が一旦静止するようになっていても良い。注視領域を指定する操作がなされると（ステップＳ２４のＹ）、表示機器２は、注視領域を特定する注視領域情報Ｉgを、情報送信機器１へ送信する（ステップＳ２５）。
【００５８】
また情報送信機器１は、表示機器２への映像データＤiの送信を開始した後、表示機器２からの注視領域情報Ｉgの受信を待機するようになっている（ステップＳ１４）。情報送信機器１が注視領域情報Ｉgを受信すると（ステップＳ１４のＹ）、メイン制御部１８は、元映像データの映像のうちの注視領域に対応する部分を認識し、この認識した部分を示す情報をクリッピング部分情報Ｉcとして生成する。
【００５９】
またスケーリング対象映像サイズが、元映像データのサイズから注視領域に対応する部分のサイズに変更されることになるため、仮想領域設定部１４ｃは、仮想領域ＩＲのサイズを更新する（ステップＳ１５）。すなわち仮想領域設定部１４ｃは、サイズ情報Ｉｓとスケーリング対象映像サイズ（ここでは注視領域に対応する部分のサイズ）に基づき、ステップＳ１２に準じた処理を行って仮想領域ＩＲのサイズを更新する。これにより以降、スケーリング処理部１４ｂは、第２画面２３ａにおいて縦向きに最大表示されるサイズとなるように、注視領域に対応する部分のフレームにスケーリング処理を施すことになる。
【００６０】
上述したクリッピング部分情報Ｉcが生成されることにより、クリッピング部１４ａは、元映像データの各フレームのうち、注視領域に対応する部分のクリッピングを開始する（ステップＳ１６）。その結果、元映像データの映像のうちの注視領域の部分のみが仮想領域ＩＲに格納された後、映像データＤｉとして表示機器２に送信される。これにより、第１画面１３ａに表示された映像のうちの注視領域に対応する部分だけが、第２画面２３ａにミラーリング表示されることになる。
【００６１】
なお映像データＤiの映像は、第２画面２３ａにおいて縦向きに最大表示されるサイズとなるように、情報送信機器１側で予め調節されている。そのため表示機器２は、受信した映像データＤiにスケーリング処理等を施すことなく、その映像を第２画面２３ａへ最大表示させることが可能である。すなわち表示機器２はスケーリング処理等を施すことなく、縦向きで使用される際に視認性が良好となる形態で、映像データＤiを表示させることが可能である。
【００６２】
上述した一連の動作をより理解容易とするため、図７および図８に、当該動作の概略を模式的に示す。なお図７は、情報送信機器１が注視領域情報Ｉgを受信する前の動作を示し、図８は、情報送信機器１が注視領域情報Ｉgを受信した後の動作を示す。
【００６３】
図７に示すように、先ずは第１画面１３ａに表示される映像全体と同じもの（元映像データ）が、スケーリングされて仮想領域ＩＲに格納される。そして仮想領域ＩＲに格納された映像（映像データＤi）は、表示装置２へ送信されて第２画面２３ａに表示される。なお第２画面２３ａにおける当該映像の表示領域のサイズは、仮想領域ＩＲのサイズと同じである。そして表示装置２は注視領域の指定を受付けると、注視領域情報Ｉgを情報送信機器１へ送信する。
【００６４】
その後は図８に示すように、第１画面１３ａに表示される映像全体ではなく、注視領域に対応した部分だけが、スケーリングされて仮想領域ＩＲに格納される。そして仮想領域ＩＲに格納された映像（映像データＤi）は、表示装置２へ送信されて第２画面２３ａに表示される。これにより第２画面２３ａには、注視領域の部分を拡大した映像が表示される。このように拡大して表示される分だけ、第２画面２３ａに表示される映像の視認性は向上している。
【００６５】
［表示機器の向きに対応した動作］
上述したように表示機器２は、縦向きで使用される際に視認性が良好となる形態で、映像データＤiを表示させることが可能である。ただし表示機器２が主に横向きで使用される場合、横向きの表示機器２に適応するように映像データＤiが生成されるようにしても良い。
【００６６】
この場合に仮想領域設定部１４ｃは、映像データＤiが第２画面２３ａにおいて横向きに最大表示される場合の映像のサイズを算出し、当該算出されたサイズの仮想領域ＩＲを設定する。また表示機器２は、スケーリング処理等を施すことなく、受信した映像データＤiを第２画面２３ａへ横向きに表示させる。これにより表示機器２は、横向きで使用される際に視認性が良好となる形態で、映像データＤiを表示させることが可能となる。
【００６７】
また図９に示すように、表示機器２が縦向きと横向きの何れの状態でも使用され得る場合、表示機器２の向きに応じて映像データＤiが生成されるようにしても良い。
【００６８】
例えば表示機器２は、自機が縦向きと横向きの何れであるかを認識する機能（例えば、重力の向きを検出して当該認識を行う機能）が設けられる。そして表示機器２は、自機が縦向きと横向きの何れであるかを表す情報を、情報送信機器１へ送信するように構成される。
【００６９】
仮想領域設定部１４ｃは、表示機器２から受信する当該情報に応じて、仮想領域ＩＲを設定する。より具体的に説明すると仮想領域設定部１４ｃは、表示機器２が縦向きのときには、映像データＤiが第２画面２３ａにおいて縦向きに最大表示される場合の映像のサイズを算出し、当該算出されたサイズの仮想領域ＩＲを設定する。一方で仮想領域設定部１４ｃは、表示機器２が横向きのときには、映像データＤiが第２画面２３ａにおいて横向きに最大表示される場合の映像のサイズを算出し、当該算出されたサイズの仮想領域ＩＲを設定する。
【００７０】
すなわち情報送信機器１は、映像データＤiの表示サイズを、表示機器２が縦向きのときには、第２画面２３ａにおいて縦向きに最大表示されるサイズに設定し、表示機器２が横向きのときには、第２画面２３ａにおいて横向きに最大表示されるサイズに設定する。また表示機器２は、自機が縦向きのときには、受信する映像データＤiを第２画面２３ａへ縦向きに表示させ、自機が横向きのときには、受信する映像データＤiを第２画面２３ａへ横向きに表示させる。
【００７１】
このようにすれば図１０に示す通り、表示機器２が縦向きと横向きの何れで使用される際にも、視認性が良好となる形態で（最大表示される形態で）、第２画面２３ａに映像データＤiを表示させることが可能となる。
【００７２】
［ミラーリングされる映像の改変］
映像表示システム９は、表示機器２側の操作により、ミラーリングされる映像（第２画面２３ａに表示される映像データＤiの映像）を改変することが可能となっていても良い。
【００７３】
例えば表示機器２は、ミラーリング表示を行っている際に描画の操作（例えばタッチパネルに指等で描画する操作）がなされると、この操作を改変操作として認識する。なお改変操作は、描画されたものを重畳させるように、第２画面２３ａにミラーリング表示される映像を改変させる操作である。
【００７４】
そして表示機器２は、当該改変の内容（描画されたものの形や位置など）を表す改変情報を、情報送信機器１に送信する。情報送信機器１は改変情報を受信すると、描画されたものを映像に重畳させるように、元映像データを修正する。
【００７５】
これにより、第１画面１３ａに表示される元映像データの映像に、当該改変が反映される。また元映像データに基づいて生成される映像データＤiの映像にも、当該改変が反映されることになる。すなわち映像に当該改変の内容が反映されるように、映像データＤiが生成されることになる。この映像データＤiは表示機器２に送信され、その映像が第２画面２３ａに表示される。その結果として、ミラーリングされる映像が改変されることになる。
【００７６】
このように構成された映像表示システム９によれば、ユーザは表示機器２を操作し、ミラーリングされる映像に所望の改変を加えることが可能である。これにより利便性を更に向上させることが可能である。
【００７７】
２．第２実施形態
次に第２実施形態について説明する。なお第２実施形態は、注視領域の指定受付や特定手法等に関する点を除き、基本的には第１実施形態と同様である。以下の説明では、第１実施形態と異なる部分の説明に重点をおき、共通する部分については説明を省略することがある。
【００７８】
図１１は、第２実施形態に係る映像表示システム９の構成に関するブロック図である。本図に示すように映像表示システム９は、第１実施形態の場合と同様に、情報送信機器１および表示機器２を有している。
【００７９】
情報送信機器１は、第１実施形態の場合と同等の構成要素（１１〜１８）を備えるとともに、時計部１９を備えている。時計部１９は、例えば水晶振動子を用いた一定周期のカウントを行い、計時によって現在時刻を認識するように構成されている。
【００８０】
なおメイン制御部１８は、ビデオメモリ１２に格納される元映像データ（つまり、第１画面１３ａに表示される映像データ）のフレームを、第１画面１３ａに表示される時刻の情報を付随させて、所定時間分（例えば数秒分）だけバッファリングするようになっている。バッファリングされたフレームは、後述するように、注視領域を特定するために利用される。
【００８１】
また表示機器２は、第１実施形態の場合と同等の構成要素（２１〜２５）を備えるとともに、時計部２６およびカメラ部２７を備えている。時計部２６は、例えば水晶振動子を用いた一定周期のカウントを行い、計時によって現在時刻を認識するように構成されている。
【００８２】
カメラ部２７は、レンズ等の光学系を有しており、被写体を連続的に撮影して撮影画像を取得する。取得された撮影画像は、メイン制御部２５へ送出される。またメイン制御部２５は、カメラ部２７から受取った撮影画像を、第２画面２３ａへリアルタイムに表示させる。これにより、第２画面２３ａを用いた被写体のモニタリングが可能となっている。
【００８３】
図１２は、表示機器２の前側および後側の外観図である。本図に示すように表示機器２の後側には、表示機器２の後方に位置する被写体が撮影可能となるように、カメラ部２７のレンズが露出している。ユーザは図１３に示すように、第１画面１３ａ（情報送信機器１）に表示された映像の一部領域（図１３の例では破線で示した領域）を、カメラ部２７（表示機器２）に撮影させることが出来る。またこのときユーザは、第２画面２３ａのモニタリング表示を見ることにより、第１画面１３ａに表示された映像のどの部分が撮影されているか（つまり、撮影範囲）を知ることが出来る。
【００８４】
次に、情報送信機器１に表示されている映像を表示機器２へミラーリング表示させるための一連の動作について、図１４に示すフローチャートを参照しながら以下に説明する。
【００８５】
ユーザは情報送信機器１と表示機器２に、互いに通信可能な状態とするための接続処理を行わせることが可能である（ステップＳ３１、ステップＳ４１）。表示機器２は、接続処理によって情報送信機器１へ接続されると（ステップＳ４１のＹ）、情報送信機器１へサイズ情報Ｉｓを送信する（ステップＳ４２）。
【００８６】
また情報送信機器１と表示機器２は、互いに時刻を同期させるための同期処理を実行する（ステップＳ３３、ステップＳ４３）。これにより、時計部１９（情報送信機器１）が認識する現在時刻と時計部２６（表示機器２）が認識する現在時刻の間にズレが生じていても、このズレは解消されることになる。
【００８７】
その後に表示機器２は、カメラ部２７による被写体の撮影が行われる状態で、ユーザによる所定の指定操作（注視領域の指定に関する操作）を待機する（ステップＳ４４）。このときユーザは第２画面２３ａのモニタリング表示を見ながら、第１画面１３ａ（情報送信機器１）に表示されている映像中の注視したい領域が、カメラ部２７の撮影範囲に一致するように、表示機器２の位置や向き等を調節することが出来る。そしてユーザは、この一致が実現されたタイミングで、指定操作を行うことが出来る。
【００８８】
指定操作がなされると（ステップＳ４４のＹ）、表示機器２は、撮影画像情報Ｉpと撮影時刻情報Ｉptを情報送信機器１へ送信する（ステップＳ４５）。なお撮影画像情報Ｉpは、指定操作がなされたタイミングで撮影された画像の情報であり、撮影時刻情報Ｉptは、この撮影が行われたときの時刻の情報（撮影画像情報Ｉpに対応した撮影時刻の情報）である。
【００８９】
その後に表示機器２は、情報送信機器１からの映像データＤiの受信を待機する（ステップＳ４６）。表示機器２は、映像データＤiを受信すると（ステップＳ４６のＹ）、第２画面２３ａにおける映像データＤiの表示を開始させる。
【００９０】
一方で情報送信機器１は、同期処理が行われた後、表示機器２からの撮影画像情報Ｉpと撮影時刻情報Ｉptの受信を待機する（ステップＳ３４）。これらの情報を受信すると（ステップＳ３４のＹ）、情報送信機器１は、受信した情報に基づいて注視領域（元映像データのフレームにおける一部領域）を検出する（ステップＳ３５）。
【００９１】
より具体的に説明すると、メイン制御部１８は、予めバッファリングされている元映像データの各フレームのうち、付随する時刻情報が撮影時刻情報Ｉptと一致するもの（或いは最も近いもの）を選出する。そしてメイン制御部１８は、選出されたフレームと撮影画像情報Ｉpを比較検証し、選出されたフレームにおける撮影画像情報Ｉpと一致する領域を、注視領域として検出する。
【００９２】
なおこの比較検証の実行に際しては、例えばパターンマッチングの手法が利用されても良く、各種の画像処理が利用されても良い。またこの比較検証においては、バッファリングされている各フレームのうちの撮影時刻情報Ｉptに対応したものが用いられる。そして更に、情報送信機器１と表示機器２の間においては、予め時刻の同期が行われている。そのため、比較される画像同士の時間的なズレは殆ど生じることがなく、メイン制御部１８は、注視領域を精度良く検出することが可能である。
【００９３】
注視領域を検出した後に情報送信機器１は、元映像データの映像のうちの注視領域に対応する部分を認識する。そして仮想領域設定部１４ｃは、表示機器２から受信しているサイズ情報Ｉｓおよびスケーリング対象映像サイズ（ここでは注視領域に対応した部分のサイズ）に基づいて、仮想領域ＩＲを設定する（ステップＳ３６）。
【００９４】
仮想領域ＩＲの設定方針や手順等については、第１実施形態におけるステップＳ１２の処理と基本的に同様である。これにより以降、スケーリング処理部１４ｂは、第２画面２３ａにおいて縦向きに最大表示されるサイズとなるように、注視領域に対応する部分のフレームにスケーリング処理を施すことになる。
【００９５】
またメイン制御部１８は、元映像データの映像のうちの注視領域に対応する部分を示す情報を、クリッピング部分情報Ｉcとして生成する。これによりクリッピング部１４ａは、元映像データの各フレームのうち、注視領域に対応する部分のクリッピングを開始する。そして情報送信機器１は、このようなクリッピングが行われた映像データＤiの送信を開始する（ステップＳ３７）。
【００９６】
すなわち情報送信機器１は、元映像データの映像のうちの注視領域の部分のみを仮想領域ＩＲに格納した後、映像データＤiとして表示機器２へ送信する。これにより情報送信機器１は、第１画面１３ａに元映像データを表示させつつ、表示機器２へ映像データＤiを送信する状態となる。送信された映像データＤiは第２画面２３ａ（表示機器２）に表示されるため、第１実施形態の場合と同様にミラーリング表示が実現される。
【００９７】
第２実施形態のシステム映像表示システム９によれば、ユーザは、第１画面１３ａに表示されている映像中の注視したい領域を撮影するようにして、その領域の映像を第２画面２３ａに最大表示させることが出来る。このようにユーザは簡単な作業を行うだけで、注視したい領域を、第２画面２３ａに良好な視認性で表示させることが出来る。
【００９８】
３．その他
以上に説明した通り各実施形態の情報送信機器１は、元映像データを取得し、元映像データに基づいた情報を表示機器２（外部機器）へ送信するものである。また情報送信機器１は、表示機器２から元映像データの一部領域を特定し得る領域情報（第１実施形態では「注視領域情報Ｉg」が該当し、第２実施形態では「撮影画像情報Ｉp」が該当する）を受信する領域情報受信部を備えている。更に情報送信機器１は、領域情報に応じて元映像データを加工する映像データ加工部と、加工が行われた映像データを表示機器２へ送信する映像データ送信部と、を備えている。
【００９９】
そのため情報送信機器１によれば、領域情報に基づいて元映像データを適切に加工することができ、表示機器２に表示される映像の視認性を向上させることが容易である。なおここでの映像（画像）としては、基本的には動画が想定されるが、静止画であっても構わない。
【０１００】
また情報送信機器１は、第２画面２３ａを有する表示機器２からサイズ情報Ｉsを取得する。そして映像データ加工部は、前記加工の処理として、クリッピング処理（領域情報に対応した部分を抽出する処理）およびスケーリング処理（サイズ情報Ｉsに基づいて表示サイズを変更させる処理）を行う。これにより、クリッピングされた映像の表示サイズが目標とするサイズとは異なっていても、映像データＤiの表示サイズを適切に設定することが可能である。
【０１０１】
また映像データ加工部はスケーリング処理として、第２画面２３ａにおいて特定の向きに略最大表示される表示サイズに変更させる処理を行う。そのため、表示機器２に表示される映像の視認性を、出来るだけ良好なものとすることが可能である。
【０１０２】
また情報送信機器１は、元映像データを表示する第１画面１３ａ（ディスプレイ）を備えている。そのため表示機器２は、情報送信機器１に表示される映像のミラーリング表示を行うことになる。なお表示機器２は、情報送信機器１へ領域情報を送信する領域情報送信部と、情報送信機器１から受信した映像データＤiを表示する第２画面２３ａと、を有する。これにより表示機器２は、情報送信機器１と連携し、映像データＤiを適切に表示させることが可能である。
【０１０３】
より具体的には第１実施形態の場合、情報送信機器１の映像データ送信部は、領域情報の受信前に、前記加工が行われていない映像データを表示機器２へ送信する。そして表示機器２は、情報送信機器１から受信した映像データを表示する第２画面２３ａと、注視領域（第２画面２３ａに表示された映像データの一部領域）の指定を受付ける指定受付部と、指定された領域に応じて領域情報を生成し、情報送信機器１へ送信する領域情報送信部と、を有している。
【０１０４】
これにより第１実施形態の映像表示システム９では、表示機器２が注視領域の指定を受付けて領域情報を生成し、情報送信機器１が領域情報に基づいて元映像データを加工するという連携した動作が行われる。この連携した動作により、ユーザの意に沿った形態で、表示機器２に表示される映像の視認性を向上させることが可能である。
【０１０５】
また第２実施形態の場合、表示機器２は、情報送信機器１から受信した映像データＤiを表示する第２画面２３ａと、第１画面１３ａに表示された元映像データの一部領域を撮影し、撮影画像情報Ｉpを取得する撮影部と、領域情報として撮影画像情報Ｉpを情報送信機器１へ送信する領域情報送信部と、を有する。更に領域情報送信部は、撮影画像情報Ｉpとともに、撮影画像情報Ｉpに対応した撮影時刻情報Ｉptを送信する。
【０１０６】
そして情報送信機器１の領域情報受信部は、この撮影画像情報を領域情報として受信し、元映像データ中の撮影画像情報Ｉpに対応する部分を検出する検出部、を有する。更に検出部は、第１画面２３ａに表示させた元映像データのフレームをバッファリングし、バッファリングされたフレームの何れかと撮影画像情報Ｉpとの比較により、当該検出を行う。
【０１０７】
これにより第２実施形態の映像表示システム９では、表示機器２が撮影によって撮影画像情報Ｉpを取得し、情報送信機器１が撮影画像情報Ｉpに基づいて元映像データを加工するという連携した動作が行われる。この連携した動作により、ユーザの意に沿った形態で、表示機器２に表示される映像の視認性を向上させることが可能である。
【０１０８】
なお映像表示システム９が利用される際、情報送信機器１よりも表示機器２の方が、ユーザの手元近くにあることが多いと見込まれる。そのため多くの場合、ユーザに求められる作業（機器の操作等）としては、情報送信機器１を使う作業よりも、表示機器２を使う作業の方が容易であると見込まれる。この点、第１および第２実施形態の何れにおいても、ユーザは主に表示機器２を使って注視したい領域を指定することが可能であり、映像表示システム９は利便性に優れていると言える。
【０１０９】
また各実施形態の情報送信機器１は、所定のデータ処理方法により元映像データを処理する。このデータ処理方法には、元映像データを取得する第１処理と、表示機器２から元映像データの一部領域を特定し得る領域情報を受信する第２処理と、この領域情報に応じて元映像データを加工する第３処理と、この加工が行われた映像データＤiを表示機器２へ送信する第４処理と、が含まれる。
【０１１０】
また本発明の構成は、上記の各実施形態や変形例のほか、発明の主旨を逸脱しない範囲で種々の変更を加えることが可能である。すなわち、上記実施形態は、全ての点で例示であって、制限的なものではないと考えられるべきである。本発明の技術的範囲は、上記実施形態の説明ではなく、特許請求の範囲によって示されるものであり、特許請求の範囲と均等の意味及び範囲内に属する全ての変更が含まれると理解されるべきである。また本発明は、各種の情報送信機器などに利用することができる。
【符号の説明】
【０１１１】
１      情報送信機器
１１    デコーダ
１２    ビデオメモリ
１３    映像表示部
１３ａ  第１画面
１４    映像処理部
１４ａ  クリッピング部
１４ｂ  スケーリング部
１４ｃ  仮想領域設定部
１５    エンコーダ
１６    通信部
１７    操作受付部
１８    メイン制御部
１９    時計部
２      表示機器
２１    通信部
２２    デコーダ
２３    映像表示部
２３ａ  第２画面
２４    操作受付部
２５    メイン制御部
２６    時計部
２７    カメラ部
９      映像表示システム
ＩＲ    仮想領域
【図１】
2015019199.tif 000003
【図２】
2015019199.tif 000004
【図３】
2015019199.tif 000005
【図４】
2015019199.tif 000006
【図５】
2015019199.tif 000007
【図６】
2015019199.tif 000008
【図７】
2015019199.tif 000009
【図８】
2015019199.tif 000010
【図９】
2015019199.tif 000011
【図１０】
2015019199.tif 000012
【図１１】
2015019199.tif 000013
【図１２】
2015019199.tif 000014
【図１３】
2015019199.tif 000015
【図１４】
2015019199.tif 000016