(57)【要約】【課題】作業を遠隔支援するときに有益な情報を、支援者に提供すること。【解決手段】監督者装置１１は、遠隔支援する作業者に所持されるカメラ７３ａで撮影される手元画像データと、作業者を撮影するためにあらかじめ所定の位置に設置されたカメラ２４で撮影される俯瞰画像データとをそれぞれ受信する画像取得部６５ｂと、所定の作業者の手元画像データと、所定の作業者が撮影される俯瞰画像データとを、同じ画面上に同時に表示する表示制御部６５ｃと、作業者の発話期間における画像データのデータ量を減らしながら、作業者の発話内容を示す音声データを受信する音声取得部６５ａと、を有する。【選択図】図１
2016171477.tif 000002
【特許請求の範囲】
【請求項１】
遠隔支援の対象である作業者に所持される第１カメラで撮影される第１画像データと、作業者を撮影するためにあらかじめ所定の位置に設置された第２カメラで撮影される第２画像データとをそれぞれ遠隔撮影データとして受信する画像取得部と、
所定の作業者に所持される第１カメラの前記第１画像データと、前記所定の作業者が撮影される前記第２画像データとを、同じ画面上に同時に表示する表示制御部とを有することを特徴とする
遠隔作業支援装置。
【請求項２】
前記表示制御部は、複数台の前記第２カメラから表示対象の前記遠隔撮影データを選択するときに、前記遠隔撮影データ内に発生したイベントが検知されると、その検知された前記遠隔撮影データを表示対象として優先的に選択することを特徴とする
請求項１に記載の遠隔作業支援装置。
【請求項３】
前記遠隔作業支援装置は、さらに、作業者が発話した音声データを受信する音声取得部を有しており、
前記音声取得部は、音声データの受信期間における前記遠隔撮影データのデータ量を、音声データの受信期間外における前記遠隔撮影データのデータ量よりも小さくするように、前記画像取得部に対して制御することを特徴とする
請求項１または請求項２に記載の遠隔作業支援装置。
【請求項４】
請求項３に記載の遠隔作業支援装置と、作業者に所持される作業者端末とを含めて構成され、
前記作業者端末は、前記音声取得部に対して送信する音声データに加えて、その音声データを音声認識処理によりテキスト化した文字データも送信することを特徴とする
モニタリングシステム。
【請求項５】
前記モニタリングシステムは、さらに、前記遠隔作業支援装置と前記作業者端末とを接続するネットワークの中継装置を含めて構成され、
前記中継装置は、文字データ、音声データ、前記遠隔撮影データの順に優先して各データを通信する旨の通信制御を行うことを特徴とする
請求項４に記載のモニタリングシステム。
【請求項６】
前記モニタリングシステムは、さらに、前記遠隔撮影データを一時的に蓄積する一時蓄積サーバを含めて構成され、
前記一時蓄積サーバは、前記遠隔作業支援装置からの指示により、蓄積された前記遠隔撮影データを読み出して、前記遠隔作業支援装置に送信することを特徴とする
請求項４または請求項５に記載のモニタリングシステム。
【請求項７】
遠隔作業支援装置は、画像取得部と、表示制御部とを含めて構成されており、
前記画像取得部は、遠隔支援の対象である作業者に所持される第１カメラで撮影される第１画像データと、作業者を撮影するためにあらかじめ所定の位置に設置された第２カメラで撮影される第２画像データとをそれぞれ遠隔撮影データとして受信し、
前記表示制御部は、所定の作業者に所持される第１カメラの前記第１画像データと、前記所定の作業者が撮影される前記第２画像データとを、同じ画面上に同時に表示することを特徴とする
遠隔作業支援方法。
【請求項８】
前記表示制御部は、複数台の前記第２カメラから表示対象の前記遠隔撮影データを選択するときに、前記遠隔撮影データ内に発生したイベントが検知されると、その検知された前記遠隔撮影データを表示対象として優先的に選択することを特徴とする
請求項７に記載の遠隔作業支援方法。
【請求項９】
前記遠隔作業支援装置は、さらに、作業者が発話した音声データを受信する音声取得部を有しており、
前記音声取得部は、音声データの受信期間における前記遠隔撮影データのデータ量を、音声データの受信期間外における前記遠隔撮影データのデータ量よりも小さくするように、前記画像取得部に対して制御することを特徴とする
請求項７または請求項８に記載の遠隔作業支援方法。
【請求項１０】
モニタリングシステムは、前記遠隔作業支援装置と、作業者に所持される作業者端末とを含めて構成されており、
前記作業者端末は、前記音声取得部に対して送信する音声データに加えて、その音声データを音声認識処理によりテキスト化した文字データも送信することを特徴とする
請求項９に記載の遠隔作業支援方法。
【請求項１１】
前記モニタリングシステムは、さらに、前記遠隔作業支援装置と前記作業者端末とを接続するネットワークの中継装置を含めて構成され、
前記中継装置は、文字データ、音声データ、前記遠隔撮影データの順に優先して各データを通信する旨の通信制御を行うことを特徴とする
請求項１０に記載の遠隔作業支援方法。
【請求項１２】
前記モニタリングシステムは、さらに、前記遠隔撮影データを一時的に蓄積する一時蓄積サーバを含めて構成され、
前記一時蓄積サーバは、前記遠隔作業支援装置からの指示により、蓄積された前記遠隔撮影データを読み出して、前記遠隔作業支援装置に送信することを特徴とする
請求項１０または請求項１１に記載の遠隔作業支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、遠隔作業支援装置、モニタリングシステム、および、遠隔作業支援方法に関する。
【背景技術】
【０００２】
遠隔地に設置された多数のセンサからの計測データを、遠隔で取得するセンサネットワークが提案されている（特許文献１）。逐次計測され続ける計測データのデータ量は非常に多いので、特許文献１の情報処理装置では、情報要求信号の目的情報を指定させ、その目的情報に適合する計測データを絞り込んで取得することで、通信量を削減している。例えば、目的情報が「京都に雨が降っているか？」である場合、京都の降水状況が取得される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−１２２７９６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
モニタリングシステムとして、遠くで行われる作業を遠隔支援する場合、作業を指示する監督者にとって有益な情報を作業現場から取捨選択して監督者に通知する必要がある。もし、カメラを多く設置し、単に監視する映像データを増やしただけでは、監督者にとって不要な情報まで過剰に送信されてしまうので、かえって監督者に不便である上、大量のデータが通信回線を圧迫してしまう。
【０００５】
そこで、本発明は、作業を遠隔支援するときに有益な情報を、支援者に提供することを、主な課題とする。
【課題を解決するための手段】
【０００６】
前記課題を解決するために、本発明の遠隔作業支援装置は、
遠隔支援の対象である作業者に所持される第１カメラで撮影される第１画像データと、作業者を撮影するためにあらかじめ所定の位置に設置された第２カメラで撮影される第２画像データとをそれぞれ遠隔撮影データとして受信する画像取得部と、
所定の作業者に所持される第１カメラの前記第１画像データと、前記所定の作業者が撮影される前記第２画像データとを、同じ画面上に同時に表示する表示制御部とを有することを特徴とする。
その他の手段は、後記する。
【発明の効果】
【０００７】
本発明によれば、作業を遠隔支援するときに有益な情報を、支援者に提供することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施形態に関するモニタリングシステムの構成図である。
【図２】図２（ａ）は、監督者装置の構成図である。図２（ｂ）は、作業者端末の構成図である。
【図３】図３は、モニタリングシステムの機能図である。
【図４】図４は、モニタリングシステムの通信処理を示すフローチャートである。
【図５】図５は、監督者装置の表示画面に表示される監視映像および発報画像を示す。
【図６】図６は、図５の監視映像の画面切替を示す説明図である。
【図７】図７（ａ）は、監督者装置に表示されるカメラ配置画面を示す説明図である。図７（ｂ）は、監督者装置に表示される俯瞰画面を示す説明図である。
【図８】図８（ａ）は、俯瞰画面と、手元画面と、音声認識画面とを一画面に表示する図である。図８（ｂ）は、俯瞰画面を示す説明図である。
【図９】図９（ａ）は、俯瞰画面を示す説明図である。図９（ｂ）は、図９（ａ）の作業者位置における手元画面を示す説明図である。
【発明を実施するための形態】
【０００９】
以下、本発明の一実施形態を、図面を参照して詳細に説明する。
【００１０】
図１は、モニタリングシステムの構成図である。モニタリングシステムは、監視対象であるモニタリング拠点２と、そのモニタリング拠点２を監視する監視センタ１とが、狭帯域の衛星回線などのネットワーク３で接続されて構成される。例えば、国内の監視センタ１が、海外それぞれの作業現場内のモニタリング拠点２を監視したり指示したりすることで、効率的に作業を遠隔支援する。
【００１１】
監視センタ１には、監督者が使用する監督者装置１１と、映像蓄積サーバ１２とが配置されている。
モニタリング拠点２には、Ｗｅｂサーバ２１と、カメラサーバ２２と、一時蓄積サーバ２３と、カメラ２４と、基地局２５とが配置されている。さらに、モニタリング拠点２内の作業現場で作業をする各作業者は、作業者端末２６を把持している。
モニタリングシステムの各装置（監督者装置１１、作業者端末２６など）は、それぞれ演算処理を行う際に用いられる記憶手段としてのメモリと、前記演算処理を行う演算処理装置とを少なくとも備えるコンピュータを搭載または内蔵しているものとする。このコンピュータのメモリは、ＲＡＭ（Random Access Memory）などにより構成される。演算処理は、ＣＰＵ（Central Processing Unit）によって構成される演算処理装置が、メモリ上のプログラムを実行することで、実現される。
【００１２】
監督者装置１１は、監督者が使用するＰＣ（Personal Computer）である。監督者は、監督者装置１１の表示画面を介して、作業者の様子を把握できる。
映像蓄積サーバ１２は、リモート（モニタリング拠点２の一時蓄積サーバ２３）の撮影データを、ローカル（監視センタ１）に送信するときの、撮影データの保存先である。監督者装置１１は、撮影データを表示するときには、まず、映像蓄積サーバ１２から撮影データを読み込み、その映像蓄積サーバ１２に存在しない撮影データを一時蓄積サーバ２３から読み込む。
【００１３】
Ｗｅｂサーバ２１は、各カメラ２４のカメラ位置情報と、カメラを特定するためのカメラＩＤとを対応づけて、カメラデータベースとして管理する。そして、Ｗｅｂサーバ２１は、カメラデータベースを参照して、監督者装置１１からの画像リクエストを転送するカメラサーバ２２（カメラ２４）を決定したり、カメラサーバ２２（カメラ２４）からの撮影データを転送する監督者装置１１を決定したりする。
【００１４】
さらに、Ｗｅｂサーバ２１は、ネットワーク３に送信する撮影データについて、そのメディアタイプに応じて通信の優先度（ＱｏＳ：Quality of Service）を決定する通信制御を行ってもよい。例えば、Ｗｅｂサーバ２１は、文字データ、音声データ、画像データ、映像データの順に（つまり、データ量が少ない順に）、通信の優先度を高くして（通信資源を使いやすいようにして）、通信を行う（詳細は図４）。これにより、モニタリングに重要なデータの送信を確保しつつ、適切にネットワーク３の負荷を削減できる。
【００１５】
カメラ２４は、作業者や作業に関する建造物、構造物などを撮影するために、複数の固定位置に設置される。なお、カメラ２４は、画像リクエストで指定されるズーム操作などの遠隔操作を受け付けて、撮影パラメータとして自身に反映してもよい。
カメラサーバ２２は、Ｗｅｂサーバ２１から受信した画像リクエストを各カメラ２４に転送し、各カメラ２４からリアルタイムに撮影された映像データをＷｅｂサーバ２１（リアルタイム配信時）および一時蓄積サーバ２３（録画再生時）に転送する。
さらに、カメラサーバ２２は、カメラ２４の撮影データを画像解析するなどして、イベントの発生を検知すると、そのイベントを示す情報を撮影データに付加する。このイベントを示す情報は、監督者装置１１の表示画面に対して、どのカメラ２４の撮影データを優先させるかなどの表示制御に使用される。
【００１６】
一時蓄積サーバ２３は、カメラ２４の撮影データを録画再生用に一時蓄積しておくサーバである。そのため、一時蓄積サーバ２３は、各カメラ２４の撮影データに対して、そのカメラＩＤとその撮影時刻とを対応づけて自身の記憶手段に保存し続ける。
また、一時蓄積サーバ２３は、所定時刻やユーザからの指示に従って、自身の撮影データを監視センタ１または映像蓄積サーバ１２に送信する。この送信データは、自身の撮影データをそのまま送信してもよいし、自身の撮影データをエンコード処理などで加工してから送信してもよい。
【００１７】
基地局２５は、カメラ２４や作業者端末２６などの各端末に通信接続を提供するための中継地点であり、例えば、無線ＬＡＮ（Local Area Network）のルータ装置である。
作業者端末２６は、作業者によって把持される端末であり、監督者に作業現場を報告したり、監督者から作業指示を受けたりするために用いられる。
【００１８】
図２（ａ）は、監督者装置１１の構成図である。監督者装置１１は、外部通信部６１と、スピーカ６２ａと、モニタ６２ｂと、マウス６３ａと、キーボード６３ｂと、マイク６３ｃと、ＣＰＵ６５と、メモリ６６と、電源６７と、記憶装置６８とを含めて構成される。
監督者装置１１は、ＣＰＵ６５と、メモリ６６と、電源６７と、記憶装置６８とを備えるコンピュータであり、外部通信部６１を介して他装置と通信を行う。
監督者は、モニタ６２ｂの表示画面から作業者の作業の様子を閲覧し、スピーカ６２ａから作業者の音声を聞き取る。そして、監督者は、各入力手段（マウス６３ａ、キーボード６３ｂ、マイク６３ｃ）を介して、作業者に作業の指示を出す。
【００１９】
図２（ｂ）は、作業者端末２６の構成図である。
作業者端末２６は、外部通信部７１と、スピーカ７２ａと、モニタ７２ｂと、カメラ７３ａと、タッチパネル７３ｂと、マイク７３ｃと、ＣＰＵ７５と、メモリ７６と、電源７７と、記憶装置７８とを含めて構成される。
作業者端末２６は、ＣＰＵ７５と、メモリ７６と、電源７７と、記憶装置７８とを備えるコンピュータであり、タブレット型などの作業員が把持しやすいように構成されていることが望ましい。
監督者装置１１と作業者端末２６とのハードウェアとしての相違点としては、ＰＣ用の入出力手段（マウス６３ａ、キーボード６３ｂ）の代わりに、タブレット端末用の入出力手段（カメラ７３ａ、タッチパネル７３ｂ）が備わっている点である。なお、タッチパネル７３ｂとモニタ７２ｂとは、一体化されている。
【００２０】
図３は、モニタリングシステムの機能図である。
作業者端末２６のＣＰＵ７５は、各処理部（音声信号入力部７５ａと、入力レベル確認部７５ｂと、音声信号配信部７５ｃと、音声認識部７５ｄ）を動作させる。
監督者装置１１のＣＰＵ６５は、各処理部（音声取得部６５ａと、画像取得部６５ｂと、表示制御部６５ｃ）を動作させる。
これらの各処理部の詳細は、後記する図４〜図９の各説明で明らかにする。
【００２１】
図４は、モニタリングシステムの通信処理を示すフローチャートである。このフローチャートでは、音声データがネットワーク３を流れている間は、画像データの通信優先度を下げて、音声データを優先的に送信し、かつ、その音声データから音声認識で抽出した文字データも優先的に送信することを特徴とする。
【００２２】
Ｓ１１は、高頻度送信処理である。画像取得部６５ｂは、カメラ２４の撮影データ（俯瞰画像）や、カメラ７３ａの撮影データ（手元画像）を高頻度で取得する。取得された撮影データは、表示制御部６５ｃを介してモニタ６２ｂに表示される。
高頻度で取得できるのは、Ｓ１１の時点では、ネットワーク３上に他種別のデータ（文字データ、音声データ）が流れていないため、通信資源に余裕があるためである。
なお、画像取得部６５ｂによる映像データ（画像データの集合）の取得処理は、例えば、カメラ２４やカメラ７３ａに１枚の画像を要求する画像リクエストを送信し、その画像リクエストの応答として、画像データを取得してもよいし、あらかじめ所定のフレームレートをカメラ２４やカメラ７３ａに指定して、そのフレームレートの頻度で画像データを取得してもよい。
【００２３】
Ｓ３１は、音声送信処理である。
音声信号入力部７５ａは、マイク７３ｃから作業者の音声入力を受け付けると、その音声データを入力レベル確認部７５ｂに通知する。入力レベル確認部７５ｂは、通知された音声データの音量が所定閾値を超過する（または超過した期間が所定期間以上継続する）と、その音声データを発話期間と判断し、音声の送信開始とする。
音声信号配信部７５ｃは、発話期間における音声データを音声信号入力部７５ａから取得し、その音声データを外部通信部７１を介して監督者装置１１（音声取得部６５ａ）に向けて送信する（Ｓ３１ａ）。さらに音声信号配信部７５ｃは、発話期間における音声データを音声認識させるために、音声認識部７５ｄに随時通知する（Ｓ３１ｂ）。
【００２４】
Ｓ４１は、文字送信処理である。
音声認識部７５ｄは、音声信号配信部７５ｃから通知された発話期間における音声データを音声認識して、発話内容として文字データを抽出し、その文字データを外部通信部７１を介して監督者装置１１（音声取得部６５ａ）に向けて送信する（図では破線矢印）。さらに、音声認識部７５ｄは、文字データの言語を別言語へと機械翻訳してから、その翻訳した文字データを監督者装置１１に送信してもよい。
【００２５】
なお、Ｓ３１の音声送信とＳ４１の文字送信とでは、同じ作業者の発話期間における発話内容を示すものである。よって、音声送信と文字送信とのうち、片方の送信は省略してもよい。しかし、騒音下の作業現場では音声データが聞き取りづらく、聞き漏らしや誤認識をすることもある。よって、音声送信と文字送信とを併用することで、作業者の発した発話内容を的確に監督者に把握させることができる。
【００２６】
Ｓ２１は、音声受信開始処理である。
音声取得部６５ａは、音声信号配信部７５ｃから発話期間の最初の音声データ（Ｓ３１ａ）、または、これから音声データを送信する旨の制御信号を受けると、画像取得部６５ｂに対して、音声データの受信をこれから開始する旨を通知する。
【００２７】
Ｓ１２は、低頻度送信処理である。
画像取得部６５ｂは、高頻度で映像データを送信していたが（Ｓ１１）、音声受信開始（Ｓ２１）以降は、その映像データの送信頻度を低頻度に変更する。この変更は、ネットワーク３の混雑予防が目的である。もし、衛星回線などでネットワーク３の通信帯域が小さい場合、画像データと音声データとを同時に通信すると、音声データが途切れたり遅延が発生したりすることもある。そこで、音声データの送信を、画像データが邪魔しないように、画像データの送信頻度を低頻度に変更する。
【００２８】
なお、送信頻度を低頻度に変更することで、画像データとして送信できる情報量も減ってしまうが、もともと画像データは多少途切れたとしても、作業状況の把握には大きな影響はない。
また、画像取得部６５ｂは、映像データの送信頻度（フレームレート）を低頻度に変更する代わりに、他のパラメータを調整して、映像データの通信データ量を下げることとしてもよい。例えば、映像データの解像度（画像サイズ）を小さくしたり、映像データの色数を少なくしたり、映像データの圧縮率を高めたりすることで、映像データの通信データ量を下げることができる。
【００２９】
そして、入力レベル確認部７５ｂは、音声信号入力部７５ａから通知される音声データの音量が、通知された音声データの音量が所定閾値を下回る（または下回る期間が所定期間以上継続する）と、その音声データの発話期間が終了したと判断する。音声信号配信部７５ｃは、入力レベル確認部７５ｂが判断した発話期間の終了を音声認識部７５ｄに通知し、Ｓ４１の文字送信処理を終了させる（Ｓ３１ｙ）。
【００３０】
Ｓ２２は、音声受信終了処理である。
音声取得部６５ａは、音声信号配信部７５ｃから発話期間の最後の音声データ（Ｓ３１ｚ）、または、音声データの送信を終了する旨の制御信号を受けると、画像取得部６５ｂに対して、音声データの受信を終了する旨を通知する。
画像取得部６５ｂは、Ｓ２２の音声受信終了通知を受け、音声データが途切れる懸念が解消されたので、映像データの送信頻度を低頻度（Ｓ１２）から高頻度（Ｓ１３）に戻すことで、高品質の映像データを再び監督者に提供できる。
【００３１】
図５は、監督者装置１１の表示画面に表示される監視映像１０１および発報画像１０２を示す。
発報画像１０２の表示欄には、カメラ２４およびカメラ７３ａごとに、その撮影データがサムネイル画像として表示される。
監視映像１０１の表示欄には、発報画像１０２として表示された撮影データのうち、監督者が着目すべき撮影データが選別されて、表示される。図５の例では、６台のカメラ（第１カメラ〜第６カメラ）のうち、４台のカメラが選出されて、監視映像１０１に表示される。
【００３２】
図６は、図５の監視映像１０１の画面切替を示す説明図である。
表示制御部６５ｃは、各カメラの撮影データに対して発生したイベントが検知されると（Ｓ５１ａ〜ｆ）、その検知直後から所定期間（例えば５秒）は動画表示により監督者の注意を集め（Ｓ５２ａ〜ｆ）、その後は静止画表示によりデータ量を節約する（Ｓ５３ａ〜ｆ）。
なお、イベント検知は、例えば、画像データ中の一部の領域の動きが検知されたことを示す「動き検知」や、画像データ中に人の顔が検知されたことを示す「顔検知」などがある。
【００３３】
ここで、図５の監視映像１０１はカメラ４台分の表示欄なので、イベント発生順に、第５カメラ、第２カメラ、第１カメラ、第３カメラの撮影データが、順次監視映像１０１に表示される。その後に、第６カメラのイベントが検知されると（Ｓ５１ｆ）、その第６カメラの撮影データを新たに監視映像１０１に表示させるために、最も古い撮影データ（第５カメラの静止画表示Ｓ５３ｅ）を監視映像１０１から追い出して、その空いた枠に第６カメラの動画表示を行う（Ｓ５２ｆ）。
【００３４】
図７（ａ）は、監督者装置１１に表示されるカメラ配置画面１０３を示す説明図である。
カメラ配置画面１０３は、モニタリング拠点２の各カメラ２４の設置位置や撮影向きを監督者に全体把握させるための画面である。このカメラ配置画面１０３は、例えば、天井から下方向に見下ろした平面図（建物の見取り図）であり、カメラ位置１０３ａ、１０３ｂがアイコンとして表示される。このカメラ位置のアイコンのうち、現在そのカメラ２４の撮影データを表示中のものは、非表示のカメラ２４と区別して（例えば、アイコンの色を変えて）表示してもよい。
さらに、カメラ配置画面１０３には、作業者位置１０３ｃや、その作業者に把持される作業者端末２６の手元位置１０３ｄも、併せて表示してもよい。
【００３５】
図７（ｂ）は、監督者装置１１に表示される、カメラ位置１０３ｂから撮影された俯瞰画面１０４を示す説明図である。
監督者装置１１の表示制御部６５ｃは、複数台のカメラ２４から、撮影データを表示対象とするカメラ２４を選択するときに、図６で前記したイベントが発生したカメラ２４の代わりに、作業者位置１０３ｃからの距離が近い（作業者の様子を閲覧しやすい）カメラ２４を選択してもよい。
そのため、監督者装置１１は、カメラ２４の位置と、作業者の位置とをそれぞれ特定する必要がある。カメラ２４の位置は、前記したように、Ｗｅｂサーバ２１のカメラデータベースにあらかじめ管理者などにより入力されているので、そのデータを用いればよい。
【００３６】
一方、作業者の位置の特定方法は、例えば、カメラ２４またはその周辺に位置するＲＦタグリーダが、作業者または作業者端末２６が有するＲＦタグを読み取ったとき、作業者がそのカメラ２４の周辺に位置するとしてもよい。または、位置１０４ａの作業者端末２６に搭載されるＧＰＳ（Global Positioning System）などの位置測定手段を用いて、作業者の位置を特定してもよい。
【００３７】
図８（ａ）は、表示制御部６５ｃが、俯瞰画面１１１と、手元画面１１２と、音声認識画面１１３とを一画面に表示する図である。俯瞰画面１１１は、図７のカメラ位置１０３ａ（机に向かう正面）のカメラ２４から撮影されたものである。作業者は左手位置１１１ｂに作業者端末２６を把持し、そのカメラ７３ａから自身の右手にもつ部品を手元画面１１２として撮影している。
音声認識画面１１３は、Ｓ４１の文字送信処理でやりとりされる、作業者端末２６と監督者装置１１との間の音声会話の文字内容を表示したものである。
【００３８】
このように、監督者は、自身が操作する監督者装置１１の表示画面に、俯瞰画面１１１と、手元画面１１２とを並べて（同時に）閲覧することで、作業状況を的確に把握できる。よって、監督者は、その作業状況に応じた詳しい指示が可能となる。さらに、音声認識画面１１３により、作業者の音声が聞き取りづらい環境下でも、適切に指示内容のやりとりができる。
【００３９】
図８（ｂ）は、カメラ位置１０３ａから撮影された俯瞰画面１１４を示す説明図である。図８（ａ）との違いは、作業者端末２６のハードウェアである。頭部位置１１４ｂに装着されたウェアラブルカメラの筐体が作業者端末２６である。これにより、作業者は片手で作業者端末２６を持たなくても、手元画像（作業者周辺画像）を撮影できるので、作業がしやすくなる。
【００４０】
図９（ａ）は、カメラ位置１０３ａに近づく作業者の俯瞰画面１２１を示す説明図である。
監督者装置１１の表示制御部６５ｃは、は、図７（ｂ）で説明したように、作業者からの距離が近いカメラ２４を監視対象（表示対象）として選択する。よって、作業者の位置が変わると、その移動後の作業者を監視しやすいように、図７（ｂ）の俯瞰画面１０４から図９（ａ）の俯瞰画面１２１へとリアルタイムに切り替える（自動スイッチング）。
図９（ｂ）は、図９（ａ）の作業者位置における手元画面１２２を示す説明図である。机から離れたので、手元画面１２２にも机が表示されない。
【００４１】
以上説明した本実施形態では、監視センタ１からモニタリング拠点２の作業を遠隔支援する際に、作業者端末２６のカメラ７３ａ（第１カメラ）で撮影された手元画像と、作業現場に設置されたカメラ２４（第２カメラ）で撮影された俯瞰画像とを併せて同じ監督者装置１１の画面上に表示する。
これにより、監督者は、大まかな俯瞰画像と、細かい手元画像とをもとに作業内容を詳細に把握することができるので、的確な指示を作業者に出すことができる。
さらに、監督者装置１１と作業者端末２６との間でやりとりされるデータは、音声データが映像データよりも優先されて送信されるので、音声データが途切れて指示内容や報告内容が聞き取れなくなることを抑制できる。
【００４２】
なお、本発明は前記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、前記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。
また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。
また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。また、上記の各構成、機能、処理部、処理手段などは、それらの一部または全部を、例えば集積回路で設計するなどによりハードウェアで実現してもよい。
また、前記の各構成、機能などは、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。
【００４３】
各機能を実現するプログラム、テーブル、ファイルなどの情報は、メモリや、ハードディスク、ＳＳＤ（Solid State Drive）などの記録装置、または、ＩＣ（Integrated Circuit）カード、ＳＤカード、ＤＶＤ（Digital Versatile Disc）などの記録媒体に置くことができる。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際にはほとんど全ての構成が相互に接続されていると考えてもよい。
【符号の説明】
【００４４】
１      監視センタ
２      モニタリング拠点
３      ネットワーク
１１    監督者装置（遠隔作業支援装置）
１２    映像蓄積サーバ
２１    Ｗｅｂサーバ（中継装置）
２２    カメラサーバ
２３    一時蓄積サーバ
２４    カメラ（第２カメラ）
２５    基地局
２６    作業者端末
６５ａ  音声取得部
６５ｂ  画像取得部
６５ｃ  表示制御部
７５ａ  音声信号入力部
７５ｂ  入力レベル確認部
７５ｃ  音声信号配信部
７５ｄ  音声認識部
【図１】
2016171477.tif 000003
【図２】
2016171477.tif 000004
【図３】
2016171477.tif 000005
【図４】
2016171477.tif 000006
【図５】
2016171477.tif 000007
【図６】
2016171477.tif 000008
【図７】
2016171477.tif 000009
【図８】
2016171477.tif 000010
【図９】
2016171477.tif 000011