(57)【要約】【課題】効率的な情報伝達を行うことができる遠隔作業支援システムを提供することを目的とする。【解決手段】複数の作業端末３、４と、ネットワーク２を介して複数の作業端末３、４の間にＳＩＰ通信のセッションを確立させるサーバ１とを備え、サーバ１により確立されたセッションを使用して複数の作業端末３、４の間において、映像を含む主要情報と主要情報を補足する補足情報とを含む伝達情報を共有する。作業端末３は、画面に伝達情報を表示するとともに画面における位置情報を入力するタッチスクリーン３７ａと、サーバ１及び他の作業端末４とＳＩＰ通信を行うＳＩＰ通信手段３１ａと、主要情報を入出力する処理及び送受信する処理を行う主要情報通信手段３２ａと、タッチスクリーン３７ａに入力された情報を補足情報とし、補足情報を入出力する処理及び送受信する処理を行う補足情報通信手段３３ａと、を有する。【選択図】図１
2012133534.tif 000002
【特許請求の範囲】
【請求項１】
複数の作業端末と、ネットワークを介して前記複数の作業端末の間にＳＩＰ通信のセッションを確立させるサーバとを備え、前記サーバにより確立された前記セッションを使用して前記複数の作業端末の間において伝達情報を共有する遠隔作業支援システムであって、
前記伝達情報は映像を含む主要情報と前記主要情報を補足する補足情報とを含み、
前記作業端末は、
画面に前記伝達情報を表示するとともに前記画面における位置情報を入力するタッチスクリーンと、
前記サーバ及び他の作業端末とＳＩＰ通信を行うＳＩＰ通信手段と、
前記主要情報を入出力する処理及び送受信する処理を行う主要情報通信手段と、
前記タッチスクリーンに入力された情報を前記補足情報とし、前記補足情報を入出力する処理及び送受信する処理を行う補足情報通信手段と、を有することを特徴とする遠隔作業支援システム。
【請求項２】
前記補足情報通信手段は、前記タッチスクリーンに入力された入力位置を前記補足情報として処理することを特徴とする請求項１記載の遠隔作業支援システム。
【請求項３】
前記補足情報通信手段は、前記タッチスクリーンにおいて連続的に入力された軌跡を描画図形に変換し、前記描画図形を前記補足情報として処理することを特徴とする請求項１または２に記載の遠隔作業支援システム。
【請求項４】
前記補足情報通信手段は、前記タッチスクリーンにおいて連続的に入力された軌跡を描画図形に変換した前記補足情報を、当該変換を行った作業端末における前記タッチスクリーンに当該補足情報を表示することを特徴とする請求項３記載の遠隔作業支援システム。
【請求項５】
前記作業端末は、対象物を撮影するカメラと、他の作業端末から受信した受信カメラ映像から前記カメラで撮影したカメラ映像に切り替えを行うカメラ切り替えボタンとを有し、
前記主要情報通信手段は、前記カメラ切り替えボタンが押された場合に、当該作業端末の前記タッチスクリーンに前記カメラ映像を表示するとともに、前記カメラ映像を前記主要情報として処理することを特徴とする請求項１乃至４のいずれか１項に記載の遠隔作業支援システム。
【請求項６】
前記ネットワークに接続されたドキュメントサーバを備え、
前記作業端末は、前記ドキュメントサーバに保存されたドキュメントを参照するドキュメント参照ボタンを有し、
前記主要情報通信手段は、前記ドキュメント参照ボタンが押された場合に、前記ドキュメントを前記主要情報として処理するドキュメント通信手段を含むことを特徴とする請求項１乃至５のいずれか１項に記載の遠隔作業支援システム。
【請求項７】
前記ドキュメント通信手段は、
前記ドキュメントサーバからドキュメントの名称を一覧にしたドキュメント一覧及び前記ドキュメント一覧から選択されたドキュメントを取得するとともに、前記ドキュメントを他の作業端末との間で送受信するドキュメント取得通信手段と、
前記ドキュメントを前記タッチスクリーンに表示するドキュメント表示手段と、を有し、前記ドキュメント取得通信手段は、前記ドキュメント参照ボタンが押された場合に、前記サーバから前記ドキュメント一覧を前記タッチスクリーンに表示することを特徴とする請求項６記載の遠隔作業支援システム。
【請求項８】
前記ネットワークに接続された保存サーバを備え、
前記作業端末は、前記タッチスクリーンに表示された情報を画像データとして合成するスクリーンチャプチャーボタンと、前記スクリーンチャプチャーボタンが押された場合に、前記画像データを合成するともに前記画像データを前記保存サーバに保存するスクリーンチャプチャー手段と、を有し、
前記主要情報通信手段は、前記スクリーンチャプチャーボタンが押された場合に、前記画像データを前記主要情報として処理することを特徴とする請求項１乃至７のいずれか１項に記載の遠隔作業支援システム。
【請求項９】
ネットワークに接続されたサーバにより確立されたＳＩＰ通信のセッションを使用して他の作業端末との間において、映像を含む主要情報と前記主要情報を補足する補足情報とを含んだ伝達情報を共有する遠隔作業支援端末であって、
当該遠隔作業支援端末は、請求項１乃至８のいずれか１項に記載の作業端末であることを特徴とする遠隔作業支援端末。
【請求項１０】
ネットワークに接続されたサーバにより確立されたＳＩＰ通信のセッションを使用して複数の作業端末の間において、映像を含む主要情報と前記主要情報を補足する補足情報とを含んだ伝達情報を共有する遠隔作業支援方法であって、
前記複数の作業端末の間において、前記サーバを介してＳＩＰ通信のセッションを確立させる手順と、
前記複数の作業端末の間において、画面に前記伝達情報を表示するとともに前記画面における位置情報を入力するタッチスクリーンに表示された前記主要情報を送受信し、当該補足情報を共有する手順と、
前記複数の作業端末の間において、前記タッチスクリーンに入力された情報を前記補足情報とし、当該補足情報を送受信し、当該補足情報を共有する手順と、を含む遠隔作業支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、携帯型作業端末と無線ネットワークを利用し、機械設備等の点検や保守作業等の作業を支援する遠隔作業支援システムに関する。
【背景技術】
【０００２】
近年、遠隔地で作業を行う遠隔作業者に対して、作業指示者がその作業を指示、管理する遠隔作業支援を行うために、使用する端末の間で音声、映像等のマルチメディア情報である環境情報をリアルタイムに共有することが可能となっている。このような遠隔作業を支援するシステムは、例えば、特許文献１に記載されている。
【０００３】
特許文献１の遠隔作業支援システムは、多地点における複数の遠隔作業端末間での接続切替えを行うものである。複数の遠隔作業端末は、ネットワークを介して、相互にマルチメディア情報である環境情報を送受信し、それぞれが受信したマルチメディア情報を表示することにより情報共有するものである。この環境情報は、音声、映像等のマルチメディア情報であって、作業環境の周囲から取得される、作業に必要とされる情報である。遠隔作業者の遠隔作業端末により撮影された映像情報がこの環境情報に該当する。この場合、作業指示者及び遠隔作業者は、共に作業場周囲の映像情報を見ながら、音声情報によりコミュニケーションを行い、遠隔作業者は、音声情報により作業指示者の作業指示、例えば、危険回避策の指示を受けて作業を行っていた。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−１１０４７３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に記載の遠隔作業支援システムおいて、一方の遠隔作業端末から他方の遠隔作業端末に送る情報は、映像と音声のみである。すなわち、カメラで撮影された映像、マイクで取得した環境音が作業指示者の遠隔作業端末に送られ、これらの情報に対する作業指示者の質問やコメントは音声情報のみで、遠隔作業者の遠隔作業端末に伝えることになる。そのため、遠隔作業者は、具体的に映像のどの部分について質問やコメントしているのか、判断することが難しい場合もあり、情報伝達に余分な時間がかかってしまい、効率的な情報伝達ができない問題があった。
【０００６】
この発明は、映像や音声等の主要情報に加え、主要情報を補足する補足情報を共有化することができ、効率的な情報伝達を行うことができる遠隔作業支援システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
複数の作業端末と、ネットワークを介して複数の作業端末の間にＳＩＰ通信のセッションを確立させるサーバとを備え、サーバにより確立されたセッションを使用して複数の作業端末の間において、映像を含む主要情報と主要情報を補足する補足情報とを含む伝達情報を共有する。作業端末は、画面に伝達情報を表示するとともに画面における位置情報を入力するタッチスクリーンと、サーバ及び他の作業端末とＳＩＰ通信を行うＳＩＰ通信手段と、主要情報を入出力する処理及び送受信する処理を行う主要情報通信手段と、タッチスクリーンに入力された情報を補足情報とし、補足情報を入出力する処理及び送受信する処理を行う補足情報通信手段と、を有する。 
【発明の効果】
【０００８】
この発明に係る遠隔作業支援システムは、複数の作業端末の間において、映像を含む主要情報と主要情報を補足する補足情報とを含む伝達情報を共有できるので、効率的な情報伝達を行うことができる
【図面の簡単な説明】
【０００９】
【図１】この発明の実施の形態１の遠隔作業支援システムを示す図である。
【図２】図１の作業端末の表面外観を示す図である。
【図３】図１の作業端末の作業端末の裏面外観を示す図である。
【図４】実施の形態１の動作シーケンスの前半を示す図である。
【図５】実施の形態１の動作シーケンスの後半を示す図である。
【図６】実施の形態１の映像共有の概念を説明する図である。
【図７】実施の形態１のタッチ位置共有の概念を説明する図である。
【図８】この発明の実施の形態２の遠隔作業支援システムを示す図である。
【図９】実施の形態２の動作シーケンスの前半を示す図である。
【図１０】実施の形態２の動作シーケンスの後半を示す図である。
【図１１】実施の形態２の描画図形共有の概念を説明する図である。
【図１２】この発明の実施の形態３の遠隔作業支援システムを示す図である。
【図１３】実施の形態３の作業端末の表面外観を示す図である。
【図１４】実施の形態３の動作シーケンスの前半を示す図である。
【図１５】実施の形態３の動作シーケンスの後半を示す図である。
【図１６】実施の形態３の映像共有の概念を説明する図である。
【図１７】この発明の実施の形態４の遠隔作業支援システムを示す図である。
【図１８】実施の形態４の作業端末の表面外観を示す図である。
【図１９】実施の形態４のドキュメント参照の概念を説明する図である。
【図２０】実施の形態４の動作シーケンスの前半を示す図である。
【図２１】実施の形態４の動作シーケンスの後半を示す図である。
【図２２】実施の形態４のタッチ位置共有の概念を説明する図である。
【図２３】実施の形態４の描画図形共有の概念を説明する図である。
【図２４】実施の形態４の映像への切り替えを説明する図である。
【図２５】この発明の実施の形態５の遠隔作業支援システムを示す図である。
【図２６】実施の形態５の作業端末の表面外観を示す図である。
【図２７】実施の形態５の動作シーケンスの前半を示す図である。
【図２８】実施の形態５の動作シーケンスの後半を示す図である。
【発明を実施するための形態】
【００１０】
実施の形態１．
図１は、この発明の実施の形態１の遠隔作業支援システムを示す図である。本システムは、サーバ１と複数の作業端末(作業端末３、作業端末４）をネットワーク２で接続する
。ここでは、作業指示側、遠隔作業側の双方で同じ仕様の作業端末を使用するものとする。
【００１１】
サーバ１は、作業端末（遠隔作業支援端末）３、４とＳＩＰ通信を実現する指令や応答等の通信、すなわち制御通信を行うためのＳＩＰ通信手段１１、作業端末間で映像や音声の主要情報とタッチ位置等の補足情報を含む伝達情報の共有に使用するＳＩＰ（Session
Initiation  Protocol）通信のためのセッション確立を行うためのセッション確立手段１２を有する。
【００１２】
作業端末３（３ａ）は、サーバ１および他の作業端末４（４ａ）とＳＩＰ通信を実現する指令や応答等の通信、すなわち制御通信を行うためのＳＩＰ通信手段３１ａ、他の作業端末４（４ａ）と映像や音声を送受信したりマイク３４ａ、スピーカ３５ａ、カメラ３６ａ、タッチスクリーン３７ａを使って、作業端末３（３ａ）の使用者に映像や音声を入出力する処理を行う、映像・音声通信手段３２ａ、タッチスクリーン３７ａのタッチ位置を他の作業端末４（４ａ）に送信したり、他の作業端末４（４ａ）のタッチ位置を受信しタッチスクリーン３７ａに表示する処理を行うタッチ位置通信手段３３ａを有する。また、作業端末３（３ａ）は、サーバ１や他の作業端末４（４ａ）と通信するためのアンテナ３０ａ、作業端末間のセッション確立に使用する接続ボタン３８ａ、確立したセッションを終了するための切断ボタン３９ａを備える。
【００１３】
タッチスクリーン３７ａは、その画面に伝達情報を表示するとともに画面における位置情報を入力する。位置情報は、限定された位置が入力された場合はタッチ位置となり、隣接する位置が連続的に入力された場合は軌跡となる。映像・音声通信手段３２ａは主要情報を入出力する処理及び送受信する処理を行う主要情報通信手段である。タッチ位置通信手段３３ａは、タッチスクリーン３７ａに入力された位置入力であるタッチ位置を補足情報とし、補足情報を入出力する処理及び送受信する処理を行う補足情報通信手段である。作業端末４（４ａ）は、基本的に作業端末３（３ａ）と同じ構成である。
【００１４】
ネットワーク２は、ＳＩＰ通信を行うための通信インフラであり、インターネットかローカルエリアネットワークは問わず、また無線か有線かは問わない。
【００１５】
次に作業端末３（３ａ）、４（４ａ）の外観について説明する。作業端末３（３ａ）、４（４ａ）ともに同じ外観なので、作業端末３（３ａ）について説明する。図２は作業端末３（３ａ）の表面外観を示す図であり、図３は作業端末３（３ａ）の裏面外観を示す図である。作業端末３（３ａ）の表面に、作業者の音声を入力するマイク３４ａ、他の作業端末４（４ａ）の作業者音声を出力するスピーカ３５ａ、映像およびタッチ位置を出力し、タッチ位置を入力するタッチスクリーン３７ａ、映像を撮影するカメラ３６ａ、接続ボタン３８ａ、切断ボタン３９ａ、が配置されている。作業端末３（３ａ）の裏面に、映像を撮影するカメラ３６ａ、サーバ１や他の作業端末４（４ａ）と通信するためのアンテナ３０ａが、が配置されている。カメラ３６ａは、図３に示すように撮影対象に向けられるレンズが通常裏面に向いている。しかし、必要に応じて回転させることで、表面側に向きを変えることができる。例えば、カメラを表面側に向けて作業者の表情を映すことで、テレビ電話のような使い方が可能である。
【００１６】
次に作業端末間での映像、音声やタッチ位置の共有動作について説明する。図４は実施の形態１の動作シーケンスの前半を示す図であり、図５は実施の形態１の動作シーケンスの後半を示す図である。作業端末３（３ａ）と作業端末４（４ａ）で情報共有するとして、作業端末３（３ａ）を呼び出し側、作業端末４（４ａ）を応答側とする。
【００１７】
まず概略を説明する。まず、サーバ１のセッション確立手段１２により、作業端末３（３ａ）と作業端末４（４ａ）とのセッションの確立を行う（ステップＳ１１）。セッションの確立後は、映像・音声通信手段３２ａ、３２ｂを用いて、映像や音声の共有を行う（ステップＳ１２）。映像や音声を補足する情報、すなわち補足情報として、タッチ位置の共有を、タッチ位置通信手段３３ａ、３３ｂを用いて行う（ステップＳ１３）。映像、音声やタッチ位置の共有により所望の情報伝達が終了したあとに、ＳＩＰ通信手段３１ａ、３１ｂを用いてセッションの切断を行う（ステップＳ１４）。以下に上記ステップＳ１１〜Ｓ１４について、詳述する。
【００１８】
ステップＳ１１に示すセッションの確立の動作は以下の通りである。呼び出し側である
作業端末３ａにて接続ボタン３８ａを押す（ステップＳ１１１）ことにより、ＳＩＰ通信手段３１ａを介してサーバ１に対し接続要求（制御通信）を行う（ステップＳ１１２）。サーバ１のセッション確立手段１２は、ＳＩＰ通信手段１１を介して作業端末３ａからの接続要求を、作業端末４ａに転送する（ステップＳ１１３）。作業端末４ａにてスピーカ３５ｂより呼び出し音がするので、応答側である作業端末４ａの接続ボタン３８ｂを押す（ステップＳ１１４）。接続ボタン３８ｂを押すと、ＳＩＰ通信手段３１ｂを介して接続要求の受諾のメッセージをサーバ１に応答する（ステップＳ１１５）。サーバ１のセッション確立手段１２は、ＳＩＰ通信手段１１を介して作業端末３ａに対し、作業端末４ａからの接続要求の応答を返す（ステップＳ１１６）と、作業端末３ａと作業端末４ａとのセッションが確立される（ステップＳ１１７）。セッション確立により、データ通信経路が決まり、映像や音声の主要情報とタッチ位置等の補足情報を含んだ本質的な情報、すなわち伝達情報を双方向に通信することが可能となる。ステップＳ１１２、Ｓ１１３、Ｓ１１５、Ｓ１１６の制御通信は、ＳＩＰ通信手段３１ａ、３１ｂ、１１により送受信される。
【００１９】
ステップＳ１２に示す映像や音声の共有の動作は以下の通りである。ここでは、映像の共有の例は、呼び出し側の作業端末３ａの映像を共有する例を説明する。作業端末間で共有される本質的な情報を送受信する通信は情報通信と呼ぶことにし、ＳＩＰ通信を実現する指令や応答等の通信である制御通信と区別することにする。作業端末３ａのカメラ３６ａにて動画や静止画を含むカメラ映像を撮影し（ステップＳ１２１）、そのカメラ映像をまず作業端末３ａのタッチスクリーン３７ａに表示する（ステップＳ１２２）。続けて、ステップＳ１１７で確立したセッションを使用し、映像・音声通信手段３２ａにより作業端末３ａのカメラ映像を作業端末４ａに送信する（ステップＳ１２３）。作業端末４ａは、映像・音声通信手段３２ｂにより当該カメラ映像を受信する。カメラ映像を受信した作業端末４ａは、タッチスクリーン３７ｂに作業端末３ａのカメラ映像を表示する（ステップＳ１２４）。以上により、作業端末３ａと作業端末４ａにて、作業端末３ａのカメラ映像を共有することができる。映像共有の概念は後述する。
【００２０】
音声に関しては、次の通りである。セッション確立後はマイクに向かって話しかけることで、映像・音声通信手段３２ａ、３２ｂにより相手側の作業端末スピーカに音声が出力される（ステップＳ１２５）。作業端末３ａのマイク３４ａで捉えた音声情報は作業端末４ａのスピーカ３５ｂに音声が出力される。作業端末４ａのマイク３４ｂで捉えた音声情報は作業端末３ａのスピーカ３５ａに音声報が出力される。
【００２１】
図６は、実施の形態１の映像共有の概念を説明する図である。図６において、左側は作業端末３ａを示し、右側は作業端末４ａを示している。作業端末３ａの前方には、映像や音声の共有の対象となる対象物５１、５２がある。カメラ３６ａにて撮影されたカメラ映像として、対象物映像６１ａ、６２ａがタッチスクリーン３７ａに表示されている。対象物映像６１ａは対象物５１の映像であり、対象物映像６２ａは対象物５２の映像である。矢印７０で示した方向に、すなわち作業端末３ａから作業端末４ａに、映像・音声通信手段３２ａにより対象物映像６１ａ、６２ａが送信される。作業端末４ａは、映像・音声通信手段３２ｂにより当該カメラ映像を受信する。受信した対象物映像６１ｂ、６２ｂがタッチスクリーン３７ｂに表示されている。対象物映像６１ｂは対象物５１の映像であり、対象物映像６２ｂは対象物５２の映像である。
【００２２】
ステップＳ１３に示すタッチ位置の共有の動作を、図５及び図７を用いて説明する。図７は、実施の形態１のタッチ位置共有の概念を説明する図である。図７において、左側は作業端末３ａを示し、右側は作業端末４ａを示している。タッチ位置の共有は、呼び出し側である作業端末３ａ、応答側である作業端末４ａ双方のタッチ位置を共有する。
【００２３】
図７の左側に示すように、作業者が手５３ａの指で作業端末３ａのタッチスクリーン３
７ａをタッチする（ステップＳ１３１）と、ステップＳ１１７で確立したセッションを使用して、タッチ位置通信手段３３ａにより作業端末３ａのタッチ位置を作業端末４ａに送信する（ステップＳ１３２）。作業端末４ａは、タッチ位置通信手段３３ｂにより当該タッチ位置を受信する。作業端末３ａのタッチ位置を受信した作業端末４ａは、タッチスクリーン３７ｂ上の映像表示に重畳するように、作業端末３ａのタッチ位置に該当する位置にタッチアイコン（指マーク）５５ｂを表示する（ステップＳ１３３）。
【００２４】
反対に作業端末４ａのタッチ位置を作業端末３ａに送信する場合は、図７の右側に示すように、作業者が手５３ｂの指で作業端末４ａにてタッチスクリーン３７ｂに対しタッチする（ステップＳ１３４）と、ステップＳ１１７で確立したセッションを使用して、タッチ位置通信手段３３ｂにより作業端末４ａのタッチ位置を作業端末３ａに送信する（ステップＳ１３５）。作業端末３ａは、タッチ位置通信手段３３ａにより当該タッチ位置を受信する。作業端末４ａのタッチ位置を受信した作業端末３ａは、タッチスクリーン３７ａ上の映像表示に重畳するように、作業端末４ａのタッチ位置に該当する位置に映像に対するタッチアイコン（指マーク）５５ａを表示する（ステップＳ１３６）。なお、矢印７１は、作業端末４ａから作業端末３ａに通信する通信方向を示している。
【００２５】
ステップＳ１４に示すセッションの切断の動作は以下の通りである。作業端末４ａから切断する場合を説明する。映像、音声やタッチ位置の共有により所望の情報伝達が終了したあとに、作業端末４ａにて切断ボタン３９ｂを押す（ステップＳ１４１）と、作業端末４ａはＳＩＰ通信手段３１ｂを介して、作業端末３ａにセッション切断を要求する（ステップＳ１４２）。作業端末３ａは、ＳＩＰ通信手段３１ａを介して、切断要求を受諾すると（ステップＳ１４３）、セッションが切断される（ステップＳ１４４）。セッション切断により、情報共有が終了となる。ステップＳ１４２、Ｓ１４３の通信はＳＩＰ通信手段３１ａ、３１ｂにより処理される。
【００２６】
実施の形態１の遠隔作業支援システムでは、通信を行う作業端末３ａ、４ａが作業端末間で映像や音声等の主要情報に加え、主要情報を補足する補足情報であるタッチ位置を共有する手段であるタッチ位置通信手段３３ａ、３３ｂを備えたので、映像に対する質問やコメントの具体的な指摘箇所をタッチアイコン５５ａ、５５ｂで示すことができる。このため、作業者の質問やコメントが音声情報のみで行われていた従来とは異なり、主要情報を補足する補足情報を共有化することができ、従来よりも効率的な情報伝達を行うことができる。
【００２７】
以上のように実施の形態１の遠隔作業支援システムによれば、複数の作業端末３、４と、ネットワーク２を介して複数の作業端末３、４の間にＳＩＰ通信のセッションを確立させるサーバ１とを備え、サーバ１により確立されたセッションを使用して複数の作業端末３、４の間において、映像を含む主要情報と主要情報を補足する補足情報とを含む伝達情報を共有する。作業端末３（４）は、画面に伝達情報を表示するとともに画面における位置情報を入力するタッチスクリーン３７ａ（３７ｂ）と、サーバ１及び他の作業端末４（３）とＳＩＰ通信を行うＳＩＰ通信手段３１ａ（３１ｂ）と、主要情報を入出力する処理及び送受信する処理を行う主要情報通信手段３２ａ（３２ｂ）と、タッチスクリーン３７ａ（３７ｂ）に入力された情報を補足情報とし、補足情報を入出力する処理及び送受信する処理を行う補足情報通信手段３３ａ（３３ｂ）と、を有するので、主要情報及び主要情報を補足する補足情報を共有化することができ、従来よりも効率的な情報伝達を行うことができる。
【００２８】
実施の形態１の遠隔作業支援端末によれば、画面に伝達情報を表示するとともに画面における位置情報を入力するタッチスクリーン３７ａ（３７ｂ）と、サーバ１及び他の作業端末４（３）とＳＩＰ通信を行うＳＩＰ通信手段３１ａ（３１ｂ）と、主要情報を入出力
する処理及び送受信する処理を行う主要情報通信手段３２ａ（３２ｂ）と、タッチスクリーン３７ａ（３７ｂ）に入力された情報を補足情報とし、補足情報を入出力する処理及び送受信する処理を行う補足情報通信手段３３ａ（３３ｂ）と、を有するので、主要情報及び主要情報を補足する補足情報を他の遠隔作業支援端末の間において共有化することができ、従来よりも効率的な情報伝達を行うことができる。
【００２９】
実施の形態１の遠隔作業支援方法によれば、複数の作業端末３、４の間において、サーバ１を介してＳＩＰ通信のセッションを確立させる手順と、複数の作業端末３、４の間において、画面に伝達情報を表示するとともに画面における位置情報を入力するタッチスクリーン３７ａ（３７ｂ）に表示された主要情報を送受信し、当該補足情報を共有する手順と、複数の作業端末３、４の間において、タッチスクリーン３７ａ（３７ｂ）に入力された情報を補足情報とし、当該補足情報を送受信し、当該補足情報を共有する手順と、を含むので、主要情報及び主要情報を補足する補足情報を他の遠隔作業支援端末の間において共有化することができ、従来よりも効率的な情報伝達を行うことができる。
【００３０】
実施の形態２．
図８は、この発明の実施の形態２の遠隔作業支援システムを示す図である。実施の形態１の遠隔作業支援システムとは、作業端末３、４が、描画図形通信手段４０ａ、４０ｂが追加された作業端末３（３ｂ）、４（４ｂ）である点で異なる。描画図形通信手段４０ａ、４０ｂは、作業端末のタッチスクリーン上でなぞった軌跡を描画図形に変換し、情報共有している別の作業端末に描画図形を送ることで、作業端末間で描画図形を共有することができる。描画図形通信手段４０ａ、４０ｂは、補足情報通信手段に含まれる。
【００３１】
この描画図形の共有方法について、図９〜１１を用いて説明する。図９は実施の形態２の動作シーケンスの前半を示す図であり、図１０は実施の形態２の動作シーケンスの後半を示す図である。図１１は、実施の形態２の描画図形共有の概念を説明する図である。図１１において、左側は作業端末３ｂを示し、右側は作業端末４ｂを示している。図９及び図１０において、セッションの確立（ステップＳ１１）、映像や音声の共有（ステップＳ１２）、タッチ位置の共有（ステップＳ１３）、セッションの切断（ステップＳ１４）は、実施の形態１と同様であるため、説明を省略する。実施の形態２で追加した、描画図形の共有（ステップＳ２１）について、以降に説明する。
【００３２】
図１１の左側に示すように、作業者が手５３ａの指で作業端末３ｂのタッチスクリーン３７ａ上を指でなぞる（ステップＳ２１１）と、作業端末３ｂの描画図形通信手段４０ａは、その軌跡を描画図形に変換する（ステップＳ２１２）。図１１において、破線で示した手５３ｃは軌跡の開始位置における手を示している。作業者が手５３ａの指でなぞった軌跡は描画図形５６である。
【００３３】
ステップＳ２１１にて変換された描画図形５６を、ステップＳ１１７で確立したセッションを使用して、作業端末３ｂから作業端末４ｂに送信する（ステップＳ２１３）。作業端末４ｂに送られた描画図形５６は、描画図形通信手段４０ｂにより作業端末４ｂのタッチスクリーン３７ｂ上に描画図形映像６６として表示される（ステップＳ２１４）。これにより、作業端末３ｂの作業者が映像上の意図する範囲を矩形で囲ったり、方向を示す矢印を描画図形として描画し、作業端末４ｂの作業者に伝えたりすることができる。
【００３４】
作業端末４ｂでも同様に、図１１の右側に示すように、作業者が手５３ｂの指でタッチスクリーン３７ｂ上を指でなぞる（ステップＳ２１５）と、作業端末４ｂの描画図形通信手段４０ｂは、その軌跡を描画図形に変換する（ステップＳ２１６）。作業者が手５３ｂの指でなぞった軌跡は描画図形５７である。
【００３５】
ステップＳ２１６にて変換された描画図形５７を、ステップＳ１１７で確立したセッションを使用して、作業端末４ｂから作業端末３ｂに送信する（ステップＳ２１７）。作業端末３ｂに送られた描画図形５７は、描画図形通信手段４０ａにより作業端末３ａのタッチスクリーン３７ａ上に描画図形映像６７として表示される（ステップＳ２１８）。
【００３６】
なお、描画図形通信手段４０ａにより変換された描画図形５６は、描画図形通信手段４０ａによりタッチスクリーン３７ａに表示してもよい。描画図形通信手段４０ｂにより変換された描画図形５７は、描画図形通信手段４０ｂによりタッチスクリーン３７ｂに表示してもよい。この場合、作業端末３ｂにおいて、作業端末３ｂに表示された描画図形５６と、作業端末４ｂから送信された画図形５７の描画図形映像６７とを区別するために、例えば作業端末３ｂの描画図形を実線、作業端末４ｂの描画図形を点線で描画するなど分けたり、あるいは端末ごとに描画図形の色を変えたりするなどの工夫をしてもよい。また、作業端末４ｂにおいても、同様に、作業端末４ｂに表示された描画図形５７と、作業端末３ｂから送信された画図形５６の描画図形映像６６とを区別することができる。
【００３７】
以上のように、実施の形態２の遠隔作業支援システムは、タッチスクリーン３７ａ、３７ｂ上で描画した描画図形５６、５７を作業端末間で共有することができる。このため、タッチスクリーン３７ａ、３７ｂ上の映像に対して範囲や方向を示したりするなど、描画図形を補足情報として共有することができる。これにより、より具体的な指示や質問を行うことができ、実施の形態１より効率的に情報伝達を行うことができる。
【００３８】
実施の形態３．
図１２は、この発明の実施の形態３の遠隔作業支援システムを示す図である。実施の形態２の遠隔作業支援システムとは、作業端末３、４が、カメラ切り替えボタン４１ａ、４１ｂが追加された作業端末３（３ｃ）、４（４ｃ）である点で異なる。カメラ切り替えボタンを押すと、ボタンを押した作業端末のカメラ映像を共有情報として使用することができる。
【００３９】
カメラ切り替えボタン４１ａ、４１ｂを追加した作業端末の外観を図１３に示す。図１３は実施の形態３の作業端末の表面外観を示す図である。図１３は作業端末３（３ｃ）について示したが、作業端末４（４ｃ）も同様である。このカメラ切り替えボタン４１ａ、４１ｂを追加した情報共有シーケンスについて、図１４〜１６を用いて説明する。図１４は実施の形態３の動作シーケンスの前半を示す図であり、図１５は実施の形態３の動作シーケンスの後半を示す図である。図１６は、実施の形態３の映像共有の概念を説明する図である。図１６（ａ）はカメラ切り替えボタン４１ｂを押す前の状態を示し、図１６（ｂ）はカメラ切り替えボタン４１ｂを押すところを示し、図１６（ｃ）は作業端末４ｃのカメラ映像が作業端末３ｃに共有された状態を示している。図１６（ａ）、（ｃ）において、左側は作業端末３ｃを示し、右側は作業端末４ｃを示している。
【００４０】
図１４及び図１５において、セッションの確立（ステップＳ１１）、映像や音声の共有（ステップＳ１２）、タッチ位置の共有（ステップＳ１３）、描画図形の共有（ステップＳ２１）、セッションの切断（ステップＳ１４）は、実施の形態２と同様であるため、説明を省略する。実施の形態３で追加した、カメラの切り替え１（ステップＳ３１）及びカメラの切り替え２（ステップＳ３２）について、以降に説明する。
【００４１】
カメラの切り替え１（ステップＳ３１）は作業端末４（４ｃ）のカメラ３６ｂで撮影したカメラ映像に切り替える場合であり、カメラの切り替え２（ステップＳ３２）は作業端末３（３ｃ）のカメラ３６ａで撮影したカメラ映像に切り替える場合である。ステップＳ３１を実行する前の状態は、図１６（ａ）のようになっている場合で説明する。作業端末３ｃ、４ｃのそれぞれのタッチスクリーン３７ａ、３７ｂに、作業端末３ｃのカメラ映像
である対象物映像６１ａ、６２ａと対象物映像６１ｂ、６２ｂとが映っている。図１６（ｂ）のように、作業端末４ｃにて作業者が手５３ｂでカメラ切り替えボタン４１ｂを押すと（ステップＳ３１１）、作業端末４ｃのタッチスクリーン３７ｂ上に、作業端末４ｃのカメラ３６ｂの映像を表示する（ステップＳ３１２）。図１６（ｃ）の右側に示すように、タッチスクリーン３７ｂ上に、対象物５４の対象物映像６４ｂが表示される。
【００４２】
続けて、ステップＳ１１７で確立したセッションを使用して、作業端末４ｃのカメラ映像を作業端末３ｃに送信する（ステップＳ３１３）。作業端末３ｃは作業端末４ｃのカメラ映像を受信すると、図１６（ｃ）の左側のように、タッチスクリーン３７ａ上にカメラ映像（受信カメラ映像）である対象物映像６４ａを表示する（ステップＳ３１４）。
【００４３】
作業端末４ｃのカメラ映像を共有した後で、また、作業端末３ｃのカメラ映像の共有状態に戻すこともできる。作業端末３ｃにてカメラ切り替えボタン４１ａを押すと（ステップＳ３２１）、作業端末３ｃのタッチスクリーン３７ａ上に、作業端末３ｃのカメラ３６ａの映像を表示する（ステップＳ３２２）。この状態は、図１６（ａ）の左側の状態と同様である。続けて、ステップＳ１１７で確立したセッションを使用して、作業端末３ｃのカメラ映像を作業端末４ｃに送信する（ステップＳ３２３）。作業端末４ｃは作業端末３ｃのカメラ映像を受信すると、タッチスクリーン３７ｂ上にカメラ映像（受信カメラ映像）である対象物映像６１ｂ、６２ｂを表示する（ステップＳ３２４）。この状態は、図１６（ａ）の右側の状態と同様である。
【００４４】
以上のように、実施の形態３の遠隔作業支援システムは、カメラ切り替えボタン４１ａ、４１ｂを押すことで、呼び出し側の作業端末３（３ｃ）のカメラ３６ａで撮影したカメラ映像だけではなく、応答側の作業端末４（４ｃ）のカメラ３６ｂで撮影したカメラ映像を情報共有することができる。例えば、複数の作業現場に分かれた作業者間でお互いの現場映像を共有することで、離れた場所でもより正確に協調作業を行うことができるようになる。
【００４５】
また、作業端末３（３ｃ）の作業者が現場にいて、作業端末４（４ｃ）の作業者が事務所にいた場合、もし作業手順書などのマニュアルが作業端末４（４ｃ）の作業者がいる事務所にしかない場合でも、その作業手順書を作業端末４（４ｃ）のカメラに写すことで、作業端末３（３ｃ）の作業者も作業手順書を現場の作業端末３（３ｃ）で確認することができるようになる。
【００４６】
実施の形態４．
図１７は、この発明の実施の形態４の遠隔作業支援システムを示す図である。実施の形態３の遠隔作業支援システムとは、ドキュメントサーバ５が追加され、作業端末３、４が、ドキュメント参照ボタン４２ａ、４２ｂ、ドキュメント取得通信手段４３ａ、４３ｂ、ドキュメント表示手段４４ａ、４４ｂが追加された作業端末３（３ｄ）、４（４ｄ）である点で異なる。それぞれの作業端末３、４において、ドキュメント取得通信手段４３ａ、４３ｂと、ドキュメント表示手段４４ａ、４４ｂは、ドキュメント通信手段を構成する。ドキュメント通信手段は主要情報通信手段に含まれる。
【００４７】
ドキュメントサーバ５は、図面や作業手順書、過去の点検履歴など、現場作業に関連する様々な文章や画像データ等を保存しているサーバであり、作業端末３（３ｄ）、４（４ｄ）からネットワーク２経由でデータを取得することができる。
【００４８】
作業端末３（３ｄ）、４（４ｄ）には図１８に示すように、ドキュメント参照ボタン４２ａを追加する。図１８は実施の形態４の作業端末の表面外観を示す図である。図１８は作業端末３（３ｄ）について示したが、作業端末４（４ｄ）も同様である。図１９は、実施の形態４のドキュメント参照の概念を説明する図である。図１９（ａ）はカメラ映像が表示されている状態を示し、図１９（ｂ）はドキュメント一覧が表示された状態を示し、図１９（ｃ）は選択されたドキュメントが表示された状態を示している。
【００４９】
図１９（ａ）において、作業端末３ｄのタッチスクリーン３７ａに、作業端末３ｄのカメラ映像である対象物映像６１ａ、６２ａが映っている。作業者が手５３ａでドキュメント参照ボタン４２ａを押すと、図１９（ｂ）に示すとおり、タッチスクリーン３７ａに表示されたカメラ映像の画面２１ａから、ドキュメントサーバ５上のドキュメント一覧をツリー状に示された画面２１ｂをタッチスクリーン３７ａに表示する。さらに図１９（ｃ）に示すとおり、ツリー状にされた項目表示から任意のドキュメントの項目表示２２をタッチで選択することにより、ドキュメント一覧をツリーの画面２１ｂから当該ドキュメントをタッチスクリーン３７ａ上に表示する。すなわち、項目表示２２をタッチで選択することにより、当該ドキュメントが表示された画面２１ｃに変更することができる。ドキュメント参照を行うと、情報共有を行っている別の作業端末に同じドキュメントを表示し、ドキュメントを共有することができる。
【００５０】
実施の形態４の遠隔作業支援システムの動作シーケンスについて、図２０及び２１を用いて説明する。図２０は実施の形態４の動作シーケンスの前半を示す図であり、図２１は実施の形態４の動作シーケンスの後半を示す図である。図２０及び図２１において、セッションの確立（ステップＳ１１）、映像や音声の共有（ステップＳ１２）、タッチ位置の共有（ステップＳ１３）、描画図形の共有（ステップＳ２１）、カメラの切り替え１（ステップＳ３１）、カメラの切り替え２（ステップＳ３２）、セッションの切断（ステップＳ１４）は、実施の形態３と同様であるため、説明を省略する。実施の形態４で追加した、ドキュメント参照（ステップＳ４１）について、以降に説明する。
【００５１】
ステップＳ４１を実行する前の状態は、図１９（ａ）のようになっている場合で説明する。作業端末３ｄのタッチスクリーン３７ａに、作業端末３ｄのカメラ映像である対象物映像６１ａ、６２ａが映っている。図１９（ａ）のように、作業端末３ｄにて作業者が手５３ａでドキュメント参照ボタン４２ａを押す（ステップＳ４１１）と、作業端末３ｄのドキュメント取得通信手段４３ａにより、ドキュメントサーバ５からドキュメント一覧を取得し（ステップＳ４１２）、図１９（ｂ）のように、タッチスクリーン３７ａ上にドキュメント一覧を表示する（ステップＳ４１３）。
【００５２】
図１９（ｂ）のように、ドキュメント一覧より参照するドキュメント（項目表示２２）を選択する（ステップＳ４１４）と、作業端末３ｄのドキュメント取得通信手段４３ａにより、ドキュメントサーバ５から当該ドキュメントを取得する（ステップＳ４１５）。図１９（ｃ）のように、ドキュメント表示手段４４ａによりタッチスクリーン３７ａ上にドキュメントを表示する（ステップＳ４１６）。続けて、作業端末３ｄにて取得したドキュメントをドキュメント取得通信手段４３ａにより作業端末４ｄに送信し（ステップＳ４１７）、作業端末４ｄはドキュメント取得通信手段４３ｂにより当該ドキュメントを受信し、ドキュメント表示手段４４ｂにより作業端末４ｄのタッチスクリーン３７ｂ上に、当該ドキュメントを表示する（ステップＳ４１８）。
【００５３】
ドキュメントを表示した状態でも、タッチ位置や描画図形の補足情報と、音声情報は、共有することができる。ドキュメント上でのタッチ位置共有について図２２に示し、ドキュメント上での描画図形の共有について図２３に示す。ドキュメント上で、タッチ位置や描画図形の補足情報を共有することで、ドキュメントについて正確な情報伝達が可能となる。例えば、ドキュメントとしてある作業の手順書を表示している場合、タッチ位置により作業項目を指示したり、描画図形で複数の作業項目を囲むことで、作業範囲を指示したりすることができるようになる。
【００５４】
ドキュメント上でのタッチ位置共有について説明する。動作シーケンスのステップは実施の形態１で示した図５と同様である。図２２は、実施の形態４のタッチ位置共有の概念を説明する図である。図２２において、左側は作業端末３ｄを示し、右側は作業端末４ｄを示している。タッチ位置の共有は、呼び出し側である作業端末３ｄ、応答側である作業端末４ｄ双方のタッチ位置を共有する。図２２の左側に示すように、作業者が手５３ａの指で作業端末３ｄのタッチスクリーン３７ａをタッチする（ステップＳ１３１）と、ステップＳ１１７で確立したセッションを使用して、タッチ位置通信手段３３ａにより作業端末３ｄのタッチ位置を作業端末４ｄに送信する（ステップＳ１３２）。作業端末４ｄは、タッチ位置通信手段３３ｂにより当該タッチ位置を受信する。作業端末３ｄのタッチ位置を受信した作業端末４ｄは、タッチスクリーン３７ｂ上のドキュメントに重畳するように、作業端末３ａのタッチ位置に該当する位置にタッチアイコン（指マーク）５５ｂを表示する（ステップＳ１３３）。
【００５５】
反対に作業端末４ｄのタッチ位置を作業端末３ｄに送信する場合は、図２２の右側に示すように、作業者が手５３ｂの指で作業端末４ｄにてタッチスクリーン３７ｂに対しタッチする（ステップＳ１３４）と、ステップＳ１１７で確立したセッションを使用して、タッチ位置通信手段３３ｂにより作業端末４ｄのタッチ位置を作業端末３ｄに送信する（ステップＳ１３５）。作業端末３ｄは、タッチ位置通信手段３３ａにより当該タッチ位置を受信する。作業端末４ｄのタッチ位置を受信した作業端末３ｄは、タッチスクリーン３７ａ上のドキュメントに重畳するように、作業端末４ｄのタッチ位置に映像に対するタッチアイコン（指マーク）５５ａを表示する（ステップＳ１３６）。
【００５６】
ドキュメント上での描画図形の共有について説明する。動作シーケンスのステップは実施の形態２で示した図１０と同様である。図２３は、実施の形態４の描画図形共有の概念を説明する図である。図２３において、左側は作業端末３ｄを示し、右側は作業端末４ｄを示している。図２３の左側に示すように、作業者が手５３ａの指で作業端末３ｄのタッチスクリーン３７ａ上を指でなぞる（ステップＳ２１１）と、描画図形通信手段４０ａは、その軌跡を描画図形に変換する（ステップＳ２１２）。図２３において、破線で示した手５３ｃは軌跡の開始位置における手を示している。作業者が手５３ａの指でなぞった軌跡は描画図形５６である。
【００５７】
ステップＳ２１１にて変換された描画図形５６を、ステップＳ１１７で確立したセッションを使用して、描画図形通信手段４０ａにより作業端末３ｄから作業端末４ｄに送信する（ステップＳ２１３）。作業端末４ｄは、描画図形通信手段４０ｂにより当該描画図形５６を受信する。作業端末４ｄに送られた描画図形５６は、描画図形通信手段４０ｂにより作業端末４ｄのタッチスクリーン３７ｂ上に描画図形映像６６として表示される（ステップＳ２１４）。これにより、作業端末３ｄの作業者がドキュメント上の意図する範囲を矩形で囲ったり、方向を示す矢印を描画図形として描画し、作業端末４ｄの作業者に伝えたりすることができる。
【００５８】
作業端末４ｄでも同様に、図２３の右側に示すように、作業者が手５３ｂの指でタッチスクリーン３７ｂ上を指でなぞる（ステップＳ２１５）と、作業端末４ｄの描画図形通信手段４０ｂは、その軌跡を描画図形に変換する（ステップＳ２１６）。作業者が手５３ｂの指でなぞった軌跡は描画図形５７である。
【００５９】
ステップＳ２１６にて変換された描画図形５７を、ステップＳ１１７で確立したセッションを使用して、描画図形通信手段４０ｂにより作業端末４ｄから作業端末３ｄに送信する（ステップＳ２１７）。作業端末３ｄは、描画図形通信手段４０ａにより当該描画図形５７を受信する。作業端末３ｄに送られた描画図形５７は、描画図形通信手段４０ａにより作業端末３ｄのタッチスクリーン３７ａ上に描画図形映像６７として表示される（ステップＳ２１８）。
【００６０】
ドキュメントを表示した状態でカメラ切り替えボタン４１ａ、４１ｂを押すことで、実施の形態３で説明したカメラモード（カメラ映像をタッチスクリーンに表示して情報共有）に切り替えることができる。このため、ドキュメント表示とカメラ映像表示を必要に応じて選択することが可能である。ドキュメント表示から映像表示に切り替える概念を図２４に示す。
【００６１】
図２４は、実施の形態４の映像への切り替えを説明する図である。図２４（ａ）はカメラ切り替えボタン４１ａを押す前の状態を示し、図２４（ｂ）はカメラ映像に切り替えられた状態を示している。作業端末３のタッチスクリーン３７ａに、ドキュメントが表示されている。すなわち、タッチスクリーン３７ａの画面２１ｃはドキュメント表示になっている。
図２４（ａ）のように、作業者が手５３ａでカメラ切り替えボタン４１ａを押すと、作業端末３ｄのタッチスクリーン３７ａ上に、カメラ３６ａの映像を表示する。図２４（ｂ）に示すように、タッチスクリーン３７ａ上に、対象物５１、５２の対象物映像６１ａ、６２ａが表示される。すなわち、タッチスクリーン３７ａの画面２１ａはカメラ映像表示になっている。
【００６２】
以上により、実施の形態４の遠隔作業支援システムは、ドキュメントを使って作業指示や質問事項を行うことができ、より正確な情報伝達が可能となる。なお、ドキュメント一覧は、ツリー状にされたものに限定されず、ドキュメントの名称が表示されたものでもよい。
【００６３】
実施の形態５．
図２５は、この発明の実施の形態５の遠隔作業支援システムを示す図である。実施の形態４の遠隔作業支援システムとは、作業端末３、４が、スクリーンキャプチャーボタン４５ａ、４５ｂ、スクリーンキャプチャー手段４６ａ、４６ｂが追加された作業端末３（３ｅ）、４（４ｅ）である点で異なる。
【００６４】
スクリーンキャプチャーボタン４５ａを追加した作業端末３（３ｅ）の外観を図２６に示す。図２６は、実施の形態５の作業端末の表面外観を示す図である。図２６は作業端末３（３ｅ）について示したが、作業端末４（４ｅ）も同様である。スクリーンキャプチャーボタン４５ａを押すと、タッチスクリーン３７ａに表示している情報（映像、タッチ位置、描画図形、ドキュメント）を、画像データとして合成して保存し、ドキュメントサーバ５上の専用フォルダにアップロードすることができる。ドキュメントサーバ５は、画像データを保存する保存サーバに該当する。
【００６５】
実施の形態５の遠隔作業支援システムの動作シーケンスについて、図２７及び２８を用いて説明する。図２７は実施の形態５の動作シーケンスの前半を示す図であり、図２８は実施の形態５の動作シーケンスの後半を示す図である。図２７及び図２８において、セッションの確立（ステップＳ１１）、映像や音声の共有（ステップＳ１２）、タッチ位置の共有（ステップＳ１３）、描画図形の共有（ステップＳ２１）、カメラの切り替え１（ステップＳ３１）、カメラの切り替え２（ステップＳ３２）、ドキュメント参照（ステップＳ４１）、セッションの切断（ステップＳ１４）は、実施の形態４と同様であるため、説明を省略する。実施の形態５で追加した、スクリーンキャプチャー情報共有（ステップＳ５１）について、以降に説明する。
【００６６】
ステップＳ５１を実行する前の状態は、例えば図１９（ａ）に示したように、タッチス
クリーン３７ａの画面２１ａはカメラ映像表示になっている。作業端末３ｅにてスクリーンキャプチャーボタン４５ａを押す（ステップＳ５１１）と、スクリーンキャプチャー手段４６ａによりタッチスクリーン３７ａの表示内容をキャプチャーして画像ファイルとしてドキュメントサーバ５に保存する（ステップＳ５１２）。取得した画像ファイルはタッチスクリーン３７ａにそのまま表示する（ステップＳ５１３）。さらに、取得した画像ファイルを情報共有のため、映像・音声通信手段３２ａにより作業端末４ｅに送信する（ステップＳ５１４）。作業端末４ｅは、映像・音声通信手段３２ｂにより当該画像ファイルを受信する。そして、作業端末４ｅにて、受信した画像ファイルをタッチスクリーン３７ｂ上に表示する（ステップＳ５１５）。
【００６７】
タッチスクリーン３７ａの表示内容をキャプチャーすること、すなわちスクリーンキャプチャーを行うことにより、動画の共有では、手振れ等により不鮮明になることで情報共有が難しい場合であっても、静止画として映像を保存したり、静止画を送信したりすることで、正確な情報を共有でき、効率的な情報伝達を行うことができる。また、スクリーンキャプチャーを行うことにより、現場写真として画像データをドキュメントサーバ５に取りためて、後で分析を行ったりすることに利用することができる。
【００６８】
また、タッチ位置や描画図形を、映像やドキュメントと合成した状態で画像ファイルとしてドキュメントサーバ５に保存することで、作業実績のエビデンスとして使用することもできる。例えば、点検時のチェックリストをドキュメントとして表示しておき、チェックマークの描画図形（指でチェックの軌跡を描く）をチェックリスト上に書き込んでから、スクリーンキャプチャーを行うことで、チェックリストのチェック記録として残すことができる。
【００６９】
以上のように、実施の形態５の遠隔作業支援システムは、タッチスクリーン３７ａの表示内容をキャプチャーすること、すなわちスクリーンキャプチャーを行うことにより、作業指示や質問事項を正確に行うことができ、より効率的な情報伝達を行うことができる。また、ドキュメントサーバ５に保存された画像データを後で分析を行ったり、作業実績のエビデンスとして使用したりすることもできる。
【００７０】
なお、実施の形態１乃至５にて、作業端末上に設置しているボタン、すなわち、接続ボタン３８ａ、３８ｂ、切断ボタン３９ａ、３９ｂ、カメラ切り替えボタン４１ａ、４１ｂ、ドキュメント参照ボタン４２ａ、４２ｂ、スクリーンキャプチャーボタン４５ａ、４５ｂは、例えばタッチスクリーン３７ａ、３７ｂ上のタッチメニュー等に変更してもよい。作業端末上に設置しているボタンをタッチメニュー等に変更ことで、物理的なボタン装置を不要とすることもできる。
【００７１】
また、実施の形態１乃至５にて、２台の作業端末にて通信を行う例として説明したが、作業端末が追加された場合（３台以上の場合）でもよい。各作業端末に上述したＳＩＰ通信手段３１、映像・音声通信手段３２、タッチ位置通信手段３３、描画図形通信手段４０、ドキュメント取得通信手段４３、ドキュメント表示手段４４、スクリーンキャプチャー手段４６が備えられていることにより、映像、音声やタッチ位置、描画図形、ドキュメント、スクリーンキャプチャーのそれぞれについて情報共有ができる。また、実施の形態１乃至５の内容は、矛盾しない範囲で相互に適用することができる。
【符号の説明】
【００７２】
１…サーバ、２…ネットワーク、３、３ａ、３ｂ、３ｃ、３ｄ、３ｅ、４、４ａ、４ｂ、４ｃ、４ｄ、４ｅ…作業端末、５…ドキュメントサーバ、３１ａ、３１ｂ…ＳＩＰ通信手段、３２ａ、３２ｂ…映像・音声通信手段（主要情報通信手段）、３３ａ、３３ｂ…タッチ位置通信手段（補足情報通信手段）、３６ａ、３６ｂ…カメラ、３７ａ、３７ｂ…タッ
チスクリーン、４０ａ、４０ｂ…描画図形通信手段（補足情報通信手段）、４１ａ、４１ｂ…カメラ切り替えボタン、４２ａ、４２ｂ…ドキュメント参照ボタン、４３ａ、４３ｂ…ドキュメント取得通信手段（主要情報通信手段）、４４ａ、４４ｂ…ドキュメント表示手段（主要情報通信手段）、４５ａ、４５ｂ…スクリーンキャプチャーボタン、４６ａ、４６ｂ…スクリーンキャプチャー手段、５１、５２、５４…対象物、５６、５７…描画図形、６１ａ、６１ｂ、６２ａ、６２ｂ、６４ａ、６４ｂ…対象物映像。
【図１】
2012133534.tif 000003
【図２】
2012133534.tif 000004
【図３】
2012133534.tif 000005
【図４】
2012133534.tif 000006
【図５】
2012133534.tif 000007
【図６】
2012133534.tif 000008
【図７】
2012133534.tif 000009
【図８】
2012133534.tif 000010
【図９】
2012133534.tif 000011
【図１０】
2012133534.tif 000012
【図１１】
2012133534.tif 000013
【図１２】
2012133534.tif 000014
【図１３】
2012133534.tif 000015
【図１４】
2012133534.tif 000016
【図１５】
2012133534.tif 000017
【図１６】
2012133534.tif 000018
【図１７】
2012133534.tif 000019
【図１８】
2012133534.tif 000020
【図１９】
2012133534.tif 000021
【図２０】
2012133534.tif 000022
【図２１】
2012133534.tif 000023
【図２２】
2012133534.tif 000024
【図２３】
2012133534.tif 000025
【図２４】
2012133534.tif 000026
【図２５】
2012133534.tif 000027
【図２６】
2012133534.tif 000028
【図２７】
2012133534.tif 000029
【図２８】
2012133534.tif 000030