【手続補正書】
【提出日】平成29年2月3日(2017.2.3)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
前記通知情報生成部は、前記内視鏡の視野内領域内で作業を行う術者以外の監視者に対して、前記異常検出部により検出された異常に関する通知を行う監視者用通知情報をさらに生成することができる。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０１４０
【補正方法】変更
【補正の内容】
【０１４０】
異常発生方向通知生成部２２４は、異常発生位置特定部２２２により特定された異常の発生場所の位置が内視鏡１２１の視野内領域の外（視野外領域内）である場合、その異常の発生場所の方向に関する通知を行う通知情報を生成する。より具体的には、例えば、異常発生方向通知生成部２２４が、異常の発生場所に関する通知を行う通知情報として、その異常の発生場所の方向を示す画像を生成するようにしてもよい。例えば、異常発生方向通知生成部２２４が、視野内領域の画像上においてその異常の発生場所の方向を示す画像を生成するようにしてもよい。また、例えば、異常発生方向通知生成部２２４が、異常の発生場所に関する通知を行う通知情報として、その異常の発生場所の方向を示す音声を生成するようにしてもよい。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０２０４
【補正方法】変更
【補正の内容】
【０２０４】
＜３．第３の実施の形態＞
＜監視装置等の主な構成例＞
異常の発生についての通知は、作業を行う術者以外に対して行うようにしてもよい。例えば、術者だけでなく、異常の発生を監視する監視者が、ユーザとして、この内視鏡手術支援システム１００を利用するようにし、内視鏡手術支援システム１００が、その監視者に対して異常の発生についての通知を行うようにしてもよい。もちろん、術者と監視者の両方に通知を行うようにしてもよい。また、その場合、術者に対する通知方法と監視者に対する通知方法とが互いに異なるようにしてもよい。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０２３８
【補正方法】変更
【補正の内容】
【０２３８】
ステップＳ３５３において、異常発生通知生成部２２１は、術者用の異常発生通知を生成する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０２９９
【補正方法】変更
【補正の内容】
【０２９９】
＜異常検出処理の流れ＞
次に、図２６のステップＳ４２１において実行される、この場合の異常検出処理の流れの例を、図２７のフローチャートを参照して説明する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０３７１
【補正方法】変更
【補正の内容】
【０３７１】
（３９）  前記センシング領域に対して前記センシングを行うセンサ部をさらに備え、
前記異常検出部は、前記センサ部による前記センシングの結果に基づいて前記異常の発生を検出する
（１）に記載の情報処理装置。
（４０）  前記センサ部は、画像、光、電気、音、振動、加速度、速度、角速度、姿勢、力、温度、湿度、流量、磁気、化学物質、および匂いの内、少なくともいずれか１つをセンシングする
（３９）に記載の情報処理装置。
（４１）  前記センサ部は、さらに、前記センサ部の姿勢をセンシングする
（４０）に記載の情報処理装置。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０３７９
【補正方法】変更
【補正の内容】
【０３７９】
（６２）  前記異常検出部は、前記画像生成部により生成された前記監視対象画像を解析して、出血の発生を前記異常の発生として検出する
（５８）に記載の情報処理装置。
【手続補正８】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
内視鏡の視野外領域の少なくとも一部を含むセンシング領域のセンシングの結果に基づいて前記視野外領域における異常の発生を検出する異常検出部と、
前記異常検出部により検出された異常に関する通知を行う通知情報を生成する通知情報生成部と
を備える情報処理装置。
【請求項２】
前記通知情報生成部は、前記異常検出部により検出された異常の発生場所に関する通知を行う通知情報を生成する
請求項１に記載の情報処理装置。
【請求項３】
前記センシング領域は、前記内視鏡の視野内領域の少なくとも一部も含み、
前記異常検出部は、前記センシング領域のセンシングの結果に基づいて、前記視野内領域における異常の発生をさらに検出する
請求項２に記載の情報処理装置。
【請求項４】
前記通知情報生成部は、前記異常の発生場所の位置が前記視野内領域内であるか否かに応じた方法で、前記異常の発生場所に関する通知を行う通知情報を生成する
請求項３に記載の情報処理装置。
【請求項５】
前記通知情報生成部は、前記異常の発生場所の位置が前記視野内領域内である場合、前記通知情報として、前記視野内領域の画像上において前記異常の発生場所を示す画像、若しくは、前記異常の発生場所を示す音声を生成する
請求項４に記載の情報処理装置。
【請求項６】
前記通知情報生成部は、前記異常の発生場所の位置が前記視野外領域内である場合、前記通知情報として、前記視野内領域の画像上において前記異常の発生場所の方向を示す画像、若しくは、前記異常の発生場所の方向を示す音声を生成する
請求項４または請求項５に記載の情報処理装置。
【請求項７】
前記通知情報生成部は、前記異常の発生場所の位置を、前記視野内領域の位置からの相対位置として特定し、特定した前記異常の発生場所の位置が前記視野内領域内であるか否かの判定を行い、前記判定の結果に応じた方法で、前記異常の発生場所に関する通知を行う通知情報を生成する
請求項４乃至請求項６のいずれかに記載の情報処理装置。
【請求項８】
前記視野内領域の位置を推定する視野位置推定部をさらに備え、
前記通知情報生成部は、前記異常の発生場所の位置を、前記視野位置推定部により推定された前記視野内領域の位置からの相対位置として特定する
請求項７に記載の情報処理装置。
【請求項９】
前記通知情報生成部は、前記通知情報として、前記異常検出部により異常が検出されたことに関する通知、若しくは、前記異常検出部により検出された前記異常の内容に関する通知、または両方の前記通知を行う画像若しくは音声を生成する
請求項１乃至請求項８のいずれかに記載の情報処理装置。
【請求項１０】
前記異常検出部は、出血の発生、術具の温度異常の発生、臓器の温度異常の発生、若しくは、術具と臓器の接触の発生を前記異常の発生として検出する
請求項１乃至請求項９のいずれかに記載の情報処理装置。
【請求項１１】
前記通知情報生成部は、前記内視鏡の視野内領域内で作業を行う術者以外の監視者に対して、前記異常検出部により検出された異常に関する通知を行う監視者用通知情報をさらに生成する
請求項１乃至請求項１０のいずれかに記載の情報処理装置。
【請求項１２】
前記通知情報生成部は、前記監視者用通知情報として、前記異常が検出されたことに関する通知を行う画像若しくは音声を生成する
請求項１１に記載の情報処理装置。
【請求項１３】
前記通知情報生成部は、前記監視者用通知情報として、前記異常の内容に関する通知を行う画像若しくは音声を生成する
請求項１１または請求項１２に記載の情報処理装置。
【請求項１４】
前記通知情報生成部は、前記監視者用通知情報として、前記異常の発生場所に関する通知を行う画像若しくは音声を生成する
請求項１１乃至請求項１３のいずれかに記載の情報処理装置。
【請求項１５】
前記内視鏡の撮像部により撮像されて得られた撮像画像の一部を抽出して表示用画像とし、前記撮像画像の全体を前記センシングの結果として前記異常検出部による前記異常の発生の検出に利用される監視対象画像とする画像生成部をさらに備える
請求項１乃至請求項１４のいずれかに記載の情報処理装置。
【請求項１６】
前記画像生成部は、前記内視鏡の撮像部により撮像されて得られた撮像画像の一部を抽出して拡大画像の表示用画像とし、前記撮像画像の前記拡大画像の表示用画像よりも広範囲を、前記拡大画像の表示用画像の一部に重畳させて表示される俯瞰画像の表示用画像とし、前記撮像画像の全体を、前記センシングの結果として前記異常検出部による前記異常の発生の検出に利用される監視対象画像とする
請求項１５に記載の情報処理装置。
【請求項１７】
所定の術具の位置に応じて、前記撮像部による撮像の画角を制御することにより、前記画像生成部により生成される前記俯瞰画像の表示用画像の画角を制御する画角制御部をさらに備える
請求項１６に記載の情報処理装置。
【請求項１８】
前記通知情報生成部により生成された前記通知情報を出力する出力部をさらに備える
請求項１乃至請求項１７のいずれかに記載の情報処理装置。
【請求項１９】
前記センシング領域に対して、画像、光、電気、音、振動、加速度、速度、角速度、姿勢、力、温度、湿度、流量、磁気、化学物質、および匂いの内、少なくともいずれか１つをセンシングするセンサ部をさらに備え、
前記異常検出部は、前記センサ部による前記センシングの結果に基づいて前記異常の発生を検出する
請求項１乃至請求項１８のいずれかに記載の情報処理装置。
【請求項２０】
内視鏡の視野外領域の少なくとも一部を含むセンシング領域のセンシングの結果に基づいて前記視野外領域における異常の発生を検出し、
検出された異常に関する通知を行う通知情報を生成する
情報処理方法。
【手続補正９】
【補正対象書類名】図面
【補正対象項目名】図９
【補正方法】変更
【補正の内容】
【図９】
2016182228.tif 000001
【手続補正１０】
【補正対象書類名】図面
【補正対象項目名】図１８
【補正方法】変更
【補正の内容】
【図１８】
2016182228.tif 000002
【手続補正１１】
【補正対象書類名】図面
【補正対象項目名】図１９
【補正方法】変更
【補正の内容】
【図１９】
2016182228.tif 000003
【手続補正１２】
【補正対象書類名】図面
【補正対象項目名】図２８
【補正方法】変更
【補正の内容】
【図２８】
2016182228.tif 000004