(57)【要約】【課題】画像データをネットワークを介して通信する内視鏡システムにおいて、フレーム欠損が発生する割合を低減して、画像データを通信することができる画像データ通信方法を提供する。【解決手段】送信画像間引き分割手段によって画像データを間引き抽出画像データと付帯画像データとに分割するステップと、送信画像パケット変換手段によって間引き抽出画像データと付帯画像データとのそれぞれを受信装置に送信する信号形式のパケットに変換するステップと、パケット選択送信手段によって通信ネットワークの通信状況に応じて選択した間引き抽出画像パケットまたは付帯画像パケットを送信するステップと、パケット受信手段によって送信パケットを受信するステップと、データ選択結合手段によって正常に受信することができた送信パケットに含まれる間引き抽出画像データと付帯画像データとを結合した結合画像データを生成するステップとを含む。【選択図】図２
2013255749.tif 000002
【特許請求の範囲】
【請求項１】
撮影した被写体の画像データを原画像データとして出力するスコープと、入力された画像データの映像を表示する表示装置とが接続された内視鏡装置と、入力された原画像データに対して画像処理を行った後の処理画像データを出力する画像処理手段を具備した外部画像処理装置とが、通信ネットワークを介して接続され、前記内視鏡装置が、前記スコープから入力された前記原画像データを前記通信ネットワークを介して前記外部画像処理装置に送信し、前記外部画像処理装置が、受信した前記原画像データに対して画像処理を行った前記処理画像データを前記通信ネットワークを介して前記内視鏡装置に送信し、前記内視鏡装置が、受信した前記処理画像データを前記表示装置に出力する内視鏡システムにおいて、前記内視鏡装置または前記外部画像処理装置のいずれか一方を送信装置とし、前記内視鏡装置または前記外部画像処理装置のいずれか他方を受信装置としたときに、前記送信装置と前記受信装置との間でそれぞれの画像データを、前記通信ネットワークを介して通信する内視鏡システムの画像データ通信方法であって、
前記送信装置に備えた送信画像間引き分割手段によって、送信する画像データを、該画像データによって画像を構成するために重要な間引き抽出画像データと、該間引き抽出画像データに基づいた画像を高画質化するために有効な付帯画像データとに分割する送信画像間引き分割ステップと、
前記送信装置に備えた送信画像パケット変換手段によって、前記間引き抽出画像データと前記付帯画像データとのそれぞれを、前記受信装置に送信するための信号形式のパケットである間引き抽出画像パケットと付帯画像パケットとに変換する送信画像パケット変換ステップと、
前記送信装置に備えたパケット選択送信手段によって、前記通信ネットワークの通信状況に応じて、前記間引き抽出画像パケットまたは前記付帯画像パケットを選択し、該選択した前記間引き抽出画像パケットまたは前記付帯画像パケットを含む送信パケットを送信するパケット選択送信ステップと、
前記受信装置に備えたパケット受信手段によって、前記送信装置から送信されてきた前記送信パケットを受信するパケット受信ステップと、
前記受信装置に備えたデータ選択結合手段によって、前記受信するパケット受信ステップにおいて正常に受信することができた前記送信パケットを選択し、該選択した前記送信パケットに含まれる前記間引き抽出画像データと前記付帯画像データと抽出し、該抽出した前記間引き抽出画像データと前記付帯画像データとを結合することによって、前記送信装置に備えた前記送信画像間引き分割手段によって分割される前の画像データと同様の結合画像データを生成するデータ選択結合ステップと、
を含む、
ことを特徴とする内視鏡システムの画像データ通信方法。
【請求項２】
前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、
送信する前記画像データに含まれる画素のデータを間引いて抽出し、該間引いて抽出した前記画素のデータを前記間引き抽出画像データとし、間引かずに残った前記画素のデータを前記付帯画像データとする、
ことを特徴とする請求項１に記載の内視鏡システムの画像データ通信方法。
【請求項３】
前記送信画像間引き分割手段は、
前記画素のデータを均等な間隔に間引いて抽出する、
ことを特徴とする請求項２に記載の内視鏡システムの画像データ通信方法。
【請求項４】
前記送信画像間引き分割手段は、
特定の色の前記画素のデータのみを間引いて抽出する、
ことを特徴とする請求項２に記載の内視鏡システムの画像データ通信方法。
【請求項５】
前記送信画像間引き分割手段は、
送信する前記画像データに含まれるそれぞれの前記画素の色の割合を維持した状態で、  前記画素のデータを間引いて抽出する、
ことを特徴とする請求項２に記載の内視鏡システムの画像データ通信方法。
【請求項６】
前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、
送信する前記画像データに含まれる画素のデータの大きさを表すデジタル信号における予め定めたビット数の上位ビットを間引いて抽出し、該間引いて抽出したビット数の前記画素のデータを前記間引き抽出画像データとし、間引かずに残ったビット数の前記画素のデータを前記付帯画像データとする、
ことを特徴とする請求項１に記載の内視鏡システムの画像データ通信方法。
【請求項７】
前記内視鏡装置を送信装置とし、前記外部画像処理装置を受信装置としたとき、
前記送信装置に備えた原画形式変換手段によって、前記スコープから入力された前記原画像データの形式を異なる形式に変換する原画形式変換ステップ、
をさらに含み、
前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、
前記原画形式変換ステップによって形式が変換された前記原画像データを、送信する前記画像データとして、前記間引き抽出画像データと前記付帯画像データとのそれぞれに分割する、
ことを特徴とする請求項１に記載の内視鏡システムの画像データ通信方法。
【請求項８】
前記原画形式変換ステップにおいて前記原画形式変換手段は、
前記原画像データを周波数空間のデータに変換し、
前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、
送信する前記画像データに含まれる周波数空間のデータの内、予め定めた低周波成分のデータを間引いて抽出し、該間引いて抽出した前記低周波成分のデータを前記間引き抽出画像データとし、間引かずに残った高周波成分のデータを前記付帯画像データとする、
ことを特徴とする請求項７に記載の内視鏡システムの画像データ通信方法。
【請求項９】
前記原画形式変換ステップにおいて前記原画形式変換手段は、
前記原画像データを輝度と色差との形式のデータに変換し、
前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、
送信する前記画像データに含まれる輝度の大きさを表すデジタル信号における予め定めたビット数の輝度データと、色差の大きさを表すデジタル信号における前記輝度データのビット数よりも少ない予め定めたビット数の色差データとを間引いて抽出し、該間引いて抽出したビット数の輝度データと色差データとを前記間引き抽出画像データとし、間引かずに残ったビット数の輝度データと色差データとを前記付帯画像データとする、
ことを特徴とする請求項７に記載の内視鏡システムの画像データ通信方法。
【請求項１０】
前記パケット選択送信ステップにおいて前記パケット選択送信手段は、
前記通信ネットワークにおける送信パケットの送信周期内に、前記間引き抽出画像パケットを含む前記送信パケットを複数回送信し、前記付帯画像パケットを含む前記送信パケットを１回送信する、
ことを特徴とする請求項１から請求項９のいずれか１の項に記載の内視鏡システムの画像データ通信方法。
【請求項１１】
前記パケット選択送信手段は、
前記通信ネットワークにおける同一の通信回線を使用して、前記送信回数の前記送信パケットを送信する、
ことを特徴とする請求項１０に記載の内視鏡システムの画像データ通信方法。
【請求項１２】
前記パケット選択送信手段は、
前記通信ネットワークにおける複数の通信回線を使用して、前記送信回数の前記間引き抽出画像パケットを含む前記送信パケットと、前記付帯画像パケットを含む前記送信パケットとを送信する、
ことを特徴とする請求項１０に記載の内視鏡システムの画像データ通信方法。
【請求項１３】
前記パケット選択送信手段は、
前記送信回数の前記間引き抽出画像パケットを含む前記送信パケットを、前記通信ネットワークにおける複数の通信回線の全てを使用して並列に送信し、前記付帯画像パケットを含む前記送信パケットを、前記通信ネットワークにおける複数の通信回線のいずれか１つの通信回線を使用して送信する、
ことを特徴とする請求項１２に記載の内視鏡システムの画像データ通信方法。
【請求項１４】
前記受信装置に備えた通信エラー判定手段によって、前記受信するパケット受信ステップにおいて受信した前記送信パケットに通信エラーがあるか否かを判定する通信エラー判定ステップ、
をさらに含み、
前記データ選択結合ステップにおいて前記データ選択結合手段は、
前記通信エラー判定ステップにおいて判定した通信エラーの判定結果に基づいて、前記間引き抽出画像パケットを含む前記送信パケットから抽出した前記間引き抽出画像データで生成された前記結合画像データに、前記付帯画像パケットを含む前記送信パケットから抽出した前記付帯画像データを結合するか否かを決定する、
ことを特徴とする請求項１から請求項１３のいずれか１の項に記載の内視鏡システムの画像データ通信方法。
【請求項１５】
前記データ選択結合手段は、
前記通信エラー判定ステップにおいて通信エラーがあると判定した前記付帯画像パケットを含む前記送信パケットが、同じ送信周期内に１つでもある場合には、当該送信周期内に受信した前記間引き抽出画像パケットを含む前記送信パケットから抽出した前記間引き抽出画像データのみを結合した前記結合画像データを生成する、
ことを特徴とする請求項１４に記載の内視鏡システムの画像データ通信方法。
【請求項１６】
前記データ選択結合手段は、
前記通信エラー判定ステップにおいて通信エラーがないと判定した前記付帯画像パケットを含む前記送信パケットのみを、前記間引き抽出画像パケットを含む前記送信パケットから抽出した前記間引き抽出画像データで生成された前記結合画像データに結合した前記結合画像データを生成する、
ことを特徴とする請求項１４に記載の内視鏡システムの画像データ通信方法。
【請求項１７】
前記受信装置に備えた通信結果送信手段によって、前記通信エラー判定ステップにおいて通信エラーがあると判定した前記間引き抽出画像パケットを含む前記送信パケットの再送要求を送信する通信結果送信ステップと、
前記送信装置に備えた通信結果受信手段によって、前記通信結果送信ステップにおいて再送要求がされた前記間引き抽出画像パケットを含む前記送信パケットの再送を指示する通信結果受信ステップと、
をさらに含み、
前記パケット選択送信ステップは、
前記通信結果受信ステップによって指示された前記間引き抽出画像パケットを含む前記送信パケットを再送する、
ことを特徴とする請求項１４から請求項１６のいずれか１の項に記載の内視鏡システムの画像データ通信方法。
【請求項１８】
前記受信装置に備えた通信結果解析手段によって、前記通信エラー判定ステップにおいて通信エラーを判定した結果に基づいて、前記通信ネットワークにおける送信パケットの送信周期内に通信エラーが発生するタイミングを解析する通信結果解析ステップと、
前記受信装置に備えた通信結果送信手段によって、前記通信結果解析ステップにおいて解析した通信エラーが発生する前記タイミングの情報を送信する通信結果送信ステップと、
前記送信装置に備えた送信タイミング調整手段によって、前記通信結果送信ステップにおいて送信された通信エラーが発生する前記タイミングの情報に基づいて、前記間引き抽出画像パケットを含む前記送信パケットを送信するタイミングを調整する送信タイミング調整ステップと、
をさらに含み、
前記パケット選択送信ステップは、
前記送信タイミング調整ステップによって調整されたタイミングで、前記間引き抽出画像パケットを含む前記送信パケットを送信する、
ことを特徴とする請求項１４から請求項１６のいずれか１の項に記載の内視鏡システムの画像データ通信方法。
【請求項１９】
前記内視鏡装置を送信装置とし、前記外部画像処理装置を受信装置としたとき、
前記送信装置に備えた処置具制御情報取得手段によって、前記内視鏡装置に接続された処置具を駆動する際の制御信号の情報を取得する処置具制御情報取得ステップと、
前記送信装置に備えた送信タイミング調整手段によって、前記処置具制御情報取得ステップにおいて取得した前記制御信号の情報に基づいて、前記間引き抽出画像パケットを含む前記送信パケットを送信するタイミングを調整する送信タイミング調整ステップと、
をさらに含み、
前記パケット選択送信ステップは、
前記送信タイミング調整ステップによって調整されたタイミングで、前記間引き抽出画像パケットを含む前記送信パケットを送信する、
ことを特徴とする請求項１４から請求項１６のいずれか１の項に記載の内視鏡システムの画像データ通信方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ネットワーク環境に接続されたサーバなどで画像処理を行う内視鏡システムにおける画像データの通信方法に関する。
【背景技術】
【０００２】
従来から、ネットワークを介してデータを送受信する技術における通信エラーの対策として、データの受信側が通信エラーを検出した場合、受信側がデータの再送要求信号を送信側に出力し、送信側が同じデータを再度送信することが行われている。これにより、通信エラーが発生した場合でも、データの送受信を複数回行うことによって、データの送受信を確実に行うことができる。
【０００３】
近年では、例えば、特許文献１で開示された内視鏡装置のように、撮影した画像データをネットワークを介して通信する内視鏡システムも増加しており、この特許文献１で開示された内視鏡装置における画像データの通信でも、通信状態に応じたデータの送信が行われている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００３−８８４９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、内視鏡システムでは、被写体の様子を観察するために動画を撮影することもある。この動画の映像は、指定された周期（フレーム周期）で処理を行う必要がある複数のフレームの画像で構成されており、それぞれのフレームの画像は、対応する１フレーム分の画像データから生成される。この動画を構成する各フレームの画像データを通信するとき、ネットワークの通信回線の状態が悪く、上述した通信エラーの対策の処理によって、画像データの再送要求が多発してしまうと、観察に必要なそれぞれのフレームの画像データの送信が、フレーム周期内に完了しない可能性が高くなる。仮に、いずれかの画像データの送信が、対応するフレーム周期の終了タイミングに間に合わないと、すなわち、画像データの送信が完了しないと、動画を表示する際に、送信が完了していないフレームの画像データの表示が欠損（フレーム欠損）してしまい、内視鏡システムを使用した観察に支障をきたしてしまう、という問題がある。
【０００６】
ここで、従来のデータ通信方法において、通信エラーによってデータを再送する場合の動作について説明する。図１１は、従来のデータ通信方法における通信タイミングの一例を模式的に示した図である。図１１では、説明を容易にするため、複数の通信パケットで構成されている１フレーム分の画像データを、全てまとめて１つの画像データとして示している。
【０００７】
それぞれのフレームにおける全ての画像データは、データ送信ラインによって送信側から、それぞれのフレーム周期内で送信される。図１１には、１つ目のフレーム周期において、画像データＡが送信側から送信され、全ての画像データＡが問題なく受信側に受信された場合を示している。これにより、次のフレーム周期で、画像データＡを画像処理し、１つ目のフレームの画像として、画像データＡの画像を出力することができる。
【０００８】
また、図１１には、ネットワークの通信回線の影響により、２つ目のフレーム周期において、送信側から送信された画像データＢの一部に通信エラーが発生した場合を示している。一般的に、動画を構成するそれぞれのフレームの画像データの通信においては、通信エラーを判定した結果に基づいて、通信エラーが発生したフレームの全ての画像データの再送要求が行われる。図１１では、画像データＢの受信において通信エラーが発生したため、受信側が出力した画像データＢに対する再送要求信号を、再送要求ラインによって送信側に送信している。送信側は、受信側からの再送要求信号を受信すると、要求された同じ画像データＢ（図１１においては、画像データＢ２）を再度、データ送信ラインによって送信する。これにより、図１１に示したように、画像データＢ２を確実に送信することができる。
【０００９】
しかしながら、図１１を見てわかるように、画像データＢ２の受信は、２つ目のフレーム周期の終了タイミングに間に合わず、画像データＢを受信している期間が３つ目のフレーム周期に架かってしまっている。このため、３つ目のフレーム周期において、画像データＣの通信を行うことができず、次のフレーム周期で画像データＣの画像処理を行うことができない。これにより、３つ目のフレームの画像として画像データＣの画像を出力することができず、動画の表示において画像データＣの画像がフレーム欠損になり、内視鏡システムにおける観察に支障をきたしてしまう。
【００１０】
本発明は、上記の課題認識に基づいてなされたものであり、画像データをネットワークを介して通信する内視鏡システムにおいて、ネットワークの通信回線の状態の影響によってフレーム欠損が発生する割合を低減して、画像データを通信することができる画像データ通信方法を提供することを目的としている。
【課題を解決するための手段】
【００１１】
上記の課題を解決するため、本発明の内視鏡システムの画像データ通信方法は、撮影した被写体の画像データを原画像データとして出力するスコープと、入力された画像データの映像を表示する表示装置とが接続された内視鏡装置と、入力された原画像データに対して画像処理を行った後の処理画像データを出力する画像処理手段を具備した外部画像処理装置とが、通信ネットワークを介して接続され、前記内視鏡装置が、前記スコープから入力された前記原画像データを前記通信ネットワークを介して前記外部画像処理装置に送信し、前記外部画像処理装置が、受信した前記原画像データに対して画像処理を行った前記処理画像データを前記通信ネットワークを介して前記内視鏡装置に送信し、前記内視鏡装置が、受信した前記処理画像データを前記表示装置に出力する内視鏡システムにおいて、前記内視鏡装置または前記外部画像処理装置のいずれか一方を送信装置とし、前記内視鏡装置または前記外部画像処理装置のいずれか他方を受信装置としたときに、前記送信装置と前記受信装置との間でそれぞれの画像データを、前記通信ネットワークを介して通信する内視鏡システムの画像データ通信方法であって、前記送信装置に備えた送信画像間引き分割手段によって、送信する画像データを、該画像データによって画像を構成するために重要な間引き抽出画像データと、該間引き抽出画像データに基づいた画像を高画質化するために有効な付帯画像データとに分割する送信画像間引き分割ステップと、前記送信装置に備えた送信画像パケット変換手段によって、前記間引き抽出画像データと前記付帯画像データとのそれぞれを、前記受信装置に送信するための信号形式のパケットである間引き抽出画像パケットと付帯画像パケットとに変換する送信画像パケット変換ステップと、前記送信装置に備えたパケット選択送信手段によって、前記通信ネットワークの通信状況に応じて、前記間引き抽出画像パケットまたは前記付帯画像パケットを選択し、該選択した前記間引き抽出画像パケットまたは前記付帯画像パケットを含む送信パケットを送信するパケット選択送信ステップと、前記受信装置に備えたパケット受信手段によって、前記送信装置から送信されてきた前記送信パケットを受信するパケット受信ステップと、前記受信装置に備えたデータ選択結合手段によって、前記受信するパケット受信ステップにおいて正常に受信することができた前記送信パケットを選択し、該選択した前記送信パケットに含まれる前記間引き抽出画像データと前記付帯画像データと抽出し、該抽出した前記間引き抽出画像データと前記付帯画像データとを結合することによって、前記送信装置に備えた前記送信画像間引き分割手段によって分割される前の画像データと同様の結合画像データを生成するデータ選択結合ステップと、を含む、ことを特徴とする。
【００１２】
また、本発明の前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、送信する前記画像データに含まれる画素のデータを間引いて抽出し、該間引いて抽出した前記画素のデータを前記間引き抽出画像データとし、間引かずに残った前記画素のデータを前記付帯画像データとする、ことを特徴とする。
【００１３】
また、本発明の前記送信画像間引き分割手段は、前記画素のデータを均等な間隔に間引いて抽出する、ことを特徴とする。
【００１４】
また、本発明の前記送信画像間引き分割手段は、特定の色の前記画素のデータのみを間引いて抽出する、ことを特徴とする。
【００１５】
また、本発明の前記送信画像間引き分割手段は、送信する前記画像データに含まれるそれぞれの前記画素の色の割合を維持した状態で、  前記画素のデータを間引いて抽出する、ことを特徴とする。
【００１６】
また、本発明の前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、送信する前記画像データに含まれる画素のデータの大きさを表すデジタル信号における予め定めたビット数の上位ビットを間引いて抽出し、該間引いて抽出したビット数の前記画素のデータを前記間引き抽出画像データとし、間引かずに残ったビット数の前記画素のデータを前記付帯画像データとする、ことを特徴とする。
【００１７】
また、本発明の内視鏡システムの画像データ通信方法は、前記内視鏡装置を送信装置とし、前記外部画像処理装置を受信装置としたとき、前記送信装置に備えた原画形式変換手段によって、前記スコープから入力された前記原画像データの形式を異なる形式に変換する原画形式変換ステップ、をさらに含み、前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、前記原画形式変換ステップによって形式が変換された前記原画像データを、送信する前記画像データとして、前記間引き抽出画像データと前記付帯画像データとのそれぞれに分割する、ことを特徴とする。
【００１８】
また、本発明の前記原画形式変換ステップにおいて前記原画形式変換手段は、前記原画像データを周波数空間のデータに変換し、前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、送信する前記画像データに含まれる周波数空間のデータの内、予め定めた低周波成分のデータを間引いて抽出し、該間引いて抽出した前記低周波成分のデータを前記間引き抽出画像データとし、間引かずに残った高周波成分のデータを前記付帯画像データとする、ことを特徴とする。
【００１９】
また、本発明の前記原画形式変換ステップにおいて前記原画形式変換手段は、前記原画像データを輝度と色差との形式のデータに変換し、前記送信画像間引き分割ステップにおいて前記送信画像間引き分割手段は、送信する前記画像データに含まれる輝度の大きさを表すデジタル信号における予め定めたビット数の輝度データと、色差の大きさを表すデジタル信号における前記輝度データのビット数よりも少ない予め定めたビット数の色差データとを間引いて抽出し、該間引いて抽出したビット数の輝度データと色差データとを前記間引き抽出画像データとし、間引かずに残ったビット数の輝度データと色差データとを前記付帯画像データとする、ことを特徴とする。
【００２０】
また、本発明の前記パケット選択送信ステップにおいて前記パケット選択送信手段は、前記通信ネットワークにおける送信パケットの送信周期内に、前記間引き抽出画像パケットを含む前記送信パケットを複数回送信し、前記付帯画像パケットを含む前記送信パケットを１回送信する、ことを特徴とする。
【００２１】
また、本発明の前記パケット選択送信手段は、前記通信ネットワークにおける同一の通信回線を使用して、前記送信回数の前記送信パケットを送信する、ことを特徴とする。
【００２２】
また、本発明の前記パケット選択送信手段は、前記通信ネットワークにおける複数の通信回線を使用して、前記送信回数の前記間引き抽出画像パケットを含む前記送信パケットと、前記付帯画像パケットを含む前記送信パケットとを送信する、ことを特徴とする。
【００２３】
また、本発明の前記パケット選択送信手段は、前記送信回数の前記間引き抽出画像パケットを含む前記送信パケットを、前記通信ネットワークにおける複数の通信回線の全てを使用して並列に送信し、前記付帯画像パケットを含む前記送信パケットを、前記通信ネットワークにおける複数の通信回線のいずれか１つの通信回線を使用して送信する、ことを特徴とする。
【００２４】
また、本発明の内視鏡システムの画像データ通信方法は、前記受信装置に備えた通信エラー判定手段によって、前記受信するパケット受信ステップにおいて受信した前記送信パケットに通信エラーがあるか否かを判定する通信エラー判定ステップ、をさらに含み、前記データ選択結合ステップにおいて前記データ選択結合手段は、前記通信エラー判定ステップにおいて判定した通信エラーの判定結果に基づいて、前記間引き抽出画像パケットを含む前記送信パケットから抽出した前記間引き抽出画像データで生成された前記結合画像データに、前記付帯画像パケットを含む前記送信パケットから抽出した前記付帯画像データを結合するか否かを決定する、ことを特徴とする。
【００２５】
また、本発明の前記データ選択結合手段は、前記通信エラー判定ステップにおいて通信エラーがあると判定した前記付帯画像パケットを含む前記送信パケットが、同じ送信周期内に１つでもある場合には、当該送信周期内に受信した前記間引き抽出画像パケットを含む前記送信パケットから抽出した前記間引き抽出画像データのみを結合した前記結合画像データを生成する、ことを特徴とする。
【００２６】
また、本発明の前記データ選択結合手段は、前記通信エラー判定ステップにおいて通信エラーがないと判定した前記付帯画像パケットを含む前記送信パケットのみを、前記間引き抽出画像パケットを含む前記送信パケットから抽出した前記間引き抽出画像データで生成された前記結合画像データに結合した前記結合画像データを生成する、ことを特徴とする。
【００２７】
また、本発明の内視鏡システムの画像データ通信方法は、前記受信装置に備えた通信結果送信手段によって、前記通信エラー判定ステップにおいて通信エラーがあると判定した前記間引き抽出画像パケットを含む前記送信パケットの再送要求を送信する通信結果送信ステップと、前記送信装置に備えた通信結果受信手段によって、前記通信結果送信ステップにおいて再送要求がされた前記間引き抽出画像パケットを含む前記送信パケットの再送を指示する通信結果受信ステップと、をさらに含み、前記パケット選択送信ステップは、前記通信結果受信ステップによって指示された前記間引き抽出画像パケットを含む前記送信パケットを再送する、ことを特徴とする。
【００２８】
また、本発明の内視鏡システムの画像データ通信方法は、前記受信装置に備えた通信結果解析手段によって、前記通信エラー判定ステップにおいて通信エラーを判定した結果に基づいて、前記通信ネットワークにおける送信パケットの送信周期内に通信エラーが発生するタイミングを解析する通信結果解析ステップと、前記受信装置に備えた通信結果送信手段によって、前記通信結果解析ステップにおいて解析した通信エラーが発生する前記タイミングの情報を送信する通信結果送信ステップと、前記送信装置に備えた送信タイミング調整手段によって、前記通信結果送信ステップにおいて送信された通信エラーが発生する前記タイミングの情報に基づいて、前記間引き抽出画像パケットを含む前記送信パケットを送信するタイミングを調整する送信タイミング調整ステップと、をさらに含み、前記パケット選択送信ステップは、前記送信タイミング調整ステップによって調整されたタイミングで、前記間引き抽出画像パケットを含む前記送信パケットを送信する、ことを特徴とする。
【００２９】
また、本発明の内視鏡システムの画像データ通信方法は、前記内視鏡装置を送信装置とし、前記外部画像処理装置を受信装置としたとき、前記送信装置に備えた処置具制御情報取得手段によって、前記内視鏡装置に接続された処置具を駆動する際の制御信号の情報を取得する処置具制御情報取得ステップと、前記送信装置に備えた送信タイミング調整手段によって、前記処置具制御情報取得ステップにおいて取得した前記制御信号の情報に基づいて、前記間引き抽出画像パケットを含む前記送信パケットを送信するタイミングを調整する送信タイミング調整ステップと、をさらに含み、前記パケット選択送信ステップは、前記送信タイミング調整ステップによって調整されたタイミングで、前記間引き抽出画像パケットを含む前記送信パケットを送信する、ことを特徴とする。
【発明の効果】
【００３０】
本発明によれば、画像データをネットワークを介して通信する内視鏡システムにおいて、ネットワークの通信回線の状態の影響によってフレーム欠損が発生する割合を低減して、画像データを通信することができる画像データ通信方法を提供することができるという効果が得られる。
【図面の簡単な説明】
【００３１】
【図１】本発明の第１の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。
【図２】本第１の実施形態の内視鏡システムにおける通信タイミングの一例を模式的に示した図である。
【図３】本発明の第２の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。
【図４】本発明の第３の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。
【図５】本第３の実施形態の内視鏡システムにおける通信タイミングの一例を模式的に示した図である。
【図６】本第３の実施形態の内視鏡システムにおける通信タイミングの別の一例を模式的に示した図である。
【図７】本第３の実施形態の内視鏡システムにおける通信タイミングのさらに別の一例を模式的に示した図である。
【図８】本発明の第４の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。
【図９】本発明の第５の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。
【図１０】本発明の第６の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。
【図１１】従来のデータ通信方法における通信タイミングの一例を模式的に示した図である。
【発明を実施するための形態】
【００３２】
＜第１の実施形態＞
以下、本発明の実施形態について、図面を参照して説明する。図１は、本第１の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。図１に示した内視鏡システム１００は、スコープ１と、内視鏡装置２と、外部画像処理装置３と、表示装置４とから構成されるシステムである。
【００３３】
スコープ１は、被写体の光学像を光電変換して出力する固体撮像素子を備え、動画のフレーム周期毎に撮影した被写体の画像データ（以下、「原画像データ」という）を、フレーム毎に順次、内視鏡装置２に出力する。
【００３４】
内視鏡装置２は、スコープ１から入力された原画像データを、外部画像処理装置３で処理することができる信号形式（フォーマット）に変換し、ネットワークを介して外部画像処理装置３に送信する。なお、内視鏡装置２による原画像データのフォーマット変換は、スコープ１から入力されたフレーム毎に行い、フォーマット変換した後の原画像データを、フレーム毎に順次、外部画像処理装置３に送信する。
【００３５】
外部画像処理装置３は、ネットワークを介して内視鏡装置２から送信されてきたフォーマット変換した後の原画像データに対して、表示装置４に表示するための画像処理を行い、画像処理した後の画像データ（以下「処理画像データ」という）を、ネットワークを介して内視鏡装置２に送信する。なお、外部画像処理装置３による画像処理は、内視鏡装置２から入力されたフレーム毎に行い、処理画像データを、フレーム毎に順次、内視鏡装置２に送信する。
【００３６】
また、内視鏡装置２は、ネットワークを介して外部画像処理装置３から送信されてきたそれぞれのフレームの処理画像データを、動画の映像（画像）を構成するそれぞれのフレームの画像データ（以下、「表示画像データ」という）として、動画のフレーム周期毎に順次、表示装置４に出力する。
【００３７】
表示装置４は、例えば、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）などのモニタを備え、内視鏡装置２から入力されたそれぞれのフレームの表示画像データを、動画の映像として表示する。
【００３８】
内視鏡システム１００において内視鏡装置２は、スコープ１が撮影した原画像データを外部画像処理装置３に送信するときに送信装置として動作し、表示装置４に出力する処理画像データを外部画像処理装置３から受信するときに受信装置として動作する。また、内視鏡システム１００において外部画像処理装置３は、スコープ１が撮影した原画像データを内視鏡装置２から受信するときに受信装置として動作し、表示装置４に出力する処理画像データを内視鏡装置２に送信するときに送信装置として動作する。
【００３９】
内視鏡装置２は、送信画像間引き分割手段２ｃと、送信画像パケット変換手段２ｄと、パケット選択送信手段２ｒと、通信結果受信手段２ｕと、パケット受信手段２ｓと、データ選択結合手段２ｇと、通信エラー判定手段２ｅと、通信結果送信手段２ｈとを備えている。内視鏡装置２は、送信画像間引き分割手段２ｃと、送信画像パケット変換手段２ｄと、パケット選択送信手段２ｒと、通信結果受信手段２ｕとの構成によって、送信装置として動作する。また、内視鏡装置２は、パケット受信手段２ｓと、データ選択結合手段２ｇと、通信エラー判定手段２ｅと、通信結果送信手段２ｈとの構成によって、受信装置として動作する。
【００４０】
外部画像処理装置３は、パケット受信手段３ｆと、データ選択結合手段３ｂと、通信エラー判定手段３ａと、通信結果送信手段３ｇと、画像処理手段３ｃと、送信画像間引き分割手段３ｄと、送信画像パケット変換手段３ｅと、パケット選択送信手段３ｈと、通信結果受信手段３ｕとを備えている。外部画像処理装置３は、パケット受信手段３ｆと、データ選択結合手段３ｂと、通信エラー判定手段３ａと、通信結果送信手段３ｇとの構成によって、受信装置として動作する。また、外部画像処理装置３は、送信画像間引き分割手段３ｄと、送信画像パケット変換手段３ｅと、パケット選択送信手段３ｈと、通信結果受信手段３ｕとの構成によって、送信装置として動作する。
【００４１】
以下、内視鏡システム１００における動作に従って、内視鏡装置２および外部画像処理装置３のそれぞれの構成要素について説明する。
【００４２】
送信画像間引き分割手段２ｃは、スコープ１から入力された、例えば、ＲＡＷデータなどの画像処理を施していない原画像データから、動画のフレームを構成するために最低限必要な原画像データを間引いて抽出する。そして、送信画像間引き分割手段２ｃは、スコープ１から入力された原画像データを、間引いて抽出した原画像データ（以下、「間引き抽出画像データ」という）と、間引かずに残ったその他の原画像データ（以下、「付帯画像データ」という）とに分割する。なお、間引き抽出画像データは、動画の映像を構成するために重要な画像データであり、付帯画像データは、間引き抽出画像データに基づいた動画の映像を、高画質化するために有効な画像データである。その後、送信画像間引き分割手段２ｃは、分割した間引き抽出画像データと付帯画像データとのそれぞれを、送信画像パケット変換手段２ｄに出力する。なお、送信画像間引き分割手段２ｃが原画像データから間引き抽出画像データを間引いて抽出する方法（間引き抽出方法）に関する詳細な説明は、後述する。
【００４３】
送信画像パケット変換手段２ｄは、送信画像間引き分割手段２ｃから入力された間引き抽出画像データと付帯画像データとを、外部画像処理装置３に送信するためのそれぞれのパケットに変換（パケット化）する。そして、送信画像パケット変換手段２ｄは、パケット化した間引き抽出画像データ（以下、「間引き抽出画像パケット」という）と付帯画像データ（以下、「付帯画像パケット」という）とのそれぞれを、パケット選択送信手段２ｒに出力する。
【００４４】
パケット選択送信手段２ｒは、送信画像パケット変換手段２ｄから入力された間引き抽出画像パケットと付帯画像パケットとのそれぞれのパケットを、ネットワークを介して外部画像処理装置３に送信する。なお、パケット選択送信手段２ｒがそれぞれのパケットを外部画像処理装置３に送信する際には、通信結果受信手段２ｕから入力される通信結果に応じて、送信する間引き抽出画像パケットと付帯画像パケットとを組み合わせた送信パケットを構成し、パケット選択送信手段２ｒが構成した送信パケットを、外部画像処理装置３のパケット受信手段３ｆに送信する。
【００４５】
パケット受信手段３ｆは、ネットワークを介して内視鏡装置２のパケット選択送信手段２ｒから送信されてきた送信パケットを受信し、受信した送信パケットを、通信エラー判定手段３ａおよびデータ選択結合手段３ｂに出力する。
【００４６】
通信エラー判定手段３ａは、パケット受信手段３ｆから入力された送信パケットに基づいて、ネットワークの通信回線の状態を表す通信状況を判定する。より具体的には、パケット受信手段３ｆから入力された送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットに対する通信エラーを判定する。そして、通信エラー判定手段３ａは、通信エラーの判定結果を、通信結果送信手段３ｇに出力する。なお、通信エラー判定手段３ａは、間引き抽出画像パケットに対する通信エラーの判定結果のみを、通信結果送信手段３ｇに出力する構成であってもよい。
【００４７】
通信結果送信手段３ｇは、通信エラー判定手段３ａから入力された通信エラーの判定結果を通信結果として、ネットワークを介して内視鏡装置２の通信結果受信手段２ｕに送信する。
【００４８】
通信結果受信手段２ｕは、外部画像処理装置３の通信結果送信手段３ｇから送信されてきた通信結果を、パケット選択送信手段２ｒに出力する。これにより、パケット選択送信手段２ｒは、通信結果受信手段２ｕから入力された通信結果から、送信した送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットに通信エラーが発生したか否かを確認することができる。そして、パケット選択送信手段２ｒは、間引き抽出画像パケットに通信エラーが発生したことを確認した場合には、通信エラーが発生した送信パケット内に構成した間引き抽出画像パケットを再度、次に送信する送信パケット内に構成し、ネットワークを介して外部画像処理装置３のパケット受信手段３ｆに送信する。これにより、内視鏡装置２は、動画のフレームを構成するために最低限必要な間引き抽出画像データのパケット（間引き抽出画像パケット）を、確実に外部画像処理装置３に送信することができる。
【００４９】
なお、通信結果送信手段３ｇは、通信エラー判定手段３ａから入力された通信エラーの判定結果に応じて生成した再送要求信号を、ネットワークを介して内視鏡装置２の通信結果受信手段２ｕに送信する構成であってもよい。この場合、通信結果受信手段２ｕは、外部画像処理装置３の通信結果送信手段３ｇから送信されてきた再送要求信号を、パケット選択送信手段２ｒに出力する。そして、パケット選択送信手段２ｒは、通信結果受信手段２ｕから入力された再送要求信号に応じて、要求された間引き抽出画像パケットを再度、ネットワークを介して外部画像処理装置３のパケット受信手段３ｆに送信する。
【００５０】
データ選択結合手段３ｂは、パケット受信手段３ｆから入力された送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットを、元の間引き抽出画像データや付帯画像データに変換し、変換した間引き抽出画像データと付帯画像データと結合した、画像データ（以下、「結合画像データ」という）を生成する。そして、生成した結合画像データを、画像処理手段３ｃに出力する。
【００５１】
なお、データ選択結合手段３ｂが生成する結合画像データは、パケット受信手段３ｆが受信した送信パケットに応じて、異なる結合画像データが生成される。より具体的には、パケット受信手段３ｆが、内視鏡装置２から送信されてきた送信パケットを全て正常に受信することができた場合、データ選択結合手段３ｂは、スコープ１が撮影した被写体の原画像データ（例えば、ＲＡＷデータ）と同様の結合画像データを生成することができる。つまり、送信パケットに含まれる間引き抽出画像パケットから変換した間引き抽出画像データと、付帯画像パケットから変換した付帯画像データとを結合することによって、スコープ１が出力した原画像データを復元した結合画像データを生成することができる。
【００５２】
しかし、パケット受信手段３ｆが、内視鏡装置２から送信されてきた送信パケットを全て正常に受信することができなかった場合には、データ選択結合手段３ｂは、スコープ１が出力した原画像データを復元した結合画像データを生成することができない。ただし、内視鏡システム１００においては、上述したように、間引き抽出画像パケットは確実に受信することができている。そこで、データ選択結合手段３ｂは、間引き抽出画像パケットから変換した間引き抽出画像データを、結合画像データとして生成する。これにより、データ選択結合手段３ｂは、動画のフレームを構成するために最低限必要な間引き抽出画像データを復元した結合画像データを生成することができ、内視鏡システム１００を使用した観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【００５３】
画像処理手段３ｃは、データ選択結合手段３ｂが生成した結合画像データに対して画像処理を行い、画像処理した後の処理画像データを、送信画像間引き分割手段３ｄに出力する。
【００５４】
その後、外部画像処理装置３は、処理画像データを、ネットワークを介して内視鏡装置２に送信する。そして、内視鏡装置２は、ネットワークを介して外部画像処理装置３から送信されてきた処理画像データから結合画像データを生成し、生成した結合画像データを、動画の映像を構成するそれぞれのフレームの表示画像データとして、表示装置４に出力する。これにより、表示装置４は、内視鏡装置２から入力されたそれぞれのフレームの表示画像データを、動画の映像として表示する。
【００５５】
なお、外部画像処理装置３による処理画像データの送信方法と、内視鏡装置２による処理画像データの受信方法および結合画像データの生成方法は、上述した内視鏡装置２による原画像データの送信方法と、外部画像処理装置３による原画像データの受信方法および結合画像データの生成方法と同様である。より具体的には、原画像データを処理画像データに置き換え、送信装置として動作していた内視鏡装置２と受信装置として動作していた外部画像処理装置３との動作を入れ替える、すなわち、外部画像処理装置３を送信装置とし、内視鏡装置２を受信装置とすることによって、同様に考えることができる。
【００５６】
さらに詳細には、外部画像処理装置３において、送信画像間引き分割手段３ｄを送信画像間引き分割手段２ｃに、送信画像パケット変換手段３ｅを送信画像パケット変換手段２ｄに、パケット選択送信手段３ｈをパケット選択送信手段２ｒに、通信結果受信手段３ｕを通信結果受信手段２ｕにそれぞれ置き換えて考えることによって、処理画像データを内視鏡装置２に送信する送信装置の動作を理解することができる。また、内視鏡装置２において、パケット受信手段２ｓをパケット受信手段３ｆに、通信エラー判定手段２ｅを通信エラー判定手段３ａに、通信結果送信手段２ｈを通信結果送信手段３ｇに、データ選択結合手段２ｇをデータ選択結合手段３ｂにそれぞれ置き換えて考えることによって、外部画像処理装置３から送信されてきた処理画像データを受信し、動画のフレームを構成するために最低限必要な間引き抽出画像データを復元した結合画像データを生成する受信装置の動作を理解することができる。従って、送信装置として動作する外部画像処理装置３および受信装置として動作する内視鏡装置２に関する詳細な説明は、省略する。
【００５７】
このように、内視鏡システム１００では、上述したように、送信装置として動作する内視鏡装置２または外部画像処理装置３が、送信する画像データ（原画像データまたは処理画像データ）を、動画のフレームを構成するために最低限必要な間引き抽出画像データと、その他の付帯画像データとに分割した後に送信する。そして、受信装置として動作する外部画像処理装置３または内視鏡装置２は、送信されてきた間引き抽出画像データに関する通信結果を送信装置に送信することにより、少なくとも間引き抽出画像データを確実に受信するようにしている。これにより、内視鏡システム１００では、観察に支障をきたすようなフレーム欠損が発生する割合を低減することができるようにしている。
【００５８】
次に、内視鏡システム１００における内視鏡装置２と外部画像処理装置３との間で行われる画像データの通信タイミングについて説明する。図２は、本第１の実施形態の内視鏡システム１００における通信タイミングの一例を模式的に示した図である。図２では、説明を容易にするため、複数の通信パケットで構成されている１フレーム分の画像データを、全てまとめて１つの画像データとして示している。
【００５９】
以下の説明においては、送信装置として動作している内視鏡装置２および外部画像処理装置３を、それぞれ送信装置２および送信装置３ともいう。また、受信装置として動作している内視鏡装置２および外部画像処理装置３を、それぞれ受信装置２および受信装置３ともいう。そして、以下の説明においては、送信装置２（内視鏡装置２）から受信装置３（外部画像処理装置３）に原画像データを送信する場合について説明する。なお、実際の通信動作は、送信装置２および受信装置３に備えたそれぞれの構成要素が行うが、以下の説明においては、説明を容易にするため、送信装置２および受信装置３がそれぞれの通信動作を行うものとして説明する。
【００６０】
内視鏡システム１００においては、上述したように、送信装置２が、それぞれのフレームの全ての原画像データを間引き抽出画像データと付帯画像データとに分割し、分割した間引き抽出画像データのパケットと付帯画像データのパケットとを、対応するフレーム周期内で、データ送信ラインによって受信装置３に送信する。図２に示した通信タイミングでは、送信装置２が、図２（ａ）に示したように、Ｎ（Ｎ＝１〜３）フレームの原画像データを、間引き抽出画像データＤＮと、付帯画像データＤＮａおよびＤＮｂとに分割し、分割したそれぞれの原画像データのパケットを、対応するフレーム周期内のそれぞれのパケット送信周期で順次、受信装置３に送信する。
【００６１】
以下、内視鏡システム１００における通信タイミングを、順に説明する。まず、図２（ｂ）に示したように、送信装置２は、１つ目のフレーム周期で、フレーム１の原画像データを送信する。１つ目のフレーム周期内では、最初に、送信装置２が、１回目のパケット送信周期で、間引き抽出画像データＤ１のパケットを送信する。そして、受信装置３は、受信した間引き抽出画像データＤ１のパケットに対する通信エラーを判定し、通信エラーの判定結果に基づいた再送要求信号を、送信装置２に送信する。
【００６２】
送信装置２は、受信装置３から送信されてきた通信結果（再送要求信号）に基づいて、１回目のパケット送信周期における通信エラーを確認し、次に送信する送信パケットの構成を決定する。図２（ｂ）に示した通信タイミングでは、間引き抽出画像データＤ１のパケットが正常に送信されたため、再送要求信号が送信されてこない状態を示している。送信装置２は、受信装置３から再送要求信号が送信されてこないため、その後の２回目のパケット送信周期で、付帯画像データＤ１ａのパケットを送信し、続いて、３回目のパケット送信周期で、付帯画像データＤ１ｂのパケットを送信する。このように、送信装置２は、間引き抽出画像データＤ１のパケットが正常に送信された場合には、間引き抽出画像データＤ１のパケットに続いて、付帯画像データＤ１ａおよびＤ１ｂのパケットを、受信装置３に順次送信する。
【００６３】
続いて、図２（ｂ）に示したように、送信装置２は、２つ目のフレーム周期で、フレーム２の原画像データを送信する。２つ目のフレーム周期内でも１つ目のフレーム周期と同様に、最初に、送信装置２が、１回目のパケット送信周期で、間引き抽出画像データＤ２のパケットを送信する。そして、受信装置３は、受信した間引き抽出画像データＤ２のパケットに対する通信エラーを判定し、通信エラーの判定結果に基づいた再送要求信号を、送信装置２に送信する。
【００６４】
送信装置２は、１つ目のフレーム周期と同様に、受信装置３から送信されてきた通信結果（再送要求信号）に基づいて、１回目のパケット送信周期における通信エラーを確認し、次に送信する送信パケットの構成を決定する。図２（ｂ）に示した通信タイミングでは、間引き抽出画像データＤ２のパケットが正常に送信されなかったため、再送要求信号が送信されてきた状態を示している。送信装置２は、受信装置３から再送要求信号が送信されてきたため、その後の２回目のパケット送信周期で、再度、間引き抽出画像データＤ２のパケットを送信する。そして、送信装置２は、受信装置３から送信されてきた、再送した間引き抽出画像データＤ２のパケットに対する通信結果（再送要求信号）に基づいて、２回目のパケット送信周期における通信エラーを確認し、次に送信する送信パケットの構成を決定する。図２（ｂ）に示した通信タイミングでは、間引き抽出画像データＤ２のパケットが正常に送信されなかったため、再度、再送要求信号が送信されてきた状態を示している。送信装置２は、受信装置３から再送要求信号が送信されてきたため、その後の３回目のパケット送信周期で、再度、間引き抽出画像データＤ２のパケットを送信する。このように、送信装置２は、間引き抽出画像データＤ２のパケットが正常に送信されるまで、間引き抽出画像データＤ２のパケットの受信装置３への送信を繰り返す。
【００６５】
そして、送信装置２は、間引き抽出画像データＤ２のパケットが正常に送信された後、１つ目のフレーム周期と同様に、付帯画像データＤ２ａおよびＤ２ｂのパケットの送信を行う。なお、図２（ｂ）に示した通信タイミングでは、送信装置２が、４回目のパケット送信周期で、付帯画像データＤ２ａのパケットを送信しているが、付帯画像データＤ２ｂのパケットを送信するときには、２つ目のフレーム周期が終了している。この場合、図２（ｂ）に示したように、送信装置２は、付帯画像データＤ２ｂのパケットの送信を行わずに、３つ目のフレーム周期で、フレーム３の原画像データの受信装置３への送信を開始する。
【００６６】
このように、内視鏡システム１００において送信装置２または送信装置３は、間引き抽出画像データのパケット（間引き抽出画像パケット）を優先して、受信装置３または受信装置２に送信する。そして、送信装置２または送信装置３は、フレーム周期の残った期間で、付帯画像データのパケット（付帯画像パケット）を、受信装置３または受信装置２に送信する。これにより、内視鏡システム１００では、少なくとも、動画のフレームを構成するために最低限必要な間引き抽出画像データを確実に送信することができ、内視鏡システム１００を使用した観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【００６７】
次に、内視鏡システム１００の送信装置２および送信装置３における画像データからの間引き抽出画像データの間引き抽出方法について説明する。内視鏡システム１００においては、上述したように、送信装置２（内視鏡装置２）に備えた送信画像間引き分割手段２ｃ、および送信装置３（外部画像処理装置３）に備えた送信画像間引き分割手段３ｄがそれぞれ、動画のフレームを構成するために最低限必要な間引き抽出画像データを、画像データ（原画像データまたは処理画像データ）から間引いて抽出する。
【００６８】
送信画像間引き分割手段２ｃおよび送信画像間引き分割手段３ｄにおける画像データからの間引き抽出画像データの間引き抽出方法には、以下のような様々な方法がある。なお、以下の説明においては、送信装置２（内視鏡装置２）に備えた送信画像間引き分割手段２ｃが、原画像データから間引き抽出画像データを間引いて抽出する方法について説明する。
【００６９】
＜第１の間引き抽出方法＞
第１の間引き抽出方法は、スコープ１に備えた固体撮像素子に配置された画素の位置に基づいて、予め定めた位置に配置されている画素のデータ（例えば、ＲＡＷデータ）を、間引いて抽出する方法である。これにより、間引き抽出画像データに含まれる画素のデータ数（画素数）を抽出した数にすることができ、間引き抽出画像データのデータ量を原画像データのデータ量よりも少なくして、送信する際に通信エラーとなる可能性を低減することができる。
【００７０】
＜第２の間引き抽出方法＞
第２の間引き抽出方法は、スコープ１に備えた固体撮像素子に配置された画素の位置に基づいて、画素のデータを、均等な間隔に間引いて抽出する方法である。これにより、第１の間引き抽出方法と同様に、間引き抽出画像データのデータ量を原画像データのデータ量よりも少なくすることができる。
【００７１】
＜第３の間引き抽出方法＞
第３の間引き抽出方法は、スコープ１に備えた固体撮像素子に配置されたそれぞれの画素に貼り付けられた色フィルタの色に基づいて、特定の色の画素のデータのみを間引いて抽出する方法である。これにより、間引き抽出画像データに含まれる画素の色の数を、特定の色のみの数にすることができる。
【００７２】
＜第４の間引き抽出方法＞
第４の間引き抽出方法は、スコープ１に備えた固体撮像素子に配置されたそれぞれの画素に貼り付けられた色フィルタの色と、画素の位置とに基づいて、それぞれの画素の色の割合を維持した状態で、予め定めた位置に配置されている画素のデータを、間引いて抽出する方法である。これにより、間引き抽出画像データに含まれるそれぞれの画素の色の割合を維持しつつ、画素のデータ数（画素数）を少なくすることができる。
【００７３】
＜第５の間引き抽出方法＞
第５の間引き抽出方法は、原画像データに含まれるそれぞれの画素のデータ（例えば、ＲＡＷデータ）のビット数を、最低限観察に必要な解像度の映像として表示することができるビット数に間引いて抽出する方法である。より具体的には、原画像データに含まれるそれぞれの画素のデータにおける予め定めたビット数の上位ビットを間引いて抽出する。これにより、間引き抽出画像データに含まれる画素のデータのビット数を抽出したビット数にすることができ、間引き抽出画像データのデータ量を原画像データのデータ量よりも少なくして、送信する際に通信エラーとなる可能性を低減することができる。なお、第５の間引き抽出方法では、例えば、原画像データに含まれるそれぞれの画素のデータの下位ビットが、付帯画像データとなる。
【００７４】
例えば、原画像データが１６ｂｉｔ階調のデータであるとすると、原画像データの階調を８ｂｉｔに低減することによって階調の再現性は低下してしまうが、観察に支障をきたすほどの劣化ではない。このことから、第５の間引き抽出方法では、上位８ｂｉｔを間引き抽出画像データとし、下位８ｂｉｔを付帯画像データとする。また、例えば、１６ｂｉｔ階調の原画像データを図２に示した通信タイミングで送信する場合には、間引き抽出画像データＤＮ、付帯画像データＤＮａ、付帯画像データＤＮｂのそれぞれを、上位ｂｉｔから８ｂｉｔ、４ｂｉｔ、４ｂｉｔに分割する。このようにすれば、仮に間引き抽出画像データＤ１しか送信できなかった場合でも、上位８ｂｉｔの階調を確保することができ、送信する際の通信エラーによって観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【００７５】
なお、第５の間引き抽出方法においては、単純に原画像データの上位ビットを間引き抽出画像データとし、下位ビットを付帯画像データとして分割してもよいが、付帯画像データが受信装置３（外部画像処理装置３）に送信できなかった場合を考慮して、間引き抽出画像データに、付帯画像データの値を反映するための判定ビットを付加することもできる。より具体的には、付帯画像データに対して丸め処理を行った結果を、判定ビットとして間引き抽出画像データに付加する。そして、データ選択結合手段３ｂは、付帯画像データが正常に送信された場合には、判定ビットを無視して、間引き抽出画像データと付帯画像データを結合することによって、原画像データを復元した結合画像データを生成する。また、データ選択結合手段３ｂは、付帯画像データが正常に送信されなかった場合には、間引き抽出画像データに付加されている判定ビットに基づいて、間引き抽出画像データの下位ビットに、付帯画像データに対して行った丸め処理の結果を反映させた結合画像データを生成する。これにより、原画像データにおける単純な上位ビットのみの間引き抽出画像データよりも、付帯画像データの値を反映した違和感の少ない結合画像データを生成することができる。
【００７６】
例えば、１６ｂｉｔ階調の原画像データの上位８ｂｉｔを間引き抽出画像データとし、下位８ｂｉｔを付帯画像データとした場合、下位８ｂｉｔの付帯画像データの全体を丸め処理した場合に上位８ｂｉｔに桁上がりが発生するか否かを表す１ｂｉｔの判定ビットを、上位８ｂｉｔの間引き抽出画像データに付加して、間引き抽出画像データを９ｂｉｔのデータとする。そして、仮に間引き抽出画像データしか送信できなかった場合には、判定ビットに基づいて上位８ｂｉｔの間引き抽出画像データに桁上がりを反映させることにより、単純な上位８ｂｉｔの間引き抽出画像データよりも、下位８ｂｉｔの付帯画像データの全体の値を反映した状態で以降の処理を行うことができる。
【００７７】
上記に述べたように、本第１の実施形態の内視鏡システム１００では、動画のフレームを構成するために最低限必要な量にまでデータ量を少なくして抽出した画像データを、フレーム周期内に優先的に送信する。そして、抽出せずに残った画像データを、フレーム周期の残った期間で送信する。これにより、少なくとも、動画のフレームを構成するために最低限必要な画像データを確実に送信することができ、内視鏡システム１００を使用した観察に支障をきたすフレーム欠損が発生する割合を低減することができる。
【００７８】
＜第２の実施形態＞
次に、第２の実施形態の内視鏡システムについて説明する。図３は、本第２の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。図３に示した内視鏡システム２００は、スコープ１と、内視鏡装置２１と、外部画像処理装置３と、表示装置４とから構成されるシステムである。本第２の実施形態の内視鏡システム２００において、スコープ１と、外部画像処理装置３と、表示装置４とは、第１の実施形態の内視鏡システム１００の構成要素と同様の構成要素である。また、第１の実施形態の内視鏡システム１００の構成要素と異なる本第２の実施形態の内視鏡システム２００の内視鏡装置２１においても、第１の実施形態の内視鏡システム１００と同様の構成を含んでいる。従って、第１の実施形態の内視鏡システム１００と同様の構成要素および構成には、同一の符号を付与し、詳細な説明は省略する。
【００７９】
内視鏡装置２１は、第１の実施形態の内視鏡システム１００に備えた内視鏡装置２と同様に、スコープ１から入力された原画像データを、外部画像処理装置３で処理することができる信号形式（フォーマット）に変換し、ネットワークを介して外部画像処理装置３に送信する。なお、内視鏡装置２１と第１の実施形態の内視鏡システム１００に備えた内視鏡装置２との異なる点は、内視鏡装置２１では、スコープ１から入力された原画像データの形式を変換してから、外部画像処理装置３に送信することである。これにより、内視鏡装置２１では、原画形式変換手段２ａが、第１の実施形態の内視鏡システム１００に備えた内視鏡装置２の構成要素に追加されている。以下の説明においては、第１の実施形態の内視鏡システム１００に備えた内視鏡装置２と異なる構成要素および動作について説明する。
【００８０】
原画形式変換手段２ａは、スコープ１から入力された原画像データ（ＲＡＷデータ）の形式（種類）を変換し、変換した原画像データを送信画像間引き分割手段２ｃに出力する。
【００８１】
送信画像間引き分割手段２ｃは、原画形式変換手段２ａによって変換された原画像データを、間引き抽出画像データと付帯画像データとに分割する。以降の処理は、第１の実施形態の内視鏡システム１００に備えた内視鏡装置２と同様である。
【００８２】
なお、送信画像間引き分割手段２ｃによる原画像データからの間引き抽出画像データの間引き抽出方法は、原画像データの形式（種類）が変換されているため、第１の実施形態の内視鏡システム１００に備えた内視鏡装置２の送信画像間引き分割手段２ｃと異なる方法となる。ここで、原画形式変換手段２ａによって変換された原画像データから間引き抽出画像データを間引いて抽出する方法について説明する。
【００８３】
＜第６の間引き抽出方法＞
第６の間引き抽出方法は、原画形式変換手段２ａが、スコープ１から入力された原画像データを、例えば、低周波成分や高周波成分などの周波数空間のデータに変換した場合に対応する方法である。送信画像間引き分割手段２ｃは、原画形式変換手段２ａから入力された変換後の原画像データから、内視鏡システム２００を使用した観察に影響を及ぼさない範囲で高周波成分を除去した原画像データ、すなわち、低周波成分の原画像データを間引いて抽出する。より具体的には、例えば、予め定めた周波数特性をもつローパスフィルタ処理を行って高周波成分を除去した低周波成分の原画像データを、間引き抽出画像データとする。なお、高周波成分の原画像データは、付帯画像データとする。これにより、間引き抽出画像データのデータ量をスコープ１から入力された全ての原画像データのデータ量よりも少なくすることができ、１つのフレーム周期あたりに送信する間引き抽出画像データの回数を増やすことができる。そして、仮に間引き抽出画像データしか送信できなかった場合には、低周波成分の原画像データのみとなるため、エッジ成分の再現性が低下することによって、表示する動画の映像における鮮鋭度は劣化してしまうが、送信する際の通信エラーによって観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。なお、第６の間引き抽出方法では、除去した高周波成分の原画像データが、付帯画像データである。
【００８４】
＜第７の間引き抽出方法＞
第７の間引き抽出方法は、原画形式変換手段２ａが、スコープ１から入力された原画像データを、例えば、ＹＣ処理によって、Ｙ（輝度）データとＣｂ（色差：青）データおよびＣｒ（色差：赤）データとに変換した場合に対応する方法である。送信画像間引き分割手段２ｃは、原画形式変換手段２ａから入力された変換後の原画像データ（ＹＣｂＣｒデータ）のビット数を、輝度データと色差データとで異なるビット数に間引いて抽出する。より具体的には、色差データのビット数を輝度データのビット数よりも多く間引く。例えば、原画像データに含まれるＹデータ、Ｃｂデータ、およびＣｒデータのビット数がそれぞれ１６ｂｉｔである場合、Ｙデータを１６ｂｉｔのままとし、ＣｂデータおよびＣｒデータを８ｂｉｔとした間引き抽出画像データにする。これは、一般的に人間の目が、輝度に対する分解能の方が、色差に対する分解能よりも高いという特性を利用したものである。これにより、間引き抽出画像データに含まれる輝度データと色差データとを合わせたビット数を少なくする。そして、仮に通信エラーが発生した場合には、間引き抽出画像データに含まれる輝度データを優先して送信することによって、観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【００８５】
上記に述べたように、本第２の実施形態の内視鏡システム２００でも、第１の実施形態の内視鏡システム１００に備えた内視鏡装置２と同様に、動画のフレームを構成するために最低限必要な量にまでデータ量を少なくする。これにより、少なくとも、動画のフレームを構成するために最低限必要な画像データを確実に送信することができ、内視鏡システム２００を使用した観察に支障をきたすフレーム欠損が発生する割合を低減することができる。
【００８６】
なお、本第２の実施形態の内視鏡システム２００における画像データの通信タイミングは、図２に示した第１の実施形態の内視鏡システム１００における画像データの通信タイミングと同様であるため、詳細な説明は省略する。
【００８７】
＜第３の実施形態＞
次に、第３の実施形態の内視鏡システムについて説明する。図４は、本第３の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。図４に示した内視鏡システム３００は、スコープ１と、内視鏡装置２２と、外部画像処理装置３２と、表示装置４とから構成されるシステムである。本第３の実施形態の内視鏡システム３００において、スコープ１と表示装置４とは、第１の実施形態の内視鏡システム１００および第２の実施形態の内視鏡システム２００の構成要素と同様の構成要素である。また、第１の実施形態の内視鏡システム１００および第２の実施形態の内視鏡システム２００の構成要素と異なる本第３の実施形態の内視鏡システム３００の内視鏡装置２２および外部画像処理装置３２においても、第１の実施形態の内視鏡システム１００または第２の実施形態の内視鏡システム２００と同様の構成を含んでいる。従って、第１の実施形態の内視鏡システム１００または第２の実施形態の内視鏡システム２００と同様の構成要素および構成には、同一の符号を付与し、詳細な説明は省略する。
【００８８】
内視鏡装置２２は、第２の実施形態の内視鏡システム２００に備えた内視鏡装置２１と同様に、スコープ１から入力された原画像データの形式を変換してから、外部画像処理装置３２で処理することができる信号形式（フォーマット）に変換し、ネットワークを介して外部画像処理装置３２に送信する。
【００８９】
外部画像処理装置３２は、第１の実施形態の内視鏡システム１００および第２の実施形態の内視鏡システム２００に備えた外部画像処理装置３と同様に、内視鏡装置２２から送信されてきたフォーマット変換した後の原画像データに対して、表示装置４に表示するための画像処理を行った処理画像データを、ネットワークを介して内視鏡装置２２に送信する。
【００９０】
なお、本第３の実施形態の内視鏡システム３００でも、第１の実施形態の内視鏡システム１００および第２の実施形態の内視鏡システム２００と同様に、内視鏡装置２２は、原画像データを外部画像処理装置３２に送信するときに送信装置として動作し、処理画像データを外部画像処理装置３２から受信するときに受信装置として動作する。また、外部画像処理装置３は、原画像データを内視鏡装置２２から受信するときに受信装置として動作し、処理画像データを内視鏡装置２２に送信するときに送信装置として動作する。
【００９１】
内視鏡装置２２は、原画形式変換手段２ａと、送信画像間引き分割手段２ｃと、送信画像パケット変換手段２ｉと、パケット選択送信手段２ｗと、パケット受信手段２ｓおよび２ｔと、データ選択結合手段２ｎと、通信エラー判定手段２ｅおよび２ｆとを備えている。内視鏡装置２２は、原画形式変換手段２ａと、送信画像間引き分割手段２ｃと、送信画像パケット変換手段２ｉと、パケット選択送信手段２ｗとの構成によって、送信装置として動作する。また、内視鏡装置２２は、パケット受信手段２ｓおよび２ｔと、データ選択結合手段２ｎと、通信エラー判定手段２ｅおよび２ｆとの構成によって、受信装置として動作する。
【００９２】
外部画像処理装置３２は、パケット受信手段３ｆと、データ選択結合手段３ｉと、通信エラー判定手段３ａと、画像処理手段３ｃと、送信画像間引き分割手段３ｄと、送信画像パケット変換手段３ｊおよび３ｋと、パケット選択送信手段３ｌおよび３ｍとを備えている。外部画像処理装置３２は、パケット受信手段３ｆと、データ選択結合手段３ｉと、通信エラー判定手段３ａとの構成によって、受信装置として動作する。また、外部画像処理装置３２は、送信画像間引き分割手段３ｄと、送信画像パケット変換手段３ｊおよび３ｋと、パケット選択送信手段３ｌおよび３ｍとの構成によって、送信装置として動作する。
【００９３】
本第３の実施形態の内視鏡システム３００の動作と、第１の実施形態の内視鏡システム１００および第２の実施形態の内視鏡システム２００の動作との異なる点は、間引き抽出画像データおよび付帯画像データの通信動作である。より具体的には、第１の実施形態の内視鏡システム１００および第２の実施形態の内視鏡システム２００は、送信されてきた送信パケットに対して通信エラーを判定し、通信エラーが発生した場合には、再送要求に応じて通信エラーが発生した送信パケットを再送することによって、観察に支障をきたすようなフレーム欠損が発生する割合を低減していた。これに対して、本第３の実施形態の内視鏡システム３００は、通信エラーが発生した場合でも再送要求を行わず、１つのフレーム周期において、予め定めた複数の送信パケットを送信し、複数の送信パケットの内、通信エラーが発生していない送信パケットに含まれる画像データに対して処理を行うことによって、観察に支障をきたすようなフレーム欠損が発生する割合を低減することができるようにしている。
【００９４】
なお、１つのフレーム周期において複数の送信パケットを送信する方法には、ネットワークの通信回線を増やさず、１つの通信回線（単回線）を使用して複数の送信パケットを送信する方法や、ネットワークの通信回線を増やし、複数の通信回線を使用して複数の送信パケットを送信する方法がある。
【００９５】
以下、内視鏡システム３００における動作に従って、内視鏡装置２２および外部画像処理装置３２のそれぞれの構成要素について説明するとともに、内視鏡システム３００における内視鏡装置２２と外部画像処理装置３２との間で行われる画像データの通信動作について説明する。まず、内視鏡装置２２から外部画像処理装置３２に原画像データを送信する通信動作において、ネットワークの通信回線を増やさず、第１の実施形態の内視鏡システム１００および第２の実施形態の内視鏡システム２００と同様の１つの通信回線（単回線）を使用して、複数の送信パケットを送信する場合について説明する。
【００９６】
なお、以下の説明においては、図５に示した、本第３の実施形態の内視鏡システム３００における通信タイミングの一例を参照する。図５では、説明を容易にするため、複数の通信パケットで構成されている１フレーム分の画像データを、全てまとめて１つの画像データとして示している。また、図５に示した通信タイミングでは、内視鏡装置２２が、図２（ａ）に示した通信タイミングと同様に、Ｎ（Ｎ＝１〜３）フレームの原画像データを、間引き抽出画像データＤＮと、付帯画像データＤＮａおよびＤＮｂとに分割し、分割したそれぞれの原画像データのパケットを、対応するフレーム周期内のそれぞれのパケット送信周期で順次、外部画像処理装置３２に送信するものとする。
【００９７】
原画形式変換手段２ａは、スコープ１から入力された原画像データ（ＲＡＷデータ）に対して、例えば、ＹＣ処理を行うことによって、原画像データを輝度データと色差データとの形式に変換し、送信画像間引き分割手段２ｃに出力する。なお、原画形式変換手段２ａによる原画像データの変換方法は、上述した輝度データと色差データとへの変換に限定されるものではない。
【００９８】
送信画像間引き分割手段２ｃは、例えば、上述した第７の間引き抽出方法によって、原画形式変換手段２ａによって変換された輝度データのビット数が多く、色差データのビット数が少なくなるように間引いた間引き抽出画像データと、間引かずに残ったビット数の付帯画像データとに分割する。そして、送信画像間引き分割手段２ｃは、分割した間引き抽出画像データと付帯画像データとのそれぞれを、送信画像パケット変換手段２ｉに出力する。なお、送信画像間引き分割手段２ｃによる間引き抽出方法は、上述した第７の間引き抽出方法に限定されるものではない。
【００９９】
送信画像パケット変換手段２ｉは、送信画像間引き分割手段２ｃから入力された間引き抽出画像データと付帯画像データとを、外部画像処理装置３２に送信するためにパケット化し、パケット化した間引き抽出画像パケットと付帯画像パケットとのそれぞれを、パケット選択送信手段２ｗに出力する。
【０１００】
パケット選択送信手段２ｗは、送信画像パケット変換手段２ｉから入力された間引き抽出画像パケットと付帯画像パケットとのそれぞれのパケットを、ネットワークを介して外部画像処理装置３２のパケット受信手段３ｆに送信する。なお、パケット選択送信手段２ｗがそれぞれのパケットを外部画像処理装置３２に送信する際には、１つのフレーム周期内に、同じ間引き抽出画像パケットが含まれる送信パケットを複数回送信し、付帯画像パケットが含まれる送信パケットは１回ずつ送信する。
【０１０１】
図５に示した通信タイミングにおいては、１つのフレーム周期内に、同じ間引き抽出画像データが含まれる送信パケットを２回送信する場合の一例を示している。より具体的には、１つ目のフレーム周期内の１回目のパケット送信周期と３回目のパケット送信周期で、間引き抽出画像データＤ１のパケットを送信している場合を示している。また、１つ目のフレーム周期内の２回目のパケット送信周期で付帯画像データＤ１ａのパケットを送信し、４回目のパケット送信周期で付帯画像データＤ１ｂのパケットを送信している場合を示している。同様に、２つ目のフレーム周期内の１回目のパケット送信周期と３回目のパケット送信周期で、間引き抽出画像データＤ２のパケットを送信し、２回目のパケット送信周期と４回目のパケット送信周期で、付帯画像データＤ２ａおよび付帯画像データＤ２ｂのそれぞれのパケットを送信している場合を示している。また同様に、３つ目のフレーム周期内の１回目のパケット送信周期と３回目のパケット送信周期で、間引き抽出画像データＤ３のパケットを送信し、２回目のパケット送信周期と４回目のパケット送信周期で、付帯画像データＤ３ａおよび付帯画像データＤ３ｂのそれぞれのパケットを送信している場合を示している。これにより、１つのフレーム周期内に間引き抽出画像データ、付帯画像データのそれぞれのパケットを１回ずつ送信するよりも、通信エラーによってパケット、特に間引き抽出画像データのパケットが正常に送信されない割合を低減することができる。
【０１０２】
パケット受信手段３ｆは、ネットワークを介して内視鏡装置２２のパケット選択送信手段２ｗから送信されてきた送信パケットを受信し、受信した送信パケットを、通信エラー判定手段３ａおよびデータ選択結合手段３ｉに出力する。
【０１０３】
通信エラー判定手段３ａは、パケット受信手段３ｆから入力された送信パケットに含まれる間引き抽出画像パケットおよび付帯画像パケットに対する通信エラーを判定し、通信エラーの判定結果を、データ選択結合手段３ｉに出力する。
【０１０４】
データ選択結合手段３ｉは、通信エラー判定手段３ａから入力された通信エラーの判定結果に基づいて、パケット受信手段３ｆから入力された送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットを選択し、選択した間引き抽出画像パケットや付帯画像パケットを、元の間引き抽出画像データや付帯画像データに変換して結合した結合画像データを生成する。そして、生成した結合画像データを、画像処理手段３ｃに出力する。
【０１０５】
なお、データ選択結合手段３ｉによる間引き抽出画像パケットや付帯画像パケットの選択においては、通信エラーではないと判定された送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットを選択する。内視鏡システム３００では、パケット選択送信手段２ｗが、同じ間引き抽出画像パケットが含まれる送信パケットを複数回送信する。このため、データ選択結合手段３ｉには、通信エラーではないと判定された、同じ間引き抽出画像パケットが含まれる送信パケットが複数入力されることもある。このため、データ選択結合手段３ｉによる間引き抽出画像パケットの選択においては、同じ間引き抽出画像パケットが含まれる複数の送信パケットの内、いずれか１つの送信パケットに含まれる間引き抽出画像パケットを選択する。これにより、１つのフレーム周期内で、いずれかの間引き抽出画像パケットに通信エラーが発生した場合でも、通信エラーではないと判定された間引き抽出画像パケットを選択することができる。このことにより、データ選択結合手段３ｉは、動画のフレームを構成するために最低限必要な間引き抽出画像データを復元した結合画像データを生成することができ、内視鏡システム３００を使用した観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【０１０６】
また、内視鏡システム３００では、パケット選択送信手段２ｗが、付帯画像パケットが含まれる送信パケットは１回ずつ送信する。このため、データ選択結合手段３ｉによる付帯画像パケットの選択においては、１つのフレーム周期内で、全ての付帯画像パケットが通信エラーではないと判定されたときのみ、付帯画像パケットを選択する。すなわち、１つのフレーム周期内に送信されてきた付帯画像パケットの内、１つでも通信エラーであると判定された場合には、今回のフレーム周期内に送信されてきた付帯画像パケットを全て選択しない。例えば、図５に示した通信タイミングにおいて、１つのフレーム周期内に送信された付帯画像データＤ１ｂのパケットが通信エラーであると判定された場合には、付帯画像データＤ１ｂのパケット以外にも、通信エラーではないと判定された付帯画像データＤ１ａのパケットも選択しない。そして、データ選択結合手段３ｉは、間引き抽出画像パケットから変換した間引き抽出画像データＤ１を、結合画像データとして生成する。これにより、一部の付帯画像データを間引き抽出画像データに結合したことによる動画の映像の表示に対する影響を回避することができる。例えば、付帯画像データが色差データのみである場合には、一部の付帯画像データを選択して結合画像データを生成しても、動画の映像に所望の色を再現することはできないため、むしろ、色に関する情報を切り捨てた方が、内視鏡システム３００を使用した観察に支障をきたすことがなくなる。
【０１０７】
画像処理手段３ｃは、データ選択結合手段３ｉが生成した結合画像データに対して画像処理を行い、画像処理した後の処理画像データを、送信画像間引き分割手段３ｄに出力する。その後、外部画像処理装置３２は、処理画像データを、ネットワークを介して内視鏡装置２２に送信する。
【０１０８】
続いて、外部画像処理装置３２から内視鏡装置２２に処理画像データを送信する通信動作において、ネットワークの通信回線を増やした複数の通信回線を使用して、複数の送信パケットを送信する場合について説明する。
【０１０９】
なお、以下の説明においては、図６に示した、本第３の実施形態の内視鏡システム３００における通信タイミングの別の一例を参照する。図６でも、説明を容易にするため、複数の通信パケットで構成されている１フレーム分の画像データを、全てまとめて１つの画像データとして示している。また、図６に示した通信タイミングでは、外部画像処理装置３２が、図２（ａ）に示した通信タイミングと同様に、Ｎ（Ｎ＝１〜３）フレームの処理画像データを、間引き抽出画像データＤＮと、付帯画像データＤＮａおよびＤＮｂとに分割し、分割したそれぞれの処理画像データのパケットを、対応するフレーム周期内のそれぞれのパケット送信周期で順次、内視鏡装置２２に送信するものとする。
【０１１０】
送信画像間引き分割手段３ｄは、画像処理手段３ｃから入力された、例えば、ＹＣｂＣｒデータなどの画像処理を行った処理画像データから、例えば、上述した第２の間引き抽出方法によって、画像処理手段３ｃによって画像処理された処理画像データにおける画素のデータを、均等に間引いた間引き抽出画像データと、間引かずに残ったビット数の付帯画像データとに分割する。そして、送信画像間引き分割手段３ｄは、分割した間引き抽出画像データと付帯画像データとのそれぞれを、送信画像パケット変換手段３ｊおよび３ｋのそれぞれに出力する。なお、画像処理手段３ｃによる画像処理は、ＹＣｂＣｒデータを生成する画像処理に限定されるものではなく、また、送信画像間引き分割手段３ｄによる間引き抽出方法も、上述した第２の間引き抽出方法に限定されるものではない。
【０１１１】
送信画像パケット変換手段３ｊおよび３ｋのそれぞれは、送信画像間引き分割手段３ｄから入力された間引き抽出画像データと付帯画像データとを、内視鏡装置２２に送信するためにパケット化し、パケット化した間引き抽出画像パケットと付帯画像パケットとのそれぞれを、対応するパケット選択送信手段３ｌまたは３ｍのいずれか一方に出力する。
【０１１２】
パケット選択送信手段３ｌおよび３ｍのそれぞれは、対応する送信画像パケット変換手段３ｊまたは３ｋのいずれか一方から入力された間引き抽出画像パケットと付帯画像パケットとのそれぞれのパケットを、対応する通信回線のネットワークを介して、内視鏡装置２２に備えた、対応するパケット受信手段２ｓまたは２ｔのいずれか一方に送信する。なお、パケット選択送信手段３ｌおよび３ｍのそれぞれが、それぞれのパケットを内視鏡装置２２に送信する際には、１つのフレーム周期内に、間引き抽出画像パケットが含まれる送信パケットと、付帯画像パケットが含まれる送信パケットとを、それぞれ１回ずつ送信する。
【０１１３】
図６に示した通信タイミングにおいては、１つのフレーム周期内に、間引き抽出画像データが含まれる送信パケットと、いずれか１つの付帯画像パケットが含まれる送信パケットとを、それぞれ１回ずつ送信する場合の一例を示している。より具体的には、１つ目のフレーム周期内で、パケット選択送信手段３ｌまたは３ｍのいずれか一方が、データ送信ライン１によって、間引き抽出画像データＤ１のパケットと付帯画像データＤ１ａのパケットとを送信し、パケット選択送信手段３ｌまたは３ｍのいずれか他方が、データ送信ライン２によって、間引き抽出画像データＤ１のパケットと付帯画像データＤ１ｂのパケットとを送信している場合を示している。同様に、２つ目のフレーム周期内で、パケット選択送信手段３ｌまたは３ｍのいずれか一方が、データ送信ライン１によって、間引き抽出画像データＤ２のパケットと付帯画像データＤ２ａのパケットとを送信し、パケット選択送信手段３ｌまたは３ｍのいずれか他方が、データ送信ライン２によって、間引き抽出画像データＤ２のパケットと付帯画像データＤ２ｂのパケットとを送信している場合を示している。また同様に、３つ目のフレーム周期内で、パケット選択送信手段３ｌまたは３ｍのいずれか一方が、データ送信ライン１によって、間引き抽出画像データＤ３のパケットと付帯画像データＤ３ａのパケットとを送信し、パケット選択送信手段３ｌまたは３ｍのいずれか他方が、データ送信ライン２によって、間引き抽出画像データＤ３のパケットと付帯画像データＤ３ｂのパケットとを送信している場合を示している。これにより、１つの通信回線（単回線）で、１つのフレーム周期内に間引き抽出画像データおよび付帯画像データのそれぞれのパケットを１回ずつ送信するよりも、通信エラーによってパケット、特に間引き抽出画像データのパケットが正常に送信されない割合を低減することができる。
【０１１４】
また、図６に示した通信タイミングと図５に示した通信タイミングとを比較してわかるように、図６に示した通信タイミングでは、同じ間引き抽出画像パケットを同じ通信回線を使用して複数回送信していないため、１つのフレーム周期内に送信する送信パケットの数が、図５に示した通信タイミングに比べて少なくなっている。これは、図６に示した通信タイミングの方が、１つの通信回線における通信領域に余裕があり、図６に示した通信タイミングでは、間引き抽出画像データのデータ量を、図５に示した通信タイミングよりも多くすることができることを表している。
【０１１５】
パケット受信手段２ｓおよび２ｔは、対応する通信回線のネットワークを介して外部画像処理装置３２の対応するパケット選択送信手段３ｌまたは３ｍから送信されてきた送信パケットを受信し、受信した送信パケットを、対応する通信エラー判定手段２ｅまたは２ｆ、およびデータ選択結合手段２ｎに出力する。
【０１１６】
通信エラー判定手段２ｅおよび２ｆのそれぞれは、対応するパケット受信手段２ｓまたは２ｔのいずれか一方から入力された送信パケットに含まれる間引き抽出画像パケットおよび付帯画像パケットに対する通信エラーを判定し、通信エラーの判定結果を、データ選択結合手段２ｎに出力する。
【０１１７】
データ選択結合手段２ｎは、通信エラー判定手段２ｅおよび２ｆのそれぞれから入力された通信エラーの判定結果に基づいて、パケット受信手段２ｓおよび２ｔのそれぞれから入力された送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットを選択し、選択した間引き抽出画像パケットや付帯画像パケットを、元の間引き抽出画像データや付帯画像データに変換して結合した結合画像データを生成する。そして、生成した結合画像データを、動画の映像を構成するそれぞれのフレームの表示画像データとして、表示装置４に出力する。これにより、表示装置４は、内視鏡装置２２から入力されたそれぞれのフレームの表示画像データを、動画の映像として表示する。
【０１１８】
なお、データ選択結合手段２ｎによる間引き抽出画像パケットや付帯画像パケットの選択においては、通信エラーではないと判定された送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットを選択する。内視鏡システム３００では、パケット選択送信手段３ｌおよび３ｍのそれぞれが、同じ間引き抽出画像パケットが含まれる送信パケットを、異なる通信回線のネットワークでそれぞれ１回ずつ送信する。このため、データ選択結合手段２ｎには、通信エラーではないと判定された、同じ間引き抽出画像パケットが含まれる送信パケットが複数入力されることもある。このため、データ選択結合手段２ｎによる間引き抽出画像パケットの選択においては、同じ間引き抽出画像パケットが含まれる複数の送信パケットの内、いずれか１つの送信パケットに含まれる間引き抽出画像パケットを選択する。これにより、１つのフレーム周期内で、いずれかの通信回線のネットワークを介して送信されてきた間引き抽出画像パケットに通信エラーが発生した場合でも、通信エラーではないと判定された間引き抽出画像パケットを選択することができる。このことにより、データ選択結合手段２ｎは、動画のフレームを構成するために最低限必要な間引き抽出画像データを復元した結合画像データを生成することができ、内視鏡システム３００を使用した観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【０１１９】
また、内視鏡システム３００では、パケット選択送信手段３ｌおよび３ｍのそれぞれが、異なる付帯画像パケットが含まれる送信パケットを、異なる通信回線のネットワークでそれぞれ１回ずつ送信する。このため、データ選択結合手段２ｎには、通信エラーではないと判定された付帯画像パケットが含まれる送信パケットと、通信エラーであると判定された付帯画像パケットが含まれる送信パケットとが入力されることもある。この場合、データ選択結合手段２ｎによる付帯画像パケットの選択においては、通信エラーではないと判定された付帯画像パケットのみを選択する。例えば、図６に示した通信タイミングにおいて、１つのフレーム周期内に、データ送信ライン１によって送信された付帯画像データＤ１ａのパケットが通信エラーであると判定された場合には、通信エラーではないと判定された付帯画像データＤ１ｂのパケットのみを選択する。そして、データ選択結合手段２ｎは、間引き抽出画像パケットから変換した間引き抽出画像データＤ１と付帯画像パケットから変換した付帯画像データＤ１ｂとを結合した結合画像データを生成する。これにより、間引き抽出画像パケットから変換した間引き抽出画像データに、付帯画像パケットから変換した付帯画像データを少しでも結合した結合画像データを生成することができる。
【０１２０】
なお、本第３の実施形態の内視鏡システム３００においては、外部画像処理装置３２から内視鏡装置２２に処理画像データのパケットを送信する場合に、図６に示した通信タイミングと異なる通信タイミングで、複数の送信パケットを送信することもできる。ここで、ネットワークの通信回線を増やした複数の通信回線を使用して、複数の送信パケットを送信する別の通信タイミングについて説明する。
【０１２１】
図７は、本第３の実施形態の内視鏡システム３００における通信タイミングのさらに別の一例を模式的に示した図である。図７でも、説明を容易にするため、複数の通信パケットで構成されている１フレーム分の画像データを、全てまとめて１つの画像データとして示している。また、図７に示した通信タイミングでは、外部画像処理装置３２が、図２（ａ）に示した通信タイミングと同様に、Ｎ（Ｎ＝１〜３）フレームの処理画像データを、間引き抽出画像データＤＮと、付帯画像データＤＮａおよびＤＮｂとに分割し、分割したそれぞれの処理画像データのパケットを、対応するフレーム周期内のそれぞれのパケット送信周期で順次、内視鏡装置２２に送信するものとする。なお、外部画像処理装置３２に備えた送信画像間引き分割手段３ｄと、送信画像パケット変換手段３ｊおよび３ｋのそれぞれの動作と、内視鏡装置２２に備えたパケット受信手段２ｓおよび２ｔと、通信エラー判定手段２ｅおよび２ｆとのそれぞれの動作は、上述した例と同様であるため、詳細な説明は省略する。
【０１２２】
パケット選択送信手段３ｌおよび３ｍのそれぞれは、対応する送信画像パケット変換手段３ｊまたは３ｋのいずれか一方から入力された間引き抽出画像パケットと付帯画像パケットとのそれぞれのパケットを、対応する通信回線のネットワークを介して、内視鏡装置２２に備えた、対応するパケット受信手段２ｓまたは２ｔのいずれか一方に送信する。なお、パケット選択送信手段３ｌおよび３ｍのそれぞれは、それぞれのパケットを内視鏡装置２２に送信する際に、１つのフレーム周期内に、同じ間引き抽出画像パケットが含まれる送信パケットを複数回送信し、異なる付帯画像パケットが含まれる送信パケットを１回ずつ送信する。このとき、パケット選択送信手段３ｌおよび３ｍは、同じ組み合わせの送信パケットを送信する。
【０１２３】
図７に示した通信タイミングにおいては、１つのフレーム周期内に、同じ間引き抽出画像データが含まれる送信パケットを２回送信し、いずれか１つの付帯画像パケットが含まれる送信パケットを、それぞれ１回ずつ送信する場合の一例を示している。より具体的には、１つ目のフレーム周期内の１回目のパケット送信周期と３回目のパケット送信周期で間引き抽出画像データＤ１のパケットを送信し、２回目のパケット送信周期で付帯画像データＤ１ａのパケットを送信し、４回目のパケット送信周期で付帯画像データＤ１ｂのパケットを送信している場合を示している。同様に、２つ目のフレーム周期内の１回目のパケット送信周期と３回目のパケット送信周期で間引き抽出画像データＤ２のパケットを送信し、２回目のパケット送信周期で付帯画像データＤ２ａのパケットを送信し、４回目のパケット送信周期で付帯画像データＤ２ｂのパケットを送信している場合を示している。また同様に、３つ目のフレーム周期内の１回目のパケット送信周期と３回目のパケット送信周期で間引き抽出画像データＤ３のパケットを送信し、２回目のパケット送信周期で付帯画像データＤ３ａのパケットを送信し、４回目のパケット送信周期で付帯画像データＤ３ｂのパケットを送信している場合を示している。このとき、それぞれのフレーム周期において、パケット選択送信手段３ｌまたは３ｍのいずれか一方が、データ送信ライン１によって、上述した組み合わせの送信パケットを送信し、パケット選択送信手段３ｌまたは３ｍのいずれか他方が、データ送信ライン２によって、同じ組み合わせの送信パケットを送信する。これにより、図６に示した通信タイミングと同様に、１つの通信回線（単回線）で、１つのフレーム周期内に間引き抽出画像データおよび付帯画像データのそれぞれのパケットを１回ずつ送信するよりも、通信エラーによってパケット、特に間引き抽出画像データのパケットが正常に送信されない割合を低減することができる。
【０１２４】
また、図７に示した通信タイミングと図６に示した通信タイミングとを比較してわかるように、図７に示した通信タイミングでは、同じ間引き抽出画像パケットを同じ通信回線を使用して複数回送信すると共に、全ての付帯画像パケットを送信している。すなわち、図７に示した通信タイミングでは、間引き抽出画像パケットおよび付帯画像パケットを複数の通信回線を使用して複数回送信している。このため、図７に示した通信タイミングでは、あるフレーム周期において一方のデータ送信ラインの間引き抽出画像データのパケットや付帯画像データのパケットに通信エラーが生じた場合でも、他方の正常に送信することができたデータ送信ラインの間引き抽出画像データのパケットや付帯画像データのパケットを選択することができるため、フレーム欠損への耐性を向上させることができる。
【０１２５】
データ選択結合手段２ｎは、通信エラー判定手段２ｅおよび２ｆのそれぞれから入力された通信エラーの判定結果に基づいて、パケット受信手段２ｓおよび２ｔのそれぞれから入力された送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットを選択し、選択した間引き抽出画像パケットや付帯画像パケットを、元の間引き抽出画像データや付帯画像データに変換して結合した結合画像データを生成する。
【０１２６】
なお、データ選択結合手段２ｎによる間引き抽出画像パケットや付帯画像パケットの選択においては、図６に示した通信タイミングによって送信されてきた間引き抽出画像パケットや付帯画像パケットを選択する場合と同様に、通信エラーではないと判定された送信パケットに含まれる間引き抽出画像パケットや付帯画像パケットを選択する。例えば、図７に示した通信タイミングにおいて、１つのフレーム周期内に、データ送信ライン１によって送信された付帯画像データＤ１ａのパケットが通信エラーであると判定された場合には、通信エラーではないと判定されたデータ送信ライン２によって送信された付帯画像データＤ１ａのパケットを選択する。そして、データ選択結合手段２ｎは、データ送信ライン１またはデータ送信ライン２のいずれか一方によって送信された間引き抽出画像パケットから変換した間引き抽出画像データＤ１と、上記で選択した付帯画像パケットから変換した付帯画像データＤ１ａと、データ送信ライン１またはデータ送信ライン２のいずれか一方によって送信された付帯画像データＤ１ｂとを結合した結合画像データを生成する。これにより、間引き抽出画像パケットから変換した間引き抽出画像データに、付帯画像パケットから変換した付帯画像データを全て結合した結合画像データ、すなわち、図６に示した通信タイミングよりも多くの付帯画像データを結合した結合画像データを生成することができる。
【０１２７】
上記に述べたように、本第３の実施形態の内視鏡システム３００でも、第１の実施形態の内視鏡システム１００および第２の実施形態の内視鏡システム２００と同様に、動画のフレームを構成するために最低限必要な量にまでデータ量を少なくして抽出した間引き抽出画像データと、その他の付帯画像データとに分割した後に送信する。このとき、本第３の実施形態の内視鏡システム３００では、フレーム周期内に間引き抽出画像データを複数回送信する。これにより、少なくとも、動画のフレームを構成するために最低限必要な画像データを確実に送信することができ、内視鏡システム３００を使用した観察に支障をきたすフレーム欠損が発生する割合を低減することができる。
【０１２８】
なお、本第３の実施形態の内視鏡システム３００においては、内視鏡装置２２から外部画像処理装置３２に原画像データを送信する際には１つの通信回線（単回線）を使用し、外部画像処理装置３２から内視鏡装置２２に処理画像データを送信する際には複数の通信回線を使用した場合について説明した。しかし、内視鏡装置２２と外部画像処理装置３２との間で行われる画像データの通信おいて使用する通信回線の数は、上述した例に限定されるものではない。例えば、内視鏡装置２２から外部画像処理装置３２に原画像データを送信する際に複数の通信回線を使用し、外部画像処理装置３２から内視鏡装置２２に処理画像データを送信する際に１つの通信回線（単回線）を使用する構成にすることもできる。また、例えば、内視鏡装置２２から外部画像処理装置３２への原画像データの送信と、外部画像処理装置３２から内視鏡装置２２への処理画像データの送信との両方の通信おいて、１つの通信回線（単回線）または複数の通信回線を使用する構成にすることもできる。なお、このような場合における構成は、内視鏡システム３００に対応する構成要素を、上述した例と同様に考えて備えることで対応することができ、通信動作も上述した例と同様に考えることができるため、詳細な説明は省略する。
【０１２９】
また、本第３の実施形態の内視鏡システム３００においては、外部画像処理装置３２から内視鏡装置２２に処理画像データのパケットを送信する構成では、それぞれ２つの構成要素を備え、異なる２つの通信回線のネットワークでそれぞれ送信する場合について説明した。より具体的には、外部画像処理装置３２に送信画像パケット変換手段３ｊおよび３ｋと、パケット選択送信手段３ｌおよび３ｍとを備え、内視鏡装置２２にパケット受信手段２ｓおよび２ｔと、通信エラー判定手段２ｅおよび２ｆとを備え、データ送信ライン１およびデータ送信ライン２によってそれぞれの送信パケットを送信する場合について説明した。しかし、通信回線の数、および内視鏡装置２２と外部画像処理装置３２とに備える通信回線に対応した構成要素の数は、上述した例に限定されるものではなく、通信回線の数に応じた数の構成要素を内視鏡装置２２と外部画像処理装置３２とに備えることによって、さらに多くの通信回線を使用して、画像データのパケットを送信することができる。
【０１３０】
また、本第３の実施形態の内視鏡システム３００においては、内視鏡装置２２に原画形式変換手段２ａを備えた構成について説明したが、内視鏡装置２２の構成は、上述した例に限定されるものではなく、例えば、図１に示した第１の実施形態の内視鏡システム１００の内視鏡装置２と同様に、原画形式変換手段２ａを備えない構成にすることもできる。この場合、内視鏡装置２２に備えた送信画像間引き分割手段２ｃは、第１の実施形態の内視鏡システム１００に備えた送信画像間引き分割手段２ｃと同様に、スコープ１から入力された画像処理を施していない原画像データを、間引き抽出画像データと付帯画像データとに分割することになる。
【０１３１】
＜第４の実施形態＞
次に、第４の実施形態の内視鏡システムについて説明する。図８は、本第４の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。図８に示した内視鏡システム４００は、スコープ１と、内視鏡装置２３と、外部画像処理装置３３と、表示装置４とから構成されるシステムである。本第４の実施形態の内視鏡システム４００において、スコープ１と表示装置４とは、第１〜第３の実施形態の内視鏡システムの構成要素と同様の構成要素である。また、第１〜第３の実施形態の内視鏡システムの構成要素と異なる本第４の実施形態の内視鏡システム４００の内視鏡装置２３および外部画像処理装置３３においても、第１〜第３の実施形態の内視鏡システムと同様の構成を含んでいる。従って、第１〜第３の実施形態の内視鏡システムと同様の構成要素および構成には、同一の符号を付与し、詳細な説明は省略する。
【０１３２】
内視鏡装置２３は、第３の実施形態の内視鏡システム３００に備えた内視鏡装置２２と同様に、スコープ１から入力された原画像データの形式を変換してから、外部画像処理装置３３で処理することができる信号形式（フォーマット）に変換し、ネットワークを介して外部画像処理装置３３に送信する。なお、内視鏡装置２３と第３の実施形態の内視鏡システム３００に備えた内視鏡装置２２との異なる点は、内視鏡装置２３では、フォーマット変換した後の原画像データをネットワークを介して外部画像処理装置３３に送信する際のタイミングを調整することである。
【０１３３】
外部画像処理装置３３は、第３の実施形態の内視鏡システム３００に備えた外部画像処理装置３２と同様に、内視鏡装置２３から送信されてきたフォーマット変換した後の原画像データに対して、表示装置４に表示するための画像処理を行った処理画像データを、ネットワークを介して内視鏡装置２３に送信する。なお、外部画像処理装置３３と第３の実施形態の内視鏡システム３００に備えた外部画像処理装置３２との異なる点は、外部画像処理装置３３では、処理画像データをネットワークを介して内視鏡装置２３に送信する際のタイミングを調整することである。
【０１３４】
なお、本第４の実施形態の内視鏡システム４００でも、第１〜第３の実施形態の内視鏡システムと同様に、内視鏡装置２３は、原画像データを外部画像処理装置３３に送信するときに送信装置として動作し、処理画像データを外部画像処理装置３３から受信するときに受信装置として動作する。また、外部画像処理装置３３は、原画像データを内視鏡装置２３から受信するときに受信装置として動作し、処理画像データを内視鏡装置２３に送信するときに送信装置として動作する。
【０１３５】
内視鏡装置２３は、原画形式変換手段２ａと、送信画像間引き分割手段２ｃと、送信画像パケット変換手段２ｊと、パケット選択送信手段２ｘと、送信タイミング調整手段２ｋと、パケット受信手段２ｓおよび２ｔと、データ選択結合手段２ｎと、通信エラー判定手段２ｅおよび２ｆと、通信結果解析手段２ｏおよび２ｐと、通信結果送信手段２ｈおよび２ｙとを備えている。内視鏡装置２３は、原画形式変換手段２ａと、送信画像間引き分割手段２ｃと、送信画像パケット変換手段２ｊと、パケット選択送信手段２ｘと、送信タイミング調整手段２ｋとの構成によって、送信装置として動作する。また、内視鏡装置２３は、パケット受信手段２ｓおよび２ｔと、データ選択結合手段２ｎと、通信エラー判定手段２ｅおよび２ｆと、通信結果解析手段２ｏおよび２ｐと、通信結果送信手段２ｈおよび２ｙとの構成によって、受信装置として動作する。
【０１３６】
外部画像処理装置３３は、パケット受信手段３ｆと、データ選択結合手段３ｉと、通信エラー判定手段３ａと、通信結果解析手段３ｎと、通信結果送信手段３ｇと、画像処理手段３ｃと、送信画像間引き分割手段３ｄと、送信画像パケット変換手段３ｊおよび３ｋと、パケット選択送信手段３ｑおよび３ｒと、送信タイミング調整手段３ｓおよび３ｔとを備えている。外部画像処理装置３３は、パケット受信手段３ｆと、データ選択結合手段３ｉと、通信エラー判定手段３ａと、通信結果解析手段３ｎと、通信結果送信手段３ｇとの構成によって、受信装置として動作する。また、外部画像処理装置３３は、送信画像間引き分割手段３ｄと、送信画像パケット変換手段３ｊおよび３ｋと、パケット選択送信手段３ｑおよび３ｒと、送信タイミング調整手段３ｓおよび３ｔとの構成によって、送信装置として動作する。
【０１３７】
本第４の実施形態の内視鏡システム４００の動作と、第１〜第３の実施形態の内視鏡システムの動作との異なる点は、間引き抽出画像データおよび付帯画像データを送信するタイミングである。より具体的には、第１〜第２の実施形態の内視鏡システムは、送信されてきた送信パケットに対して通信エラーを判定し、通信エラーが発生した場合には、再送要求に応じて通信エラーが発生した送信パケットを再送したり、１つのフレーム周期において複数の送信パケットを送信したりすることによって、通信エラーが発生していない送信パケットに含まれる画像データに対して処理を行い、観察に支障をきたすようなフレーム欠損が発生する割合を低減していた。これに対して、本第４の実施形態の内視鏡システム４００は、送信されてきた送信パケットに通信エラーが発生するタイミングを解析し、通信エラーが発生するタイミングを避けて、間引き抽出画像データが含まれる送信パケットを送信する。これは、例えば、電気メスのような処置具を使用する際に生じる周期性をもったノイズが、内視鏡システム４００を使用する環境の周辺にある場合に、ノイズの周期と合ったタイミングで間引き抽出画像データが含まれる送信パケットを送信すると、通信エラーが発生する頻度が高くなってしまうことに対応するための対策である。この対策によって、本第４の実施形態の内視鏡システム４００は、観察に支障をきたすようなフレーム欠損が発生する割合を低減することができるようにしている。
【０１３８】
このため、本第４の実施形態の内視鏡システム４００では、送信装置が間引き抽出画像データや付帯画像データのパケットを送信する前に、事前にテストデータの送信パケットを受信装置に送信する。そして、受信装置は、送信されてきたテストデータの送信パケットに対する通信エラーを判定した結果に基づいて、通信エラーが発生するタイミングを解析し、解析した結果を送信装置に送信する。送信装置は、受信装置から送信されてきた解析結果に基づいて、間引き抽出画像データや付帯画像データのパケットを送信するタイミングを調整する。
【０１３９】
以下、内視鏡システム４００における動作に従って、内視鏡装置２３および外部画像処理装置３３のそれぞれの構成要素について説明するとともに、内視鏡システム４００における内視鏡装置２３と外部画像処理装置３３との間で行われる画像データの通信動作について説明する。なお、以下の説明においては、内視鏡装置２３から外部画像処理装置３３に原画像データを送信する通信動作において、第１〜第２の実施形態の内視鏡システムと異なる構成要素および動作について説明する。
【０１４０】
送信画像パケット変換手段２ｊは、通信エラーが発生するタイミングを解析するためのテストデータを、外部画像処理装置３３に送信するためにパケット化し、パケット化したテストデータ（以下、「テストパケット」という）を、パケット選択送信手段２ｘに出力する。
【０１４１】
パケット選択送信手段２ｘは、送信画像パケット変換手段２ｊから入力されたテストパケットを、ネットワークを介して外部画像処理装置３３に送信する。なお、パケット選択送信手段２ｘがテストパケットを外部画像処理装置３３に送信する際には、１つのフレーム周期内のそれぞれのパケット送信周期で、同じテストパケットを、外部画像処理装置３３のパケット受信手段３ｆに送信する。これにより、周期性をもったノイズなどの影響による通信エラーが発生するタイミングを確認することができる。
【０１４２】
パケット受信手段３ｆは、ネットワークを介して内視鏡装置２３のパケット選択送信手段２ｘから送信されてきたテストパケットを受信し、受信したテストパケットを、通信エラー判定手段３ａに出力する。
【０１４３】
通信エラー判定手段３ａは、パケット受信手段３ｆから入力されたテストパケットに対する通信エラーを判定し、通信エラーの判定結果を、通信結果解析手段３ｎに出力する。
【０１４４】
通信結果解析手段３ｎは、通信エラー判定手段３ａから入力された通信エラーの判定結果に基づいて、通信エラーが発生するタイミングを解析し、解析した通信エラーが発生するタイミングの結果を、通信結果送信手段３ｇに出力する。
【０１４５】
通信結果送信手段３ｇは、通信結果解析手段３ｎから入力された通信エラーが発生するタイミングの結果を通信結果として、ネットワークを介して内視鏡装置２３の送信タイミング調整手段２ｋに送信する。
【０１４６】
送信タイミング調整手段２ｋは、外部画像処理装置３３の通信結果送信手段３ｇから送信されてきた通信結果に基づいて、間引き抽出画像パケットを送信するタイミングを、通信エラーが発生するタイミングからずらすように調整し、調整したタイミングを、パケット選択送信手段２ｘに出力する。
【０１４７】
その後、パケット選択送信手段２ｘは、間引き抽出画像パケットと付帯画像パケットとを送信する際に、送信タイミング調整手段２ｋによって調整されたタイミングで、間引き抽出画像パケットを、ネットワークを介して外部画像処理装置３のパケット受信手段３ｆに送信する。
【０１４８】
これにより、内視鏡装置２３は、周期性をもったノイズなどの影響によって通信エラーが発生しないタイミングで、間引き抽出画像パケットを確実に外部画像処理装置３に送信することができる。このことにより、外部画像処理装置３は、動画のフレームを構成するために最低限必要な間引き抽出画像データを復元した結合画像データを生成することができ、内視鏡システム４００を使用した観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【０１４９】
その後、外部画像処理装置３３は、データ選択結合手段３ｉが生成した結合画像データに対して画像処理手段３ｃが画像処理を行い、画像処理した後の処理画像データを、ネットワークを介して内視鏡装置２３に送信する。なお、図８には、外部画像処理装置３３が処理画像データを内視鏡装置２３に送信する際に、複数の通信回線のネットワークを使用する構成を示している。しかし、この場合の通信動作は、第３の実施形態の内視鏡システム３００における通信動作を考慮して、上述した内視鏡装置２３から外部画像処理装置３３に原画像データを送信する通信動作と同様に考えることができる。より具体的には、上述した内視鏡装置２３から外部画像処理装置３３に原画像データを送信する通信動作において、原画像データを処理画像データに置き換え、送信装置として動作していた内視鏡装置２３と受信装置として動作していた外部画像処理装置３３との動作を入れ替える、すなわち、外部画像処理装置３３を送信装置とし、内視鏡装置２３を受信装置とすることによって、同様に考えることができる。
【０１５０】
さらに詳細には、上述した内視鏡装置２３から外部画像処理装置３３に原画像データを送信する通信動作において、送信画像パケット変換手段２ｊを送信画像パケット変換手段３ｊおよび３ｋに、パケット選択送信手段２ｘをパケット選択送信手段３ｑおよび３ｒに、パケット受信手段３ｆをパケット受信手段２ｓおよび２ｔに、通信エラー判定手段３ａを通信エラー判定手段２ｅおよび２ｆに、通信結果解析手段３ｎを通信結果解析手段２ｏおよび２ｐに、通信結果送信手段３ｇを通信結果送信手段２ｈおよび２ｙに、送信タイミング調整手段２ｋを送信タイミング調整手段３ｓおよび３ｔに、それぞれ置き換えて考えることによって、外部画像処理装置３３が内視鏡装置２３に処理画像データを送信する通信動作を理解することができる。従って、外部画像処理装置３３が内視鏡装置２３に処理画像データを送信する通信動作に関する詳細な説明は、省略する。
【０１５１】
また、本第４の実施形態の内視鏡システム４００による画像データの通信タイミングは、間引き抽出画像パケットを通信エラーが発生しないタイミングで送信する以外、第１〜第３の実施形態の内視鏡システムにおける画像データの通信タイミングと同様であるため、詳細な説明は省略する。
【０１５２】
上記に述べたように、本第４の実施形態の内視鏡システム４００でも、第１〜第３の実施形態の内視鏡システムと同様に、動画のフレームを構成するために最低限必要な量にまでデータ量を少なくして抽出した間引き抽出画像データと、その他の付帯画像データとに分割した後に送信する。このとき、本第４の実施形態の内視鏡システム４００では、事前にテストデータを送信することによって通信エラーが発生するタイミングを解析し、通信エラーが発生しないタイミングで間引き抽出画像データを送信する。これにより、周期性をもったノイズなどの影響によって通信エラーが発生するタイミングを回避して、少なくとも、動画のフレームを構成するために最低限必要な画像データを確実に送信することができ、内視鏡システム４００を使用した観察に支障をきたすフレーム欠損が発生する割合を低減することができる。
【０１５３】
なお、本第４の実施形態の内視鏡システム４００においては、通信結果解析手段３ｎが、通信エラーの判定結果に基づいて通信エラーが発生するタイミングを解析し、送信タイミング調整手段２ｋが、解析した通信エラーが発生するタイミングの結果（通信結果）に基づいて、間引き抽出画像パケットを送信するタイミングを調整する場合について説明した。しかし、通信エラーが発生するタイミングを解析する方法および引き抽出画像パケットを送信するタイミングを調整する方法は、上述した例に限定されるものではない。例えば、送信タイミング調整手段２ｋが、通信エラーの判定結果に基づいて通信エラーが発生するタイミングを解析するとともに、通信エラーの頻度に基づいて、間引き抽出画像パケットを送信する回数を調整するする構成にすることもできる。
【０１５４】
また、本第４の実施形態の内視鏡システム４００においては、事前にテストデータのパケット（テストパケット）を送信し、テストパケットに対する通信エラーの判定結果に基づいて、通信エラーが発生するタイミングを解析する場合について説明したが、通信エラーが発生するタイミングを解析する方法は、上述した例に限定されるものではない。例えば、内視鏡システム４００を使用した観察に使用するか否かにかかわらず、画像データ（間引き抽出画像データや付帯画像データ）のパケットを送信しながら、適宜、通信エラーが発生するタイミングを解析し、解析した通信エラーが発生するタイミングの結果（通信結果）に基づいて、間引き抽出画像パケットを送信するタイミングを、適宜調整する構成にすることもできる。
【０１５５】
また、本第４の実施形態の内視鏡システム４００においては、第３の実施形態の内視鏡システム３００と同様に、内視鏡装置２３から外部画像処理装置３３に原画像データを送信する際には１つの通信回線（単回線）を使用し、外部画像処理装置３３から内視鏡装置２３に処理画像データを送信する際には複数の通信回線を使用した場合について説明した。しかし、内視鏡装置２３と外部画像処理装置３３との間で行われる画像データの通信おいて使用する通信回線の数や、通信回線の数に応じて内視鏡装置２３と外部画像処理装置３３とに備える構成要素の数は、第３の実施形態の内視鏡システム３００と同様に、上述した例に限定されるものではない。
【０１５６】
また、本第４の実施形態の内視鏡システム４００においては、内視鏡装置２３に原画形式変換手段２ａを備えた構成について説明したが、内視鏡装置２３の構成は、上述した例に限定されるものではなく、原画形式変換手段２ａを備えない構成にすることもできる。
【０１５７】
＜第５の実施形態＞
次に、第５の実施形態の内視鏡システムについて説明する。図９は、本第５の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。図９に示した内視鏡システム５００は、スコープ１と、内視鏡装置２４と、外部画像処理装置３３と、表示装置４と、外部出力端子５と、ユーザ設定装置７とから構成されるシステムである。本第５の実施形態の内視鏡システム５００において、スコープ１と、外部画像処理装置３３と、表示装置４とは、第４の実施形態の内視鏡システム４００の構成要素と同様の構成要素である。また、第４の実施形態の内視鏡システム４００の構成要素と異なる本第５の実施形態の内視鏡システム５００の内視鏡装置２４においても、第４の実施形態の内視鏡システム４００と同様の構成を含んでいる。従って、第４の実施形態の内視鏡システム４００と同様の構成要素および構成には、同一の符号を付与し、詳細な説明は省略する。
【０１５８】
本第５の実施形態の内視鏡システム５００と、第４の実施形態の内視鏡システム４００との異なる点は、間引き抽出画像パケットを、ネットワークを介して送信するタイミングを調整する方法が異なることである。より具体的には、第４の実施形態の内視鏡システム４００は、事前にテストデータを送信することによって通信エラーが発生するタイミングを解析し、間引き抽出画像パケットを送信するタイミングを自動で調整することによって、観察に支障をきたすようなフレーム欠損が発生する割合を低減していた。これに対して、本第５の実施形態の内視鏡システム５００は、通信エラーが発生するタイミングを解析した結果（通信結果）を、本第５の実施形態の内視鏡システム５００を使用するユーザが認識できるように提示し、提示した通信結果に基づいてユーザが設定したタイミングで、間引き抽出画像パケットを送信するタイミングを調整する。これにより、本第５の実施形態の内視鏡システム５００では、ユーザが許容する状態の範囲内で、観察に支障をきたすようなフレーム欠損が発生する割合を低減することができるようにしている。
【０１５９】
内視鏡装置２４は、第４の実施形態の内視鏡システム４００に備えた内視鏡装置２３と同様に、スコープ１から入力された原画像データの形式を変換してから、外部画像処理装置３３で処理することができる信号形式（フォーマット）に変換し、ネットワークを介して外部画像処理装置３３に送信する。また、内視鏡装置２４は、外部画像処理装置３３から送信されてきた通信結果をユーザが認識できるように提示し、ユーザの操作によってユーザ設定装置７に設定されたタイミングに基づいて、間引き抽出画像パケットを送信するタイミングを調整する。すなわち、内視鏡装置２４と第４の実施形態の内視鏡システム４００に備えた内視鏡装置２３との異なる点は、間引き抽出画像パケットを、ネットワークを介して外部画像処理装置３に送信するタイミングを調整する方法が異なることである。
【０１６０】
外部画像処理装置３３は、第４の実施形態の内視鏡システム４００に備えた外部画像処理装置３３と同様である。外部画像処理装置３３は、内視鏡装置２４から送信されてきたフォーマット変換した後の原画像データに対して、表示装置４に表示するための画像処理を行った処理画像データを、ネットワークを介して内視鏡装置２４に送信する。ただし、本第５の実施形態の内視鏡システム５００において、外部画像処理装置３３は、ユーザの操作によってユーザ設定装置７に設定されたタイミングに基づいて、間引き抽出画像パケットを送信するタイミングを調整する。
【０１６１】
外部出力端子５は、内視鏡装置２４から出力された通信結果の情報を出力する。外部出力端子５は、例えば、本第５の実施形態の内視鏡システム５００の外部に接続された不図示の表示装置などに接続され、内視鏡装置２４から出力された通信結果の情報を、不図示の表示装置などに、ユーザが認識できるように表示させる。
【０１６２】
ユーザ設定装置７は、本第５の実施形態の内視鏡システム５００を使用するユーザによって、間引き抽出画像パケットを送信するタイミングが設定され、設定されたタイミングの情報を、内視鏡装置２４および外部画像処理装置３３に出力する。
【０１６３】
なお、本第５の実施形態の内視鏡システム５００でも、第１〜第４の実施形態の内視鏡システムと同様に、内視鏡装置２４は、原画像データを外部画像処理装置３３に送信するときに送信装置として動作し、処理画像データを外部画像処理装置３３から受信するときに受信装置として動作する。また、外部画像処理装置３３は、原画像データを内視鏡装置２４から受信するときに受信装置として動作し、処理画像データを内視鏡装置２４に送信するときに送信装置として動作する。
【０１６４】
内視鏡装置２４は、原画形式変換手段２ａと、送信画像間引き分割手段２ｃと、送信画像パケット変換手段２ｊと、パケット選択送信手段２ｘと、送信タイミング調整手段２ｋと、パケット受信手段２ｓおよび２ｔと、データ選択結合手段２ｎと、通信エラー判定手段２ｅおよび２ｆと、通信結果解析手段２ｏおよび２ｐと、送信タイミング表示手段２ｖとを備えている。内視鏡装置２４は、原画形式変換手段２ａと、送信画像間引き分割手段２ｃと、送信画像パケット変換手段２ｊと、パケット選択送信手段２ｘと、送信タイミング調整手段２ｋとの構成によって、送信装置として動作する。また、内視鏡装置２４は、パケット受信手段２ｓおよび２ｔと、データ選択結合手段２ｎと、通信エラー判定手段２ｅおよび２ｆと、通信結果解析手段２ｏおよび２ｐとの構成によって、受信装置として動作する。
【０１６５】
内視鏡装置２４は、上述したように、外部画像処理装置３３から送信されてきた通信結果をユーザが認識できるように提示し、ユーザの操作によってユーザ設定装置７に設定されたタイミングに基づいて、間引き抽出画像パケットを送信するタイミングを調整する。これにより、内視鏡装置２４では、第４の実施形態の内視鏡システム４００に備えた内視鏡装置２３に備えた通信結果送信手段２ｈおよび２ｙが削除され、送信タイミング表示手段２ｖが追加されている。以下の説明においては、第４の実施形態の内視鏡システム４００に備えた内視鏡装置２３および外部画像処理装置３３と異なる構成要素および動作について説明する。
【０１６６】
なお、上述したように、外部画像処理装置３３も、ユーザの操作によってユーザ設定装置７に設定されたタイミングに基づいて、間引き抽出画像パケットを送信するタイミングを調整するが、外部画像処理装置３３に備えた通信結果送信手段３ｇのよる通信結果の送信先と、送信タイミング調整手段３ｓおよび３ｔに入力する間引き抽出画像パケットを送信するタイミングの入力元が異なるのみで、それぞれの構成要素の動作は同じである。従って、外部画像処理装置３３のそれぞれの構成要素の動作に関する詳細な説明は、省略する。
【０１６７】
通信結果送信手段３ｇは、通信エラーが発生するタイミングの結果である通信結果を、ネットワークを介して内視鏡装置２４の送信タイミング表示手段２ｖに送信する。
【０１６８】
通信結果解析手段２ｏおよび２ｐは、外部画像処理装置３３が内視鏡装置２４に処理画像データを送信した場合において、対応する通信エラー判定手段２ｅまたは２ｆから入力された通信エラーの判定結果に基づいて解析した、通信エラーが発生するタイミングの結果（通信結果）のそれぞれを、送信タイミング表示手段２ｖに出力する。
【０１６９】
送信タイミング表示手段２ｖは、通信結果送信手段３ｇから入力された通信結果や、通信結果解析手段２ｏおよび２ｐのそれぞれから入力された、通信エラーが発生するタイミングの結果を、表示装置４および外部出力端子５にそれぞれ出力する。これにより、内視鏡装置２４は、本第５の実施形態の内視鏡システム５００において通信エラーが発生するタイミングの情報を、ユーザが認識できるように提示することができる。
【０１７０】
ユーザは、内視鏡装置２４から提示された通信エラーが発生するタイミングの情報を参照して、ユーザ設定装置７を操作し、間引き抽出画像パケットを送信するタイミングを設定する。ユーザ設定装置７は、ユーザによって設定された、間引き抽出画像パケットを送信するタイミングの情報を、内視鏡装置２４に備えた送信タイミング調整手段２ｋ、および外部画像処理装置３３に備えた送信タイミング調整手段３ｓと送信タイミング調整手段３ｔとに、それぞれ出力する。
【０１７１】
送信タイミング調整手段２ｋは、ユーザ設定装置７から入力された間引き抽出画像パケットを送信するタイミングの情報に基づいて、間引き抽出画像パケットを送信するタイミングを、通信エラーが発生するタイミングからずらすように調整し、調整したタイミングを、パケット選択送信手段２ｘに出力する。同様に、送信タイミング調整手段３ｓおよび３ｔのそれぞれは、ユーザ設定装置７から入力された間引き抽出画像パケットを送信するタイミングの情報に基づいて、間引き抽出画像パケットを送信するタイミングを調整し、調整したタイミングを、対応するパケット選択送信手段３ｑまたは３ｒのいずれか一方に出力する。
【０１７２】
これにより、内視鏡装置２４および外部画像処理装置３３は、ユーザが設定したタイミング、すなわち、ユーザが許容する状態の範囲内で、間引き抽出画像パケットを確実に送信することができる。このことにより、内視鏡装置２４および外部画像処理装置３３は、動画のフレームを構成するために最低限必要な間引き抽出画像データを復元した結合画像データを生成することができ、内視鏡システム５００を使用した観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【０１７３】
なお、本第５の実施形態の内視鏡システム５００による画像データの通信タイミングは、間引き抽出画像パケットを送信するタイミングがユーザが設定したタイミングである以外、第４の実施形態の内視鏡システム４００における画像データの通信タイミングと同様であるため、詳細な説明は省略する。
【０１７４】
上記に述べたように、本第５の実施形態の内視鏡システム５００でも、第１〜第４の実施形態の内視鏡システムと同様に、動画のフレームを構成するために最低限必要な量にまでデータ量を少なくして抽出した間引き抽出画像データと、その他の付帯画像データとに分割した後に送信する。このとき、本第５の実施形態の内視鏡システム５００では、第４の実施形態の内視鏡システム４００と同様に、通信エラーが発生するタイミングを解析し、通信エラーが発生するタイミングを解析した結果（通信結果）をユーザが認識できるように提示する。そして、提示した通信結果に基づいてユーザが設定したタイミングで、間引き抽出画像パケットを送信する。これにより、本第５の実施形態の内視鏡システム５００では、ユーザが許容する状態の範囲内で、少なくとも、動画のフレームを構成するために最低限必要な画像データを確実に送信することができ、内視鏡システム５００を使用した観察に支障をきたすフレーム欠損が発生する割合を低減することができる。
【０１７５】
なお、本第５の実施形態の内視鏡システム５００においては、第４の実施形態の内視鏡システム４００と同様に、内視鏡装置２４から外部画像処理装置３３に原画像データを送信する際には１つの通信回線（単回線）を使用し、外部画像処理装置３３から内視鏡装置２４に処理画像データを送信する際には複数の通信回線を使用した場合について説明した。しかし、内視鏡装置２４と外部画像処理装置３３との間で行われる画像データの通信おいて使用する通信回線の数や、通信回線の数に応じて内視鏡装置２４と外部画像処理装置３３とに備える構成要素の数は、第４の実施形態の内視鏡システム４００と同様に、上述した例に限定されるものではない。
【０１７６】
また、本第５の実施形態の内視鏡システム５００においては、内視鏡装置２４に原画形式変換手段２ａを備えた構成について説明したが、内視鏡装置２４の構成は、上述した例に限定されるものではなく、原画形式変換手段２ａを備えない構成にすることもできる。
【０１７７】
＜第６の実施形態＞
次に、第６の実施形態の内視鏡システムについて説明する。図１０は、本第６の実施形態における内視鏡システムの概略構成の一例を示したブロック図である。図１０に示した内視鏡システム６００は、スコープ１と、内視鏡装置２５と、外部画像処理装置３２と、表示装置４と、処置具８とから構成されるシステムである。本第６の実施形態の内視鏡システム６００において、スコープ１と、外部画像処理装置３２と、表示装置４とは、第３の実施形態の内視鏡システム３００の構成要素と同様の構成要素である。また、第３の実施形態の内視鏡システム３００の構成要素と異なる本第６の実施形態の内視鏡システム６００の内視鏡装置２５においても、第３の実施形態の内視鏡システム３００と同様の構成を含んでいる。従って、第３の実施形態の内視鏡システム３００と同様の構成要素および構成には、同一の符号を付与し、詳細な説明は省略する。
【０１７８】
本第６の実施形態の内視鏡システム６００と、第３の実施形態の内視鏡システム３００との異なる点は、例えば、電気メスのような処置具８が接続された構成であることである。これにより、本第６の実施形態の内視鏡システム６００では、第３の実施形態の内視鏡システム３００に備えた内視鏡装置２２が、内視鏡装置２５に代わっている。また、内視鏡装置２５では、送信タイミング調整手段２ｚと、処置具制御情報取得手段２ｑが、第３の実施形態の内視鏡システム３００に備えた内視鏡装置２２の構成要素に追加されている。以下の説明においては、第３の実施形態の内視鏡システム３００に備えた内視鏡装置２２と異なる構成要素および動作について説明する。
【０１７９】
処置具制御情報取得手段２ｑは、処置具８から入力された処置具８を動作（駆動）させるための制御信号を取得し、取得した制御信号の情報を送信タイミング調整手段２ｚに出力する。
【０１８０】
送信タイミング調整手段２ｚは、処置具制御情報取得手段２ｑから送信されてきた処置具８の制御信号の情報に基づいて、処置具８が動作しない、すなわち、処置具８を使用する際に生じるノイズが発生しないタイミングを検出する。そして、送信タイミング調整手段２ｚは、処置具８が動作しないタイミングで間引き抽出画像パケットを優先して送信するように、間引き抽出画像パケットを送信するタイミングを調整し、調整したタイミングを、パケット選択送信手段２ｘに出力する。
【０１８１】
その後、パケット選択送信手段２ｘは、間引き抽出画像パケットと付帯画像パケットとを送信する際に、送信タイミング調整手段２ｚによって調整されたタイミングで、間引き抽出画像パケットを、ネットワークを介して外部画像処理装置３２のパケット受信手段３ｆに送信する。
【０１８２】
これにより、内視鏡装置２５は、処置具８を使用する際に生じるノイズなどの影響によって通信エラーが発生しないタイミングで、間引き抽出画像パケットを確実に外部画像処理装置３２に送信することができる。このことにより、外部画像処理装置３２は、動画のフレームを構成するために最低限必要な間引き抽出画像データを復元した結合画像データを生成することができ、内視鏡システム６００を使用した観察に支障をきたすようなフレーム欠損が発生する割合を低減することができる。
【０１８３】
なお、本第６の実施形態の内視鏡システム６００による画像データの通信タイミングは、処置具８が動作しないタイミングで間引き抽出画像パケットを優先して送信する以外、第１〜第５の実施形態の内視鏡システムにおける画像データの通信タイミングと同様であるため、詳細な説明は省略する。
【０１８４】
上記に述べたように、本第６の実施形態の内視鏡システム６００でも、第１〜第５の実施形態の内視鏡システムと同様に、動画のフレームを構成するために最低限必要な量にまでデータ量を少なくして抽出した間引き抽出画像データと、その他の付帯画像データとに分割した後に送信する。このとき、本第６の実施形態の内視鏡システム６００では、処置具８が動作しないタイミングを検出することによって、通信エラーが発生しないタイミングで間引き抽出画像データを優先的に送信する。これにより、処置具８が動作することによって内視鏡システム６００を使用する環境にノイズが発生した場合でも、処置具８が発生するノイズの影響によって通信エラーが発生するタイミングを回避して、少なくとも、動画のフレームを構成するために最低限必要な画像データを確実に送信することができ、内視鏡システム６００を使用した観察に支障をきたすフレーム欠損が発生する割合を低減することができる。
【０１８５】
なお、本第６の実施形態の内視鏡システム６００においては、第３の実施形態の内視鏡システム３００と同様に、内視鏡装置２５から外部画像処理装置３２に原画像データを送信する際には１つの通信回線（単回線）を使用し、外部画像処理装置３２から内視鏡装置２５に処理画像データを送信する際には複数の通信回線を使用した場合について説明した。しかし、内視鏡装置２５と外部画像処理装置３２との間で行われる画像データの通信おいて使用する通信回線の数や、通信回線の数に応じて内視鏡装置２５と外部画像処理装置３２とに備える構成要素の数は、第３の実施形態の内視鏡システム３００と同様に、上述した例に限定されるものではない。
【０１８６】
また、本第６の実施形態の内視鏡システム６００においては、内視鏡装置２５に原画形式変換手段２ａを備えた構成について説明したが、内視鏡装置２５の構成は、上述した例に限定されるものではなく、原画形式変換手段２ａを備えない構成にすることもできる。
【０１８７】
上記に述べたとおり、本発明を実施するための形態によれば、動画のフレームを構成するために最低限必要な量にまでデータ量を少なくして抽出した間引き抽出画像データと、その他の付帯画像データとに分割する。そして、間引き抽出画像データが確実に送信されるように、間引き抽出画像データが含まれる送信パケットを優先して送信する。これにより、ネットワークの通信回線の状態が悪く、再送要求が多発してしまうような状態であっても、少なくとも、間引き抽出画像データを確実に送信することができ、内視鏡システムを使用した観察に支障をきたすフレーム欠損が発生する割合を低減することができる。
【０１８８】
なお、本実施形態においては、間引き抽出画像データを間引いて抽出する際の間引き抽出方法の例をいくつか示したが、間引き抽出画像データの間引き抽出方法は、本発明を実施するための形態に限定されるものではなく、内視鏡システムにおいて有効な様々な間引き抽出方法を適宜適用することができる。また、本実施形態において示した間引き抽出方法を含め、いずれの間引き抽出方法も、本実施形態において示したそれぞれの内視鏡システムに適用することができる。
【０１８９】
また、本実施形態においては、ネットワークの通信回線の形式に関して規定していないが、ネットワークの通信回線の形式は、例えば、有線や無線など、いかなる形式であってもよい。また、１つの内視鏡システムにおいて使用するネットワークの通信回線の形式は、同じ形式のみではなく、異なる形式の通信回線を組み合わせたものであってもよい。
【０１９０】
また、本実施形態においては、スコープ１が、例えば、ＲＡＷデータなどの画像処理を施していない原画像データを出力する場合について説明したが、スコープ１が原画像データとして出力する被写体の画像データは、本発明を実施するための形態に限定されるものではない。例えば、撮影した被写体の画像データをスコープ１内で画像処理し、画像処理後した後の画像データを原画像データとして出力する構成であっても、本発明の考え方を適用することができる。
【０１９１】
以上、本発明の実施形態について、図面を参照して説明してきたが、具体的な構成はこの実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲においての種々の変更も含まれる。
【符号の説明】
【０１９２】
１００，２００，３００，４００，５００，６００・・・内視鏡システム
１・・・スコープ
２，２１，２２，２３，２４，２５・・・内視鏡装置，送信装置，受信装置
２ａ・・・原画形式変換手段
２ｃ・・・送信画像間引き分割手段
２ｄ，２ｉ，２ｊ・・・送信画像パケット変換手段
２ｅ，２ｆ・・・通信エラー判定手段
２ｇ，２ｎ・・・データ選択結合手段
２ｈ，２ｏ，２ｐ，２ｙ・・・通信結果送信手段
２ｋ，２ｚ・・・送信タイミング調整手段
２ｑ・・・処置具制御情報取得手段
２ｒ，２ｗ，２ｘ・・・パケット選択送信手段
２ｓ，２ｔ・・・パケット受信手段
２ｕ・・・通信結果受信手段
２ｖ・・・送信タイミング表示手段
３，３２，３３・・・外部画像処理装置，受信装置，送信装置
３ａ・・・通信エラー判定手段
３ｂ，３ｉ・・・データ選択結合手段
３ｃ・・・画像処理手段
３ｄ・・・送信画像間引き分割手段
３ｅ，３ｊ，３ｋ・・・送信画像パケット変換手段
３ｆ・・・パケット受信手段
３ｇ・・・通信結果送信手段
３ｈ，３ｌ，３ｍ，３ｑ，３ｒ・・・パケット選択送信手段
３ｎ・・・通信結果解析手段
３ｓ，３ｔ・・・送信タイミング調整手段
３ｕ・・・通信結果受信手段
４・・・表示装置
５・・・外部出力端子
７・・・ユーザ設定装置
８・・・処置具
【図１】
2013255749.tif 000003
【図２】
2013255749.tif 000004
【図３】
2013255749.tif 000005
【図４】
2013255749.tif 000006
【図５】
2013255749.tif 000007
【図６】
2013255749.tif 000008
【図７】
2013255749.tif 000009
【図８】
2013255749.tif 000010
【図９】
2013255749.tif 000011
【図１０】
2013255749.tif 000012
【図１１】
2013255749.tif 000013