(57)【要約】  本発明にかかる撮像システムは、照明光を出射する光源部と、受光した光量に応じた電荷を蓄積するとともに、蓄積した電荷をローリングシャッタ方式により信号値として読み出す撮像部と、被検体の声帯の振動の入力を受け付ける声帯振動入力部と、声帯の振動の周波数を検出する声帯周波数検出部と、信号値の読み出し期間における前記照明光の出射を制御する照明制御部と、を備える。
2019155902.tif 000002
【特許請求の範囲】
【請求項１】
照明光を出射する光源部と、
受光した光量に応じた電荷を蓄積するとともに、蓄積した電荷をローリングシャッタ方式により信号値として読み出す撮像部と、
被検体の声帯の振動の入力を受け付ける声帯振動入力部と、
前記声帯の振動の周波数を検出する声帯周波数検出部と、
前記信号値の読み出し期間における前記照明光の出射を制御する照明制御部と、
を備えることを特徴とする撮像システム。
【請求項２】
前記照明制御部は、
前記撮像部が前記電荷を蓄積する露光期間における前記照明光の出射タイミングを、各フレーム内で前記周波数の同一の位相に設定し、
前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の平均に設定するとともに、
前記読み出し期間における前記照明光の発光強度と、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の発光強度とを同じにする
ことを特徴とする請求項１に記載の撮像システム。
【請求項３】
前記照明制御部は、
前記撮像部が前記電荷を蓄積する露光期間における前記照明光の出射タイミングを、各フレーム内で前記周波数の同一の位相に設定し、
前記読み出し期間における前記照明光の発光強度を、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の発光強度よりも小さくする
ことを特徴とする請求項１に記載の撮像システム。
【請求項４】
前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、当該読み出し期間より時系列で前のフレームの前記露光期間において設定された位相に設定する
ことを特徴とする請求項３に記載の撮像システム。
【請求項５】
前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、当該読み出し期間より時系列で後のフレームの前記露光期間において設定された位相に設定する
ことを特徴とする請求項３に記載の撮像システム。
【請求項６】
前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の間の位相に設定する
ことを特徴とする請求項３に記載の撮像システム。
【請求項７】
前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の平均に設定する
ことを特徴とする請求項６に記載の撮像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、照明光を出射する光源と撮像素子とを備えた撮像システムに関する。
【背景技術】
【０００２】
従来、医療分野においては、被検体内部の観察のために内視鏡システムが用いられている。内視鏡システムは、一般に、患者等の被検体内に細長形状をなす可撓性の挿入部を挿入し、この挿入部先端から照明光を出射し、この照明光の反射光を挿入部先端の撮像部で受光することによって、体内画像を撮像する。このように撮像された生体画像は、この内視鏡システムのディスプレイに表示される。【０００３】
発声時の声帯運動を観察するような、声帯を観察対象とする場合、ストロボ発光により間欠的に声帯を照明して声帯を撮像する（例えば、特許文献１を参照）。図７および図８は、従来の内視鏡システムにおける発光タイミングを説明する図である。従来、ストロボ発光により撮像する場合、声帯周波数からずらして、異なる位相（位相ＰE１０１、ＰE１０２、ＰE１０３、・・・、ＰE１０８、・・・）で発光させていた（図７参照）。この際、１フレームに相当する期間（例えば、フレーム期間Ｆ１０１、Ｆ１０２）において互いに異なる位相で複数回、声帯が照明される。一方で、特許文献１では、１フレーム内の複数回の発光による画像のぶれを抑制するため、同一フレーム内における発光タイミングを、同じ位相（位相ＰE１１１、ＰE１１２、ＰE１１３、・・・）に揃えている（図８参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−１７２０８８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、特許文献１は、グローバルシャッタ方式による撮像を前提としている。一方、ＣＭＯＳ（Complementary  Metal  Oxide  Semiconductor）撮像素子を採用し、水平ラインごとに露光および読み出しのタイミングを変えるローリングシャッタ方式を適用した場合には、読出し期間において露光時間が前後のフレームで重複するため、上述したようにフレーム内で位相を揃えても、一方のフレームの一部で、発光した際の位相が異なってしまう。これにより、フレームによっては画像にぶれが生じる。【０００６】
本発明は、上記に鑑みてなされたものであって、ローリングシャッタ方式を適用した場合でも画像のぶれを抑制することができる撮像システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明にかかる撮像システムは、照明光を出射する光源部と、受光した光量に応じた電荷を蓄積するとともに、蓄積した電荷をローリングシャッタ方式により信号値として読み出す撮像部と、被検体の声帯の振動の入力を受け付ける声帯振動入力部と、前記声帯の振動の周波数を検出する声帯周波数検出部と、前記信号値の読み出し期間における前記照明光の出射を制御する照明制御部と、を備えることを特徴とする。【０００８】
また、本発明にかかる撮像システムは、上記発明において、前記照明制御部は、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の出射タイミングを、各フレーム内で前記周波数の同一の位相に設定し、前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の平均に設定するとともに、前記読み出し期間における前記照明光の発光強度と、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の発光強度とを同じにすることを特徴とする。【０００９】
また、本発明にかかる撮像システムは、上記発明において、前記照明制御部は、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の出射タイミングを、各フレーム内で前記周波数の同一の位相に設定し、前記読み出し期間における前記照明光の発光強度を、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の発光強度よりも小さくすることを特徴とする。【００１０】
また、本発明にかかる撮像システムは、上記発明において、前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、当該読出し期間より時系列で前のフレームの前記露光期間において設定された位相に設定することを特徴とする。【００１１】
また、本発明にかかる撮像システムは、上記発明において、前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、当該読出し期間より時系列で後のフレームの前記露光期間において設定された位相に設定することを特徴とする。【００１２】
また、本発明にかかる撮像システムは、上記発明において、前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の間の位相に設定することを特徴とする。【００１３】
また、本発明にかかる撮像システムは、上記発明において、前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の平均に設定することを特徴とする。
【発明の効果】
【００１４】
本発明によれば、ローリングシャッタ方式を適用した場合でも画像のぶれを抑制することができるという効果を奏する。
【図面の簡単な説明】
【００１５】
【図１】図１は、本発明の実施の形態１にかかる内視鏡システムの概略構成を示す図である。
【図２】図２は、本発明の実施の形態１にかかる内視鏡システムの概略構成を示すブロック図である。
【図３】図３は、本発明の実施の形態１にかかる内視鏡システムの照明制御部が行うストロボ発光処理を説明する図である。
【図４】図４は、本発明の実施の形態１にかかる内視鏡システムの照明制御部が行うストロボ発光処理を説明する図である。
【図５】図５は、本発明の実施の形態２にかかる内視鏡システムの照明制御部が行うストロボ発光処理を説明する図である。
【図６】図６は、本発明の実施の形態２の変形例にかかる内視鏡システムの照明制御部が行うストロボ発光処理を説明する図である。
【図７】図７は、従来の内視鏡システムにおける発光タイミングを説明する図である。
【図８】図８は、従来の内視鏡システムにおける発光タイミングを説明する図である。
【発明を実施するための形態】
【００１６】
以下、本発明を実施するための形態（以下、「実施の形態」という）を説明する。実施の形態では、本発明にかかる撮像システムの一例として、患者等の被検体の体腔内の画像を撮像して表示する医療用の内視鏡システムについて説明する。また、この実施の形態により、この発明が限定されるものではない。さらに、図面の記載において、同一部分には同一の符号を付して説明する。
【００１７】
（実施の形態１）
図１は、本発明の実施の形態１にかかる内視鏡システムの概略構成を示す模式図である。図１に示すように、本実施の形態１にかかる内視鏡システム１は、被検体内に導入され、被検体の体内を撮像して被検体内の画像信号を生成する内視鏡２（スコープ）と、音声が入力される音声入力装置３と、内視鏡２によって撮像された撮像信号に対して所定の画像処理を行うとともに内視鏡システム１の各部を制御する処理装置４と、内視鏡２の照明光（観察光）としてパルス光を生成する光源装置５（光源部）と、処理装置４が画像処理を施して生成した画像信号に対応する画像を表示する表示装置６と、を備える。
【００１８】
内視鏡２は、被検体内に挿入される挿入部２１と、挿入部２１の基端部側であって術者が把持する操作部２２と、操作部２２より延伸する可撓性のユニバーサルコード２３と、を備える。
【００１９】
挿入部２１は、照明ファイバ（ライトガイドケーブル）および電気ケーブル等を用いて実現される。挿入部２１は、被検体内を撮像する撮像素子を内蔵した撮像部を有する先端部２１１と、複数の湾曲駒によって構成された湾曲自在な湾曲部２１２と、湾曲部２１２の基端部側に設けられた可撓性を有する可撓管部２１３と、を有する。先端部２１１には、照明レンズを介して被検体内を照明する照明部、被検体内を撮像する観察部、処理具用チャンネルを連通する開口部および送気・送水用ノズル（図示せず）が設けられている。
【００２０】
操作部２２は、湾曲部２１２を上下方向および左右方向に湾曲させる湾曲ノブ２２１と、被検体の体腔内に生体鉗子、レーザメス等の処置具が挿入される処置具挿入部２２２と、処理装置４、光源装置５、送気装置、送水装置および送ガス装置等の周辺機器を操作する複数のスイッチ部２２３と、を有する。処置具挿入部２２２から挿入された処置具は、内部に設けられた処置具用チャンネルを経て挿入部２１先端の開口部から表出する。
【００２１】
ユニバーサルコード２３は、照明ファイバおよび電気ケーブル等を用いて構成される。ユニバーサルコード２３は、基端で分岐しており、分岐した一方の分岐コード２３１の端部がコネクタ２３２であり、他方の基端がコネクタ２３３である。コネクタ２３２は、処理装置４に対して着脱自在であり、コネクタ２３３は、光源装置５に対して着脱自在である。ユニバーサルコード２３は、光源装置５から出射された照明光を、コネクタ２３２、操作部２２および可撓管部２１３を介して先端部２１１に伝播する。ユニバーサルコード２３は、先端部２１１に設けられた撮像部が撮像した撮像信号を処理装置４に伝送する。
【００２２】
挿入部２１およびユニバーサルコード２３には、光源装置５からの照明光を導光する照明ファイバ２１４（図２参照）が配設されている。照明ファイバ２１４の一端は挿入部２１の先端面に位置し、他端はユニバーサルコード２３の光源装置５との接続面に位置している。
【００２３】
音声入力装置３は、被写体が声帯である場合、声帯から発せられた音声の入力を受け付ける。コード３１は、先端が音声入力装置３と接続しており、基端のコネクタ３１１は、処理装置４に対して着脱自在である。音声入力装置３は、コード３１およびコネクタ３１１を介して、入力された音声を処理装置４に出力する。音声入力装置３は、声帯振動入力部に相当する。
【００２４】
処理装置４は、ユニバーサルコード２３を介して入力された内視鏡２の先端部２１１における撮像部が撮像した被検体内の撮像信号に対して所定の画像処理を施す。処理装置４は、ユニバーサルコード２３を介して内視鏡２の操作部２２におけるスイッチ部２２３から送信された各種の指示信号に基づいて、内視鏡システム１の各部を制御する。
【００２５】
光源装置５は、パルス状の白色光を照明光（以下、パルス光という）として発する光源や集光レンズ等を用いて構成される。光源装置５では、処理装置４から調光信号を受信し、該調光信号に基づいて、光源を駆動する駆動タイミング（発光期間）がＰＷＭ（Pulse  Width  Modulation）制御される。このため、光源装置５は、照明制御部４０８の制御のもと、パルス駆動によりパルス光を出射する。光源装置５は、光源からのパルス光を、コネクタ２３２およびユニバーサルコード２３（照明ファイバ）を介して接続された内視鏡２へ、被写体である被検体内へ向けて照明（間欠照明）するための照明光として供給する。
【００２６】
表示装置６は、液晶または有機ＥＬ（Electro  Luminescence）を用いた表示ディスプレイ等を用いて構成される。表示装置６は、映像ケーブル６１を介して処理装置４によって生成された表示用の画像信号に対応する画像を含む各種情報を表示する。これにより、術者は、表示装置６が表示する画像（体内画像）を見ながら内視鏡２を操作することにより、被検体内の所望の位置の観察および性状を判定することができる。
【００２７】
つぎに、図１で説明した内視鏡２、音声入力装置３、処理装置４および光源装置５の構成について説明する。図２は、内視鏡システム１の構成を模式的に示すブロック図である。
【００２８】
内視鏡２は、先端部２１１に撮像部２４を有する。撮像部２４は、後述する受光部２４２ａの受光面側に配置された対物レンズ等の光学系２４１と、光学系２４１の結像位置に設けられ、光学系２４１が集光した光を受光して電気信号に光電変換する撮像素子２４２と、を備える。
【００２９】
撮像素子２４２は、ＣＭＯＳ（Complementary  Metal  Oxide  Semiconductor）イメージセンサを用いて実現される。撮像素子２４２は、受光部２４２ａと、読出し部２４２ｂと、を有する。
【００３０】
受光部２４２ａは、受光面に、光源装置５によるパルス光で照明された被写体からの光を受光し、受光した光を光電変換して電気信号を生成する。具体的には、受光部２４２ａは、光量に応じた電荷を蓄積するフォトダイオードや、フォトダイオードから転送される電荷を電圧レベル（信号値）に変換するコンデンサなどをそれぞれ有する複数の画素がマトリックス状に配列され、各画素が光学系２４１からの光を光電変換して電気信号を生成する。受光部２４２ａは、二以上の画素が、水平方向に沿って配置する画素行（水平ライン）を、垂直方向に複数並べて配置される。
【００３１】
読出し部２４２ｂは、受光部２４２ａの複数の画素のうち読み出し対象として任意に設定された画素が生成した電気信号（信号値）を順次読み出して、撮像信号として出力する。読出し部２４２ｂは、受光部２４２ａにおける複数の画素に対する露光と複数の画素からの電気信号の読み出しとを行う。読出し部２４２ｂは、マトリックス状に配列された複数の画素がそれぞれ生成した電気信号を水平ライン（画素行）毎に順次読み出す。読出し部２４２ｂは、露光および読み出しを行う撮像動作を先頭の水平ラインから実行し、水平ラインごとにタイミングをずらして、電荷リセット（コンデンサのリセット）、露光および読み出しを行うローリングシャッタ方式によって撮像信号を生成する。
【００３２】
したがって、撮像部２４においては、１つの撮像期間（フレーム）であっても、水平ラインごとに露光タイミングおよび読み出しタイミングがそれぞれ異なる。読出し部２４２ｂは、受光部２４２ａの複数の画素から読み出した電気信号（撮像信号）を、ケーブル（不図示）およびコネクタ２３２を介して、処理装置４に出力する。
【００３３】
次に、処理装置４について説明する。処理装置４は、ＡＧＣ（Auto  Gain  Control）４０１と、ストロボ処理部４０２と、画像処理部４０３と、メモリ４０４と、表示制御部４０５と、入力部４０６と、声帯周波数検出部４０７と、照明制御部４０８と、制御部４０９と、を備える。本実施の形態では、処理装置４に設けられる図示しないクロック生成器が生成したクロック信号に基づいて、処理装置４ならびに内視鏡２および光源装置５が動作する。
【００３４】
ＡＧＣ４０１は、電気信号の増幅率（ゲイン）を調整して一定の出力レベルを維持する。ＡＧＣ４０１は、ＣＰＵ（Central  Processing  Unit）等の汎用プロセッサや、ＡＳＩＣ（Application  Specific  Integrated  Circuit）、処理内容を書き換え可能なプログラマブルロジックデバイスであるＦＰＧＡ（Field  Programmable  Gate  Array）等の特定の機能を実行する各種演算回路等の専用プロセッサを用いて構成される。
【００３５】
ストロボ処理部４０２は、光源装置５からパルス光による間欠照明の制御用のＰＷＭ信号を取得して、該ＰＷＭ信号と対応付けてＡＧＣ４０１から入力された撮像信号を画像処理部４０３に出力する。ストロボ処理部４０２は、ＣＰＵ等の汎用プロセッサや、ＡＳＩＣ、ＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサを用いて構成される。
【００３６】
画像処理部４０３は、撮像部２４の読出し部２４２ｂによって読み出された複数の画素の電気信号（撮像信号）に対し、所定の信号処理を行って画像信号を生成する。たとえば、画像処理部４０３は、撮像信号に対して、少なくとも、オプティカルブラック減算処理、ホワイトバランス（ＷＢ）調整処理、撮像素子がベイヤー配列の場合には同時化処理、カラーマトリクス演算処理、ガンマ補正処理、色再現処理およびエッジ強調処理等を含む画像処理を行う。画像処理部４０３は、ＣＰＵ等の汎用プロセッサや、ＡＳＩＣ、ＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサを用いて構成される。
【００３７】
メモリ４０４は、処理装置４および光源装置５を動作させるための各種プログラムを記憶する。メモリ４０４は、処理装置４の処理中の情報を一時的に記録する。メモリ４０４は、受光部２４２ａにおける複数の画素の行列配置に対応させて、読出し部２４２ｂによって読み出された撮像信号を、フレーム単位で記憶する。メモリ４０４は、画像処理部４０３によって生成された画像信号をフレーム単位で記憶する。メモリ４０４は、ＲＡＭ（Random  Access  Memory）、ＲＯＭ（Read  Only  Memory）等によって構成される。メモリ４０４は、処理装置４の外部から装着されるメモリカード等を用いて構成されてもよい。
【００３８】
表示制御部４０５は、表示装置６の表示周期に合わせて、画像処理部４０３が生成した複数のフレームの画像信号から表示用の画像信号を選択し、該選択した画像信号を表示装置６に表示させるための画像信号として出力する。あるいは、表示制御部４０５は、表示装置６の表示周期ごとに、画像処理部４０３が生成した複数のフレームの画像信号を合成して、表示用画像信号を生成し、表示装置６に出力する。表示制御部４０５は、表示用の画像信号を、デジタル信号からアナログ信号に変換し、変換したアナログの画像信号をハイビジョン方式等のフォーマットに変更、表示装置６へ出力する。表示制御部４０５は、ＣＰＵ等の汎用プロセッサや、ＡＳＩＣ、ＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサを用いて構成される。
【００３９】
入力部４０６は、マウス、キーボードおよびタッチパネル等の操作デバイスを用いて実現され、内視鏡システム１の各種指示情報（指示信号）の入力を受け付ける。具体的には、入力部４０６は、被検体情報（たとえばＩＤ、生年月日、名前等）、内視鏡２の識別情報（たとえばＩＤや検査対応項目）および検査内容等の各種指示情報の入力を受け付ける。
【００４０】
声帯周波数検出部４０７は、音声入力装置３に入力され、コード３１およびコネクタ３１１を介して処理装置４に入力された音声（声帯の振動）の周波数（声帯周波数）を検出する。本実施の形態１において、この音声は、被検体の声帯から発せられたものである。声帯周波数検出部４０７は、検出した音声の周波数を制御部４０９に出力する。声帯周波数検出部４０７は、ＣＰＵ等の汎用プロセッサや、ＡＳＩＣ、ＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサを用いて構成される。
【００４１】
照明制御部４０８は、光源装置５の動作を制御する。具体的には、照明制御部４０８は、声帯周波数検出部４０７によって検出された音声の周波数に同期させて、光源５１によるパルス光の出射タイミングおよび照明期間を制御する。照明制御部４０８は、声帯周波数検出部４０７が検出した声帯周波数と、予め設定されている発光時間（パルス幅またはデューティ比）と、をもとに光源５１を駆動するためのパルスを生成し、該パルスを含む光源制御用のＰＷＭ信号を生成してパルス生成部５３に出力する。また、照明制御部４０８は、生成したＰＷＭ信号を制御部４０９に出力する。照明制御部４０８は、ＣＰＵ等の汎用プロセッサや、ＡＳＩＣ、ＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサを用いて構成される。
【００４２】
照明制御部４０８は、位相設定部４０８ａを有する。位相設定部４０８ａは、声帯振動（声帯周波数）に対して、ストロボ光を発光させる位相を設定する。位相設定部４０８ａによるストロボ発光の位相設定については後述する。
【００４３】
制御部４０９は、処理装置４の各部の処理動作を制御する。制御部４０９は、処理装置４の各構成に対する指示情報やデータの転送等を行うことによって、処理装置４の動作を制御する。制御部４０９は、各ケーブルを介して撮像部２４および光源装置５それぞれに接続されている。なお、制御部４０９は、撮像部２４の動作についても制御する。本実施の形態では、撮像素子２４２および光源５１は、制御部４０９の制御のもと、撮像タイミングおよび照明タイミングの同期をとって駆動するものとして説明する。制御部４０９は、ＣＰＵ等の汎用プロセッサや、ＡＳＩＣ、ＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサを用いて構成される。
【００４４】
つぎに、光源装置５について説明する。光源装置５は、光源５１と、光源ドライバ５２と、パルス生成部５３と、を備える。
【００４５】
光源５１は、パルス状の白色光（パルス光）を発する白色ＬＥＤ等の光源と、集光レンズなどの光学系と用いて構成される。光源５１は、内視鏡２に供給する照明光を発生し、照明ファイバなどを介して内視鏡２に照明光を導光する。
【００４６】
光源ドライバ５２は、パルス生成部５３が生成したＰＷＭ信号に基づいて、光源５１に所定の電力を供給する。これにより、光源５１から発せられた光（パルス光）は、コネクタ２３３およびユニバーサルコード２３を介して挿入部２１の先端部２１１から被写体に照明される。
【００４７】
パルス生成部５３は、照明制御部４０８から取得したＰＷＭ信号をもとに光源５１を駆動するためのパルスを生成し、該パルスを含む光源制御信号を生成して光源ドライバ５２に出力する。
【００４８】
続いて、位相設定部４０８ａによるストロボ発光の位相設定について、図３および図４を参照して説明する。図３および図４は、本発明の実施の形態１にかかる内視鏡システムの照明制御部が行うストロボ発光処理を説明する図である。従来、ストロボ発光により撮像する場合、声帯周波数において位相をずらしながら発光させる。位相設定部４０８ａは、図３に示す声帯振動（声帯周波数）に対し、仮の発光タイミングの位相（位相ＰPE１、ＰPE２、ＰPE３、・・・、ＰPE１６、・・・）を設定する。仮の発光タイミングで行うストロボ発光では、上述したような、一つの周期において位相を少しずつずらしながら照明光が間欠的に出射される。このため、各フレーム（フレームＦ１、Ｆ２、Ｆ３、Ｆ４、・・・）において、異なる位相、すなわち異なる開放状態の声帯に対して照明光が複数回照射される。ここでいう「フレーム」とは、すべての画素が露光される期間であって、表示装置６において一つの画像が表示される期間に相当する。
【００４９】
位相設定部４０８ａは、読出し部２４２ｂの読出しタイミングを参照して、撮像部２４が行う撮像動作の全露光期間と、読出し期間とを設定する。位相設定部４０８ａは、例えば、図３に示すように、読み出しを開始するライン（ライン１）から最後のライン（ラインＮ：Ｎは２以上の自然数）までの総読出期間ＴR１、ＴR２、ＴR３、・・・を設定する。その後、位相設定部４０８ａは、時系列で隣り合う総読出期間の間であって、すべての画素が電荷を蓄積する全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・を設定する。全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・は、一つの画像を表示するフレーム（ビデオフレーム）Ｆ１、Ｆ２、Ｆ３、Ｆ４、・・・と同期している。
【００５０】
その後、位相設定部４０８ａは、全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・について、各々の期間のストロボ発光する位相を設定する。本実施の形態１において、位相設定部４０８ａは、各全露光期間の最初の位相を、その期間の発光位相に設定する。位相設定部４０８ａは、例えば、図４に示すように、全露光期間ＴE１について、同じ位相を発光タイミングに設定する。全露光期間ＴE１では、仮の発光タイミングにおける位相を、最初の発光タイミングの位相ＰPE１と同じ位相ＰE１に設定する。具体的には、全露光期間ＴE１において、図３に示す位相ＰPE２、ＰPE３を、位相ＰPE１と同じ位相ＰE１に変更する。位相設定部４０８ａは、同様にして、全露光期間ＴE２、ＴE３、ＴE４、・・・について、位相ＰPE５、ＰPE９、ＰPE１４と同じとなる位相ＰE２、ＰE３、ＰE４、・・・を、ストロボ発光する位相にそれぞれ設定する。上述した位相設定により、被検体の声帯は、各フレームにおいて同じ開放状態で照明される。これにより、全露光期間において取得されうる画像は、ぶれや、明るさのムラを抑制した声帯像となる。なお、本実施の形態１では、各全露光期間における最初の発光タイミングの位相に設定する例を説明したが、同一の全露光期間に含まれる発光タイミングの位相の平均値を、ストロボ発光する位相に設定してもよい。
【００５１】
また、位相設定部４０８ａは、全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・の位相設定後、総読出期間ＴR１、ＴR２、ＴR３、・・・について、各々の期間の発光する位相を設定する。位相設定部４０８ａは、読出し期間の前後のフレームにおいて設定されている位相の平均をとり、この平均した位相を、その期間の発光位相に設定する。位相設定部４０８ａは、例えば、図４に示すように、総読出期間ＴR１について、フレームＦ１で設定された位相ＰE１と、フレームＦ２で設定された位相ＰE２との平均値を算出し、この平均した位相（位相ＰE１１）を、ストロボ発光する位相に設定する。位相設定部４０８ａは、同様にして、総読出期間ＴR２、ＴR３、・・・について、前後のフレームの位相を平均した位相（位相ＰE１２、ＰE１３、・・・）を、ストロボ発光する位相に設定する。読出し期間では、二つのフレームの露光処理が混在しているため、各フレームの位相の間の位相で発光することによって、二つのフレーム間で生じるぶれを平均化することができる。
【００５２】
照明制御部４０８は、位相設定部４０８ａが設定した位相に基づいてＰＷＭ信号を生成する。パルス生成部５３は、取得したＰＷＭ信号に基づいてパルスを生成し、光源ドライバ５２を駆動させて光源５１にストロボ発光させる。ストロボ発光は、すべての発光の発光強度は同じとする。なお、全露光期間と総読出期間との発光強度は、互いに異なる強度に設定してもよい。
【００５３】
以上説明した実施の形態１では、全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・については、ストロボ発光する位相を、フレーム内で同じ位相に設定し、かつ、総読出期間ＴR１、ＴR２、ＴR３、・・・については、前後のフレームにおいて設定されている位相の平均をとり、この平均した位相を、その期間の発光位相に設定している。本実施の形態１によれば、ローリングシャッタ方式を適用し、連続して撮像する場合でも、声帯像のぶれを抑制することができる。
【００５４】
（実施の形態２）
続いて、本発明の実施の形態２について説明する。本実施の形態２に係る内視鏡システムは、上述した内視鏡システム１と同様の構成を備える。本実施の形態２は、上述した実施の形態１に対し、読出し期間における位相設定が異なる。以下、上述した実施の形態１とは異なる設定処理について、図５を参照して説明する。図５は、本発明の実施の形態２にかかる内視鏡システムの照明制御部が行うストロボ発光処理を説明する図である。
【００５５】
位相設定部４０８ａは、全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・については、実施の形態１と同様にして、各々の期間のストロボ発光する位相を設定する。具体的に、位相設定部４０８ａは、各全露光期間の最初の位相を、その期間の発光位相に設定する。位相設定部４０８ａは、例えば、図５に示すように、全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・について、位相ＰE１、ＰE２、ＰE３、ＰE４、・・・を、ストロボ発光する位相にそれぞれ設定する。
【００５６】
位相設定部４０８ａは、全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・の位相設定後、総読出期間ＴR１、ＴR２、ＴR３、・・・について、各々の期間の発光する位相を設定する。本実施の形態２において、位相設定部４０８ａは、読出し期間の前後のフレームにおいて設定されている位相のうち、時系列で前のフレームの位相を、その期間の発光位相に設定する。位相設定部４０８ａは、例えば、図５に示すように、総読出期間ＴR１について、フレームＦ１で設定された位相ＰE１と同じ位相（位相ＰE２１）を、ストロボ発光する位相に設定する。位相設定部４０８ａは、同様にして、総読出期間ＴR２、ＴR３、・・・について、読出し期間より前のフレームの位相と同じ位相（位相ＰE２２、ＰE２３、・・・）を、ストロボ発光する位相に設定する。
【００５７】
照明制御部４０８は、位相設定部４０８ａが設定した位相に基づいてＰＷＭ信号を生成する。パルス生成部５３は、取得したＰＷＭ信号に基づいてパルスを生成し、光源ドライバ５２を駆動させて光源５１にストロボ発光させる。本実施の形態２では、総読出期間の発光強度が、全露光期間の発光強度よりも小さく設定する。
【００５８】
以上説明した実施の形態２では、全露光期間については、ストロボ発光する位相を、フレーム内で同じ位相に設定し、かつ、総読出期間については、総読出期間よりも前のフレームにおいて設定されている位相を、その期間の発光位相に設定するとともに、総読出期間の発光強度が、全露光期間の発光強度よりも小さくなるように設定するようにした。これにより、読み出し期間において後のフレームの位相が、全露光期間の位相と異なっていても、総読出期間の露光による声帯像のぶれの影響を小さくすることができる。本実施の形態２によれば、ローリングシャッタ方式を適用し、連続して撮像する場合でも、声帯像のぶれを抑制することができる。
【００５９】
（実施の形態２の変形例）
続いて、本発明の実施の形態２の変形例について説明する。本変形例に係る内視鏡システムは、上述した内視鏡システム１と同様の構成を備える。本変形例は、上述した実施の形態２に対し、読出し期間における位相設定が異なる。以下、上述した実施の形態２とは異なる設定処理について、図６を参照して説明する。図６は、本発明の実施の形態２の変形例にかかる内視鏡システムの照明制御部が行うストロボ発光処理を説明する図である。
【００６０】
位相設定部４０８ａは、全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・については、実施の形態１、２と同様にして、各々の期間のストロボ発光する位相を設定する。具体的に、位相設定部４０８ａは、各全露光期間の最初の位相を、その期間の発光位相に設定する。
【００６１】
位相設定部４０８ａは、全露光期間ＴE１、ＴE２、ＴE３、ＴE４、・・・の位相設定後、総読出期間ＴR１、ＴR２、ＴR３、・・・について、各々の期間の発光する位相を設定する。本変形例において、位相設定部４０８ａは、読出し期間の前後のフレームにおいて設定されている位相のうち、時系列で後のフレームの位相を、その期間の発光位相に設定する。位相設定部４０８ａは、例えば、図６に示すように、総読出期間ＴR１について、フレームＦ２で設定された位相ＰE２と同じ位相（位相ＰE３１）を、ストロボ発光する位相に設定する。位相設定部４０８ａは、同様にして、総読出期間ＴR２、ＴR３、・・・について、読出し期間より後のフレームの位相と同じ位相（位相ＰE３２、ＰE３３、・・・）を、ストロボ発光する位相に設定する。
【００６２】
照明制御部４０８は、位相設定部４０８ａが設定した位相に基づいてＰＷＭ信号を生成する。パルス生成部５３は、取得したＰＷＭ信号に基づいてパルスを生成し、光源ドライバ５２を駆動させて光源５１にストロボ発光させる。本変形例では、総読出期間の発光強度を、全露光期間の発光強度よりも小さい値に設定する。
【００６３】
以上説明した変形例では、全露光期間については、ストロボ発光する位相を、フレーム内で同じ位相に設定し、かつ、総読出期間については、総読出期間よりも後のフレームにおいて設定されている位相を、その期間の発光位相に設定するとともに、総読出期間の発光強度を、全露光期間の発光強度よりも小さい値に設定した。これにより、読み出し期間において前のフレームの位相が、全露光期間の位相と異なっていても、総読出期間の露光による声帯像のぶれの影響を小さくすることができる。本変形例によれば、ローリングシャッタ方式を適用し、連続して撮像する場合でも、声帯像のぶれを抑制することができる。
【００６４】
なお、上述した変形例に係る位相設定例ほか、総読出期間の位相を、上述した実施の形態１のように前後のフレームの位相を平均した位相に設定してもよいし、図３に示すような従来設定される位相、例えば前後のフレームの全露光期間において設定される位相の間の位相に設定してもよい。
【００６５】
なお、上述した実施の形態１、２において、光源５１が出射する白色光（照明光）の光路上に配置され、回転することにより、白色光のうち所定の波長帯域の光のみを透過させる複数のフィルタを有する回転フィルタを備えてもよい。回転フィルタを設けることにより、赤色光（Ｒ）、緑色光（Ｇ）および青色光（Ｂ）それぞれの波長帯域を有する光を順次透過させて出射する。回転フィルタをパルス光の出射タイミングに合わせて回転制御することにより、光源５１が出射する白色光のうち、狭帯域化した赤色光（Ｒ照明）、緑色光（Ｇ照明）および青色光（Ｂ照明）いずれかの光を内視鏡２に順次出射（面順次方式）することができる。また、回転フィルタのほか、各色の波長帯域の光をそれぞれ出射する光源（例えばＬＥＤ光源）を用いるものであってもよい。
【００６６】
また、上述した実施の形態１、２では、撮像素子２４２が制御部４０９の制御のもとで動作するものとして説明したが、照明制御部４０８（位相設定部４０８ａ）を内視鏡２側に設けて、内視鏡２側でストロボ発光を制御してもよい。また、撮像素子２４２が処理装置４で生成されたクロック信号に基づき動作するものとして説明したが、内視鏡２にクロック生成部を設け、該クロック生成部が生成したクロック信号（内視鏡２で生成されたクロック信号）に基づき動作するものであってもよいし、外部のクロック発生器により生成されたクロック信号に基づいて動作するものであってもよい。
【００６７】
また、上述した実施の形態１、２では、ＡＧＣ４０１が処理装置４に設けられるものとして説明したが、内視鏡２（例えば撮像部２４）に設けられるものであってもよい。
【００６８】
また、上述した実施の形態１、２では、被写体が声帯であるものとして説明したが、声帯のほか、高速で振動し、声帯周波数検出部４０７により周波数を検出できる被写体であれば適用可能である。
【産業上の利用可能性】
【００６９】
以上のように、本発明にかかる撮像システムは、ローリングシャッタ方式を適用した場合でも画像のぶれを抑制するのに有用である。
【符号の説明】
【００７０】
１  内視鏡システム
２  内視鏡
３  音声入力装置
４  処理装置
５  光源装置
６  表示装置
２１  挿入部
２２  操作部
２３  ユニバーサルコード
２４  撮像部
４０１  ＡＧＣ
４０２  ストロボ処理部
４０３  画像処理部
４０４  メモリ
４０５  表示制御部
４０６  入力部
４０７  声帯周波数検出部
４０８  照明制御部
４０８ａ  位相設定部
４０９  制御部
５１  光源
５２  光源ドライバ
５３  パルス生成部
２３１  分岐コード
２３２，２３３  コネクタ
２１１  先端部
２１２  湾曲部
２１３  可撓管部
２４２  撮像素子
２４２ａ  受光部
２４２ｂ  読出し部
【図１】
2019155902.tif 000003
【図２】
2019155902.tif 000004
【図３】
2019155902.tif 000005
【図４】
2019155902.tif 000006
【図５】
2019155902.tif 000007
【図６】
2019155902.tif 000008
【図７】
2019155902.tif 000009
【図８】
2019155902.tif 000010
【手続補正書】
【提出日】令和2年5月25日(2020.5.25)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
照明光を出射する光源部と、
受光した光量に応じた電荷を蓄積するとともに、蓄積した電荷をローリングシャッタ方式により信号値として読み出す撮像部と、
被検体の所定部位の振動の周波数を検出する周波数検出部と、
前記信号値の読み出し期間における前記照明光の出射を制御する照明制御部と、
を備え、
前記照明制御部は、
前記撮像部が前記電荷を蓄積する露光期間における前記照明光の出射タイミングを、各フレーム内で前記周波数の同一の位相に設定し、
前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相を参照して設定する
ことを特徴とする撮像システム。
【請求項２】
前記照明制御部は、
前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の平均に設定するとともに、
前記読み出し期間における前記照明光の発光強度と、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の発光強度とを同じにする
ことを特徴とする請求項１に記載の撮像システム。
【請求項３】
前記照明制御部は、
前記読み出し期間における前記照明光の発光強度を、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の発光強度よりも小さくする
ことを特徴とする請求項１に記載の撮像システム。
【請求項４】
前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、当該読み出し期間より時系列で前のフレームの前記露光期間において設定された位相に設定する
ことを特徴とする請求項３に記載の撮像システム。
【請求項５】
前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、当該読み出し期間より時系列で後のフレームの前記露光期間において設定された位相に設定する
ことを特徴とする請求項３に記載の撮像システム。
【請求項６】
前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の間の位相に設定する
ことを特徴とする請求項３に記載の撮像システム。
【請求項７】
前記照明制御部は、前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の平均に設定する
ことを特徴とする請求項６に記載の撮像システム。
【請求項８】
被検体の声帯の振動の入力を受け付ける振動入力部、
をさらに備えることを特徴とする請求項１に記載の撮像システム。
【請求項９】
ローリングシャッタ方式によって画素に蓄積された電荷を読み出す撮像部、を有する内視鏡が接続される処理装置であって、
被検体の所定部位の周波数を検出する周波数検出部と、
前記電荷の読み出し期間における照明光の出射を制御する照明制御部と、
を備え、
前記照明制御部は、
前記撮像部が前記電荷を蓄積する露光期間における前記照明光の出射タイミングを、各露光期間内で前記周波数の同一の位相に設定し、
さらに、
前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相を参照して出射タイミングを設定する、
ことを特徴とする処理装置。
【請求項１０】
前記照明制御部は、
前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の平均に設定するとともに、
前記読み出し期間における前記照明光の発光強度と、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の発光強度とを同じにする
ことを特徴とする請求項９に記載の処理装置。
【請求項１１】
前記照明制御部は、
前記撮像部が前記電荷を蓄積する露光期間における前記照明光の出射タイミングを、各フレーム内で前記周波数の同一の位相に設定し、
前記読み出し期間における前記照明光の発光強度を、前記撮像部が前記電荷を蓄積する露光期間における前記照明光の発光強度よりも小さくする、
ことを特徴とする請求項９に記載の処理装置。
【請求項１２】
前記照明制御部は、
前記読み出し期間における前記照明光の出射タイミングを、当該読み出し期間より時系列で前のフレームの前記露光期間において設定された位相に設定する
ことを特徴とする請求項１１に記載の処理装置。
【請求項１３】
前記照明制御部は、
前記読み出し期間における前記照明光の出射タイミングを、当該読み出し期間より時系列で後のフレームの前記露光期間において設定された位相に設定する
ことを特徴とする請求項１１に記載の処理装置。
【請求項１４】
前記照明制御部は、
前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の間の位相に設定する
ことを特徴とする請求項１１に記載の処理装置。
【請求項１５】
前記照明制御部は、
前記読み出し期間における前記照明光の出射タイミングを、時系列で隣り合うフレームの前記露光期間において設定された各位相の平均に設定する
ことを特徴とする請求項１４に記載の処理装置。
【請求項１６】
前記周波数検出部は、被検体の声帯の周波数を検出する、
ことを特徴とする請求項９に記載の処理装置。
【国際調査報告】
2019155902.tif 000011
2019155902.tif 000012
2019155902.tif 000013