特許 5775986 内視鏡システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5775986

(24)【登録日】2015年7月10日

(45)【発行日】2015年9月9日

(54)【発明の名称】内視鏡システム

(51)【国際特許分類】

   A61B 1/04 20060101AFI20150820BHJP

【ＦＩ】

   A61B1/04 370

【請求項の数】5

【全頁数】17

(21)【出願番号】特願2015-512430(P2015-512430)

(86)(22)【出願日】2014年7月24日

(86)【国際出願番号】JP2014069604

(87)【国際公開番号】WO2015016137

(87)【国際公開日】20150205

【審査請求日】2015年3月4日

(31)【優先権主張番号】特願2013-160736(P2013-160736)

(32)【優先日】2013年8月1日

(33)【優先権主張国】JP

【早期審査対象出願】

(73)【特許権者】

【識別番号】000000376

【氏名又は名称】オリンパス株式会社

(74)【代理人】

【識別番号】100089118

【弁理士】

【氏名又は名称】酒井 宏明

(72)【発明者】

【氏名】大野 渉

(72)【発明者】

【氏名】竹腰 聡

(72)【発明者】

【氏名】武井 俊二

(72)【発明者】

【氏名】山崎 健二

【審査官】 門田 宏

(56)【参考文献】

【文献】 国際公開第２０１２／１７２９０８（ＷＯ，Ａ１）

【文献】 国際公開第２０１２／１７６５６１（ＷＯ，Ａ１）

【文献】 特開２０１２−１４３３１９（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ａ６１Ｂ １／００ − １／３２

Ｇ０２Ｂ ２３／２４ −２３／２６

(57)【特許請求の範囲】

【請求項1】

特定の物質からの戻り光を生じさせる照明光を視野領域に対して出射可能な照明部と、
前記視野領域からの前記戻り光を受光して光電変換することによって電気信号を生成する複数の画素が二次元面上に配置され、該複数の画素が生成した電気信号を画像情報として順次読み出し可能なセンサ部と、
前記電気信号を所定のフレーム周期ごとに読み出す読み出し部と、
前記複数の画素が蓄積する電荷を開放するためのリセットパルスを生成するリセットパルス生成部と、
生成順が連続する二つの前記リセットパルスがそれぞれ生成される間の期間に複数の前記フレーム周期が含まれるように前記リセットパルスの生成タイミングを調整するリセットパルス制御部と、
前記リセットパルスが生成されてから次の前記リセットパルスが生成されるまでの間に存在する複数の前記フレーム周期の各々において前記照明光が出射されるように前記照明部を制御する照明制御部と、
を備えたことを特徴とする内視鏡システム。

【請求項2】

前記センサ部が読み出した画像情報に含まれる画像の明るさを検出する明るさ検出部をさらに備え、
前記リセットパルス制御部は、
前記明るさ検出部が検出した画像の明るさに応じて前記リセットパルスの生成タイミングを調整することを特徴とする請求項１に記載の内視鏡システム。

【請求項3】

複数のフレーム間の被写体の動き量を検出する動き検出部をさらに備え、
前記リセットパルス制御部は、
前記画像の明るさおよび前記動き検出部が検出した前記被写体の動き量に応じて前記リセットパルスの生成タイミングを調整することを特徴とする請求項２に記載の内視鏡システム。

【請求項4】

前記照明部は、
前記照明光の１フレームにおける発光強度および／または発光時間をフレームごとに変更することを特徴とする請求項１に記載の内視鏡システム。

【請求項5】

前記画像情報に含まれる画像の増幅率をフレームごとに変更する増幅率調整部をさらに備えたことを特徴とする請求項１に記載の内視鏡システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、撮像用の複数の画素のうち読み出し対象として任意に指定された画素から光電変換後の電気信号を画素情報として出力可能である撮像素子を備えた内視鏡システムに関する。

【背景技術】

【0002】

従来、医療分野においては、患者等の被検体の臓器の観察等を行う際に内視鏡システムが用いられている。内視鏡システムは、被検体の体腔内に挿入される挿入部と、挿入部の先端に設けられて体内画像を撮像する撮像部と、撮像部が撮像した体内画像を表示可能な表示部とを有する。内視鏡システムを用いて体内画像を取得する際には、被検体の体腔内に挿入部を挿入した後、この挿入部の先端から所定の照明光を照射し、撮像部が画像を撮像する。

【0003】

近年では、撮像部としてＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサが適用されるようになっている（例えば、特許文献１を参照）。ＣＭＯＳイメージセンサは、画素に蓄えられた電荷に基づく画素情報の読み出しの仕方を任意に設定することができるため、全画素を同時に読み出すＣＣＤ（Charge Coupled Device）イメージセンサよりも多様な撮像を行うことができる。

【0004】

図１２は、ＣＭＯＳイメージセンサを用いた従来の内視鏡システムが行う画像取得方法の概要を模式的に示す図である。図１２において、期間Ｐ₁、Ｐ₂、Ｐ₃は、水平ラインごとの露光期間、露光後の画像信号の転送期間、リセット信号が発生するリセット期間をそれぞれ示している。また、図１２において、フレーム周期Ｔｆとリセット周期Ｔｒは等しい。

【0005】

ＣＭＯＳイメージセンサを適用する場合、画像信号およびリセットパルス群は、それぞれ水平ラインごとに転送または発生するため、最初の水平ラインと最後の水平ラインとでは、信号発生の時間差が生じることとなる（図１２のΔＴ）。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開２０１０−６８９９２号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

上述した従来の内視鏡システムでは、例えば自家蛍光や薬剤蛍光を検出して病変部、特定組織や欠陥などを検出する場合、それらが視野の遠点にあったり組織下に埋もれてしまったりして蛍光強度が低下していると、蛍光像のコントラストが低くなったりサイズが小さくなったりして、観察者が蛍光像を見落としてしまうおそれがあった。一方で、従来の内視鏡システムでは、視野の近点などの明るい像では画像が飽和してしまい、蛍光像の観察には適さないこともあった。

【0008】

蛍光強度の低下を回避するために、画像を取得する際の露光時間を長くしてフレームレートを落とすことも考えられる。しかしながら、この場合にはフレームレートの切り換えが必要となる上、動画特性が低下してしまい、操作性の悪化を招く可能性があった。動画特性の低下の問題を解決するには、フレームの補間や動作クロックの変更など、画像処理のプロセスを大きく変更しなければならなかった。このように、フレームレートを落とすことは、様々な問題を誘発するため、蛍光強度の低下を回避する方策として適切であるとは言いがたかった。

【0009】

本発明は、上記に鑑みてなされたものであって、フレームレートを変更することなく、ダイナミックレンジが広く視認性に優れた画像を取得することができる内視鏡システムを提供することを目的とする。

【課題を解決するための手段】

【0010】

上述した課題を解決し、目的を達成するために、本発明に係る内視鏡システムは、特定の物質からの戻り光を生じさせる照明光を視野領域に対して出射可能な照明部と、前記視野領域からの前記戻り光を受光して光電変換することによって電気信号を生成する複数の画素が二次元面上に配置され、該複数の画素が生成した電気信号を画像情報として順次読み出し可能なセンサ部と、前記複数の画素が蓄積する電荷を開放するためのリセットパルスを生成するリセットパルス生成部と、生成順が連続する二つの前記リセットパルスがそれぞれ生成される間の期間に画像の複数のフレームが少なくとも一部ずつ含まれるように前記リセットパルスの生成タイミングを調整するリセットパルス制御部と、を備えたことを特徴とする。

【0011】

また、本発明に係る内視鏡システムは、上記発明において、前記センサ部が読み出した画像情報に含まれる画像の明るさを検出する明るさ検出部をさらに備え、前記リセットパルス制御部は、前記明るさ検出部が検出した画像の明るさに応じて前記リセットパルスの生成タイミングを調整することを特徴とする。

【0012】

また、本発明に係る内視鏡システムは、上記発明において、複数のフレーム間の被写体の動き量を検出する動き検出部をさらに備え、前記リセットパルス制御部は、前記画像の明るさおよび前記動き検出部が検出した前記被写体の動き量に応じて前記リセットパルスの生成タイミングを調整することを特徴とする。

【0013】

また、本発明に係る内視鏡システムは、上記発明において、前記照明部は、前記照明光の１フレームにおける発光強度および／または発光時間を、前記複数のフレームを構成するフレームごとに変更することを特徴とする。

【0014】

また、本発明に係る内視鏡システムは、上記発明において、前記画像情報に含まれる画像の増幅率を、前記複数のフレームを構成するフレームごとに変更する増幅率調整部をさらに備えたことを特徴とする。

【発明の効果】

【0015】

本発明によれば、生成順が連続する二つのリセットパルスがそれぞれ生成される間の期間に画像の複数のフレームが少なくとも一部ずつ含まれるように前記リセットパルスの生成タイミングを調整するため、フレームレートを変更することなく、ダイナミックレンジが広く視認性に優れた画像を取得することができる。

【図面の簡単な説明】

【0016】

【図1】図１は、本発明の実施の形態１に係る内視鏡システムの概略構成を示す図である。

【図2】図２は、本発明の実施の形態１に係る内視鏡システムの要部の機能構成を示すブロック図である。

【図3】図３は、本発明の実施の形態１に係る内視鏡システムが行う画像取得方法の概要を模式的に示す図である。

【図4】図４は、本発明の実施の形態１に係る内視鏡システムが撮像した画像の時間変化例を示す模式図である。

【図5】図５は、本発明の実施の形態２に係る内視鏡システムが行う処理の特徴を模式的に示す図である。

【図6】図６は、長時間蓄積モードにおけるリセットタイミングと露光時間の関係をより詳細に示す図である。

【図7】図７は、電子シャッタモードにおけるリセットタイミングと露光時間の関係をより詳細に示す図である。

【図8】図８は、本発明の実施の形態２の変形例１に係る内視鏡システムの要部の機能構成を示すブロック図である。

【図9】図９は、本発明の実施の形態２の変形例２に係る内視鏡システムが取得した画像における明るさ（画素値）と明るさごとの画素数との関係の例を示す図である。

【図10】図１０は、本発明の実施の形態３に係る内視鏡システムである内視鏡システムが行う画像取得方法の概要を模式的に示す図である。

【図11】図１１は、本発明の実施の形態３の変形例に係る内視鏡システムが行う画像取得方法の概要を模式的に示す図である。

【図12】図１２は、従来の内視鏡システムが行う画像取得方法の概要を模式的に示す図である。

【発明を実施するための形態】

【0017】

以下、添付図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）を説明する。なお、以下の説明で参照する図面は模式的なものであって、同じ物体を異なる図面で示す場合には、寸法や縮尺等が異なる場合もある。

【0018】

（実施の形態１）
図１は、本発明の実施の形態１に係る内視鏡システムの概略構成を示す図である。同図に示す内視鏡システム１は、挿入部２と、光源装置３と、カメラヘッド部４と、制御装置５と、表示装置６と、ライトガイド７と、集合ケーブル８と、コネクタ９とを備える。内視鏡システム１は、被検体の腹腔に挿入されて腹腔鏡科外科手術（鏡視下手術）等で使用される硬性鏡である。

【0019】

挿入部２は、硬質で細長形状をなし、体腔内や管路内等に挿入され、被写体像を集光する光学系を内部に有する。
光源装置３は、ライトガイド７を介して挿入部２へ照射光を供給する。
カメラヘッド部４は、挿入部２の基端に設けられる接眼部２１に着脱自在に取り付けられる。カメラヘッド部４は、挿入部２が集光した被写体像を結像し、電気信号に光電変換して出力する撮像素子４１を有する。
制御装置５は、カメラヘッド部４が取得した画像に対して画像処理を施す機能を有するとともに内視鏡システム１全体の動作を統括的に制御する機能を有する。
表示装置６は、制御装置５が画像処理を施した画像を表示する。
集合ケーブル８は、複数の信号線を束ねてなり、一端がカメラヘッド部４に接続され、他端にはコネクタ９が設けられる。集合ケーブル８が有する複数の信号線には、撮像素子４１が出力した画像信号を制御装置５へ伝送する信号線や、制御装置５が出力する制御信号を撮像素子４１へ伝送する信号線などが含まれる。
コネクタ９は、制御装置５に着脱自在に接続される。

【0020】

図２は、内視鏡システム１の要部の機能構成を示すブロック図である。まず、挿入部２の構成を説明する。挿入部２は、集光用の光学系２２と、ライトガイド７の先端に設けられる照明レンズ２３とを有する。

【0021】

次に、光源装置３の構成を説明する。光源装置３は、特定の物質からの戻り光を生じさせる照明光を視野領域に対して出射可能な照明部としての機能を有する。具体的には、光源装置３は、白色光源３１と、特殊光光源３２と、光源制御部３３と、ＬＥＤ（Light Emitting Diode）ドライバ３４とを有する。

【0022】

白色光源３１は、白色ＬＥＤからなり、白色照明光を発生する。
特殊光光源３２は、例えば所定の波長を有する蛍光を発生させるための励起光を発生する。なお、特殊光光源３２が発生する特殊光としては、より一般に、特定の物質からの戻り光を生じさせる光であればどのようなものでもよい。このような光としては、例えば赤外光を挙げることができる。

【0023】

光源制御部３３は、制御装置５の調光部５４（後述）から送信されてくる光源同期信号および制御部５９（後述）からの制御信号にしたがって白色光源３１または特殊光光源３２に供給する電流量を制御する。

【0024】

ＬＥＤドライバ３４は、白色光源３１または特殊光光源３２に対して光源制御部３３の制御のもとで電流を供給することにより、白色光源３１または特殊光光源３２に光を発生させる。白色光源３１または特殊光光源３２が発生した光は、ライトガイド７を経由して挿入部２の先端から外部へ照射される。

【0025】

次に、撮像素子４１の構成を説明する。撮像素子４１は、挿入部２の光学系２２からの光を光電変換して電気信号を出力するセンサ部４１ａと、センサ部４１ａが出力した電気信号に対してノイズ除去やＡ／Ｄ変換を行うアナログフロントエンド（ＡＦＥ）部４１ｂと、アナログフロントエンド部４１ｂが出力したデジタル信号をパラレル／シリアル変換するＰ／Ｓ変換部４１ｃと、センサ部４１ａの駆動タイミングパルス、ならびにアナログフロントエンド部４１ｂおよびＰ／Ｓ変換部４１ｃにおける各種信号処理用のパルスを発生するタイミングジェネレータ４１ｄと、撮像素子４１の設定データ等の情報を記憶する撮像記憶部４１ｅと、撮像素子４１の動作を制御する撮像制御部４１ｆと、を有する。撮像素子４１は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサである。

【0026】

センサ部４１ａは、光量に応じた電荷を蓄積するフォトダイオードおよびフォトダイオードが蓄積した電荷を増幅する増幅器をそれぞれ有する複数の画素が二次元面上にマトリックス状に配設された受光部４１ｇと、受光部４１ｇの複数の画素のうち読み出し対象として任意に設定された画素が生成した電気信号を画像情報として読み出す読み出し部４１ｈとを有する。白色光源３１が白色光を発生する場合、受光部４１ｇには、画素ごとにＲＧＢ個別のカラーフィルタが設けられており、カラー画像の取得を可能にしている。これに対して、特殊光光源３２が発生する特殊光として蛍光励起光を発生する場合、受光部４１ｇには、励起光をカットして蛍光のみを透過するフィルタが設けられる。このように、白色光源３１および特殊光光源３２のうち使用する光源の種類によって受光部４１ｇに設けられるフィルタは異なる。通常は、光源の種類に応じてカメラヘッド部４を交換するが、受光部４１ｇにおけるフィルタを交換するような構成としてもよい。

【0027】

アナログフロントエンド部４１ｂは、信号に含まれるノイズ成分を低減するノイズ低減部４１ｉと、ノイズが低減された信号をＡ／Ｄ変換するＡ／Ｄ変換部４１ｊとを有する。ノイズ低減部４１ｉは、例えば相関二重サンプリング（Correleted Double Sampling）法を用いてノイズの低減を行う。なお、ノイズ低減部４１ｉとＡ／Ｄ変換部４１ｊとの間に、自動的に信号のゲインを調整して常に一定の出力レベルを維持するＡＧＣ（Auto Gain Control）回路を設けてもよい。

【0028】

タイミングジェネレータ４１ｄは、受光部４１ｇの複数の画素が蓄積する電荷を開放するためのリセットパルスを順次生成するリセットパルス生成部としての機能を有する。

【0029】

撮像記憶部４１ｅは、制御装置５の制御部５９から送信されてくる各種設定データや制御用のパラメータを記憶するレジスタである。

【0030】

撮像制御部４１ｆは、制御装置５から受信した設定データにしたがって、撮像素子４１の動作を制御する。撮像制御部４１ｆは、ＣＰＵ（Central Proccessing Unit）等を用いて構成される。撮像制御部４１ｆは、生成順が連続する二つのリセットパルスがそれぞれ生成される間の期間に画像の複数のフレームが少なくとも一部ずつ含まれるように、リセットパルスの生成タイミングを調整する信号をタイミングジェネレータ４１ｄへ送信する。この意味で、本実施の形態においては、撮像制御部４１ｆがリセットパルス制御部の少なくとも一部の機能を有する。

【0031】

次に、制御装置５の構成を説明する。制御装置５は、Ｓ／Ｐ変換部５１、画像処理部５２、明るさ検出部５３、調光部５４、読出アドレス設定部５５、駆動信号生成部５６、入力部５７、記憶部５８、制御部５９および基準クロック生成部５ａを有する。

【0032】

Ｓ／Ｐ変換部５１は、カメラヘッド部４から受信した画像信号（デジタル信号）をシリアル／パラレル変換する。

【0033】

画像処理部５２は、Ｓ／Ｐ変換部５１から出力されたパラレル形態の画像信号をもとに、表示装置６が表示する体内画像を生成する。画像処理部５２は、同時化部５２１、ホワイトバランス（ＷＢ）調整部５２２、ゲイン調整部５２３、γ補正部５２４、Ｄ／Ａ変換部５２５、フォーマット変更部５２６、サンプル用メモリ５２７および静止画像用メモリ５２８を備える。

【0034】

同時化部５２１は、画像情報として入力された画像信号を、画素ごとに設けられた３つのメモリ（図示せず）に入力し、読み出し部４１ｈが読み出した受光部４１ｇの画素のアドレスに対応させて、各メモリの値を順次更新しながら保持するとともに、これら３つのメモリの画像信号をＲＧＢ画像信号として同時化する。同時化部５２１は、同時化した画像信号をホワイトバランス調整部５２２へ順次出力するとともに、一部の画像信号を、明るさ検出などの画像解析用としてサンプル用メモリ５２７へ出力する。
ホワイトバランス調整部５２２は、画像信号のホワイトバランスを調整する。
ゲイン調整部５２３は、画像信号のゲイン調整を行う。ゲイン調整部５２３は、ゲイン調整を行った画像信号をγ補正部５２４へ出力するとともに、一部の画像信号を、静止画像表示用、拡大画像表示用または強調画像表示用として静止画像用メモリ５２８へ出力する。
γ補正部５２４は、表示装置６に対応させて画像信号の階調補正（γ補正）を行う。
Ｄ／Ａ変換部５２５は、γ補正部５２４が出力した階調補正後の画像信号をアナログ信号に変換する。
フォーマット変更部５２６は、アナログ信号に変換された画像信号を動画用のファイルフォーマットに変更して表示装置６に出力する。このファイルフォーマットとして、ＡＶＩ形式、ＭＰＥＧ形式などを適用することができる。

【0035】

明るさ検出部５３は、サンプル用メモリ５２７が保持する画像信号から、各画素に対応する明るさレベルを検出し、検出した明るさレベルを内部に設けられたメモリに記録するとともに制御部５９へ出力する。また、明るさ検出部５３は、検出した明るさレベルをもとにゲイン調整値および光照射量を算出し、ゲイン調整値をゲイン調整部５２３へ出力する一方、光照射量を調光部５４へ出力する。

【0036】

調光部５４は、制御部５９の制御のもと、明るさ検出部５３が算出した光照射量をもとに光源装置３が発生する光の種別、光量、発光タイミング等を設定し、この設定した条件を含む光源同期信号を光源装置３へ送信する。

【0037】

読出アドレス設定部５５は、センサ部４１ａの受光部における読み出し対象の画素および読み出し順序を設定する機能を有する。すなわち、読出アドレス設定部５５は、アナログフロントエンド部４１ｂが読み出すセンサ部４１ａの画素のアドレスを設定する機能を有する。また、読出アドレス設定部５５は、設定した読み出し対象の画素のアドレス情報を同時化部５２１へ出力する。

【0038】

駆動信号生成部５６は、撮像素子４１を駆動するための駆動用のタイミング信号を生成し、集合ケーブル２５６に含まれる所定の信号線を介してタイミングジェネレータ４１ｄへ送信する。このタイミング信号は、読み出し対象の画素のアドレス情報を含む。
入力部５７は、内視鏡システム１の動作を指示する動作指示信号等の各種信号の入力を受け付ける。

【0039】

記憶部５８は、フラッシュメモリやＤＲＡＭ（Dynamic Random Access Memory）等の半導体メモリを用いて実現される。記憶部５８は、内視鏡システム１を動作させるための各種プログラム、および内視鏡システム１の動作に必要な各種パラメータ等を含むデータを記憶する。

【0040】

制御部５９は、ＣＰＵ等を用いて構成され、カメラヘッド部４および光源装置３を含む各構成部の駆動制御、および各構成部に対する情報の入出力制御などを行う。制御部５９は、撮像制御のための設定データを、集合ケーブル２５６に含まれる所定の信号線を介して撮像素子４１へ送信する。ここで、設定データは、撮像素子４１の撮像速度（フレームレート）、およびセンサ部４１ａの任意の画素からの画素情報の読み出し速度を指示する指示情報、ならびにアナログフロントエンド部４１ｂが読み出した画素情報の伝送制御情報などを含む。

【0041】

基準クロック生成部５ａは、内視鏡システム１の各構成部の動作の基準となる基準クロック信号を生成し、内視鏡システム１の各構成部に対して生成した基準クロック信号を供給する。

【0042】

次に、表示装置６の構成を説明する。表示装置６は、制御装置５が生成した体内画像を制御装置５から受信して表示する機能を有する。表示装置６は、液晶、有機ＥＬ（Electro Luminescence）等の表示ディスプレイを有する。

【0043】

図３は、以上の構成を有する内視鏡システム１が行う画像取得方法の概要を模式的に示す図である。上述したように、撮像素子４１はＣＭＯＳイメージセンサであり、複数のフレームを連続的に撮像する場合、蓄積された電荷の読み出しを１つの水平ラインごとに順次行う。このため、読み出し部４１ｈが最初に読み出す水平ライン（図３の場合は画面最上部）と最後に読み出す水平ライン（図３の場合は画面最下部）との間には、読み出しのタイミングに時間差が生じることとなる。以下の説明において、光源装置３は同じ照明光（例えば蛍光励起光）を連続して発生しているものとする。

【0044】

撮像素子４１では、露光期間Ｐ₁の間水平ラインごとに順次露光した後、読み出し部４１ｈが露光によって受光部４１ｇの各画素に蓄積された電荷を読み出してアナログフロントエンド部４１ｂへ転送する（転送期間Ｐ₂）。

【0045】

撮像制御部４１ｆは、従来のように露光および転送を一組とするサイクルが終了するたびに電荷のリセットを行うことなく、フレーム周期Ｔｆよりも長いリセット周期Ｔｒ（＞Ｔｆ）で受光部４１ｇが蓄積した電荷のリセットを行う。ここで、撮像制御部４１ｆは、タイミングジェネレータ４１ｄにリセットパルスを生成させることによってリセット処理を行う。図３では、撮像制御部４１ｆが、４フレームに１回の割合で受光部４１ｇが蓄積した電荷のリセットを行う（リセット期間Ｐ₃）場合を示しているが、これはあくまでも一例に過ぎない。例えば、フレームレートを３０ｆｐｓとし、リセット周期Ｔｒを０．５ｓ前後（１５フレーム程度ごとにリセット）とすることができる。

【0046】

図４は、内視鏡システム１が撮像した画像の時間変化例を示す模式図である。各画像に対応する時間ｔ_i（ｉ＝１〜４）は、図３に示す時間ｔ_iにそれぞれ対応している。図４では、挿入部２がほぼ同じ速度で体内を移動した場合の蛍光画像の変化を模式的に示している。時間ｔ＝ｔ₁における蛍光画像１０１では、蛍光像２０１が写っている。時間ｔ＝ｔ₂における蛍光画像１０２では、蛍光像２０２に加えて、蛍光画像１０１で映っていた蛍光像２０１が写っている。時間ｔ＝ｔ₃における蛍光画像１０３では、蛍光像２０３に加えて、蛍光画像１０２で映っていた蛍光像２０１、２０２が写っている。時間ｔ＝ｔ₄における蛍光画像１０４では、それまで写っていた蛍光像が全て消滅している。なお、蛍光画像１０１〜１０４は、本来蛍光像以外の部分が真っ暗であり、蛍光像の部分のみぼんやりと光って見えるような画像である。

【0047】

蛍光画像１０２において、それ以前に取得された蛍光画像１０１に写っていた蛍光像２０１が写っているのは、蛍光画像１０１の取得タイミングと蛍光画像１０２の取得タイミングとの間でリセット処理が行われていないためである。同様に、蛍光画像１０３において、それ以前に取得された蛍光画像１０２に写っていた蛍光像２０１、２０２が写っているのは、蛍光画像１０２の取得タイミングと蛍光画像１０３の取得タイミングとの間でリセット処理が行われていないためである。これに対して、蛍光画像１０４で蛍光像が全く写っていないのは、蛍光画像１０３の取得タイミングと蛍光画像１０４の取得タイミングとの間でリセット処理が行われたためである。

【0048】

このように、リセット処理が行われない期間に撮像された蛍光画像に含まれる蛍光像には、時間とともに尾を引くような残像が生じているように見える。

【0049】

これに対して、蛍光画像を撮影する場合において、ある時点でのリセット処理後に挿入部２がほとんど動かなかったとき、次のリセット処理を行うまでの間、撮像画像に含まれる蛍光像は徐々に明るさを増していくような蛍光画像が順次得られる。

【0050】

本実施の形態１では、撮像のフレームレートを変更せずに、受光部４１ｇの各画素が蓄積する電荷を所定期間リセットをかけずに蓄積して増感することで、蛍光画像などの低輝度の画像であっても明るい画像を得ることができる。

【0051】

蛍光などの微弱な発光によって生体内に生じた癌などの腫瘍を探す方法においては、検査者が微弱な発光を見逃す恐れがある。この点、本実施の形態１では、リセット周期Ｔｒをフレーム周期Ｔｆよりも長くしているため、微弱発光部位が動く場合には残像を生じさせる一方、微弱発光部位が静止している場合には明滅させることによって微弱発光部位の視認性を高めることができる。

【0052】

また、本実施の形態１において、画像のフレームレートは変更されないため、低フレームレートの画像のように映像がちらついて不自然さを生じることがない。また、画像のフレームレートが変更されないため、画像の読み出しは、通常の撮像と同様のタイミング、処理を継続することができる。

【0053】

以上説明した本発明の実施の形態１によれば、生成順が連続する二つのリセットパルスがそれぞれ生成される間の期間に画像の複数のフレームが少なくとも一部ずつ含まれるように前記リセットパルスの生成タイミングを調整するため、フレームレートを変更することなく、ダイナミックレンジが広く視認性に優れた画像を取得することができる。

【0054】

（実施の形態２）
本発明の実施の形態２は、リセットパルスの生成タイミングを画像の明るさに応じて変更することを特徴とする。本実施の形態２に係る内視鏡システムは、実施の形態１で説明した内視鏡システム１と同様の構成を有する。

【0055】

本実施の形態２では、制御装置５の制御部５９が撮像素子４１に対してリセット禁止信号を送信することにより、タイミングジェネレータ４１ｄが発生するリセットパルスをマスクすることでリセットパルスの生成タイミングを調整する。したがって、電荷の蓄積期間は、リセット禁止信号のアクティブ期間に含まれるフレーム数によって決定されることとなる。この意味で、本実施の形態２においては、制御装置５の制御部５９が、リセットパルス制御部の少なくとも一部の機能を有することとなる。

【0056】

図５は、本実施の形態２に係る内視鏡システム１が行う処理の特徴を模式的に示す図である。内視鏡システム１は、明るさ検波値が所定の閾値より大きくて画像の明るさを十分確保できるような場合には、１フレーム期間におけるタイミングを変化させながらフレームごとにリセットパルスを発生させる方式（電子シャッタモード）へ移行する。以下、電子シャッタモードとは異なるモードであって生成順が連続する二つのリセットパルスがそれぞれ生成される間の期間に少なくとも一つのフレームの露光期間Ｐ₁が全て含まれるモードのことを長時間蓄積モードという。図５に示す場合、リセット周期は、明るさ検波値の上昇にしたがって徐々に短くなっていく（Ｔｒ１、Ｔｒ２、Ｔｒ３、・・・）。そして、明るさ検波値が閾値ＴＨを超えると、長時間蓄積モードから電子シャッタモードへ移行する（リセット周期はＴｒ１’、Ｔｒ２’、・・・）。

【0057】

図６は、長時間蓄積モードにおけるリセットタイミングと露光時間の関係をより詳細に示す図である。長時間蓄積モードにおける電荷の蓄積時間Ｔｃは、フレーム周期Ｔｆ内で露光を行い続けるフレームの数（全露光フレーム数）ａ、および露光開始フレームにおけるリセット開始から読み出し開始までの時間ｔを用いて、
Ｔｃ＝ａ・Ｔｆ＋ｔ ・・・（１）
と表される。図６は、全露光フレーム数ａが２の場合を例示している。

【0058】

内視鏡システム１は、ある蓄積期間において、全露光フレーム数ａが経過した後、直前に読み込んだ画像信号Ｐの明るさ検波値に応じて露光時間を変化させる（図６のΔｔ）。この露光時間の変化は、電子シャッタによるリセットタイミングの変化によって実現される。すなわち、露光開始フレームにおけるリセット開始から読み出し開始までの時間がｔ＋Δｔとなるようにリセット信号Ｒを発生させることによって実現される。新たな蓄積時間Ｔｃ’は、露光時間の変化量を用いて
Ｔｃ’＝Ｔｃ＋Δｔ ・・・（２）
と表される。また、一つ前のリセット信号発生時を基準とするリセット周期Ｔｒは、
Ｔｒ＝Ｔｃ＋Ｔｆ−（ｔ＋Δｔ）＝（ａ＋１）Ｔｆ−Δｔ ・・・（３）
となる。

【0059】

図７は、電子シャッタモードにおけるリセットタイミングと露光時間の関係をより詳細に示す図である。電子シャッタモードでは、蓄積時間Ｔｃがフレーム周期Ｔｆよりも短く、全露光フレーム数ａがゼロである。したがって、式（１）はＴｃ＝ｔとなる。電子シャッタモードにおいても、式（２）、（３）が成立していることはいうまでもない。

【0060】

なお、全露光フレーム数ａの値に応じてフィードバックの時定数が変化することに鑑み、リセットパルスのフィードバックタイミングは、全露光フレーム数ａに応じて決定してもよい。具体的には、全露光フレーム数ａが小さい場合には、所定フレーム経過後に露光時間を変化させるようにしてもよい。

【0061】

以上説明した本発明の実施の形態２によれば、生成順が連続する二つのリセットパルスがそれぞれ生成される間の期間に画像の複数のフレームが少なくとも一部ずつ含まれるように前記リセットパルスの生成タイミングを調整するため、フレームレートを変更することなく、ダイナミックレンジが広く視認性に優れた画像を取得することができる。

【0062】

また、本実施の形態２によれば、リセットパルス発生後の画像読み出し開始からの時間を、画像の明るさ情報によって可変とすることにより、長時間露光から電子シャッタによる減光までを制御することが可能となる。これにより、例えば蛍光観察の際、視野内の蛍光像の観察と、蛍光像に近づいた後の高輝度画像の撮像を、リセットパルスの生成タイミングの変更のみによって連続的に行うことができる。

【0063】

（実施の形態２の変形例１）
図８は、本発明の実施の形態２の変形例１に係る内視鏡システムの要部の機能構成を示すブロック図である。同図に示す内視鏡システム１１は、画像処理部の構成が、上述した内視鏡システム１と異なる。

【0064】

内視鏡システム１１の画像処理部１２は、内視鏡システム１の画像処理部５２の構成に加えて、複数のフレーム間における被写体の動きを検出する動き検出部１２１をさらに有する。制御部５９は、動き検出部１２１が検出した被写体の動きに基づいて画像間の相関を算出し、この算出結果と明るさ検波値とに基づいて次のリセットパルスの生成タイミングを決定する。例えば、蛍光画像間における被写体の動きが大きい場合（画像間の相関が小さい場合）、制御部５９は、リセットパルスの生成タイミングを遅らせる。なお、制御部５９によるリセットパルスの生成タイミングの決定には、明るさ検波値も寄与するため、被写体の動きが大きい場合に生成タイミングが常に遅れるとは限らない。

【0065】

以上説明した本発明の実施の形態２の変形例１によれば、実施の形態２と同様の効果に加えて、蛍光像の残像を一段と強調して視認性を高めることができる。

【0066】

（実施の形態２の変形例２）
本発明の実施の形態２の変形例２は、画像全体の明るさの平均値と比較して所定の条件をみたす像が存在する場合、制御部５９が電荷の蓄積時間を変更する制御を行うことを特徴とする。本変形例２に係る内視鏡システムは、実施の形態２で説明した内視鏡システム１と同様の構成を有する。

【0067】

図９は、内視鏡システム１が取得した画像における明るさ（画素値）と明るさごとの画素数との関係の例を示す図である。図９において、明るさＴＨ１、ＴＨ２は、画像全体の明るさの平均値との差が所定の範囲にある明るさ（所定の条件を満たす明るさ）の上限と下限である。この意味で、明るさＴＨ１、ＴＨ２は、観察対象となる像（例えば蛍光像）に対してバックグラウンドやノイズ（迷光成分）を排除できるような明るさであることが望ましい。

【0068】

制御部５９は、明るさＴＨ１〜ＴＨ２の範囲にある画素が所定数以上存在する場合、電荷の蓄積時間を延長する制御を行う。なお、制御部５９は、例えば明るさＴＨ１〜ＴＨ２の範囲で所定の画素数を超える明るさがある場合、電荷の蓄積時間を延長するようにしてもよい。

【0069】

読み出した画像に上述した条件を満たす像が存在しない場合、内視鏡システム１は、実施の形態２で説明した処理を行う。

【0070】

以上説明した本発明の実施の形態２の変形例２によれば、画像全体の明るさの平均値に対する差分をとることにより特に蛍光画像の場合、バックグラウンドの影響を排除して蛍光像の視認性を向上させることができる。

【0071】

（実施の形態３）
図１０は、本発明の実施の形態３に係る内視鏡システムが行う画像取得方法の概要を模式的に示す図である。なお、本実施の形態３に係る内視鏡システムは、実施の形態２で説明した内視鏡システム１と同様の機能構成を有する。本実施の形態３において、内視鏡システム１は、取得した画像における残像や像の脈動を強調するように、フレームごとの照明強度を変えることを特徴とする。

【0072】

図１０に示すように、光源装置３は、制御装置５と連携して、受光部４１ｇの全ての水平ラインが露光状態にある期間の中で、発光強度を一定に保ちながら発光時間を周期的に変化させている。具体的には、光源装置３の光源制御部３３は、制御装置５の制御部５９と連携して、発光強度を一定に保ちながらフレームごとの発光時間を徐々に長くしていく制御を行う。発光時間の最大値は、全ての水平ラインが渡航状態にある期間の長さＴａ以下である。

【0073】

光源装置３は、リセットパルスによって受光部４１ｇにおける電荷の蓄積がリセットされた後、フレームごとの発光時間もリセットして初期値（最も短い発光期間）に戻る。図１０では、フレームごとの光源発光状態として、順に発光時間が長くなっていく４つの光源発光状態Ａ₁、Ａ₂、Ａ₃、Ａ₄を採用した場合を例示している。

【0074】

このように、二つの連続するリセット処理の間に含まれる複数のフレームにおいて、フレームごとの光源の発光時間を徐々に長くしていくと、例えば図４に示す場合、蛍光像２０１、２０２、２０３の順に徐々に蛍光像が明るくなっていく。したがって、蛍光像の視認性を一段と向上させることができる。

【0075】

なお、図１０に示す場合と逆に、二つの連続するリセット処理の間に含まれる複数のフレームにおいて、フレームごとの発光時間を徐々に短くしていってもよい。この場合には、図４において、蛍光像２０１、２０２、２０３の順に徐々に蛍光像が暗くなっていき、結果的に視認性を向上させることができる。

【0076】

また、二つの連続するリセット処理の間に含まれる複数のフレームにおいて、フレームごとの光源の発光時間を常に増加または減少させる必要はなく、段階的に増加または減少させるようにしてもよいし、増加または減少を適宜混合して変化させるようにしてもよい。

【0077】

以上説明した本発明の実施の形態３によれば、生成順が連続する二つのリセットパルスがそれぞれ生成される間の期間に画像の複数のフレームが少なくとも一部ずつ含まれるように前記リセットパルスの生成タイミングを調整するため、フレームレートを変更することなく、ダイナミックレンジが広く視認性に優れた画像を取得することができる。

【0078】

また、本実施の形態３によれば、取得した画像のフレームごとの照明強度が変化することで、一段と視認性を向上させることができる。

【0079】

（実施の形態３の変形例）
図１１は、本発明の実施の形態３の変形例に係る内視鏡システム１が行う画像取得方法の概要を模式的に示す図である。図１１に示すように、光源装置３は、受光部４１ｇの全ての水平ラインが露光状態にある期間の中で、フレームごとの発光時間を一定に保ちながら発光強度を周期的に変化させている。具体的には、光源装置３は、フレームごとの発光時間を一定に保ちながらフレームごとの発光強度を徐々に大きくしていく。そして、リセット信号によって受光部４１ｇにおける電荷の蓄積がリセットされた後、フレームごとの発光強度もリセットして初期値（最も小さい発光強度）に戻る。図１１では、フレームごとの光源発光状態として、順に発光強度が小さくなっていく４つの光源発光状態Ｂ₁、Ｂ₂、Ｂ₃、Ｂ₄を採用している。

【0080】

このようにして、二つの連続するリセット処理の間に含まれる複数のフレームにおいて、フレームごとの光源の発光強度を徐々に大きくしていくと、上述した実施の形態３と同様、蛍光像の視認性を一段と向上させることができる。

【0081】

なお、本変形例において、二つの連続するリセット処理の間に含まれる複数のフレームにおいて、フレームごとの発光時間を一定に保ちながら発光強度を徐々に小さくしていってもよい。

【0082】

また、本変形例において、二つの連続するリセット処理の間に含まれる複数のフレームにおいて、フレームごとの発光強度を常に増加または減少させる必要はなく、段階的に増加または減少するようにしてもよいし、増加または減少を適宜混合して変化させるようにしてもよい。

【0083】

また、本変形例を実施の形態３と組み合わせることにより、フレームごとに発光強度と発光時間をともに変化させるようにしてもよい。

【0084】

（その他の実施の形態）
ここまで、本発明を実施するための形態を説明してきたが、本発明は、上述した実施の形態１〜３によってのみ限定されるべきものではない。例えば、実施の形態１においても、実施の形態２等と同様に、制御装置５がリセット禁止信号を発生することによってリセットパルスの生成タイミングを調整するようにしてもよい。

【0085】

また、本発明において、制御装置のゲイン調整部が、二つの連続するリセット処理の間に含まれる複数のフレームにおいて、フレームごとの増幅率を変更するようにしてもよい。この場合には、フレームごとの増幅率を徐々に増加または減少させてもよいし、増幅率の増加または減少を適宜混合して変化させるようにしてもよい。

【0086】

また、本発明において、撮像素子をＣＣＤイメージセンサによって構成することも可能である。

【0087】

また、本発明に係る内視鏡システムは、被検体内に挿入して臓器内部を観察する軟性鏡として実現することも可能である。

【0088】

このように、本発明は、ここでは記載していない様々な実施の形態を含みうるものであり、特許請求の範囲に記載した技術的思想の範囲内で種々の設計変更等を行うことが可能である。

【符号の説明】

【0089】

１、１１ 内視鏡システム
２ 挿入部
３ 光源装置
４ カメラヘッド部
５ 制御装置
６ 表示装置
７ ライトガイド
８ 集合ケーブル
２２ 光学系
３１ 白色光源
３２ 特殊光光源
３３ 光源制御部
３４ ＬＥＤドライバ
４１ａ センサ部
４１ｂ アナログフロントエンド部
４１ｃ Ｐ／Ｓ変換部
４１ｅ 撮像記憶部
４１ｆ 撮像制御部
４１ｇ 受光部
４１ｈ 読み出し部
５１ Ｓ／Ｐ変換部
５２ 画像処理部
５３ 明るさ検出部
５４ 調光部
５５ 読出アドレス設定部
５６ 駆動信号生成部
５７ 入力部
５８ 記憶部
５９ 制御部
５ａ 基準クロック生成部
１０１、１０２、１０３ 蛍光画像
１２１ 動き検出部
２０１、２０２、２０３ 蛍光像
Ｐ₁ 露光期間
Ｐ₂ 転送期間
Ｐ₃ リセット期間

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】