特許 6000838 内視鏡装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6000838

(24)【登録日】2016年9月9日

(45)【発行日】2016年10月5日

(54)【発明の名称】内視鏡装置

(51)【国際特許分類】

   A61B 1/04 20060101AFI20160923BHJP

   G02B 23/24 20060101ALI20160923BHJP

   H04N 7/18 20060101ALI20160923BHJP

【ＦＩ】

   A61B1/04 370

   G02B23/24 B

   H04N7/18 M

【請求項の数】11

【全頁数】26

(21)【出願番号】特願2012-271652(P2012-271652)

(22)【出願日】2012年12月12日

(65)【公開番号】特開2014-113416(P2014-113416A)

(43)【公開日】2014年6月26日

【審査請求日】2015年2月27日

(73)【特許権者】

【識別番号】000000376

【氏名又は名称】オリンパス株式会社

(74)【代理人】

【識別番号】100076233

【弁理士】

【氏名又は名称】伊藤 進

(74)【代理人】

【識別番号】100101661

【弁理士】

【氏名又は名称】長谷川 靖

(74)【代理人】

【識別番号】100135932

【弁理士】

【氏名又は名称】篠浦 治

(72)【発明者】

【氏名】武井 俊二

【審査官】 田邉 英治

(56)【参考文献】

【文献】 国際公開第２０１２／１６４９９１（ＷＯ，Ａ１）

【文献】 特開２００３−０１０１０１（ＪＰ，Ａ）

【文献】 特開２０１２−２１７４８３（ＪＰ，Ａ）

【文献】 特開２０１１−１９４０４０（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ａ６１Ｂ １／００− １／３２

(57)【特許請求の範囲】

【請求項1】

撮像により生成されたアナログの画像を取得するアナログ画像取得部と、
アナログの前記画像を所定の階調数のデジタルの画像に変換するＡ／Ｄ変換部と、
デジタルの前記画像のゲインを調節するデジタルゲイン調節部と、
前記デジタルゲイン調節部によりゲイン調節されたデジタルの前記画像の階調数を、前記所定の階調数から、該所定の階調数以下の出力用の階調数に変換して出力用の画像を生成する出力画像生成部と、
前記画像の明るさを変化させる明るさ変化部と、
前記所定の階調数を前記出力用の階調数で割った値以下に閾値を設定して、前記ゲインが前記閾値以上であるかを判定し、前記閾値以上である場合には、前記デジタルゲイン調節部にゲインを該閾値よりも増加させないように、かつ前記明るさ変化部に対して前記画像の明るさを増大させるように制御する制御部と、
を具備したことを特徴とする内視鏡装置。

【請求項2】

前記制御部は、前記明るさ変化部を制御する際に前記デジタルゲイン調節部にゲインを調整させて、該明るさ変化部の制御の前後における出力用の前記画像の明るさが略同一に維持されるようにさらに制御することを特徴とする請求項１に記載の内視鏡装置。

【請求項3】

前記出力画像生成部は、前記デジタルゲイン調節部によりゲイン調節されたデジタルの前記画像に、さらにγ変換を行って出力用の画像を生成し、
前記制御部は、前記所定の階調数をＮ、前記γ変換を行うときに階調落ちが発生しない階調数をＬ、前記出力用の階調数をＭ、１以下の所定の係数をλとし、ＮとＬの内の大きくない方の値をｍｉｎ［Ｎ，Ｌ］により表すとすると、前記閾値Ｔｈを
Ｔｈ＝λ×ｍｉｎ［Ｎ，Ｌ］／Ｍ
として設定することを特徴とする請求項２に記載の内視鏡装置。

【請求項4】

前記制御部は、前記明るさ変化部による明るさの変化が不連続である場合には、前記デジタルゲイン調節部および前記明るさ変化部による明るさ調整レベルが、前記明るさ変化部に明るさを増大させたときの第１の明るさ調整レベルよりも低い第２の明るさ調整レベルとなったときに、前記明るさ変化部に明るさを減少させるようにさらに制御することを特徴とする請求項３に記載の内視鏡装置。

【請求項5】

前記明るさ変化部は、出力用の前記画像の画質と、前記アナログ画像取得部により取得されるアナログの前記画像のフレームレートと、の少なくとも一方とトレードオフの関係となるように、前記画像の明るさを変化させることを特徴とする請求項４に記載の内視鏡装置。

【請求項6】

前記明るさ変化部は、前記画像を処理することにより明るさを変化させることを特徴とする請求項５に記載の内視鏡装置。

【請求項7】

前記明るさ変化部は、アナログの前記画像を増幅するアナログ増幅部を有し、アナログの前記画像の増幅率を変化させることにより、明るさを変化させることを特徴とする請求項６に記載の内視鏡装置。

【請求項8】

前記アナログ画像取得部は、複数の画素が配列された撮像素子を備え、
前記明るさ変化部は、前記撮像素子の各画素から得られる画像に対してビニング処理を行うことにより、前記画像の明るさを増大することを特徴とする請求項６に記載の内視鏡装置。

【請求項9】

前記アナログ画像取得部は、アナログの画像をフレーム単位で時系列的に取得するものであり、
前記明るさ変化部は、時間的に近接する複数フレームの画像を加算することにより、明るさを変化させることを特徴とする請求項６に記載の内視鏡装置。

【請求項10】

前記アナログ画像取得部は、アナログの画像をフレーム期間毎に取得するものであり、
前記明るさ変化部は、前記フレーム期間を変更することにより、明るさを変化させることを特徴とする請求項５に記載の内視鏡装置。

【請求項11】

前記アナログ画像取得部は、光学像からアナログの前記画像を生成する撮像素子と、光学像を前記撮像素子に結像する撮像光学系と、前記光学像の明るさを変化させる対物絞りと、を備え、
前記明るさ変化部は、前記対物絞りにより前記光学像の明るさを変化させることにより、明るさを変化させることを特徴とする請求項５に記載の内視鏡装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、撮像により生成されたアナログの画像を取得してデジタルの画像に変換しゲインを調節する内視鏡装置に関する。

【背景技術】

【0002】

内視鏡では近点観察から遠点観察まで、適切な明るさおよび画質で観察できることが必要である。従って、非常に微弱な光を検出する内視鏡、例えば蛍光内視鏡などの場合には、遠点観察時の画像の明るさを確保することが重要になる。

【0003】

画像の明るさを向上する方法としては、光源からの発光量を増大させる方法、明るい撮像光学系を用いる方法、絞りが可変である場合には絞り開口を大きくする方法、撮像素子から得られるアナログ信号をアナログ増幅する方法などが知られている。

【0004】

ただし、光源の最大光量を増大させると、光源自体の発熱量が増大するだけでなく、例えば生体等の被検体にも熱的影響を与える可能性があるために、設定可能な最大光量には制限がある。こうした制限された最大光量で発光を行った場合には遠点画像が暗くなることもあり、このときには光源の制御だけでは明るい画像を得ることができない。また、明るい撮像光学系を用いたり絞り開口を大きくしたりすると、被写界深度が浅くなるために、合焦距離から離れた例えば遠点の被写体は十分シャープに観察することができない。さらに、アナログ信号増幅は、撮像信号だけでなく、撮像信号に混入しているノイズも増大してしまうことになるために、画質の点で好ましくない影響が生じる。

【0005】

また、画像の明るさを向上する方法としては、例えば特開２００５−１３１１２９号公報に、イオン化を利用して電荷の増倍を行うＣＭＤ（電荷増倍素子：Charge Multiplying Device）を用いたＣＣＤが記載されている。

【0006】

しかし、上記特開２００５−１３１１２９号公報に記載された技術では、内視鏡の先端部に配設されたＣＣＤに対して十分に高い電圧を印加しないと、十分な明るさの画像を得ることができない。一方、高い増幅率を得るために高い電圧を印加する場合には、安全性を図るために高電圧の信号線に十分な被覆を行うなどの必要があって、内視鏡の外径が増大してしまっていた。しかも、特殊な撮像素子を用いる必要があるために、コストも増大することになる。

【0007】

一方、画像の明るさを向上する他の方法としては、例えば特開２００９−２１９７１９号公報に、光源ユニットの自動制御が適正か否かを内視鏡画像の平均輝度値またはピーク値が設定輝度範囲内にあるか否かに基づき判断し、所定期間が経過しても設定輝度範囲から外れているときには、光源ユニットの制御による適切な光量制御は無理であると判断して、内視鏡画像の平均輝度値もしくはピーク値に基づいてゲイン係数を調整しゲイン補正を行う技術が記載されている。ここに、ゲイン補正は、ＤＳＰ（デジタルシグナルプロセッサ）等からなる画像取得手段により取得された内視鏡画像に対して行う、デジタルのゲイン補正である。

【0008】

このような撮像して得られたデジタル画像信号に対してデジタルゲインをかけ、信号強度を上げる方法について、図１５を参照して説明する。図１５は撮像して得られるアナログ画像信号から出力用（例えば、観察用や保存用など）の画像を得るときの流れを示す図である。

【0009】

撮像素子の各画素で光電変換して得られる画像信号はアナログ信号である。ここに、得られたアナログ画像信号は、微弱な光を光電変換して得られた信号であり、多くの画素の信号値が低いヒストグラムになっているものとする。このアナログ信号は、その後にＡ／Ｄ変換されてデジタル画像信号に変換される。

【0010】

ここに、人間の肉眼により滑らかな階調変化として認識される画像を得るためには、ＲＧＢ信号の一色に付き２５６階調、つまり８ビットでの表示が必要であると言われている。また、近年広く普及してきたハイビジョン画像では、一色に付き、さらに階調数の多い１０２４階調が用いられることもある。そこで、ここでは出力画像が１０ビットであるものとする。

【0011】

このとき、途中の信号処理も１０ビットで行うと、階調変換等を行った場合に中間階調が失われてしまうことがある。そこで、途中の信号処理においては、１０ビットよりも階調数の大きい例えば１２ビットでの処理が行われる。

【0012】

従って、撮像素子から得られるアナログ信号をＡ／Ｄ変換する際には、１２ビットのデジタル信号が出力されるようにサンプリングを行う。画像信号は、デジタル化されても、信号値の低い画素が多いヒストグラムとなるのはアナログ信号のときと同様である。

【0013】

その後に、オートゲインコントロール（ＡＧＣ：Automatic Gain Control）信号値にゲイン係数を乗算して、デジタル画像信号をリニア（線形）に増幅する。この処理を行うと、ダイナミックレンジが拡大する反面、階調が損なわれることになる。例えば、値０，１，２，…の信号を４倍に増幅すると、値０，４，８，…の信号が得られるが、値２〜３，５〜７，…の信号は存在しないために、いわゆる階調落ちが発生して、階調が１／４となってしまうことが分かる。

【0014】

そして、表示に適した画像に変換するために、非線形な変換であるγ補正を行う。このガンマ補正の後、または同時に、処理用の１２ビットの信号を、出力用の１０ビットの信号に変換する処理も行う（ガンマ補正の前に１０ビットの信号に変換すると、その後のガンマ補正が非線形であって階調落ちが発生するために、１０ビットの信号への変換はガンマ補正の後または同時であることが好ましい）。ここに、１２ビットから１０ビットへの変換は、１／４倍の信号値増幅に相当するために、ＡＧＣによる信号増幅が４倍までであれば、出力画像における階調の損失は実質的に発生しないことが分かる。

【先行技術文献】

【特許文献】

【0015】

【特許文献1】特開２００５−１３１１２９号公報

【特許文献2】特開２００９−２１９７１９号公報

【発明の概要】

【発明が解決しようとする課題】

【0016】

しかしながら、観察に適した明るさの画像を得ようとするときに、４倍の信号増幅では十分でない場合がある。この点について、図１６を参照して説明する。図１６は４倍の信号増幅では画像の明るさが不足する場合の例を示す図である。

【0017】

まず、画像の明るさを調整するに当たっては、最も良い画質を得るために、ゲインを１に固定した状態での光源光量調節を優先する。次に、光源光量を最大に調整したとしても明るさが不足する場合には、最大照明光量を維持しながら、次にＡＧＣによるゲイン調整を行い、必要な明るさの画像を得るようにする。そして、処理信号が１２ビット、出力信号が１０ビットである上述した場合には、階調が損なわれていない出力画像を得ることができるのは、４のゲイン（４倍の信号増幅）までである。

【0018】

点光源の被写体を考えたときに、被写体は近距離にあるほど明るく観察され、遠距離に行くに従い暗く観察されることになる。そして、近距離にある被写体（近景）に対しては光源光量の調節で対応可能であり、中距離にある被写体（中景）に対しては最大照明光量としてかつＡＧＣによるゲイン調整が必要となる場合において、４までのゲイン調整では適切な明るさの画像を得ることができない被写体距離に到達した場合には、その被写体距離よりも遠距離にある被写体（遠景）は明るさ不足の領域となる。

【0019】

このような明るさ不足の領域に対して例えば４よりも大きいゲイン調整を行うと、上述した理由により、階調の損失が発生して画質が低下することになる。また、例えば、上述のような１２ビットでの処理ではなく、１４ビットで処理するような場合であれば、ＡＧＣとして最大１６倍までのゲイン調整をしても諧調の損失は発生しないが、この場合、撮像素子からの読み出し信号の情報量が大幅に増加してしまうため、画像の読み出し時間が長くなってしまう問題がある。

【0020】

本発明は上記事情に鑑みてなされたものであり、暗い被写体に対応可能となるように明るさ調整幅を広く確保すると共に、明るい被写体の画質を低下させることのない内視鏡装置を提供することを目的としている。

【課題を解決するための手段】

【0021】

上記の目的を達成するために、本発明の第１の態様による内視鏡装置は、撮像により生成されたアナログの画像を取得するアナログ画像取得部と、アナログの前記画像を所定の階調数のデジタルの画像に変換するＡ／Ｄ変換部と、デジタルの前記画像のゲインを調節するデジタルゲイン調節部と、前記デジタルゲイン調節部によりゲイン調節されたデジタルの前記画像の階調数を、前記所定の階調数から、該所定の階調数以下の出力用の階調数に変換して出力用の画像を生成する出力画像生成部と、前記画像の明るさを変化させる明るさ変化部と、前記所定の階調数を前記出力用の階調数で割った値以下に閾値を設定して、前記ゲインが前記閾値以上であるかを判定し、前記閾値以上である場合には、前記デジタルゲイン調節部にゲインを該閾値よりも増加させないように、かつ前記明るさ変化部に対して前記画像の明るさを増大させるように制御する制御部と、を具備している。

【発明の効果】

【0022】

本発明の内視鏡装置によれば、暗い被写体に対応可能となるように明るさ調整幅を広く確保すると共に、明るい被写体の画質を低下させないようにすることができる。

【図面の簡単な説明】

【0023】

【図1】本発明の実施形態１の内視鏡装置の構成を示すブロック図。

【図2】上記実施形態１における明るさ調整の手順を示す図。

【図3】上記実施形態１において、撮像素子に結像される画像がやや明るい場合と暗い場合の信号処理経路上における明るさヒストグラムの変化の様子の例を示す図。

【図4】上記実施形態１における明るさ調整の処理を示すフローチャート。

【図5】本発明の実施形態２における明るさ調整の手順を示す図。

【図6】上記実施形態２における撮像素子の画素配列を示す図。

【図7】上記実施形態２のビニング処理における加算対象画素の例を示す図。

【図8】本発明の実施形態３における明るさ調整の手順を示す図。

【図9】上記実施形態３の蛍光観察モードにおける通常露光モードの動作を示すタイミングチャート。

【図10】上記実施形態３の蛍光観察モードにおける長時間露光モードの動作を示すタイミングチャート。

【図11】本発明の実施形態４の蛍光観察モードにおける長時間露光モードの動作を示すタイミングチャート。

【図12】本発明の実施形態５における明るさ調整の手順を示す図。

【図13】上記実施形態５において、小径絞り開口時の対物絞りの状態を示す図。

【図14】上記実施形態５において、大径絞り開口時の対物絞りの状態を示す図。

【図15】従来において、撮像して得られるアナログ画像信号から出力用の画像を得るときの流れを示す図。

【図16】従来において、４倍の信号増幅では画像の明るさが不足する場合の例を示す図。

【発明を実施するための形態】

【0024】

以下、図面を参照して本発明の実施の形態を説明する。
［実施形態１］

【0025】

図１から図４は本発明の実施形態１を示したものであり、図１は内視鏡装置１の構成を示すブロック図である。

【0026】

図１に示すように、内視鏡装置１は、アナログ画像取得部たる内視鏡２と、ビデオプロセッサ３と、光源装置４と、観察モニタ５と、デジタルファイリング装置６と、入力部７と、を備えている。

【0027】

内視鏡２は、手元側の操作部から延出され被検体内へ挿入される細長の挿入部の先端部に、撮像光学系１１、対物絞り１２、アクチュエータ１３、撮像素子１４、照明光学系１５を備えている。内視鏡２は、さらに、挿入部および操作部を延設されて光源装置４へ接続されるライトガイド１６を備えると共に、操作部にモード切替指示スイッチ１７とスコープＩＤメモリ１８とを備えている。

【0028】

ライトガイド１６は、光学ファイババンドル等により構成されていて、光源装置４から供給される照明光を照明光学系１５へ伝達するものである。

【0029】

照明光学系１５は、伝達された照明光を被写体となる被検体へ向けて照射するものである。

【0030】

撮像光学系１１は、照明された被写体の光学像を撮像素子１４上に結像するものである。

【0031】

対物絞り１２は、撮像光学系１１により結像される光学像の明るさを変化させて調節する光学素子であり、開口径の異なる複数の絞り開口を備えている（図１３、図１４等参照）。

【0032】

アクチュエータ１３は、対物絞り１２を駆動して、絞り開口径を変化させるものである。また、アクチュエータ１３は、図示しない励起光カットフィルタを撮像素子１４の受光光路上に挿脱する駆動も行う。ここに、励起光カットフィルタは、蛍光観察を行う際に、被検体から反射されてくる励起光（後述するように、Ｂ−ＬＥＤ２２ｂが発光する青色光）をカットするための光学素子である。

【0033】

撮像素子１４は、撮像光学系１１により結像された光学像からアナログの画像を生成するものである。この撮像素子１４は、撮像面上に複数の画素１４ｐ（図６参照）を配列して構成されており、本実施形態においてはアナログ増幅部であるＦＤアンプ（Floating Diffusion Amplifier）を内蔵するものとなっている。このＦＤアンプは、フォトダイオード（ＰＤ）により発生された電荷を一時的に蓄積するためのフローティングディフュージョン（ＦＤ）から信号を読み出す際に、電荷信号を電圧信号に変換し、この変換時に信号増幅を行うものであり、画像を処理することにより明るさを変化させるものの一種である。そして、ＦＤアンプは、アナログ画像を増幅する際の増幅率を制御することが可能となっている（この増幅率の制御は、後述するように、撮像素子ドライバ４１が行う）。このような撮像素子１４は、アナログの画像をフレーム期間毎のフレーム単位で時系列的に取得するように制御される。

【0034】

モード切替指示スイッチ１７は、観察モードを切り替える入力指示を行うためのスイッチである。本実施形態においては、観察モードとして通常光観察モードと蛍光観察モードとがあることを想定しており、モード切替指示スイッチ１７の操作状態に応じて、通常光観察モードに設定するための指示信号と蛍光観察モードに設定するための指示信号との何れかがビデオプロセッサ３の後述するモード切替回路４３へ出力される。

【0035】

スコープＩＤメモリ１８は、内視鏡２の製品型番やシリアル番号、あるいはその他内視鏡２に固有の情報等を不揮発に記憶する記憶媒体である。

【0036】

光源装置４は、発光ユニット２１と、コリメートレンズ２４と、ＬＥＤ駆動回路２５と、電源２６と、を備えている。

【0037】

発光ユニット２１は、光源として、赤色（Ｒ）光を発光するＲ−ＬＥＤ２２ｒと、緑色（Ｇ）光を発光するＧ−ＬＥＤ２２ｇと、青色（Ｂ）光を発光するＢ−ＬＥＤ２２ｂと、を備えている。これらの内のＢ−ＬＥＤ２２ｂが発光する青色光は、蛍光観察を行う際の励起光としても用いられる。また、Ｇ−ＬＥＤ２２ｇが発光する緑色光は、蛍光観察を行う際の参照光としても用いられる。

【0038】

具体例を挙げれば、波長３９０〜４７０ｎｍの青色光は、粘膜に存在するコラーゲンなどの蛍光物質からの自家蛍光を観察するための励起光となる。また、波長５４０〜５６０ｎｍの緑色光は、血液中のヘモグロビンに吸収される参照光となる。青色励起光を照射したときに、腫瘍組織は、正常組織に比べて自家蛍光が減弱するという特性がある。このために、蛍光観察（ＡＦＩ：Auto Fluorescence Imaging）においてはこれら励起光および参照光を照射することにより、腫瘍性病変と正常粘膜とを異なる色調で強調表示して、がんなど微細病変の早期発見を支援することが可能となっている。

【0039】

発光ユニット２１は、さらに、第１のビームスプリッタ２３ｒと、第２のビームスプリッタ２３ｇと、第３のビームスプリッタ２３ｂと、を備えている。

【0040】

第１のビームスプリッタ２３ｒは、Ｒ−ＬＥＤ２２ｒから照射された赤色光を反射する反射ミラーとして機能する。

【0041】

第２のビームスプリッタ２３ｇは、第１のビームスプリッタ２３ｒにより反射された赤色光を透過すると共に、Ｇ−ＬＥＤ２２ｇから照射された緑色光を反射するものである。

【0042】

第３のビームスプリッタ２３ｂは、第２のビームスプリッタ２３ｇからの赤色光および緑色光を反射すると共に、Ｂ−ＬＥＤ２２ｂから照射された青色光を透過するものである。

【0043】

コリメートレンズ２４は、第３のビームスプリッタ２３ｂからのＲＧＢ光を平行光束にして、ライトガイド１６の入射端へ照射するものである。

【0044】

ＬＥＤ駆動回路２５は、ＡＧＣゲイン検知回路３７から入力される制御信号に基づいて、発光ユニット２１の各ＬＥＤ２２ｒ，２２ｂ，２２ｇの何れを、どのような発光タイミングで発光させるかを制御するものである。このとき、ＬＥＤ駆動回路２５は、モード切替回路４３から通知された観察モードが通常光観察モードであるかまたは蛍光観察モードであるかに応じて、各ＬＥＤ２２ｒ，２２ｂ，２２ｇの発光タイミングを制御するようになっている。

【0045】

電源２６は、発光ユニット２１およびＬＥＤ駆動回路２５へ電力を供給する電力源である。

【0046】

ビデオプロセッサ３は、プロセス回路３１と、Ａ／Ｄ変換回路３２と、画像処理回路３３と、Ｄ／Ａ変換回路３８ａ，３８ｂ，３８ｃと、符号化回路３９と、撮像素子ドライバ４１と、アクチュエータ制御回路４２と、モード切替回路４３と、調光制御パラメータ切替回路４４と、調光回路４５と、を備えている。

【0047】

撮像素子１４から出力されるアナログの撮像信号は、プロセス回路３１へ入力される。

【0048】

プロセス回路３１は、入力された撮像信号にアナログのプロセス処理を行うものである。

【0049】

Ａ／Ｄ変換回路３２は、プロセス回路３１から出力されるアナログ撮像信号をサンプリング（量子化）して、画像処理用の所定の階調数Ｎ（Ｎは２以上の整数）のデジタル画像信号に変換するＡ／Ｄ変換部である。なお、本実施形態においては、Ａ／Ｄ変換回路３２は１２ビット、すなわち２の１２乗の階調数のデジタル画像信号に変換するものとして説明する。

【0050】

また、本実施形態では撮像素子１４がアナログ撮像素子であるものとしてＡ／Ｄ変換回路３２をビデオプロセッサ３に設けたが、デジタル撮像素子である場合には撮像素子１４内に設けられていることになる（このときには、さらにプロセス回路３１を撮像素子１４内に設けても良いし、プロセス回路３１に相当する処理をビデオプロセッサ３内においてデジタル的に行っても良い）。

【0051】

画像処理回路３３は、Ａ／Ｄ変換回路３２から出力されたデジタル画像信号に各種のデジタル信号処理を施すものであり、ＡＧＣ（オート・ゲイン・コントロール）処理回路３４、ビニングフレーム加算回路３５、色マトリクス回路３６、およびＡＧＣゲイン検知回路３７を備えている。

【0052】

ＡＧＣ処理回路３４は、デジタルの画像信号のゲインを調節して増幅を行うデジタルゲイン調節部であり、利得（ゲイン）を制御することが可能となっている。

【0053】

ビニングフレーム加算回路３５は、画像信号にビニング処理、あるいはフレーム加算処理を行うものである。

【0054】

ここに、ビニング処理は、空間的に近接する複数の画素信号を加算して１画素として取り扱う処理であり、幾つかの例としては、２×２画素を１画素として取り扱う２×２ビニング、３×３画素を１画素として取り扱う３×３ビニング、等が挙げられる。本実施形態ではビニング処理をビデオプロセッサ３内のビニングフレーム加算回路３５により行う例を説明するが、ビニング処理機能を備えた撮像素子１４によりビニング処理を行っても構わない。後述する実施形態２において説明するように、ビニング処理には、画素数が１／ｋ（ここに、ｋは正の整数）に減少する処理と、画素数をほとんど減少させない処理とがある。

【0055】

また、フレーム加算処理は、撮像素子１４からフレーム単位で出力される画像信号を、同一画素位置同士で加算することにより、複数フレームの画像信号を１フレームの画像信号として取り扱う処理である。フレーム加算処理の例としては、２つのフレームを加算して１つのフレームを生成する２フレーム加算、３つのフレームを加算して１つのフレームを生成する３フレーム加算、等が幾つかの例として挙げられる。例えば２フレーム加算の場合でも、第１フレームと第２フレームとを加算して第１の加算フレームを生成した後において、第３フレームと第４フレームとを加算して第２の加算フレームを生成する等の場合と、第２フレームと第３フレームとを加算して第２の加算フレームを生成する等の場合と、がある。前者の場合にはフレーム数が半分になるが、後者の場合には総フレーム数が例えば１フレーム減るだけである。

【0056】

色マトリクス回路３６は、ＡＧＣ処理回路３４によりゲイン調節された後のデジタル画像に、画像信号の色空間変換を行ったり、γ変換を行ったりすることにより、出力用（観察用や保存用など）の画像を生成する出力画像生成部である。ここに、色空間変換は、例えばＲＧＢ信号からＹＣｂＣｒ信号へ変換する、等である。また、γ変換は、よく知られているように、観察モニタ５の表示特性に合うように信号値を非線形に変換する処理であり、典型的には、低輝度の信号の階調を伸長し、高輝度の信号の階調を圧縮するような変換を行う。このγ変換においては、デジタル画像処理用の階調数Ｎから、出力用の階調数Ｍ（Ｍは２以上Ｎ以下の整数）への変換も行う。なお、本実施形態においては、γ変換において、１０ビット、すなわち２の１０乗の階調数に変換するものとして説明する。

【0057】

ＡＧＣゲイン検知回路３７は、後述するように調光回路４５から発光ユニット２１の照明光量を取得して、発光ユニット２１の光量が最大照明光量となったか否かを判定し、最大照明光量となった場合であって、さらに明るさを増大する必要がある場合には、ＡＧＣ処理回路３４を制御してゲインを増大させる。

【0058】

ＡＧＣゲイン検知回路３７は、さらにＡＧＣ処理回路３４のゲインを取得して、照明光量が最大照明光量であってかつゲインが所定の階調数に基づいて設定される閾値Ｔｈ以上であるかを判定し、最大照明光量であって閾値Ｔｈ以上である場合（第１の明るさ調整レベルとなったとき）には、ＡＧＣ処理回路３４にゲインを閾値Ｔｈよりも増加させないようにするとともに、明るさ変化部に対して画像の明るさを増大させるように制御する制御部である。

【0059】

このＡＧＣゲイン検知回路３７が制御する明るさ変化部は、画像の明るさを変化させるものであり、撮像素子１４に内蔵されるＦＤアンプ（あるいは、ビデオプロセッサ３内に設けたアナログ増幅部など）、ビニングフレーム加算回路３５が備えるビニング処理機能（あるいは撮像素子１４が備えるビニング処理機能）、ビニングフレーム加算回路３５が備えるフレーム加算処理機能、後述するようにフレームレートの制御を行う撮像素子ドライバ４１、対物絞り１２などがあって、下記に説明するように実施形態毎に異なる構成を採用している。

【0060】

従って、明るさ変化部が明るさを変化させる対象となる画像としては、撮像素子のフォトダイオード（ＰＤ）により光電変換して得られるアナログ画像、このアナログ画像をＦＤアンプ等でアナログ増幅したアナログ画像、アナログ画像をＡ／Ｄ変換回路３２により変換したデジタル画像などがある。

【0061】

そして、本実施形態における明るさ変化部は、撮像素子１４のＦＤアンプであるものとする。従って、ＡＧＣゲイン検知回路３７は、撮像素子ドライバ４１を介してＦＤアンプの増幅率を制御する。

【0062】

このとき、明るさ変化部による明るさの変化は、連続的とはならず、不連続となる場合がある。例えば、ビニングやフレーム加算の場合には整数倍が単位となるし、ＦＤアンプによるアナログ増幅や、フレームレートの変更ステップ、対物絞り１２の開口径についても段階的な（不連続な）変化となることがあると考えられる。このような場合には、明るさ変化部により明るさを変化させる前後において出力用画像の明るさが急激に変化することなく略同一に維持されるように、明るさ変化部が変化させた明るさを相殺する分だけ、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４にゲインを調整させる処理を行う。従って、明るさ変化部により明るさを増大した後は、ゲインが閾値Ｔｈ未満になると考えられるために、ＡＧＣ処理回路３４によりゲインを変化させてより細かいレベルでの明るさの制御を行うことが再び可能となる。

【0063】

また、明るさ変化部により明るさを既に増大している場合において、ＡＧＣ処理回路３４のゲインが１となってもさらに明るさを減少させる必要がある場合（第２の明るさ調整レベルとなったとき）には、ＡＧＣゲイン検知回路３７は、明るさ変化部に明るさを減少させるように制御する。このときに明るさ変化部が減少させた明るさを相殺する分だけ、ＡＧＣゲイン検知回路３７が、ＡＧＣ処理回路３４にゲインを調整させる処理を行うのは上述と同様である。従って、明るさ変化部により明るさを減少した後は、ゲインが１よりも大きくなると考えられるために、ＡＧＣ処理回路３４によりゲインを変化させてより細かいレベルでの明るさの制御を行うことが再び可能となる。

【0064】

このような処理を行う場合には、明るさ変化部により明るさを増大する時点の第１の明るさ調整レベル（発光ユニット２１による照明光量調整、ＡＧＣ処理回路３４によるゲイン調整、および明るさ変化部による明るさ調整を組み合わせた明るさ調整レベル）と、明るさ変化部により明るさを減少する時点の第２の明るさ調整レベルとは異なり、基本的に、第１の明るさ調整レベルは第２の明るさ調整レベル以上となる。

【0065】

特に、明るさ変化部による明るさの変化が不連続である場合には、第１の明るさ調整レベルは第２の明るさ調整レベルよりも高い。従って、明るさ調整レベルを増大するときの経路と、明るさ調整レベルを減少するときの経路とは異なり、いわゆるヒステリシス曲線に類似する経路形状となる（図２、図５、図８、図１２等参照）。

【0066】

明るさ変化部による不連続な明るさの変化は、いわゆる明るさ調整モードのスイッチングとして捉えることができるが、上述したようなヒステリシス形状の経路を辿る場合には、一旦モード移行した後は、手ブレや被写体の動きによって被写体距離が変化する等により被写体の明るさが多少変化したとしても（つまり、被写体の明るさに大きな変化が生じない限り）、元のモードにすぐには戻らず、頻繁なモードスイッチングが起こり難い利点がある。

【0067】

明るさ変化部による明るさ変化（モードスイッチング）は、後述するように、画質の変化を伴うことがあるが、頻繁にモードスイッチングが起こると出力用画像の画質が頻繁に変化することになるために、観察者に違和感を与えことになる。従って、こうした違和感を軽減することも可能となる。

【0068】

さらに、明るさ変化部による明るさ変化（モードスイッチング）は、後述するように、撮像素子１４のリセットが必要になる場合もある。このときには、モードスイッチングを行うとフレーム落ちが発生することになる。従って、モードスイッチングが発生し難いヒステリシス形状の明るさ調整経路を採用することにより、フレーム落ちの発生回数を大幅に抑制することが可能となる。

【0069】

そして、ＡＧＣゲイン検知回路３７は、明るさ変化部が明るさを増大させておらず、かつＡＧＣ処理回路３４のゲインが「１」であって、さらに明るさを減少する必要がある場合には、調光回路４５を制御して発光ユニット２１の照明光量を減少させる。

【0070】

加えて、ＡＧＣゲイン検知回路３７は、上述した画像処理用の階調数Ｎ（所定の階調数）に基づき閾値Ｔｈを設定する処理も行う。具体例として、ＡＧＣゲイン検知回路３７は、さらに、上述した出力用の階調数Ｍと、（γ変換は非線形変換であるために）γ変換したときに階調落ちが発生しない階調数Ｌと、に基づいて、以下の数式１に示すように閾値Ｔｈを設定する。
［数１］
Ｔｈ＝λ×ｍｉｎ［Ｎ，Ｌ］／Ｍ
ここに、λは値を調整するために乗算される１以下の所定の係数であり、ｍｉｎ［Ｎ，Ｌ］はＮとＬの内の大きくない方の値をとることを示している。

【0071】

なお、数式１をより簡易化して、γ変換における階調落ちを考慮しないようにする場合には、数式１は次の数式２のように書かれる。
［数２］
Ｔｈ＝λ×Ｎ／Ｍ

【0072】

この数式２に示すように閾値Ｔｈを設定する場合には、ＡＧＣゲイン検知回路３７は、画像処理用の階調数Ｎと出力用の階調数Ｍとを用いていることになる。そして具体的な数値例を挙げれば、本実施形態においてはＮは１２ビットで表現される階調、Ｍは１０ビットで表現される階調であるために、λ＝１とすると、Ｔｈ＝４となる。従って、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４のゲインが「４」となったところで、明るさ変化部に画像の明るさを増大させる制御を行うことになる。このゲイン「４」は、画像処理用の階調数Ｎの信号から出力用の階調数Ｍの信号に変換したときに、階調落ちが発生しない最大ゲイン値となる。

【0073】

Ｄ／Ａ変換回路３８ａ，３８ｂ，３８ｃは、色マトリクス回路３６から出力されるデジタルの画像信号をアナログの画像信号に変換するものであり、例えば出力される信号成分（ＲＧＢ成分、あるいはＹＣｂＣｒ成分等）毎に対応して設けられている。

【0074】

符号化回路３９は、色マトリクス回路３６から出力されるデジタルの画像信号に符号化処理（具体例としては圧縮処理）を行うものである。

【0075】

撮像素子ドライバ４１は、撮像素子１４を駆動制御し、露光や読み出しを行わせるものである。この撮像素子ドライバ４１は、撮像素子１４に内蔵されるＦＤアンプの増幅率の制御も行う。さらに撮像素子ドライバ４１は、撮像素子１４により撮像する際のフレームレートの制御も行う。加えて撮像素子ドライバ４１は、撮像素子１４がビニング処理機能を備えている場合には、該機能の制御も行う。

【0076】

アクチュエータ制御回路４２は、アクチュエータ１３を制御することにより、対物絞り１２を駆動させて絞り開口径を変化させ、あるいは励起光カットフィルタを撮像光学系１１の光路上に挿脱するものである。

【0077】

モード切替回路４３は、モード切替指示スイッチ１７から入力された指示信号に応じて、内視鏡装置１の観察モードを切り替えるものである。すなわち、モード切替回路４３は、モード切替指示スイッチ１７から蛍光観察モードに設定する指示信号が入力された場合には、アクチュエータ制御回路４２を介してアクチュエータ１３に励起光カットフィルタを撮像光学系１１の光路上へ挿入させるとともに、調光制御パラメータ切替回路４４を介して調光回路４５に蛍光観察用のパラメータを設定させる。また、モード切替回路４３は、モード切替指示スイッチ１７から通常光観察モードに設定する指示信号が入力された場合には、アクチュエータ制御回路４２を介してアクチュエータ１３に励起光カットフィルタを撮像光学系１１の光路上から退避させるとともに、調光制御パラメータ切替回路４４を介して調光回路４５に通常光観察用のパラメータを設定させる。

【0078】

調光制御パラメータ切替回路４４は、モード切替回路４３により設定された観察モードに応じて、調光回路４５に設定される調光制御パラメータを切り替えるものである。

【0079】

調光回路４５は、プロセス回路３１から出力される撮像信号（すなわち、ＡＧＣ処理回路３４による処理が行われる前の信号）に基づき画像の明るさを検知して、画像の明るさが適切な明るさとなるように、光源装置４により発光する照明光の光量を調整するものである。従って、調光回路４５によりＲ−ＬＥＤ２２ｒ、Ｇ−ＬＥＤ２２ｇ、Ｂ−ＬＥＤ２２ｂのそれぞれの発光量が設定され、すなわち発光バランスの調整も行われる。

【0080】

調光回路４５は、内部に調光制御パラメータを備えており、調光制御パラメータ切替回路４４からの制御に基づきパラメータセットを切り替える。具体的には、通常光観察モードのときにはＲ−ＬＥＤ２２ｒ、Ｇ−ＬＥＤ２２ｇ、Ｂ−ＬＥＤ２２ｂの全てを発光許可するパラメータセットが用いられ、蛍光観察モードのときにはＲ−ＬＥＤ２２ｒの発光を禁止するとともに、励起光を発光するＢ−ＬＥＤ２２ｂおよび参照光を発光するＧ−ＬＥＤ２２ｇの発光を許可するパラメータセットが用いられる。

【0081】

さらに、調光回路４５は、プロセス回路３１の出力から検知される画像の明るさが適切になるように、各パラメータセットに設定するパラメータ値を、設定可能な範囲内において変更する。そして、調光回路４５は、観察モードに応じたパラメータセットのパラメータ値に基づいて、調光信号を発光ユニット２１へ出力し、電源２６からＲ−ＬＥＤ２２ｒ、Ｇ−ＬＥＤ２２ｇ、Ｂ−ＬＥＤ２２ｂへ供給する電流を設定する。これにより、ＬＥＤ駆動回路２５から発光タイミングを示す発光信号が発光ユニット２１へ出力されると、観察モードに応じた適切なタイミングおよび適切な照明光量で発光ユニット２１が照明光を発光する。また、調光回路４５は、発光ユニット２１の照明光量を示す情報をＡＧＣゲイン検知回路３７へ出力する。

【0082】

次に、図２は明るさ調整の手順を示す図である。

【0083】

まず、本実施形態における明るさ調整のモードスイッチングは、撮像素子１４に内蔵されるＦＤアンプにおけるローアンプモード（例えば、アナログ増幅のゲインが１）とハイアンプモード（例えば、アナログ増幅のゲインが３など）とのスイッチングとなっている。

【0084】

そして、明るさの調整は、光源である発光ユニット２１の照明光量により調整することが優先される。従って、基本設定としては、ＡＧＣ処理回路３４のゲインは１、ＦＤアンプのモードはローアンプモードである。

【0085】

このような基本設定の下で、光源光量を調整することにより、画像が明るすぎる場合には光源光量を減少させ、画像が暗すぎる場合には光源光量を増加させる。このときの明るさ調整範囲は、最小照明光量から最大照明光量までである。

【0086】

そして、光源光量を最大照明光量にしても画像がまだ暗い場合には、ＡＧＣ処理回路３４のゲイン調整を２番目に優先して行う。本実施形態においては、階調落ちが発生しない最大ゲイン値は上述したように４であるために、ゲインによる明るさ調整範囲は１から４までである。

【0087】

ゲインを４にしても画像がまだ暗い場合には、ＦＤアンプのモードをハイアンプモードに設定する。ＦＤアンプをハイアンプモードにしてアナログ画像の信号増幅を行うと、ノイズレベルも増幅されることになる。従って、明るさ変化部としてアナログ増幅部であるＦＤアンプを用いる場合には、画像の明るさを得る代わりに、Ｓ／Ｎ比の低下を招くことになる。つまり、明るさ変化部としてのＦＤアンプの利用は、画像の明るさと、出力用画像の画質と、のトレードオフの関係となっている。

【0088】

さらにこのとき、ローアンプモードからハイアンプモードへ移行する前後で出力用画像の明るさが急激に変化することのないように、ローアンプモードからハイアンプモードへの移行に伴う明るさの増大量を相殺する分だけ、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４にゲインを減少させる処理を行う。

【0089】

その後、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４にゲインを順次増加させて、１から４までの調整範囲内でゲインを増減することにより、出力用画像が適切な明るさとなるように明るさ調整を行う。

【0090】

一方、光源光量が最大照明光量、ＦＤアンプがハイアンプモード、ＡＧＣ処理回路３４のゲインが４である最大明るさの状態から、明るさを減少させるときには、次のように行う。

【0091】

まず、ＡＧＣ処理回路３４にゲインを減少させる処理を行う。

【0092】

ここで、ゲインを１にしても画像がまだ明るい場合には、ＦＤアンプのモードをローアンプモードに設定する。このとき、ハイアンプモードからローアンプモードへ移行する前後で出力用画像の明るさが急激に変化することのないように、ハイアンプモードからローアンプモードへの移行に伴う明るさの減少量を相殺する分だけ、ＡＧＣゲイン検知回路３７がＡＧＣ処理回路３４にゲインを増加させる処理を行うのは上述と同様である。

【0093】

その後、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４にゲインを順次減少させる。そして、ゲインを１にしても画像がまだ明るい場合には、光源の光量を減少させることにより、出力用画像が適切な明るさとなるように明るさ調整を行う。

【0094】

続いて、図３は、撮像素子１４に結像される画像がやや明るい場合と暗い場合の信号処理経路上における明るさヒストグラムの変化の様子の例を示す図である。

【0095】

撮像素子１４により光電変換を行うと（ＳＴ１）、画像がやや明るい場合には低輝度から例えば中輝度程度まで画素が分布する（ＳＴ１Ｈ）のに対し、画像が暗い場合には低輝度に大部分の画素が分布し、中輝度以上にはほとんど分布しない（ＳＴ１Ｌ）。

【0096】

撮像素子１４から画像を読み出す際にＦＤアンプにより増幅を行う（ＳＴ２）が、画像がやや明るい場合には例えばアナログ増幅は行わず（ＳＴ２Ｈ）、画像が暗い場合にはアナログ増幅を行ったとする（ＳＴ２Ｌ）。すると、画像がやや明るい場合だけでなく、画像が暗い場合にも、低輝度から例えば中輝度程度まで画素が分布した状態となる。

【0097】

撮像素子１４から出力されたアナログ画像をＡ／Ｄ変換回路３２によりデジタル信号に変換すると（ＳＴ３）、画像がやや明るい場合と画像が暗い場合との何れにおいても同様のサンプリングが行われ、画像処理用の所定の階調数Ｎのデジタル画像信号となる（ＳＴ３Ｈ、ＳＴ３Ｌ）。

【0098】

これらのデジタル画像信号に対して、ＡＧＣ処理回路３４によりデジタルゲイン調節を行いゲインアップした（ＳＴ４）とすると、何れのデジタル画像も階調幅が広がる（ＳＴ４Ｈ、ＳＴ４Ｌ）。

【0099】

その後、色マトリクス回路３６によりガンマ補正を行う（ＳＴ５）ことにより、何れのデジタル画像も出力用の階調数Ｍの信号に変換されると共に、明るさヒストグラムが例えば観察モニタ５に表示するのに適した形状に変化する（ＳＴ５Ｈ、ＳＴ５Ｌ）。

【0100】

図４は、上述したような明るさ調整の処理を示すフローチャートである。

【0101】

この処理を開始すると、まず、この明るさ調整の処理を終了するか否かを判定する（ステップＳ１）。

【0102】

ここで、まだ終了しない場合には、現在取得されている画像の明るさが適切な明るさよりも明るすぎるか否かを判定する（ステップＳ２）。

【0103】

ここで明るすぎないと判定された場合には、今度は、現在取得されている画像の明るさが適切な明るさよりも暗すぎるか否かを判定する（ステップＳ３）。

【0104】

ここで、暗すぎないと判定された場合には、適切な明るさであることになるために、今後の明るさ変化に対応するためにステップＳ１へ戻って、上述したような処理を繰り返して行う。

【0105】

また、ステップＳ３において暗すぎると判定された場合には、発光ユニット２１の発光量が最大照明光量であるか否かを判定する（ステップＳ４）。

【0106】

ここで、最大照明光量でないと判定された場合には、照明光量による調整を優先して、発光ユニット２１の発光量を増大させてから（ステップＳ５）、上述したステップＳ１の処理へ戻る。

【0107】

一方、ステップＳ４において既に最大照明光量であると判定された場合には、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４から取得したゲインの値が、閾値Ｔｈ以上であるか否かを判定する（ステップＳ６）。

【0108】

ここで、閾値Ｔｈ未満であると判定された場合には、ゲインを増加させる余地があるということであるために、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４にゲインを増加させてから（ステップＳ７）、上述したステップＳ１の処理へ戻る。

【0109】

また、ステップＳ６において、閾値Ｔｈ以上であると判定された場合には、ＡＧＣゲイン検知回路３７は、明るさ変化部に画像の明るさを増大させる（ステップＳ８）。すなわち本実施形態においては、上述したように、撮像素子１４に内蔵されるＦＤアンプのモードをローアンプモードからハイアンプモードへ移行させる。なおこのときには、上述したように、ローアンプモードからハイアンプモードへの移行に伴う明るさの増大量を相殺する分だけ、ＡＧＣ処理回路３４にゲインを減少させる処理を行わせると良い。そしてその後、上述したステップＳ１の処理へ戻る。

【0110】

一方、ステップＳ２において、現在取得されている画像の明るさが適切な明るさよりも明るすぎると判定された場合には、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４から取得したゲインの値が、１（つまり、ゲインアップなし）であるか否かを判定する。（ステップＳ９）。

【0111】

ここで、ゲインの値が１でないと判定された場合には、ＡＧＣゲイン検知回路３７は、ＡＧＣ処理回路３４にゲインを減少させてから（ステップＳ１０）、上述したステップＳ１の処理へ戻る。

【0112】

また、ステップＳ９において、ゲインの値が１であると判定された場合には、ＡＧＣゲイン検知回路３７は、明るさ変化部に画像の明るさを増大させている最中であるか否かを判定する（ステップＳ１１）。

【0113】

ここで、明るさ増加処理中であると判定された場合には、ＡＧＣゲイン検知回路３７は、明るさ変化部に画像の明るさを減少させる（ステップＳ１２）。すなわち本実施形態においては、上述したように、撮像素子１４に内蔵されるＦＤアンプのモードをハイアンプモードからローアンプモードへ移行させる。なおこのときには、上述したように、ハイアンプモードからローアンプモードへの移行に伴う明るさの減少量を相殺する分だけ、ＡＧＣ処理回路３４にゲインを増加させる処理を行わせると良い。そしてその後、上述したステップＳ１の処理へ戻る。

【0114】

一方、ステップＳ１１において、明るさ増加処理中でないと判定された場合には、ＡＧＣゲイン検知回路３７は、発光ユニット２１の発光量が最小照明光量であるか否かを判定する（ステップＳ１３）。

【0115】

ここで、最小照明光量でないと判定された場合には発光ユニット２１の発光量を減少させてから（ステップＳ１４）、また、最小照明光量であると判定された場合にはそのまま、上述したステップＳ１の処理へ戻る。

【0116】

こうして、ステップＳ１において終了すると判定された場合には、この明るさ調整の処理を終了する。

【0117】

なお、上述では撮像素子１４に内蔵されるＦＤアンプによりアナログ画像の増幅を行ったが、このような構成に限定されるものではなく、例えばビデオプロセッサ３内にアナログ増幅部を設ける等の構成であっても構わない。

【0118】

また、アナログ画像取得部は内視鏡２などの撮像素子１４等を含む構成に限定されるものではなく、撮像により生成されたアナログの画像を取得するものであれば良い。従って、アナログ画像取得部は、例えばビデオプロセッサ３に相当するような画像処理装置におけるアナログ画像入力部であっても構わない。

【0119】

そして、上述では、観察モードとして通常光観察モードと蛍光観察モードを例に挙げたが、その他にも、例えばＮＢＩ（Narrow Band Imaging：登録商標）観察モードに設定可能であっても構わない。

【0120】

なお、上述では、アナログ増幅を、ローアンプモードとハイアンプモードとの不連続な２段階の切り替えとしたが、勿論これに限るものではない。例えば、より連続的な切り替えに近付くように、アナログ増幅のゲインの変化ステップを小さくしても良い。さらには、アナログ増幅のレンジをより大きくしても良い。具体例としては、アナログ増幅のゲインを１〜８までのレンジで、例えば２５６段階に分割した細かい変化ステップで行うようにしても良い。この場合には、明るさを増加する際に、ＡＧＣ処理回路３４によるデジタルのゲインが４に達した段階でアナログ増幅のゲインを段階的に上げて行くようにし、逆に明るさを減少する際に、アナログ増幅のゲインを段階的に下げて行き、アナログ増幅のゲインが１に達した段階でＡＧＣ処理回路３４によるデジタルのゲインを４から減少させるようにする、等の処理が考えられる（ただし、この処理に限らず、上述したヒステリシス形状の明るさ調整経路を保つようにする処理であっても良い）。

【0121】

このような実施形態１によれば、光源光量の調整による明るさの調整を優先して行っているために、光源光量の調整のみで対応可能な範囲（例えば近点）内においては出力用画像の画質が低下することがない。

【0122】

また、ＡＧＣ処理回路３４によるゲイン調整により明るさの調整を行う場合には、出力用画像に階調落ちが発生しない上限を示す閾値Ｔｈ以下の範囲内で調整を行うようにしたために、デジタルでゲインを調整しても出力用画像の画質が低下するのを防止することができる。

【0123】

さらに、ゲインが閾値Ｔｈになっても明るさが不足する場合には、明るさ変化部としてのＦＤアンプをローアンプモードからハイアンプモードへ移行させるようにしたために、出力用画像の明るさの調整幅を広く確保することができ、遠点観察にも対応可能となる。

【0124】

一方、デジタルゲインが１になっても明るさが過剰である場合には、明るさ変化部としてのＦＤアンプをハイアンプモードからローアンプモードへ移行させるようにしたために、出力用画像の画質を高いレベルに戻すことができ、例えば近点観察時の画質を高いレベルに維持することが可能となる。

【0125】

そして、ＦＤアンプのアンプモードを変更する際に、アンプモードの変更に伴う明るさの変化量を相殺する分だけ、ＡＧＣ処理回路３４がゲインを変化させるようにしたために、出力用画像の明るさが急激に変化するのを防止し、観察者の違和感が生じないようにすることができる。

【0126】

加えて、ＦＤアンプをローアンプモードからハイアンプモードへ移行させるときの第１の明るさ調整レベルが、ハイアンプモードからローアンプモードへ移行させるときの第２の明るさ調整レベルよりも高くなるように、つまりいわゆるヒステリシス曲線に類似する経路形状となるようにしたために、モードスイッチングの発生回数、ひいては画質の変化回数を低減し、観察者の違和感を軽減することができる。

【0127】

こうして、遠点観察等の暗い被写体に対応可能となるように明るさ調整幅を広く確保することができると共に、近点観察等の明るい被写体の画質を低下させることのない内視鏡装置となる。
［実施形態２］

【0128】

図５から図７は本発明の実施形態２を示したものであり、図５は明るさ調整の手順を示す図、図６は撮像素子１４の画素配列を示す図、図７はビニング処理における加算対象画素の例を示す図である。

【0129】

この実施形態２において、上述の実施形態１と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。

【0130】

上述した実施形態１は、明るさ変化部としてＦＤアンプを用いたが、本実施形態は、ビニングフレーム加算回路３５または撮像素子１４が備えるビニング処理機能を用いるものとなっている。

【0131】

図６に示すように、撮像素子１４は、画素１４ｐを例えば水平方向および垂直方向に配列した２次元状の画素配列となっている。

【0132】

そして、本実施形態においては、ビニング処理として、例えば図７に示すような４画素加算、すなわち、水平方向および垂直方向に隣接する２×２画素（４つの画素１４ｐ）を加算して１画素（ビニング後の画素１４ｂ）として取り扱う（従って、画像の明るさが増大する）２×２ビニングを行うものとする。従って、ビニング処理は、撮像素子の各画素から得られる画像を処理することにより明るさを変化させる処理の一種である。

【0133】

ここに、ビニング処理は、ビニング処理機能を備えた撮像素子１４を用いる場合には撮像素子１４内において行うことも可能であるし、画像処理回路３３中のビニングフレーム加算回路３５により行うことも可能である。

【0134】

例えば撮像素子１４内においてビニング処理を行う場合には、一例としての２×２ビニングのときにはビニング処理後の画素数が１／４となって、読み出し画素数を低減することができるために、読出期間を短縮してフレームレートを向上することができる利点がある。

【0135】

一方、ビニングフレーム加算回路３５においてビニング処理を行う場合には、ビニング処理前の画像を保存したままビニング処理後の画像を生成する等が可能であるために、加算対象の着目４画素を２×２画素単位で移動していくのに代えて、水平１画素単位で移動し、１水平ラインが終了したところで垂直１画素単位で移動して再び水平１画素単位で移動するようにすれば、画素数がほとんど低減することがない（ｍ、ｎを正の整数として、撮像素子１４の全画素をｍ×ｎ画素としたときに、ビニング処理後の画素数は（ｍ−１）×（ｎ−１）画素となる）利点がある。

【0136】

こうして明るさ変化部としてビニング処理機能を用いた場合の明るさ調整の手順は、図５に示すように、上述した実施形態１の図２に示したものとほぼ同様である。すなわち、実施形態１のハイアンプモードへの移行に代えて４画素加算のビニング処理を行い、ローアンプモードへの移行に代えてビニング処理による画素加算をオフすれば良い。

【0137】

なお、明るさ変化部としてビニング処理機能を用いる場合には、画像の明るさを得る代わりに、画素数の低下（特に、撮像素子１４内でのビニング処理の場合）や、画像の鮮鋭度の低下（例えば、ビニングフレーム加算回路３５内でのビニング処理の場合（空間的に近接した画素信号の加算を行うため））等を招くことになる。従って、明るさ変化部としてのビニング処理機能の利用は、画像の明るさと、出力用画像の画質と、のトレードオフの関係となっている。

【0138】

また、画素数の低下を避けたい場合には、画素補間等の処理を追加して行うようにすれば良い。一方、鮮鋭度の低下を抑制したい場合には、鮮鋭度の強調処理を追加して行うようにすれば良い。

【0139】

このような実施形態２によれば、ビニング処理を行うことによっても、上述した実施形態１とほぼ同様の効果を奏することができる。
［実施形態３］

【0140】

図８から図１０は本発明の実施形態３を示したものであり、図８は明るさ調整の手順を示す図、図９は蛍光観察モードにおける通常露光モードの動作を示すタイミングチャート、図１０は蛍光観察モードにおける長時間露光モードの動作を示すタイミングチャートである。

【0141】

この実施形態３において、上述の実施形態１，２と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。

【0142】

本実施形態は、明るさ変化部としてフレームレートの制御（すなわち、フレーム期間の変更）を行う撮像素子ドライバ４１を用いるものとなっている。

【0143】

撮像素子ドライバ４１は、観察モードが通常光観察モードや蛍光観察モード、あるいはＮＢＩ観察モード等の何れであっても、必要に応じて、撮像素子１４により撮像する際のフレームレートを上述したように制御し得るようになっている。

【0144】

すなわち、例えば蛍光観察モードにおける通常露光モード時には、図９に示すように、光源装置４が励起光と参照光とを所定のタイミングで交互に発光する。そして、撮像素子１４は励起光または参照光が発光されている間に露光を行う（露光期間ＥＸＰ）。この通常露光モードの露光期間ＥＸＰが終了すると、撮像素子ドライバ４１は、読出開始信号を撮像素子１４へ出力する。撮像素子１４は、読出開始信号を受けると読出期間ＲＤに移行して、撮像した画像を画素単位、あるいはライン単位等で順次出力する。

【0145】

一方、図１０に示すような蛍光観察モードにおける長時間露光モード時に、光源装置４が励起光と参照光とを交互に発光するのは通常露光モード時と同様である。ただし、参照光を照射した結果得られる被検体からの反射光は通常の明るさを期待することができるのに対して、励起光を照射した結果、励起光カットフィルタを介して得られる被検体からの蛍光は、極めて微弱な明るさであると考えられる。そこで、ＡＧＣゲイン検知回路３７は、ＬＥＤ駆動回路２５を介して、長時間露光モードにおける励起光の照射期間（すなわち、励起光の露光期間ＥＸＰ）を、通常露光モードにおける励起光の照射期間よりも長くするように発光ユニット２１を制御する。具体例としては、通常露光モードの２フレーム分の期間（概略、（通常露光モードの２フレーム分の露光期間ＥＸＰ）＋（通常露光モードの１フレーム分の読出期間ＲＤ））とする等である。

【0146】

従って、ＡＧＣゲイン検知回路３７は、ＬＥＤ駆動回路２５を介して発光ユニット２１の発光タイミングを制御すると共に、撮像素子ドライバ４１が撮像素子１４へ出力する読出開始信号のタイミングを制御するようになっている。

【0147】

こうして明るさ変化部としてフレームレートの制御を行う撮像素子ドライバ４１を用いた場合の明るさ調整の手順は、図８に示すように、上述した実施形態１の図２に示したものとほぼ同様である。すなわち、実施形態１のハイアンプモードへの移行に代えて長時間露光モードへの移行を行い、ローアンプモードへの移行に代えて通常露光モードへの移行を行えば良い。

【0148】

なお、明るさ変化部としてフレームレートの制御を行う撮像素子ドライバ４１を用いる場合には、画像の明るさを得る代わりに、フレームレートの低下や、ブレの発生等を招くことになる。従って、明るさ変化部としてのフレームレートの制御を行う撮像素子ドライバ４１の利用は、画像の明るさと、撮像素子１４により取得されるアナログ画像のフレームレートと出力用画像の画質との少なくとも一方と、のトレードオフの関係となっている。

【0149】

このような実施形態３によれば、フレームレートを変更する処理を行うことによっても、上述した実施形態１，２とほぼ同様の効果を奏することができる。

【0150】

また、フレームレートを変更するモードスイッチングは撮像素子１４のリセットを必要とする場合があり、このときには、モードスイッチングに伴ってフレーム落ちが発生することになる。従って、上述したようにモードスイッチングが発生し難いヒステリシス形状の明るさ調整経路を採用することにより、フレーム落ちの発生回数を大幅に抑制することが可能となる利点がある。
［実施形態４］

【0151】

次に、図１１は本発明の実施形態４を示したものであり、蛍光観察モードにおける長時間露光モードの動作を示すタイミングチャートである。

【0152】

この実施形態４において、上述の実施形態１〜３と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。

【0153】

本実施形態は、明るさ変化部としてビニングフレーム加算回路３５が備えるフレーム加算処理機能を用いるものとなっている。

【0154】

まず、本実施形態においても、露光モードとして、通常露光モードと長時間露光モードとを設定可能となっている。これらの内の通常露光モードにおける露光および読み出しの動作は、上述した実施形態３の図９に示した動作と同様である。

【0155】

一方、本実施形態における長時間露光モード時の露光および読み出しの動作は、例えば図１１に示すように行う。

【0156】

すなわち、図９に示した処理と同様に、撮像時のフレームレートは一定のままとする（従って、撮像素子１４のリセットは不要となる）。ただし、図９の処理では励起光と参照光とを交互に照射して露光を行ったのに対して、本実施形態においては、例えば励起光、励起光、参照光（より明るい励起光の画像を得たい場合には、励起光の連続発光回数を増加させれば良い）の発光順序を繰り返して行うように制御して露光を行う。こうして、取得されたフレーム画像の内の、連続する励起光の発光期間の露光により得られたフレーム画像（時間的に近接する複数フレームの画像）をビニングフレーム加算回路３５においてフレーム加算する（従って、出力用画像のフレームレートは低減する）。

【0157】

このような処理を行うことにより、通常の露光時間の参照光の画像と、露光時間の長い励起光の画像と、を交互に得ることができる。

【0158】

なお、明るさ変化部としてビニングフレーム加算回路３５が備えるフレーム加算処理機能を用いる場合に、画像の明るさとトレードオフの関係となるのは、上述した実施形態３と同様に、フレームレートと出力用画像の画質との少なくとも一方である。

【0159】

このような実施形態４によれば、上述した実施形態３とほぼ同様の効果を奏するとともに、光源装置４の発光順序とビデオプロセッサ３の画像処理内容については変更が必要であるが、撮像素子１４の撮像時のフレームレートは変更の必要がないために、モードスイッチングを行ってもフレーム落ちが発生しない利点がある。
［実施形態５］

【0160】

図１２から図１４は本発明の実施形態５を示したものであり、図１２は明るさ調整の手順を示す図、図１３は小径絞り開口時の対物絞り１２の状態を示す図、図１４は大径絞り開口時の対物絞り１２の状態を示す図である。

【0161】

この実施形態５において、上述の実施形態１〜４と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。

【0162】

本実施形態は、明るさ変化部として対物絞り１２を用いるものとなっている。

【0163】

対物絞り１２は、より詳しくは、例えば図１３および図１４に示すように構成されている。

【0164】

すなわち、対物絞り１２は、光束通過用開口１２ｂを有する絞り基板１２ａと、この絞り基板１２ａに対して回動軸１２ｅを介して回動可能に軸支された絞り枠１２ｃと、を備えている。絞り枠１２ｃは、軸支部１２ｄを介して回動軸１２ｅに取り付けられており、小径絞り開口１２ｓと、大径絞り開口１２ｌと、を備えている。

【0165】

小径絞り開口１２ｓは、主に被写体の明るさが不足していないとき（例えば近点観察等）に用いられ、撮像素子１４上に結像される画像は大径絞り開口１２ｌの場合よりも暗くなるが、被写界深度が深い特徴がある。

【0166】

一方、大径絞り開口１２ｌは、主に被写体の明るさが不足しているとき（例えば遠点観察等）に用いられ、撮像素子１４上に結像される画像は小径絞り開口１２ｓの場合よりも明るくなるが、小径絞り開口１２ｓを用いる場合に比して被写界深度が浅い。

【0167】

内視鏡分野では、例えば数十ｍｍ程度の近点〜中点距離で観察を行うことが多く、撮像光学系１１もこうした被写体距離に合わせて設計されることが多い。従って、１００ｍｍ程度の遠点からの観察を大径絞り開口１２ｌを介して行うと、被写界深度の浅さのために、遠点付近の被写体の像がぼけてしまうと考えられる。そこで、遠点観察時に被写体のピントがずれることのないように、大径絞り開口１２ｌにはフォーカス位置調整用の補助レンズ１１ａが取り付けられている（ただし、撮像光学系１１が焦点調節機能を備えている場合には、該機能を利用しても構わない）。

【0168】

アクチュエータ１３は、このような対物絞り１２を駆動して、図１３に示すような小径絞り開口１２ｓが光束通過用開口１２ｂ上に位置する小絞りモードと、図１４に示すような大径絞り開口１２ｌが光束通過用開口１２ｂ上に位置する大絞りモードと、を切り替えて、撮像素子１４上に結像される光学像の明るさを変化させる。

【0169】

こうして明るさ変化部として対物絞り１２を用いた場合の明るさ調整の手順は、図１２に示すように、上述した実施形態１の図２に示したものとほぼ同様である。すなわち、実施形態１のハイアンプモードへの移行に代えて大絞りモードへの移行を行い、ローアンプモードへの移行に代えて小絞りモードへの移行を行えば良い。

【0170】

なお、明るさ変化部として対物絞り１２を用いる場合には、画像の明るさを得る代わりに、上述したように被写界深度の低下を招くことになる。従って、明るさ変化部としての対物絞り１２の利用は、画像の明るさと、出力用画像の画質と、のトレードオフの関係となっている。

【0171】

このような実施形態５によれば、対物絞り１２を用いることによっても、上述した実施形態１〜４とほぼ同様の効果を奏することができる。

【0172】

なお、上述した各実施形態の明るさ変化部の構成を、複数組み合わせて用いるようにしても勿論構わない。この場合には、明るさのダイナミックレンジをより拡大することができる利点がある。

【0173】

また、本発明は上述した実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明の態様を形成することができる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除しても良い。さらに、異なる実施形態にわたる構成要素を適宜組み合わせても良い。このように、発明の主旨を逸脱しない範囲内において種々の変形や応用が可能であることは勿論である。

【符号の説明】

【0174】

１…内視鏡装置
２…内視鏡（アナログ画像取得部）
３…ビデオプロセッサ（明るさ変化部としてのアナログ増幅部を含むこともある）
４…光源装置
５…観察モニタ
６…デジタルファイリング装置
７…入力部
１１…撮像光学系
１１ａ…補助レンズ
１２…対物絞り（明るさ変化部）
１２ａ…絞り基板
１２ｂ…光束通過用開口
１２ｃ…絞り枠
１２ｄ…軸支部
１２ｅ…回動軸
１２ｌ…大径絞り開口
１２ｓ…小径絞り開口
１３…アクチュエータ
１４…撮像素子（アナログ画像取得部、明るさ変化部としてのＦＤアンプを含む）
１４ｂ…ビニング後の画素
１４ｐ…画素
１５…照明光学系
１６…ライトガイド
１７…モード切替指示スイッチ
１８…スコープＩＤメモリ
２１…発光ユニット
２２ｒ…Ｒ−ＬＥＤ
２２ｂ…Ｂ−ＬＥＤ
２２ｇ…Ｇ−ＬＥＤ
２３ｂ，２３ｇ，２３ｒ…ビームスプリッタ
２４…コリメートレンズ
２５…ＬＥＤ駆動回路
２６…電源
３１…プロセス回路
３２…Ａ／Ｄ変換回路（Ａ／Ｄ変換部）
３３…画像処理回路
３４…ＡＧＣ処理回路（デジタルゲイン調節部）
３５…ビニングフレーム加算回路（明るさ変化部）
３６…色マトリクス回路（出力画像生成部）
３７…ＡＧＣゲイン検知回路（制御部）
３８ａ，３８ｂ，３８ｃ…Ｄ／Ａ変換回路
３９…符号化回路
４１…撮像素子ドライバ（明るさ変化部）
４２…アクチュエータ制御回路
４３…モード切替回路
４４…調光制御パラメータ切替回路
４５…調光回路

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】