特許 7592165 内視鏡プロセッサ、内視鏡装置、および内視鏡装置の作動方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-11-21

(45)【発行日】2024-11-29

(54)【発明の名称】内視鏡プロセッサ、内視鏡装置、および内視鏡装置の作動方法

(51)【国際特許分類】

   A61B 1/045 20060101AFI20241122BHJP

   A61B 1/00 20060101ALI20241122BHJP

【ＦＩ】

A61B1/045 622

A61B1/045 618

A61B1/00 513

【請求項の数】 20

(21)【出願番号】P 2023532905

(86)(22)【出願日】2021-07-05

(86)【国際出願番号】 JP2021025365

(87)【国際公開番号】W WO2023281607

(87)【国際公開日】2023-01-12

【審査請求日】2023-10-20

(73)【特許権者】

【識別番号】304050923

【氏名又は名称】オリンパスメディカルシステムズ株式会社

(74)【代理人】

【識別番号】110004185

【氏名又は名称】インフォート弁理士法人

(74)【代理人】

【識別番号】110002907

【氏名又は名称】弁理士法人イトーシン国際特許事務所

(72)【発明者】

【氏名】窪田 明広

(72)【発明者】

【氏名】神田 大和

【審査官】遠藤 直恵

(56)【参考文献】

【文献】国際公開第２０２０／００８８３４（ＷＯ，Ａ１）

【文献】国際公開第２０１９／０８３０１９（ＷＯ，Ａ１）

【文献】特開２０１２－００５５１２（ＪＰ，Ａ）

【文献】特開２０１１－２２４０３８（ＪＰ，Ａ）

【文献】国際公開第２０１７／１０４０４６（ＷＯ，Ａ１）

【文献】国際公開第２０１８／２２１０３３（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ａ６１Ｂ １／００－１／３２

(57)【特許請求の範囲】

【請求項1】

プロセッサを備え、前記プロセッサは、
第１照明光を照射して取得された第１画像情報から病変候補の第１領域を検出し、
前記第１照明光とはスペクトルの異なる第２照明光を照射して取得された第２画像情報から病変候補の第２領域を検出し、
被検体の観察対象部位に応じて、前記第１領域および前記第２領域の内から病変候補の表示用領域を選定し、
前記表示用領域を前記第１画像情報に重畳した表示用画像情報を生成する、
内視鏡プロセッサ。

【請求項2】

前記第１照明光は白色光である、
請求項１に記載の内視鏡プロセッサ。

【請求項3】

前記プロセッサは、
互いにスペクトルの異なる複数種類の第２照明光を照射して取得された複数の第２画像情報から複数の第２領域を検出し、
前記第１領域および前記複数の第２領域の内から前記表示用領域を選定する、
請求項１に記載の内視鏡プロセッサ。

【請求項4】

前記複数種類の第２照明光は、ＮＢＩ（Narrow Band Imaging）用照明光と、ＲＤＩ（Red Dichromatic Imaging）用照明光と、の少なくとも一方を含む、
請求項３に記載の内視鏡プロセッサ。

【請求項5】

前記プロセッサは、
前記第１領域の信頼度スコアと、前記第２領域の信頼度スコアと、の複数の信頼度スコアを算出し、
前記複数の信頼度スコアに基づき、前記表示用領域を選定する、
請求項１に記載の内視鏡プロセッサ。

【請求項6】

前記プロセッサは、
前記信頼度スコアが閾値よりも高い前記第１領域および前記第２領域の内から、前記表示用領域を選定する、
請求項５に記載の内視鏡プロセッサ。

【請求項7】

前記プロセッサは、
前記第１領域の位置と前記第２領域の位置とが重なる場合、前記第１領域と前記第２領域との内の、前記信頼度スコアが最も高い領域を前記表示用領域に選定する、
請求項６に記載の内視鏡プロセッサ。

【請求項8】

前記プロセッサは、
前記第１領域の位置と前記第２領域の位置とが重なる場合、前記第１領域と前記第２領域とをマージした領域を前記表示用領域に選定する、
請求項６に記載の内視鏡プロセッサ。

【請求項9】

前記プロセッサは、
前記第１領域の信頼度スコアと、前記複数の第２領域それぞれの信頼度スコアと、の複数の信頼度スコアを算出し、
前記複数の信頼度スコアに基づき、前記表示用領域を選定する、
請求項３に記載の内視鏡プロセッサ。

【請求項10】

前記プロセッサは、
前記被検体の前記観察対象部位に応じた複数の重み係数を前記複数の信頼度スコアにそれぞれ乗算し、
前記複数の重み係数をそれぞれ乗算した前記複数の信頼度スコアに基づき、前記表示用領域を選定する、
請求項９に記載の内視鏡プロセッサ。

【請求項11】

前記観察対象部位は、臓器であり、
前記プロセッサは、前記臓器の種類に応じて、前記複数の重み係数を設定する、
請求項１０に記載の内視鏡プロセッサ。

【請求項12】

前記プロセッサは、前記観察対象部位に応じて、前記複数の重み係数を自動で切り替える、
請求項１０に記載の内視鏡プロセッサ。

【請求項13】

前記プロセッサは、
前記第１画像情報と前記第２画像情報との動き検出を行い、
動き検出の結果に応じて前記第１領域と前記第２領域とを位置合わせしてから、前記表示用領域を選定し、前記表示用画像情報を生成する、
請求項１に記載の内視鏡プロセッサ。

【請求項14】

前記プロセッサは、
前記表示用領域の病変の種類を鑑別し、
鑑別結果を含む前記表示用画像情報を生成する、
請求項１に記載の内視鏡プロセッサ。

【請求項15】

前記プロセッサは、
前記鑑別結果として得られた病変の進行度を識別し、
前記進行度を含む前記表示用画像情報を生成する、
請求項１４に記載の内視鏡プロセッサ。

【請求項16】

第１照明光と、前記第１照明光とはスペクトルの異なる第２照明光とを含む複数種類の照明光を照射可能な光源装置と、
前記光源装置から前記第１照明光を照射して第１画像情報を取得し、前記光源装置から前記第２照明光を照射して第２画像情報を取得する撮像装置を備える内視鏡と、
前記第１画像情報から病変候補の第１領域を検出し、
前記第２画像情報から病変候補の第２領域を検出し、
被検体の観察対象部位に応じて、前記第１領域および前記第２領域の内から病変候補の表示用領域を選定し、
前記表示用領域を前記第１画像情報に重畳した表示用画像情報を生成するプロセッサを備える内視鏡プロセッサと、
前記表示用画像情報を表示するモニタと、
を備える内視鏡装置。

【請求項17】

第１識別器、第２識別器、病変領域選定部、および、表示処理部を含む内視鏡装置の作動方法であって、
前記第１識別器が、第１照明光を照射して取得された第１画像情報から病変候補の第１領域を検出し、
前記第２識別器が、前記第１照明光とはスペクトルの異なる第２照明光を照射して取得された第２画像情報から病変候補の第２領域を検出し、
前記病変領域選定部が、被検体の観察対象部位に応じて、前記第１領域および前記第２領域の内から病変候補の表示用領域を選定し、
前記表示処理部が、前記表示用領域を前記第１画像情報に重畳した表示用画像情報を生成する、
内視鏡装置の作動方法。

【請求項18】

前記第２識別器が、互いにスペクトルの異なる複数種類の第２照明光を照射して取得された複数の第２画像情報から複数の第２領域を検出し、
前記病変領域選定部が、前記第１領域の信頼度スコアと、前記複数の第２領域それぞれの信頼度スコアと、の複数の信頼度スコアを算出し、
前記病変領域選定部が、前記被検体の前記観察対象部位に応じた複数の重み係数を前記複数の信頼度スコアにそれぞれ乗算し、
前記病変領域選定部が、前記複数の重み係数をそれぞれ乗算した前記複数の信頼度スコアに基づき、前記第１領域および前記複数の第２領域の内から前記表示用領域を選定する、
請求項１７に記載の内視鏡装置の作動方法。

【請求項19】

前記観察対象部位は、臓器であり、
前記病変領域選定部が、前記臓器の種類に応じて、前記複数の重み係数を設定する、
請求項１８に記載の内視鏡装置の作動方法。

【請求項20】

前記内視鏡装置は、制御部を更に含み、
前記制御部が、前記観察対象部位に応じて、前記複数の重み係数を自動で切り替える、
請求項１８に記載の内視鏡装置の作動方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像情報から病変領域を検出する内視鏡プロセッサ、内視鏡装置、および内視鏡装置の作動方法に関する。

【背景技術】

【0002】

従来より、医療分野や工業用分野で内視鏡が広く利用されている。例えば、医療分野で内視鏡を用いると、術者は、表示装置に表示された被検体内の内視鏡画像を見て病変部を発見および鑑別し、病変部に対する処置具を用いた処置を行える。

【0003】

近年、術者による病変部の見落としを抑制し、診断し易くするために、内視鏡画像をコンピュータで定量的に解析して、内視鏡画像に病変候補の位置、鑑別情報などを表示するコンピュータ支援画像診断（ＣＡＤ：Computer Aided Detection/Diagnosis）が開発されている。ＣＡＤにより病変部が発見された場合、内視鏡画像上に強調表示（例えば枠などのマーカ表示）を行うことで、病変部が存在すること、および存在する位置を術者に報知する内視鏡装置が提案されている。

【0004】

例えば、ＷＯ２０１９／０８７９７１号公報には、第１の照明光で病変領域を検出し、第２の照明光で病変の種類を鑑別し、第３の照明光で進行度を特定する医療画像処理装置および内視鏡装置が記載されている。

【0005】

しかし、ＷＯ２０１９／０８７９７１号公報において、病変領域を検出する第１の照明光は、具体的に、該公報の図５に記載されたようなパターン１の鑑別用照明光である。この鑑別用照明光は、肉眼で観察する色に近い白色光（＝通常光）であり、病変部を比較的認識し易い特殊光ではないため、病変を見落とす可能性があった。

【0006】

本発明は上記事情に鑑みてなされたものであり、白色光では見落とす可能性がある病変も検出する機能を実現できる、内視鏡プロセッサ、内視鏡装置、および内視鏡装置の作動方法を提供することを目的としている。

【発明の開示】

【課題を解決するための手段】

【0007】

本発明の一態様による内視鏡プロセッサは、プロセッサを備え、前記プロセッサは、第１照明光を照射して取得された第１画像情報から病変候補の第１領域を検出し、前記第１照明光とはスペクトルの異なる第２照明光を照射して取得された第２画像情報から病変候補の第２領域を検出し、被検体の観察対象部位に応じて、前記第１領域および前記第２領域の内から病変候補の表示用領域を選定し、前記表示用領域を前記第１画像情報に重畳した表示用画像情報を生成する。

【0008】

本発明の一態様による内視鏡装置は、第１照明光と、前記第１照明光とはスペクトルの異なる第２照明光とを含む複数種類の照明光を照射可能な光源装置と、前記光源装置から前記第１照明光を照射して第１画像情報を取得し、前記光源装置から前記第２照明光を照射して第２画像情報を取得する撮像装置を備える内視鏡と、前記第１画像情報から病変候補の第１領域を検出し、前記第２画像情報から病変候補の第２領域を検出し、被検体の観察対象部位に応じて、前記第１領域および前記第２領域の内から病変候補の表示用領域を選定し、前記表示用領域を前記第１画像情報に重畳した表示用画像情報を生成するプロセッサを備える内視鏡プロセッサと、前記表示用画像情報を表示するモニタと、を備える。

【0009】

本発明の一態様による内視鏡装置の作動方法は、第１識別器、第２識別器、病変領域選定部、および、表示処理部を含む内視鏡装置の作動方法であって、前記第１識別器が、第１照明光を照射して取得された第１画像情報から病変候補の第１領域を検出し、前記第２識別器が、前記第１照明光とはスペクトルの異なる第２照明光を照射して取得された第２画像情報から病変候補の第２領域を検出し、前記病変領域選定部が、被検体の観察対象部位に応じて、前記第１領域および前記第２領域の内から病変候補の表示用領域を選定し、前記表示処理部が、前記表示用領域を前記第１画像情報に重畳した表示用画像情報を生成する。

【図面の簡単な説明】

【0010】

【図1】本発明の第１の実施形態に係わる内視鏡装置の外観の一例を示す斜視図。

【図2】上記第１の実施形態に係わる内視鏡装置の構成の一例を示すブロック図。

【図3】上記第１の実施形態に係わる内視鏡プロセッサの電気的な構成例を示すブロック図。

【図4】上記第１の実施形態に係わる識別器の構成例を示すブロック図。

【図5】上記第１の実施形態において、各識別器とモニタとにおける画像情報の例を示す図表。

【図6】上記第１の実施形態に係わる内視鏡プロセッサの処理を示すフローチャート。

【図7】本発明の第２の実施形態に係わる識別器の構成例を示すブロック図。

【図8】上記第２の実施形態に係わる内視鏡プロセッサの処理を示すフローチャート。

【図9】本発明の第３の実施形態に係わる識別器の構成例を示すブロック図。

【図10】上記第３の実施形態に係わる内視鏡プロセッサの処理を示すフローチャート。

【発明を実施するための最良の形態】

【0011】

以下、図面を参照して本発明の実施の形態を説明する。ただし、以下に説明する実施形態により本発明が限定されるものではない。なお、図面の記載において、同一または対応する要素には、適宜、同一の符号を付している。
［第１の実施形態］

【0012】

図１から図６は本発明の第１の実施形態を示したものであり、図１は内視鏡装置１の構成の一例を示す斜視図である。本実施形態の内視鏡装置１は、内視鏡２と、光源装置３と、内視鏡プロセッサ４と、モニタ５と、を備えている。

【0013】

内視鏡２は、被検体へ挿入される細長の挿入部９と、内視鏡２に係る各種の操作を行うための操作部１０と、内視鏡２を光源装置３および内視鏡プロセッサ４へ接続するためのユニバーサルケーブル１７と、を備えている。

【0014】

挿入部９は、先端から基端側へ向かって順に、先端部６と、湾曲部７と、可撓管部８と、を備えている。先端部６は、図示を省略するが、照明光を被検体へ出射する照明窓と、被検体からの戻り光が入射される観察窓と、を備えている。本実施形態の内視鏡２は電子内視鏡として構成されており、先端部６に撮像装置２１（図２参照）が設けられている。撮像装置２１は、撮像光学系と、撮像素子とを備えている。撮像光学系は、観察窓から入射した光を、被写体の光学像（被写体像）として撮像素子上に結像する。撮像素子は、ＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）などのイメージセンサである。撮像素子は、被写体像を光電変換して撮像信号を生成し、出力する。撮像信号は、信号線を経由して、内視鏡プロセッサ４へ伝送される。

【0015】

湾曲部７は、先端部６の基端側に連設された湾曲可能な部位であり、湾曲することで先端部６が向く方向を変更する。先端部６の方向を変更することで、被検体の観察部位を変更し、または内視鏡２の挿入性を向上する。

【0016】

可撓管部８は、湾曲部７の基端側に連設された、可撓性を有する部位である。

【0017】

挿入部９および操作部１０内には、湾曲部７を湾曲するための湾曲ワイヤと、処置具を挿通するための処置具チャンネルと、が配設されている。また、内視鏡２の、挿入部９、操作部１０、およびユニバーサルケーブル１７内には、撮像素子と接続される上述した信号線と、照明光を伝送するためのライトガイドとが配設されている。

【0018】

操作部１０には、湾曲ワイヤを経由して湾曲部７を湾曲操作するための湾曲操作部１４、フォーカススイッチ１５を含む各種のスイッチ類などが設けられている。撮像光学系が変倍光学系を備える場合、フォーカススイッチ１５を操作することでフォーカス位置が近点または遠点に変更され、被検体像の変倍が行われる。湾曲操作部１４は、湾曲部７を上下方向に湾曲操作するためのＵＤ湾曲操作ノブ１２と、湾曲部７を左右方向に湾曲操作するためのＲＬ湾曲操作ノブ１３とを備える。湾曲部７は、上下方向の湾曲と左右方向の湾曲とを組み合わせることで、斜め方向の湾曲も行える。

【0019】

操作部１０の先端側には、術者が手で内視鏡２を把持するための把持部１１と、上述した処置具チャネルの基端側の開口となる処置具チャネル挿入口１６とが設けられている。

【0020】

ユニバーサルケーブル１７は、操作部１０の例えば基端側の側面から延出されている。ユニバーサルケーブル１７の基端には、スコープコネクタ１７ａが設けられている。スコープコネクタ１７ａは、内視鏡２を光源装置３に着脱自在に接続する。スコープコネクタ１７ａが光源装置３に接続されることで、ライトガイドによる照明光の伝送が可能となる。

【0021】

スコープコネクタ１７ａは、側面からコイル状の電気ケーブル１８が延出されている。電気ケーブル１８の延出端に設けられた電気コネクタ１８ａは、内視鏡プロセッサ４と着脱自在に接続される。電気コネクタ１８ａが内視鏡プロセッサ４と接続されることで、撮像素子が内視鏡プロセッサ４と電気的に接続される。

【0022】

内視鏡プロセッサ４は、表示装置であるモニタ５と電気的に接続されている。内視鏡プロセッサ４は、内視鏡２の撮像素子から出力された撮像信号を処理して、表示用画像情報を生成する。表示用画像情報は、内視鏡プロセッサ４からモニタ５へ出力され、モニタ５に内視鏡画像を含む表示画像として表示される。また、モニタ５は、音声を出力するスピーカ５ａを備えている。

【0023】

図２は、内視鏡装置１の構成の一例を示すブロック図である。

【0024】

内視鏡２は、上述したように、撮像装置２１を備えている。撮像装置２１は、光源装置３から第１照明光が照射された被検体を撮像することにより第１画像情報（後述する白色光画像情報）を取得し、光源装置３から第２照明光が照射された被検体を撮像することにより第２画像情報（後述する第１特殊光画像情報と第２特殊光画像情報）を取得する

【0025】

光源装置３は、第１照明光と、第１照明光とはスペクトルの異なる第２照明光とを含む複数種類の照明光を照射可能である。本実施形態の光源装置３は、白色光源３１と、第１特殊光源３２と、第２特殊光源３３と、を備えている。白色光源３１は、観察用の白色光を発光する。第１特殊光源３２は、白色光とはスペクトルの異なる第１特殊光を発光する。第２特殊光源３３は、白色光および第１特殊光とはスペクトルの異なる第２特殊光を発光する。白色光は第１照明光であり、第１特殊光および第２特殊光は第２照明光である。

【0026】

具体的に、光源装置３は、Ｒ（赤）、Ｇ（緑）、Ｂ（青）、Ｖ（バイオレット）、Ａ（アンバー）等の各色光を発光する複数の光源を備え、各色光源を組み合わせることで、上述した白色光源３１、第１特殊光源３２、および第２特殊光源３３が構成される。

【0027】

光源装置３は、例えば、ＬＥＤ（Light Emitting Diode）、またはＬＤ（Laser Diode）等の発光デバイスを備える。一例として、光源装置３は、中心波長が約４０５ｎｍの紫色（Ｖ）光を発光するＶ－ＬＥＤと、中心波長が約４４５ｎｍの青色（Ｂ）光を発光するＢ－ＬＥＤと、中心波長が約５４０ｎｍの緑色（Ｇ）光を発光するＧ－ＬＥＤと、中心波長が約６３０ｎｍの赤色（Ｒ）光を発光するＲ－ＬＥＤと、を備える。また、光源装置３は、プリズム、ミラー、光ファイバ、または、波長帯域もしくは光量等を調節する光学フィルタ等、を必要に応じて備える。

【0028】

本実施形態の光源装置３は、例えば、白色光、第１特殊光、第２特殊光を、フレーム毎に順次発光するようになっている。これにより、撮像装置２１は、白色光画像情報（以下、白色光画像という）、第１特殊光画像情報（以下、第１特殊光画像という）、第２特殊光画像情報（以下、第２特殊光画像という）を順に取得し、第２特殊光画像の次はまた白色光画像を取得することを繰り返して行う。ただし、各画像を１フレームで取得することに限定されず、複数フレームで何れかの画像を取得するようにしても構わない。例えば、白色光画像および第１特殊光画像は各１フレームで取得するが、第２特殊光画像は２フレームで取得する、等である。

【0029】

内視鏡プロセッサ４は、画像処理部４１と、白色光識別器４２と、第１特殊光識別器４３と、第２特殊光識別器４４と、病変領域選定部４５と、表示処理部４６と、バス４７と、制御部４８と、を備えている。

【0030】

なお、図２には、白色光識別器４２、第１特殊光識別器４３、および第２特殊光識別器４４の３つを設けたが、２つ、もしくは４つ以上であっても構わない。また、複数の識別機能を有する識別器を１つ設けて、識別機能を切り替えることで、白色光識別器４２、第１特殊光識別器４３、および第２特殊光識別器４４の何れとしても機能するように構成しても構わない。

【0031】

図３は内視鏡プロセッサ４の電気的な構成例を示すブロック図である。図２には、内視鏡プロセッサ４の機能的な構成を示したが、内視鏡プロセッサ４は、電気的な構成として、例えば、プロセッサ４ａと、メモリ４ｂとを備えている。

【0032】

プロセッサ４ａは、例えば、ＣＰＵ（Central Processing Unit：中央処理装置）等を含むＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）、またはＦＰＧＡ（Field Programmable Gate Array）を備えている。メモリ４ｂは、ＲＡＭ（Random Access Memory）、フラッシュメモリ、ディスク記憶媒体などの記憶媒体である。メモリ４ｂは、処理プログラムを記録するコンピュータにより読み取り可能な一時的でない記憶媒体を含む。

【0033】

プロセッサ４ａは、メモリ４ｂに記憶された処理プログラムを読み込んで実行することにより、図２に示す各部の機能を果たす。ただし、この構成に限定されるものではなく、プロセッサ４ａは、各部の機能を果たす専用の電子回路として構成されていても構わない。

【0034】

また、図４は、識別器４２，４３，４４の構成例を示すブロック図である。白色光識別器４２、第１特殊光識別器４３、および第２特殊光識別器４４は、何れも、照明光を照射して取得された画像情報から病変候補の領域を検出する病変識別器４ｃを備えている。病変識別器４ｃは、例えば、病変画像を学習した人工知能（ＡＩ：Artificial Intelligence）を含む。

【0035】

画像処理部４１は、撮像装置２１から出力された画像情報に、デモザイキング、ノイズ補正、色補正、コントラスト補正、ガンマ補正などの各種処理を行い、モニタ５へ出力可能なフォーマットの画像信号（表示用画像情報）に変換する。

【0036】

白色光識別器４２は第１識別器であり、第１特殊光識別器４３および第２特殊光識別器４４は第２識別器である。

【0037】

白色光識別器４２は、白色光画像として撮像された病変画像を、機械学習、ディープラーニング等により学習したＡＩを含む。白色光識別器４２は、白色光源３１から発光された白色光を被検体に照射して撮像装置２１により取得された内視鏡画像（白色光画像）から、病変候補領域（病変候補の第１領域）を検出する。また、白色光識別器４２は、検出した病変候補領域の信頼度スコアを算出する。信頼度スコアは、病変候補領域が実際に病変である確度（確信度）を示す。

【0038】

第１特殊光識別器４３は、第１特殊光画像として撮像された病変画像を、機械学習、ディープラーニング等により学習したＡＩを含む。第１特殊光識別器４３は、第１特殊光源３２から発光された第１特殊光を被検体に照射して撮像装置２１により取得された内視鏡画像（第１特殊光画像）から、病変候補領域（病変候補の第２領域）を検出する。また、第１特殊光識別器４３は、検出した病変候補領域の信頼度スコアを算出する。

【0039】

第２特殊光識別器４４は、第２特殊光画像として撮像された病変画像を、機械学習、ディープラーニング等により学習したＡＩを含む。第２特殊光識別器４４は、第２特殊光源３３から発光された第２特殊光を被検体に照射して撮像装置２１により取得された内視鏡画像（第２特殊光画像）から、病変候補領域（病変候補の第２領域）を検出する。また、第２特殊光識別器４４は、検出した病変候補領域の信頼度スコアを算出する。

【0040】

第１特殊光識別器４３と第２特殊光識別器４４は、例えば、粘膜表面からの深さが異なる位置（表層、中層、深層）にある病変候補領域を検出する識別器として構成できる。病変候補領域の検出は、例えば、狙いの深さにある血管情報を強調した画像に基づき行う。血管情報を強調する特殊光として、狙いの深さに十分に深達し、酸化、還元ヘモグロビンの吸光係数μａに差がある狭帯域光の波長と、差がない等吸収点の狭帯域光の波長と、のセット（表層、中層、深層の各深さの血管の酸素飽和度を算出するときに最適な狭帯域光の波長セット）が例えば選ばれる。こうした波長セットの照明光は、ＮＢＩ（Narrow Band Imaging）用照明光として知られている。

【0041】

表層型病変の識別器は、粘膜表面、または粘膜表面からの深さが比較的浅い（粘膜表面から数十μｍ程度の深さの）表層型病変を識別する。表層型の血管情報を強調する特殊光は、例えば、参照光としての紫色光（４０５ｎｍ）、および測定光としての青色光（４４５ｎｍ）を含み、かつ、紫色光の光量が青色光の光量よりも大きい光である。表層型病変の識別器は、表層型の血管情報を強調する特殊光で撮像された病変画像により学習した識別器である。

【0042】

中層型病変の識別器は、粘膜表面からの深さが中程度（数十～数百μｍの深さ）の中層型病変を識別する。中層型の血管情報を強調する特殊光は、例えば、測定光としての青色光（４７３ｎｍ）、参照光としての緑色光、および参照光としての赤色光を含み、青色光の光量は緑色光の光量よりも大きく、かつ、緑色光の光量は赤色光の光量よりも大きい光である。中層型病変の識別器は、中層型の血管情報を強調する特殊光で撮像された病変画像により学習した識別器である。

【0043】

深層型病変の識別器は、粘膜表面からの深さが深い（粘膜筋板から粘膜下組織層の深さの）深層型病変を識別する。深層型の血管情報を強調する特殊光は、例えば、参照光としての青色光、参照光としての緑色光、および測定光としての赤色光（６３０ｎｍ）を含み、緑色光の光量は青色光の光量よりも大きく、かつ、青色光の光量は赤色光の光量よりも大きい特殊光で撮像された病変画像で学習された識別器などである。

【0044】

なお、粘膜表面からの深さが異なる病変の識別器を第２識別器（第１特殊光識別器４３、第２特殊光識別器４４）の例として挙げたが、これに限定されない。第２識別器は、例えば、粘膜上の残渣もしくは胆汁、または出血による粘膜上の血液などの、白色光では病変候補領域を検出する障害物となるものを透過する特殊光（ＲＤＩ（Red Dichromatic Imaging）用照明光）で撮像された病変画像で学習された識別器であっても構わない。ＲＤＩ用照明光は、例えば、緑、アンバー、および赤の３色の特定の波長の光を用いる。従って、複数種類の第２照明光は、ＮＢＩ用照明光と、ＲＤＩ用照明光と、の少なくとも一方を含むとよい。

【0045】

なお、本実施形態では、一例として、第１特殊光識別器４３が表層型病変の識別器であり、第２特殊光識別器４４が中層型病変の識別器であるとして説明する。

【0046】

病変領域選定部４５は、白色光識別器４２により検出された病変候補領域と、第１特殊光識別器４３により検出された病変候補領域と、第２特殊光識別器４４により検出された病変候補領域と、に基づいて、病変候補の表示用領域を選定する。

【0047】

病変領域選定部４５による表示用領域の選定方法は、例えば、以下のような（１）～（３）の方法を用いることができる。以下に示す（１）～（３）の方法は、何れも、白色光画像の病変候補領域（第１領域）の信頼度スコアと、第１特殊光画像の病変候補領域（第２領域）の信頼度スコアと、第２特殊光画像の病変候補領域（第２領域）の信頼度スコアと、の複数の信頼度スコアを算出し、複数の信頼度スコアに基づき、表示用領域を選定する方法である。

【0048】

以下では適宜、白色光識別器４２により検出された病変候補領域を領域１、第１特殊光識別器４３により検出された病変候補領域を領域２、第２特殊光識別器４４により検出された病変候補領域を領域３という。なお、領域１に関して、病変候補が検出されず領域１が存在しない場合があるし、１つの画像内に１つまたは複数の病変候補が検出されて領域１が１つまたは複数存在する場合がある。領域２，３についても領域１と同様に、０、１、または複数存在する場合がある。
（１）領域１～３の内の、信頼度スコアが所定の閾値（規定値）以上である領域をまず抽出し、抽出した領域の中で位置が重なる複数の領域については、全ての領域をマージして、表示用領域として選定する。また、抽出した領域の中で位置が重ならない領域については、そのまま表示用領域として選定する。
（２）領域１～３の内の、信頼度スコアが所定の閾値（規定値）以上である領域をまず抽出し、抽出した領域の中で位置が重なる複数の領域については、最も信頼度スコアが高い領域を表示用領域として選定する。また、抽出した領域の中で位置が重ならない領域については、そのまま表示用領域として選定する。
（３）被検体の観察対象部位（内視鏡検査の対象となる臓器）に応じて、信頼度スコアに重み付けを行い、重み付けした信頼度スコアに基づき（２）の方法を適用して、表示用領域を選定する。

【0049】

（３）の方法について、さらに説明する。以下では適宜、領域１の信頼度スコアをスコア１、領域２の信頼度スコアをスコア２、領域３の信頼度スコアをスコア３という。また、スコア１に乗算する重み係数を重み係数１、スコア２に乗算する重み係数を重み係数２、スコア３に乗算する重み係数を重み係数３という。

【0050】

食道や大腸などの臓器は、表層型の血管情報を強調する特殊光で撮像された画像による診断方法が確立されつつある。そこで、臓器が食道または大腸である場合には、重み係数２を重み係数１および重み係数３よりも大きくして（２）の方法を適用し、表示用領域を選定する。このとき、重み係数１および重み係数３を０に設定すれば、表層型病変の識別器である第１特殊光識別器４３により検出された領域２のみを選定対象とすることになり、識別器として第１特殊光識別器４３を選択するのと同じである。

【0051】

また、臓器が胃であって病変がスキルス胃癌である場合、中層型の血管情報を強調する特殊光で撮像された画像による診断方法が確立されつつある。そこで、臓器が胃である場合には、重み係数３を重み係数１および重み係数２よりも大きくして（２）の方法を適用し、表示用領域を選定する。このとき、重み係数１および重み係数２を０に設定すれば、中層型病変の識別器である第２特殊光識別器４４により検出された領域３のみを選定対象とすることになり、識別器として第２特殊光識別器４４を選択するのと同じである。

【0052】

従って、臓器に応じて、白色光画像の病変候補領域（第１領域）と、第１特殊光画像の病変候補領域（第２領域）と、第２特殊光画像の病変候補領域（第２領域）との内の、何れが表示用領域に選定されるかが異なる。

【0053】

臓器に応じた重み付けの切替は、ユーザ指示に応じて（つまり手動で）行ってもよいし、内視鏡画像の特徴に基づき制御部４８が判定して自動で行ってもよいし、内視鏡２の挿入部９の挿入長を検出して、検出結果に基づき制御部４８が判定して自動で行ってもよいし、内視鏡２の先端部６に位置検出センサを組み込んで、位置検出センサの検出結果に基づき制御部４８が判定して自動で行ってもよい。

【0054】

表示処理部４６には、白色光識別器４２および病変領域選定部４５を経由して、画像処理部４１から白色光画像が送信される。さらに、表示処理部４６には、病変領域選定部４５により選定された表示用領域が送信される。

【0055】

バス４７は、内視鏡プロセッサ４内の各部が命令や情報の送受信を行う伝送路である。

【0056】

制御部４８は、バス４７を経由して、画像処理部４１、白色光識別器４２、第１特殊光識別器４３、第２特殊光識別器４４、病変領域選定部４５、および表示処理部４６と接続されており、これらを制御する。

【0057】

制御部４８は、動き検出部４８ａを備えている。動き検出部４８ａは、白色光画像と、第１特殊光画像と、第２特殊光画像との動きを検出する。制御部４８による動き検出は、例えば画像解析により行ってもよいし、内視鏡２の先端部６に加速度センサまたは上述した位置検出センサを組み込んで、センサの検出結果に基づき行っても構わない。

【0058】

画像の動きは、内視鏡２の先端部６に設けられた撮像装置２１の、被検体に相対する移動により生じる。画像の動きの種類としては、例えば、画面上における上下方向、左右方向の動き、被検体に相対する撮像装置２１の回転の動きの他、被検体に対して先端部６が近接／離隔することによる（または撮像装置２１が変倍光学系を備える場合には、変倍による）画像の拡大／縮小の動きがある。制御部４８は、動き検出部４８ａにより検出した画像の動き情報を、病変領域選定部４５および表示処理部４６へ送信する。

【0059】

病変領域選定部４５は、制御部４８から送信された画像の動き情報に基づき、画像同士を位置合わせ（位置ズレ補正）してから（従って、画像中の病変候補領域同士を位置合わせしてから）、領域１～３から表示用領域を選定する。

【0060】

表示処理部４６は、制御部４８から送信された画像の動き情報に基づき表示用領域を白色光画像に位置合わせする。ただし、白色光画像に対する表示用領域の位置合わせは、病変領域選定部４５により行っても構わない。そして、表示処理部４６は、白色光画像に表示用領域を重畳して表示用画像情報を生成し、モニタ５へ出力する。なお、白色光画像に重畳される表示用領域は、例えばマージされた領域の輪郭線でもよいが、マージされた領域の範囲を示すマーカ（例えば、四角枠）であっても構わない。

【0061】

モニタ５は、表示処理部４６から入力した表示用画像情報により、表示画像をモニタ画面上に表示する。

【0062】

図５は、各識別器４２，４３，４４とモニタ５とにおける画像情報の例を示す図表である。

【0063】

白色光識別器４２は、白色光画像５１から病変候補領域５１ａを検出する。

【0064】

第１特殊光識別器４３は、第１特殊光画像５２から病変候補領域５２ａを検出する。

【0065】

第２特殊光識別器４４は、第２特殊光画像５３から病変候補領域５３ａを検出する。

【0066】

モニタ５は、表示用領域５０ａが重畳された表示画像５０を、モニタ画面上に表示する。ここで、表示用領域５０ａは、例えば、病変候補領域５１ａ、病変候補領域５２ａ、および病変候補領域５３ａを例えばマージして得られた領域である。なお、図５に記載された鑑別結果５０ｂおよび進行度５０ｃの表示については、後の実施形態で説明する。

【0067】

図６は、内視鏡プロセッサ４の処理を示すフローチャートである。図６は、３フレーム毎に白色光画像、第１特殊光画像、第２特殊光画像を順に取得する例を示している。

【0068】

例えばｎ（ｎは整数）フレーム目に、光源装置３から白色光を発光して、撮像装置２１により白色光画像を取得する。取得された白色光画像は、内視鏡プロセッサ４に入力される（ステップＳ１）。入力された白色光画像は、画像処理部４１により処理された後に、白色光識別器４２と、表示処理部４６とへ送られる。

【0069】

白色光識別器４２は、白色光識別器４２内の病変識別器４ｃにより、白色光画像から病変候補領域を検出すると共に、信頼度スコアを、検出された病変候補領域毎に算出する（ステップＳ２）。

【0070】

制御部４８は、病変候補領域が検出された場合には、白色光識別器４２により算出された信頼度スコアが規定値（閾値）以上であるか否かを、病変候補領域毎にそれぞれ判定する（ステップＳ３）。なお、制御部４８は、病変候補領域が検出されない場合には、ステップＳ３の処理をスキップして、ステップＳ４へ進む。

【0071】

制御部４８は、病変候補領域が検出されないか、または全ての病変候補領域の信頼度スコアが規定値未満であると判定された場合は、病変なしと判定して（ステップＳ４）、病変候補領域があっても白色光識別器４２から病変領域選定部４５へ送信させない。

【0072】

一方、制御部４８は、信頼度スコアが規定値以上である病変候補領域があると判定された場合は、その病変候補領域を白色光識別器４２から病変領域選定部４５へ送信させる。

【0073】

続く（ｎ＋１）フレーム目に、光源装置３から表層血管が強調される第１特殊光を発光して、撮像装置２１により第１特殊光画像を取得する。取得された第１特殊光画像は、内視鏡プロセッサ４に入力される（ステップＳ５）。入力された第１特殊光画像は、画像処理部４１により処理された後に、第１特殊光識別器４３へ送られる。

【0074】

第１特殊光識別器４３は、第１特殊光識別器４３内の病変識別器４ｃにより、第１特殊光画像から病変候補領域を検出すると共に、信頼度スコアを、検出された病変候補領域毎に算出する（ステップＳ６）。

【0075】

制御部４８は、病変候補領域が検出された場合には、第１特殊光識別器４３により算出された信頼度スコアが規定値（閾値）以上であるか否かを、病変候補領域毎にそれぞれ判定する（ステップＳ７）。なお、制御部４８は、病変候補領域が検出されない場合には、ステップＳ７の処理をスキップして、ステップＳ８へ進む。

【0076】

制御部４８は、病変候補領域が検出されないか、または全ての病変候補領域の信頼度スコアが規定値未満であると判定された場合は、病変なしと判定して（ステップＳ８）、病変候補領域があっても第１特殊光識別器４３から病変領域選定部４５へ送信させない。

【0077】

一方、制御部４８は、信頼度スコアが規定値以上である病変候補領域があると判定された場合は、その病変候補領域を第１特殊光識別器４３から病変領域選定部４５へ送信させる。

【0078】

その後の（ｎ＋２）フレーム目に、光源装置３から中層血管が強調される第２特殊光を発光して、撮像装置２１により第２特殊光画像を取得する。取得された第２特殊光画像は、内視鏡プロセッサ４に入力される（ステップＳ９）。入力された第２特殊光画像は、画像処理部４１により処理された後に、第２特殊光識別器４４へ送られる。

【0079】

第２特殊光識別器４４は、第２特殊光識別器４４内の病変識別器４ｃにより、第２特殊光画像から病変候補領域を検出すると共に、信頼度スコアを、検出された病変候補領域毎に算出する（ステップＳ１０）。

【0080】

制御部４８は、病変候補領域が検出された場合には、第２特殊光識別器４４により算出された信頼度スコアが規定値（閾値）以上であるか否かを、病変候補領域毎にそれぞれ判定する（ステップＳ１１）。なお、制御部４８は、病変候補領域が検出されない場合には、ステップＳ１１の処理をスキップして、ステップＳ１２へ進む。

【0081】

制御部４８は、病変候補領域が検出されないか、または全ての病変候補領域の信頼度スコアが規定値未満であると判定された場合は、病変なしと判定して（ステップＳ１２）、病変候補領域があっても第２特殊光識別器４４から病変領域選定部４５へ送信させない。

【0082】

一方、制御部４８は、信頼度スコアが規定値以上である病変候補領域があると判定された場合は、その病変候補領域を第２特殊光識別器４４から病変領域選定部４５へ送信させる。

【0083】

ステップＳ３において信頼度スコアが規定値以上であると判定された場合、ステップＳ７において信頼度スコアが規定値以上であると判定された場合、ステップＳ１１において信頼度スコアが規定値以上であると判定された場合に、病変領域選定部４５は、ｎ～（ｎ＋２）フレームの画像に基づき得られた病変候補領域から、表示用領域を選定する（ステップＳ１３）。ここでは、病変領域選定部４５が、例えば、入力された全ての病変候補領域を上述したように位置合わせした上でマージして、表示用領域とする。すなわち、病変領域選定部４５により処理される病変候補領域は、何れも、信頼度スコアが規定値以上の領域である。

【0084】

続いて、表示処理部４６が、表示用領域を位置合わせして白色光画像（第１画像情報）に重畳する画像合成を行って表示用画像情報を生成する（ステップＳ１４）。生成された表示用画像情報は、内視鏡プロセッサ４からモニタ５へ出力され、表示画像がモニタ５のモニタ画面上に表示される。

【0085】

（ｎ＋２）フレーム目の処理を行ったら、その後の（ｎ＋３），（ｎ＋４），（ｎ＋５）フレーム目の処理は上述したｎ，（ｎ＋１），（ｎ＋２）フレーム目と同様の処理を行い、さらにその後も同様である。

【0086】

なお、３フレーム毎に表示用画像情報を１回生成して表示画像を表示すると、フレームレートが低下する。そこで、ｎ～（ｎ＋２）フレームの画像に基づき表示画像を表示したら、次は（ｎ＋１）～（ｎ＋３）フレームの画像に基づき表示画像を表示し、さらに（ｎ＋２）～（ｎ＋４）フレームの画像に基づき表示画像を表示する、等を順次行うことで、フレームレートが低下しないようにしても構わない。

【0087】

このような第１の実施形態によれば、白色光を含むスペクトルの異なる複数の照明光を照射して取得された複数の画像情報から複数の病変候補領域を検出し、複数の病変候補領域から表示用領域を選定して、選定した表示用領域を白色光画像に重畳した表示用画像情報を生成するようにしたために、白色光では見落とす可能性がある病変を検出する機能を実現できる。また、特殊光画像では暗くて見難い被検体の細部を、白色光画像により視認できる。

【0088】

さらに、複数種類の第２照明光、つまり、第１特殊光および第２特殊光を用いることで、例えば粘膜表面からの深さが異なる病変を、それぞれの画像から検出可能となる。

【0089】

このとき、第２照明光としてＮＢＩ（Narrow Band Imaging）用照明光を用いると、血管を強調することができる。また、第２照明光としてＲＤＩ（Red Dichromatic Imaging）用照明光を用いると、残渣、胆汁、血液などの障害物を透過して病変を検出できる。

【0090】

そして、信頼度スコアに基づき病変候補の表示用領域を選定することで、病変の検出精度を高められる。このとき、信頼度スコアが閾値よりも高い領域から表示用領域を選定することで、術者は、病変である可能性が高い領域の観察に集中できる。

【0091】

また、被検体の観察対象部位である臓器に応じて、どの照明光に係る画像情報から検出された病変候補領域を表示用領域に選定するかを異ならせることで、診断方法が確立された病変に対応した、適確なコンピュータ支援画像診断（ＣＡＤ：Computer Aided Detection/Diagnosis）を行える。

【0092】

そして、動き検出の結果に応じて複数の画像情報から検出された病変候補領域を位置合わせしてから、表示用領域を選定し表示用画像情報を生成するようにしたために、複数の画像間に動きがあった場合でも、白色光画像上の適確な位置にマーカ表示等を行える。

【0093】

こうして、白色光画像および特殊光画像を含む複数種類の画像から総合的に判断して病変候補の表示用領域を選定し、白色光画像上に表示用領域をマーカ等で表示するコンピュータ支援画像診断を行うことで、病変の見落としが減って病変を発見し易くなり、かつ病変の規模を正確に把握し易くなる。これにより、術者が表示画像を見て、診断を下し易くなる。
［第２の実施形態］

【0094】

図７および図８は本発明の第２の実施形態を示したものであり、図７は識別器４２，４３，４４の構成例を示すブロック図である。この第２の実施形態において、上述の第１の実施形態と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。

【0095】

本実施形態は、上述した第１の実施形態の病変候補領域の表示に加えて、病変候補領域に対する鑑別結果を表示するようにしたものとなっている。

【0096】

図７に示すように、本実施形態の白色光識別器４２、第１特殊光識別器４３、および第２特殊光識別器４４は、何れも、病変識別器４ｃに加えて、鑑別識別器４ｄを備えている。

【0097】

鑑別識別器４ｄは、例えば、病変画像を学習したＡＩを含む。鑑別識別器４ｄは、病変識別器４ｃにより検出された１つ以上の病変候補領域に対して、それぞれの病変の種類を鑑別し、鑑別した病変の種類の信頼度スコアを算出する。

【0098】

鑑別識別器４ｄは、例えば、病変候補領域が「ポリープ」であると鑑別し、「ポリープ」である信頼度スコアが例えば「６０％」であると算出する。

【0099】

ただし、鑑別識別器４ｄは、１つの鑑別結果を出力するとは限らず、例えば、「ポリープである信頼度スコアが６０％」、「潰瘍性大腸炎である信頼度スコアが１０％」、「クローン病である信頼度スコアが１％未満」などのような複数種類の病変に対する鑑別結果を出力しても構わない。

【0100】

なお、図７においては、病変識別器４ｃと鑑別識別器４ｄを別のブロックとして記載したが、１つのＡＩが両方のブロックとして機能するように構成しても構わない。

【0101】

図８は、内視鏡プロセッサ４の処理を示すフローチャートである。図８において、図６と異なる部分を以下に説明する。

【0102】

ｎフレーム目で取得された白色光画像に関して、白色光識別器４２は、ステップＳ２の処理を行うと共に、白色光識別器４２内の病変識別器４ｃにより検出された病変候補領域に対して、白色光識別器４２内の鑑別識別器４ｄにより鑑別を行う。鑑別識別器４ｄは、病変候補領域の鑑別結果と、鑑別結果に対する信頼度スコアとを算出する（ステップＳ２１）。なお、鑑別識別器４ｄは、病変識別器４ｃにより病変候補領域が検出されない場合には、ステップＳ２１の処理をスキップする。

【0103】

（ｎ＋１）フレーム目で取得された第１特殊光画像に関して、第１特殊光識別器４３は、ステップＳ６の処理を行うと共に、第１特殊光識別器４３内の病変識別器４ｃにより検出された病変候補領域に対して、第１特殊光識別器４３内の鑑別識別器４ｄにより鑑別を行う。鑑別識別器４ｄは、病変候補領域の鑑別結果と、鑑別結果に対する信頼度スコアとを算出する（ステップＳ２２）。なお、鑑別識別器４ｄは、病変識別器４ｃにより病変候補領域が検出されない場合には、ステップＳ２２の処理をスキップする。

【0104】

（ｎ＋２）フレーム目で取得された第２特殊光画像に関して、第２特殊光識別器４４は、ステップＳ１０の処理を行うと共に、第２特殊光識別器４４内の病変識別器４ｃにより検出された病変候補領域に対して、第２特殊光識別器４４内の鑑別識別器４ｄにより鑑別を行う。鑑別識別器４ｄは、病変候補領域の鑑別結果と、鑑別結果に対する信頼度スコアとを算出する（ステップＳ２３）。なお、鑑別識別器４ｄは、病変識別器４ｃにより病変候補領域が検出されない場合には、ステップＳ２３の処理をスキップする。

【0105】

病変領域選定部４５は、ステップＳ１３の処理を行うと共に、ステップＳ２１で得られた鑑別結果に対する信頼度スコアと、ステップＳ２２で得られた鑑別結果に対する信頼度スコアと、ステップＳ２３で得られた鑑別結果に対する信頼度スコアとを比較して、どの鑑別結果を表示するかを決定し、決定した鑑別結果を表示処理部４６へ出力する（ステップＳ２４）。

【0106】

ここで、病変領域選定部４５は、例えば、信頼度スコアが最も高い鑑別結果を、表示する鑑別結果として決定してもよい。また、病変領域選定部４５は、信頼度スコアが高い方から順に幾つかの（つまり複数の）鑑別結果を、表示する鑑別結果として決定し、表示する鑑別結果に信頼度スコアを並べて表示しても構わない。

【0107】

表示処理部４６は、表示用領域を位置合わせして白色光画像（第１画像情報）に重畳する画像合成を行い、さらに白色光画像の近傍に鑑別結果を含める画像合成を行って表示用画像情報を生成する（ステップＳ１４Ａ）。生成された表示用画像情報は、内視鏡プロセッサ４からモニタ５へ出力され、表示画像がモニタ５のモニタ画面上に表示される。これにより、図５に示すような鑑別結果５０ｂが表示される。

【0108】

このような第２の実施形態によれば、上述した第１の実施形態とほぼ同様の効果を奏するとともに、病変の種類を鑑別して、鑑別結果を含む表示用画像情報を生成するようにしたために、病変の種類に対する、術者の主観による診断のバラツキを減らすことが可能となる。
［第３の実施形態］

【0109】

図９および図１０は本発明の第３の実施形態を示したものであり、図９は識別器４２，４３，４４の構成例を示すブロック図である。この第３の実施形態において、上述の第１，２の実施形態と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。

【0110】

本実施形態は、上述した第２の実施形態の病変候補領域および鑑別結果の表示に加えて、病変の進行度を表示するようにしたものとなっている。

【0111】

図９に示すように、本実施形態の白色光識別器４２、第１特殊光識別器４３、および第２特殊光識別器４４は、何れも、病変識別器４ｃおよび鑑別識別器４ｄに加えて、進行度識別器４ｅを備えている。

【0112】

進行度識別器４ｅは、例えば、病変画像を学習したＡＩを含む。進行度識別器４ｅは、病変候補領域に対して鑑別識別器４ｄにより鑑別された病変の進行度を識別し、進行度の信頼度スコアを算出する。

【0113】

なお、図９においては、病変識別器４ｃと鑑別識別器４ｄと進行度識別器４ｅを別のブロックとして記載したが、１つのＡＩが３つのブロックとして機能するように構成しても構わない。

【0114】

例えば、ポリープ（癌を含む）の内視鏡所見分類には、ＮＩＣＥ（The Narrow-band imaging International Colorectal Endoscopic）分類、およびＪＮＥＴ（The Japan NBI（Narrow Band Imaging） Expert Team）分類などがある。

【0115】

例えばＮＩＣＥ分類に従ってポリープの進行度を識別する場合、「ＮＩＣＥ Ｔｙｐｅ１」、「ＮＩＣＥ Ｔｙｐｅ２」、および「ＮＩＣＥ Ｔｙｐｅ３」の何れかに識別する。「ＮＩＣＥ Ｔｙｐｅ１」は過形成病変を表し、「ＮＩＣＥ Ｔｙｐｅ２」は腺腫（アデノーマ）から粘膜内癌（いわゆるＭ癌）を表し、かつ、「ＮＩＣＥ Ｔｙｐｅ３」は粘膜下層浸潤癌（いわゆるＳＭ癌）を表す。

【0116】

また、潰瘍性大腸炎（Ulcerative Colitis）の内視鏡所見分類には、Ｍａｙｏ分類、Ｍａｔｔｓ分類、およびＵＣＥＩＳ（Ulcerative Colitis Endoscopic. Index of Severity）分類などがある。

【0117】

例えばＭａｙｏ分類に従って潰瘍性大腸炎の進行度を識別する場合、Ｍａｙｏ０（グレード０）、Ｍａｙｏ１（グレード１）、Ｍａｙｏ２（グレード２）、およびＭａｙｏ３（グレード３）の４段階のグレードの何れかに識別する。Ｍａｙｏ０は、正常または非活動性（寛解期を含む）を表すグレードである。Ｍａｙｏ１は、軽症を表すグレードであり、一般に、発赤、血管像不明瞭、または、軽度の易出血性が認められる状態である。Ｍａｙｏ２は、中等症を表すグレードであり、一般に、顕著な発赤、血管像の消失、易出血性、膿性分泌物の付着、粘膜粗造、糜爛、または、部分的な潰瘍等が認められる状態である。Ｍａｙｏ３は、重症（活動期）を表すグレードであり、一般に、明らかな自然出血、浮腫、潰瘍（広範な潰瘍を含む）等が認められる状態である。また、潰瘍性大腸炎にともなう異形成（dysplasia）を識別してもよい。

【0118】

クローン病の内視鏡所見分類には、ＳＥＳＣＤ（Simple Endoscopic Score for Crohn's Disease）などがある。ＳＥＳＣＤに従ってクローン病の進行度を識別する場合、「ＳＥＳＣＤ ０」、「ＳＥＳＣＤ １」、「ＳＥＳＣＤ ２」、および「ＳＥＳＣＤ ３」の何れかに識別する。

【0119】

なお、病変領域選定部４５が、信頼度スコアが高い方から順に、複数の鑑別結果を表示する鑑別結果として決定した場合、進行度も複数の鑑別結果のそれぞれに対して識別する。

【0120】

図１０は、内視鏡プロセッサ４の処理を示すフローチャートである。図１０において、図８と異なる部分を以下に説明する。

【0121】

ｎフレーム目で取得された白色光画像に関して、白色光識別器４２は、ステップＳ２およびステップＳ２１の処理を行うと共に、白色光識別器４２内の鑑別識別器４ｄにより鑑別された病変に対して、白色光識別器４２内の進行度識別器４ｅにより進行度の識別を行う。進行度識別器４ｅは、進行度の識別結果と、識別された進行度に対する信頼度スコアとを算出する（ステップＳ３１）。なお、鑑別識別器４ｄは、病変識別器４ｃにより病変候補領域が検出されない場合には、ステップＳ３１の処理をスキップする。

【0122】

（ｎ＋１）フレーム目で取得された第１特殊光画像に関して、第１特殊光識別器４３は、ステップＳ６およびステップＳ２２の処理を行うと共に、第１特殊光識別器４３内の鑑別識別器４ｄにより鑑別された病変に対して、第１特殊光識別器４３内の進行度識別器４ｅにより進行度の識別を行う。進行度識別器４ｅは、進行度の識別結果と、識別された進行度に対する信頼度スコアとを算出する（ステップＳ３２）。なお、鑑別識別器４ｄは、病変識別器４ｃにより病変候補領域が検出されない場合には、ステップＳ３２の処理をスキップする。

【0123】

（ｎ＋２）フレーム目で取得された第２特殊光画像に関して、第２特殊光識別器４４は、ステップＳ１０およびステップＳ２３の処理を行うと共に、第２特殊光識別器４４内の鑑別識別器４ｄにより鑑別された病変に対して、第２特殊光識別器４４内の進行度識別器４ｅにより進行度の識別を行う。進行度識別器４ｅは、進行度の識別結果と、識別された進行度に対する信頼度スコアとを算出する（ステップＳ３３）。なお、鑑別識別器４ｄは、病変識別器４ｃにより病変候補領域が検出されない場合には、ステップＳ３３の処理をスキップする。

【0124】

病変領域選定部４５は、ステップＳ１３およびステップＳ２４の処理を行うと共に、ステップＳ２４で表示すると決定された鑑別結果に対応する進行度を、信頼度スコアに基づき決定して、決定した進行度を表示処理部４６へ出力する（ステップＳ３４）。

【0125】

例えば、表示する鑑別結果が潰瘍性大腸炎（Ulcerative Colitis）である場合、進行度がＭａｙｏ０（グレード０）である信頼度スコアが３０％、Ｍａｙｏ１（グレード１）である信頼度スコアが６０％、Ｍａｙｏ２（グレード２）である信頼度スコアが１０％、およびＭａｙｏ３（グレード３）である信頼度スコアが１％未満であるとする。このとき、病変領域選定部４５は、例えば信頼度スコアが最も高い「Ｍａｙｏ１」を進行度として決定して、表示処理部４６へ出力する。

【0126】

表示処理部４６は、表示用領域を位置合わせして白色光画像（第１画像情報）に重畳する画像合成を行い、さらに白色光画像の近傍に鑑別結果と進行度とを含める画像合成を行って表示用画像情報を生成する（ステップＳ１４Ｂ）。生成された表示用画像情報は、内視鏡プロセッサ４からモニタ５へ出力され、表示画像がモニタ５のモニタ画面上に表示される。これにより、図５に示すような鑑別結果５０ｂおよび進行度５０ｃが表示される。

【0127】

このような第３の実施形態によれば、上述した第１，２の実施形態とほぼ同様の効果を奏するとともに、病変の進行度を識別し、進行度を含む表示用画像情報を生成するようにしたために、病変の進行度に対する、術者の主観による診断のバラツキを減らすことが可能となる。

【0128】

なお、上述では本発明が内視鏡プロセッサ、および内視鏡プロセッサを有する内視鏡装置である場合を主として説明したが、これに限定されるものではない。本発明は、内視鏡プロセッサと同様の処理を行う診断用画像生成方法であっても構わない。また、本発明は、内視鏡プロセッサと同様の処理をコンピュータに行わせるためのコンピュータプログラム、該コンピュータプログラムを記録するコンピュータにより読み取り可能な一時的でない記録媒体、等であっても構わない。

【0129】

さらに、本発明は上述した実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明の態様を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。このように、発明の主旨を逸脱しない範囲内において種々の変形や応用が可能であることは勿論である。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】