特許 7389823 画像処理装置、画像処理方法、及び、画像処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-11-21

(45)【発行日】2023-11-30

(54)【発明の名称】画像処理装置、画像処理方法、及び、画像処理プログラム

(51)【国際特許分類】

   A61B 1/045 20060101AFI20231122BHJP

【ＦＩ】

A61B1/045 610

【請求項の数】 13

(21)【出願番号】P 2021570594

(86)(22)【出願日】2020-01-17

(86)【国際出願番号】 JP2020001476

(87)【国際公開番号】W WO2021144951

(87)【国際公開日】2021-07-22

【審査請求日】2022-05-19

(73)【特許権者】

【識別番号】000000376

【氏名又は名称】オリンパス株式会社

(74)【代理人】

【識別番号】110002907

【氏名又は名称】弁理士法人イトーシン国際特許事務所

(72)【発明者】

【氏名】川畑 裕也

(72)【発明者】

【氏名】北村 誠

(72)【発明者】

【氏名】窪田 明広

(72)【発明者】

【氏名】神田 大和

【審査官】遠藤 直恵

(56)【参考文献】

【文献】特開２０１６－１８９８１２（ＪＰ，Ａ）

【文献】特開２００８－２７８９６４（ＪＰ，Ａ）

【文献】国際公開第２０１９／１３０９２４（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ａ６１Ｂ １／００－１／３２

(57)【特許請求の範囲】

【請求項1】

被検体の体内を撮像した被判定用内視鏡画像を入力する入力部と、
予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断する部位判断部と、
条件判定部と、
自動記録部と、を有し、
前記条件判定部は、前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも１種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定し、
前記自動記録部は、前記部位判断部により同一または類似していると判断された場合、かつ、前記条件判定部により前記自動記録に適した観察モードであると判定された場合に、前記入力部に入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録する画像処理装置。

【請求項2】

前記条件判定部は、内視鏡の先端部と撮像部位との距離に応じて、前記自動記録に適した観察モードあるか否かを判定することを特徴とする請求項１に記載の画像処理装置。

【請求項3】

前記条件判定部は、内視鏡に対する撮像部位の方向に応じて、前記自動記録に適した観察モードであるか否かを判定することを特徴とする請求項１に記載の画像処理装置。

【請求項4】

前記条件判定部は、前記被判定用内視鏡画像から検出された対象物の種類に応じて、前記自動記録に適した観察モードであるか否かを判定することを特徴とする請求項１に記載の画像処理装置。

【請求項5】

前記自動記録部は、前記記録部に記録された前記所定枚数の内視鏡画像から観察に適した代表画像を選定して前記記録部に記録することを特徴とする請求項１に記載の画像処理装置。

【請求項6】

前記自動記録部は、前記所定枚数の内視鏡画像のうち、前記代表画像に選定されなかった内視鏡画像を前記記録部から削除することを特徴とする請求項５に記載の画像処理装置。

【請求項7】

前記自動記録部は、検査部位毎に前記代表画像を選定することを特徴とする請求項５に記載の画像処理装置。

【請求項8】

前記自動記録部は、前記代表画像を選定した後、前記代表画像を選定した検査部位に関する内視鏡画像を前記記録部に記録しないことを特徴とする請求項５に記載の画像処理装置。

【請求項9】

前記予め定めた検査部位は、胃であることを特徴とする請求項１に記載の画像処理装置。

【請求項10】

前記予め定めた検査部位は、前記胃の噴門部、胃底部、胃体部、胃角部及び幽門部であることを特徴とする請求項９に記載の画像処理装置。

【請求項11】

前記予め定めた検査部位は、咽頭、食道、小腸、あるいは、大腸であることを特徴とする請求項１に記載の画像処理装置。

【請求項12】

被検体の体内を撮像した被判定用内視鏡画像を入力し、
予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断し、
前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも１種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定し、
同一または類似していると判断された場合、かつ、前記自動記録に適した観察モードであると判定された場合に、入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録する、ことを特徴とする画像処理方法。

【請求項13】

被検体の体内を撮像した被判定用内視鏡画像を入力するコードと、
予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断するコードと、
前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも１種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定するコードと、
同一または類似していると判断された場合、かつ、前記自動記録に適した観察モードであると判定された場合に、入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録するコードと、
をコンピュータに実行させることを特徴とする画像処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、予め定めた検査部位が撮影された画像を自動的に記録する画像処理装置、画像処理方法、及び、画像処理プログラムに関する。

【背景技術】

【0002】

従来、被検体の内部の被写体を撮像する内視鏡、及び、内視鏡により撮像された被写体の観察画像を生成するプロセッサ等を具備する内視鏡システムが、医療分野及び工業分野等において広く用いられている。このような内視鏡システムを用いた胃の一次検診では、二次検診において病変の見逃しを防止するために、網羅性の高い画像の記録が要求されている。

【0003】

例えば、日本国特開２０１０－５１３９９号公報には、内視鏡画像の記録を自動的に開始し、かつ、自動的に停止することができる内視鏡画像記録装置が開示されている。この内視鏡画像記録装置は、内視鏡により得られる画像信号に赤色がしきい値以上含むか否かを判定し、画像信号に赤色がしきい値以上含むと判定された場合に画像信号の記録を自動的に開始し、しきい値以上含まないと判定された場合に画像信号の記録を自動的に停止する。

【0004】

しかしながら、この内視鏡画像記録装置では、画像信号に赤色が閾値以上含まれない場合、検査対象の部位であっても内視鏡画像が記録されることがない。通常、内視鏡を用いた内視鏡検査では、内視鏡検査の経験が浅い医師が検診を実施する可能性もある。そのため、上述した内視鏡画像記録装置を用いた場合、内視鏡検査の経験が浅い医師が検診を実施した際に、画像の記録が必要な検査部位を見逃してしまい、検査部位の画像が記録されていないという事象が発生する虞がある。

【0005】

このような検査部位の画像が記録されていないという事象が発生することを防止するために、医師の技量に依存しない検査部位の自動記録技術が必要とされている。

【0006】

本発明は、上記事情に鑑みてなされたものであり、予め定めた検査部位が撮影された内視鏡画像を自動的に記録することができる画像処理装置、画像処理方法、及び、画像処理プログラムを提供することを目的とする。

【発明の開示】

【課題を解決するための手段】

【0007】

本発明の一態様の画像処理装置は、被検体の体内を撮像した被判定用内視鏡画像を入力する入力部と、予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断する部位判断部と、条件判定部と、自動記録部と、を有し、前記条件判定部は、前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも１種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定し、前記自動記録部は、前記部位判断部により同一または類似していると判断された場合、かつ、前記条件判定部により前記自動記録に適した観察モードであると判定された場合に、前記入力部に入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録する。

【0008】

また、本発明の一態様の画像処理方法は、被検体の体内を撮像した被判定用内視鏡画像を入力し、予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断し、前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも１種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定し、同一または類似していると判断された場合、かつ、前記自動記録に適した観察モードであると判定された場合に、入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録する。

【0009】

また、本発明の一態様の画像処理プログラムは、被検体の体内を撮像した被判定用内視鏡画像を入力するコードと、予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断するコードと、前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも１種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定するコードと、同一または類似していると判断された場合、かつ、前記自動記録に適した観察モードであると判定された場合に、入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録するコードと、をコンピュータに実行させる。

【図面の簡単な説明】

【0010】

【図1】本発明の第１の実施形態に係る内視鏡システムの全体構成を示す図である。

【図2】ビデオプロセッサ３の構成の一例を示す図である。

【図3】予め定めた検査部位の一例を説明するための図である。

【図4A】表示装置の表示画面上に表示される表示画面例を説明するための図である。

【図4B】表示装置の表示画面上に表示される表示画面例を説明するための図である。

【図4C】表示装置の表示画面上に表示される表示画面例を説明するための図である。

【図4D】表示装置の表示画面上に表示される表示画面例を説明するための図である。

【図4E】表示装置の表示画面上に表示される表示画面例を説明するための図である。

【図4F】表示装置の表示画面上に表示される表示画面例を説明するための図である。

【図5】第１の実施形態の自動記録処理の流れの一例を説明するためのフローチャートである。

【図6】第２の実施形態の自動記録処理の流れの一例を説明するためのフローチャートである。

【発明を実施するための最良の形態】

【0011】

以下、図面を参照して本発明の実施形態を説明する。
なお、以下の説明に用いる各図において、各構成要素を図面上で認識可能な程度の大きさとするため、構成要素毎に縮尺を異ならせてあるものもある。即ち、本発明は、これらの図に記載された構成要素の数量、構成要素の形状、構成要素の大きさの比率、及び各構成要素の相対的な位置関係のみに限定されるものではない。

【0012】

（第１の実施形態）
図１は、本発明の第１の実施形態に係る内視鏡システムの全体構成を示す図であり、図２は、ビデオプロセッサの構成の一例を示す図であり、図３は、予め定めた検査部位の一例を説明するための図である。

【0013】

図１に示すように、内視鏡システム１は、いわゆる上部消化管用の内視鏡システムである。内視鏡システム１は、被検体Ｐの体腔内に先端部を挿入することによって被写体Ｐの体内画像を撮像し、被写体像の画像信号を出力する撮像部を備える内視鏡２と、内視鏡２における撮像部から出力される画像信号に対して所定の画像処理を施す画像処理部を備えるとともに内視鏡システム１全体の動作を統括的に制御する画像処理装置としてのビデオプロセッサ３と、内視鏡２の先端から出射するための照明光を発生する光源装置４と、ビデオプロセッサ３において画像処理が施された画像を表示する表示装置５と、を主に備える。

【0014】

内視鏡２は、先端部に撮像部を備えると共に主として可撓性を有する細長形状部により構成される挿入部６と、挿入部６の基端側に接続され各種の操作信号の入力を受け付ける操作部７と、操作部７から基端側に向けて延出されビデオプロセッサ３および光源装置４と接続するユニバーサルコード８と、を備える。

【0015】

ここで内視鏡２は、挿入部６の先端部に配設した撮像部とビデオプロセッサ３における画像処理部との間において、挿入部６における撮像部から挿入部６、操作部７およびユニバーサルコード８のそれぞれ内部を経由してビデオプロセッサ３の画像処理部に至るまで延設され、撮像部からの画像信号等の伝送するための信号伝送路を備える。

【0016】

挿入部６は、最先端部に配設された、撮像素子等を備えた撮像部９を内蔵した先端部１０と、先端部１０の基端側に配設され、複数の湾曲駒によって構成された湾曲自在な湾曲部１１と、湾曲部１１の基端側に接続され、可撓性を有する長尺状の可撓管部１２と、を有する。

【0017】

操作部７には、湾曲操作部、及び、各種スイッチ等が設けられている。湾曲操作部は、湾曲部１１を湾曲動作させる際に操作される。各種スイッチは、例えば、レリーズスイッチ、フリーズスイッチ、あるいは、通常光観察（ＷＬＩ）と狭帯域光観察（ＮＢＩ）との切替を行うための観察モード切替スイッチ等である。

【0018】

また、ビデオプロセッサ３は、インターネット１３を経由してサーバ１４に接続されている。ビデオプロセッサ３は、撮像部９により撮像された内視鏡画像をインターネット１３を経由してサーバ１４に送信したり、サーバ１４からインターネット１３を経由して所望のデータを受信することができる。

【0019】

図２に示すように、ビデオプロセッサ３は、ＣＰＵ１５と、Ｉ／Ｆ１６と、ＲＡＭ１７と、ＲＯＭ１８と、記録部１９と、バス２０とを有して構成されている。ＣＰＵ１５、Ｉ／Ｆ１６、ＲＡＭ１７、ＲＯＭ１８及び記録部１９は、互いにバス２０を介して接続されている。

【0020】

Ｉ／Ｆ１６には、内視鏡２の撮像部９により撮像された内視鏡画像（画像信号）が入力される。また、ＲＯＭ１８には、画像処理プログラム１８ａが記憶されている。プロセッサを構成するＣＰＵ１５は、ＲＯＭ１８から画像処理プログラム１８ａを読み出し、ＲＡＭ１７に展開して実行することで、後述する内視鏡画像の自動記録処理を実行することができる。

【0021】

メモリとしての記録部１９には、後述する自動記録処理により自動記録を実行すると判断された内視鏡画像が記録される。

【0022】

本実施形態では、ＣＰＵ１５は、予め定めた検査部位の内視鏡画像を記録部１９に自動記録する。ここで、予め定めた検査部位は、図３に示すように、胃２１の噴門部２２、胃底部（穹窿部）２３、胃体部２４、胃角部２５及び幽門部２６である。なお、予め定めた検査部位は、胃２１に限定されることなく、咽頭、食道、小腸、あるいは、大腸等であってもよい。

【0023】

ここで、内視鏡検査中に表示装置５に表示画面上に表示される表示画面例を図４Ａ～図４Ｆを用いて説明する。

【0024】

図４Ａ～図４Ｆは、表示装置の表示画面上に表示される表示画面例を説明するための図である。

【0025】

図４Ａに示すように、表示装置５の表示画面５ａ上には、内視鏡画像３１と、患者情報３２と、検査部位情報３３と、サムネイル３４とが表示される。

【0026】

内視鏡画像３１には、内視鏡２の撮像部９により取得された画像が表示される。患者情報３２には、患者名、性別及び年齢等の情報が表示される。

【0027】

検査部位情報３３には、予め定めた検査部位である噴門部２２、胃底部２３、胃体部２４、胃角部２５、幽門部２６の情報が表示される。サムネイル３４には、胃２１のモデル画像３４ａが表示される。モデル画像３４ａには、胃２１の噴門部２２、胃底部２３、胃体部２４、胃角部２５、幽門部２６のそれぞれの位置に対応して、マーカー３５、３６、３７、３８及び３９が表示される。

【0028】

噴門部２２が撮影された内視鏡画像が記録部１９に自動記録されると、図４Ｂに示すように、検査部位情報３３の噴門部２２にハッチングが掛けられる。また、サムネイル３４のモデル画像３４ａにおいて、自動記録された検査部位である噴門部２２に対応する位置のマーカー３５が塗り潰される。

【0029】

次に、胃底部２３が撮影された内視鏡画像が記録部１９に自動記録されると、図４Ｃに示すように、検査部位情報３３の胃底部２３にハッチングが掛けられる。また、サムネイル３４のモデル画像３４ａにおいて、自動記録された検査部位である胃底部２３に対応する位置のマーカー３６が塗り潰される。

【0030】

次に、胃体部２４が撮影された内視鏡画像が記録部１９に自動記録されると、図４Ｄに示すように、検査部位情報３３の胃体部２４にハッチングが掛けられる。また、サムネイル３４のモデル画像３４ａにおいて、自動記録された検査部位である胃体部２４に対応する位置のマーカー３７が塗り潰される。

【0031】

次に、胃角部２５が撮影された内視鏡画像が記録部１９に自動記録されると、図４Ｅに示すように、検査部位情報３３の胃角部２５にハッチングが掛けられる。また、サムネイル３４のモデル画像３４ａにおいて、自動記録された検査部位である胃角部２５に対応する位置のマーカー３８が塗り潰される。

【0032】

次に、幽門部２６が撮影された内視鏡画像が記録部１９に自動記録されると、図４Ｆに示すように、検査部位情報３３の幽門部２６にハッチングが掛けられる。また、サムネイル３４のモデル画像３４ａにおいて、自動記録された検査部位である幽門部２６に対応する位置のマーカー３９が塗り潰される。

【0033】

例えば、胃底部２３が撮影された内視鏡画像が記録部１９に記録されていない場合、検査部位情報３３の胃底部２３にハッチングが掛けられていない状態となる。さらに、サムネイル３４のモデル画像３４ａにおいて、胃底部２３に対応する位置のマーカー３６が塗り潰されていない状態となる。医師は、表示装置５の表示画面５ａに表示された検査部位情報３３、サムネイル３４を確認することで、記録部１９に内視鏡画像が記録がされていない検査部位を容易に把握することができる。

【0034】

例えば、挿入部６の先端部１０が幽門部２６に達した後に胃底部２３の記録漏れがあったことを医師が把握した場合、挿入部６の先端部１０を抜去する際に記録漏れがあった検査部位である胃底部２３の画像記録を行うことができる。

【0035】

次に、このように構成された内視鏡システムの自動記録処理について説明する。図５は、第１の実施形態の自動記録処理の流れの一例を説明するためのフローチャートである。

【0036】

この図５の自動記録処理は、プロセッサを構成するＣＰＵ１５が、ＲＯＭ１８から画像処理プログラム１８ａを読み出し、ＲＡＭ１７に展開して実行することで行われる。なお、プロセッサの全部若しくは一部の機能は、論理回路あるいはアナログ回路を用いて構成してもよく、また、各種プログラムの処理を、ＦＰＧＡ（Field Programmable Gate Array）等の電子回路により実現するようにしてもよい。

【0037】

まず、ＣＰＵ１５は、被検体Ｐの体腔内を撮像した内視鏡画像を入力する（Ｓ１）。このＳ１の処理が入力部を構成する。内視鏡画像は、内視鏡２の撮像部９により撮像された画像である。撮像部９により撮像された内視鏡画像は、Ｉ／Ｆ１６を経由してＣＰＵ１５に入力される。

【0038】

次に、ＣＰＵ１５は、予め定めた検査部位に関する内視鏡画像と、入力部に入力した内視鏡画像の撮像部位とが同一または類似しているか否かを判断する（Ｓ２）。このＳ２の処理が部位判断部を構成する。ここで、予め定めた検査部位は、上述したように、胃２１の噴門部２２、胃底部２３、胃体部２４、胃角部２５及び幽門部２６である。

【0039】

具体的には、部位判断部は、深層学習（ディープラーニング）により生成される深層学習モデルを用いて、予め定めた検査部位に関する内視鏡画像と、入力部に入力した内視鏡画像の撮像部位とが同一または類似しているか否かを判断する。部位判断部は、胃２１の部位を判定する深層学習モデルに内視鏡画像を入力し、撮像部位の推論結果を取得する。部位判断部は、推論結果の情報から検査部位と撮像部位とが同一または類似しているか否かを判断する。

【0040】

なお、Ｓ２の処理は、例えば、サーバ１４上で実行されてもよい。すなわち、サーバ１４に深層学習モデルを記憶しておくとともに、ＣＰＵ１５は、入力部に入力された内視鏡画像をインターネット１３を経由してサーバ１４に送信し、サーバ１４上で検査部位と撮像部位とが同一または類似しているか否かを判断する。そして、ＣＰＵ１５は、サーバ１４からインターネット１３を経由して判断結果を受け取り、検査部位と撮像部位とが同一または類似しているという判断結果を受け取った場合、入力部に入力した内視鏡画像を記録部１９に自動記録する。

【0041】

また、部位判断部は、深層学習により生成される深層学習モデルを用いて、撮像部位の判断を行っているが、これに限定されることなく、例えばＺＮＣＣ（Zero-mean Normalized Cross-Correlation）アルゴリズム等の類似度算出アルゴリズムを用いて、予め蓄積された内視鏡画像と入力された内視鏡画像との類似度を算出し、算出した類似度を用いて撮像部位が予め定めた検査部位か否かを判断してもよい。

【0042】

ＣＰＵ１５は、部位判断部により同一または類似していないと判断された場合（Ｓ２：ＮＯ）、Ｓ１の処理に戻り同様の処理を繰り返す。一方、ＣＰＵ１５は、部位判断部により同一または類似していると判断された場合（Ｓ２：ＹＥＳ）、入力部に入力した内視鏡画像を記録部１９に自動的に記録する（Ｓ３）。このＳ３の処理が自動記録部を構成する。なお、記録部１９には静止画が記録されるが、静止画に限定されることなく、動画を記録してもよい。

【0043】

ここで、同じ検査部位の内視鏡画像が記録部１９に大量に記録されると、記録部１９の記録容量を圧迫したり、二次検診時に二次読影者の負担が大きくなってしまう。

【0044】

そこで、自動記録部は、部位判断部により同一または類似していると判断された内視鏡画像を所定枚数（例えば３枚～５枚）、記録部１９に自動的に記録する。この結果、記録部１９の記録容量を圧迫することがなく、かつ、二次読影者の負担を小さくすることができる。

【0045】

なお、自動記録部は、記録部１９に複数枚記録された内視鏡画像から観察画像に適した代表画像を検査部位毎に選定し、選定しなかった内視鏡画像を記録部１９から削除するようにしてもよい。自動記録部は、例えば、Ｓ２の処理により、予め定めた検査部位に最も類似している判断された画像を代表画像に選定する。この結果、噴門部２２、胃底部２３、胃体部２４、胃角部２５、幽門部２６のそれぞれにおいて、観察に最も適した代表画像が１枚だけ記録部１９に記録されることになる。

【0046】

また、自動記録部は、代表画像を選定した場合、それ以降において、代表画像を選定した検査部位の画像を記録部１９に記録しないようにしてもよい。すなわち、自動記録部は、噴門部２２の代表画像を記録部１９に記録した場合、その後、噴門部２２の内視鏡画像は、記録部１９に記録しないようにする。

【0047】

最後に、ＣＰＵ１５は、予め定めた検査部位が全て記録されたか否かを判定する（Ｓ４）。ＣＰＵ１５は、予め定めた検査部位が全て記録されていないと判定した場合（Ｓ４：ＮＯ）、Ｓ１の処理に戻り同様の処理を繰り返す。一方、ＣＰＵ１５は、予め定めた検査部位が全て記録されたと判定した場合（Ｓ４：ＹＥＳ）、自動記録処理を終了する。

【0048】

以上の処理により、予め定めた検査部位に関する内視鏡画像と、入力部に入力した内視鏡画像の撮像部位とが同一または類似しているか否かを判断し、同一または類似していると判断された内視鏡画像を記録部１９に自動的に記録することができる。

【0049】

よって、本実施形態の画像処理装置によれば、予め定めた検査部位が撮影された内視鏡画像を自動的に記録することができる。

【0050】

また、本実施形態の画像処理装置により、上記で説明した自動記録処理を実行することで、記録が必要な検査部位が撮影された内視鏡画像の記録漏れを防ぐことができる。この結果、医師は、内視鏡検査中に内視鏡画像の記録漏れについて危惧する必要がなくなるため、内視鏡検査に集中することができる。

【0051】

（第２の実施形態）
次に、第２の実施形態について説明する。
第２の実施形態の全体構成は、第１の実施形態と同一である。第２の実施形態では、自動記録処理が第１の実施形態と異なる。第１の実施形態では、予め定めた検査部位と、内視鏡画像の撮像部位とが同一または類似しているか否かを判断して自動記録を実行していた。これに対して、第２の実施形態では、予め定めた検査部位と、内視鏡画像の撮像部位とが同一または類似しているか否かを判断し、かつ、自動記録に適した条件か否かの判定を行い、自動記録を実行する。

【0052】

図６は、第２の実施形態の自動記録処理の流れの一例を説明するためのフローチャートである。なお、図６において、図５と同様の処理については、同一の符号を付して説明を省略する。

【0053】

Ｓ２の処理により、部位判断部により類似していると判断された場合、ＣＰＵ１５は、自動記録に適した条件か否かを判定する（Ｓ１１）。このＳ１１の処理が条件判定部を構成する。

【0054】

具体的には、条件判定部は、光源設定部からの光源の設定値を取得する。条件判定部は、光源の設定値が通常光観察（ＷＬＩ）の設定値か、あるいは、狭帯域光観察（ＮＢＩ）の設定値かを取得する。例えば、条件判定部は、通常光観察の設定値が設定されている場合、自動記録に適していない条件と判定し、狭帯域光観察の設定値が設定されている場合、自動記録に適している条件と判定する。なお、光源の設定値は、通常光観察（ＷＬＩ）の設定値、及び、狭帯域光観察（ＮＢＩ）の設定値に限定されることなく、他の特殊光観察の設定値であってもよい。

【0055】

ＣＰＵ１５は、条件判定部により自動記録に適した条件でないと判定された場合（Ｓ１１：ＮＯ）、Ｓ１の処理に戻り、同様の処理を繰り返す。一方、ＣＰＵ１５は、条件判定部により自動記録に適した条件であると判定された場合（Ｓ１１：ＹＥＳ）、Ｓ１２の処理に進む。

【0056】

ＣＰＵ１５は、部位判断部により同一または類似している判断された場合、かつ、条件判定部により自動記録に適した条件と判定された場合、入力部に入力した内視鏡画像を記録部１９に自動的に記録する（Ｓ１２）。Ｓ１２の処理が自動記録部を構成する。

【0057】

ここで、自動記録部は、第１の実施形態と同様に、部位判断部により同一または類似している判断され、かつ、条件判定部により自動記録に適した条件と判定された内視鏡画像を所定枚数だけ記録部１９に記録する。

【0058】

なお、自動記録部は、第１の実施形態と同様に、記録部１９に複数枚記録された内視鏡画像から観察画像に適した代表画像を検査部位毎に選定し、選定しなかった内視鏡画像を記録部１９から削除するようにしてもよい。また、自動記録部は、自動記録部は、代表画像を選定した場合、それ以降において、代表画像を選定した検査部位の画像を記録部１９に記録しないようにしてもよい。

【0059】

最後に、ＣＰＵ１５は、Ｓ４の処理において、検査部位が全て記録されていないと判定した場合、Ｓ１の処理に戻り、検査部位が全て記録されたと判定した場合、自動記録処理を終了する。

【0060】

なお、自動記録に適した条件は、光源の設定値に限定されることなく、他の条件であってもよい。

【0061】

条件判定部は、内視鏡と撮像部位との距離を取得する距離取得部により取得された内視鏡の先端部１０と撮像部位との距離に応じて、自動記録に適した条件か否かを判定してもよい。

【0062】

例えば、条件判定部は、距離取得部により取得された内視鏡の先端部１０と撮像部位との距離が所定値以下の場合、自動記録に適した条件と判定する。一方、条件判定部は、距離取得部により取得された内視鏡の先端部１０と撮像部位との距離が所定値よりも大きい場合、自動記録に適した条件でないと判定する。

【0063】

また、条件判定部は、内視鏡に対する撮像部位の方向を推定する方向推定部により推定された内視鏡に対する撮像部位の方向に応じて、自動記録に適した条件か否かを判定してもよい。

【0064】

例えば、条件判定部は、方向推定部により撮像部位の方向が所定の方向を向いていると推定された場合、自動記録に適した条件と判定する。一方、条件判定部は、方向推定部により撮像部位の方向が所定の方向を向いていないと推定された場合、自動記録に適した条件でないと判定する。

【0065】

さらに、条件判定部は、入力部に入力した内視鏡画像から対象物を検出する対象物検出部により検出された対象物の種類に応じて、自動記録に適した条件か否かを判定してもよい。対象物検出部により検出される対象物は、病変領域、粘膜領域、不要物（食物残渣あるいは泡等）領域、暗部領域、あるいは、ハレーション領域等である。

【0066】

例えば、条件判定部は、対象物検出部により病変領域、または、粘膜領域が検出された場合、自動記録に適した条件と判定する。一方、条件判定部は、対象物検出部により、不要物領域、暗部領域、または、ハレーション領域が検出された場合、自動記録に適した条件でないと判定する。

【0067】

なお、以上説明した動作を実行するプログラムは、コンピュータプログラム製品として、フレキシブルディスク、ＣＤ－ＲＯＭ等の可搬媒体や、ハードディスク等の非一時的なコンピュータ読み取り可能な記憶媒体に、その全体あるいは一部が記録され、あるいは記憶されている。そのプログラムコードがコンピュータにより読み取られて、動作の全部あるいは一部が実行される。あるいは、そのプログラムの全体あるいは一部を通信ネットワークを経由して流通または提供することができる。利用者は、通信ネットワークを経由してそのプログラムをダウンロードしてコンピュータにインストールしたり、あるいは記録媒体からコンピュータにインストールすることで、容易に本発明の画像処理装置を実現することができる。

【0068】

また、本明細書におけるフローチャート中の各ステップは、その性質に反しない限り、実行順序を変更し、複数同時に実行し、あるいは実行毎に異なった順序で実行してもよい。

【0069】

本発明は、上述した実施形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。

【図1】

【図2】

【図3】

【図4A】

【図4B】

【図4C】

【図4D】

【図4E】

【図4F】

【図5】

【図6】