特許 7250166 画像分割方法及び装置、画像分割モデルのトレーニング方法及び装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-03-23

(45)【発行日】2023-03-31

(54)【発明の名称】画像分割方法及び装置、画像分割モデルのトレーニング方法及び装置

(51)【国際特許分類】

   A61B 6/03 20060101AFI20230324BHJP

   G06T 7/00 20170101ALI20230324BHJP

   G06T 7/187 20170101ALI20230324BHJP

   G06V 10/82 20220101ALI20230324BHJP

【ＦＩ】

A61B6/03 360J

G06T7/00 350C

G06T7/00 612

G06T7/187

G06V10/82

A61B6/03 360D

A61B6/03 360Q

【請求項の数】 12

(21)【出願番号】P 2021560144

(86)(22)【出願日】2021-04-20

(65)【公表番号】

(43)【公表日】2022-11-04

(86)【国際出願番号】 CN2021088407

(87)【国際公開番号】W WO2022021955

(87)【国際公開日】2022-02-03

【審査請求日】2021-10-18

(31)【優先権主張番号】202010752149.0

(32)【優先日】2020-07-30

(33)【優先権主張国・地域又は機関】CN

(73)【特許権者】

【識別番号】519038965

【氏名又は名称】インファービジョン メディカル テクノロジー カンパニー リミテッド

(74)【代理人】

【識別番号】110002262

【氏名又は名称】ＴＲＹ国際弁理士法人

(72)【発明者】

【氏名】劉 恩佑

(72)【発明者】

【氏名】王 少康

(72)【発明者】

【氏名】陳 寛

【審査官】蔵田 真彦

(56)【参考文献】

【文献】中国特許出願公開第１１１０９１５７３（ＣＮ，Ａ）

【文献】韓国公開特許第１０－２０１６－００５３３２５（ＫＲ，Ａ）

【文献】中国特許出願公開第１１１０２８２４８（ＣＮ，Ａ）

【文献】米国特許出願公開第２０１３／００８３９８３（ＵＳ，Ａ１）

【文献】中国特許出願公開第１１０６４８３５０（ＣＮ，Ａ）

【文献】北村嘉郎他，高階エネルギー最小化による医用画像セグメンテーション，電子情報通信学会論文誌D，2018年，Vol. J101-D, No. 1，pp. 3-26

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ａ６１Ｂ ５／０５５、６／００－６／１４、

Ｇ０６Ｔ １／００－１９／２０

ＪＳＴＰｌｕｓ／ＪＭＥＤＰｌｕｓ／ＪＳＴ７５８０（ＪＤｒｅａｍＩＩＩ）

(57)【特許請求の範囲】

【請求項1】

画像分割方法であって、
分割対象画像の縦隔領域に対して切り分け作業を行うことによって、複数のブロック画像を取得するステップであって、前記分割対象画像は背景、縦隔、動脈及び静脈を含み、前記複数のブロック画像はいずれも前記縦隔を含むステップと、
前記複数のブロック画像をネットワークモデルに入力するステップと、
前記複数のブロック画像に対応する前記縦隔領域における前記縦隔、前記動脈、前記静脈及び前記背景の複数のサブ分割結果を前記ネットワークモデルによって取得するステップと、
ガウシアンぼかし処理によって前記複数のサブ分割結果を組合せて、組合せられた分割結果を取得するステップと、
前記組合せられた分割結果に対して連結領域アルゴリズムによって後処理を行って、前記縦隔領域における前記縦隔、前記動脈、前記静脈及び前記背景の第１の分割結果を取得するステップと、
前記分割対象画像に基づいて、前記分割対象画像の外延領域における血管及び前記背景の第２の分割結果を取得するステップであって、前記外延領域は、前記縦隔領域以外の、血管を有する領域であるステップと、
前記第１の分割結果及び前記第２の分割結果に基づいて、前記分割対象画像における前記縦隔、前記動脈、前記静脈及び前記背景の分割結果を取得するステップと、を含む
ことを特徴とする画像分割方法。

【請求項2】

前記組合せられた分割結果に対して連結領域アルゴリズムによって後処理を行って、前記縦隔領域における前記縦隔、前記動脈、前記静脈及び前記背景の第１の分割結果を取得する前記ステップは、
前記連結領域アルゴリズムによって、前記組合せられた分割結果から静脈の最大連結領域及び動脈の最大連結領域を取得するステップと、
前記静脈の最大連結領域及び前記動脈の最大連結領域に基づいて、前記組合せられた分割結果からノイズを除去して、前記第１の分割結果を取得するステップと、を含み、
前記ノイズは、前記動脈及び前記静脈に同時に含まれる成分と、偽陽性の成分とを含む
ことを特徴とする請求項１に記載の画像分割方法。

【請求項3】

前記分割対象画像を分割モデルに入力するステップを更に含み、
前記分割対象画像に基づいて、前記分割対象画像の外延領域における血管及び前記背景の第２の分割結果を取得する前記ステップは、
前記分割対象画像に基づいて、前記外延領域における血管及び前記背景の第２の分割結果を前記分割モデルによって取得するステップを含む
ことを特徴とする請求項１又は２に記載の画像分割方法。

【請求項4】

前記第１の分割結果及び前記第２の分割結果に基づいて、前記分割対象画像における前記縦隔、前記動脈、前記静脈及び前記背景の分割結果を取得する前記ステップは、
前記第１の分割結果における前記動脈及び前記静脈と、前記第２の分割結果における前記血管とに基づいて、領域拡張アルゴリズムによって、前記分割対象画像における前記縦隔、前記動脈、前記静脈及び前記背景の分割結果を取得するステップを含む
ことを特徴とする請求項１ないし３のいずれか一項に記載の画像分割方法。

【請求項5】

前記第１の分割結果における前記動脈及び前記静脈と、前記第２の分割結果における前記血管とに基づいて、領域拡張アルゴリズムによって、前記分割対象画像における前記縦隔、前記動脈、前記静脈及び前記背景の分割結果を取得する前記ステップは、
前記第１の分割結果における前記動脈及び前記静脈を始点として、前記第１の分割結果における前記動脈及び前記静脈を、前記第２の分割結果における前記血管に沿って、予め設定された血管生長長さに基づいて領域拡張を行うことによって、前記分割対象画像における前記縦隔、前記動脈、前記静脈及び前記背景の分割結果を取得するステップを含む
ことを特徴とする請求項４に記載の画像分割方法。

【請求項6】

画像分割モデルのトレーニング方法であって、
縦隔領域における縦隔、背景、動脈及び静脈の第１のラベルと、外延領域における背景及び血管の第２のラベルとを含むサンプル画像を確定するステップであって、前記外延領域は、前記縦隔領域以外の、血管を有する領域であるステップと、
前記縦隔領域に対して切り分け作業を行うことによって、複数のブロック画像を取得するステップであって、前記複数のブロック画像はいずれも前記縦隔を含むステップと、
前記複数のブロック画像に基づいてニューラルネットワークを訓練して、前記縦隔領域における前記縦隔、前記背景、前記動脈及び前記静脈の第１の分割結果を取得するためのネットワークモデルを生成するステップと、
前記サンプル画像に基づいてカスケードニューラルネットワークを訓練して、前記外延領域における前記背景及び前記血管の第２の分割結果を取得するための分割モデルを生成するステップと、を含み、
前記ニューラルネットワークは３Ｄニューラルネットワークであり、
前記カスケードニューラルネットワークは、特徴抽出に用いられる第１のニューラルネットワークと、前記第２の分割結果を生成する第２のニューラルネットワークとを含む
ことを特徴とするトレーニング方法。

【請求項7】

前記サンプル画像に基づいてカスケードニューラルネットワークを訓練して、前記外延領域における前記背景及び前記血管の第２の分割結果を取得するための分割モデルを生成する前記ステップは、
前記第１のニューラルネットワークを用いて前記サンプル画像に対してダウンサンプリング作業を行うことによって、複数の第１の特徴図を取得するステップと、
前記第２のニューラルネットワークを用いて前記複数の第１の特徴図に対してアップサンプリング及び融合作業を行うことによって、第２の特徴図を取得するステップと、
分類器を用いて前記第２の特徴図を活性化して、前記外延領域における前記背景及び前記血管の第２の分割結果を取得するステップと、
前記第２の分割結果及び前記第２のラベルに基づいて、前記カスケードニューラルネットワークの損失関数値を取得するステップと、
前記損失関数値に基づいて前記カスケードニューラルネットワークのパラメータを更新するステップと、を含み、
前記第１のニューラルネットワークは深層残差ネットワークであり、前記第２のニューラルネットワークは特徴ピラミッドネットワークである
ことを特徴とする請求項６に記載のトレーニング方法。

【請求項8】

前記第２のラベル中の血管の所在領域に対して最大プーリング作業を行うことによって、前記第２のラベル中の血管の所在領域が膨張された後の前記サンプル画像における目標領域を取得するステップを更に含み、
前記第２の分割結果及び前記第２のラベルに基づいて、前記カスケードニューラルネットワークの損失関数値を取得する前記ステップは、
前記目標領域に対応する第２の分割結果及び前記第２のラベルに基づいて、前記カスケードニューラルネットワークの損失関数値を取得するステップを含む
ことを特徴とする請求項７に記載のトレーニング方法。

【請求項9】

画像分割装置であって、第１の入力モジュール、第１の分割モジュール、第２の分割モジュール及び取得モジュールを備え、
前記第１の入力モジュールは、分割対象画像の縦隔領域に対して切り分け作業を行うことによって複数のブロック画像を取得し、前記複数のブロック画像をネットワークモデルに入力するように構成され、前記分割対象画像は背景、縦隔、動脈及び静脈を含み、前記複数のブロック画像はいずれも前記縦隔を含み、
前記第１の分割モジュールは、前記複数のブロック画像に対応する前記縦隔領域における前記縦隔、前記動脈、前記静脈及び前記背景の複数のサブ分割結果を前記ネットワークモデルによって取得し、ガウシアンぼかし処理によって前記複数のサブ分割結果を組合せて、組合せられた分割結果を取得し、前記組合せられた分割結果に対して連結領域アルゴリズムによって後処理を行って、前記縦隔領域における前記縦隔、前記動脈、前記静脈及び前記背景の第１の分割結果を取得するように構成され、
前記第２の分割モジュールは、前記分割対象画像に基づいて、前記分割対象画像の外延領域における血管及び前記背景の第２の分割結果を取得するように構成され、前記外延領域は、前記縦隔領域以外の、血管を有する領域であり、
前記取得モジュールは、前記第１の分割結果及び前記第２の分割結果に基づいて、前記分割対象画像における前記縦隔、前記動脈、前記静脈及び前記背景の分割結果を取得するように構成される
ことを特徴とする画像分割装置。

【請求項10】

画像分割モデルのトレーニング装置であって、確定モジュール、切り分けモジュール、第１のトレーニングモジュール及び第２のトレーニングモジュールを備え、
前記確定モジュールはサンプル画像を確定するように構成され、前記サンプル画像は縦隔領域における縦隔、背景、動脈及び静脈の第１のラベルと、外延領域における背景及び血管の第２のラベルとを含み、前記外延領域は、前記縦隔領域以外の、血管を有する領域であり、
前記切り分けモジュールは、前記縦隔領域に対して切り分け作業を行うことによって複数のブロック画像を取得するように構成され、前記複数のブロック画像はいずれも前記縦隔を含み、
前記第１のトレーニングモジュールは、前記複数のブロック画像に基づいてニューラルネットワークを訓練して、前記縦隔領域における前記縦隔、前記背景、前記動脈及び前記静脈の第１の分割結果を取得するためのネットワークモデルを生成するように構成され、前記ニューラルネットワークは３Ｄニューラルネットワークであり、
前記第２のトレーニングモジュールは、前記サンプル画像に基づいてカスケードニューラルネットワークを訓練して、前記外延領域における前記背景及び前記血管の第２の分割結果を取得するための分割モデルを生成するように構成され、
前記カスケードニューラルネットワークは、特徴抽出に用いられる第１のニューラルネットワークと、前記第２の分割結果を生成する第２のニューラルネットワークとを含む
ことを特徴とするトレーニング装置。

【請求項11】

プロセッサと、前記プロセッサにより実行可能な命令を記憶するように構成されるメモリと、を備え、
前記プロセッサは請求項１ないし８のいずれか一項に記載の方法を実行するように構成される
ことを特徴とする電子デバイス。

【請求項12】

コンピュータプログラムが記憶されており、
前記コンピュータプログラムは請求項１ないし８のいずれか一項に記載の方法を実行するように構成される
ことを特徴とするコンピュータ読取可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本願は、２０２０年７月３０日に出願された出願番号が２０２０１０７５２１４９．０である中国特許出願の優先権を主張し、そのすべての内容を引用により本明細書に組み込む。
本発明は、画像処理技術分野に関し、具体的には画像分割方法及び装置、画像分割モデルのトレーニング方法及び装置に関する。

【背景技術】

【0002】

画像分割は、映像学に基づく診断において重要な役割を果たしている。例えば、肺の血管を動脈と静脈に区分することは、医者が特定の様態で動脈又は静脈樹に影響を及ぼす肺疾患を正確に診断するために力になる。

【発明の概要】

【発明が解決しようとする課題】

【0003】

以上に鑑みて、本発明の実施例は、動脈と静脈に対する分割の正確度及び効率を向上させるために、画像分割方法及び装置、画像分割モデルのトレーニング方法及び装置を提供することを目的とする。

【課題を解決するための手段】

【0004】

本発明の実施例の第１の態様によると、画像分割方法を提供する。当該画像分割方法は、背景、縦隔、動脈及び静脈を含む分割対象画像に基づいて、前記分割対象画像の縦隔領域における前記縦隔、前記動脈、前記静脈及び前記背景の第１の分割結果を取得するステップと、前記分割対象画像に基づいて、前記分割対象画像の外延領域における血管及び前記背景の第２の分割結果を取得するステップと、前記第１の分割結果及び前記第２の分割結果に基づいて、前記分割対象画像における前記縦隔、前記動脈、前記静脈及び前記背景の分割結果を取得するステップと、を含む。

【0005】

本発明の実施例の第２の態様によると、画像分割モデルのトレーニング方法を提供する。当該トレーニング方法は、縦隔領域における縦隔、背景、動脈及び静脈の第１のラベルと、外延領域における背景及び血管の第２のラベルとを含むサンプル画像を確定するステップと、前記サンプル画像に基づいてニューラルネットワークを訓練して、前記縦隔領域における縦隔、背景、動脈及び静脈の第１の分割結果を取得するためのネットワークモデルを生成するステップと、前記サンプル画像に基づいてカスケードニューラルネットワークを訓練して、前記外延領域における背景及び血管の第２の分割結果を取得するための分割モデルを生成するステップと、を含む。ここで、前記ニューラルネットワークは３Ｄニューラルネットワークであり、前記カスケードニューラルネットワークは、特徴抽出に用いられる第１のニューラルネットワークと、前記第２の分割結果を生成する第２のニューラルネットワークと、を含む。

【0006】

本発明の実施例の第３の態様によると、画像分割装置を提供する。当該画像分割装置は、背景、縦隔、動脈及び静脈を含む分割対象画像に基づいて、前記分割対象画像の縦隔領域における前記縦隔、前記動脈、前記静脈及び前記背景の第１の分割結果を取得するように構成される第１の分割モジュールと、前記分割対象画像に基づいて、前記分割対象画像の外延領域における血管及び前記背景の第２の分割結果を取得するように構成される第２の分割モジュールと、前記第１の分割結果及び前記第２の分割結果に基づいて、前記分割対象画像における前記縦隔、前記動脈、前記静脈及び前記背景の分割結果を取得するように構成される取得モジュールと、を備える。

【0007】

本発明の実施例の第４の態様によると、画像分割モデルのトレーニング装置を提供する。当該トレーニング装置は、縦隔領域における縦隔、背景、動脈及び静脈の第１のラベルと、外延領域における背景及び血管の第２のラベルとを含むサンプル画像を確定するように構成される確定モジュールと、前記サンプル画像に基づいてニューラルネットワークを訓練して、前記縦隔領域における縦隔、背景、動脈及び静脈の第１の分割結果を取得するためのネットワークモデルを生成するように構成される第１のトレーニングモジュールと、前記サンプル画像に基づいてカスケードニューラルネットワークを訓練して、前記外延領域における背景及び血管の第２の分割結果を取得するための分割モデルを生成するように構成される第２のトレーニングモジュールと、を備える。ここで、前記ニューラルネットワークは３Ｄニューラルネットワークであり、前記カスケードニューラルネットワークは、特徴抽出に用いられる第１のニューラルネットワークと、前記第２の分割結果を生成する第２のニューラルネットワークと、を含む。

【0008】

本発明の実施例の第５の態様によると、電子デバイスを提供する。当該電子デバイスは、プロセッサと、前記プロセッサにより実行可能な命令を記憶するメモリと、を備える。前記プロセッサは、上述のいずれかの実施例に記載の画像分割方法、及び／又は、上述のいずれかの実施例に記載の画像分割モデルのトレーニング方法を実行するように構成される。

【0009】

本発明の実施例の第６の態様によると、コンピュータ読取可能な記憶媒体を提供する。前記記憶媒体にはコンピュータプログラムが記憶されており、前記コンピュータプログラムは、上述のいずれかの実施例に記載の画像分割方法、及び／又は、上述のいずれかの実施例に記載の画像分割モデルのトレーニング方法を実行するように構成される。

【発明の効果】

【0010】

本発明の実施例に係る画像分割方法は、縦隔領域に対する血管分割タスクと外延領域に対する血管分割タスクとを分離させて、縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果と、外延領域における血管及び背景の第２の分割結果とをそれぞれ取得し、さらに第１の分割結果及び第２の分割結果に基づいて分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得することによって、動脈、静脈及び背景をそれぞれ直接分割する際に外延領域と縦隔領域との血管サイズが不一致のために異なるサイズの血管の分割が影響されてしまう問題を防ぐことができ、したがって動脈と静脈に対する分割の正確度と効率を向上させることができる。

【図面の簡単な説明】

【0011】

本発明の、上述及び上述以外の目的、特徴及び長所をより明確にするために、図面を参考しながら本発明の実施例をより詳しく説明する。図面は本発明の実施例に対する更なる理解を提供するために用いられ、明細書の一部として本発明の実施例と一緒に本発明を解釈するものに過ぎず、本発明に対する制限にはならない。図面において、同じ参考符号は通常、同じ部品やステップを指示する。

【図1】本発明の実施例に係る実施環境を示す模式図である。

【図2】本発明の一実施例に係る画像分割方法のフローチャートである。

【図3】本発明の他の一実施例に係る画像分割方法のフローチャートである。

【図4】本発明の一実施例に係る領域拡張の実現を示す模式図である。

【図5】本発明の一実施例に係る画像分割モデルのトレーニング方法のフローチャートである。

【図6】本発明の一実施例に係るカスケードニューラルネットワークを訓練する流れを示す模式図である。

【図7】本発明の一実施例に係るラベリングされたサンプル画像の模式図である。

【図8】本発明の一実施例に係る画像分割装置のブロック図である。

【図9】本発明の他の一実施例に係る画像分割装置のブロック図である。

【図10】本発明の他の一実施例に係る画像分割装置のブロック図である。

【図11】本発明の一実施例に係る画像分割モデルのトレーニング装置のブロック図である。

【図12】本発明の他の一実施例に係る画像分割モデルのトレーニング装置のブロック図である。

【図13】本発明の他の一実施例に係る画像分割モデルのトレーニング装置のブロック図である。

【図14】本発明の一実施例に係る電子デバイスの構造を示すブロック図である。

【発明を実施するための形態】

【0012】

以下、本発明の実施例による図面を参照しながら本発明の実施例に係る技術案を明確で完全に説明する。明らかに、ここで説明される実施例は本発明の一部の実施例に過ぎず、すべての実施例ではない。当業者が創造的な労働をせずに本発明の実施例に基づいて取得する他の実施例はすべて本発明の保護範囲に属する。

【0013】

＜本発明の基本原理＞
ディープラーニングにおいては、カスケード構造を有する人工ニューラルネットワークを構築することによって、計算システムの中で人工知能を実現する。カスケード構造の人工ニューラルネットワークが入力情報を層別で抽出及び選別することができるため、ディープラーニングは表現学習（Ｒｅｐｒｅｓｅｎｔａｔｉｏｎ Ｌｅａｒｎｉｎｇ）の能力を具備しており、エンドツーエンドの教師あり学習及び教師なし学習を実現することができる。ディープラーニングにおいて使用されるカスケード構造の人工ニューラルネットワークは複数の形態を有し、その階層の複雑さが一般に「深さ」と呼ばれる。アーキテクチャ分類によれば、ディープラーニングの形式は多層パーセプトロン、畳み込みニューラルネットワーク、循環ニューラルネットワーク、高信頼ネットワーク及び他の混合アーキテクチャを含む。ディープラーニングにおいては、データを用いてそのアーキテクチャ中のパラメータを更新してトレーニング目標を達成しており、当該流れが一般に「学習」と呼ばれる。ディープラーニングは、コンピュータにパターン特徴を自動的に学習させる方法を提示するとともに、モデル構築のプロセスに特徴学習を融合させることによって、人工による特徴設計の欠陥を補うことができる。

【0014】

ニューラルネットワークは運算モデルであり、互いに連結される大量のノード（又はニューロンと呼ばれる）により構成される。いずれのノードも１つのストラテジー関数に対応しており、２つずつのノードの間の連結は、当該連結を通る信号に対する１つの加重値を表し、ウエイトと呼ばれる。ニューラルネットワークは一般に複数のニューラルネットワーク層を含み、上下のネットワーク層同士は互いにカスケード接続されており、ｉ個目のニューラルネットワーク層の出力がｉ＋１個目のニューラルネットワーク層の入力に接続され、ｉ＋１個目のニューラルネットワーク層の出力がｉ＋２個目のニューラルネットワーク層の入力に接続される、等々である。トレーニングサンプルがカスケードニューラルネットワーク層に入力された後、各ニューラルネットワーク層を通して１つの出力結果が出力され、当該出力結果が次のニューラルネットワーク層の入力になる。このように、複数のニューラルネットワーク層による計算に基づいて出力を取得し、出力層の出力の予測結果と本当の目標値とを比較し、さらに予測結果と目標値との間の差異によって各層のウエイトマトリックス及びストラテジー関数を調整する。ニューラルネットワークにより出力される予測結果が本当の目標結果に一致するようになるまでに、ニューラルネットワークはトレーニングサンプルを用いて上述の調整プロセスを繰り返して行って、ニューラルネットワークのウエイトなどのパラメータが最適化される。当該プロセスがすなわちニューラルネットワークの訓練プロセスである。ニューラルネットワークが訓練された後、ニューラルネットワークモデルが得られる。

【0015】

最新の研究によれば、動脈／静脈に対する区分を行うと、肺塞栓症をよりうまく判断できる。一方、動脈樹の変化は慢性血栓塞栓性肺動脈高圧の進展に関わる。また、肺実質内動脈の変化は右心室の機能障害に関わる。この２つの血管樹の変化を検出するために、医者は患者の胸部ＣＴ画像を人工的に分析して異常を探す。この作業は時間がかかり且つ標準化されにくいため、大規模の臨床研究や現実世界における臨床決断には向いていない。そこで、医者が病変を正確に診断できるように力になれる、ＣＴ画像での動脈と静脈の自動分離が、注目されるようになってきた。

【0016】

従来の血管分割手段は主に、ディープラーニングに基づく血管分割と従来の学習に基づく血管分割に分ける。特に、肺血管を分割する作業においては、従来の血管分割手段のほとんどが、血管のＨＵ値の差異程度に基づいて計算を行う。このような手段は、病巣がないＣＴ画像に用いられる場合にはまだそれなりに効果を示しているが、肺炎、結節又は腫瘍が存在しているＣＴ画像に用いられると、血管のＨＵ値が近似する病変を分割してしまう。そのため、このような手段のロバスト性は現在の製品使用シーンにおける要求を満たすことができない。

【0017】

一方、ディープラーニングに基づく血管分割手段においては、現在の主流の研究傾向はほとんどグラフ構造に基づく改造を利用している。このような改造はグラフ畳み込み及びグラフカットの使用を含む。ただし、予測スピード及びリソース（ビデオメモリ及び内蔵メモリなど）の占用の面において、このように改造されたアルゴリズムは、オンライン製品の、リアルタイム性及びリソース調達に対する需要を満足することができない。

【0018】

本発明の基本原理を紹介したため、以下、図面を参照しながら本発明の非制限的な各実施例を説明する。

【0019】

＜例示的なシステム＞
図１は本発明の実施例に係る実施環境を示す模式図である。当該実施環境は、ＣＴスキャナー１３０、サーバ１２０及びコンピュータデバイス１１０を備える。コンピュータデバイス１１０はＣＴスキャナー１３０から肺臓の医用画像を取得することができる。それとともに、コンピュータデバイス１１０は通信ネットワークを介してサーバ１２０と接続することができる。選択的に、通信ネットワークは有線ネットワーク又は無線ネットワークである。

【0020】

ＣＴスキャナー１３０は、人体組織に対してＸ線走査を行って人体組織のＣＴ画像を取得するように構成される。一実施例においては、ＣＴスキャナー１３０を用いて肺臓を走査することによって肺臓の医用画像を取得することができる。

【0021】

コンピュータデバイス１１０は汎用型コンピュータ又は専用の集積回路により構成されるコンピュータ装置などであってもよく、本発明の実施例はこれについて制限しない。例えば、コンピュータデバイス１１０はタブレットパソコンなどのモバイル端末デバイスであってもよく、又はパーソナルコンピュータ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ，ＰＣ）、例えば、ラップトップ型携帯コンピュータやデスクトップコンピュータなどであってもよい。上述のコンピュータデバイス１１０は１つであってもよく、複数であってもよく、その種類が同じであってもよく、異なってもよいことを、当業者であれば理解できる。例えば、上述のコンピュータデバイス１１０は１つであってもよく、又は上述のコンピュータデバイス１１０は数十台や数百台ひいてはより多くてもよい。本発明の実施例はコンピュータデバイス１１０の数及びデバイス種類について制限しない。コンピュータデバイス１１０の中にはネットワークモデル及び分割モデルが配置されていてもよく、ネットワークモデルは肺臓の医用画像の縦隔領域における縦隔、動脈、静脈及び背景に対して分割を行って第１の分割結果を取得するように構成され、分割モデルは肺臓の医用画像の外延領域における血管及び背景に対して分割を行って第２の分割結果を取得するように構成される。コンピュータデバイス１１０は、その中に配置されているネットワークモデル及び分割モデルを利用して、ＣＴスキャナー１３０から取得した肺臓の医用画像に対して画像分割を行って、第１の分割結果及び第２の分割結果を取得し、ひいては肺臓の医用画像における縦隔、動脈、静脈及び背景の分割結果を取得する。このように、縦隔領域の血管分割タスクと外延領域の血管分割タスクを分離させることによって、動脈、静脈及び背景を直接分割する際に外延領域の血管と縦隔領域の血管とがサイズが不一致のために異なるサイズの血管に対する分割が影響されてしまうことを避けることができ、したがって動脈と静脈に対する分割の正確度及び効率を向上させることができる。

【0022】

サーバ１２０は１つのサーバであるか、又は複数のサーバにより構成されるか、又は１つの仮想化プラットフォームであるか、又は１つのクラウド計算サービスセンターである。一部の選択的な実施例において、サーバ１２０は、コンピュータデバイス１１０により収集されたトレーニング画像を受信し、トレーニング画像に基づいてニューラルネットワークを訓練して、肺臓の医用画像の縦隔領域における縦隔、動脈、静脈及び背景に対する分割に用いられるネットワークモデルと、肺臓の医用画像の外延領域における血管及び背景に対する分割に用いられる分割モデルとを取得することができる。コンピュータデバイス１１０はＣＴスキャナー１３０から取得した肺臓の医用画像をサーバに送信することができ、サーバ１２０は訓練して取得したネットワークモデル及び分割モデルを利用して、肺臓の医用画像の縦隔領域における縦隔、動脈、静脈及び背景に対する分割と、外延領域における血管及び背景に対する分割とを行って、肺臓の医用画像における縦隔、動脈、静脈及び背景の分割結果を取得し、さらに、医療関係者が照会できるよう、当該分割結果をコンピュータデバイス１１０に送信する。このように、縦隔領域の血管分割タスクと外延領域の血管分割タスクを分けることによって、動脈、静脈及び背景に対して直接分割を行う際に外延領域と縦隔領域の血管サイズの不一致により招来される異なるサイズの血管の分割が影響されてしまう問題を防ぐことができ、したがって動脈と静脈に対する分割の正確度と効率を向上させることができる。

【0023】

＜例示的な方法＞
図２は本発明の一実施例に係る画像分割方法のフローチャートである。図２に記載の方法は計算デバイス（例えば、サーバ）により実行されることができるが、本発明の実施例はこれに限られない。サーバは１つのサーバであってもよく、又は複数のサーバにより構成されてもよく、又は１つの仮想化プラットフォームや１つのクラウド計算サービスセンターであってもよく、本発明の実施例はこれについて制限しない。図２に示しように、当該方法は以下の内容を含む。

【0024】

Ｓ２１０において、背景、縦隔、動脈及び静脈を含む分割対象画像に基づいて、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果を取得する。

【0025】

分割対象画像は、電子コンピュータ断層撮影（Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ，ＣＴ）、磁気共鳴撮影（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ，ＭＲＩ）、コンピュータＸ線撮影（Ｃｏｍｐｕｔｅｄ Ｒａｄｉｏｇｒａｐｈｙ，ＣＲ）又はデジタルＸ線撮影（Ｄｉｇｉｔａｌ Ｒａｄｉｏｇｒａｐｈｙ，ＤＲ）などの医用映像であってもよく、本発明の実施例はこれについて制限しない。

【0026】

分割対象画像は肺臓の医用画像であってもよいが、本発明の実施例はこれについて制限せず、分割対象画像は他の臓器の医用画像であってもよい。当該医用画像は、サイズが比較的に大きい血管とサイズが比較的に小さい血管とが領域区画の方式（例えば、本発明の実施例による縦隔領域と外延領域）によって区分されることが可能であるとの条件を満足すればよい。本発明の実施例は分割対象画像の詳しい形態についても制限せず、分割対象画像は生の医用画像であってもよく、前処理された医用画像であってもよく、生の医用画像の一部であってもよい。

【0027】

一実施例において、縦隔領域は、左右の縦隔胸膜の付近領域を指し、その範囲には心臓と、心臓を出入りする大血管、食管、気管、胸腺、神経及びリンパ組織などが入っている。外延領域は、縦隔領域以外の、血管を有する領域を指す。例えば、肺臓の医用画像において、縦隔領域は左右の縦隔胸膜の付近領域を指し、外延領域は縦隔領域以外の肺内の領域を指す。縦隔領域における血管のサイズは、外延領域における血管のサイズより大きい。

【0028】

一実施例においては、背景、動脈及び静脈を含む分割対象画像に対して第１の分割を行って、縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果を取得することができる。なお、本発明の実施例は第１の分割の実施形態を詳しく制限しない。

【0029】

Ｓ２２０において、分割対象画像に基づいて、分割対象画像の外延領域における血管及び背景の第２の分割結果を取得する。

【0030】

一実施例においては、分割対象画像に対して第２の分割を行って、外延領域における血管及び背景の第２の分割結果を取得することができる。なお、本発明の実施例は第２の分割の実施形態を詳しく制限しない。

【0031】

分割対象画像に対して第２の分割を行うことによって、分割対象画像の外延領域における血管と背景を分割することができる。ただし、血管に対する区分を行わない。すなわち、血管が動脈であるか静脈であるかを区分せず、血管と背景に分割することができればよい。

【0032】

本発明の実施例は第１の分割と第２の分割との実施形態が同一であるか否かについても制限せず、両者は同一であってもよく、異なってもよい。また、本発明の実施例は第１の分割と第２の分割が実行される順についても制限せず、第１の分割が先に実行されてもよく、第２の分割が先に実行されてもよく、又は第１の分割と第２の分割が同時に実行されてもよく、それぞれの分割結果が取得されればよい。

【0033】

Ｓ２３０において、第１の分割結果及び第２の分割結果に基づいて、分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得する。

【0034】

一実施例においては、第１の分割結果及び第２の分割結果を処理することによって縦隔、動脈、静脈及び背景の分割結果を取得することができる。なお、本発明の実施例は第１の分割結果及び第２の分割結果に対する処理手段について制限せず、最終的に背景、動脈及び静脈の分割結果を取得できればよい。

【0035】

第１の分割結果は分割対象画像の縦隔領域の分割結果を指し、第２の分割結果は分割対象画像の外延領域の分割結果を指す。例えば、直ちに第１の分割結果と第２の分割結果とを単純に重ね合わせることによって分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得してもよく、又は、第１の分割結果及び第２の分割結果を１つの中間結果として見なし、当該中間結果を処理することによって縦隔、動脈、静脈及び背景の分割結果を取得することもできる。

【0036】

このように、縦隔領域の血管分割タスクと外延領域の血管分割タスクを分離させ、縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果と、外延領域における血管及び背景の第２の分割結果とをそれぞれ取得してから、第１の分割結果及び第２の分割結果に基づいて分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得することによって、動脈、静脈及び背景を直接分割する際に外延領域の血管と縦隔領域の血管とがサイズが不一致のために異なるサイズの血管に対する分割が影響されてしまうことを避けることができ、したがって動脈と静脈に対する分割の正確度及び効率を向上させることができる。

【0037】

本発明の他の実施例において、図３に示す方法は図２に示す方法の一例であり、図３に示す方法は以下の内容を更に含む。

【0038】

Ｓ３１０において、分割対象画像をネットワークモデルに入力する。

【0039】

分割対象画像を分割するためには、分割対象画像を、縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果を取得するために用いられるネットワークモデルに入力して分割することができる。

【0040】

本発明の実施例はネットワークモデルの種類について詳しく制限しない。当該ネットワークモデルは任意の種類のニューラルネットワークにより構成されることができる。選択的に、当該ネットワークモデルは畳み込みニューラルネットワーク（Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＣＮＮ）、ディープニューラルネットワーク（Ｄｅｅｐ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＤＮＮ）又は回帰型ニューラルネットワーク（Ｒｅｃｕｒｒｅｎｔ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＲＮＮ）などであってもよい。当該ネットワークモデルは入力層、畳み込み層、プーリング層、接続層などのニューラルネットワーク層を備えることができ、本発明の実施例はこれについて制限しない。また、本発明の実施例は各種類のニューラルネットワーク層の個数についても制限しない。

【0041】

Ｓ３２０において、分割対象画像に基づいて、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果をネットワークモデルによって取得する。

【0042】

分割対象画像をネットワークモデルに直接入力して、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果を取得する。分割対象画像を当該ネットワークモデルに入力して分割を行うことによって、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果の正確度をより向上させることができる。

【0043】

１つの実施例において、分割対象画像をネットワークモデルに入力するステップは、分割対象画像の縦隔領域に対して切り分け作業を行って複数のブロック画像を取得するステップと、複数のブロック画像をネットワークモデルに入力するステップとを含み、なお、複数のブロック画像のうちのいずれのブロック画像も前記縦隔を含む。ここで、分割対象画像に基づいて、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果をネットワークモデルによって取得するステップは、複数のブロック画像に基づいて、複数のブロック画像に対応する縦隔領域における縦隔、動脈、静脈及び背景の複数のサブ分割結果をネットワークモデルによって取得するステップと、ガウシアンぼかし処理によって複数のサブ分割結果を組合せて、組合せられた分割結果を取得するステップと、組合せられた分割結果に対して連結領域アルゴリズムによって後処理を行って、第１の分割結果を取得するステップと、を含む。

【0044】

当該ネットワークモデルは３Ｄネットワークモデルであってもよく、２Ｄネットワークモデルであってもよく、本発明の実施例はこれについて制限せず、当業者は適用場面における実際のニーズに応じてネットワークモデルの種類を設計することができる。

【0045】

例えば、３Ｄネットワークモデルは、精度がよく、３Ｄの出来栄えがよいため、医用画像分割の分野において広く利用されている。しかしながら、３Ｄ分割のネットワークモデルは計算リソースを大量消耗してしまうので、３Ｄ分割のネットワークモデルに完全な分割対象画像（すなわち、生の医用画像）を直接入力すると、３Ｄ分割のネットワークモデルのトレーニングに必要なビデオメモリが膨大になる。

【0046】

計算リソースの消耗と最終的な分割精度を両立させるためには、分割対象画像の縦隔領域に対して切り分け作業を行うことができる。すなわち、縦隔領域に対応する分割対象画像を切り分けることによって、縦隔領域に対応する複数のブロック画像を取得する。ここで、複数のブロック画像は互いにオーバーラップするブロック画像であってもよい。その後、複数のブロック画像をネットワークモデルに入力して分割を行う。なお、本発明の実施例は分割対象画像の分割から得られるブロック画像の数について制限せず、隣接する２つのブロック画像の間のオーバーラップ部分のサイズについても制限しない。

【0047】

ブロック画像は縦隔を含むため、縦隔領域における血管の種類に対する判断では有利である。つまり、縦隔は、３Ｄネットワークモデルが動脈と静脈の区分学習を行うための参照物として利用されることができ、したがって３Ｄネットワークモデルは動脈と静脈の種類判別をよりうまく実現することができる。

【0048】

一実施例においては、複数のブロック画像を取得した後、複数のブロック画像をネットワークモデルに入力して画像分割を行う。ここで、１つのブロック画像をネットワークモデルに入力するたびに１つのサブ分割結果を出力することができる。つまり、１つのブロック画像は１つのサブ分割結果に対応しており、それで複数のブロック画像は複数のサブ分割結果に対応する。複数のサブ分割結果は、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の分割結果に対応する。

【0049】

一実施例において、複数のサブ分割結果を組合せて、分割対象画像と類似するサイズを有するｍａｓｋを取得して第１の分割結果とする。複数のブロック画像は互いにオーバーラップするブロック画像であるため、組合せによって得られる第１の分割結果の境界の平滑さを確保するためには、中心位置の分割結果のみを保留し、中心位置の分割結果に対して組合せ作業を実施することができる。つまり、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果の境界を平滑にするためには、複数のサブ分割結果をガウシアンぼかし処理によって組合せることができ、したがって平滑な境界を有する、縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果が得られる。

【0050】

なお、最も単純な組合せ方式として、複数のブロック画像を直接結合することができる。この方式は簡単で迅速であるが、杭垣効果（すなわち、ネットワークモデルがブロック画像の境界付近で出来栄えが悪く、一致性が悪いため、２つの隣接するブロック画像に対応する切り分け結果が組合せられるときに、結合跡が目立つこと）を招来してしまう。ネットワークモデルはブロック画像の中心位置においてより信頼性の高い分割結果を出して出来栄えがより良いため、ブロック画像の中心位置近くの分割結果のみを保留することができる。例えば、ブロック画像のサイズが１９２×１９２×６４であるが、中心位置近くの、サイズが１６０×１６０×４８となる領域の分割結果のみを保留することができる。杭垣効果をより緩和してネットワークモデルの分割結果をより滑らかにするためには、直接結合する組合せ方式のもとに、切り分けステップ長さを変更して、サイズが１６０×１６０×４８である２つの領域の分割結果のオーバーラップ領域の平均値を求めることができる。しかしながら、当該組合せ方式の欠点は、前述の先験的な仮説を利用していないことである。そこで、ガウシアンぼかし処理に基づく組合せ方式を採用することによってこの欠点を補うことができ、それによって分割結果の正確度を向上させる。

【0051】

ガウス関数を用いて、ブロック画像の中心位置をガウス核の平均値として、ガウス加重によってぼかしを行う。こうすると、ブロック画像の中心位置においてネットワークモデルの信頼性がより高くなるとの先験的知識にちょうど合致するので、組合せによって得られた第１の分割結果をよりうまく平滑化させることができる。

【0052】

なお、本発明の実施例はガウシアンぼかし処理に用いられる関数を制限せず、ガウス関数を採用してもよく、他の鐘形関数を採用してもよい。

【0053】

一実施例において、一部の体外偽陽性を除去するために、加えて、組合せられた各ブロック画像の境界付近における一致性を確保するためには、連結領域アルゴリズムを利用して組合せられた分割結果に対して後処理を行って第１の分割結果を取得することができる。なお、本発明の実施例は後処理の実施形態を詳しく制限せず、偽陽性及び境界付近における不一致ポイントを除去できればよい。

【0054】

１つの実施例において、組合せられた分割結果に対して連結領域アルゴリズムによって後処理を行って第１の分割結果を取得するステップは、連結領域アルゴリズムによって、組合せられた分割結果から静脈の最大連結領域及び動脈の最大連結領域を取得するステップと、静脈の最大連結領域及び動脈の最大連結領域に基づいて、組合せられた分割結果からノイズを除去して、第１の分割結果を取得するステップと、を含む。ここで、ノイズは、動脈及び静脈に同時に含まれる成分と、偽陽性の成分とを含む。

【0055】

まず、組合せられた分割結果に対して連結領域処理を行って、最大連結領域を取得する。当該最大連結領域は、動脈の最大連結領域及び静脈の最大連結領域を含む。次に、組合せられた分割結果から動脈の最大連結領域及び静脈の最大連結領域を除去して、組合せられた分割結果中のノイズを特定する。最後に、組合せられた分割結果から当該ノイズを除去して、第１の分割結果を取得することができる。こうすることによって、得られる第１の分割結果には、動脈及び静脈に同時に含まれる成分又は偽陽性の成分などの要求を満たさない成分が含まれない。

【0056】

当該ノイズは、動脈及び静脈に同時に含まれる成分及び偽陽性の成分を含んでもよいが、本発明の実施例はこれについて制限せず、ノイズは他の要求未達の成分であってもよい。

【0057】

Ｓ３３０において、分割対象画像を分割モデルに入力する。

【0058】

分割対象画像を分割するためには、分割対象画像を、外延領域における血管及び背景の第２の分割結果を取得するために用いられる分割モデルに入力して分割を行うことができる。

【0059】

本発明の実施例は分割モデルの種類について詳しく制限しない。当該分割モデルは任意の種類のニューラルネットワークにより構成されてもよい。選択的に、当該分割モデルは畳み込みニューラルネットワーク（Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＣＮＮ）、ディープニューラルネットワーク（Ｄｅｅｐ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＤＮＮ）又は回帰型ニューラルネットワーク（Ｒｅｃｕｒｒｅｎｔ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＲＮＮ）などであってもよい。当該分割モデルは、入力層、畳み込み層、プーリング層、接続層などのニューラルネットワーク層を含んでもよく、本発明の実施例はこれについて制限しない。また、本発明の実施例は各種類のニューラルネットワーク層の個数についても制限しない。

【0060】

Ｓ３４０において、分割対象画像に基づいて、外延領域における血管及び背景の第２の分割結果を分割モデルによって取得する。

【0061】

分割対象画像を分割モデルに直接入力して、分割対象画像の外延領域における血管及び背景の第２の分割結果を取得する。分割対象画像を当該分割モデルに入力して分割を行うことによって、分割対象画像の外延領域における血管及び背景の第２の分割結果の正確度を向上させることができる。

【0062】

分割モデルは分割対象画像の外延領域における血管と背景を分割することができるが、血管を区分しない。すなわち、血管が動脈であるか静脈であるかを区分せず、血管と背景を分割すればよい。

【0063】

例えば、肺臓の医用画像において、外延領域は肺内の領域を指す。肺内の領域においては血管が判別されやすいため、分割モデルとして軽量化のモデルアーキテクチャを採用してもよい。一実施例において、当該分割モデルは２Ｄ分割モデルであってもよく、本発明の実施例はこれについて制限しないため、当業者は適用場面における実際のニーズに応じてネットワークモデルの種類を設計することができる。また、本発明の実施例は分割モデルのモデルアーキテクチャについても詳しく制限しないため、当業者は適用場面における実際のニーズに応じて分割モデルのモデルアーキテクチャを設計することができ、例えば、分割モデルはＲｅｓＮｅｔ１８及び特徴ピラミッドネットワークにより構成されることができる。

【0064】

まとめると、ネットワークモデルを用いて縦隔領域におけるサイズが比較的に大きい血管を分割し、分割モデルを用いて外延領域におけるサイズが比較的に小さい血管を分割することによって、サイズが大きい血管とサイズが小さい血管を１つのモデルのみにより分割する場合に分割効果及び分割性能を兼備できない課題を解決することができる。

【0065】

例えば、１つの３Ｄネットワークモデルのみを用いて縦隔領域における血管及び外延領域における血管に対して分割を行う場合、縦隔を含むブロック画像のサイズは、外延領域における動脈及び静脈の区分正確度に相関する。具体的に、ブロック画像のＣＴ物理的解像度（すなわち、ＰｉｘｅｌＳｐａｃｉｎｇ解像度であり、ＰｉｘｅｌＳｐａｃｉｎｇ解像度が高いほど現実物理世界の再現性がよくなり、ＰｉｘｅｌＳｐａｃｉｎｇ解像度が低いほど現実物理空間の再現性が悪くなる）が外延領域におけるサイズが小さい血管に対する分割に影響を及ぼす。つまり、ブロック画像のＣＴ物理的解像度が高ければ高いほど、外延領域におけるサイズが小さい血管に対する分割に有利である。理論的に、ブロック画像の物理的体積が大きいほどそのＣＴ物理的解像度が高くなり、したがって３Ｄネットワークモデルがサイズの小さい血管を分割するときの出来栄え及び動脈と静脈を区分するときの出来栄えがよくなる。しかしながら、ブロック画像のサイズが一定である場合、物理的体積とＣＴ物理的解像度とは負の相関になる。そのため、物理的体積及びＣＴ物理的解像度を同時に向上させる（すなわち、３Ｄネットワークモデルの、サイズの小さい血管に対する分割正確度及び動脈と静脈に対する区分正確度を向上させる）ためには、ブロック画像のサイズを拡大する必要がある。例えば、ブロック画像の物理的体積が一定である場合、ブロック画像のＣＴ物理的解像度を０．５に調整すると、ブロック画像の各辺は２倍に拡大される。こうすると、ブロック画像のサイズ及び３Ｄネットワークモデルの大きさはいずれも元の８倍に拡大される。つまり、このときにブロック画像の物理的体積を増加すると、ブロック画像のサイズの増加が元の８倍を超えてしまう。明らかに、これは３Ｄ分割のネットワークモデルのトレーニングに必要なビデオメモリの増加に繋がって、３Ｄネットワークモデルの分割対象画像に対する分割効率が低下してしまう。

【0066】

そこで、上述の矛盾を避けるためには、２つのモデルを用いてそれぞれ異なる分割を実施させる。すなわち、２Ｄ分割モデルは外延領域におけるサイズが比較的に小さい血管に対する分割制度を担当し、３Ｄネットワークモデルは縦隔領域におけるサイズが比較的に大きい血管に対する区分及び分割の正確度を担当する。こうすることによって、ブロック画像のサイズを控えることができ、すなわち３Ｄネットワークモデルの分割タスクを簡単化させることができる。それとともに、縦隔及び縦隔領域近くの血管に対する分割及び区分の正確度を保証することができ、すなわち、ブロック画像の物理的体積を十分大きく保証できれば、縦隔及び縦隔領域近くの血管に対する分割効果及び区分効果がよくなる。例えば、ＣＴ物理的空間解像度を元の１．３倍に増加させるとき、同じ縦隔及び縦隔領域近くの血管に対する分割効果及び区分効果を達成するために必要なビデオメモリが従来の２倍に縮小し、したがって３Ｄネットワークモデルの分割対象画像に対する分割効率を向上させる。

【0067】

Ｓ３５０において、第１の分割結果における動脈及び静脈と、第２の分割結果における血管とに基づいて、領域拡張アルゴリズムによって、分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得する。

【0068】

図４には領域拡張の実現を示している。図４に示すように、第１の分割結果及び第２の分割結果を取得した後、第１の分割結果における動脈及び静脈と、第２の分割結果における血管とに対して領域拡張（ＲｅｇｉｏｎＧｒｏｗｔｈ）を行うことによって、第１の分割結果における動脈及び静脈と、第２の分割結果における血管とを結合して、分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得することができる。ＲｅｇｉｏｎＧｒｏｗｔｈの速度が要求を満たすようにするためには、ｃｕｄａによって実現することができる。

【0069】

なお、領域拡張アルゴリズムは、近似性を有する画素をまとめて最終的な領域を構成することである。まず、分割対象である各領域のそれぞれにおいて１つの種画素を拡張の始点として特定する。次に、種画素の周囲の隣接領域にある、種と同一又は類似する性質を有する画素（事前確定した拡張又は類似標準により確定する）を種画素の所在領域に併入する。続いて新しい画素を種として周囲へ拡張させる。併入可能な、条件を満足する画素がなくなると、１つの最終的な領域の拡張が完了する。

【0070】

本発明の他の実施例において、第１の分割結果における動脈及び静脈と、第２の分割結果における血管とに基づいて、分割対象画像における縦隔、動脈、静脈及び背景の分割結果を領域拡張アルゴリズムによって取得するステップは、第１の分割結果における動脈及び静脈を始点として、第１の分割結果における動脈及び静脈を、第２の分割結果における血管に沿って、予め設定された血管生長長さに基づいて領域拡張を行って、分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得するステップを含む。

【0071】

第１の分割結果においては縦隔領域の動脈と静脈が区分されており、第２の分割結果においては外延領域の血管が動脈と静脈に区分されておらず、加えて、第１の分割結果と第２の分割結果とは縦隔領域における血管が重なるが肺内の領域における血管が重ならない。そのため、第１の分割結果における動脈及び静脈を領域拡張の始点とし、第２の分割結果における血管を領域拡張の軌道とし、領域拡張アルゴリズムを利用して、第１の分割結果における動脈及び静脈が第２の分割結果における血管に沿って外延領域へ延びるようにする。つまり、第１の分割結果における動脈及び静脈を第２の分割結果における血管に沿って拡張させる。

【0072】

動脈と静脈は２つの完全な連結領域であるため、確定された動脈及び静脈を始点として連結領域の分析を行うことによって、領域拡張された後の外延領域における動脈と静脈を区分することができる。また、動脈と静脈は２つの完全な連結領域であり、且つ第２の分割結果にある偽陽性はこの２つの完全な連結領域と結合することがないため、領域拡張を行うことによって、第２の分割結果から偽陽性を除去することも実現できる。

【0073】

領域拡張アルゴリズムは反復型のアルゴリズムであるため、第１の分割結果中の動脈及び静脈が第２の分割結果中の血管に沿って領域拡張されるときの予め設定された血管生長長さ（例えば、肺臓の医用画像の場合、予め設定された血管生長長さは予め設定された肺内の血管生長長さとなる）を毎回の反復において設定することができる。分割後に画像を表示するとき、毎回の反復の予め設定された血管生長長さを調節することによって、血管の粒度をダイナミックに表示することができる。こうすることによって、医療関係者が分割された後の画像のＶＲを照会するときに一部の病巣が血管により遮蔽されることを防ぐことができるため、ユーザの使用体験を向上させることができる。

【0074】

なお、本発明の実施例は毎回の反復における予め設定された血管生長長さの値を詳しく制限せず、適用場面によるニーズに応じて選択することができる。

【0075】

まとめると、第１の分割結果における動脈及び静脈を第２の分割結果における血管に従って外延領域に向けて伸ばすことによって、動脈と静脈の分割タスクを３つのサブタスクに分けることができ、２つのモデルを用いて第１の分割結果と第２の分割結果をそれぞれ取得することによってタスクの複雑さを緩和させることができ、それによって、より簡単なモデルアーキテクチャを採用することが可能になって、ビデオメモリを低減するとともに予測スピードを向上させて、オンライン製品のリアルタイム性及びリソース調達の面における要求を満足することができる。

【0076】

図５は本発明の一実施例に係る画像分割モデルのトレーニング方法のフローチャートである。図５に記載の方法は計算デバイス（例えば、サーバ）により実行されることができるが、本発明の実施例はこれに限られない。サーバは１つのサーバであってもよく、又は複数のサーバにより構成されてもよく、又は１つの仮想化プラットフォームや１つのクラウド計算サービスセンターであってもよく、本発明の実施例はこれについて制限しない。図５に示すように、当該方法は以下の内容を含む。

【0077】

Ｓ５１０において、サンプル画像を確定する。
サンプル画像は、縦隔領域における縦隔、背景、動脈及び静脈の第１のラベルと、外延領域における背景及び血管の第２のラベルと、を含む。

【0078】

当該第１のラベルは、サンプル画像の縦隔領域における縦隔、背景、動脈及び静脈に対してラベリングを行うことによって得られるラベルを指す。当該第２のラベルは、サンプル画像の外延領域における背景及び血管に対してラベリングを行うことによって得られるラベルを指す。当該第２のラベルにおける血管は動脈と静脈に区分されない。

【0079】

本実施例で言及されたサンプル画像は、上述の実施例による分割対象画像と同じ種類の画像である。当該サンプル画像は人工的にラベリングされるため、第１のラベル及び第２のラベルが得られる。

【0080】

なお、本発明の実施例はサンプル画像の形態について詳しく制限しない。サンプル画像は生の医用画像であってもよく、前処理された医用画像であってもよく、生の医用画像の一部であってもよい。

【0081】

本実施例による縦隔領域及び外延領域は、上述の画像分割方法の実施例による縦隔領域及び外延領域と同一であるため、その詳しい細部についての説明は上述の画像分割方法の実施例を参照すればよく、ここでは重複を避けるために省略する。

【0082】

Ｓ５２０において、サンプル画像に基づいてニューラルネットワークを訓練して、縦隔領域における縦隔、背景、動脈及び静脈の第１の分割結果を取得するためのネットワークモデルを生成する。

【0083】

ここで、ニューラルネットワークは３Ｄニューラルネットワークである。

【0084】

一実施例においては、サンプル画像をニューラルネットワークに入力してニューラルネットワークを訓練することによって、当該ネットワークモデルを生成する。

【0085】

訓練されるニューラルネットワークは任意の種類のニューラルネットワークであってもよい。選択的に、訓練されるニューラルネットワークは畳み込みニューラルネットワーク（Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＣＮＮ）、ディープニューラルネットワーク（Ｄｅｅｐ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＤＮＮ）又は回帰型ニューラルネットワーク（Ｒｅｃｕｒｒｅｎｔ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＲＮＮ）などであってもよく、本発明の実施例は訓練されるニューラルネットワークの種類について詳しく制限しない。訓練されるニューラルネットワークは、入力層、畳み込み層、プーリング層、接続層などのニューラルネットワーク層を含むことができ、本発明の実施例はこれについて制限しない。また、本発明の実施例は各種類のニューラルネットワーク層の個数についても制限しない。好ましく、訓練されるニューラルネットワークは３Ｄニューラルネットワークである。

【0086】

Ｓ５３０において、サンプル画像に基づいてカスケードニューラルネットワークを訓練して、外延領域における背景及び血管の第２の分割結果を取得するための分割モデルを生成する。

【0087】

ここで、カスケードニューラルネットワークは、特徴抽出に用いられる第１のニューラルネットワークと、第２の分割結果を生成する第２のニューラルネットワークとを含む。

【0088】

一実施例においては、サンプル画像をカスケードニューラルネットワークに入力し、カスケードニューラルネットワークを訓練して、当該分割モデルを生成する。

【0089】

第１のニューラルネットワーク及び第２のニューラルネットワークは任意の種類のニューラルネットワークであってもよい。選択的に、第１のニューラルネットワーク及び第２のニューラルネットワークは畳み込みニューラルネットワーク（Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＣＮＮ）、ディープニューラルネットワーク（Ｄｅｅｐ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＤＮＮ）又は回帰型ニューラルネットワーク（Ｒｅｃｕｒｒｅｎｔ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ，ＲＮＮ）などであってもよく、本発明の実施例は第１のニューラルネットワーク及び第２のニューラルネットワークの種類について詳しく制限しない。第１のニューラルネットワーク及び第２のニューラルネットワークは、入力層、畳み込み層、プーリング層、接続層などのニューラルネットワーク層を含むことができ、本発明の実施例はこれについて制限しない。また、本発明の実施例は各種類のニューラルネットワーク層の個数についても制限しない。

【0090】

当該カスケードニューラルネットワークは、特徴抽出に用いられる第１のニューラルネットワークと、第１のニューラルネットワークの後に位置し、第２の分割結果を生成する第２のニューラルネットワークとを含む。なお、本発明の実施例はカスケードニューラルネットワークの構造を詳しく制限せず、当該カスケードニューラルネットワークは他のニューラルネットワークを含んでもよい。

【0091】

本発明の実施例はネットワークモデルと分割モデルに対する訓練順番について制限しない。ネットワークモデルを先に訓練してもよく、分割モデルを先に訓練してもよく、ネットワークモデルと分割モデルを同時に訓練してもよく、訓練済みのネットワークモデル及び分割モデルを取得できればよい。

【0092】

本発明の他の実施例において、前記方法は、サンプル画像の縦隔領域に対して切り分け作業を行うことによって、複数のブロック画像を取得するステップを更に含む。ここで、複数のブロック画像のうちのいずれのブロック画像も縦隔を含む。ここで、前記サンプル画像に基づいてニューラルネットワークを訓練して、縦隔領域における縦隔、背景、動脈及び静脈の第１の分割結果を取得するためのネットワークモデルを生成するステップは、複数のブロック画像に基づいてニューラルネットワークを訓練して、ネットワークモデルを生成するステップを含む。

【0093】

本実施例による切り分け作業は、上述の画像分割方法の実施例による切り分け作業と同じであるため、その詳しい細部については上述の画像分割方法の実施例を参照すればよく、ここでは省略する。

【0094】

一実施例においては、複数のブロック画像をそれぞれ３Ｄニューラルネットワークに入力して３Ｄニューラルネットワークを訓練することによって、当該ネットワークモデルを生成する。なお、本発明の実施例は３Ｄニューラルネットワークを訓練するプロセスについては詳しく制限せず、縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果を取得するためのネットワークモデルを形成することができればよい。

【0095】

例えば、第１の損失関数を利用して、３Ｄニューラルネットワークにより出力される各ブロック画像に対応する第１の分割結果と、各ブロック画像に対応する第１のラベル（すなわち、縦隔、背景、動脈及び静脈の目標結果）との間の類似度損失を計算することによって、３Ｄニューラルネットワークの第１の損失関数値を取得することができる。第１の損失関数値が小さければ小さいほど、予測した第１の分割結果が目標結果に近いと考えられ、予測の正確率が高いと判定される。逆に、第１の損失関数値が大きければ大きいほど、予測の正確率が低いと判定される。当該第１の損失関数値に対して勾配逆伝播を行うことによって当該３Ｄニューラルネットワークのパラメータ（例えば、ウェイト、バイアスなど）を更新することができるが、本発明はこれについて制限しない。

【0096】

本発明の他の実施例において、サンプル画像に基づいてカスケードニューラルネットワークを訓練して、外延領域における背景及び血管の第２の分割結果を取得するための分割モデルを生成するステップは、第１のニューラルネットワークを用いてサンプル画像に対してダウンサンプリング作業を行うことによって、複数の第１の特徴図を取得するステップと、第２のニューラルネットワークを用いて複数の第１の特徴図に対してアップサンプリング及び融合作業を行うことによって、第２の特徴図を取得するステップと、分類器を用いて第２の特徴図を活性化し、外延領域における背景及び血管の第２の分割結果を取得するステップと、第２の分割結果及び第２のラベルに基づいて、カスケードニューラルネットワークの損失関数値を取得するステップと、損失関数値に基づいて、カスケードニューラルネットワークのパラメータを更新するステップと、を含む。ここで、第１のニューラルネットワークは深層残差ネットワークであり、第２のニューラルネットワークは特徴ピラミッドネットワークである。

【0097】

図６には当該カスケードニューラルネットワークを訓練する流れの一例を示す。詳しくは以下の通りである。

【0098】

サンプル画像を深層残差ネットワークに入力してダウンサンプリング作業を行って、複数の第１の特徴図（すなわち、第１の特徴図１、第１の特徴図２、第１の特徴図３及び第１の特徴図４）を生成する。なお、本発明の実施例は第１の特徴図の数について詳しく制限せず、本発明の実施例はダウンサンプリングの倍数についても制限しない。

【0099】

さらに、複数の第１の特徴図をそれぞれ特徴ピラミッドネットワークに入力し、複数の第１の特徴図に対してアップサンプリング及び融合作業を行うことによって、第２の特徴図を生成する。具体的には、第１の特徴図４を特徴ピラミッドネットワークに入力し、第１の特徴図３を次元削減してから特徴ピラミッドネットワークに入力して第１の特徴図４と融合させることによって、融合された特徴図１を取得し、次に第１の特徴図２を次元削減してから特徴ピラミッドネットワークに入力して、融合された特徴図１と融合させることによって、融合された特徴図２を取得する。続いて、融合された特徴図２に対してアップサンプリング作業を行ってサンプル画像と同じサイズを有する第２の特徴図を取得する。最後に、分類器を用いて第２の特徴図を活性化することによって、外延領域における背景及び血管の第２の分割結果を取得する。

【0100】

なお、本発明の実施例はアップサンプリングの倍数を限定しない。図６に示されるトレーニングプロセスは、カスケードニューラルネットワークを訓練する流れの一例に過ぎず、本発明を制限するものにはならない。

【0101】

一実施例においては、損失関数を利用して第２の分割結果と第２のラベル（すなわち、背景及び血管の目標結果）との間の類似度損失を計算することによって、カスケードニューラルネットワークの損失関数値を取得することができる。損失関数値が小さいほど、予測した第２の分割結果が目標結果に近いと考えられ、予測の正確率が高いと判定される。逆に、損失関数値が大きいほど、予測の正確率が低いと判定される。

【0102】

一実施例において、当該カスケードニューラルネットワークの損失関数値に対して勾配逆伝播を行うことによって当該カスケードニューラルネットワークのパラメータ（例えば、ウェイト、バイアスなど）を更新することができるが、本発明はこれについて制限しない。

【0103】

本発明の他の実施例において、前記方法は、第２のラベル中の血管の所在領域に対して最大プーリング作業を行うことによって、第２のラベル中の血管の所在領域が膨張された後のサンプル画像における目標領域を取得するステップを更に含む。ここで、第２の分割結果及び第２のラベルに基づいてカスケードニューラルネットワークの損失関数値を取得するステップは、目標領域に対応する第２の分割結果及び第２のラベルに基づいて、カスケードニューラルネットワークの損失関数値を取得するステップを含む。

【0104】

従来の分割ネットワークにおいて、ポジティブサンプル（動脈及び静脈）の画素ポイントの数はネガティブサンプル（背景）の画素ポイントの数より遥かに少ない。ディープラーニングにおいて、この現象はクラス不均衡と呼ばれる。クラス不均衡は、モデルが数の多いサンプル、すなわちネガティブサンプル（背景）を学習する傾向がより強くなる原因となる。

【0105】

この問題を緩和するためには、最大プーリング（ｍａｘ ｐｏｏｌｉｎｇ）作業を利用して、ポジティブサンプルが位置するラベリングされた領域を「膨張」させる。図７に示すように、左の図面は第２のラベルの初期ラベリング結果であり、その中、白いラベル付きの領域が血管であり、他の黒い領域が背景である。右の図面は「膨張」された後のラベリング結果であり、その中、白い領域全体は、白いラベル付きの領域が膨張されて得られた目標領域である。当該目標領域は、左の図面における白いラベル付きの領域と、当該領域付近の黒い領域（すなわち背景）とを含む。こうすることによって、ポジティブサンプルとネガティブサンプルの不均衡問題を効果的に緩和することができ、したがって血管がより精度高く分割されるとともに、分割モデルの収束速度も早くなる。

【0106】

本実施例においては、第２のラベル中の血管の所在領域（すなわち、白いラベル付きの領域）に対して最大プーリング作業を行うことによって、第２のラベル中の血管の所在領域が膨張された後のサンプル画像における目標領域（すなわち、「膨張」された目標領域）を取得することができる。当該目標領域は、血管ラベルと、血管ラベル付近の背景ラベルとを含む。

【0107】

損失関数を利用して目標領域に対応する第２の分割結果とサンプル画像の第２のラベルとの間の類似度損失を計算することによって、カスケードニューラルネットワークの損失関数値を取得することができる。こうすることによって、目標領域中のポジティブサンプル及びネガティブサンプルの損失のみを計算することができ、すなわち、目標領域内の画素値の損失関数のみを計算することができるため、クラス不均衡問題を効果的に抑えることができる。

【0108】

＜例示的な装置＞
本発明の装置実施例は本発明に係る方法実施例を実行するために用いられることができる。本発明の装置実施例に記載されていない細部については、本発明の方法実施例を参照すればよい。
図８は本発明の一実施例に係る画像分割装置のブロック図である。図８に示すように、当該装置８００は、
背景、縦隔、動脈及び静脈を含む分割対象画像に基づいて、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果を取得するように構成される第１の分割モジュール８１０と、
分割対象画像に基づいて、分割対象画像の外延領域における血管及び背景の第２の分割結果を取得するように構成される第２の分割モジュール８２０と、
第１の分割結果及び第２の分割結果に基づいて、分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得する取得モジュール８３０と、を備える。

【0109】

１つの実施例において、図９に示すように、前記装置８００は、分割対象画像をネットワークモデルに入力するように構成される第１の入力モジュール８４０を更に備える。

【0110】

１つの実施例において、第１の分割モジュール８１０はさらに、分割対象画像に基づいて、ネットワークモデルを用いて、分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果を取得するように構成される。

【0111】

１つの実施例において、第１の入力モジュール８４０はさらに、分割対象画像の縦隔領域に対して切り分け作業を行って複数のブロック画像を取得し、複数のブロック画像をネットワークモデルに入力するように構成される。ここで、複数のブロック画像のうちのいずれのブロック画像も縦隔を含む。

【0112】

１つの実施例において、第１の分割モジュール８１０は、分割対象画像に基づいてネットワークモデルを用いて分割対象画像の縦隔領域における縦隔、動脈、静脈及び背景の第１の分割結果を取得するとき、さらに、複数のブロック画像に基づいて、ネットワークモデルを用いて、複数のブロック画像に対応する縦隔領域における縦隔、動脈、静脈及び背景の複数のサブ分割結果を取得し、ガウシアンぼかし処理によって複数のサブ分割結果に対して組合せ作業を行うことによって、組合せられた分割結果を取得し、連結領域アルゴリズムを利用して組合せられた分割結果に対して後処理を行って第１の分割結果を取得するように構成される。

【0113】

１つの実施例において、第１の分割モジュール８１０は、連結領域アルゴリズムを利用して組合せられた分割結果に対して後処理を行って第１の分割結果を取得するとき、さらに、連結領域アルゴリズムを利用して組合せられた分割結果における静脈の最大連結領域及び動脈の最大連結領域を取得し、静脈の最大連結領域及び動脈の最大連結領域に基づいて、組合せられた分割結果からノイズを除去して第１の分割結果を取得するように構成される。ここで、ノイズは動脈と静脈に同時に含まれる成分及び偽陽性の成分を含む。

【0114】

１つの実施例において、図１０に示すように、前記装置８００は、分割対象画像を分割モデルに入力するように構成される第２の入力モジュール８５０を更に備える。

【0115】

１つの実施例において、第２の分割モジュール８２０はさらに、分割対象画像に基づいて、分割モデルを用いて外延領域における血管及び背景の第２の分割結果を取得するように構成される。

【0116】

１つの実施例において、取得モジュール８３０はさらに、第１の分割結果における動脈及び静脈と、第２の分割結果における血管とに基づいて、領域拡張アルゴリズムによって、分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得するように構成される。

【0117】

１つの実施例において、取得モジュール８３０は、領域拡張アルゴリズムによって分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得するとき、さらに、第１の分割結果における動脈及び静脈を始点として、第１の分割結果の動脈及び静脈を、第２の分割結果における血管に沿って予め設定された血管生長長さに基づいて領域拡張を行うことによって、分割対象画像における縦隔、動脈、静脈及び背景の分割結果を取得するように構成される。

【0118】

図１１は本発明の一実施例に係る画像分割モデルのトレーニング装置のブロック図である。図１１に示すように、当該装置１１００は、確定モジュール１１１０、第１のトレーニングモジュール１１２０及び第２のトレーニングモジュール１１３０を備える。

【0119】

確定モジュール１１１０は、サンプル画像を確定するように構成される。ここで、サンプル画像は縦隔領域における縦隔、背景、動脈及び静脈の第１のラベルと、外延領域における背景及び血管の第２のラベルを含む。

【0120】

第１のトレーニングモジュール１１２０は、サンプル画像に基づいてニューラルネットワークを訓練することによって、縦隔領域における縦隔、背景、動脈及び静脈の第１の分割結果を取得するためのネットワークモデルを生成するように構成される。ここで、前記ニューラルネットワークは３Ｄニューラルネットワークである。

【0121】

第２のトレーニングモジュール１１３０は、前記サンプル画像に基づいてカスケードニューラルネットワークを訓練することによって、外延領域における背景及び血管の第２の分割結果を取得するための分割モデルを生成するように構成される。ここで、カスケードニューラルネットワークは、特徴抽出に用いられる第１のニューラルネットワークと、第２の分割結果を生成する第２のニューラルネットワークとを含む。

【0122】

１つの実施例において、図１２に示すように、前記装置１１００は、サンプル画像の縦隔領域に対して切り分け作業を行うことによって、複数のブロック画像を取得するように構成される切り分けモジュール１１４０を更に備える。ここで、複数のブロック画像のうちのいずれのブロック画像も縦隔を含む。

【0123】

１つの実施例において、第１のトレーニングモジュール１１２０はさらに、複数のブロック画像に基づいてニューラルネットワークを訓練して、ネットワークモデルを生成するように構成される。

【0124】

１つの実施例において、第２のトレーニングモジュール１１３０はさらに、第１のニューラルネットワークを用いてサンプル画像に対してダウンサンプリング作業を行って、複数の第１の特徴図を取得し、第２のニューラルネットワークを用いて複数の第１の特徴図に対してアップサンプリング及び融合作業を行って、第２の特徴図を取得し、分類器を用いて第２の特徴図を活性化して外延領域における背景及び血管の第２の分割結果を取得し、第２の分割結果及び第２のラベルに基づいて、カスケードニューラルネットワークの損失関数値を取得し、損失関数値に基づいてカスケードニューラルネットワークのパラメータを更新するように構成される。ここで、第１のニューラルネットワークは深層残差ネットワークであり、第２のニューラルネットワークは特徴ピラミッドネットワークである。

【0125】

１つの実施例において、図１３に示すように、前記装置１１００は、第２のラベル中の血管の所在領域に対して最大プーリング作業を行うことによって、第２のラベル中の血管の所在領域が膨張された後のサンプル画像における目標領域を取得するように構成される最大プーリングモジュール１１５０を更に備える。

【0126】

１つの実施例において、第２のトレーニングモジュール１１３０は、第２の分割結果及び第２のラベルに基づいてカスケードニューラルネットワークの損失関数値を取得するとき、さらに、目標領域に対応する第２の分割結果及び第２のラベルに基づいて、カスケードニューラルネットワークの損失関数値を取得するように構成される。

【0127】

＜例示的な電子デバイス＞
以下、図１４を参照しながら本発明の実施例に係る電子デバイスを説明する。図１４は本発明の実施例に係る電子デバイスのブロック図である。

【0128】

図１４に示すように、電子デバイス１４００は１つ又は複数のプロセッサ１４１０と、メモリ１４２０とを備える。

【0129】

プロセッサ１４１０は中央処理ユニット（ＣＰＵ）又はデータ処理能力及び／又は命令実行能力を有する他の形の処理ユニットであってもよく、電子デバイス１４００における他のコンポーネントが期待される機能を実行するように制御することができる。

【0130】

メモリ１４２０は１つ又は複数のコンピュータプログラム製品を含むことができる。前記コンピュータプログラム製品は様々な形のコンピュータ読取可能な記憶媒体、例えば、揮発性メモリ及び／又は不揮発性メモリを含んでもよい。前記揮発性メモリは例えば、ランダムアクセスメモリ（ＲＡＭ）及び／又は、キャッシュメモリ（ｃａｃｈｅ）などを含むことができる。前記不揮発性メモリは例えば、リードオンリーメモリ（ＲＯＭ）、ハードディスク、フラッシュメモリなどを含むことができる。前記コンピュータ読取可能な記憶媒体においては１つ又は複数のコンピュータプログラム命令が記憶されていてもよく、プロセッサ１４１０は前記プログラム命令を実行して、前述の本発明の各実施例による画像分割方法、画像分割モデルのトレーニング方法及び／又は他の期待される機能を実現することができる。前記コンピュータ読取可能な記憶媒体においては、入力信号、信号成分、騒音成分などの様々な内容が更に記憶されていてもよい。

【0131】

１つの例において、電子デバイス１４００は入力装置１４３０及び出力装置１４４０を更に備えることができる。これらのコンポーネントはバスシステム及び／又は他の形の接続メカニズム（図示せず）により互いに接続することができる。

【0132】

例えば、当該入力装置１４３０は上述のマイクロフォン又はマイクロフォンマトリックスであってもよく、音源からの入力信号を捕獲するように構成される。当該電子デバイスが単体デバイスである場合、当該入力装置１４３０は通信ネットワーク接続器であってもよい。
また、当該入力装置１４３０はキーボードやマウスなどを含んでもよい。

【0133】

当該出力装置１４４０は外部に様々な情報（確定された徴候種類情報などを含む）を出力することができる。当該出力装置１４４０は、ディスプレイ、スピーカー、プリンター、通信ネットワーク及びそれが接続しているリモート出力デバイスなどを含んでもよい。

【0134】

もちろん、簡略化するために、図１４には当該電子デバイス１４００中の、本発明と関連するコンポーネントのうちの一部のみを示しており、バス、入力／出力インタフェースなどのコンポーネントを省略した。また、実際の適用場面に応じて、電子デバイス１４００は他の任意の適切なコンポーネントを備えることもできる。

【0135】

＜例示的なコンピュータプログラム製品及びコンピュータ読取可能な記憶媒体＞
上述の方法及びデバイス以外に、本発明の実施例はコンピュータプログラム命令を備えるコンピュータプログラム製品であってもよい。前記コンピュータプログラム命令がプロセッサにより実行されるとき、前記プロセッサは本明細書に記載の「例示的な方法」で説明された本発明の実施例による画像分割方法、画像分割モデルのトレーニング方法のステップを実施する。

【0136】

前記コンピュータプログラム製品は１つ又は複数のプログラム設計言語の任意の組み合わせによって本発明の実施例による作業を実行するためのプログラムコードを編成することができる。前記プログラム設計言語は対象向けのプログラム設計言語、例えばＪａｖａ、Ｃ＋＋などを含み、一般の過程式のプログラム設計言語、例えば「Ｃ」言語又は類似のプログラム設計言語を更に含む。プログラムコードは、完全にユーザの計算デバイスで実行されるか、部分的にユーザデバイスで実行されるか、独立したソフトウェアパックとして実行されるか、一部がユーザの計算デバイスで実行されて一部がリモート計算デバイスで実行されるか、又は、完全にリモート計算デバイスで実行されることができる。

【0137】

また、本発明の実施例はコンピュータ読取可能な記憶媒体であってもよく、それにはコンピュータプログラム命令が記憶されている。前記コンピュータプログラム命令がプロセッサにより実行されるとき、前記プロセッサは、本明細書に記載の「例示的な方法」で説明された本発明の各実施例による画像分割方法、画像分割モデルのトレーニング方法のステップを実施する。

【0138】

前記コンピュータ読取可能な記憶媒体は１つ又は複数の読取可能な媒体の任意の組み合わせであってもよい。読取可能な媒体は読取可能な信号媒体又は読取可能な記憶媒体であってもよい。読取可能な記憶媒体は例えば、電気、磁気、光、電磁気、赤外線、又は半導体のシステム、装置もしくはデバイス、又はこれらの任意の組み合わせを含んでもよいが、これらに限られない。読取可能な記憶媒体の更に具体的な例（全体リストではない）としては、１つ又は複数の導線を有する電気接続、携帯式ディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリーメモリ（ＲＯＭ）、書き込み及び消去可能なリードオンリーメモリ（ＥＰＲＯＭ又はキャッシュ）、光ファイバー、携帯式コンパクトディスクリードオンリーメモリ（ＣＤ－ＲＯＭ）、光メモリ部品、磁気メモリ部品、又はこれらの任意の適切な組み合わせを含む。

【0139】

例示及び説明を目的として、以上の内容を開示した。また、以上の内容は本発明の実施例をここで開示された形に限るためのものではない。以上で既に複数の例示的な態様及び実施例を説明したが、当業者であれば、他の変形、変更、変化、追加及びサブ組み合わせを理解できるべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】