特表 2020-516427 腫瘍進行のＲＥＣＩＳＴ評価

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】特表2020-516427(P2020-516427A)

(43)【公表日】2020年6月11日

(54)【発明の名称】腫瘍進行のＲＥＣＩＳＴ評価

(51)【国際特許分類】

   A61B 6/03 20060101AFI20200515BHJP

   A61B 6/00 20060101ALI20200515BHJP

   A61B 5/055 20060101ALI20200515BHJP

   G06T 7/00 20170101ALI20200515BHJP

   G06T 7/62 20170101ALI20200515BHJP

【ＦＩ】

   A61B6/03 360J

   A61B6/00 350D

   A61B5/055 380

   G06T7/00 612

   G06T7/62

   G06T7/00 350C

【審査請求】未請求

【予備審査請求】未請求

【全頁数】17

(21)【出願番号】特願2020-505539(P2020-505539)

(86)(22)【出願日】2018年4月11日

(85)【翻訳文提出日】2019年10月30日

(86)【国際出願番号】GB2018050969

(87)【国際公開番号】WO2018189541

(87)【国際公開日】20181018

(31)【優先権主張番号】1705876.9

(32)【優先日】2017年4月11日

(33)【優先権主張国】GB

(81)【指定国】 AP(BW,GH,GM,KE,LR,LS,MW,MZ,NA,RW,SD,SL,ST,SZ,TZ,UG,ZM,ZW),EA(AM,AZ,BY,KG,KZ,RU,TJ,TM),EP(AL,AT,BE,BG,CH,CY,CZ,DE,DK,EE,ES,FI,FR,GB,GR,HR,HU,IE,IS,IT,LT,LU,LV,MC,MK,MT,NL,NO,PL,PT,RO,RS,SE,SI,SK,SM,TR),OA(BF,BJ,CF,CG,CI,CM,GA,GN,GQ,GW,KM,ML,MR,NE,SN,TD,TG),AE,AG,AL,AM,AO,AT,AU,AZ,BA,BB,BG,BH,BN,BR,BW,BY,BZ,CA,CH,CL,CN,CO,CR,CU,CZ,DE,DJ,DK,DM,DO,DZ,EC,EE,EG,ES,FI,GB,GD,GE,GH,GM,GT,HN,HR,HU,ID,IL,IN,IR,IS,JO,JP,KE,KG,KH,KN,KP,KR,KW,KZ,LA,LC,LK,LR,LS,LU,LY,MA,MD,ME,MG,MK,MN,MW,MX,MY,MZ,NA,NG,NI,NO,NZ,OM,PA,PE,PG,PH,PL,PT,QA,RO,RS,RU,RW,SA,SC,SD,SE,SG,SK,SL,SM,ST,SV,SY,TH,TJ,TM,TN,TR,TT

(71)【出願人】

【識別番号】519368116

【氏名又は名称】ケイロン メディカル テクノロジーズ リミテッド

(74)【代理人】

【識別番号】100145241

【弁理士】

【氏名又は名称】鈴木 康裕

(72)【発明者】

【氏名】ケスケメシー、ピーター

(72)【発明者】

【氏名】ライケン、トビアス

(72)【発明者】

【氏名】カルパチ、イーディス

【テーマコード（参考）】

4C093

4C096

5L096

【Ｆターム（参考）】

4C093AA22

4C093AA26

4C093DA10

4C093FF17

4C093FF22

4C093FF30

4C096AB38

4C096AC10

4C096DC20

4C096DC23

4C096DC30

5L096BA06

5L096BA13

5L096FA54

5L096FA60

5L096FA69

5L096HA11

5L096KA04

5L096KA15

(57)【要約】

本発明は、固形腫瘍における応答評価基準（ＲＥＣＩＳＴ）プロトコルに従って、医用画像における病変を自動的に発見し、セグメント化し、測定する方法およびシステムに関する。より具体的には、本発明は、セグメンテーション、３Ｄ体積マスクおよびモデル、２Ｄおよび３Ｄにおける測定、ならびに異なる時点で取られたスキャンにわたる統計的変化分析のための追加の画像マスクを伴う入力コンピュータ断層撮影（ＣＴ）スキャンの拡張バージョンを生成する。第１の態様によれば、画像データを受信するステップと、画像データ内の１つまたは複数の病変の１つまたは複数の位置を決定するステップと、画像データ内の１つまたは複数の病変の決定された１つまたは複数の位置を含む画像セグメンテーション（すなわち、マスクまたは輪郭）を作成するステップと、画像セグメンテーションを使用して病変の体積特性を決定するステップとを含む、医用画像内の１つまたは複数の病変の体積特性を決定する方法が提供される。
【選択図】図２

【特許請求の範囲】

【請求項1】

医用画像における１つまたは複数の病変の体積特性を決定するための方法であって、
画像データを受け取るステップと、
前記画像データ内の１つまたは複数の病変の１つまたは複数の位置を決定するステップと、
前記画像データ内の１つまたは複数の病変の決定された１つまたは複数の位置を含む画像セグメンテーションを作成するステップと、
前記画像セグメンテーションを用いて病変の体積特性を決定するステップと、
を含む方法。

【請求項2】

前記１つまたは複数の病変の１つまたは複数の位置を決定するステップは、前記１つまたは複数の病変の焦点を識別するステップを含む、請求項１に記載の方法。

【請求項3】

前記１つまたは複数の病変の焦点は、前記１つまたは複数の病変の質量中心を含む、請求項２に記載の方法。

【請求項4】

前記１つまたは複数の病変の１つまたは複数の位置を決定するステップは、前記１つまたは複数の解剖学的目印の焦点を識別するステップを含む、請求項１〜３のいずれかに記載の方法。

【請求項5】

前記１つまたは複数の解剖学的目印の焦点は、前記１つまたは複数の病変の質量中心を含む、請求項４に記載の方法。

【請求項6】

前記１つまたは複数の病変の１つまたは複数の位置を決定するステップは、１つまたは複数の解剖学的目印に関連する前記位置を決定するステップを含む、請求項１に記載の方法。

【請求項7】

前記１つまたは複数の解剖学的目印は、脊椎、肋骨、肺、心臓、肝臓、腎臓のいずれか１つを含む、請求項４〜６のいずれかに記載の方法。

【請求項8】

前記１つまたは複数の病変の１つまたは複数の位置を決定するステップは、前記１つまたは複数の病変の焦点を識別するステップと、前記１つまたは複数の解剖学的目印の焦点を識別するステップと、前記１つまたは複数の解剖学的目印に関連する前記１つまたは複数の病変の位置を決定するステップとを含む、請求項２〜６のいずれかに記載の方法。

【請求項9】

前記画像データは、ＣＴスキャンデータと、ダイコム画像ファイルと、解剖学的構造の連続したスライスの一連の画像と、１つまたは複数のグレースケール画像と、患者層情報と、以前の画像データと、のいずれか１つまたはいずれかの組合せを含む、請求項１〜８のいずれかに記載の方法。

【請求項10】

前記画像データは、１つまたは複数の画像を含む、請求項１〜９のいずれかに記載の方法。

【請求項11】

前記１つまたは複数の画像は、共通の患者の解剖学的構造の共通部分に関連する、請求項１０に記載の方法。

【請求項12】

前記１つまたは複数の画像は、異なる時間に保存される、請求項１０または１１に記載の方法。

【請求項13】

前記１つまたは複数の画像は、３Ｄ表現の複数の２Ｄスライスを含む、請求項１０〜１２のいずれかに記載の方法。

【請求項14】

前記１つまたは複数の病変をセグメント化して病変セグメントデータを作成するステップと、前記病変セグメントデータを前記画像セグメンテーションに格納するステップとをさらに含む、請求項１〜１３のいずれかに記載の方法。

【請求項15】

前記画像セグメンテーションは、マスクまたは輪郭を生成することを含む、請求項１４に記載の方法。

【請求項16】

前記１つまたは複数の病変を測定して病変測定データを作成するステップと、前記病変セグメントデータを画像マスクに格納するステップとをさらに含む、請求項１〜１５のいずれかに記載の方法。

【請求項17】

前記画像データを前処理するステップをさらに含み、前記前処理は、前記画像データを読み取るステップと、前記画像データをメモリに格納するステップとを含む、請求項１〜１６のいずれかに記載の方法。

【請求項18】

前記画像データは、少なくとも４次元浮動小数点テンソルとしてメモリに格納され、前記次元は、高さ、幅、バッチサイズ、およびチャネルを含む、請求項１〜１７のいずれかに記載の方法。

【請求項19】

前記チャネルは、１つまたは複数のコントラストウィンドウまたはコントラスト値を含む、請求項１８のいずれかに記載の方法。

【請求項20】

前記画像データ内の前記１つまたは複数の病変の１つまたは複数の位置を決定するステップは、完全畳み込みニューラルネットワークを使用することを含む、請求項１〜１９のいずれかに記載の方法。

【請求項21】

前記完全畳み込みニューラルネットワークは、バックプロパゲーションを使用して訓練され、および／または、高密度訓練のための損失関数は、個々のピクセルの前記損失関数の空間次元にわたる合計である、請求項２０に記載の方法。

【請求項22】

腫瘍である可能性が高い画像データのそれぞれの１つまたは複数の画像内の領域を示すために１つまたは複数のヒートマップを作成することをさらに含む、請求項２１に記載の方法。

【請求項23】

前記１つまたは複数のヒートマップを条件付き確率場法によって供給することにより前記１つまたは複数のヒートマップを後処理するステップをさらに含む、請求項２２に記載の方法。

【請求項24】

前記決定された１つまたは複数の位置を条件付き確率場法を通して供給することによって、前記画像データ内の前記１つまたは複数の病変の前記決定された１つまたは複数の位置を後処理するステップをさらに含む、請求項１〜２３のいずれかに記載の方法。

【請求項25】

発見された病変の１次元測定値を決定するステップをさらに含み、前記１次元測定値は、最大径または垂直径のいずれかを含む、請求項１〜２４のいずれかに記載の方法。

【請求項26】

発見された病変の２次元測定値を決定するステップをさらに含み、任意選択で、前記２次元測定値は病変領域を含む、請求項１〜２５のいずれかに記載の方法。

【請求項27】

２Ｄスライス間の補間を用いて、発見された病変の３次元モデルを決定するステップをさらに含む、請求項１〜２６のいずれかに記載の方法。

【請求項28】

３次元空間における最大直径を決定するステップをさらに含む、請求項１〜２７のいずれかに記載の方法。

【請求項29】

３次元空間における体積および表面を決定するステップをさらに含む、請求項１〜２８のいずれかに記載の方法。

【請求項30】

１Ｄおよび／または２Ｄおよび／または３Ｄ測定値で壊死の程度を決定するステップをさらに含む、請求項１〜２９のいずれかに記載の方法。

【請求項31】

所定の基準に従って標的病変を選択するステップをさらに含み、前記所定の基準は、悪性度、大きさ、位置、壊死、その他の分類のいずれか１つまたはいずれかの組合せを含む、請求項１〜３０のいずれかに記載の方法。

【請求項32】

ヒトが与えた、またはコンピュータが与えた、またはコンピュータが最適化した確率しきい値に基づいて、多数の標的病変を選択するステップ、任意選択的に、潜在的に変化するクラスおよび／または変化する位置および／または変化するサイズの多数の追跡可能な標的病変を生じるステップをさらに含む、請求項１〜３１のいずれかに記載の方法。

【請求項33】

コンピュータ／人間によって識別された目印を使用して異なる時点で取られたスキャンの間に、病変をコロケーションする（すなわち、同じ病変を位置決めし、識別する）ステップをさらに含む、請求項１〜３２のいずれかに記載の方法。

【請求項34】

病変の局在、コンテキスト変数、分類、測定値、数、および／またはこれらすべての要約統計のいずれか１つまたはいずれかの組合せに基づいて、病期を決定するステップをさらに包含する、請求項１〜３３のいずれかに記載の方法。

【請求項35】

コロケーションされた病変の１次元および／または２次元および／または３次元サイズおよび壊死測定比較を行うステップをさらに含む、請求項１〜３４のいずれかに記載の方法。

【請求項36】

病変の分類における変化を分析するステップをさらに含む、請求項１〜３５のいずれかに記載の方法。

【請求項37】

任意選択的に、サイズ測定値、分類、解剖学的コンテキストおよび位置の数および重症度のいずれか１つまたはいずれかの組合せに基づいて、腫瘍組織量および病気の段階の統計分析を実施するステップをさらに包含する、請求項１〜３６のいずれかに記載の方法。

【請求項38】

腫瘍組織量および病期変化の統計的分析を実施するステップをさらに含み、病期変化は、進行／停滞／退縮のいずれかを含み、任意に、サイズ測定値、分類、解剖学的コンテキストおよび位置の数および重症度のいずれか１つまたはいずれかの組合せに基づいて病期変化の統計的分析を実施する、請求項１〜３７のいずれかに記載の方法。

【請求項39】

結果のいずれかまたはすべての可視化、前記結果のいずれかまたはすべてを用いた自動テンプレートレポート作成をさらに含む、請求項１〜３８のいずれかに記載の方法。

【請求項40】

上記のすべての結果の品質管理および不確実性分析を実施するステップをさらに含む請求項１〜３９のいずれかに記載の方法。

【請求項41】

請求項１〜４０のいずれかに記載の方法を実行するように動作可能な装置。

【請求項42】

請求項４１に記載の装置を含むシステム。

【請求項43】

請求項１〜４０のいずれかに記載の方法を実行するように動作可能なコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、固形腫瘍の効果判定基準（Ｒｅｓｐｏｎｓｅ Ｅｖａｌｕａｔｉｏｎ Ｃｒｉｔｅｒｉａ Ｉｎ Ｓｏｌｉｄ Ｔｕｍｏｕｒｓ：ＲＥＣＩＳＴ）プロトコルに従って、医用画像における病変を自動的に発見し、セグメント化し、測定する方法およびシステムに関する。より具体的には、本発明は、セグメンテーション、３Ｄ体積マスクおよびモデル、２Ｄおよび３Ｄにおける測定、ならびに異なる時点で取られたスキャンにわたる統計的変化分析のための追加の画像マスクを伴う入力コンピュータ断層撮影（ＣＴ）スキャンの拡張バージョンを生成する。

【背景技術】

【0002】

ＣＴスキャンは、スキャンされた患者の断面スライスを生成するために、多数の異なる角度からのＸ線画像化を利用する。ＣＴスキャンは、患者の病変を識別し、位置特定し、分類するための有用なツールを放射線科医に提供するが、各ＣＴスキャンに含まれる画像スライスの数が非常に多いため、許容可能な時間内でＣＴ画像から病変の体積測定を実行することは困難である。

【0003】

ＣＴスキャンは、通常グレースケールで提示され、したがって、１つのカラーチャネルのみからなる。これは、人間の目がＣＴスライス内の全ての情報を視覚化するのに十分ではない限られた数の階調レベルしか区別することがでないので、放射線科医が画像の異なる要素を見たい場合に問題を生じさせる。その異なる要素は、いくつかの異なるウィンドウ上で変化する輝度−コントラスト設定で提示される。例えば、そのスキャンの骨格要素の表示は、１つの輝度−コントラスト設定（「ウィンドウ」と呼ばれる）で最もよく見えるかもしれないが、器官の表示は、別のウィンドウ内で最もよく見えるかもしれない。したがって、放射線科医は、病変を識別し、位置を特定するために、異なるコントラストウィンドウを見なければならない。本発明の目的は、この問題に対する解決策を提供することである。

【0004】

医用画像装置は、通常、医用画像情報のより効率的な取り扱い、格納、印刷、および送信を可能にするために、スキャンを医学用デジタル画像通信（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ ｉｎ Ｍｅｄｉｃｉｎｅ：ＤＩＣＯＭ、以下、ダイコム）フォーマットにカプセル化する。

【0005】

ＲＥＣＩＳＴプロトコルは、患者における腫瘍の挙動を評価するために使用される一連の規則である。ＲＥＣＩＳＴプロトコルは、また、病変の測定に使用できる方法も提供するが、現在の方法では、放射線科医による治療前に膨大な量の入力と情報に基づいていない決定が必要であり、不正確な測定、疑わしい腫瘍の測定値を記録できない可能性があり、さらに重要なことには画像から病変を特定できない。

【0006】

腫瘍の進行を評価する場合、放射線科医は、異なる時点で行われたスキャンについて腫瘍組織量を評価し、結果を比較する必要がある。同じ病変が異なる時点で正確に同定され、比較のために評価されることが重要である。コロケーションおよび比較プロセスは、煩わしく、本質的に不正確である。

【0007】

腫瘍組織量を評価する場合、放射線科医は、生成された２Ｄスライスに入る病変の部分の１Ｄ測定を行う。この測定は、単一の病変によって提供される腫瘍組織量をどの程度正確に表すかという点で、本質的に制限される。

【発明の概要】

【0008】

態様および／または実施形態は、医用画像における病変／腫瘍／増殖および腫瘍の変化を自動的に位置特定および測定する方法を提供しようとする。態様および／または実施形態はまた、識別、測定、および統計的分析ステップを自動的に実行することによって、人為的エラーの不正確さに関連する問題に対処しようとする。

【0009】

第１の態様によれば、画像データを受け取るステップと、画像データ内の１つまたは複数の病変の１つまたは複数の位置を決定するステップと、画像データ内の１つまたは複数の病変の決定された１つまたは複数の位置を含む画像セグメンテーション（すなわち、マスクまたは輪郭）を作成するステップと、画像セグメンテーションを用いて病変の体積特性を決定するステップとを含む、医用画像における１つまたは複数の病変の体積特性を決定する方法が提供される。

【0010】

このようにして、画像データを使用して、１つまたは複数の病変の自動検出および位置特定を実行することができる。また、人間の介入を必要とせずに、１つまたは複数の病変に関する特性（例えば、分類、体積、形状、サイズ）を自動的に提供することもできる。１つまたは複数の病変の位置を容易に観察できるようにするために、セグメンテーション（すなわち、マスクまたは輪郭）も作成される。現在の方法とは異なり、これは、腫瘍が進行しているか退縮しているかを示す期間にわたって、より正確に医用画像の体積評価を可能にする。

【0011】

任意選択で、１つまたは複数の病変の１つまたは複数の位置を決定するステップは、１つまたは複数の病変の焦点を識別するステップを含む。任意選択で、１つまたは複数の病変の焦点は、１つまたは複数の病変の質量中心を含む。

【0012】

任意選択で、１つまたは複数の病変の１つまたは複数の位置を決定するステップは、１つまたは複数の解剖学的目印の焦点を識別するステップを含む。任意選択で、１つまたは複数の解剖学的目印の焦点は、１つまたは複数の病変の質量中心を含む。

【0013】

病変または解剖学的領域の質量中心などの焦点を使用することによって、位置の評価は、スキャン全体にわたって、および、スキャンが同じ患者の反復時間隔で行われるスキャン間で一貫性がある。例えば、腫瘍は増殖し得るが、質量中心は常に実質的に一定のままであり、したがって、同じ腫瘍は、その患者の解剖学的構造の同じ部分の異なるスキャンにおいて、同じ患者において同定され得る。

【0014】

任意選択で、１つまたは複数の病変の１つまたは複数の位置を決定するステップは、１つまたは複数の解剖学的目印に関連する位置を決定するステップを含む。任意選択で、１つまたは複数の解剖学的目印は、脊椎、肋骨、肺、心臓、肝臓、腎臓のうちのいずれか１つを含む。

【0015】

任意選択で、１つまたは複数の病変の１つまたは複数の位置を決定するステップは、１つまたは複数の病変の焦点を識別するステップと、１つまたは複数の解剖学的目印の焦点を識別するステップと、１つまたは複数の解剖学的目印に関連する１つまたは複数の病変の位置を決定するステップとを含む。このようにして、腫瘍は、他の解剖学的物体に関連して位置特定され得る。

【0016】

目印を識別することによって、任意の腫瘍に対する目印の相対位置を確立し、例えば、スキャンが反復時間隔で行われる場合、スキャン間で同じ腫瘍を識別する方法として使用することができる。

【0017】

任意選択で、画像データは、ＣＴスキャンデータ、ダイコム画像ファイル、解剖学的構造の連続したスライスの一連の画像、１つまたは複数のグレースケール画像、患者層情報、以前の画像データのうちのいずれか１つまたは任意の組合せを含む。

【0018】

任意選択で、画像データは、１つまたは複数の画像を含み、任意選択で、１つまたは複数の画像は、共通の患者の解剖学的構造の共通部分に関連する。

【0019】

任意選択で、１つまたは複数の画像は、異なる時間に保存される。任意選択で、１つまたは複数の画像は、３Ｄ表現の複数の２Ｄスライスを含む。最初のスキャンは患者の３Ｄ表現であるが、この方法は最初の３Ｄスキャンの２Ｄスライスに適用される。

【0020】

任意選択で、１つまたは複数の病変をセグメント化して病変セグメントデータを作成するステップと、病変セグメントデータを画像マスク／輪郭に格納するステップと、を含む。

【0021】

任意選択で、画像セグメンテーションは、マスクまたは輪郭を生成することを含む。セグメンテーションマスクを組み合わせて、腫瘍の３Ｄ表現を生成することができる。

【0022】

任意選択で、病変測定データを作成するために１つまたは複数の病変を測定するステップと、画像マスクに関連して病変セグメントデータおよび測定データを格納するステップと、を含む。

【0023】

任意選択的に、画像データを前処理するステップであって、前処理は、画像データを読み取るステップと、画像データをメモリに格納するステップとを含む。

【0024】

任意選択で、画像データは、高さ、幅、バッチサイズ、およびチャネルを含む次元を有する少なくとも４次元テンソルとしてメモリに格納される。

【0025】

任意選択で、チャネルは、１つまたは複数のコントラストウィンドウまたはコントラスト値を含む。

【0026】

任意選択で、画像データ内の１つまたは複数の病変の１つまたは複数の位置を決定するステップは、畳み込みニューラルネットワークを使用することを含む。

【0027】

任意選択で、画像データ内の１つまたは複数の病変の１つまたは複数の位置を決定するステップは、完全畳み込みニューラルネットワークを使用することを含む。

【0028】

任意選択で、完全畳み込みニューラルネットワークは、バックプロパゲーションを使用して訓練され、および／または、高密度訓練のための損失関数は、個々のピクセルの損失関数の空間次元にわたる合計である。

【0029】

任意選択的に、本方法は、腫瘍である可能性が高い画像データのそれぞれの１つまたは複数の画像内の領域を示すために、１つまたは複数のヒートマップを作成するステップをさらに含む。

【0030】

任意選択で、本方法は、１つまたは複数のヒートマップを条件付き確率場法によって供給することにより１つまたは複数のヒートマップを後処理するステップをさらに含む。

【0031】

任意選択的に、本方法は、条件付き確率場法を通して決定された１つまたは複数の位置を供給することによって、画像データ内の１つまたは複数の病変の決定された１つまたは複数の位置を後処理するステップをさらに含む。

【0032】

第２の態様によれば、先行する請求項のいずれかの方法を実行するように動作可能な装置が提供される。

【0033】

第３の態様によれば、先行する請求項の装置を含むシステムが提供される。

【0034】

さらなる態様は、先行する請求項のいずれかの方法を実行するように動作可能なコンピュータプログラム製品に関する。

【図面の簡単な説明】

【0035】

【図1】図１は、既存のＲＥＣＩＳＴシステムの方法を示すフローチャートを示す。

【図2】図２は、本発明の方法を示すフローチャートを示す。

【発明を実施するための形態】

【0036】

図１は、現在の手動ＲＥＣＩＳＴシステムの方法を示す。フローチャートに見られるように、患者の医用スキャン（ＣＴ、ＭＲＩ、Ｘ線）を実行した（１０１）後、スキャンされた画像はダイコムフォーマットで照合される（１０２）。

【0037】

前述のように、異なるコントラストに対応する要素がウィンドウに表示される。この情報から、手動プロセスに続いて、放射線科医は適切な治療方法を選択する前に、分析するために４〜８個の腫瘍を選択する（１０３）。

【0038】

ＲＥＣＩＳＴプロトコルに従って、病変（または腫瘍）は測定可能でなければならない。従って、いったん腫瘍が選択されると、腫瘍が放射線医によって測定され得るか否かについての決定がなされる。もし可能であれば、測定値は、放射線科医によって１つの次元にわたって記録される（１０５）。放射線科医に提示される情報は、スクリーンの２次元表示に限定されるので、測定は１次元にわたるだけであり得る。

【0039】

次に、これらの測定値を使用して、治療方法を決定する（１０６）。

【0040】

腫瘍に対して治療を行った後、フォローアップ医用スキャンが行われる（１０７）。システムは、前述のステップを繰り返すことによって、新しいフォローアップスキャンから以前に識別された腫瘍を同定しようとする（１０８）。

【0041】

以前に識別された腫瘍が発見された場合、新しいフォローアップスキャンを使用して、放射線科医は、もう一度腫瘍を測定する（１０９）。フォローアップスキャンのための測定値を記録すると、それらは、以前のスキャンにおける腫瘍の測定値と比較されて、腫瘍サイズが変化したかどうかを決定する（１１０）。

【0042】

この時点で、腫瘍の大きさが減少した場合、システムは、患者が治癒するまで同じ治療コースを進めるように放射線科医に助言する（１１１）。しかしながら、腫瘍サイズが減少していない場合、システムは、代替的な治療方法を追求することを助言する（１１２）。この治療段階のループは、患者が治癒するまで続く。

【0043】

ここで、少なくとも１つの実施形態による方法の典型的な実施が示されている図２を参照して、例示的な実施形態を説明する。

【0044】

図２において、前処理モジュールはダイコムファイルを読み取り、２Ｄ画像スライスをシステムにロードする（２０３）。画像スライスは、［バッチサイズ、高さ、幅、チャネル］の４次元テンソルにロードされる。

【0045】

測定は、１つまたは複数の次元にわたってデジタル的に分析され、記録されることができ、および／または、体積的に測定が実行されることができる（２０４）。

【0046】

画像は同じ患者から時間を隔てて収集されてもよく、患者に対して新しいスキャンが実行されるたびに、本実施形態のプロセスは、後述するように、観察間の変化を評価するために、履歴データおよび新しいデータの両方を用いて実行される。

【0047】

ダイコム画像が処理されると、患者スキャンの異なる要素に対応する異なるコントラストチャネルが同じウィンドウに提示される。これは、システムが全ての要素を同時に見ることを可能にする。一例として、画像に異なるウィンドウイングレベルを適用し、これらを別々の入力チャネルとして供給することによって、患者の骨をスキャンから容易にセグメント化することができる。

【0048】

入力テンソル内の追加チャネルとして、イメージングシーケンス内の先行スライスおよび後続スライスを追加することによって、モデルにさらなるコンテキストを与えることができる。このシナリオでは、入力テンソルは３つのチャネルを有し、第１のチャネルは前のスライスであり、第２のチャネルは関連するターゲットマスクに対応する「現在の」スライスであり、第３のチャネルは後続のスライスである。例えば、上述のように、入力テンソルが［バッチサイズ、高さ、幅、チャネル］の４Ｄテンソルである場合、チャネル値は「３」であり、この入力に対応するマスクは、チャネル値は「１」であるが４Ｄテンソル［バッチサイズ、高さ、幅、チャネル］である。マスクは、チャネル２内の「現在の」スライスに対応するターゲットである。

【0049】

画像テンソルは、腫瘍が存在する確率が高い領域を示すヒートマップを作成する完全畳込みネットワーク（ＦＣＮ）に供給される。次いで、これらの病変をセグメント化する。さらに、セグメンテーションは、セグメンテーションを「クリーンアップ」する、すなわち偽陽性を除去する条件付き確率場法を通して供給することによって後処理される。ＦＣＮによって作成されたヒートマップは、画像の確率マップを表す。

【0050】

ＦＣＮは、ネットワークを通してバックプロパゲーションおよびフォワードパスを使用して訓練される。高密度訓練のための損失関数は、個々のピクセルの損失関数の空間次元にわたる合計である。

【数1】

ここで、L(x)は、画像全体にわたる損失であり、i,jにおける画素に対する損失である。これにより、システムは、システムによって作成された画像から１つまたは複数の腫瘍を自動的に識別することができる。

【0051】

損失関数は、以下によって定義されるＤＩＣＥ損失であってもよい。

【数2】

ここで、s_iとr_iは、それぞれ、各ピクセルiにおける予測マップ∈［0,…,1］およびグラウンドトゥルースの連続値を表す。あるいは、クロスエントロピーを使用することができる。i,jにおける画素に対するクロスエントロピー損失は、以下によって定義される。

【数3】

Cは、クラスの数であり、y∈｛0,1｝は、クラスcのバイナリインジケータであり、sは、クラスcのスコアである。全画像の損失xは、画素の全ての損失にわたる合計として定義される：

【数4】

【0052】

モデルが訓練された後、画像をモデルに供給することによって病変をセグメント化することができる。結果として得られる出力は確率マップであり、これを閾値処理して、セグメンテーションマスクまたは輪郭を得ることができる。

【0053】

異なるスキャンにわたって患者内の同じ病変を識別するために、システムは、目印を使用して、目印に関連する病変の位置に対する表現を構築する。これらの表現は、検査またはスキャンにわたって比較することができる。このようにして、病変の他の特徴（例えば、サイズおよび形状）が変化した場合であっても、病変を異なるスキャンで見つけることができる。

【0054】

病変の位置表現はベクトルh∈R^Lとして定義することができ、ここで、Rは正の実数の集合であり、Lは目印の数である。例えば、特定の病変についての位置表現は、h_i=［0.43,0.2,0.98,1.3］であり得る。位置表現における各要素は、病変の質量中心のような病変の焦点と、目印の質量中心のような目印の焦点との間の（ユークリッド）距離である。病変および／または目印の質量中心は、以下のように定義される：

【数5】

ここで、nは体積（すなわち、病変または目印）内の画素数であり、r_iはピクセルiの座標ベクトルであり、Rは質量中心の座標ベクトルである。病変の質量中心pと目印qとの間のユークリッド距離は、次のようになる：

【数6】

【0055】

２つの異なる検査にわたる２つの病変の位置表現ベクトルは、コサイン距離またはユークリッド距離などの類似性メトリックを使用して比較することができる。距離が小さい場合、病変は同じであると言うことができる。

【0056】

システムが腫瘍を識別し、セグメント化した状態で、治療段階に進む前に１つまたは複数の次元にわたって、その腫瘍または各腫瘍の測定値をデジタル的に分析し、記録する（２０４）。これは、人為的な誤りおよび不正確さの可能性を実質的に排除し、したがって、全ての腫瘍または増殖が測定される可能性を増加させるはずである。場合によっては、次いで、適切な治療計画／用量を腫瘍に投与することができる（２０５）。

【0057】

時間の反復の後、フォローアップ医用スキャンが実行される（２０６）。システムは、前述のステップ２０７を実行することによって、新しいフォローアップスキャンから以前に識別された腫瘍を識別しようとする。さらに、システムは、また、新しいフォローアップスキャンで発達した可能性のあるいかなる追加的な増殖を識別する。以前の目印の相対位置、特に各目印の質量中心は、スキャン間の同じ増殖を識別するために使用される。

【0058】

フォローアップスキャンにおいて腫瘍／増殖が識別された場合、測定値は、再びデジタル的に分析され、１つまたは複数の次元にわたって記録される（２０８）。フォローアップスキャンのための測定値が記録されると、それらは以前のスキャンにおける腫瘍／増殖の測定値と比較され、腫瘍サイズが変化したかどうかを決定する（２０９）。比較される腫瘍のサイズは、スキャン間のその腫瘍または各腫瘍の体積である。

【0059】

図１と同様に、腫瘍の大きさが減少した場合、システムは、患者が治癒するまで同じ治療コースを続ける（２１０）。しかし、腫瘍の大きさが減少していない場合、システムは、新しい治療を施す前に代替治療方法を追求する（２１１）。治療フェーズのループは、患者が治癒するまで続く。

【0060】

機械学習は、機械学習プロセスがタスクのコンピュータ実行中に獲得する経験またはデータから生成されたフィードバックを使用して、１つまたは複数のコンピュータがタスクの種類を実行することを学習するという研究の分野である。

【0061】

典型的には、機械学習は、特別な規則、技法、および／またはアプローチを有する強化学習および半教師付き学習などの特定のアプローチがあるが、教師付きおよび教師なしアプローチとして広く分類することができる。教師付き機械学習は、オペレータまたはプログラマによって予め決定されたように、通常、入力を含むデータセットがラベル付けされており、例示的な入力と所望の出力との間をマッピングするための１つまたは複数の規則または機能を学習するコンピュータに関連する。

【0062】

教師なし学習は、例えばパターン認識を実行するときに、入力データの構造を決定することに関連し、通常、ラベルなしデータセットを使用する。強化学習は、１つまたは複数のコンピュータが例えば、ゲームをプレイしたり、車両を運転したりするときに、動的環境と対話することを可能にすることに関連する。

【0063】

訓練データセットが部分的にしかラベル付けされていない「半教師付き」機械学習など、これらのカテゴリの様々なハイブリッドが可能である。教師なし機械学習の場合、例えば、画像処理またはビデオ強調への視覚技術の適用など、様々な可能な用途がある。教師なし機械学習は、典型的には未知のデータ構造がデータ内に存在する可能性がある問題を解決するために適用される。そのデータはラベル付けされていないので、機械学習プロセスは、例えば内部で導出された情報に基づいてクラスタリングメトリックを導出することによって、データ間の暗黙の関係を識別するように動作する必要がある。例えば、教師なし学習技法を使用して、データセットの次元を低減し、データセット内のクラスタ間の関係を識別しモデル化しようと試みることができ、例えば、クラスタメンバシップの距離を生成し、またはクラスタ内またはクラスタ間のハブまたはノードを識別することができる（例えば、高次元データセットに適用することができる重み付き相関ネットワーク分析と呼ばれる技法を使用するか、または各データ間のユークリッド距離の測定によってデータをクラスタリングするためにｋ平均クラスタリングを使用する）。

【0064】

半教師付き学習は、典型的には部分的にラベル付けされたデータセットが存在する場合、例えば、データのサブセットのみがラベル付けされる場合の問題を解決するために適用される。半教師付き機械学習は、外部から提供されるラベルおよび目的関数、ならびに任意の暗黙のデータ関係を利用する。機械学習システムを最初に構成するとき、特に教師付き機械学習アプローチを使用するとき、機械学習アルゴリズムは、何らかの訓練データまたは訓練例の集合を提供され、各例は、典型的には入力信号／ベクトルと所望の出力値、ラベル（または分類）または信号とのペアである。機械学習アルゴリズムは、訓練データを分析し、未知の入力ベクトル／信号のための所望の出力値または信号を生成するために、未知のデータセットと共に使用され得る一般化された関数を生成する。ユーザはどのタイプのデータを訓練データとして使用するかを決定し、代表的な実世界データセットを準備する必要がある。しかし、ユーザは、訓練データがあまりに多くの特徴を提供することなく（これは訓練中に機械学習プロセスによって考慮される次元が多すぎることになり、また、機械学習プロセスがすべてのまたは特定の例について良好な解に収束しないことを意味し得る）、所望の出力値を正確に予測するのに十分な情報を含むことを確実にするように注意しなければならない。また、ユーザは、学習された関数または一般化された関数の所望の構造、例えば、サポートベクターマシンを使用するか、決定木を使用するかを決定しなければならない。

【0065】

ラベル付けされたデータが容易に利用できない場合、またはシステムが、いくつかの初期シードラベルを与えられた未知のデータから新しいラベル付けされたデータを生成する場合、教師なしまたは半教師付き機械学習アプローチの使用が時々使用される。

【0066】

機械学習は、非線形階層アルゴリズム、ニューラルネットワーク、畳み込みニューラルネットワーク、回帰型ニューラルネットワーク、長短期メモリネットワーク、多次元畳み込みネットワーク、メモリネットワーク、完全畳み込みネットワーク、またはゲート付き回帰型ネットワークのうちの１つまたは複数を使用して実行することができ、視覚データの予測ブロックを生成するときに柔軟なアプローチを可能にする。長短期メモリネットワーク（ＬＳＴＭ）、メモリネットワーク、またはゲート付き回帰型ネットワークなどのメモリユニットを有するアルゴリズムを使用することにより、予測ブロックの状態を、同じ元の入力フレーム上で実行される動き補償プロセスから維持することができる。アルゴリズムが動きの変化のある種の状態またはメモリを維持するので、これらのネットワークの使用は計算効率を改善することができ、また、いくつかのフレームにわたる動き補償プロセスにおける時間的一貫性を改善することができる。これは、付加的に誤り率の減少をもたらすことができる。

【0067】

機械学習システムの開発は、典型的には（１）訓練、（２）生産の２つの段階からなる。訓練中、機械学習モデルのパラメータは、目的関数または損失として知られる特定の学習目的を最適化するために反復的に変更される。ひとたびモデルが訓練されると、それは生産において使用されることができ、モデルは入力を取り込み、訓練されたパラメータを使用して出力を生成する。

【0068】

本明細書に記載される任意のシステム特徴は、また方法特徴として提供されてもよく、逆もまた同様である。本明細書で使用されるように、ミーンズプラスファンクション特徴は、それらの対応する構成に関して代替的に表現されてもよい。

【0069】

本発明の一態様における任意の特徴は、任意の適切な組み合わせで、本発明の他の態様に適用されてもよい。特に、方法の態様は、システムの態様に適用されてもよく、逆もまた同様である。さらに、１つの態様における任意のいくつかのおよび／またはすべての特徴は、任意の他の態様における任意のいくつかのおよび／またはすべての特徴に、任意の適切な組み合わせで適用され得る。

【0070】

また、本発明の任意の態様において説明され定義された様々な特徴の特定の組み合わせは、独立して実装および／または供給および／または使用されうることが理解されるべきである。

【図1】

【図2】

【国際調査報告】