特許 7532332 放射線画像処理装置、放射線画像処理方法、学習装置、学習データの生成方法、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-08-02

(45)【発行日】2024-08-13

(54)【発明の名称】放射線画像処理装置、放射線画像処理方法、学習装置、学習データの生成方法、及びプログラム

(51)【国際特許分類】

   A61B 6/00 20240101AFI20240805BHJP

   G06N 20/00 20190101ALI20240805BHJP

【ＦＩ】

A61B6/00 560

G06N20/00 130

【請求項の数】 12

(21)【出願番号】P 2021191532

(22)【出願日】2021-11-25

(65)【公開番号】P2023077989

(43)【公開日】2023-06-06

【審査請求日】2022-09-15

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】100126240

【弁理士】

【氏名又は名称】阿部 琢磨

(74)【代理人】

【識別番号】100223941

【弁理士】

【氏名又は名称】高橋 佳子

(74)【代理人】

【識別番号】100159695

【弁理士】

【氏名又は名称】中辻 七朗

(74)【代理人】

【識別番号】100172476

【弁理士】

【氏名又は名称】冨田 一史

(74)【代理人】

【識別番号】100126974

【弁理士】

【氏名又は名称】大朋 靖尚

(72)【発明者】

【氏名】小林 剛

【審査官】蔵田 真彦

(56)【参考文献】

【文献】特開平０８－１５３１９４（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１８／００１８７５７（ＵＳ，Ａ１）

【文献】特開２０２０－１４１９０８（ＪＰ，Ａ）

【文献】特開２００２－１９９２８５（ＪＰ，Ａ）

【文献】米国特許出願公開第２０２１／０１１０５１７（ＵＳ，Ａ１）

【文献】特開２０１８－２０６３８２（ＪＰ，Ａ）

【文献】特開２０２０－１６６８１４（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ａ６１Ｂ ５／０５５、６／００－６／５８

Ｇ０６Ｔ １／００－１９／２０

(57)【特許請求の範囲】

【請求項1】

被検査物の第１の放射線画像を取得する取得手段と、
学習する信号量の範囲に基づいて学習データとして用いる放射線画像を選択して学習を行った学習済モデルに前記取得手段により取得された第１の放射線画像を入力することにより、前記第１の放射線画像に比べてノイズが低減された第２の放射線画像を生成する生成手段と、
を備えることを特徴とする放射線画像処理装置。

【請求項2】

前記信号量の範囲は、放射線撮影装置が扱える信号量の範囲から選択された範囲である請求項１に記載の放射線画像処理装置。

【請求項3】

前記学習済モデルは、前記学習する信号量の範囲におけるシステムノイズ比率に基づいて学習データとして用いる放射線画像を選択して学習を行った学習済モデルである請求項１又は２に記載の放射線画像処理装置。

【請求項4】

前記学習済モデルは、前記学習する信号量の範囲におけるシステムノイズ比率に基づいて前記学習する信号量の範囲の放射線画像又は当該信号量より高い信号量の範囲の放射線画像のいずれかを選択して学習を行った学習済モデルである請求項１乃至３のいずれか１項に記載の放射線画像処理装置。

【請求項5】

前記学習済モデルは、前記学習する信号量の範囲におけるシステムノイズ比率が閾値より高い場合に、前記選択された信号量より高い信号量の範囲の放射線画像を選択して学習を行った学習済モデルである請求項１乃至４のいずれか１項に記載の放射線画像処理装置。

【請求項6】

前記選択された信号量より高い信号量の範囲の放射線画像は、人体を模擬したファントムを撮影することにより得たファントム画像である請求項４又は５に記載の放射線画像処理装置。

【請求項7】

前記学習済モデルは、選択された放射線画像の信号量が前記学習する信号量の範囲となるよう調整された放射線画像と、前記調整された放射線画像に人工ノイズを加算した放射線画像と、を学習データとして用いて学習を行った学習済モデルである請求項５又は６に記載の放射線画像処理装置。

【請求項8】

前記学習済モデルは、前記学習する信号量の範囲におけるシステムノイズ比率が閾値より低い場合に、前記学習する信号量の範囲の放射線画像を選択して学習を行った学習済モデルである請求項１乃至７のいずれか１項に記載の放射線画像処理装置。

【請求項9】

前記学習済モデルは、選択された放射線画像と、前記選択された放射線画像に人工ノイズを加算した放射線画像と、を学習データとして用いて学習を行った学習済モデルである請求項１乃至８のいずれか１項に記載の放射線画像処理装置。

【請求項10】

放射線画像を撮影する放射線撮影装置と、
前記放射線撮影装置と通信可能に接続された、請求項１乃至９のいずれか１項に記載の放射線画像処理装置と、を備える放射線画像処理システム。

【請求項11】

被検査物の第１の放射線画像を取得する取得工程と、
学習する信号量の範囲に基づいて学習データとして用いる放射線画像を選択して学習を行った学習済モデルに前記取得工程により取得された第１の放射線画像を入力することにより、前記第１の放射線画像に比べてノイズが低減された第２の放射線画像を生成する生成工程と、
を備えることを特徴とする放射線画像処理方法。

【請求項12】

請求項１１に記載の放射線画像処理方法をコンピュータに実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、放射線画像処理装置、放射線画像処理方法、学習装置、学習データの生成方法、及びプログラムに関する。

【背景技術】

【0002】

近年、Ｘ線などの放射線を検出するための検出部を備えた放射線検出器が産業や医療などの分野で広く用いられている。特に、半導体センサを用いて放射線画像を得るデジタル放射線撮影（ＤＲ：Ｄｉｇｉｔａｌ Ｒａｄｉｏｇｒａｐｈｙ）装置が広く普及している。

【0003】

このようなデジタル放射線撮影装置においては、撮影画像の画質向上のために種々の画像処理を行うことが一般的であり、撮影画像の粒状性を改善し、診断領域の視認性を向上するノイズ低減処理もその１つである。とくに、ディープラーニングなどの機械学習技術を応用したノイズ低減処理は、大きく粒状性を改善できる可能性がある。例えば非特許文献１では、ノイズを加算した画像の組を用いて教師あり学習を行うことで良好なノイズ低減効果を得る技術が提案されている。

【先行技術文献】

【非特許文献】

【0004】

【文献】“Ｎｏｉｓｅ２Ｎｏｉｓｅ： Ｌｅａｒｎｉｎｇ Ｉｍａｇｅ Ｒｅｓｔｏｒａｔｉｏｎ ｗｉｔｈｏｕｔ Ｃｌｅａｎ Ｄａｔａ”， Ｊ Ｌｅｈｔｉｎｅｎ， ＡｒＸｉｖ ： １８０３．０４１８９， ２０１８

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、前述のような従来技術には、以下のような課題が生じる場合がある。

【0006】

先行技術によれば、機械学習技術を応用したノイズ低減処理によって良好な効果を得ることができるものの、学習時に用いる学習データ（入力データと正解データの組）によって、性能が変化することがあった。とりわけ、正解データに大量にノイズが含まれている画像を用いると、ノイズがある状態を正解として学習しようとするため、良好なノイズ低減効果が得られない場合があった。

【0007】

本発明は、以上の問題点に鑑みてなされたものであって、放射線画像に対して好適なノイズ低減処理を適用することのできる放射線画像処理装置、放射線画像処理方法、学習装置、学習データの生成方法、及びプログラムを提供することを目的の一つとする。

【0008】

なお、前記目的に限らず、後述する発明を実施するための形態に示す各構成により導かれる作用効果であって、従来の技術によっては得られない作用効果を奏することも本発明の他の目的の１つとして位置付けることができる。

【課題を解決するための手段】

【0009】

本発明の目的を達成するために、本発明に係る放射線画像処理装置は、被検査物の第１の放射線画像を取得する取得手段と、学習する信号量の範囲に基づいて学習データとして用いる放射線画像を選択して学習を行った学習済モデルに前記取得手段により取得された第１の放射線画像を入力することにより、前記第１の放射線画像に比べてノイズが低減された第２の放射線画像を生成する生成手段と、を備えることを特徴とする。

【発明の効果】

【0010】

本開示の一実施態様によれば、放射線画像に対して好適なノイズ低減処理を適用することのできる放射線画像処理装置、放射線画像処理方法、学習装置、学習データの生成方法、及びプログラムを提供することができる。

【図面の簡単な説明】

【0011】

【図1A】第１実施形態に係る放射線撮影システムの概略的な構成の一例を示す図。

【図1B】第１実施形態に係る放射線検出器の概略的な構成の一例を示す図。

【図2A】第１実施形態に係る制御部の概略的な構成の一例を示す図。

【図2B】第１実施形態に係るノイズ低減処理部の概略的な構成の一例を示す図。

【図3A】第１実施形態に係る学習済モデルの概略的な構成の一例を示す図。

【図3B】第１実施形態に係る学習済モデルの概略的な構成の一例を示す図。

【図3C】第１実施形態に係る学習処理の動作例を説明するための図。

【図4】第１実施形態に係る学習処理の一例を示すフローチャート。

【図5】第１実施形態に係る放射線検出器において、入射線量と、システムノイズ、量子ノイズ、ノイズの合計、信号、システムノイズ比の関係を説明するための図。

【図6】第１実施形態に係る推論処理の一例を示すフローチャート。

【図7】第１実施形態に係る画像処理前後の画像の一例を示す図。

【図8】第２実施形態に係る学習処理の一例を示すフローチャート。

【図9】第３実施形態に係る入射線量とノイズ低減処理部の目標システムノイズ比を示す図。

【図10】第３実施形態に係る学習処理の一例を示すフローチャート。

【発明を実施するための形態】

【0012】

以下、本発明を実施するための例示的な実施形態を、図面を参照して詳細に説明する。ただし、以下の実施形態で説明する寸法、材料、形状、及び構成要素の相対的な位置等は任意であり、本発明が適用される装置の構成又は様々な条件に応じて変更できる。また、図面において、同一であるか又は機能的に類似している要素を示すために図面間で同じ参照符号を用いる。

【0013】

なお、以下に記載する本開示の実施形態において、放射線には、放射線崩壊によって放出される粒子（光子を含む）が作るビームであるα線やβ線、γ線、さらには、同程度以上のエネルギーを有するビームである、例えばＸ線や粒子線、宇宙線等も含む。また、以下において、放射線画像の信号の大きさに依存しない暗電流や電気的なノイズ等をシステムノイズという。

【0014】

なお、以下において、機械学習モデルとは、機械学習アルゴリズムによる学習モデルをいう。機械学習の具体的なアルゴリズムとしては、最近傍法、ナイーブベイズ法、決定木、サポートベクターマシンなどが挙げられる。また、ニューラルネットワークや、深層学習（ディープラーニング）を利用してもよい。適宜、上記アルゴリズムのうち利用できるものを用いて以下の実施形態及び変形例に適用することができる。また、学習データとは、機械学習モデルの学習に用いるデータセットのことをいい、機械学習モデルに入力される入力データ及び、機械学習モデルの出力結果の正解となる正解データのペアで構成される。

【0015】

なお、学習済モデルとは、ディープラーニング等の任意の機械学習アルゴリズムに従った機械学習モデルに対して、事前に適切な学習データを用いて学習を行ったモデルをいう。ただし、学習済モデルは、事前に適切な学習データを用いた学習によって得ているが、それ以上の学習を行わないものではなく、追加の学習を行うこともできるものとする。追加学習は、装置が使用先に設置された後も行われることができる。

【0016】

［第１実施形態］
（放射線撮影システムの構成）
以下、図１Ａ、図１Ｂを参照して、本開示の第１実施形態に係る放射線撮影システムについて説明する。図１Ａは、本実施形態に係る放射線撮影システム１の概略的な構成を示す。なお、以下の説明において、被検査物Ｏを人体として説明するが、本開示に係る放射線撮影システムによって撮影される被検査物Ｏは人体に限られず、他の動物や植物、及び非破壊検査の対象物等であってもよい。

【0017】

本実施形態に係る放射線撮影システム１には、放射線検出器１０、制御部２０、放射線発生器３０、入力部４０、及び表示部５０が設けられている。なお、放射線撮影システム１は、インターネットやイントラネット等のネットワーク６０を介して制御部２０に接続されるサーバ等の外部記憶装置７０が含まれてもよい。

【0018】

放射線発生器３０は、例えば、Ｘ線管等の放射線発生源を備え、放射線を発することができる。放射線検出器１０は、放射線発生器３０より発せられた放射線を検出し、検出した放射線に対応する放射線画像を生成することができる。このため、放射線検出器１０は、放射線発生器３０より発せられ、被検査物Ｏを通った放射線を検出することで、被検査物Ｏの放射線画像生成することができる。

【0019】

ここで、図１Ｂは、本実施形態に係る放射線検出器１０の概略的な構成を示す。放射線検出器１０には、蛍光体１１及び撮影センサ１２が設けられている。蛍光体１１は、放射線検出器１０に入射した放射線を撮影センサ１２によって検出可能な波長の光に変換する。蛍光体１１は、例えば、ＣｓＩやＧＯＳ（Ｇｄ_２Ｏ_２Ｓ）等を含んでよい。撮影センサ１２は、例えばａ－Ｓｉや結晶Ｓｉで構成される光電変換素子を含み、蛍光体１１によって変換された放射線に対応する光を検出し、検出した光に対応する信号を出力することができる。放射線検出器１０は、撮影センサ１２によって出力された信号についてＡ／Ｄ変換等を行うことで、放射線画像を生成することができる。なお、図１Ｂでは省略されているが、放射線検出器１０は演算部やＡ／Ｄ変換部等を備えていてよい。

【0020】

制御部２０は、放射線検出器１０、放射線発生器３０、入力部４０、及び表示部５０に接続されている。制御部２０は、放射線検出器１０から出力される放射線画像を取得して放射線画像に画像処理を施したり、放射線検出器１０や放射線発生器３０の駆動を制御したりすることができる。このため、制御部２０は、画像処理装置の一例として機能することができる。また、制御部２０は、インターネットやイントラネット等の任意のネットワーク６０を介して外部記憶装置７０に接続されてもよく、外部記憶装置７０から放射線画像等を取得してもよい。さらに、制御部２０は、ネットワーク６０を介して他の放射線検出器や放射線発生器等と接続されてもよい。なお、制御部２０は、外部記憶装置７０等に有線で接続されてもよいし、無線で接続されてもよい。

【0021】

入力部４０は、マウスやキーボード、トラックボール、タッチパネル等の入力機器を備え、操作者によって操作されることで、制御部２０に指示を入力することができる。表示部５０は、例えば、任意のモニターを含み、制御部２０から出力された情報や画像、及び入力部４０によって入力された情報等を表示することができる。

【0022】

なお、本実施形態において、制御部２０や入力部４０、表示部５０等は別個の装置によって構成されているが、これらは一体的に構成されてもよい。例えば、タッチパネルディスプレイによって入力部４０及び表示部５０を構成してもよい。また、本実施形態では、制御部２０により画像処理装置を構成したが、画像処理装置は放射線画像を取得し、放射線画像に画像処理を施すことができればよく、放射線検出器１０や放射線発生器３０の駆動を制御しなくてもよい。

【0023】

また、制御部２０と放射線検出器１０、放射線発生器３０等は有線で接続されてもよいし、無線で接続されてもよい。さらに、外部記憶装置７０は、病院内のＰＡＣＳ等の画像システムを構成してもよいし、病院外のサーバ等であってもよい。

【0024】

（制御部の構成）
次に、図２Ａ、図２Ｂを参照して、制御部２０（放射線画像処理装置）のより具体的な構成について説明する。図２Ａ、図２Ｂは、本実施形態に係る制御部２０の概略的な構成を示す。制御部２０には、取得部２１、画像処理部２２、表示制御部２３、駆動制御部２４、及び記憶部２５が設けられている。

【0025】

取得部２１は、放射線検出器１０によって出力された放射線画像や、入力部４０によって入力された各種情報等を取得することができる。また、取得部２１は、外部記憶装置７０等から放射線画像や患者情報等を取得することもできる。すなわち、取得部２１は、放射線撮影装置により撮影された被検査物の放射線画像を取得することができる。

【0026】

画像処理部２２は、ノイズ低減処理部２６および、診断用画像処理部２７からなり、取得部２１によって取得された放射線画像に対して本開示に係る画像処理を施すことができる。ノイズ低減処理部２６は、学習処理部２６１と、推論処理部２６２からなる。学習処理部２６１は、推論処理部２６２の構成に加えて、さらに学習データ選択部２６３と、学習データ生成部２６４と、パラメータ更新部２６５が設けられている。この構成により、ノイズ低減処理部２６は、ノイズ低減処理を行うための機械学習モデルの学習を行い、当該機械学習モデルを用いて放射線画像に好適なノイズ低減処理を適用することができる。また、診断用画像処理部２７は、ノイズ低減処理部２６でノイズ低減を施した画像に対して、診断に適した画像に変換するための診断用画像処理を行うことができる。診断用画像処理としては、例えば階調処理や強調処理、グリッド縞低減処理などが含まれる。

【0027】

次に、学習処理部２６１の構成について説明する。

【0028】

学習処理部２６１は、機械学習モデルを学習する際に適用される学習処理を行うもので、推論処理部２６２の構成に加え、さらに学習データ生成部２６４、パラメータ更新部２６５を有する。

【0029】

学習処理を行う際は、学習処理部２６１に画像が入力され、学習データ生成部２６４によって学習データが作成される。

【0030】

ここでは、ノイズ低減処理を学習するための学習データの組として、人工ノイズを加算した画像を入力データ、加算しない画像を正解データとしたものを用いた構成例を示す。

【0031】

入力された画像に、放射線画像の特徴を模擬して作成した人工ノイズを加算することで、学習用データの組を作成する処理を行う。ここで、学習データ生成部２６４で加算するノイズは、学習データ選択部２６３によって計算された、製造ばらつきによってばらつきうるノイズ量を反映させたものとなる。加算する人工ノイズの詳細については後述する。

【0032】

パラメータ更新部２６５は、推論処理部２６２の演算結果と、正解データをもとに、推論処理部２６２が持つ機械学習モデルのパラメータを更新する処理を行う。

【0033】

ここで、学習処理部２６１は、放射線撮影システムに必ずしも含まれる必要はなく、例えば放射線撮影システムとは別のハードウェア上に構成し、事前に適切な学習データを用いて学習を行っておくことで学習済みモデルを作成しておき、放射線撮影システムにおいては、推論処理部２６２による処理だけを行うようにしてもよい。または、学習処理部２６１を放射線撮影システムに含めることで、設置後に取得した学習データで追加学習を行うことができる構成としてもよい。

【0034】

表示制御部２３は、表示部５０の表示を制御することができ、画像処理部２２による画像処理前後の放射線画像や患者情報等を表示部５０に表示させることができる。駆動制御部２４は、放射線検出器１０及び放射線発生器３０等の駆動を制御することができる。そのため、制御部２０は、駆動制御部２４によって放射線検出器１０及び放射線発生器３０の駆動性を制御することで、放射線画像の撮影を制御することができる。

【0035】

記憶部２５は、オペレーティングシステム（ＯＳ）、周辺機器のデバイスドライバ、及び後述する処理等を行うためのプログラムを含む各種アプリケーションソフトを実現するためのプログラムを記憶することができる。また、記憶部２５は、取得部２１によって取得された情報や、画像処理部２２で画像処理された放射線画像等を記憶することもできる。例えば、記憶部２５は、取得部２１により取得された放射線画像を記憶したり、後述するノイズ低減処理がなされた放射線画像を記憶したりすることができる。

【0036】

なお、制御部２０は、プロセッサーやメモリ等を含む一般的なコンピュータを用いて構成することができるが、放射線撮影システム１の専用のコンピュータとして構成されてもよい。ここで、制御部２０は、本実施形態に係る画像処理装置の一例として機能するが、本実施形態に係る画像処理装置は、制御部２０に通信可能に接続された別体（外部）のコンピュータであってもよい。また、制御部２０や画像処理装置は、例えば、パーソナルコンピュータであってもよく、デスクトップＰＣや、ノート型ＰＣ、タブレット型ＰＣ（携帯型の情報端末）が用いられてもよい。なお、プロセッサーは、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）であってよい。また、プロセッサーは、例えば、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等であってもよい。

【0037】

制御部２０の各機能は、ＣＰＵやＭＰＵ等のプロセッサーが記憶部２５に記憶されたソフトウェアモジュールを実行することで実現されてよい。なお、プロセッサーは、例えば、ＧＰＵやＦＰＧＡ等であってもよい。また、各機能は、ＡＳＩＣ等の特定の機能を果たす回路等によって構成されてもよい。例えば、画像処理部２２をＡＳＩＣ等の専用のハードウェアで実現してもよいし、表示制御部２３をＣＰＵとは異なるＧＰＵ等の専用のプロセッサーを用いて実現してもよい。記憶部２５は、例えば、ハードディスク等の光学ディスクやメモリ等の任意の記憶媒体によって構成されてよい。

【0038】

（機械学習モデルの構成）
次に、図３Ａ及び図３Ｂ、図３Ｃを参照して、本実施形態に係る学習済モデルを構成する機械学習モデルの例について説明する。本実施形態に係る推論処理部２６２が用いる機械学習モデルの一例は多層のニューラルネットワークである。

【0039】

図３Ａは、本実施形態に係るニューラルネットワークモデルの概略的な構成例を示している。図３Ａに示すニューラルネットワークモデル３３は、入力データ３１に対して、予め学習した傾向に応じて、ノイズが低減された推論データ３２を出力するよう設計されている。出力されるノイズが低減された放射線画像は、機械学習プロセスでの学習内容に基づくものであり、本実施形態に係るニューラルネットワークは、放射線画像に含まれる信号とノイズを分別するための特徴量を学習している。

【0040】

なお、多層のニューラルネットワークの少なくとも一部には、例えば、畳み込みニューラルネットワーク（以後、ＣＮＮ：Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋと呼称する）を用いることができる。また、多層のニューラルネットワークの少なくとも一部には、オートエンコーダ（自己符号化器）に関する技術が用いられてもよい。

【0041】

ここで、放射線画像のノイズ低減処理用の機械学習モデルとして、ＣＮＮを用いる場合について説明する。図３Ｂは、本実施形態に係るニューラルネットワークモデルを構成するＣＮＮの概略的な構成３３の一例を示す。本実施形態に係る学習済モデルの例では、放射線画像３１が入力されると、ノイズが低減された推論画像３２を出力することができる。

【0042】

図３Ｂに示すＣＮＮは、入力値群を加工して出力する処理を担う複数の層群によって構成される。なお、当該ＣＮＮの構成３３に含まれる層の種類としては、畳み込み（Ｃｏｎｖｏｌｕｔｉｏｎ）層、ダウンサンプリング（Ｄｏｗｎｓａｍｐｌｉｎｇ）層、アップサンプリング（Ｕｐｓａｍｐｌｉｎｇ）層、及び合成（Ｍｅｒｇｅ）層がある。ここで、３４は加算層であり、出力の前に、入力データを加算するショートカットを構成するとよい。これにより、当該ＣＮＮは、入力データと出力データの差分を学習する構成を取ることができ、好適にノイズをターゲットとした系を取り扱うことが可能となる。

【0043】

畳み込み層は、設定されたフィルタのカーネルサイズ、フィルタの数、ストライドの値、ダイレーションの値等のパラメータに従い、入力値群に対して畳み込み処理を行う層である。なお、入力される画像の次元数に応じて、フィルタのカーネルサイズの次元数も変更してもよい。

【0044】

ダウンサンプリング層は、入力値群を間引いたり、合成したりすることによって、出力値群の数を入力値群の数よりも少なくする処理を行う層である。具体的には、このような処理として、例えば、Ｍａｘ Ｐｏｏｌｉｎｇ処理がある。

【0045】

アップサンプリング層は、入力値群を複製したり、入力値群から補間した値を追加したりすることによって、出力値群の数を入力値群の数よりも多くする処理を行う層である。具体的には、このような処理として、例えば、逆畳み込みによるアップサンプリング処理がある。

【0046】

合成層は、ある層の出力値群や画像を構成する画素値群といった値群を、複数のソースから入力し、それらを連結したり、加算したりして合成する処理を行う層である。

【0047】

なお、ニューラルネットワークを構成する層群やノード群に対するパラメータの設定が異なると、学習データからトレーニングされた傾向について、推論時に再現可能な程度が異なる場合があるので注意が必要である。つまり、多くの場合、実施する際の形態に応じて適切なパラメータは異なるので、必要に応じて好ましい値に変更することができる。

【0048】

また、上述したようなパラメータを変更するという方法だけでなく、ＣＮＮの構成を変更することによって、ＣＮＮがより良い特性を得られる場合がある。より良い特性とは、例えば、より精度良くノイズが低減された放射線画像を出力したり、処理時間が短かったり、機械学習モデルのトレーニングにかかる時間が短かったりする等である。

【0049】

なお、本変形例で用いるＣＮＮの構成３４は、複数のダウンサンプリング層を含む複数の階層からなるエンコーダーの機能と、複数のアップサンプリング層を含む複数の階層からなるデコーダーの機能とを有するＵ－ｎｅｔ型の機械学習モデルである。Ｕ－ｎｅｔ型の機械学習モデルでは、エンコーダーとして構成される複数の階層において曖昧にされた位置情報（空間情報）を、デコーダーとして構成される複数の階層において、同次元の階層（互いに対応する階層）で用いることができるように（例えば、スキップコネクションを用いて）構成される。

【0050】

図示しないが、ＣＮＮの構成の変更例として、例えば、畳み込み層の前後に活性化関数（例えばＲｅＬｕ：Ｒｅｃｔｉｆｉｅｒ Ｌｉｎｅａｒ Ｕｎｉｔ）の層や、さらにその前後にバッチ正規化（Ｂａｔｃｈ Ｎｏｒｍａｌｉｚａｔｉｏｎ）などの各種の正規化処理を行う層を組み込んでもよい。

【0051】

ＣＮＮのこれらのステップを通して、入力される放射線画像からノイズの特徴を抽出することができる。

【0052】

ここで、学習処理部２６１は、パラメータ更新部２６５を備える。パラメータ更新部２６５は、図３Ｃに示すように、学習データにおける入力データ３１に推論処理部２６２のニューラルネットワークモデル３３を適用した推論データ３２と、学習データにおける正解データ３５から、損失関数を算出し、損失関数に基づいてニューラルネットワークモデル３３のパラメータを更新する処理を行う。ここで、損失関数は、推論データ３２と、正解データ３５の誤差を示すものである。

【0053】

また、パラメータ更新部２６５は、損失関数によって表される推論データ３２と、正解データ３５の誤差が小さくなるように、例えば、誤差逆伝播法を用いて、畳み込み層のフィルタ係数等を更新するようになっている。誤差逆伝播法は、上記の誤差が小さくなるように、ニューラルネットワークの各ノード間のパラメータ等を調整する手法である。

【0054】

なお、学習には、ＣＮＮを構成するユニット（各ニューロン、あるいは各ノード）をランダムに不活性化する手法（ドロップアウト）が用いられてもよい。

【0055】

さらに、推論処理部２６２が用いる学習済モデルは、転移学習を用いて生成されたものでもよい。この場合には、例えば、種類等が異なる被検査物Ｏの放射線画像で学習された機械学習モデルについて転移学習を行って、ノイズ低減処理に用いる学習済モデルを生成してもよい。このような転移学習を行うことによって、学習データを数多く入手するのが難しい被検査物Ｏについても、効率的に学習済モデルを生成することができる。ここでいう種類等が異なる被検査物Ｏは、例えば、動物や植物、非破壊検査の対象物等であってよい。

【0056】

ここで、ＧＰＵは、データをより多く並列処理することで効率的な演算を行うことができる。このため、上記のようなＣＮＮを利用した学習モデルを用いて複数回に渡り学習を行う場合には、ＧＰＵで処理を行うことが有効である。そこで、本実施形態に係る学習処理部２６１には、ＣＰＵに加えてＧＰＵを用いる。具体的には、学習モデルを含む学習プログラムを実行する場合に、ＣＰＵとＧＰＵが協働して演算を行うことで学習を行う。なお、学習処理では、ＣＰＵ又はＧＰＵのみにより演算が行われてもよい。また、推論処理部２６２の各処理についても、学習処理部２６１と同様にＧＰＵを用いて実現してもよい。

【0057】

以上、機械学習モデルの構成について説明したが、これまでに示したようなＣＮＮを用いたモデルに制限するものではなく、画像等の学習データの特徴量を学習によって自ら抽出（表現）可能なモデルを用いた機械学習に類するものであれば何でもよい。

【0058】

（学習処理）
次に、本実施形態に係る学習処理部２６１（学習部）の処理の流れについて説明する。

【0059】

学習処理部２６１で用いる学習データの組として、ノイズ低減処理を学習するための、人工ノイズを加算した画像を入力データ、加算しない画像を正解データとしたものを用い、対象として医用分野の放射線撮影画像を例として示す。

【0060】

なお、放射線画像に含まれるノイズは、信号の揺らぎとして標準偏差を計測することで観測が可能であり、主に放射線量子の揺らぎによって発生する量子ノイズと、検出器及び回路等から発生するシステムノイズに大別される。放射線検出器１０は、蛍光体１１によって放射線を可視光に変換する構成を取ることから、放射線の信号は蛍光体１１の解像度によって規定される変調伝達関数（ＭＴＦ：Ｍｏｄｕｌａｔｉｏｎ Ｔｒａｎｓｆｅｒ Ｆｕｎｃｔｉｏｎ）に応じて高周波の減衰が生じることが知られている。放射線量子の揺らぎによって発生する量子ノイズも同様の変調伝達関数によって高周波の減衰が発生する。すなわち、量子ノイズは高周波成分が減衰したノイズの一例に相当する。一方で、検出器及び回路等から発生するシステムノイズは蛍光体の影響を受けない。放射線画像に含まれるノイズは、撮影時の線量に拠らないシステムノイズと、撮影時の線量によって変化する量子ノイズを加算したものとなり、両者の比は図５に示すような割合となる。低線量撮影時はシステムノイズの影響が大きく、ノイズは高周波成分を多く含むものとなり、高線量撮影時では量子ノイズが支配的となるため、ノイズは蛍光体のＭＴＦに従った周波数特性を持つようになる。図５は、入射線量とノイズ量の関係および、システムノイズの比率を示したグラフである。システムノイズ５０１は線量に対して一定であり、量子ノイズ５０２は線量と比例して増加する。システムノイズと量子ノイズを加算したノイズの合計５０３が、実際の画像にあらわれるノイズとなる。ノイズの合計におけるシステムノイズ比率５０４は、入射線量によってシグモイド様の変動をし、特定の線領域では急激にシステムノイズ比率が変動する特徴がある。入射線量に対する信号５０５は入射線量と比例しており、ノイズの合計５０３との比を取ると、シグナルノイズ比５０６（以下、ＳＮ比と呼称する）が得られる。信号は入射線量に比例して増加していくが、ノイズは信号より増加の割合が低いため、ＳＮ比は入射線量が高いほど高くなる特徴を持つ。

【0061】

上記のシステムノイズ５０１、量子ノイズ５０２、ノイズの合計５０３、ノイズの合計におけるシステムノイズ比率５０４、信号５０５、シグナルノイズ比５０６は放射線検出器１０の特性によって入射線量に対しておよそ一意に定まる物理特性値である。

【0062】

ＳＮ比が高い画像とは、入射線量・信号が大きく、ＳＮ比が高い領域が多く含まれている画像のことを指している。

【0063】

ここで、正解データに大量にノイズが含まれている画像を用いた場合に、ふたつの問題が発生する。

【0064】

一つは、正解データのＳＮ比が低いため、ノイズがある状態を正解として学習しようとした結果、良好なノイズ低減効果が得られない場合があることである。

【0065】

もう一つは、特定の線量域において、システムノイズと量子ノイズの比が急激に変わるため、入力データに加算するノイズの特性によっては、線量と、線量によって変動するノイズの周波数特性の関係を壊してしまい、本来低減するべきノイズの特徴がうまく学習できなくなる可能性があることである。

【0066】

上記の課題に対処するためには、正解データにできるだけＳＮ比の高い画像を用いることが望ましい。すなわち、学習データとしては、入力データとしてノイズを含んだ放射線画像と、正解データとしてノイズを略含まない放射線画像との組を用いるのが望ましい。ノイズを略含まない放射線画像を得るためには、例えば、同じ被検査物を複数回撮影して得た放射線画像を平均化処理することにより平均画像を作成するなどして、信号と相関のないノイズ成分をキャンセルする方法などで得ることができる。なお、同じ被検査物を複数回撮影する場合、放射線の侵襲性に鑑みると人体を模擬したファントムなどを対象とすることが望ましい。ノイズを略含まない放射線画像を得るための方法は一例であって上記に限定されず、例えば、種々のノイズ低減処理を施すことによりノイズを略含まない放射線画像を得る構成でもよい。

【0067】

以上を踏まえ、図４～図７を参照して本実施形態に係る学習処理部２６１の処理の流れについて説明する。

【0068】

図４は、本実施形態に係る学習処理部２６１の処理の流れを示すフローチャートである。

【0069】

ステップＳ４０１では、学習する信号量の範囲を選択する。これは、放射線検出器１０が扱える信号のダイナミックレンジ内で任意の範囲をランダムに選択するもので、例えば１６ビットの信号を扱えるセンサである場合は、０～６５５３５から値の範囲をランダムに選択する。すなわち、学習処理部２６１は、学習を行う信号量の範囲を決定する決定手段の一例に相当する。また、これは、図５に示されるような放射線検出器１０におけるシステムノイズの比率を選択する操作に相当する。

【0070】

ステップＳ４０２では、学習データ選択部２６３によって、学習データの選択が行われる。取得された学習データから、ステップＳ４０１で選択した信号量範囲の学習に適した学習データを選択する。

【0071】

学習データの取得は、取得部２１にて行われ、学習データとして適宜の放射線画像が取得される。なお、取得部２１は、記憶部２５に記憶された放射線画像を取得してもよいし、外部記憶装置７０等から放射線画像を取得してもよい。また、取得部２１は、放射線検出器１０によって出力された放射線画像を取得してもよい。

【0072】

以下では、選択する学習データは、選択した信号量範囲におけるシステムノイズ比率によって切り替わる例を説明する。すなわち、以下では、決定された信号量の範囲において推定される放射線画像に含まれるシステムノイズと放射線を検出する放射線検出器に含まれる蛍光体の変調伝達関数に応じて高周波成分が減衰した量子ノイズとの比率に基づいて選択される学習データを用いて学習器の学習を行う例を説明する。

【0073】

なお、選択する学習データの切り替えに用いる情報は、必ずしもシステムノイズ比率でなくてもよい。例えば、上述したようにシステムノイズ比率は放射線撮影時の線量と関連するため、選択するデータの切り替えに用いる情報として線量に関する情報を用いてもよい。また、システムノイズ比率と線量に関する情報の両方を用いてもよい。すなわち、学習データ選択部２６３は、放射線画像に含まれる信号に関する情報とノイズに関する情報との少なくともいずれか一方の情報に基づいて学習データを選択できる。なお、信号に関する情報は、例えば、上述のように放射線撮影における線量に関する情報、放射線画像に含まれる信号量、前記放射線画像に含まれる信号とノイズの比率の情報の少なくともいずれか１つの情報を含んでいてもよい。また、ノイズに関する情報は、例えば、システムノイズと量子ノイズとの比率、システムノイズのノイズ量、量子ノイズのノイズ量の少なくともいずれか１つの情報を含んでいてもよい。

【0074】

ステップＳ４０２では、学習データ選択部２６３は、システムノイズの比率が閾値以上である場合は、ＳＮ比が高い画像を選択したうえで、画像を信号量範囲に調整して使用する。すなわち、学習データ選択部２６３は、システムノイズの比率が閾値より高い場合、選択された信号量の範囲において推定されるシグナルノイズ比より高いシグナルノイズ比の放射線画像を学習データとして用いることができる。また、システムノイズの比率が閾値以下である場合は、選択した信号範囲にある画像をそのまま使用する。すなわち、学習データ選択部２６３は、システムノイズの比率が閾値より低い場合、選択された信号量の範囲において推定されるシグナルノイズ比の放射線画像を学習データとして用いることができる。

【0075】

なお画像処理部２２の性能によって画像全体を一度に処理することができない場合は、画像を適宜の大きさのＲＯＩ（たとえば２５６×２５６ｐｉｘｅｌ）に分割して処理するようにしてもよい。ＲＯＩの画素値分布が広い場合は、最小値が信号量の範囲の最小値を下回らないように選択する。

【0076】

システムノイズの比率の閾値については、放射線検出器１０の性能や、学習するノイズ低減処理の性能目標によって定めればよい。そのため、学習するノイズ低減処理の性能目標（例えば、学習器を用いたノイズ低減処理を施すことにより得られる画像において目標とするシグナルノイズ比など）に応じて実験的に調整することができる。

【0077】

ここで、ＳＮ比の高い画像としては、高線量撮影した画像や、あるいは、人体を模擬したファントムを複数回撮影して得た複数のファントム画像を平均化することにより得られる平均画像を使用することができる。すなわち、学習データ選択部２６３は、システムノイズの比率が閾値より高い場合、人体を模擬したファントムを複数回撮影して得た複数のファントム画像を平均化することにより得られる平均画像を学習データとして用いることができる。また、選択した画像に任意の係数を乗じて、信号を減衰させた画像を用いてもよい。

【0078】

ステップＳ４０３では、学習データ生成部２６４によって、学習データに人工ノイズが加算される。

【0079】

まず、ステップＳ４０２にてシステムノイズの比率が閾値以下で、選択した信号範囲にある画像をそのまま使用する場合に加算する人工ノイズについて説明する。すなわち、システムノイズの比率が閾値より低い場合、選択された信号量の範囲において推定されるシグナルノイズ比の放射線画像と、システムノイズと量子ノイズとを模した人工ノイズを放射線画像に加算した放射線画像とを学習データとして用いる。なお、本実施形態では、放射線検出器１０のシステムノイズに対応する白色雑音と、蛍光体１１のＭＴＦの影響を受けた量子ノイズとを合成したノイズを人工ノイズとして扱うものとする。

【0080】

ここで、量子ノイズとシステムノイズとの合成比率に関しては、例えば以下（式１）～（式４）の関係式を用いて、放射線検出器１０の特性を模擬すると好適である。

【0081】

いま、量子ノイズの標準偏差をσ_ｑとし、放射線検出器１０によるシステムノイズの標準偏差をσ_ｓとすると、放射線画像におけるノイズの分散σ_ａｌｌ ^２は、
σ_ａｌｌ ^２＝σ_ｑ ^２＋σ_ｓ ^２（式１）
の関係を満たす。また、入力画像の信号をＩ_ｓｉｇとすると、量子ノイズの標準偏差σ_ｑは、信号Ｉ_ｓｉｇに比例することから、量子ノイズの係数ｑを用いて、
σ_ｑ ^２＝ｑ^２×Ｉ_ｓｉｇ（式２）
と書ける。また、システムノイズの標準偏差σ_ｓは、信号Ｉ_ｓｉｇに比例しない一定値であるため、システムノイズの係数ｓを用いて、
σ_ｓ ^２＝ｓ^２（式３）
と書ける。

【0082】

上記を踏まえ、人工ノイズ（ａｄｄＮｏｉｓｅ）は、以下のように求めることができる。まず、システムノイズを模擬した人工システムノイズｓＮｏｉｓｅを、標準偏差σ_ｓの加法性白色ガウス雑音（ＡＷＧＮ：Ａｄｄｉｔｉｖｅ Ｗｈｉｔｅ Ｇａｕｓｓｉａｎ Ｎｏｉｓｅ）とする。次に、量子ノイズを模擬した人工量子ノイズｑＮｏｉｓｅを、分散σ_ｑ ^２のポアソン分布に従い、かつ蛍光体１１のＭＴＦに従ったＮＰＳを持つノイズとする。例えば、蛍光体１１のＭＴＦを２次元フィルタで近似したものをｆＭＴＦとしたとき、ポアソン分布に従うノイズ画像にｆＭＴＦを畳み込むことで作成すると好適である。なお、ポアソン分布は分散が十分大きいとき正規分布と近似できるため、ｑＮｏｉｓｅを正規分布に従ったノイズとして扱ってもよい。このとき、人工ノイズ（ａｄｄＮｏｉｓｅ）を、
ａｄｄＮｏｉｓｅ＝Ａ×（ｓＮｏｉｓｅ＋ｑＮｏｉｓｅ）（式４）
と表すことができる。Ａは任意の係数で、通常はＡ＝１が好適だが、ノイズ低減効果を変えたい場合は、Ａを変化させることでノイズ加算量を調整することも可能である。

【0083】

放射線画像に生じるノイズの分布は、実験的に平均値および中央値が略０である正規分布に近似することが知られているが、上記のように得られる人工ノイズについても、平均値および中央値が略０となる分布とすることができる。

【0084】

次に、ステップＳ４０２にてシステムノイズの比率が閾値以上で、照射線量が高く、ＳＮ比が高い画像を選択したうえで、画像を信号量範囲に調整して使用する場合の人工ノイズについて説明する。

【0085】

元の放射線画像における信号をＩ_ｏｒｉ、画像中に含まれるノイズが標準偏差σ_ｏｒｉで表され、信号量の調整を、画像の全画素に一律αを乗算することで行うとすると、信号調整後の信号Ｉ_{ｄｅｃａｙ}とノイズの標準偏差σ_{ｄｅｃａｙ}は、それぞれ
Ｉ_{ｄｅｃａｙ}＝Ｉ_ｏｒｉ×α（式５）
σ_{ｄｅｃａｙ}＝σ_ｏｒｉ×α（式６）
で表すことができる。

【0086】

このときＩ_{ｄｅｃａｙ}に、本来のＩ_{ｄｅｃａｙ}となる線量で撮影した場合と同様のノイズとなるように、ノイズを加算する。すなわち、人工ノイズを加算した放射線画像におけるシステムノイズと量子ノイズの比が、選択された信号量の範囲において推定されるシグナルノイズ比より高いシグナルノイズ比の放射線画像におけるシステムノイズと量子ノイズの比と同等になるように人工ノイズを推定し、推定された人工ノイズを放射線画像に加算する。

【0087】

オリジナル画像における量子ノイズの標準偏差をσ_ｑＯＲＩ、システムノイズの標準偏差をσ_{ｓｙｓＯＲＩ}と、放射線検出器１０の特性から、信号調整後の信号Ｉ_{ｄｅｃａｙ}に存在すると想定されるノイズの標準偏差をσ_{ｑＴＡＲＧＥＴ}とすると、人工ノイズとして加算するシステムノイズｓＮｏｉｓｅ’の標準偏差σ_{ｓｙｓＡＤＤ}、量子ノイズｑＮｏｉｓｅ’の標準偏差σ_ｑＡＤＤは、

【0088】

【数1】

【0089】

で表すことができる。ここで、人工ノイズとして加算する量子ノイズｑＮｏｉｓｅ’の周波数特性は、蛍光体１１のＭＴＦに従ったＮＰＳを持つものとする。このとき、加算する人工ノイズ（ａｄｄＮｏｉｓｅ’）を、
ａｄｄＮｏｉｓｅ’＝Ｂ×（ｓＮｏｉｓｅ’＋ｑＮｏｉｓｅ’）（式９）
で表すことができる。Ｂは任意の係数で、通常はＡ＝１が好適だが、ノイズ低減効果を変えたい場合は、Ｂを変化させることでノイズ加算量を調整することも可能である。

【0090】

なお、人体を模擬したファントムを複数回撮影した平均画像を用いる場合や、使用した画像のＳＮ比が十分良い場合は、ノイズが十分小さいものとして、単純に（式４）に示したノイズを加算してもよい。

【0091】

本実施形態ではシステムノイズの比率によって加算する人工ノイズを（式４）および（式９）で切り替える例を示したが、全ての場合において（式９）を用いて学習することも可能である。

【0092】

本実施形態における学習データは、上記放射線画像を入力データ、正解データとしたものとなる。学習処理部２６１に同じデータとして入力された後、学習処理部内部で、入力データか、入力データおよび正解データに適宜の人工ノイズが加算されることで、入力データと正解データに差異が発生する状態となる。

【0093】

ステップＳ４０４では、学習データの組に対して、適宜の前処理を行う。前処理の方法については制限されるものではないが、例えばノイズ低減処理においては、例えば平方根変換や対数変換等を行うことで、ポアソン分布に従う量子ノイズを入力される放射線の強さによらず略一定とし、加法性のノイズを取り扱えるように変換する処理や、平均値を０にする処理を用いることができる。それに限らず、データを０－１で正規化する、平均値０、標準偏差１となるように標準化するなど、画像処理の内容に応じて適宜の前処理を行えばよい。

【0094】

ステップＳ４０５では、推論処理部２６２によって、学習データの入力データに対して機械学習モデルを用いた推論処理が行われ、ノイズ低減処理が適用された推論データを出力する。

【0095】

ステップＳ４０６では、パラメータ更新部２６５により推論データと正解データを比較され、両者の誤差を数値化した損失関数が算出される。また、損失関数に基づいて、機械学習モデルのパラメータ（例えばＣＮＮにおける畳み込み層のフィルタ係数等）が更新されるようになっている。損失関数の例としては、平均絶対誤差（Ｌ１ｌｏｓｓ）や、平均二乗誤差（Ｌ２ｌｏｓｓ）が挙げられる。

【0096】

ステップＳ４０７において、学習の終了判定を行い、終了と判定された場合はフローを終了し、そうでない場合はＳ４０１に戻り、別のデータを用いてＳ４０１～Ｓ４０６のフローを繰り返す。終了判定の基準としては、たとえば特定のループ回数が実行されたかどうかを判定してもよい。あるいは、損失関数が一定以下であるかを判定してもよい。あるいは、過学習が行われていないかどうかを判定してもよい。あるいは、推論画像におけるノイズ低減の性能を示す指標であるＰＳＮＲ（Ｐｅａｋ Ｓｉｇｎａｌ ｔｏ Ｎｏｉｓｅ Ｒａｔｉｏ）や、ＳＳＩＭ（Ｓｔｒｕｃｔｕａｌ ＳＩＭｉｌａｒｉｔｙ）を評価し、性能が十分な水準に達しているかを判定するなど、機械学習において一般的に用いられる適宜の判定基準を使用することが可能である。

【0097】

上記説明したように、本実施形における学習処理部２６１は、学習データにＳＮ比の低い画像が含まれていても好適にノイズが低減された放射線画像を出力することのできる機械学習モデルを生成することができる。

【0098】

（推論処理部）
次に、図６を参照して、本実施形態に係る推論処理部２６２の処理の流れについて説明する。図６は、本実施形態に係る推論処理部２６２の一連の画像処理を示すフローチャートである。

【0099】

本実施形態に係る一連の画像処理では、処理の対象となる放射線画像に対して、前処理を行い、学習済モデルへの入力とする。その後、学習済モデルからの出力に対して、前処理に対応する後処理を行い、元の放射線画像に対応する、ノイズの低減された放射線画像を生成する。

【0100】

本実施形態に係る一連の画像処理が開始されると、ステップＳ６０１において、取得部２１が放射線画像を取得する。取得部２１は、放射線検出器１０によって生成された放射線画像を取得してもよいし、記憶部２５や外部記憶装置７０等から放射線画像を取得してもよい。

【0101】

ステップＳ６０２では、前処理が行われる。前処理は、学習処理におけるＳ４０４と同じ前処理を行うものである。

【0102】

ステップＳ６０３では、推論処理部２６２が、学習処理によって得た学習済モデルを用いて、推論処理を行いノイズが低減された画像を生成する。すなわち、推論処理部２６２は、放射線画像に含まれる信号に関する情報とノイズに関する情報との少なくともいずれか一方の情報に基づいて学習データとして用いる放射線画像を選択して学習を行った学習済モデルに第１の放射線画像を入力することにより、第１の放射線画像に比べてノイズが低減された第２の放射線画像を生成する生成手段の一例に相当する。また、推論処理部２６２は、所定の信号量の範囲において推定されるノイズに関する情報に基づいて学習データを選択して学習を行った学習済モデルに第１の放射線画像を入力することにより第１の放射線画像に比べてノイズが低減された第２の放射線画像を生成する生成手段の一例に相当する。さらに、所定の信号量の範囲において推定される放射線画像に含まれるシステムノイズと放射線検出器に含まれる蛍光体の変調伝達関数に応じて高周波成分が減衰した量子ノイズとの比率に基づいて学習データを選択して学習を行った学習済モデルに第１の放射線画像を入力することにより、第１の放射線画像に比べてノイズが低減された第２の放射線画像を生成する生成手段の一例に相当する。なお、学習済モデルは予め学習が行われた機械学習モデルであればよく、当該一連の画像処理の度に学習が行われる必要はない。なお、入力画像と、推論処理を行いノイズが低減された画像を特定の比率でブレンドすることで、ノイズ低減処理の強度について調整することが可能である。すなわち、推論処理部２６２は、第１の放射線画像と第１の放射線画像に比べてノイズが低減された第２の放射線画像を所定の比率でブレンドしたブレンド画像を生成する生成手段の一例に相当する。

【0103】

また、本実施形態では、学習済モデルは制御部２０に設けられる構成としているが、学習済モデルは制御部２０に接続された外部記憶装置７０等に設けられてもよい。

【0104】

ステップＳ６０４では、ステップＳ６０２で行った前処理に対応する後処理を行う。後処理は、前処理で行った、正規化や平準化などの変換の逆処理を行うものである。上記ステップＳ６０１～Ｓ６０４の処理により、ノイズが低減された放射線画像を出力することが可能となる。なお画像処理部２２の性能によって画像全体を一度に処理することができない場合は、画像を適宜の大きさの小領域（たとえば２５６×２５６ｐｉｘｅｌ）に分割して処理するようにしてもよい。

【0105】

このように、本実施形態に係る一連の画像処理では、学習処理部２６１によって作成した学習済モデルを用いて推論処理部２６２の処理を行うことで、デジタル放射線撮影装置において好適なノイズ低減を行った放射線画像を生成することができる。

【0106】

図７は、本実施形態に係る一連の画像処理前の放射線画像と、処理後の放射線画像の一例を示す図である。入力された放射線画像７０１にノイズ低減処理部２６によるノイズ低減処理を適用した場合の結果を例示する。本実施形態に係る一連の画像処理を施した放射線画像７０２では、放射線画像７０１に含まれるノイズが低減され、放射線画像に含まれる被検査物が明瞭に示されていることが分かる。

【0107】

［第２実施形態］
上述した第１実施形態においては、ＳＮ比の高い画像として、高線量で撮影した画像の信号量を調整する例や、ファントム画像の例を示したが、別の実施形態として、次のような構成を取ることも可能である。

【0108】

この実施形態では、ＳＮ比の高い画像を準備するため、適宜のノイズ低減処理を使用する構成を取る。他の構成については他の実施形態と同様である。すなわち、本実施形態において、学習処理部２６１は、システムノイズの比率が閾値より高い場合、放射線画像にノイズ低減処理を施すことができる。そして、学習処理部２６１は、ノイズ低減処理された放射線画像と、ノイズ低減処理された放射線画像にシステムノイズと量子ノイズとを模した人工ノイズを加算した放射線画像とを学習データとして用いることができる。

【0109】

図８は、本実施形態に係る学習処理部２６１の処理の流れを示すフローチャートである。

【0110】

ステップＳ８０１では、学習処理部２６１に学習データが入力される。入力される学習データの取得は、取得部２１にて行われ、本実施形態では、学習データとして適宜の放射線画像が取得される。なお、取得部２１は、記憶部２５に記憶された放射線画像を取得してもよいし、外部記憶装置７０等から放射線画像を取得してもよい。また、取得部２１は、放射線検出器１０によって出力された放射線画像を取得してもよい。本実施形態における学習データとは、上記放射線画像を入力データ、正解データとしたものとなる。学習処理部２６１に同じデータとして入力された後、学習処理部内部で、入力データか、入力データおよび正解データに適宜の人工ノイズが加算されることで、入力データと正解データに差異が発生する状態となる。

【0111】

ステップＳ８０２では、学習データに対して適宜のノイズ低減処理を行い、画像のＳＮ比を向上する処理が行われる。ここで行われるノイズ低減処理については、これまで公知のどのノイズ低減処理を用いてもよいし、あるいは他の実施形態で示したノイズ低減処理の結果を用いることも可能である。

【0112】

ステップＳ８０３では、学習データ生成部２６４によって、適宜のノイズ低減処理を行った学習データに人工ノイズが加算される。加算されるノイズについては、（式４）に示されるものと同等である。

【0113】

ステップＳ８０４～Ｓ８０７は、それぞれ第１実施形態の図４におけるステップＳ４０４～Ｓ４０７と同様の処理を行う。

【0114】

上記の構成を取ることで、学習データにＳＮ比の低い画像が含まれている場合であっても、ＳＮ比を高めた状態でノイズ低減処理の学習を行うことが可能となる。そのため、好適にノイズが低減された放射線画像を出力することのできる機械学習モデルを生成することができる。

【0115】

［第３実施形態］
別の実施形態として、次のような構成を取ることも可能である。

【0116】

機械学習によるノイズ低減処理を構築する際、用いる学習データによってノイズ低減処理の効果を調整することが可能である。

【0117】

図９はノイズ低減を行わない場合のＳＮ比９０１と、学習対象となるノイズ低減処理の目標とするＳＮ比９０２を入射線量別に示したものである。

【0118】

例えば医用の放射線画像などでは、信号量が少なく、被写体の視認性が悪い低線量域では大幅にＳＮ比を向上することが望ましい。しかしながら、信号が十分存在する高線量領域では、被写体の視認性が十分確保できており、ＳＮ比を大幅に向上するよりも、ノイズ低減の効果を落として、より信号に影響を与えない方向に調整した方が望ましいとされるケースも存在する。

【0119】

学習処理部２６１は、これまで説明した実施形態におけるＳＮ比を調整する手法を組み合わせ、学習データ選択部２６３によって学習対象となるノイズ低減処理の目標とするＳＮ比９０２に合わせた学習データを選別しながら学習を進める構成を取ることができる。

【0120】

以上を踏まえ、図１０を参照して本実施形態に係る学習処理部２６１の処理の流れについて説明する。その他の構成については第１実施形態と同様である。

【0121】

図１０は、本実施形態に係る学習処理部２６１の処理の流れを示すフローチャートである。

【0122】

ステップＳ１００１では、学習する信号量の範囲を選択する。これは、放射線検出器１０が扱える信号のダイナミックレンジ内で任意の範囲をランダムに選択するもので、例えば１６ビットの信号を扱えるセンサである場合は、０～６５５３５から値の範囲をランダムに選択する。図５に示されるような放射線検出器１０におけるシステムノイズの比率と、図９に示される学習対象となるノイズ低減処理の目標とするＳＮ比９０２を選択する操作に相当する。

【0123】

ステップＳ１００２では、学習データ選択部２６３によって、学習データの選択が行われる。取得された学習データから、ステップＳ１００１で選択した信号量範囲の学習に適した学習データを選択する。

【0124】

学習データの取得は、取得部２１にて行われ、学習データとして適宜の放射線画像が取得される。なお、取得部２１は、記憶部２５に記憶された放射線画像を取得してもよいし、外部記憶装置７０等から放射線画像を取得してもよい。また、取得部２１は、放射線検出器１０によって出力された放射線画像を取得してもよい。

【0125】

選択する学習データは、図９に示される学習対象となるノイズ低減処理の目標とするＳＮ比９０２に従って選択される。データの選択は、他の実施形態で説明した方法や、その任意の組み合わせによって行われる。例えば、臨床画像をそのまま使用してもよい。また、人体を模擬したファントムを複数回撮影した平均画像を用いてもよい。また、ＳＮが高い画像を選択したうえで、画像を信号量範囲に調整して使用してもよい。また、別途のノイズ低減処理を適用してもよい。あるいは、これらの任意の画像をブレンドして用いるなど、学習対象となるノイズ低減処理の目標とするＳＮ比９０２と、所有している学習データの特性に合わせて適宜選択できるようになっている。すなわち、学習データとして用いる画像を適宜選択することにより学習器を用いたノイズ低減により実現されるＳＮ比を調整することができる。例えば、学習対象となるノイズ低減処理の目標とするＳＮ比９０２に合わせて、複数のファントム画像を平均化することにより得られる平均画像および人工ノイズを平均画像に加算した画像と、人体を撮影することにより得られる所定の値以上のシグナルノイズ比の臨床画像および人工ノイズを所定の値以上のシグナルノイズ比を有する放射線画像に加算した放射線画像と、を組み合わせた学習データを用いることができる。さらに、臨床画像にノイズ低減処理を施したノイズ低減画像および人工ノイズをノイズ低減画像に加算した画像をさらに含む学習データを用いてもよく、例えば、目標とするＳＮ比に合わせて臨床画像とノイズ低減画像を組み合わせてもよい。すなわち、学習器を用いたノイズ低減処理の目標とするＳＮ比９０２に合わせて平均画像、臨床画像、ノイズ低減画像のうち少なくとも１つの画像を選択し、選択された画像を用いて学習器の学習を行うことができる。なお、上記任意の画像のブレンドは、図５におけるシステムノイズの比率５０４に基づくことも可能である。例えば、システムノイズの比率が閾値以下の場合は臨床画像をそのまま使用するようにするなどである。つまり、低線量下で撮影された相対的にシステムノイズの比率が高い画像のノイズ低減を学習するときと高線量下で撮影された相対的にシステムノイズ比率が低い画像のノイズ低減を学習するときとで学習に用いる画像の組み合わせを変えてもよい。なお、学習に用いる画像の組み合わせを変える閾値は必ずしも１つでなくてもよく、２つ以上設定し、それぞれの閾値の範囲において適宜画像を選択してもよい。

【0126】

ステップＳ１００３では、学習データ生成部２６４によって、学習データに人工ノイズが加算される。加算する人工ノイズについては、ステップＳ１００２において作成した画像に合わせて、ＳＮが高い画像を選択したうえで、画像を信号量範囲に調整して使用する場合は（式９）を、それ以外の場合は（式４）を適宜にブレンドして使用する。

【0127】

本実施形態における学習データは、上記放射線画像を入力データ、正解データとしたものとなる。学習処理部２６１に同じデータとして入力された後、学習処理部内部で、入力データか、入力データおよび正解データに適宜の人工ノイズが加算されることで、入力データと正解データに差異が発生する状態となる。

【0128】

ステップＳ１００４～Ｓ１００７は、それぞれ第１実施形態の図４におけるステップＳ４０４～Ｓ４０７と同様の処理を行う。

【0129】

上記の構成を取ることで、学習データにＳＮ比の低い画像が含まれている場合であっても、ＳＮ比を高めた状態でノイズ低減処理の学習を行うことが可能となる。さらに、線量ごとに目標とするＳＮ比を定め、最適な学習データを選別することによって、線量別に好適に効果を最適化されたノイズ低減処理を実現する機械学習モデルを生成することができる。

【0130】

（変形例１）
演算処理部２６６が用いる機械学習モデルについては、ＣＮＮの構成として、変分オートエンコーダー（ＶＡＥ：Ｖａｒｉａｔｉｏｎａｌ Ａｕｔｏ－Ｅｎｃｏｄｅｒ）や、ＦＣＮ（Ｆｕｌｌｙ Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｔｗｏｒｋ）、又はＳｅｇＮｅｔ、ＤｅｎｓｅＮｅｔ等、任意の層構成を組み合わせて用いることもできる。また、例えば、カプセルネットワーク（ＣａｐｓＮｅｔ：Ｃａｐｓｕｌｅ Ｎｅｔｗｏｒｋ）でもよい。ここで、一般的なニューラルネットワークでは、各ユニット（各ニューロン、あるいは各ノード）はスカラー値を出力するように構成されることによって、例えば、画像における特徴間の空間的な位置関係（相対位置）に関する空間情報が低減されるように構成されている。これにより、例えば、画像の局所的な歪みや平行移動等の影響が低減されるような学習を行うことができる。一方、カプセルネットワークでは、各ユニット（各カプセル）は空間情報をベクトルとして出力するように構成されることよって、例えば、空間情報が保持されるように構成されている。これにより、例えば、画像における特徴間の空間的な位置関係が考慮されたような学習を行うことができる。

【0131】

（変形例２）
また、各種学習済モデルの学習データは、実際の撮影を行う放射線検出器自体を用いて得たデータに限られず、所望の構成に応じて、同型の放射線検出器を用いて得たデータや、同種の放射線検出器を用いて得たデータ等であってもよい。なお、上述の実施形態及び変形例に係る、ノイズ低減処理用の学習済モデルは、例えば、放射線画像の輝度値の大小、明部と暗部の順番や傾き、位置、分布、連続性等を特徴量の一部として抽出して、ノイズ低減された放射線画像の生成に係る推定処理に用いているものと考えられる。

【0132】

また、上述した実施形態及び変形例に係る学習済モデルは制御部２０に設けられることができる。学習済モデルは、例えば、ＣＰＵや、ＭＰＵ、ＧＰＵ、ＦＰＧＡ等のプロセッサーによって実行されるソフトウェアモジュール等で構成されてもよいし、ＡＳＩＣ等の特定の機能を果たす回路等によって構成されてもよい。また、これら学習済モデルは、制御部２０と接続される別のサーバの装置等に設けられてもよい。この場合には、制御部２０は、インターネット等の任意のネットワークを介して学習済モデルを備えるサーバ等に接続することで、学習済モデルを用いることができる。ここで、学習済モデルを備えるサーバは、例えば、クラウドサーバや、フォグサーバ、エッジサーバ等であってよい。

【0133】

（その他の実施形態）
本発明は、上述した様々な実施形態及び変形例の１以上の機能を実現するソフトウェア（プログラム）を、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータがプログラムを読出し実行する処理でも実現可能である。コンピュータは、１つ又は複数のプロセッサー若しくは回路を有し、コンピュータ実行可能命令を読み出し実行するために、分離した複数のコンピュータ又は分離した複数のプロセッサー若しくは回路のネットワークを含みうる。

【0134】

このとき、プロセッサー又は回路は、中央演算処理装置（ＣＰＵ）、マイクロプロセッシングユニット（ＭＰＵ）、グラフィクスプロセッシングユニット（ＧＰＵ）、特定用途向け集積回路（ＡＳＩＣ）、又はフィールドプログラマブルゲートウェイ（ＦＰＧＡ）を含みうる。また、プロセッサー又は回路は、デジタルシグナルプロセッサ（ＤＳＰ）、データフロープロセッサ（ＤＦＰ）、又はニューラルプロセッシングユニット（ＮＰＵ）を含みうる。

【0135】

以上、実施形態及び変形例を参照して本発明について説明したが、本発明は上記実施形態及び変形例に限定されるものではない。本発明の趣旨に反しない範囲で変更された発明、及び本発明と均等な発明も本発明に含まれる。また、上述の各実施形態及び変形例は、本発明の趣旨に反しない範囲で適宜組み合わせることができる。

【符号の説明】

【0136】

１０ 放射線検出器
２０ 制御部（画像処理装置）
２２ 画像処理部

【図1A】

【図1B】

【図2A】

【図2B】

【図3A】

【図3B】

【図3C】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】