特許 6981940 画像診断支援装置、方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6981940

(24)【登録日】2021年11月22日

(45)【発行日】2021年12月17日

(54)【発明の名称】画像診断支援装置、方法及びプログラム

(51)【国際特許分類】

   A61B 6/03 20060101AFI20211206BHJP

   G16H 50/20 20180101ALI20211206BHJP

【ＦＩ】

   A61B6/03 360P

   A61B6/03 360D

   G16H50/20

【請求項の数】13

【全頁数】20

(21)【出願番号】特願2018-159918(P2018-159918)

(22)【出願日】2018年8月29日

(65)【公開番号】特開2020-31803(P2020-31803A)

(43)【公開日】2020年3月5日

【審査請求日】2020年7月28日

(73)【特許権者】

【識別番号】306037311

【氏名又は名称】富士フイルム株式会社

(74)【代理人】

【識別番号】110001519

【氏名又は名称】特許業務法人太陽国際特許事務所

(72)【発明者】

【氏名】赤堀 貞登

【審査官】 門 良成

(56)【参考文献】

【文献】 国際公開第２０１３／００１６７８（ＷＯ，Ａ１）

【文献】 特開２００９−２３０７５５（ＪＰ，Ａ）

【文献】 特開２０１４−０３９５９５（ＪＰ，Ａ）

【文献】 特開２０１６−００５５４９（ＪＰ，Ａ）

【文献】 国際公開第２０１６／１９８９７７（ＷＯ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ａ６１Ｂ ６／００

Ａ６１Ｂ ５／０５５

Ａ６１Ｂ ８／００

Ｇ１６Ｈ １０／００−８０／００

Ｇ０１Ｔ １／１６１−１／１６６

Ｇ０６Ｔ １／００

Ｇ０６Ｔ ７／００

(57)【特許請求の範囲】

【請求項1】

複数の画像を含む画像データ群が単位検査毎に複数群記憶されたデータ保管部から、比較読影の対象となる第１の複数の画像データ群及び第２の複数の画像データ群を取得する取得部と、
前記取得部によって取得された前記第１の複数の画像データ群と前記第２の複数の画像データ群との間で、各画像データ群間の類似度に基づいて、前記第１の複数の画像データ群の各画像データ群と前記第２の複数の画像データ群の各画像データ群とを対応付ける対応付け部と、
前記対応付け部によって前記第１の複数の画像データ群のうちの何れかの画像データ群である第１の画像データ群と対応付けられた前記第２の複数の画像データ群のうちの何れかの画像データ群である第２の画像データ群から、前記第１の画像データ群の少なくとも１枚の対象画像と対応する対応画像を抽出する画像抽出部と、
前記対象画像と前記対応画像との画像の組を対比可能なレイアウトで表示部に表示させる表示制御部と、
を含み、
前記対応付け部は、前記第１の複数の画像データ群において、前記第２の複数の画像データ群と画像面の方向が一致しているか否かを判別し、一致している場合に前記類似度を算出する画像診断支援装置。

【請求項2】

前記対応付け部は、前記画像面の方向が一致しない場合より高くなるように前記類似度を算出する請求項１に記載の画像診断支援装置。

【請求項3】

前記画像抽出部は、前記第１の複数の画像データ群に含まれる全ての前記対象画像について、前記対応画像を抽出する請求項１又は２に記載の画像診断支援装置。

【請求項4】

前記表示制御部は、全ての前記対象画像及び前記対応画像との画像の組を表示させる請求項３に記載の画像診断支援装置。

【請求項5】

前記表示制御部は、前記画像の組を前記表示部の画面上に並列に表示させる請求項１から４の何れか１項に記載の画像診断支援装置。

【請求項6】

前記表示制御部は、全ての前記画像の組を前記表示部の画面上に一組ずつ切り替えて表示させる請求項４に記載の画像診断支援装置。

【請求項7】

前記画像データ群が、複数のスライス画像で構成されたボリュームデータであり、
前記対応付け部は、前記ボリュームデータのピクセルデータ間における類似度に基づいて対応付けを行う請求項１から６の何れか１項に記載の画像診断支援装置。

【請求項8】

前記対応付け部は、前記画像データ群に含まれる特定の解剖構造を含む領域における特徴量に基づいて対応付けを行う請求項１から６の何れか１項に記載の画像診断支援装置。

【請求項9】

前記対応付け部は、前記第１の複数の画像データ群のうちの何れかの画像データ群及び前記第２の複数の画像データ群のうちの何れかの画像データ群の入力により、入力された画像データ群の組合せが対応するか否かを出力するように機械学習がなされた学習済みモデルを有する請求項１から６の何れか１項に記載の画像診断支援装置。

【請求項10】

前記画像抽出部は、前記対象画像と前記第２の画像データ群の各画像との類似度に基づいて前記対応画像を抽出する請求項１から９の何れか１項に記載の画像診断支援装置。

【請求項11】

前記第１の複数の画像データ群と前記第２の複数の画像データ群とが、同一の被検体に対して異なる撮影時期でそれぞれ撮影して取得された画像データ群である請求項１から１０の何れか１項に記載の画像診断支援装置。

【請求項12】

複数の画像を含む画像データ群が単位検査毎に複数群記憶されたデータ保管部から、比較読影の対象となる第１の複数の画像データ群及び第２の複数の画像データ群を取得し、
前記第１の複数の画像データ群において、前記第２の複数の画像データ群と画像面の方向が一致しているか否かを判別し、一致している場合に、前記第１の複数の画像データ群と前記第２の複数の画像データ群との間で、各画像データ群間の類似度に基づいて、前記第１の複数の画像データ群の各画像データ群と前記第２の複数の画像データ群の各画像データ群とを対応付け、
前記第１の複数の画像データ群のうちの何れかの画像データ群である第１の画像データ群と対応付けられた前記第２の複数の画像データ群のうちの何れかの画像データ群である第２の画像データ群から、前記第１の画像データ群の少なくとも１枚の対象画像と対応する対応画像を抽出し、
前記対象画像と前記対応画像との画像の組を対比可能なレイアウトで表示部に表示させる画像診断支援方法。

【請求項13】

複数の画像を含む画像データ群が単位検査毎に複数群記憶されたデータ保管部から、比較読影の対象となる第１の複数の画像データ群及び第２の複数の画像データ群を取得する手順と、
前記第１の複数の画像データ群において、前記第２の複数の画像データ群と画像面の方向が一致しているか否かを判別し、一致している場合に、前記第１の複数の画像データ群と前記第２の複数の画像データ群との間で、各画像データ群間の類似度に基づいて、前記第１の複数の画像データ群の各画像データ群と前記第２の複数の画像データ群の各画像データ群とを対応付ける手順と、
前記第１の複数の画像データ群のうちの何れかの画像データ群である第１の画像データ群と対応付けられた前記第２の複数の画像データ群のうちの何れかの画像データ群である第２の画像データ群から、前記第１の画像データ群の少なくとも１枚の対象画像と対応する対応画像を抽出する手順と、
前記対象画像と前記対応画像との画像の組を対比可能なレイアウトで表示部に表示させる手順とをコンピュータに実行させる画像診断支援プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、画像診断支援装置、方法及びプログラムに関する。

【背景技術】

【0002】

近年、医用画像の分野においては、Ｘ線撮影装置の他、ＣＴ（Computed Tomography）装置、超音波（ＵＳ）診断装置、ＭＲＩ（Magnetic Resonance Imaging）装置、ＰＥＴ（Positron Emission Tomography）装置、及びＳＰＥＣＴ（Single-Photon Emission Computed Tomography）装置等の様々な技術を用いた画像撮影装置（以下、モダリティという）が利用されている。このようなモダリティの高速化およびマルチスライス対応といった高性能化に伴い、１つのシリーズ（モダリティにより取得された撮影単位毎の複数枚の画像データである）において被検体の複数の部位の撮影を行い、数百から数千の高精細な断層画像を取得することが可能になってきている。

【0003】

一方、従来から、複数の医用画像を液晶ディスプレイ等の表示装置に表示させて、画像を比較しながら読影をする比較読影が行われている。例えば、被検体の現在検査の医用画像及び過去検査の医用画像を表示させて比較読影することにより、病変の進行度合いの確認、あるいは異常を早期に発見することができる。しかしながら、実際に読影する際に、どの画面にどのシリーズのどの断層画像を表示させるのかは、ユーザによる画面操作に基づいており、現在検査と過去検査とを比較する際に、ユーザはシリーズや断層画像を読影し易いように選択する操作に手間を要していた。

【0004】

そこで、このような比較読影を行い易くするために、医用画像を表示装置に表示させる様々な技術が提案されている。表示の具体的な方法として、例えば、特許文献１には、検査時の画像取得条件、及び検査に関連する他のシリーズ画像データを特定する特定情報を含むオブジェクトデータを参照し、今回のシリーズ画像データと関連する過去のシリーズ画像データの組み合わせ情報を表すサムネイル画像を生成して表示する技術が開示されている。また、特許文献２には、第２撮影時期のスライス画像における領域変化率と、第１撮影時期のスライス画像群に含まれるスライス画像毎における領域変化率との差が所定範囲内にある領域変化率をもつスライス画像を、第１撮影時期のスライス画像群から選択し、選択されたスライス画像及び上記第２撮影時期のスライス画像を表示させる技術が開示されている。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２００８−２００１３９号公報

【特許文献2】特開２０１１−０３６６８４号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、例えば比較的に古い過去検査において取得されたシリーズには、上記オブジェクトデータが存在しない場合及び規格化されていない場合がある。上記オブジェクトデータが存在しない及び規格化されていないシリーズにおいては、オブジェクトデータを適切に参照できないため、比較読影の対象となるシリーズを適切に対応付けることはできない。そのため、特許文献１に記載の技術を適用することは困難である。また、特許文献２は、スライス画像間のスライス位置のマッチングを行うことはできるが、複数のスライス画像で構成された画像データ群すなわちシリーズ間でのマッチング方法についての記載はない。

【0007】

本開示は上記事情に鑑みなされたものであり、比較読影の対象となるシリーズの組を適切に対応付け、かつ対応付けられたシリーズの組間において対応する各画像を抽出して対比可能なレイアウトで表示できるようにすることを目的とする。

【課題を解決するための手段】

【0008】

本開示による画像診断支援装置は、複数の画像を含む画像データ群が単位検査毎に複数群記憶されたデータ保管部から、比較読影の対象となる第１の複数の画像データ群及び第２の複数の画像データ群を取得する取得部と、
取得部によって取得された第１の複数の画像データ群と第２の複数の画像データ群との間で、各画像データ群間の類似度に基づいて、第１の複数の画像データ群の各画像データ群と第２の複数の画像データ群の各画像データ群とを対応付ける対応付け部と、
対応付け部によって第１の複数の画像データ群のうちの何れかの画像データ群である第１の画像データ群と対応付けられた第２の複数の画像データ群のうちの何れかの画像データ群である第２の画像データ群から、第１の画像データ群の少なくとも１枚の対象画像と対応する対応画像を抽出する画像抽出部と、
対象画像と対応画像との画像の組を対比可能なレイアウトで表示部に表示させる表示制御部と、
を含む。

【0009】

なお、本開示による画像診断支援装置においては、画像抽出部は、第１の複数の画像データ群に含まれる全ての対象画像について、対応画像を抽出してもよい。

【0010】

また、本開示による画像診断支援装置においては、表示制御部は、全ての対象画像及び対応画像との画像の組を表示させてもよい。

【0011】

この場合、表示制御部は、画像の組を表示部の画面上に並列に表示させてもよいし、全ての画像の組を表示部の画面上に一組ずつ切り替えて表示させてもよい。

【0012】

また、本開示による画像診断支援装置においては、画像データ群が、複数のスライス画像で構成されたボリュームデータであり、
対応付け部は、ボリュームデータのピクセルデータ間における類似度に基づいて対応付けを行ってもよい。

【0013】

なお、本開示において、「ピクセルデータ」は、画像を構成する画素（ピクセル）の集まりをいう。

【0014】

また、本開示による画像診断支援装置においては、対応付け部は、画像データ群に含まれる特定の解剖構造を含む領域における特徴量に基づいて対応付けを行ってもよい。

【0015】

なお、本開示において、「特定の解剖構造」は、例えば脊髄及び心臓等の被検体を構成する特定の構造である。

【0016】

また、本開示による画像診断支援装置においては、対応付け部は、第１の複数の画像データ群の各画像データ群のうちの何れかの画像データ群及び第２の複数の画像データ群のうちの何れかの画像データ群の入力により、入力された画像データ群の組合せが対応するか否かを出力するように機械学習がなされた学習済みモデルを有していてもよい。

【0017】

また、本開示による画像診断支援装置においては、画像抽出部は、対象画像と第２の画像データ群の各画像との類似度に基づいて対応画像を抽出してもよい。

【0018】

また、本開示による画像診断支援装置においては、第１の複数の画像データ群と第２の複数の画像データ群とが、同一の被検体に対して異なる撮影時期でそれぞれ撮影して取得された画像データ群であってもよい。

【0019】

本開示による画像診断支援方法は、複数の画像を含む画像データ群が単位検査毎に複数群記憶されたデータ保管部から、比較読影の対象となる第１の複数の画像データ群及び第２の複数の画像データ群を取得し、
第１の複数の画像データ群と第２の複数の画像データ群との間で、各画像データ群間の類似度に基づいて、第１の複数の画像データ群の各画像データ群と第２の複数の画像データ群の各画像データ群とを対応付け、
第１の複数の画像データ群のうちの何れかの画像データ群である第１の画像データ群と対応付けられた第２の複数の画像データ群のうちの何れかの画像データ群である第２の画像データ群から、第１の画像データ群の少なくとも１枚の対象画像と対応する対応画像を抽出し、
対象画像と対応画像との画像の組を対比可能なレイアウトで表示部に表示させる。

【0020】

なお、本開示による画像診断支援方法をコンピュータに実行させるためのプログラムとして提供してもよい。

【0021】

本開示による他の画像診断支援装置は、コンピュータに実行させるための命令を記憶するメモリと、
記憶された命令を実行するよう構成されたプロセッサとを備え、プロセッサは、
複数の画像を含む画像データ群が単位検査毎に複数群記憶されたデータ保管部から、比較読影の対象となる第１の複数の画像データ群及び第２の複数の画像データ群を取得し、
第１の複数の画像データ群と第２の複数の画像データ群との間で、各画像データ群間の類似度に基づいて、第１の複数の画像データ群の各画像データ群と第２の複数の画像データ群の各画像データ群とを対応付け、
第１の複数の画像データ群のうちの何れかの画像データ群である第１の画像データ群と対応付けられた第２の複数の画像データ群のうちの何れかの画像データ群である第２の画像データ群から、第１の画像データ群の少なくとも１枚の対象画像と対応する対応画像を抽出し、
対象画像と対応画像との画像の組を対比可能なレイアウトで表示部に表示させる処理を実行する。

【発明の効果】

【0022】

本開示の画像診断支援装置、方法及びプログラムによれば、比較読影の対象となるシリーズの組を適切に対応付け、かつ対応付けられたシリーズの組間において対応する各画像を抽出して対比可能なレイアウトで表示することができる。

【図面の簡単な説明】

【0023】

【図1】本開示の一実施形態である画像診断支援装置を適用した、診断支援システムの概要を示すハードウェア構成図

【図2】検査とシリーズの一例を示す図

【図3】本開示の一実施形態である画像診断支援装置の構成を示す概略ブロック図

【図4】シリーズ間の対応付けを説明するための図

【図5】シリーズ間の対応付けの一実施形態を説明するための図（その１）

【図6】シリーズ間の対応付けの一実施形態を説明するための図（その２）

【図7】シリーズ間の対応付けの一実施形態を説明するための図（その３）

【図8】現在シリーズと過去シリーズとの間において、対応付けられた画像同士を結ぶ図

【図9】表示部のレイアウトの一例を説明するための図

【図10】表示部の画面の一例を説明するための図

【図11】本開示の一実施形態において行われる処理を示すフローチャート

【図12】本開示の一実施形態において行われるシリーズの対応付け処理を示すフローチャート

【図13】ヒストグラムインターセクションから類似度を求める方法を説明するための図

【図14】特定の解剖構造を含む領域を検出してシリーズ間の対応付けを行う方法を説明するための図（その１）

【図15】特定の解剖構造を含む領域を検出してシリーズ間の対応付けを行う方法を説明するための図（その２）

【図16】学習済みモデルを説明するための図

【図17】シリーズ間の対応付けの正解データを説明するための図

【図18】表示部のレイアウトの一例を説明するための図

【図19】表示部の画面の一例を説明するための図

【発明を実施するための形態】

【0024】

以下、図面を参照して本発明の実施形態について説明する。図１は本発明の実施形態による画像診断支援装置を適用した、診断支援システムの概要を示すハードウェア構成図である。図１に示すように、診断支援システムでは、本実施形態による画像診断支援装置１、３次元画像撮影装置２、及び画像保管サーバ３が、ネットワーク４を経由して通信可能な状態で接続されている。なお、画像保管サーバ３は、本発明のデータ保管部に対応する。

【0025】

３次元画像撮影装置２は、被検体の診断対象となる部位を撮影することにより、その部位を表す３次元画像を生成する装置であり、具体的には、ＣＴ装置、ＭＲＩ装置、及びＰＥＴ（Positron Emission Tomography）装置等である。この３次元画像撮影装置２により生成された、複数のスライス画像からなる３次元画像は単位検査毎に画像保管サーバ３に送信され、保存される。

【0026】

画像保管サーバ３は、各種データを保存して管理するコンピュータであり、大容量外部記憶装置及びデータベース管理用ソフトウェアを備えている。画像保管サーバ３は、有線あるいは無線のネットワーク４を介して他の装置と通信を行い、画像データ等を送受信する。具体的には３次元画像撮影装置２で生成された３次元画像の画像データを含む各種データをネットワーク経由で取得し、大容量外部記憶装置等の記録媒体に保存して管理する。なお、画像データの格納形式及びネットワーク４経由での各装置間の通信は、ＤＩＣＯＭ（Digital Imaging and Communication in Medicine）等のプロトコルに基づいている。

【0027】

本実施形態においては、画像保管サーバ３には、同一被検体に対して異なる時期に行われた検査毎に取得された被検体の３次元画像と付帯画像とが保管されている。図２は検査とシリーズの一例を示す図である。図２に示すように、腹部ＣＴ及び頭部ＭＲＩ等の単位検査毎に取得されたシリーズ１、シリーズ２、シリーズ３、、、等の複数のシリーズが保管サーバ３に保管されている。本開示において「複数のシリーズ」は「複数の画像データ群」に対応し、「シリーズ」は「画像データ群」に対応する。シリーズは、１回の撮影で取得されるボリュームデータであり、ボリュームデータは例えばＣＴ装置、ＭＲＩ装置等の断層撮影装置が出力する複数枚のスライス画像データを再構成して得た３次元画像である。

【0028】

１検査として、例えば頭部ＣＴ検査が行われた場合には、図２に一例として示すように、被検体に造影剤を投与せずに取得した非造影ＣＴのボリュームデータをシリーズ１、被検体に造影剤を投与して予め定められた規定時間内に取得した動脈相のボリュームデータをシリーズ２、被検体に造影剤を投与して上記規定時間よりも長い時間経過した後で取得した動脈相のボリュームデータをシリーズ３等とする。

【0029】

また、１検査として、例えば頭部ＭＲＩ検査が行われた場合には、図２に一例として示すように、異なる撮影プロトコルで取得したボリュームデータ、例えば拡散強調画像で構成されたボリュームデータをシリーズ１、ＡＤＣ（Apparent Diffusion Coefficient）マップで構成されたボリュームデータをシリーズ２、ＦＬＡＩＲ（FLuid Attenuation Inversion Recovery）法を用いて取得されたＦＬＡＩＲ画像で構成されたボリュームデータをシリーズ３等とする。なお、ＡＤＣマップは、ＡＤＣを画素ごとに算出して、拡散強調画像の画素位置に対応して配列した画像である。

【0030】

また、付帯情報には、例えば、個々の画像を識別するための画像ＩＤ（identification）、被検体を識別するための患者ＩＤ、検査を識別するための検査ＩＤ、医用画像ごとに割り振られるユニークなＩＤ（ＵＩＤ：unique identification）、その医用画像が生成された検査日、検査時刻、その医用画像を取得するための検査で使用されたモダリティの種類、患者氏名と年齢と性別などの患者情報、検査部位（撮影部位）、撮影条件（造影剤の使用有無または放射線量など）、および、１回の検査で複数の断層画像を取得したときのシリーズ番号などの情報が含まれる。

【0031】

画像診断支援装置１は、１台のコンピュータに、本開示の画像診断支援プログラムをインストールしたものである。コンピュータは、診断を行う医師が直接操作するワークステーション又はパーソナルコンピュータでもよいし、それらとネットワークを介して接続されたサーバコンピュータでもよい。画像診断支援プログラムは、ＤＶＤ（Digital Versatile Disc）あるいはＣＤ−ＲＯＭ（Compact Disc Read Only Memory）等の記録媒体に記録されて配布され、その記録媒体からコンピュータにインストールされる。又は、ネットワークに接続されたサーバコンピュータの記憶装置、もしくはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じて医師が使用するコンピュータにダウンロードされ、インストールされる。

【0032】

図３は、コンピュータに画像診断支援プログラムをインストールすることにより実現される本開示の一実施形態である画像診断支援装置の概略構成を示す図である。図３に示すように、画像診断支援装置１は、標準的なワークステーションの構成として、ＣＰＵ（Central Processing Unit）１１、メモリ１２及びストレージ１３を備えている。また、画像診断支援装置１には、液晶ディスプレイ等からなる表示部１４、並びにキーボード及びマウス等からなる入力部１５が接続されている。表示部１４は、後述する比較読影の対象となる画像の組が対比可能なレイアウトで表示される。入力部１５は、ユーザによる種々の設定入力を受け付けるものであり、例えば患者の識別情報の設定入力及び後述する対象画像の選択等を受け付ける。なお、タッチパネルを用いることによって表示部１４と入力部１５とを兼用するようにしてもよい。

【0033】

ストレージ１３は、ハードディスクドライブ及びＳＳＤ(Solid State Drive)等からなる。ストレージ１３には、ネットワーク４を経由して画像保管サーバ３から取得した、被検体の検査画像及び処理に必要な情報を含む各種情報が記憶されている。

【0034】

また、メモリ１２には、画像診断支援プログラムが記憶されている。画像診断支援プログラムは、ＣＰＵ１１に実行させる処理として、複数の画像を含む画像データ群が単位検査毎に複数群記憶されたデータ保管部（画像保管サーバ３）から、比較読影の対象となる第１の複数の画像データ群及び第２の複数の画像データ群を取得する取得処理、第１の複数の画像データ群と第２の複数の画像データ群との間で、各画像データ群間の類似度に基づいて、第１の複数の画像データ群の各画像データ群と第２の複数の画像データ群の各画像データ群とを対応付ける対応付け処理、第１の複数の画像データ群のうちの何れかの画像データ群である第１の画像データ群と対応付けられた第２の複数の画像データ群のうちの何れかの画像データ群である第２の画像データ群から、第１の画像データ群の少なくとも１枚の対象画像と対応する対応画像を抽出する画像抽出処理、対象画像と対応画像との画像の組を対比可能なレイアウトで表示部に表示させる表示制御処理を規定する。

【0035】

そして、ＣＰＵ１１がプログラムに従いこれらの処理を実行することで、コンピュータは、取得部２１、対応付け部２２、画像抽出部２３、及び表示制御部２４として機能する。

【0036】

取得部２１は、入力部１５を用いてユーザによって入力された患者の識別情報に基づいて、その識別情報を有する同一の被検体に対して異なる撮影時期でそれぞれ撮影して取得された複数のシリーズを画像保管サーバ３から読み出して取得する。なお、複数のシリーズが既にストレージ１３に保存されている場合には、取得部２１は、ストレージ１３から複数のシリーズを取得するようにしてもよい。

【0037】

取得部２１は、今回の検査（以下、現在検査という）により取得された複数のシリーズを現在シリーズＳｃ、現在検査よりも以前の検査（以下、過去検査という）により取得された複数のシリーズを過去シリーズＳｐとして取得する。ここで現在シリーズＳｃは、本開示の第１の複数の画像データ群に、過去シリーズＳｐは本開示の第２の複数の画像データ群にそれぞれ対応する。なお、現在シリーズＳｃ及び過去シリーズＳｐの各シリーズは、ＣＴ装置またはＭＲＩ装置で撮影された複数枚のスライス画像で構成される。また、現在シリーズＳｃ及び過去シリーズＳｐは同一の撮影原理の３次元画像撮影装置２により取得された画像とする。また、シリーズとしては、アキシャル断層画像、サジタル断層画像及びコロナル断層画像等の断層画像からなるボリュームデータを取得する。

【0038】

対応付け部２２は、現在シリーズＳｃと過去シリーズＳｐとの間で、各シリーズ間の類似度に基づいて、現在シリーズＳｃの各シリーズと過去シリーズＳｐの各シリーズとを対応付ける。図４はシリーズ間の対応付けを説明するための図である。

【0039】

対応付け部２２は、図４に示すように、現在検査で取得された現在シリーズＳｃのシリーズ１、シリーズ２、及びシリーズ３を含む複数のシリーズの各々と、過去検査で取得された過去シリーズＳｐのシリーズ１、シリーズ２、及びシリーズ３を含む複数のシリーズの各々とを対応付ける。各シリーズを対応付ける際には、現在シリーズＳｃの１つのシリーズに対して過去シリーズＳｐの２つ以上のシリーズが対応付けられないようにする。すなわち、現在シリーズＳｃの１つのシリーズに対して対応付けられるのは過去シリーズＳｐの１つのシリーズとする。

【0040】

図５、図６、図７はそれぞれシリーズ間の対応付けの一実施形態を説明するための図である。なお、図５、図６、図７においては、便宜上、各シリーズを２次元画像として表しているが、実際には各シリーズは３次元画像すなわちボリュームデータである。対応付け部２２は、現在検査Ｃにおいて取得された現在シリーズＳｃのシリーズ毎に、過去検査Ｐにおいて取得された過去シリーズＳｐのシリーズの各々との類似度を算出して、シリーズ間の類似度が最も高いシリーズ同士を対応付ける。すなわち一例として図５に示すように、現在シリーズＳｃが複数のシリーズＳｃ１，Ｓｃ２，Ｓｃ３、、、過去シリーズＳｐが複数のシリーズＳｐ１，Ｓｐ２，Ｓｐ３、、、をそれぞれ有する場合には、対応付け部２２は、シリーズＳｃ１に対して、シリーズＳｃ１とシリーズＳｐ１、シリーズＳｃ１とシリーズＳｐ２、シリーズＳｃ１とシリーズＳｐ３、、、の各シリーズ間の類似度を算出する。

【0041】

そして、対応付け部２２は、シリーズＳｃ１と最も類似度が高いシリーズを、シリーズＳｃ１と対応付けるシリーズとして決定する。すなわち一例として図６に示すように、シリーズＳｃ１とシリーズＳｐ１との組み合わせが最も類似度が高い場合には、対応付け部２２は、シリーズＳｃ１とシリーズＳｐ１とを対応付ける。

【0042】

対応付け部２２は、他のシリーズＳｃ２，Ｓｃ３、、、についても同様にして、対応付け処理を行い、一例として図７に示すように、現在シリーズＳｃのシリーズＳｃ１，Ｓｃ２，Ｓｃ３、、、と過去シリーズＳｐのシリーズＳｐ１，Ｓｐ２，Ｓｐ３、、、とを対応付ける。なお、対応付け部２２における類似度の算出方法については後で詳細に説明する。

【0043】

画像抽出部２３は、現在シリーズＳｃの対象画像と対応する対応画像を、現在シリーズＳｃの上記対象画像が含まれるシリーズと対応付けられた過去シリーズＳｐのシリーズから抽出する。すなわち対応付けられたシリーズ間において一方のシリーズの対象画像と対応する対応画像を他方のシリーズから抽出する。図８は現在シリーズＳｃ１と過去シリーズＳｐ２との間において、対応付けられた画像同士を結ぶ図である。本開示においては、画像抽出部２３は、図８に示すように、現在シリーズＳｃ１を構成する各スライス画像ａ１，ａ２，ａ３、、、の各々に対応する対応画像を過去シリーズＳｐ２を構成する各スライス画像ｂ１，ｂ２，ｂ３、、、から抽出する。

【0044】

画像抽出部２３は、対応付け部２２によって対応付けられた全てのシリーズ間において、現在シリーズＳｃに含まれるスライス画像（以下、対象画像という）全てに対して、各々対応する過去シリーズＳｐに含まれるスライス画像を対応画像として抽出する。なお、現在シリーズＳｃのシリーズに含まれる対象画像の数が過去シリーズＳｐのシリーズに含まれるスライス画像の数より多い場合には、１枚のスライス画像が重複して抽出される。すなわち、画像抽出部２３は、現在シリーズＳｃのシリーズに含まれる対応画像に対して、必ず１枚の対応画像を抽出する。

【0045】

画像抽出部２３は、具体的には、対応付け部２２によって対応付けられた全てのシリーズ間において、各スライス画像の画素値（例えばＣＴ値）を用いて、現在シリーズＳｃに含まれる対象画像全てに対して、各々対応する過去シリーズＳｐに含まれるスライス画像の全ての組み合わせについて相関値を算出する。そして、画像抽出部２３は、相関値が最も大きい値を有するスライス画像の組み合わせが、対応付けられるべき組み合わせであると判定して、対象画像に対して組み合わせられた過去シリーズＳｐのスライス画像を対応画像として抽出する。相関値の算出方法としては、例えば正規化相互相関（ZNCC：Zero-mean Normalized Cross-Correlation）を用いて算出するようにすればよい。ただし、これに限らず、その他の算出方法を用いるようにしてもよい。例えば、特願２０１７−０８３４０３号に記載されたスライス画像同士の対応付け方法を使用し、対象画像に対して対応付けられた過去シリーズＳｐのスライス画像を対応画像として抽出するようにしてもよい。また、３次元的な位置関係を公知の非剛体レジストレーションの技術を用いて求めて、３次元的な位置関係が最も一致するスライス画像同士を対応付けてもよい。

【0046】

表示制御部２４は、現在シリーズＳｃに含まれる各対象画像と、この対象画像と対応する過去シリーズＳｐに含まれる対応画像との画像の組を対比可能なレイアウトで表示部に表示させる。図９は表示部１４のレイアウトの一例を説明するための図である。なお、便宜上、図９においては紙面上側を上方として、以下説明する。

【0047】

表示制御部２４は、現在シリーズＳｃに含まれる各対象画像と、この対象画像と対応する過去シリーズＳｐに含まれる対応画像との画像の組を表示部１４の画面上に並列に表示させる。具体的には、対応付け部２２によって現在検査ＣのシリーズＳｃ１と過去検査ＰのシリーズＳｐ２、現在検査ＣのシリーズＳｃ２と過去検査ＰのシリーズＳｐ３がそれぞれ対応付けられ、画像抽出部２３によってシリーズＳｃ１の対象画像ａ３に対してシリーズＳｐ２の対応画像ｂ２が、シリーズＳｃ２の対象画像ａ３に対してシリーズＳｐ３の対応画像ｂ２がそれぞれ抽出された場合には、表示制御部２４は、対象画像ａ３と対応画像ｂ２との画像の組を対比可能なレイアウトとして、一例として図９に示すように、現在検査Ｃで取得された画像が上側、過去検査Ｐで取得された画像が下側に位置するように各画像の組を上下に並列に表示させる。

【0048】

図１０は表示部１４の画面の一例を説明するための図である。なお、便宜上、図１０においては紙面左側を上方として、以下説明する。表示制御部２４は、一例として図１０に示すように、現在検査Ｃで取得した各対象画像と、この各対象画像に対応する過去検査Ｐで取得された対応画像とを表示部１４の画面１４Ａ上に上下に並列に表示させる。なお、画面１４Ａ上に表示可能な画像の枚数は、ユーザによって適宜変更することができる。また、画面１４Ａの上方に表示される対象画像はユーザが入力部１５を操作することにより適宜選択して配置することができる。表示制御部２４は、ユーザが配置した対象画像に対応する対応画像を、対象画像の下方に並列に表示する。

【0049】

なお、表示制御部２４は、全ての対応画像と対象画像との画像の組を表示部１４に表示させてもよい。対象画像の枚数が多い場合には、例えばユーザが入力部１５を操作することによって、対象画像と対応画像との画像の組を同時に左右方向にスクロールさせることにより、上記画像の組を表示させてもよい。

【0050】

また、本開示の技術において表示制御部２４は、対応画像と対象画像を上下に並列に表示させるものに限られず、例えば対応画像と対象画像とを左右に並列に表示させてもよい。

【0051】

次いで、本実施形態において行われる処理について説明する。図１１は本開示の一実施形態において行われる処理を示すフローチャートである。

【0052】

先ず、取得部２１は、ユーザによる患者の識別情報などの入力に基づいて、その患者を異なる撮影時期でそれぞれ撮影して取得した第１の複数のシリーズ及び第２の複数のシリーズを取得する（ステップＳＴ１）。本開示においては、現在シリーズＳｃ及び過去シリーズＳｐをそれぞれ第１の複数のシリーズ及び第２の複数のシリーズとして取得する。

【0053】

次に、対応付け部２２は、取得部２１によって取得された現在シリーズＳｃと過去シリーズＳｐとの間で、各シリーズ間の類似度に基づいて対応付けるシリーズの対応付け処理を行う（ステップＳＴ２）。

【0054】

ここで、対応付け部２２によるシリーズの対応付け処理について説明する。対応付け部２２は、上述したシリーズ間の対応付けにおいて使用されるピクセルデータ間の類似度を計算する。具体的には、類似度は相互相関やヒストグラムインターセクションなどの公知の技術を用いて取得することができる。しかしながら、ピクセルデータだけでは正確な類似度が算出し難い場合もある。例えば、アキシャル断面とサジタル断面のように異なる画像面の方向のシリーズ間でも、ピクセルデータ間の類似度が高くなる場合がある。そこで本開示においては、シリーズの種類や撮影情報に関わるＤＩＣＯＭタグ情報をさらに考慮した上で類似度を計算する。具体的には、ＤＩＣＯＭタグなどの付帯情報を参照して画像面の方向を判定し、画像面の方向が一致する場合は、類似度は高くなり、画像面の方向が一致しない場合は、類似度は低くなるように類似度を算出する。

【0055】

本開示においては、一例として、ＤＩＣＯＭタグ情報に含まれる「Image Orientation」を参照し、画像面の方向を判断した上で、ピクセルデータ間の類似度を算出する方法を使用する。ここで、「Image Orientation」は、画像の「first row」と「first column」の方向を、被検体を基準に定義したものである。なお、画像面の方向は、「Image Orientation」に基づいて判断する。「Image Orientation」は、例えば、http://dicom.nema.org/medical/dicom/current/output/chtml/part03/sect_C.7.6.2.html#sect_C.7.6.2.1.1（検索日：2018年8月23日）の記載に基づいて定義することができる。例えば、画像が被検体の体軸に垂直なアキシャル断面の場合、「Image Orientation」の「first row」は（１，０，０）、「first column」は（０，１，０）にほぼ一致するので、「Image Orientation」を参照して得られる２つのベクトルと、（１，０，０）及び（０，１，０）との一致度を、内積演算を使って求めることにより、画像における画像面の方向を判断することができる。

【0056】

図１２は本開示の一実施形態において行われるシリーズの対応付け処理を示すフローチャート、図１３はヒストグラムインターセクションから類似度を求める方法を説明するための図である。

【0057】

対応付け部２２は、一例として図１２に示すように、先ず、現在シリーズＳｃのシリーズＳｃ１において、過去シリーズＳｐのシリーズＳｐ１と画像面の方向が同じか否かを判別する（ステップＳＴ２１）。シリーズＳｃ１及びシリーズＳｐ１の画像面の方向は、それぞれ上述したようにＤＩＣＯＭタグの「Image Orientation」の記述に基づいて判断することができる。シリーズＳｃ１及びシリーズＳｐ１の画像面の方向が一致している場合には（ステップＳＴ２１；Ｙｅｓ）、ピクセルデータ間の類似度を算出する（ステップＳＴ２２）。

【0058】

図１３はヒストグラムインターセクションから類似度を求める方法を説明するための図である。ヒストグラムインターセクションは、図１３に示すように、シリーズＳｃ１のヒストグラムｈ１とシリーズＳｐ１のヒストグラムｈ２のそれぞれのヒストグラムの共通部分の割合を指す。この共通部分の割合から類似度が導出される。具体的には、共通部分の割合が１００％の場合には類似度は１となり、共通部分の割合が０％の場合には類似度は０となる。このように対応付け部２２は、シリーズＳｃ１及びシリーズＳｐ１すなわちボリュームデータ全体のピクセルデータを用いることにより、ボリュームデータ全体の類似度を算出することができる。ここで算出された類似度は０以上１．０以下の値となる。

【0059】

なお、シリーズＳｃ１及びシリーズＳｐ１のおおまかな構図を反映させるために、例えば、シリーズＳｃ１及びシリーズＳｐ１の縦方向、横方向及び高さ方向をそれぞれ３つに等分し、３×３×３区画すなわち２７区画に区分したそれぞれの区画でヒストグラムインターセクションを求め、その平均値をシリーズＳｃ１及びシリーズＳｐ１各々の類似度とするようにしてもよい。なお、区分の数は２７区画に限られるものではなく、必要とする対応付けの精度に基づいて適宜変更することができる。

【0060】

一方、ステップＳＴ２１にて、シリーズＳｃ１及びシリーズＳｐ１の画像面の方向が同じでない場合には（ステップＳＴ２１；Ｎｏ）、対応付け部２２は、ピクセルデータ間の類似度を−１とする（ステップＳＴ２３）。

【0061】

次に、対応付け部２２は、現在シリーズＳｃ及び過去シリーズＳｐの各々のシリーズの全ての組合せの類似度を算出したか否かを判別する（ステップＳＴ２４）。対応付け部２２が全ての組合せの類似度を算出したと判別した場合には（ステップＳＴ２４；ＹＥＳ）、対応付け部２２は、現在シリーズＳｃ及び過去シリーズＳｐ間において、最も類似度が高いシリーズ同士を対応付ける（ステップＳＴ２５）。

【0062】

一方、ステップＳＴ２４にて、対応付け部２２が全ての組合せの類似度を算出していないと判別した場合には（ステップＳＴ２４；ＮＯ）、対応付け部２２はステップＳＴ２１に処理を移行して、現在シリーズＳｃ及び過去シリーズＳｐ各々のシリーズの全ての組合せの類似度を算出するまでステップＳＴ２１移行の処理を繰り返し行う。

【0063】

以上のようにして対応付け部２２によるシリーズの対応付け処理が終了すると、図１１に戻り、画像抽出部２３が上述のようにして、現在シリーズＳｃの各シリーズに含まれる対応画像に対して、ステップＳＴ２において対応付けられた過去シリーズＳｐのシリーズに含まれるスライス画像から、１枚の対応画像を抽出する対応画像の抽出処理を行う。

【0064】

次に、表示制御部２４が上述のようにして、一例として図１０に示すように、現在検査Ｃで取得した各対象画像と、この各対象画像に対応する過去検査Ｐで取得された対応画像とを表示部１４の画面１４Ａ上に上下に並列に表示させて（ステップＳＴ４）、一連の処理が終了する。

【0065】

このように、本開示の上記実施形態によれば、画像保管サーバ３から、比較読影の対象となる現在シリーズＳｃ及び過去シリーズＳｐを取得し、現在シリーズＳｃと過去シリーズＳｐとの間で、各シリーズ間の類似度に基づいて、現在シリーズＳｃの各シリーズと過去シリーズＳｐの各シリーズとを対応付け、現在シリーズＳｃのうちの何れかのシリーズであるシリーズＳｃ１と対応付けられた過去シリーズＳｐのうちの何れかのシリーズであるシリーズＳｐ２から、シリーズＳｃ１の少なくとも１枚の対象画像と対応する対応画像を抽出し、対象画像と対応画像との画像の組を対比可能なレイアウトで表示部に表示させる。従って、比較読影の対象となるシリーズの組を適切に対応付け、かつ対応付けられたシリーズの組間において対応する各スライス画像を抽出して対比可能なレイアウトで表示することができる。これにより、現在検査のスライス画像に対して対応する過去検査のスライス画像を自動的に追従させて表示することができるので、現在検査と過去検査を比較する際に、ユーザはシリーズやスライス画像を読影し易いように選択する操作に要する手間を低減することができる。

【0066】

なお、上記実施形態において対応付け部２２は、一例としてシリーズを対応付ける際に使用した、シリーズのボリュームデータ間における類似度の算出において、対応付け部２２は、図１２に示すステップＳＴ２１で、画像面の方向が同じか否かを判別したが、本開示の技術はこれに限られない。例えば、ＤＩＣＯＭタグなどの付帯情報に、画像面の方向に関する情報が存在しない場合には、ステップＳＴ２１及びステップＳＴ２３の処理を省略して、ピクセルデータのみで類似度を算出してもよい。

【0067】

また、対応付け部２２によるシリーズ間の対応付け方法は、上記実施形態に限られるものではなく、例えば、特願２０１８−０７４１８８号に記載された対応付け方法を使用することができる。

【0068】

また、上記実施形態において画像抽出部２３は、一例として対応付け部２２によって対応付けられた全てのシリーズ間において、現在シリーズＳｃに含まれる対象画像全てに対して、各々対応する過去シリーズＳｐに含まれるスライス画像を対応画像として抽出したが、本開示の技術はこれに限られない。例えば、図１０に示す画面１４Ａにおいて画面１４Ａの上方に配置する現在検査Ｃで取得された画像が、現在シリーズＳｃのうちのシリーズＳｃ１のみであることが予め画像診断支援装置１において設定されている場合には、画像抽出部２３は、シリーズＳｃ１に含まれる対象画像についてのみ対応画像を抽出してもよい。

【0069】

なお、上記実施形態において対応付け部２２は、一例としてシリーズを対応付ける際に、シリーズのボリュームデータ間における類似度を算出したが、本開示の技術はこれに限られない。対応付け部２２は、現在シリーズＳｃ及び過去シリーズＳｐに含まれる各シリーズから特定の解剖構造を含む領域を検出して、検出した領域の特徴量として画素値分布を比較することにより、類似度を算出してもよい。図１４及び図１５はそれぞれ特定の解剖構造を含む領域を検出してシリーズ間の対応付けを行う方法を説明するための図である。

【0070】

一般的に、Ｔ１強調画像は、おもに縦緩和によってコントラストのついた核磁化分布を画像にしたものであり、Ｔ２強調画像はおもに横緩和によってコントラストのついた核磁化分布を画像にしたものである。Ｔ２強調画像においては、水、血液、及び脂肪などが高信号（白）となり、出血、石灰化、線維組織、及びメラニンなどが低信号（黒）となる。

【0071】

そこで、対応付け部２２は、一例として図１４に示すように、各シリーズすなわち各ボリュームデータから脊髄を含む領域を検出して、検出した脊髄を含む領域の画素値分布つまりヒストグラムを比較する。図１４に示すように、Ｔ２強調像Ｇ２においては、脊髄領域Ｔが高信号を示すが、Ｔ１強調像Ｇ１においては、脊髄領域Ｔは高信号を示さない。従って、検出した脊髄を含む領域のヒストグラムを比較することにより、Ｔ２強調像Ｇ２とＴ１強調像Ｇ１等の他の画像とを区別することができる。

【0072】

具体的には、対応付け部２２は、図１５に示すように、現在シリーズＳｃ１のシリーズＳｃ１の脊髄を含む領域に対して、過去シリーズＳｐに含まれる全てのシリーズの脊髄を含む領域とヒストグラムの比較を行うことにより、シリーズ間での対応付けを決定する。なお、ヒストグラムの比較を行う領域は脊髄を含む領域に限られず、特定の解剖構造を含む領域であればよい。特定の解剖構造は、現在検査Ｃ及び過去検査Ｐにより撮影された被検体の種類に基づいて決定される。このように特定の解剖構造を含む領域のヒストグラムを比較することによりシリーズ間での対応付けを決定することができる。

【0073】

なお、対応付け部２２は、現在シリーズＳｃの各シリーズの入力により、入力されたシリーズと最も類似度が高い過去シリーズＳｐのシリーズを出力するように機械学習がなされた学習済みモデルを有していてもよい。シリーズ間の対応づけの正解データを多数用意することで、上記において図１２から図１５で示して説明したシリーズを対応付ける方法と機械学習とを組み合わせることができる。本開示において学習済みモデルＭは、一例としてSiamese Networkを用いる。図１６は学習済みモデルを説明するための図、図１７はシリーズ間の対応付けの正解データを説明するための図である。

【0074】

学習済みモデルＭは、一例として、図１６に示す構造を有するネットワークであるSiamese Networkを用いる。Siamese Networkは、２つの入力Ｘ１、Ｘ２に対するConvolutional Network出力Ｇｗ（Ｘ１）、Ｇｗ（Ｘ２）の距離が、Ｘ１とＸ２を対応づけたい場合には近づくように、対応づけたくない場合には遠ざかるように学習させることができる。なお、具体的には、S. Chopra, R. Hadsell, Y. LeCun, “Learning a Similarity Metric Discriminatively, with Application to Face Verification”, International Conference on Computer Vision and Pattern Recognition (CVPR), 2005.に記載された技術を使用することができる。

【0075】

学習用の正解データは、例えば図７に示すシリーズ間の対応付けを対応付けの正解とする場合には、２つのシリーズを入力とし、対応する又は対応しないを出力とする。図１７に示すように、シリーズＳｃ１及びシリーズＳｐ１を入力とすると対応するが出力となり、シリーズＳｃ１及びシリーズＳｐ２を入力とすると対応しないが出力となり、シリーズＳｃ１及びシリーズＳｐ３を入力とすると対応しないが出力となる。なお、入力Ｘ１、Ｘ２は、シリーズ（ボリューム）全体のヒストグラムであってもよいし、特定の解剖構造を含む領域のヒストグラムであってもよいし、ピクセルデータそのものであってもよい。以上のように、対応付け部２２は、学習済みモデルＭを使用してシリーズ間の対応付けを行うことができる。

【0076】

なお、本開示の技術において学習済みモデルは、Siamese Networkを用いるものに限られない。学習済みモデルＭは、例えば、１つの対象となるシリーズ、対象となるシリーズに対して対応するシリーズ、及び対象となるシリーズに対して対応しないシリーズの合計３つのシリーズを入力とするTriplet Network 等を用いてもよい。なお、Triplet Networkは、エラード・ホファー(Elad Hoffer),ニル・アイロン(Nir Ailon)著、「DEEP METRIC LEARNING USING TRIPLET NETWORK」、Accepted as a workshop contribution at ICLR 2015に記載された技術を使用することができる。

【0077】

また、上述した実施形態においては、表示制御部２４は、対象画像と対応画像との画像の組を表示部１４の画面１４Ａ上に並列に表示させたが、本開示の表示制御部２４はこれに限られない。表示制御部２４は、対象画像と対応画像との全ての画像の組を表示部１４の画面１４Ｂ上に一組ずつ切り替えて表示させてもよい。図１８は表示部１４のレイアウトの一例を説明するための図である。なお、便宜上、図１８においては紙面上側を上方として、以下説明する

【0078】

表示制御部２４は、現在シリーズＳｃに含まれる各対象画像と、この対象画像と対応する過去シリーズＳｐに含まれる対応画像との画像の組を表示部１４の画面１４Ｂ上に一組ずつ切り替えて表示させる。具体的には一例として、対応付け部２２によって現在検査ＣのシリーズＳｃ１と過去検査ＰのシリーズＳｐ２が対応付けられ、画像抽出部２３によってシリーズＳｃ１の対象画像ａ３に対してシリーズＳｐ２の対応画像ｂ２が抽出された場合には、表示制御部２４は、対象画像ａ３と対応画像ｂ２との画像の組を対比可能なレイアウトとして、一例として図１８に示すように、現在検査Ｃで取得された画像が左側、過去検査Ｐで取得された画像が右側に位置するように各画像の組を左右に並列に表示させる。

【0079】

図１９は表示部１４の画面１４Ｂの一例を説明するための図である。なお、便宜上、図１９においては紙面上側を上方として、以下説明する。表示制御部２４は、一例として図１９に示すように、現在検査Ｃで取得した１枚の対象画像と、この対象画像に対応する過去検査Ｐで取得された対応画像とを表示部１４の画面１４Ｂ上に左右に並列に表示させる。表示制御部２４は、例えば、ユーザが入力部１５を操作する度に、画面１４Ｂ上に表示される画像の組を切り替えて表示させる。表示制御部２４は、全ての対応画像と対象画像との画像の組を順次切り替えて表示部１４に表示させる。

【0080】

なお、画面１４Ｂ上に順次表示する対象画像は、ユーザによって適宜変更することができる。すなわち、全ての対象画像であってもよいし、ユーザによって予め選択された対象画像のみであってもよい。どちらの場合であっても、順次表示される対象画像に対して画像抽出部２３により抽出された対応画像が、対象画像と共に画面１４Ｂに表示される。

【0081】

本開示の表示制御部２４は、例えばユーザが入力部１５を操作することにより、全画像表示機能及び全画面表示機能等が選択された場合に、図１９に示す画面１４Ｂの表示をさせ、全画像表示機能及び全画面表示機能等の選択が解除された場合に、図１０に示す画面１４Ａの表示をさせるようにしてもよい。

【0082】

また、上述した実施形態においては、一例として各シリーズを３次元画像として説明したが、本開示の技術は３次元画像に限られず、例えば連続して撮影された複数の２次元画像及び４次元画像をシリーズとすることもできる。ここで４次元画像は、心臓の三次元動画を意味する。

【0083】

また、上述した実施形態においては、本開示の「第１の複数の画像データ群」及び「第２の複数の画像データ群」を同一の被検体に対して異なる時期でそれぞれ撮影して取得された現在シリーズＳｃ及び過去シリーズＳｐとしたが、本開示の技術はこれに限られない。例えば、「第１の複数の画像データ群」を現在シリーズＳｃとし、「第２の複数の画像データ群」を被検体の様々な解剖面に沿った断面画像を連続的に貼り合わせて作った地図であるアトラスの画像を複数含むシリーズとしてもよいし、「第２の複数の画像データ群」を「第１の複数の画像データ群」とは異なる被検体に対して撮影して取得された複数のシリーズとしてもよい。

【0084】

また、上述した実施形態において、例えば、取得部２１、対応付け部２２、画像抽出部２３、及び表示制御部２４といった各種の処理を実行する処理部（processing unit）のハードウェア的な構造としては、次に示す各種のプロセッサ（processor）を用いることができる。上記各種のプロセッサには、上述したように、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵに加えて、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device :PLD）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。

【0085】

１つの処理部は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせまたはＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。

【0086】

複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアント及びサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアとの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:SoC）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの１つ以上を用いて構成される。

【0087】

さらに、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（circuitry）を用いることができる。

【符号の説明】

【0088】

１ 画像診断支援装置
２ ３次元画像撮影装置
３ 画像保管サーバ
４ ネットワーク
１１ ＣＰＵ
１２ メモリ
１３ ストレージ
１４ 表示部
１５ 入力部
２１ 取得部
２２ 対応付け部
２３ 画像抽出部
２４ 表示制御部
Ｃ 現在検査
Ｐ 過去検査
Ｓｃ 現在シリーズ
Ｓｐ 過去シリーズ
ａ 対象画像（スライス画像）
ｂ 対応画像（スライス画像）
Ｔ 脊髄領域
Ｍ 学習済みモデル

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】