知財求人 - 知財ポータルサイト「IP Force」
特開2024-73089医用情報処理装置、医用情報処理方法、プログラム及び情報処理装置
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024073089
(43)【公開日】2024-05-29
(54)【発明の名称】医用情報処理装置、医用情報処理方法、プログラム及び情報処理装置
(51)【国際特許分類】
A61B 6/03 20060101AFI20240522BHJP
A61B 5/055 20060101ALI20240522BHJP
A61B 5/00 20060101ALI20240522BHJP
【ＦＩ】
A61B6/03 360D
A61B6/03 360C
A61B5/055 380
A61B5/00 G
【審査請求】未請求
【請求項の数】12
【出願形態】ＯＬ
(21)【出願番号】P 2022184095
(22)【出願日】2022-11-17
(71)【出願人】
【識別番号】594164542
【氏名又は名称】キヤノンメディカルシステムズ株式会社
(74)【代理人】
【識別番号】110001771
【氏名又は名称】弁理士法人虎ノ門知的財産事務所
(72)【発明者】
【氏名】青山 岳人
【テーマコード（参考）】
4C093
4C096
4C117
【Ｆターム（参考）】
4C093AA22
4C093DA02
4C093FA44
4C093FF22
4C093FF23
4C093FF30
4C093FF46
4C093FG04
4C096AC04
4C096AD14
4C096AD24
4C096DB06
4C096DC28
4C096DC30
4C096DC37
4C096DD08
4C117XB09
4C117XE44
4C117XE45
4C117XE46
4C117XG14
4C117XK05
4C117XK13
4C117XK18
4C117XK19
4C117XK20
4C117XK22
4C117XR07
4C117XR08
4C117XR09
4C117XR10
(57)【要約】
【課題】シミュレーションの実施に用いる注目格子を容易に特定すること。
【解決手段】実施形態の医用情報処理装置は、対象臓器を含む医用画像データを取得する画像データ取得部と、前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得する格子点群データ取得部と、前記医用画像データを表示させる表示制御部と、前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部とを備える。
【選択図】図２
【解決手段】実施形態の医用情報処理装置は、対象臓器を含む医用画像データを取得する画像データ取得部と、前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得する格子点群データ取得部と、前記医用画像データを表示させる表示制御部と、前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部とを備える。
【選択図】図２
【特許請求の範囲】
【請求項1】
対象臓器を含む医用画像データを取得する画像データ取得部と、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得する格子点群データ取得部と、
前記医用画像データを表示させる表示制御部と、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部と
を備える、医用情報処理装置。
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得する格子点群データ取得部と、
前記医用画像データを表示させる表示制御部と、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部と
を備える、医用情報処理装置。
【請求項2】
前記特定部は、前記医用画像データの表示範囲に関する表示条件に基づいて、前記注目格子を特定する、請求項１に記載の医用情報処理装置。
【請求項3】
前記表示範囲に関する表示条件は、表示された前記医用画像データの表示角度と、スライス方向の位置とを含む、請求項２に記載の医用情報処理装置。
【請求項4】
前記特定部は、前記表示範囲に関する表示条件と、治療デバイスのサイズとに基づいて、前記注目格子を特定する、請求項３に記載の医用情報処理装置。
【請求項5】
前記表示範囲に関する表示条件は、表示された前記医用画像データの中心位置を含む、請求項２に記載の医用情報処理装置。
【請求項6】
前記表示範囲に関する表示条件は、表示された前記医用画像データの拡大率を含む、請求項４に記載の医用情報処理装置。
【請求項7】
前記特定部は、前記医用画像データの表示色に関する表示条件に基づいて、前記注目格子を特定する、請求項１に記載の医用情報処理装置。
【請求項8】
前記表示制御部は、前記医用画像データに基づく複数の画像を表示させ、
前記特定部は、表示されている前記複数の画像の中から注目画像を選択し、選択した前記注目画像の表示条件に基づいて前記注目格子を特定する、請求項１に記載の医用情報処理装置。
前記特定部は、表示されている前記複数の画像の中から注目画像を選択し、選択した前記注目画像の表示条件に基づいて前記注目格子を特定する、請求項１に記載の医用情報処理装置。
【請求項9】
特定された前記注目格子を計算条件として物理シミュレーションを実施する処理部を更に備える、請求項１に記載の医用情報処理装置。
【請求項10】
対象臓器を含む医用画像データを取得し、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得し、
前記医用画像データを表示させ、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する
ことを含む、医用情報処理方法。
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得し、
前記医用画像データを表示させ、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する
ことを含む、医用情報処理方法。
【請求項11】
対象臓器を含む医用画像データを取得し、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得し、
前記医用画像データを表示させ、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する
各処理をコンピュータに実行させる、プログラム。
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得し、
前記医用画像データを表示させ、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する
各処理をコンピュータに実行させる、プログラム。
【請求項12】
対象物を含む画像データを取得する画像データ取得部と、
前記画像データと対応付けられた、前記対象物に関する格子点群データを取得する格子点群データ取得部と、
前記画像データを表示させる表示制御部と、
前記画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部と
を備える、情報処理装置。
前記画像データと対応付けられた、前記対象物に関する格子点群データを取得する格子点群データ取得部と、
前記画像データを表示させる表示制御部と、
前記画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部と
を備える、情報処理装置。
【発明の詳細な説明】
【技術分野】
【0001】
本明細書及び図面に開示の実施形態は、医用情報処理装置、医用情報処理方法、プログラム及び情報処理装置に関する。
【背景技術】
【0002】
従来、様々な用途において、臓器等の対象物に関する格子点群データを用いた物理シミュレーションが実施されている。例えば、治療前において、治療の対象となる対象臓器に関する格子点群データを用いて物理シミュレーションを実施することにより、治療後における対象臓器の状態を推定することができる。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開平１０－１１１９５８号公報
【特許文献2】特開２０１７－１２４２８号公報
【特許文献3】特開２０２２－７３３６３号公報
【特許文献4】特開２０２０－１８３３１５号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
本明細書及び図面に開示の実施形態が解決しようとする課題の一つは、物理シミュレーションの実施に用いる注目格子を容易に特定することである。ただし、本明細書及び図面に開示の実施形態により解決しようとする課題は上記課題に限られない。後述する実施形態に示す各構成による各効果に対応する課題を他の課題として位置づけることもできる。
【課題を解決するための手段】
【0005】
実施形態の医用情報処理装置は、取得部と、格子点群データ取得部と、表示制御部と、特定部とを備える。取得部は、対象臓器を含む医用画像データを取得する。格子点群データ取得部は、前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得する。表示制御部は、前記医用画像データを表示させる。特定部は、前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する。
【図面の簡単な説明】
【0006】
【発明を実施するための形態】
【0007】
以下、添付図面を参照しながら、医用情報処理装置、医用情報処理方法、プログラム及び情報処理装置の実施形態について詳細に説明する。
【0008】
本実施形態では、医用情報処理装置２０を含んだ医用情報処理システム１を例として説明する。例えば、医用情報処理システム１は、図１に示すように、医用画像診断装置１０、医用情報処理装置２０及び画像保管装置３０を有する。図１は、実施形態に係る医用情報処理システム１の構成の一例を示すブロック図である。医用画像診断装置１０、医用情報処理装置２０及び画像保管装置３０は、ネットワークＮＷを介して相互に接続される。
【0009】
ネットワークＮＷを介して接続可能であれば、医用情報処理システム１に含まれる各装置が設置される場所は任意である。例えば、画像保管装置３０は、医用画像診断装置１０及び医用情報処理装置２０が設置されている病院とは異なる病院、或いは他の施設内に設置されていてもよい。即ち、ネットワークＮＷは、施設内で閉じたローカルネットワークにより構成されてもよいし、インターネットを介したネットワークであってもよい。
【0010】
医用画像診断装置１０は、被検体を撮像して医用画像データを収集する装置である。なお、本明細書において扱う各種データは、典型的にはデジタルデータである。医用画像診断装置１０は、例えば、Ｘ線診断装置、Ｘ線ＣＴ（Computed Tomography）装置、ＭＲＩ（Magnetic Resonance Imaging）装置、超音波診断装置、ＳＰＥＣＴ（Single Photon Emission Computed Tomography）装置、ＰＥＴ（Positron Emission computed Tomography）装置等の医用モダリティである。なお、図１においては単一の医用画像診断装置１０を示すが、医用情報処理システム１は、複数の医用画像診断装置１０を含んでもよい。また、医用情報処理システム１は、複数種類の医用画像診断装置１０を含んでもよい。例えば、医用情報処理システム１は、医用画像診断装置１０として、Ｘ線ＣＴ装置とＭＲＩ装置とを含んでもよい。
【0011】
画像保管装置３０は、医用画像診断装置１０によって収集された医用画像データを保管する画像データベースである。例えば、画像保管装置３０は、任意の記憶装置を装置内又は装置外に備え、ネットワークＮＷを介して医用画像診断装置１０から取得した医用画像データを、データベースの形態で管理する。例えば、画像保管装置３０は、ＰＡＣＳ（Picture Archiving and Communication System）のサーバである。画像保管装置３０は、医用情報処理システム１とネットワークＮＷを介して接続されたサーバ群（クラウド）により実現されることとしてもよい。
【0012】
医用情報処理装置２０は、医用画像診断装置１０によって収集された医用画像データを取得し、後述する各種の処理を行なう装置である。例えば、医用情報処理装置２０は、図１に示すように、通信インタフェース２１、入力インタフェース２２、ディスプレイ２３、メモリ２４及び処理回路２５を備える。
【0013】
通信インタフェース２１は、医用情報処理装置２０と、ネットワークＮＷを介して接続された他の装置との間で送受信される各種データの伝送及び通信を制御する。具体的には、通信インタフェース２１は、処理回路２５に接続されており、他の装置から受信したデータを処理回路２５に送信、又は、処理回路２５から受信したデータを他の装置に送信する。例えば、通信インタフェース２１は、ネットワークカードやネットワークアダプタ、ＮＩＣ（Network Interface Controller）等によって実現される。
【0014】
入力インタフェース２２は、ユーザからの各種の入力操作を受け付け、受け付けた入力操作を電気信号に変換して処理回路２５に出力する。例えば、入力インタフェース２２は、マウスやキーボード、トラックボール、スイッチ、ボタン、ジョイスティック、操作面へ触れることで入力操作を行うタッチパッド、表示画面とタッチパッドとが一体化されたタッチスクリーン、光学センサを用いた非接触入力回路、音声入力回路等により実現される。なお、入力インタフェース２２は、医用情報処理装置２０本体と無線通信可能なタブレット端末等で構成されることにしても構わない。また、入力インタフェース２２は、モーションキャプチャによりユーザからの入力操作を受け付ける回路であっても構わない。一例を挙げると、入力インタフェース２２は、トラッカーを介して取得した信号やユーザについて収集された画像を処理することにより、ユーザの体動や視線等を入力操作として受け付けることができる。また、入力インタフェース２２は、マウスやキーボード等の物理的な操作部品を備えるものだけに限られない。例えば、医用情報処理装置２０とは別体に設けられた外部の入力機器から入力操作に対応する電気信号を受け取り、この電気信号を処理回路２５へ出力する電気信号の処理回路も、入力インタフェース２２の例に含まれる。
【0015】
ディスプレイ２３は、例えば、液晶ディスプレイやＣＲＴ（Cathode Ray Tube）ディスプレイである。ディスプレイ２３は、デスクトップ型でもよいし、医用情報処理装置２０本体と無線通信可能なタブレット端末等で構成されることにしても構わない。ディスプレイ２３における表示の制御については後述する。
【0016】
メモリ２４は、例えば、ＲＡＭ（Random Access Memory）、フラッシュメモリ等の半導体メモリ素子、ハードディスク、光ディスク等により実現される。例えば、メモリ２４は、医用画像データを記憶する。また、メモリ２４は、医用情報処理装置２０に含まれる回路がその機能を実現するためのプログラムを記憶する。
【0017】
処理回路２５は、制御機能２５ａ、画像データ取得機能２５ｂ、格子点群データ取得機能２５ｃ、表示制御機能２５ｄ、特定機能２５ｅ及び処理機能２５ｆを実行することで、医用情報処理装置２０全体の動作を制御する。画像データ取得機能２５ｂは、画像データ取得部の一例である。格子点群データ取得機能２５ｃは、格子点群データ取得部の一例である。表示制御機能２５ｄは、表示制御部の一例である。特定機能２５ｅは、特定部の一例である。処理機能２５ｆは、処理部の一例である。
【0018】
例えば、処理回路２５は、制御機能２５ａに対応するプログラムをメモリ２４から読み出して実行することにより、入力インタフェース２２を介してユーザから受け付けた各種の入力操作に基づいて、画像データ取得機能２５ｂ、格子点群データ取得機能２５ｃ、表示制御機能２５ｄ、特定機能２５ｅ及び処理機能２５ｆといった各種の機能を制御する。
【0019】
また、処理回路２５は、画像データ取得機能２５ｂに対応するプログラムをメモリ２４から読み出して実行することにより、対象臓器を含む医用画像データを取得する。また、処理回路２５は、格子点群データ取得機能２５ｃに対応するプログラムをメモリ２４から読み出して実行することにより、前記医用画像データと対応付けられた前記対象臓器に関する格子点群データを取得する。また、処理回路２５は、表示制御機能２５ｄに対応するプログラムをメモリ２４から読み出して実行することにより、前記医用画像データを表示させる。また、処理回路２５は、特定機能２５ｅに対応するプログラムをメモリ２４から読み出して実行することにより、前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する。また、処理回路２５は、処理機能２５ｆに対応するプログラムをメモリ２４から読み出して実行することにより、特定された前記注目格子を計算条件として物理シミュレーションを実施する。画像データ取得機能２５ｂ、格子点群データ取得機能２５ｃ、表示制御機能２５ｄ、特定機能２５ｅ及び処理機能２５ｆによる処理の詳細については後述する。
【0020】
図１に示す医用情報処理装置２０においては、各処理機能がコンピュータによって実行可能なプログラムの形態でメモリ２４へ記憶されている。処理回路２５は、メモリ２４からプログラムを読み出して実行することで各プログラムに対応する機能を実現するプロセッサである。換言すると、プログラムを読み出した状態の処理回路２５は、読み出したプログラムに対応する機能を有することとなる。
【0021】
なお、図１においては単一の処理回路２５にて、制御機能２５ａ、画像データ取得機能２５ｂ、格子点群データ取得機能２５ｃ、表示制御機能２５ｄ、特定機能２５ｅ及び処理機能２５ｆが実現するものとして説明したが、複数の独立したプロセッサを組み合わせて処理回路２５を構成し、各プロセッサがプログラムを実行することにより機能を実現するものとしても構わない。また、処理回路２５が有する各処理機能は、単一又は複数の処理回路に適宜に分散又は統合されて実現されてもよい。
【0022】
また、処理回路２５は、ネットワークＮＷを介して接続された外部装置のプロセッサを利用して、機能を実現することとしてもよい。例えば、処理回路２５は、メモリ２４から各機能に対応するプログラムを読み出して実行するとともに、医用情報処理装置２０とネットワークＮＷを介して接続されたサーバ群（クラウド）を計算資源として利用することにより、図１に示す各機能を実現する。
【0023】
以上、医用情報処理装置２０を含んだ医用情報処理システム１の構成例について説明した。かかる構成の下、医用情報処理装置２０における処理回路２５は、物理シミュレーションの実施に用いる注目格子を容易に特定する。以下、図２のフローチャートに沿って、処理回路２５が行なう処理について説明する。図２は、実施形態に係る医用情報処理装置２０の処理回路２５による処理の一例を示すフローチャートである。
【0024】
まず、画像データ取得機能２５ｂは、対象臓器を含む医用画像データを取得する（ステップＳ１）。画像データ取得機能２５ｂは、医用画像診断装置１０によって撮像された医用画像データをネットワークＮＷを介して受信し、メモリ２４に記憶させる。ここで、画像データ取得機能２５ｂは、医用画像診断装置１０から直接的に医用画像データを取得してもよいし、画像保管装置３０等の他の装置を介して医用画像データを取得してもよい。
【0025】
画像データ取得機能２５ｂが取得する医用画像データは、撮像範囲に対象臓器を含み、対象臓器の形態情報が格納されている種類の画像であれば、どのような種類の画像であってもよい。例えば、画像データ取得機能２５ｂは、対象臓器を含む医用画像データとして、Ｘ線画像データ、ＣＴ画像データ、超音波画像データ、ＭＲＩ画像データ、ＰＥＴ画像データ、ＳＰＥＣＴ画像データ等を取得することができる。なお、対象臓器を含む医用画像データは、３次元画像であってもよいし、２次元画像であってもよい。また、画像データ取得機能２５ｂは、対象臓器を含む医用画像データとして、２次元画像を時間方向に複数撮像した時系列の複数の２次元画像（３次元画像）を取得してもよい。また、画像データ取得機能２５ｂは、対象臓器を含む医用画像データとして、３次元画像を時間方向に複数撮像した時系列の複数の３次元画像（４次元画像）を取得してもよい。
【0026】
一例を挙げると、画像データ取得機能２５ｂは、入力インタフェース２２を介してユーザから受け付けた指示をトリガとして、医用画像データの取得を行なう。或いは、画像データ取得機能２５ｂは、画像保管装置３０を監視しておき、画像保管装置３０に新しく医用画像データが格納されたことをトリガとして、当該医用画像データの取得を行なってもよい。或いは、画像データ取得機能２５ｂは、画像保管装置３０に新しく格納された医用画像データが、所定の条件を満足するか否かを判定し、満足する場合に当該医用画像データの取得を行なってもよい。例えば、画像データ取得機能２５ｂは、所定の臓器を含む医用画像データが画像保管装置３０に新しく格納されたことをトリガとして、当該医用画像データの取得を行なってもよい。
【0027】
なお、以下の図２に沿った説明では、医用画像データとして、３次元画像であるＣＴ画像データを取得するケースについて説明する。また、以下の図２に沿った説明では、一例として、僧帽弁の弁膜症患者が被検体であり、当該被検体の僧帽弁を対象臓器として処理を行なうケースについて説明する。この場合、画像データ取得機能２５ｂは、ステップＳ１において、被検体の僧帽弁を含むＣＴ画像データを取得する。更に、ステップＳ２～ステップＳ７では、ＣＴ画像から得られる治療前の僧房弁の形態情報から、経皮的僧帽弁クリップ術（MitraClipとも呼ばれる）治療後の僧房弁の形態情報及び血行動態情報をシミュレーションする状況を例にして説明する。勿論、実施形態はこれに限定されるものではなく、医用画像データの種類、対象臓器、シミュレーションの目的等については種々の変形が可能である。
【0028】
次に、格子点群データ取得機能２５ｃは、ステップＳ１で取得された医用画像データと対応付けられた、対象臓器に関する格子点群データを取得する（ステップＳ２）。格子点群データは、例えば、複数の格子点それぞれの位置座標を含むデータである。格子点群データは、複数の格子点それぞれの位置座標のみのデータであってもよいし、複数の格子点を３次元空間に配置した３次元画像であってもよい。このような３次元画像の例としては、ＣＴ画像データに対して複数の格子点それぞれの位置座標を対応付けたデータ、隣接する格子点を直線又は曲線で接続したメッシュ等が挙げられる。格子点群データの一例を図３Ａ及び図３Ｂに示す。図３Ａ及び図３Ｂでは、格子点群データをメッシュの形態で図示している。
【0029】
格子点群データの生成方法について特に限定されるものではないが、一例として、ステップＳ１で取得した医用画像データから生成することが可能である。具体的には、格子点群データ取得機能２５ｃは、ＣＴ画像データから、僧帽弁の解剖構造を示す僧帽弁領域を特定し、特定した僧帽弁領域から既存技術を用いて格子点群データを生成することができる。例えば、格子点群データ取得機能２５ｃは、ＣＴ画像データのうちの僧帽弁領域からＶＲ（Volume Rendering）画像を生成し、ＶＲ画像上に一定の間隔で格子点を配置することで、格子点群データを生成する。
【0030】
例えば、格子点群データ取得機能２５ｃは、ＣＴ画像データ上において、僧帽弁を示す画素の座標情報を取得することにより、僧帽弁領域を特定する。一例を挙げると、表示制御機能２５ｄは、ＣＴ画像データに基づくＭＰＲ（Multi Planar Reconstruction）画像等の表示用画像をディスプレイ２３に表示させる。そして、格子点群データ取得機能２５ｃは、ディスプレイ２３の表示を参照したユーザから、僧帽弁領域の位置を指定する入力操作を入力インタフェース２２を介して受け付けることにより、僧帽弁領域を特定する。即ち、僧帽弁領域の特定は、手動で行われてもよい。
【0031】
別の例を挙げると、格子点群データ取得機能２５ｃは、既知の領域抽出技術により、ＣＴ画像データに描出される解剖学的構造に基づいて僧帽弁領域を特定してもよい。既知の領域抽出技術としては、ＣＴ値等の画素値に基づく判別分析法（大津の二値化法とも呼ばれる）、領域拡張法、スネーク法、グラフカット法、ミーンシフト法等を例示することができる。
【0032】
その他、格子点群データ取得機能２５ｃは、任意の方法で僧帽弁領域を特定することができる。例えば、格子点群データ取得機能２５ｃは、深層学習等の機械学習技術により僧帽弁領域を特定することもできる。例えば、格子点群データ取得機能２５ｃは、事前に準備された学習用データに基づいて構築される僧帽弁領域の形状モデルを用いて、僧帽弁領域を特定してもよい。
【0033】
上述の通り、医用画像データに基づいて格子点群データを取得した場合、医用画像データに対する格子点群データの位置関係は既知であることから、格子点群データ取得機能２５ｃは、医用画像データと格子点群データとを対応付けることができる。或いは、格子点群データ取得機能２５ｃは、医用画像データと対応付けられた状態の格子点群データを生成してもよい。
【0034】
医用画像データに基づいて格子点群データを取得する例について説明したが、実施形態はこれに限定されるものではない。例えば、格子点群データ取得機能２５ｃは、僧帽弁の一般的な形状を示す僧帽弁モデルを、被検体の情報（年齢、疾患の種類等）に応じて変形させ、変形後の僧帽弁モデルから格子点群データを生成してもよい。また、例えば、格子点群データ取得機能２５ｃは、僧帽弁モデルを、ステップＳ１で取得された医用画像データに基づいて変形させ、変形後の僧帽弁モデルから格子点群データを生成してもよい。この場合、格子点群データ取得機能２５ｃは、例えばパターンマッチング等の任意の手法で、医用画像データと格子点群データとの対応付けを行なうことができる。
【0035】
僧房弁に関する格子点群データの一例を図４Ａに示す。また、一般的な僧帽弁の構造を図４Ｂに示す。図４Ａでは、僧帽弁の前尖に対応した前尖領域を１９列９行の格子点群で示し、僧帽弁の後尖に対応した後尖領域を２５列９行の格子点群で示している。勿論、図４Ａは一例であり、格子点群データの具体的な構成（格子点の数、配置、配列等）について特に限定されるものではなく、適宜変更することとして構わない。
【0036】
図４Ａでは、前尖領域と後尖領域との境界であって行方向の一端を原点とし、行方向の座標を「ｘ」、列方向の座標を「ｙ」として、各格子点に対して識別子（ｘ，ｙ）を付与している。この場合、識別子（８，０）は前交連部を示し、識別子（８，１８）は後交連部を示す。また、前尖領域と後尖領域とにおける最も外側に位置する部位（図４Ａにおいてｘ座標が「０」となる位置）を弁輪部と称する。また、前尖領域と後尖領域とにおける最も内側に位置する部位（図４Ａにおいてｘ座標が「８」となる位置）を弁先端部と称す。
【0037】
次に、表示制御機能２５ｄは、表示条件を設定し（ステップＳ３）、設定した表示条件で医用画像データを表示させる（ステップＳ４）。表示条件の例としては、表示する画像の中心位置や角度といった表示範囲に関する条件、ウィンドウレベル（Window level：ＷＬ）やウィンドウ幅（Window Width：ＷＷ）といった表示色に関する条件を挙げることができる。
【0038】
表示条件の設定及び医用画像データの表示例について、図５Ａを用いて説明する。図５Ａは、例えば、表示制御機能２５ｄによる制御のもとでディスプレイ２３に表示される表示画面である。図５Ａの表示画面はあくまで一例であり、後述する各種の機能については適宜変更・省略が可能である。
【0039】
図３の領域３０１は、各種機能に対応するアイコンやボタンが配置されたメニューバーである。ユーザは、領域３０１に配置されたアイコンをマウス等の入力インタフェース２２によって操作することにより、当該機能を起動することができる。
【0040】
アイコン３０１ａは、領域３０２の表示・非表示を切り替えるボタンである。即ち、アイコン３０１ａが選択されることにより、表示制御機能２５ｄは、サムネイル画像を表示させる領域３０２の表示・非表示を切り替える。例えば、領域３０２が表示された状態でアイコン３０１ａが押下されると、表示制御機能２５ｄは、領域３０２を非表示とする。ここで、表示制御機能２５ｄは、非表示となった領域３０２の大きさに合わせて、領域３０３や領域３０４を拡大することとしてもよい。
【0041】
アイコン３０１ｂは、領域３０３の表示形態を変更するボタンである。例えば、表示制御機能２５ｄは、アイコン３０１ｂに対する操作に応じて、領域３０３の分割数を変更する。例えば、図５Ａでは、領域３０３に対して、２行２列の４つの画像表示領域（３０１ａ～３０１ｄ）が設定されている。表示制御機能２５ｄは、アイコン３０１ｂに対する操作に応じて、領域３０３における画像表示領域の行又は列の数を変更することができる。
【0042】
また、アイコン３０１ｂに対する操作に応じて、領域３０３における各画像表示領域の大きさを変更可能としてもよい。例えば、予めいくつかのパターンの画像表示領域の分割数や大きさのセットが、プリセットとして登録される。表示制御機能２５ｄは、アイコン３０１ｂが押下されると、予め登録されたセットを選択するためのインタフェースを表示させ、当該インタフェースに対する選択操作を受け付けることで、領域３０３の表示形態を設定する。表示制御機能２５ｄは、新たなプリセットの登録をユーザから受け付けるためのインタフェースを表示させることもできる。
【0043】
アイコン３０１ｃ～３０１ｇは、マウスの操作系を割り当てる機能のボタン群であり、例えば、各アイコンが選択されることにより、表示制御機能２５ｄは、マウスの左クリック及びドラッグの操作系を、選択されたアイコンに対応した操作系に割り当てるように制御する。
【0044】
例えば、アイコン３０１ｃは、画像をスライス方向に連続的に表示させるブラウズ操作系を、マウスの左クリック及びドラッグの操作系に割り当てるためのボタンである。アイコン３０１ｃが選択され、また、マウスの左クリック及びドラッグ操作が行われた際、表示制御機能２５ｄは、領域３０３の画像表示領域のうちクリックされた領域に表示されているスライス画像を、クリック位置及び／又はドラッグ方向に基づいて、当該領域におけるスライス方向に連続的に切り替える。
【0045】
アイコン３０１ｄは、画像の表示色（ＣＴ画像データでは、例えば、ＷＬやＷＷなど）を変更する操作系を、マウスの左クリック及びドラッグの操作系に割り当てるためのボタンである。アイコン３０１ｄが選択され、また、マウスの左クリック及びドラッグ操作が行われた際、表示制御機能２５ｄは、領域３０３の画像表示領域のうちクリックされた領域に表示されている画像の表示色を、クリック位置及び／又はドラッグ方向に基づいて変更する。
【0046】
アイコン３０１ｅは、画像を平行移動させるための操作系を、マウスの左クリック及びドラッグの操作系に割り当てるためのボタンである。アイコン３０１ｅが選択され、また、マウスの左クリック及びドラッグ操作が行われた際、表示制御機能２５ｄは、領域３０３の画像表示領域のうちクリックされた領域に表示されているスライス画像の表示位置を、クリック位置及び／又はドラッグ方向に基づいて変更する。
【0047】
アイコン３０１ｆは、画像の拡大率を変更する操作系を、マウスの左クリック及びドラッグの操作系に割り当てるためのボタンである。アイコン３０１ｆが選択され、また、マウスの左クリック及びドラッグ操作が行われた際、表示制御機能２５ｄは、領域３０３の画像表示領域のうちクリックされた領域に表示されているスライス画像の拡大率を、クリック位置及び／又はドラッグ方向に基づいて変更する。
【0048】
アイコン３０１ｇは、画像を回転させる操作系等をマウスの左クリック及びドラッグの操作系に割り当てるためのボタンである。アイコン３０１ｆが選択され、また、マウスの左クリック及びドラッグ操作が行われた際、表示制御機能２５ｄは、領域３０３の画像表示領域のうちクリックされた領域に表示されているスライス画像の表示角度（画面上における上側下側などの方向）を、クリック位置及び／又はドラッグ方向に基づいて変更する。
【0049】
なお、上記した機能を割り当てる操作は、マウスの左クリック及びドラッグの操作系に限られるものではない。例えば、右クリック及びドラッグの操作系や、マウスホイールクリック及びドラッグの操作系、右と左との同時クリック及びドラッグの操作系に、上記した機能が割り当てられてもよい。
【0050】
また、マウスを動かす量（ドラッグの操作量）に対する、ブラウズ操作の際のスライス送りのスピード又は量や、拡大率の変更量、平行移動の移動量、表示色の変化量、回転量を設定できるようにしてもよい。また、当該アイコンを選択する際のマウス操作に応じて割り当てを変更するようにしてもよい。例えば、左クリックで当該アイコンを選択した場合は左クリックの操作系に当該アイコンに対応する操作系を割り当て、右クリックで当該アイコンを選択した場合は右クリックの操作系に当該アイコンに対応する操作系を割り当て、右と左との同時クリックで当該アイコンを選択した場合は右と左との同時クリックの操作系に当該アイコンに対応する操作系を割り当て、マウスホイールクリックで当該アイコンを選択した場合はマウスホイールクリックの操作系に当該アイコンに対応する操作系を割り当てるように制御してもよい。
【0051】
アイコン３０１ｈ～３０１ｎは、各種図形の描画及び計測機能に対するアイコンであり、当該アイコンが選択されることにより、表示制御機能２５ｄは、各種図形の描画及び計測機能を実行可能とするように制御する。
【0052】
アイコン３０１ｈは、ルーラー機能を示す。アイコン３０１ｈを選択することにより、例えばマウスの左クリックがルーラー機能に割り当てられる。ルーラー機能は、左クリックによって画像表示領域上の２点が選択されることにより、当該２点間の距離を算出し表示する機能である。例えば、画像表示領域上の２点が選択された際、表示制御機能２５ｄ
は、画像上に直線を描画し、当該直線の長さを計測して表示する。なお、直線の始点及び終点の位置や色、太さ、計測値のフォントなどの表示形態は、ユーザ操作により調整できる。ルーラー機能により算出される距離は、拡大率に基づいて算出した実空間における距離であってもよいし、画面上の距離であってもよいし、２点間に存在する画素数であってもよい。
は、画像上に直線を描画し、当該直線の長さを計測して表示する。なお、直線の始点及び終点の位置や色、太さ、計測値のフォントなどの表示形態は、ユーザ操作により調整できる。ルーラー機能により算出される距離は、拡大率に基づいて算出した実空間における距離であってもよいし、画面上の距離であってもよいし、２点間に存在する画素数であってもよい。
【0053】
アイコン３０１ｉは、角度算出機能を示す。アイコン３０１ｉを選択することにより、例えばマウスの左クリックが角度算出機能に割り当てられる。角度算出機能は、左クリックによって画像表示領域上の３点が選択されることにより、当該３点がなす鋭角又は鈍角の角度を算出し表示する機能である。３点がなす角度は最大で３か所存在するが、全ての位置における鋭角又は鈍角の角度を算出してもよいし、各点を設定する順に基づいて角度を算出する位置を決定してもよい。例えば、２点目の位置における鋭角又は鈍角の角を算出することとしてもよい。例えば、画像表示領域上の３点が選択された際、表示制御機能２５ｄは、画像上に２本の直線を描画し、当該２本の直線がなす鋭角又は鈍角の角度を計測して表示する。なお、２つの直線それぞれの始点及び終点の位置や色、太さ、計測値のフォントなどの表示形態は、ユーザ操作により調整できる。
【0054】
アイコン３０１ｊは、楕円表示機能を示す。アイコン３０１ｊを選択することにより、例えばマウスの左クリックが楕円表示機能に割り当てられる。楕円表示機能は、左クリックによって画像表示領域上の２点が選択されることにより、当該２点を焦点とする楕円を描画する機能である。また、楕円表示機能は、描画された楕円の周長や内部の面積や内部の画素値の統計量（平均値や最大値、最小値等）を算出して表示する機能である。なお、楕円の描画方法はどのような方法であってもよい。例えば、楕円の中心を指定し、その後に長軸と短軸とを設定するように促してもよい。また、楕円の中心位置や長径、短径、色、太さ、計測値のフォントなどの表示形態は、ユーザ操作により調整できる。
【0055】
アイコン３０１ｋは、矢印表示機能を示す。アイコン３０１ｋを選択することにより、例えばマウスの左クリックが矢印表示機能に割り当てられる。矢印表示機能は、左クリックによって画像表示領域上の２点が選択されることにより矢印の始点及び終点を設定し、始点から終点までを結ぶ直線と始点から終点の方向を示す印とを組み合わせた矢印を表示する機能である。矢印の始点及び終点の位置や色、太さ、先端部の形態などの表示形態は、ユーザ操作により調整できる。
【0056】
アイコン３０１ｌは、文字列表示機能を示す。アイコン３０１ｌを選択することにより、例えばマウスの左クリックが文字列表示機能に割り当てられる。文字列表示機能は、左クリックによって画像表示領域上の１点が選択されることにより、当該１点の周囲に文字列を設定する領域を設定し、ユーザによる入力インタフェース２２（キーボード等）の操作に対応する文字列を当該領域に表示する。なお、表示する文字列のフォントやサイズや色などの条件を設定できるようにしてもよい。なお、文字列を表示する位置や、文字列のフォント、フォントサイズ、フォントの色、背景の色などの表示形態はユーザ操作により調整できる。
【0057】
アイコン３０１ｍは、閉曲線描画機能を示す。アイコン３０１ｍを選択することにより、例えばマウスの左クリックが閉曲線描画機能に割り当てられる。閉曲線描画機能は、例えば左クリックによって画像表示領域上の任意の数の点（点群）が選択されることにより、当該点群を通る閉曲線を算出して描画する機能である。点群から閉曲線を算出する方法としては、既知の手法を用いることができる。例えば、スプライン補間処理を用いることにより、点群から閉曲線を算出することができる。また、閉曲線描画機能は、描画した閉曲線の周長や閉曲線の内部の面積や内部の画素値の統計量（平均値や最大値、最小値等）を算出し、表示する機能である。閉曲線の中心位置や色や太さ、計測値のフォントなどの表示形態はユーザ操作により調整できる。その他、予め定める形（円、楕円、長方形、正方形、三角形等）を設定可能として当該形の各辺の長さや２つの辺のなす角度や直径や長径及び短径等を調整できるようにしてもよいし、フリーフォームの形状を描画できるようにしてもよい。
【0058】
アイコン３０１ｎは、開曲線描画機能を示す。アイコン３０１ｎを選択することにより、例えばマウスの左クリックが開曲線描画機能に割り当てられる。開曲線描画機能は、左クリックによって画像表示領域上の任意の数の点（点群）が選択されることにより、当該点群を通る開曲線を算出して描画する機能である。点群から開曲線を算出する方法としては、既知の手法を用いることができる。なお、開曲線の中心位置や色、太さ、計測値のフォントなどの表示形態はユーザ操作により調整できる。また、開曲線描画機能は、描画した開曲線に関する統計量（周長や面積等）を算出し、表示する機能である。その他、３次元図形（球、楕円球、直方体、三角錐等）を設定できるようにしてその表面積や体積などを算出し表示するよう制御してもよいし、フリーフォームの形状を描画できるようにしてもよい。
【0059】
アイコン３０１ｏは、リファレンスライン表示機能を示す。例えば、アイコン３０１ｏに含まれるチェックボックスを左クリックしてチェック又はその取り消しをすることにより、画像表示領域のうち対象となる領域（例えば、図５Ａでは領域３０３ｂ、領域３０３ｃ及び領域３０３ｄ）において、他の領域に表示されている断面に対応する位置を示す線（リファレンスライン）の表示・非表示を切り替える。例えば、図５Ａの領域３０３ｃに示すリファレンスライン３０１ｏ１は、領域３０３ｄに表示されているスライス画像の断面位置を示している。リファレンスラインについては、画像表示領域上において、その表示位置や複数のリファレンスラインの交差位置をユーザの指示に基づいて変更できるようにしてもよい。この時、対応する画像表示領域上に表示されている画像の断面位置は、変更後のリファレンスラインに対応する位置に変更される。
【0060】
アイコン３０１ｐは、３次元画像に対して２次元画像を重ねて表示する機能を示す。ここで、３次元画像とは、ＶＲ画像やＳＲ（Surface Rendering）画像といったレンダリング画像、或いは、３次元で生成された格子点群データであってもよい。このような３次元の格子点群データは、上述のステップＳ２において生成される。図５Ａでは、３次元の格子点群データの例として、領域３０３ａに、僧帽弁に関するメッシュを示している。
【0061】
より具体的には、アイコン３０１ｐに含まれるチェックボックスが左クリックによりチェックされた際、表示制御機能２５ｄは、メッシュ等の３次元画像に対して、２次元画像を３次元的な位置を対応付けて表示させる。例えば、表示制御機能２５ｄは、ＣＴ画像データ（ボリュームデータ）における３次元のメッシュの位置と、当該ＣＴ画像データにおけ２次元画像の位置との位置関係に基づいて、３次元のメッシュに対する２次元画像の位置を特定する。そして、表示制御機能２５ｄは、３次元のメッシュの特定した位置に２次元画像を配置することで、図５Ａの領域３０３ａに示す重ね合せの画像を表示させる。
【0062】
画像を重ねる際、表示制御機能２５ｄは、図６Ａに示す通り、観察方向に対して２次元画像より手前に位置するメッシュは表示させ、２次元画像より奥に位置するメッシュは表示させないように制御してもよい。また、メッシュ及び２次元画像の表示角度については、図６Ｂ及び図６Ｃに示す通り、適宜回転可能としてもよい。例えば、領域３０３ａにおいてマウスの左クリック及びドラッグ操作が行われた際、表示制御機能２５ｄは、クリック位置及び／又はドラッグ方向に基づいて、領域３０３ａに表示されたメッシュ及び２次元画像の表示角度を回転させる。また、アイコン３０１ｐに含まれるチェックボックスを更に左クリックしてチェックが取り消された際、２次元画像は非表示となる。
【0063】
３次元画像に対して重ねて表示する２次元画像（図５Ａの領域３０３ａに示す２次元画像）は、例えば、領域３０３の画像表示領域（領域３０３ｂ～３０３ｄ）に表示されている画像の中から選択される。３次元画像に対して重ねて表示する２次元画像は、領域３０３ｂ～３０３ｄに表示されている３つの画像の全てであってもよいし、ユーザにより選択された１又は２つの画像であってもよい。例えば、領域３０３ｂ～３０３ｄのいずれかの領域上で右クリックが行なわれた際にコンテキストメニューを表示し、当該コンテキストメニューに対するユーザの操作に応じて、３次元画像に対して重ねて表示する２次元画像が選択される。また、領域３０３ｂ～３０３ｄの中から、３次元画像に対して重ねて表示する２次元画像を表示する領域を予め定めておいてもよい。
【0064】
アイコン３０１ｑは、メッシュ編集機能を示す。アイコン３０１ｑを選択することにより、例えば領域３０３ａに表示されているメッシュを編集することが可能となる。即ち、メッシュ編集機能では、上述のステップＳ２において生成された格子点群データの編集を行なうことができる。なお、アイコン３０１ｑが選択されていない時、メッシュ編集機能は動作しない。
【0065】
例えば、図５Ａでは、領域３０３ａに、僧帽弁に関するメッシュの全体像が表示されている。ここで、領域３０３ｂ～３０３ｄの各画像表示領域に対しては、例えば図５Ｂ～図５Ｄに示すように、メッシュとの交点を示すマークが表示される。即ち、図５Ｂ～図５Ｄでは、画像表示領域に表示された２次元画像と、メッシュの格子点を接続する直線乃至は曲線との交点を示すマークを表示している。より具体的には、図５Ｂ～図５Ｄでは、領域３０３ｂ、領域３０３ｃ及び領域３０３ｄの各画像表示領域において、メッシュ全体のうち前尖に対応する部分との交点を四角形のマークで示し、後尖に対応する部分との交点を三角形のマークで示している。
【0066】
例えば、メッシュは、複数の格子点と、隣接する格子点を接続する複数の直線とから構成される。表示制御機能２５ｄは、メッシュを構成する複数の直線について、領域３０３ｂ～３０３ｄの各画像表示領域に表示された画像の断面位置での断面を求める。例えば図４Ａに示したように、前尖領域を１９列９行の格子点群で示し、後尖領域を２５列９行の格子点群で示したメッシュの場合、その断面は、最大で１８個のマーク（図５Ｂ～図５Ｄに示した、前尖領域の断面を示す９つの四角形のマークと、後尖領域の断面を示す９つの三角形のマーク）で表現される。即ち、１８行の格子点群を有するメッシュの場合において、当該１８行の全てと交差するように２次元画像が配置される場合には１８個のマークが表示され、当該１８行の一部のみと交差するように２次元画像が配置される場合には１～１７個のマークが表示され、当該１８行のいずれとも交差しないように２次元画像が配置される場合にはマークは表示されないこととなる。
【0067】
例えば、ユーザは、領域３０３ｂ～３０３ｄの各画像表示領域上に表示されているメッシュの断面を左クリック及びドラッグで移動させることにより、当該移動量に応じてメッシュの形状を修正することができる。なお、図５Ｂ～図５Ｄに示したメッシュの断面を示すマークの形状や色、数などの表示形態は、ユーザ操作により調整できる。
【0068】
図５Ａに戻って説明を続ける。アイコン３０１ｒは、Ｕｎｄｏ（元に戻す）機能を示す。アイコン３０１ｒを選択することにより、領域３０３における表示が、直前の操作を実施する前の状態まで戻される。例えば、表示制御機能２５ｄは、操作を実施する度、領域３０３における表示条件を記憶しておくことにより、本機能を実現できる。また、表示制御機能２５ｄは、直前の操作前の状態に戻すだけでなく、過去操作後の表示条件を所定の数だけ記憶しておき、当該複数の表示条件をユーザに提示し、ユーザが任意の表示条件を指定することにより、指定された表示条件の状態に戻すようにしてもよい。この時、表示制御機能２５ｄは、時系列に沿って、一つの操作を実施する度に表示条件を記憶するようにしてもよいし、特定の条件を満たす操作を実施した場合にのみ表示条件を記憶するようにしてもよい。例えば、表示制御機能２５ｄは、特定の画像表示領域（例えば領域３０３ｂ）の表示形態が変化する操作を実施した場合にのみ表示条件を記憶するようにしてもよい。このような特定の条件は、予め設定される。
【0069】
アイコン３０１ｓは、Ｒｅｄｏ（やり直し）機能を示す。領域３０３における表示をアイコン３０１ｒのＵｎｄｏ機能を用いて直前の操作を実施する前の状態まで戻した際、アイコン３０１ｓを選択することにより、当該Ｕｎｄｏ機能による操作を取り消し、Ｕｎｄｏ機能を実施する前の状態に戻す。
【0070】
アイコン３０１ｔは、リセット機能を示す。アイコン３０１ｔを選択することにより、領域３０３における表示条件が予め設定する条件に戻される。当該予め設定する条件はどのような条件でもよいが、一例としては、起動時の条件とすることができる。即ち、図５Ａの表示画面を表示する表示制御機能２５ｄの機能が起動した際、まずは、予め設定する条件での表示が行なわれ、その後、ユーザから受け付けた操作に応じて様々に表示が変更される。アイコン３０１ｔが選択された際、表示制御機能２５ｄは、予め設定する起動時の条件での表示に戻す。
【0071】
アイコン３０１ｕは、ＶＲ画像やＳＲ画像といったレンダリング画像、ＭＰＲ画像等の２次元画像に対して重畳表示する領域の表示条件を設定する設定画面を表示するためのボタンである。具体的には、例えばステップＳ２において、ステップＳ１で取得された医用画像データに含まれる解剖学的構造（各弁葉、各心房、各心室、石灰化など）の位置情報が特定される。これらの各種の解剖学的構造を示す領域をＶＲ画像やＭＰＲ画像に重畳表示させるに当たり、例えばユーザがマウス操作によってアイコン３０１ｕを選択すると、ＶＲ画像やＭＰＲ画像に重畳表示させる領域（解剖学的構造を示す領域）の表示条件を設定するための設定画面が表示される。
【0072】
図７Ａ及び図７Ｂは、実施形態に係る表示条件の設定画面の一例を示す図である。例えば、設定画面は、図７Ａに示すように、「Priority」、「色」、「透過度」、「ＶＲ」、「ＭＰＲ」、「Ｍｅｓｈ」、「名前」に関する設定項目を含む。
【0073】
「Priority」は、指定される領域（右の「名前」のコンボボックスから指定）の表示優先順位が設定される。例えば、設定画面の上に指定される領域ほど、表示優先順位が高いことを示し、画像上の同一座標において複数の領域が対応する場合は優先順位の高い領域が表示される。
【0074】
「色」は、対応する領域（右の「名前」のコンボボックスから指定）に対して、ＶＲ画像やＭＰＲ画像に重畳表示する際に割り当てる色が設定される。例えば、「色」には、色のサンプルが表示される。例えば、ユーザが、サンプルの色を示す領域を選択すると、表示制御機能２５ｄは、図７Ｂに示すように、カラーマップや、ＲＧＢ値の入力ボックスを表示させる。ユーザは、カラーマップからの色選択、或いは、ＲＧＢ値の入力によって、対象となる領域に任意の色を割り当てることができる。
【0075】
「透過度」は、対応する領域（右の「領域名」のコンボボックスから指定）に対して、ＶＲ画像やＭＰＲ画像に重畳表示する際の透過度が設定される。例えば、「透過度」は、スライダーバーにより０～９９％まで１％刻みで指定でき、０％の場合は一切透過しない（つまり背景の画像は見えない）状態で重畳表示される。なお、図７Ａ及び図７Ｂには図示していないが、彩度や明度等の表示条件を設定できるようにしてもよいし、色の変わりにテクスチャなどを設定できるようにしてもよい。また、図示しない「連動」チェックボックスを選択することにより、全ての透過度を一緒に設定できることとしてもよい。より具体的には、「連動」チェックボックスが選択された際、全ての透過度を一緒の値に設定するように制御してもよいし、「連動」チェックボックスが選択された時点の各領域に対応する透過度の値の関係性を維持したまま、全体的に透過度を上げる又は下げるように制御してもよい。
【0076】
「ＶＲ」は、ＶＲ画像上に表示する領域を指定するためのチェックボックスである。また、「ＭＰＲ」は、ＭＰＲ画像上に表示する領域を指定するためのチェックボックスである。なお、図７Ａ及び図７Ｂには図示していないが、「ＶＲ」、「ＭＰＲ」或いは「Ｍｅｓｈ」の全てのチェックボックスに対するチェックやチェック解除を同時に実施できるボタンが更に設けられてもよい。
【0077】
「Ｍｅｓｈ」は、ＶＲ画像やＭＰＲ画像に重畳表示する領域の表示形態をマスク形式にするかメッシュ形式にするかを指定するためのチェックボックスである。具体的には、メッシュ形式の場合、表示制御機能２５ｄは、例えば図５Ａの領域３０３ａに示したように、ステップＳ２で取得したメッシュを表示させる。一方で、マスク形式の場合、表示制御機能２５ｄは、例えばＶＲ画像やＳＲ画像、ＭＰＲ画像といった画像を表示させる。なお、メッシュ形式にした場合、「透過度」が０％の場合でも背景の画像がメッシュの隙間から見えることとなる。一方で、マスク形式にし、「透過度」が０％の場合には、背景の画像は見えないこととなる。
【0078】
「名前」は、設定した優先順位や表示条件で表示する領域が設定される。例えば、ユーザは、「名前」の列に配置されたコンボボックスによって領域を指定する。なお、複数のコンボボックスに同じ領域が設定できないように制御してもよい。例えば、あるコンボボックスに既に他のコンボボックスで設定されている領域を指定した場合、指定できないように制御したり、既存のコンボボックスの設定を解除したりしてもよい。或いは、複数のコンボボックスに同じ領域を設定することを可能としつつ、優先順の高い設定を優先して使用するように制御してもよい。なお、図７Ａでは、石灰化領域（Calcification Area）、大動脈弁のＬＣＣ（Left Coronary Cusp）、ＲＣＣ（Right Coronary Cusp）及びＮＣＣ（Non Coronary Cusp）を、ＶＲ画像、ＭＰＲ画像及びメッシュ上に表示するように設定している。
【0079】
「Close」は、本設定画面を非表示にするボタンであり、「Reset」は設定状態を初期状態に戻すためのボタンである。なお、本設定画面により設定する表示条件を各領域に反映させるタイミングは、各条件を設定した直後に設定した条件を反映させてよいし、「Close」ボタン選択後に一斉に反映させてもよい。
【0080】
アイコン３０１ｖは、シミュレーションモードを開始するためのボタンである。シミュレーションモードについては後述する。
【0081】
領域３０２は、指定された条件を満たす画像を表すアイコンを表示する。例えば、ユーザは、不図示のインタフェースを用いて、被検体の氏名、被検体ＩＤ、生年月日、体重などの被検体に関する情報や、画像のモダリティの種類、撮像装置名、撮像日、撮像条件、再構成条件などの画像に関する情報などを指定する。画像データ取得機能２５ｂは、ユーザによって指定された上記条件を満たすボリュームデータを医用画像診断装置１０又は画像保管装置３０から取得する。例えば、画像データ取得機能２５ｂは、画像のＤＩＣＯＭ（Digital Imaging and Communications in Medicine）のヘッダ、ＰＡＣＳ、電子カルテ、ＲＩＳ（Radiology Information System）、ＨＩＳ（Hospital Information System）などから、指定された条件に関する情報を取得し、取得した条件とユーザによって指定された条件とを比較して、ユーザによって指定された条件を満たすボリュームデータを取得する。なお、以下では、所定の１名の被検体の１つの４次元ＣＴ画像データが指定された例について説明するが、複数名の被検体の画像や、異なる種類のモダリティ（例えば、ＣＴ画像データと超音波画像データ等）が指定されてもよい。
【0082】
表示制御機能２５ｄは、例えば、指定された条件を満たす画像を表すアイコンとして、サムネイルを表示させる。具体的には、表示制御機能２５ｄは、画像データ取得機能２５ｂによって取得されたボリュームデータからサムネイル画像を生成して、生成したサムネイル画像を領域３０２に表示させる。例えば、表示制御機能２５ｄは、ボリュームデータにおける代表的な断面の２次元画像を領域３０２の大きさに合わせて縮小してサムネイル画像を生成することができる。
【0083】
指定された条件を満たす画像を表すアイコンとしてサムネイルについて説明したが、表示制御機能２５ｄは、サムネイル画像に代えて又は加えて、種々のアイコンを領域３０２に表示させることができる。例えば、表示制御機能２５ｄは、取得されたボリュームデータを示す文字列や記号、或いは、予め用意されメモリ２４に保管された各種図形や画像、シェーマ像などを、領域３０２に表示させてもよい。さらに、表示制御機能２５ｄは、上記したサムネイル画像やアイコンと共に、ボリュームデータの基本的な情報（撮像日、スライス枚数、再構成関数等）を並べて表示することもできる。かかる場合には、例えば、表示制御機能２５ｄは、画像のＤＩＣＯＭヘッダ、ＰＡＣＳ、電子カルテ、ＲＩＳ、ＨＩＳなどからこれらの情報を取得して、サムネイル画像やアイコンに対応付けて表示させる。なお、表示する基本的な情報は予め定めておいてもよいし、ユーザが指定できるようにしてもよい。
【0084】
例えば、ユーザは、領域３０２に表示されたサムネイル等のアイコンを、領域３０３にドラッグアンドドロップする。この操作に応じて、表示制御機能２５ｄは、選択されたサムネイル画像に対応するボリュームデータから表示する画像を生成し、生成した画像を領域３０２に表示させる。ここで、ドラッグアンドドロップした際に既に領域３０３に画像が表示されている場合、表示制御機能２５ｄは、不図示の確認画面（例えば、画像保存を促す表示など）をユーザに表示する。そして、表示制御機能２５ｄは、確認画面に対し肯定する操作をユーザから受け付けた後、既に表示されている画像を領域３０３から除いて、ドラッグアンドドロップされたアイコンに対応する画像を表示させる。
【0085】
領域３０３に画像を表示する際、表示制御機能２５ｄは、予め定める表示条件に基づいて画像を表示させる。ここで、表示条件は、領域３０３に含まれる複数の表示領域において表示する画像の割り当て（例えば、図５Ａに示す領域３０３ａ～３０３ｄのどの領域にどのような画像を表示するか）、断面画像を表示する場合における断面位置、拡大率、ＷＬやＷＷなどである。表示制御機能２５ｄは、領域３０３に画像を表示させる際、上記した表示条件を取得し、取得した表示条件に基づいて画像を生成し、生成した画像を領域３０３に表示させる。
【0086】
なお、上記した表示条件は、あくまでも一例であり、どのような条件が設定されてもよい。また、表示条件は、ユーザによって任意に変更できるようにしてもよい。かかる場合には、例えば、表示制御機能２５ｄは、表示条件を設定するためのＧＵＩを表示させ、ユーザによる表示条件の指定を受け付ける。
【0087】
上述した通り、領域３０３は画像表示領域であり、各種画像を表示する。例えば、図５Ａは、画像読み込み時の各領域における初期配置であり、領域３０３ａ～領域３０３ｄの４つの領域が設定されている。
【0088】
図５Ａにおいて、領域３０３ａには、僧帽弁の３次元画像が表示されている。より具体的には、領域３０３ａには、ステップＳ２で取得された、僧帽弁の３次元のメッシュが表示されている。例えば図７Ａ及び図７Ｂに示した「Ｍｅｓｈ」のチェックボックスがチェックされている場合、表示制御機能２５ｄは、図５Ａに示す通りメッシュを表示させる。一方でチェックが解除されている場合、表示制御機能２５ｄは、図５Ａに示すメッシュに代えて、又は他の領域（領域３０３ｂ～領域３０３ｄ）において、僧帽弁のＶＲ画像やＳＲ画像等を表示させる。
【0089】
また、図５Ａにおいて、領域３０３ｂ～領域３０３ｄには、僧帽弁を含む２次元画像が表示されている。例えば、表示制御機能２５ｄは、僧帽弁を基準として設定されるＭＰＲ画像を領域３０３ｂ～領域３０３ｄに表示させる。一例を挙げると、表示制御機能２５ｄは、ステップＳ２で特定された僧帽弁領域から、僧帽弁のＡｎｎｕｌｕｓ面に垂直で心尖部を通る面を特定し、特定した面を基準面として３方向のＭＰＲ画像を生成して、領域３０３ｂ～領域３０３ｄにそれぞれ表示させる。僧帽弁のＡｎｎｕｌｕｓ面は、例えば、図４に示した弁輪部で構成される閉曲線から算出される最小二乗平面である。
【0090】
勿論、図５Ａの表示は一例であり、領域３０３の表示については様々な変形が可能である。例えば、表示制御機能２５ｄは、ユーザが指定する任意断面の画像や、任意の種類の画像を領域３０３に表示してもよい。一例を挙げると、表示制御機能２５ｄは、ＶＲ画像、ＳＲ画像、ＭＩＰ（Maximum Intensity Projection）画像、ＭｉｎＩＰ（Minimum Intensity Projection）画像といった既知の種類の画像を生成して領域３０３に表示してもよい。
【0091】
また、領域３０３の画像の表示条件は、上述した領域３０１及び領域３０２の各種機能を用いて、適宜変更することができる。例えば、表示制御機能２５ｄは、領域３０３の画像について、ユーザの指示に基づいて観察断面の変更やスライス送り（ブラウズ）、拡大率や中心位置（平行移動）、ＷＬやＷＷなどを変更して表示できる。
【0092】
また、表示制御機能２５ｄは、各領域上に、予め設定された情報、又は、ユーザが指定する情報を重ねて表示してもよい。例えば、表示制御機能２５ｄは、領域３０３ａ～領域３０３ｄの各画像表示領域のうちの所定の位置に、被検体の氏名、被検体ＩＤ、生年月日、体重などの被検体に関する情報や、画像のモダリティの種類、撮像装置名、撮像日、撮像条件、再構成条件等の画像に関する情報等を表示する。例えば、表示制御機能２５ｄは、上述した被検体に関する情報及び画像に関する情報のうちユーザが指定する情報を、画像のＤＩＣＯＭヘッダ、ＰＡＣＳ、電子カルテ、ＲＩＳ、ＨＩＳ等から取得して、領域３０３ａ～領域３０３ｄの各画像表示領域に表示させる。
【0093】
また、図５Ａにおいて、領域３０３ｄには、シネ表示用のコントローラ３０５が表示されている。コントローラ３０５には、再生ボタン、ストップボタン、速度上昇ボタン、速度低下ボタン、開始画像へ戻るボタン、最終画像へ進むボタン、１つ後の心位相の画像へ進むボタン、１つ前の心位相の画像へ進むボタンなどが設定されており、ユーザがマウスクリックなどの操作により指定することによって、各種ボタンに割り当てられた機能が実行されるように制御する。なお、シネ表示時における表示順は、サムネイルの選択順序に基づいて決定してもよいし、ＤＩＣＯＭヘッダなどから得られる撮像日時順や、Ｒ－Ｒ間隔に基づいて設定される心位相の順に基づいて決定してもよい。また、シネ表示中に画像に対してユーザが何らかの指示を与えている場合（スライス送り、平行移動、拡大率変更、会長変更、各種計測機能による計測など）は、当該コントローラは非表示としてもよい。
【0094】
図５Ａにおいて、領域３０４は、計測結果の表示領域である。例えば、ステップＳ２においてＣＴ画像データから僧帽弁領域等の注目領域が特定され、各注目領域に基づいて当該注目領域の特徴（計測項目）を示す値（計測値）が算出される。領域３０４ａは、計測結果をグラフ表示する領域である。また、領域３０４ｂは、計測結果として、各種計測項目名と計測値との関係を示すリストを表示する領域である。計測項目の例としては、前尖長（AntValveLength）、後尖長（PostValveLength）、交連部間距離（Inter commissual Diameter）、弁輪周長（Annulus circumference）、弁輪面積（Annulus Area）、D型弁輪周長（D-shaped Annulus circumference）、弁口周長（Orifice circumference）、弁口面積（Orifice Area）、最小弁口周長（MinOrificeLength）、最小弁口面積（MinOrificeArea）等を挙げることができる。
【0095】
図５Ａでは、領域３０４ａの表示例として、縦軸を計測値とし、横軸を心位相（Phase）とした折れ線グラフを示している。しかしながら、領域３０４ａに表示させるグラフはこれに限定されるものではない。例えば、横軸を任意の方向の断面位置として、計測値と断面位置との関係を示す折れ線グラフを表示させてもよい。折れ線グラフは、任意の一つの弁葉について且つ複数の計測項目について表示してもよい。また、複数の弁葉について複数の計測項目をグラフ表示するため、複数のグラフを表示してもよい。また、単一の計測項目について、各弁葉との関係を同一のグラフ内に表示してもよい。また、折れ線グラフではなく、例えばレーダーチャートにより、任意の位相における弁葉の特徴を表現してもよい。
【0096】
領域３０４ａに表示するグラフの形態は、領域３０４ｂに表示しているリストの左のチェックボックスを選択することにより、各計測項目に適した形態に変化させるように制御してもよい。計測項目とグラフの形態との関係は、予め設定しておくことができる。また、グラフの色や太さなどの表示形態は、ユーザが設定できるようにしてもよいし、図７Ａ及び図７Ｂに示した設定画面で設定される弁葉等の各領域の表示形態に合わせて変更してもよい。また、表示する計測項目の種類を設定できるようにしてもよい。また、領域３０４ｂにおける各計測項目の横のチェックボックスを選択した際に、当該計測項目における計測位置に対応する画像上の位置や断面を、領域３０３に表示するように制御してもよい。アイコン３０４ｃが選択された際、表示制御機能２５ｄは、各種の計測結果をメモリ２４に記憶させる。例えば、アイコン３０４ｃが選択された際、表示制御機能２５ｄは、各種計測項目における計測値と、位相又はスライスとの関係を示す表を、ＣＳＶ（Comma Separated Values）等の形式で、メモリ２４のうちのユーザが指定する記憶領域に対してファイル出力する。
【0097】
次に、特定機能２５ｅは、ステップＳ３で設定された医用画像データの表示条件に基づいて、格子点群データに含まれる注目格子を特定する（ステップＳ５）。ステップＳ５の処理は、例えば、アイコン３０１ｖのボタンが選択され、シミュレーションモードに移行したことをトリガとして開始される。以下、アイコン３０１ｖのボタンが選択された後の処理について、図８Ａを用いて説明する。図８Ａは、シミュレーションモードにおける表示例である。
【0098】
例えば、図５Ａにおいてアイコン３０１ｖが選択された際、表示制御機能２５ｄは、領域３０４に代えて、図８Ａの領域４００を表示させる。領域４００における領域４００ａには、「Simulation」及び「Measurement」の２のタブが示されており、図８では、「Simulation」のタブが選択されている。
【0099】
なお、図５Ａ及び図８Ａにおいては、一例として、領域３０４より領域４００を大きく示している。これにより、図８Ａの領域３０３は、図５Ａの領域３０３より小さくなっている。なお、図８Ａにおいて領域４００ａの「Measurement」が選択された場合、表示制御機能２５ｄは、領域４００に代えて、計測値やそのグラフを含む領域３０４を再度表示させる。ここで、表示制御機能２５ｄは、「Simulation」が選択される直前の領域３０４の状態（例えば、表示している計測項目や軸の幅などのグラフの状態）を記録しておき、「Measurement」が選択された際、記録していた状態の領域３０４をそのまま表示させてもよい。なお、「Simulation」や「Measurement」の切り替えが行なわれても、領域３０３における画像表示状態（例えば、断面位置、拡大率、ＷＷ、ＷＬ、表示角度など）は変化しない。「Simulation」が選択されてから「Measurement」が選択されるまでの間にユーザ操作によって領域３０３における画像表示状態が変化した場合、新しい画像表示状態に基づいて、計測値やグラフの表示を更新してもよい。
【0100】
例えば、領域３０３ｂ～３０３ｄに示すように複数の画像が表示されている場合、特定機能２５ｅは、まず、表示されている複数の画像の中から、表示条件を参照する注目画像（ActivePlaneとも記載する）を選択する。以下、領域３０３ｂに表示されている画像Ｉ１が注目画像として選択されているケースについて説明する。なお、画像Ｉ１は、ステップＳ１で取得したＣＴ画像データに基づくＭＰＲ画像（断面画像）である。図８Ａに示すように、表示制御機能２５ｄは、注目画像として選択されている画像Ｉ１又は画像Ｉ１の表示されている領域３０３ｂを、例えば色付きの枠や他の領域よりも太い枠で囲うことにより、強調表示してもよい。注目画像は、ユーザの指示に基づいて選択されてもよいし、領域３０３ｂ～３０３ｄのうち予め設定された画像表示領域に表示された画像が自動で選択されてもよい。
【0101】
特定機能２５ｅは、注目画像である画像Ｉ１の表示条件に基づいて、注目格子を特定する。例えば、特定機能２５ｅは、画像Ｉ１の表示範囲に関する表示条件に基づいて注目格子を特定する。表示範囲に関する表示条件の例としては、例えば、画像Ｉ１の表示角度、画像Ｉ１の中心位置（スライス方向の位置、及び、画像Ｉ１に平行な平面上での位置）、拡大率などを挙げることができる。
【0102】
図９Ａを用いてより具体的に説明する。図９Ａは、説明のため、僧帽弁に関するメッシュを楕円及び直線で示した簡略図である。より具体的には、図９Ａにおいて、楕円と直線との交点は、格子点を示す。また、図９Ａの楕円及び直線は、格子点を接続した線（直線乃至は曲線）に対応する。例えば、図９Ａの楕円は格子点を列方向に接続した線であり、直線は格子点を行方向に接続した線である。また、図９Ａでは、前尖領域を実線で示し、後尖領域を破線で示す。領域３０３ｂの画像Ｉ１に僧帽弁が現れている場合、図９Ａに示す通り、画像Ｉ１の断面位置は僧帽弁と交差することになる。なお、図９Ａでは、行方向の座標を「Ｘ」、列方向の座標を「Ｙ」とし、各格子に識別子（Ｘ，Ｙ）を付与して説明を行なう。
【0103】
例えば、まず、特定機能２５ｅは、治療デバイスのサイズを設定する。治療デバイスは、例えば、経皮的僧帽弁クリップ術において僧帽弁に対して留置されるクリップ（MitraClipデバイス）である。治療デバイスのサイズは、例えばユーザにより指定される。一例を挙げると、ユーザは、図８Ａの領域４００ｂの「Ａ」及び「Ｂ」の欄を入力することにより、クリップのサイズを指定する。例えば、「Ａ」は、クリップのピンチ部分（僧帽弁に対して留置された際、僧帽弁に接触する部分）の長さを示し、「Ｂ」は当該ピンチ部分の幅方向の寸法を示す。
【0104】
ユーザは、「Ａ」及び「Ｂ」の値をそれぞれ入力してもよいし、複数のプリセット値からいずれかを選択してもよい。例えば、図８Ａの領域４００ｂには、４つのプリセット値「ＮＴ」、「ＮＴＷ」、「ＸＴ」、「ＸＴＷ」が表示されている。例えば、「ＮＴ」がユーザにより選択された場合、特定機能２５ｅは、「Ａ＝９，Ｂ＝４」の値を自動で設定する。また、「ＮＴＷ」がユーザにより選択された場合、特定機能２５ｅは、「Ａ＝９，Ｂ＝６」の値を自動で設定する。また、「ＸＴ」がユーザにより選択された場合、特定機能２５ｅは、「Ａ＝１２，Ｂ＝４」の値を自動で設定する。また、「ＸＴＷ」がユーザにより選択された場合、特定機能２５ｅは、「Ａ＝１２，Ｂ＝６」の値を自動で設定する。
【0105】
なお、治療デバイスのサイズを指定する方法について特に限定されるものではない。例えば、特定機能２５ｅは、被検体に関する条件や、弁に関する条件等に基づいて、治療デバイスのサイズを特定してもよい。例えば、特定機能２５ｅは、ステップＳ２で特定された僧帽弁領域の大きさに基づいて、治療デバイスのサイズを自動的に特定することができる。この場合、被検体に関する条件又は弁に関する条件と、治療デバイスのサイズ（治療デバイスの種類、型番等であってもよい）との対応関係を予め定義しておいてもよい。
【0106】
次に、特定機能２５ｅは、治療デバイスの留置位置を設定する。図９Ａに示した僧帽弁に関するメッシュの各行において、注目画像である画像Ｉ１の表示条件と、治療デバイスのサイズとにより定められる範囲に基づいて当該留置位置を設定する。例えば、特定機能２５ｅは、図９Ｂに示すように、前尖の弁先端部から弁輪部の方向に向かって、画像Ｉ１の断面位置に沿って治療デバイスの長さ「Ａ」と断面位置を中心とする治療デバイスの幅「Ｂ」とで表される範囲を設定する。後尖についても同様に、特定機能２５ｅは、後尖の弁先端部から弁輪部の方向に向かって、画像Ｉ１の断面位置に沿って治療デバイスの長さ「Ａ」と治療デバイスの幅「Ｂ」とで表される範囲を設定する。なお、図９Ｂでは、クリップのようなEdge-to-Edgeのデバイスを想定しているため、前尖と後尖とに矩形の範囲が設定されている。当該矩形の範囲は、治療デバイスにより前尖と後尖とが接合される領域として、後述する推定処理に使用される。
【0107】
そして、特定機能２５ｅは、図９Ｂで特定した範囲に基づいて、注目格子を特定する。即ち、特定機能２５ｅは、画像Ｉ１の断面位置に関する表示条件（表示角度、及び、スライス方向の位置）と、治療デバイスのサイズとに基づいて、注目格子を特定することができる。
【0108】
例えば、特定機能２５ｅは、特定した範囲内に位置する全ての格子点を、注目格子の候補として特定する。図９Ｂの場合、例えば、識別子（Ｘ，Ｙ）が（４，３）、（３，３）、（２，３）、（４，４）、（３，４）、（２，４）となる前尖の格子、及び、識別子（Ｘ，Ｙ）が（４，１３）、（３，１３）、（２，１３）、（４，１４）、（３，１４）となる後尖の格子が、注目格子の候補として特定される。これら注目格子の候補は、注目画像の画像表示条件に依存する。例えば、領域３０３ｂ～３０３ｄのうち注目画像を表示させる画像表示領域が変更されたり、スライス送り（ブラウズ）の操作が行われたりした場合、注目格子の候補は、変更後の注目画像の画像表示条件に応じて順次更新される。そして、特定機能２５ｅは、ユーザが４００ｃの「Ｙｅｓ」ボタンを押下した時点における注目格子の候補を、注目格子として特定する。
【0109】
特定された注目格子の格子点ＩＤは、領域４００ｃの「Anterior」及び「Posterior」の欄に表示される。或いは、注目格子の候補の格子点ＩＤを、「Anterior」及び「Posterior」の欄に表示することとしてもよい。この場合、注目画像の画像表示条件が変更されるごとに、「Anterior」及び「Posterior」の欄の表示は順次更新される。
【0110】
或いは、特定機能２５ｅは、「Anterior」及び「Posterior」の欄への格子点ＩＤの入力をユーザから受け付けることにより、注目格子を特定してもよい。例えば、表示制御機能２５ｄは、マウスカーソルが図８Ａの領域３０３ａに表示されたメッシュにオーバーレイした時、マウスカーソルの位置に対応する格子点の格子点ＩＤを表示する。ユーザは、表示された格子点ＩＤを参照しながら、「Anterior」及び「Posterior」の欄への格子点ＩＤの入力を行なうことができる。なお、マウスカーソルの位置に応じた格子点ＩＤの表示は、領域４００ａにおける「Simulation」が選択されている時のみとし、「Measurement」が選択されている時には行なわないこととしてもよい。
【0111】
なお、図８Ａの領域４００ｄは、結果保存名の設定を受け付ける。領域４００ｄの初期値として、「Sim_+CaseID_+#」を表示しておいてもよい。ここで、「Sim_」の部分には、例えば、データの種類を識別するために使用されるプリフィックス番号が入力される。また、「CaseID」の部分には、例えば、症例ごとにプリセットされたＩＤのうち、シミュレーションを実行した症例に対応したＩＤが入力される。「#」は本症例に対するシミュレーションが実行された結果数に応じてインクリメントされる。なお、例えば「Anterior」及び「Posterior」の欄に数値以外が入力されている等、図８Ａの領域４００ｂ～４００ｄにおける設定の書式が異なっていたり空欄だったりする場合、再設定を促すメッセージを表示させてもよい。
【0112】
図９Ｂでは、画像Ｉ１及び治療デバイスのサイズに基づいて特定した範囲内に位置する全ての格子点を注目格子として特定する例について説明したが、実施形態はこれに限定されるものではない。例えば、特定機能２５ｅは、特定した範囲に最も近い各列の格子点を、注目格子として特定してもよい。
【0113】
また、図９Ｂでは、治療デバイスのサイズに基づいて範囲の寸法を決定する例を示したが、実施形態はこれに限定されるものではない。例えば、注目画像である画像Ｉ１がユーザの指定に基づく幅のスラブＭＩＰ画像である場合、特定機能２５ｅは、図９Ｂに示した幅「Ｂ」に代えてスラブＭＩＰ画像の幅を採用した範囲を特定し、特定した範囲に基づいて注目格子を特定してもよい。
【0114】
その他、注目格子の設定方法や、設定できる治療デバイスの種類は、上述した例に限定されるものではない。例えば、弁置換術における人工弁デバイスを用いる場合、特定機能２５ｅは、表示角度の異なる複数の２次元画像を、注目画像として選択する。例えば、特定機能２５ｅは、図９Ｃに示す画像Ｉ２及び画像Ｉ３を注目画像として選択する。次に、特定機能２５ｅは、画像Ｉ２と画像Ｉ３との交点の位置を中心とし、人工弁デバイスのサイズにより決定される半径「ｚ」の円を特定する。半径「ｚ」については、注目画像における拡大率に基づいて設定してもよい。また、人工弁デバイスのサイズは、上述した通り、ユーザが設定することができる。
【0115】
そして、特定機能２５ｅは、特定した半径「ｚ」の円に基づいて、注目格子を特定する。例えば、特定機能２５ｅは、図９Ｄの丸のマークで示すように、特定した円の円周の位置に最も近い各列の格子点を、注目格子として特定する。具体的には、図９Ｄでは、識別子（Ｘ，Ｙ）が（２，０）、（２，１）、（２，２）、（１，３）、（１，４）、（１，５）、（１，６）、（１，７）、（１，８）、（１，９）、（２，１０）、（２，１１）、（２，１２）、（２，１３）、（２，１４）、（２，１５）、（２，１６）、（２，１７）、（２，１８）、（２，１９）となる格子が、注目格子として特定される。別の例を挙げると、特定機能２５ｅは、特定した円の円周を中心として一定の幅を有する範囲内に含まれる格子点を、注目格子として特定してもよい。
【0116】
注目画像を複数設定する場合、表示制御機能２５ｄは、当該設定に応じた表示を行なってもよい。例えば、図８Ａでは、注目画像として選択された１つの画像Ｉ１を強調表示する例について説明したが、表示制御機能２５ｄは、注目画像として選択された複数の画像を強調表示してもよい。この時、表示制御機能２５ｄは、各画像が選択された順序を識別できるよう、画像ごとに表示条件を変えてもよい（例えば、選択された各画像の枠の色を変える等）。
【0117】
注目格子を特定する方法については、種々の変形が可能である。例えば、特定機能２５ｅは、注目画像の中心位置に基づいて、注目格子を特定することもできる。一例を挙げると、特定機能２５ｅは、注目画像の中心位置に対応した格子点を特定し、特定した格子点から一定範囲に含まれる格子点を、注目格子として特定することができる。
【0118】
また、特定機能２５ｅは、注目画像の中心位置及び拡大率に基づいて、注目格子を特定することができる。一例を挙げると、特定機能２５ｅは、注目画像の中心位置に対応した格子点を特定し、特定した格子点から、注目画像の拡大率に応じたサイズの範囲に含まれる格子点を、注目格子として特定することができる。例えば、特定機能２５ｅは、拡大率が大きいほど範囲を小さく設定し、当該範囲に含まれる格子点を、注目格子として特定する。
【0119】
また、特定機能２５ｅは、ＷＷやＷＬ等の表示色に関する表示条件に基づいて、注目格子を特定することができる。例えば、各種の臓器を視認しやすいＷＷ及びＷＬは臓器ごとに概ね決まっていることから、特定機能２５ｅは、ＷＷ及びＷＬの値と、各種臓器との対応関係を事前に設定しておく。例えば、特定機能２５ｅは、僧帽弁を観察する時にユーザが手動で設定したＷＷ及びＷＬの値を記録しておき、その平均値を、臓器「僧帽弁」に対応付けて記録する。これにより、特定機能２５ｅは、表示条件として設定されたＷＷ及びＷＬの値に基づいて観察対象の臓器を特定し、医用画像データから観察対象の臓器の位置を特定して、特定した臓器の位置に基づく注目格子を特定することができる。
【0120】
特定された注目格子については、領域３０３ａ～３０３ｄ等の画像表示領域上で強調表示してもよい。例えば、表示制御機能２５ｄは、メッシュにおいて注目格子の色を変更したり、ＶＲ画像やＭＰＲ画像等において注目格子に対応する位置の色を変更したりして、注目格子を強調表示する。
【0121】
また、表示制御機能２５ｄは、図１０に示すように、特定された注目格子に基づいて後述のステップＳ７で実行される推定処理に対応する印を表示してもよい。図１０では、３次元のメッシュに対して、位置Ｄ１及び複数の直線Ｄ２を示している。位置Ｄ１は、経皮的僧帽弁クリップ術においてクリップが留置される位置（クリップ位置）を示す。また、複数の直線Ｄ２は、クリップにより接合される格子点の関係を示している。ここで、位置Ｄ１及び直線Ｄ２は、特定された注目格子に基づいて決定される。例えば、位置Ｄ１は、注目格子を接続した多角形の領域である。また、直線Ｄ２は、注目格子のうち前尖の格子と後尖の格子と接続したものである。例えば、図８Ａの領域４００ｃにおける「VR View」の隣のアイコン（図８Ｂ及び図８Ｃに示したアイコン）が選択されることにより、複数の直線Ｄ２の表示／非表示が切り替えられる。
【0122】
また、表示制御機能２５ｄは、特定された注目格子の位置に基づいて、３次元のメッシュに対して模擬デバイス（例えば、クリップの形状を示す３Ｄモデル等）を表示してもよい。
【0123】
また、表示制御機能２５ｄは、特定された注目格子を、例えば領域３０３ｂ～３０３ｄに表示されるＭＰＲ画像上に強調表示させてもよい。例えば、図８Ａの領域４００ｃにおける「MPR View」の隣のアイコン（図８Ｂ及び図８Ｃに示したアイコン）が選択されることにより、表示制御機能２５ｄは、ＭＰＲ画像上で注目格子を強調表示するか否か切り替える。
【0124】
例えば、特定された注目格子の位置を含むＭＰＲ画像が領域３０３ｂ～３０３ｄに表示され、且つ、図８Ｃに示したアイコンが選択されている場合、表示制御機能２５ｄは、注目格子を示すマークやその接続線をＭＰＲ画像上に強調表示させる。例えば、表示制御機能２５ｄは、注目格子以外の格子点の表示を省略して注目格子のみを表示させることにより、注目格子を強調表示する。或いは、表示制御機能２５ｄは、注目格子以外の格子点とは色や大きさの異なるマークによって注目格子を表示させることにより、注目格子を強調表示する。或いは、表示制御機能２５ｄは、注目格子の接続線とＭＰＲ画像との交点を示すマークやその接続線を、ＭＰＲ画像上に表示させてもよい。また、図８Ｃに示したアイコンが選択された場合でも、注目格子の位置を含むＭＰＲ画像が領域３０３ｂ～３０３ｄに表示されていない場合、表示制御機能２５ｄは、ＭＰＲ画像上での注目格子の強調表示を行なわなくてよい。
【0125】
次に、特定機能２５ｅは、注目格子を特定する処理を完了するか否か判定する（ステップＳ６）。例えば、特定機能２５ｅは、注目格子を特定する処理を完了するか否かを入力するＧＵＩに対するユーザからの操作を受け付ける。ここで、注目格子を特定する処理を完了しない場合（ステップＳ６否定）、再度ステップＳ３に移行して、ステップＳ３～Ｓ６の処理が繰り返される。即ち、医用画像データの表示条件が変更され、変更後の表示条件で医用画像データが表示され、表示された医用画像データの表示条件に基づいて注目格子が再度特定される。なお、ステップＳ６の判定を、注目格子を特定する処理を完了するか否かの判定として説明したが、ステップＳ７の処理を開始するか否かの判定に置換してもよい。
【0126】
次に、処理機能２５ｆは、特定機能２５ｅにより特定された注目格子を計算条件として、物理シミュレーションを実施する（ステップＳ７）。例えば、処理機能２５ｆは、ステップＳ２で特定された格子点群データと、ステップＳ５で特定された注目格子と、予め定める物理シミュレーション用の各種パラメータ（境界条件を含む）とに基づいて、物理シミュレーションを実施する。
【0127】
処理機能２５ｆによる物理シミュレーションは、例えば、図８Ａのアイコン４００ｅが選択されたことをトリガとして開始される。なお、物理シミュレーションが正常に終了せず、処理機能２５ｆが備えるシミュレーションエンジンからエラーが返ってきた場合、表示制御機能２５ｄは、エラーに合わせたメッセージを表示してもよい。例えば、シミュレーションエンジンはエラーコードを出力し、表示制御機能２５ｄは、当該エラーコードに基づくメッセージを生成して表示させる。また、例えば、シミュレーションエンジンはエラーに合わせたメッセージを出力し、表示制御機能２５ｄは、当該メッセージを表示させる。
【0128】
以下、僧帽弁を対象臓器として治療前に取得された医用画像データから、僧帽弁に関する格子点群データが取得されたケースについて説明する。この場合、処理機能２５ｆは、例えば、注目格子に対応する位置に、ユーザが指定した種類のEdge-to-Edgeデバイスを留置する治療が行われた後の僧帽弁の形状を推定する。当該推定には、既知の手法を用いることができる。既知の手法の例には、例えば、有限要素法、有限差分法、イマースバウンダリー法などが含まれる。より具体的には、ステップＳ５で特定した注目格子には、治療デバイスに基づくパラメータが設定される。例えば、処理機能２５ｆは、注目格子に対して仮想的なばねを設定し、当該ばねのばね定数を変化させながら、形状の変化を推定する。そして、前尖と後尖とが接合した時点でばね定数の変化を止める。ばね定数を変化させた際の形状は、注目格子だけでなく他の格子点にも設定される数学又は物理モデルを適用することにより推定できる。
【0129】
上述した処理機能２５ｆの処理は一例であり、物体の動作や流体に関する情報を推定することができれば、どのような手法を用いてもよい。例えば、深層学習等の機械学習技術を用いて事前に準備された学習用データを学習することで構築された形状モデルから、対象領域の治療後の形状を推定してもよい。推定はどのような方法を用いてもよいが、ステップＳ５で特定された注目格子に対して他の格子とは異なるパラメータ、又は、異なる数学又は物理モデルを適用できる方式である必要がある。当該推定に用いるパラメータはどのようなパラメータを用いてもよく、治療デバイスに基づくパラメータだけでなく、腱索の位置や数や張力などの解剖構造に基づくパラメータや、血流分布のような流体パラメータを設定してもよい。各種パラメータは予め設定しておいてもよいし、特許文献４に記載の方法を用いて特定してもよい。
【0130】
物理シミュレーションとして治療後の形状を推定する例について説明したが、形状のみならず、治療後の流体の状態や力の推定を行なってもよい。流体は、例えば血流である。血流の状態の例としては、順流量、逆流量、血流場等を挙げることができる。また、力の例としては、弁葉に係る血流による圧力分布、腱索の張力等を挙げることができる。
【0131】
図１１Ａに、物理シミュレーションの結果表示の一例を示す。領域４００ｆは、シミュレーション結果（Result）のリストである。即ち、一度計算したシミュレーションの結果は保存される。リスト表示されたシミュレーション結果のうちチェックボックスがチェックされた結果については、領域４００ｇや４００ｈに表示させることができる。そのシミュレーション結果をもたらした「ClipSize」や「position」、「Name」等の領域４００ｂや４００ｃに対応するシミュレーション条件については、領域４００ｂ、領域４００ｃ又は領域４００ｄに表示してもよい。領域４００ｆのリストは、「Name」、「EROA」、「RVol」といった項目のうち選択された項目に応じて、値の昇順または降順などの基準で並べ替えを行なってもよい。なお、図１１Ａの領域４００ｆには、２つのシミュレーション結果「Sim_Case1_Rightside」及び「Sim_Case1_Rightside」が表示されている。これらシミュレーション結果の名前は、アイコン４００ｅが選択された際、領域４００ｄに入力されていた名前（結果保存名）に対応する。「EROA」及び「RVol」については後述する。
【0132】
領域４００ｆのリストに含まれるシミュレーション結果は適宜削除可能としてもよい。例えば、右クリックでコンテキストメニューを表示し、コンテキストメニューから任意の結果を削除可能としてもよい。また、図示しない削除用のボタンを設け、ユーザが削除したい結果を選択してから削除用のボタンを選択した時に、当該選択された結果を削除してもよい。また、物理シミュレーションが異常なく終了した時には、領域４００ｆのリストに結果を追加して、対応するチェックボックスにチェックを入れるとともに、領域４００ｇや４００ｈに結果を表示する。
【0133】
また、図１１Ａの領域３０３ａには、治療前における僧帽弁の形状を示すメッシュが表示されている。領域３０３ａのメッシュにおいては、図１０と同様、クリップ位置やクリップにより接合される格子点の関係を表示させてもよい。
【0134】
また、図１１Ａの領域４００ｇには、物理シミュレーションにより推定された、治療後における僧帽弁の形状を示すメッシュが表示されている。領域４００ｇのメッシュに対しては、領域３０１に示した各種アイコンによる機能が適用可能である。例えば、領域４００ｇのメッシュについて、ユーザは、アイコン３０１ｄの機能による表示色の変更や、アイコン３０１ｅの機能による平行移動、アイコン３０１ｆの機能による拡大率の変更、アイコン３０１ｇの機能による表示角度の変更などを行なうことができる。なお、図１１Ａでは、領域３０３ａ及び領域４００ｇにメッシュを表示させているが、ユーザからの指示に応じて、ＶＲ画像等に置換してもよい。
【0135】
また、図１１Ａの領域４００ｈの表には、物理シミュレーション結果に基づく値、及び、当該値に基づく「ＭＲ－Ｇｒａｄｅ」が表示されている。「ＭＲ－Ｇｒａｄｅ」は、僧帽弁閉鎖不全症の程度を示す。例えば、「ＭＲ－Ｇｒａｄｅ」は、僧帽弁閉鎖不全症の程度に応じて、「Mild」、「lower-Moderate」、「upper-Moderate」、「Severe」の４段階に区分される。
【0136】
領域４００ｈの表に示される「ＥＲＯＡ（有効逆流弁口面積）」は、例えば、領域３０３ａ及び領域４００ｇに示すメッシュの形状から計測される値である。例えば、図１１Ａにおいて、治療前「Current（pre-TEER)」は、領域３０３ａに表示されているメッシュ（ステップＳ２で取得された格子点群データ）に基づいて算出される値であり、算出結果として「ＥＲＯＡ＝０．５」が表示されている例を示している。一方、シミュレーションされた治療後「Simulated(post-TEER)」はステップＳ７においてシミュレーションで推定される値であり、推定結果として「ＥＲＯＡ＜０．１」が表示されている例を示している。これにより、「ＥＲＯＡ」に基づく「ＭＲ－Ｇｒａｄｅ」である「ＭＲ－Ｇｒａｄｅ（ＥＲＯＡ）」は、治療前では「Severe」であったのに対し、治療後には「Mild」まで改善している。即ち、「ＥＲＯＡ」の観点から、例えば図１０に示した位置Ｄ１に計画通りクリップを留置することで、十分な治療効果が得られると推定できる。
【0137】
また、「ＲＶｏｌ（ 血液逆流量）」は、例えば、領域３０３ａ及び領域４００ｇに示すメッシュの形状を用いた流体解析等の物理シミュレーションにより算出される。例えば、図１１Ａにおいて、治療前「Current（pre-TEER)」は、領域３０３ａに表示されているメッシュ（ステップＳ２で取得された格子点群データ）の形状を用いた物理シミュレーションで推定される値であり、算出結果として「ＲＶｏｌ＝７０」が表示されている例を示している。一方、シミュレーションされた治療後「Simulated(post-TEER)」はステップＳ７においてシミュレーションで推定されたメッシュの形状を用いた物理シミュレーションで推定される値であり、推定結果として「ＲＶｏｌ＜１５」が表示されている例を示している。これにより、「ＲＶｏｌ」に基づく「ＭＲ－Ｇｒａｄｅ」である「ＭＲ－Ｇｒａｄｅ（ＲＶｏｌ）」は、治療前では「Severe」であったのに対し、治療後には「Mild」まで改善している。即ち、「ＲＶｏｌ」の観点から、例えば図１０に示した位置Ｄ１に計画通りクリップを留置することで、十分な治療効果が得られると推定できる。
【0138】
「ＥＲＯＡ」や「ＲＶｏｌ」といった値に対する「ＭＲ－Ｇｒａｄｅ」の判定基準（閾値）については、例えば図１１Ｂに示すようなＵＩを用いて設定可能としてもよい。例えば、図１１Ｂでは、「ＥＲＯＡ＜０．２」の範囲が「Mild」、「０．２≦ＥＲＯＡ＜０．３」の範囲が「lower-Moderate」、「０．３≦ＥＲＯＡ＜０．４」の範囲が「upper-Moderate」、「０．４≦ＥＲＯＡ」の範囲が「Severe」となるように設定されている。また、「ＲＶｏｌ＜３０」の範囲が「Mild」、「３０≦ＲＶｏｌ＜４５」の範囲が「lower-Moderate」、「４５≦ＲＶｏｌ＜６０」の範囲が「upper-Moderate」、「６０≦ＲＶｏｌ」の範囲が「Severe」となるように設定されている。図１１Ｂの値を初期設定とし、ユーザから閾値の変更を受け付けることとしてもよい。例えば、図１１Ｂに表示されている閾値を左クリックする操作が行われた後、キーボードを介して値の入力を受け付けることにより、閾値をキーボード入力された値に置換してもよい。また、例えば、閾値を左クリックする操作が行われた後、マウスのホイールを回転させる操作を受け付けることにより、ホイールの回転量及び回転方向に応じて閾値を増減させてもよい。また、例えば、閾値の近傍にアイコン（図示せず）を表示させておき、アイコンに対する操作に応じて値を増減させてもよい。また、変更された閾値については保存しておき、次回以降の物理シミュレーションで使用してもよい。
【0139】
なお、「＜」、「＞」は不等号である。例えば、「ｘ１＜ｘ２」は、「ｘ１」が「ｘ２」より小さく、且つ、「ｘ１」と「ｘ２」とが等しくないことを示す。また、「ｘ１＞ｘ２」は、「ｘ１」が「ｘ２」より大きく、且つ、「ｘ１」と「ｘ２」とが等しくないことを示す。また、「≦」、「≧」は等号付き不等号である。例えば、「ｘ１≦ｘ２」は、「ｘ１」が「ｘ２」より小さいか、或いは「ｘ１」と「ｘ２」とが等しいことを示す。また、「ｘ１≧ｘ２」は、「ｘ１」が「ｘ２」より大きいか、或いは「ｘ１」と「ｘ２」とが等しいことを示す。
【0140】
図１１Ｂの「Highlight」のチェックボックスにチェックされた際、設定された条件を満たす値や「ＭＲ－Ｇｒａｄｅ」の文字を、例えば文字色を変える等して強調表示する。図１１Ａ及び図１１Ｂでは、「０．４≦ＥＲＯＡ」の範囲及び「６０≦ＲＶｏｌ」の範囲（即ち、「Severe」に該当する範囲）が強調表示の対象として設定されている。
【0141】
なお、不等号や等号付き不等号といった記号の変更を受け付ける際、各閾値の左右が「≦」及び「＜」の組み合わせのみ選択可能となるように制御してもよい。例えば、図１１Ｂでは、ＥＲＯＡに基づく「ＭＲ－Ｇｒａｄｅ」の設定で、「０．４」を閾値とし、「upper-Moderate＜0.4≦Severe」の関係が設定されている。ここで記号を変更する際、「upper-Moderate≦0.4＜Severe」と変更するのであれば特に問題は生じないが、「upper-Moderate≦0.4≦Severe」や「upper-Moderate＜0.4＜Severe」といった変更を行なうと、「upper-Moderate」や「Severe」といった区分ごとの数値範囲に重複乃至は漏れが生じる。また、記号の向きについては変更できないようにしてもよい。例えば、「upper-Moderate＜0.4≦Severe」の関係が設定されている場合に、「upper-Moderate＜0.4＞Severe」や「upper-Moderate＜0.4≧Severe」」といった変更を行なうと区分ごとの数値範囲に重複が生じる。従って、このような設定については受け付けない、或いはこのような設定がなされた時にはユーザに修正を促す表示を行なってもよい。例えば、一方が「＜」ならもう一方は「≦」を自動設定し、一方が「≦」ならもう一方は「＜」を自動設定してもよい。また、任意の数値を入力可能としてよいが、「＜」又は「≦」の関係が崩れる値は設定できないように設定してもよい。即ち、不等号又は等号付き不等号により規定される数値の大小関係が矛盾しないように制御してもよい。例えば、図１１Ｂでは、「ＥＲＯＡ」に基づく「Mild」と「lower-Moderate」との閾値が「０．２」であり、「lower-Moderate」と「upper-Moderate」との閾値が「０．３」に設定されている。ここで、「Mild」と「lower-Moderate」との閾値「０．２」を変更する際、変更可能な数値範囲を「＜０．３」とするように制御してもよい。或いは、「０．３≦」の値が入力された際、値の変更を促すメッセージを表示させてもよい。
【0142】
表示制御機能２５ｄは、例えば領域４００ａの「Measurement」が選択された際、領域４００の一部又は全部を、計測結果を表示する領域３０４で置換してもよい。表示例を図１１Ｃに示す。図１１Ｃでは、領域４００のうちの領域４００ｇ及び領域４００ｈを残して領域３０４を表示させている。また、図１１Ｃでは、領域３０４の中に、治療前の計測結果を示す領域３０４ｄと、シミュレーションされた治療後の計測結果を示す領域３０４ｅとを表示させている。
【0143】
例えば、表示制御機能２５ｄは、領域３０４ｄにおいて、領域３０３ａに表示されている治療前のメッシュの形状に基づく各種の計測値を、各種計測項目名に対応付けてリスト表示する。また、表示制御機能２５ｄは、領域３０４ｅにおいて、領域４００ｇに表示されているシミュレーションされた治療後のメッシュの形状に基づく各種の計測値を、各種計測項目名に対応付けてリスト表示する。ここで、表示条件（例えば心位相など）が変更された場合、領域３０４ｄ及び領域３０４ｅの各種計測値は、変更後の表示条件に従って更新される。
【0144】
但し、領域３０４ｅに表示されるシミュレーション結果に基づく計測値については、全位相分のデータが生成されていないケースも想定される。例えば、シネ送りに関するコントローラ３０５が操作され、データが生成されていない位相の表示を行なう指示が入力された場合、「シミュレーション結果が存在しない」旨の表示を行なってもよい。なお、シミュレーション結果に基づく計測値に関し、図８Ａの「VR view」及び「MPR View」に対応する表示は行なわなくてよい。
【0145】
領域３０４ｅに表示する計測値については、シミュレーションが完了し次第計測してもよいし、シミュレーションが完了した後、ユーザの指示があった時や一定時間の経過後に計測してもよい。例えば、シミュレーションが完了した時点では領域４００に示したシミュレーション結果の表示を優先し、ユーザがシミュレーション結果を確認した後、計測を開始してもよい。
【0146】
上述した通り、画像データ取得機能２５ｂは、対象臓器を含む医用画像データを取得する。また、格子点群データ取得機能２５ｃは、前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得する。また、表示制御機能２５ｄは、前記医用画像データを表示させる。また、特定機能２５ｅは、前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する。これにより、ユーザは、後述するシミュレーションの実施に用いる注目格子を容易に特定することができる。
【0147】
注目格子を特定する他の方法として、対象臓器に関する格子点群データ（例えばメッシュ）を表示させ、ユーザから注目格子を指定する操作を受け付けることが考えられる。しかしながら、このような操作はユーザにとって煩雑であり、また、各格子点と実際の臓器における構造との対応関係が表示されていないため、直感的な操作を行なうことが難しかった。これに対し、上述の医用情報処理装置２０の処理によれば、ユーザは、医用画像データを参照しつつ、その表示条件を調整することによって注目格子を特定することができる。即ち、上述の医用情報処理装置２０の処理において、ユーザは、簡易且つ直感的な操作により、注目格子を容易に特定することができる。
【0148】
上述した実施形態では、対象臓器が弁である例について説明したが、対象臓器の種類について特に限定されるものではない。例えば、被検体の血管や肺、肝臓等を対象臓器として、図２の各ステップの処理を行なうこともできる。一例を挙げると、図２の各ステップの処理により、冠動脈のカテーテル治療におけるカテーテルの留置位置に対応する注目格子を特定し、カテーテル治療後の冠動脈の状態を推定する物理シミュレーションを実施することができる。また、一例を挙げると、図２の各ステップの処理により、肺や肝臓の切除領域に対応する注目格子を特定し、切除後の肺や肝臓の状態を推定する物理シミュレーションを実施することができる。
【0149】
また、図９Ｂでは、表示された医用画像データの断面位置に関する表示条件と、治療デバイスの大きさとに基づいて、前尖及び後尖のそれぞれに対して範囲を１つずつ定めて、当該範囲の内部に位置する格子点群を注目格子として特定する例について説明した。しかしながら、実施形態はこれに限定されるものではない。
【0150】
例えば、特定機能２５ｅは、表示条件に基づいて範囲を複数定めて、複数の範囲のそれぞれに基づいて、ステップＳ７において異なる又は同一の推定条件（境界条件）を設定するための注目格子を複数設定してもよい。例えば、特定機能２５ｅは、図１２に示すように、表示条件と治療デバイスの大きさとに基づいて設定される範囲において、クリップ位置を意味する範囲Ｅ１１及び範囲Ｅ１２より内側（弁先端側）の範囲Ｅ２１及び範囲Ｅ２２に格子点が含まれる場合、当該格子点を第２の注目格子として特定してもよい。なお、図１２では、識別子（Ｘ，Ｙ）が（４，５）となる格子点が範囲Ｅ２１に含まれ、（４，１２）となる格子点が範囲Ｅ２２に含まれ、これらの格子点が第２の注目格子として特定される。
【0151】
図１２では、同一の表示条件を用いて異なる複数の注目格子を特定する方法について説明したが、異なる複数の表示条件及び治療デバイスの条件を用いて、異なる複数の注目格子を特定してもよい。例えば、図１３では、画像Ｉ４の表示条件に基づいて範囲Ｅ３１及び範囲Ｅ３２が設定され、これら範囲内の格子点が第１の注目格子として特定される。また、図１３では、画像Ｉ５の表示条件に基づいて範囲Ｅ４１及び範囲Ｅ４２が設定され、これら範囲内の格子点が第２の注目格子として特定される。図１３の処理は、例えば、クリップを２つ留置する場合に適用される。即ち、第１の注目格子の位置に対して第１のクリップを留置し、第２の注目格子の位置に対して第２のクリップを留置する治療を行なった後の弁の状態を推定する物理シミュレーションを実施することができる。なお、第１の注目格子と第２の注目格子とで格子点の重複がある場合、エラーメッセージが出力されるように制御してもよい。格子点の重複は、２つのクリップの干渉に相当するためである。
【0152】
また、特定機能２５ｅは、図２のステップＳ５において、ステップＳ３で設定された表示条件が注目格子を特定することに適さない条件である場合、修正を促す表示を行なってもよい。例えば、図１４Ａに示すように、注目画像の断面位置が弁口（弁先端部に囲まれる領域）を通過しない場合や、図１４Ｂに示すように、弁口は通過しているものの前尖及び後尖のいずれか一方の領域のみを通過している場合は、クリックを留置する位置としては不適切であるため、修正を促す表示を行なってもよい。このような不適切な条件については、例えば治療デバイスの種類や臓器ごとに、事前に設定しておくことができる。なお、注目画像の断面位置が弁口を通過するか否かは、断面位置が弁先端部を通過するかどうかを判定することにより、判定できる。
【0153】
図１では、制御機能２５ａ、画像データ取得機能２５ｂ、格子点群データ取得機能２５ｃ、表示制御機能２５ｄ、特定機能２５ｅ、処理機能２５ｆといった各種の機能が医用情報処理装置２０の処理回路２５により実現されるものとして説明したが、これらの機能は複数の装置に適宜分散されてもよい。例えば、処理機能２５ｆは、医用情報処理装置２０と異なる第２の医用情報処理装置が備える処理回路により実現されてもよい。この場合、医用情報処理装置２０は、注目格子を特定し、特定した注目格子を第２の医用情報処理装置に対して通知する。第２の医用情報処理装置では、通知された注目格子を計算条件とした物理シミュレーションが実施される。また、処理回路２５の各機能は、例えば医用画像診断装置１０のコンソール装置が備える処理回路により実現されてもよい。言い換えると、医用画像診断装置１０と医用情報処理装置２０とは統合されてもよい。
【0154】
また、上述した実施形態では、医用画像データの例として、時系列の複数のＣＴ画像データ（４次元画像）について説明したが、実施形態はこれに限定されるものではない。例えば、単一の位相について収集されたＣＴ画像データ（３次元画像）に基づいて、図２の各ステップの処理を行なうことが可能である。なお、３次元画像の場合、例えばコントローラ３０５を用いたシネ送り等の一部機能が省略される。
【0155】
また、医用画像データとして２次元画像を取得し、図２の各ステップの処理を行なうこともできる。この場合、ステップＳ２で取得される格子点群データは、ある平面上における複数の格子点それぞれの位置座標を含むデータとなる。また、ステップＳ７では、ある平面上での２次元シミュレーションが実施される。
【0156】
また、ステップＳ１において医用画像データを取得するものとして説明したが、医用画像データ以外の画像データを取得する場合においても、ステップＳ２～Ｓ７の処理を同様に実行可能である。以下、この点について、図１５を用いて説明する。図１５は、実施形態に係る情報処理システム２の構成の一例を示すブロック図である。
【0157】
図２に示す通り、情報処理システム２は、カメラ４０と、情報処理装置５０とを備える。カメラ４０は、例えば光学カメラである。この場合、カメラ４０は、被検体の体表面の画像データを撮像し、情報処理装置５０に対して送信することができる。カメラ４０により撮像される画像データは、被検体が有する疾患の治療等を目的で撮像されたものであってもよいし、例えばスポーツ科学の観点から、特段の疾患を有しない被検体を対象として撮像されたものであってもよい。
【0158】
例えば、情報処理装置５０は、図１５に示すように、通信インタフェース５１、入力インタフェース５２、ディスプレイ５３、メモリ５４及び処理回路５５を備える。通信インタフェース５１、入力インタフェース５２、ディスプレイ５３及びメモリ５４については、図１に示した通信インタフェース２１、入力インタフェース２２、ディスプレイ２３及びメモリ２４と同様にして構成することができる。また、処理回路５５は、制御機能５５ａ、画像データ取得機能５５ｂ、格子点群データ取得機能５５ｃ、表示制御機能５５ｄ、特定機能５５ｅ及び処理機能５５ｆを実行する。
【0159】
制御機能５５ａは、制御機能２５ａと同様の機能である。画像データ取得機能５５ｂは、画像データ取得機能２５ｂと同様の機能であり、また、画像データ取得部の一例である。画像データ取得機能２５ｂは、ネットワークＮＷを介して、カメラ４０により撮像された対象物を含む画像データを取得する。例えば、カメラ４０は、被検体における特定の筋肉や、上腕や下肢といった部位を対象物として、画像データを撮像する。画像データ取得機能２５ｂは、カメラ４０から直接的に画像データを取得してもよいし、画像保管装置３０のような保管装置に保管された画像データを取得してもよい。
【0160】
格子点群データ取得機能５５ｃは、格子点群データ取得機能２５ｃと同様の機能であり、また、格子点群データ取得部の一例である。例えば、格子点群データ取得機能５５ｃは、被検体の体表面の画像データに基づいて、体表面に対応する曲面状に複数の格子点を配置した格子点群データを取得する。表示制御機能５５ｄは、表示制御機能２５ｄと同様の機能であり、また、表示制御部の一例である。特定機能５５ｅは、特定機能２５ｅと同様の機能であり、また、特定部の一例である。処理機能５５ｆは、処理機能２５ｆと同様の機能であり、また、処理部の一例である。
【0161】
上記説明において用いた「プロセッサ」という文言は、例えば、ＣＰＵ、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ：ＡＳＩＣ）、プログラマブル論理デバイス（例えば、単純プログラマブル論理デバイス（Ｓｉｍｐｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＳＰＬＤ）、複合プログラマブル論理デバイス（Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＣＰＬＤ）、及びフィールドプログラマブルゲートアレイ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ：ＦＰＧＡ））等の回路を意味する。プロセッサが例えばＣＰＵである場合、プロセッサは記憶回路に保存されたプログラムを読み出し実行することで機能を実現する。一方、プロセッサが例えばＡＳＩＣである場合、記憶回路にプログラムを保存する代わりに、当該機能がプロセッサの回路内に論理回路として直接組み込まれる。なお、実施形態の各プロセッサは、プロセッサごとに単一の回路として構成される場合に限らず、複数の独立した回路を組み合わせて１つのプロセッサとして構成し、その機能を実現するようにしてもよい。さらに、各図における複数の構成要素を１つのプロセッサへ統合してその機能を実現するようにしてもよい。
【0162】
また、図１においては、単一のメモリ２４が処理回路２５の各処理機能に対応するプログラムを記憶するものとして説明した。しかしながら、実施形態はこれに限定されるものではない。例えば、複数のメモリ２４を分散して配置し、処理回路２５は、個別のメモリ２４から対応するプログラムを読み出す構成としても構わない。また、メモリ２４にプログラムを保存する代わりに、プロセッサの回路内にプログラムを直接組み込むよう構成しても構わない。この場合、プロセッサは回路内に組み込まれたプログラムを読み出し実行することで機能を実現する。図１５のメモリ５４及び処理回路５５についても同様である。
【0163】
上述した実施形態に係る各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。即ち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部又は一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。更に、各装置にて行われる各処理機能は、その全部又は任意の一部が、ＣＰＵ及び当該ＣＰＵにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現されうる。
【0164】
また、上述した実施形態で説明した医用情報処理方法は、予め用意されたプログラムをパーソナルコンピュータやワークステーション等のコンピュータで実行することによって実現することができる。このプログラムは、インターネット等のネットワークを介して配布することができる。また、このプログラムは、ハードディスク、フレキシブルディスク（ＦＤ）、ＣＤ－ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な非一過性の記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行することもできる。
【0165】
以上説明した少なくとも１つの実施形態によれば、シミュレーションの実施に用いる注目格子を容易に特定することができる。
【0166】
いくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更、実施形態同士の組み合わせを行なうことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【0167】
以上の実施形態に関し、発明の一側面および選択的な特徴として以下の付記を開示する。
（付記１）
対象臓器を含む医用画像データを取得する画像データ取得部と、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得する格子点群データ取得部と、
前記医用画像データを表示させる表示制御部と、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部と
を備える、医用情報処理装置。
（付記２）
前記特定部は、前記医用画像データの表示範囲に関する表示条件に基づいて、前記注目格子を特定してもよい。
（付記３）
前記表示範囲に関する表示条件は、表示された前記医用画像データの表示角度と、スライス方向の位置とを含んでもよい。
（付記４）
前記特定部は、前記表示範囲に関する表示条件と、治療デバイスのサイズとに基づいて、前記注目格子を特定してもよい。
（付記５）
前記表示範囲に関する表示条件は、表示された前記医用画像データの中心位置を含んでもよい。
（付記６）
前記表示範囲に関する表示条件は、表示された前記医用画像データの拡大率を含んでもよい。
（付記７）
前記特定部は、前記医用画像データの表示色に関する表示条件に基づいて、前記注目格子を特定してもよい。
（付記８）
前記表示制御部は、前記医用画像データに基づく複数の画像を表示させ、
前記特定部は、表示されている前記複数の画像の中から注目画像を選択し、選択した前記注目画像の表示条件に基づいて前記注目格子を特定してもよい。
（付記９）
特定された前記注目格子を計算条件として物理シミュレーションを実施する処理部を更に備えてもよい。
（付記１０）
対象臓器を含む医用画像データを取得し、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得し、
前記医用画像データを表示させ、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する
ことを含む、医用情報処理方法。
（付記１１）
対象臓器を含む医用画像データを取得し、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得し、
前記医用画像データを表示させ、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する
各処理をコンピュータに実行させる、プログラム。
（付記１２）
対象物を含む画像データを取得する画像データ取得部と、
前記画像データと対応付けられた、前記対象物に関する格子点群データを取得する格子点群データ取得部と、
前記画像データを表示させる表示制御部と、
前記画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部と
を備える、情報処理装置。
（付記１）
対象臓器を含む医用画像データを取得する画像データ取得部と、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得する格子点群データ取得部と、
前記医用画像データを表示させる表示制御部と、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部と
を備える、医用情報処理装置。
（付記２）
前記特定部は、前記医用画像データの表示範囲に関する表示条件に基づいて、前記注目格子を特定してもよい。
（付記３）
前記表示範囲に関する表示条件は、表示された前記医用画像データの表示角度と、スライス方向の位置とを含んでもよい。
（付記４）
前記特定部は、前記表示範囲に関する表示条件と、治療デバイスのサイズとに基づいて、前記注目格子を特定してもよい。
（付記５）
前記表示範囲に関する表示条件は、表示された前記医用画像データの中心位置を含んでもよい。
（付記６）
前記表示範囲に関する表示条件は、表示された前記医用画像データの拡大率を含んでもよい。
（付記７）
前記特定部は、前記医用画像データの表示色に関する表示条件に基づいて、前記注目格子を特定してもよい。
（付記８）
前記表示制御部は、前記医用画像データに基づく複数の画像を表示させ、
前記特定部は、表示されている前記複数の画像の中から注目画像を選択し、選択した前記注目画像の表示条件に基づいて前記注目格子を特定してもよい。
（付記９）
特定された前記注目格子を計算条件として物理シミュレーションを実施する処理部を更に備えてもよい。
（付記１０）
対象臓器を含む医用画像データを取得し、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得し、
前記医用画像データを表示させ、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する
ことを含む、医用情報処理方法。
（付記１１）
対象臓器を含む医用画像データを取得し、
前記医用画像データと対応付けられた、前記対象臓器に関する格子点群データを取得し、
前記医用画像データを表示させ、
前記医用画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する
各処理をコンピュータに実行させる、プログラム。
（付記１２）
対象物を含む画像データを取得する画像データ取得部と、
前記画像データと対応付けられた、前記対象物に関する格子点群データを取得する格子点群データ取得部と、
前記画像データを表示させる表示制御部と、
前記画像データの表示条件に基づいて、前記格子点群データに含まれる注目格子を特定する特定部と
を備える、情報処理装置。
【符号の説明】
【0168】
１ 医用情報処理システム
１０ 医用画像診断装置
２０ 医用情報処理装置
２５ 処理回路
２５ａ 制御機能
２５ｂ 画像データ取得機能
２５ｃ 格子点群データ取得機能
２５ｄ 表示制御機能
２５ｅ 特定機能
２５ｆ 処理機能
２ 情報処理システム
４０ カメラ
５０ 情報処理装置
５５ 処理回路
５５ａ 制御機能
５５ｂ 画像データ取得機能
５５ｃ 格子点群データ取得機能
５５ｄ 表示制御機能
５５ｅ 特定機能
５５ｆ 処理機能
１０ 医用画像診断装置
２０ 医用情報処理装置
２５ 処理回路
２５ａ 制御機能
２５ｂ 画像データ取得機能
２５ｃ 格子点群データ取得機能
２５ｄ 表示制御機能
２５ｅ 特定機能
２５ｆ 処理機能
２ 情報処理システム
４０ カメラ
５０ 情報処理装置
５５ 処理回路
５５ａ 制御機能
５５ｂ 画像データ取得機能
５５ｃ 格子点群データ取得機能
５５ｄ 表示制御機能
５５ｅ 特定機能
５５ｆ 処理機能
【図1】
【図2】
【図3A】
【図3B】
【図4A】
【図4B】
【図5A】
【図5B】
【図5C】
【図5D】
【図6A】
【図6B】
【図6C】
【図7A】
【図7B】
【図8A】
【図8B】
【図8C】
【図9A】
【図9B】
【図9C】
【図9D】
【図10】
【図11A】
【図11B】
【図11C】
【図12】
【図13】
【図14A】
【図14B】
【図15】