(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022047420
(43)【公開日】2022-03-24
(54)【発明の名称】眼底画像観察プログラム
(51)【国際特許分類】
A61B 3/12 20060101AFI20220316BHJP
G06F 3/04847 20220101ALI20220316BHJP
【FI】
A61B3/12
G06F3/0484 170
【審査請求】未請求
【請求項の数】5
【出願形態】OL
(21)【出願番号】P 2020153330
(22)【出願日】2020-09-11
(71)【出願人】
【識別番号】000135184
【氏名又は名称】株式会社ニデック
(72)【発明者】
【氏名】清水 昭紀
(72)【発明者】
【氏名】植村 晴香
【テーマコード(参考)】
4C316
5E555
【Fターム(参考)】
4C316AA09
4C316AA10
4C316AB06
4C316AB07
4C316AB11
4C316AB12
4C316AB16
4C316FB12
4C316FB13
4C316FB14
4C316FB16
4C316FZ03
5E555AA04
5E555BA02
5E555BA53
5E555BA84
5E555BB02
5E555BC17
5E555CB42
5E555CC03
5E555DB58
5E555FA00
(57)【要約】
【課題】予め撮影されている複数の眼底画像の中から、比較に用いる眼底画像を容易に検者が選択できること。
【解決手段】眼底画像観察プログラムは、被検者に対し互いに異なる検査日時に複数の撮影方法で撮影された複数の眼底画像を取得する取得ステップと、複数の眼底画像のうち1枚を基準画像とし、複数の眼底画像のうち基準画像と比較する別の画像を比較画像とし、基準画像と比較画像を、予め定められた隣り合う第3表示領域310および第4表示領域320に読影画像として表示する表示出力ステップと、検査日時および撮影方法を絞り込み条件として選択することで複数の眼底画像の中から比較画像として表示する画像を絞り込むためのGUIである検査日選択コントロール330を読影画像と共に表示させ、検査日選択コントロール330を介した選択操作に基づいて絞り込みを行う絞り込みステップと、をコンピュータ1に実行させる。
【選択図】
図5
【特許請求の範囲】
【請求項1】
コンピュータのプロセッサによって実行される眼底画像観察プログラムであって、
被検者に対し互いに異なる検査日時に複数の撮影方法で撮影された複数の眼底画像を取得する取得ステップと、
前記複数の眼底画像のうち1枚を基準画像とし、前記複数の眼底画像のうち前記基準画像と比較する別の画像を比較画像とし、前記基準画像と前記比較画像を、予め定められた隣り合う表示領域に読影画像として表示する表示出力ステップと、
検査日時および撮影方法を絞り込み条件として選択することで前記複数の眼底画像の中から前記比較画像として表示する画像を絞り込むためのGUIを前記読影画像と共に表示させ、前記GUIを介した選択操作に基づいて絞り込みを行う絞り込みステップと、を前記コンピュータに実行させる、眼底画像観察プログラム。
【請求項2】
前記GUIは、前記絞り込み条件を入力する条件入力部と、前記絞り込み条件に合致する眼底画像の有無を検査日時順に整列して示す絞り込み結果表示部と、を備える請求項1記載の眼底画像観察プログラム。
【請求項3】
前記絞り込み結果表示部は、検査日時と撮影方法とに関連付けられた2軸テーブルであって、絞り込み条件に合致する眼底画像の有無を示す2軸テーブルである請求項2記載の眼底画像観察プログラム。
【請求項4】
前記表示出力ステップにおいて、前記第2表示領域には1枚の比較画像が表示され、
前記絞り込みステップによって絞り込まれた前記比較画像が複数枚ある場合に前記第2表示領域に表示される画像を切換るための第2のGUIウィジェットを更に表示すると共に、前記第2のGUIウィジェットを介した切換操作に基づいて前記比較画像を切換表示する、比較画像切換ステップを、前記コンピュータに実行させる、請求項1~3のいずれかに眼底画像観察プログラム。
【請求項5】
前記第2のGUIウィジェットとして、前記比較画像を、左右眼のいずれとするかを、前記基準画像とは独立に設定するための左右眼選択部を含む、請求項4記載の眼底画像観察プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、眼底画像観察プログラムに関する。
【背景技術】
【0002】
眼科分野の画像診断では、眼底撮影装置で撮影された眼底画像が広く利用されている。
【0003】
被検眼を多角的に診断および観察するうえで、種々の撮影方法で撮影された複数の眼底画像を読影することは、有用である。例えば、特許文献1には、眼底における、カラー画像、赤外画像、フルオルセイン造影画像、インドシアニングリーン造影画像、および、自発蛍光画像、を、1台で撮影可能な装置が開示されている。
【0004】
また、経過観察の場面では、検査日が互いに異なる眼底画像を見比べることが行われている。
【先行技術文献】
【特許文献】
【0005】
【発明の概要】
【発明が解決しようとする課題】
【0006】
例えば、特許文献1に開示される装置では、検査日毎に種々の撮影方法で撮影された複数の眼底画像が得られるため、その中から2枚以上の画像を比較して読影するために、画像をピックアップする作業が煩雑になりやすい。
【0007】
また、検査日毎に種々の撮影方法で撮影された複数の眼底画像の中から2枚以上の画像を見比べるケースとしては、経時変化を把握したいケースや、異なるモダリティ間で比較するケース等、読影の目的に応じた様々なケースが考えられ、ケースごとに見比べたい画像の組合せは異なる。また、見比べたい画像の組合せは、検査施設毎のワークフローに応じても都度異なっているものと考えられる。
【0008】
本開示は、上記事情に鑑みてなされたものであり、予め撮影されている複数の眼底画像の中から、比較に用いる眼底画像を容易に検者が選択できる、眼底画像観察プログラムを提供することを技術課題とする。
【課題を解決するための手段】
【0009】
本開示の第1態様に係る眼底画像観察プログラムは、コンピュータのプロセッサによって実行される眼底画像観察プログラムであって、被検者に対し互いに異なる検査日時に複数の撮影方法で撮影された複数の眼底画像を取得する取得ステップと、前記複数の眼底画像のうち1枚を基準画像とし、前記複数の眼底画像のうち前記基準画像と比較する別の画像を比較画像とし、前記基準画像と前記比較画像を、予め定められた隣り合う表示領域に読影画像として表示する表示出力ステップと、検査日時および撮影方法を絞り込み条件として選択することで前記複数の眼底画像の中から前記比較画像を絞り込むためのGUIを前記読影画像と共に表示させ、前記GUIを介した選択操作に基づいて絞り込みを行う絞り込みステップと、を前記コンピュータに実行させる。
【発明の効果】
【0010】
本開示によれば、予め撮影されている複数の眼底画像の中から、比較に用いる眼底画像を容易に検者が選択できる。
【図面の簡単な説明】
【0011】
【
図1】実施例に係る眼底画像観察システムの概要を示すブロック図である。
【
図2】一連の蛍光造影撮影の流れを示した図である。
【
図3】第1の表示状態におけるメイン画面の一例を示した図である。
【
図4】第2の表示状態におけるメイン画面の一例を示した図である。
【
図5】2枚の画像を並べるレイアウトでの第2ビュワー画面の一例を示した図である。
【
図6】3枚の画像を並べるレイアウトでの第2ビュワー画面の一例を示した図である。
【発明を実施するための形態】
【0012】
以下、本開示における1つの実施形態を説明する。初めに、
図1を参照して、実施形態に係る眼底画像観察システムを説明する。眼底画像観察システムは、複数の撮影方法で、眼底画像を撮影し、撮影された眼底画像を表示する。被検者に対し互いに異なる日に複数の撮影方法で複数の眼底画像を撮影することで、撮影された画像の中から任意の画像を表示することが可能である。なお、説明の便宜上、特に断りが無い限り、実施形態の説明において、眼底画像は眼底の正面画像を指すものとする。
【0013】
なお、互いに異なる複数の撮影方法の間の相違点は、被検眼に照射される光の波長域であってもよいし、蛍光撮影と反射撮影との違いがあってもよいし、正面撮影と断層(断面)撮影との違いがあってもよいし、その他の違いがあってもよい。
【0014】
眼底画像観察システムは、コンピュータ1と、眼底撮影装置100と、を含む。コンピュータ1と、眼底撮影装置100とは、有線または無線で接続されている。これにより、コンピュータ1と、眼底撮影装置100とは、通信可能である。実施形態に係る眼底画像観察プログラムは、コンピュータ1のプロセッサによって読み出し可能な、不揮発性メモリに格納されている。以下、説明される本実施形態では、眼底撮影装置100と、コンピュータ1とが、別体である。ただし、2つの装置は、一体化されていてもよい。
【0015】
<眼底撮影装置>
眼底撮影装置100は、少なくとも、撮影光学系(図示せず)を有する。この撮影光学系では、被検眼の眼底を光で照射したのちに眼底からの戻ってくる光が受光素子によって受光される。本実施形態では、受光素子からの受光信号に基づいて眼底画像が形成される。眼底画像は、眼底撮影装置100の画像処理回路(例えば、ICおよびプロセッサ等)によって形成される。なお、画像処理回路は、眼底撮影装置100に備え付けされている必要はない。例えば、コンピュータ1の画像処理回路が、眼底撮影装置100の画像処理回路を兼ねていてもよい。
【0016】
本実施形態において、眼底撮影装置100は、互いに異なる複数の撮影方法で、眼底画像を撮影する。眼底画像の1種としての蛍光造影画像が撮影可能であってもよい。また、他の眼底画像としての反射画像が撮影可能であってもよい。蛍光造影画像は、眼底血管に投与された蛍光造影剤の蛍光発光による撮影画像である。反射画像は、眼底照射に用いられた照明光の眼底反射光による撮影画像である。
【0017】
眼底撮影装置100の撮影光学系により、蛍光造影画像と、反射画像とが、同時に撮影可能であってもよい。ここでいう同時とは、完全同時に限定されない。若干の時間差は、許容される。時間差は、例えば、2種類の眼底画像が撮影される間に、有意な眼の動きが生じない程度の範囲で設定されてもよい。
【0018】
眼底撮影装置100は、例えば、インドシアニングリーン造影撮影(ICGA)、および、フルオレセイン造影撮影(FA)、のいずれかの撮影方法で、蛍光造影画像を撮影してもよい。2種類の造影剤を同時に静注することにより、2種類の蛍光造影画像が同時に撮影されてもよい。また、眼底撮影装置100は、赤外光による反射画像(以下、IR画像と称する)、および、カラー画像を撮影可能であってもよい。また、更に、自発蛍光画像が撮影可能であってもよい。
【0019】
実施形態に係る眼底撮影装置100は、SLO(走査型レーザー検眼鏡:Scanning Laser Ophthalmoscope)であってもよい。但し、必ずしもこれに限定されるものではなく、眼底撮影装置100は、眼底カメラ等の他の眼底撮影装置であってもよい。なお、蛍光造影画像と反射画像とを同時に撮影可能なSLOの詳細構成については、例えば、本出願人による特開2016-59399号公報等を参照されたい。
【0020】
<コンピュータ>
コンピュータ1は、少なくとも、眼底撮影装置100によって撮影される各種の眼底画像を取得して、モニタ80に表示させる。コンピュータ1は、少なくとも、演算制御部70を備える。演算制御部70は、コンピュータ1のプロセッサである。演算制御部70は、
図1に示すように、CPU、RAM、および、ROM等によって構成されてもよい。演算制御部70は、眼底画像の表示制御のほか、眼底画像に関する各種処理を、眼底画像観察プログラムに基づいて実行する。
【0021】
図1に示すように、コンピュータ1の演算制御部70は、データバス等を介して、メモリ71、操作部75、モニタ80、および、眼底撮影装置100等と接続される。
【0022】
本実施形態において、メモリ71は、不揮発性の記憶装置である。例えば、ハードディスクあるいはフラッシュメモリ等が、メモリ71として適用可能である。本実施形態において、眼底画像観察プログラムは、メモリ71に予め記憶されている。メモリ71は、書き換え可能であってもよい。この場合、以下の実施例において説明するように、メモリ71には、眼底撮影装置100から取得される各種の眼底画像が記憶されてもよい。但し、眼底画像は、眼底画像観察プログラムが記憶されたメモリとは、別体のメモリ(図示せず)に記憶されてもよい。
【0023】
操作部75は、コンピュータ1の入力インターフェイスである。演算制御部70は、操作部75への操作入力に応じた信号を受け付ける。操作部75としては、種々のデバイスが考えられる。例えば、タッチパッド、マウス、および、キーボードのうちの少なくともひとつが、操作部75として利用されてもよい。なお、操作部75は、眼底撮影装置100の入力インターフェイスとして兼用されてもよい。なお、眼底撮影装置100の入力インターフェイス(操作部)として、眼底撮影装置100に備え付けのジョイスティック、および、スイッチ等が、眼底撮影装置100に設けられていてもよい。
【0024】
モニタ80は、本実施形態において、眼底撮影装置100によって撮影された画像の表示部(表示デバイス)として利用される。モニタ80は、例えば、汎用のモニタあってもよいし、装置に備え付けのモニタであってもよい。モニタ80に代えて、ヘッドマウントディスプレイ等の他の表示デバイスが、表示部として利用されてもよい。
【0025】
<動作説明>
以下、上記のような構成を持つ、眼底画像観察システムの動作を説明する。
【0026】
同一日の検査において、複数の撮影方法で被検眼Eが撮影される場合がある。眼底撮影装置100は、検者の操作に応じて適宜撮影方法を切換え、眼底撮影装置100は、IR画像、カラー画像、自発蛍光画像、蛍光造影画像等を撮影する。撮影された眼底画像は、撮影方法を示す識別情報と対応付けて装置のメモリへ記憶される。
【0027】
<蛍光造影撮影>
ここで、蛍光造影撮影を例に、撮影の流れを、詳細に説明する。被検者に造影剤を静注した場合、眼底の血管内に流入する造影剤の量は、静注から一定時間経過後に急激に増大し、その後に徐々に減少する。静注直後の造影初期では、造影剤は、太い血管→細い血管の順で流入していく。このとき、眼底での蛍光発光の状態の変化は、大きく、且つ、速やかである。一方、造影剤が注入されてから、更に時間が経過した造影中期、および造影後期においては、造影剤が血管内に十分に行き渡っているので、眼底での蛍光発光の状態の変化は少なくなる。
【0028】
そこで、造影初期から造影後期までの一連の蛍光造影撮影において、造影初期では、蛍光造影画像の連続撮影が、撮影トリガ信号(本実施形態における第1トリガ信号)に基づいて開始されてもよい。連続撮影では、撮影トリガ信号が出力されてから、少なくとも10秒から数分間、或いは数十分の期間、継続的に蛍光造影画像が撮影される。つまり、当該期間の間、眼底に光が投光され、その戻り光が受光素子に受光される。連続撮影の結果、撮影画像群が、眼底撮影装置100によって取得される。
【0029】
撮影画像群には、撮影トリガ信号(本実施形態における第1トリガ信号)の出力タイミング以降に一定周期で撮影された連続的な複数フレームの蛍光造影画像(蛍光による眼底画像)が含まれる。SLOでは、眼底の所定範囲が周期的に走査されることにより、所定範囲内が一通り(つまり、一周期分)走査される毎に、1フレームの撮影画像を得ることが可能である。撮影画像群は、撮影期間中の各周期の眼底走査で得られた蛍光造影画像で構成されていてもよい。あるいは、1周期とばし、(又は、2周期とばし、3周期とばし、・・・n周期とばし、でもよい)の眼底走査で得られた蛍光造影画像が撮影画像群を構成していてもよい。眼底撮影装置100によって、少なくとも毎秒、数フレームの撮影画像が得られる。
【0030】
なお、以下では、撮影画像群に含まれる各々の蛍光造影画像を、以下、便宜上フレーム画像と称する場合がある。
【0031】
また、一連の蛍光造影撮影において、造影中期および造影後期では、撮影トリガ信号(本実施形態における第2トリガ信号)の出力に基づき、蛍光造影画像が単発的に撮影されてもよい。この場合、撮影トリガ信号の出力直後に、蛍光造影画像の静止画像が単発的に撮影される。ここでいう、単発的な撮影とは、撮影トリガ信号の出力を契機に、少なくとも1枚の予め定められた枚数の蛍光造影画像が得られることである。なお、単発的な撮影では、連続撮影に比べて、短い時間で撮影が行われる。1回の撮影トリガ信号につき、得られる蛍光造影画像は、好ましくは、多くても十枚程度にとどめられる。単発的な撮影の結果として得られる蛍光造影画像を、以下、便宜上造影静止画像と称する。造影静止画像は、連続造影撮影で得られるフレーム画像よりも多くの画素数(例えは、高い解像度)を有する画像であってもよい。
【0032】
なお、蛍光造影撮影は、必ずしもこれら説明された手法に限られない。造影初期において造影静止画像の撮影が行われてもよく、また、造影後期において、連続造影撮影が行われてもよい。
【0033】
一連の蛍光造影撮影の結果として取得される複数の蛍光造影画像の一部または全部は、加算画像であってもよい。FA、ICGAのいずれにおいても、眼底からの蛍光は微弱であり、それは、造影初期、造影後期においては特に顕著である。このため、例えば、連続する複数フレーム分の蛍光造影画像を取得し、それらを加算(加算平均あるいは加重平均等でもよい)することにより、良好な蛍光造影画像を得るようにしてもよい。
【0034】
眼底撮影装置100は、各々の蛍光造影画像と同時に、反射画像を撮影する。反射画像は、各々の蛍光造影画像の位置関係を対応付けるために利用可能である。反射画像の詳細は、後述する。
【0035】
次に、
図2を参照し、蛍光造影撮影における装置動作の具体例を説明する。
【0036】
[t0:アライメントおよび撮影条件の設定]
まず、検者は、被検眼に対する装置のアライメントを行い、併せて、撮影条件を設定する。この場合に設定される撮影条件には、励起光として眼底を照射する光の波長についての条件が少なくとも含まれる。例えば、FAの場合は、青色、又は、緑色の光が励起光として設定される。ICGAの場合は、赤外域の光が励起光として設定される。FAおよびICGAが同時に行われる場合、それぞれに対応した2種類の波長域が、励起光として設定される。更に、本実施形態では、第2の赤外域の光が、眼底に照射される光として、更に設定される。第2の赤外域の光は、眼底観察用の光、および、反射画像を得るための光として、兼用される。なお、第2の赤外域と、ICG励起用の赤外域とは、互いに異なる波長域に属する。
【0037】
[t1:蛍光造影撮影の開始]
アライメントおよび撮影条件の設定が完了したら、検者は、被検者に造影剤を静注する。また、同時に(又は直後に)、一連の蛍光造影撮影を開始させるための操作入力を、眼底撮影装置100の入力インターフェイスに対して行う。その結果、眼底撮影装置100において、蛍光造影撮影が開始される。
【0038】
蛍光造影撮影と共に、眼底撮影装置100において、造影タイマが作動される。造影タイマは、造影開始からの時間経過を計測する時間計測手段である。つまり、造影時期(時相ともいう)が、造影タイマによって管理される。造影タイマは、モニタ80へ表示されてもよい。本実施例では、一連の蛍光造影撮影で撮影される各々の眼底画像(蛍光造影画像および反射画像)には、撮影タイミングにおける造影タイマの計測時間が、対応付けてメモリに記憶される。
【0039】
一連の蛍光造影撮影の間、眼底は、継続的に、励起光で照射(SLOでは、更に、走査)され、更に、励起光による照射に起因する眼底からの蛍光による眼底画像が、眼底撮影装置100によって、逐次取得されてもよい。逐次取得される画像は、観察画像(リアルタイムな動画像)として、モニタ80に表示されてもよい。これにより、撮影範囲、および、固視のズレを、反射画像から確認できる。また、検者においては、蛍光による観察画像を確認することで、適切なタイミングで、トリガ操作を行うことが可能となる。
【0040】
[t1~t2:造影初期]
本実施形態では、一連の蛍光造影撮影の開始タイミングから、連続造影撮影が開始される。つまり、連続造影撮影の開始操作に基づいて、連続造影撮影の撮影トリガ信号が出力される。連続造影撮影の結果として、複数フレームの蛍光造影画像を含む撮影画像群が、メモリに記憶される。あわせて、本実施形態では、各々の蛍光造影画像と同時に撮影された反射画像が、メモリに記憶されてもよい。連続造影撮影は、開始から一定時間経過後に自動的に終了してもよいし、眼底撮影装置100の入力インターフェイスに対する所定操作に基づいて、手動で終了してもよいし、その他の終了条件を満たしたときに終了してもよい。
【0041】
本実施形態では、逐次取得されるフレーム画像(蛍光造影画像)が、モニタ80にリアルタイムな動画として表示される。併せて、各フレーム画像と共に撮影される、反射画像も動画として表示されてもよい。撮影範囲、および、固視のズレを、反射画像から検者が確認できる。
【0042】
連続造影撮影の結果として取得される撮影画像群のうち、読影等に利用される画像は、一部である場合が考えられる。このため、1つの撮影画像群のうち一部のフレーム画像が、キーフレームとして登録されてもよい。ここでいう「キーフレーム」は、連続造影撮影の結果として得られる複数のフレーム画像のうち、所望の造影状態を示す画像である。
【0043】
例えば、診断において有用である、CNV(脈絡膜新生血管)への造影剤が流入していく数秒間の間に形成されるフレーム画像等が、キーフレームの1つとして選択されてもよい。1回の連続造影撮影に対し、複数フレームのキーフレームが選択可能である。例えば、予め定められたタイミングで取得されたフレーム画像であってもよいし、連続造影撮影中に所定のトリガ操作が行われたタイミングで取得されるフレーム画像であってもよい。また、撮影の後で、事後的にキーフレームを選択可能であってもよい。
【0044】
本実施形態において、キーフレームは、撮影画像群の他のフレーム画像と比べて、後述のビュワー画面において優先的に表示される。例えば、他のフレーム画像は、ビュワー画面が起動されてから表示されるまでに、キーフレームと比べて多くの操作入力が要求されてもよいし、ビュワー画面において他のフレーム画像は非表示とされていてもよい。
【0045】
[t2~t3:造影中期および後期]
次いで、数分から数十分程度の時間を適宜おいて、造影静止画像の撮影が行われる。この撮影に際し、眼底撮影装置100は、観察画像を取得し、モニタ80に取得した画像を表示させる。造影中期、造影後期における任意のタイミングで、造影状態、又は、撮影範囲を、観察画像を用いて確認しながら、撮影操作が行われる(例えば、レリーズボタンを押下する)。撮影操作に基づいて、眼底撮影装置100には、撮影トリガ信号(第2トリガ信号)が入力される。これにより、眼底撮影装置100は、造影静止画像を取得する。このとき、励起光と共に、反射画像撮影用の光を眼底に投光することにより、造影静止画像と同時に、反射画像が得られる。このようして、撮影中期および後期では、撮影操作毎に、造影静止画像および反射画像が同時に取得されて、メモリに記憶される。
【0046】
造影中期、造影後期において撮影される造影静止画像の枚数は、造影初期において撮影される撮影画像群を構成するフレーム画像の枚数と比べて少ない。このため、本実施形態では、後述のビュワー画面において、各々の造影静止画像は、キーフレームと同等の優先度で表示されるものとする。
【0047】
<撮影結果の取得>
以上のようにして眼底撮影装置100によって撮影された、蛍光造影画像、および、反射画像は、コンピュータ1のプロセッサからアクセス可能なメモリ(ここでは、メモリ71)に記憶される。これにより、本実施形態では、互いに異なる複数の撮影方法で撮影された眼底画像が、コンピュータ1によって取得される。詳細には、一連の蛍光造影撮影で得られた複数フレームの蛍光造影画像が取得される。また、反射画像が更に取得されてもよい。
【0048】
また、前述したように、本実施形態では、各々の蛍光造影画像および反射画像が撮影された時の造影タイマの計測時間を示す情報が、更に、メモリ71に記憶される。
【0049】
このような撮影が、複数の日に行われることで、被検者に対し互いに異なる検査日に複数の撮影方法で撮影された複数の眼底画像が取得される。
【0050】
<ビュワー画面の表示>
コンピュータ1の演算制御部70は、ビュワー画面をモニタ80へ表示させる。ビュワー画面において、眼底画像が表示される。このビュワー画面は、レポート等として出力される眼底画像を選定するため、又は、編集(画像の加工)するため、等に利用される。
【0051】
図3~
図6に基づいて、本実施例におけるビュワー画面を説明する。本実施例におけるビュワー画面は、
図3および
図4に示すメイン画面(第1ビュワー画面)と、
図5および
図6に示す第2ビュワー画面と、に大別される。
【0052】
図3,
図4に示すメイン画面(第1ビュワー画面)は、少なくとも、検者によって指定された検査日に撮影された眼底画像の表示に利用される。本実施例におけるメイン画面上には、第1の表示領域201(
図3参照)と、第2の表示領域202(
図4参照)と、が、択一的に表示される。また、本実施例において、メイン画面には、各種ウィジェットが配置される。ここでいうウィジェットは、GUIのインタフェース部品(UIパーツ)の総称であり、コントロールとも称する。ウィジェットの具体例としては、ボタン、スライダー、チェックボックス、テキストボックス、等、多用なものが知られている。
【0053】
メイン画面に表示されるウィジェットの中には、少なくとも、メイン画面上の表示領域を切換えるために操作されるものが含まれる。メイン画面では、ウィジェットに対する操作入力に基づいて、第1の表示領域201(
図3参照)と、第2の表示領域202(
図4参照)と、が切換えて表示される。
【0054】
<メイン画面における各種ウィジェット>
図3,
図4のメイン画面には、表示領域の切換操作に用いるウィジェットの一例として、複数のタブ211~216が、表示領域201,202の上部に配置されている。複数のタブ211~216のうちいずれかを、ポインティングデバイスを介して選択操作することで、表示領域201,202が切換えられる。また、各々の表示領域201,202に表示される眼底画像は、所定の操作に応じて、適宜、拡大できる。所定の操作に基づいて眼底画像が選択されることで、別画面(例えば、第2ビュワー画面)上での拡大観察が可能となってもよい。
【0055】
第1の表示領域201には、互いに異なる撮影方法で撮影された複数の眼底画像のうち、いずれかの撮影方法による眼底画像が選択的に配置される。つまり、第1の表示領域201には、単一の撮影方法で撮影された眼底画像が表示可能である。各撮影方法に対応するタブ212~216(一例として、ICGAタブ212、FAタブ213、Colorタブ214、FAFタブ215、および、IRタブ216)が、第1の表示領域201と対応する。これらのうち何れかが選択されることで、第1の表示領域201がメイン画面上に表示される。第1の表示領域201には、選択したタブと対応する撮影方法による眼底画像が選択的に表示される。
【0056】
また、本実施例では、比較表示用のタブ(Comparisonタブ211)が選択されることで、第2の表示領域202がメイン画面上に表示される。第2の表示領域202には、互いに異なる撮影方法で撮影された複数の眼底画像であって、事前に登録画像として登録された眼底画像が選択的に表示可能である。「登録画像」は、例えば、撮影方法が異なる他の眼底画像との比較に利用されてもよい。
【0057】
その他のウィジェットとして、
図3,
図4に示すメイン画面には、左右眼切換ボタン231、データ出力ボタン233、および、画像編集ボタン234等が配置されている。
【0058】
左右眼切換ボタン231は、メイン画面に表示される眼底画像を、右眼を撮影したものと、左眼を撮影したものとの間で切換えるために操作される。
【0059】
データ出力ボタン233は、メイン画面において選定、編集等された眼底画像を、出力するために操作される。例えば、ボタン233を操作した場合、所定のレポート形式で出力されてもよい。出力は、表示出力であってもよいし、データ出力であってもよいし、印刷出力であってもよい。
【0060】
画像編集ボタン234は、表示領域に表示される眼底画像であって、検者によって選択された画像を、編集する際に操作される。画像編集ボタン234を介して、例えば、ブライトネス、コントラスト補正、および、ガンマ補正、鮮鋭化、および、平滑化等の各種画像処理の実行を受け付けてもよい。
【0061】
<第1の表示領域>
図3に示すように、第1の表示領域201には、単一の撮影方法による眼底画像が表示される。
【0062】
例えば、FAタブ212およびICGAタブ213のうちいずれかが選択されると、蛍光造影撮影による眼底画像が、第1の表示領域201内に表示される。この場合、各々の撮影トリガ信号毎に得られた複数フレームの蛍光造影画像から、任意の造影時期に撮影された蛍光造影画像を、登録画像として選択し、登録できる。
【0063】
本実施形態において、表示領域内には、一連の蛍光造影撮影で得られた多数の眼底画像のうち、キーフレーム、および、造影静止画像が表示される。これにより、登録画像の登録作業を、効率良く行うことができる。
【0064】
また、第1の表示領域201においては、眼底画像を登録画像として登録するための操作を、第1の表示領域201へ表示される眼底画像毎に受け付け可能である。
図3に示すように、第1の表示領域201における各々の眼底画像の周囲(図では上部)に、チェックボックス237(第2のウィジェットの一例)が配置されてもよい。チェックボックス237を選択して、チェックが付いた眼底画像が、登録画像として登録される。
【0065】
メイン画面に蛍光造影画像が表示される場合、各々の蛍光造影画像と対応付けて造影時期を示す情報が表示される。造影時期を示す情報は、撮影時における造影タイマの値であってもよいし、検査日時であってもよい。一例として、
図3,
図4に示したメイン画面では、造影バー240を用いて、造影時期がグラフィカルに示されている。造影バー240における塗りつぶしと余白との比率によって、経過時間と残り時間との比率が示される。これによって、検者は、各眼底画像における造影時期を直感的に把握できる。
【0066】
また、例えば、Colorタブ214を選択するとカラー画像が、FAFタブ215を選択すると自発蛍光画像が、IRタブ216を選択すると赤外画像が、それぞれ表示される。この場合も、FAタブ212またはICGAタブ213が選択された場合と同様の操作で、登録画像を登録可能であってもよい。なお、これらのタブは一例に過ぎず、撮影方法に応じて、適宜別のタブが設けられていてもよい。例えば、広角の眼底画像と対応するタブが設けられていてもよい。広角の眼底画像と対応するタブは、更に、詳細な撮影方法毎(例えば、それぞれ、広角での、FA、ICGA、Color撮影、FAF撮影、IR撮影等)に設けられていてもよい。
【0067】
<第2の表示領域>
図4に示すように、第2の表示領域202には、撮影方法毎に事前に登録されている登録画像が、表示領域201において並べて表示可能である。このとき、第2の表示領域202には、撮影方法が互いに異なる複数の眼底画像が混在して並べられ得る。各々の眼底画像は、第1の表示領域201において、撮影方法毎にピックアップされたものであるので、第2の表示領域202において、撮影方法が互いに異なる複数の眼底画像が混在しても、閲覧しやすい。従って、本実施形態のメイン画面によれば、互いに異なる撮影方法で撮影された複数の眼底画像の中から、検者によって選択された画像が好適に表示される。
【0068】
図3,
図4に示すメイン画面上における各々の眼底画像には、撮影方法を示す識別情報が付される。一例として、各々の眼底画像における枠部分(例えば、ヘッダ部分)へ、撮影方法と対応する色が付される。また、更に、タブ212~216も、撮影方法と対応する色が付される。これにより、第2の表示領域202において表示される各々の眼底画像における撮影方法を、検者が直感的に把握しやすくなる。なお、撮影方法を示す識別情報は、例えば、撮影方法を示すテキストであってもよいし、その他であってもよい。
【0069】
図3,
図4に示すメイン画面において、表示領域を切換えるための操作は、タブ211~216の選択操作で足りる。つまりは、ワンアクションの操作入力で充足する。表示状態がワンアクションで切替わるため、検者が、第1の表示領域201において登録画像を選択し、選択した画像同士を第2の表示領域202において比較等する作業において、作業性が向上する。なお、ここでいうワンアクションの操作は、表示領域を切換えるうえで求められる唯一の操作である。換言すれば、表示領域を切換るうえで、該操作が行われてから確認が要求されない。
【0070】
<登録結果の再利用>
左右眼の間で、登録作業による登録結果を、再利用してもよい。より詳細には、制御部70は、片眼について登録画像として登録された眼科画像と、同条件で撮影された反対眼についての眼底画像を、反対眼における登録画像として、自動的に登録してもよい。例えば、片眼について登録画像の登録が行われた後、左右眼切換ボタン231が操作されることによって、自動的に反対眼についての登録画像が設定されてもよい。なお、同条件とは、撮影方法および撮影タイミング(例えば、造影時期)の一方または両方についての条件が同じことを指す。本実施例においては、左右両眼を同時に撮影できないので、撮影タイミングについての厳密な同一性は要求されない。例えば、所定時間内に撮影された各眼の画像が、撮影タイミングに関して同条件で撮影された画像として扱われてもよい。これにより、左右両眼についての登録画像を登録する作業を、効率よく進めることができる。
【0071】
また、これに限らず、あるときの登録作業による登録結果を、その後の登録作業において再利用してもよい。すなわち、あるときに第2の表示領域202内に配置された各々の眼底画像と同条件で撮影された眼底画像が、新たな登録作業の際に、登録画像として自動的に設定されてもよい。
【0072】
<第2ビュワー画面>
次に、
図5,6を参照して、第2ビュワー画面について説明する。メイン画面において、1枚以上の眼底画像が選択された状態でボタン250が操作されることによって、第2ビュワー画面へ遷移される。なお、本実施例では、特に断りが無い限り、メイン画面で2枚の画像が選択されたうえでボタン250が操作され、その結果として
図5の画面に遷移したものとして、説明する。
【0073】
第2ビュワー画面には、隣り合うようにして、予め定められた2つ以上の表示領域が設定されている。それぞれの表示領域には、眼底画像が読影画像として表示される。
図5では、左側の第3表示領域310に、比較される画像のうち1枚が表示される。この画像を、便宜上、基準画像と称する。右側の第4表示領域320には、基準画像とは異なる眼底画像であり、基準画像と比較される比較画像が表示される。なお、基準画像と比較画像との呼び方は、本実施例における便宜的なものである。本実施例では、後述するように、ボタン351,352を操作することで、基準画像と比較画像とを入れ替えることができる。
【0074】
また、更に、第2ビュワー画面には、2つの表示領域310,320と共に、検査日選択コントロール330が設定されている。検査日選択コントロール330は、複数の眼底画像の中から比較画像として表示する画像を絞り込むためのGUIの一例である。検査日選択コントロール330を介して絞り込みが行われることにより、表示領域320に表示可能な画像が制限される。本実施例では、検査日そのものと、撮影方法と、のそれぞれが絞り込み条件として用いられる。
【0075】
図5に示す検査日選択コントロール330は、日付入力フォーム331と、検査データリスト335と、に大別される。日付入力フォーム331は、検査日に関する絞り込み条件を入力する条件入力部である。検査データリスト335は、本実施例における絞り込み結果表示部である。また、後述するように、撮影方法に関する条件入力部として、複数のチェックボックス336を有する。
【0076】
日付入力フォーム331は、検者が期間を指定することにより、第4表示領域320に表示可能な眼底画像を、指定された期間で得られた範囲に絞り込むために利用される。
図5に示す日付入力フォーム331は、期間の始期と終期とをそれぞれ入力するための入力欄を有している。入力欄に直接日付を入力することにより、或いは、入力欄に隣接するカレンダーアイコンを選択すると展開されるカレンダーを介して、検者の所望の日付が入力される。但し、日付入力フォーム331は、必ずしもこれに限られるものではなく、種々の日時ピッカーが適用され得る。
【0077】
図5に示すように、検査データリスト335は、検査日と撮影方法とに関連付けられた2軸テーブルとして形成されている。また、それぞれの撮影方法で得られた眼底画像の有無が、検査日毎にリストとして一覧表示される。リストは、検査日順に整列される。これにより、検査日毎に異なる撮影方法の組合せで撮影が行われた場合であっても、撮影日毎のそれぞれの撮影方法で得られた眼底画像の有無を、検者は検査データリスト335を介して容易に把握できる。日付入力フォーム331を用いて検査日の絞り込み行われた場合、検査データリスト335では、絞り込まれた期間での一覧表示が行われる。
【0078】
また、検査データリスト335を介して撮影方法の絞り込みが可能である。すなわち、検査データリスト335の先頭行には、それぞれの撮影方法と対応付けて、撮影方法の表示(
図5においては、FA,ICGA,Color,FAF,Retro,IR等のテキスト)が示されると共に、各表示の隣にチェックボックス336が設けられている。チェックボックス336がチェックされることで撮影方法に関する絞りこみ条件が設定される。検査データリスト335には、チェックされた撮影方法による(つまり、絞り込み条件に該当する)眼底画像が存在する検査日が抽出され、リストとして表示される。なお、本実施例では、複数のチェックボックス336をチェックすることで、更なる絞り込みが可能である。例えば2つのチェックボックス336がチェックされている場合、チェックされた2つの撮影方法による眼底画像が、両方とも存在している検査日が抽出される。
【0079】
このようにして、検査日そのものと、撮影方法と、のそれぞれが絞り込み条件として用いられて、第4表示領域320に比較画像として表示可能な画像が絞り込まれる。過去に何度も検査が行われ、検査日毎に異なる撮影方法の組合せで検査が行われていたとしても、所望の眼底画像が撮影された検査日を、検査日選択コントロール330を介して容易に絞りこむことができる。また、検査データリスト335において、絞り込み条件に合致する眼底画像の有無が、検査日時順に整列して示される。更には、検査データリスト335は、検査日と撮影方法とに関連付けられた2軸テーブルとして構成される。このため、絞り込まれたそれぞれの検査日に、所望の眼底画像が存在するか否かが、容易に把握されやすい。
【0080】
検査データリスト335上で、いずれかの検査日の行が選択されることによって、選択された検査日の眼底画像が、第4表示領域320に表示される。本実施例では、改めて検査日および撮影方法の絞り込み条件を変更する操作が検査日選択コントロール330に入力されない限り、検査データリスト335の内容は保持される。つまり、絞り込まれた状態が保持される。
【0081】
ここで、選択された検査日に対して複数の眼底画像が存在する場合がある。そこで、本実施例では、選択された検査日に得られた複数の眼底画像の中から、検者が所望する画像を特定するためのウィジェットが、画面上に更に設けられている。このようなウィジェットとして、
図5には、左右眼設定ボタン341、スクロールバー342、および、撮影方法指定部343、が例示される。
【0082】
左右眼設定ボタン341は、比較画像に係る被検眼を、右眼/左眼/両眼(左右いずれかに限定しない)のいずれかに切り換えるために利用される。本実施形態では、基準画像に係る被検眼と、比較画像に係る被検眼とを独立に設定できる。
【0083】
スクロールバー342は、表示可能な眼底画像が複数ある場合に、第4表示領域320に択一的に表示される画像を切換えるために操作される。スクロールバー342をスクロールさせることによって、第4表示領域320に表示される眼底画像が所定の順序で切替わる。
【0084】
撮影方法指定部343は、第4表示領域320に表示される眼底画像を、特定の撮影方法で得られた画像とするか否かを切換えるために操作される。
図5に示す撮影方法指定部343は、複数の撮影方法の中からいずれかを選択するドロップダウンリストであってもよい。撮影方法指定部343でいずれかの撮影方法が指定されると、第4表示領域320に表示可能な眼底画像が、選択された撮影方法による画像に制限される。
【0085】
チェックボックス344は、第4表示領域320に表示されている眼底画像が、登録画像であるか否かを示すために用いられる。第4表示領域320に表示中の画像が登録画像である場合は、チェックボックス344にチェックが付され、登録画像でなければ、チェックボックス344は空欄となる。
【0086】
また、第2ビュワー画面には、表示位置移動ボタン351,352と、画像追加ボタン353と、を備えていてもよい。表示位置移動ボタン351,352は、眼底画像の表示領域を切換えるために選択される。すなわち、
図5の例では、第3表示領域310の下に配置される「→」のボタン、あるいは、第4表示領域320の下に配置される「←」のボタンが操作されることによって、第3表示領域310と第4表示領域320との間で、表示される画像が入れ替わる。つまり、本実施例における基準画像と比較画像とが入れ替わる。これに伴い、上記のGUI(検査日選択コントロール330、左右眼設定ボタン341、スクロールバー342、撮影方法指定部343、および、チェックボックス344)の操作に基づいて、それまで第3表示領域310に表示されていた画像を、検査日および撮影方法の少なくともいずれかが異なる他の眼底画像へと変更できる。
【0087】
なお、本実施例では、第3表示領域310に表示される基準画像については、撮影日を変更しない範囲で、他の眼底画像に変更できる。そのために、第3表示領域310の近傍に、左右眼設定ボタン315、スクロールバー316、および、撮影方法指定部317、が配置されている。これらのウィジェットは第4表示領域320に表示される画像を切換えるためのウィジェット341、342、343、と同様に操作され、操作に応じて第3表示領域310に表示される画像が変更される。
【0088】
画像追加ボタン353は、
図5に示される基準画像および比較画像と比較する画像を追加するために操作される。画像追加ボタン353が操作されると、
図6に示す、3枚の眼底画像の表示領域が横並びに設定された画面レイアウトに遷移する。
図5において、第3表示領域310に表示されていた画像は、
図6における左側の表示領域410に、
図5において第4表示領域320に表示されていた画像は、
図6における中央の表示領域420にそれぞれ配置される。
図6における右側の表示領域430に、3枚目の眼底画像が追加される。3枚目の眼底画像は、
図5において第4表示領域320に表示される眼底画像と同様の操作で選択し、表示させることができる。本実施例の第2ビュワー画面においては、
図6に示すように最大3枚までの眼底画像が横並びで表示される。但し、必ずしもこれに限られるものではなく、より多数の眼底画像が横並びで表示されてもよい。
【0089】
メイン画面での操作と同様に、第2ビュワー画面においても、図示なきデータ出力ボタン等の操作に基づいて、第2ビュワー画面上で選定された眼底画像が出力される。このとき、第2ビュワー画面に表示される複数の眼底画像が、第2ビュワー画面と同様の横並びのレイアウトのレポートとして、出力されてもよい。
【0090】
以上説明したように、本実施例では、1人の被検者に対して互いに異なる検査日に複数の撮影方法で撮影が行われた結果として多数の画像が取得されていても、検査日選択コントロール330を介して検査日および撮影方法のそれぞれで絞り込みができる。また、検査日と撮影方法とに関連付けられた2軸テーブルである検査データリスト335を介して、絞り込みの結果を直ちに把握できる。
【0091】
絞り込まれたリストから1つの検査日が選択されると、その検査日に得られた眼底画像が、第4表示領域320に直ちに表示される。このとき、比較画像として当初表示される画像の種別や時相等が、検者が所望するものとは異なっていても、各種ウィジェット341,342,343を介して、所望する画像を比較画像に容易に変更できる。
【0092】
適切な画像が選択した検査日に存在しなければ、改めて画像を選び直すが、事前に行われた検査日選択コントロール330を介した絞り込みの結果は保持されているので、例えば、事前に絞り込まれている検査日のうち、別の検査日を、ワンアクションで選択できる。その際、基準画像または前回選んだ比較画像を確認しながら作業できる。これにより、比較に適した複数の画像を並べる作業を、効率よく行うことができる。
【0093】
更には、本実施例では、検査日選択コントロール330を介した絞り込み⇒検査日の選択⇒各種ウィジェット341,342,343の操作による画像の選択を経ることで、読影の目的や、検査施設毎のワークフローに応じた、複数の画像の並列表示が可能となる。つまり、単一のビュワー画面(第2ビュワー画面)で、片眼に関し撮影方法の異なる画像同士を見比べたり、片眼に関し同一の撮影方法で異なる撮影日に撮影された画像同士を見比べたり、両眼の画像を見比べたりすることができる。よって、1つのビュワー画面で、読影の目的や、検査施設毎のワークフローに応じて柔軟に対応できる。
【0094】
「変容例」
以上、実施形態に基づいて説明を行ったが、本開示は、上記実施形態に限定されるものではない。本開示は、上記実施形態に対する種々の変容形態を含みうる。
【0095】
<第1表示領域201と第2表示領域202との同時表示>
上記実施形態では、第1表示領域201と第2表示領域202とが、タブ201~206の操作に基づいて、メイン画面において択一的に表示された。しかし、必ずしもこれに限られるものではなく、第1表示領域201と第2表示領域202とが、メイン画面上において同時に(換言すれば、並列的に)表示されてもよい。この場合、第1表示領域201に表示される眼底画像を、第2表示領域202へドラッグ&ドロップすることで、ドラッグ&ドロップされた眼底画像を登録画像として登録する登録操作が行われてもよい。
【0096】
<登録画像に登録する条件の事前設定>
上記実施形態では、コンピュータ1によって取得される各種眼底画像を登録画像として登録するためには、メイン画面上での登録操作が、画像毎に要求される。
【0097】
これに対し、事前に登録画像として登録すべき条件を設定しておくことによって、コンピュータ1によって取得される眼底画像のうち、条件に合致する画像が、事前に登録画像として登録されてもよい。このような画像は、メイン画面を介した登録操作を要することなく、メイン画面上で登録画像として表示されてもよい。
【0098】
事前に設定される条件は、例えば、以下の3つの条件から選択可能であってもよい。これらの条件は、撮影方法毎に設定可能であってもよい。
第1の条件:特定の撮影方法で撮影されたすべての画像を、登録画像として登録する。
第2の条件:蛍光造影画像において所定の経過時間で得られた画像を、登録画像として登録する。
第3の条件:登録画像の事前登録は行わない。
【0099】
第1の条件は、カラー画像、自発蛍光画像、IR画像に適している。1日の撮影におけるこれらの画像の撮影回数は、蛍光造影画像と比べて、一般的に、少ないので、各眼底画像は、いずれも、デフォルト設定において、登録画像として登録されていることで、登録画像の設定作業に要する検者の負担が軽減される。
【0100】
第2の条件は、施設において造影検査がルーチンワーク化される際に有用である。なお、第2の条件における経過時間は、任意の時間が設定可能であってもよいし、複数設定可能であってもよい。
【0101】
<位置合わせ>
例えば、上記実施形態において、ビュワー画面に表示される各々の眼底画像は、互いに位置合わせ(位置ズレが補正)された状態で表示されてもよい。このときの位置合わせ処理は、例えば、本出願人による特開2016-59400号公報に開示された技術を利用してもよい。
【0102】
<不良判定>
例えば、上記実施形態において、コンピュータ1は、メモリ71に記憶される眼底画像が、撮影不良か否かを判定し、撮影不良と判定される画像を、ビュワー画面における表示対象から除外してもよい。蛍光造影画像が撮影不良である場合、同時に撮影される反射画像も撮影不良となる。そのため、反射画像に基づいて、上記判定が行われてもよい。特に、造影初期では、造影状態の変化が大きく、早い。そのため、蛍光造影画像自体からは、撮影不良の判定が困難であることが考えられる。しかし、反射画像の撮影条件は一定であるので、容易に撮影不良を判定することができる。
【0103】
<他のモダリティへの適用>
また、実施形態の眼底画像観察プログラムは、蛍光造影撮影への適用に限られず、一連の撮影(例えば、同日における撮影)で、複数回の撮影トリガ信号が出力される結果、取得される多数の被検眼の撮影画像から、所望の画像を抽出する場合にも適用可能である。例えば、適用可能な被検眼の画像は、多岐にわたる。その具体的な例としては、OCT画像、機能OCT画像(具体例としては、モーションコントラスト画像)、OCT画像又は機能OCT画像に基づくEnface画像、眼底画像、および前眼部画像が挙げられる。また、薬剤を投与し、それに対する被検眼における経時的な反応を評価する際に、実施形態の眼底画像観察プログラムが利用されてもよい。
【0104】
また、上記実施形態において、コンピュータ1が取得し、ビュワー画面に表示される複数枚の眼底画像は、単一の撮影光学系によって撮影されたものであってもよい。コンピュータ1が取得し、ビュワー画面に表示される眼底画像には、追加的に、別の撮影光学系で撮影された眼底画像が、更に含まれてもよい。例えば、コンピュータ1が、図示なきOCT光学系を介して取得した被検眼のOCT画像を、更に取得し、SLO画像と共に、ビュワー画面に表示してもよい。
【符号の説明】
【0105】
310 第3表示領域
320 第4表示領域
330 検査日選択コントロール