特表 2024-545326 病理スライド画像を出力する方法及び装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-12-05

(54)【発明の名称】病理スライド画像を出力する方法及び装置

(51)【国際特許分類】

   G16H 40/60 20180101AFI20241128BHJP

   G16H 30/00 20180101ALI20241128BHJP

【ＦＩ】

G16H40/60

G16H30/00

【審査請求】未請求

【予備審査請求】未請求

(21)【出願番号】P 2024538107

(86)(22)【出願日】2022-12-13

(85)【翻訳文提出日】2024-06-27

(86)【国際出願番号】 KR2022020223

(87)【国際公開番号】W WO2023121110

(87)【国際公開日】2023-06-29

(31)【優先権主張番号】10-2021-0187098

(32)【優先日】2021-12-24

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】10-2022-0028108

(32)【優先日】2022-03-04

(33)【優先権主張国・地域又は機関】KR

(81)【指定国・地域】

(71)【出願人】

【識別番号】523098991

【氏名又は名称】ルニット・インコーポレイテッド

【氏名又は名称原語表記】Ｌｕｎｉｔ Ｉｎｃ．

(74)【代理人】

【識別番号】100145403

【弁理士】

【氏名又は名称】山尾 憲人

(74)【代理人】

【識別番号】100132241

【弁理士】

【氏名又は名称】岡部 博史

(74)【代理人】

【識別番号】100113170

【弁理士】

【氏名又は名称】稲葉 和久

(74)【代理人】

【識別番号】100224616

【弁理士】

【氏名又は名称】吉村 志聡

(72)【発明者】

【氏名】チョン，ウォンギョン

(72)【発明者】

【氏名】チョ，スイク

【テーマコード（参考）】

5L099

【Ｆターム（参考）】

5L099AA03

5L099AA26

(57)【要約】

一態様による病理スライド画像を出力する方法は、病理スライド画像（ｐａｔｈｏｌｏｇｙ ｓｌｉｄｅ ｉｍａｇｅ）に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力を受信するステップと、前記ユーザ入力に基づいて前記病理スライド画像に出力されるガイドの面積及び前記ガイド内に含まれる前記病理スライド画像の領域を決定するステップと、決定された前記面積及び前記領域に基づいて前記ガイドがオーバーレイされた病理スライド画像を出力するステップと、を含む。

【特許請求の範囲】

【請求項1】

病理スライド画像（ｐａｔｈｏｌｏｇｙ ｓｌｉｄｅ ｉｍａｇｅ）に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力を受信するステップと、
前記ユーザ入力に基づいて、前記病理スライド画像に出力されるガイドの面積及び前記ガイド内に含まれる前記病理スライド画像の領域を決定するステップと、
決定された前記面積及び前記領域に基づいて、前記ガイドがオーバーレイされた病理スライド画像を出力するステップと、
を含む、
病理スライド画像を出力する方法。

【請求項2】

前記決定するステップは、
前記ユーザ入力に応じて指定された倍率に基づいて、前記領域が固定された状態で前記面積を拡大または縮小する、
請求項１に記載の方法。

【請求項3】

前記決定するステップは、
前記ユーザ入力に応じて指定された倍率に基づいて、前記面積が固定された状態で前記領域を拡大または縮小する、
請求項１に記載の方法。

【請求項4】

追加的に受信されたユーザ入力に基づいて、前記病理スライド画像の少なくとも一部が拡大または縮小された画像を出力するステップをさらに含む、
請求項１に記載の方法。

【請求項5】

前記病理スライド画像における所定の基準に応じてユーザによって観察された領域を確認するステップと、
前記確認の結果に応じて前記観察された領域とその他の領域とを区分して出力するステップと、
をさらに含む、
請求項１に記載の方法。

【請求項6】

前記所定の基準は、前記ユーザ入力に応じて指定された倍率が閾値倍率以上のものを含む、
請求項５に記載の方法。

【請求項7】

前記出力するステップは、
前記所定の基準に応じて観察された領域とその他の領域とが区分されるように表現されたサムネイル画像（ｔｈｕｍｂｎａｉｌ ｉｍａｇｅ）を出力する、
請求項５に記載の方法。

【請求項8】

前記病理スライド画像に少なくとも１つの関心領域を設定するステップと、
前記病理スライド画像における所定の基準に応じてユーザによって観察された領域を確認するステップと、
前記ユーザによって観察された領域が少なくとも１つの前記関心領域を含むか否かを判断するステップと、
をさらに含む、
請求項１に記載の方法。

【請求項9】

前記病理スライド画像の観察の終了に関連するユーザ入力を受信するステップと、
前記判断の結果に基づいて、前記病理スライド画像のさらなる観察の有無に対する通知信号を生成するステップと、
をさらに含む、
請求項８に記載の方法。

【請求項10】

請求項１に記載の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。

【請求項11】

少なくとも１つのメモリと、
少なくとも１つのプロセッサと、
を含み、
前記プロセッサは、
病理スライド画像（ｐａｔｈｏｌｏｇｙ ｓｌｉｄｅ ｉｍａｇｅ）に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力に基づいて、前記病理スライド画像に出力されるガイドの面積及び前記ガイド内に含まれる前記病理スライド画像の領域を決定し、決定された前記面積及び前記領域に基づいて、前記ガイドがオーバーレイされた病理スライド画像を出力するように表示装置を制御する、
コンピューティング装置。

【請求項12】

前記プロセッサは、
前記ユーザ入力に応じて指定された倍率に基づいて、前記領域が固定された状態で前記面積を拡大または縮小する、
請求項１１に記載のコンピューティング装置。

【請求項13】

前記プロセッサは、
前記ユーザ入力に応じて指定された倍率に基づいて、前記面積が固定された状態で前記領域を拡大または縮小する、
請求項１１に記載のコンピューティング装置。

【請求項14】

前記プロセッサは、
追加的に受信されたユーザ入力に基づいて、前記病理スライド画像の少なくとも一部が拡大または縮小された画像を出力するように前記表示装置を制御する、
請求項１１に記載のコンピューティング装置。

【請求項15】

前記プロセッサは、
前記病理スライド画像において、所定の基準に応じてユーザによって観察された領域を確認し、前記確認の結果に応じて前記観察された領域とその他の領域とを区分して出力するように前記表示装置を制御する、
請求項１１に記載のコンピューティング装置。

【請求項16】

前記所定の基準は、前記ユーザ入力に応じて指定された倍率が閾値倍率以上のものを含む、
請求項１５に記載のコンピューティング装置。

【請求項17】

前記プロセッサは、
前記所定の基準に応じて観察された領域とその他の領域とが区分されるように表現されたサムネイル画像（ｔｈｕｍｂｎａｉｌ ｉｍａｇｅ）を出力するように前記表示装置を制御する、
請求項１５に記載のコンピューティング装置。

【請求項18】

前記プロセッサは、
前記病理スライド画像で少なくとも１つの関心領域を設定し、前記病理スライド画像における所定の基準に応じてユーザによって観察された領域を確認し、前記ユーザによって観察された領域が少なくとも１つの前記関心領域を含むか否かを判断する、
請求項１１に記載のコンピューティング装置。

【請求項19】

前記プロセッサは、
前記病理スライド画像の観察の終了に関連するユーザ入力が受信されると、前記判断の結果に基づいて、前記病理スライド画像のさらなる観察の有無に対する通知信号を生成する、
請求項１８に記載のコンピューティング装置。

【発明の詳細な説明】

【技術分野】

【0001】

病理スライド画像を出力する方法及び装置（Ａ ｍｅｔｈｏｄ ａｎｄ ａｎ ａｐｐａｒａｔｕｓ ｆｏｒ ｄｉｓｐｌａｙｉｎｇ ｐａｔｈｏｌｏｇｙ ｓｌｉｄｅ ｉｍａｇｅｓ）に関する。

【背景技術】

【0002】

デジタル病理学（ｄｉｇｉｔａｌ ｐａｔｈｏｌｏｇｙ）分野は、病理スライド画像（ｐａｔｈｏｌｏｇｉｃａｌ ｓｌｉｄｅ ｉｍａｇｅ）をスキャンすることによって生成された全スライド画像（ｗｈｏｌｅ ｓｌｉｄｅ ｉｍａｇｅ）を用いて当該患者の組織学的情報を取得し、予後を予測する分野である。

【0003】

従来の病理学分野では、病理科医（ｐａｔｈｏｌｏｇｉｓｔ）が光学顕微鏡（ｏｐｔｉｃａｌ ｍｉｃｒｏｓｃｏｐｅ）にガラススライドを固定した後、顕微鏡の倍率と焦点を調節し、ガラススライドを上下または左右に動かしながらスライド画像を読み取る。一方、デジタル病理学分野では、病理科医が画像ファイルに変換された病理スライド画像をモニタ画面に出力した後、マウスやキーボードなどで倍率を調節し、スライドを動かしながらスライド画像を読み取る。

【0004】

したがって、従来の病理学分野での画像読取方式とデジタル病理学分野での画像読取方式との違いにより発生し得る副作用を解消できる技術に対する需要が高まっている。

【発明の概要】

【発明が解決しようとする課題】

【0005】

病理スライド画像を出力する方法及び装置を提供することにある。また、前記方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体を提供することにある。解決しようとする技術的課題は、前記の技術的課題に限定されず、他の技術的課題が存在し得る。

【課題を解決するための手段】

【0006】

一態様による病理スライド画像を出力する方法は、病理スライド画像（ｐａｔｈｏｌｏｇｙ ｓｌｉｄｅ ｉｍａｇｅ）に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力を受信するステップと、前記ユーザ入力に基づいて前記病理スライド画像に出力されるガイドの面積及び前記ガイド内に含まれる前記病理スライド画像の領域を決定するステップと、決定された前記面積及び前記領域に基づいて前記ガイドがオーバーレイされた病理スライド画像を出力するステップと、を含む。

【0007】

他の態様によるコンピュータで読み取り可能な記録媒体は、上述した方法をコンピュータで実行させるためのプログラムを記録した記録媒体を含む。

【0008】

他の態様によるコンピューティング装置は、少なくとも１つのメモリと、少なくとも１つのプロセッサと、を含み、前記プロセッサは、病理スライド画像（ｐａｔｈｏｌｏｇｙ ｓｌｉｄｅ ｉｍａｇｅ）に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力に基づいて、前記病理スライド画像に出力されるガイドの面積及び前記ガイド内に含まれる前記病理スライド画像の領域を決定し、決定された前記面積及び前記領域に基づいて、前記ガイドがオーバーレイされた病理スライド画像を出力するように表示装置を制御する。

【図面の簡単な説明】

【0009】

【図1】一実施形態による病理スライド画像を出力するシステムの一例を説明するための図

【図2A】一実施形態によるユーザ端末１０の一例を示す構成図

【図2B】一実施形態によるサーバの一例を示す構成図

【図3】一実施形態による病理スライド画像を出力する方法の一例を説明するためのフローチャート

【図4A】一実施形態によるガイドがオーバーレイされた病理スライド画像が出力される一例を説明するための図

【図4B】一実施形態によるガイドがオーバーレイされた病理スライド画像が出力される一例を説明するための図

【図5A】一実施形態によるガイドがオーバーレイされた病理スライド画像が出力される他の例を説明するための図

【図5B】一実施形態によるガイドがオーバーレイされた病理スライド画像が出力される他の例を説明するための図

【図6】一実施形態による病理スライド画像を出力する方法の他の例を説明するためのフローチャート

【図7A】一実施形態による病理スライド画像が出力される他の例を説明するための図

【図7B】一実施形態による病理スライド画像が出力される他の例を説明するための図

【図8】一実施形態による病理スライド画像を出力する方法の他の例を説明するためのフローチャート

【図9A】一実施形態による所定の基準に応じて観察された領域とその他の領域とを区分する一例を説明するための図

【図9B】一実施形態による所定の基準に応じて観察された領域とその他の領域とを区分する一例を説明するための図

【図9C】一実施形態による所定の基準に応じて観察された領域とその他の領域とを区分する一例を説明するための図

【図10】一実施形態によるサムネイル画像が出力される一例を説明するための図

【図11】一実施形態による病理スライド画像を出力する方法の他の例を説明するためのフローチャート

【図12】一実施形態によるプロセッサが動作する一例を説明するための図

【図13】一実施形態による病理スライド画像を出力する方法の他の例を説明するためのフローチャート

【図14】一実施形態による通知信号が生成された一例を説明するための図

【発明を実施するための形態】

【0010】

（発明を実施するための最良の形態）
一態様による病理スライド画像を出力する方法は、病理スライド画像（ｐａｔｈｏｌｏｇｙ ｓｌｉｄｅ ｉｍａｇｅ）に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力を受信するステップと、前記ユーザ入力に基づいて前記病理スライド画像に出力されるガイドの面積及び前記ガイド内に含まれる前記病理スライド画像の領域を決定するステップと、前記決定された面積及び領域に基づいて前記ガイドがオーバーレイされた病理スライド画像を出力するステップとを含む。

【0011】

ここで、実施形態について詳細に言及する。実施形態の例は添付の図面に示されており、図面全体を通じて同じ参照番号は同じ要素を指す。この点で、本発明の実施形態は異なる形態を有する場合があり、本明細書で説明されている説明に限定されると解釈されるべきではない。したがって、実施形態は、側面を説明するために、図面を参照して以下で説明するだけである。本明細書で使用される「および／または」という用語は、関連する記載項目の１つ以上の任意の組み合わせおよびすべての組み合わせを含む。

【0012】

実施形態で用いられる用語は、できるだけ現在広く用いられている一般的な用語を選択したが、これは、当該分野に従事する技術者の意図または判例、新しい技術の出現などによって異なり得る。また、特定の場合は、出願人が任意に選定した用語もあり、この場合、該当する説明部分にその意味を詳細に記載する。したがって、明細書で用いられる用語は、単なる用語の名称ではなく、その用語が有する意味と明細書全般にわたる内容に基づいて定義されるべきである。

【0013】

明細書全体において、ある部分がある構成要素を「含む」というと、それは、特に反対の記載がない限り、他の構成要素を除くのではなく、他の構成要素をさらに含み得ることを意味する。また、明細書に記載された「・・・ユニット」、「・・・モジュール」などの用語は、少なくとも１つの機能または動作を処理する単位を意味し、これはハードウェアまたはソフトウェアで実現されてもよく、ハードウェアとソフトウェアとの組み合わせで実現されてもよい。

【0014】

さらに、明細書で用いられる「第１」または「第２」などの序数を含む用語は、様々な構成要素を説明するために用いることができるが、前記構成要素は前記用語により限定されるべきではない。前記用語は、ある構成要素を他の構成要素と区別する目的で用いることができる。

【0015】

以下では、添付の図面を参照して、実施形態について詳細に説明する。しかし、実施形態は、様々な異なる形態で実現することができ、本明細書で説明する例に限定されない。

【0016】

図１は、一実施形態による病理スライド画像を出力するシステムの一例を説明するための図である。

【0017】

図１を参照すると、システム１は、ユーザ端末１０及びサーバ２０を含む。例えば、ユーザ端末１０とサーバ２０とは、有線または無線通信方式で接続され、互いにデータ（例えば、映像データなど）を送受信することができる。

【0018】

説明の便宜のために、図１には、システム１がユーザ端末１０及びサーバ２０を含むものとして示されているが、これに限定されない。例えば、システム１は、他の外部装置（図示せず）を含むことができ、以下に説明されるユーザ端末１０及びサーバ２０の動作は、単一の装置（例えば、ユーザ端末１０もしくはサーバ２０）により実現することもできる。

【0019】

ユーザ端末１０は、病理スライド画像４０を出力し、ユーザ３０は、病理スライド画像４０を多角的に観察するために、様々な方式でユーザ端末１０を操作することができる。

【0020】

ここで、病理スライド画像４０は、人体から採取された組織などを顕微鏡で観察するために一連の化学処理工程を行って固定及び染色された病理スライドをスキャンした画像を指すことができる。一例として、病理スライド画像４０は、全スライドの高解像度の画像を含む全スライド画像（ｗｈｏｌｅ ｓｌｉｄｅ ｉｍａｇｅ）を指すことができる。他の例として、病理スライド画像４０は、そのような高解像度の全スライド画像の一部を指すことができる。

【0021】

一方、病理スライド画像４０は、全スライド画像においてパッチ単位に分割されたパッチ領域を指すことができる。例えば、パッチは一定の領域の大きさを有することができる。あるいは、パッチは、全スライド内に含まれるオブジェクトのそれぞれを含む領域を指すことができる。

【0022】

また、病理スライド画像４０は、病理スライドを、デジタルスキャナを用いて画像ファイルに変換したデジタル画像を指すことができ、人体内の細胞（ｃｅｌｌ）、組織（ｔｉｓｓｕｅ）、及び／または構造（ｓｔｒｕｃｔｕｒｅ）に関する情報を含めることができる。

【0023】

ユーザ端末１０は、病理スライド画像４０を記憶及び出力し、ユーザ３０からユーザ入力を受信して病理スライド画像４０にガイドをオーバーレイして出力することができる。例えば、ユーザ端末１０は、病理スライド画像４０の少なくとも１つの領域を拡大または縮小することができ、ユーザ３０が病理スライド画像４０で観察した領域を確認することができる。また、ユーザ端末１０は、ユーザ３０の操作によってアップデートされた病理スライド画像４０を記憶することができる。また、ユーザ３０は、病理スライド画像４０を観察した所見に関する情報をユーザ端末１０に記録及び記憶することができる。

【0024】

ユーザ端末１０は、サーバ２０及び／または他の外部装置（図示せず）との通信を介して、病理スライド画像４０だけでなく、様々なデータを送受信することができる。さらに、ユーザ端末１０は、送受信されたデータを独自に記憶するか、サーバ２０及び／または他の外部装置（図示せず）に送受信されたデータの記憶を要請することができる。

【0025】

ユーザ端末１０は、表示装置及びユーザ入力を受信する装置（例えば、キーボード、マウスなど）を備え、メモリとプロセッサを含むコンピューティング装置であってもよい。例えば、ユーザ端末１０は、ノートパソコン（ｎｏｔｅｂｏｏｋ ＰＣ）、デスクトップパソコン（ｄｅｓｋｔｏｐ ＰＣ）、ラップトップ（ｌａｐｔｏｐ）、タブレットコンピュータ（ｔａｂｌｅｔ ｃｏｍｐｕｔｅｒ）、スマートフォンなどが挙げられるが、これらに限定されない。

【0026】

サーバ２０は、ユーザ端末１０を含む外部装置（図示せず）と通信する装置であってもよい。一例として、サーバ２０は、病理スライド画像４０を含む様々なデータを記憶する装置であり得る。他の例として、サーバ２０は、メモリとプロセッサを含み、独自の演算能力を有するコンピューティング装置であり得る。サーバ２０がコンピューティング装置である場合、サーバ２０は、図１～図１４を参照して後述するユーザ端末１０の動作のうち、少なくとも一部を行うことができる。例えば、サーバ２０はクラウド（ｃｌｏｕｄ）サーバであってもよいが、これに限定されない。

【0027】

ユーザ３０は、ユーザ端末１０に出力された病理スライド画像４０を観察し、病理スライド画像４０が出力されたユーザ端末１０を操作するか、病理スライド画像４０を観察した所見を記録する主体であってもよい。例えば、ユーザ３０は病理科医であり得るが、これに限定されない。

【0028】

従来の病理学分野では、病理科医が光学顕微鏡のレンズを介して円形に結ばれた画像を見ながら手で対物レンズと駆動調整ノブとを触りながら画像を読み取る。一方、デジタル病理学の分野では、ユーザ３０が表示装置に出力された病理スライド画像４０を観察しながらコンピュータとマウスとを使い、画像の読み取り作業を行う。

【0029】

既存の光学顕微鏡で画像の読み取り作業を行うことに慣れている病理科医には、デジタル病理学によって変わったインターフェースにより、スライド画像の倍率を調節するか、関心領域（例えば、病変領域など）を探索する方式に適応しがたい。これにより、病理スライド画像４０の読み取りに時間がかかるか、読み取り結果が不正確になるという問題が発生し得る。

【0030】

例えば、乳癌の場合、光学顕微鏡のＨＰＦ（Ｈｉｇｈ ｐｏｗｅｒ ｆｉｅｌｄ、高倍率視野）で観察できる範囲の１０倍の面積で確認される癌細胞の有糸分裂（ｍｉｔｏｓｉｓ）の数に基づいて乳癌の組織学的等級が判定される。しかし、病理スライド画像４０上では、顕微鏡上に見えるＨＰＦ範囲の見当が付きにくいため、病理科医は病理スライド画像４０に基づいて正確な組織学的等級の判定が容易ではない可能性がある。

【0031】

一実施形態によるユーザ端末１０は、ユーザ入力に基づいて病理スライド画像４０に出力されるガイドの面積及びガイド内に含まれる領域（すなわち、病理スライド画像４０のうちガイド内に含まれる領域）を決定する。そして、ユーザ端末１０は、決定の結果に応じてガイドがオーバーレイされた病理スライド画像を出力する。したがって、ユーザ端末１０は、光学顕微鏡で画像を読み取る方式と同一に読み取ることができる画像を出力することができる。これにより、既存の光学顕微鏡で画像を読み取る方式に慣れているユーザ３０も、デジタル病理学の分野による読み取りを容易に行うことができる。

【0032】

また、一実施形態によるユーザ端末１０は、病理スライド画像４０でユーザによって観察された領域とその他の領域（すなわち、観察されていない領域）とを区分して出力することができる。これにより、ユーザ３０は、病理スライド画像４０に未観察の領域があるか否かを直観的に確認することができる。

【0033】

また、一実施形態によるユーザ端末１０は、病理スライド画像４０でユーザによって観察された領域に関心領域が含まれるか否かを判断する。これにより、ユーザ３０は、関心領域を完全に観察したか否かを直観的に確認することができる。

【0034】

以下、図２Ａ～図１４を参照して、ユーザ端末１０が病理スライド画像を出力する方法を具体的に説明する。

【0035】

一方、説明の便宜のために、明細書全般にわたって、ユーザ端末１０が病理スライド画像４０に出力されるガイドの面積及びガイド内に含まれる領域を決定し、ガイドがオーバーレイされた病理スライド画像４０を出力することを説明したが、これに限定されない。例えば、ユーザ端末１０により行われる動作の少なくとも一部は、サーバ２０により行うこともできる。

【0036】

言い換えれば、図１～図１１を参照して説明するユーザ端末１０の動作の少なくとも一部は、サーバ２０により行うこともできる。例えば、サーバ２０は、病理スライド画像４０に出力されるガイドの面積及びガイド内に含まれる領域を決定し、決定の結果をユーザ端末１０に送信することができる。そして、ユーザ端末１０は、サーバ２０から送信された情報（例えば、病理スライド画像、ガイドの面積に関する情報、ガイド内に含まれる領域に関する情報など）に応じてガイドがオーバーレイされた病理スライド画像４０を出力することができる。ただし、サーバ２０の動作は上述したものに限定されない。

【0037】

図２Ａは、一実施形態によるユーザ端末１０の一例を示す構成図である。

【0038】

図２Ａを参照すると、ユーザ端末１００は、プロセッサ１１０、メモリ１２０、入出力インターフェース１３０及び通信モジュール１４０を含む。説明の便宜のために、図２Ａには、本発明に関連する構成要素のみが示されている。したがって、ユーザ端末１００は、図２Ａに示す構成要素に加えて、他の汎用の構成要素をさらに含むことができる。さらに、図２Ａに示すプロセッサ１１０、メモリ１２０、入出力インターフェース１３０及び通信モジュール１４０を独立した装置として実現できることは、本発明に関連する技術分野における通常の知識を有する者にとって自明である。

【0039】

プロセッサ１１０は、基本的な算術、ロジック、及び入出力演算を行うことによって、コンピュータプログラムの命令を処理することができる。ここで、命令は、メモリ１２０または外部装置（例えば、サーバ２０など）から提供することができる。また、プロセッサ１１０は、ユーザ端末１００に含まれる他の構成要素の動作を全般的に制御することができる。

【0040】

特に、プロセッサ１１０は、病理スライド画像（ｐａｔｈｏｌｏｇｙ ｓｌｉｄｅ ｉｍａｇｅ）に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力に基づいて、病理スライド画像に出力されるガイドの面積及びガイド内に含まれる病理スライド画像の領域を決定することができる。そして、プロセッサ１１０は、決定された面積及び領域に基づいて、ガイドがオーバーレイされた病理スライド画像を出力するように表示装置を制御することができる。

【0041】

また、プロセッサ１１０は、病理スライド画像で所定の基準に応じてユーザによって観察された領域を確認し、確認の結果に応じて観察された領域とその他の領域とを区分して出力するように表示装置を制御することができる。

【0042】

また、プロセッサ１１０は、病理スライド画像で少なくとも１つの関心領域を設定し、病理スライド画像で所定の基準に応じてユーザによって観察された領域を確認することができる。そして、プロセッサ１１０は、ユーザによって観察された領域が関心領域を含むか否かを判断することができる。そして、プロセッサ１１０は、病理スライド画像の観察の終了に関連するユーザ入力が受信されると、判断の結果に基づいて病理スライド画像のさらなる観察の有無に関する通知信号を生成することができる。

【0043】

プロセッサ１１０は、複数の論理ゲートのアレイで実現されてもよく、汎用マイクロプロセッサと当該マイクロプロセッサで実行できるプログラムが記憶されたメモリとの組み合わせで実現されてもよい。例えば、プロセッサ１１０は、汎用プロセッサ、中央処理装置（ＣＰＵ）、グラフィック処理装置（ＧＰＵ）、マイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、コントローラ、マイクロコントローラ、状態機械などを含むことができる。一部の環境で、プロセッサ１１０は、特定用途向け半導体（ＡＳＩＣ）、プログラマブルロジックデバイス（ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）などを含むこともできる。例えば、プロセッサ１１０は、デジタル信号プロセッサ（ＤＳＰ）とマイクロプロセッサとの組み合わせ、複数のマイクロプロセッサの組み合わせ、デジタル信号プロセッサ（ＤＳＰ）コアに結合された１つ以上のマイクロプロセッサの組み合わせ、または任意の他のそのような構成の組み合わせなどの処理装置の組み合わせを指すことができる。

【0044】

一実施形態によるプロセッサ１１０が動作する具体的な例は、図３～図１４を参照して説明する。

【0045】

メモリ１２０は、非一時的な任意のコンピュータで読み取り可能な記録媒体を含むことができる。 一例として、メモリ１２０は、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）、ＲＯＭ（ｒｅａｄ ｏｎｌｙ ｍｅｍｏｒｙ）、ディスクドライブ、ＳＳＤ（ｓｏｌｉｄ ｓｔａｔｅ ｄｒｉｖｅ）、フラッシュメモリ（ｆｌａｓｈ ｍｅｍｏｒｙ）などの永久大容量記憶装置（ｐｅｒｍａｎｅｎｔ ｍａｓｓ ｓｔｏｒａｇｅ ｄｅｖｉｃｅ）を含むことができる。他の例として、ＲＯＭ、ＳＳＤ、フラッシュメモリ、ディスクドライブなどの永久大容量記憶装置は、メモリとは別の独立した永久記憶装置であってもよい。また、メモリ１２０には、オペレーティングシステム（ＯＳ）と少なくとも１つのプログラムコード（例えば、プロセッサ１１０が図３～図１４を参照して後述する動作を行うためのコード）を記憶することができる。

【0046】

そのようなソフトウェアコンポーネントは、メモリ１２０とは別のコンピュータで読み取り可能な記録媒体からロードすることができる。そのような別のコンピュータで読み取り可能な記録媒体は、ユーザ端末１００に直接接続できる記録媒体であってもよく、例えば、フロッピードライブ、ディスク、テープ、ＤＶＤ／ＣＤーＲＯＭドライブ、メモリカードなどのコンピュータで読み取り可能な記録媒体を含むことができる。あるいは、ソフトウェアコンポーネントは、コンピュータで読み取り可能な記録媒体ではなく通信モジュール１４０を介してメモリ１２０にロードすることができる。例えば、少なくとも１つのプログラムは、開発者またはアプリケーションのインストールファイルを配布するファイル配布システムが通信モジュール１４０を介して提供するファイルによりインストールされるコンピュータプログラム（例えば、プロセッサ１１０が図３～図１４を参照して後述する動作を行うためのコンピュータプログラムなど）に基づいて、メモリ１２０にロードすることができる。

【0047】

入出力インターフェース１３０は、ユーザ端末１００に接続されるかユーザ端末１００に含まれる入力または出力のための装置（例えば、キーボード、マウスなど）とのインターフェースのための手段であってもよい。図２Ａでは、入出力インターフェース１３０がプロセッサ１１０とは別に構成された要素として示されているが、これに限定されず、入出力インターフェース１３０がプロセッサ１１０に含まれるように構成されてもよい。

【0048】

通信モジュール１４０は、ネットワークを介してサーバ２０とユーザ端末１００とが互いに通信するための構成または機能を提供することができる。また、通信モジュール１４０は、ユーザ端末１００が他の外部装置と通信するための構成または機能を提供することができる。例えば、プロセッサ１１０の制御に従って提供される制御信号、命令、データなどが通信モジュール１４０とネットワークを介してサーバ２０及び／または外部装置に送信され得る。

【0049】

一方、図２Ａには示されていないが、ユーザ端末１００は、表示装置をさらに含んでもよい。あるいは、ユーザ端末１００は、独立した表示装置と有線または無線通信方式で接続され、互いにデータを送受信することができる。

【0050】

図２Ｂは、一実施形態によるサーバの一例を示す構成図である。

【0051】

図２Ｂを参照すると、サーバ２００はプロセッサ２１０、メモリ２２０、及び通信モジュール２３０を含む。説明の便宜のために、図２Ｂには、本発明に関連する構成要素のみが示されている。したがって、サーバ２００は、図２Ｂに示す構成要素に加えて、他の汎用の構成要素をさらに含むことができる。また、図２Ｂに示されるプロセッサ２１０、メモリ２２０及び通信モジュール２３０を独立した装置として実現できることは、本発明に関連する技術分野における通常の知識を有する者にとって自明である。

【0052】

プロセッサ２１０は、病理スライド画像に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力に基づいて、病理スライド画像に出力されるガイドの面積及びガイド内に含まれる病理スライド画像の領域を決定することができる。そして、プロセッサ２１０は、ユーザ端末１０にガイドがオーバーレイされた病理スライド画像が出力されるように、関連情報をユーザ端末１０に送信することができる。

【0053】

また、プロセッサ２１０は、病理スライド画像において所定の基準に応じてユーザによって観察された領域を確認することができる。

【0054】

また、プロセッサ２１０は、病理スライド画像に少なくとも１つの関心領域を設定し、病理スライド画像で所定の基準に応じてユーザによって観察された領域を確認することができる。そして、プロセッサ２１０は、ユーザによって観察された領域が関心領域を含むか否かを判断することができる。そして、プロセッサ２１０は、病理スライド画像の観察の終了に関連するユーザ入力が受信されると、判定の結果に基づいて病理スライド画像のさらなる観察の有無に関する通知信号を生成することができる。

【0055】

言い換えれば、図２Ａを参照して上述したプロセッサ１１０の動作は、プロセッサ２１０により行うことができる。この場合、ユーザ端末１０は、サーバ２０から送信された情報を、表示装置を介して出力することができる。

【0056】

一方、プロセッサ２１０の実現例は、図２Ａを参照して上述したプロセッサ１１０の実現例と同様であるので、具体的な説明は省略する。

【0057】

メモリ２２０には、病理スライド画像、プロセッサ２１０の動作によって生成されたデータなど、様々なデータを記憶することができる。また、メモリ２２０には、オペレーティングシステム（ＯＳ）と少なくとも１つのプログラム（例えば、プロセッサ２１０が動作するのに必要なプログラムなど）を記憶することができる。

【0058】

一方、メモリ２２０の実現例は、図２Ａを参照して上述したメモリ２２０の実現例と同様であるので、具体的な説明は省略する。

【0059】

通信モジュール２３０は、ネットワークを介してサーバ２００とユーザ端末１００とが互いに通信するための構成または機能を提供することができる。また、通信モジュール１４０は、サーバ２００が他の外部装置と通信するための構成または機能を提供することができる。例えば、プロセッサ２１０の制御に従って提供される制御信号、命令、データなどが通信モジュール２３０とネットワークを介してユーザ端末１００及び／または外部装置に送信され得る。

【0060】

図３は、一実施形態による病理スライド画像を出力する方法の一例を説明するためのフローチャートである。

【0061】

図３を参照すると、病理スライド画像を出力する方法は、図１及び２に示すユーザ端末１０、１００またはプロセッサ１１０で時系列的に処理されるステップから構成される。したがって、以下で省略された内容であっても、図１及び図２Ａに示すユーザ端末１０、１００またはプロセッサ１１０について上述した内容は、図３の病理スライド画像を出力する方法にも適用することができる。

【0062】

ステップ３１０において、ユーザ端末１０、１００は、病理スライド画像に含まれる少なくとも１つの領域の出力方式に関連するユーザ入力を受信する。

【0063】

例えば、ユーザ端末１０、１００の表示装置には、病理スライド画像４０が出力され、その後、ユーザ端末１０、１００はユーザ入力を受信することができる。ユーザ入力は、表示装置に出力された別の画像（ユーザ入力を受信するために構成された画像）を介して受信されるか、マウスのホイールの動きを介して受信されるか、またはユーザにより予め設定されたショートカットキー入力を介して受信されることができるが、これに限定されない。

【0064】

ユーザ入力は、病理スライド画像４０においてユーザ３０が綿密に観察することを望む領域に対する操作であり得る。例えば、ユーザ３０は、ユーザ入力を介して、病理スライド画像４０の一部の領域を拡大または縮小することができる。

【0065】

ステップ３２０において、プロセッサ１１０は、ユーザ入力に基づいて病理スライド画像４０に出力されるガイドの面積及びガイド内に含まれる病理スライド画像４０の領域を決定する。

【0066】

一例として、プロセッサ１１０は、ユーザ入力によって指定された倍率に基づいて、ガイド内に含まれる病理スライド画像４０の領域が固定された状態で、ガイドの面積を拡大または縮小することができる。他の例として、プロセッサ１１０は、ユーザ入力によって指定された倍率に基づいて、ガイドの面積が固定された状態で、ガイド内に含まれる病理スライド画像４０の領域を拡大または縮小することができる。

【0067】

ここで、ガイドは、ユーザ３０が綿密に観察することを望む領域を限定することであり得る。従来の技術に従って光学顕微鏡で画像の読み取り作業が行われる場合、ユーザ３０は接眼レンズを介して画像を観察する。したがって、ガイドは、接眼レンズを介してユーザ３０が観察する領域と同様になるように病理スライド画像４０上に現れる形状であり得る。

【0068】

一方、図３には示されていないが、プロセッサ１１０は、病理スライド画像４０のスキャン倍率及びピクセル当たりの長さを演算することができる。したがって、プロセッサ１１０は、ユーザ入力によって病理スライド画像４０に表示されるガイドの面積及びガイド内に含まれる病理スライド画像４０の領域を演算することができる。

【0069】

ステップ３３０において、プロセッサ１１０は、決定された面積及び領域に基づいてガイドがオーバーレイされた病理スライド画像を出力する。例えば、プロセッサ１１０は、ガイドがオーバーレイされた病理スライド画像を出力するように表示装置を制御することができる。

【0070】

プロセッサ１１０は、ステップ３２０において決定されたガイドの面積及びガイド内に含まれる病理スライド画像４０の領域に応じて病理スライド画像４０を操作（例えば、拡大または縮小）することによって病理スライド画像上にガイドをオーバーレイすることができる。

【0071】

以下、図４Ａ～図５Ｂを参照して、ガイドがオーバーレイされた病理スライド画像が出力される例を説明する。

【0072】

図４Ａ及び図４Ｂは、一実施形態によるガイドがオーバーレイされた病理スライド画像が出力される一例を説明するための図である。

【0073】

図４Ａを参照すると、病理スライド画像上にはガイド４１０がオーバーレイされている。ガイド４１０は、ユーザ３０が綿密に観察しようとする領域とは異なる領域を区分する表示であり、ユーザ３０によって指定されてもよい。例えば、ガイド４１０は円形の形状であり得るが、これに限定されない。

【0074】

病理スライド画像上にガイド４１０がオーバーレイされる例は様々であり得る。一例として、最初のガイド４１０は、病理スライド画像の予め設定された位置（例えば、病理スライド画像の中央の位置、関心領域の位置など）に表示され、その後、ユーザ３０の操作によってガイド４１０の位置が変更または固定され得る。他の例として、最初のガイド４１０は、病理スライド画像上の標識（例えばマウスカーソルなど）に沿って表示され、その後、ユーザ３０の操作によってガイド４１０の位置が固定され得る。しかし、病理スライド画像のガイド４１０に表示される例は、上述したものに限定されず、ユーザ３０が病理スライド画像を観察する際に役に立つ方式であれば、制限なく該当する。

【0075】

一方、ガイド４１０に隣接した領域には、倍率４３１が表示されてもよい。ここで、倍率は、光学顕微鏡で実現できる実際の倍率を意味する。したがって、病理スライド画像に表示されたガイド４１０及び倍率４３１を介して、ユーザ３０は光学顕微鏡を介して画像を観察するのと類似した経験をすることができる。

【0076】

表示装置に病理スライド画像が出力された状態で受信されたユーザ入力に応じて、プロセッサ１１０は、病理スライド画像上にガイドをオーバーレイして出力する。例えば、表示装置に図４Ａに示す病理スライド画像が出力された状態で倍率を上げたり下げたりするユーザ入力が受信された場合、プロセッサ１１０は、ユーザ入力に対応するガイドの面積及びガイド内に含まれる領域を決定する。そして、決定されたガイドの面積及びガイド内に含まれる領域に基づいて、病理スライド画像にガイドをオーバーレイする。

【0077】

例えば、プロセッサ１１０は、ユーザ入力によって指定された倍率に基づいて、ガイド内に含まれる領域が固定された状態でガイドの面積を拡大または縮小することができる。

【0078】

図４Ａ及び図４Ｂの例では、ユーザ入力が倍率を４０倍率から１００倍率に上げるものと仮定する。この場合、プロセッサ１１０は、表示装置に出力される病理スライド画像の大きさを同一に固定した状態で、ガイド４１０の面積がガイド４２０の面積より大きくなるように決定することができる。すなわち、１００倍率に対応するガイド４２０の大きさが、４０倍率に対応するガイド４１０の大きさより小さい。言い換えれば、表示装置に出力される病理スライド画像の大きさが同一な状態で、４０倍率の光学顕微鏡によって観察される領域の実際の面積（すなわち、図面番号４１０内の領域の面積）と１００倍率の光学顕微鏡によって観察される領域の実際の面積（すなわち、図面番号４２０内の領域の面積）の大きさが同一なるように、プロセッサ１１０はガイド４２０の大きさを調節する。

【0079】

プロセッサ１１０は、ガイド４２０の面積に基づいて病理スライド画像上にガイド４２０をオーバーレイし、これを出力する。さらに、プロセッサ１１０は、出力された画像（ガイド４２０がオーバーレイされた画像）にユーザ入力に対応する倍率４３２を共に表示することができる。ここで、倍率４３２は、光学顕微鏡の実際の倍率を意味する。すなわち、倍率４３２は、ユーザ３０が光学顕微鏡を介してガイド４２０内の領域を観察しようとする場合、光学顕微鏡に設定される倍率を意味する。

【0080】

一方、図４Ａ及び図４Ｂには示されていないが、表示装置には、病理スライド画像と共に、または病理スライド画像が出力される前に倍率４３１、４３２を設定するための画像が出力されてもよい。例えば、ユーザ３０は画像を介して倍率４３１、４３２を指定することができ、プロセッサ１１０は倍率を指定するユーザ入力に対応してガイド４１０、４２０を病理スライド画像上に出力することができる。一方、ユーザ３０は、自分が望む倍率を選択できるように、倍率４３１、４３２を設定するための画像は多様に構成され得る。

【0081】

図５Ａ及び図５Ｂは、一実施形態によるガイドがオーバーレイされた病理スライド画像が出力される他の例を説明するための図である。

【0082】

図５Ａ及び図５Ｂの例においても、図４Ａ及び図４Ｂの例と同一に、ユーザ入力が倍率を４０倍率から１００倍率に上げるものと仮定する。

【0083】

表示装置に図５Ａに示す病理スライド画像が出力されたが状態で倍率を上げたり下げたりするユーザ入力が受信された場合、プロセッサ１１０は、ユーザ入力に対応するガイドの面積及びガイド内に含まれる領域を決定する。そして、決定されたガイドの面積及びガイド内に含まれる領域に基づいて、病理スライド画像上にガイドをオーバーレイして出力する。

【0084】

例えば、プロセッサ１１０は、ユーザ入力によって指定された倍率に基づいて、ガイドの面積が固定された状態でガイド内に含まれる領域を拡大または縮小することができる。

【0085】

倍率を４０倍率から１００倍率に上げるユーザ入力が受信されると、プロセッサ１１０は、ガイド５１０とガイド５２０の画面上の面積が同一に固定された状態でガイド５２０に含まれる領域の実際の面積より、ガイド５１０に含まれる領域の実際の面積が小さくなるように決定することができる。すなわち、１００倍率に対応するガイド５２０に含まれる領域の実際の面積は、４０倍率に対応するガイド５１０に含まれる領域の実際の面積より小さい。言い換えれば、４０倍率の光学顕微鏡に対応するガイドの大きさ（すなわち、ガイド５１０の画面上の面積）と１００倍率の光学顕微鏡に対応するガイドの大きさ（すなわち、ガイド５２０の画面上の面積）が同一になるように、プロセッサ１１０はガイド５２０内に含まれる領域の実際の面積を調節する。

【0086】

一方、プロセッサ１１０はガイド５１０、５２０に隣接する領域に倍率５３１、５３２を表示することにより、ユーザ３０は現在表示されているガイドの倍率を直観的に知ることができる。ここで、倍率５３１、５３２は、光学顕微鏡の実際の倍率を意味する。すなわち、倍率５３１、５３２は、ユーザ３０が光学顕微鏡を介してガイド５１０、５２０内の領域を観察しようとする場合に、光学顕微鏡に設定される倍率を意味する。

【0087】

一方、図５Ａ及び図５Ｂには示されていないが、表示装置には倍率５３１、５３２を設定するための画像が出力されてもよいことは、図４Ａ及び図４Ｂを参照して上述した通りである。

【0088】

図３～図５Ｂを参照して上述したように、既存の光学顕微鏡で画像を読み取る方式に慣れているユーザ３０も、デジタル病理学の分野による画像読み取りを容易に行うことができる。

【0089】

一方、図４Ａ～図５Ｂを参照して、倍率を上げるユーザ入力が受信される例について説明した。これと同一な方式が、倍率を下げるユーザ入力が受信される場合にも適用され得る。

【0090】

図６は、一実施形態による病理スライド画像を出力する方法の他の例を説明するためのフローチャートである。

【0091】

図６を参照すると、ステップ６１０～６３０は、図３のステップ３１０～３３０と同一である。したがって、以下では、ステップ６１０～６３０の具体的な説明は省略する。

【0092】

ステップ６４０において、ユーザ端末１０、１００は、追加的に受信されたユーザ入力に基づいて、病理スライド画像４０の少なくとも一部が拡大または縮小された画像を出力する。例えば、プロセッサ１１０は、病理スライド画像４０の少なくとも一部が拡大または縮小された画像を出力するように表示装置を制御することができる。

【0093】

ここで、追加的なユーザ入力は、倍率を調整することなく病理スライド画像４０を拡大または縮小するための入力であり得る。例えば、ユーザ３０がマウスホイールを用いて病理スライド画像４０をズームイン（ｚｏｏｍ ｉｎ）またはズームアウト（ｚｏｏｍ ｏｕｔ）したり、表示装置に出力されたＵＩ（例えば、ボタン、スクロールバーなど）を操作したりするなど、様々な方式の追加的なユーザ入力によって病理スライド画像４０が拡大または縮小され得る。このとき、病理スライド画像４０にオーバーレイされたガイドは、病理スライド画像４０と共に拡大または縮小されてもよく、病理スライド画像４０の拡大または縮小に関係なく固定されてもよい。以下、図７Ａ及び図７Ｂを参照して、プロセッサ１１０が追加的なユーザ入力に基づいて画像を出力する例を説明する。

【0094】

図７Ａ及び図７Ｂは、一実施形態による病理スライド画像が出力される他の例を説明するための図である。

【0095】

図７Ａを参照すると、表示装置には、４０倍率に対応するガイド７１０が表示された病理スライド画像が出力されていると仮定する。その後、受信されたユーザ入力に応じて、プロセッサ１１０は病理スライド画像を拡大または縮小することができる。

【0096】

例えば、図７Ｂを参照すると、図７Ｂに表示されたガイド７２０は、図７Ａに表示されたガイド７１０と同じ倍率（４０倍率）を意味する。すなわち、病理スライド画像を拡大するユーザ入力に応じて、図７Ｂのように一部領域が拡大された病理スライド画像が出力され、同時にガイド７２０の大きさも同一に拡大することができる。

【0097】

一方、図７Ａ及び図７Ｂを参照して、病理スライド画像を拡大するユーザ入力が受信される例を説明した。これと同じ方式が、病理スライド画像を縮小するユーザ入力が受信される場合にも適用され得る。

【0098】

図８は、一実施形態による病理スライド画像を出力する方法の他の例を説明するためのフローチャートである。

【0099】

図８を参照すると、ステップ８１０～８３０は、図３のステップ３１０～３３０と同じである。したがって、以下では、ステップ８１０～８３０の具体的な説明は省略する。

【0100】

ステップ８４０において、プロセッサ１１０は、病理スライド画像４０で所定の基準に応じてユーザによって観察された領域を確認する。

【0101】

ここで、所定の基準は、ユーザ入力に従って指定された倍率が閾値倍率以上のものを含む。すなわち、プロセッサ１１０は、病理スライド画像４０内においてユーザが閾値倍率以上で観察した領域がどの領域であるかを確認することができる。

【0102】

例えば、閾値倍率は、ユーザ３０が画像に基づいて細胞の形態（ｍｏｒｐｈｏｌｏｇｙ）を確認することができる水準の倍率であり得る。閾値倍率は予め設定されていてもよく、ユーザ３０によって調整されてもよい。

【0103】

ステップ８５０において、ユーザ端末１０、１００は、確認の結果に応じて観察された領域とその他の領域とを区分して出力する。例えば、プロセッサ１１０は、観察された領域とその他の領域とを区分して出力するように表示装置を制御することができる。

【0104】

例えば、病理スライド画像４０の一部にサムネイル画像（ｔｈｕｍｂｎａｉｌ ｉｍａｇｅ）が重ねられて出力されてもよく、サムネイル画像は、所定の基準に応じて観察された領域とその他の領域が区分されるように表現された画像であってもよい。

【0105】

以下、図９Ａ～図１０を参照して、所定の基準に応じて観察された領域とその他の領域とを区分して出力される例を説明する。

【0106】

図９Ａ～図９Ｃは、一実施形態による所定の基準に応じて観察された領域とその他の領域とを区分する一例を説明するための図である。

【0107】

図９Ａには、最初の病理スライド画像（すなわち、所定の基準に応じて観察された領域がない画像）が示されている。

【0108】

図３～図７Ｂを参照して上述したように、ユーザ３０は、最初の病理スライド画像の少なくとも一部を拡大または縮小しながら観察することができる。特に、ユーザ３０は、自分が望む倍率に応じて画像を拡大または縮小しながら観察することができる。

【0109】

プロセッサ１１０は、ユーザ３０が観察した領域の倍率が閾値倍率以上であるか否かを確認することができる。例えば、ユーザ入力でユーザ３０が指定した倍率に関する情報を受信すると、プロセッサ１１０は、閾値倍率との比較を通じて、ユーザ入力による倍率が閾値倍率以上であるか否かを確認することができる。そして、プロセッサ１１０は、閾値倍率以上で観察された領域とその他の領域とを区分して出力するように表示装置を制御することができる。

【0110】

図９Ｂを参照すると、ユーザ３０が現在観察している領域９１０が表示されている。プロセッサ１１０は、領域９１０に対応する倍率が閾値倍率以上であるか否かを確認する。このような方式で、プロセッサ１１０は、閾値倍率以上で観察された領域９２０とその他の領域９３０を確認し、領域９２０と領域９３０が区分された画像が出力されるように表示装置を制御することができる。

【0111】

図９Ｂ及び図９Ｃを参照すると、領域９２０は、領域９３０に比べて明るい明度値で表示されることによって互いに区分され得る。しかし、領域９２０と領域９３０とが区分される方式は、上述したものに限定されない。

【0112】

図１０は、一実施形態によるサムネイル画像が出力される一例を説明するための図である。

【0113】

図１０を参照すると、病理スライド画像上の一部にサムネイル画像１０００が重畳して出力された例が示されている。ここで、サムネイル画像１０００は、図９Ａ～図９Ｃを参照して上述した画像であってもよい。ただし、サムネイル画像１０００が出力される領域及びその大きさは、図１０に示す例に限定されない。

【0114】

図１１は、一実施形態による病理スライド画像を出力する方法の他の例を説明するためのフローチャートである。

【0115】

図１１には示されていないが、図１１を参照して後述する例は、図３～図１０を参照して上述した例の少なくとも一部と並列的または時系列的に結合され得る。したがって、以下では、図３～図１０を参照して上述した内容の具体的な説明は省略する。

【0116】

ステップ１１１０において、プロセッサ１１０は、病理スライド画像での少なくとも１つの関心領域を設定する。

【0117】

ここで、関心領域は、病理スライド画像４０内でユーザ３０の観察が必要な領域を意味する。例えば、関心領域は、疾患の病理を読み取ることにおいて重要に観察されるべき領域であり得るが、これに限定されない。例えば、肺癌の診断が必要な場合、病理スライド画像４０内において肺癌細胞が存在する領域が関心領域になってもよく、乳癌の有糸分裂を評価する場合、病理スライド画像４０内において有糸分裂が高いと予想される領域が関心領域になってもよい。

【0118】

プロセッサ１１０は、病理スライド画像４０を分析して少なくとも１つの関心領域を設定する。一例として、プロセッサ１１０は、所定の画像処理技術を用いて病理スライド画像４０を分析することにより、関心領域を検出することができる。他の例として、プロセッサ１１０は機械学習モデルを用いて病理スライド画像４０内の関心領域を検出することができる。この場合、機械学習モデルは、複数の参照病理スライド画像及び複数の参照ラベル情報を含む学習データを用いて、参照病理スライド画像内の関心領域を検出するように学習されてもよい。

【0119】

一例として、プロセッサ１１０は、全病理スライド画像４０を分析して少なくとも１つの関心領域を設定することができる。他の例として、プロセッサ１１０は、病理スライド画像４０の一部を分析して少なくとも１つの関心領域を設定することができる。具体的には、ユーザ３０は、事前に病理スライド画像４０において関心領域が設定される部分を指定することができ、プロセッサ１１０は、ユーザ３０によって指定された部分のみを分析して少なくとも１つの関心領域を設定することがきる。

【0120】

ステップ１１２０において、プロセッサ１１０は、病理スライド画像で所定の基準に応じてユーザによって観察された領域を確認する。

【0121】

ここで、所定の基準は、ユーザ入力に応じて指定された倍率が閾値倍率以上のものを含む。すなわち、プロセッサ１１０は、病理スライド画像４０内においてユーザが閾値倍率以上で観察した領域がどの領域であるかを確認することができる。

【0122】

例えば、閾値倍率は、ユーザ３０が画像に基づいて細胞の形態（ｍｏｒｐｈｏｌｏｇｙ）を確認することができる水準の倍率であり得る。閾値倍率は予め設定されていてもよく、ユーザ３０によって調整されてもよい。

【0123】

ステップ１１３０において、プロセッサ１１０は、ユーザによって観察された領域が少なくとも１つの関心領域を含むか否かを判断する。

【0124】

言い換えれば、プロセッサ１１０は、ユーザによって観察された領域に関心領域が含まれるか否かを確認することができる。ステップ１１１０を通じて、プロセッサ１１０は、病理スライド画像４０内で関心領域を予め確認することができる。したがって、プロセッサ１１０は、病理スライド画像４０内でユーザ３０によって観察された領域に関心領域が含まれるか否かを確認することができる。

【0125】

以下、図１２を参照して、プロセッサ１１０がユーザによって観察された領域に関心領域が含まれるか否かを確認する例を説明する。

【0126】

図１２は、一実施形態によるプロセッサが動作する一例を説明するための図である。

【0127】

図１２を参照すると、プロセッサ１１０は、病理スライド画像においてユーザ３０によって観察された領域１２１０とその他の領域１２２０を区分することができる。ここで、領域１２１０は、所定の基準に適合するように観察された領域であり得ることは、ステップ１１２０を参照して上述した通りである。また、プロセッサ１１０が領域１２１０と領域１２２０とを区分する方法は、図８を参照して上述した通りである。すなわち、領域１２１０と領域１２２０とは、ユーザ３０が現在観察している領域１２３０によって決定されてもよい。

【0128】

プロセッサ１１０は、領域１２１０に関心領域１２４０が含まれるか否かを判断する。例えば、関心領域１２４０は、予め設定された基準によって事前に検出され得ることは、ステップ１１１０を参照して上述した通りである。プロセッサ１１０は、領域１２３０に基づいて領域１２１０と領域１２２０とを区分し、領域１２１０に関心領域１２４０が含まれるか否かを確認することができる。

【0129】

一方、プロセッサ１１０は、領域１２１０に関心領域１２４０が含まれか否かに応じてユーザ３０に通知を提供することができ、これは図１３及び図１４を参照して説明する。

【0130】

図１３は、一実施形態による病理スライド画像を出力する方法の他の例を説明するためのフローチャートである。

【0131】

図１３を参照すると、ステップ１３１０及びステップ１３２０は、図１１のステップ１１１０及びステップ１１２０と同じである。したがって、以下では、ステップ１３１０及びステップ１３２０の具体的な説明は省略する。

【0132】

ステップ１３３０において、ユーザ端末１０、１００は、病理スライド画像の観察の終了に関連するユーザ入力を受信する。

【0133】

ユーザ入力は、現在表示装置に出力された病理スライド画像４０の観察を終了するためのユーザ３０の様々な試みを含む。例えば、ユーザ３０が現在出力されている病理スライド画像４０を他の画像に置き換えたり、病理スライド画像４０の出力及び観察のためのプログラムを終了したりするなどの試みがユーザ入力に含まれてもよい。あるいは、ステップ１３３０におけるユーザ入力は、所定の時間の間、ユーザ入力が受信されない場合も含まれ得る。例えば、病理スライド画像４０が出力された後、所定時間の間、ユーザ入力が受信されない場合もステップ１３３０のユーザ入力の受信に該当することができる。

【0134】

ステップ１３４０において、プロセッサ１１０は、ユーザによって観察された領域に少なくとも１つの関心領域が含まれるか否かを判断する。

【0135】

ここで、ユーザによって観察された領域は、病理スライド画像４０内で所定の基準に応じてユーザが観察した領域を含み、所定の基準は、ユーザ入力に応じて指定された倍率が閾値倍率以上のものを含む。プロセッサ１１０がユーザによって観察された領域に関心領域が含まれるか否かを判断する例は、ステップ１１２０及びステップ１１３０を参照して上述した通りである。関心領域が複数の領域である場合、プロセッサ１１０は、複数の関心領域のすべてがユーザによって観察された領域に含まれるか否かを判断することができる。

【0136】

一方、プロセッサ１１０がユーザによって観察された領域に関心領域が含まれるか否かを判断する例は、上述したものに限定されない。例えば、全関心領域に対してユーザによって観察された領域がある割合以上に該当しない場合、プロセッサ１１０は、ユーザによって観察された領域に関心領域が含まれないと判断することができる。乳癌における有糸分裂を評価する場合、病理スライド画像４０内で有糸分裂が高いと予想される領域が関心領域に設定されてもよい。このとき、ユーザによって観察された領域が関心領域の所定の割合（例えば、５０％）以上を含まない場合、プロセッサ１１０は、ユーザによって観察された領域に関心領域が含まれないと判断することができる。

【0137】

ユーザによって観察された領域に関心領域が含まれない場合は、ステップ１３５０に進み、そうでない場合は処理を終了する。

【0138】

ステップ１３５０において、プロセッサ１１０は、病理スライド画像４０のさらなる観察の有無に対する通知信号を生成する。

【0139】

ステップ１３３０及びステップ１３４０を参照して上述したように、関心領域に対して観察されていない状態で現在出力された病理スライド画像４０の観察を終了することができる。この場合、プロセッサ１１０は、通知信号を生成して出力することによって、ユーザ３０が病理スライド画像４０のさらなる観察を行うか否かに対する判断を助けることができる。

【0140】

一方、全関心領域に対する観察の有無に問わず、所定の条件が満たされるか否かに応じて、プロセッサ１１０は、通知信号の生成の有無を判定することができる。一例として、病理スライド画像４０においてユーザ３０が予め観察した領域に関心領域の少なくとも一部が含まれている場合、ユーザ３０によって観察されていない領域に関心領域が存在しても、プロセッサ１１０は通知信号を生成しなくてもよい。他の例として、ユーザ３０が予め観察した領域に関心領域が含まれているか否かにかかわらず、ユーザ３０によって観察されていない領域に関心領域が存在すると、プロセッサ１１０は通知信号を生成することができる。

【0141】

例えば、通知信号は、表示装置に出力される画像であってもよく、スピーカを介して出力される音であってもよく、振動モータを介して出力される振動であってもよい。ただし、通知信号の例は、上述したものに限定されない。

【0142】

図１４は、一実施形態による通知信号が生成された一例を説明するための図である。

【0143】

図１４には、ユーザが観察した領域１４１０に関心領域１４２０が含まれていない場合が示されている。この状況では、病理スライド画像の観察の終了に関連するユーザ入力１４３０が受信されると、プロセッサ１１０は通知信号１４４０を生成して出力する。

【0144】

一方、通知信号１４４０が出力される例は、図１４に示すものに限定されない。具体的には、関心領域１４２０のうち少なくとも一部が観察されていないことをユーザに知らせるためのものであれば、通知信号１４４０は画像、音、振動など、いかなる種類でもよい。さらに、通知信号１４４０が画像である場合、いずれのメッセージが表示された画像でも構わない。

【0145】

通知信号１４４０の出力後にユーザ３０から病理スライド画像のさらなる観察の試みが受信されると、プロセッサ１１０は、関心領域１４２０を表示装置に出力することによってユーザ３０の観察を助けることができる。

【0146】

上述したように、既存の光学顕微鏡で画像を読み取る方式に慣れているユーザ３０も、デジタル病理学の分野による画像の読み取りを容易に行うことができる。また、ユーザ３０は、病理スライド画像４０に未観察の領域があるか否かを直観的に確認することができる。また、ユーザ３０は、病理スライド画像４０に含まれる関心領域を完全に観察したか否かを直観的に確認することができる。

【0147】

一方、上述した方法は、コンピュータで実行可能なプログラムで作成することができ、コンピュータで読み取り可能な記録媒体を用いて前記プログラムを動作させる汎用デジタルコンピュータで実現することができる。また、上述した方法で用いられたデータの構造は、コンピュータで読み取り可能な記録媒体に様々な手段を介して記録することができる。前記コンピュータで読み取り可能な記録媒体は、磁気記憶媒体（例えば、ＲＯＭ、ＲＡＭ、ＵＳＢ、フロッピーディスク、ハードディスクなど）、光学読取媒体（例えば、ＣＤ－ＲＯＭ、ＤＶＤなど）などの記憶媒体を含むことができるが、これに限定されない。

【0148】

本実施形態に関連する技術分野における通常の知識を有する者であれば、前記記載の本質的な特性から逸脱しない範囲で変形した形態で実現できることが理解できるであろう。したがって、開示された方法は、限定的な観点ではなく、説明的な観点から考慮されるべきであり、権利範囲は、上記説明ではなく、特許請求の範囲に示されており、それと同等の範囲内にあるすべての相違点を含むものと解釈されるべきである。

【0149】

ここで説明されている実施形態は、説明的な意味においてのみ考慮されるべきであり、限定を目的としたものではないことを理解されたい。各実施形態内の特徴または側面の説明は、通常、他の実施形態内の他の同様の特徴または側面にも利用可能であると考えられるべきである。図面を参照して１つまたは複数の実施形態を説明してきたが、当業者であれば、以下の請求項で定義される精神および範囲から逸脱することなく、形態および詳細にさまざまな変更を加えることができることを理解できるであろう。

【符号の説明】

【0150】

１ システム
１０ ユーザ端末
２０ サーバ
３０ ユーザ
４０ 病理スライド画像

【図1】

【図2A】

【図2B】

【図3】

【図4A】

【図4B】

【図5A】

【図5B】

【図6】

【図7A】

【図7B】

【図8】

【図9A】

【図9B】

【図9C】

【図10】

【図11】

【図12】

【図13】

【図14】

【国際調査報告】