特許 7127875 骨関連事象を引き起こす可能性が高いハイリスク患者を提示するための方法、及び装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-08-22

(45)【発行日】2022-08-30

(54)【発明の名称】骨関連事象を引き起こす可能性が高いハイリスク患者を提示するための方法、及び装置

(51)【国際特許分類】

   G16H 30/00 20180101AFI20220823BHJP

【ＦＩ】

G16H30/00

【請求項の数】 7

(21)【出願番号】P 2020094519

(22)【出願日】2020-05-29

(65)【公開番号】P2021002334

(43)【公開日】2021-01-07

【審査請求日】2021-02-01

(31)【優先権主張番号】P 2019115037

(32)【優先日】2019-06-20

(33)【優先権主張国・地域又は機関】JP

【新規性喪失の例外の表示】特許法第３０条第２項適用 （その１） ウェブサイトの掲載日 ２０２０年５月８日 ウェブサイトのアドレス ｈｔｔｐ：／／ｗｗｗ．ｃｏｎｖｅｎｔｉｏｎ－ｗ．ｊｐ／ｊｃｅｒｇ２０２０／ｉｎｄｅｘ．ｈｔｍｌ ｈｔｔｐ：／／ｗｗｗ．ｃｏｎｖｅｎｔｉｏｎ－ｗ．ｊｐ／ｊｃｅｒｇ２０２０／ｉｎｆｏ．ｈｔｍｌ （その２） ウェブサイトの掲載日 ２０２０年５月８日～２０２０年５月１８日 ウェブサイトのアドレス ｈｔｔｐ：／／ｗｗｗ．ｃｏｎｖｅｎｔｉｏｎ－ｗ．ｊｐ／ｊｃｅｒｇ２０２０／ｉｎｄｅｘ．ｈｔｍｌ ｈｔｔｐ：／／ｗｗｗ．ｃｏｎｖｅｎｔｉｏｎ－ｗ．ｊｐ／ｊｃｅｒｇ２０２０／ｉｎｆｏ．ｈｔｍｌ

(73)【特許権者】

【識別番号】500409219

【氏名又は名称】学校法人関西医科大学

(74)【代理人】

【識別番号】110000796

【氏名又は名称】弁理士法人三枝国際特許事務所

(72)【発明者】

【氏名】中村 聡明

(72)【発明者】

【氏名】武川 英樹

(72)【発明者】

【氏名】小池 優平

(72)【発明者】

【氏名】由井 緑

【審査官】原 忠

(56)【参考文献】

【文献】特開２０１８－１４２１４５（ＪＰ，Ａ）

【文献】特開２０１０－０２９４８２（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ１６Ｈ １０／００ － ８０／００

Ｇ０６Ｑ １０／００ － ９９／００

(57)【特許請求の範囲】

【請求項1】

１又は複数の医療機関において、複数の患者について、患者ごとに第１の作業者から依頼された骨の画像検査において撮像された個々の画像について第２の作業者が読影した結果を記したテキストデータを、前記画像と、患者情報を示すデータと、臨床所見を示すデータとを紐付けて格納することにより構築された画像情報データベースから、前記結果を記したテキストデータ内に存在する骨内腫瘍に関連するテキストデータに基づいて、骨内腫瘍に関連する画像を抽出する第１の工程であって、
前記第２の作業者による前記画像の読影は、第１の作業者からの読影依頼の有無にかかわらず行われ、前記骨内腫瘍に関連する画像の抽出が、所定期間内に画像情報データベースに格納された画像に対して行われる、
第１の工程と、
第３の作業者が第１の工程で抽出された画像を読影した結果に基づいて抽出した、又は人工知能が第１の工程で抽出された画像を判定して抽出した骨関連事象を引き起こす可能性を疑った患者の、前記画像情報データベースに格納された患者情報を示すデータと、前記読影した画像と、前記画像の読影結果を示すデータとを提示する第２の工程を含む、
コンピュータによって実行される、骨関連事象を引き起こす可能性が高いハイリスク患者を提示するための方法。

【請求項2】

第２の工程の後に、第４の作業者、又は人工知能が前記第２の工程で抽出された患者について行った、骨関連事象を引き起こす可能性を示すスコアリングの結果に基づいて抽出した、骨関連事象を引き起こす可能性が高いハイリスク患者の患者情報を示すデータと、前記患者のスコアリングの結果を提示する第３の工程を含む、
請求項１に記載の方法。

【請求項3】

第３の工程の後に、第３の工程において第４の作業者、又は人工知能が抽出した骨関連事象を引き起こす可能性が高いハイリスク患者の患者情報を示すデータと、前記患者のスコアリングの結果と、臨床所見を示すデータとを骨関連事象患者データベースに登録する第４の工程を含む、
請求項２に記載の方法。

【請求項4】

第１の工程における骨内腫瘍に関連する画像の抽出を人工知能が行う、請求項１から３のいずれか一項に記載の方法。

【請求項5】

前記骨の画像検査が、単純Ｘ線検査、ＣＴ検査、ＭＲＩ検査、ＰＥＴ検査、及び骨シンチグラフィー検査から選択される少なくとも一種である、
請求項１から４のいずれか一項に記載の方法。

【請求項6】

骨関連事象を引き起こす可能性が高いハイリスク患者を提示するための装置であって、
前記装置は、
１又は複数の医療機関において、複数の患者について、患者ごとに第１の作業者から依頼された骨の画像検査において撮像された個々の画像について第２の作業者が読影した結果を記したテキストデータを、前記画像と、患者情報を示すデータと、臨床所見を示すデータとを紐付けて格納することにより構築された画像情報データベースから、前記結果を記したテキストデータ内に存在する骨内腫瘍に関連するテキストデータに基づいて、骨内腫瘍に関連する画像の抽出を要求することであって、
前記第２の作業者による前記画像の読影は、第１の作業者からの読影依頼の有無にかかわらず行われ、前記骨内腫瘍に関連する画像の抽出が、所定期間内に画像情報データベースに格納された画像に対して行われる、
前記骨内腫瘍に関連する画像の抽出の要求と、
第３の作業者が骨内腫瘍に関連する画像の抽出要求に応じて抽出された画像を読影した結果に基づいて抽出した、又は人工知能が骨内腫瘍に関連する画像の抽出要求に応じて抽出された画像を判定して抽出した骨関連事象を引き起こす可能性を疑った患者の、前記画像情報データベースに格納された患者情報を示すデータと、前記画像の読影所見を示すデータとの提示と、
を行う処理部を備える、
装置。

【請求項7】

骨関連事象を引き起こす可能性が高いハイリスク患者を提示するためのコンピュータプログラムであって、
前記コンピュータプログラムは、コンピュータにおいて実行させたときに、
１又は複数の医療機関において、複数の患者について、患者ごとに第１の作業者から依頼された骨の画像検査において撮像された個々の画像について第２の作業者が読影した結果を記したテキストデータを、前記画像と、患者情報を示すデータと、臨床所見を示すデータとを紐付けて格納することにより構築された画像情報データベースから、前記結果を記したテキストデータ内に存在する骨内腫瘍に関連するテキストデータに基づいて、骨内腫瘍に関連する画像を抽出する第１のステップであって、
前記第２の作業者による前記画像の読影は、第１の作業者からの読影依頼の有無にかかわらず行われ、前記骨内腫瘍に関連する画像の抽出が、所定期間内に画像情報データベースに格納された画像に対して行われる、
第１のステップと、
第３の作業者が第１のステップで抽出された画像を読影した結果に基づいて抽出した、又は人工知能が第１のステップで抽出された画像を判定して抽出した骨関連事象を引き起こす可能性を疑った患者の、前記画像情報データベースに格納された患者情報を示すデータと、前記画像の読影所見を示すデータとを提示する第２のステップとを、を実行する、
コンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本明細書には、骨関連事象を引き起こす可能性が高いハイリスク患者を提示するための方法、装置、及びコンピュータプログラムが開示される。

【背景技術】

【0002】

がんは増殖及び進展によって骨に転移すること（骨転移）が知られている。骨転移の発生頻度は、それぞれ脊椎39％、骨盤17％、大腿骨18％程度とされており、体幹や大腿骨に発生しやすい。これらは組織に力のかかる荷重部であり、腫瘍細胞の増殖により骨皮質が圧迫されると荷重耐性が低下し、病的骨折につながることがある。骨機能の低下の結果、歩行困難や可動制限を引き起こし、日常生活動作（Activities of Daily Living：ADL）を著しく損なうことにつながる。また、腫瘍細胞の増殖により脊髄が圧迫され、神経麻痺を生じることもある。この場合も、患者に持続的な苦痛を与えることにつながる。

【0003】

がん患者の生存期間は延長し、それに伴って、骨転移を有する患者も増加傾向である。がん治療では、がん原発巣の治療が優先されるが、骨転移は初期症状に乏しく早期に発見されない場合があり、骨転移の治療が遅れると、骨折や神経麻痺などの重篤な骨関連事象（Skeletal Related Event : SRE）が起こることがある。SREによって、患者の生活の質（Quality Of Life：QOL）は大きく低下する。

【0004】

がんの骨転移の検査は、一般には放射線科によって行われ、放射線検査データから重篤な骨関連事象の発生の前に骨転移が発見され、適切な時期に、骨転移巣に対する適切な治療を行うことが重要である。

【0005】

既存のリスク予測手法で病的骨折の予測は、ある程度可能と考えられている。例えば、非特許文献１に記載されているMirelsの骨折リスクスコアは、長幹骨転移を、場所、疼痛、タイプ（溶骨性、造骨性）、大きさから点数化して病的骨折のリスク評価を行う。非特許文献２に記載されるSINS（Spinal Instability Neoplastic Score）は、脊椎の安定性を点数化し、脊椎転移の骨折や麻痺リスク評価を行う。

【0006】

重篤な骨関連事象を発見するために、症例検討を行うキャンサーボードや院内骨転移登録のようなシステムを医療施設内に設けることは骨転移診療に有用であることが報告されている。この場合、各施設のキャンサーボードでは、重篤な骨関連事象を未然に防ぐため、後述する図２に示すように、主治医からの報告に基づいて、骨折や麻痺リスクの高い症例を個別に抽出し、キャンサーボードの検討会おける検討対象症例としているが、いずれも個別症例の検討を人手をかけてマニュアルで行っている。

【先行技術文献】

【非特許文献】

【0007】

【文献】Mirels H. Metastatic disease in long bones. A proposed scoring system for diagnosing impending pathologic fractures. Clin Orthop Relat Res. 1989;249:256-64.

【文献】Fisher CG, DiPaola CP, Ryken TC, et al. A novel classification system for spinal instability in neoplastic disease: an evidence-based approach and expert consensus from the Spine Oncology Study Group. Spine. 2010;35:E1221-9.

【発明の概要】

【発明が解決しようとする課題】

【0008】

例えば、骨関連事象の一つである麻痺は、骨内で増殖した腫瘍細胞による神経圧迫が進行することで発症するが、麻痺症状が現れてから治療を始めても２０％程度しか回復しないことが報告されている。したがって、より早い段階で、骨内における腫瘍細胞の増殖を検出し、骨関連事象を引き起こす可能性が高いハイリスクについて適切な治療を行う必要がある。

【0009】

しかし、従来の骨転移に係るキャンサーボードでは、上述の通り、各主治医からの報告に基づいて、検査画像が取得された患者をキャンサーボードにおいて検討対象とするか否かが判断されている。このため、キャンサーボードで検討されるべき患者の選択が、主治医や画像診断医の熟練度に応じて左右されるという問題があった。また、そもそも画像診断医が常駐しておらず、専門医による検査画像の読影ができない医療機関もある。

【0010】

したがって、早期に骨関連事象の治療を開始すべき患者の選択が、医療施設の読影精度に可能な限り影響されずに網羅的に行われるよう、骨関連事象を引き起こす可能性が高いハイリスク患者を、より検出率の高い方法でスクリーニングすることが必要となる。また、効率的に行うには、属人的作業を排し標準的作業で処理することができる、効率的作業手順とその品質管理が確保された技術開発が必要となる。

【0011】

本発明は、骨関連事象を引き起こす可能性が高いハイリスク患者をスクリーニングするための、より検出率の高い方法を提供することを一課題とする。また、骨関連事象を引き起こす可能性が高いハイリスク患者を、より早い段階で検出するための方法を提供することを一課題とする。

【課題を解決するための手段】

【0012】

本発明は、以下の実施形態を含みうる。
本発明のある実施形態は、骨内腫瘍の存在するリスクを評価するための方法に関する。前記方法は、画像検査において患者ごとに撮像された個々の画像又はその画像の読影した結果を記したテキストデータから得られた骨内腫瘍に関連する所見を抽出する第１工程と、病的骨折リスク及び／又は神経障害のリスクを示す整形外科的所見を画像又はその画像を読影した結果を記したテキストデータから抽出する第２工程を備る。好ましくは、前記第１工程、及び前記第２工程の少なくとも一方が、コンピュータプログラムによって評価される。より好ましくは、コンピュータプログラムが深層学習プログラムである。さらに前記深層学習プログラムは、ＣＮＮ （Ｃｏｎｖｏｌｕｔｉｏｎ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ）、ＲＮＮ（Ｒｅｃｕｒｒｅｎｔ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ）、ＬＳＴＭ（Ｌｏｎｇ ｓｈｏｒｔ－ｔｅｒｍ ｍｅｍｏｒｙ）、及びＧＡＮ（Ｇｅｎｅｒａｔｉｖｅ Ａｄｖｅｒｓａｒｉａｌ Ｎｅｔｗｏｒｋｓ）から選択される。

【0013】

好ましくは、前記方法は、さらに骨関連事象のリスクの程度をスコアリングし、患者情報との照合から骨関連事象を引き起こす可能性が高いハイリスク患者を抽出して提示する工程を含む。
本発明のある実施形態は、骨関連事象を引き起こす可能性が高いハイリスク患者を提示するための方法に関する。前記方法は、第１の作業者から依頼された骨の画像検査において撮像された個々の画像について第２の作業者が読影した結果を記したテキストデータを、前記画像と、患者情報を示すデータと、臨床所見を示すデータとを紐付けて格納することにより構築された画像情報データベースから、前記結果を記したテキストデータ内に存在する骨内腫瘍に関連するテキストデータに基づいて、骨内腫瘍に関連する画像を抽出する第１工程と、第３の作業者が第１工程で抽出された画像を読影した結果に基づいて抽出した、骨関連事象を引き起こす可能性を疑った患者の、前記画像情報データベースに格納された患者情報を示すデータと、前記読影した画像と、前記画像の読影結果を示すデータとを提示する第２の工程を含む。前記骨の画像検査の依頼は、１又は複数の医療機関において、複数の患者について、患者ごとに行われる。前記第２の作業者による前記画像の読影は、第１の作業者からの読影依頼の有無にかかわらず行われる。

【0014】

好ましくは、第２の工程の後に、第４の作業者が前記第２の工程で抽出された患者について行った、骨関連事象を引き起こす可能性を示すスコアリングの結果に基づいて抽出した、骨関連事象を引き起こす可能性が高いハイリスク患者の患者情報を示すデータと、前記患者のスコアリングの結果を提示する第３の工程を含む。

【0015】

好ましくは、第３の工程の後に、第３の工程において第４の作業者が抽出した骨関連事象を引き起こす可能性が高いハイリスク患者の患者情報を示すデータと、前記患者のスコアリングの結果と、臨床所見を示すデータとを骨関連事象患者データベースに登録する第４の工程を含む。

【0016】

好ましくは、第１の工程における骨内腫瘍に関連する画像の抽出が、所定期間内に画像情報データベースに格納された画像に対して行われる。
好ましくは、前記骨の画像検査が、単純Ｘ線検査、ＣＴ検査、ＭＲＩ検査、ＰＥＴ検査、及び骨シンチグラフィー検査から選択される少なくとも一種である。

【0017】

好ましくは、前記骨内腫瘍に関連するテキストデータが、骨所見のテキストデータ、画像の撮像範囲に関するテキストデータ、及び腫瘍に関するテキストデータから選択される少なくとも１つを含む。

【0018】

好ましくは、骨所見のデータが、溶骨、骨破壊、及び骨内進展から選択される少なくとも一つを示すラベルを含む。

【0019】

好ましくは、前記に関するテキストデータが、脊椎、大腿骨、脛骨、上腕骨及び骨盤骨から選択される少なくとも一カ所を示すラベルを含み、

【0020】

好ましくは、前記腫瘍に関するテキストデータが、腫瘍、がん、及び転移から選択される少なくとも一つを示すラベルを含む

【0021】

好ましくは、撮像範囲に脊椎を含む時、第３の工程におけるスコアリングが、溶骨性病変、骨破壊割合、後外側の障害、及び脊柱管内進展の程度から選択される少なくとも一つの所見に基づいて行われる。

【0022】

本発明のある実施形態は、骨関連事象を引き起こす可能性が高いハイリスク患者を提示するための装置（１０）に関する。装置（１０）は、患者ごとに第１の作業者から依頼された骨の画像検査において撮像された個々の画像について第２の作業者が読影した結果を記したテキストデータを、前記画像と、患者情報を示すデータと、臨床所見を示すデータとを紐付けて格納することにより構築された画像情報データベースから、前記結果を記したテキストデータ内に存在する骨内腫瘍に関連するテキストデータに基づいて、骨内腫瘍に関連する画像の抽出を要求することと、第３の作業者が第１工程で抽出された画像を読影した結果に基づいて抽出した、骨関連事象を引き起こす可能性を疑った患者の、前記画像情報データベースに格納された患者情報を示すデータと、前記画像の読影所見を示すデータとの提示と、を行う処理部（１０１）を備える。前記骨の画像検査の依頼は、１又は複数の医療機関において、複数の患者について、患者ごとに行われる。前記第２の作業者による前記画像の読影は、第１の作業者からの読影依頼の有無にかかわらず行われる。

【0023】

骨関連事象を引き起こす可能性が高いハイリスク患者を提示するためのコンピュータプログラムに関する。前記コンピュータプログラムは、コンピュータにおいて実行させたときに、患者ごとに第１の作業者から依頼された骨の画像検査において撮像された個々の画像について第２の作業者が読影した結果を記したテキストデータを、前記画像と、患者情報を示すデータと、臨床所見を示すデータとを紐付けて格納することにより構築された画像情報データベースから、前記結果を記したテキストデータ内に存在する骨内腫瘍に関連するテキストデータに基づいて、骨内腫瘍に関連する画像を抽出する第１のステップと、第３の作業者が第１工程で抽出された画像を読影した結果に基づいて抽出した、骨関連事象を引き起こす可能性を疑った患者の、前記画像情報データベースに格納された患者情報を示すデータと、前記画像の読影所見を示すデータとを提示する第２のステップとを、
を実行する。前記骨の画像検査の依頼は、１又は複数の医療機関において、複数の患者について、患者ごとに行われる。前記第２の作業者による前記画像の読影は、第１の作業者からの読影依頼の有無にかかわらず行われる。

【0024】

骨関連事象を引き起こす可能性が高いハイリスク患者を提示するための装置であって、前記提示装置（１０）は、診療科端末（１ｔ，２ｔ，３ｔ）、サーバ（５０）、及び画像診断端末（４０）とネットワークによって通信可能に接続され、サーバ（５０）は、患者情報と、前記患者について取得された画像と、画像情報データベース（５０２）を格納し、診療科端末（１ｔ，２ｔ，３ｔ）は、画像検査の依頼を受け付け、サーバ（５０）に送信し、サーバ（５０）は、前記依頼に基づいて画像検査で患者ごとに撮像された個々の画像を格納し、画像診断端末（４０）の要求に応じて前記画像を画像診断端末（４０）に提示し、画像診断端末（４０）は、前記画像の読影した結果を記したテキストデータの入力を受け付け、テキストデータをサーバ（５０）に送信し、テキストデータの入力の受け付けは、第１の作業者からの読影依頼の有無にかかわらず、第２の作業者によって行われるテキストデータに対して行われ、サーバ（５０）は、画像診断端末（４０）から受信した前記画像の読影した結果を記したテキストデータを格納し、前記提示装置の抽出要求に応じて前記テキストデータを提示装置に提示する。

【発明の効果】

【0025】

本発明は、骨関連事象を引き起こす可能性が高いハイリスク患者をスクリーニングするための、より検出率の高い方法を提供することを一課題とする。

【図面の簡単な説明】

【0026】

【図1】本実施形態の概要を示す図である。

【図2】従来技術を示す図である。

【図3】訓練用テキストデータの流れを示す。

【図4】自然言語処理における前処理の流れを示す。

【図5】骨関連事象を引き起こす可能性が高いハイリスク患者を提示するためのシステムの概要を示す図である。

【図6】骨関連事象を引き起こす可能性が高いハイリスク患者を提示するためのシステムの動作の例を示すフローチャートである。

【図7】画像の読影結果を入力するための読影結果登録ダイアログＤ１の例である。

【図8】骨関連事象患者を登録するためのダイアログの例を示す図である。

【図9】提示装置のハードウエアの構成例を示す。

【図10】提示装置の動作例を示すフローチャートである。

【図11】０次抽出用人工知能を用いて骨内腫瘍に関連する画像を抽出する処理の流れの例を示すフローチャートである。

【図12】１次抽出用人工知能を用いて骨関連事象を引き起こす可能性を疑う患者を決定する処理の流れの例を示すフローチャートである。

【図13】骨関連事象を引き起こす可能性が高いハイリスク患者を決定するためのスクリーニング処理の例を示すフローチャートである。

【図14】骨関連事象を引き起こす可能性が高い患者をスクリーニングするためのシステムの動作の変形例を示すフローチャートである。

【図15】訓練データ数による０次抽出用人工知能の性能比較データを示す。

【図16】900件の訓練データを使用して訓練された０次抽出用人工知能の性能を示す。

【発明を実施するための形態】

【0027】

１．発明の概要の説明
本実施形態は、骨関連事象を引き起こす可能性が高いハイリスク患者をスクリーニングする方法に関する。

【0028】

図１から図２を用いて本発明の概要と従来技術との差異について説明する。
図１には、骨関連事象を引き起こす可能性が高いハイリスク患者をスクリーニングするための概略を示す。図２には、従来の骨の画像検査の流れを示す。図１のステップＳＴ１及び図２のステップＳＴ１１に示すように、一般的に、医療機関において、第１の作業者である主治医等が患者を診療した際に、患者に疼痛、しびれ等の所見が認められた場合、主治医等が画像検査を、放射線検査部等の検査部に依頼する。次に、図１のステップＳＴ２及び図２のステップＳＴ１２に示すように、画像検査の依頼を受けた検査部は、主治医が依頼した撮像範囲について検査画像を取得する。

【0029】

従来の骨の画像検査では、図２に示すように画像検査において撮像された画像は、画像検査を依頼した主治医に送られ、その主治医が画像検査を受けた患者の検査画像を読影する（ステップＳＴ１３）。そして、主治医が読影において骨内の腫瘍に関する所見を発見した際に骨転移キャンサーボード（ＣＢ）等の専門機関に検討を依頼し（ステップＳＴ１４）、必要に応じて整形外科医等が有害骨関連事象を予測するためのスコアリングに基づいて患者のリスクを予測し、スコアが高い場合に骨関連事象に対する処置を開始している（ステップＳＴ１５）。

【0030】

これに対して、本発明においては、図１に示すステップＳＴ３において、図１に示すステップＳＴ３において撮像された検査画像について、第２の作業者である、画像診断を専門とする医師（以下、「画像診断医」ともいう）が、ステップＳＴ２において取得された検査画像について、読影を行う。好ましくはステップＳＴ２において取得された複数の検査画像について、より好ましくはステップＳＴ２において取得された検査画像の、５０％以上、６０％以上、７０％以上、８０％以上、９０％以上、又は全件のそれぞれについて読影を行う。そして、その読影結果をテキストデータとして、検査画像及び患者情報と紐付けて、コンピュータ等に入力し、画像診断報告書を生成する。画像診断報告書は、サーバ等に保存、及び蓄積され、画像情報データベースを構築するデータとなる。

【0031】

前記検査画像の読影は、第１の作業者である主治医等からの検査画像の読影依頼が無い場合であっても、第２の作業者である画像診断医により行われ得る。むしろ、第１の作業者から読影依頼が無い場合であっても、積極的に画像診断の専門医である第２の作業者が読影を行うことにより、画像診断の専門知識が不十分な第１の作業者が気づかない所見を発見することができる。この読影は、後述する第３の作業者が行ってもよい。

【0032】

次に、図１に示すステップＳＴ４において、画像情報データベースから、骨内腫瘍に関連する画像、例えば、骨内腫瘍の所見を含む画像を、ステップＳＴ３で第２の作業者が入力した読影結果のテキストデータに基づき抽出（０次抽出）する。ステップＳＴ４における骨内腫瘍に関連する画像の抽出は、後述する提示装置、もしくは第２の作業者、放射線腫瘍医等の第３の作業者によって行われる。骨内腫瘍に関連する画像の抽出は、第２の作業者が読影した画像に対して記したテキストデータの中から、骨内腫瘍に関連するテキストデータが存在する場合に抽出することができる。また、骨内腫瘍に関連する画像の抽出は、後述する人工知能（ＡＩ）が行ってもよい。なお、ステップＳＴ４は任意のステップである。

【0033】

次に、図１に示すステップＳＴ５において、ステップＳＴ４で抽出された画像について、放射線腫瘍医等の第３の作業者が詳細な読影を行うか、ＡＩが画像をスクリーニングすることにより、検査画像内に、将来骨関連事象を引き起こす可能性を示す所見があるかないかを判定する。検査画像内に骨関連事象を引き起こす可能性を示す所見が見つかった場合に、その検査画像を撮像した患者を、骨関連事象を引き起こす可能性を疑う患者として抽出する（１次抽出）。

【0034】

続いて、図１に示すステップＳＴ６において、整形外科医等の骨関連事象に対する処置を専門とする第４の作業者により、ステップＳＴ４において抽出された患者について、骨関連事象を予測するためのスコアリングを行い、高スコアの患者を、骨関連事象を引き起こす可能性が高いハイリスク患者として抽出する（２次抽出）。
そして、ステップＳＴ６において抽出された患者に対して、骨関連事象に対する予防的処置又は治療的処置が開始される。

【0035】

また、図１に示すステップＳＴ６の後に、ステップＳＴ６において抽出された患者の患者情報と、前記患者のスコアリングの結果と、臨床所見とを登録した骨関連事象患者データベースを構築してもよい（ステップＳＴ７）。

【0036】

本発明によれば、骨内腫瘍を保有する患者について、骨関連事象を引き起こす可能性を高い検出率で検出することができる。また、骨内腫瘍を保有する患者について、骨関連事象を引き起こす可能性をより早い段階で予測することができる。したがって、図１に例示するステップＳＴ１～ステップＳＴ５、ステップＳＴ１～ステップＳＴ６、又はステップＳＴ１～ステップＳＴ７を含む方法は、骨関連事象発生の予測方法と呼ぶこともできる。

【0037】

本発明おいて、図１に記載のステップＳＴ３からステップＳＴ６は、人工知能（ＡＩ）を搭載したコンピュータにより行ってもよい。医師又はＡＩを搭載したコンピュータの操作を行うオペレータを作業者とも呼ぶ。さらに診断行為以外は医師以外が行ってもよいため、医師の行為に制限されない行為を行う場合には、作業者に医師以外の者も含まれる。

【0038】

本発明において、患者は、制限されない。患者は、腫瘍を有していると診断されていても、診断されていなくてもよい。また、患者は、一度腫瘍を有していると診断され、薬物療法、放射線療法、外科的処置等により、一度腫瘍が寛解したと診断された患者であってもよい。

【0039】

骨関連事象には、疼痛、病的骨折、しびれ、麻痺等の神経症状、高カルシウム血症等の骨内腫瘍に伴う症状を含みうる。

【0040】

骨の画像検査は、特に制限されないが、単純Ｘ線検査、ＣＴ検査、ＭＲＩ検査、並びにＰＥＴ検査、及び骨シンチグラフィー検査などの核医学検査かから選択される少なくとも一種を含み得る。

【0041】

骨内腫瘍に関連するテキストデータは、骨所見のテキストデータ、画像の撮像範囲に関するテキストデータ、及び腫瘍に関するテキストデータ等を含み得る。骨所見のテキストデータは、溶骨、骨破壊、及び骨内進展から選択される少なくとも一つを示すラベルを含み得る。画像の撮像範囲に関するテキストデータは、脊椎、大腿骨、脛骨、上腕骨及び骨盤骨から選択される少なくとも一カ所を示すラベルを含み得る。腫瘍に関するテキストデータは、腫瘍、がん、及び転移から選択される少なくとも一つを示すラベルを含み得る。
ここで、ラベルとは、上記用語そのもの（漢字表記、ひらがな表記、カタカナ表記）、上記用語の外国語表記、及びこれらの略語等を含み得る。

【0042】

腫瘍は、制限されないが、好ましくは悪性腫瘍である。悪性腫瘍として好ましくは、上皮性の悪性腫瘍（「がん」ともいう）、造血器系の悪性腫瘍等を挙げることができる。がんとしては、食道がん、胃がん、十二指腸がん、回腸がん、空腸がん、大腸がん、直腸がん、膵臓がん、肝臓がん、腎臓がん、膀胱がん、卵巣がん、子宮がん、乳がん、前立腺がん等を例示することができる。造血器系の悪性腫瘍としては、白血病、多発性骨髄腫、悪性リンパ腫等を例示することができる。骨内の腫瘍としては、上記がんの転移がんをより好ましく例示することができる。

【0043】

患者情報を示すデータには、患者氏名（原語表記、カナ又はアルファベット表記のふりがな等を含む）、患者識別子（ＩＤ）、患者の生年月日、患者の性別、患者の年齢、診療科、主治医氏名又は主治医識別子（ＩＤ）、受診履歴等を示すテキストデータ、略語、インデックス等を含み得る。

【0044】

臨床所見を示すデータには、原疾患、既往歴、腫瘍の有無、過去及び現在の診察所見、画像検査において撮像された検査画像、画像検査以外の検査結果を含む検査履歴等を示すテキストデータ、略語、インデックス等を含み得る。

【0045】

検査依頼内容を示すデータには、画像検査の検査依頼内容、画像検査以外の検査依頼内容を示すデータ等を含み得る。ここで、画像検査の検査依頼内容には、画像検査の種類、撮像範囲等の情報が含まれうる。

【0046】

前記スコアリングには、Ｓｐｉｎａｌ Ｉｎｓｔａｂｉｌｉｔｙ Ｎｅｏｐｌａｓｔｉｃ Ｓｃｏｒｅ（ＳＩＮＳｃｏｒｅ）、Ｆｒａｎｃｋｅｌ分類、富田分類、徳橋スコア、及び新たなスコアリング等を含み得る。好ましくは、撮像範囲に脊椎を含む時、新たなスコアリング又はＳＩＮＳｃｏｒｅである。新たなスコアリングは、溶骨性病変、骨破壊割合、後外側の障害、及び脊柱管内進展の程度から選択される少なくとも一つの所見に基づいて行われる。

【0047】

脊椎転移の場合のスコアリングは、ＳＩＮＳｃｏｒｅで使われている脊柱の安定性評価、つまり転移部位、疼痛、腫瘍の性状、椎体アライメント、椎体破壊割合、及び脊髄後外側の障害である。疼痛を除いたＳＩＮＳｃｏｒｅで０－１５点の幅でスコア化を行うことができ、７点以上が高リスクと判定しえる。大腿骨、脛骨、上腕骨転移の場合のスコアリングは、Ｍｉｒｅｌｓ評価と同様に、場所（転子部３点、転子部以外の大腿骨及び脛骨２点、上腕骨１点）、腫瘍の性状（溶骨性３点、混合性２点、造骨性１点）及び大きさ（＞２／３：３点、１／３－２／３：２点、＜１／３：１点）の３－９点の幅でスコアリングが可能で、５点以上が高リスクと判定しえる。

【0048】

ＳＩＮＳｃｏｒｅは、６点以下であれば「安定」と評価することができ、７点から１２点は「中程度」と判定することができ、１３点以上は「不安定」と判定することができる。したがって、スコアリングにおいて７点以上又は１３点以上の患者を「高スコアの患者」又は「骨関連事象を引き起こす可能性が高いハイリスク患者」と決定することができる。「骨関連事象を引き起こす可能性が高いハイリスク患者」とは有害骨事象を起こす可能性の高い患者である。

【0049】

本発明の新たなスコアリングでは、以下の４項目について評価を行う。スコアリングの例は、各項目のカッコ内に示すとおりである。
（１）溶骨性病変の有無（例えば、「有」が１点、「無」が０点）
（２）骨破壊割合（例えば、「５０％以上」が１点、「５０％以下」が０点）
（３）脊髄後外側の障害の有無（例えば、「有」が１点、「無」が０点）
（４）脊柱管内への進展の程度（例えば、「５ｍｍ以上」が１点、「５ｍｍ以下」が０点）

【0050】

本発明の新たなスコアリングは、例えば、１点以下であれば「低度」と評価することができ、２点から３点は「中程度」と判定することができ、４点以上は「高度」と判定することができる。したがって、スコアリングにおいて２点以上又は４点以上の患者を「高スコアの患者」又は「骨関連事を引き起こす可能性が高いハイリスク患者」と決定することができる。「骨関連事象を引き起こす可能性が高いハイリスク患者」とは有害骨事象を起こす可能性の高い患者である。

【0051】

骨病変の有無と程度を判定するステップＳＴ７では、第４の作業者によって、ステップＳＴ６において抽出された患者に対して、骨関連事象に対する予防的処置又は治療的処置が開始される。

【0052】

人工知能（ＡＩ）は、例えば、ＭＡＴＬＡＢ言語、Ｐｙｔｈｏｎ言語、又はＬｕａ言語で書かれたものを使用することができる。人工知能用ライブラリは、例えば、Ｃａｆｆｅ、Ｃａｆｆｅ２、Ｄｅｅｐｌｅａｒｎｉｎｇ４ｊ、Ａｐａｃｈｅ ＭＸＮｅｔ、Ｃｈａｉｎｅｒ、Ｋｅｒａｓ、Ｔｏｒｃｈ、Ｐｙｔｏｒｃｈ、ＴｅｎｓｏｒＦｌｏｗ、ＰａｄｄｌｅＰａｄｄｌｅ、Ｃｏｇｎｉｔｉｖｅ Ｔｏｏｌｋｉｔ、Ｓｃｉｋｉｔ－ｌｅａｒｎ等を例示することができる。人工知能アルゴリズムとして、サポートベクターマシン（ＳＶＭ）、リレバンスベクターマシン（ＲＶＭ）、ナイーブベイズ、ランダムフォレスト、フィードフォワードニューラルネットワーク、ディープラーニング等を挙げることができる。ディープラーニングアルゴリズムとして、ＣＮＮ （Ｃｏｎｖｏｌｕｔｉｏｎ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ）、ＲＮＮ（Ｒｅｃｕｒｒｅｎｔ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ）、ＬＳＴＭ（Ｌｏｎｇ ｓｈｏｒｔ－ｔｅｒｍ ｍｅｍｏｒｙ）、ＧＡＮ（Ｇｅｎｅｒａｔｉｖｅ Ａｄｖｅｒｓａｒｉａｌ Ｎｅｔｗｏｒｋｓ）等を例示することができる。また、これらの人工知能アルゴリズムは、転移学習により訓練し、訓練済みのアルゴリズムを生成してもよい。

【0053】

例えば、読影結果を記したテキストデータから、骨内腫瘍に関連するテキストデータを取得するための０次抽出用人工知能には、ＬＳＴＭアルゴリズムを使用することができる。

【0054】

一般的に、人工知能を使って所定の記載を有するテキストデータを抽出する場合、訓練段階、及び解析段階において、テキストデータに関し自然言語処理を行う。これは、例えば、骨内腫瘍が陽性である場合であっても、第２の作業者が入力した読影結果を記したテキストデータは、その表現方法が様々であるためこのような処理を行う必要がある。図３に、自然言語処理を用いた訓練データの生成処理を示す。

【0055】

ステップＳＴ３１において、訓練用のテキストデータに対して、ヒトがアノテーションを行う。このステップは、例えば、骨内腫瘍が「陽性」であることを示すテキストデータに、「骨転移があります」、「溶骨性所見が認められます」、「骨転移疑う溶骨性変化が前回よりも目立つ。転移増悪疑います。」等の表現が対応することを紐付けるステップである。また、骨内腫瘍が「陰性」であることを示すテキストデータに対しても、「骨転移は、認められません」、「溶骨性所見は認められません」、「骨転移所見は指摘しえない。」等の表現が対応することを紐付ける。

【0056】

続いて、アノテーションされたテキストデータに対して、前処理を行う。前処理は、トークン化処理、標準化処理、単語のラベル化処理等を備える。また、必要に応じて、前処理は、不要な単語を削除する処理を備えていてもよい。前処理により、単語がラベル値に置き換えられたラベル化テキストデータが生成される。

【0057】

図４に具体例を示す。図４のステップＳＴ４１に示すように、アノテーションされたテキストデータを抽出する例である。アノテーションされたテキストデータは「有意な骨転移所見を指摘しえない」である。ステップＳＴ４２は、トークン化処理の例である。トークン化処理は、テキストデータを意味のある最小単位の単語に分離する処理である。ステップＳＴ４２では、「有意な骨転移所見を指摘しえない」を「有意 な 骨転移 所見 は 指摘 し え ない」に分離している。ステップＳＴ４３は、標準化処理の例である。標準化処理は、例えば、分離された単語に動詞が含まれる場合、この動詞を終止形に変換する処理である。例えばステップＳＴ４３では、「有意な」の「な」が終止形である「だ」に変換されている。また、「指摘しえない」の「し」が「する」に変換され、「え」が「える」に変換されている。ステップＳＴ４４は、任意のステップであるが、不要な単語を削除する例である。ステップＳＴ４３において変換された「だ」と「する」が削除されている。ステップＳＴ４５は、ラベル化処理の例である。ラベル化処理は、各単語をラベル値で置き換えるために、１単語ごとに異なるラベル値を対応付ける処理である。ラベル値は、数値であることが好ましい。例えば、ステップＳＴ４５では、単語「有意」が数値「３４」に、単語「転移」が数値「２９」に、単語「所見」が数値「２５」に、単語「指摘」が数値「４」に、単語「える」が数値「１３０」に、単語「ない」が数値「２２」に置き換えられる。ステップＳＴ４６は、ラベル化テキストデータの生成処理の例である。最終的に、テキストデータ「有意な骨転移所見を指摘しえない」が変換され、ラベル化テキストデータ「３４，２９，２５，４，１３０，２２」が生成される。

【0058】

０次抽出用人工知能の訓練には、訓練用のテキストデータから生成されたラベル化テキストデータ（以下、「訓練用ラベル化テキストデータ」ともいう）と、その正解である訓練用のテキストデータが骨内腫瘍が「陽性」であるか、陰性であるかを示すラベル値（以下、「正解ラベル値」ともいう）が組み合わされて使用される。言い換えると訓練用ラベル化テキストデータを人工知能モデルの入力層に入力し、出力層に訓練用ラベル化テキストデータに対応する正解ラベル値を入力し、人工知能アルゴリズムを訓練する。この訓練により、０次抽出用人工知能を生成する。ここで、０次抽出用人工知能は、最初に訓練した人工知能モデルに限らず、０次抽出用人工知能をさらに再学習させた人工知能モデルを含み得る。
これらの処理は、例えば、基本ソフトウエアとして、Ｍａｔｈｗｏｒｋｓ社のＭＡＴＬＡＢ（商標）を使用して行うことができる。また、基本ソフトウエアには、様々な公知のＴｏｏｌ Ｂｏｘを組み合わせることができる。

【0059】

言語が英語である場合にも、同様の基本ソフトウエアを使用して、０次抽出用人工知能を構築することができる。

【0060】

０次抽出用人工知能の解析対象となる解析用テキストデータについても、訓練用ラベル化テキストデータの生成処理のステップＳＴ４２からステップＳＴ４３に準じてラベル化テキストデータ生成することができる。解析用テキストデータに関しては、アノテーション処理は行うことなく、第２の作業者が入力した読影結果を記したテキストデータに対して、前処理を行う。

【0061】

１次抽出用人工知能にはディープラーニングアルゴリズムを使用することができる。好ましくは、ＣＮＮである。ディープラーニングアルゴリズムの訓練には、検査画像データを訓練用画像データとして使用することができる。検査画像データは、通常の医療分野における検査画像取得に使用されている画像の解像度、画素数である限り制限されない。例えば、ＣＴ画像の場合、画像の大きさは通常５１２ピクセル×５１２ピクセルで取得される。また、ピクセル値は－１０００から３０００の間で設定されている。スライスの厚さは、１ｍｍ、２ｍｍ、及び５ｍｍのいずれであってもよい。１次抽出用人工知能の訓練データは、検査画像とこれに対する第３の作業者の判定結果となる。第３の作業者は、転移部位、疼痛、腫瘍の性状、椎体アライメント、椎体破壊割合、脊髄後外側の障害、溶骨性病変の有無、骨破壊割合、脊髄後外側の障害の有無、脊柱管内への進展の程度を各訓練用の検査画像と対応させる。検査画像を人工知能アルゴリズムの入力データとし、第３の作業者の判定をラベル化したラベル値を出力値として、人工知能アルゴリズムを訓練する。例えば訓練データ数が少ない場合には、例えば他の検査画像で訓練された人工知能アルゴリズムを使って、転移学習を行ってもよい。これらの処理は、例えば、基本ソフトウエアとして、Ｍａｔｈｗｏｒｋｓ社のＭＡＴＬＡＢ（商標）を使用して行うことができる。また、基本ソフトウエアには、様々な公知のＴｏｏｌ Ｂｏｘを組み合わせることができる。

【0062】

１次抽出用人工知能の解析対象となる検査画像データも、訓練用画像データと同様に取得され得る。しかし、解析対象となる検査画像データは、通常の医療分野における検査画像取得に使用されている画像の解像度、画素数である限り制限されない。

【0063】

２．骨関連事象を引き起こす可能性が高い患者をスクリーニングするためのシステム
２－１．スクリーニングシステムの構成
図５を用いて、骨関連事象を引き起こす可能性が高い患者をスクリーニングするためのシステム１０００（以下、単に「システム１０００」ともいう）の概要を示す。

【0064】

図５に示すシステム１０００は、医療機関１に備えられた診療科端末１ｔと、サーバ５０と、画像診断端末４０と、提示装置１０を備え得る。これらは、通信可能に有線又は無線のネットワークで接続されている。サーバ５０は、病院情報データベース５０１と、画像情報データベース５０２と、骨関連事象患者データベース５０３とを格納しうる。病院情報データベース５０１は、患者情報を示すデータ、臨床所見を示すデータ、検査依頼内容を示すデータ等の患者ごとの電子カルテに記録された内容を格納する。画像情報データベース５０２は、各患者の検査画像データを格納する。骨関連事象患者データベース５０３は、第２の作業者が入力した読影結果を示すテキストデータ、及び２次抽出結果を患者ごとに格納する。病院情報データベース５０１、画像情報データベース５０２、及び骨関連事象患者データベース５０３に格納されている各患者のデータは、患者氏名又は患者ＩＤ、もしくは検査ＩＤ等で紐付けられている。画像診断端末４０は、上記１．において説明したステップＳＴ３において、第２の作業者が検査画像を読影する際に使用する。提示装置１０は、骨関連事象患者データベース５０３に格納された上記１．において説明した０次抽出、及び１次抽出を行い、２次抽出結果をサーバ５０に送信する。

【0065】

医療機関は複数であってもよい。図５では、他の医療機関として、医療機関２と医療機関３を例示している。複数の医療機関はそれぞれ独立して患者の診察を行っており、放射線検査部のような画像検査部を備えている。また、診療科端末もそれぞれ独立して備えている（例えば、医療機関２の診療科端末２ｔ、医療機関３の診療科端末３ｔ）。複数の医療機関は、一つの組織の分院等であってもよいが、独立した組織が運営する期間であってもよい。ここでは、便宜上、１つの医療機関である医療機関１と、サーバ５０と、画像診断端末４０と、提示装置１０とを例としてシステム１０００の説明を行うが、以下の説明において、医療機関１は、医療機関２、又は医療機関３に置き換えることができる。同様に診療科端末１ｔは、診療科端末２ｔ又は診療科端末３ｔに置き換えることができる。

【0066】

２－２．スクリーニングシステムの動作
図６を用いてシステム１０００の動作の例を説明する。

【0067】

サーバ５０に格納されている病院情報データベース５０１内のデータは、医療機関１の診療科端末１ｔに患者ごとに電子カルテとして読み込み可能である。医療機関１において、第１の作業者が患者を診察した結果、画像検査を行った方がよいと判断した場合、診療科端末１ｔに読み込まれた患者の電子カルテ内から画像検査を依頼することができる。検査依頼内容は、診療科端末１ｔから入力され、ネットワークを介して医療機関１内の放射線検査部に送られる（ステップＳＴ３１）。

【0068】

放射線検査部では、第１の作業者から依頼された検査依頼内容にしたがって、患者の撮像対象部位の画像を取得する（ステップＳＴ３２）。撮像された画像データは、検査依頼のあった患者の電子カルテに紐付けられ、第１の作業者が診療科端末１ｔから閲覧可能となる。さらに、撮像された画像データは、サーバ５０に送信され（ステップＳＴ３３）、サーバ５０がこれを受信し（ステップＳＴ４１）、患者の電子カルテに含まれる臨床所見を示すデータの一つとして、画像情報データベース５０２に患者情報を示すデータと結びつけて格納する（ステップＳＴ４２）。

【0069】

本発明においては、第２の作業者が、画像情報データベース５０２内に格納された、患者の検査画像の読影を、第１の作業者から依頼が無い場合であっても積極的に行う。第２の作業者は、有線又は無線のネットワークを介して画像診断端末４０から画像情報データベース５０２内に格納された画像データにアクセスする。画像診断端末４０は、第２の作業者による処理開始の入力を受け付け、サーバ５０に所定期間内に画像情報データベース５０２内に格納された検査画像を要求する（ステップＳＴ５１）。画像は、データとしてサーバ５０から送信されてもよいが、ブラウザを介した表示であってもよい（ステップＳＴ５２）。第２の作業者は、表示された画像の読影を行い、その結果をテキストデータとしてサーバ５０に送信する（ステップＳＴ４３）。サーバ５０は、読影結果を受信し、読影した画像、及びその画像が撮像された患者の患者情報を示すデータと紐付けて、各画像の画像診断報告書データとしてサーバ５０内の画像情報データベース５０２に格納する（ステップＳＴ４４）。

【0070】

図７に、画像の読影結果を入力するための読影結果登録ダイアログＤ１の例を示す。読影結果登録ダイアログＤ１は、画像診断端末４０に呼び出した画像と紐付けられている。

【0071】

読影結果登録ダイアログＤ１は、患者情報が表示される領域Ｄ１１と、臨床所見が表示される領域Ｄ１２と、第２の作業者が読影結果をテキスト入力するための領域Ｄ１３を備える。領域Ｄ１１と領域１２は、患者氏名、又は患者ＩＤにより患者の電子カルテと紐付けられ、所見データインポートアイコンＤ１５を第２の作業者がクリック、タッチ等を行うことにより、領域Ｄ１１と領域１２に対応する患者情報を示すデータ、及び臨床所見を示すデータが、サーバ５０の病院情報データベース５０１に格納されている電子カルテからダウンロードされる。

【0072】

図７の例では、読影結果登録ダイアログＤ１の１画面が一人の患者に対応しているが、一人の患者について１回の画像検査で複数の画像が撮像された場合には、読影結果登録ダイアログＤ１は複数の画像と紐付けられ得る。

【0073】

また、複数の患者のそれぞれに対応した電子カルテの情報を画像診断端末４０に一度にダウンロードしえる。複数の患者について情報を取得した場合には、ＰｒｅｖｉｏｕｓアイコンＤ１７又はＮｅｘｔアイコンＤ１８を第２の作業者がクリック、タッチすることにより、患者の表示を変えることができる。また、領域Ｄ１１の最上段の＃１／１５２は１５２名の患者について画像診断端末４０に画像を読み込み、その１人目の読影結果登録ダイアログＤ１を表示していることを意味している。「１」は、希望する番号に書き換え入力可能である。

【0074】

第２の作業者が、領域Ｄ１３に検査画像の読影結果を入力し、ＤＢ登録アイコンＤ２０をクリック、又はタッチすることにより、第２の作業者が入力した読影結果を示すテキストデータがサーバ５０の骨関連事象患者データベース５０３に格納される。ここで、検査画像の読影は、医師が行わなければならないが、領域１３への読影結果のテキスト入力は、医師以外の者が医師の指示を受けて行ってもよい。

【0075】

図５に戻り、さらにシステム１０００の動作を説明する。放射線腫瘍医等のユーザは、有線又は無線のネットワークを介して提示装置１０からサーバ５０の骨関連事象患者データベース５０３にアクセスする。提示装置１０は、サーバ５０の骨関連事象患者データベース５０３に格納されている読影結果のテキストデータ内に骨内腫瘍に関連するテキストデータを含む画像読影結果の抽出を要求する（ステップＳＴ６１）。サーバ５０は、画像読影結果の抽出を行い、抽出した画像読影結果をデータとして提示装置１０に送信するか、ブラウザを介して提示装置１０に表示する（ステップＳＴ６２）。また、骨内腫瘍に関連するテキストデータを含む画像読影結果の抽出は所定期間内に読影が行われた画像に対して行ってもよい。所定期間は、好ましくは、未読影の画像が蓄積され始めた日を起算点とし、読影を行う日までとすることができる。例えば、画像の読影が１ヶ月ごとに行われる場合には、所定期間は１ヶ月である。

【0076】

放射線腫瘍医等の第３の作業者が、抽出された画像読影結果を精査し、骨関連事象を引き起こす可能性を疑う患者の抽出を行う。提示装置１０は、第３の作業者からの抽出結果を受け付け（ステップＳＴ６３）、抽出された患者の患者情報を示すデータ、読影された画像と紐付けて画像の読影結果を示すデータを含む画像診断報告書データを提示する。

【0077】

提示された画像診断報告書データに基づいて、整形外科医等の第４の作業者が上記１．のステップＳＴ６で述べたスコアリングを行い、スコアリングの結果に基づいて、高スコア患者を抽出する。提示装置１０は、第４の作業者による抽出結果の入力を受け付ける（ステップＳＴ６４）。提示装置１０が、第４の作業者からスコアリングの結果を受け付ける際に表示するダイアログの例を示す。

【0078】

また、提示装置１０は、スコアリングにより抽出された患者の患者氏名又は患者ＩＤと、スコアリングの結果とを、抽出結果としてサーバ５０に送信する（ステップＳＴ６５）。サーバ５０は、受診したスコアリングにより抽出された患者の患者氏名又は患者ＩＤに基づいて、前記患者のスコアリングの結果を、骨関連事象を引き起こす可能性が高い患者の患者情報を示すデータと、臨床所見を示すデータと紐付け、骨関連事象患者データベース５０３に格納する（ステップＳＴ４５）。

【0079】

スコアリングにより抽出された患者の読影結果は、患者の骨関連事象情報として、第４の作業者、又は第３の作業者を介して、あるいは、電子カルテを介して、第１の作業者にフィードバックされる。

【0080】

図５においては、サーバ５０、画像診断端末４０、提示装置１０は独立した装置として説明しているが、これらは、一部、全部が一体となっていてもよい。

【0081】

図５においては、１台のサーバ５０が、病院情報データベース５０１、画像情報データベース５０２、及び骨関連事象患者データベース５０３を格納している例を示しているが、それぞれのデータベースは、一部、又は全部が、異なるサーバに格納されていてもよい。例えば、電子カルテや医事会計、診療予約など含む病院情報データベース５０１としてＨＩＳ（病院情報システム：Ｈｏｓｐｉｔａｌ Ｉｎｆｏｒｍａｔｉｏｎ Ｓｙｓｔｅｍｓ）を使用することができる。画像情報データベース５０２としてＰＡＣＳ（画像保存通信システム：Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）を使用することができる。

【0082】

図５における診療科端末１ｔ，２ｔ，３ｔ、サーバ５０、画像診断端末４０、提示装置１０は、汎用コンピュータであり得る。診療科端末１ｔ，２ｔ，３ｔ、サーバ５０、画像診断端末４０のハードウエアの構成は後述する提示装置１０の構成と同様であるので、説明は省略する。

【0083】

３．提示装置及び提示方法
次に、提示装置１０が行う骨関連事象を引き起こす可能性が高い患者を提示するための提示方法（以下、単に「提示方法」とする）及び提示装置の構成について説明する。

【0084】

３－１．提示方法
骨関連事象を引き起こす可能性が高い患者を提示するための方法は、第１の工程と、第２の工程とを含み得る。
第１の工程は、骨内腫瘍に関連する画像を抽出する工程である。
前記画像は、画像検査により取得された検査画像である。検査画像は、上記１．及び２．で述べたように、１又は複数の医療機関において、患者ごとに第１の作業者が依頼する。第２の作業者は、第１の作業者からの検査画像の読影の有無にかかわらず、複数の患者について、撮像された個々の画像を読影する。読影結果を記したテキストデータを、前記画像と、患者情報を示すデータと、臨床所見を示すデータとを紐付けて、各患者の画像診断報告書として、画像情報データベース５０２に格納する。
骨内腫瘍に関連する画像は、格納された読影結果を記したテキストデータ内に存在する骨内腫瘍に関連するテキストデータに基づいて抽出される。

【0085】

抽出は、ヒトが行ってもよいがコンピュータが行ってもよい。コンピュータが抽出を行う場合、読影結果を記したテキストデータからの骨内腫瘍に関連するテキストデータの抽出は、あらかじめ作成された単語辞書に基づく単語検索、自然言語処理、及び上記１．で述べた訓練済みの０次抽出用人工知能等により行うことができる。

【0086】

続いて、放射線腫瘍医等の第３の作業者、又は上記１．で述べた訓練済みの１次抽出用人工知能が第１工程で抽出された画像を読影し、画像内の所見に基づいて骨関連事象を引き起こす可能性を疑った患者を抽出する。第２の工程において、提示装置１０は、第３の作業者が抽出した骨関連事象を引き起こす可能性を疑った患者について、前記画像情報データベースに格納された患者情報を示すデータと、前記読影した画像と、前記画像の読影結果を示すデータとを提示する。
好ましくは、提示方法は、第３の工程を含み得る。

【0087】

第２の工程の後に、第４の作業者が前記第２の工程で抽出された患者についてスコアリングを行う。第４の作業者は、スコアリングの結果、スコアが高い患者を、骨関連事象を引き起こす可能性が高い患者として抽出する。第４の作業者に代わり、提示装置１０が、第２の工程を行ってもよい。提示装置１０は、第３の工程として、第４の作業者が、骨関連事象を引き起こす可能性が高い患者の患者情報を示すデータと、前記患者のスコアリングの結果を提示する。
さらに好ましくは、提示方法は、第４の工程を含み得る。

【0088】

第４の工程では、第４の工程の後に、第４の工程において第４の作業者が抽出した骨関連事象を引き起こす可能性が高い患者の患者情報を示すデータと、前記患者のスコアリングの結果と、臨床所見を示すデータとを骨関連事象患者データベースに登録する。
ここで提示とは、後述する出力部１１２への出力を意図し、ディスプレイ上への表示、紙媒体への印刷を介して、各データを示すことを意図する。
本項において、上記１．及び２．で使用した用語と共通する用語については、上記１．及び２．の説明をここに援用する。

【0089】

３－２．提示装置
（１）ハードウエアの構成
提示装置は、上記３－１．に記載した提示方法を実現しえる。提示装置１０は汎用コンピュータであり得るため、その外観の例は、図５に示したとおりである。
図９に提示装置１０のハードウエアの構成を示す。
図９に示すように、提示装置１０は、入力部１１１と、出力部１１２と、記憶媒体１１３とに接続されている。

【0090】

提示装置１０は、処理部１０１と、主記憶部１０２と、ＲＯＭ（ｒｅａｄ ｏｎｌｙ ｍｅｍｏｒｙ）１０３と、補助記憶部１０４と、通信インタフェース（Ｉ／Ｆ）１０５と、入力インタフェース（Ｉ／Ｆ）１０６と、出力インタフェース（Ｉ／Ｆ）１０７と、メディアインターフェース（Ｉ／Ｆ）１０８を備えており、各部はバス１０９によって互いにデータ通信可能に接続されている。主記憶部１０２又は補助記憶部１０４とを合わせて、単に記憶部と呼ぶこともある。

【0091】

処理部１０１は、提示装置１０のＣＰＵである。処理部１０１は、ＧＰＵ１１０と協働してもよい。処理部１０１が、補助記憶部１０４又はＲＯＭ１０３に記憶されているコンピュータプログラムを実行することで提示装置１０が機能する。

【0092】

主記憶部１０２は、ＳＲＡＭ又はＤＲＡＭなどのＲＡＭ（Ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）によって構成される。主記憶部１０２は、ＲＯＭ１０３及び補助記憶部１０４に記録されているコンピュータプログラムの読み出しに用いられる。また、主記憶部１０２は、処理部１０１がこれらのコンピュータプログラムを実行するときの作業領域として利用される。

【0093】

ＲＯＭ１０３は、マスクＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭなどによって構成され、処理部１０１により実行されるコンピュータプログラム及びこれに用いるデータが記録されている。処理部１０１はＭＰＵ１０１としてもよい。ＲＯＭ１０３は、提示装置１０の起動時に、処理部１０１によって実行されるブートプログラムや提示装置１０のハードウエアの動作に関連するプログラムや設定を記憶する。

【0094】

補助記憶部１０４は、ハードディスク、フラッシュメモリ等の半導体メモリ素子、光ディスク等によって構成される。補助記憶部１０４には、オペレーティングシステム（ＯＳ）１０４ＯＳと、提示処理を処理部１０１に実行させるための提示プログラム１０４ＰＰと、スクリーニング処理を処理部１０１にスクリーニングプログラム１０４ＳＰの処理部１０１に実行させるための種々のコンピュータプログラム及びコンピュータプログラムの実行に用いる各種設定データが記憶されている。また、補助記憶部１０４は、提示プログラム１０４ＰＰが使用する、訓練済みの０次抽出用人工知能及び１次抽出用人工知能等の人工知能アルゴリズムを格納するＡＩデータベースＡＩＤＢを格納する。

【0095】

通信Ｉ／Ｆ１０５は、ＵＳＢ、ＩＥＥＥ１３９４、ＲＳ－２３２Ｃなどのシリアルインタフェース、ＳＣＳＩ、ＩＤＥ、ＩＥＥＥ１２８４などのパラレルインタフェース、及びＤ／Ａ変換器、Ａ／Ｄ変換器などからなるアナログインタフェース、ネットワークインタフェースコントローラ（Ｎｅｔｗｏｒｋ ｉｎｔｅｒｆａｃｅ ｃｏｎｔｒｏｌｌｅｒ：ＮＩＣ）等から構成される。通信Ｉ／Ｆ１０５は、ネットワークを介してサーバ５０等と通信を行うことができる。

【0096】

入力Ｉ／Ｆ１０６は、例えば、ＵＳＢ、ＩＥＥＥ１３９４、ＲＳ－２３２Ｃなどのシリアルインタフェース、ＳＣＳＩ、ＩＤＥ、ＩＥＥＥ１２８４などのパラレルインタフェース、及びＤ／Ａ変換器、Ａ／Ｄ変換器などからなるアナログインタフェースなどから構成される。入力Ｉ／Ｆ１０６は、入力部１１１からユーザによる例えば、各刺激発生デバイスＳＧの制御条件等の文字入力、クリック、音声入力等を受け付ける。受け付けた入力内容は、主記憶部１０２又は補助記憶部１０４に記憶される。

【0097】

入力部１１１は、タッチパネル、キーボード、マウス、ペンタブレット、マイク等から構成され、提示装置１０に文字入力又は音声入力を行う。入力部１１１は、提示装置１０の外部から接続されても、提示装置１０と一体となっていてもよい。

【0098】

出力Ｉ／Ｆ１０７は、例えば、入力Ｉ／Ｆ１０６と同様のインタフェースから構成される。出力Ｉ／Ｆ１０７は、処理部１０１が生成した情報を出力部１１２に出力する。出力Ｉ／Ｆ１０７は、処理部１０１が生成し、補助記憶部１０４に記憶した情報を、出力部１１２に出力する。
出力部１１２は、例えばディスプレイ、プリンタ等で構成され得る。

【0099】

メディアＩ／Ｆ１０８は、記憶媒体１１３に記憶された、例えば、アプリケーションソフト等を読み出す。読み出されたアプリケーションソフト等は、主記憶部１０２又は補助記憶部１０４に記憶される。また、メディアＩ／Ｆ１０８は、処理部１０１が生成した情報を記憶媒体１１３に書き込む。メディアＩ／Ｆ１０８は、処理部１０１が生成し、補助記憶部１０４に記憶した情報を、記憶媒体１１３に書き込む。

【0100】

記憶媒体１１３は、フレキシブルディスク、ＣＤ－ＲＯＭ、又はＤＶＤ－ＲＯＭ等で構成される。記憶媒体１１３は、フレキシブルディスクドライブ、ＣＤ－ＲＯＭドライブ、又はＤＶＤ－ＲＯＭドライブ等によってメディアＩ／Ｆ１０８と接続される。記憶媒体１１３には、コンピュータがオペレーションを実行するためのアプリケーションプログラム等が格納されていてもよい。

【0101】

処理部１０１は、提示装置１０の制御に必要なアプリケーションソフトや各種設定をＲＯＭ１０３又は補助記憶部１０４からの読み出しに代えて、ネットワークを介して取得してもよい。前記アプリケーションプログラムがネットワーク上のサーバコンピュータの補助記憶部内に格納されており、このサーバコンピュータに提示装置１０がアクセスして、コンピュータプログラムをダウンロードし、これをＲＯＭ１０３又は補助記憶部１０４に記憶することも可能である。

【0102】

また、ＲＯＭ１０３又は補助記憶部１０４には、例えば、米国マイクロソフト社が製造販売するＷｉｎｄｏｗｓ（登録商標）などのグラフィカルユーザインタフェース環境を提供するオペレーションシステムがインストールされている。後述する経頭蓋刺激を行うためのコンピュータプログラムは、前記オペレーティングシステム上で動作するものとする。すなわち、提示装置１０は、パーソナルコンピュータ等であり得る。

【0103】

（２）提示プログラムの処理
図１０を用いて、コンピュータを提示装置１０として機能させるための提示プログラム１０４PPの処理を説明する。
提示装置１０の処理部１０１は、ステップＳＴ７１において、第３の作業者の処理開始の要求に応じて、骨内腫瘍に関連するテキストデータに基づいて、骨内腫瘍に関連する画像を抽出することを、通信Ｉ／Ｆ１０８を介して、サーバ５０に要求する。骨内腫瘍に関連する画像の抽出は、骨内腫瘍に関連するテキストデータに基づいて、所見が「陽性」であると判断された患者の画像に対して行われる。このステップは、上記１．で述べたステップＳＴ４及び図６で述べたステップＳＴ６１に対応する。骨内腫瘍に関連するテキストデータの抽出は、０次抽出用人工知能が行ってもよい。この処置は後述する。

【0104】

次に、提示装置１０の処理部１０１は、ステップＳＴ７２において、サーバ５０が画像情報データベース５０２から抽出した画像を取得し、出力部１１２に提示する。サーバ５０が抽出した結果は、提示装置１０の記憶部に揮発性、又は不揮発性に記憶される。

【0105】

第３の作業者が、サーバ５０が抽出した画像を精査し、骨関連事象を引き起こす可能性を疑う患者を抽出する。第３の作業者が抽出した患者の情報は、入力部１１１を介して第３の作業者がその選択情報を入力し、処理部１０１は、ステップＳＴ７３において、この入力を受け付ける。また、提示装置１０の記憶部に揮発性、又は不揮発性に記憶される。

【0106】

さらに、提示装置１０の処理部１０１は、ステップＳＴ７３において、骨関連事象を引き起こす可能性を疑った患者の、患者情報を示すデータと、前記読影した画像と、前記画像の読影結果を示すデータを、サーバ５０から通信Ｉ／Ｆ１０８を介して取得し出力部１１２に提示する。このステップＳＴ７３は、上記１．で述べたステップＳＴ５及び図６で述べたステップＳＴ６３に対応する。骨関連事象を引き起こす可能性を疑う患者の抽出は、１次抽出用人工知能が行ってもよい。この処置は後述する。

【0107】

次に整形外科医等の第４の作業者がステップＳＴ７３において提示された患者について、骨関連事象を引き起こす可能性を予測するためのスコアリングにしたがって、各患者のスコアを算出する。第４の作業者は、スコアが高い患者を、骨関連事象を引き起こす可能性が高い患者として抽出する。第４の作業者が抽出した患者の情報は、入力部１１１を介して提示装置１０に入力され、処理部１０１がこれを受け付ける。入力された情報は、提示装置１０の記憶部に揮発性、又は不揮発性に記憶される。このステップは、上記１．で述べたステップＳＴ６及び図６で述べたステップＳＴ６４に対応する。スコアが高い患者の抽出は、後述するスクリーニングプログラムが行ってもよい。

【0108】

提示装置１０の処理部１０１は、ステップＳＴ７４において、骨関連事象を引き起こす可能性が高いハイリスク患者の患者情報を示すデータをサーバ５０から通信Ｉ／Ｆ１０８を介して取得し、前記患者のスコアリングの結果と共に提示する。
ここで、ステップＳＴ３７の処理は、ステップＳＴ７１及びＳＴ７２の処理を経ずに、ステップＳＴ５２で取得した検査画像に対して、直接行ってもよい。

【0109】

（３）０次抽出用人工知能を用いたステップＳＴ７１の処理
次に図１１を用いて、提示装置１０の処理部１０１が、０次抽出用人工知能を用いてステップＳＴ７１の処理を行う場合の例を説明する。

【0110】

処理部１０１は、ステップＳＴ１７１において、第３の作業者が入力部１１１から入力した処理開始指令を受け付け、サーバ５０にアクセスして骨関連事象患者データベース５０３に格納されている画像の読影結果を記したテキストデータを患者ごとに取得する。

【0111】

処理部１０１は、ステップＳＴ１７２において、上記１．で述べた方法にしたがって、取得したテキストデータに対して前処理を施し、テキストデータに含まれる単語群をラベル化したラベル化テキストデータを生成する。

【0112】

処理部１０１は、ステップＳＴ１７３において、ＡＩデータベースＡＩＤＢに格納されている０次抽出用人工知能を呼び出し、０次抽出用人工知能にステップＳＴ１７２にラベル化テキストデータを入力する。

【0113】

処理部１０１は、ステップＳＴ１７４において、ステップＳＴ１７３において入力したラベル化テキストデータに対する結果を取得し、「陽性」のラベルが付された患者の骨内腫瘍に関連する画像を抽出することをサーバに要求する。
人工知能を用いて０次抽出を行うことにより、作業者の診断をサポートすることができる。

【0114】

（４）１次抽出用人工知能を用いたステップＳＴ７３の処理
図１２を用いて、提示装置１０の処理部１０１が、１次抽出用人工知能を用いてステップＳＴ７１の処理を行う場合の例を説明する。

【0115】

処理部１０１は、ステップＳＴ２７１において、ＡＩデータベースＡＩＤＢに格納されている１次抽出用人工知能を呼び出し、サーバ５０が抽出した画像を１次抽出用人工知能に入力する。

【0116】

処理部１０１は、ステップＳＴ２７２において、入力した画像について、例えば、溶骨性病変の有無、骨破壊割合、脊髄後外側の障害の有無、及び脊柱管内への進展の程度よりなる群から選択される少なくとも１つの示す判定ラベルを取得する。

【0117】

処理部１０１は、ステップＳＴ２７３において、ステップＳＴ２７２で溶骨性病変の有無、骨破壊割合、脊髄後外側の障害の有無、及び脊柱管内への進展の程度よりなる群から選択される少なくとも１つの示す判定ラベルにおいて「所見あり」を示すラベルが付された患者を、骨関連事象を引き起こす可能性を疑う患者として決定する。「所見あり」を示すラベルは、溶骨性病変がある場合、骨破壊割合が５０％以上を示す場合、脊髄後外側の障害がある場合、脊柱管内への進展が５ｍｍ以上ある場合に付され得る。

【0118】

処理部１０１は、ステップＳＴ２７４において、骨関連事象を引き起こす可能性を疑った患者の患者情報を示すデータと、前記読影した画像と、前記画像の読影結果を示すデータをサーバ５０から取得し、出力部１１２に出力し提示する。
人工知能を用いて１次抽出を行うことにより、作業者の診断をサポートすることができる。

【0119】

（５）スクリーニング処理
図１３を用いて、提示装置１０の処理部１０１が、ステップＳＴ７４で行うスクリーニング処理の例を説明する。

【0120】

処理部１０１は、ステップＳＴ３７１において、ステップＳＴ２７３において取得された脊柱管内への進展の程度よりなる群から選択される少なくとも１つの示す判定ラベルに基づいて、あらかじめ定められたスコアが付される。処理部１０１は、スコアの一部又は複数、好ましくは溶骨性病変の有無、骨破壊割合、脊髄後外側の障害の有無、及び脊柱管内への進展の程度すべてのスコアを集計し、スコアリング結果を得ることができる。また、処理部１０１は第４の作業者によるＳＩＮＳｃｏｒｅの入力を受け付け、これを集計しスコアリング結果を取得してもよい。

【0121】

処理部１０１は、ステップＳＴ３７２において、ステップＳＴ３７１で取得したスコアリング結果が基準値よりも高いか否かを判定する。基準値は、上記１．で述べたとおりであり、これらの基準値は、あらかじめスクリーニングプログラム１０４ＳＰの一部として、記憶されている。

【0122】

処理部１０１は、ステップＳＴ３７２において、スコアリング結果が基準値よりも高い場合（「Ｙｅｓ」の場合）、ステップＳＴ３７３に進み、「骨関連事象を引き起こす可能性が高い患者である」と決定する。また、スコアリング結果が基準値よりも低い場合（「Ｎｏ」の場合）、ステップＳＴ３７４に進み、「骨関連事象を引き起こす可能性が低い患者である」と決定する。

【0123】

処理部１０１は、ステップＳＴ３７３に続いて、ステップＳＴ３７５に進み、骨関連事象を引き起こす可能性が高いハイリスク患者の患者情報を示すデータと、前記患者のスコアリングの結果を出力部１１２から出力する。

【0124】

処理部１０１は、ステップＳＴ３７４に続いて、ステップＳＴ３７６に進み、骨関連事象を引き起こす可能性が低い患者の患者情報を示すデータと、前記患者のスコアリングの結果を出力部１１２から出力してもよい。
スクリーニング処理を提示装置１０において行うことにより、２次抽出において医師の診断をサポートすることができる。

【0125】

４．コンピュータプログラム
コンピュータプログラムは、コンピュータで上記ステップＳＴ７１～ステップＳＴ７４；ステップＳＴ７１～ステップＳＴ７４及びステップＳＴ１７１～ステップＳＴ１７４；ステップＳＴ７１～ステップＳＴ７４、ステップＳＴ１７１～ステップＳＴ１７４、及びステップＳＴ２７１～ステップＳＴ２７４；及びステップＳＴ７１～ステップＳＴ７４、及びステップＳＴ２７１～ステップＳＴ２７４；ステップＳＴ７１～ステップＳＴ７４、及びステップＳＴ２７１～ステップＳＴ２７４、及びステップＳＴ３７１からステップＳＴ３７６を実行させ、コンピュータを提示装置１０として機能させる。

【0126】

さらに、前記コンピュータプログラムは、記憶媒体等のプログラム製品として提供されうる。前記コンピュータプログラムは、ハードディスク、フラッシュメモリ等の半導体メモリ素子、光ディスク等の記憶媒体に記憶される。前記記憶媒体へのプログラムの記憶形式は、前記処理部が前記プログラムを読み取り可能である限り制限されない。前記記憶媒体への記憶は、不揮発性であることが好ましい。

【0127】

５．システムの動作の変形例
画像の直接解析と読影後の画像診断報告書のテキストを抽出する２つの方法がある。それぞれの解析に用いるアルゴリズムは異なるため、画像解析ＡＩと言語処理ＡＩの２種を独立に用いることができる。また、画像解析結果に対する特徴量の評価コメントを創出させて、画像解析から画像解析報告書を作成することもできるが、診断は医師が行うため、ＡＩ解析はあくまで診断支援として用いるものである。

【0128】

（１）画像抽出の場合：Ｘ線、ＣＴ、ＭＲＩ、骨シンチグラフィー、ＦＤＧ－ＰＥＴ／ＣＴなどの画像で特徴量の抽出が良好な画像を教師データとして用いる。特徴量としては、局所の骨吸収あるいは骨形成を反映した異常陰影、骨梁構造の破壊像などに注目する。脊椎は好発部位であり、椎弓根の破壊像が特徴的な所見となる。

【0129】

画像処理に用いる深層学習は、画像処理に適したネットワークであれば、特に限定されないが、ＣＮＮが望ましい。例えば、ＲｅｓＮｅｔ，ＧｏｏｇＬｅＮｅｔ，ＶＧＧ，ＡｌｅｘＮｅｔなどが挙げられる。また、教師データに用いる画像は、特徴量抽出に適したように、鮮明で色調や濃淡も判別できるように、品質管理された機器と手順で行うことが重要である。

【0130】

（２）テキストデータ抽出の場合：医用画像の内容を「自然言語」に置き換えられた画像診断報告書をターゲットとして、解析を行う。画像所見に対するＡＩの学習の前処理として、文章に対する形態素解析が必要となる。形態素解析とは辞書を参考に文章を「名詞」、「動詞」、「助詞」などに言語の最小要素に分割する手法である。一方で、医療用語に特化していない辞書を用いた場合、例えば「大腿骨転移」という語は「大腿骨」、「転移」となって欲しいところ、「大腿」、「骨」、「転移」のような過剰な分割となり、最終的な予測に不都合が生じる可能性があり、医療文章に対する辞書整備が必要となる。

【0131】

ＡＩによる画像所見の学習には深層学習の１種であるＲＮＮであるＬＳＴＭ（Ｌｏｎｇ ｓｈｏｒｔ－ｔｅｒｍ ｍｅｍｏｒｙ）、及びＢａｇ－ｏｆ－Ｗｏｒｄｓモデルが挙げられる。画像所見に対して整備した辞書を用いて形態素解析を行った後に、ＡＩに１次抽出された／されなかった所見に含まれる形態素群を学習させ、予測モデルの構築を行う。２つのモデルのうち予測精度、速度の観点から優れたモデルを採用する。

【0132】

ＡＩ学習、予測モデルの構築後は、新規症例に対してＡＩによる自動症例抽出ならびに放射線腫瘍医、整形外科医による１次抽出、２次抽出（スコアリング）も継続して行い、ＡＩによる抽出精度の検証を行う。ＡＩと実際の抽出の差はＡＩにフィードバックし、更なるＡＩの成長を促させる。

【0133】

図１４を用いてシステム１０００の動作の変形例を説明する。
医療機関１は、患者が受診し、医師による診察を受ける機関である。医療機関１は、有線又は無線のネットワークを介してサーバ５０と通信可能に接続されている。サーバ５０には病院情報データベース５０１が格納されており、病院情報データベース５０１は、患者情報を示すデータ、臨床所見を示すデータ、検査依頼内容を示すデータ等を含み得る。

【0134】

サーバ５０に格納されている病院情報データベース５０１内のデータは、医療機関１の診療科端末１ｔに各患者の電子カルテ情報として読み込み可能である。医療機関１において、第１作業者が患者の画像検査を行った方がよいと判断した場合、診療科端末１ｔに読み込まれた患者の電子カルテ内から画像検査を依頼することができる。検査依頼内容は、診療科端末１ｔから入力され、ネットワークを介して医療機関１内の放射線検査部に送られる（ステップＳＴ３１）。この要求はサーバ５０を通して（ステップＳＴ４１）画像診断端末に送られ（ステップＳＴ５１）、画像が取得される（ステップＳＴ５２）。撮像された画像データは、サーバ５０に送信され（ステップＳＴ５３）、サーバ５０がこれを受信し、患者の電子カルテに含まれる臨床所見を示すデータの一つとして、病院情報データベース５０１に患者情報を示すデータと結びつけて格納する（ステップＳＴ４２）。

【0135】

本発明においては、第２の作業者が、画像情報データベース５０２内に格納された、患者の検査画像の読影を行う。第２の作業者は、有線又は無線のネットワークを介して画像診断端末４０から画像情報データベース５０２内に格納された画像データにアクセスする。第２の作業者は、表示された画像の読影を行い、その結果をテキストデータとしてサーバ５０に送信する（ステップＳＴ４３）。サーバ５０は、読影結果を受信し、読影した画像、及びその画像が撮像された患者の患者情報を示すデータと紐付けて、各画像の画像診断報告書データとしてサーバ５０内の画像情報データベース５０２に格納する（ステップＳＴ４４）。

【0136】

図５に戻り、さらにシステム１０００の動作を説明する。放射線腫瘍医等のユーザは、有線又は無線のネットワークを介して提示装置１０からサーバ５０の画像情報データベース５０２にアクセスする。提示装置１０は、サーバ５０に画像情報データベース５０２に格納されている読影結果のテキストデータ内に骨内腫瘍に関連するテキストデータを含む画像の抽出を要求する（ステップＳＴ６１）。サーバ５０は、画像の抽出を行い、抽出した画像をデータとして提示装置１０に送信するか、ブラウザを介して提示装置１０に表示する（ステップＳＴ６２）。

【0137】

提示装置１０にはＡＩ支援解析システムが連結され、必要に応じてＡＩ診断支援を行うことができる。提示装置内でＡＩ解析結果が表示できるほか、ネットワークを通じてサーバ内情報のＡＩ解析を行うことも可能である。ＡＩ解析システムは画像判定であれば、ＣＮＮを中心とした深層学習で教師画像データに照らして、骨腫瘍病変領域を表示することができる。また、病院情報データベースや骨関連事象患者データベースからＡＩ解析支援システムにアクセスする場合は、自然言語処理プログラムによって、過去の類似情報を検索して抽出することができ、病態予後や治療履歴情報を収集することができる。

【0138】

放射線腫瘍医等の専門医が、抽出された画像を精査し、骨関連事象を引き起こす可能性を疑う患者の抽出を行う。提示装置１０は、抽出された患者の患者情報を示すデータ、読影された画像、及び画像の読影結果を示すデータを含む画像診断報告書データを提示する。

【0139】

提示された画像診断報告書データに基づいて、整形外科医等の第３の作業者がスコアリングを行い、その結果に基づいて、高スコア患者を抽出する。提示装置１０は、スコアリングにより抽出された患者の患者氏名又は患者ＩＤと、スコアリングの結果とを、抽出結果としてサーバ５０に送信する（ステップＳＴ６４）。サーバ５０は、受診したスコアリングにより抽出された患者の患者氏名又は患者ＩＤに基づいて、前記患者のスコアリングの結果を、骨関連事象を引き起こす可能性が高いハイリスク患者の患者情報を示すデータと、臨床所見を示すデータと紐付け、骨関連事象患者データベース５０３に格納する（ステップＳＴ４５）。

【0140】

スコアリングにより抽出された患者の読影結果は、患者の骨関連事象情報として、第３の作業者を介して、あるいは、電子カルテを介して、第１作業者にフィードバックされる。

【0141】

画像の抽出・送信・表示はＡＩ支援システムの画像解析ＡＩで解析することができる。また、スコアリングの評価は、ＡＩ支援システムのスコア解析ＡＩで解析することができる。これらは連結して稼働させることも可能で、その場合は、画像読影結果の統合評価をＡＩ支援システムの統合解析ＡＩで解析することができる。

【0142】

ＡＩは、有線又は無線のネットワークを介して提示装置１０からサーバ５０の画像情報データベース５０２にアクセスする。提示装置１０は、サーバ５０に画像情報データベース５０２に格納されている読影結果のテキストデータ内に骨内腫瘍に関連するテキストデータを含む画像読影結果の抽出を要求する（ステップＳＴ８１）。サーバ５０は、画像読影結果の抽出を行い、抽出した画像読影結果をデータとして提示装置１０に送信するか、ブラウザを介して提示装置１０に表示する（ステップＳＴ８２）。

【0143】

ＡＩが、抽出された画像読影結果を精査し、骨関連事象を引き起こす可能性を疑う患者の抽出を行う。提示装置１０は、第３の作業者からの抽出結果を受け付け（ステップＳＴ８３）、抽出された患者の患者情報を示すデータ、読影された画像と紐付けて画像の読影結果を示すデータを含む画像診断報告書データを提示する。

【0144】

提示された画像診断報告書データに基づいて、ＡＩが上記１のステップＳＴ６で述べたスコアリングを行い、スコアリングの結果に基づいて、高スコア患者を抽出する。提示装置１０は、ＡＩによる抽出結果の入力を受け付ける（ステップＳＴ８４）。提示装置１０が、ＡＩからスコアリングの結果を受け付ける際に表示するダイアログの例を示す。

【0145】

また、提示装置１０は、スコアリングにより抽出された患者の患者氏名又は患者ＩＤと、スコアリングの結果とを、抽出結果としてサーバ５０に送信する（ステップＳＴ６５）。サーバ５０は、受診したスコアリングにより抽出された患者の患者氏名又は患者ＩＤに基づいて、前記患者のスコアリングの結果を、骨関連事象を引き起こす可能性が高いハイリスク患者の患者情報を示すデータと、臨床所見を示すデータと紐付け、骨関連事象患者データベース５０３に格納する（ステップＳＴ４５）。

【0146】

６．効果の検証
６－１．骨関連事象を引き起こす可能性が高いハイリスク患者の提示
2018年11月から本発明のシステム運用開始し、表１に示す人数の患者を抽出した。

【0147】

【表1】

【0148】

本発明のシステムで抽出された患者が、システムで抽出された時に、実際に骨関連事象の予防、又は治療等の処置を行うために整形外科、又は放射線科を診療科を受診していたか否かを表２に示す。

【0149】

【表2】

【0150】

２次抽出により抽出された患者の内、２０１８年１１月に抽出した１名と、２０１９年２月に抽出した１名は、本発明のシステムでピックアップされた際、まだ骨関連事象の処置のための受診をしていなかった。
このことから、本発明は、骨関連事象の検出率を向上させることができ、より早い段階で骨関連事象の処置が必要な患者をスクリーニングできることが示された。

【0151】

２次抽出により抽出された、骨関連事象を引き起こす可能性が高いハイリスク患者は、ほぼ全員骨関連事象の治療的処置のための受診に移行された。従来は、ここまでの高リスク患者を系統的に抽出・提示することができなかった。本発明により、骨関連事象の高リスク患者の検出率を向上させることができ、より早い段階で骨関連事象の治療に移行できることが示された。

【0152】

本発明は、がん骨転移や骨内腫瘍のために、病的骨折や神経麻痺等の患者予後に重大な支障をもたらす骨関連事象（SRE）の検出のために、系統的な介入と高リスク患者の抽出ができ、早期の治療的処置を可能にするものである。

【0153】

６－２．０次抽出用人工知能の性能評価
医師によってキーワードで抽出された2019年2月から2019年8月の1000件の画像所見を用いて、上記１．に記載の方法で訓練した０次抽出用人工知能の精度、感度、特異度を評価した。

【0154】

はじめに訓練データ数による０次抽出用人工知能の性能の違いを評価した。訓練データ数は、100、200、400、又は600件とし、０次抽出用人工知能の性能の検証を行った。訓練データのうち30%は検証用に使用した。解析データは、100件をホールドアウト法により4セット抽出し、各セットの精度、感度、特異度をROC曲線から求めた。さらに、これらの値の平均値及び標準偏差を求めた。人工知能の訓練には基本ソフトウエアとしてMathworks社のMATLAB（商標）を使用した。

【0155】

その結果を、図１５に示す。訓練データ数が６００件の場合には、精度、感度、特異度ともにばらつきが少なく良好であることが示された。

【0156】

次に、訓練データ数を900件とし、０次抽出用人工知能の性能の検証を行った。訓練データのうち30%は検証用に使用した。解析データは、100件をホールドアウト法により決定した。

【0157】

図１６に、訓練データ数を900件とした場合の、ROC曲線を示す。精度0.91、感度0.84、特異度0.98、AUC値0.95と非常に良好であった。

【0158】

６－３．１次抽出用人工知能の性能評価
上記１．で述べたように、溶骨性病変の有無、骨破壊割合（カットオフ値50％）、後外側の障害の有無、脊柱管内進展の程度（カットオフ値5 mm）を指標として、医師が椎体のCT画像に対して評価を行った。訓練用検査画像データとして122名分の椎体のCT画像データを使用した。内訳は、正常検査画像データ1000枚、骨転移所見がある検査画像データ876枚である。解析用検査画像データは、20名分のCT検査画像データを使用した。内訳は、正常10名（CT画像データ1405枚）の撮像範囲内のすべての椎体CT画像データ、骨転移患者10名（CT画像データ59枚）の骨転移部の椎体CT画像データである。人工知能はCNNを使用し、転移学習で訓練した。ソフトウエアは、Mathworks社のMATLAB（商標）を使用した。

【0159】

正答率は、以下のとおりであり、概ね良好であった。
（１）溶骨性病変の有無
正常：95.9％（1347/1405），骨転移：74.6％（44/59）
（２）骨破壊割合
骨転移： 20.3％（12/59）
（３）後外側の障害（有り/無し）
骨転移： 89.8％（53/59）
（４）脊柱管内進展の程度
骨転移： 71.2％（42/59）

【符号の説明】

【0160】

１０ 提示装置
１ｔ，２ｔ，３ｔ 診療科端末
５０ サーバ
４０ 画像診断端末
５０２ 画像情報データベース

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】