知財求人 - 知財ポータルサイト「IP Force」
▶ ソニー・オリンパスメディカルソリューションズ株式会社の特許一覧
特許7579698医療情報管理サーバ、手術トレーニング装置、画像送信方法およびプログラム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-10-30
(45)【発行日】2024-11-08
(54)【発明の名称】医療情報管理サーバ、手術トレーニング装置、画像送信方法およびプログラム
(51)【国際特許分類】
G09B 9/00 20060101AFI20241031BHJP
G09B 23/28 20060101ALI20241031BHJP
【ＦＩ】
G09B9/00 Z
G09B23/28
【請求項の数】
11
(21)【出願番号】P 2020215826
(22)【出願日】2020-12-24
(65)【公開番号】P2021152636
(43)【公開日】2021-09-30
【審査請求日】2023-10-17
(31)【優先権主張番号】P 2020048703
(32)【優先日】2020-03-19
(33)【優先権主張国・地域又は機関】JP
(73)【特許権者】
【識別番号】313009556
【氏名又は名称】ソニー・オリンパスメディカルソリューションズ株式会社
(74)【代理人】
【識別番号】110002147
【氏名又は名称】弁理士法人酒井国際特許事務所
(72)【発明者】
【氏名】市川 潔
【審査官】岸 智史
(56)【参考文献】
【文献】特開２００２－００６７３５（ＪＰ，Ａ）
【文献】特開２００６－００６６０４（ＪＰ，Ａ）
【文献】特開平１１－１９７１５９（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１９／０２８６６５２（ＵＳ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０９Ｂ １／００－９／５６
Ｇ０９Ｂ １７／００－１９／２６
(57)【特許請求の範囲】
【請求項1】
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部と、クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する制御部と、
被検体の術中に撮像された術中動画データと、前記被検体に対して予めＣＴ装置またはＭＲＩ装置によって撮像された２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記シミュレーションデータを生成する生成部と、
前記術中動画データと、前記２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記術中動画データに写る前記被検体の臓器および位置を推定する推論部と、
を備え、
前記生成部は、
前記推論部の推定結果に基づいて、前記術中動画データおよび前記２次元画像データおよび３次元データの少なくとも一方の各々に含まれる臓器の位置合わせを行って前記シミュレーションデータを生成する、
医療情報管理サーバ。
【請求項2】
請求項１に記載の医療情報管理サーバであって、前記術中動画データは、
マルチスペクトル光源によってマルチスペクトル光が前記被検体に照射され、該被検体からの戻り光を受光することによって、少なくとも生体組織毎の反射周波数を含むスペクトル画像データを含み、
前記推論部は、
前記スペクトル画像データに含まれる前記生体組織毎の反射周波数を用いて少なくとも前記生体組織の種別および位置を推定する、
医療情報管理サーバ。
【請求項3】
請求項１に記載の医療情報管理サーバであって、前記記録部は、
前記複数のシミュレーションデータに、前記複数のシミュレーションデータの各々を執刀した複数の術者に関する複数の術者情報をさらに対応付けて記録し、
前記制御部は、
前記クライアント側で前記複数の術者情報のいずれか１つが選択された場合、選択された前記術者情報に応じた前記複数のシミュレーションデータを前記クライアント側へ送信する、
医療情報管理サーバ。
【請求項4】
請求項１に記載の医療情報管理サーバであって、前記記録部は、
前記複数のシミュレーションデータに、前記複数のシミュレーションデータの各々において使用された複数の医療器具に関する複数の医療器具情報をさらに対応付けて記録し、
前記制御部は、
前記シミュレーションデータを前記クライアント側へ送信する場合、該シミュレーションデータに対応付けられた前記医療器具情報を併せて前記クライアント側へ送信する、
医療情報管理サーバ。
【請求項5】
請求項４に記載の医療情報管理サーバであって、前記制御部は、
前記クライアント側で前記複数の医療器具情報のいずれか１つ以上が選択された場合、選択された前記医療器具情報を前記クライアント側へ送信する、
医療情報管理サーバ。
【請求項6】
請求項１に記載の医療情報管理サーバであって、前記制御部は、
前記シミュレーションデータを前記クライアント側へ送信した場合、前記クライアント側を操作する操作者の識別情報に基づいて、前記操作者に対して課金を行う、
医療情報管理サーバ。
【請求項7】
請求項６に記載の医療情報管理サーバであって、前記制御部は、
前記識別情報に対応付けられたレベルに基づいて、前記クライアント側で選択可能な前記手術手技に関する手術手技情報を前記クライアント側へ送信する、
医療情報管理サーバ。
【請求項8】
請求項７に記載の医療情報管理サーバであって、前記制御部は、
前記識別情報に基づいて、前記操作者が前記シミュレーションデータを用いて仮想的にトレーニングを行った回数に対して点数を付与する、
医療情報管理サーバ。
【請求項9】
請求項６に記載の医療情報管理サーバであって、前記記録部は、
前記複数のシミュレーションデータの各々のレベルをさらに対応付けて記録する、
医療情報管理サーバ。
【請求項10】
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部を備える医療情報管理サーバが実行する画像送信方法であって、クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する制御ステップと、
被検体の術中に撮像された術中動画データと、前記被検体に対して予めＣＴ装置またはＭＲＩ装置によって撮像された２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記シミュレーションデータを生成する生成ステップと、
前記術中動画データと、前記２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記術中動画データに写る前記被検体の臓器および位置を推定する推定ステップと、
を含み、
前記生成ステップは、
前記推定ステップの推定結果に基づいて、前記術中動画データおよび前記２次元画像データおよび３次元データの少なくとも一方の各々に含まれる臓器の位置合わせを行って前記シミュレーションデータを生成する、
画像送信方法。
【請求項11】
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部を備える医療情報管理サーバが実行するプログラムであって、クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する制御ステップと、
被検体の術中に撮像された術中動画データと、前記被検体に対して予めＣＴ装置またはＭＲＩ装置によって撮像された２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記シミュレーションデータを生成する生成ステップと、
前記術中動画データと、前記２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記術中動画データに写る前記被検体の臓器および位置を推定する推定ステップと、
を実行させ、
前記生成ステップは、
前記推定ステップの推定結果に基づいて、前記術中動画データおよび前記２次元画像データおよび３次元データの少なくとも一方の各々に含まれる臓器の位置合わせを行って前記シミュレーションデータを生成する
プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、シミュレーションデータを管理および配信する医療情報管理サーバ、手術トレーニング装置、手術トレーニングシステム、画像送信方法、表示方法およびプログラムに関する。
【背景技術】
【0002】
従来、手術トレーニング装置として、内視鏡の移動に伴う教材映像の見え方の練習時の表示に再現する技術が知られている（例えば特許文献１参照）。この技術では、教材用内視鏡による教材映像の撮像過程における教材用内視鏡の動き履歴を、内部に手術練習空間を提供する練習器内に挿入された練習用内視鏡に再現させ、かつ、教材映像と練習用内視鏡による撮像映像とを合成して表示させる。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２０１６－１４８７６５号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
ところで、医学生や研修医は、優れた術者になるため、実際の手術や症例に数多く立ち会ったうえ、様々な手術や経験を積まなければならなかった。しかしながら、上述した特許文献１では、１つの教材用内視鏡の動き履歴を練習用内視鏡によって再現しているに過ぎないため、様々な手術や症例に対応することができないうえ、同じ症例であっても医学生や研修医が術者や教授による手技をトレースしてみたり、別のアプローチによる手技を試みたりしたりすることができなかった。
【0005】
本開示は、上記に鑑みてなされたものであって、実手術に相当する経験を積むことができる医療情報管理サーバ、手術トレーニング装置、手術トレーニングシステム、画像送信方法、表示方法およびを提供することを目的とする。
【課題を解決するための手段】
【0006】
上述した課題を解決し、目的を達成するために、本開示に係る医療情報管理サーバは、少なくとも複数の手術手技と、複数のシミュレーションデータと、を対応付けて記録する記録部と、クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する制御部と、を備える。
【0007】
また、本開示に係る手術トレーニング装置は、複数の手術手技に対応付けた複数のシミュレーションデータを記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、１つ以上の医療器具と、前記医療器具に対する操作者による操作内容を検出する検出部と、前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる制御部と、を備え、前記制御部は、前記検出部が検出した前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する。
【0008】
また、本開示に係る手術トレーニングシステムは、医療情報管理サーバと、ネットワークを経由して前記医療情報管理サーバと通信可能な手術トレーニング装置と、を備え、前記医療情報管理サーバは、少なくとも複数の手術手技と、複数のシミュレーションデータと、を対応付けて記録する記録部と、クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する第１の制御部と、を備え、前記手術トレーニング装置は、前記医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、前記医療器具に対する操作者による操作内容を検出する検出部と、前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる第２の制御部と、を備え、前記第２の制御部は、前記検出部が検出した前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する。
【0009】
また、本開示に係る画像送信方法は、少なくとも複数の手術手技と、複数のシミュレーションデータと、を対応付けて記録する記録部を備える医療情報管理サーバが実行する画像送信方法であって、クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する。
【0010】
また、本開示に係る表示方法は、複数の手術手技に対応付けた複数のシミュレーションデータを記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、を備える手術トレーニング装置が実行する表示方法であって、前記医療器具に対する操作者による操作内容を検出し、前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる、かつ、前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する。
【0011】
また、本開示に係るプログラムは、少なくとも複数の手術手技と、複数のシミュレーションデータと、を対応付けて記録する記録部を備える医療情報管理サーバが実行するプログラムであって、クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信させる。
【0012】
また、本開示に係るプログラムは、複数の手術手技に対応付けた複数のシミュレーションデータを記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、を備える手術トレーニング装置に実行させるプログラムであって、前記医療器具に対する操作者による操作内容を検出させ、前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる、かつ、前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御させる。
【発明の効果】
【0013】
本開示によれば、実手術に相当する経験を積むことができるという効果を奏する。
【図面の簡単な説明】
【0014】
【発明を実施するための形態】
【0015】
本開示を実施するための形態を図面とともに詳細に説明する。なお、以下の実施の形態により本開示が限定されるものではない。また、以下の説明において、参照する各図は、本開示の内容を理解でき得る程度に形状、大きさ、および位置関係を概略的に示してあるに過ぎない。即ち、本開示は、各図で例示された形状、大きさ、および位置関係のみに限定されるものでない。さらに、図面の記載において、同一の部分には同一の符号を付して説明する。さらにまた、本開示に係る手術トレーニングシステムの一例として、腹腔鏡による内視鏡システムを用いた手術トレーニングシステムについて説明するが、手術用の顕微鏡システムを用いた手術トレーニングシステムであっても適用することができる。
【0016】
〔手術トレーニングシステムの概略構成〕
図１は、一実施の形態に係る手術トレーニングシステムの概略構成を示す図である。図１に示す手術トレーニングシステム１は、人や動物等の被検体を模倣した模型Ｏ１の腹部にトロッカーを用いて複数の穴を形成し、炭酸ガス等によって模型Ｏ１の腹部を膨らませた状態で、操作者Ｕ１（トレーニー（Trainee））が医療用撮像装置（硬性鏡等のビデオスコープ）、鉗子および電気メス等のエネルギーデバイスのいずれか１つ以上の医療器具を模型Ｏ１内に挿入しながら観察および処置を行いながらが腹腔鏡手術のトレーニングを行うシステムである。なお、図１では、模型Ｏ１に対して穴を２カ所形成しているが、トレーニング内容、例えばトレーニングを行う症例、術式および手術手技に応じて適宜変更することができる。
図１は、一実施の形態に係る手術トレーニングシステムの概略構成を示す図である。図１に示す手術トレーニングシステム１は、人や動物等の被検体を模倣した模型Ｏ１の腹部にトロッカーを用いて複数の穴を形成し、炭酸ガス等によって模型Ｏ１の腹部を膨らませた状態で、操作者Ｕ１（トレーニー（Trainee））が医療用撮像装置（硬性鏡等のビデオスコープ）、鉗子および電気メス等のエネルギーデバイスのいずれか１つ以上の医療器具を模型Ｏ１内に挿入しながら観察および処置を行いながらが腹腔鏡手術のトレーニングを行うシステムである。なお、図１では、模型Ｏ１に対して穴を２カ所形成しているが、トレーニング内容、例えばトレーニングを行う症例、術式および手術手技に応じて適宜変更することができる。
【0017】
図１に示す手術トレーニングシステム１は、トロッカー１０と、トロッカー２０と、医療器具３０と、医療器具４０と、表示装置５０と、制御装置６０と、医療情報管理サーバ７０と、複数の病院管理サーバ８０と、を備える。なお、一実施の形態では、トロッカー１０、トロッカー２０、医療器具３０、医療器具４０、表示装置５０および制御装置６０が手術トレーニング装置２として機能する。
【0018】
トロッカー１０，２０は、筒状をなし、模型Ｏ１に対して挿入される。トロッカー１０，２０は、後述する医療器具３０または医療器具４０が挿入される。
【0019】
医療器具３０は、トロッカー１０を経由して模型Ｏ１内に挿入される。医療器具３０は、医者や研修医等の術者の操作に応じて観察対象に対して処置を模擬的に行う。また、医療器具３０は、術者の操作内容を検出し、この検出結果を、伝送ケーブルを経由して術者の操作内容を制御装置６０へ出力する。医療器具３０は、例えば注射、鉗子、ナイフ、高周波スネア、処置具および高周波メスや電気メス等のエネルギーデバイスである。
【0020】
医療器具４０は、トロッカー２０を経由して模型Ｏ１内に挿入される。医療器具４０は、医者や研修医等の術者の操作に応じて観察対象に対して処置を模擬的に行う。また、医療器具４０は、術者の操作内容を検出し、この検出結果を、伝送ケーブルを経由して術者の操作内容を制御装置６０へ出力する。医療器具４０は、例えば注射、鉗子、ナイフ、高周波スネア、処置具および高周波メスや電気メス等のエネルギーデバイスである。
【0021】
表示装置５０は、制御装置６０の制御のもと、制御装置６０から入力された画像データに基づく２次元画像または３次元画像によって表示する。表示装置５０は、例えば液晶ディスプレイや有機ＥＬディスプレイ（Organic Electroluminescent Display）等および音声スピーカ等を用いて実現される。
【0022】
制御装置６０は、手術トレーニング装置２の各部を制御する。制御装置６０は、ネットワーク９０を経由して医療情報管理サーバ７０から入力されたシミュレーションデータに対して各種の画像処理を行って出力することによってシミュレーションデータに基づくシミュレーション動画を表示装置５０に表示させる。制御装置６０は、メモリと、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）およびＦＰＧＡ（Field-Programmable Gate Array）等のハードウェアと、を備えるプロセッサを用いて実現される。ここで、シミュレーションデータとは、臓器を用いた３次元空間における手術シミュレーションを行うためのデータであって、臓器または医療器具に関するデータを含む。臓器および医療器具毎のシミュレーションデータは、例えば、以下のパラメータを含み、三次元空間上のポリゴンデータ等で規定される。
（１）位置（臓器の位置（座標情報））
（２）形状（臓器の形状、医療器具毎の形状）
さらに、臓器および医療器具毎のシミュレーションデータは、以下のパラメータ（３）～（７）を含んでいてもよい。
（３）質量密度
（４）剛性
（５）摩擦
（６）粘性
（７）触覚
また、シミュレーションデータは、医療器具または臓器の経時的な動きや変形に関する時系列変化の情報をさらに含むことができる。
（１）位置（臓器の位置（座標情報））
（２）形状（臓器の形状、医療器具毎の形状）
さらに、臓器および医療器具毎のシミュレーションデータは、以下のパラメータ（３）～（７）を含んでいてもよい。
（３）質量密度
（４）剛性
（５）摩擦
（６）粘性
（７）触覚
また、シミュレーションデータは、医療器具または臓器の経時的な動きや変形に関する時系列変化の情報をさらに含むことができる。
【0023】
医療情報管理サーバ７０は、ネットワーク９０を経由して制御装置６０から要求されたシミュレーションデータを送信する。また、医療情報管理サーバ７０は、複数の患者の各々をＣＴ（Computed Tomography）装置またはＭＲＩ（Magnetic Resonance Imaging）装置等によって取得した少なくとも臓器に関するデータを含む２次元画像データまたは３次元画像データを記録する。さらに、医療情報管理サーバ７０は、医療用撮像装置によって被検体の術中に撮像された術中動画データと、ＣＴ装置またはＭＲＩ装置によって撮像された少なくとも臓器に関するデータを含む２次元画像データおよび３次元画像データの少なくとも一方とに基づくシミュレーション画像データ等を記録する。医療情報管理サーバ７０は、ＣＰＵ、ＧＰＵ、やＦＰＧＡ等のハードウェアを備えるプロセッサと、ＨＤＤ（Hard Disk Drive）およびＳＳＤ（Solid State Drive）等を用いて実現される。
【0024】
複数の病院管理サーバ８０は、ネットワーク９０を経由して医療情報管理サーバ７０において生成されるシミュレーションデータのための教材データを医療情報管理サーバ７０へ送信する。ここで、教材データとは、複数の被検体（患者）の各々をＣＴ装置またはＭＲＩ装置等によって取得した２次元画像データまたは３次元画像データと、医療用撮像装置（例えば内視鏡や硬性鏡等のビデオマイクロスコープ）によって複数の被検体（患者）の各々の術中に撮像された少なくとも臓器（例えば胃や腸等）を含む術中動画データと、複数の被検体の各々に関する被検体情報（患者情報）と、複数の被検体の各々を執刀した複数の執刀医（術者や病院名）と、複数の被検体の各々の手術手技に関する手技情報と、手術手技に用いられた複数の医療器具の各々に関する医療器具情報と、対応付けた動画ファイルである。複数の病院管理サーバ８０は、ＣＰＵ、ＧＰＵ、やＦＰＧＡ等のハードウェアを備えるプロセッサと、ＨＤＤおよびＳＳＤ等を用いて実現される。
【0025】
〔手術トレーニング装置の要部の機能構成〕
次に、手術トレーニング装置２の要部の機能構成について説明する。図２は、手術トレーニング装置２の要部の機能構成を示すブロック図である。
次に、手術トレーニング装置２の要部の機能構成について説明する。図２は、手術トレーニング装置２の要部の機能構成を示すブロック図である。
【0026】
〔医療器具の構成〕
まず、医療器具３０の構成について説明する。医療器具３０は、第１の検出部３１と、第２の検出部３２と、記録部３３と、通信部３４と、を備える。なお、医療器具４０は、医療器具３０と同様の構成のため、詳細な説明は省略する。
まず、医療器具３０の構成について説明する。医療器具３０は、第１の検出部３１と、第２の検出部３２と、記録部３３と、通信部３４と、を備える。なお、医療器具４０は、医療器具３０と同様の構成のため、詳細な説明は省略する。
【0027】
第１の検出部３１は、術者が把持する医療器具３０のトロッカー１０に対する抜き差し、例えば押し込み量または引き抜き量を検出し、この検出結果を通信部３４へ出力する。第１の検出部３１は、例えばジャイロセンサおよび加速度センサ等を用いて実現される。
【0028】
第２の検出部３２は、術者が操作する医療器具３０の開閉操作に伴う圧力値（押圧値）または速度を検出し、この検出結果を通信部３４へ出力する。第２の検出部３２は、圧力センサ、ジャイロセンサおよび加速度センサ等を用いて実現される。
【0029】
記録部３３は、揮発性メモリや不揮発メモリを用いて実現され、医療器具３０に関する医療器具情報を記録する。ここで、医療器具情報とは、医療器具３０の機種名、形状、品番、医療器具の種別情報（例えば鉗子や電気メス等の種別）および製造年月日等である。記録部３３は、医療器具情報を通信部３４へ出力する。
【0030】
通信部３４は、第１の通信部６１と通信可能であり、第１の検出部３１の検出結果、第２の検出部３２の検出結果および記録部３３が記録する医療器具情報を制御装置６０へ送信する。通信部３４は、通信モジュール等を用いて実現される。
【0031】
〔制御装置の構成〕
次に、制御装置６０の構成について説明する。制御装置６０は、第１の通信部６１と、画像処理部６２と、入力部６３と、記録部６４と、第２の通信部６５と、制御部６６と、を備える。
次に、制御装置６０の構成について説明する。制御装置６０は、第１の通信部６１と、画像処理部６２と、入力部６３と、記録部６４と、第２の通信部６５と、制御部６６と、を備える。
【0032】
第１の通信部６１は、制御部６６の制御のもと、医療器具３０，４０に各種の制御データを送信し、かつ、医療器具３０，４０、医療情報管理サーバ７０から送信された各種のデータを画像処理部６２または制御部６６へ出力する。第１の通信部６１は、例えばＳ／Ｐ変換回路および通信モジュール等を用いて実現される。また、第１の通信部６１は、医療器具３０，４０に対して無線通信または光通信によって各種データを送信してもよい。
【0033】
画像処理部６２は、制御部６６の制御のもと、第１の通信部６１を経由して医療情報管理サーバ７０から入力されたシミュレーションデータ（ポリゴン動画データ）に基づくシミュレーション動画を表示させる。具体的には、画像処理部６２は、被検体内の観察対象のシミュレーション画像（ポリゴンデータ動画データにグラフィック化を施したシミュレーション動画）を生成し、このシミュレーション動画を表示装置５０へ出力することによってシミュレーション動画を表示させる。画像処理部６２は、メモリと、ＧＰＵ（Graphics Processing Unit）およびＦＰＧＡ等のハードウェアを有するプロセッサを用いて実現される。
【0034】
入力部６３は、ユーザからの操作の入力を受け付け、受け付けた操作内容に応じて信号を制御部６６へ出力する。入力部６３は、マウス、キーボード、タッチパネル、スイッチおよびボタン等を用いて実現される。
【0035】
記録部６４は、手術トレーニング装置２に関する各種のデータを記録する。記録部６４は、手術トレーニング装置２が実行する各種のプログラムを記録するプログラム記録部６４１を有する。記録部６４は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ＨＤＤ（Hard Disk Drive）およびＳＳＤ（Solid State Drive）等を用いて実現される。
【0036】
第２の通信部６５は、制御部６６の制御のもと、ネットワーク９０を経由して医療情報管理サーバ７０からシミュレーションデータを取得し、取得したシミュレーションデータを制御部６６および画像処理部６２へ出力する。第２の通信部６５は、通信モジュール等を用いて実現される。
【0037】
制御部６６は、制御装置６０を構成する各部を制御する。制御部６６は、第２の通信部６５を経由して医療情報管理サーバ７０から取得したシミュレーションデータに基づくシミュレーション動画上に医療器具に関する医療器具画像を表示装置５０に表示させる。具体的には、制御部６６は、第１の検出部３１および第２の検出部３２の各々が検出した医療器具３０の操作内容に基づいて、表示装置５０が表示する医療器具画像およびシミュレーション動画の表示態様を制御する。また、制御部６６は、入力部６３から表示装置５０が表示するシミュレーション動画を停止する停止信号が入力された場合において、第１の検出部３１および第２の検出部３２の各々が検出した操作内容に基づいて、シミュレーション動画の視点を変更する。具体的には、制御部６６は、シミュレーション動画の下層のレイヤーや現視点の視野領域から右マ周りに９０度回転させた視点のシミュレーション動画を表示装置５０に表示させる。制御部６６は、メモリと、ＣＰＵ等のハードウェアを有するプロセッサを用いて実現される。なお、一実施の形態では、制御部６６が第２の制御部として機能する。
【0038】
〔医療情報管理サーバの構成〕
次に、医療情報管理サーバ７０の構成について説明する。図３は、医療情報管理サーバ７０の機能構成を示すブロックである。図３に示す医療情報管理サーバ７０は、通信部７１と、記録部７２と、生成部７３と、推論部７４と、シミュレーションデータ記録部７５と、画像データ記録部７６と、ユーザデータ記録部７７と、医療器具データ記録部７８と、サーバ制御部７９と、を備える。
次に、医療情報管理サーバ７０の構成について説明する。図３は、医療情報管理サーバ７０の機能構成を示すブロックである。図３に示す医療情報管理サーバ７０は、通信部７１と、記録部７２と、生成部７３と、推論部７４と、シミュレーションデータ記録部７５と、画像データ記録部７６と、ユーザデータ記録部７７と、医療器具データ記録部７８と、サーバ制御部７９と、を備える。
【0039】
通信部７１は、サーバ制御部７９の制御のもと、ネットワーク９０を経由して制御装置６０（クライアント側）から要求があったシミュレーションデータを制御装置６０へ送信する。通信部７１は、通信モジュール等を用いて実現される。
【0040】
記録部７２は、医療情報管理サーバ７０に関する各種のデータを記録する。記録部７２は、医療情報管理サーバ７０が実行する各種のプログラムを記録するプログラム記録部７２１を有する。記録部７２は、ＲＡＭおよびＲＯＭ等を用いて実現される。
【0041】
生成部７３は、サーバ制御部７９の制御のもと、ネットワーク９０を経由して複数の病院管理サーバ８０の各々から送信された被検体の術中に撮像された術中動画データと、被検体に対して予めＣＴ装置またはＭＲＩ装置によって撮像された２次元画像データおよび３次元データの少なくとも一方と、に基づいて、シミュレーションデータを生成し、このシミュレーションデータをシミュレーションデータ記録部７５に記録する。また、生成部７３は、後述する推論部７４の推論結果に基づいて、術中動画データと、２次元画像データおよび３次元データの少なくとも一方との各々に含まれる臓器の位置合わせを行ってシミュレーションデータを生成する。さらに、生成部７３は、後述する推論部７４の推論結果に基づいて、術中動画データと、２次元画像データおよび３次元データの少なくとも一方との各々に含まれる臓器の向きおよびつぶれ具合等を反映したシミュレーションデータを生成する。生成部７３は、メモリと、ＧＰＵ等のハードウェアを有するプロセッサを用いて実現される。
【0042】
推論部７４は、サーバ制御部７９の制御のもと、ネットワーク９０を経由して複数の病院管理サーバ８０の各々から送信された術中動画データと、２次元画像データおよび３次元データの少なくとも一方と、に基づいて、術中動画データに写る被検体の臓器および位置を推定し、この推定結果を生成部７３へ出力する。推論部７４は、学習パラメータとして、術中動画データ、この術中動画データに写る臓器および位置、医療用撮像装置（ビデオスコープ）の先端から臓器までの距離を示す距離情報および術中動画データの特徴量、複数のシミュレーションデータ（例えばＣＴ画像データおよびＭＲＩ画像データの少なくとも一方に基づくポリゴンデータ）等を学習パラメータ（教師データ）として、この学習パラメータをディープラーニング（Deep Learning）等によって機械学習され、出力パラメータとして術中動画データに写る被検体の観察対処の臓器および位置を推定した推定結果を出力する学習済みモデルを用いて実現される。ここで、機械学習としては、ＤＮＮ（Deep Neural Network）、ＣＮＮ（Convolutional Neural Network）およびＲＮＮ（Recurrent Neural Network）等が用いられる。また、推論部７４は、ネットワーク９０を経由して複数の病院管理サーバ８０の各々から送信された術中動画データが光源装置によってマルチスペクトル光が照射されたマルチスペクトル画像データである場合、マルチスペクトル画像データに含まれる反射光周波数（各スペクトル毎）の違いを用いてマルチスペクトル画像データに写る被検体の観察対象の各部の生体組織種別（例えば胆嚢や膵臓等の臓器、血管、神経、リンパ、尿管および脂肪等）と、それらの位置（領域）と、を推定し、この推定結果を生成部７３へ出力する。さらに、推論部７４は、ネットワーク９０を経由して複数の病院管理サーバ８０の各々から送信された術中動画データに対応付けられた医療用撮像装置の位置、向き、被検体の挿入位置、被検体へ挿入された操作量（距離）と、に基づいて、医療用撮像装置の光学系の光軸（トロッカーの挿入方向）に対する基準としたときの術中動画データに写る臓器、血管および神経等の向き（方向）およびつぶれ具合等を推定し、この推定結果を生成部７３へ出力する。推論部７４は、メモリと、ＧＰＵ等のハードウェアを有するプロセッサを用いて実現される。
【0043】
シミュレーションデータ記録部７５は、複数の手術手技と、複数のシミュレーションデータと、を対応付けて記録する。具体的には、図４の表Ｔ１に示すように、シミュレーションデータ記録部７５は、手術手技と、シミュレーションデータと、このシミュレーションデータを執刀した術者を識別する術者情報と、このシミュレーションデータに用いられた医療器具に関する医療器具情報と、このシミュレーションデータのレベルを示すレベル情報と、を対応付けて記録する。シミュレーションデータ記録部７５は、ＨＤＤやＳＳＤ等を用いて実現される。
【0044】
画像データ記録部７６は、ネットワーク９０を経由して複数の病院管理サーバ８０の各々から送信されたＣＴ装置によって撮像された２次元画像データまたはＭＲＩ検査によって撮像された３次元画像データと、病院名を示す病院識別情報、被検体に関する被検体情報（患者情報）と、を対応付けて記録する。ここで、被検体情報とは、被検体の氏名、病名、診察履歴、生体情報、担当医および執刀医等である。画像データ記録部７６は、ＨＤＤおよびＳＳＤ等を用いて実現される。
【0045】
ユーザデータ記録部７７は、ネットワーク９０を経由して医療情報管理サーバ７０において手術トレーニング装置２を用いてトレーニングを行った複数の操作者Ｕ１の各々に関する識別情報を記録する。具体的には、図５の表Ｔ２に示すように、ユーザデータ記録部７７は、操作者Ｕ１を識別する識別情報として、ユーザＩＤと、操作者Ｕ１の手術トレーニングによるレベル（難易度）と、トレーニング内容と、対応付けて記録する。さらに、ユーザデータ記録部７７は、ユーザＩＤに、トレーニングの回数、ユーザＩＤが所属する病院や学会、住所および銀行口座を対応付けて記録してもよい。ユーザデータ記録部７７は、ＨＤＤおよびＳＳＤ等を用いて実現される。
【0046】
医療器具データ記録部７８は、医療器具に関する医療器具情報を記録する。ここで、医療器具情報とは、医療器具の機種名、型番、アニメーションデータ、ＣＡＤデータ（ポリゴンデータ）等である。
【0047】
サーバ制御部７９は、医療情報管理サーバ７０を構成する各部を制御する。サーバ制御部７９は、メモリと、ＣＰＵ等のハードウェアを有するプロセッサを用いて実現される。サーバ制御部７９は、制御装置６０（クライアント側）で複数の手術手技のいずれか１つが選択された場合、選択された手術手技に対応するシミュレーションデータを制御装置６０（クライアント）側へ送信する。サーバ制御部７９は、判定部７９１と、課金部７９２と、点数付与部７９３と、を有する。なお、一実施の形態では、サーバ制御部７９が第１の制御部として機能する。
【0048】
判定部７９１は、制御装置６０およびネットワーク９０を経由して医療情報管理サーバ７０にアクセスされた操作者Ｕ１の識別情報と、ユーザデータ記録部７７が記録する識別情報とを判定し、この判定結果を課金部７９２および点数付与部７９３へ出力する。
【0049】
課金部７９２は、判定部７９１の判定結果に基づいて、ユーザデータ記録部７７が記録するユーザＩＤに対応するユーザが登録した登録住所または所属病院に対して、制御装置６０にダウンロードされたシミュレーションデータのレベルまたは回数に基づく料金を請求することによって課金を行う。
【0050】
点数付与部７９３は、判定部７９１の判定結果に基づいて、ユーザデータ記録部７７が記録するユーザＩＤに、シミュレーション動画に対応付けられたレベル、またはシミュレーションデータでトレーニングを行った回数に応じた点数を付与する。
【0051】
〔トレーニング方法の概要〕
次に、手術トレーニングシステム１による手術トレーニング方法の概要について説明する。図６～図１１は、表示装置５０が表示する手術トレーニングを行う際に表示する設定画面の一例を示す図である。
次に、手術トレーニングシステム１による手術トレーニング方法の概要について説明する。図６～図１１は、表示装置５０が表示する手術トレーニングを行う際に表示する設定画面の一例を示す図である。
【0052】
まず、操作者Ｕ１は、制御装置６０の入力部６３を用いて医療情報管理サーバ７０のブラウザへアクセスし、操作者Ｕ１を識別するための識別情報（ユーザＩＤおよびパスワード等）を入力する。この場合、医療情報管理サーバ７０は、ブラウザにアクセスした制御装置６０（クライアント側）にトレーニング画面データを制御装置６０に送信する。これにより、図６に示すように、表示装置５０は、制御装置６０の制御のもと、トレーニング画面データに対応するトレーニング画面Ｗ１を表示する。トレーニング画面Ｗ１には、少なくとも、手術手技のレベルと、手術手技の手術対象（例えば直腸）と、ミッション（例えば腫瘍摘出および縫合）と、シミュレーションデータに対応するサムネイル画像ＳＭ１と、が含まれる。図６に示すように、操作者Ｕ１は、入力部６３を用いてポインター等を操作し、所望のレベル、所望の手術対象を所定の各セルに設定する。この場合、制御装置６０は、操作者Ｕ１によって設定された設定内容を医療情報管理サーバ７０へ送信する。
【0053】
また、図７に示すように、医療情報管理サーバ７０は、制御装置６０から手術手技のリアリズム設定およびトレーニング中における各種のモードの設定を要求する要求信号が入力された場合、リアリズム設定およびパニックモード設定画面データを制御装置６０に送信する。これにより、図７に示すように、表示装置５０は、制御装置６０の制御のもと、リアリズム設定およびパニックモード設定画面Ｗ２を表示する。リアリズム設定およびパニックモード設定画面Ｗ２には、少なくとも、出血スピードと、血圧低下スピードと、Ｏ２低下と、奇形臓帯・血管と、硬さ・もろさと、バイタルと、手術中のパニックの有無と、が含まれる。
【0054】
さらに、図８に示すように、医療情報管理サーバ７０は、制御装置６０から医療器具を選択する処理具選択およびセッティングを要求する要求信号が入力された場合、処理具選択およびセッティング設定画面データを制御装置６０に送信する。これにより、図８に示すように、表示装置５０は、制御装置６０の制御のもと、処理具選択およびセッティング設定画面Ｗ３を表示する。処理具選択およびセッティング設定画面Ｗ３には、操作者Ｕ１が選択した手術手技に用いる複数の医療器具Ｍ１～Ｍ５（複数の処置具）が含まれる。例えば、処理具選択およびセッティング設定画面Ｗ３には、鉗子、電気メス、医療用撮像装置（硬性鏡）等が含まれる。操作者Ｕ１は、トレーニングで行う手術手技に用いる医療器具を選択する。さらに、操作者Ｕ１は、医療情報管理サーバ７０に対して課金等を行うことによって選択することができる医療器具（選択アイテム）を増やすことができる。この場合、医療情報管理サーバ７０は、操作者Ｕ１の識別情報に基づいて、選択された医療器具の数に応じた料金を請求する。
【0055】
また、図９に示すように、医療情報管理サーバ７０は、制御装置６０から手術手技または症例ベースを要求する要求信号が入力された場合、複数の手術手技または複数の症例の各々に対応する複数のシミュレーションデータのサムネイル画像を一覧表示した症例選択画面データを制御装置６０へ送信する。これにより、図９に示すように、表示装置５０は、制御装置６０の制御のもと、症例選択画面Ｗ４を表示する。症例選択画面Ｗ４には、複数のシミュレーションデータの各々に対応するサムネイル画像Ｐ１～Ｐ５が含まれる。操作者Ｕ１は、所望のサムネイル画像を選択する。この場合、医療情報管理サーバ７０は、制御装置６０から入力された選択信号に応じたサムネイル画像のシミュレーションデータの執刀した術者（執刀医）に関する術者データを制御装置６０へ送信する。これにより、図１０に示すように、表示装置５０は、制御装置６０の制御のもと、指導教授等である術者に関する術者画面Ｗ５を表示する。術者画面Ｗ５には、術者（執刀医）の肖像、術者が執刀した症例、手術手技、手術トレーニングシステム１によるレベルおよびメッセージ等が含まれる。
【0056】
また、図１１に示すように、医療情報管理サーバ７０は、制御装置６０から新規のアプローチのシミュレーションデータを要求する要求信号が入力された場合、規新のアプローチのシミュレーションデータ画面データを制御装置６０へ送信する。これにより、図１０に示すように、表示装置５０は、制御装置６０の制御のもと、規新のアプローチのシミュレーションデータ画面Ｗ６を表示する。シミュレーションデータ画面Ｗ６には、シミュレーション動画に対応するサムネイル画像ＳＭ２等が含まれる。
【0057】
このように、操作者Ｕ１は、制御装置６０の入力部６３を用いて医療情報管理サーバ７０からレベルに応じた所望の手術症例のシミュレーションデータを制御装置６０にダウンロードさせることによって、トレーニングを行うことができる。
【0058】
〔医療情報管理サーバの処理〕
次に、医療情報管理サーバ７０が実行する処理について説明する。図１２は、医療情報管理サーバ７０が実行する処理の概要を示すフローチャートである。
次に、医療情報管理サーバ７０が実行する処理について説明する。図１２は、医療情報管理サーバ７０が実行する処理の概要を示すフローチャートである。
【0059】
まず、サーバ制御部７９は、クライアント側から要求があったか否かを判断する（ステップＳ１）。具体的には、サーバ制御部７９は、ネットワーク９０を経由して制御装置６０（クライアント側）から各種のシミュレーションデータを要求する要求信号が入力されたか否かを判断する。サーバ制御部７９によってクライアント側から要求があったと判断された場合（ステップＳ１：Ｙｅｓ）、医療情報管理サーバ７０は、後述するステップＳ２へ移行する。これに対して、サーバ制御部７９によってクライアント側から要求がなかったと判断された場合（ステップＳ１：Ｎｏ）、医療情報管理サーバ７０は、後述するステップＳ４へ移行する。
【0060】
ステップＳ２において、医療情報管理サーバ７０は、クライアント側へシミュレーションデータを送信するシミュレーションデータ送信処理を実行する。なお、シミュレーション動画送信処理の詳細は、後述する。
【0061】
続いて、サーバ制御部７９は、クライアント側からのアクセスが終了したか否かを判断する（ステップＳ３）。サーバ制御部７９によってクライアント側からのアクセスが終了したと判断された場合（ステップＳ３：Ｙｅｓ）、医療情報管理サーバ７０は、本処理を終了する。これに対して、サーバ制御部７9によってクライアント側からのアクセスが終了していないと判断された場合（ステップＳ３：Ｎｏ）、医療情報管理サーバ７０は、上述したステップＳ１へ戻る。
【0062】
ステップＳ４において、サーバ制御部７９は、ネットワーク９０を経由して複数の病院管理サーバ８０のいずれか１つから術中動画データと２次元画像データおよび３次元画像データを受信したか否かを判断する。サーバ制御部７９によって複数の病院管理サーバ８０のいずれか１つから術中動画データと２次元画像データおよび３次元画像データを受信したと判断された場合（ステップＳ４：Ｙｅｓ）、医療情報管理サーバ７０は、後述するステップＳ５へ移行する。これに対して、サーバ制御部７９によって複数の病院管理サーバ８０のいずれか１つから術中動画データと２次元画像データおよび３次元画像データを受信していないと判断された場合（ステップＳ４：Ｎｏ）、医療情報管理サーバ７０は、ステップＳ３へ移行する。
【0063】
ステップＳ５において、医療情報管理サーバは、術中動画データと、２次元画像データおよび３次元画像データのいずれか一方と、に基づいて、シミュレーションデータを生成するシミュレーションデータ生成処理を実行する。なお、シミュレーションデータ生成処理の詳細は、後述する。ステップＳ５の後、医療情報管理サーバ７０は、ステップＳ３へ移行する。
【0064】
〔シミュレーションデータ送信処理の概要〕
次に、上述した図１２のステップＳ２において説明したシミュレーションデータ送信処理の概要について説明する。図１３は、シミュレーションデータ送信処理の概要を示すフローチャートである。
次に、上述した図１２のステップＳ２において説明したシミュレーションデータ送信処理の概要について説明する。図１３は、シミュレーションデータ送信処理の概要を示すフローチャートである。
【0065】
図１３に示すように、まず、サーバ制御部７９は、ネットワーク９０および通信部７１を経由してアクセスされた制御装置６０（クライアント側）から送信された操作者Ｕ１を識別する識別情報を取得する（ステップＳ１０１）。この場合、判定部７９１は、ユーザデータ記録部７７が記録する識別情報と制御装置６０から送信された操作者Ｕ１の識別情報とを判定する。
【0066】
続いて、判定部７９１は、制御装置６０から手術トレーニングにおいてミッションを設定する設定信号が入力されたか否かを判断する（ステップＳ１０２）。判定部７９１によって制御装置６０から手術トレーニングにおいてミッションを設定する設定信号が入力されたと判断された場合（ステップＳ１０２：Ｙｅｓ）、医療情報管理サーバ７０は、後述するステップＳ１０３へ移行する。これに対して、判定部７９１によって制御装置６０から手術トレーニングにおいてミッションを設定する設定信号が入力されていないと判断された場合（ステップＳ１０２：Ｎｏ）、医療情報管理サーバ７０は、後述するステップＳ１０５へ移行する。
【0067】
ステップＳ１０３において、サーバ制御部７９は、制御装置６０から手術トレーニングにおいて設定されたミッションに対応するシミュレーションデータを通信部７１に送信させる（ステップＳ１０３）。具体的には、サーバ制御部７９は、シミュレーションデータ記録部７５が記録する複数のシミュレーションデータの中から制御装置６０から手術トレーニングにおいて設定されたミッションに対応するシミュレーションデータを取得し、取得したシミュレーションデータを通信部７１に送信させる。これにより、操作者Ｕ１は、表示装置５０が表示するシミュレーション動画を見ながら設定したミッションに応じたトレーニングを行うことができる。
【0068】
続いて、サーバ制御部７９は、識別情報と、制御装置６０にダウンロードされたシミュレーションデータのレベル等に基づいて、操作者Ｕ１に対して課金および識別情報に点数を付与する（ステップＳ１０４）。具体的には、課金部７９２は、判定部７９１によって判定されたユーザデータ記録部７７が記録するユーザＩＤに一致するユーザが登録した登録住所または所属病院に対して、制御装置６０にダウンロードされたシミュレーションデータのレベルまたは回数に基づく料金を請求することによって課金を行う。さらに、点数付与部７９３は、判定部７９１によって判定されたユーザデータ記録部７７が記録するユーザＩＤに、シミュレーション動画に対応付けられたレベル、またはシミュレーションデータでトレーニングを行った回数に応じた点数を付与する。ステップＳ１０４の後、医療情報管理サーバ７０は、図１２のメインルーチンへ戻る。なお、課金部７９２による課金方法は、一例であり、シミュレーションデータのレベル以外にも、新たな医療器具の医療器具情報のダウンロード、新たな手術手技のシミュレーションデータのダウンロード、所定の執刀医によるシミュレーションデータのダウンロードに対して、課金することによって請求してもよい。
【0069】
ステップＳ１０５において、判定部７９１は、制御装置６０から複数の手術手技症例から所望の手術手技症例を選択するための要求信号が入力されたか否かを判断する。判定部７９１によって制御装置６０から複数の手術手技症例から所望の手術手技症例を選択するためおの要求信号が入力されたと判断された場合（ステップＳ１０５：Ｙｅｓ）、医療情報管理サーバ７０は、後述するステップＳ１０６へ移行する。これに対して、判定部７９１によって制御装置６０から複数の手術手技症例から所望の手術手技症例を選択するための要求信号が入力されていないと判断された場合（ステップＳ１０５：Ｎｏ）、医療情報管理サーバ７０は、後述するステップＳ１０９へ移行する。
【0070】
ステップＳ１０６において、サーバ制御部７９は、シミュレーションデータ記録部７５が記録する複数のシミュレーションデータの各々に対応する複数の手術手技症例をまとめた手術手技症例情報を通信部７１に送信させる。
【0071】
続いて、サーバ制御部７９は、ネットワーク９０および通信部７１を経由して制御装置６０から操作者Ｕ１が手術トレーニングにおいて使用する医療器具情報を制御装置６０から取得する（ステップＳ１０７）。
【0072】
その後、サーバ制御部７９は、シミュレーションデータ記録部７５が記録する複数のシミュレーションデータの中から、操作者Ｕ１によって選択された手術手技症例および医療器具情報に基づいてシミュレーションデータを通信部７１に送信させる（ステップＳ１０８）。これにより、操作者Ｕ１は、表示装置５０において表示されるシミュレーション動画を見ながら医療器具３０，４０を用いた所望の手術手技症例の手術トレーニングを行うことができる。ステップＳ１０８の後、医療情報管理サーバ７０は、ステップＳ１０４へ移行する。
【0073】
ステップＳ１０９において、判定部７９１は、制御装置６０から複数の執刀医から所望の執刀医を選択するための要求信号が入力されたか否かを判断する。判定部７９１によって制御装置６０から複数の執刀医から所望の執刀医を選択するための要求信号が入力されたと判断された場合（ステップＳ１０９：Ｙｅｓ）、医療情報管理サーバ７０は、後述するステップＳ１１０へ移行する。これに対して、判定部７９１によって制御装置６０から複数の執刀医から所望の執刀医を選択するための要求信号が入力されていないと判断された場合（ステップＳ１０９：Ｎｏ）、医療情報管理サーバ７０は、ステップＳ１０４へ移行する。
【0074】
ステップＳ１１０において、サーバ制御部７９は、シミュレーションデータ記録部７５が記録する複数のシミュレーションデータの各々に対応する複数の執刀医をまとめた執刀医情報を通信部７１に送信させる。
【0075】
続いて、サーバ制御部７９は、ネットワーク９０および通信部７１を経由して制御装置６０から操作者Ｕ１によって選択された執刀医情報を取得し（ステップＳ１１１）、シミュレーションデータ記録部７５が記録する複数のシミュレーションデータの中から操作者Ｕ１によって選択された執刀医情報に基づいたシミュレーションデータを通信部７１に送信させる（ステップＳ１１２）。これにより、操作者Ｕ１は、表示装置５０において表示されるシミュレーション動画を見ながら執刀医による手術手技をトレースしたり、学習したりすることができる。ステップＳ１１２の後、医療情報管理サーバ７０は、ステップＳ１０４へ移行する。
【0076】
〔シミュレーションデータ生成処理の概要〕
次に、上述した図１２のステップＳ５において説明したシミュレーションデータ生成処理の概要について説明する。図１４は、シミュレーションデータ生成処理の概要を示すフローチャートである。
次に、上述した図１２のステップＳ５において説明したシミュレーションデータ生成処理の概要について説明する。図１４は、シミュレーションデータ生成処理の概要を示すフローチャートである。
【0077】
図１４に示すように、まず、推論部７４は、ネットワーク９０を経由して複数の病院管理サーバ８０の各々から送信された術中動画データと、少なくとも臓器に関するデータを含む２次元画像データおよび３次元データの少なくとも一方と、に基づいて、術中動画データに写る被検体の臓器および位置を推定する（ステップＳ２０１）。具体的には、推論部７４は、ネットワーク９０を経由して複数の病院管理サーバ８０の各々から送信された術中動画データが光源装置によってマルチスペクトル光が照射されたマルチスペクトル画像データである場合、マルチスペクトル画像データに含まれる反射光周波数（各スペクトル毎）の違いを用いてマルチスペクトル画像データに写る被検体の観察対処の各部の生体組織の種別（例えば胆嚢や膵臓等の臓器、血管、神経、リンパ、尿管および脂肪等）と、それらの位置（領域）と、を推定し、この推定結果を生成部７３へ出力する。また、推論部７４は、ネットワーク９０を経由して複数の病院管理サーバ８０の各々から送信された術中動画データに対応付けられた医療用撮像装置の位置、向き、被検体の挿入位置、被検体へ挿入された操作量（距離）と、に基づいて、医療用撮像装置の光学系の光軸（トロッカーの挿入方向）に対する基準としたときの術中動画データに写る臓器、血管および神経等の向き（方向）およびつぶれ具合等を推定し、この推定結果を生成部７３へ出力してもよい。
【0078】
続いて、生成部７３は、推論部７４の推論結果に基づいて、術中動画データと２次元画像データおよび３次元データの少なくとも一方との各々に含まれる臓器の位置合わせを行ってシミュレーションデータを生成する（ステップＳ２０２）。具体的には、生成部７３は、推論部７４の推論結果に基づいて、術中動画データと、２次元画像データおよび３次元データの少なくとも一方との各々に含まれる臓器の向き、臓器の位置、臓器の識別を行った後に、臓器の位置合わせを行いつつ、現在の視点で想定される臓器のつぶれ具合等を反映したシミュレーションデータを生成する。
【0079】
その後、サーバ制御部７９は、術中動画データを格納する術中動画ファイルに含まれるメタデータ（ヘッダ情報）から術者情報を取得し（ステップＳ２０３）、かつ、術中動画データを格納する術中動画ファイルに含まれるメタデータ（ヘッダ情報）から医療器具情報を取得する（ステップＳ２０４）。
【0080】
続いて、サーバ制御部７９は、生成部７３が生成したシミュレーションデータと、術者情報と、医療器具情報と、を対応つけたシミュレーションファイルを生成してシミュレーションデータ記録部７５に記録する（ステップＳ２０５）。ステップＳ２０５の後、医療情報管理サーバ７０は、図１２のメインルーチンへ戻る。
【0081】
〔手術トレーニング装置の処理〕
次に、手術トレーニング装置２が実行する処理について説明する。図１５は、手術トレーニング装置２が実行する処理の概要を示すフローチャートである。
次に、手術トレーニング装置２が実行する処理について説明する。図１５は、手術トレーニング装置２が実行する処理の概要を示すフローチャートである。
【0082】
まず、制御部６６は、入力部６３を経由して入力される操作者Ｕ１の識別情報を第２の通信部６５に送信させる（ステップＳ３０１）。
【0083】
続いて、入力部６３を経由して操作者Ｕ１がミッションモードを選択した場合（ステップＳ３０２：Ｙｅｓ）、制御部６６は、手術トレーニングにおいて設定可能なミッション情報を表示装置５０に表示させる（ステップＳ３０３）。
【0084】
その後、制御部６６は、入力部６３を用いて操作者Ｕ１が設定したミッション情報を第２の通信部６５に送信させる（ステップＳ３０４）。
【0085】
続いて、制御部６６は、医療情報管理サーバ７０から送信された操作者Ｕ１に設定されたミッションに対応するシミュレーションデータに基づくシミュレーション動画を表示装置５０に表示させる（ステップＳ３０５）。
【0086】
その後、制御部６６は、入力部６３からシミュレーション動画の再生を停止する停止信号が入力されたか否かを判断する（ステップＳ３０６）。制御部６６によって入力部６３からシミュレーション動画の再生を停止する停止信号が入力されたと判断された場合（ステップＳ３０６：Ｙｅｓ）、手術トレーニング装置２は、後述するステップＳ３０７へ移行する。これに対して、制御部６６によって入力部６３からシミュレーション動画の再生を停止する停止信号が入力されていないと判断された場合（ステップＳ３０６：Ｎｏ）、手術トレーニング装置２は、後述するステップＳ３０９へ移行する。
【0087】
ステップＳ３０７において、制御部６６は、医療器具３０，４０の操作内容に基づいてシミュレーション動画の視点を制御する。具体的には、制御部６６は、医療器具３０，４０の操作内容に基づいて、画像処理部６２を制御することによって、シミュレーション動画の視点として、現在の表示レイヤーの画像より下層側の表示レイヤーの画像を生成させたり、現在の視点から右周りに９０度視点を変更した状態で観察できる表示レイヤーの画像を生成させたりすることによって、表示装置５０が表示するシミュレーション動画の視点を制御する。もちろん、制御部６６は、医療器具３０，４０の操作内容に基づいて、画像処理部６２を制御することによって、シミュレーション動画の視点変更以外にも、例えば拡大または縮小を行ってもよい。
【0088】
続いて、シミュレーション動画の再生が終了した場合（ステップＳ３０８：Ｙｅｓ）、手術トレーニング装置２は、本処理を終了する。これに対して、シミュレーション動画の再生が終了していない場合（ステップＳ３０８：Ｎｏ）、手術トレーニング装置２は、上述したステップＳ３０６へ移行する。
【0089】
ステップＳ３０９において、制御部６６は、医療器具３０，４０の操作内容に基づいてシミュレーションデータに基づくシミュレーション動画の表示態様を制御する。具体的には、制御部６６は、医療器具３０，４０の操作内容に基づいて、シミュレーション動画に写る医療器具３０，４０を操作者Ｕ１の操作内容に応じて動かすとともに、医療器具３０，４０による処置をシミュレーション動画に反映させる。ステップＳ３０９の後、手術トレーニング装置２は、ステップＳ３０８へ移行する。
【0090】
次に、ステップＳ３０２において、入力部６３を経由して操作者Ｕ１がミッションモードを選択していない場合（ステップＳ３０２：Ｎｏ）について説明する。このとき、手術トレーニング装置２は、ステップＳ３１０へ移行する。
【0091】
続いて、入力部６３を経由して操作者Ｕ１が手術手技症例モードを選択した場合（ステップＳ３１０：Ｙｅｓ）、手術トレーニング装置２は、後述するステップＳ３１１へ移行する。これに対して、入力部６３を経由して操作者Ｕ１が手術手技症例モードを選択していない場合（ステップＳ３１０：Ｎｏ）、手術トレーニング装置２は、後述するステップＳ３１５へ移行する。
【0092】
ステップＳ３１１において、制御部６６は、手術トレーニングにおいて選択可能な手術手技症例情報を表示装置５０に表示させる。
【0093】
続いて、制御部６６は、入力部６３を用いて操作者Ｕ１が選択した手術手技症例情報を第２の通信部６５に送信させる（ステップＳ３１２）。
【0094】
その後、制御部６６は、医療器具３０，４０に関する医療器具情報を第２の通信部６５に送信させる（ステップＳ３１３）。
【0095】
続いて、制御部６６は、医療情報管理サーバ７０から送信された操作者Ｕ１によって選択された手術手技症例に対応するシミュレーションデータに基づくシミュレーション動画を表示装置５０に表示させる（ステップＳ３１４）。ステップＳ３１４の後、手術トレーニング装置２は、ステップＳ３０６へ移行する。
【0096】
ステップＳ３１５において、入力部６３を経由して操作者Ｕ１が術者モードを選択した場合（ステップＳ３１５：Ｙｅｓ）、手術トレーニング装置２は、後述するステップＳ３１６へ移行する。
【0097】
ステップＳ３１６において、制御部６６は、手術モードにおいて複数の術者を選択可能な術者情報を表示装置５０に表示させる。
【0098】
続いて、入力部６３を経由して操作者Ｕ１が選択した術者情報を第２の通信部６５に送信させる（ステップＳ３１７）。
【0099】
その後、制御部６６は、医療情報管理サーバ７０から送信された操作者Ｕ１によって選択された術者情報するシミュレーションデータに基づくシミュレーション動画を表示装置５０に表示させる（ステップＳ３１８）。ステップＳ３１８の後、手術トレーニング装置２は、ステップＳ３０６へ移行する。
【0100】
以上説明した一実施の形態によれば、サーバ制御部７９が制御装置６０（クライアント側）で複数の手術手技のいずれか１つが選択された場合、選択された手術手技に対応するシミュレーションデータを制御装置６０へ送信するため、操作者Ｕ１が実手術に相当する経験を積むことができるので、操作者Ｕ１のラーニングカーブを向上させることができる。
【0101】
さらに、一実施の形態によれば、場所に問われることなく、空いた時間で手術手技のトレーニングを行うことができる。
【0102】
また、一実施の形態によれば、生成部７３が病院管理サーバ８０の各々から送信された医療用撮像装置によって被検体の術中に撮像された術中動画データと、被検体に対して予めＣＴ装置またはＭＲＩ装置によって撮像された少なくとも臓器に関するデータを含む２次元画像データおよび３次元データの少なくとも一方と、に基づいて、シミュレーションデータを生成するため、複数の手術手技および複数の症例のシミュレーションデータを容易に集めることができる。
【0103】
また、一実施の形態によれば、生成部７３が推論部７４の推定結果に基づいて、術中動画データと、２次元画像データおよび３次元データの少なくとも一方との各々に含まれる臓器の位置合わせを行ってシミュレーションデータを生成するため、リアルなシミュレーションデータを生成することができる。
【0104】
また、一実施の形態によれば、シミュレーションデータ記録部７５が複数のシミュレーションデータに、この複数のシミュレーションデータの各々を執刀した複数の術者に関する複数の術者情報を対応付けて記録しているため、操作者Ｕ１が所望の術者が行ったシミュレーションデータを選択してトレーニングを行うことができる。
【0105】
また、一実施の形態によれば、シミュレーションデータ記録部７５が複数のシミュレーションデータに、この複数のシミュレーションデータの各々において使用された複数の医療器具に関する複数の医療器具情報をさらに対応付けて記録しているため、操作者Ｕ１が所望の医療器具を用いたシミュレーションデータを選択してトレーニングを行うことができる。
【0106】
また、一実施の形態によれば、サーバ制御部７９が制御装置６０（クライアント側）記複数の医療器具情報のいずれか１つ以上が選択された場合、選択された医療器具情報を制御装置６０側へ送信するため、操作者Ｕ１が所望の医療器具を用いてシミュレーションデータでトレーニングを行うことができる。
【0107】
また、一実施の形態によれば、サーバ制御部７９の課金部７９２がシミュレーションデータを制御装置６０（クライアント側）へ送信した場合、クライアント側を操作する操作者Ｕ１の識別情報に基づいて、操作者Ｕ１に対して課金を行うため、利益を得ることができる。
【0108】
また、一実施の形態によれば、サーバ制御部７９が制御装置６０から送信された操作者Ｕ１の識別情報に対応付けられたレベルに基づいて、制御装置６０で選択可能な手術手技に関する手術手技情報を制御装置６０へ送信するため、操作者Ｕ１のレベルに適したシミュレーションデータを選択させることができる。
【0109】
また、一実施の形態によれば、サーバ制御部７９が操作者Ｕ１の識別情報に基づいて、操作者Ｕ１がシミュレーションデータを用いて仮想的にトレーニングを行った回数に対して点数を付与するため、操作者Ｕ１による手技のレベル化を容易に把握することができる。
【0110】
また、一実施の形態によれば、シミュレーションデータ記録部７５が複数のシミュレーションデータの各々のレベルをさらに対応付けて記録するため、操作者Ｕ１が自身のレベルに応じたシミュレーションデータを選択してトレーニングを行うことができる。
【0111】
また、一実施の形態によれば、制御部６６が第１の検出部３１および第２の検出部３２の各々によって検出された操作者Ｕ１の操作内容に基づいて、表示装置５０が表示する医療器具画像およびシミュレーション動画の表示態様を制御するため、直感的な操作を行うことができる。
【0112】
また、一実施の形態によれば、制御部６６が入力部６３から表示装置５０によって表示されるシミュレーション動画を停止する停止信号が入力された場合において、第１の検出部３１および第２の検出部３２の各々によって検出された操作内容を検出したとき、この操作内容に基づいて、シミュレーション動画の視点を変更するため、操作者Ｕ１が所望する視点でシミュレーション動画を観察することができる。
【0113】
また、一実施の形態によれば、制御部６６が医療情報管理サーバ７０から送信された複数の手術手技の各々に関する複数の手術手技情報を表示装置５０に表示させ、かつ、入力部６３を経由して複数の手術手技情報のいずれか１つ以上が選択された場合、選択された手術手技情報に対応するシミュレーションデータを送信することを医療情報管理サーバ７０へ要求するため、操作者Ｕ１が所望する症例に対応するシミュレーションデータを医療情報管理サーバ７０から取得することができる。
【0114】
また、一実施の形態によれば、制御部６６が操作者Ｕ１の識別情報を医療情報管理サーバ７０へ送信するため、操作者Ｕ１に応じたシミュレーションデータを取得することができる。
【0115】
また、一実施の形態によれば、制御部６６が操作者Ｕ１によって使用される医療器具３０，４０の各々に関する医療器具情報を医療情報管理サーバ７０へ送信するため、操作者Ｕ１がトレーニングに使用する医療器具３０，４０に適したシミュレーションデータを取得することができる。
【0116】
なお、一実施の形態では、１人の操作者Ｕ１がトレーニングを行っているが、これに限定されることなく、複数の操作者Ｕ１が表示装置５０によって表示される同じシミュレーション動画を見ながらトレーニングを行ってもよいし、複数の操作者Ｕ１が互いに異なる場所に設置された手術トレーニング装置を用いてトレーニングを行ってもよい。
【0117】
（その他の実施の形態）
上述した本開示の一実施の形態に係る手術トレーニングシステムに開示されている複数の構成要素を適宜組み合わせることによって、種々の発明を形成することができる。例えば、上述した本開示の一実施の形態に係る手術トレーニングシステムに記載した全構成要素からいくつかの構成要素を削除してもよい。さらに、上述した本開示の一実施の形態に係る医療用観察システムで説明した構成要素を適宜組み合わせてもよい。
上述した本開示の一実施の形態に係る手術トレーニングシステムに開示されている複数の構成要素を適宜組み合わせることによって、種々の発明を形成することができる。例えば、上述した本開示の一実施の形態に係る手術トレーニングシステムに記載した全構成要素からいくつかの構成要素を削除してもよい。さらに、上述した本開示の一実施の形態に係る医療用観察システムで説明した構成要素を適宜組み合わせてもよい。
【0118】
また、本開示の一実施の形態に係る手術トレーニングシステムでは、上述してきた「部」は、「手段」や「回路」などに読み替えることができる。例えば、制御部は、制御手段や制御回路に読み替えることができる。
【0119】
また、本開示の一実施の形態に係る手術トレーニングシステムに実行させるプログラムは、インストール可能な形式または実行可能な形式のファイルデータでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）、ＵＳＢ媒体、フラッシュメモリ等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
【0120】
また、本開示の一実施の形態に係る手術トレーニングシステムに実行させるプログラムは、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。
【0121】
なお、本明細書におけるフローチャートの説明では、「まず」、「その後」、「続いて」等の表現を用いてステップ間の処理の前後関係を明示していたが、本発明を実施するために必要な処理の順序は、それらの表現によって一意的に定められるわけではない。即ち、本明細書で記載したフローチャートにおける処理の順序は、矛盾のない範囲で変更することができる。
【0122】
以上、本願の実施の形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、本開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本開示を実施することが可能である。
【0123】
なお、本技術は以下のような構成も取ることができる。
（付記１）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部と、
クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する制御部と、
を備える、
医療情報管理サーバ。
（付記２）
（付記１）に記載の医療情報管理サーバであって、
被検体の術中に撮像された術中動画データと、前記被検体に対して予めＣＴ装置またはＭＲＩ装置によって撮像された２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記シミュレーションデータを生成する生成部をさらに備える、
医療情報管理サーバ。
（付記３）
（付記２）に記載の医療情報管理サーバであって、
前記術中動画データと、前記２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記術中動画データに写る前記被検体の臓器および位置を推定する推論部をさらに備え、
前記生成部は、
前記推論部の推定結果に基づいて、前記術中動画データおよび前記２次元画像データおよび３次元データの少なくとも一方の各々に含まれる臓器の位置合わせを行って前記シミュレーションデータを生成する、
医療情報管理サーバ。
（付記４）
（付記３）に記載の医療情報管理サーバであって、
前記術中動画データは、
マルチスペクトル光源によってマルチスペクトル光が前記被検体に照射され、該被検体からの戻り光を受光することによって、少なくとも生体組織毎の反射周波数を含むスペクトル画像データを含み、
前記推論部は、
前記スペクトル画像データに含まれる前記生体組織毎の反射周波数を用いて少なくとも前記生体組織の種別および位置を推定する、
医療情報管理サーバ。
（付記５）
（付記１）～（付記４）のいずれか１つに記載の医療情報管理サーバであって、
前記記録部は、
前記複数のシミュレーションデータに、前記複数のシミュレーションデータの各々を執刀した複数の術者に関する複数の術者情報をさらに対応付けて記録し、
前記制御部は、
前記クライアント側で前記複数の術者情報のいずれか１つが選択された場合、選択された前記術者情報に応じた前記複数のシミュレーションデータを前記クライアント側へ送信する、
医療情報管理サーバ。
（付記６）
（付記１）～（付記５）のいずれか１つに記載の医療情報管理サーバであって、
前記記録部は、
前記複数のシミュレーションデータに、前記複数のシミュレーションデータの各々において使用された複数の医療器具に関する複数の医療器具情報をさらに対応付けて記録し、
前記制御部は、
前記シミュレーションデータを前記クライアント側へ送信する場合、該シミュレーションデータに対応付けられた前記医療器具情報を併せて前記クライアント側へ送信する、
医療情報管理サーバ。
（付記７）
（付記６）に記載の医療情報管理サーバであって、
前記制御部は、
前記クライアント側で前記複数の医療器具情報のいずれか１つ以上が選択された場合、選択された前記医療器具情報を前記クライアント側へ送信する、
医療情報管理サーバ。
（付記８）
（付記１）～（付記７）のいずれか１つに記載の医療情報管理サーバであって、
前記制御部は、
前記シミュレーションデータを前記クライアント側へ送信した場合、前記クライアント側を操作する操作者の識別情報に基づいて、前記操作者に対して課金を行う、
医療情報管理サーバ。
（付記９）
（付記８）に記載の医療情報管理サーバであって、
前記制御部は、
前記識別情報に対応付けられたレベルに基づいて、前記クライアント側で選択可能な前記手術手技に関する手術手技情報を前記クライアント側へ送信する、
医療情報管理サーバ。
（付記１０）
（付記９）に記載の医療情報管理サーバであって、
前記制御部は、
前記識別情報に基づいて、前記操作者が前記シミュレーションデータを用いて仮想的にトレーニングを行った回数に対して点数を付与する、
医療情報管理サーバ。
（付記１１）
（付記８）～（付記１０）のいずれか１つに記載の医療情報管理サーバであって、
前記記録部は、
前記複数のシミュレーションデータの各々のレベルをさらに対応付けて記録する、
医療情報管理サーバ。
（付記１２）
複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、
１つ以上の医療器具と、
前記医療器具に対する操作者による操作内容を検出する検出部と、
前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる制御部と、
を備え、
前記制御部は、前記検出部が検出した前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する、
手術トレーニング装置。
（付記１３）
（付記１２）に記載の手術トレーニング装置であって、
前記制御部は、
前記表示部が表示する前記シミュレーション動画を停止する停止信号が入力された場合において、前記検出部が前記操作内容を検出したとき、前記操作内容に基づいて、前記シミュレーション動画の視点を変更する、
手術トレーニング装置。
（付記１４）
（付記１３）に記載の手術トレーニング装置であって、
前記制御部は、
前記表示部に前記複数の手術手技の各々に関する複数の手術手技情報を表示させ、かつ、前記複数の手術手技情報のいずれか１つ以上が選択された場合、選択された前記手術手技情報に対応する前記シミュレーションデータを送信することを前記医療情報管理サーバへ要求する、
手術トレーニング装置。
（付記１５）
（付記１４）に記載の手術トレーニング装置であって、
前記操作者の識別情報の入力を受け付ける入力部をさらに備え、
前記制御部は、
前記識別情報を前記医療情報管理サーバへ送信する、
手術トレーニング装置。
（付記１６）
（付記１２）～（付記１５）のいずれか１つに記載の手術トレーニング装置であって、
前記制御部は、
前記医療器具に関する医療器具情報を前記医療情報管理サーバへ送信する、
手術トレーニング装置。
（付記１７）
医療情報管理サーバと、
ネットワークを経由して前記医療情報管理サーバと通信可能な手術トレーニング装置と、
を備え、
前記医療情報管理サーバは、
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部と、
クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する第１の制御部と、
を備え、
前記手術トレーニング装置は、
前記医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、
被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、
前記医療器具に対する操作者による操作内容を検出する検出部と、
前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる第２の制御部と、
を備え、
前記第２の制御部は、前記検出部が検出した前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する、
手術トレーニングシステム。
（付記１８）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部を備える医療情報管理サーバが実行する画像送信方法であって、
クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する、
画像送信方法。
（付記１９）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、を備える手術トレーニング装置が実行する表示方法であって、
前記医療器具に対する操作者による操作内容を検出し、
前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる、かつ、前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する、
表示方法。
（付記２０）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部を備える医療情報管理サーバが実行するプログラムであって、
クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信させる、
プログラム。
（付記２１）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、を備える手術トレーニング装置に実行させるプログラムであって、
前記医療器具に対する操作者による操作内容を検出させ、
前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる、かつ、前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御させる、
プログラム。
（付記１）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部と、
クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する制御部と、
を備える、
医療情報管理サーバ。
（付記２）
（付記１）に記載の医療情報管理サーバであって、
被検体の術中に撮像された術中動画データと、前記被検体に対して予めＣＴ装置またはＭＲＩ装置によって撮像された２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記シミュレーションデータを生成する生成部をさらに備える、
医療情報管理サーバ。
（付記３）
（付記２）に記載の医療情報管理サーバであって、
前記術中動画データと、前記２次元画像データおよび３次元データの少なくとも一方と、に基づいて、前記術中動画データに写る前記被検体の臓器および位置を推定する推論部をさらに備え、
前記生成部は、
前記推論部の推定結果に基づいて、前記術中動画データおよび前記２次元画像データおよび３次元データの少なくとも一方の各々に含まれる臓器の位置合わせを行って前記シミュレーションデータを生成する、
医療情報管理サーバ。
（付記４）
（付記３）に記載の医療情報管理サーバであって、
前記術中動画データは、
マルチスペクトル光源によってマルチスペクトル光が前記被検体に照射され、該被検体からの戻り光を受光することによって、少なくとも生体組織毎の反射周波数を含むスペクトル画像データを含み、
前記推論部は、
前記スペクトル画像データに含まれる前記生体組織毎の反射周波数を用いて少なくとも前記生体組織の種別および位置を推定する、
医療情報管理サーバ。
（付記５）
（付記１）～（付記４）のいずれか１つに記載の医療情報管理サーバであって、
前記記録部は、
前記複数のシミュレーションデータに、前記複数のシミュレーションデータの各々を執刀した複数の術者に関する複数の術者情報をさらに対応付けて記録し、
前記制御部は、
前記クライアント側で前記複数の術者情報のいずれか１つが選択された場合、選択された前記術者情報に応じた前記複数のシミュレーションデータを前記クライアント側へ送信する、
医療情報管理サーバ。
（付記６）
（付記１）～（付記５）のいずれか１つに記載の医療情報管理サーバであって、
前記記録部は、
前記複数のシミュレーションデータに、前記複数のシミュレーションデータの各々において使用された複数の医療器具に関する複数の医療器具情報をさらに対応付けて記録し、
前記制御部は、
前記シミュレーションデータを前記クライアント側へ送信する場合、該シミュレーションデータに対応付けられた前記医療器具情報を併せて前記クライアント側へ送信する、
医療情報管理サーバ。
（付記７）
（付記６）に記載の医療情報管理サーバであって、
前記制御部は、
前記クライアント側で前記複数の医療器具情報のいずれか１つ以上が選択された場合、選択された前記医療器具情報を前記クライアント側へ送信する、
医療情報管理サーバ。
（付記８）
（付記１）～（付記７）のいずれか１つに記載の医療情報管理サーバであって、
前記制御部は、
前記シミュレーションデータを前記クライアント側へ送信した場合、前記クライアント側を操作する操作者の識別情報に基づいて、前記操作者に対して課金を行う、
医療情報管理サーバ。
（付記９）
（付記８）に記載の医療情報管理サーバであって、
前記制御部は、
前記識別情報に対応付けられたレベルに基づいて、前記クライアント側で選択可能な前記手術手技に関する手術手技情報を前記クライアント側へ送信する、
医療情報管理サーバ。
（付記１０）
（付記９）に記載の医療情報管理サーバであって、
前記制御部は、
前記識別情報に基づいて、前記操作者が前記シミュレーションデータを用いて仮想的にトレーニングを行った回数に対して点数を付与する、
医療情報管理サーバ。
（付記１１）
（付記８）～（付記１０）のいずれか１つに記載の医療情報管理サーバであって、
前記記録部は、
前記複数のシミュレーションデータの各々のレベルをさらに対応付けて記録する、
医療情報管理サーバ。
（付記１２）
複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、
１つ以上の医療器具と、
前記医療器具に対する操作者による操作内容を検出する検出部と、
前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる制御部と、
を備え、
前記制御部は、前記検出部が検出した前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する、
手術トレーニング装置。
（付記１３）
（付記１２）に記載の手術トレーニング装置であって、
前記制御部は、
前記表示部が表示する前記シミュレーション動画を停止する停止信号が入力された場合において、前記検出部が前記操作内容を検出したとき、前記操作内容に基づいて、前記シミュレーション動画の視点を変更する、
手術トレーニング装置。
（付記１４）
（付記１３）に記載の手術トレーニング装置であって、
前記制御部は、
前記表示部に前記複数の手術手技の各々に関する複数の手術手技情報を表示させ、かつ、前記複数の手術手技情報のいずれか１つ以上が選択された場合、選択された前記手術手技情報に対応する前記シミュレーションデータを送信することを前記医療情報管理サーバへ要求する、
手術トレーニング装置。
（付記１５）
（付記１４）に記載の手術トレーニング装置であって、
前記操作者の識別情報の入力を受け付ける入力部をさらに備え、
前記制御部は、
前記識別情報を前記医療情報管理サーバへ送信する、
手術トレーニング装置。
（付記１６）
（付記１２）～（付記１５）のいずれか１つに記載の手術トレーニング装置であって、
前記制御部は、
前記医療器具に関する医療器具情報を前記医療情報管理サーバへ送信する、
手術トレーニング装置。
（付記１７）
医療情報管理サーバと、
ネットワークを経由して前記医療情報管理サーバと通信可能な手術トレーニング装置と、
を備え、
前記医療情報管理サーバは、
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部と、
クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する第１の制御部と、
を備え、
前記手術トレーニング装置は、
前記医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、
被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、
前記医療器具に対する操作者による操作内容を検出する検出部と、
前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる第２の制御部と、
を備え、
前記第２の制御部は、前記検出部が検出した前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する、
手術トレーニングシステム。
（付記１８）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部を備える医療情報管理サーバが実行する画像送信方法であって、
クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信する、
画像送信方法。
（付記１９）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、を備える手術トレーニング装置が実行する表示方法であって、
前記医療器具に対する操作者による操作内容を検出し、
前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる、かつ、前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御する、
表示方法。
（付記２０）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する記録部を備える医療情報管理サーバが実行するプログラムであって、
クライアント側で前記複数の手術手技のいずれか１つが選択された場合、選択された前記手術手技に対応するシミュレーションデータを前記クライアント側へ送信させる、
プログラム。
（付記２１）
少なくとも複数の手術手技と、少なくとも生体組織に関するデータを含む複数のシミュレーションデータと、を対応付けて記録する医療情報管理サーバから送信された前記シミュレーションデータに基づくシミュレーション動画を表示可能な表示部と、被検体を模倣した模型に対して処置可能な１つ以上の医療器具と、を備える手術トレーニング装置に実行させるプログラムであって、
前記医療器具に対する操作者による操作内容を検出させ、
前記シミュレーション動画上に前記医療器具に関する医療器具画像を前記表示部に表示させる、かつ、前記操作内容に基づいて、前記医療器具画像およびシミュレーション動画の表示態様を制御させる、
プログラム。
【符号の説明】
【0124】
１ 手術トレーニングシステム
２ 手術トレーニング装置
１０，２０ トロッカー
３０，４０ 医療器具
３１ 第１の検出部
３２ 第２の検出部
３３，６４，７２ 記録部
３４，７１ 通信部
５０ 表示装置
６０ 制御装置
６１ １の通信部
６２ 画像処理部
６３ 入力部
６５ 第２の通信部
６６ 制御部
７０ 医療情報管理サーバ
７１ 通信部
７３ 生成部
７４ 推論部
７５ シミュレーションデータ記録部
７６ 画像データ記録部
７７ ユーザデータ記録部
７８ 医療器具データ記録部
７９ サーバ制御部
８０ 病院管理サーバ
８３ 入力部
９０ ネットワーク
６４１ プログラム記録部
７２１ プログラム記録部
７９１ 判定部
７９２ 課金部
７９３ 点数付与部
Ｏ１ 模型
Ｕ１ 操作者
２ 手術トレーニング装置
１０，２０ トロッカー
３０，４０ 医療器具
３１ 第１の検出部
３２ 第２の検出部
３３，６４，７２ 記録部
３４，７１ 通信部
５０ 表示装置
６０ 制御装置
６１ １の通信部
６２ 画像処理部
６３ 入力部
６５ 第２の通信部
６６ 制御部
７０ 医療情報管理サーバ
７１ 通信部
７３ 生成部
７４ 推論部
７５ シミュレーションデータ記録部
７６ 画像データ記録部
７７ ユーザデータ記録部
７８ 医療器具データ記録部
７９ サーバ制御部
８０ 病院管理サーバ
８３ 入力部
９０ ネットワーク
６４１ プログラム記録部
７２１ プログラム記録部
７９１ 判定部
７９２ 課金部
７９３ 点数付与部
Ｏ１ 模型
Ｕ１ 操作者
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】