ホーム > 特許ランキング > シスメックス株式会社
▶ シスメックス株式会社の特許一覧 ▶ 株式会社メディカロイドの特許一覧
特開2022-164927手術支援ロボットの遠隔支援方法、および遠隔支援システム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022164927
(43)【公開日】2022-10-27
(54)【発明の名称】手術支援ロボットの遠隔支援方法、および遠隔支援システム
(51)【国際特許分類】
G16H 40/67 20180101AFI20221020BHJP
【ＦＩ】
G16H40/67
【審査請求】有
【請求項の数】17
【出願形態】ＯＬ
(21)【出願番号】P 2022140836
(22)【出願日】2022-09-05
(62)【分割の表示】P 2018190527の分割
【原出願日】2018-10-06
(71)【出願人】
【識別番号】390014960
【氏名又は名称】シスメックス株式会社
(71)【出願人】
【識別番号】514063179
【氏名又は名称】株式会社メディカロイド
(74)【代理人】
【識別番号】110000338
【氏名又は名称】特許業務法人ＨＡＲＡＫＥＮＺＯ ＷＯＲＬＤ ＰＡＴＥＮＴ ＆ ＴＲＡＤＥＭＡＲＫ
(72)【発明者】
【氏名】大橋 政尚
(72)【発明者】
【氏名】須藤 武彦
(72)【発明者】
【氏名】伊藤 翔子
(72)【発明者】
【氏名】井田 城太
(72)【発明者】
【氏名】福田 泰之
(57)【要約】
【課題】手術支援ロボットを用いた手術等を行う現場に対し、短時間でトラブルの詳細を把握することができ迅速に且つ適切な遠隔支援を行う。
【解決手段】手術支援ロボット（２０）および手術支援ロボット（２０）が設置された居室内を撮影するカメラ（２４）の少なくとも１つが撮影した画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理を施し（Ｓ２１４）、画像処理が施された画像を手術支援ロボット（２０）の遠隔支援業務を行うためのサーバ装置（４０）に送信する。
【選択図】図６
【解決手段】手術支援ロボット（２０）および手術支援ロボット（２０）が設置された居室内を撮影するカメラ（２４）の少なくとも１つが撮影した画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理を施し（Ｓ２１４）、画像処理が施された画像を手術支援ロボット（２０）の遠隔支援業務を行うためのサーバ装置（４０）に送信する。
【選択図】図６
【特許請求の範囲】
【請求項1】
手術支援ロボットおよび前記手術支援ロボットが設置された居室内を撮影するカメラの少なくとも１つが撮影した画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理を施し、
前記画像処理が施された画像を前記手術支援ロボットの遠隔支援業務を行うためのサーバ装置に送信する、手術支援ロボットの遠隔支援方法。
前記画像処理が施された画像を前記手術支援ロボットの遠隔支援業務を行うためのサーバ装置に送信する、手術支援ロボットの遠隔支援方法。
【請求項2】
前記画像に前記特定情報が映っているか否かを検査し、前記特定情報が映っている場合は、前記画像処理を施す、請求項１に記載の手術支援ロボットの遠隔支援方法。
【請求項3】
所定のイベントが検出されると、前記サーバ装置と、前記手術支援ロボットおよび前記カメラが設置された施設で使用される第１端末装置の少なくとも１つとの間、および、前記サーバ装置と前記手術支援ロボットの遠隔支援業務を行うための第２端末装置との間に、双方向通信を確立する、請求項１または２に記載の手術支援ロボットの遠隔支援方法。
【請求項4】
前記画像の画像解析または音声解析に基づく異常事態の検出に基づき、前記所定のイベントを検出する、請求項３に記載の手術支援ロボットの遠隔支援方法。
【請求項5】
前記サーバ装置にて、ユーザの操作により前記手術支援ロボット、前記第１端末装置、および前記第２端末装置の少なくとも１つから送信された、双方向通信を要求するリクエストを受信することにより、前記所定のイベントを検出する、請求項３に記載の手術支援ロボットの遠隔支援方法。
【請求項6】
前記双方向通信が確立したときに、前記サーバ装置にて受信した前記画像を、少なくとも前記第２端末装置に配信する、請求項３から５のいずれか１項に記載の手術支援ロボットの遠隔支援方法。
【請求項7】
前記双方向通信が確立したときに、前記カメラにて撮影され前記サーバ装置にて受信した画像、および、前記手術支援ロボットに取り付けられた内視鏡にて撮影され前記サーバ装置にて受信した画像の両方を、少なくとも前記第２端末装置に配信する、請求項３から５のいずれか１項に記載の手術支援ロボットの遠隔支援方法。
【請求項8】
前記双方向通信が確立した前記第２端末装置に前記画像を配信している場合において、当該第２端末装置にて当該画像に重畳表示させるデータが入力されたとき、当該データを前記手術支援ロボットおよび前記第１端末装置の少なくとも１つへ配信する、請求項３から７のいずれか１項に記載の手術支援ロボットの遠隔支援方法。
【請求項9】
手術支援ロボットの遠隔支援業務を行うためのサーバ装置と、
前記手術支援ロボットおよび前記手術支援ロボットが設置された居室内を撮影するカメラの少なくとも１つが撮影した画像を前記サーバ装置に送信するとともに前記サーバ装置からの情報を受信するために前記サーバ装置と通信する通信制御装置と、を備え、
前記通信制御装置は、前記画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理を施し、前記画像処理が施された画像を前記サーバ装置に送信するように構成されている、遠隔支援システム。
前記手術支援ロボットおよび前記手術支援ロボットが設置された居室内を撮影するカメラの少なくとも１つが撮影した画像を前記サーバ装置に送信するとともに前記サーバ装置からの情報を受信するために前記サーバ装置と通信する通信制御装置と、を備え、
前記通信制御装置は、前記画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理を施し、前記画像処理が施された画像を前記サーバ装置に送信するように構成されている、遠隔支援システム。
【請求項10】
前記通信制御装置は、前記画像に前記特定情報が映っているか否かを検査し、前記特定情報が映っている場合は、前記画像処理を施すように構成されている、請求項９に記載の遠隔支援システム。
【請求項11】
前記サーバ装置は、所定のイベントが検出されると、前記手術支援ロボットおよび前記カメラが設置された施設で使用される第１端末装置の少なくとも１つと、前記手術支援ロボットの遠隔支援業務を行うための第２端末装置との間に、双方向通信を確立する処理を行う、請求項９または１０に記載の遠隔支援システム。
【請求項12】
前記サーバ装置は、前記画像の画像解析または音声解析に基づく異常事態の検出に基づき、前記所定のイベントを検出するように構成されている、請求項１１に記載の遠隔支援システム。
【請求項13】
前記サーバ装置にて、ユーザの操作により前記手術支援ロボット、前記第１端末装置、および前記第２端末装置の少なくとも１つから送信された、双方向通信を要求するリクエストを受信することにより、前記所定のイベントを検出する、ように構成されている、請求項１１に記載の遠隔支援システム。
【請求項14】
前記サーバ装置は、前記双方向通信が確立したときに、前記サーバ装置にて受信した前記画像を、少なくとも前記第２端末装置に配信するように構成されている、請求項１１から１３のいずれか１項に記載の遠隔支援システム。
【請求項15】
前記サーバ装置は、前記双方向通信が確立したときに、前記カメラにて撮影され前記サーバ装置にて受信した画像、および、前記手術支援ロボットに取り付けられた内視鏡にて撮影され前記サーバ装置にて受信した画像の両方を、少なくとも前記第２端末装置に配信するように構成されている、請求項１１から１３のいずれか１項に記載の遠隔支援システム。
【請求項16】
前記サーバ装置は、前記双方向通信が確立した前記第２端末装置に前記画像を配信している場合において、当該第２端末装置にて当該画像に重畳表示させるデータが入力されたとき、当該データを前記手術支援ロボットおよび前記第１端末装置の少なくとも１つへ配信するように構成されている、請求項１１から１５のいずれか１項に記載の遠隔支援システム。
【請求項17】
前記第１端末装置および前記第２端末装置は、パーソナルコンピュータ、タブレット端末、およびスマートフォンのいずれかである、請求項１１から１６のいずれか１項に記載の遠隔支援システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、手術支援ロボットの遠隔支援方法等に関する。
【背景技術】
【0002】
近年、腹腔鏡などの手術において手術支援ロボットが用いられており、手術支援ロボットに対する緻密なサポートを行う必要性が増している。特許文献１には、予防保守のために医療用ロボットを監視する方法が開示されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】米国特許出願公開第２０１２／０３３０６１３号明細書
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献１に開示された方法を含む従来手法による手術支援ロボットに対する遠隔支援では、手術支援ロボットの稼働状況に関するログデータ（テキストデータ）をリモートサーバにて収集し、解析する。手術支援ロボットにトラブルが発生した場合、コールセンタの担当者は医療機関から電話連絡を受け、手術支援ロボットのログデータの解析結果を見ながらトラブルの詳細を把握するようにしている。しかしながら、トラブルの詳細の把握ができない場合があり、その場合にはサービス員Ｓが現場（例えば手術支援ロボットが設置されている手術室）に立ち会わなければならないことがある。この場合、トラブルの発生から解消までに時間を要することから、迅速性の観点で問題があった。
【0005】
本発明は上記の問題点に鑑みてなされたものであり、その目的は、手術支援ロボットを用いた手術等を行う現場に対し、短時間でトラブルの詳細を把握することができ迅速に且つ適切な遠隔支援を行うことができる遠隔支援方法および遠隔支援システムを提供することにある。
【課題を解決するための手段】
【0006】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、手術支援ロボット（２０）および手術支援ロボット（２０）が設置された居室内を撮影するカメラ（２４）の少なくとも１つが撮影した画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理を施し、画像処理が施された画像を手術支援ロボット（２０）の遠隔支援業務を行うためのサーバ装置（４０）に送信する。
【0007】
また、本発明の別の態様に係る遠隔支援システムは、手術支援ロボット（２０）の遠隔支援業務を行うためのサーバ装置（４０）と、手術支援ロボット（２０）および手術支援ロボット（２０）が設置された居室内を撮影するカメラ（２４）の少なくとも１つが撮影した画像をサーバ装置（４０）に送信するとともにサーバ装置（４０）からの情報を受信するためにサーバ装置（４０）と通信する通信制御装置（２６１）と、を備え、通信制御装置（２６１）は、画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理を施し、画像処理が施された画像をサーバ装置（４０）に送信するように構成されている。
【発明の効果】
【0008】
本発明によれば、手術支援ロボットを用いた手術等を行う現場に対し、短時間でトラブルの詳細を把握することができ迅速に且つ適切な遠隔支援を行うことができる。
【図面の簡単な説明】
【0009】
【図1】実施形態１に係る遠隔支援方法を実現する遠隔支援システムを含む構成を示す図である。
【図2】実施形態１に係る遠隔支援方法において双方向通信が可能となるまでの処理の流れの概要を示す図である。
【図3】手術支援ロボットを構成する、患者側装置、遠隔操作装置、画像処理装置、およびシステム連携装置の概略を示す図である。
【図4】通信制御装置の概略構成を示す図である。
【図5】データ取得部が行う処理の概要を示す図である。
【図6】データ加工部が行う処理の概要を示す図である。
【図7】データ送信部が行う処理の概要を示す図である。
【図8】サーバ装置の概略構成を示す図である。
【図9】データ格納部が行う処理の概要を示す図である。
【図10】通信制御部による双方向通信の確立処理の概要を示す図である。
【図11】ネットワークカメラにて撮影した画像に異常事態を検出したことにより双方向通信が確立された端末装置にて入力されたデータが配信される処理の流れの一例を示す図である。
【図12】端末装置間に双方向通信が確立された状態で画像の配信が行われる処理の流れの一例を示す図である。
【図13】データ提供部が行う処理の概要を示す図である。
【図14】データ解析部が行う処理の概要を示す図である。
【図15】コールセンタの端末装置の表示画面の一例を示す模式図である。
【図16】医療関連施設の端末装置の表示画面の一例を示す模式図である。
【図18】実施形態２に係る遠隔支援方法を実現する構成要素の概略構成を示す図である。
【図19】実施形態３に係る手術支援ロボットの概略を示す図である。
【図20】実施形態４に係る手術支援ロボットの概略を示す図である。
【発明を実施するための形態】
【0010】
【0011】
図１および図２を参照しながら、本実施形態について説明する。手術支援ロボット２０を用いる手術やトレーニングが行われる病院や医療研究機関等である医療関連施設２に対して遠隔支援業務を行うコールセンタ４の従業員（以下では「サービス員Ｓ」と称する）が、医療関連施設２の医師や医療従事者（以下では「医療スタッフＭ」と称する）を迅速に且つ適切に遠隔支援する。
【0012】
コールセンタ４は、複数の医療関連施設２に対する遠隔支援業務を行うことを想定しており、図１では、複数の医療関連施設２の各々を医療関連施設２Ａ、医療関連施設２Ｂ、・・・と表記している。医療関連施設２Ａ、医療関連施設２Ｂ、・・・、を区別しないときは単に医療関連施設２と称する。
【0013】
本実施形態の主な特徴は、通常時においては、医療関連施設２の手術支援ロボット２０の稼働情報（後述する）およびネットワークカメラ２４が撮影した画像の少なくとも１つがコールセンタ４のサーバ装置４０へ送信されるという一方向の通信のみが行われているところ、所定のイベント（後述する）が発生したときは、コールセンタ４の端末装置２５と、医療関連施設２の装置（手術支援ロボット２０、端末装置２５、ネットワークカメラ２４の少なくとも１つ）との間で双方向通信が可能となることにある。
【0014】
図２を参照しながら、双方向通信が可能となるまでの処理の流れについて説明する。まず、通常時においては、手術支援ロボット２０の稼働情報は通信制御装置２６１を介してサーバ装置４０へ送信され、記憶装置４１に格納される（Ｓ１１～Ｓ１３）。同様に、ネットワークカメラ２４が撮影した画像は通信制御装置２６１を介してサーバ装置４０へ送信され、記憶装置４１に格納される（Ｓ１４～Ｓ１６）。
【0015】
次に、イベントの一例として、手術支援ロボット２０にて医療スタッフＭから双方向通信を要求する操作を受け付けると（Ｓ１７）、双方向通信の確立を要求するリクエストが手術支援ロボット２０から通信制御装置２６１を介してサーバ装置４０へ送信される（Ｓ１８～Ｓ１９）。サーバ装置４０にてリクエストが受信されると（Ｓ２０）、サーバ装置４０からコールセンタ４の端末装置４２に対して、双方向通信の可否についての問合せが送信される（Ｓ２１）。端末装置４２では、受信した問合せをモニタに出力する（Ｓ２２）。端末装置４２を使用するサービス員Ｓから問合せに対する応答が入力されると、端末装置４２はサーバ装置４０へ応答を送信する（Ｓ２３～Ｓ２４）。双方向通信を許可する応答であった場合（Ｓ２５にてＹＥＳ）、サーバ装置４０は、リクエストを送信した手術支援ロボット２０に対して、双方向通信が許可された旨の通知（以下では「許可通知」と称する）を送信する（Ｓ２６～Ｓ２８）。このように、双方向通信の確立を要求するリクエストを送信し（Ｓ１８）、その応答として許可通知を受信した段階で（Ｓ２８）、双方向通信が確立される。
【0016】
双方向通信が確立された以後は、端末装置４２にて入力されサーバ装置４０に送信されたデータ（例えば、音声、画像、およびテキストの少なくとも１つ）が、サーバ装置４０および通信制御装置２６１を介して手術支援ロボット２０に送信される（Ｓ２９～Ｓ３２）。また、双方向通信が確立されている期間にサーバ装置４０が受信したデータは、双方向通信時のログとして、記憶装置４１に格納される（Ｓ３３）。
【0017】
なお、図２では、手術支援ロボット２０にて双方向通信を要求する操作を受け付け、その結果、手術支援ロボット２０と端末装置４２との間で双方向通信が確立される例を示したが、端末装置２５にて双方向通信を要求する操作を受け付けた場合は、同様の処理を経て、端末装置２５と端末装置４２との間で双方向通信が確立される。
【0018】
【0019】
〔医療関連施設２〕
医療関連施設２内にはＬＡＮ（local area network）（以下では「施設内ＬＡＮ」と称する）が配設されている。施設内ＬＡＮは外部ネットワーク３と通信可能に接続されている。施設内ＬＡＮには、手術支援ロボット２０、端末装置２５、ネットワークカメラ２４、および通信制御装置２６１が通信可能に接続されている。なお、通信制御装置２６１はネットワークサービスシステム２６を構成する主要装置である。
医療関連施設２内にはＬＡＮ（local area network）（以下では「施設内ＬＡＮ」と称する）が配設されている。施設内ＬＡＮは外部ネットワーク３と通信可能に接続されている。施設内ＬＡＮには、手術支援ロボット２０、端末装置２５、ネットワークカメラ２４、および通信制御装置２６１が通信可能に接続されている。なお、通信制御装置２６１はネットワークサービスシステム２６を構成する主要装置である。
【0020】
〔手術支援ロボット２０〕
手術支援ロボット２０は医療関連施設２の手術室（居室）内に設置される。手術支援ロボット２０は、医療器具が取り付けられた患者側装置２１、患者側装置２１に取り付けられた医療器具を遠隔操作する遠隔操作装置２２、および、医療器具の一つである内視鏡２０１ｂが撮影した画像を処理する画像処理装置２３を備えるとともに、患者側装置２１、遠隔操作装置２２、および画像処理装置２３と、通信制御装置２６１との通信を仲介するシステム連携装置２７を備えている。
手術支援ロボット２０は医療関連施設２の手術室（居室）内に設置される。手術支援ロボット２０は、医療器具が取り付けられた患者側装置２１、患者側装置２１に取り付けられた医療器具を遠隔操作する遠隔操作装置２２、および、医療器具の一つである内視鏡２０１ｂが撮影した画像を処理する画像処理装置２３を備えるとともに、患者側装置２１、遠隔操作装置２２、および画像処理装置２３と、通信制御装置２６１との通信を仲介するシステム連携装置２７を備えている。
【0021】
患者側装置２１によって実行されるべき動作指令が医療スタッフＭにより遠隔操作装置２２に入力されると、遠隔操作装置２２は、患者側装置２１のコントローラ２０６に動作指令を送信する。コントローラ２０６は患者側装置２１の動作制御を行うコンピュータである。そして、患者側装置２１は、遠隔操作装置２２から送信された動作指令に応答して、複数の手術マニピュレータ２０１にそれぞれ把持された手術器具および内視鏡等の医療器具を操作する。これにより、低侵襲手術が行なわれる。
【0022】
患者側装置２１は、患者Ｐが横たわる手術台３００の傍らに配置される。患者側装置２１が有する手術マニピュレータ２０１のうちの１つ（第１マニピュレータ）が内視鏡２０１ｂを把持し、その他の手術マニピュレータ２０１（第２マニピュレータ）が手術器具であるインストゥルメント２０１ａを把持する。インストゥルメント２０１ａを把持する手術マニピュレータ２０１がインストゥルメントアーム２０１Ａとして機能し、内視鏡２０１ｂを把持する手術マニピュレータ２０１がカメラアーム２０１Ｂとして機能する。各インストゥルメントアーム２０１Ａおよびカメラアーム２０１Ｂは、プラットホーム２０３に支持されている。複数の手術マニピュレータ２０１は複数の関節を有し、それぞれの関節には、サーボモータを含む駆動部と、エンコーダ等の位置検出器とが設けられている。手術マニピュレータ２０１は、コントローラ２０６を介して与えられた駆動信号により手術マニピュレータ２０１に取り付けられた医療器具が所望の動作を行うように制御されるように構成されている。
【0023】
プラットホーム２０３は、手術支援ロボット２０が設置される居室（典型的には手術室）の床に載置されたポジショナ２０２に支持されている。ポジショナ２０２は、患者Ｐが横たわる手術台３００に対して位置決めされた後、プラットホーム２０３および複数の手術マニピュレータ２０１を、手術準備を行う位置に移動させるように構成されている。患者側装置２１に設けられたタッチパネル２０７から入力することによりポジショナ２０２、プラットホーム２０３および手術マニピュレータ２０１の移動が行われる。
【0024】
インストゥルメントアーム２０１Ａには、その先端部にインストゥルメント２０１ａが着脱可能に取り付けられる。インストゥルメント２０１ａは、インストゥルメントアーム２０１Ａに取り付けられるハウジングと細長形状のシャフトの先端部に設けられたエンドエフェクタを備えている。エンドエフェクタとして、例えば、把持鉗子、シザーズ、フック、高周波ナイフ、スネアワイヤ、クランプ、ステイプラーが挙げられるが、これらに限られるものではなく、各種の処置具を適用することができる。インストゥルメントアーム２０１Ａは、患者Ｐの体表に留置したトロカーを介して患者Ｐの体内に導入され、インストゥルメント２０１ａのエンドエフェクタが手術部位の近傍に配置される。
【0025】
カメラアーム２０１Ｂには、その先端部に内視鏡２０１ｂが着脱可能に取り付けられる。カメラアーム２０１Ｂは、患者Ｐの体表に留置したトロカーを介して患者Ｐの体内に導入され、これにより内視鏡２０１ｂが手術部位の近傍に配置され、患者Ｐの体腔内を撮影する。内視鏡２０１ｂが撮影した画像は、画像処理装置２３により画像処理が施されたうえで、遠隔操作装置２２のモニタ２２１に表示される。医療スタッフＭはモニタ２２１に表示される画像を見ながら動作指令を遠隔操作装置２２に入力する。
【0026】
また、内視鏡２０１ｂが撮影した画像は、画像処理装置２３により画像処理が施されたうえで、システム連携装置２７から通信制御装置２６１を介してサーバ装置４０に送信される。後述するとおり、サーバ装置４０に送信するにあたり、個人情報保護の観点から、通信制御装置２６１にて画像領域の一部をマスクする画像処理を施したり、必要に応じて送信を制限できることが好ましい。
【0027】
また、内視鏡２０１ｂが撮影した画像は、画像処理装置２３により画像処理が施されたうえで、画像処理装置２３に接続されたモニタ２３１に表示されてもよい。これにより、遠隔操作装置２２を操作していない医療スタッフＭも内視鏡２０１ｂが撮影した画像を見ることができる。
【0028】
遠隔操作装置２２は、手術マニピュレータ２０１に取り付けられた医療器具を医療スタッフＭが操作するための装置である。遠隔操作装置２２は、操作ハンドル２３３と、操作ペダル部２３４と、モニタ２２１が設けられている。操作ハンドル２３３は、手術マニピュレータ２０１が支持する医療器具を医療スタッフＭが遠隔操作するために設けられている。操作ハンドル２３３は、医療スタッフＭの右手で操作される右手用ハンドルおよび左手で操作される左手用ハンドルから構成される。例えば、右手用ハンドルでインストゥルメントアーム２０１Ａのインストゥルメント２０１ａを操作し、左手用ハンドルで別のインストゥルメントアーム２０１Ａのインストゥルメント２０１ａを操作することができる。操作ペダル部２３４には複数の操作ペダルが設けられており、右手ハンドルで操作されているインストゥルメント２０１ａの機能を実行する操作ペダル、左手ハンドルで操作されているインストゥルメント２０１ａの機能を実行する操作ペダル、カメラアーム２０１Ｂを操作ハンドルで操作するための操作ペダルなどが設けられている。すなわち、遠隔操作装置２２は、医療スタッフＭによって操作ハンドル２３３および操作ペダル部２３４を用いて入力された、インストゥルメント２０１ａおよび内視鏡２０１ｂによって実行されるべき動作指令を、患者側装置２１のコントローラ２０６へ送信可能に構成されている。
【0029】
システム連携装置２７はコンピュータであり、コンピュータが通常有する機能を具備している。システム連携装置２７は施設内ＬＡＮと通信可能に接続している。システム連携装置２７は、患者側装置２１、遠隔操作装置２２、および画像処理装置２３と、通信制御装置２６１との通信を仲介する。システム連携装置２７は、ＡＰＩ（application program interface）を搭載しており、このＡＰＩを用いることにより、通信制御装置２６１からの要求に応じて、手術支援ロボット２０の稼働に関する情報（以下では「稼働情報」と称する）を、患者側装置２１、遠隔操作装置２２、および画像処理装置２３から取得するとともに、取得した稼働情報を通信制御装置２６１に送信する。システム連携装置２７が稼働情報を通信制御装置２６１に送信するタイミングは、取得後直ちに（リアルタイムに）送信してもよいし、ある程度のデータ量が蓄積されてから送信してもよい。稼働情報の典型例を次の（１）～（１３）に示す。
【0030】
（１）発生したエラーに関する情報（エラーコード、発生部位、発生日時など）
（２）遠隔操作装置２２に入力された動作指令に関する情報
（３）遠隔操作装置２２に取り付けられた各種センサの出力値
（４）患者側装置２１に取り付けられた各種センサの出力値
（５）患者側装置２１の各駆動部の軸値および電流値
（６）内視鏡２０１ｂにて撮影した画像
（７）画像処理装置２３で処理した画像
（８）システム起動時に行われる動作チェックの結果
（９）搭載されているソフトウェアのバージョン情報
（１０）オペレーションモード（術式／部位）
（１１）ステータスを示す情報（発光部の点灯状況）
（１２）消耗品に関する情報、およびその動作回数
（１３）患者側装置２１および遠隔操作装置２２を移動させるための電動アシスト機器の充電に関する情報
上記（１）～（１３）は例示であり、稼働情報がこれらに限られるものではない。
（２）遠隔操作装置２２に入力された動作指令に関する情報
（３）遠隔操作装置２２に取り付けられた各種センサの出力値
（４）患者側装置２１に取り付けられた各種センサの出力値
（５）患者側装置２１の各駆動部の軸値および電流値
（６）内視鏡２０１ｂにて撮影した画像
（７）画像処理装置２３で処理した画像
（８）システム起動時に行われる動作チェックの結果
（９）搭載されているソフトウェアのバージョン情報
（１０）オペレーションモード（術式／部位）
（１１）ステータスを示す情報（発光部の点灯状況）
（１２）消耗品に関する情報、およびその動作回数
（１３）患者側装置２１および遠隔操作装置２２を移動させるための電動アシスト機器の充電に関する情報
上記（１）～（１３）は例示であり、稼働情報がこれらに限られるものではない。
【0031】
なお、サーバ装置４０にて所定のイベントが検出されていない段階では、手術支援ロボット２０からサーバ装置４０に稼働情報を送信するにあたり、手術支援ロボット２０とサーバ装置４０との間は単方向通信が確立されている。
【0032】
〔ネットワークサービスシステム２６〕
ネットワークサービスシステム２６は、医療関連施設２内の装置に対して各種ネットワークサービスを提供する。そのために、ネットワークサービスシステム２６には各種のＡＰＩが用意されている。
ネットワークサービスシステム２６は、医療関連施設２内の装置に対して各種ネットワークサービスを提供する。そのために、ネットワークサービスシステム２６には各種のＡＰＩが用意されている。
【0033】
ネットワークサービスシステム２６は通信制御装置２６１を備えている。通信制御装置２６１はコンピュータであり、コンピュータが通常有する機能を具備している。図４に示すとおり、通信制御装置２６１は、ＣＰＵ（central processing unit）である制御部２６２を備えており、制御部２６２で動作するソフトウェアにて実現される機能として、データ取得部２６３、データ加工部２６４、およびデータ送信部２６５を含んでいる。
【0034】
データ取得部２６３は、手術支援ロボット２０の稼働情報を取得する。この機能は、システム連携装置２７に搭載されているＡＰＩを呼び出すことにより実現する。また、データ取得部２６３は、ネットワークカメラ２４が撮影した画像を取得する。
【0035】
データ取得部２６３が行う処理の概要について図５を参照しながら説明する。データ取得部２６３は、所定時間が経過する毎に（Ｓ１１１にてＹＥＳ）、システム連携装置２７に搭載されているデータ取得用ＡＰＩを呼び出す（Ｓ１１２）。このＡＰＩを介して、データ取得部２６３は手術支援ロボット２０の稼働情報を取得する（Ｓ１１３）。
【0036】
データ加工部２６４は次に示す機能を有している。
【0037】
（機能１）個人情報のマスク
ネットワークカメラ２４が撮影した画像や内視鏡２０１ｂが撮影した画像を通信制御装置２６１を介して配信する場合において、人物を特定できる情報（人物の顔など）（以下では「特定可能情報」と称する）が映っている場合には、個人情報保護の観点から、特定可能情報をマスクする画像処理（モザイクをかける等により視覚的に不明瞭化する処理）を施すことが望ましい。そこで、データ加工部２６４は、配信する画像に特定可能情報が映っているか否かを検査し、特定可能情報が映っている場合は、画像に対して特定可能情報をマスクする画像処理を施す。
ネットワークカメラ２４が撮影した画像や内視鏡２０１ｂが撮影した画像を通信制御装置２６１を介して配信する場合において、人物を特定できる情報（人物の顔など）（以下では「特定可能情報」と称する）が映っている場合には、個人情報保護の観点から、特定可能情報をマスクする画像処理（モザイクをかける等により視覚的に不明瞭化する処理）を施すことが望ましい。そこで、データ加工部２６４は、配信する画像に特定可能情報が映っているか否かを検査し、特定可能情報が映っている場合は、画像に対して特定可能情報をマスクする画像処理を施す。
【0038】
（機能２）フレームレートの調整
通信制御装置２６１を介してサーバ装置４０に配信する映像のデータサイズが、施設内ＬＡＮの回線速度に対して大きいほど映像配信に時間を要し、遅延の原因となる。そこで、データ加工部２６４は、配信する映像の秒間コマ数（フレームレート）を小さくするように調整する（つまりフレームを間引く）。具体的には、秒間コマ数を６コマとする。なお、データ加工部２６４は、施設内ＬＡＮおよび外部ネットワーク３の通信負荷を監視し、通信負荷に応じて映像の秒間コマ数を小さくするように調整してもよい。
通信制御装置２６１を介してサーバ装置４０に配信する映像のデータサイズが、施設内ＬＡＮの回線速度に対して大きいほど映像配信に時間を要し、遅延の原因となる。そこで、データ加工部２６４は、配信する映像の秒間コマ数（フレームレート）を小さくするように調整する（つまりフレームを間引く）。具体的には、秒間コマ数を６コマとする。なお、データ加工部２６４は、施設内ＬＡＮおよび外部ネットワーク３の通信負荷を監視し、通信負荷に応じて映像の秒間コマ数を小さくするように調整してもよい。
【0039】
（機能３）映像の解析、および解析結果の配信
ネットワークカメラ２４が撮影した映像を通信制御装置２６１を介してサーバ装置４０へ配信する場合において、施設内ＬＡＮに通信負荷がかかると、施設内ＬＡＮに接続する各種医療システムの動作に影響を与えるおそれがある。そこで、データ加工部２６４は、配信する映像に写る人の動きを解析する。そして、データ送信部２６５によるサーバ装置４０への送信対象は、解析結果として得られるテキストデータのみとする。これにより、映像を配信する場合と比べて施設内ＬＡＮの通信負荷を軽減することができる。ここで「人の動きの解析」とは、例えば、通信制御装置２６１に搭載されたＡＩ（artificial intelligence）が解析対象である映像に映る人の動きを骨格（棒状のモデル）に置き換え、その関節の動きを数値化することなどを指す。
ネットワークカメラ２４が撮影した映像を通信制御装置２６１を介してサーバ装置４０へ配信する場合において、施設内ＬＡＮに通信負荷がかかると、施設内ＬＡＮに接続する各種医療システムの動作に影響を与えるおそれがある。そこで、データ加工部２６４は、配信する映像に写る人の動きを解析する。そして、データ送信部２６５によるサーバ装置４０への送信対象は、解析結果として得られるテキストデータのみとする。これにより、映像を配信する場合と比べて施設内ＬＡＮの通信負荷を軽減することができる。ここで「人の動きの解析」とは、例えば、通信制御装置２６１に搭載されたＡＩ（artificial intelligence）が解析対象である映像に映る人の動きを骨格（棒状のモデル）に置き換え、その関節の動きを数値化することなどを指す。
【0040】
（機能４）各種センサの出力値などのテキストデータの加工（集約）
データ加工部２６４は、例えば、手術支援ロボット２０から１秒間隔で取得する各種センサの出力値などのテキストデータを、１時間単位の平均値や1日単位の平均値などに集約してもよい。これにより、データ送信部２６５によるサーバ装置４０への送信において、１回当たりの送信量および送信頻度が低減されるため、外部ネットワーク３の通信負荷を軽減することができる。
データ加工部２６４は、例えば、手術支援ロボット２０から１秒間隔で取得する各種センサの出力値などのテキストデータを、１時間単位の平均値や1日単位の平均値などに集約してもよい。これにより、データ送信部２６５によるサーバ装置４０への送信において、１回当たりの送信量および送信頻度が低減されるため、外部ネットワーク３の通信負荷を軽減することができる。
【0041】
データ加工部２６４が行う処理の概要について図６を参照しながら説明する。サーバ装置４０へ映像を配信する場合（Ｓ２１１にてＹＥＳ）、データ加工部２６４は、配信する映像のフレームレートを調整する（Ｓ２１２）。次に、データ加工部２６４は、配信する画像に特定可能情報が映っている場合（Ｓ２１３にてＹＥＳ）、画像に対して特定可能情報を不明瞭化する画像処理を施す（Ｓ２１４）。次に、データ加工部２６４は、配信する画像に人が写っている場合（Ｓ２１５にてＹＥＳ）、人の動きを解析する（Ｓ２１６）。次に、データ加工部２６４は、送信対象のデータを集約することが設定されている場合（Ｓ２１７にてＹＥＳ）、送信対象のデータを集約する（Ｓ２１８）。
【0042】
データ送信部２６５は、データ取得部２６３にて取得したデータ、および、データ加工部２６４にて加工したデータをサーバ装置４０へ送信する。さらに、データ送信部２６５は、データの送信を制限できるように構成されていてもよい。具体的には、映像に含まれる音声のみを送信しないようにしたり、映像および音声の両方を送信しないようにする。これにより不必要なデータ送信を避けることができる。
【0043】
データ送信部２６５が行う処理の概要について図７を参照しながら説明する。データ取得部２６３にてデータが取得された、または、データ加工部２６４にてデータが加工されたとき（Ｓ３１１にてＹＥＳ）、当該データが送信制限の対象でなければ（Ｓ３１２にてＮＯ）、そのままデータを送信する（Ｓ３１３）。一方、当該データが送信制限の対象であれば（Ｓ３１２にてＹＥＳ）、データの送信を制限する（Ｓ３１４）。
【0044】
〔端末装置２５〕
端末装置２５は、手術支援ロボット２０が設置された居室で医療スタッフＭが使用するコンピュータ端末である。端末装置２５の典型例は、パーソナルコンピュータ（personal computer）、タブレット端末、スマートフォン等である。端末装置２５は、他装置との通信機能、キーボード等のデータ入力機能、モニタ等のデータ表示機能、マイク等の音声入力機能、スピーカ等の音声出力機能等の、コンピュータ端末が通常備える機能を有している。
端末装置２５は、手術支援ロボット２０が設置された居室で医療スタッフＭが使用するコンピュータ端末である。端末装置２５の典型例は、パーソナルコンピュータ（personal computer）、タブレット端末、スマートフォン等である。端末装置２５は、他装置との通信機能、キーボード等のデータ入力機能、モニタ等のデータ表示機能、マイク等の音声入力機能、スピーカ等の音声出力機能等の、コンピュータ端末が通常備える機能を有している。
【0045】
端末装置２５は、施設内ＬＡＮと通信可能に接続され、Ｗｅｂアプリケーションを介してネットワークサービスシステム２６にアクセスする。例えば、端末装置２５は、通信制御装置２６１を介してコールセンタ４の記憶装置４１に格納されているデータ（例えば、手術支援ロボット２０の稼働情報）を取得し、取得したデータをモニタに表示する。
【0046】
端末装置２５は、医療スタッフＭから、端末装置４２との双方向通信を要求する操作を受け付け可能である。端末装置２５は、当該操作に応じたリクエストをサーバ装置４０に送信する。当該操作の一例は、モニタに表示されたボタンのクリックや、マイクへの音声入力であるが、これらに限られるものではない。
【0047】
端末装置２５は、サーバ装置４０との双方向通信が確立された端末装置４２との間で双方向コミュニケーション（例えば、音声通話、ビデオ通話、チャットなど）を行うための各種機能を実行可能である。つまり、端末装置２５は、双方向コミュニケーションを行うために入力されたデータ（以下では「コミュニケーションデータ」と称する）を、端末装置４２との間で共有するために通信制御装置２６１を介してサーバ装置４０に送信する一方、端末装置４２に入力されたコミュニケーションデータをサーバ装置４０から通信制御装置２６１を介して受信し出力する。コミュニケーションデータの一例は、音声通話を行う場合は音声、ビデオ通話を行う場合は音声付き映像、チャットを行う場合はテキストデータ、ホワイトボード機能を用いたデータ共有を行う場合はペイントツールにより描かれるグラフィック等であるが、これらに限られるものではない。
【0048】
〔ネットワークカメラ２４〕
ネットワークカメラ２４は、手術支援ロボット２０が設置される居室に設置され、居室の状況を映像または静止画像で撮影する撮影装置である。映像は音声付きであることが好ましい。撮影対象は、居室内全体であってもよいし、患者側装置２１であってもよいし、特定の医療スタッフＭであってもよい。ネットワークカメラ２４は、外部からの指示に従ってチルトおよびズームを任意に調整可能であることが好ましい。
ネットワークカメラ２４は、手術支援ロボット２０が設置される居室に設置され、居室の状況を映像または静止画像で撮影する撮影装置である。映像は音声付きであることが好ましい。撮影対象は、居室内全体であってもよいし、患者側装置２１であってもよいし、特定の医療スタッフＭであってもよい。ネットワークカメラ２４は、外部からの指示に従ってチルトおよびズームを任意に調整可能であることが好ましい。
【0049】
ネットワークカメラ２４が撮影した画像は、通信制御装置２６１を介してサーバ装置４０に送信される。前述したとおり、サーバ装置４０に画像を送信するにあたり、個人情報保護の観点から、通信制御装置２６１にて画像領域の一部（例えば、患者Ｐの顔）をマスクする等の画像処理を施したり、必要に応じて送信を制限できることが好ましい。また、ネットワークカメラ２４が撮影した映像をサーバ装置４０に送信するにあたり、通信制御装置２６１にて映像のフレームレートを調整してもよい。
【0050】
〔コールセンタ４〕
コールセンタ４は、医療関連施設２と異なる施設であり、医療関連施設２に対する遠隔支援業務を行うための施設である。コールセンタ４内にはＬＡＮ（以下では「コールセンタ内ＬＡＮ」と称する）が配設されている。コールセンタ内ＬＡＮは外部ネットワーク３と通信可能に接続されている。コールセンタ内ＬＡＮには、サーバ装置４０、記憶装置４１、および端末装置４２が通信可能に接続されている。
コールセンタ４は、医療関連施設２と異なる施設であり、医療関連施設２に対する遠隔支援業務を行うための施設である。コールセンタ４内にはＬＡＮ（以下では「コールセンタ内ＬＡＮ」と称する）が配設されている。コールセンタ内ＬＡＮは外部ネットワーク３と通信可能に接続されている。コールセンタ内ＬＡＮには、サーバ装置４０、記憶装置４１、および端末装置４２が通信可能に接続されている。
【0051】
〔サーバ装置４０〕
サーバ装置４０はコンピュータであり、コンピュータが通常有する機能を具備している。サーバ装置４０はコールセンタ内ＬＡＮに通信可能に接続されている。図８に示すとおり、サーバ装置４０は、ＣＰＵである制御部４００を備えており、制御部４００で動作するソフトウェアにて実現される機能として、データ格納部４０１、通信制御部４０２、データ提供部４０３、およびデータ解析部４０４を含んでいる。
サーバ装置４０はコンピュータであり、コンピュータが通常有する機能を具備している。サーバ装置４０はコールセンタ内ＬＡＮに通信可能に接続されている。図８に示すとおり、サーバ装置４０は、ＣＰＵである制御部４００を備えており、制御部４００で動作するソフトウェアにて実現される機能として、データ格納部４０１、通信制御部４０２、データ提供部４０３、およびデータ解析部４０４を含んでいる。
【0052】
〔データ格納部４０１〕
データ格納部４０１は、手術支援ロボット２０、ネットワークカメラ２４、端末装置２５、および端末装置４２からサーバ装置４０に送信されたデータを記憶装置４１に格納する。データ格納部４０１が記憶装置４１に格納するデータの典型例は次の（１）～（５）である。
データ格納部４０１は、手術支援ロボット２０、ネットワークカメラ２４、端末装置２５、および端末装置４２からサーバ装置４０に送信されたデータを記憶装置４１に格納する。データ格納部４０１が記憶装置４１に格納するデータの典型例は次の（１）～（５）である。
【0053】
（１）手術支援ロボット２０の稼働情報
（２）内視鏡２０１ｂが撮影した画像
（３）ネットワークカメラ２４が撮影した画像
（４）端末装置２５から受信しデータ（音声、画像、テキスト、およびグラフィック等の各種データ）
（５）端末装置４２から受信したデータ（音声、画像、テキスト、およびグラフィック等の各種データ）
また、データ格納部４０１は、双方向通信が確立されている期間において、双方向通信が確立している装置からサーバ装置４０に送信されたデータを、双方向通信のログとして記憶装置４１に格納する。
（２）内視鏡２０１ｂが撮影した画像
（３）ネットワークカメラ２４が撮影した画像
（４）端末装置２５から受信しデータ（音声、画像、テキスト、およびグラフィック等の各種データ）
（５）端末装置４２から受信したデータ（音声、画像、テキスト、およびグラフィック等の各種データ）
また、データ格納部４０１は、双方向通信が確立されている期間において、双方向通信が確立している装置からサーバ装置４０に送信されたデータを、双方向通信のログとして記憶装置４１に格納する。
【0054】
データ格納部４０１が行う処理の概要について図９を参照しながら説明する。サーバ装置４０にてデータを受信すると（Ｓ４１１にてＹＥＳ）、データ格納部４０１は、受信したデータを記憶装置４１に格納する（Ｓ４１２）。また、双方向通信が確立されている期間であれば（Ｓ４１３にてＹＥＳ）、双方向通信のログとして記憶装置４１に格納する（Ｓ４１４）。
【0055】
〔通信制御部４０２〕
（通信確立処理）
通信制御部４０２は、サーバ装置４０と、サーバ装置４０と通信可能に接続する装置との通信を制御するものであり、単方向通信および双方向通信を確立する処理を行う。
（通信確立処理）
通信制御部４０２は、サーバ装置４０と、サーバ装置４０と通信可能に接続する装置との通信を制御するものであり、単方向通信および双方向通信を確立する処理を行う。
【0056】
通信制御部４０２による双方向通信の確立処理の概要について図１０を参照しながら説明する。通信制御部４０２による双方向通信の確立処理は、双方向通信を要求するリクエストを受信することにより開始される。リクエストを受信すると（Ｓ５１１にてＹＥＳ）、双方向通信の要求先へ問合せを送信する（Ｓ５１２）。その問合せに対して双方向通信を許可する応答があった場合（Ｓ５１３にてＹＥＳ）、要求元へ許可通知を送信する（Ｓ５１４）。これにより双方向通信が確立する。一方、問合せに対して双方向通信を拒否する応答があった場合（Ｓ５１３にてＮＯ）、双方向通信が拒否された旨の通知（以下では「拒否通知」と称する）を要求元へ送信する（Ｓ５１５）。この場合、双方向通信は確立しない。なお、双方向通信の確立処理には周知技術を用いるため、詳細については記載を省略する。また、リアルタイムなデータ共有を可能とするために双方向通信は全二重通信であることが好ましい。
【0057】
なお、通信制御部４０２は、複数の双方向通信を並列に確立可能である。具体的には、同じ医療関連施設２内に設置された複数の手術支援ロボット２０と端末装置４２との間に双方向通信を確立することが可能である。また、異なる医療関連施設２に設置された複数の手術支援ロボット２０と端末装置４２との間に双方向通信を確立することも可能である。
【0058】
通信制御部４０２が双方向通信を確立する処理を行うトリガは、所定のイベントの検出である。所定のイベントの典型例を次の（イベント例１）～（イベント例５）に示す。
【0059】
（イベント例１）手術支援ロボット２０または端末装置２５から双方向通信を要求する操作が行われたことにより送信されたリクエストをサーバ装置４０にて受信。
【0060】
このリクエストは、医療スタッフＭにより双方向通信を要求する操作が行われた手術支援ロボット２０または端末装置２５からサーバ装置４０に送信される。手術支援ロボット２０に何らかの故障やエラーなどの異常が発生した場合、医療スタッフＭはサービス員Ｓの支援を必要とする可能性が高い。したがって、サーバ装置４０と手術支援ロボット２０および端末装置２５の少なくとも１つとの間、および、サーバ装置４０と端末装置４２との間に双方向通信を確立することが有用である。
【0061】
医療スタッフＭが行う操作の一例は、手術支援ロボット２０と通信可能に接続される操作部、または、手術支援ロボット２０に設けられた操作部に対する操作である。例えば、遠隔操作装置２２の近辺（例えば遠隔操作装置２２を操作する医療スタッフＭの手元）に設けられるスイッチ２２２の押下、または、患者側装置２１に設けられたタッチパネル２０７に表示されたボタンのタッチである。前者は主に遠隔操作装置２２を操作する医療スタッフＭが行い、後者は主に患者側装置２１の付近にいる医療スタッフＭが行う。この操作を契機として、手術支援ロボット２０のコントローラ２０６は、双方向通信を要求するリクエストをサーバ装置４０に送信する。リクエストを検出した通信制御部４０２は、（１）サーバ装置４０とリクエストを送信した手術支援ロボット２０および端末装置２５の少なくとも１つとの間、および、（２）サーバ装置４０と端末装置４２との間に、双方向通信を確立する処理を行う。
【0062】
医療スタッフＭが行う操作の他の一例は、端末装置２５のモニタに表示されたボタンのクリックである。この場合のリクエストは端末装置２５からサーバ装置４０に送信される。リクエストを検出した通信制御部４０２は、（１）サーバ装置４０とリクエストを送信した端末装置２５および手術支援ロボット２０の少なくとも１つとの間、および、（２）サーバ装置４０と端末装置４２との間に、双方向通信を確立する処理を行う。
【0063】
医療スタッフＭが行う操作のさらなる他の一例は、手術支援ロボット２０または端末装置２５への、双方向通信の確立を求める音声の入力である。
【0064】
（イベント例２）端末装置４２から双方向通信を要求する操作が行われたことにより送信されたリクエストをサーバ装置４０にて受信。
【0065】
このリクエストは、サービス員Ｓにより双方向通信を要求する操作が行われた端末装置４２からサーバ装置４０に送信される。この操作は、手術支援ロボット２０の異常等を検知したサービス員Ｓが医療スタッフＭを支援すべきであると判断したときに行われる。例えば、手術支援ロボット２０の稼働情報にエラーや故障などを示す異常値が含まれる場合、医療スタッフＭはサービス員Ｓの支援を必要とする可能性がある。したがって、サーバ装置４０と端末装置４２との間、および、サーバ装置４０と手術支援ロボット２０および端末装置２５の少なくとも１つとの間に双方向通信を確立することが有用である。
【0066】
稼働情報に含まれる異常値の典型例は、インストゥルメントアーム２０１Ａおよびカメラアーム２０１Ｂが互いに干渉して動かない状態であることが推察される軸値および電流値や、手術支援ロボット２０の再起動が必要であることを示すエラーコードなどである。
【0067】
サービス員Ｓが行う操作の一例は、端末装置４２において、遠隔操作すべき手術支援ロボット２０の指定である。リクエストは端末装置４２からサーバ装置４０に送信される。リクエストを検出した通信制御部４０２は、（１）サーバ装置４０とリクエストを送信した端末装置４２との間、および、（２）サーバ装置４０と指定された手術支援ロボット２０および端末装置２５の少なくとも１つとの間に、双方向通信を確立する処理を行う。
【0068】
サービス員Ｓが行う操作の他の一例は、端末装置４２において、支援すべき医療スタッフＭの端末装置２５の指定である。この場合もリクエストは端末装置４２からサーバ装置４０に送信される。リクエストを検出した通信制御部４０２は、（１）サーバ装置４０とリクエストを送信した端末装置４２との間、および、（２）サーバ装置４０と指定された端末装置２５および手術支援ロボット２０の少なくとも１つとの間に、双方向通信を確立する処理を行う。
【0069】
（イベント例３）稼働情報に含まれる異常値の検出。
【0070】
稼働情報に含まれる異常値の典型例は、前述したとおり、インストゥルメントアーム２０１Ａおよびカメラアーム２０１Ｂが互いに干渉して動かない状態であることが推察される軸値および電流値や、手術支援ロボット２０の再起動が必要であることを示すエラーコードなどである。この場合、医療スタッフＭはサービス員Ｓの支援を必要とする可能性がある。よって、サービス員Ｓは、迅速に、医療スタッフＭとのデータ共有、または、手術支援ロボット２０の遠隔操作が行えることが好ましい。
【0071】
この場合、通信制御部４０２は、（１）サーバ装置４０と、ネットワークカメラ２４と同じ医療関連施設２に配置された端末装置２５および手術支援ロボット２０の少なくとも１つとの間、および、（２）サーバ装置４０と端末装置４２との間に、双方向通信を確立する処理を行う。
【0072】
（イベント例４）ネットワークカメラ２４にて撮影された映像の画像解析に基づく異常事態の検出（具体的には、医療スタッフＭの非常行動の検出）。
【0073】
非常行動とは、例えば、通常時と異なる行動（急に慌ただしく動き回る等）や、非常機器を操作する行動（例えば、特定電話機を操作する行動など）である。この場合、医療スタッフＭはサービス員Ｓの支援を必要とする可能性がある。よって、サービス員Ｓは、迅速に、医療スタッフＭとのデータ共有、または、手術支援ロボット２０の遠隔操作が行えることが好ましい。
【0074】
この場合、通信制御部４０２は、（１）サーバ装置４０と、ネットワークカメラ２４と同じ医療関連施設２に配置された端末装置２５および手術支援ロボット２０の少なくとも１つとの間、および、（２）サーバ装置４０と端末装置４２との間に、双方向通信を確立する処理を行う。
【0075】
（イベント例５）ネットワークカメラ２４にて撮影された映像の音声解析に基づく異常事態の検出（具体的には、特定のフレーズ、または、閾値を超える音量や周波数の検出）。
【0076】
コールセンタ４に助けを求めるフレーズが検出されたり、閾値を超える音量や周波数が検出される場合、何らかの問題が発生したことに起因して発話がなされた可能性が高く、医療スタッフＭはサービス員Ｓの支援を必要とする可能性が高い。よって、サービス員Ｓは、迅速に、医療スタッフＭとのデータ共有、または、手術支援ロボット２０の遠隔操作が行えることが好ましい。
【0077】
この場合、通信制御部４０２は、（１）サーバ装置４０と、ネットワークカメラ２４と同じ医療関連施設２に配置された端末装置２５および手術支援ロボット２０の少なくとも１つとの間、および、（２）サーバ装置４０と端末装置４２との間に、双方向通信を確立する処理を行う。
【0078】
（データ配信処理）
通信制御部４０２は、双方向通信が確立された装置からサーバ装置４０に送信された各種データを、双方向通信が確立された相手先の装置に対して配信する。配信例を次の（配信例１）～（配信例７）に示す。
通信制御部４０２は、双方向通信が確立された装置からサーバ装置４０に送信された各種データを、双方向通信が確立された相手先の装置に対して配信する。配信例を次の（配信例１）～（配信例７）に示す。
【0079】
（配信例１）通信制御部４０２は、双方向通信が確立している手術支援ロボット２０および端末装置２５の少なくとも１つと、端末装置４２とのいずれかにて入力されサーバ装置４０に送信されたデータ（音声、画像、およびテキストの少なくとも１つ）を、他方へ配信する。これにより、医療スタッフＭとサービス員Ｓとの間で助言や指示を迅速に共有することができるため、サービス員Ｓが現場で立ち会って支援する場合と同等の効果が得られる。なお、データ提供部４０３にて端末装置４２に対して手術支援ロボット２０の稼働情報を常時送信していれば、サービス員Ｓは、双方向通信が確立される以前に提供済みの稼働情報に基づきトラブルの原因や対処方法を推定することができるため、双方向通信が確立された直後から迅速かつ適切に支援することができる。
【0080】
一例として、前述したイベント例３またはイベント例４により双方向通信が確立されて配信例１が行われる処理の流れの一例について、図１１を参照しながら説明する。ネットワークカメラ２４にて撮影された画像が通信制御装置２６１を介してサーバ装置４０へ送信される（Ｓ４１、Ｓ４２）。サーバ装置４０にて画像を受信し（Ｓ４３）、通信制御部４０２が異常事態を検出すると（Ｓ４４にてＹＥＳ）、サーバ装置４０と手術支援ロボット２０および端末装置２５の少なくとも１つとの間、およびサーバ装置４０と端末装置４２との間に双方向通信の確立処理を行う（Ｓ４５）。双方向通信の確立処理は前述のとおりであるため詳細は省略している。双方向通信が確立した後、端末装置４２にて入力されサーバ装置４０に送信されたデータは、通信制御部４０２から、手術支援ロボット２０および端末装置２５の少なくとも１つへ送信される（Ｓ４６～Ｓ４７）。このとき、データ格納部４０１は、送信データを双方向通信のログとして記憶装置４１に格納する（Ｓ４８）。通信制御装置２６１を介してデータを受信した手術支援ロボット２０および端末装置２５の少なくとも１つは、当該データを出力する（Ｓ４９～Ｓ５０）。同様に、手術支援ロボット２０または端末装置２５にて入力されサーバ装置４０に送信されたデータは、通信制御部４０２から端末装置４２へ送信され（Ｓ５１～Ｓ５３）、端末装置４２は受信したデータを出力する（Ｓ５５）。このとき、データ格納部４０１は、送信データを双方向通信のログとして記憶装置４１に格納する（Ｓ５４）。なお、双方向通信が全二重通信である場合、Ｓ４６～Ｓ５０と、Ｓ５１～Ｓ５５とは並列可能である。
【0081】
（配信例２）通信制御部４０２は、双方向通信が確立したときに、ネットワークカメラ２４にて撮影されサーバ装置４０にて受信した画像を、少なくとも端末装置４２に配信することが好ましい。端末装置４２は、当該配信された画像をモニタに表示する。これにより、サービス員Ｓが現場で立ち会う場合と同等またはそれ以上に、医療スタッフＭとサービス員Ｓとの間で手術室の現況を視覚的に共有することができるため、サービス員Ｓは適切に支援することができる。なお、画像の配信先として端末装置２５を加えてもよい。
【0082】
（配信例３）通信制御部４０２は、双方向通信が確立したときに、内視鏡２０１ｂにて撮影されサーバ装置４０にて受信した画像を、少なくとも端末装置４２に配信することが好ましい。端末装置４２は、当該配信された画像をモニタに表示する。これにより、サービス員Ｓが現場で立ち会う場合と同等またはそれ以上に、医療スタッフＭとサービス員Ｓとの間で患者Ｐの体腔内の状況を視覚的に共有することができるため、サービス員Ｓは適切に支援することができる。なお、画像の配信先として端末装置２５を加えてもよい。
【0083】
（配信例４）配信例２に示した配信および配信例３に示した配信を同時に行うことが好ましい。つまり、ネットワークカメラ２４にて撮影されサーバ装置４０にて受信した画像、および、内視鏡２０１ｂにて撮影されサーバ装置４０にて受信した画像を、少なくとも端末装置４２に配信することが好ましい。端末装置４２は、当該配信された画像の両方を同時にモニタに表示する。これにより、サービス員Ｓは、手術室の現況および患者Ｐの体腔内の状況を同時に確認することができるため、サービス員Ｓは適切に支援することができる。なお、画像の配信先として端末装置２５を加えてもよい。
【0084】
（配信例５）双方向通信が確立している端末装置４２に対して、通信制御部４０２が、画像（ネットワークカメラ２４にて撮影された画像、および内視鏡２０１ｂにて撮影された画像の少なくとも１つ）を配信しており、端末装置４２のモニタに当該画像が表示されているものとする。さらに、通信制御部４０２が当該画像を、双方向通信が確立している手術支援ロボット２０および端末装置２５の少なくとも１つに対しても配信しており、手術支援ロボット２０が備えるモニタ（患者側装置２１に設けられたタッチパネル２０７、画像処理装置２３に接続されたモニタ２３１）または端末装置４２のモニタに当該画像が表示されているものとする。この場合において、端末装置４２にて、当該画像に重畳表示させるデータ（例えば、画像の表示領域においてペイントツールにより描画されるグラフィック）が入力されたとき、当該データはサーバ装置４０に送信される。そして、通信制御部４０２は、当該データを双方向通信が確立している手術支援ロボット２０および端末装置２５の少なくとも１つへ配信する。当該データを受信した手術支援ロボット２０は、通信制御部４０２から配信されモニタに表示している画像に、当該データを重畳表示する。同様に、当該データを受信した端末装置２５は、通信制御部４０２から配信されモニタに表示している画像に、当該データを重畳表示する。これにより、医療スタッフＭおよびサービス員Ｓの双方が、データが重畳表示された画像を共有することができる。したがって、例えば、端末装置４２にて画像中の注目すべき箇所にマーキングを描画することにより、医療スタッフＭおよびサービス員Ｓの双方が注目すべき箇所を容易に共有することができる。
【0085】
例として、サーバ装置４０と手術支援ロボット２０および端末装置２５との間、並びに、サーバ装置４０と端末装置４２との間に双方向通信が確立された状態で、配信例２～５が行われる処理の流れの一例について図１２を参照しながら説明する。まず、ネットワークカメラ２４および内視鏡２０１ｂの少なくとも１つにて撮影された画像が通信制御装置２６１を介してサーバ装置４０へ送信される（Ｓ６１、Ｓ６２）。サーバ装置４０にて画像を受信すると（Ｓ６３）、通信制御部４０２は、双方向通信が確立された端末装置４２へ画像を配信するとともに、手術支援ロボット２０および端末装置２５に当該画像を配信する（Ｓ６４）。手術支援ロボット２０および端末装置２５は通信制御装置２６１を介して送信された画像をモニタに表示する（Ｓ６５、Ｓ６６）。端末装置４２も同様に画像をモニタに表示する（Ｓ６７）。これにより、手術支援ロボット２０、端末装置２５および端末装置４２の各モニタに画像が表示される。このとき、データ格納部４０１は、送信画像を、双方向通信のログとして記憶装置４１に格納する（Ｓ６８）。次に、端末装置４２のサービス員Ｓにより、画像に重畳表示させるデータが入力された場合（Ｓ６９）、当該データはサーバ装置４０にて受信され（Ｓ７０）、通信制御部４０２は当該データを通信制御装置２６１を介して手術支援ロボット２０および端末装置２５へ配信する（Ｓ７１、Ｓ７３）。当該データを受信した手術支援ロボット２０および端末装置２５は、当該データを重畳表示した画像をモニタに表示する（Ｓ７４）。データ格納部４０１は当該データを重畳表示した画像を、双方向通信のログとして記憶装置４１に格納する（Ｓ７２）。
【0086】
（配信例６）通信制御部４０２は、端末装置４２にて入力されサーバ装置４０に送信された手術支援ロボット２０に対する動作指令や警報出力指示を、手術支援ロボット２０へ配信する。これにより、サービス員Ｓが迅速に手術支援ロボット２０を遠隔操作できる。
【0087】
（配信例７）手術支援ロボット２０にて、音声、画像、およびテキスト等のデータを入力可能である場合、通信制御部４０２は、手術支援ロボット２０にて入力されサーバ装置４０に送信された当該データを、端末装置４２へ配信してもよい。反対に、手術支援ロボット２０にて、音声、画像、およびテキスト等のデータを出力可能である場合、通信制御部４０２は、端末装置４２にて入力されサーバ装置４０に送信された当該データを、手術支援ロボット２０へ配信してもよい。これにより、端末装置２５を用いなくとも医療スタッフＭとサービス員Ｓとのコミュニケーションが可能となる。
【0088】
〔データ提供部４０３〕
データ提供部４０３は、端末装置２５からの要求に応じたデータを要求元の端末装置２５に送信する。同様に、データ提供部４０３は、端末装置４２からの要求に応じたデータを要求元の端末装置４２に提供する。そのために、データ提供部４０３には各種のＡＰＩが用意されている。端末装置２５および端末装置４２へ提供するデータの典型例は、記憶装置４１に格納されたデータであり、特に、手術支援ロボット２０の稼働情報、ネットワークカメラ２４にて撮影された画像、内視鏡２０１ｂにて撮影された画像である。
データ提供部４０３は、端末装置２５からの要求に応じたデータを要求元の端末装置２５に送信する。同様に、データ提供部４０３は、端末装置４２からの要求に応じたデータを要求元の端末装置４２に提供する。そのために、データ提供部４０３には各種のＡＰＩが用意されている。端末装置２５および端末装置４２へ提供するデータの典型例は、記憶装置４１に格納されたデータであり、特に、手術支援ロボット２０の稼働情報、ネットワークカメラ２４にて撮影された画像、内視鏡２０１ｂにて撮影された画像である。
【0089】
なお、データ提供部４０３は、手術支援ロボット２０から受信した稼働情報を端末装置４２に常時送信することが好ましい。これにより、サービス員Ｓは、端末装置４２にて手術支援ロボット２０の状況を常時監視することができる。したがって、サービス員Ｓは、双方向通信が確立される前から手術支援ロボット２０の稼働情報に基づきトラブルの原因や対処方法を事前に確認することができるため、医療スタッフＭとの双方向コミュニケーションを開始した直後から迅速かつ適切に支援することができる。
【0090】
提供するデータにエラーが含まれる場合、データ提供部４０３は、エラーに関する通知を要求元の端末装置２５または端末装置４２に送信する。エラーに関する通知には、エラーの対処方法が含まれていてもよい。エラーの対処方法とは、例えば、電子取扱説明書における該当箇所をリンク先とするハイパーリンクや、蓄積されている対処方法に関する情報のうち必要情報のみを動的に集約したデータなどであるが、これらに限られるものではない。
【0091】
なお、データ提供部４０３は、提供するデータをデータ解析部４０４により統計的に解析したうえで送信してもよいし、提供するデータの表示形式を整えたうえで送信してもよい。
【0092】
データ提供部４０３が行う処理の概要について図１３を参照しながら説明する。端末装置２５または端末装置４２からデータの提供要求があったとき（Ｓ６１１にてＹＥＳ）、データ提供部４０３は記憶装置４１から要求対象データを取得する（Ｓ６１２）。ここで、取得したデータにエラーが含まれていなければ（Ｓ６１３にてＮＯ）、そのまま要求元へデータを提供する（Ｓ６１４）。一方、取得したデータにエラーが含まれている場合（Ｓ６１３にてＹＥＳ）、エラーに関する通知を要求元へ送信する（Ｓ６１５）。図１３では、これに引き続き要求元へデータを提供しているが（Ｓ６１４）、エラーの内容に応じて要求元へのデータ提供は省略してもよい。
【0093】
〔データ解析部４０４〕
データ解析部４０４は、端末装置２５または端末装置４２からの要求に応じて各種データの解析を行い、解析結果を要求元に送信する。そのために、データ提供部４０３には解析用の各種ＡＰＩが用意されている。解析対象となるデータの典型例は、記憶装置４１に格納されているデータ（典型的には、手術支援ロボット２０の稼働情報）である。
データ解析部４０４は、端末装置２５または端末装置４２からの要求に応じて各種データの解析を行い、解析結果を要求元に送信する。そのために、データ提供部４０３には解析用の各種ＡＰＩが用意されている。解析対象となるデータの典型例は、記憶装置４１に格納されているデータ（典型的には、手術支援ロボット２０の稼働情報）である。
【0094】
データ解析部４０４が行う処理の概要について図１４を参照しながら説明する。端末装置２５または端末装置４２からのデータの解析要求があったとき（Ｓ７１１にてＹＥＳ）、データ解析部４０４は、対象データを解析するためのＡＰＩを選択し（Ｓ７１２）、解析を実行する（Ｓ７１３）。そして、解析結果を要求元に送信する（Ｓ７１４）。
【0095】
〔端末装置４２〕
端末装置４２は、コールセンタ４のサービス員Ｓがコールセンタ４内で使用するコンピュータ端末である。端末装置４２の典型例は、パーソナルコンピュータ、タブレット端末、スマートフォン等である。端末装置４２は、コールセンタ４内ＬＡＮを介してサーバ装置４０と通信可能に接続される。
端末装置４２は、コールセンタ４のサービス員Ｓがコールセンタ４内で使用するコンピュータ端末である。端末装置４２の典型例は、パーソナルコンピュータ、タブレット端末、スマートフォン等である。端末装置４２は、コールセンタ４内ＬＡＮを介してサーバ装置４０と通信可能に接続される。
【0096】
なお、端末装置４２は、他装置との通信機能、キーボード等のデータ入力機能、モニタ等のデータ表示機能、マイク等の音声入力機能、スピーカ等の音声出力機能等の、コンピュータ端末が通常備える機能を有している。
【0097】
端末装置４２は、サーバ装置４０を介して記憶装置４１に格納されているデータ（典型的には、手術支援ロボット２０の稼働情報）を取得し、取得したデータをモニタに表示する。
【0098】
端末装置４２は、サービス員Ｓから、手術支援ロボット２０または端末装置２５との双方向通信を要求する操作を受け付け可能である。端末装置４２は、当該操作に応じたリクエストをサーバ装置４０に送信する。当該操作の一例は、モニタに表示されたボタンのクリックや、マイクへの音声入力であるが、これらに限られるものではない。
【0099】
端末装置４２は、双方向通信が確立された端末装置２５との間で双方向コミュニケーションおよびデータ共有を行うための各種機能を実行可能である。つまり、端末装置４２は、コミュニケーションデータを、端末装置２５との間で共有するためにサーバ装置４０に送信する一方、端末装置２５に入力されたコミュニケーションデータをサーバ装置４０から受信する。
【0100】
端末装置４２は、双方向通信が確立された手術支援ロボット２０に対する指令を受け付け可能である。当該指示の一例は、手術支援ロボット２０からの警報出力指令や、手術支援ロボット２０を遠隔操作するための動作指令である。
【0101】
端末装置４２は、双方向通信が確立された手術支援ロボット２０の遠隔操作装置２２のモニタ２２１に表示される画面を取得し、端末装置４２のモニタに表示することができる。
【0102】
手術支援ロボット２０が、音声、画像、およびテキスト等のデータを出力する出力部を備える場合、端末装置４２は、双方向通信が確立された手術支援ロボット２０に対し、当該データをサーバ装置４０経由で配信してもよい。
【0103】
〔記憶装置４１〕
記憶装置４１は各種データを記憶する装置であり、ハードディスク等の磁気ディスク等である。
記憶装置４１は各種データを記憶する装置であり、ハードディスク等の磁気ディスク等である。
【0104】
〔画面例〕
図１５～図１７を参照しながら、端末装置４２および端末装置２５の各モニタの表示画面の一例について説明する。図１５は端末装置４２のモニタの表示画面の一例を示す模式図である。図１６は端末装置２５のモニタの表示画面の一例を示す模式図である。
図１５～図１７を参照しながら、端末装置４２および端末装置２５の各モニタの表示画面の一例について説明する。図１５は端末装置４２のモニタの表示画面の一例を示す模式図である。図１６は端末装置２５のモニタの表示画面の一例を示す模式図である。
【0105】
ここでは、サーバ装置４０と端末装置４２および端末装置２５との間に双方向通信が確立しているものとする。また、ネットワークカメラ２４にて撮影された手術室の画像、および、内視鏡２０１ｂにて撮影された患者Ｐの体腔内の画像が、通信制御部４０２から端末装置４２と端末装置２５とに配信されているものとする。
【0106】
配信された手術室の画像は、端末装置４２のモニタの表示領域Ａ１（図１５参照）、および、端末装置２５のモニタの表示領域Ｂ１（図１６参照）に表示されている。当該画像には患者側装置２１および遠隔操作装置２２が写っている。
【0107】
また、配信された患者Ｐの体腔内の画像は、端末装置４２のモニタの表示領域Ａ２（図１５参照）、および、端末装置２５のモニタの表示領域Ｂ２（図１６参照）に表示されている。当該画像には、患者Ｐの体内に導入された２つのインストゥルメント２０１ａおよび手術部位Ｒが写っている。
【0108】
このように、端末装置４２のモニタおよび端末装置２５のモニタの双方に同じ画像が同時に表示されている。これにより、医療スタッフＭおよびサービス員Ｓの双方は、サービス員Ｓが現場に立ち会う場合と同等またはそれ以上に、手術室の現況および患者Ｐの体腔内の現況について共有することができるため、サービス員Ｓは医療スタッフＭに対して適切に支援することができる。
【0109】
また、図１５に示す表示領域Ａ３には、記憶装置４１から取得した手術支援ロボット２０の各々の稼働情報が、手術支援ロボット２０毎に表示されている。具体的には、ステータス（Status）、居室名（Lab Name）、モデル（Model）、シリアル番号（Serial No.）、最新更新日時（Last update）、最新エラー（Latest Error）、オペレーションモード（OP Mode）が表示されるとともに、アクション（Action）、部位情報（Parts Info.）、供給情報（Supply Info.）、セルフチェック（Self Check）、リモートビュー（Remote View）に関する詳細画面を表示するためのボタン（Browse）が表示されている。また、図１５に示す表示領域Ａ４には、Ａ病院１号室に設置された手術支援ロボット２０の各部位（Parts）の情報が詳細に表示されている（Command Value、Actual Value、Current、Difference）。サービス員Ｓはこれらの稼働情報を閲覧することにより、さらに的確な支援を行うことができる。
【0110】
図１７は、図１５および図１６に示した表示画面の状態において、端末装置２５および端末装置４２のいずれか一方にて、画像に重畳表示させるデータが描画された表示画面の一例を示す模式図である。図１７は、端末装置２５および端末装置４２のいずれか一方にてペイントツール等を用いて描画されたマーキングＭＫが、双方の表示画面において画像に重畳表示されている様子を示している。このように、双方向通信が確立している端末装置２５および端末装置４２のいずれか一方にて、画像に重畳させるデータを描画すると、通信制御部４０２による配信により、端末装置４２および端末装置２５の双方のモニタにおいて当該データが重畳表示された画像が共有される。これにより、医療スタッフＭおよびサービス員Ｓは、例えば画像中の注目すべき箇所を容易に共有することができる。
【0111】
［変形例］
患者側装置２１には、タッチパネル２０７の他に、音声入出力装置や画像出力装置が設けられてもよい。これらにより、患者側装置２１にて双方向通信の確立を要求する操作が可能であるとともに、双方向通信の確立後に、患者側装置２１を使用する医療スタッフＭと端末装置４２を使用するサービス員Ｓとの間で双方向コミュニケーションおよびデータ共有が可能である。
患者側装置２１には、タッチパネル２０７の他に、音声入出力装置や画像出力装置が設けられてもよい。これらにより、患者側装置２１にて双方向通信の確立を要求する操作が可能であるとともに、双方向通信の確立後に、患者側装置２１を使用する医療スタッフＭと端末装置４２を使用するサービス員Ｓとの間で双方向コミュニケーションおよびデータ共有が可能である。
【0112】
同様に、遠隔操作装置２２には、モニタ２２１の他に、入力操作を受け付ける操作装置や音声入出力装置や画像出力装置が設けられてもよい。これらにより、遠隔操作装置２２にて双方向通信の確立を要求する操作が可能であるとともに、双方向通信の確立後に、遠隔操作装置２２を使用する医療スタッフＭと端末装置４２を使用するサービス員Ｓとの間で双方向コミュニケーションおよびデータ共有が可能である。
【0113】
同様に、画像処理装置２３には、モニタ２３１の他に、入力操作を受け付ける操作装置や音声入出力装置や画像出力装置が接続されてもよい。これらにより、画像処理装置２３にて双方向通信の確立を要求する操作が可能であるとともに、双方向通信の確立後に、画像処理装置２３を使用する医療スタッフＭと端末装置４２を使用するサービス員Ｓとの間で双方向コミュニケーションおよびデータ共有が可能である。
【0114】
端末装置２５は、通常、施設内ＬＡＮと通信可能に接続されるが、施設内ＬＡＮを介さずに外部ネットワーク３と通信可能に接続されてもよい。
【0115】
〔実施形態２〕
上述した実施形態では、サーバ装置４０がコールセンタ４に設置される構成例を説明したが、サーバ装置４０の配置場所はこれに限られない。図１８に示すとおり、本実施形態に係る医療関連施設２ｂは、サーバ装置４０および記憶装置４１が設置されている点が実施形態１の医療関連施設２と異なる。サーバ装置４０および記憶装置４１は、医療関連施設２ｂに配設されたＬＡＮと通信可能に接続されている。また、本実施形態に係るコールセンタ４ｂは、サーバ装置４０および記憶装置４１が設置されていない点が実施形態１のコールセンタ４と異なる。
上述した実施形態では、サーバ装置４０がコールセンタ４に設置される構成例を説明したが、サーバ装置４０の配置場所はこれに限られない。図１８に示すとおり、本実施形態に係る医療関連施設２ｂは、サーバ装置４０および記憶装置４１が設置されている点が実施形態１の医療関連施設２と異なる。サーバ装置４０および記憶装置４１は、医療関連施設２ｂに配設されたＬＡＮと通信可能に接続されている。また、本実施形態に係るコールセンタ４ｂは、サーバ装置４０および記憶装置４１が設置されていない点が実施形態１のコールセンタ４と異なる。
【0116】
本実施形態では、医療関連施設２ｂ内の各装置とサーバ装置４０とのデータの送受信は、ＬＡＮを介して行われる。また、コールセンタ４ｂの記憶装置４１および端末装置４２とサーバ装置４０とのデータの送受信は、外部ネットワーク３を介して行われる。
【0117】
〔実施形態３〕
上述した実施形態では、手術支援ロボット２０が、複数の手術マニピュレータ２０１を有する１台の患者側装置２１を備える構成例を示したが、手術支援ロボット２０の構成はこれに限られない。例えば、患者側装置２１に代えて複数の患者側装置を備え、当該複数の患者側装置のそれぞれが内視鏡や鉗子などの手術器具が取り付けられたマニピュレータを備える構成であってもよい。
上述した実施形態では、手術支援ロボット２０が、複数の手術マニピュレータ２０１を有する１台の患者側装置２１を備える構成例を示したが、手術支援ロボット２０の構成はこれに限られない。例えば、患者側装置２１に代えて複数の患者側装置を備え、当該複数の患者側装置のそれぞれが内視鏡や鉗子などの手術器具が取り付けられたマニピュレータを備える構成であってもよい。
【0118】
本実施形態に係る手術支援ロボット２０ｂを図１９に示す。手術支援ロボット２０ｂは、患者側装置２１に代えて、患者Ｐを載置する手術台の天板２１４に取り付けられた３台の患者側装置を備えている点が手術支援ロボット２０と異なる。具体的には、手術支援ロボット２０ｂは、内視鏡が取り付けられた手術マニピュレータ（第１マニピュレータ）を有する第１患者側装置２１１と、鉗子などの手術器具が取り付けられた手術マニピュレータ（第２マニピュレータ）を有する第２患者側装置２１２および第３患者側装置２１３とを備えている。手術支援ロボット２０ｂでは、遠隔操作装置２２は、第１患者側装置２１１の手術マニピュレータが把持する内視鏡により実行されるべき動作指令を第１患者側装置２１１のコントローラに送信することにより、第１患者側装置２１１の手術マニピュレータを遠隔操作する。同様に、遠隔操作装置２２は、第２患者側装置２１２の手術マニピュレータが把持する手術器具により実行されるべき動作指令を第２患者側装置２１２のコントローラに送信することにより、第２患者側装置２１２の手術マニピュレータを遠隔操作する。同様に、遠隔操作装置２２は、第３患者側装置２１３の手術マニピュレータが把持する手術器具により実行されるべき動作指令を第３患者側装置２１３のコントローラに送信することにより、第３患者側装置２１３の手術マニピュレータを遠隔操作する。
【0119】
本実施形態では、通信制御部４０２は、サーバ装置４０と、手術支援ロボット２０ｂ（第１患者側装置２１１、第２患者側装置２１２、第３患者側装置２１３、遠隔操作装置２２、画像処理装置２３）、および端末装置２５の少なくとも１つとの間に双方向通信を確立する処理を行う。
【0120】
〔実施形態４〕
上述した実施形態では、手術支援ロボット２０および２０ｂが、患者側装置２１・２１１・２１２・２１３、遠隔操作装置２２、および画像処理装置２３を備える構成例を示したが、手術支援ロボット２０の構成はこれに限られない。
上述した実施形態では、手術支援ロボット２０および２０ｂが、患者側装置２１・２１１・２１２・２１３、遠隔操作装置２２、および画像処理装置２３を備える構成例を示したが、手術支援ロボット２０の構成はこれに限られない。
【0121】
本実施形態に係る手術支援ロボット２０ｃを図２０に示す。手術支援ロボット２０ｃは、ロボット手術台２２５および操作装置２２６を備えている。ロボット手術台２２５は、患者を載置する天板２２３と、天板２２３を移動させるためのマニピュレータ２２４とを有する。マニピュレータ２２４は、一端が床に固定され他端が天板２２３を支持している。操作装置２２６は、ロボット手術台２２５を操作するためのモバイル端末である。操作装置２２６は、マニピュレータ２２４の移動方向を指示するためのボタン２２７を備えている。操作装置２２６は、ボタン２２７にて入力された指示をロボット手術台２２５のコントローラに送信する。マニピュレータ２２４はコントローラが受信した指示に従って移動し、所望の位置に天板２２３を位置づける。
【0122】
操作装置２２６には、双方向通信を要求するための連絡用ボタン２２８が設けられている。医療スタッフＭが連絡用ボタン２２８を押下することにより、双方向通信を要求するリクエストが操作装置２２６からサーバ装置４０に送信される。本実施形態では、通信制御部４０２は、サーバ装置４０と、手術支援ロボット２０ｃ（ロボット手術台２２５および操作装置２２６）、および端末装置２５の少なくとも１つとの間に双方向通信を確立する処理を行う。
【0123】
なお、操作装置２２６は、画像、音声、テキスト等のデータを入出力可能であり、双方向通信の確立後に、操作装置２２６を使用する医療スタッフＭと端末装置４２を使用するサービス員Ｓとの双方向コミュニケーションおよびデータ共有が可能となる。画像およびテキストはモニタ２２９に出力される。
【0124】
〔付記事項１〕
医療スタッフＭがサービス員Ｓによる支援を必要とするタイミングは、手術支援ロボット２０が稼働している期間（つまり、手術中やトレーニング中）のみならず、手術支援ロボット２０が稼働していない期間にも起こり得る。例えば、患者側装置２１、遠隔操作装置２２、および画像処理装置２３が有線で接続される場合において、手術前の準備や手術後の片づけの際に、これらの配線に関してサービス員Ｓの支援を求めたい場合がある。したがって、手術支援ロボット２０が稼働していない期間においても双方向通信を確立し、医療スタッフＭとサービス員Ｓとの間で双方向コミュニケーションを行ってもよい。
医療スタッフＭがサービス員Ｓによる支援を必要とするタイミングは、手術支援ロボット２０が稼働している期間（つまり、手術中やトレーニング中）のみならず、手術支援ロボット２０が稼働していない期間にも起こり得る。例えば、患者側装置２１、遠隔操作装置２２、および画像処理装置２３が有線で接続される場合において、手術前の準備や手術後の片づけの際に、これらの配線に関してサービス員Ｓの支援を求めたい場合がある。したがって、手術支援ロボット２０が稼働していない期間においても双方向通信を確立し、医療スタッフＭとサービス員Ｓとの間で双方向コミュニケーションを行ってもよい。
【0125】
〔付記事項２〕
双方向通信は、２つの装置間で行われる形態、および、複数の装置間で行われる形態がある。前者の典型例は、サービス員Ｓが１つの医療関連施設２を遠隔支援するケース（つまり、１対１の関係）において好適であり、この場合、１つの端末装置４２と、手術支援ロボット２０または端末装置４２との間で双方向通信が行われる。後者の典型例は、手術支援ロボット２０のトレーニングにおいて指導者が複数のトレーニング対象者をリモートトレーニングするケース（つまり、１対多の関係）において好適であり、この場合、１つの端末装置４２と、複数の手術支援ロボット２０との間で双方向通信が行われる。
双方向通信は、２つの装置間で行われる形態、および、複数の装置間で行われる形態がある。前者の典型例は、サービス員Ｓが１つの医療関連施設２を遠隔支援するケース（つまり、１対１の関係）において好適であり、この場合、１つの端末装置４２と、手術支援ロボット２０または端末装置４２との間で双方向通信が行われる。後者の典型例は、手術支援ロボット２０のトレーニングにおいて指導者が複数のトレーニング対象者をリモートトレーニングするケース（つまり、１対多の関係）において好適であり、この場合、１つの端末装置４２と、複数の手術支援ロボット２０との間で双方向通信が行われる。
【0126】
〔付記事項３〕
サーバ装置４０は、必ずしも実施形態１のようにコールセンタ４の施設内に設置される必要はなく、コールセンタ４の外部に設置され、外部ネットワーク３を介してコールセンタ４と通信接続されるように実現されてもよい。
サーバ装置４０は、必ずしも実施形態１のようにコールセンタ４の施設内に設置される必要はなく、コールセンタ４の外部に設置され、外部ネットワーク３を介してコールセンタ４と通信接続されるように実現されてもよい。
【0127】
〔付記事項４〕
上述した実施形態において通信制御装置２６１が有する機能の全てを、必ずしも通信制御装置２６１内に備える必要はない。例えば、内視鏡２０１ｂおよびネットワークカメラ２４の少なくとも１つが撮影した画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理をする機能、内視鏡２０１ｂおよびネットワークカメラ２４の少なくとも１つが撮影した画像のフレームレートを調整する機能を、手術支援ロボット２０またはサーバ装置４０が有してもよい。
上述した実施形態において通信制御装置２６１が有する機能の全てを、必ずしも通信制御装置２６１内に備える必要はない。例えば、内視鏡２０１ｂおよびネットワークカメラ２４の少なくとも１つが撮影した画像に対して、人物を特定できる特定情報を視覚的に不明瞭化する画像処理をする機能、内視鏡２０１ｂおよびネットワークカメラ２４の少なくとも１つが撮影した画像のフレームレートを調整する機能を、手術支援ロボット２０またはサーバ装置４０が有してもよい。
【0128】
〔付記事項５〕
上述した実施形態では、双方向通信を要求するリクエストをサーバ装置４０にて受信することによって、コールセンタ４から医療関連施設２への通信が可能になることを説明したが、無論、非常時には、双方向通信を要求するリクエストを送信せずとも、コールセンタ４から医療関連施設２へ通信可能であることはいうまでもない。
上述した実施形態では、双方向通信を要求するリクエストをサーバ装置４０にて受信することによって、コールセンタ４から医療関連施設２への通信が可能になることを説明したが、無論、非常時には、双方向通信を要求するリクエストを送信せずとも、コールセンタ４から医療関連施設２へ通信可能であることはいうまでもない。
【0129】
〔ソフトウェアによる実現〕
手術支援ロボット２０・２０ｂ・２０ｃの制御ブロック（特に、システム連携装置２７）、通信制御装置２６１の制御ブロック（特に、制御部２６２）、およびサーバ装置４０の制御ブロック（特に、制御部４００）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ソフトウェアによって実現してもよい。
手術支援ロボット２０・２０ｂ・２０ｃの制御ブロック（特に、システム連携装置２７）、通信制御装置２６１の制御ブロック（特に、制御部２６２）、およびサーバ装置４０の制御ブロック（特に、制御部４００）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ソフトウェアによって実現してもよい。
【0130】
後者の場合、手術支援ロボット２０・２０ｂ・２０ｃ、通信制御装置２６１、およびサーバ装置４０は、各機能を実現するソフトウェアであるプログラムの命令を実行するコンピュータを備えている。このコンピュータは、例えば１つ以上のプロセッサを備えていると共に、上記プログラムを記憶したコンピュータ読み取り可能な記録媒体を備えている。そして、上記コンピュータにおいて、上記プロセッサが上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記プロセッサとしては、例えばＣＰＵやＧＰＵ（Graphics Processing Unit）を用いることができる。上記記録媒体としては、「一時的でない有形の媒体」、例えば、ＲＯＭ（Read Only Memory）等の他、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムを展開するＲＡＭ（Random Access Memory）などをさらに備えていてもよい。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
【0131】
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
【0132】
（付記事項）
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、手術支援ロボットの稼働に関する稼働情報の少なくとも１つを、前記手術支援ロボットの遠隔支援業務を行うためのサーバ装置にて受信し、所定のイベントが検出されると、前記サーバ装置から前記手術支援ロボットおよび端末装置の少なくとも１つに対して、音声、画像、およびテキストの少なくとも１つを配信してもよい。
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、手術支援ロボットの稼働に関する稼働情報の少なくとも１つを、前記手術支援ロボットの遠隔支援業務を行うためのサーバ装置にて受信し、所定のイベントが検出されると、前記サーバ装置から前記手術支援ロボットおよび端末装置の少なくとも１つに対して、音声、画像、およびテキストの少なくとも１つを配信してもよい。
【0133】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、前記手術支援ロボットが撮影した画像を含む前記稼働情報を受信してもよい。
【0134】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、前記手術支援ロボットが設置された居室内を撮影するカメラが撮影した画像を前記サーバ装置にてさらに受信してもよい。
【0135】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、前記受信した画像に重畳表示させるデータを前記サーバ装置にて受信してもよい。
【0136】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、前記所定のイベントが検出された後、前記サーバ装置から前記手術支援ロボットおよび前記端末装置の少なくとも１つに対して、前記データが重畳表示された画像を配信してもよい。
【0137】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、前記サーバ装置にて、ユーザの操作により前記手術支援ロボットおよび前記端末装置の少なくとも１つから送信された、双方向通信を要求するリクエストを受信することにより、前記所定のイベントを検出してもよい。
【0138】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、前記稼働情報に基づき前記所定のイベントを検出してもよい。
【0139】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、前記受信した画像に基づき前記所定のイベントを検出してもよい。
【0140】
本発明の一態様に係る手術支援ロボットの遠隔支援方法は、手術支援ロボットおよび前記手術支援ロボットが設置された居室内を撮影するカメラの少なくとも１つが撮影した画像のフレームレートを調整し、フレームレートが調整された前記画像を、前記手術支援ロボットの遠隔支援業務を行うためのサーバ装置に送信してもよい。
【0141】
本発明の一態様に係る遠隔支援システムは、手術支援ロボットの遠隔支援業務を行うためのサーバ装置と、前記手術支援ロボットの稼働に関する稼働情報を前記サーバ装置に送信するとともに前記サーバ装置からの情報を受信するために前記サーバ装置と通信する通信制御装置と、を備え、前記サーバ装置は、所定のイベントを検出すると、前記手術支援ロボットおよび前記手術支援ロボットが設置された施設で使用される第１端末装置の少なくとも一つと、前記手術支援ロボットの遠隔支援業務を行うための第２端末装置との間に双方向通信を確立する処理を行ってもよい。
【0142】
本発明の一態様に係る遠隔支援システムにおいて、前記サーバ装置は、前記手術支援ロボットの複数と通信接続されてもよい。
【0143】
本発明の一態様に係る遠隔支援システムにおいて、前記手術支援ロボットは、内視鏡が取り付けられた第１マニピュレータと手術器具が取り付けられた第２マニピュレータとを有する患者側装置、および、前記第１マニピュレータおよび前記第２マニピュレータを遠隔操作する遠隔操作装置を備え、前記患者側装置および前記遠隔操作装置の少なくとも１つは、前記通信制御装置と通信可能に接続されていてもよい。
【0144】
本発明の一態様に係る遠隔支援システムにおいて、前記手術支援ロボットは、内視鏡が取り付けられた第１マニピュレータを有する第１患者側装置、手術器具が取り付けられた第２マニピュレータを有する第２患者側装置、および、前記第１マニピュレータおよび前記第２マニピュレータを遠隔操作する遠隔操作装置を備え、前記第１患者側装置、前記第２患者側装置、および前記遠隔操作装置の少なくとも１つは、前記通信制御装置と通信可能に接続されていてもよい。
【0145】
本発明の一態様に係る遠隔支援システムにおいて、前記手術支援ロボットは、さらに前記内視鏡が撮影した画像に画像処理を施す画像処理装置を備え、前記画像処理装置は、前記サーバ装置と通信可能に接続され、前記第２端末装置と前記画像処理装置との間に双方向通信を確立する処理が行われてもよい。
【0146】
本発明の一態様に係る遠隔支援システムにおいて、前記手術支援ロボットは、患者を載置する天板と前記天板を移動させるためのマニピュレータとを有するロボット手術台、および、前記ロボット手術台を操作するための操作装置を備え、前記ロボット手術台、前記操作装置、および前記第１端末装置の少なくとも１つは、前記サーバ装置と通信可能に接続され、前記第２端末装置と、前記ロボット手術台、前記操作装置、および前記第１端末装置の少なくとも１つとの間に双方向通信を確立する処理が行われてもよい。
【0147】
本発明の一態様に係る遠隔支援システムにおいて、前記所定のイベントは、前記サーバ装置が、前記第１端末装置または前記手術支援ロボットから双方向通信を要求するリクエストを受信したことであってもよい。
【0148】
本発明の一態様に係る遠隔支援システムにおいて、前記手術支援ロボットは、前記手術支援ロボットと通信可能に接続される操作部、または、前記手術支援ロボットに設けられた操作部に対する所定操作を契機として、前記リクエストを前記サーバ装置に送信してもよい。
【0149】
本発明の一態様に係る遠隔支援システムにおいて、前記所定のイベントは、前記サーバ装置が、前記第２端末装置から双方向通信を要求するリクエストを受信したことであってもよい。
【0150】
本発明の一態様に係る遠隔支援システムにおいて、前記サーバ装置は、双方向通信が確立した前記手術支援ロボットおよび前記第１端末装置の少なくとも１つと前記第２端末装置とのいずれかにて入力され前記サーバ装置に送信された音声、画像、およびテキストの少なくとも１つを、他方へ配信するように構成されていてもよい。
【0151】
本発明の一態様に係る遠隔支援システムにおいて、前記サーバ装置は、前記手術支援ロボットが設置された居室の状況を撮影する撮影装置にて撮影された画像を受信し、双方向通信が確立したときに、前記受信した画像を少なくとも前記第２端末装置に配信するように構成されていてもよい。
【0152】
本発明の一態様に係る遠隔支援システムは、前記撮影装置にて撮影された画像を前記サーバ装置に送信する通信制御装置を備え、前記通信制御装置は、当該画像に人物を特定できる特定可能情報が映っているか否かを検査し、前記特定可能情報が映っている場合は、前記画像に対して前記特定可能情報を視覚的に不明瞭化する画像処理を施した画像を前記サーバ装置に送信するように構成されていてもよい。
【0153】
本発明の一態様に係る遠隔支援システムは、通信ネットワークと通信可能に接続され、前記撮影装置にて撮影された画像を前記サーバ装置に送信する通信制御装置を備え、前記通信制御装置は、前記通信ネットワークの通信負荷を監視し、前記通信負荷に応じて前記画像のフレームレートを調整するように構成されていてもよい。
【0154】
本発明の一態様に係る遠隔支援システムにおいて、前記サーバ装置は、前記手術支援ロボットに取り付けられた内視鏡にて撮影された画像を受信し、双方向通信が確立したときに、前記受信した画像を少なくとも前記第２端末装置に配信してもよい。
【0155】
本発明の一態様に係る遠隔支援システムにおいて、前記サーバ装置は、双方向通信が確立したときに、前記手術支援ロボットが設置された居室の状況を撮影するカメラにて撮影された画像、および、前記手術支援ロボットに取り付けられた内視鏡にて撮影された画像の両方を、少なくとも前記第２端末装置に配信するように構成されていてもよい。
【0156】
本発明の一態様に係る遠隔支援システムにおいて、前記第２端末装置は、前記サーバ装置から配信された前記画像の両方を同時にモニタに表示してもよい。
【0157】
本発明の一態様に係る遠隔支援システムにおいて、前記サーバ装置は、双方向通信が確立した前記第２端末装置に前記画像を配信している場合において、当該第２端末装置にて当該画像に重畳表示させるデータが入力されたとき、当該データを前記手術支援ロボットおよび前記第１端末装置の少なくとも１つへ配信してもよい。
【0158】
本発明の一態様に係る遠隔支援システムにおいて、前記サーバ装置は、前記稼働情報を記憶装置に格納するデータ格納部を備え、前記第１端末装置または前記第２端末装置からの要求に対する応答として、該要求に応じて前記記憶装置から読み出した前記稼働情報を要求元に送信するデータ提供部を備えてもよい。
【0159】
本発明の一態様に係る遠隔支援システムにおいて、前記データ提供部は、前記読み出した前記稼働情報にエラーが含まれる場合、該エラーに関する通知を前記要求元に送信してもよい。
【0160】
本発明の一態様に係る遠隔支援システムにおいて、前記第１端末装置および前記第２端末装置は、パーソナルコンピュータ、タブレット端末、およびスマートフォンのいずれかであってもよい。
【符号の説明】
【0161】
２ 医療関連施設
３ 外部ネットワーク
４ コールセンタ
２０、２０ｂ、２０ｃ 手術支援ロボット
２１ 患者側装置
２２ 遠隔操作装置
２３ 画像処理装置
２４ ネットワークカメラ（カメラ）
２５ 端末装置（第１端末装置）
２７ システム連携装置
４０ サーバ装置
４１ 記憶装置
４２ 端末装置（第２端末装置）
２０１ 手術マニピュレータ（第１マニピュレータ、第２マニピュレータ）
２０１ｂ 内視鏡
２０６ コントローラ
２１１ 第１患者側装置
２１２ 第２患者側装置
２２３ 天板
２２４ マニピュレータ
２２５ ロボット手術台
２２６ 操作装置
２６１ 通信制御装置
４０１ データ格納部
４０２ 通信制御部
４０３ データ提供部
４０４ データ解析部
３ 外部ネットワーク
４ コールセンタ
２０、２０ｂ、２０ｃ 手術支援ロボット
２１ 患者側装置
２２ 遠隔操作装置
２３ 画像処理装置
２４ ネットワークカメラ（カメラ）
２５ 端末装置（第１端末装置）
２７ システム連携装置
４０ サーバ装置
４１ 記憶装置
４２ 端末装置（第２端末装置）
２０１ 手術マニピュレータ（第１マニピュレータ、第２マニピュレータ）
２０１ｂ 内視鏡
２０６ コントローラ
２１１ 第１患者側装置
２１２ 第２患者側装置
２２３ 天板
２２４ マニピュレータ
２２５ ロボット手術台
２２６ 操作装置
２６１ 通信制御装置
４０１ データ格納部
４０２ 通信制御部
４０３ データ提供部
４０４ データ解析部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】