特開 2024-10127 使用中の外科用装置の配置及び制御を改善するための腹部の外側の領域の画像取込

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024010127

(43)【公開日】2024-01-23

(54)【発明の名称】使用中の外科用装置の配置及び制御を改善するための腹部の外側の領域の画像取込

(51)【国際特許分類】

   A61B 34/35 20160101AFI20240116BHJP

   A61B 34/37 20160101ALI20240116BHJP

   A61B 18/00 20060101ALI20240116BHJP

   A61B 17/32 20060101ALI20240116BHJP

   A61B 17/068 20060101ALI20240116BHJP

   G16Y 20/00 20200101ALI20240116BHJP

【ＦＩ】

A61B34/35

A61B34/37

A61B18/00

A61B17/32 510

A61B17/068

G16Y20/00

【審査請求】有

【請求項の数】6

【出願形態】ＯＬ

【外国語出願】

(21)【出願番号】P 2023185406

(22)【出願日】2023-10-30

(62)【分割の表示】P 2020536032の分割

【原出願日】2018-11-14

(31)【優先権主張番号】62/611,339

(32)【優先日】2017-12-28

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/692,768

(32)【優先日】2018-06-30

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/729,191

(32)【優先日】2018-09-10

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/611,340

(32)【優先日】2017-12-28

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/650,887

(32)【優先日】2018-03-30

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/640,415

(32)【優先日】2018-03-08

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/659,900

(32)【優先日】2018-04-19

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/650,877

(32)【優先日】2018-03-30

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/692,748

(32)【優先日】2018-06-30

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/640,417

(32)【優先日】2018-03-08

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/611,341

(32)【優先日】2017-12-28

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/650,898

(32)【優先日】2018-03-30

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/182,269

(32)【優先日】2018-11-06

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/692,747

(32)【優先日】2018-06-30

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】62/650,882

(32)【優先日】2018-03-30

(33)【優先権主張国・地域又は機関】US

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＢＬＵＥＴＯＯＴＨ

(71)【出願人】

【識別番号】517076008

【氏名又は名称】エシコン エルエルシー

【氏名又は名称原語表記】Ｅｔｈｉｃｏｎ ＬＬＣ

【住所又は居所原語表記】＃４７５ Ｓｔｒｅｅｔ Ｃ， Ｓｕｉｔｅ ４０１， Ｌｏｓ Ｆｒａｉｌｅｓ Ｉｎｄｕｓｔｒｉａｌ Ｐａｒｋ， Ｇｕａｙｎａｂｏ， Ｐｕｅｒｔｏ Ｒｉｃｏ ００９６９， Ｕｎｉｔｅｄ Ｓｔａｔｅｓ ｏｆ Ａｍｅｒｉｃａ

(74)【代理人】

【識別番号】100088605

【弁理士】

【氏名又は名称】加藤 公延

(74)【代理人】

【識別番号】100130384

【弁理士】

【氏名又は名称】大島 孝文

(72)【発明者】

【氏名】シェルトン・フレデリック・イー・ザ・フォース

(72)【発明者】

【氏名】ハリス・ジェイソン・エル

(72)【発明者】

【氏名】バクスター・チェスター・オー・ザ・サード

(72)【発明者】

【氏名】ゼイナー・マーク・エス

(57)【要約】      （修正有）

【課題】手術スタッフ員及び外科用装置に関連した状態を判定し、外科用装置を制御するためのシステム及び方法を提供する。
【解決手段】外科用ハブ２１１８０１などのコンピュータシステムが、外科用装置２１１８１０と、手術室を見るように構成されているカメラ２１１８０２とに通信可能に連結されるように構成され得る。コンピュータシステムは、外科処置中の手術室内の手術スタッフ員２１１８０３及び外科用装置の画像を受信するようにプログラムされ得る。コンピュータシステムは、更に、外科処置中に、手術スタッフ員が特定のジェスチャ２１１８０４を行っているかどうかなど、手術スタッフ員及び外科用装置に関連した状態若しくは特質、又は外科用器具などの外科用装置の姿勢を判定し得る。その後、それに応じて、コンピュータシステムは、ペアリングされた外科用装置を制御し得る。
【選択図】図１６

【特許請求の範囲】

【請求項1】

外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されているコンピュータシステムであって、前記コンピュータシステムは、
プロセッサと、
前記プロセッサに連結されたメモリであって、前記メモリは命令を記憶し、前記命令は、前記プロセッサによって実行されると、前記コンピュータシステムに、
前記カメラを介して前記手術室内の個人の画像を受信させ、
前記画像に基づいて前記個人が所与の外科用装置を保持しているかどうかを判定させ、
前記個人に前記所与の外科用装置が保持されていると判定したことに従って前記所与の外科用装置を制御させる、メモリと、を含む、コンピュータシステム。

【請求項2】

前記外科用装置がディスプレイを含み、
前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記ディスプレイ上に表示される情報を前記個人に前記所与の外科用装置が保持されていると判定したことに従って制御させる、請求項１に記載のコンピュータシステム。

【請求項3】

前記ディスプレイ上に表示される前記情報が、前記個人によって制御される外科用器具と対応する、請求項２に記載のコンピュータシステム。

【請求項4】

前記外科用装置が外科用器具を含み、
前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、
前記画像に基づいて前記個人が所与の外科用器具を保持しているかどうかを判定させ、
前記個人に前記所与の外科用装置が保持されていると判定したことに従って、前記所与の外科用器具の動作を変更させる、請求項１に記載のコンピュータシステム。

【請求項5】

前記外科用器具が、電気外科用器具、超音波外科用器具、及び外科用ステープル留め器具からなる群から選択される、請求項４に記載のコンピュータシステム。

【請求項6】

前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、
前記カメラから受信した前記画像から特徴を抽出させ、
抽出された前記特徴が前記所与の外科用装置と対応するかどうかに従って、前記個人が前記所与の外科用装置を保持しているかどうかを判定させる、請求項１に記載のコンピュータシステム。

【発明の詳細な説明】

【技術分野】

【0001】

（関連出願の相互参照）
本出願は、開示の全内容が参照により本明細書に組み込まれる、「ＩＭＡＧＥ ＣＡＰＴＵＲＩＮＧ ＯＦ ＴＨＥ ＡＲＥＡＳ ＯＵＴＳＩＤＥ ＴＨＥ ＡＢＤＯＭＥＮ ＴＯ ＩＭＰＲＯＶＥ ＰＬＡＣＥＭＥＮＴ ＡＮＤ ＣＯＮＴＲＯＬ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥ ＩＮ ＵＳＥ」と題する２０１８年１１月６日出願の米国特許非仮出願第１６／１８２，２６９号の利益を主張する。

【0002】

本出願は、米国特許法第１１９条（ｅ）の下で、その開示全体が参照により本明細書に組み込まれる、「ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ ＲＥＣＯＭＭＥＮＤＡＴＩＯＮＳ ＦＲＯＭ ＲＥＡＬ ＴＩＭＥ ＡＮＡＬＹＳＩＳ ＯＦ ＰＲＯＣＥＤＵＲＥ ＶＡＲＩＡＢＬＥＳ ＡＧＡＩＮＳＴ Ａ ＢＡＳＥＬＩＮＥ ＨＩＧＨＬＩＧＨＴＩＮＧ ＤＩＦＦＥＲＥＮＣＥＳ ＦＲＯＭ ＴＨＥ ＯＰＴＩＭＡＬ ＳＯＬＵＴＩＯＮ」と題する２０１８年９月１０日出願の米国仮特許出願第６２／７２９，１９１号に対する優先権を主張する。

【0003】

本出願は更に、米国特許法第１１９条（ｅ）の下で、各開示の全体が参照により本明細書に組み込まれる、「ＳＭＡＲＴ ＡＣＴＩＶＡＴＩＯＮ ＯＦ ＡＮ ＥＮＥＲＧＹ ＤＥＶＩＣＥ ＢＹ ＡＮＯＴＨＥＲ ＤＥＶＩＣＥ」と題する２０１８年６月３０日出願の米国仮特許出願第６２／６９２，７４７号、「ＳＭＡＲＴ ＥＮＥＲＧＹ ＡＲＣＨＩＴＥＣＴＵＲＥ」と題する２０１８年６月３０日出願の米国仮特許出願第６２／６９２，７４８号、及び「ＳＭＡＲＴ ＥＮＥＲＧＹ ＤＥＶＩＣＥＳ」と題する２０１８年６月３０日出願の米国仮特許出願第６２／６９２，７６８号に対する優先権を主張する。

【0004】

本出願は更に、米国特許法第１１９条（ｅ）の下で、各開示の全体が参照により本明細書に組み込まれる、「ＭＥＴＨＯＤ ＯＦ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ」と題する２０１８年４月１９日出願の米国仮特許出願第６２／６５９，９００号に対する優先権を主張する。

【0005】

本出願は更に、米国特許法第１１９条（ｅ）の下で、各開示の全体が参照により本明細書に組み込まれる、「ＣＡＰＡＣＩＴＩＶＥ ＣＯＵＰＬＥＤ ＲＥＴＵＲＮ ＰＡＴＨ ＰＡＤ ＷＩＴＨ ＳＥＰＡＲＡＢＬＥ ＡＲＲＡＹ ＥＬＥＭＥＮＴＳ」と題する２０１８年３月３０日出願の米国仮特許出願第６２／６５０，８９８号、「ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ ＷＩＴＨ ＯＰＴＩＭＩＺＥＤ ＳＥＮＳＩＮＧ ＣＡＰＡＢＩＬＩＴＩＥＳ」と題する２０１８年３月３０日出願の米国仮特許出願第６２／６５０，８８７号、「ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＭＯＤＵＬＥ ＦＯＲ ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する２０１８年３月３０日出願の米国仮特許出願第６２／６５０，８８２号、及び「ＳＵＲＧＩＣＡＬ ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＳＥＮＳＩＮＧ ＡＮＤ ＣＯＮＴＲＯＬＳ」と題する２０１８年３月３０日出願の米国仮特許出願第６２／６５０，８７７号に対する優先権を主張する。

【0006】

本出願は更に、米国特許法第１１９条（ｅ）の下で、各開示の全体が参照により本明細書に組み込まれる、「ＴＥＭＰＥＲＡＴＵＲＥ ＣＯＮＴＲＯＬ ＩＮ ＵＬＴＲＡＳＯＮＩＣ ＤＥＶＩＣＥ ＡＮＤ ＣＯＮＴＲＯＬ ＳＹＳＴＥＭ ＴＨＥＲＥＦＯＲ」と題する２０１８年３月８日出願の米国仮特許出願第６２／６４０，４１７号、及び「ＥＳＴＩＭＡＴＩＮＧ ＳＴＡＴＥ ＯＦ ＵＬＴＲＡＳＯＮＩＣ ＥＮＤ ＥＦＦＥＣＴＯＲ ＡＮＤ ＣＯＮＴＲＯＬ ＳＹＳＴＥＭ ＴＨＥＲＥＦＯＲ」と題する２０１８年３月８日出願の米国仮特許出願第６２／６４０，４１５号に対する優先権を主張する。

【0007】

本出願は更に、米国特許法第１１９条（ｅ）の下で、各開示の全体が参照により本明細書に組み込まれる、「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する２０１７年１２月２８日出願の米国仮特許出願第６２／６１１，３４１号、「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ」と題する２０１７年１２月２８日出願の米国仮特許出願第６２／６１１，３４０号、及び「ＲＯＢＯＴ ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する２０１７年１２月２８日出願の米国仮特許出願第６２／６１１，３３９号に対する優先権を主張する。

【背景技術】

【0008】

本開示は様々な外科システムに関する。外科処置は、典型的には、例えば、病院などの医療施設内の手術室又は部屋で実行される。滅菌野は、典型的には、患者の周囲に形成される。滅菌野は、適切な衣類を着用した洗浄済みのチーム構成員、並びにその領域内の全ての備品及び固定具を含み得る。様々な外科用装置及びシステムが、外科処置の実行に利用される。

【発明の概要】

【課題を解決するための手段】

【0009】

一般的な一態様では、コンピュータシステムが、外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されている。コンピュータシステムは、プロセッサと、プロセッサに連結されたメモリとを備える。メモリは命令を記憶し、命令は、プロセッサによって実行されると、コンピュータシステムに、カメラを介して手術室内の個人の画像を受信させ、この画像に基づいて個人がジェスチャを行っているかどうかを判定させ、ジェスチャに従って外科用装置を制御させる。

【0010】

別の一般的な一態様では、コンピュータシステムが、外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されている。コンピュータシステムは、プロセッサと、プロセッサに連結されたメモリとを備える。メモリは命令を記憶し、命令は、プロセッサによって実行されると、コンピュータシステムに、カメラを介して手術室内の外科用装置の画像を受信させ、この画像に基づいて外科用装置の姿勢を判定させ、外科用装置の姿勢に従って外科用装置を制御させる。

【0011】

更に別の一般的な一態様では、コンピュータシステムが、外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されている。コンピュータシステムは、プロセッサと、プロセッサに連結されたメモリとを備える。メモリは命令を記憶し、命令は、プロセッサによって実行されると、コンピュータシステムに、カメラを介して手術室内の外科用装置又は個人の画像を受信させ、この画像が外科用装置の画像であるかどうかに従って画像に基づいて外科用装置の姿勢を判定させ、この画像が個人の画像であるかどうかに従って画像に基づいて個人がジェスチャを行っているかどうかを判定させ、外科用装置の姿勢又はジェスチャのうちの少なくとも一方に従って外科用装置を制御させる。

【図面の簡単な説明】

【0012】

様々な態様の新規特徴は、添付の「特許請求の範囲」に具体的に記載される。しかしながら、記載される形態は、構成及び操作の方法のいずれに関しても、以下の記載を添付の図面と共に参照することにより最良に理解され得る。

【0013】

機構、及び動作の方法の両方について、本明細書に記載される様々な態様は、それらの更なる目的及び利点と共に、以降の添付図面と併せて、以下の説明を参照することにより最もよく理解することができる。

【図1】本開示の少なくとも１つの態様による、コンピュータ実装インタラクティブ外科システムのブロック図である。

【図2】本開示の少なくとも１つの態様による、手術室内で外科処置を行うために使用される外科システムである。

【図3】本開示の少なくとも１つの態様による可視化システム、ロボットシステム、及びインテリジェント器具とペアリングされた外科用ハブである。

【図4】本開示の少なくとも１つの態様による、外科用ハブ筐体、及び外科用ハブ筐体のドロアー内に摺動可能に受容可能な組み合わせ発生器モジュールの部分斜視図である。

【図5】本開示の少なくとも１つの態様による、双極、超音波、及び単極接点、並びに排煙構成要素を備える組み合わせ発生器モジュールの斜視図である。

【図6】本開示の少なくとも１つの態様による、複数のモジュールを受容するように構成された横方向モジュール式ハウジングの複数の横方向ドッキングポートの個々の電力バスアタッチメントを示す。

【図7】本開示の少なくとも１つの態様による、複数のモジュールを受容するように構成された垂直モジュール式ハウジングを示す。

【図8】本開示の少なくとも１つの態様による、医療施設の１つ若しくは２つ以上の手術室、又は外科処置のための専門設備を備えた医療施設内の任意の部屋に配置されたモジュール式装置をクラウドに接続するように構成されたモジュール式通信ハブを備える外科用データネットワークを示す。

【図9】本開示の少なくとも１つの態様による、コンピュータ実装インタラクティブ外科システムを示す。

【図10】本開示の少なくとも１つの態様による、モジュール式制御タワーに連結された複数のモジュールを備える外科用ハブを示す。

【図11】本開示の少なくとも１つの態様による、ユニバーサルシリアルバス（Universal Serial Bus、ＵＳＢ）ネットワークハブ装置の一態様を示す。

【図12】本開示の少なくとも１つの態様による、クラウドコンピューティングシステムのクラウド構成要素に接続することができる、外科用ハブに連結された複数のスマート外科用器具を備えるクラウドコンピューティングシステムのブロック図である。

【図13】本開示の少なくとも１つの態様による、クラウドコンピューティングシステムの機能モジュールアーキテクチャである。

【図14】本開示の少なくとも１つの態様による、状況認識外科システムの図を示す。

【図15】本開示の少なくとも１つの態様による、外科用ハブの状況認識を示す予定表である。

【図16】本開示の少なくとも１つの態様による、例示的な手術室（operating room、ＯＲ）セットアップの図である。

【図17A】本開示の少なくとも１つの態様による、外科用装置を制御するためのプロセスの論理フロー図である。

【図17B】本開示の少なくとも１つの態様による、外科用メタデータを生成するためのプロセスの論理フロー図である。

【図18】本開示の少なくとも１つの態様による、ジェスチャ認識システムのブロック図である。

【図19】本開示の少なくとも１つの態様による、外科用器具を保持している外科医を描写した図である。

【図20】本開示の少なくとも１つの態様による、外科処置の結果に対する手首角度の散布図である。

【発明を実施するための形態】

【0014】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年１１月６日出願の以下の米国特許出願を所有する。
・「ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ，ＩＮＳＴＲＵＭＥＮＴ，ＡＮＤ ＣＬＯＵＤ ＲＥＳＰＯＮＳＥＳ ＢＡＳＥＤ ＯＮ ＶＡＬＩＤＡＴＩＯＮ ＯＦ ＲＥＣＥＩＶＥＤ ＤＡＴＡＳＥＴ ＡＮＤ ＡＵＴＨＥＮＴＩＣＡＴＩＯＮ ＯＦ ＩＴＳ ＳＯＵＲＣＥ ＡＮＤ ＩＮＴＥＧＲＩＴＹ」と題する米国特許出願第１６／１８２，２２４号、
・「ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭ ＦＯＲ ＰＲＥＳＥＮＴＩＮＧ ＩＮＦＯＲＭＡＴＩＯＮ ＩＮＴＥＲＰＲＥＴＥＤ ＦＲＯＭ ＥＸＴＥＲＮＡＬ ＤＡＴＡ」と題する米国特許出願第１６／１８２，２３０号、
・「ＭＯＤＩＦＩＣＡＴＩＯＮ ＯＦ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ ＣＯＮＴＲＯＬ ＰＲＯＧＲＡＭＳ ＢＡＳＥＤ ＯＮ ＭＡＣＨＩＮＥ ＬＥＡＲＮＩＮＧ」と題する米国特許出願第１６／１８２，２３３号、
・「ＡＤＪＵＳＴＭＥＮＴ ＯＦ ＤＥＶＩＣＥ ＣＯＮＴＲＯＬ ＰＲＯＧＲＡＭＳ ＢＡＳＥＤ ＯＮ ＳＴＲＡＴＩＦＩＥＤ ＣＯＮＴＥＸＴＵＡＬ ＤＡＴＡ ＩＮ ＡＤＤＩＴＩＯＮ ＴＯ ＴＨＥ ＤＡＴＡ」と題する米国特許出願第１６／１８２，２３９号、
・「ＳＵＲＧＩＣＡＬ ＨＵＢ ＡＮＤ ＭＯＤＵＬＡＲ ＤＥＶＩＣＥ ＲＥＳＰＯＮＳＥ ＡＤＪＵＳＴＭＥＮＴ ＢＡＳＥＤ ＯＮ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ」と題する米国特許出願第１６／１８２，２４３号、
・「ＤＥＴＥＣＴＩＯＮ ＡＮＤ ＥＳＣＡＬＡＴＩＯＮ ＯＦ ＳＥＣＵＲＩＴＹ ＲＥＳＰＯＮＳＥＳ ＯＦ ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴＳ ＴＯ ＩＮＣＲＥＡＳＩＮＧ ＳＥＶＥＲＩＴＹ ＴＨＲＥＡＴＳ」と題する米国特許出願第１６／１８２，２４８号、
・「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭ」と題する米国特許出願第１６／１８２，２５１号、
・「ＡＵＴＯＭＡＴＥＤ ＤＡＴＡ ＳＣＡＬＩＮＧ，ＡＬＩＧＮＭＥＮＴ，ＡＮＤ ＯＲＧＡＮＩＺＩＮＧ ＢＡＳＥＤ ＯＮ ＰＲＥＤＥＦＩＮＥＤ ＰＡＲＡＭＥＴＥＲＳ ＷＩＴＨＩＮ ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫＳ」と題する米国特許出願第１６／１８２，２６０号、
・「ＳＥＮＳＩＮＧ ＴＨＥ ＰＡＴＩＥＮＴ ＰＯＳＩＴＩＯＮ ＡＮＤ ＣＯＮＴＡＣＴ ＵＴＩＬＩＺＩＮＧ ＴＨＥ ＭＯＮＯ－ＰＯＬＡＲ ＲＥＴＵＲＮ ＰＡＤ ＥＬＥＣＴＲＯＤＥ ＴＯ ＰＲＯＶＩＤＥ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ ＴＯ Ａ ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ」と題する米国特許出願第１６／１８２，２６７号、
・「ＰＯＷＥＲＥＤ ＳＵＲＧＩＣＡＬ ＴＯＯＬ ＷＩＴＨ ＰＲＥＤＥＦＩＮＥＤ ＡＤＪＵＳＴＡＢＬＥ ＣＯＮＴＲＯＬ ＡＬＧＯＲＩＴＨＭ ＦＯＲ ＣＯＮＴＲＯＬＬＩＮＧ ＥＮＤ ＥＦＦＥＣＴＯＲ ＰＡＲＡＭＥＴＥＲ」と題する米国特許出願第１６／１８２，２４９号、
・「ＡＤＪＵＳＴＭＥＮＴＳ ＢＡＳＥＤ ＯＮ ＡＩＲＢＯＲＮＥ ＰＡＲＴＩＣＬＥ ＰＲＯＰＥＲＴＩＥＳ」と題する米国特許出願第１６／１８２，２４６号、
・「ＡＤＪＵＳＴＭＥＮＴ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥ ＦＵＮＣＴＩＯＮ ＢＡＳＥＤ ＯＮ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ」と題する米国特許出願第１６／１８２，２５６号、
・「ＲＥＡＬ－ＴＩＭＥ ＡＮＡＬＹＳＩＳ ＯＦ ＣＯＭＰＲＥＨＥＮＳＩＶＥ ＣＯＳＴ ＯＦ ＡＬＬ ＩＮＳＴＲＵＭＥＮＴＡＴＩＯＮ ＵＳＥＤ ＩＮ ＳＵＲＧＥＲＹ ＵＴＩＬＩＺＩＮＧ ＤＡＴＡ ＦＬＵＩＤＩＴＹ ＴＯ ＴＲＡＣＫ ＩＮＳＴＲＵＭＥＮＴＳ ＴＨＲＯＵＧＨ ＳＴＯＣＫＩＮＧ ＡＮＤ ＩＮ－ＨＯＵＳＥ ＰＲＯＣＥＳＳＥＳ」と題する米国特許出願第１６／１８２，２４２号、
・「ＵＳＡＧＥ ＡＮＤ ＴＥＣＨＮＩＱＵＥ ＡＮＡＬＹＳＩＳ ＯＦ ＳＵＲＧＥＯＮ／ＳＴＡＦＦ ＰＥＲＦＯＲＭＡＮＣＥ ＡＧＡＩＮＳＴ Ａ ＢＡＳＥＬＩＮＥ ＴＯ ＯＰＴＩＭＩＺＥ ＤＥＶＩＣＥ ＵＴＩＬＩＺＡＴＩＯＮ ＡＮＤ ＰＥＲＦＯＲＭＡＮＣＥ ＦＯＲ ＢＯＴＨ ＣＵＲＲＥＮＴ ＡＮＤ ＦＵＴＵＲＥ ＰＲＯＣＥＤＵＲＥＳ」と題する米国特許出願第１６／１８２，２５５号、
・「ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＯＦ ＤＡＴＡ ＷＨＥＲＥ Ａ ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ ＩＳ ＵＳＩＮＧ ＣＯＮＴＥＸＴ ＯＦ ＴＨＥ ＤＡＴＡ ＡＮＤ ＲＥＱＵＩＲＥＭＥＮＴＳ ＯＦ Ａ ＲＥＣＥＩＶＩＮＧ ＳＹＳＴＥＭ／ＵＳＥＲ ＴＯ ＩＮＦＬＵＥＮＣＥ ＩＮＣＬＵＳＩＯＮ ＯＲ ＬＩＮＫＡＧＥ ＯＦ ＤＡＴＡ ＡＮＤ ＭＥＴＡＤＡＴＡ ＴＯ ＥＳＴＡＢＬＩＳＨ ＣＯＮＴＩＮＵＩＴＹ」と題する米国特許出願第１６／１８２，２７８号、
・「ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ ＲＥＣＯＭＭＥＮＤＡＴＩＯＮＳ ＦＲＯＭ ＲＥＡＬ ＴＩＭＥ ＡＮＡＬＹＳＩＳ ＯＦ ＰＲＯＣＥＤＵＲＥ ＶＡＲＩＡＢＬＥＳ ＡＧＡＩＮＳＴ Ａ ＢＡＳＥＬＩＮＥ ＨＩＧＨＬＩＧＨＴＩＮＧ ＤＩＦＦＥＲＥＮＣＥＳ ＦＲＯＭ ＴＨＥ ＯＰＴＩＭＡＬ ＳＯＬＵＴＩＯＮ」と題する米国特許出願第１６／１８２，２９０号、
・「ＣＯＮＴＲＯＬ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭ ＴＨＲＯＵＧＨ Ａ ＳＵＲＧＩＣＡＬ ＢＡＲＲＩＥＲ」と題する米国特許出願第１６／１８２，２３２号、
・「ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ ＤＥＴＥＲＭＩＮＡＴＩＯＮ ＯＦ ＰＲＩＯＲＩＴＩＺＡＴＩＯＮ ＯＦ ＣＯＭＭＵＮＩＣＡＴＩＯＮ，ＩＮＴＥＲＡＣＴＩＯＮ，ＯＲ ＰＲＯＣＥＳＳＩＮＧ ＢＡＳＥＤ ＯＮ ＳＹＳＴＥＭ ＯＲ ＤＥＶＩＣＥ ＮＥＥＤＳ」と題する米国特許出願第１６／１８２，２２７号、
・「ＷＩＲＥＬＥＳＳ ＰＡＩＲＩＮＧ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥ ＷＩＴＨ ＡＮＯＴＨＥＲ ＤＥＶＩＣＥ ＷＩＴＨＩＮ Ａ ＳＴＥＲＩＬＥ ＳＵＲＧＩＣＡＬ ＦＩＥＬＤ ＢＡＳＥＤ ＯＮ ＴＨＥ ＵＳＡＧＥ ＡＮＤ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ ＯＦ ＤＥＶＩＣＥＳ」と題する米国特許出願第１６／１８２，２３１号、
・「ＡＤＪＵＳＴＭＥＮＴ ＯＦ ＳＴＡＰＬＥ ＨＥＩＧＨＴ ＯＦ ＡＴ ＬＥＡＳＴ ＯＮＥ ＲＯＷ ＯＦ ＳＴＡＰＬＥＳ ＢＡＳＥＤ ＯＮ ＴＨＥ ＳＥＮＳＥＤ ＴＩＳＳＵＥ ＴＨＩＣＫＮＥＳＳ ＯＲ ＦＯＲＣＥ ＩＮ ＣＬＯＳＩＮＧ」と題する米国特許出願第１６／１８２，２２９号、
・「ＳＴＡＰＬＩＮＧ ＤＥＶＩＣＥ ＷＩＴＨ ＢＯＴＨ ＣＯＭＰＵＬＳＯＲＹ ＡＮＤ ＤＩＳＣＲＥＴＩＯＮＡＲＹ ＬＯＣＫＯＵＴＳ ＢＡＳＥＤ ＯＮ ＳＥＮＳＥＤ ＰＡＲＡＭＥＴＥＲＳ」と題する米国特許出願第１６／１８２，２３４号、
・「ＰＯＷＥＲＥＤ ＳＴＡＰＬＩＮＧ ＤＥＶＩＣＥ ＣＯＮＦＩＧＵＲＥＤ ＴＯ ＡＤＪＵＳＴ ＦＯＲＣＥ，ＡＤＶＡＮＣＥＭＥＮＴ ＳＰＥＥＤ，ＡＮＤ ＯＶＥＲＡＬＬ ＳＴＲＯＫＥ ＯＦ ＣＵＴＴＩＮＧ ＭＥＭＢＥＲ ＢＡＳＥＤ ＯＮ ＳＥＮＳＥＤ ＰＡＲＡＭＥＴＥＲ ＯＦ ＦＩＲＩＮＧ ＯＲ ＣＬＡＭＰＩＮＧ」と題する米国特許出願第１６／１８２，２４０号、
・「ＶＡＲＩＡＴＩＯＮ ＯＦ ＲＡＤＩＯ ＦＲＥＱＵＥＮＣＹ ＡＮＤ ＵＬＴＲＡＳＯＮＩＣ ＰＯＷＥＲ ＬＥＶＥＬ ＩＮ ＣＯＯＰＥＲＡＴＩＯＮ ＷＩＴＨ ＶＡＲＹＩＮＧ ＣＬＡＭＰ ＡＲＭ ＰＲＥＳＳＵＲＥ ＴＯ ＡＣＨＩＥＶＥ ＰＲＥＤＥＦＩＮＥＤ ＨＥＡＴ ＦＬＵＸ ＯＲ ＰＯＷＥＲ ＡＰＰＬＩＥＤ ＴＯ ＴＩＳＳＵＥ」と題する米国特許出願第１６／１８２，２３５号、及び
・「ＵＬＴＲＡＳＯＮＩＣ ＥＮＥＲＧＹ ＤＥＶＩＣＥ ＷＨＩＣＨ ＶＡＲＩＥＳ ＰＲＥＳＳＵＲＥ ＡＰＰＬＩＥＤ ＢＹ ＣＬＡＭＰ ＡＲＭ ＴＯ ＰＲＯＶＩＤＥ ＴＨＲＥＳＨＯＬＤ ＣＯＮＴＲＯＬ ＰＲＥＳＳＵＲＥ ＡＴ Ａ ＣＵＴ ＰＲＯＧＲＥＳＳＩＯＮ ＬＯＣＡＴＩＯＮ」と題する米国特許出願第１６／１８２，２３８号。

【0015】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年９月１０日出願の以下の米国特許出願を所有する。
・「Ａ ＣＯＮＴＲＯＬ ＦＯＲ Ａ ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ ＯＲ ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ ＣＯＮＮＥＣＴＥＤ ＤＥＶＩＣＥ ＴＨＡＴ ＡＤＪＵＳＴＳ ＩＴＳ ＦＵＮＣＴＩＯＮ ＢＡＳＥＤ ＯＮ Ａ ＳＥＮＳＥＤ ＳＩＴＵＡＴＩＯＮ ＯＲ ＵＳＡＧＥ」と題する米国特許仮出願第６２／７２９，１８３号、
・「ＡＵＴＯＭＡＴＥＤ ＤＡＴＡ ＳＣＡＬＩＮＧ，ＡＬＩＧＮＭＥＮＴ，ＡＮＤ ＯＲＧＡＮＩＺＩＮＧ ＢＡＳＥＤ ＯＮ ＰＲＥＤＥＦＩＮＥＤ ＰＡＲＡＭＥＴＥＲＳ ＷＩＴＨＩＮ Ａ ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ ＢＥＦＯＲＥ ＴＲＡＮＳＭＩＳＳＩＯＮ」と題する米国特許仮出願第６２／７２９，１７７号、
・「ＩＮＤＩＲＥＣＴ ＣＯＭＭＡＮＤ ＡＮＤ ＣＯＮＴＲＯＬ ＯＦ Ａ ＦＩＲＳＴ ＯＰＥＲＡＴＩＮＧ ＲＯＯＭ ＳＹＳＴＥＭ ＴＨＲＯＵＧＨ ＴＨＥ ＵＳＥ ＯＦ Ａ ＳＥＣＯＮＤ ＯＰＥＲＡＴＩＮＧ ＲＯＯＭ ＳＹＳＴＥＭ ＷＩＴＨＩＮ Ａ ＳＴＥＲＩＬＥ ＦＩＥＬＤ ＷＨＥＲＥ ＴＨＥ ＳＥＣＯＮＤ ＯＰＥＲＡＴＩＮＧ ＲＯＯＭ ＳＹＳＴＥＭ ＨＡＳ ＰＲＩＭＡＲＹ ＡＮＤ ＳＥＣＯＮＤＡＲＹ ＯＰＥＲＡＴＩＮＧ ＭＯＤＥＳ」と題する米国特許仮出願第６２／７２９，１７６号、
・「ＰＯＷＥＲＥＤ ＳＴＡＰＬＩＮＧ ＤＥＶＩＣＥ ＴＨＡＴ ＩＳ ＣＡＰＡＢＬＥ ＯＦ ＡＤＪＵＳＴＩＮＧ ＦＯＲＣＥ，ＡＤＶＡＮＣＥＭＥＮＴ ＳＰＥＥＤ，ＡＮＤ ＯＶＥＲＡＬＬ ＳＴＲＯＫＥ ＯＦ ＣＵＴＴＩＮＧ ＭＥＭＢＥＲ ＯＦ ＴＨＥ ＤＥＶＩＣＥ ＢＡＳＥＤ ＯＮ ＳＥＮＳＥＤ ＰＡＲＡＭＥＴＥＲ ＯＦ ＦＩＲＩＮＧ ＯＲ ＣＬＡＭＰＩＮＧ」と題する米国特許仮出願第６２／７２９，１８５号、
・「ＰＯＷＥＲＥＤ ＳＵＲＧＩＣＡＬ ＴＯＯＬ ＷＩＴＨ Ａ ＰＲＥＤＥＦＩＮＥＤ ＡＤＪＵＳＴＡＢＬＥ ＣＯＮＴＲＯＬ ＡＬＧＯＲＩＴＨＭ ＦＯＲ ＣＯＮＴＲＯＬＬＩＮＧ ＡＴ ＬＥＡＳＴ ＯＮＥ ＥＮＤ ＥＦＦＥＣＴＯＲ ＰＡＲＡＭＥＴＥＲ ＡＮＤ Ａ ＭＥＡＮＳ ＦＯＲ ＬＩＭＩＴＩＮＧ ＴＨＥ ＡＤＪＵＳＴＭＥＮＴ」と題する米国特許仮出願第６２／７２９，１８４号、
・「ＳＥＮＳＩＮＧ ＴＨＥ ＰＡＴＩＥＮＴ ＰＯＳＩＴＩＯＮ ＡＮＤ ＣＯＮＴＡＣＴ ＵＴＩＬＩＺＩＮＧ ＴＨＥ ＭＯＮＯ ＰＯＬＡＲ ＲＥＴＵＲＮ ＰＡＤ ＥＬＥＣＴＲＯＤＥ ＴＯ ＰＲＯＶＩＤＥ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ ＴＯ ＴＨＥ ＨＵＢ」と題する米国特許仮出願第６２／７２９，１８２号、
・「ＳＵＲＧＩＣＡＬ ＮＥＴＷＯＲＫ ＲＥＣＯＭＭＥＮＤＡＴＩＯＮＳ ＦＲＯＭ ＲＥＡＬ ＴＩＭＥ ＡＮＡＬＹＳＩＳ ＯＦ ＰＲＯＣＥＤＵＲＥ ＶＡＲＩＡＢＬＥＳ ＡＧＡＩＮＳＴ Ａ ＢＡＳＥＬＩＮＥ ＨＩＧＨＬＩＧＨＴＩＮＧ ＤＩＦＦＥＲＥＮＣＥＳ ＦＲＯＭ ＴＨＥ ＯＰＴＩＭＡＬ ＳＯＬＵＴＩＯＮ」と題する米国特許仮出願第６２／７２９，１９１号、
・「ＵＬＴＲＡＳＯＮＩＣ ＥＮＥＲＧＹ ＤＥＶＩＣＥ ＷＨＩＣＨ ＶＡＲＩＥＳ ＰＲＥＳＳＵＲＥ ＡＰＰＬＩＥＤ ＢＹ ＣＬＡＭＰ ＡＲＭ ＴＯ ＰＲＯＶＩＤＥ ＴＨＲＥＳＨＯＬＤ ＣＯＮＴＲＯＬ ＰＲＥＳＳＵＲＥ ＡＴ Ａ ＣＵＴ ＰＲＯＧＲＥＳＳＩＯＮ ＬＯＣＡＴＩＯＮ」と題する米国特許仮出願第６２／７２９，１９５号、及び
・「ＷＩＲＥＬＥＳＳ ＰＡＩＲＩＮＧ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥ ＷＩＴＨ ＡＮＯＴＨＥＲ ＤＥＶＩＣＥ ＷＩＴＨＩＮ Ａ ＳＴＥＲＩＬＥ ＳＵＲＧＩＣＡＬ ＦＩＥＬＤ ＢＡＳＥＤ ＯＮ ＴＨＥ ＵＳＡＧＥ ＡＮＤ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ ＯＦ ＤＥＶＩＣＥＳ」と題する米国特許仮出願第６２／７２９，１８６号。

【0016】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年８月２８日出願の以下の米国特許出願を所有する。
・「ＥＳＴＩＭＡＴＩＮＧ ＳＴＡＴＥ ＯＦ ＵＬＴＲＡＳＯＮＩＣ ＥＮＤ ＥＦＦＥＣＴＯＲ ＡＮＤ ＣＯＮＴＲＯＬ ＳＹＳＴＥＭ ＴＨＥＲＥＦＯＲ」と題する米国特許出願第１６／１１５，２１４号、
・「ＴＥＭＰＥＲＡＴＵＲＥ ＣＯＮＴＲＯＬ ＯＦ ＵＬＴＲＡＳＯＮＩＣ ＥＮＤ ＥＦＦＥＣＴＯＲ ＡＮＤ ＣＯＮＴＲＯＬ ＳＹＳＴＥＭ ＴＨＥＲＥＦＯＲ」と題する米国特許出願第１６／１１５，２０５号、
・「ＲＡＤＩＯ ＦＲＥＱＵＥＮＣＹ ＥＮＥＲＧＹ ＤＥＶＩＣＥ ＦＯＲ ＤＥＬＩＶＥＲＩＮＧ ＣＯＭＢＩＮＥＤ ＥＬＥＣＴＲＩＣＡＬ ＳＩＧＮＡＬＳ」と題する米国特許出願第１６／１１５，２３３号、
・「ＣＯＮＴＲＯＬＬＩＮＧ ＡＮ ＵＬＴＲＡＳＯＮＩＣ ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＡＣＣＯＲＤＩＮＧ ＴＯ ＴＩＳＳＵＥ ＬＯＣＡＴＩＯＮ」と題する米国特許出願第１６／１１５，２０８号、
・「ＣＯＮＴＲＯＬＬＩＮＧ ＡＣＴＩＶＡＴＩＯＮ ＯＦ ＡＮ ＵＬＴＲＡＳＯＮＩＣ ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＡＣＣＯＲＤＩＮＧ ＴＯ ＴＨＥ ＰＲＥＳＥＮＣＥ ＯＦ ＴＩＳＳＵＥ」と題する米国特許出願第１６／１１５，２２０号、
・「ＤＥＴＥＲＭＩＮＩＮＧ ＴＩＳＳＵＥ ＣＯＭＰＯＳＩＴＩＯＮ ＶＩＡ ＡＮ ＵＬＴＲＡＳＯＮＩＣ ＳＹＳＴＥＭ」と題する米国特許出願第１６／１１５，２３２号、
・「ＤＥＴＥＲＭＩＮＩＮＧ ＴＨＥ ＳＴＡＴＥ ＯＦ ＡＮ ＵＬＴＲＡＳＯＮＩＣ ＥＬＥＣＴＲＯＭＥＣＨＡＮＩＣＡＬ ＳＹＳＴＥＭ ＡＣＣＯＲＤＩＮＧ ＴＯ ＦＲＥＱＵＥＮＣＹ ＳＨＩＦＴ」と題する米国特許出願第１６／１１５，２３９号、
・「ＤＥＴＥＲＭＩＮＩＮＧ ＴＨＥ ＳＴＡＴＥ ＯＦ ＡＮ ＵＬＴＲＡＳＯＮＩＣ ＥＮＤ ＥＦＦＥＣＴＯＲ」と題する米国特許出願第１６／１１５，２４７号、
・「ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ ＯＦ ＥＬＥＣＴＲＯＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ」と題する米国特許出願第１６／１１５，２１１号、
・「ＭＥＣＨＡＮＩＳＭＳ ＦＯＲ ＣＯＮＴＲＯＬＬＩＮＧ ＤＩＦＦＥＲＥＮＴ ＥＬＥＣＴＲＯＭＥＣＨＡＮＩＣＡＬ ＳＹＳＴＥＭＳ ＯＦ ＡＮ ＥＬＥＣＴＲＯＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ」と題する米国特許出願第１６／１１５，２２６号、
・「ＤＥＴＥＣＴＩＯＮ ＯＦ ＥＮＤ ＥＦＦＥＣＴＯＲ ＩＭＭＥＲＳＩＯＮ ＩＮ ＬＩＱＵＩＤ」と題する米国特許出願第１６／１１５，２４０号、
・「ＩＮＴＥＲＲＵＰＴＩＯＮ ＯＦ ＥＮＥＲＧＹ ＤＵＥ ＴＯ ＩＮＡＤＶＥＲＴＥＮＴ ＣＡＰＡＣＩＴＩＶＥ ＣＯＵＰＬＩＮＧ」と題する米国特許出願第１６／１１５，２４９号、
・「ＩＮＣＲＥＡＳＩＮＧ ＲＡＤＩＯ ＦＲＥＱＵＥＮＣＹ ＴＯ ＣＲＥＡＴＥ ＰＡＤ－ＬＥＳＳ ＭＯＮＯＰＯＬＡＲ ＬＯＯＰ」と題する米国特許出願第１６／１１５，２５６号、
・「ＢＩＰＯＬＡＲ ＣＯＭＢＩＮＡＴＩＯＮ ＤＥＶＩＣＥ ＴＨＡＴ ＡＵＴＯＭＡＴＩＣＡＬＬＹ ＡＤＪＵＳＴＳ ＰＲＥＳＳＵＲＥ ＢＡＳＥＤ ＯＮ ＥＮＥＲＧＹ ＭＯＤＡＬＩＴＹ」と題する米国特許出願第１６／１１５，２２３号、及び
・「ＡＣＴＩＶＡＴＩＯＮ ＯＦ ＥＮＥＲＧＹ ＤＥＶＩＣＥＳ」と題する米国特許出願第１６／１１５，２３８号。

【0017】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年８月２３日出願の以下の米国特許出願を所有する。
・「ＣＯＮＴＲＯＬＬＩＮＧ ＡＮ ＵＬＴＲＡＳＯＮＩＣ ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＡＣＣＯＲＤＩＮＧ ＴＯ ＴＩＳＳＵＥ ＬＯＣＡＴＩＯＮ」と題する米国特許仮出願第６２／７２１，９９５号、
・「ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ ＯＦ ＥＬＥＣＴＲＯＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ」と題する米国特許仮出願第６２／７２１，９９８号、
・「ＩＮＴＥＲＲＵＰＴＩＯＮ ＯＦ ＥＮＥＲＧＹ ＤＵＥ ＴＯ ＩＮＡＤＶＥＲＴＥＮＴ ＣＡＰＡＣＩＴＩＶＥ ＣＯＵＰＬＩＮＧ」と題する米国特許仮出願第６２／７２１，９９９号、
・「ＢＩＰＯＬＡＲ ＣＯＭＢＩＮＡＴＩＯＮ ＤＥＶＩＣＥ ＴＨＡＴ ＡＵＴＯＭＡＴＩＣＡＬＬＹ ＡＤＪＵＳＴＳ ＰＲＥＳＳＵＲＥ ＢＡＳＥＤ ＯＮ ＥＮＥＲＧＹ ＭＯＤＡＬＩＴＹ」と題する米国特許仮出願第６２／７２１，９９４号、及び
・「ＲＡＤＩＯ ＦＲＥＱＵＥＮＣＹ ＥＮＥＲＧＹ ＤＥＶＩＣＥ ＦＯＲ ＤＥＬＩＶＥＲＩＮＧ ＣＯＭＢＩＮＥＤ ＥＬＥＣＴＲＩＣＡＬ ＳＩＧＮＡＬＳ」と題する米国特許仮出願第６２／７２１，９９６号。

【0018】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年６月３０日出願の以下の米国特許出願を所有する。
・「ＳＭＡＲＴ ＡＣＴＩＶＡＴＩＯＮ ＯＦ ＡＮ ＥＮＥＲＧＹ ＤＥＶＩＣＥ ＢＹ ＡＮＯＴＨＥＲ ＤＥＶＩＣＥ」と題する米国特許仮出願第６２／６９２，７４７号、
・「ＳＭＡＲＴ ＥＮＥＲＧＹ ＡＲＣＨＩＴＥＣＴＵＲＥ」と題する米国特許仮出願第６２／６９２，７４８号、及び
・「ＳＭＡＲＴ ＥＮＥＲＧＹ ＤＥＶＩＣＥＳ」と題する米国特許仮出願第６２／６９２，７６８号。

【0019】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年６月２９日出願の以下の米国特許出願を所有する。
・「ＣＡＰＡＣＩＴＩＶＥ ＣＯＵＰＬＥＤ ＲＥＴＵＲＮ ＰＡＴＨ ＰＡＤ ＷＩＴＨ ＳＥＰＡＲＡＢＬＥ ＡＲＲＡＹ ＥＬＥＭＥＮＴＳ」と題する米国特許出願第１６／０２４，０９０号、
・「ＣＯＮＴＲＯＬＬＩＮＧ Ａ ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＡＣＣＯＲＤＩＮＧ ＴＯ ＳＥＮＳＥＤ ＣＬＯＳＵＲＥ ＰＡＲＡＭＥＴＥＲＳ」と題する米国特許出願第１６／０２４，０５７号、
・「ＳＹＳＴＥＭＳ ＦＯＲ ＡＤＪＵＳＴＩＮＧ ＥＮＤ ＥＦＦＥＣＴＯＲ ＰＡＲＡＭＥＴＥＲＳ ＢＡＳＥＤ ＯＮ ＰＥＲＩＯＰＥＲＡＴＩＶＥ ＩＮＦＯＲＭＡＴＩＯＮ」と題する米国特許出願第１６／０２４，０６７号、
・「ＳＡＦＥＴＹ ＳＹＳＴＥＭＳ ＦＯＲ ＳＭＡＲＴ ＰＯＷＥＲＥＤ ＳＵＲＧＩＣＡＬ ＳＴＡＰＬＩＮＧ」と題する米国特許出願第１６／０２４，０７５号、
・「ＳＡＦＥＴＹ ＳＹＳＴＥＭＳ ＦＯＲ ＳＭＡＲＴ ＰＯＷＥＲＥＤ ＳＵＲＧＩＣＡＬ ＳＴＡＰＬＩＮＧ」と題する米国特許出願第１６／０２４，０８３号、
・「ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ ＦＯＲ ＤＥＴＥＣＴＩＮＧ ＥＮＤ ＥＦＦＥＣＴＯＲ ＴＩＳＳＵＥ ＤＩＳＴＲＩＢＵＴＩＯＮ ＩＲＲＥＧＵＬＡＲＩＴＩＥＳ」と題する米国特許出願第１６／０２４，０９４号、
・「ＳＹＳＴＥＭＳ ＦＯＲ ＤＥＴＥＣＴＩＮＧ ＰＲＯＸＩＭＩＴＹ ＯＦ ＳＵＲＧＩＣＡＬ ＥＮＤ ＥＦＦＥＣＴＯＲ ＴＯ ＣＡＮＣＥＲＯＵＳ ＴＩＳＳＵＥ」と題する米国特許出願第１６／０２４，１３８号、
・「ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＣＡＲＴＲＩＤＧＥ ＳＥＮＳＯＲ ＡＳＳＥＭＢＬＩＥＳ」と題する米国特許出願第１６／０２４，１５０号、
・「ＶＡＲＩＡＢＬＥ ＯＵＴＰＵＴ ＣＡＲＴＲＩＤＧＥ ＳＥＮＳＯＲ ＡＳＳＥＭＢＬＹ」と題する米国特許出願第１６／０２４，１６０号、
・「ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＨＡＶＩＮＧ Ａ ＦＬＥＸＩＢＬＥ ＥＬＥＣＴＲＯＤＥ」と題する米国特許出願第１６／０２４，１２４号、
・「ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＨＡＶＩＮＧ Ａ ＦＬＥＸＩＢＬＥ ＣＩＲＣＵＩＴ」と題する米国特許出願第１６／０２４，１３２号、
・「ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＷＩＴＨ Ａ ＴＩＳＳＵＥ ＭＡＲＫＩＮＧ ＡＳＳＥＭＢＬＹ」と題する米国特許出願第１６／０２４，１４１号、
・「ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ ＷＩＴＨ ＰＲＩＯＲＩＴＩＺＥＤ ＤＡＴＡ ＴＲＡＮＳＭＩＳＳＩＯＮ ＣＡＰＡＢＩＬＩＴＩＥＳ」と題する米国特許出願第１６／０２４，１６２号、
・「ＳＵＲＧＩＣＡＬ ＥＶＡＣＵＡＴＩＯＮ ＳＥＮＳＩＮＧ ＡＮＤ ＭＯＴＯＲ ＣＯＮＴＲＯＬ」と題する米国特許出願第１６／０２４，０６６号、
・「ＳＵＲＧＩＣＡＬ ＥＶＡＣＵＡＴＩＯＮ ＳＥＮＳＯＲ ＡＲＲＡＮＧＥＭＥＮＴＳ」と題する米国特許出願第１６／０２４，０９６号、
・「ＳＵＲＧＩＣＡＬ ＥＶＡＣＵＡＴＩＯＮ ＦＬＯＷ ＰＡＴＨＳ」と題する米国特許出願第１６／０２４，１１６号、
・「ＳＵＲＧＩＣＡＬ ＥＶＡＣＵＡＴＩＯＮ ＳＥＮＳＩＮＧ ＡＮＤ ＧＥＮＥＲＡＴＯＲ ＣＯＮＴＲＯＬ」と題する米国特許出願第１６／０２４，１４９号、
・「ＳＵＲＧＩＣＡＬ ＥＶＡＣＵＡＴＩＯＮ ＳＥＮＳＩＮＧ ＡＮＤ ＤＩＳＰＬＡＹ」と題する米国特許出願第１６／０２４，１８０号、
・「ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＯＦ ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＳＹＳＴＥＭ ＰＡＲＡＭＥＴＥＲＳ ＴＯ ＨＵＢ ＯＲ ＣＬＯＵＤ ＩＮ ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＭＯＤＵＬＥ ＦＯＲ ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許出願第１６／０２４，２４５号、
・「ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＳＹＳＴＥＭ ＩＮＣＬＵＤＩＮＧ Ａ ＳＥＧＭＥＮＴＥＤ ＣＯＮＴＲＯＬ ＣＩＲＣＵＩＴ ＦＯＲ ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許出願第１６／０２４，２５８号、
・「ＳＵＲＧＩＣＡＬ ＥＶＡＣＵＡＴＩＯＮ ＳＹＳＴＥＭ ＷＩＴＨ Ａ ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＣＩＲＣＵＩＴ ＦＯＲ ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＢＥＴＷＥＥＮ Ａ ＦＩＬＴＥＲ ＡＮＤ Ａ ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＤＥＶＩＣＥ」と題する米国特許出願第１６／０２４，２６５号、及び
・「ＤＵＡＬ ＩＮ－ＳＥＲＩＥＳ ＬＡＲＧＥ ＡＮＤ ＳＭＡＬＬ ＤＲＯＰＬＥＴ ＦＩＬＴＥＲＳ」と題する米国特許出願第１６／０２４，２７３号。

【0020】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年６月２８日出願の以下の米国仮特許出願を所有する。
・「Ａ ＭＥＴＨＯＤ ＯＦ ＵＳＩＮＧ ＲＥＩＮＦＯＲＣＥＤ ＦＬＥＸ ＣＩＲＣＵＩＴＳ ＷＩＴＨ ＭＵＬＴＩＰＬＥ ＳＥＮＳＯＲＳ ＷＩＴＨ ＥＬＥＣＴＲＯＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥＳ」と題する米国仮特許出願第６２／６９１，２２８号、
・「ＣＯＮＴＲＯＬＬＩＮＧ Ａ ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＡＣＣＯＲＤＩＮＧ ＴＯ ＳＥＮＳＥＤ ＣＬＯＳＵＲＥ ＰＡＲＡＭＥＴＥＲＳ」と題する米国仮特許出願第６２／６９１，２２７号、
・「ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＨＡＶＩＮＧ Ａ ＦＬＥＸＩＢＬＥ ＥＬＥＣＴＲＯＤＥ」と題する米国特許仮出願第６２／６９１，２３０号、
・「ＳＵＲＧＩＣＡＬ ＥＶＡＣＵＡＴＩＯＮ ＳＥＮＳＩＮＧ ＡＮＤ ＭＯＴＯＲ ＣＯＮＴＲＯＬ」と題する米国特許仮出願第６２／６９１，２１９号、
・「ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＯＦ ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＳＹＳＴＥＭ ＰＡＲＡＭＥＴＥＲＳ ＴＯ ＨＵＢ ＯＲ ＣＬＯＵＤ ＩＮ ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＭＯＤＵＬＥ ＦＯＲ ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許仮出願第６２／６９１，２５７号、
・「ＳＵＲＧＩＣＡＬ ＥＶＡＣＵＡＴＩＯＮ ＳＹＳＴＥＭ ＷＩＴＨ Ａ ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＣＩＲＣＵＩＴ ＦＯＲ ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＢＥＴＷＥＥＮ Ａ ＦＩＬＴＥＲ ＡＮＤ Ａ ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＤＥＶＩＣＥ」と題する米国特許仮出願第６２／６９１，２６２号、及び
・「ＤＵＡＬ ＩＮ－ＳＥＲＩＥＳ ＬＡＲＧＥ ＡＮＤ ＳＭＡＬＬ ＤＲＯＰＬＥＴ ＦＩＬＴＥＲＳ」と題する米国特許仮出願第６２／６９１，２５１号。

【0021】

本願の出願人は、開示の全体が参照により本明細書に組み込まれる、２０１８年４月１９日出願の以下の米国特許仮出願を所有する。
・「ＭＥＴＨＯＤ ＯＦ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ」と題する米国特許仮出願第６２／６５９，９００号。

【0022】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年３月３０日出願の以下の米国仮特許出願を所有する。
・「ＣＡＰＡＣＩＴＩＶＥ ＣＯＵＰＬＥＤ ＲＥＴＵＲＮ ＰＡＴＨ ＰＡＤ ＷＩＴＨ ＳＥＰＡＲＡＢＬＥ ＡＲＲＡＹ ＥＬＥＭＥＮＴＳ」と題する２０１８年３月３０日出願の米国特許仮出願第６２／６５０，８９８号、
・「ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ ＷＩＴＨ ＯＰＴＩＭＩＺＥＤ ＳＥＮＳＩＮＧ ＣＡＰＡＢＩＬＩＴＩＥＳ」と題する米国特許仮出願第６２／６５０，８８７号、
・「ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＭＯＤＵＬＥ ＦＯＲ ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許仮出願第６２／６５０，８８２号、及び
・「ＳＵＲＧＩＣＡＬ ＳＭＯＫＥ ＥＶＡＣＵＡＴＩＯＮ ＳＥＮＳＩＮＧ ＡＮＤ ＣＯＮＴＲＯＬＳ」と題する米国仮特許出願第６２／６５０，８７７号。

【0023】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年３月２９日出願の以下の米国特許出願を所有する。
・「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ ＷＩＴＨ ＥＮＣＲＹＰＴＥＤ ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＣＡＰＡＢＩＬＩＴＩＥＳ」と題する米国特許出願第１５／９４０，６４１号、
・「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ ＷＩＴＨ ＣＯＮＤＩＴＩＯＮ ＨＡＮＤＬＩＮＧ ＯＦ ＤＥＶＩＣＥＳ ＡＮＤ ＤＡＴＡ ＣＡＰＡＢＩＬＩＴＩＥＳ」と題する米国特許出願第１５／９４０，６４８号、
・「ＳＵＲＧＩＣＡＬ ＨＵＢ ＣＯＯＲＤＩＮＡＴＩＯＮ ＯＦ ＣＯＮＴＲＯＬ ＡＮＤ ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＯＦ ＯＰＥＲＡＴＩＮＧ ＲＯＯＭ ＤＥＶＩＣＥＳ」と題する米国特許出願第１５／９４０，６５６号、
・「ＳＰＡＴＩＡＬ ＡＷＡＲＥＮＥＳＳ ＯＦ ＳＵＲＧＩＣＡＬ ＨＵＢＳ ＩＮ ＯＰＥＲＡＴＩＮＧ ＲＯＯＭＳ」と題する米国特許出願第１５／９４０，６６６号、
・「ＣＯＯＰＥＲＡＴＩＶＥ ＵＴＩＬＩＺＡＴＩＯＮ ＯＦ ＤＡＴＡ ＤＥＲＩＶＥＤ ＦＲＯＭ ＳＥＣＯＮＤＡＲＹ ＳＯＵＲＣＥＳ ＢＹ ＩＮＴＥＬＬＩＧＥＮＴ ＳＵＲＧＩＣＡＬ ＨＵＢＳ」と題する米国特許出願第１５／９４０，６７０号、
・「ＳＵＲＧＩＣＡＬ ＨＵＢ ＣＯＮＴＲＯＬ ＡＲＲＡＮＧＥＭＥＮＴＳ」と題する米国特許出願第１５／９４０，６７７号、
・「ＤＡＴＡ ＳＴＲＩＰＰＩＮＧ ＭＥＴＨＯＤ ＴＯ ＩＮＴＥＲＲＯＧＡＴＥ ＰＡＴＩＥＮＴ ＲＥＣＯＲＤＳ ＡＮＤ ＣＲＥＡＴＥ ＡＮＯＮＹＭＩＺＥＤ ＲＥＣＯＲＤ」と題する米国特許出願第１５／９４０，６３２号、
・「ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＨＵＢ ＡＮＤ ＳＴＯＲＡＧＥ ＤＥＶＩＣＥ ＦＯＲ ＳＴＯＲＩＮＧ ＰＡＲＡＭＥＴＥＲＳ ＡＮＤ ＳＴＡＴＵＳ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥ ＴＯ ＢＥ ＳＨＡＲＥＤ ＷＩＴＨ ＣＬＯＵＤ ＢＡＳＥＤ ＡＮＡＬＹＴＩＣＳ ＳＹＳＴＥＭＳ」と題する米国特許出願第１５／９４０，６４０号、
・「ＳＥＬＦ ＤＥＳＣＲＩＢＩＮＧ ＤＡＴＡ ＰＡＣＫＥＴＳ ＧＥＮＥＲＡＴＥＤ ＡＴ ＡＮ ＩＳＳＵＩＮＧ ＩＮＳＴＲＵＭＥＮＴ」と題する米国特許出願第１５／９４０，６４５号、
・「ＤＡＴＡ ＰＡＩＲＩＮＧ ＴＯ ＩＮＴＥＲＣＯＮＮＥＣＴ Ａ ＤＥＶＩＣＥ ＭＥＡＳＵＲＥＤ ＰＡＲＡＭＥＴＥＲ ＷＩＴＨ ＡＮ ＯＵＴＣＯＭＥ」と題する米国特許出願第１５／９４０，６４９号、
・「ＳＵＲＧＩＣＡＬ ＨＵＢ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ」と題する米国特許出願第１５／９４０，６５４号、
・「ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭ ＤＩＳＴＲＩＢＵＴＥＤ ＰＲＯＣＥＳＳＩＮＧ」と題する米国特許出願第１５／９４０，６６３号、
・「ＡＧＧＲＥＧＡＴＩＯＮ ＡＮＤ ＲＥＰＯＲＴＩＮＧ ＯＦ ＳＵＲＧＩＣＡＬ ＨＵＢ ＤＡＴＡ」と題する米国特許出願第１５／９４０，６６８号、
・「ＳＵＲＧＩＣＡＬ ＨＵＢ ＳＰＡＴＩＡＬ ＡＷＡＲＥＮＥＳＳ ＴＯ ＤＥＴＥＲＭＩＮＥ ＤＥＶＩＣＥＳ ＩＮ ＯＰＥＲＡＴＩＮＧ ＴＨＥＡＴＥＲ」と題する米国特許出願第１５／９４０，６７１号、
・「ＤＩＳＰＬＡＹ ＯＦ ＡＬＩＧＮＭＥＮＴ ＯＦ ＳＴＡＰＬＥ ＣＡＲＴＲＩＤＧＥ ＴＯ ＰＲＩＯＲ ＬＩＮＥＡＲ ＳＴＡＰＬＥ ＬＩＮＥ」と題する米国特許出願第１５／９４０，６８６号、
・「ＳＴＥＲＩＬＥ ＦＩＥＬＤ ＩＮＴＥＲＡＣＴＩＶＥ ＣＯＮＴＲＯＬ ＤＩＳＰＬＡＹＳ」と題する米国特許出願第１５／９４０，７００号、
・「ＣＯＭＰＵＴＥＲ ＩＭＰＬＥＭＥＮＴＥＤ ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ」と題する米国特許出願第１５／９４０，６２９号、
・「ＵＳＥ ＯＦ ＬＡＳＥＲ ＬＩＧＨＴ ＡＮＤ ＲＥＤ－ＧＲＥＥＮ－ＢＬＵＥ ＣＯＬＯＲＡＴＩＯＮ ＴＯ ＤＥＴＥＲＭＩＮＥ ＰＲＯＰＥＲＴＩＥＳ ＯＦ ＢＡＣＫ ＳＣＡＴＴＥＲＥＤ ＬＩＧＨＴ」と題する米国特許出願第１５／９４０，７０４号、
・「ＣＨＡＲＡＣＴＥＲＩＺＡＴＩＯＮ ＯＦ ＴＩＳＳＵＥ ＩＲＲＥＧＵＬＡＲＩＴＩＥＳ ＴＨＲＯＵＧＨ ＴＨＥ ＵＳＥ ＯＦ ＭＯＮＯ－ＣＨＲＯＭＡＴＩＣ ＬＩＧＨＴ ＲＥＦＲＡＣＴＩＶＩＴＹ」と題する米国特許出願第１５／９４０，７２２号、
・「ＤＵＡＬ ＣＭＯＳ ＡＲＲＡＹ ＩＭＡＧＩＮＧ」と題する米国特許出願第１５／９４０，７４２号、
・「ＡＤＡＰＴＩＶＥ ＣＯＮＴＲＯＬ ＰＲＯＧＲＡＭ ＵＰＤＡＴＥＳ ＦＯＲ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥＳ」と題する米国特許出願第１５／９４０，６３６号、
・「ＡＤＡＰＴＩＶＥ ＣＯＮＴＲＯＬ ＰＲＯＧＲＡＭ ＵＰＤＡＴＥＳ ＦＯＲ ＳＵＲＧＩＣＡＬ ＨＵＢＳ」と題する米国特許出願第１５／９４０，６５３号、
・「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ ＦＯＲ ＣＵＳＴＯＭＩＺＡＴＩＯＮ ＡＮＤ ＲＥＣＯＭＭＥＮＤＡＴＩＯＮＳ ＴＯ Ａ ＵＳＥＲ」と題する米国特許出願第１５／９４０，６６０号、
・「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ ＦＯＲ ＬＩＮＫＩＮＧ ＯＦ ＬＯＣＡＬ ＵＳＡＧＥ ＴＲＥＮＤＳ ＷＩＴＨ ＴＨＥ ＲＥＳＯＵＲＣＥ ＡＣＱＵＩＳＩＴＩＯＮ ＢＥＨＡＶＩＯＲＳ ＯＦ ＬＡＲＧＥＲ ＤＡＴＡ ＳＥＴ」と題する米国特許出願第１５／９４０，６７９号、
・「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ ＦＯＲ ＭＥＤＩＣＡＬ ＦＡＣＩＬＩＴＹ ＳＥＧＭＥＮＴＥＤ ＩＮＤＩＶＩＤＵＡＬＩＺＡＴＩＯＮ ＯＦ ＩＮＳＴＲＵＭＥＮＴ ＦＵＮＣＴＩＯＮ」と題する米国特許出願第１５／９４０，６９４号、
・「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ ＦＯＲ ＳＥＣＵＲＩＴＹ ＡＮＤ ＡＵＴＨＥＮＴＩＣＡＴＩＯＮ ＴＲＥＮＤＳ ＡＮＤ ＲＥＡＣＴＩＶＥ ＭＥＡＳＵＲＥＳ」と題する米国特許出願第１５／９４０，６３４号、
・「ＤＡＴＡ ＨＡＮＤＬＩＮＧ ＡＮＤ ＰＲＩＯＲＩＴＩＺＡＴＩＯＮ ＩＮ Ａ ＣＬＯＵＤ ＡＮＡＬＹＴＩＣＳ ＮＥＴＷＯＲＫ」と題する米国特許出願第１５／９４０，７０６号、
・「ＣＬＯＵＤ ＩＮＴＥＲＦＡＣＥ ＦＯＲ ＣＯＵＰＬＥＤ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥＳ」と題する米国特許出願第１５／９４０，６７５号、
・「ＤＲＩＶＥ ＡＲＲＡＮＧＥＭＥＮＴＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許出願第１５／９４０，６２７号、
・「ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＡＲＲＡＮＧＥＭＥＮＴＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許出願第１５／９４０，６３７号、
・「ＣＯＮＴＲＯＬＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許出願第１５／９４０，６４２号、
・「ＡＵＴＯＭＡＴＩＣ ＴＯＯＬ ＡＤＪＵＳＴＭＥＮＴＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許出願第１５／９４０，６７６号、
・「ＣＯＮＴＲＯＬＬＥＲＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許出願第１５／９４０，６８０号、
・「ＣＯＯＰＥＲＡＴＩＶＥ ＳＵＲＧＩＣＡＬ ＡＣＴＩＯＮＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許出願第１５／９４０，６８３号、
・「ＤＩＳＰＬＡＹ ＡＲＲＡＮＧＥＭＥＮＴＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許出願第１５／９４０，６９０号、及び
・「ＳＥＮＳＩＮＧ ＡＲＲＡＮＧＥＭＥＮＴＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許出願第１５／９４０，７１１号。

【0024】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年３月２８日出願の以下の米国仮特許出願を所有する。
・「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ ＷＩＴＨ ＥＮＣＲＹＰＴＥＤ ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＣＡＰＡＢＩＬＩＴＩＥＳ」と題する米国特許仮出願第６２／６４９，３０２号、
・「ＤＡＴＡ ＳＴＲＩＰＰＩＮＧ ＭＥＴＨＯＤ ＴＯ ＩＮＴＥＲＲＯＧＡＴＥ ＰＡＴＩＥＮＴ ＲＥＣＯＲＤＳ ＡＮＤ ＣＲＥＡＴＥ ＡＮＯＮＹＭＩＺＥＤ ＲＥＣＯＲＤ」と題する米国特許仮出願第６２／６４９，２９４号、
・「ＳＵＲＧＩＣＡＬ ＨＵＢ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳ」と題する米国特許仮出願第６２／６４９，３００号、
・「ＳＵＲＧＩＣＡＬ ＨＵＢ ＳＰＡＴＩＡＬ ＡＷＡＲＥＮＥＳＳ ＴＯ ＤＥＴＥＲＭＩＮＥ ＤＥＶＩＣＥＳ ＩＮ ＯＰＥＲＡＴＩＮＧ ＴＨＥＡＴＥＲ」と題する米国特許仮出願第６２／６４９，３０９号、
・「ＣＯＭＰＵＴＥＲ ＩＭＰＬＥＭＥＮＴＥＤ ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭＳ」と題する米国特許仮出願第６２／６４９，３１０号、
・「ＵＳＥ ＯＦ ＬＡＳＥＲ ＬＩＧＨＴ ＡＮＤ ＲＥＤ－ＧＲＥＥＮ－ＢＬＵＥ ＣＯＬＯＲＡＴＩＯＮ ＴＯ ＤＥＴＥＲＭＩＮＥ ＰＲＯＰＥＲＴＩＥＳ ＯＦ ＢＡＣＫ ＳＣＡＴＴＥＲＥＤ ＬＩＧＨＴ」と題する米国特許仮出願第６２／６４９，２９１号、
・「ＡＤＡＰＴＩＶＥ ＣＯＮＴＲＯＬ ＰＲＯＧＲＡＭ ＵＰＤＡＴＥＳ ＦＯＲ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥＳ」と題する米国特許仮出願第６２／６４９，２９６号、
・「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ ＦＯＲ ＣＵＳＴＯＭＩＺＡＴＩＯＮ ＡＮＤ ＲＥＣＯＭＭＥＮＤＡＴＩＯＮＳ ＴＯ Ａ ＵＳＥＲ」と題する米国特許仮出願第６２／６４９，３３３号、
・「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ ＦＯＲ ＳＥＣＵＲＩＴＹ ＡＮＤ ＡＵＴＨＥＮＴＩＣＡＴＩＯＮ ＴＲＥＮＤＳ ＡＮＤ ＲＥＡＣＴＩＶＥ ＭＥＡＳＵＲＥＳ」と題する米国特許仮出願第６２／６４９，３２７号、
・「ＤＡＴＡ ＨＡＮＤＬＩＮＧ ＡＮＤ ＰＲＩＯＲＩＴＩＺＡＴＩＯＮ ＩＮ Ａ ＣＬＯＵＤ ＡＮＡＬＹＴＩＣＳ ＮＥＴＷＯＲＫ」と題する米国特許仮出願第６２／６４９，３１５号、
・「ＣＬＯＵＤ ＩＮＴＥＲＦＡＣＥ ＦＯＲ ＣＯＵＰＬＥＤ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥＳ」と題する米国特許仮出願第６２／６４９，３１３号、
・「ＤＲＩＶＥ ＡＲＲＡＮＧＥＭＥＮＴＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許仮出願第６２／６４９，３２０号、
・「ＡＵＴＯＭＡＴＩＣ ＴＯＯＬ ＡＤＪＵＳＴＭＥＮＴＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許仮出願第６２／６４９，３０７号、及び
・「ＳＥＮＳＩＮＧ ＡＲＲＡＮＧＥＭＥＮＴＳ ＦＯＲ ＲＯＢＯＴ－ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭＳ」と題する米国特許仮出願第６２／６４９，３２３号。

【0025】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１８年３月８日出願の以下の米国仮特許出願を所有する。
・「ＴＥＭＰＥＲＡＴＵＲＥ ＣＯＮＴＲＯＬ ＩＮ ＵＬＴＲＡＳＯＮＩＣ ＤＥＶＩＣＥ ＡＮＤ ＣＯＮＴＲＯＬ ＳＹＳＴＥＭ ＴＨＥＲＥＦＯＲ」と題する米国特許仮出願第６２／６４０，４１７号、及び
・「ＥＳＴＩＭＡＴＩＮＧ ＳＴＡＴＥ ＯＦ ＵＬＴＲＡＳＯＮＩＣ ＥＮＤ ＥＦＦＥＣＴＯＲ ＡＮＤ ＣＯＮＴＲＯＬ ＳＹＳＴＥＭ ＴＨＥＲＥＦＯＲ」と題する米国特許仮出願第６２／６４０，４１５号。

【0026】

本願の出願人は、各開示の全体が参照により本明細書に組み込まれる、２０１７年１２月２８日出願の以下の米国仮特許出願を所有する。
・「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許仮出願番号米国特許仮出願第６２／６１１，３４１号、
・「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ」と題する米国特許仮出願第６２／６１１，３４０号、及び
・「ＲＯＢＯＴ ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許仮出願第６２／６１１，３３９号。

【0027】

外科用装置及び発生器の様々な態様を詳細に説明する前に、例示される実施例は、適用又は用途において、添付の図面及び説明で示される部品の構造及び配置の詳細に限定されないことに留意すべきである。例示的な実施例は、他の態様、変形形態、及び修正で実施されるか、又はそれらに組み込まれてもよく、様々な方法で実施又は実行されてもよい。更に、特に明記しない限り、本明細書で用いられる用語及び表現は、読者の便宜のために例示的な実施例を説明する目的で選択されたものであり、それらを限定するためのものではない。更に、以下に記述される態様、態様の具現、及び／又は実施例のうちの１つ又は２つ以上を、以下に記述される他の態様、態様の具現、及び／又は実施例のうちの任意の１つ又は２つ以上と組み合わせることができるものと理解されたい。

【0028】

外科用ハブ
図１を参照すると、コンピュータ実装インタラクティブ外科システム１００は、１つ又は２つ以上の外科システム１０２と、クラウドベースのシステム（例えば、記憶装置１０５に連結されたリモートサーバ１１３を含み得るクラウド１０４）と、を含む。各外科システム１０２は、リモートサーバ１１３を含み得るクラウド１０４と通信する少なくとも１つの外科用ハブ１０６を含む。一実施例では、図１に示すように、外科システム１０２は、互いに、及び／又はハブ１０６と通信するように構成された、可視化システム１０８と、ロボットシステム１１０と、ハンドヘルド式インテリジェント外科用器具１１２と、を含む。いくつかの態様では、外科システム１０２は、Ｍ個のハブ１０６と、Ｎ個の可視化システム１０８と、Ｏ個のロボットシステム１１０と、Ｐ個のハンドヘルド式インテリジェント外科用器具１１２と、を含んでもよく、ここでＭ、Ｎ、Ｏ、及びＰは１以上の整数である。

【0029】

図２は、外科手術室１１６内の手術台１１４上に横たわっている患者に対して外科処置を実施するために使用される外科システム１０２の一例を示す。ロボットシステム１１０は、外科処置において外科システム１０２の一部として使用される。ロボットシステム１１０は、外科医のコンソール１１８と、患者側カート１２０（外科用ロボット）と、外科用ロボットハブ１２２と、を含む。患者側カート１２０は、患者の身体の低侵襲切開中に、外科医が外科医のコンソール１１８を介して手術部位を見る間、少なくとも１つの取り外し可能に連結された外科用ツール１１７を操作することができる。手術部位の画像は医療用撮像装置１２４によって得ることができ、医療用撮像装置１２４は撮像装置１２４を配向するために患者側カート１２０によって操作され得る。ロボットハブ１２２は、外科医のコンソール１１８を介して外科医に対するその後の表示のために、手術部位の画像を処理するように使用することができる。

【0030】

他の種類のロボットシステムを、外科システム１０２と共に使用するために容易に適合させることができる。本開示と共に使用するのに好適なロボットシステム及び外科用ツールの様々な例は、その開示は参照によりその全体が本明細書に組み込まれる、２０１７年１２月２８日出願の「ＲＯＢＯＴ ＡＳＳＩＳＴＥＤ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許仮出願第６２／６１１，３３９号に記載されている。

【0031】

クラウド１０４によって実施され、本開示と共に使用するのに好適なクラウドベース分析の様々な例は、その開示は参照によりその全体が本明細書に組み込まれる、２０１７年１２月２８日出願の「ＣＬＯＵＤ－ＢＡＳＥＤ ＭＥＤＩＣＡＬ ＡＮＡＬＹＴＩＣＳ」と題する米国特許仮出願第６２／６１１，３４０号に記載されている。

【0032】

様々な態様では、撮像装置１２４は、少なくとも１つの画像センサと１つ又は２つ以上の光学構成要素とを含む。好適な画像センサとしては、電荷結合素子（Charge-Coupled Device、ＣＣＤ）センサ及び相補型金属酸化膜半導体（Complementary Metal-Oxide Semiconductor、ＣＭＯＳ）センサが挙げられるが、これらに限定されない。

【0033】

撮像装置１２４の光学構成要素は、１つ若しくは２つ以上の照明光源及び／又は１つ若しくは２つ以上のレンズを含んでもよい。１つ又は２つ以上の照明光源は、手術野の部分を照明するように方向付けられてもよい。１つ又は２つ以上の画像センサは、組織及び／又は外科用器具から反射又は屈折された光を含む、手術野から反射又は屈折された光を受信することができる。

【0034】

１つ又は２つ以上の照明光源は、可視スペクトル及び不可視スペクトル内の電磁エネルギーを放射するように構成され得る。光学スペクトル又は発光スペクトルと称されることもある可視スペクトルは、人間の目に可視である（すなわち、人間の目によって検出することができる）電磁スペクトルの一部分であり、可視光、又は単に光と称されることがある。典型的な人間の目は、空気中の約３８０ｎｍ～約７５０ｎｍの波長に反応する。

【0035】

不可視スペクトル（すなわち、非発光スペクトル）は、可視スペクトルの下方及び上方に位置する電磁スペクトルの一部分である（すなわち、約３８０ｎｍ未満及び約７５０ｎｍ超の波長）。不可視スペクトルは、人間の目で検出可能ではない。約７５０ｎｍを超える波長は、赤色可視スペクトルよりも長く、これらは不可視赤外線（infrared、ＩＲ）、マイクロ波、及び無線電磁放射線になる。約３８０ｎｍ未満の波長は、紫色スペクトルよりも短く、これらは不可視紫外線、Ｘ線、及びガンマ線電磁放射線になる。

【0036】

様々な態様では、撮像装置１２４は、低侵襲性手術で使用するように構成されている。本開示と共に使用するのに好適な撮像装置の例としては、関節鏡、血管鏡、気管支鏡、胆道鏡、結腸鏡、サイトスコープ（cytoscope）、十二指腸鏡、腸鏡、食道胃十二指腸鏡（胃鏡）、内視鏡、喉頭鏡、鼻咽喉－腎盂鏡（nasopharyngo-neproscope）、Ｓ状結腸鏡、胸腔鏡、及び尿管鏡が挙げられるが、これらに限定されない。

【0037】

一態様では、撮像装置は、トポグラフィーと下層構造とを区別するためにマルチスペクトルモニタリングを用いる。マルチスペクトル画像は、電磁スペクトルにわたって特定の波長範囲内の画像データを取り込むものである。波長は、フィルタによって、又は可視光範囲を超える周波数、例えば、ＩＲ及び紫外光を含む特定の波長からの光に感受性の器具を使用することによって分離することができる。スペクトル撮像法は、人間の目がその赤色、緑色、及び青色の受容体で取り込むことのできない追加情報の抽出を可能にすることができる。マルチスペクトル撮像法の使用は、その開示は参照によりその全体が本明細書に組み込まれる２０１７年１２月２８日出願の「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許仮出願第６２／６１１，３４１号の「Ａｄｖａｎｃｅｄ Ｉｍａｇｉｎｇ Ａｃｑｕｉｓｉｔｉｏｎ Ｍｏｄｕｌｅ」の項で詳細に説明されている。マルチスペクトルモニタリングは、１つの手術作業が完了した後に、処置された組織上で上述の試験の１つ又は２つ以上を実施するために手術野を再配置するのに有用なツールであり得る。

【0038】

いかなる外科手術においても手術室及び外科用機器の厳格な滅菌が必要であることは自明である。「手術現場（surgical theater）」、すなわち手術室又は処置室に必要とされる厳格な衛生及び滅菌条件は、全ての医療装置及び機器の最大級の滅菌性を必要とする。その滅菌プロセスの一部は、撮像装置１２４並びにその付属品及び構成要素を含む、患者と接触する、又は滅菌野に侵入するあらゆるものを滅菌する必要性である。滅菌野は、トレイ内又は滅菌タオル上などの、微生物を含まないと見なされる特定の領域と見なされ得ること、又は滅菌野は、外科処置のために準備された患者のすぐ周囲の領域と見なされ得ることが理解されよう。滅菌野は、適切な衣類を着用した洗浄済みのチーム構成員、並びにその領域内の全ての備品及び固定具を含み得る。

【0039】

様々な態様では、可視化システム１０８は、図２に示されるように、滅菌野に対して戦略的に配置される１つ又は２つ以上の撮像センサと、１つ又は２つ以上の画像処理ユニットと、１つ又は２つ以上のストレージアレイと、１つ又は２つ以上のディスプレイと、を含む。一態様では、可視化システム１０８は、ＨＬ７、ＰＡＣＳ、及びＥＭＲのインターフェースを含む。可視化システム１０８の様々な構成要素については、その開示は参照によりその全体が本明細書に組み込まれる２０１７年１２月２８日出願の「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する米国特許仮出願第６２／６１１，３４１号の「Ａｄｖａｎｃｅｄ Ｉｍａｇｉｎｇ Ａｃｑｕｉｓｉｔｉｏｎ Ｍｏｄｕｌｅ」の項で説明されている。

【0040】

図２に示すように、一次ディスプレイ１１９は、手術台１１４の操作者に可視であるように、滅菌野内に配置される。加えて、可視化タワー１１１は、滅菌野の外に位置付けられる。可視化タワー１１１は、互いに離れる方に面する第１の非滅菌ディスプレイ１０７及び第２の非滅菌ディスプレイ１０９を含む。ハブ１０６によって誘導される可視化システム１０８は、ディスプレイ１０７、１０９、及び１１９を利用して、滅菌野の内側及び外部の操作者に対する情報フローを調整するように構成されている。例えば、ハブ１０６は、可視化システム１０８に、一次ディスプレイ１１９上の手術部位のライブ映像を維持させながら、撮像装置１２４によって記録される手術部位のスナップショットを非滅菌ディスプレイ１０７又は１０９上に表示させることができる。非滅菌ディスプレイ１０７又は１０９上のスナップショットは、例えば、非滅菌操作者が外科処置に関連する診断工程を実施することを可能にすることができる。

【0041】

一態様では、ハブ１０６は、滅菌野内で、可視化タワー１１１に位置する非滅菌操作者によって入力された診断入力又はフィードバックを滅菌領域内の一次ディスプレイ１１９に送り、これを手術台の滅菌操作者が見ることができるようにも構成される。一実施例では、入力は、ハブ１０６によって一次ディスプレイ１１９に送ることのできる、非滅菌ディスプレイ１０７又は１０９上に表示されるスナップショットに対する修正の形態であってもよい。

【0042】

図２を参照すると、外科用器具１１２は、外科処置において外科システム１０２の一部として使用されている。ハブ１０６はまた、外科用器具１１２のディスプレイへの情報フローを調整するようにも構成されている。例えば、情報フローの調整については、その開示の全体が参照により本明細書に組み込まれる、「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する２０１７年１２月２８日出願の米国特許仮出願第６２／６１１，３４１号で更に説明されている。可視化タワー１１１で非滅菌操作者によって入力される診断入力又はフィードバックは、滅菌野内でハブ１０６によって外科用器具ディスプレイ１１５に送られてもよく、ここで診断入力又はフィードバックは外科用器具１１２の操作者によって見られてもよい。外科システム１０２と共に使用するのに好適である例示的な外科用器具の例は、例えば、その開示の全体が参照により本明細書に組み込まれる、「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する２０１７年１２月２８日出願の米国特許仮出願第６２／６１１，３４１号の「Ｓｕｒｇｉｃａｌ Ｉｎｓｔｒｕｍｅｎｔ Ｈａｒｄｗａｒｅ」の項で説明されている。

【0043】

ここで図３を参照すると、ハブ１０６が、可視化システム１０８、ロボットシステム１１０、及びハンドヘルド式インテリジェント外科用器具１１２と通信している状態で示されている。ハブ１０６は、ハブディスプレイ１３５、撮像モジュール１３８、発生器モジュール１４０（単極発生器１４２、双極発生器１４４、及び／又は超音波発生器１４３を含むことができる）、通信モジュール１３０、プロセッサモジュール１３２、及びストレージアレイ１３４を含む。特定の態様では、図３に示すように、ハブ１０６は、排煙モジュール１２６、吸引／灌注モジュール１２８、及び／又はＯＲマッピングモジュール１３３を更に含む。

【0044】

外科処置中、封止及び／又は切断のため組織へのエネルギー印加は、一般に、排煙、過剰な流体の吸引、及び／又は組織の灌注を伴う。異なる供給源からの流体、電力、及び／又はデータラインは、外科処置中に絡まり合うことが多い。外科処置中にこの問題に対処することで貴重な時間が失われる場合がある。ラインの絡まりをほどくには、それらの対応するモジュールからラインを抜くことが必要となる場合があり、そのためにはモジュールをリセットすることが必要となる場合がある。ハブのモジュール式筐体１３６は、電力、データ、及び流体ラインを管理するための統一環境を提供し、このようなライン間の絡まりの頻度を低減させる。

【0045】

本開示の態様は、手術部位における組織へのエネルギー印加を伴う外科処置において使用するための外科用ハブを提示する。外科用ハブは、ハブ筐体と、ハブ筐体のドッキングステーション内に摺動可能に受容可能な組み合わせ発生器モジュールと、を含む。ドッキングステーションはデータ及び電力接点を含む。組み合わせ発生器モジュールは、単一ユニット内に収容された、超音波エネルギー発生器構成要素、双極ＲＦエネルギー発生器構成要素、及び単極ＲＦエネルギー発生器構成要素のうちの２つ又は３つ以上を含む。一態様では、組み合わせ発生器モジュールは、更に、排煙構成要素と、組み合わせ発生器モジュールを外科用器具に接続するための少なくとも１つのエネルギー供給ケーブルと、組織への治療エネルギーの印加によって発生した煙、流体、及び／又は微粒子を排出するように構成された少なくとも１つの排煙構成要素と、遠隔手術部位から排煙構成要素まで延在する流体ラインと、を含む。

【0046】

一態様では、流体ラインは第１の流体ラインであり、第２の流体ラインは、遠隔手術部位から、ハブ筐体内に摺動可能に受容される吸引及び灌注モジュールまで延在する。一態様では、ハブ筐体は、流体インターフェースを備える。

【0047】

特定の外科処置は、１つ超のエネルギーの種類を組織に印加することを必要とする場合がある。１つのエネルギーの種類は、組織を切断するのにより有益であり得るが、別の異なるエネルギーの種類は、組織を封止するのにより有益であり得る。例えば、双極発生器は、組織を封止するために使用することができ、一方で、超音波発生器は、封止された組織を切断するために使用することができる。本開示の態様は、ハブのモジュール式筐体１３６が異なる発生器を収容して、これらの間の双方向通信を促進するように構成される解決法を提示する。ハブのモジュール式筐体１３６の利点の１つは、様々なモジュールの迅速な取り外し及び／又は交換を可能にすることである。

【0048】

本開示の態様は、組織へのエネルギー印加を伴う外科処置で使用するためのモジュール式外科用筐体を提示する。モジュール式外科用筐体は、組織に印加するための第１のエネルギーを生成させるように構成された第１のエネルギー発生器モジュールと、第１のデータ及び電力接点を含む第１のドッキングポートを備える第１のドッキングステーションと、を含み、第１のエネルギー発生器モジュールは、電力及びデータ接点と電気係合するように摺動可能に移動可能であり、また第１のエネルギー発生器モジュールは、第１の電力及びデータ接点との電気係合から外れるように摺動可能に移動可能である。

【0049】

上記に加えて、モジュール式外科用筐体は、第１のエネルギーとは異なる、組織に印加するための第２のエネルギーを生成するように構成された第２のエネルギー発生器モジュールと、第２のデータ及び電力接点を含む第２のドッキングポートを備える第２のドッキングステーションと、を更に含み、第２のエネルギー発生器モジュールは、電力及びデータ接点と電気係合するように摺動可能に移動可能であり、また第２のエネルギー発生器モジュールは、第２の電力及びデータ接点との電気係合から外れるように摺動可能に移動可能である。

【0050】

更に、モジュール式外科用筐体は、第１のエネルギー発生器モジュールと第２のエネルギー発生器モジュールとの間の通信を容易にするように構成された、第１のドッキングポートと第２のドッキングポートとの間の通信バスを更に含む。

【0051】

図３～図７を参照すると、発生器モジュール１４０と、排煙モジュール１２６と、吸引／灌注モジュール１２８と、のモジュール式統合を可能にするハブのモジュール式筐体１３６に関する本開示の態様が提示される。ハブのモジュール式筐体１３６は、モジュール１４０、１２６、１２８間の双方向通信を更に促進する。図５に示すように、発生器モジュール１４０は、ハブのモジュール式筐体１３６に摺動可能に挿入可能な単一のハウジングユニット１３９内に支持される、統合された単極、双極、及び超音波構成要素を備える発生器モジュールであってもよい。図５に示すように、発生器モジュール１４０は、単極装置１４６、双極装置１４７、及び超音波装置１４８に接続するように構成され得る。代替的に、発生器モジュール１４０は、ハブのモジュール式筐体１３６を介して相互作用する一連の単極、双極、及び／又は超音波発生器モジュールを備えてもよい。ハブのモジュール式筐体１３６は、複数の発生器が単一の発生器として機能するように、複数の発生器の挿入と、ハブのモジュール式筐体１３６にドッキングされた発生器間の双方向通信と、を促進するように構成されてもよい。

【0052】

一態様では、ハブのモジュール式筐体１３６は、モジュール１４０、１２６、１２８の取り外し可能な取り付け及びそれらの間の双方向通信を可能にするために、外部及び無線通信ヘッダを備えるモジュール式電力及び通信バックプレーン１４９を備える。

【0053】

一態様では、ハブのモジュール式筐体１３６は、モジュール１４０、１２６、１２８を摺動可能に受容するように構成された、本明細書ではドロアーとも称されるドッキングステーション又はドロアー１５１を含む。図４は、外科用ハブ筐体１３６、及び外科用ハブ筐体１３６のドッキングステーション１５１に摺動可能に受容可能な組み合わせ発生器モジュール１４５の部分斜視図を示す。組み合わせ発生器モジュール１４５の後側に電力及びデータ接点を有するドッキングポート１５２は、組み合わせ発生器モジュール１４５がハブのモジュール式筐体１３６の対応するドッキングステーション１５１内の位置へと摺動されると、対応するドッキングポート１５０をハブのモジュール式筐体１３６の対応するドッキングステーション１５１の電力及びデータ接点と係合するように構成される。一態様では、組み合わせ発生器モジュール１４５は、図５に示すように、双極、超音波、及び単極モジュールと、単一のハウジングユニット１３９と共に一体化された排煙モジュールと、を含む。

【0054】

様々な態様では、排煙モジュール１２６は、捕捉／回収された煙及び／又は流体を手術部位から遠ざけて、例えば、排煙モジュール１２６へと搬送する流体ライン１５４を含む。排煙モジュール１２６から発生する真空吸引は、煙を手術部位のユーティリティ導管の開口部に引き込むことができる。流体ラインに連結されたユーティリティ導管は、排煙モジュール１２６で終端する可撓管の形態であってもよい。ユーティリティ導管及び流体ラインは、ハブ筐体１３６内に受容される排煙モジュール１２６に向かって延在する流体経路を画定する。

【0055】

様々な態様では、吸引／灌注モジュール１２８は、吸い込み（aspiration）流体ライン及び吸引（suction）流体ラインを含む外科用ツールに連結される。一実施例では、吸い込み及び吸引流体ラインは、手術部位から吸引／灌注モジュール１２８に向かって延在する可撓管の形態である。１つ又は２つ以上の駆動システムは、手術部位への、及び手術部位からの流体の灌注及び吸い込みを引き起こすように構成され得る。

【0056】

一態様では、外科用ツールは、その遠位端にエンドエフェクタを有するシャフトと、エンドエフェクタに関連付けられた少なくとも１つのエネルギー処置部と、吸い込み管と、灌注管と、を含む。吸い込み管は、その遠位端に入口ポートを有することができ、吸い込み管はシャフトを通って延在する。同様に、灌注管はシャフトを通って延在することができ、かつ、エネルギー送達器具に近接した入口ポートを有することができる。エネルギー送達器具は、超音波及び／又はＲＦエネルギーを手術部位に送達するように構成され、最初にシャフトを通って延在するケーブルによって発生器モジュール１４０に連結される。

【0057】

灌注管は流体源と流体連通することができ、吸い込み管は真空源と流体連通することができる。流体源及び／又は真空源は、吸引／灌注モジュール１２８内に収容され得る。一実施例では、流体源及び／又は真空源は、吸引／灌注モジュール１２８とは別にハブ筐体１３６内に収容され得る。このような実施例では、流体インターフェースは、吸引／灌注モジュール１２８を流体源及び／又は真空源に接続するように構成され得る。

【0058】

一態様では、モジュール１４０、１２６、１２８及び／又はハブのモジュール式筐体１３６上のそれらの対応するドッキングステーションは、モジュールのドッキングポートを位置合わせして、ハブのモジュール式筐体１３６のドッキングステーション内でこれらの対応部品と係合させるように構成された位置合わせ機能を含み得る。例えば、図４に示すように、組み合わせ発生器モジュール１４５は、ハブのモジュール式筐体１３６の対応するドッキングステーション１５１の対応するブラケット１５６と摺動可能に係合するように構成された側部ブラケット１５５を含む。ブラケットは協働して、組み合わせ発生器モジュール１４５のドッキングポート接点をハブのモジュール式筐体１３６のドッキングポート接点と電気係合させるように誘導する。

【0059】

いくつかの態様では、ハブのモジュール式筐体１３６のドロアー１５１はサイズが同じ又は実質的に同じであり、モジュールはドロアー１５１内に受容されるサイズに調整される。例えば、側部ブラケット１５５及び／又は１５６は、モジュールのサイズに応じてより大きくなっても小さくなってもよい。他の態様では、ドロアー１５１はサイズが異なり、特定のモジュールを収容するように各々設計される。

【0060】

更に、適合しない接点を備えるドロアーにモジュールを挿入することを避けるために、特定のモジュールの接点を、特定のドロアーの接点と係合するように鍵付きにしてもよい。

【0061】

図４に示されるように、１つのドロアー１５１のドッキングポート１５０は、通信リンク１５７を介して別のドロアー１５１のドッキングポート１５０に連結されて、ハブのモジュール式筐体１３６内に収容されたモジュール間の双方向通信を容易にすることができる。代替的に又は更に、ハブのモジュール式筐体１３６のドッキングポート１５０は、ハブのモジュール式筐体１３６内に収容されたモジュール間の無線双方向通信を容易にしてもよい。例えば、Ａｉｒ Ｔｉｔａｎ－Ｂｌｕｅｔｏｏｔｈなどの任意の好適な無線通信を用いてもよい。

【0062】

図６は、外科用ハブ２０６の複数のモジュールを受容するように構成された横方向モジュール式ハウジング１６０の複数の横方向ドッキングポートの個々の電力バスアタッチメントを示す。横方向モジュール式ハウジング１６０は、モジュール１６１を横方向に受容して相互接続するように構成される。モジュール１６１は、モジュール１６１を相互接続するためのバックプレーンを含む横方向モジュール式ハウジング１６０のドッキングステーション１６２内に摺動可能に挿入される。図６に示すように、モジュール１６１は、横方向モジュール式ハウジング１６０内で横方向に配置される。代替的に、モジュール１６１は、横方向モジュール式ハウジング内で垂直方向に配置されてもよい。

【0063】

図７は、外科用ハブ１０６の複数のモジュール１６５を受容するように構成された垂直モジュール式ハウジング１６４を示す。モジュール１６５は、モジュール１６５を相互接続するためのバックプレーンを含む垂直モジュール式ハウジング１６４のドッキングステーション又はドロアー１６７内に摺動可能に挿入される。垂直モジュール式ハウジング１６４のドロアー１６７は垂直方向に配置されているが、特定の場合では、垂直モジュール式ハウジング１６４は、横方向に配置されたドロアーを含んでもよい。更に、モジュール１６５は、垂直モジュール式ハウジング１６４のドッキングポートを介して互いに相互作用し得る。図７の実施例では、モジュール１６５の動作に関連するデータを表示するためのディスプレイ１７７が提供される。加えて、垂直モジュール式ハウジング１６４は、マスタモジュール１７８内に摺動可能に受容される複数のサブモジュールを収容するマスタモジュール１７８を含む。

【0064】

様々な態様では、撮像モジュール１３８は、内蔵型のビデオプロセッサ及びモジュール式光源を備え、様々な撮像装置と共に使用するように適合されている。一態様では、撮像装置は、光源モジュール及びカメラモジュールと共に組み立てることが可能なモジュール式ハウジングで構成される。ハウジングは、使い捨て式ハウジングであってもよい。少なくとも１つの実施例では、使い捨て式ハウジングは、再利用可能なコントローラ、光源モジュール、及びカメラモジュールと取り外し可能に連結される。光源モジュール及び／又はカメラモジュールは、外科処置の種類に応じて選択的に選択することができる。一態様では、カメラモジュールはＣＣＤセンサを含む。別の態様では、カメラモジュールはＣＭＯＳセンサを含む。別の態様では、カメラモジュールはスキャンされたビームの撮像用に構成される。同様に、光源モジュールは、外科処置に応じて白色光又は異なる光を送達するように構成することができる。

【0065】

外科処置中に、手術野から外科用装置を除去して異なるカメラ又は異なる光源を含む別の外科用装置と交換することは非効率的であり得る。手術野の視野を一時的に喪失することは、望ましくない結果をもたらし得る。本開示のモジュール撮像装置は、手術野から撮像装置を除去する必要なく、外科処置中に光源モジュール又はカメラモジュール中間体（midstream）の交換を可能にするように構成される。

【0066】

一態様では、撮像装置は、複数のチャネルを含む管状ハウジングを備える。第１のチャネルは、第１のチャネルとスナップ嵌め係合するように構成され得るカメラモジュールを摺動可能に受容するように構成されている。第２のチャネルは、第２のチャネルとスナップ嵌め係合するように構成され得る光源モジュールを摺動可能に受容するように構成されている。別の実施例では、カメラモジュール及び／又は光源モジュールは、これらの対応するチャネル内の最終位置へと回転させることができる。スナップ嵌め係合の代わりにねじ係合が採用されてもよい。

【0067】

様々な実施例で、複数の撮像装置が、複数の視野を提供するために手術野内の様々な位置に位置決めされる。撮像モジュール１３８は、最適な視野を提供するために撮像装置間を切り替えるように構成することができる。様々な態様では、撮像モジュール１３８は、異なる撮像装置からの画像を統合するように構成することができる。

【0068】

本開示と共に使用するのに好適な様々な画像プロセッサ及び撮像装置は、その全体が参照により本明細書に組み込まれる「ＣＯＭＢＩＮＥＤ ＳＢＩ ＡＮＤ ＣＯＮＶＥＮＴＩＯＮＡＬ ＩＭＡＧＥ ＰＲＯＣＥＳＳＯＲ」と題する２０１１年８月９日発行の米国特許第７，９９５，０４５号に記載されている。更に、その全体が参照により本明細書に組み込まれる「ＳＢＩ ＭＯＴＩＯＮ ＡＲＴＩＦＡＣＴ ＲＥＭＯＶＡＬ ＡＰＰＡＲＡＴＵＳ ＡＮＤ ＭＥＴＨＯＤ」と題する２０１１年７月１９日発行の米国特許第７，９８２，７７６号は、画像データからモーションアーチファクトを除去するための様々なシステムについて記載している。こうしたシステムは、撮像モジュール１３８と一体化され得る。更に、「ＣＯＮＴＲＯＬＬＡＢＬＥ ＭＡＧＮＥＴＩＣ ＳＯＵＲＣＥ ＴＯ ＦＩＸＴＵＲＥ ＩＮＴＲＡＣＯＲＰＯＲＥＡＬ ＡＰＰＡＲＡＴＵＳ」と題する２０１１年１２月１５日公開の米国特許出願公開第２０１１／０３０６８４０号、及び「ＳＹＳＴＥＭ ＦＯＲ ＰＥＲＦＯＲＭＩＮＧ Ａ ＭＩＮＩＭＡＬＬＹ ＩＮＶＡＳＩＶＥ ＳＵＲＧＩＣＡＬ ＰＲＯＣＥＤＵＲＥ」と題する２０１４年８月２８日公開の米国特許出願公開第２０１４／０２４３５９７号は、その各々は参照によりその全体が本明細書に組み込まれる。

【0069】

図８は、医療施設の１つ又は２つ以上の手術室、又は外科処置のための専門設備を備えた医療施設内の任意の部屋に配置されたモジュール式装置をクラウドベースのシステム（例えば記憶装置２０５に連結されたリモートサーバ２１３を含み得るクラウド２０４）に接続するように構成されたモジュール式通信ハブ２０３を備える外科用データネットワーク２０１を示す。一態様では、モジュール式通信ハブ２０３は、ネットワークルータと通信するネットワークハブ２０７及び／又はネットワークスイッチ２０９を備える。モジュール式通信ハブ２０３は更に、ローカルコンピュータ処理及びデータ操作を提供するために、ローカルコンピュータシステム２１０に連結することができる。外科用データネットワーク２０１は、受動的、インテリジェント、又は切り替え式として構成されてもよい。受動的外科用データネットワークはデータの導管として機能し、データが１つの装置（又はセグメント）から別の装置に、及びクラウドコンピューティングリソースに行くことを可能にする。インテリジェントな外科用データネットワークは、トラフィックが監視対象の外科用データネットワークを通過することを可能にし、ネットワークハブ２０７又はネットワークスイッチ２０９内の各ポートを構成する追加の機能を含む。インテリジェントな外科用データネットワークは、管理可能なハブ又はスイッチと称され得る。スイッチングハブは、各パケットの宛先アドレスを読み取り、次いでパケットを正しいポートに転送する。

【0070】

手術室に配置されたモジュール式装置１ａ～１ｎは、モジュール式通信ハブ２０３に連結されてもよい。ネットワークハブ２０７及び／又はネットワークスイッチ２０９は、ネットワークルータ２１１に連結されて、装置１ａ～１ｎをクラウド２０４又はローカルコンピュータシステム２１０に接続することができる。装置１ａ～１ｎに関連付けられたデータは、遠隔データ処理及び操作のためにルータを介してクラウドベースのコンピュータに転送されてもよい。装置１ａ～１ｎに関連付けられたデータはまた、ローカルでのデータ処理及び操作のためにローカルコンピュータシステム２１０に転送されてもよい。同じ手術室に位置するモジュール式装置２ａ～２ｍもまた、ネットワークスイッチ２０９に連結されてもよい。ネットワークスイッチ２０９は、ネットワークハブ２０７及び／又はネットワークルータ２１１に連結されて、装置２ａ～２ｍをクラウド２０４に接続することができる。装置２ａ～２ｎに関連付けられたデータは、データ処理及び操作のためにネットワークルータ２１１を介してクラウド２０４に転送されてもよい。装置２ａ～２ｍに関連付けられたデータはまた、ローカルでのデータ処理及び操作のためにローカルコンピュータシステム２１０に転送されてもよい。

【0071】

複数のネットワークハブ２０７及び／又は複数のネットワークスイッチ２０９を複数のネットワークルータ２１１と相互接続することによって、外科用データネットワーク２０１が拡張され得ることが理解されるであろう。モジュール式通信ハブ２０３は、複数の装置１ａ～１ｎ／２ａ～２ｍを受容するように構成されたモジュール式制御タワー内に収容され得る。ローカルコンピュータシステム２１０もまた、モジュール式制御タワーに収容されてもよい。モジュール式通信ハブ２０３は、ディスプレイ２１２に接続されて、例えば外科処置中に、装置１ａ～１ｎ／２ａ～２ｍのうちのいくつかによって取得された画像を表示する。様々な態様では、装置１ａ～１ｎ／２ａ～２ｍとしては、外科用データネットワーク２０１のモジュール式通信ハブ２０３に接続され得るモジュール式装置の中でもとりわけ、例えば、内視鏡に連結された撮像モジュール１３８、エネルギーベースの外科用装置に連結された発生器モジュール１４０、排煙モジュール１２６、吸引／灌注モジュール１２８、通信モジュール１３０、プロセッサモジュール１３２、ストレージアレイ１３４、ディスプレイに連結された外科用装置、及び／又は非接触センサモジュールなどの様々なモジュールが挙げられ得る。

【0072】

一態様では、外科用データネットワーク２０１は、装置１ａ～１ｎ／２ａ～２ｍをクラウドに接続する、ネットワークハブ（複数可）、ネットワークスイッチ（複数可）、及びネットワークルータ（複数可）との組み合わせを含んでもよい。ネットワークハブ又はネットワークスイッチに連結された装置１ａ～１ｎ／２ａ～２ｍのいずれか１つ又は全ては、リアルタイムでデータを収集し、データ処理及び操作のためにデータをクラウドコンピュータに転送することができる。クラウドコンピューティングは、ソフトウェアアプリケーションを取り扱うために、ローカルサーバ又はパーソナル装置を有するのではなく、共有コンピューティングリソースに依存することは理解されるであろう。「クラウド」という用語は、「インターネット」の隠喩として使用され得るが、この用語は、そのように限定はされない。したがって、「クラウドコンピューティング」という用語は、本明細書では「インターネットベースのコンピューティングの一種」を指すために使用することができ、この場合、サーバ、記憶装置、及びアプリケーションなどの様々なサービスは、手術現場（例えば、固定式、移動式、一時的、又は現場の手術室又は空間）に位置するモジュール式通信ハブ２０３及び／又はコンピュータシステム２１０に、かつインターネットを介してモジュール式通信ハブ２０３及び／又はコンピュータシステム２１０に接続された装置に送達される。クラウドインフラストラクチャは、クラウドサービスプロバイダによって維持され得る。この文脈において、クラウドサービスプロバイダは、１つ又は２つ以上の手術室内に位置する装置１ａ～１ｎ／２ａ～２ｍの使用及び制御を調整するエンティティであり得る。クラウドコンピューティングサービスは、スマート外科用器具、ロボット、及び手術室内に位置する他のコンピュータ化装置によって収集されたデータに基づいて、多数の計算を実行することができる。ハブハードウェアは、複数の装置又は接続部がクラウドコンピューティングリソース及び記憶装置と通信するコンピュータに接続することを可能にする。

【0073】

装置１ａ～１ｎ／２ａ～２ｍによって収集されたデータにクラウドコンピュータデータ処理技術を適用することで、外科用データネットワークは、外科的成果の改善、コスト低減、及び患者満足度の改善を提供する。組織の封止及び切断処置後に、組織の状態を観察して封止された組織の漏出又は灌流を評価するために、装置１ａ～１ｎ／２ａ～２ｍのうちの少なくともいくつかを用いることができる。クラウドベースのコンピューティングを使用して、身体組織の試料の画像を含むデータを診断目的で検査して疾患の影響などの病状を特定するために、装置１ａ～１ｎ／２ａ～２ｍのうちの少なくともいくつかを用いることができる。これは、組織及び表現型の位置特定及びマージン確認を含む。撮像装置と一体化された様々なセンサ、及び複数の撮像装置によってキャプチャされた画像をオーバーレイするなどの技術を使用して、身体の解剖学的構造を特定するために、装置１ａ～１ｎ／２ａ～２ｍのうちの少なくともいくつかを用いることができる。画像データを含む、装置１ａ～１ｎ／２ａ～２ｍによって収集されたデータは、画像処理及び操作を含むデータ処理及び操作のために、クラウド２０４若しくはローカルコンピュータシステム２１０又はその両方に転送されてもよい。データは、組織特異的部位及び状態に対する内視鏡的介入、新興技術、標的化放射線、標的化介入、及び精密ロボットの適用などの更なる治療を遂行できるかを判定することによって、外科処置の結果を改善するために分析することができる。こうしたデータ分析は、予後分析処理を更に採用してもよく、標準化されたアプローチを使用することは、外科治療及び外科医の挙動を確認するか、又は外科治療及び外科医の挙動に対する修正を提案するかのいずれかのために有益なフィードバックを提供することができる。

【0074】

一実装態様では、手術室装置１ａ～１ｎは、ネットワークハブに対する装置１ａ～１ｎの構成に応じて、有線チャネル又は無線チャネルを介してモジュール式通信ハブ２０３に接続されてもよい。ネットワークハブ２０７は、一態様では、開放型システム間相互接続（Open System Interconnection、ＯＳＩ）モデルの物理層上で機能するローカルネットワークブロードキャスト装置として実装されてもよい。ネットワークハブは、同じ手術室ネットワーク内に位置する装置１ａ～１ｎに接続性を提供する。ネットワークハブ２０７は、パケット形態のデータを収集し、それらを半二重モードでルータに送信する。ネットワークハブ２０７は、装置データを転送するための任意の媒体アクセス制御／インターネットプロトコル（media access control/Internet Protocol、ＭＡＣ／ＩＰ）は記憶しない。装置１ａ～１ｎのうちの１つのみが、ネットワークハブ２０７を介して一度にデータを送信することができる。ネットワークハブ２０７は、情報の送信先に関する経路選択テーブル又はインテリジェンスを有さず、全てのネットワークデータを各コネクション全体、及びクラウド２０４上のリモートサーバ２１３（図９）にブロードキャストする。ネットワークハブ２０７は、コリジョンなどの基本的なネットワークエラーを検出することができるが、全ての情報を複数のポートにブロードキャストすることは、セキュリティリスクとなりボトルネックを引き起こすおそれがある。

【0075】

別の実装形態では、手術室装置２ａ～２ｍは、有線チャネル又は無線チャネルを介してネットワークスイッチ２０９に接続されてもよい。ネットワークスイッチ２０９は、ＯＳＩモデルのデータリンク層内で機能する。ネットワークスイッチ２０９は、同じ手術室内に位置する装置２ａ～２ｍをネットワークに接続するためのマルチキャスト装置である。ネットワークスイッチ２０９は、フレームの形態のデータをネットワークルータ２１１に送信し、全二重モードで機能する。複数の装置２ａ～２ｍは、ネットワークスイッチ２０９を介して同時にデータを送信することができる。ネットワークスイッチ２０９は、データを転送するために装置２ａ～２ｍのＭＡＣアドレスを記憶かつ使用する。

【0076】

ネットワークハブ２０７及び／又はネットワークスイッチ２０９は、クラウド２０４に接続するためにネットワークルータ２１１に連結される。ネットワークルータ２１１は、ＯＳＩモデルのネットワーク層内で機能する。ネットワークルータ２１１は、装置１ａ～１ｎ／２ａ～２ｍのいずれか１つ又は全てによって収集されたデータを更に処理及び操作するために、ネットワークハブ２０７及び／又はネットワークスイッチ２１１から受信したデータパケットをクラウドベースのコンピュータリソースに送信するための経路を作成する。ネットワークルータ２１１は、例えば、同じ医療施設の異なる手術室、又は異なる医療施設の異なる手術室に位置する異なるネットワークなどの、異なる位置に位置する２つ又は３つ以上の異なるネットワークを接続するために用いられてもよい。ネットワークルータ２１１は、パケット形態のデータをクラウド２０４に送信し、全二重モードで機能する。複数の装置が同時にデータを送信することができる。ネットワークルータ２１１は、データを転送するためにＩＰアドレスを使用する。

【0077】

一実施例では、ネットワークハブ２０７は、複数のＵＳＢ装置をホストコンピュータに接続することを可能にするＵＳＢハブとして実装されてもよい。ＵＳＢハブは、装置をホストシステムコンピュータに接続するために利用可能なポートが多くなるように、単一のＵＳＢポートをいくつかの階層に拡張することができる。ネットワークハブ２０７は、有線チャネル又は無線チャネルを介して情報を受信するための有線又は無線能力を含むことができる。一態様では、無線ＵＳＢ短距離高帯域無線通信プロトコルが、手術室内に位置する装置１ａ～１ｎと装置２ａ～２ｍとの間の通信のために使用されてもよい。

【0078】

他の実施例では、手術室装置１ａ～１ｎ／２ａ～２ｍは、固定及びモバイル装置から短距離にわたってデータを交換し（２．４～２．４８５ＧＨｚのＩＳＭ帯域における短波長ＵＨＦ電波を使用して）、かつパーソナルエリアネットワーク（personal area network、ＰＡＮ）を構築するために、Ｂｌｕｅｔｏｏｔｈ無線技術規格を介してモジュール式通信ハブ２０３と通信することができる。他の態様では、手術室装置１ａ～１ｎ／２ａ～２ｍは、Ｗｉ－Ｆｉ（ＩＥＥＥ８０２．１１ファミリー）、ＷｉＭＡＸ（ＩＥＥＥ８０２．１６ファミリー）、ＩＥＥＥ８０２．２０、ロング・ターム・エボリューション（long-term evolution、ＬＴＥ）、並びにＥｖ－ＤＯ、ＨＳＰＡ＋、ＨＳＤＰＡ＋、ＨＳＵＰＡ＋、ＥＤＧＥ、ＧＳＭ、ＧＰＲＳ、ＣＤＭＡ、ＴＤＭＡ、ＤＥＣＴ、及びこれらのイーサネット派生物、のみならず３Ｇ、４Ｇ、５Ｇ、及びそれ以降と指定される任意の他の無線及び有線プロトコルが挙げられるがこれらに限定されない数多くの無線又は有線通信規格又はプロトコルを介してモジュール式通信ハブ２０３と通信することができる。コンピューティングモジュールは、複数の通信モジュールを含んでもよい。例えば、第１の通信モジュールは、Ｗｉ－Ｆｉ及びＢｌｕｅｔｏｏｔｈなどの短距離無線通信専用であってもよく、第２の通信モジュールは、ＧＰＳ、ＥＤＧＥ、ＧＰＲＳ、ＣＤＭＡ、ＷｉＭＡＸ、ＬＴＥ、Ｅｖ－ＤＯなどの長距離無線通信専用であってもよい。

【0079】

モジュール式通信ハブ２０３は、手術室装置１ａ～１ｎ／２ａ～２ｍの１つ又は全ての中央接続部として機能することができ、フレームとして知られるデータ型を取り扱う。フレームは、装置１ａ～１ｎ／２ａ～２ｍによって生成されたデータを搬送する。フレームがモジュール式通信ハブ２０３によって受信されると、フレームは増幅されてネットワークルータ２１１へ送信され、ネットワークルータ２１１は本明細書に記載される数多くの無線又は有線通信規格又はプロトコルを使用することによってこのデータをクラウドコンピューティングリソースに転送する。

【0080】

モジュール式通信ハブ２０３は、スタンドアロンの装置として使用されてもよく、又はより大きなネットワークを形成するために互換性のあるネットワークハブ及びネットワークスイッチに接続されてもよい。モジュール式通信ハブ２０３は、一般に据え付け、構成、及び維持が容易であるため、モジュール式通信ハブ２０３は手術室装置１ａ～１ｎ／２ａ～２ｍをネットワーク接続するための良好な選択肢となる。

【0081】

図９は、コンピュータ実装インタラクティブ外科システム２００を示す。コンピュータ実装インタラクティブ外科システム２００は、多くの点で、コンピュータ実装インタラクティブ外科システム１００と類似している。例えば、コンピュータ実装インタラクティブ外科システム２００は、多くの点で外科システム１０２と類似する１つ又は２つ以上の外科システム２０２を含む。各外科システム２０２は、リモートサーバ２１３を含み得るクラウド２０４と通信する少なくとも１つの外科用ハブ２０６を含む。一態様では、コンピュータ実装インタラクティブ外科システム２００は、例えば、インテリジェント外科用器具、ロボット、及び手術室内に位置する他のコンピュータ化装置などの複数の手術室装置に接続されたモジュール式制御タワー２３６を備える。図１０に示されるように、モジュール式制御タワー２３６は、コンピュータシステム２１０に連結されたモジュール式通信ハブ２０３を備える。図９の実施例に例示するように、モジュール式制御タワー２３６は、内視鏡２３９に連結された撮像モジュール２３８、エネルギー装置２４１に連結された発生器モジュール２４０、排煙器モジュール２２６、吸引／灌注モジュール２２８、通信モジュール２３０、プロセッサモジュール２３２、ストレージアレイ２３４、任意でディスプレイ２３７に連結されたスマート装置／器具２３５、及び非接触センサモジュール２４２に連結される。手術室装置は、モジュール式制御タワー２３６を介してクラウドコンピューティングリソース及びデータ記憶装置に連結される。ロボットハブ２２２もまた、モジュール式制御タワー２３６及びクラウドコンピューティングリソースに接続されてもよい。中でもとりわけ、装置／器具２３５、可視化システム２０８が、本明細書に記載される有線又は無線通信規格又はプロトコルを介してモジュール式制御タワー２３６に連結されてもよい。モジュール式制御タワー２３６は、撮像モジュール、装置／器具ディスプレイ、及び／又は他の可視化システム２０８から受信した画像を表示及びオーバーレイするためにハブディスプレイ２１５（例えば、モニタ、スクリーン）に連結されてもよい。ハブディスプレイはまた、画像及びオーバーレイ画像と共にモジュール式制御タワーに接続された装置から受信したデータを表示してもよい。

【0082】

図１０は、モジュール式制御タワー２３６に連結された複数のモジュールを備える外科用ハブ２０６を示す。モジュール式制御タワー２３６は、例えばネットワーク接続装置などのモジュール式通信ハブ２０３と、例えば局所処理、可視化、及び撮像を提供するためのコンピュータシステム２１０と、を備える。図１０に示すように、モジュール式通信ハブ２０３は、モジュール式通信ハブ２０３に接続できるモジュール（例えば、装置）の数を拡張するために階層化構成で接続されて、モジュールに関連付けられたデータをコンピュータシステム２１０、クラウドコンピューティングリソース、又はその両方に転送することができる。図１０に示すように、モジュール式通信ハブ２０３内のネットワークハブ／スイッチの各々は、３つの下流ポート及び１つの上流ポートを含む。上流のネットワークハブ／スイッチは、クラウドコンピューティングリソース及びローカルディスプレイ２１７への通信接続を提供するためにプロセッサに接続される。クラウド２０４への通信は、有線又は無線通信チャネルのいずれかを介して行うことができる。

【0083】

外科用ハブ２０６は、非接触センサモジュール２４２を使用して、手術室の寸法を測定し、また超音波又はレーザ型非接触測定装置のいずれかを使用して手術現場のマップを生成する。その全体が参照により本明細書に組み込まれる「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する２０１７年１２月２８日出願の米国特許仮出願第６２／６１１，３４１号中の「Ｓｕｒｇｉｃａｌ Ｈｕｂ Ｓｐａｔｉａｌ Ａｗａｒｅｎｅｓｓ Ｗｉｔｈｉｎ ａｎ Ｏｐｅｒａｔｉｎｇ Ｒｏｏｍ」の項で説明されるように、超音波ベースの非接触センサモジュールは、超音波のバーストを送信し、超音波のバーストが手術室の外壁に反射したときのエコーを受信することによって手術室をスキャンし、ここでセンサモジュールが、手術室のサイズを判定し、かつＢｌｕｅｔｏｏｔｈペアリングの距離限界を調整するように構成される。レーザベースの非接触センサモジュールは、例えば、レーザ光パルスを送信し、手術室の外壁に反射するレーザ光パルスを受信し、送信されたパルスの位相を受信したパルスと比較して、手術室のサイズを判定し、かつＢｌｕｅｔｏｏｔｈペアリング距離限界を調整することによって手術室をスキャンする。

【0084】

コンピュータシステム２１０は、プロセッサ２４４とネットワークインターフェース２４５とを備える。プロセッサ２４４は、システムバスを介して、通信モジュール２４７、記憶装置２４８、メモリ２４９、不揮発性メモリ２５０、及び入力／出力インターフェース２５１に連結される。システムバスは、９ビットバス、業界標準アーキテクチャ（Industrial Standard Architecture、ＩＳＡ）、マイクロチャネルアーキテクチャ（Micro-Chearmel Architecture、ＭＳＡ）、拡張ＩＳＡ（Extended ISA、ＥＩＳＡ）、インテリジェントドライブエレクトロニクス（Intelligent Drive Electronics、ＩＤＥ）、ＶＥＳＡローカルバス（VESA Local Bus、ＶＬＢ）、周辺装置相互接続（Peripheral Component Interconnect、ＰＣＩ）、ＵＳＢ、アドバンスドグラフィックスポート（Advanced Graphics Port、ＡＧＰ）、パーソナルコンピュータメモリカード国際協会バス（Personal Computer Memory Card International Association bus、ＰＣＭＣＩＡ）、小型計算機システム・インターフェース（Small Computer Systems Interface、ＳＣＳＩ）、又は任意の他の独自バス（proprietary bus）が挙げられるがこれらに限定されない任意の様々なバスアーキテクチャを使用する、メモリバス若しくはメモリコントローラ、ペリフェラルバス若しくは外部バス、及び／又はローカルバスを含むいくつかの種類のバス構造（複数可）のうちのいずれかであっってもよい。

【0085】

プロセッサ２４４は、Ｔｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓ製のＡＲＭ Ｃｏｒｔｅｘの商品名で知られているものなど、任意のシングルコア又はマルチコアプロセッサであってもよい。一態様では、プロセッサは、例えば、その詳細が製品データシートで入手可能である、最大４０ＭＨｚの２５６ＫＢのシングルサイクルフラッシュメモリ若しくは他の不揮発性メモリのオンチップメモリ、性能を４０ＭＨｚ超に改善するためのプリフェッチバッファ、３２ＫＢのシングルサイクルシリアルランダムアクセスメモリ（single-cycle serial random access memory、ＳＲＡＭ）、ＳｔｅｌｌａｒｉｓＷａｒｅ（登録商標）ソフトウェアを搭載した内部読み出し専用メモリ（read-only memory、ＲＯＭ）、２ＫＢの電気的消去可能プログラマブル読み出し専用メモリ（erasable programmable read-only memory、ＥＥＰＲＯＭ）、及び／又は、１つ若しくは２つ以上のパルス幅変調（pulse width modulation、ＰＷＭ）モジュール、１つ若しくは２つ以上の直交エンコーダ入力（quadrature encoder input、ＱＥＩ）アナログ、１２個のアナログ入力チャネルを備える１つ若しくは２つ以上の１２ビットアナログ－デジタル変換器（analog-to-digital comverter、ＡＤＣ）を含む、Ｔｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓから入手可能なＬＭ４Ｆ２３０Ｈ５ＱＲ ＡＲＭ Ｃｏｒｔｅｘ－Ｍ４Ｆプロセッサコアであってもよい。

【0086】

一態様では、プロセッサ２４４は、同じくＴｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓ製のＨｅｒｃｕｌｅｓ ＡＲＭ Ｃｏｒｔｅｘ Ｒ４の商品名で知られるＴＭＳ５７０及びＲＭ４ｘなどの２つのコントローラ系ファミリーを含む安全コントローラを含んでもよい。安全コントローラは、拡張性のある性能、接続性、及びメモリの選択肢を提供しながら、高度な集積型安全機能を提供するために、中でも特に、ＩＥＣ６１５０８及びＩＳＯ２６２６２の安全限界用途専用に構成されてもよい。

【0087】

システムメモリとしては、揮発性メモリ及び不揮発性メモリが挙げられる。起動中などにコンピュータシステム内の要素間で情報を転送するための基本ルーチンを含む基本入出力システム（basic input/output system、ＢＩＯＳ）は、不揮発性メモリに記憶される。例えば、不揮発性メモリとしては、ＲＯＭ、プログラマブルＲＯＭ（programmable ROM、ＰＲＯＭ）、電気的プログラマブルＲＯＭ（electrically programmable ROM、ＥＰＲＯＭ）、ＥＥＰＲＯＭ、又はフラッシュメモリが挙げられ得る。揮発性メモリとしては、外部キャッシュメモリとして機能するランダムアクセスメモリ（random-access memory、ＲＡＭ）が挙げられる。更に、ＲＡＭは、ＳＲＡＭ、ダイナミックＲＡＭ（dynamic RAM、ＤＲＡＭ）、シンクロナスＤＲＡＭ（synchronous DRAM、ＳＤＲＡＭ）、ダブルデータレートＳＤＲＡＭ（double data rate、ＤＤＲ ＳＤＲＡＭ）、エンハンスドＳＤＲＡＭ（enhanced SDRAM、ＥＳＤＲＡＭ）、シンクリンクＤＲＡＭ（Synchlink DRAM、ＳＬＤＲＡＭ）、及びダイレクトランバスＲＡＭ（direct Rambus RAM、ＤＲＲＡＭ）などの多くの形態で利用可能である。

【0088】

コンピュータシステム２１０はまた、取り外し可能／取り外し不可能な揮発性／不揮発性コンピュータ記憶媒体、例えばディスク記憶装置などを含む。ディスク記憶装置としては、磁気ディスクドライブ、フロッピーディスクドライブ、テープドライブ、Ｊａｚドライブ、Ｚｉｐドライブ、ＬＳ－６０ドライブ、フラッシュメモリカード、又はメモリスティックのような装置が挙げられるが、これらに限定されない。加えて、ディスク記憶装置は、記憶媒体を、独立して、又はコンパクトディスクＲＯＭ装置（compact disc ROM、ＣＤ－ＲＯＭ）、コンパクトディスク記録可能ドライブ（compact disc recordable drive、ＣＤ－Ｒ Ｄｒｉｖｅ）、コンパクトディスク書き換え可能ドライブ（compact disc rewritable drive、ＣＤ－ＲＷ Ｄｒｉｖｅ）、若しくはデジタル多用途ディスクＲＯＭドライブ（digital versatile disc ROM drive、ＤＶＤ－ＲＯＭ）などの光ディスクドライブが挙げられるがこれらに限定されない他の記憶媒体との組み合わせで含むことができる。ディスク記憶装置のシステムバスへの接続を容易にするために、取り外し可能な又は取り外し不可能なインターフェースが用いられてもよい。

【0089】

コンピュータシステム２１０は、好適な動作環境で説明されるユーザと基本コンピュータリソースとの間で媒介として機能するソフトウェアを含むことを理解されたい。このようなソフトウェアとしてはオペレーティングシステムが挙げられる。ディスク記憶装置上に記憶され得るオペレーティングシステムは、コンピュータシステムのリソースを制御及び割り当てするように機能する。システムアプリケーションは、システムメモリ内又はディスク記憶装置上のいずれかに記憶されたプログラムモジュール及びプログラムデータを介して、オペレーティングシステムによるリソース管理を活用する。本明細書に記載される様々な構成要素は、様々なオペレーティングシステム又はオペレーティングシステムの組み合わせで実装することができることを理解されたい。

【0090】

ユーザは、Ｉ／Ｏインターフェース２５１に連結された入力装置（複数可）を介してコンピュータシステム２１０にコマンド又は情報を入力する。入力装置としては、マウス、トラックボール、スタイラス、タッチパッドなどのポインティング装置、キーボード、マイクロフォン、ジョイスティック、ゲームパッド、サテライト・ディッシュ、スキャナ、ＴＶチューナカード、デジタルカメラ、デジタルビデオカメラ、ウェブカメラなどが挙げられるが、これらに限定されない。これら及び他の入力装置は、インターフェースポート（複数可）を介し、システムバスを通してプロセッサに接続する。インターフェースポート（複数可）としては、例えば、シリアルポート、パラレルポート、ゲームポート、及びＵＳＢが挙げられる。出力装置（複数可）は、入力装置（複数可）と同じ種類のポートのうちのいくつかを使用する。したがって、例えば、ＵＳＢポートを使用して、コンピュータシステムに入力を提供し、またコンピュータシステムからの情報を出力装置に出力してもよい。出力アダプタは、特別なアダプタを必要とする出力装置の中でもとりわけ、モニタ、ディスプレイ、スピーカ、及びプリンタなどのいくつかの出力装置が存在することを示すために提供される。出力アダプタとしては、例示としてのものであり限定するものではないが、出力装置とシステムバスとの間の接続手段を提供するビデオ及びサウンドカードが挙げられる。遠隔コンピュータ（複数可）などの他の装置及び／又は装置のシステムは、入力及び出力機能の両方を提供することに留意されたい。

【0091】

コンピュータシステム２１０は、クラウドコンピュータ（複数可）などの１つ若しくは２つ以上の遠隔コンピュータ又はローカルコンピュータへの論理接続を使用するネットワーク化環境で動作することができる。遠隔クラウドコンピュータ（複数可）は、パーソナルコンピュータ、サーバ、ルータ、ネットワークＰＣ、ワークステーション、マイクロプロセッサベースの機器、ピア装置、又は他の一般的なネットワークノードなどであり得、典型的には、コンピュータシステムに関して説明される要素の多く又は全てを含む。簡潔にするために、遠隔コンピュータ（複数可）と共にメモリ記憶装置のみが示される。遠隔コンピュータ（複数可）は、ネットワークインターフェースを介してコンピュータシステムに論理的に接続され、続いて、通信接続を介して物理的に接続される。ネットワークインターフェースは、ローカルエリアネットワーク（local area network、ＬＡＮ）及びワイドエリアネットワーク（wide area network、ＷＡＮ）などの通信ネットワークを包含する。ＬＡＮ技術としては、光ファイバ分散データインターフェース（Fiber Distributed Data Interface、ＦＤＤＩ）、銅線分散データインターフェース（Copper Distributed Data Interface、ＣＤＤＩ）、Ｅｔｈｅｒｎｅｔ／ＩＥＥＥ８０２．３、Ｔｏｋｅｎ Ｒｉｎｇ／ＩＥＥＥ８０２．５などが挙げられる。ＷＡＮ技術としては、ポイントツーポイントリンク、統合サービスデジタルネットワーク（Integrated Services Digital Network、ＩＳＤＮ）及びその変形などの回路交換ネットワーク、パケット交換ネットワーク、並びにデジタル加入者回線（Digital Subscriber Line、ＤＳＬ）が挙げられるがこれらに限定されない。

【0092】

様々な態様では、図１０のコンピュータシステム２１０、図９～図１０の撮像モジュール２３８、及び／又は可視化システム２０８、及び／又はプロセッサモジュール２３２は、画像プロセッサ、画像処理エンジン、メディアプロセッサ、又はデジタル画像の処理に使用される任意の専用デジタル信号プロセッサ（digital signal processor、ＤＳＰ）を含んでもよい。画像プロセッサは、単一命令複数データ（single instruction multiple data、ＳＩＭＤ）、又は複数命令複数データ（multiple instruction multiple data、ＭＩＭＤ）技術を用いる並列コンピューティングを用いて速度及び効率を高めることができる。デジタル画像処理エンジンは、様々なタスクを実行することができる。画像プロセッサは、マルチコアプロセッサアーキテクチャを備えるチップ上のシステムであってもよい。

【0093】

通信接続（複数可）とは、ネットワークインターフェースをバスに接続するために用いられるハードウェア／ソフトウェアを指す。例示の明瞭さのために通信接続はコンピュータシステム内部に示されているが、通信接続はコンピュータシステム２１０の外部にあってもよい。例示のみを目的として、ネットワークインターフェースへの接続に必要なハードウェア／ソフトウェアとしては、通常の電話グレードモデム、ケーブルモデム、及びＤＳＬモデムを含むモデム、ＩＳＤＮアダプタ、並びにイーサネットカードなどの内部及び外部技術が挙げられる。

【0094】

図１１は、本開示の少なくとも１つの態様による、ＵＳＢネットワークハブ３００装置の一態様の機能ブロック図を示す。図示した態様では、ＵＳＢネットワークハブ装置３００は、Ｔｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓ製ＴＵＳＢ２０３６集積回路ハブを採用する。ＵＳＢネットワークハブ３００は、ＵＳＢ２．０規格に準拠する、上流ＵＳＢ送受信ポート３０２及び最大３つの下流ＵＳＢ送受信ポート３０４、３０６、３０８を提供するＣＭＯＳ装置である。上流ＵＳＢ送受信ポート３０２は、差動データプラス（ＤＰ０）入力とペアリングされた差動データマイナス（ＤＭ０）入力を含む差動ルートデータポートである。３つの下流ＵＳＢ送受信ポート３０４、３０６、３０８は、各ポートが差動データマイナス（ＤＭ１～ＤＭ３）出力とペアリングした差動データプラス（ＤＰ１～ＤＰ３）出力を含む差動データポートである。

【0095】

ＵＳＢネットワークハブ３００装置は、マイクロコントローラの代わりにデジタル状態マシンを備えて実装され、ファームウェアのプログラミングを必要としない。完全準拠したＵＳＢ送受信機が、上流ＵＳＢ送受信ポート３０２及び全ての下流ＵＳＢ送受信ポート３０４、３０６、３０８の回路に統合される。下流ＵＳＢ送受信ポート３０４、３０６、３０８は、ポートに取り付けられた装置の速度に応じてスルーレートを自動的に設定することによって、最高速度及び低速の装置の両方をサポートする。ＵＳＢネットワークハブ３００装置は、バスパワーモード又はセルフパワーモードのいずれかで構成されてもよく、電力を管理するためのハブパワー論理３１２を含む。

【0096】

ＵＳＢネットワークハブ３００装置は、シリアルインターフェースエンジン３１０（serial interface engine、ＳＩＥ）を含む。ＳＩＥ３１０は、ＵＳＢネットワークハブ３００ハードウェアのフロントエンドであり、ＵＳＢ仕様書の第８章に記載されているプロトコルの大部分を取り扱う。ＳＩＥ３１０は、典型的には、トランザクションレベルまでのシグナリングを理解する。これが取り扱う機能としては、パケット認識、トランザクションの並べ替え、ＳＯＰ、ＥＯＰ、ＲＥＳＥＴ、及びＲＥＳＵＭＥ信号の検出／生成、クロック／データ分離、非ゼロ復帰逆転（non-return-to-zero invert、ＮＲＺＩ）データ符号化／復号及びビットスタッフィング、ＣＲＣ生成及びチェック（トークン及びデータ）、パケットＩＤ（packet ID、ＰＩＤ）の生成、及びチェック／復号、並びに／又はシリアル・パラレル／パラレル・シリアル変換が挙げられ得る。３１０は、クロック入力３１４を受信し、ポート論理回路３２０、３２２、３２４を介して、上流ＵＳＢ送受信ポート３０２と下流ＵＳＢ送受信ポート３０４、３０６、３０８との間の通信を制御するために、サスペンド／レジューム論理並びにフレームタイマー３１６回路及びハブリピータ回路３１８に連結される。ＳＩＥ３１０は、シリアルＥＥＰＲＯＭインターフェース３３０を介してシリアルＥＥＰＲＯＭからコマンドを制御するように、インターフェース論理３２８を介してコマンドデコーダ３２６に連結される。

【0097】

様々な態様では、ＵＳＢネットワークハブ３００は、最大６つの論理層（階層）内に構成された１２７個の機能を単一のコンピュータに接続することができる。更に、ＵＳＢネットワークハブ３００は、通信及び電力分配の両方を提供する標準化された４本のワイヤケーブルを使用して全ての周辺機器に接続することができる。電力構成は、バスパワーモード及びセルフパワーモードである。ＵＳＢネットワークハブ３００は、個々のポート電力管理又は連動ポート電力管理のいずれかを備えるバスパワーハブ、及び個々のポート電力管理又は連動ポート電力管理のいずれかを備えるセルフパワーハブの、電力管理の４つのモードをサポートするように構成されてもよい。一態様では、ＵＳＢケーブル、ＵＳＢネットワークハブ３００を使用して、上流ＵＳＢ送受信ポート３０２はＵＳＢホストコントローラにプラグ接続され、下流ＵＳＢ送受信ポート３０４、３０６、３０８はＵＳＢに互換性のある装置を接続するために露出される、といった具合である。

【0098】

外科用ハブ及び／又は外科用ハブネットワークの構造及び機能に関する更なる詳細は、その全体が参照により本明細書に組み込まれる、「ＭＥＴＨＯＤ ＯＦ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ」と題する２０１８年４月１９日出願の米国特許仮出願第６２／６５９，９００号に見出すことができる。

【0099】

クラウドシステムハードウェア及び機能モジュール
図１２は、本開示の少なくとも１つの態様による、コンピュータ実装インタラクティブ外科システムのブロック図である。一態様では、このコンピュータ実装インタラクティブ外科用システムは、外科用ハブ、外科用器具、ロボットデバイス、及び手術室又は医療施設を含む様々な外科用システムの動作に関するデータを監視及び分析するように構成される。コンピュータ実装インタラクティブ外科システムは、クラウドベースの分析システムを含む。クラウドベースの分析システムは、外科用システムとして記載されているが、必ずしもそのように限定されるものではなく、クラウドベースの医療システムであってもよい。図１２に示すように、クラウドベースの分析システムは、複数の外科用器具７０１２（器具１１２と同じ又は同様であり得る）と、複数の外科用ハブ７００６（ハブ１０６と同じ又は同様であり得る）と、外科用ハブ７００６をクラウド７００４（クラウド２０４と同じ又は同様であり得る）に連結するための外科用データネットワーク７００１（ネットワーク２０１と同じ又は同様であり得る）とを含む。複数の外科用ハブ７００６のそれぞれは、１つ以上の外科用器具７０１２に通信可能に連結される。ハブ７００６はまた、ネットワーク７００１を介してコンピュータ実装インタラクティブ外科用システムのクラウド７００４に通信可能に連結される。クラウド７００４は、様々な外科用システムの動作に基づいて生成されたデータを記憶、操作、及び通信するためのハードウェア及びソフトウェアのリモートの集中型源である。図１２に示すように、クラウド７００４へのアクセスは、インターネット又は何らかの他の好適なコンピュータネットワークであってもよいネットワーク７００１を介して達成される。クラウド７００４に連結される外科用ハブ７００６は、クラウドコンピューティングシステムのクライアント側（すなわち、クラウドベースの分析システム）と見なすことができる。外科用器具７０１２は、本明細書に記載される様々な外科処置又は動作の制御及び実施のために、外科用ハブ７００６とペアリングされている。

【0100】

加えて、外科用器具７０１２は、（送受信機もまた含んでもよい）対応する外科用ハブ７００６へのデータ伝送、及び外科用ハブ７００６からのデータ伝送のための送受信機を備えてもよい。外科用器具７０１２と対応するハブ７００６との組み合わせは、医療手術を提供するための医療施設（例えば、病院）内の手術室などの、特定の位置を示してもよい。例えば、外科用ハブ７００６のメモリは、位置データを記憶してもよい。図１２に示すように、クラウド７００４は、中央サーバ７０１３（図１のリモートサーバ１１３及び／又は図９のリモートサーバ２１３と同じ又は同様であり得る）、ハブアプリケーションサーバ７００２、データ分析モジュール７０３４、及び入力／出力（「Ｉ／Ｏ」）インターフェース７００７を含む。クラウド７００４の中央サーバ７０１３は、クラウドコンピューティングシステムを集合的に管理し、これは、クライアントモジュール７００６による要求を監視し、リクエストを実行するためのクラウド７００４の処理能力を管理することを含む。中央サーバ７０１３のそれぞれは、ランダムアクセスメモリ（ＲＡＭ）などの揮発性メモリ及び磁気記憶装置などの不揮発性メモリを含むことができる、好適なメモリ装置７０１０に連結された１つ以上のプロセッサ７００８を備える。メモリ装置７０１０は、実行されると、プロセッサ７００８が、以下で説明するクラウドベースのデータ分析、動作、提案、及び他の動作のために、データ分析モジュール７０３４を実行させる、機械実行可能命令を含んでもよい。更に、プロセッサ７００８は、ハブ７００６によって独立して実行されるハブアプリケーションと独立して、又はハブアプリケーションと併せて、データ分析モジュール７０３４を実行することができる。中央サーバ７０１３はまた、メモリ２２１０内に常駐することができる集約された医療データデータベース２２１２を含む。

【0101】

ネットワーク７００１を介した様々な外科用ハブ７００６への接続に基づいて、クラウド７００４は、様々な外科用器具７０１２及びそれらの対応するハブ７００６によって生成された特定のデータからのデータを集約することができる。そのような集計データは、クラウド７００４の集計された医療データのデータベース７０１１内に格納されてもよい。具体的には、クラウド７００４は、有利には、集約されたデータ上でデータ分析及び動作を実行して、個別のハブ７００６がそれ自体で達成できない機能をもたらしてもよい。この目的のために、図１２に示すように、クラウド７００４及び外科用ハブ７００６は、情報を送受信するように通信可能に連結される。Ｉ／Ｏインターフェース７００７は、ネットワーク７００１を介して複数の外科用ハブ７００６に接続される。このようにして、Ｉ／Ｏインターフェース７００７は、外科用ハブ７００６と集約された医療データデータベース７０１１との間で情報を転送するように構成することができる。したがって、Ｉ／Ｏインターフェース７００７は、クラウドベースの分析システムの読み出し／書き込み動作を容易にし得る。このような読み出し／書き込み動作は、ハブ７００６からの要求に応じて実行されてもよい。これらの要求は、ハブアプリケーションを介してハブ７００６に送信される場合がある。Ｉ／Ｏインターフェース７００７は、１つ又は２つ以上の高速データポートを含んでもよく、これには、ユニバーサルシリアルバス（ＵＳＢ）ポート、ＩＥＥＥ１３９４ポート、並びにクラウド７００４をハブ７００６に接続するためのＷｉ－Ｆｉ及びＢｌｕｅｔｏｏｔｈ Ｉ／Ｏインターフェースが挙げられ得る。クラウド７００４のハブアプリケーションサーバ７００２は、外科用ハブ７００６によって実行されるソフトウェアアプリケーション（例えば、ハブアプリケーション）に対して共有機能をホストし、供給するように構成されている。例えば、ハブアプリケーションサーバ７００２は、ハブアプリケーションがハブアプリケーションによって作成された要求を管理して、集約された医療データデータベース７０１１へのアクセスを制御し、負荷バランス調整を実行してもよい。データ分析モジュール７０３４について、図１３を参照して更に詳細に説明する。

【0102】

本開示に記載される特定のクラウドコンピューティングシステムの構成は、具体的には、外科用器具７０１２、１１２などの医療用装置を使用して実行される医療動作及び処置の文脈において生じる様々な問題に対処するように設計されている。特に、外科用器具７０１２は、外科手術の成績を改善するための技術を実施するために、クラウド７００４と相互作用するように構成されたデジタル外科用装置であってもよい。様々な外科用器具７０１２及び／又は外科用ハブ７００６は、臨床医が外科用器具７０１２とクラウド７００４との間の相互作用の態様を制御してもよいように、タッチ制御されたユーザインターフェースを含んでもよい。聴覚的に制御されたユーザインターフェースなどの制御のための他の好適なユーザインターフェースもまた使用することもできる。

【0103】

図１３は、本開示の少なくとも１つの態様による、コンピュータ実装インタラクティブ外科システムの機能アーキテクチャを示すブロック図である。クラウドベース分析システムは、医療分野において具体的に生じる問題にデータ分析ソリューションを提供するために、クラウド７００４のプロセッサ７００８によって実行され得る複数のデータ分析モジュール７０３４を含む。図１３に示すように、クラウドベースのデータ分析モジュール７０３４の機能は、外科用ハブ７００６上でアクセスされ得るハブアプリケーションサーバ７００２によってホストされたハブアプリケーション７０１４を介して支援されてもよい。クラウドプロセッサ７００８及びハブアプリケーション７０１４は、データ分析モジュール７０３４を実行するために連携して動作してもよい。アプリケーションプログラムインターフェース（ＡＰＩ）７０１６は、ハブアプリケーション７０１４に対応する一連のプロトコル及びルーチンを定義する。加えて、ＡＰＩ７０１６は、アプリケーション７０１４の動作のために、集計された医療データのデータベース７０１１内へのデータの格納及びここからの読み出しを管理する。キャッシュ７０１８はまた、データを（例えば、一時的に）記憶し、アプリケーション７０１４によって使用されるデータのより効率的な検索のためにＡＰＩ ７０１６に結合される。図１３のデータ分析モジュール７０３４は、資源最適化７０２０、データ収集及び集約７０２２、認可及びセキュリティ７０２４、制御プログラムの更新７０２６、患者転帰分析７０２８、提案７０３０、及びデータ分類及び優先順位付け７０３２のためのモジュールを含む。他の好適なデータ分析モジュールはまた、いくつかの態様により、クラウド７００４によって実装される場合がある。一態様では、データ分析モジュールは、傾向、転帰、及び他のデータの分析に基づいて特定の提案に使用される。

【0104】

例えば、データ収集及び集約モジュール７０２２は、顕著な特徴又は構成（例えば、傾向）の識別、冗長データセットの管理、及び手術によってグループ化することができるが、必ずしも実際の外科手術日付及び外科医に一致していないペアリングされたデータセットへのデータの保存を含む、自己記述型データ（例えば、メタデータ）を生成するために使用される場合がある。特に、外科用器具７０１２の動作から生成される対のデータセットは、例えば出血又は非出血事象などの二元分類を適用することを含み得る。より一般的には、バイナリ分類は、望ましい事象（例えば、成功した外科処置）又は望ましくない事象（例えば、誤発射又は誤使用された外科用器具７０１２）のいずれかとして特徴付けられてもよい。集約された自己記述型データは、外科用ハブ７００６の様々なグループ又はサブグループから受信された個々のデータに相当してもよい。したがって、データ収集及び集約モジュール７０２２は、外科用ハブ７００６から受信した生データに基づいて、集約メタデータ又は他の編成されたデータを生成することができる。この目的のために、プロセッサ７００８は、データ分析モジュール７０３４を実行するために、ハブアプリケーション７０１４及び集約された医療データデータベース７０１１に動作的に連結することができる。データ収集及び集約モジュール７０２２は、集約された編成済みデータを集約された医療データデータベース２２１２に記憶してもよい。

【0105】

資源最適化モジュール７０２０は、この集約されたデータを分析して、特定の医療施設又は医療施設のグループに関する資源の最適な使用を決定するように構成することができる。例えば、資源最適化モジュール７０２０は、そのような器具７０１２の対応する予測される要求に基づいて、医療施設のグループに関する外科用ステープラ７０１２の最適な順序点を決定してもよい。資源最適化モジュール７０２０はまた、資源使用を改善することができるかどうかを判定するために、様々な医療施設の資源使用又は他の動作構成を評価する場合があるであろう。同様に、提案モジュール７０３０は、データ収集及び集約モジュール７０２２から集約された編成済みデータを分析して提案を提供するように構成することができる。例えば、提案モジュール７０３０は、特定の外科用器具７０１２が、例えば、期待される誤り率よりも高いことに基づいて改善されたバージョンにアップグレードされるべきであることを、医療施設（例えば、病院などの医療サービス提供者）に提案することができる場合もある。加えて、提案モジュール７０３０及び／又は資源最適化モジュール７０２０は、製品再注文ポイントなどのより良好な供給チェーンパラメータを提案し、異なる外科用器具７０１２、その使用の、又は手術結果を改善する手順工程などの提案を提供することができる場合もある。医療施設は、対応する外科用ハブ７００６を介してそのような提案を受信することができる。様々な外科用器具７０１２のパラメータ又は構成に関するより具体的な提案もまた提供することができる。ハブ７００６及び／又は外科用器具７０１２はそれぞれ、クラウド７００４によって提供されるデータ又は提案を表示するディスプレイスクリーンを有することができる場合もある。

【0106】

患者転帰分析モジュール７０２８は、外科用器具７０１２の現在使用されている動作パラメータに関連付けられた手術結果を分析することができる。患者転帰分析モジュール７０２８はまた、他の潜在的な動作パラメータを分析及び評価してもよい。この接続では、提案モジュール７０３０は、より良好な封止又はより少ない出血などの、より良好な手術結果をもたらすことに基づいて、これらの他の潜在的な動作パラメータを使用して提案することができる場合もある。例えば、推奨モジュール７０３０は、対応するステープル留め外科用器具７０１２に特定のカートリッジをいつ使用すべきかに関する推奨を、外科用ハブ７００６に送信することができる。したがって、クラウドベースの分析システムは、共通変数を制御している間に、生データの大規模な収集を分析し、複数の医療施設にわたって（有利には、集約されたデータに基づいて決定される）集中的提案を提供するように構成されてもよい。例えば、クラウドベースの分析システムは、医療行為の種類、患者の種類、患者の数、医療提供者／施設が、同様の種類の器具などを使用する医療提供者の間の地理的類似性を分析、評価、及び／又は集約することができる場合もあり、医療提供者／施設は、同様の種類の器具などを使用する。

【0107】

制御プログラム更新モジュール７０２６は、対応する制御プログラムが更新されたときに、様々な外科用器具７０１２の提案を実施するように構成することができる場合もある。例えば、患者転帰分析モジュール７０２８は、特定の制御パラメータを成功した（又は失敗した）結果とリンクする相関関係を識別することができる場合もある。このような相関関係は、更新された制御プログラムが制御プログラム更新モジュール７０２６を介して外科用器具７０１２に送信されるときに対処されてもよい。対応するハブ７００６を介して送信される器具７０１２への更新は、クラウド７００４のデータ収集及び集約モジュール７０２２によって収集され、かつ分析された集約された成績データを組み込んでもよい。加えて、患者転帰分析モジュール７０２８及び提案モジュール７０３０は、集約された成績データに基づいて、器具７０１２を使用する改善された方法を識別することができる場合もある。

【0108】

クラウドベースの分析システムは、クラウド７００４によって実装されるセキュリティ機能を含んでもよい。これらのセキュリティ機能は、認可及びセキュリティモジュール７０２４によって管理されてもよい。それぞれの外科用ハブ７００６は、ユーザ名、パスワード、及び他の好適なセキュリティ資格情報などの関連する固有の資格情報を有することができる。これらの資格情報は、メモリ７０１０に記憶され、許可されたクラウドアクセスレベルに関連付けることができる場合もある。例えば、正確な資格情報を提供することに基づいて、外科用ハブ７００６は、クラウドと所定の範囲まで通信するアクセスを付与されてもよい（例えば、特定の定義された種類の情報の送信又は受信を行ってもよい）。この目的のために、クラウド７００４の集約された医療データデータベース７０１１は、提供された資格情報の精度を検証するための資格情報のデータベースを含んでもよい。異なる資格情報は、クラウド７００４によって生成されたデータ分析を受信するための所定のアクセスレベルなど、クラウド７００４との相互作用のための様々なレベルの許可に関連付けられてもよい。

【0109】

更に、セキュリティ目的のために、クラウドは、ハブ７００６、器具７０１２、及び禁止された装置の「ブラックリスト」を含んでもよい他の装置のデータベースを維持することができる場合もある。具体的には、ブラックリスト上に列挙された外科用ハブ７００６は、クラウドと相互作用することを許可されないことがあり、一方、ブラックリスト上に列挙された外科用器具７０１２は、対応するハブ７００６に対して機能的にアクセスすることができない、及び／又は対応するハブ７００６とペアリングされても機能を制限されることがある。追加的に又は代替的に、クラウド７００４は、不適合性又は他の指定された基準に基づいて、器具７０１２にフラグを立ててもよい。このようにして、偽造医療用装置及びそのような装置の、クラウドベースの分析システム全体での不適切な再使用を識別し、対処することができる。

【0110】

外科用器具７０１２は、無線送受信機を使用して、例えば、対応するハブ７００６及びクラウド７００４へのアクセスのための認可資格情報を表してもよい無線信号を送信してもよい。有線送受信機はまた、信号を送信するために使用してもよい。そのような認可資格情報は、外科用器具７０１２のそれぞれのメモリ装置に記憶することができる。認可及びセキュリティモジュール７０２４は、認可資格情報が正確であるか又は偽造であるかを判定することができる。認可及びセキュリティモジュール７０２４はまた、強化されたセキュリティのために、認可資格情報を動的に生成してもよい。資格情報はまた、ハッシュベースの暗号化を使用することなどによって、暗号化することができる場合もある。適切な認可を送信すると、外科用器具７０１２は、対応するハブ７００６及び最終的にはクラウド７００４に信号を送信して、器具７０１２が医療データを取得して送信する準備ができていることを示してもよい。これに応答して、クラウド７００４は、集約された医療データデータベース７０１１に記憶するための医療データを受信することが可能な状態に遷移してもよい。このデータ伝送準備は、例えば、器具７０１２上の光インジケータによって示すことができる場合もある。クラウド７００４はまた、それらの関連する制御プログラムを更新するために、外科用器具７０１２に信号を送信することができる。クラウド７００４は、制御プログラムに対するソフトウェアアップデートが適切な外科用器具７０１２にのみ送信されるように、特定のクラスの外科用器具７０１２（例えば、電気外科用器具）に向けられた信号を送信することができる。更に、クラウド７００４は、選択的データ送信及び認可資格情報に基づいてローカル又はグローバルの問題に対処するために、システムワイドソリューションを実装するために使用することができる場合もある。例えば、外科用器具７０１２のグループが共通の製造不良を有するものとして識別される場合、クラウド７００４は、このグループに対応する認可資格情報を変更して、このグループの動作ロックアウトを実施してもよい。

【0111】

クラウドベースの分析システムは、（例えば、提案モジュール２０３０を介して）改善された実務及び提案の変更を判定するために、複数の医療施設（例えば、病院のような医療施設）を監視することを可能にしてもよい。したがって、クラウド７００４のプロセッサ７００８は、個々の医療施設に関連付けられたデータを分析して、施設を識別し、そのデータを他の医療施設に関連付けられた他のデータと集約することができる。グループは、例えば、同様の操作行為又は地理的位置に基づいて定義することができる場合がある。このようにして、クラウド７００４は、医療施設グループの幅広い分析及び提案を提供してもよい。クラウドベースの分析システムはまた、強化された状況認識のために使用することができる場合がある。例えば、プロセッサ７００８は、（全体的な動作及び／又は様々な医療処置に対する）特定の施設に対するコスト及び有効性に関する提案の効果を予測的にモデル化してもよい。その特定の施設に関連するコスト及び有効性はまた、他の施設又は任意の他の同等の施設の対応するローカル領域と比較することもできる。

【0112】

データ分類及び優先順位付けモジュール７０３２は、重大性（例えば、データに関連付けられた医療イベントの重篤度、意外さ、不審さ）に基づいてデータを優先順位付けし、かつ分類してもよい。この分類及び優先順位付けは、本明細書に記載されるクラウドベースの分析及び動作を改善するために、上記の他のデータ分析モジュール７０３４の機能と併せて使用してもよい。例えば、データ分類及び優先順位付けモジュール７０３２は、データ収集及び集約モジュール７０２２並びに患者転帰分析モジュール７０２８によって実行されるデータ分析に対する優先度を割り当てることができる。異なる優先順位レベルは、迅速応答のための上昇、特別な処理、集約された医療データデータベース７０１１からの除外、又は他の好適な応答などの、（緊急性のレベルに対応する）クラウド７００４からの特定の応答をもたらすことができる。更に、必要に応じて、クラウド７００４は、対応する外科用器具７０１２からの追加データのために、ハブアプリケーションサーバを介して要求（例えば、プッシュメッセージ）を送信することができる。プッシュメッセージは、支持又は追加のデータを要求するために、対応するハブ７００６上に表示された通知をもたらすことができる。このプッシュメッセージは、クラウドが有意な不規則性又は外れ値を検出し、クラウドが不規則性の原因を判定することができない状況で必要とされてもよい。中央サーバ７０１３は、例えば、データが所定の閾値を超えて予測値と異なると判定されるとき、又はセキュリティが含まれていたと見られる場合など、特定の重大な状況においてこのプッシュメッセージをトリガするようにプログラムされてもよい。

【0113】

クラウド分析システムに関する更なる詳細は、その全体が参照により本明細書に組み込まれる、「ＭＥＴＨＯＤ ＯＦ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ」と題する２０１８年４月１９日出願の米国特許仮出願第６２／６５９，９００号に見出すことができる。

【0114】

状況認識
感知されたデータに応答する制御アルゴリズムを含む「インテリジェント」装置は、感知されたデータを考慮することなく動作する「データ処理能力のない（dumb）」装置に改善を加えたものであり得るが、いくつかの感知されたデータは、単独で考慮される場合、すなわち、実行される外科処置のタイプ又は手術されている組織のタイプのコンテキストなしでは、不完全又は決定的ではない可能性がある。処置コンテキストを知る（例えば、手術される組織のタイプ又は行われている処置のタイプを知る）ことがなければ、制御アルゴリズムは、特定のコンテキストを含まない感知データが与えられると、モジュール式装置を不正確に又は準最適に制御することがある。例えば、特定の感知されたパラメータに応答して外科用器具を制御するための制御アルゴリズムの最適な方法は、手術されている特定の組織のタイプに従って変化する可能性がある。これは、異なる組織のタイプが異なる特性（例えば、引き裂きに対する抵抗）を有し、これにより外科用器具によって取られた動作に対して異なって応答するという事実に起因する。したがって、特定のパラメータについて同じ測定値が感知された場合であっても、外科用器具が異なる動作をとることが望ましいことがある。１つの具体的な例として、器具がそのエンドエフェクタを閉鎖するために予想外に高い力を感知することに応答して外科用ステープル及び切断器具を制御する最適な方法は、組織のタイプが引き裂きの影響を受けやすいか、又はこれに耐性があるかによって異なる。肺組織などの引き裂きの影響を受けやすい組織の場合、器具の制御アルゴリズムは、組織の引き裂きを回避するために、閉鎖するための予想外に高い力に応答してモータを最適にランプダウンさせる。胃組織などの引き裂きに耐性がある組織の場合、器具の制御アルゴリズムは、エンドエフェクタが組織に適切にクランプされることを確実にするために、閉鎖するための予想外に高い力に応答してモータを最適にランプアップさせる。肺組織がクランプされているのか、胃組織がクランプされているのかを知らなければ、制御アルゴリズムは、準最適な決定を行うことがある。

【0115】

１つの解決策は、様々なデータソースから受信したデータに基づいて行われる外科処置に関する情報を導出し、次いで、ペアリングされるモジュール式装置を適宜制御するように構成されたシステムを含む、外科用ハブを利用する。換言すれば、外科用ハブは、受信したデータから外科処置に関する情報を推定し、次いで、外科処置の推定されたコンテキストに基づいて、外科用ハブとペアリングされるモジュール式装置を制御するように構成される。図１４は、本開示の少なくとも１つの態様による、状況認識外科システム５１００の図を示す。いくつかの例示では、データソース５１２６は、例えば、モジュール式装置５１０２（患者及び／又はモジュール式装置自体に関連付けられたパラメータを検出するように構成されたセンサを含むことができる）、データベース５１２２（例えば、患者記録を含むＥＭＲデータベース）、及び患者監視装置５１２４（例えば、血圧（ＢＰ）モニタ及び心電図（ＥＫＧ）モニタ）を含む。

【0116】

外科用ハブ５１０４（多くの点でハブ１０６と同様であり得る）は、例えば、受信したデータの特定の組み合わせ又はデータソース５１２６からデータが受信される特定の順序に基づいて、データから外科処置に関するコンテキスト情報を導出するように構成され得る。受信したデータから推定されるコンテキスト情報は、例えば、行われる外科処置のタイプ、外科医が行っている外科処置の特定の工程、手術されている組織のタイプ、又は処置の対象である体腔を含むことができる。受信したデータから外科処置に関連する情報を導出又は推定するための外科用ハブ５１０４のいくつかの態様によるこの能力は、「状況認識」と称され得る。１つの例示では、外科用ハブ５１０４は、受信したデータから外科処置に関連するコンテキスト情報を導出する外科用ハブ５１０４に関連付けられたハードウェア及び／又はプログラミングである状況認識システムを組み込むことができる。

【0117】

外科用ハブ５１０４の状況認識システムは、様々な異なる方法でデータソース５１２６から受信したデータからコンテキスト情報を導出するように構成され得る。一例示では、状況認識システムは、様々な入力（例えば、データベース５１２２、患者監視装置５１２４、及び／又はモジュール式装置５１０２からのデータ）を、外科処置に関する対応するコンテキスト情報と相関させるために、訓練データで訓練されたパターン認識システム、又は機械学習システム（例えば、人工ニューラルネットワーク）を含む。換言すれば、機械学習システムは、提供された入力から外科処置に関するコンテキスト情報を正確に導出するように訓練され得る。別の例示的な例では、状況認識システムは、外科処置に関する事前に特徴付けされたコンテキスト情報を、コンテキスト情報に対応する１つ又は２つ以上の入力（又は入力の範囲）と対応させて記憶する、ルックアップテーブルを含むことができる。１つ又は２つ以上の入力による問い合わせに応答して、ルックアップテーブルは、モジュール式装置５１０２を制御するために状況認識システムの対応するコンテキスト情報を返すことができる。１つの例示では、外科用ハブ５１０４の状況認識システムによって受信されたコンテキスト情報は、１つ又は２つ以上のモジュール式装置５１０２の特定の制御調整又は制御調整のセットに関連付けられる。別の例示では、状況認識システムは、コンテキスト情報を入力として提供されたときに１つ又は２つ以上のモジュール式装置５１０２の１つ又は２つ以上の制御調整を生成又は取得する、更なる機械学習システム、ルックアップテーブル、又は他のそのようなシステムを含む。

【0118】

状況認識システムを組み込む外科用ハブ５１０４は、外科用システム５１００に多くの利益を提供する。１つの利益は、感知及び収集されたデータの解釈を改善することを含み、これは、外科処置の過程中の処理精度及び／又はデータの使用を改善する。以前の例に戻るために、状況認識外科用ハブ５１０４は、どのタイプの組織が手術されているかを判定することができ、したがって、外科用器具のエンドエフェクタを閉じるために予想外に高い力が検出されると、状況認識外科用ハブ５１０４は、組織のタイプに合わせて外科用器具のモータを正しくランプアップ又はランプダウンすることができる。

【0119】

別の実施例として、手術されている組織のタイプは、特定の組織間隙測定のための外科用ステープル留め及び切断器具の圧縮速度及び負荷閾値になされる調整に影響を及ぼすことができる。状況認識外科用ハブ５１０４は、行われている外科処置が胸部処置であるのか又は腹部処置であるのかを推定することができ、これにより状況認識外科用ハブ５１０４は、外科用ステープル留め及び切断器具のエンドエフェクタによってクランプされている組織が肺であるのか（胸部手術の場合）又は胃であるのか（腹部手術の場合）を判定することができる。次いで、外科用ハブ５１０４は、外科用ステープル留め及び切断器具の圧縮速度及び負荷閾値を、組織のタイプに合わせて適切に調整することができる。

【0120】

更に別の実施例として、送気処置中に手術されている体腔の種類は、排煙器の機能に影響を及ぼし得る。状況認識手術ハブ５１０４は、手術部位が（外科処置が送気を利用していると判定することによって）圧力下にあるかどうかを判定し、処置タイプを判定することができる。処置タイプが一般的に特定の体腔内で実行されるため、外科用ハブ５１０４は、手術されている体腔に合わせて適切に排煙器のモータ速度を制御することができる。したがって、状況認識手術ハブ５１０４は、胸部手術及び腹部手術の両方のために一定量の煙排出を提供することができる。

【0121】

更に別の実施例として、行われている処置のタイプは、超音波外科用器具又は高周波（ＲＦ）電気外科用器具が作動するのに最適なエネルギーレベルに影響を及ぼし得る。関節鏡処置は、例えば、超音波外科用器具又はＲＦ電気外科用器具のエンドエフェクタが流体中に浸漬されるため、より高いエネルギーレベルを必要とする。状況認識外科用ハブ５１０４は、外科処置が関節鏡処置であるかどうかを判定することができる。次いで、外科用ハブ５１０４は、流体充填環境を補償するために、発生器のＲＦ電力レベル又は超音波振幅（すなわち、「エネルギーレベル」）を調整することができる。関連して、手術されている組織のタイプは、超音波外科用器具又はＲＦ電気外科用器具が作動するのに最適なエネルギーレベルに影響を及ぼし得る。状況認識外科用ハブ５１０４は、外科処置の予想される組織プロファイルに従って、どのタイプの外科処置が行われているかを判定し、次いで、超音波外科用器具又はＲＦ電気外科用器具のエネルギーレベルをそれぞれカスタマイズすることができる。更に、状況認識外科用ハブ５１０４は、処置ベースでのみではなく、外科処置の過程にわたって、超音波外科用器具又はＲＦ電気外科用器具のエネルギーレベルを調整するように構成され得る。状況認識外科用ハブ５１０４は、外科処置のどの工程が行われているか、又はその後に行われるかを判定し、次いで発生器及び／又は超音波外科用器具若しくはＲＦ電気外科用器具の制御アルゴリズムを更新して、外科処置の工程に従って予想される組織タイプに適切な値にエネルギーレベルを設定することができる。

【0122】

更に別の例として、外科用ハブ５１０４が１つのデータソース５１２６から引き出す結論を改善するために、追加のデータソース５１２６からデータが引き出されることができる。状況認識外科用ハブ５１０４は、モジュール式装置５１０２から受信したデータを、他のデータソース５１２６からの外科処置に関して構築したコンテキスト情報で増強することができる。例えば、状況認識外科用手術ハブ５１０４は、医療用撮像装置から受信したビデオ又は画像データに従って、止血が発生したかどうか（すなわち、手術部位での出血が止まっているかどうか）を判定するように構成され得る。しかしながら、場合によっては、ビデオ又は画像データは、決定的でない可能性がある。したがって、１つの例示では、外科用ハブ５１０４は、生理学的測定（例えば、外科用ハブ５１０４に通信可能に接続されたＢＰモニタによって感知された血圧）を、（例えば、外科用ハブ５１０４に通信可能に連結された医療用撮像装置１２４（図２）からの）止血の視覚データ又は画像データと比較して、ステープルライン又は組織溶接の完全性についての判定を行うように更に構成され得る。換言すれば、外科用ハブ５１０４の状況認識システムは、生理学的測定データを考慮して、可視化データを分析する際に追加のコンテキストを提供することができる。追加のコンテキストは、可視化データがそれ自体では決定的ではないか、又は不完全であり得る場合に有用であり得る。

【0123】

別の利益としては、外科処置の過程中に医療従事者が外科用システム５１００と相互作用するか又はこれを制御するために必要とされる回数を低減するために、行われている外科処置の特定の工程に従って、ペアリングされるモジュール式装置５１０２を積極的かつ自動的に制御することを含む。例えば、状況認識外科用ハブ５１０４は、処置の後続の工程が器具の使用を必要とすると判定した場合に、ＲＦ電気外科用器具が接続されている発生器を積極的に起動させることができる。エネルギー源を積極的に起動することにより、処置の先行する工程が完了するとすぐに器具を使用準備完了にすることができる。

【0124】

別の実施例として、状況認識外科用ハブ５１０４は、外科処置の現在又は後続の工程が、ディスプレイ上の異なる視界又は拡大の度合いを必要とするかどうかを、外科医が見る必要があると予想される手術部位における特徴（複数可）に従って判定することができる。次いで、外科用ハブ５１０４は、（例えば、可視化システム１０８のために医療用撮像装置によって供給される）表示された視界を、それに応じて積極的に変化させることができ、ディスプレイが外科処置にわたって自動的に調整するようにする。

【0125】

更に別の例として、状況認識手術ハブ５１０４は、外科処置のどの工程が行われているか、又はその後に実行されるか、及び特定のデータ又はデータ間の比較が外科処置のその工程に必要とされるかどうかを判定することができる。外科用ハブ５１０４は、外科医が特定の情報を尋ねるのを待つことなく、行われている外科処置の工程に基づいて、自動的にデータスクリーンを呼び出すように構成され得る。

【0126】

別の利益は、外科処置のセットアップ中又は外科処置の過程中にエラーをチェックすることを含む。例えば、状況認識外科用ハブ５１０４は、手術室が、行われる外科処置のために適切に又は最適にセットアップされているかどうかを判定することができる。外科用ハブ５１０４は、行われている外科処置のタイプを判定し、（例えば、メモリから）対応するチェックリスト、製品位置、又はセットアップニーズを取得し、次いで、現在の手術室のレイアウトを、外科用ハブ５１０４が行われていると判定した外科処置のタイプの標準レイアウトと比較するように構成され得る。１つの例示では、外科用ハブ５１０４は、例えば好適なスキャナによってスキャンされた処置用のアイテムのリスト、及び／又は外科用ハブ５１０４とペアリングされた装置のリストを、所与の外科処置のための推奨又は予期されるアイテム及び／又は装置のマニフェストと比較するように構成され得る。リスト間に任意の不連続性が存在する場合、外科用ハブ５１０４は、特定のモジュール式装置５１０２、患者監視装置５１２４、及び／又は他の外科用アイテムが欠落していることを示す警告を提供するように構成され得る。１つの例示では、外科用ハブ５１０４は、例えば、近接センサによってモジュール式装置５１０２及び患者監視装置５１２４の相対距離又は位置を判定するように構成され得る。外科用ハブ５１０４は、装置の相対位置を、特定の外科処置のための推奨又は予想されるレイアウトと比較することができる。レイアウト間に不連続性が存在する場合、外科用ハブ５１０４は、外科処置の現在のレイアウトが推奨されるレイアウトから逸脱していることを示す警告を提供するように構成され得る。

【0127】

別の例として、状況認識外科用ハブ５１０４は、外科医（又は他の医療従事者）が誤りを犯しているか、又は別の方法で外科処置の過程中に期待される一連の行動から逸脱しているかどうかを判定することができる。例えば、外科用ハブ５１０４は、実施される外科処置のタイプを判定し、（例えば、メモリから）機器使用の工程又は順序の対応するリストを取り出し、次いで、外科処置の過程中に行われている工程、又は使用されている機器を、外科用ハブ５１０４が行われていると判定した外科処置のタイプの予想された工程又は機器と比較するように構成され得る。１つの例示では、外科用ハブ５１０４は、外科処理における特定の工程で、予期せぬアクションが行われているか、又は予期せぬ装置が利用されていることを示す警告を提供するように構成され得る。

【0128】

全体的に、外科用ハブ５１０４のための状況認識システムは、各外科処置の特定のコンテキストのために外科用器具（及び他のモジュール式装置５１０２）を調整し（例えば異なる組織タイプに適応させるなど）、手術処置中のアクションを検証することによって、外科処置の結果を改善する。状況認識システムはまた、処置の特定のコンテキストに従って、次の工程を自動的に示唆すること、データを提供すること、及び手術現場内のディスプレイ及び他のモジュール式装置５１０２を調整することによって、外科処置を実行する際の外科医の効率を改善する。

【0129】

ここで図１５を参照すると、例えば、外科用ハブ１０６又は２０６（図１～図１１）などのハブの状況認識を示す予定表５２００が示されている。予定表５２００は例示的な外科処置、及び外科用ハブ１０６、２０６が、外科処置の各工程でデータソースから受信したデータから導き出すことができるコンテキスト情報である。予定表５２００は、手術室を設置することから開始し、患者を術後回復室に移送することで終了する肺区域切除手術の過程で、看護師、外科医、及び他の医療関係者によって取られるであろう典型的な工程を示す。

【0130】

状況認識外科用ハブ１０６、２０６は、外科処置の過程全体にわたって、医療関係者が外科用ハブ１０６、２０６とペアリングされたモジュール式装置を利用する度に生成されるデータを含むデータをデータソースから受信する。外科用ハブ１０６、２０６は、ペアリングされたモジュール式装置及び他のデータソースからこのデータを受信して、任意の所与の時間に処置のどの工程が実施されているかなどの新しいデータが受信されると、進行中の処置に関する推定（すなわち、コンテキスト情報）を継続的に導出することができる。外科用ハブ１０６、２０６の状況認識システムは、例えば、レポートを生成するために処置に関するデータを記録する、医療関係者によって取られている工程を検証する、特定の処置工程に関連し得るデータ又はプロンプトを（例えば、ディスプレイスクリーンを介して）提供する、コンテキストに基づいてモジュール式装置を調節する（例えば、モニタを起動する、医療用撮像装置の視界（ＦＯＶ）を調節する、又は超音波外科用器具若しくはＲＦ電気外科用器具のエネルギーレベルを変更するなど）、及び上記の任意の他のこうした動作を行うことが可能である。

【0131】

この例示的な処置における第１の工程５２０２として、病院職員は、病院のＥＭＲデータベースから患者のＥＭＲを読み出す。ＥＭＲにおける選択された患者データに基づいて、外科用ハブ１０６、２０６は、実行される処置が胸部処置であることを判定する。

【0132】

第２の工程５２０４では、職員は、処置のために入来する医療用品をスキャンする。外科用ハブ１０６、２０６は、スキャンされた用品を様々な種類の処置で利用される用品のリストと相互参照し、用品の組み合わせ（mix of supplies）が胸部処置に対応することを確認する。更に、外科用ハブ１０６、２０６はまた、処置が楔形処置ではないと判定することができる（入来する用品が、胸郭楔形処置に必要な特定の用品を含まないか、又は別の点で胸郭楔形処置に対応していないかのいずれかであるため）。

【0133】

第３の工程５２０６では、医療関係者は、外科用ハブ１０６、２０６に通信可能に接続されたスキャナを介して患者のバンドをスキャンする。続いて、外科用ハブ１０６、２０６は、スキャンされたデータに基づいて患者の識別情報を確認することができる。

【0134】

第４の工程５２０８では、医療スタッフが補助装置をオンにする。利用される補助装置は、外科処置の種類及び外科医によって使用される技術に従って変わり得るが、この例示的な場合では、これらとしては、排煙器、吸入器、及び医療用撮像装置が挙げられる。起動されると、モジュール式装置である補助機器は、その初期化プロセスの一部として、モジュール式装置の特定の近傍内に位置する外科用ハブ１０６、２０６と自動的にペアリングすることができる。続いて、外科用ハブ１０６、２０６は、この術前又は初期化段階中にそれとペアリングされるモジュール式装置の種類を検出することによって、外科処置に関するコンテキスト情報を導出することができる。この特定の実施例では、外科用ハブ１０６、２０６は、ペアリングされたモジュール式装置のこの特定の組み合わせに基づいて、外科処置がＶＡＴＳ手術であると判定する。患者のＥＭＲからのデータの組み合わせ、手術に使用される医療用品のリスト、及びハブに接続するモジュール式装置の種類に基づいて、外科用ハブ１０６、２０６は、外科チームが実施する特定の処置を概ね推定することができる。外科用ハブ１０６、２０６が、何の特定の処置が実施されているかを知ると、続いて外科用ハブ１０６、２０６は、メモリから、又はクラウドからその処置の工程を読み出して、次に接続されたデータソース（例えば、モジュール式装置及び患者監視装置）からその後受信したデータを相互参照して、外科処置のどの工程を外科チームが実行しているかを推定することができる。

【0135】

第５の工程５２１０では、職員は、ＥＫＧ電極及び他の患者監視装置を患者に取り付ける。ＥＫＧ電極及び他の患者監視装置は、外科用ハブ１０６、２０６とペアリングすることができる。外科用ハブ１０６、２０６が患者監視装置からデータの受信を開始すると、外科用ハブ１０６、２０６は患者が手術室にいることを確認する。

【0136】

第６の工程５２１２では、医療関係者は患者に麻酔を誘発する。外科用ハブ１０６、２０６は、例えば、ＥＫＧデータ、血圧データ、ベンチレータデータ、又はこれらの組み合わせを含む、モジュール式装置及び／又は患者監視装置からのデータに基づいて、患者が麻酔下にあることを推定することができる。第６の工程５２１２が完了すると、肺区域切除手術の術前部分が完了し、手術部分が開始する。

【0137】

第７の工程５２１４では、操作されている患者の肺が虚脱される（換気が対側肺に切り替えられる間に）。外科用ハブ１０６、２０６は、例えば、患者の肺が虚脱されたことをベンチレータデータから推定することができる。外科用ハブ１０６、２０６は、患者の肺が虚脱したのを検出したことを、処置の予期される工程（事前にアクセス又は読み出すことができる）と比較することができるため、処置の手術部分が開始したことを推定して、それによって肺を虚脱させることがこの特定の処置における第１の手術工程であると判定することができる。

【0138】

第８の工程５２１６では、医療用撮像装置（例えば、スコープ）が挿入され、医療用撮像装置からのビデオ映像が開始される。外科用ハブ１０６、２０６は、医療用撮像装置への接続を通じて医療用撮像装置データ（すなわち、ビデオ又は画像データ）を受信する。医療用撮像装置データを受信すると、外科用ハブ１０６、２０６は、外科処置の腹腔鏡部分が開始したことを判定することができる。更に、外科用ハブ１０６、２０６は、実施されている特定の処置が、肺葉切除とは対照的に区域切除術であると判定することができる（処置の第２の工程５２０４で受信したデータに基づいて、楔形処置は外科用ハブ１０６、２０６によって既に割り引かれていることに留意されたい）。医療用撮像装置１２４（図２）からのデータは、患者の解剖学的構造の可視化に関して配向されている医療用撮像装置の角度を判定することによる、用いられている（すなわち、起動されており、外科用ハブ１０６、２０６とペアリングされている）数又は医療用撮像装置を監視することによる、及び用いられている可視化装置の種類を監視することによる、ことを含む多くの異なる方法の中から実施されている処置の種類に関するコンテキスト情報を判定するために用いられ得る。例えば、ＶＡＴＳ肺葉切除術を実施するための１つの技術は、カメラを患者の胸腔の前下方角部の横隔膜上方に配置し、一方、ＶＡＴＳ区域切除術を実施するための１つの技術は、カメラを、区域裂に対して前肋間位置に配置する。例えば、パターン認識又は機械学習技術を使用して、状況認識システムは、患者の解剖学的構造の可視化に基づいて、医療用撮像装置の位置を認識するように訓練され得る。別の例として、ＶＡＴＳ肺葉切除術を実施するための１つの技術は単一の医療用撮像装置を利用するが、ＶＡＴＳ区域切除術を実施するための別の技術は複数のカメラを利用する。更に別の例として、ＶＡＴＳ区域切除術を実施するための１つの技術は、区域裂を可視化するために赤外線光源（可視化システムの一部として外科用ハブに通信可能に連結され得る）を利用し、これはＶＡＴＳ肺葉切除術では利用されない。医療用撮像装置からのこのデータのいずれか又は全てを追跡することによって、外科用ハブ１０６、２０６は、実行中の特定の種類の外科処置、及び／又は特定の種類の外科処置に使用されている技術を判定することができる。

【0139】

第９の工程５２１８で、外科チームは、処置の切開工程を開始する。外科用ハブ１０６、２０６は、エネルギー器具が発射されていることを示すＲＦ又は超音波発生器からのデータを受信するため、外科医が患者の肺を切開して分離するプロセスにあると推定することができる。外科用ハブ１０６、２０６は、受信されたデータを外科処置の読み出しされた工程と相互参照して、プロセスのこの時点（すなわち、前に考察された処置の工程が完了した後）で発射されているエネルギー器具が切開工程に対応していると判定することができる。特定の例では、エネルギー器具は、ロボット外科システムのロボットアームに取り付けられたエネルギーツールであり得る。

【0140】

第１０の工程５２２０で、外科チームは、処置の結紮工程に進む。外科用ハブ１０６、２０６は、器具が発射されていることを示す外科用ステープル留め及び切断器具からのデータを受信するため、外科医が動脈及び静脈を結紮していると推定することができる。前工程と同様に、外科用ハブ１０６、２０６は、外科用ステープル留め及び切断器具からのデータの受信を、読み出しされたプロセス内の工程と相互参照することによって、この推定を導出することができる。特定の例では、外科用器具は、ロボット外科システムのロボットアームに取り付けられた外科用ツールであり得る。

【0141】

第１１の工程５２２２では、処置の区域切除部分が実施される。外科用ハブ１０６、２０６は、そのカートリッジからのデータを含む外科用ステープル留め及び切断器具からのデータに基づいて、外科医が実質組織を横切開していると推定することができる。カートリッジのデータは、例えば、器具によって発射されるステープルのサイズ又は種類に対応することができる。異なる種類のステープルが異なる種類の組織に利用されているため、カートリッジのデータは、ステープル留め及び／又は横切開されている組織の種類を示すことができる。この場合、発射されるステープルの種類は実質組織（又は他の同様の組織種）に利用され、これにより、外科用ハブ１０６、２０６は、処置の区域切除部分が実行されていると推定することができる。

【0142】

続いて第１２の工程５２２４で、結節切開工程が実行される。外科用ハブ１０６、２０６は、ＲＦ又は超音波器具が発射されていることを示す発生器から受信したデータに基づいて、外科チームが結節を切開し、漏れ試験を実施していると推定することができる。この特定の処置の場合、実質組織が横切開された後に利用されるＲＦ又は超音波器具は結節切開工程に対応しており、この結節切開工程により外科用ハブ１０６、２０６がこの推定を行うことが可能となる。異なる器具が特定の作業に対してより良好に適合するため、外科医は、処置中の特定の工程に応じて、定期的に外科用ステープル留め／切断器具と外科用エネルギー（すなわち、ＲＦ又は超音波）器具との間で交互に切り替えることに留意されたい。したがって、ステープル留め／切断器具及び外科用エネルギー器具が使用される特定のシーケンスは、外科医が処置のどの工程を実施中であるかを示すことができる。更に、特定の例では、外科処置中の１つ又は２つ以上の工程にロボットツールを使用することができ、かつ／又は外科処置中の１つ又は２つ以上の工程にハンドヘルド外科用器具を使用することができる。外科医（複数可）は、例えば、ロボットツールとハンドヘルド外科用器具とを順に交代させることができ、かつ／又は、例えば、装置を同時に使用することができる。第１２の工程５２２４が完了すると、切開部が閉鎖され、処置の術後部分が開始する。

【0143】

第１３の工程５２２６では、患者の麻酔が逆転される。外科用ハブ１０６、２０６は、例えば、ベンチレータデータに基づいて（すなわち、患者の呼吸速度が増加し始める）、患者が麻酔から覚醒しつつあると推定することができる。

【0144】

最後に、第１４の工程５２２８は、医療関係者が患者から様々な患者監視装置を除去することである。したがって、外科用ハブ１０６、２０６は、ハブがＥＫＧ、ＢＰ、及び患者監視装置からの他のデータを喪失したとき、患者が回復室に移送されていると推定することができる。この例示的な処置の説明から分かるように、外科用ハブ１０６、２０６と通信可能に連結された各種データソースから受信されたデータに基づいて、外科用ハブ１０６、２０６は、所与の外科処置の各工程が発生しているときを判定又は推定することができる。

【0145】

状況認識については、その全体が参照により本明細書に組み込まれる、「ＭＥＴＨＯＤ ＯＦ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ」と題する２０１８年４月１９日出願の米国特許仮出願第６２／６５９，９００号で更に説明されている。特定の例では、例えば本明細書で開示される様々なロボット外科システムを含むロボット外科システムの動作は、その状況認識、及び／若しくはその構成要素からのフィードバックに基づいて、並びに／又はクラウド１０４からの情報に基づいて、ハブ１０６、２０６によって制御され得る。

【0146】

外科用装置のメタデータ及び制御のためのＯＲの視覚的評価
様々な態様では、図１～図１１に関連して記載される外科用ハブ１０６、２０６などのコンピュータシステムは、カメラアセンブリを介してＯＲ内の外科用装置又は手術スタッフを追跡するようにプログラムすることができる。ＯＲ内の外科用装置及び／又は手術スタッフの画像は、外科用装置の姿勢（すなわち、位置及び向き）、外科用装置の配置（例えば、どのトロカールに通して外科用器具が現在挿入されているか）、どの手術スタッフ員が外科用装置を操作しているか、手術スタッフによって行われているジェスチャ又は活動、手術スタッフの位置などを含む、幅広い種類のデータを提供できる。一態様では、手術スタッフ及び／又は外科用器具の視覚的評価から生成されたデータは、外科用装置から受信した手術前後データに関連付けられた、又はそれにリンクされたメタデータとして保存できる。このようなメタデータは、外科用装置によって生成された手術前後データに関して追加のコンテキストを提供することができ、この追加のコンテキストは、「状況認識」の項で上述したように、外科用ハブが実行する状況認識システムによって、又は「クラウドシステムハードウェア及び機能モジュール」の項で上述したように、クラウドコンピューティングシステムによって、例えば、データ傾向又は相関関係を識別する分析を実行するために利用することができる。別の態様では、手術スタッフ及び／又は外科用器具の視覚的評価から生成されたデータは、ＯＲ内の外科用装置を制御するために利用できる。

【0147】

一態様では、コンピュータシステムは、手術部位（例えば、腹腔鏡手術を受ける患者の腹部）の外部にあるＯＲのビデオ／画像を利用できる。この態様では、本明細書に記載されるコンピュータシステムによる分析のために画像を取り込むカメラアセンブリは、腹腔鏡、胸腔鏡、又は患者の身体の内部を可視化するために利用される別のそのような内視鏡及び／若しくはビデオカメラからの取り込み画像を除外することができる。むしろ、カメラアセンブリは、ＯＲ内で起こっている動作に関してより幅広いコンテキストを提供するために、外科用装置がどのように利用されているか、並びに手術スタッフが互いに及び外科用装置とどのように相互作用しているかを可視化するための、ＯＲの方々に位置付けられたカメラを含むことができる。別の態様では、外部で取り込まれたビデオ／画像は、内視鏡からのビデオ／画像と併せて、分析用に及び／又は使用中の外科用装置の制御を改善するために利用することができる。

【0148】

図１６は、本開示の少なくとも１つの態様による、例示的なＯＲセットアップの図である。様々な実施態様では、外科用ハブ２１１８０１は、「外科用ハブ」の項で上述したように、通信プロトコル（例えば、Ｂｌｕｅｔｏｏｔｈ）を介して、１つ又は２つ以上のカメラ２１１８０２、外科用器具２１１８１０、ディスプレイ２１１８０６、オーバーハードライト（overheard lights）２１１８０８、及びＯＲ ２１１８００内の他の外科用装置に通信可能に接続することができる。カメラ２１１８０２は、外科処置の過程でＯＲ ２１１８００内の手術スタッフ員２１１８０３及び／又は外科用器具２１１８１０（又は他の外科用装置）の画像及び／又はビデオを取り込むために配向することができる。取り込まれた画像は、静止画像又は動画像（すなわち、ビデオ）を含むことができる。手術スタッフ員２１１８０３及び／又は外科用器具２１１８１０の画像は、様々な角度及び倍率で、様々なフィルタを利用するなどして、取り込むことができる。一実施態様では、カメラ２１１８０２は、処置を行う各手術スタッフ員を集合的に可視化できるように、ＯＲ ２１１８００内に配置される。したがって、外科用ハブ２１１８０１は、外科処置中に手術スタッフ員２１１８０３及び／又は外科用器具２１１８１０を視覚的に分析するために、取り込まれた画像及び／又はビデオデータをカメラ２１１８０２から受信できる。画像及び／又はビデオデータは、様々なマシンビジョン、画像処理、物体認識、及び光学追跡技術を利用して処理されて、手術スタッフ員２１１８０３及び／又は外科用器具２１１８１０の特質、特性、動作、及び動きを追跡することができる。

【0149】

図１７Ａは、本開示の少なくとも１つの態様による、外科用装置を制御するためのプロセス２１１６００の論理フロー図である。プロセス２１１６００は、図１０に示す外科用ハブ２０６のプロセッサ２４４など、コンピュータシステムのプロセッサ又は制御回路によって実行することができる。したがって、プロセス２１１６００は、メモリ２４９に記憶されたコンピュータ実行可能命令のセットとして具現化されることができ、この命令のセットは、プロセッサ２４４によって実行されると、コンピュータシステム（例えば、外科用ハブ２１１８０１）に、記載されている工程を実行させる。

【0150】

したがって、プロセス２１１６００を実行するプロセッサ２４４は、ＯＲ ２１１８００の画像（静止画像又はビデオを含むことができる）を、そのＯＲ内に位置するカメラ２１１８０２のアセンブリを介して取り込む（２１１６０２）。手術スタッフ員２１１８０３及び／又は外科用装置を含む任意の取り込まれた画像は、外科用装置を制御するための手術スタッフ員２１１８０３及び／又は外科用装置に関する情報を確認するために、プロセス２１１６００によって分析することができる。追跡又は監視される標的（すなわち、手術スタッフ員２１１８０３及び外科用装置）は、外観及び特徴に基づく技術を含む、様々な画像又は物体認識技術を利用して、カメラ２１１８０２のアセンブリによって取り込まれた画像から認識することができる。例えば、取り込まれた画像は、各画像内の様々なオブジェクトの輪郭を生成するために、エッジ検出アルゴリズム（例えば、Ｃａｎｎｙエッジ検出法アルゴリズム）を利用して処理することができる。次いで、あるアルゴリズムは、標的オブジェクトのテンプレートを、輪郭生成されたオブジェクトを含む画像と比較して、標的オブジェクトのいずれかが画像内に位置するかどうかを判定することができる。別の例として、あるアルゴリズムは、取り込まれた画像から特徴を抽出することができる。次いで、抽出された特徴は、特徴ベクトルを標的に相関させるために、教師あり又は教師なし学習技術を介して訓練された機械学習モデル（例えば、人工ニューラルネットワーク又はサポートベクターマシン）に供給されることができる。特徴は、エッジ（例えば、Ｃａｎｎｙエッジ検出法アルゴリズムを介して抽出される）、曲率、コーナー（例えば、Ｈａｒｒｉｓ＆Ｓｔｅｐｈｅｎｓコーナー検出法アルゴリズムを介して抽出される）などを含むことができる。

【0151】

したがって、プロセッサ２４４は、画像により取り込まれた手術スタッフ及び／又は外科用装置の特質又は状態を判定する（２１１６０４）。このような特質又は条件は、物理的特性、動作、他の物体又は個人との相互作用などを含むことができる。より具体的には、手術スタッフ員２１１８０３の特質又は状態は、手術スタッフ員２１１８０３が（図１６に示されるように）ジェスチャ２１１８０４を行っているかどうか、手術スタッフ員２１１８０３が所与の外科用器具２１１８１０を保持しているかどうか、手術スタッフ員２１１８０３の位置が特定されるかどうか、ＯＲ内の手術スタッフ員２１１８０３の人数、手術スタッフ員２１１８０３が外科用装置と相互作用しているかどうか（及びどの外科用装置と相互作用しているか）、手術スタッフ員２１１８０３が外科用器具２１１８１０又は別の外科用装置を別の手術スタッフ員２１１８０３に渡しているかどうか、手術スタッフ員２１１８０３に関連した物理的特性（例えば、姿勢、腕位置、手首角度）など、を含むことができる。外科用装置の特質又は状態は、それらの姿勢、それらが能動的に使用されているかどうか（例えば、発生器が、接続された外科用器具２１１８１０にエネルギーを能動的に供給しているかどうか）、外科用器具２１１８１０がトロカールに通して挿入されているかどうか（及びそのトロカールの位置又は同一性）などを含むことができる。

【0152】

したがって、プロセッサ２４４は、特定の判定された特質又は状態に依存する様式で、外科用ハブ２１１８０１とペアリングされている外科用装置を制御する（２１１６０６）。例えば、手術スタッフ員２１１８０３が「器具モードを変更する」ジェスチャを行っているとプロセッサ２４４が判定した場合（２１１６０４）、プロセッサ２４４は、外科用器具２１１８１０の動作モードを変更する（例えば、電気外科用器具を封止モードから切断モードに変更する）ために、外科用ハブ２１１８０１に接続された特定の外科用器具２１１８１０（又はその関連する発生器）に信号を送信するか、又は別の方法でその外科用器具を制御する（２１１６０６）ことができる。これにより、手術スタッフは、外科用器具２１１８１０自体と直接相互作用しなくても、外科用器具２１１８１０を制御することが可能になる。別の例として、外科用器具２１１８１０が１人の手術スタッフ員２１１８０３（例えば、看護師）から別の手術スタッフ員２１１８０３（例えば、外科医）に渡されている（又は渡される準備がされている）とプロセッサ２４４が判定した場合（２１１６０４）、プロセッサ２４４は、接続された外科用器具２１１８１０へのエネルギーの供給を有効化及び開始するために、エネルギー発生器に信号を送信するか、又は別の方法でエネルギー発生器を制御する（２１１６０６）ことができる。これにより、外科用ハブ２１１８０１は、外科医が積極的な動作を行わなくても外科用器具の使用準備が整うように、外科用器具２１１８１０を予備的に作動させることが可能になる。更に別の例として、外科用器具２１１８１０が発射されるとき（又は発射されようとしているとき）にその外科用器具が特定の配向にあるとプロセッサ２４４が判定した場合（２１１６０４）、プロセッサ２４４は、それに応じて外科用器具２１１８１０の動作パラメータ（例えば、発射する力又は最大許容関節運動角度）を修正するために、外科用器具２１１８１０に信号を送信するか、又は別の方法でその外科用器具を制御する（２１１６０６）ことができる。これにより、外科用ハブ２１１８０１は、外科用器具２１１８１０の配置及び配向の違いを考慮するために、外科用器具２１１８１０の機能を制御することが可能になる。

【0153】

別の態様では、外科用ハブ２１１８０１は、後述するジェスチャ認識システム２１１５００に加えて、又はその代わりに、音声認識システムを含むことができる。この態様では、外科用ハブ２１１８０１は、様々な音声コマンドを識別し、それらに応答し、それに応じて任意の接続された外科用装置の機能を制御するように、プログラムすることができる。

【0154】

別の態様では、図１７Ｂは、本開示の少なくとも１つの態様による、外科用メタデータを生成するためのプロセス２１１６２０の論理フロー図である。図１７Ａに関連して上述したように、プロセス２１１６２０は、プロセッサ２４４によって実行することができる。したがって、プロセス２１１６２０を実行するプロセッサ２４４は、図１７Ａに関連して上述したように、画像／ビデオデータを取り込み（２１１６２２）、手術スタッフ員２１１８０３及び／又は外科用器具２１１８１０の特質を判定する（２１１６２４）ことができる。しかしながら、この態様では、プロセッサ２４４は、外科処置の過程で外科用装置によって生成された手術前後データに関連付けられている、又はそれにリンクされているメタデータとして、特質又は状態を保存する（２１１６２６）。上述のように、メタデータとして保存（２１１６２６）される特質又は状態は、ＯＲ ２１１８００内の手術スタッフ員２１１８０３及び外科用器具２１１８１０の多様な物理的特性、それらによる動作、及びそれらの間の相互作用を含むことができる。

【0155】

図１７Ａ及び図１７Ｂに関連して説明されるプロセス２１１６００、２１１６２０の一実施態様では、外科用ハブ２１１８０１は、ＯＲ ２１１８００内の個人によって行われたジェスチャを認識し、それに応答するように、構成されることができる。例えば、図１８は、本開示の少なくとも１つの態様による、ジェスチャ認識システム２１１５００のブロック図である。図１８の以下の説明では、図１０及び図１６も参照されたい。ジェスチャ認識システム２１１５００は、図１０に示す外科用ハブ２０６のプロセッサ２４４など、コンピュータシステムのプロセッサ又は制御回路によって実行されることができるジェスチャ認識モジュール２１１５０４を含む。したがって、ジェスチャ認識モジュール２１１５０４は、メモリ２４９に記憶されたコンピュータ実行可能命令のセットとして具現化されることができ、この命令のセットは、プロセッサ２４４によって実行されると、コンピュータシステム（例えば、外科用ハブ２１１８０１）に、記載されている工程を実行させる。

【0156】

ジェスチャ認識システム２１１５００は、画像認識ハードウェア（例えば、カメラ２１１８０２）から画像又はビデオデータを受信し、手術スタッフ員２１１８０３によって行われ得る様々なジェスチャ２１１８０４を認識し（すなわち、図１７Ａ及び１７Ｂに関連して説明されるプロセス２１１６００、２１１６２０で、ジェスチャが行われているかどうかを判定する（２１１６０４、２１１６２４））、特定の検出されたジェスチャ２１１８０４に対して、対応する動作を行うか、又は別の方法で応答する（すなわち、図１７Ａ及び１７Ｂに関連して説明されるプロセス２１１６００、２１１６２０で、外科用装置を制御するか（２１１６０６）、又はデータをメタデータとして保存する（２１１６２６））ようにプログラムすることができる。一態様では、ジェスチャ認識モジュール２１１５０４は、特徴抽出モジュール２１１５０６及びジェスチャ分類モジュール２１１５０８を含むことができる。特徴抽出モジュール２１１５０６は、画像／ビデオデータから測定可能かつ弁別的な特性又は特質（すなわち、特徴）を抽出するようにプログラムされる。特徴は、エッジ（例えば、Ｃａｎｎｙエッジ検出法アルゴリズムを介して抽出される）、曲率、コーナー（例えば、Ｈａｒｒｉｓ＆Ｓｔｅｐｈｅｎｓコーナー検出法アルゴリズムを介して抽出される）などを含むことができる。ジェスチャ分類モジュール２１１５０８は、抽出された特徴がジェスチャセットからのジェスチャと一致するかどうかを判定する。一態様では、ジェスチャ分類モジュール２１１５０８は、抽出された特徴の特徴ベクトルを１つ又は２つ以上の出力ジェスチャに相関させるために教師あり又は教師なし学習技術を介して訓練された機械学習モデル（例えば、人工ニューラルネットワーク又はサポートベクターマシン）を含むことができる。別の態様では、ジェスチャ分類モジュール２１１５０８は、ジェスチャを分類するために、Ｈｕ不変モーメントに基づくアルゴリズム又はｋ－曲率アルゴリズムを含むことができる。更に別の態様では、ジェスチャ分類モジュール２１１５０８は、特徴化された画像／ビデオデータ（又はその一部）を所定のジェスチャに対応するテンプレートに照合するようにプログラムされたテンプレートマッチングアルゴリズムを含むことができる。他の態様は、前述の技術とジェスチャを分類するための他の技術との様々な組み合わせを含むことができる。

【0157】

ジェスチャ認識モジュール２１１５０４を介してジェスチャを認識したとき、ジェスチャ認識システム２１１５００は、識別されたジェスチャに対応する動作２１１５１０又は応答を行うことができる。一態様では、コンピュータシステムによって行われた動作２１１５１０は、図１７Ａに関連して上述したように、ＯＲ ２１１８００内の外科用装置を制御することを含む。例えば、ジェスチャ認識モジュール２１１５０４を実行する外科用ハブ２１１８０１は、「輝度制御」ジェスチャを認識し、次いで、それに対応して、外科用ハブ２１１８０１とペアリングされているオーバーハードライト２１１８０８を暗く又は明るくすることができる。別の例として、ジェスチャ認識モジュール２１１５０４を実行する外科用ハブ２１１８０１は、「発生器オン」ジェスチャを認識し、次いで、外科用ハブ２１１８０１とペアリングされているエネルギー発生器を作動させることができ、これにより、発生器に接続されている超音波外科用器具又は電気外科用器具に電力を供給することができる。ジェスチャはまた、ディスプレイ２１１８０６上に表示されている情報を変更すること（例えば、外科用器具２１１８１０に関連したメニューをスクロールさせるか、又は表示されているビデオフィードを切り替える）、外科用器具２１１８１０のモード、機能、又は動作パラメータを変更すること（例えば、電気外科用器具を封止モードから横切開モードに変更する）、スコープにビデオの記録を開始又は停止させること、エネルギー発生器の出力レベルを変更することなどにも利用することができる。ジェスチャは、滅菌障壁の外側にある外科用装置を滅菌障壁の内側から汚染の危険性を生じさせることなく制御すること、外科用装置を直接操作していないか、又はＯＲ内の外科用装置の近くにいない個人が、外科用装置の機能を制御することを可能にすることなどに有益であり得る。

【0158】

別の態様では、コンピュータシステムによって行われる動作２１１５１０は、図１７Ｂに関連して上述したように、手術スタッフによって行われたジェスチャを、外科処置の過程で外科用装置によって生成された手術前後データに関連付けられた、又はそれにリンクされたメタデータとして保存することを含む。このようなメタデータは、手術スタッフが外科用装置を手動で制御しているか、又はジェスチャを介して外科用装置を制御しているかどうかを判定するのに有用であり得、ジェスチャは、手術スタッフのパフォーマンス、処置時間、及び他のそのような測定基準と相関させることができる。様々な他の態様では、コンピュータシステムは、１つ又は２つ以上の外科用装置を制御することと、ジェスチャデータをメタデータとして保存することとの両方を行うことができる。

【0159】

別の態様では、ジェスチャ認識システム２１１５００は、ジェスチャを視覚的に識別するために、カメラ２１１８０２に加えて、又はその代わりに、ユーザからの非接触入力を受信するための磁気感知システムを利用する。この態様では、ジェスチャ認識システム２１１５００は、例えば、ＯＲ ２１１８００内に位置付けられ得る磁気感知アレイを含むことができる。磁気感知アレイは、手術スタッフ員２１１８０３によって制御され得る磁気要素の位置を監視するように構成されることができる。一態様では、磁気要素は、外科用グローブ又は別のそのような衣類の物品に組み込むことができる。別の態様では、磁気要素は、手術スタッフ員２１１８０３によって操作可能であるオブジェクト又はトークン内に位置することができる。したがって、磁気感知アレイは、磁気感知要素の位置を経時的に検出し、磁気要素を制御している個人によって行われる任意のジェスチャを識別するように、構成されることができる。ジェスチャ認識システム２１１５００の場合と同様に、ユーザは、ＯＲ ２１１８００内のディスプレイ２１１８０６上に表示されたメニュー若しくはメニューから選択された項目をスクロールさせるか、又はＯＲ ２１１８００内の様々な外科用装置の機能を制御する他のジェスチャを行うことができる。したがって、磁気要素の位置、動き、及び／又は配向は、磁気要素が滅菌野の内部又は外側に位置するかどうかに関わらず、ディスプレイ２１１８０６、又は外科用ハブ２１１８０１によって接続される他の外科用装置を制御するための追跡マーカーとして利用することができる。

【0160】

図１７Ａ及び図１７Ｂに関連して記載されたプロセス２１１６００、２１１６２０の予測的な一実施態様では、コンピュータシステム（例えば、外科用ハブ２１１８０１）は、図１９に示されるように、外科用器具２１１６５４の姿勢を判定し、それに応じて外科用器具２１１６５４を制御する（２１１６０６）か、又は手首角度を分析用のメタデータとして保存する（２１１６２６）ように、構成されることができる。この特定の実施態様では、個人の手首２１１６５０の角度は、外科医によって保持されている外科用器具２１１６５４の長手方向軸２１１６５６と、個人の手の長手方向軸２１１６５２（すなわち、近位から遠位の軸）との間の角度αとして定義される。他の実施態様では、手首角度は、例えば、個人の手と前腕との間の角度として定義することができる。外科用ハブ２１１８０１は、外科医によって操作されている外科用器具２１１６５４及び外科医の手を、例えば、上記の物体認識技術を使用して、視覚的に識別することにより、手首角度αを判定することができる。

【0161】

図１７Ｂに記載されるプロセス２１１６２０の一態様では、手首角度αは、メタデータとして保存され（２１１６２６）、推奨される外科的技術に対して分析を行うために利用されることができる。例えば、図２０の散布図２１１７００は、手首角度αと外科処置の結果との関係に対する１つのそのような予測的分析を表す。散布図２１１７００では、縦軸２１１７０２は手首角度αを表し、横軸２１１７０４は処置結果を表す。縦軸２１１７０２の右側及び左側の横軸２１１７０４の部分は、例えば、それぞれ、肯定的及び否定的な処置結果に対応することができる。外科用器具２１１６５４の特定の処置工程又は発射が過剰な出血をもたらしたかどうか、外科処置のための再動作の発生率など、様々な異なる処置結果を、外科医の手首角度αと比較することができる。更に、処置結果は、外科医の手首角度αと比較される特定のタイプの処置結果に応じて、様々な異なる様式で定量化することができる。例えば、処置結果が、外科用器具２１１６５４の特定の発射後に発生した出血である場合、横軸２１１７０４は、外科用器具２１１６５４の発射からの切開線に沿った血液の程度又は量を表すことができる。更に、散布図２１１７００内のプロットされた各点の手首角度αは、外科処置の特定の瞬間における手首角度α、外科処置の特定の工程中の平均手首角度α、外科処置中の全体的な平均手首角度などを表すことができる。更に、手首角度αが平均手首角度αに対応するか、又は特定の瞬間の手首角度αに対応するかは、手首角度αの比較対象である処置結果のタイプと対応し得る。例えば、横軸２１１７０４によって表される処置結果が、外科用器具２１１６５４の発射からの出血量である場合、縦軸２１１７０２は、外科用器具２１１６５４が発射された瞬間の手首角度αを表すことができる。別の例として、横軸２１１７０４によって表される処置結果が、特定の処置タイプのための再動作の発生率である場合、縦軸２１１７０２は、外科処置中の平均手首角度αを表すことができる。

【0162】

更に、このデータは、その後、閾値又はベースラインを確立するために利用されることができ、本明細書と同時に出願された、「ＵＳＡＧＥ ＡＮＤ ＴＥＣＨＮＩＱＵＥ ＡＮＡＬＹＳＩＳ ＯＦ ＳＵＲＧＥＯＮ／ＳＴＡＦＦ ＰＥＲＦＯＲＭＡＮＣＥ ＡＧＡＩＮＳＴ Ａ ＢＡＳＥＬＩＮＥ ＴＯ ＯＰＴＩＭＩＺＥ ＤＥＶＩＣＥ ＵＴＩＬＩＺＡＴＩＯＮ ＡＮＤ ＰＥＲＦＯＲＭＡＮＣＥ ＦＯＲ ＢＯＴＨ ＣＵＲＲＥＮＴ ＡＮＤ ＦＵＴＵＲＥ ＰＲＯＣＥＤＵＲＥＳ」と題する代理人整理番号ＥＮＤ９０１８ＵＳＮＰ２／１８０５１７－２に記載されているように、この閾値又はベースラインは、外科処置の間又はその完了後に手術スタッフ員２１１８０３に推奨事項を提示するために利用されることができる。例えば、図２０に示すように、コンピュータシステムは、肯定的な処置結果と最も高度に相関する手首角度αの範囲を画定する第１の閾値２１１７０８ａ及び第２の閾値２１１７０８ｂを計算することができる。したがって、第１及び第２の閾値２１１７０８ａ、２１１７０８ｂは、第１の又は好ましい動作範囲を定義することができる。外科用器具２１１６５４を利用するとき、外科医の手首角度αがこの範囲内にある場合、コンピュータシステムは、例えば、いかなる動作も行わなくてよい。更に、コンピュータシステムは、肯定的な処置結果と少なくとも適度に相関する手首角度αの範囲を画定する第３の閾値２１１７０６ａ及び第４の閾値２１１７０６ｂを計算することができる。したがって、第３及び第４の閾値２１１７０６ａ、２１１７０６ｂは、第１及び第２の閾値２１１７０８ａ、２１１７０８ｂと関連して第２の又は警戒的な動作範囲を定義することができ、この警戒的な範囲は、第１及び第２の閾値２１１７０８ａ、２１１７０８ｂと第３及び第４の閾値２１１７０６ａ、２１１７０６ｂとの対応のペア間の領域として定義される。外科用器具２１１６５４を利用するとき、外科医の手首角度αが警戒的な範囲内にある場合、コンピュータシステムは、例えば、外科医が自分の技術を調整するための第１の推奨事項を提示し得る。第３及び第４の閾値２１１７０６ａ、２１１７０６ｂの外側の範囲は、否定的な処置結果と高度に相関する第３の又は危険な動作範囲を定義することができる。外科用器具２１１６５４を利用するとき、外科医の手首角度αがこの危険な範囲内にある場合、コンピュータシステムは、例えば、外科医が自分の技術を調整するか、又は外科用器具２１１６５４を非活動化するための第２の推奨事項を提示し得る。

【0163】

図１７Ａに記載されるプロセス２１１６００の一態様では、外科用器具２１１８１０は、判定された手首角度αに従って制御される（２１１６０６）ことができる。例えば、外科用ハブ２１１８０１は、外科用器具２１１８１０の配向を補償するために、発射する力、閉鎖する力、又は最大許容関節運動角度など、外科用器具２１１８１０の制御プログラムパラメータを調整することができる。このような補償は、例えば、外科用器具２１１８１０がより適切に配向されていた場合に適用されるのと同じ力を外科用器具２１１８１０のエンドエフェクタが適用することを確実にすることができる。

【0164】

一態様では、コンピュータシステムは、外科用器具２１１８１０の姿勢を所定の又は正規化された参照フレームに関して定義する配向指数を作成するようにプログラムすることができる。これにより、異なる寸法のＯＲ内で取り込まれたデータをシームレスに比較することが可能になる。配向指数は、例えば、「外科用ハブ」の項で説明したように、外科用ハブ２０６が非接触センサモジュール２４２を利用して自身の周囲をスキャンするときに、定義されることができる。したがって、コンピュータシステムは、外科用器具２１１８１０の姿勢を検出し、所定の参照フレームの関数として保存することができる。

【0165】

他の実施態様では、コンピュータシステムは、特定の外科処置タイプに利用されるトロカールの位置及び配向を追跡することができ、その後、このデータは、メタデータとして保存すること、及び／又はディスプレイ２１１８０６若しくは他の外科用装置を制御して手術スタッフに推奨事項を提示するために利用することができる。トロカール位置を分析すると、どの範囲の位置（又は複数のトロカールを利用した外科処置の場合は位置の組み合わせ）が、肯定的な処置結果と最も高度に相関するかを判定することができる。したがって、その後、コンピュータシステムは、将来の外科処置においてトロカール配置に関する推奨事項を提示することができる。

【0166】

他の実施態様では、コンピュータシステムは、周囲の物体（手術台又は他の機器）に対するハンドルの位置を追跡することができ、その後、このデータは、メタデータとして保存すること、及び／又はディスプレイ２１１８０６若しくは他の外科用装置を制御して手術スタッフに推奨事項を提示するために利用することができる。例えば、コンピュータシステムは、トロカールの配置に関する推奨事項を提示することで、特定の配置が、それらのトロカールを通って挿入された外科用器具２１１８１０に、様々な物体による妨害を引き起こし、より困難な処置（例えば、より悪い手術結果又はより長い処置時間と相関し得る）をもたらすことになった、以前の処置における問題を回避することができる。

【0167】

他の実施態様では、コンピュータシステムは、術前のバックテーブル上に位置するセットアップ内の外科用器具２１１８１０及び他の外科用装置を識別して、手術処置データ及び／又は、「状況認識」の項で説明したように、状況認識システムによって行われた推定に、追加のコンテキストを提供することができる。どの外科用装置が手術前セットアップ内にあるか（又はないか）を識別することは、状況認識システムによって行われるその後の推定に影響し得る。

【0168】

他の実施態様では、コンピュータシステムは、外科処置の次の工程となり得るものを通知する助けとなるように、手術スタッフ員２１１８０３から外回り看護師及び／又は器械出し看護師を識別し、その位置及び活動を追跡することができる。器械出し看護師は、次に必要になると予想される外科用器具２１１８１０を回収し、その後、必要に応じてその外科用器具２１１８１０を外科医に渡すことから、器械出し看護師の活動には情報価値があり得る。更に、いくつかの外科用器具２１１８１０又は他の装置は、それらが使用される前に準備が必要である（例えば、組織状態によっては、外科用ステープラ上にバットレスが配置され得る）。したがって、器械出し看護師が外科用器具２１１８１０を保持しているとき、どの外科用器具２１１８１０が器械出し看護師によって保持されているか、及びどのような準備が器械出し看護師によって実施されているかは、外科処置のどの工程が実施されているか、又は実施されることになるかの推定を支援することができる。また更に、外回り看護師から器械出し看護師に渡される新しい機器は、一般に、処置がどのように進行するかに影響し、どの処置工程が実施されるかを通知し、合併症の可能性を示し得る。例えば、追加の補助的な止血剤が器械出し看護師に渡されると、そのことは、最初に予想されたよりも出血が多いため、外科処置が良好に進行していないことを示し得る。また更に、外回り看護師は、ＯＲ内に物質を持ち込むこと、滅菌野の外側にある外科用装置の設定を調整することなどを行う。したがって、これらの活動は監視され、更に、外科処置のどの工程が実施されているかを通知するために使用され得る。

【実施例0169】

本明細書に記載される主題の様々な態様は、以下の番号付けされた実施例において説明される。
実施例１．外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されているコンピュータシステム。コンピュータシステムは、プロセッサと、プロセッサに連結されたメモリとを備える。メモリは命令を記憶し、命令は、プロセッサによって実行されると、コンピュータシステムに、カメラを介して手術室内の個人の画像を受信させ、この画像に基づいて個人がジェスチャを行っているかどうかを判定させ、ジェスチャに従って外科用装置を制御させる。

【0170】

実施例２．外科用装置がディスプレイを含み、メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、ディスプレイ上に表示される情報をジェスチャに従って制御させる、実施例１に記載のコンピュータシステム。

【0171】

実施例３．ディスプレイ上に表示される情報が、個人によって制御される外科用器具と対応する、実施例２に記載のコンピュータシステム。

【0172】

実施例４．外科用装置が外科用器具を含み、メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、外科用器具の動作をジェスチャに従って変更させる、実施例１に記載のコンピュータシステム。

【0173】

実施例５．外科用器具が、電気外科用器具、超音波外科用器具、及び外科用ステープル留め器具からなる群から選択される、実施例４に記載のコンピュータシステム。

【0174】

実施例６．メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、カメラから受信した画像から特徴を抽出させ、抽出された特徴がジェスチャと対応するかどうかに従って、個人がジェスチャを行っているかどうかを判定させる、実施例１～５のいずれか１つに記載のコンピュータシステム。

【0175】

実施例７．外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されているコンピュータシステム。コンピュータシステムは、プロセッサと、プロセッサに連結されたメモリとを備える。メモリは命令を記憶し、命令は、プロセッサによって実行されると、コンピュータシステムに、カメラを介して手術室内の外科用装置の画像を受信させ、この画像に基づいて外科用装置の姿勢を判定させ、外科用装置の姿勢に従って外科用装置を制御させる。

【0176】

実施例８．メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、外科用装置の動作を姿勢に従って変更させる、実施例７に記載のコンピュータシステム。

【0177】

実施例９．外科用装置がエンドエフェクタを含み、動作がエンドエフェクタの配向を含む、実施例８に記載のコンピュータシステム。

【0178】

実施例１０．外科用装置が、制御アルゴリズムに従って、組織をステープル留めするか、又はエネルギーを組織に送達するように構成されているエンドエフェクタを含み、動作が、制御アルゴリズムを含む、実施例８に記載のコンピュータシステム。

【0179】

実施例１１．メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、外科用装置が姿勢に対応する情報を表示するようにさせる、実施例７に記載のコンピュータシステム。

【0180】

実施例１２．表示される情報が外科的コンテキストと対応する、実施例１１に記載のコンピュータシステム。

【0181】

実施例１３．メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、１つ又は２つ以上の外科用装置から手術前後データを受信することであって、１つ又は２つ以上の外科用装置が外科用装置を含む、ことと、１つ又は２つ以上の外科用装置からの手術前後データに少なくとも部分的に基づいて外科的コンテキストを判定することと、を行わせる、実施例１２に記載のコンピュータシステム。

【0182】

実施例１４．メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、手術室に関連した静的な参照フレームに従って外科用装置の姿勢を判定させる、実施例７～１３のいずれか１つに記載のコンピュータシステム。

【0183】

実施例１５．外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されているコンピュータシステム。コンピュータシステムは、プロセッサと、プロセッサに連結されたメモリとを備える。メモリは命令を記憶し、命令は、プロセッサによって実行されると、コンピュータシステムに、カメラを介して手術室内の外科用装置又は個人の画像を受信させ、この画像が外科用装置の画像であるかどうかに従って画像に基づいて外科用装置の姿勢を判定させ、この画像が個人の画像であるかどうかに従って画像に基づいて個人がジェスチャを行っているかどうかを判定させ、外科用装置の姿勢又はジェスチャのうちの少なくとも一方に従って外科用装置を制御させる。

【0184】

実施例１６．外科用装置がディスプレイを含み、メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、ディスプレイ上に表示される情報をジェスチャに従って制御させる、実施例１５に記載のコンピュータシステム。

【0185】

実施例１７．外科用装置が外科用器具を含み、メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、外科用器具の動作をジェスチャに従って変更させる、実施例１５に記載のコンピュータシステム。

【0186】

実施例１８．メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、外科用装置の動作を姿勢に従って変更させる、実施例１５～１７のいずれか１つに記載のコンピュータシステム。

【0187】

実施例１９．メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、外科用装置が姿勢に対応する情報を表示するようにさせる、実施例１５～１７のいずれか１つに記載のコンピュータシステム。

【0188】

実施例２０．メモリに記憶された命令が、プロセッサによって実行されると、コンピュータシステムに、手術室に関連した静的な参照フレームに従って外科用装置の姿勢を判定させる、実施例１５～１９のいずれか１つに記載のコンピュータシステム。

【0189】

いくつかの形態が例示され説明されてきたが、添付の「特許請求の範囲」の範囲をそのような詳述に制限又は限定することは、本出願人が意図するところではない。多数の修正、変形、変化、置換、組み合わせ及びこれらの形態の等価物を実装することができ、本開示の範囲から逸脱することなく当業者により想到されるであろう。更に、記述する形態に関連した各要素の構造は、その要素によって行われる機能を提供するための手段として代替的に説明することができる。また、材料が特定の構成要素に関して開示されているが、他の材料が使用されてもよい。したがって、上記の説明文及び添付の「特許請求の範囲」は、全てのそのような修正、組み合わせ、及び変形を、開示される形態の範囲に含まれるものとして網羅することを意図としたものである点を理解されたい。添付の「特許請求の範囲」は、全てのそのような修正、変形、変化、置換、修正、及び等価物を網羅することを意図する。

【0190】

上記の詳細な説明は、ブロック図、フローチャート、及び／又は実施例を介して装置及び／又はプロセスの様々な形態について記載してきた。そのようなブロック図、フローチャート、及び／又は実施例が１つ若しくは２つ以上の機能及び／又は動作を含む限り、当業者に理解されたいこととして、そのようなブロック図、フローチャート、及び／又は実施例に含まれる各機能及び／又は動作は、多様なハードウェア、ソフトウェア、ファームウェア、又はこれらの事実上の任意の組み合わせによって、個々にかつ／又は集合的に実装することができる。当業者には、本明細書で開示される形態のうちのいくつかの態様の全部又は一部が、１台又は２台以上のコンピュータ上で稼働する１つ又は２つ以上のコンピュータプログラムとして（例えば、１台又は２台以上のコンピュータシステム上で稼働する１つ又は２つ以上のプログラムとして）、１つ又は２つ以上のプロセッサ上で稼働する１つ又は２つ以上のプログラムとして（例えば、１つ又は２つ以上のマイクロプロセッサ上で稼働する１つ又は２つ以上のプログラムとして）、ファームウェアとして、又はこれらの実質的に任意の組み合わせとして集積回路上で等価に実現することができ、また、回路を設計すること、並びに／又はソフトウェア及び／若しくはファームウェアのコードを記述することは、本開示を鑑みれば当業者の技能の範囲内に含まれることが理解されよう。更に、本明細書に記載した主題の機構は、多様な形式で１つ又は２つ以上のプログラム製品として配布されることが可能であり、本明細書に記載した主題の例証的な形態は、配布を実際に行うために使用される信号搬送媒体の特定の種類にかかわらず適用されることが当業者には理解されるであろう。

【0191】

様々な開示された態様を実行するように論理をプログラムするために使用される命令は、ダイナミックランダムアクセスメモリ（ＤＲＡＭ）、キャッシュ、フラッシュメモリ、又は他の記憶装置などのシステム内メモリに記憶され得る。更に、命令は、ネットワークを介して、又は他のコンピュータ可読媒体によって分配され得る。したがって、機械可読媒体としては、機械（例えば、コンピュータ）によって読み出し可能な形態で情報を記憶又は送信するための任意の機構が挙げられ得るが、フロッピーディスケット、光ディスク、コンパクトディスク、読み出し専用メモリ（ＣＤ－ＲＯＭ）、並びに磁気光学ディスク、読み出し専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、消去可能プログラマブル読み出し専用メモリ（ＥＰＲＯＭ）、電気的消去可能プログラマブル読み出し専用メモリ（ＥＥＰＲＯＭ）、磁気若しくは光カード、フラッシュメモリ、又は、電気的、光学的、音響的、若しくは他の形態の伝播信号（例えば、搬送波、赤外線信号、デジタル信号など）を介してインターネットを介した情報の送信に使用される有形機械可読記憶装置に限定されない。したがって、非一時的コンピュータ可読媒体としては、機械（例えば、コンピュータ）によって読み出し可能な形態で電子命令又は情報を記憶又は送信するのに好適な任意の種類の有形機械可読媒体が挙げられる。

【0192】

本明細書の任意の態様で使用されるとき、「制御回路」という用語は、例えば、ハードワイヤード回路、プログラマブル回路（例えば、１つ又は２つ以上の個々の命令処理コアを含むコンピュータプロセッサ、処理ユニット、プロセッサ、マイクロコントローラ、マイクロコントローラユニット、コントローラ、デジタル信号プロセッサ（ＤＳＰ）、プログラマブル論理装置（ＰＬＤ）、プログラマブル論理アレイ（ＰＬＡ）、又はフィールドプログラマブルゲートアレイ（ＦＰＧＡ））、状態機械回路、プログラマブル回路によって実行される命令を記憶するファームウェア、及びこれらの任意の組み合わせを指すことができる。制御回路は、集合的に又は個別に、例えば、集積回路（integrated circuit、ＩＣ）、特定用途向け集積回路（application-specific integrated circuit、ＡＳＩＣ）、システムオンチップ（ＳｏＣ）、デスクトップコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、サーバ、スマートフォンなどの、より大きなシステムの一部を形成する回路として具現化され得る。したがって、本明細書で使用するとき、「制御回路」としては、少なくとも１つの個別の電気回路を有する電気回路、少なくとも１つの集積回路を有する電気回路、少なくとも１つの特定用途向け集積回路を有する電気回路、コンピュータプログラムによって構成された汎用コンピューティング装置（例えば、本明細書で説明したプロセス及び／若しくは装置を少なくとも部分的に実行するコンピュータプログラムによって構成された汎用コンピュータ、又は本明細書で説明したプロセス及び／若しくは装置を少なくとも部分的に実行するコンピュータプログラムによって構成されたマイクロプロセッサ）を形成する電気回路、メモリ装置（例えば、ランダムアクセスメモリの形態）を形成する電気回路、並びに及び／又は通信装置（例えば、モデム、通信スイッチ、若しくは光－電気機器）を形成する電気回路が挙げられるが、これらに限定されない。当業者は、本明細書で述べた主題が、アナログ若しくはデジタルの形式又はこれらのいくつかの組み合わせで実現されてもよいことを認識するであろう。

【0193】

本明細書の任意の態様で使用される場合、「論理」という用語は、前述の動作のいずれかを実行するように構成されたアプリケーション、ソフトウェア、ファームウェア、及び／又は回路を指し得る。ソフトウェアは、非一時的コンピュータ可読記憶媒体上に記録されたソフトウェアパッケージ、コード、命令、命令セット、及び／又はデータとして具現化されてもよい。ファームウェアは、メモリ装置内のコード、命令、若しくは命令セット、及び／又はハードコードされた（例えば、不揮発性の）データとして具現化されてもよい。

【0194】

本明細書の任意の態様で使用するとき、「構成要素」、「システム」、「モジュール」などという用語は、ハードウェア、ハードウェアとソフトウェアとの組み合わせ、ソフトウェア、又は実行中のソフトウェアのどちらかであるコンピュータ関連エンティティを指すことができる。

【0195】

本明細書の任意の態様で使用するとき、「アルゴリズム」とは、所望の結果につながる工程の自己無撞着シーケンスを指し、「工程」とは、必ずしも必要ではないが、記憶、転送、結合、比較、及び別様に操作されることが可能な電気又は磁気信号の形態をなすことができる物理的量及び／又は論理状態の操作を指す。これらの信号を、ビット、値、要素、記号、文字、用語、番号などとして言及することが一般的な扱い方である。これらの及び類似の用語は、適切な物理的量と関連付けられ得、また単に、これらの量及び／又は状態に適用される便利な標識である。

【0196】

ネットワークとしては、パケット交換ネットワークが挙げられ得る。通信装置は、選択されたパケット交換ネットワーク通信プロトコルを使用して、互いに通信することができる。１つの例示的な通信プロトコルとしては、伝送制御プロトコル／インターネットプロトコル（Transmission Control Protocol/Internet Protocol、ＴＣＰ／ＩＰ）を使用して通信を可能にすることができるイーサネット通信プロトコルを挙げることができる。イーサネットプロトコルは、Ｉｎｓｔｉｔｕｔｅ ｏｆ Ｅｌｅｃｔｒｉｃａｌ ａｎｄ Ｅｌｅｃｔｒｏｎｉｃｓ Ｅｎｇｉｎｅｅｒｓ（ＩＥＥＥ）によって発行された２００８年１２月発行の表題「ＩＥＥＥ８０２．３Ｓｔａｎｄａｒｄ」、及び／又は本規格の後のバージョンのイーサネット規格に準拠するか、又は互換性があり得る。代替的に又は追加的に、通信装置は、Ｘ．２５通信プロトコルを使用して互いに通信することができる。Ｘ．２５通信プロトコルは、Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ Ｕｎｉｏｎ－Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ Ｓｅｃｔｏｒ（ＩＴＵ－Ｔ）によって公布された規格に準拠するか、又は互換性があり得る。代替的に又は追加的に、通信装置は、フレームリレー通信プロトコルを使用して互いに通信することができる。フレームリレー通信プロトコルは、Ｃｏｎｓｕｌｔａｔｉｖｅ Ｃｏｍｍｉｔｔｅｅ ｆｏｒ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｔｅｌｅｇｒａｐｈ ａｎｄ Ｔｅｌｅｐｈｏｎｅ（ＣＣＩＴＴ）及び／又はｔｈｅ Ａｍｅｒｉｃａｎ Ｎａｔｉｏｎａｌ Ｓｔａｎｄａｒｄｓ Ｉｎｓｔｉｔｕｔｅ（ＡＮＳＩ）によって公布された規格に準拠するか、又は互換性があり得る。代替的に又は追加的に、送受信機は、非同期転送モード（Asynchronous Transfer Mode、ＡＴＭ）通信プロトコルを使用して互いに通信することが可能であり得る。ＡＴＭ通信プロトコルは、ＡＴＭ Ｆｏｒｕｍによって「ＡＴＭ－ＭＰＬＳ Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｗｏｒｋｉｎｇ２．０」という題で２００１年８月に公開されたＡＴＭ規格及び／又は本規格の後のバージョンに準拠するか、又は互換性があり得る。当然のことながら、異なる及び／又は後に開発されたコネクション型ネットワーク通信プロトコルは、本明細書で等しく企図される。

【0197】

別段の明確な定めがない限り、前述の開示から明らかなように、前述の開示全体を通じて、「処理する」、「計算する」、「算出する」、「判定する」、「表示する」などの用語を使用する考察は、コンピュータシステムのレジスタ及びメモリ内で物理的（電子的）量として表現されるデータを、コンピュータシステムのメモリ若しくはレジスタ又はそのような情報記憶、伝送、若しくは表示装置内で物理量として同様に表現される他のデータへと操作及び変換する、コンピュータシステム又は類似の電子計算装置の動作及び処理を指していることが理解されよう。

【0198】

１つ又は２つ以上の構成要素が、本明細書中で、「ように構成される（configured to）」、「ように構成可能である（configurable to）」、「動作可能である／ように動作する（operable/operative to）」、「適合される／適合可能である（adapted/adaptable）」、「ことが可能である（able to）」、「準拠可能である／準拠する（conformable/conformed to）」などと言及され得る。当業者は、「ように構成される」は、一般に、文脈上他の意味に解釈すべき場合を除き、アクティブ状態の構成要素及び／又は非アクティブ状態の構成要素及び／又はスタンドバイ状態の構成要素を包含し得ることを理解するであろう。

【0199】

「近位」及び「遠位」という用語は、本明細書では、外科用器具のハンドル部分を操作する臨床医を基準として使用される。「近位」という用語は、臨床医に最も近い部分を指し、「遠位」という用語は、臨床医から離れた位置にある部分を指す。便宜上及び明確性のために、「垂直」、「水平」、「上」、及び「下」などの空間的用語が、本明細書において図面に対して使用され得ることが更に理解されよう。しかしながら、外科用器具は、多くの配向及び位置で使用されるものであり、これらの用語は限定的及び／又は絶対的であることを意図したものではない。

【0200】

当業者は、一般に、本明細書で使用され、かつ特に添付の「特許請求の範囲」（例えば、添付の「特許請求の範囲」の本文）で使用される用語は、概して「オープンな」用語として意図されるものである（例えば、「含む（including）」という用語は、「～を含むが、それらに限定されない（including but not limited to）」と解釈されるべきであり、「有する（having）」という用語は、「～を少なくとも有する（having at least）」と解釈されるべきであり、「含む（includes）」という用語は、「～を含むが、それらに限定されない（includes but is not limited to）」と解釈されるべきであるなど）ことを理解するであろう。更に、導入された請求項記載（introduced claim recitation）において特定の数が意図される場合、かかる意図は当該請求項中に明確に記載され、またかかる記載がない場合は、かかる意図は存在しないことが、当業者には理解されるであろう。例えば、理解を助けるものとして、後続の添付の「特許請求の範囲」は、「少なくとも１つの（at least one）」及び「１つ又は２つ以上の（one or more）」という導入句を、請求項記載を導入するために含むことがある。しかしながら、かかる句の使用は、「ａ」又は「ａｎ」という不定冠詞によって請求項記載を導入した場合に、たとえ同一の請求項内に「１つ又は２つ以上の」又は「少なくとも１つの」といった導入句及び「ａ」又は「ａｎ」という不定冠詞が含まれる場合であっても、かかる導入された請求項記載を含むいかなる特定の請求項も、かかる記載事項を１つのみ含む「特許請求の範囲」に限定されると示唆されるものと解釈されるべきではない（例えば、「ａ」及び／又は「ａｎ」は通常、「少なくとも１つの」又は「１つ又は２つ以上の」を意味するものと解釈されるべきである）。定冠詞を使用して請求項記載を導入する場合にも、同様のことが当てはまる。

【0201】

更に、導入された請求項記載において特定の数が明示されている場合であっても、かかる記載は、典型的には、少なくとも記載された数を意味するものと解釈されるべきであることが、当業者には認識されるであろう（例えば、他に修飾語のない、単なる「２つの記載事項」という記載がある場合、一般的に、少なくとも２つの記載事項、又は２つ又は３つ以上の記載事項を意味する）。更に、「Ａ、Ｂ、及びＣなどのうちの少なくとも１つ」に類する表記が使用される場合、一般に、かかる構文は、当業者がその表記を理解するであろう意味で意図されている（例えば、「Ａ、Ｂ、及びＣのうちの少なくとも１つを有するシステム」は、限定するものではないが、Ａのみ、Ｂのみ、Ｃのみ、ＡとＢの両方、ＡとＣの両方、ＢとＣの両方、及び／又はＡとＢとＣの全てなどを有するシステムを含む）。「Ａ、Ｂ、又はＣなどのうちの少なくとも１つ」に類する表記が使用される場合、一般に、かかる構文は、当業者がその表記を理解するであろう意味で意図されている（例えば、「Ａ、Ｂ、又はＣのうちの少なくとも１つを有するシステム」は、限定するものではないが、Ａのみ、Ｂのみ、Ｃのみ、ＡとＢの両方、ＡとＣの両方、ＢとＣの両方、及び／又はＡとＢとＣの全てなどを有するシステムを含む）。更に、典型的には、２つ若しくは３つ以上の選択的な用語を表わすあらゆる選言的な語及び／又は句は、文脈上他の意味に解釈すべき場合を除いて、明細書内であろうと、「特許請求の範囲」内であろうと、あるいは図面内であろうと、それら用語のうちの１つ、それらの用語のうちのいずれか、又はそれらの用語の両方を含む可能性を意図すると理解されるべきであることが、当業者には理解されよう。例えば、「Ａ又はＢ」という句は、典型的には、「Ａ」又は「Ｂ」又は「Ａ及びＢ」の可能性を含むものと理解されよう。

【0202】

添付の「特許請求の範囲」に関して、当業者は、本明細書における引用した動作は一般に、任意の順序で実施され得ることを理解するであろう。また、様々な動作のフロー図がシーケンス（複数可）で示されているが、様々な動作は、例示されたもの以外の順序で行われてもよく、又は同時に行われてもよいことが理解されるべきである。かかる代替の順序付けの例は、文脈上他の意味に解釈すべき場合を除いて、重複、交互配置、割り込み、再順序付け、増加的、予備的、追加的、同時、逆、又は他の異なる順序付けを含んでもよい。更に、「～に応答する」、「～に関連する」といった用語、又は他の過去時制の形容詞は、一般に、文脈上他の意味に解釈すべき場合を除き、かかる変化形を除外することが意図されるものではない。

【0203】

「一態様」、「態様」、「例示」、「一例示」などへの任意の参照は、その態様に関連して記載される特定の機能、構造、又は特性が少なくとも１つの態様に含まれると意味することは特記に値する。したがって、本明細書の全体を通じて様々な場所に見られる「一態様では」、「態様では」、「例示では」、及び「一例示では」という句は、必ずしも全てが同じ態様を指すものではない。更に、特定の特徴、構造、又は特性は、１つ又は２つ以上の態様において任意の好適な様態で組み合わせることができる。

【0204】

本明細書で参照され、かつ／又は任意の出願データシートに列挙される任意の特許出願、特許、非特許刊行物、又は他の開示資料は、組み込まれる資料が本明細書と矛盾しない範囲で、参照により本明細書に組み込まれる。それ自体、また必要な範囲で、本明細書に明瞭に記載される開示内容は、参照により本明細書に組み込まれるあらゆる矛盾する記載に優先するものとする。現行の定義、見解、又は本明細書に記載されるその他の開示内容と矛盾する任意の内容、又はそれらの部分は本明細書に参考として組み込まれるものとするが、参照内容と現行の開示内容との間に矛盾が生じない範囲においてのみ、参照されるものとする。

【0205】

要約すると、本明細書に記載した構想を用いる結果として得られる多くの利益が記載されてきた。１つ又は２つ以上の形態の上述の記載は、例示及び説明を目的として提示されているものである。包括的であることも、開示された厳密な形態に限定することも意図されていない。上記の教示を鑑みて、修正又は変形が可能である。１つ又は２つ以上の形態は、原理及び実際の応用について例示し、それによって、様々な形態を様々な修正例と共に、想到される特定の用途に適するものとして当業者が利用できるようにするために、選択され記載されたものである。本明細書と共に提示される「特許請求の範囲」が全体的な範囲を定義することが意図される。

【0206】

〔実施の態様〕
（１） 外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されているコンピュータシステムであって、前記コンピュータシステムは、
プロセッサと、
前記プロセッサに連結されたメモリであって、前記メモリは命令を記憶し、前記命令は、前記プロセッサによって実行されると、前記コンピュータシステムに、
前記カメラを介して前記手術室内の個人の画像を受信させ、
前記画像に基づいて前記個人がジェスチャを行っているかどうかを判定させ、
前記ジェスチャに従って前記外科用装置を制御させる、メモリと、を含む、コンピュータシステム。
（２） 前記外科用装置がディスプレイを含み、
前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記ディスプレイ上に表示される情報を前記ジェスチャに従って制御させる、実施態様１に記載のコンピュータシステム。
（３） 前記ディスプレイ上に表示される前記情報が、前記個人によって制御される外科用器具と対応する、実施態様２に記載のコンピュータシステム。
（４） 前記外科用装置が外科用器具を含み、
前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記外科用器具の動作を前記ジェスチャに従って変更させる、実施態様１に記載のコンピュータシステム。
（５） 前記外科用器具が、電気外科用器具、超音波外科用器具、及び外科用ステープル留め器具からなる群から選択される、実施態様４に記載のコンピュータシステム。

【0207】

（６） 前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、
前記カメラから受信した前記画像から特徴を抽出させ、
抽出された前記特徴が前記ジェスチャと対応するかどうかに従って、前記個人が前記ジェスチャを行っているかどうかを判定させる、実施態様１に記載のコンピュータシステム。
（７） 外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されているコンピュータシステムであって、前記コンピュータシステムは、
プロセッサと、
前記プロセッサに連結されたメモリであって、前記メモリは命令を記憶し、前記命令は、前記プロセッサによって実行されると、前記コンピュータシステムに、
前記カメラを介して前記手術室内の前記外科用装置の画像を受信させ、
前記画像に基づいて前記外科用装置の姿勢を判定させ、
前記外科用装置の前記姿勢に従って前記外科用装置を制御させる、メモリと、を含む、コンピュータシステム。
（８） 前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記外科用装置の動作を前記姿勢に従って変更させる、実施態様７に記載のコンピュータシステム。
（９） 前記外科用装置がエンドエフェクタを含み、
前記動作が、前記エンドエフェクタの配向を含む、実施態様８に記載のコンピュータシステム。
（１０） 前記外科用装置が、制御アルゴリズムに従って、組織をステープル留めするか、又はエネルギーを組織に送達するように構成されているエンドエフェクタを含み、
前記動作が、前記制御アルゴリズムを含む、実施態様８に記載のコンピュータシステム。

【0208】

（１１） 前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記外科用装置が前記姿勢に対応する情報を表示するようにさせる、実施態様７に記載のコンピュータシステム。
（１２） 表示される前記情報が外科的コンテキストと対応する、実施態様１１に記載のコンピュータシステム。
（１３） 前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、
１つ又は２つ以上の外科用装置から手術前後データを受信することであって、前記１つ又は２つ以上の外科用装置が前記外科用装置を含む、ことと、
前記１つ又は２つ以上の外科用装置からの前記手術前後データに少なくとも部分的に基づいて前記外科的コンテキストを判定することと、を行わせる、実施態様１２に記載のコンピュータシステム。
（１４） 前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記手術室に関連した静的な参照フレームに従って前記外科用装置の前記姿勢を判定させる、実施態様７に記載のコンピュータシステム。
（１５） 外科用装置と、手術室を見るように構成されているカメラとに通信可能に連結されるように構成されているコンピュータシステムであって、前記コンピュータシステムは、
プロセッサと、
前記プロセッサに連結されたメモリであって、前記メモリは命令を記憶し、前記命令は、前記プロセッサによって実行されると、前記コンピュータシステムに、
前記カメラを介して前記手術室内の外科用装置又は個人の画像を受信させ、
前記画像が前記外科用装置の画像であるかどうかに従って、前記画像に基づいて前記外科用装置の姿勢を判定させ、
前記画像が前記個人の画像であるかどうかに従って、前記画像に基づいて前記個人がジェスチャを行っているかどうかを判定させ、
前記外科用装置の前記姿勢又は前記ジェスチャのうちの少なくとも一方に従って前記外科用装置を制御させる、メモリと、を含む、コンピュータシステム。

【0209】

（１６） 前記外科用装置がディスプレイを含み、
前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記ディスプレイ上に表示される情報を前記ジェスチャに従って制御させる、実施態様１５に記載のコンピュータシステム。
（１７） 前記外科用装置が外科用器具を含み、
前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記外科用器具の動作を前記ジェスチャに従って変更させる、実施態様１５に記載のコンピュータシステム。
（１８） 前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記外科用装置の動作を前記姿勢に従って変更させる、実施態様１５に記載のコンピュータシステム。
（１９） 前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記外科用装置が前記姿勢に対応する情報を表示するようにさせる、実施態様１５に記載のコンピュータシステム。
（２０） 前記メモリに記憶された前記命令が、前記プロセッサによって実行されると、前記コンピュータシステムに、前記手術室に関連した静的な参照フレームに従って前記外科用装置の前記姿勢を判定させる、実施態様１５に記載のコンピュータシステム。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17A】

【図17B】

【図18】

【図19】

【図20】

【外国語明細書】