知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-08-02
(45)【発行日】2024-08-13
(54)【発明の名称】外科用ロボットによる内視鏡の制御
(51)【国際特許分類】
A61B 34/35 20160101AFI20240805BHJP
【ＦＩ】
A61B34/35
【請求項の数】
3
(21)【出願番号】P 2023513378
(86)(22)【出願日】2020-08-27
(65)【公表番号】
(43)【公表日】2023-09-20
(86)【国際出願番号】 US2020048138
(87)【国際公開番号】W WO2022046053
(87)【国際公開日】2022-03-03
【審査請求日】2023-06-26
(31)【優先権主張番号】17/004,277
(32)【優先日】2020-08-27
(33)【優先権主張国・地域又は機関】US
(73)【特許権者】
【識別番号】516133124
【氏名又は名称】バーブ サージカル インコーポレイテッド
【氏名又は名称原語表記】Ｖｅｒｂ Ｓｕｒｇｉｃａｌ Ｉｎｃ．
(74)【代理人】
【識別番号】100088605
【弁理士】
【氏名又は名称】加藤 公延
(74)【代理人】
【識別番号】100130384
【弁理士】
【氏名又は名称】大島 孝文
(72)【発明者】
【氏名】ジョウ・レンビン
(72)【発明者】
【氏名】ユン・スングク
(72)【発明者】
【氏名】ユ・ハオラン
(72)【発明者】
【氏名】クリングベイル・エレン
(72)【発明者】
【氏名】シュリヴァスタヴァ・アプールヴ
【審査官】羽月 竜治
(56)【参考文献】
【文献】米国特許出願公開第２０１７／００９５２９５（ＵＳ，Ａ１）
【文献】米国特許出願公開第２０１４／００３９６８１（ＵＳ，Ａ１）
【文献】米国特許出願公開第２０１２／００３９６８１（ＵＳ，Ａ１）
【文献】米国特許出願公開第２０１４／０３１６６８１（ＵＳ，Ａ１）
【文献】米国特許出願公開第２０１７／００２０６１５（ＵＳ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ａ６１Ｂ
(57)【特許請求の範囲】
【請求項1】
外科用ロボットシステムであって、ロボットマニピュレータと、
前記ロボットマニピュレータに結合された内視鏡と、
１つ又は２つ以上のユーザインターフェースデバイスと、
前記１つ又は２つ以上のユーザインターフェースデバイスの変位を前記内視鏡のスケーリングされた変位に転換するように構成されたコントローラであって、前記転換が、前記ユーザインターフェースデバイスの第１の自由度（ＤｏＦ）の回転を、前記内視鏡のより少ない第２のＤｏＦの回転に低減させる、コントローラと、を備え、
前記転換が、前記１つ又は２つ以上のユーザインターフェースデバイスからの入力運動コマンドから内視鏡運動コマンドへの投影と、前記内視鏡運動コマンドから前記ロボットマニピュレータのアーム関節運動コマンドへの投影と、を含み、
前記内視鏡が、細長いシャフトと、前記細長いシャフトに沿った軸からゼロではない角度で離れた視野方向と、を含み、前記入力運動コマンドから前記内視鏡運動コマンドへの前記投影が、前記より少ない第２のＤｏＦの前記回転が前記ロボットマニピュレータの遠隔運動中心を中心とした３自由度（ＤｏＦ）の回転に転換された遠隔運動中心フレームへの変換を含む、システム。
【請求項2】
前記コントローラが、前記内視鏡の回転を前記３自由度（ＤｏＦ）から１自由度（ＤｏＦ）に低減するように構成される、請求項１に記載の外科用ロボットシステム。
【請求項3】
前記１つ又は２つ以上のユーザインターフェースデバイスが、２つのハンドヘルドオブジェクトを含み、前記ハンドヘルドオブジェクトの各々が、他のデバイスに及び相互に物理的に接続されていない、請求項１に記載の外科用ロボットシステム。
【発明の詳細な説明】
【背景技術】
【0001】
本実施形態は、低侵襲外科手術（minimally invasive surgery、ＭＩＳ）のためのロボットシステムに関する。ＭＩＳは、遠隔オペレータからのコマンドに基づいて外科用ツールを操作するための、１つ又は２つ以上のロボットマニピュレータを含むロボットシステムを用いて実施し得る。ロボットマニピュレータは、例えば、その遠位端において、内視鏡を含む、様々な外科用器具及びデバイスを支持し得る。ロボットシステムを使用して、外科医は、ＭＩＳ中の遠隔操作において内視鏡を用いてロボットマニピュレータを制御する。
【0002】
ロボットＭＩＳにおける内視鏡は、手術部位の視野及び全体的参照を提供する。遠隔操作中、外科医の手及び／又は手首の運動は、マスタ制御デバイスによって捕捉される。内視鏡の運動は、捕捉された運動に従う。ロボットアームは、特にマスタ制御デバイスのより大きな自由度と比較して、制限された動きを有し得る。マスタ制御デバイスの運動と内視鏡の運動との間に曖昧さをもたらす。
【発明の概要】
【課題を解決するための手段】
【0003】
前置きとして、以下に記載されている好ましい実施形態は、外科用ロボットシステムによる内視鏡の制御のための、方法、システム、命令、及びコンピュータ可読媒体を含む。６自由度を有するユーザ入力は、より少ない数の自由度を有するロボットアームによる内視鏡の制御にマッピングする。例えば、繋がれていないユーザインターフェースデバイスは、ユーザコマンドから内視鏡の運動、ロボットアームの関節の運動まで、一連の投影を通じて内視鏡の運動を制御する。ユーザコマンドから内視鏡の運動への投影は、ユーザインターフェースデバイスの３つの角運動から単一の角運動を投影し得る。投影は、内視鏡のシャフトに対する内視鏡の視野の遠隔運動中心及び／又は角度配向を説明し得る。
【0004】
第１の態様では、外科用ロボットシステムによって内視鏡の制御方法が提供される。６自由度を有するハンドヘルドユーザ入力デバイスによる動きが検出される。ハンドヘルドユーザ入力デバイスによる動きは、外科用ロボットシステムのロボットマニピュレータに結合された内視鏡の動きにマッピングされる。内視鏡の動きを容易にするために、操作されたロボットの１つ又は２つ以上の関節の動きが計算される。１つ又は２つ以上の関節は、計算された動きに従って駆動される。
【0005】
第２の態様では、外科用ロボットシステムによる内視鏡の制御方法が提供される。３つの軸を中心とした入力並進及び入力回転が感知される。３つの軸を中心とした入力回転は、ロボットアームに据え付けられた内視鏡のための単一軸を中心とした回転に投影される。ロボットアームは、感知された入力並進及び単一軸を中心とした保護された回転に基づいて内視鏡を移動させるように制御される。
【0006】
第３の態様では、外科用ロボットシステムが提供される。内視鏡は、ロボットマニピュレータに結合される。コントローラは、１つ又２つ以上のユーザインターフェースデバイスの変位を内視鏡のスケーリングされた変位に転換するように構成される。転換は、ユーザインターフェースデバイスの第１の自由度（degree of freedom、ＤｏＦ）の回転を、内視鏡のより少ない第２の数のＤｏＦの回転に低減する。
【0007】
本発明は、以下の請求項によって定義され、この項におけるいずれも、これらの請求項の制限としてとられるべきではない。１つの種類の請求項（例えば、方法）に対する任意の教示は、別の種類の請求項（例えば、コンピュータ可読記憶媒体又はシステム）に適用可能であり得る。本発明の更なる態様及び利点は、好ましい実施形態と併せて以下に考察され、その後独立して、又は組み合わせて特許請求され得る。
【図面の簡単な説明】
【0008】
構成要素及び図面は、必ずしも縮尺どおりではなく、代わりに、本発明の原理を例解することに重点が置かれている。更に、図面において、同様の参照番号は、異なる視野を通して対応する部分を指す。
【図1】一実施形態による外科用ロボットシステムを有する手術室環境の一実施形態の例解図である。
【図2】例示的な外科用ロボットアーム及び外科用ツールを例解している。
【図3】外科用ロボットシステムによる内視鏡の制御方法の一実施形態のフローチャート図である。
【図4】遠隔操作中のロボットマニピュレータによるユーザインターフェースの６自由度の運動と内視鏡の４自由度の動きとの間の例示的な関係を例解している。
【図5】ユーザ入力運動をロボットマニピュレータの関節運動にマッピングするための例示的な投影シーケンスを例解している。
【図6】角度付けられた視野を伴う例示的な内視鏡を例解している。
【図7】スケーリングされた並進運動を有する例示的な内視鏡を例解している。
【図8】本発明の外科用ロボットシステムの一実施形態を示すブロック図である。
【発明を実施するための形態】
【0009】
内視鏡制御は、ロボットＭＩＳで提供される。１つ又は２つ以上のＵＩＤは、６自由度を有し、ロボットアームは、より少ない（例えば、４つの）関節及びＭＩＳ中の対応する自由度を有する。１つ又は２つ以上のユーザインターフェースデバイス（User interface device、ＵＩＤ）の運動空間は、ロボットアームのアーム運動空間と互換性がなく、したがって、ユーザデバイス運動は、内視鏡運動空間に投影される。ユーザ運動コマンド（User motion command、ＵＭＣ）は、ＵＩＤ運動から生成される。ＵＭＣは、内視鏡運動コマンド（endoscope motion command、ＥＭＣ）にマッピングされる。投影は、角運動コマンドを投影するが、投影せずに直線運動コマンドを伝えることによって達成され、投影されたＵＭＣが得られる。ＥＭＣは、アーム関節運動コマンド（joint motion command、ＪＭＣ）にマッピングされる。
【0010】
更なる実施形態では、内視鏡運動は、ＭＩＳ中のロボットアームの機械的又は仮想遠隔運動中心（remote center of motion、ＲＣＭ）によって拘束される。ＵＭＣは、ＲＣＭ運動空間に更に投影され、ＲＣＭによって拘束されたＥＭＣをもたらす。ＥＭＣは、逆運動学を介してアームＪＭＣにマッピングされる。追加的に、内視鏡端部がＲＣＭに近いときの速いアーム運動を回避するために、動的スケーリング技法が使用される。
【0011】
図１及び図２は、例示的な外科用ロボットシステムを示す。内視鏡制御のためのアプローチは、この例示的なシステムを参照して以下で考察される。他の外科用ロボットシステム及び外科用ロボット又は非外科用ロボットシステム及びロボットが、本アプローチを使用し得る。
【0012】
【0013】
図１は、外科用ロボットシステム１００を有する例示的な手術室環境を例解している図であり、ここでは、投影によって自由度の数が低減され、ＲＣＭ及び／又はスケーリングが考慮されて、ユーザからのコマンドが外科用ロボットマニピュレータ１２２の運動に変換される。外科用ロボットシステム１００は、ユーザコンソール１１０、制御タワー１３０、及び外科用プラットフォーム１２４（例えば、テーブル又はベッドなど）に据え付けられた１つ又は２つ以上の外科用ロボットマニピュレータ（アーム）１２２を有する外科用ロボット１２０を含み、エンドエフェクタを備えた外科用ツールが、外科的処置を実行するためにロボットマニピュレータ１２２の遠位端に取り付けられている。制御タワー１３０をコンソール１１０又は外科用ロボット１２０と組み合わせる等、追加的な、異なる、又はより少ない構成要素が提供され得る。ロボットマニピュレータ１２２は、テーブルに据え付けられているように示されているが、他の構成では、ロボットマニピュレータ１２２は、カート、天井、若しくは側壁、又は別の好適な支持表面に据え付けられ得る。
【0014】
一般に、外科医又は他のオペレータなどのユーザは、ロボットマニピュレータ１２２及び／又は外科用器具を遠隔操作する（例えば、遠隔操作）ために、ユーザコンソール１１０に着座し得る。ユーザコンソール１１０は、図１に示すように、システム１００と同じ手術室内に位置し得る。他の環境では、ユーザコンソール１１０は、隣接若しくは近くの部屋に位置し得るか、又は別の建物、都市、若しくは国の遠隔地から遠隔操作され得る。ユーザコンソール１１０は、シート１１２、ペダル１１４、１つ又は２つ以上のハンドヘルドユーザインターフェースデバイス（ＵＩＤ）１１６、及び例えば患者内の手術部位の視野及びグラフィックユーザインターフェースを表示するように構成されたオープンディスプレイ１１８を含み得る。例示的なユーザコンソール１１０に示されるように、シート１１２に座って開いたディスプレイ１１８を見ている外科医は、ペダル１１４及び／又はハンドヘルドＵＩＤ１１６を操作して、アーム１２２の遠位端に据え付けられたロボットアーム１２２及び／又は外科用器具を遠隔的にかつ直接制御し得る。ユーザは、外科用マニピュレータ１２２及び／又はエンドエフェクタの動きのコマンドを入力する。このユーザ制御は、ロボットマニピュレータ１２２の位置、動き速度、及び動き速度の変化を決定する。速度及び速度の変化は、ロボットマニピュレータ１２２によって提供されることが予想される動的トルクをもたらす。座席１１２に座っている外科医は、ディスプレイ１１８を見てそれと対話して、手術におけるロボットマニピュレータ１２２及び／又は外科用器具（例えば、内視鏡）の遠隔操作における動きのコマンドを入力し得る。
【0015】
いくつかの変形例では、ユーザはまた、外科用ロボットシステム１００を「オーバーザベッド」（over the bed、ＯＴＢ）モードで操作し得、ここでは、ユーザは、患者の側にいて、ロボット駆動のツール／それに取り付けられたエンドエフェクタ（例えば、片手で保持されたハンドヘルドＵＩＤ１１６）、及び手動の腹腔鏡ツールを同時に操作する。例えば、ユーザの左手は、ハンドヘルドＵＩＤ１１６を操作してロボット外科用構成要素を制御し得、ユーザの右手は、手動の腹腔鏡ツールを操作し得る。したがって、これらの変形例では、ユーザは、ロボット支援ＭＩＳ及び手動腹腔鏡手術の両方を患者に実施し得る。
【0016】
例示的な処置又は手術の間、患者は、麻酔を達成するために、滅菌状態で準備され、覆われている。手術部位への最初のアクセスは、手術部位へのアクセスを容易にするために、収納構成又は引き込み構成のロボットシステム１００を用いて手動で実施し得る。アクセスが完了すると、ロボットシステムの初期位置決め又は準備が実施され得る。処置中、ユーザコンソール１１０の外科医は、ペダル１１４及び／又はＵＩＤ１１６を利用して、様々なエンドエフェクタ及び／又は撮像システムを操作し、遠隔操作を使用して手術を実施し得る。動きは、外科医、患者、及び／又は状況に特有であり得、したがって変化し得る。滅菌ガウンを着た要員によって手動補助も、処置テーブルで提供され得、組織の引き込み、又は１つ若しくは２つ以上のロボットマニピュレータ１２２を伴う手動の再位置決め又はツール交換の実施を含むが、これらに限定されない、タスクを実施し得る。引き込み、縫合、他の組織操作等のいくつかの外科的タスクは、代わりに、１つ又は２つ以上のロボットマニピュレータ１２２（例えば、第３又は第４のアーム）によって実施され得る。また、ユーザコンソール１１０の外科医を支援するために、非滅菌要員が存在し得る。処置又は手術が完了すると、ロボットシステム１００及び／又はユーザコンソール１１０は、ロボットシステム１００の洗浄及び／若しくは滅菌、並びに／又はユーザコンソール１１０を介するなど電子的若しくはハードコピーのいずれかにかかわらない、医療記録の入力若しくは印刷を含むが、これらに限定されない、１つ若しくは２つ以上の術後処置を容易にするように構成又は設定され得る。
【0017】
いくつかの態様では、外科用ロボット１２０とユーザコンソール１１０との間の通信は、ユーザコンソール１１０からのユーザ入力コマンドをロボット制御コマンドに転換し、制御コマンドを外科用ロボット１２０に送信し得る、制御タワー１３０を介し得る。制御タワー１３０及び／又はユーザコンソール１１０は、投影及び／又は逆運動学を実施する。制御タワー１３０はまた、プラットフォーム１２０からユーザコンソール１１０に戻る、ステータス信号及びフィードバックを送信し得る。外科用ロボット１２０、ユーザコンソール１１０、及び制御タワー１３０の間の接続は、有線及び／若しくは無線接続を介したものであり得、独自のものであり、並びに／又は様々なデータ通信プロトコルのいずれかを使用して実施され得る。任意の有線接続が、手術室の床及び／又は壁若しくは天井に任意選択的に内蔵され得る。外科用ロボットシステム１００は、手術室内のディスプレイ、並びにインターネット又は他のネットワークを介してアクセス可能である遠隔ディスプレイを含む、１つ又は２つ以上のディスプレイにビデオ出力を提供し得る。ビデオ出力又はフィードはまた、プライバシーを確保するために暗号化され得、ビデオ出力の全て又は部分は、サーバ又は電子医療記録システムに保存され得る。
【0018】
外科用ロボットシステムで手術を開始する前に、外科チームは術前のセットアップを実施することができる。術前セットアップ中、外科用ロボットシステムの主要な構成要素（例えば、テーブル１２４及びロボットアーム１２２、制御タワー１３０、及びユーザコンソール１１０）が手術室に位置決めされ、接続され、電力が供給される。テーブル１２４及びロボットアーム１２２は、格納及び／又は輸送のために、テーブル１２４の下のアーム１２２を有する完全に収納された構成にあり得る。外科チームは、滅菌ドレーピングのためにアーム１２２をそれらの収納位置から延ばすことができる。ドレーピング後、使用に必要になるまで、アーム１２２を部分的に引き込むことができる。カニューレ配置及び吹送を含む、いくつかの従来の腹腔鏡ステップが、実施される必要があり得る。例えば、各スリーブは、閉塞具の助けを借りて、小さい切開部に、かつ体壁を介して挿入することができる。スリーブ及び閉塞具は、挿入中の組織層の視覚化のための光学的入口を可能にして、配置中の損傷のリスクを最小限に抑える。内視鏡は典型的に、他のカニューレを配置するためのハンドヘルドカメラの視覚化を提供するために最初に配置される。吹送後、必要に応じて、手動器具がスリーブを通して挿入され、任意の腹腔鏡ステップを手動で実施することができる。
【0019】
次に、外科チームは、ロボットアーム１２２を患者の上に位置決めし、各アーム１２２を対応するスリーブ（例えば、カニューレ）に取り付け得る。外科用ロボットシステム１００は、取り付け時に各ツール（内視鏡及び外科用器具）を一意に識別し、ツールの種類及びアーム位置をユーザコンソール１１０のオープン又は没入型ディスプレイ１１８及び制御タワー１３０のタッチスクリーンディスプレイに表示する能力を有する。対応するツール機能を有効にして、マスタＵＩＤ１１６及びフットペダル１１４を使用して起動することができる。患者側のアシスタント、処置を通して必要に応じて、ツールを取り付け、取り外すことができる。ユーザコンソール１１０に着座した外科医は、１つ又は２以上（例えば、２つ）のマスタＵＩＤ１１６及び１つ又は２つ以上のフットペダル１１４によって制御されるツールを使用して、遠隔操作として手術を実施し始めることができる。システムは、マスタＵＩＤ１１６を介して外科医の手、手首、及び指の動きを外科用ツールの正確なリアルタイムの動きに転換する。したがって、直接遠隔操作では、システムは、外科医の全ての外科的手技を常に監視し、システムが外科医の手の動きを正確に反映することができない場合は、器具の運動を一時停止する。内視鏡が手術中に１つのアームから別のアームに移動される場合、システムは、器具整列のためにマスタＵＩＤ１１６を調整し、器具制御及び運動を継続することができる。フットペダル１１４は、外科医がマスタＵＩＤ１１６から手を離すことなく、内視鏡制御及び単極焼灼並びに双極焼灼を含む様々な器具機能などの様々なシステムモードを起動するために使用され得る。
【0020】
図２は、本技術の態様による、ロボットマニピュレータ１２２、ツール駆動部２１０、及びロボット外科用ツール（例えば、内視鏡２２０）が搭載されたコネクタの１つの例示的な設計を例解する概略図である。図２に示されるように、例示的な外科用ロボットマニピュレータ１２２は、複数のリンク（例えば、リンク２０２）と、複数のリンクを互いに対して作動させるための複数の作動関節モジュール（例えば、関節２０４、関節Ｊ１～８も参照）とを含み得る。関節モジュールは、ピッチ関節又はロール関節などの様々な種類を含み得、これらは、隣接するリンクの特定の軸の周りの他のリンクに対する動きを実質的に拘束し得る。図２の例示的な設計には、ロボットアーム１２２の遠位端に取り付けられたツール駆動部２１０も示されている。ツール駆動部２１０は、外科用器具（例えば、内視鏡２２０）又はエンドエフェクタ２２２を受容及び誘導するために、その端部に結合されたカニューレ２１４を含み得る。外科用器具（又は「ツール」）は内視鏡２２０であり、ツールの遠位端にエンドエフェクタ２２２を含み得る。ロボットマニピュレータ１２２の複数の関節モジュールは、ロボット手術のためにエンドエフェクタ２２２を作動又は移動させるツール駆動部２１０を位置決め及び配向するように作動させることができる。エンドエフェクタ２２２は、シャフト上の内視鏡のレンズであるなど、ツールシャフト端部にある。
【0021】
図２の例では、関節Ｊ０はテーブル旋回関節であり、外科用テーブル上面の下に存在する。関節Ｊ０は、手術の間、公称上定位置に保持される。関節Ｊ１～Ｊ５は、セットアップ又はデカルトアームを形成し、公称上、手術中に定位置に保持され、したがって、外科的遠隔操作中の運動に寄与しない。関節Ｊ６及びＪ７は、手術又は遠隔操作中に能動的に移動し得る球状アームを形成する。関節Ｊ８は、ツール駆動部の一部として、エンドエフェクタ２２２などのツール２２０を並進させる。関節Ｊ８は、手術中に能動的に移動して、シャフトの軸に沿ってエンドエフェクタを並進させ得る。関節Ｊ６～８は、手術中にツールシャフト端部（すなわち、エンドエフェクタ２２２）を能動的に位置決めすると同時に、患者の皮膚への応力を回避するために、固定された又は安定した場所（すなわち、ＲＣＭ）で患者へのエントリポイントを維持する。セットアップ中、関節Ｊ０～Ｊ８のうちのいずれかが移動し得る。手術中、関節Ｊ６～８は、位置、速度、加速度、及び／又はトルクに関するハードウェア又は安全性の制限を受けて移動し得る。内視鏡２２０としての外科用ツールは、長手方向シャフト又は他の軸を中心に回転され得、この回転は、内視鏡の唯一の自由度であり得る。関節Ｊ６～８からの３自由度及び内視鏡２２０からの１自由度（すなわち、関節Ｊ６～８からの３つ及び内視鏡の回転からの１つを有する４自由度）など、任意の数の自由度が提供され得る。
【0022】
図３は、外科用ロボットシステム１００による内視鏡２２０の制御方法の一実施形態のフローチャート図である。ＵＩＤ１１６の動きは、外科医の運動を関節の運動に投影することの一部として、より少ない数の角運動にマッピングされる。
【0023】
図３の方法は、制御タワー１３０、コンピュータ、ワークステーション、サーバ、又は別のプロセッサなどの制御プロセッサによって実装される。外科用ロボットシステム１００の任意のコンピュータが使用され得る。ユーザインターフェースは、動作３００で受信されたユーザからの動きのコマンドを提供する。制御プロセッサ（例えば、コントローラ）は、動作３１０において、ＵＩＤの動きをロボットマニピュレータの動きにマッピングする。ロボットアーム１２２及び／又は内視鏡２２０は、動作３２０において、制御プロセッサからの命令又は制御を使用して移動される。他のデバイスが、動作のうちのいずれかを実施し得、及び／又は動作のうちのいずれかにおいて使用され得る。
【0024】
これらの動作は、図示される順序又は他の順序で実施される。例えば、動作３００は、他の動作のいずれかの後に実施される。別の例として、動作３２０は、進行中の遠隔操作などにおいて、動作のいずれかの前又は後に実施される。
【0025】
追加的な、異なる、又はより少ない動作が使用され得る。例えば、動作３１１～３１５の投影又はスケーリングのいずれかは、単独で、又は動作の全てよりも少ないものと組み合わせて実施される。別の例では、内視鏡２２０を患者内に最初に位置決めし、手術を計画し、及び／又は内視鏡２２０を患者から除去するための動作が提供され得る。
【0026】
動作３００において、センサは、１つ又は２つ以上のＵＩＤ１１６の入力された動きを検出する。磁気位置感知、光感知、電場感知、又は他の感知が、ユーザによる動き等のＵＩＤ１１６の動きを無線で検出するために実施される。ＵＩＤ１１６上又はその中のジャイロスコープ、加速度計、及び／若しくは他のセンサは、ＵＩＤ１１６の入力された動きを検出（例えば、ＵＩＤ１１６の配向及び／又は並進を感知）し得る。
【0027】
ＵＩＤ１１６は、ボタン、ノブ、及び／又はジョイスティックを有する又は有しない任意の形状のオブジェクトであるなど、ハンドヘルドである。ＵＩＤ１１６は、他のデバイスに物理的に接続されていない（すなわち、機械的リンケージ及びケーブルがない）など、繋がれていない。他の実施形態では、通信のためにケーブルが提供される。ユーザがＵＩＤ１１６を並進及び／又は回転させると、この運動又は場所及び／又は配向の変化（すなわち、姿勢又は位置の変化）がセンサによって検出され、参照ベースフレーム（すなわち、遠隔に位置決めされたセンサに対するＵＩＤ１１６）が提供される。
【0028】
ＵＩＤ１１６はハンドヘルドであるため、ＵＩＤ１１６は各々６自由度を有する。直交空間軸（ｘ、ｙ、ｚ）に沿った３つの並進度、及び３つの空間軸を中心とした３つの回転度は、ロール、ピッチ、及びヨーを提供する。これら３つの軸を中心とした並進及び／又は回転が感知され、姿勢又は位置を提供する。一方又は両方のＵＩＤは、オペレータによって手に保持されている間、及び他のデバイスに物理的に接続されていない間に感知される。
【0029】
位置又は位置の変化（例えば、直線及び回転運動）が感知される。感知は、０．１秒毎などの任意の周波数でサンプリングする。位置又は位置の変化は、１つ又は両方のＵＩＤ１１６についてサンプリングされる。
【0030】
動作３１０において、コントローラは、内視鏡２２０の動きを容易にするためにロボットマニピュレータの１つ又は２つ以上の関節の動きを計算する。コントローラは、ハンドヘルドユーザ入力デバイス（例えば、ＵＩＤ１１６）による動きを、外科用ロボットシステム１００のロボットマニピュレータ１２２によって保持された内視鏡２２０の動きにマッピングする。マッピングは、１つ又は２つ以上のＵＩＤ１１６の動きを関節運動に関連付けて、内視鏡２２０を移動させる。
【0031】
図３は、マッピングするための計算に伴う５つの動作３１１～３１５を示す。追加的な、異なる、又はより少ない動作が提供され得る。例えば、動作３１４は提供されない。別の例として、動作３１２は、動作３１１の投影などの動作のうちの別のものと組み合わされ得るか、又はその一部であり得るマッピングの態様である。任意の所与の投影は、ユーザコマンドをアーム運動に、アーム運動をＲＣＭフレームに、次いで、ＲＣＭフレームを内視鏡２２０の運動に転換することを含む、動作３１３の投影等、複数の動作に細分され得る。感知されたＵＩＤの運動から関節の運動に転換する他のマッピングが使用され得る。
【0032】
図５は、一連の動作３１１～３１５を表す。この表現は、動作３００の感知することからロボットアーム１２２の関節（例えば、Ｊ６～８）の動きへマッピングすることのためのフローチャート及び／又はソフトウェアモジュールである。
【0033】
動作３１１において、コントローラは、感知することから内視鏡のためのユーザ運動コマンドへと投影する。ＵＩＤ１１６の運動又は位置は、ユーザコマンドに転換される。ＵＩＤ１１６を介してユーザによって入力された変更は、感知された運動及び／又は位置から解釈される。
【0034】
１つのＵＩＤ１１６は、内視鏡の運動又は位置を制御するために使用され得る。代替的に、２つのＵＩＤ１１６の組み合わせが、内視鏡の運動又は位置を制御するために使用される。例えば、両方のＵＩＤ１１６の協調された動きは、６自由度でユーザ入力運動を導出するために相対運動を使用するなど、運動を制御する。２つのハンドヘルドユーザインターフェースオブジェクトの位置及び／又は配向の変化が検出され、２つのハンドヘルドユーザインターフェースオブジェクト間の仮想中心点における動きが、内視鏡を制御するための入力された動きとして使用される。ユーザは、各々の手（左及び右）にＵＩＤ１１６を保持し（図１参照）、両方のＵＩＤ１１６の運動が感知されて、外科医によって入力されている協調運動が決定される。ＵＩＤ１１６間の中心点における６自由度に対応する３つの軸を中心としたユーザの並進及び回転が検出される。
【0035】
遠隔操作に備えて、ユーザは、外科医コンソール１１０に座る。遠隔操作のためにロボットマニピュレータ１２２を位置決めした後、１つ又は２つ以上の関節が、患者の皮膚又は切開部エントリポイントにおいてＲＣＭを用いて定位置にロックされる。例えば、関節Ｊ０～Ｊ５（図２参照）がロックされる。ロックは、ブレーキによって、及び／又は関節用のモータへの通電を回避することによって行われる。これらの関節は、遠隔操作中にロックされたままである。関節Ｊ０～Ｊ５のいずれかをロック解除し、移動させてＲＣＭ変化させ得る。
【0036】
遠隔操作中、ユーザは、ロボットマニピュレータ１２２及び／又は内視鏡２２０を移動させるためのコマンドを入力する。コマンドは、運動のためのものである。異なるコマンドが、異なる動きに対して提供され得る。コマンドは、エンドエフェクタ２２２の動きのためのものであり得る。これらのコマンドは、特定の関節の動きのためのものでなくてもよい。制御プロセッサは、動きのコマンドをロボットマニピュレータ１２２及び／又は外科用ツール２２０の特定の関節の制御に変換する。
【0037】
制御プロセッサは、患者に対する遠隔操作の前又はその間に、ロボットマニピュレータ１２２又はロボットマニピュレータ１２２の内視鏡２２０を移動させるユーザコマンドを受信する。ユーザ入力は、制御プロセッサによって、無線又は有線インターフェースを介して、ＵＩＤ１１６などのユーザコンソール１１０から受信される。他の実施形態では、ユーザコマンドは、メモリからロードするか、又はコンピュータネットワークを介して送信することによって受信される。
【0038】
一実施形態では、ユーザコマンドは、参照フレーム又は座標系に基づいて生成される。遠隔操作に入るとすぐに、両方のＵＩＤ１１６の場所（ｘ，ｙ，ｚ）が参照フレームを作成するために使用される。２つのＵＩＤ１１６の間の中心点が決定される。この中心点は、次のように表される：
【0039】
【数1】
【0040】
この中心点を中心とした参照フレームは、静的又は動的に確立され得る。参照フレームを静的に作成するために、２つのＵＩＤ位置の間の中心点が原点として使用され、参照フレームの軸（ｘ，ｙ，ｚ）は、ＵＩＤ１１６のベースフレームと同じである。ＵＩＤ１１６のセンサのｘ、ｙ、ｚ軸が使用される。
【0041】
参照フレームを動的に作成するために、中心点が原点として使用されるが、ｙ軸は、右ＵＩＤの場所から左ＵＩＤの場所のｙ軸に、又はその逆に定義される。ｙ軸は、ＵＩＤ１１６の相対的な場所によって与えられる。ｘ軸は、ｙ軸に垂直であり、ベースフレームに向かって（すなわち、中心点からベースのセンサ又は原点に）向かって向いている。ｚ軸は、ｘ軸及びｙ軸を有する右手座標系を形成する。この動的作成は、ユーザによる原点及び方向の何らかの制御を可能にし、以下のように表され得る：
【0042】
【数2】
【0043】
参照座標系の静的及び動的生成の両方において、複数の場所のサンプル平均が、ＵＩＤの場所のランダムノイズを低減するために使用され得る。参照フレームは、最初に遠隔操作に入るときに一度作成され、ユーザが遠隔操作を終了するまで同じままである。
【0044】
運動を検出するために、センサは、異なるサンプル時刻におけるＵＩＤの位置（直線及び角度姿勢）を検出する。参照フレームに対する又は参照フレーム内の２つの連続するＵＩＤ中心点位置が、ユーザ運動コマンド（user motion command、ＵＭＣ）として使用される。参照軸に対する位置の変化（例えば、３つの参照軸を中心とした並進及び／又は回転）が検出される。６自由度を有するこの位置又は運動ベクトルの変化は、次のように表される：
【0045】
【数3】
【0046】
３つ以下の空間軸に沿った中心点の並進及び３つの空間軸を中心とした回転が検出され、並進及び回転におけるユーザ運動コマンドベクトルを提供する。例えば、ユーザは、内視鏡を回転させながら内視鏡を移動させるために手首を下方に曲げながら並進のために手を前方に移動させる。３つ全ての軸を中心とした中心点の並進及び／又は回転が検出され得る。
【0047】
動作３１２において、コントローラは、３つの軸を中心とした入力回転を、ロボットアームに据え付けられた内視鏡の単一軸を中心とした回転に投影する。ＵＩＤ１１６の自由度（例えば、３つの直線並進及び３つの回転を含む６自由度）は、ロボットマニピュレータ１２２の自由度に一致するように低減される。図４の例では、６自由度は、関節Ｊ６～８及び内視鏡２２０の回転によって提供されるアームの４自由度に低減される。他の例では、低減は、６から５又は６から３である。
【0048】
この実施形態における投影は、３度から１度など、回転の自由度の低減を提供する。他の実施形態では、低減の一部又は全ては、並進自由度におけるものである。
【0049】
図３及び図５は、ユーザコマンドへの投影の一部としての、又は投影後の、及び／又はユーザコマンドから内視鏡コマンドへの投影前の拒絶を示す。低減は、ユーザコマンド空間において行われる。他の実施形態では、低減は、動作３１１の検出空間、内視鏡コマンド空間（例えば、動作３１３の後）、スケーリングされた空間（例えば、動作３１４の後）、又は関節コマンド空間（例えば、動作３１５の後）などのマッピングの他の空間又は部分において行われる。
【0050】
図５の例では、ユーザコマンドのロール、ピッチ、及びヨーは、１つの回転（例えば、ロール）を、他の回転（例えば、ヨー及びピッチ）なしに提供するように投影される。この配向投影は、感知されたヨー及びピッチを落とすか、除去するか、又は使用しない。代替的に、３自由度の回転は、１つの軸を中心とした単一回転に変えられる。回転ベクトルをより少ない（例えば、単数の）回転数に関連付ける任意の関数が使用され得る。配向の投影は、回転Ｒ又は回転ベクトル
【0051】
【0052】
直線並進は投影されないか、又は不変のまま投影される。直線並進ｘｙｚは、動作３１３において内視鏡コマンドを生成するために伝えられる。ロール又は回転Ｒなどの投影された配向は、動作３１３において内視鏡コマンドを生成するために伝えられる。
【0053】
一実施形態では、ユーザ運動コマンドの配向は、参照フレーム内のロール空間のみに投影される。ヨー及びピッチは０に設定される。投影は、ロールを使用し、動作３１１のユーザコマンドの感知及び生成において確立された参照フレーム内のヨー及びピッチを使用しない。動作３１２の配向投影は、次のように表され得る：
【0054】
【数5】
【0055】
内視鏡２２０は、内視鏡２２０の長手方向軸又はシャフトに沿って中心に置かれた視野方向を有し得る。他の実施形態では、視野方向は、シャフトからゼロではない角度でオフセットされる。図６は、３０度の角度オフセットを有する例を示すが、より小さい又はより大きい角度オフセットが使用され得る。動作３１２の配向投影において維持されるロール又は回転は、ロボットマニピュレータの遠隔運動中心から、内視鏡２２０の観察者のゼロではない角度に基づく制御点までの軸を中心としている。回転（ロール）軸は、ＲＣＭと、内視鏡視野軸上のユーザ定義点（例えば、画像中心）と、を通過する線によって定義される。この点は、ユーザが内視鏡を回転させるとき、画像中心点が静止したままであるように、制御点として機能する。ユーザは、画面上の視野に対してコマンドを入力しているので、回転はその視野のものである。角運動は、内視鏡２２０の観察者のゼロではない角度に基づいて、ロボットマニピュレータ１２２の遠隔運動中心から制御点までの軸を中心としてマッピングされる。
【0056】
動作３１３において、コントローラは、ユーザ運動コマンドを内視鏡コマンドに投影する。ユーザ運動コマンドは、内視鏡２２０を制御するためのものである。投影は、エンドエフェクタ、ｅｅ、又は内視鏡２２０の先端の運動を示す。
【0057】
ロボットマニピュレータ１２２は、内視鏡２２０を移動させ、遠隔運動中心によって拘束されるため、内視鏡コマンド空間への投影は、遠隔運動中心を説明する。内視鏡２２０のエンドエフェクタは、遠隔運動中心によって拘束される方法で移動される。内視鏡コマンド空間への投影は、内視鏡２２０のシャフトに沿った位置が静止して維持されるべき内視鏡２２０の運動のためのものである。
【0058】
内視鏡コマンド空間への投影は、内視鏡２２０のためのユーザ運動コマンドをロボットマニピュレータ１２２の遠隔運動中心フレームに変換又は転換する。１つのアプローチでは、投影は、ロボットマニピュレータ１２２の参照フレームにおける運動を定義する。運動は、遠隔運動中心に変換される。この変換は、３軸を中心とした回転である３自由度未満の回転（例えば、動作３１２の配向投影からの単一軸を中心とした回転）をもたらす。遠隔運動中心は静止しているので、ユーザコマンドの内視鏡２２０の直線並進及び回転は、エンドエフェクタを６自由度で並進及び回転させ得る。遠隔運動中心によって拘束された内視鏡コマンド空間への投影は、３つの軸を中心とした回転を提供する。遠隔運動中心フレーム内の運動は、次いで、遠隔運動中心フレームからアームフレームに逆変換され、遠隔運動中心フレームからの回転を追加する。
【0059】
ヨー及びピッチ成分が含まれている。一実施形態では、ヨー及びピッチは、ユーザコマンド空間から除去される。ヨー及びピッチは、内視鏡コマンド空間に戻されて追加されるが、動作３１１のユーザコマンド投影において確立された参照フレームの代わりに、遠隔運動中心に相対的である。
【0060】
投影は、ハンドヘルドユーザ入力デバイス（例えば、ＵＩＤ１１６）による動きをロボットマニピュレータ１２２の遠隔運動中心参照フレームに投影するために提供する。上で考察される動作３１１～３１３及び／又は動作３１３の一連の投影、又は異なる投影、若しくは投影シーケンスを使用して、ＵＩＤ１１６の検出された動きを遠隔運動中心によって拘束される内視鏡運動に変換し得る。
【0061】
一実施形態では、ユーザ運動コマンドは、ロボットマニピュレータ１２２の遠隔運動中心フレームに投影され、内視鏡コマンドを作成する。ユーザ運動コマンドは、以下によって表されるように、内視鏡２２０のエンドエフェクタの運動に基づいてロボットアーム空間に変換される。
【0062】
【数6】
【0063】
アーム空間内の並進及び回転は、遠隔運動中心によって拘束される。遠隔運動中心フレームへの投影は、次のように表される：
【0064】
【数7】
【0065】
遠隔運動中心フレームによって提供される拘束が式７に示されるように追加されると、結果として生じる並進及び回転は、内視鏡コマンドとして内視鏡２２０の運動の参照アームフレームに逆変換される。一実施形態では、４×４行列が投影の出力として計算される。この変換は、次のように表され得る：
【0066】
【数8】
【0067】
任意選択的な動作３１４において、コントローラは、内視鏡２２０の動きのうち直線並進成分をスケーリングする。エンドエフェクタ又は内視鏡２２０の先端を患者内で移動させるために、ロボットアーム１２２が移動する。エンドエフェクタの運動又は並進の量に加えて、遠隔運動中心に対するエンドエフェクタの近さは、患者の外側のロボットアーム１２２の運動の大きさ及び／又は速度を決定する。内視鏡先端が遠隔運動中心に近いとき、アームの反対側の端部の運動（すなわち、ツール駆動部２１０の運動）は、遠隔操作中に静止したままである遠隔運動中心を中心とした大きなレバーによって増幅される。この大きなレバーは、この反対側の端部に過剰な運動をもたらす。過剰な運動は、ロボットアーム１２２を振動させ得る。
【0068】
振動を低減するために、内視鏡２２０の動きの直線成分がスケーリングされる。動き速度を落とすなどして、直線成分が低減される。代替又は追加の実施形態では、回転成分はスケーリングされる。
【0069】
スケーリングは、全ての並進のためのものであり得る。並進の全ての成分は同じようにスケーリングされるが、異なる方向に対して異なるスケーリングが使用され得る。１つの使用事例は、内視鏡２２０が遠隔運動中心に近いとき、ズームイン／アウト運動が影響を受けないように、ｘ及びｙ運動のみをスケーリングするが、ｚ運動（ズームイン／アウト又は視野軸に沿った動き）はスケーリングされないままにすることである。別の方法は、全ての運動を同じスケーリングでスケーリングすることである。
【0070】
代替的に、スケーリングは、エンドエフェクタが遠隔運動中心の閾値距離内にあるときの並進のためのものである。直線運動Ｏ（ｘ，ｙ，ｚ）は、アーム１２２及び／又はツール駆動部２１０の過剰な運動が抑制されるように、内視鏡端部が遠隔運動中心に近いときにスケーリングされる。その結果、振動も抑制される。一実施形態では、スケーリングの量は、ロボットマニピュレータの遠隔運動中心からの内視鏡の距離に基づく。異なる距離は、異なる量のスケーリングを提供する。遠隔運動中心からのエンドエフェクタの一連の２つ又は３つ以上の閾値距離が、エンドエフェクタが遠隔運動中心に接近するにつれて、スケーリングの量を増加させるために提供される。代替的に、距離による連続的なスケーリングが提供される。
【0071】
この動的スケーリングの一例では、Ｏ＝Ｏ＊ｒであり、式中、ｒは、スケーリング係数である。スケーリング係数ｒは、ｄｉｓｔａｎｃｅ＿ｔｏ＿ｒｃｍ＞ｄｉｓｔａｎｃｅ＿ｔｏ＿ｒｃｍ＿ｔｈｒｅａｓｈｏｌｄであるとき、ｒ＝１．０として計算され、ｄｉｓｔａｎｃｅ＿ｔｏ＿ｒｃｍ＜＝ｄｉｓｔａｎｃｅ＿ｔｏ＿ｒｃｍ＿ｔｈｒｅａｓｈｏｌｄであるとき、ｒ＝（ｄｉｓｔａｎｃｅ＿ｔｏ＿ｒｃｍ／ｄｉｓｔａｎｃｅ＿ｔｏ＿ｒｃｍ＿ｔｈｒｅｓｈｏｌｄ）２として計算される。他の関数を使用して、遠隔運動中心までの距離に基づいて動的に又は連続的にスケーリングし得る。Ｏ［ｘ，ｙ，ｚ］ベクトルの成分は、上で示したように一括してスケーリングされるか、又はｒによって個々にスケーリングされる。
【0072】
動作３１５において、コントローラは、内視鏡コマンドによって提供される内視鏡２２０の動きを、ロボットマニピュレータ１２２の１つ又２つ以上の関節の動きに対するスケーリングを伴って又は伴わずにマッピングする。図２の例示的なロボットマニピュレータ１２２では、４つ以下の関節（例えば、関節Ｊ６～８及び内視鏡の回転）のための運動が決定される。ロボットマニピュレータ２２０の関節は、遠隔操作中に６つ未満の自由度を提供する。
【0073】
コントローラは、ロボットアームの遠隔運動中心フレームから、ロボットアーム１２２の関節位置コマンドに投影する。逆運動学を実施するなど、任意の投影が使用され得る。一実施形態では、関節運動は、特異値分解を使用する逆運動学（inverse kinematics、ＩＫ）によって生成又は計算される。マスタデバイスとしてのユーザ入力デバイス（例えば、ＵＩＤ１１６）からの６自由度運動がアームワークスペース内に投影されているので、ＩＫは常に収束するはずである。
【0074】
一実施形態では、関節位置コマンドは、ｐｉｎｖ（Ｊ）＊Ｔｗｉｓｔとして計算され、式中、Ｊは、時刻ｔにおける６×４ヤコビ行列であり、Ｔｗｉｓｔは、時間ｔ－１における姿勢と時刻ｔにおける姿勢との姿勢差を表す６×１ベクトルであり、θは、関節位置コマンドの４×１ベクトルである。
【0075】
関節位置（姿勢）又は関節位置（姿勢）の変化についての解は拘束され得る。例えば、エンドエフェクタ（例えば、内視鏡２２０の先端）から遠隔運動中心までの最小距離が強調される。内視鏡端部から遠隔運動中心までの最小距離は、遠隔操作中に内視鏡２２０がカニューレ２１４から引き抜かれるのを防止するために使用される。最小距離は、ツール並進関節Ｊ８上の関節限界として扱われる。
【0076】
動作３２０において、コントローラは、ロボットマニピュレータ１２２を制御する。ロボットアームが駆動され、アームを移動させる。制御プロセッサは、ロボットマニピュレータ１２２を選択された位置又は構成に駆動し、例えば、感知された入力並進及び単一を中心とした投影された回転に基づいて制御する。制御プロセッサは、ロボットマニピュレータ１２２及び／又は外科用ツール２２０の動きを引き起こす。遠隔操作中の能動的な関節に対する出力動きコマンドは、関節の位置を変化させる。ロボットマニピュレータ１２２は、選択された構成になるように移動させられる。
【0077】
関節コマンドが実装され、内視鏡２２０をユーザによって意図又は命令されたように移動させる。内視鏡２２０は、１つ又は２つ以上の関節の運動によって移動する。単一軸を中心とした回転に対する保護を含む様々な投影及びスケーリングの後、関節は、遠隔操作中に内視鏡２２０を移動するように移動される。図２及び図４の例示的なロボットアーム１２２において、球面ロール関節、球面ピッチ関節、ツール並進関節、及びツール回転関節のうちの１つ又は２つ以上は、所望の動きを提供するように操作され得る。
【0078】
シャフトの軸からオフセットされた視野方向を有する例（例えば、３０度のオフセット軸を有する図６を参照）では、関節運動は、制御点に対して内視鏡を移動させる。制御点は、ユーザが内視鏡２２０を回転させるとき、画像中心点が静止したままであるように提供される。
【0079】
図７は、医療用遠隔操作のための外科用ロボットシステムの一実施形態のブロック図を示す。システムは、図３、図５の方法、又は別の方法を実施する。異なる数の自由度に制限された、及び／又は遠隔運動中心フレームに拘束された運動を制御するための６自由度を有する繋がれていないユーザインターフェースデバイスによる感知に基づく投影のうちのいずれか１つ又は２つ以上（例えば、全て）が、実装され得る。
【0080】
外科用ロボットシステムは、対応する外科用器具コントローラ８０２、及びメモリ８０４を有する１つ又は２つ以上のロボットマニピュレータ１２２を含む。ユーザコンソール１１０は、外科用ロボットシステムの一部として表されるか、又は含まれる。追加的な、異なる、又はより少ない構成要素が提供され得る。
【0081】
ロボットマニピュレータ１２２は各々、１つ又は２つ以上のリンク及び関節を含む。関節は、ピッチ又はロール関節であり得る。外科用ツールを受容して案内するためのツール駆動部２１０及びカニューレ２１４が、ロボットマニピュレータ１２２の各々に提供され得る。内視鏡２２０は、ロボットマニピュレータ１２２の１つに提供されている。リンク及び関節の異なる組み合わせは、異なる程度又は種類の動き（例えば、並進及び／又は回転）を有する異なる部分など、ロボットマニピュレータ１２２の異なる部分を画定又は形成し得る。モータ、センサ、リンク、関節、コントローラ、外科用器具、及び／又は他の構造を有する任意の現在既知である又は今後開発されるロボットマニピュレータ１２２が使用され得る。
【0082】
１つ又は２つ以上のロボットマニピュレータ１２２が提供される。例えば、３つ又は４つのロボットマニピュレータ１２２が提供される。ロボットマニピュレータ１２２は、手術テーブルのベースなどのテーブルに据え付けられる。代替的に、カート、床、天井、又は他のマウントが使用され得る。ロボットマニピュレータ１２２は、コントローラ８０２又は中間物（例えば、制御タワー１３０）と通信するためのケーブル又は無線送受信機を含む。
【0083】
ロボット外科用器具は、１つ又は２つ以上の把持器、開創器、メス、内視鏡、ステープラ、鋏、又は別の外科用デバイスである。１つの外科用器具は、内視鏡２２０である。異なる又は同じ種類の器具が、ロボットマニピュレータ１２２のうちの異なるものに据え付けられ得る。例えば、２つのロボットマニピュレータ１２２は、把持器を有し得、第３のロボットマニピュレータ１２２はメスを有し得、第４のロボットマニピュレータ１２２は内視鏡２２０を有し得る。
【0084】
ロボット外科用器具は、ロボットマニピュレータ１２２の遠位端に接続又は結合されるが、他の場所で接続し得る。接続は、把持器又は鋏を閉じるなど、ツールが操作され得るように駆動を提供する。
【0085】
内視鏡２２０は、細長いシャフト及びレンズを有する。レンズの視野方向は、シャフトの長手方向軸に沿っている。視野方向は、長手方向軸から離れたゼロではない角度、例えば３０度であり得る（図６参照）。
【0086】
ユーザコンソール１１０は、外科医がロボットマニピュレータ１２２を制御するためのプロセッサなどの外科用ロボットシステムと対話するためのグラフィックユーザインターフェースである。ユーザインターフェースは、１つ又は２つ以上のＵＩＤ１１６及びディスプレイ１１８を含む。ＵＩＤ１１６及び／又はディスプレイ１１８は、ユーザコンソール１１０及び／又は制御タワー１３０に提供されるが、他の場所にあり得る。
【0087】
ＵＩＤ１１６はハンドヘルドデバイスである。他のデバイスと物理的に接続されていない状態で、ユーザの片手又は両手で保持するようなサイズ及び形状のオブジェクトが提供される。各手に１つずつ、２つのハンドヘルドオブジェクト（例えば、ＵＩＤ１１６）が使用され得る。２つのオブジェクトは、互いに及び他の全てのデバイスに物理的に接続されていない。代替的に、両手で同時に保持するための単一のデバイスが提供される。更に他の実施形態では、ケーブル、機械的リンケージ、及び／又は関節を介した物理的接続を有する１つ又は２つ以上のデバイスが提供される。
【0088】
ボタン、キーボード、ロッカー、ジョイスティック、トラックボール、音声認識回路、マウス、タッチパッド、タッチスクリーン、スライダ、スイッチ、フットペダル１１４、それらの組み合わせ、又は外科用ロボットに入力するための任意の他の入力デバイス等の他のユーザ入力が提供され得る。ディスプレイ１１８は、モニタ、液晶ディスプレイ（liquid crystal display、ＬＣＤ）、プロジェクタ、プラズマディスプレイ、ＣＲＴ、プリンタ、又は視覚情報を出力するための他の現在既知である又は今後開発されるデバイスである。別の実施形態では、ディスプレイ１１８は、ヘッドマウントディスプレイである。ユーザ入力は、眼球の動き及び／又は瞬きを検出するための１つ又は２つ以上のセンサであり得る。更に他の実施形態では、ユーザ入力は、音声ベースの入力のためのマイクロフォンである。ディスプレイ１１８の代わりに、又はそれに加えて、音声情報を出力するためのスピーカが提供され得る。
【0089】
ベースセンサは、ＵＩＤ１１６の姿勢を感知する。例えば、磁気位置センサ又は電界センサが提供される。ベースセンサは、ディスプレイ１１８の近くに据え付けられるなど、ユーザコンソール１１０上又はその近くに位置決めされる。一実施形態では、任意選択的なカメラ８０６は、ベースセンサである。デジタルカメラは、ロボットマニピュレータ１２２を制御するためのＵＩＤ１１６の使用中の追跡など、ユーザの運動を光学的に追跡する。カメラ８０６は、いくつかの実施形態では、ステレオカメラ及び／又は深度カメラであり得る。
【0090】
コントローラ８０２は、ロボットマニピュレータ１２２及び／又は外科用器具２２０を駆動及び／又はモデル化するコントローラである。コントローラ８０２は、汎用プロセッサ、中央処理装置、制御プロセッサ、グラフィックプロセッサ、グラフィック処理装置、デジタル信号プロセッサ、特定用途向け集積回路、フィールドプログラマブルゲートアレイ、デジタル回路、アナログ回路、人工知能プロセッサ、これらの組み合わせ、又はロボットマニピュレータ１２２及び／若しくは内視鏡２２０の動きを制御するための別の現在既知である又は今後開発されるデバイスである。コントローラ８０２は、直列、並列、又は別々に動作する単一のデバイス又は複数のデバイスである。コントローラ８０２は、ラップトップ、サーバ、ワークステーション、若しくはデスクトップコンピュータなどのコンピュータのメインプロセッサであり得るか、又はより大きなシステム内のいくつかのタスクを処理するためのプロセッサであり得る。ハードウェア、ソフトウェア、ファームウェア、又はそれらの組み合わせに基づいて、コントローラ８０２は、命令を実装するか、又は動作を実施するように構成される。
【0091】
コントローラ８０２は、１つ又は２つ以上のユーザインターフェースデバイスの変位を内視鏡２２０のスケーリングされた変位に転換するように構成される。転換は、ユーザインターフェースデバイスの第１の自由度（ＤｏＦ）の回転を、内視鏡２２０のより少ない第２のＤｏＦの回転に低減し、例えば、３度の回転からの１度の回転に低減する際にヨー及びピッチを落とす。一実施形態では、転換は、１つ又は２つ以上のＵＩＤ１１６からのユーザ運動コマンドから内視鏡運動コマンドへの投影及び内視鏡運動コマンドからロボットマニピュレータ１２２のアーム関節運動コマンドへの投影を含む。低減は、ユーザ運動コマンドに対して実施される。別の実施形態では、ユーザ運動コマンドから内視鏡運動コマンドへの投影は、より少ない第２の回転度数が遠隔運動中心を中心とした３つの回転度数に転換された遠隔運動中心フレームへの変換を含む。
【0092】
メモリ８０４又は別のメモリは、プログラムされたコントローラ８０２によって実行可能な命令を表すデータを記憶する非一時的コンピュータ可読記憶媒体である。本明細書で考察されるプロセス、方法、及び／又は技法を実装するための命令は、キャッシュ、バッファ、ＲＡＭ、リムーバブルメディア、ハードドライブ、又は他のコンピュータ可読記憶媒体等のコンピュータ可読記憶媒体又はメモリ上に提供される。コンピュータ可読記憶媒体は、様々な種類の揮発性及び不揮発性記憶媒体を含む。図に例解された、又は本明細書に記載された機能、動作、又はタスクは、コンピュータ可読記憶媒体に記憶された１つ又は２つ以上の命令セットに応答して実行される。機能、動作又はタスクは、特定の種類の命令セット、記憶媒体、プロセッサ又は処理戦略とは無関係であり、ソフトウェア、ハードウェア、集積回路、ファームウェア、マイクロコードなどによってハードウェア、集積回路、ファームウェア、マイクロコードなどによって、単独で、又は組み合わせで実施され得る。同様に、処理戦略は、マルチプロセッシング、マルチタスキング、並列処理などを含み得る。
【0093】
一実施形態では、命令は、ローカル又はリモートシステムによって読み取るためにリムーバブルメディアデバイス上に記憶される。他の実施形態では、命令は、コンピュータネットワーク又は電話回線を介して転送するために遠隔の場所に記憶される。更に他の実施形態では、命令は、所与のコンピュータ、ＣＰＵ、ＧＰＵ、又はシステム内に記憶される。
【0094】
様々な実施形態を参照して本発明を記載してきたが、本発明の範囲から逸脱することなく多くの変更及び修正を行うことができることを理解されたい。したがって、前述の詳細な説明は、限定ではなく、例解とみなされることが意図され、本発明の精神及び範囲を定義することが意図されるのは、全ての均等物を含む以下の特許請求の範囲であることが理解されることが意図される。
【0095】
〔実施の態様〕
（１） 外科用ロボットシステムによる内視鏡の制御方法であって、
６自由度を有するハンドヘルドユーザ入力デバイスによる動きを検出することと、
前記ハンドヘルドユーザ入力デバイスによる前記動きを、前記外科用ロボットシステムのロボットマニピュレータに結合された前記内視鏡の動きにマッピングすることと、
前記内視鏡の前記動きを容易にするために、前記ロボットマニピュレータの１つ又は２つ以上の関節の動きを計算することと、
計算された前記動きに従って前記１つ又は２つ以上の関節を駆動することと、を含む、方法。
（２） 前記６自由度が、３つの空間次元に沿った並進及び前記３つの空間次元を中心とした回転に対応し、前記１つ又は２つ以上の関節が、前記ロボットマニピュレータの６未満の自由度を提供する４つ以下の関節を含み、前記ハンドヘルドユーザ入力デバイスの前記動きを前記内視鏡の前記動きにマッピングすることが、ヨー及びピッチなしでロール空間内のみに投影することを含む、実施態様１に記載の方法。
（３） 検出することが、２つのハンドヘルドユーザインターフェースオブジェクトの位置及び／又は配向の変化に基づいて前記動きを検出することを含み、前記動きが、前記２つのハンドヘルドユーザインターフェースオブジェクト間の中心におけるものである、実施態様１に記載の方法。
（４） 検出することが、前記ハンドヘルドユーザ入力デバイスが１つ又２つ以上の繋がれていないオブジェクトを含むベースセンサによって前記動きを検出することを含む、実施態様１に記載の方法。
（５） 前記ハンドヘルドユーザ入力デバイスによる前記動きを前記内視鏡の前記動きにマッピングすることが、直線並進を伝えることと、角運動を前記内視鏡のシャフト回転として投影することと、を含む、実施態様１に記載の方法。
（１） 外科用ロボットシステムによる内視鏡の制御方法であって、
６自由度を有するハンドヘルドユーザ入力デバイスによる動きを検出することと、
前記ハンドヘルドユーザ入力デバイスによる前記動きを、前記外科用ロボットシステムのロボットマニピュレータに結合された前記内視鏡の動きにマッピングすることと、
前記内視鏡の前記動きを容易にするために、前記ロボットマニピュレータの１つ又は２つ以上の関節の動きを計算することと、
計算された前記動きに従って前記１つ又は２つ以上の関節を駆動することと、を含む、方法。
（２） 前記６自由度が、３つの空間次元に沿った並進及び前記３つの空間次元を中心とした回転に対応し、前記１つ又は２つ以上の関節が、前記ロボットマニピュレータの６未満の自由度を提供する４つ以下の関節を含み、前記ハンドヘルドユーザ入力デバイスの前記動きを前記内視鏡の前記動きにマッピングすることが、ヨー及びピッチなしでロール空間内のみに投影することを含む、実施態様１に記載の方法。
（３） 検出することが、２つのハンドヘルドユーザインターフェースオブジェクトの位置及び／又は配向の変化に基づいて前記動きを検出することを含み、前記動きが、前記２つのハンドヘルドユーザインターフェースオブジェクト間の中心におけるものである、実施態様１に記載の方法。
（４） 検出することが、前記ハンドヘルドユーザ入力デバイスが１つ又２つ以上の繋がれていないオブジェクトを含むベースセンサによって前記動きを検出することを含む、実施態様１に記載の方法。
（５） 前記ハンドヘルドユーザ入力デバイスによる前記動きを前記内視鏡の前記動きにマッピングすることが、直線並進を伝えることと、角運動を前記内視鏡のシャフト回転として投影することと、を含む、実施態様１に記載の方法。
【0096】
（６） 前記ハンドヘルドユーザ入力デバイスによる前記動きを前記内視鏡の前記動きにマッピングすることが、前記内視鏡の観察者のゼロではない角度に基づいて、前記ロボットマニピュレータの遠隔運動中心から制御点までの軸を中心とした角運動をマッピングすることを含む、実施態様１に記載の方法。
（７） 前記ハンドヘルドユーザ入力デバイスによる前記動きを前記内視鏡の前記動きにマッピングすることが、前記ロボットマニピュレータの遠隔運動中心によって前記内視鏡の前記動きを拘束することを含む、実施態様１に記載の方法。
（８） 前記ハンドヘルドユーザ入力デバイスによる前記動きを前記内視鏡の前記動きにマッピングすることが、前記ハンドヘルドユーザ入力デバイスによる前記動きを前記ロボットマニピュレータの遠隔運動中心参照フレームに投影することを含む、実施態様７に記載の方法。
（９） 投影することが、前記ハンドヘルドユーザ入力デバイスの前記動きからヨー及びピッチを除去することと、前記内視鏡のヨー及びピッチを追加して前記遠隔運動中心を維持することと、を含む、実施態様８に記載の方法。
（１０） 前記内視鏡の前記動きの直線成分をスケーリングすることを更に含み、前記スケーリングの量が、前記ロボットマニピュレータの遠隔運動中心からの前記内視鏡の距離に基づく、実施態様１に記載の方法。
（７） 前記ハンドヘルドユーザ入力デバイスによる前記動きを前記内視鏡の前記動きにマッピングすることが、前記ロボットマニピュレータの遠隔運動中心によって前記内視鏡の前記動きを拘束することを含む、実施態様１に記載の方法。
（８） 前記ハンドヘルドユーザ入力デバイスによる前記動きを前記内視鏡の前記動きにマッピングすることが、前記ハンドヘルドユーザ入力デバイスによる前記動きを前記ロボットマニピュレータの遠隔運動中心参照フレームに投影することを含む、実施態様７に記載の方法。
（９） 投影することが、前記ハンドヘルドユーザ入力デバイスの前記動きからヨー及びピッチを除去することと、前記内視鏡のヨー及びピッチを追加して前記遠隔運動中心を維持することと、を含む、実施態様８に記載の方法。
（１０） 前記内視鏡の前記動きの直線成分をスケーリングすることを更に含み、前記スケーリングの量が、前記ロボットマニピュレータの遠隔運動中心からの前記内視鏡の距離に基づく、実施態様１に記載の方法。
【0097】
（１１） 前記１つ又は２つ以上の関節の前記動きを計算することが、逆運動学を実施することを含む、実施態様１に記載の方法。
（１２） 外科用ロボットシステムによる内視鏡の制御方法であって、
空間内の３つの軸を中心とした入力並進及び入力回転を感知することと、
前記３つの軸を中心とした前記入力回転を、ロボットアームに据え付けられた前記内視鏡の単一軸を中心とした回転に投影することと、
前記ロボットアームを制御して、感知された前記入力並進及び単一軸を中心とした保護された前記回転に基づいて前記内視鏡を移動させることと、を含む、方法。
（１３） 感知することが、ユーザの左手にある第１のハンドヘルドの物理的に接続されていないオブジェクトを感知することと、前記ユーザの右手にある第２のハンドヘルドの物理的に接続されていないオブジェクトを感知することと、を含み、前記３つの軸を中心とした前記入力並進及び入力回転が、前記第１のハンドヘルドの物理的に接続されていないオブジェクトと前記第２のハンドヘルドの物理的に接続されていないオブジェクトとの間の中心点での６自由度に対応する、実施態様１２に記載の方法。
（１４） 投影することが、前記感知から前記内視鏡に対する入力運動コマンドに投影することを含む、実施態様１２に記載の方法。
（１５） 前記内視鏡に対する前記入力運動コマンドから前記ロボットアームの遠隔運動中心フレームに投影することと、前記ロボットアームの前記遠隔運動中心フレームから前記ロボットアームに対する関節位置コマンドに投影することと、を更に含む、実施態様１４に記載の方法。
（１２） 外科用ロボットシステムによる内視鏡の制御方法であって、
空間内の３つの軸を中心とした入力並進及び入力回転を感知することと、
前記３つの軸を中心とした前記入力回転を、ロボットアームに据え付けられた前記内視鏡の単一軸を中心とした回転に投影することと、
前記ロボットアームを制御して、感知された前記入力並進及び単一軸を中心とした保護された前記回転に基づいて前記内視鏡を移動させることと、を含む、方法。
（１３） 感知することが、ユーザの左手にある第１のハンドヘルドの物理的に接続されていないオブジェクトを感知することと、前記ユーザの右手にある第２のハンドヘルドの物理的に接続されていないオブジェクトを感知することと、を含み、前記３つの軸を中心とした前記入力並進及び入力回転が、前記第１のハンドヘルドの物理的に接続されていないオブジェクトと前記第２のハンドヘルドの物理的に接続されていないオブジェクトとの間の中心点での６自由度に対応する、実施態様１２に記載の方法。
（１４） 投影することが、前記感知から前記内視鏡に対する入力運動コマンドに投影することを含む、実施態様１２に記載の方法。
（１５） 前記内視鏡に対する前記入力運動コマンドから前記ロボットアームの遠隔運動中心フレームに投影することと、前記ロボットアームの前記遠隔運動中心フレームから前記ロボットアームに対する関節位置コマンドに投影することと、を更に含む、実施態様１４に記載の方法。
【0098】
（１６） 前記内視鏡に対する前記入力運動コマンドから前記遠隔運動中心フレームに投影することが、前記内視鏡のアームフレームから前記遠隔運動中心フレームに変換することと、前記遠隔運動中心フレームから前記アームフレームに逆変換して前記遠隔運動中心フレームからの回転を追加することと、を含む、実施態様１４に記載の方法。
（１７） 外科用ロボットシステムであって、
ロボットマニピュレータと、
前記ロボットマニピュレータに結合された内視鏡と、
１つ又は２つ以上のユーザインターフェースデバイスと、
前記１つ又は２つ以上のユーザインターフェースデバイスの変位を前記内視鏡のスケーリングされた変位に転換するように構成されたコントローラであって、前記転換が、前記ユーザインターフェースデバイスの第１の自由度（ＤｏＦ）の回転を、前記内視鏡のより少ない第２のＤｏＦの回転に低減させる、コントローラと、を備える、システム。
（１８） 前記コントローラが、前記内視鏡の回転を３ＤｏＦから１ＤｏＦに低減するように構成され、前記転換が、前記１つ又は２つ以上のユーザインターフェースデバイスからの入力運動コマンドから内視鏡運動コマンドへの投影と、前記内視鏡運動コマンドから前記ロボットマニピュレータのアーム関節運動コマンドへの投影と、を含み、前記低減が、前記ユーザ運動コマンドに対して実施される、実施態様１７に記載の外科用ロボットシステム。
（１９） 前記内視鏡が、細長いシャフトと、前記細長いシャフトに沿った軸からゼロではない角度で離れた視野方向と、を含み、前記ユーザ運動コマンドから前記内視鏡運動コマンドへの前記投影が、前記より少ない第２のＤｏＦの前記回転が前記遠隔運動中心を中心とした３ＤｏＦの回転に転換された遠隔運動中心フレームへの変換を含む、実施態様１８に記載の外科用ロボットシステム。
（２０） 前記１つ又は２つ以上のユーザインターフェースデバイスが、２つのハンドヘルドオブジェクトを含み、前記ハンドヘルドオブジェクトの各々が、他のデバイスに及び相互に物理的に接続されていない、実施態様１７に記載の外科用ロボットシステム。
（１７） 外科用ロボットシステムであって、
ロボットマニピュレータと、
前記ロボットマニピュレータに結合された内視鏡と、
１つ又は２つ以上のユーザインターフェースデバイスと、
前記１つ又は２つ以上のユーザインターフェースデバイスの変位を前記内視鏡のスケーリングされた変位に転換するように構成されたコントローラであって、前記転換が、前記ユーザインターフェースデバイスの第１の自由度（ＤｏＦ）の回転を、前記内視鏡のより少ない第２のＤｏＦの回転に低減させる、コントローラと、を備える、システム。
（１８） 前記コントローラが、前記内視鏡の回転を３ＤｏＦから１ＤｏＦに低減するように構成され、前記転換が、前記１つ又は２つ以上のユーザインターフェースデバイスからの入力運動コマンドから内視鏡運動コマンドへの投影と、前記内視鏡運動コマンドから前記ロボットマニピュレータのアーム関節運動コマンドへの投影と、を含み、前記低減が、前記ユーザ運動コマンドに対して実施される、実施態様１７に記載の外科用ロボットシステム。
（１９） 前記内視鏡が、細長いシャフトと、前記細長いシャフトに沿った軸からゼロではない角度で離れた視野方向と、を含み、前記ユーザ運動コマンドから前記内視鏡運動コマンドへの前記投影が、前記より少ない第２のＤｏＦの前記回転が前記遠隔運動中心を中心とした３ＤｏＦの回転に転換された遠隔運動中心フレームへの変換を含む、実施態様１８に記載の外科用ロボットシステム。
（２０） 前記１つ又は２つ以上のユーザインターフェースデバイスが、２つのハンドヘルドオブジェクトを含み、前記ハンドヘルドオブジェクトの各々が、他のデバイスに及び相互に物理的に接続されていない、実施態様１７に記載の外科用ロボットシステム。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】