(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B1)
(11)【特許番号】
(24)【登録日】2024-03-08
(45)【発行日】2024-03-18
(54)【発明の名称】遠隔操作システム
(51)【国際特許分類】
A61B 34/35 20160101AFI20240311BHJP
【FI】
A61B34/35
(21)【出願番号】P 2023571756
(86)(22)【出願日】2022-04-28
(86)【国際出願番号】 JP2022019244
【審査請求日】2023-11-17
【早期審査対象出願】
(73)【特許権者】
【識別番号】515075692
【氏名又は名称】リバーフィールド株式会社
(74)【代理人】
【識別番号】100122183
【氏名又は名称】小澤 一郎
(72)【発明者】
【氏名】只野 耕太郎
【審査官】山口 賢一
(56)【参考文献】
【文献】特開2016-214715(JP,A)
【文献】特開2021-192130(JP,A)
【文献】国際公開第2018/159070(WO,A1)
【文献】特開2019-130602(JP,A)
【文献】米国特許出願公開第2021/0369366(US,A1)
(58)【調査した分野】(Int.Cl.,DB名)
A61B 34/35
(57)【特許請求の範囲】
【請求項1】
対象へ作用する
術具と、
前期術具を着脱可能に保持する本体と、
前期術具を遠隔で操作する操作装置と、
前記対象と前記
術具との接触時の音を検出するマイクロフォンと、
前記操作装置に設けられた、操作者に触覚を提示する触覚提示部と、
前記触覚提示部が提示する触覚に対応する動作を算出する演算部と、を備え、
前記演算部は、前記音に基づいて前記動作を算出
し、
前記マイクロフォンは、前記本体に設けられていることを特徴とする遠隔操作システム。
【請求項2】
前記触覚提示部は、前記マイクロフォンが検出した音に基づいて駆動するアクチュエータを有することを特徴とする請求項1に記載の遠隔操作システム。
【請求項3】
前記アクチュエータは、少なくとも200~400Hzの範囲で振動可能なボイスコイルモータであることを特徴とする請求項2に記載の遠隔操作システム。
【請求項4】
前記マイクロフォンは、少なくとも50Hz~1000Hzの範囲の音を集音できることを特徴とする請求項
1に記載の遠隔操作システム。
【請求項5】
前記術具は、シャフトを有する鉗子であり、
前記マイクロフォンは
、前記鉗子を伝わった音を検出すること特徴とする
請求項1乃至4のいずれか1項に記載の遠隔操作システム。
【請求項6】
不潔領域にある前記本体と清潔領域にある前記鉗子とを分離するセパレータを更に備え、
前記セパレータと前記鉗子との間に空気よりも音を伝搬しやすい伝搬部材が挟まれていることを特徴とする請求項
5に記載の遠隔操作システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、遠隔操作システムに関する。
【背景技術】
【0002】
現在の医療現場において、手術中の術者への負担を低減させることを目的とした手術ロボット(マニピュレータ)が普及してきている。例えば、術者が1つまたは複数のマスタ入力装置を制御することによって、対応する遠隔操作ツールの動きで患者に手術処置を施す低侵襲のコンピュータ支援遠隔操作手術システムが考案されている(特許文献1参照)。
【0003】
一方,これらの手術ロボットを使用する際に、術者は視覚情報のみを頼りとして手術を行う必要がある。そのため、本来得られる手先の感覚がないことによる影響を受ける可能性がある。例えば、鉗子と臓器が衝突したことに気づかずに患者の臓器を圧迫してしまう可能性がある。そこで、使用に際しては十分な訓練を経た上でそれを踏まえた手術を行う必要があり、その解決策として力覚や触覚を術者へ提示する機能の開発が求められてきた。
【0004】
例えば、特許文献2には、主操作装置の手動操作に倣った従操作装置の自動操作を制御し、従操作装置は空気圧駆動系による力制御を主とする操縦システムが開示されている。この操縦システムは、術者への力覚提示機能を有している。
【先行技術文献】
【特許文献】
【0005】
【文献】特開2022-48173号
【文献】国際公開第08/108289号
【発明の概要】
【発明が解決しようとする課題】
【0006】
しかしながら、前述の操縦システムが術者に提示する力覚は、対象から受ける比較的大きな反力が必要であり、対象との微小な衝突や接触は反映されにくい。そのため、対象表面の硬さや表面状態を力覚として捉えることは困難である。
【0007】
本発明はこうした状況に鑑みてなされたものであり、その例示的な目的の一つは、機器が触れる対象表面の状態を操作者に知覚させる新たな技術を提供することにある。
【課題を解決するための手段】
【0008】
上記課題を解決するために、本発明のある態様の遠隔操作システムは、対象へ作用する機器を遠隔で操作する操作装置と、対象と機器との接触時の音を検出するマイクロフォンと、操作装置に設けられた、操作者に触覚を提示する触覚提示部と、触覚提示部が提示する触覚に対応する動作を算出する演算部と、を備える。演算部は、音に基づいて動作を算出する。
【0009】
この態様によると、操作装置で操作する際に力覚では伝えきれない対象の情報を触覚として操作者に伝えることができる。ここで、触覚とは、例えば、対象に触れた際に対象表面の硬さや表面状態(凹凸等)の情報を伝えうる感覚である。また、対象とは、例えば、機器で把持したり切断したりする物体や、手術の際に術具を用いて処置する人体の一部である。
【0010】
触覚提示部は、マイクロフォンが検出した音に基づいて駆動するアクチュエータを有してもよい。これにより、操作装置による遠隔操作によって機器が対象に触れた際の感覚を振動として間接的に操作者に伝達できる。
【0011】
アクチュエータは、少なくとも200~400Hzの範囲で振動可能なボイスコイルモータであってもよい。これにより、振動の周波数に応じて対象の硬さを操作者に知覚させることができる。
【0012】
機器として手術に用いられる術具を更に備えてもよい。マイクロフォンは、対象と術具とが接触する位置の近傍に設けられていることを特徴としてもよい。これにより、対象と術具とが接触した際の音を精度良く検出できる。
【0013】
マイクロフォンは、少なくとも50Hz~1000Hzの範囲の音を集音できる。これにより、対象と機器との接触の際に発生しうる周波数の音を集音できる。
【0014】
術具は、シャフトを有する鉗子であってもよい。マイクロフォンは、鉗子を着脱可能に保持する本体に設けられており、鉗子を伝わった音を検出していてもよい。
【0015】
不潔領域にある本体と領域にある鉗子とを分離するセパレータを備えていてもよい。セパレータと鉗子との間に空気よりも音を伝搬しやすい伝搬部材が挟まれていてもよい。
【0016】
術具は、シャフトを有する鉗子であってもよい。マイクロフォンをシャフトに対して固定する接着剤を備えていてもよい。また、マイクロフォンは、集音部が露出しないように接着剤で被覆されていてもよい。これにより、環境音を含む外部音が集音部で集音されにくくなり、シャフト自体を伝わってきた固体伝搬音を優先的に集音できる。
【0017】
マイクロフォンとシャフトとの間にウレタンゴムが挟まれていてもよい。これにより、外部音を遮断しつつ固定伝搬音を精度良く集音できる。
【0018】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、などの間で変換したものもまた、本発明の態様として有効である。
【発明の効果】
【0019】
本発明によれば、機器が触れる対象表面の状態を操作者に感じさせることができる。
【図面の簡単な説明】
【0020】
【
図1】本実施の形態に係る遠隔操作システムの概略構成を示す図である。
【
図2】マイクロフォンと鉗子との接合部近傍を拡大した模式図である。
【
図3】本実施の形態に係る操作装置の概略構成を示す側面図である。
【
図4】本実施の形態に係る操作装置の概略構成を示す上面図である。
【
図5】本実施の形態に係る操作装置が備えるジンバル部の概略構成を説明するための側面図である。
【
図6】本実施の形態に係る操作装置が備えるジンバル部の概略構成を説明するための上面図である。
【
図7】変形例に係るスレーブ機の概略構成を示す側面図である。
【
図8】変形例に係るスレーブ機のE領域(
図7参照)の拡大断面図である。
【
図9】他の変形例に係るスレーブ機のE領域(
図7参照)の拡大断面図である。
【発明を実施するための形態】
【0021】
以下、本発明を実施の形態をもとに図面を参照しながら説明する。各図面に示される同一又は同等の構成要素、部材、処理には、同一の符号を付するものとし、適宜重複した説明は省略する。また、実施の形態は、発明を限定するものではなく例示であって、実施の形態に記述される全ての特徴やその組合せは、必ずしも発明の本質的なものであるとは限らない。
【0022】
本実施の形態に係る遠隔操作システムは、マスタスレーブ方式の手術支援ロボットにおけるマスタ側マニピュレータの操作に用いられる。手術支援ロボットとしては、例えば、内視鏡外科手術に用いられる鉗子の操作を行うものが挙げられる。なお、遠隔操作システムの用途は手術支援ロボットに限らない。例えば、物流工場や製造工場において用いられるロボットを遠隔操作する際のシステムとして用いてもよい。特に、繊細な作業を長時間行う必要のある工程をロボットを介して遠隔で実行する際の遠隔操作システムとして好適である。
【0023】
なお、遠隔とは、操作者と操作対象との距離が物理的に遠隔である場合だけでなく、操作者が操作するマスタ機と操作対象であるスレーブ機とが機構的に分離されている場合も含まれる。この場合、マスタ機とスレーブ機とが近くに配置されていても遠隔操作であることに違いはない。
【0024】
図1は、本実施の形態に係る遠隔操作システムの概略構成を示す図である。遠隔操作システム100は、対象Oへ作用する機器を遠隔で操作するマスタ機としての操作装置10と、操作装置10の操作に応じて機器である鉗子50の移動や駆動を行うための機構を備えるスレーブ機52と、対象Oと術具である鉗子50との接触時の音を検出するマイクロフォン54と、操作装置10に設けられた、操作者に触覚を提示する触覚提示部56と、触覚提示部56が提示する触覚に対応する動作を算出する演算部58と、を備える。
【0025】
演算部58は、マイクロフォン54で検出した音に基づいて前述の動作を算出する。マイクロフォン54は、対象Oと鉗子50とが接触する接触位置Qの近傍に設けられている。これにより、対象Oと鉗子50とが接触した際の音を精度良く検出できる。
【0026】
図2は、マイクロフォンと鉗子との接合部近傍を拡大した模式図である。
図1に示すように、対象Oと鉗子50とが接触(衝突)した際の音Sは、鉗子50の外部にある空気を伝搬する空気伝搬音Soと、鉗子50のシャフト50a自体を伝搬する固体伝搬音Siとを含む。
【0027】
本発明者は、環境音である空気伝搬音Soをなるべく除去し、衝突した対象Oの属性(硬さや表面状態)をより反映する固体伝搬音Siを選択的に集音できる好適な構成について鋭意検討した。
図2に示すように、本実施の形態に係るマイクロフォン54は、集音部であるセンサ部54aが空気伝搬音Soをなるべく拾わないように構成されており、鉗子50のシャフト50aの根本部分の外周に固定されている。
【0028】
センサ部54aが設けられている凹部は、空気伝搬音Soがセンサ部54aに直接到達しないように充填材料で充填されているとよい。本実施の形態では、充填材料として接着剤66を用いている。また、シャフト50a自体を伝搬してくる固体伝搬音Siをセンサ部54aに伝え易くするための伝搬部材68がマイクロフォン54とシャフト50aとの間に配置されている。伝搬部材68とマイクロフォン54とは接着剤66で接着されており、伝搬部材68とシャフト50aとは接着剤70で接着されている。
【0029】
本実施の形態に係るマイクロフォン54は、細径の鉗子への搭載が可能なMEMSマイクロフォン(インベンセンス社製ICS-40180)を使用している。MEMSマイクロフォン
の集音できる周波数帯は60Hz~20kHzであり、供給電圧は1.5~3.6Vである。接着剤66や接着剤70は、ホットメルト接着剤であり、厚みが0.5~1mm程度である。接着剤の他の材料としてエポキシ樹脂が挙げられる。伝搬部材68は、硬度A70のウレタンゴムであり、厚みが5±2mm程度である。なお、伝搬部材68は空気よりも音を伝搬しやすい材料であればよく、他の材料としてフッ素ゴムが挙げられる。また、接着剤とは、二つの部材同士を離れないようにできるものであれば材質や形態は特に限定されない。あるいは、接着剤の代わりにネジやバネを用いて二つの部材同士を押し付けて固定する方法であってもよい。
【0030】
また、マイクロフォン54は、鉗子先端部から十分離れたシャフト50aの根本部分に配置されている。この場所は、鉗子先端の操作部を動かすことによる内部ワイヤの駆動音の影響を受けにくい場所である。そのため、固体伝搬音Siを精度良く検出できる。
【0031】
遠隔操作システム100は、スレーブ機52が備えるマニピュレータ各部の回転動作や屈曲動作を制御するスレーブ側制御部60と、スレーブ側制御部60と連動するマスタ側制御部62と、を更に備える。マスタ側制御部62は、前述の演算部58における機能の他に、操作装置10の各部の動きの情報に基づいてスレーブ機52における動きを制御する。また、信号処理部64は、マイクロフォン54で検出した音の情報を後段の演算部58で利用できるように変換する。具体的には、信号処理部64は、バンドパスフィルタによるフィルタリングや不感帯によるノイズの減衰を行う。
【0032】
信号処理部64で処理された信号は、触覚に影響のある特定の波長が演算部58にて強調され触覚提示部56に供給される。触覚提示部56は、マイクロフォン54が検出した音Sに基づいて駆動するアクチュエータを有している。これにより、操作装置で操作する際に力覚では伝えきれない対象の情報を触覚として操作者に伝えることができる。ここで、触覚とは、例えば、対象Oに触れた際に対象表面の硬さや表面状態(凹凸等)の情報を伝えうる感覚である。また、対象Oとは、例えば、機器で把持したり切断したりする物体や、手術の際に術具を用いて処置する人体の一部である。
【0033】
本実施の形態に係るアクチュエータは、少なくとも200~400Hzの範囲で振動可能なボイスコイルモータである。周波数が200~400Hzの範囲の振動刺激は、対象Oの硬さを操作者に知覚させることに適している。これにより、操作装置10による遠隔操作によって鉗子50が対象Oに触れた際の感覚を振動として間接的に操作者に伝達できる。また、振動の周波数に応じて対象の硬さを操作者に知覚させることができる。なお、アクチュエータとして圧電素子を用いてもよい。
【0034】
本実施の形態に係るマイクロフォン54は、少なくとも50Hz~1000Hzの範囲の音を集音できる。これにより、対象Oと鉗子50との接触の際に発生しうる硬さと相関のある周波数の音を集音できる。なお、マイクロフォン54として好適な一例としてMEMSマイクが挙げられる。また、圧電振動センサや加速度センサを音の振動を検出する検出部として利用してもよい。また、マイクロフォンやセンサを複数組み合わせて検出部としてもよい。
【0035】
本実施の形態に係る操作装置10の機構は特に限定されないが、ハプティクスデバイスとして利用できる多自由度の関節を有するものが好ましい。同様に、スレーブ機52の機構は、鉗子50の位置や姿勢を変化させる多自由度のマニピュレータアームが好ましい。また、操作装置10やスレーブ機52の機構として、力覚の伝達が可能な空気圧駆動系を併用してもよい。
【0036】
図3は、本実施の形態に係る操作装置の概略構成を示す側面図である。
図4は、本実施の形態に係る操作装置の概略構成を示す上面図である。操作装置10は、遠隔操作の際に用いられるものであり、主に操作者の手のひらで把持されるグリップ部12と、主に操作者の指でつままれるピンチ部14と、を備える。グリップ部12は、操作者の手のひらが接触する領域に前述の触覚提示部56としてのアクチュエータ(振動発生源)が設けられている。ピンチ部14は、グリップ部12に対して回動(矢印R1方向)するとともに、グリップ部12に対してスライド(矢印S1方向)するように構成されている。なお、触覚提示部56をピンチ部14の一部に設けてもよい。
【0037】
これにより、操作装置10全体をパワーグリップ式として動かすだけでなく、手のひらでグリップ部12を把持しながらピンチ部14を回動したりスライドさせたりできる。そのため、パワーグリップ式とピンチグリップ式の両方の機能を兼ね備えることができ、操作者の操作の負担を低減するとともに、繊細な作業が可能となる。
【0038】
グリップ部12は、手のひらで直接保持される円筒状の第1の保持部12aと、第1の保持部12aに対して相対的に回転可能な回転部12bと、を有している。回転部12bは、第1の保持部12aは、中心に円柱状の穴が設けられており、その穴に円柱状の回転部12bが回転可能に収納されている。ピンチ部14は、指で直接保持される第2の保持部14aと、第2の保持部14aをグリップ部12に対して離間又は接近するようにガイドするガイド部14bと、を有している。
【0039】
これにより、グリップ部12の第1の保持部12aを手のひらで固定した状態で回転部12bが回転できる。また、第2の保持部14aを指でつまみながらグリップ部12に対して離間したり接近させたりできる。
【0040】
回転部12bは、第1の保持部12aの内部に設けられた回転軸である。ガイド部14bは、回転部12bである回転軸に結合し、固定されている。また、ガイド部14bは、回転軸の軸Aと交差する方向に延びている直線状のガイドレール14cを有している。これにより、第2の保持部14aをグリップ部12に対して所定の方向(矢印S1方向)に動かすことができる。なお、本実施の形態に係る操作装置10においては、軸Aとガイドレール14cの延伸方向とが成す角は90°として記載しているが、角度は90°でなくてもよく、90°±45°の範囲で設定されていてもよく、90°±30°の範囲で設定されていてもよく、90°±15°の範囲で設定されていてもよい。
【0041】
また、第2の保持部14aは、回転軸に対して基準点Pを中心に±5mm以上動くようにガイドレール14cにガイドされている。換言すると、第2の保持部14aは、ガイドレール14cに沿って少なくとも10mmの範囲で動くことができるように構成されている。
【0042】
図5は、本実施の形態に係る操作装置が備えるジンバル部の概略構成を説明するための側面図である。
図6は、本実施の形態に係る操作装置が備えるジンバル部の概略構成を説明するための上面図である。
【0043】
操作装置10の第2の保持部14aは、ジンバル部20により移動可能に支持されている。ジンバル部20は、互いに交差(直交)する3つの回転軸を中心として回動可能に構成されている。ジンバル部20は、X軸Ax、Y軸Ay、Z軸Azを中心として回動可能である。
【0044】
具体的には、第2の保持部14aのZ軸方向の端部がZ軸部22に連結されており、Z軸部22は、L字状の第1のアーム24に対して回転可能に保持されている。また、第1のアーム24は、Y軸部26を回転可能に保持しており、Y軸部26と連結している第2のアーム28に対して回転可能に設けられている。第2のアーム28は、L字状であり、Y軸部26を保持している端部と反対側の端部にX軸部30を回転可能に保持している。X軸部30は、3次元方向の移動を行うためのXYZステージやXYZリンク機構等の並進機構に連結されている。
【0045】
これにより、操作装置10の移動情報は、ジンバル部20や並進機構を介して、スレーブ機のマニピュレータの位置や姿勢の制御に利用できる。例えば、鉗子の操作が可能な手術支援ロボットがスレーブ機の場合、操作者はグリップ部12を把持しつつ操作装置10全体を所望の方向へ移動させたり、所望の向きへ回転させたりする。操作装置10の移動は、Z軸部22、Y軸部26及びX軸部30の回転角度の情報(移動情報)を取得するセンサ(図示せず)によって検知される。センサにより検知された移動情報は、手術支援ロボットに伝達される。手術支援ロボットは、伝達された移動情報に基づいて鉗子の位置を移動させる制御を行う。
【0046】
なお、第2の保持部14aは、ジンバル部20の3つの軸(X軸Ax、Y軸Ay、Z軸Az)が交差する点(
図5、
図6に示すC)を基準にグリップ部12に対してスライドするように構成されている。これにより、スレーブ機のマニピュレータの特定の位置の動きとグリップ部12のスライドを対応させることができる。
【0047】
図3乃至
図6に示す操作装置10を備える遠隔操作システム100は、以下の効果を奏する。
(1)衝突(感)、対象表面の状態を操作者に知覚させることができる。
(2)力覚の大きさがほぼ0の(誤差に埋もれる)ような接触やその変化でも操作者に知覚させることができる。
(3)触覚伝達機構だけでなく力覚伝達機構と組み合わせることで、操作対象の質感や硬さに対する操作者の知覚の精度を増すことができる。
(4)操作や視覚を邪魔せずシステムのイベント情報(アラームや操作誘導)を触覚として提示できる。
【0048】
(変形例)
上述の実施の形態では、シャフトに他の部材を介してマイクを取り付けた場合について説明したが、以下の変形例では、鉗子を着脱可能なスレーブ機の本体側にマイクを設けた構成について説明する。
【0049】
図7は、変形例に係るスレーブ機の概略構成を示す側面図である。スレーブ機72は、鉗子50と、鉗子50を着脱可能に保持する本体74とを備える。本体74と鉗子50との間には、不潔領域DAと清潔領域CAとを分離するセパレータ76が設けられている。また、セパレータ76から本体74側の不潔領域DAを囲むように減菌ドレープ78が設けられている。マイク80は、本体74の一部に設けられており、鉗子50やセパレータ76を介して伝搬してくる音を検出する。
【0050】
図8は、変形例に係るスレーブ機のE領域(
図7参照)の拡大断面図である。
図8では、接触時の音が固体伝搬音Siとして鉗子50を伝わってマイク80で検出される場合を示している。固体伝搬音Siは、シャフト50aや筐体50bの固体部分を伝搬しつつ、伝搬部材68及びセパレータ76を介してマイク80に到達する。これにより、不潔領域DAにあるマイク80であっても、鉗子50と対象Oとの接触音を検出できる。
【0051】
図9は、他の変形例に係るスレーブ機のE領域(
図7参照)の拡大断面図である。
図9では、接触時の音が空気伝搬音Soとして鉗子50を伝わってマイク80で検出される場合を示している。空気伝搬音Soは、シャフト50aや筐体50bの内部空間を伝搬しつつ、セパレータ76内部の貫通経路82を介してマイク80に到達する。これにより、不潔領域DAにあるマイク80であっても、鉗子50と対象Oとの接触音を検出できる。
【0052】
以上、本発明を上述の実施の形態を参照して説明したが、本発明は上述の実施の形態に限定されるものではなく、実施の形態の構成を適宜組み合わせたものや置換したものについても本発明に含まれるものである。また、当業者の知識に基づいて実施の形態における組合せや処理の順番を適宜組み替えることや各種の設計変更等の変形を実施の形態に対して加えることも可能であり、そのような変形が加えられた実施の形態も本発明の範囲に含まれうる。
【符号の説明】
【0053】
10 操作装置、 12 グリップ部、 14 ピンチ部、 50 鉗子、 52 スレーブ機、 54 マイクロフォン、 56 触覚提示部、 58 演算部、 60 スレーブ側制御部、 62 マスタ側制御部、 64 信号処理部、 66 接着剤、 68 伝搬部材、 70 接着剤、 100 遠隔操作システム。
【産業上の利用可能性】
【0054】
本発明は、製品の組立てや仕分、手術等の遠隔操作システムに利用できる。
【要約】
機器が触れる対象表面の状態を操作者に知覚させる新たな技術を提供するべく、遠隔操作システム(100)は、対象(O)へ作用する機器を遠隔で操作する操作装置(10)と、対象と機器との接触時の音を検出するマイクロフォン(54)と、操作装置(10)に設けられた、操作者に触覚を提示する触覚提示部(56)と、触覚提示部(56)が提示する触覚に対応する動作を算出する演算部(58)と、を備える、演算部(58)は、音に基づいて動作を算出するように構成した。