特許 6396447 リアルタイムでビームパターンを較正するための超音波画像への形状導入

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6396447

(24)【登録日】2018年9月7日

(45)【発行日】2018年9月26日

(54)【発明の名称】リアルタイムでビームパターンを較正するための超音波画像への形状導入

(51)【国際特許分類】

   A61B 8/14 20060101AFI20180913BHJP

【ＦＩ】

   A61B8/14

【請求項の数】20

【全頁数】15

(21)【出願番号】特願2016-522942(P2016-522942)

(86)(22)【出願日】2014年6月30日

(65)【公表番号】特表2016-523651(P2016-523651A)

(43)【公表日】2016年8月12日

(86)【国際出願番号】IB2014062714

(87)【国際公開番号】WO2014207728

(87)【国際公開日】20141231

【審査請求日】2017年6月29日

(31)【優先権主張番号】61/840,503

(32)【優先日】2013年6月28日

(33)【優先権主張国】US

(73)【特許権者】

【識別番号】590000248

【氏名又は名称】コーニンクレッカ フィリップス エヌ ヴェ

【氏名又は名称原語表記】ＫＯＮＩＮＫＬＩＪＫＥ ＰＨＩＬＩＰＳ Ｎ．Ｖ．

(74)【代理人】

【識別番号】110001690

【氏名又は名称】特許業務法人Ｍ＆Ｓパートナーズ

(72)【発明者】

【氏名】ジャイン アーミート クマー

(72)【発明者】

【氏名】ヴィニョン フランソワ ガイ ジェラルド マリエ

【審査官】 永田 浩司

(56)【参考文献】

【文献】 特開２０００−１２６１８５（ＪＰ，Ａ）

【文献】 米国特許第０６５１１４２８（ＵＳ，Ｂ１）

【文献】 特表２０１３−５２５０５７（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１３／００４１２５２（ＵＳ，Ａ１）

【文献】 特表平０６−５１１３９６（ＪＰ，Ａ）

【文献】 米国特許第０５１６１５３６（ＵＳ，Ａ）

【文献】 特開平０５−００７５８９（ＪＰ，Ａ）

【文献】 特開平０３−０１２１３７（ＪＰ，Ａ）

【文献】 国際公開第２００５／０５５８４９（ＷＯ，Ａ１）

【文献】 米国特許第０４２４９５３９（ＵＳ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ａ６１Ｂ ８／００ − ８／１５

(57)【特許請求の範囲】

【請求項1】

超音波信号をボリュームへ送信及び当該ボリュームから受信するプローブと、
前記プローブから送信された超音波信号に反応し、遅延後に、超音波信号を放射するマーカーデバイスであって、前記マーカーデバイスが放射する超音波信号は、レンダリングされる場合に、画像内のある位置に、所与のサイズのマーカーを生成する１つ以上の形状パルスを含む、前記マーカーデバイスと、
前記ボリューム内に配置され、前記マーカーデバイスを含む医療機器と、
メモリ内に記憶され、前記プローブが前記ボリュームから受信した超音波信号及び前記プローブが前記マーカーデバイスから受信した超音波信号を解釈して、前記医療機器の３次元場所を決定し、前記画像において、前記マーカーで、前記マーカーデバイスの前記３次元場所をハイライトする制御モジュールと、
を含む、画像内に形状を導入するシステム。

【請求項2】

前記マーカーデバイスは、トランスポンダを含み、前記トランスポンダは、受信モードから送信モードに変更するスイッチを含む、請求項１に記載のシステム。

【請求項3】

前記マーカーデバイスは、受信器及び送信器を有する送受信器を含む、請求項１に記載のシステム。

【請求項4】

前記プローブが前記マーカーデバイスから受信した超音波信号は、ｔ_０＋ｎＴ＋Ｓ_ｉにおいて導入され、ｔ_０は、前記マーカーデバイスが前記プローブから受信した超音波信号のインパルスの振幅が最大値になるタイミングであり、Ｔは、前記インパルスの周期であり、ｎは、整数であり、Ｓ_ｉは、前記１つ以上の形状パルスのタイミングを規定する時間差である、請求項１に記載のシステム。

【請求項5】

前記１つ以上の形状パルスから推定される前記マーカーの位置及び形状を、前記マーカーの位置及び形状のオンスクリーンビデオ出力と比較し、ビーム形成パラメータ及びスキャン変換パラメータを決定する画像処理モジュールを更に含む、請求項１に記載のシステム。

【請求項6】

前記マーカーは、経時的に、形状、サイズ及び視覚属性のうちの１つを変更する、請求項１に記載のシステム。

【請求項7】

前記マーカーは、前記マーカーデバイスの位置を示す、請求項１に記載のシステム。

【請求項8】

前記マーカーは、前記医療機器の位置を特定する基準となる位置を示す、請求項１に記載のシステム。

【請求項9】

超音波信号をボリュームへ送信及び当該ボリュームから受信するプローブと、
前記プローブから送信された超音波信号に反応し、遅延後に、超音波信号を放射するマーカーデバイスであって、前記マーカーデバイスが放射する超音波信号は、レンダリングされる場合に、画像内のある位置に、所与のサイズのマーカーを生成する１つ以上の形状パルスを含む、前記マーカーデバイスと、
前記ボリューム内に配置され、前記マーカーデバイスを含む医療機器と、
プロセッサ及びメモリを含むワークステーションと、
を含み、
前記メモリは、
前記プローブが前記ボリュームから受信した超音波信号及び前記プローブが前記マーカーデバイスから受信した超音波信号を解釈して、前記医療機器の３次元場所を決定し、前記画像において、前記マーカーで、前記マーカーデバイスの前記３次元場所をハイライトする制御モジュールと、
前記１つ以上の形状パルスから推定される前記マーカーの位置及び形状を、前記マーカーの位置及び形状のオンスクリーンビデオ出力と比較し、ビーム形成パラメータを決定する画像処理モジュールと、
を記憶する、画像内に形状を導入するシステム。

【請求項10】

前記マーカーデバイスは、トランスポンダを含み、前記トランスポンダは、受信モードから送信モードに変更するスイッチを含む、請求項９に記載のシステム。

【請求項11】

前記マーカーデバイスは、受信器及び送信器を有する送受信器を含む、請求項９に記載のシステム。

【請求項12】

前記プローブが前記マーカーデバイスから受信した超音波信号は、ｔ_０＋ｎＴ＋Ｓ_ｉにおいて導入され、ｔ_０は、前記マーカーデバイスが前記プローブから受信した超音波信号のインパルスの振幅が最大値になるタイミングであり、Ｔは、前記インパルスの周期であり、ｎは、整数であり、Ｓ_ｉは、前記１つ以上の形状パルスのタイミングを規定する時間差である、請求項９に記載のシステム。

【請求項13】

前記マーカーは、経時的に、形状、サイズ及び視覚属性のうちの１つを変更する、請求項９に記載のシステム。

【請求項14】

前記マーカーは、前記マーカーデバイスの位置を示す、請求項９に記載のシステム。

【請求項15】

前記マーカーは、前記医療機器の位置を特定する基準となる位置を示す、請求項９に記載のシステム。

【請求項16】

超音波信号を送受信する撮像プローブと、前記撮像プローブから送信された超音波信号に反応して超音波信号を放射するマーカーデバイスと、プロセッサと、を備えるシステムの作動方法であって、
前記プロセッサが、前記マーカーデバイスが前記撮像プローブから受信した超音波信号に基づいて、前記撮像プローブが送信する超音波信号のインパルスの周期を推定するステップと、
前記プロセッサが、到達時間を決定するために、機器に取り付けられた前記マーカーデバイスの位置にベストマッチする前記インパルスの振幅の最大値を見つけるように、検出窓内でトレースを解析するステップと、
前記プロセッサが、前記マーカーデバイスから前記撮像プローブへ、前記マーカーデバイスから戻るエコー内のマーカー形状をシミュレートするようにタイミングが合わされた１つ以上の形状パルスを含む遅延信号を放射することによって、前記撮像プローブへと音響的フィードバック信号を導入するステップと、
前記プロセッサが、前記機器の位置を特定するように、画像内に前記マーカー形状を表示するステップと、
を含む、方法。

【請求項17】

前記音響的フィードバック信号を導入する前記ステップは、前記プロセッサが、ｔ_０＋ｎＴ＋Ｓ_ｉにおいて、前記音響的フィードバック信号をフレーム内に導入するステップを含み、ｔ_０は、前記マーカーデバイスが前記プローブから受信した超音波信号の前記インパルスの振幅が最大値になるタイミングであり、Ｔは、前記インパルスの周期であり、ｎは、整数であり、Ｓ_ｉは、前記１つ以上の形状パルスのタイミングを規定する時間差である、請求項１６に記載の方法。

【請求項18】

前記マーカー形状を表示する前記ステップは、前記プロセッサが、前記マーカーの形状、サイズ及び経時的な視覚属性のうちの１つを変更するステップを含む、請求項１６に記載の方法。

【請求項19】

前記マーカー形状を表示する前記ステップは、前記プロセッサが、前記機器の位置を特定する基準を提供するために、前記マーカーの形状、サイズ及び位置を選択するステップを含む、請求項１６に記載の方法。

【請求項20】

前記プロセッサが、スキャナのビーム形成パラメータ及びスキャン変換パラメータを決定するために、前記１つ以上の形状パルスから推定される前記マーカーの位置及び形状を、前記マーカーの位置及び形状のオンスクリーンビデオ出力と比較するステップを更に含む、請求項１６に記載の方法。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、医療機器に関し、より具体的には、音響学を利用して、特殊形状で画像内の機器をハイライトするシステム及び方法に関する。

【背景技術】

【0002】

ニードル、カテーテル及び他の介入器具は、しばしば、超音波下では、それらのスペクトル性質及び望ましくない入射角によって、視覚化が困難である。超音波ガイダンス下で、ニードル先端をマーキングするための１つの解決策は、ニードルの先端に、小型超音波センサを埋め込むことである。当該センサは、超音波撮像プローブからの撮像ビームが視野をスイープする際に、当該センサに衝突する直接超音波信号を受信する。これらの信号を使用して、超音波画像内のトランスデューサの位置をハイライトする様々なやり方が提案されている。これらのやり方は、センサの範囲座標を推定するために、撮像プローブからセンサまでの超音波の飛行時間に依存し、また、横座標を回収するために、撮像ビームが視野をスイープする際に受信した信号の強度に依存する。飛行時間を推定するためには、スキャナのライントリガイベントへのアクセスがなくてはならず、また、横座標を推定するためには、フレームトリガイベントへのアクセスと撮像ビームの座標及びステアリング角へのアクセスとがなくてはならない。

【発明の概要】

【発明が解決しようとする課題】

【0003】

本原理によれば、画像において機器をハイライトするシステムは、超音波エネルギーをボリュームへ送信及び当該ボリュームから受信するプローブと、受信した超音波信号に反応し、遅延後に、超音波信号を放射するマーカーデバイスとを含む。超音波信号は、レンダリングされる場合に、画像内のある位置に、所与のサイズのマーカーを生成する１つ以上のパルスを含む。医療機器が、ボリューム内に配置され、マーカーデバイスを含む。制御モジュールが、メモリ内に記憶され、プローブから及びマーカーデバイスから受信した超音波エネルギーを解釈して、医療機器の３次元場所を決定し、画像において、マーカーで、マーカーデバイスの３次元場所をハイライトする。

【課題を解決するための手段】

【0004】

画像内に形状を導入する別のシステムは、超音波エネルギーをボリュームへ送信及び当該ボリュームから受信するプローブと、受信した超音波信号に反応し、遅延後に、超音波信号を放射するマーカーデバイスとを含む。超音波信号は、レンダリングされる場合に、画像内のある位置に、所与のサイズのマーカーを生成する１つ以上のパルスを含む。医療機器は、ボリューム内に配置され、マーカーデバイスを含む。ワークステーションは、プロセッサと、メモリとを含む。メモリは、プローブから及びマーカーデバイスから受信した超音波エネルギーを解釈して、医療機器の３次元場所を決定し、画像において、マーカーで、マーカーデバイスの３次元場所をハイライトする制御モジュールと、導入された信号の位置及び形状を、マーカーの位置及び形状のオンスクリーンビデオ出力と比較し、ビーム形成パラメータを決定する画像処理モジュールとを記憶する。

【0005】

画像内に、成形されたマーカーを提供する方法は、撮像プローブのフレームレートを推定するステップと、到達時間を決定するために、機器に取り付けられたマーカーデバイスの位置にベストマッチする時間的最大値を見つけるように、検出窓内でトレースを解析するステップと、マーカーデバイスから撮像プローブへ、マーカーデバイスから戻るエコー内のマーカー形状をシミュレートするように１つ以上のタイミングが合わされたパルスを含む遅延信号を放射することによって、撮像プローブへと音響的フィードバック信号を導入するステップと、機器の位置を特定するように、画像内にマーカー形状を表示するステップとを含む。

【0006】

本開示のこれらの及び他の目的、特徴及び利点は、添付図面と関連付けて読まれるべきである本開示の例示的な実施形態の以下の詳細な説明から明らかとなろう。

【図面の簡単な説明】

【0007】

本開示は、次の図面を参照して、好適な実施形態の以下の説明を詳細に提示する。

【0008】

【図1】図１は、一実施形態による超音波画像内に、成形され、音響学的にレンダリングされたマーカーを提供するシステムを示すブロック図／フロー図である。

【図2】図２は、一実施形態による成形され、音響学的にレンダリングされたマーカーを提供するシステムを示す概念図である。

【図3】図３は、他の実施形態による成形され、音響学的にレンダリングされたマーカーが示されている画像を示す図である。

【図4】図４は、一実施形態によるフレームレートを推定するための超音波パルスを示す振幅対時間のグラフを示す。

【図5】図５は、一実施形態による検出時間を決定するための超音波パルスを示す振幅対時間のグラフを示す。

【図6】図６は、一実施形態による機器／器具のマーカーデバイスとプローブとの間に生じるイベントを示すイベント時系列である。

【図7】図７は、１つの例示的な実施形態による超音波画像内に、成形され、音響学的にレンダリングされたマーカーを提供する方法を示すフロー図である。

【発明を実施するための形態】

【0009】

本原理によれば、システム及び方法は、特殊形状及び／又は効果を使用して、センサの位置をハイライトすることを可能にする。１つ以上のセンサが、医療デバイス（例えば介入デバイス）上に用いられて、音響信号が、正しい時間に、超音波（ＵＳ）画像内に「導入」される。この導入された音響信号は、スキャナによって、その自身の音響場に対する応答と認識される。信号は、スキャナのビーム形成パイプラインによって処理され、最終的に、ＵＳ画像上に視覚化される。なお、スキャナによって、いつ、音響波が放射されたのかは分からないが、音響波は、センサ上に信号を生成し、これは、センサをハイライトするために利用される。デバイスがＵＳ領域内に挿入されると、１回限りの較正手順が実行されて、使用されている撮像モードのフレームレート（Ｔ）が推定される。次に、センサによって受信された信号の時間的最大値（ｔ_０）が、任意の起源に対して見つけられる。次に、センサは、送信モードに切り替えられ、１つ以上の所望の形状を生成するために、インパルスが、時間ｔ_１＝ｔ_０＋ｎＴ＋Ｓ_ｉ（ｎは整数であり、Ｓ_ｉはパルス（時間）を提供する）において、センサから放射される。当該インパルスは、撮像プローブに向かって伝搬し、後続の信号が、スキャナマシンによってビーム形成される。最終的な視覚的な表示は、センサの場所から来る、１つ以上の所望の形状を有するエコーを示す。

【0010】

圧電センサが用いられて、特殊な時間的音響信号が、組織内に導入される。ＵＳスキャナは、この信号を、当該スキャナの「反射された」音響波の一部として認識するので、この信号をＵＳ画像内に入れる。なお、スキャナの元の音響波の伝送損失及び吸収損失によって、導入された信号は、組織から反射された信号に比べて優位である、例えば３０ｄＢよりも大きい信号を有する。特に、信号導入中に、特殊な時間パターンが提供される。これらのパターンは、ＵＳ画像内に、計画された特殊形状をもたらす。導入形状は、自動導入システムの所望通りに、画像内の任意の形状、サイズ及び位置の同心円、楕円、矢印、直線、曲線、×記号、３次元物体等を含む。なお、この形状は、ユーザがそれを常に見ることができるように、画像内に「永久的に」導入されても、又は、ユーザには実質的に不可視となるように、１つのＵＳフレーム内に瞬間的にのみ導入されてもよい。これらの形状又はマーカーは、器具の位置をマーキングするように提供されるか、又は、リアルタイムで他の有用な位置を示す若しくは追跡するようにオフセットであるように使用されてもよい。本実施形態は、２Ｄ画像（例えば左右ビーム及び２Ｄ形状）について説明するが、２Ｄアレイ、画像及び形状が拡大され、３Ｄアレイ、画像及び形状を含んでもよい。

【0011】

更に、大抵のＵＳスキャナは、ビデオ出力端子も提供するので、ビデオ出力端子信号が、導入信号と共に解析されて、内部ビーム形成及びスキャン変換パラメータが定量的に推定される。導入信号の概略位置及び形状は事前に分かっているので、自動化アルゴリズムが、ＵＳ画像から、形状の正確な位置及びサイズを選定できる（内部パラメータの機能）。これらの位置及び形状は、次に、推定された導入形状と比較される。この場合、最適化ルーチンが、内部ビーム形成及びスキャン変換パラメータを推定できる。現在のパラメータに基づいて、今度は、新しい形状が導入できる。この処理は、様々なサイズ／位置のアップデートされた形状を導入及び検出することによって、閉ループ形式で、連続的に行うことができる。例えば形状は、パラメータが分かるにつれて、楕円形で開始して、２つの同心円で終了する。自動的に推定できるパラメータは、ビーム角、絶対ビーム発射時間、左ビーム番号、右ビーム番号、深度等を含む。この完全な自己較正処理は、ユーザに示されても、又は、「不可視」にされていてもよい。

【0012】

本原理は、機器の位置を正確に示すために、特定のスキャナデータの入手可能性への依存を軽減することを可能にする。例えばスキャナからのフレーム、ライントリガ及びビーム形成パラメータは、もはや不要になる。これは、超音波が具備された器具が自己充足型（スキャナとの低レベルインターフェーシングを不要とする）になることを可能にし、したがって、これらの器具を、任意のベンダからの超音波マシンの広い設置基盤と共に使用することを可能にする。一実施形態では、システムは、例えばフレームレート及びライントリガ位置である撮像スキャナからの重要なパラメータのオンザフライのリバースエンジニアリング、及び、スキャナの受信信号経路へのアナログ音響信号導入等が可能である。

【0013】

当然ながら、本発明は、ニードルに関連して説明されるが、本発明の教示内容の範囲は、もっと広く、任意の医療機器又は音響エネルギーによって追跡される他の機器に適用可能である。幾つかの実施形態では、本原理は、複雑な生体系又は機械系を追跡又は解析するのにも採用される。具体的には、本原理は、生体系の内部追跡処置、肺、胃腸管、排せつ器官、血管等といった身体のあらゆる領域における処置に適用可能である。図示される要素は、ハードウェア及びソフトウェアの様々な組み合わせにおいて実現され、また、単一の要素又は複数の要素において組み合わされてもよい機能を提供する。本実施形態は、機器が、超音波ガイダンス下で、体内に挿入されるときにいつでも使用されてよい。当該挿入には、ニードル処置（生検、焼灼、麻酔、疼痛処理、膿瘍ドレナージ等）、カテーテル処置（心臓修復、電気生理学等）又は任意の他の処置が含まれる。

【0014】

図示される様々な要素の機能は、専用ハードウェアだけでなく、適切なソフトウェアに関連付けられるソフトウェアを実行可能なハードウェアも使用することによって提供される。プロセッサによって提供される場合、機能は、単一の専用プロセッサによって提供されても、単一の共有プロセッサによって提供されても、又は、そのうちの一部は共有される複数の個別のプロセッサによって提供されてもよい。また、「プロセッサ」又は「コントローラ」との用語の明示的な使用が、ソフトウェアを実行可能なハードウェアを排他的に指すと解釈されるべきではなく、デジタル信号プロセッサ（「ＤＳＰ」）ハードウェア、ソフトウェアを記憶するための読み出し専用メモリ（「ＲＯＭ」）、ランダムアクセスメモリ（「ＲＡＭ」）、不揮発性記憶装置等を、制限なく、黙示的に含む。

【0015】

さらに、本発明の原理、態様及び実施形態並びにそれらの特定の例について本明細書において述べられるあらゆる記述は、それらの構造上及び機能上の等価物の両方を包含することを意図している。更に、このような等価物は、現在知られている等価物だけでなく、将来に開発される等価物（即ち、構造に関係なく、同じ機能を行うように開発される任意の要素）の両方を含むことを意図している。したがって、例えば当業者であれば、本明細書に提示されるブロック図は、本発明の原理を具現化する例示的なシステムコンポーネント及び／又は回路の概念図を表すことは理解できるであろう。同様に、当然ながら、任意のフローチャート、フロー図等は、コンピュータ可読記憶媒体に実質的に表される様々な処理を表し、コンピュータ又はプロセッサが明示的に示されているかどうかに関わらず、当該コンピュータ又はプロセッサによってそのように実行される。

【0016】

また、本発明の実施形態は、コンピュータ又は任意の命令実行システムによって又はそれらに関連して使用されるプログラムコードを提供するコンピュータ使用可能又はコンピュータ可読記憶媒体からアクセス可能であるコンピュータプログラムプロダクトの形を取ることができる。本記載のために、コンピュータ使用可能又はコンピュータ可読記憶媒体は、命令実行システム、装置又はデバイスによって又はそれらに関連して使用されるプログラムを含む、記憶する、通信する、伝搬する又は輸送する任意の装置であってよい。媒体は、電子系、磁気系、光学系、電磁気系、赤外系又は半導体系（装置若しくはデバイス）、又は、伝搬媒体であってよい。コンピュータ可読媒体の例としては、半導体即ち固体メモリ、磁気テープ、リームバブルコンピュータディスク、ランダムアクセスメモリ（ＲＡＭ）、読み出し専用メモリ（ＲＯＭ）、剛性磁気ディスク及び光学ディスクが挙げられる。光学ディスクの最新例としては、コンパクトディスク‐読み出し専用メモリ（ＣＤ−ＲＯＭ）、コンパクトディスク‐読み出し／書き込み（ＣＤ−Ｒ／Ｗ）、ブルーレイ（登録商標）及びＤＶＤが挙げられる。

【0017】

次に、同じ参照符号は同じ又は同様の要素を指す図面を参照する。最初に図１を参照するに、一実施形態によるシステム１００が例示的に示される。システム１００は、ワークステーション又はコンソール１１２を含み、そこから、処置が監視及び／又は管理される。ワークステーション１１２は、好適には、１つ以上のプロセッサ１１４と、プログラム及びアプリケーションを記憶するメモリ１１６とを含む。メモリ１１６は、超音波スキャナ１２５からの信号を処理する画像処理モジュール１１５を格納する。画像処理モジュール１１５は、ＵＳ信号を使用して、構造変形、偏向、並びに、医療デバイス、機器若しくは器具１０２及び／又はその周辺領域に関連付けられる他の変化を再構成する。医療機器１０２は、ニードル、カテーテル、ガイドワイヤ、プローブ、内視鏡、ロボット、電極、フィルタデバイス、バルーンデバイス又は他の医療コンポーネント等を含む。

【0018】

音響センサ（送信器又はトランスポンダを含む）１０２が、ハイライトされるべき医療機器１０２に取り付けられる。ＵＳプローブ１２２といったプローブ１２２が、患者又は被検体１６０をスキャンするために提供される。プローブ１２２は、（プローブ１２２による信号放射を検知するように）受信可能である。プローブ１２２において受信される信号は、メモリ１１６内に記憶され、アルゴリズム／プログラム１２３におけるある量の信号処理（例えば高速フーリエ変換（ＦＦＴ）、最大値特定、任意選択の曲線適合等）が可能である単純なデータ解析及び制御モジュール１２４に結合される。当然ながら、データ解析及び制御モジュール１２４及び画像処理モジュール１２５は、単一のコンポーネントにおいて組み合わされても、又は、図示されるように、別個に提供されてもよい。

【0019】

特に有用な実施形態では、超音波センサ１２０は、（例えば）ニードルの先端に置かれる。センサ１２０は、超音波信号を、撮像プローブ１２２が視野をスイープする際に、当該撮像プローブ１２２からのビームとして検知する。ＵＳ信号は、ワークステーション１１２によって及び／又は制御モジュール１２４内で解析されて、フレーム繰り返し期間Ｔと、センサ１２０における最大信号の到達時間ｔ_０とが抽出される。１つ以上のフレームの後、センサ１２０は、送信モードに切り替えられ、形状効果Ｓｉを含むパルスを（例えばｔ_０＋Ｔ＋Ｓ_ｉ又はｔ_０＋ｎＴ＋Ｓ_ｉにおいて（ｎは整数である））放射する。スキャナ１２５は、当該パルスを、センサ１２０の位置から来る高いエコーと解釈し、したがって、僅かに面外のアライメント下でも、センサ１２０、ひいては、機器１０２を、画像１５０上でハイライトする。

【0020】

特に有用な実施形態では、超音波センサ又はマーカーデバイス１２０は、受信機能１３０と送信機能１３２とを含む。超音波センサ１２０は、１対の受信器及び送信器、トランスポンダ、又は、送信器／受信器（Ｔ／Ｒ）スイッチを有するトランスデューサを、ハイライトされるべき介入器具又は機器１０２上に含む。トランスポンダは、問い合わせ受信信号に応えて、識別信号を放射するデバイスである。撮像プローブ１２２が媒体内に超音波を放射する間に、センサ１２０の受信器機能１３０において受信される信号は、信号処理（ＦＦＴ、最大値特定、任意選択の曲線適合）が可能であるデータ解析及び制御モジュール１２４に結合され、ゆっくりと切り替わる。送信機能１３２は、（制御モジュール１２４内で処理されるようにプローブ１１２へと）媒体に戻すように音響信号を導入する。一例では、器具１０２内のセンサ１２０は、トランスポンダ（トランスポンダも送信モードで使用される）を含む。これは、高電圧回路（数十ボルト）を必要とし、また、撮像プローブ１２２の周波数とトランスポンダの周波数とをかなり適合させる必要がある（トランスポンダからの信号は、スキャナの受信信号経路内で除去される必要はない）。トランスポンダは更に、受信モードと送信モードとの間で切り替わるために、送信／受信（Ｔ／Ｒ）スイッチも含む。別の例では、送信機能１３２用の追加の超音波エミッタが、受信器機能１３０の近くのデバイス上に置かれてよい（又は、受信信号及び送信信号が共通の場所を有するように、送受信器として同一場所に置かれてもよい）。これは、Ｔ／Ｒスイッチを不要にし、検出／導入ソフトウェアを簡素化する。

【0021】

ディスプレイ１１８が、センサの場所を表示し、導入信号の形状又は視覚効果（Ｓ_ｉ）を含む。ディスプレイ１１８は更に、ユーザが、ワークステーション１１２並びにそのコンポーネント及び機能、又は、システム１００内の任意の他の要素とインタラクトすることも可能にする。これは、キーボード、マウス、ジョイスティック、触覚デバイスを含むインターフェース１４０、又は、ワークステーション１１２からのユーザフィードバック及びワークステーション１１２とのインタラクションを可能にする任意の他の周辺機器又は制御器によって更に容易にされる。

【0022】

別の実施形態では、スキャナ１２５と、センサ１２０を有する機器１０２とから出力されるビデオ信号が用いられて、任意の所与の時間における機器１０２の３Ｄ場所が計算される。ビデオ出力端子信号は、市販されているスキャナにおいて容易に利用可能であり、計算ワークステーション１１２へとストリーミングされる。

【0023】

センサ１２０が、送信モードに切り替えられ、そこからインパルスが放射される場合、インパルスは、撮像プローブ１２２に向かって伝搬し、後続の信号は、スキャナ１２５によってビーム形成される。最終的な表示は、センサの場所から到来するエコーを提供する。例えば１つ以上のフレームの後、センサ１２０が、送信モードに切り替えられると、一連のパルスが、時間（ｔ_０＋Ｔ＋Ｓ_ｉ）において放射される。Ｓ_ｉは、ＵＳ画像上で観察／マーキングされる形状を決定する。

【0024】

図２を参照するに、概念図が、１つの例示的な実施形態に従うコンポーネント間のインタラクションを示す。信号導入が、タイミングが合わされた又は反応ＵＳ放射で、センサ１２０を用いて行われる。センサ１２０は、ハイライトされるべきデバイス１０２の先端に置かれる。プローブ１２２からの１つの撮像フレームの間に、センサ／トランスポンダ１２０によって受信される例示的な信号１３６が示される。センサ１２０は、超音波信号１３６を、撮像プローブ１２２のスイープからのビームとして検知する。信号１３６は解析されて、フレーム繰り返し期間Ｔと、センサ１２０における最大信号の到達時間ｔ_０とが抽出される。１つ又は２つ（又はそれ以上）のフレーム（１３８）の後、センサ１２０は、送信モードに切り替えられ、（例えばｔ_０＋Ｔ＋Ｓ_ｉ又はｔ_０＋ｎＴ＋Ｓ_ｉにおいて）パルスを放射する。スキャナ１２５は、１つ以上の当該パルスを、センサ１２０の位置から来る高いエコーと解釈し、したがって、それを、画像１５０上でハイライトする。

【0025】

システム１００は、グラフ１４４及び１４６から、最大値の位置と、ライントリガ情報に対するそのタイミングとを特定する。１つ（又はそれ以上）のフレーム期間１３８の後、信号１４１が、センサ／トランスポンダ１２０によって、適切なタイミングに、プローブ１２２に戻るように導入され、これにより、センサ１２０の場所を示し、ディスプレイ１１８上で可視である１つ以上の明るいマーカー１４２、１４３、１４５、１４７が生成される。例示的なマーカー１４２、１４３、１４５、１４７は、一意の形状で示される。マーカー１４２は、センサ１２０の正確な位置の周りの同心円を含む。マーカー１４３は、センサ１２０の正確な位置に中心が合わされた星状の形状を含む。マーカー１４５は、センサ１２０の正確な位置を指し示す矢印の形状を含む。マーカー１４７は、センサ１２０の正確な位置を指し示す「Ｘ字」形状を含む。

【0026】

特に有用な実施形態では、Ｓ_ｉが、１つの発射又はパルス発射のみに固定され、０に設定される場合、画像上で見られるマーカーは、単なる点になる。他の例では、Ｓ_ｉが、−２ｔ_０、−１ｔ_０、０、１ｔ_０、２ｔ_０に設定される場合、応答は、水平軸に略平行である小さい線セグメントになる。扇形又は湾曲プローブ形状では、この線セグメントの曲率が、ビーム形成及びスキャン変換パラメータのオンザフライの特定を可能にする。なお、線形スキャナでは、周期時間スロットにおける発射の数を増やすことによって、長い水平線が形成される。Ｓ_ｉが、−ｋ（ｔ_０＋ｘ）に設定される場合（ｋは、−Ｋから＋Ｋまで行く）、線形プローブ上に傾斜した直線が形成され、その傾斜は、ｘに依存し、セグメントの長さは、Ｋに依存する。ｘを制御し、画像上の応答を観察することによって、ビーム形成及びスキャン変換パラメータが推定できる。同様に、Ｓ_ｉは、円、楕円、星等といった様々な形状を得るために、様々な関数に設定できる。

【0027】

なお、この形状又はマーカーは、ユーザがそれを常に見ることができるように、画像１５０内に「永久的」に導入されても、又は、ユーザには実質的に不可視となるように、１つのＵＳフレーム内にだけ瞬間的に導入されてもよい。更に、大抵のＵＳスキャナは、ビデオ出力端子１５２も提供するので、ビデオ出力端子信号は、画像プロセッサ又は処理モジュール１１５内で、導入信号と共に解析されて、内部ビーム形成及びスキャン変換パラメータが定量的に推定される。

【0028】

一実施形態では、画像処理モジュール１１５は、ＵＳ画像１５０から形状（例えばマーカー１４２、１４３、１４５、１４７）の正確な位置及びサイズを決定する自動化アルゴリズム又はプログラム１５４を使用して、事前に分かっている導入信号１４１の概略位置及び形状を、ビデオ出力端子画像１５２と比較する。これは、内部表示パラメータ又は画素割当て等に応じてであってもよい。位置及び形状は、推定される導入形状と比較される。次に、最適化ルーチン１５６が、内部ビーム形成及びスキャン変換パラメータを推定できる。この比較は、位置の照合として使用されても、他の機能のために使用されてもよい。例えば内部パラメータの現在の推定値に基づいて、今度は、新しい形状を同じ又は異なる位置に導入できる。なお、この処理は、様々なサイズ／位置のアップデートされた形状を導入及び検出することによって、閉ループ形式で、連続的に行うことができる。これは、点滅効果、交互のサイズ増加／減少、スピニング又は並進形状を与えるために用いることができる。

【0029】

一例では、形状（例えばマーカー１４２、１４３、１４５、１４７）は、パラメータが分かるにつれて、楕円形で開始して、２つの同心円で終了する。自動的に推定できるパラメータは、ビーム角、絶対ビーム発射時間、左ビーム番号、右ビーム番号、深度等を含む。この完全な自己較正処理は、ユーザに示されても、又は、「不可視」にされていてもよい。

【0030】

図３を参照するに、様々な線形形状がその中に生成されている４つの画像（１５０）が示される。１つの画像１７０は、傾斜した直線形状を示す。別の画像１７２は、水平線形状を示す。別の画像１７４は、短線セグメント形状を示し、別の形状１７６は、分割線形状を示す。直線は、単純であり、自動セグメンテーションのために正確であるので、較正形状として使用できる。様々な線が画像内に描かれ、選定される。一例として、「開始」ビームを特定するには、分割線（１７６）が非常に有用である。更に、システムは、１つの形状を「フラッシュ」して、何らかの解析を行い、次に、第２のフレームをフラッシュし、すべての必要なパラメータが特定されるまで、以下同様に繰り返される。幾つかのフレーム（例えば＜１秒）内で、すべてのパラメータが利用可能になるべきである。ビーム形成パラメータは動的であるが、リアルタイムには変化しないことを考えれば、このルーチンは、画像処理モジュール１１５を使用して、数秒毎にバックグランドにおいて実行され、パラメータが変化していないかが確認される。或いは、較正ルーチンは、スキャナ１２５から出力されるフレームが取り込まれたビデオ（frame-grabbed video）において著しい変化が観察される度に、トリガされてもよい。

【0031】

図４を参照するに、撮像プローブのフレームレートＴが推定されなければならない。これは、比較的長い時間Ｔ_ｅｓｔ（４０Ｈｚにおいて例えば１０個のフレームを記録するために、例えば１秒の４分の１）の間、受信信号を聞き、当該信号を、そのドミナント期間のために、（即ち、フーリエ解析によって）解析することによって行われる。図４に、受信したトレース２０２が示される。トレース２０２では、個々のインパルス２０４は、センサ（デバイス１０２上のセンサ１２０）に当たる様々なビームに対応する（振幅は、ビームがセンサ１２０に近づき、その後、センサ１２０から遠ざかるにつれて変動する）。その後、パターンは、数回、繰り返され、幾つかの同一のフレームが、連続シーケンスで収集される。時間Ｔ_ｅｓｔの間に、センサ（１２０）によって受信されるトレース２０２は、システムのフレームレートＴを推定するのに使用される。これが完了すると、受信器システムは、長さＴ_{ｄｅｔｅｃｔ}（理想的にはＴ＜Ｔ_{ｄｅｔｅｃｔ}＜２Ｔ）のトレースを解析する。

【0032】

図５を参照するに、これらのインパルス２０４のうちの、長さＴ_{ｄｅｔｅｃｔ}の１つのパルスが描かれる。なお、これらのインパルス２０４の収集は、フレームと同期されない。システムは、このトレースの時間的最大値ｔ_０を探す。当該最大値は、センサ１２０と最良にアラインされた送信イベントからのパルスが、センサ１２０に到達する瞬間に対応する。時間Ｔ_{ｄｅｔｅｃｔ}（例えばここではＴ_{ｄｅｔｅｃｔ}＝１．２Ｔ）の間に、センサ１２０によって受信されたトレースは、最も軸上の送信（the most on-axis transmit）が、センサ１２０に到達する時間ｔ_０を見つけるために使用される。ｔ_０は、単純に、インパルス又はトレース２０４の時間的最大値である。

【0033】

センサ１２０に最も近いビームと到達時間とを特定するための単純なピーク検出の代わりに、曲線又はトレース２０４（例えばＴ_ｅｓｔの間にセンサ１２０によって受信された信号）を、個々のパルスの極大値又は例えば多項式モデル若しくはガウス（Gaussian）モデルである単純な信号モデルにフィットさせることが有利である。

【0034】

次に、音響信号が、撮像プローブ１２２へと戻るように導入され、センサ位置から来るエコーが生成される。導入された音響信号は更に、点滅すること（「導入オフ」の期間と交互にされる「導入オン」の短い期間）が望ましい。人間の目は、点滅信号により敏感である。別の実施形態では、音響エコーのサイズ、形状又は視覚属性を上記されたように変更するために、当該音響エコーに視覚効果が与えられる。これらの視覚効果は、センサ１２０によって生成された又はセンサ１２０から戻るように送信された信号を介して導入される。ビデオストリームが捕捉され、信号収集及び導入セットアップと同期されると、差分画像が生成されて、導入信号がハイライトされる（「点滅オフ」の画像が、「点滅オン」の画像から差し引かれる）。差分画像は、エンハンスされて、スキャナ１２５からのビデオデータへのアクセスのみを必要とする完全なる画像処理チェーンにおいて、元の画像上に重ね合わされる。

【0035】

図６に関して、２つの実施形態が例示的に説明される。センサ１２０は、（Ｔ／Ｒスイッチを用いて送信モードに切り替え可能である）トランスポンダであるか、又は、近接している２つのトランスデューサが使用される。１つは、信号検出用の受信器であり、もう１つは、信号導入用の送信器である。いずれにも、図６に説明されるイベントシーケンスが適用される。

【0036】

図６を参照するに、トランスポンダ実施形態におけるフレームレート推定、ピークパルス検出及びパルス導入のためのイベントシーケンスが例示的に示される。なお、外部システムの時計は、ＵＳスキャナの時計から完全に独立している。比較的長い期間２２５（Ｔ_ｅｓｔ）（数十のフレームに優に及ぶほど十分に長い）を使用して、撮像システムのフレームレートが推定される。次に、ピーク検出期間２２１（受信モード、暗めのシェーディング）が、信号導入期間２３３（送信モード、明るめのシェーディング）と交互に生じる。時間ｔ_０において信号ピークが検出されると、ｔ_０＋２Ｔにおいて信号が導入される。これは、その検出の２フレーム後に、トランスポンダの位置において人工エコーを生成する。検出イベント２２４は、丸い端として描かれ、導入イベント２２６は、矢印である。

【0037】

検出後、時間ｔ_０＋ｎＴ＋Ｓ_ｉにおいて、インパルスが、トランスポンダ又は送信器から送信される。Ｓ_ｉは、ＵＳ画像上で観察／マーキングされる形状を決定し、ｎは、整数であり、好適にはｎ＝１（送信器実施形態）又は２（トランスポンダ実施形態）である。形状パルス２２８は、導入イベント２２６において、円として描かれている。これは、検出フレーム後のｎ個のフレームにおいて、センサ位置又は他の位置から来るように見える１つ以上の人工エコーを生成する効果を有する。トレース解析及びフィードバック信号の導入が繰り返されて、センサ１２０の位置が具体化される。フレームレート推定は、ユーザが撮像設定（撮像モード、設定及び深度はすべてフレームレートに影響を及ぼす）を変更した場合の可能なパラメータ変更を考慮するために、周期的に繰り返されてもよい。

【0038】

次に、一実施形態において、導入されたビデオにフレームが取り込まれ、自動セグメンテーションアルゴリズムが使用されて、ＵＳ画像内の形状の場所と形状とが決定される。これは、上記されたように、ビーム形成及びスキャン変換パラメータのリアルタイム推定値を提供する。なお、パラメータは、単一の画像を用いて推定された場合には、調節が必要となる場合もある。したがって、一実施形態は、導入形状の小さい（又は大きい）変化を使用して処理ステップを順に処理して、パラメータ推定の精度を最大にする。なお、これらの形状は、コンマ何秒の時間にフラッシュされて、パターンが、ユーザには実質的に不可視にされてもよい。較正後、パターンは、完全に停止されるか、又は、デバイスの全体／一部の形状のみをハイライトするパターンによって交換されるか、又は、較正を再チェックするために周期的なフラッシュによって置換されてもよい。較正は、バックグランドにおいて周期的に行われても、又は、ビデオ出力端子からのフレームが取り込まれた画像において著しい変化が確認される場合に行われてもよい。

【0039】

本原理によれば、本明細書において説明される実施形態は、機器が超音波ガイダンス下で体内に挿入される場合にいつでも使用されてよい。当該挿入には、ニードル処置（生検、焼灼、麻酔、疼痛処理、膿瘍ドレナージ等）、カテーテル処置（心臓修復、電気生理学等）又は任意の他の処置が含まれる。

【0040】

図７を参照するに、一実施形態による画像内に、成形されたマーカーを提供する方法が示される。ステップ４０２において、撮像プローブのフレームレートが推定される。ステップ４０４において、フレームレートを推定することは、ある期間の間、受信信号を聞くことと、受信信号を解析して、そのドミナント期間を決定することとを含む。

【0041】

ステップ４０６において、トレースが解析されて、到達時間を決定するために、機器に取り付けられたセンサ又はマーカーデバイスの位置にベストマッチする時間的最大値を見つけるように、トレースが検出窓内にあるかどうかが決定される。検出窓は、Ｔと２Ｔとの間の検出時間Ｔ_{ｄｅｔｅｃｔ}を含み、Ｔはフレームレートである。

【0042】

ステップ４０８において、マーカーデバイスから撮像プローブに遅延信号を放射することによって、音響フィードバック信号が撮像プローブに導入される。遅延信号は、マーカーデバイスから戻されるエコー内のマーカー形状をシミュレートするために、１つ以上のタイミングが合わされたパルスを含む。導入信号は、機器に取り付けられたセンサから戻されたエコーをシミュレートするように、撮像プローブに対して、機器上のトランスポンダ又は送受信器（送信器）によって生成される。ステップ４１０において、ｔ_０＋ｎＴ＋Ｓ_ｉにおいて、音響フィードバック信号がフレーム内に導入される。ここで、ｔ_０は、センサによって受信される信号の時間的最大値であり、Ｔは、フレームレートであり、ｎは、整数であり、Ｓｉは、形状パルスを含む。

【0043】

ステップ４１２において、マーカー形状が画像内に表示されて、機器の位置が特定される。ステップ４１４において、マーカー形状を表示することは、経時的に、マーカーの形状、サイズ及び視覚属性のうちの１つを変更することを含む。ステップ４１６において、マーカー形状を表示することは、基準を提供するために、マーカーの形状、サイズ及び位置を選択することを含む。基準は、（例えば追跡中に）使用中の機器の位置を示すために、他の機器をアラインするために、測定を行うために、臓器を表現するために又は任意の他の使用のために、使用される。

【0044】

ステップ４１８において、遅延信号の位置及び形状が、マーカーの位置及び形状のオンスクリーンビデオ出力と比較されて、スキャナのビーム形成パラメータが決定される。スキャナのビーム形成パラメータが決定されると、マーカー及び他の画像又はオーバーレイは、画像内に配置又はレンダリングされる。

【0045】

添付される請求項を解釈する際に、次の通りに理解されるべきである。
ａ）「含む」との用語は、所与の請求項に列挙される要素又は行為以外の要素又は行為の存在を排除しない。
ｂ）要素に先行する「ａ」又は「ａｎ」との用語は、当該要素が複数存在することを排除しない。
ｃ）請求項における任意の参照符号は、その範囲を限定しない。
ｄ）幾つかの「手段」は、同じアイテム、ハードウェア、又は、ソフトウェアによって実現される構造体若しくは機能によって表される。
ｅ）特に明記されない限り、行為の特定の順番を必要とすることを意図していない。

【0046】

（例示的であって限定を意図していない）介入機器の音響的ハイライトのための好適な実施形態が説明されたが、上記教示内容に鑑みて、当業者によって修正及び変更がなされうることに留意されたい。したがって、開示された開示内容の特定の実施形態に変更を行ってもよく、これらの変更は、添付される請求項によって概説される本明細書に開示される実施形態の範囲内であることは理解されるべきである。したがって、特許法によって義務付けられているように、詳細及び特殊性を説明することによって、特許証によって請求され、保護を望むものは、添付される請求項に記載される。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】