特開2017-121271(P2017-121271A)IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

▶ みずほ情報総研株式会社の特許一覧 ▶ 国立大学法人広島大学の特許一覧

特開2017-121271呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム
<>
  • 特開2017121271-呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム 図000003
  • 特開2017121271-呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム 図000004
  • 特開2017121271-呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム 図000005
  • 特開2017121271-呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム 図000006
  • 特開2017121271-呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム 図000007
  • 特開2017121271-呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム 図000008
  • 特開2017121271-呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム 図000009
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】特開2017-121271(P2017-121271A)
(43)【公開日】2017年7月13日
(54)【発明の名称】呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラム
(51)【国際特許分類】
   A61N 5/10 20060101AFI20170616BHJP
   A61B 6/03 20060101ALI20170616BHJP
【FI】
   A61N5/10 P
   A61B6/03 370B
   A61B6/03 377
【審査請求】有
【請求項の数】7
【出願形態】OL
【全頁数】19
(21)【出願番号】特願2016-136(P2016-136)
(22)【出願日】2016年1月4日
(71)【出願人】
【識別番号】592131906
【氏名又は名称】みずほ情報総研株式会社
(71)【出願人】
【識別番号】504136568
【氏名又は名称】国立大学法人広島大学
(74)【代理人】
【識別番号】100105957
【弁理士】
【氏名又は名称】恩田 誠
(74)【代理人】
【識別番号】100068755
【弁理士】
【氏名又は名称】恩田 博宣
(72)【発明者】
【氏名】西尾 禎治
(72)【発明者】
【氏名】齋藤 明登
(72)【発明者】
【氏名】永田 靖
(72)【発明者】
【氏名】橋本 大樹
(72)【発明者】
【氏名】水谷 麻紀子
(72)【発明者】
【氏名】永田 毅
(72)【発明者】
【氏名】前川 秀正
【テーマコード(参考)】
4C082
4C093
【Fターム(参考)】
4C082AA01
4C082AC02
4C082AC03
4C082AC04
4C082AC05
4C082AE01
4C082AG08
4C082AG51
4C082AJ08
4C082AJ13
4C082AP07
4C082AP08
4C093AA22
4C093FA47
(57)【要約】
【課題】ユーザの呼吸状況を的確に特定するための呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラムを提供する。
【解決手段】呼吸計測装置20は、各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部22と、3Dカメラ10に接続された制御部21とを備える。そして、制御部21が、3Dカメラ10から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、前記撮影画像に含まれる特徴領域を特定し、特徴領域の3次元座標を特定し、特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて3次元計測情報記憶部22に記録する。そして、3次元計測情報記憶部22に記録された時間情報と座標とに基づいて、呼吸性変動波形を特定する。
【選択図】図1
【特許請求の範囲】
【請求項1】
各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部と、3次元計測部に接続された制御部とを備えた呼吸計測システムであって、
前記制御部が、
前記3次元計測部から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、
前記撮影画像に含まれる特徴領域を特定し、
前記特徴領域の3次元座標を特定し、前記特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて前記3次元計測情報記憶部に記録し、
前記3次元計測情報記憶部に記録された時間情報と座標とに基づいて、呼吸性変動波形を特定することを特徴とする呼吸計測システム。
【請求項2】
前記3次元計測情報記憶部に記録された時間情報と座標値とに基づいて、第1領域波形及び第2領域波形を特定し、
前記第2領域波形の座標値から前記第1領域波形の座標値を差し引くことにより、ベースラインシフトを削除した呼吸性変動波形を特定することを特徴とする請求項1に記載の呼吸計測システム。
【請求項3】
前記特定した呼吸性変動波形に基づいて、治療指示を出力することを特徴とする請求項1又は2に記載の呼吸計測システム。
【請求項4】
呼吸性変動波形に対応する呼吸パターンと第2のバイタルサインとを関連付けて記録する呼吸情報記憶部を更に備え、
呼吸と異なる第2のバイタルサインを特定し、
前記呼吸情報記憶部において、前記第2のバイタルサインに関連付けられた呼吸パターンを特定し、前記呼吸パターンを用いて呼吸性変動波形を予測することを特徴とする請求項1〜3の何れか一項に記載の呼吸計測システム。
【請求項5】
前記撮影画像に含まれる深度情報の時系列変化に基づいて、非呼吸性挙動を特定し、
前記非呼吸性挙動の予兆挙動を特定することを特徴とする請求項1〜4の何れか一項に記載の呼吸計測システム。
【請求項6】
前記撮影画像において特徴領域を特定した場合、前記特徴領域の周囲点における3次元座標を特定し、
前記周囲点の3次元座標に基づいて、前記特徴領域の3次元座標を特定することを特徴とする請求項1〜5の何れか一項に記載の呼吸計測システム。
【請求項7】
各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部と、3次元計測部に接続された制御部とを備えた呼吸計測システムの動作方法であって、
前記制御部が、
前記3次元計測部から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、
前記撮影画像に含まれる特徴領域を特定し、
前記特徴領域の3次元座標を特定し、前記特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて前記3次元計測情報記憶部に記録し、
前記3次元計測情報記憶部に記録された時間情報と座標とに基づいて、呼吸性変動波形を特定することを特徴とする呼吸計測システムの動作方法。
【請求項8】
各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部と、3次元計測部に接続された制御部とを備えた呼吸計測システムを用いて、呼吸計測を実行するためのプログラムであって、
前記制御部を、
前記3次元計測部から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、
前記撮影画像に含まれる特徴領域を特定し、
前記特徴領域の3次元座標を特定し、前記特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて前記3次元計測情報記憶部に記録し、
前記3次元計測情報記憶部に記録された時間情報と座標とに基づいて、呼吸性変動波形を特定する手段として機能させることを特徴とする呼吸計測プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、ユーザの呼吸状況を特定するための呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラムに関する。
【背景技術】
【0002】
がん治療を目的として、X線、ガンマ線、陽子や重イオンの粒子線等の放射線を用いた治療装置が検討されている。この場合、放射線や粒子線治療では、がんなどの患部に高精度に照射することが大切である。このため、肺、肝臓、膵臓など主に呼吸の影響で動く臓器に対しては、呼吸信号をモニタし、特定の呼吸振幅や呼吸位相に合わせて放射線を照射する方式が採用されていた。しかし、体表の呼吸信号から生体内の治療対象部位の位置を推定していたので、治療対象部位の運動を正確に把握することができず、放射線を精度よく照射することができなかった。
【0003】
そこで、呼吸動作と呼吸位相とのズレを調整する技術も検討されている(例えば、特許文献1を参照。)。この文献に記載の技術においては、放射線コンピュータ断層撮影装置は、被検体に関する投影データを収集する架台を有する。呼吸計測部は、被検体の呼吸動作を計測して、呼吸波形を発生する。この呼吸波形の波高値に基づいて、投影データセット抽出部は画像再構成に要する角度範囲に対応する投影データセットを投影データから抽出する。
【0004】
また、臓器の動きに応じて、照射条件を動的に変更するとともに、線量分布を正確に評価し、治療計画に基づいた適切な治療を行なうための放射線治療システムも検討されている(例えば、特許文献2を参照。)。この文献に記載の技術においては、呼吸位相毎に撮像された複数の3次元画像と、複数の3次元画像のそれぞれに対して生成された治療計画データを保持する4次元治療計画装置を用いる。そして、治療対象部位の変位を計測し、計測した変位データと、複数の3次元画像とに基づいて、呼吸位相を算出する。更に、算出した呼吸位相と治療計画データに基づいて照射装置を制御するとともに、放射線の線量分布を評価する。この場合、呼吸位相毎に呼吸位相に対応する治療計画データに基づいて計算した線量分布を重ね合わせ、重ね合わせた線量分布に応じて放射線量を制御する。
【先行技術文献】
【特許文献】
【0005】
【特許文献1】特開2012−19892号公報
【特許文献2】特開2012−210232号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
特許文献1に記載された技術においては、呼吸センサとして、バンドと腹部の間に圧力センサを取り付け、圧力の変化により、呼吸の状態を観測する手法や、腹部上の光反射材を撮影し、光反射材の部分の動きにより、呼吸の状態を観測する手法が挙げられている。
また、特許文献2に記載された技術においては、1呼吸周期の間に、呼吸振幅もしくは呼吸位相ごとにトリガーをかけてCT撮像を行なって、呼吸振幅もしくは呼吸位相の異なる複数のCT画像を順次得るゲーティングありCT撮像を行なう。この場合、呼吸センサとしては体外設置型ストレイン(歪み)ゲージや、体表マーカ検出カメラ、レーザ変位計等、呼吸に伴う体表面の上下動運動を計測する。その他、サーミスタや換気量計など一般的な呼吸センサも挙げられている。
しかしながら、特許文献1、2に記載された技術においては、計測できる範囲が限られているため、的確な呼吸計測ができない場合がある。また、特許文献2に記載された技術においては、CT撮像により、臓器の動きを把握できるが、画像処理の計算負荷が大きく、CT撮像に伴う患者の負担も大きくなるという課題がある。
また、咳やくしゃみ等、予期しない非呼吸性挙動についても予測が困難であった。この場合には、放射線等による的確な治療の実施が困難となる。
【0007】
本発明は、上述の課題に鑑みてなされたものであり、この目的は、ユーザの呼吸状況を的確に特定するための呼吸計測システム、呼吸計測システムの動作方法及び呼吸計測プログラムを提供することにある。
【課題を解決するための手段】
【0008】
(1)上記課題を解決するための呼吸計測システムにおいては、各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部と、3次元計測部に接続された制御部とを備える。そして、前記制御部が、前記3次元計測部から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、前記撮影画像に含まれる特徴領域を特定し、前記特徴領域の3次元座標を特定し、前記特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて前記3次元計測情報記憶部に記録し、前記3次元計測情報記憶部に記録された時間情報と座標に基づいて、呼吸性変動波形を特定する。これにより、複数の特徴領域に基づいて、呼吸性変動を特定することができる。
【0009】
(2)上記呼吸計測システムにおいて、前記3次元計測情報記憶部に記録された時間情報と座標値に基づいて、第1領域波形及び第2領域波形を特定し、前記第2領域波形の座標値から前記第1領域波形の座標値を差し引くことにより、ベースラインシフトを削除した呼吸性変動波形を特定することが好ましい。ユーザの緊張状態等によって、波形の中心点が移動するベースラインシフトが生じることがある。このベースラインシフトを削除することにより、的確に呼吸性変動成分を抽出することができる。
【0010】
(3)上記呼吸計測システムにおいて、前記特定した呼吸性変動波形に基づいて、治療指示を出力することが好ましい。これにより、患部に対して、的確な治療を行なうことができる。
【0011】
(4)上記呼吸計測システムにおいて、呼吸性変動波形に対応する呼吸パターンと第2のバイタルサインとを関連付けて記録する呼吸情報記憶部を更に備え、呼吸と異なる第2のバイタルサインを特定し、前記呼吸情報記憶部において、前記第2のバイタルサインに関連付けられた呼吸パターンを特定し、前記呼吸パターンを用いて呼吸性変動波形を予測することが好ましい。これにより、呼吸状況を推定して、的確に呼吸性変動波形を特定することができる。
【0012】
(5)上記呼吸計測システムにおいて、前記撮影画像に含まれる深度情報の時系列変化に基づいて、非呼吸性挙動を特定し、前記非呼吸性挙動の予兆挙動を特定することが好ましい。これにより、呼吸性変動波形からの逸脱を予測することができる。
【0013】
(6)上記呼吸計測システムにおいて、前記撮影画像において特徴領域を特定した場合、前記特徴領域の周囲点における3次元座標を特定し、前記周囲点の3次元座標に基づいて、前記特徴領域の3次元座標を特定することが好ましい。これにより、統計的に的確な変動を特定することができる。
【発明の効果】
【0014】
本発明によれば、ユーザの呼吸状況を的確に特定することができる。
【図面の簡単な説明】
【0015】
図1】本実施形態のシステム概略図。
図2】本実施形態の処理手順の説明図。
図3】本実施形態の説明図であって、(a)はベースラインシフト対応処理の処理手順、(b)は胸部領域波形とベースライン、(c)は腹部領域波形とベースライン、(d)は腹部領域波形から胸部領域波形を差し引いた呼吸性変動波形とベースラインの説明図。
図4】本実施形態の処理手順の説明図。
図5】他の実施形態の処理手順の説明図。
図6】本実施形態の説明図であって、(a)は深度計測処理の処理手順、(b)は観測点の位置関係の説明図。
図7】他の実施形態の処理手順の説明図。
【発明を実施するための形態】
【0016】
以下、本発明を具体化した一実施形態を、図1図4に従って説明する。本実施形態では、リアルタイムで患者(ユーザ)の呼吸状況を特定する。そして、この呼吸状況に応じて、体内の患部に対して放射線を照射して治療を行なう場合を想定する。
【0017】
図1に示すように、放射線等を用いた治療を支援するために、呼吸計測システムは、3Dカメラ10、呼吸計測装置20、放射線治療装置30を用いる。
3Dカメラ10は、3次元計測部として機能し、近赤外線撮影部、深度センサ等を備え、被写体の位置や動きを認識することができる。そして、3Dカメラ10は、被写体の撮影画像を出力する。この撮影画像には、視野に含まれる各被写体について、深度センサによって計測した距離情報(深度情報)が含まれる。
【0018】
呼吸計測装置20は、患者の呼吸を計測するコンピュータシステムである。この呼吸計測装置20は、制御部21、3次元計測情報記憶部22を備えている。更に、この呼吸計測装置20は、医師が操作に用いるキーボードやポインティングデバイス等の入力部や、ディスプレイ等の出力部を備える。
【0019】
制御部21は、CPU、RAM、ROM等から構成された制御手段として機能し、後述する処理(3次元計測段階、マーカ特定段階、呼吸特定段階等を含む処理)を行なう。このための呼吸計測プログラムを実行することにより、制御部21は、3次元計測処理部211、マーカ特定部212、呼吸特定部213等として機能する。
【0020】
3次元計測処理部211は、3Dカメラ10から撮影画像を取得する処理を実行する。更に、3次元計測処理部211は、取得した撮影画像に基づいて、画像に含まれる各領域までの距離を算出する処理を実行する。
【0021】
マーカ特定部212は、撮影画像において、呼吸による体表面の動きを計測するためのマーカを特定する処理を実行する。本実施形態では、複数のマーカを用いる。そして、マーカ特定部212は、撮影画像においてマーカを特定するための情報を保持している。
【0022】
呼吸特定部213は、マーカの動きに基づいて、患者の呼吸を計測する処理を実行する。この呼吸特定部213は、計測した呼吸性変動波形に基づいて、次の計測時のマーカ位置を予測する。更に、呼吸特定部213は、予測したマーカ位置に基づいて新たに取得したマーカ位置の評価を行ない、この評価結果に応じた呼吸性変動に基づいて、呼吸同期信号を出力する。ここでは、呼吸性変動が維持されており、呼気状態や吸気状態に応じて、放射線の照射が可能な場合に、呼吸同期信号を出力する。そして、呼吸特定部213は、放射線治療装置30から治療終了信号を取得するまで、呼吸同期信号出力を継続する。
【0023】
3次元計測情報記憶部22には、治療対象の患者を3Dカメラ10で撮影した画像についての3次元計測データ220が記録される。この3次元計測データ220は、3Dカメラ10から撮影画像を取得した場合に記録される。3次元計測データ220は、マーカID、計測時刻、マーカ位置に関するデータを含んで構成される。
【0024】
マーカIDデータ領域には、各マーカを特定するための識別子に関するデータが記録される。
計測時刻データ領域には、このマーカを計測した時刻(計測開始からの経過時間)に関するデータが記録される。
マーカ位置データ領域には、このマーカの位置(3次元座標)に関するデータが記録される。
【0025】
放射線治療装置30は、放射線を患部に照射することにより、がん等の治療を行なう装置である。この放射線治療装置30には、放射線を発する照射装置(ガントリ)や、患者が仰臥や背臥するための治療台が設けられている。放射線治療装置30は、CT撮影装置等を用いて特定した患部に対する治療計画に基づいて、放射線を患部に照射する。この場合、患者の呼吸状況を特定し、この呼吸に合わせた体表面の動きに応じたタイミングで、間欠的に放射線を患部に照射する。この治療計画には、放射線照射を行なう放射線照射予定量に関する情報が含まれる。
【0026】
次に、上記のように構成された呼吸計測装置20を用いて、呼吸計測を行なう方法の処理手順について、図2図4を用いて説明する。ここでは、患者の体表面上の複数の計測点(例えば、胸部領域(第1領域)や腹部領域(第2領域)等の特徴領域)にマーカを貼り付ける。
【0027】
(呼吸計測処理)
次に、図2を用いて、呼吸計測処理を説明する。
ここでは、計測期間中、以下の処理を繰り返す。
【0028】
まず、呼吸計測装置20の制御部21は、画像取得処理を実行する(ステップS1−1)。具体的には、制御部21の3次元計測処理部211は、3Dカメラ10を用いて、放射線治療装置30の治療台上の患者の姿勢を撮影する。そして、制御部21の3次元計測処理部211は、3Dカメラ10から撮影データを取得する。この撮影データには、被写体(例えば、各ピクセル)までの深度情報を含めた撮影画像に関するデータを含める。次に、3次元計測処理部211は、取得した撮影画像を、深度情報を用いて、各領域の3次元座標を算出する。
【0029】
次に、呼吸計測装置20の制御部21は、マーカ検索処理を実行する(ステップS1−2)。具体的には、制御部21のマーカ特定部212は、撮影画像において、所定の特徴量を有するマーカを検索する。
【0030】
次に、呼吸計測装置20の制御部21は、マーカを含むかどうかについての判定処理を実行する(ステップS1−3)。具体的には、制御部21のマーカ特定部212は、所定の特徴量を有するマーカを特定できた場合には、撮影画像においてマーカを含むと判定する。
【0031】
マーカを含むと判定した場合(ステップS1−3において「YES」の場合)、呼吸計測装置20の制御部21は、以下の処理を、撮影画像において特定したマーカ毎に実行する。
【0032】
まず、呼吸計測装置20の制御部21は、マーカ位置の特定処理を実行する(ステップS1−4)。具体的には、制御部21のマーカ特定部212は、撮影画像に基づいて、このマーカの3次元座標を特定する。
【0033】
次に、呼吸計測装置20の制御部21は、過去のマーカとの対応付け処理を実行する(ステップS1−5)。具体的には、3次元計測情報記憶部22に3次元計測データ220が記録されておらず、初めてマーカを特定した場合には、制御部21のマーカ特定部212は、各マーカにマーカIDを付与する。一方、既に3次元計測情報記憶部22に3次元計測データ220が記録されている場合には、マーカ特定部212は、新たに特定した3次元座標から所定範囲内にあるマーカ位置が記録された3次元計測データ220(過去のマーカ)を特定する。次に、マーカ特定部212は、特定した3次元計測データ220からマーカIDを取得する。そして、マーカ特定部212は、付与又は特定したマーカID、計測時刻(現在時刻)、マーカ位置を含めた3次元計測データ220を生成し、3次元計測情報記憶部22に記録する。
以上の処理を撮影画像において特定したすべてのマーカについて繰り返す。
【0034】
次に、呼吸計測装置20の制御部21は、ベースラインシフト対応処理を実行する(ステップS1−6)。具体的には、制御部21の呼吸特定部213は、ベースラインシフトを除去した呼吸性変動波形を特定する。ベースラインシフト対応処理については後述する。
【0035】
一方、マーカを含まないと判定した場合(ステップS1−3において「NO」の場合)、呼吸計測装置20の制御部21は、マーカ位置の特定処理(ステップS1−4)〜ベースラインシフト対応処理(ステップS1−6)をスキップする。
以上の処理を計測期間中、繰り返す。
【0036】
(ベースラインシフト対応処理)
次に、図3(a)を用いて、ベースラインシフト対応処理を説明する。
まず、呼吸計測装置20の制御部21は、胸部領域波形の特定処理を実行する(ステップS2−1)。具体的には、制御部21の呼吸特定部213は、3次元計測情報記憶部22に記録された3次元計測データ220に基づいて、胸部領域のマーカの波形(波高の座標値)を特定する。
【0037】
次に、呼吸計測装置20の制御部21は、腹部領域波形の特定処理を実行する(ステップS2−2)。具体的には、制御部21の呼吸特定部213は、3次元計測情報記憶部22に記録された3次元計測データ220に基づいて、腹部領域波形のマーカの波形(波高の座標値)を特定する。
【0038】
次に、呼吸計測装置20の制御部21は、差分の算出処理を実行する(ステップS2−3)。具体的には、制御部21の呼吸特定部213は、腹部領域波形の座標値と胸部領域波形の座標値との差分を算出する。これにより、ベースラインシフトを削除した呼吸性変動波形(呼吸パターン)を算出する。
【0039】
図3(b)には、腹部領域波形(b1)と、この波形におけるベースライン(b2)を示している。横軸は時間を表わしている。また、縦軸は各領域の波高を、呼気時には波高値が高くなり、吸気時には波高値が低くなるようにして表わしている。このベースラインは、所定時間における平均により算出した。
【0040】
また、図3(c)には、胸部領域波形(c1)と、この波形におけるベースライン(c2)を示している。このベースラインも、所定時間における平均により算出した。
腹部領域波形(b1)と胸部領域波形(c1)とを比較すると、腹部領域波形の方が胸部領域波形よりも振幅が大きいことがわかる。ベースライン(b2)とベースライン(c2)とを比較すると、ほぼ同じ傾きとなっている。
【0041】
図3(d)は、腹部領域波形から胸部領域波形を差し引いた波形(d1)を示す。この場合、所定時間における平均により算出したベースライン(d2)の傾きは、小さくなることがわかる。
【0042】
(治療時処理)
次に、図4を用いて、治療時処理を説明する。ここでは、呼吸計測結果の出力処理に基いて、放射線を照射する治療処理を実行する。
【0043】
(呼吸計測の結果出力処理)
まず、治療開始前に、呼吸計測装置20に呼吸計測の開始入力を行なう。この場合、呼吸計測装置20の制御部21は、呼吸計測処理を実行する(ステップS3−1)。具体的には、制御部21は、上述した呼吸計測処理を実行することにより、呼吸性変動波形を特定する。
【0044】
次に、呼吸計測装置20の制御部21は、乱れがあるかどうかについての判定処理を実行する(ステップS3−2)。具体的には、制御部21の呼吸特定部213は、計測した呼吸性変動波形に基づいて、次の計測時のマーカ位置を予測する。次に、呼吸特定部213は、新たに取得したマーカ位置と予測したマーカ位置とを比較する。そして、新たに取得したマーカ位置と、予測したマーカ位置との誤差が許容値を超えている場合には、乱れがあると判定する。
【0045】
新たに取得したマーカ位置と、予測したマーカ位置との誤差が許容値内で、乱れがないと判定した場合(ステップS3−2において「NO」の場合)、呼吸計測装置20の制御部21は、呼吸同期信号の出力処理を実行する(ステップS3−3)。具体的には、制御部21の呼吸特定部213は、マーカ位置に応じて、放射線治療装置30に対して、治療指示として呼吸同期信号を出力する。
【0046】
次に、呼吸計測装置20の制御部21は、治療終了かどうかについての判定処理を実行する(ステップS3−4)。具体的には、制御部21の呼吸特定部213は、放射線治療装置30から治療終了信号を取得した場合には治療終了と判定する。
【0047】
治療終了と判定した場合(ステップS3−4において「YES」の場合)、呼吸計測装置20の制御部21は、呼吸計測結果出力処理を終了する。
放射線治療装置30から治療終了信号を取得しておらず、治療終了でないと判定した場合(ステップS3−4において「NO」の場合)、呼吸計測装置20の制御部21は、呼吸計測処理(ステップS3−1)に戻る。
【0048】
一方、乱れがあると判定した場合(ステップS3−2において「YES」の場合)、呼吸計測装置20の制御部21は、呼吸同期信号の出力中断処理を実行する(ステップS3−5)。具体的には、制御部21の呼吸特定部213は、呼吸同期信号の出力を中断する。そして、呼吸計測装置20の制御部21は、呼吸計測処理(ステップS3−1)に戻る。
【0049】
(治療処理)
ここでは、放射線治療装置30は、呼吸同期信号に基づいて照射処理を実行する(ステップS4−1)。具体的には、放射線治療装置30は、呼吸計測装置20から呼吸同期信号を取得する。そして、放射線治療装置30は、呼吸同期信号に応じて、治療計画に基づいて、放射線を患者に照射する。
【0050】
次に、放射線治療装置30は、照射量の算出処理を実行する(ステップS4−2)。具体的には、放射線治療装置30は、放射線照射時間に基づいて、照射量を算出する。そして、放射線治療装置30は、算出した照射量を、今回の治療における照射量の総量に加算して記憶する。
次に、呼吸計測装置20の制御部21は、治療終了かどうかについての判定処理を実行する(ステップS4−3)。具体的には、放射線治療装置30は、照射量の総量と、治療計画で設定された放射線照射予定量とを比較する。そして、呼吸同期信号に基づいて照射した照射量の総量が放射線照射予定量に達した場合には治療終了と判定する。
【0051】
治療終了と判定した場合(ステップS4−3において「YES」の場合)、放射線治療装置30は、呼吸計測装置20に対して治療終了信号を供給する。そして、放射線治療装置30は、治療処理を終了する。
照射量が放射線照射予定量に達しておらず、治療終了でないと判定した場合(ステップS4−3において「NO」の場合)、放射線治療装置30は、呼吸同期信号に基づいて照射処理(ステップS4−1)に戻る。
【0052】
本実施形態の呼吸計測システムによれば、以下のような効果を得ることができる。
(1)本実施形態では、呼吸計測装置20の制御部21は、画像取得処理(ステップS1−1)、マーカ検索処理(ステップS1−2)を実行する。マーカを含むと判定した場合(ステップS1−3において「YES」の場合)、呼吸計測装置20の制御部21は、マーカ毎に、マーカ位置の特定処理(ステップS1−4)、過去のマーカとの対応付け処理(ステップS1−5)を実行する。これにより、撮影画像において特定したマーカを用いて、呼吸性変動を検出することができる。
【0053】
(2)本実施形態では、呼吸計測装置20の制御部21は、ベースラインシフト対応処理を実行する(ステップS1−6)。患者の緊張状態等に伴う筋肉の硬直具合の変化により、腹部や胸部の呼吸性変動波形の中心点が移動するベースラインシフト現象が生じることがある。このベースラインシフトを排除して、的確な呼吸性変動波形を取得することができる。
【0054】
(3)本実施形態では、マーカ変動が呼吸性変動波形から所定範囲内に含まれており、乱れがないと判定した場合(ステップS3−2において「NO」の場合)、呼吸計測装置20の制御部21は、呼吸同期信号の出力処理を実行する(ステップS3−3)。この場合、放射線治療装置30は、呼吸同期信号に基づいて照射処理を実行する(ステップS4−1)。これにより、呼吸による変動に応じて、患部に対して、的確な治療を行なうことができる。
【0055】
一方、乱れがあると判定した場合(ステップS3−2において「YES」の場合)、呼吸計測装置20の制御部21は、呼吸同期信号の出力中断処理を実行する(ステップS3−5)。これにより、咳やくしゃみ等の非呼吸性挙動を検知した場合には、治療を中断し、その結果、的確な治療を行なうことができる。
【0056】
また、上記実施形態は、以下のように変更してもよい。
・上記実施形態では、呼吸計測装置20、放射線治療装置30を用いて、呼吸計測、治療を行なう。ハードウェア構成は、これに限定されるものではない。例えば、CT撮影装置に呼吸計測方法を適用することも可能である。
【0057】
・上記実施形態では、3次元計測装置として3Dカメラ10を用いたが、3Dスキャナ等を利用することも可能である。
・上記実施形態では、患者の体表面上の複数の計測点(例えば、胸部領域や腹部領域の特徴領域)にマーカを貼り付ける。ここで、体表面は、身体の外表面を特定できるものであればよく、身体に密着した着衣にマーカを貼付するようにしてもよい。
【0058】
・上記実施形態では、第1領域として胸部領域や第2領域として腹部領域を用いた。胴体において、呼吸性変動波形の振幅の大きさが異なる複数の領域であれば、胸部領域、腹部領域に限定されるものではない。また、計測する特徴領域の数も、少なくとも2か所の特徴領域があればよい。
【0059】
また、胸式呼吸、腹式呼吸に応じて、振幅が大きい変動から、振幅が小さい変動を差し引くようにしてもよい。この場合には、呼吸計測装置20の制御部21は、3次元計測情報記憶部22に記録された3次元計測データ220に基づいて特定した波形の振幅の統計値(例えば、平均値)を算出する。そして、呼吸特定部213は、振幅の統計値が小さい波形を、第1領域波形として特定する。また、振幅の統計値が大きい波形を、第2領域波形として特定する。そして、制御部21は、第2領域波形の波高(座標値)から第1領域波形の波高(座標値)を差し引くことにより、ベースラインシフトを排除した呼吸性変動波形を算出する。
【0060】
・上記実施形態では、リアルタイムで呼吸を計測する。バッチ処理により、呼吸を計測するようにしてもよい。この場合には、3Dカメラ10によって撮影した画像を呼吸計測装置20において時系列に蓄積する。そして、呼吸計測装置20の制御部21は、連続した撮影画像を用いて、マーカ検索処理(ステップS1−2)〜ベースラインシフト対応処理(ステップS1−6)を実行する。
【0061】
・上記実施形態では、呼吸計測装置20の制御部21は、乱れがあるかどうかについての判定処理を実行する(ステップS3−2)。ここでは、新たに取得したマーカ変動が、予測したマーカ位置の所定範囲外までずれている場合には、乱れがあると判定する。そして、乱れがあると判定した場合(ステップS3−2において「YES」の場合)、呼吸計測装置20の制御部21は、呼吸同期信号の出力中断処理を実行する(ステップS3−5)。ここで、呼吸以外の非呼吸性挙動(例えば、咳やくしゃみ等)を予測して、呼吸同期信号の出力中断処理(ステップS3−5)を実行するようにしてもよい。この場合には、非呼吸性挙動を予測する予兆を把握するための予兆管理処理を実行する。この予兆管理処理では、例えば、予め咳を行なった患者の撮影画像に基づいて、咳が出る前の挙動(予兆)を登録する。この非呼吸性挙動の予測のために、呼吸計測装置20の制御部21は、3Dカメラ10から取得した撮影画像における3次元情報を所定の時間、仮記憶するメモリを備える。
【0062】
図5を用いて、予兆管理処理を説明する。
(予兆管理処理)
ここでは、呼吸計測装置20の制御部21は、ステップS3−1と同様に、呼吸計測処理を実行する(ステップS5−1)。この場合、制御部21は、3Dカメラ10から取得した撮影画像をメモリに仮記憶する。
【0063】
次に、呼吸計測装置20の制御部21は、呼吸以外の挙動を含むかどうかについての判定処理を実行する(ステップS5−2)。具体的には、制御部21の呼吸特定部213は、呼吸性変動波形から外れた非呼吸性挙動を検知した場合に、呼吸以外の挙動があると判定する。
【0064】
呼吸以外の挙動を含むと判定した場合(ステップS5−2において「YES」の場合)、呼吸計測装置20の制御部21は、挙動前の画像の特定処理を実行する(ステップS5−3)。具体的には、制御部21の呼吸特定部213は、非呼吸性挙動を検知した時点から所定期間前の撮影画像をメモリから取得する。更に、呼吸特定部213は、非呼吸性挙動を検知していない時の撮影画像(通常呼吸時の挙動画像)を取得する。
【0065】
次に、呼吸計測装置20の制御部21は、挙動前の特徴的変動の検索処理を実行する(ステップS5−4)。具体的には、制御部21の呼吸特定部213は、非呼吸性挙動検知時の所定期間前の撮影画像と、通常呼吸時の撮影画像とを比較する。
【0066】
次に、呼吸計測装置20の制御部21は、予兆変動があるかどうかについての判定処理を実行する(ステップS5−5)。具体的には、制御部21の呼吸特定部213は、非呼吸性挙動検知時の所定期間前の撮影画像と、通常呼吸時の撮影画像とに特徴的な差異がある場合には、予兆変動があると判定する。
【0067】
予兆変動があると判定した場合(ステップS5−5において「YES」の場合)、呼吸計測装置20の制御部21は、予兆変動の登録処理を実行する(ステップS5−6)。具体的には、制御部21の呼吸特定部213は、特徴的な変動を予兆変動としてメモリに記録する。
【0068】
一方、予兆変動がないと判定した場合(ステップS5−5において「NO」の場合)、呼吸計測装置20の制御部21は、予兆変動の登録処理(ステップS5−6)をスキップする。
【0069】
そして、呼吸計測装置20の制御部21は、観測終了かどうかについての判定処理を実行する(ステップS5−7)。具体的には、制御部21の呼吸特定部213は、予兆管理処理を開始してから、所定時間が経過した場合、観測終了と判定する。
【0070】
観測終了でないと判定した場合(ステップS5−7において「NO」の場合)、呼吸計測装置20の制御部21は、呼吸計測処理(ステップS5−1)に戻る。
一方、観測終了と判定した場合(ステップS5−7において「YES」の場合)、呼吸計測装置20の制御部21は、予兆管理処理を終了する。
これにより、複数位置のマーカにより、非呼吸性変動を特定し、乱れがあるかどうかについての判定処理に用いることができる。
【0071】
また、蓄積した撮影画像や3次元情報に基づいて機械学習を行なうことにより、非呼吸性変動の予兆を特定するようにしてもよい。この場合には、非呼吸性変動が生じる前の撮影画像や、この撮影画像に基づいて特定した3次元情報を入力層として、非呼吸性変動を出力層として機械学習を行なう。そして、治療時には、撮影画像に対して、機械学習結果を適用し、乱れがあるかどうかについての判定処理を実行する(ステップS3−2)。これにより、機械学習を用いて、非呼吸性変動を予測することができる。
【0072】
・上記実施形態では、マーカの座標に基づいて呼吸性変動を特定する。ここで、マーカの周囲の情報を用いて、マーカの位置の精度を高めることも可能である。この場合には、深度計測処理を実行する。
【0073】
図6(a)を用いて、深度計測処理を説明する。
(深度計測処理)
ここでは、呼吸計測装置20の制御部21は、マーカの特定処理を実行する(ステップS6−1)。
【0074】
次に、呼吸計測装置20の制御部21は、マーカの深度情報の取得処理を実行する(ステップS6−2)。具体的には、制御部21のマーカ特定部212は、撮影画像において、特定したマーカにおける深度を特定する。
【0075】
次に、呼吸計測装置20の制御部21は、マーカを中心とする所定範囲の深度情報の取得処理を実行する(ステップS6−3)。具体的には、制御部21のマーカ特定部212は、特定したマーカについて、3次元計測データ220において、予め定められた範囲で周囲を特定し、この周囲上で複数の周囲点を特定する。そして、マーカ特定部212は、特定した複数の周囲点の深度情報を取得する。
【0076】
次に、呼吸計測装置20の制御部21は、深度情報の統計処理を実行する(ステップS6−4)。具体的には、制御部21のマーカ特定部212は、複数の周囲点の深度について、統計値(例えば、最頻値)を特定する。
【0077】
次に、呼吸計測装置20の制御部21は、マーカの位置の特定処理を実行する(ステップS6−5)。具体的には、制御部21のマーカ特定部212は、特定した統計値を用いて、マーカの座標を特定する。
図6(b)では、マーカの周囲において6点の座標を特定し、これらの座標を用いて、マーカの位置を特定する場合を示す。これにより、マーカ位置の深度情報だけでなく、周囲点の深度情報を用いてマーカ位置の深度情報を補間し、的確なマーカ位置を特定することができる。
【0078】
・上記実施形態では、呼吸計測装置20の制御部21は、ベースラインシフト対応処理を実行する(ステップS1−6)。この場合、呼吸計測装置20の制御部21は、ベースラインシフトを除去した呼吸性変動波形を特定する。ところで、呼吸は、患者の緊張状態等によって変わり、ベースラインが変化することがある。そこで、呼吸以外の第2のバイタルサイン(例えば、血圧・脈拍数・体温やストレス評価値等)を利用するようにしてもよい。この場合には、患者に対して、第2のバイタルサインを計測するセンサを設ける。このセンサとしては、血圧計、脈拍数の計測器、ストレスセンサや脳波計測センサ等を用いることができる。また、3Dカメラ10を用いて撮影した画像に基づいて判定するようにしてもよい。この場合には、例えば顔の表情等を撮影した画像を用いて判定する。そして、制御部21に、情報取得部を設け、センサから、第2のバイタルサインを取得する。
この場合には、呼吸計測装置20に呼吸情報記憶部を設ける。この呼吸情報記憶部には、患者毎の呼吸状況に関する呼吸パターン(過去の呼吸性変動波形の典型例)が記録される。この呼吸パターンは、患者識別子(各患者を特定するための情報)、第2のバイタルサインに関連付けられて記録される。
【0079】
図7を用いて、この場合の呼吸計測処理を説明する。
(呼吸計測処理)
ここでは、呼吸計測装置20の制御部21は、センサ計測情報の取得処理を実行する(ステップS7−1)。具体的には、制御部21の情報取得部が、センサからセンサ計測情報を取得する。
【0080】
次に、呼吸計測装置20の制御部21は、第2のバイタルサインに関連付けた呼吸計測情報の記録処理を実行する(ステップS7−2)。具体的には、制御部21の情報取得部は、取得したセンサ計測情報に基づいて、第2のバイタルサインを特定する。そして、呼吸特定部213は、患者識別子、第2のバイタルサインに関連付けて、呼吸性変動波形(呼吸パターン)を呼吸情報記憶部に記録する。
【0081】
(治療時処理)
次に、呼吸計測装置20の制御部21は、センサ計測情報の取得処理を実行する(ステップS7−3)。具体的には、制御部21の呼吸特定部213は、センサからセンサ計測情報を取得する。
【0082】
次に、呼吸計測装置20の制御部21は、センサ計測情報に応じて呼吸挙動の予測処理を実行する(ステップS7−4)。具体的には、制御部21の呼吸特定部213は、取得したセンサ計測情報に基づいて、第2のバイタルサインを特定する。そして、呼吸特定部213は、この患者の患者識別子、第2のバイタルサインに関連付けられた呼吸パターンを呼吸情報記憶部から取得する。そして、この呼吸パターンを用いて、呼吸性変動波形を予測する。
【0083】
・上記実施形態では、呼吸計測装置20の制御部21は、胸部領域波形の特定処理(ステップS2−1)、腹部領域波形の特定処理(ステップS2−2)を実行する。ここでは、マーカ配置に基づいて、胸部領域波形、腹部領域波形を特定する。各領域の特定方法は、マーカ配置による特定に限定されるものではない。例えば、胸部領域に貼付するマーカや、腹部領域に貼付するマーカを識別できる形状や色彩等を設定してもよい。これにより、形状や色彩等を用いて、各波形を特定することができる。
【0084】
・上記実施形態では、呼吸計測装置20の制御部21は、マーカ位置の特定処理(ステップS1−4)、過去のマーカとの対応付け処理(ステップS1−5)を実行する。ここでは、マーカの3次元座標を用いる。過去のマーカとの対応付け方法は、3次元座標を用いる場合に限定されるものではない。例えば、2次元の撮像画像に基づいて、2次元座標が近いマーカと対応付けるようにしてもよい。
【符号の説明】
【0085】
10…3Dカメラ、20…呼吸計測装置、30…放射線治療装置、21…制御部、22…3次元計測情報記憶部、211…3次元計測処理部、212…マーカ特定部、213…呼吸特定部。
図1
図2
図3
図4
図5
図6
図7
【手続補正書】
【提出日】2016年12月12日
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部と、3次元計測部に接続された制御部とを備えた呼吸計測システムであって、
前記制御部が、
前記3次元計測部から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、
前記撮影画像に含まれる複数の特徴領域を特定し、
前記特徴領域の3次元座標を特定し、前記特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて前記3次元計測情報記憶部に記録し、
前記ユーザの呼吸性変動波形の振幅の大きさが異なる第1領域と第2領域とにおいて、前記3次元計測情報記憶部に記録された時間情報と座標値とに基づいて、振幅が大きい座標値から、振幅が小さい座標値を差し引いた値により呼吸性変動波形を算出することを特徴とする呼吸計測システム。
【請求項2】
前記特定した呼吸性変動波形に基づいて、治療指示を出力することを特徴とする請求項に記載の呼吸計測システム。
【請求項3】
患者識別子に対して、呼吸性変動波形に対応する呼吸パターンと第2のバイタルサインとを関連付けて記録する呼吸情報記憶部を更に備え、
治療時に、患者の呼吸と異なる第2のバイタルサインを特定し、
前記呼吸情報記憶部において、この患者の患者識別子に関連付けられた前記第2のバイタルサインに関連付けられた呼吸パターンを特定し、前記呼吸パターンを用いて、前記治療時に用いる呼吸性変動波形を予測することを特徴とする請求項1又は2に記載の呼吸計測システム。
【請求項4】
前記撮影画像に含まれる深度情報の時系列変化に基づいて、非呼吸性挙動を特定し、
前記非呼吸性挙動の予兆挙動を特定することを特徴とする請求項1〜の何れか一項に
記載の呼吸計測システム。
【請求項5】
前記撮影画像において特徴領域を特定した場合、前記特徴領域に対して予め定められた範囲の周囲点における深度に関する情報を特定し、
前記周囲点の深度の統計値に基づいて、前記特徴領域の深度予測することを特徴とする請求項1〜の何れか一項に記載の呼吸計測システム。
【請求項6】
各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部と、3次元計測部に接続された制御部とを備えた呼吸計測システムの動作方法であって、
前記制御部が、
前記3次元計測部から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、
前記撮影画像に含まれる複数の特徴領域を特定し、
前記特徴領域の3次元座標を特定し、前記特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて前記3次元計測情報記憶部に記録し、
前記ユーザの呼吸性変動波形の振幅の大きさが異なる第1領域と第2領域とにおいて、前記3次元計測情報記憶部に記録された時間情報と座標値とに基づいて、振幅が大きい座標値から、振幅が小さい座標値を差し引いた値により呼吸性変動波形を算出することを特徴とする呼吸計測システムの動作方法。
【請求項7】
各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部と、3次元計測部に接続された制御部とを備えた呼吸計測システムを用いて、呼吸計測を実行するためのプログラムであって、
前記制御部を、
前記3次元計測部から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、
前記撮影画像に含まれる複数の特徴領域を特定し、
前記特徴領域の3次元座標を特定し、前記特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて前記3次元計測情報記憶部に記録し、
前記ユーザの呼吸性変動波形の振幅の大きさが異なる第1領域と第2領域とにおいて、前記3次元計測情報記憶部に記録された時間情報と座標値とに基づいて、振幅が大きい座標値から、振幅が小さい座標値を差し引いた値により呼吸性変動波形を算出する手段として機能させることを特徴とする呼吸計測プログラム。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】0008
【補正方法】変更
【補正の内容】
【0008】
上記課題を解決するための呼吸計測システムにおいては、各特徴領域の座標及び時間情報を記憶する3次元計測情報記憶部と、3次元計測部に接続された制御部とを備える。そして、前記制御部が、前記3次元計測部から、ユーザの体表面において、深度情報を含む撮影画像を時間情報に関連付けて取得し、前記撮影画像に含まれる複数の特徴領域を特定し、前記特徴領域の3次元座標を特定し、前記特徴領域を識別して、前記3次元座標の座標値を時間情報に関連付けて前記3次元計測情報記憶部に記録し、前記ユーザの呼吸性変動波形の振幅の大きさが異なる第1領域と第2領域とにおいて、前記3次元計測情報記憶部に記録された時間情報と座標値とに基づいて、振幅が大きい座標値から、振幅が小さい座標値を差し引いた値により呼吸性変動波形を算出する。これにより、複数の特徴領域に基づいて、呼吸性変動を特定することができる。
【手続補正3】
【補正対象書類名】明細書
【補正対象項目名】0009
【補正方法】変更
【補正の内容】
【0009】
ーザの緊張状態等によって、波形の中心点が移動するベースラインシフトが生じることがある。このベースラインシフトを削除することにより、的確に呼吸性変動成分を抽出することができる。
【手続補正4】
【補正対象書類名】明細書
【補正対象項目名】0010
【補正方法】変更
【補正の内容】
【0010】
上記呼吸計測システムにおいて、前記特定した呼吸性変動波形に基づいて、治療指示を出力することが好ましい。これにより、患部に対して、的確な治療を行なうことができる。
【手続補正5】
【補正対象書類名】明細書
【補正対象項目名】0011
【補正方法】変更
【補正の内容】
【0011】
上記呼吸計測システムにおいて、患者識別子に対して、呼吸性変動波形に対応する呼吸パターンと第2のバイタルサインとを関連付けて記録する呼吸情報記憶部を更に備え、治療時に、患者の呼吸と異なる第2のバイタルサインを特定し、前記呼吸情報記憶部において、この患者の患者識別子に関連付けられた前記第2のバイタルサインに関連付けられた呼吸パターンを特定し、前記呼吸パターンを用いて、前記治療時に用いる呼吸性変動波形を予測することが好ましい。これにより、呼吸状況を推定して、的確に呼吸性変動波形を特定することができる。
【手続補正6】
【補正対象書類名】明細書
【補正対象項目名】0012
【補正方法】変更
【補正の内容】
【0012】
上記呼吸計測システムにおいて、前記撮影画像に含まれる深度情報の時系列変化に基づいて、非呼吸性挙動を特定し、前記非呼吸性挙動の予兆挙動を特定することが好ましい。これにより、呼吸性変動波形からの逸脱を予測することができる。
【手続補正7】
【補正対象書類名】明細書
【補正対象項目名】0013
【補正方法】変更
【補正の内容】
【0013】
上記呼吸計測システムにおいて、前記撮影画像において特徴領域を特定した場合、前記特徴領域に対して予め定められた範囲の周囲点における3次元座標を特定し、前記周囲点の深度の統計値に基づいて、前記特徴領域の深度予測することが好ましい。これにより、統計的に的確な変動を特定することができる。