特許 7418734 煙検出装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-01-12

(45)【発行日】2024-01-22

(54)【発明の名称】煙検出装置

(51)【国際特許分類】

   H04N 7/18 20060101AFI20240115BHJP

   G08B 17/10 20060101ALI20240115BHJP

   G06T 7/215 20170101ALI20240115BHJP

【ＦＩ】

H04N7/18 K

H04N7/18 D

G08B17/10 Z

G06T7/215

【請求項の数】 3

(21)【出願番号】P 2019213964

(22)【出願日】2019-11-27

(65)【公開番号】P2021087084

(43)【公開日】2021-06-03

【審査請求日】2022-11-15

(73)【特許権者】

【識別番号】304020292

【氏名又は名称】国立大学法人徳島大学

(73)【特許権者】

【識別番号】000233826

【氏名又は名称】能美防災株式会社

(74)【代理人】

【識別番号】100110423

【弁理士】

【氏名又は名称】曾我 道治

(74)【代理人】

【識別番号】100111648

【弁理士】

【氏名又は名称】梶並 順

(74)【代理人】

【識別番号】100147566

【弁理士】

【氏名又は名称】上田 俊一

(74)【代理人】

【識別番号】100161171

【弁理士】

【氏名又は名称】吉田 潤一郎

(74)【代理人】

【識別番号】100188514

【弁理士】

【氏名又は名称】松岡 隆裕

(72)【発明者】

【氏名】寺田 賢治

(72)【発明者】

【氏名】岩藤 那留

【審査官】益戸 宏

(56)【参考文献】

【文献】特開２０１１－２１５７４１（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１８

Ｇ０８Ｂ １７／００

Ｇ０６Ｔ ７／２０

(57)【特許請求の範囲】

【請求項1】

監視対象領域の画像を撮像する撮像素子と、
前記撮像素子により撮像された前記画像の時系列データに基づいて前記監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した前記遷移状態を表示器によって識別表示させるための表示画像を生成する検出部と
を備え、
前記検出部は、
前記時系列データのそれぞれについて画像処理を施すことで、前記監視対象領域を分割した個々の分割領域のうちで煙が発生した領域を煙領域として抽出し、
前記個々の分割領域のそれぞれについて、あらかじめ決められた時間にわたって前記煙領域として抽出された累積回数を求めることで前記遷移状態を特定し、
前記個々の分割領域のそれぞれについて、前記累積回数に応じた識別表示を行うための画像として前記表示画像を生成する
煙検出装置。

【請求項2】

監視対象領域の画像を撮像する撮像素子と、
前記撮像素子により撮像された前記画像の時系列データに基づいて前記監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した前記遷移状態を表示器によって識別表示させるための表示画像を生成する検出部と
を備え、
前記検出部は、
前記遷移状態から前記監視対象領域における煙の移動方向および移動速度を特定し、
前記移動方向および前記移動速度を識別するための情報を付加して前記表示画像を生成する
煙検出装置。

【請求項3】

監視対象領域の画像を撮像する撮像素子と、
前記撮像素子により撮像された前記画像の時系列データに基づいて前記監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した前記遷移状態を表示器によって識別表示させるための表示画像を生成する検出部と
を備え、
前記検出部は、
前記遷移状態から前記監視対象領域における煙の移動方向を特定し、
前記移動方向を識別するための情報を付加して前記表示画像を生成する
煙検出装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定することのできる煙検出装置に関する。

【背景技術】

【0002】

画像処理技術を応用し、監視カメラが撮像した監視対象領域の中から、煙の領域だけを抽出できる従来装置がある（例えば、特許文献１参照）。このような従来装置は、煙が発生した状態を、定常状態とは異なる異常状態として検出している。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１０－９７２６５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来技術には、以下のような課題がある。
火災時の煙によって、一酸化炭素中毒により多くの死傷者が発生するおそれがある。特に、工場、ショッピングセンタなどの大規模な施設においては、火災発生地点から遠く離れた場所まで煙が及び、被害が拡大するおそれがある。また、煙が充満してしまうと、出口がどこであるかを把握できなくなるため、外部から適切な避難指示を出す必要がある。

【0005】

しかしながら、特許文献１等の従来装置では、大規模な施設において広がる煙を詳細に特定することが困難である。従って、大規模な施設において広がる煙による被害拡大を抑えることが重要な課題となる。すなわち、火災による被害を軽減させるためには、煙流動を把握することが重要となる。

【0006】

本発明は、前記のような課題を解決するためになされたものであり、監視対象領域内に発生した煙の流動を報知できる煙検出装置を得ることを目的とする。

【課題を解決するための手段】

【0007】

本発明に係る煙検出装置は、監視対象領域の画像を撮像する撮像素子と、撮像素子により撮像された画像の時系列データに基づいて監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器によって識別表示させるための表示画像を生成する検出部とを備え、検出部は、時系列データのそれぞれについて画像処理を施すことで、監視対象領域を分割した個々の分割領域のうちで煙が発生した領域を煙領域として抽出し、個々の分割領域のそれぞれについて、あらかじめ決められた時間にわたって煙領域として抽出された累積回数を求めることで遷移状態を特定し、個々の分割領域のそれぞれについて、累積回数に応じた識別表示を行うための画像として表示画像を生成するものである。
また、本発明に係る煙検出装置は、監視対象領域の画像を撮像する撮像素子と、撮像素子により撮像された画像の時系列データに基づいて監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器によって識別表示させるための表示画像を生成する検出部とを備え、検出部は、遷移状態から監視対象領域における煙の移動方向および移動速度を特定し、移動方向および移動速度を識別するための情報を付加して表示画像を生成するものである。
さらに、本発明に係る煙検出装置は、監視対象領域の画像を撮像する撮像素子と、撮像素子により撮像された画像の時系列データに基づいて監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器によって識別表示させるための表示画像を生成する検出部とを備え、検出部は、遷移状態から監視対象領域における煙の移動方向を特定し、移動方向を識別するための情報を付加して表示画像を生成するものである。

【発明の効果】

【0008】

本発明によれば、監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器によって識別表示させるための表示画像を生成することで、監視対象領域内に発生した煙の流動を報知できる煙検出装置を得ることができる。

【図面の簡単な説明】

【0009】

【図1】本発明の実施の形態１における煙検出装置の構成図である。

【図2】本発明の実施の形態１における煙検出装置により、表示画像に相当する煙分布マップを作成する手法を示した説明図である。

【図3】本発明の実施の形態１における煙検出装置により、射影変換後の時系列取得画像から煙分布マップを作成する手法を示した説明図である。

【図4】本発明の実施の形態１に係る移動情報生成部において実行される流動方向の検出処理に関する説明図である。

【図5】本発明の実施の形態１に係る移動情報生成部において実行される流動速度の検出処理に関する説明図である。

【図6】本発明の実施の形態２における煙検出装置により、複数のカメラによる撮像結果を用いて、監視対象領域における煙分布マップを作成する手法を示した説明図である。

【発明を実施するための形態】

【0010】

以下、本発明の煙検出装置の好適な実施の形態につき、図面を用いて説明する。

【0011】

実施の形態１．
図１は、本発明の実施の形態１における煙検出装置の構成図である。本実施の形態１における煙検出装置は、画像メモリ１０および検出部２０を備えている。画像メモリ１０は、撮像素子に相当するカメラ１により撮像された画像を、過去一定期間分、時系列データとして記憶できるように、複数フレーム分の画像メモリとして構成されている。１フレーム分の画像は、複数の画素から構成される。

【0012】

また、検出部２０は、煙遷移状態特定部２１、移動情報生成部２２、および表示画像生成部２３を含んで構成されている。煙遷移状態特定部２１は、画像処理を施すことで、監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定する。移動情報生成部２２は、画像処理を施すことで、監視対象領域における煙の移動方向および移動速度を、移動情報として生成する。

【0013】

さらに、表示画像生成部２３は、煙遷移状態特定部２１で特定した遷移状態を表示器２によって識別表示させるための表示画像を生成する。また、表示画像生成部２３は、移動情報生成部２２で生成した移動情報を付加した表示画像を生成することもできる。そして、表示画像生成部２３は、生成した表示画像を表示器２に表示させることで、監視対象領域内における煙の遷移状態を報知する。

【0014】

なお、移動情報生成部２２は、オプション機能であり、検出部２０は、最小構成としては、煙遷移状態特定部２１と表示画像生成部２３とで構成することができる。

【0015】

このように、図１に示す構成を備えた本実施の形態１に係る煙検出装置は、カメラ１により撮像された画像の時系列データに基づいて、監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器２によって識別表示させるための表示画像を生成することができる。そこで、本発明における表示画像の生成手法について、図面を用いて具体的に説明する。

【0016】

図２は、本発明の実施の形態１における煙検出装置により、表示画像に相当する煙分布マップを作成する手法を示した説明図である。図２（ａ）は、監視対象領域内をカメラ１により撮像した状態を示す平面図であり、監視対象領域を上から見た平面図である。

【0017】

図２（ｂ）は、カメラ１により撮像された取得画像を例示したものである。

【0018】

図２（ｃ）は、図２（ａ）に示した壁面Ａを基準面とした際に、図２（ｂ）に示した取得画像に対して、壁面Ａを特定するための４点（Ｐ１、Ｐ２、Ｐ３、Ｐ４）をプロットした状態を示す画像である。この４点（Ｐ１、Ｐ２、Ｐ３、Ｐ４）は、カメラ１の設置位置に応じて、あらかじめ設定することが可能である。

【0019】

図２（ｄ）は、図２（ｃ）の画像に対して射影変換を行い、奥行きによるスケールの違いを排除し、４点（Ｐ１、Ｐ２、Ｐ３、Ｐ４）により長方形が規定されるようにして作成された平面画像である。より具体的には、縦方向および横方向の距離が、画面全体にわたって均等となるように、図２（ｃ）の画像を射影変換することで、基準面である壁面Ａに沿って煙がどのように移動しているかを模式的に示した平面画像に相当する図２（ｄ）が得られる。

【0020】

図２（ｅ）は、奥行きによるスケールの違いが排除された、図２（ｄ）に示した平面画像を、任意の区画で区切ることで仮想的に作成された煙分布マップである。具体的には、検出部２０は、任意の区画で区切られた個々の分割領域のそれぞれについて、あらかじめ決められた時間にわたって煙領域として抽出された累積回数を求めることで、遷移状態を特定する。

【0021】

なお、あらかじめ決められた時間による複数の画像は、時系列データとして取得でき、時系列データに基づいて累積回数を求める手法については、図３を用いて後述する。

【0022】

さらに、検出部２０は、個々の分割領域のそれぞれについて、累積回数を識別表示させるための画像として、煙分布マップを生成する。生成された煙分布マップにおいては、あらかじめ決められた時間にわたって煙が存在する区画が、累積回数に応じて色付けされている。累積回数に応じた色分けの具体例としては、累積回数が多いほど、濃い色とするように色分けすることが考えられる。従って、表示器２に表示された煙分布マップを見た人は、視覚的に煙分布を分かりやすく認識することができる。

【0023】

図３は、本発明の実施の形態１における煙検出装置により、射影変換後の時系列取得画像から煙分布マップを作成する手法を示した説明図である。図３（ａ）は、時刻ｔ１において取得された画像に対して射影変換を施すことで得られた壁面Ａに関する平面画像であり、図３（ｂ）は、時刻ｔ２において取得された画像に対して射影変換を施すことで得られた壁面Ａに関する平面画像であり、図３（ｃ）は、時刻ｔ３において取得された画像に対して射影変換を施すことで得られた壁面Ａに関する平面画像である。

【0024】

ここで、各時刻は、古い順に、ｔ１、ｔ２、ｔ３となっている。それぞれの時刻で取得された画像が画像メモリ１０に蓄えられる。そして、あらかじめ決められた時間が、時刻ｔ１から時刻ｔ３までの３枚分の時系列データの間隔とすると、煙遷移状態特定部２１は、画像メモリ１０に蓄えられた３枚の画像のそれぞれにおいて、既存の煙検知手法を用いて煙領域を特定する。

【0025】

次に、煙遷移状態特定部２１は、煙領域が特定された画像のそれぞれに対して射影変換を施すことで、図３（ａ）～図３（ｃ）に相当する画像を生成する。さらに、煙遷移状態特定部２１は、個々の分割領域のそれぞれについて、３枚の画像にわたって煙領域として抽出された累積回数を求めることで、監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定する。

【0026】

次に、表示画像生成部２３は、個々の分割領域のそれぞれについて、累積回数を識別表示させるための画像として、図３（ｄ）に示したような煙分布マップを生成する。図３（ｄ）に示した煙分布マップでは、累積回数が多い領域ほど、色が濃くなって表示されている。

【0027】

また、図３（ｄ）に示された煙分布マップでは、個々の分割領域のそれぞれについて、流動方向を示す矢印が追記されている。図３（ｄ）に示した流動方向を示す矢印は、煙に関する移動情報の１つとして、移動情報生成部２２により生成することができる。

【0028】

本実施の形態１に係る移動情報生成部２２では、「複素正弦波変調撮像によるオプティカルフロー検出理論」という既存の技術を用いて、領域ごとに流動方向が推定される。より具体的には、以下の手順で流動方向が特定される。

【0029】

ステップ１：時系列画像に相当する連続フレーム画像に基づいて、画素ごとに輝度の時系列変化グラフを得る。
ステップ２：連続フレーム画像の輝度推移を示す時系列変化グラフと、三相正弦波との相関により位相画像を得る。
ステップ３：位相画像に対して空間微分を行うことで画素ごとのベクトルを求める。
ステップ４：ベクトルの時空間的安定性から流動領域を検出する。
ステップ５：流動領域中において、ベクトルの時空間平均値を算出することで、それぞれの領域における流動方向を特定する。

【0030】

図４は、本発明の実施の形態１における移動情報生成部２２において実行される流動方向の検出処理に関する説明図である。図４（ａ）は、画像メモリ１０に蓄積された連続フレーム画像を示している。図４（ｂ）は、上述したステップ１により画素ごとに生成される輝度の時系列変化グラフを示している。図４（ｂ）では、３×３の各画素に関する輝度の時系列変化グラフを例示している。

【0031】

さらに、図４（ｃ）は、輝度の時系列変化グラフに対して上述したステップ２～ステップ５を実行することで、３×３の画素領域において推定結果として特定された流動方向を模式的に示している。移動情報生成部２２は、図４に示した一連処理を実行することで、連続フレーム画像の時系列変化から、領域ごとに流動方向を特定することができる。

【0032】

さらに、移動情報生成部２２は、領域ごとに特定した流動方向から、大局的流動方向を推定することも可能である。図３（ｄ）に示したように、表示画像生成部２３は、移動情報生成部２２によって推定された大局的流動方向を、煙分布マップとともに表示器２に表示させることができる。

【0033】

図５は、本発明の実施の形態１における移動情報生成部２２において実行される流動速度の検出処理に関する説明図である。図５（ａ）は、時刻ｔ１において取得された画像に基づいて生成された煙分布マップであり、図５（ｂ）は、時刻ｔ２において取得された画像に基づいて生成された煙分布マップであり、図５（ｃ）は、時刻ｔ３において取得された画像に基づいて生成された煙分布マップである。

【0034】

移動情報生成部２２は、図５（ａ）～図５（ｃ）に示したように、それぞれの煙分布マップに基づいて煙の先端位置を特定する。具体的には、移動情報生成部２２は、煙領域の端部の分割領域であり、かつ累積回数が最も少ない分割領域を、煙先端であるとして特定することができる。図５（ａ）～図５（ｃ）では、移動情報生成部２２により煙先端と特定された領域を、斜めにハッチングされた分割領域として示している。

【0035】

次に、移動情報生成部２２は、３つの煙分布マップからなる時系列煙分布マップに対して特定したそれぞれの先端位置を、ある基準位置からの距離として算出する。そして、移動情報生成部２２は、図５（ｄ）に示すように、時刻ｔ１～ｔ３で特定される時間を横軸とし、基準位置からの距離を縦軸とした２次元平面上に、３つの煙分布マップのそれぞれにおいて時間および距離により特定される３点をプロットする。さらに、移動情報生成部２２は、２次元平面上にプロットした３点の傾きから、煙の流動速度を算出することができる。

【0036】

なお、移動情報生成部２２は、時系列煙分布マップにおける先端位置の時間遷移から、煙の大局的流動方向を求めることも可能である。

【0037】

そして、表示画像生成部２３は、作成した煙分布マップに対して、移動情報生成部２２により生成された流動方向および流動速度に関する情報を付加して、表示器２に表示させることができる。

【0038】

以上のように、実施の形態１によれば、監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器によって識別表示させるための表示画像を生成する煙検出装置を実現できる。この結果、煙の発生状況に応じて、煙の流動方向に関する情報を適切に表示することができ、迅速な避難を促すことができる。さらに、煙が充満する前に、適切な方向に避難誘導を行うことが可能となる。

【0039】

実施の形態２．
先の実施の形態１では、１台のカメラで撮像された監視対象領域の画像に基づいて、煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器によって識別表示させるための表示画像を生成する煙検出装置について説明した。これに対して、本実施の形態２では、監視対象領域を複数台のカメラで分割して撮像した複数の画像に基づいて、煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器によって識別表示させるための表示画像を生成する煙検出装置について説明する。

【0040】

図６は、本発明の実施の形態２における煙検出装置により、複数のカメラによる撮像結果を用いて、監視対象領域における煙分布マップを作成する手法を示した説明図である。図６（ａ）は、監視対象領域内を４台のカメラ１（１）～１（４）により撮像した状態を示す平面図であり、監視対象領域を上から見た平面図である。

【0041】

図６では、トンネルを監視対象領域としており、横に長い壁面Ａを、４台のカメラ１（１）～１（４）を用いて撮像している場合を例示している。すなわち、４台のカメラ１（１）～１（４）は、監視対象領域に含まれる複数の個別領域を分割して撮像している。

【0042】

４台のカメラ１（１）～１（４）では、隣接するカメラで撮像領域の一部が重複するようにしている。従って、検出部２０は、重複した領域に関しては、一方のカメラによる画像を採用することで、図６（ｂ）～図６（ｅ）に示すように、横方向に連続した４枚の煙分布マップ１～４を生成することができる。

【0043】

そして、検出部２０内の表示画像生成部２３は、４枚の煙分布マップ１～４を合成することで、図６（ｆ）に示すように、壁面Ａに対応した１枚の煙分布マップを全体マップとして生成できる。

【0044】

図６に示した例では、監視対象領域であるトンネル内で発生した煙が、カメラ１（１）～カメラ１（３）の３台で撮像できた状態を例示している。そして、カメラ１（１）の撮像結果に基づいて生成された煙分布マップ１および移動情報から、表示画像を見た者は、大局的流動方向が左方向であり、流動速度が１．６ｍ／Ｓであることを認識できる。

【0045】

また、カメラ１（２）の撮像結果に基づいて生成された煙分布マップ２および移動情報から、表示画像を見た者は、大局的流動方向が左方向であり、流動速度が１．８ｍ／Ｓであることを認識できる。

【0046】

さらに、カメラ１（３）の撮像結果に基づいて生成された煙分布マップ３および移動情報から、表示画像を見た者は、大局的流動方向が右方向であり、流動速度が１．７ｍ／Ｓであることを認識できる。

【0047】

そして、煙分布マップ１～４が合成された全体マップを見た者は、カメラ１（２）で撮像された監視対象領域内で発生した煙が、左方向に１．６ｍ／ｓの速度で広がっており、右方向に１．７ｍ／ｓの速度で広がっていることを、視覚的に、迅速に把握することができる。

【0048】

以上のように、実施の形態２によれば、１台のカメラではカバーしきれない監視対象領域を、複数のカメラにより分割して得られた撮像結果に基づいて、先の実施の形態１と同様の画像処理を施すことで、監視対象領域内に発生した煙の時間経過に伴う遷移状態を特定し、特定した遷移状態を表示器によって識別表示させるための表示画像を生成する煙検出装置を実現できる。

【0049】

この結果、監視対象領域の大きさに応じて適切な台数のカメラを、適切な位置に配置することで、煙の発生状況に応じて、煙の流動方向に関する情報を適切に表示することができ、迅速な避難を促すことができる。さらに、煙が充満する前に、適切な方向に避難誘導を行うことが可能となる。

【0050】

なお、本発明は、上記の実施の形態に限定されるものではなく、本発明の主旨を逸脱しない範囲で種々に変形することが可能である。例えば、ＡＲ（拡張現実）として、煙分布マップをカメラ１により撮像された取得画像に重ねて表示するようにしてもよい。また、その際に、煙の先端部分の位置が分かるように輪郭や、線により表示するようにしてもよい。また、監視対象領域が建物の場合に、フロアを俯瞰した平面図上に煙分布マップあるいは煙分布マップに基づき変換した情報を表示するようにしてもよい。

【符号の説明】

【0051】

１ カメラ（撮像素子）、２ 表示器、１０ 画像メモリ、２０ 検出部、２１ 煙遷移状態特定部、２２ 移動情報生成部、２３ 表示画像生成部。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】