特許 7404874 監視システム、監視方法、及び、監視プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-12-18

(45)【発行日】2023-12-26

(54)【発明の名称】監視システム、監視方法、及び、監視プログラム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20231219BHJP

   H04N 5/77 20060101ALI20231219BHJP

   G08B 25/00 20060101ALI20231219BHJP

   G08B 13/196 20060101ALI20231219BHJP

【ＦＩ】

H04N7/18 D

H04N7/18 K

H04N5/77

G08B25/00 510M

G08B13/196

【請求項の数】 7

(21)【出願番号】P 2020000292

(22)【出願日】2020-01-06

(65)【公開番号】P2021111797

(43)【公開日】2021-08-02

【審査請求日】2022-12-05

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100103894

【弁理士】

【氏名又は名称】家入 健

(72)【発明者】

【氏名】徳永 昌也

【審査官】秦野 孝一郎

(56)【参考文献】

【文献】特開２０１６－０７１７８８（ＪＰ，Ａ）

【文献】特開２０１０－１２４０２３（ＪＰ，Ａ）

【文献】特開２００３－３１７１６８（ＪＰ，Ａ）

【文献】特開２０１１－２５３５４７（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１８

Ｈ０４Ｎ ５／７７

Ｇ０８Ｂ ２３／００－３１／００

Ｇ０８Ｂ １３／００－１５／０２

(57)【特許請求の範囲】

【請求項1】

物体が第１感知領域内に侵入したことを感知可能に構成されたセンサと、
前記第１感知領域を撮影可能に構成された撮像部と、
前記センサによって前記第１感知領域内に前記物体が侵入したことが感知された場合、前記撮像部によって前記第１感知領域を撮影させる制御部と、
前記撮像部による撮影結果から前記第１感知領域内に侵入した前記物体が人であるか否かを解析する画像解析部と、
を備え、
前記センサは、さらに、前記物体が第２感知領域内に侵入したことを感知可能に構成され、
前記撮像部は、さらに、前記第２感知領域を撮影可能に構成され、
前記制御部は、前記センサによって前記第１及び前記第２感知領域の何れかに前記物体が侵入したことが感知された場合、前記撮像部によって前記第１及び前記第２感知領域のうち前記物体が侵入した感知領域を撮影させるように構成され、
前記画像解析部は、前記撮像部による撮影結果から前記第１及び前記第２感知領域の何れかに侵入した前記物体が人であるか否かを解析するように構成され、
前記制御部は、前記画像解析部によって人と解析された前記物体が前記第１及び前記第２感知領域外に移動した場合、前記物体が移動した後の前記第１及び前記第２感知領域の何れかを前記撮像部によって撮影させたうえで、その撮影画像を、前記画像解析部によって人と解析された前記物体を含む撮影画像が格納される記憶部とは異なる記憶部に記憶させる、
監視システム。

【請求項2】

前記撮像部は、
前記第１感知領域を撮影可能に構成された第１カメラと、
前記第２感知領域を撮影可能に構成された第２カメラと、
を有し、
前記制御部は、前記センサによって前記第１及び前記第２感知領域の何れかに前記物体が侵入したことが感知された場合、前記第１及び前記第２カメラの何れかを起動することによって前記第１及び前記第２感知領域のうち前記物体が侵入した感知領域を撮影させる、
請求項１に記載の監視システム。

【請求項3】

前記撮像部は、
撮影方向を調整可能に構成されたカメラを有し、
前記制御部は、前記センサによって前記第１及び前記第２感知領域の何れかに前記物体が侵入したことが感知された場合、前記カメラの撮影方向を調整することにより、当該カメラによって前記第１及び前記第２感知領域のうち前記物体が侵入した感知領域を撮影させる、
請求項１に記載の監視システム。

【請求項4】

前記制御部は、前記画像解析部によって前記第１及び前記第２感知領域内の何れかに侵入した前記物体が人ではないと解析された場合、前記撮像部による撮影を停止させる、
請求項１～３の何れか一項に記載の監視システム。

【請求項5】

前記画像解析部によって人と解析された前記物体を含む撮影画像が格納される記憶部をさらに備えた、
請求項１～４の何れか一項に記載の監視システム。

【請求項6】

センサによって第１感知領域内に物体が侵入したことが感知された場合、撮像部によって前記第１感知領域を撮影するステップと、
前記センサによって第２感知領域内に物体が侵入したことが感知された場合、前記撮像部によって前記第２感知領域を撮影するステップと、
画像解析部によって、前記撮像部による撮影結果から前記第１感知領域及び前記第２感知領域の何れかに侵入した前記物体が人であるか否かを解析するステップと、
前記画像解析部によって人と解析された前記物体が前記第１及び前記第２感知領域外に移動した場合、前記物体が移動した後の前記第１及び前記第２感知領域の何れかを前記撮像部によって撮影させたうえで、その撮影画像を、前記画像解析部によって人と解析された前記物体を含む撮影画像が格納される記憶部とは異なる記憶部に記憶させるステップと、
を備えた、監視方法。

【請求項7】

センサによって第１感知領域内に物体が侵入したことが感知された場合、撮像部によって前記第１感知領域を撮影する処理と、
前記センサによって第２感知領域内に物体が侵入したことが感知された場合、前記撮像部によって前記第２感知領域を撮影する処理と、
画像解析部によって、前記撮像部による撮影結果から前記第１感知領域及び前記第２感知領域の何れかに侵入した前記物体が人であるか否かを解析する処理と、
前記画像解析部によって人と解析された前記物体が前記第１及び前記第２感知領域外に移動した場合、前記物体が移動した後の前記第１及び前記第２感知領域の何れかを前記撮像部によって撮影させたうえで、その撮影画像を、前記画像解析部によって人と解析された前記物体を含む撮影画像が格納される記憶部とは異なる記憶部に記憶させる処理と、
をコンピュータに実行させる監視プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、監視システム、監視方法、及び、監視プログラムに関する。

【背景技術】

【0002】

防犯用途で人の存在を特定して監視する監視システムの開発が進められている。例えば、特許文献１には、複数台の人感センサによって異常が認識された場合にのみ、カメラ等を用いて異常場面を記録することが記載されている。しかしながら、特許文献１の構成では、人感センサの感知範囲内に侵入した物体が人であるか否かの判定を行うことができない、という課題があった。

【0003】

このような課題に対する解決策は、例えば特許文献２及び特許文献３に開示されている。特許文献２及び特許文献３には、カメラ等によって撮影された画像を画像解析することによって人を検知することが記載されている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００６－５８９３号公報

【文献】特許第５２３０７９３号公報

【文献】特許第５５８３５３１号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、関連技術の構成では、移動する物体の撮影画像を解析し続ける必要があるため、解析データを記憶するための記憶容量が増大したり、画像解析に用いられるＣＰＵが高スペック化したりして、コストが増大してしまう、という課題があった。

【0006】

本開示の目的は、上述した課題を解決する監視システム、監視方法、及び、監視プログラムを提供することにある。

【課題を解決するための手段】

【0007】

一実施の形態によれば、監視システムは、物体が第１感知領域内に侵入したことを感知可能に構成されたセンサと、前記第１感知領域を撮影可能に構成された撮像部と、前記センサによって前記第１感知領域内に前記物体が侵入したことが感知された場合、前記撮像部によって前記第１感知領域を撮影させる制御部と、前記撮像部による撮影結果から前記第１感知領域内に侵入した前記物体が人であるか否かを解析する画像解析部と、を備える。

【0008】

一実施の形態によれば、監視方法は、センサによって第１感知領域内に物体が侵入したことが感知された場合、撮像部によって前記第１感知領域を撮影するステップと、前記画像解析部によって、前記撮像部による撮影結果から前記第１感知領域内に侵入した前記物体が人であるか否かを解析するステップと、を備える。

【0009】

一実施の形態によれば、監視プログラムは、センサによって第１感知領域内に物体が侵入したことが感知された場合、撮像部によって前記第１感知領域を撮影する処理と、前記画像解析部によって、前記撮像部による撮影結果から前記第１感知領域内に侵入した前記物体が人であるか否かを解析する処理と、をコンピュータに実行させる。

【発明の効果】

【0010】

前記一実施の形態によれば、低コストで精度良く人を検出することが可能な監視システム、監視方法、及び、監視プログラムを提供することができる。

【図面の簡単な説明】

【0011】

【図1】実施の形態１に係る監視システムの構成例を示すブロック図である。

【図2】図１に示す監視システムに設けられたセンサの感知範囲を示す概念図である。

【図3】図１に示す監視システムに設けられた撮像部の撮影範囲を示す概念図である。

【図4】図１に示す監視システムの通常動作前の前処理の一例を示すフローチャートである。

【図5】図１に示す監視システムの動作の一例を示すフローチャートである。

【図6】図１に示す監視システムの動作の他の例を示すフローチャートである。

【図7】実施の形態２に係る監視システムの構成例を示すブロック図である。

【図8】図７に示す監視システムの動作の一例を示すフローチャートである。

【図9】図７に示す監視システムの動作の他の例を示すフローチャートである。

【発明を実施するための形態】

【0012】

以下、図面を参照しつつ、実施の形態について説明する。なお、図面は簡略的なものであるから、この図面の記載を根拠として実施の形態の技術的範囲を狭く解釈してはならない。また、同一の要素には、同一の符号を付し、重複する説明は省略する。

【0013】

以下の実施の形態においては便宜上その必要があるときは、複数のセクションまたは実施の形態に分割して説明する。ただし、特に明示した場合を除き、それらはお互いに無関係なものではなく、一方は他方の一部または全部の変形例、応用例、詳細説明、補足説明等の関係にある。また、以下の実施の形態において、要素の数等（個数、数値、量、範囲等を含む）に言及する場合、特に明示した場合および原理的に明らかに特定の数に限定される場合等を除き、その特定の数に限定されるものではなく、特定の数以上でも以下でもよい。

【0014】

さらに、以下の実施の形態において、その構成要素（動作ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではない。同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは、特に明示した場合および原理的に明らかにそうでないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。このことは、上記数等（個数、数値、量、範囲等を含む）についても同様である。

【0015】

＜実施の形態１＞
図１は、実施の形態１に係る監視システム１の構成例を示すブロック図である。
本実施の形態に係る監視システム１は、例えば、コンビニエンスストアやスーパーマーケット等において、防犯用途で人を特定して監視するシステムである。

【0016】

ここで、本実施の形態に係る監視システム１は、センサによって所定の感知領域内に物体が侵入したことが感知された場合に、撮像部を用いて当該所定の感知領域を撮影し、その撮影画像に基づいて当該所定の感知領域内に侵入した物体が人か否かを画像解析する。ここで、本実施の形態に係る監視システム１は、画像解析によって、所定の感知領域内に侵入した物体が人であるか否かを精度良く検出することができる。また、本実施の形態に係る監視システム１は、例えば所定の感知領域内に物体が侵入していない場合には、撮像部による撮影を停止させているため、解析データのサイズを抑制することができる。これは、解析データを記憶するための記憶容量の増大の抑制、及び、画像解析に用いられるＣＰＵの高スペック化の抑制につながる。つまり、本実施の形態に係る監視システム１は、低コストで精度良く人を検出することができる。以下、具体的に説明する。

【0017】

図１に示すように、監視システム１は、センサ１１と、撮像部１２と、画像解析部１３と、制御部１４と、を少なくとも備える。

【0018】

センサ１１は、物体ＴＧが所定の感知領域内に侵入したか否かを感知する。
図２は、センサ１１の感知領域を示す概念図である。図２の例では、センサ１１が、４つの感知領域Ａ１～Ａ４を感知可能に構成されている。以下、各感知領域の外周辺を感知軸とも称す。センサ１１は、例えば、物体ＴＧが感知領域の外側から内側に向かって感知軸を横切った場合に、物体ＴＧが感知領域内に侵入したことを感知する。その後、センサ１１は、物体ＴＧが感知領域内に侵入している期間中、物体ＴＧが感知領域内に侵入していることを感知し続ける。

【0019】

ここで、センサ１１は、複数の感知領域のうち何れの感知領域に物体ＴＧが侵入したのかを感知可能に構成されている。図２の例では、センサ１１が、４つ感知領域Ａ１～Ａ４のうち何れの感知領域に物体ＴＧが侵入したのかを感知可能に構成されている。物体ＴＧが感知領域に侵入したことを示す情報（物体ＴＧがどの感知領域に侵入したのかを示す情報を含む）は、センサ１１から制御部１４に送信される。

【0020】

センサ１１は、感知領域内に侵入していた物体ＴＧが感知領域から退出した場合（具体的には、物体ＴＧが感知領域の内側から外側に向かって感知軸を横切った場合）、物体ＴＧの感知を停止させる。物体ＴＧが感知領域から退出したことを示す情報は、センサ１１から制御部１４に送信される。

【0021】

撮像部１２は、センサ１１の感知領域を撮影可能に構成されている。撮像部１２は、例えば、センサ１１によって感知される複数の感知領域のそれぞれを撮影可能な複数のカメラを有する。或いは、撮像部１２は、例えば、撮影方向を変更可能な一つ又は複数のカメラを有していても良い。

【0022】

図３は、撮像部１２の撮影領域を示す概念図である。図３の例では、撮像部１２が、センサ１１によって感知される４つの感知領域Ａ１～Ａ４のそれぞれを撮影可能な４つのカメラ１２＿１～１２＿４を有している。なお、撮像部１２の撮影領域は、例えば監視システム１の通常動作前の前処理によって、センサ１１の感知領域と一致するように調整される。

【0023】

撮像部１２は、制御部１４からの指示に基づいて、センサ１１によって物体ＴＧの侵入が感知された感知領域の撮影を開始したり、センサ１１によって物体ＴＧの退出が感知された感知領域の撮影を停止したりする。撮像部１２による撮影画像は、撮像部１２内の記憶領域に録画されたり、図示しない記憶部に記憶されたりする。

【0024】

画像解析部１３は、撮像部１２による撮影画像から物体ＴＧが人であるか否かを解析する。なお、画像解析部１３は、物体ＴＧが人であるか否かだけでなく、物体ＴＧが人である場合の人数及びその正確な位置を解析可能に構成されても良い。画像解析部１３による解析結果は、制御部１４に送信される。

【0025】

制御部１４は、監視システム１の各構成要素の動作を制御する。
具体的には、制御部１４は、撮像部１２に、センサ１１によって物体ＴＧの侵入が感知された感知領域の撮影を開始させたり、センサ１１によって物体ＴＧの退出が感知された感知領域の撮影を停止させたりする。また、制御部１４は、感知領域内に進入した物体ＴＧが人であると画像解析部１３によって解析された場合、画像解析部１３に対して、当該人の数及びその正確な位置を解析させたりもする。さらに、制御部１４は、感知領域内に侵入した物体ＴＧが人ではないと画像解析部１３によって解析された場合、撮像部１２に感知領域の撮影を停止させたりもする。

【0026】

なお、制御部１４は、監視システム１の通常動作前の前処理として、センサ１１の感知領域と、撮像部１２の撮影領域と、を一致させる処理も行う。例えば、制御部１４は、前処理として、センサ１１の感知範囲のマップ情報と、撮像部１２の撮影領域のマップ情報と、をそれぞれ作成又は取得するとともに、２つのマップ情報間の紐付けを行う。それにより、制御部１４は、センサ１１の感知領域と、撮像部１２の撮影領域と、を一致させることができる。

【0027】

図２及び図３を参照すると、例えば、センサ１１によって物体ＴＧが感知領域Ａ１に侵入したことが感知された場合、制御部１４は、撮像部１２に対して感知領域Ａ１を撮影するように指示する。それにより、撮像部１２は、カメラ１２＿１を用いて感知領域Ａ１の撮影を開始する。

【0028】

（フローチャートの一例）
図４及び図５は、監視システム１の動作の一例を示すフローチャートである。なお、図４には、監視システム１による通常動作前の前処理の一例が示されており、図５には、監視システム１による前処理後の通常動作の一例が示されている。

【0029】

まず、監視システム１は、通常動作前の前処理を行う。具体的には、制御部１４は、センサ１１の感知範囲のマップ情報と、撮像部１２の撮影領域のマップ情報と、をそれぞれ作成又は取得するとともに、２つのマップ情報間の紐付けを行う（図４のステップＳ１０１→Ｓ１０２→Ｓ１０３）。それにより、制御部１４は、センサ１１の感知領域と、撮像部１２の撮影領域と、を一致させる。

【0030】

なお、本例では、図２及び図３の場合と同様に、センサ１１が感知領域Ａ１～Ａ４を感知可能に構成され、かつ、撮像部１２を構成するカメラ１２＿１～１２＿４がそれぞれ感知領域Ａ１～Ａ４を撮影可能に構成されているものとする。

【0031】

その後、監視システム１は、通常動作に移行する。
具体的には、まず、センサ１１は、感知領域Ａ１～Ａ４の何れかに物体ＴＧが侵入したことを感知すると、当該物体ＴＧが侵入した感知領域の情報を制御部１４に送信する（図５のステップＳ２０１）。

【0032】

制御部１４は、撮像部１２に対して、センサ１１によって物体ＴＧの侵入が感知された感知領域を撮影するように指示する（ステップＳ２０２）。撮像部１２は、制御部１４からの指示に基づいて、指定された感知領域の撮影を行う（ステップＳ２０３）。

【0033】

例えば、センサ１１によって物体ＴＧが感知領域Ａ１に侵入したことが感知された場合、制御部１４は、撮像部１２に対して感知領域Ａ１を撮影するように指示する。それにより、撮像部１２は、カメラ１２＿１を用いて感知領域Ａ１の撮影を行う。

【0034】

画像解析部１３は、撮像部１２による撮影画像から物体ＴＧが人であるか否かを解析する（ステップＳ２０４）。

【0035】

例えば、感知領域に侵入した物体ＴＧが人ではないと画像解析部１３によって解析された場合（ステップＳ２０４のＮＯ）、制御部１４は、撮像部１２に対して感知領域の撮影の停止を指示する（ステップＳ２０５）。それにより、撮像部１２は、感知領域の撮影を停止する（ステップＳ２０６）。

【0036】

それに対し、感知領域に侵入した物体ＴＧが人であると画像解析部１３によって解析された場合（ステップＳ２０４のＹＥＳ）、画像解析部１３は、さらに、当該人の数、及び、その正確な位置を解析する（ステップＳ２０７）。その後、制御部１４は、画像解析部１３による画像解析を停止させ、画像解析部１３による画像解析からセンサ１１による人物検知に切り替える（ステップＳ２０８）。つまり、制御部１４は、人であることが特定された物体ＴＧをセンサ１１によって感知させ続ける。

【0037】

その後、センサ１１によって物体ＴＧ（人）が感知領域から退出したことが感知されると（ステップＳ２０９）、制御部１４は、撮像部１２に対して感知領域の撮影の停止を指示する（ステップＳ２１０）。それにより、撮像部１２は、これまでの撮影画像を記録したうえで、感知領域の撮影を停止する（ステップ２１１）。

【0038】

このように、監視システム１は、センサ１１によって所定の感知領域内に物体が侵入したことが感知された場合に、撮像部１２を用いて当該所定の感知領域を撮影し、その撮影画像に基づいて当該所定の感知領域内に侵入した物体が人か否かを画像解析する。ここで、監視システム１は、画像解析部１３を用いることで、所定の感知領域内に侵入した物体が人であるか否かを精度良く検出することができる。また、監視システム１は、所定の感知領域内に物体が侵入していない場合、さらには所定の感知領域内に侵入した物体が人ではない場合、撮像部１２による撮影を停止させるため、解析データのサイズを抑制することができる。これは、解析データを記憶するための記憶容量の増大の抑制、及び、画像解析に用いられるＣＰＵの高スペック化の抑制につながる。つまり、監視システム１は、低コストで精度良く人を検出することができる。

【0039】

なお、監視システム１の動作は、図５に示すフローチャートの一例に限られない。以下、監視システム１の動作の他の例について説明する。

【0040】

（フローチャートの変形例）
図６は、監視システム１の動作の他の例を示すフローチャートである。
なお、監視システム１による通常動作前の前処理については、図４に示したとおりであるため、その説明を省略する。また、監視システム１による通常動作のうち、ステップＳ３０１～Ｓ３０７の処理については、図５のステップＳ２０１～Ｓ２０７の処理と同様であるため、その説明を省略する。

【0041】

ステップＳ３０４の処理において、感知領域に侵入した物体ＴＧが人であると画像解析部１３によって解析された場合（ステップＳ３０４のＹＥＳ）、画像解析部１３は、さらに、当該人の数、及び、その正確な位置を解析する（ステップＳ３０７）。その後、制御部１４は、撮像部１２による撮影を継続させるだけでなく、画像解析部１３による画像解析を継続させる（ステップＳ３０８）。ここで、監視システム１は、センサ１１の代わりに（或いはセンサ１１とともに）、画像解析部１３の画像解析によって、人である物体ＴＧが感知領域内に存在しているか否かを判断する。そして、画像解析部１３によって物体ＴＧ（人）が感知領域から退出したことが検出されると（ステップＳ３０９）、制御部１４は、撮像部１２に対して感知領域の撮影の停止を指示する（ステップＳ３１０）。それにより、撮像部１２は、これまでの撮影画像を記録したうえで、感知領域の撮影を停止する（ステップ３１１）。

【0042】

このように、監視システム１は、図５に示すフローチャートの一例に限られず、例えば図６に示すフローチャートの他の例に従って処理を進めてもよい。

【0043】

＜実施の形態２＞
ところで、コンビニエンスストアやスーパーマーケット等では、防犯用途で人を特定して監視するだけでなく、マーケティング用途で商品の在庫などを特定して管理することも求められている。ここで、マーケティング用途で商品の在庫などを特定して管理する場合には、個人情報保護の観点から、人を写さずに商品棚に陳列されている商品を撮影し、その撮影画像に基づいて商品の在庫などを解析する必要がある。

【0044】

しかしながら、監視システム１による撮影画像は、人が写り込んでいるため、マーケティング用途で商品の在庫などを特定して管理するのには不向きである。そこで、発明者は、防犯用途で人を特定して監視するだけでなく、マーケティング用途で商品の在庫などを特定して管理することが可能な監視システム２を見いだした。

【0045】

図７は、実施の形態２に係る監視システム２の構成例を示すブロック図である。
監視システム２は、監視システム１と比較して、防犯用ストレージ２１と、在庫用ストレージ２２と、在庫管理用ストレージ２３と、をさらに備える。なお、監視システム２では、画像解析部１３が、撮像部１２による撮影画像を解析することにより、感知領域内に侵入した物体ＴＧが人であるか否かを判定するだけでなく、撮影画像に写っている所定の商品の物理的な在庫を特定可能に構成されている。

【0046】

防犯用ストレージ２１には、画像解析部１３の画像解析によって人であると判定された物体ＴＧが撮影された撮影画像（即ち、実施の形態１に係る監視システム１による撮影画像に相当する撮影画像）が格納される。

【0047】

在庫用ストレージ２２には、画像解析部１３の画像解析によって人であると判定された物体ＴＧが退出した後の（即ち、人が写り込んでいない）感知領域の撮影画像が格納される。ここで、感知領域は、例えばコンビニエンスストアの店内における所定の商品が陳列された商品棚を含む領域である。なお、在庫用ストレージ２２には、物体ＴＧが侵入する前の（即ち、人が写り込んでいない）感知領域の撮影画像がさらに格納されてもよい。

【0048】

在庫管理用ストレージ２３には、画像解析部１３による画像解析によって特定された所定の商品の物理的な在庫情報（数値データ）が格納される。なお、在庫管理用ストレージ２３には、画像解析部１３による画像解析によって特定された複数種類の商品のそれぞれの物理的な在庫情報（数値データ）が格納されてもよい。

【0049】

監視システム２のその他の構成については、監視システム１の場合と同様であるため、その説明を省略する。

【0050】

（フローチャートの一例）
図８は、監視システム２の動作の一例を示すフローチャートである。なお、監視システム２による通常動作前の前処理については、図４に示した処理と同様であるため、その説明を省略する。また、監視システム２による通常動作のうち、ステップＳ４０１～Ｓ４０９の処理については、図５のステップＳ２０１～Ｓ２０９の処理と同様であるため、その説明を省略する。

【0051】

なお、本例では、監視システム２が、コンビニエンスストアの店内において、防犯用途で人を特定して監視するだけでなく、マーケティング用途で所定の商品の在庫などを特定して管理するものとする。

【0052】

ステップＳ４０９の処理において、センサ１１によって物体ＴＧ（人）が感知領域から退出したことが感知されると、制御部１４は、撮像部１２に対して物体ＴＧ（人）が退出した後の感知領域の撮影を指示する（ステップＳ４１０）。それにより、撮像部１２は、これまでの撮影画像を防犯用ストレージ２１に送信するとともに（ステップＳ４１１）、人が退出した後の感知領域を撮影して在庫用ストレージ２２に送信した後、感知領域の撮影を停止する（ステップＳ４１３）。

【0053】

防犯用ストレージ２１及び在庫用ストレージ２２には、撮像部１２によって撮影された人の写っている撮影画像、及び、人が退出した後の商品が写っている撮影画像がそれぞれ格納される（ステップＳ４１２、Ｓ４１６）。

【0054】

また、画像解析部１３は、人が退出した後の感知領域を撮影した画像を解析することで、撮影画像に写っている所定の商品の物理的な在庫を特定する（ステップＳ４１４）。所定の商品の物理的な在庫の情報は、在庫管理用ストレージ２３に格納される（ステップＳ４１５）。

【0055】

なお、画像解析部１３は、人が退出した後の感知領域を撮影した画像を解析するだけでなく、人が侵入する前の感知領域を撮影した画像をさらに解析することで、撮影画像に写っている所定の商品の物理的な在庫の増減を特定しても良い。

【0056】

このように、監視システム２は、まず、監視システム１と同等程度の効果を奏することができる。即ち、監視システム２は、低コストで精度良く人を検出することができる。さらに、監視システム２は、防犯用途で人を特定して監視するだけなく、人が写っていない撮影画像を解析することによって、個人情報を保護しつつ、マーケティング用途で商品の在庫などを特定して管理することができる。ここで、撮像部１２は、防犯用途のカメラと、マーケティング用途のカメラと、を別々に備える必要がないため、低コスト化を実現することができる。

【0057】

例えば、監視システム２は、商品棚に陳列された所定の商品の在庫が設定数よりも少ないことを検出した場合、店員に対して当該所定の商品の補充が必要である旨の情報を出力するようにしても良い。

【0058】

また、例えば、監視システム２によって特定された商品の物理的な在庫の情報と、コンビニエンスストアのストアコンピュータ等から算出された商品の論理的な在庫の情報と、を比較することにより、商品の盗難（万引き）の可能性を検知することが可能である。

【0059】

なお、監視システム２の動作は、図８に示すフローチャートの一例に限られない。以下、監視システム２の動作の他の例について説明する。

【0060】

（フローチャートの変形例）
図９は、監視システム２の動作の他の例を示すフローチャートである。
なお、監視システム２による通常動作前の前処理については、図４に示したとおりであるため、その説明を省略する。また、監視システム２による通常動作のうち、ステップＳ５０１～Ｓ５０８の処理については、ステップＳ３０１～Ｓ３０８の処理と同様であるため、その説明を省略する。

【0061】

ステップＳ５０４の処理において、感知領域に侵入した物体ＴＧが人であると画像解析部１３によって解析された場合（ステップＳ５０４のＹＥＳ）、画像解析部１３は、さらに、当該人の数、及び、その正確な位置を解析する（ステップＳ５０７）。その後、制御部１４は、撮像部１２による撮影を継続させるだけでなく、画像解析部１３による画像解析を継続させる（ステップＳ５０８）。ここで、監視システム２は、センサ１１の代わりに（或いはセンサ１１とともに）、画像解析部１３の画像解析によって、人である物体ＴＧが感知領域内に存在しているか否かを判断する。

【0062】

画像解析部１３によって物体ＴＧ（人）が感知領域から退出したことが検出されると（ステップＳ５０９）、制御部１４は、撮像部１２に対して物体ＴＧ（人）が退出した後の感知領域の撮影を指示する（ステップＳ５１０）。それにより、撮像部１２は、これまでの撮影画像を防犯用ストレージ２１に送信するとともに（ステップＳ５１１）、人が退出した後の感知領域を撮影して在庫用ストレージ２２に送信した後、感知領域の撮影を停止する（ステップＳ５１３）。ステップＳ５１１～Ｓ５１６の処理については、ステップＳ４１１～Ｓ４１６の処理と同様であるため、その説明を省略する。

【0063】

このように、監視システム２は、図８に示すフローチャートの一例に限られず、例えば図９に示すフローチャートの他の例に従って処理を進めてもよい。

【0064】

以上、図面を参照して、本開示の実施の形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、本開示の要旨を逸脱しない範囲内において様々な設計変更等が可能である。

【0065】

本実施の形態では、センサ１１が４つの感知領域Ａ１～Ａ４を感知可能に構成され、かつ、撮像部１２が４つの感知領域Ａ１～Ａ４のそれぞれを撮影可能な４つのカメラ１２＿１～１２＿４を有する場合を例に説明したが、これに限られない。センサ１１は、任意の数の感知領域を感知可能な構成に適宜変更可能である。また、それに伴って、撮像部１２は、任意の数の感知領域のそれぞれを撮影可能な任意の数のカメラを備えても良い。

【0066】

また、本実施の形態では、物体ＴＧの数が１つである場合を例に説明したが、これに限られない。物体ＴＧの数は２つ以上であっても良い。即ち、センサ１１は、ある物体ＴＧが感知領域内に侵入したことを感知するととともに、別の物体ＴＧが感知領域内に進入したことを感知することができるように構成されている。また、撮像部１２は、感知領域内に進入したある物体ＴＧの撮影を行うとともに、感知領域内に進入した別の物体ＴＧの撮影を行うことができるように構成されている。画像解析部１３は、撮像部１２によって撮影されたある物体ＴＧが人であるか否かの判定を行うとともに、撮像部１２によって撮影された別の物体ＴＧが人であるか否かの判定を行うことができるように構成されている。

【0067】

さらに、上記実施の形態では、本開示をハードウェアの構成として説明したが、本開示は、これに限定されるものではない。本開示は、監視システム１，２による監視処理を、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）にコンピュータプログラムを実行させることにより実現することが可能である。

【0068】

また、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（ｔａｎｇｉｂｌｅ ｓｔｏｒａｇｅ ｍｅｄｉｕｍ）を含む。非一時的なコンピュータ可読媒体は、例えば、磁気記録媒体、光磁気記録媒体、ＣＤ－ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリを含む。磁気記録媒体は、例えば、フレキシブルディスク、磁気テープ、ハードディスクドライブなどである。光磁気記録媒体は、例えば光磁気ディスクなどである。半導体メモリは、例えば、マスクＲＯＭ、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ ＰＲＯＭ）、フラッシュＲＯＭ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などである。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

【0069】

上記の実施の形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

【0070】

（付記１）
物体が第１感知領域内に侵入したことを感知可能に構成されたセンサと、
前記第１感知領域を撮影可能に構成された撮像部と、
前記センサによって前記第１感知領域内に前記物体が侵入したことが感知された場合、前記撮像部によって前記第１感知領域を撮影させる制御部と、
前記撮像部による撮影結果から前記第１感知領域内に侵入した前記物体が人であるか否かを解析する画像解析部と、
を備えた、監視システム。

【0071】

（付記２）
前記制御部は、前記画像解析部によって前記第１感知領域内に侵入した前記物体が人ではないと解析された場合、前記撮像部による撮影を停止させる、
付記１に記載の監視システム。

【0072】

（付記３）
前記制御部は、前記画像解析部によって人と解析された前記物体が前記第１感知領域外に移動した場合、前記撮像部による撮影を停止させる付記１又は２に記載の監視システム。

【0073】

（付記４）
前記制御部は、前記画像解析部によって人と解析された前記物体が前記第１感知領域外に移動した場合、前記物体が移動した後の前記第１感知領域を前記撮像部によって撮影させたうえで、その撮影画像を、前記画像解析部によって人と解析された前記物体を含む撮影画像が格納される記憶部とは異なる記憶部に記憶させる、
付記１～３の何れか一項に記載の監視システム。

【0074】

（付記５）
前記センサは、さらに、前記物体が第２感知領域内に侵入したことを感知可能に構成され、
前記撮像部は、さらに、前記第２感知領域を撮影可能に構成され、
前記制御部は、前記センサによって前記第１及び前記第２感知領域の何れかに前記物体が侵入したことが感知された場合、前記撮像部によって前記第１及び前記第２感知領域のうち前記物体が侵入した感知領域を撮影させるように構成され、
前記画像解析部は、前記撮像部による撮影結果から前記第１及び前記第２感知領域の何れかに侵入した前記物体が人であるか否かを解析するように解析するように構成されている、
付記１に記載の監視システム。

【0075】

（付記６）
前記撮像部は、
前記第１感知領域を撮影可能に構成された第１カメラと、
前記第２感知領域を撮影可能に構成された第２カメラと、
を有し、
前記制御部は、前記センサによって前記第１及び前記第２感知領域の何れかに前記物体が侵入したことが感知された場合、前記第１及び前記第２カメラの何れかを起動することによって前記第１及び前記第２感知領域のうち前記物体が侵入した感知領域を撮影させる、
付記５に記載の監視システム。

【0076】

（付記７）
前記撮像部は、
撮影方向を調整可能に構成されたカメラを有し、
前記制御部は、前記センサによって前記第１及び前記第２感知領域の何れかに前記物体が侵入したことが感知された場合、前記カメラの撮影方向を調整することにより、当該カメラによって前記第１及び前記第２感知領域のうち前記物体が侵入した感知領域を撮影させる、
付記５に記載の監視システム。

【0077】

（付記８）
前記制御部は、前記画像解析部によって前記第１及び前記第２感知領域内の何れかに侵入した前記物体が人ではないと解析された場合、前記撮像部による撮影を停止させる、
付記５～７の何れか一項に記載の監視システム。

【0078】

（付記９）
前記制御部は、前記画像解析部によって人と解析された前記物体が前記第１及び前記第２感知領域外に移動した場合、前記撮像部による撮影を停止させる付記５～８の何れか一項に記載の監視システム。

【0079】

（付記１０）
前記制御部は、前記画像解析部によって人と解析された前記物体が前記第１及び前記第２感知領域外に移動した場合、前記物体が移動した後の前記第１及び前記第２感知領域の何れかを前記撮像部によって撮影させたうえで、その撮影画像を、前記画像解析部によって人と解析された前記物体を含む撮影画像が格納される記憶部とは異なる記憶部に記憶させる、
付記５～９の何れか一項に記載の監視システム。

【0080】

（付記１１）
前記画像解析部によって人と解析された前記物体を含む撮影画像が格納される記憶部をさらに備えた、
付記１～１０の何れか一項に記載の監視システム。

【0081】

（付記１２）
センサによって第１感知領域内に物体が侵入したことが感知された場合、撮像部によって前記第１感知領域を撮影するステップと、
画像解析部によって、前記撮像部による撮影結果から前記第１感知領域内に侵入した前記物体が人であるか否かを解析するステップと、
を備えた、監視方法。

【0082】

（付記１３）
センサによって第１感知領域内に物体が侵入したことが感知された場合、撮像部によって前記第１感知領域を撮影する処理と、
画像解析部によって、前記撮像部による撮影結果から前記第１感知領域内に侵入した前記物体が人であるか否かを解析する処理と、
をコンピュータに実行させる監視プログラム。

【符号の説明】

【0083】

１ 監視システム
２ 監視システム
１１ センサ
１２ 撮像部
１２＿１～１２＿４ カメラ
１３ 画像解析部
１４ 制御部
２１ 防犯用ストレージ
２２ 在庫用ストレージ
２３ 在庫管理用ストレージ
Ａ１～Ａ４ 感知領域
ＴＧ 物体

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】