特許 6704761 監視カメラシステム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6704761

(24)【登録日】2020年5月15日

(45)【発行日】2020年6月3日

(54)【発明の名称】監視カメラシステム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20200525BHJP

   H04N 5/232 20060101ALI20200525BHJP

   G08B 13/196 20060101ALI20200525BHJP

   G08B 25/00 20060101ALI20200525BHJP

【ＦＩ】

   H04N7/18 D

   H04N5/232 060

   G08B13/196

   G08B25/00 510M

【請求項の数】11

【全頁数】24

(21)【出願番号】特願2016-54230(P2016-54230)

(22)【出願日】2016年3月17日

(65)【公開番号】特開2017-169128(P2017-169128A)

(43)【公開日】2017年9月21日

【審査請求日】2019年1月16日

(73)【特許権者】

【識別番号】000001432

【氏名又は名称】グローリー株式会社

(74)【代理人】

【識別番号】100114306

【弁理士】

【氏名又は名称】中辻 史郎

(74)【代理人】

【識別番号】100148655

【弁理士】

【氏名又は名称】諏訪 淳一

(72)【発明者】

【氏名】盛脇 荘太郎

(72)【発明者】

【氏名】大塚 崇明

(72)【発明者】

【氏名】坂口 奈津美

(72)【発明者】

【氏名】岡 直樹

(72)【発明者】

【氏名】永井 悠葵

【審査官】 秦野 孝一郎

(56)【参考文献】

【文献】 特表２００９−５２１０２２（ＪＰ，Ａ）

【文献】 特開２００４−１７１２４１（ＪＰ，Ａ）

【文献】 特開２００７−１３４９１３（ＪＰ，Ａ）

【文献】 特開２００７−２４９７２２（ＪＰ，Ａ）

【文献】 特開２００３−１４３５９３（ＪＰ，Ａ）

【文献】 特開２００７−１１６１６（ＪＰ，Ａ）

【文献】 特開２０００−９９８６２（ＪＰ，Ａ）

【文献】 特開２０００−１１２０９（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ７／１８

Ｈ０４Ｎ ５／２２２−５／２５７

Ｇ０８Ｂ １３／００−１５／０２

Ｇ０８Ｂ ２３／００−３１／００

(57)【特許請求の範囲】

【請求項1】

複数種類の処理を実行する装置が設置された監視エリアを撮像する監視カメラ及び該監視カメラと接続された監視装置を含む監視カメラシステムであって、
前記監視装置は、
前記監視カメラによる撮像範囲内で前記装置の一部を含む任意の領域を指定して監視領域とする設定を受け付けると共に、前記処理ごとに、監視対象とする監視領域及び該監視領域における監視内容の設定を受け付ける制御部と、
一又は複数の監視領域が設定された監視領域設定、及び各監視領域における監視内容が設定された監視内容設定を保存する記憶部と
を備え、
前記監視内容設定には、前記監視装置が、前記装置を利用する人の手の動きを監視して前記監視領域へのアクセスの有無による変化に基づいて異常事態を検出する設定が含まれる
ことを特徴とする監視カメラシステム。

【請求項2】

前記監視カメラは画像センサ及び深度センサを含み、
前記制御部は、前記監視カメラによる撮像範囲を３次元空間として認識して、前記３次元空間内で前記監視領域の指定を受け付けることを特徴とする請求項１に記載の監視カメラシステム。

【請求項3】

前記制御部は、前記監視カメラで撮像中の画像上で、前記監視領域設定に基づいて監視領域を認識して該監視領域を前記監視内容設定に基づいて監視することを特徴とする請求項１に記載の監視カメラシステム。

【請求項4】

前記監視内容設定には、前記監視領域内に変化があったことを異常事態として検出する設定と、前記監視領域内に変化がなかったことを異常事態として検出する設定と、複数の監視領域内で変化を検出した順序が予め定められた順序と異なることを異常事態として検出する設定との少なくともいずれか１つが含まれることを特徴とする請求項１〜３のいずれか１項に記載の監視カメラシステム。

【請求項5】

前記監視内容設定では、異常事態の検出を報知するか否かを監視領域毎に設定可能であることを特徴とする請求項４に記載の監視カメラシステム。

【請求項6】

前記監視内容設定では、異常事態を検出した際に前記監視カメラで撮像した監視データを前記記憶部に保存するか否かを監視領域毎に設定可能であることを特徴とする請求項４又は５に記載の監視カメラシステム。

【請求項7】

前記制御部は、前記監視領域を設定する際に、前記監視カメラで撮像した画像上で２点が指定されると、該２点が空間領域内を通る対角線上の頂点となる直方体形状の空間領域が、前記監視領域として指定されたと認識することを特徴とする請求項１〜６のいずれか１項に記載の監視カメラシステム。

【請求項8】

監視エリアを撮像する監視カメラ及び該監視カメラと接続された監視装置を含む監視カメラシステムであって、
前記監視装置は、
前記監視カメラによる撮像範囲を３次元空間として認識して、前記３次元空間内で任意の空間領域を指定して監視領域とする設定を受け付けると共に、前記監視領域における監視内容の設定を受け付ける制御部と、
一又は複数の監視領域が設定された監視領域設定、及び各監視領域における監視内容が設定された監視内容設定を保存する記憶部と
を備え、
前記制御部は、先に指定された空間領域の一辺上で分割点が指定されると、該分割点を通る平面で前記空間領域を複数の空間領域に分割して、得られた各空間領域が前記監視領域として指定されたと認識する
ことを特徴とする監視カメラシステム。

【請求項9】

前記制御部は、先に指定された空間領域を縦又は横に等分割する分割数が指定されると、該指定に基づいて前記空間領域を複数の空間領域に等分割して、得られた各空間領域が前記監視領域として指定されたと認識することを特徴とする請求項７に記載の監視カメラシステム。

【請求項10】

前記制御部は、前記監視領域を設定する際に、前記監視カメラで撮像した画像上で所定のマーカが検出されると、該マーカの検出位置が、前記監視領域を設定するための指定位置であると認識することを特徴とする請求項１〜９のいずれか１項に記載の監視カメラシステム。

【請求項11】

前記制御部は、前記監視カメラで撮像した画像上で、空間領域を定義する第１マーカと、該空間領域を分割する分割点を指定する第２マーカとを検索して、前記第１マーカの検出位置に基づいて定義した空間領域を前記第２マーカの検出位置で分割して、得られた各空間領域が前記監視領域として指定されたと認識することを特徴とする請求項１０に記載の監視カメラシステム。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、所定の監視エリアを監視する監視カメラシステムに関し、特に、監視カメラによる撮像範囲内で任意の３次元空間を指定して監視領域とすることができる監視カメラシステムに関する。

【背景技術】

【0002】

従来、様々な場所で、所定の監視エリア内を監視する監視カメラシステムが利用されている。近年の監視カメラシステムでは、監視カメラで撮像した人や物体を３次元的に捉える技術も利用されている。例えば、特許文献１には、複数の距離センサを利用する監視システムが開示されている。この監視システムでは距離センサを利用して物体の高さを監視することができる。病院のトイレ等で物体の高さを監視することにより、患者に異変が生じて倒れた場合にも、床に置かれた備品やスリッパ等の物品と倒れた患者とを区別して、患者の異変を発見することができる。

【0003】

また、特許文献２には、２台のカメラで物体を撮像することにより、視差を利用して物体の３次元座標を算出する装置が開示されている。この装置では、監視領域内に進入した物体を背景と区別して検出することができる。検出結果を自動ドアの開閉制御に利用することにより、監視領域内に進入した人体を正確に検出して、人体の一部が通過した程度ではドアが開かないように自動ドアの開閉を制御することができる。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００４−２９９７４号公報

【特許文献2】特開２０１４−２７６４０号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、上記従来技術では、監視カメラによる撮像範囲内で任意の３次元空間を監視領域とすることができなかった。例えば、装置全体を撮像するようにカメラを設置して装置の利用者を監視する場合には、カメラによる撮像範囲全体が監視領域となり、装置に設けられている棚の中等、撮像範囲内にある所定の３次元空間を監視領域として設定することができなかった。

【0006】

本発明は、上述した従来技術による問題点を解消するためになされたもので、カメラによる撮像範囲内で任意の３次元空間を指定して監視領域とすることができる監視カメラシステムを提供することを目的とする。

【課題を解決するための手段】

【0007】

上述した課題を解決し、目的を達成するため、本発明は、複数種類の処理を実行する装置が設置された監視エリアを撮像する監視カメラ及び該監視カメラと接続された監視装置を含む監視カメラシステムであって、前記監視装置は、前記監視カメラによる撮像範囲内で前記装置の一部を含む任意の領域を指定して監視領域とする設定を受け付けると共に、前記処理ごとに、監視対象とする監視領域及び該監視領域における監視内容の設定を受け付ける制御部と、一又は複数の監視領域が設定された監視領域設定、及び各監視領域における監視内容が設定された監視内容設定を保存する記憶部とを備え、前記監視内容設定には、前記監視装置が、前記装置を利用する人の手の動きを監視して前記監視領域へのアクセスの有無による変化に基づいて異常事態を検出する設定が含まれることを特徴とする。

【0008】

また、本発明は、上記発明において、前記制御部は、前記監視カメラで撮像中の画像上で、前記監視領域設定に基づいて監視領域を認識して該監視領域を前記監視内容設定に基づいて監視することを特徴とする。

【0009】

また、本発明は、上記発明において、前記監視カメラは画像センサ及び深度センサを含み、前記制御部は、前記監視カメラによる撮像範囲を３次元空間として認識して、前記３次元空間内で前記監視領域の指定を受け付けることを特徴とする。

【0010】

また、本発明は、上記発明において、前記監視内容設定には、前記監視領域内に変化があったことを異常事態として検出する設定と、前記監視領域内に変化がなかったことを異常事態として検出する設定と、複数の監視領域内で変化を検出した順序が予め定められた順序と異なることを異常事態として検出する設定との少なくともいずれか１つが含まれることを特徴とする。

【0011】

また、本発明は、上記発明において、前記監視内容設定では、異常事態の検出を報知するか否かを監視領域毎に設定可能であることを特徴とする。

【0012】

また、本発明は、上記発明において、前記監視内容設定では、異常事態を検出した際に前記監視カメラで撮像した監視データを前記記憶部に保存するか否かを監視領域毎に設定可能であることを特徴とする。

【0013】

また、本発明は、上記発明において、前記制御部は、前記監視領域を設定する際に、前記監視カメラで撮像した画像上で２点が指定されると、該２点が空間領域内を通る対角線上の頂点となる直方体形状の空間領域が、前記監視領域として指定されたと認識することを特徴とする。

【0014】

また、本発明は、監視エリアを撮像する監視カメラ及び該監視カメラと接続された監視装置を含む監視カメラシステムであって、前記監視装置は、前記監視カメラによる撮像範囲を３次元空間として認識して、前記３次元空間内で任意の空間領域を指定して監視領域とする設定を受け付けると共に、前記監視領域における監視内容の設定を受け付ける制御部と、一又は複数の監視領域が設定された監視領域設定、及び各監視領域における監視内容が設定された監視内容設定を保存する記憶部とを備え、前記制御部は、先に指定された空間領域の一辺上で分割点が指定されると、該分割点を通る平面で前記空間領域を複数の空間領域に分割して、得られた各空間領域が前記監視領域として指定されたと認識することを特徴とする。

【0015】

また、本発明は、上記発明において、前記制御部は、先に指定された空間領域を縦又は横に等分割する分割数が指定されると、該指定に基づいて前記空間領域を複数の空間領域に等分割して、得られた各空間領域が前記監視領域として指定されたと認識することを特徴とする。

【0016】

また、本発明は、上記発明において、前記制御部は、前記監視領域を設定する際に、前記監視カメラで撮像した画像上で所定のマーカが検出されると、該マーカの検出位置が、前記監視領域を設定するための指定位置であると認識することを特徴とする。

【0017】

また、本発明は、上記発明において、前記制御部は、前記監視カメラで撮像した画像上で、空間領域を定義する第１マーカと、該空間領域を分割する分割点を指定する第２マーカとを検索して、前記第１マーカの検出位置に基づいて定義した空間領域を前記第２マーカの検出位置で分割して、得られた各空間領域が前記監視領域として指定されたと認識することを特徴とする。

【発明の効果】

【0018】

本発明によれば、監視カメラによる撮像範囲内を３次元空間として認識して、この３次元空間内で任意の空間領域を監視領域として設定すると共に、設定した監視領域毎に監視内容を設定することができる。例えば、装置の利用を監視する際に、装置の２つの構成部をそれぞれ別の監視領域として設定して、一方の構成部では操作を禁止するように監視して、他方の構成部は必ず操作するように監視するというように、各監視領域を異なる監視内容で監視することができる。

【図面の簡単な説明】

【0019】

【図1】図１は、監視エリアを監視する監視カメラシステムを説明するための模式図である。

【図2】図２は、監視カメラシステムを構成する監視カメラ及び監視装置の機能構成概略を示すブロック図である。

【図3】図３は、監視カメラを利用して取得する画像の例を示す模式図である。

【図4】図４は、監視領域設定画面の例を示す図である。

【図5】図５は、監視内容設定画面の例を示す図である。

【図6】図６は、各監視領域へのアクセス順序を設定する監視内容設定画面の例を示す図である。

【図7】図７は、監視内容設定を一覧表示した画面例を示す図である。

【図8】図８は、監視処理の流れを示すフローチャートである。

【図9】図９は、複数の監視領域を同時に設定する監視領域設定画面の例を示す図である。

【図10】図１０は、監視領域の設定方法を説明するための図である。

【発明を実施するための形態】

【0020】

以下に、添付図面を参照して、本発明に係る監視カメラシステムについて詳細に説明する。監視カメラシステムは、監視対象とする所定の監視エリア内をカメラで撮像して監視する機能を有する。本実施形態では、銀行等の金融機関で、貨幣処理装置が設置されたエリアを監視エリアとする場合を例に、監視カメラシステムについて具体的に説明する。

【0021】

監視カメラシステムの概要を説明すると、監視カメラシステムでは、監視カメラによる撮像範囲内で一又は複数の任意の３次元空間を監視領域として指定すると共に、監視領域毎に監視内容を設定することができる。具体的には、例えば、人がアクセスすることを禁止する３次元空間を監視領域に指定して、この監視領域へのアクセスがあったことを異常事態として検出する設定とすることができる。また、例えば、人が必ずアクセスしなければならない３次元空間を監視領域に指定して、この監視領域へのアクセスがなかったことを異常事態として検出する設定とすることができる。また、複数の監視領域を指定して、各監視領域にアクセスする順序を監視するように監視内容を設定することができる。これにより、例えば所定処理を実行する人を監視して、設定と異なる順序で監視領域へアクセスしたことを異常事態として検出して、手順の誤りを警告したり正しい手順を知らせたりすることができる。また、監視カメラシステムでは、異常事態を検出した際の静止画像や動画像を監視データとして記録することができるので、常にデータを記録し続ける場合に比べて監視データの保存容量を削減することができる。

【0022】

まず、図１〜図３を参照しながら監視カメラシステムの機能及び構成について説明する。図１は、監視エリアを監視する監視カメラシステムを説明するための模式図である。図２は、監視カメラシステムを構成する監視カメラ７０及び監視装置１００の機能構成概略を示すブロック図である。図３は、監視カメラ７０を利用して取得する画像の例を示す模式図である。

【0023】

監視カメラシステムは、監視カメラ７０及び監視装置１００を含んで構成される。図１に示すように、監視カメラ７０は、貨幣処理装置１全体とその周辺とを含む監視エリアを撮像可能な位置に設置されている。そして、図２に示すように、監視カメラ７０は、監視装置１００とデータ通信可能に接続されている。監視装置１００の設置場所は特に限定されず、例えば、貨幣処理装置１が設置されている部屋とは別の部屋に設置される。

【0024】

図１及び図３に示す貨幣処理装置１は、出納機と呼ばれる装置で、所定枚数の紙幣を結束した結束紙幣を処理する結束紙幣処理部１０、バラ紙幣を処理するバラ紙幣処理部２０、所定枚数の硬貨を包装した包装硬貨を処理する包装硬貨処理部３０、及びバラ硬貨を処理するバラ硬貨処理部４０を含んでいる。結束紙幣処理部１０では、結束紙幣出金口１１から結束紙幣を出金することができる。バラ紙幣処理部２０では、バラ紙幣出金口２１からバラ紙幣を出金したり、バラ紙幣入金口２２からバラ紙幣を入金したりすることができる。包装硬貨処理部３０では、包装硬貨出金口３１から包装硬貨を出金することができる。バラ硬貨処理部４０では、バラ硬貨出金口４１からバラ硬貨を出金したり、バラ硬貨入金口４２からバラ紙幣を入金したりすることができる。

【0025】

また、貨幣処理装置１は、包装硬貨処理部３０及びバラ硬貨処理部４０の上部に、貨幣処理結果等の情報を印字したレシートを発行するためのプリンタ５０と、各種の情報を表示すると共に貨幣処理に関する操作を受け付けるタッチパネル式の液晶表示装置から成る操作表示部５１と、認証処理時にＩＤカードから認証用データを読み取るためのＩＤカードリーダ５２と、現金以外の有価証券類を投入するための現金外ボックス５３とを備えている。また、貨幣処理装置１の上部には、棚６０が設けられている。棚６０の内部は上下２段、左右２列に区切られており、棚６０内に４つの収納部が形成されている。各収納部は、現金を運んできたトレイ、処理待ち状態の現金、貨幣処理装置１で処理した現金の伝票等を含む書類や備品等を収納するために利用される。

【0026】

図２に示すように、監視カメラ７０は、画像センサ７１及び深度センサ７２を有している。画像センサ７１は、例えばＣＣＤやＣＭＯＳ等、カラーの可視光画像を撮像するための撮像素子を含む。監視装置１００は、画像センサ７１を利用して、貨幣処理装置１や貨幣処理装置１の利用者等を撮像したカラーの静止画像及び動画像を取得する。深度センサ７２は、所定パターンに配列した赤外線スポット光を照射する照射部と、各スポット光の反射光を受光する赤外線カメラとを含む。監視装置１００は、深度センサ７２を利用して、所定パターンに配列したスポット光を撮像対象に照射して、得られた反射光の状態から、撮像対象の位置及び奥行き（深度）を認識できるようになっている。

【0027】

このように、画像センサ７１及び深度センサ７２を有する監視カメラ７０として、例えば、マイクロソフト社製のＫｉｎｅｃｔ（登録商標）を利用する。そして、監視装置１００で専用のソフトウェアプログラムを利用することにより、監視装置１００は、予め監視領域として設定した３次元空間内の変化を検出することができる。具体的には、３次元空間内へ物体が追加された際や、３次元空間内から物体がなくなった際に、この変化を検出することができる。また、貨幣処理装置１の利用者による３次元空間内へのアクセス、すなわち３次元空間内への人体の進入があった際に、この変化を検出することができる。

【0028】

監視装置１００は、例えばコンピュータ装置から成り、図２に示すように、各種情報の表示及び各種情報の入力を行うための操作表示部１３０と、各種データを保存するための記憶部１２０と、各部を制御して以下に説明する機能及び動作を実現する制御部１１０とを有している。

【0029】

記憶部１２０は、ハードディスクや半導体メモリ等の不揮発性の記憶装置から成り、監視領域設定データ１２１、監視内容設定データ１２２及び監視データ１２３の保存に利用される。監視領域設定データ１２１は、監視カメラ７０による撮像範囲内で任意の３次元空間を指定して設定した監視領域に関する設定データである。監視内容設定データ１２２は、各監視領域においてどのような変化を異常事態として検出するか、すなわち各監視領域をどのように監視するかを設定した監視内容に関する設定データである。監視データ１２３は、監視領域で異常事態を検出した際に監視カメラ７０で撮像した静止画像や動画像等を保存したデータである。記憶部１２０は、この他、制御部１１０の動作に必要なプログラムやデータの保存にも利用される。

【0030】

制御部１１０は、深度センサ７２を利用して、画像センサ７１による撮像範囲を３次元空間として認識する。具体的には、制御部１１０は、監視カメラ７０による撮像範囲に３次元の直交座標を設定して、撮像範囲内にある物体や人の位置及び大きさを、３次元座標で認識することができる。例えば、制御部１１０は、貨幣処理装置１の各部を３次元座標で認識する。また、制御部１１０は、３次元空間内の一部の３次元空間（空間領域）を指定して設定された監視領域についても、これを３次元座標で認識することができる。これにより、貨幣処理装置１の構成部を含むように設定された監視領域から物体がなくなった場合や、監視領域へ物体が追加された場合に、制御部１１０は、これを検出することができる。

【0031】

また、制御部１１０は、深度センサ７２を利用して、貨幣処理装置１を利用する人８０の関節８１の位置を認識して、各関節８１の３次元座標を取得することができる。そして、制御部１１０は、対応する２つの関節８１の座標を接続線８２によって接続することにより、図３（ｂ）に示すように人８０の骨格を認識することができる。

【0032】

具体的には、制御部１１０は、図３（ａ）に示す人８０の頭、左右の肩、左右の肩の中央、左右の肘、左右の手首、左右の手、背骨、腰の左右、腰の中央、左右の膝、左右のかかと、左右の足の２０箇所を関節８１として、それぞれを第１関節〜第２０関節として区別して認識する。例えば、第１関節は人の頭を示すというように、各関節８１と人体上の部位との関係が分かっているので、対応する２つの関節８１を接続線８２で結ぶことにより、図３（ｂ）に示すように、人型骨格を表すことができる。そして、制御部１１０は、この人型骨格の様子から、人８０の動きや姿勢を認識することができる。

【0033】

また、制御部１１０は、各関節８１の移動を３次元座標の変化として追跡して、貨幣処理装置１を利用する人８０の動きを、人型骨格の動きとして認識することができる。監視カメラ７０は、貨幣処理装置１を利用する人８０を監視可能な位置に設置されているが、例えば左手が胴体の陰に隠れて監視カメラ７０で撮像できなくなったような場合でも、制御部１１０は、左腕の動き等から左手の位置を推定して人８０の動きの監視を継続する。図３（ｂ）に示すように、人８０を人型骨格として捉えることにより、結束紙幣出金口１１、バラ紙幣出金口２１、バラ紙幣入金口２２、包装硬貨出金口３１、バラ硬貨出金口４１、バラ硬貨入金口４２等の各部を利用して貨幣を処理する人８０の動きを監視することができる。これにより、制御部１１０は、監視領域として設定されている空間領域の内部に人８０が手を入れた場合等、空間領域内への人体の進入を、監視領域の変化として検出することができる。

【0034】

監視装置１００では、図１に示すように、貨幣処理装置１を利用する人８０を監視カメラ７０で撮像して、図３（ａ）に示すように人８０の外見をそのまま撮像した静止画像及び動画像と、図３（ｂ）に示すように、人８０を、複数の関節８１及び接続線８２から成る人型骨格として捉えた静止画像及び動画像とを取得することができる。制御部１１０は、記憶部１２０の一部の記憶領域をリングバッファとして利用しており、一番古いデータを最新のデータで上書きしながら、監視カメラ７０で撮像した動画像を所定時間分保存している。これにより、異常事態を検出した際には、貨幣処理装置１を利用していた人物を撮像した静止画像や動画像を、監視データ１２３として記憶部１２０に保存できるようになっている。

【0035】

なお、動画像については、図３（ａ）に示すように人８０の外見を撮像した通常の動画像形式で保存する他、図３（ｂ）に示す人型骨格の時系列変化を記録したテキスト形式で保存することも可能となっている。具体的には、人８０の動きを人型骨格の動きとして保存するため、各関節８１の３次元座標を示すテキストを時系列で記録する。そして、記録した各関節８１の位置を、監視エリアを撮像した静止画像上で再現して、人型骨格を示すことにより、記録した人８０の動きを人型骨格の動きで動画像のように表示することができる。

【0036】

次に、監視領域の設定方法について説明する。図４は、監視領域設定画面の例を示す図である。監視装置１００の操作表示部１３０を操作して監視領域の設定を開始すると、画面上に、図４に示す設定画面が表示される。この画面上でベース画像取得ボタン３００を押すと、監視カメラ７０によって監視エリアが撮像され、画面左側に貨幣処理装置１の静止画像２００が表示される。また、画面上には、監視カメラ７０による撮像範囲に設定されたＸ軸、Ｙ軸及びＺ軸の各座標軸が表示される。これらの座標軸は、ＸＹ平面が貨幣処理装置１の前面と平行になり、ＹＺ平面が貨幣処理装置１の側面と平行になり、ＺＸ平面が貨幣処理装置１の上面と平行になるように設定されている。

【0037】

静止画像２００を取得した制御部１１０は、監視カメラ７０の画像センサ７１で撮像した画像に表れる陰影や背景との境界、深度センサ７２を利用して得られた深度情報等から、撮像範囲内に設定した３次元空間における、貨幣処理装置１各部の３次元座標を認識する。これにより、図４に示す静止画像２００上で、一部の空間領域を指定して、これを監視領域として設定することができる。

【0038】

例えば、図３に示すバラ紙幣入金口２２を監視領域として指定する場合には、まず、操作表示部１３０を操作して、図４に示す貨幣処理装置１の静止画像２００上で、バラ紙幣入金口２２の装置手前側（Ｚ軸負方向側）にある左下隅の点２１０ａを指定する。続いて、装置背面側（Ｚ軸正方向側）にある右上隅の点２１０ｂを指定すると、制御部１１０は、点２１０ａを通りＸＹ平面と平行な面、点２１０ａを通りＹＺ平面と平行な面、及び点２１０ａを通りＺＸ平面と平行な面の３つの面と、点２１０ｂを通りＸＹ平面と平行な面、点２１０ｂを通りＹＺ平面と平行な面、及び点２１０ｂを通りＺＸ平面と平行な面の３つの面とによって囲まれた直方体形状の空間領域を認識する。すなわち、点２１０ａ及び点２１０ｂが、空間領域内を通る対角線上の２点となるように、ＸＹ平面に平行な面、ＹＺ平面に平行な面及びＺＸ平面に平行な面で定義される直方体形状の空間領域を認識する。

【0039】

具体的には、制御部１１０は、点２１０ａの３次元座標（Ｘａ，Ｙａ，Ｚａ）と、点２１０ｂの３次元座標（Ｘｂ，Ｙｂ，Ｚｂ）とに基づいて、Ｘ軸方向の範囲をＸａ〜Ｘｂ、Ｙ軸方向の範囲をＹａ〜Ｙｂ、Ｚ軸方向の範囲をＺａ〜Ｚｂとする直方体形状の空間領域が指定されたと認識して、図４に示すように、これらの座標範囲を示す座標情報３０１を画面右側に表示する。また、制御部１１０は、画面の静止画像２００上で、認識した直方体形状の空間領域２１０の色を変えるなどして、この空間を他と区別可能に表示する。

【0040】

図４に示すように、画面右側には、操作領域設定３０２として、入金口、出金口等、貨幣処理装置１を利用する際に操作する構成部のボタンが一覧表示される。例えば、画面左側の静止画像２００上で空間領域２１０を指定して、画面右側の入金口ボタン３０２ａを押すことにより、この領域を、名称が入金口の監視領域２１０として指定することができる。同様に、出金口ボタン３０２ｂを押せば、指定した空間領域を、名称が出金口の監視領域として指定することができる。複数の入金口を監視領域として設定したり、複数の出金口を監視領域として設定したりする場合があるので、各監視領域を区別できるように、監視領域の名称の末尾には「Ａ」や「Ｂ」等の識別子が追加されるようになっている。

【0041】

なお、画面右側の操作領域設定３０２の中に、監視領域の名称として利用可能なボタンが含まれていない場合には、操作領域設定３０２の下にある、その他領域設定ボタン３０３を押して、名称を手入力して指定することができる。

【0042】

監視領域及び名称を指定すると、指定済みの監視領域及び名称が、静止画像２００上に表示される。具体的には、指定済みの監視領域が、色を変えたり所定の線で囲ったりするなどして他の領域と区別可能に表示され、監視領域上又は監視領域の近傍に監視領域の名称が表示される。図４の例では、図３に示す結束紙幣出金口１１を名称「出金口Ａ」の監視領域２１１として設定済みであり、棚６０の右上の収納部を名称「棚Ａ」の監視領域２１２として指定済みであることを示している。

【0043】

操作領域設定３０２に表示されるボタン３０２ａ、３０２ｂや、その他領域設定ボタン３０３は、貨幣処理装置１を利用する利用者がアクセスする領域、すなわち利用者が操作する領域や、貨幣や物品を入れたり出したりする領域を指定する際に利用する。これに対して、例えば、管理者のみに利用が許可されたな空間領域を、利用者によるアクセスを禁止する監視領域として指定する場合には、禁止領域設定ボタン３０４を利用する。画面左側の静止画像２００上で空間領域を指定した後、画面右側の禁止領域設定ボタン３０４を押すことにより、この空間領域を、名称が禁止領域の監視領域として指定することができる。図４の例では、図３に示す棚６０の左上の収納部を名称「禁止領域Ａ」の監視領域２１３として指定済みであることを示している。

【0044】

図４に示すように、静止画像２００上には、指定済みの監視領域２１１〜２１３が表示される。この画面上で、指定済みの監視領域を選択して、画面右側にある領域解除ボタン３０５を押すと、監視領域の指定を解除することができる。また、監視領域を選択して、閾値設定ボタン３０６を押すと、この監視領域で異常事態を検出するための閾値を変更することができる。具体的には、例えば、禁止領域Ａとして指定した監視領域２１３内に手や物体が入ったことを異常事態として検出する場合に、監視領域２１３として指定した空間領域内部のどこまで入ったら異常事態として検出するのかを指定することができる。例えば、監視領域２１３内のどの座標位置で手や物体を検出したら異常事態と判定するのかを指定する。

【0045】

なお、静止画像２００上で直方体形状の空間領域を指定する方法が、図４に示したように空間領域内を通る対角線上の２点を指定する方法に限定されるものではない。例えば、画面上の座標情報３０１で座標範囲を手入力して空間を指定することもできる。また、例えば、静止画像２００上で、ＸＹ平面に平行な矩形形状の面を、この面を定義する４点によって指定した後、指定面からのＺ軸方向の距離、すなわち奥行を指定することにより、直方体形状の空間領域を指定することもできる。また、この他、監視装置１００では、画面右側の領域分割ボタン３０７を押して別画面を表示し、この画面上で複数の監視領域を同時に指定することもできるが詳細は後述する。

【0046】

このように、監視装置１００では、監視カメラ７０で撮像した静止画像２００上で任意の空間領域を監視領域として指定することができる。また、指定した監視領域には、各監視領域を区別可能な名称を付けることができる。監視領域の名称は、予め準備されたボタンを押して指定することもできるし、手入力することも可能となっている。

【0047】

こうして、静止画像２００上で、一又は複数の監視領域を指定した後、図４に示す画面下部にある完了ボタンを押すと、制御部１１０は、指定された各監視領域の位置及び大きさを、監視カメラ７０による撮像範囲内で認識するための情報を、監視領域設定データ１２１に登録して記憶部１２０で管理する。

【0048】

図４に示す操作表示部１３０の監視領域設定画面で完了ボタンが押されると、続いて、制御部１１０は、各監視領域について監視内容を設定するための監視内容設定画面を表示する。なお、図４に示す画面上でキャンセルボタンを押した場合には、静止画像２００上で指定した監視領域の指定が全てキャンセルされる。

【0049】

図５は、監視内容設定画面の例を示す図である。図５に示すように、画面左側には貨幣処理装置１の静止画像２０１が表示される。また、静止画像２０１上には、監視領域設定画面で設定された各監視領域２１０〜２１７が表示される。各監視領域２１０〜２１７は、色を変えるなどして静止画像２０１上でそれぞれを区別できるように表示される。また、各監視領域２１０〜２１７の領域上又は領域近傍には、各監視領域２１０〜２１７の名称がアイコンの形で表示される。

【0050】

例えば、図３に示す結束紙幣出金口１１を名称「出金口Ａ」の監視領域２１１として設定すると、図５に示すように、静止画像２０１上では、監視領域２１１が、周囲の領域及び他の監視領域と区別可能に表示され、監視領域２１１上に、名称を示すアイコン２１１ａが表示される。監視領域の名称を示すアイコンは、操作表示部１３０を操作してドラッグアンドドロップすることにより画面右側の設定枠３２０内へ移動できるようになっている。

【0051】

画面右側上部には、先に行われた監視領域設定でアクセスを常時禁止する監視領域として設定された監視領域を示す情報３１０が表示される。図５の例では、貨幣処理装置１の棚６０の左上の収納部が禁止領域Ａに設定されているので、常時アクセス禁止領域として、禁止領域Ａを示す情報３１０が表示されている。

【0052】

禁止領域Ａとして設定されている監視領域２１３では、貨幣処理装置１で行われる貨幣処理の処理内容によらずアクセスが禁止される一方で、他の監視領域では、貨幣処理の処理内容に応じて監視内容を設定することができる。監視内容の設定は、各監視領域のアイコンを設定枠３２０内へ入れることによって行う。

【0053】

設定枠３２０内には、処理名３２１、アクセス禁止枠３３０、アクセス検出枠３４０、及びアクセス必須枠３５０と、登録ボタン３２４とが表示される。処理名３２１の枠内には、貨幣処理装置１で行われる貨幣処理の処理名を入力する。具体的には、処理名３２１の枠の右端にあるリストボタンを押すと、貨幣処理装置１で行われる貨幣処理の処理名がリスト表示されるので、監視内容を設定する処理名を選択して入力する。図５は、処理名として「出金処理Ｘ」を選択した例を示している。

【0054】

なお、処理名３２１の下側にある矢印ボタン３２２を押すことにより各処理名を順に呼び出すことも可能となっている。また、設定済みの処理名を呼び出した状態で、設定削除ボタン３２３を押すと、この処理名に係る設定内容を削除することができる。

【0055】

処理名３２１で貨幣処理の処理名を選択した後、この貨幣処理を行う際の監視内容を設定する。静止画像２０１上に表示されている監視領域のアイコンをドラッグアンドドロップする操作を行って、アクセス禁止枠３３０内にアイコンを入れると、このアイコンが示す監視領域へのアクセスを禁止する設定となる。この設定では、貨幣処理装置１で、処理名３２１で示す貨幣処理を行っている間、制御部１１０が、監視領域へのアクセスの有無を監視して、アクセスがあったことを異常事態として検出する。例えば、監視領域として設定された空間領域内に人体の一部が進入した場合に、制御部１１０は、監視領域へのアクセスがあったものとして、これを異常事態として検出する。

【0056】

例えば、処理名３２１として、出金口を利用しない入金処理の処理名を選択して、結束紙幣出金口１１について設定した監視領域２１１の「出金口Ａ」のアイコンをアクセス禁止枠３３０に入れる。これにより、貨幣処理装置１で、この設定に係る入金処理が行われる間、結束紙幣出金口１１へのアクセスを監視して、入金処理中にアクセスするはずがない結束紙幣出金口１１へ手を入れる動作を検出した場合に、これを異常事態として検出して警報等の報知処理を実行することができる。

【0057】

監視領域のアイコンをアクセス検出枠３４０内に入れると、このアイコンが示す監視領域へのアクセスを検出する設定となる。この設定では、処理名３２１で示す貨幣処理を行っている間、制御部１１０が、監視領域へのアクセスの有無を監視する。

【0058】

アクセス検出枠３４０に係る設定は、監視領域へのアクセスを検出して静止画像や動画像等を記憶部１２０に保存するために利用する。例えば、処理名３２１で、バラ紙幣又はバラ硬貨を入金する入金処理の処理名を選択して、バラ紙幣入金口２２について設定した監視領域２１０の「入金口Ａ」のアイコンと、バラ硬貨入金口４２について設定した監視領域２１７の「入金口Ｂ」のアイコンとをアクセス検出枠３４０に入れる。この結果、貨幣処理装置１で、この設定に係る入金処理が行われる間、制御部１１０は、バラ紙幣入金口２２へのアクセス及びバラ硬貨入金口４２へのアクセスを監視する。そして、制御部１１０は、バラ紙幣入金口２２へバラ紙幣を入れる動作を検出した場合、及びバラ硬貨入金口４２へバラ硬貨を入れる動作を検出した場合に、これらの動作を記録した静止画像や動画像を監視データ１２３として保存する。これにより、予め監視領域として設定した複数の構成部の中から、貨幣処理中に操作された構成部に関する画像を記録することができる。

【0059】

監視領域のアイコンをアクセス必須枠３５０内に入れると、このアイコンが示す監視領域へのアクセスを必須とする設定となる。この設定では、処理名３２１で示す貨幣処理を行っている間、制御部１１０が、監視領域へのアクセスの有無を監視する。そして、処理中に監視領域へのアクセスがなかった場合に、制御部１１０がこれを異常事態として検出する。

【0060】

例えば、処理名３２１として、貨幣処理装置１から結束紙幣を出金して結束帯を解き、バラ紙幣にしてから貨幣処理装置１に入金する貨幣処理の処理名を選択して、バラ紙幣入金口２２について設定された監視領域２１０の「入金口Ａ」のアイコンをアクセス必須枠３５０に入れる。この結果、貨幣処理装置１で、この設定に係る貨幣処理が行われる間、制御部１１０は、バラ紙幣入金口２２へのアクセスを監視する。そして、処理中にバラ紙幣入金口２２へのアクセスがなかった場合に、制御部１１０は、これを異常事態として検出して警報等の所定の報知処理を実行する。これにより、貨幣処理装置１の利用者が、出金した紙幣を貨幣処理装置１へ入金する操作を忘れている場合に、これを報知することができる。

【0061】

図５は、処理名が「出金処理Ｘ」の出金処理を行う間、棚６０の右上収納部に設定された名称「棚Ａ」の監視領域２１２をアクセス禁止として、包装硬貨出金口３１に設定された名称「出金口Ｃ」の監視領域２１５をアクセス検出の対象として、バラ紙幣出金口２１に設定された名称「出金口Ｂ」の監視領域２１０をアクセス必須として設定した画面例を示している。この状態で登録ボタン３２４を押すと、制御部１１０は、画面上で設定された出金処理Ｘに係る各設定内容を、監視内容設定データ１２２に登録して記憶部１２０で管理する。

【0062】

また、監視装置１００では、貨幣処理装置１で貨幣処理を行う間に各部へアクセスする順序を設定して、各部へのアクセスが設定通りに行われることを監視することも可能となっている。図５に示す設定画面で、アクセス必須枠３５０内に表示されている順序指定チェックボックス３５１にチェックを入れることで、必ずアクセスする監視領域のアクセス順序を指定することができる。

【0063】

図６は、各監視領域へのアクセス順序を設定する監視内容設定画面の例を示す図である。図６に示すように、順序指定チェックボックス３５１にチェックを入れた状態で、監視領域のアイコンをアクセス必須枠３５０に入れると、監視領域を示すアイコンが上下方向に順に並ぶようになっている。各アイコンの左側には順序を示す数字が表示され、この数字の順で各監視領域へのアクセスが行われることを監視する設定となる。なお、アクセス必須枠３５０内で監視領域を示すアイコンをドラッグアンドドロップする操作を行うことにより、順序を入れ替えることも可能となっている。

【0064】

図６は、処理名３２１が「入金処理Ｐ」の入金処理を行う際に、棚６０の右上収納部に設定された名称「棚Ａ」の監視領域２１２にアクセスした後に、バラ紙幣入金口２２に設定された名称「入金口Ａ」の監視領域２１１にアクセスすることを監視する設定の画面例を示している。

【0065】

アクセス必須枠３５０にアイコンを入れてアクセス順序を設定すると、画面左側の静止画像２０１上にも監視領域のアクセス順序を示す数字が表示される。具体的には、名称「棚Ａ」の監視領域２１２のアクセス順序を１番に設定すると、図６に示すように、監視領域２１２のアイコン２１２ａの近傍に、順番を示す数字２１２ｂが表示される。同様に、アクセス順序が２番に設定された名称「入金口Ａ」の監視領域２１０のアイコン近傍にも順番を示す数字が表示される。

【0066】

こうしてアクセス必須枠３５０内に複数の監視領域のアイコンを入れて各監視領域へのアクセス順序を指定した状態で登録ボタン３２４を押すと、制御部１１０は、画面上で設定された入金処理Ｐに係る設定内容を、監視内容設定データ１２２に登録して記憶部１２０で管理する。

【0067】

なお、図６には示していないが、アクセス順序を指定する設定画面においても、処理中にアクセスを禁止する監視領域をアクセス禁止枠３３０で設定することもできるし、処理中にアクセスを検出する監視領域をアクセス検出枠３４０で設定することもできる。

【0068】

このように監視装置１００では、貨幣処理装置１の静止画像２０１上に、予め設定した各監視領域を区別可能に表示することができる。静止画像２０１上には、各監視領域の名称を示すアイコンも表示される。このアイコンをドラッグアンドドロップする操作を行って画面右側に表示された枠内に入れることにより、監視領域における監視内容を設定することができる。アクセスを禁止してアクセスされたことを異常事態として検出したい場合にはアクセス禁止枠３３０へアイコンを入れ、アクセスを必須としてアクセスされなかったことを異常事態として検出したい場合にはアクセス必須枠３５０へアイコンを入れ、アクセスを許可してアクセスされたことを検出したい場合にはアクセス検出枠３４０へアイコンを入れれば、監視内容を設定することができる。また、アクセスを必須とする複数の監視領域について、アクセス順序を設定したい場合には、順序指定チェックボックス３５１にチェックを入れてアイコンを並び替えれば、監視内容を設定することができる。

【0069】

図５及び図６に示す監視内容設定画面で、画面下部にある「戻る」と表示されたボタンを押すと、図４に示す監視領域設定画面に戻る。また、完了ボタンを押すと、監視領域及び監視内容の設定を完了することができる。

【0070】

また、画面下部にある設定一覧ボタン３２５を押すと、監視内容に関する設定を一覧表示することができる。図７は、監視内容設定を一覧表示した画面例を示す図である。図７に示すＮｏ．００１の設定は、図５及び図６に示す常時アクセス禁止領域に対応しており、貨幣処理装置１で行われる貨幣処理の処理内容によらず、常時アクセスを禁止する監視領域の設定内容を示している。Ｎｏ．００２の設定は、図５に示す出金処理Ｘの設定に対応し、Ｎｏ．００３の設定は、図６に示す入金処理Ｐの設定に対応している。

【0071】

図７に示す「設定Ｎｏ．」の項目は各設定を管理するための番号を示し、「処理名」の項目は監視内容設定画面の処理名３２１で選択した処理名を示し、「監視領域」の項目は各監視領域の名称を示している。

【0072】

また、「監視内容」の項目は、図５及び図６に示す監視内容設定画面で行った設定内容を示している。アクセス禁止枠３３０にアイコンを入れた監視領域については「アクセス禁止」と表示され、アクセス検出枠３４０にアイコンを入れた監視領域については「アクセス検出」と表示される。順序指定チェックボックス３５１にチェックを入れずにアクセス必須枠３５０にアイコンを入れた監視領域については「アクセス必須」と表示される。また、順序指定チェックボックス３５１にチェックを入れて、アクセス必須枠３５０でアクセス順序を指定した監視領域については、「アクセス順序」の文字と指定順序を示す番号を結合した文字列が表示される。

【0073】

図５及び図６に示す監視内容設定画面で監視内容を設定すると、予め定められている初期設定に基づいて、制御部１１０が、監視データ１２３を記録するか否かを設定すると共に、異常事態の検出を報知するか否かを設定する。これら初期設定に基づいて行われる異常事態報知及び監視データ記録に関する設定内容は、図７に示す一覧表示画面の「監視データ記録」及び「異常事態報知」の項目で確認することができる。「監視データ記録」のチェックボックスにチェックが入っている場合は監視データ１２３の記録が実行され、「異常事態報知」のチェックボックスにチェックが入っている場合は異常事態の報知処理が実行される。

【0074】

監視領域へのアクセスを常時禁止する常時アクセス禁止設定と、貨幣処理中に監視領域へのアクセスを禁止するアクセス禁止設定については、監視領域へのアクセスを異常事態として検出して、異常事態検出時の静止画像や動画像を監視データ１２３として記録すると共に、異常事態検出を報知する設定が初期設定となっている。また、監視領域へのアクセスを検出するアクセス検出設定については、アクセスの有無を監視することが目的であるため、監視領域へのアクセスを異常事態として検出して、異常事態検出時の静止画像や動画像を監視データ１２３として記録するが、異常事態検出の報知は行わない設定が初期設定とされている。また、監視領域へのアクセスを必須とするアクセス必須設定では、貨幣処理を完了するまでの間に監視領域へのアクセスがないことを異常事態として検出して、監視データの記録は行わず、異常事態の報知のみを行う設定が初期設定とされている。

【0075】

この結果、図７に示すように、監視内容が「常時アクセス禁止」又は「アクセス禁止」の監視領域では、監視データ記録のチェックボックス、及び異常事態報知のチェックボックスにチェックが入った状態となる。また、監視内容が「アクセス検出」の監視領域では、監視データ記録のチェックボックスにチェックが入り、異常事態報知のチェックボックスではチェックが外れた状態となる。また、監視内容が「アクセス必須」の監視領域と、監視内容が「アクセス順序」の文字を含む監視領域では、監視データ記録のチェックボックスでチェックが外れ、異常事態報知のチェックボックスにチェックが入った状態となる。

【0076】

ただし、初期設定に基づいて図７に示すように設定された後、この画面上でチェックボックスの設定を変更することにより、監視データの記録及び異常事態報知に関する設定を変更することもできる。なお、アクセス必須に設定された監視領域について監視データを記録する設定とした場合には、貨幣処理を終えた後に、監視領域へアクセスされなかったことを異常事態として検出して、監視データ１２３として、貨幣処理中に検出した他の監視領域へのアクセスを記録した静止画像や動画像が保存されることになる。

【0077】

図７に示す監視内容設定の一覧表示画面で、必要に応じて設定内容を変更した後、画面上の戻るボタンを押すと、図５又は図６に示す監視内容の設定画面に戻る。また、完了ボタンを押すと監視領域及び監視内容の設定を完了することができる。

【0078】

こうして、監視領域及び監視内容の設定を完了すると、監視装置１００は、設定内容に基づく監視処理を実行する。図８は、監視処理の流れを示すフローチャートである。監視装置１００は、監視カメラ７０で撮像中の画像で、監視エリア内に人が進入して、貨幣処理装置１で貨幣処理を開始したことを認識すると、図８に示す監視処理を開始する。

【0079】

まず、制御部１１０は、貨幣処理装置１で開始された貨幣処理の処理内容を認識する（ステップＳ１）。貨幣処理の処理内容を認識する方法については、例えば、監視装置１００と貨幣処理装置１を通信可能に接続して、制御部１１０が、貨幣処理装置１から処理内容に関する情報を取得する態様であってもよいし、監視カメラ７０で貨幣処理装置１の操作表示部５１を撮像して得られた画像から、制御部１１０が貨幣処理の処理内容を認識する態様であっても構わない。例えば、貨幣処理装置１の操作表示部５１の画面上に、貨幣処理の処理内容に応じて所定の記号や文字を表示したり、貨幣処理の処理内容に応じて画面の背景色を変更したりすれば、制御部１１０は、操作表示部５１を撮像した画像に基づいて貨幣処理の処理内容を認識することができる。

【0080】

貨幣処理の処理内容を認識した制御部１１０は、続いて、記憶部１２０に保存されている監視領域設定データ１２１及び監視内容設定データ１２２を参照して、予め設定されている設定内容を認識する（ステップＳ２）。具体的には、制御部１１０は、図７に示すように監視内容設定データ１２２に登録されている設定の中から、先に認識した貨幣処理の処理内容に対応する設定を認識する。また、制御部１１０は、監視領域設定データ１２１に基づいて、監視カメラ７０による撮像範囲内で、監視領域として設定された空間領域を認識する。そして、各監視領域を、監視領域毎に設定されている監視内容に基づいて監視する。

【0081】

制御部１１０は、貨幣処理装置１を利用して貨幣処理を行う利用者を監視カメラ７０で撮像して、図３に示すように、この利用者の動きを人型骨格の動きとして監視する。そして、各監視領域で異常事態が検出されなければ（ステップＳ３；Ｎｏ）、貨幣処理が終了するまでの間（ステップＳ８；Ｎｏ）、監視を継続する。

【0082】

一方、監視領域で異常事態を検出した場合には（ステップＳ３；Ｙｅｓ）、制御部１１０は、この異常事態について報知処理が必要であるか否かを判定する（ステップＳ４）。そして、報知処理が必要であれば（ステップＳ４；Ｙｅｓ）、制御部１１０は、報知処理を実行する（ステップＳ５）。

【0083】

報知処理を完了した後、続いて、制御部１１０は、検出した異常事態について、記憶部１２０への監視データ１２３の記録が必要であるか否かを判定する（ステップＳ６）。同様に、報知処理が不要であった場合にも（ステップＳ４；Ｎｏ）、制御部１１０は、検出した異常事態について、記憶部１２０への監視データ１２３の記録が必要であるか否かを判定する（ステップＳ６）。

【0084】

そして、監視データ１２３の記録が必要であれば（ステップＳ６；Ｙｅｓ）、制御部１１０は、異常事態を検出した際に得られた静止画像と、検出時点を中心とする前後所定時間分の動画像とを、監視データ１２３として記憶部１２０に記録する（ステップＳ７）。

【0085】

なお、静止画像と動画像のいずれを記録するか、又は両方を記録するかについては、設定により選択できるようになっている。また、動画像について、図３（ａ）に示す通常の動画像形式で記録するか、図３（ｂ）に示すように人型骨格の動きとして記録するかについても設定により選択できるようになっている。静止画像や動画像を監視データ１２３として記録する際には、異常事態を検出した日時、異常事態を検出した際に貨幣処理装置１で行われていた貨幣処理の処理内容、貨幣処理を行っていた人物に関する情報等、予め設定された所定情報が、静止画像及び動画像と関連付けて保存されるようになっている。

【0086】

監視データ１２３の記録を完了した後、続いて、制御部１１０は、貨幣処理が終了したか否かを判定する（ステップＳ８）。同様に、監視データ１２３の記録が不要であった場合も（ステップＳ６；Ｎｏ）、制御部１１０は、貨幣処理が終了したか否かを判定する（ステップＳ８）。

【0087】

そして、貨幣処理が終了していなければ（ステップＳ８；Ｎｏ）、制御部１１０は、ステップＳ３に戻って監視を継続し、貨幣処理が終了していれば（ステップＳ８；Ｙｅｓ）、監視を終了する。貨幣処理が終了しているか否かを判定する方法については、貨幣処理装置１と通信可能に接続された制御部１１０が、貨幣処理装置１から情報を取得して判定する態様であってもよいし、制御部１１０が、監視カメラ７０で貨幣処理装置１の操作表示部５１を撮像した画像に基づいて判定する態様であってもよい。また、貨幣処理装置を利用した利用者が監視エリアから立ち去って監視カメラ７０で検出できなくなった際に、制御部１１０が、貨幣処理が終了したと判定する態様であっても構わない。

【0088】

例えば、制御部１１０が、名称「出金処理Ｘ」の出金処理が貨幣処理装置１で開始されたことを認識した場合（ステップＳ１）、制御部１１０は、図７に示すＮｏ．００１の設定及びＮｏ．００２の設定を読み出して（ステップＳ２）、これらの設定に基づいて、監視を開始する。

【0089】

そして、貨幣処理装置１の利用者が、図５に示すように禁止領域Ａとして設定されている棚６０の左上収納部内に手を入れた場合には、制御部１１０は、常時アクセスが禁止されている監視領域２１３へアクセスしたものとして、これを異常事態として検出する（ステップＳ３；Ｙｅｓ）。図７に示すように、禁止領域Ａについては、異常事態の検出を報知するように設定されているので（ステップＳ４；Ｙｅｓ）、制御部１１０は、報知処理を実行する（ステップＳ５）。なお、報知処理の処理内容については、別途設定できるようになっている。例えば、異常事態が検出されたことを示す情報を監視装置１００の操作表示部１３０へ表示して監視装置１００の利用者に知らせる設定、異常事態と判定された理由を示す情報を貨幣処理装置１の操作表示部５１へ表示して貨幣処理装置１の利用者に警告する設定、監視装置１００及び貨幣処理装置１の両方で報知処理を行う設定とすることができる。

【0090】

また、禁止領域Ａについては、監視データ１２３を記録するように設定されているので（ステップＳ６；Ｙｅｓ）、制御部１１０は、禁止領域Ａへ手を入れた利用者を撮像した静止画像と、禁止領域Ａへ手を入れる数秒前から手を入れてから数秒後の間に撮像した動画像とを、監視データ１２３として、貨幣処理や利用者に関する情報と共に記憶部１２０に記録する（ステップＳ７）。

【0091】

制御部１１０が、出金処理Ｘの実行中に、処理中のアクセスが禁止されている棚Ａの監視領域２１２へのアクセスを検出した場合には（ステップＳ３；Ｙｅｓ）、これを異常事態として検出する。この検出に関しては、図７に示すように、異常事態を報知して（ステップＳ４；Ｙｅｓ）、監視データ１２３を記録するよう設定されているので（ステップＳ６；Ｙｅｓ）、制御部１１０は、報知処理（ステップＳ５）及び監視データ１２３の記録（ステップＳ７）を実行する。

【0092】

制御部１１０が、出金処理Ｘの実行中に、出金口Ｃの監視領域２１５へのアクセスを検出した場合には（ステップＳ３；Ｙｅｓ）、これを異常事態として検出する。この検出に関しては、図７に示すように、異常事態の報知は行わず（ステップＳ４；Ｎｏ）、監視データ１２３の記録のみを行うよう設定されているので（ステップＳ６；Ｙｅｓ）、制御部１１０は、監視データ１２３の記録のみを実行して（ステップＳ７）、報知処理は行わない。

【0093】

制御部１１０が、出金処理Ｘの実行中に、出金口Ｂの監視領域２１４へのアクセスを検出できなかった場合には（ステップＳ３；Ｙｅｓ）、これを異常事態として検出する。この検出に関しては、図７に示すように、異常事態の報知のみを行って（ステップＳ４；Ｙｅｓ）、監視データ１２３の記録は行わないよう設定されているので（ステップＳ６；Ｎｏ）、制御部１１０は、報知処理のみを実行して（ステップＳ５）、監視データ１２３の記録は行わない。

【0094】

また、例えば、制御部１１０が、名称「入金処理Ｐ」の入金処理が貨幣処理装置１で開始されたことを認識した場合（ステップＳ１）、制御部１１０は、図７に示すＮｏ．００１の設定及びＮｏ．００３の設定を読み出して（ステップＳ２）、これらの設定に基づいて、監視を開始する。

【0095】

そして、貨幣処理装置１の利用者が、図６に示すように禁止領域Ａとして設定されている棚６０の左上の収納部に手を入れたことを検出した場合には（ステップＳ３；Ｙｅｓ）、制御部１１０は、これを異常事態として検出する。そして、制御部１１０は、監視内容設定に基づいて（ステップＳ３；Ｙｅｓ、ステップＳ４；Ｙｅｓ）、異常事態の報知処理（ステップＳ４）及び監視データ１２３の記録処理（ステップＳ７）を実行する。

【0096】

また、入金処理Ｐの処理を開始した後、例えば、アクセス順序が１番に設定されている棚Ａの監視領域２１２へのアクセスを検出する前に、他の監視領域へのアクセスが検出された場合に（ステップＳ３；Ｙｅｓ）、制御部１１０は、これを異常事態として検出する。この検出に関しては、図７に示すように、異常事態を報知して（ステップＳ３；Ｎｏ）、監視データ１２３の記録は行わないよう設定されているので（ステップＳ４；Ｎｏ）、制御部１１０は、報知処理のみを実行して（ステップＳ４）、監視データ１２３の記録は行わない。

【0097】

このように、監視装置１００では、監視カメラ７０による撮像範囲内で任意の空間領域を指定して設定された監視領域と、各監視領域について設定された監視内容とに基づいて監視を行って、異常事態を検出した場合には、異常事態を報知したり、異常事態検出時に得られた静止画像や動画像等のデータを監視データ１２３として記憶部１２０に記録したりすることができる。

【0098】

例えば、貨幣処理装置１の利用者による誤操作を検出するように監視領域及び監視内容を設定すれば、貨幣処理装置１の利用者が操作を誤った場合に、これを報知する報知処理が実行される。監視装置１００の操作表示部１３０で報知処理を実行すれば、これを確認した担当者が、貨幣処理装置１を利用する利用者の操作内容を確認し、誤りを指摘して操作を正すことができる。また、操作の誤りを指摘したり正しい操作を案内したりする情報を監視装置１００から貨幣処理装置１へ送信して、貨幣処理装置１の操作表示部５１に表示すれば、貨幣処理装置１の利用者が自ら誤りを認識して、正しい操作で処理をやり直すことができる。

【0099】

また、必要に応じて、異常事態検出時に得られた静止画像や動画像を監視データ１２３として記録することができるので、後で、記録された監視データ１２３を監視装置１００の操作表示部１３０に表示して確認することができる。また、監視データ１２３を記録するか否かを監視領域及び監視内容に応じて選択することができるので、全ての監視領域について静止画像や動画像を記録し続ける場合に比べて、記憶部１２０に記録する監視データ１２３の記録容量を削減することができる。

【0100】

次に、空間領域を指定した後、この空間領域を分割して複数の監視領域を同時に設定する方法について説明する。以下では、物品を陳列展示する物品棚５００を例に、図９及び図１０を参照しながら、監視領域の設定方法を具体的に説明する。

【0101】

図９は、複数の監視領域を同時に設定する監視領域設定画面の例を示す図である。また、図１０は、監視領域の設定方法を説明するための図である。図４に示す監視領域設定画面で右下にある領域分割ボタン３０７を押すと、図９に示す設定画面が表示される。この画面上でベース画像取得ボタン４００を押すと、物品棚５００が設置されている監視エリアを撮像した静止画像２５０が画面上に表示される。

【0102】

まず、画面右側の手動分割枠４０１にある全領域指定ボタン４０１ａを押して、これから設定する監視領域全てを含むように空間領域を指定する。具体的には、物品棚５００の棚全体に監視領域を設定する場合には、図１０（ａ）に示すように、物品棚５００の手前側にある左上隅の点６０１ａと、背面側にある右下隅の点６０１ｂとを指定する。これを受けて制御部１１０は、図４を参照しながら説明したように、２点６０１ａ、６０１ｂによって物品棚５００の棚全体を含む空間領域６００が指定されたことを認識する。ただし、空間領域６００を指定する方法については、この他、例えば、図３に示す座標情報３０１のように３次元座標の範囲を手入力して指定する方法であってもよい。また、例えば、静止画像２５０上で、ＸＹ平面に平行な矩形形状の面を、この面を定義する４点によって指定した後、指定面からのＺ軸方向の距離、すなわち奥行を指定することにより指定する方法であっても構わない。

【0103】

図９に示す静止画像２５０上で、これから設定する複数の監視領域全てを含むように空間領域６００を指定した後、分割点又は分割数を手動で指定して監視領域を設定する。分割点を指定する場合には、分割点指定ボタン４０１ｂを押してから、空間領域６００上で分割点を指定する。分割点を指定した後、分割ボタン４０１ｆを押すと、制御部１１０は、指定された分割点に基づいて、空間領域６００を複数の空間領域に分割する。

【0104】

具体的には、図１０（ａ）に示す空間領域６００を指定した後、分割点指定ボタン４０１ｂを押して、図１０（ｂ）に示すように空間領域６００の一辺上で分割点６０２ａ、６０２ｂを指定する。そして、分割ボタン４０１ｆを押すと、制御部１１０は、各分割点を通りかつ空間領域６００を分割する面を認識して、図１０（ｂ）に示すように空間領域６００を３つの空間領域に分割する。また、制御部１１０は、分割後の各領域に、それぞれ第１領域、第２領域、第３領域という名称を付ける。さらに、分割点指定ボタン４０１ｂを再度押して、図１０（ｃ）に示すように空間領域６００の他の辺上で分割点６０２ｃを追加して分割ボタン４０１ｆを押すと、制御部１１０は、この分割点６０２ｃを通る面によって空間領域６００をさらに分割する。この結果、図１０（ｃ）に示すように、空間領域６００が第１領域〜第６領域の６つの空間領域に分割される。なお、監視領域の名称を変更したい場合には、設定画面上で変更したい名称を選択して変更後の名称を入力することにより名称を変更することができる。

【0105】

図１０（ｂ）に示す分割状態で、図９に示す画面右下の完了ボタンを押すと、制御部１１０は、第１領域〜第３領域の３つの空間領域を、監視領域として、記憶部１２０の監視領域設定データ１２１に登録する。また、図１０（ｃ）に示す分割状態で完了ボタンを押すと、制御部１１０は、第１領域〜第６領域の６つの空間領域を、監視領域として、監視領域設定データ１２１に登録する。このように、手動で分割点を指定すれば、指定した分割点を通る平面で空間領域６００を複数の空間領域に分割して、複数の監視領域を同時に設定することができる。

【0106】

図１０（ａ）に示すように空間領域６００を指定した後、この空間領域６００を等分割したい場合には、図９に示す等分割チェックボックス４０１ｃにチェックを入れて縦横の分割数４０１ｄを指定する。例えば、縦方向に５分割して、横方向に３分割するように分割数４０１ｄを指定した後、分割ボタン４０１ｆを押すと、制御部１１０は、図１０（ｄ）に示すように、空間領域６００を横方向に３つに等分割する２つの分割点６０３ａ、６０３ｂと、空間領域６００を縦方向に５つに等分割する４つの分割点６０３ｃ〜６０３ｆとを自動的に認識して、これらの分割点６０３ａ〜６０３ｆによって空間領域６００を等分割する。また、制御部１１０は、各監視領域に第１領域〜第１５領域の名称を付ける。なお、各監視領域の名称については設定画面上で名称を選択して変更することも可能となっている。

【0107】

図１０（ｄ）に示す分割状態で、図９に示す画面右下の完了ボタンを押すと、制御部１１０は、第１領域〜第１５領域の１５個の空間領域を、監視領域として、監視領域設定データ１２１に登録する。このように、空間領域６００を等分割する場合には、縦横の分割数を指定するだけで、複数の監視領域を同時に設定することができる。

【0108】

また、監視装置１００では、所定のマーカを利用して、監視領域として設定する空間領域を自動的に指定することもできる。この指定は、図９に示す自動分割枠４０２に示す複数種類のマーカ４０２ａ〜４０２ｂを利用して行う。マーカ４０２ａは、監視領域全てを含む空間領域を指定するためのマーカである。また、マーカ４０２ｂ及びマーカ４０２ｃは、マーカ４０２ａで指定された空間領域を分割する分割点を指定するためのマーカである。各マーカ４０２ａ〜４０２ｃは中心点を特定可能な模様を有しており、例えば、これらのマーカ４０２ａ〜４０２ｃをシールにして物品棚５００に貼り付けることにより、物品棚５００を撮像した画像上でこれらのマーカ４０２ａ〜４０２ｃを検出した制御部１１０が、自動的に空間領域の指定を認識するようになっている。

【0109】

例えば、図１０（ａ）に示す２つの点６０１ａ、６０１ｂに対応するように、予め物品棚５００にマーカ４０２ａのシールを貼り付けておく。同様に、図１０（ｂ）に示す分割点６０２ａ、６０２ｂに対応する位置にマーカ４０２ｂのシールを貼り付けて、図１０（ｃ）に示す分割点６０２ｃに対応する位置にマーカ４０２ｃのシールを貼り付けておく。

【0110】

そして、図９に示す画面のベース画像取得ボタン４００を押すと、監視カメラ７０によって、マーカ４０２ａ〜４０２ｃのシールが貼り付けられた物品棚５００が撮像されて、画面上に静止画像２５０が表示される。静止画像２５０が得られると、制御部１１０は、静止画像２５０上でマーカ４０２ａを検索する。物品棚５００に貼り付けられている２つのマーカ４０２ａを検出すると、制御部１１０は、これから設定する全ての監視領域を含む空間領域が指定されたと認識して、図１０（ａ）に示すように自動的に空間領域６００を設定する。

【0111】

この状態で、図９に示す自動分割枠４０２で、マーカ４０２ｂのチェックボックスにチェックを入れて分割ボタン４０２ｅを押すと、制御部１１０は、物品棚５００の静止画像２５０上でマーカ４０２ｂを検索する。そして、図１０（ｂ）に示す２つの位置６０２ａ、６０２ｂでマーカ４０２ｂを検出すると、制御部１１０は、分割点が指定されたものと認識して、図１０（ａ）に示す空間領域６００を図１０（ｂ）に示すように第１領域〜第３領域に分割する。

【0112】

さらに、図９に示すマーカ４０２ｃのチェックボックスにチェックを入れて分割ボタン４０２ｅを押すと、制御部１１０は、物品棚５００の静止画像２５０上でマーカ４０２ｃを検索する。そして、図１０（ｃ）に示す位置６０２ｃでマーカ４０２ｃを検出すると、制御部１１０は、分割点の指定が追加されたものと認識して、図１０（ｂ）に示す状態からさらに、図１０（ｃ）に示すように第１領域〜第６領域に分割する。

【0113】

なお、図９に示す画面上でマーカ４０２ｂのチェックボックスにはチェックを入れず、マーカ４０２ｃのチェックボックスにチェックを入れて分割ボタン４０２ｅを押した場合には、図１０（ａ）に示す空間領域６００が、図１０（ｃ）に示す分割点６０２ｃの位置で上下２段に分割されて、第１領域及び第２領域が指定されることになる。

【0114】

こうしてマーカ４０２ａ〜４０２ｃを利用して空間領域を指定した後、完了ボタンを押すと、制御部１１０は、指定された空間領域を、監視領域として、記憶部１２０の監視領域設定データ１２１に登録する。

【0115】

なお、図９に示す画面上で、手動分割枠４０１にあるクリアボタン４０１ｅを押すと、静止画像２５０上で手動で指定した空間領域が全て削除される。同様に、自動分割枠４０２にあるクリアボタン４０２ｄを押すと、静止画像２５０上で自動的に指定された空間領域が全て削除される。また、画面上で、指定済みの空間領域を選択して、画面右側にある領域解除ボタン４０３を押すと、領域指定を解除することができる。また、空間領域を選択して、閾値設定ボタン４０４を押すと、図４を参照しながら説明したように、この空間領域で異常事態を検出するための閾値を変更することができる。

【0116】

制御部１１０は、監視カメラ７０による撮像範囲内で各監視領域を認識して監視するが、例えば、撮像範囲内で物品棚５００の位置を移動すると、撮像範囲内に設定した３次元空間における各監視領域の３次元座標が変わってしまう。このような場合に、マーカ４０２ａ〜４０２ｃを利用すれば、各監視領域の３次元座標を容易に再設定することができる。具体的には、物品棚５００の位置を移動した後、図９に示す設定画面を表示して、静止画像２５０を取得すれば、上述したように、マーカ４０２ａ〜４０２ｃを利用して各監視領域を容易に再設定することができる。

【0117】

また、制御部１１０が、監視エリア内での物品棚５００の移動を自動的に認識するように設定することもできる。この設定では、物品棚５００が移動したことを認識した制御部１１０が、移動後の物品棚５００を監視カメラ７０で撮像して、得られた画像から各マーカ４０２ａ〜４０２ｃの位置を認識する。そして、マーカ４０２ａ〜４０２ｃを利用して設定されていた各監視領域を、移動後のマーカ４０２ａ〜４０２ｃの位置に合わせて再設定する。この設定を利用すれば、例えば、監視カメラシステムを利用する店舗で店舗内の物品棚５００を移動した場合に、各監視領域の位置が自動的に再設定されるので、各監視領域を手動で再設定する必要がない。

【0118】

また、物品棚５００の位置は変えずに、マーカ４０２ａ〜４０２ｃの貼付位置を変更した場合についても、制御部１１０が、マーカ４０２ａ〜４０２ｃの貼付位置の移動を自動的に認識するように設定することができる。この設定では、監視カメラ７０で物品棚５００を撮像した画像で、マーカ４０２ａ〜４０２ｃの貼付位置が移動したことを認識した制御部１１０が、各マーカ４０２ａ〜４０２ｃの移動後の位置を認識する。そして、マーカ４０２ａ〜４０２ｃを利用して設定されていた監視領域を、移動後のマーカ４０２ａ〜４０２ｃの位置に合わせて再設定する。例えば、監視カメラシステムを利用する店舗で、物品棚５００に陳列する商品に合わせて監視領域を変更したい場合に、マーカ４０２ａ〜４０２ｃの位置を変更するだけで各監視領域が自動的に再設定されるので、各監視領域を手動で再設定する必要がない。

【0119】

このように、予め物品棚５００にマーカ４０２ａ〜４０２ｃを貼り付けておけば、マーカ４０２ａ〜４０２ｃを利用して監視領域を容易に設定することができる。また、物品棚５００の位置を移動したい場合や、監視領域の設定を変更したい場合にも、各監視領域の再設定を容易に行うことができる。

【0120】

なお、本実施形態では、主に、各部を操作する際の監視領域への手の進入を検出する例を示したが、監視内容がこれに限定されるものではない。監視装置１００では、例えば、監視領域内にあるべき手がなくなったことを検出することもできるし、物体が監視領域へ進入したことや、監視領域から物体がなくなったことを検出することもできる。監視装置１００は、監視領域内への人体や物体の進入、監視領域内での人体や物体の移動、監視領域内から監視領域外への人体や物体の移動等を、監視領域における変化として検出して、上述したように監視領域毎に設定された設定内容に応じて所定の処理を実行する。

【0121】

上述してきたように、本実施形態に係る監視カメラシステムによれば、監視カメラ７０による撮像範囲内で、任意の３次元空間を指定して監視領域として設定することができる。１つの監視カメラ７０で撮像される撮像範囲内に、複数の監視領域を設定することが可能であり、各監視領域における監視内容を設定することも可能となっている。例えば、装置の構成部を監視領域として、この構成部に係る操作が行われたことを異常事態として検出することもできるし、この構成部で操作が行われなかったことを異常事態として検出することもできる。また、複数の構成部を監視領域として各構成部を操作する順序を指定し、順序通りに操作が行われなかったことを異常事態として検出することもできる。また、異常事態を検出した際に、検出を報知するか否かを選択することもできるし、静止画像や動画像等の監視データ１２３を記憶部１２０に保存するか否かを選択することもできる。これにより、監視カメラシステムを利用する利用者の様々な利用態様に対応することが可能となる。

【産業上の利用可能性】

【0122】

以上のように、本発明に係る監視カメラシステムは、カメラによる撮像範囲内で任意の３次元空間を指定して監視領域として監視するために有用である。

【符号の説明】

【0123】

１ 貨幣処理装置
１０ 結束紙幣処理部
１１ 結束紙幣出金口
２０ バラ紙幣処理部
２１ バラ紙幣出金口
２２ バラ紙幣入金口
３０ 包装硬貨処理部
３１ 包装硬貨出金口
４０ バラ硬貨処理部
４１ バラ硬貨出金口
４２ バラ硬貨入金口
５０ プリンタ
５１ 操作表示部
５２ ＩＤカードリーダ
５３ 現金外ボックス
６０ 棚
７０ 監視カメラ
７１ 画像センサ
７２ 深度センサ
１００ 監視装置
１１０ 制御部
１２０ 記憶部
１３０ 操作表示部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】