特開 2023-146245 監視装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023146245

(43)【公開日】2023-10-12

(54)【発明の名称】監視装置

(51)【国際特許分類】

   G08B 13/196 20060101AFI20231004BHJP

   G08B 25/00 20060101ALI20231004BHJP

   A47G 29/122 20060101ALI20231004BHJP

【ＦＩ】

G08B13/196

G08B25/00 510M

A47G29/122 Z

【審査請求】未請求

【請求項の数】5

【出願形態】ＯＬ

(21)【出願番号】P 2022053335

(22)【出願日】2022-03-29

(71)【出願人】

【識別番号】308036402

【氏名又は名称】株式会社ＪＶＣケンウッド

(72)【発明者】

【氏名】齋藤 沙也加

(72)【発明者】

【氏名】山下 華妃

(72)【発明者】

【氏名】浅野 太貴

(72)【発明者】

【氏名】桜木 友喜

(72)【発明者】

【氏名】森 大樹

(72)【発明者】

【氏名】▲高▼橋 紀行

【テーマコード（参考）】

3K100

5C084

5C087

【Ｆターム（参考）】

3K100CA51

3K100CA60

3K100CC10

3K100CD03

5C084AA02

5C084AA03

5C084AA09

5C084AA13

5C084CC33

5C084DD11

5C084EE03

5C084EE04

5C084GG54

5C084GG65

5C084HH02

5C084HH03

5C084HH07

5C084HH12

5C087AA02

5C087AA12

5C087AA37

5C087AA42

5C087DD05

5C087DD24

5C087FF01

5C087FF04

5C087GG02

5C087GG08

5C087GG10

5C087GG31

5C087GG35

5C087GG66

5C087GG70

(57)【要約】

【課題】監視領域内において、人物の挙動に基づいた報知を行うことを可能とする監視装置を提供する。
【解決手段】監視装置１０は、所定の監視領域を含む範囲を撮影した画像を取得する画像取得部１２と、取得した画像から、物体および人物を認識する画像認識部１３と、物体および人物の少なくともいずれかを監視する監視モードを制御し、前記監視モード毎に前記物体または前記人物の認識結果を判定する監視制御部と、判定結果に基づいた報知を制御する報知制御部と、を備える。
【選択図】図１

【特許請求の範囲】

【請求項1】

所定の監視領域を含む範囲を撮影した画像を取得する画像取得部と、
前記画像から、物体および人物を認識する画像認識部と、
前記物体および前記人物の少なくともいずれかを監視する監視モードを制御し、前記監視モード毎に前記物体または前記人物の認識結果を判定する監視制御部と、
前記判定結果に基づいた報知を制御する報知制御部と、
を備える監視装置。

【請求項2】

前記監視制御部は、
前記物体の認識を行うよう画像認識部を制御する第１の監視モードと、
前記人物の認識を行うよう画像認識部を制御し、かつ、前記人物の移動元が、予め定められた所定方向以外であるか否かを判定する第２の監視モードと、
予め定められた所定時間以上に、前記人物が前記監視領域に留まるか否かを判定する第３の監視モードと、
による監視を制御し、
前記報知制御部は、前記第３の監視モードにおいて、前記所定時間以上に、前記人物が前記監視領域に留まっていると判定された場合、第１の態様による報知を制御する、
請求項１に記載の画像処理装置。

【請求項3】

前記監視制御部は、前記第３の監視モードにおいて、さらに、前記人物の移動先が、予め定められた所定方向以外であるか否かを判定し、
前記報知制御部は、前記人物の移動先が、予め定められた所定方向以外である場合、前記第１の態様とは異なる第２の態様による報知を制御する、
請求項２に記載の画像処理装置。

【請求項4】

前記画像認識部は、前記第３の監視モードにおいて、さらに、前記人物が前記物体に対して予め定められた所定行動をとったか否かを判定し、
前記報知制御部は、前記人物が前記物体に対して前記所定行動をとった場合、前記第１の態様とは異なる第３の態様による報知を制御する、
請求項２に記載の画像処理装置。

【請求項5】

前記監視装置に発生する異常を検出する異常検出部をさらに備え、
前記報知制御部は、前記第３の監視モードにおいて、前記異常を検出した場合、前記第１の態様とは異なる第４の態様による報知を制御する、
請求項２乃至４のうちいずれか１項に記載の画像処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、監視装置に関する。

【背景技術】

【0002】

戸建て住宅やマンション等の玄関前の床面の一部または全部を居住者の不在時に配達された宅配物の配置領域として利用し、更にこの配置領域において宅配物の監視を行う宅配物保管システムが知られている。（例えば特許文献１）

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１９－２１７０２９号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１に記載される宅配物保管システムは、宅配物を配置可能な配置領域を監視し、当該配置領域内の状態変化、例えば宅配物の移動や喪失，増加等を判定可能な判定手段と、所定の荷物または宅配業者の集配エリアを担当する従業員などの個人を特定する認証手段と、報知手段と、を備えている。しかしながら、配置領域内において認識された人物がどのような挙動を取るかを認識することは想定されておらず、人物の挙動に基づいた監視を行うことが望まれる。

【0005】

本発明は、上記に鑑みてなされたものであって、監視領域内における人物の挙動に基づいた報知を行うことを可能とする監視装置を提供するものである。

【課題を解決するための手段】

【0006】

上記目的を達成するため、本発明に係る監視装置は、所定の監視領域を含む範囲を撮影した画像を取得する画像取得部と、取得した画像から、物体および人物を認識する画像認識部と、物体および人物の少なくともいずれかを監視する監視モードを制御し、前記監視モード毎に前記物体または前記人物の認識結果を判定する監視制御部と、に基づいた報知を制御する報知制御部と、を備えることを特徴とする。

【発明の効果】

【0007】

本発明によれば、監視領域内において、人物の挙動に基づいた報知を行うことを可能とする監視装置を提供することができる。

【図面の簡単な説明】

【0008】

【図1】実施形態１に係る監視装置の構成の一例を示すブロック図である。

【図2】実施形態１に係る監視装置の第１の監視モード処理手順の一例を示すフローチャートである。

【図3】実施形態１に係る監視装置の第２の監視モード処理手順の一例を示すフローチャートである。

【図4】実施形態１に係る監視装置の第３の監視モード処理手順の一例を示すフローチャートである。

【図5】実施形態２に係る監視装置の構成の一例を示すブロック図である。

【図6】実施形態２に係る監視装置の処理手順の一例を示すフローチャートである。

【図7】実施形態３に係る監視装置の構成の一例を示すブロック図である。

【図8】実施形態３に係る監視装置の処理手順の一例を示すフローチャートである。

【図9】実施形態４に係る監視装置の構成の一例を示すブロック図である。

【図10】実施形態４に係る監視装置の処理手順の一例を示すフローチャートである。

【発明を実施するための形態】

【0009】

以下、発明の実施形態を通じて本発明を説明するが、特許請求の範囲に係る発明を以下の実施形態に限定するものではない。また、実施形態で説明する構成の全てが課題を解決するための手段として必須であるとは限らない。説明の明確化のため、以下の記載および図面は、適宜、省略、および簡略化がなされている。

【0010】

＜実施形態１＞
図１を用いて、本発明の実施形態１について説明する。図１は、実施形態１に係る監視装置１０の構成の一例を示すブロック図である。

【0011】

監視装置１０は、置き配検知部１１と、画像取得部１２と、画像認識部１３と、監視制御部１４と、報知制御部１５と、を備える。置き配検知部１１は、画像取得部１２と画像認識部１３の機能によって代替されてもよい。

【0012】

置き配検知部１１は、戸建て住宅、マンション、ビル、その他の建物等の玄関前または庭の一部などの、所定の監視領域に置き配があったこと、言い換えると、配達物が置かれたことを検知する。後述する画像取得部１２が取得した画像を、後述する画像認識部１３が配達物である物体として認識した場合に、配達物が置かれたと検知するほか、撮影された監視領域において、床面や庭の一部が認識できなくなったことをもって、配達物が置かれたと検知してもよい。また画像に依らず、所定の領域に予め設置された重量センサなどのセンシング結果に基づいて、配達物が置かれたと検知してもよい。

【0013】

画像取得部１２は、所定の監視領域を含む範囲を撮影する監視カメラ２０からの画像を取得する。画像取得部１２は、監視カメラ２０を含めて構成されてもよく、別体である監視カメラ２０と接続され、監視カメラ２０から出力される出力信号を取得する、入力インタフェース部であってもよい。

【0014】

画像認識部１３は、画像取得部１２が取得した画像から、画像認識技術を用い、配達物である物体、及び、人物を認識する。画像認識部１３は、複数の画像認識用の学習済モデルを備えており、後述する監視制御部１４が設定する監視モードに基づいて学習済モデルを設定し、認識対象物を認識する画像認識処理を行う。

【0015】

画像認識用の学習済モデルとは、例えば、配達物である物体認識用の学習モデルとして、物体を撮影した画像と、その物体が配達物である場合に１、配達物ではない場合に０とする教師データとを一対のセットとした入力データをニューラルネットワークに入力して、機械学習させた学習済モデルである。
画像認識部１３は、例えば、設定された配達物である物体認識用の学習済モデルに画像を入力し、入力した画像に配達物が撮影されている可能性を、１から０の間の値として出力する。出力値が１に近いほど、入力された画像に配達物が撮影されている可能性が高く、出力値が０に近いほど、入力された画像に配達物が撮影されている可能性が低い。この出力値が予め定められた閾値である、例えば０．８以上である場合、画像認識部１３は、画像取得部１２が取得した画像に、配達物が撮影されていると判定する。
後述する人物認識用の学習済モデルや不審者認識用の学習済モデルも、同様の機械学習を行った学習済モデルとして、画像認識部１３に備えられる。または、図示しない通信部を介して、図示しない外部サーバと通信を行い、適した画像認識用の学習済モデルをダウンロードする形態であってもよい。

【0016】

監視制御部１４は、以下の監視モードを備える。
（Ａ）画像認識部１３を配達物である物体の認識を行うよう制御する、第１の監視モード
（Ｂ）画像認識部１３を人物の認識を行うよう制御し、かつ、認識された人物の移動先が、予め定められた所定方向以外であるか否かを判定する、第２の監視モード
（Ｃ）画像認識部１３を人物の認識を行うよう制御し、かつ、認識された人物が、所定時間以上に監視領域に留まるか否かを判定する、第３の監視モード

【0017】

第１の監視モードにおいて、監視制御部１４は、画像認識部１３が画像を認識する際に優先的に用いる学習済モデルを、配達物である物体認識用の学習済モデルに設定する。言い換えると、画像認識部１３が優先的に認識する対象を、配達物である物体とする。このとき、画像認識部１３が劣後的に用いる学習済モデルを、人物とする。
優先的に用いる学習済モデルとは、画像取得部１２が1秒あたりに３０枚（３０フレーム）取得した画像に対し、相対的に多い枚数となる、例えば２０枚～２５枚の画像に対して行う画像認識処理に用いる学習済モデルを指す。また劣後的に用いる学習済モデルとは、相対的に少ない枚数となる、例えば５枚～１０枚の画像に対して行う画像認識処理に用いる学習済モデルを指す。
このように、優先的に用いる画像認識用の学習済モデルによって画像認識処理を行う画像の枚数を、劣後的に用いる画像認識用の学習済モデルによる画像認識処理を行う画像の枚数よりも多く設定する。なおこのとき、劣後的に認識する対象を設定せず、優先的に認識する対象を認識することに全ての画像枚数を振り分けてもよい。
第１の監視モードにおいて、画像認識部１３が配達物である物体を認識した場合、監視制御部１４は、監視モードを第２の監視モードに移行させる。
また上述したように、第１の監視モードにおいて、監視制御部１４は、置き配検知部１１が配達物である置き配を検知するよう制御し、置き配検知部が置き配を検知した場合、監視モードを第２の監視モードに移行させても良い。

【0018】

第２の監視モードにおいて、監視制御部１４は、画像認識部１３が画像を認識する際に優先的に用いる学習済モデルを、人物認識用の学習済モデルに設定し、画像認識部１３が画像を認識する際に劣後的に用いる学習済モデルを、配達物である物体認識用の学習済モデルに設定する。言い換えると、監視制御部１４は、画像認識部１３の設定を制御し、画像認識部１３が優先的に認識する対象を人物とし、劣後的に認識する対象を配達物である物体とする。
人物認識用の学習済モデルとは、例えば、撮影された画像と、その画像に人物が撮影されている場合に１、人物が撮影されていない場合に０とする教師データと、を一対のセットとした入力データをニューラルネットワークに入力して、機械学習させた学習済モデルである。

【0019】

また第２の監視モードにおいて、監視制御部１４は、画像認識部１３が認識した人物の移動元となる方向を特定し、移動元方向が予め定められた所定方向以外であるか否かを判定する。
監視制御部１４は、画像認識部１３が人物を認識した画像内の領域を特定し、画像取得部１２が時系列的に連続して取得する複数の画像における、人物が認識された領域を時系列的に連続して追跡することにより、人物が監視カメラ２０の撮影領域である監視領域内に流入してきた際の、移動元方向を特定する。
また監視制御部１４は、画像認識部１３が認識した人物の移動元方向が、予め定めた所定方向であるか否かを判定する。予め定めた所定方向とは、監視領域における、例えば玄関などの、居住者または関係者のみが出入りする方向である。
第２の監視モードにおいて、画像認識部１３が認識した人物の移動元が、玄関などの所定方向ではない場合、認識した人物が居住者ではない可能性がある。第２の監視モードにおいて、画像認識部１３が人物を認識し、かつ、人物の移動元が予め定めた所定方向でないと判定した場合、監視制御部１４は、監視モードを第３の監視モードに移行させる。

【0020】

第３の監視モードにおいて、監視制御部１４は、画像認識部１３が画像を認識する際に優先的に用いる学習済モデルを、第２の監視モードと同様に、人物認識用の学習済モデルに設定し、画像認識部１３が画像を認識する際に劣後的に用いる学習済モデルを、配達物である物体認識用の学習済モデルに設定する。言い換えると、監視制御部１４は、画像認識部１３の設定を制御し、画像認識部１３が優先的に認識する対象を人物とし、劣後的に認識する対象を配達物である物体とする。

【0021】

また第３の監視モードにおいて、監視制御部１４は、画像認識部１３が人物を認識した画像内の領域を特定し、画像取得部１２が時系列的に連続して取得する複数の画像における、人物が認識される領域を時系列的に連続して追跡することにより、人物が監視領域に留まっている時間を算出する。
第３の監視モードにおいて、画像認識部１３が人物を認識し、かつ、人物が予め定めた所定時間以上の間、監視領域に留まっていることが算出された場合、監視制御部１４は、後述する報知制御部１５に報知を行わせる指示を出力する。所定時間とは、例えば１秒や３秒などの値であるが、監視カメラ２０の設置位置や撮影画角などに応じて、ユーザが設定可能であることが好ましい。

【0022】

報知制御部１５は、監視制御部１４からの出力に基づいて、監視モードが第３の監視モードであり、かつ、監視制御部１４が所定時間以上に人物が監視領域に留まったと判定した場合、報知態様を第１の態様に決定し、第１の態様による報知を行う。第１の態様とは、例えば、「御用ですか」「ご用件は」などの、認識された人物に対する問いかけとなる発話である。報知制御部１５は、決定された態様による報知を、監視領域に向けて設置したスピーカ３０から出力させる。

【0023】

次に、上述した実施形態１に係る監視装置１０の第１の監視モードにおける処理手順を、図２に示すフローチャートを参照して説明する。

【0024】

初めに、ステップＳ１０において、監視制御部１４は、監視モードを第１の監視モードに設定し、画像認識部１３にて認識する対象を、配達物である物体に設定する。その後ステップＳ１１に進む。

【0025】

ステップＳ１１において、画像取得部１２は、監視領域を撮影する監視カメラ２０から画像を取得する。画像取得部１２は、取得した画像を画像認識部１３に供給し、ステップＳ１２に進む。

【0026】

ステップＳ１２において、画像認識部１３は、取得した画像から、設定された認識対象物を認識する処理を行う。監視モードが第１のモードであるので、画像認識部１３は、優先的に認識するよう設定された認識対象物である物体を認識する処理を、取得された画像のうち、相対的に多い一部の画像に対して行う。画像認識部１３が物体を認識した場合（Ｓ１２でＹｅｓ）、ステップＳ１３に進む。画像認識部１３が物体を認識しない場合（Ｓ１２でＮｏ）、ステップＳ１１に戻り、処理を再度実行する。
なおステップＳ１２において、画像認識部１３が物体を認識する処理に換えて、置き配検知部１１が、監視領域に配達物が置かれたことを任意のセンサによって検知してもよい。この場合、置き配検知部１１が物体を検知した場合（Ｓ１２でＹｅｓ）、ステップＳ１３に進む。置き配検知部１１が物体を検知しない場合（Ｓ１２でＮｏ）、ステップＳ１１に戻り、処理を再度実行する。

【0027】

ステップＳ１３において、監視制御部１４は監視モードを第２の監視モードに設定し、第１の監視モードにおけるフローを終了する。

【0028】

次に、上述した実施形態１に係る監視装置の第２の監視モードにおける処理手順を、図３に示すフローチャートを参照して説明する。

【0029】

初めに、ステップＳ２１における処理は、第１の監視モードにおけるステップＳ１１処理と同様であるため、詳細な説明を省略する。

【0030】

ステップＳ２２において、画像認識部１３は、取得した画像から、設定された認識対象物を認識する処理を行う。監視モードが第２のモードであるので、画像認識部１３は、優先的に認識するよう設定された認識対象物である人物を認識する処理を、取得された画像のうち、相対的に多い一部の画像に対して行う。画像認識部１３が人物を認識した場合（Ｓ２２でＹｅｓ）、ステップＳ２３に進む。画像認識部１３が人物を認識しない場合（Ｓ２２でＮｏ）、ステップＳ２１に戻り、処理を再度実行する。

【0031】

ステップＳ２３において、監視制御部１４は、画像認識部１３が認識した人物の移動元となる方向を特定し、移動元方向が予め定められた所定方向であるか否かを判定する。監視制御部１４が、人物の移動元方向が予め定められた所定方向であると判定した場合（Ｓ２３でＹｅｓ）、ステップＳ２５に進む。監視制御部１４が、人物の移動元方向が予め定められた所定方向であると判定しない場合（Ｓ２３でＮｏ）、認識された人物は居住者でない可能性があり、ステップＳ２４に進む。

【0032】

ステップＳ２４において、監視制御部１４は監視モードを第３の監視モードに設定し、第２の監視モードにおけるフローを終了する。

【0033】

ステップＳ２５において、監視制御部１４は、認識された人物は居住者である可能性が高いため、監視モードを第１の監視モードに戻す。具体的には、第１の監視モードのステップＳ１０に戻り、物体の認識処理及び人物の認識処理を繰り返す。

【0034】

次に、上述した実施形態１に係る監視装置の第３の監視モードにおける処理手順を、図４に示すフローチャートを参照して説明する。

【0035】

初めに、ステップＳ３１及びステップＳ３２における処理は、第２の監視モードにおけるステップＳ２１及びステップＳ２２の処理と同様であるため、詳細な説明を省略する。

【0036】

ステップＳ３３において、監視制御部１４は、画像認識部１３が認識した人物が監視領域に留まる時間を算出する。監視制御部１４が、人物が監視領域に滞留する時間が予め定めた所定値以上であると判定した場合（Ｓ３３でＹｅｓ）、ステップＳ３４に進む。人物が監視領域に滞留する時間が予め定めた所定値以上であると判定しない場合（Ｓ３３でＮｏ）、人物が立ち去ったため、第３の監視モードによる処理を終了する。
なおこのとき、画像認識部１３は、物体の認識も劣後的に行い、物体が認識されていないことを判定することができる。認識された人物が立ち去り、かつ、認識されていた配達物である物体が認識されなくなった場合に、報知制御部１５を制御し、報知を行う形態があってもよい。

【0037】

ステップＳ３４において、監視制御部１４は、人物が監視領域に滞留する時間が予め定めた所定値以上であることを報知制御識部１５に出力し、報知制御識部１５は、報知態様を第１の態様に決定する。次にステップＳ３５に進む。

【0038】

ステップＳ３５において、報知制御識部１５は、決定した態様による報知を行い、第３の監視モードによる処理を終了する。

【0039】

上述したように、実施形態１によれば、監視装置１０は、認識された状況に基づいて、適切に監視モードを制御し、画像認識に用いる学習するモデルを切り替えて優先的に画像認識処理を行う対象を設定することで、監視すべき適切な認識対象物を、より正確または迅速に認識することができる。また画像取得部１２が時系列的に連続的に取得する複数の各画像それぞれに、認識する対象物を個別に設定することで、各画像で認識すべき認識対象の種類を抑制し、画像認識の処理を軽減することができ、適切な監視及び報知を低負荷で実現することができる。

【0040】

＜実施形態２＞
本発明の実施形態２について、図５を用いて説明する。実施形態２に係る監視装置１０ａは、実施形態１に係る監視装置１０と、以下の点で異なる構成を有する。すなわち、監視制御部１４ａは、第３の監視モードにおいて、画像認識部１３によって優先的に認識された人物の移動先が、予め定められた所定方向以外であるか否かを判定する機能、及び、画像認識部１３によって劣後的に認識された配達物である物体が、認識されなくなったことを判定する機能を有する。また報知制御部１５ａは、監視制御部１４ａからの指示出力により、人物の移動先が、予め定められた所定方向以外であり、かつ、配達物である物体が認識されなくなった場合に、第２の態様による報知を行う。監視装置１０ａにおいて、置き配検知部１１，画像取得部１２および画像認識部１３は、実施形態１に係る監視装置１０と同様の構成および機能を有するため、その詳細な説明は省略する。

【0041】

監視制御部１４ａは、第３の監視モードにおいて、認識された人物の移動先が、予め定められた玄関などの所定方向以外であるか否かを判定する。監視制御部１４ａは、画像認識部１３が人物を認識した画像内の領域を特定し、画像取得部１２が時系列的に連続して取得する複数の画像における、人物が認識される領域を時系列的に連続して追跡することにより、人物が監視領域から流出した方向、言い換えると、人物の移動先方向を特定して、人物の移動先が、予め定められた玄関などの所定方向以外であるか否かを判定する。
第３の監視モードにおいて、画像認識部１３が人物を認識し、かつ、配達物である物体が認識されなくなった場合であって、さらに監視制御部１４ａが認識された人物の移動先が所定方向以外であると判定した場合、監視制御部１４ａは、後述する報知制御部１５ａに報知を行わせる指示を出力する。

【0042】

報知制御部１５ａは、監視制御部１４ａからの出力に基づいて、報知態様を第２の態様に決定し、第２の態様による報知を行う。第２の態様とは、例えば、「泥棒」「配達物を返してください」などの、認識された人物に対する警告となる文言を用いた発話である。報知制御部１５ａは、決定された態様による報知を、監視領域に向けて設置したスピーカ３０から出力させる。

【0043】

次に、上述した実施形態２に係る監視装置の第３の監視モードにおける処理手順を、図６に示すフローチャートを参照して説明する。

【0044】

初めに、ステップＳ４１及びステップＳ４２における処理は、実施形態１の第３の監視モードにおけるステップＳ３１及びステップＳ３２の処理と同様であるため、詳細な説明を省略する。

【0045】

ステップＳ４３において、監視制御部１４ａは、画像認識部１３が認識した人物の移動先となる方向を特定し、移動先方向が予め定められた所定方向であるか否かを判定する。監視制御部１４ａが、人物の移動先方向が予め定められた所定方向であると判定した場合（Ｓ４３でＹｅｓ）、ステップＳ４７に進む。監視制御部１４ａが、人物の移動先方向が予め定められた所定方向であると判定しない場合（Ｓ４３でＮｏ）、認識された人物は居住者でない可能性があり、ステップＳ４４に進む。

【0046】

ステップＳ４４において、画像認識部１３は、取得した画像から劣後的に認識するよう設定された認識対象物である物体を認識する処理を、取得された画像枚数のうち、相対的に少ない一部の枚数の画像に対して行う。画像認識部１３が物体を認識している場合（Ｓ４４でＹｅｓ）、人物が立ち去っており、配達物である物体が引き続き認識されているため、ステップＳ４１に戻り、処理を再度実行する。画像認識部１３が物体を認識しない場合（Ｓ２２でＮｏ）、人物が立ち去っており、かつ、物体も認識されなくなっているため、ステップＳ４５に進む。

【0047】

ステップＳ４５において、監視制御部１４ａは、報知制御識部１５ａを制御し、報知制御識部１５ａは報知態様を第２の態様に決定する。次にステップＳ４６に進む。

【0048】

ステップＳ４６において、報知制御識部１５ａは、決定した態様による報知を行い、第３の監視モードによる処理を終了する。

【0049】

ステップＳ４７において、認識された人物は居住者である可能性が高いため、監視モードを第１の監視モードに戻す。具体的には、第１の監視モードのステップＳ１０に戻り、物体の認識処理及び人物の認識処理を繰り返す。

【0050】

なお、第２の実施形態において、ステップＳ４３以前に、第１の実施形態におけるステップＳ３３の処理を行う形態があってもよい。すなわち、第３の監視モードにおいて、画像認識部１３が認識した人物の移動元が所定方向以外であることを認識し、その場合に、画像認識部１３が認識した人物の移動先となる方向が所定方向であるか否かを判定する処理を行うこととしてもよい。

【0051】

上述したように、実施形態２によれば、監視装置１０ａは、認識された人物の移動先が所定方向以外であるか否かの判定に基づいた、適切な報知を行うことができる。

【0052】

＜実施形態３＞
本発明の実施形態３について、図７を用いて説明する。実施形態３に係る監視装置１０ｂは、実施形態１に係る監視装置１０と、以下の点で異なる構成を有する。すなわち、監視制御部１４ｂは、第３の監視モードにおいて画像認識部１３の設定を制御し、画像認識部１３が認識する対象を、不審者に設定する。不審者とは、例えば、配達物である物体を手に取る、物体に対してかがみこむ、物体の近傍に留まる、等の、予め定められた所定行動をとった人物を指す。また報知制御部１５ｂは、監視制御部１４ｂからの指示出力により、第３の態様による報知を行う。監視装置１０ｂにおいて、置き配検知部１１，画像取得部１２および画像認識部１３は、実施形態１に係る監視装置１０と同様の構成および機能を有するため、その詳細な説明は省略する。

【0053】

監視制御部１４ｂは、第３の監視モードにおいて、画像認識部１３が画像を認識する際に優先的に用いる学習済モデルを、不審者認識用の学習済モデルに設定し、画像認識部１３が画像を認識する際に劣後的に用いる学習済モデルを、配達物である物体認識用の学習済モデルに設定する。不審者認識用の学習済モデルとは、例えば、不審者認識用の学習モデルとして、人物を撮影した画像と、その人物が不審者であるとされる場合に１、不審者ではないとされる場合に０とする教師データと、を一対のセットとした入力データをニューラルネットワークに入力して、機械学習させた学習済モデルである。
第３の監視モードにおいて、画像認識部１３が不審者を認識した場合、監視制御部１４ｂは、後述する報知制御部１５ｂに報知を行わせる指示を出力する。

【0054】

報知制御部１５ｂは、監視制御部１４ｂからの出力に基づいて、報知態様を第３の態様に決定し、第３の態様による報知を行う。第３の態様とは、例えば、「何をしていますか」「離れてください」などの、認識された人物に対する警告となる発話である。第３の態様は、上述した第２の態様と同じ態様を含んでもよく、第２の態様と同一の態様であってもよい。報知制御部１５ｂは、決定された態様による報知を、監視領域に向けて設置したスピーカ３０から出力させる。

【0055】

次に、上述した実施形態３に係る監視装置の第３の監視モードにおける処理手順を、図８に示すフローチャートを参照して説明する。

【0056】

初めに、ステップＳ５１における処理は、第１の監視モードにおけるステップＳ１１処理と同様であるため、詳細な説明を省略する。

【0057】

ステップＳ５２において、画像認識部１３は、取得した画像から、優先的に認識するよう設定された認識対象物を認識する処理を行う。画像認識部１３は、優先的に認識するよう設定された認識対象物である不審者を認識する処理を、取得された画像のうち、相対的に多い一部の画像に対して行う。画像認識部１３が不審者を認識した場合（Ｓ５２でＹｅｓ）、ステップＳ５３に進む。画像認識部１３が不審者を認識しない場合（Ｓ５２でＮｏ）、ステップＳ５１に戻り、処理を再度実行する。

【0058】

ステップＳ５３において、画像認識部１３は、取得した画像から、劣後的に認識するよう設定された認識対象物を認識する処理を行う。画像認識部１３は、劣後的に認識するよう設定された認識対象物である物体を認識する処理を、取得された画像のうち、相対的に少ない一部の画像に対して行う。画像認識部１３が物体を認識しない場合（Ｓ５３でＮｏ）、不審者が認識され、かつ、認識されていた物体が認識されなくなっているため、ステップＳ５４に進む。画像認識部１３が物体を継続して認識している場合（Ｓ５２でＹｅｓ）、ステップＳ５１に戻り、処理を再度実行する。

【0059】

ステップＳ５４において、監視制御部１４ｂは、報知制御識部１５ｂを制御し、報知制御識部１５ｂは報知態様を第３の態様に決定する。次にステップＳ５５に進む。

【0060】

ステップＳ５５において、報知制御識部１５ｂは、決定した態様による報知を行い、第３の監視モードによる処理を終了する。

【0061】

上述したように、実施形態３によれば、監視装置１０ｂは、不審者であることの認識に基づいた、適切な報知を行うことができる。

【0062】

＜実施形態４＞
本発明の実施形態４について、図９を用いて説明する。実施形態４に係る監視装置１０ｃは、実施形態１に係る監視装置１０と、以下の点で異なる構成を有する。すなわち、監視装置１０ｃに対する異常を検出する異常検出部１６をさらに備える。異常検出部１６は、監視装置１０ｃに対する破壊、衝撃、暗幕がかけられたこと、及び、スプレー噴射による監視不能状態であることなどの異常を判定する。また監視制御部１４ｃは、異常検出部１６が検出した異常に基づいて報知制御部１５ｃに報知を指示する出力を行い、報知制御部１５ｃは、第４の態様による報知を行う。監視装置１０ｃにおいて、置き配検知部１１，画像取得部１２及び画像認識部１３は、実施形態１に係る監視装置１０と同様の構成および機能を有するため、その詳細な説明は省略する。

【0063】

異常検出部１６は、第３の監視モードにおいて、監視装置１０ｃに生じた異常を、図示しない衝撃センサまたは加速度センサなどの公知のセンサからの出力や、画像取得部１２によって取得された画像の大半の画素の輝度が均一になった（白や黒の暗幕がかけられた）こと、画像認識部１３によってひびが認識されたこと、図示しない音声センサによって破壊音があったと判定されたことなどの、公知の技術によって検出し、検出結果を監視制御部１４ｃに出力する。

【0064】

監視制御部１４ｃは、異常検出部１６が監視装置１０ｃに生じた異常を検出した場合、報知制御部１５ｃに、報知を行わせる指示を出力する。

【0065】

報知制御部１５ｃは、監視制御部１４ｃからの出力に基づいて、報知態様を第４の態様に決定し、第４の態様による報知を行う。第４の態様とは、例えば、「泥棒」「破壊されました」などの、認識された人物に対する警告や監視装置１０の状況通告となる発話である。第４の態様は、上述した第２の態様や第３の態様と同じ態様を含んでもよく、第２の態様や第３の態様のいずれかと同一の態様であってもよい。報知制御部１５ｃは、決定された態様による報知を、監視領域に向けて設置したスピーカ３０から出力させる。

【0066】

次に、上述した実施形態４に係る監視装置の第３の監視モードにおける処理手順を、図１０に示すフローチャートを参照して説明する。

【0067】

初めに、ステップＳ６１において、異常検出部１６は監視装置１０ｃに生じた異常を検出する処理を行う。異常検出部１６が異常を検出した場合（Ｓ６１でＹｅｓ）、ステップＳ６２に進む。異常検出部１６が不審者を認識しない場合（Ｓ６１でＮｏ）、ステップＳ６１に戻り、処理を再度実行する。

【0068】

ステップＳ６２において、監視制御部１４ｃは、報知制御識部１５ｃを制御し、報知制御識部１５ｃは報知態様を第４の態様に決定する。次にステップＳ６３に進む。

【0069】

ステップＳ６３において、報知制御識部１５ｃは、決定した態様による報知を行い、第３の監視モードによる処理を終了する。

【0070】

上述したように、実施形態４によれば、監視装置１０ｃは、監視装置１０ｃに対する異常の検出に基づいた、適切な報知を行うことができる。

【0071】

＜その他の実施形態＞
本発明において上述した実施形態１乃至４に示す具体例等は、発明の理解を容易とするための例示にすぎず、特に断る場合を除き、本発明を限定するものではない。
なお本発明は、実施形態１乃至４に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。
たとえば、実施形態２または実施形態３の監視装置１０ａまたは監視装置１０ｂの構成に、実施形態４の異常検出部１６が含まれるようにしてもよい。この場合、実施形態２または実施形態３の監視制御部１４ａ及び監視制御部１４ｂは、認識された人物の移動先方向や不審な行動の判定に加えて、異常検出部１６が検出した異常にさらに基づいて、報知態様を決定し、報知を行う。

【0072】

また、実施形態１乃至４に示す報知制御部１０、１０ａ、１０ｂ、及び１０ｃは、報知態様として発話の内容を決定し、決定された態様による報知を、監視領域に向けて設置したスピーカ３０から出力させるものとしたが、例えば監視領域に向けて設置したブザーや点灯・点滅部材による報知であってもよい。この場合、報知態様としてブザー音の音圧の強弱や音の周波数の設定、または、点灯輝度の明暗や点滅周波数の設定を決定し、決定した報知態様による報知を行う。

【0073】

また、実施形態１乃至４に示す報知制御部１０、１０ａ、１０ｂ、及び１０ｃは、報知態様として発話の内容を決定し、決定された態様による報知を、監視領域に向けて設置したスピーカ３０から出力させるものとしたが、図示しない通信部を備えて、居住者が有する携帯機器や、管理会社、警察などに報知を行う形態であってもよい。この場合、報知態様として報知先の範囲や報知文言を決定し、決定した報知態様による報知を行う。

【0074】

上述の実施形態では、本発明をハードウェアの構成として説明したが、本発明は、これに限定されるものではない。本発明は、任意の処理を、プロセッサにコンピュータプログラムを実行させることにより実現することも可能である。

【0075】

上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体を含み、例えば、ハードディスクドライブ等の磁気記録媒体、光記録媒体、光磁気記録媒体、半導体メモリを含む。半導体メモリは、書き換え可能な様々な種類のＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）とすることもでき、またＳＳＤ（Solid State Drive）として提供されるものも含む。また、プログラムは、プログラムは、様々なタイプの一時的なコンピュータ可読媒体によって電線及び光ファイバ等の有線通信路、又は無線通信路を介してコンピュータに供給されてもよく、例えば電気信号、光信号、及び電磁波を含む。

【0076】

特許請求の範囲、明細書、および図面中において示した装置および方法における各処理の実行順序は、任意の順序で実現しうる。特許請求の範囲、明細書および図面中の動作フローに関して、便宜上「初めに」、「次に」等を用いて説明したとしても、この順序で実施することが必須であることを意味するものではない。

【符号の説明】

【0077】

１０，１０ａ，１０ｂ、１０ｃ 監視装置
１１ 置き配検知部
１２ 画像取得部
１３ 画像認識部
１４，１４ａ，１４ｂ，１４ｃ 監視制御部
１５，１５ａ，１５ｂ，１５ｃ 報知制御部
１６ 異常検出部
２０ 監視カメラ
３０ スピーカ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】