特許 6206627 情報処理装置、制御方法、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】6206627

(24)【登録日】2017年9月15日

(45)【発行日】2017年10月4日

(54)【発明の名称】情報処理装置、制御方法、及びプログラム

(51)【国際特許分類】

   G08B 13/196 20060101AFI20170925BHJP

   G08B 25/00 20060101ALI20170925BHJP

【ＦＩ】

   G08B13/196

   G08B25/00 510M

【請求項の数】19

【全頁数】23

(21)【出願番号】特願2017-534848(P2017-534848)

(86)(22)【出願日】2016年12月5日

(86)【国際出願番号】JP2016086040

【審査請求日】2017年6月28日

【早期審査対象出願】

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100110928

【弁理士】

【氏名又は名称】速水 進治

(72)【発明者】

【氏名】井下 哲夫

【審査官】 関口 明紀

(56)【参考文献】

【文献】 特開２００８−２５７４８７（ＪＰ，Ａ）

【文献】 特開２００５−３４７９０５（ＪＰ，Ａ）

【文献】 特開２００４−１７１２４１（ＪＰ，Ａ）

【文献】 特開２００９−９２３１（ＪＰ，Ａ）

【文献】 特開２０１２−２４２９１２（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０８Ｂ１３／００−１５／０２

２３／００−３１／００

(57)【特許請求の範囲】

【請求項1】

店舗の出口を撮像可能に設置された第１カメラによって生成される第１撮像画像から人物を検出する検出手段と、
前記第１撮像画像から検出された人物が、前記店舗の商品の陳列場所を撮像可能に設置された第２カメラによって生成される第２撮像画像に含まれるか否かを判定する第１判定手段と、
前記第２撮像画像に含まれなおかつ不審度が高い前記人物が、前記店舗の会計エリアを撮像可能に設置された第３カメラによって生成される第３撮像画像に含まれるか否かを判定する第２判定手段と、
前記第２判定手段によって前記人物が前記第３撮像画像に含まれないと判定された場合、警告処理を行う警告手段と、
を有する情報処理装置。

【請求項2】

前記第２判定手段は、前記第２撮像画像に前記人物が含まれる期間の前後における前記陳列場所の商品の量の変化、前記陳列場所における前記人物の滞留時間、前記人物の動作の不審さ、又は前記人物の移動の軌跡の不審さを表す値を算出し、前記算出した値が所定値以上である場合に、前記人物の不審度が高いと判定する、請求項１に記載の情報処理装置。

【請求項3】

前記第２判定手段が利用する第２撮像画像は、前記第２カメラによって前記人物が撮像された時点と、前記第１カメラによって前記人物が撮像された時点との間の期間の映像である、請求項１又は２に記載の情報処理装置。

【請求項4】

前記検出手段、前記第１判定手段、及び前記第２判定手段はそれぞれ、人物が背後から撮像されている撮像画像を利用する、請求項１乃至３いずれか一項に記載の情報処理装置。

【請求項5】

前記第１判定手段は、前記第１撮像画像から検出された人物の服装、体型、髪の色、肌の色、及び所持品のいずれか１つ以上に基づいて、その人物が前記第２撮像画像に含まれるか否かを判定し、
前記第２判定手段は、前記第１撮像画像から検出された人物の服装、体型、髪の色、肌の色、及び所持品のいずれか１つ以上に基づいて、その人物が前記第３撮像画像に含まれるか否かを判定する、請求項４に記載の情報処理装置。

【請求項6】

前記第１判定手段は、前記第１撮像画像から検出された人物が前記第２撮像画像に含まれるか否かの判定に、その人物の目、鼻、及び口を用いず、
前記第２判定手段は、前記第１撮像画像から検出された人物が前記第３撮像画像に含まれるか否かの判定に、その人物の目、鼻、及び口を用いない、請求項４又は５に記載の情報処理装置。

【請求項7】

前記検出手段が利用する前記第１撮像画像、前記第１判定手段が利用する前記第２撮像画像、及び前記第２判定手段が利用する前記第３撮像画像には、人物の目、鼻、及び口のいずれもが含まれない、請求項６に記載の情報処理装置。

【請求項8】

第１判定手段により前記人物が第２撮像画像に含まれないと判定された後か、前記第２判定手段により前記人物の不審度は高くないと判定された後か、又は前記第２判定手段により前記人物が前記第３撮像画像に含まれるか否かが判定された後に、前記検出手段、前記第１判定手段、及び前記第２判定手段それぞれが処理する撮像画像から、前記人物以外の人物が含まれない撮像画像を除外する除外手段を有する、請求項１乃至７いずれか一項に記載の情報処理装置。

【請求項9】

前記出口にゲートが設けられており、
前記警告手段が行う警告処理は、前記ゲートを通行不可の状態に設定する処理である、請求項１乃至８いずれか一項に記載の情報処理装置。

【請求項10】

コンピュータによって実行される制御方法であって、
店舗の出口を撮像可能に設置された第１カメラによって生成される第１撮像画像から人物を検出する検出ステップと、
前記第１撮像画像から検出された人物が、前記店舗の商品の陳列場所を撮像可能に設置された第２カメラによって生成される第２撮像画像に含まれるか否かを判定する第１判定ステップと、
前記第２撮像画像に含まれなおかつ不審度が高い前記人物が、前記店舗の会計エリアを撮像可能に設置された第３カメラによって生成される第３撮像画像に含まれるか否かを判定する第２判定ステップと、
前記第２判定ステップによって前記人物が前記第３撮像画像に含まれないと判定された場合、警告処理を行う警告ステップと、
を有する制御方法。

【請求項11】

前記第２判定ステップにおいて、前記第２撮像画像に前記人物が含まれる期間の前後における前記陳列場所の商品の量の変化、前記陳列場所における前記人物の滞留時間、前記人物の動作の不審さ、又は前記人物の移動の軌跡の不審さを表す値を算出し、前記算出した値が所定値以上である場合に、前記人物の不審度が高いと判定する、請求項１０に記載の制御方法。

【請求項12】

前記第２判定ステップにおいて利用する第２撮像画像は、前記第２カメラによって前記人物が撮像された時点と、前記第１カメラによって前記人物が撮像された時点との間の期間の映像である、請求項１０乃至１１いずれか一項に記載の制御方法。

【請求項13】

前記検出ステップ、前記第１判定ステップ、及び前記第２判定ステップそれぞれにおいて、人物が背後から撮像されている撮像画像を利用する、請求項１０乃至１２いずれか一項に記載の制御方法。

【請求項14】

前記第１判定ステップにおいて、前記第１撮像画像から検出された人物の服装、体型、髪の色、肌の色、及び所持品のいずれか１つ以上に基づいて、その人物が前記第２撮像画像に含まれるか否かを判定し、
前記第２判定ステップにおいて、前記第１撮像画像から検出された人物の服装、体型、髪の色、肌の色、及び所持品のいずれか１つ以上に基づいて、その人物が前記第３撮像画像に含まれるか否かを判定する、請求項１３に記載の制御方法。

【請求項15】

前記第１判定ステップにおいて、前記第１撮像画像から検出された人物が前記第２撮像画像に含まれるか否かの判定に、その人物の目、鼻、及び口を用いず、
前記第２判定ステップにおいて、前記第１撮像画像から検出された人物が前記第３撮像画像に含まれるか否かの判定に、その人物の目、鼻、及び口を用いない、請求項１３又は１４に記載の制御方法。

【請求項16】

前記検出ステップにおいて利用する前記第１撮像画像、前記第１判定ステップにおいて利用する前記第２撮像画像、及び前記第２判定ステップにおいて利用する前記第３撮像画像には、人物の目、鼻、及び口のいずれもが含まれない、請求項１５に記載の制御方法。

【請求項17】

第１判定ステップにおいて前記人物が第２撮像画像に含まれないと判定された後か、前記第２判定ステップにおいて前記人物の不審度は高くないと判定された後か、又は前記第２判定ステップにおいて前記人物が前記第３撮像画像に含まれるか否かが判定された後に、前記検出ステップ、前記第１判定ステップ、及び前記第２判定ステップそれぞれにおいて処理する撮像画像から、前記人物以外の人物が含まれない撮像画像を除外する除外ステップを有する、請求項１０乃至１６いずれか一項に記載の制御方法。

【請求項18】

前記出口にゲートが設けられており、
前記警告ステップにおいて行う警告処理は、前記ゲートを通行不可の状態に設定する処理である、請求項１０乃至１７いずれか一項に記載の制御方法。

【請求項19】

請求項１０乃至１８いずれか一項に記載の制御方法の各ステップをコンピュータに実行させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は情報処理装置、制御方法、及びプログラムに関する。

【背景技術】

【0002】

店舗において、陳列されている商品が盗まれることがある。そこで、商品の盗難を防ぐため、警備員が店舗内を歩き回って警備を行ったり、監視カメラの映像を監視したりしている。

【0003】

しかし、人手で行う監視には多くの労力を要する。また、商品が陳列されている場所全てを常に人手で監視することは難しく、監視漏れが発生する可能性がある。

【0004】

そこで、情報処理技術を活用した盗難防止のためのシステムが開発されている。例えば特許文献１は、タグが取り付けられた商品を持ってゲートを通る人物の顔を、ゲート付近に設けられたカメラで撮像し、撮像された顔を監視カメラの映像から検索するシステムを開示している。

【0005】

特許文献２は、万引き等の不正行為の調査対象とする商品について、不正行為が行われたか否かを判定するシステムを開示している。具体的には、特許文献２のシステムは、（１）調査対象の商品の売り場において或る人物が所定時間以上滞在し、（２）その人物がその商品を手に取った後、その商品を商品棚へ戻さず、なおかつ（３）その人物が店舗を出た場合に、その人物の購入履歴を検索する。そして、その人物がその商品を購入したことを示す購入履歴が無い場合、特許文献２のシステムは、不正行為が行われたと判定する。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開２０１１−２３３１３３号公報

【特許文献2】特開２００９−２８４１６７号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

特許文献１のシステムは、商品に付けられているタグを検出することにより、盗難の発生を検出する。そのため、このシステムを導入するためには、各商品にタグを付ける作業が必要となり、システムの導入に要する労力が大きい。

【0008】

特許文献２のシステムを導入するためには、「どの商品が購入されたか」だけでなく、「どの顧客がどの商品を購入したか」を購入履歴として記録できる購入管理システムを導入する必要がある。よって、このような購入管理システムを導入していない店舗では、購入管理システムの入れ替え等が必要となる。

【0009】

本発明は、上記の課題に鑑みてなされたものである。本発明の目的の一つは、不正行為を監視できる技術であって、導入が容易な技術を提供することである。

【課題を解決するための手段】

【0010】

本発明の情報処理装置は、（１）店舗の出口を撮像可能に設置された第１カメラによって生成される第１撮像画像から人物を検出する検出手段と、（２）前記第１撮像画像から検出された人物が、前記店舗の商品の陳列場所を撮像可能に設置された第２カメラによって生成される第２撮像画像に含まれるか否かを判定する第１判定手段と、（３）前記第２撮像画像に含まれなおかつ不審度が高い前記人物が、前記店舗の会計エリアを撮像可能に設置された第３カメラによって生成される第３撮像画像に含まれるか否かを判定する第２判定手段と、（４）前記第２判定手段によって前記人物が前記第３撮像画像に含まれないと判定された場合、警告処理を行う警告手段と、を有する。

【0011】

本発明の制御方法は、コンピュータによって実行される。当該制御方法は、（１）店舗の出口を撮像可能に設置された第１カメラによって生成される第１撮像画像から人物を検出する検出ステップと、（２）前記第１撮像画像から検出された人物が、前記店舗の商品の陳列場所を撮像可能に設置された第２カメラによって生成される第２撮像画像に含まれるか否かを判定する第１判定ステップと、（３）前記第２撮像画像に含まれなおかつ不審度が高い前記人物が、前記店舗の会計エリアを撮像可能に設置された第３カメラによって生成される第３撮像画像に含まれるか否かを判定する第２判定ステップと、（４）前記第２判定ステップによって前記人物が前記第３撮像画像に含まれないと判定された場合、警告処理を行う警告ステップと、を有する。

【0012】

本発明のプログラムは、本発明の制御方法が有する各ステップをコンピュータに実行させる。

【発明の効果】

【0013】

本発明によれば、不正行為を監視できる技術であって、導入が容易な技術が提供される。

【図面の簡単な説明】

【0014】

上述した目的、およびその他の目的、特徴および利点は、以下に述べる好適な実施の形態、およびそれに付随する以下の図面によってさらに明らかになる。

【0015】

【図1】実施形態１の情報処理装置が利用する複数の種類のカメラの設置場所を例示する図である。

【図2】実施形態１の情報処理装置の動作を概念的に例示する図である。

【図3】実施形態１の情報処理装置の構成を例示する図である。

【図4】情報処理装置を実現するための計算機を例示する図である。

【図5】実施形態１の情報処理装置によって実行される処理の流れを例示するフローチャートである。

【図6】人物情報をテーブル形式で例示する図である。

【図7】商品の減少量を算出する方法を例示する図である。

【図8】人物の動作に対して割り当てられたスコアをテーブル形式で例示する図である。

【図9】動線の特徴に対して割り当てられたスコアをテーブル形式で例示する図である。

【図10】ディスプレイ装置に表示される警告メッセージを例示する図である。

【図11】実施形態２の情報処理装置を例示するブロック図である。

【発明を実施するための形態】

【0016】

以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。また、特に説明する場合を除き、各ブロック図において、各ブロックは、ハードウエア単位の構成ではなく、機能単位の構成を表している。

【0017】

［実施形態１］
＜情報処理装置２０００の概要＞
図１は、実施形態１の情報処理装置２０００が利用する複数の種類のカメラの設置場所を例示する図である。情報処理装置２０００が利用される店舗には、第１カメラ１０、第２カメラ２０、及び第３カメラ３０が設置されている。第１カメラ１０は、店舗の出口（出口５０）を撮像可能に設置されている。第２カメラ２０は、店舗における商品の陳列場所（陳列場所６０）を撮像可能に設置されている。例えば商品は、陳列場所６０に設置されている商品棚に陳列される。第３カメラ３０は、商品の会計が行われる場所（会計エリア７０）を撮像可能に設置されている。

【0018】

図２は、実施形態１の情報処理装置２０００の動作を概念的に例示する図である。なお図２は、情報処理装置２０００の動作の理解を容易にすることを目的とする例示のための図であり、情報処理装置２０００の動作は図２によって何ら限定されない。

【0019】

第１カメラ１０、第２カメラ２０、及び第３カメラ３０はそれぞれ、第１撮像画像１１、第２撮像画像２１、及び第３撮像画像３１を生成する。第１撮像画像１１には、出口５０が撮像されている。第２撮像画像２１には、陳列場所６０が撮像されている。第３撮像画像３１には、会計エリア７０が撮像されている。

【0020】

情報処理装置２０００は、第１撮像画像１１から人物を検出する。ここで検出される人物は、出口５０において第１カメラ１０が撮像した人物とも言える。

【0021】

次に情報処理装置２０００は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれるか否かを判定する。言い換えれば、出口５０で撮像された人物が、陳列場所６０でも撮像されたか否かが判定される。

【0022】

さらに情報処理装置２０００は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれていると判定され、なおかつその人物の不審度が高い場合に、その人物が第３撮像画像３１にも含まれているか否かを判定する。言い換えれば、出口５０及び陳列場所６０の双方において撮像され、なおかつ不審度の高い人物が、会計エリア７０においても撮像されたか否かが判定される。

【0023】

そして情報処理装置２０００は、第３撮像画像３１からその人物が検出されなかった場合に、警告処理を行う。よって、出口５０及び陳列場所６０の双方では撮像され、なおかつ不審度の高い人物が、会計エリア７０では撮像されなかった場合に、警告処理が行われることとなる。

【0024】

図２では、時点ｔ１に撮像された第１撮像画像１１−１から人物４０が検出されている。そのため情報処理装置２０００は、第２撮像画像２１からも人物４０の検出を試みる。その結果、時点ｔ２における第２撮像画像２１−１から人物４０が検出されている。さらに図２の例では、人物４０の不審度が高い。そこで情報処理装置２０００は、第３撮像画像３１からも人物４０の検出を試みる。その結果、第３撮像画像３１からは人物４０が検出されない。よって情報処理装置２０００は警告処理を行う。

【0025】

ここで、人物４０の不審度の高さは、第２撮像画像２１を利用して算出されてもよいし、第２撮像画像２１以外を利用して算出されてもよい。人物４０の不審度の高さを算出する詳細な方法については後述する。

【0026】

＜作用・効果＞
出口５０で撮像された人物が陳列場所６０でも撮像されている場合、その人物は、店舗の商品を取得した後、店舗から出ようとしている可能性がある。さらにその人物の不審度が高い場合、その人物は、盗難等の不正な目的で商品を取得した可能性がある。ただし、その人物が会計エリア７０において商品の会計をしていれば、その人物は取得した商品を購入したと考えられる。

【0027】

そこで本実施形態の情報処理装置２０００は、商品を取得した後に店舗から出ようとしている可能性がある人物（第１撮像画像１１及び第２撮像画像２１に含まれる人物）であり、なおかつ不正を行おうとしている蓋然性が高い人物（不審度が高い人物）が、会計エリア７０において撮像されたか否かを判定する。そして、情報処理装置２０００は、この人物が会計エリア７０において撮像されていない場合に警告処理を行う。こうすることで、商品の盗難などが行われた蓋然性が高い場合に警告処理が行われるようになるため、店員等は、商品の盗難などの事態を早期に把握し、迅速な対処を行うことが可能となる。

【0028】

また、本実施形態の情報処理装置２０００を導入するにあたり、監視対象の商品にタグを付けたり、どの顧客がどの商品を購入したか」を購入履歴として記録する管理システムを導入したりする必要はない。よって、本実施形態の情報処理装置２０００は容易に導入することができる。

【0029】

以下、本実施形態についてさらに詳細に説明する。

【0030】

＜情報処理装置２０００の機能構成の例＞
図３は、実施形態１の情報処理装置２０００の構成を例示する図である。情報処理装置２０００は、検出部２０２０、第１判定部２０４０、第２判定部２０６０、及び警告部２０８０を有する。検出部２０２０は、第１撮像画像１１から人物を検出する。第１判定部２０４０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれるか否かを判定する。第２判定部２０６０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれ、なおかつその人物の不審度が高い場合に、第３撮像画像３１にその人物が含まれるか否かを判定する。警告部２０８０は、その人物が第３撮像画像３１に含まれない場合に警告処理を行う。

【0031】

＜情報処理装置２０００のハードウエア構成＞
情報処理装置２０００の各機能構成部は、各機能構成部を実現するハードウエア（例：ハードワイヤードされた電子回路など）で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ（例：電子回路とそれを制御するプログラムの組み合わせなど）で実現されてもよい。以下、情報処理装置２０００の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。

【0032】

図４は、情報処理装置２０００を実現するための計算機１０００を例示する図である。計算機１０００は任意の計算機である。例えば計算機１０００は、Personal Computer（PC）、サーバマシン、タブレット端末、又はスマートフォンなどである。計算機１０００は、情報処理装置２０００を実現するために設計された専用の計算機であってもよいし、汎用の計算機であってもよい。

【0033】

計算機１０００は、バス１０２０、プロセッサ１０４０、メモリ１０６０、ストレージデバイス１０８０、入出力インタフェース１１００、及びネットワークインタフェース１１２０を有する。バス１０２０は、プロセッサ１０４０、メモリ１０６０、ストレージデバイス１０８０、入出力インタフェース１１００、及びネットワークインタフェース１１２０が、相互にデータを送受信するためのデータ伝送路である。ただし、プロセッサ１０４０などを互いに接続する方法は、バス接続に限定されない。プロセッサ１０４０は、CPU（Central Processing Unit）や GPU（Graphics Processing Unit）などの演算装置である。メモリ１０６０は、RAM（Random Access Memory）などを用いて実現される主記憶装置である。ストレージデバイス１０８０は、ハードディスク、SSD（Solid State Drive）、メモリカード、又は ROM（Read Only Memory）などを用いて実現される補助記憶装置である。ただし、ストレージデバイス１０８０は、RAM など、主記憶装置を構成するハードウエアと同様のハードウエアで構成されてもよい。

【0034】

入出力インタフェース１１００は、計算機１０００と入出力デバイスとを接続するためのインタフェースである。ネットワークインタフェース１１２０は、計算機１０００を通信網に接続するためのインタフェースである。この通信網は、例えば LAN（Local Area Network）や WAN（Wide Area Network）である。ネットワークインタフェース１１２０が通信網に接続する方法は、無線接続であってもよいし、有線接続であってもよい。

【0035】

例えば計算機１０００は、ネットワークを介して、第１カメラ１０、第２カメラ２０、及び第３カメラ３０と通信可能に接続されている。ただし、計算機１０００を各カメラと通信可能に接続する方法は、ネットワークを介した接続に限定されない。また、計算機１０００は、各カメラと通信可能に接続されていなくてもよい。

【0036】

ストレージデバイス１０８０は、情報処理装置２０００の各機能構成部（検出部２０２０、第１判定部２０４０、第２判定部２０６０、及び警告部２０８０）を実現するプログラムモジュールを記憶している。プロセッサ１０４０は、これら各プログラムモジュールをメモリ１０６０に読み出して実行することで、各プログラムモジュールに対応する機能を実現する。

【0037】

なお、計算機１０００は、複数の計算機を利用して実現されてもよい。例えば検出部２０２０、第１判定部２０４０、第２判定部２０６０、及び警告部２０８０をそれぞれ異なる計算機で実現することができる。この場合、各計算機のストレージデバイスに記憶されるプログラムモジュールは、その計算機で実現される機能構成部に対応するプログラムモジュールだけでもよい。

【0038】

＜カメラについて＞
第１カメラ１０、第２カメラ２０、及び第３カメラ３０はそれぞれ、繰り返し撮像を行って複数の撮像画像を生成することができる任意のカメラである。各カメラは、動画データを生成するビデオカメラであってもよいし、静止画像データを生成するスチルカメラであってもよい。前者の場合、第１撮像画像１１、第２撮像画像２１、及び第３撮像画像３１は、動画データを構成する画像フレームである。上記各カメラは、例えば監視カメラである。

【0039】

前述したように計算機１０００を複数の計算機で実現する場合、その実現に各カメラを利用してもよい。例えば検出部２０２０は、第１カメラ１０を用いて実現することができる。この場合、第１カメラ１０は、自身で生成した第１撮像画像１１から人物の検出を行う。

【0040】

その他にも例えば、第１判定部２０４０は、第２カメラ２０を用いて実現することができる。この場合、第２カメラ２０は、自身が生成した第２撮像画像２１に第１撮像画像１１から検出された人物が含まれるか否かを判定する。

【0041】

その他にも例えば、第２判定部２０６０は、第３カメラ３０を用いて実現することができる。第３カメラ３０は、第１撮像画像１１と第２撮像画像２１の双方に含まれ、なおかつ不審度が高い人物が、自身で生成した第３撮像画像３１に含まれるか否かを判定する。またさらに、警告部２０８０が第３カメラ３０を用いて実現されてもよい。この場合、第３カメラ３０は、上記人物が第３撮像画像３１に含まれない場合に警告処理を行う。

【0042】

このように計算機１０００を実現するために用いられる各カメラには、例えば、インテリジェントカメラ、ネットワークカメラ、又は IP（Internet Protocol）カメラなどと呼ばれるカメラを利用できる。

【0043】

＜処理の流れ＞
図５は、実施形態１の情報処理装置２０００によって実行される処理の流れを例示するフローチャートである。検出部２０２０は、第１撮像画像１１を取得する（Ｓ１０２）。検出部２０２０は、第１撮像画像１１から人物を検出する（Ｓ１０４）。第１撮像画像１１から人物が検出されなかった場合（Ｓ１０６：ＮＯ）、図５の処理は終了する。

【0044】

第１撮像画像１１から人物が検出された場合（Ｓ１０６：ＹＥＳ）、第１判定部２０４０は、第２撮像画像２１を取得する（Ｓ１０８）。第１判定部２０４０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれるか否かを判定する（Ｓ１１０）。第１撮像画像１１から検出された人物が第２撮像画像２１に含まれない場合（Ｓ１１０：ＮＯ）、図５の処理は終了する。

【0045】

第１撮像画像１１から検出された人物が第２撮像画像２１に含まれる場合（Ｓ１１０：ＹＥＳ）、第２判定部２０６０は、その人物の不審度が高いか否かを判定する（Ｓ１１２）。その人物の不審度が高くない場合（Ｓ１１２：ＮＯ）、図５の処理は終了する。

【0046】

その人物の不審度が高い場合（Ｓ１１２：ＹＥＳ）、第２判定部２０６０は第３撮像画像３１を取得する（Ｓ１１４）。第２判定部２０６０は、その人物が第３撮像画像３１に含まれるか否かを判定する（Ｓ１１６）。その人物が第３撮像画像３１に含まれる場合（Ｓ１１６：ＹＥＳ）、図５の処理は終了する。

【0047】

その人物が第３撮像画像３１に含まれない場合（Ｓ１１６：ＮＯ）、警告部２０８０は警告処理を実行する（Ｓ１１８）。

【0048】

なお、図５が示す処理の流れはあくまで一例であり、情報処理装置２０００によって実行される処理の流れは図５が示す流れに限定されない。例えば各撮像画像を取得するタイミングは、その撮像画像を利用する前の任意のタイミングとすることができる。例えば第１判定部２０４０は、第１撮像画像１１から人物が検出されるか否かの判定（Ｓ１０６）が行われる前に第２撮像画像２１を取得してもよい。同様に、第２判定部２０６０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれるか否かの判定（Ｓ１１０）やその人物の不審度が高いか否かの判定（Ｓ１１２）が行われる前に第３撮像画像３１を取得してもよい。

【0049】

＜第１映像１２の取得方法：Ｓ１０２＞
検出部２０２０は第１撮像画像１１を取得する（Ｓ１０２）。ここで、検出部２０２０が第１撮像画像１１を取得する方法は任意である。例えば検出部２０２０は、第１カメラ１０から送信される第１撮像画像１１を受信する。また例えば、検出部２０２０は、第１カメラ１０にアクセスし、第１カメラ１０に記憶されている第１撮像画像１１を取得する。

【0050】

なお、第１カメラ１０は、第１カメラ１０の外部に設けられている記憶装置に第１撮像画像１１を記憶してもよい。この場合、検出部２０２０は、この記憶装置にアクセスして第１撮像画像１１を取得する。

【0051】

検出部２０２０を第１カメラ１０で実現される場合、検出部２０２０は、検出部２０２０を実現する第１カメラ１０自身によって生成された第１撮像画像１１を取得する。この場合、第１撮像画像１１は、例えば第１カメラ１０の内部にある記憶装置に記憶されている。そこで検出部２０２０は、これらの記憶装置から第１撮像画像１１を取得する。

【0052】

検出部２０２０が第１撮像画像１１を取得するタイミングは様々である。例えば検出部２０２０は、第１カメラ１０によって新たな第１撮像画像１１が生成される度に、その第１撮像画像１１を取得する。その他にも例えば、検出部２０２０は、定期的に未取得の第１撮像画像１１を取得してもよい。例えば検出部２０２０が１秒間に１回第１撮像画像１１を取得する場合、検出部２０２０は、１秒間に生成される複数の第１撮像画像１１（例えば 30fps(frames/second) のカメラであれば３０枚の第１撮像画像１１）をまとめて取得する。

【0053】

＜第１撮像画像１１からの人物の検出：Ｓ１０４＞
検出部２０２０は、第１撮像画像１１から人物を検出する（Ｓ１０４）。具体的には、検出部２０２０は、第１撮像画像１１から人物を表す領域を検出することにより、第１撮像画像１１から人物を検出する。以下、人物を表す領域を人物領域と呼ぶ。

【0054】

第１撮像画像１１から人物領域を検出する方法は様々である。例えば検出部２０２０は、特徴量マッチングやテンプレートマッチングを利用して人物領域の検出を行う。前者の場合、検出部２０２０は、第１撮像画像１１に含まれる領域のうち、人間の外見的な特徴を表す特徴量（以下、人物特徴量）を持つ領域を、人物領域として検出する。後者の場合、検出部２０２０は、第１撮像画像１１に含まれる領域のうち、人物を表すテンプレート画像との類似度が高い領域を、人物領域として検出する。なお、人物特徴量やテンプレート画像は予め定義しておく。

【0055】

なお、プライバシー保護などの観点から、カメラで人の顔の前面を撮像することが好ましくないこともある。そこで、各カメラ（第１カメラ１０、第２カメラ２０及び第３カメラ３０）はいずれも、人の顔の前面が撮像される蓋然性が低い方向から人を撮像するように設置されることが好適である。例えば各カメラは、店舗における人の動線方向と同じ方向を向くように設置される。

【0056】

このように人の顔の前面が撮像される蓋然性が低いように第１カメラ１０が設置されると、第１撮像画像１１には、人物の顔の前面にある特徴的な要素（目、鼻、及び口など）が含まれない蓋然性が高い。そこでこの場合、検出部２０２０は、人物の後ろ姿が撮像されている第１撮像画像１１から人物を検出できるようにする。例えば特徴量マッチングを利用する場合、人物特徴量として、少なくとも、人物の後ろ姿の外見的な特徴量を定めておく。また、テンプレートマッチングを利用する場合、少なくとも、人物の後ろ姿を表すテンプレート画像を定めておく。

【0057】

＜検出された人物に関する情報＞
第１判定部２０４０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれるか否かを判定する。この判定を行うためには、第１撮像画像１１から検出された人物を特定する情報が必要となる。

【0058】

そこで検出部２０２０は、第１撮像画像１１から検出された人物を特定する情報を生成する。以下、この情報を人物情報と呼ぶ。例えば検出部２０２０は、第１判定部２０４０からアクセス可能な記憶装置に人物情報を記憶させる。その他にも例えば、検出部２０２０は、第１判定部２０４０に対して人物情報を出力してもよい。

【0059】

図６は人物情報をテーブル形式で例示する図である。図６のテーブルを人物情報テーブル５００と呼ぶ。人物情報テーブル５００は、人物ＩＤ５０２、タイムスタンプ５０４、及び人物領域５０６を有する。人物ＩＤ５０２は、第１撮像画像１１から検出された人物に検出部２０２０が割り当てる識別子である。タイムスタンプ５０４は、この人物が検出された第１撮像画像１１の生成時点を表す。人物領域５０６は、第１映像１２から検出された人物領域を特定する情報である。なお、第１撮像画像１１から検出された人物に対して識別子を割り当てる方法は任意である。

【0060】

人物領域５０６は、検出された人物領域そのもの（人物領域に含まれる各画素の値の集合）を示してもよいし、検出された人物の特徴を示してもよい。抽出された人物の特徴は、例えば、その人物の体型（輪郭線など）を示す。その他にも例えば、抽出された人物の特徴は、その人物の服装、髪の色、及び肌の色などを示す。その他にも例えば、抽出された人物の特徴は、その人物の所持品の形状や色などを示す。

【0061】

＜第２撮像画像２１の取得：Ｓ１０８＞
第１判定部２０４０は第２撮像画像２１を取得する（Ｓ１０８）。第１判定部２０４０が第２撮像画像２１を取得する方法には、検出部２０２０が第１撮像画像１１を取得する方法と同様の方法を採用できる。

【0062】

第１判定部２０４０が第２撮像画像２１を取得するタイミングは様々である。例えば第１判定部２０４０は、検出部２０２０が第１撮像画像１１を取得するタイミングと同様のタイミングで第２撮像画像２１を取得する。その他にも例えば、第１判定部２０４０は、検出部２０２０によって第１撮像画像１１から人物が検出されたことに応じて、第２撮像画像２１を取得してもよい。この場合、例えば第１判定部２０４０は、検出部２０２０によって生成された前述の人物情報を取得したタイミングで、第２撮像画像２１を取得する。

【0063】

なお第１判定部２０４０は、第２カメラ２０によって生成された第２撮像画像２１の全てを取得してもよいし、一部のみを取得してもよい。ここで、第１撮像画像１１に含まれる人物は出口５０で撮像されており、第２撮像画像２１に含まれる人物は陳列場所６０で撮像されている。そのため、同じ人物が第１撮像画像１１と第２撮像画像２１に含まれる場合、第２撮像画像２１の生成時点は、第１撮像画像１１の生成時点よりも前であると言える。そこで、第２カメラ２０によって生成された第２撮像画像２１の一部のみを取得する場合、例えば第１判定部２０４０は、人物が検出された第１撮像画像１１の生成時点（取得した人物情報が示すタイムスタンプ）よりも前に生成された第２撮像画像２１のみを取得する。こうすることで、第２撮像画像２１の取得に要する情報処理装置２０００の処理負荷や、第２撮像画像２１の取得に利用されるネットワークの使用帯域などを削減することができる。

【0064】

＜第２撮像画像２１からの人物の検出：Ｓ１１０＞
第１判定部２０４０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれるか否かを判定する（Ｓ１１０）。前述したように、第１撮像画像１１から検出された人物は、検出部２０２０によって生成される人物情報で特定される。そこで第１判定部２０４０は、検出部２０２０によって生成された人物情報を利用して、上記判定を行う。判定に利用される第２撮像画像２１は、対象の人物が検出された第１撮像画像１１の生成時点よりも前の時点において生成された第２撮像画像２１である。

【0065】

第１判定部２０４０が上記判定を行う具体的な方法は様々である。以下、その方法をいくつか例示する。

【0066】

＜＜判定方法の例１＞＞
第１判定部２０４０は、各第２撮像画像２１を対象に、人物情報によって特定される人物の検出を試みる。そして、その人物がいずれかの第２撮像画像２１から検出された場合、第１判定部２０４０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれると判定する（Ｓ１１０：ＹＥＳ）。一方、その人物がどの第２撮像画像２１からも検出されない場合、第１判定部２０４０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれないと判定する。（Ｓ１１０：ＮＯ）

【0067】

例えば人物情報が、第１撮像画像１１から抽出された人物領域そのものを表しているとする。この場合、第１判定部２０４０は、第２撮像画像２１から、その人物領域との類似度が高い領域を検出することで、人物情報によって特定される人物の検出を行う。

【0068】

その他にも例えば、人物情報が、第１撮像画像１１から抽出された人物の特徴を表しているとする。この場合、第１判定部２０４０は、第２撮像画像２１から、その人物情報が示す特徴を持つ人物を検出することで、人物情報によって特定される人物の検出を行う。

【0069】

＜＜判定方法の例２＞＞
第１判定部２０４０は、検出部２０２０が第１撮像画像１１から人物を検出する方法と同様の方法で、第２撮像画像２１からも人物を検出する。さらに第１判定部２０４０は、第２撮像画像２１から検出された人物の中に、第１撮像画像１１から検出された人物と同じ人物が含まれるか否かを判定する。

【0070】

例えば第１判定部２０４０は、取得した１つ以上の第２撮像画像２１から人物を検出し、検出された各人物について人物情報を生成する。さらに第１判定部２０４０は、検出部２０２０によって生成された人物情報と、第１判定部２０４０によって生成された人物情報とのマッチングを行う。第１判定部２０４０によって生成された人物情報の中に、検出部２０２０によって生成された人物情報によって特定される人物と同じ人物を特定する人物情報がある場合、第１判定部２０４０は、第１撮像画像１１によって検出された人物が第２撮像画像２１に含まれると判定する（Ｓ１１０：ＹＥＳ）。一方、第１判定部２０４０によって生成された人物情報の中に、検出部２０２０によって生成された人物情報によって特定される人物と同じ人物を特定する人物情報がない場合、第１判定部２０４０は、検出部２０２０によって検出された人物が第２撮像画像２１に含まれないと判定する（Ｓ１１０：ＮＯ）。

【0071】

＜第３撮像画像３１の取得：Ｓ１１４＞
第２判定部２０６０は第３撮像画像３１を取得する（Ｓ１１４）。第２判定部２０６０が第３撮像画像３１を取得する方法には、検出部２０２０が第１撮像画像１１を取得する方法と同様の方法を採用できる。

【0072】

第２判定部２０６０が第３撮像画像３１を取得するタイミングは様々である。例えば第２判定部２０６０は、検出部２０２０が第１撮像画像１１を取得するタイミングと同様のタイミングで第３撮像画像３１を取得する。その他にも例えば、第２判定部２０６０は、第１撮像画像１１から検出された人物が第２撮像画像２１に含まれると判定され（Ｓ１１０：ＹＥＳ）、なおかつその人物の不審度が高い（Ｓ１１２：ＹＥＳ）と判定されたことに応じて、第３撮像画像３１を取得してもよい（図５参照）。

【0073】

なお第２判定部２０６０は、第３カメラ３０によって生成された第３撮像画像３１の全てを取得してもよいし、一部のみを取得してもよい。後者の場合、例えば第２判定部２０６０は、第３撮像画像３１に含まれるか否かの判定対象である人物が含まれる第２撮像画像２１の生成時点と、その人物が含まれる第１撮像画像１１の生成時点との間の期間に生成された第３撮像画像３１のみを取得する。これは、或る人物が会計エリア７０（第３カメラ３０の撮像範囲）で撮像されるのは、その人物が陳列場所６０で撮像される時点（商品を陳列場所６０から取得する時点）と、その人物が出口５０で撮像される時点（出口５０から出ようとする時点）との間であると言えるためである。このように一部の第３撮像画像３１のみを取得するようにすることで、第３撮像画像３１の取得に要する情報処理装置２０００の処理負荷や、第３撮像画像３１の取得に利用されるネットワークの使用帯域などを削減することができる。

【0074】

＜第２判定部２０６０による判定：Ｓ１１６＞
第２判定部２０６０は、（１）第１撮像画像１１及び第２撮像画像２１の双方に含まれている、及び（２）不審度が高いという２つの条件を満たす人物が、第３撮像画像に含まれているか否かを判定する（Ｓ１１６）。第１撮像画像１１及び第２撮像画像２１の双方に含まれている人物は、検出部２０２０から検出された人物で、なおかつ第１判定部２０４０によって第２撮像画像２１に含まれていると判定された人物である。

【0075】

第２判定部２０６０は、検出部２０２０から検出された人物で、なおかつ第１判定部２０４０によって第２撮像画像２１に含まれていると判定された人物について、その人物の不審度が高いか否かを判定する（Ｓ１１２）。この判定方法の詳細については後述する。

【0076】

不審度が高いと判定された場合（Ｓ１１２：ＹＥＳ）、第２判定部２０６０は、この人物が第３撮像画像３１に含まれているか否かを判定する（Ｓ１１６）。一方、不審度が高くないと判定された場合（Ｓ１１２：ＮＯ）、第２判定部２０６０は、この人物が第３撮像画像３１に含まれているか否かを判定しなくてよい。

【0077】

判定に利用される第３撮像画像３１は、対象の人物が検出された第１撮像画像１１の生成時点よりも前の時点であり、なおかつ対象の人物が検出された第２撮像画像２１の生成時点よりも後の時点において生成されたものである。

【0078】

なお、この人物が第３撮像画像３１に含まれるか否かを判定する方法は、検出部２０２０によって検出された人物が第２撮像画像２１に含まれるか否かを判定する方法と同様である（例えば前述の方法１や方法２）。判定に利用される人物情報は、第１判定部２０４０から取得されてもよいし、第２判定部２０６０によってアクセス可能な記憶装置から取得されてもよい。後者の場合、第１判定部２０４０は、第２撮像画像２１に含まれると判定された人物の人物情報を、第２判定部２０６０によってアクセスされる記憶装置に記憶しておく。

【0079】

＜不審度の高さの判定：Ｓ１１２＞
前述したように、第２判定部２０６０は、検出部２０２０から検出された人物で、なおかつ第１判定部２０４０によって第２撮像画像２１に含まれていると判定された人物について、その人物の不審度が高いか否かを判定する（Ｓ１１２）。例えば第２判定部２０６０は、人物の不審度を数値で算出する。そして第２判定部２０６０は、算出した不審度が所定値以上である場合に、その人物の不審度が高いと判定する。この所定値は、第２判定部２０６０に予め設定されていてもよいし、第２判定部２０６０からアクセス可能な記憶装置に記憶されていてもよい。

【0080】

以下、人物の不審度の算出方法について例示する。

【0081】

＜＜算出方法の例１＞＞
例えば第２判定部２０６０は、対象の人物（第１撮像画像１１から検出された人物）が第２撮像画像２１に含まれる期間の前後における商品の減少量を、その人物の不審度として算出する。つまり、その人物が陳列場所６０の前に現れる前後で商品が多く減少しているほど、その人物の不審度が高くなる。

【0082】

例えば第２判定部２０６０は、対象の人物が第２カメラ２０の撮像範囲に含まれる前に生成された第２撮像画像２１に含まれる商品の量と、その人物が第２カメラ２０の撮像範囲に含まれなくなった後に生成された第２撮像画像２１に含まれる商品の量との差分を算出し、算出した差分をその人物の不審度とする。２つの画像に含まれる物の量の差異を算出する技術には、既存の技術を利用することができる。

【0083】

図７は、商品の減少量を算出する方法を例示する図である。対象の人物は、時点ｔ１において生成された第２撮像画像２１−１と、時点ｔ２において生成された第２撮像画像２１−２までの各第２撮像画像２１に含まれている。そこで第２判定部２０６０は、時点ｔ１以前に生成された第２撮像画像２１（例えば第２撮像画像２１−１の１つ前に生成された第２撮像画像２１）と、時点ｔ２以降に生成された第２撮像画像２１（例えば第２撮像画像２１−２の１つ後に生成された第２撮像画像２１）とを比較することで、商品の減少量を算出する。

【0084】

＜＜算出方法の例２＞＞
例えば第２判定部２０６０は、陳列場所６０における対象の人物の滞留時間を、その人物の不審度として算出する。この場合、陳列場所６０における人物の滞留時間が長いほど、その人物の不審度が高くなる。

【0085】

陳列場所６０における人物の滞留時間は、例えば、第２撮像画像２１を利用して算出することができる。具体的には、或る人物の陳列場所６０における滞留時間を算出するために、第２判定部２０６０は、その陳列場所６０を撮像する第２カメラ２０によって生成された第２撮像画像２１の中から、その人物が含まれる第２撮像画像２１を特定する。そして、第２判定部２０６０は、特定された第２撮像画像２１のうち、生成時点が最も遅い第２撮像画像２１の生成時点と、生成時点が最も早い第２撮像画像２１の生成時点との差異を算出し、算出した値をその人物の陳列場所６０における滞留時間とする。例えば図７において、対象の人物の滞留時間はｔ２−ｔ１となる。

【0086】

＜＜算出方法の例３＞＞
例えば第２判定部２０６０は、陳列場所６０において対象の人物が行った動作に基づいて、その人物の不審度を算出する。具体的には、人が行いうる様々な不審な動作に対し、その動作の不審度合いを表すスコアを予め定義しておく。そして第２判定部２０６０は、或る人物が行った各動作に対応するスコアを積算し、算出された積算値をその人物の不審度とする。

【0087】

図８は、人物の動作に対して割り当てられたスコアをテーブル形式で例示する図である。図８のテーブルを動作スコアテーブル６００と呼ぶ。動作６０２は、動作の内容を示す。スコア６０４は、動作６０２で示される動作のスコアを示す。

【0088】

陳列場所６０において人物が行った各動作は、その陳列場所６０を撮像する第２カメラ２０によって生成された第２撮像画像２１を画像解析することで特定できる。画像解析によって人の動作を特定する技術には、既存の技術を利用することができる。

【0089】

＜＜算出方法の例４＞＞
例えば第２判定部２０６０は、店舗における対象の人物の移動の軌跡（動線）に基づいて、その人物の不審度を算出する。具体的には、動線の様々な特徴に対し、その特徴の不審度合いを表すスコアを予め定義しておく。そして第２判定部２０６０は、或る人物の店舗における動線の各特徴に対応するスコアを積算し、算出された積算値をその人物の不審度とする。

【0090】

不審と考えられる動線の特徴には、様々なものがある。例えば不審と考えられる動線の特徴には、（１）同じ陳列場所６０を何度も（所定回数以上）通る、（２）同じ陳列場所付近に長い時間（所定時間以上）滞留する、（３）特定のエリアを何度も（所定回数以上）通る、（４）事前に想定されている動線との一致度合いが低い、などがある。上記特定のエリアは、商品の盗難などが起こりやすいと考えられる場所である。商品の盗難などが起こりやすい場所は、例えば監視カメラの死角となる場所である。監視カメラの死角となる場所では、「未会計の商品を鞄に入れる」といった行動をとりやすいため、商品の盗難などが起こりやすいと言える。なお、上述の所定回数、所定時間、特定のエリア、及び事前に想定されている動線などの情報は、予め第２判定部２０６０に設定されていてもよいし、第２判定部２０６０からアクセス可能な記憶装置に記憶されていてもよい。

【0091】

図９は、動線の特徴に対して割り当てられたスコアをテーブル形式で例示する図である。図９のテーブルを動線スコアテーブル７００と呼ぶ。特徴７０２は、動線の特徴を示す。スコア７０４は、特徴７０２で示される動線の特徴のスコアを示す。

【0092】

店舗における人物の動線を把握する技術には、既存の技術を利用することができる。例えば人物の動線は、店舗の様々な位置に設置されたカメラによって生成される撮像画像を解析してその人物の位置をトラッキングすることにより、把握することができる。

【0093】

＜警告処理の実行：Ｓ１１８＞
条件（１）及び（２）を満たす人物がいずれの第３撮像画像３１にも含まれない場合（Ｓ１１６：ＮＯ）、警告部２０８０は警告処理を実行する（Ｓ１１８）。ここで、警告部２０８０が行う警告処理としては、様々なものを採用できる。例えば警告部２０８０は、情報処理装置２０００に接続されている出力装置から、警告メッセージを出力する。出力装置は、例えばディスプレイ装置やスピーカなどである。

【0094】

図１０は、ディスプレイ装置に表示される警告メッセージを例示する図である。警告画面８０は、警告メッセージ８２及び撮像画像８４を含む。警告メッセージ８２は、盗難の可能性があることを表すメッセージである。撮像画像８４は、第２判定部２０６０によって第３撮像画像３１に含まれないと判定された人物（盗難などの不正を行った可能性がある人物）が検出された第１撮像画像１１である。

【0095】

警告画面８０を見ることで、店員や監視員等は、盗難などの不正が行われた可能性があること、及びその不正を行った人物の情報（外見など）を容易に把握することができる。

【0096】

上記警告メッセージは、警備員室やレジ端末に設置されている据え置き型の出力装置に出力されてもよいし、携帯端末などの可搬媒体に出力されてもよい。例えばこの携帯端末は、店舗の店員や警備員などが所持する携帯端末である。警告部２０８０から出力された警告メッセージを取得した携帯端末は、その携帯端末のディスプレイ装置やスピーカから警告メッセージを出力する。例えば携帯端末のディスプレイ装置には、図１０と同様の警告画面が出力される。

【0097】

その他にも例えば、警告部２０８０は、店舗の出口５０が有するゲート（自動ドアなど）を通行不可にするという警告処理を実行してもよい。例えば警告部２０８０は、ゲートを閉じ、閉じたゲートをロックする。こうすることで、第２判定部２０６０によって第３撮像画像３１に含まれないと判定された人物（盗難などの不正を行った可能性がある人物）が店舗から出られないようにする。

【0098】

なお、ゲートを通行不可にするという警告処理を採用する場合、第３カメラ３０は、出口５０のゲートを通過している人物ではなく、出口５０のゲートに向かっている人物を撮像するように設置されることが好適である。こうすることで、より確実に、上記人物が店舗から出る前に出口５０のゲートを通行不可にできるようになる。

【0099】

［実施形態２］
図１１は、実施形態２の情報処理装置２０００を例示するブロック図である。下記で説明する事項を除き、実施形態２の情報処理装置２０００は、実施形態１の情報処理装置２０００と同様の機能を有する。

【0100】

実施形態１の図５で例示したように、検出部２０２０から人物が検出されると（Ｓ１０６：ＹＥＳ）、その人物に関する警告処理を実行するか否かが判定され（Ｓ１０８からＳ１１６）、警告処理が実行される（Ｓ１１８）。検出部２０２０から検出された人物は出口５０から店舗の外へ出るため、その人物に関する一連の処理が完了した後は、その人物しか含まれない撮像画像を処理する必要はなくなると言える。

【0101】

そこで実施形態２の情報処理装置２０００は除外部２１００を有する。除外部２１００は、第１撮像画像１１から検出された人物に関する一連の処理が完了した後、その人物のみが含まれる第１撮像画像１１、第２撮像画像２１、及び第３撮像画像３１を、情報処理装置２０００による処理の対象から除外する。「第１撮像画像１１から検出された人物に関する一連の処理が完了した後」とは、（１）第１判定部２０４０により、その人物が第２撮像画像２１に含まれないと判定された後（Ｓ１１０：ＮＯ）、（２）第２判定部２０６０により、その人物の不審度は高くないと判定された後（Ｓ１１２：ＮＯ）、又は（３）第２判定部２０６０によってその人物が第３撮像画像３１に含まれるか否かの判定が行われた後（Ｓ１１６）である。

【0102】

このように情報処理装置２０００による処理が完了した撮像画像を情報処理装置２０００の処理対象から除外することで、情報処理装置２０００の処理負荷を削減することができる。

【0103】

ここで、各撮像画像を情報処理装置２０００の処理対象から除外する方法は様々である。例えば除外部２１００は、処理対象から除外する各撮像画像を記憶装置から削除する。その他にも例えば、情報処理装置２０００の処理対象に含まれるか否かを表すフラグを撮像画像のメタデータに設けておき、このフラグを利用してもよい。このフラグの初期値は、「情報処理装置２０００の処理対象に含まれる」に設定しておく。そして除外部２１００は、撮像画像のフラグの値を「情報処理装置２０００の処理対象に含めない」に変更することにより、その撮像画像を情報処理装置２０００の処理対象から除外する。この場合、実施形態２の検出部２０２０、第１判定部２０４０、及び第２判定部２０６０は、フラグの値が「情報処理装置２０００の処理対象に含める」となっている撮像画像のみを対象として各処理を行う。

【0104】

＜ハードウエア構成の例＞
実施形態２の情報処理装置２０００を実現する計算機のハードウエア構成は、実施形態１と同様に、例えば図４によって表される。ただし、本実施形態の情報処理装置２０００を実現する計算機１０００のストレージデバイス１０８０には、本実施形態の情報処理装置２０００の機能を実現するプログラムモジュールがさらに記憶される。

【0105】

以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記各実施形態の組み合わせ、又は上記以外の様々な構成を採用することもできる。

【0106】

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
１． 店舗の出口を撮像可能に設置された第１カメラによって生成される第１撮像画像から人物を検出する検出手段と、
前記第１撮像画像から検出された人物が、前記店舗の商品の陳列場所を撮像可能に設置された第２カメラによって生成される第２撮像画像に含まれるか否かを判定する第１判定手段と、
前記第２撮像画像に含まれなおかつ不審度が高い前記人物が、前記店舗の会計エリアを撮像可能に設置された第３カメラによって生成される第３撮像画像に含まれるか否かを判定する第２判定手段と、
前記第２判定手段によって前記人物が前記第３撮像画像に含まれないと判定された場合、警告処理を行う警告手段と、
を有する情報処理装置。
２． 前記第２判定手段は、前記第２撮像画像に前記人物が含まれる期間の前後における前記陳列場所の商品の量の変化、前記陳列場所における前記人物の滞留時間、前記人物の動作の不審さ、又は前記人物の移動の軌跡の不審さを表す値を算出し、前記算出した値が所定値以上である場合に、前記人物の不審度が高いと判定する、１．に記載の情報処理装置。
３． 前記第２判定手段が利用する第２撮像画像は、前記第２カメラによって前記人物が撮像された時点と、前記第１カメラによって前記人物が撮像された時点との間の期間の映像である、１．又は２．に記載の情報処理装置。
４． 前記検出手段、前記第１判定手段、及び前記第２判定手段はそれぞれ、人物が背後から撮像されている撮像画像を利用する、１．乃至３．いずれか一つに記載の情報処理装置。
５． 前記第１判定手段は、前記第１撮像画像から検出された人物の服装、体型、髪の色、肌の色、及び所持品のいずれか１つ以上に基づいて、その人物が前記第２撮像画像に含まれるか否かを判定し、
前記第２判定手段は、前記第１撮像画像から検出された人物の服装、体型、髪の色、肌の色、及び所持品のいずれか１つ以上に基づいて、その人物が前記第３撮像画像に含まれるか否かを判定する、４．に記載の情報処理装置。
６． 前記第１判定手段は、前記第１撮像画像から検出された人物が前記第２撮像画像に含まれるか否かの判定に、その人物の目、鼻、及び口を用いず、
前記第２判定手段は、前記第１撮像画像から検出された人物が前記第３撮像画像に含まれるか否かの判定に、その人物の目、鼻、及び口を用いない、４．又は５．に記載の情報処理装置。
７． 前記検出手段が利用する前記第１撮像画像、前記第１判定手段が利用する前記第２撮像画像、及び前記第２判定手段が利用する前記第３撮像画像には、人物の目、鼻、及び口のいずれもが含まれない、６．に記載の情報処理装置。
８． 第１判定手段により前記人物が第２撮像画像に含まれないと判定された後か、前記第２判定手段により前記人物の不審度は高くないと判定された後か、又は前記第２判定手段により前記人物が前記第３撮像画像に含まれるか否かが判定された後に、前記検出手段、前記第１判定手段、及び前記第２判定手段それぞれが処理する撮像画像から、前記人物以外の人物が含まれない撮像画像を除外する除外手段を有する、１．乃至７．いずれか一つに記載の情報処理装置。
９． 前記出口にゲートが設けられており、
前記警告手段が行う警告処理は、前記ゲートを通行不可の状態に設定する処理である、１．乃至８．いずれか一つに記載の情報処理装置。

【0107】

１０． コンピュータによって実行される制御方法であって、
店舗の出口を撮像可能に設置された第１カメラによって生成される第１撮像画像から人物を検出する検出ステップと、
前記第１撮像画像から検出された人物が、前記店舗の商品の陳列場所を撮像可能に設置された第２カメラによって生成される第２撮像画像に含まれるか否かを判定する第１判定ステップと、
前記第２撮像画像に含まれなおかつ不審度が高い前記人物が、前記店舗の会計エリアを撮像可能に設置された第３カメラによって生成される第３撮像画像に含まれるか否かを判定する第２判定ステップと、
前記第２判定ステップによって前記人物が前記第３撮像画像に含まれないと判定された場合、警告処理を行う警告ステップと、
を有する制御方法。
１１． 前記第２判定ステップにおいて、前記第２撮像画像に前記人物が含まれる期間の前後における前記陳列場所の商品の量の変化、前記陳列場所における前記人物の滞留時間、前記人物の動作の不審さ、又は前記人物の移動の軌跡の不審さを表す値を算出し、前記算出した値が所定値以上である場合に、前記人物の不審度が高いと判定する、１０．に記載の制御方法。
１２． 前記第２判定ステップにおいて利用する第２撮像画像は、前記第２カメラによって前記人物が撮像された時点と、前記第１カメラによって前記人物が撮像された時点との間の期間の映像である、１０．乃至１１．いずれか一つに記載の制御方法。
１３． 前記検出ステップ、前記第１判定ステップ、及び前記第２判定ステップそれぞれにおいて、人物が背後から撮像されている撮像画像を利用する、１０．乃至１２．いずれか一つに記載の制御方法。
１４． 前記第１判定ステップにおいて、前記第１撮像画像から検出された人物の服装、体型、髪の色、肌の色、及び所持品のいずれか１つ以上に基づいて、その人物が前記第２撮像画像に含まれるか否かを判定し、
前記第２判定ステップにおいて、前記第１撮像画像から検出された人物の服装、体型、髪の色、肌の色、及び所持品のいずれか１つ以上に基づいて、その人物が前記第３撮像画像に含まれるか否かを判定する、１３．に記載の制御方法。
１５． 前記第１判定ステップにおいて、前記第１撮像画像から検出された人物が前記第２撮像画像に含まれるか否かの判定に、その人物の目、鼻、及び口を用いず、
前記第２判定ステップにおいて、前記第１撮像画像から検出された人物が前記第３撮像画像に含まれるか否かの判定に、その人物の目、鼻、及び口を用いない、１３．又は１４．に記載の制御方法。
１６． 前記検出ステップにおいて利用する前記第１撮像画像、前記第１判定ステップにおいて利用する前記第２撮像画像、及び前記第２判定ステップにおいて利用する前記第３撮像画像には、人物の目、鼻、及び口のいずれもが含まれない、１５．に記載の制御方法。
１７． 第１判定ステップにおいて前記人物が第２撮像画像に含まれないと判定された後か、前記第２判定ステップにおいて前記人物の不審度は高くないと判定された後か、又は前記第２判定ステップにおいて前記人物が前記第３撮像画像に含まれるか否かが判定された後に、前記検出ステップ、前記第１判定ステップ、及び前記第２判定ステップそれぞれにおいて処理する撮像画像から、前記人物以外の人物が含まれない撮像画像を除外する除外ステップを有する、１０．乃至１６．いずれか一つに記載の制御方法。
１８． 前記出口にゲートが設けられており、
前記警告ステップにおいて行う警告処理は、前記ゲートを通行不可の状態に設定する処理である、１０．乃至１７．いずれか一つに記載の制御方法。

【0108】

１９． １０．乃至１８．いずれか一つに記載の制御方法の各ステップをコンピュータに実行させるプログラム。

【要約】

【課題】不正行為を監視できる技術であって、導入が容易な技術を提供する。
【解決手段】第１カメラ（１０）、第２カメラ（２０）、及び第３カメラ（３０）はそれぞれ、第１撮像画像（１１）、第２撮像画像（２１）、及び第３撮像画像（３１）を生成する。第１撮像画像（１１）には出口（５０）が撮像されている。第２撮像画像（２１）には陳列場所（６０）が撮像されている。第３撮像画像（３１）には会計エリア（７０）が撮像されている。情報処理装置（２０００）は、第１撮像画像（１１）から人物を検出し、検出された人物が第２撮像画像（２１）に含まれるか否かを判定する。情報処理装置（２０００）は、第１撮像画像（１１）から検出された人物が第２撮像画像（２１）に含まれていると判定され、なおかつその人物の不審度が高い場合に、その人物が第３撮像画像（３１）にも含まれているか否かを判定する。情報処理装置（２０００）は、第３撮像画像（３１）からその人物が検出されなかった場合に、警告処理を行う。
【選択図】図２

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】