特許 7405238 情報処理装置、監視システム、情報処理方法、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-12-18

(45)【発行日】2023-12-26

(54)【発明の名称】情報処理装置、監視システム、情報処理方法、及びプログラム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20231219BHJP

【ＦＩ】

H04N7/18 D

【請求項の数】 9

(21)【出願番号】P 2022508085

(86)(22)【出願日】2021-01-14

(86)【国際出願番号】 JP2021001032

(87)【国際公開番号】W WO2021186866

(87)【国際公開日】2021-09-23

【審査請求日】2022-08-08

(31)【優先権主張番号】P 2020048579

(32)【優先日】2020-03-19

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100109313

【弁理士】

【氏名又は名称】机 昌彦

(74)【代理人】

【識別番号】100149618

【弁理士】

【氏名又は名称】北嶋 啓至

(72)【発明者】

【氏名】金子 昭浩

【審査官】秦野 孝一郎

(56)【参考文献】

【文献】特開２０１５－０４６７３２（ＪＰ，Ａ）

【文献】特開２００９－２２５３９８（ＪＰ，Ａ）

【文献】特開２００８－１５２３２８（ＪＰ，Ａ）

【文献】特開２０２０－２２０９７（ＪＰ，Ａ）

【文献】特開２０１６－１６２１０３（ＪＰ，Ａ）

【文献】特開２０１０－３３２８５（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１８

(57)【特許請求の範囲】

【請求項1】

撮影データに含まれる人物の行動を検出する行動検出手段と、
前記人物の感情を検出する感情検出手段と、
検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す値である不審度を算出する不審度算出手段と、
算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を、前記領域に重畳される他の画像の透過率を前記人物の衣服及び髪の色の少なくとも一方を認識できるように調整し、前記透過率が設定された前記他の画像を前記領域に重畳することによって行うマスク処理手段と、を備える、
情報処理装置。

【請求項2】

前記マスク処理手段は、前記不審度が所定の値以上のとき、前記不審度が前記所定の値未満のときより、前記人物が映る領域の情報量を減らす度合いを小さくする、
請求項１に記載の情報処理装置。

【請求項3】

前記不審度を変更する指示と、前記不審度を変更する前記人物を識別する情報とを含む指示情報を受け付ける指示受付手段をさらに備え、
前記マスク処理手段は、前記指示受付手段が前記指示情報を受け付けた場合、前記指示情報に応じて変更された前記不審度を持つ前記人物が映る領域に、変更された前記不審度に基づいたマスク処理を行う、
請求項１または２に記載の情報処理装置。

【請求項4】

前記人物の顔情報と、データベースに予め登録された顔情報との照合を行う顔照合手段をさらに備え、
前記マスク処理手段は、前記照合において、前記人物の顔情報と、前記予め登録された顔情報とが合致した場合、前記撮影データのうち当該人物が映る領域にマスク処理を行わない、
請求項１乃至３のいずれか一項に記載の情報処理装置。

【請求項5】

前記人物の属性を検出する属性検出手段をさらに備え、
前記不審度算出手段は、検出された前記人物の行動と、前記人物の感情と、前記人物の属性と、に基づいて、前記人物の前記不審度を算出する、
請求項１乃至４のいずれか一項に記載の情報処理装置。

【請求項6】

前記マスク処理手段は、検出された前記人物の属性に基づいて、前記人物の属性を示す情報を付加したマスク処理を行う、
請求項５に記載の情報処理装置。

【請求項7】

撮影範囲を撮影することにより前記撮影データを生成する撮影装置と、
請求項１乃至６のいずれか一項に記載の情報処理装置と、を備える、
監視システム。

【請求項8】

撮影データに含まれる人物の行動を検出し、
前記人物の感情を検出し、
検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す不審度を算出し、
算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を、前記領域に重畳される他の画像の透過率を前記人物の衣服及び髪の色の少なくとも一方を認識できるように調整し、前記透過率が設定された前記他の画像を前記領域に重畳することによって行う、
情報処理方法。

【請求項9】

撮影データに含まれる人物の行動を検出する処理と、
前記人物の感情を検出する処理と、
検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す不審度を算出する処理と、
算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を、前記領域に重畳される他の画像の透過率を前記人物の衣服及び髪の色の少なくとも一方を認識できるように調整し、前記透過率が設定された前記他の画像を前記領域に重畳することによって行う処理と、をコンピュータに実行させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、人物を監視する技術に関する。

【背景技術】

【0002】

監視カメラによって撮影された監視映像を用いて、不審な行動をとる人物を検出し、検出した人物を監視する技術が存在する。

【0003】

特許文献１には、監視映像に映った人物を含むグループを検出し、検出したグループの人物間の距離に基づいて、不審者を検知する技術が開示されている。

【0004】

ここで、監視映像には、不特定多数の人物が映る可能性がある。映像に含まれる人物の外見及び行動の情報は個人情報であるため、その監視映像を監視する監視員に対してプライバシーの保護を考慮した表示をすることが要求される。これに対して、人物の監視を行う際に、プライバシーの保護を図る技術が存在する。

【0005】

特許文献２には、監視映像を表示する際、登録されている人物が監視映像に含まれていた場合、当該人物が映る領域を抽出し、抽出した領域の画像である前景画像を、人物の映っていない背景画像に合成して表示する技術が開示されている。このとき、登録されていない人物が監視映像に含まれていた場合、当該人物が映る前景画像にマスク処理した画像を、背景画像に合成して表示している。

【先行技術文献】

【特許文献】

【0006】

【文献】特開２０１９－１０６６３１号公報

【文献】特許第５１５９３８１号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

上述のように、プライバシーの保護を考慮して、マスク処理がなされた監視映像を用いて監視を行う場合、監視映像を監視する監視員にとって、監視が困難となる場合がある。例えば、不審な人物がいる際には、監視員は、当該人物を特定する必要があるが、監視映像にマスク処理が施されていると、当該人物の特定が困難となる虞がある。このような場合、マスク処理が施されている監視映像に対して、不審な人物の領域のみマスク処理を解除することが考えられる。

【0008】

しかしながら、監視映像に映る人物が不審な人物であるか否かを正確に検出していないと、マスク処理を解除することによってプライバシーを侵害する虞がある。特許文献２では、登録されていない人物の滞留時間に応じてその人物の不審度を決定し、前景画像の透明度を変えることが記載されているが、滞留時間の情報のみでは、その人物が不審な人物であるか否か正確に判断できない虞がある。

【0009】

本開示は、上記課題を鑑みてなされたものであり、プライバシーの保護を図りつつ、人物を監視する際に有効な映像を提供することが可能な技術を提供することを目的の一つとする。

【課題を解決するための手段】

【0010】

本開示の一態様にかかる情報処理装置は、撮影データに含まれる人物の行動を検出する行動検出手段と、前記人物の感情を検出する感情検出手段と、検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す不審度を算出する不審度算出手段と、算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を行うマスク処理手段と、を備える。

【0011】

本開示の一態様にかかる情報処理方法は、撮影データに含まれる人物の行動を検出し、前記人物の感情を検出し、検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す不審度を算出し、算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を行う。

【0012】

本開示の一態様にかかる記憶媒体は、撮影データに含まれる人物の行動を検出する処理と、前記人物の感情を検出する処理と、検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す不審度を算出する処理と、算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を行う処理と、をコンピュータに実行させるプログラムを格納する。

【発明の効果】

【0013】

本開示によれば、プライバシーの保護を図りつつ、人物を監視する際に有効な映像を提供することが可能になるという効果が得られる。

【図面の簡単な説明】

【0014】

【図1】第１の実施形態にかかる監視システムの構成の一例を模式的に示す図である。

【図2】第１の実施形態にかかる情報処理装置の機能構成の一例を示すブロック図である。

【図3】第１の実施形態にかかる検出データの一例を示す図である。

【図4】第１の実施形態にかかる不審度データの一例を示す図である。

【図5】第１の実施形態にかかる監視システムの動作の一例を説明するシーケンス図である。

【図6】第１の実施形態にかかる加工処理の一例を説明するフローチャートである。

【図7】第１の実施形態にかかるマスク処理の一例を説明するフローチャートである。

【図8A】第１の実施形態にかかる撮影データの一例を示す図である。

【図8B】第１の実施形態にかかる加工済撮影データの一例を示す図である。

【図9】第２の実施形態にかかる監視システムの機能構成の一例を示すブロック図である。

【図10】第３の実施形態にかかる監視システムの機能構成の一例を示すブロック図である。

【図11】第３の実施形態にかかる加工処理の一例を説明するフローチャートである。

【図12】第４の実施形態にかかる監視システムの機能構成の一例を示すブロック図である。

【図13】第４の実施形態にかかる検出データの一例を示す図である。

【図14】第４の実施形態にかかる加工処理の一例を説明するフローチャートである。

【図15】第４の実施形態にかかるマスク処理の一例を説明するフローチャートである。

【図16】第５の実施形態にかかる監視システムの構成の一例を示すブロック図である。

【図17】第５の実施形態にかかる情報処理装置の機能構成の一例を示すブロック図である。

【図18】第５の実施形態にかかる情報処理装置の動作の一例を示すフローチャートである。

【図19】第１、第２、第３、第４及び第５の実施形態における情報処理装置を実現するコンピュータ装置のハードウェア構成の一例を示すブロック図である。

【発明を実施するための形態】

【0015】

以下に、本開示にかかる実施形態を、図面を参照しつつ説明する。

【0016】

＜第１の実施形態＞
第１の実施形態にかかる情報処理装置を含む監視システムについて説明する。

【0017】

図１は、第１の実施形態にかかる監視システム１０００の構成の一例を模式的に示す図である。図１に示すように、監視システム１０００は、情報処理装置１００と撮影装置２００と管理端末３００とを備える。情報処理装置１００は、撮影装置２００及び管理端末３００と、ネットワークを介して通信可能に接続される。なお、監視システム１０００は、情報処理装置１００と撮影装置２００とで構成され、監視システム１０００と管理端末３００とが通信可能に接続されてもよい。

【0018】

撮影装置２００は、撮影範囲として定められた範囲を撮影する。図１に示す状況では、点線で示された範囲が撮影範囲であり、撮影範囲の中に人物がいるので、撮影装置２００が撮影した映像には人物が含まれる。

【0019】

撮影装置２００が撮影した映像は、動画像を構成する複数のフレームのそれぞれであってもよいし、一定の時間間隔で撮影された静止画像のそれぞれであってもよい。本明細書では、撮影装置２００が撮影した映像を「撮影データ」と称する。撮影データには、フレームまたは静止画像の、画素値のデータの他に、撮影データが生成された時刻、及び撮影データを生成した撮影装置２００が設置された場所の情報等が含まれてもよい。撮影装置２００は、生成した撮影データを情報処理装置１００に順次送信する。

【0020】

情報処理装置１００は、撮影装置２００から撮影データを取得すると、撮影データを加工する、すなわち、撮影データにプライバシーの保護を図る処理を施す。情報処理装置１００は、加工した撮影データを管理端末３００に送る。本明細書において、撮影データを加工する処理を「加工処理」とも称し、加工処理が行われた撮影データを「加工済撮影データ」とも称する。

【0021】

管理端末３００は、ネットワークを介して情報処理装置１００と通信するための入出力手段を備えた装置である。例えば、管理端末３００は、パーソナルコンピュータである。管理端末３００は、加工済撮影データを情報処理装置１００から取得し、加工済撮影データを表示部（例えばディスプレイ装置）３１０により表示する。図１に示す状況では、管理端末３００は、監視員によって使用されている。監視員は、管理端末３００に表示される加工済撮影データを用いて、撮影装置２００により撮影されている撮影範囲を監視する。このとき、監視員は、異変を認識した場合、例えば、撮影範囲付近にいる警備員に対して、異変の確認を行うよう指示を出すことができる。

【0022】

すなわち、第１の実施形態にかかる監視システム１０００は、撮影装置２００が撮影した撮影データに対して情報処理装置１００が加工処理を行い、加工済撮影データを管理端末３００において表示するシステムである。

【0023】

なお、第１の実施形態において、情報処理装置１００と管理端末３００とは異なる装置である例について説明するが、情報処理装置１００と管理端末３００とは、一体の装置であってもよい。

【0024】

［情報処理装置１００の詳細］
次に、情報処理装置１００の詳細について説明する。図２は、第１の実施形態にかかる情報処理装置１００の機能構成の一例を示すブロック図である。図２に示すように、情報処理装置１００は、人物検出部１１０と、行動検出部１２０と、感情検出部１３０と、不審度算出部１４０と、マスク処理部１５０とを備える。さらに、情報処理装置１００は、記憶装置１６０を有する。

【0025】

人物検出部１１０は、撮影装置２００が撮影した撮影データを取得すると、撮影データに含まれる人物を検出する。人物を検出する方法としては、時系列の撮影データを用いて、複数の撮影データ間の差分に基づいて人物を検出する方法、すなわち背景差分法を用いることが考えられるが、人物を検出する方法はこの例に限らない。人物を検出する方法は、例えば、撮影データの中から人型を検出することによる方法であってもよいし、その他、種々の公知の手法であってもよい。

【0026】

さらに、人物検出部１１０は、検出した人物ごとに、人物を識別する識別情報を生成する。人物検出部１１０は、識別情報を記憶装置１６０に格納する。なお、あるフレームにおいて、前のフレームにおいて検出された人物が検出された場合、その人物に対しては、同一の識別情報が付与される（すなわち、同一の人物に対しては同一の識別情報が付与される）。このとき、人物検出部１１０は、人物の特徴量に基づいて人物が同一であると判断してもよいし、検出された人物の位置情報に基づいて人物が同一であると判断してもよい。

【0027】

行動検出部１２０は、人物検出部１１０により検出された人物の行動を撮影データから検出する。行動検出部１２０は、例えば、時系列の撮影データを用いて、人物の撮影データ上の位置の変化から、「走る」、「歩く」、及び「立ち止まる」等の動作を人物の行動として検出する。このとき、行動検出部１２０は、検出された人物の部位を特定し、特定された部位の位置及びその位置の変化に基づいて、「寝転ぶ」及び「手を振る」といった動作を検出してもよい。また、人物が検出されてから、予め設定された時間内に、その人物が同じ場所に複数回現れる場合、行動検出部１２０は、「うろつき」を人物の行動として検出してもよい。なお、行動を検出する方法はこの例に限らない。このように行動検出部１２０は、撮影データに含まれる人物の行動を検出する。行動検出部１２０は、行動検出手段の一例である。

【0028】

行動検出部１２０は、人物の行動を検出すると、検出した行動を示す情報と人物の識別情報とを対応付けて記憶装置１６０に格納する。

【0029】

なお、撮影データから人物の行動を検出する方法は、例えば、人物が映る撮影データ上の領域と、画像データベースに登録された画像であって、人物の行動を示す情報に対応付けられた画像とのパターンマッチングにより検出する方法であってもよい。このとき、画像データベースは予め記憶装置１６０に格納されている。また、撮影データから人物の行動を検出する方法は、人物が映る撮影データ上の領域から人物の特徴量を抽出し、抽出した特徴量を入力とした学習モデルを用いることにより、人物の特徴量に対応する行動を出力する方法であってもよい。ここで用いられる学習モデルは、例えば、抽出された人物の特徴量と、人物の行動との関係を学習したモデルである。学習モデルは、例えば、人物の特徴量を説明変数とし、人物の行動を示す値を目的変数とした回帰分析が行われることにより導出された回帰式であるが、この例に限らない。例えば、学習モデルは、ＳＶＭ（Ｓｕｐｐｏｒｔ Ｖｅｃｔｏｒ Ｍａｃｈｉｎｅ）、ニューラルネットワーク、ランダムフォレスト等の機械学習アルゴリズムによって生成されるものであってもよい。

【0030】

感情検出部１３０は、人物検出部１１０により検出された人物の感情を撮影データから検出する。感情検出部１３０は、例えば、撮影データに含まれる人物の顔が映る領域から特徴量を検出する。そして、感情検出部１３０は、検出した特徴量と、特徴量と感情との関係を示すデータとに基づいて感情を検出する。特徴量と感情との関係を示すデータは、記憶装置１６０に予め格納されている。検出する感情は、例えば「喜ぶ」、「怒る」、「悲しむ」、「楽しむ」、「焦る」、「緊張する」などの予め定められた特徴的な感情である。また、感情検出部１３０は、検出された人物から特徴的な感情が検出できなかった場合、当該人物が落ち着いていることを示す「平静」を検出してもよい。また、感情検出部１３０は、「笑う」及び「泣く」といった、感情に起因する動作を検出してもよい。なお、これらは検出する感情の一例であり、これら以外の感情を検出してもよい。なお、感情検出部１３０は、人物の顔から得られる情報だけでなく、行動検出部１２０が検出した動作の情報も用いて、人物の感情を検出してもよい。このように感情検出部１３０は、人物の感情を検出する。感情検出部１３０は、感情検出手段の一例である。

【0031】

感情検出部１３０は、人物の感情を検出すると、検出した感情を示す情報と人物の識別情報とを対応づけて記憶装置１６０に格納する。

【0032】

なお、撮影データから人物の感情を検出する方法は、例えば、人物が映る撮影データ上の領域と、画像データベースに登録された画像であって、人物の感情を示す情報に対応付けられた画像とのパターンマッチングにより検出する方法であってもよい。このとき、画像データベースは予め記憶装置１６０に格納されている。また、撮影データから人物の感情を検出する方法は、人物が映る撮影データ上の領域から人物の特徴量を抽出し、抽出した特徴量を入力とした学習モデルを用いることにより、人物の特徴量に対応する感情を出力する方法であってもよい。ここで用いられる学習モデルは、例えば、抽出された人物の特徴量と、人物の感情との関係を学習したモデルである。学習モデルは、例えば、人物の特徴量を説明変数とし、人物の感情を示す値を目的変数とした回帰分析が行われることにより導出された回帰式であるが、この例に限らない。例えば、学習モデルは、ＳＶＭ、ニューラルネットワーク、ランダムフォレスト等の機械学習アルゴリズムによって生成されるものであってもよい。

【0033】

図３は、記憶装置１６０に格納される検出データの一例を示す図である。検出データは、人物検出部１１０によって検出された識別情報と、行動検出部１２０によって検出された行動を示す情報と、感情検出部１３０によって検出された感情を示す情報とが対応づけられたデータである。例えば、図３の一行目のレコードには、識別情報が「Ａ」である人物から、「うろつき」の行動が検出され、さらに「泣く」という感情が検出されていることを表す検出データが示されている。

【0034】

人物検出部１１０、行動検出部１２０、及び感情検出部１３０は、撮影装置２００から順次送信される撮影データに応じて、随時検出処理を行う。そのため、検出データは、随時更新される。

【0035】

不審度算出部１４０は、行動検出部１２０によって検出された人物の行動と、感情検出部１３０によって検出された人物の感情とに基づいて不審度を算出する。ここで、不審度とは、検出された人物を監視すべき度合いを示す値である。例えば、不審度が所定の値より高い人物は、監視すべき対象である、と判断することができる。

【0036】

具体的には、不審度算出部１４０は、記憶装置１６０に格納される検出データから、識別情報に対応付けられた人物の行動の情報と感情の情報とを読み出す。そして、不審度算出部１４０は、読み出した人物の行動の情報と感情の情報とに基づいて、各人物の不審度を算出する。なお、本明細書において、不審度は０から１の範囲の値をとり、値が１に近づくほど監視すべき対象とするものとして説明するが、不審度のとる値はこの例に限らない。

【0037】

人物の行動と感情と不審度との関係は、情報処理装置１００の管理人によって予め設定される。これに限らず、例えば、過去に生成された検出データに基づいて、不審度を算出するための予測モデルが予め生成され、不審度算出部１４０は、生成された予測モデルを用いて、検出された人物の不審度を算出してもよい。このとき、検出する行動の種類のそれぞれと、検出する感情の種類のそれぞれとを説明変数とし、不審度を目的変数とした回帰分析を行って予測モデルを生成してもよい。このように、不審度算出部１４０は、検出された人物の行動及び人物の感情に基づいて、人物を監視すべき度合いを示す値である不審度を算出する。不審度算出部１４０は、不審度算出手段の一例である。

【0038】

不審度算出部１４０は、検出された人物の行動と感情とに加え、その人物が検出された時刻の情報を用いて不審度を算出してもよい。例えば、検出された人物が「うろつき」の行動をとっていた場合、その人物が検出された時刻に応じて不審度が異なる場合がある。そこで、不審度算出部１４０は、時刻の情報を加味することにより、より正確に不審度を算出することが可能となる。

【0039】

不審度算出部１４０は、不審度を算出すると、識別情報と不審度とを対応づけた不審度データを記憶装置１６０に格納する。図４は、第１の実施形態にかかる不審度データの一例を示す図である。図４に示す不審度データの一行目のレコードには、識別情報「Ａ」の人物の不審度が「０．８」であることが示されている。

【0040】

マスク処理部１５０は、不審度算出部１４０により算出された不審度に応じて、撮影データにおいて人物が映る領域にマスク処理を行う。ここで、マスク処理とは、画像における処理対象の領域の情報量を減らす処理を示す。また、本明細書において、情報量とは、撮影データから監視員が認識できる物体（例えば人間）の特徴の詳細さを示す量である。すなわち情報量を減らす処理とは、撮影データから監視員が認識できる人物の特徴を減らす処理を示す。マスク処理は、人物が映る領域、すなわち処理対象の領域の解像度を制御する処理であってもよいし、処理対象の領域の画素の位置を入れ替える処理であってもよい。さらに、マスク処理は、処理対象の領域に平滑化フィルタリングを行う処理であってもよいし、処理対象の領域にアバター画像（例えば、人型のイラスト画像やキャラクター画像）のような元の画像とは異なる画像を重畳させる処理であってもよい。このような処理を行うことで、例えば、監視員に、人物が存在することだけ認識できるようにしたり、人物の形だけ認識できるようにしたり、人物が着用している衣服の色や、人物の髪の色だけ認識できるようにしたりすることができる。また、マスク処理部１５０は、マスク処理を行った処理対象の領域に、人物の識別情報を示す処理を行ってもよい。これにより、マスク処理が施された撮影データにおいて、撮影データに含まれる人物の識別情報を監視員に提示することができる。

【0041】

マスク処理部１５０は、具体的には、撮影装置２００から取得した撮影データから人物が検出された場合に、不審度算出部１４０により算出された不審度の情報を、記憶装置１６０に格納された不審度データから、検出された人物の識別情報を利用して読み出す。マスク処理部１５０は、読み出した不審度が、マスク処理を行うか否かを判断する閾値以上であるか否かを判断し、閾値未満であると判断した場合に、当該閾値未満の不審度と対応付けられた識別情報の人物が映る領域にマスク処理を行う。一方、マスク処理部１５０は、不審度が閾値以上である人物が映る領域にはマスク処理を行わない。このようにマスク処理部１５０は、算出された不審度に応じて、撮影データのうち人物が映る領域の情報量を減らす処理であるマスク処理を行う。マスク処理部１５０は、マスク処理手段の一例である。

【0042】

なお、マスク処理部１５０は、不審度が大きくなるにつれて、マスク処理における情報量を減らす度合いを小さくするように制御してもよい。つまり、マスク処理における情報量を減らす度合いが小さくなるほど、マスク処理を行った領域の情報量が増え（すなわち、元の撮影データの情報量に近づき）、マスク処理における情報量を減らす度合いが大きくなるほど、マスク処理を行った領域の情報量が減る。例えば、マスク処理として、解像度を制御する処理が採用されていた場合、マスク処理における情報量を減らす度合いが小さくなるにつれて、解像度の劣化の度合いを低くする処理を行う。また、例えば、マスク処理として、元の画像とは異なる画像を重畳させる処理が採用されていた場合、マスク処理における情報量を減らす度合いが小さくなるにつれて、重畳させた画像を透明に近づける処理を行う。

【0043】

記憶装置１６０は、情報処理装置１００にて生成されるデータ、または情報処理装置１００にて用いられるデータを格納する。なお、記憶装置１６０は、管理端末３００に備えられてもよいし、情報処理装置１００と通信可能に接続されている図示しない装置に備えられていてもよい。

【0044】

［監視システム１０００の動作］
次に、監視システム１０００の動作を、図５、図６及び図７を用いて説明する。以下に説明する動作においては、監視システム１０００は、図１に示す状況において構築されているものとする。なお、本明細書において、フローチャートの各ステップを「S１０１」のように、それぞれのステップに付した番号を用いて表現する。

【0045】

図５は、監視システム１０００の動作を説明するシーケンス図である。撮影装置２００は、撮影範囲を撮影し撮影データを生成する（Ｓ１０１）。撮影装置２００は、撮影中断の指示があるまで撮影データを生成し続け、生成した撮影データを情報処理装置１００に順次送信する。

【0046】

情報処理装置１００は、撮影装置２００から撮影データを取得すると、取得した撮影データに対して加工処理を行う（Ｓ１０２）。

【0047】

図６は、情報処理装置１００の加工処理の動作を説明するフローチャートである。情報処理装置１００の人物検出部１１０は、取得した撮影データにおいて、人物が撮影されているか否かを判断し、人物が撮影されている場合、換言すれば、人物を検出した場合（Ｓ２０１のＹｅｓ）、検出した人物の識別情報を生成する（Ｓ２０２）。このとき、人物検出部１１０は、複数の人物を検出した場合、検出した人物ごとに識別情報を生成する。そして、人物検出部１１０は、生成した識別情報を記憶装置１６０に検出データとして格納する。人物を検出しなかった場合（Ｓ２０１のＮｏ）、当該撮影データに対しては、マスク処理は行われない。

【0048】

Ｓ２０２の処理がなされると、行動検出部１２０は、検出された人物の行動を撮影データから検出する（Ｓ２０３）。行動検出部１２０は、検出した行動を示す情報と、検出された人物の識別情報とを対応づけて検出データとして記憶装置１６０に格納する。

【0049】

次に、感情検出部１３０は、検出された人物の感情を撮影データから検出する（Ｓ２０４）。感情検出部１３０は、検出した感情を示す情報と、行動検出部１２０によって検出された行動を示す情報と、検出された人物の識別情報とを対応づけて検出データとして記憶装置１６０に格納する。

【0050】

不審度算出部１４０は、記憶装置１６０から検出データを読み出し、読み出した検出データを利用して、撮影データから検出された人物の不審度を算出する（Ｓ２０５）。ここで、検出データにおける行動を示す情報と、感情を示す情報との少なくとも一方が検出されていない人物がいる場合がある。この場合、正確に不審度を算出できず、これによりマスク処理が行われない可能性があるが、そのような人物に対してもマスク処理が行われるように、不審度算出部１４０は、不審度を一定の値（例えば０）に設定してもよい。不審度算出部１４０は、算出した不審度と算出した不審度に対応する人物の識別情報とを対応づけて不審度データとして記憶装置１６０に格納する。

【0051】

その後、検出されたすべての人物に対して不審度が算出されていない場合（Ｓ２０６のＮｏ）、情報処理装置１００は、Ｓ２０３の処理に戻る。検出されたすべての人物に対して不審度が算出されている場合（Ｓ２０６のＹｅｓ）、マスク処理部１５０は、撮影データにマスク処理を行う（Ｓ２０７）。本動作例では、図３に示す検出データが記憶装置１６０に格納され、当該検出データに基づいて、図４に示す不審度データが記憶装置１６０に格納されたものとする。

【0052】

図７は、マスク処理部１５０のマスク処理の動作を説明するフローチャートである。マスク処理部１５０は、記憶装置１６０から不審度データを読み出し、撮影データのうち、識別情報によって識別される人物が映る領域ごとにマスク処理を行う。

【0053】

まず、マスク処理部１５０は、不審度データのうち一のレコードに含まれる不審度が０．５以上であるか否かを判別する。不審度が０．５未満の場合（Ｓ２０８のＮｏ）、当該不審度に対応づけられた識別情報の人物が映る領域に情報量を減らす度合いを大きくするマスク処理を行う（Ｓ２０９）。不審度が０．５以上であり（Ｓ２０８のＹｅｓ）、０．８未満の場合（Ｓ２１０のＮｏ）、当該不審度に対応づけられた識別情報の人物が映る領域に、Ｓ２０９において施されるマスク処理よりも情報量を減らす度合いが小さいマスク処理を行う（Ｓ２１１）。不審度が０．８以上の場合（Ｓ２１０のＹｅｓ）、当該不審度に対応づけられた識別情報の人物が映る領域にマスク処理を行わない。すなわち、検出されたすべての人物が映る領域に処理を行った場合（Ｓ２１２のＹｅｓ）、図７のフローチャートを終了する。検出されたすべての人物が映る領域に処理を行っていない場合（Ｓ２１２のＮｏ）、情報処理装置１００は、Ｓ２０８の処理に戻る。

【0054】

本動作例においては、マスク処理部１５０は、図４に示される不審度データに基づいて、Ｓ２０７のマスク処理を行う。そのため、識別情報「Ａ」の人物が映る領域には、マスク処理は行われず、識別情報「Ｂ」の人物が映る領域には、Ｓ２０９におけるマスク処理が行われ、識別情報「Ｃ」の人物が映る領域には、Ｓ２１１におけるマスク処理が行われる。

【0055】

図８Ａは、第１の実施形態にかかる動作例において撮影装置２００から情報処理装置１００が取得した撮影データの一例である。図８Ａに示される「人物Ａ」、「人物Ｂ」及び「人物Ｃ」は、図３及び図４に示される識別情報「Ａ」、「Ｂ」及び「Ｃ」の人物と対応している。

【0056】

図８Ｂは、第１の実施形態にかかる動作例において、図８Ａに対して加工処理が行われた加工済撮影データの一例である。図８Ｂでは、人物Ａが映る領域にはマスク処理が行われていないことが示されている。また、人物Ｂが映る領域には情報量を減らす度合いが大きいマスク処理がなされている。本動作例では、マスク処理部１５０は、人物Ｂが映る領域に別の画像を重畳している。これにより、当該加工済撮影データには、人物Ｂに関する特徴は映らない。また、人物Ｃが映る領域には情報量を減らす度合いが小さいマスク処理がなされている。本動作例では、マスク処理部１５０は、人物Ｃが透過して映るように、人物Ｃが映る領域に別の画像を重畳している。このとき、マスク処理部１５０は、監視員が人物Ｃの形だけ認識できるように、重畳された画像の透過率を調整してもよいし、人物Ｃの衣服や髪の色だけ認識できるように、重畳された画像の透過率を調整してもよい。

【0057】

図５に戻り、情報処理装置１００は、加工済撮影データを管理端末３００に送信する（Ｓ１０３）。管理端末３００の表示部３１０は、情報処理装置１００から加工済撮影データを取得すると、加工済撮影データを表示する（Ｓ１０４）。

【0058】

以上のように、第１の実施形態にかかる情報処理装置１００は、撮影データに含まれる人物の行動と、人物の感情とを検出する。そして情報処理装置１００は、検出した人物の行動及び人物の感情に基づいて、人物を監視すべき度合いを示す値である不審度を算出し、算出した不審度に応じて、撮影データのうち人物が映る領域の情報量を減らす処理であるマスク処理を行う。この構成により、第１の実施形態にかかる情報処理装置１００は、プライバシーの保護を図りつつ、人物の監視に有効な映像を提示することが可能になるという効果が得られる。

【0059】

さらに、第１の実施形態にかかる情報処理装置１００は、監視すべき対象以外にはマスク処理が行われるので、監視すべき対象を際立たせて表示することができる。これにより、監視員に、効率的に監視すべき対象を認識させることができる。

【0060】

さらに、第１の実施形態にかかる情報処理装置１００は、不審度に応じてマスク処理の情報量を減らす度合いを変更することができる。そのため、監視員が監視に必要な情報だけ認識して監視を行うことができるので、監視員によるプライバシーの侵害を最大限防止することができる。

【0061】

（変形例１）
人物検出部１１０は、撮影装置２００が備えていてもよい。この場合、撮影装置２００において、Ｓ１０１の処理の後、Ｓ２０１の処理とＳ２０２の処理を行う。そして、撮影装置２００は、撮影データと、撮影データに撮影されている人物に関して生成した識別情報とを情報処理装置１００に送信する。

【0062】

（変形例２）
行動検出部１２０は、さらに、人物が所持している物品を検出してもよい。例えば、人物が刃物を所持していた場合、行動検出部１２０は、「刃物の所持」を示す情報と識別情報とを対応付けて検出データとして記憶装置１６０に格納する。

【0063】

このように、第１の実施形態にかかる情報処理装置１００は、人物が所持している物品を検出することにより、より正確に監視すべき人物を検出することができる。

【0064】

＜第２の実施形態＞
次に、第２の実施形態にかかる情報処理装置を含む監視システムについて説明する。

【0065】

図９は、第２の実施形態にかかる監視システム１００１の構成の一例を示すブロック図である。図９に示す通り、監視システム１００１は、第１の実施形態における情報処理装置１００に代わり、情報処理装置１０１を備え、それ以外については、第１の実施形態で説明した監視システム１０００と同様である。すなわち、監視システム１００１は、情報処理装置１０１と、撮影装置２００と、管理端末３００とを備える。なお、図９に示す監視システム１００１の構成及び動作が、第１の実施形態の説明と重複する内容については説明を省略する。

【0066】

図９に示すように情報処理装置１０１は、第１の実施形態の情報処理装置１００の構成に、さらに指示受付部１７０を加えた構成を備える。

【0067】

例えば、監視員が、マスク処理が行われなかった人物が映る加工済撮影データから異変を認識し、撮影範囲の付近にいる警備員に対応を要請したとする。そして、警備員から対応が完了した旨の連絡が監視員に通知されたとき、その人物にマスク処理を行わないままの状態にしておく必要はない。その場合、監視員は、管理端末３００に、その人物にマスク処理を行うように指示情報を入力する。このとき、指示受付部１７０は、管理端末３００から、その人物にマスク処理を行う指示情報を受け付ける。指示情報には、マスク処理に係る情報と、マスク処理が施される人物の識別情報とが含まれる。

【0068】

指示受付部１７０は、受け付けた指示情報に応じて、マスク処理を施す人物の不審度を変更する。具体的には、受け付けた指示情報に含まれるマスク処理の情報量を減らす度合いと識別情報とに基づいて、不審度データのうち、その識別情報に対応する不審度を、指示情報に含まれるマスク処理の情報量を減らす度合いに応じて変更する。このように、指示受付部１７０は、不審度を変更する指示と、不審度を変更する人物を識別する情報とを含む指示情報を受け付け、受け付けた指示情報に基づいて不審度を変更する。指示受付部１７０は指示受付手段の一例である。

【0069】

このように、第２の実施形態の情報処理装置１０１は、不審度を変更する指示と、不審度を変更する人物を識別する情報とを含む指示情報を受け付ける。そして、情報処理装置１０１は、指示情報に応じて変更された不審度を持つ人物が映る領域に、変更された不審度に基づいたマスク処理を行う。これにより、第２の実施形態の情報処理装置１０１は、例えば、マスク処理が行われなかった人物の領域に対して、必要に応じてマスク処理を行うことができるので、プライバシーの保護を図ることができる。

【0070】

なお、指示受付部１７０は、指示情報に含まれるマスク処理の情報量を減らす度合いが、指示情報を受け付けた時点のマスク処理の情報量を減らす度合いよりも小さい場合、当該指示を受け付けられない旨の通知を管理端末３００に送信してもよい。これにより、人為的にマスク処理の情報量を減らす度合いを小さくすることができなくなるので、監視員によるプライバシーの侵害をさらに防止することができる。

【0071】

また、指示受付部１７０は、指示に応じて不審度を制御した不審度データのレコードに所定時間の間、フラグをたてるよう制御してもよい。そして、不審度算出部１４０は、フラグをたてた不審度データのレコードに対して不審度の算出を行わないようにしてもよい。これにより、指示に応じて不審度を制御したレコードの、不審度算出部１４０による不審度の書き換えを防ぐことができる。

【0072】

＜第３の実施形態＞
次に、第３の実施形態にかかる情報処理装置を含む監視システムについて説明する。

【0073】

図１０は、第３の実施形態にかかる監視システム１００２の構成の一例を示すブロック図である。図１０に示す通り、監視システム１００２は、第１の実施形態における情報処理装置１００に代わり、情報処理装置１０２を備え、それ以外については、第１の実施形態で説明した監視システム１０００と同様である。すなわち、監視システム１００２は、情報処理装置１０２と、撮影装置２００と、管理端末３００とを備える。なお、図１０に示す監視システム１００２の構成及び動作が、第１の実施形態の説明と重複する内容については説明を省略する。

【0074】

図１０に示すように情報処理装置１０２は、第１の実施形態の情報処理装置１００の構成に、さらに顔照合部１８０を加えた構成を備える。

【0075】

顔照合部１８０は、撮影データに含まれる人物の顔情報と、予め登録された顔情報とを照合する。具体的には、顔照合部１８０は、撮影データのうち、人物検出部１１０によって検出された人物の顔の領域から特徴量を抽出する。次に、顔照合部１８０は、予め登録された顔の特徴量を保持するデータベースを用いて、抽出した特徴量と合致する特徴量を探す。合致する特徴量がデータベースに含まれていた場合、顔照合部１８０は、合致した特徴量がある（ヒットした）と判定する。このとき、データベースは、記憶装置１６０に格納されていてもよいし、情報処理装置１０２と通信可能に接続された図示しない装置に格納されていてもよい。このように、顔照合部１８０は、人物の顔情報と、データベースに予め登録された顔情報との照合を行う。顔照合部１８０は、顔照合手段の一例である。

【0076】

そして、顔照合部１８０は、顔情報の照合においてヒットしたと判定した人物の不審度を１として不審度データを更新する。すなわち、情報処理装置１０２は、撮影データのうち、照合がヒットした人物は不審度が１と高いから、この人物が映る領域には、マスク処理を行わない。

【0077】

次に、監視システム１００２の動作を、図１１を用いて説明する。

【0078】

第３の実施形態においては、図５に示すＳ１０２の処理の代わりに、図１１に示す処理を行う。図１１は、第３の実施形態にかかる加工処理のフローチャートの一例を示す図である。図６に示すフローチャートと同様の処理については、説明を省略する。

【0079】

Ｓ２０２の処理の後、顔照合部１８０は、検出された人物の顔照合を行う。顔照合がヒットした場合（Ｓ４０１のＹｅｓ）、顔照合部１８０は、顔照合がヒットした人物の識別情報に対応する不審度を１とする（Ｓ４０２）。顔照合がヒットしない場合（Ｓ４０１のＮｏ）、Ｓ２０３の処理を行う。

【0080】

このように、第３の実施形態にかかる情報処理装置１０２は、検出された人物の顔情報と、予め登録された顔情報とが合致した場合、撮影データのうち、当該人物が映る領域にマスク処理を行わない。これにより、情報処理装置１０２は、例えば、指名手配されている人物など、予め顔情報がわかっている人物を検出した場合に、その人物を示す映像を提示することができる。

【0081】

なお、図１０において、情報処理装置１０２は、第２の実施形態で説明した指示受付部１７０が記載されていないが、情報処理装置１０２は、指示受付部１７０を備えていてもよい。すなわち、第３の実施形態の監視システム１００２は、第２の実施形態において説明された処理と同様の処理も行えるように構成されてもよい。

【0082】

＜第４の実施形態＞
次に、第４の実施形態にかかる情報処理装置を含む監視システムについて説明する。

【0083】

図１２は、第４の実施形態にかかる監視システム１００３の構成の一例を示すブロック図である。図１２に示すように、監視システム１００３は、第１の実施形態における情報処理装置１００に代わり、情報処理装置１０３を備え、それ以外については、第１の実施形態で説明した監視システム１０００と同様である。すなわち、監視システム１００３は、情報処理装置１０３と、撮影装置２００と、管理端末３００とを備える。なお、図１２に示す監視システムの構成及び動作が、第１の実施形態の説明と重複する内容については説明を省略する。

【0084】

図１２に示すように情報処理装置１０３は、第１の実施形態の情報処理装置１００におけるマスク処理部１５０に代わりマスク処理部１５１を備え、さらに属性検出部１９０を備える。

【0085】

属性検出部１９０は、撮影データに含まれる人物の属性を検出する。ここで、人物の属性とは、例えば、当該人物の性別、年齢、姿勢、服装、及び当該人物の歩行速度等であるが、これに限らない。このように、属性検出部１９０は、人物の属性を撮影データから検出する。属性検出部１９０は、属性検出手段の一例である。

【0086】

属性検出部１９０は、検出された人物ごとに属性を検出し、検出した人物の属性と、人物の識別情報とを対応づけて検出データとして記憶装置１６０に格納する。

【0087】

図１３は、第４の実施形態にかかる検出データの一例を示す図である。図１３に示す検出データは、識別情報と、人物の行動を示す情報と、人物の感情を示す情報と、人物の属性を示す情報とが対応づけられたデータである。例えば、図１３の一行目のレコードには、識別情報が「Ａ」である人物は、「１０歳未満」の「女性」であることを表す検出データが示されている。

【0088】

マスク処理部１５１は、不審度と、検出された属性とに基づいてマスク処理を行う。具体的には、マスク処理部１５１は、検出された属性の情報が加工済撮影データから認識できるようにマスク処理を行う。撮影データに含まれる人物が３０代の男性であった場合、マスク処理部１５１は、例えば、当該人物が映る領域に、「３０代」と「男性」とを示す情報を付加したアバター画像を重畳することによりマスク処理を行う。このような、属性に応じたアバター画像は、予め記憶装置１６０に格納されている。なお、付加する情報は、不審度に応じて取捨選択されてよい。また、アバター画像を重畳するマスク処理は、撮影データから検出されたすべての人物に対して行うのではなく、不審度に基づいて選択された人物に行ってもよい。

【0089】

次に、監視システム１００３の動作を、図１４及び図１５を用いて説明する。

【0090】

第４の実施形態においては、図６に示すＳ１０２の処理の代わりに、図１４及び図１５に示す処理を行う。図６及び図７に示すフローチャートと同様の処理については、説明を省略する。

【0091】

図１４は、第４の実施形態にかかる加工処理のフローチャートの一例を示す図である。図１４に示すように、Ｓ２０４の処理の後、属性検出部１９０は、検出された人物ごとに属性を撮影データから検出する（Ｓ５０１）。そして、属性検出部１９０は、検出した属性と、人物の行動を示す情報と、人物の感情を示す情報と、識別情報とを対応づけて検出データとして記憶装置１６０に格納する。なお、本動作例においては、図１３に示す検出データと、図４に示す不審度データとが記憶装置１６０に格納されたとする。

【0092】

そして、検出されたすべての人物に不審度が算出された場合（Ｓ２０６のＹｅｓ）、マスク処理部１５１は、次のようにマスク処理を行う（Ｓ５０２）。

【0093】

図１５は、第４の実施形態にかかるマスク処理のフローチャートの一例を示す図である。図１５に示すように、不審度が０．５以上であり（Ｓ２０８のＹｅｓ）、不審度が０．８未満のとき（Ｓ２１０のＮｏ）、マスク処理部１５１は、属性に基づいて情報量を減らす度合い小さいマスク処理を行う（Ｓ５０３）。本動作例では、図４に示す不審度データのうち、不審度が０．５以上０．８未満であるのは、識別情報「Ｃ」の人物である。図１３に示すように識別情報「Ｃ」の人物は、年齢が「３０代」であり、性別が「男性」の人物である。そのため、マスク処理部１５１は、識別情報「Ｃ」の人物が映る領域に対して、「３０代」の情報と「男性」の情報とを付加したアバターを重畳する。このとき、マスク処理部１５１は、例えば、アバターの色を変えたり、アバターに文字を書き込んだりすることで、年齢及び性別の情報を付加してもよい。

【0094】

このように、第４の実施形態にかかる情報処理装置１０３は、撮影データに含まれる人物の属性を検出し、検出した属性に基づいてマスク処理を行う。これにより、情報処理装置１０３は、例えば、アバターに属性の情報を付加した加工済撮影データを提示することができるので、弱いマスク処理を行った人物に対しても、監視員によるプライバシーの侵害を防止することができる。

【0095】

（変形例３）
例えば、１０歳未満の人物がうろついていたことが検出された場合、当該人物は監視すべき対象である可能性がある。そのため、不審度算出部１４０は、検出された人物の行動及び感情の情報に加え、検出された人物の、属性の情報も用いて不審度を算出してもよい。

【0096】

また、例えば、撮影範囲が公道であり、午前３時に生成された撮影データに１０代の人物が含まれていた場合、当該人物は監視すべき対象である可能性がある。そのため、不審度算出部１４０は、人物の行動の情報と、人物の感情の情報と、人物の属性の情報とに加え、時刻の情報も用いて不審度を算出してもよい。このとき、時刻の情報は、撮影装置２００が情報処理装置１０３に送る撮影データに含まれてもよい。

【0097】

なお、図１２において、情報処理装置１０３は、第２の実施形態で説明した指示受付部１７０及び第３の実施形態で説明した顔照合部１８０が記載されていないが、情報処理装置１０３は、指示受付部１７０及び顔照合部１８０を備えていてもよい。すなわち、第４の実施形態の監視システム１００３は、第２の実施形態及び第３の実施形態において説明された処理と同様の処理も行えるように構成されてもよい。

【0098】

＜第５の実施形態＞
次に、第５の実施形態にかかる情報処理装置を含む監視システムについて説明する。

【0099】

図１６は、第５の実施形態にかかる監視システム１００４の構成の一例を示すブロック図である。図１６に示すように、監視システム１００４は、情報処理装置１０４と、撮影装置２００とを備える。なお、図１６に示す監視システム１００４の構成及び動作が、第１の実施形態の説明と重複する内容については説明を省略する。

【0100】

撮影装置２００は、撮影範囲を撮影することにより、撮影データを生成する。

【0101】

図１７は、第５の実施形態にかかる情報処理装置１０４の機能構成の一例を示すブロック図である。図１７に示すように、情報処理装置１０４は、行動検出部４１０と、感情検出部４２０と、不審度算出部４３０と、マスク処理部４４０とを備える。

【0102】

行動検出部４１０は、撮影データに含まれる人物の行動を撮影データから検出する。

【0103】

感情検出部４２０は、撮影データに含まれる人物の感情を撮影データから検出する。

【0104】

不審度算出部４３０は、検出された人物の行動及び人物の感情に基づいて、人物の不審度を算出する。

【0105】

マスク処理部４４０は、算出された不審度に基づいて、撮影データのうち人物が映る領域にマスク処理を行う。

【0106】

次に、図１８を用いて情報処理装置１０４の動作を説明する。図１８は、情報処理装置１０４の動作を説明するフローチャートである。なお、図１８に示す動作は、第１の実施形態における図１８のＳ１０２の処理に代わって行われる動作である。

【0107】

行動検出部４１０は、撮影装置２００が生成した撮影データを用いて、撮影データに含まれる人物の行動を検出する（Ｓ６０１）。

【0108】

感情検出部４２０は、撮影装置２００が生成した撮影データを用いて、撮影データに含まれる人物の感情を検出する（Ｓ６０２）。

【0109】

不審度算出部４３０は、行動検出部４１０によって検出された人物の行動と、感情検出部４２０によって検出された人物の感情に基づいて、人物の不審度を算出する（Ｓ６０３）。

【0110】

マスク処理部４４０は、不審度算出部４３０によって算出された不審度に基づいて、撮影データのうち人物が映る領域にマスク処理を行う（Ｓ６０４）。

【0111】

以上のように、第５の実施形態にかかる情報処理装置１０４は、撮影データに含まれる人物の行動と、人物の感情とを検出する。そして情報処理装置１０４は、検出した人物の行動及び人物の感情に基づいて、人物の不審度を算出し、算出した前記不審度に応じて、撮影データのうち人物が映る領域にマスク処理を行う。この構成により、第５の実施形態にかかる情報処理装置１０４は、プライバシーの保護を図りつつ、人物を監視する際に有効な映像を提示することが可能になるという効果が得られる。

【0112】

上述した第１、第２、第３、第４及び第５の実施形態は、適宜組み合わせて実現可能である。

【0113】

＜情報処理装置のハードウェアの構成例＞
上述した第１、第２、第３、第４及び第５の実施形態にかかる情報処理装置を構成するハードウェアについて説明する。図１９は、各実施形態における情報処理装置を実現するコンピュータ装置のハードウェア構成の一例を示すブロック図である。図１９が示す各ブロックは、各実施形態における情報処理装置及び情報処理方法を実現するコンピュータ装置１０と、ソフトウェアとの組み合わせにより実現できる。

【0114】

図１９に示すように、コンピュータ装置１０は、プロセッサ１１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１２、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１３、記憶装置１４、入出力インタフェース１５、バス１６、及びドライブ装置１７を備える。

【0115】

記憶装置１４は、プログラム（コンピュータプログラム）１８を格納する。プロセッサ１１は、ＲＡＭ１２を用いて本情報処理装置にかかるプログラム１８を実行する。具体的には、例えば、プログラム１８は、図５、図６、図７、図１１、図１４、図１５及び図１８に示す処理をコンピュータに実行させるプログラムを含む。プロセッサ１１が、プログラム１８を実行することに応じて、本情報処理装置の各構成要素（上述した、行動検出部１２０、４１０、感情検出部１３０、４２０、不審度算出部１４０、４３０、及びマスク処理部１５０、１５１、４４０等）の機能が実現される。プログラム１８は、ＲＯＭ１３に記憶されていてもよい。また、プログラム１８は、記憶媒体２０に記録され、ドライブ装置１７を用いて読み出されてもよいし、図示しない外部装置から図示しないネットワークを介してコンピュータ装置１０に送信されてもよい。

【0116】

入出力インタフェース１５は、周辺機器（キーボード、マウス、表示装置など）１９とデータをやり取りする。入出力インタフェース１５は、データを取得または出力する手段として機能する。バス１６は、各構成要素を接続する。

【0117】

なお、情報処理装置の実現方法には様々な変形例がある。例えば、情報処理装置は、専用の装置として実現することができる。また、情報処理装置は、複数の装置の組み合わせにより実現することができる。

【0118】

各実施形態の機能における各構成要素を実現するためのプログラムを記憶媒体に記録させ、該記憶媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記憶媒体も各実施形態の範囲に含まれる。また、上述のプログラムが記録された記憶媒体、及びそのプログラム自体も各実施形態に含まれる。

【0119】

該記憶媒体は、例えばフロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）－ＲＯＭ、磁気テープ、不揮発性メモリカード、またはＲＯＭであるが、この例に限らない。また該記憶媒体に記録されたプログラムは、単体で処理を実行しているプログラムに限らず、他のソフトウェア、拡張ボードの機能と共同して、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）上で動作して処理を実行するプログラムも各実施形態の範疇に含まれる。

【0120】

以上、上述した実施形態を参照して本開示を説明した。しかしながら、本開示は、上述した実施形態には限定されない。即ち、本開示は、本開示のスコープ内において、種々の上記開示要素の多様な組み合わせ乃至選択等、当業者が理解し得る様々な態様を適用することができる。

【0121】

この出願は、２０２０年３月１９日に出願された日本出願特願２０２０－０４８５７９を基礎とする優先権を主張し、その開示の全てをここに取り込む。

【符号の説明】

【0122】

１０ コンピュータ装置
１１ プロセッサ
１２ ＲＡＭ
１３ ＲＯＭ
１４、１６０ 記憶装置
１５ 入出力インタフェース
１６ バス
１７ ドライブ装置
１８ プログラム
１９ 周辺機器
２０ 記憶媒体
１００、１０１、１０２、１０３、１０４ 情報処理装置
１２０、４１０ 行動検出部
１３０、４２０ 感情検出部
１４０、４３０ 不審度算出部
１５０、１５１、４４０ マスク処理部
１７０ 指示受付部
１８０ 顔照合部
１９０ 属性検出部
２００ 撮影装置
３００ 管理端末
３１０ 表示部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8A】

【図8B】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】