特許 7552869 情報処理装置、情報処理システム、情報処理方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-09-09

(45)【発行日】2024-09-18

(54)【発明の名称】情報処理装置、情報処理システム、情報処理方法及びプログラム

(51)【国際特許分類】

   G06T 1/00 20060101AFI20240910BHJP

   G06T 7/00 20170101ALI20240910BHJP

   G06V 40/16 20220101ALI20240910BHJP

   H04N 7/18 20060101ALI20240910BHJP

【ＦＩ】

G06T1/00 400H

G06T7/00 510F

G06V40/16 A

H04N7/18 D

【請求項の数】 10

(21)【出願番号】P 2023508853

(86)(22)【出願日】2022-02-28

(86)【国際出願番号】 JP2022008300

(87)【国際公開番号】W WO2022202125

(87)【国際公開日】2022-09-29

【審査請求日】2023-06-28

(31)【優先権主張番号】P 2021047192

(32)【優先日】2021-03-22

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100094112

【弁理士】

【氏名又は名称】岡部 讓

(74)【代理人】

【識別番号】100106183

【弁理士】

【氏名又は名称】吉澤 弘司

(72)【発明者】

【氏名】高井 洋明

【審査官】小池 正彦

(56)【参考文献】

【文献】特開２０２２－１４０６９９（ＪＰ，Ａ）

【文献】特開２００８－１９１７９３（ＪＰ，Ａ）

【文献】特開２０１１－２２１８３４（ＪＰ，Ａ）

【文献】国際公開第２０２０／２３０３４０（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ １／００

Ｇ０６Ｔ ７／００

Ｇ０６Ｖ ４０／１６

Ｈ０４Ｎ ７／１８

(57)【特許請求の範囲】

【請求項1】

撮影画像を取得する取得部と、
前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御する制御部と、
を備える情報処理装置。

【請求項2】

前記制御部は、前記状態が変化している場合における前記実行頻度を、前記状態が変化していない場合における前記実行頻度よりも多くする、
請求項１に記載の情報処理装置。

【請求項3】

前記制御部は、前記処理を実行する装置に対する前記撮影画像の送信頻度を増減する、
請求項１又は２に記載の情報処理装置。

【請求項4】

前記撮影画像において検出される前記目標物の総数と、前記装置に対する前記撮影画像の前記送信頻度との対応関係を予め定義した送信制御情報を記憶する記憶部を更に有し、
前記制御部は、前記撮影画像において新たに検出された前記目標物の検出数に基づいて前記送信制御情報を参照し、前記送信頻度を決定する、
請求項３に記載の情報処理装置。

【請求項5】

前記目標物は、前記人物の往来時に前記人物の身体によって少なくとも一部分が遮蔽される、
請求項１乃至４のいずれか１項に記載の情報処理装置。

【請求項6】

撮影画像を取得する画像取得装置と、
前記画像取得装置から送信された前記撮影画像の中から人物の生体情報を検出する検出装置と、
を備え、
前記画像取得装置は、
前記撮影画像を取得する取得部と、
前記撮影画像における前記人物以外の目標物の状態の変化に基づいて、前記検出装置に対して前記撮影画像を送信する頻度を制御する制御部と、
を有する情報処理システム。

【請求項7】

前記制御部は、前記状態が変化している場合における前記頻度を、前記状態が変化していない場合における前記頻度よりも多くする、
請求項６に記載の情報処理システム。

【請求項8】

前記画像取得装置は、前記撮影画像において検出される前記目標物の総数と、前記検出装置に対する前記撮影画像の前記頻度との対応関係を予め定義した送信制御情報を記憶する記憶部を更に有し、
前記制御部は、前記撮影画像において新たに検出された前記目標物の検出数に基づいて前記送信制御情報を参照し、前記頻度を決定する、
請求項６又は７に記載の情報処理システム。

【請求項9】

撮影画像を取得するステップと、
前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御するステップと、
を備える情報処理方法。

【請求項10】

コンピュータに、
撮影画像を取得するステップと、
前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御するステップと、
を実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、情報処理システム、情報処理方法及びプログラムに関する。

【背景技術】

【0002】

特許文献１には、撮像カメラで撮像した人物の顔画像とデータベースに予め記憶された登録者の顔画像とを照合し、一致した場合には当該人物が登録者であることを通知する来店者通知システムが開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１１－２２１８３４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１に例示されているシステムでは、建物入口で顔認証による来店者の検出を行うために、顔検出処理を常時動作させる必要がある。このため、当該システムにおいては、顔検出処理を実行する装置において恒常的な負荷が発生していた。

【0005】

本発明は、上述の問題に鑑み、生体情報の検出処理の実行による装置の負荷を低減できる情報処理装置、情報処理システム、情報処理方法及びプログラムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明の一つの観点によれば、撮影画像を取得する取得部と、前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御する制御部と、を備える情報処理装置が提供される。

【0007】

本発明の他の観点によれば、撮影画像を取得する画像取得装置と、前記画像取得装置から送信された前記撮影画像の中から人物の生体情報を検出する検出装置と、を備え、前記画像取得装置は、前記撮影画像を取得する取得部と、前記撮影画像における前記人物以外の目標物の状態の変化に基づいて、前記検出装置に対して前記撮影画像を送信する頻度を制御する制御部と、を有する情報処理システムが提供される。

【0008】

本発明の更に他の観点によれば、撮影画像を取得するステップと、前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御するステップと、を備える情報処理方法が提供される。

【0009】

本発明の更に他の観点によれば、コンピュータに、撮影画像を取得するステップと、前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御するステップと、を実行させるためのプログラムが提供される。

【発明の効果】

【0010】

本発明によれば、生体情報の検出処理の実行による装置の負荷を低減できる情報処理装置、情報処理システム、情報処理方法及びプログラムが提供される。

【図面の簡単な説明】

【0011】

【図1】第１実施形態に係る情報処理システムの機能ブロック図である。

【図2】第１実施形態に係る目標物情報記憶部が記憶する情報の一例を示す図である。

【図3】第１実施形態に係る送信制御情報記憶部が記憶する情報の一例を示す図である。

【図4】第１実施形態に係る登録者情報記憶部が記憶する情報の一例を示す図である。

【図5】第１実施形態に係る検出情報記憶部が記憶する情報の一例を示す図である。

【図6】第１実施形態に係る画像取得装置のハードウェア構成例を示すブロック図である。

【図7】第１実施形態に係る顔照合装置のハードウェア構成例を示すブロック図である。

【図8】第１実施形態に係る自動ドアの閉扉状態における撮影範囲、画像領域及び目標物の位置関係の一例を示す図である。

【図9】第１実施形態に係る自動ドアの開扉状態における撮影範囲、画像領域及び目標物の位置関係の一例を示す図である。

【図10】第１実施形態に係る情報処理システムにおいて実行される処理の概略を示すシーケンスチャートである。

【図11】第２実施形態に係る情報処理装置の機能ブロック図である。

【図12】第３実施形態に係る情報処理システムの機能ブロック図である。

【図13】変形実施形態に係る情報処理装置の機能ブロック図である。

【図14】変形実施形態に係る情報処理システムが適用される通路の一例を示す図である。

【発明を実施するための形態】

【0012】

以下、図面を参照して、本発明の例示的な実施形態を説明する。図面において同様の要素又は対応する要素には同一の符号を付し、その説明を省略又は簡略化することがある。

【0013】

図１は、本実施形態に係る情報処理システム１の機能ブロック図である。図１に示されるように、情報処理システム１は、顔認証の対象者を撮影する画像取得装置１０と、顔認証を実行する顔認証装置１１から構成される。画像取得装置１０と顔認証装置１１は、ＬＡＮ（Local Area Network）やインターネット等のネットワークＮＷを介して接続されている。

【0014】

画像取得装置１０は、撮影部１０１と、画像処理部１０２と、画像送信部１０３と、目標物情報記憶部１０４と、送信制御情報記憶部１０５とを有する。

【0015】

撮影部１０１は、顔認証の対象者を撮影し、その撮影画像を取得する。画像処理部１０２は、撮影部１０１で撮影された撮影画像を解析し、撮影画像の送信要否及び送信頻度を決定する。画像処理部１０２は、画像送信部１０３に対して撮影画像の送信制御を行う。また、画像送信部１０３は、画像処理部１０２からの制御に基づいて顔認証装置１１に撮影画像を送信する。画像処理部１０２は、顔検出処理を実行する顔認証装置１１に対する撮影画像の送信頻度を増減することによって顔認証装置１１における顔検出処理の実行頻度を増減する。画像取得装置１０における制御処理の詳細については後述する。

【0016】

目標物情報記憶部１０４は、撮影画像の撮影範囲において目標物が設置される位置を予め定義した目標物情報を記憶する。

【0017】

図２は、本実施形態に係る目標物情報記憶部１０４が記憶する情報の一例を示す図である。ここでは、目標物情報は、撮影範囲ＩＤ、領域情報ＩＤ及び目標物ＩＤをデータ項目として含んでいる。なお、図２に示す目標物情報のデータ項目は一例に過ぎず、他のデータ項目を更に含んでもよい。

【0018】

撮影範囲ＩＤは、撮影範囲を一意に特定する識別子である。領域情報ＩＤは、撮影範囲の中の画像領域を一意に特定する識別子である。本実施形態では、領域情報ＩＤを領域情報とも呼ぶ。目標物ＩＤは、目標物を一意に特定する識別子である。本実施形態の目標物は、人物の顔と比較して、画像検出処理において容易に検出可能な図形、記号、模様、文字等であるものとする。

【0019】

図２に示されるように、撮影範囲Ｒ－１の中に目標物Ｔ－１、目標物Ｔ－２が設置される。詳述すると、目標物Ｔ－１は、撮影範囲Ｒ－１の中の領域Ａ－１に設置される。目標物Ｔ－２は、撮影範囲Ｒ－１の中の領域Ａ－２に設置される。

【0020】

送信制御情報記憶部１０５は、顔認証装置１１（顔検出装置１１Ａ）に撮影画像を送信する頻度を定義した送信制御情報を記憶する。

【0021】

図３は、本実施形態に係る送信制御情報記憶部１０５が記憶する情報の一例を示す図である。ここでは、送信制御情報は、目標物検出数及び送信頻度をデータ項目として含んでいる。なお、図３に示す送信制御情報のデータ項目は一例に過ぎず、他のデータ項目を更に含んでもよい。例えば、送信制御情報に送信先情報を追加し、目標物検出数に応じて送信先を変更するようにしても良い。

【0022】

目標物検出数は、撮影画像の中から検出された目標物の総数である。送信頻度は、画像取得装置１０から顔認証装置１１（顔検出装置１１Ａ）に対して撮影画像を送信する単位時間当たりの回数である。

【0023】

例えば、図３では、目標物検出数が２である場合には、送信頻度は１（回／秒）である。また、目標物検出数が１である場合には、送信頻度は２（回／秒）である。そして、目標物検出数が０である場合には、送信頻度は４（回／秒）である。すなわち、送信制御情報は、検出される目標物の数が少ないほど、送信頻度は多くなるように定義されている。

【0024】

また、図１に示されるように、顔認証装置１１は、顔検出装置１１Ａと、顔照合装置１１Ｂとから構成される。顔検出装置１１Ａは、撮影画像から認証対象者の顔画像を検出する。顔照合装置１１Ｂは、顔検出装置１１Ａで検出された顔画像と、データベースに予め登録されている登録顔画像とを照合する。

【0025】

顔検出装置１１Ａは、画像受信部１１１と、検出処理部１１２とを有する。画像受信部１１１は、画像取得装置１０から送信された撮影画像を受信する。検出処理部１１２は、画像受信部１１１で受信した撮影画像を解析し、撮影画像内から認証対象者の顔画像を検出する。

【0026】

また、顔照合装置１１Ｂは、顔照合部１１３と、登録者情報記憶部１１４と、検出情報記憶部１１５とを有する。

【0027】

顔照合部１１３は、顔検出装置１１Ａで検出された顔画像と、登録者情報記憶部１１４に予め登録されている登録顔画像とを照合する。顔照合部１１３は、認証対象者の顔照合を実行すると、その処理結果を検出情報として検出情報記憶部１１５へ登録する。

【0028】

登録者情報記憶部１１４は、登録者の生体情報及び属性情報を含む登録者情報を記憶する。本実施形態では、生体情報として顔画像を用いるが、顔画像の代わりに虹彩画像や耳介画像等の他の生体情報を用いてもよい。

【0029】

図４は、本実施形態に係る登録者情報記憶部１１４が記憶する情報の一例を示す図である。ここでは、登録者情報は、登録者ＩＤ、顔画像、氏名、年齢及び性別をデータ項目として含んでいる。なお、図４に示す登録者情報のデータ項目は一例に過ぎず、他のデータ項目を更に含んでもよい。

【0030】

登録者ＩＤは、登録者を一意に特定する識別子である。顔画像は、登録者について予め登録された登録顔画像である。

【0031】

検出情報記憶部１１５は、検出処理部１１２及び顔照合部１１３における処理結果を検出情報として記憶する。

【0032】

図５は、本実施形態に係る検出情報記憶部１１５が記憶する情報の一例を示す図である。ここでは、検出情報は、検出情報ＩＤ、検出日時、及び登録者ＩＤをデータ項目として含んでいる。なお、図５に示す検出情報のデータ項目は一例に過ぎず、他のデータ項目を更に含んでもよい。

【0033】

検出情報ＩＤは、検出情報を一意に特定する識別子である。検出情報は、撮影画像において来訪者の存在を検出したことを示す。登録者ＩＤは、来訪者の顔画像との顔照合によって特定された登録者のＩＤである。

【0034】

図６は、本実施形態に係る画像取得装置１０のハードウェア構成例を示すブロック図である。画像取得装置１０は、演算、制御及び記憶を行うコンピュータとして、プロセッサ１５１、ＲＡＭ（Random Access Memory）１５２、ＲＯＭ（Read Only Memory）１５３、ストレージ１５４、通信Ｉ／Ｆ（Interface）１５５、及びカメラ１５６を備える。各装置は、バス、配線、駆動装置等を介して相互に接続される。

【0035】

プロセッサ１５１は、ＲＯＭ１５３、ストレージ１５４等に記憶されたプログラムに従って所定の演算を行うとともに、画像取得装置１０の各部を制御する機能を有する。プロセッサ１５１としては、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等が用いられる。

【0036】

ＲＡＭ１５２は、揮発性記憶媒体から構成され、プロセッサ１５１の動作に必要な一時的なメモリ領域を提供する。ＲＯＭ１５３は、不揮発性記憶媒体から構成され、画像取得装置１０の動作に用いられるプログラム等の必要な情報を記憶する。

【0037】

ストレージ１５４は、不揮発性記憶媒体から構成され、データベースの記憶、画像取得装置１０の動作用プログラムの記憶等を行う。ストレージ１５４は、例えば、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）により構成される。

【0038】

通信Ｉ／Ｆ１５５は、イーサネット（登録商標）、Ｗｉ－Ｆｉ（登録商標）、４Ｇ・５Ｇ等の規格に基づく通信インターフェースであり、他の装置との通信を行うためのモジュールである。

【0039】

カメラ１５６は、例えばＣＭＯＳ（Complementary Metal-Oxide-Semiconductor）イメージセンサ、ＣＣＤ（Charge Coupled Device）イメージセンサ等を受光素子として有するデジタルカメラである。

【0040】

プロセッサ１５１は、ＲＯＭ１５３、ストレージ１５４等に記憶されたプログラムをＲＡＭ１５２にロードして実行する。これにより、プロセッサ１５１は、撮影部１０１、画像処理部１０２及び画像送信部１０３の機能を実現する。プロセッサ１５１は、ストレージ１５４を制御することにより目標物情報記憶部１０４及び送信制御情報記憶部１０５の機能を実現する。

【0041】

図７は、本実施形態に係る顔照合装置１１Ｂのハードウェア構成例を示すブロック図である。なお、顔検出装置１１Ａのハードウェア構成は顔照合装置１１Ｂと同様であるため、説明を省略する。

【0042】

顔照合装置１１Ｂは、演算、制御及び記憶を行うコンピュータとして、プロセッサ１６１、ＲＡＭ１６２、ＲＯＭ１６３、ストレージ１６４、通信Ｉ／Ｆ１６５、表示装置１６６及び入力装置１６７を備える。各装置は、バス、配線、駆動装置等を介して相互に接続される。

【0043】

表示装置１６６は、ユーザへの情報の提示のために、動画、静止画、文字等を表示する。表示装置１６６としては、例えば液晶ディスプレイ、ＯＬＥＤ（Organic Light Emitting Diode）ディスプレイ等が用いられる。

【0044】

入力装置１６７は、キーボード、ポインティングデバイス、ボタン等であって、例えばシステムの管理者による入力操作を受け付ける。表示装置１６６及び入力装置１６７は、タッチパネルとして一体に形成されていてもよい。

【0045】

プロセッサ１６１は、ＲＯＭ１６３、ストレージ１６４等に記憶されたプログラムをＲＡＭ１６２にロードして実行する。これにより、プロセッサ１６１は、上述した顔照合部１１３の機能を実現する。また、プロセッサ１６１は、ストレージ１６４を制御することにより登録者情報記憶部１１４及び検出情報記憶部１１５の機能を実現する。

【0046】

なお、図６及び図７に示されているハードウェア構成は一例であり、これら以外の装置が追加されていてもよく、一部の装置が設けられていなくてもよい。また、一部の装置が同様の機能を有する別の装置に置換されていてもよい。また、本実施形態の一部の機能がネットワークを介して他の装置により提供されてもよく、本実施形態の機能が複数の装置に分散されて実現されてもよい。このように、図６及び図７に示されているハードウェア構成は適宜変更可能である。

【0047】

続いて、本実施形態に係る情報処理システム１の適用例について図８及び図９を参照しながら説明する。
図８は、本実施形態に係る自動ドアＤの閉扉状態における撮影範囲、画像領域及び目標物の位置関係の一例を示す図である。

【0048】

ここでは、人物が自動ドアＤを通過する場所には、撮影範囲Ｒ－１が設定されている。また、撮影範囲Ｒ－１において予め定義された領域Ａ－１及び領域Ａ－２の中には、自動ドアＤに目標物Ｔ－１及び目標物Ｔ－２がそれぞれ設置されている。

【0049】

画像取得装置１０は、領域Ａ－１に目標物Ｔ－１、領域Ａ－２に目標物Ｔ－２がそれぞれ存在するか否かを確認する。画像取得装置１０は、自動ドアＤが閉扉状態である場合、自動ドアＤの位置に合わせて領域Ａ－１及び領域Ａ－２において目標物Ｔ－１及び目標物Ｔ－２をそれぞれ検出する。したがって、図８の状態では、目標物検出数は２となる。この場合、画像取得装置１０は、目標物検出数に基づいて送信制御情報記憶部１０５を参照し、送信頻度を１（回／秒）に決定する。

【0050】

なお、画像取得装置１０は、目標物が領域Ａ－１及び領域Ａ－２内にそれぞれ検出される場合は、自動ドアＤが閉扉状態であり、来訪者無しであることも判定できる。

【0051】

図９は、本実施形態に係る自動ドアＤの開扉状態における撮影範囲、画像領域及び目標物の位置関係の一例を示す図である。ここでは、建物入口において来訪者Ｐが存在することから、自動ドアＤは開扉状態になっている。また、自動ドアＤが開扉状態となった場合、自動ドアＤに貼付されている目標物Ｔ－１及び目標物Ｔ－２は、ドアの移動に合わせて移動するため、領域Ａ－１及び領域Ａ－２の範囲から離脱する。この場合、画像処理部１０２は、領域Ａ－１及び領域Ａ－２内において目標物を検出できなくなる。

【0052】

したがって、図９の状態では、画像処理部１０２が撮影画像から検出する目標物の総数（目標物検出数）は０となる。そして、画像処理部１０２は、目標物検出数に基づいて送信制御情報記憶部１０５を参照し、送信頻度を４（回／秒）に決定する。このように、画像処理部１０２は、自動ドアＤの開閉状態に応じて、撮影画像の送信頻度を変更する。

【0053】

なお、画像取得装置１０は、領域Ａ－１及び領域Ａ－２内において目標物が検出されない場合には、自動ドアＤが開扉状態であり、来訪者Ｐが存在すると判定できる。画像処理部１０２は、目標物が所定数検出されない場合（来訪者Ｐが存在しない場合）よりも、顔検出装置１１Ａにおける顔検出処理の実行頻度を増加させるために、撮影範囲についての撮影画像の送信頻度を増加させる。

【0054】

続いて、上述のように構成された情報処理システム１の動作について図面を参照しながら説明する。

【0055】

図１０は、本実施形態に係る情報処理システム１において実行される処理の概略を示すシーケンスチャートである。図１０に示される処理は一例に過ぎず、処理順序や処理内容は適宜変更できる。

【0056】

また、図１０の説明では、画像検出処理によって人物の顔よりも容易に存在有無を判定できる目標物を用意し、当該目標物が画像取得装置１０の撮影範囲の所定領域に予め設置（壁面、床面及び構造物に対する貼付、固定、造形等）されていることを前提とする。目標物は、来訪者の往来時に来訪者の身体又は他の物体によって遮蔽される、あるいは移動体に追従移動するものとする。

【0057】

先ず、画像取得装置１０（撮影部１０１）は、所定の周期で撮影範囲を撮影し、その撮影画像を取得する（ステップＳ１０１）。図８及び図９の例では、撮影部１０１は、撮影範囲Ｒ－１を撮影し、画像処理部１０２に撮影画像を出力する。

【0058】

次に、画像取得装置１０（画像処理部１０２）は、目標物情報記憶部１０４を参照し、撮影画像の撮影範囲に関する領域情報を取得する（ステップＳ１０２）。図８及び図９の例では、画像取得装置１０（画像処理部１０２）は、撮影画像の撮影範囲Ｒ－１について目標物情報記憶部１０４を参照し、領域情報(領域Ａ－１／領域Ａ－２)を取得する。

【0059】

次に、画像取得装置１０（画像処理部１０２）は、撮影範囲に関する領域情報の有無を判定する（ステップＳ１０３）。

【0060】

ここで、画像取得装置１０は、領域情報が有ると判定した場合（ステップＳ１０３：ＹＥＳ）には、処理はステップＳ１０４へ移行する。

【0061】

これに対し、画像取得装置１０は、領域情報が無いと判定した場合（ステップＳ１０３：ＮＯ）には、処理はステップＳ１１２へ移行する。

【0062】

ステップＳ１０４において、画像取得装置１０（画像処理部１０２）は、領域情報に紐づく目標物情報を取得する。

【0063】

次に、画像取得装置１０（画像処理部１０２）は、撮影画像の所定領域において目標物を検出する（ステップＳ１０５）。検出処理には、公知の輪郭検出処理(エッジ検出)の手法が利用できる。なお、目標物の検出（存在有無の確認）は、図２に示したように予め登録した所定領域に限定して行えばよく、所定領域以外については確認しなくても良い。これにより、処理対象が絞り込まれ、処理時間の短縮が図られる。

【0064】

次に、画像取得装置１０（画像処理部１０２）は、ステップＳ１０５において検出された目標物の総数を算出する（ステップＳ１０６）。

【0065】

次に、画像取得装置１０（画像処理部１０２）は、目標物の総数に基づいて撮影範囲に関する送信制御情報を参照する（ステップＳ１０７）。

【0066】

次に、画像取得装置１０（画像処理部１０２）は、撮影画像の送信頻度を決定する（ステップＳ１０８）。

【0067】

次に、画像取得装置１０（画像処理部１０２）は、決定された送信頻度が０であるか否かを判定する（ステップＳ１０９）。

【0068】

ここで、画像取得装置１０は、送信頻度が０であると判定した場合（ステップＳ１０９：ＹＥＳ）には、処理はステップＳ１０１へ戻る。これによって、来訪者がない場合における不必要な顔検出処理を抑制することができる。

【0069】

これに対し、画像取得装置１０は、送信頻度が０ではないと判定した場合（ステップＳ１０９：ＮＯ）には、処理はステップＳ１１０へ移行する。

【0070】

ステップＳ１１０において、画像処理部１０２は、前回送信時にＲＡＭ１５２等に記憶された前回送信情報を取得する。

【0071】

次に、画像処理部１０２は、ステップＳ１０８で取得された送信頻度情報に基づいて現在時刻が顔認証装置１１（顔検出装置１１Ａ）に撮影画像を送信するタイミングであるか否かを判定する（ステップＳ１１１）。前回送信情報は、送信時刻及び送信先の情報を含む。

【0072】

ここで、画像取得装置１０は、撮影画像を送信するタイミングであると判定した場合（ステップＳ１１１：ＹＥＳ）には、処理はステップＳ１１２へ移行する。

【0073】

これに対し、画像取得装置１０は、撮影画像を送信するタイミングではないと判定した場合（ステップＳ１１１：ＮＯ）には、所定時間を経過するまで待機する。これによって、顔検出装置１１Ａへの不要な撮影画像の送信を抑止することができる。

【0074】

ステップＳ１１２において、画像取得装置１０（画像送信部１０３）は、顔認証装置１１に対して撮影画像を送信する。このとき、画像取得装置１０（画像送信部１０３）は、ＲＡＭ１５２又はストレージ１５４に送信時刻及び送信先を含む前回送信情報を保存する。

【0075】

次に、顔認証装置１１（画像受信部１１１）は、画像取得装置１０から送信された撮影画像を受信する（ステップＳ１１３）。

【0076】

次に、顔認証装置１１（検出処理部１１２）は、撮影画像の中から認証対象者の顔画像を検出する（ステップＳ１１４）。

【0077】

次に、顔認証装置１１（顔照合部１１３）は、ステップＳ１１２において検出された認証対象者の顔画像と、登録者情報記憶部１１４に記憶されている登録者の登録顔画像とを顔照合する（ステップＳ１１５）。

【0078】

そして、顔認証装置１１（顔照合部１１３）は、顔検出及び顔照合の処理結果を検出情報として検出情報記憶部１１５に保存し（ステップＳ１１６）、処理を終了する。

【0079】

本実施形態に係る情報処理システム１によれば、以下のような効果を奏する。

【0080】

従来、建物の入口等において来訪者の確認のために顔認証を行う場合には、来訪者の多寡にかかわらず同じ頻度で顔検出処理を実行することから、恒常的な負荷が発生していた。量販店のように来訪者が多い店舗の場合には、店舗への来訪者の確認を行う目的で顔認証装置を導入し、顔検出処理を常時実行することは意味がある。しかし、来訪者が少ない店舗の場合には、来訪者がいない時間帯でも顔検出処理を常時動作させることは非効率である。

【0081】

これに対し、本実施形態に係る情報処理システム１では、撮影画像における人物（来訪者）以外の目標物の状態の変化に基づいて顔検出処理の実行頻度を制御する。これにより、顔検出処理を実行する装置における負荷を低減できる。また、人物以外の目標物に着目して人物の存在を検出する構成を備えるため、撮影画像から人物の顔画像を検出する場合よりも比較的軽負荷で来訪者を検出できる。目標物の存在有無の判定処理によって増加する負荷よりも、顔検出処理の実行頻度を制御することで抑制できる負荷の方が大きいため、情報処理システム１全体としては計算資源等の負荷を大幅に低減できる。

【0082】

また、本実施形態に係る情報処理システム１では、画像取得装置１０と顔認証装置１１はネットワークＮＷを介して接続されている。当該システム構成の場合には、画像取得装置１０側で顔検出の要否を判定できることによって、画像取得装置１０は撮影画像を顔認証装置１１に常時送信する必要がなくなる。

【0083】

特に、近年は撮影処理・結果通知を行う端末を認証エリアに設置し、顔認証装置はクラウド上に設置するようなシステム構成が増えてきているが、当該システム構成の場合には撮影画像を遠隔地に通信する必要がある。しかし、画像データをすべて送信することは非効率である。また、認証エリアの端末において顔検出処理を実行し、遠隔地で顔照合を実行する方式等もあるが、認証エリアに設置する端末に相応の処理性能が必要になってしまう。

【0084】

これに対し、本実施形態に係る情報処理システム１によれば、撮影画像の送信が必要最小限に抑えられるため、装置間における通信量を大幅に軽減できる。また、顔認証装置１１側においては、顔検出処理の処理量及び処理時の消費電力等を必要最小限に抑えることができる。すなわち、資源の効率的な利用が可能となる。

【0085】

また、本実施形態に係る情報処理システム１は、検出処理の対象となる撮影画像が大幅に絞り込まれる構成であるため、１台の顔認証装置１１に対して導入できる撮影環境の数を増加させることもできる。例えば、既設の顔認証装置１１を用いる場合でも、監視対象を増加させることが可能となる。

【0086】

また、本実施形態に係る情報処理システム１の特徴的な機能は、画像取得装置１０側で顔認証装置１１に対する撮影画像の送信要否を判定することによって実現できる。このため、情報処理システム１は、既設の顔認証装置１１に対して、装置追加・機器工事を実施せずに構築可能である。

【0087】

例えば、従来の方式の一例として、来訪者があった時のみ撮影を行うために、人感センサを用いる方式がある。人感センサが来訪者の検出したことを契機として撮影・顔検出を起動する方式は確実性が高い。しかし、人感センサの追加、およびセンサとの連携装置の追加が必要となり、コストを要する。

【0088】

また、来訪者がインターホンの呼び出し等の何らかのアクションを行ったことを契機として画像取得装置あるいは顔検出装置を起動することで、不要な検出処理を抑制する方式も存在する。しかし、店舗入口のような場所では来訪者のアクションを期待することが難しく、採用できない場合がある。これに対し、本実施形態に係る情報処理システム１によれば、人感センサ等の他の機器を利用して来訪者を検出する方式に比べ、容易に導入できる利点がある。

【0089】

また、本実施形態に係る情報処理システム１は、特定の範囲に限定して静体を検出する構成であるため、軽負荷、かつ容易に実現できる利点がある。すなわち、撮影映像の中から動体を検出する方式とは異なるため、例えば道路に面した入口のように、絶えず交通があるような環境でも本システムを利用できる。

【0090】

更に、本実施形態に係る情報処理システム１では、画像処理において検出容易な目標物を利用し、来訪者が存在する時に目標物が遮蔽・移動するような場所（例えば自動ドアの扉等）に配置する。画像取得装置１０では、撮影画像の指定範囲に目標物が存在するか否かを検出し、その検出状況により来訪者の有無を判定できる。具体的には、所定領域に目標物が存在しない場合には、来訪者有りと判定できる。逆に、所定領域に目標物が存在する場合には、来訪者無しと判定できる。

【0091】

［第２実施形態］
図１１は、本実施形態に係る情報処理装置２００の機能ブロック図である。情報処理装置２００は、取得部２００Ａ及び制御部２００Ｂを備える。取得部２００Ａは、撮影画像を取得する。制御部２００Ｂは、撮影画像における人物以外の目標物の状態の変化に基づいて、撮影画像から人物の生体情報を検出する処理の実行頻度を制御する。

【0092】

本実施形態によれば、生体情報の検出処理の実行による装置の負荷を低減できる情報処理装置２００が提供される。

【0093】

［第３実施形態］
図１２は、本実施形態に係る情報処理システム３００の機能ブロック図である。情報処理システム３００は、撮影画像を取得する画像取得装置３１０と、画像取得装置３１０から送信された撮影画像の中から人物の生体情報を検出する検出装置３２０とを備える。画像取得装置３１０は、取得部３１０Ａ及び制御部３１０Ｂを有する。取得部３１０Ａは、撮影画像を取得する。制御部３１０Ｂは、撮影画像における人物以外の目標物の状態の変化に基づいて、検出装置３２０に対して撮影画像を送信する頻度を制御する。

【0094】

本実施形態によれば、生体情報の検出処理の実行による装置の負荷を低減できる情報処理システム３００が提供される。また、画像取得装置３１０と検出装置３２０との間の通信量を削減できる。

【0095】

［変形実施形態］
以上、実施形態を参照して本発明を説明したが、本発明は上述の実施形態に限定されるものではない。本願発明の構成及び詳細には本発明の要旨を逸脱しない範囲で、当業者が理解し得る様々な変形をできる。例えば、いずれかの実施形態の一部の構成を、他の実施形態に追加した実施形態、あるいは他の実施形態の一部の構成と置換した実施形態も本発明を適用し得る実施形態であると理解されるべきである。

【0096】

上述した第１実施形態に係る情報処理システム１の画像処理部１０２は、撮影範囲の所定領域において目標物が検出された場合には、撮影画像の中に認証対象者である来訪者が存在しないと判定し、同じ領域において目標物が検出されない場合には、撮影画像の中に来訪者が存在すると判定する。しかし、画像処理部１０２における判定ロジックは、これに限られない。

【0097】

目標物の設置場所によっては、来訪者が存在する場合には目標物が撮影画像に含まれ、来訪者が存在しない場合には目標物が含まれなくなる場合もあり得る。例えば、目標物が片開きのドアの裏側に設置される場合には、ドアが閉まっているときは、カメラは目標物を撮影できないが、来訪者が裏側からドアを開けるとカメラは目標物を撮影できるようになる。このような場合には、画像処理部１０２における判定ロジックを逆にすれば対応できる。すなわち、いずれの判定ロジックにおいても、画像処理部１０２は、撮影画像における人物以外の目標物の状態が変化しているか否かを判定し、その判定結果に基づいて顔検出処理の実行頻度を制御できるように構成される。

【0098】

また、画像取得装置１０は、必ずしも撮影機能を有さなくてもよい。画像取得装置１０は、図示しない撮影装置から撮影画像を受信し、その撮影画像の中に来訪者が存在すると判定した場合に限り顔認証装置１１に撮影画像を送信する中継装置として構成されても良い。

【0099】

また、第１実施形態では、画像取得装置１０及び顔認証装置１１は独立した装置であったが、画像取得装置１０と顔認証装置１１は同一の装置として構成されても良い。

【0100】

図１３は、変形実施形態に係る情報処理装置４００の機能ブロック図である。第１実施形態の情報処理システム１と異なり、情報処理装置４００は、撮影部１０１と、画像処理部１０２と、目標物情報記憶部１０４と、検出処理部１１２と、顔照合部１１３と、登録者情報記憶部１１４と、検出情報記憶部１１５とを備える。この場合、画像処理部１０２は、撮影画像の解析結果に基づいて来訪者の存在有無及び顔検出処理の要否を判定し、その判定結果に基づいて検出処理部１１２を直接制御すればよい。この場合にも、第１実施形態と同様に、顔検出処理の実行による情報処理装置４００の負荷を低減できる効果を奏する。

【0101】

また、第１実施形態では、画像取得装置１０から顔検出装置１１Ａ（顔認証装置１１）に対する撮影画像の送信頻度を変更することによって顔検出装置１１Ａにおける顔検出処理の実行頻度を変更したが、顔検出処理の実行が不要である旨を通知する構成であっても良い。この場合、画像取得装置１０は顔検出装置１１Ａへ撮影画像を送信しても良い。すなわち、画像取得装置１０が撮影画像を送信した場合でも、受信側の顔検出装置１１Ａは必要に応じて検出処理を実行しない構成としても良い。

【0102】

上述した第１実施形態では、目標物が両開きの自動ドアＤの扉に設置される場合について説明したが、目標物の設置場所はこれに限られない。目標物は、来訪者が存在する時に予定位置で検出できなくなることが期待できれば良い。例えば、目標物は、来訪者が通過すると死角となる位置や、通行によって遮蔽される床面の一部に設置されても良い。

【0103】

また、目標物は、来訪者の往来によって完全に遮蔽されなくても良い。目標物は、来訪者の往来によって人物又は他の物体によって少なくとも一部分が遮蔽されれば良い。このような場合も、画像取得装置１０は、撮影画像における目標物の状態が変化していない場合には、撮影画像に人物（来訪者）が存在しないと判定し、状態が変化している場合には、撮影画像に人物が存在すると判定できる。

【0104】

図１４は、変形実施形態に係る情報処理システム１が適用される通路の一例を示す図である。ここでは、目標物Ｔ－１０が通路の床面に設置される場合が示されている。目標物Ｔ－１０は、撮影画像の撮影範囲Ｒ－１０の中の所定の領域Ａ－１０に含まれている。来訪者Ｐが通路において目標物Ｔ－１０よりも前方に存在しない場合は、撮影画像において目標物Ｔ－１０の全部が領域Ａ－１０の中に含まれる。これに対し、来訪者Ｐが目標物Ｔ－１０を通過する際には、カメラ側からは来訪者Ｐの身体によって目標物Ｔ－１０の一部が遮蔽される。このため、撮像画像においては、目標物Ｔ－１０の状態は来訪者Ｐが存在しないときの状態と比較して変化する。このため、画像取得装置１０は、目標物Ｔ－１０の状態の変化に基づいて、撮影範囲Ｒ－１０の撮影画像において来訪者Ｐが存在すると判定できる。

【0105】

また、目標物の個数は、任意の数で良い。また、画像取得装置１０から顔認証装置１１への撮影画像の送信頻度は、図２に例示した値に限られず、任意に設定できる。

【0106】

また、第１実施形態では、画像取得装置１０の設置台数は１台であったが、複数台でもよい。同様に、画像送信先の顔認証装置１１の設置台数は１台に限らず、複数台でも良い。

【0107】

また、第１実施形態では、目標物の検出処理として、公知の輪郭検出処理(エッジ検出)の手法を挙げたが、この手法以外で目標物の検出処理を行っても良い。例えば、機械学習による手法や、輝度・色度を検出する手法等を用いても良い。

【0108】

上述の実施形態の機能を実現するように該実施形態の構成を動作させるプログラムを記録媒体に記録させ、該記録媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記録媒体も各実施形態の範囲に含まれる。また、上述のプログラムが記録された記録媒体はもちろん、そのプログラム自体も各実施形態に含まれる。

【0109】

該記録媒体としては例えばフロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ－ＲＯＭ、磁気テープ、不揮発性メモリカード等を用いることができる。また該記録媒体に記録されたプログラム単体で処理を実行しているものに限らず、他のソフトウェア、拡張ボードの機能と共同して、ＯＳ上で動作して処理を実行するものも各実施形態の範疇に含まれる。

【0110】

上述の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

【0111】

（付記１）
撮影画像を取得する取得部と、
前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御する制御部と、
を備える情報処理装置。

【0112】

（付記２）
前記制御部は、前記状態が変化している場合における前記実行頻度を、前記状態が変化していない場合における前記実行頻度よりも多くする、
付記１に記載の情報処理装置。

【0113】

（付記３）
前記制御部は、前記処理を実行する装置に対する前記撮影画像の送信頻度を増減する、
付記１又は２に記載の情報処理装置。

【0114】

（付記４）
前記撮影画像において検出される前記目標物の総数と、前記装置に対する前記撮影画像の前記送信頻度との対応関係を予め定義した送信制御情報を記憶する記憶部を更に有し、
前記制御部は、前記撮影画像において新たに検出された前記目標物の検出数に基づいて前記送信制御情報を参照し、前記送信頻度を決定する、
付記３に記載の情報処理装置。

【0115】

（付記５）
前記目標物は、前記人物の往来時に前記人物の身体によって少なくとも一部分が遮蔽される、
付記１乃至４のいずれかに記載の情報処理装置。

【0116】

（付記６）
撮影画像を取得する画像取得装置と、
前記画像取得装置から送信された前記撮影画像の中から人物の生体情報を検出する検出装置と、
を備え、
前記画像取得装置は、
前記撮影画像を取得する取得部と、
前記撮影画像における前記人物以外の目標物の状態の変化に基づいて、前記検出装置に対して前記撮影画像を送信する頻度を制御する制御部と、
を有する情報処理システム。

【0117】

（付記７）
前記制御部は、前記状態が変化している場合における前記頻度を、前記状態が変化していない場合における前記頻度よりも多くする、
付記６に記載の情報処理システム。

【0118】

（付記８）
前記画像取得装置は、前記撮影画像において検出される前記目標物の総数と、前記検出装置に対する前記撮影画像の前記頻度との対応関係を予め定義した送信制御情報を記憶する記憶部を更に有し、
前記制御部は、前記撮影画像において新たに検出された前記目標物の検出数に基づいて前記送信制御情報を参照し、前記頻度を決定する、
付記６又は７に記載の情報処理システム。

【0119】

（付記９）
撮影画像を取得するステップと、
前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御するステップと、
を備える情報処理方法。

【0120】

（付記１０）
コンピュータに、
撮影画像を取得するステップと、
前記撮影画像における人物以外の目標物の状態の変化に基づいて、前記撮影画像から前記人物の生体情報を検出する処理の実行頻度を制御するステップと、
を実行させるためのプログラムが記録された記録媒体。

【0121】

この出願は、２０２１年３月２２日に出願された日本出願特願２０２１―０４７１９２を基礎とする優先権を主張し、その開示の全てをここに取り込む。

【符号の説明】

【0122】

ＮＷ・・・ネットワーク
１・・・情報処理システム
１０・・・画像取得装置
１１・・・顔認証装置
１１Ａ・・・顔検出装置
１１Ｂ・・・顔照合装置
１０１・・・撮影部
１０２・・・画像処理部
１０３・・・画像送信部
１０４・・・目標物情報記憶部
１０５・・・送信制御情報記憶部
１１１・・・画像受信部
１１２・・・検出処理部
１１３・・・顔照合部
１１４・・・登録者情報記憶部
１１５・・・検出情報記憶部
２００，４００・・・情報処理装置
２００Ａ・・・取得部
２００Ｂ・・・制御部
３００・・・情報処理システム
３１０・・・画像取得装置
３１０Ａ・・・取得部
３１０Ｂ・・・制御部
３２０・・・検出装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】