特許 7578144 観客監視装置、観客監視システム、観客監視方法及び観客監視プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-10-28

(45)【発行日】2024-11-06

(54)【発明の名称】観客監視装置、観客監視システム、観客監視方法及び観客監視プログラム

(51)【国際特許分類】

   G08B 25/00 20060101AFI20241029BHJP

   G08B 25/04 20060101ALI20241029BHJP

   G08B 21/02 20060101ALI20241029BHJP

   H04N 7/18 20060101ALI20241029BHJP

   G06T 7/00 20170101ALI20241029BHJP

【ＦＩ】

G08B25/00 510M

G08B25/04 K

G08B21/02

H04N7/18 D

G06T7/00 660Z

【請求項の数】 26

(21)【出願番号】P 2022558712

(86)(22)【出願日】2020-10-29

(86)【国際出願番号】 JP2020040633

(87)【国際公開番号】W WO2022091297

(87)【国際公開日】2022-05-05

【審査請求日】2023-09-01

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100103894

【弁理士】

【氏名又は名称】家入 健

(72)【発明者】

【氏名】平田 怜

(72)【発明者】

【氏名】山下 統

(72)【発明者】

【氏名】藍野 健太

【審査官】村山 禎恒

(56)【参考文献】

【文献】特開２００４－３２４２４（ＪＰ，Ａ）

【文献】特開２０１５－１９２９６（ＪＰ，Ａ）

【文献】特開２００８－１０２７８４（ＪＰ，Ａ）

【文献】特開２００６－２８５５０４（ＪＰ，Ａ）

【文献】特開２０２０－６７９３９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０８Ｂ ２５／００－３１／００

Ｇ０８Ｂ ２１／０２

Ｈ０４Ｎ ７／１８

Ｇ０６Ｔ ７／００

(57)【特許請求の範囲】

【請求項1】

所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得する取得手段と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知手段と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定手段と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知手段と、
を備える観客監視装置。

【請求項2】

前記特定手段は、前記非着用者の座席位置を前記部分領域として特定する
請求項１に記載の観客監視装置。

【請求項3】

前記特定手段は、前記第１の撮影画像を撮影した撮影装置の撮影方向と前記第１の撮影画像内の前記非着用者の検知位置とに基づいて、前記座席位置を特定する
請求項２に記載の観客監視装置。

【請求項4】

前記複数の観客それぞれの顔特徴情報に対応する識別情報と座席位置を対応付けて記憶手段に登録する登録手段と、
前記第１の撮影画像内の前記非着用者の顔領域に基づき前記記憶手段を参照して顔認証を制御する認証制御手段と、
をさらに備え、
前記特定手段は、前記顔認証に成功した非着用者である観客に対応付けられた座席位置を前記部分領域として特定する
請求項２に記載の観客監視装置。

【請求項5】

前記非着用者が検知された場合、所定条件を満たすか否かを判定する判定手段をさらに備え、
前記通知手段は、前記所定条件を満たすと判定された場合、前記警告情報を通知する
請求項１乃至４のいずれか１項に記載の観客監視装置。

【請求項6】

前記非着用者が検知された場合、前記マスクの非着用に関する指標値を測定する第１の測定手段をさらに備え、
前記判定手段は、前記指標値が前記所定条件を満たすか否かを判定する
請求項５に記載の観客監視装置。

【請求項7】

前記第１の測定手段は、前記非着用者がマスクを着用していない非着用時間を前記指標値として測定し、
前記判定手段は、前記非着用時間が所定時間を超えた場合、前記所定条件を満たすと判定する
請求項６に記載の観客監視装置。

【請求項8】

前記第１の測定手段は、前記観客領域に対して複数回撮影された複数の撮影画像から、特定の観客が非着用者として検知された検知回数を前記指標値として測定し、
前記判定手段は、前記検知回数が所定数を超える場合、前記所定条件を満たすと判定する
請求項６に記載の観客監視装置。

【請求項9】

前記第１の測定手段は、前記観客領域において前記検知された非着用者の検知人数を前記指標値として測定し、
前記判定手段は、前記検知人数が所定数を超える場合、前記所定条件を満たすと判定する
請求項６に記載の観客監視装置。

【請求項10】

前記第１の測定手段は、前記非着用者が検知された場合、前記観客領域の混雑状況を前記指標値として測定し、
前記判定手段は、前記混雑状況が所定度合いを超える場合、前記所定条件を満たすと判定する
請求項６に記載の観客監視装置。

【請求項11】

前記判定手段は、前記検知された非着用者が飲食を行っていない場合に、前記所定条件を満たすと判定する
請求項５に記載の観客監視装置。

【請求項12】

前記判定手段は、前記特定された部分領域がマスクの着用を求められる指定領域である場合に、前記所定条件を満たすと判定する
請求項５に記載の観客監視装置。

【請求項13】

前記非着用者が検知された場合、前記マスクの非着用に関する指標値を測定する第２の測定手段と、
前記指標値に応じた警告度合いを示す警告情報を決定する決定手段と、をさらに備え、
前記通知手段は、前記決定された警告情報を通知する
請求項１乃至４のいずれか１項に記載の観客監視装置。

【請求項14】

前記第２の測定手段は、前記非着用者がマスクを着用していない非着用時間を前記指標値として測定し、
前記決定手段は、前記非着用時間に応じて前記警告情報を決定する
請求項１３に記載の観客監視装置。

【請求項15】

前記第２の測定手段は、前記観客領域に対して複数回撮影された複数の撮影画像から、特定の観客が非着用者として検知された検知回数を前記指標値として測定し、
前記決定手段は、前記検知回数に応じて前記警告情報を決定する
請求項１３に記載の観客監視装置。

【請求項16】

前記第２の測定手段は、前記観客領域において前記検知された非着用者の検知人数を前記指標値として測定し、
前記決定手段は、前記検知人数に応じて前記警告情報を決定する
請求項１３に記載の観客監視装置。

【請求項17】

前記第２の測定手段は、前記非着用者が検知された場合、前記観客領域の混雑状況を前記指標値として測定し、
前記決定手段は、前記混雑状況に応じて前記警告情報を決定する
請求項１３に記載の観客監視装置。

【請求項18】

前記観客領域内の複数の部分領域のそれぞれについて、前記検知された非着用者の検知人数を測定する第３の測定手段をさらに備え、
前記特定手段は、前記複数の部分領域のうち、前記検知人数がより多い部分領域を特定し、
前記通知手段は、前記特定された部分領域を優先して前記警告情報を通知する
請求項１乃至４のいずれか１項に記載の観客監視装置。

【請求項19】

前記取得手段は、前記警告情報が通知された後に前記観客領域が撮影された第２の撮影画像を取得し、
前記通知手段は、前記第１の撮影画像において前記非着用者として検知された観客が、前記第２の撮影画像において前記非着用者として検知されなかった場合、その旨を前記情報端末に対して通知する
請求項１乃至１８のいずれか１項に記載の観客監視装置。

【請求項20】

前記取得手段は、前記警告情報が通知された後に前記観客領域が撮影された第３の撮影画像を取得し、
前記検知手段は、前記第１の撮影画像において前記非着用者として検知された観客が、前記第３の撮影画像において前記特定された部分領域から移動したことを検知し、
前記通知手段は、前記移動したことが検知された旨を前記情報端末に対して通知する
請求項１乃至１９のいずれか１項に記載の観客監視装置。

【請求項21】

前記特定手段は、前記移動したことが検知された観客の移動後の位置を特定し、
前記通知手段は、前記特定された移動後の位置を前記情報端末に対して通知する
請求項２０に記載の観客監視装置。

【請求項22】

前記通知手段は、前記施設内の所定の出力装置に対して、前記警告情報をさらに通知する
請求項１乃至２１のいずれか１項に記載の観客監視装置。

【請求項23】

所定の施設における複数の観客を含む観客領域を撮影する撮影装置と、
前記撮影装置と接続された観客監視装置と、
を備え、
前記観客監視装置は、
前記撮影装置により撮影された第１の撮影画像を取得する取得手段と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知手段と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定手段と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知手段と、
を備える観客監視システム。

【請求項24】

前記特定手段は、前記非着用者の座席位置を前記部分領域として特定する
請求項２３に記載の観客監視システム。

【請求項25】

コンピュータが、
所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得し、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知し、
前記観客領域のうち前記非着用者を含む部分領域を特定し、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する、
観客監視方法。

【請求項26】

所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得する取得処理と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知処理と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定処理と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知処理と、
をコンピュータに実行させる観客監視プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、観客監視装置、観客監視システム、観客監視方法及び非一時的なコンピュータ可読媒体に関し、特に、観客のマスクの着用を監視するための観客監視装置、観客監視システム、観客監視方法及び非一時的なコンピュータ可読媒体に関する。

【背景技術】

【0002】

近年、感染症拡大防止の観点から、大勢の観客が集まる施設においては、原則としてマスクの着用が求められている。特許文献１には、顔画像からマスクを検知して、マスクを着用している場合にマスクを外すように促す技術が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】国際公開第２０１７／２１２９６７号

【発明の概要】

【発明が解決しようとする課題】

【0004】

多数の観客が集合する施設内で、施設スタッフ（運営要員）がマスクを外している観客を見つけて、声掛けをすることが困難であった。

【0005】

本開示は、このような問題点を解決するためになされたものであり、施設の運営要員が多数の観客の中からマスクを外している観客を容易に特定するための観客監視装置、観客監視システム、観客監視方法及び非一時的なコンピュータ可読媒体を提供することを目的とする。

【課題を解決するための手段】

【0006】

本開示の第１の態様にかかる観客監視装置は、
所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得する取得手段と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知手段と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定手段と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知手段と、
を備える。

【0007】

本開示の第２の態様にかかる観客監視システムは、
所定の施設における複数の観客を含む観客領域を撮影する撮影装置と、
前記撮影装置と接続された観客監視装置と、
を備え、
前記観客監視装置は、
前記撮影装置により撮影された第１の撮影画像を取得する取得手段と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知手段と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定手段と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知手段と、
を備える。

【0008】

本開示の第３の態様にかかる観客監視方法は、
コンピュータが、
所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得し、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知し、
前記観客領域のうち前記非着用者を含む部分領域を特定し、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する。

【0009】

本開示の第４の態様にかかる観客監視プログラムが格納された非一時的なコンピュータ可読媒体は、
所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得する取得処理と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知処理と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定処理と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知処理と、
をコンピュータに実行させる。

【発明の効果】

【0010】

本開示により、施設の運営要員が多数の観客の中からマスクを外している観客を容易に特定するための観客監視装置、観客監視システム、観客監視方法及び非一時的なコンピュータ可読媒体を提供することができる。

【図面の簡単な説明】

【0011】

【図1】本実施形態１にかかる観客監視装置の構成を示すブロック図である。

【図2】本実施形態１にかかる観客監視方法の流れを示すフローチャートである。

【図3】本実施形態２にかかる観客監視システムの全体構成を示すブロック図である。

【図4】本実施形態２にかかるスタジアムの観客領域とカメラ設置位置の例を示す図である。

【図5】本実施形態２にかかる認証装置の構成を示すブロック図である。

【図6】本実施形態２にかかる顔情報登録処理の流れを示すフローチャートである。

【図7】本実施形態２にかかる認証装置による顔認証処理の流れを示すフローチャートである。

【図8】本実施形態２にかかる観客監視装置の構成を示すブロック図である。

【図9】本実施形態２にかかる観客監視処理の流れを示すフローチャートである。

【図10】本実施形態２にかかるマスクの非着用者の警告情報の表示例を示す図である。

【図11】本実施形態２にかかるマスクの非着用者の警告情報の表示例を示す図である。

【図12】本実施形態２にかかるマスクの非着用者の警告情報の表示例を示す図である。

【図13】本実施形態３にかかる観客監視装置の構成を示すブロック図である。

【図14】本実施形態３にかかる観客監視処理の流れを示すフローチャートである。

【図15】本実施形態４にかかる観客監視装置の構成を示すブロック図である。

【図16】本実施形態４にかかる観客監視処理の流れを示すフローチャートである。

【図17】本実施形態４にかかるマスクの非着用者の警告情報の表示例を示す図である。

【図18】本実施形態４にかかるマスクの非着用者の警告情報の表示例を示す図である。

【図19】本実施形態４にかかるマスクの非着用者の警告情報の表示例を示す図である。

【図20】本実施形態４にかかるマスクの非着用者の警告情報の表示例を示す図である。

【図21】本実施形態５にかかる観客監視処理の流れを示すフローチャートである。

【図22】本実施形態５にかかるマスクの非着用者の警告情報の表示例を示す図である。

【図23】本実施形態６にかかる観客監視処理の流れを示すフローチャートである。

【図24】本実施形態７にかかる観客監視装置の構成を示すブロック図である。

【発明を実施するための形態】

【0012】

以下では、本開示の実施形態について、図面を参照しながら詳細に説明する。各図面において、同一又は対応する要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。

【0013】

＜実施形態１＞
図１は、本実施形態１にかかる観客監視装置１の構成を示すブロック図である。観客監視装置１は、所定の施設における複数の観客のマスクの着用を監視するための情報処理装置である。ここで、観客監視装置１は、ネットワーク（不図示）に接続される。ネットワークは、有線であっても無線であってもよい。また、当該ネットワークには、撮影装置と情報端末とが接続されている。撮影装置は、所定の施設における複数の観客を含む観客領域を撮影する。撮影装置は、観客領域を撮影した撮影画像をネットワークを介して観客監視装置１へ送信する。また、情報端末は、施設の運営要員が操作する情報処理装置である。

【0014】

観客監視装置１は、取得部１１と、検知部１２と、特定部１３と、通知部１４とを備える。取得部１１は、所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得する。検知部１２は、第１の撮影画像からマスクを着用していない観客である非着用者を検知する。例えば、検知部１２は、画像認識により撮影画像内の人物の顔領域にマスクが存在するか否かを判定する。特定部１３は、観客領域のうちマスクの非着用者を含む部分領域を特定する。通知部１４は、施設の運営要員の情報端末に対して、特定した部分領域についての警告情報を通知する。ここで、警告情報は、撮影画像内の部分領域を特定（識別）するための表示情報であるか、部分領域を特定できる音声情報であってもよい。

【0015】

図２は、本実施形態１にかかる観客監視方法の流れを示すフローチャートである。まず、取得部１１は、所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得する（Ｓ１１）。次に、検知部１２は、第１の撮影画像からマスクを着用していない観客である非着用者を検知する（Ｓ１２）。尚、非着用者を検知しなかった場合、所定時間後、ステップＳ１１に戻る。

【0016】

ステップＳ１２により非着用者が検知された場合、特定部１３は、観客領域のうち非着用者を含む部分領域を特定する（Ｓ１３）。そして、通知部１４は、施設の運営要員の情報端末に対して、特定した部分領域についての警告情報を通知する（Ｓ１４）。すなわち、通知部１４は、ネットワークを介して情報端末へ警告情報を送信する。これにより、情報端末は、ネットワークを介して観客監視装置１から警告情報を受信し、警告情報を画面に表示するか、警告情報に対応する音声を出力する。

【0017】

このように、本実施形態により、施設の運営要員は、情報端末を介して観客領域にマスクを着用していない観客が存在することをリアルタイムに認識できる。特に、運営要員は、警告情報により観客領域のうちマスクの非着用者が存在する部分領域を容易に特定することができる。そのため、運営要員がマスクを外している観客に対してマスクを着用を促すように声掛け等を行うことを支援できる。

【0018】

尚、観客監視装置１は、図示しない構成としてプロセッサ、メモリ及び記憶装置を備えるものである。また、当該記憶装置には、本実施形態にかかる観客監視方法の処理が実装されたコンピュータプログラムが記憶されている。そして、当該プロセッサは、記憶装置からコンピュータプログラムを前記メモリへ読み込ませ、当該コンピュータプログラムを実行する。これにより、前記プロセッサは、取得部１１、検知部１２、特定部１３及び通知部１４の機能を実現する。

【0019】

または、取得部１１、検知部１２、特定部１３及び通知部１４は、それぞれが専用のハードウェアで実現されていてもよい。また、各装置の各構成要素の一部又は全部は、汎用または専用の回路（circuitry）、プロセッサ等やこれらの組合せによって実現されもよい。これらは、単一のチップによって構成されてもよいし、バスを介して接続される複数のチップによって構成されてもよい。各装置の各構成要素の一部又は全部は、上述した回路等とプログラムとの組合せによって実現されてもよい。また、プロセッサとして、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（field-programmable gate array）、量子プロセッサ（量子コンピュータ制御チップ）等を用いることができる。

【0020】

また、観客監視装置１の各構成要素の一部又は全部が複数の情報処理装置や回路等により実現される場合には、複数の情報処理装置や回路等は、集中配置されてもよいし、分散配置されてもよい。例えば、情報処理装置や回路等は、クライアントサーバシステム、クラウドコンピューティングシステム等、各々が通信ネットワークを介して接続される形態として実現されてもよい。また、観客監視装置１の機能がＳａａＳ（Software as a Service）形式で提供されてもよい。

【0021】

＜実施形態２＞
実施形態２は、上述した実施形態１の具体例である。図３は、本実施形態２にかかる観客監視システム１０００の全体構成を示すブロック図である。観客監視システム１０００は、スタジアム１００における複数の観客領域１０１から１０ｎ（ｎは２以上の自然数。）に存在する複数の観客のマスクの着用を監視するための情報システムである。尚、スタジアム１００は、所定の施設の一例である。また、観客領域１０１は、ブロック１０１１から１０１ｉ（ｉは１以上の自然数。）に分割されており、各ブロックには１以上の座席が含まれるものとする。観客領域１０２（不図示）から１０ｎについても同様である。例えば、観客領域１０ｎは、複数のブロック１０ｎ１から１０ｎｊ（ｊは２以上の自然数。）に分割されており、各ブロックには１以上の座席が含まれるものとする。尚、観客領域は、座席のない立見席であってもよい。

【0022】

観客監視システム１０００は、カメラ１１０と、スタッフ端末１２０と、管理端末１３０と、認証装置２００と、観客監視装置３００を備える。カメラ１１０、スタッフ端末１２０、管理端末１３０、認証装置２００及び観客監視装置３００のそれぞれは、ネットワークＮを介して接続されている。ここで、ネットワークＮは、有線又は無線の通信回線である。

【0023】

スタジアム１００は、カメラ１１０、スタッフ端末１２０及び管理端末１３０を備える。カメラ１１０は、観客領域１０１から１０ｎのそれぞれを観客領域単位で撮影する撮影装置である。具体的には、カメラ１１０は、所定の間隔で撮影方向（カメラの向き）を移動し、観客領域１０１から１０ｎを順番に所定時間撮影し、観客領域１０ｎを撮影した後、再度、観客領域１０１の撮影方向へ移動し、これを繰り返すものとする。また、カメラ１１０は、観客領域を撮影した撮影画像をネットワークＮを介して観客監視装置３００へ送信する。このとき、カメラ１１０は、撮影画像と共に撮影方向（カメラの向き又はカメラの設置位置）も併せて観客監視装置３００へ送信する。尚、カメラ１１０は、観客領域１０１から１０ｎの少なくとも１つを撮影すればよい。例えば、カメラ１１０が観客領域１０１を撮影する場合、他の観客領域１０ｎ等については、他のカメラにより撮影されてもよい。そして、他のカメラも同様に、撮影画像及び撮影方向を観客監視装置３００へ送信するものとする。

【0024】

図４は、本実施形態２にかかるスタジアム１００の観客領域とカメラ設置位置の例を示す図である。例えば、カメラ１１０ａは、スタジアム１００のスタンドの最上段に設置された一例を示す。つまり、カメラ１１０ａは、グランドを挟んで観客領域１０１から１０３（スタンド）の反対側のスタンドに設置されている。図４では、カメラ１１０ａは、観客領域１０１の方向を撮影方向としていることを示す。そして、上述の通り、カメラ１１０ａは、一定間隔で、観客領域１０１、１０２、１０３の順で撮影方向を移動し、各撮影方向において観客領域を撮影し、都度、ネットワークＮを介して観客監視装置３００へ撮影画像を送信する。また、カメラ１１０ｂは、カメラ設置位置の他の例である。カメラ１１０ｂは、観客領域１０１から１０３側のスタンドの手前に設置された例である。この場合も、カメラ１１０ｂは、一定間隔で、観客領域１０１、１０２、１０３の順で撮影方向を移動し、各撮影方向において観客領域を撮影してもよい。または、観客領域１０１から１０３のそれぞれの手前に個別のカメラを設置してもよい。

【0025】

図３に戻り説明を続ける。管理端末１３０は、観客の監視における管理者Ｕ２が操作する情報処理装置である。管理者Ｕ２は、スタジアム１００の運営要員の一例である。そして、管理端末１３０は、上述した情報端末の一例である。管理端末１３０は、ネットワークＮを介して観客監視装置３００から後述する警告情報を受信し、画面に警告情報を表示する。そして、管理者Ｕ２は、管理端末１３０に表示された警告情報に基づいて、管理端末１３０を介してスタッフ端末１２０へマスクの非着用者の位置等を伝える。例えば、管理端末１３０は、管理者Ｕ２が発した、非着用者の座席位置の音声をネットワークＮを介してスタッフ端末１２０へ送信してもよい。または、管理端末１３０は、管理者Ｕ２により選択されたスタッフ端末１２０に対して、警告情報を転送してもよい。これにより、スタジアムスタッフＵ１は、警告情報をスタッフ端末１２０の画面で確認できるため、マスクの非着用者をより把握し易くなる。

【0026】

スタッフ端末１２０は、スタジアム１００の運営要員の一例であるスタジアムスタッフＵ１が操作する情報処理装置である。スタッフ端末１２０は、ネットワークＮを介して管理端末１３０から音声情報を受信し、出力する。これにより、スタジアムスタッフＵ１は、音声情報を介してマスクの非着用者の具体的な座席位置を把握できる。そのため、スタジアムスタッフＵ１は、マスクの非着用者の近くまで赴いて、マスクの着用を呼びかけることができる。尚、スタッフ端末１２０は、上述した情報端末の一例であってもよい。その場合、スタッフ端末１２０は、管理端末１３０の代わりに、又は管理端末１３０と共に、ネットワークＮを介して観客監視装置３００から後述する警告情報を受信し、画面に警告情報を表示する。この場合でも、スタジアムスタッフＵ１は、マスクの非着用者の具体的な座席位置を把握できる。

【0027】

尚、管理端末１３０及びスタッフ端末１２０は、例えば、携帯電話端末、スマートフォン、タブレット端末、カメラを搭載又は接続したＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等である。また、警告情報が音声情報の場合、管理端末１３０及びスタッフ端末１２０は、受信した音声情報を出力する。

【0028】

ここで、観客監視システム１０００における観客監視を実現するための事前登録の一例について説明する。観客は、事前に、スタジアム１００での特定日のイベントにおける座席の予約を行う。例えば、観客は、ＰＣやスマートフォン等の情報処理装置を用いて、イベントの予約サイトにおいてイベントのチケットを購入し、その際、座席位置を指定し、必要に応じて個人情報等を入力する。そして、観客は、当該イベントで予約された座席位置及び個人情報等を示す識別情報（例えば、二次元コード）を取得する。例えば、観客のスマートフォンは、二次元コードを受信する。または、観客は、電子メール等で二次元コードを取得し、印刷する。

【0029】

また、スタジアム１００は、入場ゲートに観客の入場を制御する入口端末（不図示）を備えるものとする。入口端末は、カメラ等を備えた情報端末であり、ネットワークＮに接続されている。そのため、観客監視システム１０００は、入口端末を含むものであってもよい。

【0030】

観客は、イベントの当日にスタジアム１００に到着し、入口端末に二次元コードを提示する。例えば、観客は、スマートフォンに二次元コードを表示させて、二次元コードを入口端末のカメラにかざす。または、観客は、二次元コードを印刷した紙を入口端末のカメラにかざす。入口端末は、カメラにより撮影された二次元コードを解析して、予約された座席位置及び個人情報等を抽出し、座席位置及び個人情報等を含む登録要求をネットワークＮを介して観客監視装置３００へ送信する。観客監視装置３００は、登録要求に含まれる座席位置及び個人情報等に問題がなければ、座席位置及び個人情報等を対応付けて登録すると共に、顔情報の登録依頼を入口端末に返信する。入口端末は、登録依頼を示すメッセージを画面に表示し、観客の顔を含む領域を撮影し、撮影画像を含む顔情報登録要求をネットワークＮを介して認証装置２００又は観客監視装置３００へ送信する。認証装置２００は、後述するように顔情報登録要求に応じて顔情報登録処理を行い、登録結果を入口端末へ返信する。正常に登録された場合、観客は、入口ゲートからスタジアム１００内に入場できる。また、認証装置２００は、登録時に発行されたユーザＩＤ（観客ＩＤ）を観客監視装置３００へ通知する。

【0031】

尚、観客は、座席の予約の際に、併せて、自身の顔画像を登録してもよい。例えば、観客の情報処理装置は、イベントの予約サイトを介して撮影画像を含む顔情報登録要求をネットワークＮを介して認証装置２００又は観客監視装置３００へ送信してもよい。または、観客は、事前に座席の予約をしていなくても、イベント当日に入口端末にて、入場手続きにより座席が確定し、その際に、座席位置及び個人情報等を含む登録要求と撮影画像を含む顔情報登録要求をネットワークＮを介して観客監視装置３００へ送信してもよい。

【0032】

認証装置２００は、複数の人物（観客）の顔特徴情報を記憶する情報処理装置である。また、認証装置２００は、外部から受信した顔認証要求に応じて、当該要求に含まれる顔画像又は顔特徴情報について、各ユーザの顔特徴情報と照合を行い、照合結果（認証結果）を要求元へ返信する。

【0033】

図５は、本実施形態２にかかる認証装置２００の構成を示すブロック図である。認証装置２００は、顔情報ＤＢ（DataBase）２１０と、顔検出部２２０と、特徴点抽出部２３０と、登録部２４０と、認証部２５０とを備える。顔情報ＤＢ２１０は、ユーザＩＤ２１１と当該ユーザＩＤの顔特徴情報２１２とを対応付けて記憶する。顔特徴情報２１２は、顔画像から抽出された特徴点の集合である。尚、認証装置２００は、顔特徴情報２１２の登録ユーザからの要望に応じて、顔特徴ＤＢ２１０内の顔特徴情報２１２を削除してもよい。または、認証装置２００は、顔特徴情報２１２の登録から一定期間経過後に削除してもよい。

【0034】

顔検出部２２０は、顔情報を登録するための登録画像に含まれる顔領域を検出し、特徴点抽出部２３０に出力する。特徴点抽出部２３０は、顔検出部２２０が検出した顔領域から特徴点を抽出し、登録部２４０に顔特徴情報を出力する。また、特徴点抽出部２３０は、観客の情報処理装置、入口端末又は観客監視装置３００から受信した顔画像に含まれる特徴点を抽出し、認証部２５０に顔特徴情報を出力する。

【0035】

登録部２４０は、顔特徴情報の登録に際して、ユーザＩＤ２１１を新規に発行する。登録部２４０は、発行したユーザＩＤ２１１と、登録画像から抽出した顔特徴情報２１２とを対応付けて顔情報ＤＢ２１０へ登録する。認証部２５０は、顔特徴情報２１２を用いた顔認証を行う。具体的には、認証部２５０は、顔画像から抽出された顔特徴情報と、顔情報ＤＢ２１０内の顔特徴情報２１２との照合を行う。認証部２５０は、照合に成功した場合、照合された顔特徴情報２１２に対応付けられたユーザＩＤ２１１を特定する。認証部２５０は、顔特徴情報の一致の有無を顔認証結果として観客監視装置３００に返信する。顔特徴情報の一致の有無は、認証の成否に対応する。尚、顔特徴情報が一致する（一致有）とは、一致度が所定値以上である場合をいうものとする。また、顔認証結果は、顔認証に成功した場合、特定されたユーザＩＤを含むものとする。

【0036】

図６は、本実施形態２にかかる顔情報登録処理の流れを示すフローチャートである。ここで、情報登録端末（不図示）は、観客（ユーザ）の顔を含む身体を撮影し、撮影画像（登録画像）を含む顔情報登録要求をネットワークＮを介して認証装置２００へ送信する。情報登録端末は、例えば、パーソナルコンピュータ、スマートフォン又はタブレット端末等の情報処理装置である。例えば、情報登録端末は、スタジアム１００の入口に設置された入口端末であってもよい。または、情報登録端末は、入口端末から顔情報登録要求を受け付けた観客監視装置３００であってもよい。

【0037】

まず、認証装置２００は、顔情報登録要求に含まれる登録画像を取得する（Ｓ２１）。例えば、認証装置２００は、顔情報登録要求を、情報登録端末からネットワークＮを介して受け付ける。次に、顔検出部２２０は、登録画像に含まれる顔領域を検出する（Ｓ２２）。次に、特徴点抽出部２３０は、ステップＳ２２で検出した顔領域から特徴点を抽出し、登録部２４０に顔特徴情報を出力する（Ｓ２３）。最後に、登録部２４０は、ユーザＩＤ２１１を発行し、当該ユーザＩＤ２１１と顔特徴情報２１２とを対応付けて顔情報ＤＢ２１０に登録する（Ｓ２４）。なお、認証装置２００は、情報登録端末から顔特徴情報２１２を受信し、ユーザＩＤ２１１と対応付けて顔情報ＤＢ２１０に登録してもよい。また、登録部２４０は、登録（発行）したユーザＩＤを観客監視装置３００へ通知してもよい。

【0038】

図７は、本実施形態２にかかる認証装置２００による顔認証処理の流れを示すフローチャートである。まず、特徴点抽出部２３０は、顔認証要求に含まれる認証用の顔画像を取得する（Ｓ３１）。例えば、認証装置２００は、観客監視装置３００からネットワークＮを介して顔認証要求を受信し、顔認証要求に含まれる顔画像からステップＳ２１からＳ２３のように顔特徴情報を抽出する。または、認証装置２００は、観客監視装置３００から顔特徴情報を受信してもよい。次に、認証部２５０は、取得した顔特徴情報を、顔情報ＤＢ２１０の顔特徴情報２１２と照合する（Ｓ３２）。顔特徴情報が一致した場合、つまり、顔特徴情報の一致度が所定値以上である場合（Ｓ３３のＹｅｓ）、認証部２５０は、顔特徴情報が一致したユーザのユーザＩＤ２１１を特定し（Ｓ３４）、顔認証に成功した旨と特定したユーザＩＤ２１１とを観客監視装置３００に返信する（Ｓ３５）。一致する顔特徴情報が存在しない場合（Ｓ３３のＮｏ）、認証部２５０は、顔認証に失敗した旨を観客監視装置３００に返信する（Ｓ３６）。

【0039】

図３に戻り説明を続ける。観客監視装置３００は、カメラ１１０による観客領域の撮影画像の中からマスクの非着用者を検知し、非着用者を含む部分領域を特定し、警告情報として管理端末１３０又はスタッフ端末１２０に通知する情報処理装置である。観客監視装置３００は、複数台のサーバに冗長化されてもよく、各機能ブロックが複数台のコンピュータで実現されてもよい。

【0040】

次に、観客監視装置３００について詳細に説明する。図８は、本実施形態２にかかる観客監視装置３００の構成を示すブロック図である。観客監視装置３００は、記憶部３１０と、メモリ３２０と、ＩＦ（InterFace）部３３０と、制御部３４０とを備える。記憶部３１０は、ハードディスク、フラッシュメモリ等の記憶装置の一例である。記憶部３１０は、プログラム３１１と、観客ＩＤ３１２と、座席位置３１３と、撮影方向３１４と、観客領域３１５とを記憶する。プログラム３１１は、本実施形態２にかかる観客監視方法の処理が実装されたコンピュータプログラムである。

【0041】

観客ＩＤ３１２は、スタジアム１００の観客の識別情報である。観客ＩＤ３１２は、特定日のイベントにおける観客の識別情報であってもよい。座席位置３１３は、観客領域１０１から１０ｎ内の各座席の位置を特定するための情報である。観客ＩＤ３１２と座席位置３１３とは対応付けられている。また、観客ＩＤ３１２は、認証装置２００の顔情報ＤＢ２１０内のユーザＩＤ２１１と対応するものである。そのため、記憶部３１０は、顔情報ＤＢ２１０内の顔特徴情報２１２に対応する観客ＩＤ３１２と座席位置３１３を対応付けて記憶しているものといえる。

【0042】

撮影方向３１４は、カメラ１１０におけるカメラの向き（又はカメラの設置位置）を示す情報である。観客領域３１５は、観客領域１０１から１０ｎのそれぞれについて、ブロック及び座席位置を定義した情報である。具体的には、一つの観客領域３１５は、複数のブロック３１５１から３１５ｉを含む。そして、各ブロックは、複数の座席位置を含む。例えば、ブロック３１５１は、座席位置３１５１１から３１５１ｋ（ｋは２以上の自然数。）を含む。また、撮影方向３１４と観客領域３１５とは対応付けられている。

【0043】

メモリ３２０は、ＲＡＭ（Random Access Memory）等の揮発性記憶装置であり、制御部３４０の動作時に一時的に情報を保持するための記憶領域である。ＩＦ部３３０は、ネットワークＮとの通信インタフェースである。

【0044】

制御部３４０は、観客監視装置３００の各構成を制御するプロセッサつまり制御装置である。制御部３４０は、記憶部３１０からプログラム３１１をメモリ３２０へ読み込ませ、プログラム３１１を実行する。これにより、制御部３４０は、登録部３４１、取得部３４２、検知部３４３、認証制御部３４４、特定部３４５及び通知部３４６の機能を実現する。

【0045】

登録部３４１は、複数の観客それぞれの顔特徴情報に対応する識別情報（観客ＩＤ）と座席位置を対応付けて記憶部３１０に登録する。例えば、登録部３４１は、上述した事前登録の例のように、入口端末からネットワークＮを介して、座席位置及び個人情報等を含む登録要求を受信する。登録部３４１は、受信した座席位置及び個人情報等が予約サイト等での予約内容と相違ないことを確認した場合、座席位置及び個人情報等を対応付けて記憶部３１０に登録する。そして、登録部３４１は、入口端末に対して顔情報の登録依頼を返信する。登録部３４１は、入口端末から観客の顔画像を含む顔情報登録要求を受信した場合、認証装置２００へネットワークＮを介して顔情報登録要求を送信する。そして、登録部３４１は、認証装置２００からネットワークＮを介して顔情報の登録時に発行されたユーザＩＤを受信し、ユーザＩＤを観客ＩＤ３１２として、事前に登録済みの座席位置３１３と対応付けて記憶部３１０に保存する。尚、登録部３４１は、観客の情報処理装置から登録要求や顔情報登録要求を受信した場合にも、同様に処理するものとする。

【0046】

取得部３４２は、上述した取得部１１の一例である。取得部３４２は、カメラ１１０からネットワークＮを介して観客領域１０１等のいずれかが撮影された撮影画像を取得する。尚、取得部３４２は、カメラ１１０から撮影画像と共に、撮影方向を取得するものとする。

【0047】

検知部３４３は、上述した検知部１２の一例である。検知部３４３は、取得部３４２により取得された撮影画像からマスクを着用していない観客である非着用者を検知する。尚、検知部３４３は、公知技術を用いて撮影画像を解析して、撮影画像内の各人物の顔領域にマスクが存在するか否かを判定してもよい。例えば、検知部３４３は、マスクを着用した人物の顔画像を学習したＡＩ（Artificial Intelligence）モデルを用いて、マスクの非着用者を検知してもよい。

【0048】

認証制御部３４４は、撮影画像内の非着用者の顔領域に基づき記憶部３１０及び認証装置２００（これらを合わせて記憶手段の一例である。）を参照して顔認証を制御する。つまり、認証制御部３４４は、非着用者の顔特徴情報について認証装置２００に対して顔認証を行わせる。例えば、認証制御部３４４は、検知部３４３により検知されたマスクの非着用者に対応する顔領域を、撮影画像から抽出する。そして、認証制御部３４４は、抽出された顔領域の画像を含めた顔認証要求を、ネットワークＮを介して認証装置２００へ送信し、認証装置２００からユーザ（非着用者）の顔認証結果を受信する。または、認証制御部３４４は、顔領域から顔特徴情報を抽出し、顔特徴情報を顔認証要求に含めてもよい。

【0049】

特定部３４５は、上述した特定部１３の一例である。特定部３４５は、観客領域のうちマスクの非着用者を含む部分領域を特定する。ここでは、特定部３４５は、非着用者の座席位置を部分領域として特定する。すなわち、特定部３４５は、受信した顔認証結果に含まれるユーザＩＤを観客ＩＤ３１２として特定し、観客ＩＤ３１２に対応付けられた座席位置３１３を部分領域として特定する。尚、受信した顔認証結果が顔認証の失敗を示す場合、特定部３４５は、観客ＩＤを特定できない。その場合、特定部３４５は、撮影画像を撮影したカメラ１１０の撮影方向と撮影画像内の非着用者の検知位置とに基づいて、座席位置を特定するとよい。例えば、特定部３４５は、取得した撮影方向３１４に対応付けられた観客領域３１５を特定する。そして、特定部３４５は、取得部３４２により検知された非着用者の撮影画像内の検知位置を特定する。そして、特定部３４５は、特定した観客領域３１５の中から、検知位置に対応するブロック及び座席位置を部分領域として特定する。尚、特定部３４５は、座席位置まで特定せず、ブロックを部分領域として特定してもよい。または、特定部３４５は、撮影画像の撮影対象である観客領域自体を部分領域として特定してもよい。

【0050】

通知部３４６は、上述した通知部１４の一例である。通知部３４６は、管理端末１３０又はスタッフ端末１２０に対して、ネットワークＮを介して警告情報を送信する。ここで、警告情報は、特定部３４５により特定された座席位置を含む。警告情報は、撮影画像内の非着用者の座席位置を特定できる情報である。例えば、警告情報は、非着用者の顔付近を囲んだ枠線であってもよい。そのため、通知部３４６は、管理端末１３０又はスタッフ端末１２０において、撮影画像を表示させた上で、撮影画像内に警告情報を表示させるように送信するとよい。これにより、管理者Ｕ２又はスタジアムスタッフＵ１は、非着用者の位置を特定し易くなり、声掛けをし易くなる。または、警告情報は、非着用者の座席位置（座席番号等）の音声情報であってもよい。また、警告情報は、特定部３４５により特定されたブロックを少なくとも含むものであればよい。

【0051】

尚、通知部３４６は、スタジアム１００内の所定の出力装置に対して、警告情報をさらに通知してもよい。出力装置としては、例えば、スピーカやオーロラビジョン（液晶ディスプレイ）、デジタルサイネージ等であってもよい。このとき、通知部３４６は、特定部３４５により特定されたブロックの近くのスピーカ又はデジタルサイネージを出力装置としてもよい。例えば、出力装置として指向性スピーカを用いても良い。その場合、通知部３４６は、指向性スピーカから特定されたブロックに向けて警告情報（音声）出力させるとよい。これらにより、観客にも直接、通知することができる。また、このときの警告情報には、例えば「マスク着用にご協力ください」といった音声又はメッセージ情報を含めても良い。

【0052】

尚、本実施形態２においては、必ずしも検知された非着用者の座席位置を顔認証により特定しなくてもよい。その場合、観客監視装置３００は、観客ＩＤ３１２及び座席位置３１３の対応付けた情報や認証制御部３４４が不要である。そして、特定部３４５は、上述したように、撮影画像を撮影したカメラ１１０の撮影方向と撮影画像内の非着用者の検知位置とに基づいて、座席位置を部分領域として特定するとよい。または、特定部３４５は、上述したように、撮影画像を撮影したカメラ１１０の撮影方向と撮影画像内の非着用者の検知位置とに基づいて、ブロックを部分領域として特定してもよい。この場合、通知部３４６は、座席位置を特定できなくとしても、ブロック単位などの部分領域の画像と、マスクの非着用者を赤枠などで示した画像を警告情報としてスタッフ端末１２０等に送信するとよい。

【0053】

図９は、本実施形態２にかかる観客監視処理の流れを示すフローチャートである。ここでは、例えば、カメラ１１０は、観客領域１０１の撮影方向に対して撮影し、撮影画像及び撮影方向をネットワークＮを介して観客監視装置３００へ送信したものとする。これに応じて、取得部３４２は、カメラ１１０からネットワークＮを介して撮影画像及び撮影方向を取得する（Ｓ４１）。

【0054】

次に、検知部３４３は、ステップＳ４１で取得された撮影画像からマスクの非着用者を検知したか否かを判定する（Ｓ４２）。例えば、検知部３４３は、撮影画像を解析し、撮影画像に含まれる１以上の観客の顔領域を特定する。そして、検知部３４３は、特定した各顔領域についてマスク着用の有無を判定する。非着用者が一人も検知されなかった場合、検知部３４３は、ネットワークＮを介してカメラ１１０に対して、カメラ１１０の撮影方向を次の観客領域に移動するように指示を送信する（Ｓ４３）。

【0055】

ステップＳ４２において非着用者が一人以上検知された場合、認証制御部３４４及び特定部３４５は、各非着用者について部分領域の特定処理を行う（Ｓ４４）。以下では、非着用者が一人検知されたものとして説明するが、非着用者が二人以上検知された場合、各非着用者について、ステップＳ４４を行うものとする。

【0056】

具体的には、まず、認証制御部３４４は、非着用者の顔認証制御を行う（Ｓ４４１）。具体的には、認証制御部３４４は、撮影画像から非着用者の顔領域を抽出し、顔領域から顔特徴情報を取得する。そして、認証制御部３４４は、顔特徴情報を顔認証要求に含めてネットワークＮを介して認証装置２００へ送信する。そして、認証制御部３４４は、認証装置２００から顔認証結果を受信する。

【0057】

そして、認証制御部３４４は、顔認証に成功したか否かを判定する（Ｓ４４２）。具体的には、認証制御部３４４は、受信した顔認証結果に成功を示す情報が含まれるか否かを判定する。ステップＳ４４２において顔認証に成功したと判定された場合、特定部３４５は、非着用者の観客ＩＤに基づき座席位置を特定する（Ｓ４４３）。具体的には、特定部３４５は、顔認証結果から顔認証に成功したユーザＩＤを観客ＩＤとして取得する。そして、特定部３４５は、記憶部３１０の中から、取得した観客ＩＤ３１２に対応付けられた座席位置３１３を特定する。

【0058】

ステップＳ４４２において顔認証に失敗したと判定された場合、特定部３４５は、撮影方向に基づき座席位置を特定する（Ｓ４４４）。具体的には上述したように、特定部３４５は、撮影方向と非着用者の検知位置とに基づいて、座席位置を特定する。

【0059】

ステップＳ４４３又はＳ４４４の後、通知部３４６は、特定した座席位置を示す情報を含めた警告情報を、ネットワークＮを介して管理端末１３０又はスタッフ端末１２０へ通知する（Ｓ４５）。警告情報は、撮影画像及び座席位置を含めても良い。尚、通知部３４６は、管理端末１３０又はスタッフ端末１２０に対してスタジアム１００全体のマップ内にマスクの非着用者が検知されたエリアを強調して表示させるような警告情報を送信してもよい。これにより、例えば、管理端末１３０又はスタッフ端末１２０は、画面に、スタジアム１００全体のマップを表示し、マスクの非着用者が検知された観客領域又はブロックを（例えば赤色で）強調できる。図１０は、本実施形態２にかかるマスクの非着用者の警告情報Ｒ０の表示例を示す図である。ここでは、管理端末１３０等は、画面にスタジアム１００全体のマップを表示し、観客領域１０２内の一部の部分領域（ブロック）に警告情報Ｒ０を強調して表示していることを示す。尚、管理端末１３０又はスタッフ端末１２０は、管理者Ｕ２又はスタジアムスタッフＵ１により警告情報Ｒ０又は観客領域１０２の選択を受け付けた場合、後述する図１１や図１２の画面を表示してもよい。

【0060】

図１１は、本実施形態２にかかるマスクの非着用者の警告情報Ｒ１の表示例を示す図である。ここでは、管理端末１３０又はスタッフ端末１２０は、画面に、撮影画像における検知された座席位置に警告情報Ｒ１を表示していることを示す。警告情報Ｒ１は、非着用者の顔領域の枠線（破線）と座席番号（例えば、「Ｓ１２３」）とを含む例である。例えば、管理者Ｕ２は、管理端末１３０に表示された警告情報Ｒ１を確認して、座席位置（座席番号等）をスタッフ端末１２０へ通知してもよい。これにより、スタジアムスタッフＵ１は、スタッフ端末１２０によりマスクの非着用者が存在する座席位置を把握でき、非着用者の近くまで行き、マスクを着用するよう促すことができる。または、スタッフ端末１２０が観客監視装置３００から直接、警告情報を受信し、表示しても同様である。尚、管理端末１３０又はスタッフ端末１２０は、画面に、マスクの非着用者の座席番号及び枠線のいずれか一方のみを警告情報Ｒ１として表示してもよい。

【0061】

図１２は、本実施形態２にかかるマスクの非着用者の警告情報Ｒ１１の表示例を示す図である。つまり、図１１の警告情報Ｒ１は、非着用者の枠線や座席番号に限定されない。図１２では、管理端末１３０等は、画面に、撮影画像において非着用者が検知された観客領域内のブロックに警告情報Ｒ１１を表示していることを示す。警告情報Ｒ１１は、撮影画像内の観客領域における非着用者が存在するブロックの枠線（破線）とブロック番号（例えば、「Ａ２３」）とを含む例である。尚、管理端末１３０等は、画面に、ブロックの枠線及びブロック番号のいずれか一方のみを警告情報Ｒ１１として表示してもよい。尚、警告情報Ｒ１１は、非着用者が検知された観客領域全体を枠線で囲むものであってもよい。または、警告情報Ｒ１１は、撮影画像内の特定のブロックのうち非着用者が存在する部分領域を枠線で囲むものであってもよい。または、警告情報Ｒ１１は、観客領域内の複数のブロックをまたがった領域を枠線で囲むものであってもよい。さらに、上述した警告情報Ｒ１及びＲ１１の一部又は全てを組み合わせてもよい。

【0062】

このように、本実施形態では、管理者Ｕ２やスタジアムスタッフＵ１である運営要員が、多数の観客の中からマスクの非着用者の存在位置を容易に把握できる。そのため、運営要員が非着用者に対して声掛けすることを支援できる。特に、観客ごとの座席位置が事前登録されている場合、顔認証を用いることで、正確に座席位置を特定できる。

【0063】

＜実施形態３＞
実施形態３は、上述した実施形態２の変形例である。本実施形態３にかかる観客監視装置は、非着用者が検知された場合、所定条件を満たすか否かを判定する判定部をさらに備えるものである。そして、通知部は、所定条件を満たすと判定された場合、警告情報を通知する。これにより、警告情報の過剰な通知を制限し、より必要性が高い場合に、スタジアムスタッフＵ１がマスク着用の声掛けを行うことができる。

【0064】

さらに、本実施形態３にかかる観客監視装置は、非着用者が検知された場合、マスクの非着用に関する指標値を測定する第１の測定部をさらに備えることが望ましい。この場合、判定部は、指標値が所定条件を満たすか否かを判定する。このように、測定された指標値を用いて判定するため、より正確に警告情報の通知の要否を判定できる。

【0065】

尚、本実施形態３の全体構成は、図３と同等であるため図示を省略し、以下では差異について説明する。図１３は、本実施形態３にかかる観客監視装置３００ａの構成を示すブロック図である。観客監視装置３００ａの記憶部３１０は、上述した観客監視装置３００と比べて、プログラム３１１がプログラム３１１ａに置き換わったものである。また、観客監視装置３００ａの制御部３４０は、上述した観客監視装置３００と比べて、測定部３４７及び判定部３４８が追加されたものである。その他の構成は、観客監視装置３００と同等である。

【0066】

プログラム３１１ａは、本実施形態３にかかる観客監視方法の処理が実装されたコンピュータプログラムである。

【0067】

測定部３４７は、上述した第１の測定部の一例である。例えば、測定部３４７は、非着用者がマスクを着用していない非着用時間を指標値として測定してもよい。または、測定部３４７は、観客領域に対して複数回撮影された複数の撮影画像から、特定の観客が非着用者として検知された検知回数を指標値として測定してもよい。この場合、測定部３４７は、検知回数をメモリ３２０等に保持するものとする。または、測定部３４７は、観客領域において検知された非着用者の検知人数を指標値として測定してもよい。または、測定部３４７は、非着用者が検知された場合、観客領域の混雑状況を指標値として測定してもよい。尚、測定部３４７は、非着用者と周囲の観客との距離を混雑状況に含めても良い。

【0068】

判定部３４８は、上述した判定部の一例である。例えば、判定部３４８は、測定された非着用時間が所定時間を超えた場合、所定条件を満たすと判定するとよい。これにより、観客がマスクを外して間もない間は、その後、マスクを再着用する可能性もあるため、警告情報の過剰な通知を抑制できる。

【0069】

または、判定部３４８は、測定された検知回数が所定数を超える場合、所定条件を満たすと判定するとよい。これにより、短時間であっても何度もマスクを外している観客に対して、適切なマスク着用の声掛けが可能となる。

【0070】

または、判定部３４８は、測定された検知人数が所定数を超える場合、所定条件を満たすと判定するとよい。これにより、非着用者が少ない場合に、警告情報の過剰な通知を抑制できる。

【0071】

または、判定部３４８は、測定された混雑状況が所定度合いを超える場合、所定条件を満たすと判定するとよい。例えば、判定部３４８は、測定された混雑状況のうち非着用者の所定範囲内に他の観客が存在するか否かにより、混雑状況が所定度合いを超えるか否かを判定してもよい。これにより、観客領域が密な場合に、非着用者に対して、適切なマスク着用の声掛けが可能となる。

【0072】

図１４は、本実施形態３にかかる観客監視処理の流れを示すフローチャートである。尚、ステップＳ４１からＳ４４並びにＳ４５は、上述した図９と同様であるため、以下では、図９との差異について説明する。ステップＳ４４の後、測定部３４７は、マスクの非着用に関する指標値を測定する（Ｓ４６）。ここで、指標値は、例えば、上述した非着用時間、検知回数、検知人数又は混雑状況が挙げられるが、これらに限定されない。また、測定部３４７は、非着用時間、検知回数、検知人数及び混雑状況のうち２以上を組み合わせて測定してもよい。

【0073】

そして、判定部３４８は、ステップＳ４６で測定された指標値が所定条件を満たすか否かを判定する（Ｓ４７）。例えば、指標値が非着用時間である場合、判定部３４８は、非着用時間が所定時間を超えるか否かを判定する。また、指標値が検知回数である場合、判定部３４８は、検知回数が所定数を超えるか否かを判定する。また、指標値が検知人数である場合、判定部３４８は、検知人数が所定数を超えるか否かを判定する。また、指標値が混雑状況である場合、判定部３４８は、混雑状況が所定度合いを超えるか否かを判定する。

【0074】

ステップＳ４７において指標値が所定条件を満たすと判定された場合、通知部３４６は、上述したように警告情報を通知する（Ｓ４５）。一方、ステップＳ４７において指標値が所定条件を満たさないと判定された場合、ステップＳ４３へ進む。

【0075】

尚、本実施形態３は、必ずしも測定部３４７を備える必要はない。その場合、例えば、判定部３４８は、検知された非着用者が飲食を行っていない場合に、所定条件を満たすと判定するとよい。つまり、判定部３４８は、検知された非着用者について飲食を行っているか否かを判定する。例えば、判定部３４８は、人が飲食を行っている顔周辺の画像を学習したＡＩモデルを用いて、検知された非着用者について飲食を行っているか否かを判定してもよい。これにより、飲食を行っている場合に、警告情報の過剰な通知を抑制できる。または、管理者Ｕ２が管理端末１３０に表示された撮影画像及び警告情報を見た上で、非着用者が飲食しているか否かを判定し、判定結果を管理端末１３０を介して観客監視装置３００へ入力してもよい。その場合、判定部３４８は、入力された判定結果が飲食を行っていることを示す場合、所定条件を満たさないと判定する。つまり、マスクの非着用者であっても警告対象から除外される。このとき、通知部３４６は、既に通知した警告情報を取り消す指示を行うと良い。よって、この場合も警告情報の過剰な通知を抑制できる。但し、判定部３４８は、検知された非着用者が飲食を行っている飲食回数をカウントしてもよい。そして、判定部３４８は、飲食回数が所定値を超える場合、所定条件を満たすと判定してもよい。

【0076】

または、判定部３４８は、特定された部分領域がマスクの着用を求められる指定領域である場合に、所定条件を満たすと判定するとよい。例えば、スタジアム１００内のイートスペースなどでは、マスクの非着用が許可されることがある。そのため、観客監視装置３００は、通常の観覧席などマスクの着用が求められるスペース（イートスペース以外）を予め指定領域として登録するものとする。この場合、判定部３４８は、ステップＳ４４により特定された座席位置又はブロックが指定領域か否かを判定する。これにより、イートスペースでは、警告情報の通知を抑制できる。

【0077】

＜実施形態４＞
実施形態４は、上述した実施形態２又は３の変形例である。本実施形態４にかかる観客監視装置は、非着用者が検知された場合、マスクの非着用に関する指標値を測定する第２の測定部と、指標値に応じた警告度合いを示す警告情報を決定する決定部と、をさらに備えるものである。これにより、運営要員は、警告度合いに応じた通知を受けることで、声掛けの頻度や度合いを調整でき、きめ細かな対応が可能となる。また、警告度合いに応じて通知先を増減するか、選択しても良い。

【0078】

尚、本実施形態４の全体構成は、図３と同等であるため図示を省略し、以下では差異について説明する。図１５は、本実施形態４にかかる観客監視装置３００ｂの構成を示すブロック図である。観客監視装置３００ｂの記憶部３１０は、上述した観客監視装置３００ａと比べて、プログラム３１１ａがプログラム３１１ｂに置き換わったものである。また、観客監視装置３００ｂの制御部３４０は、上述した観客監視装置３００ａと比べて、判定部３４８が決定部３４９に置き換わったものである。尚、本実施形態４にかかる測定部３４７は、上述した第２の測定部の一例である。その他の構成は、観客監視装置３００ａと同等である。尚、観客監視装置３００ｂは、実施形態２にかかる観客監視装置３００に改良を加えても実現可能である。

【0079】

プログラム３１１ｂは、本実施形態４にかかる観客監視方法の処理が実装されたコンピュータプログラムである。

【0080】

決定部３４９は、上述した決定部の一例である。例えば、決定部３４９は、非着用者の顔領域を囲む枠線の色を青、黄、赤の順で警告度合いが強くなるように決定してもよい。例えば、決定部３４９は、非着用時間に応じて警告情報の警告度合い（例えば、枠線の色）を決定するとよい。つまり、決定部３４９は、非着用時間が長くなるにつれて、警告度合いが強く（高く）なるように警告情報を決定してもよい。これにより、非着用者のうち長時間、マスクを外している観客（とその所在位置）を容易に識別できるようになるため、スタジアムスタッフＵ１は、長時間、マスクを外している観客に対して優先的に声掛けを行うことができる。

【0081】

または、決定部３４９は、検知回数に応じて警告情報の警告度合い（例えば、枠線の色）を決定してもよい。つまり、決定部３４９は、検知回数が多くなるにつれて、警告度合いが強く（高く）なるように警告情報を決定してもよい。これにより、短時間であっても何度もマスクを外している観客（とその所在位置）を容易に識別できるようになるため、スタジアムスタッフＵ１は、当該観客に対して、優先的に声掛けを行うことができる。

【0082】

または、決定部３４９は、検知人数に応じて警告情報の警告度合い（例えば、枠線の色）を決定してもよい。つまり、決定部３４９は、検知人数多くなるにつれて、警告度合いが強く（高く）なるように警告情報を決定してもよい。これにより、スタジアムスタッフＵ１は、マスクの非着用者の検知人数に応じた声掛けを行うことができる。さらに、決定部３４９は、検知人数が所定数を超える場合、特定された部分領域の近くのスピーカ等を警告情報の通知先に加えても良い。これにより、スタジアムスタッフＵ１が大勢に声掛けを行う負担を軽減できる。

【0083】

または、決定部３４９は、混雑状況に応じて警告情報の警告度合い（例えば、枠線の色）を決定してもよい。つまり、つまり、決定部３４９は、非着用者と他の観客との距離が近いほど、また、近くにより多くの観客がいるほど、警告度合いが強く（高く）なるように警告情報を決定してもよい。これにより、スタジアムスタッフＵ１は、観客領域が密な場所でマスクの非着用者が存在することを容易に把握でき、より優先的に声掛けを行うことができる。

【0084】

尚、決定部３４９は、警告情報に測定した非着用時間、検知回数、検知人数又は混雑状況といった指標値自体を含めても良い。これにより、警告情報を受信した管理端末１３０等は、画面に指標値を表示できる。そのため、管理者Ｕ２やスタジアムスタッフＵ１は、色や指標値を視認して、非着用者をより容易に把握できる。

【0085】

図１６は、本実施形態４にかかる観客監視処理の流れを示すフローチャートである。尚、ステップＳ４１からＳ４４、Ｓ４６並びにＳ４５は、上述した図１４と同様であるため、以下では、図１４との差異について説明する。ステップＳ４６の後、決定部３４９は、指標値に応じた警告度合いを示す警告情報を決定する（Ｓ４８）。ここで、決定部３４９は、上述したように非着用時間、検知回数、検知人数及び混雑状況のいずれか又は複数の組合せに応じて、警告度合いを示す警告情報を決定する。その後、通知部３４６は、決定された警告情報を上述したように通知する（Ｓ４５）。

【0086】

図１７から図２０は、本実施形態４にかかるマスクの非着用者の警告情報の表示例を示す図である。図１７は、指標値として非着用時間が測定された場合に、警告情報Ｒ１ａとして「マスク非着用時間５分！」との表記が表示された例を示す。図１８は、指標値として検知回数が測定された場合に、警告情報Ｒ１ｂとして「マスク非着用回数５回／１５分！」との表記が表示された例を示す。図１９は、指標値として観客領域あたりの検知人数が測定された場合に、警告情報Ｒ１ｃとして「マスク非着用者３人！」との表記が表示された例を示す。図２０は、指標値として混雑状況が測定された場合に、警告情報Ｒ１ｄとして「マスク非着用者の周囲に３人！」との表記が表示された例を示す。尚、図２０では、マスク非着用者の周囲を囲む領域を枠線（破線）で囲んだ例を示すが、枠線は必須ではない。また、図１７から図２０のおいて、警告情報Ｒ１ａからＲ１ｄの非着用者の顔領域の枠線の代わりに、上述した図１２の警告情報Ｒ１１のようにブロック単位等の枠線やブロック番号を用いても良い。

【0087】

尚、図１７から図２０における警告情報の表示例は、実施形態３において適用しても構わない。

【0088】

尚、検知部３４３においてマスクの非着用者が大声を出す、声援を送る、会話をする、立ち上がるなどが検知された場合に、決定部３４９は、警告度合いが高くなるように警告情報を決定してもよい。例えば、検知部３４３は、人が会話を行っている顔周辺の画像を学習したＡＩモデルを用いて、検知された非着用者が会話等を行っていることを検知してもよい。または、スタジアム１００は、観客領域ごとやブロックごとに観客の声を集音するマイクを備えても良い。この場合、検知部３４３は、特定されたブロックに対応するマイクから集音された音量が所定値以上である場合に、検知された非着用者が会話等を行っていることを検知してもよい。

【0089】

＜実施形態５＞
実施形態５は、上述した実施形態２から４の変形例である。本実施形態５にかかる観客監視装置は、観客領域内の複数の部分領域のそれぞれについて、検知された非着用者の検知人数を測定する第３の測定部をさらに備えるものである。そして、特定部は、複数の部分領域のうち、検知人数がより多い部分領域を特定し、通知部は、特定された部分領域を優先して警告情報を通知する。これにより、感染症の感染リスクがより高いブロックに対して、スタジアムスタッフＵ１が優先して声掛けを行うことができる。また、通知部は、通知先に、特定されたブロックに対応するスピーカを加えてもよい。尚、第３の測定部は、観客領域内の複数の部分領域のそれぞれについて、マスクの非着用に関する指標値を測定するものであってもよい。指標値は、上述した第２の測定部のように、例えば、非着用時間、非着用者の検知回数、非着用者の周囲の混雑状況等であってもよい。この場合、特定部は、複数の部分領域のうち、指標値がより大きい部分領域を特定し、通知部は、特定された部分領域を優先して警告情報を通知する。つまり、特定部は、部分領域ごとの指標値に基づいて、警告情報を通知する優先順位を決定してもよい。

【0090】

尚、本実施形態５の全体構成は、図３と同等であるため図示を省略する。また、本実施形態５の観客監視装置の構成は、図８に測定部３４７を追加したものであるため図示を省略し、以下では差異について説明する。尚、本実施形態５の観客監視装置は、実施形態２から４にかかる観客監視装置３００、３００ａ又は３００ｂに改良を加えても実現可能である。

【0091】

図２１は、本実施形態５にかかる観客監視処理の流れを示すフローチャートである。尚、ステップＳ４１からＳ４３は、上述した図９と同様であるため、以下では、図９との差異について説明する。

【0092】

ステップＳ４２において非着用者が一人以上検知された場合、測定部３４７は、観客領域内の複数のブロックのそれぞれについて、ブロック単位で非着用者の検知人数を測定する（Ｓ５１）。そして、特定部３４５は、複数のブロックの中で検知人数がより多いブロックを特定する（Ｓ５２）。そして、通知部３４６は、特定されたブロックを識別するための警告情報を、ネットワークＮを介して管理端末１３０又はスタッフ端末１２０へ通知する（Ｓ５３）。このとき、通知部３４６は、ネットワークＮを介して、特定されたブロックに対応するスピーカに対して、警告情報をさらに通知してもよい。

【0093】

その後、特定部３４５は、非着用者が検知されたブロックのうちステップＳ５３により未通知のブロックが存在するか否かを判定する（Ｓ５４）。未通知のブロックが存在すると判定された場合、特定部３４５は、未通知のブロックのうち、検知人数がより多いブロックを特定する（Ｓ５５）。そして、通知部３４６は、上述したように警告情報を通知する（Ｓ５３）。そして、ステップＳ５４で未通知のブロックが存在しないと判定された場合、当該観客監視処理を終了する。

【0094】

図２２は、本実施形態５にかかるマスクの非着用者の警告情報の表示例を示す図である。図２２は、観客領域のうち正面から左側のブロックに非着用者が３人検知され、右側のブロックに非着用者が１人検知された例を示す。図２１のフローに従うと、先に、左側のブロックに警告情報Ｒ２ａが表示され、その後、右側のブロックに警告情報Ｒ２ｂが表示されることとなる。但し、警告情報Ｒ２ａ及びＲ２ｂは、同時に表示されてもよい。警告情報Ｒ２ａは、「(1)マスク非着用者３人！」との表記を示し、警告情報Ｒ２ｂは、「(2)マスク非着用者１人！」との表記を示す。そのため、「(1)」の表記を含む警告情報Ｒ２ａは、「(2)」の表記を含む警告情報Ｒ２ｂよりも優先度が高いことを示す。また、この例では、警告情報Ｒ２ａの文字サイズが警告情報Ｒ２ｂの文字サイズよりも大きい。これによっても警告情報Ｒ２ａは警告情報Ｒ２ｂよりも優先度が高いことを示す。つまり、管理者Ｕ２等は、警告情報Ｒ２ａと警告情報Ｒ２ｂの表示順、冒頭の番号又は文字サイズの少なくともいずれかにより、非着用者の密度がより高いブロックを把握できる。言い換えると、管理者Ｕ２等は、警告情報の表示順、冒頭の番号又は文字サイズの少なくともいずれかにより、マスク着用の声掛けを行う優先度の高いブロックを把握できる。よって、スタジアムスタッフＵ１は、警告情報Ｒ２ａに対応するブロックに対して優先的に声掛けを行うことができる。

【0095】

このように、本実施形態により、管理端末１３０又はスタッフ端末１２０は、マスクの非着用者の検知人数が多いブロックから順番に警告情報を受信できる。よって、管理者Ｕ２及びスタジアムスタッフＵ１は、声掛けを行う優先度が高いブロックを把握できる。よって、スタジアムスタッフＵ１は、感染症の感染リスクを効果的に抑制するように声掛けを行うことができる。

【0096】

＜実施形態６＞
実施形態６は、上述した実施形態２から５の変形例である。本実施形態６では、一旦、警告情報を通知した後に、当初検知された観客の状況に応じた通知を行うものである。例えば、本実施形態６にかかる取得部は、警告情報が通知された後に（同じ）観客領域が撮影された第２の撮影画像を取得する。そして、通知部は、第１の撮影画像において非着用者として検知された観客が、第２の撮影画像において非着用者として検知されなかった場合、その旨を情報端末に対して通知するとよい。これにより、観客が一旦、マスクを外した後、マスクを再着用した場合に、スタジアムスタッフＵ１はその旨を把握できるため、当該観客に対する声掛けを中止できる。よって、過剰な声掛けを抑制し、また、スタジアムスタッフＵ１の負担を軽減できる。

【0097】

また、本実施形態６にかかる取得部は、警告情報が通知された後に（同じ）観客領域が撮影された第３の撮影画像を取得する。尚、第２の撮影画像と第３の撮影画像は同じものであってもよい。そして、検知部は、第１の撮影画像において非着用者として検知された観客が、第３の撮影画像において、特定された部分領域から移動したことを検知したものとする。このとき、通知部は、移動したことが検知された旨を情報端末に対して通知するとよい。これにより、マスクを外した状態で観客が離席したことを通知できる。そのため、スタジアムスタッフＵ１は、より優先的に、当該観客に声掛けを行うことができる。

【0098】

この場合、さらに、特定部は、移動したことが検知された観客の移動後の位置を特定するとよい。このとき、通知部は、特定された移動後の位置を情報端末に対して通知するとよい。これにより、マスクを外した状態で観客の直近の存在位置を通知できる。そのため、スタジアムスタッフＵ１は、当該観客を追跡した上で、声掛けを行うことができる。よって、スタジアムスタッフＵ１の負担を軽減できる。

【0099】

尚、本実施形態６の全体構成及び観客監視装置の構成は、図３及び図８と同等であるため図示を省略し、以下では差異について説明する。

【0100】

図２３は、本実施形態６にかかる観客監視処理の流れを示すフローチャートである。尚、図９と同等の処理については同じ符号を付している。前提として、例えば、すでに図９の処理により、観客領域１０１において非着用者が検知され、警告情報が通知済みであるものとする。そして、観客監視装置３００は、検知された非着用者の観客ＩＤ又は座席位置（並びに検知又は通知時刻）をメモリ３２０内に保持しているものとする。

【0101】

その後、カメラ１１０は、再度、観客領域１０１の撮影方向に対して撮影し、撮影画像及び撮影方向をネットワークＮを介して観客監視装置３００へ送信したものとする。これに応じて、取得部３４２は、カメラ１１０からネットワークＮを介して（第２、第３の）撮影画像及び撮影方向を取得する（Ｓ４１）。

【0102】

次に、検知部３４３は、取得した撮影方向において前回、マスクの非着用者が検知されたか否かを判定する（Ｓ６１）。例えば、検知部３４３は、メモリ３２０を参照し、観客領域１０１において前回の撮影画像において非着用者が検知されたか否かを判定する。さらに、検知されたと判定した場合、検知部３４３は、検知された非着用者の観客ＩＤ又は座席位置を特定する。

【0103】

前回、マスクの非着用者が検知されたと判定された場合（ステップＳ６１でＹＥＳ）、検知部３４３は、前回の非着用者が、今回の撮影画像においてマスクの着用者として検知されたか否かを判定する（Ｓ６２）。例えば、検知部３４３は、ステップＳ４２と同様に、撮影画像内の非着用者の検知を行い、検知された場合、検知された非着用者が上記で特定された座席位置に存在するか否かを判定する。または、検知部３４３は、撮影画像内の上記で特定された座席位置の顔領域について、マスクの非着用者か否かを判定してもよい。

【0104】

前回の非着用者が今回は着用者として検知された場合（ステップＳ６２でＹＥＳ）、通知部３４６は、前回の非着用者がその後、マスクを着用した旨（よって声掛け等は不要な旨）を、管理端末１３０又はスタッフ端末１２０へ通知する（Ｓ６３）。

【0105】

前回の非着用者が今回も非着用者として検知された場合（ステップＳ６２でＮＯ）、検知部３４３は、前回の非着用者が移動したか否かを判定する（Ｓ６４）。例えば、検知部３４３は、非着用者に対する顔認証を利用したトラッキングを行い、当該非着用者（観客）の移動後の位置を特定する（Ｓ６５）。このとき、検知部３４３は、複数のカメラで顔認証を行うことで、非着用者の動きをトラッキング（測定、検知、特定）してもよい。そして、通知部３４６は、マスクの非着用者の移動後の位置を、管理端末１３０又はスタッフ端末１２０へ通知する（Ｓ６６）。

【0106】

前回、マスクの非着用者が検知されなかったと判定された場合（ステップＳ６１でＮＯ）、観客監視装置３００は、図９と同様に、ステップＳ４２からＳ４５を行う。尚、ステップＳ４２からＳ４５は、ステップＳ６１の判定結果に関わらず実行してもよい。

【0107】

このように本実施形態６では、一旦、警告情報を通知した後に、当初検知された観客の状況に応じた通知を行うことで、スタジアムスタッフＵ１が適切な対応を取ることができる。例えば、マスクを再着用した観客に対する過剰な声掛けを抑制できる。また、非着用者が移動した場合、スタジアムスタッフＵ１は優先して声掛けを行うことができる。特に、その際、スタジアムスタッフＵ１は、非着用者の移動先の位置を把握できるため、効果的に声掛けを行うことができる。また、これらによりスタジアムスタッフＵ１の負担を軽減できる。

【0108】

＜実施形態７＞
実施形態７は、上述した実施形態２から６の変形例である。本実施形態７は、生体認証機能を観客監視装置に内蔵させたものである。本実施形態７にかかる観客監視システムは、上述した観客監視システム１０００のうち認証装置２００が観客監視装置３００ｃに内蔵されたものと同様であるため、図示及び説明を省略する。

【0109】

図２４は、本実施形態７にかかる観客監視装置３００ｃの構成を示すブロック図である。観客監視装置３００ｃの記憶部３１０は、上述した観客監視装置３００と比べて、プログラム３１１がプログラム３１１ａに置き換わり、観客ＩＤ３１２に顔特徴情報３１６が対応付けられたものである。また、観客監視装置３００ｃの制御部３４０は、上述した観客監視装置３００と比べて、認証制御部３４４が認証制御部３４４ｃに置き換わったものである。

【0110】

プログラム３１１ａは、本実施形態７にかかる観客監視方法の処理が実装されたコンピュータプログラムである。

【0111】

顔特徴情報３１６は、上述した認証装置２００の顔特徴情報２１２に相当するものである。顔特徴情報３１６は、観客ＩＤ３１２（ユーザの識別情報）と対応付けられている。つまり、記憶部３１０は、上述した顔情報ＤＢ２１０を包含するものである。

【0112】

認証制御部３４４ｃは、複数の人物の顔特徴情報とマスクの非着用者の顔特徴情報とを照合して顔認証を制御する。すなわち、認証制御部３４４ｃは、検知された非着用者の顔領域から抽出された顔特徴情報と、記憶部３１０に記憶された顔特徴情報３１６とを照合して顔認証を行うことにより、顔認証結果を取得する。

【0113】

尚、本実施形態では、上述した図９のステップ４４１が、認証制御部３４４ｃによる観客監視装置３００ｃ内での顔認証処理に置き換わる。

【0114】

このように、本実施形態７においても上述した実施形態２と同様の効果を奏することができる。そのため、実施形態３から６にかかる観客監視装置に対しても同様の改良を行うことで、実施形態３から６と同様の効果を奏することができる。

【0115】

＜その他の実施形態＞
尚、上述の実施形態では、ハードウェアの構成として説明したが、これに限定されるものではない。本開示は、任意の処理を、ＣＰＵにコンピュータプログラムを実行させることにより実現することも可能である。

【0116】

上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、ＤＶＤ（Digital Versatile Disc）、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

【0117】

なお、本開示は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。また、本開示は、それぞれの実施形態を適宜組み合わせて実施されてもよい。

【0118】

上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。
（付記Ａ１）
所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得する取得手段と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知手段と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定手段と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知手段と、
を備える観客監視装置。
（付記Ａ２）
前記特定手段は、前記非着用者の座席位置を前記部分領域として特定する
付記Ａ１に記載の観客監視装置。
（付記Ａ３）
前記特定手段は、前記第１の撮影画像を撮影した撮影装置の撮影方向と前記第１の撮影画像内の前記非着用者の検知位置とに基づいて、前記座席位置を特定する
付記Ａ２に記載の観客監視装置。
（付記Ａ４）
前記複数の観客それぞれの顔特徴情報に対応する識別情報と座席位置を対応付けて記憶手段に登録する登録手段と、
前記第１の撮影画像内の前記非着用者の顔領域に基づき前記記憶手段を参照して顔認証を制御する認証制御手段と、
をさらに備え、
前記特定手段は、前記顔認証に成功した非着用者である観客に対応付けられた座席位置を前記部分領域として特定する
付記Ａ２に記載の観客監視装置。
（付記Ａ５）
前記非着用者が検知された場合、所定条件を満たすか否かを判定する判定手段をさらに備え、
前記通知手段は、前記所定条件を満たすと判定された場合、前記警告情報を通知する
付記Ａ１乃至Ａ４のいずれか１項に記載の観客監視装置。
（付記Ａ６）
前記非着用者が検知された場合、前記マスクの非着用に関する指標値を測定する第１の測定手段をさらに備え、
前記判定手段は、前記指標値が前記所定条件を満たすか否かを判定する
付記Ａ５に記載の観客監視装置。
（付記Ａ７）
前記第１の測定手段は、前記非着用者がマスクを着用していない非着用時間を前記指標値として測定し、
前記判定手段は、前記非着用時間が所定時間を超えた場合、前記所定条件を満たすと判定する
付記Ａ６に記載の観客監視装置。
（付記Ａ８）
前記第１の測定手段は、前記観客領域に対して複数回撮影された複数の撮影画像から、特定の観客が非着用者として検知された検知回数を前記指標値として測定し、
前記判定手段は、前記検知回数が所定数を超える場合、前記所定条件を満たすと判定する
付記Ａ６に記載の観客監視装置。
（付記Ａ９）
前記第１の測定手段は、前記観客領域において前記検知された非着用者の検知人数を前記指標値として測定し、
前記判定手段は、前記検知人数が所定数を超える場合、前記所定条件を満たすと判定する
付記Ａ６に記載の観客監視装置。
（付記Ａ１０）
前記第１の測定手段は、前記非着用者が検知された場合、前記観客領域の混雑状況を前記指標値として測定し、
前記判定手段は、前記混雑状況が所定度合いを超える場合、前記所定条件を満たすと判定する
付記Ａ６に記載の観客監視装置。
（付記Ａ１１）
前記判定手段は、前記検知された非着用者が飲食を行っていない場合に、前記所定条件を満たすと判定する
付記Ａ５に記載の観客監視装置。
（付記Ａ１２）
前記判定手段は、前記特定された部分領域がマスクの着用を求められる指定領域である場合に、前記所定条件を満たすと判定する
付記Ａ５に記載の観客監視装置。
（付記Ａ１３）
前記非着用者が検知された場合、前記マスクの非着用に関する指標値を測定する第２の測定手段と、
前記指標値に応じた警告度合いを示す警告情報を決定する決定手段と、をさらに備え、
前記通知手段は、前記決定された警告情報を通知する
付記Ａ１乃至Ａ４のいずれか１項に記載の観客監視装置。
（付記Ａ１４）
前記第２の測定手段は、前記非着用者がマスクを着用していない非着用時間を前記指標値として測定し、
前記決定手段は、前記非着用時間に応じて前記警告情報を決定する
付記Ａ１３に記載の観客監視装置。
（付記Ａ１５）
前記第２の測定手段は、前記観客領域に対して複数回撮影された複数の撮影画像から、特定の観客が非着用者として検知された検知回数を前記指標値として測定し、
前記決定手段は、前記検知回数に応じて前記警告情報を決定する
付記Ａ１３に記載の観客監視装置。
（付記Ａ１６）
前記第２の測定手段は、前記観客領域において前記検知された非着用者の検知人数を前記指標値として測定し、
前記決定手段は、前記検知人数に応じて前記警告情報を決定する
付記Ａ１３に記載の観客監視装置。
（付記Ａ１７）
前記第２の測定手段は、前記非着用者が検知された場合、前記観客領域の混雑状況を前記指標値として測定し、
前記決定手段は、前記混雑状況に応じて前記警告情報を決定する
付記Ａ１３に記載の観客監視装置。
（付記Ａ１８）
前記観客領域内の複数の部分領域のそれぞれについて、前記検知された非着用者の検知人数を測定する第３の測定手段をさらに備え、
前記特定手段は、前記複数の部分領域のうち、前記検知人数がより多い部分領域を特定し、
前記通知手段は、前記特定された部分領域を優先して前記警告情報を通知する
付記Ａ１乃至Ａ４のいずれか１項に記載の観客監視装置。
（付記Ａ１９）
前記取得手段は、前記警告情報が通知された後に前記観客領域が撮影された第２の撮影画像を取得し、
前記通知手段は、前記第１の撮影画像において前記非着用者として検知された観客が、前記第２の撮影画像において前記非着用者として検知されなかった場合、その旨を前記情報端末に対して通知する
付記Ａ１乃至Ａ１８のいずれか１項に記載の観客監視装置。
（付記Ａ２０）
前記取得手段は、前記警告情報が通知された後に前記観客領域が撮影された第３の撮影画像を取得し、
前記検知手段は、前記第１の撮影画像において前記非着用者として検知された観客が、前記第３の撮影画像において前記特定された部分領域から移動したことを検知し、
前記通知手段は、前記移動したことが検知された旨を前記情報端末に対して通知する
付記Ａ１乃至Ａ１９のいずれか１項に記載の観客監視装置。
（付記Ａ２１）
前記特定手段は、前記移動したことが検知された観客の移動後の位置を特定し、
前記通知手段は、前記特定された移動後の位置を前記情報端末に対して通知する
付記Ａ２０に記載の観客監視装置。
（付記Ａ２２）
前記通知手段は、前記施設内の所定の出力装置に対して、前記警告情報をさらに通知する
付記Ａ１乃至Ａ２１のいずれか１項に記載の観客監視装置。
（付記Ｂ１）
所定の施設における複数の観客を含む観客領域を撮影する撮影装置と、
前記撮影装置と接続された観客監視装置と、
を備え、
前記観客監視装置は、
前記撮影装置により撮影された第１の撮影画像を取得する取得手段と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知手段と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定手段と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知手段と、
を備える観客監視システム。
（付記Ｂ２）
前記特定手段は、前記非着用者の座席位置を前記部分領域として特定する
付記Ｂ１に記載の観客監視システム。
（付記Ｃ１）
コンピュータが、
所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得し、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知し、
前記観客領域のうち前記非着用者を含む部分領域を特定し、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する、
観客監視方法。
（付記Ｄ１）
所定の施設における複数の観客を含む観客領域が撮影された第１の撮影画像を取得する取得処理と、
前記第１の撮影画像からマスクを着用していない観客である非着用者を検知する検知処理と、
前記観客領域のうち前記非着用者を含む部分領域を特定する特定処理と、
前記施設の運営要員の情報端末に対して、前記特定した部分領域についての警告情報を通知する通知処理と、
をコンピュータに実行させる観客監視プログラムが格納された非一時的なコンピュータ可読媒体。

【0119】

以上、実施形態（及び実施例）を参照して本願発明を説明したが、本願発明は上記実施形態（及び実施例）に限定されものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

【符号の説明】

【0120】

１ 観客監視装置
１１ 取得部
１２ 検知部
１３ 特定部
１４ 通知部
１０００ 観客監視システム
１００ スタジアム
１０１ 観客領域
１０１１ ブロック
１０１ｉ ブロック
１０ｎ 観客領域
１０ｎ１ ブロック
１０ｎｊ ブロック
１１０ カメラ
１１０ａ カメラ
１１０ｂ カメラ
１２０ スタッフ端末
１３０ 管理端末
２００ 認証装置
２１０ 顔情報ＤＢ
２１１ ユーザＩＤ
２１２ 顔特徴情報
２２０ 顔検出部
２３０ 特徴点抽出部
２４０ 登録部
２５０ 認証部
３００ 観客監視装置
３００ａ 観客監視装置
３００ｂ 観客監視装置
３００ｃ 観客監視装置
３１０ 記憶部
３１１ プログラム
３１１ａ プログラム
３１１ｂ プログラム
３１１ｃ プログラム
３１２ 観客ＩＤ
３１３ 座席位置
３１４ 撮影方向
３１５ 観客領域
３１５１ ブロック
３１５１１ 座席位置
３１５１ｋ 座席位置
３１５ｉ ブロック
３１６ 顔特徴情報
３２０ メモリ
３３０ ＩＦ部
３４０ 制御部
３４１ 登録部
３４２ 取得部
３４３ 検知部
３４４ 認証制御部
３４４ｃ 認証制御部
３４５ 特定部
３４６ 通知部
３４７ 測定部
３４８ 判定部
３４９ 決定部
Ｒ０ 警告情報
Ｒ１ 警告情報
Ｒ１１ 警告情報
Ｒ１ａ 警告情報
Ｒ１ｂ 警告情報
Ｒ１ｃ 警告情報
Ｒ１ｄ 警告情報
Ｒ２ａ 警告情報
Ｒ２ｂ 警告情報
Ｎ ネットワーク
Ｕ１ スタジアムスタッフ
Ｕ２ 管理者

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】