知財求人 - 知財ポータルサイト「IP Force」
▶ エヌ・ティ・ティ・コミュニケーションズ株式会社の特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-04-05
(45)【発行日】2024-04-15
(54)【発明の名称】発熱者追跡装置、方法及びプログラム
(51)【国際特許分類】
H04N 7/18 20060101AFI20240408BHJP
G06T 7/246 20170101ALI20240408BHJP
G16H 50/80 20180101ALI20240408BHJP
【ＦＩ】
H04N7/18 D
H04N7/18 N
H04N7/18 U
G06T7/246
G16H50/80
【請求項の数】
7
(21)【出願番号】P 2020159786
(22)【出願日】2020-09-24
(65)【公開番号】P2022053145
(43)【公開日】2022-04-05
【審査請求日】2023-02-07
(73)【特許権者】
【識別番号】399035766
【氏名又は名称】エヌ・ティ・ティ・コミュニケーションズ株式会社
(74)【代理人】
【識別番号】110003708
【氏名又は名称】弁理士法人鈴榮特許綜合事務所
(74)【代理人】
【識別番号】100108855
【弁理士】
【氏名又は名称】蔵田 昌俊
(74)【代理人】
【識別番号】100179062
【弁理士】
【氏名又は名称】井上 正
(74)【代理人】
【識別番号】100199565
【弁理士】
【氏名又は名称】飯野 茂
(72)【発明者】
【氏名】宮原 拓磨
(72)【発明者】
【氏名】松本 鮎美
(72)【発明者】
【氏名】古思 望
(72)【発明者】
【氏名】熊下 正照
(72)【発明者】
【氏名】柴田 哲希
(72)【発明者】
【氏名】塩崎 貴司
(72)【発明者】
【氏名】宇田 育弘
(72)【発明者】
【氏名】佐藤 篤
【審査官】秦野 孝一郎
(56)【参考文献】
【文献】特開２０２０－１２０３２３（ＪＰ，Ａ）
【文献】特開２０１５－０８９０１９（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ ７／１８
Ｇ０６Ｔ ７／００－７／９０
Ｇ１６Ｈ ５０／８０
(57)【特許請求の範囲】
【請求項1】
施設の入口に設置されたサーモカメラからのサーモデータに基づき発熱者を検出し、前記入口及び前記施設内に分散して設置された複数台の可視光カメラからの映像データより前記発熱者を検出する検出部と、
少なくとも、前記施設のマップ情報と、前記複数台の可視光カメラの設置状況を示すカメラ情報と、を含む既知情報を記憶する既知情報記憶部と、
前記検出部の検出結果と前記既知情報とに基づいて、前記発熱者の前記施設内の移動経路と、前記発熱者が規定時間以上滞在していた滞在箇所と、を判別する判別部と、
前記発熱者の前記移動経路及び前記滞在箇所を記憶する経路記憶部と、
を備え、
前記既知情報記憶部が記憶する前記既知情報は、複数の登録者についての登録者情報を更に含み、
前記検出部は、前記複数台の可視光カメラからの映像データより、前記発熱者以外の人物も検出し、
前記判別部は、前記検出部の検出結果と前記既知情報とに基づいて、前記発熱者が規定時間以上滞在していた前記滞在箇所において、前記発熱者から規定距離以内に前記規定時間以上滞在していた前記発熱者以外の人物を判別し、
前記経路記憶部は、前記発熱者の前記移動経路及び前記滞在箇所に加えて、前記発熱者以外の人物を前記発熱者に対する接触者として記憶する、
発熱者追跡装置。
【請求項2】
出力対象の前記発熱者の指定を受けて、前記経路記憶部から前記発熱者の前記移動経路、前記滞在箇所、及び前記発熱者以外の人物を検索して出力する出力部を更に備える、請求項１に記載の発熱者追跡装置。
【請求項3】
施設の入口に設置されたサーモカメラからのサーモデータに基づき発熱者を検出し、前記入口及び前記施設内に分散して設置された複数台の可視光カメラからの映像データより前記発熱者を検出する検出部と、
少なくとも、前記施設のマップ情報と、前記複数台の可視光カメラの設置状況を示すカメラ情報と、を含む既知情報を記憶する既知情報記憶部と、
前記検出部の検出結果と前記既知情報とに基づいて、前記発熱者の前記施設内の移動経路と、前記発熱者が規定時間以上滞在していた滞在箇所と、を判別する判別部と、
前記発熱者の前記移動経路及び前記滞在箇所を記憶する経路記憶部と、
を備え、
前記検出部は、
前記施設の前記入口に設置された前記サーモカメラからの前記サーモデータに基づき前記発熱者を検出したとき、前記入口に設置された前記可視光カメラの前記映像データより前記発熱者の顔画像及び／又は全身画像である第１の画像を取得し、
前記施設内に分散して設置された前記複数台の可視光カメラからの前記映像データより人物の顔画像及び／又は全身画像である第２の画像を取得し、前記第２の画像の中から前記第１の画像に対応する画像を前記発熱者の画像として取得し、
前記判別部は、前記発熱者の画像である前記第２の画像を取得する元となった前記可視光カメラの前記設置状況に基づいて、前記発熱者の前記施設内の前記移動経路を判別する、
発熱者追跡装置。
【請求項4】
出力対象の前記発熱者の指定を受けて、前記経路記憶部から前記発熱者の前記移動経路及び前記滞在箇所を検索して出力する出力部を更に備える、請求項１乃至３の何れかに記載の発熱者追跡装置。
【請求項5】
複数台の可視光カメラからの映像データより発熱者の移動を追跡する発熱者追跡方法であって、コンピュータが、
施設の入口に設置されたサーモカメラからのサーモデータに基づき前記発熱者を検出する過程と、
前記入口及び前記施設内に分散して設置された前記複数台の可視光カメラからの映像データより前記発熱者を検出する過程と、
予めメモリに記憶されている前記施設のマップ情報及び前記複数台の可視光カメラの設置状況を示すカメラ情報を少なくとも含む既知情報と、前記発熱者の検出結果と、に基づいて、前記発熱者の前記施設内の移動経路と、前記発熱者が規定時間以上滞在していた滞在箇所と、を判別する過程と、
前記判別した前記発熱者の前記移動経路及び前記滞在箇所を前記メモリに記憶する過程と、
を備え、
前記メモリが記憶する前記既知情報は、複数の登録者についての登録者情報を更に含み、
前記コンピュータが、
前記複数台の可視光カメラからの映像データより、前記発熱者以外の人物も検出する過程と、
検出結果と前記既知情報とに基づいて、前記発熱者が規定時間以上滞在していた前記滞在箇所において、前記発熱者から規定距離以内に前記規定時間以上滞在していた前記発熱者以外の人物を判別する過程と、
前記発熱者の前記移動経路及び前記滞在箇所に加えて、前記発熱者以外の人物を前記発熱者に対する接触者として記憶する過程と、
を備える、発熱者追跡方法。
【請求項6】
複数台の可視光カメラからの映像データより発熱者の移動を追跡する発熱者追跡方法であって、
コンピュータが、
施設の入口に設置されたサーモカメラからのサーモデータに基づき前記発熱者を検出する過程と、
前記入口及び前記施設内に分散して設置された前記複数台の可視光カメラからの映像データより前記発熱者を検出する過程と、
予めメモリに記憶されている前記施設のマップ情報及び前記複数台の可視光カメラの設置状況を示すカメラ情報を少なくとも含む既知情報と、前記発熱者の検出結果と、に基づいて、前記発熱者の前記施設内の移動経路と、前記発熱者が規定時間以上滞在していた滞在箇所と、を判別する過程と、
前記判別した前記発熱者の前記移動経路及び前記滞在箇所を前記メモリに記憶する過程と、
前記施設の前記入口に設置された前記サーモカメラからの前記サーモデータに基づき前記発熱者を検出したとき、前記入口に設置された前記可視光カメラの前記映像データより前記発熱者の顔画像及び／又は全身画像である第１の画像を取得する過程と、
前記施設内に分散して設置された前記複数台の可視光カメラからの前記映像データより人物の顔画像及び／又は全身画像である第２の画像を取得し、前記第２の画像の中から前記第１の画像に対応する画像を前記発熱者の画像として取得する過程と、
前記発熱者の画像である前記第２の画像を取得する元となった前記可視光カメラの前記設置状況に基づいて、前記発熱者の前記施設内の前記移動経路を判別する過程と、
を備える、発熱者追跡方法。
【請求項7】
請求項１乃至４の何れかに記載の発熱者追跡装置が備える各部による処理をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
この発明の実施形態は、例えば施設内を移動する発熱者を追跡する発熱者追跡装置、方法及びプログラムに関する。
【背景技術】
【0002】
一般に、ショッピングモール、イベント会場、空港等のように不特定多数の人が出入りする施設では、インフルエンザ、ＣＯＶＩＤ－１９（新型コロナウイルス感染症）等の感染症の感染拡大を防止するため、発熱者については、施設への入場を遠慮してもらったり、検疫室等に案内したりする等の対策が実施されている。
【0003】
そのような対策を行うためには、例えば、サーモカメラの画像を利用して発熱者を検知すれば良い（例えば、特許文献１を参照）。
【先行技術文献】
【特許文献】
【0004】
【文献】特開平２－６４８００号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
ところが、サーモカメラを利用して発熱者を検知したとしても、監視者がその検知結果を見逃したり、一度に多数の発熱者が検知されて対応することができなかったりして、発熱者が施設に入場してしまった場合には、その発熱者を追跡することができない。
【0006】
特に、ＣＯＶＩＤ－１９等の消毒作業が必要となる感染症の感染者については、施設に滞在した時点よりも後において感染事実が判明する。そのため、発熱者の施設滞在時点よりも後日に、当該発熱者の施設内の移動経路を確認できる技術が要望されている。
【0007】
この発明は上記事情に着目してなされたもので、その目的とするところは、発熱者の施設内における移動経路を検出して保存しておけるようにすることにある。
【課題を解決するための手段】
【0008】
上記課題を解決するために、この発明に係る発熱者追跡装置の一態様は、施設の入口に設置されたサーモカメラからのサーモデータに基づき発熱者を検出し、前記入口及び前記施設内に分散して設置された複数台の可視光カメラからの映像データより前記発熱者を検出する検出部と、少なくとも、前記施設のマップ情報と、前記複数台の可視光カメラの設置状況を示すカメラ情報と、を含む既知情報を記憶する既知情報記憶部と、前記検出部の検出結果と前記既知情報とに基づいて、前記発熱者の前記施設内の移動経路と、前記発熱者が規定時間以上滞在していた滞在箇所と、を判別する判別部と、前記発熱者の前記移動経路及び前記滞在箇所を記憶する経路記憶部と、を備えるようにしたものである。
【0009】
この発明に係る発熱者追跡装置の一態様は、複数台の可視光カメラからの映像データより発熱者の移動を追跡する発熱者追跡方法であって、コンピュータが、施設の入口に設置されたサーモカメラからのサーモデータに基づき前記発熱者を検出する過程と、前記入口及び前記施設内に分散して設置された前記複数台の可視光カメラからの映像データより前記発熱者検出する過程と、予めメモリに記憶されている前記施設のマップ情報及び前記複数台の可視光カメラの設置状況を示すカメラ情報を少なくとも含む既知情報と、前記発熱者の検出結果と、に基づいて、前記発熱者の前記施設内の移動経路と、前記発熱者が規定時間以上滞在していた滞在箇所と、を判別する過程と、前記判別した前記発熱者の前記移動経路及び前記滞在箇所を前記メモリに記憶する過程と、を備えるようにしたものである。
【0010】
この発明に係るプログラムの一態様は、この発明に係る発熱者追跡装置の一態様が備える各部による処理をコンピュータに実行させるプログラムである。
【発明の効果】
【0011】
この発明の各態様によれば、発熱者の施設内における移動経路を検出して保存しておけるようになり、よって、発熱者の施設滞在時点よりも後日に、当該発熱者の施設内の移動経路を確認できるようになる。
【図面の簡単な説明】
【0012】
【発明を実施するための形態】
【0013】
以下、図面を参照してこの発明に係わる実施形態を説明する。
【0014】
［第１実施形態］
（構成例）
（１）システム
図１は、この発明の第１実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶを含む追跡システムの全体構成を示す図である。追跡システムは、不特定多数が利用する施設に設置され、施設内に入場した発熱者を追跡する。本明細書における施設とは、例えば、部屋、建物、ショッピングモールのような建物の集合体、イベント会場、等の、外部と区切られた区画を意味する。
（構成例）
（１）システム
図１は、この発明の第１実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶを含む追跡システムの全体構成を示す図である。追跡システムは、不特定多数が利用する施設に設置され、施設内に入場した発熱者を追跡する。本明細書における施設とは、例えば、部屋、建物、ショッピングモールのような建物の集合体、イベント会場、等の、外部と区切られた区画を意味する。
【0015】
そのために、例えば、施設の入口にサーモカメラＳＣＭが配置されると共に、施設内に複数台の監視カメラＣＭ１～ＣＭｎが分散配置されている。監視カメラＣＭ１～ＣＭｎは、可視光カメラである。これらサーモカメラＳＣＭ及び監視カメラＣＭ１～ＣＭｎは、例えば天井又は壁面に設置され、それぞれ予め設定された範囲を撮像する。例えば、監視カメラＣＭ１は、施設の入口に設置され、サーモカメラＳＣＭと共通する範囲又はサーモカメラＳＣＭの撮影範囲を包含する範囲を撮影する。サーモカメラＳＣＭは、撮影して得られた映像データ（非可視光画像）であるサーモデータを出力する。監視カメラＣＭ１～ＣＭｎは、撮影して得られた映像データを出力する。なお、サーモカメラＳＣＭを複数台設置するようにして良く、その場合には、各サーモカメラに対応させて可視光カメラである監視カメラを設置する。但し、サーモカメラの種類によっては、非可視光画像と同時に可視光画像も撮影可能なものも有り、必ずしも、可視光カメラをサーモカメラに対応して設置する必要はない。よって、入口に配置するサーモカメラＳＣＭについても、そのような種類のサーモカメラを利用することで、サーモカメラＳＣＭと共通する範囲又はサーモカメラＳＣＭの撮影範囲を包含する範囲を撮影するために、監視カメラＣＭ１を設置しなくても良い。換言すれば、入口のサーモカメラＳＣＭは、監視カメラＣＭ１と兼用することができる。
【0016】
サーモカメラＳＣＭには、サーモデータを表示するディスプレイＤＰが接続されている。施設の入口に配置された警備担当者は、このディスプレイＤＰに表示されたサーモデータ監視することで発熱者を発見し、その発熱者に施設への入場を遠慮してもらったり、検疫室等に案内したりすることができる。
【0017】
また追跡システムは、発熱者追跡装置として動作するサーバ装置ＳＶを備えている。サーバ装置ＳＶは、ネットワークＮＷを介して、上記各カメラＳＣＭ及びＣＭ１～ＣＭｎ、監視端末ＴＭとの間でそれぞれデータの伝送が可能となっている。
【0018】
監視端末ＴＭは、監視担当者が施設内の状況を監視したり、監視に必要な各種設定を行ったりするために使用するもので、例えばパーソナルコンピュータにより構成される。
【0019】
ネットワークＮＷとしては、例えば有線ＬＡＮ（Local Area Network）又は無線ＬＡＮが用いられるが、他のどのようなネットワークが使用されても良い。
【0020】
【0021】
サーバ装置ＳＶは、中央処理ユニット（Central Processing Unit：ＣＰＵ）等のハードウェアプロセッサを有する制御部１を備え、この制御部１に対し、バス５を介して、プログラム記憶部２及びデータ記憶部３を有する記憶ユニットと、通信インタフェース（以下、通信Ｉ／Ｆと略記する）４と、を接続したものとなっている。
【0022】
通信Ｉ／Ｆ４は、制御部１の制御の下、ネットワークＮＷにより定義される通信プロトコルを用いて、上記サーモカメラＳＣＭ、監視カメラＣＭ１～ＣＭｎ及び監視端末ＴＭとの間で各種データの伝送を行う。
【0023】
プログラム記憶部２は、例えば、記憶媒体としてＨＤＤ（Hard Disk Drive）又はＳＳＤ（Solid State Drive）等の随時書込み及び読出しが可能な不揮発性メモリと、ＲＯＭ（Read Only Memory）等の不揮発性メモリと、を組み合わせて構成されたものである。こプログラム記憶部２は、ＯＳ（Operating System）等のミドルウェアに加えて、この発明の第１実施形態に係る各種制御処理を実行するために必要なプログラムを格納する。
【0024】
データ記憶部３は、例えば、記憶媒体として、ＨＤＤ又はＳＳＤ等の随時書込み及び読出しが可能な不揮発性メモリと、ＲＡＭ（Random Access Memory）等の揮発性メモリと、を組み合わせたものである。このデータ記憶部３は、この発明の第１実施形態を実施するために必要な記憶部として、撮影データ記憶部３１と、人検出情報記憶部３２と、既知情報記憶部３３と、追跡結果記憶部３４と、を備えている。
【0025】
撮影データ記憶部３１は、サーモカメラＳＣＭから送られるサーモデータと監視カメラＣＭ１～ＣＭｎから送られる各映像データとを、発熱者を追跡するために必要な一定期間、例えば一日分、記憶するために使用される。
【0026】
人検出情報記憶部３２は、制御部１により監視カメラＣＭ１～ＣＭｎの映像データからそれぞれ検出された人の検出結果を表す情報を記憶するために使用される。人検出情報記憶部３２については、人の検出結果を表す情報を少なくとも一日分記憶していれば良いが、非発熱者を対象とした過去の移動経路を追跡可能とする場合には、複数日分の情報を保存しておくことが必要となる。
【0027】
既知情報記憶部３３は、施設内のフロアマップデータ及び監視カメラＣＭ１～ＣＭｎの撮影範囲である施設内の監視対象エリアを示すカメラ情報を記憶するために使用される。この既知情報記憶部３３の記憶内容は、フロアマップ又監視カメラの何れかに変更があったときに更新される。
【0028】
追跡結果記憶部３４は、制御部１により得られる、発熱者の追跡結果を表す情報を記憶するために使用される。この追跡結果記憶部３４の記憶内容は、発熱者が感染症に感染していることが後日発覚して、当該発熱者の移動経路に沿った消毒などの対応が必要になる場合を考慮して、数週間の間保持されることが望ましい。
【0029】
制御部１は、この発明の第１実施形態に係る処理機能として、撮影データ取得処理部１１と、人検出処理部１２と、人物追跡処理部１３と、出力情報生成出力処理部１４と、を備えている。これらの処理部１１～１４は、何れも例えばプログラム記憶部２に格納されたプログラムを制御部１のハードウェアプロセッサに実行させることにより実現される。
【0030】
撮影データ取得処理部１１は、サーモカメラＳＣＭから送信されネットワークＮＷを介して伝送されたサーモデータ及び監視カメラＣＭ１～ＣＭｎから送信されネットワークＮＷを介して伝送された各映像データを通信Ｉ／Ｆ４を介してそれぞれ受信する処理を行う。撮影データ取得処理部１１は、更に、それら受信されたサーモデータ及び各映像データを、送信元のサーモカメラＳＣＭを識別するサーモカメラＩＤ及び監視カメラＣＭ１～ＣＭｎを識別する監視カメラＩＤと関連付けて、撮影データ記憶部３１に記憶させる処理を行う。
【0031】
人検出処理部１２は、上記撮影データ記憶部３１から監視カメラＣＭ１～ＣＭｎの監視カメラＩＤ毎に映像データを読み込み、当該映像データに対しフレーム毎に画像解析処理を行って人の画像、例えば顔画像を抽出することで、人の画像を検出する処理を行う。そして、人検出処理部１２は、その人の画像の検出結果を表す情報を人検出情報記憶部３２に記憶させる処理を行う。
【0032】
図４は、人検出情報記憶部３２が備える人検出情報テーブル３２１の内容の一例を示す図である。人検出処理部１２は、人の画像の検出結果を表す情報である人検出情報を、人検出情報テーブル３２１に登録することで、人検出情報記憶部３２に記憶させる。人検出情報には、例えば、監視カメラＩＤと、検出日時と、検出した人の画像である顔画像に対し個別に付与される検出者ＩＤと、検出された顔画像のフレーム内における座標情報と、検出された顔画像と、が含まれる。一つのフレーム内に複数の人の画像が検出され得るので、一つの監視カメラＩＤと検出日時との組に対して、検出者ＩＤ、座標情報及び顔画像の組が複数記憶され得る。
【0033】
なお、人検出処理部１２は、映像データから抽出した顔画像を、既に人検出情報テーブル３２１に登録されている顔画像と比較し、両者の類似度が基準値を超える場合には、同一人物の顔画像であるとする。そして、人検出処理部１２は、その登録されている顔画像に対し設定されている検出者ＩＤを、当該抽出した顔画像の検出者ＩＤとして採用して、人検出情報テーブル３２１に記憶させる。したがって、人検出情報テーブル３２１には、一つの監視カメラＩＤに対して、同一検出者ＩＤを含む人検出情報が記憶され、また、複数の監視カメラＩＤに対しても、同一検出者ＩＤを含む人検出情報が記憶され得る。
【0034】
更に、人検出処理部１２は、上記撮影データ記憶部３１からサーモカメラＳＣＭのサーモカメラＩＤが付されたサーモデータを読み込み、当該サーモデータに基づき発熱者を検出する処理を行う。例えば、人検出処理部１２は、サーモデータから、基準温度（例えば、３７．５度）を超える領域を検出する。そして、人検出処理部１２は、その検出した領域のサイズが基準サイズの範囲に含まれる場合に、その領域を発熱者の一部として検出する処理を行う。つまり、検出した領域のサイズが、基準サイズの範囲から外れる場合は、人検出処理部１２は、その領域を発熱者の一部と見なさない。そして、人検出処理部１２は、その検出した発熱者の検出結果を表す情報を人検出情報記憶部３２に記憶させる処理を行う。ここで、人検出処理部１２は、サーモカメラＳＣＭのサーモデータにおける発熱者の座標に対応する監視カメラＣＭ１の映像データの座標に検出された人の検出者ＩＤと顔画像とを、発熱者の検出結果を表す情報とする。
【0035】
図５は、人検出情報記憶部３２が備える追跡対象人物情報テーブル３２２の内容の一例を示す図である。人検出処理部１２は、発熱者の検出結果を表す情報である追跡対象人物情報を、追跡対象人物情報テーブル３２２に登録することで、人検出情報記憶部３２に記憶させる。追跡対象人物情報には、例えば、検出者ＩＤと顔画像とが含まれる。なお、人検出処理部１２は、追跡対象人物情報テーブル３２２に既に登録されている検出者ＩＤと顔画像については、新たに追加登録しない。
【0036】
人物追跡処理部１３は、サーモカメラＳＣＭに対応する監視カメラＣＭ１を除いた監視カメラＣＭ２～ＣＭｎ毎に、人検出情報記憶部３２の人検出情報テーブル３２１に登録された顔画像と、人検出情報記憶部３２の追跡対象人物情報テーブル３２２に登録された発熱者の顔画像とを比較し、両者の類似度が基準値を超える場合に、人検出情報テーブル３２１に登録された顔画像を発熱者として検出する処理を行う。また、人物追跡処理部１３は、既知情報記憶部３３に記憶されているフロアマップ情報及びカメラ情報に基づいて、検出した発熱者のフロアマップ上の位置を示すフロアマップ位置を判定する処理を行う。そして、人物追跡処理部１３は、その位置判定結果を表す情報を追跡結果記憶部３４に記憶させる処理を行う。
【0037】
図６は、サーバ装置の追跡結果記憶部３４が備える追跡結果情報テーブル３４１の内容の一例を示す図である。人物追跡処理部１３は、発熱者の位置判定結果を表す情報である追跡結果情報を、追跡結果情報テーブル３４１に登録することで、追跡結果記憶部３４に記憶させる。追跡結果情報には、例えば、検出者ＩＤと、顔画像と、検出日時と、フロアマップ位置と、が含まれる。検出者ＩＤ、顔画像及び検出日時は、人検出情報テーブル３２１から取得される。
【0038】
更に、人物追跡処理部１３は、追跡結果情報テーブル３４１に記憶した検出者ＩＤ毎に、フロアマップ位置に基づいて、当該発熱者の施設内の移動経路を求める処理を行う。そして、人物追跡処理部１３は、その移動経路を表す情報を追跡結果記憶部３４に記憶させる処理を行う。
【0039】
図７は、追跡結果記憶部３４が備える経路情報テーブル３４２の内容の一例を示す図である。人物追跡処理部１３は、発熱者の移動経路を表す情報である経路情報を、経路情報テーブル３４２に登録することで、追跡結果記憶部３４に記憶させる。経路情報には、例えば、検出者ＩＤと、顔画像と、移動経路情報と、が含まれる。検出者ＩＤと顔画像は、追跡結果情報テーブル３４１から取得される。経路情報テーブル３４２は、この経路情報を、追跡日毎に記憶する。
【0040】
更に、経路情報は、当該発熱者の滞在情報を含むことができる。人物追跡処理部１３は、追跡結果情報テーブル３４１に記憶した検出者ＩＤ毎に、検出日時とフロアマップ位置とに基づいて、一定箇所に規定時間以上その発熱者が滞在しているか否か判定し、発熱者が滞在していた場合には、その滞在場所を含む滞在情報を経路情報テーブル３４２に登録する処理を行う。
【0041】
出力情報生成出力処理部１４は、監視端末ＴＭから送信されネットワークＮＷを介して伝送された検索日時を通信Ｉ／Ｆ４を介して受信して、その検索日時に該当する発熱者の移動経路を表す情報である経路情報を追跡結果記憶部３４の追跡結果情報テーブル３４１から検索する処理を行う。更に、出力情報生成出力処理部１４は、その検索結果を示す経路画面を出力情報として生成し、それを通信Ｉ／Ｆ４を介して送信することで、ネットワークＮＷを介して監視端末ＴＭに送信する処理を行う。
【0042】
【0043】
先ず、サーバ装置ＳＶの全体の処理手順を説明する。図８はこのサーバ装置ＳＶによる追跡処理の全体の処理手順を示すフローチャートである。
【0044】
サーバ装置ＳＶの制御部１は、監視端末ＴＭにおいて入力されるシステムの運用開始指示をステップＳ１で検出すると、先ずステップＳ２において、撮影データであるサーモデータ及び映像データをサーモカメラＳＣＭ及び監視カメラＣＭ１～ＣＭｎから取得し、撮影データ記憶部３１に記憶させる。追跡対象が車両等に比較して低速で移動する人であることを考慮すると、この撮影データの取得及び記憶は、１秒間に１～数回程度として良い。これにより、データ記憶部３の記憶容量の圧迫を防止すると共に、これに続く処理手順の実行時間を確保できるようになる。勿論、データ記憶部３の記憶容量及び制御部１を構成するハードウェアプロセッサの処理能力に余裕が有るのであれば、撮影データの取得及び記憶は、リアルタイムで行って良い。
【0045】
次に、サーバ装置ＳＶの制御部１は、ステップＳ３において、人検出処理を実行し、その検出結果を人検出情報記憶部３２に記憶させる。
【0046】
更に、サーバ装置ＳＶの制御部１は、ステップＳ４において、既知情報記憶部３３に記憶されている既知情報と人検出情報記憶部３２に記憶されている人検出結果とに基づいて発熱者の人物追跡処理を行い、その結果を追跡結果記憶部３４に記憶させる。
【0047】
また、サーバ装置ＳＶの制御部１は、上記ステップＳ２乃至ステップＳ４の処理手順と並行して、出力情報生成出力処理を実行する。即ち、制御部１は、検索日時を監視端末ＴＭから取得し、追跡結果記憶部３４に記憶されている当該検索日時の発熱者の人物追跡処理結果に基づいて出力情報を生成し、監視端末ＴＭに出力する。
【0048】
上記ステップＳ２乃至ステップＳ５により実行される各処理は、監視端末ＴＭからシステムの運用停止指示が送信され、この停止指示をサーバ装置ＳＶの制御部１がステップＳ６により検出すると、終了する。
【0049】
（１）人検出処理
図９は、サーバ装置ＳＶの制御部１により実行される上記ステップＳ３の人検出処理の処理手順の一例を示すフローチャートである。
図９は、サーバ装置ＳＶの制御部１により実行される上記ステップＳ３の人検出処理の処理手順の一例を示すフローチャートである。
【0050】
制御部１は、人検出処理部１２の制御の下、先ず、ステップＳ３０１において、監視カメラＣＭ１～ＣＭｎの監視カメラＩＤの中から一つを選択する。
【0051】
そして、ステップＳ３０２において、制御部１は、選択された監視カメラＩＤの映像データの１フレームを撮影データ記憶部３１から読み込む。なお、この読み込み先は、制御部１がワークエリアとして利用するデータ記憶部３のＲＡＭ等の揮発性メモリである。以下の説明における「読み込む」についても同様である。
【0052】
制御部１は、次に、ステップＳ３０３において、この読み込んだ映像データに対し所定の映像解析処理を行って、人の顔画像を抽出する。なお、このとき使用される映像解析処理としては、例えば予め生成された学習モデルを用いて映像フレームから人の顔画像を抽出する処理が使用される。なお、顔画像を抽出するための映像解析処理には種々の既存技術を利用可能であり、これらの既存技術は何れも周知なので説明は省略する。
【0053】
人検出処理部１２は、続いてステップＳ３０４において、映像フレーム毎に、上記抽出された人の顔画像の映像フレーム内における座標情報及び検出時刻を表す情報と、検出した顔画像に対し個別に付与される検出者ＩＤと、上記監視カメラＩＤと、を含む人検出情報を生成する。そして、制御部１は、その生成した人検出情報を人検出情報記憶部３２の人検出情報テーブル３２１に記憶させる。なお、人検出情報の生成先は、制御部１がワークエリアとして利用するデータ記憶部３のＲＡＭ等の揮発性メモリである。以下の説明における「生成」についても同様である。
【0054】
その後、制御部１は、全ての監視カメラＩＤの選択が終了したか否かをステップＳ３０５で判定する。そして、未選択の監視カメラＩＤが残っていれば、制御部１は、ステップＳ３０１に戻って次の監視カメラＩＤを選択し、ステップＳ３０２乃至ステップＳ３０４による一連の人の顔画像の検出処理を実行する。以後、同様に監視カメラＩＤが順次選択され、当該監視カメラＩＤに対応する映像データからフレーム毎に人の顔画像を検出する処理が繰り返し実行される。
【0055】
そして、全ての監視カメラＩＤの選択が終了すると、制御部１は、ステップＳ３０６において、サーモカメラＳＣＭのサーモカメラＩＤのサーモデータを撮影データ記憶部３１から読み込む。
【0056】
制御部１は、次に、ステップＳ３０７において、読み込んだサーモデータから、基準温度（例えば、３７．５度）を超える発熱者を検出する検出処理を実行する。
【0057】
そして、制御部１は、この発熱者の検出処理の結果、発熱者が存在するか否かをステップＳ３０８で判定する。発熱者が存在しなければ、制御部１は、この人検出処理を終了して、上記ステップＳ４の処理へと進む。
【0058】
これに対して、発熱者が検出された場合には、制御部１は、ステップＳ３０９において、サーモカメラＳＣＭに対応する監視カメラである監視カメラＣＭ１の監視カメラＩＤの人検出情報を、人検出情報記憶部３２の人検出情報テーブル３２１から読み込む。
【0059】
そして、制御部１は、ステップＳ３１０において、発熱者の検出結果を表す情報である、検出者ＩＤと顔画像を含む追跡対象人物情報を生成して、人検出情報記憶部３２の追跡対象人物情報テーブル３２２に記憶させる。その後、制御部１は、この人検出処理を終了して、上記ステップＳ４の処理へと進む。
【0060】
【0061】
制御部１は、人物追跡処理部１３の制御の下、先ずステップＳ４０１において、人検出情報記憶部３２の追跡対象人物情報テーブル３２２から追跡対象人物情報を一つ読み込む。
【0062】
次に、制御部１は、ステップＳ４０２において、監視カメラＣＭ１～ＣＭｎの監視カメラＩＤの中から一つを選択する。
【0063】
そして、制御部１は、ステップＳ４０３において、選択された監視カメラＩＤの人検出情報を人検出情報記憶部３２の人検出情報テーブル３２１から読み込む。
【0064】
ステップＳ４０４において、制御部１は、その読み込んだ人検出情報に含まれる顔画像を、上記ステップＳ４０１で読み込んだ追跡対象人物情報に含まれる顔画像と比較して、顔画像が類似するか否かを判定する。制御部１は、このステップＳ４０３における人検出情報の読み込みとステップＳ４０４における顔画像の類似判定を、選択された監視カメラＩＤの人検出情報の全てについて実施する。
【0065】
そして、制御部１は、ステップＳ４０５において、類似する顔画像が有ったか否かを判定する。類似する顔画像が無かったならば、制御部１は、後述するステップＳ４１１に進む。
【0066】
これに対して、類似する顔画像が有った場合には、制御部１は、その類似する顔画像の人物は、追跡対象人物である発熱者に該当すると判断して、ステップＳ４０６において、人検出情報記憶部３２の追跡対象人物情報テーブル３２２における該当人物の検出者ＩＤを、追跡対象人物情報の検出者ＩＤに書き換える。勿論、書き換えを行わなくても、両検出者ＩＤが同一であった場合も有り得る。
【0067】
次に、制御部１は、ステップＳ４０７において、追跡結果記憶部３４の追跡結果情報テーブル３４１から、その検出者ＩＤに対応する追跡結果情報を読み込む。なお、未だ当該検出者ＩＤに対応する追跡結果情報が追跡結果情報テーブル３４１に記憶されていない場合には、このステップＳ４０７では何も読み込まない。
【0068】
また、制御部１は、ステップＳ４０８において、既知情報記憶部３３より当該施設のフロアマップ情報及び選択している監視カメラＩＤのカメラ情報を読み込む。
【0069】
その後、ステップＳ４０９において、制御部１は、読み込んだフロアマップ情報及びカメラ情報に基づいて、人検出情報における該当人物の座標情報をフロア位置に変換する。
【0070】
そして、制御部１は、ステップＳ４１０において、上記ステップＳ４０７で読み込んだ追跡結果情報に、検出日時及びフロアマップ位置を追記して、追跡結果情報テーブル３４１に記憶させる。なお、上記ステップＳ４０７において記憶済みの追跡結果情報が存在せず、それを読み込めなかった場合には、制御部１は、追跡結果情報を新規に作成し、検出日時及びフロアマップ位置に加えて、検出者ＩＤと顔画像も登録して、追跡結果情報テーブル３４１に記憶させる。
【0071】
ここで、制御部１は、全ての監視カメラＩＤの選択が終了したか否かをステップＳ４１１で判定する。そして、未選択の監視カメラＩＤが残っていれば、制御部１は、ステップＳ４０２に戻って次の監視カメラＩＤを選択し、ステップＳ４０２乃至ステップＳ４１０による一連の追跡結果情報の生成処理を実行する。以後、同様に監視カメラＩＤが順次選択され、当該監視カメラＩＤに対応する人検出情報から発熱者として追跡対象人物情報に登録された人物に相当する人物を検出し、その検出した人物の当該施設内の位置を追跡結果情報として記憶していく処理が繰り返し実行される。
【0072】
そして、全ての監視カメラＩＤの選択が終了すると、制御部１は、ステップＳ４１２において、全ての追跡対象人物情報についての処理が終了したか否かを判定する。未処理の追跡対象人物情報が残っていれば、制御部１は、ステップＳ４０１に戻って次の追跡対象人物情報を読み出し、ステップＳ４０２乃至ステップＳ４１１による一連の追跡結果情報の生成処理を実行する。
【0073】
こうして全ての追跡対象人物情報についての処理が終了すると、制御部１は、ステップＳ４１３において、日報処理を行うタイミングであるか否かを判定する。この日報処理は、１日に複数回行うことができ、少なくとも１日１回行えば良い。例えば、日報処理は、当該施設に来訪者が存在しない時間、例えばショッピングモールであれば閉店時間から翌開店時間までの間、に行うことができる。日報処理を行うタイミングでなければ、制御部１は、この人物追跡処理を終了して、上記ステップＳ６の処理へと進む。
【0074】
これに対して、日報処理を行うタイミングであれば、制御部１は、ステップＳ４１４において、追跡結果記憶部３４の追跡結果情報テーブル３４１における追跡結果情報の検出者ＩＤの中から一つを選択する。そして、制御部１は、ステップＳ４１５において、選択された検出者ＩＤの追跡結果情報を追跡結果情報テーブル３４１から読み込む。
【0075】
ステップＳ４１６において、制御部１は、その読み込んだ追跡結果情報に含まれる検出者ＩＤと顔画像を含む経路情報を生成する。
【0076】
次に、制御部１は、ステップＳ４１７において、読み込んだ追跡結果情報に含まれる複数のフロアマップ位置に基づいて、検出者ＩＤで特定される発熱者である当該人物の施設内の移動経路を算出する。そして、ステップＳ４１８において、制御部１は、この算出した移動経路を移動経路情報として、上記ステップＳ４１６で生成した経路情報に追加する。
【0077】
その後、ステップＳ４１９において、制御部１は、読み込んだ追跡結果情報に含まれる複数の検出日時とフロアマップ位置とに基づいて、当該人物が規定時間以上、例えば１５分以上、滞在し続けた施設内の位置を判別する。例えば、一つの監視カメラに規定時間以上捕らえられたとき、滞在し続けたと判別することができる。この場合、連続して一つの監視カメラに捕らえられていなくても、１日のトータルで、一つのカメラに捕らえられた合計時間により判別するものとする。そして、制御部１は、ステップＳ４２０において、その判定結果により当該人物が規定時間以上滞在した位置についての滞在情報を、経路情報に追加する。当該人物が規定時間以上滞在した位置が存在しない場合には、滞在位置無しの値を持つ滞在情報が追加される。
【0078】
制御部１は、ステップＳ４２１において、こうして作成した検出者ＩＤ、顔画像、移動経路情報及び滞在情報を含む経路情報を、追跡結果記憶部３４の経路情報テーブル３４２に、その作成日に対応させて記憶させる。
【0079】
その後、制御部１は、全ての検出者ＩＤの選択が終了したか否かをステップＳ４２２で判定する。そして、未選択の検出者ＩＤが残っていれば、制御部１は、ステップＳ４１４に戻って次の検出者ＩＤを選択し、ステップＳ４１５乃至ステップＳ４２１による一連の経路情報の生成処理を実行する。以後、同様に検出者ＩＤが順次選択され、当該検出者ＩＤに対応する追跡結果情報から経路情報を生成し記憶していく処理が繰り返し実行される。
【0080】
そして、全ての検出者ＩＤの選択が終了すると、制御部１は、この人物追跡処理を終了して、上記ステップＳ６の処理へと進む。
【0081】
（３）出力情報の生成及び出力処理
図１１は、サーバ装置ＳＶの制御部１により実行される上記ステップＳ５の出力情報生成出力処理の処理手順を示すフローチャートである。
図１１は、サーバ装置ＳＶの制御部１により実行される上記ステップＳ５の出力情報生成出力処理の処理手順を示すフローチャートである。
【0082】
制御部１は、出力情報生成出力処理部１４の制御の下、先ず、ステップＳ５０１において、監視端末ＴＭから検索日時の入力が有ったか否かを判定する。監視端末ＴＭから検索日時の入力が無かった場合には、制御部１は、この出力情報生成出力処理を終了して、上記ステップＳ６へ進む。
【0083】
これに対して、監視端末ＴＭから検索日時の入力が有ると、制御部１は、ステップＳ５０２において、検索日時として指定された日時により追跡結果記憶部３４の経路情報テーブル３４２に記憶さている経路情報から、該当する追跡日を検索する。そして、制御部１は、ステップＳ５０３において、例えば、その検索された追跡日における検出者ＩＤと顔画像とを一覧形式で並べた検索結果画面を生成して、監視端末ＴＭに出力する。その後、制御部１は、所定時間の間、監視端末ＴＭからの追跡対象者の指定待ちとなる。即ち、監視端末ＴＭを操作する監視者が、検索結果画面に一覧表示された顔画像を閲覧して、その中から移動経路を確認するべき発熱者を指定するのを待つ。
【0084】
ステップＳ５０４において、制御部１は、監視端末ＴＭから追跡対象者の指定が有ったか否かを判定する。追跡対象者の指定が無かった場合には、制御部１は、この出力情報生成出力処理を終了して、上記ステップＳ６へ進む。
【0085】
これに対して、追跡対象者の指定が有った場合には、制御部１は、ステップＳ５０５において、経路情報テーブル３４２に記憶さているその指定された顔画像の検出者ＩＤの経路情報から移動経路情報と滞在情報を読み込む。
【0086】
そして、ステップＳ５０６において、制御部１は、移動経路情報に基づいて施設内の当該人物の移動経路を、既知情報記憶部３３に記憶されているフロアマップ情報で示されるマップ上にマッピングした経路画面を作成する。このとき、滞在情報に当該人物が規定時間以上滞在した位置が記録されている場合には、その位置を明示するマーク、例えば重点消毒箇所マーク、を経路画面におけるマップ上に付加する。そして、制御部１は、この作成した経路画面を監視端末ＴＭに出力する。その後、制御部１は、この出力情報生成出力処理を終了して、上記ステップＳ６へ進む。
【0087】
（作用・効果）
以上述べたようにこの発明の第１実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶでは、制御部１は、施設の入口に設置されたサーモカメラＳＣＭからのサーモデータに基づき発熱者を検出し、入口及び施設内に分散して設置された複数台の可視光カメラである監視カメラＣＭ１～ＣＭｎからの映像データより発熱者を検出する。また、サーバ装置ＳＶは、少なくとも、施設のフロアマップ情報と、複数台の監視カメラＣＭ１～ＣＭｎの設置状況を示すカメラ情報と、を含む既知情報を既知情報記憶部３３に記憶している。そして、制御部１は、発熱者の検出結果と既知情報とに基づいて、発熱者の施設内の移動経路と、発熱者が規定時間以上滞在していた滞在箇所と、を判別し、それら判別した発熱者の移動経路及び滞在箇所を追跡結果記憶部３４に記憶する。
従って、発熱者の施設内における移動経路を検出して保存しておけるようになる。
以上述べたようにこの発明の第１実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶでは、制御部１は、施設の入口に設置されたサーモカメラＳＣＭからのサーモデータに基づき発熱者を検出し、入口及び施設内に分散して設置された複数台の可視光カメラである監視カメラＣＭ１～ＣＭｎからの映像データより発熱者を検出する。また、サーバ装置ＳＶは、少なくとも、施設のフロアマップ情報と、複数台の監視カメラＣＭ１～ＣＭｎの設置状況を示すカメラ情報と、を含む既知情報を既知情報記憶部３３に記憶している。そして、制御部１は、発熱者の検出結果と既知情報とに基づいて、発熱者の施設内の移動経路と、発熱者が規定時間以上滞在していた滞在箇所と、を判別し、それら判別した発熱者の移動経路及び滞在箇所を追跡結果記憶部３４に記憶する。
従って、発熱者の施設内における移動経路を検出して保存しておけるようになる。
【0088】
また、サーバ装置ＳＶの制御部１は、監視端末ＴＭから出力対象の発熱者の指定を受けて、追跡結果記憶部３４から発熱者の移動経路及び滞在箇所を検索して、監視端末ＴＭへ出力する。
よって、発熱者の施設滞在時点よりも後日に、当該発熱者の施設内の移動経路及び例えば重点消毒が必要な箇所等の滞在位置を確認できるようになる。
よって、発熱者の施設滞在時点よりも後日に、当該発熱者の施設内の移動経路及び例えば重点消毒が必要な箇所等の滞在位置を確認できるようになる。
【0089】
［第２実施形態］
次に、この発明の第２実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶについて説明する。本第２実施形態は、不特定多数が利用する施設に加えて、例えば学校や会社等の特定多数が利用する施設を対象としている。ここでは、構成例、動作例及び作用・効果において上記第１実施形態と異なる部分のみを説明し、同様の部分についてはその説明を省略する。
次に、この発明の第２実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶについて説明する。本第２実施形態は、不特定多数が利用する施設に加えて、例えば学校や会社等の特定多数が利用する施設を対象としている。ここでは、構成例、動作例及び作用・効果において上記第１実施形態と異なる部分のみを説明し、同様の部分についてはその説明を省略する。
【0090】
（構成例）
第２実施形態においては、データ記憶部３の既知情報記憶部３３は、フロアマップ情報とカメラ情報とに加えて、店員、学生、会社員といった、当該施設内に滞在する特定人物に関する情報を記憶している。
第２実施形態においては、データ記憶部３の既知情報記憶部３３は、フロアマップ情報とカメラ情報とに加えて、店員、学生、会社員といった、当該施設内に滞在する特定人物に関する情報を記憶している。
【0091】
図１２は、サーバ装置ＳＶの既知情報記憶部３３が備える登録人物情報テーブル３３１の内容の一例を示す図である。登録人物情報テーブル３３１は、施設内に滞在する特定人物に関する情報である登録者情報を記憶している。登録者情報は、各登録者に一意に設定された登録者ＩＤとその顔画像、並びに、当該登録者についての氏名や所属といった説明情報を含む。
【0092】
また、第２実施形態においては、追跡結果記憶部３４に記憶される追跡結果情報テーブル３４１が、第１実施形態とは異なる。図１３は、第２実施形態における追跡結果情報テーブル３４１の内容の一例を示す図である。同図に示すように、追跡結果情報テーブル３４１に記憶される追跡結果情報は、各検出者ＩＤにおける各検出日時について、フロアマップ位置における登録者ＩＤが含まれ得る。登録者ＩＤが含まれない場合もあり得る。この追跡結果情報テーブル３４１における登録者ＩＤは、検出者ＩＤで示される発熱者がフロアマップ位置で示される位置で規定時間以上接触していた人物を特定するためのものである。
【0093】
なお、第２実施形態においては、追跡結果記憶部３４に経路情報、即ち経路情報テーブル３４２は記憶されない。
【0094】
（動作例）
第２実施形態においては、上記ステップＳ４の人物追跡処理及び上記ステップＳ５の出力情報生成出力処理の詳細が、上記第１実施形態と異なっている。
第２実施形態においては、上記ステップＳ４の人物追跡処理及び上記ステップＳ５の出力情報生成出力処理の詳細が、上記第１実施形態と異なっている。
【0095】
（１）人物追跡処理
図１４Ａ及び図１４Ｂは、サーバ装置ＳＶの制御部１により実行される上記ステップＳ４の人物追跡処理の処理手順の一例を示すフローチャートである。ここで、ステップＳ４０１乃至ステップＳ４０９の処理、及び、ステップＳ４１１及びステップＳ４１２の処理は、第１実施形態と同様であるので、それらの説明を省略する。
図１４Ａ及び図１４Ｂは、サーバ装置ＳＶの制御部１により実行される上記ステップＳ４の人物追跡処理の処理手順の一例を示すフローチャートである。ここで、ステップＳ４０１乃至ステップＳ４０９の処理、及び、ステップＳ４１１及びステップＳ４１２の処理は、第１実施形態と同様であるので、それらの説明を省略する。
【0096】
制御部１は、人物追跡処理部１３の制御の下、上記ステップＳ４１０において追跡結果情報を追跡結果情報テーブル３４１に記憶させる。このとき、追跡結果情報には、未だ登録者ＩＤが記憶されない。
【0097】
その後、制御部１は、ステップＳ４３１において、追跡結果情報に含まれる複数の検出日時とフロアマップ位置とに基づいて、検出者ＩＤの人物が規定時間以上、例えば１５分以上、施設内の一つの位置に滞在しているか否かを判別する。当該人物が規定時間以上滞在していなければ、制御部１は、上記ステップＳ４１１の処理へ進む。
【0098】
これに対して、当該人物が規定時間以上滞在していたならば、制御部１は、ステップＳ４３２において、既知情報記憶部３３が備える登録人物情報テーブル３３１から登録者情報を読み込む。
【0099】
次に、ステップＳ４３３において、制御部１は、追跡対象者以外で類似する顔画像を判定する。即ち、制御部１は、上記ステップＳ４０３で読み込んだ人検出情報における顔画像を上記ステップＳ４３２で読み込んだ登録者情報に含まれる顔画像と比較して、類似する顔画像を検出する。但し、読み込んだ人検出情報における全ての顔画像を対象とするのではなく、制御部１は、その内の、追跡対象者に相当する検出者ＩＤの顔画像を除き、更にその内の、上記規定時間以上の滞在期間に対応する検出日時に対応する顔画像を対象とする。
【0100】
そして、制御部１は、ステップＳ４３４において、類似する顔画像が有ったか否かを判定する。類似する顔画像が無かったならば、制御部１は、上記ステップＳ４１１に進む。
【0101】
これに対して、類似する顔画像が有った場合には、制御部１は、ステップＳ４３５において、それら類似する顔画像の上記規定時間以上の滞在期間内における存在時間を算出する。そして、制御部１は、ステップＳ４３６において、算出した存在時間が上記規定時間以上であるか否かを判別する。規定時間以上存在する顔画像が無ければ、制御部１は、上記ステップＳ４１１の処理へ進む。
【0102】
規定時間以上存在する顔画像が有る場合、制御部１は、ステップＳ４３７において、追跡対象者と類似顔画像の人物との距離を判定する。両者間の距離は、例えば、上記ステップＳ４０３で読み込んだ人検出情報における座標情報と、上記ステップＳ４０８で読み込んだカメラ情報と、に基づいて、判定することができる。
【0103】
そして、制御部１は、ステップＳ４３８において、この判定した距離により、追跡対象者が類似顔画像の人物から規定距離、例えば２ｍ以内に存在していたか否かを判定する。ここで、規定距離以内に存在していないならば、制御部１は、上記ステップＳ４１１に進む。
【0104】
これに対して、追跡対象者が類似顔画像の人物から規定距離内に存在していた場合には、制御部１は、ステップＳ４３９において、類似顔画像の人物が追跡対象者から上記規定距離以内に存在していた時間を算出する。そして、制御部１は、ステップＳ４４０において、算出した存在時間が上記規定時間以上であるか否かを判別する。規定時間以上存在する顔画像が無ければ、制御部１は、上記ステップＳ４１１の処理へ進む。
【0105】
規定時間以上存在する顔画像が有る場合、制御部１は、ステップＳ４４１において、その類似顔画像の人物の登録者ＩＤを特定する。そして、ステップＳ４４２において、制御部１は、追跡結果情報に、その特定した登録者ＩＤを追記して、追跡結果情報テーブル３４１に記憶させる。その後、制御部１は、上記ステップＳ４１１に進む。
【0106】
以上のようにして、追跡結果情報テーブル３４１には、図１３に示したような追跡結果情報が記憶されることができる。
【0107】
（２）出力情報の生成及び出力処理
図１５は、サーバ装置ＳＶの制御部１により実行される上記ステップＳ５の出力情報生成出力処理の処理手順を示すフローチャートである。
図１５は、サーバ装置ＳＶの制御部１により実行される上記ステップＳ５の出力情報生成出力処理の処理手順を示すフローチャートである。
【0108】
制御部１は、出力情報生成出力処理部１４の制御の下、先ず、ステップＳ５０１において、監視端末ＴＭから検索日時の入力が有ったか否かを判定する。監視端末ＴＭから検索日時の入力が無かった場合には、制御部１は、この出力情報生成出力処理を終了して、上記ステップＳ６へ進む。
【0109】
これに対して、監視端末ＴＭから検索日時の入力が有ると、制御部１は、ステップＳ５１１において、検索日時として指定された日時により追跡結果記憶部３４の追跡結果情報テーブル３４１に記憶さている追跡結果情報から、該当する検出日時を検索する。そして、制御部１は、ステップＳ５０３において、例えば、その検索された検出日時における検出者ＩＤと顔画像とを一覧形式で並べた検索結果画面を生成して、監視端末ＴＭに出力する。その後、制御部１は、所定時間の間、監視端末ＴＭからの追跡対象者の指定待ちとなる。即ち、監視端末ＴＭを操作する監視者が、検索結果画面に一覧表示された顔画像を閲覧して、その中から移動経路を確認するべき発熱者を指定するのを待つ。
【0110】
ステップＳ５０４において、監視端末ＴＭから追跡対象者の指定が有った場合、制御部１は、ステップＳ５１２において、追跡結果情報テーブル３４１に記憶さているその指定された顔画像の検出者ＩＤの追跡結果情報を読み込む。また、制御部１は、ステップＳ５１３において、既知情報記憶部３３に記憶されているフロアマップ情報を読み込む。
【0111】
そして、ステップＳ５１４において、制御部１は、追跡結果情報に基づいて施設内の当該人物の移動経路を、フロアマップ情報で示されるマップ上にマッピングした経路画面を作成する。
【0112】
その後、制御部１は、ステップＳ５１５において、当該検出者ＩＤの人物が規定時間以上滞在した位置を判別する。この位置は、追跡結果情報に登録者ＩＤが記憶されているフロアマップ位置である。
【0113】
そして、制御部１は、ステップＳ５１６において、その規定時間以上滞在した位置を明示するマーク、例えば重点消毒箇所マーク、を経路画面におけるマップ上の該当位置に付加する。
【0114】
更に、制御部１は、ステップＳ５１７において、追跡結果情報より、その該当位置に対応する登録者ＩＤを特定する。次に、制御部１は、ステップＳ５１８において、既知情報記憶部３３が備える登録人物情報テーブル３３１より、その登録者ＩＤに対応する顔画像及び説明情報を読み込む。そして、ステップＳ５１９において、制御部１は、その読み込んだ顔画像及び説明情報を、追跡画面に追加する。
【0115】
制御部１は、ステップＳ５２０において、こうして作成した経路画面を監視端末ＴＭに出力する。その後、制御部１は、この出力情報生成出力処理を終了して、上記ステップＳ６へ進む。
【0116】
（作用・効果）
以上述べたようにこの発明の第２実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶでは、既知情報記憶部３３に既知情報として更に複数の登録者についての登録者情報を記憶させておき、制御部１は、複数台の監視カメラＣＭ１～ＣＭｎからの映像データより、発熱者以外の人物も検出し、その検出結果と既知情報とに基づいて、発熱者が規定時間以上滞在していた滞在箇所において、発熱者から規定距離以内に規定時間以上滞在していた発熱者以外の人物を判別する。そして、制御部１は、追跡結果記憶部３４に、発熱者の移動経路及び滞在箇所に加えて、発熱者以外の人物を発熱者に対する接触者として記憶する。
これにより、発熱者に対する濃厚接触者を特定することが可能となる。
以上述べたようにこの発明の第２実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶでは、既知情報記憶部３３に既知情報として更に複数の登録者についての登録者情報を記憶させておき、制御部１は、複数台の監視カメラＣＭ１～ＣＭｎからの映像データより、発熱者以外の人物も検出し、その検出結果と既知情報とに基づいて、発熱者が規定時間以上滞在していた滞在箇所において、発熱者から規定距離以内に規定時間以上滞在していた発熱者以外の人物を判別する。そして、制御部１は、追跡結果記憶部３４に、発熱者の移動経路及び滞在箇所に加えて、発熱者以外の人物を発熱者に対する接触者として記憶する。
これにより、発熱者に対する濃厚接触者を特定することが可能となる。
【0117】
また、制御部１は、監視端末ＴＭからの出力対象の発熱者の指定を受けて、追跡結果記憶部３４から発熱者の移動経路、滞在箇所、及び発熱者以外の人物を検索して、監視端末ＴＭに出力する。
よって、発熱者の施設内の移動経路及び例えば重点消毒が必要な箇所等の滞在位置を確認できると共に、当該発熱者と長時間接触した人物を報告することが可能となる。
よって、発熱者の施設内の移動経路及び例えば重点消毒が必要な箇所等の滞在位置を確認できると共に、当該発熱者と長時間接触した人物を報告することが可能となる。
【0118】
［第３実施形態］
次に、この発明の第３実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶについて説明する。本第３実施形態は、顔画像に加えて全身画像を利用して発熱者を追跡できるようにしたものである。ここでは、構成例、動作例及び作用・効果において上記第２実施形態と異なる部分のみを説明し、同様の部分についてはその説明を省略する。
次に、この発明の第３実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶについて説明する。本第３実施形態は、顔画像に加えて全身画像を利用して発熱者を追跡できるようにしたものである。ここでは、構成例、動作例及び作用・効果において上記第２実施形態と異なる部分のみを説明し、同様の部分についてはその説明を省略する。
【0119】
（構成例）
図１６は、この発明の第３実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶを備える追跡システムの全体構成の一例を示す図である。
図１６は、この発明の第３実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶを備える追跡システムの全体構成の一例を示す図である。
【0120】
第３実施形態では、サーモカメラＳＣＭとサーバ装置ＳＶとの間に、映像解析エンジンＶＥ０が配置され、監視カメラＣＭ１～ＣＭｎとサーバ装置ＳＶとの間に、映像解析エンジンＶＥ１～ＶＥｎが配置されている。なお、映像解析エンジンＶＥ１～ＶＥｎは監視カメラＣＭ１～ＣＭｎに対し一対一に配置せず、複数台のカメラに対しそれより少数の映像解析エンジンを配置して、少数の映像解析エンジンにより複数台の監視カメラの映像データを一括処理するようにしても良い。また、サーモカメラＳＣＭ及び監視カメラＣＭ１～ＣＭｎが演算装置を持つ場合には、サーモカメラＳＣＭ及び監視カメラＣＭ１～ＣＭｎ自体に映像解析エンジンを搭載し、後述の処理を行っても良い。或いは、映像解析エンジンＶＥ０～ＶＥｎは、サーバ装置ＳＶの機能として提供しても良い。
【0121】
映像解析エンジンＶＥ０は、サーモカメラＳＣＭからの映像データ（非可視光画像）であるサーモデータを解析し、映像解析エンジンＶＥ１～ＶＥｎは、監視カメラＣＭ１～ＣＭｎからの映像データを解析する。例えば、映像解析エンジンＶＥ１～ＶＥｎはそれぞれ、対応する監視カメラＣＭ１～ＣＭｎから出力される映像データに含まれる各画像フレームから、例えば学習処理により事前に生成された学習モデルを用いて、顔画像及び／又は全身画像を検出し、顔画像及び／又は全身画像を含む映像解析結果を出力する。即ち、画像フレーム中の人物は、必ずしも顔と全身の両方が写るとは限らないため、顔画像と全身画像の何れか一方しか検出できない場合もあり得る。映像解析結果は、それら顔画像及び／又は全身画像に加えて、顔画像の座標及び／又は全身画像の座標、顔画像の画像特徴量及び／又は全身画像の画像特徴量、等を含むことができる。また、映像解析エンジンＶＥ０は、対応するサーモカメラＳＣＭから出力される映像データに含まれる各画像フレームから、温度別領域を検出し、温度別領域に関する情報を含む映像解析結果を出力する。
【0122】
図１７は、第３実施形態におけるサーバ装置ＳＶのソフトウェア構成の一例を示すブロック図である。図３に示した第１及び第２実施形態におけるサーバ装置ＳＶの構成例に対し、制御部１は、処理機能として、撮影データ取得処理部１１の代わりに、解析データ取得処理部１５を有し、また、人検出処理部１２を備えていない。また、データ記憶部３は、撮影データ記憶部３１を備えていない。
【0123】
解析データ取得処理部１５は、映像解析エンジンＶＥ０から送信されネットワークＮＷを介して伝送された温度別領域に関する情報を含む映像解析結果であるサーモ解析データを通信Ｉ／Ｆ４を介して受信する処理を行う。また、解析データ取得処理部１５は、映像解析エンジンＶＥ１～ＶＥｎから送信されネットワークＮＷを介して伝送された顔画像及び／又は全身画像を含む映像解析結果である映像解析データを通信Ｉ／Ｆ４を介して受信する処理を行う。撮影データ取得処理部１１は、更に、映像解析エンジンＶＥ０からのサーモ解析データより基準温度を超える領域を検出することで、発熱者を検出する処理を行う。そして、撮影データ取得処理部１１は、映像解析データに基づいて人検出情報を生成し、この人検出情報と発熱者の検出結果とに基づいて追跡対象人物情報を生成し、それら人検出情報及び追跡対象人物情報を人検出情報記憶部３２に記憶させる処理を行う。
【0124】
図１８は、第３実施形態における人検出情報記憶部３２が備える人検出情報テーブル３２１の内容の一例を示す図である。図４に示した第１及び第２実施形態における人検出情報テーブル３２１では、検出者ＩＤに対応する顔画像が記憶されるが、第３実施形態における人検出情報テーブル３２１では、それに代えて、顔情報と全身情報とが記憶される。顔情報は、顔画像と顔画像の画像特徴量と顔画像の座標とを含む。全身情報は、全身画像と全身画像の画像特徴量と全身画像の座標とを含む。なお、検出者ＩＤに対して必ずしも顔情報と全身情報の両方が記憶されるとは限らず、何れか一方のみが記憶される場合もあり得る。
【0125】
図１９は、第３実施形態における人検出情報記憶部３２が備える追跡対象人物情報テーブル３２２の内容の一例を示す図である。図５に示した第１及び第２実施形態における追跡対象人物情報テーブル３２２では、検出者ＩＤに対応する顔画像が記憶されるが、第３実施形態における追跡対象人物情報テーブル３２２では、それに代えて、顔画像と顔画像の画像特徴量とを含む顔情報と、全身画像と全身画像の画像特徴量とを含む全身情報と、が記憶される。なお、検出者ＩＤに対して必ずしも顔情報と全身情報の両方が記憶されるとは限らず、何れか一方のみが記憶される場合もあり得る。
【0126】
図２０は、第３実施形態における既知情報記憶部３３が備える登録人物情報テーブル３３１の内容の一例を示す図である。図１２に示した第２実施形態における登録人物情報テーブル３３１では、登録者ＩＤに対応する顔画像が記憶されるが、第３実施形態における登録人物情報テーブル３３１では、それに代えて、顔画像と顔画像の画像特徴量とを含む顔情報と、全身画像と全身画像の画像特徴量とを含む全身情報と、が記憶される。
【0127】
図２１は、第３実施形態における追跡結果記憶部３４が備える追跡結果情報テーブル３４１の内容の一例を示す図である。図１３に示した第２実施形態における追跡結果情報テーブル３４１では、検出者ＩＤに対応する顔画像が記憶されるが、第３実施形態における追跡結果情報テーブル３４１では、それに代えて、顔画像と顔画像の画像特徴量とを含む顔情報と、全身画像と全身画像の画像特徴量とを含む全身情報と、が記憶される。なお、検出者ＩＤに対して必ずしも顔情報と全身情報の両方が記憶されるとは限らず、何れか一方のみが記憶される場合もあり得る。
【0128】
【0129】
図２２は、第３実施形態におけるサーバ装置ＳＶによる追跡処理の全体の処理手順の一例を示すフローチャートである。第３実施形態においては、上記ステップＳ２の処理を実行しない。そして、上記ステップＳ３の人検出処理、上記ステップＳ４の人物追跡処理及び上記ステップＳ５の出力情報生成出力処理のそれぞれにおける処理手順の詳細が、上記第2実施形態と異なっている。
【0130】
（１）人検出処理
図２３は、第３実施形態におけるサーバ装置ＳＶの制御部１により実行される上記ステップＳ３の人検出処理の処理手順の一例を示すフローチャートである。
図２３は、第３実施形態におけるサーバ装置ＳＶの制御部１により実行される上記ステップＳ３の人検出処理の処理手順の一例を示すフローチャートである。
【0131】
制御部１は、解析データ取得処理部１５の制御の下、先ず、ステップＳ３０１において、監視カメラＣＭ１～ＣＭｎの監視カメラＩＤの中から一つを選択する。
【0132】
そして、ステップＳ３２１において、制御部１は、選択された監視カメラＩＤの映像解析エンジンから映像解析データを受信する。
【0133】
制御部１は、ステップＳ３０４において、人検出情報を生成し、その生成した人検出情報を人検出情報記憶部３２の人検出情報テーブル３２１に記憶させる。但し、本実施形態においては、制御部１は、映像解析エンジンから受信した映像解析データに基づいて人検出情報を生成する。即ち、制御部１は、映像解析データに含まれる顔情報及び／又は全身情報と、顔画像及び／又は全身画像に対し個別に付与される検出者ＩＤと、上記監視カメラＩＤと、現在時刻である検出時刻を表す情報と、を含む人検出情報を生成する。
【0134】
その後、制御部１は、全ての監視カメラＩＤの選択が終了したか否かをステップＳ３０５で判定する。そして、未選択の監視カメラＩＤが残っていれば、制御部１は、ステップＳ３０１に戻って次の監視カメラＩＤを選択し、ステップＳ３２１及びステップＳ３０４による一連の人検出情報の生成処理を実行する。以後、同様に監視カメラＩＤが順次選択され、当該監視カメラＩＤに対応する映像解析エンジンからの映像解析データに基づいて人検出情報を生成する処理が繰り返し実行される。
【0135】
そして、全ての監視カメラＩＤの選択が終了すると、制御部１は、ステップＳ３２２において、サーモカメラＳＣＭのサーモカメラＩＤの映像解析エンジンＶＥ０からサーモ解析データを受信する。
【0136】
制御部１は、次に、ステップＳ３０７において、基準温度（例えば、３７．５度）を超える発熱者を検出する検出処理を実行する。但し、本実施形態においては、制御部１は、映像解析エンジンＶＥ０から受信したサーモ解析データに基づいて、発熱者を検出する。
【0137】
以降のステップＳ３０８乃至ステップＳ３１０の処理は、ステップＳ３０９で読み込まれる人検出情報及びステップＳ３１０で生成される追跡対象人物情報が顔情報及び／又は全身情報を含む点を除いて、上記第１及び第２実施形態と同様である。よって、それらの説明は省略する。
【0138】
【0139】
制御部１は、人物追跡処理部１３の制御の下、先ずステップＳ４０１において、人検出情報記憶部３２の追跡対象人物情報テーブル３２２から追跡対象人物情報を一つ読み込む。追跡対象人物情報は、顔情報及び／又は全身情報を含む。
【0140】
次に、制御部１は、ステップＳ４０２において、監視カメラＣＭ１～ＣＭｎの監視カメラＩＤの中から一つを選択する。
【0141】
そして、制御部１は、ステップＳ４０３において、選択された監視カメラＩＤの人検出情報を人検出情報記憶部３２の人検出情報テーブル３２１から読み込む。人検出情報は、顔情報及び／又は全身情報を含む。
【0142】
ステップＳ４０４において、制御部１は、その読み込んだ人検出情報を、上記ステップＳ４０１で読み込んだ追跡対象人物情報と比較して、顔画像が類似するか否かを判定する。上記第１及び第２実施形態では、顔画像同士を比較しており、本実施形態においても顔画像同士を比較しても良い。或いは、本実施形態では、人検出情報及び追跡対象人物情報に含まれる顔画像の画像特徴量同士を比較することで、顔画像の類似度を判定するようにしても良い。
【0143】
そして、制御部１は、ステップＳ４０５において、類似する顔画像が有ったか否かを判定する。類似する顔画像が有った場合には、制御部１は、ステップＳ４０６に進み、無かった場合には、ステップＳ４５１に進む。
【0144】
ステップＳ４５１において、制御部１は、上記ステップＳ４０３で読み込んだ人検出情報を、上記ステップＳ４０１で読み込んだ追跡対象人物情報と比較して、全身画像が類似するか否かを判定する。即ち、制御部１は、人検出情報及び追跡対象人物情報に含まれる全身画像同士、或いは全身画像の画像特徴量同士を比較することで、全身画像の類似度を判定する。制御部１は、ステップＳ４０３における人検出情報の読み込みとステップＳ４０４における顔画像の類似判定及びステップＳ４５１における全身画像の類似判定とを、選択された監視カメラＩＤの人検出情報の全てについて実施する。
【0145】
そして、制御部１は、ステップＳ４５２において、類似する全身画像が有ったか否かを判定する。類似する全身画像が有った場合には、制御部１は、ステップＳ４０６に進み、無かった場合には、ステップＳ４１１に進む。
【0146】
ステップＳ４０６乃至ステップＳ４１２の処理は、上記第１及び第２実施形態と同様である。但し、本実施形態では、追跡結果情報に記憶するフロアマップ位置は、人検出情報の顔情報及び／又は全身情報における顔画像及び／又は全身画像の座標情報から変換される。人検出情報に顔画像と全身画像の両方の座標情報が含まれる場合には、例えば、顔画像の座標情報を優先使用する。また、ステップＳ４０７において記憶済みの追跡結果情報が存在せず、それを読み込めなかった場合には、制御部１は、追跡結果情報を新規に作成し、検出日時及びフロアマップ位置に加えて、検出者ＩＤと顔情報又は全身情報も登録して、追跡結果情報テーブル３４１に記憶させる。
【0147】
また、ステップＳ４３１において、検出者ＩＤの人物が規定時間以上、施設内の一つの位置に滞在していると判別した場合には、制御部１は、ステップＳ４３２において、既知情報記憶部３３が備える登録人物情報テーブル３３１から登録者情報を読み込む。登録者情報は、顔画像とその画像特徴量を含む顔情報と、全身画像とその画像特徴量を含む全身情報と、の両方を含む。
【0148】
次に、ステップＳ４３３において、制御部１は、追跡対象者以外で類似する顔画像を判定する。即ち、制御部１は、上記ステップＳ４０３で読み込んだ人検出情報の内、追跡対象者に相当する検出者ＩＤの顔情報を除いて、上記規定時間以上の滞在期間に対応する検出日時のものにおける顔情報を対象として、上記ステップＳ４３２で読み込んだ登録者情報に含まれる顔情報と比較して、類似する顔画像を検出する。具体的には、制御部１は、顔情報に含まれる顔画像同士、或いは、顔画像の画像特徴量同士を比較することで、顔画像の類似度を判定する。
【0149】
そして、制御部１は、ステップＳ４３４において、類似する顔画像が有ったか否かを判定する。類似する顔画像が有った場合には、制御部１は、ステップＳ４３７に進み、無かった場合には、ステップＳ４５３に進む。
【0150】
ステップＳ４３７乃至ステップＳ４４２の処理は、上記第２実施形態と同様である。但し、ステップＳ４３７での追跡対象者と類似顔画像の人物との距離の判定においては、上記ステップＳ４０３で読み込んだ人検出情報における顔情報に含まれる顔画像の座標情報が利用される。また、ステップＳ４３６において規定時間以上存在する顔画像が無いと判断した場合、ステップＳ４３８において追跡対象者が類似顔画像の人物から規定距離内に存在していないと判断した場合、及び、ステップＳ４４０において規定時間以上存在する顔画像が無いと判断した場合、本実施形態では、制御部１は、ステップＳ４５３に進む。
【0151】
ステップＳ４５３において、制御部１は、追跡対象者以外で類似する全身画像を判定する。即ち、制御部１は、上記ステップＳ４０３で読み込んだ人検出情報の内、追跡対象者に相当する検出者ＩＤの全身情報を除いて、上記規定時間以上の滞在期間に対応する検出日時のものにおける全身情報を対象として、上記ステップＳ４３２で読み込んだ登録者情報に含まれる全身情報と比較して、類似する全身画像を検出する。具体的には、制御部１は、全身情報に含まれる全身画像同士、或いは、全身画像の画像特徴量同士を比較することで、全身画像の類似度を判定する。
【0152】
そして、制御部１は、ステップＳ４５４において、類似する全身画像が有ったか否かを判定する。類似する全身画像が有った場合には、制御部１は、ステップＳ４５５に進み、無かった場合には、ステップＳ４１１に進む。
【0153】
これに対して、類似する全身画像が有った場合には、制御部１は、ステップＳ４５５において、それら類似する全身画像の上記規定時間以上の滞在期間内における存在時間を算出する。そして、制御部１は、ステップＳ４５６において、算出した存在時間が上記規定時間以上であるか否かを判別する。規定時間以上存在する全身画像が無ければ、制御部１は、上記ステップＳ４１１の処理へ進む。
【0154】
規定時間以上存在する全身画像が有る場合、ステップＳ４５７において、制御部１は、追跡対象者と類似全身画像の人物との距離を判定する。両者間の距離は、例えば、上記ステップＳ４０３で読み込んだ人検出情報における全身情報に含まれる全身画像の座標情報と、上記ステップＳ４０８で読み込んだカメラ情報と、に基づいて、判定することができる。
【0155】
そして、制御部１は、ステップＳ４５８において、この判定した距離により、追跡対象者が類似全身画像の人物から規定距離、例えば２ｍ以内に存在していたか否かを判定する。ここで、規定距離以内に存在していないならば、制御部１は、上記ステップＳ４１１に進む。
【0156】
これに対して、追跡対象者が類似全身画像の人物から規定距離内に存在していた場合には、制御部１は、ステップＳ４５９において、類似全身画像の人物が追跡対象者から上記規定距離以内に存在していた時間を算出する。そして、制御部１は、ステップＳ４６０において、算出した存在時間が上記規定時間以上であるか否かを判別する。規定時間以上存在する全身画像が無ければ、制御部１は、上記ステップＳ４１１の処理へ進む。
【0157】
規定時間以上存在する全身画像が有る場合、制御部１は、ステップＳ４６１において、その類似全身画像の人物の登録者ＩＤを特定する。
【0158】
その後は、制御部１は、ステップＳ４６２において、上記ステップＳ４４２と同様、追跡結果情報に、その特定した登録者ＩＤを追記して、追跡結果情報テーブル３４１に記憶させることとなる。
【0159】
（３）出力情報の生成及び出力処理
図２５は、第３実施形態におけるサーバ装置ＳＶの制御部１により実行される上記ステップＳ５の出力情報生成出力処理の処理手順を示すフローチャートである。
図２５は、第３実施形態におけるサーバ装置ＳＶの制御部１により実行される上記ステップＳ５の出力情報生成出力処理の処理手順を示すフローチャートである。
【0160】
制御部１は、出力情報生成出力処理部１４の制御の下、先ず、ステップＳ５０１において、監視端末ＴＭから検索日時の入力が有ったか否かを判定する。監視端末ＴＭから検索日時の入力が無かった場合には、制御部１は、この出力情報生成出力処理を終了して、上記ステップＳ６へ進む。
【0161】
これに対して、監視端末ＴＭから検索日時の入力が有ると、制御部１は、ステップＳ５１１において、検索日時として指定された日時により追跡結果記憶部３４の追跡結果情報テーブル３４１に記憶さている追跡結果情報から、該当する検出日時を検索する。そして、制御部１は、ステップＳ５０３において、例えば、その検索された検出日時における検出者ＩＤと顔情報又は全身情報に含まれる顔画像又は全身画像とを一覧形式で並べた検索結果画面を生成して、監視端末ＴＭに出力する。その後、制御部１は、所定時間の間、監視端末ＴＭからの追跡対象者の指定待ちとなる。即ち、監視端末ＴＭを操作する監視者が、検索結果画面に一覧表示された顔画像又は全身画像を閲覧して、その中から移動経路を確認するべき発熱者を指定するのを待つ。
【0162】
ステップＳ５０４において、監視端末ＴＭから追跡対象者の指定が有った場合、制御部１は、ステップＳ５１２において、追跡結果情報テーブル３４１に記憶さているその指定された顔画像又は全身画像を含む顔情報又は全身情報の検出者ＩＤの追跡結果情報を読み込む。
【0163】
その後のステップＳ５１３乃至ステップＳ５１７の処理は、第２実施形態と同様である。
【0164】
ステップＳ５３１において、制御部１は、既知情報記憶部３３が備える登録人物情報テーブル３３１より、その登録者ＩＤに対応する顔情報及び全身情報に含まれる顔画像及び全身画像と説明情報とを読み込む。そして、ステップＳ５３２において、制御部１は、その読み込んだ顔画像、全身画像及び説明情報を、追跡画面に追加する。
【0165】
制御部１は、ステップＳ５２０において、こうして作成した経路画面を監視端末ＴＭに出力する。その後、制御部１は、この出力情報生成出力処理を終了して、上記ステップＳ６へ進む。
【0166】
（作用・効果）
以上述べたようにこの発明の第３実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶでは、制御部１は、施設の入口に設置されたサーモカメラＳＣＭからのサーモデータに基づき発熱者を検出したとき、入口に設置された監視カメラＣＭ１の映像データより発熱者の顔画像及び／又は全身画像である第１の画像を取得し、また、施設内に分散して設置された複数台の監視カメラＣＭ２～ＣＭｎからの映像データより人物の顔画像及び／又は全身画像である第２の画像を取得して、この第２の画像の中から第１の画像に対応する画像を発熱者の画像として取得する。そして、制御部１は、発熱者の画像である第２の画像を取得する元となった監視カメラの設置状況に基づいて、発熱者の施設内の移動経路を判別する。
このように、全身画像も利用して発熱者を検出することで、顔画像が取得できない状態で発熱者が施設内を移動していたとしても、その移動経路を判別することが可能となる。
以上述べたようにこの発明の第３実施形態に係る発熱者追跡装置として動作するサーバ装置ＳＶでは、制御部１は、施設の入口に設置されたサーモカメラＳＣＭからのサーモデータに基づき発熱者を検出したとき、入口に設置された監視カメラＣＭ１の映像データより発熱者の顔画像及び／又は全身画像である第１の画像を取得し、また、施設内に分散して設置された複数台の監視カメラＣＭ２～ＣＭｎからの映像データより人物の顔画像及び／又は全身画像である第２の画像を取得して、この第２の画像の中から第１の画像に対応する画像を発熱者の画像として取得する。そして、制御部１は、発熱者の画像である第２の画像を取得する元となった監視カメラの設置状況に基づいて、発熱者の施設内の移動経路を判別する。
このように、全身画像も利用して発熱者を検出することで、顔画像が取得できない状態で発熱者が施設内を移動していたとしても、その移動経路を判別することが可能となる。
【0167】
また、サーバ装置ＳＶは、監視カメラＣＭ１～ＣＭｎからの映像データに対し映像解析を行う映像解析エンジンＶＥ１～ＶＥｎの画像解析結果を利用する。
これにより、制御部１は、映像データから人の顔画像又は全身画像を検出する必要が無いので、処理の高速化が図れる。或いは、制御部１を構成するハードウェアプロセッサとして処理能力をそれ程必要としない安価な製品を使用できるようになる。
これにより、制御部１は、映像データから人の顔画像又は全身画像を検出する必要が無いので、処理の高速化が図れる。或いは、制御部１を構成するハードウェアプロセッサとして処理能力をそれ程必要としない安価な製品を使用できるようになる。
【0168】
更に、制御部１は、顔画像又は全身画像の画像特徴量により画像の類似判定処理を行う。
よって、類似判定処理に要する時間の短縮化が図れる。
よって、類似判定処理に要する時間の短縮化が図れる。
【0169】
［その他の実施形態］
各実施形態では、人検出処理の上記ステップＳ３１０において、検出者ＩＤと顔画像及び／又は全身画像を含む追跡対象人物情報を生成するようにしている。この追跡対象人物情報を生成する際に、登録者情報を参照して、検出者ＩＤの代わりに登録者ＩＤを用いるようしても良い。更に、上記ステップＳ５の出力情報生成出力処理において登録者情報を参照して顔画像及び／又は全身画像を取得することも可能であるので、検出者が登録者である場合には、追跡対象人物情報に顔画像及び／又は全身画像を含めなくても良い。このように画像情報を記憶しないことで、データ記憶部３の記憶容量の圧迫を防止できる。
各実施形態では、人検出処理の上記ステップＳ３１０において、検出者ＩＤと顔画像及び／又は全身画像を含む追跡対象人物情報を生成するようにしている。この追跡対象人物情報を生成する際に、登録者情報を参照して、検出者ＩＤの代わりに登録者ＩＤを用いるようしても良い。更に、上記ステップＳ５の出力情報生成出力処理において登録者情報を参照して顔画像及び／又は全身画像を取得することも可能であるので、検出者が登録者である場合には、追跡対象人物情報に顔画像及び／又は全身画像を含めなくても良い。このように画像情報を記憶しないことで、データ記憶部３の記憶容量の圧迫を防止できる。
【0170】
また、第１及び第２実施形態では、人物追跡処理の上記ステップＳ４０４において、各監視カメラＣＭ１～ＣＭｎからの映像データから検出した顔画像と発熱者の顔画像とを比較している。第１及び第２実施形態においても、ステップＳ３の人検出処理において、検出した顔画像から画像特徴量を求めて、人検出情報及び追跡対象人物情報に顔画像に加えて画像特徴量も記憶しておき、ステップＳ４０４で比較を行う際には、それら画像特徴量同士の比較を行うようにしても良い。
【0171】
また、第３実施形態における上記ステップＳ５の出力情報生成出力処理において、上記ステップＳ５２０で生成する経路画面には、第２実施形態と同様、接触者の顔画像のみを含める、つまり、全身画像は含めないようにしても良い。
【0172】
また、図８乃至図１１、図１４Ａ乃至図１５、及び図２２乃至図２５のフローチャートに示した処理ステップの順序は一例であり、この順に限定するものではない。例えば、図１０ＡのステップＳ４０７の処理とステップＳ４０８の処理とは、順番が逆でも良い。このように、各処理ステップは、先行の又は後続する処理ステップと齟齬が生じない限り、処理順序等を変更して構わない。
【0173】
以上、本発明の実施形態を詳細に説明してきたが、前述までの説明はあらゆる点において本発明の例示に過ぎない。本発明の範囲を逸脱することなく種々の改良や変形を行うことができることは言うまでもない。つまり、本発明の実施にあたって、実施形態に応じた具体的構成が適宜採用されても良い。
【0174】
要するにこの発明は、上記各実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、各実施形態に示される全構成要素から幾つかの構成要素を削除しても良い。更に、異なる実施形態に亘る構成要素を適宜組み合せても良い。
【符号の説明】
【0175】
１…制御部
２…プログラム記憶部
３…データ記憶部
４…通信インタフェース（通信Ｉ／Ｆ）
５…バス
１１…撮影データ取得処理部
１２…人検出処理部
１３…人物追跡処理部
１４…出力情報生成出力処理部
１５…解析データ取得処理部
３１…撮影データ記憶部
３２…人検出情報記憶部
３３…既知情報記憶部
３４…追跡結果記憶部
３２１…人検出情報テーブル
３２２…追跡対象人物情報テーブル
３３１…登録人物情報テーブル
３４１…追跡結果情報テーブル
３４２…経路情報テーブル
ＣＭ１～ＣＭｎ…監視カメラ
ＤＰ…ディスプレイ
ＮＷ…ネットワーク
ＳＣＭ…サーモカメラ
ＳＶ…サーバ装置
ＴＭ…監視端末
ＶＥ０，ＶＥ１～ＶＥｎ…映像解析エンジン
２…プログラム記憶部
３…データ記憶部
４…通信インタフェース（通信Ｉ／Ｆ）
５…バス
１１…撮影データ取得処理部
１２…人検出処理部
１３…人物追跡処理部
１４…出力情報生成出力処理部
１５…解析データ取得処理部
３１…撮影データ記憶部
３２…人検出情報記憶部
３３…既知情報記憶部
３４…追跡結果記憶部
３２１…人検出情報テーブル
３２２…追跡対象人物情報テーブル
３３１…登録人物情報テーブル
３４１…追跡結果情報テーブル
３４２…経路情報テーブル
ＣＭ１～ＣＭｎ…監視カメラ
ＤＰ…ディスプレイ
ＮＷ…ネットワーク
ＳＣＭ…サーモカメラ
ＳＶ…サーバ装置
ＴＭ…監視端末
ＶＥ０，ＶＥ１～ＶＥｎ…映像解析エンジン
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10A】
【図10B】
【図11】
【図12】
【図13】
【図14A】
【図14B】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24A】
【図24B】
【図25】
