ホーム > 特許ランキング > イオンディライト株式会社
知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-08-28
(45)【発行日】2024-09-05
(54)【発明の名称】人物追跡システム、人物追跡サーバ装置、人物追跡方法
(51)【国際特許分類】
H04N 7/18 20060101AFI20240829BHJP
G06T 7/292 20170101ALI20240829BHJP
H04N 23/60 20230101ALI20240829BHJP
H04N 23/63 20230101ALI20240829BHJP
【ＦＩ】
H04N7/18 D
G06T7/292
H04N7/18 F
H04N23/60 500
H04N23/63
【請求項の数】
4
(21)【出願番号】P 2022212198
(22)【出願日】2022-12-28
(65)【公開番号】P2024095137
(43)【公開日】2024-07-10
【審査請求日】2023-03-01
(73)【特許権者】
【識別番号】504303458
【氏名又は名称】イオンディライト株式会社
(74)【代理人】
【識別番号】100154014
【弁理士】
【氏名又は名称】正木 裕士
(74)【代理人】
【識別番号】100154520
【弁理士】
【氏名又は名称】三上 祐子
(72)【発明者】
【氏名】矢野 公嗣
【審査官】長谷川 素直
(56)【参考文献】
【文献】特開２００５－０１２４１５（ＪＰ，Ａ）
【文献】特開２０１６－０６３４６８（ＪＰ，Ａ）
【文献】特開２０１５－０１９２４８（ＪＰ，Ａ）
【文献】特開２０２０－１０２６７６（ＪＰ，Ａ）
【文献】特開２００７－１４２７４２（ＪＰ，Ａ）
【文献】特開２０１５－０１９２４９（ＪＰ，Ａ）
【文献】特開２００８－１４１３８６（ＪＰ，Ａ）
【文献】特開２００４－１８７１１６（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ ７／１８
Ｇ０８Ｂ ２５／００
Ｇ０６Ｔ ７／００
Ｈ０４Ｎ ２３／６０
(57)【特許請求の範囲】
【請求項1】
サーバ装置と、端末装置と、施設内を撮像する複数の監視カメラと、が通信可能に接続された人物追跡システムであって、前記サーバ装置は、
前記複数の監視カメラにて撮像された画像中の各人物を検出する人物検出手段と、
前記人物検出手段により検出された人物ごとに、前記複数の監視カメラのうち当該人物を撮像した１の監視カメラと、当該人物が当該１の監視カメラに撮像された時間帯とを記憶する撮像内容記憶手段と、
前記端末装置から、前記複数の監視カメラのうち任意の監視カメラにて撮像された画像を用いて、追跡したい人物を指定することを受け付ける指定受付手段と、
前記指定受付手段にて前記追跡したい人物の指定を受け付けると、前記追跡したい人物が、前記任意の監視カメラにて撮像された画像中で移動した方向を取得する移動方向取得手段と、
前記追跡したい人物が移動した方向にある監視カメラを、表示すべき監視カメラと決定する表示監視カメラ決定手段と、
前記撮像内容記憶手段にて記憶する前記１の監視カメラが前記表示すべき監視カメラの場合、対応する前記時間帯に撮像される前記１の監視カメラの画像を取得し、取得できた前記表示すべき監視カメラの複数の画像を、前記時間帯に基づき、前記追跡したい人物が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置に一覧表示する一覧表示手段と
を備える、人物追跡システム。
【請求項2】
さらに、前記サーバ装置は、前記一覧表示手段は、前記撮像内容記憶手段にて記憶する前記１の監視カメラが前記表示すべき監視カメラの場合であっても、前記指定受付手段で用いた任意の監視カメラから所定距離内にない監視カメラの画像は表示させない、
請求項１に記載の人物追跡システム。
【請求項3】
複数の監視カメラにて撮像された画像中の各人物を検出する人物検出手段と、前記人物検出手段により検出された人物ごとに、前記複数の監視カメラのうち当該人物を撮像した１の監視カメラと、当該人物が当該１の監視カメラに撮像された時間帯とを記憶する撮像内容記憶手段と、
端末装置から、前記複数の監視カメラのうち任意の監視カメラにて撮像された画像を用いて、追跡したい人物を指定することを受け付ける指定受付手段と、
前記指定受付手段にて前記追跡したい人物の指定を受け付けると、前記追跡したい人物が、前記任意の監視カメラにて撮像された画像中で移動した方向を取得する移動方向取得手段と、
前記追跡したい人物が移動した方向にある監視カメラを、表示すべき監視カメラと決定する表示監視カメラ決定手段と、
前記撮像内容記憶手段にて記憶する前記１の監視カメラが前記表示すべき監視カメラの場合、対応する前記時間帯に撮像される前記１の監視カメラの画像を取得し、取得できた前記表示すべき監視カメラの複数の画像を、前記時間帯に基づき、前記追跡したい人物が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置に一覧表示する一覧表示手段と、
を備える、人物追跡サーバ装置。
【請求項4】
所定の装置によって処理される人物追跡方法であって、複数の監視カメラにて撮像された画像中の各人物を検出するステップと、
前記検出された人物ごとに、前記複数の監視カメラのうち当該人物を撮像した１の監視カメラと、当該人物が当該１の監視カメラに撮像された時間帯とを記憶するステップと、
端末装置から、前記複数の監視カメラのうち任意の監視カメラにて撮像された画像を用いて、追跡したい人物を指定することを受け付けるステップと、
前記追跡したい人物が、前記任意の監視カメラにて撮像された画像中で移動した方向を取得するステップと、
前記追跡したい人物が移動した方向にある監視カメラを、表示すべき監視カメラと決定するステップと、
前記記憶する前記１の監視カメラが前記表示すべき監視カメラの場合、対応する前記時間帯に撮像される前記１の監視カメラの画像を取得し、取得できた前記表示すべき監視カメラの複数の画像を、前記時間帯に基づき、前記追跡したい人物が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置に一覧表示するステップと、
を備える、人物追跡方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、人物追跡システム、人物追跡サーバ装置、人物追跡方法に関する。
【背景技術】
【0002】
ショッピングセンター、娯楽施設、オフィス等の商業施設や、学校、空港、道路等の公共施設などの、様々な施設内に設置された複数の監視カメラの画像から、特定の人物の画像を検索し、検索できた画像を時系列につなぎ合わせ、その人物の行動を追跡する人物追跡システムへのニーズが高まっている。
【0003】
このような人物追跡システムでは、まず、予め、監視カメラが撮像した人物の特徴量（例えば、顔の画像から得られる顔画像特徴量、人体の画像から得られる人体画像特徴量）が、撮像した日時やカメラと対応付けて記憶され、データベース化されている。
【0004】
そして、例えば不審者などの行動を追跡するにあたり、その不審者の顔や全身の画像を入力すると、その画像から特徴量を算出し、近似する特徴量を備えるレコードを、上記のデータベースから検索する。そして、検索できたレコードに記憶されたカメラが、記憶された撮像日時に撮像した画像を画像記録装置から読み出す、というものである（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【0005】
【文献】特開２０２２－０９３５５０号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
特許文献１のような画像検索システムでは、不審者の画像から得られる特徴量と近似するものを、データベース化された特徴量から検索すれば、その不審者が撮像されたカメラや撮像日時を知ることができる。これにより、人物の追跡が容易となる。
【0007】
しかし、その一方で、同じ人物を撮像した画像であっても、撮像した場所が違うと、照明の違い等により特徴量が異なってしまうため、特徴量が近似する画像だけを確認しても、追跡したい不審者が見つからないことが多い。このために、結局は、特徴量の一致度が低い多くの画像を目で見て、不審者が撮像されているかどうかを確認しなければならず、特にカメラの台数が多い場合には、追跡が困難であるという問題があった。
【0008】
そこで、本発明は、上記問題に鑑み、特徴量の一致度が低い場合でも、人物追跡をより容易に行える人物追跡システムを提供することを目的としている。
【課題を解決するための手段】
【0009】
上記本発明の目的は、以下の手段によって達成される。なお、括弧内は、後述する実施形態の参照符号を付したものであるが、本発明はこれに限定されるものではない。
【0010】
請求項１に記載の、人物追跡システムは、
サーバ装置（例えば図１に示すサーバ装置４）と、端末装置（例えば図１に示す端末装置５）と、施設（例えば図１に示す施設Ｆ）内を撮像する複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）と、が通信可能に接続された人物追跡システム（例えば図１に示す人物追跡システム１）であって、
前記サーバ装置（例えば図１に示すサーバ装置４）は、
前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）にて撮像された画像（例えば図５（ａ）に示すフレーム画像２ａ１）中の各人物（例えば図５（ａ）に示す人物Ｐ）を検出する人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）と、
前記人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）により検出された人物（例えば図５（ａ）に示す人物Ｐ）ごとに、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち当該人物を撮像した１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）と、当該人物が当該１の監視カメラに撮像された時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）とを記憶する撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）と、
前記端末装置（例えば図１に示す端末装置５）から、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち任意の監視カメラにて撮像された画像（例えば図７（ａ）に示す監視カメラ２ａにて撮像された画像６１ｂ）を用いて、追跡したい人物（例えば図７（ａ）に示す人物Ｐ）を指定することを受け付ける指定受付手段（例えば図６に示すステップＳ１１３）と、
前記指定受付手段（例えば図６に示すステップＳ１１３）にて前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）の指定を受け付けると、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が、前記任意の監視カメラにて撮像された画像中で移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）を取得する移動方向取得手段（例えば図６に示すステップＳ１１５－１）と、
前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）にある監視カメラ（例えば図１に示す監視カメラ２ｂ）を、表示すべき監視カメラと決定する表示監視カメラ決定手段（例えば図６に示すステップＳ１１５－２）と、
前記撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）にて記憶する前記１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）が前記表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の場合、対応する前記時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）に撮像される前記１の監視カメラ（例えば図１に示す監視カメラ２ｂ）の画像を取得し、取得できた前記表示すべき監視カメラの複数の画像（例えば図７に示す画像６２ａ３、６２ｂ３、６２ｂ４）を、前記時間帯に基づき、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置（例えば図１に示す端末装置５）に一覧表示する一覧表示手段（例えば図６に示すステップＳ１１５－３、Ｓ１１７）と
を備えることを特徴とする。
サーバ装置（例えば図１に示すサーバ装置４）と、端末装置（例えば図１に示す端末装置５）と、施設（例えば図１に示す施設Ｆ）内を撮像する複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）と、が通信可能に接続された人物追跡システム（例えば図１に示す人物追跡システム１）であって、
前記サーバ装置（例えば図１に示すサーバ装置４）は、
前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）にて撮像された画像（例えば図５（ａ）に示すフレーム画像２ａ１）中の各人物（例えば図５（ａ）に示す人物Ｐ）を検出する人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）と、
前記人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）により検出された人物（例えば図５（ａ）に示す人物Ｐ）ごとに、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち当該人物を撮像した１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）と、当該人物が当該１の監視カメラに撮像された時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）とを記憶する撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）と、
前記端末装置（例えば図１に示す端末装置５）から、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち任意の監視カメラにて撮像された画像（例えば図７（ａ）に示す監視カメラ２ａにて撮像された画像６１ｂ）を用いて、追跡したい人物（例えば図７（ａ）に示す人物Ｐ）を指定することを受け付ける指定受付手段（例えば図６に示すステップＳ１１３）と、
前記指定受付手段（例えば図６に示すステップＳ１１３）にて前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）の指定を受け付けると、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が、前記任意の監視カメラにて撮像された画像中で移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）を取得する移動方向取得手段（例えば図６に示すステップＳ１１５－１）と、
前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）にある監視カメラ（例えば図１に示す監視カメラ２ｂ）を、表示すべき監視カメラと決定する表示監視カメラ決定手段（例えば図６に示すステップＳ１１５－２）と、
前記撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）にて記憶する前記１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）が前記表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の場合、対応する前記時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）に撮像される前記１の監視カメラ（例えば図１に示す監視カメラ２ｂ）の画像を取得し、取得できた前記表示すべき監視カメラの複数の画像（例えば図７に示す画像６２ａ３、６２ｂ３、６２ｂ４）を、前記時間帯に基づき、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置（例えば図１に示す端末装置５）に一覧表示する一覧表示手段（例えば図６に示すステップＳ１１５－３、Ｓ１１７）と
を備えることを特徴とする。
【0011】
請求項２に記載の人物追跡システムは、上記請求項１に記載の人物追跡システムにおいて
前記一覧表示手段（例えば図６に示すステップＳ１１５－３、Ｓ１１７）は、前記撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）にて記憶する前記１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）が前記表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の場合であっても、前記指定受付手段で用いた任意の監視カメラ（例えば図１に示す監視カメラ２ａ）から所定距離内にない監視カメラの画像は表示させないことを特徴とする。
前記一覧表示手段（例えば図６に示すステップＳ１１５－３、Ｓ１１７）は、前記撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）にて記憶する前記１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）が前記表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の場合であっても、前記指定受付手段で用いた任意の監視カメラ（例えば図１に示す監視カメラ２ａ）から所定距離内にない監視カメラの画像は表示させないことを特徴とする。
【0012】
請求項３に記載の、人物追跡サーバ装置は、
複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）にて撮像された画像（例えば図５（ａ）に示すフレーム画像２ａ１）中の各人物（例えば図５（ａ）に示す人物Ｐ）を検出する人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）と、
前記人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）により検出された人物（例えば図５（ａ）に示す人物Ｐ）ごとに、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち当該人物を撮像した１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）と、当該人物が当該１の監視カメラに撮像された時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）とを記憶する撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）と、
端末装置（例えば図１に示す端末装置５）から、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち任意の監視カメラにて撮像された画像（例えば図７（ａ）に示す監視カメラ２ａにて撮像された画像６１ｂ）を用いて、追跡したい人物（例えば図７（ａ）に示す人物Ｐ）を指定することを受け付ける指定受付手段（例えば図６に示すステップＳ１１３）と、
前記指定受付手段（例えば図６に示すステップＳ１１３）にて前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）の指定を受け付けると、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が、前記任意の監視カメラにて撮像された画像中で移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）を取得する移動方向取得手段（例えば図６に示すステップＳ１１５－１）と、
前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）にある監視カメラ（例えば図１に示す監視カメラ２ｂ）を、表示すべき監視カメラと決定する表示監視カメラ決定手段（例えば図６に示すステップＳ１１５－２）と、
前記撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）にて記憶する前記１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）が前記表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の場合、対応する前記時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）に撮像される前記１の監視カメラ（例えば図１に示す監視カメラ２ｂ）の画像を取得し、取得できた前記表示すべき監視カメラの複数の画像（例えば図７に示す画像６２ａ３、６２ｂ３、６２ｂ４）を、前記時間帯に基づき、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置（例えば図１に示す端末装置５）に一覧表示する一覧表示手段（例えば図６に示すステップＳ１１５－３、Ｓ１１７）と
を備えることを特徴とする。
複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）にて撮像された画像（例えば図５（ａ）に示すフレーム画像２ａ１）中の各人物（例えば図５（ａ）に示す人物Ｐ）を検出する人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）と、
前記人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）により検出された人物（例えば図５（ａ）に示す人物Ｐ）ごとに、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち当該人物を撮像した１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）と、当該人物が当該１の監視カメラに撮像された時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）とを記憶する撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）と、
端末装置（例えば図１に示す端末装置５）から、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち任意の監視カメラにて撮像された画像（例えば図７（ａ）に示す監視カメラ２ａにて撮像された画像６１ｂ）を用いて、追跡したい人物（例えば図７（ａ）に示す人物Ｐ）を指定することを受け付ける指定受付手段（例えば図６に示すステップＳ１１３）と、
前記指定受付手段（例えば図６に示すステップＳ１１３）にて前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）の指定を受け付けると、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が、前記任意の監視カメラにて撮像された画像中で移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）を取得する移動方向取得手段（例えば図６に示すステップＳ１１５－１）と、
前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）にある監視カメラ（例えば図１に示す監視カメラ２ｂ）を、表示すべき監視カメラと決定する表示監視カメラ決定手段（例えば図６に示すステップＳ１１５－２）と、
前記撮像内容記憶手段（例えば図１に示す撮像内容記憶部４２ｃ）にて記憶する前記１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）が前記表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の場合、対応する前記時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）に撮像される前記１の監視カメラ（例えば図１に示す監視カメラ２ｂ）の画像を取得し、取得できた前記表示すべき監視カメラの複数の画像（例えば図７に示す画像６２ａ３、６２ｂ３、６２ｂ４）を、前記時間帯に基づき、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置（例えば図１に示す端末装置５）に一覧表示する一覧表示手段（例えば図６に示すステップＳ１１５－３、Ｓ１１７）と
を備えることを特徴とする。
【0013】
請求項４に記載の、人物追跡方法は、
所定の装置によって処理される人物追跡方法であって、
複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）にて撮像された画像（例えば図５（ａ）に示すフレーム画像２ａ１）中の各人物（例えば図５（ａ）に示す人物Ｐ）を検出するステップ（例えば図４に示すステップＳ２、ステップＳ３）と、
前記人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）により検出された人物（例えば図５（ａ）に示す人物Ｐ）ごとに、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち当該人物を撮像した１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）と、当該人物が当該１の監視カメラに撮像された時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）とを記憶するステップ（例えば図１に示す撮像内容記憶部４２ｃ参照）と、
端末装置（例えば図１に示す端末装置５）から、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち任意の監視カメラにて撮像された画像（例えば図７（ａ）に示す監視カメラ２ａにて撮像された画像６１ｂ）を用いて、追跡したい人物（例えば図７（ａ）に示す人物Ｐ）を指定することを受け付けるステップ（例えば図６に示すステップＳ１１３）と、
前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が、前記任意の監視カメラにて撮像された画像中で移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）を取得するステップ（例えば図６に示すステップＳ１１５－１）と、
前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）にある監視カメラ（例えば図１に示す監視カメラ２ｂ）を、表示すべき監視カメラと決定するステップ
（例えば図６に示すステップＳ１１５－２）と、
前記記憶する前記１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）が前記表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の場合、対応する前記時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）に撮像される前記１の監視カメラ（例えば図１に示す監視カメラ２ｂ）の画像を取得し、取得できた前記表示すべき監視カメラの複数の画像（例えば図７に示す画像６２ａ３、６２ｂ３、６２ｂ４）を、前記時間帯に基づき、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置（例えば図１に示す端末装置５）に一覧表示するステップ（例えば図６に示すステップＳ１１５－３、Ｓ１１７）と
を備えることを特徴とする。
所定の装置によって処理される人物追跡方法であって、
複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）にて撮像された画像（例えば図５（ａ）に示すフレーム画像２ａ１）中の各人物（例えば図５（ａ）に示す人物Ｐ）を検出するステップ（例えば図４に示すステップＳ２、ステップＳ３）と、
前記人物検出手段（例えば図４に示すステップＳ２、ステップＳ３）により検出された人物（例えば図５（ａ）に示す人物Ｐ）ごとに、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち当該人物を撮像した１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）と、当該人物が当該１の監視カメラに撮像された時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）とを記憶するステップ（例えば図１に示す撮像内容記憶部４２ｃ参照）と、
端末装置（例えば図１に示す端末装置５）から、前記複数の監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）のうち任意の監視カメラにて撮像された画像（例えば図７（ａ）に示す監視カメラ２ａにて撮像された画像６１ｂ）を用いて、追跡したい人物（例えば図７（ａ）に示す人物Ｐ）を指定することを受け付けるステップ（例えば図６に示すステップＳ１１３）と、
前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が、前記任意の監視カメラにて撮像された画像中で移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）を取得するステップ（例えば図６に示すステップＳ１１５－１）と、
前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が移動した方向（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」）にある監視カメラ（例えば図１に示す監視カメラ２ｂ）を、表示すべき監視カメラと決定するステップ
（例えば図６に示すステップＳ１１５－２）と、
前記記憶する前記１の監視カメラ（例えば図３に示す監視カメラｔｂｌ＿ＲＥＣｄ）が前記表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の場合、対応する前記時間帯（例えば図３に示す検出日時ｔｂｌ＿ＲＥＣｃ）に撮像される前記１の監視カメラ（例えば図１に示す監視カメラ２ｂ）の画像を取得し、取得できた前記表示すべき監視カメラの複数の画像（例えば図７に示す画像６２ａ３、６２ｂ３、６２ｂ４）を、前記時間帯に基づき、前記追跡したい人物（例えば図７（ａ）に示す人物Ｐ）が撮像されている可能性が高い画像ほど見やすい位置に配置して、前記端末装置（例えば図１に示す端末装置５）に一覧表示するステップ（例えば図６に示すステップＳ１１５－３、Ｓ１１７）と
を備えることを特徴とする。
【発明の効果】
【0014】
次に、本発明の効果について、図面の参照符号を付して説明する。なお、括弧内は、後述する実施形態の参照符号を付したものであるが、本発明はこれに限定されるものではない。
【0015】
請求項１、３に係る発明によれば、サーバ装置（例えば図１に示すサーバ装置４）は、監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）にて撮像された画像（例えば図５（ａ）に示すフレーム画像２ａ１）にて検出された人物（例えば図５（ａ）に示す人物Ｐ）ごとに、その人物を撮像した監視カメラと、撮像した時間帯を記憶しておく。一方、使用者は、人物の検出がされた画像（例えば図５（ａ）に示すフレーム画像２ａ１）を用いて、追跡したい人物（例えば図５（ａ）に示す人物Ｐ）を指定する。追跡したい人物の指定を端末装置（例えば図１に示す端末装置５）から受け付けると、サーバ装置（例えば図１に示すサーバ装置４）は、その人物が画像中を移動した方向を取得し（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」を読み出す）、さらに、その移動した方向に設置されている監視カメラ（例えば図１に示す監視カメラ２ｂ）を決定する。その人物の移動した方向に設置されている監視カメラには、その人物が映っている可能性が高いため、この監視カメラ（例えば図１に示す監視カメラ２ｂ）を、表示すべき監視カメラと決定する。
【0016】
そして、端末装置（例えば図１に示す端末装置５）に、追跡したい人物（例えば図５（ａ）に示す人物Ｐ）が撮像されている可能性のある画像の一覧（例えば図７に示す過去時間候補一覧６２ａ、未来時間候補一覧６２ｂ）を表示させるにあたっては、検出された人物ごとに記憶されている、その人物を撮像した監視カメラと、撮像した時間帯に基づき、表示すべき監視カメラの複数の画像（例えば図７に示す画像６２ａ３、６２ｂ３、６２ｂ４）の一覧を表示させる。
【0017】
これにより、使用者は、特徴量の一致度が低い画像であっても、追跡したい人物（例えば図５（ａ）に示す人物Ｐ）が映っている可能性が高い画像を確認することができる。もって、特徴量の一致度が低い場合でも、人物追跡をより容易に行うことができる。
【0018】
請求項２に係る発明によれば、使用者が追跡したい人物（例えば図５（ａ）に示す人物Ｐ）を指定するのに用いた画像（例えば図５（ａ）に示すフレーム画像２ａ１）から所定距離内にある監視カメラの画像（例えば図８（ａ）に示す画像６５ａ６、画像６５ａ７）のみを表示させる。
【0019】
人物Ｐを撮像した監視カメラから所定距離内にある監視カメラの画像のみを表示させると、表示される画像の数が限定されるから、追跡したい人物（例えば図５（ａ）に示す人物Ｐ）を見つけることがより容易になる。このため、追跡したい人物（例えば図５（ａ）に示す人物Ｐ）が映っている可能性が高い画像を見つけやすくなる。
【0020】
請求項４に係る発明によれば、監視カメラ（例えば図１に示す監視カメラ２ａ～２ｅ）にて撮像された画像（例えば図５（ａ）に示すフレーム画像２ａ１）にて検出された人物（例えば図５（ａ）に示す人物Ｐ）ごとに、その人物を撮像した監視カメラと、撮像した時間帯が記憶される。一方、使用者は、人物の検出がされた画像（例えば図５（ａ）に示すフレーム画像２ａ１）を用いて、追跡したい人物（例えば図５（ａ）に示す人物Ｐ）を指定すると、その人物が画像中を移動した方向が取得され（例えば図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶される「左」を読み出す）、さらに、その移動した方向に設置されている監視カメラ（例えば図１に示す監視カメラ２ｂ）が決定される。その人物の移動した方向に設置されている監視カメラには、その人物が映っている可能性が高いため、この監視カメラ（例えば図１に示す監視カメラ２ｂ）が、表示すべき監視カメラと決定される。
【0021】
そして、使用者は、追跡したい人物（例えば図５（ａ）に示す人物Ｐ）が撮像されている可能性のある画像の一覧（例えば図７に示す過去時間候補一覧６２ａ、未来時間候補一覧６２ｂ）として、検出された人物ごとに記憶されている、その人物を撮像した監視カメラと、撮像した時間帯に基づき、表示すべき監視カメラ（例えば図１に示す監視カメラ２ｂ）の複数の画像（例えば図７に示す画像６２ａ３、６２ｂ３、６２ｂ４）の一覧を閲覧することができる。
【0022】
これにより、使用者は、特徴量の一致度が低い画像であっても、追跡したい人物（例えば図５（ａ）に示す人物Ｐ）が映っている可能性が高い画像を確認することができる。もって、特徴量の一致度が低い場合でも、人物追跡をより容易に行うことができる。
【図面の簡単な説明】
【0023】
【図1】本発明の一実施形態に係る人物追跡システムの全体構成を示す図である。
【図2】同実施形態にかかる人物追跡システムで使用される設定テーブルの一例であって、（ａ）は１つの監視カメラに対する他の監視カメラがどの方向に設置されているかを記憶する監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯ、（ｂ）は１つの監視カメラ間の距離を記憶するカメラ間距離記憶テーブルｔｂｌ＿ＫＹＯＲＩを示す図である。
【図3】サーバ装置で蓄積される撮像内容記憶テーブルｔｂｌ＿ＲＥＣを示す図である。
【図6】端末装置を用いて、使用者が、所定の人物の追跡を行うための処理の一例を示すフローチャートである。
【図7】端末装置の表示部に表示される画面の一例であって、（ａ）は追跡したい人物を指定するための画面、（ｂ）は、追跡したい人物が撮像される他の画像を指定するための画面である。
【発明を実施するための形態】
【0024】
以下、本発明に係る人物追跡システムの一実施形態を、図面を参照して具体的に説明する。なお、以下の説明において、上下左右の方向を示す場合は、図示正面から見た場合の上下左右をいうものとする。
【0025】
＜人物追跡システムの概要説明＞
人物追跡システムは、本実施形態においては、図１に示すように、施設Ｆに設置される監視カメラ２ａ～２ｅと、画像記憶装置３と、サーバ装置４と、端末装置５と、から構成される。
人物追跡システムは、本実施形態においては、図１に示すように、施設Ｆに設置される監視カメラ２ａ～２ｅと、画像記憶装置３と、サーバ装置４と、端末装置５と、から構成される。
【0026】
ここで、本実施形態に係る人物追跡システムの使用方法について、図１を用いて簡単に説明する。
【0027】
まず、サーバ装置４は、監視カメラ２ａ～２ｅの撮像した画像を、画像記憶装置３から取得し、人物を検出する。そして、その人物の特徴量と、その画像の撮像日時および監視カメラ２ａ～２ｅのどの監視カメラが撮像したものか、さらに、その人物が画像中でどの方向に移動したかを図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣにデータベース化しておく。
【0028】
次に、施設Ｆの警備員などが、特定の人物の過去の行動を追跡するために、端末装置５を用いて、監視カメラ２ａ～２ｅの撮像した画像を端末装置５に表示させる（図７（ａ）参照）。そして、撮像されている人物Ｐ（図７（ａ）参照）をクリック等し、追跡したい人物を指定する。
【0029】
サーバ装置４は、上記の指定を受け、追跡したい人物として指定された人物（図７（ａ）参照）が、画像（図７（ａ）参照）中をどの方向に移動したかを、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣから読み出す。そして、その方向に設置される監視カメラを、図２（ａ）に示す監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯから特定する。その方向に設置されている監視カメラには、その追跡したい人物が映っている可能性が高いため、この監視カメラを、表示すべき監視カメラと決定する。そして、その表示すべき監視カメラの画像を表示させた一覧を、人物Ｐが撮像されている可能性がある画像の一覧として、端末装置５に表示させる。
【0030】
これにより、使用者は、人物Ｐが撮像されている画像が容易に確認できることとなる。
【0031】
本実施形態に係る人物追跡システムは、簡単に説明すると以上のように使用される。以下、人物追跡システムを構成する各機器について説明する。
【0032】
＜監視カメラの説明＞
監視カメラ２ａ～２ｅは、画像を撮像し、有線又は無線の通信回路を介し、撮像した画像を画像記憶装置３に送信するものである。なお、このような撮像や画像記憶装置３への送信は、監視カメラ２ａ～２ｅの設定等に従い、常時、あるいは定期的に行う。
監視カメラ２ａ～２ｅは、画像を撮像し、有線又は無線の通信回路を介し、撮像した画像を画像記憶装置３に送信するものである。なお、このような撮像や画像記憶装置３への送信は、監視カメラ２ａ～２ｅの設定等に従い、常時、あるいは定期的に行う。
【0033】
＜画像記憶装置の説明＞
画像記憶装置３は、通信部３０、演算部３１、画像記憶部３２を備える。画像記憶装置３の演算部３１は、監視カメラ２ａ～２ｅから通信部３０を介して撮像画像を受信し、画像記憶部３２に記憶する。
画像記憶装置３は、通信部３０、演算部３１、画像記憶部３２を備える。画像記憶装置３の演算部３１は、監視カメラ２ａ～２ｅから通信部３０を介して撮像画像を受信し、画像記憶部３２に記憶する。
【0034】
＜サーバ装置の説明＞
サーバ装置４は、図１に示すように、ＣＰＵ４０と、無線ＬＡＮ，有線ＬＡＮ，ダイヤルアップ等の通信手段でネットワークＮに接続が可能な通信部４１と、大容量のハードディスク装置等からなり、種々のデータを記憶する記憶部４２と、作業領域やバッファメモリ等として機能するＲＡＭ４３と、を備える。
サーバ装置４は、図１に示すように、ＣＰＵ４０と、無線ＬＡＮ，有線ＬＡＮ，ダイヤルアップ等の通信手段でネットワークＮに接続が可能な通信部４１と、大容量のハードディスク装置等からなり、種々のデータを記憶する記憶部４２と、作業領域やバッファメモリ等として機能するＲＡＭ４３と、を備える。
【0035】
ここで、サーバ装置４の記憶部４２の監視カメラ方向記憶部４２ａが保持する監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯ（図２（ａ）参照）、監視カメラ間距離記憶部４２ｂが保持するカメラ間距離記憶テーブルｔｂｌ＿ＫＹＯＲＩ（図２（ｂ）参照）、撮像内容記憶部４２ｃが保持する撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）について説明する。
【0036】
まず、図１に示す監視カメラ方向記憶部４２ａが保持する監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯについて、図２（ａ）を用いて説明する。監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯは、図２（ａ）に示すように、監視カメラ２ａ～２ｅの各監視カメラについて、自己を基準としたときの他の監視カメラの方向を記憶する。より具体的には、監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯは、監視カメラ２ａ～２ｅ（図１参照）を一意的に識別する監視カメラ名フィールドｔｂｌ＿ＨＯＫＯａと、その監視カメラを基準としたときの上下左右方向にある他の監視カメラ名を記憶する上フィールドｔｂｌ＿ＨＯＫＯｂ、下フィールドｔｂｌ＿ＨＯＫＯｃ、左フィールドｔｂｌ＿ＨＯＫＯｄ、および右フィールドｔｂｌ＿ＨＯＫＯｅで構成される。
【0037】
ここで、「上下左右方向」について、図５（ａ）を用いて説明する。図５（ａ）のフレーム画像２ａ１は、監視カメラ２ａが撮像した画像を構成するフレーム画像の１つである。そして、監視カメラ２ａを基準としたときの「上方向」とは、監視カメラ２ａが撮像するフレーム画像２ａ１内を人物がフレーム画像２ａ１の上側辺Ｕに向かって移動する方向をいう。同様に、監視カメラ２ａを基準としたときの「下方向」「左方向」「右方向」とは、監視カメラ２ａが撮像するフレーム画像２ａ１内を人物がフレーム画像２ａ１の下側辺Ｄ、左側辺Ｌ、右側辺Ｒに向かって移動する方向をいう。
【0038】
このような監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯにおいて、次のようにして情報を記憶する。すなわち、監視カメラ名フィールドｔｂｌ＿ＨＯＫＯａが「監視カメラ２ａ」のレコードを例に説明すると、監視カメラ２ａを基準としたときの上方向にある監視カメラは監視カメラ２ｃであるため、上フィールドｔｂｌ＿ＨＯＫＯｂには「監視カメラ２ｃ」が記憶される。同様にして、監視カメラ２ａを基準としたときの下方向、左方向、右方向にある監視カメラは各々、監視カメラ２ｅ、監視カメラ２ｂ、監視カメラ２ｄであることが、下フィールドｔｂｌ＿ＨＯＫＯｃ、左フィールドｔｂｌ＿ＨＯＫＯｄ、右フィールドｔｂｌ＿ＨＯＫＯｅに記憶される。
【0039】
なお、監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯは、監視カメラ２ａ～２ｅ（図１参照）を設置・移動させる際に、手動で記憶すればよい。
【0040】
次に、図１に示す監視カメラ間距離記憶部４２ｂが保持するカメラ間距離記憶テーブルｔｂｌ＿ＫＹＯＲＩについて、図２（ｂ）を用いて説明する。カメラ間距離記憶テーブルｔｂｌ＿ＫＹＯＲＩは、図２（ｂ）に示すように、監視カメラ２ａ～２ｅ（図１参照）の各監視カメラと他の監視カメラとの距離を記憶する。より具体的には、カメラ間距離記憶テーブルｔｂｌ＿ＫＹＯＲＩは、監視カメラ２ａ～２ｅ（図１参照）を一意的に識別する監視カメラ名ｔｂｌ＿ＫＹＯＲＩａと、その監視カメラと他の監視カメラとの距離を記憶する監視カメラ２ａ～２ｅとの距離ｔｂｌ＿ＫＹＯＲＩｂ～ｔｂｌ＿ＫＹＯＲＩｆで構成される。
【0041】
このようなカメラ間距離管理テーブルｔｂｌ＿ＫＹＯＲＩにおいて、次のようにして情報を記憶する。すなわち、監視カメラ名ｔｂｌ＿ＫＹＯＲＩａが「監視カメラ２ａ」のレコードを例に説明すると、監視カメラ２ａから監視カメラ２ｂまでの距離が３メートルであるため、監視カメラ２ｂとの距離フィールドｔｂｌ＿ＫＹＯＲＩｃには「３メートル」が記憶される。同様にして、監視カメラ２ａからその他の監視カメラ２ｃ～２ｅまでの距離が監視カメラ２ｃ～２ｅとの距離フィールドｔｂｌ＿ＫＹＯＲＩｄ～ｔｂｌ＿ＫＹＯＲＩｆに記憶される。なお、監視カメラ名ｔｂｌ＿ＫＹＯＲＩａが「監視カメラ２ａ」のレコードにおいては、監視カメラ２ａとの距離ｔｂｌ＿ＫＹＯＲＩｂは自分自身との距離となってしまうため、値は記憶しない。
【0042】
なお、カメラ間距離記憶テーブルｔｂｌ＿ＫＹＯＲＩも、監視カメラ２ａ～２ｅ（図１参照）を設置・移動させる際に、手動で記憶すればよい。
【0043】
最後に、撮像内容記憶部４２ｃが保持する撮像内容記憶テーブルｔｂｌ＿ＲＥＣについて、図３を用いて説明する。撮像内容記憶テーブルｔｂｌ＿ＲＥＣは、図３に示すように、画像記憶装置３に記憶されている監視カメラ２ａ～２ｅ（図１参照）にて撮像された画像中にて検出された人物についての情報と、その人物が当該画像中で移動した方向等の移動に関する情報などが記憶されている。より具体的には、撮像内容記憶テーブルｔｂｌ＿ＲＥＣは、各レコードを一意的に識別する記憶ＩＤフィールドｔｂｌ＿ＲＥＣａと、検出された人物が、すでに検出された人物と同じと思われる場合に共通して付される人物ＩＤフィールドｔｂｌ＿ＲＥＣｂと、その人物が検出されたときの撮像日時を記憶する検出日時フィールドｔｂｌ＿ＲＥＣｃと、その映像を撮像したカメラを一意的に識別する監視カメラ名フィールドｔｂｌ＿ＲＥＣｄと、その人物を識別する特徴量を記憶する複数のフィールドである人物識別特徴情報フィールド群ｔｂｌ＿ＲＥＣｅと、その人物の着衣に関する情報を記憶する複数のフィールドである着衣特徴情報フィールド群ｔｂｌ＿ＲＥＣｆと、、検出された人物がその画像内で移動した方向を記憶する移動情報フィールドｔｂｌ＿ＲＥＣｇと、検出された人物がその画像内（その監視カメラの撮像範囲内）にとどまっていた時間を記憶する滞留時間フィールドｔｂｌ＿ＲＥＣｈで構成される。
【0044】
なお、人物識別特徴情報フィールド群ｔｂｌ＿ＲＥＣｅには、図示しないが、顔特徴、年齢、性別、歩行姿勢、生体情報、身長、体形、髪型、髪色等を記憶する複数のフィールドが含まれる。また、着衣特徴情報フィールド群ｔｂｌ＿ＲＥＣｆには、図示しないが、マスクの有無、マスクの色、靴の種類、靴の色、手荷物の有無、手荷物の種類等を記憶する複数のフィールドが含まれる。
【0045】
なお、撮像内容記憶テーブルｔｂｌ＿ＲＥＣは、監視カメラが撮像した画像に基づき、サーバ装置４が生成する。この処理については、後述する。
【0046】
＜端末装置の説明＞
端末装置５は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、又はｉｐｈｏｎｅ（登録商標）等のスマートフォンや携帯電話等で構成されてなるもので、図１に示すように、ＣＰＵ５ａと、マウスやキーボード、タッチパネル、或いは、ＵＳＢコネクタ、Ｌｉｇｈｔｎｉｎｇコネクタ等を用いて外部から所定データを端末装置５に入力することができる入力部５ｂと、所定のアプリケーションプログラム等を格納した書込み可能なフラッシュＲＯＭ等からなるＲＯＭ５ｃと、作業領域やバッファメモリ等として機能するＲＡＭ５ｄと、種々の情報を表示可能な表示部５ｅと、無線ＬＡＮ，有線ＬＡＮ，ダイヤルアップ等の通信手段でネットワークＮに接続が可能な通信部５ｆと、で構成されている。
端末装置５は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、又はｉｐｈｏｎｅ（登録商標）等のスマートフォンや携帯電話等で構成されてなるもので、図１に示すように、ＣＰＵ５ａと、マウスやキーボード、タッチパネル、或いは、ＵＳＢコネクタ、Ｌｉｇｈｔｎｉｎｇコネクタ等を用いて外部から所定データを端末装置５に入力することができる入力部５ｂと、所定のアプリケーションプログラム等を格納した書込み可能なフラッシュＲＯＭ等からなるＲＯＭ５ｃと、作業領域やバッファメモリ等として機能するＲＡＭ５ｄと、種々の情報を表示可能な表示部５ｅと、無線ＬＡＮ，有線ＬＡＮ，ダイヤルアップ等の通信手段でネットワークＮに接続が可能な通信部５ｆと、で構成されている。
【0047】
なお、端末装置５は、施設Ｆの警備員などが、画像記憶装置３に記憶された画像から不審者などの人物を追跡するにあたり、サーバ装置４に追跡したい人物の指定を送信したり、サーバ装置４の処理結果を表示させたりするのに用いられる。
【0048】
＜人物追跡システムの使用例の説明＞
ここで、上記のように構成される、人物追跡システムの使用例について、具体的に説明する。まずは、サーバ装置４が、監視カメラが撮像した画像に基づき、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣを生成する処理について、図４を用いて説明する。そして、次に、使用者が端末装置５を用いて人物追跡を行う方法を、図６を参照して説明する。なお、以下の内容はあくまで一例であり、これに限定されるものではない。
ここで、上記のように構成される、人物追跡システムの使用例について、具体的に説明する。まずは、サーバ装置４が、監視カメラが撮像した画像に基づき、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣを生成する処理について、図４を用いて説明する。そして、次に、使用者が端末装置５を用いて人物追跡を行う方法を、図６を参照して説明する。なお、以下の内容はあくまで一例であり、これに限定されるものではない。
【0049】
【0050】
最初に、サーバ装置４のＣＰＵ４０（以下、サーバ装置４と省略することがある）は、監視カメラ２ａ～２ｅ（図１参照）の画像を受信する（ステップＳ１）。具体的には、サーバ装置４は、通信部４１（図１参照）を介して、画像記憶装置３の画像記憶部３２に記憶されている監視カメラ２ａ～２ｅのうち１つの監視カメラ、例えば監視カメラ２ａの画像を、所定時間（例えば１分）分受信する。そして、受信した画像から、フレームを間引いて所定のフレームレート（例えば５ｆｐｓ）に落として、複数のフレーム画像を生成し、一時的にＲＡＭ４３に記憶する。
【0051】
なお、図５（ａ）、（ｂ）に示すフレーム画像２ａ１、２ａ２は、上記のようにしてＲＡＭ４３２一次保存されるフレーム画像の一例である。なお、サーバ装置４は、フレーム画像ごとにステップＳ２～Ｓ９の処理を行う（図４に示すステップＳ１０参照）。そのため、以下、サーバ装置４が、最初にフレーム画像２ａ１についてステップＳ２～Ｓ９の処理を行う場合について説明する。
【0052】
次に、サーバ装置４は、ステップＳ１にて得られたフレーム画像２ａ１（図５参照）から、人物を検出し（ステップＳ２）、検出した人物に検出枠（バウンディングボックス）を設定する。この動作は、例えば、Ｏｐｅｎｐｏｓｅなどの深層ネットワークモデルを用いてフレーム画像２ａ１に写っている人物Ｐ（図５（ａ）参照）の骨格を推定し、その骨格を内包する矩形を検出枠（図５（ａ）参照）とするなど、公知の技術を適宜に用いて構成することができるため、詳細な説明は省略する。
【0053】
次に、サーバ装置４は、人物Ｐの特徴量を決定する（ステップＳ３）。具体的には、フレーム画像２ａ１（図５（ａ）参照）から検出された人物Ｐ（図５（ａ）参照）の、顔特徴、年齢、性別、歩行姿勢、生体情報、身長、体形、髪型、髪色等といった、人物Ｐを識別する特徴量、および、マスクの有無、マスクの色、靴の種類、靴の色、手荷物の有無、手荷物の種類といった人物Ｐの着衣等に関する特徴量を決定する。このような特徴量の決定は、事前に学習したモデルを用いるなど、公知の技術を適宜に用いて構成することができるため、詳細な説明は省略する。
【0054】
次に、サーバ装置４は、人物Ｐの移動情報を決定する（ステップＳ５）。このステップにおいては、サーバ装置４は、フレーム画像２ａ１（図５（ａ）参照）のみならず、それ以降のフレーム画像（例えばフレーム画像２ａ２（図５（ｂ）参照））も参照し、フレーム画像２ａ１にて検出された人物Ｐがどの方向に移動したかを抽出する。
【0055】
ここで、移動した方向を抽出する方法を、以下、図５を用いて説明する。図５（ａ）に示すとおり、フレーム画像２ａ１には、人物Ｐに検出枠Ｐａが設定されている。そこで、サーバ装置４は、人物Ｐの移動の方向を抽出するために、一時的に記憶されているフレーム画像２ａ１の後のフレーム画像２ａ２（図５（ｂ）参照）を参照する。そして、同じ人物Ｐと判断できる人物が、左側Ｌ方向に移動していることから、サーバ装置４は、人物Ｐは左側Ｌ方向へ移動した、と決定する。
【0056】
なお、人物Ｐが撮像されているフレーム画像が３枚以上連続する場合、すなわちフレーム画像２ａ２の後にも人物Ｐが撮像されているフレーム画像がある場合、連続するフレーム画像の最後のフレーム画像における人物Ｐの移動方向に、人物Ｐは移動した、と決定する。
【0057】
また、この時、移動した方向の決定に使用したフレーム画像の枚数から、滞留時間フィールドｔｂｌ＿ＲＥＣｈに記憶する滞留時間（監視カメラ２ａの撮像範囲内にとどまった時間）も決定することができる。例えば、フレームレートが５ｆｐｓで、移動した方向の決定に使用したフレーム画像が５枚であれば１秒と決定することができる。
【0058】
次に、サーバ装置４は、人物Ｐの特徴量から、人物Ｐが新たに撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）に登録したことのある人物かどうかを判断する（ステップＳ６）。具体的には、さきほど取得した人物Ｐの特徴量と一致あるいは近似する特徴量を備えるレコードを、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣで検索する。
【0059】
そのようなレコードが見つかれば、人物Ｐはすでに撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）に登録したことがある人物と判断し（ステップＳ６：Ｙｅｓ）、そのレコードと同じ人物ＩＤを付与して、撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）に人物Ｐの特徴量、移動情報等を記憶する（ステップＳ７）。
【0060】
一方、そのようなレコードがなかったら、人物Ｐは新規に登録する人物であると判断し（ステップＳ６：Ｎｏ）、新規の人物ＩＤを付与して、撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）に人物Ｐの特徴量、移動情報、等を記憶する（ステップＳ８）。
【0061】
ここで、人物Ｐは今回新規に記憶する人物であると判断されたため（ステップＳ６：Ｎｏ）、人物ＩＤ「２」を新規に付与され、レコードＲｅｃ２として記憶されている。また、さきほど人物Ｐは左側Ｌ方向へ移動した、と決定したため、レコードＲｅｃ２の移動情報フィールドｔｂｌ＿ＲＥＣｇ（図３参照）には、「左」が記憶されている。
【0062】
【0063】
次に、サーバ装置４は、フレーム画像２ａ１（図５（ａ）参照）に人物Ｐ以外に検出できた人物がまだある場合（ステップＳ９：Ｙｅｓ）、その人物についてステップＳ３からステップＳ８の作業を繰り返す。今回は人物Ｐしかいなかったため、作業は繰り返さない（ステップＳ９：Ｎｏ）。
【0064】
次に、サーバ装置４は、次のフレームがまだある場合、（ステップＳ１０：Ｙｅｓ）、そのフレームについてステップＳ２からステップＳ９の作業を繰り返す。今回はフレーム画像２ａ２（図５（ｂ）参照）がまだあるため、フレーム画像２ａ２について作業を繰り返す（ステップＳ１０：Ｙｅｓ）。
【0065】
そして、フレーム画像２ａ２についても作業が終了したら（ステップＳ１０：Ｙｅｓ）、ステップＳ１に戻り、次の監視カメラ、例えば監視カメラ２ｂから画像を所定時間分（例えば１分）受信する。
【0066】
以上のようにして、サーバ装置４は、監視カメラが撮像した画像に基づき、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣを生成する。なお、上記の処理は、常時行っても良いし、定期的に、あるいは不定期に、一括して行っても良い。
【0067】
＜人物を追跡する方法の説明＞
次に、図６を参照し、警備員などの使用者が、端末装置５を用いて、人物追跡を行う方法について説明する。なお、使用者は、端末装置５（図１参照）にて所定のアプリケーションを起動させ、表示部５ｅ（図１参照）で監視カメラ２ａの１２月２０日１０時頃の画像を視聴していたところ、不審な人物Ｐを発見したため、人物Ｐを追跡したいと希望しているものとする。
次に、図６を参照し、警備員などの使用者が、端末装置５を用いて、人物追跡を行う方法について説明する。なお、使用者は、端末装置５（図１参照）にて所定のアプリケーションを起動させ、表示部５ｅ（図１参照）で監視カメラ２ａの１２月２０日１０時頃の画像を視聴していたところ、不審な人物Ｐを発見したため、人物Ｐを追跡したいと希望しているものとする。
【0068】
まず、使用者は、追跡したい人物を指定するための画面を要求する（ステップＳ１１）。具体的には、使用者は、まず、表示部５ｅ（図１参照）にて視聴中の監視カメラ２ａの１２月２０日１０時頃の画像の付近に設けられている「追跡開始」ボタン（図示せず）をクリックする。これにより、端末装置５のＣＰＵ５ａ（以下、端末装置５と省略することがある）は、サーバ装置４（図１参照）に対し、監視カメラ２ａの１２月２０日１０時の画像を用いて追跡者を特定したい旨の要求を送信する。
【0069】
次に、サーバ装置４は、追跡したい人物を指定するための画面を端末装置５に送信する（ステップＳ１１２）。具体的には、図７（ａ）に示す画面６１を送信する。
【0070】
ここで、画面６１（図７（ａ）参照）について説明すると、画面６１の左上には監視カメラ名の欄６１ａがあり、「監視カメラ２ａ」と表示さる。この監視カメラ名の欄６１ａは、その下に表示される画像６１ｂ（図５（ａ）および（ｂ）に示すフレーム画像２ａ１、２ａ２を含む映像）が、監視カメラ２ａの撮像に係るものであることを示している。画像６１ｂ内には、人物ＩＤ６１ｄとして「ＩＤ：２」の表示が、検出枠６１ｃに囲まれた人物Ｐの上側に表示されている。また、画像６１ｂの右上には撮像時刻６１ｇとして「１２／２０ １０：００：００」が表示されている。
【0071】
上記のような画面６１を端末装置５に送信するにあたり、サーバ装置４は、次のようにして画面６１を生成する。まず、サーバ装置４は、撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）を参照し、監視カメラ名フィールドｔｂｌ＿ＲＥＣｄが「監視カメラ２ａ」であって、検出日時フィールドｔｂｌ＿ＲＥＣｃが「１２／２０ １０：００：００」であるレコードであるレコードＲｅｃ２を特定する。そして、これらレコードＲｅｃ２から人物ＩＤフィールドｔｂｌ＿ＲＥＣｂである「２」を取得する。そして、画像記憶装置３から監視カメラ２ａの１２／２０ １０：００：００からの画像を読み出し、レコードＲｅｃ２の人物識別特徴情報フィールド群ｔｂｌ＿ＲＥＣｅ、着衣特徴情報フィールド群ｔｂｌ＿ＲＥＣｆに記憶されている特徴量と一致する人物を検出する。検出できたら、さきほど取得した人物ＩＤ「２」をその人物の上側に表示させる。このようにして、監視カメラ２ａの１２／２０ １０：００：００の画像に人物ＩＤを付したものを生成し、端末装置５の表示部５ｅに表示させる。
【0072】
次に、端末装置５は、追跡したい人物Ｐと、追跡したい人物Ｐの指定に用いた画像６１ｂを撮像した監視カメラと、画像６１ｂの撮像時刻６１ｇとをサーバ装置４に送信する（ステップＳ１２）。具体的には、使用者は、サーバ装置４により端末装置５の表示部５ｅに表示された画面６１（図７（ａ）参照）を見て、人物Ｐを追跡したい人物であることを確認し、端末装置５の入力部５ｂを用いて、画像６１ｂ上の人物Ｐをクリック等して指定する。端末装置５は、使用者からの上記のようなクリック等の操作を受け、指定された人物Ｐの人物ＩＤ「２」と、監視カメラ名の欄６１ａに表示される「監視カメラ２ａ」と、撮像時刻６１ｇに表示される「１２／２０ １０：００：００」と、をサーバ装置４に送信する。
【0073】
なお、使用者が、画像６１ｂ上の人物Ｐをクリックしたときの撮像時刻６１ｇが「１２／２０ １０：０１」であった場合、端末装置５は「１２／２０ １０：００：０１」をサーバ装置４に送信する。
【0074】
次に、サーバ装置４は、端末装置５からこれら情報を受信し（ステップＳ１１３）、撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）の対応するレコードＲｅｃ２を特定する（ステップＳ１１４）。具体的には、サーバ装置４は、撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）を参照し、監視カメラ名フィールドｔｂｌ＿ＲＥＣｄが「監視カメラ２ａ」であって、検出日時フィールドｔｂｌ＿ＲＥＣｃが「１２／２０ １０：００：００」であるレコードであって、人物ＩＤフィールドｔｂｌ＿ＲＥＣｂが「２」であるレコードＲｅｃ２を特定する。
【0075】
なお、サーバ装置４は、端末装置５から「１２／２０ １０：００：０１」を受信した場合も、端末装置５から受信した情報に対応するレコードとしてレコードＲｅｃ２を特定する。「１２／２０ １０：００：０１」は、人物Ｐが最初に検出された日時である「１２／２０ １０：００：００」（検出日時フィールドｔｂｌ＿ＲＥＣｃ参照）から、人物Ｐが監視カメラ２ａの撮像範囲にとどまっていた時間である「１秒」（滞留時間フィールドｔｂｌ＿ＲＥＣｈ参照）以内であるためである。
【0076】
次に、サーバ装置４は、追跡したい人物Ｐが映っている可能性のある画像の一覧を生成する（ステップＳ１１５－１～Ｓ１１５－３、ステップＳ１１６－１～Ｓ１１６－３）。具体的には、画面６２（図７（ｂ）参照）の過去時間候補一覧６２ａ、未来時間候補一覧６２ｂに表示する画像の一覧を生成する。なお、「過去時間」とは、端末装置５から受信した「１２／２０ １０：００：００」より前の時間を、「未来時間」とは端末装置５から受信した「１２／２０ １０：００：００」より後の時間を意味する。
【0077】
まず、未来時間候補一覧６２ｂに表示する画像の一覧の生成について説明する（ステップＳ１１５－１～Ｓ１１５－３）。
【0078】
最初に、サーバ装置４は、特定したレコードＲｅｃ２から、追跡したい人物Ｐが移動した方向を取得する（ステップＳ１１５―１）。具体的には、撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）のレコードＲｅｃ２の、移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶されている「左」を読み出す。
【0079】
次に、サーバ装置４は、追跡したい人物Ｐが移動した方向にある監視カメラを決定する（ステップＳ１１５－２）。具体的には、監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯ（図２（ａ）参照）から、先程読み出した「左」の方向に設置されている監視カメラ２ａ～２ｅを読み出す。より具体的には、図２（ａ）に示す監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯを参照し、監視カメラ名フィールドｔｂｌ＿ＨＯＫＯａが「監視カメラ２ａ」であるレコードの、左フィールドｔｂｌ＿ＨＯＫＯｄに記憶されている「監視カメラ２ｂ」を読み出す。そして、この「監視カメラ２ｂ」を、「表示すべき監視カメラ」と決定する。
【0080】
そして、サーバ装置４は、「表示すべき監視カメラ」である「監視カメラ２ｂ」の画像を表示する未来時間候補一覧６２ｂを生成する（ステップＳ１１５－３）。具体的には、まず、サーバ装置４は、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣを参照し、監視カメラ名フィールドｔｂｌ＿ＲＥＣｄが「監視カメラ２ｂ」のレコードＲｅｃ３を特定する。そして、レコードＲｅｃ３に対応する画像を画像記憶部３２より取得する。なお、図示しないが、撮像内容記憶テーブルｔｂｌ＿ＲＥＣには、Ｒｅｃ３の他にも、「監視カメラ２ｂ」により撮像された画像が複数登録されている。そして、ＲＥＣ３およびそれら図示しない複数の画像を、検出日時が「１２／２０ １０：００：００」に近いものほど上位に表示されるよう並べ、図７（ｂ）に示す未来時間候補一覧６２ｂに表示する画像の一覧を生成する。
【0081】
上記のようにして、未来時間候補一覧６２ｂに表示する画像の一覧は生成される。
【0082】
一方、過去時間候補一覧６２ａに表示する画像の一覧は、以下のように生成される（ステップＳ１１６－１～Ｓ１１６－３）。
【0083】
最初に、サーバ装置４は、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣを参照し、所定時間内のレコードから、そのレコードで検出された人物が移動した方向を取得する（ステップＳ１１６―１）。具体的には、撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）の検出日時フィールドｔｂｌ＿ＲＥＣｃが「１２／２０ １０：００：００」以前の所定時間内（例えば「１２／２０ ０９：５５：００」～「１２／２０ １０：００：００」）であるレコードＲｅｃ１から、移動情報フィールドｔｂｌ＿ＲＥＣｇに記憶されている「下」を読み出す。
【0084】
次に、サーバ装置４は、読み出した方向に監視カメラ２ａが設置されているかを確認する（ステップＳ１１６－２）。具体的には、監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯ（図２（ａ）参照）から、先程読み出した「下」の方向に設置されている監視カメラ２ａ～２ｅを読み出す。より具体的には、図２（ａ）に示す監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯを参照し、監視カメラ名フィールドｔｂｌ＿ＨＯＫＯａが「監視カメラ２ｃ」であるレコードの、下フィールドｔｂｌ＿ＨＯＫＯｃに記憶されている「監視カメラ２ａ」を読み出す。
【0085】
ここで、この「監視カメラ２ｃ」の「下」方向に「監視カメラ２ａ」が設置されていることから、Ｒｅｃ１にて検出された人物は、人物Ｐで、０９：５９：００に監視カメラ２ｃで撮像されてから、Ｒｅｃ２に示すように、下の方向に移動し１０：００：００に監視カメラ２ａで撮像された可能性が高い。このため、「監視カメラ２ｃ」を「表示すべき監視カメラ」と決定する。
【0086】
そして、サーバ装置４は、「表示すべき監視カメラ」である「監視カメラ２ｃ」の画像を表示する未来時間候補一覧６２ｂを生成する（ステップＳ１１６－３）。具体的には、まず、サーバ装置４は、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣを参照し、監視カメラ名フィールドｔｂｌ＿ＲＥＣｄが「監視カメラ２ｃ」のレコードＲｅｃ１を特定する。そして、レコードＲｅｃ１に対応する画像を画像記憶部３２より取得する。なお、図示しないが、撮像内容記憶テーブルｔｂｌ＿ＲＥＣには、Ｒｅｃ１の他にも、「監視カメラ２ｃ」により撮像された画像が複数登録されている。そして、ＲＥＣ１およびそれら図示しない複数の画像を、検出日時が「１２／２０ １０：００：００」に近いものほど上位に表示されるよう並べ、図７（ｂ）に示す過去時間候補一覧６２ａに表示する画像の一覧を生成する。
【0087】
上記のようにして、過去時間候補一覧６２ａに表示する画像の一覧は生成される。
【0088】
上記のように、過去時間候補一覧６２ａ、未来時間候補一覧６２ｂは、特徴量の一致度が高いか低いかに関わらず、人物Ｐ、あるいは画像において検出された人物の移動する方向に設置されている監視カメラの画像を、人物Ｐが撮像されている可能性が高い画像として、一覧を生成する。これにより、使用者は、特徴量の一致度が低い場合でも、人物追跡をより容易に行える。
【0089】
次に、サーバ装置４は、追跡したい人物Ｐが映っている可能性のある画像の一覧を端末装置５に送信する（ステップＳ１１７）。具体的には、図７（ｂ）に示す画面６２を端末装置５に送信する。
【0090】
ここで、画面６２（図７（ｂ）参照）について説明すると、画面６２は、人物Ｐが映っている可能性のある画像の一覧を表示し、使用者が、各画像を目で確認して、人物Ｐが映っている画像を指定するための画面である。この画面６２は、大きくわけると、過去時間候補一覧６２ａ、未来時間候補一覧６２ｂ、検索条件指定部６２ｃに分かれる。
【0091】
過去時間候補一覧６２ａ、未来時間候補一覧６２ｂは、各々画面６２の左右に表示され、「過去時間候補」との表示６２ａ１、「未来時間候補」との表示６２ｂ１の下に、先程生成した一覧が表示される。
【0092】
一方、検索条件指定部６２ｃは画面６２の中央に設けられている。一番上側には現在画像６２ｃ１として、追跡したい人物の指定にて使用された画像６１ｂ（図７（ａ）参照）に含まれているフレーム画像２ａ１（図５（ａ）参照）が表示されている。
【0093】
また、現在画像６２ｃ１には、検索条件指定部６２ｃの下側に、カメラ間距離指定６２ｃ２、時間範囲指定６２ｃ３、本人らしさ指定６２ｃ４が設けられている。これらは、過去時間候補一覧６２ａおよび未来時間候補一覧６２ｂに表示させる画像の条件を指定するためのものである。
【0094】
カメラ間距離指定６２ｃ２は、過去時間候補一覧６２ａ、未来時間候補一覧６２ｂに表示させる画像を、現在画像６２ｃ１を撮像した監視カメラ２ａから所定距離内に設置される監視カメラが撮像したものに絞るためのものである。
【0095】
また、時間範囲指定６２ｃ３は、過去時間候補一覧６２ａ、未来時間候補一覧６２ｂに表示させる画像を、現在画像６２ｃ１の撮像時刻から、所定の時間範囲の撮像時刻のものに絞るためのものである。
【0096】
さらに、本人らしさ指定６２ｃ４は、過去時間候補一覧６２ａ、未来時間候補一覧６２ｂに表示させる画像を、追跡したい人物である人物Ｐの特徴量（撮像内容記憶テーブルｔｂｌ＿ＲＥＣのレコードＲｅｃ２の人物識別特徴情報フィールド群ｔｂｌ＿ＲＥＣｅや着衣特徴情報フィールド群ｔｂｌ＿ＲＥＣｆ（図３参照））と所定程度一致する人物が撮像された画像に絞るためのものである。なお、本発明の特徴は、特徴量の一致度が低い場合でも、人物追跡をより容易に行えることにあるため、本実施形態においては、本人らしさ指定６２ｃ４は使用しない。
【0097】
上記のように構成される画面６２（図７（ｂ）参照）を、端末装置５に表示させる。
【0098】
次に、使用者は、追跡したい人物が映っている画像の指定を送信する（ステップＳ１３）。具体的には、使用者は目視で、図７（ｂ）に示す画像６２ｂ３に人物Ｐが映っていることを見つけ、画像６２ｂ３を、人物Ｐが映る画像として指定するために、端末装置５の入力部５ｂを用いて表示部５ｅに表示される画像６２ｂ３をクリック等する。これにより、端末装置５は、追跡したい人物Ｐが写っている画像の指定を送信する。具体的には、クリックされた人物の人物ＩＤ（例えば「４」）と、指定された画像６２ｂ３を撮像した監視カメラ名として「監視カメラ２ｂ」と、画像６２ｂ３の撮像時刻「１２／２０ １０：０５」と、を送信する。（これら情報は、過去時間候補一覧６２ａ、未来時間候補一覧６２ｂに表示される各画像６２ａ３、６２ｂ３、６２ｂ４と紐づけて、端末装置５あるいはサーバ装置４にて記憶しておけば良い。）
【0099】
なお、これら各画像６２ａ３、６２ｂ３、６２ｂ４は、上述の通り、追跡したい人物Ｐの移動方向、監視カメラの配置関係などから、人物Ｐが映っている可能性が高いと判断された画像であって、人物Ｐと特徴量が近似する人物が検出された画像ではない。このため、画面６２を見た使用者が、人物Ｐが映っている画像としてクリックした画像にて検出されている人物は、使用者が目視で人物Ｐと判断したものであって、必ずしも人物ＩＤとして「２」が付与されているものではない。
【0100】
サーバ装置４は、端末装置５からこれら情報を受信すると、ステップＳ１１４～Ｓ１１７を繰り返し、追跡したい人物Ｐが映っている可能性のある画像の一覧を端末装置５に送信する。そして、使用者は、ステップＳ１３を繰り返し、目視で人物Ｐと判断できる画像をクリックする。この一連のステップの繰り返しにより、人物Ｐの追跡を行う。
【0101】
なお、図７（ｂ）においては、未来時間候補一覧６２ｂには画像６２ｂ３、６２ｂ４が表示されていたが、使用者が目視で、人物Ｐが映っていると決定して画像６２ｂ３をクリックすると、その他の画像６２ｂ４は表示されなくなる（図８（ａ）参照）。そして、もう一度画像６２ｂ３をクリックすると、図示しないが、今度は画像６２ｂ３が現在画像６２ｃ１として中央に表示され、画像６２ｂ３を現在画像６２ｃ１とした場合の過去時間候補一覧６２ａと未来時間候補一覧６２ｂが作成されることとなる。
【0102】
また、図７（ｂ）において、画像６２ａ３が多くて人物Ｐが目視で見つけられない場合、カメラ間距離指定６４ｃ２と時間範囲指定６４ｃ３を利用し、表示する画像６２ａ３を限定することができる。
【0103】
カメラ間距離指定６４ｃ２と時間範囲指定６４ｃ３を利用するには、図８（ａ）に示すカメラ間距離指定６５ｃ２のスライドバー６５ｃ２１および時間範囲指定６５ｃ３のスライドバー６５ｃ３１を、所定の操作により適宜調整する。これを受けて、サーバ装置４は、過去時間候補一覧６５ａに表示する画像６２ａ３を、指定された範囲内の画像（図７（ｂ）に示す現在画像６２ｃ１を撮像した監視カメラ２ａから所定距離内の監視カメラにより撮像され、現在画像６２ｃ１の撮像日時から所定時間内に撮像された画像）である画像に絞って一覧を作成し、端末装置５に表示させる（図８（ａ）参照）。
【0104】
【0105】
次に、端末装置５は、出力指示をサーバ装置４に送信する（ステップＳ１４）。具体的には、使用者が、図８（ａ）に示す出力ボタン６５ｃ５を端末装置５の入力部５ｂを用いてクリック等することにより、端末装置５は、これまで人物Ｐが映っているものとして指定した画像の一覧を出力するよう、サーバ装置４に送信する。
【0106】
次に、サーバ装置４は、人物Ｐが映っているものとして指定されてきた画像を並べた画面を端末装置５の表示部５ｅに表示させる（ステップＳ１１８）。具体的には、図８（ｂ）に示す出力結果６６のように、これまで人物Ｐが映っているものとして指定してきた画像が、時系列に沿って表示される。なお、使用者が人物Ｐが映っていると決定してクリックした画像は、使用者がそのような操作をするたびに、端末装置５またはサーバ装置４において、撮像内容記憶テーブルｔｂｌ＿ＲＥＣの対応する記憶ＩＤフィールドｔｂｌ＿ＲＥＣａ（図３参照）を記憶しておけば良い。
【0107】
使用者は、端末装置５の表示部５ｅに表示された出力結果６６を確認し、印刷するなどして、アプリケーション６を終了させる。
【0108】
本実施形態に係る人物追跡システム１は、上記のように使用される。
【0109】
以上のことより、従来は、同一人物の画像であっても、撮像した場所が違うと、照明の違い等により特徴量が異なってしまうため、特徴量が近似する画像だけを確認しても、追跡したい不審者が見つからないことが多いため、特徴量の一致度が低い多くの画像を目で見て、不審者が撮像されているかどうかを確認しなければならなかったが、本発明によれば、特徴量の一致度が低い場合でも、人物追跡をより容易に行うことができる。
【0110】
＜変形例の説明＞
なお、本実施形態において示した監視カメラ画像視聴管理システムはあくまで一例であり、特許請求の範囲に記載された本発明の要旨の範囲内において種々の変形・変更が可能である。
なお、本実施形態において示した監視カメラ画像視聴管理システムはあくまで一例であり、特許請求の範囲に記載された本発明の要旨の範囲内において種々の変形・変更が可能である。
【0111】
例えば、上記で説明した各機器の動作の一部又は全部が、別の機器にて行われることとしても良い。例えば、本実施形態においては画像記憶装置３はサーバ装置４とは別の装置としたが、サーバ装置４内に画像記憶部３２を設けても良い。また、図４に示す、撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）のデータベースの生成は、監視カメラ２ａ～２ｅが行っても良い。すなわち、監視カメラ２ａ～２ｅはステップＳ２～Ｓ５までを自己で行い、サーバ装置４に撮像内容記憶テーブルｔｂｌ＿ＲＥＣ（図３参照）に記憶すべきデータを送信することとしても良い。そして、サーバ装置４は、受信したデータに基づき残りのステップを行うこととしても良い。
【0112】
また、画像記憶装置３、サーバ装置４、端末装置５は全て施設Ｆ内に設置していることとしたが、一部が施設Ｆ外であって、インターネット回線を介して通信可能に接続されることとしてもよい。
【0113】
また、本実施形態においては、図３に示す撮像内容記憶テーブルｔｂｌ＿ＲＥＣに登録されている画像のみを、追跡したい人物Ｐとして指定することができる。すなわち、サーバ装置４が撮像内容記憶テーブルｔｂｌ＿ＲＥＣの生成に当たり検出できた人物（図４のステップＳ２、Ｓ３参照）のみを、人物Ｐとして指定することができる。しかしながら、使用者が画像を目視して、検出できていない人物が人物Ｐであることが分かる場合がある。そのようなケースを考慮し、変形例として、画面上に「画像を登録」というボタンを設け、使用者は、そのボタンを押下することで、その画像に人物Ｐが映っているとサーバ装置４に通知しても良い。その場合、サーバ装置４は、対応する移動情報フィールドｔｂｌ＿ＲＥＣｇが特定できないため、過去時間候補一覧６２ａあるいは未来時間候補一覧６２ｂを本実施形態に係る方法で生成できない。そこで、代わりに、過去時間候補一覧６２ａあるいは未来時間候補一覧６２ｂに、各監視カメラ２ａ～２ｅの、所定時刻の画像を表示させることとしても良い。
【0114】
また、ステップＳ５において、人物Ｐの画像中の所定位置から別の位置への移動を以て、移動する方向を決定したが、人物Ｐがフレームアウトしたことを以て、人物Ｐの移動した方向を決定してもよい。また、人物Ｐの顔の向きを考慮して、移動した方向を決定しても良い。例えば、人物Ｐが、フレーム画像２ａ１（図６（ａ）参照）、フレーム画像２ａ２（図６（ｂ）参照）において、左側Ｌ方向を向いていることを以て、人物Ｐは左側Ｌ方向へ移動したと決定しても良い。
【0115】
また、本実施形態においては、図２（ａ）に示す監視カメラ方向記憶テーブルｔｂｌ＿ＨＯＫＯには、１つの監視カメラにつき、各方向に設置されている監視カメラが１台ずつ記憶されている。しかしながら、２台以上を記憶してもよい。
【0116】
また、本実施形態における人物追跡は、不審者の追跡を例に説明したが、追跡対象者は不審者に限られない。迷子の追跡、客の購入行動の追跡など、種々のケースに適応が可能である。
【符号の説明】
【0117】
１ 人物追跡システム
２ａ～２ｅ 監視カメラ
２ａ１ フレーム画像
４ サーバ装置
４２ｃ 撮像内容記憶部（撮像内容記憶手段）
５ 端末装置
６５ａ６ 所定距離内にある監視カメラの画像
６５ａ７ 所定距離内にある監視カメラの画像
Ｆ 施設
Ｐ 人物
２ａ～２ｅ 監視カメラ
２ａ１ フレーム画像
４ サーバ装置
４２ｃ 撮像内容記憶部（撮像内容記憶手段）
５ 端末装置
６５ａ６ 所定距離内にある監視カメラの画像
６５ａ７ 所定距離内にある監視カメラの画像
Ｆ 施設
Ｐ 人物
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】