特許 6973175 画像選択プログラム、情報処理装置、システム、および画像選択方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6973175

(24)【登録日】2021年11月8日

(45)【発行日】2021年11月24日

(54)【発明の名称】画像選択プログラム、情報処理装置、システム、および画像選択方法

(51)【国際特許分類】

   G06T 7/00 20170101AFI20211111BHJP

   H04N 7/18 20060101ALI20211111BHJP

   H04N 5/232 20060101ALI20211111BHJP

【ＦＩ】

   G06T7/00 660B

   H04N7/18 D

   H04N7/18 K

   H04N5/232 290

【請求項の数】7

【全頁数】29

(21)【出願番号】特願2018-33438(P2018-33438)

(22)【出願日】2018年2月27日

(65)【公開番号】特開2019-149006(P2019-149006A)

(43)【公開日】2019年9月5日

【審査請求日】2020年11月10日

(73)【特許権者】

【識別番号】000005223

【氏名又は名称】富士通株式会社

(74)【代理人】

【識別番号】100121083

【弁理士】

【氏名又は名称】青木 宏義

(74)【代理人】

【識別番号】100138391

【弁理士】

【氏名又は名称】天田 昌行

(74)【代理人】

【識別番号】100074099

【弁理士】

【氏名又は名称】大菅 義之

(72)【発明者】

【氏名】鄭 明燮

(72)【発明者】

【氏名】馬場 孝之

(72)【発明者】

【氏名】田中 竜太

【審査官】 豊田 好一

(56)【参考文献】

【文献】 特開２０１７−２０４０９５（ＪＰ，Ａ）

【文献】 特開２０１６−１６５１５７（ＪＰ，Ａ）

【文献】 特開２００７−１４２５２７（ＪＰ，Ａ）

【文献】 特開２０１７−０９７５７７（ＪＰ，Ａ）

【文献】 特開２０１７−０７３０７１（ＪＰ，Ａ）

【文献】 特開２０１７−０５９９４５（ＪＰ，Ａ）

【文献】 特開２０１６−１５７１６６（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｔ ７／００

Ｈ０４Ｎ ７／１８

Ｈ０４Ｎ ５／２３２

(57)【特許請求の範囲】

【請求項1】

第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、
前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信し、
前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、
前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出し、
前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数の第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択する、
処理をコンピュータに実行させる画像選択プログラム。

【請求項2】

前記コンピュータが
前記第１の設置角度に基づく第１の閾値と前記複数の第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域の面積に基づいて、画像照合の対象とする第２の照合対象画像を前記第１の全身領域撮影画像から選択し、
前記第２の設置角度に基づく第２の閾値と前記第１の照合対象画像それぞれの前記第２の人物が映っている領域の面積に基づいて、前記第２の照合対象画像との画像照合の対象とする第３の照合対象画像を前記第１の照合対象画像から選択する、ことを特徴とする請求項１記載の画像選択プログラム。

【請求項3】

前記第１の設置角度に基づいて、所定の人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第１の投影画像を生成し、
前記第２の設置角度に基づいて、前記人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第２の投影画像を生成する処理をさらに備え、
前記複数の第１の全身領域撮影画像を抽出する処理において、前記複数の第１の投影画像を用いて、前記複数の第１の撮影画像に前記第１の人物の全身が映っているか判定し、
前記複数の第２の全身領域撮影画像を抽出する処理において、前記複数の第２の投影画像を用いて、前記複数の第２の撮影画像に前記第２の人物の全身が映っているか判定することを特徴とする請求項１または２記載の画像選択プログラム。

【請求項4】

前記第１画像は、前記複数の第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域のうちで最も大きな前記第１の人物が映っている領域を含むことを特徴とする請求項１乃至３のいずれか１項に記載の画像選択プログラム。

【請求項5】

第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信する受信部と、
前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出する第１の処理部と、
前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数の第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択する第２の処理部と、
を備える情報処理装置。

【請求項6】

第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信する受信部と、
前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出する第１の処理部と、
前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数の第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択する第２の処理部と、
を備える画像選択装置と、
前記第１の全身領域撮影画像と前記第１の照合対象画像とを照合して、前記第１の人物と前記第２の人物が同一人物であるか判定する照合装置と、
を備えるシステム。

【請求項7】

コンピュータが
第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、
前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信し、
前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、
前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出し、
前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数の第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択する、
ことを特徴とする画像選択方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像選択プログラム、情報処理装置、システム、および画像選択方法に関する。

【背景技術】

【0002】

人物の移動情報は、混雑の解消や、商業施設における店舗や人員の最適化よるサービスの向上などに活用されている。監視カメラの映像から人物を検出し、複数のカメラにまたがって移動する人物を対応付けることで、自動的に広範囲の人物の移動を把握できる。

【0003】

監視カメラ映像の有効活用で、映像中から人物を検出し、服装などの特徴を記録しておくことで、迷子など特定の人物の移動軌跡を検索することができるようになる。

【0004】

また、服装などの特徴を用いて、複数の離れたカメラそれぞれで撮影された人物が同一であるか判定し、同一人物である場合に各カメラで撮影された人物を対応付けることにより人の移動を把握できる。人物の移動情報は、防犯やマーケティングなどに活用されている。

【0005】

時系列に撮像された複数の撮影画像において、同一人物の誤検出を抑える技術が知られている（例えば、特許文献１参照）。また、特許文献２〜５記載の技術が知られている。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開２０１５−２１９７１２号公報

【特許文献2】特開２０１６−１８１１５９号公報

【特許文献3】特開２００８−６５３６８号公報

【特許文献4】特開２００６−１０１３８４号公報

【特許文献5】特開２００４−７２６２８号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

通常、人物を撮影するカメラは、天井等の高い位置に設置され、撮影方向は斜め下方向となっている。コンピュータが同一人物の対応付けを行う場合、複数のカメラで撮影された複数の画像それぞれから人物の特徴量を抽出し、特徴量を照合して、各カメラで撮影された人物が同一人物であるか判定して対応付けを行う。

【0008】

しかしながら、撮影画像において人物の一部が欠けていたり、カメラ間で人物の映り方に大きな差がある場合、人物の一致判定の精度が低下する。

【0009】

１つの側面において、本発明は、異なるカメラで撮影した複数の画像を用いて人物の一致判定を行う場合、判定精度を向上させることを目的とする。

【課題を解決するための手段】

【0010】

実施の形態の画像選択プログラムは、コンピュータに、第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信させる。

【0011】

前記画像選択プログラムは、前記コンピュータに、前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出させる。

【0012】

前記画像選択プログラムは、前記コンピュータに、前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数の第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択させる。

【発明の効果】

【0013】

実施の形態によれば、異なるカメラ装置で撮影した複数の画像を用いて人物の一致判定を行う場合、判定精度を向上させることができる。

【図面の簡単な説明】

【0014】

【図1】比較例における同一人物の判定方法の例を示す図である。

【図2】比較例における問題を説明する図（その１）である。

【図3】比較例における問題を説明する図（その２）である。

【図4】実施の形態に係るシステムの構成図である。

【図5】実施の形態に係る人物対応付け処理のフローチャートである。

【図6】人物モデルを示す図である。

【図7】投影画像の例を示す図である。

【図8】投影画像の全身領域の範囲算出処理の詳細なフローチャートである。

【図9】全身領域投影画像の例を示す。

【図10】最大面積の全身領域と中心座標を示す。

【図11】最小面積の全身領域と中心座標を示す。

【図12】撮影画像の全身領域の範囲算出処理の詳細なフローチャートである。

【図13】撮影画像の全身領域の範囲算出処理を説明する図である。

【図14】変形画像判定処理（その１）の詳細なフローチャートである。

【図15】変形画像判定処理（その１）を説明する図である。

【図16】変形画像判定処理（その２）の詳細なフローチャートである。

【図17】変形画像判定処理（その２）を説明する図である。

【図18】混合色判定処理の詳細なフローチャートである。

【図19】混合色判定処理を説明する図である。

【図20】人物データと特徴量データの例である。

【図21】他の実施の形態に係るシステムの構成図である。

【図22】情報処理装置（コンピュータ）の構成図である。

【発明を実施するための形態】

【0015】

以下、実施の形態について図面を参照しながら説明する。
初めに、比較例として特許文献１記載の技術を用いた同一人物の判定方法、および当該判定方法における問題について説明する。

【0016】

図１は、比較例における同一人物の判定方法の例を示す図である。
以下、特に断らない限り、カメラの機能（例えば、画角や解像度）は、同一であるとする。

【0017】

図１では、カメラｉ（ｉ＝１，２）は地面から適当な高さに設置され、カメラｉの撮影方向は斜め下となっている。図１において、カメラｉの設置角度は４５度である。カメラｉの設置角度（チルト角）は、カメラｉの高さの水平面とカメラｉのレンズの光軸とが成す角度、すなわち俯角を指す。また、カメラ１とカメラ２の設置されている高さは同一である。カメラｉはそれぞれ自己の撮影範囲を撮影する。

【0018】

ここでは、判定装置が、カメラ１で撮影した人物Ｍ_１とカメラ２で撮影した人物Ｍ_２とが同一人物であるかの判定を行う場合を説明する。

【0019】

（１）人物Ｍ_１は、位置Ｂ_１から位置Ａ_１に移動しており、カメラ１は、人物Ｍ_１が位置Ｂ_１と位置Ａ_１にそれぞれいる時に撮影した撮影画像Ｉ_Ｂ１、Ｉ_Ａ１を生成する。人物Ｍ_２は、位置Ｂ_２から位置Ａ_２に移動しており、カメラ２は、人物Ｍ_２が位置Ｂ_２と位置Ａ_２にそれぞれいる時に撮影した撮影画像Ｉ_Ｂ２、Ｉ_Ａ２を生成する。
（２）判定装置は、撮影画像Ｉ_Ｂ１、Ｉ_Ａ１にそれぞれ含まれる矩形の人物領域Ｒ_Ｂ１、Ｒ_Ａ１を検出する。判定装置は、撮影画像Ｉ_Ｂ２、Ｉ_Ａ２にそれぞれ含まれる矩形の人物領域Ｒ_Ｂ２、Ｒ_Ａ２を検出する。
（３）判定装置は、人物領域Ｒ_Ｂ１、Ｒ_Ａ１、Ｒ_Ｂ２、Ｒ_Ａ２を同じ高さになるように正規化し、正規化した人物領域Ｒ’_Ｂ１、Ｒ’_Ａ１、Ｒ’_Ｂ２、Ｒ’_Ａ２を生成する。
（４）判定装置は、正規化した人物領域Ｒ’_Ｂ１、Ｒ’_Ａ１、Ｒ’_Ｂ２、Ｒ’_Ａ２を複数の領域に分割し、領域毎の色特徴量を抽出する。判定装置は、正規化した人物領域Ｒ’_Ｂ１の領域毎の色特徴量とＲ’_Ａ１の領域毎の色特徴量とを領域ごとに統合（例えば、平均化）し、カメラ１で撮影した人物Ｍ_１の特徴量ｆ_１を算出する。特徴量ｆ_１は、人物Ｍ_１の領域毎の色特徴量を示す。また、判定装置は、正規化した人物領域Ｒ’_Ｂ２の領域毎の色特徴量とＲ’_Ａ２の領域毎の色特徴量とを領域毎に統合し、カメラ２で撮影した人物Ｍ_２の特徴量ｆ_２を算出する。特徴量ｆ_２は、人物Ｍ_２の領域毎の色特徴量を示す。判定装置は、特徴量ｆ_１と特徴量ｆ_２とを照合し、人物Ｍ_１と人物Ｍ_２とが同一人物であるか判定する。同一人物であると判定された場合、判定装置は人物Ｍ_１と人物Ｍ_２とを対応付ける。

【0020】

図２は、比較例における問題を説明する図（その１）である。
図１の撮影状況では、カメラ１，２の設置角度は同じ４５度であったが、図２では、カメラ１の設置角度とカメラ２の設置角度が異なる。対応付ける人物を撮影するカメラ１，２の設置角度が互いに異なると、撮影範囲が変化するため、色特徴量の統合に用いられる人物領域を含む撮影画像を適切に選択することが困難となる。

【0021】

図２では、カメラ１の設置角度は４５度であり、カメラ２の設置角度は２５度である。また、カメラ１とカメラ２の設置されている高さは同一である。

【0022】

（１）人物Ｍ_１は、位置Ｄ_１から順に位置Ｃ_１、位置Ｂ_１、位置Ａ_１に移動しており、カメラ１は、人物Ｍ_１が位置Ｄ_１〜Ａ_１にそれぞれいる時に撮影した撮影画像Ｉ_Ｄ１、Ｉ_Ｃ１、Ｉ_Ｂ１、Ｉ_Ａ１を生成する。位置Ｄ_１の人物Ｍ_１の上半身は撮影範囲に含まれておらず、撮影画像Ｉ_Ｄ１では、人物Ｍ_１の下半身のみが映っている。人物Ｍ_２は、位置Ｄ_２から順に位置Ｃ_２、位置Ｂ_２、位置Ａ_２に移動しており、カメラ２は、人物Ｍ_２が位置Ｄ_２〜Ａ_２にそれぞれいる時に撮影した撮影画像Ｉ_Ｄ２、Ｉ_Ｃ２、Ｉ_Ｂ２、Ｉ_Ａ２を生成する。位置Ａ_２の人物Ｍ_２の下半身は撮影範囲に殆ど含まれておらず、撮影画像Ｉ_Ａ２では、人物Ｍ_２の上半身と、下半身の一部と、が映っている。
（２）判定装置は、撮影画像Ｉ_Ｄ１〜Ｉ_Ａ１、Ｉ_Ｄ２〜Ｉ_Ａ２にそれぞれ含まれる矩形の人物領域を検出する。判定装置は、検出した人物領域が同じ高さになるように正規化し、正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１、Ｒ’_Ａ１、Ｒ’_Ｄ２、Ｒ’_Ｃ２、Ｒ’_Ｂ２、Ｒ’_Ａ２を生成する。例えば、判定装置は、撮影画像に映っている人物の頭部を検出することにより、人物領域を検出する。よって、撮影画像Ｉ_Ｄ１には人物Ｍ_１の下半身のみが映っており、人物Ｍ_１の頭部は映っていないため、撮影画像Ｉ_Ｄ１において人物領域は検出されない。
（３）判定装置は、正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１、Ｒ’_Ａ１、Ｒ’_Ｄ２、Ｒ’_Ｃ２、Ｒ’_Ｂ２、Ｒ’_Ａ２を複数の領域に分割し、領域毎の色特徴量を抽出する。判定装置は、正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１、Ｒ’_Ａ１それぞれの領域毎の色特徴量を領域ごとに統合（例えば、平均化）し、カメラ１で撮影した人物Ｍ_１の特徴量ｆ_１を算出する。正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１、Ｒ’_Ａ１には、人物Ｍ_１の全身が映っている。よって、正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１、Ｒ’_Ａ１の上側からは人物Ｍ_１の上半身の色特徴量、下側からは人物Ｍ_１の下半身の色特徴量が抽出される。特徴量ｆ_１は人物Ｍ_１の領域毎の色特徴量を示し、上側の領域は人物Ｍ_１の上半身の色特徴量、下側の領域は人物Ｍ_１の下半身の色特徴量を示す。

【0023】

判定装置は、正規化した人物領域Ｒ’_Ｄ２〜Ｒ’_Ａ２それぞれの領域毎の色特徴量を領域ごとに統合し、カメラ２で撮影した人物Ｍ_２の特徴量ｆ_２を算出する。

【0024】

上述のように位置Ａ_２の人物Ｍ_２の下半身は撮影範囲に殆ど含まれていないため、正規化した人物領域Ｒ’_Ａ２は、殆どが人物Ｍ_２の上半身となっている。よって、正規化した人物領域Ｒ’_Ａ２の下側の領域は、殆どが人物Ｍ_２の上半身となっている。そのため、正規化した人物領域Ｒ’_Ａ２の上側からは人物Ｍ_２の上半身の色特徴量、下側からも人物Ｍ_２の上半身の色特徴量が抽出される。

【0025】

特徴量ｆ_２は、人物Ｍ_２の領域毎の色特徴量を示す。特徴量ｆ_２の上側の領域は人物Ｍ_２の上半身の色特徴量を示し、特徴量ｆ_２の下側の領域は人物Ｍ_２の下半身の色特徴量を示すことが望ましい。

【0026】

しかしながら、正規化した人物領域Ｒ’_Ｄ２〜Ｒ’_Ａ２それぞれの領域毎の色特徴量を領域ごとに統合すると、特徴量ｆ_２の下側の領域の色特徴量には、正規化した人物領域Ｒ’_Ａ２により、人物Ｍ_２の上半身の色特徴量が含まれてしまう。そのため、特徴量ｆ_１と特徴量ｆ_２とを照合して同一人物であるかを判定すると、判定精度が低下してしまうという問題がある。

【0027】

図３は、比較例における問題を説明する図（その２）である。
比較例では、さらに、（１）人物がカメラに近いほど透視投影で撮影画像の人物の変形が大きくなる、（２）小さく映る人物の低解像度画像は大きく映る高解像度画像に比べて混合色が増えるという課題がある。

【0028】

図３の撮影状況は、図２と同様である。図２と同様に人物Ｍ１の撮影画像Ｉ_Ｄ１、Ｉ_Ｃ１、Ｉ_Ｂ１、Ｉ_Ａ１、および人物Ｍ２の撮影画像Ｉ_Ｄ２、Ｉ_Ｃ２、Ｉ_Ｂ２、Ｉ_Ａ２が生成される。

【0029】

判定装置は、撮影画像Ｉ_Ｄ１〜Ｉ_Ａ１、Ｉ_Ｄ２〜Ｉ_Ａ２にそれぞれ含まれる矩形の人物領域を検出する。判定装置は、検出した人物領域が同じ高さになるように正規化し、正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１、Ｒ’_Ａ１、Ｒ’_Ｄ２、Ｒ’_Ｃ２、Ｒ’_Ｂ２、Ｒ’_Ａ２を生成する。

【0030】

判定装置は、正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１、Ｒ’_Ａ１、Ｒ’_Ｄ２、Ｒ’_Ｃ２、Ｒ’_Ｂ２、Ｒ’_Ａ２を複数の領域に分割し、領域毎の色特徴量を抽出する。

【0031】

判定装置は、正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１、Ｒ’_Ａ１それぞれの領域毎の色特徴量を領域ごとに統合（例えば、平均化）し、カメラ１で撮影した人物Ｍ_１の特徴量ｆ_１を算出する。

【0032】

カメラ１の設置角度はカメラ２の設置角度に比べて大きく、位置Ａ１の人物Ｍ１は全身が撮影画像Ｉ_Ａ１に映っている。また、位置Ａ１の人物Ｍ１は、カメラ１に近い位置おり、特に位置Ａ１の人物Ｍ１の上半身は、カメラ１との距離が小さい。そのため透視投影により、撮影画像Ｉ_Ａ１において、人物Ｍ１の上半身は変形して大きく映っている。正規化した人物領域Ｒ’_Ａ１の人物Ｍ１の上半身は、正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１の人物Ｍ１の上半身に比べて変形して大きくなっている。すなわち、カメラ１と近い位置の位置Ａ１の人物Ｍ１の上半身は、撮影画像Ｉ_Ａ１や正規化した人物領域Ｒ’_Ａ１において変形が大きくなる。

【0033】

そのため、ある位置の領域の色特徴量として、正規化した人物領域Ｒ’_Ａ１からは人物Ｍ１の上半身の色特徴量が得られるが、同じ位置の領域の色特徴量として正規化した人物領域Ｒ’_Ｃ１、Ｒ’_Ｂ１からは人物Ｍ１の上半身以外の色特徴量が得られる場合がある。

【0034】

よって、人物Ｍ_１の特徴量ｆ_１において、ある位置の領域の色特徴量は、人物Ｍ１の上半身の色特徴量と上半身以外の色特徴量が混じってしまう。このような特徴量ｆ_１を用いて、人物の同定の判定精度が低下してしまうという問題がある。

【0035】

判定装置は、正規化した人物領域Ｒ’_Ｄ２〜Ｒ’_Ａ２それぞれの領域毎の色特徴量を領域ごとに統合し、カメラ２で撮影した人物Ｍ_２の特徴量ｆ_２を算出する。

【0036】

低解像度の画像では、色の境界部分に量子化誤差によって混合色が発生しやすくなる。カメラ２から遠い位置Ｄ_２に人物Ｍ_２がいるときの撮影画像Ｉ_Ｄ２では、人物領域は小さい、すなわち人物領域の解像度（画素数）が小さい。よって、正規化した人物領域Ｒ’_Ｄでは、混合色が含まれている。

【0037】

例えば、正規化した人物領域Ｒ’_Ｄを複数の領域に分割したときに、正規化した人物領域Ｒ’_Ｄの下側の領域は人物Ｍ_２の下半身の色特徴量を示すことが望ましい。しかしながら、正規化した人物領域Ｒ’_Ｄでは混合色が発生し、正規化した人物領域Ｒ’_Ｄの下側の領域の色は、下半身の色に上半身の色や背景の色が混じった色になっている。

【0038】

判定装置は、正規化した人物領域Ｒ’_Ｄ２〜Ｒ’_Ａ２それぞれの領域毎の色特徴量を領域ごとに統合し、カメラ２で撮影した人物Ｍ_２の特徴量ｆ_２を算出する。混合色が発生した正規化した人物領域Ｒ’_Ｄを用いて人物Ｍ_２の特徴量ｆ_２を算出すると、人物Ｍ_２の特徴量ｆ_２に、混合色の色特徴量が含まれてしまい、人物の同定の判定精度が低下してしまうという問題がある。

【0039】

図４は、実施の形態に係るシステムの構成図である。
システム１０１は、カメラ２０１−ｉ（ｉ＝１，２）および情報処理装置３０１を有する。

【0040】

カメラ２０１−ｉは、ネットワークを介して情報処理装置３０１と接続している。また、カメラ２０１−ｉは、Universal Serial Bus（ＵＳＢ）等により情報処理装置３０１と接続してもよい。カメラ２０１−ｉは、自己の撮影範囲を撮影し、撮影した画像（撮影画像）を情報処理装置３０１に送信する。カメラ２０１−１とカメラ２０１−２は、それぞれ異なる撮影範囲を定期的若しくは常に撮影する。尚、カメラ２０１−ｉは動画を撮影し、情報処理装置３０１に送信してもよい。その場合、動画の各フレームが撮影画像に相当する。すなわち、カメラ２０１−ｉは、時系列な複数の画像を情報処理装置３０１に出力する。カメラ２０１−ｉは、撮像装置の一例である。尚、カメラ２０１−ｉの数は一例であり、これに限られるものではない。

【0041】

実施の形態において、カメラ２０１−ｉは地面から適当な高さに設置され、撮影方向は斜め下となっている。実施の形態において、カメラ２０１−ｉの設置角度（チルト角）は、カメラ２０１−ｉの高さの水平面とカメラ２０１−ｉのレンズの光軸とが成す角度、すなわち俯角を指す。カメラ２０１−１の設置角度は２５度、カメラ２０１−２の設置角度は４５度である。尚、カメラ２０１−ｉの設置角度は一例であり、これに限られるものではない。また、実施の形態において、カメラ２０１−１とカメラ２０１−２の設置されている高さは同一とする。以下、カメラ２０１−ｉは、カメラｉと表記する場合がある。

【0042】

情報処理装置３０１は、画像入力部３１１−ｉ、カメラ姿勢算出部３２１、投影画像生成部３３１、対象範囲算出部３４１、人物対応付け部３５１、出力部３６１、および記憶部３７１を有する。情報処理装置３０１は、例えば、サーバやパーソナルコンピュータ等のコンピュータである。画像入力部３１１−ｉは、受信部の一例である。

【0043】

投影画像生成部３３１は、人物モデル生成部３３２および投影画像生成部３３３を有する。投影画像生成部３３３は、第４の処理部の一例である。

【0044】

対象範囲算出部３４１は、全身領域範囲算出部３４２、変形画像判定部３４３、および低解像度画像判定部３４４を有する。全身領域範囲算出部３４２は、第１の処理部の一例である。変形画像判定部３４３は、第２の処理部の一例である。低解像度画像判定部３４４は、第３の処理部の一例である。

【0045】

人物対応付け部３５１は、特徴量抽出部３５２および特徴量照合部３５３を有する。
上述の情報処理装置３０１の構成は一例であり、これに限られるものではない。例えば、画像入力部３１１−ｉ、カメラ姿勢算出部３２１、投影画像生成部３３１、対象範囲算出部３４１、人物対応付け部３５１、出力部３６１、および記憶部３７１のそれぞれまたは任意の組合せが異なる装置に具備され、複数の装置がネットワークを介して接続されたシステムとして構成されてもよい。

【0046】

実施の形態において、撮影画像および投影画像の座標を示す場合、原点は各画像において左上隅とし、Ｘ軸の正方向は右方向、Ｙ軸の正方向は下方向であるとする。

【0047】

図５は、実施の形態に係る人物対応付け処理のフローチャートである。
ステップＳ５０１において、画像入力部３１１−ｉは、カメラ２０１−ｉから時系列な複数の撮影画像を受信する。画像入力部３１１−ｉは、カメラ２０１−ｉから入力された撮影画像の解像度を所定の解像度に低下させた撮影画像を生成し、解像度が低下した撮影画像をカメラ姿勢算出部３２１、対象範囲算出部３４１、および人物対応付け部３５１に出力する。カメラ姿勢算出部３２１、対象範囲算出部３４１、および人物対応付け部３５１は、解像度が低下した撮影画像を用いて処理を行う。以下、特に断らない限り、撮影画像は、画像入力部３１１−ｉにより解像度が低下した撮影画像を指す。撮影画像の解像度を低下させるのは、撮影された人物のプライバシーを保護するためである。

【0048】

また、画像入力部３１１−ｉは、解像度が低下した撮影画像を記憶部３７１に出力し、記憶部３７１は、当該撮影画像を記憶してもよい。そして、記憶部３７１に予め記憶されたカメラ２０１−ｉの撮影画像が、カメラ姿勢算出部３２１、対象範囲算出部３４１、および人物対応付け部３５１に入力されていてもよい。尚、画像入力部３１１−ｉは、撮影画像の解像度の変更を行わなくてもよい。

【0049】

ステップＳ５０２において、カメラ姿勢算出部３２１は、カメラ２０１−ｉの姿勢、すなわちカメラ２０１−ｉの設置角度を算出する。３次元物体の大きさ、当該３次元物体とカメラ２０１−ｉとの間の距離、およびカメラ２０１−ｉの内部パラメータ（例えば、焦点距離）が分かれば、カメラ２０１−ｉの設置角度は算出可能である。よって、３次元物体の大きさ、当該３次元物体とカメラ２０１−ｉとの間の距離、カメラ２０１−ｉの内部パラメータ、およびカメラ２０１−ｉにより撮影された当該３次元物体を含む撮影画像からカメラ姿勢算出部３２１は、カメラ２０１−ｉの設置角度を算出する。例えば、３次元物体の大きさ、当該３次元物体とカメラ２０１−ｉとの間の距離、カメラ２０１−ｉの内部パラメータ、およびカメラ２０１−ｉにより撮影された当該３次元物体を含む撮影画像は、予め情報処理装置３０１に与えられている若しくは外部から入力される。

【0050】

また、カメラ姿勢算出部３２１は、カメラ２０１−ｉによる複数の撮影画像から消失点を算出し、消失点を用いて、カメラ２０１−ｉの設置角度を算出してもよい。

【0051】

また、カメラ２０１−ｉの設置角度が予め情報処理装置３０１に与えられている場合には、ステップＳ５０２の処理は省略してもよい。

【0052】

カメラ姿勢算出部３２１は、算出したカメラ２０１−ｉの設置角度を投影画像生成部３３１および対象範囲算出部３４１に出力する。

【0053】

ステップＳ５０３において、人物モデル生成部３３２および投影画像生成部３３３は、投影画像生成処理を行う。ここで投影画像生成処理の詳細について説明する。

【0054】

図６は、人物モデルを示す図である。
人物モデル生成部３３２は、所定の身長の人物の大きさに相当する長方体を人物モデル４０１として生成する。例えば、人物モデル生成部３３２は、高さＨ＝１８０cm、横幅Ｗ＝５０cm、Ｄ＝縦幅（奥行）４０cmとなる長方体を人物モデル４０１として生成する。

【0055】

図７は、投影画像の例を示す図であり、カメラ２０１−２における投影画像を示す。
投影画像生成部３３３は、カメラ２０１−ｉごとに、それぞれ異なる位置にある人物モデル４０１を投影した複数の投影画像を生成する。投影画像の生成方法は、例えば、非特許文献１（早坂光晴，外２名，”逆投影法とカルマンフィルタを用いた複数移動物体位置認識とその追跡”, PRMU2001-132, pp.133-138, Nov.2001）に記載されている。尚、カメラ２０１−ｉの設置角度は固定とする。尚、投影画像の解像度は、撮影画像の解像度と同一とする。

【0056】

例えば、投影画像生成部３３３は、カメラ２０１−２の設置高さが２．５ｍ、設置角度が４５度の場合、カメラ２０１−２からの距離を変えながら撮影される人物モデルの投影画像を生成する。

【0057】

人物モデル４０１がカメラ２０１−２から近い位置Ａ_２にあるとき、投影画像ＰＩ_Ａ２が生成される。人物モデル４０１がカメラ２０１−２から遠い位置Ｂ_２にあるとき、投影画像ＰＩ_Ｂ２が生成される。人物モデル４０１がカメラ２０１−２から位置Ｂ_２よりさらに遠い位置Ｃ_２にあるとき、投影画像ＰＩ_Ｃ２が生成される。人物モデル４０１が位置Ａ_２，Ｂ_２にあるとき、人物モデル４０１の全体はカメラ２０１−２の撮影範囲に含まれてるため、投影画像ＰＩ_Ａ２、ＰＩ_Ｂ２において、人物モデル４０１の全体が映っている。人物モデル４０１が位置Ｃ_２にあるとき、人物モデル４０１の上部はカメラ２０１−２の撮影範囲に含まれていないため、投影画像ＰＩ_Ｃ２において、人物モデル４０１の上部は映っていない。

【0058】

投影画像生成部３３３は、同様にカメラ２０１−１からの距離を変えながら撮影される人物モデル４０１の投影画像を生成する。以下、カメラ２０１−ｉからの距離を変えながら撮影される人物モデル４０１の投影画像は、カメラ２０１−ｉの投影画像と表記する場合がある。

【0059】

図５に戻り説明を続ける。
ステップＳ５０４において、全身領域範囲算出部３４２は、投影画像の全身領域の範囲算出処理を行う。ここで投影画像の全身領域の範囲算出処理の詳細について説明する。

【0060】

図８は、投影画像の全身領域の範囲算出処理の詳細なフローチャートである。図８は、ステップＳ５０４に対応する。

【0061】

図９は、全身領域投影画像の例を示す。
図１０は、最大面積の全身領域と中心座標を示す。

【0062】

図１１は、最小面積の全身領域と中心座標を示す。
投影画像の全身領域の範囲算出処理は、各カメラ２０１−ｉの投影画像に対して行われる。例えば、最初にカメラ２０１−１の投影画像に対して、全身領域の範囲算出処理が行われ、次にカメラ２０１−２の投影画像に対して、全身領域の範囲算出処理が行われる。

【0063】

ステップＳ６０１において、全身領域範囲算出部３４２は、カメラ２０１−ｉの投影画像のうち、人物モデル４０１の全体（全身領域）が投影画像に含まれているか判定する。全身領域範囲算出部３４２は、全身領域が含まれている投影画像を選択する。すなわち、全身領域が投影画像に含まれていない撮影画像を後段の処理対象から除外する。

【0064】

例えば、全身領域範囲算出部３４２は、長方体の人物モデル４０１の８つの頂点（a1-a4,b1-b4）が投影画像に含まれているかを確認する。人物モデル４０１の８つの頂点が投影画像ＰＩに含まれている場合、投影画像ＰＩには全身領域が含まれていると判定される（図９）。全身領域が含まれている投影画像ＰＩは、全身領域投影画像と表記する。ここで、投影画像において人物モデル４０１が映っている領域を人物領域とする。すなわち、図９に示すように、人物領域は、投影画像ＰＩにおいて長方体の人物モデル４０１の３つの面が映っている領域である。人物モデル４０１とカメラ２０１−ｉとの距離が近いほど、カメラ２０１−ｉの投影画像において、人物領域の面積は大きくなる。

【0065】

ステップＳ６０２において、全身領域範囲算出部３４２は、全身領域投影画像のうち、最も大きい面積の人物領域を有する全身領域投影画像ＰＩ_ｓｍａｘと、最も小さい面積の人物領域を有する全身領域投影画像ＰＩ_ｓｍｉｎと、を検出する。

【0066】

ステップＳ６０３において、全身領域範囲算出部３４２は、全身領域投影画像ＰＩ_ｓｍａｘの人物領域の中心座標（Ｘ_ｍａｘ，Ｙ_ｍａｘ）を算出する（図１０）。全身領域範囲算出部３４２は、全身領域投影画像ＰＩ_ｓｍｉｎの人物領域の中心座標（Ｘ_ｍｉｎ，Ｙ_ｍｉｎ）を算出する（図１１）。人物領域の中心座標は、投影画像において映っている人物モデル４０１の３つの面のうち、一番手前に映っている長方形の面の中心である。また、人物領域の中心座標は、人物領域の外接矩形の中心としてもよい。人物モデル４０１とカメラ２０１−ｉとの距離が近いほど、カメラ２０１−ｉの投影画像において、人物領域の中心座標のＹ座標の値は大きくなる。

【0067】

上記処理により、カメラ２０１−ｉの投影画像のうち、全身領域投影画像の人物領域のＹ座標の最大値Ｙ_ｍａｘと最小値Ｙ_ｍｉｎが求まる。

【0068】

図５に戻り説明を続ける。
ステップＳ５０５において、全身領域範囲算出部３４２は、撮影画像の全身領域の範囲算出処理を行う。すなわち、全身領域範囲算出部３４２は、撮影画像のうち人物の全身が映っている撮影画像を抽出する。ここで撮影画像の全身領域の範囲算出処理の詳細について説明する。

【0069】

図１２は、撮影画像の全身領域の範囲算出処理の詳細なフローチャートである。図１２は、ステップＳ５０５に対応する。

【0070】

図１３は、撮影画像の全身領域の範囲算出処理を説明する図である。
撮影画像の全身領域の範囲算出処理は、各カメラ２０１−ｉの撮影画像に対して行われる。例えば、最初にカメラ２０１−１の撮影画像に対して、全身領域の範囲算出処理が行われ、次にカメラ２０１−２の撮影画像に対して、全身領域の範囲算出処理が行われる。

【0071】

ステップＳ６１１において、全身領域範囲算出部３４２は、カメラ２０１−ｉの撮影画像それぞれから人物領域を矩形として検出する。例えば、図１３に示すように、全身領域範囲算出部３４２は、人物Ｍが映っている撮影画像Ｉから人物Ｍに外接するような矩形を検出し、当該矩形を人物領域Ｒとする。

【0072】

ステップＳ６１２において、全身領域範囲算出部３４２は、人物領域それぞれの中心座標（Ｘ_ｉ，Ｙ_ｉ）を算出する。例えば、図１３に示すように、全身領域範囲算出部３４２は、人物領域Ｒの中心座標（Ｘ_ｉ，Ｙ_ｉ）を算出する。人物Ｍとカメラ２０１−ｉとの距離が近いほど、カメラ２０１−ｉの撮影画像において、人物領域Ｒの面積は大きくなり、人物領域Ｒの中心座標のＹ座標の値Ｙ_ｉは大きくなる。

【0073】

ステップＳ６１３において、全身領域範囲算出部３４２は、カメラ２０１−ｉの撮影画像のうち、人物領域の中心座標のＹ座標の値Ｙ_ｉがＹ座標の最大値Ｙ_ｍａｘより大きい撮影画像を除外対象と判定し、除外対象として設定する。尚、Ｙ座標の最大値Ｙ_ｍａｘは、投影画像の全身領域の範囲算出処理（ステップＳ５０４）において、カメラ２０１−ｉの投影画像から求めた値である。

【0074】

ステップＳ６１４において、全身領域範囲算出部３４２は、除外対象と判定（設定）されなかった撮影画像の人物領域の中心座標のＹ座標値のうち、最大のＹ座標の値を検出し、記録する。

【0075】

ステップＳ６１５において、全身領域範囲算出部３４２は、カメラ２０１−ｉの撮影画像のうち、人物領域の中心座標のＹ座標の値Ｙ_ｉがＹ座標の最小値Ｙ_ｍｉｎより小さい撮影画像を除外対象と判定し、除外対象として設定する。尚、Ｙ座標の最小値Ｙ_ｍｉｎは、投影画像の全身領域の範囲算出処理（ステップＳ５０４）において、カメラ２０１−ｉの投影画像から求めた値である。

【0076】

ステップＳ６１６において、全身領域範囲算出部３４２は、全身領域範囲算出部３４２は、除外対象と判定（設定）されなかった撮影画像の人物領域の中心座標のＹ座標値のうち、最小のＹ座標の値を検出し、記録する。

【0077】

上記処理により、撮影画像のうち、人物の全身が映っていない撮影画像が除外される。すなわち、撮影画像のうち、人物の全身が映っている撮影画像が抽出される。

【0078】

図５に戻り説明を続ける。
ステップＳ５０６において、変形画像判定部３４４は、変形画像判定処理を行う。以下、変形画像判定処理の詳細について説明する。ここで、２つの変形画像判定処理について説明する。変形画像判定部３４４は、２つの変形画像判定処理のいずれか若しくは両方を実行する。

【0079】

図１４は、変形画像判定処理（その１）の詳細なフローチャートである。図１４は、ステップＳ５０６に対応する。

【0080】

図１５は、変形画像判定処理（その１）を説明する図である。
ステップＳ６２１において、変形画像判定部３４４は、カメラ２０１−ｉのうち、設置角度が小さいカメラ２０１−ｉを選択する。実施の形態では、カメラ２０１−１の設置角度は２５度、カメラ２０１−２の設置角度は４５度であるため、カメラ２０１−１が選択される。

【0081】

ステップＳ６２２において、変形画像判定部３４４は、入力画像Ｉ_ｓ１それぞれの人物領域の面積Ｓを算出する。ここで、入力画像Ｉ_ｓ１は、カメラ２０１−１の撮影画像のうち、ステップＳ５０５の処理で除外対象と判定（設定）されていない撮影画像である。

【0082】

ステップＳ６２３において、変形画像判定部３４４は、入力画像Ｉ_ｓ１それぞれの人物領域のうち、人物領域の面積Ｓが最も大きい人物領域を検出する。例えば、人物Ｍ_１が位置Ａ_１にいるときの撮影画像Ｉ_Ａ１の人物領域Ｒ_Ａ１が検出される（図１５）。

【0083】

ステップＳ６２４において、変形画像判定部３４４は、面積Ｓが最も大きい人物領域の縦と横と比（縦横比）Ｒ１を算出する。例えば、矩形の人物領域の縦のサイズ（画素数）Ｈを横のサイズ（画素数）Ｗで除算することにより、縦横比Ｒ１は算出される。図１５において、人物領域Ｒ_Ａ１の縦横比Ｒ１が算出される。縦横比は、形状の一例である。

【0084】

ステップＳ６２５において、変形画像判定部３４４は、カメラ２０１−ｉのうち、設置角度が大きいカメラ２０１−ｉを選択する。実施の形態では、カメラ２０１−２が選択される。尚、２つのカメラの設置角度が同じ場合には、ステップＳ６２１において任意で一方のカメラが選択され、ステップ６２５において他方のカメラが算出される。

【0085】

ステップＳ６２６において、変形画像判定部３４４は、入力画像Ｉ_ｓ２それぞれの人物領域の縦と横と比（縦横比）Ｒを算出する。ここで、入力画像Ｉ_ｓ２は、カメラ２０１−２の撮影画像のうち、ステップＳ５０５の処理で除外対象と判定（設定）されていない撮影画像である。

【0086】

ステップＳ６２７において、変形画像判定部３４４は、入力画像Ｉ_ｓ２それぞれの人物領域のうち、縦横比Ｒ１に最も近い縦横比Ｒを有する人物領域を検出する。図１５において、人物Ｍ２が位置_Ｂ２にいるときの撮影画像Ｉ_Ｂ２の人物領域Ｒ_Ｂ２が検出される。

【0087】

ステップＳ６２８において、変形画像判定部３４４は、縦横比Ｒ１に最も近い縦横比Ｒを有する人物領域の中心座標（Ｘ_ｍ，Ｙ_ｍ）を算出する。図１５において、人物領域Ｒ_Ｂ２の中心座標（Ｘ_ｍ，Ｙ_ｍ）が算出される。

【0088】

ステップＳ６２９において、変形画像判定部３４４は、入力画像Ｉ_ｓ２のうち、人物領域の中心座標Ｙ_ｉが中心座標Ｙ_ｍより大きい入力画像を除外対象と判定し、除外対象に設定する。図１５において、人物Ｍ_２が位置Ｂ_２よりカメラに近い位置（例えば、Ａ_２）にいるときの撮影画像が除外対象に判定（設定）される。尚、人物Ｍ_２が位置Ｂ_２よりカメラから遠い位置（例えば、Ｃ_２）にいるときの撮影画像は除外対象に判定（設定）されない。

【0089】

図１５において、変形画像判定処理（その１）により、人物Ｍ_２が位置Ｂ_２よりカメラ２０１−２に近い位置にいるときの撮影画像が除外対象に判定される。透視投影により、カメラに近づくほど人物領域の変形が大きくなる。例えば、位置Ｂ_２よりカメラ２０１−２に近い位置Ａ_２に人物Ｍ２がいるときの撮影画像の人物領域Ｒ_Ａ２は、人物領域Ｒ_Ａ１と形状が大きく異なる。このような、カメラ２０１−１の撮影画像の人物領域と大きく形状が異なるカメラ２０１−２の人物領域Ｒ_Ａ２を含む撮影画像を人物の色特徴量の照合に用いないことにより、人物の判定精度を向上できる。

【0090】

図１６は、変形画像判定処理（その２）の詳細なフローチャートである。図１６は、ステップＳ５０６に対応する。

【0091】

図１７は、変形画像判定処理（その１）を説明する図である。
ステップＳ６４１において、変形画像判定部３４４は、変形画像判定部３４４は、カメラ２０１−ｉのうち、設置角度が小さいカメラ２０１−ｉを選択する。実施の形態では、カメラ２０１−１の設置角度は２５度、カメラ２０１−２の設置角度は４５度であるため、カメラ２０１−１が選択される。

【0092】

ステップＳ６４２において、変形画像判定部３４４は、カメラ２０１−１の全身領域投影画像の人物領域のうち、最大の面積の人物領域を検出する。尚、カメラ２０１−１の全身領域投影画像は、カメラ２０１−１の投影画像のうち図８のステップ６０１において除外されなかった投影画像である。

【0093】

ステップＳ６４３において、変形画像判定部３４４は、ステップＳ６４２で検出した最大の面積の人物領域を示す人物領域画像ＳＩ１を生成し、記録する。人物領域画像ＳＩ１は、人物領域の画素の画素値が１、人物領域以外の画素の画素値が０である画像である。

【0094】

ステップＳ６４４において、変形画像判定部３４４は、カメラ２０１−ｉのうち、設置角度が大きいカメラ２０１−ｉを選択する。実施の形態では、カメラ２０１−２が選択される。尚、２つのカメラの設置角度が同じ場合には、ステップＳ６４１において任意で一方のカメラが選択され、ステップ６４４において他方のカメラが算出される。

【0095】

ステップＳ６４５において、変形画像判定部３４４は、カメラ２０１−２の全身領域投影画像の人物領域それぞれを、人物領域画像ＳＩ１の人物領域に合わせて正規化する。例えば、変形画像判定部３４４は、カメラ２０１−２の全身領域投影画像の人物領域の高さまたは幅が人物領域画像ＳＩ１の人物領域と一致するように、カメラ２０１−２の全身領域投影画像の人物領域それぞれを拡大縮小、回転または平行移動する。変形画像判定部３４４は、正規化した人物領域それぞれを示す人物領域画像ＳＩ２を生成する。人物領域画像ＳＩ２は、人物領域の画素の画素値が１、人物領域以外の画素の画素値が０である画像である。

【0096】

ステップＳ６４６において、変形画像判定部３４４は、人物領域画像ＳＩ１と人物領域画像ＳＩ２それぞれとの差分を算出する。人物領域画像ＳＩ１と人物領域画像ＳＩ２の差分は、人物領域画像ＳＩ１の各画素の画素値と人物領域画像ＳＩ２の各画素の画素値との差分の合計である。

【0097】

ステップＳ６４７において、変形画像判定部３４４は、人物領域画像ＳＩ２のうち、人物領域画像ＳＩ１と人物領域画像ＳＩ２との差分が最も小さい人物領域画像が示す人物領域を検出する。

【0098】

図１７において、人物モデルが位置Ｂ_２にいるときの投影画像ＰＩ_Ｂ２の人物領域を正規化され、正規化された人物領域を示す人物領域画像ＳＩ_Ｂ２が生成される。人物領域画像ＳＩ１と人物領域画像ＳＩ_Ｂ２との差分が最も小さいため、投影画像ＰＩ_Ｂ２の人物領域が検出される。

【0099】

ステップＳ６４８において、変形画像判定部３４４は、検出した人物領域の中心座標（Ｘ_ｍ，Ｙ_ｍ）を算出する。図１７において、投影画像ＰＩ_Ｂ２の人物領域の中心座標（Ｘ_ｍ，Ｙ_ｍ）を算出される。

【0100】

ステップＳ６４９において、変形画像判定部３４４は、入力画像Ｉ_ｓ２のうち、人物領域の中心座標Ｙ_ｉがステップＳ６４８で算出した中心座標のＹ座標の値Ｙ_ｍより大きい入力画像を除外対象と判定し、除外対象に設定する。入力画像Ｉ_ｓ２は、カメラ２０１−２の撮影画像のうち、ステップＳ５０５の処理で除外対象と判定（設定）されていない撮影画像である。

【0101】

図１７において、人物Ｍ_２が位置Ｂ_２よりカメラに近い位置（例えば、Ａ_２）にいるときの撮影画像が除外対象に判定（設定）される。尚、人物Ｍ_２が位置Ｂ_２よりカメラから遠い位置（例えば、Ｃ_２）にいるときの撮影画像は除外対象に判定（設定）されない。

【0102】

図５に戻り説明を続ける。
ステップＳ５０７において、低解像度画像判定部３４４は、混合色判定処理を行う。尚、ステップＳ５０７は、省略してもよい。

【0103】

図１８は、混合色判定処理の詳細なフローチャートである。
図１９は、混合色判定処理を説明する図である。

【0104】

混合色判定処理は、各カメラ２０１−ｉの撮影画像に対して行われる。例えば、最初にカメラ２０１−１の撮影画像に対して、混合色判定処理が行われ、次にカメラ２０１−２の撮影画像に対して、混合色判定処理が行われる。

【0105】

ステップＳ６５１において、低解像度画像判定部３４４は、ステップＳ５０３と同様にカメラ２０１−ｉに対してそれぞれ異なる位置の人物モデルを投影した複数の投影画像を生成する。

【0106】

ステップＳ６５２において、低解像度画像判定部３４４は、カメラ２０１−ｉの投影画像それぞれの人物領域の面積Ｓ_ｋを算出し、カメラ２０１−ｉの設置角度に対応した閾値ＳＴに最も近い人物領域の面積Ｓ_ｋを検出する。閾値ＳＴは、人物領域内の混合色の割合が所定値以上となる面積（画素数）である。また、閾値ＳＴは予めカメラの複数の設置角度毎に算出されている。例えば、カメラ２０１−１の設置角度（２５度）に対応した閾値ＳＴ_１、およびカメラ２０１−２の設置角度（４５度）に対応した閾値ＳＴ_２が予め算出されている。また、混合色の判定処理は、例えば、特開２０１７−２０４０９５号公報に記載されている。

【0107】

ステップＳ６５３において、低解像度画像判定部３４４は、検出した人物領域の中心座標（Ｘ_ｋ，Ｙ_ｋ）を算出する。中心座標（Ｘ_ｋ，Ｙ_ｋ）は、例えば、人物領域の外接矩形の中心である（図１９）。

【0108】

ステップＳ６５４において、低解像度画像判定部３４４は、入力画像それぞれの人物領域を検出する。ここで、入力画像は、カメラ２０１−ｉの撮影画像のうち、ステップＳ５０５〜Ｓ５０６の処理で除外対象と判定（設定）されていない撮影画像である。また、入力画像から検出された人物領域は矩形である。

【0109】

ステップＳ６５５において、低解像度画像判定部３４４は、ステップＳ６５４で検出した人物領域それぞれの中心座標（Ｘ_ｉ，Ｙ_ｉ）を算出する。Ｘ_ｉは中心座標のｘ座標の値、Ｙ_ｉは中心座標のＹ座標の値である。

【0110】

ステップＳ６５６において、低解像度画像判定部３４４は、入力画像のうち、中心座標のＹ座標の値Ｙ_ｉがＹ_ｋより小さい人物領域を含む入力画像を除外対象と判定し、除外対象に設定する。中心座標のＹ座標の値Ｙ_ｉがＹ_ｋより小さい場合、人物領域の面積は閾値ＳＴより小さくなる。すなわち、閾値ＳＴより小さい面積の人物領域を含む入力画像が除外対象と判定される。

【0111】

撮影画像において、人物領域の中心座標のＹ座標の値Ｙ_ｉが小さいほど、人物はカメラ２０１−ｉから遠い位置におり、人物領域も小さくなる。よって、中心座標のＹ座標の値Ｙ_ｉがＹ_ｋより小さい人物領域の面積は、閾値ＳＴより小さくなるため、混合色の割合が所定値以上となる。混合色判定処理により、混合色の割合が所定値以上となる撮影画像は、除外対象と判定（設定）される。

【0112】

図５に戻り説明を続ける。
ステップＳ５０８において、範囲算出部３４１は、カメラ２０１−Ｉそれぞれの撮影画像の対象画像の範囲を人物対応付け部３５１に出力する。詳細には、範囲算出部３４１は、カメラ２０１−Ｉそれぞれの撮影画像のうちステップＳ５０４〜Ｓ５０７において除外対象として判定（設定）されなかった撮影画像を示す情報（例えば、撮影画像に割り当てられたフレーム番号）を対象画像の範囲として人物対応付け部３５１に出力する。例えば、範囲算出部３４１は、除外対象として判定（設定）されなかった撮影画像のフレーム番号のうち、最小のフレーム番号と最大のフレーム番号を出力する。すなわち、最小のフレーム番号に対応する撮影画像から最大のフレーム番号に対応する撮影画像までが対象画像の範囲であることを示す。

【0113】

以下、ステップＳ５０９、Ｓ５１０およびステップＳ５１１、Ｓ５１２は、並列に実行される。尚、ステップＳ５０９〜Ｓ５１２は、直列に実行されてもよい。

【0114】

ステップＳ５０９において、範囲算出部３４１からカメラ１による撮影画像のうち、対象画像の範囲を受信する。

【0115】

ステップＳ５１０において、特徴量抽出部３５２は、カメラ１による撮影画像のうち、対象画像の範囲に含まれる撮影画像を選択し、選択した撮影画像それぞれから撮影画像に映っている人物の色特徴量を抽出する。ここでは、人物Ａの色特徴量が抽出されたとする。

【0116】

ステップＳ５１１において、特徴量抽出部３５２は、範囲算出部３４１からカメラ２による撮影画像のうち、対象画像の範囲を受信する。

【0117】

ステップＳ５１２において、特徴量抽出部３５２は、カメラ２による撮影画像のうち、対象画像の範囲に含まれる撮影画像を選択し、選択した撮影画像それぞれから撮影画像に映っている人物の色特徴量を抽出する。ここでは、人物Ｂの色特徴量が抽出されたとする。

【0118】

図２０は、人物データと特徴量データの例である。
特徴量抽出部３５２は、カメラｉそれぞれの対象画像の範囲に含まれる撮影画像に映っている人物のデータＴ_ｉと当該人物の色特徴量を示す特徴量データＦ_ｉとを記憶部３７１に記憶する。

【0119】

図２０は、カメラ１による撮影画像のうち、対象画像の範囲に含まれる撮影画像の映っている人物Ａの人物データＴ_１、およびカメラ２による撮影画像のうち、対象画像の範囲に含まれる撮影画像の映っている人物Ｂの人物データＴ_２を示す。

【0120】

人物データＴ_ｉは、項目として、カメラ番号、人物ＩＤ、検出フレーム、カメラ姿勢、および対象画像範囲を有する。

【0121】

カメラ番号は、カメラｉに割り当てられた、カメラｉを識別する番号である。
人物ＩＤは、人物を識別する識別子である。

【0122】

検出フレーム数は、人物ＩＤに対応する人物の色特徴量が抽出された撮影画像の数である。すなわち、検出フレーム数は、対象画像の範囲に含まれる撮影画像の数である。

【0123】

カメラ姿勢は、カメラｉの設置角度を示す。
対象画像範囲は、カメラｉの撮影画像のうち対象画像の範囲を示す。対象画像範囲には、対象画像の範囲内の撮影画像のうち最小のフレーム番号（Ｎｏ．）と最大のフレーム番号（Ｎｏ．）とが記載される。例えば、人物データＴ_１の「最小値：フレームＮｏ．５」、「最大値：フレームＮｏ．１５」は、カメラ１による撮影画像のうち、フレーム番号が５から１５までの撮影画像が対象画像であることを示す。

【0124】

さらに、図２０は、カメラ１による撮影画像に映っている人物の色特徴量を示す特徴量データＦ_１とカメラ２による撮影画像に映っている人物の色特徴量を示す特徴量データＦ_２とを示す。

【0125】

特徴量データＦ_ｉは、項目として、フレーム番号、時刻、中心座標、および色特徴量を有する。

【0126】

フレーム番号は、撮影画像に割り当てられた番号である。フレーム番号は、例えば、撮影画像に対して撮影時刻の古い順に割り当てられている。

【0127】

時刻は、フレーム番号に対応する撮影画像の撮影時刻である。
中心座標は、フレーム番号に対応する撮影画像の人物領域の中心の座標である。

【0128】

色特徴量は、フレーム番号に対応する撮影画像の人物領域から抽出した色特徴量である。色特徴量は、例えば、人物領域を複数の領域に分割したときの領域毎の色ヒストグラムやＭＳＣＲクラスタ特徴量である。

【0129】

図５に戻り説明を続ける。
ステップＳ５１３において、特徴照合部３５３は、特徴量抽出部３５２により抽出された人物Ａの色特徴量と人物Ｂの色特徴量とを照合し、照合結果に基づいて人物Ａと人物Ｂとが同一人物であるか判定する。例えば、特徴照合部３５３は、非特許文献２（M. Zheng, 外６名, “Privacy-conscious Person Re-identification using Low-resolution Videos”, In ACPR, pp.109-114, 2017）記載の方法や特許文献１記載の方法を用いて、人物Ａと人物Ｂとが同一人物であるか判定する。人物Ａと人物Ｂとが同一人物であるか判定された場合、特徴照合部３５３は、人物Ａと人物Ｂとを対応付ける。

【0130】

ステップＳ５１４において、出力部３６１は、対応付けの結果を記憶部３７１に出力し、記憶部３７１は対応付けの結果を記憶する。また、出力部３６１は、情報処理装置３０１と接続する他の装置（不図示）に対応付けの結果を出力してもよい。

【0131】

実施の形態の情報処理装置によれば、複数の撮影画像のうち、人物の全身が映っていない撮影画像を対象画像の範囲から除外することで、同一人物の判定精度を向上できる。

【0132】

実施の形態の情報処理装置によれば、複数の撮影画像のうち、カメラ間で人物の変形が大きい撮影画像を対象画像の範囲から除外することで、同一人物の判定精度を向上できる
実施の形態の情報処理装置によれば、混合色が多くなる解像度の人物領域を有する撮影画像を対象画像の範囲から除外することで、同一人物の判定精度を向上できる。

【0133】

図２１は、他の実施の形態に係るシステムの構成図である。
システム１１０１は、カメラ１２０１−ｊ（ｊ＝１〜３）、映像入力装置１３０１−ｊ、画像選択装置１４０１、解析サーバ１５０１、および記憶装置１６０１を含む。解析サーバ１５０１は、照合装置の一例である。

【0134】

カメラ１２０１−１〜１２０１−３は、それぞれ撮影範囲Ａ〜Ｃを撮影し、撮影画像を映像入力装置１３０１−１〜１３０１−３にそれぞれ出力する。

【0135】

映像入力装置１３０１−ｊは、画像入力部３１１−ｉと同様の機能を有する。映像入力装置１３０１−ｊは、カメラ１２０１−ｊから入力された撮影画像の解像度を所定の解像度に低下させた撮影画像を生成し、解像度が低下した撮影画像を画像選択装置１４０１および解析サーバ１５０１に出力する。画像選択装置１４０１および解析サーバ１５０１は、解像度が低下した撮影画像を用いて処理を行う。撮影画像の解像度を低下させるのは、撮影された人物のプライバシーを保護するためである。

【0136】

画像選択装置１４０１は、カメラ姿勢算出部３２１、投影画像生成部３３１、および対象範囲算出部３４１と同等の機能を有する。画像選択装置１４０１は、さらに画像入力部３１１−ｉと同等の機能を有してもよい。解析サーバ１５０１は、人物対応付け部３５１および出力部３６１と同等の機能を有する。記憶装置１６０１は、記憶部３７１と同等の機能を有する。

【0137】

画像選択装置１４０１は、入力された撮影画像のうち人物領域の色特徴量の抽出に用いられる撮影画像を選択し、選択した撮影画像を示す情報（対象範囲）を解析サーバ１５０１に出力する。

【0138】

解析サーバ１５０１は、画像選択装置１４０１から受信した対象範囲に対応する撮影画像から人物領域の色特徴量を抽出し、抽出した色特徴量を用いて、人物の同定（すなわち異なるカメラでそれぞれ撮影された人物が同一人物であるかの）判定を行う。

【0139】

さらに、解析サーバ１５０１は、人物の同定において、服装色が類似した人物の判定精度の低下を防ぐために、カメラ間の距離、人物の移動速度、および移動方向の整合性から照合に用いる人物の色特徴量を絞り込んでもよい。例えば、カメラ１２０１−ｊ間の距離、人物の移動速度、および移動方向が分かれば、あるカメラである人物が検出された時刻から、他のカメラで当該人物が出現する時間帯を推定できる。よって、解析サーバ１５０１は、推定された時間帯に出現した人物の色特徴量を照合対象として絞り込む。

【0140】

図２１において、人物Ｍ_１、Ｍ_２が撮影範囲Ａにいるときの撮影画像、人物Ｍ’_１、Ｍ_３が撮影範囲Ｂにいるときの撮影画像、および人物Ｍ’’_１、Ｍ_４が撮影範囲Ｃにいるときの撮影画像を用いて、人物の同定を行う。

【0141】

人物Ｍ_１は、撮影範囲Ａから撮影範囲Ｂの方向に移動している。人物Ｍ’_１は、撮影範囲Ｂから撮影範囲Ｃの方向に移動している。人物Ｍ_３は、撮影範囲Ｂから撮影範囲Ａの方向に移動している。人物Ｍ’’_１の移動方向は、人物Ｍ’_１は同じである。

【0142】

また、人物Ｍ_１、Ｍ’_１、Ｍ_３、Ｍ’’_１の服の色は、互いに同じまたは類似している。人物Ｍ_２の服の色は、人物Ｍ_１、Ｍ’_１、Ｍ_３、Ｍ’’_１、Ｍ_４と異なる。人物Ｍ_４の服の色は、人物Ｍ_１、Ｍ’_１、Ｍ_３、Ｍ’’_１、Ｍ_２と異なる。

【0143】

ここで、カメラ１２０１−１で撮影された人物Ｍ１と一致する人物をカメラ１２０１−２の撮影画像から見つける場合を説明する。解析サーバ１５０１は、カメラ１２０１−１の撮影画像から人物Ｍ_１の移動方向および移動速度を算出し、算出結果から人物Ｍ_１が出現する時間帯や場所を推定する。例えば、人物Ｍ_１は、ある時間帯に撮影範囲Ｂに出現すると推定される。解析サーバ１５０１は、推定された時間帯のカメラ１２０１−２の撮影画像を用いて、人物Ｍ_１の同定を行う。例えば、解析サーバ１５０１は、推定された時間帯に撮影された人物Ｍ’_１、Ｍ_３が映っているカメラ１２０１−２の撮影画像を用いて、人物Ｍ_１との一致判定を行う。

【0144】

また、人物の色特徴量（すなわち、服の色）を用いるだけでは、例えば、人物Ｍ_１と一致する人物が人物Ｍ’_１と人物Ｍ_３のいずれかであるか精度良く判定することが難しい。解析サーバ１５０１は、撮影画像から人物Ｍ’_１と人物Ｍ_３の移動方向を算出する。人物Ｍ_１の移動方向と人物Ｍ’_１の移動方向はほぼ同じであり、人物Ｍ_１の移動方向と人物Ｍ_３の移動方向は大きく異なる。よって、人物Ｍ_１と人物Ｍ’_１とが同一人物である可能性が高いと考えられる。解析サーバ１５０１は、人物Ｍ_１の色特徴量と照合する対象から、人物Ｍ_３の色特徴量を除外し、人物Ｍ_１の色特徴量と人物Ｍ’_１の色特徴量とを照合する。このように照合する対象を絞り込むことで、服の色が類似した人物が複数いる場合でも、人物の判定精度を向上できる。

【0145】

図２２は、情報処理装置（コンピュータ）の構成図である。
実施の形態の情報処理装置３０１、映像入力装置１３０１−ｊ、画像選択装置１４０１、および解析サーバ１５０１は、例えば、図２２に示すような情報処理装置（コンピュータ）１１によって実現可能である。

【0146】

情報処理装置１１は、Central Processing Unit（ＣＰＵ）１２、メモリ１３、入力装置１４、出力装置１５、記憶部１６、記録媒体駆動部１７、及びネットワーク接続装置１８を備え、それらはバス１９により互いに接続されている。図１のカメラ２０１−ｉは、バス１９に接続されていてもよい。

【0147】

ＣＰＵ１２は、情報処理装置１１全体を制御する中央処理装置（プロセッサ）である。ＣＰＵ１２は、画像入力部３１１−ｉ、カメラ姿勢算出部３２１、投影画像生成部３３１、対象範囲算出部３４１、人物対応付け部３５１、および出力部３６１として動作する。

【0148】

メモリ１３は、プログラム実行の際に、記憶部１６（あるいは可搬記録媒体２０）に記憶されているプログラムあるいはデータを一時的に格納するRead Only Memory(ＲＯＭ)やRandom Access Memory(ＲＡＭ)等のメモリである。ＣＰＵ１２は、メモリ１３を利用してプログラムを実行することにより、上述した各種処理を実行する。

【0149】

入力装置１４は、ユーザ又はオペレータからの指示や情報の入力、情報処理装置１１で用いられるデータの取得等に用いられる。入力装置１４は、例えば、キーボード、マウス、タッチパネル等である。

【0150】

出力装置１５は、ユーザ又はオペレータへの問い合わせや処理結果を出力する装置である。出力装置５は、例えば、ディスプレイ、またはプリンタ等である。

【0151】

記憶部１６は、例えば、磁気ディスク装置、光ディスク装置、テープ装置等である。情報処理装置１１は、記憶部１６に、上述のプログラムとデータを保存しておき、必要に応じて、それらをメモリ１３に読み出して使用する。記憶部１６は、記憶部３７１に対応する。

【0152】

記録媒体駆動部１７は、可搬記録媒体２０を駆動し、その記録内容にアクセスする。可搬記録媒体としては、メモリカード、フレキシブルディスク、Compact Disk Read Only Memory(ＣＤ−ＲＯＭ)、光ディスク、光磁気ディスク等、任意のコンピュータ読み取り可能な記録媒体が用いられる。ユーザは、この可搬記録媒体２０に上述のプログラムとデータを格納しておき、ＣＰＵ１２は、必要に応じて、それらをメモリ１３に読み出して使用する。

【0153】

ネットワーク接続装置１８は、Local Area Network（ＬＡＮ）やWide Area Network（ＷＡＮ）等の任意の通信ネットワークに接続され、通信に伴うデータ変換を行う通信インターフェースである。ネットワーク接続装置８は、通信ネットワークを介して接続された装置へデータの送信または通信ネットワークを介して接続された装置からデータを受信する。

【0154】

なお、情報処理装置１１が図２２のすべての構成要素を含む必要はなく、用途や条件に応じて一部の構成要素を省略することも可能である。例えば、ユーザ又はオペレータからの指示や情報の入力を行わない場合は、入力装置１４を省略してもよく、ユーザ又はオペレータへの問い合わせや処理結果の出力を行わない場合は、出力装置１５を省略してもよい。情報処理装置が可搬記録媒体２０にアクセスしない場合は、記録媒体駆動部１７を省略してもよい。

【0155】

以上の実施の形態に関し、さらに以下の付記を開示する。
（付記１）
第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、
前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信し、
前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、
前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出し、
前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択する、
処理をコンピュータに実行させる画像選択プログラム。
（付記２）
前記コンピュータが
前記第１の設置角度に基づく第１の閾値と前記複数第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域の面積に基づいて、画像照合の対象とする第２の照合対象画像を前記第１の全身領域撮影画像から選択し、
前記第２の設置角度に基づく第２の閾値と前記第１の照合対象画像それぞれの前記第２の人物が映っている領域の面積に基づいて、前記第２の照合対象画像との画像照合の対象とする第３の照合対象画像を前記第１の照合対象画像から選択する、ことを特徴とする付記１記載の画像選択プログラム。
（付記３）
前記第１の設置角度に基づいて、所定の人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第１の投影画像を生成し、
前記第２の設置角度に基づいて、前記人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第２の投影画像を生成する処理をさらに備え、
前記複数の第１の全身領域撮影画像を抽出する処理において、前記複数の第１の投影画像を用いて、前記複数の第１の撮影画像に前記第１の人物の全身が映っているか判定し、
前記複数の第２の全身領域撮影画像を抽出する処理において、前記複数の第２の投影画像を用いて、前記複数の第２の撮影画像に前記第２の人物の全身が映っているか判定することを特徴とする付記１または２記載の画像選択プログラム。
（付記４）
前記第１の画像は、前記複数第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域のうちで最も大きな前記第１の人物が映っている領域を含むことを特徴とする付記１乃至３のいずれか１項に記載の画像選択プログラム。
（付記５）
第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信する受信部と、
前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出する第１の処理部と、
前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択する第２の処理部と、
を備える情報処理装置。
（付記６）
前記第１の設置角度に基づく第１の閾値と前記複数第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域の面積に基づいて、画像照合の対象とする第２の照合対象画像を前記第１の全身領域撮影画像から選択し、前記第２の設置角度に基づく第２の閾値と前記第１の照合対象画像それぞれの前記第２の人物が映っている領域の面積に基づいて、前記第２の照合対象画像との画像照合の対象とする第３の照合対象画像を前記第１の照合対象画像から選択する第３の処理部をさらに備えることを特徴とする付記５記載の情報処理装置。
（付記７）
前記第１の設置角度に基づいて、所定の人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第１の投影画像を生成し、前記第２の設置角度に基づいて、前記人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第２の投影画像を生成する第４の処理部をさらに備え、
第１の処理部は、前記複数の第１の投影画像を用いて、前記複数の第１の撮影画像に前記第１の人物の全身が映っているか判定し、前記複数の第２の投影画像を用いて、前記複数の第２の撮影画像に前記第２の人物の全身が映っているか判定することを特徴とする付記５または６記載の情報処理装置。
（付記８）
前記第１の画像は、前記複数第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域のうちで最も大きな前記第１の人物が映っている領域を含むことを特徴とする付記５乃至７のいずれか１項に記載の情報処理装置。
（付記９）
第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信する受信部と、
前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出する第１の処理部と、
前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択する第２の処理部と、
を備える画像選択装置と、
前記第１の全身領域撮影画像と前記第１の照合対象画像とを照合して、前記第１の人物と前記第２の人物が同一人物であるか判定する照合装置と、
を備えるシステム。
（付記１０）
前記画像選択装置は、前記第１の設置角度に基づく第１の閾値と前記複数第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域の面積に基づいて、画像照合の対象とする第２の照合対象画像を前記第１の全身領域撮影画像から選択し、前記第２の設置角度に基づく第２の閾値と前記第１の照合対象画像それぞれの前記第２の人物が映っている領域の面積に基づいて、前記第２の照合対象画像との画像照合の対象とする第３の照合対象画像を前記第１の照合対象画像から選択する第３の処理部をさらに備えることを特徴とする付記９記載のシステム。
（付記１１）
前記画像選択装置は、前記第１の設置角度に基づいて、所定の人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第１の投影画像を生成し、前記第２の設置角度に基づいて、前記人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第２の投影画像を生成する第４の処理部をさらに備え、
第１の処理部は、前記複数の第１の投影画像を用いて、前記複数の第１の撮影画像に前記第１の人物の全身が映っているか判定し、前記複数の第２の投影画像を用いて、前記複数の第２の撮影画像に前記第２の人物の全身が映っているか判定することを特徴とする付記９または１０記載のシステム。
（付記１２）
前記第１の画像は、前記複数第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域のうちで最も大きな前記第１の人物が映っている領域を含むことを特徴とする付記９乃至１１のいずれか１項に記載のシステム。
（付記１３）
コンピュータが
第１の設置角度で設置された第１のカメラで撮影された第１の人物が映っている複数の第１の撮影画像を受信し、
前記第１の設置角度より大きい第２の設置角度で設置された第２のカメラで撮影された第２の人物が映っている複数の第２の撮影画像を受信し、
前記第１の人物の全身が映っている複数の第１の全身領域撮影画像を前記複数の第１の撮影画像から抽出し、
前記第２の人物の全身が映っている複数の第２の全身領域撮影画像を前記複数の第２の撮影画像から抽出し、
前記複数の第２の全身領域撮影画像それぞれの前記第２の人物が映っている領域の形状と、前記複数第１の全身領域撮影画像のうちの第１画像の前記第１の人物が映っている領域の形状とに基づいて、前記第１の全身領域撮影画像との画像照合の対象とする第１の照合対象画像を前記複数の第２の全身領域撮影画像から選択する、
ことを特徴とする画像選択方法。
（付記１４）
前記コンピュータが
前記第１の設置角度に基づく第１の閾値と前記複数第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域の面積に基づいて、画像照合の対象とする第２の照合対象画像を前記第１の全身領域撮影画像から選択し、
前記第２の設置角度に基づく第２の閾値と前記第１の照合対象画像それぞれの前記第２の人物が映っている領域の面積に基づいて、前記第２の照合対象画像との画像照合の対象とする第３の照合対象画像を前記第１の照合対象画像から選択する、ことを特徴とする付記１３記載の画像選択方法。
（付記１５）
前記コンピュータが
前記第１の設置角度に基づいて、所定の人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第１の投影画像を生成し、
前記第２の設置角度に基づいて、前記人物モデルの位置を変更しながら前記人物モデルを画像上に投影した複数の第２の投影画像を生成し、
前記複数の第１の全身領域撮影画像を抽出する処理において、前記複数の第１の投影画像を用いて、前記複数の第１の撮影画像に前記第１の人物の全身が映っているか判定し、
前記複数の第２の全身領域撮影画像を抽出する処理において、前記複数の第２の投影画像を用いて、前記複数の第２の撮影画像に前記第２の人物の全身が映っているか判定することを特徴とする付記１３または１４記載の画像選択方法。
（付記１６）
前記第１の画像は、前記複数第１の全身領域撮影画像それぞれの前記第１の人物が映っている領域のうちで最も大きな前記第１の人物が映っている領域を含むことを特徴とする付記１３乃至１５のいずれか１項に記載の画像選択方法。

【符号の説明】

【0156】

２０１ カメラ
３０１ 情報処理装置
３１１ 画像入力部
３２１ カメラ姿勢算出部
３３１ 投影画像生成部
３３２ 人物モデル生成部
３３３ 投影画像生成部
３４１ 対象範囲算出部
３４２ 全身領域範囲算出部
３４３ 変形画像判定部
３４４ 低解像度画像判定部
３５１ 人物対応付け部
３５２ 特徴量抽出部
３５３ 特徴量照合部
３６１ 出力部
３７１ 記憶部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】