特許 6687658 領域区分装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6687658

(24)【登録日】2020年4月6日

(45)【発行日】2020年4月28日

(54)【発明の名称】領域区分装置

(51)【国際特許分類】

   G06T 7/11 20170101AFI20200421BHJP

   G06T 7/254 20170101ALI20200421BHJP

【ＦＩ】

   G06T7/11

   G06T7/254 B

【請求項の数】6

【全頁数】19

(21)【出願番号】特願2018-57831(P2018-57831)

(22)【出願日】2018年3月26日

(65)【公開番号】特開2019-169056(P2019-169056A)

(43)【公開日】2019年10月3日

【審査請求日】2019年4月9日

(73)【特許権者】

【識別番号】000108085

【氏名又は名称】セコム株式会社

(74)【代理人】

【識別番号】110000154

【氏名又は名称】特許業務法人はるか国際特許事務所

(72)【発明者】

【氏名】野中 陽介

(72)【発明者】

【氏名】▲高▼橋 功

【審査官】 佐藤 実

(56)【参考文献】

【文献】 国際公開第２００７／０８３４９４（ＷＯ，Ａ１）

【文献】 特開２０１５−４６８１０（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｔ ７／００ − ７／９０

(57)【特許請求の範囲】

【請求項1】

所定の空間が撮影された撮影画像について、背景に対する変化領域を実物体による実体部分と影による影部分とに区分する領域区分装置であって、
前記変化領域を前記実体部分の候補領域と前記影部分の候補領域とに仮区分する仮区分手段と、
前記空間の背景の立体形状を模した三次元背景と前記空間を照らす光源の光源位置とを含んだ環境モデル、および前記撮影画像を撮影したカメラのカメラパラメータを記憶している記憶手段と、
前記環境モデルと前記カメラパラメータとを用いて、前記候補領域の少なくとも一方について、当該候補領域との関係が、前記空間内の実物体の前記撮影画像への投影領域と前記光源により生じる当該実物体の影の前記撮影画像への投影領域との関係となる対応投影領域を逆算する逆算手段と、
前記対応投影領域と前記変化領域との重複度合いに応じて前記候補領域の正否を判定する判定手段と、
を備えたことを特徴とする領域区分装置。

【請求項2】

前記逆算手段は、前記影部分の前記候補領域である影候補領域に対する前記対応投影領域として前記影候補領域に整合する影を生じる実物体が前記撮影画像にて撮影され得る推定実体部分を逆算し、
前記判定手段は、前記推定実体部分と前記変化領域との前記重複度合いが所定の基準を超える場合に前記影候補領域を前記影部分と判定し、前記重複度合いが前記基準を下回る場合に前記影候補領域を前記実体部分と判定すること、
を特徴とする請求項１に記載の領域区分装置。

【請求項3】

前記逆算手段は、前記影候補領域を前記三次元背景に逆投影して逆投影領域を求め、前記光源から見た当該逆投影領域の前端に鉛直面を設定し、前記光源位置と当該逆投影領域とを結ぶ光線が当該鉛直面に形成する領域を前記カメラの撮影面に投影して前記推定実体部分を逆算すること、を特徴とする請求項２に記載の領域区分装置。

【請求項4】

前記逆算手段は、前記実体部分の前記候補領域である実体候補領域に対する前記対応投影領域として前記実体候補領域に整合する実物体の影が前記撮影画像にて撮影され得る推定影部分を逆算し、
前記判定手段は、前記推定影部分と前記変化領域との前記重複度合いが所定の基準を超える場合に前記実体候補領域を前記実体部分と判定し、前記重複度合いが前記基準を下回る場合に前記実体候補領域を前記影部分と判定すること、
を特徴とする請求項１から請求項３のいずれか１つに記載の領域区分装置。

【請求項5】

前記逆算手段は、前記実体候補領域を前記三次元背景に逆投影して逆投影領域を求め、前記カメラから見た当該逆投影領域の前端に鉛直面を設定し、前記実体候補領域を当該鉛直面に逆投影した逆投影領域を通る前記光源位置からの光線が前記三次元背景に形成する領域を前記カメラの撮影面に投影して前記推定影部分を逆算すること、を特徴とする請求項４に記載の領域区分装置。

【請求項6】

前記仮区分手段は、前記変化領域において前記撮影画像の輝度値が基準よりも低い部分を前記影部分の前記候補領域に仮区分すること、を特徴とする請求項１から請求項５のいずれか１つに記載の領域区分装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像における変化領域を、実物体による実体部分と影による影部分とに区分する領域区分装置に関する。

【背景技術】

【0002】

防犯等のために、移動物体等により生じた撮影画像上の変化領域を背景差分処理等によって抽出することがしばしば行われる。この変化領域は、移動物体等の実体によって変化が生じた部分（実体部分）と当該移動物体の影によって変化が生じた部分（影部分）とが一体化して抽出されたものである場合があり、影部分が移動物体の解析に際して外乱となる。

【0003】

従来、変化領域を実体部分と影部分に区分するために、影による輝度の低下を判定する処理や、移動物体の三次元モデルを用いたシミュレーションにより影を再現する処理等が行われてきた。すなわち、例えば特許文献１に記載の動体抽出装置においては、変化領域を構成する画素のうち、背景画像の輝度値よりも撮影画像の輝度値が低い画素を影によるものと判定していた。また、例えば特許文献２に記載の図形認識装置においては、太陽などの光源の位置を撮影時刻と撮影場所の緯度・経度から求め、人等の三次元モデルとから変化領域内の影部分を推定していた。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開平５−１５１３５６号公報

【特許文献2】国際公開第２００７／０８３４９４号

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、輝度の低下の判定では、黒髪や黒服のように撮影画像における実体の低輝度部分を影部分と誤判定する問題があった。すなわち、輝度値について多様である移動物体によって生じる変化領域を高精度に区分することが困難であった。

【0006】

また、移動物体の三次元モデルを用いたシミュレーションでは、実体部分と影部分とを区分する精度が三次元モデルの近似精度に依存するため、種類、個体差および姿勢等について多様である移動物体によって生じる変化領域を高精度に区分することが困難であった。すなわち、変化領域は、人、車両、動物など様々な種類の移動物体によって生じ、さらに同種の移動物体であっても個体差や姿勢変動が生じる。そのため、変化領域を高精度に区分するには、当該変化領域を生じさせている移動物体の種類、個体差および姿勢等に適合した三次元モデルを要するが、実体部分を区分する前の段階で種類、個体差および姿勢等を特定することが困難であった。

【0007】

本発明は上記問題を鑑みてなされたものであり、多様な実物体による変化領域を実体部分と影部分とに高精度に区分できる領域区分装置を提供することを目的とする。

【課題を解決するための手段】

【0008】

（１）本発明に係る領域区分装置は、所定の空間が撮影された撮影画像について、背景に対する変化領域を実物体による実体部分と影による影部分とに区分する装置であって、前記変化領域を前記実体部分の候補領域と前記影部分の候補領域とに仮区分する仮区分手段と、前記空間の背景の立体形状を模した三次元背景と前記空間を照らす光源の光源位置とを含んだ環境モデル、および前記撮影画像を撮影したカメラのカメラパラメータを記憶している記憶手段と、前記環境モデルと前記カメラパラメータとを用いて、前記候補領域の少なくとも一方について、当該候補領域との関係が、前記空間内の実物体の前記撮影画像への投影領域と前記光源により生じる当該実物体の影の前記撮影画像への投影領域との関係となる対応投影領域を逆算する逆算手段と、前記対応投影領域と前記変化領域との重複度合いに応じて前記候補領域の正否を判定する判定手段と、を備える。

【0009】

（２）上記（１）に記載する領域区分装置において、前記逆算手段は、前記影部分の前記候補領域である影候補領域に対する前記対応投影領域として前記影候補領域に整合する影を生じる実物体が前記撮影画像にて撮影され得る推定実体部分を逆算し、前記判定手段は、前記推定実体部分と前記変化領域との前記重複度合いが所定の基準を超える場合に前記影候補領域を前記影部分と判定し、前記重複度合いが前記基準を下回る場合に前記影候補領域を前記実体部分と判定する構成とすることができる。

【0010】

（３）上記（２）に記載する領域区分装置において、前記逆算手段は、前記影候補領域を前記三次元背景に逆投影して逆投影領域を求め、前記光源から見た当該逆投影領域の前端に鉛直面を設定し、前記光源位置と当該逆投影領域とを結ぶ光線が当該鉛直面に形成する領域を前記カメラの撮影面に投影して前記推定実体部分を逆算する構成とすることができる。

【0011】

（４）上記（１）〜（３）に記載する領域区分装置において、前記逆算手段は、前記実体部分の前記候補領域である実体候補領域に対する前記対応投影領域として前記実体候補領域に整合する実物体の影が前記撮影画像にて撮影され得る推定影部分を逆算し、前記判定手段は、前記推定影部分と前記変化領域との前記重複度合いが所定の基準を超える場合に前記実体候補領域を前記実体部分と判定し、前記重複度合いが前記基準を下回る場合に前記実体候補領域を前記影部分と判定する構成とすることができる。

【0012】

（５）上記（４）に記載する領域区分装置において、前記逆算手段は、前記実体候補領域を前記三次元背景に逆投影して逆投影領域を求め、前記カメラから見た当該逆投影領域の前端に鉛直面を設定し、前記実体候補領域を当該鉛直面に逆投影した逆投影領域を通る前記光源位置からの光線が前記三次元背景に形成する領域を前記カメラの撮影面に投影して前記推定影部分を逆算する構成とすることができる。

【0013】

（６）上記（１）〜（５）に記載する領域区分装置において、前記仮区分手段は、前記変化領域において前記撮影画像の輝度値が基準よりも低い部分を前記影部分の前記候補領域に仮区分する構成とすることができる。

【発明の効果】

【0014】

本発明によれば、多様な実物体による変化領域を実体部分と影部分とに高精度に区分できる。

【図面の簡単な説明】

【0015】

【図1】本発明の実施形態に係る画像監視装置の概略の構成を示すブロック図である。

【図2】本発明の実施形態に係る画像監視装置の概略の機能ブロック図である。

【図3】変化領域抽出手段が撮影画像から、人物とその影が一体化した変化領域を抽出した場合の例を示す模式図である。

【図4】監視空間を模した環境モデルの模式図である。

【図5】影・実体部分判定手段の処理例を説明する模式図である。

【図6】本発明の実施形態に係る画像監視装置による領域区分処理の他の例を説明する模式図である。

【図7】本発明の実施形態に係る画像監視装置による、複数の実体とそれらの影とが一体化した変化領域に対する領域区分処理の例を説明する模式図である。

【図8】本発明の実施形態に係る画像監視装置の概略の動作のフロー図である。

【図9】領域区分処理の概略のフロー図である。

【図10】領域区分処理の概略のフロー図である。

【発明を実施するための形態】

【0016】

以下、本発明の実施の形態（以下実施形態という）である画像監視装置１について、図面に基づいて説明する。画像監視装置１は、所定の空間（監視空間）が撮影された画像（撮影画像）に生じる変化領域に基づいて人や不審物等の監視対象物体の有無等を解析する。特に、画像監視装置１は、撮影画像にて背景に対して生じた変化領域を、背景の中に前景として現れる物体（実物体）による実体部分と影による影部分とに区分する本発明に係る領域区分装置を含んで構成される。

【0017】

［画像監視装置１の構成］
図１は画像監視装置１の概略の構成を示すブロック図である。画像監視装置１はカメラ２、通信部３、記憶部４、画像処理部５および報知部６からなる。

【0018】

カメラ２は監視カメラであり、通信部３を介して画像処理部５と接続され、監視空間を所定の時間間隔で撮影して撮影画像を生成し、撮影画像を順次、画像処理部５に入力する撮影手段である。例えば、カメラ２は、監視空間であるイベント会場の一角に設置されたポールに当該監視空間を俯瞰する所定の固定視野を有して設置され、監視空間をフレーム周期１秒で撮影してカラー画像を生成する。なお、カメラ２はカラー画像の代わりにモノクロ画像を生成してもよい。

【0019】

通信部３は通信回路であり、その一端が画像処理部５に接続され、他端がカメラ２および報知部６と接続される。通信部３はカメラ２から撮影画像を取得して画像処理部５に入力し、画像処理部５から入力された解析結果を報知部６へ出力する。

【0020】

例えば、カメラ２および報知部６がイベント会場内の監視センターに設置され、通信部３、記憶部４および画像処理部５が遠隔地の画像解析センターに設置される場合、通信部３とカメラ２、および通信部３と報知部６をそれぞれインターネット回線にて接続し、通信部３と画像処理部５はバスで接続する構成とすることができる。その他、例えば各部を同一建屋内に設置する場合は、通信部３とカメラ２を同軸ケーブルまたはＬＡＮ（Local Area Network）で接続し、通信部３と報知部６はディスプレイケーブル、通信部３と画像処理部５はバスで接続するなど、各部の設置場所に応じた形態で適宜接続される。

【0021】

記憶部４は、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等のメモリ装置であり、各種プログラムや各種データを記憶する。記憶部４は画像処理部５と接続されて、画像処理部５との間でこれらの情報を入出力する。

【0022】

画像処理部５は、ＣＰＵ（Central Processing Unit）、ＤＳＰ（Digital Signal Processor）、ＭＣＵ（Micro Control Unit）等の演算装置で構成される。画像処理部５は記憶部４からプログラムを読み出して実行することにより各種処理手段・制御手段として動作し、必要に応じて、各種データを記憶部４から読み出し、生成したデータを記憶部４に記憶させる。また、画像処理部５は、通信部３経由でカメラ２から取得した撮影画像から監視空間における監視対象物の有無や位置などに関する解析結果を生成し、通信部３を介して報知部６へ出力する。

【0023】

報知部６は、液晶ディスプレイまたはＣＲＴ（Cathode Ray Tube）ディスプレイ等のディスプレイ装置であり、通信部３から入力された解析結果に含まれる監視対象物体の有無や位置等の情報を表示することによって監視員に報知する。報知部６には、さらに、注意喚起を強調するためにブザーやランプ等を含めることもできる。監視員は表示された解析結果を視認して対処の要否等を判断し、必要に応じて対処員を急行させる等の対処を行う。

【0024】

なお、本実施形態においては、通信部３と画像処理部５の組に対してカメラ２が１台である画像監視装置１を例示するが、別の実施形態においては、通信部３と画像処理部５の組に対してカメラ２が２台以上接続された構成とすることもできる。その場合、通信部３は各カメラ２から撮影画像を時分割で受信し、画像処理部５は各カメラ２からの撮影画像を時分割処理または並列処理する。

【0025】

［画像監視装置１の機能］
図２は画像監視装置１の概略の機能ブロック図である。図２には専ら、通信部３、記憶部４および画像処理部５の機能が示されており、具体的には、通信部３は撮影画像取得手段３０、解析結果出力手段３１等として機能し、記憶部４は環境モデル記憶手段４０、カメラ情報記憶手段４１等として機能し、画像処理部５は変化領域抽出手段５０、仮区分手段５１、影・実体部分逆算手段５２、影・実体部分判定手段５３、物体画像解析手段５４等として機能する。

【0026】

撮影画像取得手段３０はカメラ２から撮影画像を順次取得して、取得した撮影画像を変化領域抽出手段５０に順次出力する。

【0027】

変化領域抽出手段５０は撮影画像と背景画像とを比較してそれらの間での変化領域を抽出し、抽出された変化領域の情報を仮区分手段５１および影・実体部分判定手段５３へ出力する。変化領域の抽出は公知の背景差分処理又は背景相関処理により行うことができる。すなわち、撮影画像と背景画像との間における同一座標の画素の値の相違度（差又は相関値）を算出し、相違度が閾値を超える画素を変化画素として検出する。そして、互いに隣接する変化画素をまとめ、まとめた領域を変化領域として抽出する。検出の閾値は事前実験等に基づいて予め設定される。なお、１〜数画素程度の領域はノイズであるとして抽出対象から除外する。

【0028】

なお、背景画像は監視空間の背景の像のみが含まれ、監視対象とする物体の像が含まれていない画像である。具体的には変化領域抽出手段５０は人などの移動物体が監視空間内に存在しない状態での撮影画像を背景画像とすることができる。或いは、撮影画像の照明条件にて環境モデルをレンダリングすることによって背景画像を生成することができる。

【0029】

仮区分手段５１は変化領域抽出手段５０から入力された変化領域を実体部分の候補領域（実体候補領域）と影部分の候補領域（影候補領域）とに仮区分し、仮区分結果である実体候補領域および影候補領域の情報を影・実体部分逆算手段５２へ出力する。例えば、撮影画像と変化領域抽出手段５０が生成した背景画像とにおける対応する画素同士の輝度を比較し、変化領域を構成する画素のうち背景画像よりも撮影画像の輝度が低い画素を影候補領域に仮区分し、影候補領域に仮区分されなかった画素を実体候補領域に仮区分する。なお、撮影画像および背景画像がカラー画像の場合はグレースケールに変換して得られる画素値を比較すればよく、濃淡画像の場合は画素値をそのまま比較すればよい。

【0030】

また、仮区分手段５１は背景画像の影領域の画素との類否に基づいて仮区分を行うこともできる。具体的には、仮区分手段５１は、環境モデルとカメラパラメータとを用い、カメラ２の撮影面に投影される画像上での背景の影領域を模擬し、撮影画像において影領域内に参照影画素を設定する。そして、変化領域を構成する画素のうち、当該画素に対応付けられた背景物体の反射特性および当該画素の値の特徴が参照影画素と類似した画素を影候補領域に分類し、それ以外の画素を実体候補領域に分類する。

【0031】

その他、仮区分手段５１は、実体部分と影部分とを区分する公知の処理によって変化領域を仮区分する構成とすることもできる。

【0032】

環境モデル記憶手段４０は、監視空間の背景を構成する複数の構成物（背景物体）の三次元モデルを三次元背景として記憶する。

【0033】

背景物体は例えば、屋外であれば、歩道、道路、建物、標識などの建造物や、樹木などの移動しない自然物である。好適には、道路のうちのアスファルト部分と白線部分、また標識のうちの地色部分と文字・マーク部分のように、反射特性が互いに大きく異なる部分が別の背景物体として記憶される。

【0034】

背景物体の三次元モデルは、監視空間を模したＸＹＺ座標系における各背景物体の位置、姿勢、立体形状にて表される三次元座標値および各背景物体の反射特性のデータを含む。反射特性は一般的に、物体表面の色、テクスチャ、反射率等の要素で構成される。反射率は例えば、鏡面反射成分の反射率および拡散反射成分の反射率、並びにそれらの割合をパラメータとして持つ二色性反射モデルで表現される。

【0035】

背景物体の三次元モデルは、建築設計時に作成されたＩＦＣ（Industry Foundation Classes）規格の建物情報、三次元ＣＡＤデータ等あるいは事前の実計測データから取得できる。

【0036】

また、環境モデル記憶手段４０はさらに当該監視空間の照明モデルも予め記憶している。照明モデルは、監視空間を照明する１以上の光源について、監視空間を模したＸＹＺ座標系における当該光源の位置、および当該光源の配光、色温度などで表される照明特性を含む。光源は人工照明や太陽等である。

【0037】

カメラ情報記憶手段４１は監視空間を模したＸＹＺ座標系におけるカメラ２のカメラパラメータを予め記憶している。カメラパラメータは外部パラメータと内部パラメータとからなる。外部パラメータはＸＹＺ座標系におけるカメラ２の位置姿勢である。内部パラメータはカメラ２の焦点距離、中心座標、歪係数などである。カメラパラメータは事前のキャリブレーションによって計測され、カメラ情報記憶手段４１に記憶される。このカメラパラメータをピンホールカメラモデルに適用することによってＸＹＺ座標系の座標をカメラ２の撮影面を表すｘｙ座標系に変換できる。

【0038】

このように、本発明の記憶手段は環境モデル記憶手段４０とカメラ情報記憶手段４１を含み、少なくとも、監視空間の背景の立体形状を模した三次元背景と監視空間を照射していた光源の光源位置とを含んだ環境モデル、および撮影画像を撮影したカメラのカメラパラメータを予め記憶している。

【0039】

影・実体部分逆算手段５２は本発明の逆算手段であり、仮区分手段５１から仮区分結果が入力されると、環境モデル記憶手段４０から環境モデルを、またカメラ情報記憶手段４１からカメラ２のカメラパラメータをそれぞれ読み出し、環境モデルとカメラパラメータを用いて、少なくとも実体候補領域および影候補領域の一方の候補領域について、撮影画像中の領域であって当該候補領域との間で実体と影の関係となる領域を逆算し、逆算した領域の情報を逆算前の候補領域と対応付けて影・実体部分判定手段５３へ出力する。ここで、逆算した領域を対応投影領域と称する。

【0040】

すなわち、影・実体部分逆算手段５２は、少なくとも実体候補領域および影候補領域の一方の候補領域について、当該候補領域との関係が、監視空間内の実物体の撮影画像への投影領域と光源により生じる当該実物体の影の撮影画像への投影領域との関係となる対応投影領域を逆算する。

【0041】

影・実体部分判定手段５３は本発明の判定手段であり、変化領域抽出手段５０から変化領域の情報が、また、仮区分手段５１から仮区分結果が、さらに、影・実体部分逆算手段５２から候補領域とそれに対応する対応投影領域の情報が入力されると、これらの情報を基に変化領域を実体部分と影部分とに区分し、区分結果を物体画像解析手段５４へ出力する。

【0042】

具体的には、影・実体部分判定手段５３は、対応投影領域と変化領域との重複度合いを算出し、対応投影領域の重複度合いに応じて当該対応投影領域に対応する候補領域の正否を判定することによって、変化領域を実体部分と影部分とに区分する。

【0043】

本実施形態では、影・実体部分逆算手段５２は影候補領域に対する対応投影領域を逆算し、影・実体部分判定手段５３は影候補領域の正否を判定する。以下、影候補領域に対する対応投影領域を変化領域における推定実体部分と称する。

【0044】

すなわち、影・実体部分逆算手段５２は、対応投影領域として、影候補領域に影を生じさせる実物体が撮影画像に撮影され得る部分である推定実体部分を逆算する。そのために、影・実体部分逆算手段５２は、監視空間における実物体の推定形状として、影候補領域に整合する影を生じさせる実物体の垂直断面形状を求め、当該垂直断面形状をカメラ２で撮影した場合の像を算出する。具体的には、影・実体部分逆算手段５２は、環境モデルとカメラパラメータとを用いて、影候補領域を三次元背景に逆投影して逆投影領域を求め、光源から見た当該逆投影領域の前端に鉛直面を設定する。そして、光源位置と当該逆投影領域とを結ぶ光線が当該鉛直面に形成する領域（つまり、光源位置を中心として当該逆投影領域を当該鉛直面に中心投影した像）をカメラの撮影面に投影することで推定実体部分を逆算する。

【0045】

ここで、影候補領域の三次元背景における逆投影領域として推定される実物体の影は概して水平方向の広がりを有し、そして、三次元背景にて接地している実物体の影は光源から見て実物体の後ろに伸びる。そこで、光源から見て影の前端、つまり光源位置からの水平距離が最も近い地点を実物体の接地位置と推定して、そこに鉛直面を設定することができる。ちなみに、接地した実物体とその影との付随性から、真の実体部分の逆投影領域と真の影部分の逆投影領域との境界が上述の影の前端に対応する。

【0046】

鉛直面は光源からの光線と交叉する平面とすることができ、好適な例では、光源からの光線の水平方向、つまり水平面に射影された光線の向きに直交する平面とすることができる。

【0047】

なお、鉛直面の向きは、当該面がカメラ２および光源の両方の位置から見えれば他の向きであってもよく、例えば、カメラ２と光源との両方に対して鉛直面がなるべく正面を向くように設定することができる。具体的には、鉛直面の設定位置からカメラ２へ向かう水平方向のベクトルｕを水平角（方位角）θ〔rad〕の基準（θ＝０）として、光源がカメラ２に対して順光となる場合、つまり鉛直面の設定位置から光源へ向かう水平方向のベクトルｖの水平角θ_Ｌが−π／２＜θ_Ｌ＜π／２の場合には、鉛直面の向き、つまりその法線の水平角θ_Ｐは０≦θ_Ｐ≦θ_Ｌとなる範囲にて設定できるが、上述のカメラ２と光源との両方に対してなるべく正面を向くという観点では、その中央値であるθ_Ｐ＝θ_Ｌ／２の近傍に設定すると好適である。逆光、つまり水平角θ_Ｌがπ／２＜θ_Ｌ＜３π／２の場合には、θ_Ｐは０≦θ_Ｐ≦｜π−θ_Ｌ｜とすることができるが、同様の観点で鉛直面の向きはθ_Ｐ＝θ_Ｌ／２±π／２の近傍に設定すると好適である。また、θ_Ｌ＝±π／２の場合には、θ_Ｐ＝±π／４の近傍に設定すると好適である。

【0048】

また、鉛直面は実物体の代表的な垂直断面が現れる位置に設定するのが好適である。この点、実物体は水平面内での広がりを有し、また実物体の接地面には広がりがあるので、当該位置は必ずしも上述した影の前端や実体部分および影部分の逆投影領域の境界とは一致せず、そこで、上述の広がりを考慮したその近傍位置にて鉛直面の設定位置を定めることもできる。

【0049】

影・実体部分逆算手段５２が推定実体部分を逆算すると、影・実体部分判定手段５３は、推定実体部分と変化領域との重複度合いが所定の基準を超える場合に影候補領域を影部分と判定し、重複度合いが基準を下回る場合に影候補領域を実体部分と判定する。また、影・実体部分判定手段５３は実体候補領域を実体部分と判定する。ここで、重複度合いは、例えば、推定実体部分が変化領域と重複する画素数の、推定実体部分の全画素数に対する割合とすることができる。また上記所定の基準は例えば、当該割合に対する閾値Ｔ_Ｄ１とすることができ、その値は例えば９割とすることができる。

【0050】

物体画像解析手段５４は、影・実体部分判定手段５３が出力した実体部分の撮影画像を解析して、解析結果を解析結果出力手段３１へ出力する。例えば、実体部分の撮影画像と人の形状を模した人形状パターンとのパターンマッチングを行って、一致度が所定値以上である場合に実体部分に人が撮影されていると判定する。なお、監視対象の物体は人に限らず車両など他の物体とすることもできる。また、解析も物体の有無の判定に限らず、物体の姿勢の推定、物体の追跡など他の要素の解析とすることもできる。

【0051】

本発明では、実体と影の領域が一体化してしまっていた変化領域のうちの、実体部分を影部分と区別して物体画像解析手段５４にて解析が可能となるため、解析精度が向上する。

【0052】

解析結果出力手段３１は物体画像解析手段５４から入力された解析結果を報知部６へ出力する。

【0053】

［処理例］
図３〜図５は画像監視装置１による領域区分処理の一例を説明する模式図である。

【0054】

図３は変化領域抽出手段５０が撮影画像１００から、人物とその影が一体化した変化領域１０１を抽出した場合の例を示す模式図である。図３（ａ）に示す撮影画像１００には背景内に人物とその影とが一体化した像が写っている。図３（ｂ）は撮影画像１００内の当該像の部分が変化領域１０１として抽出された様子を示しており、変化領域１０１に斜線を施している。図３（ｃ）は図３（ｂ）の変化領域１０１に対する仮区分手段５１による仮区分の例を示しており、仮区分手段５１は変化領域１０１を、背景画像よりも輝度の低い２つの影候補領域１０２，１０４（斜線部）とそれ以外の実体候補領域１０３に仮区分している。この例において、影候補領域１０２は人物の頭部に対応する領域であり、本来、実体部分であるところ、黒髪の影響で誤って区分されている。一方、影候補領域１０４は人物の影に対応する領域であり、正しく区分されている。

【0055】

図４は監視空間を模した環境モデル１１０の模式図であり、図３の例に対応している。図４には監視空間を横方向から見た様子が表されており、三次元背景、光源およびカメラ２の情報が含まれている。具体的には、三次元背景の情報にはＸＹＺ座標系で表現された路面１１１の立体形状が含まれ、光源の情報にはＸＹＺ座標系で表現された光源位置１１２が含まれている。なお、図４では路面１１１は水平な平面としている。また、カメラ２のカメラパラメータにはＸＹＺ座標系で表現されたカメラ２の焦点１２０が含まれ、また、同カメラパラメータからカメラ２の撮影面１２１が導出できる。

【0056】

影・実体部分逆算手段５２は、環境モデル１１０とカメラ２のカメラパラメータとを用いて、撮影面１２１における影候補領域１０２および影候補領域１０４を三次元背景である路面１１１に逆投影し、影候補領域１０２の逆投影領域１３２と影候補領域１０４の逆投影領域１３４とを求める（図４（ａ））。なお、この処理例では、説明を簡単化するために凹凸のない路面１１１に投影される例を示しているが、三次元背景に凹凸があっても同様に処理できる。

【0057】

影・実体部分逆算手段５２は、光源から見た逆投影領域１３２，１３４の前端１４２，１４４に鉛直面１５２，１５４を設定する。そして、光源位置１１２と逆投影領域１３２，１３４とを結ぶ光線が鉛直面１５２，１５４に形成する領域１６２，１６４を求める（図４（ｂ））。

【0058】

具体的には、逆投影領域１３２において路面１１１上での光源位置１１２の直下点１４０から最短距離の点が逆投影領域１３２の前端１４２とされ、直下点１４０と前端１４２とを結ぶ直線に直交する鉛直面１５２を設定し、光源位置１１２と逆投影領域１３２とを結ぶ光線が鉛直面１５２に形成する領域１６２を求める。逆投影領域１３４についても同様であり、光源の直下点１４０から最短距離にある前端１４４に、直下点１４０と前端１４４とを結ぶ直線に直交する鉛直面１５４を設定し、光源位置１１２と逆投影領域１３４とを結ぶ光線が鉛直面１５４に形成する領域１６４を求める。

【0059】

影・実体部分逆算手段５２は、カメラ２のカメラパラメータを用いて領域１６２を撮影面１２１に投影し、影候補領域１０２に対する推定実体部分１７２を得る（図４（ｃ））。同様に、影・実体部分逆算手段５２は、領域１６４を撮影面１２１に投影し、影候補領域１０４に対する推定実体部分１７４を得る（図４（ｃ））。

【0060】

図５は影・実体部分判定手段５３の処理例を説明する模式図であり、図３および図４の例に対応している。撮影面１２１を表すｘｙ座標系で表された画像１７６，１７８はそれぞれ推定実体部分１７２，１７４と変化領域１０１との位置関係を示す模式図である。

【0061】

影・実体部分判定手段５３は、変化領域１０１と推定実体部分１７２との重複度合いを算出する。この場合、画像１７６に示すように、両者の重複は殆ど無く、重複度合いは閾値Ｔ_Ｄ１の例として設定している９割を下回るため、影・実体部分判定手段５３は影候補領域１０２が実体部分であると判定する。

【0062】

同様に、影・実体部分判定手段５３は、変化領域１０１と推定実体部分１７４の重複度合いを算出する。この場合、画像１７８に示すように、両者はほぼ重複し、重複度合いは９割以上となるため、影・実体部分判定手段５３は影候補領域１０４が影部分であると判定する。

【0063】

これらの判定結果から、影・実体部分判定手段５３は、影候補領域１０４を影部分１８１として区分し、影候補領域１０２と実体候補領域１０３とを合成した領域１８０を実体部分として区分する。

【0064】

上述の例にて、領域１６２，１６４は影候補領域１０２，１０４に影が写っていたと仮定した場合に当該影を形成する実物体を表す。これら領域１６２，１６４を得るために実物体の三次元モデルを用意する必要はなく、鉛直面１５２，１５４を設定できればよい。よって、変化領域１０１を生じさせた実物体の種類、姿勢、個体差が未知であっても変化領域１０１を実体部分と影部分とに精度良く区分できる。

【0065】

上述の例では、影・実体部分逆算手段５２が、１つの影候補領域に対して鉛直面の設定の基準点として前端、またはその近傍の点を１つ定めて１つの推定実体部分を逆算する例を述べたが、仮区分結果における影と実体との境界に誤差が含まれることや、上述したように、影と実体との境界は実物体の代表的な垂直断面が現れる位置に対してずれを有し得ることを考慮し、１つの影候補領域に対して鉛直面を設定する複数の基準点を定めて、基準点ごとに推定実体部分を逆算することもできる。

【0066】

その場合、影・実体部分逆算手段５２は、例えば、逆投影領域において光源位置からの水平距離が最も近い地点を基準点の１つ（代表基準点）に設定するとともに、代表基準点を中心とする水平距離が半径Ｒ内の三次元背景表面に予め定めた個数の基準点を一定の水平距離間隔で設定することができる。半径Ｒは例えば、最大誤差の見積りに基づく固定値Ｒ_ＭＡＸとすることもできるが、影候補領域の実体部分による隠蔽され易さの度合いＨ（値域［０．０，１．０］）が高いほど大きくＨが低いほど小さな可変値Ｈ・Ｒ_ＭＡＸとすることで計算コストに対する精度向上効果のバランスを平準化できる。

【0067】

影・実体部分逆算手段５２は、隠蔽され易さの度合いＨとして、代表基準点から見た光源位置とカメラ位置の水平角度差（上述の水平角θ_Ｌに相当する。）が小さいほど大きく、水平角度差が大きいほど小さな値を算出することができ、具体的には、下式に従い、基準点からカメラ直下点に向かうベクトルｕと基準点から光源直下点に向かうベクトルｖの間のコサイン距離をＨとして算出する。

【0068】

【数1】

【0069】

なお、（１）式は上述の水平角度差、つまりベクトルｕ，ｖのなす角度θを用いてＨ＝cos^２（θ／２）と表すことができる。

【0070】

影・実体部分逆算手段５２は、各基準点に鉛直面を設定して、基準点ごとに推定実体部分を算出する。その際、複数の基準点に設定される鉛直面同士の水平角θ_Ｐの決め方は共通とし、例えば、各基準点を通り光源位置と当該基準点を結ぶ直線に直交するように鉛直面の向きを設定する。

【0071】

この場合、１つの影候補領域に対して複数の推定実体部分が逆算されることに対応して、影・実体部分判定手段５３は、複数の推定実体部分それぞれについての重複度合いｄ_１を算出して、影候補領域ごとに最大の重複度合いＤ_１を特定し、重複度合いＤ_１に基づいて正否を判定する。

【0072】

図６は画像監視装置１による領域区分処理の他の例を説明する模式図である。図６を用いて、実物体による影に対する隠蔽に関する画像監視装置１の処理を説明する。図６（ａ）のｘｙ座標系で表された画像には、２人の人物による変化領域のそれぞれにて影候補領域２０１，２０２が仮区分された例が示されており、これにより図にて左上の人物の変化領域は影候補領域２０１と実体候補領域２１１とに仮区分され、右下の人物の変化領域は影候補領域２０２と実体候補領域２１２とに仮区分されている。この図に対応する撮影画像では、それぞれの人物の像により、その人物の背後に生じる影の一部が隠される隠蔽が生じており、光源やカメラとの位置関係上、左上の人物における当該隠蔽は右下の人物よりも生じ易い。これを図６では、実体候補領域２１１による影候補領域２０１の隠蔽が、実体候補領域２１２による影候補領域２０２の隠蔽よりも生じ易いと表現する。

【0073】

図６（ｂ）は、図６（ａ）に対応する監視空間の模式的な平面図であり、路面におけるカメラ直下点２２０および光源直下点２２１と、影候補領域２０１，２０２の路面への逆投影領域２３１，２３２が示されている。

【0074】

影・実体部分逆算手段５２は、影候補領域２０１の逆投影領域２３１において光源直下点２２１から最も近い地点である代表基準点２４１を算出し、代表基準点２４１とカメラ直下点２２０とを結ぶベクトルｕ_１と、代表基準点２４１と光源直下点２２１とを結ぶベクトルｖ_１のそれぞれを（１）式のｕ，ｖに適用して影候補領域２０１の隠蔽され易さの度合いＨ_１を算出する。

【0075】

同様に、影・実体部分逆算手段５２は、影候補領域２０２の逆投影領域２３２において光源直下点２２１から最も近い地点である代表基準点２４２を算出し、代表基準点２４２とカメラ直下点２２０とを結ぶベクトルｕ_２と、代表基準点２４２と光源直下点２２１とを結ぶベクトルｖ_２のそれぞれを（１）式のｕ，ｖに適用して影候補領域２０２の隠蔽され易さの度合いＨ_２を算出する。

【0076】

ベクトルｕ_１とｖ_１のなす角θ_１はベクトルｕ_２とｖ_２のなす角θ_２はよりも小さく、Ｈ_１＞Ｈ_２となる。影・実体部分逆算手段５２は、影候補領域２０１に関して代表基準点２４１を中心とする半径Ｒ_１（＝Ｈ_１・Ｒ_ＭＡＸ＞Ｒ_２）の円内に基準点を設定し、影候補領域２０２に関して代表基準点２４２を中心とする半径Ｒ_２（＝Ｈ_２・Ｒ_ＭＡＸ＜Ｒ_１）の円内に基準点を設定する。このようにして、隠蔽され易さの度合いが高い影候補領域についての基準点ほどその設定範囲と設定間隔を広げる。

【0077】

また、さらに好適には、影・実体部分判定手段５３が、候補領域から逆算された対応投影領域と変化領域との重複度合いに加えて、当該候補領域と他の候補領域から逆算された対応投影領域との重複度合いを用いる。すなわち、影・実体部分判定手段５３は、注目する影候補領域と他の影候補領域の推定実体部分との重複度合いを算出し、当該重複度合いが高い影候補領域ほど実体部分である可能性が高いとして、実体部分と判定し易くする。

【0078】

具体的には、影・実体部分判定手段５３は、１つの変化領域に対して複数の影候補領域が仮区分された場合に、注目する影候補領域についての推定実体部分の変化領域との重複度合いＤ_１が閾値Ｔ_Ｄ１以上であり且つ当該影候補領域の他の影候補領域についての推定実体部分との重複度合いＤ_２が閾値Ｔ_Ｄ２未満であれば、注目する影候補領域を影部分と判定し、一方、Ｄ_１がＴ_Ｄ１未満である、又はＤ_１がＴ_Ｄ１以上であり且つＤ_２がＴ_Ｄ２以上であれば、注目する影候補領域を実体部分と判定する。このようにすることで、複数の実体とそれらの影とが一体化した変化領域であっても、実体部分を影部分と誤判定する可能性を減じることができる。

【0079】

図７は、この複数の実体とそれらの影とが一体化した変化領域に対する画像監視装置１による領域区分処理の例を説明する模式図である。図７（ａ）に示す撮影画像３００には背景内に２人の人物とそれらの影とが一体化した像が写っており、変化領域抽出手段５０は撮影画像３００から、当該一体化した像を変化領域として抽出する。

【0080】

図７（ｂ）は撮影画像３００内から抽出された当該変化領域に対する仮区分手段５１による仮区分の例を示しており、仮区分手段５１は、変化領域３１０を、背景画像よりも輝度の低い４つの影候補領域３０１，３０２，３０３，３０４とその余の実体候補領域とに仮区分している。そのうちの影候補領域３０１，３０３は人物の頭部に対応する領域であり、本来、実体部分であるところ、黒髪の影響で誤って区分されている。一方、影候補領域３０２，３０４は人物の影に対応する領域であり、正しく区分さている。

【0081】

図７（ｃ）は図７（ｂ）の影候補領域に対する推定実体部分を示しており、影・実体部分逆算手段５２は、４つの影候補領域３０１，３０２，３０３，３０４のそれぞれに対応する推定実体部分３０５，３０６，３０７，３０８を算出する。

【0082】

影・実体部分判定手段５３は、上述したように、影候補領域に対応する推定実体部分と変化領域との重複度合いＤ_１に加えて、当該影候補領域と他の影候補領域に対応する推定実体部分との重複度合いＤ_２を用い、当該影候補領域の正否を判定する。

【0083】

具体的には、影候補領域３０１に対応する推定実体部分３０５については、変化領域３１０との重複は殆ど無いため、Ｄ_１＜Ｔ_Ｄ１となり、この結果に基づいて影・実体部分判定手段５３は影候補領域３０１を実体部分と判定する。よって、黒髪の影響で誤って仮区分されていた影候補領域３０１が正しく実体部分に区分される。

【0084】

影候補領域３０２については、推定実体部分３０６がほぼ変化領域３１０と重複するため、Ｄ_１＞Ｔ_Ｄ１となる。また、影候補領域３０２は推定実体部分３０５，３０７，３０８のいずれとも重複しないためＤ_２＜Ｔ_Ｄ２となる。これらの結果に基づいて影・実体部分判定手段５３は影候補領域３０２を影部分と判定する。つまり、影候補領域３０２は正しく影部分に区分される。

【0085】

影候補領域３０３については、推定実体部分３０７がほぼ変化領域３１０と重複するため、Ｄ_１＞Ｔ_Ｄ１となる。また、影候補領域３０３はその殆どが推定実体部分３０８と重複するためＤ_２＞Ｔ_Ｄ２となる。これらの結果に基づいて影・実体部分判定手段５３は影候補領域３０３を実体部分と判定する。よって、黒髪の影響で誤って仮区分されていた影候補領域３０３が正しく実体部分に区分される。

【0086】

影候補領域３０４については、推定実体部分３０８はほぼ変化領域３１０と重複するため、Ｄ_１＞Ｔ_Ｄ１となる。また、影候補領域３０４は推定実体部分３０５，３０６，３０７のいずれとも重複しないためＤ_２＜Ｔ_Ｄ２となる。これらの結果に基づいて影・実体部分判定手段５３は影候補領域３０４を影部分と判定する。つまり、影候補領域３０４は正しく影部分に区分される。

【0087】

［画像監視装置１の動作］
図８は画像監視装置１の概略の動作のフロー図である。

【0088】

通信部３は撮影画像取得手段３０として動作し、カメラ２から撮影画像を順次取得する（ステップＳ１）。

【0089】

画像処理部５は、撮影画像取得手段３０から撮影画像を取得するごとに、変化領域抽出手段５０として動作し、背景画像に対する撮影画像の変化領域を抽出する（ステップＳ２）。

【0090】

画像処理部５はステップＳ２にて変化領域が抽出された場合には（ステップＳ３にて「ＹＥＳ」の場合）、抽出された変化領域それぞれを順次、処理対象に設定して（ステップＳ４）、領域区分処理Ｓ５により処理対象の変化領域における実体部分を求め、当該実体部分を用いて物体画像解析手段５４による動体画像解析を行う（ステップＳ６）。

【0091】

ステップＳ４〜Ｓ６はステップＳ２にて抽出された全ての変化領域についてループ処理で行われ（ステップＳ７にて「ＮＯ」の場合）、全変化領域について処理が終わると（ステップＳ７にて「ＹＥＳ」の場合）、ステップＳ１にて取得された撮影画像について、物体画像解析手段５４による解析結果が解析結果出力手段３１へ出力される（ステップＳ８）。そして、ステップＳ１に戻り次の撮影画像についての処理が開始される。

【0092】

一方、ステップＳ１にて取得された撮影画像について変化領域が抽出されなかった場合には（ステップＳ３にて「ＮＯ」の場合）、ステップＳ４〜Ｓ８の処理は省略され、ステップＳ１に戻り次の撮影画像について処理を行う。

【0093】

図９および図１０は領域区分処理Ｓ５の概略のフロー図である。

【0094】

画像処理部５は仮区分手段５１として動作し、処理対象として設定された変化領域を影候補領域と実体候補領域とに仮区分する（ステップＳ５００）。画像処理部５はステップＳ５００にて設定された影候補領域それぞれを順次、処理対象に設定する（ステップＳ５０１）。画像処理部５は影・実体部分逆算手段５２として動作し、処理対象として設定された影候補領域を三次元背景に逆投影する（ステップＳ５０２）。そして、影・実体部分逆算手段５２は逆投影領域内において光源からの水平距離が最短の点とその周囲にて複数の基準点を設定する（ステップＳ５０３）。

【0095】

影・実体部分逆算手段５２は基準点それぞれを順次、処理対象に設定し（ステップＳ５０４）、当該基準点を通る鉛直面を設定する（ステップＳ５０５）。そして、鉛直面のうち光源から逆投影領域への光線と交叉する領域を算出し（ステップＳ５０６）、当該領域をカメラ２の撮影面に投影することで、影候補領域に対する対応投影領域として推定実体部分を算出する（ステップＳ５０７）。影・実体部分逆算手段５２は当該推定実体部分とステップＳ２にて抽出された変化領域との重複度合いｄ_１を算出する（ステップＳ５０８）。

【0096】

ステップＳ５０４〜Ｓ５０８はステップＳ５０３にて設定された全ての基準点についてループ処理で行われ（ステップＳ５０９にて「ＮＯ」の場合）、全基準点について処理が終わると（ステップＳ５０９にて「ＹＥＳ」の場合）、図１０のノードＢに処理が進められ、影・実体部分逆算手段５２は、処理対象に設定されている影候補領域についての複数の基準点に関する重複度合いｄ_１のうちの最大値Ｄ_１を求める（ステップＳ５１０）。

【0097】

ステップＳ５０１〜Ｓ５１０はステップＳ５００にて設定された全ての影候補領域についてループ処理で行われる（ステップＳ５１１にて「ＮＯ」の場合）。全影候補領域について処理が終わると（ステップＳ５１１にて「ＹＥＳ」の場合）、画像処理部５は影・実体部分判定手段５３として動作し、それら影候補領域について正否を判定する処理を行う（ステップＳ５１２〜Ｓ５１８）。

【0098】

影・実体部分判定手段５３は影候補領域それぞれを順次、処理対象に設定し（ステップＳ５１２）、当該影候補領域についてステップＳ５１０で求めた重複度合いＤ_１が閾値Ｔ_Ｄ１未満であれば（ステップＳ５１３にて「ＮＯ」の場合）、当該影候補領域を実体部分に区分する（ステップＳ５１７）。

【0099】

一方、重複度合いＤ_１が閾値Ｔ_Ｄ１以上である場合には（ステップＳ５１３にて「ＹＥＳ」の場合）、影・実体部分判定手段５３は、処理対象の影候補領域と他の影候補領域についての推定実体部分との重複度合いＤ_２を算出する（ステップＳ５１４）。そして、重複度合いＤ_２が閾値Ｔ_Ｄ２以上である場合には（ステップＳ５１５にて「ＹＥＳ」の場合）、処理対象の影候補領域を実体部分に区分し（ステップＳ５１７）、一方、Ｄ_２が閾値Ｔ_Ｄ２未満である場合には（ステップＳ５１５にて「ＮＯ」の場合）、当該影候補領域を影部分に区分する（ステップＳ５１６）。

【0100】

ステップＳ５１２〜Ｓ５１７は全ての影候補領域についてループ処理で行われ（ステップＳ５１８にて「ＮＯ」の場合）、全での影候補領域について処理が終わると（ステップＳ５１８にて「ＹＥＳ」の場合）、処理対象の変化領域についての領域区分処理Ｓ５を終え、図８のステップＳ６に処理を進める。

【0101】

［変形例］
（１）上記実施形態においては、影・実体部分逆算手段５２が影候補領域の対応投影領域（推定実体部分）を逆算し、影・実体部分判定手段５３が推定実体部分と変化領域とを比較することによって影候補領域が実体部分であるか影部分であるかを判定し、変化領域を実体部分と影部分とに区分する例を示した。別の実施形態においては、影に関する処理と実体に関する処理とを入れ換えることができる。

【0102】

当該の実施形態では、影・実体部分逆算手段５２が実体候補領域に対する対応投影領域として推定影部分を逆算する。つまり、影・実体部分逆算手段５２は、実体候補領域に対する対応投影領域として、実体候補領域に整合する実物体の影が撮影画像にて撮影され得る推定影部分を逆算する。

【0103】

そのために、影・実体部分逆算手段５２は、実体候補領域を三次元背景に逆投影して逆投影領域を求め、カメラから見た当該逆投影領域の前端を基準点とし、基準点を通るように鉛直面を設定する。そして、影・実体部分逆算手段５２は、実体候補領域を当該鉛直面に逆投影した逆投影領域を通る光源位置からの光線が三次元背景に形成する領域をカメラの撮影面に投影して推定影部分を逆算する。

【0104】

一方、影・実体部分判定手段５３は、推定影部分と変化領域とを比較することによって実体候補領域が実体部分であるか影部分であるかを判定し、変化領域を実体部分と影部分とに区分する。

【0105】

つまり、影・実体部分判定手段５３は、影・実体部分逆算手段５２から入力された推定影部分と変化領域抽出手段５０が抽出した変化領域との重複度合いＤ_１を、上記実施形態での推定実体部分と変化領域との重複度合いＤ_１と同様にして求め、この重複度合いＤ_１が所定の基準（例えば閾値Ｔ_Ｄ１）を超える場合に実体候補領域を実体部分と判定し、重複度合いＤ_１が当該基準を下回る場合に実体候補領域を影部分と判定する。

【0106】

この場合も、影・実体部分逆算手段５２が１つの実体候補領域に対して複数の推定影部分を逆算し、影・実体部分判定手段５３が推定影部分ごとの重複度合いｄ_１のうちの最大値Ｄ_１に基づいて実体候補領域の正否を判定することができる。

【0107】

具体的には、影・実体部分逆算手段５２は、実体候補領域を三次元背景に逆投影した逆投影領域のカメラから見た前端を代表基準点とするとともに、代表基準点の近傍に複数の基準点を設定し、代表基準点およびその他の基準点のそれぞれを通る鉛直面を設定し、実体候補領域の当該各鉛直面への投影領域を通る光源位置からの光線が三次元背景に形成する領域をカメラの撮影面に投影して推定影部分を逆算する。

【0108】

そして、影・実体部分判定手段５３は、１つの実体候補領域に対して影・実体部分逆算手段５２が逆算した複数の推定影部分それぞれと変化領域との重複度合いｄ_１を算出し、算出された複数の重複度合いｄ_１のうちの最大値を当該１つの実体候補領域に対する重複度合いＤ_１とする。

【0109】

また、この場合も、影・実体部分判定手段５３は、影・実体部分逆算手段５２が注目する実体候補領域と他の実体候補領域の推定影部分との重複度合いを算出して、当該重複度合いが高い実体候補領域ほど実体と重なった影部分である可能性が高いとして、影部分と判定し易くすることができる。

【0110】

具体的には、影・実体部分判定手段５３は、１つの変化領域に対して複数の実体候補領域が仮区分された場合に、注目する実体候補領域についての推定影部分の変化領域との重複度合いＤ_１が閾値Ｔ_Ｄ１以上であり且つ当該実体候補領域の他の実体候補領域についての推定影部分との重複度合いＤ_２が閾値Ｔ_Ｄ２未満である場合に注目する実体候補領域を実体部分と判定し、一方、Ｄ_１がＴ_Ｄ１未満である又はＤ_１がＴ_Ｄ１以上であり且つＤ_２がＴ_Ｄ２以上である場合に、注目する実体候補領域を影部分と判定する。

【0111】

（２）また、影・実体部分逆算手段５２が実体候補領域および影候補領域の両方の対応投影領域を逆算してもよい。

【0112】

その場合、影・実体部分判定手段５３は、実体候補領域から逆算された推定影部分と変化領域との重複度合いが基準を超える場合に、実体候補領域を実体部分と判定し、重複度合いが基準を下回る場合に実体候補領域を影部分と判定する。そしてさらに、影・実体部分判定手段５３は、影候補領域から逆算された推定実体部分と変化領域との重複度合いが基準を超える場合に影候補領域を影部分と判定し、重複度合いが基準を下回る場合に影候補領域を実体部分と判定することができる。

【0113】

（３）また、複数通りの仮区分を行って探索的に領域を区分してもよい。その場合、仮区分手段５１が複数通りの仮区分を行い、影・実体部分逆算手段５２が複数通りの仮区分のそれぞれについて対応投影領域を逆算し、影・実体部分判定手段５３が複数通りの仮区分のそれぞれについて対応投影領域と変化領域の重複度合いを算出して重複度合いが最大である仮区分における候補領域の正否を当該最大の重複度合いに応じて判定する。

【符号の説明】

【0114】

１ 画像監視装置、２ カメラ、３ 通信部、４ 記憶部、５ 画像処理部、６ 報知部、３０ 撮影画像取得手段、３１ 解析結果出力手段、４０ 環境モデル記憶手段、４１ カメラ情報記憶手段、５０ 変化領域抽出手段、５１ 仮区分手段、５２ 影・実体部分逆算手段、５３ 影・実体部分判定手段、５４ 物体画像解析手段、１００ 撮影画像、１０１ 変化領域、１０２，１０４ 影候補領域、１０３ 実体候補領域。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】