特許 7321221 情報処理装置、プログラム、判定方法、及びシステム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-07-27

(45)【発行日】2023-08-04

(54)【発明の名称】情報処理装置、プログラム、判定方法、及びシステム

(51)【国際特許分類】

   G08G 1/01 20060101AFI20230728BHJP

   G06T 7/00 20170101ALI20230728BHJP

【ＦＩ】

G08G1/01 A

G06T7/00 650B

【請求項の数】 13

(21)【出願番号】P 2021145005

(22)【出願日】2021-09-06

(65)【公開番号】P2023038090

(43)【公開日】2023-03-16

【審査請求日】2022-03-14

(73)【特許権者】

【識別番号】501440684

【氏名又は名称】ソフトバンク株式会社

(74)【代理人】

【識別番号】110000877

【氏名又は名称】弁理士法人ＲＹＵＫＡ国際特許事務所

(72)【発明者】

【氏名】内藤 達大

(72)【発明者】

【氏名】藤本 彩菜

(72)【発明者】

【氏名】山田 聡

【審査官】高島 壮基

(56)【参考文献】

【文献】特許第６９１２８４２（ＪＰ，Ｂ１）

【文献】特開２０１１－１２３５６３（ＪＰ，Ａ）

【文献】特開２０２０－０７７１０３（ＪＰ，Ａ）

【文献】特開２０１２－２４２９４７（ＪＰ，Ａ）

【文献】特開２０１２－１２３４７０（ＪＰ，Ａ）

【文献】特開２００６－０８２６１８（ＪＰ，Ａ）

【文献】特開平０９－０８１７５８（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｂ６０Ｗ １０／００－６０／００

Ｇ０１Ｃ ２１／００－２１／３６

Ｇ０６Ｔ ７／００

Ｇ０８Ｇ １／００－９９／００

(57)【特許請求の範囲】

【請求項1】

時系列の連続する複数の画像のそれぞれについて、画像内における検出対象の基準座標を示す座標情報を取得する座標情報取得部と、
前記複数の画像のうちの第１の画像の前記座標情報及び第２の画像の前記座標情報に基づいて、前記第１の画像における前記検出対象と前記第２の画像における前記検出対象とを対応付ける対応付部であって、前記第１の画像における複数の前記検出対象と前記第２の画像における複数の前記検出対象とについて、前記第１の画像における前記検出対象の基準座標と、当該検出対象に対応する前記第２の画像における前記検出対象の基準座標とを結ぶ前記検出対象の移動線分の長さであるユークリッド距離が、最短になる前記検出対象の組を、前記検出対象の移動前後として対応付ける対応付部と、
前記第１の画像における前記検出対象の基準座標と、当該検出対象に対応する前記第２の画像における前記検出対象の基準座標とを結ぶ前記検出対象の移動線分が、予め設定された境界線分と交差する場合に、前記検出対象が前記境界線分を通過したと判定する通過判定部と、
を備え、
前記対応付部は、対応付けた前記検出対象の組の前記ユークリッド距離を集計して中央値を算出し、前記検出対象の組の前記ユークリッド距離が、前記中央値の１．５倍を超える場合に、前記検出対象の移動前後として対応付けない、情報処理装置。

【請求項2】

前記対応付部によって他の前記検出対象に対応付けられなかった前記検出対象の情報が含まれるエラー情報を、記憶するエラー情報記憶部をさらに備える、請求項１に記載の情報処理装置。

【請求項3】

時系列の連続する複数の画像のそれぞれについて、画像内における検出対象の基準座標を示す座標情報を取得する座標情報取得部と、
前記複数の画像のうちの第１の画像の前記座標情報及び第２の画像の前記座標情報に基づいて、前記第１の画像における前記検出対象と前記第２の画像における前記検出対象とを対応付ける対応付部と、
前記第１の画像における前記検出対象の基準座標と、当該検出対象に対応する前記第２の画像における前記検出対象の基準座標とを結ぶ前記検出対象の移動線分が、予め設定された境界線分と交差する場合に、前記検出対象が前記境界線分を通過したと判定する通過判定部と、
前記対応付部によって他の前記検出対象に対応付けられなかった前記検出対象の情報が含まれるエラー情報を、記憶するエラー情報記憶部と
を備える情報処理装置。

【請求項4】

前記対応付部は、前記複数の画像のうちの一の画像における複数の前記検出対象のうち、前記一の画像に連続する次の画像の複数の前記検出対象のいずれにも対応付けられなかった前記検出対象がある場合に、前記エラー情報を参照し、前記検出対象の対応付けをする、請求項２又は３に記載の情報処理装置。

【請求項5】

前記エラー情報記憶部は、対応付けられなかった前記検出対象の前記基準座標が、予め設定された領域内にある場合に前記エラー情報を記憶する、請求項２から４のいずれか一項に記載の情報処理装置。

【請求項6】

前記予め設定された領域は、前記画像の中心を含み、前記画像の端部を含まない領域である、請求項５に記載の情報処理装置。

【請求項7】

前記対応付部は、対応付けられなかった前記検出対象の前記エラー情報を、対応付けられなかった前記検出対象ごとに一定期間で削除する、請求項２から６のいずれか一項に記載の情報処理装置。

【請求項8】

コンピュータを、請求項１から７のいずれか一項に記載の情報処理装置として機能させるためのプログラム。

【請求項9】

コンピュータによって実行される判定方法であって、
時系列の連続する複数の画像のそれぞれについて、画像内における検出対象の基準座標を示す座標情報を取得する段階と、
前記複数の画像のうちの第１の画像の前記座標情報及び第２の画像の前記座標情報に基づいて、前記第１の画像における前記検出対象と前記第２の画像における前記検出対象とを対応付ける段階であって、前記第１の画像における複数の前記検出対象と前記第２の画像における複数の前記検出対象とについて、前記第１の画像における前記検出対象の基準座標と、当該検出対象に対応する前記第２の画像における前記検出対象の基準座標とを結ぶ前記検出対象の移動線分の長さであるユークリッド距離が、最短になる前記検出対象の組を、前記検出対象の移動前後として対応付ける段階と、
前記第１の画像における前記検出対象の基準座標と、当該検出対象に対応する前記第２の画像における前記検出対象の基準座標とを結ぶ前記検出対象の移動線分が、予め設定された境界線分と交差する場合に、前記検出対象が前記境界線分を通過したと判定する段階と
を備え、
既に対応付けを行った検出対象の組のユークリッド距離を集計して中央値を算出する段階をさらに備え、
前記対応付ける段階は、前記検出対象の組の前記ユークリッド距離が、前記中央値の１．５倍を超える場合に、前記検出対象の移動前後として対応付けない、判定方法。

【請求項10】

コンピュータによって実行される判定方法であって、
時系列の連続する複数の画像のそれぞれについて、画像内における検出対象の基準座標を示す座標情報を取得する段階と、
前記複数の画像のうちの第１の画像の前記座標情報及び第２の画像の前記座標情報に基づいて、前記第１の画像における前記検出対象と前記第２の画像における前記検出対象とを対応付ける段階と、
前記第１の画像における前記検出対象の基準座標と、当該検出対象に対応する前記第２の画像における前記検出対象の基準座標とを結ぶ前記検出対象の移動線分が、予め設定された境界線分と交差する場合に、前記検出対象が前記境界線分を通過したと判定する段階と
を備え、
前記対応付ける段階において他の前記検出対象に対応付けられなかった前記検出対象の情報が含まれるエラー情報を、記憶するエラー情報記憶段階
をさらに備える、
判定方法。

【請求項11】

請求項１から７のいずれか一項に記載の情報処理装置と、
画像処理装置と
を備え、
前記画像処理装置は、
前記検出対象を含む動画像を撮像する撮像部によって撮像された前記動画像を取得する動画像取得部と、
前記動画像の複数のフレームのそれぞれを、時系列順に画像処理対象である処理画像に変換する画像変換部と、
前記処理画像ごとに、前記処理画像内の前記検出対象を検出し、前記検出対象の前記基準座標を示す前記座標情報を算出する座標情報算出部と、
前記座標情報を前記情報処理装置に送信する送信部と
を有する、システム。

【請求項12】

前記情報処理装置は、クラウドに配置され、
前記画像処理装置は、エッジに配置されて、エッジサーバとして機能し、
前記送信部は、ネットワークを介して前記座標情報を前記情報処理装置に送信する、請求項１１に記載のシステム。

【請求項13】

前記動画像取得部は、前記送信部が前記座標情報を前記情報処理装置に送信したことに応じて、前記動画像を削除する、請求項１１又は１２に記載のシステム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、プログラム、判定方法、及びシステムに関する。

【背景技術】

【0002】

例えば、道路上を走行する車両をテレビカメラから撮影した画像の連続するフレーム中から特徴点を抽出し、それらが同一の車両のものか否かを判別してグルーピングすることで、複数の車両を分離、認識し、各車両の位置データを取得するような技術が知られていた（例えば、特許文献１参照）。
［先行技術文献］
［特許文献］
［特許文献１］特開２００２－５６４９４号公報

【発明の概要】

【0003】

本発明の一実施態様によれば、情報処理装置が提供される。情報処理装置は、時系列の連続する複数の画像のそれぞれについて、画像内における検出対象の基準座標を示す座標情報を取得する座標情報取得部を備えてよい。情報処理装置は、複数の画像のうちの第１の画像の座標情報及び第２の画像の座標情報に基づいて、第１の画像における検出対象と第２の画像における検出対象とを対応付ける対応付部を備えてよい。情報処理装置は、第１の画像における検出対象の基準座標と、当該検出対象に対応する第２の画像における検出対象の基準座標とを結ぶ検出対象の移動線分が、予め設定された境界線分と交差する場合に、検出対象が境界線分を通過したと判定する通過判定部を備えてよい。

【0004】

上記対応付部は、上記第１の画像における複数の上記検出対象と上記第２の画像における複数の上記検出対象とについて、上記移動線分の長さであるユークリッド距離が、最短になる上記検出対象の組を移動前後として対応付けてよい。上記対応付部は、対応付けた上記検出対象の組の上記ユークリッド距離を集計して中央値を算出し、上記検出対象の組の上記ユークリッド距離が、上記中央値の１．５倍を超える場合に、上記検出対象の移動前後として対応付けなくてもよい。上記対応付部によって他の上記検出対象に対応付けられなかった上記検出対象の情報が含まれるエラー情報を、記憶するエラー情報記憶部をさらに備えてもよい。上記対応付部は、上記複数の画像のうちの一の画像における複数の上記検出対象のうち、上記一の画像に連続する次の画像の複数の上記検出対象のいずれにも対応付けられなかった上記検出対象がある場合に、上記エラー情報を参照してもよい。

【0005】

上記エラー情報記憶部は、対応付けられなかった上記検出対象の上記基準座標が、予め設定された領域内にある場合に上記エラー情報を記憶してもよい。上記予め設定された領域は、上記画像の中心を含み、上記画像の端部を含まない領域であってもよい。上記対応付部は、対応付けられなかった上記検出対象の上記エラー情報を、対応付けられなかった上記検出対象ごとに一定期間で削除してもよい。上記検出対象が上記境界線分を通過したと判定された場合に、上記移動線分から算出できる移動ベクトルと、予め設定された任意点及び上記境界線分から求まる判定ベクトルとの角度で、上記移動ベクトルの上記境界線分に対する通過方向を判定するベクトル判定部をさらに備えてもよい。

【0006】

上記ベクトル判定部は、上記判定ベクトルと上記移動ベクトルとの角度が９０度より小さい又は２７０度より大きい場合、上記通過方向が、上記境界線分から上記任意点への方向であると判定してもよい。上記ベクトル判定部は、上記判定ベクトルと上記移動ベクトルとの角度が９０度より大きく２７０度より小さい場合、上記通過方向が、上記境界線分から上記任意点への方向とは逆方向であると判定してもよい。

【0007】

上記通過方向が、上記境界線分から上記任意点への方向であると判定された場合に、上記検出対象が上記境界線分を上記任意点への方向に通過した回数である第１カウント数を加算するカウント部をさらに備えてもよい。上記カウント部は、上記通過方向が、上記境界線分から上記任意点への方向とは逆方向であると判定された場合に、上記検出対象が上記境界線分を上記任意点への方向とは逆方向に通過した回数である第２カウント数を加算してもよい。

【0008】

上記ベクトル判定部によって、上記通過方向が、上記境界線分から上記任意点への方向であると判定された場合に上記検出対象が上記境界線分を通過した回数であるカウント数を加算してもよく、上記通過方向が、上記境界線分から上記任意点への方向とは逆方向であると判定された場合に、上記カウント数を減算してもよい。

【0009】

本発明の一実施態様によれば、コンピュータを、上記情報処理装置として機能させるためのプログラムが提供される。本発明の第３の態様によれば、コンピュータによって実行される判定方法が提供される。判定方法は、時系列の連続する複数の画像のそれぞれについて、画像内における検出対象の基準座標を示す座標情報を取得する段階を備えてもよい。上記複数の画像のうちの第１の画像の上記座標情報及び第２の画像の上記座標情報に基づいて、上記第１の画像における上記検出対象と上記第２の画像における上記検出対象とを対応付ける段階を備えてもよい。上記第１の画像における上記検出対象の基準座標と、当該検出対象に対応する上記第２の画像における上記検出対象の基準座標とを結ぶ上記検出対象の移動線分が、予め設定された境界線分と交差する場合に、上記検出対象が上記境界線分を通過したと判定する段階を備えてもよい。

【0010】

本発明の一実施態様によれば、上記情報処理装置と、画像処理装置とを備えるシステムが提供される。上記画像処理装置は、上記検出対象を含む動画像を撮像する撮像部によって撮像された上記動画像を取得する動画像取得部を備えてもよい。上記動画像の複数のフレームのそれぞれを、時系列順に画像処理対象である処理画像に変換する画像変換部を備えてもよい。上記処理画像ごとに、上記処理画像内の上記検出対象を検出し、上記検出対象の上記基準座標を示す上記座標情報を算出する座標情報算出部を備えてもよい。上記座標情報を上記情報処理装置に送信する送信部を備えてもよい。上記情報処理装置は、クラウドに配置されてよく、上記画像処理装置は、エッジに配置されて、エッジサーバとして機能してよく、上記送信部は、ネットワークを介して上記座標情報を上記情報処理装置に送信してよい。上記動画像取得部は、上記送信部が上記座標情報を上記情報処理装置に送信したことに応じて、上記動画像を削除してよい。

【0011】

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

【図面の簡単な説明】

【0012】

【図1】システム１０の一例を概略的に示す。

【図2】システム１０における処理の流れの一例を概略的に示す。

【図3】情報処理装置１００における検出対象の対応付けの一例を概略的に示す。

【図4】情報処理装置１００における通過したとする判定の一例を概略的に示す。

【図5】情報処理装置１００による処理内容について説明するための説明図である

【図6】情報処理装置１００における検出対象の対応付けの他の一例を概略的に示す。す。

【図7】情報処理装置１００における通過したとする判定の他の一例を概略的に示す。

【図8】情報処理装置１００における通過したとする判定の他の一例を概略的に示す。

【図9】情報処理装置１００及び画像処理装置２００の機能構成の一例を概略的に示す。

【図10】情報処理装置１００又は画像処理装置２００として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。

【発明を実施するための形態】

【0013】

動画像内において、任意に指定した線分を通過した移動物体（例：車両や人物等）の数をカウントする技術が求められている。そのような技術をクラウドサービスによって実現することが考えられるが、クラウドに動画像を送信することによるネットワークトラフィックの増加や、個人情報が漏洩する可能性等の課題がある。本実施形態に係るシステム１０では、例えば、個人情報を含む動画像について、エッジ側で重たい映像処理（物体検出）を行った後、動画像を削除し、座標情報のみをクラウドにアップロードし、クラウド側で座標情報を用いて移動物体のカウントを行う形式を採用する。これにより、ネットワークトラフィックを軽減できるとともに、個人情報のネットワークを介した送信をしないことによって個人情報保護を達成することができる。

【0014】

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

【0015】

図１は、システム１０の一例を概略的に示す。システム１０は、情報処理装置１００と、少なくとも１つの画像処理装置２００とを備える。

【0016】

ネットワーク２０は、例えば、移動体通信ネットワーク及びインターネットを含む。移動体通信ネットワークは、３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）通信方式、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）通信方式、５Ｇ（５ｔｈ Ｇｅｎｅｒａｔｉｏｎ）通信方式、及び６Ｇ（６ｔｈ Ｇｅｎｅｒａｔｉｏｎ）通信方式以降の通信方式のいずれに準拠していてもよい。例えば、情報処理装置１００がクラウドに配置され、画像処理装置２００が移動体通信ネットワークのエッジに配置される。画像処理装置２００は、いわゆるエッジサーバであってよい。

【0017】

画像処理装置２００は、検出対象が撮像された動画像に対する画像処理を実行する。検出対象は、任意の移動体であり、人及び車等がその例として挙げられるが、これらに限られない。

【0018】

画像処理装置２００は、画像処理対象の動画像を、画像処理装置２００が備えるカメラから取得してよい。画像処理装置２００が備えるカメラとは、画像処理装置２００に内蔵されたカメラであってよく、画像処理装置２００に接続されたカメラであってもよい。画像処理装置２００は、画像処理対象の動画像を、画像処理装置２００にネットワークを介して接続されたカメラから受信してもよい。画像処理装置２００は、画像処理対象の動画像を、任意の通信装置からネットワークを介して受信してもよい。

【0019】

画像処理装置２００は、検出対象を撮像した動画像をフレームごとの画像に分割し、画像処理により検出対象の情報を検出し、情報処理装置１００に送信してよい。情報処理装置１００は、画像処理装置２００から取得した情報を元に、例えば、基準となる線分を通過した検出対象の流量をカウントする。

【0020】

図２は、システム１０における処理の流れの一例を概略的に示す。ここでは、画像処理装置２００が、検出対象の撮像された動画像を取得する前の状態を開始状態とする。

【0021】

Ｓ１０２では、画像処理装置２００が、検出対象の撮像された動画像を取得する。Ｓ１０４では、画像処理装置２００が、取得した動画像をフレームごとの画像に変換する。Ｓ１０６では、画像処理装置２００が、Ｓ１０４において変換した複数の画像のそれぞれについて、画像処理し、検出対象の座標情報を算出する。

【0022】

Ｓ１０８では、画像処理装置２００が、Ｓ１０６において算出した座標情報を、情報処理装置１００に送信する。Ｓ１１０では、情報処理装置１００が、座標情報ごとに、検出対象の対応付けを行う。各フレームの画像に対応する座標情報は、複数の検出対象のそれぞれの画像上での座標を表すが、フレーム間で紐づいていないので、検出対象の移動を判定するには、時系列順に隣り合った画像同士の間で、同一の検出対象を対応付ける必要があるためである。Ｓ１１２では、情報処理装置１００が、Ｓ１１０における対応付けの結果に基づいて、検出対象が、画像に対して予め設定された境界線分を通過したか否かを判定する。Ｓ１１４では、情報処理装置１００が、検出対象の通過判定の結果を出力する。情報処理装置１００は、例えば、結果を表示出力する。

【0023】

例えば、情報処理装置１００は、画像処理装置２００から１つの動画像に対応する座標情報を取得した場合に、当該動画像に対応する結果をまとめて出力する。具体例として、情報処理装置１００は、１つの動画像内において境界線分を通過した検出対象の数を出力する。また、例えば、情報処理装置１００は、画像処理装置２００から継続的に動画像に対応する座標情報を取得している場合に、リアルタイムに結果を出力してもよい。具体例として、情報処理装置１００は、検出対象が境界線分を通過する毎に、その旨を出力する。

【0024】

従来例えば、街中等における人の通行量、特定の領域に出入りする人の数、及び道路における車両の通行量等を調査するために、動画像内に設定した境界線分を通過する移動体の数をカウントしたいという要望があった。このような場合は、一例として、検出対象の存在する現場で撮像された動画像を、直接クラウド上にあるサーバに送信するような手法がとられていた。しかし、このような手法では、クラウド上での映像解析時のネットワークトラフィックが増加してしまうという点が問題となっていた。また、送信する動画像には、個人情報が含まれてしまい、個人情報が保護できないという問題も発生していた。

【0025】

システム１０は、例えば、負荷の高い映像処理（対象検出）をネットワークのエッジ側にある画像処理装置２００で行い、検出対象の座標情報をネットワーク経由で、クラウド側の情報処理装置１００に送信する構成を備える。座標情報は、動画像ではなく、画像内特徴量や個人情報を含まない。情報処理装置１００は、座標情報のみで、検出対象の移動をカウントする機能を備える。これにより、画像処理装置２００から情報処理装置１００に対して動画像を送信する場合と比較して、ネットワークトラフィックを低減することができ、個人情報の保護にも貢献することができる。また、情報処理装置１００の負荷を画像処理装置２００に分散することができ、情報処理装置１００の処理負荷を低減することができる。画像処理装置２００は、処理が終わり次第個人情報を含むデータを削除してよい。これにより、個人情報の保護にさらに貢献することができる。

【0026】

図３は、情報処理装置１００における検出対象の対応付けの一例を概略的に示す。図３に示す例において、複数の検出対象３００は、第１の画像内の検出対象の範囲を、矩形で囲ったものであり、複数の検出対象４００は、それぞれ、第１の画像の後の時系列における第２の画像内の検出対象の範囲を、矩形で囲ったものである。基準座標３０２は、検出対象３００の基準になる座標を表す。基準座標３０２は、例えば、矩形で囲われた範囲の中心座標であってよい。基準座標４０２は、検出対象４００の基準になる座標を表す。基準座標４０２は、例えば、矩形で囲われた範囲の中心座標であってよい。

【0027】

移動線分５０２は、基準座標３０２と基準座標４０２とを結んだ線分であってよい。移動線分５０２は、実質的に第１の画像と、第２の画像との撮影タイミングの間に、検出対象が移動した軌跡を表し得る。移動線分５０２の長さは、一例としてユークリッド距離であってよい。ユークリッド距離は、人が定規で測るような二点間の通常の距離のことであってよい。

【0028】

情報処理装置１００は、例えば、過去のフレームで検出された検出対象３００による基準座標３０２と、現在のフレームで検出された検出対象４００による基準座標４０２とを対応させる形で、対応付けを行ってよい。

【0029】

対応付けの方法は、一例として、まず同じ領域に、上記第１の画像上の検出対象３００と、上記第２の画像上の検出対象４００とを描画し、それぞれから基準座標３０２と、基準座標４０２とを算出する。次に、基準座標３０２と、基準座標４０２との間のユークリッド距離が、最も短い基準座標同士を、同じ検出対象の組として対応付ける。

【0030】

第１の画像と第２の画像との間でフレームアウトした検出対象が存在する場合、その検出対象は、第１の画像には含まれるが、第２の画像には含まれないことになる。これに対して、ユークリッド距離が最も短い基準座標同士を対応付ければ、当該検出対象は余ることになり、誤った検出対象の対応付けを行ってしまうことを防ぐことができる。第１の画像と第２の画像との間でフレームインした検出対象が存在する場合、その検出対象は、第１の画像には含まれないが、第２の画像には含まれることになる。この場合も、ユークリッド距離が最も短い基準座標同士を対応付ければ、当該検出対象は余ることになり、誤った検出対象の対応付けを行ってしまうことを防ぐことができる。このように、ユークリッド距離を用いた対応付けを行うことによって、検出対象の検出精度を向上させることができる。

【0031】

情報処理装置１００は、一例として、ユークリッド距離が、ユークリッド距離の中央値の１．５倍を超える検出対象同士を対応付けないようにしてもよい。例えば、情報処理装置１００は、既に対応付けを行った検出対象の組のユークリッド距離を集計して中央値を算出し、新たに対応付けを判定する検出対象の組のユークリッド距離が、当該中央値の１．５倍を超える場合に、当該組を、検出対象の移動前後として対応付けない。これにより、ユークリッド距離が異常値になる対応付けを防ぐことができ、検出対象の検出精度を向上させることができる。

【0032】

図４は、情報処理装置１００における通過したとする判定の一例を概略的に示す。ここでは、第1の画像において、トラッキングされた検出対象３００は、移動により、上記第１の画像より後の時系列に撮像された第２の画像において、トラッキングされた検出対象４００の位置にいると対応付けられた場合を例に挙げて説明する。

【0033】

図４に示す例において、第１の画像における基準座標３０２と、当該基準座標３０２に対応する基準座標４０２とを結ぶ移動線分５０２が、予め設定された境界線分５０６を跨いで交差している。情報処理装置１００は、この場合に、検出対象３００が境界線分５０６を通過したと判定する。逆に、第１の画像における基準座標３０２と、当該検出対象３００に対応する基準座標４０２とを結ぶ移動線分５０２が、予め設定された境界線分５０６を跨いで交差していない場合は、検出対象が境界線分５０６を通過していないと判定する。

【0034】

図５は、情報処理装置１００による処理内容について説明するための説明図である。本処理は、画像処理装置２００における画像処理において、オクルージョンによって検出対象の検出に失敗したり、何らかの理由により検出漏れが発生したりした場合であっても、情報処理装置１００側で対応可能とするための処理である。オクルージョンとは、検出対象が、動画内で被覆などにより隠れてしまい、検出ができない状況をいう。検出漏れは、例えば、画像処理装置２００の物体検出精度が低かったり、動画像の解像度が低すぎる等の理由で発生し得る。

【0035】

対象画像外縁５０４は、対象画像の外縁を表す。情報処理装置１００は、対象画像外縁５０４内に、検出想定領域６０４を特定する。検出想定領域６０４は、対象画像外縁５０４の中央付近であり、検出対象３００が検出される想定がされている領域であってよい。情報処理装置１００は、例えば、対象画像外縁５０４全体の外周から１０％より内側に検出想定領域６０４を設定する。

【0036】

図５に例示する４つの検出対象３００は、連続する６つのフレームの画像における１、２、５、６フレーム目の特定の検出対象の位置を示す。２つの失敗対象６００は、オクルージョン等により、トラッキングによる検出の失敗で消失した、３フレーム目及び４フレーム目の検出対象３００の実際の位置である。情報処理装置１００が画像処理装置２００から取得した座標情報には、２つの失敗対象６００の座標は含まれない。ここでは、情報処理装置１００が、検出対象３００の基準座標３０２を、図５の向きを基準に、一番左下を１回目とし、右上の６回目まで取得しようとした場合を考える。

【0037】

情報処理装置１００は、１回目と２回目とで基準座標３０２の取得に成功し、３回目と４回目とで基準座標３０２の取得に失敗（図では基準座標６０２としている）し、５回目と６回目とで基準座標３０２の取得に成功している。このような場合に、情報処理装置１００は、２回目に取得された基準座標３０２と、３回目に検出されなかった基準座標６０２との対応付けを行おうとする。

【0038】

しかし、失敗対象６００は、検出されていないため、座標情報に基準座標６０２が含まれていない。すると、２回目の基準座標３０２は、対応付けができないため、移動線分５０２を算出することができなくなってしまう。しかし、このような場合であっても、対応付けに失敗した検出対象３００が検出想定領域６０４の中にある場合は、基準座標３０２をエラー情報として保存し、即座に対応付けの失敗としなくてよい。

【0039】

情報処理装置１００は、動画像における任意の時間、又は、対応付けの回数等の任意のパラメータにより、対応付けの失敗としない回数を設定し、検出対象３００を生存させてよい。情報処理装置１００は、対応付けの失敗としない回数を超えた場合は、対応する基準座標３０２をエラー情報から削除し、存在しなかったものとしてよい。対応付けを進めていくと、３回目の基準座標６０２と４回目の基準座標６０２との対応付けは、お互いに基準座標６０２が存在しないために失敗はしない。

【0040】

しかし、４回目の基準座標６０２と、５回目の基準座標３０２との対応付けは、再び失敗してしまう。情報処理装置１００は、ここで、エラー情報を参照することで、エラー情報に保存されていた２回目の基準座標３０２と、５回目の基準座標３０２とを対応付けてよい。

【0041】

この対応付けによって、一部の検出対象３００の基準座標３０２について、取得を失敗した場合であっても、移動線分５０２が、予め設定された境界線分５０６と交差する場合に、検出対象３００が境界線分５０６を通過したと判定する通過判定をすることができる。これにより、本実施形態においては、対応付けられなかった基準座標３０２を、エラー情報として記憶するため、検出対象にオクルージョンが発生したり、検出漏れによるトラッキングが失敗してしまった場合でも、検出対象３００の境界線分５０６の通過を判定できる。

【0042】

画像の外縁付近に位置する検出対象は、途中で消失したとしても、フレームアウトした可能性がある。それに対して、画像の中央に位置する検出対象が途中で消失した場合、フレームアウトした可能性は低く、オクルージョンや検出漏れが発生した可能性が高い。よって、検出想定領域６０４を、画像の中心を含み、画像の端部を含まない領域として設定することによって、フレームアウト等の正当な理由以外の理由で消失した場合にのみ、エラー情報を記憶するようにできる。また、一定期間検出できなかった基準座標３０２をエラー情報から削除することにより、エラー情報の精度を向上することができる。

【0043】

図６は、情報処理装置１００における検出対象の対応付けの他の一例を概略的に示す。情報処理装置１００は、検出対象の対応付けに、ベクトルを使用してもよい。情報処理装置１００は、移動線分５０２によって境界線分５０６との交差を判定し、移動ベクトル５０７を用いて、交差方向を判定してもよい。移動ベクトル５０７は、検出対象３００の基準座標３０２と、検出対象４００の基準座標４０２との間を結んだベクトルであり、移動線分５０２から算出できてよい。

【0044】

図７は、情報処理装置１００における通過したとする判定の他の一例を概略的に示す。図８は、情報処理装置１００における通過したとする判定の他の一例を概略的に示す。

【0045】

情報処理装置１００による通過したとする判定は、ベクトルを使用して判定を行ってもよい。任意点５０８は、任意に設定された点である。任意点５０８は、情報処理装置１００における判定処理で、共通して使用されれば任意の座標に設定されてよい。任意点５０８は、例えば、境界線分５０６によって区切られる、ＩＮ側の領域及びＯＵＴ側の領域のうち、ＩＮ側の領域に設定される。なお、任意点５０８は、ＯＵＴ側の領域に設定されてもよい。判定ベクトル５０９は、境界線分５０６から任意点５０８に向けて、境界線分５０６と垂直になるように伸ばし、移動ベクトル５０７と交差する位置に移動したベクトルである。

【0046】

例えば、情報処理装置１００は、検出対象３００が境界線分５０６を通過したと判定した場合に、まず、移動線分５０２から求まる移動ベクトル５０７を特定するとともに、予め設定された任意点５０８を用いて、判定ベクトル５０９を特定する。次に、情報処理装置１００は、移動ベクトル５０７と判定ベクトル５０９との角度５１０を算出する。そして、情報処理装置１００は、角度５１０に基づいて、移動ベクトル５０７の境界線分５０６に対する通過方向を判定する。情報処理装置１００は、図７に例示するように、角度５１０が９０度より小さい又は２７０度より大きい場合、通過方向が、境界線分５０６から任意点５０８への方向であると判定してよい。情報処理装置１００は、図８に例示するように、角度５１０が９０度より大きく２７０度より小さい場合、通過方向が、境界線分５０６から任意点５０８への方向とは逆方向であると判定してよい。

【0047】

上述したように、情報処理装置１００は、移動ベクトル５０７と判定ベクトル５０９との角度５１０を算出することによって、境界線分５０６に対する検出対象の通過方向を判定することができる。情報処理装置１００は、例えば、通過方向が、境界線分５０６から任意点５０８への方向であると判定した場合に、検出対象３００が境界線分５０６を任意点５０８への方向に通過した回数である第１カウント数を加算し、通過方向が、境界線分５０６から任意点５０８への方向とは逆方向であると判定した場合に、検出対象３００が境界線分５０６を任意点への方向とは逆方向に通過した回数である第２カウント数を加算する。これにより、境界線分５０６をＩＮ側に向かって通過した検出対象の数と、ＯＵＴ側に向かって通過した検出対象の数とをカウントすることができる。

【0048】

情報処理装置１００は、通過方向が、境界線分５０６から任意点５０８への方向であると判定した場合に、検出対象３００が任意点５０８を通過した回数であるカウント数を加算し、通過方向が、境界線分５０６から任意点５０８への方向とは逆方向であると判定した場合に、カウント数を減算するようにしてもよい。これにより、境界線分５０６をＩＮ側に向かって通過した検出対象の数と、ＯＵＴ側に向かって通過した検出対象の数との差分をカウントすることができる。例えば、ＩＮ側が部屋の中であり、ＯＵＴ側が部屋の外である場合に、部屋の中に何人の人がいるのかをカウント可能にできる。

【0049】

図９は、情報処理装置１００及び画像処理装置２００の機能構成の一例を概略的に示す。画像処理装置２００は、動画像取得部２０２、画像変換部２０４、座標情報算出部２０６及び送信部２０８を備える。

【0050】

動画像取得部２０２は、検出対象を含む動画像を取得する。動画像取得部２０２は、画像処理装置２００が備えるカメラから動画像を取得してよい。動画像取得部２０２は、画像処理装置２００にネットワークを介して接続されたカメラから動画像を受信してもよい。動画像取得部２０２は、任意の通信装置からネットワークを介して動画像を受信してもよい。動画像取得部２０２は、取得した動画像を画像処理装置２００の動画像格納部に格納してよい。

【0051】

画像変換部２０４は、動画像の複数のフレームのそれぞれを、時系列順に画像処理対象である処理画像に変換する。座標情報算出部２０６は、画像変換部２０４が変換した処理画像ごとに、処理画像内の検出対象を検出し、検出対象の基準座標を示す座標情報１０３を算出する。送信部２０８は、座標情報算出部２０６が算出した座標情報１０３を情報処理装置１００に送信する。動画像取得部２０２は、送信部２０８が座標情報１０３を情報処理装置１００に送信したことに応じて、動画像を削除してよい。例えば、動画像取得部２０２は、送信部２０８が座標情報１０３を情報処理装置１００に送信したことに応じて、座標情報１０３の元となった動画像を動画像格納部から削除する。

【0052】

情報処理装置１００は、座標情報取得部１０２、対応付部１０４、通過判定部１０６、出力制御部１０８、エラー情報記憶部１１０、ベクトル判定部１１４及びカウント部１１６を有する。なお、情報処理装置１００がこれらの全てを有することは必須とは限らない。

【0053】

座標情報取得部１０２は、時系列の連続する複数の画像のそれぞれについて、画像内における検出対象３００の基準座標３０２を示す座標情報１０３を取得する。座標情報取得部１０２は、送信部２０８によって送信された座標情報１０３を取得してよい。

【0054】

対応付部１０４は、座標情報取得部１０２が取得した座標情報１０３に基づいて、時系列の連続する複数の画像のそれぞれについて、検出対象を対応付ける。例えば、対応付部１０４は、複数の画像のうちの第１の画像の基準座標３０２と、第１の画像に時系列で連続する第２の画像の基準座標４０２に基づいて、第１の画像における検出対象３００と、第２の画像における検出対象４００とを対応付ける。

【0055】

対応付部１０４は、第１の画像における複数の検出対象３００と、第２の画像における複数の検出対象４００とについて、移動線分５０２の長さであるユークリッド距離が、最短になる検出対象の組を、検出対象の移動前後として対応付けてよい。対応付部１０４は、対応付けた検出対象の組のユークリッド距離を集計して中央値を算出し、検出対象の組のユークリッド距離が、中央値の１．５倍を超える場合に、検出対象の移動前後として対応付けないようにしてもよい。

【0056】

通過判定部１０６は、検出対象が、画像に対して予め設定された境界線分５０６を通過したか否かを判定する。例えば、通過判定部１０６は、第１の画像における検出対象３００の基準座標３０２と、当該基準座標３０２に対応する第２の画像における検出対象４００の基準座標４０２とを結ぶ移動線分５０２が、予め設定された境界線分５０６と交差する場合に、検出対象３００が境界線分５０６を通過したと判定する。

【0057】

出力制御部１０８は、通過判定部１０６による判定結果を出力するように制御する。出力制御部１０８は、例えば、通過判定部１０６による判定結果を、情報処理装置１００が備えるディスプレイに表示出力させる。出力制御部１０８は、通過判定部１０６による判定結果を他の装置に送信して、当該装置のディスプレイに表示出力させてもよい。

【0058】

出力制御部１０８は、検出対象が境界線分５０６を通過したと通過判定部１０６が判定するごとに、結果を出力してよい。例えば、動画像が監視カメラによって撮像されたものである場合に、検出対象が所定の領域に入ったり、所定の領域から出たことを、即座に把握可能にすることができる。なお、結果の出力方法は、表示出力に限らず、音声、光、びデータの送信等であってもよい。

【0059】

エラー情報記憶部１１０は、対応付部１０４によって、他の検出対象４００に対応付けられなかった、検出対象３００の情報が含まれるエラー情報１１２を記憶する。エラー情報記憶部１１０は、例えば、対応付けられなかった検出対象３００の基準座標３０２が、予め設定された領域内にある場合にエラー情報１１２を記憶する。

【0060】

対応付部１０４は、複数の画像のうちの一の画像における複数の検出対象３００のうち、一の画像に連続する次の画像の複数の検出対象３００のいずれにも対応付けられなかった検出対象３００がある場合に、エラー情報１１２を参照し、検出対象３００との対応付けをしてもよい。対応付部１０４は、対応付けられなかった検出対象３００のエラー情報１１２を、対応付けられなかった検出対象３００ごとに一定期間で削除してもよい。

【0061】

ベクトル判定部１１４は、通過判定部１０６によって検出対象３００が境界線分５０６を通過したと判定された場合に、移動線分５０２から算出できる移動ベクトル５０７と、予め設定された任意点５０８及び境界線分５０６から求まる判定ベクトル５０９との角度５１０で、移動ベクトル５０７の境界線分５０６に対する通過方向を判定する。

【0062】

ベクトル判定部１１４は、例えば、判定ベクトル５０９と移動ベクトル５０７との角度５１０が９０度より小さい又は２７０度より大きい場合、通過方向が、境界線分５０６から任意点５０８への方向であると判定し、判定ベクトル５０９と移動ベクトル５０７との角度５１０が９０度より大きく２７０度より小さい場合、通過方向が、境界線分５０６から任意点５０８への方向とは逆方向であると判定する。

【0063】

カウント部１１６は、検出対象が境界線分５０６を通過した回数をカウントする。カウント部１１６は、例えば、通過方向が、境界線分５０６から任意点５０８への方向であると判定された場合に、検出対象３００が境界線分５０６を通過した回数であるカウント数を加算し、通過方向が、境界線分５０６から任意点５０８への方向とは逆方向であると判定された場合に、カウント数を減算する。

【0064】

また、例えば、カウント部１１６は、通過方向が、境界線分５０６から任意点５０８への方向であると判定された場合に、検出対象３００が境界線分５０６を任意点５０８への方向に通過した回数である第１カウント数を加算する。そして、カウント部１１６は、通過方向が、境界線分５０６から任意点５０８への方向とは逆方向であると判定された場合に、検出対象３００が境界線分５０６を、任意点５０８への方向とは逆方向に通過した回数である第２カウント数を加算する。

【0065】

出力制御部１０８は、カウント部１１６によるカウント結果を出力するように制御してもよい。例えば、出力制御部１０８は、座標情報取得部１０２が１つの動画像に対応する座標情報をまとめて取得した場合に、当該動画像に対応する結果をまとめて出力する。具体例として、出力制御部１０８は、１つの動画像に対応する座標情報に対してカウント部１１６がカウントしたカウント数を出力したり、１つの動画像に対応する座標情報に対してカウント部１１６がカウントした第１カウント数及び第２カウント数を出力するよう制御する。

【0066】

図１０は、情報処理装置１００又は画像処理装置２００として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。コンピュータ１２００にインストールされたプログラムは、コンピュータ１２００を、本実施形態に係る装置の１又は複数の「部」として機能させ、又はコンピュータ１２００に、本実施形態に係る装置に関連付けられるオペレーション又は当該１又は複数の「部」を実行させることができ、及び／又はコンピュータ１２００に、本実施形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ１２００に、本明細書に記載のフローチャート及びブロック図のブロックのうちのいくつか又はすべてに関連付けられた特定のオペレーションを実行させるべく、ＣＰＵ１２１２によって実行されてよい。

【0067】

本実施形態によるコンピュータ１２００は、ＣＰＵ１２１２、ＲＡＭ１２１４、及びグラフィックコントローラ１２１６を含み、それらはホストコントローラ１２１０によって相互に接続されている。コンピュータ１２００はまた、通信インタフェース１２２２、記憶装置１２２４、ＤＶＤドライブ１２２６、及びＩＣカードドライブのような入出力ユニットを含み、それらは入出力コントローラ１２２０を介してホストコントローラ１２１０に接続されている。ＤＶＤドライブ１２２６は、ＤＶＤ－ＲＯＭドライブ及びＤＶＤ－ＲＡＭドライブ等であってよい。記憶装置１２２４は、ハードディスクドライブ及びソリッドステートドライブ等であってよい。コンピュータ１２００はまた、ＲＯＭ１２３０及びキーボードのようなレガシの入出力ユニットを含み、それらは入出力チップ１２４０を介して入出力コントローラ１２２０に接続されている。

【0068】

ＣＰＵ１２１２は、ＲＯＭ１２３０及びＲＡＭ１２１４内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ１２１６は、ＲＡＭ１２１４内に提供されるフレームバッファ等又はそれ自体の中に、ＣＰＵ１２１２によって生成されるイメージデータを取得し、イメージデータがディスプレイデバイス１２１８上に表示されるようにする。

【0069】

通信インタフェース１２２２は、ネットワークを介して他の電子デバイスと通信する。記憶装置１２２４は、コンピュータ１２００内のＣＰＵ１２１２によって使用されるプログラム及びデータを格納する。ＤＶＤドライブ１２２６は、プログラム又はデータをＤＶＤ－ＲＯＭ１２２７等から読み取り、記憶装置１２２４に提供する。ＩＣカードドライブは、プログラム及びデータをＩＣカードから読み取り、及び／又はプログラム及びデータをＩＣカードに書き込む。

【0070】

ＲＯＭ１２３０はその中に、アクティブ化時にコンピュータ１２００によって実行されるブートプログラム等、及び／又はコンピュータ１２００のハードウェアに依存するプログラムを格納する。入出力チップ１２４０はまた、様々な入出力ユニットをＵＳＢポート、パラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入出力コントローラ１２２０に接続してよい。

【0071】

プログラムは、ＤＶＤ－ＲＯＭ１２２７又はＩＣカードのようなコンピュータ可読記憶媒体によって提供される。プログラムは、コンピュータ可読記憶媒体から読み取られ、コンピュータ可読記憶媒体の例でもある記憶装置１２２４、ＲＡＭ１２１４、又はＲＯＭ１２３０にインストールされ、ＣＰＵ１２１２によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ１２００に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ１２００の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。

【0072】

例えば、通信がコンピュータ１２００及び外部デバイス間で実行される場合、ＣＰＵ１２１２は、ＲＡＭ１２１４にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース１２２２に対し、通信処理を命令してよい。通信インタフェース１２２２は、ＣＰＵ１２１２の制御の下、ＲＡＭ１２１４、記憶装置１２２４、ＤＶＤ－ＲＯＭ１２２７、又はＩＣカードのような記録媒体内に提供される送信バッファ領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、又はネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。

【0073】

また、ＣＰＵ１２１２は、記憶装置１２２４、ＤＶＤドライブ１２２６（ＤＶＤ－ＲＯＭ１２２７）、ＩＣカード等のような外部記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がＲＡＭ１２１４に読み取られるようにし、ＲＡＭ１２１４上のデータに対し様々なタイプの処理を実行してよい。ＣＰＵ１２１２は次に、処理されたデータを外部記録媒体にライトバックしてよい。

【0074】

様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。ＣＰＵ１２１２は、ＲＡＭ１２１４から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索／置換等を含む、様々なタイプの処理を実行してよく、結果をＲＡＭ１２１４に対しライトバックする。また、ＣＰＵ１２１２は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第２の属性の属性値に関連付けられた第１の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、ＣＰＵ１２１２は、当該複数のエントリの中から、第１の属性の属性値が指定されている条件に一致するエントリを検索し、当該エントリ内に格納された第２の属性の属性値を読み取り、それにより予め定められた条件を満たす第１の属性に関連付けられた第２の属性の属性値を取得してよい。

【0075】

上で説明したプログラム又はソフトウエアモジュールは、コンピュータ１２００上又はコンピュータ１２００近傍のコンピュータ可読記憶媒体に格納されてよい。また、専用通信ネットワーク又はインターネットに接続されたサーバシステム内に提供されるハードディスク又はＲＡＭのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ１２００に提供する。
本実施形態におけるフローチャート及びブロック図におけるブロックは、オペレーションが実行されるプロセスの段階又はオペレーションを実行する役割を持つ装置の「部」を表わしてよい。特定の段階及び「部」が、専用回路、コンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び／又はコンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び／又はアナログハードウェア回路を含んでよく、集積回路（ＩＣ）及び／又はディスクリート回路を含んでよい。プログラマブル回路は、例えば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、及びプログラマブルロジックアレイ（ＰＬＡ）等のような、論理積、論理和、排他的論理和、否定論理積、否定論理和、及び他の論理演算、フリップフロップ、レジスタ、並びにメモリエレメントを含む、再構成可能なハードウェア回路を含んでよい。

【0076】

コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読記憶媒体は、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピー（登録商標）ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリメモリ（ＲＯＭ）、消去可能プログラマブルリードオンリメモリ（ＥＰＲＯＭ又はフラッシュメモリ）、電気的消去可能プログラマブルリードオンリメモリ（ＥＥＰＲＯＭ）、静的ランダムアクセスメモリ（ＳＲＡＭ）、コンパクトディスクリードオンリメモリ（ＣＤ－ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、ブルーレイ（登録商標）ディスク、メモリスティック、集積回路カード等が含まれてよい。

【0077】

コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ（ＩＳＡ）命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はＳｍａｌｌｔａｌｋ（登録商標）、ＪＡＶＡ（登録商標）、Ｃ＋＋等のようなオブジェクト指向プログラミング言語、及び「Ｃ」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、１又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。

【0078】

コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路が、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を生成するために当該コンピュータ可読命令を実行すべく、ローカルに又はローカルエリアネットワーク（ＬＡＮ）、インターネット等のようなワイドエリアネットワーク（ＷＡＮ）を介して、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路に提供されてよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。

【0079】

上記実施形態では、情報処理装置１００がクラウドに配置され、画像処理装置２００が移動体通信ネットワークのエッジに配置される場合を主に例に挙げて説明したが、これに限らない。情報処理装置１００は移動体通信ネットワークに配置されてもよく、この場合、ネットワーク２０は移動体通信ネットワークであってよい。この場合、情報処理装置１００は、移動体通信ネットワークの上位側に配置され、画像処理装置２００は、移動体通信ネットワークの下位側に配置される。また、情報処理装置１００及び画像処理装置２００がインターネットに配置されてもよく、この場合、ネットワーク２０はインターネットであってよい。また、情報処理装置１００及び画像処理装置２００がＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）に配置されてもよく、この場合、ネットワーク２０はＬＡＮであってよい。

【0080】

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。その様な変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

【0081】

特許請求の範囲、明細書、及び図面中において示した装置、システム、プログラム、及び方法における動作、手順、ステップ、及び段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、及び図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。

【符号の説明】

【0082】

１０ システム、２０ ネットワーク、１００ 情報処理装置、１０２ 座標情報取得部、１０３ 座標情報、１０４ 対応付部、１０６ 通過判定部、１０８ 出力制御部、１１０ エラー情報記憶部、１１２ エラー情報、１１４ ベクトル判定部、１１６ カウント部、２００ 画像処理装置、２０２ 動画像取得部、２０４ 画像変換部、２０６ 座標情報算出部、２０８ 送信部、３００ 検出対象、３０２ 基準座標、４００ 検出対象、４０２ 基準座標、５０２ 移動線分、５０４ 対象画像外縁、５０６ 境界線分、５０７ 移動ベクトル、５０８ 任意点、５０９ 判定ベクトル、５１０ 角度、６００ 失敗対象、６０２ 基準座標、６０４ 検出想定領域、１２００ コンピュータ、１２１０ ホストコントローラ、１２１２ ＣＰＵ、１２１４ ＲＡＭ、１２１６ グラフィックコントローラ、１２１８ ディスプレイデバイス、１２２０ 入出力コントローラ、１２２２ 通信インタフェース、１２２４ 記憶装置、１２２６ ＤＶＤドライブ、１２２７ ＤＶＤ－ＲＯＭ、１２３０ ＲＯＭ、１２４０ 入出力チップ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】