特開 2025-2093 交通映像処理装置及び交通映像処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2025002093

(43)【公開日】2025-01-09

(54)【発明の名称】交通映像処理装置及び交通映像処理方法

(51)【国際特許分類】

   G08G 1/01 20060101AFI20241226BHJP

【ＦＩ】

G08G1/01 C

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2023102019

(22)【出願日】2023-06-21

(71)【出願人】

【識別番号】000003078

【氏名又は名称】株式会社東芝

(71)【出願人】

【識別番号】598076591

【氏名又は名称】東芝インフラシステムズ株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】小野里 和樹

【テーマコード（参考）】

5H181

【Ｆターム（参考）】

5H181AA01

5H181BB05

5H181BB13

5H181CC04

5H181DD07

5H181FF10

5H181FF13

5H181FF33

5H181MA48

(57)【要約】

【課題】膨大な録画映像から交通事象に関する映像を効率的に抽出する。
【解決手段】第１時刻特定部は基準録画映像に対して交通事象を検出可能な第１画像解析処理を実行することにより交通事象が発生した交通事象発生時刻を特定する。第１抽出部は基準録画映像から交通事象発生時刻を含む所定期間に撮影された交通事象映像を抽出する。第２時刻特定部は上流側録画映像又は下流側録画映像の少なくとも一方に対して交通事象に関連する関連事象を検出可能な第２画像解析処理を実行することにより関連事象が発生した関連事象発生時刻を特定する。第２抽出部は上流側録画映像又は下流側録画映像から関連事象発生時刻を含む所定期間に撮影された関連事象映像を抽出する。
【選択図】図２

【特許請求の範囲】

【請求項1】

道路で発生した交通事象の種類と、前記道路に設置された複数のカメラうち前記交通事象を撮影した基準カメラを特定可能な情報と、を含むイベント情報を取得する取得部と、
前記基準カメラにより撮影され録画された基準録画映像に対して前記交通事象を検出可能な第１画像解析処理を実行することにより、前記交通事象が発生した交通事象発生時刻を特定する第１時刻特定部と、
前記基準録画映像から前記交通事象発生時刻を含む所定期間に撮影された交通事象映像を抽出する第１抽出部と、
前記基準カメラより前記道路の上流側に設置された上流側カメラにより撮影され録画された上流側録画映像、又は前記基準カメラより前記道路の下流側に設置された下流側カメラにより撮影され録画された下流側録画映像の少なくとも一方に対して、前記交通事象に関連する関連事象を検出可能な第２画像解析処理を実行することにより、前記関連事象が発生した関連事象発生時刻を特定する第２時刻特定部と、
前記上流側録画映像又は前記下流側録画映像から前記関連事象発生時刻を含む所定期間に撮影された関連事象映像を抽出する第２抽出部と、
前記交通事象映像と前記関連事象映像とを関連付けて記憶する抽出情報記憶部と、
を備える交通映像処理装置。

【請求項2】

前記基準録画映像に基づいて前記道路を走行する車両の車速を算出する車速演算部と、
前記車速に基づいて前記第２画像解析処理の対象となる前記上流側録画映像又は前記下流側録画映像の範囲である捜査範囲を設定する捜査範囲設定部と、
を更に備える請求項１に記載の交通映像処理装置。

【請求項3】

前記交通事象の種類が事故ある場合、
前記第２画像解析処理は、前記関連事象として、前記上流側録画映像から事故の発生の原因となった原因事象を検出し、
前記第２時刻特定部は、前記原因事象が発生した時刻を前記関連事象発生時刻とする、
請求項１に記載の交通映像処理装置。

【請求項4】

前記原因事象は、速度超過、あおり運転又は路上落下物のうちの少なくとも１つを含む、
請求項３に記載の交通映像処理装置。

【請求項5】

前記交通事象の種類が逆走である場合、
前記第２画像解析処理は、前記関連事象として、前記下流側録画映像から逆走の開始を示す開始事象を検出し、前記上流側録画映像から逆走の終了を示す終了事象を検出し、
前記第２時刻特定部は、前記開始事象が発生した時刻又は前記終了事象が発生した時刻の少なくとも一方を前記関連事象発生時刻とする、
請求項１に記載の交通映像処理装置。

【請求項6】

前記開始事象は、逆走車の前記道路への進入、又は正常な方向に走行している車両の進行方向の逆転の少なくとも一方を含む、
請求項５に記載の交通映像処理装置。

【請求項7】

前記終了事象は、逆走車の前記道路からの退場、又は逆走車の進行方向の逆転の少なくとも一方を含む、
請求項５に記載の交通映像処理装置。

【請求項8】

情報処理装置が、道路で発生した交通事象の種類と、前記道路に設置された複数のカメラうち前記交通事象を撮影した基準カメラを特定可能な情報と、を含むイベント情報を取得する工程と、
情報処理装置が、前記基準カメラにより撮影され録画された基準録画映像に対して前記交通事象を検出可能な第１画像解析処理を実行することにより、前記交通事象が発生した交通事象発生時刻を特定する工程と、
情報処理装置が、前記基準録画映像から前記交通事象発生時刻を含む所定期間に撮影された交通事象映像を抽出する工程と、
情報処理装置が、前記基準カメラより前記道路の上流側に設置された上流側カメラにより撮影され録画された上流側録画映像、又は前記基準カメラより前記道路の下流側に設置された下流側カメラにより撮影され録画された下流側録画映像の少なくとも一方に対して、前記交通事象に関連する関連事象を検出可能な第２画像解析処理を実行することにより、前記関連事象が発生した関連事象発生時刻を特定する工程と、
情報処理装置が、前記上流側録画映像又は前記下流側録画映像から前記関連事象発生時刻を含む所定期間に撮影された関連事象映像を抽出する工程と、
情報処理装置が、前記交通事象映像と前記関連事象映像とを関連付けて記憶装置に記憶させる工程と、
を含む交通映像処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、交通映像処理装置及び交通映像処理方法に関する。

【背景技術】

【0002】

近年、高速道路等の道路上には多くのＣＣＴＶ（Closed Circuit Television）カメラが設置されている。これらのカメラにより撮影され録画された録画映像は、所定期間保存され、道路上で発生する事故や故障等の交通事象の検出や調査等に利用されている。また、このような録画映像に対して画像解析を行い、録画映像から交通事象に関連する映像を抽出する技術の開発が進められている。

【先行技術文献】

【特許文献】

【0003】

【特許文献3】特開２０２０－１９８４９７号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

今後、高速道路等は、事故や故障等の交通事象の検出の精度を高めるため、高速道路上の全てを監視する全線監視を行うことが検討されている。全線監視を行うためには、道路上に設置されるＣＣＴＶカメラの台数は、膨大な数になると予測される。このような状況下において、従来と同様の手法で膨大な録画映像から交通事象に関する映像を抽出しようとすると、人的作業の増大化や、高度な計算資源の必要性に伴うコストの増大化等が深刻化すると予測される。このような問題に対処するため、録画映像から必要な映像を抽出する処理の更なる効率化が求められている。

【0005】

そこで、本発明の実施形態は、膨大な録画映像から交通事象に関する映像を効率的に抽出可能な交通映像処理装置及び交通映像処理方法を提供することを課題とする。

【課題を解決するための手段】

【0006】

実施形態の交通映像処理装置は、取得部と、第１時刻特定部と、第１抽出部と、第２時刻特定部と、第２抽出部と、抽出情報記憶部と、を備える。取得部は、道路で発生した交通事象の種類と、道路に設置された複数のカメラうち交通事象を撮影した基準カメラを特定可能な情報と、を含むイベント情報を取得する。第１時刻特定部は、基準カメラにより撮影され録画された基準録画映像に対して交通事象を検出可能な第１画像解析処理を実行することにより、交通事象が発生した交通事象発生時刻を特定する。第１抽出部は、基準録画映像から交通事象発生時刻を含む所定期間に撮影された交通事象映像を抽出する。第２時刻特定部は、基準カメラより道路の上流側に設置された上流側カメラにより撮影され録画された上流側録画映像、又は基準カメラより道路の下流側に設置された下流側カメラにより撮影され録画された下流側録画映像の少なくとも一方に対して、交通事象に関連する関連事象を検出可能な第２画像解析処理を実行することにより、関連事象が発生した関連事象発生時刻を特定する。第２抽出部は、上流側録画映像又は下流側録画映像から関連事象発生時刻を含む所定期間に撮影された関連事象映像を抽出する。抽出情報記憶部は、交通事象映像と関連事象映像とを関連付けて記憶する。

【図面の簡単な説明】

【0007】

【図1】図１は、第１実施形態の交通監視システムの全体的構成の一例を示す図である。

【図2】図２は、第１実施形態の交通映像処理装置の機能構成の一例を示す図である。

【図3】図３は、第１実施形態の交通事象の一例を示す図である。

【図4】図４は、第１実施形態の交通事象発生時刻の特定方法及び交通事象映像の抽出方法の一例を示す図である。

【図5】図５は、第１実施形態の関連事象発生時刻の特定方法及び関連事象映像の抽出方法の一例を示す図である。

【図6】図６は、第１実施形態の交通映像処理装置による処理の一例を示すフローチャートである。

【図7】図７は、第２実施形態の交通映像処理装置の機能構成の一例を示す図である。

【図8】図８は、第２実施形態の交通事象の一例を示す図である。

【図9】図９は、第２実施形態の交通事象発生時刻の特定方法及び交通事象映像の抽出方法の一例を示す図である。

【図10】図１０は、第２実施形態の関連事象発生時刻の特定方法及び関連事象映像の抽出方法の一例を示す図である。

【図11】図１１は、第２実施形態の交通映像処理装置による処理の一例を示すフローチャートである。

【発明を実施するための形態】

【0008】

以下、図面を参照しながら、本発明の交通映像処理装置及び交通映像処理方法の実施形態について説明する。

【0009】

（第１実施形態）
図１は、第１実施形態の交通管制システム１の全体的構成の一例を示す図である。交通管制システム１は、道路Ｒの状況を監視するためのシステムである。道路Ｒは、例えば、高速道路、有料道路等でも、国道等の一般道でもよい。

【0010】

交通管制システム１は、交通管制センタ１０を含む。
交通管制センタ１０は、道路Ｒに設置されたトラフィックカウンタから取得される交通量／速度／占有率等の交通情報や、カメラから取得される画像情報、道路Ｒの路側に設置された非常電話や一般利用者が使用するスマートフォン等の携帯情報端末２０による通報等に基づいて、道路Ｒ上で発生する交通量の把握や、交通事象を検知する。そして、一般利用者に道路Ｒの状況を通知するための道路情報の生成や、交通規制等の交通管制を実施するための施設である。ここでいう交通事象（イベント）とは、道路Ｒ上で発生する事象であって、例えば、事故、車両故障、危険運転（例えば逆走、速度超過、あおり運転等）、渋滞、路上落下物、路面や路上附属物の破損等であり得る。

【0011】

監視対象となる道路Ｒには、複数のＣＣＴＶカメラ２１－１～２１－ｎ（カメラの一例）、複数の非常電話２２－１～２２－ｐ、複数のＴＣ（トラフィックカウンタ：Traffic Counter）２３－１～２３－ｑ等が設置されている。図１に例示する構成におけるｎ，ｐ，ｑは、それぞれ４以上の自然数である。

【0012】

ＣＣＴＶカメラ２１－１～２１－ｎは、道路Ｒ（トンネルを含む）上に所定の間隔で設置された撮像装置である。各ＣＣＴＶカメラ２１－１～２１－ｎは、道路Ｒ上で発生する交通事象の映像をそれぞれの撮影範囲内で静止画又は動画データして取得する。ＣＣＴＶカメラ２１－１～２１－ｎは、交通管制センタ１０の映像ＤＢ（Data Base）１１と所定の回線網を介して接続しており、ＣＣＴＶカメラ２１－１～２１－ｎにより撮影された映像は、映像ＤＢ１１に保存される。以下、複数のＣＣＴＶカメラ２１－１～２１－ｎを区別する必要がない場合には、ＣＣＴＶカメラ２１と記載する場合がある。

【0013】

ＴＣ２３－１～２３－ｑは、道路Ｒ上に所定の間隔で設置されたトラフィックカウンタであり、車両の通過数、車速、交通密度等を計測する装置である。ＴＣ２３－１～２３－ｑは、交通管制センタ１０の交通中央制御装置１３等と所定の通信網を介して接続している。交通管制センタ１０は、ＴＣ２３－１～２３－ｑから取得される情報に基づいて、例えば交通渋滞の発生等を検知できる。以下、複数のＴＣ２３－１～２３－ｑを区別する必要がない場合には、ＴＣ２３と記載する場合がある。

【0014】

非常電話２２－１～２２－ｐは、道路Ｒ上に所定の間隔で設置された専用の電話機であり、高速道路を一般的に利用しているユーザの車両の乗員や、路上パトロール隊員等が使用可能なものである。非常電話２２－１～２２－ｐは、交通管制センタ１０の交通中央制御装置１２等と専用回線等を介して接続している。
路上パトロール隊員や、高速道路を一般的に利用しているユーザの車両の乗員等は、非常電話２２－１～２２－ｐを使用することにより、道路Ｒ上で発生した事故や故障等の交通事象を交通管制センタ１０等に通報できる。以下、複数の非常電話２２－１～２２－ｐを区別する必要がない場合には、非常電話２２と記載する場合がある。

【0015】

高速道路を一般的に利用しているユーザの車両の乗員等は、携帯情報端末２０を使用して道路Ｒ上で発生した事故や故障等の交通事象を交通管制センタ１０に通報できるようになっている。
携帯情報端末２０は、道路Ｒを走行しているユーザの車両の乗員等が使用するスマートフォン、タブレット端末等の装置である。携帯情報端末２０は、例えば、ユーザが事故や落下物等を見つけた場合に使用される。携帯情報端末２０から公衆網やインターネット等のネットワークＮを介して交通管制センタ１０に対して通報があった場合、交通管制センタ１０内に設置された固定電話等の通信装置１６が当該通報を受信し、通報内容に応じて管制員が後述する交通中央制御装置に対して入力を行うことで、交通事象に関する情報を取得できる。

【0016】

本実施形態の交通管制センタ１０は、交通中央制御装置１３、交通中央サーバ１４、大型ディスプレイ１５、通信装置１６、交通映像処理装置１２及び映像ＤＢ１１を備える。

【0017】

交通中央制御装置１３は、道路Ｒの状況に関する交通情報を生成するための処理を実行する情報処理装置である。交通中央制御装置１３は、道路Ｒ上の設備（非常電話２２やＴＣ２３等）から取得される情報、通信装置１６を介して携帯情報端末２０から通報された情報等に基づいて交通事象に関する交通情報を生成する。
このとき、交通中央制御装置１３は、非常電話２２や携帯情報端末２０（通信装置１６）を介して取得されるユーザや路上パトロール隊員等からの情報に基づいて管制員が手動で入力した情報等を利用して交通情報を生成してもよい。
交通中央制御装置１３は、適宜なハードウェア及びソフトウェアを利用して構成されればよいが、例えばＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ストレージ、通信Ｉ／Ｆ（Interface）、ユーザＩ／Ｆ等を利用して構成される汎用コンピュータ、サーバコンピュータ、通信システム等を利用して構成され得る。

【0018】

交通中央サーバ１４は、映像ＤＢ１１に保存された録画映像や、交通映像処理装置１２から取得される情報、交通中央制御装置１３から取得される情報等を大型ディスプレイ１５に表示させる処理等を実行する情報処理装置である。交通中央サーバ１４は、適宜なハードウェア及びソフトウェアを利用して構成されればよいが、例えば画像処理に特化した機能を有するサーバコンピュータ等を利用して構成され得る。

【0019】

交通映像処理装置１２は、映像ＤＢ１１に保存された録画映像から交通事象に関連する映像を抽出し、交通事象の検証等に有用な情報を生成するための処理を行う情報処理装置である。本実施形態の交通映像処理装置１２は、映像ＤＢ１１に保存された録画映像から、交通事象が発生した場面を撮影した交通事象映像と、当該交通事象に関連する関連事象が発生した場面を撮影した関連事象映像と、を抽出し、これらの交通事象映像と関連事象映像とを関連付けたカプセル情報を生成する。交通映像処理装置１２の具体的な機能については後述する。交通映像処理装置１２は、適宜なハードウェア及びソフトウェアを利用して構成されればよいが、例えば汎用コンピュータ等を利用して構成され得る。

【0020】

映像ＤＢ１１は、ＣＣＴＶカメラ２１により撮影された映像を保存及び管理するためのコンピュータシステムである。映像ＤＢ１１は、複数のＣＣＴＶカメラ２１－１～２１－ｎのそれぞれにより撮影された複数の映像を録画映像として所定期間個別に保存する。映像ＤＢ１１に保存された録画映像は、交通管制センタ１０においてオフラインで利用可能となる。映像ＤＢ１１は、適宜なハードウェア及びソフトウェアを利用して構成されればよいが、例えばデータベースサーバ、大容量ストレージ、バックアップシステム、冗長化システム等を利用して構成され得る。

【0021】

大型ディスプレイ１５は、道路Ｒに関する各種情報を示す画像（動画を含む）を表示可能な装置である。大型ディスプレイ１５には、例えば、映像ＤＢ１１に保存されている録画映像や、交通映像処理装置１２により生成されたカプセル情報、交通中央制御装置１３により生成された交通情報等が表示され得る。

【0022】

図２は、第１実施形態の交通映像処理装置１２の機能構成の一例を示す図である。
本実施形態の交通映像処理装置１２は、取得部１０１、第１時刻特定部１０２、第１抽出部１０３、第２時刻特定部１０４、第２抽出部１０５、車速演算部１０６、捜査範囲設定部１０７、抽出映像記憶部１０８及び出力部１０９を備える。これらの機能部は、交通映像処理装置１２を構成するハードウェア及びソフトウェアの協働により構成される。なお、これらの機能部のうちの少なくとも１つが専用のハードウェア（回路等）により構成されてもよい。

【0023】

取得部１０１は、道路Ｒで発生する交通事象に関するイベント情報を取得する。イベント情報は、道路Ｒで発生した交通事象の種類と、道路Ｒに設置された複数のＣＣＴＶカメラ２１うち交通事象を撮影した基準カメラを特定可能な情報と、を含む。本実施形態の取得部１０１は、交通中央制御装置１３からイベント情報を取得する。

【0024】

交通事象の種類とは、例えば、事故、車両故障、逆走、速度超過、あおり運転、渋滞、路上落下物、路面や路上附属物の破損等であり得る。基準カメラを特定可能な情報とは、例えば、交通事象が発生した位置や、当該位置を撮影範囲とするＣＣＴＶカメラ２１を特定する識別情報等を含む情報であり得る。このようなイベント情報は、様々な手法により生成可能なものであるが、例えば、交通中央制御装置１３を操作する管制員等が非常電話２２や携帯情報端末２０等から取得した交通事象の目撃情報等に基づいてイベント情報を生成してもよい。また、イベント情報は、コンピュータにより実行される所定のアルゴリズムにより目撃情報等に基づいて自動生成されてもよい。

【0025】

第１時刻特定部１０２は、イベント情報に基づいて特定された基準カメラにより撮影され録画された基準録画映像に対して、交通事象を検出可能な第１画像解析処理を実行することにより、交通事象が発生した交通事象発生時刻を特定する。

【0026】

本実施形態においては、基準録画映像は、映像ＤＢ１１に保存された複数の録画映像５１－１～５１－ｎから選択される。複数の録画映像５１－１～５１－ｎのそれぞれは、複数のＣＣＴＶカメラ２１－１～２１－ｎのそれぞれに対応している。すなわち、録画映像５１－１は、ＣＣＴＶカメラ２１－１により撮影された映像であり、録画映像５１－２は、ＣＣＴＶカメラ２１－２により撮影された映像であり、他の録画映像５１－３～５１－ｎについても同様である。
例えば、基準カメラがＣＣＴＶカメラ２１－３である場合、録画映像５１－３が基準録画映像となる。そして、基準録画映像としての録画映像５１－３に対して第１画像解析処理を実行することにより、交通事象発生時刻が特定される。第１画像解析処理は、公知又は新規な技術を適宜利用して実現されればよいが、例えば、基準録画映像を構成する複数のフレーム（静止画像）からある交通事象（例えば事故等）に特有の画像的特徴を有するフレームを抽出するアルゴリズム等が利用され得る。

【0027】

第１抽出部１０３は、基準録画映像から交通事象発生時刻を含む所定期間に撮影された交通事象映像を抽出する。交通事象映像には、第１画像解析処理により検出された交通事象の映像が含まれる。

【0028】

第２時刻特定部１０４は、基準カメラより道路Ｒの上流側に設置された上流側カメラにより撮影され録画された上流側録画映像に対して、第１画像解析処理により検出された交通事象に関連する関連事象を検出可能な第２画像解析処理を実行することにより、当該関連事象が発生した関連事象発生時刻を特定する。

【0029】

例えば、ＣＣＴＶカメラ２１－１が道路Ｒの最上流位置に設置され、ＣＣＴＶカメラ２１－ｎが道路Ｒの最下流位置に設置され、ＣＣＴＶカメラ２１－３が基準カメラである場合、ＣＣＴＶカメラ２１－１，２１－２が上流側カメラとなり、録画映像５１－１，５１－２が上流側録画映像となる。この場合、上流側録画映像としての録画映像５１－１，５１－２に対して第２画像解析処理を実行することにより、関連事象発生時刻が特定される。
第２画像解析処理は、公知又は新規な技術を適宜利用して実現されればよいが、例えば、上流側録画映像を構成する複数のフレームからある交通事象（例えば事故の要因となった危険運転等）に画像的特有の特徴を有するフレームを抽出するアルゴリズム等が利用され得る。

【0030】

第２抽出部１０５は、上流側録画映像から関連事象発生時刻を含む所定期間に撮影された関連事象映像を抽出する。関連事象映像には、第２画像解析処理により検出された関連事象の映像が含まれる。

【0031】

車速演算部１０６は、基準録画映像に基づいて道路Ｒを走行する車両の車速を算出する。当該車速の算出は、公知又は新規な技術を適宜利用して実現されればよいが、例えば、基準録画映像を構成する複数のフレーム間における車両の位置変化等に基づいて車速を算出するアルゴリズム等が利用され得る。

【0032】

捜査範囲設定部１０７は、車速演算部１０６により算出された車速に基づいて、第２時刻特定部１０４における第２画像解析処理の対象となる上流側記録映像の範囲である捜査範囲を設定する。すなわち、第１画像解析処理により検出された交通事象（例えば事故等）に関連する関連事象（例えば危険運転等）を検出するための捜査範囲が、基準録画映像に含まれる車両の車速に基づいて設定される。これにより、関連事象を検出するための第２画像解析処理の対象となる上流側録画映像の範囲を絞ることができ、第２画像解析処理にかかる演算負荷を低減できる。

【0033】

抽出映像記憶部１０８は、第１抽出部１０３により抽出された交通事象映像と、第２抽出部１０５により抽出された関連事象映像と、を関連付けたカプセル情報を記憶する。

【0034】

出力部１０９は、抽出映像記憶部１０８に記憶されたカプセル情報を所定の形式で出力する。

【0035】

図３は、第１実施形態の交通事象の一例を示す図である。ここで例示する交通事象は、事故である。
図３において、片側二車線の道路Ｒの追い越し車線で事故を起こした事故車Ｃ１の状況が例示されている。ここで例示する事故車Ｃ１は、ＣＣＴＶカメラ２１－ｋの撮影範囲で事故を起こし、ＣＣＴＶカメラ２１－ｋより上流側のＣＣＴＶカメラ２１－ｌの撮影範囲で速度超過を起こしている。なお、ｋ，ｌは自然数であり、ｌ＜ｋの関係が成り立つ。本例では、ＣＣＴＶカメラ２１－ｋが交通事象（事故）を撮影した基準カメラであり、ＣＣＴＶカメラ２１－ｌが関連事象（速度超過）を撮影した上流側カメラであるものとする。なお、交通事象の種類はこれに限定されるものではなく、例えば車両故障等であり得る。また、関連事象の種類はこれに限定されるものではなく、例えばあおり運転、路上落下物等であり得る。

【0036】

図４は、第１実施形態の交通事象発生時刻ｔ１の特定方法及び交通事象映像Ｖ１の抽出方法の一例を示す図である。
図４において、基準録画映像Ｖｓと交通事象発生時刻ｔ１と交通事象映像Ｖ１との関係が例示されている。当該基準録画映像Ｖｓは、図３に例示される状況においては、事故現場を撮影した基準カメラとしてのＣＣＴＶカメラ２１－ｋにより撮影された映像である。

【0037】

図４の上部に示されるように、交通事象発生時刻ｔ１は、基準録画映像Ｖｓに対して第１画像解析処理を実行することにより特定される。このとき、第１画像解析処理は、所定の基準時刻ｔ０から時間を遡るように実行され、事故（事故の現場が映っているフレーム）が検出されるまで継続され、事故が検出された時刻が交通事象発生時刻ｔ１となる。基準時刻ｔ０は、例えば、携帯情報端末２０や非常電話２２等から通報があった時刻等であり得るが、これに限定されるものではない。
そして、図４の下部に示されるように、基準録画映像Ｖｓから交通事象発生時刻ｔ１を含む所定期間Δｔ１分を抽出した映像が交通事象映像Ｖ１となる。

【0038】

図５は、第１実施形態の関連事象発生時刻ｔ２の特定方法及び関連事象映像Ｖ２の抽出方法の一例を示す図である。
図５において、上流側録画映像Ｖｕと関連事象発生時刻ｔ２と関連事象映像Ｖ２との関係が例示されている。当該上流側録画映像Ｖｕは、図３に例示される状況においては、事故車Ｃ１が速度超過の状態で走行している場面を撮影した上流側カメラとしてのＣＣＴＶカメラ２１－ｌにより撮影された映像である。

【0039】

図５の上部に示されるように、関連事象発生時刻ｔ２は、上流側録画映像Ｖｕに対して第２画像解析処理を実行することにより特定される。このとき、第２画像解析処理は、捜査開始時刻ｔｓから捜査終了時刻ｔｅまでの捜査範囲内で時間を遡るように実行され、関連事象（関連事象が映っているフレーム）が検出されるまで継続される。ここで例示する関連事象は、事故の原因となった原因事象であり、図３に例示される状況においては、事故車Ｃ１の速度超過である。そして、関連事象が検出された時刻が関連事象発生時刻ｔ２となる。
また、第２画像解析処理は、捜査開始時刻ｔｓから捜査終了時刻ｔｅまでの間に関連事象が検出されなかった場合には、関連事象発生時刻ｔ２を特定せずに終了する。図５の下部に示されるように、上流側録画映像Ｖｕから関連事象発生時刻ｔ２を含む所定期間Δｔ２分を抽出した映像が関連事象映像Ｖ２となる。

【0040】

捜査範囲の一例としての捜査開始時刻ｔｓ及び捜査終了時刻ｔｅは、車速演算部１０６により算出された車速（例えば事故車Ｃ１の車速や、道路Ｒを走行している複数の車両の平均速度等）に基づいて設定される。また、捜査範囲は、上流側カメラが複数存在する場合、それらのうちのどれを第２画像解析処理の対象とするかを示す情報を含んでもよい。
例えば、基準カメラより上流側に１０台の上流側カメラが存在する場合、基準カメラに近いものから順に５台目までの上流側カメラにより撮影された５つの上流側録画映像Ｖｕのみを第２画像解析処理の対象としてもよい。この場合、６台目以降の上流側カメラに撮影された上流側録画映像は、第２画像解析処理の対象とならない。
このような捜査範囲の設定は、例えば、車速演算部１０６により算出された車速とＣＣＴＶカメラ２１間の間隔とに基づいて行うことができる。このような捜査範囲を設定することにより、交通事象の発生時刻より過度に古いタイミングで発生した事象や、当該交通事象の発生場所から過度に遠い場所で発生した事象等を排除でき、当該交通事象に関連しない事象が関連事象として扱われることを抑制できる。

【0041】

図６は、第１実施形態の交通映像処理装置１２による処理の一例を示すフローチャートである。
ステップＳ１０１において、第１時刻特定部１０２は交通中央制御装置１３等から取得したイベント情報に基づいて基準カメラ（例えば図３におけるＣＣＴＶカメラ２１－ｋ）を特定する。ステップＳ１０２において、第１時刻特定部１０２は基準カメラにより撮影された基準録画映像Ｖｓに対して第１画像解析処理を実行する。

【0042】

ステップＳ１０３において、第１画像解析処理により基準録画映像Ｖｓから交通事象の一例としての事故が検出されたか否かが判定され、事故が検出されなかった場合（Ｓ１０３：Ｎｏ）、本ルーチンは終了する。

【0043】

ステップＳ１０３において、基準録画映像Ｖｓから事故が検出された場合（Ｓ１０３：Ｙｅｓ）、ステップＳ１０４において、第１時刻特定部１０２は第１画像解析処理により検出された事故の発生時刻（事故現場が映っているフレーム）に対応する交通事象発生時刻ｔ１を特定する。ステップＳ１０５において、第１抽出部１０３は交通事象発生時刻ｔ１に基づいて基準録画映像Ｖｓから交通事象映像Ｖ１を抽出する。

【0044】

ステップＳ１０６において、車速演算部１０６は基準録画映像Ｖｓに基づいて当該基準録画映像Ｖｓに含まれる車両（例えば図３における事故車Ｃ１等）の車速を算出する。ステップＳ１０７において、捜査範囲設定部１０７は上記のように算出された車速に基づいて第２画像解析処理の対象となる捜査範囲を設定する。

【0045】

ステップＳ１０８において、第２時刻特定部１０４は上流側カメラ（例えば図３におけるＣＣＴＶカメラ２１－ｌ）により撮影された上流側録画映像Ｖｕに対して第２画像解析処理を実行する。ステップＳ１０９において、第２画像解析処理により上流側録画映像Ｖｕから関連事象（例えば事故の原因となった事故車Ｃ１の速度超過等の原因事象）が検出されたか否かが判定される。

【0046】

ステップＳ１０９において、関連事象が検出された場合（Ｓ１０９：Ｙｅｓ）、ステップＳ１１０において、第２時刻特定部１０４は第２画像解析処理により検出された関連事象（原因事象）の発生時刻（原因事象が映っているフレーム）に対応する関連事象発生時刻ｔ２を特定する。ステップＳ１１１において、第２抽出部１０５は関連事象発生時刻ｔ２に基づいて上流側録画映像Ｖｕから関連事象映像Ｖ２を抽出する。
そして、ステップ１１２において、抽出映像記憶部１０８は交通事象映像Ｖ１と関連事象映像Ｖ２とを関連付けたカプセル情報を記憶する。

【0047】

ステップＳ１０９において、関連事象が検出されなかった場合（Ｓ１０９：Ｎｏ）、ステップＳ１１４において、第２時刻特定部１０４は第２画像解析処理が全捜査範囲に対して終了したか否かを判定する。
ステップＳ１１４において、第２画像解析処理が全捜査範囲に対して終了していない場合（Ｓ１１４：Ｎｏ）、ステップＳ１０８において、上流側録画映像Ｖｕのうち未実行の範囲に対して第２画像解析処理を実行する。ステップＳ１１４において、第２画像解析処理が全捜査範囲に対して終了した場合（Ｓ１１４：Ｙｅｓ）、抽出映像記憶部１０８は関連事象映像Ｖ２を含まない（交通事象映像Ｖ１のみを含む）情報をカプセル情報として記憶する。

【0048】

以上のように、本実施形態によれば、基準録画映像Ｖｓに対する画像解析処理（第１画像解析処理）により交通事象が発生した交通事象発生時刻ｔ１が特定され、交通事象発生時刻ｔ１に基づいて基準録画映像Ｖｓから交通事象の映像を含む交通事象映像Ｖ１が抽出される。また、上流側録画映像Ｖｕに対する画像解析処理（第２画像解析処理）により交通事象に関連する関連事象が発生した関連事象発生時刻ｔ２が特定され、関連事象発生時刻ｔ２に基づいて上流側録画映像Ｖｕから関連事象の映像を含む関連事象映像Ｖ２が抽出される。そして、交通事象映像Ｖ１と関連事象映像Ｖ２とが関連付けられたカプセル情報が記憶される。
これにより、膨大な録画映像から交通事象に関する映像を効率的且つ簡便に抽出することが可能となり、人的作業やコストの増大化等を抑制しつつ、高速道路等の全線監視等を実現することが可能となる。

【0049】

以下に、他の実施形態について図面を参照して説明するが、第１実施形態の同一又は同様の箇所については適宜その説明を省略する。

【0050】

（第２実施形態）
第１実施形態においては、上流側録画映像に対して第２画像解析処理が実行され、その結果に基づいて上流側録画映像から関連事象映像が抽出される。これに対し、第２実施形態は、逆走車の画像解析も可能とするため、上流側録画映像だけでなく、基準カメラより下流側に設置された下流側カメラにより撮影された下流側録画映像に対しても第２画像解析処理を実行し、その結果に基づいて、上流側録画映像及び下流側録画映像からそれぞれ関連事象映像を抽出する点で、第１実施形態と相違する。

【0051】

図７は、第２実施形態の交通映像処理装置１２の機能構成の一例を示す図である。
本実施形態の第２時刻特定部１０４は、第１実施形態と同様に、上流側録画映像に対して関連事象を検出可能な第２画像解析処理を実行し、その結果に基づいて上流側の関連事象発生時刻を特定する。また、本実施形態の第２時刻特定部１０４は、基準カメラより下流側に設置された下流側カメラにより撮影された下流側録画映像に対して第２画像解析処理を実行し、その結果に基づいて下流側の関連事象発生時刻を特定する。

【0052】

本実施形態の第２抽出部１０５は、第１実施形態と同様に、上流側の関連事象発生時刻に基づいて上流側録画映像から上流側の関連事象映像を抽出すると共に、下流側の関連事象発生時刻に基づいて下流側録画映像から下流側の関連事象映像を抽出する。

【0053】

本実施形態の捜査範囲設定部１０７は、第１実施形態と同様に、上流側録画映像に対する捜査範囲（第２画像解析処理の実行範囲）を設定すると共に、車速演算部１０６により算出された車速に基づいて下流側録画映像に対する捜査範囲を設定する。

【0054】

図８は、第２実施形態の交通事象の一例を示す図である。ここで例示する交通事象は、車両の逆走である。
図８において、片側二車線の道路Ｒの追い越し車線を逆走する逆走車Ｃ２の状況が例示されている。ここで例示する逆走車Ｃ２は、ＣＣＴＶカメラ２１－ｍの撮影範囲に存在する退場用側道Ｒｏから進入し、ＣＣＴＶカメラ２１－ｋの撮影範囲を正規の進行方向に対して逆走し、ＣＣＴＶカメラ２１－ｊの撮影範囲に存在する合流用側道Ｒｉから退場している。なお、ｊ，ｋ，ｍは自然数であり、ｊ＜ｋ＜ｍの関係が成り立つ。
本例では、ＣＣＴＶカメラ２１－ｋが交通事象（逆走）を撮影した基準カメラであり、ＣＣＴＶ２１－ｍが関連事象（道路Ｒへの進入）を撮影した下流側カメラであり、ＣＣＴＶカメラ２１－ｊが関連事象（道路Ｒからの退場）を撮影した上流側カメラであるものとする。なお、関連事象の種類は進入及び退場に限定されるものではなく、例えば、逆走車Ｃ２の停止、方向転換、事故等であってもよい。

【0055】

図９は、第２実施形態の交通事象発生時刻ｔ１の特定方法及び交通事象映像Ｖ１の抽出方法の一例を示す図である。
図９において、基準録画映像Ｖｓと交通事象発生時刻ｔ１と交通事象映像Ｖ１との関係が例示されている。当該基準録画映像Ｖｓは、図８に例示される状況においては、逆走車Ｃ２が道路Ｒを逆走する現場を撮影した基準カメラとしてのＣＣＴＶカメラ２１－ｋにより撮影された映像である。

【0056】

図９の上部に示されるように、交通事象発生時刻ｔ１は、基準録画映像Ｖｓに対して第１画像解析処理を実行することにより特定される。このとき、第１画像解析処理は、第１実施形態と同様に、所定の基準時刻ｔ０から時間を遡るように実行され、逆走が検出されるまで継続され、逆走が検出された時刻が交通事象発生時刻ｔ１となる。そして、図９の下部に示されるように、基準録画映像Ｖｓから交通事象発生時刻ｔ１を含む所定期間Δｔ１分を抽出した映像が交通事象映像Ｖ１となる。

【0057】

図１０は、第２実施形態の関連事象発生時刻ｔ２，ｔ３の特定方法及び関連事象映像Ｖ２，Ｖ３の抽出方法の一例を示す図である。
図１０において、下流側録画映像Ｖｄと関連事象発生時刻ｔ２と関連事象映像Ｖ２との関係、及び上流側録画映像Ｖｕと関連事象発生時刻ｔ３と関連事象映像Ｖ３との関係が例示されている。下流側録画映像Ｖｄは、図８に例示される状況においては、逆走車Ｃ２が退場用側道Ｒｏから道路Ｒに進入してきた場面を撮影した下流側カメラとしてのＣＣＴＶカメラ２１－ｍにより撮影された映像である。上流側録画映像Ｖｕは、図８に例示される状況においては、逆走車Ｃ２が合流用側道Ｒｉから退場した場面を撮影した下流側カメラとしてのＣＣＴＶカメラ２１－ｍにより撮影された映像である。

【0058】

図１０の上部に示されるように、下流側の関連事象発生時刻ｔ２は、下流側録画映像Ｖｄに対して第２画像解析処理を実行することにより特定される。このとき、第２画像解析処理は、捜査開始時刻ｔｓ１から捜査終了時刻ｔｅ１までの捜査範囲内で時間を遡るように実行され、関連事象が検出されるまで継続される。当該関連事象は、例えば、逆走の開始を示す開始事象であり、図８に例示される状況においては、逆走車Ｃ２が退場用側道Ｒｏから道路Ｒへ進入する事象である。当該関連事象（開始事象）が検出された時刻が関連（開始）事象発生時刻ｔ２となる。捜査開始時刻ｔｓ１から捜査終了時刻ｔｅ１までの間に関連事象が検出されなかった場合には、第２画像解析処理は関連事象発生時刻ｔ２を特定せずに終了する。

【0059】

また、上流側の関連事象発生時刻ｔ３は、上流側録画映像Ｖｕに対して第２画像解析処理を実行することにより特定される。このとき、第２画像解析処理は、捜査開始時刻ｔｓ２から捜査終了時刻ｔｅ２までの捜査範囲内で時間を進めるように実行され、関連事象が検出されるまで継続される。当該関連事象は、例えば、逆走の終了を示す終了事象であり、図８に例示される状況においては、逆走車Ｃ２が合流用側道Ｒｉから退場する事象である。当該関連事象（終了事象）が検出された時刻が関連（終了）事象発生時刻ｔ３となる。
捜査開始時刻ｔｓ２から捜査終了時刻ｔｅ２までの間に関連事象が検出されなかった場合には、第２画像解析処理は関連事象発生時刻ｔ３を特定せずに終了する。なお、ここでは、下流側録画映像Ｖｄに対して実行される画像解析処理と上流側録画映像Ｖｕに対して実行される画像解析処理とを共に「第２画像解析処理」と称しているが、両者は互いに異なるアルゴリズムを用いて構成されるものであってもよい。

【0060】

そして、図１０の下部に示されるように、下流側録画映像Ｖｄから関連事象発生時刻ｔ２を含む所定期間Δｔ２分を抽出した映像が、開始事象の映像を含む関連事象映像Ｖ２となる。また、上流側録画映像Ｖｕから関連事象発生時刻ｔ３を含む所定期間Δｔ３分を抽出した映像が、終了事象の映像を含む関連事象映像Ｖ３となる。

【0061】

図１１は、第２実施形態の交通映像処理装置１２による処理の一例を示すフローチャートである。
ステップＳ２０１において、第１時刻特定部１０２は交通中央制御装置１３等から取得したイベント情報に基づいて基準カメラ（例えば図８におけるＣＣＴＶカメラ２１－ｋ）を特定する。ステップＳ２０２において、第１時刻特定部１０２は基準カメラにより撮影された基準録画映像Ｖｓに対して第１画像解析処理を実行する。

【0062】

ステップＳ２０３において、第１画像解析処理により基準録画映像Ｖｓから交通事象としての逆走が検出されたか否かが判定され、逆走が検出されなかった場合（Ｓ２０３：Ｎｏ）、本ルーチンは終了する。

【0063】

ステップＳ２０３において、基準録画映像Ｖｓから逆走が検出された場合（Ｓ２０３：Ｙｅｓ）、ステップＳ２０４において、第１時刻特定部１０２は第１画像解析処理により検出された逆走の発生時刻に対応する交通事象発生時刻ｔ１を特定する。ステップＳ２０５において、第１抽出部１０３は交通事象発生時刻ｔ１に基づいて基準録画映像Ｖｓから交通事象映像Ｖ１を抽出する。

【0064】

ステップＳ２０６において、車速演算部１０６は基準録画映像Ｖｓに基づいて当該基準録画映像Ｖｓに含まれる車両（例えば図８における逆走車Ｃ２等）の車速を算出する。ステップＳ２０７において、捜査範囲設定部１０７は上記のように算出された車速に基づいて第２画像解析処理の対象となる捜査範囲を設定する。

【0065】

ステップＳ２０８において、第２時刻特定部１０４は下流側カメラ（例えば図８におけるＣＣＴＶカメラ２１－ｍ）により撮影された下流側録画映像Ｖｄに対して第２画像解析処理を実行する。ステップＳ２０９において、第２画像解析処理により下流側録画映像Ｖｄから関連事象（例えば逆走の開始を示す開始事象）が検出されたか否かが判定される。

【0066】

ステップＳ２０９において、関連事象が検出された場合（Ｓ２０９：Ｙｅｓ）、ステップＳ２１０において、第２時刻特定部１０４は第２画像解析処理により検出された関連事象の発生時刻に対応する関連事象発生時刻ｔ２を特定する。ステップＳ２１１において、第２抽出部１０５は関連事象発生時刻ｔ２に基づいて下流側録画映像Ｖｄから関連事象映像Ｖ２を抽出する。その後、後述するステップＳ２１８が実行される。

【0067】

ステップ２０９において、関連事象が検出されなかった場合（Ｓ２０９：Ｎｏ）、ステップＳ２１２において、第２時刻特定部１０４は第２画像解析処理が全捜査範囲に対して終了したか否かを判定する。
ステップＳ２１２において、第２画像解析処理が全捜査範囲に対して終了していない場合（Ｓ２１２：Ｎｏ）、ステップＳ２０８において、下流側録画映像Ｖｄのうち未実行の範囲に対して第２画像解析処理を実行する。ステップＳ２１２において、第２画像解析処理が全捜査範囲に対して終了した場合（Ｓ２１２：Ｙｅｓ）、後述するステップＳ２１８が実行される。

【0068】

ステップＳ２０７の実行後、ステップＳ２１３において、第２時刻特定部１０４は上流側カメラ（例えば図８におけるＣＣＴＶカメラ２１－ｊ）により撮影された上流側録画映像Ｖｕに対して第２画像解析処理を実行する。ステップＳ２１４において、第２画像解析処理により上流側録画映像Ｖｕから関連事象（例えば逆走の終了を示す終了事象）が検出されたか否かが判定される。

【0069】

ステップＳ２１４において、関連事象が検出された場合（Ｓ２１４：Ｙｅｓ）、ステップＳ２１５において、第２時刻特定部１０４は第２画像解析処理により検出された関連事象の発生時刻に対応する関連事象発生時刻ｔ３を特定する。ステップＳ２１６において、第２抽出部１０５は関連事象発生時刻ｔ３に基づいて上流側録画映像Ｖｕから関連事象映像Ｖ３を抽出する。その後、後述するステップＳ２１８が実行される。

【0070】

ステップ２１４において、関連事象が検出されなかった場合（Ｓ２１４：Ｎｏ）、ステップＳ２１７において、第２時刻特定部１０４は第２画像解析処理が全捜査範囲に対して終了したか否かを判定する。
ステップＳ２１７において、第２画像解析処理が全捜査範囲に対して終了していない場合（Ｓ２１７：Ｎｏ）、ステップＳ２１７において、第２画像解析処理が全捜査範囲に対して終了した場合（Ｓ２１７：Ｙｅｓ）、後述するステップＳ２１８が実行される。

【0071】

ステップＳ２１８において、抽出映像記憶部１０８は上記処理の結果に基づいてカプセル情報を記憶する。すなわち、ステップＳ２１１において下流側の関連事象映像（例えば開始事象映像）Ｖ２が抽出され、且つステップＳ２１６において上流側の関連事象映像（例えば終了事象映像）Ｖ３が抽出された場合には、交通事象映像Ｖ１と上流側の関連事象映像Ｖ２と下流側の関連事象映像Ｖ３とを関連付けたカプセル情報が記憶される。
また、ステップＳ２１１において下流側の関連事象映像Ｖ２が抽出され、且つステップＳ２１７において第２画像解析処理が全捜査範囲に対して終了した場合（Ｓ２１７：Ｙｅｓ）には、交通事象映像Ｖ１と下流側の関連事象映像Ｖ２とを関連付けたカプセル情報が記憶される。
また、ステップＳ２１６において上流側の関連事象映像Ｖ３が抽出され、且つステップＳ２１２において第２画像解析処理が全捜査範囲に対して終了した場合（Ｓ２１２：Ｙｅｓ）には、交通事象映像Ｖ１と上流側の関連事象映像Ｖ３とを関連付けたカプセル情報が記憶される。
また、ステップＳ２１２及びステップＳ２１７において第２画像解析処理が全捜査範囲に対して終了した場合（Ｓ２１２：Ｙｅｓ且つＳ２１７：Ｙｅｓ）には、関連事象映像Ｖ２，Ｖ３を含まない（交通事象映像Ｖ１のみを含む）情報がカプセル情報として記憶される。

【0072】

以上のように、本実施形態によれば、上流側録画映像及び下流側録画映像の両方に対して画像解析処理（第２画像解析処理）が実行され、交通事象に関連する関連事象を撮影した関連事象映像が上流側録画映像及び下流側録画映像からそれぞれ抽出される。これにより、逆走等の、上流側及び下流側の両方に関連事象が発生し得る交通事象に関する有用なカプセル情報を効率的且つ簡便に生成することが可能となる。

【0073】

上述したような機能を交通映像処理装置１２に実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

【0074】

さらに、当該プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、本実施形態で実行される当該プログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。

【0075】

以上、本発明の実施形態を説明したが、上記実施形態はあくまで例であって、発明の範囲を限定することは意図していない。上記実施形態は、様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0076】

１…交通管制システム、１０…交通管制センタ、１１…映像ＤＢ、１２…交通映像処理装置、１３…交通中央制御装置、２０…携帯情報端末、２１－１～２１－ｎ…ＣＣＴＶカメラ、２１－ｊ…上流側カメラ、２１－ｋ…基準カメラ、２１－ｌ，２１－ｍ…下流側カメラ、５１－１～５１－ｎ…録画映像、１０１…取得部、１０２…第１時刻特定部、１０３…第１抽出部、１０４…第２時刻特定部、１０５…第２抽出部、１０６…車速演算部、１０７…捜査範囲設定部、１０８…抽出映像記憶部、１０９…出力部、Ｃ１…事故車、Ｃ２…逆走車、Ｒ…道路、Ｒｉ…合流用側道、Ｒｏ…退場用側道、ｔ１…交通事象発生時刻、ｔ２，ｔ３…関連事象発生時刻、Ｖ１…交通事象映像、Ｖ２，Ｖ３…関連事象映像、Ｖｄ…下流側録画映像、Ｖｓ…基準録画映像、Ｖｕ…上流側録画映像

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】