特開 2015-225546 物体検出装置、運転支援装置、物体検出方法、および物体検出プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】特開2015-225546(P2015-225546A)

(43)【公開日】2015年12月14日

(54)【発明の名称】物体検出装置、運転支援装置、物体検出方法、および物体検出プログラム

(51)【国際特許分類】

   G08G 1/16 20060101AFI20151117BHJP

   B60R 21/00 20060101ALI20151117BHJP

   G06T 1/00 20060101ALI20151117BHJP

   B60W 40/04 20060101ALI20151117BHJP

   B60W 30/16 20120101ALI20151117BHJP

【ＦＩ】

   G08G1/16 C

   B60R21/00 624C

   B60R21/00 626B

   B60R21/00 626E

   B60R21/00 626Z

   B60R21/00 628E

   G06T1/00 330B

   B60W40/04

   B60W30/16

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

【全頁数】13

(21)【出願番号】特願2014-110527(P2014-110527)

(22)【出願日】2014年5月28日

(71)【出願人】

【識別番号】000005326

【氏名又は名称】本田技研工業株式会社

(74)【代理人】

【識別番号】100064908

【弁理士】

【氏名又は名称】志賀 正武

(74)【代理人】

【識別番号】100146835

【弁理士】

【氏名又は名称】佐伯 義文

(74)【代理人】

【識別番号】100175802

【弁理士】

【氏名又は名称】寺本 光生

(74)【代理人】

【識別番号】100094400

【弁理士】

【氏名又は名称】鈴木 三義

(74)【代理人】

【識別番号】100126664

【弁理士】

【氏名又は名称】鈴木 慎吾

(72)【発明者】

【氏名】加納 忠彦

【テーマコード（参考）】

3D241

5B057

5H181

【Ｆターム（参考）】

3D241BA05

3D241BA50

3D241BA57

3D241BA59

3D241BA60

3D241BB37

3D241CC02

3D241CC08

3D241CC17

3D241CE05

3D241DC26Z

3D241DC27B

3D241DC27Z

3D241DC35Z

5B057AA16

5B057AA19

5B057CA08

5B057CA12

5B057CA16

5B057CB08

5B057CB12

5B057CB16

5B057DA06

5B057DC05

5B057DC16

5H181AA01

5H181CC04

5H181CC30

5H181LL01

5H181LL04

5H181LL07

5H181LL08

5H181LL09

(57)【要約】

【課題】自車両の走行車線への他車両の進入を精度良く認識することができる物体検出装置、運転支援装置、物体検出方法、および物体検出プログラムを提供すること。
【解決手段】自車両周辺を撮像する撮像部と、前記撮像部により撮像された画像から、他車両の側方下端部を表すと推定される第１の特徴線と、前記他車両の前端部を表すと推定される第２の特徴線であって前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出する特徴線抽出部と、前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定する判定部と、を備える物体検出装置。
【選択図】図２

【特許請求の範囲】

【請求項1】

自車両周辺を撮像する撮像部と、
前記撮像部により撮像された画像から、他車両の側方下端部を表すと推定される第１の特徴線と、前記他車両の前端部を表すと推定される第２の特徴線であって前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出する特徴線抽出部と、
前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定する判定部と、
を備える物体検出装置。

【請求項2】

前記判定部は、前記交点の位置が、前記撮像部により撮像された画像から認識可能な前記自車両の走行車線または進行予定軌跡に接近し、接触し、または進入するのに応じて、前記自車両の走行車線への他車両の進入を判定する、
請求項１記載の物体検出装置。

【請求項3】

前記撮像部により撮像された画像から特徴点を抽出する特徴点抽出部を備え、
前記特徴線抽出部は、前記特徴点抽出部により異なる撮像フレームの画像から抽出された特徴点の間で、同一の物体を表すと推定される特徴点の組を抽出し、前記特徴点の組を結んで生成される直線と略同方向である特徴線を、前記第１の特徴線として選択する、
請求項１または２記載の物体検出装置。

【請求項4】

前記特徴線抽出部は、複数の第２の特徴線候補が存在する場合、前記複数の第２の特徴線候補の中から、前記撮像部により撮像された画像から認識可能な前記自車両の走行車線に最も近い第２の特徴線候補を、前記第２の特徴線として選択する、
請求項１から３のうちいずれか１項に記載の物体検出装置。

【請求項5】

請求項１から４のうちいずれか１項に記載の物体検出装置と、
前記判定部の判定結果に基づいて前記車両の運転支援を行う運転支援部と、
を備える運転支援装置。

【請求項6】

自車両周辺を撮像する撮像部と、
前記撮像部により撮像された画像から、第１の特徴線と、前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出する特徴線抽出部と、
前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定する判定部と、
を備える物体検出装置。

【請求項7】

物体検出装置が、
自車両周辺を撮像し、
前記撮像された画像から、他車両の側方下端部を表すと推定される第１の特徴線と、前記他車両の前端部を表すと推定される第２の特徴線であって前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出し、
前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定する、
物体検出方法。

【請求項8】

物体検出装置の制御コンピュータに、
自車両周辺を撮像した画像から、他車両の側方下端部を表すと推定される第１の特徴線と、前記他車両の前端部を表すと推定される第２の特徴線であって前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出させ、
前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定させる、
物体検出プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、物体検出装置、運転支援装置、物体検出方法、および物体検出プログラムに関する。

【背景技術】

【0002】

自車に設置され、自車の前方の道路状況を撮影する撮影手段と、撮影手段により撮影された画像状況を基に、自車が走行している自車レーンと自車レーンに隣接した隣接レーンとの境界線を検出する境界線検出手段と、撮影手段により撮影された画像状況を基に、隣接レーンを走行している隣接先行車両を認識し、隣接先行車両の進行形態を検出する車両検出手段と、境界線検出手段と車両検出手段との検出結果を基に、境界線に対する隣接先行車両の進行方向の傾きを検出する傾き角検出手段と、境界線に対する隣接先行車両の進行方向の傾き角の大きさに基づいて、隣接先行車両は自車レーンに割り込もうとしている割込車であるか否かを判断する割込車判断手段を備えたことを特徴とする車両認識装置が知られている（例えば、特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開平９−２２３２３５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来の装置では、自車両の走行車線への他車両の進入を精度良く認識することができない場合があった。境界線に対する隣接先行車両の進行方向の傾き角を監視するだけでは、他車両のふらつきのみでも割り込みと誤判定してしまう場合があるからである。
本発明は、このような事情を考慮してなされたものであり、自車両の走行車線への他車両の進入を精度良く認識することができる物体検出装置、運転支援装置、物体検出方法、および物体検出プログラムを提供することを目的の一つとする。

【課題を解決するための手段】

【0005】

請求項１記載の発明は、自車両周辺を撮像する撮像部（１０）と、前記撮像部により撮像された画像から、他車両の側方下端部を表すと推定される第１の特徴線と、前記他車両の前端部を表すと推定される第２の特徴線であって前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出する特徴線抽出部（２１、２２、２３、２４、２５、３０、３１）と、前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定する判定部（４０、４１、４２）と、を備える物体検出装置（５）である。

【0006】

請求項２記載の発明は、請求項１記載の物体検出装置であって、前記判定部は、前記交点の位置が、前記撮像部により撮像された画像から認識可能な前記自車両の走行車線または進行予定軌跡に接近し、接触し、または進入するのに応じて、前記自車両の走行車線への他車両の進入を判定するものである。

【0007】

請求項３記載の発明は、請求項１または２記載の物体検出装置であって、前記撮像部により撮像された画像から特徴点を抽出する特徴点抽出部（２１）を備え、前記特徴線抽出部は、前記特徴点抽出部により異なる撮像フレームの画像から抽出された特徴点の間で、同一の物体を表すと推定される特徴点の組を抽出し、前記特徴点の組を結んで生成される直線と略同方向である特徴線を、前記第１の特徴線として選択するものである。

【0008】

請求項４記載の発明は、請求項１から３のうちいずれか１項に記載の物体検出装置であって、前記特徴線抽出部は、複数の第２の特徴線候補が存在する場合、前記複数の第２の特徴線候補の中から、前記撮像部により撮像された画像から認識可能な前記自車両の走行車線に最も近い第２の特徴線候補を、前記第２の特徴線として選択するものである。

【0009】

請求項５記載の発明は、請求項１から４のうちいずれか１項に記載の物体検出装置と、前記判定部の判定結果に基づいて前記車両の運転支援を行う運転支援部と、を備える運転支援装置（１）である。

【0010】

請求項６記載の発明は、自車両周辺を撮像する撮像部と、前記撮像部により撮像された画像から、第１の特徴線と、前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出する特徴線抽出部と、前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定する判定部と、を備える物体検出装置である。

【0011】

請求項７記載の発明は、物体検出装置が、自車両周辺を撮像し、前記撮像された画像から、他車両の側方下端部を表すと推定される第１の特徴線と、前記他車両の前端部を表すと推定される第２の特徴線であって前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出し、前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定する、物体検出方法である。

【0012】

請求項８記載の発明は、物体検出装置の制御コンピュータに、自車両周辺を撮像した画像から、他車両の側方下端部を表すと推定される第１の特徴線と、前記他車両の前端部を表すと推定される第２の特徴線であって前記第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出させ、前記第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定させる、物体検出プログラムである。

【発明の効果】

【0013】

請求項１、７，８に記載の発明によれば、特徴線抽出部が、他車両の側方下端部を表すと推定される第１の特徴線と、他車両の前端部を表すと推定される第２の特徴線であって第１の特徴線と画像上の傾きが異なる第２の特徴線とを抽出し、判定部が、第１の特徴線と前記第２の特徴線との交点に基づいて、自車両の走行車線への他車両の進入を判定するため、自車両の走行車線への他車両の進入を精度良く認識することができる。

【0014】

請求項２に記載の発明によれば、判定部は、交点の位置が、撮像部により撮像された画像から認識可能な自車両の走行車線または進行予定軌跡に接近し、接触し、または進入するのに応じて、自車両の走行車線への他車両の進入を判定するため、自車両の走行車線への他車両の進入を、更に精度良く認識することができる。

【0015】

請求項３に記載の発明によれば、特徴線抽出部は、特徴点抽出部により異なる撮像フレームの画像から抽出された特徴点の間で、同一の物体を表すと推定される特徴点の組を抽出し、特徴点の組を結んで生成される直線と略同方向である第１の特徴線を、他車両の側方下端部を表すものとして選択するため、より精度良く第１の特徴線を抽出することができる。これにより、自車両の走行車線への他車両の進入を、更に精度良く認識することができる。

【0016】

請求項４に記載の発明によれば、特徴点抽出部は、複数の第２特徴線候補の中から、撮像部により撮像された画像から認識可能な自車両の走行車線に最も近い第２の特徴線候補を、第２の特徴線として選択することで、より精度良く第２の特徴線を抽出することができる。これにより、自車両の走行車線への他車両の進入を、更に精度良く認識することができる。

【0017】

請求項５に記載の発明によれば、物体検出装置によって精度良く認識された自車両の走行車線への他車両の進入に基づいて、好適な運転支援を行うことができる。

【図面の簡単な説明】

【0018】

【図1】本発明の一実施形態に係る物体検出装置５を含む運転支援装置１の構成の一例を模式的に示す図である。

【図2】物体検出装置５を含む運転支援装置１の機能構成例を示す図である。

【図3】撮像画像ＩＭ中の特徴点ＣＰと消失点ＶＰを例示した図である。

【図4】撮像画像ＩＭを拡大して示す図であり、撮像画像ＩＭ中の隣接車両フローと、第１の特徴線と、第２の特徴線等を例示した図である。

【図5】複数の垂直エッジから隣接車両垂直エッジを選択する例を説明するための図である。

【図6】本実施形態の制御装置２０により実行される処理の流れの一例を示すフローチャートである。

【発明を実施するための形態】

【0019】

〔構成〕
以下、図面を参照し、本発明の一実施形態に係る物体検出装置５を含む運転支援装置１の実施形態について説明する。
図１は、本発明の一実施形態に係る物体検出装置５を含む運転支援装置１の構成の一例を模式的に示す図である。運転支援装置１は、例えば、自車両Ｍに搭載される装置であり、カメラ１０と、制御装置２０とを備える。以下、物体検出装置５が搭載される車両を「自車両」と称する。また、自車両の走行車線に対して隣接する車線を、自車両と同じ方向に走行している他車両を、「隣接車両」と称する。

【0020】

カメラ１０は、例えば、フロントウインドシールドの上部やルームミラーの裏面等に取り付けられている。カメラ１０は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の固体撮像素子を利用したデジタルカメラである。カメラ１０は、例えば、所定周期で車両の前方を繰り返し撮像し、撮像した画像のデータを制御装置２０に出力する。また、カメラ１０は、制御装置２０により抽出された特徴点や特徴線などの移動に応じて、カメラ１０の姿勢を推定する。

【0021】

制御装置２０は、例えば、ＣＰＵ（Central Processing Unit）等のプロセッサ、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）、ＨＤＤ（Hard Disk Drive）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read−Only Memory）、フラッシュメモリ等の記憶装置、車内で他装置と通信を行うための通信インターフェース等が内部バスによって接続されたコンピュータ装置である。

【0022】

図２は、物体検出装置５を含む運転支援装置１の機能構成例を示す図である。物体検出装置５の制御装置２０は、特徴点抽出部２１と、特徴点対応判定部２２と、姿勢推定処理部２３と、隣接車両フロー抽出部２４と、フローグループ化処理部２５と、特徴線抽出部３０と、隣接車両特徴線選択部３１と、交点座標算出部４０と、車両位置算出部４１と、割り込み判定部４２とを備える。また、これらの機能部は、例えば、プロセッサが記憶装置に格納されたプログラムを実行することにより機能するソフトウェア機能部である。これらの機能部は、適宜、統合または分割されてよい。プロセッサが実行するプログラムは、自車両Ｍの出荷時に予め記憶装置に格納されていてもよいし、可搬型記憶媒体に記憶されたプログラムが制御装置２０の記憶装置にインストールされてもよい。また、プログラムは、車載インターネット設備によって他のコンピュータ装置からダウンロードされ、制御装置２０の記憶装置にインストールされてもよい。また、上記機能部のうち一部または全部は、ＬＳＩ（Large Scale Integration）やＡＳＩＣ（Application Specific Integrated Circuit）等のハードウェア機能部であってもよい。また、制御装置２０は、車両制御部５０と警告表示制御部５２に接続される。車両制御部５０と警告表示制御部５２は、制御装置２０と同じコンピュータの別機能であってもよいし、制御装置２０とは別体のコンピュータの機能であってもよい。

【0023】

以下、図２を参照して、制御装置２０の各機能部の機能について説明する。また、後述する図３、図４を参照して、特徴点、第１の特徴線、第２の特徴線、および、これらの交点について説明する。

【0024】

特徴点抽出部２１は、カメラ１０により撮像された画像（以下、「撮像画像」と称する）から特徴点を抽出する。特徴点とは、例えば、上下左右に隣接する画素の間の輝度勾配の例えば平均値が所定値よりも大きい画素であり、物体の角や線の交わりなど、時系列に撮像した画像データを対比したときに対応の取りやすい点である。特徴点を抽出する手法としては、Ｈａｒｒｉｓ作用素やＳＵＳＡＮ作用素などの公知手法、あるいは新規の手法を適宜利用することができる。なお、特徴点抽出部２１に相当する機能部は、カメラ１０に内蔵または付設されるコンピュータ装置によって実現されてもよい。図３は、撮像画像ＩＭ中の特徴点ＣＰと消失点ＶＰを例示した図である。図示するように、特徴点ＣＰは、検出対象物である自車両の周辺を走行する隣接車両ＯＢの車体における縁部やコーナー部などから抽出されやすい傾向にある。

【0025】

特徴点対応判定部２２は、複数の撮像画像間（例えば、連続する２フレームの撮像画像間）で、特徴点抽出部２１により抽出された特徴点の対応関係を判定する。特徴点対応判定部２２は、特徴点抽出部２１が抽出した前フレームの特徴点と、現フレームの特徴点とを対応づける。特徴点の対応関係を判定する方法として、前回のフレームで抽出した特徴点の周辺（例えば特徴点を中心として５×５画素や７×７画素程度）の画素群の輝度分布を求め、次の画像の同じ位置の周辺に、その輝度分布と同じ分布を持った画素群が無いかを探し、最も輝度分布が一致する画素群の中心を今回の特徴点として抽出するブロックマッチング手法を利用できる。また、公知技術であるＫＬＴ（Kanade Lucas Tomasi）追跡手法や、新規の手法を適宜利用できる。また、特徴点対応判定部２２は、複数フレームに亘る画像の特徴点の対応関係に基づいて、特徴点の三次元座標を算出する。

【0026】

図４は、撮像画像ＩＭを拡大して示す図であり、撮像画像ＩＭ中の隣接車両フローと、第１の特徴線と、第２の特徴線等を例示した図である。図４の例では、異なる時間に撮像された隣接車両ＯＢを、便宜的に１つのフレームで表している。隣接車両ＯＢ０は、時刻Ｔ０のときに撮像されたものであり、隣接車両ＯＢ１は、時刻Ｔ０よりも後の時刻Ｔ１のときに撮像されたものである。

【0027】

図４におけるＣＰａ０とＣＰｂ０は、時刻Ｔ０のときに撮像された隣接車両ＯＢ０の異なる箇所を表す特徴点である。また、図４におけるＣＰａ１とＣＰｂ１は、時刻Ｔ１のときに撮像された隣接車両ＯＢ１の異なる箇所を表す特徴点である。特徴点ＣＰａ０とＣＰａ１、特徴点ＣＰｂ０とＣＰｂ１は、それぞれ隣接車両ＯＢの同じ箇所を表す特徴点である。特徴点対応判定部２２は、異なる撮像フレームの画像から抽出した特徴点の間で、同一の物体（或いは物体における特定の箇所）を表すと推定される特徴点の組を抽出する。図４の例では、特徴点対応判定部２２は、特徴点ＣＰａ０とＣＰａ１、特徴点ＣＰｂ０とＣＰｂ１をそれぞれ対応づけ、組とする。

【0028】

姿勢推定処理部２３は、複数の撮像画像間の特徴点の対応関係からカメラ１０の姿勢（ピッチ角、パン角、ロール角等）を推定する。図４の例では、姿勢推定処理部２３は、例えば、特徴点対応判定部２２が対応づけた、特徴点ＣＰａ０とＣＰａ１の関係、および特徴点ＣＰｂ０とＣＰｂ１の関係からカメラ１０の姿勢を推定する。

【0029】

隣接車両フロー抽出部２４は、特徴点対応判定部２２により対応づけられた特徴点の組を結んで直線を生成する。この直線を、以下、「隣接車両フロー」と称する。ここで、隣接車両フローとは、複数の撮像画像間において、特徴点対応判定部２２により対応づけられた特徴点を結び、空間上の有向線分としたものである。隣接車両フロー抽出部２４は、例えば、特徴点を結んだ空間上の有向線分の中から、線分の傾きが、線分の位置から消失点ＶＰに向かう方向に対して所定角度以内であり、且つ消失点ＶＰよりも画像上で下側に存在する有向線分を、隣接車両フローとして抽出する。

【0030】

図４の例では、隣接車両フロー抽出部２４は、２つの撮像画像間において、特徴点対応判定部２２により、対応づけされたそれぞれの特徴点「ＣＰａ０とＣＰａ１」「ＣＰｂ０とＣＰｂ１」を結び、空間上の有向線分とした「Ｆａ」「Ｆｂ」を隣接車両フローとして抽出する。隣接車両フロー「Ｆａ」「Ｆｂ」は、画像周辺から消失点に向かう方向であり、且つ消失点よりも画像上で下側に存在している。

【0031】

フローグループ化処理部２５は、隣接車両フロー抽出部２４により抽出された各隣接車両フローをグループ化する。フローグループ化処理部２５は、例えば、クラスタリング処理によって特徴点フローをグループ化する。フローグループ化処理部２５は、隣接車両フロー抽出部２４により抽出された各隣接車両フローの座標位置、長さ、傾き等から同一物体とみなせる隣接車両フローをクラスタリングすることによってグループ化する。これについては既に種々の手法が公知となっているため、説明を省略する。図４の例では、フローグループ化処理部２５は、各隣接車両フロー「Ｆａ」「Ｆｂ」を座標位置、長さ、傾きに基づき、クラスタリングすることによって、一つのグループとしてグループ化することができる。

【0032】

特徴線抽出部３０は、隣接車両フロー群に近いＩＭの範囲で、消失点ＶＰに向かう方向に近い傾きを有する特徴線である「斜めエッジ」と、撮像画像ＩＭにおける垂直方向に近い傾きを有する特徴線である「垂直エッジ」とをそれぞれ抽出する。「近い」とは、例えば方向と傾きのなす角度が所定の角度範囲内にあることをいう。斜めエッジと垂直エッジとしては、直線または曲率が一定以下の曲線が選択される。自車両と隣接車両の位置関係から、隣接車両の側方下端部は、斜めエッジとして抽出され、隣接車両の前端部は、垂直エッジとして抽出される可能性が高い。そして、斜めエッジと垂直エッジとは、傾きが異なる特徴線となる。斜めエッジとは、例えば、撮像画像ＩＭにおける隣接車両フロー群に近い領域内で、消失点に向かう方向に直交する方向の輝度勾配が所定値よりも大きい画素を連ねた線である。また、垂直エッジとは、例えば、撮像画像ＩＭにおける隣接車両フロー群に近い領域内で、画像の横方向（水平方向）の輝度勾配が所定値よりも大きい画素を連ねた線である。また、特徴線は、特徴点抽出部２１により抽出される特徴点を連ねた線であってもよいし、その他の手法により画像から抽出される線であってもよい。特徴線を抽出する手法として、例えば、特徴点強調による線や輪郭線を検出する公知技術であるＣａｎｎｙ手法や、新規の手法を適宜利用できる。

【0033】

特徴線抽出部３０は、隣接車両ＯＢに対応するグループ化された隣接車両フロー群「Ｆａ」「Ｆｂ」に近い領域内で、斜めエッジと垂直エッジを抽出する。なお、特徴線抽出部３０は、すべてのグループ化された隣接車両フロー群を、順次、選択して、選択した隣接車両フロー群に近い領域内の斜めエッジと垂直エッジの抽出、および後述する処理を繰り返してもよい。

【0034】

隣接車両特徴線選択部３１は、特徴線抽出部３０により抽出された斜めエッジから、隣接車両の側方下端部を表すと推定される斜めエッジである隣接車両斜めエッジ（第１の特徴線）を選択する。他車両の「下端」とは、例えば、ロッカーパネル部や、路面と他車両との接地面、他車両の影などが車両の側方下端部に相当する。図４の例では、隣接車両ＯＢに対応するグループ化された隣接車両フロー「Ｆａ」「Ｆｂ」に近い傾きを持ち、隣接車両の側方下端部を示すと推定される特徴線「Ａ１」が、隣接車両斜めエッジとして選択される。

【0035】

また、隣接車両特徴線選択部３１は、特徴線抽出部３０により抽出された垂直エッジから、隣接車両の前端部を表すと推定され、隣接車両斜めエッジと画像上の傾きが異なる垂直エッジである隣接車両垂直エッジ（第２の特徴線）を選択する。ここで、隣接車両ＯＢの「前端部」とは、隣接車両ＯＢのフロントグリル近傍、及び／又はフロントバンパー近傍が形成する部分である。図４の例では、隣接車両特徴線選択部３１は、特徴線「Ｂ１」を、隣接車両垂直エッジとして選択する。

【0036】

隣接車両特徴線選択部３１は、垂直エッジが１つのみ抽出された場合には、その１つの垂直エッジを隣接車両垂直エッジとして選択するが、複数の垂直エッジが抽出された場合には、下記に例示する手法によって隣接車両垂直エッジを選択する。図５は、複数の垂直エッジから隣接車両垂直エッジを選択する例を説明するための図である。図中、Ａ２は、隣接車両特徴線選択部３１により選択された隣接車両斜めエッジであり、Ｂ２、Ｂ３は、特徴線抽出部３０により抽出された垂直エッジである。この場合、隣接車両特徴線選択部３１は、撮像部１０により撮像された画像から認識可能な自車両の走行車線に最も近い垂直エッジＢ２を、隣接車両垂直エッジとして選択する。

【0037】

ここで「自車両の走行車線に最も近い垂直エッジ」は、例えば、複数の垂直エッジ（ここでは長さを有する線分とする）Ｂ２、Ｂ３から自車両の走行車線を区画する区画線Ｌ１までの最短距離ｒ２、ｒ３を求め、最短距離が短い方（図５）では垂直エッジＢ２を選択することで決定される。また、これに限らず、撮像画像ＩＭ上で左右方向に関する中心線に最も近い点を含む垂直エッジを隣接車両垂直エッジとして選択してもよい。

【0038】

交点座標算出部４０は、隣接車両斜めエッジと隣接車両垂直エッジの交点を算出する。図４の例では、交点座標算出部４０は、隣接車両斜めエッジＡ１と隣接車両垂直エッジＢ１の交点Ｘ１を算出する。

【0039】

車両位置算出部４１は、交点座標算出部４０により算出された交点の画像上の位置と、姿勢推定処理部２３で推定したカメラ１０の姿勢とに基づいて、交点の三次元位置を算出する。

【0040】

割り込み判定部４２は、車両位置算出部４１により算出された交点の三次元位置に基づいて、隣接車両ＯＢが割り込み車両であるか否かを判定する。割り込み判定部４２は、例えば、算出された交点の三次元位置と、自車両の進行予定軌跡（自車両の左右端から前方に延出する線で区画される領域）とが重なっているかどうか判断し、重なっている場合に隣接車両ＯＢが割り込み車両であると判定する。また、割り込み判定部４２は、自車両が走行している車線を区画する区画線Ｌ１（図４、５）を交点が跨いだ場合に、隣接車両ＯＢが割り込み車両と判定しても良い。

【0041】

割り込み判定部４２は、上記の処理に代えて、隣接車両ＯＢが割り込み車両であることの可能性を示す指標値（連続値または段階値）を算出してもよい。この場合、割り込み判定部は、距離（図４、α及び／又はβ）が短くなるのに応じて指標値を大きく算出する。また、割り込み判定部４２は、例えば、距離αと距離βの差分（すなわち交点と区画線Ｌ１の距離の時間的変化）およびその変化程度、距離αと距離βとの比、交点の移動方向などを複合的に組み合わせて、自車両が走行する車線へ隣接車両ＯＢが進入する可能性を判定してもよい。

【0042】

また、割り込み判定部４２が指標値等を算出する場合、割り込み判定部４２は、種々の状態値に基づいて、指標値の補正を行ってもよい。割り込み判定部４２は、例えば、自車両と隣接車両との進行方向の距離、または衝突時間（ＴＴＣ；Time To Collision）が長い場合には、隣接車両の自車線への進入の可能性を大きく補正し、自車両と隣接車両との進行方向の距離、または衝突時間が短い場合には、隣接車両の自車線への進入の可能性を小さく補正してもよい。こうすれば、自車両と隣接車両が近い位置に相対し、緊急性が高い場合には、自車両が走行する車線へ隣接車両が進入する可能性を大きく補正することで、自車両の制御が必要であるか否かを考慮した隣接車両の車線変更を判定することができる。

【0043】

車両制御部５０は、割り込み判定部４２により算出された隣接車両の位置情報に基づいて、車両のドライバーが安全に運転できるように種々の安全制御を行う。例えば、制御装置２０によって検出された隣接車両の位置や速度に応じて、隣接車両との距離を一定に保つように、自車両の速度制御を行ってもよいし、検出対象物の位置に基づいて自車両の自動ブレーキ制御や自動操舵制御を行ってもよい。

【0044】

警告表示制御部５２は、割り込み判定部４２により算出された隣接車両の位置情報に基づいて、車内に注意または警告喚起を示す情報を液晶ディスプレイ等の表示装置に表示させる。また、注意または警告喚起を示す情報は、シートベルトの締め付けやアラーム音、振動などによって運転者に伝えてもよい。

【0045】

〔動作フロー〕
図６は、本実施形態の制御装置２０により実行される処理の流れの一例を示すフローチャートである。図６を参照して、運転支援装置１が行う処理について説明する。

【0046】

まず、特徴点抽出部２１が、撮像画像から特徴点を抽出する（ステップＳ１００）。次に、特徴点対応判定部２２が、複数の撮像画像間で、特徴点抽出部２１により抽出された特徴点の対応関係を判定する（ステップＳ１０２）。次に、姿勢推定処理部２３が、複数の撮像画像間の特徴点の対応関係からカメラ１０の姿勢（ピッチ角、パン角、ロール角等）を推定する。（ステップＳ１０４）。次に、隣接車両フロー抽出部２４が、特徴点対応判定部２２により対応づけられた特徴点の対応関係から隣接車両の隣接車両フローを抽出する。（ステップＳ１０６）。次に、フローグループ化処理部２５が、隣接車両フロー抽出部２４により抽出された各隣接車両フローをグループ化する。（ステップＳ１０８）。そして、特徴線抽出部３０が、選択したグループの隣接車両フロー群に近い領域内で、撮像画像ＩＭにおける消失点ＶＰに向かう方向に近い傾きを有する特徴線である「斜めエッジ」と、撮像画像ＩＭにおける垂直方向に近い傾きを有する特徴線である「垂直エッジ」とをそれぞれ抽出する（ステップＳ１１０）。

【0047】

次に、隣接車両特徴線選択部３１が、特徴線抽出部３０により抽出された斜めエッジから隣接車両の側方下端部を表すと推定される斜めエッジである隣接車両斜めエッジ（第１の特徴線）を選択すると共に、特徴線抽出部３０により抽出された垂直エッジから隣接車両の前端部を表すと推定される隣接車両垂直エッジ（第２の特徴線）を選択する（ステップＳ１１２）。次に、交点座標算出部４０が、隣接車両斜めエッジと隣接車両垂直エッジの交点を算出する（ステップＳ１１４）。次に、車両位置算出部４１が、交点座標値と、姿勢推定処理部２３で推定したカメラ１０姿勢とから、画像に対応する三次元座標における交点座標値を算出する（ステップＳ１１６）。次に、特徴線抽出部３０が、未選択の隣接車両フロー群が存在するか否かを判定する（ステップＳ１１８）。他のグループ化された隣接車両フロー群が存在する場合には、ステップＳ１１０へ戻り、他の特徴点フロー群が存在しない場合には、ステップＳ１２０へ進む。

【0048】

次に、割り込み判定部４２が、隣接車両の交点の三次元座標値から割り込み車両であるか否かを判定する（ステップＳ１２０）。割り込み車両であると判定された場合は、車両制御部５０が、割り込み判定部４２により算出された隣接車両の位置情報に基づいて、車両のドライバーが安全に運転できるように種々の安全制御を行う（ステップＳ１２２）。これによって、本フローチャートの処理が終了する。

【0049】

以上説明した本実施形態の物体検出装置５によれば、制御装置２０が、他車両の側方下端部を表すと推定される隣接車両斜めエッジ（第１の特徴線）と、他車両の前端部を表すと推定される隣接車両垂直エッジ（第２の特徴線）であって、隣接車両斜めエッジ（第１の特徴線）と画像上の傾きが異なる垂直エッジ（第２の特徴線）とを抽出し、割り込み判定部４２が、隣接車両斜めエッジ（第１の特徴線）と隣接車両垂直エッジ（第２の特徴線）との交点に基づいて、自車両の走行車線への他車両の接近や進入を判定するため、精度良く自車両の走行車線への他車両の進入を判定することができる。

【0050】

また、本実施形態の運転支援装置１によれば、物体検出装置５によって精度良く認識された自車両の走行車線への他車両の進入に基づいて、好適な運転支援を行うことができる。この結果、安全運転に寄与することができる。

【0051】

以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。

【符号の説明】

【0052】

１…運転支援装置、５…物体検出装置、１０…カメラ、２０…制御装置、２１…特徴点抽出部、２２…特徴点対応判定部、２３…姿勢推定処理部、２４…隣接車両フロー抽出部、２５…フローグループ化処理部、３０…特徴線抽出部、３１…隣接車両特徴線選択部、４０…交点座標算出部、４１…車両位置算出部、４２…割り込み判定部、５０…車両制御部
５２…警告表示制御部、Ｍ…自車両、ＩＭ…撮像画像、ＯＢ…隣接車両、ＣＰ…特徴点、ＶＰ…消失点、Ｆａ、Ｆｂ…隣接車両フロー、Ａ０、Ａ１、Ａ２…隣接車両斜めエッジ（第１の特徴線）、Ｂ０、Ｂ１…隣接車両垂直エッジ（第２の特徴線）、Ｘ０、Ｘ１…交点、Ｌ１…区画線、Ｂ２、Ｂ３…垂直エッジ（第２の特徴線候補）

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】