特許 5957315 車載用車線認識装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5957315

(24)【登録日】2016年6月24日

(45)【発行日】2016年7月27日

(54)【発明の名称】車載用車線認識装置

(51)【国際特許分類】

   G06T 7/60 20060101AFI20160714BHJP

   G08G 1/16 20060101ALI20160714BHJP

【ＦＩ】

   G06T7/60 200J

   G08G1/16 C

【請求項の数】9

【全頁数】15

(21)【出願番号】特願2012-149864(P2012-149864)

(22)【出願日】2012年7月3日

(65)【公開番号】特開2014-13451(P2014-13451A)

(43)【公開日】2014年1月23日

【審査請求日】2015年6月17日

(73)【特許権者】

【識別番号】000001487

【氏名又は名称】クラリオン株式会社

(74)【代理人】

【識別番号】100084412

【弁理士】

【氏名又は名称】永井 冬紀

(74)【代理人】

【識別番号】100121360

【弁理士】

【氏名又は名称】粟田 照久

(74)【代理人】

【識別番号】100149157

【弁理士】

【氏名又は名称】関根 創史

(72)【発明者】

【氏名】竹村 雅幸

(72)【発明者】

【氏名】村松 彰二

(72)【発明者】

【氏名】清原 將裕

(72)【発明者】

【氏名】宇田川 玲

(72)【発明者】

【氏名】今井 正人

【審査官】 真木 健彦

(56)【参考文献】

【文献】 特開平０８−３２０９９７（ＪＰ，Ａ）

【文献】 特開２００７−１７９３８６（ＪＰ，Ａ）

【文献】 特開２００３−０６７７５５（ＪＰ，Ａ）

【文献】 特開平０５−３１４３９６（ＪＰ，Ａ）

【文献】 特開２００９−１５７４９２（ＪＰ，Ａ）

【文献】 特開２００１−１４３０７０（ＪＰ，Ａ）

【文献】 特開２０１１−１８０９８２（ＪＰ，Ａ）

【文献】 特開２００６−１５３５６５（ＪＰ，Ａ）

【文献】 特開２００９−１５１６０６（ＪＰ，Ａ）

【文献】 特開２０１０−２４４３８２（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｔ ７／００ − ７／６０

Ｇ０６Ｔ １／００

Ｇ０８Ｇ １／００ − １／１６

(57)【特許請求の範囲】

【請求項1】

車両の周囲の路面を撮影して撮影画像を取得する撮影装置と、
前記撮影装置により時系列的に取得された複数の撮影画像から、前記路面上で前記車両の走行車線の左右いずれか少なくとも一方に描かれた車線区画線に対応する複数の特徴点をそれぞれ抽出する特徴点抽出部と、
前記特徴点抽出部により各撮影画像から抽出された特徴点の数の周期性を解析し、前記特徴点の数の変化に周期性があるか否かを判断する周期性解析部と、
前記周期性解析部により前記特徴点の数の変化に周期性があると判断された場合、前記車線区画線を破線として検出する車線区画線検出部とを備え、
前記周期性解析部は、検出された車線区画線上の前記特徴点の数の変化を周波数軸上で表した周波数波形に基づいて、前記特徴点の数の周期性を解析することを特徴とする車載用車線認識装置。

【請求項2】

請求項１に記載の車載用車線認識装置において、
前記周期性解析部は、前記周波数波形における第１のピーク周波数を２倍した値と、前記周波数波形における第２のピーク周波数とが略一致する場合に、前記特徴点の数の変化に周期性があると判断することを特徴とする車載用車線認識装置。

【請求項3】

請求項１に記載の車載用車線認識装置において、
前記周期性解析部は、前記周波数波形における現在のピーク周波数と、過去のピーク周波数の平均値との差が所定範囲内である場合に、前記特徴点の数の変化に周期性があると判断することを特徴とする車載用車線認識装置。

【請求項4】

請求項１に記載の車載用車線認識装置において、
前記周期性解析部は、前記周波数波形におけるピーク周波数が前記車両の走行速度に応じた許容範囲内である場合に、前記特徴点の数の変化に周期性があると判断することを特徴とする車載用車線認識装置。

【請求項5】

請求項１乃至４のいずれか一項に記載の車載用車線認識装置において、
前記特徴点抽出部は、前記車線区画線検出部により前記車線区画線が破線として検出された場合に、前記車線区画線の破線間に対する前記特徴点の抽出の輝度差の閾値を上げることを特徴とする車載用車線認識装置。

【請求項6】

請求項１乃至４のいずれか一項に記載の車載用車線認識装置において、
前記特徴点抽出部により抽出された特徴点の数に基づいて、前記車線区画線の検出結果に対する信頼度を算出する信頼度算出部と、
前記車両が前記走行車線から逸脱しそうなときに逸脱走行状態を検出する車線逸脱検出部と、
前記信頼度が所定値以上であり、かつ前記車線逸脱検出部により前記逸脱走行状態が検出されたときに、警報を出力する警報出力部とをさらに備え、
前記信頼度算出部は、前記車線区画線検出部により前記車線区画線が破線として検出された場合に、前記車線区画線の破線間に対する前記信頼度の低下を抑制することを特徴とする車載用車線認識装置。

【請求項7】

請求項１乃至４のいずれか一項に記載の車載用車線認識装置において、
前記特徴点抽出部は、前記車線区画線検出部により前記車線区画線が破線として検出された場合に、前記車線区画線の破線間に対する前記特徴点の抽出の処理領域を小さくすることを特徴とする車載用車線認識装置。

【請求項8】

請求項１乃至４のいずれか一項に記載の車載用車線認識装置において、
前記特徴点抽出部は、前記車線区画線検出部により前記車線区画線が破線として検出された場合に、周期性に基づいて車線区画線の長さを推定し、推定した長さに近い車線区画線を優先的に検出することを特徴とする車載用車線認識装置。

【請求項9】

請求項６に記載の車載用車線認識装置において、
前記車線区画線検出部により前記車線区画線が破線として検出された場合で、且つ、前記特徴点抽出部から所定周期以上の間、所定数以上の特徴点が抽出されなかった場合に、破線が途切れたことを判定し、前記信頼度をリセットもしくは低減することを特徴とする車載用車線認識装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、車両に搭載され、車両が走行している車線を認識する装置に関する。

【背景技術】

【0002】

従来、車両に搭載され、カメラにより撮影して得られた画像から、車線を区分するために路面に描かれた白線（車線区画線）を検出することにより、車両が走行している車線を認識する装置が提案されている。このような装置に関して、撮影画像から白線に相当するエッジ点を抽出し、このエッジ点の計測数の時系列的な分散値が閾値以下であるか否かにより、白線が実線であるか破線であるかを判定する技術が知られている（特許文献１）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１０−２４４３８２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

白線が実線であっても、たとえば白線が所々で部分的に薄くなっている場合や、白線が途中で途切れている場合などにおいては、抽出されるエッジ点の数が一定とはならない。このような場合、特許文献１に記載の技術では、白線が実線であるにも関わらず破線であると誤判定されてしまうことがある。また、たとえば撮影画像が全体的に暗くコントラストが低いため、エッジ点の抽出が困難な場合などにおいては、路面の微妙なコントラスト変化等によるノイズがエッジ点として抽出されてしまうことがある。このような場合、特許文献１に記載の技術では、実際には存在しない破線の白線が誤検出されてしまうことがある。このように従来の技術では、路面に破線で描かれた車線区画線を正しく検出することができない。

【課題を解決するための手段】

【0005】

本発明による車載用車線認識装置は、車両の周囲の路面を撮影して撮影画像を取得する撮影装置と、撮影装置により時系列的に取得された複数の撮影画像から、路面上で車両の走行車線の左右いずれか少なくとも一方に描かれた車線区画線に対応する複数の特徴点をそれぞれ抽出する特徴点抽出部と、特徴点抽出部により各撮影画像から抽出された特徴点の数の周期性を解析し、特徴点の数の変化に周期性があるか否かを判断する周期性解析部と、周期性解析部により特徴点の数の変化に周期性があると判断された場合、車線区画線を破線として検出する車線区画線検出部とを備え、周期性解析部は、検出された車線区画線上の特徴点の数の変化を周波数軸上で表した周波数波形に基づいて、特徴点の数の周期性を解析する。

【発明の効果】

【0006】

本発明によれば、路面に破線で描かれた車線区画線を正しく検出することができる。

【図面の簡単な説明】

【0007】

【図1】本発明の一実施形態による車載用車線認識装置の構成を示すブロック図である。

【図2】カメラの撮影領域を示す図である。

【図3】カメラの取り付け位置の例を示す図である。

【図4】車線区画線の種別判断に関する制御ブロック図である。

【図5】車線区画線の種別判断で実行される処理のフローチャートである。

【図6】撮影画像から特徴点を抽出する例を示す図である。

【図7】特徴点数の周波数波形から周期性の有無を判断する方法の説明図である。

【図8】破線が途切れたすぐ後に、白線の誤検知要因があった場合の説明図である。

【発明を実施するための形態】

【0008】

図１は、本発明の一実施形態による車載用車線認識装置１００の構成を示すブロック図である。図１に示す車載用車線認識装置１００は、車両に搭載されて使用されるものであり、取り付けられたカメラ１と、制御部２と、警報出力部３と、動作状態報知部４と、を備える。

【0009】

カメラ１は、車両の後方に向けて設置されており、車両後方の路面を含む撮影領域内の画像を所定の時間間隔ごとに撮影する。このカメラ１には、たとえばＣＣＤやＣＭＯＳなどの撮像素子が用いられる。カメラ１により取得された撮影画像は、カメラ１から制御部２へ出力される。

【0010】

図２は、カメラ１の撮影領域を示す図であり、カメラ１を横方向から見た様子を示している。カメラ１は、この撮影領域において、車両後方の路面を含む画像を撮影する。ここで、カメラ１の撮影領域（画角）は、車両後方の路面を左右方向について十分に広い範囲で撮影できるように比較的広く設定されている。

【0011】

図３は、カメラ１の取り付け位置の例を示す図である。自車両の後方部分において、車体２０にはナンバープレート２１が設置されている。このナンバープレート２１の直上の位置に、斜め下に向けてカメラ１が取り付けられている。なお、ここで示した取り付け位置はあくまで一例であるため、他の位置にカメラ１を取り付けてもよい。車両後方の路面を適切な範囲で撮影可能な限り、カメラ１の取り付け位置をどのように定めてもよい。

【0012】

制御部２は、カメラ１からの撮影画像を用いて所定の画像処理を行い、その処理結果に応じた各種制御を行う。この制御部２が行う制御により、車載用車線認識装置１００において、たとえば、ＬＤＷ（Lane Departure Warning）、と呼ばれる機能が実現される。ＬＤＷは、撮影画像から路面の白線（車線区画線）を検出することにより、自車両が走行中の車線から逸脱しそうなときに警報を出力する機能である。

【0013】

警報出力部３は、警報ランプや警報ブザー等による警報を車両の運転者に対して出力するための部分である。この警報出力部３の動作は、制御部２によって制御される。たとえば、前述のＬＤＷにおいて自車両が走行中の車線から逸脱しそうと判断された場合や、ＢＳＷにおいて自車両と衝突する可能性のある車両が検出された場合に、制御部２の制御に応じて警報出力部３から警報が出力される。

【0014】

動作状態報知部４は、車載用車線認識装置１００の動作状態を車両の運転者に報知するための部分である。たとえば、所定の動作条件が満たされておらずに車載用車線認識装置１００が非動作状態にある場合、制御部２の制御により、動作状態報知部４として車両の運転席付近に設置されたランプを点灯させる。これにより、車載用車線認識装置１００が非動作状態であることを運転者に報知する。

【0015】

次に、車載用車線認識装置１００において行われる車線区画線の種別判断について説明する。車載用車線認識装置１００は、前述のＬＤＷにおいて撮影画像から路面の白線（車線区画線）を検出する際に、その車線区画線が破線と実線のどちらであるかを判断し、その判断結果に応じた制御を行う。たとえば、車線区画線が破線であると判断した場合は、その破線間に対する車線区画線の検出を抑制したり、破線間で自車両が走行車線から逸脱しそうな状態にあるときでも確実に警報を出力できるようにしたりする。これにより、実線に比べて検出が困難な破線を用いた車線区画線が路面に描かれている場合であっても、ＬＤＷを安定して利用できるようにする。

【0016】

なお、上記の判断において用いられる白線（車線区画線）とは、車線を区分するために路面に描かれた標示線であり、道路車線境界線、車道中央線、車道外側線等が該当する。これは白色に限らず、黄色等の他の色で描かれる場合もある。また、道路上に円形や他の形状の道路鋲（ボッツドッツ）を所定間隔で設置したものが車線区画線として用いられる場合もある。以下の説明では、これらをまとめて車線区画線と総称する。

【0017】

図４は、車線区画線の種別判断に関する制御部２の制御ブロック図である。制御部２は、車線区画線の種別判断に関して、特徴点抽出部２０１、車線区画線検出部２０２、周期性解析部２０３、信頼度算出部２０４、車線逸脱検出部２０５および警報制御部２０６の各制御ブロックを有する。制御部２では、たとえば、これらの各制御ブロックに対応してメモリに記録されているプログラムをマイクロコンピュータで実行することにより、図４の各制御ブロックを実現している。

【0018】

特徴点抽出部２０１は、カメラ１により時系列的に取得された複数の撮影画像から、路面上で自車両の走行車線の左右に描かれた車線区画線に対応する特徴点をそれぞれ抽出する。車線区画線検出部２０２は、特徴点抽出部２０１により各撮影画像から抽出された特徴点が、多く並ぶ直線を車線区画線の候補として検出し、その車線区画線が破線と実線のどちらであるかを判断する。具体的には、特徴点が線上に並ぶ直線の中から左右車線区画線の平行性や、時系列の横位置の変化、特徴点の数などから最終的な線を選択する。周期性解析部２０３は、その最終的に選択された線上に並ぶ特徴点の数の周期性を解析する。信頼度算出部２０４は、車線区画線検出部２０２による車線区画線の検出結果に対して、特徴点抽出部２０１により抽出された特徴点の数、及び周期性解析部２０３により解析された周期性の有無に基づく信頼度を算出する。

【0019】

周期性解析に渡す結果は、ノイズ要因を削除した後のデータであった方が望ましく、例えば、レンズに汚れが付着し、常に同一の場所で白線特徴点が存在するような場合には、このような既知のノイズ成分は除去したうえで、白線候補を選択し、その白線候補上のノイズ成分は除去した上で特徴点の数を調べ、これを周期性解析にかけることで、周期解析の安定化を図る。

【0020】

車線逸脱検出部２０５は、車線区画線検出部２０２により検出された車線区画線を基に自車両の走行車線を認識し、この走行車線から自車両が逸脱しそうであるか否かを判断することにより、自車両の逸脱走行状態を検出する。自車両の逸脱走行状態を検出したら、警報制御部２０６に対して警報出力の指示を行う。警報制御部２０６は、車線逸脱検出部２０５からの指示に応じて、警報出力部３へ警報出力信号を出力する。この警報出力信号の出力により、警報出力部３から運転者に対して警報が出力される。以上説明したような車線逸脱検出部２０５および警報制御部２０６の動作により、車載用車線認識装置１００においてＬＤＷが実現される。

【0021】

なお、警報制御部２０６は、車線逸脱検出部２０５から警報出力の指示が行われると、信頼度算出部２０４により算出された信頼度に基づいて、警報出力信号を出力すべきか否かを判断する。そして、警報出力信号を出力すべきではないと判断した場合は、警報出力部３に対して警報出力信号を出力しないようにする。その結果、車線逸脱検出部２０５から警報出力の指示が行われても、警報制御部２０６から警報出力部３に警報出力信号は出力されない。これにより、車線区画線の検出結果に対する信頼度が十分でないときには、警報出力部３による警報出力が抑制されるようにする。

【0022】

図５は、以上説明した車線区画線の種別判断で実行される処理のフローチャートである。このフローチャートに示す処理は、ＬＤＷの実行中に、制御部２において行われる。

【0023】

ステップＳ１０において、制御部２は、カメラ１を用いて、自車両の周囲の路面を含む所定の撮影領域内を撮影し、撮影画像を取得する。この撮影画像は、カメラ１から制御部２へ出力され、以降の処理において利用される。

【0024】

ステップＳ２０において、制御部２は、ステップＳ１０で取得した撮影画像から、車線区画線に対応する特徴点を抽出する。ここでは、特徴点抽出部２０１により、撮影画像内の所定部分に抽出領域を設定し、その抽出領域内で輝度変化が所定のしきい値以上であるエッジ点を特徴点として抽出する。

【0025】

図６は、撮影画像から特徴点を抽出する例を示す図である。図６に示す撮影画像３０は、路面が撮影されている路面画像領域３２と、背景画像領域３３とに分けられている。ステップＳ２０では、この撮影画像３０に対して、図６に示すように、自車両の右側の車線区画線の内側に対応する抽出領域３４と、自車両の左側の車線区画線の内側に対応する抽出領域３５とを設定する。そして、これらの抽出領域３４、３５の中で隣接する各画素の輝度をそれぞれ比較することでエッジ点を検出し、特徴点３６として抽出する。これにより、左右の車線区画線の内側の輪郭線に沿って、特徴点３６がそれぞれ複数ずつ抽出される。

【0026】

ステップＳ３０において、制御部２は、車線区画線検出部２０２により、ステップＳ２０で抽出した特徴点に基づいて車線区画線を検出する。たとえば、左右の抽出領域３４、３５からそれぞれ抽出された各特徴点の配列状態に応じて、左右に複数の直線をそれぞれ設定し、その中で最も多くの特徴点を通る直線を左右それぞれ１つずつ特定する。こうして特定した左右一対の直線をそれぞれ車線区画線として認識することで、自車両の走行車線の左右に車線区画線を検出することができる。なお、これ以外の方法により、特徴点から車線区画線を検出してもよい。

【0027】

以上説明したステップＳ２０およびステップＳ３０の処理を実行することで、カメラ１により取得された撮影画像から、路面上で自車両の走行車線の左右に描かれた車線区画線をそれぞれ検出することができる。なお、走行車線の左側または右側のいずれか一方のみに車線区画線が描かれている場合、車線区画線が描かれていない側については特徴点が抽出されないため、車線区画線は検出されない。

【0028】

ステップＳ４０において、制御部２は、ステップＳ２０で抽出した特徴点数のデータを用いて、不図示のメモリ等に記録されている特徴点数の履歴データを更新する。ここで更新される特徴点数の履歴データには、カメラ１により時系列的に取得された各撮影画像の特徴点数のデータが、左右の車線区画線についてそれぞれ記録されている。これにより、撮影画像から特徴点が抽出される度に、その特徴点数のデータが新たに記録され、特徴点数の履歴データが更新される。

【0029】

ステップＳ５０において、制御部２は、所定数以上の撮影画像から特徴点を抽出したか否かを判定する。所定数以上の撮影画像から特徴点を抽出した場合、すなわち、図５の処理を開始してからの撮影画像の取得枚数が所定数以上であり、その各撮影画像からそれぞれ抽出された特徴点数の履歴データが記録されている場合は、ステップＳ６０へ進む。一方、所定数以上の撮影画像から特徴点を抽出していない場合、すなわち、図５の処理を開始してからの撮影画像の取得枚数が所定数未満である場合は、ステップＳ１０へ戻る。この場合、所定数以上の撮影画像から特徴点を抽出し終えるまで、前述のステップＳ１０〜Ｓ４０の処理が繰り返される。これにより、カメラ１で時系列的に取得された複数の撮影画像から車線区画線に対応する複数の特徴点がそれぞれ抽出され、その特徴点数の履歴デーが記録される。

【0030】

ステップＳ６０において、制御部２は、周期性解析部２０３により、これまでに記録された特徴点数の履歴データに対して高速フーリエ変換を行う。この高速フーリエ変換により、左右の車線区画線の各々について、特徴点数の時系列データとして時間軸上で表されている特徴点数の変化の様子を、周波数軸上で表した周波数波形にそれぞれ変換することができる。なお、高速フーリエ変換は、周知のアルゴリズム等を用いた処理により実行することができる。

【0031】

ステップＳ７０において、制御部２は、周期性解析部２０３により、ステップＳ６０で下記の高速フーリエ変換を行うことで元の時系列データから変換された特徴点数の周波数波形に基づいて、特徴点数の周期性を解析する。

【0032】

【数1】

直線上の白線特徴点数の過去データ保持フレーム最大数：N
直線上の白線特徴点数の過去データ：x(n) (n=0,1,2,...,N-1)
離散フーリエ変換：X(k) (k=0,1,2,...,N-1)

【0033】

ここでは、以下に説明するような方法を用いて特徴点数の周波数波形から周期性の有無を判断することで、撮影画像から抽出された特徴点数の変化に対して周期性の解析を行う。

【0034】

図７は、特徴点数の周波数波形から周期性の有無を判断する方法の説明図である。周期性解析部２０３は、図７（ａ）、（ｂ）、（ｃ）にそれぞれ示すような３種類の判断方法を用いて、特徴点数の変化に対する周期性の有無を判断することができる。

【0035】

図７（ａ）は、特徴点数の周波数波形における２つのピーク周波数同士を比較することで周期性の有無を判断する方法の説明図である。たとえば図７（ａ）に示すように、特徴点数の周波数波形において、ピーク周波数ｆ１を中心とするピークＰ１と、ピーク周波数ｆ２を中心とするピークＰ２とが存在したとする。この場合、周期性解析部２０３は、ピーク周波数ｆ１を２倍した値とピーク周波数ｆ２とを比較することで、周期性の有無を判断することができる。すなわち、ピーク周波数ｆ１を２倍した値とピーク周波数ｆ２とが略一致する場合、ピークＰ２はピークＰ１の高調波成分に相当するものであり、これらは同一の周期性を示すものであると判断できる。したがって、このような条件を満たす場合は、特徴点数の変化に周期性があると判断することができる。

【0036】

図７（ｂ）は、特徴点数の周波数波形におけるピーク周波数を過去のピーク周波数と比較することで周期性の有無を判断する方法の説明図である。たとえば図７（ｂ）に示すように、特徴点数の周波数波形において、ピーク周波数ｆ１を中心とするピークＰ１が存在したとする。この場合、周期性解析部２０３は、現在のピーク周波数ｆ１と、不図示のメモリ等に記憶された過去のピーク周波数の平均値ｆ１ａとを比較することで、周期性の有無を判断することができる。すなわち、過去に実行されたステップＳ７０の処理において特徴点数の周期性を解析する際に得られたピーク周波数の平均値ｆ１ａと、現在のピーク周波数ｆ１との差が所定範囲内である場合、現在のピークＰ１に相当するピークが過去にも存在していたと判断できる。したがって、このような条件を満たす場合は、特徴点数の変化に周期性があると判断することができる。

【0037】

図７（ｃ）は、特徴点数の周波数波形におけるピーク周波数が許容範囲内にあるか否かにより周期性の有無を判断する方法の説明図である。たとえば図７（ｃ）に示すように、特徴点数の周波数波形において、ピーク周波数ｆ１を中心とするピークＰ１が存在したとする。この場合、周期性解析部２０３は、ピーク周波数ｆ１が自車両の走行速度に応じて決定される許容範囲Ｆｒ内にあるか否かにより、周期性の有無を判断することができる。すなわち、自車両の走行速度や、一定間隔で路面に描かれた車線区画線の破線間の距離に基づいて許容範囲Ｆｒを算出し、ピーク周波数ｆ１がこの許容範囲Ｆｒ内である場合、ピークＰ１は車線区画線の破線の周期性を表すものであると判断できる。したがって、このような条件を満たす場合は、特徴点数の変化に周期性があると判断することができる。たとえば、自車両の走行速度と、道路交通法等の規則で規定されている車線区画線の破線間の距離とを用いて、許容範囲Ｆｒを算出することができる。

【0038】

ステップＳ７０では、以上説明したような方法により、左右の車線区画線について特徴点数の周期性をそれぞれ解析し、特徴点数の変化に周期性があるか否かを判断することができる。なお、上記の３種類の判断方法は、いずれかを単独で使用してもよいし、複数のものを任意に組み合わせて使用することもできる。

【0039】

ステップＳ８０において、制御部２は、ステップＳ７０の解析結果を基に判定を行う。すなわち、ステップＳ７０で特徴点数の変化に周期性があると判断した場合は、ステップＳ８０を肯定判定してステップＳ１００へ進み、周期性がないと判断した場合は、ステップＳ８０を否定判定してステップＳ９０へ進む。この判定は、左右の車線区画線について別々に行うことが好ましい。

【0040】

ステップＳ９０において、制御部２は、周期性解析部２０３により、ステップＳ３０で検出した車線区画線が所定の実線条件を満たすか否かを判定する。たとえば、ステップＳ２０で抽出した特徴点が撮影画像内で連続して一列に並んでいる場合や、これまでに記録された特徴点数の履歴データが所定値以上で安定している場合は、車線区画線が実線であると判定してステップＳ１１０へ進む。一方、これらの実線条件を満たさない場合は、車線区画線が実線ではないと判定する。この場合はステップＳ１０へ戻り、撮影画像の取得を継続する。

【0041】

ステップＳ１００において、制御部２は、車線区画線検出部２０２により、ステップＳ３０で検出した車線区画線を破線と判断する。

【0042】

ステップＳ１１０において、制御部２は、車線区画線検出部２０２により、ステップＳ３０で検出した車線区画線を実線と判断する。

【0043】

車線区画線検出部２０２は、前述のステップＳ３０の処理を実行した後に、周期性解析部２０３による特徴点数の解析結果に基づいてステップＳ１００またはＳ１１０の処理を実行することで、自車両の走行車線の左右にある車線区画線を実線または破線としてそれぞれ検出することができる。なお、車線区画線がボッツドッツである場合、その設置間隔が一定であれば、ステップＳ８０で周期性ありと判定された後にステップＳ１００が実行されて破線と判断される。ステップＳ１００またはＳ１１０を実行したら、制御部２はステップＳ１２０へ進む。

【0044】

ステップＳ１２０において、制御部２は、リセットを実行するか否かを判定する。この判定は、所定のリセット条件が満たされたか否かにより行われる。たとえば、自車両が急停車、急発進、急操舵等を行った場合などに、リセット条件が満たされたとしてリセットを実行すると判定することができる。こうしてリセットを実行すると判定した場合はステップＳ１３０へ進み、そうでない場合はステップＳ１４０へ進む。

【0045】

ステップＳ１３０において、制御部２は、これまでに記録された特徴点数の履歴データをクリアすることにより、リセットを実行する。ステップＳ１３０を実行したらステップＳ１０へ戻り、撮影画像の取得を最初からやり直す。

【0046】

ステップＳ１４０において、制御部２は、信頼度算出部２０４により、ステップＳ１００またはＳ１１０で行われた車線区画線の検出結果に対する信頼度を算出する。ここでは、ステップＳ２０で抽出した特徴点の数に基づいて、車線区画線の検出結果に対する信頼度を算出する。たとえば、左右の車線区画線についてそれぞれ抽出された特徴点の数に所定の変換係数を掛けることで、左右の車線区画線に対して、その特徴点の数に応じた信頼度を０％〜１００％の間でそれぞれ算出することができる。また、ステップＳ１１０で車線区画線が実線として検出された場合は、信頼度を常に１００％としてもよい。

【0047】

また、Ｓ８０において周期性有と判断されたにも関わらず、所定周期以上の間、特徴点の数が一定以上もしくは、周期性有と判断された時の保存されている過去の特徴点から現在の特徴点の平均以上、の特徴点が抽出されない場合、破線が途切れたことを判定し、信頼度を０リセットすることで、誤警報を抑制する。

【0048】

ある程度長い間、安定して白線を検知していた場合には、ある程度の信頼性があると考え、多少白線が見えない状況が続いても簡単に認識状況をリセットし、不警報にすることが難しい。強制的に認識状態リセットや不警報とすると、破線がかすれている場合や、ボッツドッツ、暗夜など、レーンマークが見えづらい状況では、すぐに不警報となりやすい。このため、破線がかすれている場合や、ボッツドッツ、暗夜時には、認識が途切れたとしても一瞬で不警報にすることは難しい。しかしながら、これまで安定的に見えていた周期的な白線が突然途切れるような場合は、きれいな道路で周期的に白線が見えていたにも関わらず、突然周期的な破線が途切れるということは実際に、破線がなくなった可能性が高いと考えることができる。きれいな道路が急に汚い道路に変化することは非常にまれであり、更にある一定周期に特徴点が入ってこない条件を満たす場合には信頼度を低下もしくは０リセットすることで誤警報を抑制する。これは、図８に示すように、料金所前や工事中、分岐などで破線が途切れたすぐ後に、路面ペイントなどの白線の誤検知要因があった場合などの、誤警報抑制に効果がある。周期的破線が途切れた直後に処理領域内に、路面ペイント、矢印などが入ってくると誤検知の恐れがある。しかも、これまで周期的な破線を観測していたために、ある程度の信頼性が高い状態を維持したままで、誤検知すると誤警報につながる。 周期解析を利用することで、路面状況が良好であることを判定し、良好であるにもかかわらず、急に白線特徴点がなくなったことを利用して、破線が途切れたことを判定し、リセットすることで、上記料金所手前や、分岐、合流などにおける誤警報を抑制する。

【0049】

なお、ステップＳ１００で車線区画線が破線として検出された場合、信頼度算出部２０４は、その車線区画線の破線間で算出される信頼度の低下を抑制することが好ましい。たとえば、ステップＳ７０の周期性の解析結果を基に、撮影領域内で破線が途切れるタイミングを予測し、このタイミングで取得された撮影画像に対して算出される信頼度に所定の補正係数を掛けることにより、信頼度を向上させるようにする。あるいは、信頼度の下限値を予め定めておき、破線間で算出された信頼度がこの下限値未満である場合は、算出結果に関わらず信頼度を下限値としてもよい。これ以外にも、車線区画線の破線間に対する信頼度の低下を抑制することができれば、どのような方法を用いてもよい。

【0050】

ステップＳ１５０において、制御部２は、車線逸脱検出部２０５による車線逸脱判定を行う。ここでは、ステップＳ３０で検出した左右の車線区画線の撮影画像内での位置に基づいて、自車両と走行車線との間の位置関係を認識し、その認識結果から自車両が走行車線を逸脱しそうであるか否かを判断する。たとえば、撮影画像中での車線区画線の位置を基に、カメラ１から車線区画線までの距離を求め、この距離を自車両の前輪から車線区画線までの距離に換算する。こうして求めた前輪から車線区画線までの距離が所定値未満であれば、走行車線から自車両が逸脱しそうな状態であると判断し、その状態を逸脱走行状態として検出する。

【0051】

ステップＳ１６０において、制御部２は、ステップＳ１５０の車線逸脱判定によって逸脱走行状態が検出されたか否かを判定する。逸脱走行状態が検出された場合はステップＳ１７０へ進み、検出されなかった場合はステップＳ１０へ戻って撮影画像の取得を継続する。

【0052】

ステップＳ１７０において、制御部２は、警報制御部２０６により、ステップＳ１４０で算出した信頼度が所定値以上であるか否かを判定する。信頼度が所定値以上である場合は、警報出力信号を出力すべきと判断してステップＳ１８０へ進む。一方、信頼度が所定値未満である場合は、警報出力信号を出力すべきではないと判断し、ステップＳ１０へ戻って撮影画像の取得を継続する。

【0053】

ステップＳ１８０において、制御部２は、警報制御部２０６により、警報出力部３に対して警報の出力を指示する。このとき警報制御部２０６は、警報出力部３へ所定の警報出力信号を出力することで警報の出力指示を行う。この警報出力信号に応じて警報出力部３から警報が出力されることにより、自車両が走行車線から逸脱しそうな逸脱走行状態であることが運転者に報知される。ステップＳ１８０を実行したらステップＳ１０へ戻り、撮影画像の取得を継続する。

【0054】

なお、以上説明した図５のフローチャートにおいて、ステップＳ１００で車線区画線が破線と判断された後にステップＳ１０へ戻った場合、その後に実行されるステップＳ２０で撮影画像から特徴点を抽出する際に、車線区画線の破線間に対しては抽出を抑制して行うことが好ましい。たとえば、前回のステップＳ７０の解析結果を基に、撮影画像中で破線間が途切れる範囲を推定し、その範囲に対しては抽出領域を設定しないようにしたり、処理領域の幅自体を狭く設定し、大きな横位置の変化は認めないような処理領域とすることで、大きく横位置がずれるような誤検知を抑制する。また、誤検知したとしても、次の周期は破線が現れた場合に、破線側に戻れるような設定とする。

【0055】

もしくは、破線が途切れる間では、エッジ点の検出に用いる輝度変化のしきい値を高くしたりする。これ以外にも、特徴点の抽出を抑制することができれば、どのような方法を用いてもよい。このようにすることで、車線区画線の破線間において、車線区画線が存在しないにも関わらず特徴点が誤って抽出されるのを未然に防止できる。

【0056】

また、車線区画線を検出する際に、破線の周期を利用し、現フレームで撮像するであろう線の長さを予測して、候補線の中から対象となる直線を抽出することで、破線がない間隔では誤検知を抑制し、破線が見える間では安定的に車線を選択し易いようにする。破線と実線の境界など線の種類が変化する際には、実線が入ってくる瞬間に、特徴点の数が圧倒的に多い線が候補線として上がるためにすぐに実線を選択する。

【0057】

以上説明した実施の形態によれば、次のような作用効果を奏する。

【0058】

（１）車載用車線認識装置１００は、特徴点抽出部２０１により、カメラ１により時系列的に取得された複数の撮影画像から、車両の周囲の路面上で車両の走行車線の左右いずれか少なくとも一方に描かれた車線区画線に対応する複数の特徴点をそれぞれ抽出する（ステップＳ２０）。そして、周期性解析部２０３により、各撮影画像から抽出された特徴点の数の周期性を解析し、特徴点の数の変化に周期性があるか否かを判断する（ステップＳ７０）。その結果、特徴点の数の変化に周期性があると判断された場合、車線区画線検出部２０２により、車線区画線を破線として検出する（ステップＳ３０、Ｓ１００）。このようにしたので、路面に破線で描かれた車線区画線を正しく検出することができる。

【0059】

（２）ステップＳ７０において、周期性解析部２０３は、検出された車線区画線上の特徴点の数の変化を周波数軸上で表した周波数波形に基づいて、特徴点の数の周期性を解析する。このようにしたので、特徴点の数の変化に周期性があるか否かを正確に判断することができる。

【0060】

（３）周期性解析部２０３は、図７（ａ）に示すように、周波数波形におけるピーク周波数ｆ１を２倍した値と、周波数波形におけるピーク周波数ｆ２とが略一致する場合に、特徴点の数の変化に周期性があると判断してよい。これにより、周波数波形の高調波成分を利用して、特徴点の数の変化に周期性があるか否かを容易に判断することができる。

【0061】

（４）また、図７（ｂ）に示すように、周波数波形における現在のピーク周波数ｆ１と、過去のピーク周波数の平均値ｆ１ａとの差が所定範囲内である場合に、特徴点の数の変化に周期性があると判断してもよい。これにより、過去のピーク周波数の平均値を利用して、特徴点の数の変化に周期性があるか否かを容易に判断することができる。

【0062】

（５）さらに、図７（ｃ）に示すように、周波数波形におけるピーク周波数ｆ１が車両の走行速度に応じた許容範囲Ｆｒ内である場合に、特徴点の数の変化に周期性があると判断してもよい。これにより、車両の走行速度を利用して、特徴点の数の変化に周期性があるか否かを容易に判断することができる。

【0063】

（６）ステップＳ２０において、特徴点抽出部２０１は、前回の処理で車線区画線検出部２０２により車線区画線が破線として検出された場合に、車線区画線の破線間に対する特徴点の輝度差の閾値を上げることで、特徴点の誤抽出を抑制することができる。このようにすれば、車線区画線の破線間において、車線区画線が存在しないにも関わらず特徴点が誤って抽出されるのを未然に防止し、誤警報を防ぐことができる。

【0064】

（７）車載用車線認識装置１００は、信頼度算出部２０４により、ステップＳ２０で抽出された特徴点の数に基づいて、車線区画線の検出結果に対する信頼度を算出する（ステップＳ１４０）。また、車線逸脱検出部２０５により、車両が走行車線から逸脱しそうなときに逸脱走行状態を検出する（ステップＳ１５０）。その結果、ステップＳ１４０で算出された信頼度が所定値以上であり、かつステップＳ１５０で逸脱走行状態が検出されたときに、警報出力部３から警報を出力する（ステップＳ１８０）。さらに、ステップＳ１４０で信頼度を算出する際には、ステップＳ１００で車線区画線が破線として検出された場合に、その車線区画線の破線間に対する信頼度の低下を抑制することができる。このようにすれば、車線区画線の破線間において、信頼度の低下により警報が出力されなくなるのを防止することができる。そのため、誤警報を抑えつつ、車両が走行車線から逸脱しそうなときには確実に警報を出力することができる。

【0065】

（８）ステップＳ２０において、特徴点抽出部２０１は、前回の処理で車線区画線検出部２０２により車線区画線が破線として検出された場合に、車線区画線の破線間に対する特徴点の抽出の処理領域を小さくすることで、特徴点の誤抽出を抑制することができる。このようにすれば、車線区画線の破線間において、車線区画線が存在しないにも関わらず特徴点が誤って抽出されるのを未然に防止し、誤警報を防ぐことができる。

【0066】

（９）ステップＳ２０において、特徴点抽出部２０１は、前回の処理で車線区画線検出部２０２により車線区画線が破線として検出された場合に、その周期性に基づいて車線区画線の長さを推定し、推定した長さに近い車線区画線を優先的に検出することができる。このようにすれば、車線区画線の破線間において、車線区画線が存在しないにも関わらず特徴点が誤って抽出されるのを未然に防止し、誤警報を防ぐことができる。

【0067】

（１０）Ｓ８０において周期性有と判断された場合に、所定周期以上の間、前記特徴点抽出部２０１において所定数以上の特徴点が抽出されなかった場合に破線が途切れたことを判定し、信頼度を０リセット、もしくは低減することで、料金所手前や分岐、合流などにおける破線の途切れを判定し信頼度を制御することで誤警報を抑制することができる。

【0068】

なお、以上説明した実施の形態では、カメラ１が車両の後方の路面を撮影するようにしたが、車両の前方の路面を撮影してもよい。車両の周囲の路面を撮影できる限り、カメラ１の撮影範囲をどのように設定しても構わない。

【0069】

また、上記実施の形態において、ステップＳ７０で求められた特徴点数の周期性を基に車線区画線の検出に対する限界時間を設定してもよい。たとえば、特徴点数が変化する周期の２倍を限界時間として設定することができる。このとき、特徴点が抽出されずに車線区画線を検出できない状態が設定した限界時間を超えて続いた場合は、たとえばステップＳ１３０の処理によるリセットを実行して特徴点数の履歴データをクリアしたり、警報出力部３による警報の出力を抑制したりすることが好ましい。

【0070】

以上説明した実施の形態や各種の変形例はあくまで一例であり、発明の特徴が損なわれない限り、本発明はこれらの内容に限定されるものではない。

【符号の説明】

【0071】

１ カメラ
２ 制御部
３ 警報出力部
４ 動作状態報知部
１００ 車載用車線認識装置
２０１ 特徴点抽出部
２０２ 車線区画線検出部
２０３ 周期性解析部
２０４ 信頼度算出部
２０５ 車線逸脱検出部
２０６ 警報制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】