特許 6872260 自動車の車線変更に対する危険を警報する方法及びこれを利用した警報装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6872260

(24)【登録日】2021年4月21日

(45)【発行日】2021年5月19日

(54)【発明の名称】自動車の車線変更に対する危険を警報する方法及びこれを利用した警報装置

(51)【国際特許分類】

   G08G 1/16 20060101AFI20210510BHJP

   H04N 7/18 20060101ALI20210510BHJP

   G06T 7/62 20170101ALI20210510BHJP

   G06T 7/00 20170101ALI20210510BHJP

【ＦＩ】

   G08G1/16 C

   H04N7/18 J

   G06T7/62

   G06T7/00 650A

【請求項の数】18

【全頁数】19

(21)【出願番号】特願2019-183127(P2019-183127)

(22)【出願日】2019年10月3日

(65)【公開番号】特開2020-77393(P2020-77393A)

(43)【公開日】2020年5月21日

【審査請求日】2019年10月3日

(31)【優先権主張番号】16/151,760

(32)【優先日】2018年10月4日

(33)【優先権主張国】US

(73)【特許権者】

【識別番号】517038176

【氏名又は名称】株式会社ストラドビジョン

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100091214

【弁理士】

【氏名又は名称】大貫 進介

(72)【発明者】

【氏名】金 桂賢

(72)【発明者】

【氏名】金 鎔重

(72)【発明者】

【氏名】金 寅洙

(72)【発明者】

【氏名】金 鶴京

(72)【発明者】

【氏名】南 雲鉉

(72)【発明者】

【氏名】夫 碩▲ふん▼

(72)【発明者】

【氏名】成 明哲

(72)【発明者】

【氏名】呂 東勳

(72)【発明者】

【氏名】柳 宇宙

(72)【発明者】

【氏名】張 泰雄

(72)【発明者】

【氏名】鄭 景中

(72)【発明者】

【氏名】諸 泓模

(72)【発明者】

【氏名】趙 浩辰

【審査官】 上野 博史

(56)【参考文献】

【文献】 特開２０００−１４９１９６（ＪＰ，Ａ）

【文献】 国際公開第２０１８／１５３３１９（ＷＯ，Ａ１）

【文献】 特開２００８−０４０７３６（ＪＰ，Ａ）

【文献】 特開２００９−０６４４１０（ＪＰ，Ａ）

【文献】 特開２０００−１８２０２７（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１７／０１３２９３２（ＵＳ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０８Ｇ １／００−９９／００

Ｇ０６Ｔ ７／００−７／９０

Ｈ０４Ｎ ７／１８

(57)【特許請求の範囲】

【請求項1】

自動車の車線変更に対する危険を警報する方法において、
（ａ）運行中の自動車で撮影された少なくとも一つの後方イメージが獲得されると、警報装置が、学習されたＣＮＮを用いて前記後方イメージをセグメンテーションすることにより前記後方イメージに対応されるセグメンテーションイメージを獲得する段階；
（ｂ）前記警報装置が、前記セグメンテーションイメージを参照して、少なくとも一つのブラインドスポットにおいて少なくとも一つのフリースペース比率を確認するものの、前記フリースペース比率は、前記ブラインドスポットにおいて物体が位置しない道路領域の前記ブラインドスポットの全領域に対する比率で決定されることを特徴とする段階；及び
（ｃ）前記フリースペース比率が少なくとも一つの所定の閾値以下である場合、前記警報装置が、前記自動車の運転者に車線変更に対する前記危険を警報する段階；
を含むことを特徴とする方法。

【請求項2】

前記ブラインドスポットは、前記自動車の後方から遠くなる方向へ距離別に設定される第１サブブラインドスポットないし第ｎサブブラインドスポットを含み、
前記フリースペース比率に対する閾値各々である第１閾値ないし第ｎ閾値各々が、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット各々に対して設定され、
前記（ｃ）段階で、
前記警報装置は、第ｋ閾値以下の前記フリースペース比率を有する第ｋサブブラインドスポットと前記自動車との間の距離に対応して前記運転者に異なる警報をすることを特徴とする請求項１に記載の方法。

【請求項3】

（ｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値以下であり、第ｋ−１サブブラインドスポットの前記フリースペース比率が１００％である場合を第１ケースとし、（ｉｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値以下で、第ｋ−１サブブラインドスポットの前記フリースペース比率が第ｋ−１閾値以下である場合を第２ケースとし、（ｉｉｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が１００％で、第ｋ−１サブブラインドスポットの前記フリースペース比率が前記第ｋ−１閾値以下である場合を第３ケースとすれば、前記警報装置は、前記第１ケースに比べて前記第２ケース及び前記第３ケースが、物体が前記自動車により近接していると前記運転者に警報することを特徴とする請求項２に記載の方法。

【請求項4】

前記第ｋサブブラインドスポットの前記フリースペース比率が、前記第ｋ閾値を超過し、前記第ｋ閾値より大きな値に設定された第ｋ’閾値以下の状態で、第ｋ＋１サブブラインドスポットの前記フリースペース比率が第ｋ＋１閾値以下である場合、前記警報装置は、前記第ｋサブブラインドスポットと前記自動車の間の前記距離に対応して前記運転者に異なる警報をすることを特徴とする請求項２に記載の方法。

【請求項5】

前記警報装置は、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット各々の前記フリースペース比率の変化率各々を参照して、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット内での前記物体の移動情報を獲得し、
前記警報装置は、前記物体の前記獲得された移動情報を参照して、前記第ｋサブブラインドスポットと前記自動車との間の距離に対応して前記運転者に警報をすることを特徴とする請求項２に記載の方法。

【請求項6】

第ｋ＋１サブブラインドスポットでの前記フリースペース比率が第ｋ＋１閾値以下の状態から大きくなる方向へと変化し、前記第ｋサブブラインドスポットでの前記フリースペース比率が小さくなる方向に変化した場合、前記警報装置は、前記物体が前記第ｋ＋１サブブラインドスポットから前記第ｋサブブラインドスポットに移動すると判断し、
第ｋ−１サブブラインドスポットでの前記フリースペース比率が第ｋ−１閾値以下の状態から大きくなる方向へと変化し、前記第ｋサブブラインドスポットでの前記フリースペース比率が小さくなる方向に変化した場合、前記警報装置は、前記物体が前記第ｋ−１サブブラインドスポットから前記第ｋサブブラインドスポットに移動するものと判断し、
前記警報装置は、前記第ｋサブブラインドスポットでの前記物体の前記移動方向をさらに参照し、前記第ｋサブブラインドスポットと前記自動車との間の前記距離に対応して、前記運転者に警報をすることを特徴とする請求項５に記載の方法。

【請求項7】

前記警報装置は、前記第ｋサブブラインドスポットでの前記フリースペース比率の変化率を参照して前記物体の速度または加速度を確認し、前記物体の前記速度または前記加速度を参照して前記第ｋサブブラインドスポットと前記自動車との間の前記距離に対応して、前記運転者に警報をすることを特徴とする請求項２に記載の方法。

【請求項8】

前記物体の前記速度または前記加速度を確認した結果、前記物体が前記自動車に接近すると判断された場合、前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値よりも大きな値に設定された第ｋ”閾値以下であれば、前記警報装置は、前記第ｋサブブラインドスポットと前記自動車の間の前記距離に対応して前記運転者に警報をすることを特徴とする請求項７に記載の方法。

【請求項9】

前記（ａ）段階で、
前記警報装置は、前記後方のイメージに対してコンボリューション演算を少なくとも一度適用してダウンサンプリングされた特徴マップとして少なくとも一つの特徴マップを生成し、前記ダウンサンプリングされた特徴マップに対してデコンボリューション演算を少なくとも一度適用し、前記後方イメージ内の前記道路領域と前記物体をセグメンテーションすることを特徴とする請求項１に記載の方法。

【請求項10】

自動車の車線変更に対する危険を警報する警報装置において、
運行中の自動車で撮影された少なくとも一つの後方映像イメージを獲得する通信部；及び
（Ｉ）学習されたＣＮＮを用いて後方イメージをセグメンテーションすることにより前記後方イメージに対応されるセグメンテーションイメージを獲得するプロセスと、（ＩＩ）前記セグメンテーションイメージを参照して、少なくとも一つのブラインドスポットにおいて少なくとも一つのフリースペース比率を確認するものの、前記フリースペース比率は、前記ブラインドスポットにおいて物体が位置しない道路領域の前記ブラインドスポットの全領域に対する比率で決定されることを特徴とするプロセス及び、（ＩＩＩ）前記フリースペース比率が少なくとも一つの所定の閾値以下である場合、前記警報装置が、前記自動車の運転者に車線変更に対する前記危険を警報するプロセスを遂行するプロセッサ；
を含むことを特徴とする警報装置。

【請求項11】

前記ブラインドスポットは、前記自動車の後方から遠くなる方向へ距離別に設定される第１サブブラインドスポットないし第ｎサブブラインドスポットを含み、
前記フリースペース比率に対する閾値各々である第１閾値ないし第ｎ閾値各々が、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット各々に対して設定され、
前記（ＩＩＩ）プロセスで、
前記プロセッサが、第ｋ閾値以下の前記フリースペース比率を有する第ｋサブブラインドスポットと前記自動車との間の距離に対応して前記運転者に異なる警報をすることを特徴とする請求項１０に記載の警報装置。

【請求項12】

（ｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値以下であり、第ｋ−１サブブラインドスポットの前記フリースペース比率が１００％である場合を第１ケースとし、（ｉｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値以下で、第ｋ−１サブブラインドスポットの前記フリースペース比率が第ｋ−１閾値以下である場合を第２ケースとし、（ｉｉｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が１００％で、第ｋ−１サブブラインドスポットの前記フリースペース比率が前記第ｋ−１閾値以下である場合を第３ケースとすれば、前記プロセッサが、前記第１ケースに比べて前記第２ケース及び前記第３ケースが、物体が前記自動車により近接していると前記運転者に警報することを特徴とする請求項１１に記載の警報装置。

【請求項13】

前記第ｋサブブラインドスポットの前記フリースペース比率が、前記第ｋ閾値を超過し、前記第ｋ閾値より大きな値に設定された第ｋ’閾値以下の状態で、第ｋ＋１サブブラインドスポットの前記フリースペース比率が第ｋ＋１閾値以下である場合、前記プロセッサが、前記第ｋサブブラインドスポットと前記自動車の間の前記距離に対応して前記運転者に異なる警報をすることを特徴とする請求項１１に記載の警報装置。

【請求項14】

前記プロセッサが、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット各々の前記フリースペース比率の変化率各々を参照して、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット内での前記物体の移動情報を獲得し、
前記プロセッサが、前記物体の前記獲得された移動情報を参照して、前記第ｋサブブラインドスポットと前記自動車との間の距離に対応して前記運転者に警報をすることを特徴とする請求項１１に記載の警報装置。

【請求項15】

第ｋ＋１サブブラインドスポットでの前記フリースペース比率が第ｋ＋１閾値以下の状態から大きくなる方向へと変化し、前記第ｋサブブラインドスポットでの前記フリースペース比率が小さくなる方向に変化した場合、前記プロセッサが、前記物体が前記第ｋ＋１サブブラインドスポットから前記第ｋサブブラインドスポットに移動すると判断し、
第ｋ−１サブブラインドスポットでの前記フリースペース比率が第ｋ−１閾値以下の状態から大きくなる方向へと変化し、前記第ｋサブブラインドスポットでの前記フリースペース比率が小さくなる方向に変化した場合、前記プロセッサが、前記物体が前記第ｋ−１サブブラインドスポットから前記第ｋサブブラインドスポットに移動するものと判断し、
前記プロセッサが、前記第ｋサブブラインドスポットでの前記物体の前記移動方向をさらに参照し、前記第ｋサブブラインドスポットと前記自動車との間の前記距離に対応して、前記運転者に警報をすることを特徴とする請求項１４に記載の警報装置。

【請求項16】

前記プロセッサが、前記第ｋサブブラインドスポットでの前記フリースペース比率の変化率を参照して前記物体の速度または加速度を確認し、前記物体の前記速度または前記加速度を参照して前記第ｋサブブラインドスポットと前記自動車との間の前記距離に対応して、前記運転者に警報をすることを特徴とする請求項１１に記載の警報装置。

【請求項17】

前記物体の前記速度または前記加速度を確認した結果、前記物体が前記自動車に接近すると判断された場合、前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値よりも大きな値に設定された第ｋ”閾値以下であれば、前記プロセッサが、前記第ｋサブブラインドスポットと前記自動車の間の前記距離に対応して前記運転者に警報をすることを特徴とする請求項１６に記載の警報装置。

【請求項18】

前記（Ｉ）プロセスで、
前記プロセッサは、前記後方のイメージに対してコンボリューション演算を少なくとも一度適用してダウンサンプリングされた特徴マップとして少なくとも一つの特徴マップを生成し、前記ダウンサンプリングされた特徴マップに対してデコンボリューション演算を少なくとも一度適用し、前記後方イメージ内の前記道路領域と前記物体をセグメンテーションすることを特徴とする請求項１０に記載の警報装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、自動車の車線変更に対する危険を警報する方法及びこれを利用した警報装置に関し；より詳細には、前記自動車の前記車線変更に対する危険を警報する方法において、（ａ）運行中の自動車で撮影された少なくとも一つの後方イメージが獲得されると、学習されたＣＮＮ（Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ）を用いて前記後方イメージをセグメンテーションすることにより前記後方イメージに対応されるセグメンテーションイメージを獲得する段階；（ｂ）前記警報装置が、前記セグメンテーションイメージを参照して、少なくとも一つのブラインドスポット（ｂｌｉｎｄ ｓｐｏｔ）において少なくとも一つのフリースペース比率（ｆｒｅｅ ｓｐａｃｅ ｒａｔｉｏ）を確認するものの、前記フリースペース比率は、前記ブラインドスポットにおいて物体が位置しない道路領域の前記ブラインドスポットの全領域に対する比率で決定されることを特徴とする段階；及び（ｃ）前記フリースペース比率が少なくとも一つの所定の閾値以下である場合、前記警報装置が、前記自動車の運転者に車線変更に対する前記危険を警報する段階；を含むことを特徴とする方法及びこれを利用した装置に関する。

【背景技術】

【0002】

一般的に運転者が自動車運行中に車線変更をする際、側面及び後方を観察して視野を確保できるように自動車の両側にサイドミラーが設置されており、室内前面中央部にルームミラーが設置されている。

【0003】

サイドミラーは、自動車の両面に設置され側面及び後方の視野を確保するよう利用されているが、側面に近接して走行する自動車や他の或る物体は確認できないブラインドスポットがある。

【0004】

従って、走行中の自動車の側面に接近して走っている他の自動車を運転者が確認できず車線変更をした場合、ブラインドスポットで走行している他の自動車との接触事故が発生しかねない問題点があった。

【0005】

このような問題点を防止するため、運転者がブラインドスポットを観測できるように曲面鏡をサイドミラーの片方に取り付ける場合もある。

【0006】

しかし、サイドミラーに曲面鏡などを設置した場合でも、自動車の車線を変更するために、運転者は肉眼でブラインドスポットを確認しなければならないため、運転者の運転疲労度は増加し、運転者が頭の位置を変えても曲面鏡で確認できないブラインドスポットが存在するという問題点が発生する。

【0007】

これを防止するために、最近では自動車の後面に取り付けられたセンサーによってブラインドスポットに接近したり、ブラインドスポットに位置する自動車などを感知した情報を運転者に提供することで、運転者がブラインドスポットにある自動車を認知できず車線を変更する場合、未然に事故を防止するためのブラインドスポットモニターシステムが提案されている。

【0008】

特に、ビジョンセンサーを用いたブラインドスポットモニターシステムでは、映像情報を基にいくつかの特性を検出するアルゴリズムを一般的に適用している。

【0009】

このようなアルゴリズムは外部環境，物体の外形，そしてシステム構成による制限的な検出率を示しており，正確に検出するには幾度の映像処理作業を経なければならないため演算量が非常に大きい。そのため、リアルタイム検出は限られた処理資源により内蔵型システムでは適用が難しくなることがある。

【0010】

これに加えて、ビジョンセンサーを利用した自動車の検出方法では、ＣＮＮでＲＰＮ（Ｒｅｇｉｏｎ Ｐｒｏｐｏｓａｌ Ｎｅｔｗｏｒｋ）が遅い速度の原因であることが主要争点の一つだ。特徴マップから少なくとも一つの候補を抽出するために、ＲＰＮは、スライディングウィンドウがすべての位置ごとに少なくとも一つの候補を含んでいるかを判断する。ＦＣレイヤ（Ｆｕｌｌｙ Ｃｏｎｎｅｃｔｅｄ Ｌａｙｅｒ）は、少なくとも一つの候補が自動車かどうかを判断するが、候補の多くは互いに重なって演算を遂行するために多くの時間を消費し、これは検出率の向上にほとんど役に立っていない。

【0011】

また、他のビジョンセンサーを用いた自動車の検出例として、オプティカルフロー（ｏｐｔｉｃａｌ ｆｌｏｗ）技法があるが、映像ピクセルの動きをモーションベクトルとして表現する方法である。しかし、オプティカルフロー技法を用いた自動車認識アルゴリズムは、演算処理量が非常に多いため、自動車のリアルタイム検出が容易でない問題点がある。

【発明の概要】

【発明が解決しようとする課題】

【0012】

本発明は、前述した問題点を全て解決することをその目的とする。

【0013】

本発明は、ブラインドスポットに位置する自動車を容易に検出し得るようにすることを他の目的とする。

【0014】

本発明は、自動車の走行環境にかかわらず、ブラインドスポットに位置する自動車を検出し得るようにすることを別の目的とする。

【0015】

本発明は、ブラインドスポットに位置する自動車を検出するために演算されるデータの量が少ないアルゴリズムを提供することをまた他の目的とする。

【0016】

本発明は、ＣＮＮによって獲得されたセグメンテーションイメージを利用し、ブラインドスポットに位置する自動車を正確に検出し得るようにすることをまた他の目的とする。

【0017】

本発明は、ＣＮＮによって獲得されたセグメンテーションイメージを利用し、ブラインドスポットから自動車の無い道路領域を検出する簡単な方法により、ブラインドスポットに位置する自動車を正確に検出し得るようにすることをまた他の目的とする。

【課題を解決するための手段】

【0018】

前記のような本発明の目的を達成し、後述する本発明の特徴的な効果を実現するための本発明の特徴的な構成は下記の通りである。

【0019】

本発明の一態様によれば、自動車の車線変更に対する危険を警報する方法において、（ａ）運行中の自動車で撮影された少なくとも一つの後方イメージが獲得されると、警報装置が、学習されたＣＮＮを用いて前記後方イメージをセグメンテーションすることにより前記後方イメージに対応されるセグメンテーションイメージを獲得する段階；（ｂ）前記警報装置が、前記セグメンテーションイメージを参照して、少なくとも一つのブラインドスポットにおいて少なくとも一つのフリースペース比率を確認するものの、前記フリースペース比率は、前記ブラインドスポットにおいて物体が位置しない道路領域の前記ブラインドスポットの全領域に対する比率で決定されることを特徴とする段階；及び（ｃ）前記フリースペース比率が少なくとも一つの所定の閾値以下である場合、前記警報装置が、前記自動車の運転者に車線変更に対する前記危険を警報する段階；を含むことを特徴とする方法である。

【0020】

一例として、前記ブラインドスポットは、前記自動車の後方から遠くなる方向へ距離別に設定される第１サブブラインドスポット（ｓｕｂ−ｂｌｉｎｄ ｓｐｏｔ）ないし第ｎサブブラインドスポットを含み、前記フリースペース比率に対する閾値各々である第１閾値ないし第ｎ閾値各々が、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット各々に対して設定され、前記（ｃ）段階で、前記警報装置は、第ｋ閾値以下の前記フリースペース比率を有する第ｋサブブラインドスポットと前記自動車との間の距離に対応して前記運転者に異なる警報をすることを特徴とする方法である。

【0021】

一例として、（ｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値以下であり、第ｋ−１サブブラインドスポットの前記フリースペース比率が１００％である場合を第１ケースとし、（ｉｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値以下で、第ｋ−１サブブラインドスポットの前記フリースペース比率が前記第ｋ−１閾値以下である場合を第２ケースとし、（ｉｉｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が１００％で、第ｋ−１サブブラインドスポットの前記フリースペース比率が前記第ｋ−１閾値以下である場合を第３ケースとすれば、前記警報装置は、前記第１ケースに比べて前記第２ケース及び前記第３ケースが、物体が前記自動車により近接していると前記運転者に警報することを特徴とする方法である。

【0022】

一例として、前記第ｋサブブラインドスポットの前記フリースペース比率が、前記第ｋ閾値を超過し、前記第ｋ閾値より大きな値に設定された第ｋ’閾値以下の状態で、第ｋ＋１サブブラインドスポットの前記フリースペース比率が第ｋ＋１閾値以下である場合、前記警報装置は、前記第ｋサブブラインドスポットと前記自動車の間の前記距離に対応して前記運転者に異なる警報をすることを特徴とする方法である。

【0023】

一例として、前記警報装置は、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット各々の前記フリースペース比率の変化率各々を参照して、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット内での前記物体の移動情報を獲得し、前記警報装置は、前記物体の前記獲得された移動情報を参照して、前記第ｋサブブラインドスポットと前記自動車との間の距離に対応して前記運転者に警報をすることを特徴とする方法である。

【0024】

一例として、前記第ｋ＋１サブブラインドスポットでの前記フリースペース比率が第ｋ＋１閾値以下の状態から大きくなる方向へと変化し、前記第ｋサブブラインドスポットでの前記フリースペース比率が小さくなる方向に変化した場合、前記警報装置は、前記物体が前記第ｋ＋１サブブラインドスポットから前記第ｋサブブラインドスポットに移動すると判断し、前記第ｋ−１サブブラインドスポットでの前記フリースペース比率が第ｋ−１閾値以下の状態から大きくなる方向へと変化し、前記第ｋサブブラインドスポットでの前記フリースペース比率が小さくなる方向に変化した場合、前記警報装置は、前記物体が前記第ｋ−１サブブラインドスポットから前記第ｋサブブラインドスポットに移動するものと判断し、前記警報装置は、前記第ｋサブブラインドスポットでの前記物体の前記移動方向をさらに参照し、前記第ｋサブブラインドスポットと前記自動車との間の前記距離に対応して、前記運転者に警報をすることを特徴とする方法である。

【0025】

一例として、前記警報装置は、前記第ｋサブブラインドスポットでの前記フリースペース比率の変化率を参照して前記物体の速度または加速度を確認し、前記物体の前記速度または前記加速度を参照して前記第ｋサブブラインドスポットと前記自動車との間の前記距離に対応して、前記運転者に警報をすることを特徴とする方法である。

【0026】

一例として、前記物体の前記速度または前記加速度を確認した結果、前記物体が前記自動車に接近すると判断された場合、前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値よりも大きな値に設定された第ｋ”閾値以下であれば、前記警報装置は、前記第ｋサブブラインドスポットと前記自動車の間の前記距離に対応して前記運転者に警報をすることを特徴とする方法である。

【0027】

一例として、前記後方イメージが第ｔフレームから獲得された後方イメージである場合、前記（ｃ）段階で、前記警報装置は、（ｉ）前記第ｔフレームでの前記後方イメージから確認される前記ブラインドスポットでの前記フリースペース比率である第ｔ比率と（ｉｉ）第ｔ−１フレームでの前記後方イメージないし第ｔ−ｉフレームでの前記後方イメージから確認される前記ブラインドスポットでの前記フリースペース比率である第ｔ−１の比率ないし第ｔ−ｉ比率各々を利用して、前記自動車の走行方向に対応される前記物体の相対的な移動方向を確認し、前記物体の前記相対的な移動方向を参照して前記車線変更に対する前記危険を前記運転者に警報することを特徴とする方法である。

【0028】

一例として、前記警報装置は、前記第ｔ−ｉ比率から前記第ｔ比率までの増加率を分析し、前記増加率が負（−）の値である場合には、前記物体が前記ブラインドスポットの外部から内部方向に移動したものと判断し、前記増加率が正（＋）の値である場合には、前記物体が前記ブラインドスポットの前記内部から前記外部方向に移動したものと判断し、前記警報装置が、前記物体の前記判断された移動方向をさらに参照し、前記車線変更に対する前記危険を前記運転者に警報することを特徴とする方法である。

【0029】

一例として、前記警報装置は、前記第ｔ−ｉの比率ないし前記第ｔ比率のうち、どの比率が１００％から１００％未満に変化するかについての情報を参照にし、前記第ｔ−ｉフレームないし前記第ｔフレームの中から選択された特定フレームにおいての前記セグメンテーションイメージを分析し、前記警報装置が、前記物体が前記ブラインドスポットに位置する領域が前記自動車と近接した領域であるかそれとも前記自動車から離れた領域であるかを判断することにより、前記ブラインドスポットへの前記物体の進入位置を確認の上、前記物体の前記ブラインドスポットへの前記進入位置と前記物体の前記移動方向とを参照して、前記自動車に対する前記物体の相対的な移動方向を確認し、前記警報装置が、前記自動車に対する前記物体の前記相対的な移動方向をさらに参照し、前記車線変更に対する前記危険を、前記運転者に警報することを特徴とする方法である。

【0030】

一例として、前記（ａ）段階で、前記警報装置は、前記後方のイメージに対してコンボリューション演算を少なくとも一度適用してダウンサンプリングされた特徴マップとして少なくとも一つの特徴マップを生成し、前記ダウンサンプリングされた特徴マップに対してデコンボリューション演算を少なくとも一度適用し、前記後方イメージ内の前記道路領域と前記物体をセグメンテーションすることを特徴とする方法である。

【0031】

本発明の他の態様によれば、自動車の車線変更に対する危険を警報する警報装置において、運行中の自動車で撮影された少なくとも一つの後方映像イメージを獲得する通信部；及び（Ｉ）学習されたＣＮＮを用いて前記後方イメージをセグメンテーションすることにより前記後方イメージに対応されるセグメンテーションイメージを獲得するプロセスと、（ＩＩ）前記セグメンテーションイメージを参照して、少なくとも一つのブラインドスポットにおいて少なくとも一つのフリースペース比率（ｆｒｅｅ ｓｐａｃｅ ｒａｔｉｏ）を確認するものの、前記フリースペース比率は、前記ブラインドスポットにおいて物体が位置しない道路領域の前記ブラインドスポットの全領域に対する比率で決定されることを特徴とするプロセス及び、（ＩＩＩ）前記フリースペース比率が少なくとも一つの所定の閾値以下である場合、前記警報装置が、前記自動車の運転者に車線変更に対する前記危険を警報するプロセスを遂行するプロセッサ；を含むことを特徴とする警報装置である。

【0032】

一例として、前記ブラインドスポットは、前記自動車の後方から遠くなる方向へ距離別に設定される第１サブブラインドスポットないし第ｎサブブラインドスポットを含み、前記フリースペース比率に対する閾値各々である第１閾値ないし第ｎ閾値各々が、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット各々に対して設定され、前記（ＩＩＩ）プロセスで、前記プロセッサが、第ｋ閾値以下の前記フリースペース比率を有する第ｋサブブラインドスポットと前記自動車との間の距離に対応して前記運転者に異なる警報をすることを特徴とする警報装置である。

【0033】

一例として、（ｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値以下であり、第ｋ−１サブブラインドスポットの前記フリースペース比率が１００％である場合を第１ケースとし、（ｉｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値以下で、第ｋ−１サブブラインドスポットの前記フリースペース比率が前記第ｋ−１閾値以下である場合を第２ケースとし、（ｉｉｉ）前記第ｋサブブラインドスポットの前記フリースペース比率が１００％で、第ｋ−１サブブラインドスポットの前記フリースペース比率が前記第ｋ−１閾値以下である場合を第３ケースとすれば、前記プロセッサが、前記第１ケースに比べて前記第２ケース及び前記第３ケースが、物体が前記自動車により近接していると前記運転者に警報することを特徴とする警報装置である。

【0034】

一例として、前記第ｋサブブラインドスポットの前記フリースペース比率が、前記第ｋ閾値を超過し、前記第ｋ閾値より大きな値に設定された第ｋ’閾値以下の状態で、第ｋ＋１サブブラインドスポットの前記フリースペース比率が第ｋ＋１閾値以下である場合、前記プロセッサが、前記第ｋサブブラインドスポットと前記自動車の間の前記距離に対応して前記運転者に異なる警報をすることを特徴とする警報装置である。

【0035】

一例として、前記プロセッサが、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット各々の前記フリースペース比率の変化率各々を参照して、前記第１サブブラインドスポットないし前記第ｎサブブラインドスポット内での前記物体の移動情報を獲得し、
前記プロセッサが、前記物体の前記獲得された移動情報を参照して、前記第ｋサブブラインドスポットと前記自動車との間の距離に対応して前記運転者に警報をすることを特徴とする警報装置である。

【0036】

一例として、前記第ｋ＋１サブブラインドスポットでの前記フリースペース比率が第ｋ＋１閾値以下の状態から大きくなる方向へと変化し、前記第ｋサブブラインドスポットでの前記フリースペース比率が小さくなる方向に変化した場合、前記プロセッサが、前記物体が前記第ｋ＋１サブブラインドスポットから前記第ｋサブブラインドスポットに移動すると判断し、前記第ｋ−１サブブラインドスポットでの前記フリースペース比率が第ｋ−１閾値以下の状態から大きくなる方向へと変化し、前記第ｋサブブラインドスポットでの前記フリースペース比率が小さくなる方向に変化した場合、前記プロセッサが、前記物体が前記第ｋ−１サブブラインドスポットから前記第ｋサブブラインドスポットに移動するものと判断し、前記プロセッサが、前記第ｋサブブラインドスポットでの前記物体の前記移動方向をさらに参照し、前記第ｋサブブラインドスポットと前記自動車との間の前記距離に対応して、前記運転者に警報をすることを特徴とする警報装置である。

【0037】

一例として、前記プロセッサが、前記第ｋサブブラインドスポットでの前記フリースペース比率の変化率を参照して前記物体の速度または加速度を確認し、前記物体の前記速度または前記加速度を参照して前記第ｋサブブラインドスポットと前記自動車との間の前記距離に対応して、前記運転者に警報をすることを特徴とする警報装置である。

【0038】

一例として、前記物体の前記速度または前記加速度を確認した結果、前記物体が前記自動車に接近すると判断された場合、前記第ｋサブブラインドスポットの前記フリースペース比率が前記第ｋ閾値よりも大きな値に設定された第ｋ”閾値以下であれば、前記プロセッサが、前記第ｋサブブラインドスポットと前記自動車の間の前記距離に対応して前記運転者に警報をすることを特徴とする警報装置である。

【0039】

一例として、前記後方イメージが第ｔフレームから獲得された後方イメージである場合、前記（ＩＩＩ）プロセスで、前記プロセッサが、（ｉ）前記第ｔフレームでの前記後方イメージから確認される前記ブラインドスポットでの前記フリースペース比率である第ｔ比率と（ｉｉ）第ｔ−１フレームでの前記後方イメージないし第ｔ−ｉフレームでの前記後方イメージから確認される前記ブラインドスポットでの前記フリースペース比率である第ｔ−１の比率ないし第ｔ−ｉ比率各々を利用して、前記自動車の走行方向に対応される前記物体の相対的な移動方向を確認し、前記物体の前記相対的な移動方向を参照して前記車線変更に対する前記危険を前記運転者に警報することを特徴とする警報装置である。

【0040】

一例として、前記プロセッサが、前記第ｔ−ｉ比率から前記第ｔ比率までの増加率を分析し、前記増加率が負（−）の値である場合には、前記物体が前記ブラインドスポットの外部から内部方向に移動したものと判断し、前記増加率が正（＋）の値である場合には、前記物体が前記ブラインドスポットの前記内部から前記外部方向に移動したものと判断し、前記プロセッサが、前記物体の前記判断された移動方向をさらに参照し、前記車線変更に対する前記危険を前記運転者に警報することを特徴とする警報装置である。

【0041】

一例として、前記プロセッサが、前記第ｔ−ｉ比率なしい前記第ｔ比率のうち、どの比率が１００％から１００％未満に変化するかについての情報を参照にし、前記第ｔ−ｉフレームないし前記第ｔフレームの中から選択された特定フレームにおいての前記セグメンテーションイメージを分析し、前記プロセッサが、前記物体が前記ブラインドスポットに位置する領域が前記自動車と近接した領域であるかそれとも前記自動車から離れた領域であるかを判断することにより、前記ブラインドスポットへの前記物体の進入位置を確認の上、前記物体の前記ブラインドスポットへの前記進入位置と前記物体の前記移動方向とを参照して、前記自動車に対する前記物体の相対的な移動方向を確認し、前記プロセッサが、前記自動車に対する前記物体の前記相対的な移動方向をさらに参照し、前記車線変更に対する前記危険を、前記運転者に警報することを特徴とする警報装置である。

【0042】

一例として、前記（Ｉ）プロセスで、前記プロセッサは、前記後方のイメージに対してコンボリューション演算を少なくとも一度適用してダウンサンプリングされた特徴マップとして少なくとも一つの特徴マップを生成し、前記ダウンサンプリングされた特徴マップに対してデコンボリューション演算を少なくとも一度適用し、前記後方イメージ内の前記道路領域と前記物体をセグメンテーションすることを特徴とする警報装置である。

【発明の効果】

【0043】

本発明は、ニューラルネットワークアルゴリズム（Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ Ａｌｇｏｒｉｔｈｍ）を用いてブラインドスポットに位置する自動車を正確に検出し得る効果がある。

【0044】

また、本発明は、自動車の走行環境にかかわらず、ブラインドスポットに位置する自動車を正確に検出し得る他の効果がある。

【0045】

また、本発明は、ＣＮＮによって獲得されたセグメンテーションイメージを利用することにより、少ないデータの演算量でブラインドスポットに位置する自動車を検出し得るまた他の効果がある。

【0046】

また、本発明は、背景の動きと映像ノイズの影響を受けずにブラインドスポットに位置する自動車を、リアルタイムで少ない演算量で検出し得るまた他の効果がある。

【0047】

また、本発明は、ブラインドスポットから自動車の無い道路領域を検出する簡単な方法によってブラインドスポットに位置する自動車を正確に検出し得るまた他の効果がある。

【図面の簡単な説明】

【0048】

本発明の実施例の説明に利用されるために添付された以下の各図面は、本発明の実施例の中の一部に過ぎず、本発明が属する技術分野でおいて、通常の知識を有する者（以下「通常の技術者」）は、発明的作業がなされることなくこれらの図面に基づいて他の図面が得られ得る。

【図1】本発明の一例に係る車線変更警報システムを概略的に示した図面である。

【図2】本発明の一例に係る車線変更警報システムが含まれた自動車を概略的に示した図面である。

【図3】本発明の一例に係る車線変更警報方法を概略的に示した図面である。

【図4】本発明の一例に係る自動車で獲得される後方のイメージを概略的に示した図面である。

【図5】本発明の一例に係る自動車の後方イメージをセグメンテーションして生成されたセグメンテーションイメージを概略的に示した図面である。

【図6】本発明の一例に係る後方イメージをセグメンテーションするＣＮＮを概略的に示した図面である。

【図7a】本発明の一例に係るブラインドスポットでの時間変化による物体の移動状態を概略的に示した図面である。

【図7b】本発明の一例に係るブラインドスポットでの時間変化による物体の移動状態を概略的に示した図面である。

【図8】本発明の一例に係る各々のブラインドスポットに対して提供される複数のサブブラインドスポット内の状態を概略的に示した図面である。

【図9a】図８のブラインドスポットでの物体の移動状態を概略的に示した図面である。

【図9b】図８のブラインドスポットでの物体の移動状態を概略的に示した図面である。

【図9c】図８のブラインドスポットでの物体の移動状態を概略的に示した図面である。

【発明を実施するための形態】

【0049】

後述する本発明に対する詳細な説明は、本発明の各目的、技術的解決策や長所を明確にするために、本発明が実施され得る特定の実施例を例示として示す添付図面を参照する。これらの実施例は通常の技術者が本発明を実施することができるように充分詳細に説明される。

【0050】

また、本発明の詳細な説明及び各請求項にわたって、「含む」という単語及びそれらの変形は、他の技術的各特徴、付加物、構成要素又は段階を除外することを意図したものではない。通常の技術者に本発明の他の各目的、長所及び各特性が、一部は本説明書から、また一部は本発明の実施から明らかになるだろう。以下の例示及び図面は、実例として提供され、本発明を限定することを意図したものではない。

【0051】

さらに、本発明は本明細書に表示された実施例のあらゆる可能な組合せを網羅する。本発明の多様な実施例は相互異なるが、相互排他的である必要はないことを理解されたい。例えば、ここに記載されている特定の形状、構造及び特性は一実施例に係る本発明の精神及び範囲を逸脱せずに他の実施例で具現され得る。また、各々の開示された実施例内の個別構成要素の位置または配置は本発明の精神及び範囲を逸脱せずに変更され得ることを理解されたい。従って、後述する詳細な説明は限定的な意味で捉えようとするものではなく、本発明の範囲は、適切に説明されると、その請求項が主張することと均等なすべての範囲と、併せて添付された請求項によってのみ限定される。図面で類似する参照符号はいくつかの側面にかけて同一か類似する機能を指称する。

【0052】

本発明で言及している各種イメージは、舗装または非舗装道路関連のイメージを含み得り、この場合、道路環境で登場し得る物体（例えば、自動車、人、動物、植物、物、建物、飛行機やドローンのような飛行体、その他の障害物）を想定し得るが、必ずしもこれに限定されるものではなく、本発明で言及している各種イメージは、道路と関係のないイメージ（例えば、非舗装道路、路地、空き地、海、湖、川、山、森、砂漠、空、室内と関連したイメージ）でもあり得り、この場合、非舗装道路、路地、空き地、海、湖、川、山、森、砂漠、空、室内環境で登場し得る物体（例えば、自動車、人、動物、植物、物、建物、飛行機やドローンのような飛行体、その他の障害物）を想定し得るが、必ずしもこれに限定されるものではない。

【0053】

以下、本発明が属する技術分野で通常の知識を有する者が本発明を容易に実施することができるようにするために、本発明の好ましい実施例について添付の図面に基づいて詳細に説明する。

【0054】

まず、図１は本発明の一実施例による車線変更警報システムを概略的に示した図面で、図１を参照すれば、車線変更警報システムは、警報装置１００と自動車２００を含み得る。

【0055】

まず、警報装置１００は、自動車２００のブラインドスポットに位置したり、近接する物体、つまり、他の自動車を検出することで、ビジョンセンサー１０（例えば、カメラ）から獲得される自動車２００の後方イメージを分析して自動車２００のブラインドスポットに物体が位置しているか否かを判別することができる。

【0056】

そして、警報装置１００から伝送される情報とステアリングシステム（Ｓｔｅｅｒｉｎｇ Ｓｙｓｔｅｍ）の情報を参照して、自動車２００がブラインドスポット側に車線変えることを防止したり、警報装置１００が、物体がブラインドスポットに位置するという事実を自動車２００の運転者に知らせ得る。特に、自動車が自律走行自動車である場合、自動車２００がブラインドスポットに位置する物体の情報と走行環境を参照して、車線を安全に変更できるかどうかを判断し得るようになる。

【0057】

また、警報装置１００は、（ｉ）自動車の運行中、カメラなどのビジョンセンサー１０によって撮影された自動車での後方イメージを獲得する通信部１１０と、（ｉｉ）獲得された後方イメージを分析して自動車２００のブラインドスポットに物体が位置しているのかを判断し、場合によって運転者に警報するプロセッサ１２０を含み得る。この際、ビジョンセンサー１０は、自動車２００の任意の位置に設置され、自動車２００の後方イメージを少なくとも一つ撮影することで、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）、またはイメージキャプチャ装置などの光学センサーを含み得る。

【0058】

そして、プロセッサ１２０は、（ｉ）学習されたＣＮＮを利用して後方のイメージをセグメンテーションすることで、後方イメージに対応されるセグメンテーションイメージを獲得して、（ｉｉ）セグメンテーションイメージを参照して、すでに設定されているブラインドスポットでの少なくとも一つのフリースペース比率を確認するものの、前記フリースペース比率は、ブラインドスポットで物体が位置しない道路領域のブラインドスポットの全体領域に対する比率で決定され、（ｉｉｉ）フリースペース比率が所定の閾値以下である場合には、自動車の運転者に車線変更に対する危険を警報する。

【0059】

このように構成された本発明の一実施例による自動車のブラインドスポットに或る物体が位置して車線変更をする場合、事故の危険性があることを示すための車線変更警報方法を、図３を参照して詳細に説明すると次の通りである。

【0060】

まず、図４のように、自動車に設置されたビジョンセンサーで撮影した少なくとも一つの後方イメージが通信部を通じて獲得されると（Ｓ１０）、警報装置のプロセッサは、後方のイメージから道路領域及び物体領域が分離された図５のようなセグメンテーションイメージを獲得する（Ｓ２０）。

【0061】

その際、警報装置はＣＮＮ基盤のセグメンテーション方法を用いて後方イメージに対応するセグメンテーションイメージを獲得し得る。

【0062】

そして、ＣＮＮ基盤のセグメンテーション方法としてＦＣＮ（Ｆｕｌｌｙ Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｔｗｏｒｋ）、デコンボリューションネットワーク（Ｄｅｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｔｗｏｒｋ）、膨張されたコンボリューション（Ｄｉｌａｔｅｄ Ｃｏｎｖｏｌｕｔｉｏｎ）などが用いられ得るが、本発明はこれに限らず、イメージからセマンティックセグメンテーション（Ｓｅｍａｎｔｉｃ Ｓｅｇｍｅｎｔａｔｉｏｎ）を遂行できる方法またはロジックを利用し得る。

【0063】

一例で、図６のように、コンボリューションネットワークとデコンボリューションネットワークを含むエンコーダ・デコーダ（Ｅｎｃｏｄｅｒ−Ｄｅｃｏｄｅｒ）の構成が適用される。より詳細に、警報装置は、後方イメージをエンコーダに含まれる複数のコンボリューションレイヤによってダウンサンプリング（Ｄｏｗｎ−ｓａｍｐｌｉｎｇ）した上で、ダウンサンプリングされた後方イメージをデコーダに含まれた複数のデコンボリューションレイヤによってアップサンプリング（Ｕｐ−ｓａｍｐｌｉｎｇ）することで、後方イメージに対応されるセグメンテーションイメージを生成し得る。

【0064】

また、道路領域を物体（例えば観測された特定自動車）から区分するために、道路と特定の自動車以外の他の物体はすべて背景として処理し得る。

【0065】

次に、警報装置はセグメンテーションイメージを参照して所定のブラインドスポットでのフリースペース比率を確認できる（Ｓ３０）。この際、図５を参照すれば、フリースペース比率は、ブラインドスポット（ＢＳ）で物体が位置しない道路領域のブラインドスポット（ＢＳ）の全体領域に対する比率で決定され得る。

【0066】

次に、フリースペース比率が所定の閾値以下である場合、警報装置は、ブラインドスポットに物体が位置しているものと判断して運転者に車線変更に対する危険を警報し得る（Ｓ４０）。

【0067】

一例として、自動車のブラインドスポットに物体が位置すると判断される場合、警報装置は、物体の位置情報を自動車の制御部に伝送することにより、物体が位置するブラインドスポット方向に自動車が車線を変更することを防止するようにし得る。この際、ステアリングシステムの情報を参照して、運転者が車線を変更しようとする際、車線のブラインドスポットに物体が位置する場合、自動車のコントロールユニットは、警報システムを通じて運転者にブラインドスポットに物体があることを知らせ、車線変更による危険状況を未然に防止できるようにし得る。また、自動車が自律走行自動車である場合、ブラインドスポットに物体が位置するの否かについての情報と走行環境を参照して、自動車が安全に車線を変更できるようにし得る。また、ブラインドスポットは、自動車の両側に各々形成され得るので、警報装置は、両方のブラインドスポット各々に対して、フリースペース比率を確認してブラインドスポットの各々に任意の物体が位置しているか否かを判断し得る。

【0068】

一方、前記のようにブラインドスポットでのフリースペース比率を参照し、ブラインドスポットに物体が位置しているかどうかを判断する方法についてさらに詳しく説明すると以下とおりである。

【0069】

まず、後方イメージが第ｔフレームから獲得された後方イメージである場合、警報装置は、（ｉ）第ｔフレームでの後方イメージから確認される前記ブラインドスポットでのフリースペース比率である第ｔ比率と（ｉｉ）第ｔ−１フレームでの後方イメージないし第ｔ−ｉフレームでの後方イメージから確認されるブラインドスポットでのフリースペース比率である第ｔ−１比率ないし第ｔ−ｉ比率各々を利用して、自動車の走行方向に対応される物体の相対的な移動方向を確認し、物体の相対的な移動方向を参照して車線変更に対する危険を運転者に警報し得る。

【0070】

一例として、図７ａ及び７ｂを参照すれば、警報装置は、第ｔ−ｉ比率から第ｔ比率までの増加率を分析し、図７ａのように、増加率が負（−）の値である場合は、物体がブラインドスポットの外部からブラインドスポットの内部に移動したものと判断し、図７ｂのように、増加率が正（＋）の値である場合は、物体がブラインドスポットの内部からブラインドスポットの外部に移動したものと判断し得り、警報装置は、物体の判断された移動方向をさらに参照し、車線変更に対する危険を運転者に警報し得る。

【0071】

つまり、物体の移動方向を参照して、物体が自動車に近づく方向へ移動する場合には、警報装置が運転者に警報を出し、物体が自動車から遠ざかる方向に自動車が動く場合には、ブラインドスポット内に物体が位置しても運転者に警報をしないことができる。一例として、自動車の走行方向と反対に移動する他の自動車がブラインドスポットに位置する場合、車線変更に対する危険が低いので警報装置は運転者に警報をしないことができる。

【0072】

この際、警報装置は、第ｔ−ｉ比率ないし第ｔ比率が１００％から１００％未満に変化する情報を参照に、前記第ｔ−ｉフレームないし前記第ｔフレームの中から選択された特定フレームにおいてのセグメンテーションイメージを分析し、物体がブラインドスポットに位置する領域が自動車と近接した領域であるかそれとも自動車から離れた領域であるかを判断することにより、ブラインドスポットへの物体の進入位置を確認の上、物体のブラインドスポットへの進入位置と物体の移動方向とを確認し、物体の自動車との相対的な移動方向をさらに参照し、車線変更に対する危険を運転者に警報し得る。

【0073】

一例として、図７ａのように、第ｔ−ｉフレームないし第ｔフレームまで下の方向に物体がブラインドスポットに進入し、フリースペース比率が漸進的に減少し、第ｔフレームでフリースペース比率が所定の閾値以下になると、警報装置は、物体が自動車に近づく方向に移動すると判断して運転者に警報し得る。しかし、図７ｂのように、第ｔ−ｉフレームから第ｔフレームまで上に方向に物体がブラインドスポット領域に進入をしてフリースペース比率が漸進的に増加し、第ｔフレームでフリースペース比率が所定の閾値以下である場合は、警報装置は、物体が自動車と遠ざかる方向に移動しているものと判断し、運転者に警報しないことができる。

【0074】

前記では、物体の相対的な移動方向を判断する各方法について例示的にいくつかのケースについてのみ説明したが、本発明はこれに限られず、各々のケースに係る物体の相対的な移動方向に対する判断基準を設定し得る。

【0075】

次に、図８を参照すると、ブラインドスポット（ＢＳ）は、自動車の後方から遠ざかる方向へ距離別に設定された第１サブブラインドスポット（ＢＳ_１）ないし第ｎサブブラインドスポット（ＢＳ_ｎ）を含み得り、第１サブブラインドスポット（ＢＳ_１）ないし第ｎサブブラインドスポット（ＢＳ_ｎ）各々は、フリースペース比率に対する所定の閾値各々である第１閾値ないし第ｎ閾値各々に設定され得る。この際、警報装置は、第ｋ閾値以下のフリースペース比率を有する第ｋサブブラインドスポット（ＢＳ_ｋ）と自動車の間の距離に対応し、運転者に異なる警報をし得る。

【0076】

つまり、フリースペース比率が所定の閾値以下となるサブブラインドスポットの一つが、自動車から近い距離に位置している場合、警報装置は、他の自動車がブラインドスポットに位置しており、運転者の自動車に接近していることを運転者に知らせる得る。

【0077】

一例として、（ｉ）図９ａのように、第ｋサブブラインドスポット（ＢＳ_ｋ）のフリースペース比率が前記第ｋ閾値以下であり、第ｋ−１サブブラインドスポット（ＢＳ_ｋ−１）のフリースペース比率が１００％である場合を第１ケースとし、（ｉｉ）図９ｂのように、第ｋサブブラインドスポット（ＢＳ_ｋ）のフリースペース比率が第ｋ閾値以下で、第ｋ−１サブブラインドスポット（ＢＳ_ｋ−１）のフリースペース比率が第ｋ−１閾値以下である場合を第２ケースとし、（ｉｉｉ）図９ｃのように、第ｋサブブラインドスポット（ＢＳ_ｋ）のフリースペース比率が１００％で、第ｋ−１サブブラインドスポット（ＢＳ_ｋ−１）のフリースペース比率が第ｋ−１閾値以下である場合を第３ケースとすれば、警報装置は、第１ケースに比べて第２ケース及び第３ケースが、物体が自動車により近接していると運転者に警報する。

【0078】

また、第ｋサブブラインドスポット（ＢＳ_ｋ）のフリースペース比率が、第ｋ閾値を超過し、第ｋ閾値より大きな値に設定された第ｋ’閾値以下の状態で、第ｋ＋１サブブラインドスポット（ＢＳ_ｋ＋１）のフリースペース比率が第ｋ＋１閾値以下である場合、警報装置は、第ｋサブブラインドスポットと自動車の間の距離に対応して運転者に異なる警報をし得る。

【0079】

つまり、９ｂのように、第ｋ−１サブブラインドスポット（ＢＳ_ｋ−１）のフリースペース比率が警報するための基準である第ｋ−１閾値より大きい場合にも、物体が第ｋサブブラインドスポット（ＢＳ_ｋ）から第ｋ−１ブラインドスポット（ＢＳ_ｋ−１）に移動する（例えば、物体が自動車に接近する）状態であれば、警報装置が、第ｋ閾値より大きく設定された第ｋ’閾値を利用し、物体が第ｋ−１サブブラインドスポット（ＢＳ_ｋ−１）に位置すると判断して運転者に警報し得る。

【0080】

そして、警報装置は、第１サブブラインドスポットないし第ｎサブブラインドスポット各々のフリースペース比率の変化率各々を参照して、第１サブブラインドスポットないし第ｎサブブラインドスポット内での物体の移動情報を獲得し、物体の獲得された移動情報を参照して、第ｋサブブラインドスポットと自動車との間の距離に対応して運転者に警報をし得る。

【0081】

一例として、第ｋ＋１サブブラインドスポットでのフリースペース比率が第ｋ＋１閾値以下の状態から大きくなる方向へと変化し、第ｋサブブラインドスポットでのフリースペース比率が小さくなる方向に変化した場合、警報装置は、物体が第ｋ＋１サブブラインドスポットから第ｋサブブラインドスポットに移動すると判断し得る。また、第ｋ−１サブブラインドスポットでのフリースペース比率が第ｋ−１閾値以下の状態から大きくなる方向へと変化し、第ｋサブブラインドスポットでのフリースペース比率が小さくなる方向に変化した場合、警報装置は、物体が第ｋ−１サブブラインドスポットから第ｋサブブラインドスポットに移動するものと判断し得る。そして、警報装置は、第ｋサブブラインドスポットでの物体の移動方向をさらに参照し、第ｋサブブラインドスポットと自動車との間の距離に対応して、運転者に警報をし得る。つまり、警報装置は、ブラインドスポットにおけるフリースペース比率が変化する方向を自動車の走行方向と比較して、物体の移動方向を確認し得り、物体の移動方向が自動車の走行方向と反対方向である場合には、ブラインドスポットに物体が位置していても警報装置が運転者に警報をしないことができる。

【0082】

さらに、警報装置は、第ｋサブブラインドスポットでのフリースペース比率の変化率を参照して物体の速度または加速度を確認し得り、物体の速度または加速度をさらに参照して、第ｋサブブラインドスポットと自動車との間の距離に対応して運転者に警報をし得る。

【0083】

一例として、物体の速度または加速度を確認した結果、物体が自動車に速く接近している判断された場合、第ｋサブブラインドスポットのフリースペース比率が第ｋ閾値よりも大きな値に設定された第ｋ”閾値以下である状態で、警報装置は、第ｋサブブラインドスポットと自動車の間の距離に対応して運転者に警報をし得る。つまり、第ｋサブブラインドスポットのフリースペース比率が、第ｋ閾値より大きい状態でも、第ｋサブブラインドスポットに位置する物体が速く自動車に接近していると判断される場合は、警報装置が運転者に第ｋブラインドスポットにある物体が速い速度で運転者の自動車で接近していることを知らせ得る。

【0084】

また、以上で説明された本発明に係る実施例は、多様なコンピュータ構成要素を通じて遂行できるプログラム命令語の形態で具現されてコンピュータで判読可能な記録媒体に記録され得る。前記コンピュータで判読可能な記録媒体はプログラム命令語、データファイル、データ構造などを単独でまたは組み合わせて含まれ得る。 前記コンピュータ判読可能な記録媒体に記録されるプログラム命令語は、本発明のために特別に設計されて構成されたものか、コンピュータソフトウェア分野の当業者に公知となって使用可能なものでもよい。コンピュータで判読可能な記録媒体の例には、ハードディスク、フロッピィディスク及び磁気テープのような磁気媒体、ＣＤ−ＲＯＭ、ＤＶＤのような光記録媒体、フロプティカルディスク（ｆｌｏｐｔｉｃａｌｄｉｓｋ）のような磁気−光媒体（ｍａｇｎｅｔｏ−ｏｐｔｉｃａｌｍｅｄｉａ）、およびＲＯＭ、ＲＡＭ、フラッシュメモリなどといったプログラム命令語を保存して遂行するように特別に構成されたハードウェア装置が含まれる。プログラム命令語の例には、コンパイラによって作られるもののような機械語コードだけでなく、インタプリタなどを用いてコンピュータによって実行され得る高級言語コードも含まれる。前記のハードウェア装置は本発明に係る処理を遂行するために一つ以上のソフトウェアモジュールとして作動するように構成され得り、その逆も同様である。

【0085】

以上、本発明が具体的な構成要素などのような特定事項と限定された実施例及び図面によって説明されたが、これは本発明のより全般的な理解を助けるために提供されたものであるに過ぎず、本発明が前記実施例に限られるものではなく、本発明が属する技術分野において通常の知識を有する者であれば係る記載から多様な修正及び変形が行われ得る。

【0086】

従って、本発明の思想は前記説明された実施例に極限されて定められてはならず、後述する特許請求の範囲だけでなく、本特許請求の範囲と均等または等価的に変形されたものすべては、本発明の思想の範囲に属するといえる。

【符号の説明】

【0087】

１０： ビジョンセンター
１００： 車線変更警報装置
１１０： 通信部
１２０： プロセッサ
２００： 自動車
ＢＳ： ブラインドスポット

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7a】

【図7b】

【図8】

【図9a】

【図9b】

【図9c】