特開 2023-26503 車両の周囲を特徴付けるためのシステム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023026503

(43)【公開日】2023-02-24

(54)【発明の名称】車両の周囲を特徴付けるためのシステム

(51)【国際特許分類】

   G01S 17/86 20200101AFI20230216BHJP

   G01S 17/931 20200101ALI20230216BHJP

   G01S 17/10 20200101ALI20230216BHJP

   G01S 17/894 20200101ALI20230216BHJP

   G01S 7/486 20200101ALI20230216BHJP

【ＦＩ】

G01S17/86

G01S17/931

G01S17/10

G01S17/894

G01S7/486

【審査請求】有

【請求項の数】6

【出願形態】ＯＬ

(21)【出願番号】P 2022205238

(22)【出願日】2022-12-22

(62)【分割の表示】P 2019531418の分割

【原出願日】2018-01-02

(31)【優先権主張番号】16207630.1

(32)【優先日】2016-12-30

(33)【優先権主張国・地域又は機関】EP

(71)【出願人】

【識別番号】519113343

【氏名又は名称】ゼノマティクス ナムローゼ フェンノートシャップ

(74)【代理人】

【識別番号】110000855

【氏名又は名称】弁理士法人浅村特許事務所

(72)【発明者】

【氏名】ギュエンス、フィリップ

(57)【要約】

【課題】車両の周囲を特徴付けるためのシステムを提供する。
【解決手段】本発明のシステムは、検出器（２２０）は複数の画素を含み、前記一連のパルスと同期して前記周囲によって反射された前記レーザ光のパターンを表す光を検出するように構成された前記検出器（２２０）と、前記検出された光に応答して前記画素によって生成された露光値の関数として前記周囲の物体（９９）までの距離を計算するように構成される処理手段（２４０）とを備え、前記検出器（２２０）は、前記周囲によって反射されたような前記レーザ光のパターンを表す前記光を受信しないピクセルで、前記周囲の二次元画像を形成する光を検出するようにさらに構成される。
【選択図】図１

【特許請求の範囲】

【請求項1】

車両の周囲を特徴付けるためのシステムであって、
一連のパルスにおいて前記周囲に向けてレーザ光のパターンを投影するように構成された投影手段（２１０）であって、前記レーザ光のパターンは、個別のスポットのパターンを含む、前記投影手段（２１０）と、
複数の画素を含む検出器（２２０）であって、当該検出器（２２０）は、前記一連のパルスと同期して、前記周囲によって反射されたときの前記レーザ光のパターンを表す光を検出するように構成される、前記検出器（２２０）と、
前記検出された光に応答して前記画素によって生成された露出値の関数として前記周囲の物体（９９）までの距離を計算するように構成された処理手段（２４０）と、
を備え、
前記検出器（２２０）は、前記周囲によって反射されたような前記レーザ光のパターンを表す前記光を受信しないピクセルで、前記周囲の二次元画像を形成する光を検出するようにさらに構成される、システム。

【請求項2】

前記画素（２２０）は、前記一連のパルスに全てについて、第１の所定時間窓（１０）の間に前記物体（９９）によって反射された第１の光量を表す第１の電荷量と第２の所定時間窓（２０）の間に前記物体によって反射される第２の光量を表す第２の電荷とを蓄積することによって、前記露出値を生成するように構成され、前記第２の所定時間窓（２０）は前記第１の所定時間窓の後に生じる、請求項１に記載のシステム。

【請求項3】

前記処理手段（２４０）が、所定の特徴位置に関して前記周囲によって反射されたときの前記レーザ光のパターンを表す前記検出された光の特徴の変位を決定することによって前記距離を決定するように構成される、請求項１に記載のシステム。

【請求項4】

前記検出器（２２０）の前記複数の画素のうちの異なる画素には、異なる波長帯域の光が前記異なる画素に到達することを可能にする異なるフィルタが設けられている、請求項１から３のいずれか一項に記載のシステム。

【請求項5】

前記画素はＲＧＢ画素であり、前記異なるフィルタは、近赤外線（ＮＩＲ）光、赤色光、緑色光、および青色光をそれぞれ通過させる、請求項４に記載のシステム。

【請求項6】

車両であって、当該車両の周囲の領域を特徴付けるように構成された、請求項１から５のいずれか一項に記載のシステムを備える、車両。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、物体（オブジェクト）までの距離を決定するためのシステムの分野に関し、特に、車両の近くの障害物を検出するために使用され得るようなシーンまたはその一部の特徴付けのために使用されるべき感知システムに関する。

【背景技術】

【0002】

リモート感知技術の分野では、特に、自動車および産業用途、ゲーム用途、およびマッピング用途を含む制御およびナビゲーション用途で使用することができる背景の高解像度マップの生成に関して、三角測量ベースおよび飛行時間ベースの感知を使用して、センサからの物体の距離を決定することが知られている。

【0003】

三角測量を利用する車両用の高精度で中距離周囲の感知システムは、本出願人の名義による国際特許出願公開第ＷＯ２０１５／００４２１３Ａ１号でも知られている。その特許出願において、対象物の位置特定は、パルス放射スポットの投影および所定の参照スポット位置を基準とした検出スポットの変位の分析に基づいている。より具体的には、この特許出願のシステムは三角測量を使用している。ただし、達成できる精度は三角測量基底と相関し、これが達成可能な小型化の限界である。

【0004】

飛行時間に基づく技術は、ＲＦ変調源、測距ゲート撮像装置、および直接飛行時間（ＤＴｏＦ：Ｄｉｒｅｃｔ Ｔｉｍｅ－ｏｆ－Ｆｌｉｇｈｔ）撮像装置の使用を含む。ＲＦ変調光源および距離ゲート撮像装置を使用するためには、対象となるシーン全体を変調光源またはパルス光源で照明する必要がある。大部分のＬＩＤＡＲなどの直接飛行時間システムは、パルス反射ビームで関心領域を機械的にスキャンし、その反射はパルス検出器で感知される。現在の半導体レーザによって放射される光パワーは、自動車の用途において実用的であるために既知のＬＩＤＡＲシステムにおける動作に必要なパワー要件（例えば、最大２５０ｍまでの範囲）を満たすことができない。本出願人の名義の下の未公開のヨーロッパ特許出願番号ＥＰ１５１９１２８８．８号明細書には、そのような制限を克服するような物体までの距離を決定するシステムが記載されている。当該システムは、一連のパルスでレーザ光の離散スポットのパターンを物体に向けて投射するように構成された固体光源と、複数の画素を含む検出器であって、当該検出器は、前記一連のパルスと同期して、物体によって反射された離散スポットのパターンを表す光を検出するように構成された、検出器と、前記検出された光に応答して前記画素によって生成された露出値の関数として前記物体までの距離を計算するように構成された処理手段とを含む。画素は、前記一連の各パルスについて、第１の所定時間窓の間に前記物体によって反射された第１の光量を表す第１の電荷の量と、前記第１の所定時間窓の後に発生する第２の所定時間窓の間に前記物体によって反射された第２の光量を表す第２の電荷とを累積することによって前記露光値を生成するように構成される。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】国際特許出願公開第２０１５／００４２１３Ａ１号

【特許文献2】欧州特許第１５１９１２８８．８号明細書

【発明の概要】

【発明が解決しようとする課題】

【0006】

リモート感知技術が、自動車の安全機能、先進運転支援システム（ＡＤＡＳ：Ａｄｖａｎｃｅｄ Ｄｒｉｖｅｒ Ａｓｓｉｓｔａｎｃｅ Ｓｙｓｔｅｍｓ）、さらには自律型（または「自動運転」）車を提供することにますます依存するようになってきているので、車両の周囲を一層正確に特徴付ける車両搭載システムの需要がある。

【課題を解決するための手段】

【0007】

本発明の一態様によれば、車両の周囲を特徴付けるためのシステムであって、
一連のパルスにおいて前記周囲に向けてレーザ光のパターンを投影するように構成された投影手段であって、前記レーザ光のパターンは、個別のスポットのパターンを含む、前記投影手段と、
複数の画素を含む検出器であって、当該検出器は、前記一連のパルスと同期して、前記周囲によって反射されたときの前記レーザ光のパターンを表す光を検出するように構成される、前記検出器と、
前記検出された光に応答して前記画素によって生成された露出値の関数として前記周囲の物体までの距離を計算するように構成された処理手段と、
を備え、
前記検出器は、前記一連のパルスと一致しない時点で、または前記周囲によって反射された前記レーザ光のパターンを表す前記光を受光しない画素で、前記周囲の二次元画像を形成する光を検出するようにさらに構成される、システムが提供される。

【0008】

本発明の利点は、インタリーブされた時点で同じセンサから得られた２Ｄ情報と３Ｄ情報とを組み合わせることによって周囲の特性を改善することができることである。３次元情報は、射影と同期して反射光パターンを捕捉することによって距離センサとして使用されるときにシステムから得られ、２Ｄ情報は、測距感知パルス間のデジタルカメラとして使用されるときにシステムから得られる。

【0009】

投影手段は、好ましくは固体レーザを含む。それは特に、ＶＣＳＥＬアレイまたは適切な格子を備えた固体レーザであり得る。レーザ光のパターンは、好ましくはスポットのパターン、特に離散的なスポットである。一連のパルスは周期的に繰り返されて、周囲の特性の連続的な更新を可能にし得る。

【0010】

本発明によるシステムの一実施形態では、前記画素は、前記一連のパルスに全てについて、第１の所定時間窓の間に前記物体によって反射された第１の光量を表す第１の電荷量と第２の所定時間窓の間に前記物体によって反射される第２の光量を表す第２の電荷とを蓄積することによって、前記露出値を生成するように構成され、前記第２の所定時間窓は前記第１の所定時間窓の後に生じる。

【0011】

この実施形態の利点は、小型の要素で正確な距離情報を得るために測距ゲートＬＩＤＡＲ技術を使用することである。

【0012】

本発明によるシステムの一実施形態では、前記処理手段が、所定の特徴位置に関して前記周囲によって反射されたときの前記レーザ光のパターンを表す前記検出された光の特徴の変位を決定することによって前記距離を決定するように構成される。

【0013】

この実施形態では、検出器の異なる画素の各露出値を分析して、どの画素で投影パターンの反射（例えばスポット）が検出可能であり、どの反射が検出されないのかを判定する。このようにして、所定の位置（例えばスポット位置）に対する反射パターンの部分の変位を決定することができ、それによって投影パターンのそれぞれの部分を反射した物体の距離に関する情報が得られる。この実施形態の利点は、それがよく知られている三角測量法を使用して、正確な距離情報が得られることである。

【0014】

一実施形態では、本発明によるシステムは、前記一連のパルスと一致しない前記時点で、前記周囲に光束を投射するように構成された照明手段を備える。
光束は、周囲の関連部分の均一な照明を目的としており、好ましくは検出器の視野と一致するので、測距に使用される投影パターンとは異なり、実質的に均一でなければならない。この実施形態の利点は、周囲光の状況が好ましくないとき（例えば夜間）であっても、２Ｄ画像内に捕捉されるべき景色を適切に照らすことができることである。

【0015】

特定の実施形態では、投影手段と照明手段は共通の光源を共有する。

【0016】

この特定の実施形態の利点は、複数の光源の必要性を避けることによってシステムをコンパクトに保つことができることである。

【0017】

より特定の実施形態では、前記共通の光源がＶＣＳＥＬアレイを含み、前記照明手段がさらに前記一連のパルスと一致しない時点で作動するように構成されたアクティブ（能動的）に操向される拡散板を含むことにより、前記ＶＣＳＥＬアレイから生じる光を拡散させて前記束を形成する。

【0018】

このより特定の実施形態の利点は、構造化光の投射に非常に適しているＶＣＳＥＬアレイを使用して、２Ｄ画像捕捉に必要な照明を提供することもできることである。

【0019】

本発明によるシステムの一実施形態では、前記検出器の前記複数の画素には、異なる波長帯域の光が前記複数の画素のうちの異なる前記時点で前記複数の画素に到達することを可能にする時間依存フィルタが設けられている。

【0020】

この実施形態の利点は、時間的にわずかにずれている３つの異なる２Ｄ露光を組み合わせることによってＲＧＢ画像を生成できることである。ＲＧＢ画像は、モノクロ画像よりもより正確な自動特徴認識をもたらし、一般に人間のユーザに対する可視的再現に一層適している。

【0021】

本発明によるシステムの一実施形態では、前記検出器の前記複数の画素のうちの異なる画素には、異なる波長帯域の光が前記時点で前記異なる画素に到達することを可能にする異なるフィルタが設けられている。

【0022】

この実施形態の利点は、空間的にわずかにずれている画素で得られる露光値を組み合わせることによってＲＧＢ画像を生成できることである。ＲＧＢ画像は、モノクロ画像よりもより正確な自動特徴認識をもたらし、一般に人間のユーザに対する可視的再現に一層適している。

【0023】

本発明の一態様によれば、車両の周囲の領域を特徴付けるように構成された、前述の態様のいずれかに記載のシステムを備える車両が提供される。

【0024】

本発明は、自動車、特に自動車などの路上走行車に使用するのに非常に適している。したがって、本システムは、車両安全機能、先進運転支援システム（ＡＤＡＳ）、さらには自律型（または「自動運転」）自動車にさえも有利に寄与することができる。自動車用途のセンサは空間で交錯しても、同じセンサ内に複数の機能を組み合わせて、追加の外部２Ｄセンサを必要とせずに２Ｄおよび３Ｄセンサの結合を提供することが本発明のさらなる利点である。

【0025】

本発明のこれらおよび他の態様および利点は、添付の図面を参照してより詳細に説明される。

【図面の簡単な説明】

【0026】

【図1】本発明によるシステムの実施形態を概略的に示す図である。

【図2】本発明によるシステムのＬＩＤＡＲベースの実施形態の動作原理を示す図である。

【図3】本発明によるシステムのＬＩＤＡＲベースの実施形態の動作原理を示す図である。

【図4】本発明によるシステムのＬＩＤＡＲベースの実施形態の動作原理を示す図である。

【図5】本発明の実施形態において使用することができるいくつかのタイミング図を提示する。

【図6】本発明によるシステムの一実施形態で使用するための画素配置を概略的に示す図である。

【図7】本発明の実施形態において使用することができるタイミング図を概略的に示す。

【発明を実施するための形態】

【0027】

図１は、本発明によるシステムの一実施形態を概略的に示す。

【0028】

本システムは、車両の周囲を特徴付けられ、適合されている。周囲は、車両の前方の領域を含んでもよく、車両の前方の路面を含んでもよい。同様に、（特に、車両が後退しているときは）周囲は車の後方の領域を含んでもよい。周囲は、障害物または他の道路利用者が存在する可能性がある車両の近くの任意のスペースを含んでもよい。車両の周囲は、数メートル、数十メートル、さらには数百メートルの距離まで延びでもよい。特徴付けは、周囲の物体までの距離を決定することによって行われる。距離は基本的な測定パラメータであるが、検出された物体の速度（運動方向を含む）および加速度などの導出変数の推定は、異なる時点での複数の距離測定値に基づいて決定することができる。複数の空間的に多様な測定点からの情報を組み合わせることによって認識され得る複雑な対象物については、向きおよび旋回などの追加のパラメータも導出され得る。すべての測定値はセンサを基準としているため、「固定された」物体の測定値はセンサの速度、加速度、方向（ピッチ、ヨー、ロール）、および回転を提供する、すなわちセンサが搭載されている車両の情報を提供する。

【0029】

本システムは、一連のパルスで周囲に向かってレーザ光のパターンを投影するように構成された投影手段２１０を備える。検出器２２０は複数の画素を含み、検出器２２０は、一連のパルスと同期して、周囲によって反射されたレーザ光のパターンを表す光を検出するように構成される。処理手段２４０は、検出された光に応答して画素によって生成された露出値の関数として周囲の物体９９までの距離を計算するように構成される。

【0030】

本システムが飛行時間（ＬＩＤＡＲ）原理に従って動作する場合、画素２２０は、一連のパルスの全てについて、第１の所定の時間窓１０の間に物体９９によって反射された第１の光量を表す第１の電荷量と、所定の時間窓１０の後に発生する第２の所定の時間窓２０の間に物体によって反射された第２の光量を表す第２の電荷量とを蓄積することによって露光値を生成するように構成され得る。

【0031】

このようなＬＩＤＡＲベースのシステムの動作原理は、図２から４のタイミング図で示す。明確にするために、周期的に繰り返される一連のパルスの単一のパルスのみが示されており、当該単一パルスは第１の時間窓１０と第２の時間窓２０とからなる。原理は、一例として、固体光源を含む投影手段を参照して説明される。

【0032】

図２に見られるように、第１の時間窓１０の間、固体光源２１０は「オン」状態にあり、光スポットのパターンを背景上に放射する。第２の時間窓２０の間、固体光源２１０は「オフ」状態にある。

【0033】

反射光の検出器２２０への到着は、進行距離（自由空間内で約３．３ｎｓ／ｍ）に比例する時間量だけ投影の開始に対して遅延する。この遅延により、反射光の一部のみが検出器２２０の第１ウェル２２１で検出され、検出器２２０は第１時間窓１０の間にのみアクティブ化される。したがって、そのアクティブ化の期間（第１の時間窓１０）の間に第１のウェルに蓄積された電荷は、反射パルスの到着前に画素に当たる雑音および周囲光のみを表す部分と、雑音、周囲光、および反射パルスの前縁を表す部分とからなる。

【0034】

反射パルスの後半部分は、検出器２２０の第２のウェル２２２で検出され、検出器２２０は、好ましくは第１の時間窓１０のすぐ後に続いて、第２の時間窓２０の間にのみアクティブ化される。したがって、そのアクティブ化期間（第２の時間窓２０）中に第２のウェルに蓄積された電荷は、雑音、周囲光、および反射パルスの後縁を表す部分と、雑音と反射パルスの到着後に画素に当たる周囲光とのみを表す部分とからなる。

【0035】

反射物体９９とシステム２００との間の距離が大きいほど、第１のウェル２２１内で検出されるパルスの割合が小さくなり、第２のウェル２２２内で検出されるパルスの割合が大きくなる。

【0036】

反射パルスの前縁が第１のウェル２２１の閉鎖後に（すなわち、第１の時間窓１０の終了後に）到着すると、第２のウェル２２２内で検出され得る反射パルスの割合は、飛行時間の遅延の増加にともない、再び減少する。

【0037】

対象物９９の距離をそれぞれ変化させた場合のウェル２２１、２２２のそれぞれにおける結果として生じる電荷量Ａ、Ｂを図３ｂに示す。表現を簡単にするために、逆二乗則による距離による光の減衰の影響は、図では考慮されていない。第１の時間窓１０と第２の時間窓２０とを組み合わせた持続時間まで飛行時間が遅延することについて、その飛行時間遅延は原則としてＡおよびＢの値から明白に導き出すことができることは明らかである。
－第１の時間窓１０の持続時間までの飛行時間遅延の場合、Ｂは物体９９の距離に比例する。絶対距離の決定を容易に得るために、正規化された値Ｂ／（Ｂ＋Ａ）を使用して、検出された物体の不完全な反射率および逆二乗則の影響を除去することができる。
－第１の時間窓１０の持続時間を超過する飛行時間遅延については、Ａは日光および雑音の寄与のみ（図示せず）であり、Ｃ－Ｂは（逆二乗則を補正した後の）物体９９の距離にほぼ比例し、ここでＣはオフセット値である。

【0038】

図２および図３は、時間窓１０内に放射される単一のパルスに関して本発明の原理を説明しているが、図示のパルスは、上で定義したような一連のパルスの一部であることを理解されたい。図４は、そのような一連のパルスの例示的なタイミング特性を概略的に示す。図に示すように、照明方式４０は、一連３０の個々のパルス１０の繰り返し放射１０からなる。個々のパルス１０の幅は最大動作範囲によって決まる。一連のパルス全体は、例えば６０Ｈｚの周波数で繰り返されてもよい。

【0039】

飛行時間ベースの検知システムの様々な任意の選択的な特徴は、未公開の欧州特許出願第１５１９１２８８．８号に記載されている。本出願人の名義による欧州特許第１５１９１２８８．８号明細書は、当業者がこれらの特徴を本明細書に含めることを可能にする目的で参照により組み込まれて、本発明の実施例に、これらの特徴が含まれる。

【0040】

システムが三角測量の原理に従って動作する場合、処理手段２４０は、所定の特徴位置を参照して周囲によって反射されたレーザ光のパターンを表す検出光の特徴の変位を決定することによって距離を決定するように適合され得る。好ましくは、投影パターンはレーザ光のスポットのパターンであり、その距離は、所定のスポット位置を基準にして、周囲の物体によって反射された投影スポットを表す検出スポットの変位を決定することによって、決定される。

【0041】

三角測量に基づく感知システムの様々な付加的な特徴は、本出願人の名義で国際特許出願公開第ＷＯ２０１５／００４２１３Ａ１号に開示されており、その内容は、当業者がこれらの特徴を含むことを可能にする目的でこの参照により組み込まれて、本発明の実施形態において、これらの特徴が含まれる。

【0042】

本発明によれば、検出器２２０は、さらに、一連のパルスと一致しない時点または周囲によって反射されたレーザ光のパターンを表す光を受光しない画素において、周囲の二次元画像を形成する光を検出するように構成される。

【0043】

自動車の測距システムの精度要件を考慮して、１メガ画素程度の総アレイサイズを有するＣＭＯＳセンサアレイが典型的には選択される。本発明者らは、そのようなセンサに使用される画素の比較的粗いサイズ（１０μｍ程度）にもかかわらず、基本的なデジタルカメラを形成するために適切な光学素子と組み合わせて使用される場合、組み合わされたセンサは驚くほど許容できる２Ｄ画像品質をもたらすことができる。

【0044】

本発明、特に、一連のパルスと一致しない時点で周囲の二次元画像を形成する光を検出するという概念は、とりわけ、測距パルス間の時間間隔または一連の測距パルス間では、画素アレイを使用して周囲のデジタル２Ｄ画像を捕捉することができる。このようにして、相補的な情報を提供する２つの異なる機能を単一のセンサに組み合わせることができるという本発明者らの洞察に基づいている。

【0045】

本発明、特に、周囲によって反射されるようなレーザ光のパターンを表す光を受光しない画素において周囲の二次元画像を形成する光を検出するという概念は、さらに、測距システムが、ラインパターンやスポットパターンなどの特定の光パターンの反射の検出に依存しているため、いつでも、合計画素数のごく一部のみが実際には使用されているという発明者の洞察に基づく。この特定の概念は、射影パターンの一部を受光しない画素が、受光した光から画像を形成することができるように、測距機能（光パターンの投射および検出）が動作しているときに十分な周囲光が検出器に達するときに使用され得る。

【0046】

パターン反射ベースの距離検知は、レーザ光の投影パターンによって照らされた点においてのみ３次元情報を含む深度マップを提供するが、その間に捕捉された２Ｄ画像は、背景全体の可視的なスナップショットを提供する。深度マップは２Ｄ画像に登録することができ、深度情報は、深度マップ値を補間することによって２Ｄ画像内のすべての画素について取得することができる。２Ｄ画像と３Ｄ情報は同じセンサから得られるので、異なる画像間に視差がなく、これは登録を容易にする。

【0047】

好ましくは、深度マップ値の補間は、２Ｄ画像内の画素値によって支援される。したがって、例えば、２Ｄ画像内の規則的な輝度または色勾配に対応する異なる深度マップ値の間の領域は、線形補間によって深度の次元において補間され得る。輝度値または色値の急激なステップを含む異なる深度マップ値間の領域は、輝度値または色値のステップと一致するようにされる深度値のステップで、段階的に一定の深度値によって補間されてもよい。

【0048】

結合された２Ｄ／３Ｄ画像は、別々に撮影されたソースのいずれよりも周囲に関する一層多くの情報を結合している。機械的な可視化システムには、歩行者、車両、固定物、破片、路面の不均一性などの環境内の関連する特徴を検出するために、結合された２Ｄ／３Ｄ画像が供給されてもよい。

【0049】

２Ｄ画像は、フレーム間で（例えば一連のパルス間で）発生するタイムスロットで捕捉されることが好ましい。例示的なタイミング図を図５に示す。（本発明によらない）ａの図では、（それぞれが一連のパルス、例えば図４の一連のパルス３０を表す）５つの連続フレームがすべて３Ｄ測距感知（ｒａｎｇｅ ｓｅｎｓｉｎｇ）に使用される。ｄの図において、最初の４つのフレームのうちの１つのフレームは、残りのフレームと全く同じ持続時間の２Ｄ画像捕捉タイムスロットによって置き換えられる。それ故、フレームの全体的な流れ（ケイデンス）は同じままであるが、フレームタイムスロットの７５％しか測距感知のために使用されていない（当業者であれば、この数字は用途の要求に従って変化してもよく、距離検知のために使用される相対的な時間は、例えば、１０％、２０％、２５％、３３％、４０％、５０％、６０％、６７％、７５％、８０％などでもよい。）。ｂまたはｃの図において、２Ｄ画像捕捉に使用される時間は、それぞれ測距感知フレームよりも長くまたは短くなっている。

【0050】

一般に、２Ｄ画像捕捉に使用される時間は、所望の露光時間に応じて選択されてもよく、これは、十分な量の光を画素に蓄積するのに十分長く、（周囲の物体及び／又はセンサが動いているときには）被写体ブレを回避するのに十分短くなければならない。図７のｂの図を参照して以下に説明されるように、２Ｄ画像捕捉に使用されるタイムスロットはまた、異なる波長帯域の光（例えば、ＲＧＢ画像を生成するための赤、緑、および青の光）の連続捕捉を可能にするように拡張され得る。

【0051】

前述の国際特許出願公開第ＷＯ２０１５／００４２１３Ａ１号、欧州特許出願第１５１９１２８８．８号明細書に詳細に説明されているように、正確で長い範囲の距離検知を確実にするために、センサに到達する光が、投影された光のパターンの所望の反射に実質的に制限されるように、センサに到達する信号から周囲光（特に太陽光）を除去するためのいくつかの対策を講じなければならない。これらの手段には、狭帯域フィルタ、および狭帯域フィルタに対して実質的に垂直な経路で入射反射光を導く光学系の使用が含まれる。

【0052】

測距検知能力を最適化するのに必要な手段は、２Ｄ画像カメラとしての画素アレイの有用性を制限する。センサは、使用時には通常動いている車両に搭載されているため、１回の露光で捕捉される光の総量を増やすための露光時間の増加は、許容できる量の被写体ブレによって制限される。これは厳しい制限である。

【0053】

これらの悪影響を考慮して、本発明者らは、以下の任意選択の特徴が２Ｄ画像捕捉においてより良い性能をもたらすことを見出した。

【0054】

第１の解決策は、一連のパルスと同期してアクティブになり、２Ｄ画像が捕捉された時点で非アクティブになるように電子的または電気機械的に制御することができる帯域通過フィルタをセンサ側に使用することからなる。

【0055】

２番目の解決策は、一連のパルスと一致しない時点で光束を周囲に投射するように構成される照明手段をシステムに提供することである。そのような照明手段は、暗い場所での従来の撮影方法でしばしば行われるように、フラッシュ形式の照明を提供することができる。投影手段２１０および照明手段は、共通の光源、特にＶＣＳＥＬアレイを共有してもよい。これにより、狭帯域フィルタが最適化されているのと同じ波長帯域で「フラッシュ」を確実に放射することができ、それによって、画素アレイに到達する光量が最大になる。共通光源がＶＣＳＥＬアレイである場合、照明手段はさらに、（一連のパルスと一致しない）２Ｄ画像が撮られる時点で作動するように構成されたアクティブに操向される拡散板を含めてもよく、これにより、ＶＣＳＥＬアレイから生じる光を拡散させて（一連のスポットの代わりに）所望の光束を形成する。照明手段はヘッドライトアセンブリと一体化されてもよく、それによって光源は、センサ側で狭帯域フィルタを通過することができるスペクトルの部分において十分な光パワーを提供するように選択されなければならない。

【0056】

上記の考察に鑑みて、本発明によるシステムの１つの特に有利な実施形態は上述の飛行時間に基づく原理に従って動作し、それによって、ＶＣＳＥＬアレイが提供されて離散スポットのパルスパターンを、特徴付けられた背景上に投影する。その反射は、ＶＣＳＥＬアレイによって放射された波長のみを実質的に通過させるように構成された狭帯域通過フィルタを備えたＣＭＯＳベースのセンサアレイによって検出される。２Ｄ画像が捕捉されるべき瞬間に背景を照らすために、（典型的には約８６０ｎｍの狭い波長範囲の）同じ波長の光束を放射する個々のフラッシュ光が提供される。フラッシュ光によって放射された光は、検出器側の狭帯域通過フィルタを通過することもできる。好ましくは、５つのタイムスロット毎に、その４つが測距フレームを投影／検出するために使用され、５つのタイムスロットの残りの１つが２Ｄ画像を捕捉されるために使用される。

【0057】

本発明の実施形態では、検出器２２０の複数の画素のうち異なる画素には、異なる波長帯域の光がその時点で異なる画素に到達することを可能にする異なるフィルタが設けられる。これは、図６に概略的に示しており、近赤外（ＮＩＲ：Ｎｅａｒ ＩｎｆｒａＲｅｄ）光、赤色光、緑色光、および青色光用のそれぞれのフィルタを備えた、異なる画素（または画素の異なるウェル）を有する画素アレイが示されている。

【0058】

本発明の他の実施形態では、検出器２２０の複数の画素は、異なる波長帯域の光が異なる時点で複数の画素に到達することを可能にする時間依存フィルタを備えている。これは図７のａに概略的に示されており、赤、緑、および青の光を捕捉するために別々のタイムスロットが設けられている。図７のｂでは、同じタイムスロットの連続する部分で赤、緑、および青の光を連続して捕捉できるようにタイムスロットが拡張されている。

【0059】

これらの実施形態の組み合わせにより、カラーディスプレイ上にレンダリングするのに適しているＲＧＢ２Ｄ画像を捕捉することを可能にする。

【0060】

本発明はまた、車両の周囲の領域を特徴付けるように構成されたような、請求項のいずれかに記載のシステムを備える車両（特に、路上走行車両または鉄道車両）に関する。

【0061】

本発明は、別個のシステムおよび方法の実施形態を参照して上に説明されてきたが、これは目的を明確にするためにすぎない。当業者であれば、システムまたは方法のみに関連して説明した特徴を方法またはシステムにも適用できることを理解するであろう。それぞれ同じ技術的効果と利点がある。さらに、本発明の範囲はこれらの実施形態に限定されず、添付の特許請求の範囲によって定義される。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】