IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

▶ 日産自動車株式会社の特許一覧

<>
  • 特開-駐車支援方法及び駐車支援装置 図1
  • 特開-駐車支援方法及び駐車支援装置 図2
  • 特開-駐車支援方法及び駐車支援装置 図3A
  • 特開-駐車支援方法及び駐車支援装置 図3B
  • 特開-駐車支援方法及び駐車支援装置 図4A
  • 特開-駐車支援方法及び駐車支援装置 図4B
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024054292
(43)【公開日】2024-04-16
(54)【発明の名称】駐車支援方法及び駐車支援装置
(51)【国際特許分類】
   B60R 99/00 20090101AFI20240409BHJP
   G08G 1/16 20060101ALI20240409BHJP
   G06T 7/00 20170101ALI20240409BHJP
【FI】
B60R99/00 351
B60R99/00 330
G08G1/16 D
G06T7/00 650Z
【審査請求】有
【請求項の数】11
【出願形態】OL
(21)【出願番号】P 2024018729
(22)【出願日】2024-02-09
(62)【分割の表示】P 2021067088の分割
【原出願日】2017-07-07
(71)【出願人】
【識別番号】000003997
【氏名又は名称】日産自動車株式会社
(74)【代理人】
【識別番号】100083806
【弁理士】
【氏名又は名称】三好 秀和
(74)【代理人】
【識別番号】100111235
【弁理士】
【氏名又は名称】原 裕子
(74)【代理人】
【識別番号】100170575
【弁理士】
【氏名又は名称】森 太士
(72)【発明者】
【氏名】鈴木 康啓
(72)【発明者】
【氏名】佐藤 行
(72)【発明者】
【氏名】田中 大介
(72)【発明者】
【氏名】櫻井 康裕
(72)【発明者】
【氏名】山中 僚大
(72)【発明者】
【氏名】小林 隼也
(57)【要約】
【課題】空き駐車スペースを示す画像を適切な位置に表示することができる駐車支援方法及び駐車支援装置を提供する。
【解決手段】駐車支援方法は、自車両が停止したか否かを判定し、自車両が停止したと判定した場合、乗員からの入力により駐車制御を開始する前において、自車両を含む領域を上方から見た周囲画像における空き駐車スペースの位置に、空き駐車スペースであることを示す第1支援画像を表示する。
【選択図】図1
【特許請求の範囲】
【請求項1】
自車両の周囲の空き駐車スペースを検出し、
前記自車両が停止したか否かを判定し、
前記自車両が停止していると判定した場合は、乗員からの入力により駐車制御を開始する前において、前記自車両を含む領域を上方から見た周囲画像における前記空き駐車スペースの位置に、前記空き駐車スペースであることを示す第1支援画像を表示し、前記自車両が停止していないと判定した場合に、前記乗員からの入力により駐車制御を開始する前において、前記第1支援画像を表示しない
ことを特徴とする駐車支援方法。
【請求項2】
自車両の周囲の空き駐車スペースを検出し、
前記自車両が停止したか否かを判定し、
前記自車両が停止していると判定した場合は、乗員からの入力により駐車制御を開始する前において、前記自車両を含む領域を上方から見た周囲画像における前記空き駐車スペースの位置に、前記空き駐車スペースであることを示す第1支援画像が重畳された前記周囲画像を表示部に出力し、前記自車両が停止していないと判定した場合は、前記乗員からの入力により駐車制御を開始する前において、前記第1支援画像が重畳されない前記周囲画像を前記表示部に出力する
ことを特徴とする駐車支援方法。
【請求項3】
前記第1支援画像を表示した後、前記自車両の速度が、所定速度以上になるまで前記第1支援画像の表示を継続する
ことを特徴とする請求項1または2に記載の駐車支援方法。
【請求項4】
前記自車両の速度が0であるか否かを判定し、
前記自車両の速度が0である場合、前記自車両が停止したと判定する
ことを特徴とする請求項1~3のいずれか1項に記載の駐車支援方法。
【請求項5】
前記自車両のパーキングブレーキが作動しているか否かを判定し、
前記パーキングブレーキが作動している場合、前記自車両が停止したと判定する
ことを特徴とする請求項1~3のいずれか1項に記載の駐車支援方法。
【請求項6】
前記自車両のシフトレバーがパーキングレンジにあるか否かを判定し、
前記シフトレバーがパーキングレンジにある場合、前記自車両が停止したと判定する
ことを特徴とする請求項1~3のいずれか1項に記載の駐車支援方法。
【請求項7】
前記自車両の速度が予め定めた所定速度以下であるか否か判定し、
前記所定速度以下と判定した場合、前記自車両が停止したと判定する
ことを特徴とする請求項1~3のいずれか1項に記載の駐車支援方法。
【請求項8】
前記自車両の速度が予め定めた所定速度以下であるか否か判定し、
前記所定速度以下と判定した場合に、前記自車両で減速操作が行われているか判定し、
前記減速操作が行われていると判定した場合に前記自車両が停止すると推定し、前記自車両が停止したと判定する
ことを特徴とする請求項1~3のいずれか1項に記載の駐車支援方法。
【請求項9】
前記自車両が停止したか否かを判定し、
前記自車両が停止していないと判定した場合、前記第1支援画像の表示を禁止する
ことを特徴とする請求項1~8のいずれか1項に記載の駐車支援方法。
【請求項10】
自車両の周囲の空き駐車スペースを検出するセンサ情報処理部と、
自車両の周囲を上方から見た周囲画像を生成する周囲画像生成部と、
前記周囲画像における空き駐車スペースの位置に、前記空き駐車スペースであることを示す第1支援画像を表示する画像合成部と、
前記自車両が停止したか否かを判定する速度判定部と、を備え、
前記速度判定部によって前記自車両が停止したと判定された場合は、前記画像合成部は、乗員からの入力により駐車制御を開始する前において、前記周囲画像における前記空き駐車スペースの位置に、前記第1支援画像を表示し、前記速度判定部によって前記自車両が停止していないと判定された場合に、前記乗員からの入力により駐車制御を開始する前において、前記画像合成部が前記第1支援画像を表示しない
ことを特徴とする駐車支援装置。
【請求項11】
自車両の周囲の空き駐車スペースを検出するセンサ情報処理部と、
自車両の周囲を上方から見た周囲画像を生成する周囲画像生成部と、
前記周囲画像における空き駐車スペースの位置に、前記空き駐車スペースであることを示す第1支援画像を表示する画像合成部と、
前記自車両が停止したか否かを判定する速度判定部と、を備え、
前記速度判定部によって前記自車両が停止したと判定された場合は、前記画像合成部は、乗員からの入力により駐車制御を開始する前において、前記周囲画像における前記空き駐車スペースの位置に、前記第1支援画像が重畳された前記周囲画像を表示部に出力し、前記速度判定部によって前記自車両が停止していないと判定された場合に、前記乗員からの入力により駐車制御を開始する前において、前記画像合成部が、前記第1支援画像が重畳されない前記周囲画像を前記表示部に出力する
ことを特徴とする駐車支援装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、駐車支援方法及び駐車支援装置に関する。
【背景技術】
【0002】
従来より、乗員の駐車を支援する発明が知られている(特許文献1)。特許文献1に記載された発明は、走行中に空き駐車スペースを探索し、空き駐車スペースを検出した場合、空き駐車スペースを示す画像をディスプレイに表示する。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開2008-96362号
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、特許文献1に記載された発明のように、走行中に、空き駐車スペースを示す画像を表示した場合、処理遅れなどが原因で画像を適切な位置に表示できないおそれがある。
【0005】
本発明は、上記問題に鑑みて成されたものであり、その目的は、空き駐車スペースを示す画像を適切な位置に表示することができる駐車支援方法及び駐車支援装置を提供することである。
【課題を解決するための手段】
【0006】
本発明の一態様に係る駐車支援方法は、自車両の周囲の空き駐車スペースを検出し、自車両が停止したか否かを判定し、自車両が停止していると判定した場合は、乗員からの入力により駐車制御を開始する前において、自車両を含む領域を上方から見た周囲画像における空き駐車スペースの位置に、空き駐車スペースであることを示す第1支援画像を表示し、自車両が停止していないと判定した場合に、乗員からの入力により駐車制御を開始する前において、第1支援画像を表示しない。
【発明の効果】
【0007】
本発明によれば、空き駐車スペースを示す画像を適切な位置に表示することができる。
【図面の簡単な説明】
【0008】
図1図1は、本発明の実施形態に係る駐車支援装置の全体構成図である。
図2図2は、本発明の実施形態に係る駐車支援装置の一部の構成図である。
図3A図3Aは、本発明の実施形態に係る駐車支援装置の動作例を説明する図である。
図3B図3Bは、本発明の実施形態に係る駐車支援装置の他の動作例を説明する図である。
図4A図4Aは、本発明の実施形態に係る駐車支援装置の一動作例を説明するフローチャートである。
図4B図4Bは、本発明の実施形態に係る駐車支援装置の一動作例を説明するフローチャートである。
【発明を実施するための形態】
【0009】
以下、本発明の実施形態について、図面を参照して説明する。図面の記載において同一部分には同一符号を付して説明を省略する。本実施形態に係る駐車支援装置は、自動運転と手動運転とを切り替えることが可能な車両に適用される。なお、本実施形態における自動運転とは、例えば、ブレーキ、アクセル、ステアリングなどのアクチュエータの内、少なくとも何れかのアクチュエータを乗員の操作なしに制御している状態のことを指す。そのため、その他のアクチュエータが乗員の操作により作動していたとしても構わない。また、自動運転とは、加減速制御、横位置制御などのいずれかの制御が実行されている状態であればよい。また、本実施形態における手動運転とは、例えば、ブレーキ、アクセル、ステアリングを乗員が操作している状態のことを指す。なお、本発明の実施形態において、自動運転と手動運転の両方で適用可能である。加えて、本発明の実施形態において、空き駐車スペースを検出している時、空き駐車スペースを検出した時、空き駐車スペースに駐車(移動)している時、空き駐車スペースの側を走行している時、空き駐車スペースがなくても駐車場を走行している時等、駐車スペースを有する駐車場を走行している時であれば、いずれのシーンも問わず適用可能である。
【0010】
(駐車支援装置の構成)
図1を参照して、本実施形態に係る駐車支援装置の構成を説明する。駐車支援装置は、コントローラ1と、カメラ2a~2dと、舵角センサ3と、車輪速センサ6と、空間認識センサ7と、入力インターフェース8と、表示部9と、車両制御ECU10と、アクチュエータ11とを備える。
【0011】
カメラ2a~2dは、CCD(charge-coupled device)やCMOS(complementary metal oxide semiconductor)などの撮像素子を有し、自車両の周囲を撮像する。カメラ2aは、自車両の前方に搭載され、自車両の前方を撮像する。カメラ2bは、自車両の後方に搭載され、自車両の後方を撮像する。カメラ2cは、自車両の左側に搭載され、自車両の左側を撮像する。カメラ2dは、自車両の右側に搭載され、自車両の右側を撮像する。カメラ2a~2dは、撮像した画像をコントローラ1に出力する。なお、カメラ2a~2dは、自車両の周囲を撮像する装置であり、自車両自体を撮像する装置ではない。そこで、後述する画像合成部1023が俯瞰画像を表示する際には、画像合成部1023はアイコン記憶部103に記憶されているアイコン(自車両を模した画像)を使用する。
【0012】
舵角センサ3は、自車両の操舵角を検出し、検出した操舵角をコントローラ1に出力する。車輪速センサ6は、自車両の速度を検出し、検出した速度を速度判定部106に出力する。
【0013】
空間認識センサ7は、自車両の周囲に存在する物体を検出するためのセンサであり、例えば、レーザレンジファインダである。レーザレンジファインダは、対象物に向けて赤外線レーザを照射し、その反射光の強度により対象物までの距離を測定する。レーザレンジファインダは、測定した距離をポイントクラウド情報として取得し、ポイントクラウド情報をセンサ情報処理部104に出力する。自車両の周囲に存在する物体とは、他車両、バイク、自転車、歩行者を含む移動物体、及び駐車車両を含む静止物体である。なお、空間認識センサ7は、レーザレンジファインダに限定されない。空間認識センサ7は、対象物までの距離、対象物の有無を検出できればよく、例えば、超音波を利用するクリアランスソナーでもよく、単眼カメラでもよく、一対のカメラを有するステレオカメラでもよい。
【0014】
入力インターフェース8は、自車両の乗員による入力を受け付ける装置である。入力インターフェース8は、例えば、表示部9に設けられるタッチパネルである。なお、入力インターフェース8は、ジョイスティックや操作スイッチでもよく、音声入力装置でもよい。
【0015】
コントローラ1は、各種センサから取得したデータを処理する回路であり、例えばCPU(中央処理装置)、メモリ、及び入出力部を備える汎用のマイクロコンピュータである。マイクロコンピュータをコントローラ1として機能させるためのコンピュータプログラムを、マイクロコンピュータにインストールして実行する。これにより、マイクロコンピュータは、コントローラ1として機能する。なお、ここでは、ソフトウェアによってコントローラ1を実現する例を示すが、もちろん、以下に示す各情報処理を実行するための専用のハードウェアを用意して、コントローラ1を構成することも可能である。コントローラ1は、複数の情報処理回路として、周囲画像生成部101と、合成画像生成部102と、アイコン記憶部103と、センサ情報処理部104と、駐車支援演算部105と、速度判定部106と、を備える。また、合成画像生成部102は、支援画像生成部1021と、表示切替制御部1022と、画像合成部1023と、を備える。
【0016】
周囲画像生成部101(周囲画像生成回路)は、4台のカメラ2a~2dで撮像された画像を用いて、自車両を上方から見下ろした俯瞰画像(周囲画像)を生成する。なお、周囲画像は、俯瞰画像、鳥瞰画像等、自車両と駐車スペースの位置関係がわかるものであれば画像の形態は問わない。加えて、俯瞰画像、鳥瞰画像の生成方法は既知の技術であるので、詳細な説明を省略する。
【0017】
センサ情報処理部104(センサ情報処理回路)は、空間認識センサ7から取得した情報を用いて、自車両が走行する走路を推定する。また、センサ情報処理部104は、推定した走路の近傍に存在する駐車領域(駐車枠)を推定する。またセンサ情報処理部104は、自車両の周囲の空き駐車スペースを検出する。センサ情報処理部104は、推定した走路や駐車枠に基づいて自車両が走行可能な範囲を推定する。また、センサ情報処理部104は、路面の白線を用いて駐車枠を検出してもよい。
【0018】
速度判定部106(停止判定回路)は、車輪速センサ6から取得した速度を用いて、自車両の速度を判定する。速度判定部106は、判定結果を表示切替制御部1022に出力する。
【0019】
支援画像生成部1021は、駐車を支援するための支援画像を生成する。なお、支援画像は、予めアイコン記憶部103に記憶されていてもよい。支援画像が、アイコン記憶部103に記憶されている場合、支援画像生成部1021は、支援画像をアイコン記憶部103から読み出せばよい。支援画像生成部1021は、生成した支援画像を表示切替制御部1022に出力する。
【0020】
表示切替制御部1022は、速度判定部106による判定結果に応じて、支援画像生成部1021から取得した支援画像を画像合成部1023に出力するか否かを切り替える。例えば、表示切替制御部1022は、自車両の速度が0km/hである場合、支援画像を画像合成部1023に出力する。詳細は、後述する。
【0021】
画像合成部1023(画像表示回路)は、周囲画像生成部101によって生成された周囲画像に対し、アイコン記憶部103から取得したアイコン(自車両を模した画像)を重畳して、合成画像を生成する。また、画像合成部1023は、表示切替制御部1022から支援画像を取得した場合、この支援画像を周囲画像に重畳する。画像合成部1023は、合成した画像を表示部9に出力する。
【0022】
駐車支援演算部105は、入力インターフェース8に入力された情報と、センサ情報処理部104が得たデータと、舵角センサ3が検出する舵角と、車輪速センサ6が検出する車速とに基づいて、自車両の制御信号を算出する。駐車支援演算部105は、算出した制御信号を車両制御ECU10に出力する。
【0023】
車両制御ECU10は、駐車支援演算部105から取得した制御信号などに基づいて、自車両の駆動・制動、操舵におけるアクチュエータ11の駆動を自動制御する。
【0024】
表示部9は、乗員に対し様々な情報を表示する装置であり、例えば、車室内に設けられるナビゲーション用のディスプレイである。
【0025】
次に、図2を参照して、駐車支援演算部105の詳細について説明する。図2に示すように、駐車支援演算部105は、目標駐車枠設定部1051と、駐車開始位置設定部1052と、自己位置推定部1053と、駐車経路生成部1054と、駐車経路追従制御部1055と、目標速度生成部1056とを備える。
【0026】
目標駐車枠設定部1051は、乗員が入力インターフェース8に入力した駐車位置を、目標駐車位置として設定する。目標駐車枠設定部1051は、設定した目標駐車位置を駐車開始位置設定部1052及び駐車経路生成部1054に出力する。
【0027】
駐車開始位置設定部1052は、目標駐車位置に駐車するための適した駐車方式を決定し、決定した駐車方式に適した駐車開始位置を設定する。駐車方式とは、例えば縦列駐車や並列駐車、後方駐車や前方駐車などである。駐車開始位置設定部1052は、設定した駐車開始位置を駐車経路生成部1054に出力する。
【0028】
自己位置推定部1053は、車輪速センサ6及び舵角センサ3の検出データ等に基づいて、自車両の現在位置を推定する。低速、且つ前輪操舵車においては、後輪車軸中心の走行距離と前輪操舵角との関係に基づいて、自車両の位置、及び姿勢を推定するデッドレコニング手法を用いるのが一般的である。デッドレコニング手法は、駐車動作等の限られた区間の走行を考える場合において有用である。その他の例として、自己位置推定部1053は、空間認識センサ7で検出される検出データと自車両との相対位置関係、カメラ2a~2dにより撮影される路面の白線や物体認識結果と自車両との相対位置関係、などにより自己位置を推定することも可能である。また、自己位置推定部1053は、位置検出センサを用いて、自車両の絶対位置、すなわち、所定の基準点に対する自車両の位置を推定してもよい。位置検出センサは、自車両に搭載され、GPS(グローバル・ポジショニング・システム)やオドメトリなど自車両の絶対位置を計測する装置である。自己位置推定部1053は、推定した自己位置を駐車経路追従制御部1055に出力する。
【0029】
駐車経路生成部1054は、駐車開始位置設定部1052によって設定された駐車開始位置から目標駐車位置までの駐車経路を生成する。駐車経路生成部1054は、例えば、乗員に違和感を与えないように、切り返し回数や操舵量がもっとも少なくなるような駐車経路を生成する。駐車経路生成部1054は、生成した駐車経路を駐車経路追従制御部1055及び目標速度生成部1056に出力する。
【0030】
駐車経路追従制御部1055は、駐車経路生成部1054によって生成された駐車経路と、自己位置推定部1053によって推定された自己位置とに基づいて、駐車経路に沿って自動的な駐車制御を行うための制御信号を生成する。例えば、駐車経路追従制御部1055は、操舵角やシフト位置に関する制御信号を生成する。駐車経路追従制御部1055は、生成した制御信号を車両制御ECU10に出力する。
【0031】
目標速度生成部1056は、駐車経路生成部1054によって生成された駐車経路に沿って自動的な駐車制御を行うための制御信号を生成する。例えば、目標速度生成部1056は、速度(アクセル量やブレーキ量)に関する制御信号を生成する。目標速度生成部1056は、生成した制御信号を車両制御ECU10に出力する。
【0032】
車両制御ECU10は、駐車経路追従制御部1055と目標速度生成部1056とによって生成された制御信号に基づいてアクチュエータ11を制御して、自動的な駐車制御を実現する。
【0033】
(駐車支援装置の動作例)
次に、図3A及び図3Bに示す周囲画像20を参照して、駐車支援装置の一動作例を説明する。
【0034】
図3Aに示すシーンは、自車両22が駐車場内を走行しながら、空き駐車スペースを検出するシーンである。図3Aに示すシーンでは、自車両22の速度は0km/hより大きいものとする。図3Bに示すシーンも空き駐車スペースを検出するシーンであるが、図3Bに示すシーンでは、自車両22の速度は0km/hとする。
【0035】
図3Aに示すように、センサ情報処理部104が、自車両22の周囲において、空き駐車スペースを検出して、空き駐車スペース23を検出した場合、速度判定部106は、自車両22が走行中か否かを判定する。具体的には、速度判定部106は、自車両22の速度が0km/hより大きいか否かを判定し、自車両22の速度が0km/hより大きい場合、速度判定部106は、自車両22は走行中であると判定する。
【0036】
図3Aに示すように、速度判定部106が、自車両22は走行中であると判定したとき、画像合成部1023は、周囲画像20に支援画像26(第2支援画像)を重畳する。そして、画像合成部1023は、支援画像26を重畳した合成画像を表示部9に表示する。支援画像26は、自車両22の周囲において、空き駐車スペース23が検出されたことを示す画像である。支援画像26は、空き駐車スペース23そのものを示す画像ではない。したがって、支援画像26は、空き駐車スペース23とは異なる一定の位置に重畳される。例えば、本実施形態において、支援画像26は、周囲画像20の上部中央に重畳される。
【0037】
このように、自車両22が走行中において、支援画像26が、空き駐車スペース23とは異なる位置で表示されることによって、乗員は、支援画像26を確認することにより、空き駐車スペース23の存在を容易に把握することができる。これにより、乗員は、空き駐車スペース23に駐車するための行動を取ることが可能になる。
【0038】
次に、図3Bを参照して、自車両22の速度が0km/hの場合について説明する。図3Bに示すように、センサ情報処理部104が、自車両22の周囲において、空き駐車スペース23を検出した場合、速度判定部106は、自車両22が停止中か否かを判定する。具体的には、速度判定部106は、自車両22の速度が0km/hか否かを判定し、自車両22の速度が0km/hの場合、速度判定部106は、自車両22は停止中であると判定する。
【0039】
図3Bに示すように、速度判定部106が、自車両22は停止中であると判定したとき、画像合成部1023は、支援画像24または支援画像25(第1支援画像)を空き駐車スペース23に重畳する。支援画像24または支援画像25は、駐車スペースが空き駐車スペースであることを示す画像である。なお、支援画像25は、駐車スペースが空き駐車スペースであり、かつ推奨駐車スペースを示す画像である。推奨駐車スペースとは、例えば、駐車しやすいスペースである。また、推奨駐車スペースは、駐車時間が短いスペースでもよく、駐車経路が短いスペースでもよい。また、推奨駐車スペースは、駐車経路が急でないスペースでもよく、後退駐車できるスペースでもよく、出庫しやすいスペースでもよい。支援画像24は、駐車スペースが単に空いていることを示す画像である。
【0040】
このように、自車両22が停止中において、支援画像24または支援画像25が、空き駐車スペース23の適切な位置に表示されることによって、乗員は、空き駐車スペース23が空いていることを容易に把握することができる。これにより、乗員は、所望の空き駐車スペースに駐車するための行動を取ることが可能になる。加えて、例えば、本実施形態にように自動的な駐車制御が可能であれば、乗員が支援画像25(推奨駐車スペース)をタッチすると、自動的に目標駐車位置までの駐車制御が行われる。
【0041】
なお、図3Bに示すように、自車両22が停止しているとき、画像合成部1023は、図3Aに示す支援画像26を重畳しない。自車両22が停止しているとき、画像合成部1023は、空き駐車スペース23に支援画像24または支援画像25を重畳するため、支援画像26を重畳しなくても、乗員は空き駐車スペース23の存在を容易に把握することができるからである。なお、自車両22が停止しているとき、画像合成部1023は、支援画像26を重畳しないと説明したが、これに限定されない。例えば、画像合成部1023は、支援画像26の色を薄くする(透明度を調整する)、色を変える(例えば、ブルーからグレー)などして支援画像26を重畳してもよい。
【0042】
一方、図3Aに示すように、自車両22が走行しているとき、画像合成部1023は、図3Bに示す支援画像24や支援画像25を周囲画像20に重畳しない。換言すれば、自車両22が走行しているとき、画像合成部1023は、支援画像24や支援画像25を重畳することを禁止する。以下、この理由について説明する。
【0043】
まず、画像合成部1023が、支援画像24または支援画像25を空き駐車スペース23に重畳する順序について説明する。最初に画像合成部1023は、周囲画像20の空き駐車スペース23を認識する。次に、画像合成部1023は、認識した空き駐車スペース23に支援画像24または支援画像25を重畳する。画像合成部1023がこのような処理を行うときに、自車両22が移動すると、画像合成部1023が認識した周囲画像20の空き駐車スペース23も移動してしまう。つまり、画像合成部1023が空き駐車スペース23を認識し、認識した空き駐車スペース23に支援画像24または支援画像25を重畳しようとする次の瞬間には、認識した時の空き駐車スペース23位置から移動している。このように、画像合成部1023が空き駐車スペース23を認識したときと、認識した空き駐車スペース23に支援画像24または支援画像25を重畳するときには、タイムラグが発生する。このタイムラグにより、空き駐車スペース23の位置と、支援画像24または支援画像25の位置がずれてしまうおそれがある。すなわち、自車両22が走行中において、画像合成部1023が、支援画像24または支援画像25を周囲画像20の空き駐車スペース23に重畳する場合、支援画像24または支援画像25を適切な位置に重畳できないおそれがある。なお、このようなずれは、自車両22の速度が速いほど大きくなる。
【0044】
そこで、本実施形態では、自車両22が走行しているときは、画像合成部1023は、空き駐車スペース23に支援画像24または支援画像25を表示しない。これにより、空き駐車スペース23の位置と支援画像24または支援画像25の位置とのずれを抑制することができる。これにより、駐車支援装置は、乗員に対し、不確かな情報を与えることを防止することができる。なお、図3Aに示すように、画像合成部1023は、自車両22が走行しているときは、空き駐車スペース23に支援画像24または支援画像25を表示しない代わりに、空き駐車スペース23とは異なる位置に支援画像26を重畳する。これにより、乗員は、支援画像26を確認することにより、空き駐車スペース23の存在を容易に把握することができる。支援画像26は、空き駐車スペース23とは異なる位置に表示されるため、画像合成部1023は、上述したタイムラグを考慮する必要はない。
【0045】
そして、図3Bに示すように、自車両22が停止しているとき、画像合成部1023は、空き駐車スペース23に支援画像24または支援画像25を表示する。自車両22が停止しているため、上述したタイムラグは発生しないため、駐車スペース23の位置と支援画像24または支援画像25の位置がずれることはない。自車両22が停止しているとき、画像合成部1023は、空き駐車スペース23に支援画像24または支援画像25を表示することにより、画像合成部1023は、適切な位置に支援画像24または支援画像25を表示することができる。
【0046】
また、画像合成部1023は、支援画像24または支援画像25を空き駐車スペース23の位置に表示した後、自車両22の速度が、所定速度以上となるまでは、支援画像24または支援画像25を継続して表示する。これにより、乗員は、自車両22の速度が、所定速度以上となるまでは、所望の空き駐車スペースを選択することができる。
【0047】
自車両22の速度が所定速度以上となるまで、画像合成部1023が支援画像24または支援画像25を継続して表示する理由は、自車両22の速度が所定速度以上となるまでは、空き駐車スペース23の位置と支援画像24または支援画像25の位置とのずれが抑制されるからである。換言すれば、自車両22の速度が所定速度以上となるまでは、画像合成部1023は、空き駐車スペース23を精度よく追跡できるからである。
【0048】
画像合成部1023は、空き駐車スペース23を示す位置データを時系列データとして追跡することができる。空き駐車スペース23を示す位置データは、地図上で記憶される。自車両22が停止しているときは、自車両22が走行しているときと比較して、画像合成部1023は、空き駐車スペース23を示す位置データを精度よく取得できる。これにより、画像合成部1023は、空き駐車スペース23を示す位置と相対的な位置関係を有する支援画像24または支援画像25を精度よく空き駐車スペース23に表示することができる。その後、自車両22が停止した状態から動き出した場合、自車両22の移動に合わせて自車両22を地図上で動かすことにより、画像合成部1023は、空き駐車スペース23を精度よく追跡することができる。これにより、画像合成部1023は、支援画像24または支援画像25を精度よく空き駐車スペース23に表示することができる。ただし、車輪速センサ6の測定誤差、オドメトリによる自己位置推定の誤差、空き駐車スペース23の検出誤差などが積み重なると、上述したずれが発生するおそれがあるため、自車両22の速度が、所定速度以上となったときは、画像合成部1023は、支援画像24または支援画像25を表示しない。これにより、画像合成部1023は、乗員に不確かな情報を与えることを防止できる。なお、上述の地図データは、駐車支援装置に予め記憶されていてもよく、クラウドコンピューティングにより外部の地図データサーバから取得されてもよい。また、画像合成部1023は、車車間通信、路車間通信を用いて地図データを取得してもよい。なお、所定速度は、特に限定されないが、例えば3km/h~5km/hである。
【0049】
次に、図4のフローチャートを参照して、動作例を説明する。
【0050】
ステップS101において、センサ情報処理部104は、空間認識センサ7から取得した情報に基づいて、空き駐車スペースを検出する。処理はステップS103に進み、センサ情報処理部104が、自車両22の周囲において、空き駐車スペースを検出した場合(ステップS103でYes)、処理はステップS105に進む。一方、ステップS103において、センサ情報処理部104が、自車両22の周囲において、空き駐車スペースを検出しない場合(ステップS103でNo)、処理は待機する。
【0051】
ステップS105において、速度判定部106は、自車両22が停止中か否かを判定するために、自車両22の速度が0km/hか否かを判定する。速度判定部106が、自車両22は停止中でないと判定した場合(ステップS105でNo)、処理はステップS107に進み、画像合成部1023は、支援画像24または支援画像25を空き駐車スペース23に重畳しない。その理由は、自車両22が走行中において、画像合成部1023は、支援画像24または支援画像25を空き駐車スペース23に表示した場合、空き駐車スペース23の位置と、支援画像24または支援画像25の位置がずれてしまうおそれがあるからである。
【0052】
一方、速度判定部106が、自車両22は停止中であると判定した場合(ステップS105でYes)、処理はステップS109に進み、画像合成部1023は、図3Bに示すように、支援画像24または支援画像25を空き駐車スペース23に表示する。自車両22が停止しているため、タイムラグは発生せず、駐車スペース23の位置と支援画像24または支援画像25の位置がずれることはない。これにより、画像合成部1023は、支援画像24または支援画像25を適切な位置に重畳することができる。
【0053】
処理はステップS111に進み、速度判定部106は、自車両22の速度が所定速度以上か否かを判定する。自車両22の速度が所定速度より小さい場合(ステップS111でNo)、処理はステップS113に進み、画像合成部1023は、支援画像24または支援画像25を継続して表示する。自車両22の速度が所定速度以上となるまでは、画像合成部1023は、空き駐車スペース23を精度よく追跡することができ、駐車スペース23の位置と支援画像24または支援画像25の位置とのずれが抑制されるからである。一方、自車両22の速度が所定速度以上となった場合(ステップS111でYes)、処理はステップS107に進み、画像合成部1023は、支援画像24または支援画像25を空き駐車スペースに表示しない。自車両22の速度が所定速度以上となると、車輪速センサ6の測定誤差、オドメトリによる自己位置推定の誤差、空き駐車スペース23の検出誤差などが積み重なり、駐車スペース23の位置と支援画像24または支援画像25の位置とのずれが発生するおそれがあるためである。
【0054】
処理はステップS115に進み、乗員が入力インターフェース8を介して、所望の空き駐車スペースを選択した場合(ステップS115でYes)、処理はステップS117に進む。一方、乗員の入力がない場合、処理はステップS103に戻る。
【0055】
ステップS117において、目標駐車枠設定部1051は、乗員が選択した空き駐車スペースを目標駐車位置として設定する。また、駐車開始位置設定部1052は、駐車方式を決定し、決定した駐車方式に適した駐車開始位置を設定する。なお、このフローチャートでは、駐車方式を後退駐車として説明する。その後、処理は、ステップS119に進み、駐車経路生成部1054は、ステップS117で設定された駐車開始位置から目標駐車位置までの駐車経路を生成する。次に処理は、ステップS121に進み、車両制御ECU10は、自動的な駐車制御を開始する。
【0056】
次に処理は、ステップS123に進み、自己位置推定部1053は、自車両22がシフト位置を切替える位置に到達したか否かを判定する。自車両22がシフト位置を切替える位置に到達した場合(ステップS123でYes)、処理は、ステップS125に進み、車両制御ECU10は、シフト切替制御を実施する。その後、車両制御ECU10は、自動的な駐車制御を継続し、処理はステップS127に進む。一方、自車両22がシフト位置を切替える位置に到達していない場合(ステップS123でNo)、処理は、待機する。ステップS127において、自己位置推定部1053は、自車両22が目標駐車位置に到達したか否かを判定する。自車両22が目標駐車位置に到達した場合(ステップS127でYes)、処理はステップS129に進み、車両制御ECU10は、シフト位置をパーキングにするなどの制御を実施し、自動的な駐車制御は終了する。
【0057】
(作用効果)
以上説明したように、本実施形態に係る駐車支援装置によれば、以下の作用効果が得られる。
【0058】
センサ情報処理部104が、自車両22の周囲に空き駐車スペース23を検出したとき、速度判定部106は、自車両22が停止しているか否かを判定する。速度判定部106が、自車両22は停止していると判定した場合、図3Bに示すように、画像合成部1023は、周囲画像20における空き駐車スペース23の位置に、駐車スペースが空き駐車スペースであることを示す支援画像24または支援画像25を表示する。そして、画像合成部1023は、合成した画像を表示部9に表示する。自車両22が停止しているとき、タイムラグは発生せず、駐車スペース23の位置と支援画像24または支援画像25の位置とのずれは発生しない。これにより、駐車支援装置は、支援画像24または支援画像25を適切な位置に表示することができる。
【0059】
速度判定部106は、自車両22の速度が、0km/hである場合に、自車両22は停止していると判定する。この判定により、速度判定部106は、自車両22が停止していることを素早く判定できる。
【0060】
画像合成部1023は、支援画像24または支援画像25を表示した後、自車両22の速度が、所定速度以上になるまで支援画像24または支援画像25の表示を継続する。自車両22の速度が所定速度以上となるまでは、画像合成部1023は、空き駐車スペース23を精度よく追跡することができ、駐車スペース23の位置と支援画像24または支援画像25の位置とのずれが抑制されるからである。
【0061】
画像合成部1023は、支援画像24または支援画像25を表示した後、自車両22の速度が、所定速度以上になった場合は、支援画像24または支援画像25の表示を禁止する。自車両22の速度が所定速度以上となると、車輪速センサ6の測定誤差、オドメトリによる自己位置推定の誤差、空き駐車スペース23の検出誤差などが積み重なり、駐車スペース23の位置と支援画像24または支援画像25の位置とのずれが発生するおそれがあるためである。したがって、画像合成部1023は、支援画像24または支援画像25の表示を禁止することにより、乗員に対し、不確かな情報を与えることを防止することができる。
【0062】
画像合成部1023は、自車両22が停止していない時、つまり、自車両22が走行している時は、図3Aに示すように、空き駐車スペース23とは異なる一定の位置に支援画像26を表示する。これにより、乗員は、空き駐車スペース23の存在を容易に把握することができる。
【0063】
図3Aに示すように支援画像26を表示している時に、自車両22が停止した場合、画像合成部1023は、図3Bに示すように、支援画像26を支援画像24または支援画像25に切り替えて表示する。これにより、乗員は、空き駐車スペース23の位置を容易に把握することができる。
【0064】
画像合成部1023は、自車両22が停止していないとき、支援画像24または支援画像25の表示を禁止する。自車両22が走行中において、画像合成部1023が、支援画像24または支援画像25を空き駐車スペース23に表示した場合、空き駐車スペース23の位置と、支援画像24または支援画像25の位置がずれてしまうおそれがあるからである。したがって、画像合成部1023は、支援画像24または支援画像25の表示を禁止することにより、乗員に対し、不確かな情報を与えることを防止することができる。
【0065】
(その他の実施形態)
上記のように、本発明の実施形態を記載したが、この開示の一部をなす論述及び図面はこの発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態、実施例及び運用技術が明らかとなろう。
【0066】
本実施形態では、図3Aに示す支援画像26を四角形状で表し、図3Bに示す支援画像24または支援画像25を丸い形状で表したが、これに限定されない。支援画像26と支援画像24または支援画像25は、区別される形状であれば足りる。
【0067】
本実施形態では、速度判定部106は、自車両22の速度が0km/hである場合に、自車両22は停止していると判定したが、これに限定されない。自車両22の速度が0km/hであるときに、必ずしも自車両22が停止しているとはいえない。例えば、乗員がブレーキペダルを踏み、自車両22の速度を0km/hにしても、路面が濡れていたり、タイヤが減っていれば、自車両22は空走する可能性がある。つまり、速度メータが0km/hであっても、車輪速センサ6が検出する速度が0km/hであるとは限らない。したがって、速度判定部106は、マージンを設定し、自車両22の速度が所定速度以下の場合に、自車両22が停止したと判定してもよい。この判定により、速度判定部106は、様々な道路環境においても、自車両22の停止を判定することができる。
【0068】
また、速度判定部106は、自車両22のパーキングブレーキが作動しているか否かを判定し、パーキングブレーキが作動している場合、自車両22が停止したと判定してもよい。この判定により、速度判定部106は、様々な道路環境においても、自車両22の停止を判定することができる。また、上記のパーキングブレーキには、サイドブレーキ、フットブレーキが含まれる。
【0069】
また、速度判定部106は、自車両22のシフトレバーがパーキングレンジにあるか否かを判定し、シフトレバーがパーキングレンジにある場合、自車両22が停止したと判定してもよい。この判定により、速度判定部106は、様々な道路環境においても、自車両22の停止を判定することができる。また、シフトレバーがパーキングレンジにあるか否か判定しているが、この判定においては、パーキングモードに設定するパーキングボタンを押して、パーキングモードになった場合を、シフトレバーがパーキングレンジにあるとしてもよい。
【0070】
また、速度判定部106は、自車両の速度が予め定めた所定速度以下(例えば、5km/h以下)であるか否か判定し、所定車速以下と判定した場合、前記自車両が停止したと判定するようにしてもよい。この判定により、速度判定部106は、停止する前であっても、所定速度以下になった場合に、第1支援画像を表示することができるようになる。そのため、適切なタイミングで、第1支援画像を乗員に表示することができるようになる。
【0071】
また、速度判定部106は、自車両の速度が予め定めた所定速度以下(例えば、5km/h以下)であるか否か判定し、所定車速以下と判定した場合に、自車両で減速操作が行われているか判定し、減速操作が行われていると判定した場合に自車両が停止すると推定し、自車両が停止したと判定してもよい。この判定により、速度判定部106は、停止する前であっても、所定速度以下で、減速操作が行われた場合に、第1支援画像を表示することができるようになる。そのため、適切なタイミングで、第1支援画像を乗員に表示することができるようになる。なお、本実施形態における減速操作は、ブレーキアクチュエータが作動している状態のことを指し、乗員の操作によるブレーキアクチュエータの作動に限らず、乗員の操作なしにブレーキアクチュエータが作動している場合も含まれる。
【0072】
なお、本実施形態において、センサ情報処理部104が空き駐車スペースを検出する際の運転モードは、乗員による手動運転でもよく、自動運転でもよい。
【符号の説明】
【0073】
1 コントローラ
2a~2d カメラ
3 舵角センサ
6 車輪速センサ
7 空間認識センサ
8 入力インターフェース
9 表示部
10 車両制御ECU
11 アクチュエータ
101 周囲画像生成部
102 合成画像生成部
103 アイコン記憶部
104 センサ情報処理部
105 駐車支援演算部
106 速度判定部
1021 支援画像生成部
1022 表示切替制御部
1023 画像合成部
図1
図2
図3A
図3B
図4A
図4B