特許 7223283 画像処理ユニット及びそれを備えるヘッドアップディスプレイ装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-02-08

(45)【発行日】2023-02-16

(54)【発明の名称】画像処理ユニット及びそれを備えるヘッドアップディスプレイ装置

(51)【国際特許分類】

   G09G 5/00 20060101AFI20230209BHJP

   G09G 5/36 20060101ALI20230209BHJP

   B60K 35/00 20060101ALI20230209BHJP

   G02B 27/01 20060101ALI20230209BHJP

   H04N 7/18 20060101ALI20230209BHJP

   H04N 5/64 20060101ALI20230209BHJP

【ＦＩ】

G09G5/00 550C

G09G5/00 510A

G09G5/00 530H

G09G5/36 520E

B60K35/00 A

G02B27/01

H04N7/18 J

H04N7/18 U

H04N5/64 521P

【請求項の数】 10

(21)【出願番号】P 2019526954

(86)(22)【出願日】2018-06-27

(86)【国際出願番号】 JP2018024267

(87)【国際公開番号】W WO2019004237

(87)【国際公開日】2019-01-03

【審査請求日】2021-04-16

(31)【優先権主張番号】P 2017126062

(32)【優先日】2017-06-28

(33)【優先権主張国・地域又は機関】JP

(31)【優先権主張番号】P 2017160527

(32)【優先日】2017-08-23

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000231512

【氏名又は名称】日本精機株式会社

(72)【発明者】

【氏名】秦 誠

(72)【発明者】

【氏名】舛屋 勇希

【審査官】菅野 京一

(56)【参考文献】

【文献】欧州特許出願公開第０３１００９１３（ＥＰ，Ａ１）

【文献】特開２０１５－１５２７４６（ＪＰ，Ａ）

【文献】特開平０６－２４７１８４（ＪＰ，Ａ）

【文献】国際公開第２０１７／０９０４６４（ＷＯ，Ａ１）

【文献】特開平０８－１９７９８１（ＪＰ，Ａ）

【文献】特開２０１５－０００６３０（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１４／０２６７４０２（ＵＳ，Ａ１）

【文献】米国特許出願公開第２００２／００６７３６６（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｂ６０Ｋ ３５／００

Ｇ０９Ｇ ５／００

Ｇ０２Ｂ ２７／０１

Ｈ０４Ｎ ７／１８，５／６４

(57)【特許請求の範囲】

【請求項1】

ユーザによって視認される虚像に対応する表示要素を含む表示画像を生成する生成部を備え、
前記生成部は、前記ユーザの視点高さに基づき前記ユーザによって視認される前記虚像の大きさが変化するように、前記表示要素の平面形状を決定し、
前記視点高さが基準位置から、前記基準位置よりも低い位置に変化する時に、前記生成部は、前記ユーザによって視認される実空間での前記虚像の平面形状又は前記虚像の前記平面形状が写像される仮想平面上の平面形状が第１の所定方向及び／又は第２の所定方向に伸びるように、前記表示要素の前記平面形状を拡大し、
前記仮想平面は、道路面がｘｚ平面である時に、前記ｘｚ平面から所定高さだけ上昇した位置に設定され、
前記虚像の平面形状は、実際の風景に存在する物体を前記仮想平面において取り囲む形状である、ことを特徴とする画像処理ユニット。

【請求項2】

前記虚像が投射される被投影部材を有する車両の前進方向を前方向とし、前記車両の後進方向を後方向とし、前記生成部は、前記ユーザによって視認される実空間での前記虚像の平面形状又は前記虚像の前記平面形状が写像される仮想平面上の平面形状が前方向及び／又は後方向に伸びるように、前記表示要素の前記平面形状を拡大することを特徴とする請求項１に記載の画像処理ユニット。

【請求項3】

前記第１の所定方向は、前記ユーザによって視認される実空間での前記虚像の前記平面形状又は前記虚像の前記平面形状が写像される前記仮想平面上の前記平面形状が、前記虚像が投射される被投影部材を有する車両に近づく方向であり、
前記第２の所定方向は、前記ユーザによって視認される実空間での前記虚像の前記平面形状又は前記虚像の前記平面形状が写像される前記仮想平面上の前記平面形状が、前記車両から離れる方向であることを特徴とする請求項１に記載の画像処理ユニット。

【請求項4】

前記生成部は、前記視点高さの変化に応答して、前記表示要素の前記平面形状の拡大率を動的に決定することを特徴とする請求項１乃至３の何れか１項に記載の画像処理ユニット。

【請求項5】

単位時間あたりの前記視点高さの変化量が基準値以上である時に、前記生成部は、前記表示要素の前記平面形状の表示を弱める又は無効化することを特徴とする請求項４に記載の画像処理ユニット。

【請求項6】

前記ユーザの視線方向が前記虚像を向いている間だけ、前記表示要素の前記平面形状の前記拡大率が１であるように、前記生成部は、前記表示要素の前記平面形状を拡大しないことを特徴とする請求項４又は５に記載の画像処理ユニット。

【請求項7】

前記表示要素の前記平面形状の前記拡大率が１よりも大きい時に、前記視点高さの低下に伴って前記拡大率が発生したことを前記ユーザに報知することを特徴とする請求項４乃至６の何れか１項に記載の画像処理ユニット。

【請求項8】

前記視点高さは、車両始動時に取得された固定値であり、
前記生成部は、前記固定値に基づき、前記表示要素の前記平面形状の拡大率を決定することを特徴とする請求項１乃至３の何れか１項に記載の画像処理ユニット。

【請求項9】

前記視点高さが前記基準位置から、前記基準位置よりも高い位置に変化する時に、前記ユーザによって視認される実空間での前記虚像の平面形状又は前記虚像の前記平面形状が写像される仮想平面上の平面形状が同一であるように、前記生成部は、前記表示要素の前記平面形状を決定することを特徴とする請求項１乃至８の何れか１項に記載の画像処理ユニット。

【請求項10】

請求項１乃至９の何れか１項に記載の前記画像処理ユニットと、
前記画像処理ユニットで生成された前記表示画像を表示する表示器と、
を備えることを特徴とするヘッドアップディスプレイ装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ユーザの視点位置に基づく表示画像を生成可能な画像処理ユニット及びそれを備えるヘッドアップディスプレイ装置等に関する。

【背景技術】

【0002】

例えば特許文献１のヘッドアップディスプレイ装置は、車両の前方に存在する道路上の白線等の区画線を認識し、その区画線（実際の風景）と虚像が重なるように、その虚像に対応する表示画像を車両のウインドシールド（フロントガラス）に投影又は表示することができる。特に、特許文献１のヘッドアップディスプレイ装置は、レーン逸脱警告装置（ＬＤＷ装置）、レーン維持アシスト装置（ＬＫＡ装置）等の運転支援装置と連携し、運転支援装置がアクティブであることを虚像で表す。具体的には、特許文献１の例えば図３，図４に示されるように、その虚像は、車両側に傾斜する表示要素Ｍ１，Ｍ２，Ｍ３，Ｍ４，Ｍ５，Ｍ６として、ユーザ（運転者）に視認される。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１６－１１０６２７号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１の段落［００１８］の記載によれば、車内カメラにより撮影された運転者の顔画像を解析して、運転者の眼球位置（視点位置）を演算する。そして、解析により得られた視点位置に応じて、表示要素Ｍ１～Ｍ６が区画線Ｒ１～Ｒ６と重畳して視認されるように表示要素Ｍ１～Ｍ６の投影位置を調節する。しかしながら、視点位置が低くなる時に、本発明者らは、ユーザが虚像を視認し難いこと、即ち視認性の低下を認識した。

【0005】

本発明の１つの目的は、虚像の視認性を向上可能な画像処理ユニット及びそれを備えるヘッドアップディスプレイ装置を提供することである。本発明の他の目的は、以下に例示する態様及び最良の実施形態、並びに添付の図面を参照することによって、当業者に明らかになるであろう。

【課題を解決するための手段】

【0006】

以下に、本発明の概要を容易に理解するために、本発明に従う態様を例示する。

【0007】

第１の態様において、画像処理ユニットは、
ユーザによって視認される虚像に対応する表示要素を含む表示画像を生成する生成部を備え、
前記生成部は、前記ユーザの視点高さに基づき前記ユーザによって視認される前記虚像の大きさが変化するように、前記表示要素の平面形状を決定し、
前記視点高さが基準位置から、前記基準位置よりも低い位置に変化する時に、前記生成部は、前記表示要素の前記平面形状を拡大する。

【0008】

第１の態様では、視点高さが低くなる時に、表示要素の平面形状は、拡大されている。従って、その表示要素の虚像の大きさは、その拡大の分だけ増大し、視認性を向上させることができる。

【0009】

第１の態様に従属する第２の態様において、
前記虚像が投射される被投影部材を有する車両の前進方向を前方向とし、前記車両の後進方向を後方向とし、前記生成部は、前記ユーザによって視認される実空間での前記虚像の平面形状又は前記虚像の前記平面形状が写像される仮想平面上の平面形状が前方向及び／又は後方向に伸びるように、前記表示要素の前記平面形状を拡大してもよい。

【0010】

第２の態様では、視点高さが低くなる時に、ユーザによって視認される実空間での虚像の平面形状又は虚像の平面形状が写像される仮想平面上の平面形状が前後方向に伸びて、視認性を向上させることができる。

【0011】

第１の態様に従属する第３の態様において、
前記生成部は、前記ユーザによって視認される実空間での前記虚像の平面形状又は前記虚像の前記平面形状が写像される仮想平面上の平面形状が第１の所定方向及び／又は第２の所定方向に伸びるように、前記表示要素の前記平面形状を拡大してもよい

【0012】

第３の態様では、視点高さが低くなる時に、ユーザによって視認される実空間での虚像の平面形状又は虚像の平面形状が写像される仮想平面上の平面形状が第１の所定方向及び／又は第２の所定方向に伸びて、視認性を向上させることができる。

【0013】

第３の態様に従属する第４の態様において、
前記第１の所定方向は、前記ユーザによって視認される実空間での前記虚像の前記平面形状又は前記虚像の前記平面形状が写像される前記仮想平面上の前記平面形状が、前記虚像が投射される被投影部材を有する車両に近づく方向であってもよく、
前記第２の所定方向は、前記ユーザによって視認される実空間での前記虚像の前記平面形状又は前記虚像の前記平面形状が写像される前記仮想平面上の前記平面形状が、前記車両から離れる方向であってもよい。

【0014】

第４の態様では、視点高さが低くなる時に、ユーザによって視認される実空間での虚像の平面形状又は虚像の平面形状が写像される仮想平面上の平面形状がユーザ（運転者）に近づく方向に拡大されて、視認性を効果的に向上させることができる。これに代えて、或いは、これに加えて、第４の態様では、視点高さが低くなる時に、ユーザによって視認される実空間での虚像の平面形状又は虚像の平面形状が写像される仮想平面上の平面形状がユーザ（運転者）から離れる方向に拡大されて、視認性を効果的に向上させることができる。

【0015】

第１乃至第４の何れか１つの態様に従属する第５の態様において、
前記生成部は、前記視点高さの変化に応答して、前記表示要素の前記平面形状の拡大率を動的に決定してもよい。

【0016】

第５の態様では、視点高さが変化する時に、その変化に応答して、視認性を向上させることができる。

【0017】

第５の態様に従属する第６の態様において、
単位時間あたりの前記視点高さの変化量が基準値以上である時に、前記生成部は、前記表示要素の前記平面形状の表示を弱める又は無効化してもよい。

【0018】

第６の態様では、視点高さの変化が大きい時に、視認性の向上を中止することができる。

【0019】

第５又は第６の態様に従属する第７の態様において、
前記ユーザの視線方向が前記虚像を向いている間だけ、前記表示要素の前記平面形状の前記拡大率が１であるように、前記生成部は、前記表示要素の前記平面形状を拡大しないようにしてもよい。

【0020】

第７の態様では、ユーザの視線方向が表示要素（虚像）を向いている時だけ、視認性の向上を中止させることができる。言い換えれば、ユーザは、ユーザによって視認される実空間での虚像の平面形状又は虚像の平面形状が写像される仮想平面上の平面形状の拡大を視認することができないため、ユーザへの誤った情報提示を回避することができる。

【0021】

第５乃至第７の何れか１つの態様に従属する第８の態様において、画像処理ユニットは、
前記表示要素の前記平面形状の前記拡大率が１よりも大きい時に、前記視点高さの低下に伴って前記拡大率が発生したことを前記ユーザに報知してもよい。

【0022】

第８の態様では、ユーザの視点高さに応じた虚像の移動を報知することができる。

【0023】

第１乃至第４の何れか１つの態様に従属する第９の態様において、
前記視点高さは、車両始動時に取得された固定値であってもよく、
前記生成部は、前記固定値に基づき、前記表示要素の前記平面形状の拡大率を決定してもよい。

【0024】

第９の態様では、車両始動時に取得した視点高さ（固定値）で、車両運転中の視認性を向上させることができる。

【0025】

第１乃至第９の何れか１つの態様に従属する第１０の態様において、
前記視点高さが前記基準位置から、前記基準位置よりも高い位置に変化する時に、前記ユーザによって視認される実空間での前記虚像の平面形状又は前記虚像の前記平面形状が写像される仮想平面上の平面形状が同一であるように、前記生成部は、前記表示要素の前記平面形状を決定してもよい。

【0026】

第１０の態様では、視点高さが高くなる時に、ユーザによって視認される実空間での虚像の平面形状又は虚像の平面形状が写像される仮想平面上の平面形状は、同一であってもよく、言い換えれば、ユーザによって視認される実空間での虚像の平面形状又は虚像の平面形状が写像される仮想平面上の平面形状は、前後方向に伸びなくても、視認性は、低下しない。

【0027】

第１１の態様において、ヘッドアップディスプレイ装置は、
第１乃至第１０の何れか１つの態様に従う前記画像処理ユニットと、
前記画像処理ユニットで生成された前記表示画像を表示する表示器と、
を備える。

【0028】

第１１の態様では、ヘッドアップディスプレイ装置は、視点高さが低くなる時に、拡大された平面形状を有する表示要素を含む表示画像を表示することができる。従って、その表示要素の虚像の大きさは、その拡大の分だけ増大し、視認性を向上させることができる。

【0029】

当業者は、例示した本発明に従う態様が、本発明の精神を逸脱することなく、さらに変更され得ることを容易に理解できるであろう。

【図面の簡単な説明】

【0030】

【図1】図１（Ａ）は、本発明に従う画像処理ユニット及びそれを備えるヘッドアップディスプレイ装置の概略構成例を示し、図１（Ｂ）は、図１（Ａ）の虚像表示面及び仮想平面の説明図を示す。

【図2】図２（Ｂ）は、図１（Ａ）の虚像表示面の変形例を示し、図２（Ｂ）は、図２（Ａ）の虚像表示面及び仮想平面の説明図を示す。

【図3】図３（Ａ）は、ウインドシールドを介して認識される物体（実際の風景）の１例を示し、図３（Ｂ）は、図３（Ａ）の物体に重畳される虚像（表示要素）の１例を示し、図３（Ｃ）は、実空間での虚像の平面形状又は仮想平面上の平面形状の説明図（平面図）を示す。

【図4】図４（Ａ）は、ユーザによって認識される虚像の１例を示し、図４（Ｂ）は、視点高さが低くなる時に、ユーザによって視認される虚像の大きさの変化例を示し、図４（Ｃ）は、増大された虚像の１例を示し、図４（Ｄ）は、実空間での拡大された虚像の平面形状又は仮想平面上の平面形状の説明図（平面図）を示す。

【図5】５（Ａ）は、ユーザの視点高さに基づく、実空間での虚像の平面形状又は仮想平面上の平面形状の拡大率の複数の設定例を示し、５（Ｂ）は、車両までの距離に基づく、実空間での虚像の平面形状又は仮想平面上の平面形状の拡大率の設定例を示す。

【図6】図６（Ａ）は、視点高さが低くなる時に、ユーザによって認識される虚像の１例を示し、図６（Ｂ）は、側面視における図６（Ａ）の虚像の平面形状又は仮想平面上の平面形状の説明図を示す。

【図7】図７（Ａ）は、視点高さが低くなる時に、ユーザによって認識される、増大された虚像の１例を示し、図７（Ｂ）は、側面視における図７（Ａ）の虚像の平面形状又は仮想平面上の平面形状の説明図を示す。

【図8】図８（Ａ）は、図７（Ａ）の虚像の変形例を示し、図８（Ｂ）は、側面視における図８（Ａ）の虚像の平面形状又は仮想平面上の平面形状の説明図を示す。

【図9】図９（Ａ）及び図９（Ｃ）の各々は、図７（Ａ）の虚像の他の変形例を示し、図９（Ｂ）は、側面視における図９（Ａ）の虚像の平面形状又は仮想平面上の平面形状の説明図を示す。

【図10】図１０（Ａ）は、物体（前方車両）と自車両との位置関係の説明図を示し、図１０（Ｂ）は、所定方向の設定例の説明図を示す。

【発明を実施するための形態】

【0031】

以下に説明する最良の実施形態は、本発明を容易に理解するために用いられている。従って、当業者は、本発明が、以下に説明される実施形態によって不当に限定されないことを留意すべきである。

【0032】

図１（Ａ）は、本発明に従う画像処理ユニットを備えるヘッドアップディスプレイ装置（又はヘッドアップディスプレイシステム）の概略構成例を示す。図１（Ａ）に示されるように、ヘッドアップディスプレイシステムは、例えば撮像装置１０３と、撮像装置１０３からの撮像画像を処理する画像処理部３００と、画像処理部３００からの情報に基づき表示器２０への表示画像を処理し、且つ表示画像に基づき表示器２０を制御する表示コントローラ２００と、例えば表示器２０及び反射器２１を含む表示機構１００と、を備えることができる。なお、図１（Ａ）の表示コントローラ２００の処理部２１０は、表示器２０を制御する機能を有さないで、その機能は、他の装置（図示せず）、又は、図示される例えば表示器２０又は画像処理部３００によって実現されてもよい。

【0033】

本明細書において、ユーザによって視認される虚像に対応する表示要素を含む表示画像を生成する生成部２３０の機能を備える装置は、本発明に従う画像処理ユニットと呼ぶことができる。１例として、生成部２３０は、図１（Ａ）の表示コントローラ２００に適用されているので、生成部２３０を備える表示コントローラ２００は、画像処理ユニットである。画像処理ユニットは、本質的には、表示画像を処理する機能（生成部２３０）を有するが、撮像画像を処理する機能（物体情報取得部３１０及び／又は視点情報取得部３２０）を更に有してもよい。言い換えれば、画像処理部３００が表示要素を含む表示画像を生成する生成部２３０の機能を備える時に、その画像処理部３００は、本発明に従う画像処理ユニットと呼ぶことができる。

【0034】

また、本発明に従う画像処理ユニット（例えば図１（Ａ）表示コントローラ２００）と、画像処理ユニットで生成された表示画像を表示する表示器２０と、を備える装置は、本発明に従うヘッドアップディスプレイ装置と呼ぶことができる。

【0035】

図１（Ａ）において、撮像装置１０３は、１例として、例えば車両の前方に存在する道路（道路上の実際の風景）を撮像可能である第１の撮像部１０３－１と、ユーザである例えば運転者の顔を撮像可能である第２の撮像部１０３－２と、を有している。表示機構１００は、車両のウインドシールド１０１の例えば一部に設定される表示範囲ＡＲ（被投影部材）に表示画像（表示要素を含む）を投影して、車両の運転者の視点１０２で表示要素の虚像表示面Ｖ上の虚像が実際の風景（例えば前方車両）と重なるように表示画像を表示範囲ＡＲに表示可能である。表示機構１００及び表示コントローラ２００は、典型的にはダッシュボードの内部に収納されているが、表示機構１００及び表示コントローラ２００の一部がダッシュボードの外部に配置されてもよい。なお、表示器２０は、例えばウインドシールド１０１に表示要素又は表示画像を投影するので、投影器と呼ばれてもよい。

【0036】

図１（Ａ）の画像処理部３００は、第１の撮像部１０３－１からの撮像画像を解析し、その撮像画像から、表示要素に重ねられる前方車両、歩行者、白線等の物体を認識可能な物体情報取得部３１０を有することができる。好ましくは、物体情報取得部３１０は、認識した物体の位置情報（例えば自車両を基準とした時の実空間での相対的な３次元の位置）を取得し、更に好ましくは、認識した物体の大きさ（例えば実空間での物体の体積）を取得することができる。第１の撮像部１０３－１は、例えばステレオカメラであり、物体情報取得部３１０は、左右の撮像画像から、物体と車両（自車両）との距離（自車両から物体までの相対距離）と、道路面Ｈ（水平面）上の物体と車両（自車両）との位置（自車両から物体までの相対距離）と、物体を取り囲む直方体を規定する３辺の長さ（物体の幅と奥行きと高さ）と、を取得することができる。

【0037】

図１（Ａ）の画像処理部３００は、第２の撮像部１０３－２からの撮像画像を解析し、その撮像画像から、運転者の目を認識可能な視点情報取得部３２０を有することができる。好ましくは、視点情報取得部３２０は、認識した目の位置情報（例えば自車両の室内の天井、又は、床、又は、天井と床との間の所定の位置を基準とした時の実空間での相対的な１次元の位置（視点高さ））を取得し、更に好ましくは、認識した目の向き（視線方向）を取得することができる。

【0038】

撮像装置１０３は、例えば図示されないインナーリアビューミラー（バックミラー）の付近に設置されている。１例として、第１の撮像部１０３－１は、インナーリアビューミラーのウインドシールド１０１側に位置し、第２の撮像部１０３－２は、インナーリアビューミラーの運転席（図示せず）側に位置する。

【0039】

図１（Ａ）の表示コントローラ２００は、処理部２１０を有している。処理部２１０は、生成部２３０を有し、好ましくは、例えば判定部２２０を更に有することができる。処理部２１０又は判定部２２０は、視点情報取得部３２０によって取得される運転者の視点１０２が上下方向に変化しているか否かを判定することができる。また、判定部２２０は、視点高さが変化する時に、その変化が大きいか否かを判定することができる。加えて、判定部２２０は、視点情報取得部３２０によって取得される運転者の視線方向が表示要素を向いているか否かを判定することができる。

【0040】

次に、処理部２１０又は生成部２３０は、ユーザによって視認される虚像に対応する表示要素を含む表示画像を生成し、好ましくは、車両の運転者の視点１０２で表示要素の虚像が実際の風景（物体情報取得部３１０によって取得される例えば前方車両）と重なるように、その表示要素を含む表示画像を生成する。

【0041】

具体的には、生成部２３０は、ユーザである例えば運転者の視点高さと、認識した物体である例えば前方車両の位置情報と、に基づき、表示要素の位置情報及び大きさを決定することができる。より具体的には、生成部２３０は、表示要素がユーザによって視認される時に、その表示要素に対応する虚像が実空間上で平面形状を有するように、且つ、ユーザの視点高さに依存しないで、実空間での虚像の平面形状が同一であるように、表示要素の平面形状を決定する。言い換えれば、生成部２３０は、ユーザの視点高さに応じて、ユーザによって視認される例えば前方車両（実際の風景）の大きさが変化する時に、その前方車両に重ねる表示要素の大きさの変化が、前方車両の大きさの変化と等しくなるように、ユーザの視点高さに応じて、表示要素の平面形状を決定する。即ち、生成部２３０は、ユーザの視点高さに依らず、ユーザによって視認される例えば前方車両（実際の風景）と表示要素との実空間での相対的な位置関係及び実空間での大きさ関係が変化しないように、ユーザの視点高さに応じて、表示画像内の表示要素の位置及び見た目の形状を決定する。

【0042】

但し、ユーザの視点高さが低くなる時に、虚像の視認性が低下することを本発明者らは認識した。詳細は、後述するが、視認性を向上させるために、生成部２３０は、ユーザの視点高さに応じて表示要素の平面形状を決定した後、ユーザの視点高さが低くなる時に、表示要素の平面形状を拡大することを特徴とする。従って、その表示要素の虚像の大きさは、その拡大の分だけ増大する。

【0043】

図１（Ａ）の表示コントローラ２００は、例えば記憶部２４０を更に備え、記憶部２４０は、例えば判定部２２０、生成部２３０等の処理部２１０の処理又は演算に必要な様々なデータを記憶することができる。表示コントローラ２００は、典型的には例えばマイクロコンピュータで構成され、例えばＣＰＵと、ＲＯＭ、ＲＡＭ等のメモリと、入出力インターフェース等を含むことができる。処理部２１０は、典型的にはＣＰＵ及びＲＡＭ（ワーク領域）で構成され、記憶部２４０は、典型的にはＲＯＭ（例えばＥＥＰＲＯＭ）で構成される。例えば、ＲＯＭは、ＣＰＵに所定の動作（ユーザの視点１０２に基づく表示画像を生成する方法）を実行させるプログラムを記憶してもよく、ＲＡＭは、ＣＰＵのワーク領域を形成することができる。また、ＲＯＭは、例えば表示要素の形状を決定又は演算するために必要なデータを記憶することができる。

【0044】

表示コントローラ２００は、車両に配置又は搭載され、例えばＣＡＮ（Controller Area Network）である車載ネットワークＬＡＮを介して、例えば画像処理部３００等に接続されている。表示コントローラ２００は、一般に、ＥＣＵ（Electronic Control Unit）と呼ばれてもよい。

【0045】

図１（Ａ）の表示コントローラ２００は、例えば情報取得部４００からの情報を入力し、その情報に基づき、ユーザによって視認される虚像に対応する表示要素を含む表示画像を生成してもよい。具体的には、処理部２１０又は生成部２３０は、例えば車載ネットワークＬＡＮ、道路情報取得部４１０及び位置情報取得部４２０を介して、車両（自車両）の位置（例えば現在位置）に基づく道路面Ｈの勾配の情報を入力してもよい。

【0046】

なお、情報取得部４００からの情報に基づき生成された表示要素の投影位置は、ウインドシールド１０１に設定される表示範囲ＡＲの一部に固定されてもよく、所定の物体（実際の風景）に重ねられなくてもよい。例えば、道路情報の中に標識情報が含まれる時に、現在位置に基づく道路の標識が、生成部２３０に入力されて、道路の標識を表す表示要素は、ウインドシールド１０１に設定される表示範囲ＡＲの一部に固定されて、表示されてもよい。

【0047】

また、処理部２１０又は生成部２３０は、例えば車載ネットワークＬＡＮ及び車速情報取得部４３０を介して、車両（自車両）の速度を入力してもよい。現在時刻に基づく車両（自車両）の速度が、生成部２３０に入力されて、車両の速度を表す表示要素は、ウインドシールド１０１に設定される表示範囲ＡＲの一部に固定されて、表示されてもよい。言い換えれば、ヘッドアップディスプレイ装置は、表示画像を表示する時に、所定の物体（実際の風景）の位置に依らず、車両の速度等の計器情報を固定する一方、前方車両、歩行者等の障害物情報を所定の物体（実際の風景）の位置に応じて変化させてもよい[0]。なお、表示コントローラ２００は、例えば道路情報取得部４１０、位置情報取得部４２０、車速情報取得部４３０等の情報取得部４００からの情報を入力しなくてもよい。

【0048】

図１（Ａ）において、表示機構１００又は表示器２０は、ウインドシールド１０１を介して虚像表示面Ｖ上の虚像をユーザに視認させるために、表示コントローラ２００又は処理部２１０によって制御され、これにより、表示器２０は、虚像に対応する表示要素を含む表示画像に基づく表示光Ｌ（投影光）を生成又は放出することができる。反射器２１は、表示器２０からの表示光Ｌの光路をウインドシールド１０１に導き、運転者は、ウインドシールド１０１での表示光Ｌ（表示要素）を虚像として認識することができる。なお、表示器２０は、例えばＬＥＤ等の光源部、例えばＤＭＤ（Digital Micromirror Device）等の表示素子、表示素子からの光を受光して表示画像（表示要素を含む）を表示するスクリーン等を有する。

【0049】

画像処理ユニットである表示コントローラ２００及び例えば表示機構１００を備えるヘッドアップディスプレイ装置が搭載される車両（自車両）は、図１（Ａ）において例えば自動車であり、自動車は道路面Ｈの上を走行可能である。運転者の視点１０２で、図１（Ａ）の虚像表示面Ｖの高さ又は奥行き（重畳距離）は、例えば距離Ｄ１から距離Ｄ３までの所定距離に設定されている。言い換えれば、運転者の視点１０２で、虚像表示面Ｖの下端は、車両から距離Ｄ１だけ前方に存在し、虚像表示面Ｖの上端は、車両から距離Ｄ３だけ前方に存在し、虚像表示面Ｖの上下方向の中点は、車両から距離Ｄ２だけ前方に存在している。距離Ｄ１、距離Ｄ２及び距離Ｄ３は、それぞれ、例えば２０［ｍ］、例えば３０［ｍ］及び例えば５０［ｍ］である。

【0050】

図１（Ａ）において、１つの反射器２１が示されているが、反射器２１は、例えば２つの反射器で構成することができ、言い換えれば、表示器２０からウインドシールド１０１までの表示光Ｌの光路長は、反射器２１によって設定されてもよく、距離Ｄ１、距離Ｄ２及び距離Ｄ３は、理想的な運転者の視点高さ（理想的な運転者の座高の高さ）及び表示光Ｌの光路長に応じて設定されてもよい。また、反射器２１は、一般に、表示器２０からの表示光Ｌを拡大し、加えて、反射器２１又は表示コントローラ２００（例えば処理部２１０）は、一般に、ウインドシールド１０１の一部に設定される表示範囲ＡＲにおける歪み（例えばガラス面の歪み）を補正することができる。

【0051】

図１（Ｂ）は、図１（Ａ）の虚像表示面及び仮想平面の説明図を示す。表示要素の虚像は、例えば、道路面Ｈから所定高さだけ上昇した虚像表示面Ｖ上に認識され、例えば、虚像表示面Ｖは、道路面Ｈから所定高さだけ上昇した仮想平面Ｓに設定される。なお、虚像表示面Ｖは、道路面Ｈと平行に設定されないで、道路面Ｈから所定の角度だけ傾いてもよい。虚像表示面Ｖの傾きは、スクリーン（表示器２０が表示画像を表示する表示面）又は反射器２１の角度によって設定されている。

【0052】

反射器２１を回転駆動可能なアクチュエータ（図示せず）が反射器２１に設けられていてもよく、その場合、表示コントローラ２００の処理部２１０は、そのアクチュエータを制御して、虚像表示面Ｖの傾きを調整してもよい。図１（Ａ）又は図１（Ｂ）の例において、虚像表示面Ｖは、道路面Ｈとほぼ平行であり、道路面Ｈからの虚像表示面Ｖの傾きは、１例として、０［ｄｅｇｒｅｅ］から３０［ｄｅｇｒｅｅ］までの範囲に設定されてもよい。

【0053】

図１（Ａ）又は図１（Ｂ）において、虚像表示面Ｖは、道路面Ｈから所定高さだけ上昇しているが、道路面Ｈに設定されてもよい。また、仮想平面Ｓは、道路面Ｈから所定高さだけ上昇しているが、道路面Ｈに設定されてもよい。

【0054】

図２（Ｂ）は、図１（Ａ）の虚像表示面の変形例を示し、図２（Ｂ）は、図２（Ａ）の虚像表示面及び仮想平面の説明図を示す。図２（Ａ）又は図２（Ｂ）の例において、虚像表示面Ｖ’は、道路面Ｈとほぼ垂直であり、道路面Ｈからの虚像表示面Ｖの傾きθ’は、１例として、８０［ｄｅｇｒｅｅ］から９０［ｄｅｇｒｅｅ］までの範囲に設定されてもよい。図２（Ａ）において、運転者の視点１０２で、虚像表示面Ｖ’上の虚像によって重ねられる実際の風景の範囲（重畳距離）は、例えば距離Ｄ１’から距離Ｄ３’までの所定距離に設定されている。なお、図２（Ａ）の距離Ｄ１’、距離Ｄ２’及び距離Ｄ３’が、それぞれ、図１（Ａ）の距離Ｄ１、距離Ｄ２及び距離Ｄ３と同一となるように、表示光Ｌの光路長及び反射器２１の角度が設定されてもよい。また、図２（Ａ）の仮想平面Ｓは、道路面Ｈから所定高さだけ上昇しているが、道路面Ｈに設定されてもよい。

【0055】

なお、虚像表示面は、図１（Ａ）の虚像表示面Ｖ又は図２（Ａ）の虚像表示面Ｖ’に限定されず、例えば特開２０１４－１８１０２５号公報、特開２０１６－０６８５７６号公報、特開２０１６－２１２３３８号公報に開示されるように、複数の虚像表示面の組み合わせであってもよい。言い換えれば、虚像表示面は、実空間での任意の平面に設定してもよく、いわゆる３Ｄヘッドアップディスプレイ装置の虚像表示面であってもよい。

【0056】

図３（Ａ）は、ウインドシールド１０１を介して認識される物体ＯＢ（実際の風景）の１例を示す。図３（Ａ）に示されるように、ユーザである例えば運転者は、例えば片側三車線の道路を自車両で走行し、例えば左隣のレーン上を走行する前方車両を認識することができる。この時、例えば図１（Ａ）の物体情報取得部３１０は、自車両の前方に存在する道路上の物体ＯＢとして、車両（前方車両）を認識し、認識した物体ＯＢ（前方車両）の位置情報を取得することができる。

【0057】

図３（Ｂ）は、図３（Ａ）の物体ＯＢに重畳される虚像Ｖ１（表示要素）の１例を示す。例えば図１（Ａ）の生成部２３０は、物体情報取得部３１０からの位置情報と、視点情報取得部３２０からの運転者の視点高さと、に基づき、運転者の視点１０２で、虚像Ｖ１が物体ＯＢ（前方車両）と重なるように、虚像Ｖ１に対応する表示要素の位置情報を決定することができる。虚像Ｖ１は、例えば図１（Ｂ）の仮想平面Ｓと一致する虚像表示面Ｖ上に形成される。

【0058】

図３（Ｃ）は、実空間での虚像Ｖ１の平面形状又は仮想平面Ｓ上の平面形状の説明図（平面図）を示す。例えば図１（Ｂ）に示されるように、虚像表示面Ｖが仮想平面Ｓと一致する時に、実空間での虚像Ｖ１は、仮想平面Ｓ上に形成され、従って、実空間での虚像Ｖ１の平面形状は、実空間での仮想平面Ｓ上の平面形状と一致する。図３（Ｃ）に示されるように、実空間での仮想平面Ｓ上の平面形状は、例えば第１～第４の辺Ｓ１，Ｓ２，Ｓ３，Ｓ４で規定される長方形である。図３（Ｃ）の例において、仮想平面Ｓ上の平面形状（長方形）の中心Ｃは、物体ＯＢ（前方車両）の例えば中心に一致し、生成部２３０は、物体ＯＢ（前方車両）の中心を、例えば物体情報取得部３１０からの情報によって取得又は算出することができる。

【0059】

図３（Ｃ）において、実空間での仮想平面Ｓ上の平面形状は、物体情報取得部３１０によって取得される実空間での物体ＯＢ（前方車両）を取り囲む直方体の仮想平面Ｓ（仮想平面Ｓは、道路面Ｈがｘｚ平面である時に、ｘｚ平面から所定高さだけ上昇している。）による切断面を規定する形状であってもよい。言い換えれば、物体情報取得部３１０は、物体ＯＢ（前方車両）を直方体（仮想直方体）で取り囲む時に、直方体（仮想直方体）を規定する３辺の長さ（物体の幅（ｘ軸方向）と奥行き（ｚ軸方向）と高さ（ｙ軸方向））のうち、物体ＯＢ（前方車両）の幅及び奥行きに、それぞれ所定値（＝ｏｆ２＋ｏｆ３）及び所定値（＝ｏｆ１＋ｏｆ４）を加算してもよい。代替的に、図３（Ｃ）において、ｏｆ１、ｏｆ２、ｏｆ３及びｏｆ４の各々は、ゼロに設定されて、第１～第４の辺Ｓ１，Ｓ２，Ｓ３，Ｓ４で規定される長方形は、平面視において、物体ＯＢ（前方車両）をぴったり囲んでもよい。

【0060】

なお、物体ＯＢ（前方車両）の大きさは、物体情報取得部３１０によって厳密に取得されなくてもよく、物体情報取得部３１０は、障害物又は接近物のカテゴリ（例えば「車両」又は「歩行者」）だけが認識されて、カテゴリ毎に、固定の大きさが割り当てられてもよく、カテゴリ内の種類（例えば車両カテゴリ内の「普通自動車」、「大型トラック」、又は「オートバイ」）毎に、固定の大きさが割り当てられてもよい。

【0061】

虚像Ｖ１が、例えば図２（Ｂ）の仮想平面Ｓと一致しない虚像表示面Ｖ’上に形成される時に、ユーザによって視認される実空間での虚像Ｖ１の平面形状が写像される仮想平面Ｓ上の平面形状は、図３（Ｃ）に示されるように、例えば第１～第４の辺Ｓ１，Ｓ２，Ｓ３，Ｓ４で規定される長方形である。

【0062】

図４（Ａ）は、ユーザによって認識される虚像Ｖ１の１例を示し、図４（Ｂ）は、視点高さが低くなる時に、ユーザによって視認される虚像Ｖ１の大きさの変化例を示し、図４（Ｃ）は、増大された虚像Ｖ１の１例を示し、図４（Ｄ）は、実空間での拡大された虚像Ｖ１の平面形状又は仮想平面Ｓ上の平面形状の説明図（平面図）を示す。

【0063】

図４（Ａ）～図４（Ｃ）において、図３（Ｂ）の物体ＯＢ（前方車両）は、簡略化されて、二点鎖線で表される直方体（現実直方体）として表されている。ユーザの視点高さが図４（Ａ）で想定される高さから図４（Ｂ）で想定される高さに減少する時に、ユーザによって視認される実空間での虚像Ｖ１の平面形状又は虚像Ｖ１の平面形状が写像される仮想平面Ｓ上の平面形状が同一であるように、生成部２３０は、虚像Ｖ１に対応する表示要素の平面形状を決定する。従って、実空間での仮想平面Ｓ上の平面形状が例えば第１～第４の辺Ｓ１，Ｓ２，Ｓ３，Ｓ４で規定される長方形（仮想直方体）で固定又は維持される状況では、視点高さが低くなる時に、本発明者らは、ユーザが虚像Ｖ１を視認し難いこと、即ち視認性の低下を認識した（図４（Ｂ）参照）。

【0064】

従って、本発明に従う生成部２３０では、図４（Ａ）及び図４（Ｂ）に示されるように、その物体ＯＢ（前方車両）を取り囲む仮想平面Ｓ上の平面形状（第１～第４の辺Ｓ１，Ｓ２，Ｓ３，Ｓ４で規定される長方形）に重ねる表示要素（虚像Ｖ１）の大きさの変化が、物体ＯＢ（前方車両）の大きさ（二点鎖線で表される直方体）の変化と等しくなるように、ユーザの視点高さに応じて、表示要素の平面形状を一時的に決定する。即ち、生成部２３０は、ユーザの視点高さに依らず、ユーザによって視認される物体ＯＢ（前方車両）と表示要素（虚像Ｖ１）との実空間での相対的な位置関係及び実空間での大きさ関係が変化しないように、ユーザの視点高さに応じて、表示画像内の表示要素の位置及び見た目の形状を一時的に決定する。その後、生成部２３０は、一時的に決定された表示要素の平面形状を拡大する（図４（Ｃ）及び図４（Ｄ）参照）。

【0065】

図４（Ｃ）及び図４（Ｄ）に示されるように、実空間での仮想平面Ｓ上の平面形状は、１例として、第１～第４の辺Ｓ１，Ｓ２’，Ｓ３’，Ｓ４で規定される長方形である。即ち、図４（Ｂ）の第２の辺Ｓ２は、図４（Ｃ）の第２の辺Ｓ２’に拡大され、図４（Ｂ）の第３の辺Ｓ３は、図４（Ｃ）の第３の辺Ｓ３’に拡大される。このように、視点高さが低くなる時に、ユーザによって視認される実空間での虚像Ｖ１の平面形状又は虚像Ｖ１の平面形状が写像される仮想平面Ｓ上の平面形状が前方向に（ｏｆ４’－ｏｆ４）の分だけ伸び、且つ後方向に（ｏｆ１’－ｏｆ１）の分だけ伸びる（図４（Ｄ）参照）。図４（Ｃ）に示されるように、生成部２３０は、一時的に決定された表示要素の平面形状を拡大するので、その表示要素の虚像Ｖ１の大きさ（第１～第４の辺Ｓ１，Ｓ２’，Ｓ３’，Ｓ４で規定される長方形）は、その拡大の分だけ増大し、視認性を向上させることができる。

【0066】

生成部２３０は、ユーザの視点高さの変化に応答して、拡大された表示要素の平面形状（拡大率）を動的に決定することができる。ユーザの視点高さが変化する時に、その変化に応答して、視認性を向上させることができる。しかしながら、視点高さの変化が大きい時に、視認性の向上を中止してもよい。具体的には、判定部２２０は、所定期間内に所定の範囲以上に視点高さが変化するか否かを判定し、単位時間あたりの視点高さの変化量が基準値以上である時に、生成部２３０は、一時的に決定された表示要素の平面形状を拡大しなくてもよい。代替的に、単位時間あたりの視点高さの変化量が基準値以上である時に、生成部２３０は、一時的に決定された表示要素の平面形状を拡大しても、表示要素の表示輝度を下げて、或いは、表示要素（虚像Ｖ１）の表示を消してもよい。その後、視点高さの変化が小さくなった時に、生成部２３０は、視認性の向上を再開することができる。視点高さの変化が大きい時に、視認性の向上を中止することで、物体ＯＢ（前方車両）と車両（自車両）との距離が変化したという誤った認識、或いは、運転者への誤った情報提示を回避することができる。

【0067】

他方、生成部２３０は、ユーザの視点高さの変化に応答しなくてもよい。具体的には、生成部２３０は、車両始動時に取得した視点高さ（固定値）で、車両運転中の視認性を向上させることができる。言い換えれば、例えば比較的座高の低い女性が車両を運転する時に、その女性の視点高さで、車両運転中の視認性を向上させることができる。

【0068】

ところで、生成部２３０は、視点高さが低くなる時に、ユーザによって認識される一時的に決定された表示要素の平面形状を拡大するので、その表示要素の虚像Ｖ１の大きさ（第１～第４の辺Ｓ１，Ｓ２’，Ｓ３’，Ｓ４で規定される長方形）は、その拡大の分だけ増大し、視認性を向上させることができる。しかしながら、判定部２２０は、視点情報取得部３２０によって取得される運転者の視線方向が表示要素（虚像Ｖ１）を向いているか否かを判定することができる。即ち、運転者の視線方向が表示要素（虚像Ｖ１）を向いている時だけ、生成部２３０は、視認性の向上を中止させてもよい。視認性の向上を中止することで、運転者への誤った情報提示を回避することができる。

【0069】

視点高さが低くなり、且つ運転者の視線方向が表示要素（虚像Ｖ１）を向いていない時に、生成部２３０は、虚像Ｖ１を拡大させなくてもよい。

【0070】

加えて、生成部２３０は、視認性を向上させるために、表示要素（虚像Ｖ１）の平面形状を拡大する時に、即ち、拡大率が１よりも大きい時に、ユーザの視点高さの低下に伴って表示要素（虚像Ｖ１）の平面形状が拡大されたことをユーザに報知することができる。１例として、生成部２３０は、ユーザの視点高さに応じて表示要素（虚像Ｖ１）を拡大したことを表す専用の表示要素（図示せず）を表示範囲ＡＲに表示することができる。これに加えて、或いは、これに代えて、処理部２１０は、車両のスピーカ（図示せず）を制御して、ユーザの視点高さに応じて表示要素（虚像Ｖ１）を拡大したことを表す音声を出力することができる。これにより、ユーザは、ユーザの視点高さに応じた虚像Ｖ１の拡大と、物体ＯＢ（前方車両）の接近に応じた虚像Ｖ１の拡大とを区別することができる。

【0071】

図５（Ａ）は、ユーザの視点高さに基づく、実空間での虚像Ｖ１の平面形状又は仮想平面Ｓ上の平面形状の拡大率の複数の設定例を示し、図５（Ｂ）は、車両までの距離に基づく、実空間での虚像Ｖ１の平面形状又は仮想平面Ｓ上の平面形状の拡大率の設定例を示す。

【0072】

図５（Ａ）に示されるように、判定部２２０は、ユーザの視点高さが基準位置ＴＨαよりも低いか否かを判定することが好ましく、ユーザの視点高さが基準位置ＴＨα以上である時に、例えば図３（Ｃ）に示されるように、実空間での仮想平面Ｓ上の平面形状が例えば第１～第４の辺Ｓ１，Ｓ２，Ｓ３，Ｓ４で規定される長方形で固定又は維持される。視点高さが高くなる時に、ユーザによって視認される実空間での虚像Ｖ１の平面形状又は虚像Ｖ１の平面形状が写像される仮想平面Ｓ上の平面形状は、同一である。言い換えれば、ユーザによって視認される実空間での虚像Ｖ１の平面形状又は虚像Ｖ１の平面形状が写像される仮想平面Ｓ上の平面形状は、図４（Ｄ）のように前後方向に伸びなくても、図４（Ａ）での視認性は、低下しない。

【0073】

他方、ユーザの視点高さが基準位置ＴＨαよりも低い時に、仮想平面Ｓ上の平面形状の拡大率α（＝Ｓ２’／Ｓ２）は、図５（Ａ）の実線で示されるように、増大される。なお、図５（Ａ）のＴａｌｌ及びＳｈｏｒｔは、それぞれ、車両の室内で想定されるユーザである運転者の視点高さの最大値及び最小値を示す。図５（Ａ）のＮｏｒｍａｌは、理想的な運転者の視点高さを示す。拡大率αは、図５（Ａ）の実線以外の一点鎖線又は破線によって決定されてもよい。一点鎖線は、上に凸の曲線によって拡大率αを表すことができ、これは、視点高さが低くなる時に、視認性をより一層向上させることができることを意味する。

【0074】

また、視認性を向上させるために、生成部２３０は、例えば図５（Ｂ）に示される拡大率βを使用することができる。即ち、生成部２３０は、拡大率α×拡大率βで、仮想平面Ｓ上の平面形状が拡大されるように、表示要素の平面形状を決定することができる。図５（Ｂ）において、物体ＯＢ（前方車両）と車両（自車両）との距離が閾値ＴＨβよりも大きい時に、１よりも大きい拡大率βを設定することができる。

【0075】

なお、図５（Ａ）及び図５（Ｂ）において、拡大率α及び拡大率βの各最小値は、１以上であるが、１よりも小さく設定されてもよい。言い換えれば、拡大率α及び／又は拡大率βの最小値が１よりも小さい時に、拡大率「１」を基準として、縮小してもよい。言い換えれば、１よりも小さい最小値を基準として、拡大率「１」によって仮想平面Ｓ上の平面形状は、拡大される。

【0076】

図６（Ａ）は、視点高さが低くなる時に、ユーザによって認識される虚像Ｖ１の１例を示し、図６（Ｂ）は、側面視における図６（Ａ）の虚像Ｖ１の平面形状又は仮想平面Ｓ上の平面形状の説明図を示す。図６（Ａ）及び図６（Ｂ）は、図４（Ｂ）に対応し、実空間での仮想平面Ｓ上の平面形状が例えば第１～第４の辺Ｓ１，Ｓ２，Ｓ３，Ｓ４で規定される長方形で固定又は維持される状況では、視点高さが低くなる時に、本発明者らは、ユーザが虚像Ｖ１を視認し難いこと、即ち視認性の低下を認識した（図６（Ａ）参照）。

【0077】

図７（Ａ）は、視点高さが低くなる時に、ユーザによって認識される、増大された虚像Ｖ１の１例を示し、図７（Ｂ）は、側面視における図７（Ａ）の虚像Ｖ１の平面形状又は仮想平面Ｓ上の平面形状の説明図を示す。図７（Ａ）及び図７（Ｂ）は、図４（Ｃ）に対応し、実空間での仮想平面Ｓ上の平面形状が例えば第１～第４の辺Ｓ１，Ｓ２’，Ｓ３’，Ｓ４で規定される長方形で拡大される状況では、視点高さが低くなる時に、本発明者らは、視認性の向上を認識した（図７（Ａ）参照）。

【0078】

図８（Ａ）は、図７（Ａ）の虚像Ｖ１の変形例を示し、図８（Ｂ）は、側面視における図８（Ａ）の虚像Ｖ１の平面形状又は仮想平面Ｓ上の平面形状の説明図を示す。ユーザによって視認される実空間での虚像Ｖ１の平面形状又は虚像Ｖ１の平面形状が写像される仮想平面Ｓ上の平面形状が前方向に（ｏｆ４’－ｏｆ４）の分だけ伸びても、本発明者らは、視認性の向上を認識した（図８（Ａ）参照）。

【0079】

図９（Ａ）及び図９（Ｃ）の各々は、図７（Ａ）の虚像Ｖ１の他の変形例を示し、図９（Ｂ）は、側面視における図９（Ａ）の虚像Ｖ１の平面形状又は仮想平面Ｓ上の平面形状の説明図を示す。ユーザによって視認される実空間での虚像Ｖ１の平面形状又は虚像Ｖ１の平面形状が写像される仮想平面Ｓ上の平面形状が後方向に（ｏｆ１’－ｏｆ１）の分だけ伸びても、本発明者らは、視認性の向上を認識した（図９（Ａ）参照）。また、物体ＯＢ（前方車両）それ自身の視認性を保つために、物体ＯＢ（前方車両）の方が優先されて、仮想平面Ｓ上の平面形状の一部、即ち、物体ＯＢ（前方車両）の背後の虚像Ｖ１の部分を省略するように、生成部２３０は、その虚像Ｖ１に対応する表示要素の形状を決定することができる。

【0080】

図１０（Ａ）は、物体ＯＢ（前方車両）と自車両との位置関係の説明図を示し、図１０（Ｂ）は、所定方向（第１の所定方向）の設定例の説明図を示す。図１０（Ａ）の例において、実空間での座標は、ｘ_ｗ軸、ｙ_ｗ軸及びｚ_ｗ軸で表すことができ、ワールド座標と呼ぶこともできる。図１０（Ｂ）の例において、所定方向ＤＲ１_ｗは、ｚ_ｗ軸に平行であり、仮想平面Ｓ上の平面形状の第１の辺Ｓ１が所定方向ＤＲ１_ｗに拡大される時に、第１の辺Ｓ１は、自車両に近づくことになる。言い換えれば、自車両の前進方向を前方向とし、自車両の後進方向を後方向とする時に、所定方向ＤＲ１_ｗ（第１の所定方向）は、自車両の後進方向と一致する。

【0081】

なお、図示されていないが、仮想平面Ｓ上の平面形状の第４の辺Ｓ４が所定方向ＤＲ１_ｗの反対方向（第２の所定方向：自車両の前進方向）に拡大される時に、第４の辺Ｓ４は、自車両から離れることになる。

【0082】

実空間での所定方向は、ｘ_ｌ軸、ｙ_ｌ軸及びｚ_ｌ軸で表すことができる物体ＯＢ（前方車両）のローカル座標で規定してもよい。なお、図１０（Ｂ）において、物体ＯＢ（前方車両）と道路面Ｈとの境界Ｌ１がｚ_ｌ軸に垂直であり、所定方向ＤＲ１_ｌは、所定方向ＤＲ１_ｗと一致する。

【0083】

所定方向ＤＲ１_ｗ又はＤＲ１_ｌは、図１０（Ａ）の自車両の後進方向又は第１の辺Ｓ１が境界Ｌ１から離れる方向に限定されず、仮想平面Ｓ上の平面形状が自車両に近づく方向であればよい。図１０（Ｂ）において、所定方向ＤＲ_ｍは、点線で表わされ、物体ＯＢ（前方車両）の例えば道路面Ｈ上の基準点Ｒ（例えば中心、重心等）から自車両の運転者の視点１０２に向かう方向Ｍと一致するように、物体ＯＢ（前方車両）の例えば中心と自車両の運転者の視点１０２とを結ぶ直線（仮想直線）上に所定方向ＤＲ_ｍを設定することができる。第１の辺Ｓ１が自車両内のユーザ（具体的には、視点１０２）に近づく方向に拡大される時に、視認性を効果的に向上させることができる。

【0084】

代替的に、所定方向ＤＲ１_ｗ又はＤＲ１_ｌは、或いは、所定方向ＤＲ_ｍは、仮想平面Ｓ上の虚像Ｖ１の平面形状は、物体ＯＢ（前方車両）と道路面Ｈとの境界Ｌ１と、仮想平面Ｓ上の虚像Ｖ１の平面形状の外縁Ｓ１と、の間で規定される、仮想平面Ｓ上の隙間又は面積が増加する方向に、拡大されてもよい。視点高さが低くなる時に、仮想平面Ｓ上の隙間（仮想平面上の面積）を増加させて、視認性をより一層向上させることができる。

【0085】

更に、物体ＯＢが自車両に向かって進行する障害物である時に、所定方向ＤＲ１_ｗ又はＤＲ１_ｌは、或いは、所定方向ＤＲ_ｍは、その物体ＯＢ（障害物）の進行方向に設定されて、虚像Ｖ１を拡大させてもよい。

【0086】

なお、虚像Ｖ１を拡大する方向は、第１の所定方向だけでなく、第１の所定方向の反対方向（第２の所定方向）を含んでもよい。或いは、虚像Ｖ１を拡大する方向は、第１の所定方向に代えて、第１の所定方向の反対方向（第２の所定方向）だけでもよい。

【0087】

本発明は、上述の例示的な実施形態に限定されず、また、当業者は、上述の例示的な実施形態を特許請求の範囲に含まれる範囲まで、容易に変更することができるであろう。

【符号の説明】

【0088】

２０・・・表示器、２１・・・反射器、１００・・・表示機構、１０１・・・ウインドシールド、１０２・・・ユーザ（運転者）の視点、１０３・・・撮像装置、２００・・・表示コントローラ（広義には、画像処理ユニット）、２１０・・・処理部、２２０・・・判定部、２３０・・・生成部、２４０・・・記憶部、３００・・・画像処理部、３１０・・・物体情報取得部、３２０・・・視点情報取得部、４００・・・情報取得部、ＡＲ・・・表示範囲、ＤＲ１_ｗ，ＤＲ１_ｌ，ＤＲ_ｍ・・・所定方向、Ｌ・・・表示光、Ｈ・・・道路面、ＯＢ・・・物体、Ｒ・・・基準点、Ｖ・・・虚像表示面、Ｖ１・・・虚像。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】