(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-10-09
(45)【発行日】2024-10-18
(54)【発明の名称】表示制御装置、ヘッドアップディスプレイ装置
(51)【国際特許分類】
G02B 27/01 20060101AFI20241010BHJP
B60K 35/235 20240101ALI20241010BHJP
【FI】
G02B27/01
B60K35/235
(21)【出願番号】P 2020145168
(22)【出願日】2020-08-31
【審査請求日】2023-06-16
(73)【特許権者】
【識別番号】000231512
【氏名又は名称】日本精機株式会社
(72)【発明者】
【氏名】板垣 惇平
【審査官】岩村 貴
(56)【参考文献】
【文献】特開2018-045143(JP,A)
【文献】国際公開第2017/002344(WO,A1)
【文献】特開2012-078434(JP,A)
【文献】米国特許出願公開第2019/0056587(US,A1)
【文献】特開平09-236774(JP,A)
【文献】特開平10-078561(JP,A)
【文献】独国特許出願公開第102015220654(DE,A1)
(58)【調査した分野】(Int.Cl.,DB名)
G02B 27/01
G02B 26/10
B60K 35/23-35/235
(57)【特許請求の範囲】
【請求項1】
発光領域を有し、前記発光領域の部分領域毎に選択的に照明光を出射可能な光源素子と、
前記光源素子から入射した前記照明光を変調して画像光として出射する光変調素子と、
異なる前記部分領域から出射された前記照明光が前記光変調素子により変調された前記画像光毎に、アイボックス内の異なる部分視域に向けて集光させる集光光学系と、を備え、被投影部に前記画像光を投影することで、前記アイボックスの範囲内から観察者が虚像を視認するヘッドアップディスプレイ装置を制御する表示制御装置において、
前記光源素子を制御するプロセッサを備え、
前記プロセッサは、
前記アイボックス内の観察者の目位置に関する情報、又は目位置を推定可能な情報を取得し、
前記目位置が所定の閾値より高いと推定される場合、所定の光強度以上で発光させる前記部分領域(以下、部分発光領域と呼ぶ。)狭くする、
表示制御装置。
【請求項2】
前記部分発光領域は、
前記観察者の目が存在すると推定される主部分視域に対応する主部分発光領域と、前記主部分視域の周囲の副部分視域に対応する副部分発光領域と、を含み、
前記プロセッサは、
前記目位置が所定の閾値より高いと推定される場合、前記主部分視域の下側の前記副部分視域に対応する前記副部分発光領域での光強度を少なくとも低下、又は消灯することで、前記部分発光領域を狭くする、
請求項1に記載の表示制御装置。
【請求項3】
発光領域を有し、前記発光領域の部分領域毎に選択的に照明光を出射可能な光源素子と、
前記光源素子から入射した前記照明光を変調して画像光として出射する光変調素子と、
異なる前記部分領域から出射された前記照明光が前記光変調素子により変調された前記画像光毎に、アイボックス内の異なる部分視域に向けて集光させる集光光学系と、を備え、被投影部に前記画像光を投影することで、前記アイボックスの範囲内から観察者が虚像を視認するヘッドアップディスプレイ装置を制御する表示制御装置において、
前記光源素子を制御するプロセッサを備え、
前記プロセッサは、
前記アイボックス内の観察者の目位置に関する情報、又は目位置を推定可能な情報を取得し、
前記目位置が所定の閾値より低いと推定される場合、所定の光強度以上で発光させる前記部分領域(以下、部分発光領域と呼ぶ。)を狭くする、
表示制御装置。
【請求項4】
前記部分発光領域は、
前記観察者の目が存在すると推定される主部分視域に対応する主部分発光領域と、前記主部分視域の周囲の副部分視域に対応する副部分発光領域と、を含み、
前記プロセッサは、
前記目位置が所定の閾値より低いと推定される場合、前記主部分視域の上側の前記副部分視域に対応する前記副部分発光領域での光強度を少なくとも低下、又は消灯することで、前記部分発光領域を狭くする、
請求項3に記載の表示制御装置。
【請求項5】
前記部分発光領域は、前記観察者の右目に前記画像光を向けさせる右目用部分発光領域と、前記観察者の左目に前記画像光を向けさせる左目用部分発光領域と、を含む、
請求項1又は3に記載の表示制御装置。
【請求項6】
被投影部に画像光を投影することで、アイボックスの範囲内から観察者が虚像を視認するヘッドアップディスプレイ装置において、
発光領域を有し、前記発光領域の部分領域毎に選択的に照明光を出射可能な光源素子と、
前記光源素子から入射した前記照明光を変調して前記画像光として出射する光変調素子と、
異なる前記部分領域から出射された前記照明光が前記光変調素子により変調された前記画像光毎に、前記アイボックス内の異なる部分視域に向けて集光させる集光光学系と、
前記光源素子を制御するプロセッサと、を備え、
前記被投影部は、入射角よりも反射角を大きくする非正反射素子を有し、
前記プロセッサは、
前記アイボックス内の観察者の目位置に関する情報、又は目位置を推定可能な情報を取得し、
前記目位置が所定の閾値より高いと推定される場合、所定の光強度以上で発光させる前記部分領域(以下、部分発光領域と呼ぶ。)を狭くする、
ヘッドアップディスプレイ装置。
【請求項7】
前記部分発光領域は、
前記観察者の目が存在すると推定される主部分視域に対応する主部分発光領域と、前記主部分視域の周囲の副部分視域に対応する副部分発光領域と、を含み、
前記プロセッサは、
前記目位置が所定の閾値より高いと推定される場合、前記主部分視域の下側の前記副部分視域に対応する前記副部分発光領域での光強度を少なくとも低下、又は消灯することで、前記部分発光領域を狭くする、
請求項6に記載のヘッドアップディスプレイ装置。
【請求項8】
被投影部に画像光を投影することで、アイボックスの範囲内から観察者が虚像を視認するヘッドアップディスプレイ装置において、
発光領域を有し、前記発光領域の部分領域毎に選択的に照明光を出射可能な光源素子と、
前記光源素子から入射した前記照明光を変調して前記画像光として出射する光変調素子と、
異なる前記部分領域から出射された前記照明光が前記光変調素子により変調された前記画像光毎に、前記アイボックス内の異なる部分視域に向けて集光させる集光光学系と、
前記光源素子を制御するプロセッサと、を備え、
前記被投影部は、入射角よりも反射角を小さくする非正反射素子を有し、
前記プロセッサは、
前記アイボックス内の観察者の目位置に関する情報、又は目位置を推定可能な情報を取得し、
前記目位置が所定の閾値より低いと推定される場合、所定の光強度以上で発光させる前記部分領域(以下、部分発光領域と呼ぶ。)を狭くする、
ヘッドアップディスプレイ装置。
【請求項9】
前記部分発光領域は、
前記観察者の目が存在すると推定される主部分視域に対応する主部分発光領域と、前記主部分視域の周囲の副部分視域に対応する副部分発光領域と、を含み、
前記プロセッサは、
前記目位置が所定の閾値より低いと推定される場合、前記主部分視域の上側の前記副部分視域に対応する前記副部分発光領域での光強度を少なくとも低下、又は消灯することで、前記部分発光領域を狭くする、
請求項8に記載のヘッドアップディスプレイ装置。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、車両などの移動体に用いられるヘッドアップディスプレイ装置などに関する。
【背景技術】
【0002】
車両のウインドシールドに、特定波長領域の光に対する回折効率(反射率)が高いホログラム素子を設け、これに内部で生成した表示画像の画像光を投影することで、虚像を視認させるヘッドアップディスプレイ装置が記載されている。
【0003】
特許文献1には、ホログラム素子への光の入射角と、回折角(反射角)との差を大きくする(非正反射の程度を大きくする)ことで、ウインドシールドで正反射する光を視域に向きにくくし、ホログラム素子での回折光のみを入射させやすくする方法が提案されている。
【先行技術文献】
【特許文献】
【0004】
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、ヘッドアップディスプレイ装置で生成される表示画像の各ピクセルから出射される画像光は、所定の幅を有する出射角を有しているため、一部の出射角の画像光は、ウインドシールドで正反射されても、観察者の目が配置される視域(回折光を向けた視域)とは異なる方向に向かうため、視認者に視認されないが、他部の出射角の画像光は、ウインドシールドで正反射されると、観察者の目が配置される視域に向かうため、観察者は、ホログラム素子で回折された光と、ウインドシールドで正反射された光と、の2重の光(2重像)を視認することが依然として想定され、この観点で改善の余地があった。
【0006】
また、従来のヘッドアップディスプレイ装置(ホログラム素子などの有無によらない。)では、表示される画像(虚像)が視認できる領域の広さは、目の位置によらず、一定であった。
【課題を解決するための手段】
【0007】
本明細書に開示される特定の実施形態の要約を以下に示す。これらの態様が、これらの特定の実施形態の概要を読者に提供するためだけに提示され、この開示の範囲を限定するものではないことを理解されたい。実際に、本開示は、以下に記載されない種々の態様を包含し得る。
【0008】
本開示の概要は、目高さにより視認できる領域の広さを調整できるようにする。または、本開示の概要は、虚像の表示品位を向上させる。より具体的には、2重像の発生を抑制することに関する。
【0009】
したがって、本明細書に記載される表示制御装置、又はヘッドアップディスプレイ装置は、前記課題を解決するため、以下の手段を採用した。本実施形態は、観察者の目位置に応じて、光源素子における発光領域の広さを制御することで、アイボックス内で虚像を視認可能な広さを調整する、ことをその要旨とする。
【0010】
本明細書に記載される第1の態様における表示制御装置では、被投影部に画像光を投影することで、アイボックスの範囲内から観察者が虚像を視認するヘッドアップディスプレイ装置を制御する表示制御装置において、発光領域を有し、発光領域の部分領域毎に選択的に照明光を出射可能な光源素子と、光源素子から入射した照明光を変調して画像光として出射する光変調素子と、異なる部分領域から出射された照明光が光変調素子により変調された画像光毎に、アイボックス内の異なる部分視域に向けて集光させる集光光学系と、光源素子を制御するプロセッサと、を備え、プロセッサは、アイボックス内の観察者の目位置に関する情報、又は目位置を推定可能な情報を取得し、目位置の高さに応じて、所定の光強度以上で発光させる部分領域(以下では、部分発光領域とも呼ぶ。)の広さを変える。
【0011】
第1の態様における表示制御装置によれば、プロセッサは、観察者の目の高さに応じて、光源素子の発光させる領域(以下では、部分発光領域とも呼ぶ。)を変えることで、アイボックス内で虚像を視認可能な広さを観察者の目高さに応じて調整することができる。目高さに応じて画像光を向ける範囲を調整する、換言すると、画像光を向けない範囲を調整することで、余計な画像光の出射を抑制することができる。
【図面の簡単な説明】
【0012】
【
図1】
図1は、いくつかの実施形態に係る、車両用表示システムの車両への適用例を示す図である。
【
図2】
図2は、いくつかの実施形態に係る、ヘッドアップディスプレイ装置の構成を示す図である
【
図3】
図3は、いくつかの実施形態に係る、ヘッドアップディスプレイ装置における光路を説明する図である。
【
図4】
図4は、いくつかの実施形態に係る、アイボックス内を仮想的に区切った部分視域の例を示す図である。
【
図5】
図5は、いくつかの実施形態に係る、走査デバイスが、光拡散光学系を走査する様子を示す図である。
【
図6】
図6は、いくつかの実施形態に係る、部分視域に画像光が配光された際の光量(輝度)の分布の例を示す図である。
【
図7A】
図7Aは、いくつかの実施形態に係る、観察者の目位置に対して複数の部分視域に画像光が向けられる態様を説明する図である。
【
図7B】
図7Bは、
図7Aの部分視域に対応する部分領域に向けて、走査デバイスが、光拡散光学系を走査する様子を示す図である。
【
図8】
図8は、いくつかの実施形態に係る、複数の部分領域で拡散された光による画像光が、複数の部分視域に配光された際の光量(輝度)の分布の例を示す図である。
【
図9】
図9は、いくつかの実施形態に係る、車両用表示システムのブロック図である。
【
図10A】
図10Aは、いくつかの実施形態に従って、観察者の目位置に基づき、スポットライティングパターン(画像光が配光される位置)を設定する動作を実行する方法を示すフロー図である。
【
図11A】
図11Aは、いくつかの実施形態に係る、第1スポットライティングパターンを説明するための図である。
【
図11B】
図11Bは、いくつかの実施形態に係る、第2スポットライティングパターンを説明するための図である。
【
図11C】
図11Cは、いくつかの実施形態に係る、第2スポットライティングパターンを説明するための図である。
【
図11D】
図11Dは、いくつかの実施形態に係る、第2スポットライティングパターンを説明するための図である。
【
図12】
図12は、いくつかの実施形態に従って、観察者の目高さに基づき、スポットライティングパターン(画像光が配光される位置)を設定する動作を実行する方法を示すフロー図である。
【
図13】
図13は、いくつかの実施形態に従って、観察者の目高さに基づき、スポットライティングパターン(画像光が配光される位置)を設定する動作を実行する方法を示すフロー図である。
【
図14】
図14は、ヘッドアップディスプレイ装置の他の態様を示す図である。
【発明を実施するための形態】
【0013】
以下、
図1ないし
図15では、例示的な車両用表示システム、ヘッドアップディスプレイ装置、表示制御装置の構成、及び動作の説明を提供する。なお、本発明は以下の実施形態(図面の内容も含む)によって限定されるものではない。下記の実施形態に変更(構成要素の削除も含む)を加えることができるのはもちろんである。また、以下の説明では、本発明の理解を容易にするために、公知の技術的事項の説明を適宜省略する。
【0014】
図1のヘッドアップディスプレイシステム10は、車両1に搭載され、ヘッドアップディスプレイ装置(以下、HUD装置とも記載する。)20と、HUD装置20を制御する表示制御装置30と、後述する非正反射素子3を含み、HUD装置20からの画像光Lを受ける被投影部2と、から構成される。HUD装置20は、観察者(典型的には、車両の運転席に着座する運転者)の正面(前記正面は、前方、車両の進行方向とも換言できる。)に配置される車両のフロントウインドシールド(被投影部2の一例。)に向けて画像光Lを投影する。
【0015】
非正反射素子3は、例えばホログラフィック素子、回折光学素子(DOE)で構成することができる。ホログラフィック素子は、例えば,フォトポリマーや重クロム酸ゼラチンなどのホログラム材料などからなり、入射した光を所望の方向へ向けて回折する光学部材であり、物体光と参照光の干渉パターンを記録することで作成される。非正反射素子3は、例えば、シート状であり、被投影部2に内包され、HUD装置20が投影する画像光Lを車両1の内側の所定の領域であるアイボックス200へ回折する。例えば、後述する非正反射素子3は、HUD装置20から受けた画像光Lを回折することで、観察者に視認される画像(虚像)のサイズを大きくすることができる。観察者は、アイボックス200内に目700を配置することで、被投影部2より遠方側に、HUD装置20が表示する表示画像(不図示)の虚像Vを視認することができる。
【0016】
本実施形態の説明で用いる「アイボックス」とは、(1)領域内では画像の虚像Vの全部が視認でき、領域外では画像の虚像Vの少なくとも一部分が視認されない領域、(2)領域内では画像の虚像Vの少なくとも一部が視認でき、領域外では画像の虚像Vの一部分も視認されない領域、(3)領域内では画像の虚像Vの少なくとも一部が所定の輝度以上で視認でき、領域外では画像の虚像Vの全体が前記所定の輝度未満である領域、又は(4)HUD装置20が立体視可能な虚像Vを表示可能である場合、虚像Vの少なくとも一部が立体視でき、領域外では虚像Vの一部分も立体視されない領域である。すなわち、観察者が目(両目)をアイボックス200外に配置すると、観察者は、画像の虚像Vの全体が視認できない、画像の虚像Vの全体の視認性が非常に低く知覚しづらい、又は画像の虚像Vが立体視できない。前記所定の輝度とは、例えば、アイボックスの中心で視認される画像の虚像の輝度に対して1/50程度である。「アイボックス」は、HUD装置20が搭載される車両で観察者の視点位置の配置が想定されるエリア(アイリプスとも呼ぶ。)と同じ、又は前記アイリプスの大部分(例えば、80%以上。)を含むように設定される。
【0017】
虚像表示領域100は、HUD装置20の内部で生成された画像が、虚像Vとして結像する平面、曲面、又は一部曲面の領域であり、結像面とも呼ばれる。虚像表示領域100は、HUD装置20の後述する表示器50の表示面(例えば、液晶光変調素子の出射面)52が虚像として結像される位置であり、すなわち、虚像表示領域100は、HUD装置20の後述する表示面52に対応し(言い換えると、虚像表示領域100は、後述する表示器50の表示面52と、共役関係となる。)、そして、虚像表示領域100で視認される虚像は、HUD装置20の後述する表示面52に表示される画像に対応している、と言える。虚像表示領域100自体は、実際に観察者の目に視認されない、又は視認されにくい程度に視認性が低いことが好ましい。
【0018】
虚像表示領域100には、車両1の左右方向(X軸方向)を軸とした水平方向(XZ平面)とのなす角度(
図1のチルト角θt)と、アイボックス200の中心205と虚像表示領域100の上端101とを結ぶ線分と、アイボックス中心と虚像表示領域100の下端102とを結ぶ線分とのなす角度を虚像表示領域100の縦画角として、この縦画角の二等分線と水平方向(XZ平面)とのなす角度(
図1の縦配置角θv)と、が設定される。本実施形態の虚像表示領域100は、前方(Z軸正方向)を向いた際に概ね正対するように、概ねL[degree]のチルト角θtを有する。但し、チルト角θtは、これに限定されるものではなく、0≦θt<L[degree]の範囲で変更し得る。この場合、例えば、チルト角θtは、60[degree]に設定され、虚像表示領域100は、観察者から見て上側の領域が下側の領域より遠方になるように配置されてもよい。
【0019】
図2は、本実施形態のHUD装置20の構成を示す図である。HUD装置20は、画像を表示する表示面52を有する表示器50と、リレー光学系(集光光学系)40と、を含む。なお、後述する本実施形態の表示器50は、2D表示器であるが、3D表示器であってもよい。すなわち、HUD装置20は、アイボックス200に配置された前記アイポイント(左右の目)に対応した視差画像を表示することで、虚像表示領域100を基準に立体画像の虚像を観察者に知覚させてもよい(なお、3D表示器は、両眼視差方式の3D表示器でなくてもよい。)。また、リレー光学系40の一部は、省略され得る。
【0020】
図2の表示器50は、光変調素子51と、指向性光源ユニット60と、から構成される。表示面52は、光変調素子51の視認側の表面であり、画像の画像光Lを出射する。表示面52の中心からリレー光学系40及び被投影部2を介してアイボックス200(アイボックス200の中心205)へ向かう画像光Lの光軸Lpに対する、表示面52の角度の設定により、虚像表示領域100の角度(チルト角θtを含む。)が設定され得る。また、後述する指向性光源ユニット60が、照明光の向きを変えることにより、アイボックス200内で虚像Vを視認できる(視認しやすい)位置を変化させることができる。
【0021】
リレー光学系40は、表示器50から出射された画像光L(表示器50からアイボックス200へ向かう光。)の光路上に配置され、表示器50からの画像光LをHUD装置20の外側のフロントウインドシールド2に投影する1つ又はそれ以上の光学部材で構成される。
図2のリレー光学系40は、1つの凹状の第1ミラー41と、1つの平面の第2ミラー42と、を含む。
【0022】
第1ミラー41は、例えば、正の光学的パワーを有する自由曲面形状である。換言すると、第1ミラー41は、領域毎に光学的パワーが異なる曲面形状であってもよく、すなわち、画像光Lが通る領域(光路)に応じて画像光Lに付加される光学的パワーが異なってもよい。具体的には、表示面52の各領域からアイボックス200へ向かう第1画像光L1、第2画像光L2、第3画像光L3(
図2参照)とで、リレー光学系40によって付加される光学的パワーが異なってもよい。
【0023】
なお、第2ミラー42は、例えば、平面ミラーであるが、これに限定されるものではなく、光学的パワーを有する曲面であってもよい。すなわち、リレー光学系40は、複数のミラー(例えば、本実施形態の第1ミラー41、第2ミラー42。)を合成することで、画像光Lが通る領域(光路)に応じて付加される光学的パワーを異ならせてもよい。なお、第2ミラー42は、省略されてもよい。すなわち、表示器50から出射される画像光Lは、第1ミラー41により被投影部(フロントウインドシールド)2に反射されてもよい。
【0024】
また、本実施形態では、リレー光学系40は、2つのミラーを含んでいたが、これに限定されるものではなく、これらに追加又は代替で、1つ又はそれ以上の、レンズなどの屈折光学部材、ホログラムなどの回折光学部材、反射光学部材、又はこれらの組み合わせを含んでいてもよい。
【0025】
また、本実施形態のリレー光学系40は、この曲面形状(光学的パワーの一例。)により、虚像表示領域100までの距離を設定する機能、及び表示面52に表示された画像を拡大した虚像を生成する機能、を有するが、これに加えて、フロントウインドシールド2の湾曲形状により生じ得る虚像の歪みを抑制する(補正する)機能、を有していてもよい。
【0026】
また、リレー光学系40は、表示制御装置30により制御される図示しない単数又は複数のアクチュエータが取り付けられ、回転(及び/又は移動)可能であってもよい。
【0027】
光変調素子51は、指向性光源ユニット60から照明光を入射し、空間光変調した画像光Lをリレー光学系40(第2ミラー42)へ向けて出射する。光変調素子51は、例えば、観察者から見た虚像Vの上下方向(Y軸方向)に対応する画素が配列される方向が短辺であり、これと直交する観察者から見た虚像Vの左右方向(X軸方向)に対応する画素が配列される方向が長辺である矩形状である。観察者は、光変調素子51の透過光(光変調素子51の種類によっては反射光、回折光なども考えられる。)を、虚像光学系90を介して視認する。虚像光学系90は、
図2で示すリレー光学系40とフロントウインドシールド2(これに含まれる非正反射素子3)とを合わせたものである。なお、光変調素子(表示器)50は、LCoSやDMDを用いた反射型表示パネルであってもよい。
【0028】
図3を参照する。
図3は、視点追従スポットライティング制御を実施する機能を備えたHUD装置20(指向性光源ユニット60)の主要な構成の一例を示す図である。
図3に示されるHUD装置20(指向性光源ユニット60)では、アイボックス200は、観察者(車両の運転者)が車両の前方を向いた場合の左右方向(X軸方向)に9個に分割され、上下方向(Y軸方向)に9個に分割されたn個(本実施例では、81個。)の部分視域E(
図4におけるE11~E99)に分割されており、この部分視域Eを単位として、運転者(ユーザー)の目(視点)の位置を検出することが可能であり、目位置が検出された部分視域Eに向けて画像光Lを局所的に向ける視点追従スポットライティング制御が実施される。
【0029】
後述する表示制御装置30は、後述する目位置検出部411から観察者の目位置を検出し、その観察者の目位置、及びその周辺でのみ明るい画像(虚像V)が視認されるように指向性光源ユニット60を制御する。これらについては、後で詳述する。
【0030】
指向性光源ユニット60は、光源70、走査デバイス(スキャナ)75、第1のフィールドレンズ76、第2のフィールドレンズ77、及び光拡散光学系80から構成される。走査デバイス75は、光源70から出射されるレーザー光を、光拡散光学系80のn個の部分領域D(本実施形態の部分領域Dは、D11~D99までの81個。)上を走査可能であり、表示制御装置30が、目位置検出部411で検出した目位置が存在する部分視域Eに対応する部分領域Dに強いレーザー光を照射するように、光源70を制御することで、観察者に画像(虚像V)を視認させる。
【0031】
光源70は、例えば、異なる3色(例えばR,G,B)をそれぞれ出射可能な複数のレーザーダイオードなどであり、複数のレーザービームをダイクロイックミラーなどで混色(例えば、白色)し、1つの照明用レーザービーム74として走査デバイス75に向ける。光源70は、後述する表示制御装置30からの制御のもと、照明用レーザービーム74の強度を調整可能である(消灯も含む)。
【0032】
走査デバイス(スキャナ)75は、光源70から出射された照明用レーザービーム74を2次元的に偏向する素子であり、例えば、ポリゴンビラー、ガルバノミラー、MEMS(Micro Electro Mechanical System)、技術を用いたMEMSミラー装置)などの光走査装置である。走査デバイス75は、互いに直交する2軸を用いて揺動しうるように構成された微小なミラーである。走査デバイス75は、例えば、主走査方向で高速で走査し、かつ主走査方向と直交する副走査方向で低速で走査する。
【0033】
第1のフィールドレンズ76は、走査デバイス75と光拡散光学系80との間の走査デバイス75が走査する照明用レーザービーム74の光路上に配置されている。第1のフィールドレンズ76は、受光した照明用レーザービーム74を、第1のフィールドレンズ76の光軸に平行な方向に平行化させる機能を持つ。なお、第1のフィールドレンズ76は、必須の構成部品でないため、省略しても良い。ただし、第1のフィールドレンズ76を設けることにより、光拡散光学系80の各部分領域Dから出射された照明用レーザービーム74が変調された画像光Lを、アイボックス200の各部分視域Eに精度よく向かわせることができる。なお、第1のフィールドレンズ76は、屈折光学系であるが、走査デバイス75と光拡散光学系80との間の照明用レーザービーム74の光路上には、これに代えて、1つ又は複数の他の屈折光学系、反射光学系、回折光学系を設けても良い。
【0034】
第2のフィールドレンズ(集光光学系)77は、光拡散光学系80と光変調素子51との間の各部分領域Dにより拡散された照明用レーザービーム74の光路上に配置されており、異なる部分領域Dから出射された照明光が光変調素子51により変調された画像光L毎に、アイボックス200内の異なる部分視域Eに向けて集光させる集光光学系として機能する。本実施形態の第2のフィールドレンズ77は、1つ又は複数のフィールドレンズから構成され、光拡散光学系80の各部分領域Dにより拡散された照明用レーザービーム74が光変調素子51の全面を透過照明するように設計された前段光学部材(バックライト光学部材)である。また、第2のフィールドレンズ77は、光変調素子51から出射される画像光Lが虚像光学系90(リレー光学系40及びフロントウインドシールド2から構成されるHUD光学部材)を経てアイボックス200内の任意の位置にある部分視域Eに届くように設計されている。異なる部分領域Dから出射された照明光が光変調素子51により変調された画像光L毎に、アイボックス200内の異なる部分視域Eに向けて集光させる集光光学系は、フィールドレンズに代えて(又は加えて)、この他の1つ又は複数の屈折光学系、反射光学系、回折光学系、など様々な光学系を含んでいても良い。
【0035】
拡散板78は、光変調素子51と第2のフィールドレンズ77との間の照明用レーザービーム74の光路上に配置されている。拡散板78は、受光した照明用レーザービーム74光を拡散させて光変調素子51に出射する。これにより、アイボックス200の各部分視域Eで視認される部分領域Dから出射された照明用レーザービーム74により生成される画像光Lにおける輝度ムラを低減できる。拡散板78は、光を拡散させる機能がある光学部材であれば良く、例えばその表面がビーズ部材や微細な凹凸構造、粗面で構成される。また、ドットシートや透過性の乳白色のシートでも良い。
【0036】
まず、光拡散光学系80として、レンズアレイ81を用いる例を説明する。本実施形態のレンズアレイ81は、n個の部分領域Dに分かれており、各部分領域Dには、曲率を有する微小なレンズが形成される。各部分領域Dに照明用レーザービーム74が入射されると、微小レンズによって屈折された照明用レーザービーム74が拡散光となって放射される。より詳細には、光源70からレンズアレイ81(光拡散光学系80)のn個のいずれかの部分領域Dに入射された照明用レーザービーム74は、微小レンズで屈折されて、第2のフィールドレンズ77、拡散板78、を透過した後に、光変調素子51の全面に照射され、光変調された画像光Lが虚像光学系90を通過した後に、所定の部分領域Dに対応する所定の部分視域Eに照射される。
【0037】
次に、光拡散光学系80として、ホログラム記録媒体82を用いる例を説明する。本実施形態のホログラム記録媒体82は、n個の部分領域Dに分かれており、各部分領域Dには、干渉縞が形成される。各部分領域Dに照明用レーザービーム74が入射されると、干渉縞によって回折された照明用レーザービーム74が拡散光となって放射される。より詳細には、光源70からレンズアレイ81(光拡散光学系80)のn個のいずれかの部分領域Dに入射された照明用レーザービーム74は、干渉縞で回折されて、第2のフィールドレンズ77、拡散板78、を透過した後に、光変調素子51の全面に照射され、光変調された画像光Lが虚像光学系90を通過した後に、所定の部分領域Dに対応する所定の部分視域Eに照射される。なお、光拡散光学系80として、フレネルレンズであってもよい。
【0038】
図5は、走査デバイス(スキャナ)75が、光拡散光学系80を走査する様子を示す図である。この
図5では、第1のフィールドレンズ76は省略してある。光拡散光学系80は、アイボックス200の部分視域Eが水平方向に並ぶ第1の方向(X軸)に対応する第3の方向(α軸)と、部分視域Eが鉛直方向に並ぶ第2の方向(Y軸)に対応する第4の方向(β軸)と、を有する。走査デバイス75は、第3の方向(α軸)に沿って主走査を行いながら、第4の方向(β軸)に沿って副走査を行う。
図5の例では、走査デバイス75は、主走査の往路と復路とで、異なる部分領域Dを通り、表示制御装置30の制御により所定の部分領域Dに照明用レーザービーム74を照射するようになっている。具体的には、走査デバイス75は、往路として、部分領域D99からD91まで高速で走査しながら表示制御装置30が選択する所定の部分領域D(部分発光領域DM)に照明用レーザービーム74を照射し、部分発光領域DMには照明用レーザービーム74を照射せず、その後、復路として、部分領域D81からD89まで走査しながら表示制御装置30が選択する所定の部分発光領域DMに照明用レーザービーム74を照射する。しかし、これに限定されない。
【0039】
他の例の走査デバイス75は、往路のみ(代替えとして、復路のみ)で照明用レーザービーム74が照射されてもよい。具体的には、走査デバイス75は、往路として、部分領域D99からD91まで走査しながら表示制御装置30が選択する所定の部分発光領域DMに照明用レーザービーム74を照射した後、照明用レーザービーム74を照射することなく、部分領域D89まで走査し、再び往路として、部分領域D89からD81まで走査しながら表示制御装置30が選択する所定の部分発光領域DMに照明用レーザービーム74を照射してもよい。
【0040】
他の例の走査デバイス75は、往路と復路で同じ部分領域Dに照明用レーザービーム74を照射してもよい具体的には、走査デバイス75は、往路として、部分領域D99からD91まで走査しながら表示制御装置30が選択する所定の部分発光領域DMに照明用レーザービーム74を照射した後、復路として、再び部分領域D91からD99まで走査しながら表示制御装置30が選択する所定の部分発光領域DMに照明用レーザービーム74を照射する。なお、往路と復路とで照明用レーザービーム74が照射される部分領域D内での位置は異なる。すなわち、照明用レーザービーム74は、往路では、所定の部分領域Dのうち上側(βの負方向)の位置に照射され、復路では、所定の部分領域Dのうち下側(βの正方向)の位置に照射されるようにしてもよい。
【0041】
図5の例では、表示制御装置30は、光拡散光学系80の部分発光領域DM(部分領域D52、D55)に照明用レーザービーム74が照射されるように、走査デバイス75が部分発光領域DM(部分領域D52、D55)を走査するタイミングに合わせて光源70を駆動する。これにより、
図4に示すように、光拡散光学系80の部分発光領域DM(部分領域D52、D55)に対応するアイボックス200の後述のスポットライティングパターンSP(部分視域E52、E55)に光変調素子51の画像光Lが向けられる。なお、観察者の右目が検出される部分視域E、又はこの近傍の部分視域Eも加えた右目用スポットライティングパターンSPR(以下では、右目用スポットライティングパターンSPRとも呼ぶ)、この右目用スポットライティングパターンSPRと対応する部分発光領域DM(部分領域D)を右目用部分発光領域DMR、観察者の左目が検出される部分視域E、又はこの近傍の部分視域Eを加えた左目用スポットライティングパターンSPL、そして、この左目用スポットライティングパターンSPLと対応する部分発光領域DM(部分領域D)を左目用部分発光領域DML、とする。したがって、右目用部分発光領域DMR(D52)から出射された照明用レーザービーム74が光変調素子51で変調された画像光Lは、右目用スポットライティングパターンSPR(E52)に照射され、かつ左目用部分発光領域DML(D55)から出射された照明用レーザービーム74が光変調素子51で変調された画像光Lは、左目用スポットライティングパターンSPL(E55)に照射される。また、表示制御装置30は、右目用部分発光領域DMRや左目用部分発光領域DML以外の部分領域Dには、照明用レーザービーム74を照射しない、又は非常に低い光強度の照明用レーザービーム74を照射する。これにより、観察者の目位置が存在する視域Eに効率よく画像光Lを照射し、消費電力を低く抑えることができる。
【0042】
図6は、スポットライティングパターンSP(部分視域E55)に画像光Lが配光された際の光量(輝度)の分布の例を示す図である。DB1は、アイボックス200の左右方向(X軸方向)の光量分布を示し、DB2は、アイボックス200の上下方向(Y軸方向)の光量分布を示す。いずれの分布も部分視域Eの境界内において、所定閾値Lth以上の光量が確保されている。また、光量分布DB1、DB2は、部分視域Eの境界の外側にも光量がはみ出して広がり、光の強度は、急峻に低下せず、徐々に(勾配をもって)低下する。よって、視点が、境界の外側に移動したときでも、表示(虚像)が薄くなって消えることになり、唐突に消えることがない。これによって違和感、不安感が抑制(低減)される。
【0043】
また、他の好ましい例では、発光領域(ライティングのエリア)内においては、所定の輝度レベルとなるように均一(略均一を含む)な光の照射がなされるようにする。具体的には、光量分布DB1、DB2がトップハット形状となっていてもよい。これにより、照明される部分視域E内では、目位置が移動しても画像(虚像V)の輝度を略均一に視認させることができる。但し、本実施形態において、光量分布DB1、DB2は、ガウシアン分布であってもよい。
【0044】
なお、上記実施形態では、観察者の片目毎に1つの部分視域EからなるスポットライティングパターンSPに画像光Lが照射されていたが、これに限定されない。すなわち、観察者の目が存在する部分視域Eとその近傍の部分視域Eとを含む複数の部分視域EからなるスポットライティングパターンSPに画像光Lが向けられてよい。換言すると、観察者の片目毎に2つ以上の部分視域Eに画像光Lを照射してもよい。
【0045】
図7Aは、観察者の目位置に対して複数の部分視域に画像光が向けられる態様を説明する図である。ここで、観察者の右目700Rは、部分視域E52で検出され、左目700Lは、部分視域E55で検出されたとする。右目用画像光Lが向けられる部分視域E(右目用スポットライティングパターンSPR)は、部分視域E52を中心として、上側の部分視域E42、下側の部分視域E62、右側の部分視域E51、左側の部分視域E53、左上の部分視域E43、左下の部分視域E63、右下の部分視域E61、及び右上の部分視域E41の9つである。また、同様に、 左目用画像光Lが向けられる部分視域E(左目用スポットライティングパターンSPL)は、部分視域E55を中心として、上側の部分視域E45、下側の部分視域E65、右側の部分視域E54、左側の部分視域E56、左上の部分視域E46、左下の部分視域E66、右下の部分視域E64、及び右上の部分視域E44の9つである。
【0046】
図7Bは、
図7Aで示す例における走査デバイスが、光拡散光学系を走査する様子を示す図である。左目用部分発光領域DMLは、右目700Rが存在する部分視域E52に対応する主部分発光領域(DMA)と、主部分発光領域(DMA)の周辺に配置される部分視域Eである副部分発光領域(DMB)と、を含む。
図7Aの右目用スポットライティングパターンSPRに対応する右目用部分発光領域DMRは、主部分発光領域(DMA)である部分領域D51と、部分領域D51を中心とした副部分発光領域(DMB)、紙面上の下側の部分領域D42、上側の部分領域D62、右側の部分領域D51、左側の部分領域D53、左下の部分領域D43、左上の部分領域D63、右上の部分領域D61、及び右下の部分領域D41の9つの部分領域Dを含む。一方、
図7Aの左目用スポットライティングパターンSPLに対応する左目用部分発光領域DMLは、主部分発光領域(DMA)である部分領域D55と、部分領域D55を中心とした副部分発光領域(DMB)、紙面上の下側の部分領域D45、上側の部分領域D65、右側の部分領域D54、左側の部分領域D56、左下の部分領域D46、左上の部分領域D66、右上の部分領域D64、及び右下の部分領域D44の9つの部分領域Dを含む。
【0047】
図8は、複数の部分視域Eを含むスポットライティングパターンSPに画像光Lが配光された際の光量(輝度)の分布の例を示す図である。DB3は、アイボックス200の左右方向(X軸方向)の光量分布を示し、DB4は、アイボックス200の上下方向(Y軸方向)の光量分布を示す。いずれの分布もスポットライティングパターンSPの境界内において、所定閾値Lth以上の光量が確保されている。また、光量分布DB3、DB4は、スポットライティングパターンSPの境界の外側にも光量がはみ出して広がり、光の強度は、急峻に低下せず、徐々に(勾配をもって)低下する。よって、観察者の目位置が、部分視域E55から多少移動しても部分視域E55の周囲の視域内であれば、所定閾値Lth以上の光量により所望の輝度の画像(虚像V)を観察者に視認させることができる。なお、目位置が大きく移動して、左目用スポットライティングパターンSPLの外側に移動したときでも、表示(虚像)が薄くなって消えることになり、唐突に消えることがない。これによって違和感、不安感が抑制(低減)される。
【0048】
図9は、いくつかの実施形態に係る、車両用表示システム10のブロック図である。表示制御装置30は、1つ又は複数のI/Oインタフェース31、1つ又は複数のプロセッサ33、1つ又は複数の画像処理回路35、及び1つ又は複数のメモリ37を備える。
図9に記載される様々な機能ブロックは、ハードウェア、ソフトウェア、又はこれら両方の組み合わせで構成されてもよい。
図9は、1つの実施形態に過ぎず、図示された構成要素は、より数の少ない構成要素に組み合わされてもよく、又は追加の構成要素があってもよい。例えば、画像処理回路35(例えば、グラフィック処理ユニット)が、1つ又は複数のプロセッサ33に含まれてもよい。
【0049】
図示するように、プロセッサ33及び画像処理回路35は、メモリ37と動作可能に連結される。より具体的には、プロセッサ33及び画像処理回路35は、メモリ37に記憶されているプログラムを実行することで、例えば、光源70が出射する照明用レーザービーム74の調整、画像データの生成及び/又は送信するなど、車両用表示システム10(HUD装置20、光源70、及び走査デバイス75)の操作を行うことができる。プロセッサ33及び/又は画像処理回路35は、少なくとも1つの汎用マイクロプロセッサ(例えば、中央処理装置(CPU))、少なくとも1つの特定用途向け集積回路(ASIC)、少なくとも1つのフィールドプログラマブルゲートアレイ(FPGA)、又はそれらの任意の組み合わせを含むことができる。メモリ37は、ハードディスクのような任意のタイプの磁気媒体、CD及びDVDのような任意のタイプの光学媒体、揮発性メモリのような任意のタイプの半導体メモリ、及び不揮発性メモリを含む。揮発性メモリは、DRAM及びSRAMを含み、不揮発性メモリは、ROM及びNVRAMを含んでもよい。
【0050】
図示するように、プロセッサ33は、I/Oインタフェース31と動作可能に連結されている。I/Oインタフェース31は、例えば、車両に設けられた後述の車両ECU401、又は他の電子機器(後述する符号403~419)と、CAN(Controller Area Network)の規格に応じて通信(CAN通信とも称する)を行う。なお、I/Oインタフェース31が採用する通信規格は、CANに限定されず、例えば、CANFD(CAN with Flexible Data Rate)、LIN(Local Interconnect Network)、Ethernet(登録商標)、MOST(Media Oriented Systems Transport:MOSTは登録商標)、UART、もしくはUSBなどの有線通信インタフェース、又は、例えば、Bluetooth(登録商標)ネットワークなどのパーソナルエリアネットワーク(PAN)、802.11x Wi-Fi(登録商標)ネットワークなどのローカルエリアネットワーク(LAN)等の数十メートル内の近距離無線通信インタフェースである車内通信(内部通信)インタフェースを含む。また、I/Oインタフェース31は、無線ワイドエリアネットワーク(WWAN0、IEEE802.16-2004(WiMAX:Worldwide Interoperability for Microwave Access))、IEEE802.16eベース(Mobile WiMAX)、4G、4G-LTE、LTE Advanced、5Gなどのセルラー通信規格により広域通信網(例えば、インターネット通信網)などの車外通信(外部通信)インタフェースを含んでいてもよい。
【0051】
図示するように、プロセッサ33は、I/Oインタフェース31と相互動作可能に連結されることで、車両用表示システム10(I/Oインタフェース31)に接続される種々の他の電子機器等と情報を授受可能となる。I/Oインタフェース31には、例えば、車両ECU401、道路情報データベース403、自車位置検出部405、車外センサ407、操作検出部409、目位置検出部411、IMU413、視線方向検出部415、携帯情報端末417、及び外部通信機器419などが動作可能に連結される。なお、I/Oインタフェース31は、車両用表示システム10に接続される他の電子機器等から受信する情報を加工(変換、演算、解析)する機能を含んでいてもよい。
【0052】
光変調素子(表示器)50は、例えば、液晶光変調素子であり、プロセッサ33及び画像処理回路35に動作可能に連結される。したがって、光変調素子51によって表示される画像は、プロセッサ33及び/又は画像処理回路35から受信された画像データに基づいてもよい。プロセッサ33及び画像処理回路35は、I/Oインタフェース31から取得される情報に基づき、光変調素子51が表示する画像を制御する。
【0053】
車両ECU401は、車両1に設けられたセンサやスイッチから、車両1の状態(例えば、走行距離、車速、アクセルペダル開度、ブレーキペダル開度、エンジンスロットル開度、インジェクター燃料噴射量、エンジン回転数、モータ回転数、ステアリング操舵角、シフトポジション、ドライブモード、各種警告状態、姿勢(ロール角、及び/又はピッチング角を含む)、車両の振動(振動の大きさ、頻度、及び/又は周波数を含む))などを取得し、車両1の前記状態を収集、及び管理(制御も含んでもよい。)するものであり、機能の一部として、車両1の前記状態の数値(例えば、車両1の車速。)を示す信号を、表示制御装置30のプロセッサ33へ出力することができる。なお、車両ECU401は、単にセンサ等で検出した数値(例えば、ピッチング角が前傾方向に3[degree]。)をプロセッサ33へ送信することに加え、又はこれに代わり、センサで検出した数値を含む車両1の1つ又は複数の状態に基づく判定結果(例えば、車両1が予め定められた前傾状態の条件を満たしていること。)、若しくは/及び解析結果(例えば、ブレーキペダル開度の情報と組み合わせされて、ブレーキにより車両が前傾状態になったこと。)を、プロセッサ33へ送信してもよい。例えば、車両ECU401は、車両1が車両ECU401のメモリ(不図示)に予め記憶された所定の条件を満たすような判定結果を示す信号を表示制御装置30へ出力してもよい。なお、I/Oインタフェース31は、車両ECU401を介さずに、車両1に設けられた車両1に設けられたセンサやスイッチから、上述したような情報を取得してもよい。
【0054】
また、車両ECU401は、車両用表示システム10が表示する画像を指示する指示信号を表示制御装置30へ出力してもよく、この際、画像の座標、サイズ、種類、表示態様、画像の報知必要度、及び/又は報知必要度を判定する元となる必要度関連情報を、前記指示信号に付加して送信してもよい。
【0055】
道路情報データベース403は、車両1に設けられた図示しないナビゲーション装置、又は車両1と車外通信インタフェース(I/Oインタフェース31)を介して接続される外部サーバー、に含まれ、後述する自車位置検出部405から取得される車両1の位置に基づき、車両1の周辺の情報(車両1の周辺の実オブジェクト関連情報)である車両1が走行する道路情報(車線,白線,停止線,横断歩道,道路の幅員,車線数,交差点,カーブ,分岐路,交通規制など)、地物情報(建物、橋、河川など)の、有無、位置(車両1までの距離を含む)、方向、形状、種類、詳細情報などを読み出し、プロセッサ33に送信してもよい。また、道路情報データベース403は、出発地から目的地までの適切な経路(ナビゲーション情報)を算出し、当該ナビゲーション情報を示す信号、又は経路を示す画像データをプロセッサ33へ出力してもよい。
【0056】
自車位置検出部405は、車両1に設けられたGNSS(全地球航法衛星システム)等であり、現在の車両1の位置、方位を検出し、検出結果を示す信号を、プロセッサ33を介して、又は直接、道路情報データベース403、後述する携帯情報端末417、及び/もしくは外部通信機器419へ出力する。道路情報データベース403、後述する携帯情報端末417、及び/又は外部通信機器419は、自車位置検出部405から車両1の位置情報を連続的、断続的、又は所定のイベント毎に取得することで、車両1の周辺の情報を選択・生成して、プロセッサ33へ出力してもよい。
【0057】
車外センサ407は、車両1の周辺(前方、側方、及び後方)に存在する実オブジェクトを検出する。車外センサ407が検知する実オブジェクトは、例えば、障害物(歩行者、自転車、自動二輪車、他車両など)、後述する走行レーンの路面、区画線、路側物、及び/又は地物(建物など)などを含んでいてもよい。車外センサとしては、例えば、ミリ波レーダ、超音波レーダ、レーザレーダ等のレーダセンサ、カメラ、又はこれらの組み合わせからなる検出ユニットと、当該1つ又は複数の検出ユニットからの検出データを処理する(データフュージョンする)処理装置と、から構成される。これらレーダセンサやカメラセンサによる物体検知については従来の周知の手法を適用する。これらのセンサによる物体検知によって、三次元空間内での実オブジェクトの有無、実オブジェクトが存在する場合には、その実オブジェクトの位置(車両1からの相対的な距離、車両1の進行方向を前後方向とした場合の左右方向の位置、上下方向の位置等)、大きさ(横方向(左右方向)、高さ方向(上下方向)等の大きさ)、移動方向(横方向(左右方向)、奥行き方向(前後方向))、移動速度(横方向(左右方向)、奥行き方向(前後方向))、及び/又は種類等を検出してもよい。1つ又は複数の車外センサ407は、各センサの検知周期毎に、車両1の前方の実オブジェクトを検知して、実オブジェクト情報の一例である実オブジェクト情報(実オブジェクトの有無、実オブジェクトが存在する場合には実オブジェクト毎の位置、大きさ、及び/又は種類等の情報)をプロセッサ33に出力することができる。なお、これら実オブジェクト情報は、他の機器(例えば、車両ECU401)を経由してプロセッサ33に送信されてもよい。また、夜間等の周辺が暗いときでも実オブジェクトが検知できるように、センサとしてカメラを利用する場合には赤外線カメラや近赤外線カメラが望ましい。また、センサとしてカメラを利用する場合、視差で距離等も取得できるステレオカメラが望ましい。
【0058】
操作検出部409は、例えば、車両1のCID(Center Information Display)、インストルメントパネルなどに設けられたハードウェアスイッチ、又は画像とタッチセンサなどとを兼ね合わされたソフトウェアスイッチなどであり、車両1の乗員(運転席の着座するユーザ、及び/又は助手席に着座するユーザ)による操作に基づく操作情報を、プロセッサ33へ出力する。例えば、操作検出部409は、ユーザの操作により、虚像表示領域100を移動させる操作に基づく表示領域設定情報、アイボックス200を移動させる操作に基づくアイボックス設定情報、観察者の目位置700を設定する操作に基づく情報などを、プロセッサ33へ出力する。
【0059】
目位置検出部411は、車両1の運転席に着座する観察者の目位置700を検出する赤外線カメラなどのカメラを含み、撮像した画像を、プロセッサ33に出力してもよい。プロセッサ33は、目位置検出部411から撮像画像(目位置700を推定可能な情報の一例。)を取得し、この撮像画像を、パターンマッチングなどの手法で解析することで、観察者の目位置700の座標を検出し、検出した目位置700の座標を示す信号を、プロセッサ33へ出力してもよい。
【0060】
また、目位置検出部411は、カメラの撮像画像を解析した解析結果(例えば、観察者の目位置700が、予め設定された複数の表示パラメータ600(後述する。)が対応する空間的な領域のどこに属しているかを示す信号。)を、プロセッサ33に出力してもよい。なお、車両1の観察者の目位置700、又は観察者の目位置700を推定可能な情報を取得する方法は、これらに限定されるものではなく、既知の目位置検出(推定)技術を用いて取得されてもよい。
【0061】
また、目位置検出部411は、観察者の目位置700の移動速度、及び/又は移動方向を検出し、観察者の目位置700の移動速度、及び/又は移動方向を示す信号を、プロセッサ33に出力してもよい。
【0062】
また、目位置検出部411は、(10)観察者の目位置700がアイボックス200外にあることを示す信号、(20)観察者の目位置700がアイボックス200外にあると推定される信号、又は(30)観察者の目位置700がアイボックス200外になると予測される信号、を検出した場合、所定の条件を満たしたと判定し、当該状態を示す信号を、プロセッサ33に出力してもよい。
【0063】
(20)観察者の目位置700がアイボックス200外にあると推定される信号は、(21)観察者の目位置700が検出できないことを示す信号、(22)観察者の目位置700の移動が検出された後、観察者の目位置700が検出できないことを示す信号、及び/又は(23)観察者の目位置700R、700Lのいずれかがアイボックス200の境界200Aの近傍(前記近傍は、例えば、境界200Aから所定の座標以内であることを含む。)にあることを示す信号、などを含む。
【0064】
(30)観察者の目位置700がアイボックス200外になると予測される信号は、(31)新たに検出した目位置700が、過去に検出した目位置700に対して、メモリ37に予め記憶された目位置移動距離閾値以上であること(所定の単位時間内における目位置の移動が規定範囲より大きいこと。)を示す信号、(32)目位置の移動速度が、メモリ37に予め記憶された目位置移動速度閾値以上であることを示す信号、などを含む。
【0065】
IMU413は、慣性加速に基づいて、車両1の位置、向き、及びこれらの変化(変化速度、変化加速度)を検知するように構成された1つ又は複数のセンサ(例えば、加速度計及びジャイロスコープ)の組み合わせを含むことができる。IMU413は、検出した値(前記検出した値は、車両1の位置、向き、及びこれらの変化(変化速度、変化加速度)を示す信号などを含む。)、検出した値を解析した結果を、プロセッサ33に出力してもよい。前記解析した結果は、前記検出した値が、所定の条件を満たしたか否かの判定結果を示す信号などであり、例えば、車両1の位置又は向きの変化(変化速度、変化加速度)に関する値から、車両1の挙動(振動)が少ないことを示す信号であってもよい。
【0066】
視線方向検出部415は、車両1の運転席に着座する観察者の顔を撮像する赤外線カメラ、又は可視光カメラを含み、撮像した画像を、プロセッサ33に出力してもよい。プロセッサ33は、視線方向検出部415から撮像画像(視線方向を推定可能な情報の一例。)を取得し、この撮像画像を解析することで観察者の視線方向(及び/又は前記注視位置)を特定することができる。なお、視線方向検出部415は、カメラからの撮像画像を解析し、解析結果である観察者の視線方向(及び/又は前記注視位置)を示す信号をプロセッサ33に出力してもよい。なお、車両1の観察者の視線方向を推定可能な情報を取得する方法は、これらに限定されるものではなく、EOG(Electro-oculogram)法、角膜反射法、強膜反射法、プルキンエ像検出法、サーチコイル法、赤外線眼底カメラ法などの他の既知の視線方向検出(推定)技術を用いて取得されてもよい。
【0067】
携帯情報端末417は、スマートフォン、ノートパソコン、スマートウォッチ、又は観察者(又は車両1の他の乗員)が携帯可能なその他の情報機器である。I/Oインタフェース31は、携帯情報端末417とペアリングすることで、携帯情報端末417と通信を行うことが可能であり、携帯情報端末417(又は携帯情報端末を通じたサーバ)に記録されたデータを取得する。携帯情報端末417は、例えば、上述の道路情報データベース403及び自車位置検出部405と同様の機能を有し、前記道路情報(実オブジェクト関連情報の一例。)を取得し、プロセッサ33に送信してもよい。また、携帯情報端末417は、車両1の近傍の商業施設に関連するコマーシャル情報(実オブジェクト関連情報の一例。)を取得し、プロセッサ33に送信してもよい。なお、携帯情報端末417は、携帯情報端末417の所持者(例えば、観察者)のスケジュール情報、携帯情報端末417での着信情報、メールの受信情報などをプロセッサ33に送信し、プロセッサ33及び画像処理回路35は、これらに関する画像データを生成及び/又は送信してもよい。
【0068】
外部通信機器419は、車両1と情報のやりとりをする通信機器であり、例えば、車両1と車車間通信(V2V:Vehicle To Vehicle)により接続される他車両、歩車間通信(V2P:Vehicle To Pedestrian)により接続される歩行者(歩行者が携帯する携帯情報端末)、路車間通信(V2I:Vehicle To roadside Infrastructure)により接続されるネットワーク通信機器であり、広義には、車両1との通信(V2X:Vehicle To Everything)により接続される全てのものを含む。外部通信機器419は、例えば、歩行者、自転車、自動二輪車、他車両(先行車等)、路面、区画線、路側物、及び/又は地物(建物など)の位置を取得し、プロセッサ33へ出力してもよい。また、外部通信機器419は、上述の自車位置検出部405と同様の機能を有し、車両1の位置情報を取得し、プロセッサ33に送信してもよく、さらに上述の道路情報データベース403の機能も有し、前記道路情報(実オブジェクト関連情報の一例。)を取得し、プロセッサ33に送信してもよい。なお、外部通信機器419から取得される情報は、上述のものに限定されない。
【0069】
メモリ37に記憶されたソフトウェア構成要素は、目位置検出モジュール502、目位置推定モジュール504、目位置予測モジュール506、目位置状態判定モジュール508、スポット照明パターン設定モジュール510、表示パラメータ設定モジュール512、グラフィックモジュール514、光源駆動モジュール516、及びアクチュエータ駆動モジュール518、を含む。
【0070】
図10A、
図10Bは、いくつかの実施形態に従って、観察者の目位置に基づき、スポット照明パターンを設定する動作を実行する方法S100を示すフロー図である。方法S100は、ディスプレイを含むHUD装置20と、このHUD装置20を制御する表示制御装置30と、において実行される。方法S100内のいくつかの動作は任意選択的に組み合わされ、いくつかの動作の手順は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
【0071】
図9の目位置検出モジュール502は、観察者の目位置700を検出する(S110)。目位置検出モジュール502は、観察者の目の高さを示す座標(Y軸方向の位置であり、目位置700を示す信号の一例である。)を検出すること、観察者の目の高さ及び奥行方向の位置を示す座標(Y及びZ軸方向の位置であり、目位置700を示す信号の一例である。)を検出すること、及び/又は観察者の目位置700を示す座標(X,Y,Z軸方向の位置であり、目位置700を示す信号の一例である。)を検出すること、に関係する様々な動作を実行するための様々なソフトウェア構成要素を含む。
【0072】
なお、目位置検出モジュール502が検出する目位置700は、右目と左目のそれぞれの位置700R,700L、右目位置700R及び左目位置700Lのうち予め定められた一方の位置、右目位置700R及び左目位置700Lのうち検出可能な(検出しやすい)いずれか一方の位置、又は右目位置700Rと左目位置700Lとから算出される位置(例えば、右目位置と左目位置との中点)、などを含む。例えば、目位置検出モジュール502は、目位置700を、表示設定を更新するタイミングの直前に目位置検出部411から取得した観測位置に基づき決定する。
【0073】
また、目位置検出部411は、目位置検出部411から取得する複数の観察者の目の観測位置に基づき、観察者の目位置700の移動方向、及び/又は移動速度を検出し、観察者の目位置700の移動方向、及び/又は移動速度を示す信号を、プロセッサ33に出力してもよい。
【0074】
目位置推定モジュール504は、目位置を推定可能な情報を取得する(S114)。目位置を推定可能な情報は、例えば、目位置検出部411から取得した撮像画像、車両1の運転席の位置、観察者の顔の位置、座高の高さ、又は複数の観察者の目の観測位置などである。目位置推定モジュール504は、目位置を推定可能な情報から、車両1の観察者の目位置700を推定する。目位置推定モジュール504は、目位置検出部411から取得した撮像画像、車両1の運転席の位置、観察者の顔の位置、座高の高さ、又は複数の観察者の目の観測位置などから、観察者の目位置700を推定すること、など観察者の目位置700を推定することに関係する様々な動作を実行するための様々なソフトウェア構成要素を含む。すなわち、目位置推定モジュール504は、目の位置を推定可能な情報から観察者の目位置700を推定するためのテーブルデータ、演算式、などを含み得る。
【0075】
目位置検出モジュール502は、目位置700を、スポット照明パターンを更新するタイミングの直前に目位置検出部411から取得した目の観測位置と、1つ又は複数の過去に取得した目の観測位置とに基づき、例えば、加重平均などの手法により、算出してもよい。
【0076】
目位置予測モジュール506は、観察者の目位置700を予測可能な情報を取得する(S116)。観察者の目位置700を予測可能な情報は、例えば、目位置検出部411から取得した最新の観測位置、又は1つ又はそれ以上の過去に取得した観測位置などである。目位置予測モジュール506は、観察者の目位置700を予測可能な情報に基づいて、目位置700を予測することに関係する様々な動作を実行するための様々なソフトウェア構成要素を含む。具体的に、例えば、目位置予測モジュール506は、新たな表示設定が適用された画像が観察者に視認されるタイミングの、観察者の目位置700を予測する。目位置予測モジュール506は、例えば、最小二乗法や、カルマンフィルタ、α-βフィルタ、又はパーティクルフィルタなどの予測アルゴリズムを用いて、過去の1つ又はそれ以上の観測位置を用いて、次回の値を予測するようにしてもよい。
【0077】
スポット照明パターン設定モジュール510は、S110で取得した目位置に基づいて、画像光Lを向ける部分視域Eを設定する(S130)。スポット照明パターン設定モジュール510は、観察者の目位置が存在する部分視域Eのみを画像光Lが向けられるスポットライティングパターンに設定してもよい(S132)。具体的には、スポット照明パターン設定モジュール510は、
図4に示すように、観察者の右目700Rが存在する右目用スポットライティングパターンSPR(E52)に画像光Lを向けるように、右目用スポットライティングパターンSPR(E52)に対応する右目用部分発光領域DMR(D52)に照明用レーザービーム74を照射し、かつ観察者の左目700Lが存在する左目用スポットライティングパターンSPL(E55)に画像光Lを向けるように、左目用スポットライティングパターンSPL(E55)に対応する左目用部分発光領域DML(D55)に照明用レーザービーム74を照射し、これら左目用スポットライティングパターンSPL(E55)、左目用部分発光領域DML(D55)以外の部分領域Dには、照明用レーザービーム74を照射しない(又は光強度が非常に低い照明用レーザービーム74を照射する)。
【0078】
また、スポット照明パターン設定モジュール510は、観察者の目位置が存在する部分視域Eとその周辺の部分視域Eとを含む部分領域群をスポットライティングパターンに設定してもよい(S134)。具体的には、スポット照明パターン設定モジュール510は、
図7に示すように、観察者の右目700Rが存在する部分視域E52と周辺の部分視域E41、E42、E43、E51、E53、E61、E62、及びE63を含む右目用スポットライティングパターンSPRに画像光Lを向けるように、これらに対応する右目用部分発光領域DMR(D41、D42、D43、D51、D52、D53、D61、D62、及びD63)に照明用レーザービーム74を照射し、かつ観察者の左目700Lが存在する部分視域E55と周辺の部分視域E44、E45、E46、E54、E56、E64、E65、及びE66を含む左目用スポットライティングパターンSPLに画像光Lを向けるように、これらに対応する左目用部分発光領域DML(D44、D45、D46、D54、D55、D56、D64、D65、及びD66)に照明用レーザービーム74を照射し、これら左目用部分発光領域DML、右目用部分発光領域DMR以外の部分領域Dには、照明用レーザービーム74を照射しない(又は光強度が非常に低い照明用レーザービーム74を照射する)。
【0079】
図9の表示パラメータ設定モジュール512は、目位置検出モジュール502で検出した目位置700、目位置推定モジュール504で推測した目位置700、又は目位置予測モジュール506で予測した目位置700が、予め定められた複数の部分視域Eのどこに属しているか判定し、目位置700に対応する表示パラメータ600を設定する。表示パラメータ設定モジュール512は、目位置700が示すX軸座標、Y軸座標、Z軸座標、又はこれらの組み合わせが、複数の空間的な領域(部分視域E)のどこに属するのかを判定し、目位置700が属する部分視域Eに対応する表示パラメータ600を設定することに関係する様々な動作を実行するための様々なソフトウェア構成要素を含む。すなわち、表示パラメータ設定モジュール512は、目位置700が示すX軸座標、Y軸座標、Z軸座標、又はこれらの組み合わせから、表示パラメータ600を特定するためのテーブルデータ、演算式、などを含み得る。
【0080】
表示パラメータ設定モジュール512は、部分視域E毎に対応する表示パラメータを適用してもよい(S152)。表示パラメータ設定モジュール512は、例えば、
図8の例では、部分視域E44に画像光Lが向かう際に、部分視域E44に対応する表示パラメータ600を光変調素子51に適用し、部分視域E54に画像光Lが向かう際に、部分視域E54に対応する表示パラメータ600を光変調素子51に適用する。
【0081】
また、他の表示パラメータ設定モジュール512は、複数の部分視域E毎に1つの共通の表示パラメータを適用してもよい(S154)。表示パラメータ設定モジュール512は、例えば、
図8に示す複数の部分視域Eを含むスポットライティングパターンSPに画像光Lが向かう際に(部分視域E44,E45,E46,E54,E55,E56,E64,E65,及びE66に画像光Lが向かう際に)、所定の部分視域Eに対応する共通の表示パラメータ600を光変調素子51に適用する。具体的には、表示パラメータ設定モジュール512は、スポットライティングパターンSPの中心の部分視域E(
図8の例ではE55)に対応する表示パラメータ600を光変調素子51に適用してもよい。
【0082】
また、他の表示パラメータ設定モジュール512は、1つのスポットライティングパターンSPに2つ以上の表示パラメータを適用してもよい(S154)。この場合、表示パラメータ設定モジュール512は、予め複数の部分視域Eで共通の表示パラメータ600を設定しておく。例えば、
図8の例で、E43~E46が共通の第1の表示パラメータが設定され、E53~E56が共通の第2の表示パラメータ(第1の表示パラメータとは異なる。)が設定され、かつE63~E66が共通の第3の表示パラメータ(第1、第2の表示パラメータとは異なる。)が設定されるとすると、表示パラメータ設定モジュール512は、部分視域E44,E45,及びE46に画像光Lが向かう際に、第1の表示パラメータを光変調素子51に適用し、部分視域E54,E55,及びE56に画像光Lが向かう際に、第2の表示パラメータを光変調素子51に適用、並びに部分視域E64,E65,及びE66に画像光Lが向かう際に、第3の表示パラメータを光変調素子51に適用する。
【0083】
表示パラメータ600の種類は、(1)目位置700から見て、車両1の外側に位置する実オブジェクトと所定の位置関係になるような画像の配置(画像の配置を制御するために表示器50を制御するパラメータ、及び/又はアクチュエータを制御すパラメータ。)、(2)目位置700から見た虚像光学系90などにより生じ得る画像の歪みを軽減するために画像を事前に歪ませるためのパラメータ(表示器50上で表示される画像を事前に歪ませるために表示器50を制御するパラメータであり、ワーピングパラメータとも呼ばれる。)、(3)目位置から見て、所望の立体画像を視認させるためのパラメータ(表示器50を制御するパラメータ、表示器50の前記光源を制御するパラメータ、アクチュエータを制御するパラメータ、又はこれらの組み合わせを含むパラメータ。)、などを含む。ただし、表示パラメータ設定モジュール512が設定(選択)する表示パラメータ600は、観察者の目位置700に応じて変更されることが好ましいパラメータであればよく、表示パラメータ600の種類は、これらに限定されない。
【0084】
表示パラメータ設定モジュール512は、1種類の表示パラメータにつき、目位置700に対応する1つ又は複数の表示パラメータ600を選定する。目位置700が、例えば、右目位置700R、及び左目位置700Lのそれぞれを含む場合、表示パラメータ設定モジュール512は、右目位置700Rに対応する表示パラメータ600と、左目位置700Lに対応する表示パラメータ600と、の2つを選定し得る。一方、目位置700が、例えば、右目位置700R及び左目位置700Lのうち予め定められた一方の位置、右目位置700R及び左目位置700Lのうち検出可能な(検出しやすい)いずれか一方の位置、又は右目位置700Rと左目位置700Lとから算出される1つの位置(例えば、右目位置700Rと左目位置700Lとの中点)である場合、表示パラメータ設定モジュール512は、目位置700に対応する1つの表示パラメータ600を選定し得る。なお、表示パラメータ設定モジュール512は、目位置700に対応する表示パラメータ600と、当該目位置700の周囲に設定される表示パラメータ600も選定し得る。すなわち、表示パラメータ設定モジュール512は、目位置700に対応する3つ以上の表示パラメータ600を選定し得る。
【0085】
図9の目位置状態判定モジュール508は、観察者の目位置700が不安定状態であるか判定する(S170)。目位置状態判定モジュール508は、(10)観察者の目位置700が移動しているか否かを判定し、目位置の移動を検出した場合、不安定状態であると判定すること、(20)観察者の目位置700が所定の閾値以上の速度で移動しているか否かを判定し、所定の閾値以上の速度での移動を検出した場合、不安定状態であると判定すること、(30)観察者の目位置700が検出できるか否かを判定し、目位置700が検出できない場合、不安定状態であると判定すること、(40)観察者の目位置700がアイボックス200外にあるか否かを判定し、アイボックス200外にある場合、不安定状態であると判定すること、(50)観察者の目位置700がアイボックス200外にあると推定できるか判定し、アイボックス200外にあると推定できる場合、不安定状態であると判定すること、又は(60)観察者の目位置700がアイボックス200外になると予測されるか否かを判定し、アイボックス200外になると予測される場合、不安定状態であると判定すること、など観察者の目位置700が不安定状態であることに関係する様々な動作を実行するための様々なソフトウェア構成要素を含む。すなわち、目位置状態判定モジュール508は、目位置700の検出情報、推定情報、又は予測情報から、目位置が移動している状態か、目位置が高速で移動している状態か、及び/又はその他の不安定状態であるか否かを判定するためのテーブルデータ、演算式、などを含み得る。
【0086】
(S176)目位置検出モジュール502は、目位置検出部411から所定の測定時間内において取得された複数の観測位置の各々の位置データの分散を算出し、目位置状態判定モジュール508は、目位置検出モジュール502により算出された分散が所定の閾値よりも大きい場合、観察者の目位置の安定度が低い(不安定である。)と判定する形態であってもよい。
【0087】
(S178)目位置検出モジュール502は、目位置検出部411から所定の測定時間内において取得された複数の観測位置の各々の位置データの偏差を算出し、目位置状態判定モジュール508は、目位置検出モジュール502により算出された偏差が所定の閾値よりも大きい場合、観察者の目位置の安定度が低い(不安定である。)と判定する(不安定状態ではない)形態であってもよい。
【0088】
また、方法S176の分散や方法S178の偏差を用いずに、目位置検出モジュール502は、所定の単位時間当りに、目位置700が移動した部分視域の数が、所定の閾値より多くなったときに、観察者の目位置の安定度が低い(不安定である。)と判定する(不安定状態ではない)形態であってもよい。また、目位置検出モジュール502は、所定の単位時間当りに、目位置700が移動総距離(単位時間当りに複数回取得される複数の観測位置の間の距離の総和)が、所定の閾値より長くなったときに、観察者の目位置の安定度が低い(不安定である。)と判定する(不安定状態ではない)形態であってもよい。
【0089】
(S176)観察者の目位置700が検出できるか否かの判定する方法は、(1)目位置検出部411から所定期間内において取得される観察者の目の観測位置の一部(例えば、所定の回数以上。)又は全部が検出できないこと、(2)目位置検出モジュール502が、通常の動作において、観察者の目位置700を検出できないこと、(3)目位置推定モジュール504が、通常の動作において、観察者の目位置700を推定できないこと、(4)目位置予測モジュール506が、通常の動作において、観察者の目位置700を予測できないこと、又はこれらの組み合わせにより、観察者の目位置700が検出できない(観察者の目位置700が不安定状態である)と判定すること、を含む(なお前記判定方法は、これらに限定されない。)。
【0090】
(S178)観察者の目位置700がアイボックス200外にあるか否かの判定する方法は、(1)目位置検出部411から所定期間内において取得される観察者の目の観測位置の一部(例えば、所定の回数以上。)又は全部をアイボックス200外で取得すること、(2)目位置検出モジュール502が観察者の目位置700をアイボックス200外で検出すること、又はこれらの組み合わせにより、観察者の目位置700がアイボックス200外にある(観察者の目位置700が不安定状態である)と判定すること、を含む(なお前記判定方法は、これらに限定されない。)。
【0091】
(S180)観察者の目位置700がアイボックス200外にあると推定できるか判定する方法は、(1)目位置検出部411で観察者の目位置700の移動が検出された後、観察者の目位置700が検出できなくなったこと、(2)目位置検出モジュール502が観察者の目位置700をアイボックス200の境界200Aの近傍で検出すること、(3)目位置検出モジュール502が観察者の右目位置700R及び左目位置700Lのいずれかアイボックス200の境界200Aの近傍で検出すること、又はこれらの組み合わせにより、観察者の目位置700がアイボックス200外にあると推定できる(観察者の目位置700が不安定状態である)と判定すること、を含む(なお前記判定方法は、これらに限定されない。)。
【0092】
(S182)観察者の目位置700がアイボックス200外になると予測されるか否かを判定する方法は、(1)目位置予測モジュール506が所定時間後の観察者の目位置700をアイボックス200外に予測すること、(2)目位置検出モジュール502が新たに検出した目位置700が、過去に検出した目位置700に対して、メモリ37に予め記憶された目位置移動距離閾値以上であること(目位置700の移動速度が、メモリ37に予め記憶された目位置移動速度閾値以上であること。)、又はこれらの組み合わせにより、観察者の目位置700がアイボックス200外にあると予測できる(観察者の目位置700が不安定状態である)と判定すること、を含む(なお前記判定方法は、これらに限定されない。)。
【0093】
スポット照明パターン設定モジュール510は、目位置状態判定モジュール508により不安定状態ではないと判定された場合、画像光Lを向ける部分視域Eを第1のスポットライティングパターンSP1に設定する(S192)。一方、表示パラメータ設定モジュール512は、目位置状態判定モジュール508により不安定状態であると判定された場合、画像光Lを向ける部分視域Eを前記第1のスポットライティングパターンSP1より画像光Lを向ける部分視域Eを拡げた第2のスポットライティングパターンSP2に設定する(S194)。
【0094】
図11A、
図11B、
図11C、及び
図11Dは、第1のスポットライティングパターンSP1、及び第2のスポットライティングパターンSP2(等方的拡張)について説明するための図であり、
図11Aは、第1のスポットライティングパターンSP1の状態を示す。スポット照明パターン設定モジュール510は、目位置701が部分視域E45内に存在すると判定される場合、HUD装置20は、第1のスポットライティングパターンSP1として設定された1つの部分視域E45に画像光Lを向ける(なお、本実施形態では、第1のスポットライティングパターンSP1に設定される部分視域Eを1つとしているが、複数であっても良い。)。これにより、観察者は、画像光Lが示す虚像Vを視認することができる。
図11B、
図11C、及び
図11Dは、
図11Aで示す目位置701が図面での下側の目位置702に移動した際の(目位置701が部分視域E45から下側の部分視域E55に移動した際の)、第2のスポットライティングパターンSP2を示す。第2のスポットライティングパターンSP2は、第1のスポットライティングパターンSP1より広く設定される。
【0095】
具体的には、
図11Bで示す態様の第2のスポットは、移動後の目位置702が配置される部分視域E55を中心に、上下左右斜め方向に隣接する部分視域E44、E45、E46、E54、E56、E64、E65、及びE66の9つの部分視域を含み(すなわち、第2のスポットライティングパターンSP2(9つの部分視域を含み)、第1のスポットライティングパターンSP1(1つの部分視域を含む)より画像光Lが向けられるスポットライティングパターンが拡張している。第1のスポットライティングパターンSP1から第2のスポットライティングパターンSP2への本変化は、スポットライティングパターンを上下左右方向に、ほぼ均等に拡張されている。このような第1のスポットライティングパターンSP1に対し、上下左右方向に、ほぼ均等に拡張することを、等方的拡張ということとする。
【0096】
図11Cは、他の前記等方的拡張の態様を示す図である。
図11Cで示す態様の第2のスポットライティングパターンSP2は、移動後の目位置702が配置される部分視域E55を中心に、上下左右方向に隣接する部分視域E45、E54、E56、及びE65の5つの部分視域を含み(すなわち、第2のスポットライティングパターンSP2(5つの部分視域を含み)、第1のスポットライティングパターンSP1(1つの部分視域を含む)より画像光Lが向けられるスポットライティングパターンが拡張している。
【0097】
図11Dは、他の前記等方的拡張の態様を示す図である。本態様の第2のスポットライティングパターンSP2は、移動前の目位置701が配置されていたE455を中心に、上下左右斜め方向に隣接する部分視域E34、E35、E36、E44、E46、E54、E55、及びE56の9つの部分視域を含む。第1のスポットライティングパターンSP1から第2のスポットライティングパターンSP2への本変化は、スポットライティングパターンを移動前の目位置701が配置されていた部分視域を中心に上下左右方向に、ほぼ均等に拡張されている。すなわち、本実施形態における等方的拡張は、少なくとも上下左右方向に、ほぼ均等に拡張されていればよく、中心の位置は適宜設定され得る。
【0098】
なお、第1のスポットライティングパターンSP1、及び第2のスポットライティングパターンSP2は、異方的拡張をしてもよい。すなわち、スポットライティングパターンは、上下左右方向に、ほぼ均等に拡張されていなくてもよい。
【0099】
再び
図9を参照する。グラフィックモジュール514は、レンダリングなどの画像処理をして画像データを生成し、表示器50を駆動するための様々な既知のソフトウェア構成要素を含む。また、グラフィックモジュール514は、表示される画像の、種類、配置(位置座標、角度)、サイズ、表示距離(3Dの場合。)、視覚的効果(例えば、輝度、透明度、彩度、コントラスト、又は他の視覚特性)、を変更するための様々な既知のソフトウェア構成要素を含んでいてもよい。グラフィックモジュール514は、画像の種類(表示パラメータの1つ。)、画像の位置座標(表示パラメータの1つ。)、画像の角度(X方向を軸としたピッチング角、Y方向を軸としたヨーレート角、Z方向を軸としたローリング角などであり、表示パラメータの1つ。)、及び画像のサイズ(表示パラメータの1つ。)で観察者に視認されるように画像データを生成し、HUD装置20を駆動し得る。
【0100】
光源駆動モジュール516は、指向性光源ユニット60を駆動することを実行するための様々な既知のソフトウェア構成要素を含む。光源駆動モジュール516は、設定されたスポットライティングパターン、表示パラメータ600に基づき、指向性光源ユニット60を駆動し得る。
【0101】
アクチュエータ駆動モジュール518は、第1アクチュエータ28及び/又は第2アクチュエータ29を駆動することを実行するための様々な既知のソフトウェア構成要素を含むアクチュエータ駆動モジュール518は、設定された表示パラメータ600に基づき、第1アクチュエータ28及び第2アクチュエータ29を駆動し得る。
【0102】
図12は、いくつかの実施形態に従って、観察者の目高さに基づき、スポット照明パターンの広さを設定する動作を実行する方法S200を示すフロー図である。方法S200は、ディスプレイを含むHUD装置20と、このHUD装置20を制御する表示制御装置30と、において実行される。方法S200内のいくつかの動作は任意選択的に組み合わされ、いくつかの動作の手順は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
【0103】
方法S200において、目位置を検出する方法S110は、上記方法S100におけるS110と同じなので、説明は省略する。
【0104】
スポット照明パターン設定モジュール510は、S110で取得した目位置に基づいて、画像光Lを向ける部分視域Eを設定する(S230)。スポット照明パターン設定モジュール510は、観察者の目位置が存在する部分視域E(主部分視域EA)のみを画像光Lが向けられるスポットライティングパターンに設定してもよい。具体的には、スポット照明パターン設定モジュール510は、
図4に示すように、観察者の右目700Rが存在する右目用スポットライティングパターンSPR(E52)に画像光Lを向けるように、右目用スポットライティングパターンSPR(E52)に対応する右目用部分発光領域DMR(D52)に照明用レーザービーム74を照射し、かつ観察者の左目700Lが存在する左目用スポットライティングパターンSPL(E55)に画像光Lを向けるように、左目用スポットライティングパターンSPL(E55)に対応する左目用部分発光領域DML(D55)に照明用レーザービーム74を照射し、これら左目用スポットライティングパターンSPL(E55)、左目用部分発光領域DML(D55)以外の部分領域Dには、照明用レーザービーム74を照射しない(又は光強度が非常に低い照明用レーザービーム74を照射する)。
【0105】
また、スポット照明パターン設定モジュール510は、観察者の目位置が存在する部分視域E(主部分視域EA)とその周辺の部分視域E(副部分視域EB)とを含む部分領域群をスポットライティングパターンに設定してもよい。具体的には、スポット照明パターン設定モジュール510は、
図7に示すように、観察者の右目700Rが存在する主部分視域EA(部分視域E52)と周辺の副部分視域EB(部分視域E41、E42、E43、E51、E53、E61、E62、及びE63)を含む右目用スポットライティングパターンSPRに画像光Lを向けるように、これらに対応する右目用部分発光領域DMR(D41、D42、D43、D51、D52、D53、D61、D62、及びD63)に照明用レーザービーム74を照射し、かつ観察者の左目700Lが存在する部分視域E55と周辺の部分視域E44、E45、E46、E54、E56、E64、E65、及びE66を含む左目用スポットライティングパターンSPLに画像光Lを向けるように、これらに対応する左目用部分発光領域DML(D44、D45、D46、D54、D55、D56、D64、D65、及びD66)に照明用レーザービーム74を照射し、これら左目用部分発光領域DML、右目用部分発光領域DMR以外の部分領域Dには、照明用レーザービーム74を照射しない(又は光強度が非常に低い照明用レーザービーム74を照射する)。
【0106】
また、スポット照明パターン設定モジュール510は、観察者の目高さが高い場合、スポットライティングパターンの広さを狭くする。具体的には、スポット照明パターン設定モジュール510は、
図7に示すように、観察者の右目700Rが存在する部分視域E52と周辺の部分視域E41、E42、E43、E51、E53、E61、E62、及びE63を含む右目用スポットライティングパターンSPRに画像光Lを向けるように、これらに対応する右目用部分発光領域DMR(D41、D42、D43、D51、D52、D53、D61、D62、及びD63)に照明用レーザービーム74を照射する状況であっても、上記方法S232が実行されると、目位置が予めメモリ37に記憶された所定の閾値より高い場合、右目用スポットライティングパターンSPRを観察者の右目700Rが存在する部分視域E52のみに設定し、これに対応する右目用部分発光領域DMRがD52のみに照明用レーザービーム74を照射させる。すなわち、部分発光領域DMが9個の部分領域D(主部分発光領域(DMA)と、主部分発光領域(DMA)の周辺に配置される部分視域Eである副部分発光領域(DMB)を含む)から1個の部分領域D(主部分発光領域(DMA))のみへと縮小する。なお、目位置700が高くなり、部分発光領域DMを縮小する際、部分発光領域DMは、主部分発光領域(DMA)のみだけではなく、副部分発光領域(DMB)を含んでいてもよい。具体的には、スポット照明パターン設定モジュール510は、目位置が予めメモリ37に記憶された所定の閾値より高い場合であっても、右目用スポットライティングパターンSPRを、右目700Rが存在する部分視域E52、及び当該部分視域E52の周辺の上側の部分視域E41,E42,及びE43に設定してもよい。また、スポット照明パターン設定モジュール510は、目位置が予めメモリ37に記憶された所定の閾値より高い場合であっても、右目用スポットライティングパターンSPRを、右目700Rが存在する部分視域E52、及び当該部分視域E52の周辺の左右の部分視域E51,及びE53に設定してもよい。また、スポット照明パターン設定モジュール510は、目高さが高くなるに従い、段階的にスポットライティングパターンSPを、狭くしていってもよい(S234)。
【0107】
上記実施形態は、非正反射素子3が、入射角より反射角を大きくなるようにした場合であったが、以下に、非正反射素子3が、入射角より反射角を小さくなるようにした実施形態について説明する。
【0108】
図13は、非正反射素子3が、入射角より反射角を小さくなるようにした実施形態に従って、観察者の目高さに基づき、スポット照明パターンの広さを設定する動作を実行する方法S300を示すフロー図である。方法S300は、ディスプレイを含むHUD装置20と、このHUD装置20を制御する表示制御装置30と、において実行される。方法S300内のいくつかの動作は任意選択的に組み合わされ、いくつかの動作の手順は任意選択的に変更され、いくつかの動作は任意選択的に省略される。方法S300において、目位置を検出する方法S110は、上記方法S100におけるS110と同じなので、説明は省略する。
【0109】
スポット照明パターン設定モジュール510は、S110で取得した目位置に基づいて、画像光Lを向ける部分視域Eを設定する(S330)。方法S330では、スポット照明パターン設定モジュール510は、観察者の目高さが低い場合、スポットライティングパターンの広さを狭くする。具体的には、スポット照明パターン設定モジュール510は、
図7に示すように、観察者の右目700Rが存在する部分視域E52と周辺の部分視域E41、E42、E43、E51、E53、E61、E62、及びE63を含む右目用スポットライティングパターンSPRに画像光Lを向けるように、これらに対応する右目用部分発光領域DMR(D41、D42、D43、D51、D52、D53、D61、D62、及びD63)に照明用レーザービーム74を照射する状況であっても、上記方法S332が実行されると、目位置が予めメモリ37に記憶された所定の閾値より低い場合、右目用スポットライティングパターンSPRを観察者の右目700Rが存在する部分視域E52のみに設定し、これに対応する右目用部分発光領域DMRがD52のみに照明用レーザービーム74を照射させる。すなわち、部分発光領域DMが9個の部分領域D(主部分発光領域(DMA)と、主部分発光領域(DMA)の周辺に配置される部分視域Eである副部分発光領域(DMB)を含む)から1個の部分領域D(主部分発光領域(DMA))のみへと縮小する。なお、目位置700が低くなり、部分発光領域DMを縮小する際、部分発光領域DMは、主部分発光領域(DMA)のみだけではなく、副部分発光領域(DMB)を含んでいてもよい。具体的には、スポット照明パターン設定モジュール510は、目位置が予めメモリ37に記憶された所定の閾値より低い場合であっても、右目用スポットライティングパターンSPRを、右目700Rが存在する部分視域E52、及び当該部分視域E52の周辺の下側の部分視域E61,E62,及びE63に設定してもよい。また、スポット照明パターン設定モジュール510は、目位置が予めメモリ37に記憶された所定の閾値より低い場合であっても、右目用スポットライティングパターンSPRを、右目700Rが存在する部分視域E52、及び当該部分視域E52の周辺の左右の部分視域E51,及びE53に設定してもよい。また、スポット照明パターン設定モジュール510は、目高さが低くなるに従い、段階的にスポットライティングパターンSPを、狭くしていってもよい(S334)。
【0110】
上述の処理プロセスの動作は、汎用プロセッサ又は特定用途向けチップなどの情報処理装置の1つ以上の機能モジュールを実行させることにより実施することができる。これらのモジュール、これらのモジュールの組み合わせ、及び/又はそれらの機能を代替えし得る公知のハードウェアとの組み合わせは全て、本発明の保護の範囲内に含まれる。
【0111】
車両用表示システム10の機能ブロックは、任意選択的に、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの組み合わせによって実行される。
図9で説明する機能ブロックが、説明される実施形態の原理を実施するために、任意選択的に、組み合わされ、又は1つの機能ブロックを2以上のサブブロックに分離されてもいいことは、当業者に理解されるだろう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組み合わせ若しくは分割を、任意選択的に支持する。
【0112】
図14は、他の指向性光源ユニット60Aの構成を示す図である。
図15は、
図14に示す光源アレイ80Aの一態様を示す図である。指向性光源ユニット60は、フィールドレンズ77A、及びアレイ状に複数の光源(本実施形態では、
図15に示すように81個)を配置した光源アレイ80Aから構成される。光源アレイ80Aは、n個の部分領域D(本実施形態の部分領域Dは、D11~D99までの81個。)にそれぞれ配置され、表示制御装置30が、目位置検出部411で検出した目位置が存在する部分視域Eに対応する部分領域Dに強い画像光Lが向かように、部分的に光源を駆動する(部分駆動する)ことで、上記の指向性光源ユニット60Aの場合と同様に、観察者に画像(虚像V)を視認させることで、観察者の目が存在しない部分視域Eに光を向かわないようにすることができる。
【0113】
フィールドレンズ77Aは、光源アレイ80Aと光変調素子51との間の各部分領域Dに配置された光源から出射された照明用レーザービーム74の光路上に配置されている。本実施形態の第2のフィールドレンズ77は、1つ又は複数のフィールドレンズから構成され、光拡散光学系80の各部分領域Dにより拡散された照明用レーザービーム74が光変調素子51の全面を透過照明するように設計された前段光学部材(バックライト光学部材)である。また、フィールドレンズ77Aは、光変調素子51から出射される画像光Lが虚像光学系90(リレー光学系40及びフロントウインドシールド2から構成されるHUD光学部材)を経てアイボックス200内の任意の位置にある部分視域Eに届くように設計されている。
【0114】
拡散板78は、光変調素子51とフィールドレンズ77Aとの間の照明用レーザービーム74の光路上に配置されている。拡散板78は、受光した照明用レーザービーム74光を拡散させて光変調素子51に出射する。これにより、アイボックス200の各部分視域Eで視認される部分領域Dから出射された照明用レーザービーム74により生成される画像光Lにおける輝度ムラを低減できる。拡散板78は、光を拡散させる機能がある光学部材であれば良く、例えばその表面がビーズ部材や微細な凹凸構造、粗面で構成される。また、ドットシートや透過性の乳白色のシートでも良い。
【0115】
本実施形態の光源アレイ80Aは、n個の部分領域DにそれぞれLEDなどの光源が1つずつ配置されており(複数配置されてもよい)、n個のいずれの部分領域Dに配置された光源が出射する照明用レーザービーム74は、フィールドレンズ77、拡散板78、を透過した後に、光変調素子51の全面に照射され、光変調された画像光Lが虚像光学系90を通過した後に、所定の部分領域Dに対応する所定の部分視域Eに照射される。
【符号の説明】
【0116】
1…車両、2…被投影部、3…非正反射素子、10…ヘッドアップディスプレイシステム(車両用表示システム)、20…HUD装置(ヘッドアップディスプレイ装置)、28…第1アクチュエータ、29…第2アクチュエータ、30…表示制御装置、31…I/Oインタフェース、33…プロセッサ、35…画像処理回路、37…メモリ、40…リレー光学系、41…第1ミラー、42…第2ミラー、50…表示器、51…光変調素子、52…表示面、60…指向性光源ユニット、60A…指向性光源ユニット、70…光源、74…照明用レーザービーム、75…走査デバイス、76…第1のフィールドレンズ、77…第2のフィールドレンズ(集光光学系)、77A…フィールドレンズ、78…拡散板、80…光拡散光学系、80A…光源アレイ、81…レンズアレイ、82…ホログラム記録媒体、90…虚像光学系、100…虚像表示領域、101…上端、102…下端、200…アイボックス、200A…境界、205…中心、401…車両ECU、403…道路情報データベース、405…自車位置検出部、407…車外センサ、409…操作検出部、411…目位置検出部、415…視線方向検出部、417…携帯情報端末、419…外部通信機器、502…目位置検出モジュール、504…目位置推定モジュール、506…目位置予測モジュール、508…目位置状態判定モジュール、510…スポット照明パターン設定モジュール、512…表示パラメータ設定モジュール、514…グラフィックモジュール、516…光源駆動モジュール、518…アクチュエータ駆動モジュール、600…表示パラメータ、700…目、701…目位置、702…目位置、D…部分領域、DM…部分発光領域、DML…左目用部分発光領域、DMR…右目用部分発光領域、E…部分視域、EA…主部分視域、EB…副部分視域、L…画像光、L1…第1画像光、L2…第2画像光、L3…第3画像光、Lp…光軸、Lth…所定閾値、SP…スポットライティングパターン、SP1…第1のスポットライティングパターン、SP2…第2のスポットライティングパターン、SPL…左目用スポットライティングパターン、SPR…右目用スポットライティングパターン、V…虚像、θt…チルト角、θv…縦配置角