特許 7552536 車両用表示制御システム、車両用表示制御方法、及び車両用表示制御プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-09-09

(45)【発行日】2024-09-18

(54)【発明の名称】車両用表示制御システム、車両用表示制御方法、及び車両用表示制御プログラム

(51)【国際特許分類】

   G09G 5/00 20060101AFI20240910BHJP

   G09G 5/14 20060101ALI20240910BHJP

   G09G 5/37 20060101ALI20240910BHJP

   H04N 7/18 20060101ALI20240910BHJP

【ＦＩ】

G09G5/00 550C

G09G5/14 A

G09G5/37

H04N7/18 U

【請求項の数】 9

(21)【出願番号】P 2021141239

(22)【出願日】2021-08-31

(65)【公開番号】P2023034812

(43)【公開日】2023-03-13

【審査請求日】2023-11-08

(73)【特許権者】

【識別番号】000004260

【氏名又は名称】株式会社デンソー

(74)【代理人】

【識別番号】110000567

【氏名又は名称】弁理士法人サトー

(72)【発明者】

【氏名】水野 俊範

(72)【発明者】

【氏名】神谷 玲朗

(72)【発明者】

【氏名】田口 清貴

(72)【発明者】

【氏名】上保 康彦

(72)【発明者】

【氏名】三村 浩之

【審査官】中村 直行

(56)【参考文献】

【文献】特開２０１６－１１１５６１（ＪＰ，Ａ）

【文献】特開２０１３－２５５２３７（ＪＰ，Ａ）

【文献】国際公開第２０１４／０３３９１３（ＷＯ，Ａ１）

【文献】特開２０２１－１０３２７４（ＪＰ，Ａ）

【文献】特開２０１６－２０６２５５（ＪＰ，Ａ）

【文献】特開２０１９－１６９８２８（ＪＰ，Ａ）

【文献】米国特許出願公開第２０２１／００６１１０３（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０９Ｇ ３／００ ー ５／４２

Ｈ０４Ｎ ７／１８

(57)【特許請求の範囲】

【請求項1】

ディスプレイ（２ａ～２ｅ）にコンテンツを表示制御する車両用表示制御システム（１）であって、
前記ディスプレイから前記コンテンツの画像を反射物（６）に反射させながら表示させるときに歪みを補正する歪み補正部（１５ａ）と、
ユーザの状態又は車両の状態を取得する取得部（１２ｂ）と、
前記状態に基づいて前記ディスプレイに表示させる前記コンテンツの画像の歪みを補正するか否かを判定する判定部（１２ｃ）と、を備え、
前記歪み補正部は、前記判定部の判定結果により補正可であると判定されたときに歪みを補正する車両用表示制御システム。

【請求項2】

前記ディスプレイは複数備えられ、
前記歪み補正部は、複数のディスプレイ毎に歪みを補正する請求項１記載の車両用表示制御システム。

【請求項3】

前記ディスプレイは複数備えられ、
前記複数のディスプレイのうち一部のディスプレイに前記コンテンツを表示させるときの前記コンテンツの歪みの補正可否を設定する補正可否設定部（１２ｄ）を備え、
前記一部のディスプレイを除く他のディスプレイの画像の歪み補正の実施／非実施を固定的に設定する請求項１記載の車両用表示制御システム。

【請求項4】

前記取得部は、前記車両の状態として車両周辺の状態を取得し、
前記判定部は、前記車両周辺の状態に危険が潜んでいると判断したときには前記コンテンツの歪みを補正しないと判定する請求項１記載の車両用表示制御システム。

【請求項5】

前記コンテンツとして電子ミラー又はメータのコンテンツの画像を前記ディスプレイに表示する際に、
前記車両の状態として現在位置情報又は前記車両の速度情報を取得し、
前記判定部は、取得した情報に基づいて前記車両が高速走行しているときには前記歪みを補正しないと判定する請求項１記載の車両用表示制御システム。

【請求項6】

前記ディスプレイは複数備えられ、
前記判定部は、前記複数のディスプレイに跨いで前記コンテンツを表示させるときには前記歪みを補正しないと判定する請求項１記載の車両用表示制御システム。

【請求項7】

前記判定部は、前記車両の起動時には前記歪みを補正しないと判定する請求項１記載の車両用表示制御システム。

【請求項8】

ディスプレイにコンテンツを表示制御する車両用表示制御方法であって、
歪み補正部が、前記ディスプレイに前記コンテンツの画像を反射物に反射させて表示させるときに歪みを補正する過程と、
取得部が、ユーザの状態又は車両の状態を取得する過程と、
判定部が、前記状態に基づいて前記ディスプレイに表示させる前記コンテンツの画像の歪みを補正するか否かを判定する過程と、を備え、
前記歪み補正部が歪みを補正する過程では、前記判定部の判定結果により補正可であると判定されたときに歪みを補正する車両用表示制御方法。

【請求項9】

ディスプレイにコンテンツを表示制御する車両用表示制御プログラムであって、
歪み補正部が、前記ディスプレイに前記コンテンツの画像を反射物に反射させて表示させるときに歪みを補正する手順と、
取得部が、ユーザの状態又は車両の状態を取得する手順と、
判定部が、前記状態に基づいて前記ディスプレイに表示させる前記コンテンツの画像の歪みを補正するか否かを判定する手順と、を実行させるように構成され、
前記歪み補正部が歪みを補正する手順では、前記判定部の判定結果により補正可であると判定されたときに画像の歪みを補正する車両用表示制御プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、車両用表示制御システム、車両用表示制御方法、及び車両用表示処理プログラムに関する。

【背景技術】

【0002】

近年、車載ディスプレイは一度に多くの情報を閲覧可能にするため大型化することが求められている。コストなどを考慮し、小さなディスプレイを複数併設することで大型ディスプレイを実現することが考えられている（例えば、特許文献１参照）。特許文献１記載の技術によれば、１つの意匠を分割して２つの表示器を用いて表示する際に、第１表示部と第２表示部とをつなぐように補助表示器を設置することで、一体感のある１つの意匠を創出している。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０２０－８７４０号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

他方、ディスプレイにコンテンツを表示制御するときに歪み補正を実行すると、当該歪み補正が高負荷となる。この場合、フレーム毎の表示開始タイミングに遅延時間を生じる可能性が高まりフレームレートが低下する要因となる。特に、リアルタイム性が要求される車両用のコンテンツに表示の欠落を生じると、安全上問題となる可能性がある。反面、歪み補正を行うことでユーザに表示提供するコンテンツの品質を向上できるというメリットがある。

【0005】

本発明は、車両用コンテンツについて適切に表示制御できるようにした車両用表示制御システム、車両用表示制御方法及び車両用表示制御プログラムを提供することにある。

【課題を解決するための手段】

【0006】

請求項１記載の発明は、ディスプレイにコンテンツを表示制御する車両用表示制御システムであり、歪み補正部は、反射物に反射させてディスプレイにコンテンツを表示させるときに画像の歪みを補正する構成である。判定部は、取得部により取得されたユーザの状態又は車両の状態に基づいてディスプレイに表示させるコンテンツの歪みを補正するか否かを判定し、歪み補正部は、判定部の判定結果により補正可であると判定されたときに歪みを補正するようにしている。

【0007】

請求項１記載の発明によれば、歪み補正部が、ユーザの状態又は車両の状態に基づいて必要なときにコンテンツの歪みを補正するため、例えばリアルタイム性が要求されるコンテンツ（例えば、電子ミラー画像）を表示制御する場合には、歪み補正をすることなく表示制御することでフレームレートを高く維持できるようになり、情報の欠落を極力生じさせないように調整できる。逆に、例えばエンターテインメント系のコンテンツ画像を提供する場合には、当該コンテンツ画像の歪み補正を実施して表示制御することで、ユーザに提供するコンテンツの画像の品質を向上できる。これにより、車両用コンテンツについて適切に表示制御できる。

【図面の簡単な説明】

【0008】

【図1】第１実施形態における車両前部の構造図

【図2】ユーザがディスプレイを視認する状態を図１のＡ－Ａ線に沿って模式的に示す横断面図

【図3】表示制御イメージ図

【図4】電気的構成を模式的に示すブロック図

【図5】ハード及びソフトウェア構成図

【図6】複数のディスプレイに表示させるコンテンツ画像例

【図7】処理内容を概略的に示すフローチャート

【図8】歪み補正を実施しないときの画像の歪み状態を表すグリッド図

【図9】歪み補正を実施する前後の画像の歪み状態の変化を説明するグリッド図

【図10】第２実施形態における処理内容を概略的に示すフローチャート

【発明を実施するための形態】

【0009】

以下、車両用表示制御システム１に係る幾つかの実施形態について図面を参照しながら説明する。各実施形態で同一構成又は同一処理ステップとなる部分については、後述する実施形態では同一符号、同一ステップ番号を付して説明を省略することがある。

【0010】

（第１実施形態）
第１実施形態について図１から図９を参照しながら説明する。図３に例示した車両用表示制御システム１は、車両に搭載されており、表示器２及び電子制御装置１０により構成されている。電子制御装置１０は、ＥＣＵ、Electronic Control Unitとも称される。図１及び図２に例示したように、表示器２は、車室内に表示面を露出させた状態でインストルメントパネル３に設置されている。以下では、インストルメントパネル３をインパネ３と略す。インパネ３は、車両の運転席や助手席からなる前座席の前方に設けられている。車両の前座席とインパネ３との間にはステアリングホイール４が設けられており、インパネ３の上方にはフロントウィンドシールド５が設置されている。インパネ３は、その上面が平面に成形されている。

【0011】

表示器２は、ディスプレイ２ａ～２ｅ及び反射ミラー６を備える。インパネ３にはディスプレイ２ａ～２ｅのフード７が連結して構成され、ディスプレイ２ａ～２ｂ及びフード７は全体として板状に設置される。フード７は、インパネ３の上面の平面に連接された平坦部をディスプレイ２ａ～２ｅの背面を覆う構成となっている。

【0012】

複数のディスプレイ２ａ～２ｅは、それぞれ前面表示面を備えた有機ＥＬディスプレイにより構成され、その前面表示面が下前方に向けて設置されている。ディスプレイ２ａ～２ｅの前面表示面は平面に構成されている。なお、ディスプレイ２ａ～２ｅの物理的な設置制約条件、また、車両中心から左右何れかに寄った運転席からの視認性を良好に設計するため、ディスプレイ２ａ～２ｅの前面表示面は単純な平面に限られない。凸面、凹面、又は凹凸面状に構成されていても良い。

【0013】

車両用表示制御システム１は、ディスプレイ２ａ～２ｅにコンテンツの画像を表示制御する。ディスプレイ２ａ～２ｅは、それぞれメータ画像、後述する周辺カメラ２１の撮像画像、静止画や動画のエンターテインメント画像、現在位置周辺の地図画像、電子ミラーの撮像画像などの各種の画像コンテンツを表示可能な構成となっている。

【0014】

有機ＥＬディスプレイは、有機発光ダイオードを用いて構成されている。有機発光ダイオードはＯＬＥＤと称される。ＯＬＥＤはOrganic Light-Emitting Diodeの略称である。ディスプレイ２ａ～２ｅの表示面は、運転席及び助手席に座したユーザの視線に対して概ね平行な方向に沿って設置されている。またディスプレイ２ａ～２ｅの表示面は、表示物が反射ミラー６を介して運転席及び助手席に座したユーザに見えるよう反射ミラー６の上部に設置されている。

【0015】

本実施形態のディスプレイ２ａ～２ｅは、その表示面がユーザの視線に対して概ね平行又は手前側が下方に向けて設置されている。このため、運転席又は助手席の前座席に座したユーザはディスプレイ２ａ～２ｅの表示面を直接視認しない。またディスプレイ２ａ～２ｅの背面、物理的に言い換えるとディスプレイ２ａ～２ｅの上面に位置してフード７が装着されている。フード７は、フロントウィンドシールド５を通して車内に入射する日射光をディスプレイ２ａ～２ｅに直接当たらないように遮光している。

【0016】

ディスプレイ２ａ～２ｅの表示面の前方、物理的に言い換えるとディスプレイ２ａ～２ｅの下方に位置して反射ミラー６が設置されている。反射ミラー６は、ディスプレイ２ａ～２ｅの表示面から自発光された画像を反射する反射物、反射部材であり、インパネ３の一部に片持ち支持されている。そして、反射ミラー６は、フード７の平坦部の奥端から後下斜方に向けて突出するように設置されている。これにより、ディスプレイ２ａ～２ｅの表示面と反射ミラー６の反射面とは所定の角度で傾斜するように設置関係を保っている。

【0017】

反射ミラー６は、その反射面が斜後上方に向けて設置されており、インパネ３の後方の前部座席に向けて画像を反射させることが可能となっている。また、インパネ３や反射ミラー６の反射面のデザイン性を向上し、又は、中央より左右何れかの脇に寄った運転席からの視認性を良好にするため、反射ミラー６の反射面は単純な平面に限らず、凸面、凹面、又は凹凸面状に構成しても良い。反射ミラー６は、ディスプレイ２ａ～２ｅの表示面に表示された画像を鏡面反射しながら、ユーザの視線に合わせて虚像Ｋを映し出す虚像表示部として構成される。

【0018】

反射ミラー６は、フード７及びディスプレイ２ａ～２ｅの下部に設置されているため、フロントウィンドシールド５から入る入射光はフード７に遮られ反射ミラー６に反射する虞もなくなる。反射ミラー６の反射面に光が当たりにくいため、ユーザは、反射ミラー６を通して虚像Ｋを視認しやすくなる。

【0019】

これにより、運転席又は助手席に座したユーザは、反射ミラー６の反射面を視認することでディスプレイ２ａ～２ｅの表示面に映し出された画像を虚像Ｋとして間接的に確認できる。このとき、ユーザは虚像Ｋがあたかも反射ミラー６の反射面より奥側、すなわち車両の前方にあるかのように見える。

【0020】

図１及び図３に示すように、ディスプレイ２ａ～２ｅは、複数隣り合うように併設されており、これらの複数のディスプレイ２ａ～２ｅの各表示面の間には非表示部となる枠面が形成されている。反射ミラー６がこの複数のディスプレイ２ａ～２ｅの表示面を反射して前部座席側に像を反射するときには枠面の領域もまた映されることになる。枠面は黒色に着色されている。このため、反射ミラー６が枠面を映した虚像Ｋは黒色に映る。なお枠面を映した虚像Ｋは、ユーザとってわずかに視認可能な程度とされている。

【0021】

次に、電子制御装置１０、及びその周辺の車両用システムの電気的構成について図４を参照しながら説明する。車両内には、多数の電子制御装置１０、１１が構成されており、互いに車内ネットワークＮを用いて通信接続して車両内の各種制御を実行する。電子制御装置１０、１１は、表示系のＥＣＵ、走行制御系のＥＣＵなどに分類することができ、そのうち本形態の電子制御装置１０は、表示系のＥＣＵに属しＨＣＵとも称される。ＨＣＵは、Human Machine Interface Control Unitの略であり情報提示制御装置を示す。走行制御系のＥＣＵは、走行制御信号を入力すると運転アクチュエータを駆動することで所定の走行制御を実施する。また自動運転を実施する場合には、運転アクチュエータを駆動することで対応した所定のレベルの運転支援、自動運転を実行する。

【0022】

各電子制御装置１０、１１は、プロセッサ、キャッシュメモリ、ＲＡＭ、ＲＯＭなどの各種の記憶部１３、これらを接続するバスを備えたマイクロコンピュータを主体として構成される。

【0023】

本実施形態では、図３に示すように、複数の電子制御装置１０ａ～１０ｃを車内ネットワークＮ又は専用線で接続して電子制御装置１０を構成する形態を示す。複数の電子制御装置１０ａ～１０ｃは、その内部の物理リソースの処理能力を分担して複数のディスプレイ２ａ～２ｅに表示制御する。前述した記憶部１３は、コンピュータによって読み取り可能なプログラム及びデータを非一時的に格納する非遷移的実体的記憶媒体を示す。非遷移的実体的記憶媒体は、半導体メモリなどにより実現される。物理リソースを確保できれば、電子制御装置１０は一つだけ設けて後述する表示制御処理を実行するようにしても良い。

【0024】

図４に示すように、電子制御装置１０は、制御装置１２、記憶部１３、演算装置１４、表示処理部１５、各種の外部装置からの入力又は出力を管理するＩ／Ｏ制御部１６、他の電子制御装置１１との間の通信を制御する通信制御部１７、を備える。ここでは、図４に図示した、ロケータ１８、操作パネル１９、乗員モニタ２０、周辺カメラ２１、距離検出センサ２２、及び車速センサ２３など主要な構成要素の出力信号は、Ｉ／Ｏ制御部１６を通じて電子制御装置１０に信号入力する形態を説明するが、車内ネットワークＮを通じて走行制御系のＥＣＵ、周辺監視系のＥＣＵなどの他の電子制御装置１１との間でセンサ又はスイッチの状態を車両の状態として入力することもある。

【0025】

演算装置１４は、制御装置１２の制御に基づいて、記憶部１３に記憶された画像や文字のコンテンツについて、複数のディスプレイ２ａ～２ｅの表示画面に表示させる表示領域を演算し、画像や文字のコンテンツをディスプレイ２ａ～２ｅの表示画面の何れの領域に表示させるか、また、何れの領域に重ね合わせて表示させるか演算し、画像や文字のコンテンツと共に表示領域を制御装置１２に出力する。

【0026】

表示処理部１５は、制御装置１２の制御に基づいて、複数のディスプレイ２ａ～２ｅの表示画面の中の前述の表示領域に画像や文字のコンテンツを表示処理する。これにより、ディスプレイ２ａ～２ｅの表示画面には、表示レイヤ毎に文字や画像のコンテンツを重ね合わせて表示できる。

【0027】

ロケータ１８は、図示しない周知のＧＰＳなどのＧＮＳＳ受信機、及び、加速度センサやジャイロセンサなどの慣性センサを用いて高精度に位置を検出する。ロケータ１８は、位置検出信号をＩ／Ｏ制御部１６を通じて制御装置１２に出力する。制御装置１２の位置特定部１２ａは、地図データ入力器から入力される地図情報とロケータ１８の位置検出信号に基づいて車両の現在位置を高精度に逐次測位するＡＤＡＳロケータとしての機能を実現する。ＡＤＡＳは、Advanced Driver Assistance Systemsの略である。

【0028】

制御装置１２は、車両の現在位置に基づいて、いわゆるナビゲーション処理を行うことができる。また車速センサ２３は車両の速度を検出し車速情報をＩ／Ｏ制御部１６を通じて制御装置１２に出力する。制御装置１２は、入力した車速情報に基づいて車両の速度を特定できる。操作パネル１９は、タッチパネル又は機械的スイッチなどで構成され、Ｉ／Ｏ制御部１６は、乗員による操作入力があると操作入力を受け付け、制御装置１２に出力する。制御装置１２は、操作パネル１９の操作信号に基づいた制御を実行する。

【0029】

乗員モニタ２０は、車両内に搭乗したユーザの状態を検出する。乗員モニタ２０は、例えばパワースイッチ、乗員状態モニタ、ターンスイッチ、自動制御スイッチなどによるもので、各種の信号を制御装置１２に出力する。乗員モニタ２０は、ドライバによりステアリングホイール４が把持されているか又は操舵されているか否かを検出するステアリングセンサ、前座席のシートに着座しているか否かを検出する着座センサ、又は、アクセルペダル又はブレーキペダルの踏込センサ、電子スロットルセンサなどによるものを含んでいても良い。

【0030】

パワースイッチは、内燃機関又は電動モータを始動させるために車室内にてユーザによりオン操作されることで、当該操作に応じた信号を出力する。乗員状態モニタは、運転席又は助手席の乗員の状態を画像センサにより撮影することで、当該前部座席に座したユーザの状態を検出して撮像信号を出力する。乗員状態モニタは、通常運転中、運転支援中又は自動運転中にドライバなどの乗員の状態を検知するために使用される。特に運転席に座したドライバの乗員状態モニタはＤＳＭと称されている。ＤＳＭは、Driver Status Monitorの略である。ターンスイッチは、車両の方向指示器を作動させるために車室内にて乗員によりオン操作されることで、当該操作に応じて右方又は左方にターンするターン信号を出力する。

【0031】

自動制御スイッチは、車両の走行状態に対する自動制御を指令するために、車室内にてユーザによりオン操作されることで、当該操作に応じた自動制御信号を出力する。制御装置１２は、乗員モニタ２０のセンサ信号により車両乗員の挙動、例えば視線が何れの方向を向いているかを判定でき、また、パワースイッチの操作状態、方向指示器の作動状態、車両の自動制御の指令情報などを入力できる。

【0032】

周辺カメラ２１は、車両の前方を撮像するフロントカメラ、車両の後部を撮像するバックカメラ、車両の前側部や後側部を撮像するコーナカメラ、又は、車両の側部を撮像するサイドカメラ、電子ミラー用カメラなどによるものであり、これらはそれぞれフロントガイドモニタ、バックガイドモニタ、コーナービューモニタ、サイドガイドモニタ、電子ミラーの各撮像信号としてＩ／Ｏ制御部１６を通じて制御装置１２に出力される。

【0033】

また車両には、障害物との距離を車両の状態として検出する距離検出センサ２２が設置されている。距離検出センサ２２は、クリアランスソナー２２ａ、ＬｉＤＡＲ、又はミリ波レーダなどにより構成され、車両前方、車両前側部、車両後側部、車両後方又は車両側部に近接する車両や人などの障害物との距離を検出できる。通信制御部１７は、ＣＡＮやＬＩＮなどの車内ネットワークＮに接続されており、制御装置１２と他の電子制御装置１１との間でデータを通信制御する。

【0034】

電子制御装置１０のハードウェア、ソフトウェア構成例を図５に示している。各電子制御装置１０ｂ～１０ｃ、１１にはＳｏＣ３０が搭載されると共に、電子制御装置１０ａにはＳｏＣ３１が搭載され、この搭載されたＳｏＣ３０、３１には前述したマイクロコンピュータが組込まれている。電子制御装置１０ｂ、１０ｃ、１１のＳｏＣ３０に組み込まれたマイクロコンピュータは、予めインストールされた汎用ＯＳ、例えばLinuxOS（Linuxは登録商標）上で各種の複数のアプリケーション（以下、アプリと略す）が動作するように構成されている。ＳｏＣはSystem On Chipの略である。

【0035】

アプリ３３は、画像処理アプリ３４やその他のアプリを含む。画像処理アプリ３４の描画要求に応じてＳｏＣ３０に組み込まれたプロセッサが、ディスプレイ２ａ～２ｅの表示画面に描画処理する。

【0036】

他方、電子制御装置１０ａはメータ描画用途で設けられているため、図５には符号１０ａを付している。電子制御装置１０ａのＳｏＣ３１に組み込まれたマイクロコンピュータには、汎用ＯＳ３２よりもリアルタイム性能高く処理できるリアルタイムＯＳ３５が組み込まれており、リアルタイムＯＳ３５上でメータアプリ３６を動作させるように構成されている。

【0037】

メータアプリ３６は、車両の速度や回転数あるいは警告などをユーザに報知するものであると共に、主に特定のディスプレイ（例えば２ｂ）の表示エリアにコンテンツを描画する。例えば、メータアプリ３６は、速度計や回転数計、シフトレンジポジション、又は、警告灯などの画像コンテンツを描画する。速度計は、車両の速度の変化を示すためにリアルタイムで表示を更新する必要がある速度画像を含む。同様に、回転数計も、回転数の変化を示すためにリアルタイムで表示を更新する必要があるメータ画像を含む。メータアプリ３６によって描画されるコンテンツは、他のアプリ３３によって描画されるコンテンツよりも、相対的にリアルタイム性が要求される。

【0038】

アプリ３３にはナビアプリ等が含まれている。ナビアプリは、ナビゲーション機能を実現するものであると共に、主に複数のディスプレイ（例えば２ｃ、２ｄ）に表示する地図や、車両の現在位置などを含むナビゲーション画面などのコンテンツを描画する。

【0039】

またアプリ３３には画像合成アプリも含まれている。画像合成アプリは、表示器２に表示させる様々な画像コンテンツの大きさや種類を特定し、コンテンツの画像を１フレーム内に合成し、この合成された混在画像を複数のディスプレイ２ａ～２ｅに出力するアプリである。画像合成アプリは、コンポジッタとも称される画像合成部としての機能を実現する。

【0040】

各アプリ３３、３６のうちコンテンツの画像を描画するアプリには、当該コンテンツの画像を描画するための表示レイヤが割り当てられている。これらの表示レイヤは、記憶部１３上に、必要となる画像のコンテンツを描画できる大きさで確保されている。

【0041】

また、複数のディスプレイ２ａ～２ｅに表示される画像コンテンツは、アニメーション動作可能になっている。ここで、アニメーション動作とは、コンテンツを示す画像の位置や大きさが徐々に変化したり、画像が回転したり、ユーザによる操作パネル１９のスワイプ操作にともなってユーザインターフェースが全体的に移動したり、画像が徐々にフェードインあるいはフェードアウトしたり、画像の色が変化したりするような表示態様である。

【0042】

図４に示した制御装置１２及び表示処理部１５は、記憶部１３に記憶された各種のアプリ３３、３６を実行することで複数のディスプレイ２ａ～２ｅに表示制御する。このとき、図６に例示したように、左右端に位置するディスプレイ２ａ、２ｅは、主に電子ミラー用のコンテンツを表示処理すると共に、運転席の直前に位置するディスプレイ２ｂにはメータ画像を表示制御する。またその他のディスプレイ２ｃ、２ｄには、ナビゲーション処理の地図画面や前方撮像カメラの撮像画像などを表示制御したり、エンターテインメント系の画像コンテンツを表示制御する。各ディスプレイ２ａ～２ｅに表示させるコンテンツの内容はこれに限られるものではない。

【0043】

制御装置１２及び表示処理部１５は、記憶部１３に記憶されたアプリ３３、３６を実行することで、取得部１２ｂ、判定部１２ｃ、歪み補正部１５ａ、及び補正可否設定部１２ｄとしての機能を実現する。制御装置１２の取得部１２ｂは、乗員モニタ２０のセンサ信号によりユーザの状態を取得したり、又は、周辺カメラ２１又は距離検出センサ２２により車両の周辺情報を車両の状態として取得したりする。

【0044】

判定部１２ｃは、ユーザの状態又は車両の状態に基づいてディスプレイ２ａ～２ｅに表示させるコンテンツ画像の歪みを補正するか否かを判定する。歪み補正部１５ａは、ディスプレイ２ａ～２ｅにコンテンツの画像を表示させて反射ミラー６に反射させるとき、判定部１２ｃの判定結果により補正可であると判定されたときにコンテンツの画像の歪みを補正する。このとき歪み補正部１５ａは、複数のディスプレイ２ａ～２ｅ毎に歪みを補正する。

【0045】

補正可否設定部１２ｄは、ディスプレイ２ａ～２ｅにコンテンツの画像を表示させるときにコンテンツの画像の歪みの補正可否を設定する。表示処理部１５の歪み補正部１５ａは、補正可であるときに限りコンテンツ画像の歪みを補正する。

【0046】

以下、車両の起動時から表示器２に対してコンテンツの画像を表示制御する流れについて図７から図９を参照しながら説明する。運転者によりパワースイッチがオンされると車両内の電子制御装置１０ａ～１０ｃ、１１は起動し、図７のＳ０においてアプリ３３、３６を起動する。車両の起動時において、制御装置１２及び表示処理部１５は、Ｓ１において判定部１２ｃによりディスプレイ２ａ～２ｅに表示させるコンテンツの画像の歪みを補正しないと判定し、コンテンツの画像として電子ミラー、メータ画像のコンテンツを各ディスプレイ２ａ～２ｅに表示制御する。

【0047】

車両の起動時、電子制御装置１０ａ～１０ｃ、１１は初期化処理など様々な処理負荷が多くなりリソースの消費量も大きい。他方、歪み補正処理もまたリソースの消費量が大きく処理負荷が大きい。特に、複数のディスプレイ２ａ～２ｅの全てに歪み補正処理を施すことで処理負担が大きくなりフレームレートが低下しやすい。このため、車両の起動時にコンテンツの歪み補正をしないようにすることで処理負荷を軽くできる。このとき電子制御装置１０はフレームレートを高くしながらコンテンツをディスプレイ２ａ～２ｅに表示制御できる。

【0048】

電子制御装置１０が、コンテンツの画像をディスプレイ２ａ～２ｅに元画像を歪み補正することなく表示制御すると、図８に例示したように、ユーザが虚像Ｋを確認した際に元画像が歪むように見えるが、制御装置１２及び表示処理部１５は歪み補正なしに設定しながらコンテンツの画像を表示制御していれば、フレームレートを高く表示処理でき処理負荷の負担を軽くできる。

【0049】

また制御装置１２は、取得部１２ｂの機能によりＳ２において車両の状態として車両周辺の情報を取得すると共に、Ｓ３において他の電子制御装置１１等から車両の状態を取得する。また、Ｓ４において乗員モニタ２０を用いてユーザの状態を取得する。

【0050】

制御装置１２は、Ｓ５において、Ｓ３又はＳ４の取得結果に基づいて例えば車両周辺の状態に危険が潜んでいると判断するとＳ１１に移行する。このとき、制御装置１２は、Ｓ１１においてユーザがディスプレイ２ａ～２ｅの何れかを視認していると判断したことを条件として、Ｓ１２において変数ｐ＝１と設定しＳ８へ処理を移行する。変数ｐは、画像歪みの補正を実施するか否かを決定する変数を示しており、補正しない場合には１に設定され、補正する場合にはゼロに設定される。

【0051】

車両周辺に危険が潜んでいることを判断する方法は、車両の周辺カメラ２１を用いて撮像画像を画像認識したり、又は、クリアランスソナー２２ａにより自車両の周辺の状態を認識したりする方法がある。また、ユーザがディスプレイ２ａ～２ｅを視認しているか否かを判断する方法は、乗員モニタ２０のセンサ信号を用いて判断する方法がある。例えば、自車両の進行方向に歩行者や他車両が存在、又は、車両ドアの横に障害物が存在することを検知することで、危険が潜んでいると判定すると良い。制御装置１２は、変数ｐが０以外の１であればＳ８にてＮＯと判定し、Ｓ１３において判定部１２ｃにより画像の歪みを補正しないと判定する。

【0052】

また制御装置１２は、ロケータ１８に基づいて現在位置情報、又は、車速センサ２３に基づいて車両の速度情報を車両の状態として取得した結果、取得した情報に基づいてＳ６にて車両が高速走行していると判定したことを条件として、判定部１２ｃにより画像の歪みを補正しないと判定すると良い。

【0053】

ここでいう高速走行とは、車両が高速道路を走行していることをロケータ１８により検出していることを意味する他、一般道路であっても車速センサ２３により一定速度以上の高速走行をしていることを検出していることを意味することもある。また、一般に道路毎に法定速度が定められているが、この法定速度に対する所定の割合で定められた所定速度以上の高速走行をしていることを車速センサ２３により検出していることを意味することもある。

【0054】

制御装置１２は、車両が高速走行していると判定した場合には、Ｓ１２において変数ｐ＝１と設定しＳ８へ移行する。制御装置１２は、Ｓ８において変数ｐが０以外の１であるためＳ８にてＮＯと判定し、Ｓ１３において判定部１２ｃにより画像の歪みを補正しないと判定する。そして表示処理部１５が、Ｓ１０においてコンテンツの画像を表示器２の複数のディスプレイ２ａ～２ｅにそれぞれ出力することでディスプレイ２ａ～２ｅにコンテンツを表示処理する。

【0055】

特に、電子ミラー用のディスプレイ２ａ、２ｅには、車両側後方の撮像画像を表示処理する。このことから、高速走行中に電子ミラーによりディスプレイ２ａ、２ｅの表示処理の遅延を生じると、ユーザが違和感を生じやすく、車両周辺情報をリアルタイムに適切にユーザに伝えることが難しくなる虞がある。また、ディスプレイ２ｂに表示させるメータ画像についても、表示処理の遅延を生じるとユーザが違和感を生じやすく、メータ情報をリアルタイムに適切にユーザに伝えることが難しくなる虞がある。この場合、電子制御装置１０が、歪み補正をすることなくディスプレイ２ａ、２ｂ、２ｅに表示処理することで、ユーザに違和感を極力生じさせることがなくなる。

【0056】

また制御装置１２は、Ｓ５において車両周辺に危険性がないと判定し、Ｓ６において自車両が高速走行もしていないと判定すれば、Ｓ５及びＳ６において共にＮＯと判定し、Ｓ７において変数ｐ＝０と設定しＳ８へ移行する。制御装置１２は、Ｓ８において変数ｐが０であるためＳ８にてＹＥＳと判定し、Ｓ９において判定部１２ｃにより画像歪みの補正を実施すると判定する。そして表示処理部１５が、Ｓ１０において補正を施したコンテンツの画像を表示器２の複数のディスプレイ２ａ～２ｅにそれぞれ出力することでそれぞれのディスプレイ２ａ～２ｅにコンテンツを表示処理できる。

【0057】

電子制御装置１０が、コンテンツの画像をディスプレイ２ａ～２ｅに元画像を歪み補正しながら表示制御すると、図９に歪み補正後の視認状態を例示したように、ユーザが反射ミラー６に反射した虚像Ｋを確認した際に、画像の歪みが補正された状態で視認できるようになる。この場合、ユーザはコンテンツの画像を良質な状態で確認できる。例えば、エンターテインメント画像など嗜好性の強いコンテンツ画像などについては、歪み補正が施されることで画像を良質に補正できるようになり、ユーザはコンテンツ画像を楽しむことができる。

【0058】

以上説明したように、本実施形態によれば、歪み補正部１５ａが、ユーザの状態又は車両の状態に基づいて必要なときに画像の歪みを補正している。このため、リアルタイム性が要求されるような例えば電子ミラーのコンテンツ画像を表示制御する場合には、画像の歪み補正をすることなく表示制御することで、フレームレートを高く維持できるようになり、情報の欠落を極力生じさせないように調整できる。

【0059】

逆に、例えばエンターテインメント系のコンテンツの画像を提供する場合などには、画像の歪み補正を実施して表示制御することで、ユーザに提供するコンテンツの画像の品質を向上できる。これにより、車両用コンテンツの画像について適切に表示制御できる。

【0060】

また例えば、車両の周辺カメラ２１又はクリアランスソナー２２ａにより車両周辺に危険が潜んでいると判断したときには画像の歪み補正なしに設定している。また、高速走行中にも同様に歪み補正を実施しないようにしている。このため、このような危険を伴うような運転シーンの場合でも、コンテンツ画像のガタガタ表示を防止でき、情報の欠落を防止してユーザに対し情報をリアルタイムに伝えることができる。フレーム遅れによるユーザの情報見落としがなくなり安全を担保できる。

【0061】

その他、変形例を挙げる。電子制御装置１０が、複数のディスプレイ２ｃ、２ｄを跨いでコンテンツを表示させるときには判定部１２ｃにより画像の歪みを補正しないように判定して画像の歪みを補正することなくディスプレイ２ａ～２ｅに表示制御すると良い。表示するコンテンツは、主に複数のディスプレイ２ａ～２ｅ毎に決定されるが、例えば、ナビゲーション処理を実行しているとき、複数のディスプレイ（例えば２ｃ、２ｄ）の複数画面に亘って比較的大きな地図画面を表示処理することもある。このようなときには、画像を歪み補正しないようにすることで、地図表示や自車両の現在位置の表示処理における表示遅れの蓄積に基づくフレームずれを極力抑制でき、ユーザは複数画面に亘る地図画面を視認しやすくなる。

【0062】

（第２実施形態）
第２実施形態について図１０を参照しながら説明する。前述実施形態と同一処理内容については同一ステップ番号を付して説明を省略する。
図１０に示すように、制御装置１２は、図１０のＳ１１において乗員モニタ２０によりユーザがディスプレイ２ａ～２ｅの何れかを視認していることを確認したことを条件として、Ｓ７において変数ｐ＝０に設定し、Ｓ９において歪み補正を実施するようにしても良い。すなわち、ユーザがディスプレイ２ａ～２ｅの何れかを視認している最中に歪み補正を実施すれば良く、この場合、ユーザがディスプレイ２ａ～２ｅを視認していない最中には歪み補正をしなくても良くなる。これにより、ユーザがディスプレイ２ａ～２ｅを視認していない最中には、電子制御装置１０は画像の歪み補正に関する処理負荷を軽減できる。

【0063】

（他の実施形態）
本発明は、前述した実施形態に限定されるものではなく、種々変形して実施することができ、その要旨を逸脱しない範囲で種々の実施形態に適用可能である。

【0064】

ディスプレイ２ａ～２ｅは、横方向に併設された有機ＥＬディスプレイに適用した実施形態を示したが、これに限定されるものではない。例えば、反射ミラー６に反射させてフロントウィンドシールド５や他の表示対象パネルなどに車両情報等のコンテンツの画像を映し出すようにしたヘッドアップディスプレイなどに適用しても良い。

【0065】

前述実施形態では、全てのディスプレイ２ａ～２ｅに対して表示するコンテンツ画像の歪み補正を行うか否かを判定するようにしたが、これに限られるものではない。例えば、補正可否設定部１２ｄが、表示器２のうち一部のディスプレイ（例えば２ｂ～２ｄ）だけコンテンツ画像の歪み補正を行うか否かを示す補正可否を設定するようにしても良く、この場合、一部のディスプレイを除く他のディスプレイ（例えば２ａ、２ｅ）に対して画像の歪み補正の実施／非実施を固定的に決定すると良い。

【0066】

例えば、電子ミラーの画像表示に割当てられた両端の一部のディスプレイ２ａ、２ｅには、画像の歪み補正をしないことを固定的に設定しても良く、補正可否設定部１２ｄは、その他の中央寄りのディスプレイ２ｂ～２ｄに対してのみ、図７又は図１０の処理を実行してコンテンツの画像の歪み補正を行うか否かを判定するように設定しても良い。

【0067】

また五つのディスプレイ２ａ～２ｅを用いて説明したが、これに限られるものではなく、ディスプレイは一つでも良く、また二以上の複数備えるシステムに適用しても良い。

【0068】

図１０のＳ２及びＳ３の処理を省いても良い。この場合、車両の状態を判定条件として考慮することなくユーザの状態のみで画像歪みの補正を実施するか否かを判定できる。

【0069】

図７のＳ４及びＳ１１の処理を省いても良い。この場合、ユーザの状態を判定条件として考慮することなく車両の状態のみで画像歪みの補正を実施するか否かを判定できる。この場合、制御装置１２は、車両周辺の状態に危険が潜んでいるときにＳ１２において変数ｐに１を設定し、Ｓ１３において判定部１２ｃにより画像の歪みを補正しないと判定する。すると、車両周辺に危険が潜んでいると判断されたときには、フレームレートを高くして表示処理でき、ユーザに必要な情報を優先的に伝えることができる。
また図７のＳ６の処理を省いても良い。

【0070】

本開示に記載の電子制御装置１０による手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサ及びメモリを構成することにより提供された専用コンピュータにより実現されても良い。或いは、本開示に記載の電子制御装置１０及びその手法は、一つ以上の専用ハードウェア論理回路によりプロセッサを構成することにより提供された専用コンピュータにより実現されても良い。若しくは、本開示に記載の電子制御装置１０及びその手法は、一つ乃至は複数の機能を実行するようにプログラムされたプロセッサ及びメモリと一つ以上のハードウェア論理回路により構成されたプロセッサとの組み合わせにより構成された一つ以上の専用コンピュータにより実現されても良い。また、コンピュータプログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されていても良い。

【0071】

本発明は、前述した実施形態に準拠して記述したが、本発明は当該実施形態や構造に限定されるものではないと理解される。本発明は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、さらには、それらに一要素、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本発明の範畴や思想範囲に入るものである。

【符号の説明】

【0072】

図面中、１は車両用表示制御システム、２ａ～２ｅはディスプレイ、６は反射ミラー（反射物）、１２ｂは取得部、１２ｃは判定部、１２ｄは補正可否設定部、１５ａは歪み補正部、を示す。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】