特許 7180702 表示装置、表示システム、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-11-21

(45)【発行日】2022-11-30

(54)【発明の名称】表示装置、表示システム、及びプログラム

(51)【国際特許分類】

   G09G 5/00 20060101AFI20221122BHJP

   G09G 5/36 20060101ALI20221122BHJP

   G09G 5/38 20060101ALI20221122BHJP

   B60K 35/00 20060101ALI20221122BHJP

【ＦＩ】

G09G5/00 510G

G09G5/00 550C

G09G5/00 550B

G09G5/00 530H

G09G5/36 520D

G09G5/38 A

B60K35/00 A

【請求項の数】 13

(21)【出願番号】P 2021014654

(22)【出願日】2021-02-01

(62)【分割の表示】P 2016222167の分割

【原出願日】2016-11-15

(65)【公開番号】P2021076864

(43)【公開日】2021-05-20

【審査請求日】2021-02-01

(73)【特許権者】

【識別番号】000006747

【氏名又は名称】株式会社リコー

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(72)【発明者】

【氏名】▲高▼澤 和寛

【審査官】西島 篤宏

(56)【参考文献】

【文献】特開２０１６－０６０４４５（ＪＰ，Ａ）

【文献】特開２０１４－１７７２４３（ＪＰ，Ａ）

【文献】特開２０１７－１８１６６６（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１０／０３２８０５５（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０９Ｇ ５／００ － ５／４２

Ｂ６０Ｋ ３５／００

(57)【特許請求の範囲】

【請求項1】

オブジェクトを背景上に重ねて表示する表示部と、
前記オブジェクトの位置、及び前記オブジェクトの移動方向を取得し、
取得された前記オブジェクトの位置、及び前記オブジェクトの移動方向に基づいて、前記表示部により表示可能な領域の縁に前記オブジェクトが移動するまでの時間、または前記オブジェクトの表示位置と前記オブジェクトの移動先の前記縁との距離を推定し、
推定された、前記時間または前記距離に基づいて、前記オブジェクトの表示態様を決定する演算装置と、を備え、
前記演算装置は、前記オブジェクトが前記表示可能な領域に入る場合、表示領域に入ったときから、一定速度で徐々に、ユーザに視認されにくい表示態様から、ユーザに視認され易い表示態様に変化させ、第１の表示位置と比較して前記表示部が表示可能な領域の境界に近い第２の表示位置における前記オブジェクトの表示態様を、前記第１の表示位置における前記オブジェクトの表示態様をよりも視認されにくい表示態様に決定することを特徴とする表示装置。

【請求項2】

前記視認されにくい表示態様は、透明度が高い表示態様である
請求項１に記載の表示装置。

【請求項3】

前記視認されにくい表示態様は、前記オブジェクトが回転されたことにより小さく表示される表示態様である
請求項１に記載の表示装置。

【請求項4】

前記演算装置は、前記オブジェクトの位置、移動装置の移動速度、及び移動装置の操舵角に基づいて、前記オブジェクトの移動方向を算出する
請求項１乃至３のいずれか一項に記載の表示装置。

【請求項5】

前記演算装置は、さらに、移動装置の加速度に基づいて、前記オブジェクトが前記縁に移動するまでの時間を推定する
請求項１乃至４のいずれか一項に記載の表示装置。

【請求項6】

前記演算装置は、移動装置の傾きにより前記オブジェクトが前記領域において移動する場合は、前記表示態様を変更しない
請求項１乃至５のいずれか一項に記載の表示装置。

【請求項7】

前記演算装置は、前記オブジェクトが前記領域から出た後、前記オブジェクトが前記領域に入った場合は、前記オブジェクトを前記表示部に表示させない
請求項１乃至６のいずれか一項に記載の表示装置。

【請求項8】

前記演算装置は、前記オブジェクトの種別に基づいて、前記オブジェクトが前記領域から出た後、前記オブジェクトが前記領域に入った場合に、前記オブジェクトを前記表示部に表示させるか否かを決定する
請求項７に記載の表示装置。

【請求項9】

前記演算装置は、移動装置の操舵により前記オブジェクトが前記領域から出た後、当該操舵を打ち消すような操舵により前記オブジェクトが前記領域に入った場合は、前記オブジェクトを前記表示部に表示させる
請求項７または８に記載の表示装置。

【請求項10】

前記表示部は、投影光または発光素子により、前記オブジェクトを背景上に重ねて表示する
請求項１乃至９のいずれか一項に記載の表示装置。

【請求項11】

請求項１乃至１０のいずれか一項に記載の表示装置を備える移動体。

【請求項12】

オブジェクトを背景上に重ねて表示する表示部を有する表示装置、及び移動装置を制御する制御装置を備える表示システムであって、
前記制御装置は、
前記オブジェクトの位置、前記移動装置の移動速度、及び前記移動装置の操舵角のデータを前記表示装置に通知し、
前記表示装置は、
前記オブジェクトの位置、及び前記データに基づいて算出された前記オブジェクトの移動方向を取得し、
取得された前記オブジェクトの位置、及び前記オブジェクトの移動方向に基づいて、前記表示部により表示可能な領域の縁に前記オブジェクトが移動するまでの時間、または前記オブジェクトの表示位置と前記オブジェクトの移動先の前記縁との距離を推定し、
推定された、前記時間または前記距離に基づいて、前記オブジェクトの表示態様を決定する演算装置と、を備え、
前記演算装置は、前記オブジェクトが前記表示可能な領域に入る場合、表示領域に入ったときから、一定速度で徐々に、ユーザに視認されにくい表示態様から、ユーザに視認され易い表示態様に変化させ、第１の表示位置と比較して前記表示部が表示可能な領域の境界に近い第２の表示位置における前記オブジェクトの表示態様を、前記第１の表示位置における前記オブジェクトの表示態様をよりも視認されにくい表示態様に決定することを特徴とする表示システム。

【請求項13】

表示装置に、
オブジェクトの位置、及び前記オブジェクトの移動方向を取得するステップと、
前記取得された前記オブジェクトの位置、及び前記オブジェクトの移動方向に基づいて、前記オブジェクトを背景上に重ねて表示する表示部により表示可能な領域の縁に前記オブジェクトが到達するまでの時間、または前記オブジェクトの表示位置と前記オブジェクトの移動先の前記縁との距離を推定するステップと、
推定された、前記時間または前記距離に基づいて、前記オブジェクトの表示態様を決定するステップと、を実行させ、
前記オブジェクトが前記表示可能な領域に入る場合、表示領域に入ったときから、一定速度で徐々に、ユーザに視認されにくい表示態様から、ユーザに視認され易い表示態様に変化させ、第１の表示位置と比較して前記表示部が表示可能な領域の境界に近い第２の表示位置における前記オブジェクトの表示態様を、前記第１の表示位置における前記オブジェクトの表示態様をよりも視認されにくい表示態様に決定するプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、表示装置、表示システム、及びプログラムに関する。

【背景技術】

【0002】

従来、自動車や航空機等の移動装置において、ユーザの視野に直接情報を映し出すヘッドアップディスプレイ（ＨＵＤ、Head-Up Display）が知られている。

【0003】

ＨＵＤは、ユーザ（運転者）に視線をあまり動かすことなく情報を視認させることができるため、運転に伴う身体的な負荷の低減や、よそ見による事故の発生を防ぐ効果が期待され、近年普及し始めている。

【0004】

ＨＵＤでは、例えばレーザーやＬＣＤ（Liquid Crystal Display）の光源を用い、フロントガラス（ウインドシールド）やコンバイナに投影することにより、ユーザの視線の先に、宙に浮いたような虚像を表示する。

【発明の概要】

【発明が解決しようとする課題】

【0005】

ＨＵＤを用いて、例えば対向車等の物体に関する情報や経路案内等のナビゲーションに関する情報を示すオブジェクトを、背景の実世界に重ねて表示する、拡張現実（ＡＲ、Augmented Reality）表示を行う場合を考える。

【0006】

この場合、従来技術では、当該物体の移動やＨＵＤが搭載された自装置の移動に伴い、ＨＵＤで表示可能な領域外にオブジェクトが移動して行く。この場合、ＨＵＤで表示可能な領域の縁（境界）で、オブジェクトの表示が欠けるため、ユーザがＨＵＤの表示領域の縁（境界）を認識してしまい、ＡＲ表示と背景の実世界との一体感が薄れ、ＡＲ表示のリアリティが薄れてしまうという問題がある。

【0007】

そこで、背景にオブジェクトを重ねて表示する表示領域の境界を認識されにくくする技術を提供することを目的とする。

【課題を解決するための手段】

【0008】

オブジェクトを背景上に重ねて表示する表示部と、前記オブジェクトの位置、及び前記
オブジェクトの移動方向を取得し、取得された前記オブジェクトの位置、及び前記オブジ
ェクトの移動方向に基づいて、前記オブジェクトが前記表示部により表示可能な領域の縁
に到達するまでの時間または距離を推定し、推定された、前記オブジェクトが前記領域の
縁に到達するまでの時間または距離に基づいて、前記オブジェクトの表示態様を決定する
演算装置と、を備え、前記演算装置は、前記オブジェクトが前記表示可能な領域に入る場
合、表示領域に入ったときから、一定速度で徐々に、ユーザに視認されにくい表示態様か
ら、ユーザに視認され易い表示態様に変化させ、第１の表示位置と比較して前記表示部が表示可能な領域の境界に近い第２の表示位置における前記オブジェクトの表示態様を、前記第１の表示位置における前記オブジェクトの表示態様をよりも視認されにくい表示態様に決定する。

【発明の効果】

【0009】

開示の技術によれば、背景にオブジェクトを重ねて表示する表示領域の境界を認識されにくくすることが可能となる。

【図面の簡単な説明】

【0010】

【図1】実施形態に係る表示システムのシステム構成の一例を示す図である。

【図2】実施形態に係る表示装置の設置例について説明する図である。

【図3】実施形態に係る表示装置の表示領域について説明する図である。

【図4】実施形態に係る表示装置のハードウェア構成の一例を示す図である。

【図5】実施形態に係る表示装置の機能ブロックの一例を示す図である。

【図6】表示部により表示されるＡＲ表示ついて説明する図である。

【図7】対象オブジェクトが表示領域の縁の位置に移動するまでの時間に応じて、対象オブジェクトの表示態様を決定する処理の一例を示すフローチャートである。

【図8】対象オブジェクトが表示領域の縁の位置に移動するまでの時間に応じて、対象オブジェクトの表示態様を決定する処理の一例を説明する図である。

【図9】対象オブジェクトの表示態様の変化について説明する図である。

【図10】対象オブジェクトの現在の表示位置と、対象オブジェクトの移動先の表示領域の縁との表示領域における距離に応じて、対象オブジェクトの表示態様を決定する処理の一例を示すフローチャートである。

【図11】オブジェクトが表示領域に入る場合の処理について説明する図である。

【図12】オブジェクトが表示領域から出た後、再度表示領域に入る場合の処理の一例を示すフローチャートである。

【図13】オブジェクトが表示領域から出た後、再度表示領域に入る場合のオブジェクトの表示態様の例について説明する図である。

【図14】外乱によりオブジェクトが表示領域に入ったまたは表示領域から出た場合の表示態様の例について説明する図である。

【図15】オブジェクトが回転されたことにより小さく表示される表示態様例について説明する図である。

【発明を実施するための形態】

【0011】

以下、本発明の実施形態について、図面を参照しながら詳細に説明する。

【0012】

＜システム構成＞
まず、本実施形態に係る表示システム１のシステム構成について、図１を用いて説明する。図１は、実施形態に係る表示システム１のシステム構成の一例を示す図である。

【0013】

図１に示すように、本実施形態に係る表示システム１は、車両、航空機、船舶等の移動装置に搭載され、表示装置１０と、１以上のＥＣＵ（Electric Control Unit）２０－１、２０－２、・・・とを備える。なお、以下では、表示システム１を車両に搭載した例について説明するが、表示システム１は、車両以外の移動装置においても適用可能である。

【0014】

表示装置１０とＥＣＵ２０との間は、例えばＣＡＮ（Control Area Network）などのネットワークにより接続される。

【0015】

表示装置１０は、例えばＨＵＤであり、ＥＣＵ２０から取得した情報に基づき、例えば対向車等の物体に関する情報や、右折及び左折の指示や交差点名等の経路案内のためのナビゲーションに関する情報を示すオブジェクトを、背景の実世界上に重ねて表示する。なお、オブジェクトを、背景の実世界（背景上）に重ねて表示することは、ＡＲ表示とも称されている。

【0016】

図２は、実施形態に係る表示装置１０の設置例について説明する図である。図２に示すように、表示装置１０は、例えばハンドル５０１に対面した際のドライバー５０２の正面（移動装置１００の進行方向）のダッシュボード５０３内に設置される。表示装置１０は、例えばダッシュボード５０３に開けられた開口部（投影口）から投影光５０４を照射し、フロントガラス５０５に反射させてドライバー５０２に虚像を見せることにより、表示領域５０６にオブジェクトを表示する。

【0017】

図３は、実施形態に係る表示装置１０の表示領域について説明する図である。図３に示すように、表示装置１０の表示領域５０６において、表示装置１０が表示するオブジェクト５１０は、フロントガラス５０５越しに見える現実世界に重なって表示される。表示装置１０は、表示領域５０６において、オブジェクト５１０を、オブジェクト５１０が対応付けられた背景の物体等の位置と連動して移動させる。これにより、あたかもそこにオブジェクト５１０が実在するかのようにドライバーに認識される。

【0018】

ＥＣＵ２０は、自車両の速度（車速）、操舵角（ハンドルの切れ角）、ピッチやロール等の自車両の傾き、オブジェクトの実空間における位置及び大きさ、オブジェクトの種別等の情報を表示装置１０に通知する。

【0019】

＜ハードウェア構成＞
次に、本実施形態に係る表示装置１０のハードウェア構成について、図４を用いて説明する。図４は、実施形態に係る表示装置１０のハードウェア構成の一例を示す図である。

【0020】

表示装置１０は、通信Ｉ／Ｆ１０１、ＣＰＵ（Central Processing Unit）１０２、ＲＯＭ（Read Only Memory）１０３、ＲＡＭ（Random Access Memory）１０４、造影装置１０５、及び外部Ｉ／Ｆ１０６、及びＳＳＤ（Solid State Drive）１０７等を有する。これらのハードウェアは、バスＢで互いに接続されている。

【0021】

通信Ｉ／Ｆ１０１は、表示装置１０をＣＡＮ等のネットワークに接続するインタフェースである。

【0022】

ＣＰＵ１０２は、ＲＯＭ１０３やＳＳＤ１０７等の記憶装置からプログラムやデータをＲＡＭ１０４上に読み出し、当該プログラムやデータに基づく処理を実行することで、表示装置１０全体の制御やその他の機能を実現する演算装置である。

【0023】

ＲＯＭ１０３は、電源を切ってもプログラムやデータを保持することができる不揮発性の半導体メモリである。ＲＯＭ１０３には、ＯＳ設定、ネットワーク設定等のプログラムやデータ、及び表示装置１０の起動時に実行されるＢＩＯＳ（Basic Input/Output System）が格納されている。ＲＡＭ１０４は、プログラムやデータを一時保持する揮発性の半導体メモリである。

【0024】

造影装置１０５は、レーザーによる投影光を照射する投影装置や、発光素子により表示を行うＬＣＤ等のディスプレイであり、表示装置１０による処理結果を表示する。

【0025】

ＳＳＤ１０７は、プログラムやデータを格納している不揮発性の記憶装置である。ＳＳＤ１０７に格納されるプログラムやデータには、表示装置１０全体を制御する基本ソフトウェアであるＯＳ（Operating System）、ＯＳ上において各種機能を提供するアプリケーションソフトウェア等がある。また、ＳＳＤ１０７は、格納しているプログラムやデータを所定のファイルシステムやＤＢにより管理している。

【0026】

外部Ｉ／Ｆ１０６は、外部装置とのインタフェースである。外部装置には、記録媒体１０６ａ等がある。表示装置１０は、外部Ｉ／Ｆ１０６を介して記録媒体１０６ａの読み取りや書き込みを行うことができる。記録媒体１０６ａには、フレキシブルディスク、ＣＤ、ＤＶＤ、ＳＤメモリカード、ＵＳＢメモリ等がある。

【0027】

＜機能構成＞
次に、図５を参照し、実施形態に係る表示装置１０の機能構成について説明する。図５は、実施形態に係る表示装置１０の機能ブロックの一例を示す図である。

【0028】

表示装置１０は、取得部１１、推定部１２、決定部１３、及び表示部１４を有する。これら各部は、表示装置１０にインストールされた１以上のプログラムが、表示装置１０のＣＰＵ１０２に実行させる処理により実現される。

【0029】

取得部１１は、自車両の速度（車速）、ハンドルの切れ角、ピッチやロール等の自車両の傾き、オブジェクトの実空間における位置及び大きさ、オブジェクトの種別等の情報をＥＣＵ２０から取得する。また、取得部１１は、オブジェクトの実空間における位置、移動装置の移動速度、及び移動装置の操舵角に基づいて、オブジェクトの実空間における移動方向を算出して取得する。

【0030】

推定部１２は、取得部１１により取得されたオブジェクトの実空間における位置、及びオブジェクトの実空間における移動方向に基づいて、オブジェクトが表示部１４により表示可能な領域（以下で「表示領域」と称する。）の縁に到達するまでの時間を推定する。または、推定部１２は、取得部１１により取得されたオブジェクトの位置、及びオブジェクトの移動方向に基づいて、オブジェクトの現在の表示位置と表示領域の縁との画素上の距離を推定する。

【0031】

決定部１３は、推定部１２により推定された時間または距離に基づいて、オブジェクトの表示態様を決定する。

【0032】

表示部１４は、投影光または発光素子により、決定部１３により決定された表示態様で、オブジェクトを、ユーザから見た表示領域の背景の実世界上に重ねて表示する。

【0033】

図６は、表示部１４により表示されるＡＲ表示ついて説明する図である。図６（Ａ）に示すように、オブジェクト（ＡＲオブジェクト）５１０ａ、５１０ｂは、実世界と縮尺が一致されている仮想空間に配置される。そして、図６（Ｂ）、図６（Ｃ）に示すように、移動装置やオブジェクトが移動した場合においても、移動装置に乗っているドライバー５０２から見た時に、表示領域５０６において当該オブジェクトの虚像が実世界上で当該配置された位置に重ねられて表示される。実空間（実世界）における座標と、表示領域５０６における座標との変換には、３Ｄ画像処理などで一般的に用いられる射影変換等の公知の手法が用いられてもよい。

【0034】

図６（Ｂ）、図６（Ｃ）では、自車両が直進し、交差点に差し掛かる場面において、次の交差点で曲る方向を案内する矢印のオブジェクトが、一定間隔で路面上に配置されているようにＡＲ表示されている。これらの矢印のオブジェクトは、実空間上で静止しているように配置されているため、自車両の前進に伴う地面の動きと同期して、自車両に近づくように移動して表示される。この場合、これらの矢印のオブジェクトは、自車両の前進に伴い、表示装置１０の表示領域の上部から下部に向かって移動され、最終的には表示領域外に出ていくように表示される。

【0035】

＜処理＞
≪オブジェクトが表示領域から出る場合の処理≫
次に、図７を参照し、実施形態に係る表示装置１０の処理について説明する。図７は、対象オブジェクトが表示領域の縁の位置に移動するまでの時間に応じて、対象オブジェクトの表示態様を決定する処理の一例を示すフローチャートである。以下の処理は、例えば、表示装置１０が各表示フレームを表示する度に行われてもよい。また、以下の処理は、表示するオブジェクトが複数ある場合は、例えばステップＳ１０２以降の処理を、各オブジェクトに対して実行する。

【0036】

ステップＳ１０１において、表示装置１０の取得部１１は、ＥＣＵ２０から、ユーザの操作情報を取得する。ユーザの操作情報には、自車両の車速、及び操舵角の情報が含まれる。

【0037】

続いて、表示装置１０の取得部１１は、ＥＣＵ２０から、処理対象とするオブジェクト（以下で「対象オブジェクト」と称する。）の情報を取得する（ステップＳ１０２）。表示対象のオブジェクトの情報には、例えばオブジェクトの実空間における位置及び大きさ等が含まれる。

【0038】

続いて、表示装置１０の取得部１１は、対象オブジェクトの、実空間における自車両に対する相対的な移動方向を算出する（ステップＳ１０３）。

【0039】

続いて、表示装置１０の取得部１１は、表示装置１０の表示領域における対象オブジェクトの表示位置を算出する（ステップＳ１０４）。

【0040】

続いて、表示装置１０の推定部１２は、表示装置１０の表示領域における対象オブジェクトの移動方向を推定する（ステップＳ１０５）。例えば経路案内等のナビゲーションに関する情報を示すオブジェクトのように、実空間上で静止している対象オブジェクトであれば、自車両の速度（車速）、及び操舵角に基づいて、時間経過に伴う対象オブジェクトの表示位置の軌跡（移動方向）を推定できる。また、例えば対向車等の物体に関する情報を示すオブジェクトのように、実空間上で移動している対象オブジェクトであれば、例えばステレオカメラやレーダー等で測定した物体と自車両との相対的な速度及び移動方向、及び操舵角に基づいて、時間経過に伴う対象オブジェクトの表示位置の軌跡（移動方向）を推定できる。

【0041】

続いて、表示装置１０の推定部１２は、対象オブジェクトが、現在の表示位置から、表示装置１０の表示領域の縁の位置に移動するまでの時間を推定する（ステップＳ１０６）。例えば、ステップＳ１０５で推定された、時間経過に伴う対象オブジェクトの表示位置の軌跡（移動方向）に基づいて、対象オブジェクトの表示位置が、表示領域の縁の位置に移動するまでに経過する時間を、表示領域の縁の位置に移動するまでの時間としてもよい。なお、表示装置１０は、自車両の加速度の情報も加味して、対象オブジェクトが表示領域の縁の位置に移動するまでの時間を推定してもよい。

【0042】

続いて、表示装置１０の決定部１３は、当該時間に応じて、対象オブジェクトの表示態様を決定する（ステップＳ１０７）。

【0043】

続いて、表示装置１０の表示部１４は、決定された表示態様にて、対象オブジェクトを表示する（ステップＳ１０８）。

【0044】

次に、図８を参照し、ステップＳ１０７の対象オブジェクトの表示態様を決定する処理について説明する。図８は、対象オブジェクトが表示領域の縁の位置に移動するまでの時間に応じて、対象オブジェクトの表示態様を決定する処理の一例を説明する図である。

【0045】

対象オブジェクト５１０が、図８に示すような複雑な形状である場合、例えば、対象オブジェクト５１０に外接する矩形等を対象オブジェクトの境界５２０としてもよい。そして、対象オブジェクト５１０の境界５２０が、表示領域５０６の縁に接するまでに経過すると推定された時間を、対象オブジェクト５１０が表示領域５０６の縁の位置５２１に移動するまでの時間として算出してもよい。

【0046】

次に、図９を参照し、対象オブジェクトの表示態様の変化について説明する。図９は、対象オブジェクトの表示態様の変化について説明する図である。

【0047】

図９（Ａ）に示すように、表示装置１０の決定部１３は、対象オブジェクトの境界が、表示領域の縁に接するまでの所要時間の推定値が減少することに伴って、通常の表示態様５５０から、表示態様５５１乃至表示態様５５４のように、徐々にユーザに視認されにくい表示態様に変化させる。例えば、表示装置１０は、表示領域の縁に接するまでの所要時間の推定値が所定値（例えば４秒）以下となった場合、表示態様５５１乃至表示態様５５４のように、当該推定値の減少に伴って対象オブジェクトの透明度を上げる。これにより、対象オブジェクトは表示領域の縁に近づくにつれて透明になっていくため、ユーザから表示領域の縁を意識されにくくすることができる。

【0048】

図９（Ｂ）は、図９（Ａ）と比較して、対象オブジェクトがゆっくりと表示領域の縁に近づく場合の例を示す図である。図９（Ｂ）に示すように、対象オブジェクトが比較的ゆっくりと表示領域の縁に近づく場合、対象オブジェクトは、表示領域の縁に比較的近づいてから、徐々にユーザに視認されにくい表示態様に変化される。

【0049】

＜変形例＞
図８では、対象オブジェクトが表示領域の縁の位置に移動するまでの時間に応じて、対象オブジェクトの表示態様を決定する例について説明した。以下では、対象オブジェクトの現在の表示位置と、対象オブジェクトの移動先の表示領域の縁との表示領域における距離に応じて、対象オブジェクトの表示態様を決定する例について説明する。

【0050】

図１０は、対象オブジェクトの現在の表示位置と、対象オブジェクトの移動先の表示領域の縁との表示領域における距離に応じて、対象オブジェクトの表示態様を決定する処理の一例を示すフローチャートである。

【0051】

ステップＳ２０１乃至ステップＳ２０５、ステップＳ２０８の処理は、図７のステップＳ１０１乃至ステップＳ１０５、ステップＳ１０８の処理と同様である。

【0052】

ステップＳ２０６において、表示装置１０の推定部１２は、対象オブジェクトの現在の表示位置と、対象オブジェクトの移動先の表示領域の縁との表示領域における距離を推定する。例えば、ステップＳ２０５で推定された、時間経過に伴う対象オブジェクトの表示位置の軌跡（移動方向）に基づいて、対象オブジェクトの現在の表示位置と、対象オブジェクトの移動先の表示領域の縁との表示領域における距離（図８に示す距離５２３）が算出できる。なお、表示領域における距離とは、表示領域が例えば液晶ディスプレイである場合の画素における距離に相当する。

【0053】

続いて、表示装置１０の決定部１３は、当該距離に応じて、対象オブジェクトの表示態様を決定する（ステップＳ２０７）。

【0054】

≪オブジェクトが表示領域に入る場合の処理≫
次に、図１１を参照し、オブジェクトが表示領域に入る場合の決定部１３の処理について説明する。図１１は、オブジェクトが表示領域に入る場合の処理について説明する図である。

【0055】

表示装置１０の決定部１３は、オブジェクトが表示領域に入る場合、例えば、表示領域に入ったときから、表示態様５５４乃至表示態様５５０のように、一定速度で徐々に、ユーザに視認されにくい表示態様５５４から、ユーザに視認され易い通常の表示態様５５０に変化させる。この場合、オブジェクトの移動速度や移動方向とは関係なく、全てのオブジェクトについて、領域に入ったときから通常の表示態様５５０になるまでに掛かる時間は同じとなる。

【0056】

≪オブジェクトが表示領域から出た後、再度表示領域に入る場合の処理≫
次に、図１２、図１３を参照し、オブジェクトが表示領域から出た後、再度表示領域に入る場合の決定部１３の処理について説明する。図１２は、オブジェクトが表示領域から出た後、再度表示領域に入る場合の処理の一例を示すフローチャートである。図１３は、オブジェクトが表示領域から出た後、再度表示領域に入る場合のオブジェクトの表示態様の例について説明する図である。

【0057】

ステップＳ３０１において、表示装置１０の決定部１３は、オブジェクトが表示領域から出た後、再度表示領域に入ったことを検知する。

【0058】

続いて、表示装置１０の取得部１１は、ＥＣＵ２０から、オブジェクトの種別を取得する（ステップＳ３０２）。なお、オブジェクトの種別には、例えば、車両、歩行者、経路案内等を示す情報が含まれる。

【0059】

続いて、表示装置１０の決定部１３は、取得部１１により取得されたオブジェクトの種別に基づいて、当該オブジェクトを再度表示するか否かを判定する（ステップＳ３０３）。例えば、予め設定された、重要度が高い種別のオブジェクトの場合、再度表示すると判定される。

【0060】

再度表示すると判定されない場合（ステップＳ３０３でＮＯ）、表示装置１０の表示部１４は、当該オブジェクトを表示しない（ステップＳ３０４）。

【0061】

図１３（Ａ）は、再度表示すると判定されない場合の表示例を示す図である。この場合、再度表示領域に入ったオブジェクトは表示されない。これにより、重要度がそれほど高くないオブジェクトは再表示されないため、ドライバーの認知負荷が高まってしまうことを防止できる。

【0062】

再度表示すると判定された場合（ステップＳ３０３でＹＥＳ）、表示装置１０の表示部１４は、決定された表示態様にて、当該オブジェクトを表示する（ステップＳ３０５）。

【0063】

図１３（Ｂ）は、再度表示すると判定された場合の表示例を示す図である。この場合、再度表示領域に入ったオブジェクトは、上述した「オブジェクトが表示領域に入る場合の処理」や「オブジェクトが表示領域から出る場合の処理」による表示態様と同様の表示態様で表示される。これにより、比較的重要度が高くないオブジェクトは、ドライバーの目に触れる時間を長くすることができる。

【0064】

なお、表示装置１０の決定部１３は、移動装置の操舵によりオブジェクトが表示領域から出た後、当該操舵を打ち消すような操舵により当該オブジェクトが表示領域に再度入った場合は、当該オブジェクトを表示部１４に表示させてもよい。これにより、例えばドライバーが道路上の障害物を避けるためにハンドルを切った後、逆方向にハンドルを切って元の進行方向に復帰した場合は、オブジェクトを再表示することができる。

【0065】

≪外乱によりオブジェクトが表示領域に入ったまたは表示領域から出た場合の処理≫
次に、図１４を参照し、外乱によりオブジェクトが表示領域に入ったまたは表示領域から出た場合の処理の決定部１３の処理について説明する。図１４は、外乱によりオブジェクトが表示領域に入ったまたは表示領域から出た場合の表示態様の例について説明する図である。

【0066】

上述した「オブジェクトが表示領域から出る場合の処理」では、ドライバーの車両操作である、アクセル操作と操舵（ハンドル操作）による、車速及び操舵角に基づいて、表示態様を決定する例について説明した。また、上述した「オブジェクトが表示領域に入る場合の処理」では、表示領域に入ったときからの経過時間に応じて表示態様を決定する例について説明した。

【0067】

以下では、ドライバーの車両操作以外の要因である自車両の傾き（外乱）により、オブジェクトが表示領域から出る、または表示領域に入る場合のオブジェクトの表示態様について説明する。

【0068】

外乱として、例えば、不連続な道路形状による自車両のバウンドなどがある。バウンドなどの突発的な要因に対して、オブジェクトの表示領域における表示位置を移動させない場合、オブジェクトの表示領域における表示位置が、背景の実世界上の物体の位置からずれるため、ＡＲとしてのリアリティが低下する。

【0069】

これを防ぐため、表示装置１０は、ＥＣＵ２０から取得した自車両のピッチ及びロールに基づき、オブジェクトを背景と同期して移動させる。なお、自車両のピッチ及びロールは、自車両に設置された傾きセンサ等により取得される。

【0070】

この場合、例えば自車両のバウンドが大きかった場合、オブジェクトが表示領域から出てしまうことも考えられる。このような場合は、図１４に示すように、外乱によっては表示態様を変化させずに、オブジェクトを移動させる。図１４（Ａ）では、バウンドする前に、オブジェクトが通常の表示態様５５０で表示されている例が示されている。図１４（Ｂ）では、バウンド中に、オブジェクトが表示領域から出た例が示されている。図１４（Ｃ）では、バウンドした後に、オブジェクトが通常の表示態様５５０で表示されている例が示されている。

【0071】

＜表示態様の変形例＞
以上では、ユーザに視認されにくい表示態様として、透明度を高くする例について説明した。これに代えて、ユーザに視認されにくい表示態様として、オブジェクトが回転されたことにより小さく表示される表示態様としてもよい。

【0072】

図１５は、オブジェクトが回転されたことにより小さく表示される表示態様例について説明する図である。図１５では、垂直方向を軸としてオブジェクトが回転された例を示している。この場合、決定部１３は、上述した透明度を決定する処理と同様の処理により、オブジェクトの回転量を例えば表示態様５５１ａ乃至５５４ａのように決定すればよい。なお、回転方向は任意でもよい。また、水平方向を軸としてオブジェクトを回転されてもよい。

【0073】

以上、本発明の実施例について詳述したが、本発明は斯かる特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。

【0074】

例えば、表示装置１０及びクライアント装置３０は一体の装置として構成してもよい。

【0075】

また、表示装置１０の例えば、取得部１１、推定部１２、決定部１３等の各機能部は、１以上のコンピュータにより構成されるクラウドコンピューティングにより実現されていてもよい。

【符号の説明】

【0076】

１ 表示システム
１０ 表示装置
１１ 取得部
１２ 推定部
１３ 決定部
１４ 表示部
２０ ＥＣＵ（「制御装置」の一例）

【先行技術文献】

【特許文献】

【0077】

【文献】特開２０１２－２４２４６５号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】