特許 6349744 表示装置、表示方法および表示プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6349744

(24)【登録日】2018年6月15日

(45)【発行日】2018年7月4日

(54)【発明の名称】表示装置、表示方法および表示プログラム

(51)【国際特許分類】

   B60R 16/02 20060101AFI20180625BHJP

   G08G 1/16 20060101ALI20180625BHJP

   B60K 35/00 20060101ALI20180625BHJP

   G02B 27/01 20060101ALI20180625BHJP

   G02B 27/02 20060101ALI20180625BHJP

   B60R 21/00 20060101ALI20180625BHJP

【ＦＩ】

   B60R16/02 650D

   G08G1/16 C

   B60K35/00 A

   G02B27/01

   G02B27/02 Z

   B60R21/00 993

【請求項の数】6

【全頁数】18

(21)【出願番号】特願2014-13099(P2014-13099)

(22)【出願日】2014年1月28日

(65)【公開番号】特開2015-140061(P2015-140061A)

(43)【公開日】2015年8月3日

【審査請求日】2016年3月31日

(73)【特許権者】

【識別番号】308036402

【氏名又は名称】株式会社ＪＶＣケンウッド

(72)【発明者】

【氏名】岸 和浩

【審査官】 田々井 正吾

(56)【参考文献】

【文献】 特開２０１２−０３０７０３（ＪＰ，Ａ）

【文献】 特開平０５−２９７８４６（ＪＰ，Ａ）

【文献】 特開２００８−２２８００５（ＪＰ，Ａ）

【文献】 特開２０１０−０２６６１９（ＪＰ，Ａ）

【文献】 特開２０１２−１１６４３９（ＪＰ，Ａ）

【文献】 特開２００９−０４３００３（ＪＰ，Ａ）

【文献】 特開２００７−１４０９７８（ＪＰ，Ａ）

【文献】 特開２００３−３２３７００（ＪＰ，Ａ）

【文献】 特開２０１０−２１１６２３（ＪＰ，Ａ）

【文献】 特開２０１３−２０３１０３（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｂ６０Ｒ １６／０２

Ｂ６０Ｋ ３５／００

Ｂ６０Ｒ ２１／００

Ｇ０２Ｂ ２７／０１

Ｇ０２Ｂ ２７／０２

Ｇ０８Ｇ １／１６

(57)【特許請求の範囲】

【請求項1】

メディア再生装置の音声出力に対する操作に基づいた音量変更情報を取得する音量情報取得部、
ユーザに対して危険であることを示す報知情報を取得する報知情報取得部、
前記報知情報取得部が取得した報知情報に基づきユーザの視界中に報知表示を行うとともに、前記音量情報取得部が取得した前記音量変更情報が、所定音量以上への音量変更または所定音量未満への音量変更または所定量以上の音量上昇または所定量以上の音量下降を行う音量変更で、音量変更された音声にユーザが意識を向けてしまうようなものである場合には、前記音量変更から所定時間が経過するまでに前記報知情報を取得した場合に、前記音量変更から所定時間が経過するまでの報知表示を、通常の報知表示より前記ユーザの目につきやすい表示形態に変更する表示部、
を備えることを特徴とする表示装置。

【請求項2】

前記表示装置は、車両内で用いられ、
前記報知情報取得部は、ユーザに対して車両外の情報に基づきユーザに対して危険であることを示す報知情報を取得する、
請求項１に記載の表示装置。

【請求項3】

前記車両が運転支援状態であるか否かの情報を取得する運転支援情報取得部をさらに備え、
前記表示部は、前記運転支援情報取得部が取得した運転支援情報が運転支援状態である場合に、前記音量情報取得部が取得した音量変更情報に基づき、前記報知表示、通常の報知表示より前記ユーザの目につきやすい表示形態に変更する、
請求項２に記載の表示装置。

【請求項4】

前記表示装置は、ユーザが装着して用いられ、
前記報知情報取得部は、ユーザの周囲の状況に基づきユーザに対して危険であることを示す報知情報を取得する、
請求項１に記載の表示装置。

【請求項5】

表示装置が実行する表示方法であって、
メディア再生装置の音声出力に対する操作に基づいた音量変更情報を取得する音量情報取得ステップ、
ユーザに対して危険であることを示す報知情報を取得する報知情報取得ステップ、
前記報知情報取得ステップにおいて取得した報知情報に基づきユーザの視界中に報知表示を行うとともに、前記音量情報取得ステップにおいて取得した前記音量変更情報が、所定音量以上への音量変更または所定音量未満への音量変更または所定量以上の音量上昇または所定量以上の音量下降を行う音量変更で、音量変更された音声にユーザが意識を向けてしまうようなものである場合には、前記音量変更から所定時間が経過するまでに前記報知情報を取得した場合に、前記音量変更から所定時間が経過するまでの報知表示を、通常の報知表示より前記ユーザの目につきやすい表示形態に変更する表示変更ステップ、
を備えることを特徴とする表示方法。

【請求項6】

ユーザの視界中に情報を表示させる表示装置を動作させるコンピュータに、
メディア再生装置の音声出力に対する操作に基づいた音量変更情報を取得する音量情報取得ステップ、
ユーザに対して危険であることを示す報知情報を取得する報知情報取得ステップ、
前記報知情報取得ステップにおいて取得した報知情報に基づきユーザの視界中に報知表示を行うとともに、前記音量情報取得ステップにおいて取得した前記音量変更情報が、所定音量以上への音量変更または所定音量未満への音量変更または所定量以上の音量上昇または所定量以上の音量下降を行う音量変更で、音量変更された音声にユーザが意識を向けてしまうようなものである場合には、前記音量変更から所定時間が経過するまでに前記報知情報を取得した場合に、前記音量変更から所定時間が経過するまでの報知表示を、通常の報知表示より前記ユーザの目につきやすい表示形態に変更する表示変更ステップ、
を実行させることを特徴とする表示プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、各種情報を表示し、ユーザに情報を提示するための、表示装置、表示方法および表示プログラムに関する。

【背景技術】

【0002】

自動車等の運転者に、ウィンドシールド越しに情報を表示して情報を提示するヘッドアップディスプレイ（Head Up Display：以下、ＨＵＤ）が実用化されている。また、頭部に装着し外部を透過的に目視可能である表示画面を用いたヘッドマウントディスプレイ（Head Mount Display：以下、ＨＭＤ）も実用化しており、徒歩などによる移動中の利用も増加することが想定される。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１３−２０３１０３号公報

【特許文献2】特開２０１０−２１１６２３号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１および特許文献２には、所望の目的に応じた警報等の報知表示が行われるＨＵＤおよびＨＭＤが開示されている。

【0005】

このようなＨＵＤやＨＭＤは、利用目的によっては音声出力を伴うメディア再生装置等の表示用途またはメディア再生装置と組み合わせて利用されることがある。例えば、自動車で用いられるＨＵＤは、ナビゲーション装置や車載オーディオ装置と共に利用される。また、ＨＭＤはメディア再生装置と一体または可搬型のメディア再生装置に接続されて利用される。

【0006】

これらのような利用形態の場合、メディア再生装置における音声出力の音量を変更した場合、ユーザは音量が変更された音声出力に意識が集中してしまい、ＨＵＤやＨＭＤによる警報等の報知表示が行われることがあっても、報知表示に対する注意が散漫になってしまうことがある。

【0007】

本発明はこのような問題点に鑑みなされたものであり、ユーザに適切に報知表示を行うことを可能とする、表示装置、表示方法および表示プログラムを提供することを目的とする。

【課題を解決するための手段】

【0008】

上記目的を達成するために、本発明に係る表示装置（１００）は、音声出力に対する音量変更情報を取得する音量情報取得部（１２０）、ユーザに対して危険であることを示す報知情報を取得する報知情報取得部（１３０）、前記報知情報取得部（１３０）が取得した報知情報に基づきユーザの視界中に報知表示を行うとともに、前記音量情報取得部（１２０）が取得した前記音量変更情報が、所定音量以上への音量変更または所定音量未満への音量変更または所定量以上の音量上昇または所定量以上の音量下降を行う音量変更である場合、音量変更された音声にユーザが意識を向けてしまう期間中の報知表示を、通常の報知表示より前記ユーザの目につきやすい表示形態に変更する表示部（１４０）、を備えることを特徴とする。

【0009】

また、本発明に係る表示方法は、表示装置が実行する表示方法であって、音声出力に対する音量変更情報を取得する音量情報取得ステップ、ユーザに対して危険であることを示す報知情報を取得する報知情報取得ステップ、前記報知情報取得ステップにおいて取得した報知情報に基づきユーザの視界中に報知表示を行うとともに、前記音量情報取得ステップにおいて取得した前記音量変更情報が、所定音量以上への音量変更または所定音量未満への音量変更または所定量以上の音量上昇または所定量以上の音量下降を行う音量変更である場合、音量変更された音声にユーザが意識を向けてしまう期間中の報知表示を、通常の報知表示より前記ユーザの目につきやすい表示形態に変更する表示変更ステップ、を備えることを特徴とする。

【0010】

また、本発明に係る表示プログラムは、ユーザの視界中に情報を表示させる表示装置（１００）を動作させるコンピュータに、音声出力に対する音量変更情報を取得する音量情報取得ステップ、 ユーザに対して危険であることを示す報知情報を取得する報知情報取得ステップ、前記報知情報取得ステップにおいて取得した報知情報に基づきユーザの視界中に報知表示を行うとともに、前記音量情報取得ステップにおいて取得した前記音量変更情報が、所定音量以上への音量変更または所定音量未満への音量変更または所定量以上の音量上昇または所定量以上の音量下降を行う音量変更である場合、音量変更された音声にユーザが意識を向けてしまう期間中の報知表示を、通常の報知表示より前記ユーザの目につきやすい表示形態に変更する表示変更ステップ、を実行させることを特徴とする。

【発明の効果】

【0011】

本発明によれば、ユーザに適切に報知表示を行うことを可能とする。

【図面の簡単な説明】

【0012】

【図1】本発明に係る表示装置を概念的に示した構成ブロック図である。

【図2】第１の実施形態に係る表示装置が設置された自動車内を模式的に示した図である。

【図3】第１の実施形態に係る表示装置を構成するＨＵＤ装置の構成ブロック図である。

【図4】第１の実施形態に係る表示装置を構成するメディア再生装置の構成ブロック図である。

【図5】第１の実施形態に係る表示装置の動作例を示すフローチャートである。

【図6】第１の実施形態に係る表示装置の表示画面例である。

【図7】音量変更情報と報知表示のタイミング例を示した図である。

【図8】第２の実施形態に係る表示装置を構成するメディア再生装置の構成ブロック図である。

【図9】第２の実施形態に係る表示装置を構成するメディア再生装置の構成ブロック図である。

【図10】第２の実施形態に係る表示装置の動作例を示すフローチャートである。

【図11】第３の実施形態に係る表示装置を模式的に示した図である。

【図12】第３の実施形態に係る表示装置を構成するＨＭＤ投射部の構成ブロック図である。

【図13】第３の実施形態に係る表示装置を構成するメディア再生装置の構成ブロック図である。

【図14】第３の実施形態に係る表示装置の表示画面例である。

【発明を実施するための形態】

【0013】

図１は、本発明に係る表示装置１００を概念的に示した構成ブロック図であり、以下に説明する各実施形態において共通する構成である。表示装置１００は、音量情報取得部１２０、報知情報取得部１３０、表示部１４０を含んで構成される。表示部１４０は、ユーザに映像を提示する表示ディスプレイ部１４４と表示ディスプレイ部１４４に表示される映像を制御する表示制御部１４２を含んで構成される。各構成要素の具体例は、各々の実施形態において説明する。

【0014】

本発明に係る表示装置１００の第１の実施形態について、図２から図６を参照して説明する。第１の実施形態に係る表示装置１００は、図２に示すように、自動車内で各種情報を虚像として投影表示するＨＵＤ装置２００、およびメディア再生装置４００を用いて構成される。第１の実施形態におけるメディア再生装置４００は、車載ナビゲーション装置、車載オーディオ装置、可搬型のナビゲーション装置やオーディオ装置等の各種携帯端末など様々な装置を対象とする。また、表示部１４０はＨＵＤ装置２００に限らず、ナビゲーション装置等が備える表示部であってもよい。

【0015】

ＨＵＤ装置２００は、図２に示すように自動車のダッシュボード５３０等に設置され、各種情報を主に自動車の運転者が虚像２２０として目視可能な位置に投影する。虚像２２０は、自動車のウィンドシールド５１０やコンバイナなどに投影される。ＨＵＤ装置２００は、ダッシュボード５３０上に設置されていてもよく、ダッシュボード５３０内に内蔵されていてもよい。また、ＨＵＤ装置２００は、自動車の天井やリアビューミラー等に設置されていてもよい。

【0016】

メディア再生装置４００は、一例として自動車のダッシュボード５３０等に設置され、音声を含むコンテンツを再生する場合に再生音量を調整する操作入力部４０５を備える。操作入力部４０５は、ユーザが任意に再生音量を操作可能なインターフェースであり、各種スイッチやタッチパネル、音声操作などにより実現される。また、操作入力部４０５は、自動車のステアリングホイール５２０に備えられていてもよい。また、メディア再生装置４００からの音声信号は、操作入力部４０５の操作により再生音量が調整され、スピーカ５５０によって出力される。図２においては、スピーカ５５０の例として左スピーカ５５０Ｌおよび右スピーカ５５０Ｒとしたが、構成は任意である。

【0017】

ＨＵＤ装置２００は、図３に示すように、投影制御部２１１、光源部２１２および光学部２１３を含んで構成される。投影制御部２１１は、ＣＰＵ（Central Processing Unit）等により構成され、ＨＵＤ装置２００の入出力や構成要素の動作を制御する。具体的には、ＨＵＤ装置２００に入力される投影対象映像データに基づき光源部２１２の光量や色調、表示形態等を制御する。また、光学部２１３がＭＥＭＳ（Micro Electro Mechanical Systems）ミラーによる光の走査によって投影映像を生成する構成を含む場合、投影制御部２１１はＭＥＭＳミラーの揺動を制御する。

【0018】

光源部２１２は、ＨＵＤ装置２００が投影する映像を光学的に形成する。具体例としては、光源部２１２がＭＥＭＳミラーを用いている場合、光源としてのレーザダイオードおよびレーザダイオードからの光を走査するＭＥＭＳミラーが含まれる。また、光源部２１２が液晶表示装置を用いる場合、光源としてのＬＥＤ（Light Emitting Diode）、反射型または透過型の液晶パネル、偏光板等が含まれる。

【0019】

光学部２１３は、光源部２１２が生成した投影する映像を虚像２２０として投影するための光学素子からなり、投射レンズ等の各種レンズ、中間像フィルタや反射鏡等が含まれる。

【0020】

メディア再生装置４００の例として、自動車で用いられるナビゲーション装置の例を説明する。メディア再生装置４００は図４に示すように、記憶部４０１、位置情報取得部４０２、センサ部４０３、Ｈ／Ｕ表示部４０４、操作入力部４０５、音声出力部４０６、制御部４１０を含んで構成される。

【0021】

記憶部４０１は、音声コンテンツや映像コンテンツ、地図情報や表示情報等の経路案内などに用いる各種情報を記憶し、制御部４１０により、記憶部４０１からの各種情報の読み出しや書き込みが制御される。記憶部４０１は、メディア再生装置４００に備えられる各種記憶媒体や、各種接続または通信を用いて利用可能となる外部の記憶媒体や外部の記憶装置であってもよい。

【0022】

位置情報取得部４０２は、ナビゲーション装置としてのメディア再生装置４００が経路案内目的や自動車の周辺設備に対する位置を把握するために位置情報を取得するＧＰＳ（Global Positioning System）受信機である。後述する制御部４１０は、位置情報取得部４０２からのＧＰＳデータに基づき、現在位置を緯度経度情報として算出し、経路処理等に用いる。

【0023】

センサ部４０３は、位置情報取得部４０２から取得した現在位置情報の精度を向上させるための加速度センサや傾きセンサ等の各種センサにより構成される。センサ部４０３が出力する値は、制御部４１０が取得し、各種処理に用いられる。また、センサ部４０３は、ナビゲーション装置としてのメディア再生装置４００が備えられる車両の周辺情報を取得するセンサを備える。具体例としては、車両の周囲を撮影するカメラ、車両の周囲の障害物等を検出するミリ波や赤外線等のセンサなどである。

【0024】

Ｈ／Ｕ（Head Unit）表示部４０４は、ヘッドユニットとして用いられるナビゲーション装置に備えられている液晶表示装置等の表示装置であり、後述する表示処理部４１２の制御により、経路案内に関する情報や周辺施設情報、各種設定画面、音声コンテンツや映像コンテンツの再生画面等を表示する。

【0025】

操作入力部４０５は、メディア再生装置４００をユーザが操作するためのユーザインターフェースであり、各種スイッチやＨ／Ｕ表示部４０４に備えられたタッチパネル、音声による入力が可能である。操作入力部４０５から入力された操作信号は、後述する操作処理部４１５により、入力された操作と処理が対応付けられ、実行される。操作入力部４０５は、音声コンテンツや映像コンテンツの再生音量の操作を受け付ける。

【0026】

音声出力部４０６は、メディア再生装置４００が再生する各種コンテンツの音声を出力する。音声出力部４０６は、記憶部４０１等に記憶された各種コンテンツの再生処理に伴い、後述する音声処理部４１３の処理によってデコード等の処理が行われた音声信号を、図２に示すスピーカ５５０に出力する。音声出力部４０６は、音声信号出力の増幅機能やＤ／Ａ（Digital to Analog）変換機能を含んでもよい。メディア再生装置４００が再生するコンテンツの例としては、記憶部４０１や図示しないディスクドライブ等に記憶された音声コンテンツや映像コンテンツ、図示しない放送受信部が受信するラジオ放送の音声やテレビ放送の映像および音声、図示しない通信部が受信するネットワークを介した各種コンテンツ等である。

【0027】

制御部４１０は、ＣＰＵやＤＳＰ（Digital Signal Processor）およびそれらの動作に用いられるＲＡＭやＲＯＭ等により構成される。制御部４１０のＲＯＭや記憶部４０１には、メディア再生装置４００を動作させるための各種プログラムが記憶されている。制御部４１０は、これらのプログラムによって動作する機能として、経路処理部４１１、表示処理部４１２、音声処理部４１３、報知処理部４１４、操作処理部４１５を実現する。

【0028】

経路処理部４１１は、記憶部４０１に記憶された地図情報、操作入力部４０５により指定された目的地情報、および位置情報取得部４０２が受信した信号に基づく現在位置情報等に基づき、現在位置から目的地までの経路を生成する処理を実行する。経路処理部４１１により生成された経路は、Ｈ／Ｕ表示部４０４やＨＵＤ装置２００に出力され、表示される。また、経路処理部４１１は、経路内の直近の交差点等の進行方向等の指示情報を生成し、Ｈ／Ｕ表示部４０４やＨＵＤ装置２００に出力され、表示される。

【0029】

表示処理部４１２は、Ｈ／Ｕ表示部４０４およびＨＵＤ装置２００へ出力する情報の表示を制御する。具体例としては、Ｈ／Ｕ表示部４０４およびＨＵＤ装置２００における表示する情報の構成、表示内容、表示色や表示輝度、表示タイミング等を制御する。また、表示処理部４１２は、Ｈ／Ｕ表示部４０４がタッチパネルとして動作する場合、タッチ操作に連動した各種ＧＵＩ（Graphical User Interface）などを表示させる。

【0030】

音声処理部４１３は、メディア再生装置４００が出力するための音声を処理する。具体例としては、メディア再生装置４００が再生する各種コンテンツに含まれる音声データのデコード処理、音質変更処理、音量変更処理等である。

【0031】

報知処理部４１４は、ユーザに対して報知すべき情報を報知する処理を行う。具体例としては、センサ部４０３として備えられている車両の周囲を撮影するカメラまたは車両の周囲の障害物等を検出するミリ波や赤外線等のセンサ等の出力を解析し、車両の周辺に存在する他の車両との距離や、歩行者、自転車または他の物体との距離が所定未満となった場合に、Ｈ／Ｕ表示部４０４またはＨＵＤ装置２００による報知表示が行われるよう、表示処理部４１２に報知表示指示を行う。他の例としては、センサ部４０３として備えられている車両の周囲を撮影するカメラの出力を解析し、走行中の車両と画像処理によって抽出したセンターラインとの距離が急速に近いづいた場合や、センターラインを超えて走行している場合、Ｈ／Ｕ表示部４０４またはＨＵＤ装置２００による報知表示が行われるよう、表示処理部４１２に報知表示指示を行う。

【0032】

報知処理部４１４は、報知対象となる情報を、図示しない通信部を用いてＩＴＳ（Intelligent Transport System）用の路側装置より取得してもよい。

【0033】

報知処理部４１４は、上述した報知指示をスピーカ５５０から出力される音声による報知としてもよい。または報知表示に加えて音声による報知を併用してもよい。これらの場合は、音声による報知が行われるよう、音声処理部４１３に報知音出力指示を行う。

【0034】

操作処理部４１５は、操作入力部４０５の操作を受け付ける処理を行う。操作処理部４１５は、操作入力部４０５がスイッチやタッチパネルである場合は、それらの操作結果に基づく信号を受信し、対応する操作処理へ受け渡す。操作入力部４０５が音声入力である場合は、操作入力部４０５が備えるマイクロフォンからの音声信号をＤ／Ａ変換し、音素解析等の処理を行い、その結果に基づき対応操作処理へ受け渡す。具体例としては、メディア再生装置４００が音声コンテンツまたは音声を含む映像コンテンツを再生しているときに、操作入力部４０５に再生音量変更の操作が行われたときは、操作処理部４１５による音量操作処理が行われたことの判断および操作量に基づき、音声処理部４１３は再生音量を操作に応じて変更する。

【0035】

第１の実施形態としての表示装置１００は、操作入力部４０５および操作処理部４１５が、音量情報取得部１２０として機能する。また、センサ部４０３および報知処理部４１４が、報知情報取得部１３０として機能する。また、表示部１４０を構成する表示制御部１４２は表示処理部４１２が対応し、表示ディスプレイ部１４４は、Ｈ／Ｕ表示部４０４およびＨＵＤ装置２００が対応する。

【0036】

次に、第１の実施形態に係る表示装置１００の動作例を説明する。図５に示す動作例は、表示装置１００が備えられている車両が動作しているとともに、表示装置１００を構成するメディア再生装置４００が音声情報を含むコンテンツの再生を行っていることを前提とする。

【0037】

車両が動作している場合、センサ部４０３に含まれる車外情報を取得するカメラやセンサ等のデバイスは逐次動作し、報知処理部４１４は報知対象となる条件の検出を逐次行う。また、音声情報を含むコンテンツの再生が行われているときは、音声処理部４１３は操作入力部４０５による音量操作を逐次受け付けている。

【0038】

このような状態において、報知処理部４１４が報知対象情報があると判断した場合（ステップＳ１０１：Ｙｅｓ）、報知処理部４１４は報知処理を開始する（ステップＳ１０２）。ここで実行される報知処理とは、ユーザである運転者に危険な周辺状況や車両の状況を、映像または音声により報知するものである。具体例としては、前後の他の車両との車間距離が危険と判断される程度近い距離となった場合、Ｈ／Ｕ表示部４０４またはＨＵＤ装置２００に対して危険であることを示す表示を行う。または、走行中の車両がセンターラインに急激に近づいた場合やセンターラインを超えて場合に、
Ｈ／Ｕ表示部４０４またはＨＵＤ装置２００に対して危険であることを示す表示を行うとともに、音声により危険であることを報知する。

【0039】

図６は、ステップＳ１０２において実行される報知の例であり、ＨＵＤ装置２００が投影する虚像２２０に報知表示されている例である。

【0040】

虚像２２０の表示内容は、Ｈ／Ｕ表示部４０４の表示内容とは異なり、ユーザが前方視認に対して少ない視線移動により虚像２２０を視認可能なため、主に走行中に頻繁に確認する必要のある情報が表示される。

【0041】

走行路表示部２２１は、実際に車両が走行している道路の形態を示し、道路幅やカーブの形態等をユーザに提示する。走行路表示部２２１の表示は、位置情報取得部４０２から取得した現在位置情報および記憶部４０１に記憶されている地図情報を用いて表示される。時刻表示部２２２は、現在時刻を表示する。燃料表示部２２３は、燃料の残量や蓄電量を表示する。予定進行方向表示部２２４は、経路処理部４１１が生成した経路に基づき、曲がることが適切である交差点までの距離および進行方向を表示する。速度表示部２２５は、現在の走行速度を表示する。

【0042】

ステップＳ１０２において報知処理が実行された場合、虚像２２０に報知表示部２２６が表示される。図６の表示例の場合、報知表示部２２６は前方または後方の他の車両との車間が狭くなり危険であることを示している。

【0043】

図５に戻り、ステップＳ１０２で報知処理が開始され、報知処理が実行されている間に、音声処理部４１３は操作入力部４０５により所定の音量変更操作が受け付けられたか否かを判断する（ステップＳ１０３）。ここでいう所定の音量変更操作とは、予め設定された所定の第１の閾値未満の音量から第１の閾値以上の音量へ上昇させる操作が行われた場合である。また、所定の音量変更操作の他の例としては、音量変更操作前の音量から音量変更操作が行われた後の音量までの第１の音量差が所定の音量差以上の音量上昇である場合である。

【0044】

ユーザが音量が変更された音声に意識が集中してしまい、報知表示への注意が散漫になってしまうような音量変更は、音量を上昇させた場合に限らず、音量を下降させた場合においても同様である。この場合の所定の音量変更操作とは、予め設定された所定の第２の閾値以上の音量から第２の閾値未満への音量へ下降させる操作が行われた場合である。また、所定の音量変更操作の他の例としては、音量変更操作前の音量から音量変更操作が行われた後の音量までの第２の音量差が所定の音量差以上の音量下降である場合である。

【0045】

音量を上昇させる音量変更と、音量を下降させる音量変更の条件として、第１の閾値として設定される音量は、第２の閾値として設定される音量より大きい音量が設定される。また、第１の音量差と第２の音量差は、同一の音量差であってもよく異なる音量差であってもよい。

【0046】

ステップＳ１０３において、所定の音量変更操作が受け付けられたと判断された場合（ステップＳ１０３：Ｙｅｓ）、表示処理部４１２は、ステップＳ１０２の報知処理で表示した報知表示部２２６の表示を、ユーザの目につきやすいように目立つ表示に変更する（ステップＳ１０４）。

【0047】

ステップＳ１０４で実行される報知表示部２２６の変更の具体例としては、報知表示部２２６の表示サイズを大きく表示する、目立つ色調で表示する、点滅させるなど様々な表示形態が適用可能である。

【0048】

ステップＳ１０３において、所定の音量変更操作が受け付けられていないと判断された場合（ステップＳ１０３：Ｎｏ）、報知処理部４１４は報知処理を終了するか否かを判断する（ステップＳ１１１）。ステップＳ１１１で判断される報知終了のタイミングの具体例としては、報知対象となる危険な状態ではなくなったタイミングである。

【0049】

ステップＳ１１１において、報知終了と判断された場合（ステップＳ１１１：Ｙｅｓ）、本処理を終了する。報知終了しないと判断された場合（ステップＳ１１１：Ｎｏ）、ステップＳ１０３の処理に戻る。

【0050】

ステップＳ１０１からステップＳ１０４の処理は、報知処理の実行中に音量変更操作が受付けられた場合の処理である。他の実行タイミングとしては音量変更操作中または音量変更操作から所定時間内に報知処理が開始された場合である。この場合、ステップＳ１０１において報知対象情報が無いと判断した場合（ステップＳ１０１：Ｎｏ）であっても、音声処理部４１３は操作入力部４０５により所定の音量変更操作が受け付けられたか否かを判断する（ステップＳ１０５）。

【0051】

ステップＳ１０５において、所定の音量変更操作が受け付けられたと判断された場合（ステップＳ１０５：Ｙｅｓ）、音声処理部４１３は、ステップＳ１０５の音量変更操作から所定時間が経過したか否かを判断する（ステップＳ１０６）。ここでいう所定時間とは、具体例としては約５秒から１０秒程度が適切であり、音量変更された音声にユーザが意識を向けてしまう時間長を含むことが好ましい。

【0052】

ステップＳ１０５において、所定の音量変更操作が受け付けられていないと判断された場合（ステップＳ１０５：Ｎｏ）、ステップＳ１０１の処理に戻る。

【0053】

ステップＳ１０６において、音量変更操作から所定時間が経過していないと判断された場合（ステップＳ１０６：Ｎｏ）、報知処理部４１４は報知対象情報があるか否かを判断する（ステップＳ１０７）。つまり、報知対象情報の有無判断が逐次実行されている状態において、所定の音量変更操作から所定時間内に報知対象情報が生じた場合を検出する。ステップＳ１０６において、音量変更操作から所定時間が経過したと判断された場合（ステップＳ１０６：Ｙｅｓ）、ステップＳ１０１の処理に戻る。

【0054】

ステップＳ１０７において、報知対象情報があると判断された場合（ステップＳ１０７：Ｙｅｓ）、報知処理部４１４は報知処理を開始する（ステップＳ１０８）。このとき、表示処理部４１２は、報知表示部２２６の表示を、ユーザの目につきやすいように目立つ表示として表示する。ステップＳ１０７において、報知対象情報が無いと判断された場合（ステップＳ１０７：Ｎｏ）、ステップＳ１０６の処理に戻る。

【0055】

ステップＳ１０４の処理またはステップＳ１０８の処理後、音声処理部４１３は、ステップＳ１０３またはステップＳ１０５の音量変更操作から所定時間が経過したか否かを判断する（ステップＳ１０９）。ここで判断される所定時間とは、ステップＳ１０６で判断される所定時間と同一である。ステップＳ１０９において、音量変更から所定時間経過したと判断された場合（ステップＳ１０９：Ｙｅｓ）、ステップＳ１０４またはステップＳ１０８で開始された報知処理の変更された報知表示を通常の表示に戻す（ステップＳ１１０）。ステップＳ１０９において、音量変更から所定時間経過していないと判断された場合（ステップＳ１０９：Ｎｏ）、ステップＳ１０９の処理に戻る。

【0056】

上記のような処理の流れによる、具体的な音量変更タイミングと報知表示変更のタイミング例を図７により説明する。図７により説明する例は、音量を上昇させる場合の例であるが、音量を下降させる場合であっても同様である。

【0057】

図７の縦軸は音量レベルであり、ユーザが操作入力部４０５を操作することにより、レベル０からレベルＭＡＸまで任意に変更できる。横軸は時間軸である。

【0058】

ユーザが操作入力部４０５を操作し、時刻ｔ₀から音量を上昇させる操作を行い、音量が実線で示されるように上昇しているとき、報知処理部４１４が報知対象情報があると判断し（ステップＳ１０１：Ｙｅｓ）、時刻ｔ₁より報知表示を開始する（ステップＳ１０２）。報知表示が継続している間の時刻ｔ₂に音量が第1の閾値を越えた場合（ステップＳ１０３：Ｙｅｓ）、表示処理部４１２は時刻ｔ₂から時刻ｔ₃までの期間ａの間、ユーザの目につきやすいように報知表示を目立つ表示に変更する（ステップＳ１０４、ステップＳ１０９、ステップＳ１１０）。

【0059】

時間ｔ₃で、表示処理部４１２は、報知表示部２２６の表示を通常の表示に戻す（ステップＳ１１０）。このときの音量レベルは第１の閾値以上であっても、ユーザが音量の変更により報知への注意が散漫になってしまう場合に、報知表示部２２６にユーザの注意を引く目的は達成される。

【0060】

この例においては、報知表示が戻った後の時刻ｔ₄で報知表示を終了している（ステップＳ１１１：Ｙｅｓ）が、期間ａの終了前に報知表示が終了した場合、報知表示が変更された状態であっても報知表示の終了タイミングで報知表示を終了する。

【0061】

さらに、他の例としてユーザが操作入力部４０５を操作し、時刻ｔ₅から所定以上の音量増加量で音量を増加させた場合（ステップＳ１０５：Ｙｅｓ）、音量変更から所定時間内であれば（ステップＳ１０６：Ｎｏ）、時刻ｔ₆で報知対象情報があると判断した場合（ステップＳ１０７：Ｙｅｓ）、報知処理部４１４は報知処理を開始するとともに表示処理部４１２は時刻ｔ₆から時刻ｔ₇までの期間ａの間、ユーザの目につきやすいように報知表示を目立つ表示に変更する（ステップＳ１０８、ステップＳ１０９、ステップＳ１１０）。

【0062】

この場合の所定の音量増加量とは、所定時間内に行われる所定の音量増加であり、例えば単位時間として１秒内に、音量０から音量ＭＡＸを１００％とすると、５０％以上の音量増加が行われた場合などである。

【0063】

このような所定以上の音量増加が行われた場合は、図７に示すように上昇させた音量が第１の閾値未満であっても、報知表示を変更する。または、所定以上の音量増加に加えて上昇させた音量が第１の閾値を超えることを、報知表示を変更する条件としてもよい。

【0064】

第１の実施形態に係る表示装置１００による表示方法および表示装置１００が実行する表示プログラムにおいては、ステップＳ１０３およびステップＳ１０５が、音量情報取得ステップに対応する。また、ステップＳ１０１およびステップＳ１０７が、報知情報取得ステップに対応する。また、ステップＳ１０４からステップＳ１１０、およびステップＳ１０８からステップＳ１１０が、表示変更ステップに対応する。

【0065】

このような処理を行うことにより、本発明に係る表示装置１００は、音量変更情報に基づいて報知表示をユーザの目につきやすいように表示形態を変更する。このため、ユーザは、音量が変更された音声出力に意識が集中してしまった場合であっても、報知表示に気付くことができる。

【0066】

次に、本発明に係る表示装置１００の第２の実施形態について、図８から図１０を用いて説明する。第２の実施形態に係る表示装置１００の説明は、第１の実施形態に係る表示装置１００の説明と共通する部分についての説明は省略する。

【0067】

第２の実施形態に係る表示装置１００も、第１の実施形態に係る表示装置１００同様に、自動車内で各種情報を虚像として投影表示するＨＵＤ装置２００、およびメディア再生装置４００を用いて構成される。異なる点としては、図８に示すように、表示装置１００に、運転支援情報取得部１５０が備えられている点である。

【0068】

運転支援情報取得部１５０は、表示装置１００が備えられている自動車に運転支援機能が備えられている場合に、運転支援が実行されているか否かの情報を取得する。ここでいう運転支援とは、ユーザの運転操作に対して限定的に行う支援や、全面的に行う支援のいずれも対象とする。部分的に行う運転支援の例としては、オートクルーズ機能等であり、全面的に行う運転支援の例としては、自動走行等である。

【0069】

運転支援情報取得部１５０は、これらの運転支援に関する情報を、例えば車載ネットワークであるＣＡＮ（Controller Area Network）などから取得する。したがって、メディア再生装置４００の構成において、図９に示すように、ＣＡＮ接続部４０７および制御部４１０の機能としてのＣＡＮデータ処理部４１６に相当する。

【0070】

ＣＡＮ接続部４０７は、ＣＡＮに接続するためのインターフェースである。ＣＡＮデータ処理部４１６は、ＣＡＮ接続部４０７を介してＣＡＮ情報を目的に応じて取得し、用いるための処理を行う。また、ＣＡＮデータ処理部４１６は、取得したＣＡＮデータに基づき、運転支援が実行されているか否かを判断する。

【0071】

図１０に示す動作例は、ステップＳ１０３において、所定の音量変更操作が受け付けられたと判断された場合（ステップＳ１０３：Ｙｅｓ）、ＣＡＮデータ処理部４１６は、運転支援が実行されているか否かを判断する（ステップＳ２０１）。ステップＳ２０１において、運転支援が実行されていると判断された場合（ステップＳ２０１：Ｙｅｓ）、表示処理部４１２は、ステップＳ１０２の報知処理で表示した報知表示部２２６の表示を、ユーザの目につきやすいように目立つ表示に変更する（ステップＳ１０４）。運転支援が実行されていないと判断された場合（ステップＳ２０１：Ｎｏ）、ステップＳ１１１の処理を実行する。

【0072】

同様に、ステップＳ１０７において、報知対象情報があると判断された場合（ステップＳ１０７：Ｙｅｓ）、ＣＡＮデータ処理部４１６は、運転支援が実行されているか否かを判断する（ステップＳ２０２）。ステップＳ２０２において、運転支援が実行されていると判断された場合（ステップＳ２０２：Ｙｅｓ）、報知処理部４１４は報知処理を開始する（ステップＳ１０８）。このとき、表示処理部４１２は、報知表示部２２６の表示を、ユーザの目につきやすいように目立つ表示として表示する。ステップＳ２０２において、運転支援が実行されていないと判断された場合（ステップＳ２０２：Ｎｏ）、報知処理部４１４は報知処理を開始する（ステップＳ２０３）。このとき、表示処理部４１２は、報知表示部２２６の表示を、通常の表示形態として表示する。

【0073】

このような処理を行うことにより、本発明に係る表示装置１００は、運転支援時に音量変更情報に基づいて報知表示をユーザの目につきやすいように表示形態を変更する。このため、ユーザは、通常の運転時よりコンテンツの音声出力に意識が集中しやすい運転支援時に、音量の変更によりさらに音声出力に意識が集中してしまった場合であっても、報知表示に気付くことができる。

【0074】

以上、本発明の表示装置１００を、自動車内で用いる装置として説明したが、本発明は自動車内で用いる表示装置に限らず有用である。次に、本発明に係る表示装置１００の第３の実施形態について、図１１から図１４を用いて説明する。第３の実施形態に係る表示装置１００の説明は、第１の実施形態に係る表示装置１００の説明と共通する部分についての説明は省略する。

【0075】

図１１は、本発明の表示装置１００を構成するＨＭＤ装置６００およびメディア再生装置６２０を模式的に示した図である。ＨＭＤ装置６００は、ユーザの頭部に装着される眼鏡型のものやゴーグル型の装置であり、メディア再生装置６２０は、ＨＭＤ装置６００に各種情報を出力できるものであれば、携帯型やＨＭＤ装置６００と一体型など、どのような形態であってもよい。

【0076】

ＨＭＤ装置６００は、ＨＭＤ投射部６１０、ハーフミラー６１１、眼鏡レンズ部６４０、眼鏡テンプル部６５０等を含んで構成される。メディア再生装置６２０は、操作入力部６２４を備え、ユーザに音声信号を出力するためのイヤホン６６０（左イヤホン６６０Ｌ、右イヤホン６６０Ｒ）が接続される。イヤホン６６０は、メディア再生装置６２０に接続される任意のヘッドホンや小型のスピーカであってもよい。また、ＨＭＤ装置６００と一体型であってもよい。

【0077】

メディア再生装置６２０は、再生するコンテンツに音声信号が含まれている場合は、イヤホン６６０に音声信号を出力するとともに、再生するコンテンツに映像信号が含まれている場合は、ＨＭＤ投射部６１０に映像信号を出力する。

【0078】

ＨＭＤ投射部６１０は、入力された映像信号に基づいた映像光をハーフミラー６１１に投影し、ＨＭＤ装置６００を装着したユーザは、眼鏡レンズ部６４０を介してハーフミラー６１１で反射された映像を見ることができる。

【0079】

図１２は、ＨＭＤ投射部６１０の構成ブロック図である。ＨＭＤ投射部６１０は、光源部６１２、光学部６１３、センサ部６１４を備える。

【0080】

光源部６１２は、ユーザに提示するための映像光を生成する。具体例としては、提示するための映像を構成する液晶パネル、および液晶パネルに構成された映像を投射するための光源であるＬＥＤ素子等により構成される。光学部６１３は、光源部６１２が生成した映像光をハーフミラー６１１へ導くための光路を生成する光学部品であり、映像光を拡大または縮小するレンズや、反射鏡等により構成される。

【0081】

センサ部６１４は、一または複数のセンサによって構成される。具体的には、現在位置情報を取得するＧＰＳ受信部、ＨＭＤ装置６００の向きや移動方向を検出する加速度センサや方位センサを備える。また、センサ部６１４は、ＨＭＤ装置６００を装着したユーザの前方等を撮影するカメラであってもよい。

【0082】

メディア再生装置は、上述したように携帯型やＨＭＤ装置６００と一体型などの形態であり、図１３に示すように、記憶部６２１、操作入力部６２３、音声出力部６２４、制御部６３０を含んで構成される。

【0083】

記憶部６２１は、記憶部４０１と同様の構成であり、音声コンテンツや映像コンテンツを記憶する。操作入力部６２３は、操作入力部４０５と同様の構成であり、メディア再生装置６２０が再生するコンテンツの再生音量の調整操作を受け付ける。

【0084】

音声出力部６２４は、音声出力部４０６と同様の構成であり、メディア再生装置６２０が再生する各種コンテンツの音声を出力する。音声出力部６２４は、後述する音声処理部６３２の処理によってデコード等の処理が行われた音声信号を、図１１に示すイヤホン６６０に出力する。

【0085】

制御部６３０は、制御部４１０と同様の構成であり、ＲＡＭ等に記憶されているプログラムによって動作する機能として、表示処理部６３１、音声処理部６３２、報知処理部６３３、操作処理部６３４を実現する。表示処理部６３１は、表示処理部４１２と同様の機能を備え、ＨＭＤ投射部６１０へ出力する情報の表示を制御する。音声処理部６３２は、音声処理部４１３と同様の機能を備える。

【0086】

報知処理部６３３は、報知処理部４１４と同様の機能を備える。具体例としては、センサ部６１４としてのＧＰＳ受信部により取得した現在位置情報に基づき、ユーザの周辺に報知対象が存在する場合、表示処理部６３１に報知表示指示を行う。また、センサ部６１４としてのカメラが撮影した画像を解析することにより報知対象の存在を検出し、表示処理部６３１に報知表示指示を行う。報知対象の例としては、進行方向の階段や工事区画、ユーザに接近する車両等である。

【0087】

操作処理部６３４は、操作処理部４１５と同様の機能を備え、操作入力部６２４の操作を受け付ける処理を行う。具体例としては、メディア再生装置６２０が音声コンテンツまたは音声を含む映像コンテンツを再生しているときに、操作入力部６２４に再生音量変更の操作が行われたときは、操作処理部６３４による音量操作処理が行われたことの判断および操作量に基づき、音声処理部６３２は再生音量を操作に応じて変更する。

【0088】

第３の実施形態としての表示装置１００は、操作入力部６２３および操作処理部６３４が、音量情報取得部１２０として機能する。また、センサ部６１４および報知処理部６３３が、報知情報取得部１３０として機能する。また、表示部１４０を構成する表示制御部１４２は表示処理部６３１が対応し、表示ディスプレイ部１４４は、ＨＭＤ装置６００が対応する。

【0089】

第３の実施形態に係る表示装置１００の動作例は、図５に示す第１の実施形態に係る表示装置１００の動作例と同様である。

【0090】

図１４は、ステップＳ１０２において実行される報知の例であり、ＨＭＤ装置６００が投影する虚像６４１に報知表示されている例である。虚像６４１には、一例として時刻表示部６４２、行先表示部６４３、施設情報表示部６４４、コンテンツ表示部６４５が表示される。また、ステップＳ１０２およびステップＳ１０８においては、報知表示部６４６が表示される。

【0091】

時刻表示部６４２は、現在時刻等を表示する。行先表示部６４３は、行先が予め設定され、行先案内処理が動作している場合は、記憶部６２１に記憶されている地図情報に基づいて、眼鏡レンズ部６４０を介して視認する実風景の道路上や交差点上に行先を示す矢印を表示する。また、行先表示部６４３は、行先の設定が行われていない場合や行先設定の機能を有していない場合は、地図情報に基づいて、眼鏡レンズ部６４０を介して視認する実風景の道路上や交差点上の進行方向の選択肢等を示す矢印を表示する。

【0092】

施設情報表示部６４４は、眼鏡レンズ部６４０を介して視認する実風景の施設に対して、その施設に関連する情報を表示する。具体的には、店舗名や店舗のURL、口コミ情報等である。コンテンツ表示部６４５は、メディア再生装置６２０が再生したコンテンツの再生画面を表示する。コンテンツ表示部６４５は、施設情報表示部６４４のURL等に基づくWeb画面であってもよい。

【0093】

報知表示部６４６は、報知処理部６３３の指示によって表示される。図１４の例においては、ＨＭＤ装置６００の現在位置情報とＨＭＤ装置６００を装着したユーザの移動方向および記憶部６２１に記憶されている地図情報に基づき、進行方向に報知対象としての階段が存在することを示している。

【0094】

報知表示部６４６が表示されるときに、ステップＳ１０４またはステップＳ１０８のように音量変更に基づく報知表示の変更を行う場合、表示処理部６３１は、報知表示部６４６の表示を、ユーザの目につきやすいように目立つ表示に変更する。

【0095】

報知表示部６４６の表示位置は、図１４に示すように、コンテンツ表示部６４５に重畳する位置に表示してもよい。また、通常の報知時には報知表示部６４６をコンテンツ表示部６４５に重畳しない位置に表示させ、音量変更に基づく報知表示を変更した場合に、報知表示部６４６をコンテンツ表示部６４５に重畳する位置に表示してもよい。

【0096】

このような処理を行うことにより、本発明に係る表示装置１００は、音量変更情報に基づいて報知表示をユーザの目につきやすいように表示形態を変更する。このため、ユーザは、ＨＭＤ装置６００を装着している場合における音量変更により、音声出力に意識が集中してしまった場合であっても、報知表示に気付くことができる。

【符号の説明】

【0097】

１００ 表示装置
１２０ 音量情報取得部
１３０ 報知情報取得部
１４０ 表示部
１４２ 表示制御部
１４４ 表示ディスプレイ部
１５０ 運転支援情報取得部
２００ ＨＵＤ装置
２１１ 投影制御部
２１２ 光源部
２１３ 光学部
２１４ 光学部
２２０ 虚像
２２１ 走行路表示部
２２２ 時刻表示部
２２３ 燃料表示部
２２４ 予定進行方向表示部
２２５ 速度表示部
２２６ 報知表示部
４００ メディア再生装置
４０１ 記憶部
４０２ 位置情報取得部
４０３ センサ部
４０４ Ｈ／Ｕ表示部
４０５ 操作入力部
４０６ 音声出力部
４０７ ＣＡＮ接続部
４１０ 制御部
４１１ 経路処理部
４１２ 表示処理部
４１３ 音声処理部
４１４ 報知処理部
４１５ 操作処理部
４１６ ＣＡＮデータ処理部
５１０ ウィンドシールド
５２０ ステアリングホイール
５３０ ダッシュボード
５５０Ｌ 左スピーカ
５５０Ｒ 右スピーカ
６００ ＨＭＤ装置
６１０ ＨＭＤ投射部
６１１ ハーフミラー
６１２ 光源部
６１３ 光学部
６１４ センサ部
６２０ メディア再生装置
６２１ 記憶部
６２３ 操作入力部
６２４ 音声出力部
６３０ 制御部
６３１ 表示処理部
６３２ 音声処理部
６３３ 報知処理部
６３４ 操作処理部
６４０ 眼鏡レンズ部
６４１ 虚像
６４２ 時刻表示部
６４３ 行先表示部
６４４ 施設情報表示部
６４５ コンテンツ表示部
６４６ 報知表示部
６５０ 眼鏡テンプル部
６６０Ｌ 左イヤホン
６６０Ｒ 右イヤホン

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】