知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2025011349
(43)【公開日】2025-01-24
(54)【発明の名称】表示制御装置および表示制御方法
(51)【国際特許分類】
G06F 3/01 20060101AFI20250117BHJP
G06F 3/04815 20220101ALI20250117BHJP
【ＦＩ】
G06F3/01 510
G06F3/04815
【審査請求】未請求
【請求項の数】5
【出願形態】ＯＬ
(21)【出願番号】P 2023113378
(22)【出願日】2023-07-11
(71)【出願人】
【識別番号】591036457
【氏名又は名称】三菱電機エンジニアリング株式会社
(74)【代理人】
【識別番号】110003166
【氏名又は名称】弁理士法人山王内外特許事務所
(72)【発明者】
【氏名】山崎 亮平
【テーマコード（参考）】
5E555
【Ｆターム（参考）】
5E555AA22
5E555AA23
5E555AA27
5E555BA08
5E555BB08
5E555BC17
5E555BE16
5E555BE17
5E555CA28
5E555CA42
5E555DA08
5E555DA09
5E555DB53
5E555DB57
5E555DC10
5E555DC11
5E555DD01
5E555DD08
5E555FA00
(57)【要約】
【課題】従来に対し、物体が近づいてきたとしても、その存在を認識しやすくする。
【解決手段】現実空間への表示対象であるＵＩ要素を示すＵＩ要素情報を取得するＵＩ要素情報取得部２０１と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域に近づく物体の有無を示す物体情報を取得する物体情報取得部２０２と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、物体情報取得部２０２により取得された物体情報に基づいて、透明度を補正する透明度補正部２０３とを備えた。
【選択図】図２
【解決手段】現実空間への表示対象であるＵＩ要素を示すＵＩ要素情報を取得するＵＩ要素情報取得部２０１と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域に近づく物体の有無を示す物体情報を取得する物体情報取得部２０２と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、物体情報取得部２０２により取得された物体情報に基づいて、透明度を補正する透明度補正部２０３とを備えた。
【選択図】図２
【特許請求の範囲】
【請求項1】
現実空間への表示対象であるユーザインタフェース要素を示すユーザインタフェース要素情報を取得するユーザインタフェース要素情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得する物体情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記物体情報取得部により取得された物体情報に基づいて、透明度を補正する透明度補正部と
を備えた表示制御装置。
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得する物体情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記物体情報取得部により取得された物体情報に基づいて、透明度を補正する透明度補正部と
を備えた表示制御装置。
【請求項2】
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を示す第１の背景情報を取得する第１の背景情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記第１の背景情報取得部により取得された第１の背景情報に基づいて、色相および彩度のうちの少なくとも一方を補正する第１の色補正部とを備えた
ことを特徴とする請求項１記載の表示制御装置。
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記第１の背景情報取得部により取得された第１の背景情報に基づいて、色相および彩度のうちの少なくとも一方を補正する第１の色補正部とを備えた
ことを特徴とする請求項１記載の表示制御装置。
【請求項3】
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域における背景の明度を示す第２の背景情報を取得する第２の背景情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記第２の背景情報取得部により取得された第２の背景情報に基づいて、明度を補正する第２の色補正部とを備えた
ことを特徴とする請求項１または請求項２記載の表示制御装置。
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記第２の背景情報取得部により取得された第２の背景情報に基づいて、明度を補正する第２の色補正部とを備えた
ことを特徴とする請求項１または請求項２記載の表示制御装置。
【請求項4】
ユーザの視線方向を示す視線方向情報を取得する視線方向情報取得部と、
前記視線方向情報取得部により取得された視線方向情報に基づいて、ユーザがユーザインタフェース要素を表示する領域内の微小領域を注視しているかを判定する注視状態判定部と、
前記視線方向情報取得部により取得された視線方向情報および前記注視状態判定部による判定結果に基づいて、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素のうちの一部を拡大した画面を作成する拡大画面作成部とを備えた
ことを特徴とする請求項１記載の表示制御装置。
前記視線方向情報取得部により取得された視線方向情報に基づいて、ユーザがユーザインタフェース要素を表示する領域内の微小領域を注視しているかを判定する注視状態判定部と、
前記視線方向情報取得部により取得された視線方向情報および前記注視状態判定部による判定結果に基づいて、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素のうちの一部を拡大した画面を作成する拡大画面作成部とを備えた
ことを特徴とする請求項１記載の表示制御装置。
【請求項5】
ユーザインタフェース要素情報取得部が、現実空間への表示対象であるユーザインタフェース要素を示すユーザインタフェース要素情報を取得するステップと、
物体情報取得部が、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得するステップと、
透明度補正部が、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記物体情報取得部により取得された物体情報に基づいて、透明度を補正するステップと
を有する表示制御方法。
物体情報取得部が、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得するステップと、
透明度補正部が、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記物体情報取得部により取得された物体情報に基づいて、透明度を補正するステップと
を有する表示制御方法。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、現実空間にユーザインタフェース要素をホログラム投影するための表示制御装置および表示制御方法に関する。
【背景技術】
【0002】
一般的に、ＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）技術では、現実空間にホログラム投影したウィンドウまたはボタンなどのユーザインタフェース要素（以降、ＵＩ要素と記述）をグラス越しに見ながら、ウィンドウの移動、拡大またはボタン押下などの操作を行う（例えば特許文献１参照）。
基本的な操作方法としては、ハンドジェスチャー、ハンドレイ、音声入力、または、視線入力などが存在する。そして、ユーザは、上記の何れかの操作方法を用いて、ＵＩ要素に対して何らかの操作を行う。
基本的な操作方法としては、ハンドジェスチャー、ハンドレイ、音声入力、または、視線入力などが存在する。そして、ユーザは、上記の何れかの操作方法を用いて、ＵＩ要素に対して何らかの操作を行う。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１５－５７６５９号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、従来のデバイスでは、現実空間にＵＩ要素をホログラム投影するため、物体（人またはその他の動く物体）が近づいてきたとしてもその存在を認識しにくい場合が考えられる。
また、従来のデバイスでは、現実空間にＵＩ要素をホログラム投影するため、その現実空間の明るさによっては、ＵＩ要素の視認性が悪くなり、作業効率の低下が考えられる。すなわち、従来のデバイスでは、屋外など明るい場所で利用すると、ホログラム投影したＵＩ要素が薄く見えて認識しにくい。
また、従来のデバイスでは、ＵＩ要素は基本的にユーザ自身ですべて操作する必要がある。そのため、表示するＵＩ要素が多い場合にはユーザの負担が大きくなる。
また、従来のデバイスでは、現実空間にＵＩ要素をホログラム投影するため、その現実空間の明るさによっては、ＵＩ要素の視認性が悪くなり、作業効率の低下が考えられる。すなわち、従来のデバイスでは、屋外など明るい場所で利用すると、ホログラム投影したＵＩ要素が薄く見えて認識しにくい。
また、従来のデバイスでは、ＵＩ要素は基本的にユーザ自身ですべて操作する必要がある。そのため、表示するＵＩ要素が多い場合にはユーザの負担が大きくなる。
【0005】
本開示は、上記のような課題を解決するためになされたもので、従来に対し、物体が近づいてきたとしても、その存在を認識しやすくなる表示制御装置を提供することを目的としている。
【課題を解決するための手段】
【0006】
本開示に係る表示制御装置は、現実空間への表示対象であるユーザインタフェース要素を示すユーザインタフェース要素情報を取得するユーザインタフェース要素情報取得部と、ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得する物体情報取得部と、ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、物体情報取得部により取得された物体情報に基づいて、透明度を補正する透明度補正部とを備えたことを特徴とする。
【発明の効果】
【0007】
本開示によれば、上記のように構成したので、従来に対し、物体が近づいてきたとしても、その存在を認識しやすくなる。
【図面の簡単な説明】
【0008】
【図1】実施の形態１に係る表示システムの構成例を示す図である。
【図2】実施の形態１に係る表示制御装置の構成例を示す図である。
【図3】実施の形態１に係る表示制御装置の動作例を示すフローチャートである。
【図4】図４Ａ、図４Ｂは、実施の形態１に係る表示制御装置の動作例を示す図であって、図４Ａは表示制御装置による透明度の補正前の状態の一例を示す図であって、図４Ｂは表示制御装置による透明度の補正後の状態の一例を示す図である。
【図5】実施の形態２に係る表示制御装置の構成例を示す図である。
【図6】実施の形態２に係る表示制御装置の動作例を示すフローチャートである。
【図7】図７Ａ、図７Ｂは、実施の形態２に係る表示制御装置の動作例を示す図であって、図７Ａは表示制御装置による色相および彩度のうちの少なくとも一方ならびに明度の補正前の状態の一例を示す図であって、図７Ｂは表示制御装置による色相および彩度のうちの少なくとも一方ならびに明度の補正後の状態の一例を示す図である。
【図8】実施の形態３に係る表示制御装置の構成例を示す図である。
【図9】実施の形態３に係る表示制御装置の動作例を示すフローチャートである。
【発明を実施するための形態】
【0009】
以下、実施の形態について図面を参照しながら詳細に説明する。
実施の形態１．
図１は実施の形態１に係る表示システムの構成例を示す図である。
表示システムは、現実空間にユーザインタフェース要素（以降、ＵＩ要素と記述）をホログラム投影するシステムである。ＵＩ要素としては、例えばウィンドウまたはボタンなどが挙げられる。この表示システムは、ヘッドマウントディスプレイ型のデバイス１、および、表示制御装置２を備えている。
実施の形態１．
図１は実施の形態１に係る表示システムの構成例を示す図である。
表示システムは、現実空間にユーザインタフェース要素（以降、ＵＩ要素と記述）をホログラム投影するシステムである。ＵＩ要素としては、例えばウィンドウまたはボタンなどが挙げられる。この表示システムは、ヘッドマウントディスプレイ型のデバイス１、および、表示制御装置２を備えている。
【0010】
なお、図１では、表示制御装置２が、デバイス１の外部に設けられた場合を示している。しかしながら、これに限らず、表示制御装置２は、デバイス１の内部に設けられていてもよい。
【0011】
デバイス１は、ユーザが頭部に装着して使用するデバイスである。このデバイス１は、距離情報取得部および表示部を有している。距離情報取得部は、距離情報を取得する。この距離情報は、デバイス１から、ＵＩ要素を表示する領域を含む外部の領域に存在する物体までの距離を示す情報である。この距離情報取得部としては、例えば深度センサまたは空間スキャン機能を有するセンサが挙げられる。また、表示部は、表示制御装置２から得られたＵＩ要素をホログラム投影することで表示する。
このデバイス１としては、既存のデバイスを用いることが可能である。
このデバイス１としては、既存のデバイスを用いることが可能である。
【0012】
表示制御装置２は、現実空間への表示対象であるＵＩ要素の制御を行う。
この表示制御装置２は、図２に示すように、ＵＩ要素情報取得部２０１、物体情報取得部２０２、および、透明度補正部２０３を備えている。
この表示制御装置２は、図２に示すように、ＵＩ要素情報取得部２０１、物体情報取得部２０２、および、透明度補正部２０３を備えている。
【0013】
ＵＩ要素情報取得部２０１は、ＵＩ要素情報を取得する。ＵＩ要素情報は、現実空間への表示対象であるＵＩ要素を示す情報である。
【0014】
物体情報取得部２０２は、物体情報を取得する。物体情報は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域に近づく物体の有無を示す情報、すなわち、当該領域からの距離が閾値より短く、かつ、当該領域に向かってくる物体の有無を示す情報である。物体としては、人、または、その他の動く物体が挙げられる。また、閾値は適宜設定可能である。
この際、物体情報取得部２０２は、距離情報取得部により取得された距離情報に基づいて、ＵＩ要素を表示する領域に近づく物体の有無を検出することで、物体情報を取得してもよい。また、例えば、物体の移動を監視する位置測位システムなどと連携し、当該位置測位システムにより得られた物体の移動を示す情報に基づいて、ＵＩ要素を表示する領域に近づく物体の有無を検出することで、物体情報を取得してもよい。
また、物体情報取得部２０２は、外部から入力された物体情報そのものを取得してもよい。
この際、物体情報取得部２０２は、距離情報取得部により取得された距離情報に基づいて、ＵＩ要素を表示する領域に近づく物体の有無を検出することで、物体情報を取得してもよい。また、例えば、物体の移動を監視する位置測位システムなどと連携し、当該位置測位システムにより得られた物体の移動を示す情報に基づいて、ＵＩ要素を表示する領域に近づく物体の有無を検出することで、物体情報を取得してもよい。
また、物体情報取得部２０２は、外部から入力された物体情報そのものを取得してもよい。
【0015】
また、物体情報取得部２０２により取得される物体情報には、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域に近づく物体の当該領域からの距離、および、当該物体の移動速度を示す情報のうちの少なくとも一方が含まれていてもよい。
【0016】
透明度補正部２０３は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、物体情報取得部２０２により取得された物体情報に基づいて、透明度を補正する。
この際、例えば、透明度補正部２０３は、物体情報取得部２０２により取得された物体情報がＵＩ要素を表示する領域に近づく物体が有ることを示す場合、当該ＵＩ要素の透明度を通常の場合よりも高く補正する。また、その後、透明度補正部２０３は、物体情報取得部２０２により取得された物体情報がＵＩ要素を表示する領域に近づく物体が無くなったことを示した場合、当該ＵＩ要素の透明度を通常の場合に戻す。
この際、例えば、透明度補正部２０３は、物体情報取得部２０２により取得された物体情報がＵＩ要素を表示する領域に近づく物体が有ることを示す場合、当該ＵＩ要素の透明度を通常の場合よりも高く補正する。また、その後、透明度補正部２０３は、物体情報取得部２０２により取得された物体情報がＵＩ要素を表示する領域に近づく物体が無くなったことを示した場合、当該ＵＩ要素の透明度を通常の場合に戻す。
【0017】
また、物体情報に、物体の領域からの距離および移動速度を示す情報のうちの少なくとも一方が含まれている場合、透明度補正部２０３は、それらのパラメータも考慮してＵＩ要素の透明度を補正してもよい。
この際、例えば、透明度補正部２０３は、物体の領域からの距離が短いほどまたは物体の移動速度が速いほど、ＵＩ要素の透明度を連続的または段階的に高くするように補正する。
この際、例えば、透明度補正部２０３は、物体の領域からの距離が短いほどまたは物体の移動速度が速いほど、ＵＩ要素の透明度を連続的または段階的に高くするように補正する。
【0018】
また、表示制御装置２が所定の領域内における物体の移動を監視可能な位置測位システムとの連携が可能である場合、透明度補正部２０３は、この位置測位システムによる移動情報も考慮してＵＩ要素の透明度を補正してもよい。
【0019】
そして、デバイス１は、透明度補正部２０３によりＵＩ要素の透明度が補正された場合には、当該補正後のＵＩ要素を表示する。
【0020】
次に、図１，２に示す実施の形態１に係る表示制御装置２の動作例について、図３を参照しながら説明する。
なお、ＵＩ要素情報取得部２０１は、現実空間への表示対象であるＵＩ要素を示すＵＩ要素情報を取得している。
なお、ＵＩ要素情報取得部２０１は、現実空間への表示対象であるＵＩ要素を示すＵＩ要素情報を取得している。
【0021】
図１，２に示す実施の形態１に係る表示制御装置２の動作例では、図３に示すように、まず、物体情報取得部２０２は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域に近づく物体の有無を示す物体情報を取得する（ステップＳＴ１０１）。この際、物体情報取得部２０２は、距離情報取得部により取得された距離情報に基づいて、ＵＩ要素を表示する領域に近づく物体の有無を検出することで、物体情報を取得してもよい。また、例えば、物体の移動を監視する位置測位システムなどと連携し、当該位置測位システムにより得られた物体の移動を示す情報に基づいて、ＵＩ要素を表示する領域に近づく物体の有無を検出することで、物体情報を取得してもよい。また、物体情報取得部２０２は、外部から入力された物体情報そのものを取得してもよい。
【0022】
また、物体情報取得部２０２が取得する物体情報には、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域に近づく物体の当該領域からの距離、および、当該物体の移動速度を示す情報のうちの少なくとも一方が含まれていてもよい。
【0023】
次いで、透明度補正部２０３は、物体情報取得部２０２により取得された物体情報に基づいて、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対する透明度の補正が必要であるかを判定する（ステップＳＴ１０２）。すなわち、透明度補正部２０３は、上記物体情報が、上記ＵＩ要素を表示する領域に近づく物体が有ることを示しているかを判定することで、当該ＵＩ要素に対する透明度の補正が必要であるかを判定する。
【0024】
この際、ステップＳＴ１０２において、透明度補正部２０３が、上記ＵＩ要素に対する透明度の補正が不要であると判定した場合、シーケンスは終了する。
【0025】
一方、ステップＳＴ１０２において、透明度補正部２０３は、上記ＵＩ要素に対する透明度の補正が必要であると判定した場合、当該ＵＩ要素に対して透明度を補正する（ステップＳＴ１０３）。この際、例えば図４に示すように、透明度補正部２０３は、ＵＩ要素の透明度を通常の場合よりも高く補正する。なお、図４Ａは、通常の場合、すなわち、透明度補正部２０３による透明度の補正前の状態の一例を示す図である。図４Ａにおいて、符号４１ａは補正前のＵＩ要素を示している。また、図４Ｂの図は、透明度補正部２０３による透明度の補正後の状態の一例を示す図である。図４Ｂにおいて、符号４１ｂは補正後のＵＩ要素を示している。図４Ｂでは、ＵＩ要素を表示する領域に対して人が近づいてきた場合を示している。
【0026】
また、物体情報に、物体の領域からの距離および移動速度を示す情報のうちの少なくとも一方が含まれている場合、透明度補正部２０３は、それらのパラメータも考慮してＵＩ要素の透明度を補正してもよい。
この際、例えば、透明度補正部２０３は、物体の領域からの距離が短いほどまたは物体の移動速度が速いほど、ＵＩ要素の透明度を連続的または段階的に高くするように補正する。
この際、例えば、透明度補正部２０３は、物体の領域からの距離が短いほどまたは物体の移動速度が速いほど、ＵＩ要素の透明度を連続的または段階的に高くするように補正する。
【0027】
また、表示制御装置２が所定の領域内における物体の移動を監視可能な位置測位システムとの連携が可能である場合、透明度補正部２０３は、この位置測位システムによる移動情報も考慮してＵＩ要素の透明度を補正してもよい。
【0028】
なお、その後、透明度補正部２０３は、物体情報取得部２０２により取得された物体情報がＵＩ要素を表示する領域に近づく物体が無くなったことを示した場合、当該ＵＩ要素の透明度を通常の場合に戻す。
【0029】
このように実施の形態１に係る表示制御装置２では、ユーザの視野上に表示されているＵＩ要素の裏側から近づいてくる物体の有無に基づいて、ＵＩ要素の透明度を調整する。これにより、実施の形態１に係る表示制御装置２では、ホログラム投影しているＵＩ要素の裏側に近づく物体が存在する場合にも、ユーザが当該物体を認識しやすくなる。その結果、ユーザは、上記物体との衝突を回避しやすくなり、安全性を高めることが可能となる。
【0030】
以上のように、この実施の形態１によれば、表示制御装置２は、現実空間への表示対象であるＵＩ要素を示すＵＩ要素情報を取得するＵＩ要素情報取得部２０１と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域に近づく物体の有無を示す物体情報を取得する物体情報取得部２０２と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、物体情報取得部２０２により取得された物体情報に基づいて、透明度を補正する透明度補正部２０３とを備えた。これにより、実施の形態１に係る表示制御装置２は、従来に対し、物体が近づいてきたとしても、その存在を認識しやすくなる。
【0031】
実施の形態２．
実施の形態１に係る表示制御装置２では、ＵＩ要素を表示する領域に近づく物体の有無に応じてＵＩ要素の透明度を補正する場合を示した。これに対し、実施の形態２に係る表示制御装置２では、上記に加え、ＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方ならびに明度に応じてＵＩ要素の色相および彩度のうちの少なくとも一方ならびに明度を補正する構成について示す。
実施の形態１に係る表示制御装置２では、ＵＩ要素を表示する領域に近づく物体の有無に応じてＵＩ要素の透明度を補正する場合を示した。これに対し、実施の形態２に係る表示制御装置２では、上記に加え、ＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方ならびに明度に応じてＵＩ要素の色相および彩度のうちの少なくとも一方ならびに明度を補正する構成について示す。
【0032】
図５は実施の形態２に係る表示制御装置２の構成例を示す図である。この図５に示す実施の形態２に係る表示制御装置２は、図２に示す実施の形態１に係る表示制御装置２に対し、第１の背景情報取得部２０４、第２の背景情報取得部２０５、第１の色補正部２０６および第２の色補正部２０７が追加されている。図５に示す実施の形態２に係る表示制御装置２におけるその他の構成例は、図２に示す実施の形態１に係る表示制御装置２の構成例と同様であり、同一の符号を付して異なる部分についてのみ説明を行う。
【0033】
なお、デバイス１は、外部画像取得部を有している。外部画像取得部は、外部画像を取得する。この外部画像は、ＵＩ要素を表示する領域を含む外部の領域を撮影することで得られる画像である。
【0034】
第１の背景情報取得部２０４は、第１の背景情報を取得する。第１の背景情報は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を示す情報である。なお、ここでいう背景の範囲は、例えば、ユーザが視覚可能な領域である視野領域全体でもよいし、当該視野領域のうちの一部の領域、例えばＵＩ要素を表示する領域と重なる領域のみでもよい。
この際、第１の背景情報取得部２０４は、外部画像取得部により取得された外部画像に基づいて、ＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を検出することで、第１の背景情報を取得してもよい。
また、第１の背景情報取得部２０４は、外部から入力された第１の背景情報そのものを取得してもよい。例えば、デバイス１の内部または外部に、上記第１の背景情報を取得可能なセンサが設けられている場合、第１の背景情報取得部２０４はこのセンサから第１の背景情報を取得してもよい。このセンサとしては、例えば、光センサ（カラーセンサ）が挙げられる。
この際、第１の背景情報取得部２０４は、外部画像取得部により取得された外部画像に基づいて、ＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を検出することで、第１の背景情報を取得してもよい。
また、第１の背景情報取得部２０４は、外部から入力された第１の背景情報そのものを取得してもよい。例えば、デバイス１の内部または外部に、上記第１の背景情報を取得可能なセンサが設けられている場合、第１の背景情報取得部２０４はこのセンサから第１の背景情報を取得してもよい。このセンサとしては、例えば、光センサ（カラーセンサ）が挙げられる。
【0035】
第２の背景情報取得部２０５は、第２の背景情報を取得する。第２の背景情報は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域における背景の明度を示す情報である。なお、ここでいう背景の範囲は、例えば、ユーザが視覚可能な領域である視野領域全体でもよいし、当該視野領域のうちの一部の領域、例えばＵＩ要素を表示する領域と重なる領域のみでもよい。
この際、第２の背景情報取得部２０５は、外部画像取得部により取得された外部画像に基づいて、ＵＩ要素を表示する領域における背景の明度を検出することで、第２の背景情報を取得してもよい。
また、第２の背景情報取得部２０５は、外部から入力された第２の背景情報そのものを取得してもよい。
この際、第２の背景情報取得部２０５は、外部画像取得部により取得された外部画像に基づいて、ＵＩ要素を表示する領域における背景の明度を検出することで、第２の背景情報を取得してもよい。
また、第２の背景情報取得部２０５は、外部から入力された第２の背景情報そのものを取得してもよい。
【0036】
第１の色補正部２０６は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、第１の背景情報取得部２０４により取得された第１の背景情報に基づいて、色相および彩度のうちの少なくとも一方を補正する。
この際、例えば、第１の色補正部２０６は、背景の色相とＵＩ要素の色相、および、背景の彩度の値またはその平均値などの彩度の代表値とＵＩ要素の彩度の値またはその平均値などの彩度の代表値のうちの少なくとも一方を比較する。そして、第１の色補正部２０６は、上記色相の差および上記彩度の代表値の差のうちの少なくとも一方に応じて、ＵＩ要素の色相および彩度のうちの少なくとも一方を補正する。
この際、例えば、第１の色補正部２０６は、背景の彩度の代表値がＵＩ要素の彩度の代表値に対して高い場合にはＵＩ要素の彩度をより高くするように補正し、背景の彩度の代表値がＵＩ要素の彩度の代表値に対して低い場合にはＵＩ要素の彩度の高さを抑えるように補正してもよい。また、例えば、第１の色補正部２０６は、背景の色相とＵＩ要素の色相とが同系色である場合に、ＵＩ要素の色相を背景の色相の補色となるように補正してコントラストを高くしてもよい。
この際、例えば、第１の色補正部２０６は、背景の色相とＵＩ要素の色相、および、背景の彩度の値またはその平均値などの彩度の代表値とＵＩ要素の彩度の値またはその平均値などの彩度の代表値のうちの少なくとも一方を比較する。そして、第１の色補正部２０６は、上記色相の差および上記彩度の代表値の差のうちの少なくとも一方に応じて、ＵＩ要素の色相および彩度のうちの少なくとも一方を補正する。
この際、例えば、第１の色補正部２０６は、背景の彩度の代表値がＵＩ要素の彩度の代表値に対して高い場合にはＵＩ要素の彩度をより高くするように補正し、背景の彩度の代表値がＵＩ要素の彩度の代表値に対して低い場合にはＵＩ要素の彩度の高さを抑えるように補正してもよい。また、例えば、第１の色補正部２０６は、背景の色相とＵＩ要素の色相とが同系色である場合に、ＵＩ要素の色相を背景の色相の補色となるように補正してコントラストを高くしてもよい。
【0037】
第２の色補正部２０７は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、第２の背景情報取得部２０５により取得された第２の背景情報に基づいて、明度を補正する。
この際、例えば、第２の色補正部２０７は、背景の明度が閾値より高い場合、ＵＩ要素の明度を通常の場合よりも低く補正する。なお、閾値は適宜設定可能である。
この際、例えば、第２の色補正部２０７は、背景の明度が閾値より高い場合、ＵＩ要素の明度を通常の場合よりも低く補正する。なお、閾値は適宜設定可能である。
【0038】
そして、デバイス１は、第１の色補正部２０６によりＵＩ要素の色相および彩度のうちの少なくとも一方が補正された場合または第２の色補正部２０７によりＵＩ要素の明度が補正された場合には、当該補正後のＵＩ要素を表示する。
【0039】
次に、図５に示す実施の形態２に係る表示制御装置２の動作例について、図６を参照しながら説明する。図６では、実施の形態２に係る表示制御装置２による背景の色相および彩度のうちの少なくとも一方に基づく第１の色補正および背景の明度に基づく第２の色補正に関する動作についてのみ説明を行う。
【0040】
図５に示す実施の形態２に係る表示制御装置２の動作例では、図６に示すように、まず、第１の背景情報取得部２０４は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を示す第１の背景情報を取得する（ステップＳＴ２０１）。なお、ここでいう背景の範囲は、例えば、ユーザが視覚可能な領域である視野領域全体でもよいし、当該視野領域のうちの一部の領域、例えばＵＩ要素を表示する領域と重なる領域のみでもよい。
この際、第１の背景情報取得部２０４は、外部画像取得部により取得された外部画像に基づいて、ＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を検出することで、第１の背景情報を取得してもよい。また、第１の背景情報取得部２０４は、外部から入力された第１の背景情報そのものを取得してもよい。
この際、第１の背景情報取得部２０４は、外部画像取得部により取得された外部画像に基づいて、ＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を検出することで、第１の背景情報を取得してもよい。また、第１の背景情報取得部２０４は、外部から入力された第１の背景情報そのものを取得してもよい。
【0041】
また、第２の背景情報取得部２０５は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域における背景の明度を示す第２の背景情報を取得する（ステップＳＴ２０２）。なお、ここでいう背景の範囲は、例えば、ユーザが視覚可能な領域である視野領域全体でもよいし、当該視野領域のうちの一部の領域、例えばＵＩ要素を表示する領域と重なる領域のみでもよい。
この際、第２の背景情報取得部２０５は、外部画像取得部により取得された外部画像に基づいて、ＵＩ要素を表示する領域における背景の明度を検出することで、第２の背景情報を取得してもよい。また、第２の背景情報取得部２０５は、外部から入力された第２の背景情報そのものを取得してもよい。
この際、第２の背景情報取得部２０５は、外部画像取得部により取得された外部画像に基づいて、ＵＩ要素を表示する領域における背景の明度を検出することで、第２の背景情報を取得してもよい。また、第２の背景情報取得部２０５は、外部から入力された第２の背景情報そのものを取得してもよい。
【0042】
次いで、第１の色補正部２０６は、第１の背景情報取得部２０４により取得された第１の背景情報に基づいて、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対する色相および彩度のうちの少なくとも一方の補正が必要であるかを判定する（ステップＳＴ２０３）。すなわち、例えば、第１の色補正部２０６は、上記第１の背景情報が示す背景の色相と上記ＵＩ要素の色相、および、上記第１の背景情報が示す背景の彩度の値またはその平均値などの彩度の代表値と上記ＵＩ要素の彩度の値またはその平均値などの彩度の代表値のうちの少なくとも一方を比較する。そして、第１の色補正部２０６は、上記色相の差の判定および上記彩度の代表値の差が閾値以上であるかの判定のうちの少なくとも一方を行うことで、当該ＵＩ要素に対する色相および彩度のうちの少なくとも一方の補正が必要であるかを判定する。
【0043】
このステップＳＴ２０３において、第１の色補正部２０６が、上記ＵＩ要素に対する色相および彩度のうちの少なくとも一方の補正が不要であると判定した場合、シーケンスはステップＳＴ２０５に進む。
【0044】
一方、ステップＳＴ２０３において、第１の色補正部２０６は、上記ＵＩ要素に対する色相および彩度のうちの少なくとも一方の補正が必要であると判定した場合、当該ＵＩ要素に対して色相および彩度のうちの少なくとも一方を補正する（ステップＳＴ２０４）。この際、例えば、第１の色補正部２０６は、上記色相の差および上記彩度の代表値の差のうちの少なくとも一方に応じて、ＵＩ要素の色相および彩度のうちの少なくとも一方を補正する。この際、例えば、第１の色補正部２０６は、背景の彩度の代表値がＵＩ要素の彩度の代表値に対して高い場合にはＵＩ要素の彩度をより高くするように補正し、背景の彩度の代表値がＵＩ要素の彩度の代表値に対して低い場合にはＵＩ要素の彩度の高さを抑えるように補正してもよい。また、例えば、第１の色補正部２０６は、背景の色相とＵＩ要素の色相とが同系色である場合に、ＵＩ要素の色相を背景の色相の補色となるように補正してコントラストを高くしてもよい。
【0045】
また、第２の色補正部２０７は、第２の背景情報取得部２０５により取得された第２の背景情報に基づいて、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対する明度の補正が必要であるかを判定する（ステップＳＴ２０５）。すなわち、例えば、第２の色補正部２０７は、上記第２の背景情報が示す背景の明度の値が閾値であるかを判定することで、当該ＵＩ要素に対する明度の補正が必要であるかを判定する。
【0046】
このステップＳＴ２０５において、第２の色補正部２０７が、上記ＵＩ要素に対する明度の補正が不要であると判定した場合、シーケンスは終了する。
【0047】
一方、ステップＳＴ２０５において、第２の色補正部２０７は、上記ＵＩ要素に対する明度の補正が必要であると判定した場合、当該ＵＩ要素に対して明度を補正する（ステップＳＴ２０６）。この際、第２の色補正部２０７は、上記値に応じて、ＵＩ要素の明度を補正する。例えば、第２の色補正部２０７は、背景の明度が高い場合にはＵＩ要素の明度を低くするよう補正する。
【0048】
図７は、実施の形態２に係る表示制御装置２による背景の色相および彩度のうちの少なくとも一方ならびに明度に基づくＵＩ要素の色相および彩度のうちの少なくとも一方ならびに明度の補正を説明するための図である。なお、図７Ａは、第１の色補正部２０６および第２の色補正部２０７による補正前の状態の一例を示す図である。図７Ａにおいて、符号７１ａは補正前のＵＩ要素を示している。また、図７Ｂは、第１の色補正部２０６および第２の色補正部２０７による補正後の状態の一例を示す図である。図７Ｂにおいて、符号７１ｂは補正後のＵＩ要素を示している。
【0049】
このように実施の形態２に係る表示制御装置２では、ユーザの視野上に表示されているＵＩ要素の背景の色相および彩度のうちの少なくとも一方ならびに明度に基づいて、ＵＩ要素の色相および彩度のうちの少なくとも一方ならびに明度を調整する。これにより、実施の形態２に係る表示制御装置２では、ホログラム投影しているＵＩ要素の背景の色相および彩度のうちの少なくとも一方ならびに明度にかかわらず、当該ＵＩ要素を視認しやすくなる。
【0050】
また、実施の形態２に係る表示制御装置２では、背景の色相および彩度のうちの少なくとも一方として、視野領域全体での背景の色相および彩度のうちの少なくとも一方ではなく、ＵＩ要素が表示される領域と重なる領域部分での背景の色相および彩度のうちの少なくとも一方を用いることで、ＵＩ要素が表示される領域の場所に応じた第１の色補正が可能となる。
同様に、実施の形態２に係る表示制御装置２では、背景の明度として、視野領域全体での背景の明度ではなく、ＵＩ要素が表示される領域と重なる領域部分での背景の明度を用いることで、ＵＩ要素が表示される領域の場所に応じた第２の色補正が可能となる。
同様に、実施の形態２に係る表示制御装置２では、背景の明度として、視野領域全体での背景の明度ではなく、ＵＩ要素が表示される領域と重なる領域部分での背景の明度を用いることで、ＵＩ要素が表示される領域の場所に応じた第２の色補正が可能となる。
【0051】
以上のように、この実施の形態２によれば、表示制御装置２は、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を示す第１の背景情報を取得する第１の背景情報取得部２０４と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域における背景の明度を示す第２の背景情報を取得する第２の背景情報取得部２０５と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、第１の背景情報取得部２０４により取得された第１の背景情報に基づいて、色相および彩度のうちの少なくとも一方を補正する第１の色補正部２０６と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、第２の背景情報取得部２０５により取得された第２の背景情報に基づいて、明度を補正する第２の色補正部２０７とを備えた。これにより、実施の形態２に係る表示制御装置２は、従来に対してＵＩ要素の視認性を向上可能となる。すなわち、実施の形態２に係る表示制御装置２は、従来に対し、現実空間の明るさにかかわらず、ＵＩ要素の視認性を向上可能となり、作業効率の低下を抑制可能となる。例えば、実施の形態２に係る表示制御装置２は、屋外など明るい場所で利用したとしても、ホログラム投影したＵＩ要素が薄く見えて認識しにくいといったことを抑制可能となる。
【0052】
なお、上記では、実施の形態２に係る表示制御装置２が、背景の色相および彩度のうちの少なくとも一方ならびに明度に基づいて、ＵＩ要素の色相および彩度のうちの少なくとも一方ならびに明度を補正する場合について示した。しかしながら、これに限らず、表示制御装置２は、背景の色相および彩度のうちの少なくとも一方あるいは明度に基づいて、ＵＩ要素の色相および彩度のうちの少なくとも一方あるいは明度を補正してもよく、上記と同様の効果が得られる。
【0053】
例えば、表示制御装置２が、背景の色相および彩度のうちの少なくとも一方に基づいてＵＩ要素の色相および彩度のうちの少なくとも一方のみを補正する場合には、図５に示す第２の背景情報取得部２０５および第２の色補正部２０７は不要である。この場合、表示制御装置２は、図２に示す実施の形態１に係る表示制御装置２に対し、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を示す第１の背景情報を取得する第１の背景情報取得部２０４と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、第１の背景情報取得部２０４により取得された第１の背景情報に基づいて、色相および彩度のうちの少なくとも一方を補正する第１の色補正部２０６とが追加される。
【0054】
また、例えば、表示制御装置２が、背景の明度に基づいてＵＩ要素の明度のみを補正する場合には、図５に示す第１の背景情報取得部２０４および第１の色補正部２０６は不要である。この場合、表示制御装置２は、図２に示す実施の形態１に係る表示制御装置２に対し、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素を表示する領域における背景の明度を示す第２の背景情報を取得する第２の背景情報取得部２０５と、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素に対し、第２の背景情報取得部２０５により取得された第２の背景情報に基づいて、明度を補正する第２の色補正部２０７とが追加される。
【0055】
実施の形態３．
実施の形態２に係る表示制御装置２では、ＵＩ要素を表示する領域に近づく物体の有無に応じてＵＩ要素の透明度を補正するとともに、ＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方ならびに明度に応じてＵＩ要素の色相および彩度のうちの少なくとも一方ならびに明度を補正する場合について示した。これに対し、実施の形態３に係る表示制御装置２では、上記に加え、ＵＩ要素のうちのユーザが注視する領域を拡大した拡大画面を作成する構成について示す。
実施の形態２に係る表示制御装置２では、ＵＩ要素を表示する領域に近づく物体の有無に応じてＵＩ要素の透明度を補正するとともに、ＵＩ要素を表示する領域における背景の色相および彩度のうちの少なくとも一方ならびに明度に応じてＵＩ要素の色相および彩度のうちの少なくとも一方ならびに明度を補正する場合について示した。これに対し、実施の形態３に係る表示制御装置２では、上記に加え、ＵＩ要素のうちのユーザが注視する領域を拡大した拡大画面を作成する構成について示す。
【0056】
図８は実施の形態３に係る表示制御装置２の構成例を示す図である。この図８に示す実施の形態３に係る表示制御装置２は、図５に示す実施の形態２に係る表示制御装置２に対し、視線方向情報取得部２０８、注視状態判定部２０９、および、拡大画面作成部２１０が追加されている。図８に示す実施の形態３に係る表示制御装置２におけるその他の構成例は、図５に示す実施の形態２に係る表示制御装置２の構成例と同様であり、同一の符号を付して異なる部分についてのみ説明を行う。
【0057】
なお、デバイス１は、視線方向検出部を有している。この視線方向検出部は、アイトラッキングなどにより、ユーザの視線方向を検出する。
【0058】
視線方向情報取得部２０８は、視線方向情報を取得する。視線方向情報は、ユーザの視線方向を示す情報である。
この際、視線方向情報取得部２０８は、視線方向検出部により検出された視線方向を示す情報である視線方向情報を取得する。
この際、視線方向情報取得部２０８は、視線方向検出部により検出された視線方向を示す情報である視線方向情報を取得する。
【0059】
注視状態判定部２０９は、視線方向情報取得部２０８により取得された視線方向情報に基づいて、ユーザがＵＩ要素を表示する領域内の微小領域を注視しているかを判定する。この際、注視状態判定部２０９は、ＵＩ要素を表示する領域内において、ユーザの視線が微小領域に所定時間留まっていると判定した場合に、当該微小領域を注視していると判定する。なお、微小領域は、ＵＩ要素を表示する領域より小さい領域である。微小領域として、例えば、半径５ｃｍの円状の領域などを設定可能である。また、所定時間として、例えば、３秒などを設定可能である。
【0060】
拡大画面作成部２１０は、視線方向情報取得部２０８により取得された視線方向情報および注視状態判定部２０９による判定結果に基づいて、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素のうちの一部を拡大した画面を作成する。この際、拡大画面作成部２１０は、注視状態判定部２０９により微小領域を注視していると判定された場合、ユーザの視線上の点である注視点を含む特定の領域を切り取って拡大した画面を作成する。なお、特定の領域は、ＵＩ要素を表示する領域より小さく、かつ、微小領域より大きい領域である。特定の領域として、例えば、注視点を中心とした４００ｃｍ２程度の正方形の領域などを設定可能である。
【0061】
そして、デバイス１は、拡大画面作成部２１０により拡大画面が作成された場合には、ＵＩ要素に加えて当該拡大画面も表示する。
【0062】
次に、図８に示す実施の形態３に係る表示制御装置２の動作例について、図９を参照しながら説明する。図８では、実施の形態３に係る表示制御装置２による視線に基づく拡大画面作成に関する動作についてのみ説明を行う。
【0063】
図８に示す実施の形態３に係る表示制御装置２の動作例では、図９に示すように、まず、視線方向情報取得部２０８は、ユーザの視線方向を示す視線方向情報を取得する（ステップＳＴ３０１）。この際、視線方向情報取得部２０８は、視線方向検出部により検出された視線方向を示す情報である視線方向情報を取得する。
【0064】
次いで、注視状態判定部２０９は、視線方向情報取得部２０８により取得された視線方向情報に基づいて、ユーザがＵＩ要素を表示する領域内の微小領域を注視しているかを判定する（ステップＳＴ３０２）。この際、注視状態判定部２０９は、ＵＩ要素を表示する領域内において、ユーザの視線が微小領域に所定時間留まっていると判定した場合に、当該微小領域を注視していると判定する。
【0065】
このステップＳＴ３０２において、注視状態判定部２０９は、ユーザが微小領域を注視していないと判定した場合、シーケンスは終了する。
【0066】
一方、注視状態判定部２０９がユーザが微小領域を注視していると判定した場合、拡大画面作成部２１０は、視線方向情報取得部２０８により取得された視線方向情報に基づいて、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素のうちの一部を拡大した画面を作成する（ステップＳＴ３０３）。この際、例えば図１０に示すように、拡大画面作成部２１０は、注視状態判定部２０９により微小領域を注視していると判定された場合、ユーザの視線である注視点を含む特定の領域を切り取って拡大した画面を作成する。なお、図１０Ａは、拡大画面作成部２１０による画面作成前の状態の一例を示す図であって、ＵＩ要素のみが表示された状態を示す図である。図１０Ａにおいて、符号１０１はＵＩ要素を示し、符号１０２は注視点を示し、符号１０３は切り取り対象である特定の領域を示している。また、図１０Ｂは、拡大画面作成部２１０による画面作成後の状態の一例を示す図であって、ＵＩ要素および拡大された画面が表示された状態を示す図である。図１０Ｂにおいて、符号１０４は拡大された画面を示している。
【0067】
このように実施の形態３に係る表示制御装置２では、ユーザの注視点を中心にした所定領域を拡大した画面を自動で作成する。これにより、実施の形態３に係る表示制御装置２では、従来に対し、操作性が改善し、表示するＵＩ要素が多い場合であってもユーザの負担を軽減可能となる。
【0068】
なお、上記では、実施の形態２に係る表示制御装置２に対して、視線方向情報取得部２０８、注視状態判定部２０９および拡大画面作成部２１０が追加された場合を示した。しかしながら、これに限らず、実施の形態１に係る表示制御装置２、あるいは、実施の形態２に係る表示制御装置２のうちの背景の色相および彩度のうちの少なくとも一方に基づくＵＩ要素の第１の色補正のみを行う構成または背景の明度に基づくＵＩ要素の第２の色補正のみを行う構成に対して、視線方向情報取得部２０８、注視状態判定部２０９および拡大画面作成部２１０が追加されてもよい。
【0069】
以上のように、この実施の形態３によれば、表示制御装置２は、ユーザの視線方向を示す視線方向情報を取得する視線方向情報取得部２０８と、視線方向情報取得部２０８により取得された視線方向情報に基づいて、ユーザがＵＩ要素を表示する領域内の微小領域を注視しているかを判定する注視状態判定部２０９と、視線方向情報取得部２０８により取得された視線方向情報および注視状態判定部２０９による判定結果に基づいて、ＵＩ要素情報取得部２０１により取得されたＵＩ要素情報が示すＵＩ要素のうちの一部を拡大した画面を作成する拡大画面作成部２１０とを備えた。これにより、実施の形態３に係る表示制御装置２は、従来に対してＵＩ要素の操作性および視認性を向上可能となる。
【0070】
最後に、図１１を参照して、実施の形態１－３に係る表示制御装置２のハードウェア構成例を説明する。以下では、実施の形態１に係る表示制御装置２のハードウェア構成例について説明するが、実施の形態２，３に係る表示制御装置２のハードウェア構成例についても同様である。
表示制御装置２におけるＵＩ要素情報取得部２０１、物体情報取得部２０２、および、透明度補正部２０３の各機能は、処理回路５１により実現される。処理回路５１は、図１１Ａに示すように、専用のハードウェアであってもよいし、図１１Ｂに示すように、メモリ５３に格納されるプログラムを実行するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、プロセッサ、またはＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）ともいう）５２であってもよい。
表示制御装置２におけるＵＩ要素情報取得部２０１、物体情報取得部２０２、および、透明度補正部２０３の各機能は、処理回路５１により実現される。処理回路５１は、図１１Ａに示すように、専用のハードウェアであってもよいし、図１１Ｂに示すように、メモリ５３に格納されるプログラムを実行するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、プロセッサ、またはＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）ともいう）５２であってもよい。
【0071】
処理回路５１が専用のハードウェアである場合、処理回路５１は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、またはこれらを組み合わせたものが該当する。ＵＩ要素情報取得部２０１、物体情報取得部２０２、および、透明度補正部２０３の各部の機能それぞれを処理回路５１で実現してもよいし、各部の機能をまとめて処理回路５１で実現してもよい。
【0072】
処理回路５１がＣＰＵ５２の場合、ＵＩ要素情報取得部２０１、物体情報取得部２０２、および、透明度補正部２０３の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアおよびファームウェアはプログラムとして記述され、メモリ５３に格納される。処理回路５１は、メモリ５３に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、表示制御装置２は、処理回路５１により実行されるときに、例えば図３に示した各ステップが結果的に実行されることになるプログラムを格納するためのメモリ５３を備える。また、これらのプログラムは、ＵＩ要素情報取得部２０１、物体情報取得部２０２、および、透明度補正部２０３の手順および方法をコンピュータに実行させるものであるともいえる。ここで、メモリ５３としては、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、フラッシュメモリ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ ＥＰＲＯＭ）などの不揮発性または揮発性の半導体メモリ、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、またはＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）などが該当する。
【0073】
なお、ＵＩ要素情報取得部２０１、物体情報取得部２０２、および、透明度補正部２０３の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。例えば、ＵＩ要素情報取得部２０１については専用のハードウェアとしての処理回路５１でその機能を実現し、物体情報取得部２０２、および、透明度補正部２０３については処理回路５１がメモリ５３に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。
【0074】
このように、処理回路５１は、ハードウェア、ソフトウェア、ファームウェア、またはこれらの組み合わせによって、上述の各機能を実現することができる。
【0075】
なお、各実施の形態の自由な組合わせ、或いは各実施の形態の任意の構成要素の変形、若しくは各実施の形態において任意の構成要素の省略が可能である。
【0076】
以下、本開示の諸態様を付記としてまとめて記載する。
【0077】
（付記１）
現実空間への表示対象であるユーザインタフェース要素を示すユーザインタフェース要素情報を取得するユーザインタフェース要素情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得する物体情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記物体情報取得部により取得された物体情報に基づいて、透明度を補正する透明度補正部と
を備えた表示制御装置。
（付記２）
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を示す第１の背景情報を取得する第１の背景情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記第１の背景情報取得部により取得された第１の背景情報に基づいて、色相および彩度のうちの少なくとも一方を補正する第１の色補正部とを備えた
ことを特徴とする付記１記載の表示制御装置。
（付記３）
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域における背景の明度を示す第２の背景情報を取得する第２の背景情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記第２の背景情報取得部により取得された第２の背景情報に基づいて、明度を補正する第２の色補正部とを備えた
ことを特徴とする付記１または付記２記載の表示制御装置。
（付記４）
ユーザの視線方向を示す視線方向情報を取得する視線方向情報取得部と、
前記視線方向情報取得部により取得された視線方向情報に基づいて、ユーザがユーザインタフェース要素を表示する領域内の微小領域を注視しているかを判定する注視状態判定部と、
前記視線方向情報取得部により取得された視線方向情報および前記注視状態判定部による判定結果に基づいて、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素のうちの一部を拡大した画面を作成する拡大画面作成部とを備えた
ことを特徴とする付記１から付記３のうちの何れか１項記載の表示制御装置。
（付記５）
ユーザインタフェース要素情報取得部が、現実空間への表示対象であるユーザインタフェース要素を示すユーザインタフェース要素情報を取得するステップと、
物体情報取得部が、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得するステップと、
透明度補正部が、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記物体情報取得部により取得された物体情報に基づいて、透明度を補正するステップと
を有する表示制御方法。
現実空間への表示対象であるユーザインタフェース要素を示すユーザインタフェース要素情報を取得するユーザインタフェース要素情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得する物体情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記物体情報取得部により取得された物体情報に基づいて、透明度を補正する透明度補正部と
を備えた表示制御装置。
（付記２）
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域における背景の色相および彩度のうちの少なくとも一方を示す第１の背景情報を取得する第１の背景情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記第１の背景情報取得部により取得された第１の背景情報に基づいて、色相および彩度のうちの少なくとも一方を補正する第１の色補正部とを備えた
ことを特徴とする付記１記載の表示制御装置。
（付記３）
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域における背景の明度を示す第２の背景情報を取得する第２の背景情報取得部と、
前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記第２の背景情報取得部により取得された第２の背景情報に基づいて、明度を補正する第２の色補正部とを備えた
ことを特徴とする付記１または付記２記載の表示制御装置。
（付記４）
ユーザの視線方向を示す視線方向情報を取得する視線方向情報取得部と、
前記視線方向情報取得部により取得された視線方向情報に基づいて、ユーザがユーザインタフェース要素を表示する領域内の微小領域を注視しているかを判定する注視状態判定部と、
前記視線方向情報取得部により取得された視線方向情報および前記注視状態判定部による判定結果に基づいて、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素のうちの一部を拡大した画面を作成する拡大画面作成部とを備えた
ことを特徴とする付記１から付記３のうちの何れか１項記載の表示制御装置。
（付記５）
ユーザインタフェース要素情報取得部が、現実空間への表示対象であるユーザインタフェース要素を示すユーザインタフェース要素情報を取得するステップと、
物体情報取得部が、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素を表示する領域に近づく物体の有無を示す物体情報を取得するステップと、
透明度補正部が、前記ユーザインタフェース要素情報取得部により取得されたユーザインタフェース要素情報が示すユーザインタフェース要素に対し、前記物体情報取得部により取得された物体情報に基づいて、透明度を補正するステップと
を有する表示制御方法。
【符号の説明】
【0078】
１ デバイス、２ 表示制御装置、５１ 処理回路、５２ ＣＰＵ、５３ メモリ、２０１ ＵＩ要素情報取得部、２０２ 物体情報取得部、２０３ 透明度補正部、２０４ 第１の背景情報取得部、２０５ 第２の背景情報取得部、２０６ 第１の色補正部、２０７ 第２の色補正部、２０８ 視線方向情報取得部、２０９ 注視状態判定部、２１０ 拡大画面作成部。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】