知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024101393
(43)【公開日】2024-07-29
(54)【発明の名称】空中表示装置及び表示装置
(51)【国際特許分類】
G06F 3/041 20060101AFI20240722BHJP
G02B 30/56 20200101ALI20240722BHJP
G06F 3/044 20060101ALI20240722BHJP
G06F 3/042 20060101ALI20240722BHJP
【ＦＩ】
G06F3/041 580
G02B30/56
G06F3/044 126
G06F3/042 472
【審査請求】未請求
【請求項の数】14
【出願形態】ＯＬ
(21)【出願番号】P 2023005355
(22)【出願日】2023-01-17
(71)【出願人】
【識別番号】000003193
【氏名又は名称】ＴＯＰＰＡＮホールディングス株式会社
(74)【代理人】
【識別番号】110003708
【氏名又は名称】弁理士法人鈴榮特許綜合事務所
(72)【発明者】
【氏名】代工 康宏
【テーマコード（参考）】
2H199
【Ｆターム（参考）】
2H199BA32
2H199BB08
2H199BB20
2H199BB27
2H199BB29
2H199BB30
2H199BB52
(57)【要約】
【課題】 観察者による空中像へのタッチ操作をより正確に検知することが可能な空中表示装置を提供する。
【解決手段】 空中表示装置は、画像を表示する表示素子２０と、表示素子２０からの光を受けるように配置され、表示素子２０からの光を、表示素子２０と反対側に反射し、空中に空中像を結像する光学素子４０と、光学素子４０の上方に、表示素子２０と平行な第１検知領域と、第１検知領域と異なるレベルの第２検知領域とを形成し、第１及び第２検知領域に存在する対象物を検知するセンシング素子５０と、第１検知領域における第１検知位置と、第２検知領域における第２検知位置とを算出し、第１及び第２検知位置に基づいて、空中像がタッチされたか否かを判定する判定部６０Ｃとを含む。
【選択図】 図１
【解決手段】 空中表示装置は、画像を表示する表示素子２０と、表示素子２０からの光を受けるように配置され、表示素子２０からの光を、表示素子２０と反対側に反射し、空中に空中像を結像する光学素子４０と、光学素子４０の上方に、表示素子２０と平行な第１検知領域と、第１検知領域と異なるレベルの第２検知領域とを形成し、第１及び第２検知領域に存在する対象物を検知するセンシング素子５０と、第１検知領域における第１検知位置と、第２検知領域における第２検知位置とを算出し、第１及び第２検知位置に基づいて、空中像がタッチされたか否かを判定する判定部６０Ｃとを含む。
【選択図】 図１
【特許請求の範囲】
【請求項1】
画像を表示する表示素子と、
前記表示素子からの光を受けるように配置され、前記表示素子からの光を、前記表示素子と反対側に反射し、空中に空中像を結像する光学素子と、
前記光学素子の上方に、前記表示素子と平行な第１検知領域と、前記第１検知領域と異なるレベルの第２検知領域とを形成し、前記第１及び第２検知領域に存在する対象物を検知するセンシング素子と、
前記第１検知領域における第１検知位置と、前記第２検知領域における第２検知位置とを算出し、前記第１及び第２検知位置に基づいて、前記空中像がタッチされたか否かを判定する判定部と
を具備する空中表示装置。
前記表示素子からの光を受けるように配置され、前記表示素子からの光を、前記表示素子と反対側に反射し、空中に空中像を結像する光学素子と、
前記光学素子の上方に、前記表示素子と平行な第１検知領域と、前記第１検知領域と異なるレベルの第２検知領域とを形成し、前記第１及び第２検知領域に存在する対象物を検知するセンシング素子と、
前記第１検知領域における第１検知位置と、前記第２検知領域における第２検知位置とを算出し、前記第１及び第２検知位置に基づいて、前記空中像がタッチされたか否かを判定する判定部と
を具備する空中表示装置。
【請求項2】
前記判定部は、前記第１及び第２検知位置に基づいて、前記対象物が移動する移動方向を判定し、前記移動方向の延長線上に前記画像が存在する場合に、前記空中像がタッチされたと判定する
請求項１に記載の空中表示装置。
請求項１に記載の空中表示装置。
【請求項3】
前記センシング素子は、静電容量型である
請求項１に記載の空中表示装置。
請求項１に記載の空中表示装置。
【請求項4】
前記センシング素子は、複数の第１電極と、前記複数の第１電極に対向して配置された複数の第２電極と、前記複数の第１電極に駆動信号を供給する駆動回路と、前記複数の第２電極の電圧を検出する検出回路とを含み、
前記判定部は、前記検出回路による検出結果と閾値とを比較し、比較結果に応じて前記対象物の位置を判定する
請求項３に記載の空中表示装置。
前記判定部は、前記検出回路による検出結果と閾値とを比較し、比較結果に応じて前記対象物の位置を判定する
請求項３に記載の空中表示装置。
【請求項5】
前記センシング素子は、前記第１検知領域を形成する第１センシング素子と、前記第２検知領域を形成する第２センシング素子とを含み、
前記第１センシング素子及び前記第２センシング素子の各々は、前記検知領域に向けて光を発光する発光部と、前記対象物で反射された反射光を受光する受光部とを含む
請求項１に記載の空中表示装置。
前記第１センシング素子及び前記第２センシング素子の各々は、前記検知領域に向けて光を発光する発光部と、前記対象物で反射された反射光を受光する受光部とを含む
請求項１に記載の空中表示装置。
【請求項6】
前記光学素子は、平面状の基材と、前記基材の下に設けられ、それぞれが第１方向に延び、前記第１方向に直交する第２方向に並んだ複数の光学要素とを含み、
前記複数の光学要素の各々は、前記基材の法線方向に対してそれぞれが傾き、互いに接する入射面及び反射面を有する
請求項１に記載の空中表示装置。
前記複数の光学要素の各々は、前記基材の法線方向に対してそれぞれが傾き、互いに接する入射面及び反射面を有する
請求項１に記載の空中表示装置。
【請求項7】
前記表示素子と前記光学素子との間に配置され、前記表示素子からの光のうち斜め方向の光成分を透過する光制御素子をさらに具備する
請求項１に記載の空中表示装置。
請求項１に記載の空中表示装置。
【請求項8】
前記光制御素子は、交互に配置された複数の透明部材及び複数の遮光部材を含み、
前記複数の遮光部材は、前記光制御素子の法線に対して傾いている
請求項７に記載の空中表示装置。
前記複数の遮光部材は、前記光制御素子の法線に対して傾いている
請求項７に記載の空中表示装置。
【請求項9】
前記表示素子及び前記光学素子は、互いに平行に配置される
請求項１に記載の空中表示装置。
請求項１に記載の空中表示装置。
【請求項10】
画像を表示する表示素子と、
前記表示素子の上方に、前記表示素子と平行な第１検知領域と、前記第１検知領域と異なるレベルの第２検知領域とを形成し、前記第１及び第２検知領域に存在する対象物を検知するセンシング素子と、
前記第１検知領域における第１検知位置と、前記第２検知領域における第２検知位置とを算出し、前記第１及び第２検知位置に基づいて、前記画像がタッチされたか否かを判定する判定部と
を具備する表示装置。
前記表示素子の上方に、前記表示素子と平行な第１検知領域と、前記第１検知領域と異なるレベルの第２検知領域とを形成し、前記第１及び第２検知領域に存在する対象物を検知するセンシング素子と、
前記第１検知領域における第１検知位置と、前記第２検知領域における第２検知位置とを算出し、前記第１及び第２検知位置に基づいて、前記画像がタッチされたか否かを判定する判定部と
を具備する表示装置。
【請求項11】
前記判定部は、前記第１及び第２検知位置に基づいて、前記対象物が移動する移動方向を判定し、前記移動方向の延長線上に前記画像が存在する場合に、前記画像がタッチされたと判定する
請求項１０に記載の表示装置。
請求項１０に記載の表示装置。
【請求項12】
前記センシング素子は、静電容量型である
請求項１０に記載の表示装置。
請求項１０に記載の表示装置。
【請求項13】
前記センシング素子は、複数の第１電極と、前記複数の第１電極に対向して配置された複数の第２電極と、前記複数の第１電極に駆動信号を供給する駆動回路と、前記複数の第２電極の電圧を検出する検出回路とを含み、
前記判定部は、前記検出回路による検出結果と閾値とを比較し、比較結果に応じて前記対象物の位置を判定する
請求項１２に記載の表示装置。
前記判定部は、前記検出回路による検出結果と閾値とを比較し、比較結果に応じて前記対象物の位置を判定する
請求項１２に記載の表示装置。
【請求項14】
前記センシング素子は、前記第１検知領域を形成する第１センシング素子と、前記第２検知領域を形成する第２センシング素子とを含み、
前記第１センシング素子及び前記第２センシング素子の各々は、前記検知領域に向けて光を発光する発光部と、前記対象物で反射された反射光を受光する受光部とを含む
請求項１０に記載の表示装置。
前記第１センシング素子及び前記第２センシング素子の各々は、前記検知領域に向けて光を発光する発光部と、前記対象物で反射された反射光を受光する受光部とを含む
請求項１０に記載の表示装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、空中表示装置及び表示装置に関する。
【背景技術】
【0002】
画像や動画などを空中像として表示可能な空中表示装置が研究され、新しいヒューマン・マシン・インターフェースとして期待されている。空中表示装置は、例えば、２面コーナーリフレクタがアレイ状に配列された２面コーナーリフレクタアレイを備え、表示素子の表示面から出射される光を反射し、空中に実像を結像する。２面コーナーリフレクタアレイによる表示方法は、収差が無く、面対称位置に実像（空中像）を表示することができる。
【0003】
特許文献１は、透明平板の表面から突出した透明な四角柱を２面コーナーリフレクタとして使用し、複数の四角柱を平面上にアレイ状に配置した光学素子を開示している。また、特許文献２は、第１及び第２光制御パネルの各々を、透明平板の内部に垂直に複数の平面光反射部を並べて形成し、第１及び第２光制御パネルを、互いの平面光反射部が直交するように配置した光学素子を開示している。特許文献１、２の光学素子は、表示素子から出射された光を直交する反射面で２回反射させ、空中像を生成している。
【0004】
観察者は、機器に接触することなく、空中表示装置が表示した空中像をタッチすることが可能である。空中表示装置が備えるセンシング素子は、空中像の領域に存在する物体を検知し、観察者が空中像をタッチしたことを認識する。センシング素子には、観察者による空中像へのタッチ操作をより正確に検知することが要求される。
【先行技術文献】
【特許文献】
【0005】
【特許文献1】特開２０１１－１９１４０４号公報
【特許文献2】特開２０１１－１７５２９７号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
本発明は、観察者による空中像へのタッチ操作をより正確に検知することが可能な空中表示装置及び表示装置を提供する。
【課題を解決するための手段】
【0007】
本発明の第１態様によると、画像を表示する表示素子と、前記表示素子からの光を受けるように配置され、前記表示素子からの光を、前記表示素子と反対側に反射し、空中に空中像を結像する光学素子と、前記光学素子の上方に、前記表示素子と平行な第１検知領域と、前記第１検知領域と異なるレベルの第２検知領域とを形成し、前記第１及び第２検知領域に存在する対象物を検知するセンシング素子と、前記第１検知領域における第１検知位置と、前記第２検知領域における第２検知位置とを算出し、前記第１及び第２検知位置に基づいて、前記空中像がタッチされたか否かを判定する判定部とを具備する空中表示装置が提供される。
【0008】
本発明の第２態様によると、前記判定部は、前記第１及び第２検知位置に基づいて、前記対象物が移動する移動方向を判定し、前記移動方向の延長線上に前記画像が存在する場合に、前記空中像がタッチされたと判定する、第１態様に係る空中表示装置が提供される。
【0009】
本発明の第３態様によると、前記センシング素子は、静電容量型である、第１態様に係る空中表示装置が提供される。
【0010】
本発明の第４態様によると、前記センシング素子は、複数の第１電極と、前記複数の第１電極に対向して配置された複数の第２電極と、前記複数の第１電極に駆動信号を供給する駆動回路と、前記複数の第２電極の電圧を検出する検出回路とを含み、前記判定部は、前記検出回路による検出結果と閾値とを比較し、比較結果に応じて前記対象物の位置を判定する、第３態様に係る空中表示装置が提供される。
【0011】
本発明の第５態様によると、前記センシング素子は、前記第１検知領域を形成する第１センシング素子と、前記第２検知領域を形成する第２センシング素子とを含み、前記第１センシング素子及び前記第２センシング素子の各々は、前記検知領域に向けて光を発光する発光部と、前記対象物で反射された反射光を受光する受光部とを含む、第１態様に係る空中表示装置が提供される。
【0012】
本発明の第６態様によると、前記光学素子は、平面状の基材と、前記基材の下に設けられ、それぞれが第１方向に延び、前記第１方向に直交する第２方向に並んだ複数の光学要素とを含み、前記複数の光学要素の各々は、前記基材の法線方向に対してそれぞれが傾き、互いに接する入射面及び反射面を有する、第１態様に係る空中表示装置が提供される。
【0013】
本発明の第７態様によると、前記表示素子と前記光学素子との間に配置され、前記表示素子からの光のうち斜め方向の光成分を透過する光制御素子をさらに具備する、第１態様に係る空中表示装置が提供される。
【0014】
本発明の第８態様によると、前記光制御素子は、交互に配置された複数の透明部材及び複数の遮光部材を含み、前記複数の遮光部材は、前記光制御素子の法線に対して傾いている、第７態様に係る空中表示装置が提供される。
【0015】
本発明の第９態様によると、前記表示素子及び前記光学素子は、互いに平行に配置される、第１態様に係る空中表示装置が提供される。
【0016】
本発明の第１０態様によると、画像を表示する表示素子と、前記表示素子の上方に、前記表示素子と平行な第１検知領域と、前記第１検知領域と異なるレベルの第２検知領域とを形成し、前記第１及び第２検知領域に存在する対象物を検知するセンシング素子と、前記第１検知領域における第１検知位置と、前記第２検知領域における第２検知位置とを算出し、前記第１及び第２検知位置に基づいて、前記画像がタッチされたか否かを判定する判定部とを具備する表示装置が提供される。
【0017】
本発明の第１１態様によると、前記判定部は、前記第１及び第２検知位置に基づいて、前記対象物が移動する移動方向を判定し、前記移動方向の延長線上に前記画像が存在する場合に、前記画像がタッチされたと判定する、第１０態様に係る表示装置が提供される。
【0018】
本発明の第１２態様によると、前記センシング素子は、静電容量型である、第１０態様に係る表示装置が提供される。
【0019】
本発明の第１３態様によると、前記センシング素子は、複数の第１電極と、前記複数の第１電極に対向して配置された複数の第２電極と、前記複数の第１電極に駆動信号を供給する駆動回路と、前記複数の第２電極の電圧を検出する検出回路とを含み、前記判定部は、前記検出回路による検出結果と閾値とを比較し、比較結果に応じて前記対象物の位置を判定する、第１２態様に係る表示装置が提供される。
【0020】
本発明の第１４態様によると、前記センシング素子は、前記第１検知領域を形成する第１センシング素子と、前記第２検知領域を形成する第２センシング素子とを含み、前記第１センシング素子及び前記第２センシング素子の各々は、前記検知領域に向けて光を発光する発光部と、前記対象物で反射された反射光を受光する受光部とを含む、第１０態様に係る表示装置が提供される。
【発明の効果】
【0021】
本発明によれば、観察者による空中像へのタッチ操作をより正確に検知することが可能な空中表示装置及び表示装置を提供することができる。
【図面の簡単な説明】
【0022】
【発明を実施するための形態】
【0023】
以下、実施形態について図面を参照して説明する。ただし、図面は模式的または概念的なものであり、各図面の寸法および比率等は必ずしも現実のものと同一とは限らない。また、図面の相互間で同じ部分を表す場合においても、互いの寸法の関係や比率が異なって表される場合もある。特に、以下に示す幾つかの実施形態は、本発明の技術思想を具体化するための装置および方法を例示したものであって、構成部品の形状、構造、配置等によって、本発明の技術思想が特定されるものではない。なお、以下の説明において、同一の機能及び構成を有する要素については同一符号を付し、重複する説明は省略する。
【0024】
［１］ 第１実施形態
［１－１］ 空中表示装置１の構成
図１は、本発明の第１実施形態に係る空中表示装置１の斜視図である。図１において、Ｘ方向は、空中表示装置１のある１辺に沿った方向であり、Ｙ方向は、水平面内においてＸ方向に直交する方向であり、Ｚ方向は、ＸＹ面に直交する方向（法線方向ともいう）である。図２は、図１に示した空中表示装置１のＸＺ面における側面図である。
［１－１］ 空中表示装置１の構成
図１は、本発明の第１実施形態に係る空中表示装置１の斜視図である。図１において、Ｘ方向は、空中表示装置１のある１辺に沿った方向であり、Ｙ方向は、水平面内においてＸ方向に直交する方向であり、Ｚ方向は、ＸＹ面に直交する方向（法線方向ともいう）である。図２は、図１に示した空中表示装置１のＸＺ面における側面図である。
【0025】
空中表示装置１は、画像（動画を含む）を表示する装置である。空中表示装置１は、自身の光出射面の上方の空中に、空中像を表示する。空中表示装置１の光出射面とは、空中表示装置１を構成しかつ光路上に配置された複数の部材のうち最上層に配置された部材の上面を意味する。空中像とは、空中に結像する実像である。
【0026】
空中表示装置１は、照明素子（バックライトともいう）１０、表示素子２０、光制御素子３０、光学素子４０、及びセンシング素子５０を備える。照明素子１０、表示素子２０、光制御素子３０、光学素子４０、及びセンシング素子５０は、この順にＺ方向に沿って配置され、互いに平行に配置される。照明素子１０、表示素子２０、光制御素子３０、光学素子４０、及びセンシング素子５０は、互いに特定の間隔を空けるようにして、図示せぬ固定部材で特定の位置に固定される。照明素子１０、表示素子２０、光制御素子３０、光学素子４０、及びセンシング素子５０は、図示せぬ筐体に収容される。
【0027】
照明素子１０は、照明光を発光し、この照明光を表示素子２０に向けて出射する。照明素子１０は、光源部１１、導光板１２、及び反射シート１３を備える。照明素子１０は、例えばサイドライト型の照明素子である。照明素子１０は、面光源を構成する。照明素子１０は、後述する角度θ１の斜め方向に光強度がピークになるように構成してもよい。
【0028】
光源部１１は、導光板１２の側面に向き合うように配置される。光源部１１は、導光板１２の側面に向けて光を発光する。光源部１１は、例えば白色ＬＥＤ（Light Emitting Diode）からなる複数の発光素子を含む。導光板１２は、光源部１１からの照明光を導光し、照明光を自身の上面から出射する。反射シート１３は、導光板１２の底面から出射した照明光を、再び導光板１２に向けて反射する。照明素子１０は、導光板１２の上面に、光学特性を向上させる部材（プリズムシート、及び拡散シートを含む）を備えていてもよい。
【0029】
表示素子２０は、透過型の表示素子である。表示素子２０は、例えば液晶表示素子で構成される。表示素子２０の駆動モードについては特に限定されず、ＴＮ（Twisted Nematic）モード、ＶＡ（Vertical Alignment）モード、又はホモジニアスモードなどを用いることができる。表示素子２０は、照明素子１０から出射された照明光を受ける。表示素子２０は、照明素子１０からの照明光を透過して光変調を行う。そして、表示素子２０は、自身の画面に特定の画像を表示する。
【0030】
光制御素子３０は、不要光を低減する機能を有する。不要光とは、空中像を生成するのに寄与しない光成分であり、法線方向に光学素子４０を透過する光成分を含む。光制御素子３０は、法線方向に対して角度θ１の斜め方向を中心として所定の角度範囲の光成分を透過するとともに、上記角度範囲以外の光成分を遮光するように構成される。光制御素子３０の面積は、表示素子２０の面積以上に設定される。光制御素子３０の詳細な構成については後述する。
【0031】
光学素子４０は、底面側から入射した光を上面側に反射する。また、光学素子４０は、底面側から斜めに入射した入射光を、例えば正面方向（法線方向）に反射する。光学素子４０の面積は、表示素子２０の面積以上に設定される。光学素子４０の詳細な構成については後述する。光学素子４０は、空中に空中像２を結像する。空中像２は、光学素子４０の素子面に平行であり、２次元の画像である。素子面とは、光学素子４０が面内方向に広がる仮想的な平面を言う。素子面は、面内と同じ意味である。その他の素子の素子面についても同様の意味である。光学素子４０の正面にいる観察者３は、空中像２を視認することができる。
【0032】
センシング素子５０は、非接触で対象物を検知可能なように構成される。センシング素子５０は、空中表示装置１が生成した空中像２の一部又は全部を含む２次元の空間領域に、検知領域を形成する。センシング素子５０は、検知領域に存在する対象物（物体）を検知するとともに、対象物の位置を検知する。本実施形態では、静電容量型のセンシング素子を例に挙げて説明する。図１では、センシング素子５０が光学素子５０から離れて図示されているが、例えば、センシング素子５０は、光学素子５０の上面に近接して配置される。センシング素子５０の面積は、表示素子２０の面積以上に設定される。センシング素子５０の詳細な構成については後述する。
【0033】
【0034】
基材３１は、ＸＹ面において平面状に構成され、直方体を有する。基材３１は、光を透過する。
【0035】
基材３１上には、それぞれがＹ方向に延び、Ｘ方向に並んだ複数の透明部材３３が設けられる。また、基材３１上には、それぞれがＹ方向に延び、Ｘ方向に並んだ複数の遮光部材３４が設けられる。複数の透明部材３３と複数の遮光部材３４とは、隣接するもの同士が接するようにして交互に配置される。
【0036】
複数の透明部材３３及び複数の遮光部材３４上には、基材３２が設けられる。基材３２は、ＸＹ面において平面状に構成され、直方体を有する。基材３２は、光を透過する。
【0037】
透明部材３３は、ＸＺ面において、基材３１の法線方向に対して角度θ１の斜め方向に延びる。透明部材３３は、ＸＺ面において、側面が角度θ１だけ傾いた平行四辺形である。透明部材３３は、光を透過する。
【0038】
遮光部材３４は、ＸＺ面において、基材３１の法線方向に対して角度θ１の斜め方向に延びる。遮光部材３４は、ＸＺ面において、側面が角度θ１だけ傾いた平行四辺形である。遮光部材３４は、光を遮光する。遮光部材３４の厚みは、透明部材３３の厚みより薄く設定される。
【0039】
隣接する２個の遮光部材３４は、Ｚ方向において互いの端部が若干重なるように配置される。
【0040】
基材３１、３２、及び透明部材３３としては、ガラス、又は透明な樹脂（アクリル樹脂を含む）が用いられる。遮光部材３４としては、例えば、黒色の染料又は顔料が混入された樹脂が用いられる。
【0041】
なお、基材３１、３２の一方又は両方を省略して、光制御素子３０を構成してもよい。複数の透明部材３３と複数の遮光部材３４とが交互に配置されていれば、光制御素子３０の機能を実現できる。
【0042】
このように構成された光制御素子３０は、法線方向に対して角度θ１の斜め方向の光強度がピークになるように、表示光を透過することができる。例えば、光制御素子３０は、法線方向に対して３０°±３０°の範囲以外の光成分を遮光するように構成される。望ましくは、光制御素子３０は、法線方向に対して３０°±２０°の範囲以外の光成分を遮光するように構成される。
【0043】
なお、変形例として、光制御素子３０は、照明素子１０と表示素子２０との間に配置してもよい。また、光制御素子３０を省略して、空中表示装置１を構成してもよい。
【0044】
【0045】
光学素子４０は、基材４１、及び複数の光学要素４２を備える。基材４１は、ＸＹ面において平面状に構成され、直方体を有する。
【0046】
基材４１の底面には、複数の光学要素４２が設けられる。複数の光学要素４２の各々は、三角柱で構成される。光学要素４２は、三角柱の３個の側面がＸＹ面と平行になるように配置され、１つの側面が基材４１に接する。複数の光学要素４２は、それぞれがＹ方向に延び、Ｘ方向に並んで配置される。換言すると、複数の光学要素４２は、ＸＺ面において鋸歯状を有する。
【0047】
複数の光学要素４２の各々は、入射面４３及び反射面４４を有する。Ｙ方向から見て、左側の側面が入射面４３であり、右側の側面が反射面４４である。入射面４３は、表示素子２０からの光が入射する面である。反射面４４は、入射面４３に外部から入射した光を、光学要素４２の内部で反射する面である。入射面４３と反射面４４とは、角度θｐを有する。
【0048】
基材４１及び光学要素４２は、透明材料で構成される。光学要素４２は、例えば、基材４１と同じ透明材料によって基材４１と一体的に形成される。基材４１と光学要素４２とを個別に形成し、透明な接着材を用いて基材４１に光学要素４２を接着してもよい。基材４１及び光学要素４２を構成する透明材料としては、ガラス、又は透明な樹脂（アクリル樹脂を含む）が用いられる。
【0049】
このように構成された光学素子４０は、入射光を内部で反射して、空中に実像を結像する。また、光学素子４０は、素子面の正面の位置に、空中像２を結像する。
【0050】
［１－１－３］ センシング素子５０の構成
図５Ａは、図１に示したセンシング素子５０の斜視図である。図５Ｂは、図５Ａに示したセンシング素子５０の平面図である。図５Ｂには、センシング素子５０が備える回路構成も示している。図５Ｃは、図５Ｂに示したＢ－Ｂ´線に沿ったセンシング素子５０の断面図である。
図５Ａは、図１に示したセンシング素子５０の斜視図である。図５Ｂは、図５Ａに示したセンシング素子５０の平面図である。図５Ｂには、センシング素子５０が備える回路構成も示している。図５Ｃは、図５Ｂに示したＢ－Ｂ´線に沿ったセンシング素子５０の断面図である。
【0051】
センシング素子５０は、２個の基板５１、５２、複数の電極５３、複数の電極５４、及び絶縁層５５を備える。基板５１、５２は、透明かつ絶縁性を有する基板で構成され、ガラス基板又はプラスチック基板で構成される。
【0052】
基板５１上には、複数の電極５３が設けられる。複数の電極５３の各々の平面形状は、例えば正方形を有する。電極５３は、１本の対角線がＸ方向と平行になるように配置される。複数の電極５３は、マトリクス状に配置される。Ｙ方向に並んだ１列分の電極５３は、Ｙ方向に延びる複数の接続電極を介して電気的に接続される。Ｙ方向に並んだ１列分の電極５３は、Ｙ方向に延びる引き出し電極を介して信号線ＴＬに接続される。電極５３は、送信電極として機能する。
【0053】
基板５２上には、複数の電極５４が設けられる。複数の電極５４の各々の平面形状は、例えば正方形を有する。電極５４は、１本の対角線がＸ方向と平行になるように配置される。複数の電極５４は、マトリクス状に配置される。Ｘ方向に並んだ１行分の電極５４は、Ｘ方向に延びる複数の接続電極を介して電気的に接続される。Ｘ方向に並んだ１行分の電極５４は、Ｘ方向に延びる引き出し電極を介して信号線ＲＬに接続される。電極５４は、受信電極として機能する。
【0054】
複数の電極５３と複数の電極５４とは、平面視において重ならないように配置される。基板５１と基板５２とは、複数の電極５３と複数の電極５４とが向き合うように配置される。電極５３及び電極５４は、透明電極で構成され、例えばＩＴＯ（インジウム錫酸化物）で構成される。
【0055】
複数の電極５３と複数の電極５４との間には、絶縁層５５が設けられる。絶縁層５５は、透明な絶縁材料で構成される。絶縁層５５は、複数の層で構成してもよい。
【0056】
センシング素子５０は、駆動回路５６、及び検出回路５７をさらに備える。駆動回路５６は、複数の信号線ＴＬに接続される。駆動回路５６は、複数の信号線ＴＬの各々に、パルス波形からなる駆動信号を供給する。また、駆動回路５６は、複数の信号線ＴＬに順次パルスが印加されるように、駆動信号を生成する。
【0057】
検出回路５７は、複数の信号線ＲＬに接続される。検出回路５７は、複数の信号線ＲＬの電圧値を検出する。
【0058】
［１－１－４］ 空中表示装置１のブロック構成
図６は、空中表示装置１のブロック図である。空中表示装置１は、制御部６０、記憶部６１、入出力インターフェース（入出力ＩＦ）６２、表示部６３、センシング素子５０、及び入力部６４を備える。制御部６０、記憶部６１、及び入出力インターフェース６２は、バス６５を介して互いに接続される。
図６は、空中表示装置１のブロック図である。空中表示装置１は、制御部６０、記憶部６１、入出力インターフェース（入出力ＩＦ）６２、表示部６３、センシング素子５０、及び入力部６４を備える。制御部６０、記憶部６１、及び入出力インターフェース６２は、バス６５を介して互いに接続される。
【0059】
入出力インターフェース６２は、表示部６３、センシング素子５０、及び入力部６４に接続される。入出力インターフェース６２は、表示部６３、センシング素子５０、及び入力部６４のそれぞれに対して、所定の規格に応じたインターフェース処理を行う。
【0060】
表示部６３は、照明素子１０、及び表示素子２０を備える。表示部６３は、画像を表示する。
【0061】
センシング素子５０は、上方に複数の検知領域を形成する。センシング素子５０は、電極５３と電極５４との間の静電容量の変化に基づいて、複数の検知領域に存在する対象物を検知する。
【0062】
制御部６０は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等の１つ以上のプロセッサにより構成される。制御部６０は、記憶部６１に格納されたプログラムを実行することで各種機能を実現する。制御部６０は、表示処理部６０Ａ、画像処理部６０Ｂ、及び検知位置判定部６０Ｃを備える。
【0063】
表示処理部６０Ａは、表示部６３（具体的には、照明素子１０、及び表示素子２０）の動作を制御する。表示処理部６０Ａは、照明素子１０のオン及びオフを制御する。表示処理部６０Ａは、表示素子２０に画像信号を送信し、表示素子２０に画像を表示させる。
【0064】
画像処理部６０Ｂは、空中表示装置１が表示する画像を生成する。画像処理部６０Ｂは、記憶部６１に格納された画像データを用いることが可能である。画像処理部６０Ｂは、図示せぬ通信機能を用いて外部から画像データを取得してもよい。
【0065】
検知位置判定部６０Ｃは、センシング素子５０の動作を制御する。検知位置判定部６０Ｃは、センシング素子５０の検知結果に基づいて、複数の検知領域ごとに、対象物が検知された検知位置を算出する。検知位置判定部６０Ｃは、複数の検知位置に基づいて、対象物が移動する方向（ベクトル）を判定する。検知位置判定部６０Ｃは、対象物が移動する方向の延長線と、表示素子２０の表示面との交点の位置を算出する。検知位置判定部６０Ｃは、算出した表示面上の位置が、表示素子２０の画像の領域に含まれるか否かを判定する。
【0066】
記憶部６１は、ＲＯＭ（Read Only Memory）、ＨＤＤ（Hard Disk Drive）、及びＳＳＤ（Solid State Drive）等の不揮発性記憶装置と、ＲＡＭ（Random Access Memory）、及びレジスタ等の揮発性記憶装置とを含む。記憶部６１は、制御部６０が実行するプログラムを格納する。記憶部６１は、制御部６０の制御に必要な各種データを格納する。記憶部６１は、空中表示装置１が表示する画像のデータを格納する。
【0067】
入力部６４は、例えばタッチパネルやボタンなどを含み、ユーザが入力した情報を受け付ける。画像処理部６０Ｂは、入力部６４が受け付けた情報に基づいて、表示部６３に表示する画像を選択することが可能である。
【0068】
［１－２］ 動作
次に、上記のように構成された空中表示装置１の動作について説明する。
次に、上記のように構成された空中表示装置１の動作について説明する。
【0069】
［１－２－１］ 空中表示装置１の基本動作
まず、空中表示装置１の基本動作について説明する。
まず、空中表示装置１の基本動作について説明する。
【0070】
図２の矢印は、光路を示している。図２に示すように、表示素子２０の任意の点“ｏ”から出射された光は、光制御素子３０に入射する。表示素子２０から出射された光のうち角度θ１の光成分（角度θ１を中心とした所定の角度範囲の光成分を含む）は、光制御素子３０を透過する。光制御素子３０を透過した光は、光学素子４０に入射する。光学素子４０は、入射光を、光制御素子３０と反対側に反射し、空中に空中像２を結像する。
【0071】
図７は、光学素子４０における光の反射の様子を説明する斜視図である。図８は、光学素子４０における光の反射の様子を説明するＸＺ面の側面図である。図８は、観察者３の両目（すなわち、両目を結ぶ線）がＸ方向に平行な状態で光学素子４０を見た図である。図９は、光学素子４０における光の反射の様子を説明するＹＺ面の側面図である。図９は、観察者３の両目がＹ方向に平行な状態で光学素子４０を見た図である。
【0072】
表示素子２０の任意の点“ｏ”から出射された光は、光学素子４０の入射面４３に入射し、反射面４４に到達する。反射面４４の法線方向に対して臨界角よりも大きい角度で反射面４４に到達した光は、反射面４４で全反射され、光学素子４０の光学要素４２が形成されている側と反対側の平面から出射される。臨界角とは、その入射角を超えると全反射する最少の入射角である。臨界角は、入射面の垂線に対する角度である。
【0073】
図８のＸＺ面では、点“ｏ”から出射された光は、光学要素４２の反射面４４で全反射され、その光は空中で結像されて空中像を生成する。
【0074】
図９のＹＺ面では、点“ｏ”から出射された光は、光学要素４２の反射面４４で反射されず、その光は空中で結像することがないため空中像の生成に寄与しない。
【0075】
すなわち、観察者３が空中像を視認できる条件は、観察者３の両眼がＸ方向に平行、又はそれに近い状態（例えばＸ方向に対して±１０度）である。また、観察者３の両眼がＸ方向に平行、又はそれに近い状態でＹ方向に沿って視点を移動した場合、観察者３は、空中像を常に認識することができる。
【0076】
図１０は、光学素子４０における入射面４３及び反射面４４の角度条件を説明する図である。
【0077】
Ｚ方向（素子面に垂直な方向）に対する入射面４３の角度をθ２、Ｚ方向に対する反射面４４の角度をθ３、入射面４３と反射面４４とのなす角度をθｐとする。角度をθｐは、以下の式（１）で表される。
θｐ＝θ２＋θ３ ・・・（１）
θｐ＝θ２＋θ３ ・・・（１）
【0078】
光制御素子３０から角度θ１で出射された光は、入射面４３に入射する。光学素子４０の材料の屈折率をｎｐ、空気の屈折率を１とする。入射面４３における入射角をθ４、屈折角をθ５とする。反射面４４における入射角をθ６、反射角をθ７（＝θ６）とする。光学素子４０の上面における入射角をθ８、屈折角をθ９とする。屈折角θ９が出射角である。出射角θ９は、以下の式（２）で表される。
θ９＝sin－１（ｎｐ＊sin（sin－１（（１／ｎｐ）＊sin(９０°－（θ１＋θ２）））＋θ2＋２θ３－９０°）） ・・・（２）
θ９＝sin－１（ｎｐ＊sin（sin－１（（１／ｎｐ）＊sin(９０°－（θ１＋θ２）））＋θ2＋２θ３－９０°）） ・・・（２）
【0079】
反射面４４における臨界角は、以下の式（３）で表される。
臨界角＜θ６（＝θ７）
臨界角＝sin－１（１／ｎｐ） ・・・（３）
臨界角＜θ６（＝θ７）
臨界角＝sin－１（１／ｎｐ） ・・・（３）
【0080】
すなわち、反射面４４における入射角θ６は、反射面４４における臨界角より大きく設定される。換言すると、反射面４４の角度θ３は、反射面４４に入射する光の入射角が臨界角より大きくなるように設定される。
【0081】
また、入射面４３に入射した光は、入射面４３で全反射されないように設定される。すなわち、入射面４３の角度θ２は、入射面４３に入射する光の入射角が臨界角より小さくなるように設定される。
【0082】
光学素子４０の素子面と空中像２の面との角度、及び光学素子４０の素子面と空中像２の面との距離は、光学素子４０に入射する光の角度θ１、光学素子４０の屈折率、光学素子４０の入射面４３の角度θ２、光学素子４０の反射面４４の角度θ３を最適に設定することで調整が可能である。
【0083】
［１－２－２］ センシング素子５０の動作
次に、センシング素子５０の動作について説明する。
次に、センシング素子５０の動作について説明する。
【0084】
図１１は、センシング素子５０の動作を説明する模式図である。
【0085】
駆動回路５６は、信号線ＴＬを介して電極５３に駆動信号を供給する。駆動信号は、所定の周期を有するパルス波形からなる。電極５３と電極５４とは容量結合しており、両者の間には電界が発生している。検出回路５７は、電極５４の電圧値を検出可能なように構成される。
【0086】
観察者３の指３Ａは、接地電圧ＧＮＤを有する。対象物（例えば、観察者３の指３Ａ）がセンシング素子５０に近づくと、対象物と電極５３とが容量結合する。この場合、電極５３と電極５４との間の容量値が変化する。具体的には、対象物と電極５３とが容量結合すると、電極５３と電極５４との間の容量値が減少する。電極５３と電極５４との間の容量値が変化すると、電極５４の電圧が変化する。検出回路５７は、電極５４の電圧値を検出する。
【0087】
図１２は、センシング素子５０の複数の検知領域を説明する模式図である。
【0088】
センシング素子５０は、検出した電圧値に基づいて、複数の検知領域を形成することができる。ここでいう検知領域とは、センシング素子５０が検知可能な２次元の領域であり、センシング素子５０の上面と平行な領域である。複数の検知領域は、センシング素子５０の上面からの高さ（レベル）が異なる。図１２では、４個の検知領域ＤＥ１～ＤＥ４を一例として示している。
【0089】
【0090】
検出回路５７は、複数の信号線ＲＬの電圧を検出する。検出回路５７により検出された複数の電圧は、検知位置判定部６０Ｃに送られる。検知位置判定部６０Ｃは、検出回路５７により検出された電圧値と閾値Ｔｈ１～Ｔｈ４とを比較する。検知位置判定部６０Ｃは、電圧値が、閾値Ｔｈ１以上かつ閾値Ｔｈ２未満である場合、対象物が検知領域ＤＥ１に存在すると判定する。検知位置判定部６０Ｃは、電圧値が、閾値Ｔｈ２以上かつ閾値Ｔｈ３未満である場合、対象物が検知領域ＤＥ２に存在すると判定する。検知位置判定部６０Ｃは、電圧値が、閾値Ｔｈ３以上かつ閾値Ｔｈ４未満である場合、対象物が検知領域ＤＥ３に存在すると判定する。検知位置判定部６０Ｃは、電圧値が、閾値Ｔｈ４以上である場合、対象物が検知領域ＤＥ４に存在すると判定する。
【0091】
このように、センシング素子５０は、自身の上方の空中の複数のレベルで対象物を検知することができる。
【0092】
［１－２－３］ 空中表示装置１の検知動作
次に、空中表示装置１の検知動作について説明する。
次に、空中表示装置１の検知動作について説明する。
【0093】
図１４は、空中表示装置１が表示する空中像２を説明する模式図である。空中表示装置１は、筐体４を備える。筐体４は、照明素子１０、表示素子２０、光制御素子３０、光学素子４０、及びセンシング素子５０を収容する。筐体４は、上部にセンシング素子５０を露出する開口部を有する。図１４において、鉛直方向がＹ方向になるように、空中表示装置１を配置している。
【0094】
空中表示装置１は、空中に空中像２を表示する。図１４では、空中像２として、押しボタンを一例として示している。観察者３は、自身の指３Ａで押しボタンを押す。センシング素子５０は、空中像２を含む２次元の空間に検知領域を形成し、観察者３が指３Ａで押しボタンを押した場合に、指３Ａを検知する。
【0095】
図１５は、観察者３の視点の位置に応じて空中像２の位置が変化する様子を説明する模式図である。
【0096】
光学素子４０の構造に起因した作用として、観察者３がＹ方向に沿って視点を動かした場合、観察者３の視点を追うように空中像２の位置が変化する。図面の上方向に観察者３の視点が移動すると、空中像２も上方向に移動し、図面の下方向に観察者３の視点が移動すると、空中像２も下方向に移動する。すなわち、空中像２は常に観察者３の正面に位置する。
【0097】
【0098】
表示素子２０は、自身の画面に画像２１を表示する。画像２１は、例えば押しボタンである。空中表示装置１は、表示素子２０の上面の平行な２次元の空間領域に空中像２を表示する。
【0099】
センシング素子５０は、空中像２と平行な２次元の空間領域に複数の検知領域を形成する。本実施形態では、センシング素子５０は、２個の検知領域を形成する場合を例に説明する。センシング素子５０は、センシング素子５０から遠い側から順に、検知領域ＤＥ１、及び検知領域ＤＥ２を形成する。検知領域ＤＥ２は、空中像２と同じ２次元の空間領域、すなわち、空中像２と重なるように設定される。
【0100】
観察者３は、自身の指３Ａで空中像２をタッチするものとする。観察者３の指３Ａは、検知領域ＤＥ１、及び検知領域ＤＥ２を通過する。センシング素子５０は、検知領域ＤＥ１、及び検知領域ＤＥ２のそれぞれにおいて、対象物を検知する。
【0101】
センシング素子５０の上面を座標の基準面とする。本実施形態における座標とは、物体の空間での位置を定めるものであり、物体の位置と同じ意味である。画像２１の座標を（ｘ，ｙ，ｚ）とする。検知領域ＤＥ１における対象物の検知位置の座標を（ｘ１，ｙ１，ｚ１）、検知領域ＤＥ２における対象物の検知位置の座標を（ｘ２，ｙ２，ｚ２）とする。図１６に示すように、観察者３の視点の位置に応じて、検知領域ＤＥ１、ＤＥ２における対象物の検知位置が異なる。
【0102】
空間における直線の方程式より、以下の式（４）が成り立つ。
（ｘ－ｘ１）／（ｘ２－ｘ１）＝（ｙ－ｙ１）／（ｙ２－ｙ１）＝（ｚ－ｚ１）／（ｚ２－ｚ１） ・・・（４）
（ｘ－ｘ１）／（ｘ２－ｘ１）＝（ｙ－ｙ１）／（ｙ２－ｙ１）＝（ｚ－ｚ１）／（ｚ２－ｚ１） ・・・（４）
【0103】
押しボタンの押下時、Ｘ方向のズレは僅少であると仮定する。すなわち、Ｘ座標において、以下の式（５）が成り立つ。
ｘ１＝ｘ２（＝ｘ） ・・・（５）
ｘ１＝ｘ２（＝ｘ） ・・・（５）
【0104】
式（４）から、Ｙ座標において、以下の式（６）が成り立つ。
ｙ＝ｙ１＋（ｚ－ｚ１）＊（ｙ２－ｙ１）／（ｚ２－ｚ１） ・・・（６）
ｙ＝ｙ１＋（ｚ－ｚ１）＊（ｙ２－ｙ１）／（ｚ２－ｚ１） ・・・（６）
【0105】
検知位置判定部６０Ｃは、センシング素子５０が検出した電圧値に基づいて、対象物の位置を判定する。検知位置判定部６０Ｃによる検知位置は、検知領域ＤＥ１、ＤＥ２における座標を含む。ｚ１は、基準面から検知領域ＤＥ１までの距離であり、ｚ２は、基準面から検知領域ＤＥ２までの距離である。ｚ１及びｚ２は、予め決められた設計値である。
【0106】
図１８は、Ｚ座標における画像２１の位置を算出する方法を説明する模式図である。図１８において、表示面は、表示素子２０の表示面であり、基準面は、センシング素子５０の上面であり、空中像面は、空中像２が表示される面である。
【0107】
前述したように、表示素子２０から角度θ１で出射した光が光学素子４０により観察者３の正面に反射される。表示素子２０と光学素子４０との距離をｌとする。距離ｌを規定する際の光学素子４０の基準面は、例えば光学素子４０の上面である。距離ｌは、予め決められた設計値である。
【0108】
Ｚ座標において、以下の式（７）が成り立つ。
ｚ＝ｌ／ｓｉｎθ１ ・・・（７）
ｚ＝ｌ／ｓｉｎθ１ ・・・（７）
【0109】
図１９は、Ｚ座標を補正した仮想表示面を説明する模式図である。仮想表示面とは、表示素子２０からの光が直線的に進むと仮定した場合に、表示素子２０の表示面の位置を補正した仮想的な表示面である。式（７）を用いて表示面の位置を補正すると、仮想表示面が得られる。仮想表示面に表示される画像の光は、仮想的に、Ｚ方向に進んで観察者３に観察される。
【0110】
式（５）～（７）から、仮想表示面での座標（ｘ，ｙ）が求められる。これまでの座標算出方法について、光制御素子３０、光学素子４０、及びセンシング素子５０の光学的影響（屈折率、厚みなど）は考慮に入れていないが、適宜追加及び補正を行えばよい。
【0111】
【0112】
仮想表示面２２の左上の角を座標（０，０）、仮想表示面２２の右下の角を座標（ｍ，ｎ）とする。画像２１の左上の角を座標（ｍ１，ｎ１）、画像２１の右下の角を座標（ｍ２，ｎ２）とする。
【0113】
検知位置判定部６０Ｃは、センシング素子５０の検出結果に基づいて、対象物の検知領域ＤＥ１、ＤＥ２における位置（ｘ１，ｙ１，ｚ１）、（ｘ２，ｙ２，ｚ２）を算出する。さらに、検知位置判定部６０Ｃは、位置（ｘ１，ｙ１，ｚ１）、（ｘ２，ｙ２，ｚ２）に基づいて、仮想表示面２２での位置（ｘ，ｙ）を算出する。
【0114】
換言すると、検知位置判定部６０Ｃは、位置（ｘ１，ｙ１，ｚ１）、（ｘ２，ｙ２，ｚ２）に基づいて、対象物が移動する移動方向（ベクトル）を判定する。検知位置判定部６０Ｃは、対象物の移動方向の延長線と仮想表示面２２との交点である位置（ｘ，ｙ）を算出する。検知位置判定部６０Ｃは、観察者３が視認する空中像２を結像する光の光路を逆に辿るように上記延長線を算出する。すなわち、検知位置判定部６０Ｃは、表示素子２０から斜めに出射して光学素子４０で反射される光路を逆に辿るように上記延長線を算出する。
【0115】
検知位置判定部６０Ｃは、算出した位置（ｘ，ｙ）が、画像２１の領域に含まれるか否かを判定する。画像２１の領域は、座標（ｍ１，ｎ１）と座標（ｍ２，ｎ２）とで規定される四角形の領域である。検知位置判定部６０Ｃは、算出した位置（ｘ，ｙ）が、画像２１の領域に含まれる場合、選択、すなわち空中像２が観察者３にタッチされたと判定する。一方、検知位置判定部６０Ｃは、算出した位置（ｘ，ｙ）が、画像２１の領域に含まれない場合、非選択、すなわち空中像２が観察者３にタッチされていないと判定する。
【0116】
［１－２－４］ 全体動作の流れ
次に、空中表示装置１における全体動作の流れについて説明する。図２１は、空中表示装置１における全体動作を説明するフローチャートである。
次に、空中表示装置１における全体動作の流れについて説明する。図２１は、空中表示装置１における全体動作を説明するフローチャートである。
【0117】
制御部６０は、空中像２を表示する（ステップＳ１００）。表示処理部６０Ａは、表示素子２０の画面に画像を表示させる。光学素子４０は、表示素子２０からの光を反射し、空中に空中像２を結像する。
【0118】
続いて、センシング素子５０は、センシング動作を実行する（ステップＳ１０１）。センシング素子５０の駆動回路５６は、複数の信号線ＴＬを介して、複数の電極５３に駆動信号を供給する。センシング素子５０の検出回路５７は、複数の信号線ＲＬを介して、複数の電極５４の電圧を検出する。そして、センシング素子５０は、検出した電圧と複数の閾値とを比較することで、検知領域ＤＥ１、ＤＥ２を形成する。
【0119】
続いて、検知位置判定部６０Ｃは、センシング素子５０からの信号に基づいて、対象物を検知したか否か判定する（ステップＳ１０２）。
【0120】
対象物を検知した場合（Ｓ１０２＝Ｙｅｓ）、検知位置判定部６０Ｃは、センシング素子５０の検知結果に基づいて、対象物の位置を算出する（ステップＳ１０３）。すなわち、検知位置判定部６０Ｃは、検知領域ＤＥ１における位置（ｘ１，ｙ１，ｚ１）、及び検知領域ＤＥ２における位置（ｘ２，ｙ２，ｚ２）を算出する。
【0121】
続いて、検知位置判定部６０Ｃは、表示素子２０の仮想表示面における対象物の位置を算出する（ステップＳ１０４）。
【0122】
続いて、検知位置判定部６０Ｃは、算出した対象物の位置が画像２１の領域に含まれるか否かを判定する（ステップＳ１０５）。
【0123】
対象物の位置が画像２１の領域に含まれる場合（Ｓ１０５＝Ｙｅｓ）、検知位置判定部６０Ｃは、観察者３により空中像２がタッチされたと判定する（ステップＳ１０６）。
【0124】
その後、制御部６０は、観察者３のタッチ操作に応じた動作を実行する。
【0125】
［１－３］ 第１実施形態の効果
第１実施形態では、センシング素子５０は、光学素子４０の上方に、表示素子２０と平行な複数の検知領域（検知領域ＤＥ１、ＤＥ２を含む）を形成し、複数の検知領域に存在する対象物を検知する。検知位置判定部６０Ｃは、センシング素子５０の検知結果に基づいて、対象物の移動方向（進行方向）を算出する。検知位置判定部６０Ｃは、算出した移動方向の延長線と表示素子２０の画面（表示面）とが交差する位置を算出する。そして、検知位置判定部６０Ｃは、延長線と画面とが交差する位置が、表示素子２０の画像の領域に含まれる場合に、観察者３が空中像をタッチしたと判定する。
第１実施形態では、センシング素子５０は、光学素子４０の上方に、表示素子２０と平行な複数の検知領域（検知領域ＤＥ１、ＤＥ２を含む）を形成し、複数の検知領域に存在する対象物を検知する。検知位置判定部６０Ｃは、センシング素子５０の検知結果に基づいて、対象物の移動方向（進行方向）を算出する。検知位置判定部６０Ｃは、算出した移動方向の延長線と表示素子２０の画面（表示面）とが交差する位置を算出する。そして、検知位置判定部６０Ｃは、延長線と画面とが交差する位置が、表示素子２０の画像の領域に含まれる場合に、観察者３が空中像をタッチしたと判定する。
【0126】
従って第１実施形態によれば、観察者３が空中表示装置１を見る位置に応じて空中像２の位置が変化した場合でも、空中像２の領域に存在する対象物を判定することができる。ひいては、観察者３による空中像２へのタッチ操作をより正確に検知することが可能な空中表示装置１を実現できる。
【0127】
また、空中表示装置１は、表示素子２０から出射された光を光学素子４０で反射させることで、空中に空中像２を表示することができる。また、空中表示装置１は、その正面方向において、光学素子４０の素子面に平行に空中像２を表示することができる。また、表示品質を向上させることが可能な空中表示装置１を実現できる。
【0128】
また、観察者３の両眼がＸ方向（すなわち、複数の光学要素４２が並ぶ方向）に平行、又はそれに近い状態で光学素子４０を見た場合に、観察者３は、空中像を視認することができる。また、観察者３の両眼がＸ方向に平行、又はそれに近い状態でＹ方向に沿って視点を移動した場合、空中像を常に視認することができる。また、観察者３の両眼がＸ方向に平行、又はそれに近い状態において、より広い視野角を実現できる。
【0129】
また、空中表示装置１を構成する複数の素子を平行に配置することができる。これにより、Ｚ方向に小型化が可能な空中表示装置１を実現できる。
【0130】
［２］ 第２実施形態
第２実施形態は、センシング素子５０を備えた表示装置７０の実施例である。表示装置７０は、自身の画面に画像を表示する一般的な表示装置である。
第２実施形態は、センシング素子５０を備えた表示装置７０の実施例である。表示装置７０は、自身の画面に画像を表示する一般的な表示装置である。
【0131】
図２２は、本発明の第２実施形態に係る表示装置７０の斜視図である。表示装置７０は、照明素子１０、表示素子２０、及びセンシング素子５０を備える。照明素子１０、表示素子２０、及びセンシング素子５０は、互いに平行に配置される。照明素子１０、表示素子２０、及びセンシング素子５０は、互いに特定の間隔を空けるようにして、図示せぬ固定部材で特定の位置に固定される。照明素子１０、表示素子２０、及びセンシング素子５０は、図示せぬ筐体に収容される。照明素子１０、表示素子２０、及びセンシング素子５０のそれぞれの構成は、第１実施形態と同じである。
【0132】
【0133】
表示素子２０は、自身の画面に画像２１を表示する。画像２１は、例えば押しボタンである。観察者３は、表示素子２０の画面に表示された画像２１を視認する。
【0134】
センシング素子５０は、上方に、表示素子２０と平行な２次元の空間領域に複数の検知領域を形成する。本実施形態では、センシング素子５０は、２個の検知領域を形成する場合を例に説明する。センシング素子５０は、センシング素子５０から遠い側から順に、検知領域ＤＥ１、及び検知領域ＤＥ２を形成する。センシング素子５０は、検知領域ＤＥ１、及び検知領域ＤＥ２のそれぞれにおいて、対象物を検知する。
【0135】
観察者３は、自身の指３Ａで画像２１を操作するものとする。観察者３の指３Ａは、検知領域ＤＥ１、及び検知領域ＤＥ２を通過する。センシング素子５０は、検知領域ＤＥ１、及び検知領域ＤＥ２のそれぞれにおいて、対象物を検知する。
【0136】
センシング素子５０の上面を座標の基準面とする。画像２１の座標を（ｘ，ｙ，ｚ）とする。検知領域ＤＥ１における対象物の検知位置の座標を（ｘ１，ｙ１，ｚ１）、検知領域ＤＥ２における対象物の検知位置の座標を（ｘ２，ｙ２，ｚ２）とする。図２３に示すように、観察者３の視点の位置に応じて、検知領域ＤＥ１、ＤＥ２における対象物の検知位置が異なる。
【0137】
第１実施形態と同様に、空間における直線の方程式より、上記式（４）が成り立つ。Ｘ座標及びＹ座標において、上記式（５）、（６）が成り立つ。
【0138】
Ｚ座標において、ｚは、基準面と表示素子２０との距離であり、ｚ１は、基準面と検知領域ＤＥ１との距離であり、ｚ２は、基準面と検知領域ＤＥ２との距離である。ｚ、ｚ１、ｚ２は、予め決められた設計値である。
【0139】
式（５）～（６）から、検知位置判定部６０Ｃは、表示素子２０上の座標（ｘ，ｙ）を算出する。換言すると、検知位置判定部６０Ｃは、位置（ｘ１，ｙ１，ｚ１）、（ｘ２，ｙ２，ｚ２）に基づいて、対象物が移動する移動方向（ベクトル）を判定する。検知位置判定部６０Ｃは、対象物の移動方向の延長線と表示素子２０の表示面との交点である位置（ｘ，ｙ）を算出する。これまでの座標算出方法について、センシング素子５０の光学的影響（屈折率、厚みなど）は考慮に入れていないが、適宜追加及び補正を行えばよい。
【0140】
次に、表示装置７０における全体動作の流れについて説明する。図２５は、表示装置７０における全体動作を説明するフローチャートである。表示装置７０のブロック図は、第１実施形態と同じである。
【0141】
表示処理部６０Ａは、表示素子２０の画面に画像を表示させる（ステップＳ２００）。続いて、センシング素子５０は、センシング動作を実行する（ステップＳ２０１）。センシング素子５０は、検知領域ＤＥ１、ＤＥ２を形成する。
【0142】
続いて、検知位置判定部６０Ｃは、センシング素子５０からの信号に基づいて、対象物を検知したか否か判定する（ステップＳ２０２）。
【0143】
対象物を検知した場合（Ｓ２０２＝Ｙｅｓ）、検知位置判定部６０Ｃは、対象物の位置を算出する（ステップＳ２０３）。すなわち、検知位置判定部６０Ｃは、検知領域ＤＥ１における位置（ｘ１，ｙ１，ｚ１）、及び検知領域ＤＥ２における位置（ｘ２，ｙ２，ｚ２）を算出する。
【0144】
続いて、検知位置判定部６０Ｃは、表示素子２０の画面（表示面）における対象物の位置を算出する（ステップＳ２０４）。
【0145】
続いて、検知位置判定部６０Ｃは、算出した対象物の位置が画像２１の領域に含まれるか否かを判定する（ステップＳ２０５）。
【0146】
対象物の位置が画像２１の領域に含まれる場合（Ｓ２０５＝Ｙｅｓ）、検知位置判定部６０Ｃは、観察者３により画像２１がタッチされたと判定する（ステップＳ２０６）。
【0147】
その後、制御部６０は、観察者３のタッチ操作に応じた動作を実行する。
【0148】
第２実施形態によれば、自身の画面に画像を表示する一般的な表示装置７０にセンシング素子５０を適用できる。また、表示装置７０は、非接触で対象物を検知することができる。
【0149】
［３］ 第３実施形態
第３実施形態は、センシング素子５０の他の構成例である。
第３実施形態は、センシング素子５０の他の構成例である。
【0150】
図２６は、本発明の第３実施形態に係る表示装置７０の斜視図である。表示装置７０は、複数のセンシング素子５０を備える。本実施形態では、２個のセンシング素子５０－１、５０－２を例に挙げて説明する。
【0151】
センシング素子５０－１、５０－２は、表示素子２０の上方に配置される。センシング素子５０－１、５０－２は、平面視において、表示素子２０が占める領域の外側に配置される。例えば、センシング素子５０－１、５０－２は、表示装置７０のＸ方向における一側部に配置される。センシング素子５０－１は、センシング素子５０－２より上方に配置される。照明素子１０、表示素子２０、及びセンシング素子５０－１、５０－２は、図示せぬ固定部材で特定の位置に固定される。照明素子１０、表示素子２０、及びセンシング素子５０－１、５０－２は、図示せぬ筐体に収容される。センシング素子５０－１、５０－２は、照明素子１０及び表示素子２０が収容される筐体とは別個に設けてもよい。
【0152】
センシング素子５０－１、５０－２はそれぞれ、検知領域ＤＥ１、及び検知領域ＤＥ２を形成する。検知領域ＤＥ１、及び検知領域ＤＥ２は、表示素子２０と平行に設定される。検知領域ＤＥ１は、検知領域ＤＥ２の上方に形成される。
【0153】
センシング素子５０－１は、検知領域ＤＥ１に存在する対象物を検知する。センシング素子５０－１は、検知領域ＤＥ１に光を出射し、対象物で反射された反射光を検知する。センシング素子５０－１が出射する光は、可視光以外の光が望ましく、例えば赤外光が用いられる。センシング素子５０－１は、検知領域ＤＥ１に向けて赤外光を発光する発光部と、対象物で反射された反射光を検知する受光部（センサ）とを含む。センシング素子５０－１は、例えば、複数の発光素子と複数の受光素子とが交互に一列に並んだラインセンサで構成される。ラインセンサは、赤外光を用いてライン状に空間をスキャンすることが可能であり、複数の発光素子が並んだ方向と光が進む方向とからなる２次元の空間をスキャンすることが可能である。
【0154】
センシング素子５０－１と同様に、センシング素子５０－２は、検知領域ＤＥ２に存在する対象物を検知する。
【0155】
【0156】
センシング素子５０－１は、基板８０、複数の発光素子８１、複数の受光素子８２、複数のレンズ８３、及びケース８４を備える。図２７に示した発光素子８１、受光素子８２、及びレンズ８３の数は一例である。複数の発光素子８１を纏めて発光部と呼び、複数の受光素子８２を纏めて受光部と呼ぶ。
【0157】
複数の発光素子８１、及び複数の受光素子８２は、基板８０に実装される。基板８０は、複数の配線層（図示せず）を含む。複数の発光素子８１、及び複数の受光素子８２は、交互に配置される。
【0158】
複数の発光素子８１の各々は、レーザー光を発光する。レーザー光は、例えば、利用者の視覚を刺激せず、可視光の影響を受けない赤外光である。発光素子８１は、例えばレーザーダイオードで構成される。
【0159】
複数の受光素子８２の各々は、対象物で反射されたレーザー光（赤外光）を検知する。受光素子８２は、例えばフォトダイオードで構成される。
【0160】
複数のレンズ８３は、複数の発光素子８１に対応して設けられ、複数の発光素子８１の上方に配置される。複数のレンズ８３は、一方向に並んで配置される。複数のレンズ８３の各々は、例えば平凸レンズで構成される。複数のレンズ８３は、複数の発光素子８１から出射されたレーザー光を正面方向に集光する機能を有する。また、複数のレンズ８３は、対象物で反射されたレーザー光を集光する機能を有する。
【0161】
ケース８４は、基板８０、複数の発光素子８１、複数の受光素子８２、及び複数のレンズ８３を収容する。ケース８４は、上部にレンズ８３を露出する開口部を有する。図２７では、ケース８４の外形のみを簡略化して示している。
【0162】
表示装置７０の検知動作は、第２実施形態と同じである。第３実施形態においても、第２実施形態と同じ効果を得ることができる。第３実施形態のセンシング素子は、第１実施形態に適用することが可能である。
【0163】
［４］ 第４実施形態
第４実施形態は、観察者３が空中像２以外の領域をタッチしている場合に、カーソルで選択位置を提示するようにしている。
第４実施形態は、観察者３が空中像２以外の領域をタッチしている場合に、カーソルで選択位置を提示するようにしている。
【0164】
図２８は、本発明の第４実施形態に係る空中表示装置１における全体動作を説明するフローチャートである。空中表示装置１の構成は、第１実施形態と同じである。
【0165】
ステップＳ３００～Ｓ３０６の動作は、第１実施形態のステップＳ１００～Ｓ１０６と同じである。
【0166】
対象物の位置が画像２１の領域に含まれない場合（Ｓ３０５＝Ｎｏ）、検知位置判定部６０Ｃは、仮想表示面２２上の選択された位置にカーソル２３を表示する（ステップＳ３０７）。
【0167】
【0168】
検知位置判定部６０Ｃは、観察者３により選択された位置が画像２１の領域に含まれない場合、表示素子２０の仮想表示面２２上の観察者３により選択された位置に、カーソル２３を表示する。観察者３は、カーソル２３を視認することで、空中像２以外の領域をタッチしていることを認識できる。これにより、観察者３の指３Ａを空中像２に導くことができる。
【0169】
第４実施形態は、第２実施形態の表示装置７０に適用することも可能である。
【0170】
変形例として、音を用いて、非選択状態であることを観察者３に通知してもよい。検知位置判定部６０Ｃは、観察者３により選択された位置が画像２１の領域に含まれない場合、特定の音を出力する。この変形例の場合、空中表示装置１は、音を出力可能なスピーカを備える。これにより、観察者３に空中像２をタッチしていないことを認識させることができる。
【0171】
［５］ 変形例
上記実施形態では、センシング素子５０が静電容量型である場合を例に挙げて説明している。しかし、これに限定されず、空間の物体を検知可能な他の種類のセンシング素子を用いることが可能である。
上記実施形態では、センシング素子５０が静電容量型である場合を例に挙げて説明している。しかし、これに限定されず、空間の物体を検知可能な他の種類のセンシング素子を用いることが可能である。
【0172】
上記実施形態では、表示素子２０と光学素子４０とを平行に配置している。しかし、これに限定されず、光学素子４０に対して表示素子２０を斜めに配置してもよい。表示素子２０と光学素子４０との角度は、０度より大きく４５度より小さい範囲に設定される。この変形例では、光制御素子３０を省略できる。
【0173】
上記実施形態では、光学要素４２の左側の側面が入射面４３、右側の側面が反射面４４として定義している。しかし、これに限定されず、入射面４３と反射面４４とを逆に構成してもよい。この場合、実施形態で説明した空中表示装置１の作用も左右が逆になる。
【0174】
上記実施形態では、表示素子２０として液晶表示素子を例に挙げて説明しているが、これに限定されるものではない。表示素子２０は、自発光型である有機ＥＬ（electroluminescence）表示素子、又はマイクロＬＥＤ（Light Emitting Diode）表示素子などを用いることも可能である。マイクロＬＥＤ表示素子は、画素を構成するＲ（赤）、Ｇ（緑）、Ｂ（青）をそれぞれＬＥＤで発光させる表示素子である。自発光型の表示素子２０を用いる場合、照明素子１０は不要である。
【0175】
本発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の発明が含まれており、開示される複数の構成要件から選択された組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、課題が解決でき、効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。
【符号の説明】
【0176】
１…空中表示装置、２…空中像、３…観察者、４…筐体、１０…照明素子、１１…光源部、１２…導光板、１３…反射シート、２０…表示素子、２１…画像、２２…仮想表示面、２３…カーソル、３０…光制御素子、３１…基材、３２…基材、３３…透明部材、３４…遮光部材、４０…光学素子、４１…基材、４２…光学要素、４３…入射面、４４…反射面、５０…センシング素子、５１…基板、５２…基板、５３…電極、５４…電極、５５…絶縁層、５６…駆動回路、５７…検出回路、６０…制御部、６０Ａ…表示処理部、６０Ｂ…画像処理部、６０Ｃ…検知位置判定部、６１…記憶部、６２…入出力インターフェース、６３…表示部、６４…入力部、６５…バス、７０…表示装置、８０…基板、８１…発光素子、８２…受光素子、８３…レンズ、８４…ケース。
【図1】
【図2】
【図3A】
【図3B】
【図4】
【図5A】
【図5B】
【図5C】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図29】
