(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023183847
(43)【公開日】2023-12-28
(54)【発明の名称】空間浮遊映像情報表示システム
(51)【国際特許分類】
H04N 13/305 20180101AFI20231221BHJP
H04N 13/346 20180101ALI20231221BHJP
H04N 13/366 20180101ALI20231221BHJP
G02B 30/56 20200101ALI20231221BHJP
G09F 19/12 20060101ALI20231221BHJP
H04N 13/307 20180101ALI20231221BHJP
H04N 13/351 20180101ALI20231221BHJP
G09F 21/04 20060101ALN20231221BHJP
【ＦＩ】
H04N13/305
H04N13/346
H04N13/366
G02B30/56
G09F19/12 F
H04N13/307
H04N13/351
G09F21/04 Q
【審査請求】未請求
【請求項の数】35
【出願形態】ＯＬ
(21)【出願番号】P 2022097620
(22)【出願日】2022-06-16
(71)【出願人】
【識別番号】000005810
【氏名又は名称】マクセル株式会社
(74)【代理人】
【識別番号】110002066
【氏名又は名称】弁理士法人筒井国際特許事務所
(72)【発明者】
【氏名】▲高▼橋 宏明
(72)【発明者】
【氏名】平田 浩二
(72)【発明者】
【氏名】藤田 浩司
【テーマコード（参考）】
2H199
5C061
【Ｆターム（参考）】
2H199BA17
2H199BA32
2H199BA34
2H199BA49
2H199BA63
2H199BB04
2H199BB08
2H199BB10
2H199BB12
2H199BB15
2H199BB17
2H199BB20
2H199BB52
5C061AA07
5C061AB12
5C061AB14
5C061AB16
5C061AB18
(57)【要約】
【課題】キオスク端末などの利用者に対して好適に映像を表示し、必要な情報を提供すること。本発明によれば、持続可能な開発目標の「３すべての人に健康と福祉を」、「９産業と技術革新の基盤をつくろう」、「１１住み続けられるまちづくりを」に貢献する。
【解決手段】空間浮遊映像情報表示システムは、少なくとも１個のオブジェクトの映像を表示する映像表示装置と、映像表示装置の映像光出射側に配置されたレンチキュラーレンズと、映像表示装置からの映像光を再帰反射させることで空中に空間浮遊映像を形成するための再帰性反射部材とを備えており、映像表示装置は、オブジェクトとして、複数の視点により撮影またはレンダリングして得られた多視点画像を表示する。
【選択図】図１３
【解決手段】空間浮遊映像情報表示システムは、少なくとも１個のオブジェクトの映像を表示する映像表示装置と、映像表示装置の映像光出射側に配置されたレンチキュラーレンズと、映像表示装置からの映像光を再帰反射させることで空中に空間浮遊映像を形成するための再帰性反射部材とを備えており、映像表示装置は、オブジェクトとして、複数の視点により撮影またはレンダリングして得られた多視点画像を表示する。
【選択図】図１３
【特許請求の範囲】
【請求項1】
空中に空間浮遊映像を形成する空間浮遊映像情報表示システムであって、
少なくとも１個のオブジェクトの映像を表示する映像表示装置と、
前記映像表示装置の映像光出射側に配置されたレンチキュラーレンズと、
前記映像表示装置からの映像光を再帰反射させることで空中に前記空間浮遊映像を形成するための再帰性反射部材と、
を備え、
前記映像表示装置は、前記オブジェクトとして、複数の視点により撮影またはレンダリングして得られた多視点画像を表示する、
空間浮遊映像情報表示システム。
少なくとも１個のオブジェクトの映像を表示する映像表示装置と、
前記映像表示装置の映像光出射側に配置されたレンチキュラーレンズと、
前記映像表示装置からの映像光を再帰反射させることで空中に前記空間浮遊映像を形成するための再帰性反射部材と、
を備え、
前記映像表示装置は、前記オブジェクトとして、複数の視点により撮影またはレンダリングして得られた多視点画像を表示する、
空間浮遊映像情報表示システム。
【請求項2】
請求項１に記載の空間浮遊映像情報表示システムにおいて、
前記レンチキュラーレンズは、前記映像表示装置と前記再帰反射部材との間に配置される、
空間浮遊映像情報表示システム。
前記レンチキュラーレンズは、前記映像表示装置と前記再帰反射部材との間に配置される、
空間浮遊映像情報表示システム。
【請求項3】
請求項１に記載の空間浮遊映像情報表示システムにおいて、
前記レンチキュラーレンズは、前記映像表示装置の表示パネルの出射面から所定の距離に配置される、
空間浮遊映像情報表示システム。
前記レンチキュラーレンズは、前記映像表示装置の表示パネルの出射面から所定の距離に配置される、
空間浮遊映像情報表示システム。
【請求項4】
請求項３に記載の空間浮遊映像情報表示システムにおいて、
前記レンチキュラーレンズと前記映像表示装置との距離が、前記レンチキュラーレンズの焦点距離により調整される、
空間浮遊映像情報表示システム。
前記レンチキュラーレンズと前記映像表示装置との距離が、前記レンチキュラーレンズの焦点距離により調整される、
空間浮遊映像情報表示システム。
【請求項5】
請求項１に記載の空間浮遊映像情報表示システムにおいて、
前記映像表示装置の表示パネルの出射面と、前記レンチキュラーレンズの入射面とが平行である、
空間浮遊映像情報表示システム。
前記映像表示装置の表示パネルの出射面と、前記レンチキュラーレンズの入射面とが平行である、
空間浮遊映像情報表示システム。
【請求項6】
請求項１に記載の空間浮遊映像情報表示システムにおいて、
前記オブジェクトは、人物像としての形状を有する、
空間浮遊映像情報表示システム。
前記オブジェクトは、人物像としての形状を有する、
空間浮遊映像情報表示システム。
【請求項7】
請求項１に記載の空間浮遊映像情報表示システムにおいて、
前記レンチキュラーレンズは、前記映像表示装置と前記再帰反射部材との間に配置され、
前記映像表示装置および前記再帰性反射部材を収納する筐体と、
所定操作に基づいて所定の処理を実行する制御装置と、を備え、
前記オブジェクトは、人物像としての形状を有し、
前記多視点画像として表示された人物像は、ユーザの移動に伴って運動視差を有する、
空間浮遊映像情報表示システム。
前記レンチキュラーレンズは、前記映像表示装置と前記再帰反射部材との間に配置され、
前記映像表示装置および前記再帰性反射部材を収納する筐体と、
所定操作に基づいて所定の処理を実行する制御装置と、を備え、
前記オブジェクトは、人物像としての形状を有し、
前記多視点画像として表示された人物像は、ユーザの移動に伴って運動視差を有する、
空間浮遊映像情報表示システム。
【請求項8】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記多視点画像として表示された人物像の顔の向きは、前記ユーザの移動に従って、ユーザの方に向くように移動する、
空間浮遊映像情報表示システム。
前記多視点画像として表示された人物像の顔の向きは、前記ユーザの移動に従って、ユーザの方に向くように移動する、
空間浮遊映像情報表示システム。
【請求項9】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記人物像は、前記ユーザに対し前記操作をガイドするコンシェルジュである、
前記人物像は、前記ユーザに対し前記操作をガイドするコンシェルジュである、
【請求項10】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記筐体に対し前記ユーザが近づいたことを検知した場合に、前記空間浮遊映像として、最初に、前記オブジェクトとして人物像を表示し、次に、操作メニューを表示する、
空間浮遊映像情報表示システム。
前記筐体に対し前記ユーザが近づいたことを検知した場合に、前記空間浮遊映像として、最初に、前記オブジェクトとして人物像を表示し、次に、操作メニューを表示する、
空間浮遊映像情報表示システム。
【請求項11】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記筐体に対し前記ユーザが近づいたことを検知した場合に、前記空間浮遊映像として、前記オブジェクトとしての人物像と操作メニューとの両方を表示する、
空間浮遊映像情報表示システム。
前記筐体に対し前記ユーザが近づいたことを検知した場合に、前記空間浮遊映像として、前記オブジェクトとしての人物像と操作メニューとの両方を表示する、
空間浮遊映像情報表示システム。
【請求項12】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記ユーザを撮像する撮像装置を備え、
前記撮像装置により取得した前記ユーザが写った画像に基づいて、前記ユーザが近づいたことを検知する、
空間浮遊映像情報表示システム。
前記ユーザを撮像する撮像装置を備え、
前記撮像装置により取得した前記ユーザが写った画像に基づいて、前記ユーザが近づいたことを検知する、
空間浮遊映像情報表示システム。
【請求項13】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記制御装置は、前記ユーザの認証を行い、前記認証の結果に基づいて、前記オブジェクトとして前記人物像の表示から前記操作メニューの表示へ遷移させる、
空間浮遊映像情報表示システム。
前記制御装置は、前記ユーザの認証を行い、前記認証の結果に基づいて、前記オブジェクトとして前記人物像の表示から前記操作メニューの表示へ遷移させる、
空間浮遊映像情報表示システム。
【請求項14】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記ユーザを撮像する撮像装置を備え、
前記撮像装置により取得した前記ユーザが写った画像に基づいて、前記ユーザの認証を行う、
空間浮遊映像情報表示システム。
前記ユーザを撮像する撮像装置を備え、
前記撮像装置により取得した前記ユーザが写った画像に基づいて、前記ユーザの認証を行う、
空間浮遊映像情報表示システム。
【請求項15】
請求項１に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像として、少なくとも２つ以上の選択肢を含んだ操作メニューを表示する、
空間浮遊映像情報表示システム。
前記空間浮遊映像として、少なくとも２つ以上の選択肢を含んだ操作メニューを表示する、
空間浮遊映像情報表示システム。
【請求項16】
請求項９に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像として、前記コンシェルジュと、少なくとも２つ以上の選択肢を含んだ操作メニューとを表示し、
前記コンシェルジュの映像および音声により、前記操作メニューに対する操作をガイドする、
空間浮遊映像情報表示システム。
前記空間浮遊映像として、前記コンシェルジュと、少なくとも２つ以上の選択肢を含んだ操作メニューとを表示し、
前記コンシェルジュの映像および音声により、前記操作メニューに対する操作をガイドする、
空間浮遊映像情報表示システム。
【請求項17】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記ユーザにのみ聴取可能に音声信号を出力する超指向性スピーカを備える、
空間浮遊映像情報表示システム。
前記ユーザにのみ聴取可能に音声信号を出力する超指向性スピーカを備える、
空間浮遊映像情報表示システム。
【請求項18】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記制御装置は、前記ユーザの属性情報を取得し、前記属性情報に基づいて、前記ユーザが前記空間浮遊映像情報表示システムを初めて使用するユーザであるか、所定の年齢以上のユーザであるか、の少なくともいずれかを含む条件を判定し、
前記条件を満たすユーザに対し、前記空間浮遊映像として前記コンシェルジュによるガイドを行う、
空間浮遊映像情報表示システム。
前記制御装置は、前記ユーザの属性情報を取得し、前記属性情報に基づいて、前記ユーザが前記空間浮遊映像情報表示システムを初めて使用するユーザであるか、所定の年齢以上のユーザであるか、の少なくともいずれかを含む条件を判定し、
前記条件を満たすユーザに対し、前記空間浮遊映像として前記コンシェルジュによるガイドを行う、
空間浮遊映像情報表示システム。
【請求項19】
請求項１に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像に対するユーザによる操作を検出するためのセンサを含むセンシングシステムと、
前記映像表示装置および前記再帰性反射部材を備えた筐体と、
検出された前記操作に基づいて所定の処理を実行する制御装置と、を備え、
前記制御装置は、検出された前記操作に基づいて、書類を発行する処理を実行し、
前記筐体の一部に、前記書類の取り出し口を備える、
空間浮遊映像情報表示システム。
前記空間浮遊映像に対するユーザによる操作を検出するためのセンサを含むセンシングシステムと、
前記映像表示装置および前記再帰性反射部材を備えた筐体と、
検出された前記操作に基づいて所定の処理を実行する制御装置と、を備え、
前記制御装置は、検出された前記操作に基づいて、書類を発行する処理を実行し、
前記筐体の一部に、前記書類の取り出し口を備える、
空間浮遊映像情報表示システム。
【請求項20】
請求項１９に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像情報表示システムは、前記書類としてチケットまたは行政証書を発行する機能を有するキオスク端末である、
空間浮遊映像情報表示システム。
前記空間浮遊映像情報表示システムは、前記書類としてチケットまたは行政証書を発行する機能を有するキオスク端末である、
空間浮遊映像情報表示システム。
【請求項21】
請求項７に記載の空間浮遊映像情報表示システムにおいて、
前記ユーザの所持する携帯端末との間で無線通信を行う通信部を備える、
空間浮遊映像情報表示システム。
前記ユーザの所持する携帯端末との間で無線通信を行う通信部を備える、
空間浮遊映像情報表示システム。
【請求項22】
請求項８に記載の空間浮遊映像情報表示システムにおいて、
前記無線通信に基づいて、前記携帯端末から送信された前記ユーザの情報を受信する、
空間浮遊映像情報表示システム。
前記無線通信に基づいて、前記携帯端末から送信された前記ユーザの情報を受信する、
空間浮遊映像情報表示システム。
【請求項23】
請求項２２に記載の空間浮遊映像情報表示システムにおいて、
前記制御装置は、検出された前記操作に基づいて、書類を発行する処理を実行し、
前記無線通信に基づいて、前記書類の情報を前記携帯端末に送信する、
空間浮遊映像情報表示システム。
前記制御装置は、検出された前記操作に基づいて、書類を発行する処理を実行し、
前記無線通信に基づいて、前記書類の情報を前記携帯端末に送信する、
空間浮遊映像情報表示システム。
【請求項24】
請求項７記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像として、前記ユーザの携帯端末に読み取らせるためのコード情報を表示する、
空間浮遊映像情報表示システム。
前記空間浮遊映像として、前記ユーザの携帯端末に読み取らせるためのコード情報を表示する、
空間浮遊映像情報表示システム。
【請求項25】
請求項７記載の空間浮遊映像情報表示システムにおいて、
前記ユーザを撮像する撮像装置を備え、
前記撮像装置により、前記ユーザの携帯端末に表示されたコード情報を読み取る、
空間浮遊映像情報表示システム。
前記ユーザを撮像する撮像装置を備え、
前記撮像装置により、前記ユーザの携帯端末に表示されたコード情報を読み取る、
空間浮遊映像情報表示システム。
【請求項26】
請求項１記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像に対するユーザによる操作を検出するセンサと、
前記映像表示装置および前記再帰性反射部材を収納する筐体と、
検出された前記操作に基づいて所定の処理を実行する制御装置と、を備え、
前記空間浮遊映像の面に対する前記ユーザの手指または所持物による接触の状態を、センシングシステムを用いて検出し、
前記空間浮遊映像の面において前記接触がされた位置に線を前記空間浮遊映像として描画する、
空間浮遊映像情報表示システム。
前記空間浮遊映像に対するユーザによる操作を検出するセンサと、
前記映像表示装置および前記再帰性反射部材を収納する筐体と、
検出された前記操作に基づいて所定の処理を実行する制御装置と、を備え、
前記空間浮遊映像の面に対する前記ユーザの手指または所持物による接触の状態を、センシングシステムを用いて検出し、
前記空間浮遊映像の面において前記接触がされた位置に線を前記空間浮遊映像として描画する、
空間浮遊映像情報表示システム。
【請求項27】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記制御装置は、前記空間浮遊映像の面において文字や図形として描画された前記線を、前記ユーザによる入力情報として取得する、
空間浮遊映像情報表示システム。
前記制御装置は、前記空間浮遊映像の面において文字や図形として描画された前記線を、前記ユーザによる入力情報として取得する、
空間浮遊映像情報表示システム。
【請求項28】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記制御装置は、前記空間浮遊映像の面において文字や図形として描画された前記線を、前記ユーザによるサインとして取得する、
空間浮遊映像情報表示システム。
前記制御装置は、前記空間浮遊映像の面において文字や図形として描画された前記線を、前記ユーザによるサインとして取得する、
空間浮遊映像情報表示システム。
【請求項29】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像の面において描画される前記線は、前記ユーザの氏名または属性に関する情報である、
空間浮遊映像情報表示システム。
前記空間浮遊映像の面において描画される前記線は、前記ユーザの氏名または属性に関する情報である、
空間浮遊映像情報表示システム。
【請求項30】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像の全体または一部の領域に、枠を表示し、
前記制御装置は、前記空間浮遊映像の面における前記一部の領域に対する前記ユーザの手指または所持物による接触の有無に応じて、前記枠の色を変えるように、表示を制御する、
空間浮遊映像情報表示システム。
前記空間浮遊映像の全体または一部の領域に、枠を表示し、
前記制御装置は、前記空間浮遊映像の面における前記一部の領域に対する前記ユーザの手指または所持物による接触の有無に応じて、前記枠の色を変えるように、表示を制御する、
空間浮遊映像情報表示システム。
【請求項31】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像の全体または一部の領域に、枠を表示し、
前記制御装置は、前記空間浮遊映像の面における前記枠の内側の領域に対する前記ユーザの手指または所持物による接触の有無に応じて、前記枠の内側の領域の背景色を変えるように、表示を制御する、
空間浮遊映像情報表示システム。
前記空間浮遊映像の全体または一部の領域に、枠を表示し、
前記制御装置は、前記空間浮遊映像の面における前記枠の内側の領域に対する前記ユーザの手指または所持物による接触の有無に応じて、前記枠の内側の領域の背景色を変えるように、表示を制御する、
空間浮遊映像情報表示システム。
【請求項32】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像の全体または一部の領域に、枠を表示し、
前記制御装置は、前記空間浮遊映像に対し前記線を描画するモードと、前記空間浮遊映像に対し前記線を描画しないモードとの切り替えを制御し、前記線を描画するモードと前記線を描画しないモードとで、前記枠の色を変えるように、表示を制御する、
空間浮遊映像情報表示システム。
前記空間浮遊映像の全体または一部の領域に、枠を表示し、
前記制御装置は、前記空間浮遊映像に対し前記線を描画するモードと、前記空間浮遊映像に対し前記線を描画しないモードとの切り替えを制御し、前記線を描画するモードと前記線を描画しないモードとで、前記枠の色を変えるように、表示を制御する、
空間浮遊映像情報表示システム。
【請求項33】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像の全体または一部の領域に、枠を表示し、
前記制御装置は、前記空間浮遊映像の面に対する前記ユーザの手指または所持物による接触の有無に応じて、前記枠を点滅させるように、表示を制御する、
空間浮遊映像情報表示システム。
前記空間浮遊映像の全体または一部の領域に、枠を表示し、
前記制御装置は、前記空間浮遊映像の面に対する前記ユーザの手指または所持物による接触の有無に応じて、前記枠を点滅させるように、表示を制御する、
空間浮遊映像情報表示システム。
【請求項34】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記筐体の所定の箇所に、前記空間浮遊映像の面に対する前記操作の検出および前記線の描画を行うモードに移行させるための物理的なボタンを備える、
空間浮遊映像情報表示システム。
前記筐体の所定の箇所に、前記空間浮遊映像の面に対する前記操作の検出および前記線の描画を行うモードに移行させるための物理的なボタンを備える、
空間浮遊映像情報表示システム。
【請求項35】
請求項２６に記載の空間浮遊映像情報表示システムにおいて、
前記空間浮遊映像の面に対する前記操作の検出および前記線の描画を行うモードに移行させるためのボタンを、前記空間浮遊映像の一部として表示する、
空間浮遊映像情報表示システム。
前記空間浮遊映像の面に対する前記操作の検出および前記線の描画を行うモードに移行させるためのボタンを、前記空間浮遊映像の一部として表示する、
空間浮遊映像情報表示システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、空間浮遊映像情報表示システムに関する。
【背景技術】
【0002】
空間浮遊映像情報表示システムとして、直接外部に向かって映像を空間像として表示する映像表示装置および表示方法については、既に知られている。また、表示された空間像の操作面における操作に対する誤検知を低減する検知システムについても、例えば、特開２０１９－１２８７２２号公報（特許文献１）に記載されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１９－１２８７２２号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献１では、空気中に形成される像に対する操作の誤検知を低減することを目的として、ユーザが予め定めた方向から像に接近する場合、ユーザの動きを操作として受け付けることで、目的を達成する旨が記載されている。
【0005】
また、特許文献１の段落００１１には、「空中画像は、静止画でも動画でもよい」こと、さらに、空中画像は、「曲面、球体、立方体などの立体的な形状でもよい」ことが記載されている。しかしながら、特許文献１には、空中画像を立体的な形状とするための具体的な技術や方法に関する記載はない。
【0006】
空間浮遊映像（空中画像、空中像ということもある。これらの名称については後述する）を立体的な形状とすることで、平面画像から生成された空間浮遊映像に比べて、利用者が観察した時に、より臨場感があり、実際に空間上に浮遊しているように感じる空間浮遊映像を生成することができる。
【0007】
そのため、立体的な形状を有する空間浮遊映像を、例えば、サイネージ（電子的な看板）として用いた場合には、サイネージにより表示された商品やサービスに対する人々の関心をより高める効果が期待できる。また、空間浮遊映像として、コンシェルジュ（利用者の操作ガイドや、利用者に対する各種サービスを提供する人）を立体的な形状とすれば、平面的な空間浮遊映像による表示に比べて、利用者が実際の人物と対話をしているような感覚を誘発されるため、利用者はコンシェルジュに対してより親近感をいだきやすく、コンシェルジュによるガイドに従って、よりスムーズな操作を行うことができるという効果が期待できる。
【0008】
しかしながら、前述の通り、特許文献１のような先行技術例では、立体的な形状として空間浮遊映像を表示するための技術は開示されておらず、特に、コンシェルジュのような人物像を立体的な空間浮遊映像として表示するための技術が望まれていた。
【0009】
そこで、本発明の目的は、立体的な物体を表示することができる空間浮遊映像表示システムを提供することにある。
【課題を解決するための手段】
【0010】
上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。本発明は、上記課題を解決する手段を複数含んでいるが、一例を挙げるならば以下の通りである。空中に空間浮遊映像を形成する空間浮遊映像情報表示システムは、少なくとも１個のオブジェクトの映像を表示する映像表示装置と、映像表示装置の映像光出射側に配置されたレンチキュラーレンズと、映像表示装置からの映像光を再帰反射させることで空中に空間浮遊映像を形成するための再帰性反射部材とを備えており、映像表示装置は、オブジェクトとして、複数の視点により撮影またはレンダリングして得られた多視点画像を表示する。
【発明の効果】
【0011】
本開示のうち代表的な実施の形態によれば、空間浮遊映像情報表示システムに関して、空間浮遊映像として多視点映像が表示され、特に、コンシェルジュなどの人物像が立体的に表示されるので、利用者にとって実際の人物と会話をしているような、臨場感のある、好適な空間浮遊映像を提供することができる、という効果がある。上記した以外の課題、構成および効果などについては、発明を実施するための形態において示される。
【図面の簡単な説明】
【0012】
【図1】一実施例に係る空間浮遊映像情報表示システムの使用形態の一例を示す図である。
【図2】一実施例に係る空間浮遊映像情報表示システムの内部構成の一例を示す図である。
【図3】一実施例に係る空間浮遊映像情報表示システムの主要部構成と再帰反射部構成の一例を示す図である。
【図4】一実施例に係る空間浮遊映像情報表示システムの主要部構成と再帰反射部構成の他の例を示す図である。
【図5】一実施例に係る再帰反射で発生する異常光線を遮る部材の配置例を示す斜視図である。
【図6】一実施例に係る再帰反射で発生する異常光線を遮る部材の配置例を示す断面図である。
【図7】一実施例に係る空間浮遊映像情報表示システムで用いる第１のセンシング技術の説明図である。
【図8】一実施例に係る空間浮遊映像情報表示システムで用いる第２のセンシング技術の説明図である。
【図9】一実施例に係る空間浮遊映像情報表示システムで用いるセンシングシステムの動作および装置についての説明図である。
【図10】太陽光の分光放射照度の特性を示す図である。
【図11】屈折率１.５の媒質に入射する偏光光の光線入射角度に対する反射特性を示す図である。
【図12】一実施例に係る、空間浮遊映像に文字などを入力・描画する技術についての説明図を示す。
【図13】本発明の一実施例に係る空間浮遊映像情報表示システムの主要部構成を示す図である。
【図14】本発明の一実施例に係る他の空間浮遊映像情報表示システムの主要部構成を示す図である。
【図15】多視点画像を表示する原理を示す図である。
【図16】多視点映像を生成するためのカメラ配置の一例を示す図である。
【図17】多視点映像表示装置により表示される映像の一例を示す図である。
【図18】空間浮遊像としての多視点映像の見え方の一例を示す図である。
【図19】空間浮遊像としての多視点映像の見え方の他の一例を示す図である。
【図20】キオスク端末の一例を示す図である。
【図21】一実施例（実施の形態１）に係るキオスク端末の外観例を示す図である。
【図22】実施の形態１に係るキオスク端末の断面構造例を示す図である。
【図23】一実施例（実施の形態２）に係るキオスク端末の外観例を示す図である。
【図24】実施の形態２に係るキオスク端末の断面構造例を示す図である。
【図25】一実施例（実施の形態３）に係るキオスク端末と利用者を示す図である。
【図26】一実施例（実施の形態３）に係るキオスク端末の表示例を示す図である。
【図27】実施の形態３に係るキオスク端末の第１動作フローを示す図である。
【図28】実施の形態３に係るキオスク端末の第２動作フローを示す図である。
【図29】一実施例（実施の形態４）に係るキオスク端末と携帯端末の連携動作を示す図である。
【図30】一実施例（実施の形態５）に係るキオスク端末でのサインの操作・表示例を示す図である。
【図31】実施の形態３などの変形例に係るキオスク端末での表示例を示す図である。
【図32】光源装置の具体的な構成例を示す断面図である。
【図33】光源装置の具体的な構成例を示す構造図である。
【図34】別方式の光源装置の具体的な構成例を示す図である。
【図35】一実施例（他の実施の形態）に係る自動販売機の外観例を示す図である。
【発明を実施するための形態】
【0013】
以下、本発明の実施の形態（実施例とも記載）を、図面を参照しながら詳細に説明する。図面において、同一部には原則として同一符号を付し、繰り返しの説明を省略する。図面において、構成要素の表現は、発明の理解を容易にするために、実際の位置、大きさ、形状、および範囲などを表していない場合がある。
【0014】
説明上、プログラムによる処理について説明する場合に、プログラムや機能や処理部などを主体として説明する場合があるが、それらについてのハードウェアとしての主体は、プロセッサ、あるいはそのプロセッサなどで構成されるコントローラ、装置、計算機、システムなどである。計算機は、プロセッサによって、適宜にメモリや通信インタフェースなどの資源を用いながら、メモリ上に読み出されたプログラムに従った処理を実行する。これにより、所定の機能や処理部などが実現される。プロセッサは、例えばＣＰＵ（Central Processing Unit）やＧＰＵなどの半導体デバイスなどで構成される。プロセッサは、所定の演算が可能な装置や回路で構成される。処理は、ソフトウェアプログラム処理に限らず、専用回路でも実装可能である。専用回路は、ＦＰＧＡ（field-programmable gate array）、ＡＳＩＣ（application specific integrated circuit）、ＣＰＬＤ（Complex Programmable Logic Device）などが適用可能である。
【0015】
プログラムは、対象計算機に予めデータとしてインストールされていてもよいし、プログラムソースから対象計算機にデータとして配布されてもよい。プログラムソースは、通信網上のプログラム配布サーバでもよいし、非一過性のコンピュータ読み取り可能な記憶媒体（例えばメモリカード）でもよい。プログラムは、複数のモジュールから構成されてもよい。コンピュータシステムは、複数台の装置によって構成されてもよい。コンピュータシステムは、クライアントサーバシステム、クラウドコンピューティングシステムなどで構成されてもよい。各種のデータや情報は、例えばテーブルやリストなどの構造で構成されるが、これに限定されない。識別情報、識別子、ＩＤ（identification）、名、番号などの表現は互いに置換可能である。
【0016】
一実施の形態の空間浮遊映像情報表示システム（以下、単にシステムと記載する場合もある）は、まず、空間浮遊映像の視認性を著しく低下させるゴースト像を無くし、空間浮遊映像の明るさを向上させることで、視認性を改善する構成を備える。一実施の形態のシステムは、キオスク端末などに適用され、空間浮遊映像による画面で操作メニューなどのユーザインタフェースを提供する。その上で、一実施の形態のシステムは、ユーザがシステム（キオスク端末）の筐体に近づいてきた時に、空間浮遊映像の画面上に、はじめに、所定の人物像としてのコンシェルジュ（コンシェルジュ映像などと記載する場合もある）を表示する。システムは、空間浮遊映像のコンシェルジュによって、ユーザに対し、あいさつ、ガイド、説明などを行う。
【0017】
一実施の形態の空間浮遊映像情報表示システムは、ユーザが空間浮遊映像に近づいた場合や空間浮遊映像に対し操作した場合に、コンシェルジュ映像を、自動的に、所定の操作メニューなど、例えば複数の数字ボタンや選択肢ボタンなどを有しそのボタンを押下できる方式の操作メニュー画面に遷移・変化させる。システムは、適宜に、空間浮遊映像のコンシェルジュによって、ユーザに対し、操作メニューのガイドや説明を行う。特に、システムは、初めてのユーザや高齢のユーザであると判定した場合に、コンシェルジュによって、ユーザに対し、操作メニューを詳しくガイドする。また、システムは、ユーザが空間浮遊映像の操作方法などがよくわからない状態であると判定した場合には、コンシェルジュによって、ユーザに対し、操作メニューを詳しくガイドする。
【0018】
また、一実施の形態の空間浮遊映像情報表示システムは、例えばカメラを用いた顔認証などによりユーザを識別・特定する機能を備える。システムは、その機能によって特定したユーザについて、年齢やシステム使用履歴などのユーザ属性情報を参照する。システムは、ユーザの属性に応じて、空間浮遊映像のコンシェルジュによるガイドなどの方式や内容を変えるように制御する。
【0019】
また、一実施の形態の空間浮遊映像情報表示システムは、空間浮遊映像の面に対し、ユーザが手指によって任意の文字や図形を入力することができる機能も提供する。システムは、空間浮遊映像の面に対する手指の接触の状態を検出し、空間浮遊映像の面で入力された線を描画する。システムは、この入力された線を例えばユーザのサインとして取得する。
【0020】
なお、以下の実施の形態の説明において、空間に浮遊する映像、空中に表示される映像を、「空間浮遊映像」という用語で表現する場合がある。この用語の代わりに、「空中像」、「空間像」、「空中浮遊映像」、「表示映像の空間浮遊光学像」、「表示映像の空中浮遊光学像」などと表現しても構わない。実施の形態の説明で主に用いる「空間浮遊映像」の用語は、これらの用語の代表例として用いている。
【0021】
＜空間浮遊映像情報表示システム＞
本開示は、例えば、大面積な映像発光源からの映像光による映像を、ショーウィンドのガラスなどの、空間を仕切る透明部材を介して透過して、店舗空間の内部または外部に空間浮遊映像として表示可能な情報表示システムに関する。また、本開示は、かかる情報表示システムを複数用いて構成される大規模なデジタルサイネージシステムに関する。
本開示は、例えば、大面積な映像発光源からの映像光による映像を、ショーウィンドのガラスなどの、空間を仕切る透明部材を介して透過して、店舗空間の内部または外部に空間浮遊映像として表示可能な情報表示システムに関する。また、本開示は、かかる情報表示システムを複数用いて構成される大規模なデジタルサイネージシステムに関する。
【0022】
以下の実施の形態によれば、例えば、ショーウィンドのガラス面や光透過性の板材上に高解像度な映像情報を空間浮遊した状態で表示可能となる。この時、出射する映像光の発散角を小さく、すなわち鋭角とし、さらに特定の偏波に揃えることで、再帰反射部材（再帰性反射部材）または再帰反射板に対して正規の反射光だけを効率良く反射させることができる。このため、実施の形態によれば、光の利用効率が高く、従来の再帰反射方式での課題となっていた主空間浮遊像の他に発生するゴースト像を抑えることができ、鮮明な空間浮遊映像を得ることができる。
【0023】
また、本開示の光源を含む装置により、消費電力を大幅に低減可能な、新規で利用性に優れた空間浮遊映像情報表示システムを提供できる。また、本開示の技術によれば、例えば、車両のフロントガラスやリアガラスやサイドガラスを含むシールドガラスを介して、車両外部において視認可能である、いわゆる、一方向性の空間浮遊映像の表示が可能な車両用空間浮遊映像情報表示システムを提供できる。
【0024】
一方、従来の空間浮遊映像情報表示システムは、高解像度なカラー表示映像源として有機ＥＬパネルや液晶表示パネル（液晶パネルなどと記載する場合がある）を、再帰反射部材と組み合わせる。従来技術による空間浮遊映像表示装置では、映像光が広角で拡散する。そのため、図３の（Ｂ）に示す多面体で構成された第一の実施例での再帰反射部材２を用いる場合、再帰反射部材２で正規に反射する反射光（それによる正規な空間浮遊映像）の他に、図３の（Ｃ）に示す再帰反射部材２（再帰反射部２ａ）に斜めから入射する映像光によって、ゴースト像が発生する。これにより、空間浮遊映像の画質が低下する。また、従来技術による空間浮遊映像表示装置では、正規な空間浮遊映像の他に、反射面の数に応じたゴースト像が複数発生する。このため、観視者以外の人にも、ゴースト像である同一空間浮遊映像を観視され、セキュリティ上の観点からも大きな課題があった。
【0025】
＜空間浮遊映像情報表示システムの第１の構成例＞
図１の（Ａ）は、実施例の空間浮遊映像情報表示システムの使用形態の一例を示し、空間浮遊映像情報表示システムの全体構成の説明図を示す。図１の（Ａ）で、例えば、店舗などにおいては、ガラスなどの透光性の部材（透明部材とも記載）であるショーウィンド（ウィンドガラスともいう）１０５により、空間が仕切られている。本空間浮遊情報表示システムによれば、かかる透明部材を透過して、空間浮遊映像を、店舗空間の外部に対して一方向に表示が可能である。
図１の（Ａ）は、実施例の空間浮遊映像情報表示システムの使用形態の一例を示し、空間浮遊映像情報表示システムの全体構成の説明図を示す。図１の（Ａ）で、例えば、店舗などにおいては、ガラスなどの透光性の部材（透明部材とも記載）であるショーウィンド（ウィンドガラスともいう）１０５により、空間が仕切られている。本空間浮遊情報表示システムによれば、かかる透明部材を透過して、空間浮遊映像を、店舗空間の外部に対して一方向に表示が可能である。
【0026】
具体的には、本システムによれば、映像表示装置１０から挟角な指向特性でかつ特定偏波の光が、映像光束として出射される。出射された映像光束は、再帰反射部材２に一旦入射し、再帰反射されて、ウィンドガラス１０５を透過して、店舗空間の外側に、実像である空間浮遊映像（空中像）３を形成する。図１の（Ａ）では、透明部材（ここではウィンドガラス）１０５の内側の店舗内を奥行方向とし、ウィンドガラス１０５の外側（例えば歩道）が手前になるように示している。他方、ウィンドガラス１０５に特定偏波を反射する部材を設け、かかる部材によって映像光束を反射させて、店舗内の所望の位置に空中像を形成することもできる。
【0027】
図１の（Ｂ）は、映像表示装置１０の内部構成を示す。映像表示装置１０は、空中像の原画像を表示する映像表示部１１０２と、入力された映像をパネルの解像度に合わせて変換する映像制御部１１６０と、映像音声信号を受信・入力する映像・音声信号受信部１１３０とを含む。
【0028】
このうち、映像・音声信号受信部１１３０は、例えば、ＨＤＭＩ（High-Definition Multimedia Interface）（登録商標）などの入力インタフェースを通じての有線での入力信号への対応と、Ｗｉ－Ｆｉ（Wireless Fidelity）（登録商標）などの無線入力信号への対応を行う役割を担う。また、映像・音声信号受信部１１３０は、映像受信・表示装置として単独で機能することもできる。さらに、映像・音声信号受信部１１３０は、タブレット端末、スマートフォンなどからの映像・音声情報を表示・出力することもできる。さらにまた、映像・音声信号受信部１１３０は、必要に応じてスティックＰＣなどのプロセッサ（演算処理装置）を接続することもでき、この場合、映像信号・音声信号受信部全体として、計算処理や映像解析処理などの能力を持たせることもできる。
【0029】
［空間浮遊映像情報表示システムの機能ブロック］
図２は、空間浮遊映像情報表示システム１の機能ブロック図を示す。映像表示部１１０２は、映像信号に基づいて、映像表示部１１０２を透過する光を変調することで、映像を生成する。映像表示部１１０２は、表示パネル、または液晶パネル、または液晶表示パネルと称する場合がある。映像表示部１１０２は、例えば、透過型表示パネルを用いてもよく、場合によっては、映像信号に基づいてパネルに反射する光を変調する反射型表示パネルや、ＤＭＤパネル（ＤＭＤ:Digital Micromirror Device、登録商標）などを用いて構成されてもよい。
図２は、空間浮遊映像情報表示システム１の機能ブロック図を示す。映像表示部１１０２は、映像信号に基づいて、映像表示部１１０２を透過する光を変調することで、映像を生成する。映像表示部１１０２は、表示パネル、または液晶パネル、または液晶表示パネルと称する場合がある。映像表示部１１０２は、例えば、透過型表示パネルを用いてもよく、場合によっては、映像信号に基づいてパネルに反射する光を変調する反射型表示パネルや、ＤＭＤパネル（ＤＭＤ:Digital Micromirror Device、登録商標）などを用いて構成されてもよい。
【0030】
空間浮遊映像情報表示システム１は、図２に示すように、レンチキュラーレンズ１１０３を有している。レンチキュラーとは、シート状のレンチキュラーレンズを用いて、見る角度によって絵柄が変化したり、立体感が得られたりする印刷物のことである。レンチキュラーレンズは、その表面が半円筒状の「かまぼこ」のような形状を有するレンズの集合体であり、１つの半円筒状レンズの下部には、多視点画像（または映像）の視点の数に相当する、異なる映像を表示する映像表示部１１０２が配置されている。本願発明では、レンチキュラーレンズ１１０３が、映像表示部１１０２の映像光出射側に配置されている。具体的には、レンチキュラーレンズ１１０３は、映像表示部１１０２の映像光出射側と所定距離を介して配置されている。また、映像表示部１１０２が出射された映像光をレンチキュラーレンズを通して、多視点画像（または多視点映像）を表示し、利用者が多視点画像（または多視点映像）を観察することができる。
【0031】
図２の構成によれば、利用者が、レンチキュラーレンズ１１０３を形成する半円筒状レンズが並んでいる方向（例えば、左右の方向）に移動することにより、利用者はそれぞれの位置から異なる画像（または映像）を見ることができる。従って、上記、異なる画像（または映像）を、１つの被写体に対して、撮影方向が異なる撮影画像（または映像）とする。このことで、利用者は、レンチキュラーレンズを介して、運動視差を伴う多視点立体像として、映像表示部１１０２を構成する液晶パネル上に表示された画像（または映像）を視認することができる。
【0032】
再帰性反射部１１０１は、映像表示部１１０２により変調された光を再帰反射する。再帰性反射部１１０１からの反射光のうち、空間浮遊映像情報表示システム１の外部に出力された光が空間浮遊映像３を形成する。光源１１０５は、映像表示部１１０２用の光を発生する。光源１１０５は、例えばＬＥＤ光源、レーザ光源などの固体光源が用いられる。電源１１０６は、外部から入力されるＡＣ電流をＤＣ電流に変換し、光源１１０５に電力を供給する。さらに、電源１１０６は、その他各部にそれぞれ必要なＤＣ電流を供給する。
【0033】
導光体１１０４は、光源１１０５で発生した光を導いて映像表示部１１０２に照射する。導光体１１０４と光源１１０５との組み合わせを映像表示部１１０２のバックライトと称することもできる。導光体１１０４や光源１１０５の組み合わせは、様々な方式が考えられる。具体的な構成例は後述する。なお、図２に示すように、映像表示部１１０２と導光体１１０４と光源１１０５の３つの部品から構成される部分を、特に、映像表示装置１０と呼ぶ。
【0034】
空中操作検出センサ１３５１は、ユーザの手指による空間浮遊映像３の操作（空中操作とも記載）を検出するために、空間浮遊映像３の表示範囲と少なくとも一部に重畳する範囲、またはすべての表示範囲に重畳する範囲をセンシングするセンサである。空中操作検出センサ１３５１は、具体的なセンサ構成としては、赤外線などの非可視光、非可視光レーザ、超音波などを用いた距離センサや、これを複数組み合わせて２次元平面の座標を検出できる構成としたものでもよい。また、空中操作検出センサ１３５１は、後述するＴｏＦ（Time of Flight）方式のＬｉＤＡＲ（Light Detection and Ranging）として構成してもよい。
【0035】
空中操作検出部１３５０は、空中操作検出センサ１３５１が取得したセンシング信号を取得し、これに基づいて、ユーザの手指による空間浮遊映像３への接触の有無や、空間浮遊映像３における当該接触の位置の算出を行う。空中操作検出部１３５０は、ＦＰＧＡなどの回路で構成されてもよい。
【0036】
空中操作検出センサ１３５１および空中操作検出部１３５０（これらをセンシングシステムと記載する場合がある）は、空間浮遊映像情報表示システム１に内蔵する構成としてもよいが、空間浮遊映像情報表示システム１とは別体の外部に設けてもよい。別体に設ける場合は、有線または無線の通信接続路や映像信号伝送路を介して空間浮遊映像情報表示システム１に情報または信号を伝達できるように構成すればよい。空中操作検出センサ１３５１および空中操作検出部１３５０の両者を別体で設けてもよい。この場合は、空中操作検出機能の無い空間浮遊映像情報表示システム１を本体として、空中操作検出機能のみをオプションで追加できるシステムを構築可能である。また、空中操作検出センサ１３５１のみを別体とし、空中操作検出部１３５０を空間浮遊映像情報表示システム１に内蔵してもよい。空間浮遊映像情報表示システム１の設置位置に対して空中操作検出センサ１３５１をより自由に配置したい場合などは、空中操作検出センサ１３５１のみを別体とする構成に利点がある。
【0037】
撮像部１１８０は、イメージセンサを有する、いわゆるカメラであり、空間浮遊映像３の付近の空間、および/または、ユーザの顔、腕、指などを撮像する。撮像部１１８０は、用途に応じて、複数のカメラや、深度センサ付きカメラが用いられてもよい。撮像部１１８０は、空間浮遊映像情報表示システム１とは別体に設けてもよい。撮像部１１８０は、複数のカメラや深度センサ付きカメラを用いる場合には、ユーザによる空間浮遊映像３へのタッチ操作、言い換えると空間浮遊映像３の面に接触する操作、の検出について、空中操作検出部１３５０を補助してもよい。
【0038】
例えば、空中操作検出センサ１３５１が、空間浮遊映像３が属する平面を対象として、当該平面内への物体侵入センサとして構成された場合、当該平面内へ侵入していない物体（例えばユーザの指）がどのくらい当該平面に近いのか、空中操作検出センサ１３５１のみでは検出できない場合がある。このような場合には、撮像部１１８０における複数のカメラの撮像結果による深度算出情報や深度センサによる深度情報を用いることにより、当該空間浮遊映像３の平面内へ侵入していない物体（例えばユーザの指）と当該平面との距離を算出可能となる。この算出情報を、空間浮遊映像３における各種表示制御に用いることができる。
【0039】
あるいは、本システムは、空中操作検出センサ１３５１を用いずに、撮像部１１８０の撮像結果に基づいて、空中操作検出部１３５０がユーザによる空間浮遊映像３のタッチ操作を検出するように構成されてもよい。
【0040】
撮像部１１８０が空間浮遊映像３を操作するユーザの顔などを撮像し、撮像画像に基づいて、制御部１１１０がユーザの識別・特定処理、あるいはユーザの認証処理を行うように構成されてもよい。あるいは、空間浮遊映像３を操作するユーザの周辺や背後に他の人が立っていて、空間浮遊映像３に対するユーザの操作を覗き見ていないかなどを判別するために、空間浮遊映像３を操作するユーザの周辺を含めて撮像するように、撮像部１１８０が構成されてもよい。
【0041】
操作入力部１１０７は、操作ボタンやリモコン受光部であり、空間浮遊映像３に対する空中操作とは異なる、ユーザによる操作に関する信号を入力する。操作入力部１１０７は、空間浮遊映像３をタッチ操作する上述のユーザとは別に、空間浮遊映像情報表示システム１の管理者が、本システムを操作するために用いてもよい。
【0042】
映像信号入力部１１３１は、外部の映像出力装置を接続して映像データを入力する機能を有する。音声信号入力部１１３３は、外部の音声出力装置を接続して音声データを入力する機能を有する。一方、音声信号出力部１１４０は、音声信号入力部１１３３に入力された音声データに基づいた音声信号を出力する機能を有する。また、音声信号出力部１１４０は、予めストレージ部１１７０に記録されている、数字や文字列などの音声データ、その他の操作音やエラー警告音のデータに基づいた音声信号を出力してもよい。なお、映像信号入力部１１３１、音声信号入力部１１３３を合わせて、映像・音声信号入力部１１３０と呼ぶ。映像信号入力部１１３１と音声信号入力部１１３３はそれぞれの構成でもよいが、合わせて1つでも構わない。
【0043】
音声信号出力部１１４０は、スピーカまたは超指向性スピーカ３０に接続される。音声信号出力部１１４０は、通常の可聴帯域の音声を出力するスピーカに接続してもよいが、後述のキオスク端末などの実施例のように、特に、秘匿性が高くセキュリティに配慮する必要がある場合には、ユーザ以外の他の人には聞き取ることができないように、超指向性スピーカに接続してもよい。超指向性スピーカとは、特定の限られた空間領域に存在する人の耳のみには可聴帯域の音声を聴取でき、その特定の空間領域の外に存在する人の耳にはその可聴帯域の音声を聴取できないという特性を有するスピーカである。
【0044】
超指向性スピーカ３０は、例えば、４０ｋＨｚ程度の超音波信号を発生できる超音波出力素子を平面上に複数個並べることで構成される。この時、使用する超音波出力素子の数が多いほど、超指向性スピーカによって得られる音声の音量は大きくなる。超指向性スピーカの原理を簡単に説明する。よく知られるように、超音波は可聴帯域の音声（例えば人の話し声）と比較して直進性が高い。従って、４０ｋＨｚの超音波信号をキャリア（搬送波）として、キャリアを可聴帯域の音声信号で変調（例えばＡＭ変調）することで、特定の限られた空間領域だけで音声が聞こえるようにすることが可能となる。
【0045】
例えば、撮像部１１８０として複数のカメラを用いることで、ユーザの顔や耳の位置を特定し、その特定の結果に応じて、超指向性スピーカ３０からの出力によって、ユーザの耳の近傍領域においてのみ音声が聞こえるようにすることができる。具体的には、超指向性スピーカ３０を構成する超音波出力素子に入力する超音波信号の位相（言い換えると遅延時間）を制御することで、特定の限られた空間領域だけで音声が聞こえるようにすることができる。また、複数の超音波出力素子を、平面上ではなく、例えば、凹面状の面に配置する構成によっても、特定の限られた空間領域だけで音声が聞こえるようにすることができる。
【0046】
不揮発性メモリ１１０８は、空間浮遊映像情報表示システム１で用いる各種データを格納する。不揮発性メモリ１１０８に格納されるデータには、空間浮遊映像３として表示される各種操作用のデータ、アイコンやボタンなどのユーザインタフェース映像情報、ユーザが操作するためのオブジェクトのデータやレイアウト情報なども含まれてもよい。メモリ１１０９は、空間浮遊映像３として表示する映像データや装置の制御用データを記憶する。
【0047】
制御部１１１０は、空間浮遊映像情報表示システム１のコントローラ（言い換えると制御装置）に相当し、接続される各部の動作を制御する。制御部１１１０は、プロセッサなどのデバイスを備えている。制御部１１１０は、不揮発性メモリ１１０８やストレージ部１１７０からメモリ１１０９または内蔵メモリに読み出したプログラムに従った処理を実行する。これにより、各種の機能が実現される。制御部１１１０は、メモリ１１０９に格納されるプログラムと協働して、接続される各部から取得した情報に基づいた演算処理を行ってもよい。制御部１１１０は、空間浮遊映像情報表示システム１を構成する筐体内に、マイコンなどを用いて実装されてもよいし、筐体外に接続・実装されてもよい。
【0048】
通信部１１３２は、有線または無線の通信インタフェースを介して、外部機器や外部のサーバなどと通信を行う。通信部１１３２は、当該通信により、映像、画像、音声、各種データを送受信する。
【0049】
ストレージ部１１７０は、映像、画像、音声、各種データなどを記録する。例えば、製品出荷時に、予め、映像、画像、音声、各種データなどをストレージ部１１７０に記録しておいてもよい。通信部１１３２を介して外部機器や外部のサーバなどから取得した映像、画像、音声、各種データなどをストレージ部１１７０に記録してもよい。ストレージ部１１７０に記録された映像、画像、各種データなどは、映像表示部１１０２、映像表示装置１０、および再帰性反射部１１０１を介して、空間浮遊映像３として出力可能である。
【0050】
空間浮遊映像３にユーザインタフェース（後述の操作メニューやコンシェルジュ映像を含む）として表示する、アイコン、ボタン、ユーザが操作するためのオブジェクトなどのデータや、コンシェルジュ映像を構成するデータも、ストレージ部１１７０に記録する映像や画像のデータに含まれていてもよい。また、空間浮遊映像３にユーザインタフェースとして表示するアイコン、ボタン、オブジェクトなどの操作メニューやコンシェルジュのレイアウト情報や、操作メニューやコンシェルジュに関する各種メタデータなどの情報も、ストレージ部１１７０に記録する各種データに含まれていてもよい。また、空間浮遊映像３のコンシェルジュが音声出力するための音声データも、ストレージ部１１７０に記録されていてもよい。ストレージ部１１７０に記録されている音声データは、音声信号出力部１１４０を介して、スピーカまたは超指向性スピーカ３０から音声信号として出力すればよい。
【0051】
制御部１１１０、または、映像制御部１１６０や音声信号出力部１１４０は、ストレージ部１１７０や不揮発性メモリ１１０８などに記憶されている、操作メニューやコンシェルジュを構成するための各種データに基づいて、操作メニューやコンシェルジュを表示・出力するための映像データや音声データを適宜に作成してもよい。
【0052】
映像制御部１１６０は、映像表示部１１０２に入力する映像信号についての各種制御を行う。映像制御部１１６０は、例えば、メモリ１１０９に格納する映像と、映像信号入力部１１３１で入力した映像などのうち、どの映像を映像表示部１１０２に入力する映像とするかなどの映像切り替え制御を行ってもよい。あるいは、映像制御部１１６０は、メモリ１１０９に格納する映像と、映像信号入力部１１３１で入力した映像とを重畳し、映像表示部１１０２に入力する合成映像を生成する制御を行ってもよい。また、映像制御部１１６０は、映像信号入力部１１３１で入力した映像データやメモリ１１０９に格納する映像などに対して画像処理の制御を行ってもよい。画像処理としては、例えば、画像の拡大、縮小、変形などを行うスケーリング処理や、輝度を変更するブライト調整処理や、画像のコントラストカーブを変更するコントラスト調整処理や、画像を光の成分に分解して成分ごとの重み付けを変更するレティネックス処理などがある。
【0053】
また、映像制御部１１６０は、映像表示部１１０２に入力する映像に対して、ユーザの空中操作を補助するための特殊効果映像処理などを行ってもよい。特殊効果映像処理は、空中操作検出部１３５０によるユーザ操作の検出結果や、撮像部１１８０によるユーザの撮像結果に基づいて制御されればよい。
【0054】
上述のように、空間浮遊映像情報表示システム１には、様々な機能を搭載可能である。しかしながら、空間浮遊映像情報表示システム１は、必ずしも上述した構成のすべてを有する必要は無い。空間浮遊映像情報表示システム１は、少なくとも空間浮遊映像３を生成する機能があれば、どのような構成でもよい。
【0055】
［空間浮遊映像の形成に関する第１方式］
図３は、実施例の空間浮遊映像情報表示システムにおける主要部構成を示し、また、空間浮遊映像３の形成、および再帰反射部材２の構成に関する一例（第１方式とする）を示す。
図３は、実施例の空間浮遊映像情報表示システムにおける主要部構成を示し、また、空間浮遊映像３の形成、および再帰反射部材２の構成に関する一例（第１方式とする）を示す。
【0056】
図３の（Ａ）に示すように、この空間浮遊映像情報表示システムは、ガラスなどの透光性を有する透過性プレートである透明部材１００に対し、斜め方向に、特定偏波の映像光を挟角に発散させる映像表示装置１０を備える。映像表示装置１０は、液晶表示パネル１１と、挟角な拡散特性を有する特定偏波の光を生成する光源装置１３とを備えている。
【0057】
映像表示装置１０から出射された特定偏波の映像光は、透明部材１００に設けられた、特定偏波の映像光を選択的に反射する膜を有する偏光分離部材１０１で反射され、反射された光が、再帰反射部材２に入射する。図３中では、シート状に形成された偏光分離部材１０１が、透明部材１００に粘着されている。
【0058】
透明部材１００に対し、他方の斜め方向に、再帰反射部材２が設けられている。再帰反射部材２の映像光入射面には、λ/４板２１（言い換えると四分の一波長板）が設けられている。映像光は、再帰反射部材２への入射の際と出射の際との計２回、λ/４板２１を通過させられることで、特定偏波（一方の偏波）から他方の偏波へ偏光変換される。
【0059】
ここで、特定偏波の映像光を選択的に反射する偏光分離部材１０１は、偏光変換後の他方の偏波の偏光については透過する性質を有する。よって、偏光変換後の他方の偏波の映像光は、偏光分離部材１０１を透過する。偏光分離部材１０１を透過した映像光は、図示のように、透明部材１００の外側に、実像である空間浮遊映像３を形成する。
【0060】
なお、空中浮遊映像３を形成する光は、再帰反射部材２から空中浮遊映像３の光学像へ収束する光線の集合であり、これらの光線は、空中浮遊映像３の光学像を通過後も直進する。よって、空中浮遊映像３は、一般的なプロジェクタなどでスクリーン上に形成される拡散映像光とは異なり、高い指向性を有する映像である。
【0061】
よって、図３の構成では、矢印Ａの方向からユーザが視認する場合には空中浮遊映像３は明るい映像として視認されるが、例えば矢印Ｂの方向から他の人物が視認する場合には、空中浮遊映像３は映像として一切視認できない。このような空中浮遊映像３の特性は、高いセキュリティが求められる映像や、ユーザに正対する人物には秘匿したい秘匿性の高い映像を表示するシステムなどに採用する場合に、非常に好適である。
【0062】
なお、再帰反射部材２の性能によっては、反射後の映像光の偏光軸が不揃いになることがある。この場合、偏光軸が不揃いになった一部の映像光は、上述した偏光分離部材１０１で反射されて映像表示装置１０の方に戻る。この一部の映像光は、映像表示装置１０を構成する液晶表示パネル１１の映像表示面で再反射し、ゴースト像を発生させる。これにより、空間浮遊像３の画質の低下を引き起こす要因になり得る。
【0063】
そこで、本実施例では、映像表示装置１０の映像表示面に吸収型偏光板１２が設けられている。吸収型偏光板１２は、映像表示装置１０から出射する映像光を当該吸収型偏光板１２にて透過させ、偏光分離部材１０１から戻ってくる反射光を当該吸収型偏光板１２で吸収させることで、再反射を抑制できる。従って、吸収型偏光板１２を用いる本実施の形態によれば、空間浮遊映像３のゴースト像による画質低下を防止または抑制できる。
【0064】
上述した偏光分離部材１０１は、例えば反射型偏光板や特定偏波を反射させる金属多層膜などで形成すればよい。
【0065】
図３の（Ｂ）は、第１方式で用いる再帰反射部材２の構成例を示す。図３の（Ｂ）には、代表的な再帰反射部材２として、今回の検討に用いた日本カーバイド工業株式会社製の再帰反射部材の表面形状を示す。この再帰反射部材２は、表面において、規則的に配列された６角柱の再帰反射部（再帰反射素子）２ａを有する。６角柱の内部に入射した光線は、６角柱の壁面と底面で反射され、再帰反射光として、入射光に対応した方向に出射し、映像表示装置１０に表示した映像に基づいて実像である空間浮遊映像３を表示する。
【0066】
この空間浮遊映像３の解像度は、液晶表示パネル１１の解像度の他に、図３の（Ｂ）で示す再帰反射部材２の再帰反射部２ａの外形ＤとピッチＰに大きく依存する。例えば、７インチのＷＵＸＧＡ（１９２０×１２００画素）の液晶表示パネル１１を用いる場合には、１画素（１トリプレット）が約８０μmであっても、例えば再帰反射部２ａの直径Ｄが２４０μmでピッチＰが３００μmであれば、空間浮遊映像３の１画素は３００μm相当となる。このため、空間浮遊映像３の実効的な解像度は、１/３程度に低下する。そこで、空間浮遊映像３の解像度を映像表示装置１０の解像度と同等にするためには、再帰反射部２ａの直径ＤとピッチＰを液晶表示パネル１１の１画素に近づけることが望まれる。他方、再帰反射部材２ａと液晶表示パネル１１の画素によるモアレの発生を抑えるためには、それぞれのピッチ比を１画素の整数倍から外して設計するとよい。
【0067】
また、形状は、再帰反射部２ａのいずれの一辺も液晶表示パネル１１の１画素のいずれの一辺と重ならないように配置するとよい。
【0068】
一方、再帰反射部材２を低価格で製造するためには、ロールプレス法を用いて成形するとよい。この方法は、具体的には、再帰反射部２ａを整列させフィルム上に賦形する方法である。この方法は、賦形する形状の逆形状をロール表面に形成し、固定用のベース材の上に紫外線硬化樹脂を塗布し、ロール間を通過させることで、必要な形状を賦形し、紫外線を照射して硬化させ、所望形状の再帰反射部材２を得る。
【0069】
［空間浮遊映像の形成に関する第２方式］
次に、図４は、本実施例の空間浮遊映像情報表示システムにおける空間浮遊映像３の形成、および再帰反射部材の構成に関する他の一例（第２方式とする）を示す。図４の（Ａ）は、第２方式での再帰反射部材３３０を用いた空間浮遊映像３の形成の概要を示す。再帰反射部材３３０に対し、一方の空間（本例ではＺ方向で下側の空間）内にある物体Ｐ（対応する点Ｐ）からの光は、再帰反射部材３３０に入射し、再帰反射されて、他方の空間（本例ではＺ方向で上側の空間）内に、空間浮遊映像３３１（対応する点Ｑ）を形成する。
次に、図４は、本実施例の空間浮遊映像情報表示システムにおける空間浮遊映像３の形成、および再帰反射部材の構成に関する他の一例（第２方式とする）を示す。図４の（Ａ）は、第２方式での再帰反射部材３３０を用いた空間浮遊映像３の形成の概要を示す。再帰反射部材３３０に対し、一方の空間（本例ではＺ方向で下側の空間）内にある物体Ｐ（対応する点Ｐ）からの光は、再帰反射部材３３０に入射し、再帰反射されて、他方の空間（本例ではＺ方向で上側の空間）内に、空間浮遊映像３３１（対応する点Ｑ）を形成する。
【0070】
図４の（Ｂ）は、代表的な再帰反射部材３３０として、今回の検討に用いた株式会社アスカネット製の再帰反射部材の動作原理を説明するための表面形状を示す。再帰反射部材３３０は、表面（図示のＸ－Ｙ面）において、規則的に配列された４面の構造体（言い換えると四面体）３３０Ａを有する。側壁３３０Ｂ間に、複数の構造体３３０Ａが配列されている。４面の構造体３３０Ａは、例えばＺ方向に延在する四角柱形状を有するマイクロミラーである。例えば物体Ｐからの光（物体光とも記載）が４面の構造体３３０Ａの内部に入射する。４面の構造体３３０Ａの内部に入射した光線は、４面の構造体３３０Ａの壁面のうち、２つの面（例えば反射面ＲＳ１と反射面ＲＳ２）で反射される。反射された光線（反射面ＲＳ１から上側へ出射される光線と、反射面ＲＳ２から上側へ出射される光線との両方）を、反射光Ｒ０として示す。反射光Ｒ０は、再帰反射光として、入射光に対応した方向に出射し、図４の（Ａ）のように、物体Ｐに基づいた実像である空間浮遊映像３３１を形成・表示する。
【0071】
この空間浮遊映像３３１の解像度も、前述した図３の第１方式の再帰反射部材２と同様に、再帰反射部材３３０の再帰反射部（４面の構造体３３０Ａ）の外形（直径）ＤＳとピッチＰＴに大きく依存する。例えば、７インチのＷＵＸＧＡ（１９２０×１２００画素）の液晶表示パネルを用いる場合には、１画素（１トリプレット）が約８０μmであっても、例えば再帰反射部の外形（直径）ＤＳが１２０μmでピッチＰＴが１５０μmであれば、空間浮遊像３３１の１画素は１５０μm相当となる。このため、空間浮遊映像３３１の実効的な解像度は、１/２程度に低下する。
【0072】
そこで、空間浮遊映像３３１の解像度を映像表示装置１０の解像度と同等にするためには、再帰反射部（構造体３３０Ａ）の直径ＤＳとピッチＰＴを、液晶表示パネルの１画素に近づけることが望まれる。他方、再帰反射部材３３０と液晶表示パネルの画素によるモアレの発生を抑えるためには、前述のようにそれぞれのピッチ比を１画素の整数倍から外して設計するとよい。また、形状は、再帰反射部（構造体３３０Ａ）のいずれの一辺も液晶表示パネルの１画素のいずれの一辺と重ならないように配置するとよい。
【0073】
なお、空間浮遊映像３３１を形成する光は、再帰反射部材３３０から空中浮遊映像３３１の光学像へ収束する光線の集合であり、これらの光線は、空中浮遊映像３３１の光学像を通過後も直進する。よって、空間浮遊映像３３１は、一般的なプロジェクタなどでスクリーン上に形成される拡散映像光とは異なり、高い指向性を有する映像となる。
【0074】
図４の構成では、矢印Ａの方向からユーザが視認する場合には、空間浮遊映像３３１は、明るい映像として視認されるが、例えば矢印Ｂの方向から他の人物が視認する場合には、空間浮遊映像３３１は映像として一切視認できない。このような空間浮遊映像３３１の特性は、前述の第１方式の再帰反射部材２を用いた空中浮遊映像と同様に、高いセキュリティが求められる映像や、ユーザに正対する人物には秘匿したい秘匿性の高い映像を表示するシステムなどに採用する場合に、非常に好適である。
【0075】
なお、第２方式の再帰反射部材３３０においては、物体Ｐからの光は、図４（Ｂ）に示すように、再帰反射部材３３０に対して一方の側（Ｚ方向の下側）から入射し、再帰反射部材３３０を構成する４面の壁面に設けられた２つの反射面（ＲＳ１，ＲＳ２）で反射し、反射光Ｒ０として、他方の側（Ｚ方向の上側）に、点Ｑの位置に、空間浮遊映像３３１を結像する。この時、２つの反射面（ＲＳ１，ＲＳ２）では、反射光Ｒ０とは反射方向が異なる光として異常光Ｒ１，Ｒ２が発生する。２つの反射面（ＲＳ１，ＲＳ２）で発生した異常光Ｒ１，Ｒ２により、図４の（Ａ）に示すようなゴースト像３３２，３３３を発生させる。このため、ゴースト像３３２，３３３が空間浮遊映像３３１の画質の低下を引き起こす要因となり得る。
【0076】
上述したように、第１方式での再帰反射部材２は、反射面の数に応じてゴースト像が発生する。それに対し、第２方式での再帰反射部材３３０は、物体光の入射角度により特定の２方向にのみゴースト像が発生する。よって、第２方式での再帰反射部材３３０の方が、ゴースト像の影響が少なく、高画質な空間映像表示が可能となる。そのため、以下に示す空間浮遊映像表示装置および空間浮遊映像情報表示システムとしては、第２方式の再帰反射部材３３０を適用する場合に絞って説明する。
【0077】
［ゴースト像を低減する技術手段］
ゴースト像を低減した高画質な空間浮遊映像を形成できる空間映像表示装置などを実現するためには、映像表示素子としての液晶表示パネルからの映像光の発散角を制御して、所望の方向に曲げるために、液晶表示パネルの出射面に映像光制御シートを設けるとよい。さらに、再帰反射部材３３０の光線出射面、または光線入射面、またはそれらの両面に、映光制御シートを設けて、ゴースト像を発生させる要因となる異常光Ｒ１，Ｒ２（図４の（Ｂ））を吸収させるとよい。
ゴースト像を低減した高画質な空間浮遊映像を形成できる空間映像表示装置などを実現するためには、映像表示素子としての液晶表示パネルからの映像光の発散角を制御して、所望の方向に曲げるために、液晶表示パネルの出射面に映像光制御シートを設けるとよい。さらに、再帰反射部材３３０の光線出射面、または光線入射面、またはそれらの両面に、映光制御シートを設けて、ゴースト像を発生させる要因となる異常光Ｒ１，Ｒ２（図４の（Ｂ））を吸収させるとよい。
【0078】
図５には、上記映像光制御シートを空間浮遊映像表示装置に適用する具体的な方法および構成例を示す。図５では、映像光制御シート３３４が、映像表示素子である液晶表示パネル３３５の出射面に設けられる。図５では、液晶表示パネル３３５の出射面を、図示のＸ軸とＹ軸とが為す平面（Ｘ－Ｙ面）として示している。映像光制御シート３３４は、主面（Ｘ－Ｙ面）において、透過部と光吸収部とを有している。この場合に、液晶表示パネル３３５の画素と映像光制御シート３３４の透過部および光吸収部とのピッチによる干渉によってモアレが発生し得る。このモアレを低減するためには、以下に示す２つの方法が有効である。
【0079】
（１）第１の方法としては、映像光制御シート３３４の透過部と光吸収部により生じる縦縞（図示の斜め線）を、液晶表示パネル３３５の画素の配列（Ｘ軸およびＹ軸）に対して、所定の角度（傾き）θ０だけ傾けて配置する。
【0080】
（２）第２の方法としては、液晶表示パネル３３５の画素寸法をＡ、映像光制御シート３３４の縦縞のピッチをＢとした場合に、これらの比率（Ｂ/Ａ）を、整数倍から外した値に選択する。液晶表示パネル３３５の１画素は、ＲＧＢの３色のサブ画素が並列して成り、一般的には正方形であるため、上述したモアレの発生を画面全体で抑えることはできない。このため、（１）の第１の方法に示した傾きθ０は、空間浮遊映像を表示させない箇所にモアレの発生位置を意図的にずらして配置できるように、５度から２５度の範囲内で最適化すればよい。
【0081】
上記モアレを低減するために、液晶表示パネルと映像光制御シート３３４を題材に述べたが、再帰反射部材３３０に映像光制御シート３３４を設ける場合に再帰反射部材３３０と映像光制御シート３３４との間に発生するモアレについても、同様の方法・構成が適用できる。再帰反射部材３３０と映像光制御シート３３４は、両者が線状の構造体であるため、映像光制御シート３３４を、再帰反射部材３３０のＸ軸およびＹ軸に着目して最適に傾ければよい。これにより、目視でも視認できる、波長が長く周波数が低い大柄なモアレを低減できる。
【0082】
図６の（Ａ）は、液晶表示パネル３３５の映像光出射面３３５１に映像光制御シート３３４が配置された構成を有する映像表示装置１０の垂直断面図を示す。映像光制御シート３３４は、主面において、光透過部３３６と光吸収部３３７とが交互に配置して構成され、粘着層３３８により、液晶表示パネル３３５の映像光出射面３３５１に粘着固定されている。
【0083】
また、前述したように、映像表示装置１０として７インチのＷＵＸＧＡ（１９２０×１２００画素）の液晶表示パネルを用いる場合には、１画素（１トリプレット）（図中のＡで示す）が約８０μmであっても、以下の構成で、空間浮遊映像３３１の両側に発生する図４の（Ａ）のゴースト像３３２，３３３を軽減できる。例えば、映像光制御シート３３４のピッチＢとして、透過部３３６の距離ｄ２が３００μmと、光吸収部３３７の距離ｄ１が４０μmとからなるピッチＢを３４０μmとする。この場合、映像光制御シート３３４により、十分な透過特性と、異常光の発生原因となる映像表示装置１０からの映像光の拡散特性とを制御することで、ゴースト像を軽減できる。この場合、映像制御シート３３４の厚さは、ピッチＢの２/３以上とすると、ゴースト低減効果が大幅に向上する。
【0084】
図６の（Ｂ）は、再帰反射部材３３０（図４）の映像光出射面に映像光制御シート３３４が配置された構成の垂直断面図を示す。映像光制御シート３３４は、光透過部３３６と光吸収部３３７とが交互に配置されて構成され、再帰反射部材３３０に対し、再帰反射光３３４１の出射方向に合わせて所定の傾斜角θ１を持って傾斜配置されている。この結果、映像光制御シート３３４によって、前述した再帰反射に伴って発生する異常光Ｒ１，Ｒ２（図４の（Ｂ））を吸収し、他方、正常反射光は、再帰反射光３３４１として、損失無く透過させることができる。
【0085】
再帰反射部材３３０は、前述の４面の構造体３３０Ａ（図４）による再帰反射部に対応する空間３３０１が配列されている。再帰反射部に対応する空間３３０１は、側壁３３０Ｂの面によって区切られている。空間３３０１内は例えば反射面Ｒ１や反射面Ｒ２を有する。再帰反射部材３３０に対し、例えば下側から入射した光ａ１は、例えば空間３３０１の反射面Ｒ１で反射され、反射された光ａ２はさらに例えば反射面Ｒ２で反射されて、再帰反射部材３３０の上側に出射する。その出射した光は、映像光制御シート３３４に入射されて、再帰反射光３３４１として出射される。
【0086】
７インチのＷＵＸＧＡ（１９２０×１２００画素）の液晶表示パネルを用いる場合には、１画素（１トリプレット）が約８０μmであっても、以下の図４の（Ａ）のような構成で、空間浮遊映像３３１３３０の両側に発生するゴースト像３３２，３３３を軽減できる。図６の（Ｂ）に示すように、例えば、映像光制御シート３３４のピッチＢとして、再帰反射部材３３０の透過部３３６の距離ｄ２が４００μmと、光吸収部３３７の距離ｄ１が２０μmとからなるピッチＢが４２０μmとする。この場合、映像光制御シート３３４により、十分な透過特性と、再帰反射部材３３０での異常光の発生原因となる映像表示装置１０からの映像光の拡散特性を制御し、ゴースト像を軽減できる。
【0087】
上述した映像光制御シート３３４は、他方、外界からの外光が空間浮遊映像表示装置内に侵入する妨げにもなるため、構成部品の信頼性向上にも繋がる。この映像光制御シート３３４としては、例えば信越ポリマー（株）の視野角制御フィルム（ＶＣＦ）が適している。そのＶＣＦの構造は、透明シリコンと黒色シリコンとが交互に配置され、光入出射面に合成樹脂が配置されて、サンドウィッチ構造となっている。そのため、このＶＣＦを本実施例の映像光制御シート３３４として適用した場合に、上述の効果が期待できる。
【0088】
［空間浮遊映像に対する操作をセンシングする技術］
ユーザ（利用者、操作者などと記載する場合もある）は、空間浮遊映像情報表示システム１による空間浮遊映像３（図２など）を介して、システムと双方向で接続される。言い換えると、ユーザは、空間浮遊映像３を見て操作することで、システムのアプリケーション（例えばキオスク端末のチケット販売機能）などを利用する。そのために、ユーザが空間浮遊映像３を疑似的に操作してその操作をセンシングするためのセンシング技術が必要である。このセンシング技術の例について、以下に具体例を挙げて説明する。ここでいう「センシング技術」とは、図２を用いて説明した空中操作検出センサ１３５１および空中操作検出部１３５０を含み、特に、３次元空間におけるユーザの操作（言い換えると空中操作）を検出するための技術である。空中操作検出センサ１３５１および空中操作検出部１３５０を、センシングシステムと記載する場合がある。
ユーザ（利用者、操作者などと記載する場合もある）は、空間浮遊映像情報表示システム１による空間浮遊映像３（図２など）を介して、システムと双方向で接続される。言い換えると、ユーザは、空間浮遊映像３を見て操作することで、システムのアプリケーション（例えばキオスク端末のチケット販売機能）などを利用する。そのために、ユーザが空間浮遊映像３を疑似的に操作してその操作をセンシングするためのセンシング技術が必要である。このセンシング技術の例について、以下に具体例を挙げて説明する。ここでいう「センシング技術」とは、図２を用いて説明した空中操作検出センサ１３５１および空中操作検出部１３５０を含み、特に、３次元空間におけるユーザの操作（言い換えると空中操作）を検出するための技術である。空中操作検出センサ１３５１および空中操作検出部１３５０を、センシングシステムと記載する場合がある。
【0089】
図７の（Ａ）は、第１のセンシング技術を説明するための原理図を示す。図７の（Ａ）に示すように、空間浮遊映像ＦＩに対するセンシングエリアａ０、ａ１、ａ２、ａ３は、それぞれ複数のエリア（言い換えると領域）に分割される。本実施例では、センシングエリアａ０、ａ１、ａ２、ａ３は、縦横で３×４＝１２のエリアに１２分割されている。図７の（Ａ）では、空間浮遊映像ＦＩの面をｘ－ｙ面として示しており、面に対する前後方向をｚ方向で示している。例えば、図示のエリアＡ３０１は、センシング面ａ３のうちの左上の１つのエリアである。
【0090】
第１のセンシング技術では、空間浮遊映像ＦＩのそれぞれのエリアに対応したＴＯＦ（Time of Flight）システムを内蔵した第１の測距装置３４０が設けられる。第１の測距装置３４０は、図２での空中操作検出センサ１３５１の代わりに設けられる。第１の測距装置３４０の発光部から、システムの信号に同期させて、光源である近赤外線発光のＬＥＤ（Light Emitting Diode）を発光させる。ＬＥＤの光線出射側には、発散角を制御するための光学素子が設けられ、受光素子としてピコ秒の時間分解能を持つ高感度なアバランシェダイオード（ＡＢＤ）を一対として、１２エリアに対応するように、縦４列、横３行に整列配置される。システムからの信号に同期させて、光源であるＬＥＤが発光し、その光が、測距すべき対象物（ここではユーザの手指ＵＨの先端）に反射して、受光部に戻るまでの時間だけ、位相のずれ（位相シフト）、すなわち、発光タイミングと受光タイミングの時間的なずれ、より具体的には、後述する、図９中のΔｔ０～Δｔ１１が生じる。
【0091】
図９の（Ｂ）に示すセンシングシステムの演算ユニットは、システムからの信号と、第１の測距装置３４０の受光部であるアバランシェダイオードによって生成される信号とを受け取り、これらの信号から、位相シフトを計算することで、対象物までの距離を算出する。エリアごとに対応付けられたＴＯＦシステム（ＴＯＦ１～ＴＯＦ１２）ごとに、距離が算出される。図７の（Ａ）で、空間浮遊映像ＦＩの面に対し、ｚ方向で、対象物（手指ＵＨ）に近い側には、測距装置３４０の計測階層として、対象物に近い順に、センシング面ａ３，ａ２，ａ１（第１センシング面ａ３、第２センシング面ａ２、第３センシング面ａ１とも記載）を示し、さらに空間浮遊映像ＦＩから離れる側に、計測階層として、センシング面ａ０を示す。距離Ｌ１はセンシング面ａ０までの距離、距離Ｌ２はセンシング面ａ１までの距離、距離Ｌ３はセンシング面ａ２までの距離、距離Ｌ４はセンシング面ａ１までの距離を示す。
【0092】
次に、センシングシステムは、対象物（手指ＵＨ）の移動の方向については、それぞれの計測階層（センシング面ａ３～ａ１）において、１２のエリアのどのエリアを通過したかを認識し、それぞれの計測階層の移動時間を前述した方法で算出することで、システムとして認識できる。
【0093】
図９の（Ａ）には、１２の測定エリアごとのＬＥＤ光源の発光のタイミングと受光素子の受光のタイミングを示す。ＳＵ１～ＳＵ１２は、各エリアおよびＴＯＦに対応付けられたセンシングユニットごとの発光タイミングと受光タイミングを示す。図９の（Ａ）に示すように、センシングユニットＳＵ１においては、発光タイミングと受光タイミングとの時間差はΔｔ０であり、センシングユニットＳＵ２においては、発光タイミングと受光タイミングとの時間差はΔｔ１であり、センシングユニットＳＵ１２においては、発光タイミングと受光タイミングとの時間差はΔｔ１１であることがわかる。ここで、センシングシステムは、ＬＥＤの発光のタイミングを１２の測定エリアごとに遅延させることで、個々のデータを画一化させている。
【0094】
実際に、システムに双方向で接続されるために、ユーザが、意思によって、空間浮遊映像ＦＩに向けて手指ＵＨを伸ばしたとする。その場合、センシングシステムは、空中浮遊映像ＦＩから最も遠いセンシング面ａ３において例えばエリアＡ３０１で感知した第１感知信号Ｓ１と、例えばセンシング面ａ２の特定エリアで感知した第２の感知信号Ｓ２と、例えば第３センシング面ａ１の特定エリアで感知した第３の感知信号Ｓ３とを得る。センシングシステムは、これらの感知信号（Ｓ１～Ｓ３）によって、手指ＵＨの移動方向とそれぞれのセンシング面を横切った時間差から、空間浮遊映像ＦＩとの接点位置を計算処理して求める。
【0095】
さらに高精度な位置情報を取得するため、空間浮遊映像ＦＩから奥に離れた位置のセンシング面ａ０が設定される。センシングシステムは、センシング面ａ０での感知に基づいて、空間浮遊映像ＦＩを手指ＵＨが通過したことを終了信号として検知するとともに、その感知の位置座標と、前述した２つの感知信号とから、空間浮遊映像ＦＩへの接触点を３次元座標として求める。
【0096】
また、図７の（Ｂ）は、ユーザの手指ＵＨ（特に指先端）によって空間浮遊映像ＦＩの一部を選択する動作と、ユーザの手指ＵＨが空間浮遊映像ＦＩの一部から離れる動作とを示す。図７の（Ｂ）に示すように、第１のセンシング技術では、ユーザが空間浮遊映像ＦＩの所望の位置座標に接触した後、手指ＵＨを戻した場合には、以下のようになる。すなわち、センシングシステムは、第３センシング面ａ３で感知した第３の感知信号Ｓ３と第２センシング面ａ２で感知した第２の感知信号Ｓ２とによって、さらに第１センシング面ａ１で感知した第１の感知信号Ｓ１を、順次、センシングシステムの演算ユニットに伝達し、計算処理する。これにより、空間浮遊映像ＦＩの特定座標からユーザの手指ＵＨが離れたことが、システム上で認識される。
【0097】
次に、空間浮遊映像を疑似的に操作するためのさらに高精度なセンシング技術について以下に説明する。
【0098】
図８の（Ａ）は、第２のセンシング技術を説明するための原理図を示す。第２のセンシング技術は、図７の（Ａ）に示した第１のセンシング技術との違いとしては、第１の測距装置３４０に加え、第２の測距装置３４１が配置併設され、より高精度なセンシングを実現する。第１の測距装置３４０と第２の測距装置３４１が併設されてもよい。第２のセンシング技術では、第２の測距装置３４１（特にＣＭＯＳセンサ）を第２センシングシステムとして、第１センシングシステムと組み合わせて用いる。図８の（Ａ）に示すように、第２の測距装置３４１は、第１の測距装置３４０と同様の範囲（センシング面ａ１，ａ２，ａ３，ａ０）を対象としてセンシングする。
【0099】
第１の測距装置３４０は、上述したように、空間浮遊映像ＦＩにおける例えば１２個に分割された複数のエリアの各エリアに対応したＴＯＦシステムを内蔵している（図８の（Ｂ）での第１センシングシステム）。他方、第２の測距装置３４１は、２次元の画像センサ、例えばセンシングカメラ用途の１/４インチＣＭＯＳセンサを適用する。このＣＭＯＳセンサの縦横比は、３:４が一般的である。このため、本実施例では、そのＣＭＯＳセンサの縦横比に合わせて、第１の測距装置３４０のＴＯＦシステムについても、センシングエリアを上述のように縦３分割、横４分割として合計１２エリアとしている。
【0100】
また、ＣＭＯＳセンサの解像度は、１００万画素程度でも十分な分解能が得られるが、通常のカメラシステムとは異なり、ＲＧＢの色分離フィルターを設ける必要が無い。そのため、ＣＭＯＳセンサは、同一画素数では小型化や高感度化が実現できるばかりでなく、近赤外光に対する感度が高い。そのため、第２のセンシング技術では、第１の測距装置３４０のＴＯＦシステムの光源光によって測距すべき対象物（手指ＵＨの先端）がエリアごとに決められたタイミングで照明されるので、検知精度が大幅に向上する。詳解は省くが、図９の（Ｂ）には、以上述べたシステムを機能ブロック図として示している。
【0101】
図８の（Ｂ）は、第１の測距装置３４０によるセンシング面ａ１，ａ２，ａ３と、それらに対応して設けられた、第２の測距装置３４１によるセンシング面ｂ１，ｂ２，ｂ３と、を示す。そして、図８の（Ｂ）は、それらのセンシング面に対する、手指ＵＨによる、空間浮遊映像ＦＩの一部を選択する動作や、一部から離れる動作を示す。
【0102】
図８の（Ｂ）に示すように、第２のセンシング技術を用いた空間浮遊映像情報表示システムにおいては、ユーザが意思によって空間浮遊映像ＦＩに向けて手指ＵＨを伸ばした場合、以下のようになる。この場合、上述した第１の測距装置３４０による３次元情報の他に、第２の測距装置３４１による３次元情報が得られる。空中浮遊映像ＦＩから最も遠い第１の測距装置３４０のセンシング面ａ３に対応した第２の測距装置３４１のセンシング面ｂ３の平面分解能は、使用しているＣＭＯＳセンサの解像度に合わせて高精度化できる。同様に、センシング面ａ２にはセンシング面ｂ２が対応し、センシング面ａ１にはセンシング面ｂ１が対応している。これにより、平面方向の分解能を大幅に向上させたセンシングシステムが実現できる。
【0103】
この時、対象物（ユーザの手指ＵＨの先端）の移動方向については、第１の測距装置３４０および第２の測距装置３４１のそれぞれのセンシング面を横切った時間差から、空間浮遊映像ＦＩとの接点位置が、計算処理で求められる。さらに高精度な位置情報を取得するため、空間浮遊映像ＦＩから奥側に離れたセンシング面ａ０が設定される。センシングシステムは、空間浮遊映像ＦＩを手指ＵＨが通過したことを終了信号として検知するとともに、そのセンシング面ａ０での位置座標と前述した２つの感知信号から、空間浮遊映像ＦＩへの接触点を、より精細度の高い３次元座標として算出できる。
【0104】
また、ＣＭＯＳセンサのフレームレートを１/２０秒から１/３０秒、１/１２０秒と高速化した場合には、平面方向の検知精度に加え、単位時間当たりに取り込む平面情報が増えるため、分解能が大幅に向上する。この時、第２のセンシング技術による検出情報は、第１のセンシング技術による位置情報とは、システムから供給される同期信号により、系統付けされる。
【0105】
さらに、図８の（Ｂ）に示すように、ユーザが空間浮遊映像ＦＩの所望の位置座標に接触した後、手指ＵＨを戻した場合には、上述した第１のセンシング技術と同様に、第３センシング面ａ３で感知した第３の感知信号Ｓ３、第２センシング面ａ２で感知した第２の感知信号Ｓ２、および第１のセンシング面ａ１で感知した第１の感知信号Ｓ１が、順次にセンシングシステムの演算ユニットに伝達される。そして、演算ユニットでの計算処理によって、空間浮遊映像ＦＩの特定座標からユーザの手指ＵＨが離れたことが、システム上で認識される。
【0106】
以上述べたセンシングシステムの第１の測距装置３４０のＴＯＦセンサで使用するＬＥＤ光源は、測距装置の太陽光などの外光に対する精度低下を防ぎ、肉眼で視認できない可視光範囲（３８０nm～７８０nm）を超えた領域で光のエネルギーが高い近赤外光を用いるとよい。
【0107】
【0108】
[空間浮遊映像に対し文字や図形を入力する技術]
次に、実施例の空間浮遊映像情報表示システムとして、ユーザが空間浮遊映像に文字や図形などの任意の像を入力できる技術について説明する。この技術を用いることで、ユーザが空間浮遊映像に対し例えばサイン（署名）の入力を行うことができる。
次に、実施例の空間浮遊映像情報表示システムとして、ユーザが空間浮遊映像に文字や図形などの任意の像を入力できる技術について説明する。この技術を用いることで、ユーザが空間浮遊映像に対し例えばサイン（署名）の入力を行うことができる。
【0109】
前述の図２の空中操作検出センサ１３５１を用いたセンシング技術や、図７や図８のＴＯＦシステムを用いたセンシング技術を用いることで、対象物としてユーザの手指の指先位置や移動方向、空間浮遊映像との接点位置、空間浮遊映像から指が離れた位置（離脱位置とも記載）などを求めることができる。よって、空間浮遊映像情報表示システムは、上記接点位置および離脱位置の検出情報に基づいて、それらの２点を結ぶ線分を、空間浮遊映像の面に像として描画が可能となる。
【0110】
本実施例では、上記センシング技術を利用することで、空間浮遊映像の面上で、ユーザの手指の動き、言い換えると接点の位置の移動を検出することで、文字などの線を入力・表示することができる。
【0111】
例えば、空間浮遊映像情報表示システムは、空間浮遊映像とユーザの指先との接点位置を検出し、その後、指先が面内で別の位置に移動し、その移動した先で指先が空間浮遊映像から離れたことおよび離脱点を検出する。これにより、空間浮遊映像の面上で、例えば、線分や曲線などの図形、あるいは、アルファベットや数字のような文字の描画が可能となる。これにより、あたかも、タッチパネル付きの液晶ディスプレイの面上で図形や文字を描くことと同様に、空間浮遊映像の面上で図形や文字の入力ができる。
【0112】
また、図示しないが、空間浮遊映像情報表示システムは、センシング技術を用いて、空間浮遊映像に対するユーザの指先の動きを、所定の時間間隔（例えば１００ミリ秒）でサンプリングし、各サンプリング点を結ぶように空間浮遊映像に線を描画する。これにより、例えば数字の１、２、３、アルファベットのＬやＭなどのような、一筆書きができる文字や図形である場合、空間浮遊映像として描画が可能である。
【0113】
さらに、例えば、４やＨなどのような、一筆書きができない文字や図形の場合には、以下のように対応できる。すなわち、ユーザが例えばＨの文字を入力する場合、システムは、まず、空間浮遊映像の面に対する指の連続的な接触による縦の線（第１の線）を検出・描画する。次に、システムは、ユーザが面から一旦指を離してから再び指を別の位置に接触したことを検出して、横の線（第２の線）を検出・描画する。最後に、システムは、ユーザが面から指を離して再び別の位置に接触したことを検出して、縦の線（第３の線）を検出・描画する。これにより、空間浮遊像の面にＨの文字を描画できる。
【0114】
図１２は、上記空間浮遊映像に対するユーザの手指による文字や図形などの像を入力・描画する技術についての説明図を示す。図１２では、空間浮遊映像情報表示システム１により表示される空間浮遊映像ＦＩをユーザの視点から見た場合の模式図を示す。本例では、空間浮遊映像ＦＩは、システムの筐体１２０１の水平面に対し斜めに配置されており、ユーザの視点からはやや斜め下に空間浮遊映像ＦＩを見る。本例では、空間浮遊映像ＦＩは、四角形の枠１２０２（なお、これは枠状のデバイスではない）の表示を含んでいる。最初、枠１２０２は所定の色（例えば緑色）で表示されており、枠１２０２内には所定の背景色のみが表示されているとする。
【0115】
図１２の例では、ユーザの手指の指先ＵＦによって、空間浮遊映像ＦＩ面上に、単純な文字の例として、アルファベットのＬを描く様子を示している。その際、ユーザは、文字を描くという意思を、何らかの方法で空間浮遊映像情報表示システム１に伝える。例えば、一実施例では、物理的な押しボタンとして、文字入力ボタン１２０３が、空間浮遊映像情報表示システム１の任意の箇所、本例では筐体１２０１上の右下の位置に設けられている。ユーザが文字入力ボタン１２０３を押した場合、システムは、ユーザが空間浮遊映像ＦＩに対し文字などを入力する意思として捉え、空間浮遊映像ＦＩに対し入力・描画するモード（文字入力モードとも記載）に遷移する。また、物理的な押しボタンではなく、音声で文字を描くという意思を空間浮遊映像情報表示システム１に伝えることも可能となる。
【0116】
これに限らず、他の実施例では、空間浮遊映像情報表示システム１が提供する空間浮遊映像ＦＩの一部に、ユーザインタフェースとして、文字入力ボタンが表示されてもよい。ユーザがその文字入力ボタンをタッチ操作することで、同様に、システムは、空間浮遊映像ＦＩに対し入力・描画するモードに遷移する。
【0117】
空間浮遊映像情報表示システム１は、文字入力モードでは、空間浮遊映像ＦＩの画面全体を例えば白色の表示に変化させる。また、システムは、文字入力モードでは、空間浮遊映像ＦＩの枠１２０２を、所定の色、例えば赤色に変化させる。システムは、空間浮遊映像ＦＩの面に対するユーザの指ＵＦの動きや接点位置を前述のように３次元的にセンシングする。そして、システムは、そのセンシングに基づいて、空間浮遊映像ＦＩの面において、指ＵＦの動きに対応した接点位置を、背景である白色とは異なる所定の色、例えば黒色あるいは青色などで描画する。これにより、指ＵＦの動きの軌跡が、空間浮遊映像ＦＩの白色の背景面上に、線として描画される。そうすれば、ユーザ自身が、空間浮遊映像ＦＩにおける自分が描いた線を見ながら、所望の文字や図形を描くことができる。
【0118】
システムは、空間浮遊映像ＦＩの面に指ＵＦが接触していない状態（言い換えると指先が面の手前にある状態）と、空間浮遊映像ＦＩの面に指ＵＦが接触している状態（言い換えると指先が面の奥に差し込まれた状態）とで、空間浮遊映像ＦＩの表示状態が異なるように表示を制御する。これにより、ユーザは、自分の指ＵＦが空間浮遊映像ＦＩの面に触れているか否かをより容易に認識できる。
【0119】
図１２で、ユーザが空間浮遊映像ＦＩの面上にアルファベットのＬを描く場合の手順を説明する。まず、手順Ｓ１２１として、ユーザは、空間浮遊映像ＦＩ上の任意の位置に対し、奥方向に指ＵＦを差し込む（言い換えると接触を維持させる）。次に、手順Ｓ１２２として、ユーザは、空間浮遊映像ＦＩ上で、その指ＵＦを、接触の状態のまま、下方に移動させる。下向きの矢印は、指ＵＦの移動方向（面に沿って下方）を示す。システムは、この移動の検出に伴い、Ｌという文字のうちの縦の線（第１の線）１２１１を、空間浮遊映像ＦＩの一部として描画する。
【0120】
次に、手順Ｓ１２２は、縦の第１の線１２１１の下方の終端位置まで指ＵＦが達した状態を示す。ここまでで縦の第１の線１２１１が描画された。この状態で指ＵＦの接触は維持されている。次に、手順Ｓ１２３は、第１の線１２１１が描かれた時点から、ユーザが指ＵＦを右向きに移動させる。システムは、この移動の検出に伴い、Ｌという文字のうちの横の線（第２の線１２１２）を描画する。指ＵＦの位置は、横の第２の線１２１２の右端位置まで達している。
【0121】
次に、手順Ｓ１２４として、ユーザは、第２の線１２１２の右端位置にある指ＵＦを、空間浮遊映像ＦＩの面からに手前側に離す。システムは、この指ＵＦの離脱を検出し、第２の線１２１２の描画終了とする。上記のような一連の操作により、ユーザは、Ｌという文字を空間浮遊映像ＦＩ上に一筆書きで描くことができる。
【0122】
ユーザにより、文字入力ボタン１２０３が押下されて文字入力モードになった場合、空間浮遊映像ＦＩは、画面全体（背景面）が白色に変化するのみならず、空間浮遊映像ＦＩの枠１２０２の部分が例えば緑色から赤色に変化する。これにより、ユーザは文字入力モードであることを容易に認識できるので、好適である。また、文字入力モードを終了したいときには、ユーザは、再び、文字入力ボタン１２０３を押下すればよい。その場合、システムは、文字入力モードを終了させて、元のモードに戻る。上記例では、空間浮遊映像ＦＩの画面全体が白色に変化するとしたが、これに限らず、白色以外の色、例えば黒色やその他の色でも構わない。
【0123】
なお、上記文字入力モードとした上で、ユーザが空間浮遊映像ＦＩにタッチ（指ＵＦが接触）することで、空間浮遊映像ＦＩの枠１２０２の部分が、例えば赤色に変化するようにしてもよい。空間浮遊映像ＦＩの枠１２０２の部分を赤色に変化させることで、ユーザは、自分の指が空間浮遊映像ＦＩの面に接触していて文字を描画できる状態であることを認識できる。
【0124】
上記した一連の動きにより、ユーザが指先を移動させることで、所望の文字や図形などを空間浮遊映像ＦＩの像として入力・描画できる。なお、空間浮遊映像ＦＩの枠１２０２の部分についても、赤色以外の色、例えば青色やその他の色としても構わない。さらに、上記例では、図形や文字などの像を入力・描画できる領域を空間浮遊映像ＦＩの画面全体とした。これに限らず、像を入力・描画できる領域は、空間浮遊映像ＦＩの画面のうちの所定の一部としても構わない。
【0125】
ユーザは、空間浮遊映像ＦＩを、操作メニューなどのユーザインタフェースとして用いることができるのみならず、上記文字入力モードにおいては、空間浮遊映像ＦＩ上に、自分の手指（あるいは導電性の材質によるペンなどでもよい）により、任意の文字や図形を入力・描画可能となる。これにより、空間浮遊映像および空間浮遊映像表示装置の適用範囲を従来よりもさらに広げることができ、好適である。
【0126】
＜空間浮遊映像情報表示システムの第２の構成例＞
図１３の（Ａ）は、一実施例に係る空間浮遊映像情報表示システム１の主要部構成を示す。また、図１３の（Ｂ）は、図１３の（Ａ）に示す映像表示装置１０の映像光出射側、つまり表示パネル１１の映像光出射側に配置されたレンチキュラーレンズ１１０３の拡大図である。図１３の（Ａ）に示す空間浮遊映像情報表示システム１は、監視者であるユーザが空間浮遊映像３を斜め上方から観察するのに適したシステムである。図１３の（Ａ）中の座標系（Ｘ，Ｙ，Ｚ）では、空間浮遊映像情報表示システム１の筐体３５０が水平面（Ｘ－Ｙ面）に配置されており、空間浮遊映像３は、鉛直方向（Ｚ方向）に対し、前後方向（Ｙ方向）でやや斜めに傾いて形成されている。ユーザの視点Ｅから、空間浮遊映像３の面を正対して好適に視認する場合、視点Ｅは、図示のように、空間浮遊映像３の面に対し、光軸Ｊ２に合わせて、Ｙ方向でやや斜め上に配置される。ユーザは、視点ＥからＹ方向でやや斜め下の視線で空間浮遊映像３を好適に視認できる。一方、図１３の（Ｂ）は液晶パネルより出射された光の方向と逆方向から見た図である。図１３の（Ｂ）に示すように、レンチキュラーレンズ１１０３は、液晶パネルの光出射面に略平行または平行し、かつ、液晶パネル面より出射される映像光側に配置される。また、レンチキュラーレンズのかまぼこ状の複数の半円筒は、Ｘ－Ｚ平面から見て縦に並んで配置される。なお、上記座標系は、図１３の（Ａ）（Ｂ）で共通である。
図１３の（Ａ）は、一実施例に係る空間浮遊映像情報表示システム１の主要部構成を示す。また、図１３の（Ｂ）は、図１３の（Ａ）に示す映像表示装置１０の映像光出射側、つまり表示パネル１１の映像光出射側に配置されたレンチキュラーレンズ１１０３の拡大図である。図１３の（Ａ）に示す空間浮遊映像情報表示システム１は、監視者であるユーザが空間浮遊映像３を斜め上方から観察するのに適したシステムである。図１３の（Ａ）中の座標系（Ｘ，Ｙ，Ｚ）では、空間浮遊映像情報表示システム１の筐体３５０が水平面（Ｘ－Ｙ面）に配置されており、空間浮遊映像３は、鉛直方向（Ｚ方向）に対し、前後方向（Ｙ方向）でやや斜めに傾いて形成されている。ユーザの視点Ｅから、空間浮遊映像３の面を正対して好適に視認する場合、視点Ｅは、図示のように、空間浮遊映像３の面に対し、光軸Ｊ２に合わせて、Ｙ方向でやや斜め上に配置される。ユーザは、視点ＥからＹ方向でやや斜め下の視線で空間浮遊映像３を好適に視認できる。一方、図１３の（Ｂ）は液晶パネルより出射された光の方向と逆方向から見た図である。図１３の（Ｂ）に示すように、レンチキュラーレンズ１１０３は、液晶パネルの光出射面に略平行または平行し、かつ、液晶パネル面より出射される映像光側に配置される。また、レンチキュラーレンズのかまぼこ状の複数の半円筒は、Ｘ－Ｚ平面から見て縦に並んで配置される。なお、上記座標系は、図１３の（Ａ）（Ｂ）で共通である。
【0127】
筐体３５０内には、映像表示装置１０などが所定の位置関係で配置されている。筐体３５０の上面（Ｘ－Ｙ面）は、開口部となっており、所定の角度α１で、再帰反射部材３３０が配置されている。映像表示装置１０の光軸Ｊ１は、Ｙ方向に対し所定の角度β１で斜め上を向いている。
【0128】
映像表示装置１０は、映像表示素子としての液晶表示パネル１１と、挟角な拡散特性を有する特定偏波の光を生成する光源装置１３とを備えて構成されている。液晶表示パネル１１は、画面サイズが５インチ程度の小型のものから８０インチを超える大型なものまで適用可能であり、それらから選択されたパネルで構成される。液晶表示パネル１１からの映像光は、光軸Ｊ１上、再帰反射部材３３０（再帰反射部または再帰反射板とも記載）に向けて出射される。液晶表示パネル１１には、後述する狭発散角な光源装置１３からの光を入射させる。これにより、狭発散角な映像光束φ１が生成される。その狭発散角な映像光束φ１を、光軸Ｊ１に沿って、Ｚ方向で下側から再帰反射部材３３０に入射させる。この再帰反射部材３３０での再帰反射により、前述の図４で説明した原理に従って、再帰反射部材３３０に対しＺ方向で上側に、光軸Ｊ２の方向に、狭発散角な映像光束φ２が生成される。その映像光束φ２により、筐体３５０の外の所定の位置に、空間浮遊映像３（図４での空間浮遊映像３３１）が得られる。光軸Ｊ２は、Ｙ方向に対し所定の角度β２で斜め上を向いている。
【0129】
空間浮遊映像３は、再帰反射部材３３０を対称面とした映像表示装置１０の対称位置に形成される。斜めに配置された再帰反射部材３３０の面に対し、映像表示装置１０の面と空間浮遊映像３の面とが概略的に略対称な位置または対称的な位置に配置されている。空間浮遊映像３の面において、ｒ２は光軸Ｊ２に対応した中心位置を示し、ｒ１は映像光束φ２の下端の光線に対応した下端位置を示し、ｒ３は映像光束φ２の上端の光線に対応した上端位置を示す。
【0130】
この構成において、図４で説明した、再帰反射部材３３０により発生するゴースト像３３２，３３３を消去して高画質な空間浮遊映像３を得るために、液晶表示パネル１１の出射側には、映像光制御シート３３４（詳しくは前述の図５や図６の（Ａ））が設けられている。これにより、不要な方向の拡散特性が制御される。
【0131】
さらに、液晶表示パネル１１からの映像光は、図１１に示すように、再帰反射部材３３０などの反射部材での反射率を原理的に高くできるので、Ｓ偏波（電界成分が入射面に垂直な電磁波、Ｓはsenkrechtの略）を使用するとよい。しかしながら、ユーザが偏光サングラスを使用した場合には、空中浮遊映像３が偏光サングラスで反射または吸収されるため、これに対策する場合には、Ｐ偏波（電界成分が入射面に平行な電磁波、Ｐはparallelの略）を使用するとよい。そのためには、特定偏波の映像光の一部を光学的に他方の偏波に変換して疑似的に自然光に変換する素子として、図示の偏光解消素子３３９が設けられる。例えば偏光解消素子３３９が映像光制御シート３３４の出射側に配置されている。これにより、ユーザが偏光サングラスを使用している場合でも、良好な空間浮遊映像３を監視できる。
【0132】
偏光解消素子３３９の市販品としては、コスモシャインＳＲＦ（東洋紡社製）、偏光解消粘着剤（長瀬産業社製）が挙げられる。コスモシャインＳＲＦ（東洋紡社製）の場合、画像表示装置上に粘着剤を貼合することにより、界面の反射を低減して輝度を向上させることができる。また、偏光解消粘着剤（長瀬産業社製）の場合、無色透明板と画像表示装置とを偏光解消粘着剤を介して貼合することで使用される。
【0133】
また、本実施例では、再帰反射部材３３０の映像出射面にも、映像光制御シート３３８Ｂ（映像光制御シート３３８と同様のもの、詳しくは前述の図６の（Ｂ））が設けられる。これにより、不要光による空間浮遊映像３の正規像の両側に発生するゴースト像３３２，３３３（図４）が消去される。
【0134】
本実施例では、再帰反射部材３３０を水平軸（Ｙ方向）に対して所定の角度α１で傾斜させ、空間浮遊映像３を水平軸に対して斜め（特に、水平面よりは垂直面に近い角度での斜め）に生成する構成とした。これに限らず、構成要素の配置を変更すれば、空間浮遊映像３の配置の位置や傾きを設計可能である。
【0135】
また、本実施例では、筐体３５０の所定の位置に、第１の測距装置３４０（図７）が装着されている。すなわち、このシステムには、図７と同様のセンシング技術が実装されている。これにより、ユーザが空間浮遊映像３にアクセス、インタラクトできるシステムとする。第１の測距装置３４０を含む第１のセンシングシステムは、空間浮遊映像３に対するユーザの手指などによる操作の状態を検出する。さらに、図８や図９の（Ｂ）と同様に、第２の測距装置３４１を含む第２のセンシングシステムを追加した構成としてもよい。
【0136】
第１の測距装置３４０の取り付け位置と視野角α３は、空間浮遊映像３の大きさを十分カバーできるように適宜選択するとよい。本例では、第１の測距装置３４０は、筐体３５０のうち、Ｙ方向で奥側（ユーザおよび空間浮遊映像３の位置に対し奥側）で、再帰反射部材３３０の斜面の延長上で、かつ、映像光の映像光束を遮らないように少し離れた位置である、図示の位置に取り付けられている。第１の測距装置３４０の視野角α３（上端Ａから下端Ｂまでの範囲）は、本例では、空間浮遊映像３全体とそれを基準位置（正対する位置）の視点Ｅから視認するユーザの顔を含む領域とをカバーできるように、十分に広い視野角とされている。視野角α３は、空間浮遊映像３全体を捉える視野角α２を内包している。視野角α２は、例えば図７のセンシング面ａ０，ａ１，ａ２，ａ３と対応している。
【0137】
第１の測距装置３４０のＴＯＦセンサは、図７（あるいは図８）に示したように、空間浮遊映像３のセンシング面を複数のエリアに分割した測距システムを使用する。これにより、センシングの領域ごとの分解能が高められる。さらに、図８および図９の（Ｂ）のようなＣＭＯＳセンサを使用した第２のセンシング技術を使用する場合には、検知精度をより一層向上できる。
【0138】
また、本実施例では、光源装置１３として、狭角の指向特性を有する可視光を発散させる光源を使用し、第１測距装置３４０（さらには第２の測距装置３４１）を、筐体３５０側において挟角の映像光束に対し外側の位置に配置する。また、第２の測距装置３４１は配置されてもよい。これにより、空間浮遊映像３を形成する映像光のセンシング精度に対する悪影響を除くことができる。
【0139】
図１３の（Ａ）に示す上記構成において、液晶表示パネル１１の映像光出射側（斜線で示す位置）にレンチキュラーレンズ１１０３を配置する。より具体的には、液晶表示パネル１１の映像光出射側に、図１３の（Ｂ）に示す向きとなるように、レンチキュラーレンズ１１０３を配置する。この構成とすることで、図２で述べたように、利用者が、レンチキュラーレンズを形成する半円筒状レンズ（かまぼこ状のレンズ）が並んでいる方向に移動することで、利用者はそれぞれの位置から異なる画像（または映像）を見ることが可能となる。すなわち、画像または映像として、視差画像を表示することにより、運動視差が生じ、液晶表示パネル１１上に表示された画像または映像を立体像として認識することができる。多視点映像と運動視差については、後述する。
【0140】
図１３の（Ａ）において、空間浮遊映像３は、再帰反射部材３３０を対称面とした映像表示装置１０または液晶表示パネル１１の対称位置に形成される実像であるので、利用者は、空間浮遊映像３を、運動視差を伴う立体像として視認することができる。すなわち、レンチキュラーレンズを配置した上記構成によれば、空間浮遊像３を、単に、液晶表示パネル１１上に表示された二次元映像ではなく、運動視差を伴う立体像を表示することが可能となる。
【0141】
＜空間浮遊映像情報表示システムの第３の構成例＞
図１４の（Ａ）は、空間浮遊映像情報表示システムの他の実施例を示す。また、図１４の（Ｂ）は、図１４の（Ａ）に示す映像表示装置１０の映像光出射側、つまり表示パネル１１の光出射側に配置されたレンチキュラーレンズ１１０３の拡大図である。図１４の（Ａ）中の座標系（Ｘ，Ｙ，Ｚ）では、空間浮遊映像情報表示システム１の筐体３５０が水平面（Ｘ－Ｙ面）に配置されており、空間浮遊映像３は、鉛直方向（Ｚ方向）に対し、前後方向（Ｙ方向）でやや斜めに傾いて形成されている。ユーザの視点Ｅから、空間浮遊映像３の面を正対して好適に視認する場合、視点Ｅは、図示のように、空間浮遊映像３の面に対し、光軸Ｊ２に合わせて、Ｙ方向でやや斜め上に配置される。ユーザは、視点ＥからＹ方向でやや斜め下の視線で空間浮遊映像３を好適に視認できる。一方、図１４の（Ｂ）において、レンチキュラーレンズ１１０３は、液晶パネルの光出射面に略平行または平行し、かつ、液晶パネルより出射される映像光側に配置される。また、レンチキュラーレンズのかまぼこ状の複数の半円筒は、Ｘ－Ｚ平面から見て縦に並んで配置される。なお、上記座標系は、図１４の（Ａ）（Ｂ）で共通である。
図１４の（Ａ）は、空間浮遊映像情報表示システムの他の実施例を示す。また、図１４の（Ｂ）は、図１４の（Ａ）に示す映像表示装置１０の映像光出射側、つまり表示パネル１１の光出射側に配置されたレンチキュラーレンズ１１０３の拡大図である。図１４の（Ａ）中の座標系（Ｘ，Ｙ，Ｚ）では、空間浮遊映像情報表示システム１の筐体３５０が水平面（Ｘ－Ｙ面）に配置されており、空間浮遊映像３は、鉛直方向（Ｚ方向）に対し、前後方向（Ｙ方向）でやや斜めに傾いて形成されている。ユーザの視点Ｅから、空間浮遊映像３の面を正対して好適に視認する場合、視点Ｅは、図示のように、空間浮遊映像３の面に対し、光軸Ｊ２に合わせて、Ｙ方向でやや斜め上に配置される。ユーザは、視点ＥからＹ方向でやや斜め下の視線で空間浮遊映像３を好適に視認できる。一方、図１４の（Ｂ）において、レンチキュラーレンズ１１０３は、液晶パネルの光出射面に略平行または平行し、かつ、液晶パネルより出射される映像光側に配置される。また、レンチキュラーレンズのかまぼこ状の複数の半円筒は、Ｘ－Ｚ平面から見て縦に並んで配置される。なお、上記座標系は、図１４の（Ａ）（Ｂ）で共通である。
【0142】
筐体３５０内には、映像表示装置１０、ミラー３６０などが所定の位置関係で配置されている。筐体３５０の開口部、本例では概略的に鉛直方向に立つ面（Ｘ－Ｚ面）を持つ開口部には、Ｚ方向に対し所定の角度γ１（やや斜め下に傾いた角度）で、再帰反射部材３３０が配置されている。ミラー３６０は平面ミラーである。
【0143】
本実施例では、映像表示装置１０からの映像光は、ミラー３６０で反射されてから、再帰反射部材３３０に入射される。筐体３５０は、Ｚ方向で上側に凸状に出ている部分を有し、その部分内に映像表示装置１０が配置されている。映像表示装置１０の光軸Ｊ１は、Ｚ方向で下側、Ｙ方向で奥側に、Ｚ方向に対する所定の角度δ１で斜め下を向いている。
【0144】
映像表示装置１０は、映像表示素子としての液晶表示パネル１１と、挟角な拡散特性を有する特定偏波の光を生成する光源装置１３とを備えて構成されている。液晶表示パネル１１は、画面サイズが５インチ程度の小型のものから８０インチを超える大型なものまで適用可能であり、それらから選択されたパネルで構成される。液晶表示パネル１１からの映像光は、光軸Ｊ１上、光路折り返しミラーであるミラー３６０によって折り返され、折り返し後の光軸Ｊ１Ｂ上で、再帰反射部３３０材に向けて出射される。
【0145】
液晶表示パネル１１には、後述する狭発散角な光源装置１３からの光を入射させる。これにより、狭発散角な映像光束φ１が生成される。狭発散角な映像光束φ１は、ミラー３６０で反射後、映像光束φ１Ｂとなる。その狭発散角な映像光束φ１Ｂを、光軸Ｊ１Ｂに沿って、図示のＹ方向で右側から再帰反射部材３３０に入射させる。この再帰反射部材３３０での再帰反射により、前述の図４で説明した原理に従って、再帰反射部材３３０に対しＹ方向で左側に、光軸Ｊ２の方向に、狭発散角な映像光束φ２が生成される。その映像光束φ２により、筐体３５０の開口部に対して外の所定の位置に、空間浮遊映像３（図４での空間浮遊映像３３１）が得られる。光軸Ｊ２は、Ｙ方向に対し所定の角度δ２（Ｚ方向に対しては角度（９０度－δ２））で斜め上を向いている。
【0146】
空間浮遊映像３は、再帰反射部材３３０を対称面として、ミラー３６０に対し概略的に対称位置に形成される。本実施例では、ミラー３６０により光路を折り返す構成であるため、映像表示装置１０は、Ｚ方向で空間浮遊映像３よりも上に配置されている。この結果、映像光線が再帰反射部材３３０に対し斜め上方から入射し、斜め上方に出射して、図示のように斜めに傾いた空間浮遊映像３を形成するシステムを実現できる。
【0147】
また、空間浮遊映像３を筐体３５０に対して斜め上向き（図示の光軸Ｊ２上）に結像させるためには、再帰反射部材３３０を、図示のように筐体３５０の底面の垂直軸（Ｚ方向）に対して所定の角度γ１で傾斜させて配置することで実現できる。また、このように再帰反射部材３３０の出射軸がやや斜め下に傾いた構成の結果、外光が再帰反射部材３３０に入射して筐体３５０内部に侵入することで発生し得る空間浮遊映像３の画質低下を防止できる。
【0148】
空間浮遊映像３で発生し得るゴースト像（図４）を消去してより高画質な空間浮遊映像３を得るためには、第２の実施例（図１３の（Ａ）、（Ｂ））と同様に、本実施例でも、液晶表示パネル１１の出射側に、映像光制御シート３３４（図５、図６の（Ａ））を設けることで、不要な方向の拡散特性を制御してもよい。また、再帰反射部材３３０の映像出射面にも、映像光制御シート３３４Ｂ（図６の（Ｂ））を設けることで、不要光により空間浮遊映像３の正規像の両側に発生するゴースト像を消去してもよい。
【0149】
以上述べた構造物が筐体３５０の内部に配置されることで、再帰反射部材３３０に対し外光が入射することを防止し、ゴースト像の発生を防止することができる。
【0150】
本実施例でも、液晶表示パネル１１からの映像光は、図１３の（Ａ）と同様に、Ｓ偏波を使用してもよいし、偏光サングラスに対応する場合には、Ｐ偏波を使用して偏光解消素子３３９を設けてもよい。
【0151】
本実施例では、再帰反射部材３３０を鉛直軸（Ｚ方向）に対して所定の角度γ１で傾斜させ、空間浮遊映像３を水平軸に対して斜め（特に、水平面よりは垂直面に近い角度での斜め）に生成する構成とした。これに限らず、構成要素の配置を変更すれば、空間浮遊映像３の配置の位置や傾きを設計調整可能である。
【0152】
また、本実施例では、筐体３５０の所定の位置に、第１の測距装置３４０（図７）が装着されている。すなわち、このシステムには、図７と同様のセンシング技術が実装されている。これにより、ユーザが空間浮遊映像３にアクセス、インタラクトできるシステムとする。第１の測距装置３４０を含む第１のセンシングシステムは、空間浮遊映像３に対するユーザの手指などによる操作の状態を検出する。さらに、図８や図９の（Ｂ）と同様に、第２の測距装置３４１を含む第２のセンシングシステムを追加した構成としてもよい。
【0153】
第１の測距装置３４０の取り付け位置と視野角γ３は、空間浮遊映像３の大きさを十分カバーできるように適宜選択するとよい。本例では、第１の測距装置３４０は、筐体３５０の底面部のうち、Ｙ方向で再帰反射部材３３０の手前の近傍で、かつ、映像光の映像光束を遮らないように少し離れた位置である、図示の位置に取り付けられている。第１の測距装置３４０の視野角γ３は、本例では、空間浮遊映像３全体とそれを基準位置の視点Ｅから視認するユーザの顔を含む領域とをカバーできるように、十分に広い視野角とされている。視野角γ３は、空間浮遊映像３全体を捉える視野角を内包している。
【0154】
【0155】
また、本実施例では、光源装置１３として、狭角の指向特性を有する可視光を発散させる光源を使用し、第１測距装置３４０（さらには第２の測距装置３４１）を、筐体３５０側において挟角の映像光束に対し外側の位置に配置する。これにより、空間浮遊映像３を形成する映像光のセンシング精度に対する悪影響を除くことができる。
【0156】
さらに、本実施例では、空間浮遊映像３と再帰反射部材３３０との間に、図示のように、静電容量方式のタッチパネル３６１を、支持部材３６２で固定して配置してもよい。支持部材３６２は、例えば枠状として、内側にタッチパネル３６１を支持する。支持部材３６２は、例えば筐体３５０の底面部に対し固定されている。このタッチパネル３６１は、空間浮遊映像３を形成するための映像光、および第１の測距装置３４０からの光を透過させる部材で構成されている。
【0157】
このタッチパネル３６１は、静電容量方式で、当該タッチパネルの面に対するユーザの手指の近接の状態を検出する。もしくは、このタッチパネル３６１は、当該タッチパネルの面に対するユーザの手指の接触の状態を検出する。このタッチパネル３６１を含む第３のセンシング技術を、第１のセンシング技術などと併用することで、検知精度をより一層向上できる。この静電容量方式のタッチパネル３６１の大きさと取り付け位置についても、同様に、空間浮遊映像３を十分カバーできるように選択するとよい。
【0158】
高精度な位置情報を取り込むことができる静電容量方式のタッチパネル３６１としては、例えば投影型静電容量方式を採用できる。この方式のタッチパネルは、例えば、微細な線間距離を有する透明電極（Ｙ軸電極）であるＩＴＯと微細な線間距離を有する透明電極（Ｘ軸電極）である銅薄膜とを、透明ガラス基板の両面にフォトリソエッチングによりパターンニングすることで製造される。そのため、この透明ガラス基板に対象物（例えば指先端）が近づいた場合に、Ｘ軸電極とＹ軸電極のそれぞれで静電容量の変化を捉え、対象物の相対座標が得られる。また、この方式は、透明電極の線間距離が短いほど、高い分解能を得られるので、多点検出が可能である。そのため、この方式では、複数の指での同時入力も可能となる。
【0159】
図１４の（Ａ）に示す上記構成においても、図１３の（Ａ）に示す空間浮遊映像情報表示システム１同様、液晶表示パネル１１の映像光出射側（斜線で示す位置）にレンチキュラーレンズ１１０３を配置する。より具体的には、図１４の（Ｂ）に示すように、液晶表示パネル１１の映像光出射側に、レンチキュラーレンズ１１０３を配置する。この構成とすることで、利用者は、空間浮遊像３を、運動視差を伴う立体像として、認識することができる。すなわち、レンチキュラーレンズ１１０３を配置した上記構成によれば、空間浮遊像３として、単に、液晶表示パネル１１上に表示された二次元映像ではなく、立体像を表示することが可能となる。
【0160】
ここで、利用者が空間浮遊像３を立体像として認識できることは、特に、表示される立体像が人物（特に顔）である場合、空間浮遊像が二次元平面である従来のシステムにはない、新たな効果をもたらす。例えば、後述するように、空間浮遊像として表示される人物（の顔）は、利用者が空間浮遊像の周辺であれば、どの位置に存在しても、常に利用者の方に向くという新たな効果をもたらす。このことにより、利用者は、空間浮遊像として表示される人物が、あたかも自分だけに話しかけてくれているような感覚を有することになり、表示される人物が、例えば、利用者に対して、何かを説明するような場面、あるいは、コンシェルジュのように何等かのアシスト（支援）を行うような場面において、特に好適である。
【0161】
［多視点映像を空間浮遊像として表示するための技術］
既に述べたように、レンチキュラーレンズを用いた多視点画像（または多視点映像）により、運動視差が得られることはよく知られている。レンチキュラーレンズは、その表面が半円筒状の「かまぼこ」のような形状を有するレンズを所定方向に配列されたの集合体であり、１つの半円筒状レンズの下部には、多視点画像（または映像）の視点の数に相当する、異なる映像を表示する液晶パネルが配置されている。本実施の形態での所定方向は縦方向となる。
既に述べたように、レンチキュラーレンズを用いた多視点画像（または多視点映像）により、運動視差が得られることはよく知られている。レンチキュラーレンズは、その表面が半円筒状の「かまぼこ」のような形状を有するレンズを所定方向に配列されたの集合体であり、１つの半円筒状レンズの下部には、多視点画像（または映像）の視点の数に相当する、異なる映像を表示する液晶パネルが配置されている。本実施の形態での所定方向は縦方向となる。
【0162】
図１５の（Ａ）は、本実施の形態における、レンチキュラーレンズ１１０３を用いる多視点画像を生成するための原理を示す図である。また、図１５の（Ｂ）は、レンチキュラーレンズ１１０３の構成をよりわかりやすく示すために、レンチキュラーレンズ１１０３を斜め上方から俯瞰して見た図である。なお、ここでは、多視点画像として９視点の場合について説明する。図１５の（Ａ）において、液晶パネル１１の画素は、数字で１～９と示す９つの画素を１グループとして、９視点の多視点画像を形成する。
【0163】
一方、人間の眼の間隔、すなわち瞳孔間の距離は、ほぼ一定（例えば約６４mm）であることが知られており、レンチキュラーレンズのピッチ、すなわち、１つの半円筒状の間隔を、人間の眼の間隔の半分、すなわち、約３２mmと略同一とすることで、観察者（利用者）の右眼と左眼には、図１５の（Ａ）に示すように、それぞれ異なる画素からの光が到達する。より具体的には、観察者の右眼には、画素６に表示される画像からの光が到達し、観察者の左眼には、画素４に表示される画像からの光が到達する。
【0164】
このため、観察者は、右眼と左眼で、それぞれ異なる画素に表示された画像を見ることになり、それぞれの画素に、同一の物体あるいは人物を、視点を変えて撮影した画像を表示すれば、観察者の両眼には視差が生じる。その結果、観察者は、撮影された画像を立体として認識することが可能となる。すなわち、図１５の（Ａ）は、観察者の右眼には、画素６に表示される画像からの光が到達し、観察者の左眼には、画素４に表示される画像からの光が到達することを示している。上記のように、液晶パネルの光出射側にレンチキュラーレンズを配置することで観察者の右眼と左眼には、異なる画素からの光が到達するため、観察者は、立体的な画像を認識することができる。
【0165】
ここで、観察者が左右に移動すると、観察者の右眼と左眼には、移動前とは異なる画素からの光が到達する。より具体的には、図１５の（Ａ）に示すように、観察者が右方向に移動すると、観察者の右眼には、画素７に表示される画像からの光が到達し、観察者の左眼には、画素５に表示される画像からの光が到達する。すなわち、観察者が移動（運動）するに伴って、移動する前とは異なる画素の光が到達することとなる。この結果、観察者は、自分が左右に移動することに伴って、同一の物体あるいは人物を別の角度から見たのと同等の効果、すなわち、運動視差を得ることができる。よって、液晶パネルの光出射側にレンチキュラーレンズを配置することで、観察者の目が移動することによって立体感がある画像を角度を変えて見たのと同等の効果を得ることができる。
【0166】
図１６は、上記した運動視差を生じさせるための画像、すなわち、多視点画像を撮影するための装置の一例を示す図である。図１６では、９つの異なる視点から、被写体である人物（の顔部分）を撮影する様子を示している。より具体的には、９つのカメラＮｏ.１～Ｎｏ.９を、図１６に示すように、被写体から所定距離の位置で互いの角度を所定角度ずつ移動した位置に配置して撮影する。本実施の形態では被写体から等距離の位置で互いの角度を２２.５度ずつ移動して位置に配置しているが、視点の数により被写体からの距離、および角度を変更してよい。この時、被写体が静止していれば、１台のカメラを、カメラＮｏ.１～Ｎｏ.９の位置に順に移動させて撮影することで、多視点画像を撮影することも可能である。しかし、被写体が動きのあるもの、例えば、表情を変えながら、口を動かして話をしている人物の顔である場合には、９台のカメラを用いて、それぞれの位置にカメラを固定して、動画（動画像、映像）として撮影する。
【0167】
上記のようにして撮影された、９台のカメラによる、それぞれの画像（あるいは映像）は、映像表示部（ここでは液晶パネル）の９つの各画素に割り当てられて表示される。図１６に示すように、１つの被写体の映像は、それぞれ異なる角度から撮影された画像（あるいは映像）として表示することで、運動視差を伴う多視点画像（または、多視点映像）を得ることができる。なお、図１６に示した実施例では、被写体である人物（の顔部分）を９つのカメラＮｏ.１～Ｎｏ.９により、異なる角度で撮影することで多視点画像（または映像）を得る例を示したが、多視点画像（または映像）を得る方法としては、上記のように複数のカメラを用いる方法に限らず、コンピュータグラフィックス（ＣＧ）により、多視点画像（または映像）をレンダリングする方法であってもよい。
【0168】
ここで、レンダリングとは、画像や動画像（映像）をコンピュータ処理により、ＣＧとして生成または編集することをいう。レンダリングによりＣＧを生成することにより、複数のカメラを用いた大掛かりな撮影装置は必要なくなり、より簡便に、カメラの台数に起因する視点数の制約もなく、かつ、短時間に多視点画像（または映像）を得ることができ、特に多視点画像や多視点映像の生成では好適である。
【0169】
図１７は、多視点映像表示装置による表示例を示す図である。ここで、多視点映像表示装置とは、映像表示装置１０（液晶パネル１１、光源１３等より構成される）の映像光出射側に、レンチキュラーレンズ１１０３を配置した構成を備える表示装置をいう。具体的には、多視点映像表示装置は、光源、映像表示部（液晶パネル）、およびレンチキュラーレンズを有している。ここで、映像表示部（液晶パネル）１１の映像出射面とレンチキュラーレンズ１１０３の入射面とは平行である。また、映像表示部（液晶パネル）１１の映像出射面とレンチキュラーレンズ１１０３の入射面とは所定の距離をもって配置される。本実施形態においては、レンチキュラーレンズ固有の焦点距離に基づき、レンチキュラーレンズ１１０３の光入射面と液晶パネル１１の光出射面との間の所定距離を調整して配置する。この時、レンチキュラーレンズ１１０３の焦点距離が相対的に大きな値であれば、上記所定の距離は大きくし、逆に、レンチキュラーレンズ１１０３の焦点距離が相対的に小さな値であれば、上記所定の距離は小さくするように、レンチキュラーレンズ１１０３の光入射面と液晶パネル１１の光出射面との距離、すなわち上記所定の距離を調整することで、好適な多視点映像を売ることができる。
【0170】
図１７では、９つの異なる視点を有する多視点映像を表示する多視点映像表示装置をしており、図１７の（Ａ）は、液晶パネルの画素１～９に対して、カメラＮｏ.１～Ｎｏ.９による画像を配置した場合を示し、一方、図１７の（Ｂ）は、液晶パネルの画素１～９に対して、（Ａ）とは逆の順序で、液晶パネルの画素１～９に対して、カメラＮｏ.９～Ｎｏ.１による画像を配置した場合を示している。図１７の（Ａ）と（Ｂ）の効果の違いは、以下の通りである。まず、図１７の（Ａ）では、利用者（ユーザ）が、多視点映像表示装置に対して左側から右側に移動すると、左側からは、被写体（人物の顔）を左側から見た画像を観察でき、右側からは、被写体（人物の顔）を右側から見た画像を見ることになる。すなわち、実際の被写体を中心において、利用者が被写体の左側から、および、右側から観察した場合と同様の被写体を観察することとなる。
【0171】
それに対して、図１７の（Ｂ）では、図１７の（Ａ）と逆となり、利用者（観察者）が、多視点映像表示装置に対して左側から右側に移動すると、左側からは、被写体（人物の顔）を図１７の（Ａ）の右側から見た画像を観察でき、右側からは、被写体（人物の顔）を図１７の（Ａ）の左側から見た画像を観察することになる。この結果、図１７の（Ｂ）では、利用者から被写体（人物の顔）を見ると、利用者が被写体に対してどの位置（相対的な角度）に存在しても、被写体である人物が、常に、利用者の方に視線を向けているように感じることができる。
【0172】
上記、図１７の（Ｂ）の見え方、すなわち、被写体である人物が、利用者の位置にかかわらず、常に利用者の方に視線を向けているように見えるという特徴は、利用者からは、被写体である人物が、常に自分（利用者）と向き合い、話しかけられているように感じるという効果を生じる。こうした効果は、被写体である人物が、利用者一人だけに対して、何等かの説明や案内をするような場面では、特に好適である。
【0173】
次に、図１８、図１９は、図１７に示す多視点映像表示装置（映像表示装置１０とレンチキュラーレンズ１１０３より構成される）から発せられた映像光を、再帰反射板３３０を介することにより、空間浮遊像３を生成した状態を模式的に示す図である。図１８、図１９に示す実施例は、ともに、多視点映像表示装置と再帰反射板３３０により、空間浮遊像３が生成される点は同じである。
【0174】
上記、図１８と図１９の２つの実施例の相違点は、多視点映像表示装置上の多視点画像の順序が異なる点にある。すなわち、図１８では、図１７の（Ａ）に対応しており、利用者から見て、多視点映像表示装置の左から右に、すなわち液晶パネルの画素１～９に対して、カメラＮｏ.１～Ｎｏ.９による画像が割り当てられており、再帰反射板３３０を介して生成される空間浮遊像３では多視点画像の順序は、利用者から見て、逆に、右から左にカメラＮｏ.１～Ｎｏ.９による画像が表示される。
【0175】
一方、図１９では、図１７の（Ｂ）に対応しており、多視点映像表示装置の右から左に、すなわち液晶パネルの画素１～９に対して、カメラＮｏ.１～Ｎｏ.９による画像が割り当てられている。その結果、再帰反射板３３０を介して生成される空間浮遊像３では、利用者から見ると、多視点画像の順序は、図１８とは逆に、左から右にカメラＮｏ.１～Ｎｏ.９による画像が表示される。
【0176】
上記のように、再帰反射板３３０を介して生成される空間浮遊像３では、映像表示装置１０と再帰反射板３３０との間にレンチキュラーレンズ１１０３を配置することにより、映像表示装置１０に表示される多視点映像の順番と、空間浮遊映像３による多視点映像の順番が逆の順序で、利用者に認識される。すなわち、利用者に対して、運動視差を有する空間浮遊像を提供する場合、利用者に対して、どのような多視点画像を提供することが好適であるかすべきかという目的に応じて、液晶パネル１１上の画素に対して、カメラＮｏ.１～Ｎｏ.９による画像の順序を、適宜に定めて配置することができる。
【0177】
これをさらに具体的に説明すると、図１８の実施例では、コンシェルジュの顔を被写体とする空間浮遊像３を利用者から見ると、多視点画像の順序は、右から左にカメラＮｏ.１～Ｎｏ.９による画像が認識される。この場合、コンシェルジュは、利用者の位置にかかわらず、常に利用者に視線を向けている。一方、図１９の実施例では、コンシェルジュの顔を被写体とする空間浮遊像３を利用者から見ると、多視点画像の順序は、左から右にカメラＮｏ.１～Ｎｏ.９による画像が認識される。この場合、コンシェルジュは、利用者の位置に関係なく、常に、一定の方向、すなわち、正面の方向に視線を向けている。
【0178】
上記の通り、図１８の実施例では、利用者が空間浮遊像としてのコンシェルジュを見たとき、常に、コンシェルジュが利用者に向かって、何等かの説明や案内などの情報を音声とともに伝えるような場面において特に好適であり、利用者はコンシェルジュに対して感情移入をしやすく、コンシェルジュによる説明や案内により集中できる、という効果をもたらすことができる。
【0179】
一方、図１９に示すように、利用者が空間浮遊像としてのコンシェルジュを見たとき、コンシェルジュが、常に、一定の方向、すなわち正面を向いて話す場合には、利用者は、コンシェルジュが自分だけに向かって話しかけているのではないということを認識し、空間浮遊像３の周囲にいる不特定多数の人々に対して、例えば、何等かのプレゼンテーションを行っているように感じる。
【0180】
すなわち、空間浮遊像としてのコンシェルジュを表示する場合に、上に述べた２つの実施例のうち、図１８のように、コンシェルジュが常に利用者に向かって話しかけるような表示形式（これを「表示形式Ａ」と呼ぶ）とするか、図１９のように、コンシェルジュが常に正面を向いて話しているような表示形式（これを「表示形式Ｂ」と呼ぶ）とするか、上記二通りの表示形式を適宜選択することが可能である。
【0181】
＜キオスク端末に係わる実施の形態１＞
上記の通り、図１５～１９を用いて、空間浮遊像として、コンシェルジュを表示する２つの形式、すなわち、「表示形式Ａ」と「表示形式Ｂ」について述べた。次に、本発明の一実施の形態として、空間浮遊映像情報表示システム１を、いわゆるキオスク端末に適用した場合（実施の形態１とする）について以下説明する。
上記の通り、図１５～１９を用いて、空間浮遊像として、コンシェルジュを表示する２つの形式、すなわち、「表示形式Ａ」と「表示形式Ｂ」について述べた。次に、本発明の一実施の形態として、空間浮遊映像情報表示システム１を、いわゆるキオスク端末に適用した場合（実施の形態１とする）について以下説明する。
【0182】
キオスク端末とは、従来、不特定多数の人が、タッチパネル操作などのマン・マシン・インタフェースやユーザインタフェースを通じて、必要な情報にアクセスしたり、様々なサービスを利用したりするための情報端末である。キオスク端末は、公共施設や交通機関、遊園地などのエンタテイメント施設、また、近年では、いわゆるコンビニエンスストアの店内などにも設置されている。キオスク端末は、各種のチケットの販売や、行政サービス（例えば、住民票の発行）にも用いられている。
【0183】
なお、以下の実施の形態の説明において、特定の構成を有する情報端末を、「キオスク端末」という用語で表現している。この「キオスク端末」という用語の代わりに、「情報端末」の他、「情報表示装置」、「情報処理端末」、「発券端末」、「書類発行端末」、「行政端末」、「サービス端末」などと表現してもよい。実施の形態の説明で主として用いる「キオスク端末」の用語は、これらの用語の代表例として用いている。
【0184】
図２０に、従来技術に基づいた一般的なキオスク端末の外観の一例を示す。このキオスク端末１４００は、例えば高さ１２０～５０cmほどの金属製の筐体１４５０を備えており、筐体１４５０の表面（ユーザに対向する側の面、特に斜面１４５１）には、液晶表示画面１４１０や入力ボタン１４２０が設けられている。液晶表示画面１４１０は、液晶表示装置の一部であり、各種情報を表示して利用者のタッチ操作を受け付けるタッチパネル付きの画面である。入力ボタン１４２０は、利用者に固有の暗証番号などを入力するための物理的なボタン、あるいはタッチパネルで構成された画面内のタッチボタンである。また、筐体１４５０の表面の一部には、取り出し口１４３０が設けられている。取り出し口１４３０は、キオスク端末１４００に対する操作により発行された、例えば、チケットや行政書類などを利用者が取り出すための取り出し口である。
【0185】
図２１には、実施の形態１の空間浮遊映像情報表示システムとしてのキオスク端末の外観例を示す。図２１ではキオスク端末１５００を斜め右から見た場合の概要を示す。図２１のキオスク端末１５００は、図２０のキオスク端末１４００との違いとしては、以下がある。図２１のキオスク端末１５００では、筐体１５５０の表面（特に斜面１５７０）に、液晶表示装置による液晶表示画面１５１０に加え、下方に、前述の空間浮遊映像３を表示するための空間浮遊映像表示部１５２０を備えている。すなわち、キオスク端末１５００は、液晶表示画面１５１０と空間浮遊映像表示部１５２０との２画面を有し、斜面１５７０において液晶表示画面１５１０と空間浮遊映像表示部１５２０との２つの表示部に分かれている構成を備えている。
【0186】
図２１に示す構成では、２画面のうち、基本として使用されるのは、空間浮遊映像表示部１５２０の画面（以下、第１画面ともいう）である。この第１画面には、空間浮遊映像３によるユーザインタフェースとして、コンシェルジュや操作メニューが表示される。空間浮遊映像表示部１５２０の第１画面は、縦横に所定のサイズの領域を備えている。本例では、第１画面は、若干横長のサイズを有する。
【0187】
他方、液晶表示画面１５１０（以下、第２画面ともいう）は、任意の映像が表示可能であるが、例えば、一般的なキオスク端末と同様に、広告表示などの用途で使用される。液晶表示画面１５１０は、例えばタッチセンサを備えた液晶タッチパネル画面であってもよい。
【0188】
なお、実施の形態１の変形例として、液晶表示画面１５１０である第２画面を、空間浮遊映像表示部１５２０の第１画面と合わせて、操作メニューなどのユーザインタフェースとして使用してもよい。
【0189】
また、さらなる変形例として、液晶表示画面１５１０である第２画面を設けない構成も可能である。
【0190】
図２１の空間浮遊映像表示部１５２０の第１画面に、１つの空間浮遊映像３としてコンシェルジュと操作メニューとの両方を表示させてもよい。ただし、第１画面のサイズが限られているので、第１画面内にそれらの両方を表示させた場合、小さく細かい表示内容となり、見にくい可能性がある。よって、図２１の実施例では、第１画面内には、コンシェルジュと操作メニューとのうちのいずれか一方を大きく表示するように、表示の切り替え制御を行ってもよい。
【0191】
勿論、液晶表示画面１５１０と空間浮遊映像表示部１５２０との位置関係は、図２１の構成例に限らず、例えばこれらの上下の配置を逆としてもよい。すなわち、斜面１５７０において、空間浮遊映像表示部１５２０が上部に配置され、下部に液晶表示画面１５１０が配置されてもよい。また、斜面１５７０において、それらが左右に並列して配置されてもよい。ただし、後述の図２２に、内部構造を示すように、キオスク端末１５００として液晶表示画面１５１０に加え空間浮遊映像表示部１５２０も備える構成では、液晶表示画面１５１０を上、空間浮遊映像表示部１５２０を下に配置する構成とした方が、筐体１５５０内の部品配置（空間の利用効率）としてはより好適である。
【0192】
また、図２１に示すように２つの表示部による２画面を有する構成である場合、それらの２つの表示部の画面がそれぞれ液晶表示画面１５１０と空間浮遊映像表示部１５２０であることがユーザにわかりやすいように、それぞれの画面上に、例えば「これは液晶画面です」、「これは空間浮遊映像です」のように、その旨を伝える表示をしてもよい。これにより、ユーザにとっての使い勝手が良くなる。また、画面上の表示ではなく、それぞれの画面の枠部分などの近傍位置に、予め物理的に「液晶画面」、「空間浮遊映像」といった表記をしておいてもよい。
【0193】
図２１に示す例では、空間浮遊映像表示部１５２０には、空間浮遊映像３として、コンシェルジュ１５２１（人物像、コンシェルジュ映像とも記載）が表示されている。詳細は後述するが、図２１に示す構成では、ユーザは、液晶表示画面１５１０に表示された画像または映像情報に加え、空間浮遊映像表示部１５２０に表示されるコンシェルジュ１５２１による操作案内に従って、画面（特に空間浮遊映像表示部１５２０に表示される操作メニューなど）を操作することが可能である。コンシェルジュ１５２１は、ユーザに対し、映像と音声によって、操作案内（操作ガイド、操作説明などとも記載）などを行う。
【0194】
しかも、実施の形態１では、空間浮遊映像表示部１５２０に表示されるコンシェルジュ１５２１は、運動視差を伴う多視点映像として表示されるので、単に二次元平面像が空間浮遊像として表示される場合に比べて、ユーザは、あたかも、キオスク端末１５００上に実際の人物（コンシェルジュ）が存在するような感覚を得ることができる。さらに、そのコンシェルジュが、ユーザに対し、キオスク端末１５００の操作方法などについての説明を丁寧に行う。そのため、初めてキオスク端末に触れるユーザであっても、戸惑うことなく、キオスク端末１５００をより容易に操作でき、所望のサービスを受けることができる。
【0195】
ここで、図２１に示す空間浮遊映像表示部１５２０は、空間浮遊映像３を形成するための方式としては、前述の図３の再帰反射部材２などを用いた構成を適用してもよいし、あるいは、前述の図１３や図１４の再帰反射部材３３０などを用いた構成を適用してもよい。また、上記方式に限らず、空中に空間浮遊映像を表示できる他の方式を適用してもよい。本実施例では、特に図１４の構成を適用した場合（内部構造は、図２２を参照）を示す。
【0196】
さらに、図２１の実施例における、空間浮遊映像３に対するユーザの操作を検出する検出方式（センシング技術）については、前述の図２の空中操作検出センサ１３５１と空中操作検出部１３５０の組み合わせによる方式を適用してもよいし、前述の図７や図８の、第１または第２のセンシング技術による方式を適用してもよい。また、上記方式に限らず、空間浮遊映像に対する空中操作を検出できる他の方式を適用してもよい。
【0197】
また、図２１のキオスク端末１５００には、筐体１５５０（特に斜面１５７０）の左右の位置に、２つのカメラ１５４１，１５４２が備えられている。これらのカメラは、図２の撮像部１１８０に対応するステレオカメラである。カメラ１５４１，１５４２は、このキオスク端末１５００の正面（図示のＹ方向での手前側）に対し近くにいるユーザ（例えば空間浮遊映像３を操作するユーザ）の顔や虹彩などを含む領域を撮像する。空間浮遊映像情報表示システム１であるキオスク端末１５００の制御部１１１０（図２）は、カメラ１５４１，１５４２の撮像画像に基づいて、ユーザがキオスク端末１５００に近づいたことを検出する処理、ユーザを識別・特定する処理、あるいはユーザの認証処理などを行うように構成されている。本実施例では２つのカメラ１５４１，１５４２が配置されているが、1つまたは２つ以上でも構わない。また、カメラが筐体１５５０内部に配置されてもよいし、外部に配置されたカメラが撮像した撮像情報を有線または無線でキオスク端末１５００に送信するように構成されてもよい。
【0198】
また、左右の２つのカメラ１５４１，１５４２により、ステレオ撮影が可能であり、ユーザの顔などを立体像として撮像でき、ユーザの顔部分までの距離や、その３次元的な造形も計算可能である。よって、このシステムでは、１つのカメラによりユーザの顔を平面像として撮像する場合と比較して、ユーザの顔認証の精度を高めることができ、不正使用防止の観点からも好適である。
【0199】
また、図２１のキオスク端末１５００には、筐体１５５０の左右の位置に、２つのスピーカ、特に２つの超指向性スピーカ１５５１，１５５２（図２のスピーカ/超指向性スピーカ３０と対応）が備えられている。超指向性スピーカを備えることで、このキオスク端末１５００を操作しようとしているユーザのみにしか聞き取ることのできない、指向性が非常に高い音声を発することができる。キオスク端末１５００には、通常の可聴帯域の音声を出力するスピーカを備えてもよいが、以下のような場合には、対象ユーザ以外の他の人には聞き取ることができないように、特に超指向性スピーカ１５５１，１５５２を備える構成とすると好適である。すなわち、ユーザの操作などに応じてキオスク端末１５００から発する音声を、例えばユーザの氏名や生年月日や入力番号情報などとする場合などには、特に秘匿性を高くしてセキュリティに配慮する必要がある。このような場合には、超指向性スピーカの適用が好適である。
【0200】
なお、図２１では、超指向性スピーカ１５５１，１５５２は、筐体１５５０の外部に張り出すように設置されているが、これに限らず、筐体１５５０の内部に配置されてもよい。超指向性スピーカ１５５１，１５５２により、空間浮遊映像３の操作メニューのボタンなどが押下されたことを表す音声信号を、ユーザにのみ聞こえるように出力してもよい。
【0201】
図２２の（Ａ）は、図２１のキオスク端末１５００の内部構造の説明図を示す。図２２の（Ａ）では、図２１の筐体１５５０を右側面から見た場合の内部透視のＹ－Ｚ断面を示している。筐体１５５０の上部は、斜面１５７０を有する形状である。その上部の中に、図１４で説明した空間浮遊映像情報表示システム１の構成要素である、映像表示装置１０、レンチキュラーレンズ１１０３、ミラー３６０、再帰反射部材３３０などが収容されている。一方、図２２の（Ｂ）は、図２２の座標軸におけるＺ軸方向から見たときのレンチキュラーレンズ１１０３を示す。また、図２２の（Ａ）（Ｂ）の構成により、利用者が、空間浮遊映像３を、運動視差を伴う多視点映像として視認できる点も、図１４を用いて説明した通りである。
【0202】
筐体１５５０の下部の中には、図２の制御部１１１０を実装した制御装置や、通信部１１３２を実装した通信装置や、電源装置などの他の構成要素が収容されていてもよい。また、筐体１５５０の下部（例えば前面）には、図示のように、人感センサ１５６０が設けられてもよい。人感センサ１５６０は、キオスク端末１５００に人が近づいたことを検出する。
【0203】
図２２の（Ａ）の構成では、図１４と同様に、筐体１５５０内の映像表示装置１０から発される映像光の向きをミラー３６０によって変えて再帰反射部材３３０に入射させる。そして、再帰反射部材３３０による再帰反射光を、映像表示装置１０とは反対側（Ｙ方向で手前側）での斜め上に出射させる。これにより、空間浮遊映像表示部１５２０に空間浮遊映像３が生成される。
【0204】
筐体１５５０の斜面１５７０は、水平面（Ｙ方向）に対し所定の角度ε１を有する。斜面１５７０上において、上方の液晶表示画面１５１０に対し、斜め下の位置に、空間浮遊映像表示部１５２０の開口部（点線で示す）が設けられている。開口部には透明部材などが設けられてもよい。再帰反射部材３３０からの映像光は、その開口部を斜め上に通過し、斜面１５７０の外の所定の位置に、実像である空間浮遊映像３を形成する。この空間浮遊映像３は、斜面１５７０に対しては所定の角度ε２で前側に傾いて形成される。そのため、ユーザからは、空間浮遊映像３は、斜面１５７０に対し手前に張り出して浮遊したように見える。ユーザは、空間浮遊映像表示部１５２０に表示される空間浮遊映像３を、図１４と同様に、斜め上の視点Ｅから斜め下への視線によって好適に視認できる。
【0205】
なお、キオスク端末１５００に図１４の構成を適用した場合、筐体１５５０内でミラー３６０によって光路を折り返す構成であるため、筐体１５５０内での、映像表示装置１０から再帰反射部材３３０までの光路をより長くすることができる。これにより、再帰反射部材３３０に対し空間浮遊映像３が前方斜め上に飛び出し量が大きくなるという効果を得ることができる。また、この構成により、筐体１５５０の奥行方向（Ｙ方向）での厚さ寸法は抑えることができる。
【0206】
また、図２２の（Ａ）の構成では、第１の測距装置３４０（前述のＴＯＦセンサなどを含む）は、空間浮遊映像表示部１５２０の開口部を通じて、空間浮遊映像３の全体をカバーする範囲をセンシングする。上記第1の測距装置３４０を用いることで、主に、利用者（ユーザ）の、空間浮遊映像３に対するタッチ操作などのセンシングを行う。なお、図２２の（Ａ）では、第１の測距装置３４０によるセンシングの範囲の下端Ｂは、開口部に合わせて、水平面（Ｙ方向）に対し斜め上となっているが、これに限らず、水平方向（Ｙ方向）に近づけてもよい。筐体１５５０の開口部の位置や第１の測距装置３４０の配置位置を変更することで、そのセンシングの範囲を設計可能である。
【0207】
また、第１の測距装置３４０を含むセンシングシステムを、ユーザがキオスク端末１５００（筐体１５５０の斜面１５７０、または空間浮遊映像３など）に対し十分に近づいたかどうかの検出、あるいは、カメラと合わせてその検出の補助に用いてもよい。また、図２２の（Ａ）の構成で図８のような第１の測距装置３４０と第２の測距装置３４１を設ける場合には、それらを例えば再帰反射部材３３０に対しＸ方向で左右の位置に配置し、測距の光軸を水平面（Ｙ方向）に近づけてもよい。
【0208】
キオスク端末１５００は、第１の測距装置３４０を含むセンシングシステムを用いて、空間浮遊映像表示部１５２０の空間浮遊映像３に対するユーザの手指による操作をセンシングする。キオスク端末１５００の制御部１１１０は、そのセンシング結果を含む検出情報に応じて、空間浮遊映像表示部１５２０での空間浮遊映像３の表示内容（コンシェルジュ１５２１や後述の操作メニューなどのユーザインタフェース）を制御する。
【0209】
上記の通り、実施の形態１の空間浮遊映像情報表示システムであるキオスク端末によれば、空間浮遊像３を、運動視差を伴う多視点映像として表示することができる。したがって、空間浮遊像３を、平面映像として表示する場合に比較して、キオスク端末などの利用者に対して、より好適な空間浮遊映像によるインタフェースおよび必要な情報を提供できる。実施の形態１のシステムによれば、空間浮遊映像として表示された操作メニューなどのユーザインタフェースの操作が初めてのユーザ、操作に不慣れなユーザ、あるいは高齢のユーザなどであっても、当該ユーザに対し、空間浮遊映像、かつ多視点映像として表示された、親しみやすい人物像としてのコンシェルジュによる操作案内を提供することができる。これにより、空間浮遊映像のインタフェースに対するユーザの誤入力や誤操作を回避または低減でき、より確実な操作を可能とする。
【0210】
＜キオスク端末に係わる実施の形態２＞
図２３は、キオスク端末に係わる他の実施例（実施の形態２とする）の外観構成例を示す。図２３に示すキオスク端末１６００は、図２１に示したキオスク端末とは異なり、液晶表示画面１５１０を備えず、筐体１６５０の斜面１６７０において、概略的に全面に、空間浮遊映像表示部１６２０が備えられている。この空間浮遊映像表示部１６２０による１つの画面は、図２１での空間浮遊映像表示部１５２０の画面よりもサイズが大きい。図２３の実施例では、空間浮遊映像表示部１６２０は、縦長のサイズの１つの画面を有し、１つの空間浮遊映像３が表示される。本例では、この１つの画面の空間浮遊映像３内に、コンシェルジュと操作メニューとの両方が並列で表示され、コンシェルジュが操作メニューの操作についてガイドする。
図２３は、キオスク端末に係わる他の実施例（実施の形態２とする）の外観構成例を示す。図２３に示すキオスク端末１６００は、図２１に示したキオスク端末とは異なり、液晶表示画面１５１０を備えず、筐体１６５０の斜面１６７０において、概略的に全面に、空間浮遊映像表示部１６２０が備えられている。この空間浮遊映像表示部１６２０による１つの画面は、図２１での空間浮遊映像表示部１５２０の画面よりもサイズが大きい。図２３の実施例では、空間浮遊映像表示部１６２０は、縦長のサイズの１つの画面を有し、１つの空間浮遊映像３が表示される。本例では、この１つの画面の空間浮遊映像３内に、コンシェルジュと操作メニューとの両方が並列で表示され、コンシェルジュが操作メニューの操作についてガイドする。
【0211】
空間浮遊映像表示部１６２０では、斜面１６７０に対し手前側に、空間浮遊映像３が表示される。本例では、空間浮遊映像３は、上部にコンシェルジュ１６２１が映し出されており、下部には、操作メニュー１６２２が映し出されている。操作メニュー１６２２には、例えば操作ボタン（丸や三角で示す）などが含まれている。コンシェルジュ１６２１は、操作メニュー１６２２に関する操作方法などを説明、ガイドする。この図２３の構成の場合でも、図２１の場合と同様に、ユーザは、多視点の空間浮遊映像として表示されるコンシェルジュ１６２１によるガイドに従って、キオスク端末１６００、特に操作メニュー１６２２を容易に操作でき、所望のサービスを受けることができる。
【0212】
【0213】
図２４の（Ａ）は、図２３のキオスク端末１６００の内部構造の一例を示す図であり、キオスク端末１６００を右側面から見た場合の内部透視のＹ－Ｚ断面を示している。このキオスク端末１６００は、筐体１６５０内に、前述の図１３の空間浮遊映像情報表示システム１の構成要素が収容されている。すなわち、筐体１６５０内の上部に、映像表示装置１０、レンチキュラーレンズ１１０３、再帰反射部材３３０などが配置されている。一方、図２４の（Ｂ）は、図２４の座標軸におけるＺ軸方向から見たときのレンチキュラーレンズ１１０３を示す。また、図２４の（Ａ）（Ｂ）の構成により、利用者が空間浮遊像３を、運動視差を伴う多視点映像として視認できる点も、図１３を用いて説明した通りである。
【0214】
図２４の（Ａ）の構成では、筐体１６５０内の上部の底面部の上に、映像表示装置１０が略水平面（詳しくは、Ｙ方向に対し奥側がやや上に傾いた状態）に沿って配置されており、映像表示装置１０の光軸Ｊ１は略鉛直上方（Ｚ方向）を向いている。また、筐体１６５０の上部の斜面１６７０には、空間浮遊映像表示部１６２０の開口部（点線で示す）が設けられている。筐体１６５０の上部内で、その開口部に対し近くには、再帰反射部材３３０が所定の角度で配置されている。斜面１６７０は所定の角度ε１を有しており、再帰反射部材３３０は、斜面１６７０に対し所定の角度ε２で配置されている。
【0215】
図２４の（Ａ）の構成では、図１３の場合と同様に、映像表示装置１０からの映像光を再帰反射部材３３０に入射し、再帰反射光を映像表示装置１０とは反対側、すなわち斜面１６７０の開口部の方に出射する。これにより、斜面１６７０の空間浮遊映像表示部１６２０における、開口部の外側の所定の位置に、実像である空間浮遊映像３が、多視点映像として生成される。この空間浮遊映像３は、斜面１６７０に対し所定の角度ε２で斜めに配置されている。ユーザは、空間浮遊映像３に対し、斜め上の視点Ｅから、斜め下の視線によって、この空間浮遊映像３を好適に視認できる。
【0216】
また、図２４の（Ａ）の構成では、筐体１６５０の上部内の所定の位置、本例では再帰反射部材３３０の上端の付近の位置に、第１の測距装置３４０（ＴＯＦセンサなどを含む）が設置されている。この第１の測距装置３４０の光軸は、空間浮遊映像３の方を向いており、視野角は、空間浮遊映像３の全体をカバーする広さとされている。このキオスク端末１６００に実装されている、第１の測距装置３４０を含むセンシングシステムは、空間浮遊映像表示部１６２０の空間浮遊映像３に対するユーザの手指ＵＨによる操作をセンシングする。
【0217】
図２３、図２４に示す実施の形態２では、１つの空間浮遊映像表示部１６２０に、空間浮遊映像３としてのコンシェルジュ１６２１の姿と、空間浮遊映像３としての操作メニュー１６２２との両方が、運動視差を伴う多視点映像として表示される。この時、コンシェルジュ１６２１だけを多視点立体映像として表示し、操作メニュー１６２２は平面映像をして表示してもよい。この場合、空間浮遊映像３を多視点立体映像として表示するか、あるいは、平面映像として表示するかは、レンチキュラーレンズ１１０３を配置した状態であっても、映像表示装置１０に表示する映像を、多視点立体映像とするか、あるいは、平面映像とするかを切り替えるだけで可能となる。
【0218】
キオスク端末における空間浮遊映像の表示方法は、これに限らない。変形例としては、空間浮遊映像表示部１６２０の１画面内で、図２３のように、コンシェルジュの表示と操作メニューの表示とを同時に表示するのではなく、コンシェルジュの表示と操作メニューの表示とを、適宜切り替えるようにしてもよい。
【0219】
＜キオスク端末の使用シーン＞
以上、キオスク端末に係る、２つの実施の形態について説明した。次に、実際の利用者によるキオスク端末の使用シーンについて説明する。図２５は、１人の利用者が、実施の形態１の空間浮遊映像情報表示システムとしてのキオスク端末を、使用するシーンを示す図である。図２５において、キオスク端末１５００には、空間浮遊像としての多視点映像であるコンシェルジュ（女性の顔）が表示されている。
以上、キオスク端末に係る、２つの実施の形態について説明した。次に、実際の利用者によるキオスク端末の使用シーンについて説明する。図２５は、１人の利用者が、実施の形態１の空間浮遊映像情報表示システムとしてのキオスク端末を、使用するシーンを示す図である。図２５において、キオスク端末１５００には、空間浮遊像としての多視点映像であるコンシェルジュ（女性の顔）が表示されている。
【0220】
ここで、空間浮遊像としての多視点画像であるコンシェルジュは、キオスク端末１５００の近傍に位置する利用者が、上記コンシェルジュを視認できる範囲内であれば、どの位置にあっても、コンシェルジュが常に自分の（利用者の）方に視線を向けているように視認することが可能である。より具体的には、図２５に示すように、利用者がキオスク端末の斜め左側に立っている場合、コンシェルジュは利用者の立っている方向、すなわち、斜め左の方を向いているように、利用者により視認することができる。一方、利用者がキオスク端末の斜め右側に立っている場合、コンシェルジュは利用者の立っている方向、すなわち、斜め右の方を向いているように、利用者により視認することができる。
【0221】
上記のように、空間浮遊像としてのコンシェルジュを表示するためには、図１８に示す「表示形式Ａ」で、多視点画像としてのコンシェルジュを表示すればよい。その結果、利用者が、キオスク端末１５００、すなわち、空間浮遊像に向かって右から順に、カメラＮｏ.１～Ｎｏ.９によるコンシェルジュの映像を、運動視差を伴う９視点の多視点の空間浮遊像として表示することができる。
【0222】
また、利用者がキオスク端末１５００に対して、例えば、向かって右側から左側の向きに移動した場合には、利用者は、図１５に示すような多視点画像特有の運動視差を認識することができ、空間浮遊像としてのコンシェルジュを立体画像（または立体映像）として認識することができる。この結果、単に二次元画像として空間浮遊像が表示されている場合と比較して、利用者は、コンシェルジュを実際の人物であるかのように立体的かつ運動視差を伴う多視点映像として視認することができる。さらに、利用者は、キオスク端末１５００の近傍を移動した場合であっても、常にコンシェルジュが自分の（利用者の）方に視線を向けて語りかけているような感覚を得ることができる、というこれまでにない、新たな効果を得ることができる。
【0223】
＜キオスク端末に係わる実施の形態３＞
図２６は、一実施例（実施の形態３とする）として、キオスク端末における空間浮遊映像３の表示の一例を示す。図２６のキオスク端末は、図２１のキオスク端末１５００を例とした構成を示す。図２６のキオスク端末は、空間浮遊映像情報表示システム１により形成される空間浮遊映像３をユーザインタフェースとして適用したキオスク端末である。また、図２７、図２８は、図２６のキオスク端末をユーザが操作する場合の動作フローを示す。
図２６は、一実施例（実施の形態３とする）として、キオスク端末における空間浮遊映像３の表示の一例を示す。図２６のキオスク端末は、図２１のキオスク端末１５００を例とした構成を示す。図２６のキオスク端末は、空間浮遊映像情報表示システム１により形成される空間浮遊映像３をユーザインタフェースとして適用したキオスク端末である。また、図２７、図２８は、図２６のキオスク端末をユーザが操作する場合の動作フローを示す。
【0224】
図２７は、図２６のキオスク端末の起動時に係わる第１動作フローを示す。第１動作フローは基本的な動作を示す。ステップＳ１００で、フロー開始時、キオスク端末は、待機状態（言い換えるとスリープ状態）である。ステップＳ１０１で、キオスク端末は、ユーザがこのキオスク端末に近づいたかどうかを検知する。キオスク端末を利用しようとするユーザが、キオスク端末に近づいてくる、あるいは、ユーザがキオスク端末の近傍の所定の位置に立つ。ユーザがこのキオスク端末に近づいた際には、カメラ１５４１，１５４２による撮像に基づいて、ユーザがこのキオスク端末（特に斜面１５７０の正面）に近づいたことが検知される。もしくは、カメラの代わりに、図２１に示す赤外線を用いた人感センサ１５６０などによって、ユーザがこのキオスク端末１５００に近づいたことを検知してもよい。ユーザがキオスク端末に近づいたことを検知した場合（ＹＥＳ）、ステップＳ１０２で、キオスク端末は、起動状態に遷移する。その後、起動状態で、ユーザは、キオスク端末を使用できる。
【0225】
ステップＳ１０３で、キオスク端末は、空間浮遊映像表示部１５２０に、コンシェルジュ１５２１または操作メニュー１５２２を表示して、ユーザに対し、操作方法などをガイドなどしながら、操作メニュー１５２２での操作（言い換えると入力）を受け付け、その操作の検出に応じた所定の処理（アプリケーションやサービスの処理）を行う。具体例では、最初時には、図２６の（Ａ）のように、空間浮遊映像表示部１５２０にコンシェルジュ１５２１が表示され、コンシェルジュ１５２１の映像および音声により、ユーザに対し、あいさつや操作案内を行う。そして、あいさつなどが終わると、自動的に、図２６の（Ｂ）のように、空間浮遊映像表示部１５２０の表示はコンシェルジュ１５２１から操作メニュー１５２２に遷移する。ユーザは操作メニュー１５２２に対し手指で操作を行う。キオスク端末は、センシング技術を用いて操作を検出し、検出した操作に応じた処理を行う。
【0226】
なお、コンシェルジュ１５２１の映像は、既に述べたように、運動視差を伴う多視点映像に基づく空間浮遊映像である。多視点映像としては、実際の人を予め多視点から、すなわち視点の数に対応した複数のカメラによって撮影した動画でもよいし、コンピュータでレンダリングにより生成したＣＧに基づく人物像でもよいし、人の姿を表すアニメーションなどでもよい。また、人に限らず、動物やフィクション上のキャラクターなどとしてもよい。
【0227】
ステップＳ１０４では、ユーザがこのキオスク端末から離れたかどうかを検知する。ユーザがこのキオスク端末から離れた場合、カメラ１５４１，１５４２による撮像に基づいて、ユーザがこのキオスク端末（特に正面の斜面１５７０）から離れたことが検知される。もしくは、カメラの代わりに、図２１に示す人感センサ１５６０などによって、ユーザがこのキオスク端末から離れたことを検知してもよい。ユーザがキオスク端末から離れたことを検知した場合（Ｙ）、ステップＳ１０５で、キオスク端末は、待機状態に遷移する。
【0228】
図２８は、図２６の実施の形態３でのキオスク端末の起動時に係わる第２動作フローを示す。第２動作フローは、第１動作フローよりも詳しい実施例を示す。第２動作フローは、キオスク端末が起動状態となった後の動作として、ユーザの認証などを行う場合の動作フローを示す。
【0229】
ステップＳ２００で、フロー開始時、キオスク端末は、待機状態である。ユーザは、キオスク端末の正面に近づいてくる、あるいは、キオスク端末の近傍の所定の位置に立つ。ステップＳ２０１で、キオスク端末は、このキオスク端末（特に斜面１５７０の正面）にユーザが近づいたかどうかを２台のカメラによるステレオ撮影などによって検知する。ユーザを検知した場合（Ｙ）、ステップＳ２０２で、キオスク端末は、空間浮遊映像表示部１５２０に、図２６の（Ａ）のように、まず、コンシェルジュ１５２１を表示し、コンシェルジュ１５２１の映像および音声により、ユーザに対し、例えば「いらっしゃいませ、ご利用ありがとうございます。」などのあいさつを行い、また、あいさつのメッセージも表示する。
【0230】
次に、ステップＳ２０３で、キオスク端末は、検知したユーザの認証を行う。この際、キオスク端末は、空間浮遊映像３として、「認証しています」などの、認証中を表すメッセージも表示する。キオスク端末は、認証として、２台のカメラ１５５１，１５５２の撮像画像（特に顔画像）に基づいて、近づいてきた人（すなわち検知したユーザ）の顔認証を行うことで、ユーザを識別・特定してもよい。または、ユーザの目の虹彩画像に基づいた認証が行われてもよい。ここでの認証とは、キオスク端末の正面前方の所定の範囲内に存在しているユーザの顔または虹彩などの部分を、２台のカメラで撮影して得られたステレオ画像に基づいて、ユーザが、予め本システムに登録された、このキオスク端末の正規のユーザであるか否かを判定することである。
【0231】
ここで、１台のカメラによる撮影によってもユーザの画像の基づいた認証は可能であるが、２台のカメラ１５５１，１５５２によるステレオ画像を用いることで、１台のカメラ画像による認証と比較して、より精度が高く、不正利用のしにくいユーザ認証が可能となる。例えば、顔を正面からのみ撮影した画像が紙に印刷された顔画像を用いた、不正な認証を、見抜くことが可能となる。
【0232】
上記顔認証などに限らず、ユーザの認証の他の方法としては、以下も適用できる。ユーザが所持しているマイナンバーカードなどの本人確認証、運転免許証などの情報を、キオスク端末に読み込ませることで、ユーザ認証する方法も適用可能である。また、ユーザが所持する携帯端末などに記憶されているユーザ情報を、携帯端末とキオスク端末との近距離無線通信で授受することで、ユーザ認証を行う方法も適用できる。
【0233】
また、ユーザが所持するスマートフォンなどの携帯端末に、ユーザを特定できる個人情報（例えば氏名、住所、生年月日、キオスク端末の使用履歴など）を含むＱＲコード（登録商標）などのコード情報を表示し、そのコード情報をキオスク端末の空間浮遊映像表示部１５２０に対し提示（例えばカメラ１５５１，１５５２に対しかざす）させる。そして、キオスク端末のカメラ１５５１，１５５２により、上記提示されたユーザの情報を読み込むことで、ユーザ認証を行う方法も適用できる。
【0234】
ステップＳ２０４では、キオスク端末は、上記ユーザの認証が成功したかを確認し、成功の場合にはステップＳ２０６へ、失敗の場合にはステップＳ２０５へ進む。ステップＳ２０５では、キオスク端末は、他の認証方法を促し、ステップＳ２０３に戻り、他の認証方法での認証を試みる。上記ユーザの認証のプロセスを経た後、キオスク端末は、空間浮遊映像表示部１５２０に、所定の操作メニュー画面（不特定多数のユーザに対応した操作メニュー）を提示してもよいし、あるいは、認証で特定された個々のユーザに最適なメニュー画面（個人用の操作メニュー）を提示するようにしてもよい。
【0235】
具体例では、認証成功後、図２６の（Ａ）、（Ｂ）に示すように、空間浮遊映像表示部１５２０の表示は、コンシェルジュ１５２１から操作メニュー１５２２に変化・遷移する。（Ｂ）の操作メニュー１５２２は、内容例としては、「タッチして項目を選んでください」とメッセージ（文字画像）が表示され、選択肢、項目となる押しボタンとして、例えば、「１ 住民票発行」、「２ チケット購入」、「３ 登録情報」、「４ 別のメニュー」が表示されている。「１ 住民票発行」は、住民票の発行などの行政手続きに係わる項目である。「２ チケット購入」は、コンサートや映画など、または電車などのチケットの購入や受け取りに係わる項目である。「３ 登録情報」は、ユーザに係わる登録情報の確認や変更などに係わる項目である。「４ 別のメニュー」は、別のメニューに遷移するための項目である。ユーザは、目的に応じて、例えば「２ チケット購入」項目のボタンを押す。キオスク端末は、押されたボタンに応じて、次の操作メニューの表示に遷移させる。さらに詳細な例について以下に示す。
【0236】
［コンシェルジュによる操作案内］
図２８のステップＳ２０６で、キオスク端末の空間浮遊映像情報表示システム１は、通信部１１３２（図２）を介して、通信網上のキオスクサーバにアクセスし、上記ユーザ認証の結果情報を通知する。また、キオスク端末は、当該ユーザが過去に当該キオスク端末を使用したことのあるユーザであるか否かを、キオスクサーバ内の利用者データベースから当該ユーザの属性情報などを取得・参照することで判断する。もしくは、キオスク端末は、上記ユーザの携帯端末からのコード情報などに基づいて、ユーザの属性情報などを取得・参照してもよい。ユーザの属性情報には、例えばユーザの性別、年齢、過去のキオスク端末の使用履歴などの情報を含む。
図２８のステップＳ２０６で、キオスク端末の空間浮遊映像情報表示システム１は、通信部１１３２（図２）を介して、通信網上のキオスクサーバにアクセスし、上記ユーザ認証の結果情報を通知する。また、キオスク端末は、当該ユーザが過去に当該キオスク端末を使用したことのあるユーザであるか否かを、キオスクサーバ内の利用者データベースから当該ユーザの属性情報などを取得・参照することで判断する。もしくは、キオスク端末は、上記ユーザの携帯端末からのコード情報などに基づいて、ユーザの属性情報などを取得・参照してもよい。ユーザの属性情報には、例えばユーザの性別、年齢、過去のキオスク端末の使用履歴などの情報を含む。
【0237】
また、ステップＳ２０６では、キオスク端末は、ユーザの携帯端末から無線通信でユーザ属性情報を含むユーザ情報などを取得してもよい。また、キオスク端末は、ユーザ属性情報のみならず、キオスクサーバなどの外部装置から、当該ユーザおよび操作メニューに係わる他の所定のデータ、例えばチケット予約情報などのユーザが予め入力・登録済みの情報を併せて取得してもよい。また、ステップＳ２０６で、キオスク端末は、カメラ１５４１，１５４２の画像に基づいて、当該ユーザの年齢などの属性を判断してもよい。ステップＳ２０６で取得されたユーザ属性情報は、次のステップＳ２０７の判定で使用される。
【0238】
次のステップＳ２０７では、キオスク端末は、ステップＳ２０６で得られた、ユーザの属性情報に基づいて、当該ユーザが、当該キオスク端末を利用する「初めてのユーザ」、あるいは「高齢のユーザ」であるかを判断する。そのような所定の条件に該当するユーザであると判定された場合（ＹＥＳ）にはステップＳ２０８に進み、条件に該当しないユーザであると判定された場合（ＮＯ）にはステップＳ２０９に進む。
【0239】
本システムは、ステップＳ２０７の判定結果に応じて、対応を分岐する。ここでは大きく２つの対応に分かれる。一方は、慣れたユーザを想定した第１処理フロー（ステップＳ２０９からのフロー）であり、他方は、不慣れなユーザ（初めてのユーザや高齢のユーザ）を想定した第２処理フロー（ステップＳ２０８からのフロー）である。第１処理フローでは、キオスク端末は、コンシェルジュによる操作ガイドを省略する、または、第２処理フローに比べて簡易化した操作ガイドとする。第２処理フローでは、キオスク端末は、コンシェルジュによる詳しい操作ガイドを行う。
【0240】
ステップＳ２０８では、キオスク端末は、空間浮遊映像表示部１５２０において、「コンシェルジュによる音声付操作ガイド」を行う。なお、「コンシェルジュ」とは、「案内人」を意味し、例えば図２６の（Ａ）に示すように、運動視差を伴う多視点画像（または映像）に基づく空間浮遊映像３として、例えば、人物の上半身の映像としてのコンシェルジュ１５２１（図面では模式で図示している）が表示される。コンシェルジュ１５２１は、空間浮遊映像３をユーザインタフェースとして用いたキオスク端末の操作が初めてのユーザ、あるいは、その操作に不慣れな高齢のユーザのために、音声や身振りをまじえて、当該ユーザに対し、操作方法などに関するガイドを行う。コンシェルジュ１５２１は、（Ｂ）のような操作メニュー１５２２の操作に関してユーザがわからない箇所について説明やガイドを行う。
【0241】
より具体的には、ステップＳ２０８では、まず、図２６の（Ａ）に示すように、空間浮遊映像表示部１５２０の画面上に、コンシェルジュ１５２１の映像が現れる。コンシェルジュ１５２１は、「私が、操作方法についてご案内させていただきますので、お客様は、私の説明に従って、メニュー操作をしてください。」などの文字映像および音声を出力する。音声は、例えば図２６の（Ａ）の超指向性スピーカ１５５１，１５５２により、当該ユーザにのみ聞き取ることができる方法で提供される。コンシェルジュ１５２１は、キオスク端末および操作メニューの使用方法を、逐次、ユーザに伝えることによって、操作ガイドを行う。
【0242】
次に、ステップＳ２０８とステップＳ２０９とのいずれの場合でも、図２６の（Ａ）、（Ｂ）のように、空間浮遊映像３としてのコンシェルジュ１５２１の映像は、空間浮遊映像３としての操作メニュー１５２２の映像に切り替わる。ここで、ステップＳ２０８では、空間浮遊映像３の画面が操作メニュー１５２２に切り替わった後でも、コンシェルジュ１５２１によるガイドが継続する。キオスク端末は、適宜に、空間浮遊映像表示部１５２０でのコンシェルジュ１５２１の表示と操作メニュー１５２２の表示とを切り替える。ユーザは、コンシェルジュ１５２１の操作ガイドに従って、空間浮遊映像表示部１５２０の画面上の操作メニュー１５２２の操作を行う。
【0243】
次に、ステップＳ２１０では、ユーザが、キオスク端末の操作メニュー１５２２に対し、所定の一連の操作、例えばチケットを発行するための、暗証番号の入力操作などを行う。キオスク端末は、その操作を検出して処理を行い、チケットを発行する。ユーザは、取り出し口１５３０からチケットを受け取る。ユーザの所望の操作およびそれに対応したキオスク端末の動作、例えばチケット発行が完了した場合（Ｙ）、ステップＳ２１２に移行する。
【0244】
ステップＳ２１２では、キオスク端末は、空間浮遊映像表示部１５２０の画面に、再び操作メニュー１６２２（例えば最初のメニュー画面、または、次のメニューがある場合の次のメニュー画面、あるいは、最後のメニュー画面など）を表示する。もしくは、キオスク端末は、空間浮遊映像表示部１５２０での表示を終了する。また、キオスク端末は、表示終了の際には、画面に最後にコンシェルジュ１５２１を表示し、ユーザに対し終了の旨（「ご利用ありがとうございました」など）を出力させてもよい。
【0245】
一方、ステップＳ２０９では、キオスク端末は、操作が初めてではなくある程度慣れているユーザを想定した表示を行う。キオスク端末は、空間浮遊映像表示部１５２０の画面の表示を、図２６の（Ｂ）のように、操作メニュー１５２２に切り替える。その後、ユーザは、画面の操作メニュー１６２２に従って、項目の選択などの所望の操作を行う。ステップＳ２１１では、ステップＳ２１０と同様に、所定の一連の操作およびそれに対応する動作（例えばチケット発行）が完了した場合（Ｙ）、ステップＳ２１２に移行する。
【0246】
ここで、ステップＳ２０９に進んだ場合でも、ユーザによる操作がうまくいかない可能性を考慮し、ステップＳ２１２が設けられている。ステップＳ２１１で、ユーザの所定の一連の操作が完了しない場合（Ｎ）、ステップＳ２１２に進む。ステップＳ２１２で、キオスク端末は、操作メニュー１５２２において、ユーザの操作がうまくいっているかどうかを判断する。具体例では、キオスク端末は、操作メニュー１５２２において、ユーザによる操作が、所定の時間（例えば３０秒）よりも長い時間、停止（言い換えると入力が無い）しているかどうかを判断する。ユーザは、空間浮遊映像３としての操作メニュー１５２２の操作がよくわからない場合などに操作を停止している可能性がある。キオスク端末は、カメラやセンシング技術などを用いて、その長時間操作停止を検出する。長時間操作停止しているなどと判断された場合（Ｙ）にはステップＳ２０６に進み、そうでない場合（Ｎ）にはステップＳ２０９に進む。
【0247】
また、他の例では、ステップＳ２１２で、キオスク端末は、ユーザが空間浮遊映像３の面（操作メニュー１５２２）に対し誤った操作をしているかどうかを判断してもよい。例えば手指が項目のボタンなどから離れた位置でタッチしようとしているなどが判断されてもよい。
【0248】
ステップＳ２１２からステップＳ２０８に進んだ場合、キオスク端末は、当該ユーザに対し、空間浮遊映像表示部１５２０にコンシェルジュ１５２１を表示し、コンシェルジュ１５２１による操作ガイドを行う。この際、キオスク端末は、コンシェルジュ１５２１による操作ガイドとして、予め規定された内容による操作ガイドの再生としてもよいが、より好ましくは、ステップＳ２１２で当該ユーザが操作停止した操作メニュー１５２２の箇所についての操作ガイドを行う。例えば、図２６の（Ｂ）の「２.チケット購入」ボタンが押された後の操作メニューでユーザの操作が止まっていた場合には、キオスク端末は、その操作メニュー内で次にどのような操作をすればよいかを、コンシェルジュ１５２１によってガイドする。
【0249】
なお、上述した動作例は、図２３の実施例、すなわち１つの空間浮遊映像３の画面内にコンシェルジュ１６２１と操作メニュー１６２２との両方を並列に表示する構成例にも、同様に適用できる。この場合、画面内で、コンシェルジュ１６２１が操作メニュー１６２２を例えば指先で指し示しながら操作ガイドすることなどが可能である。
【0250】
実施の形態３によれば、キオスク端末は、ユーザがキオスク端末に近づいたことを契機として、空間浮遊映像３としてコンシェルジュ１５２１を表示し、コンシェルジュ１５２１による操作ガイドを開始する。コンシェルジュ１５２１の映像は、運動視差を伴う多視点画像（または映像）による空間浮遊映像であるので、ユーザは、コンシェルジュ１５２１の映像を立体像として視認することができる。そのため、ユーザは、コンシェルジュ１５２１の映像を、あたかも、実際の人物がそこに存在するかのような感覚を覚えることとなり、キオスク端末を初めて操作するユーザや、操作に不慣れな高齢者などのユーザであっても、コンシェルジュ１５２１による操作ガイドや、超指向性スピーカの音声（他の人には聞こえない操作ガイド）などに従って、所定の操作を確実に行うことができる。
【0251】
実施の形態３によれば、認証によりユーザを特定し、ユーザの年齢やシステム利用履歴に基づいて、初めて操作を行うユーザや、操作に不慣れなユーザや、高齢のユーザに対しては、コンシェルジュにより丁寧に操作方法などを説明する。よって、そのようなユーザでも、空間浮遊映像としての操作メニューに対し、確実なキー入力操作などを行うことができる。慣れたユーザに対しては操作ガイドを省略または簡易化することで、効率的なサービスも可能である。
【0252】
実施の形態３などの変形例として以下も可能である。図３１は、その変形例での表示例を示す。キオスク端末は、空間浮遊映像表示部１５２０による空間浮遊映像３の１画面内に、操作メニュー１５２２の映像をベースとしてなるべく大きく表示する。キオスク端末は、その操作メニュー１５２２上に、コンシェルジュ１５２１の映像を、相対的に小さいサイズで重畳表示させる。そして、キオスク端末は、そのコンシェルジュ１５２１により操作メニュー１５２２の操作をガイドさせる。コンシェルジュ１５２１は、例えば身振り、手振り、口や目の動きなどをまじえて動き、かつ、運動視差を伴う多視点映像に基づく空間浮遊映像とすると好ましい。キオスク端末は、操作メニュー１５２２の画面内で適宜にコンシェルジュ１５２１の表示有無や表示位置などを変えてもよい。
【0253】
＜キオスク端末に係わる実施の形態４＞
図２９は、他の実施例（実施の形態４とする）として、キオスク端末と、ユーザが保持する携帯端末との連携動作を行う実施例を示す。図２９のキオスク端末１７００は、空間浮遊映像情報表示システム１により形成された空間浮遊映像３をユーザインタフェースとして適用したキオスク端末である。ユーザ１７１０がこのキオスク端末１７００を操作する場合に、キオスク端末１７００と、ユーザ１７１０が所持するスマートフォンなどの携帯端末１７４０との連携を行う。図２９のキオスク端末１７００は、図２３のキオスク端末１６００の構成をベースとしている。
図２９は、他の実施例（実施の形態４とする）として、キオスク端末と、ユーザが保持する携帯端末との連携動作を行う実施例を示す。図２９のキオスク端末１７００は、空間浮遊映像情報表示システム１により形成された空間浮遊映像３をユーザインタフェースとして適用したキオスク端末である。ユーザ１７１０がこのキオスク端末１７００を操作する場合に、キオスク端末１７００と、ユーザ１７１０が所持するスマートフォンなどの携帯端末１７４０との連携を行う。図２９のキオスク端末１７００は、図２３のキオスク端末１６００の構成をベースとしている。
【0254】
一例として、ユーザ１７１０がキオスク端末１７００を利用してチケット（例えばあるコンサートのチケット）を購入する手続きを行う場合について説明する。前述の、図２７、図２８に示すフローチャートと同様に、ユーザ１７１０がキオスク端末１７００に近づいた場合、キオスク端末１７００は、ユーザ１７１０の認証を行い、空間浮遊映像表示部１７２０に、コンシェルジュ１７２１や操作メニュー１７２２を表示する。ユーザは、コンシェルジュ１７２１によるガイドなどに従い、操作メニュー１７２２を操作する。例えば図２６の（Ｂ）のような操作メニュー１５２２から、「２ チケット購入」が選択操作される。キオスク端末は、空間浮遊映像表示部１７２０の画面内に、「２ チケット購入」から遷移する操作メニュー１７２２を表示する。ユーザ１７２０は、操作メニュー１７２２で、チケットを購入するための詳細な操作を行う。
【0255】
チケットは、例えば紙に印刷された形で発行され、ユーザ１７１０は、その紙のチケットを受け取る。あるいは、チケットの入手方法としては、紙に印刷されたチケットを受け取るだけではなく、いわゆる電子チケット（あるいは「ｅチケット」）の形で受け取ることも可能である。この場合、ユーザ１７１０は、紙に印刷されたチケットの代わりに、紙に印刷されたチケットと同一の情報（すなわち電子チケット）を、ユーザ１７１０が所有する携帯端末１７４０で受信する。本例では、操作メニュー１７２２での操作の際に、携帯端末１７４０とキオスク端末１７００との間で、例えばＢｌｕｅｔｏｏｔｈ（登録商標）などの通信インタフェースでの近距離無線通信が行われる。キオスク端末１７００から、ユーザの携帯端末１７４０に、上記電子チケットを直接送信する。この際に、キオスク端末は、コンシェルジュ１７２１により、その通信の操作をガイドする。
【0256】
他の例として、図２９に示すように、キオスク端末１７００は、空間浮遊映像表示部１７２０の画面上に、空間浮遊映像３（例えば操作メニュー１７２２の一部）として、上記電子チケットの情報内容を含む、バーコードまたはＱＲコード（登録商標）などのコード情報１７６０（言い換えるとコード映像）を表示する。ユーザ１７１０は、自分の携帯端末１７４０を用いて、そのコード情報を読み取る。例えば、ユーザ１７１０は、コンシェルジュ１７２１によるガイドに従い、操作メニュー１７２２内に表示されたコード情報１７６０を携帯端末１７４０のカメラなどのリーダ機能によって読み取る操作を行う。コンシェルジュ１７２１は、その読み取りの操作をガイドする。携帯端末１７４０は、読み取ったコード情報１７６０に基づいて、電子チケットを取得し、携帯端末１７４０内部のメモリなどに保持する。
【0257】
ユーザ１７１０がキオスク端末１７００から受け取ることができるものや情報は、紙のチケットや電子チケットに限らず、例えば買い物に利用できるクーポンやポイントの情報、さらには電子書籍などであってもよい。紙に印刷されたチケットやクーポンは、紛失する可能性があるが、電子チケットやクーポンであれば、携帯端末１７４０の内部に保持されるので、紛失する可能性を低減できる。また、紛失の可能性を低減するのみならず、電子チケットやクーポンを携帯端末１７４０の内部に保持することで、紙に印刷されたチケットやクーポンに比べ、実際にチケットを利用する場合に、携帯端末を提示する、または、携帯端末に保持された電子チケットをチケット発行者が読み取るなどの利用形態が可能である。これにより、ユーザにとっての使い勝手が向上する。
【0258】
キオスク端末は、空間浮遊映像３の操作メニューに対するユーザの操作に応じて、ユーザの携帯端末に対し、無線通信で、その操作メニューに関連する情報（例えばアクセス履歴情報、操作履歴情報など）を送信してもよい。
【0259】
＜キオスク端末に係わる実施の形態５＞
図３０は、一実施例（実施の形態５とする）として、前述の空間浮遊映像３に対しユーザが任意の文字や図形を入力・描画できる機能（図１２）に関する詳しい実施例を示す。例えば、図２７、２８に示すフローチャートを用いて説明した一連の手続きによって、ユーザがキオスク端末から紙ベースのチケットまたは電子チケットを受け取った場合に、ユーザが、チケットを受け取ったことをユーザが認めるための「サイン」（署名）を行う。
図３０は、一実施例（実施の形態５とする）として、前述の空間浮遊映像３に対しユーザが任意の文字や図形を入力・描画できる機能（図１２）に関する詳しい実施例を示す。例えば、図２７、２８に示すフローチャートを用いて説明した一連の手続きによって、ユーザがキオスク端末から紙ベースのチケットまたは電子チケットを受け取った場合に、ユーザが、チケットを受け取ったことをユーザが認めるための「サイン」（署名）を行う。
【0260】
図３０のキオスク端末２０００は、図２１や図２３のキオスク端末の構成をベースとした例で、空間浮遊映像表示部２０２０のみを図示している。図３０の（Ａ）は、空間浮遊映像表示部２０２０に、多視点映像である空間浮遊映像３としてコンシェルジュ２０２１が表示された状態を示す。（Ｂ）は、空間浮遊映像３としてサイン入力のためのユーザインタフェースが表示された状態を示す。（Ｃ）は、そのユーザインタフェース内にユーザによりサインが入力され描画された状態を示す。（Ｄ）は、空間浮遊映像３としてサイン入力の終了に応じたコンシェルジュ２０２１が表示された状態を示す。
【0261】
キオスク端末がチケットを発行してユーザがそのチケットを受け取った後、キオスク端末は、図３０の（Ａ）に示すように、空間浮遊映像表示部２０２０に、空間浮遊映像３としてのコンシェルジュ２０２１を表示する。コンシェルジュ２０２１は、ユーザに対し、例えば「お客様がチケットをお受け取りになったことを確認するため、最後に、サインをお願い致します」といったメッセージの映像および音声を出力する。これにより、ユーザに対し、空間浮遊映像３に対するサイン（言い換えると受領サイン）を行うことを促す。
【0262】
次に、キオスク端末は、コンシェルジュ２０２１の姿の表示を消し、図３０の（Ｂ）に示すように、空間浮遊映像表示部２０２０に、空間浮遊映像３としてのサイン用画面２０２２（言い換えるとサイン入力のユーザインタフェース）を表示する。
【0263】
図３０の（Ｂ）の例では、サイン用画面２０２２上に空間浮遊映像３として描かれた文字として「チケット受領サインをお願い致します」といった文言が表示される。その文言の下には、サインをする領域を示す枠線（サイン枠線領域）２０２３が表示される。枠線２０２１は、例えば所定の背景色（例えば黒）をベースに、４辺の枠線が所定の色（例えば緑色）で表示される。枠線２０２１内に指先が差し込まれていない時には、枠線２０２１はその所定の色（例えば緑色）で表示される。
【0264】
次に、図３０の（Ｃ）に示すように、ユーザは、自身の手指ＵＨの指先、もしくは所定の導電性のペンを用いて、枠線２０２３内に、サインとして、自分の名前、本例では筆記体で“Ｔоｍ”、を描くように操作を行う。この際、キオスク端末は、前述（図１２）と同様に、センシング技術を用いて、空間浮遊映像３の面での空中操作を検出し、検出した指先の接点位置などに合わせて、空間浮遊映像３の面内（枠線２０２３内）に、リアルタイムで線分を描画する。線分２０２４は、入力・描画されたサイン（“Ｔоｍ”）に相当する一筆書きの線である。線分２０２４は、所定の色で表示される。
【0265】
ユーザは、自分の名前をサインとして描き終えると、指先を空間浮遊映像３のサイン枠線領域２０２３から手前に離す。キオスク端末は、指先が離された後、所定の時間（例えば５秒）が経過したことを判断・検出すると、ユーザによるサインの入力が完了したとみなす。そして、キオスク端末は、図３０の（Ｄ）のように、サイン入力終了を表す画面２０２５に遷移させる。この画面２０２５では、例えばコンシェルジュ２０２１の姿と共に、「サインを頂き、ありがとうございました」といった文言が表示および音声出力される。以上で、ユーザがチケットを受け取ったことをユーザ自身が認めるための「サイン」を行う一連の操作が終了する。
【0266】
なお、図３０の（Ｃ）に示した、ユーザが自身の指先などを用いて空間浮遊映像３としての枠線２０２３内に自分の名前をサインとして記入する技術は、前述の図１２で説明した技術を同様に適用できる。また、図１２の説明では、ユーザが自身の指先を空間浮遊映像３の面上の任意の位置に対し奥に差し込んだ時に、空間浮遊映像３全体の枠が例えば赤色に変化する例を記載した。これに対し、図３０の（Ｃ）の例では、空間浮遊映像３全体の枠ではなく、空間浮遊映像３内の一部の領域（サイン枠線領域２０２３）のみを、サインを入力し描画するための領域とする。そして、キオスク端末は、その領域内に指先が差し込まれた（言い換えると接触した）ことを検出した時に、その領域の枠線２０２３を、例えば赤色に変化させてもよい。
【0267】
また、ユーザが自身の指先を空間浮遊映像３の面上の任意の位置に差し込んだ時、すなわち接触有りの状態の時に、枠線２０２３は、赤色に限らず、別の所定の色、例えば青色に表示されてもよい。また、接触有りの状態の時に、枠線２０２３を点滅させるようにしてもよい。さらに、接触有りの状態の時に、枠線２０２３内の背景領域を、白色に変化させ、その背景領域に書き込まれた線分の色を、別の所定の色、例えば黒色としてもよい。また、枠線２０２３内の背景領域を黒色とし、その背景領域に書き込まれた線分の色を白色としてもよい。すなわち、サイン枠線領域２０２３において、ユーザの指先の動きに従って描かれた文字や図形の線分が、ユーザにとって認識しやすいように、キオスク端末は、サイン枠線領域２０２３での表示を制御する。キオスク端末は、サイン枠線領域２０２３に対する指先の接触有無などの状態に応じて、サイン枠線領域２０２３での表示の態様を変えるように制御する。
【0268】
従来の空間浮遊映像表示装置は、空間浮遊映像による操作メニューにおいてユーザが選択肢のボタンから選択する操作を行うことが主である。それに対し、実施の形態５では、空間浮遊映像３に対し、ユーザが手指を動かして任意の文字などをサインとして入力できる機能（空中サイン機能）が提供される。また、この機能では、空間浮遊映像３の面に指先が接触しているか否かに応じて枠線２０２３などの表示が変化するので、ユーザは、自分が空間浮遊映像３の面に指先が接触しているか否かの状態がわかりやすく、サインが入力しやすい。上記例では、空間浮遊映像３に対する入力を、サインに利用する例を示したが、これに限らず、他のアプリケーションにも利用できる。
【0269】
＜映像表示装置の第１構成例＞
次に、図３２～図３４以降を用いて、空間浮遊映像情報表示システム１の詳細構成例を説明する。図３２は、空間浮遊映像情報表示システム１を構成する映像表示装置１０についてのより具体的な構成の一例を示す。図３２の光源装置１３は、例えばプラスチックなどのケース内に、ＬＥＤ、コリメータ、偏光変換素子、合成拡散ブロック、導光体などを収納して構成されている。その光源装置１３の上面には、液晶表示パネル１１が取り付けられている。また、光源装置１３のケースの１つの側面には、半導体光源であるＬＥＤ素子１０２Ａや、ＬＥＤ素子の制御回路を実装したＬＥＤ基板１０２が取り付けられている。それと共に、ＬＥＤ基板１０２の外側面には、ＬＥＤ素子１０２Ａおよび制御回路で発生する熱を冷却するための部材であるヒートシンク（図示せず）が取り付けられる。
次に、図３２～図３４以降を用いて、空間浮遊映像情報表示システム１の詳細構成例を説明する。図３２は、空間浮遊映像情報表示システム１を構成する映像表示装置１０についてのより具体的な構成の一例を示す。図３２の光源装置１３は、例えばプラスチックなどのケース内に、ＬＥＤ、コリメータ、偏光変換素子、合成拡散ブロック、導光体などを収納して構成されている。その光源装置１３の上面には、液晶表示パネル１１が取り付けられている。また、光源装置１３のケースの１つの側面には、半導体光源であるＬＥＤ素子１０２Ａや、ＬＥＤ素子の制御回路を実装したＬＥＤ基板１０２が取り付けられている。それと共に、ＬＥＤ基板１０２の外側面には、ＬＥＤ素子１０２Ａおよび制御回路で発生する熱を冷却するための部材であるヒートシンク（図示せず）が取り付けられる。
【0270】
また、ケースの上面に取り付けられた液晶表示パネルフレームには、当該フレームに取り付けられた液晶表示パネル１１と、さらに、液晶表示パネル１１に電気的に接続されたフレキシブル配線基板（Flexible Printed Circuit:ＦＰＣ）などが取り付けられて構成されている。すなわち、液晶表示素子である液晶表示パネル１１は、固体光源であるＬＥＤ素子１０２Ａと共に、電子装置を構成する制御回路からの制御信号に基づいて、透過光の強度を変調することによって、表示映像を生成する。
【0271】
＜光源装置の第１構成例＞
続いて、上記映像表示装置の第１構成例における、ケース内に収納されている光源装置などの光学系の構成例について、図３２と共に、図３３を参照しながら、詳細に説明する。図３２で、光源を構成するＬＥＤ１０２Ａは、コリメータ１５に対し、所定の位置に取り付けられている。なお、図３２では、一断面を図示しているので、１つのＬＥＤ素子やコリメータしか見えていないが、ＬＥＤ基板１０２には複数のＬＥＤ素子が配列されており、それらに対応させて複数のコリメータが配列されている。コリメータ１５は、各々、例えばアクリルなどの透光性の樹脂により形成されている。コリメータ１５は、放物断面を回転して得られる円錐凸形状の外周面１５６を有すると共に、頂部（ＬＥＤ基板１０２に接する側）における中央部に、凸部（すなわち凸レンズ面）１５７が形成された凹部１５３を有する。
続いて、上記映像表示装置の第１構成例における、ケース内に収納されている光源装置などの光学系の構成例について、図３２と共に、図３３を参照しながら、詳細に説明する。図３２で、光源を構成するＬＥＤ１０２Ａは、コリメータ１５に対し、所定の位置に取り付けられている。なお、図３２では、一断面を図示しているので、１つのＬＥＤ素子やコリメータしか見えていないが、ＬＥＤ基板１０２には複数のＬＥＤ素子が配列されており、それらに対応させて複数のコリメータが配列されている。コリメータ１５は、各々、例えばアクリルなどの透光性の樹脂により形成されている。コリメータ１５は、放物断面を回転して得られる円錐凸形状の外周面１５６を有すると共に、頂部（ＬＥＤ基板１０２に接する側）における中央部に、凸部（すなわち凸レンズ面）１５７が形成された凹部１５３を有する。
【0272】
また、コリメータ１５の平面部（上記頂部とは逆の側）の中央部には、外側に突出した凸レンズ面（あるいは、内側に凹んだ凹レンズ面でもよい）１５４を有している。なお、コリメータ１５の円錐形状の外周面を形成する放物面１５６は、ＬＥＤ素子１０２Ａから周辺方向に出射する光を内部で全反射することが可能な角度の範囲内において設定され、あるいは、反射面が形成されている。
【0273】
また、ＬＥＤ素子１０２Ａ（図３３の（Ａ）ではＬＥＤ素子１４ａ，１４ｂ）は、ＬＥＤ基板１０２の表面上の所定の位置にそれぞれ配置されている。このＬＥＤ基板１０２は、コリメータ１５に対し、表面上のＬＥＤ素子１０２Ａが、それぞれ、凹部１５３の中央部に位置するように配置されて固定されている。
【0274】
かかる構成によれば、上述したコリメータ１５によって、ＬＥＤ１０２Ａから放射される光のうち、特に、中央部分から上方（図面での右方向）に向かって放射される光は、コリメータ１５の外形を形成する２つの凸レンズ面１５７，１５４により集光されて略平行光となる。また、その他の部分から周辺方向に向かって出射される光は、コリメータ１５の円錐形状の外周面を形成する放物面によって反射され、同様に、集光されて、略平行光となる。換言すれば、中央部に凸レンズを構成すると共に周辺部に放物面を形成したコリメータ１５によれば、ＬＥＤ素子１０２Ａにより発生された光のほぼすべてを平行光として取り出すことが可能となる。これにより、発生した光の利用効率を向上可能となる。
【0275】
なお、コリメータ１５の光の出射側には、偏光変換素子２１（言い換えると偏光変換部材）が設けられている。偏光変換素子２１は、入射された光の偏光特性を変換する素子である。偏光変換素子２１は、図３３の（Ａ）に示すように、断面が平行四辺形である柱状（平行四辺形柱）の透光性部材と、断面が三角形である柱状（三角形柱）の透光性部材とを組み合わせ、コリメータ１５からの平行光の光軸に対して直交する面に平行に、複数、アレイ状に配列して構成されている。さらに、これらアレイ状に配列された隣接する透光性部材間の界面には、交互に、偏光ビームスプリッタ（ＰＢＳ膜）２１１と反射膜２１２とが設けられている。また、偏光変換素子２１へ入射してＰＢＳ膜２１１を透過した光が出射する出射面には、λ/２位相板２１３（言い換えると半波長板）が備えられている。
【0276】
偏光変換素子２１の出射面には、さらに、図３３の（Ａ）にも示すように、矩形状の合成拡散ブロック１６が設けられている。ＬＥＤ素子１０２Ａから出射された光は、コリメータ１５の働きにより平行光となって、偏光変換素子２１を通じて偏光特性が変換された後、合成拡散ブロック１６へ入射し、出射側のテクスチャー１６１により拡散された後、導光体１７に到る。
【0277】
導光体１７は、図３３の（Ｂ）に示すように、例えばアクリルなどの透光性の樹脂により断面が略三角形の棒状に形成された部材である。そして、導光体１７は、図３２にも示すように、合成拡散ブロック１６の出射面に対し、第１の拡散板１８ａを介して対向する入射面を含んだ導光体光入射部１７１と、斜面を形成する反射面を含んだ導光体光反射部１７２と、第２の拡散板１８ｂを介して液晶表示パネル１１と対向する出射面を含んだ導光体光出射部１７３とを備えている。
【0278】
導光体１７の導光体光反射部１７２には、図３３の（Ｂ）にも示すように、多数の反射面１７２ａと連接面１７２ｂとが交互に鋸歯状に形成されている。そして、反射面１７２ａ（図面では右上がりの線分）は、水平面に対して、角度として、αｎ（ｎは自然数であり本例では１～１３０である）を形成している。一例として、ここでは、αｎを４３度以下（ただし０度以上）に設定している。
【0279】
導光体入射部１７１は、光源側に傾斜した湾曲の凸形状に形成されている。これによれば、合成拡散ブロック１６の出射面からの平行光は、第１の拡散板１８ａを介して拡散されて入射する。この入射光は、図面からも明らかなように、導光体入射部１７１により上方に僅かに屈曲、偏向しながら、導光体光反射部１７２に達してここで反射される。この反射光は、図面での上方の導光体出射部１７３の出射面から出射して、当該出射面に対し設けられた液晶表示パネル１１に到る。
【0280】
以上の映像表示装置１０によれば、光利用効率や均一な照明特性をより向上するとともに、モジュール化されたＳ偏波の光源装置１３を含め、小型かつ低コストで製造可能となる。なお、上記説明では、偏光変換素子２１をコリメータ１５の後に取り付けるものとしたが、これに限定されず、偏光変換素子２１は液晶表示パネル１１に到る光路中に設けられればよい。
【0281】
なお、導光体光反射部１７２には、多数の反射面１７２ａと連接面１７２ｂとが交互に鋸歯状に形成されており、照明光束は、各々の反射面１７２ａ上で全反射されて上方に向かう。さらに、導光体光出射部１７３には挟角拡散板を設けて、略平行な拡散光束として指向特性を調整する光方向変換パネル５４に入射し、斜め方向から液晶表示パネル１１へ入射する。本実施例では、光方向変換パネル５４を導光体１７の出射面と液晶表示パネル１１との間に設けたが、光方向変換パネル５４を液晶表示パネル１１の出射面に設けても同様の効果が得られる。
【0282】
＜映像表示装置の第２構成例＞
続いて、図３４を用いて、映像表示装置１０の具体的な構成の他の例を説明する。図３４の映像表示装置１０の光源装置は、前述の例と同様に、ＬＥＤ基板１０２に、光源を構成する複数のＬＥＤ素子が設けられている（ただし断面図であるため１個のみ図示されている）。これらのＬＥＤ素子はコリメータ１５に対し所定の位置に取り付けられている。ＬＥＤ素子からの光（Ｐ偏光とＳ偏光が混在する光）の発散光束を、コリメータ１５により略平行光束に変換し、反射型導光体３０４の反射面により、液晶表示パネル１１に向けて反射する。反射光は、液晶表示パネル１１と反射型導光体３０４との間に配置された反射型偏光板４９に入射する。
続いて、図３４を用いて、映像表示装置１０の具体的な構成の他の例を説明する。図３４の映像表示装置１０の光源装置は、前述の例と同様に、ＬＥＤ基板１０２に、光源を構成する複数のＬＥＤ素子が設けられている（ただし断面図であるため１個のみ図示されている）。これらのＬＥＤ素子はコリメータ１５に対し所定の位置に取り付けられている。ＬＥＤ素子からの光（Ｐ偏光とＳ偏光が混在する光）の発散光束を、コリメータ１５により略平行光束に変換し、反射型導光体３０４の反射面により、液晶表示パネル１１に向けて反射する。反射光は、液晶表示パネル１１と反射型導光体３０４との間に配置された反射型偏光板４９に入射する。
【0283】
反射型偏光板４９では、特定の偏波（例えばＰ偏光）を透過して、液晶表示パネル１１に入射する。反射型偏光板４９では、他方の偏波（例えばＳ偏光）は反射され、再び反射型導光体３０４へ向かう。反射型偏光板４９は、反射型導光体３０４の反射面からの光の主光線に対して垂直とならないように傾きを持って設置されており、反射型偏光板４９で反射された光の主光線は、反射型導光体３０４の透過面に入射する。
【0284】
反射型導光体３０４の透過面に入射した光は、反射型導光体３０４の背面を透過し、位相差板であるλ/４板２７０を透過し、反射板２７１で反射される。反射板２７１で反射された光は、再びλ/４板２７０を透過し、反射型導光体３０４の透過面を透過する。反射型導光体３０４の透過面を透過した光は、再び反射型偏光板４９に入射する。
【0285】
この時、反射型偏光板４９に再度入射する光は、λ/４板２７０を２回通過しているため、反射型偏光板４９を透過する偏波（例えばＰ偏光）へ偏光変換されている。よって、偏光変換されている光は、反射型偏光板４９を透過し、液晶表示パネル１１に入射する。なお、偏光変換に係る偏光設計について、上述の説明から、Ｓ偏光とＰ偏光との偏波を逆にする構成としても構わない。
【0286】
この結果、光源であるＬＥＤ素子からの光は、特定の偏波（例えばＰ偏光）に揃えられて、液晶表示パネル１１に入射し、映像信号に合わせて輝度変調されて、パネル面に映像を表示する。
【0287】
図３４でのコリメータ１５は、各々例えばアクリルなどの透光性の樹脂またはガラスにより形成されている。図３４でのコリメータ１５は、図３２でのコリメータ１５と同様に、放物断面を回転して得られる円錐凸形状の外周面を有してもよく、頂部では、中央部に凸部（すなわち凸レンズ面）を形成した凹部を有してもよい。また、コリメータ１５の「平面部の中央部には、外側に突出した凸レンズ面（あるいは、内側に凹んだ凹レンズ面でもよい）を有してもよい。コリメータ１５の円錐形状の外周面を形成する放物面は、ＬＥＤから周辺方向に出射する光を内部で全反射可能な角度の範囲内において設定され、あるいは、反射面が形成されている。
【0288】
図３４でのＬＥＤ素子は、ＬＥＤ基板１０２の表面上の所定の位置にそれぞれ配置されている。ＬＥＤ基板１０２の表面上のＬＥＤは、それぞれ、コリメータ１５に対し、円錐凸形状の頂部の中央部（頂部に凹部が有る場合はその凹部）に位置するように配置されて固定されている。
【0289】
かかる構成によれば、コリメータ１５によって、ＬＥＤ素子から放射される光のうち、特に、中央部分から放射される光は、コリメータ１５の外形を形成する凸レンズ面により集光されて平行光となる。また、その他の部分から周辺方向に向かって出射される光は、コリメータ１５の円錐形状の外周面を形成する放物面によって反射され、同様に、集光されて平行光となる。換言すれば、中央部に凸レンズを構成すると共に、周辺部に放物面を形成したコリメータ１５によれば、ＬＥＤ素子により発生された光のほぼすべてを平行光として取り出すことが可能となり、発生した光の利用効率を向上可能となる。
【0290】
【0291】
さらに、図３２に示したコリメータ１５により略平行光に変換された光は、反射型導光体３０４で反射される。この反射光のうち、反射型偏光板４９の作用により、特定の偏波の光は、反射型偏光板４９を透過し、反射型偏光板４９の作用により反射された他方の偏波の光は、再度導光体３０４を透過する。この光は、反射型導光体３０４に対し、液晶表示パネル１１とは逆の位置にある反射板２７１で反射される。この時、この光は、位相差板であるλ/４板２７０を２度通過することで偏光変換される。
【0292】
反射板２７１で反射した光は、再び導光体３０４を透過して、反対面に設けられた反射型偏光板４９に入射する。この入射光は、偏光変換がなされているので、反射型偏光板４９を透過して、偏光方向を揃えて、液晶表示パネル１１に入射される。この結果、光源の光をすべて利用できるので、光の幾何光学的な利用効率が２倍になる。また、反射型偏光板の偏光度（言い換えると消光比）もシステム全体の消光比に乗せられるので、本実施例の光源装置１３を用いることで、表示装置全体としてのコントラスト比が大幅に向上する。
【0293】
なお、反射型導光体３０４の反射面の面粗さおよび反射板２７１の面粗さを調整することで、それぞれの反射面での光の反射拡散角を調整できる。液晶表示パネル１１に入射する光の均一性がより好適になるように、設計ごとに、反射型導光体３０４の反射面の面粗さおよび反射板２７１の面粗さを調整すればよい。
【0294】
＜自動販売機に係る実施の形態＞
次に、図３５を用いて、本発明の他の実施の形態として、空間浮遊映像情報表示システムを、自動販売機に適用した例について説明する。図３５は、例えば、ドリンク類の自動販売機に本発明を適用した場合を示す図である。
次に、図３５を用いて、本発明の他の実施の形態として、空間浮遊映像情報表示システムを、自動販売機に適用した例について説明する。図３５は、例えば、ドリンク類の自動販売機に本発明を適用した場合を示す図である。
【0295】
図３５において、自動販売機本体２９００には、空間浮遊映像表示部２９２０が備えられている。この空間浮遊映像表示部２９２０も、図示はしないが、図１３や図１４に示した内部構成を備えており、空間浮遊映像は、映像表示装置１０とレンチキュラーレンズ１１０３による多視点映像に基づき生成される。また、この自動販売機２９００には、自動販売機２９００により販売されているドリンク類を表示するドリンク類ディスプレイ部２９８０、お札を投入するためのお札投入部２９８１、コインを投入するためのコイン投入部２９８２、つり銭を取り出すためのつり銭取り出し口２９８３、利用者によって購入されたドリンクを取り出すためのドリンク取り出し口２９８４が備えられている。
【0296】
自動販売機本体２９００には、キオスク端末同様、カメラまたは人感センサ―が備えられており、利用者が近づくと、空間浮遊映像表示部２９２０が起動する。次に、図３５に示すように、空間浮遊映像表示部２９２０には、コンシェルジュ２９２１が表れて、利用者に対して、例えば、「いらっしゃいませ。ご利用ありがとうございます。画面が数字ボタンに変わります。ご希望の商品番号をお選びください。」という音声を発する。その後、空間浮遊映像表示部２９２０は、コンシェルジュ２９２１の姿が消え、続いて、数字ボタン２９２２と決定ボタン２９２３が表示される。この時、図示はしないが、数字ボタン２９２２と決定ボタン２９２３に加えて、取り消しボタンや、戻るボタンが表示されてもよい。
【0297】
上記の通り、図３５に示す空間浮遊映像表示部２９２０に表示されるコンシェルジュ２９２１の映像は、運動視差を伴う多視点映像に基づく空間浮遊映像である。これにより、利用者は、コンシェルジュ２９２１の映像を立体像として視認することができる。さらに、利用者が自動販売機本体２９００の周辺を移動した場合には、利用者は、コンシェルジュ２９２１が、利用者の移動に伴い、常に利用者の方に視線を向けて話しかけるように見える。そのため、利用者は、コンシェルジュ２９２１の映像を、あたかも、実際の人物がそこに存在し、しかも、自分一人に向かって話しかけてくれているような感覚を得ることができる、という新たな効果をもたらす。
【0298】
利用者が、空間浮遊映像表示部２９２０に表示された数字ボタン２９２２と決定ボタン２９２３を操作することによりドリンクを選択し、所定の金額を、お札投入部２９８１やコイン投入部２９８２に投入することで、当該ドリンクがドリンク取り出し口２９８４から取り出すことができる形で供出される。その後、空間浮遊映像表示部２９２０には、数字ボタンと決定ボタンが消えて、再び、コンシェルジュ２９２１が表れ、例えば、「ありがとうございました。またのご利用をお持ちいたしております。」という音声を発する。この場合でも、キオスク端末同様、音声は、通常のスピーカから発せられてもよいし、超指向性スピーカにより、利用者だけが聞こえるように発せられてもよい。
【0299】
上記の一連の操作により、利用者は所望のドリンクを購入することができる。なお、図３５の例では、空間浮遊映像表示部だけの例を示したが、自動販売機においても、キオスク端末の例と同様に、液晶表示装置と空間浮遊映像表示部の両方が備えられていてもよいし、また、空間浮遊映像表示部が1か所ではなく、２か所以上に備えられてもよい。なお、空間浮遊映像表示部が２か所に備えられている場合には、そのうちのいずれか１つの空間浮遊映像表示部には、運動視差を伴う多視点映像としてコンシェルジュが表示され、他の空間浮遊映像表示部には、数字ボタンと決定ボタンが表示されるように構成してもよい。
【0300】
また、コンシェルジュ２９２１として、複数の、年齢や性別の異なる、別の人物像やアニメーションによるキャラクターを表示するようにしてもよい。上記複数の、年齢や性別の異なる、別の人物像やアニメーションによるキャラクターを表示するためのデータは、図２の不揮発性メモリ１１０８に格納されており、適宜、それら複数の人物像やアニメーションによるキャラクターのうちの１つが選択されて、コンシェルジュ２９２１として、空間浮遊映像表示部に表示されるようにしてもよい。その場合、利用者の属性（年齢など）に応じて、いずれの人物像またはキャラクターを表示するかを決定するようにしてもよい。
【0301】
以上、記載したように、本実施の形態でも、キオスク端末の場合と同様に、運動視差を伴う多視点画像（または映像）に基づく空間浮遊映像表示部を備えているので、利用者は非接触で商品を選択して購入することができる。また、利用者が自動販売機に近づくことを検知して、空間浮遊映像が自動的に表示され、さらに、空間浮遊映像表示部には、運動視差を伴う多視点画像（または映像）表示に基づく、立体像として認識されるコンシェルジュ２９２１としての人物像やキャラクターを表示することができる。その結果、通常の自動販売機に比べて、利用者は、コンシェルジュ２９２１の映像を、あたかも、実際の人物がそこに存在し、しかも、自分がどの位置に移動しても、常に自分に向かって話しかけてくれているような感覚を得ることができる、という効果を得ることができる。従って、上記のようなコンシェルジュ２９２１の表示に関わるもの珍しさから、利用者をより引き付けることができ、自動販売機による商品の売り上げ向上にも資することが期待できる。
【0302】
以上、本発明を実施の形態に基づいて具体的に説明したが、本発明は前述の実施の形態に限定されず、要旨を逸脱しない範囲で種々変更可能である。各実施の形態は、必須構成要素を除き、構成要素の追加・削除・置換などが可能である。特に限定しない場合、各構成要素は、単数でも複数でもよい。各実施の形態を組み合わせた形態も可能である。
【0303】
実施の形態に係る技術では、空間浮遊映像を高解像度かつ高輝度な映像情報を空間浮遊した状態で表示することにより、例えば、ユーザは感染症の接触感染に対する不安を感じることなく操作を可能にする。不特定多数のユーザが使用するシステムに本実施例に係る技術を用いれば、感染症の接触感染のリスクを低減し、不安を感じることなく使用できる非接触ユーザインタフェースを提供可能にする。このような技術を提供する本発明によれば、国連の提唱する持続可能な開発目標（ＳＤＧｓ:Sustainable Development Goals）の「３すべての人に健康と福祉を」に貢献する。
【0304】
また、実施の形態に係る技術では、出射する映像光の発散角を小さくし、さらに特定の偏波に揃えることで、再帰反射部材に対して正規の反射光だけを効率良く反射させるため、光の利用効率が高く、明るく鮮明な空間浮遊映像を得ることが可能になる。実施の形態に係る技術によれば、消費電力を大幅に低減可能な、利用性に優れた非接触ユーザインタフェースを提供できる。このような技術を提供する本発明によれば、国連の提唱する持続可能な開発目標（ＳＤＧｓ:Sustainable Development Goals）の「９産業と技術革新の基盤をつくろう」および「１１住み続けられるまちづくりを」に貢献する。
【0305】
さらに、実施の形態に係る技術では、指向性（直進性）の高い映像光による空間浮遊映像の形成を可能にする。本実施例に係る技術では、いわゆるキオスク端末のような高いセキュリティが求められる映像や、ユーザに正対する人物には秘匿したい秘匿性の高い映像を表示する場合でも、指向性の高い映像光を表示することで、ユーザ以外に空間浮遊映像を覗き込まれる危険性が少ない非接触ユーザインタフェースを提供可能にする。本発明は、以上のような技術を提供することにより、国連の提唱する持続可能な開発目標（ＳＤＧｓ:Sustainable Development Goals）の「１１住み続けられるまちづくりを」に貢献する。
【符号の説明】
【0306】
１…空間浮遊映像情報表示システム、２…再帰反射部材、３…空間浮遊映像、１０…映像表示装置、１１…液晶表示パネル、１３…光源装置、３３０…再帰反射板、１１０３…レンチキュラーレンズ、１４００、１５００、１６００、１７００…キオスク端末、１５１０…液晶表示画面、１５２０、１６２０、１７２０…空間浮遊映像表示部、１５２１、１６２１、１７２１、２９２１…コンシェルジュ、１５２２、１６２２、１７２２…操作メニュー、１５３０…取り出し口、１５４１，１５４２…カメラ、１５５０…筐体、１５５１，１５５２…超指向性スピーカ、１５６０…人感センサ、１５７０…斜面、２９２２…数字ボタン、２９２３…決定ボタン。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図29】
【図30】
【図31】
【図32】
【図33】
【図34】
【図35】