ホーム > 特許ランキング > 富士フイルム株式会社
知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023143438
(43)【公開日】2023-10-06
(54)【発明の名称】制御装置、制御方法、及び制御プログラム
(51)【国際特許分類】
G09G 5/00 20060101AFI20230928BHJP
G09G 5/10 20060101ALI20230928BHJP
A61B 3/11 20060101ALI20230928BHJP
H04N 5/74 20060101ALI20230928BHJP
H04N 5/64 20060101ALI20230928BHJP
【ＦＩ】
G09G5/00 550C
G09G5/00 510B
G09G5/10 B
A61B3/11
H04N5/74 Z
H04N5/64 511A
【審査請求】未請求
【請求項の数】18
【出願形態】ＯＬ
(21)【出願番号】P 2022050809
(22)【出願日】2022-03-25
(71)【出願人】
【識別番号】306037311
【氏名又は名称】富士フイルム株式会社
(74)【代理人】
【識別番号】110001519
【氏名又は名称】弁理士法人太陽国際特許事務所
(72)【発明者】
【氏名】藤原 慎也
【テーマコード（参考）】
4C316
5C058
5C182
【Ｆターム（参考）】
4C316AA28
4C316AB16
4C316FA01
4C316FC28
4C316FZ01
5C058AA18
5C058BA05
5C058BA35
5C058EA54
5C182AA02
5C182AA03
5C182AA04
5C182AA31
5C182AB35
5C182AC46
5C182BA03
5C182BA06
5C182BA14
5C182BA57
5C182BB01
5C182BB11
5C182BB21
5C182CA01
5C182CA21
5C182DA02
5C182DA04
5C182DA14
(57)【要約】
【課題】投影画像の視認性を良好に保ち、かつユーザの眼にかかる負担を軽減することができる制御装置、制御方法、及び制御プログラムを提供する。
【解決手段】ユーザの眼に現実像を提供する透過部と、前記透過部に前記ユーザの眼により視認が可能な状態に投影画像を投影する投影部と、を備えた眼鏡型表示装置に対して、投影画像の投影を制御するプロセッサを備えた制御装置であって、前記プロセッサが、前記ユーザの眼の瞳孔の大きさについて、前記投影部が前記投影画像を第１の明るさで投影している場合の前記瞳孔の第１の大きさを取得し、前記投影部が前記投影画像を前記第１の明るさよりも明るい、第２の明るさで投影している場合の前記瞳孔の第２の大きさを取得し、前記第１の大きさと前記第２の大きさとの比較結果に応じて、前記透過部に投影する前記投影画像の明るさを制御する制御装置。
【選択図】図８
【解決手段】ユーザの眼に現実像を提供する透過部と、前記透過部に前記ユーザの眼により視認が可能な状態に投影画像を投影する投影部と、を備えた眼鏡型表示装置に対して、投影画像の投影を制御するプロセッサを備えた制御装置であって、前記プロセッサが、前記ユーザの眼の瞳孔の大きさについて、前記投影部が前記投影画像を第１の明るさで投影している場合の前記瞳孔の第１の大きさを取得し、前記投影部が前記投影画像を前記第１の明るさよりも明るい、第２の明るさで投影している場合の前記瞳孔の第２の大きさを取得し、前記第１の大きさと前記第２の大きさとの比較結果に応じて、前記透過部に投影する前記投影画像の明るさを制御する制御装置。
【選択図】図８
【特許請求の範囲】
【請求項1】
ユーザの眼に現実像を提供する透過部と、前記透過部に前記ユーザの眼により視認が可能な状態に投影画像を投影する投影部と、を備えた眼鏡型表示装置に対して、投影画像の投影を制御するプロセッサを備えた制御装置であって、
前記プロセッサが、
前記ユーザの眼の瞳孔の大きさについて、前記投影部が前記投影画像を第１の明るさで投影している場合の前記瞳孔の第１の大きさを取得し、
前記投影部が前記投影画像を前記第１の明るさよりも明るい、第２の明るさで投影している場合の前記瞳孔の第２の大きさを取得し、
前記第１の大きさと前記第２の大きさとの比較結果に応じて、前記透過部に投影する前記投影画像の明るさを制御する
制御装置。
前記プロセッサが、
前記ユーザの眼の瞳孔の大きさについて、前記投影部が前記投影画像を第１の明るさで投影している場合の前記瞳孔の第１の大きさを取得し、
前記投影部が前記投影画像を前記第１の明るさよりも明るい、第２の明るさで投影している場合の前記瞳孔の第２の大きさを取得し、
前記第１の大きさと前記第２の大きさとの比較結果に応じて、前記透過部に投影する前記投影画像の明るさを制御する
制御装置。
【請求項2】
前記プロセッサは、
前記第１の大きさが前記第２の大きさよりも大きく、かつ前記第１の大きさと前記第２の大きさとの差が予め定められた閾値以下の場合、前記投影画像の明るさを維持する制御を行う
請求項１に記載の制御装置。
前記第１の大きさが前記第２の大きさよりも大きく、かつ前記第１の大きさと前記第２の大きさとの差が予め定められた閾値以下の場合、前記投影画像の明るさを維持する制御を行う
請求項１に記載の制御装置。
【請求項3】
前記プロセッサは、
前記第１の大きさが前記第２の大きさよりも大きく、かつ前記第１の大きさと前記第２の大きさとの差が予め定められた閾値よりも大きい場合、前記投影画像を暗くする制御を行う
請求項１に記載の制御装置。
前記第１の大きさが前記第２の大きさよりも大きく、かつ前記第１の大きさと前記第２の大きさとの差が予め定められた閾値よりも大きい場合、前記投影画像を暗くする制御を行う
請求項１に記載の制御装置。
【請求項4】
前記プロセッサは、
前記第１の大きさが前記第２の大きさと同じ場合、前記投影画像を明るくする制御を行う
請求項１から請求項３のいずれか１項に記載の制御装置。
前記第１の大きさが前記第２の大きさと同じ場合、前記投影画像を明るくする制御を行う
請求項１から請求項３のいずれか１項に記載の制御装置。
【請求項5】
前記プロセッサは、
前記第１の大きさが前記第２の大きさよりも小さい場合、前記投影画像を明るくする制御を行う
請求項１から請求項４のいずれか１項に記載の制御装置。
前記第１の大きさが前記第２の大きさよりも小さい場合、前記投影画像を明るくする制御を行う
請求項１から請求項４のいずれか１項に記載の制御装置。
【請求項6】
前記プロセッサは、
視認する像の明るさと視認する眼の瞳孔の大きさとの対応関係を表す基準対応関係情報に基づいて、
前記第１の大きさに対応する前記視認する像の明るさを、前記第２の大きさを取得するために投影する前記投影画像の明るさとして導出する
請求項１から請求項５のいずれか１項に記載の制御装置。
視認する像の明るさと視認する眼の瞳孔の大きさとの対応関係を表す基準対応関係情報に基づいて、
前記第１の大きさに対応する前記視認する像の明るさを、前記第２の大きさを取得するために投影する前記投影画像の明るさとして導出する
請求項１から請求項５のいずれか１項に記載の制御装置。
【請求項7】
前記プロセッサは、
前記基準対応関係情報として、明るさを異ならせて前記投影画像を投影することにより得られた、前記投影画像の明るさと、前記ユーザの瞳孔の大きさとの対応関係を表す情報を用いる
請求項６に記載の制御装置。
前記基準対応関係情報として、明るさを異ならせて前記投影画像を投影することにより得られた、前記投影画像の明るさと、前記ユーザの瞳孔の大きさとの対応関係を表す情報を用いる
請求項６に記載の制御装置。
【請求項8】
前記プロセッサは、
前記第１の大きさと前記第２の大きさとの比較結果に応じた制御後の前記投影画像の明るさを前記視認する像の明るさとし、前記第１の大きさを前記視認する眼の瞳孔の大きさとした制御後対応関係を表す値により、前記基準対応関係情報を更新する
請求項６または請求項７に記載の制御装置。
前記第１の大きさと前記第２の大きさとの比較結果に応じた制御後の前記投影画像の明るさを前記視認する像の明るさとし、前記第１の大きさを前記視認する眼の瞳孔の大きさとした制御後対応関係を表す値により、前記基準対応関係情報を更新する
請求項６または請求項７に記載の制御装置。
【請求項9】
前記プロセッサは、
更新タイミングが古い前記制御後対応関係を前記基準対応関係情報から順次除外することで、前記基準対応関係情報に含まれる前記制御後対応関係を表す値の数を予め定められた数以下に制御する
請求項８に記載の制御装置。
更新タイミングが古い前記制御後対応関係を前記基準対応関係情報から順次除外することで、前記基準対応関係情報に含まれる前記制御後対応関係を表す値の数を予め定められた数以下に制御する
請求項８に記載の制御装置。
【請求項10】
前記プロセッサは、
前記基準対応関係情報における前記視認する眼の瞳孔の大きさに応じて定められる所定の範囲毎に、前記基準対応関係情報に含まれる前記制御後対応関係を表す値の数を第１所定数以下に制御する
請求項８または請求項９に記載の制御装置。
前記基準対応関係情報における前記視認する眼の瞳孔の大きさに応じて定められる所定の範囲毎に、前記基準対応関係情報に含まれる前記制御後対応関係を表す値の数を第１所定数以下に制御する
請求項８または請求項９に記載の制御装置。
【請求項11】
前記プロセッサは、
前記基準対応関係情報における前記視認する像の明るさに応じて定められる所定の範囲毎に、前記基準対応関係情報に含まれる前記制御後対応関係を表す値の数を第２所定数以下に制御する
請求項８または請求項９に記載の制御装置。
前記基準対応関係情報における前記視認する像の明るさに応じて定められる所定の範囲毎に、前記基準対応関係情報に含まれる前記制御後対応関係を表す値の数を第２所定数以下に制御する
請求項８または請求項９に記載の制御装置。
【請求項12】
前記プロセッサは、
前記基準対応関係情報における前記視認する眼の瞳孔の大きさに応じて定められる所定の範囲毎、前記基準対応関係情報における前記視認する像の明るさに応じて定められる所定の範囲毎、または前記基準対応関係情報における前記視認する眼の瞳孔の大きさ及び前記視認する像の大きさに応じて定められる所定の範囲毎に、前記視認する像の明るさと前記視認する眼の瞳孔の大きさとの対応関係を表す値の代表値を決定し、
前記代表値により前記基準対応関係情報を導出する
請求項６または請求項７に記載の制御装置。
前記基準対応関係情報における前記視認する眼の瞳孔の大きさに応じて定められる所定の範囲毎、前記基準対応関係情報における前記視認する像の明るさに応じて定められる所定の範囲毎、または前記基準対応関係情報における前記視認する眼の瞳孔の大きさ及び前記視認する像の大きさに応じて定められる所定の範囲毎に、前記視認する像の明るさと前記視認する眼の瞳孔の大きさとの対応関係を表す値の代表値を決定し、
前記代表値により前記基準対応関係情報を導出する
請求項６または請求項７に記載の制御装置。
【請求項13】
前記プロセッサは、
前記第１の大きさと前記第２の大きさとの比較結果に応じた制御後の前記投影画像の明るさを前記視認する像の明るさとし、前記第１の大きさを前記視認する眼の瞳孔の大きさとした制御後対応関係を表す値により、前記代表値を更新する
請求項１２に記載の制御装置。
前記第１の大きさと前記第２の大きさとの比較結果に応じた制御後の前記投影画像の明るさを前記視認する像の明るさとし、前記第１の大きさを前記視認する眼の瞳孔の大きさとした制御後対応関係を表す値により、前記代表値を更新する
請求項１２に記載の制御装置。
【請求項14】
前記プロセッサは、
前記制御後対応関係を表す値に重み付けを行った、前記代表値を更新する
請求項１３に記載の制御装置。
前記制御後対応関係を表す値に重み付けを行った、前記代表値を更新する
請求項１３に記載の制御装置。
【請求項15】
ユーザの眼に現実像を提供する透過部と、前記透過部に前記ユーザの眼により視認が可能な状態に投影画像を投影する投影部と、を備えた眼鏡型表示装置に対して、投影画像の投影を制御するプロセッサを備えた制御装置の前記プロセッサによる制御方法であって、
前記ユーザの眼の瞳孔の大きさについて、前記投影部が前記投影画像を第１の明るさで投影している場合の前記瞳孔の第１の大きさを取得し、
前記投影部が前記投影画像を前記第１の明るさよりも明るい、第２の明るさで投影している場合の前記瞳孔の第２の大きさを取得し、
前記第１の大きさと前記第２の大きさとの比較結果に応じて、前記透過部に投影する前記投影画像の明るさを制御する
制御方法。
前記ユーザの眼の瞳孔の大きさについて、前記投影部が前記投影画像を第１の明るさで投影している場合の前記瞳孔の第１の大きさを取得し、
前記投影部が前記投影画像を前記第１の明るさよりも明るい、第２の明るさで投影している場合の前記瞳孔の第２の大きさを取得し、
前記第１の大きさと前記第２の大きさとの比較結果に応じて、前記透過部に投影する前記投影画像の明るさを制御する
制御方法。
【請求項16】
前記第１の大きさが前記第２の大きさよりも大きく、かつ前記第１の大きさと前記第２の大きさとの差が予め定められた閾値以下の場合、前記投影画像の明るさを維持する制御を行う
請求項１５に記載の制御方法。
請求項１５に記載の制御方法。
【請求項17】
ユーザの眼に現実像を提供する透過部と、前記透過部に前記ユーザの眼により視認が可能な状態に投影画像を投影する投影部と、を備えた眼鏡型表示装置に対して、投影画像の投影を制御するプロセッサを備えた制御装置の前記プロセッサが実行する制御プログラムであって、
前記ユーザの眼の瞳孔の大きさについて、前記投影部が前記投影画像を第１の明るさで投影している場合の前記瞳孔の第１の大きさを取得し、
前記投影部が前記投影画像を前記第１の明るさよりも明るい、第２の明るさで投影している場合の前記瞳孔の第２の大きさを取得し、
前記第１の大きさと前記第２の大きさとの比較結果に応じて、前記透過部に投影する前記投影画像の明るさを制御する
制御プログラム。
前記ユーザの眼の瞳孔の大きさについて、前記投影部が前記投影画像を第１の明るさで投影している場合の前記瞳孔の第１の大きさを取得し、
前記投影部が前記投影画像を前記第１の明るさよりも明るい、第２の明るさで投影している場合の前記瞳孔の第２の大きさを取得し、
前記第１の大きさと前記第２の大きさとの比較結果に応じて、前記透過部に投影する前記投影画像の明るさを制御する
制御プログラム。
【請求項18】
前記第１の大きさが前記第２の大きさよりも大きく、かつ前記第１の大きさと前記第２の大きさとの差が予め定められた閾値以下の場合、前記投影画像の明るさを維持する制御を行う
請求項１７に記載の制御プログラム。
請求項１７に記載の制御プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、制御装置、制御方法、及び制御プログラムに関する。
【背景技術】
【0002】
従来、立体的な映像を表示する表示装置として、現実の世界に、画像を重ね合わせた状態で表示する、拡張現実（ＡＲ：Augmented Reality）機器等の眼鏡型情報表示装置が知られている。
【0003】
眼鏡型情報表示装置として、ユーザの眼に現実像を提供する透過部と、透過部にユーザの眼によって視認が可能な状態に投影画像を投影する投影部とを備えた眼鏡型情報表示装置がある。眼鏡型情報表示装置を使用することにより、ユーザは、投影画像を視認することで眼に負担がかかり、眼が疲労状態になることがある。
【0004】
そこで、ユーザの眼の疲労状態を軽減するために、例えば、特許文献１に記載の技術がある。特許文献１には、ユーザの瞳孔の大きさを測定し、瞳孔の大きさからユーザの眼の疲労状態を推定する技術が記載されている。
【先行技術文献】
【特許文献】
【0005】
【特許文献1】特開２０１３－１１４１２３号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
特許文献１に記載の技術によれば、ユーザの眼の疲労状態を推定して、疲労状態に対応して投影画像の投影を制御することができるが、ユーザの眼にかかる負担そのものを軽減するには十分ではなかった。また、投影画像の視認性については考慮されておらず、投影画像の視認性が低下してしまう場合があった。
【0007】
本開示は、以上の事情を鑑みて成されたものであり、投影画像の視認性を良好に保ち、かつユーザの眼にかかる負担を軽減することができる制御装置、制御方法、及び制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【0008】
上記目的を達成するために、本開示の第１の態様の制御装置は、ユーザの眼に現実像を提供する透過部と、透過部にユーザの眼により視認が可能な状態に投影画像を投影する投影部と、を備えた眼鏡型表示装置に対して、投影画像の投影を制御するプロセッサを備えた制御装置であって、プロセッサが、ユーザの眼の瞳孔の大きさについて、投影部が投影画像を第１の明るさで投影している場合の瞳孔の第１の大きさを取得し、投影部が投影画像を第１の明るさよりも明るい、第２の明るさで投影している場合の瞳孔の第２の大きさを取得し、第１の大きさと第２の大きさとの比較結果に応じて、透過部に投影する投影画像の明るさを制御する制御装置。
【0009】
本開示の第２の態様の制御装置は、第１の態様の制御装置において、プロセッサは、第１の大きさが第２の大きさよりも大きく、かつ第１の大きさと第２の大きさとの差が予め定められた閾値以下の場合、投影画像の明るさを維持する制御を行う。
【0010】
本開示の第３の態様の制御装置は、第１の態様の制御装置において、プロセッサは、第１の大きさが第２の大きさよりも大きく、かつ第１の大きさと第２の大きさとの差が予め定められた閾値よりも大きい場合、投影画像を暗くする制御を行う。
【0011】
本開示の第４の態様の制御装置は、第１の態様から第３の態様のいずれか１態様の制御装置において、プロセッサは、第１の大きさが第２の大きさと同じ場合、投影画像を明るくする制御を行う。
【0012】
本開示の第５の態様の制御装置は、第１の態様から第４の態様のいずれか１態様の制御装置において、プロセッサは、第１の大きさが第２の大きさよりも小さい場合、投影画像を明るくする制御を行う。
【0013】
本開示の第６の態様の制御装置は、第１の態様から第５の態様のいずれか１態様の制御装置において、プロセッサは、視認する像の明るさと視認する眼の瞳孔の大きさとの対応関係を表す基準対応関係情報に基づいて、第１の大きさに対応する視認する像の明るさを、第２の大きさを取得するために投影する投影画像の明るさとして導出する。
【0014】
本開示の第７の態様の制御装置は、第６の態様の制御装置において、プロセッサは、基準対応関係情報として、明るさを異ならせて投影画像を投影することにより得られた、投影画像の明るさと、ユーザの瞳孔の大きさとの対応関係を表す情報を用いる。
【0015】
本開示の第８の態様の制御装置は、第６の態様または第７の態様の制御装置において、プロセッサは、第１の大きさと第２の大きさとの比較結果に応じた制御後の投影画像の明るさを視認する像の明るさとし、第１の大きさを視認する眼の瞳孔の大きさとした制御後対応関係を表す値により、基準対応関係情報を更新する。
【0016】
本開示の第９の態様の制御装置は、第８の態様の制御装置において、プロセッサは、更新タイミングが古い制御後対応関係を基準対応関係情報から順次除外することで、基準対応関係情報に含まれる制御後対応関係を表す値の数を予め定められた数以下に制御する。
【0017】
本開示の第１０の態様の制御装置は、第８の態様または第９の態様の制御装置において、プロセッサは、基準対応関係情報における視認する眼の瞳孔の大きさに応じて定められる所定の範囲毎に、基準対応関係情報に含まれる制御後対応関係を表す値の数を第１所定数以下に制御する。
【0018】
本開示の第１１の態様の制御装置は、第８の態様または第９の態様の制御装置において、プロセッサは、基準対応関係情報における視認する像の明るさに応じて定められる所定の範囲毎に、基準対応関係情報に含まれる制御後対応関係を表す値の数を第２所定数以下に制御する。
【0019】
本開示の第１２の態様の制御装置は、第６の態様または第７の態様の制御装置において、プロセッサは、基準対応関係情報における視認する眼の瞳孔の大きさに応じて定められる所定の範囲毎、基準対応関係情報における視認する像の明るさに応じて定められる所定の範囲毎、または基準対応関係情報における視認する眼の瞳孔の大きさ及び視認する像の大きさに応じて定められる所定の範囲毎に、視認する像の明るさと視認する眼の瞳孔の大きさとの対応関係を表す値の代表値を決定し、代表値により基準対応関係情報を導出する。
【0020】
本開示の第１３の態様の制御装置は、第１２の態様の制御装置において、プロセッサは、第１の大きさと第２の大きさとの比較結果に応じた制御後の投影画像の明るさを視認する像の明るさとし、第１の大きさを視認する眼の瞳孔の大きさとした制御後対応関係を表す値により、代表値を更新する。
【0021】
本開示の第１４の態様の制御装置は、第１３の態様の制御装置において、プロセッサは、制御後対応関係を表す値に重み付けを行った、代表値を更新する。
【0022】
上記目的を達成するために、本開示の第１５の態様の制御方法は、ユーザの眼に現実像を提供する透過部と、透過部にユーザの眼により視認が可能な状態に投影画像を投影する投影部と、を備えた眼鏡型表示装置に対して、投影画像の投影を制御するプロセッサを備えた制御装置のプロセッサによる制御方法であって、ユーザの眼の瞳孔の大きさについて、投影部が投影画像を第１の明るさで投影している場合の瞳孔の第１の大きさを取得し、投影部が投影画像を第１の明るさよりも明るい、第２の明るさで投影している場合の瞳孔の第２の大きさを取得し、第１の大きさと第２の大きさとの比較結果に応じて、透過部に投影する投影画像の明るさを制御する方法である。
【0023】
本開示の第１６の態様の制御方法は、第１５の態様の制御方法において、第１の大きさが第２の大きさよりも大きく、かつ第１の大きさと第２の大きさとの差が予め定められた閾値以下の場合、投影画像の明るさを維持する制御を行う。
【0024】
上記目的を達成するために、本開示の第１７の態様の制御プログラムは、ユーザの眼に現実像を提供する透過部と、透過部にユーザの眼により視認が可能な状態に投影画像を投影する投影部と、を備えた眼鏡型表示装置に対して、投影画像の投影を制御するプロセッサを備えた制御装置のプロセッサが実行する制御プログラムであって、ユーザの眼の瞳孔の大きさについて、投影部が投影画像を第１の明るさで投影している場合の瞳孔の第１の大きさを取得し、投影部が投影画像を第１の明るさよりも明るい、第２の明るさで投影している場合の瞳孔の第２の大きさを取得し、第１の大きさと第２の大きさとの比較結果に応じて、透過部に投影する投影画像の明るさを制御するためのものである。
【0025】
本開示の第１８の態様の制御プログラムは、第１７の態様の制御プログラムにおいて、第１の大きさが第２の大きさよりも大きく、かつ第１の大きさと第２の大きさとの差が予め定められた閾値以下の場合、投影画像の明るさを維持する制御を行うためのものである。
【発明の効果】
【0026】
本開示によれば、投影画像の視認性を良好に保ち、かつユーザの眼にかかる負担を軽減することができる。
【図面の簡単な説明】
【0027】
【図1】実施形態の眼鏡型情報表示装置の構成の一例を示す構成図である。
【図2】実施形態のＡＲグラスの一例を示す斜視図である。
【図3】瞳孔センサが検出する瞳孔の大きさについて説明するための図である。
【図4】第１実施形態のスマートフォンの構成の一例を示すブロック図である。
【図5】現実像に対する投影画像の明るさと、投影画像を視認する眼にかかる負担との関係を説明するための図である。
【図6A】現実像を視認する眼の瞳孔の大きさと、現実像に重畳された投影画像を視認する眼の瞳孔の大きさと、投影画像の明るさとの関係を説明するための図である。
【図6B】現実像を視認する眼の瞳孔の大きさと、現実像に重畳された投影画像を視認する眼の瞳孔の大きさと、投影画像の明るさとの関係を説明するための図である。
【図6C】現実像を視認する眼の瞳孔の大きさと、現実像に重畳された投影画像を視認する眼の瞳孔の大きさと、投影画像の明るさとの関係を説明するための図である。
【図6D】現実像を視認する眼の瞳孔の大きさと、現実像に重畳された投影画像を視認する眼の瞳孔の大きさと、投影画像の明るさとの関係を説明するための図である。
【図7】第１実施形態のスマートフォンのハードウェア構成の一例を示すブロック図である。
【図8】第１実施形態のスマートフォンで実行される投影制御処理の一例を示すフローチャートである。
【図9】第２実施形態のスマートフォンの構成の一例を示すブロック図である。
【図10】基準対応関係情報の一例を示す図である。
【図11】第２実施形態のスマートフォンのハードウェア構成の一例を示すブロック図である。
【図12】第２実施形態のスマートフォンで実行される投影制御処理の一例を示すフローチャートである。
【図13】制御後対応関係による基準対応関係情報の一例を示す図である。
【図14】変形例１のスマートフォンで実行される投影制御処理の一例を示すフローチャートである。
【図15】変形例２の基準対応関係情報の一例を示す図である。
【図16】変形例３の基準対応関係情報の一例を示す図である。
【図17】変形例４の基準対応関係情報の一例を示す図である。
【図18】変形例５における基準対応関係情報の導出の一例を説明するための図である。
【図19】第３実施形態のスマートフォンで実行される重み付け取得処理の一例を示すフローチャートである。
【発明を実施するための形態】
【0028】
以下、図面を参照して、本開示の技術を実施するための形態例を詳細に説明する。
【0029】
［第１実施形態］
図１を参照して、本実施形態の表示システム１の構成を説明する。図１に示すように、本実施形態の表示システム１は、ＡＲ（Augmented Reality）グラス１０及びスマートフォン１２を備える。本実施形態のＡＲグラス１０が、本開示の眼鏡型情報表示装置の一例であり、本実施形態のスマートフォン１２が、本開示の制御装置の一例である。
図１を参照して、本実施形態の表示システム１の構成を説明する。図１に示すように、本実施形態の表示システム１は、ＡＲ（Augmented Reality）グラス１０及びスマートフォン１２を備える。本実施形態のＡＲグラス１０が、本開示の眼鏡型情報表示装置の一例であり、本実施形態のスマートフォン１２が、本開示の制御装置の一例である。
【0030】
ＡＲグラス１０は、ＯＬＥＤ（Organic Light Emitting Diode）２６から投影された投影画像を現実像に重畳させた状態でユーザによる視認を可能にする装置である。図２には、本実施形態のＡＲグラス１０の一例の斜視図が示されている。図１及び図２に示すように、ＡＲグラス１０は、一対の左眼用透過部２０Ｌ及び右眼用透過部２０Ｒと、ＯＬＥＤ２６と、瞳孔センサ２７と、を備える。本実施形態の右眼用透過部２０Ｒが、本開示の透過部の一例である。また、本実施形態のＯＬＥＤ２６が本開示の投影部の一例である。
【0031】
ＯＬＥＤ２６は、右眼用透過部２０Ｒを通じてユーザの右眼によって視認される現実像に重畳した状態で投影画像が表示されるために、導光板２４に投影画像を投影する。
【0032】
右眼用透過部２０Ｒは、右眼用レンズ２２Ｒ及び導光板２４を含む。導光板２４の一端には、ＯＬＥＤ２６から投影された投影画像に応じた光が入射される。導光板２４の中を伝播した光は、出射部（図示省略）において向きを変えて、ユーザの眼の方向に出射される。導光板２４から出射された投影画像に応じた光は、右眼用レンズ２２Ｒを透過し、ユーザの右眼に導かれる。また、ユーザは、右眼用レンズ２２Ｒを通した現実の世界を現実像として右目で視認する。
【0033】
そのため、ＯＬＥＤ２６から投影画像が投影されている間は、ユーザの右眼によって視認される視認像は、右眼用レンズ２２Ｒを通した現実の世界を表す現実像と、導光板２４に投影された投影画像とが重畳された状態となる。また、ＯＬＥＤ２６から投影画像が投影されていない間は、ユーザによって視認される視認像は、右眼用レンズ２２Ｒ及び導光板２４を通した現実の世界を表す現実像となる。
【0034】
一方、左眼用透過部２０Ｌは、左眼用レンズ２２Ｌを含む。ユーザは、左眼用レンズ２２Ｌを通した現実の世界を左眼で視認する。
【0035】
瞳孔センサ２７は、ユーザの右眼の瞳孔の大きさを検出する機能を有するセンサである。図３に示すように、人間の眼には、いわゆる、黒目と呼ばれる瞳孔９２が存在する。瞳孔９２は、眼９０の中に入る光量を調節するために、大きさが変化（散大及び縮小）する。瞳孔センサ２７は、瞳孔９２の大きさとして瞳孔９２の直径Ｓを検出するセンサである。瞳孔センサ２７は、特に限定されず、一例として本実施形態の瞳孔センサ２７は、眼９０を撮影した撮影画像をスマートフォン１２に出力するカメラを採用している。なお、瞳孔センサ２７が、眼９０を撮影するタイミングは特に限定されず、例えば、後述する第１取得部５０及び第２取得部５２の各々が撮影画像を取得するタイミングとしてもよい。
【0036】
一方、スマートフォン１２は、プロセッサ４０を備える。本実施形態のプロセッサ４０は、ＯＬＥＤ２６から導光板２４に投影画像を投影させる制御を、ＯＬＥＤ２６に対して行う。
【0037】
図４には、スマートフォン１２における、投影画像の投影の制御に係わる機能に関する構成の一例を表したブロック図が示されている。図４に示すように、スマートフォン１２は、プロセッサ４０、メモリ４２、Ｉ／Ｆ（InterFace）部４３、記憶部４４、ディスプレイ４６、及び入力装置４８を備える。プロセッサ４０、メモリ４２、Ｉ／Ｆ部４３、記憶部４４、ディスプレイ４６、及び入力装置４８は、システムバスやコントロールバス等のバス４９を介して相互に各種情報の授受が可能に接続されている。
【0038】
プロセッサ４０は、記憶部４４に記憶された投影制御プログラム４５を含む各種のプログラムをメモリ４２へ読み出し、読み出したプログラムにしたがった処理を実行する。これにより、プロセッサ４０は、ＯＬＥＤ２６による投影画像の投影の制御を行う。メモリ４２は、プロセッサ４０が処理を実行するためのワークメモリである。
【0039】
記憶部４４には、投影制御プログラム４５、及びＯＬＥＤ２６から投影する投影画像の画像データ（図示省略）や、その他の各種情報等が記憶される。記憶部４４の具体例としては、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）等が挙げられる。
【0040】
Ｉ／Ｆ部４３は、無線通信または有線通信により、ＯＬＥＤ２６及び瞳孔センサ２７各々との間で各種情報の通信を行う。ディスプレイ４６及び入力装置４８はユーザインタフェースとして機能する。ディスプレイ４６は、ユーザに対して、投影画像の投影に関する各種の情報を提供する。ディスプレイ４６は特に限定されるものではなく、液晶モニタ及びＬＥＤ（Light Emitting Diode）モニタ等が挙げられる。また、入力装置４８は、投影画像の投影に関する各種の指示を入力するためにユーザによって操作される。入力装置４８は特に限定されるものではなく、例えば、キーボード、タッチペン、及びマウス等が挙げられる。なお、スマートフォン１２では、ディスプレイ４６と入力装置４８とを一体化したタッチパネルディスプレイを採用している。
【0041】
また、本実施形態のスマートフォン１２の機能について説明する。本実施形態のスマートフォン１２のプロセッサ４０は、投影画像の投影の制御として、ＯＬＥＤ２６に投影する投影画像の明るさを制御する機能を有する。具体的には、本実施形態のスマートフォン１２は、投影画像を視認するユーザの眼９０の瞳孔９２の大きさＳに基づいて、ＯＬＥＤ２６に投影する投影画像の明るさを制御する。
【0042】
ここで、投影画像の明るさと、投影画像を視認する眼９０の瞳孔９２の大きさ及び眼９０にかかる負担との関係について説明する。
一般に、明るすぎる場合、眼９０にかかる負担は大きいとされている。例えば、周囲の環境に対して投影画像が明るすぎると、眼９０にかかる負担が大きくなる。一方、投影画像は、明るい方が、視認し易くなり、視認性が高い。そのため、ＡＲグラス１０を使用する場合のように、ユーザが現実像を視認する場合と、現実像に重畳された投影画像を視認する場合とでは、現実像に対する投影画像の明るさと、投影画像を視認する眼９０にかかる負担との間には、図５に示す関係がある。図５に示すように、現実像に対して投影画像が非常に暗い場合、投影画像の視認性は悪くなるが、眼９０にかかる負担は小さい。一方、現実像に対して投影画像が非常に明るい場合、投影画像の視認性は良いものの、眼９０にかかる負担は大きくなる。このように、投影画像の視認性と投影画像を視認する眼９０にかかる負担とは、相反関係にある。
一般に、明るすぎる場合、眼９０にかかる負担は大きいとされている。例えば、周囲の環境に対して投影画像が明るすぎると、眼９０にかかる負担が大きくなる。一方、投影画像は、明るい方が、視認し易くなり、視認性が高い。そのため、ＡＲグラス１０を使用する場合のように、ユーザが現実像を視認する場合と、現実像に重畳された投影画像を視認する場合とでは、現実像に対する投影画像の明るさと、投影画像を視認する眼９０にかかる負担との間には、図５に示す関係がある。図５に示すように、現実像に対して投影画像が非常に暗い場合、投影画像の視認性は悪くなるが、眼９０にかかる負担は小さい。一方、現実像に対して投影画像が非常に明るい場合、投影画像の視認性は良いものの、眼９０にかかる負担は大きくなる。このように、投影画像の視認性と投影画像を視認する眼９０にかかる負担とは、相反関係にある。
【0043】
一方、上述したように、眼９０の瞳孔９２の大きさＳは、眼に入る光量に応じて伸縮する。一般的に、周囲が明るい場合、眼９０の中に入る光量を減少させるために瞳孔９２は小さくなり、周囲が暗い場合、眼９０の中に入る光量を増加させるために瞳孔９２は大きくなる。そこで、本実施形態のスマートフォン１２は、眼９０の瞳孔９２の大きさに応じて投影画像の明るさを制御する。
【0044】
図６Ａには、現実像６０を視認する眼９０の瞳孔９２の大きさＳ１に比べて、現実像６０に重畳された投影画像６２を視認する眼９０の瞳孔９２の大きさＳ２が大きい（Ｓ１＜Ｓ２）場合が示されている。図６Ａに示した場合では、投影画像６２が現実像６０に比べて比較的、暗く、投影画像６２の光量が少ないため、投影画像６２を視認する眼９０の瞳孔９２が散大している。この場合、眼９０にかかる負担は小さいものの、投影画像６２の視認性が悪い。従って、スマートフォン１２は、投影画像６２の明るさを明るくする制御を行う。
【0045】
また、図６Ｂには、現実像６０を視認する眼９０の瞳孔９２の大きさＳ１と、現実像６０に重畳された投影画像６２を視認する眼９０の瞳孔９２の大きさＳ２とが同じ（Ｓ１＝Ｓ２）場合が示されている。なお、ここで、「同じ」とは、許容される程度の誤差は無視している。投影画像６２が暗すぎる場合、例えば、図６Ａに示した場合よりも暗い場合、現実像６０の明るさに眼９０の瞳孔９２の大きさが依存しやすくなり、投影画像６２の明るさに対して反応しなくなることがある。そのため、図６Ｂに示した場合では、投影画像６２が現実像６０に比べて非常に暗いことが推定される。この場合、眼９０にかかる負担は小さいものの、投影画像６２の視認性が悪い。従って、スマートフォン１２は、投影画像６２の明るさを明るくする制御を行う。
【0046】
また、図６Ｃには、現実像６０を視認する眼９０の瞳孔９２の大きさＳ１に比べて、現実像６０に重畳された投影画像６２を視認する眼９０の瞳孔９２の大きさＳ２が小さく、かつ大きさＳ１と大きさＳ２との差が予め定められた閾値ｔｈよりも大きい（Ｓ１＞Ｓ２、Ｓ１－Ｓ２＞ｔｈ）場合が示されている。図６Ｃに示した場合では、投影画像６２が現実像６０に比べて比較的、明るく、投影画像６２の光量が多いため、投影画像６２を視認する眼９０の瞳孔９２が縮小している。この場合、投影画像６２の視認性は良いものの、眼９０にかかる負担は大きい。従って、スマートフォン１２は、投影画像６２の明るさを暗くする制御を行う。
【0047】
また、図６Ｄには、現実像６０を視認する眼９０の瞳孔９２の大きさＳ１に比べて、現実像６０に重畳された投影画像６２を視認する眼９０の瞳孔９２の大きさＳ２が小さく、かつ大きさＳ１と大きさＳ２との差が予め定められた閾値ｔｈ以下（Ｓ１＞Ｓ２、Ｓ１－Ｓ２≦ｔｈ）場合が示されている。図６Ｄに示した場合では、投影画像６２が現実像６０に比べて若干明るく、投影画像６２の光量が若干多いため、投影画像６２を視認する眼９０の瞳孔９２が若干縮小している。この場合、投影画像６２の視認性が良く、かつ、眼９０にかかる負担も小さい。従って、投影画像６２の明るさは適切であるため、スマートフォン１２は、投影画像６２の明るさを維持する制御を行う。
【0048】
なお、上述した投影画像６２の明るさが適切であるか否かを判断するために用いられる閾値ｔｈは、例えば、現実像６０及び投影画像６２の明るさと眼９０の疲労度との関係に基づいて実験的に導出して得られた値を設定したりすればよい。
【0049】
図７には、本実施形態のスマートフォン１２の機能に係る構成の一例を表す機能ブロック図が示されている。図４に示すようにスマートフォン１２は、第１取得部５０、第２取得部５２、及び投影制御部５４を備える。一例として本実施形態のスマートフォン１２は、プロセッサ４０が記憶部４４に記憶されている投影制御プログラム４５を実行することにより、プロセッサ４０が第１取得部５０、第２取得部５２、及び投影制御部５４として機能する。
【0050】
第１取得部５０は、瞳孔センサ２７の検出結果に基づいて、瞳孔９２の大きさＳ１を取得する機能を有する。具体的には、取得部５２は、ユーザの眼９０の瞳孔９２の大きさについて、ＯＬＥＤ２６が投影画像を投影していない場合の瞳孔９２の大きさＳ１を取得する。換言すると、第２取得部５２は、ユーザの眼９０の瞳孔９２の大きさについて、ＯＬＥＤ２６が投影画像を明るさ「ゼロ」で投影している場合の瞳孔９２の大きさＳ１を取得する。本実施形態の大きさＳ１が、本開示の第１の大きさの一例である。取得部５２は、取得した瞳孔９２の大きさＳ１を、投影制御部５４に出力する。
【0051】
第２取得部５２は、瞳孔センサ２７の検出結果に基づいて、瞳孔９２の大きさＳ２を取得する機能を有する。具体的には、取得部５２は、ユーザの眼９０の瞳孔９２の大きさについて、ＯＬＥＤ２６が投影画像を投影している場合の瞳孔９２の大きさＳ２を取得する。換言すると、第２取得部５２は、ＯＬＥＤ２６が投影画像を「ゼロ」以上の明るさで投影している場合の瞳孔９２の大きさＳ２を取得する。本実施形態の大きさＳ２が、本開示の第２の大きさの一例である。取得部５２は、取得した瞳孔９２の大きさＳ２を、投影制御部５４に出力する。
【0052】
投影制御部５４は、瞳孔９２の大きさＳ１と大きさＳ２との比較結果に応じて、右眼用透過部２０Ｒに投影する投影画像の明るさを制御する機能を有する。本実施形態の投影制御部５４は、図６Ａを参照して上述したように、瞳孔９２の大きさＳ１に比べて、瞳孔９２の大きさＳ２が大きい場合、ＯＬＥＤ２６から投影する投影画像の明るさを明るくする制御を行う。また、投影制御部５４は、図６Ｂを参照して上述したように、瞳孔９２の大きさＳ１と、瞳孔９２の大きさＳ２とが同じ場合、ＯＬＥＤ２６から投影する投影画像の明るさを明るくする制御を行う。また、投影制御部５４は、図６Ｃを参照して上述したように、瞳孔９２の大きさＳ１に比べて、瞳孔９２の大きさＳ２が小さく、かつ大きさＳ１と大きさＳ２との差が閾値ｔｈよりも大きい場合、ＯＬＥＤ２６から投影する投影画像の明るさを暗くする制御を行う。また、投影制御部５４は、図６Ｄを参照して上述したように、瞳孔９２の大きさＳ１に比べて、瞳孔９２の大きさＳ２が小さく、かつ大きさＳ１と大きさＳ２との差が閾値ｔｈ以下の場合、ＯＬＥＤ２６から投影する投影画像の明るさを維持する制御を行う。
【0053】
なお、投影画像６２の明るさを制御する方法は、投影画像６２を投影する装置等に応じた方法を適宜採用すればよい。本実施形態では、投影画像６２を投影する装置として、ＯＬＥＤ２６を採用しているため、ＯＬＥＤ２６の画素にかかる駆動電流の大きさを調整する。投影画像６２の明るさを明るくする場合、駆動電流の大きさを大きくし、投影画像６２の明るさを暗くする場合、駆動電流の大きさを小さくする。
【0054】
次に、本実施形態のスマートフォン１２の作用を説明する。図８には、本実施形態のスマートフォン１２のプロセッサ４０による投影制御処理の流れの一例を表したフローチャートが示されている。一例として本実施形態のスマートフォン１２では、ユーザが入力装置４８を用いて入力した投影開始の指示を受けた場合、プロセッサ４０が、記憶部４４に記憶されている投影制御プログラム４５を実行することにより、図８に一例を示した投影制御処理を実行する。なお、図８に示し投影制御処理を開始した時点では、ユーザは、左右の眼共に、左眼用透過部２０Ｌ及び右眼用透過部２０Ｒを通じて、現実像を視認している。
【0055】
図８のステップＳ１００で第１取得部５０は、瞳孔９２の大きさＳ１を取得する。上述したように、第１取得部５０は、瞳孔センサ２７がユーザの眼９０を撮影した撮影画像から、瞳孔９２の大きさＳ１を取得する。
【0056】
次のステップＳ１０２で投影制御部５４は、投影画像６２を投影する。具体的には、投影制御部５４は、投影画像６２を導光板２４に投影させるようＯＬＥＤ２６に投影画像６２の画像データを出力する。ＯＬＥＤ２６は、スマートフォン１２から投影画像６２の画像データが入力されると、入力された画像データに応じた投影画像６２を導光板２４に投影する。なお、図８に示した投影制御処理を開始して最初に実行されるステップＳ１０２の処理において投影制御部５４がＯＬＥＤ２６に投影させる投影画像６２の明るさは、特に限定されず、予め定められた明るさとすることができる。予め定められた明るさとしては、例えば、ＡＲグラス１０の設計的に得られた汎用的な投影画像の明るさとしてもよい。
【0057】
次のステップＳ１０４で第２取得部５２は、瞳孔９２の大きさＳ２を取得する。上述したように、第２取得部５２は、瞳孔センサ２７がユーザの眼９０を撮影した撮影画像から、瞳孔９２の大きさＳ２を取得する。
【0058】
次のステップＳ１０６で投影制御部５４は、上記ステップＳ１００で取得した大きさＳ１が、上記ステップＳ１０４で取得した大きさＳ２よりも大きい（Ｓ１＞Ｓ２）であるか否かを判定する。大きさＳ１が大きさＳ２よりも大きくない場合、換言すると、大きさＳ２が大きさＳ２以下（Ｓ１≦Ｓ２）の場合、ステップＳ１０６の判定が否定判定となり、ステップＳ１０８へ移行する。
【0059】
ステップＳ１０８で投影制御部５４は、大きさＳ１が大きさＳ２よりも小さい（Ｓ１＜Ｓ２）か否かを判定する。大きさＳ１が大きさＳ２よりも小さくない場合、換言すると、大きさＳ１と大きさＳ２とが同じ（Ｓ１＝Ｓ２）場合、ステップＳ１０８の判定が否定判定となり、ステップＳ１１０へ移行する。この場合、図６Ｂを参照して上述した場合に該当する。そこで、ステップＳ１１０で投影制御部５４は、投影している投影画像６２の明るさを明るくする制御を行った後、ステップＳ１０２に戻る。
【0060】
一方、ステップＳ１０８において、大きさＳ１が大きさＳ２よりも小さい（Ｓ１＜Ｓ２）場合、判定が肯定判定となり、ステップＳ１１２へ移行する。この場合、図６Ａを参照して上述した場合に該当する。そこで、ステップＳ１１２で投影制御部５４は、投影している投影画像６２の明るさを明るくする制御を行った後、ステップＳ１０２に戻る。
【0061】
また、上記ステップＳ１０６において大きさＳ１が大きさＳ２よりも大きい（Ｓ１＞Ｓ２）場合、判定が肯定判定となり、ステップＳ１１４へ移行する。
【0062】
ステップＳ１１４で投影制御部５４は、大きさＳ１と大きさＳ２との差が、閾値ｔｈ以下（（Ｓ１－Ｓ２）≦ｔｈ）であるか否かを判定する。大きさＳ１と大きさＳ２との差が、閾値ｔｈ以下ではない場合、換言すると、大きさＳ１と大きさＳ２との差が、閾値ｔｈよりも大きい（（Ｓ１－Ｓ２）＞ｔｈ）場合、ステップＳ１１４の判定が否定判定となり、ステップＳ１１６へ移行する。この場合、図６Ｃを参照して上述した場合に該当する。そこで、ステップＳ１１６で投影制御部５４は、投影している投影画像６２の明るさを暗くする制御を行った後、ステップＳ１０２に戻る。
【0063】
一方、ステップＳ１１４において、大きさＳ１と大きさＳ２との差が、閾値ｔｈ以下（（Ｓ１－Ｓ２）≦ｔｈ）の場合、肯定判定となる。この場合、図６Ｄを参照して上述した場合に該当する。そこで、投影制御部５４は、投影画像６２の明るさを現在の明るさに維持する。そのため、ステップＳ１１４の判定が肯定判定となると、図８に示した投影制御処理が終了する。
【0064】
このように本実施形態のスマートフォン１２の投影制御部５４は、ユーザの眼９０の瞳孔９２の大きさについて、ＯＬＥＤ２６が投影画像６２を投影していない場合の瞳孔９２の大きさＳ１と、ＯＬＥＤ２６が投影画像６２を投影している場合の瞳孔９２の大きさＳ２との比較結果に応じて、投影する投影画像６２の明るさを制御する。これにより、本実施形態のスマートフォン１２によれば、投影画像６２の視認性を良好に保ち、かつユーザの眼９０にかかる負担を軽減することができる。
【0065】
［第２実施形態］
本実施形態のＡＲグラス１０の構成は、第１実施形態の ＡＲグラス１０の構成（図１及び図２参照）と同様であるため説明は省略する。一方、本実施形態のスマートフォン１２は、図９に示すように、記憶部４４に記憶されているデータが、第１実施形態の記憶部４４（図４参照）と異なる。図９に示すように、本実施形態の記憶部４４は、基準対応関係情報４１をさらに記憶する。
本実施形態のＡＲグラス１０の構成は、第１実施形態の ＡＲグラス１０の構成（図１及び図２参照）と同様であるため説明は省略する。一方、本実施形態のスマートフォン１２は、図９に示すように、記憶部４４に記憶されているデータが、第１実施形態の記憶部４４（図４参照）と異なる。図９に示すように、本実施形態の記憶部４４は、基準対応関係情報４１をさらに記憶する。
【0066】
基準対応関係情報４１は、視認する投影画像６２の明るさ（輝度Ｌ）と、視認する眼９０の瞳孔９２の大きさとの対応関係を表す情報である。図１０には、基準対応関係情報４１の一例が示されている。図１０に示した基準対応関係情報４１は、例えば、統計的に得ることができる。なお、基準対応関係情報４１をどのような形態とするかは限定されない。図１０には、影画像の明るさ（輝度Ｌ）と、瞳孔９２の大きさＳとの対応関係をグラフ（テーブル）形式で表した基準対応関係情報４１を示しているが、基準対応関係情報４１の形式は特に限定されない。例えば、基準対応関係情報４１は、投影画像６２の明るさ（輝度Ｌ）と、瞳孔９２の大きさＳとの対応関係を表す式で表現されていてもよい。
【0067】
また、本実施形態のスマートフォン１２は、図１１に示すように、投影制御部５４の構成が第１実施形態の投影制御部５４（図７参照）と異なっている。本実施形態の投影制御部５４は、瞳孔９２の大きさＳ２を取得するために投影する投影画像６２の明るさを、基準対応関係情報４１に基づいて決定する機能を有する。
【0068】
また、本実施形態の投影制御部５４は、基準対応関係情報更新部５５を有する。基準対応関係情報更新部５５は、大きさＳ１と大きさＳ２との比較結果に応じた制御後の投影画像６２の明るさと、大きさＳ１との対応関係により、基準対応関係情報４１を更新する機能を有する。換言すると、投影制御部５４は、適切とされた投影画像６２の明るさと、明るさＳ１との対応関係により基準対応関係情報４１を更新する。
【0069】
図１２には、本実施形態のスマートフォン１２で実行される投影制御処理の流れの一例を表したフローチャートが示されている。図１２に示すように本実施形態の投影制御処理は、ステップＳ１００とステップＳ１０２との間にステップＳ１０１を備え、また、ステップＳ１１８を備える点で、第１実施形態の投影制御処理（図８参照）と異なっている。
【0070】
図１２のステップＳ１０１で投影制御部５４は、基準対応関係情報４１を参照し、瞳孔９２の大きさＳを、上記ステップＳ１００で取得した大きさＳ１とした場合に対応する投影画像６２の明るさを、ＯＬＥＤ２６から投影する投影画像６２の明るさの初期値Ｌ０として導出する。これにより、図１２に示した投影制御処理を開始して最初に実行されるステップＳ１０２の処理では、投影制御部５４は、初期値Ｌ０の明るさの投影画像６２をＯＬＥＤ２６に投影させる。
【0071】
また、図１２に示すように、本実施形態の投影制御処理では、ステップＳ１１４で肯定判定となった場合、ステップＳ１１８へ移行する。すなわち、本実施形態では、投影画像６２の明るさを適切な明るさに制御した後、ステップＳ１１８の処理を実行する。
【0072】
ステップＳ１１８で基準対応関係情報更新部５５は、制御後の最終的な投影画像６２の明るさＬｚと、上記ステップＳ１００で取得した大きさＳ１とにより、基準対応関係情報４１を更新する。なお、制御後の最終的な投影画像６２の明るさＬｚと、上記ステップＳ１００で取得した大きさＳ１との対応関係を、「制御後対応関係」という。また、以下では、制御後対応関係を表す値について、簡略化して「制御後対応関係値」という。ステップＳ１１８の処理が終了すると、図１２に示した本実施形態の投影制御処理が終了する。なお、本実施形態では、基準対応関係情報４１の更新方法として、投影制御処理を実行する毎に、図１３に示すように、制御後対応関係値を蓄積していき、蓄積した複数の制御後対応関係値を元に、対応関係を表す近似曲線、もしくは近似式を導出して、基準対応関係情報４１として用いてもよい。
【0073】
このように本実施形態のスマートフォン１２の投影制御部５４によれば、基準対応関係情報４１を用いて、投影画像６２の明るさの初期値Ｌ０を導出する。これにより、本実施形態のスマートフォン１２によれば、投影画像６２の明るさを適切な明るさにするための制御に要する時間を短縮することができる。
【0074】
また、基準対応関係情報更新部５５は、大きさＳ１と大きさＳ２との比較結果に応じた制御後対応関係値により、基準対応関係情報４１を更新し、投影制御部５４は、更新された基準対応関係情報４１を用いて、投影画像６２の明るさの初期値Ｌ０を導出する。瞳孔９２の大きさの変化は、個人差があるが、本実施形態では、ユーザに最適な投影画像６２の明るさに基づいた基準対応関係情報４１を得ることができるため、ユーザ個人に応じた適切な投影画像６２の明るさの初期値Ｌ０を導出することができる。従って、本実施形態のスマートフォン１２によれば、投影画像６２の明るさを適切な明るさにするための制御に要する時間をより短縮することができる。
【0075】
（変形例１）
なお、基準対応関係情報更新部５５は、更新タイミングが古い制御後対応関係値を基準対応関係情報４１から順次除外することで、基準対応関係情報４１に含まれる制御後対応関係値の数を予め定められた数以下に制御してもよい。図１４には、本変形例のスマートフォン１２で実行される投影制御処理の流れの一例を表したフローチャートが示されている。図１４に示すように本変形例の投影制御処理は、ステップＳ１１８の前にステップＳ１０７Ａ及びＳ１０７Ｂを備える点で、第２実施形態の投影制御処理（図１３参照）と異なっている。
なお、基準対応関係情報更新部５５は、更新タイミングが古い制御後対応関係値を基準対応関係情報４１から順次除外することで、基準対応関係情報４１に含まれる制御後対応関係値の数を予め定められた数以下に制御してもよい。図１４には、本変形例のスマートフォン１２で実行される投影制御処理の流れの一例を表したフローチャートが示されている。図１４に示すように本変形例の投影制御処理は、ステップＳ１１８の前にステップＳ１０７Ａ及びＳ１０７Ｂを備える点で、第２実施形態の投影制御処理（図１３参照）と異なっている。
【0076】
図１４のステップＳ１０７Ａで基準対応関係情報更新部５５は、今回の投影制御処理により得られた制御後対応関係値も含め、蓄積されている制御後対応関係値の総数が所定数以下であるか否かを判定する。制御後対応関係値の総数が所定数以下ではない場合、換言すると、制御後対応関係値の総数が所定数を超える場合、ステップＳ１０７Ａの判定が否定判定となり、ステップＳ１０７Ｂへ移行する。ステップＳ１０７Ｂで基準対応関係情報更新部５５は、更新タイミングが最も古い制御後対応関係値を基準対応関係情報４１から除外した後、ステップＳ１１８へ移行する。
【0077】
一方、ステップＳ１０７Ａにおいて制御後対応関係値の総数が所定数以下である場合、肯定判定となり、ステップＳ１１８へ移行する。
【0078】
これらの処理により、本実施形態では、基準対応関係情報４１を、更新タイミングが新しい所定数の制御後対応関係値に基づいた、近似曲線（図１３参照）等とすることができる。これにより、本実施形態のスマートフォン１２の基準対応関係情報更新部５５によれば、記憶する制御後対応関係値の数を抑制することができるため、基準対応関係情報４１を記憶することによる記憶容量の圧迫を抑制することができる。また、基準対応関係情報更新部５５が近似曲線の導出に要する処理量を抑制し、処理に要する時間を短縮することができる。
【0079】
なお、基準対応関係情報４１に用いる基準対応関係情報の所定数は、特に限定されず、統計的に有意な近似曲線等を導出することが可能であるか否か、蓄積に要する記憶容量の制限、及び投影画像６２の明るさの初期値Ｌ０の精度等に応じて、適宜、設定することができる。
【0080】
（変形例２）
本変形例では、基準対応関係情報４１に含まれる制御後対応関係値の数の制御の変形例について説明する。本変形例の基準対応関係情報更新部５５は、基準対応関係情報４１における眼９０の瞳孔９２の大きさに応じて定められる所定の範囲毎に、基準対応関係情報４１に含まれる制御後対応関係を表す値の数を所定数以下に制御する。なお、本変形例の所定数が、本開示の第１所定数の一例である。
本変形例では、基準対応関係情報４１に含まれる制御後対応関係値の数の制御の変形例について説明する。本変形例の基準対応関係情報更新部５５は、基準対応関係情報４１における眼９０の瞳孔９２の大きさに応じて定められる所定の範囲毎に、基準対応関係情報４１に含まれる制御後対応関係を表す値の数を所定数以下に制御する。なお、本変形例の所定数が、本開示の第１所定数の一例である。
【0081】
図１５には、眼９０の瞳孔９２の大きさに応じて、領域１～領域７にわけて、領域毎に、制御後対応関係値の数を「３」以下に基準対応関係情報更新部５５が制御した場合の基準対応関係情報４１の一例を示している。
【0082】
このように、更新タイミングが古い制御後対応関係値を基準対応関係情報４１から除外することで、瞳孔９２の大きさについて、特定の大きさの制御後対応関係値だけに偏ってしまうのを防止することができる。これにより、本変形例の基準対応関係情報更新部５５によれば、基準対応関係情報４１の精度を維持することができる。
【0083】
（変形例３）
本変形例では、基準対応関係情報４１に含まれる制御後対応関係値の数の制御の変形例について説明する。本変形例の基準対応関係情報更新部５５は、基準対応関係情報４１における視認する像の明るさに応じて定められる所定の範囲毎に、基準対応関係情報４１に含まれる制御後対応関係を表す値の数を所定数以下に制御する。なお、本変形例の所定数が、本開示の第２所定数の一例である。
本変形例では、基準対応関係情報４１に含まれる制御後対応関係値の数の制御の変形例について説明する。本変形例の基準対応関係情報更新部５５は、基準対応関係情報４１における視認する像の明るさに応じて定められる所定の範囲毎に、基準対応関係情報４１に含まれる制御後対応関係を表す値の数を所定数以下に制御する。なお、本変形例の所定数が、本開示の第２所定数の一例である。
【0084】
図１６には、視認する像の明るさ（輝度）に応じて、領域１～領域９にわけて、領域毎に、制御後対応関係値の数を「２」以下に基準対応関係情報更新部５５が制御した場合の基準対応関係情報４１の一例を示している。
【0085】
このように、更新タイミングが古い制御後対応関係値を基準対応関係情報４１から除外することで、視認する像の明るさについて、特定の明るさの制御後対応関係値だけに偏ってしまうのを防止することができる。これにより、本変形例の基準対応関係情報更新部５５によれば、基準対応関係情報４１の精度を維持することができる。
【0086】
（変形例４）
本変形例では、基準対応関係情報４１に含まれる制御後対応関係値の数の制御の変形例について説明する。本変形例の基準対応関係情報更新部５５は、基準対応関係情報４１における眼９０の瞳孔９２の大きさに応じて定められる所定の範囲毎に、制御後対応関係値により代表値を決定し、代表値により基準対応関係情報４１を導出する。
本変形例では、基準対応関係情報４１に含まれる制御後対応関係値の数の制御の変形例について説明する。本変形例の基準対応関係情報更新部５５は、基準対応関係情報４１における眼９０の瞳孔９２の大きさに応じて定められる所定の範囲毎に、制御後対応関係値により代表値を決定し、代表値により基準対応関係情報４１を導出する。
【0087】
図１７には、眼９０の瞳孔９２の大きさに応じて、領域１～領域７にわけて、領域毎に、制御後対応関係値から代表値を決定した場合の基準対応関係情報４１の一例を示している。図１７に示した場合、基準対応関係情報更新部５５は、領域１～領域７の各々において、複数の制御後対応関係値が得られている場合、複数の制御後対応関係値から、１つの代表値を決定する。
【0088】
そのため、基準対応関係情報更新部５５は、新たな制御後対応関係値を取得した場合、新たな制御後対応関係値を含めた複数の制御後対応関係値から、新代表値を決定することで、代表値を更新する。図１７には、領域４に含まれる新制御後対応関係値を取得したことにより、基準対応関係情報更新部５５が、新代表値を決定した場合が示されている。
【0089】
なお、代表値を決定する場合、制御後対応関係値に重み付けを行って新代表値を決定することが好ましい。例えば、基準対応関係情報更新部５５は、下記（１）式により、新代表値を算出する。なお、重みＷは、予め設定しておいてもよいし、適宜変化させてもよい。例えば、Ｗの値を小さくすることにより、代表値を決定するに当たり、更新タイミングが古い制御後対応関係値が重視されることになるため、データの連続性を重視した新代表値を決定することができる。
Ｄｎ＿ｎｅｗ＝Ｗ×Ｄ＋Ｄｎ＿ｏｌｄ×（１－Ｗ） ・・・（１）
Ｄｎ＿ｎｅｗ：領域ｎ（図１７では、ｎ＝１～７）の新代表値
Ｄｎ＿ｏｌｄ：領域ｎの旧代表値
Ｄ：新制御後対応関係値
Ｗ：新制御後対応関係値の重み、Ｗ＝０～１
Ｄｎ＿ｎｅｗ＝Ｗ×Ｄ＋Ｄｎ＿ｏｌｄ×（１－Ｗ） ・・・（１）
Ｄｎ＿ｎｅｗ：領域ｎ（図１７では、ｎ＝１～７）の新代表値
Ｄｎ＿ｏｌｄ：領域ｎの旧代表値
Ｄ：新制御後対応関係値
Ｗ：新制御後対応関係値の重み、Ｗ＝０～１
【0090】
また、基準対応関係情報更新部５５は、代表値を用いて近似曲線導出する。基準対応関係情報更新部５５は、新代表値を決定した場合、新代表値に基づいて近似曲線を導出し直す。図１７に示した例では、領域４において決定した新代表値に基づいて新近似曲線を導出した場合が示されている。
【0091】
このように、制御後対応関係値そのものではなく、制御後対応関係値から決定された代表値を用いることで、基準対応関係情報４１の精度を維持しつつ、基準対応関係情報４１（図１７に示した例では、近似曲線）の導出に要する処理を軽減することができる。
【0092】
なお、上記の例では、基準対応関係情報更新部５５が、基準対応関係情報４１における眼９０の瞳孔９２の大きさに応じて定められる所定の範囲毎に、制御後対応関係値により代表値を決定したが、代表値を決定する方法は、本形態に限定されない。例えば、基準対応関係情報更新部５５が、基準対応関係情報４１における視認する像の明るさに応じて定められる所定の範囲毎に、制御後対応関係値により代表値を決定してもよい。また例えば、基準対応関係情報更新部５５が、基準対応関係情報４１における眼９０の瞳孔９２の大きさ、及び基準対応関係情報４１における視認する像の明るさに応じて定められる所定の範囲毎に、制御後対応関係値により代表値を決定してもよい。
【0093】
（変形例５）
上記各形態では、投影制御処理を実行する初期段階では、統計的に得られた基準対応関係情報４１を用い、統計的に得られた基準対応関係情報４１を更新する場合について説明した。本変形例では、統計的に得られた基準対応関係情報４１に代わり、明るさを異ならせて投影画像６２を投影することにより得られた、投影画像６２の明るさと、ユーザの眼９０の瞳孔９２の大きさＳ１との対応関係を表す情報を用いる。
上記各形態では、投影制御処理を実行する初期段階では、統計的に得られた基準対応関係情報４１を用い、統計的に得られた基準対応関係情報４１を更新する場合について説明した。本変形例では、統計的に得られた基準対応関係情報４１に代わり、明るさを異ならせて投影画像６２を投影することにより得られた、投影画像６２の明るさと、ユーザの眼９０の瞳孔９２の大きさＳ１との対応関係を表す情報を用いる。
【0094】
瞳孔９２の大きさの変化は、個人差があり、例えば、加齢によっても変化の程度等が異なる。そのため、本変形例では、ＡＲグラス１０を使用するユーザ個人に特化した基準対応関係情報４１を用いる。
【0095】
本変形例では、ＡＲグラス１０の使用を開始する際や、投影制御処理を実行する前等、予め定められたタイミングで、基準対応関係情報更新部５５が、明るさ（輝度）が異なる複数の投影画像６２を順次、ＯＬＥＤ２６によって投影させる。第１取得部５０は、各投影画像６２を視認したユーザの眼９０の瞳孔９２の大きさＳを取得し、基準対応関係情報更新部５５は、各投影画像６２を視認したユーザの眼９０の瞳孔９２の大きさＳに基づいて、基準対応関係情報４１を導出する。例えば、図１８に示した例では、明るさが暗い（１ｃｄ／ｍ２）投影画像６２１から、明るい（１００００ｃｄ／ｍ２）投影画像６２９まで、９枚の投影画像６２（６２１～６２９）を順次、投影することにより得られた大きさＳにより基準対応関係情報４１を導出した例を示している。
【0096】
瞳孔９２の大きさの変化は、個人差があり、例えば、加齢によっても変化の程度等が異なる。そこで、本変形例では、上述のようにＡＲグラス１０を使用するユーザが実際に視認した投影画像６２の明るさと瞳孔９２の大きさＳとの関係により得られた基準対応関係情報４１を用いる。このように、本変形例では、ユーザ個人に最適化した基準対応関係情報４１を用いるため、精度がより良い初期値Ｌ０を得ることができる。
【0097】
［第３実施形態］
一般的に色によって、明るさの感じ易さ、すなわち分光感度特性が異なる。具体的には、視認する投影画像６２の色によって、瞳孔９２の大きさの変化の仕方が異なる。そのため、投影画像６２に用いられる色毎に、ユーザの瞳孔９２の分光感度特性に応じた重み付けによってユーザに合わせて色味を調整した投影画像６２を用いて投影制御処理を行うことが好ましい。
一般的に色によって、明るさの感じ易さ、すなわち分光感度特性が異なる。具体的には、視認する投影画像６２の色によって、瞳孔９２の大きさの変化の仕方が異なる。そのため、投影画像６２に用いられる色毎に、ユーザの瞳孔９２の分光感度特性に応じた重み付けによってユーザに合わせて色味を調整した投影画像６２を用いて投影制御処理を行うことが好ましい。
【0098】
図１９には、分高感度特性に応じた重み付けを得るためにスマートフォン１２のプロセッサ４０により実行される重み付け取得処理の流れの一例を表したフローチャートが示されている。一例として本実施形態のスマートフォン１２では、ユーザがＡＲグラス１０を初めて使用する場合や、所定の使用期間が経過する毎等、予め定められたタイイングで図１９に示した重み付け取得処理を実行する。なお、本実施形態では、一例として投影画像６２がＲＧＢのカラー画像でる場合について説明する。また、重み付け取得処理は、周辺環境の影響を極力排除するために、周辺環境が暗い状態で行うことが好ましい。
【0099】
図１９のステップＳ１０で投影制御部５４は、Ｒ単色の投影画像６２を投影する。具体的には、投影制御部５４は、Ｒ単色の投影画像６２を導光板２４に投影させるようＯＬＥＤ２６に投影画像６２の画像データを出力する。ＯＬＥＤ２６は、スマートフォン１２からＲ単色の投影画像６２の画像データが入力されると、入力された画像データに応じたＲ単色の投影画像６２を導光板２４に投影する。
【0100】
次のステップＳ１２で第２取得部５２は、瞳孔９２の大きさＳ＿ｒを取得する。上述したように、第２取得部５２は、瞳孔センサ２７がユーザの眼９０を撮影した撮影画像から、瞳孔９２の大きさＳ＿ｒを取得する。
【0101】
次のステップＳ１４で投影制御部５４は、上記ステップＳ１２で取得した大きさＳ＿ｒに対応する輝度値を取得する。本実施形態の投影制御部５４は、上述した基準対応関係情報４１（図１０等参照）を参照し、大きさＳ＿ｒに対応する輝度値を、Ｒ単色の投影画像６２の輝度値Ｌ＿ｒとして取得する。
【0102】
次のステップＳ１６で投影制御部５４は、Ｇ単色の投影画像６２を投影する。具体的には、投影制御部５４は、Ｇ単色の投影画像６２を導光板２４に投影させるようＯＬＥＤ２６に投影画像６２の画像データを出力する。ＯＬＥＤ２６は、スマートフォン１２からＧ単色の投影画像６２の画像データが入力されると、入力された画像データに応じたＧ単色の投影画像６２を導光板２４に投影する。
【0103】
次のステップＳ１８で第２取得部５２は、瞳孔９２の大きさＳ＿ｒを取得する。上述したように、第２取得部５２は、瞳孔センサ２７がユーザの眼９０を撮影した撮影画像から、瞳孔９２の大きさＳ＿ｇを取得する。
【0104】
次のステップＳ２０で投影制御部５４は、上記ステップＳ１８で取得した大きさＳ＿ｇに対応する輝度値を取得する。本実施形態の投影制御部５４は、上述した基準対応関係情報４１（図１０等参照）を参照し、大きさＳ＿ｇに対応する輝度値を、Ｇ単色の投影画像６２の輝度値Ｌ＿ｇとして取得する。
【0105】
次のステップＳ２２で投影制御部５４は、Ｂ単色の投影画像６２を投影する。具体的には、投影制御部５４は、Ｂ単色の投影画像６２を導光板２４に投影させるようＯＬＥＤ２６に投影画像６２の画像データを出力する。ＯＬＥＤ２６は、スマートフォン１２からＢ単色の投影画像６２の画像データが入力されると、入力された画像データに応じたＢ単色の投影画像６２を導光板２４に投影する。
【0106】
次のステップＳ２４で第２取得部５２は、瞳孔９２の大きさＳ＿ｂを取得する。上述したように、第２取得部５２は、瞳孔センサ２７がユーザの眼９０を撮影した撮影画像から、瞳孔９２の大きさＳ＿ｂを取得する。
【0107】
次のステップＳ２６で投影制御部５４は、上記ステップＳ２０で取得した大きさＳ＿ｂに対応する輝度値を取得する。本実施形態の投影制御部５４は、上述した基準対応関係情報４１（図１０等参照）を参照し、大きさＳ＿ｂに対応する輝度値を、Ｂ単色の投影画像６２の輝度値Ｌ＿ｂとして取得する。
【0108】
次のステップＳ２８で投影制御部５４は、Ｒ色に対応する重みＷ＿ｒ、Ｇ色に対応する重みＷ＿ｇ、及びＢ色に対応する重みＷ＿ｂを導出し、記憶部４４に記憶させる。投影制御部５４は、上記ステップＳ１４で取得した輝度値Ｌ＿ｒ、上記ステップＳ２０で取得した輝度値Ｌ＿ｇ、及び上記ステップＳ２６で取得した輝度値Ｌ＿ｂを正規化することにより、Ｒ色に対応する重みＷ＿ｒ、Ｇ色に対応する重みＷ＿ｇ、及びＢ色に対応する重みＷ＿ｂを導出する。一例として、本実施形態の投影制御部５４は、下記（２）式～（４）式により、重みＷ＿ｒ、Ｗ＿ｇ、及びＷ＿ｂを導出する。
Ｗ＿ｒ＝（Ｌ＿ｒ）／（Ｌ＿ｒ＋Ｌ＿ｇ＋Ｌ＿ｂ） ・・・（２）
Ｗ＿ｇ＝（Ｌ＿ｇ）／（Ｌ＿ｒ＋Ｌ＿ｇ＋Ｌ＿ｂ） ・・・（３）
Ｗ＿ｂ＝（Ｌ＿ｂ）／（Ｌ＿ｒ＋Ｌ＿ｇ＋Ｌ＿ｂ） ・・・（４）
なお、Ｗ＿ｒ＋Ｗ＿ｇ＋Ｗ＿ｂ＝１である。
Ｗ＿ｒ＝（Ｌ＿ｒ）／（Ｌ＿ｒ＋Ｌ＿ｇ＋Ｌ＿ｂ） ・・・（２）
Ｗ＿ｇ＝（Ｌ＿ｇ）／（Ｌ＿ｒ＋Ｌ＿ｇ＋Ｌ＿ｂ） ・・・（３）
Ｗ＿ｂ＝（Ｌ＿ｂ）／（Ｌ＿ｒ＋Ｌ＿ｇ＋Ｌ＿ｂ） ・・・（４）
なお、Ｗ＿ｒ＋Ｗ＿ｇ＋Ｗ＿ｂ＝１である。
【0109】
上記（２）式～（４）式により、例えば、ユーザが赤色を明るく感じやすい分光特性を有する場合、重みＷ＿ｒの値が、重みＷ＿ｇ及びＷ＿ｂの各々の値よりも大きくなる。
【0110】
ステップＳ２８の処理が終了すると、図１９に示した重み付け取得処理が終了する。
【0111】
本実施形態のスマートフォン１２では、このようにして得られたユーザの瞳孔９２の分光感度特性に応じた重み付けＷ＿ｒ、Ｗ＿ｇ、及びＷ＿ｂによってユーザに合わせて色味を調整した投影画像６２を用いて投影制御処理を行う。
【0112】
これにより、本実施形態のスマートフォン１２によれば、ユーザが明るく感じやすい色については暗く、明るさを感じにくい色については明るく調整した投影画像６２を用いて投影制御処理を行う。これにより、本実施形態のスマートフォン１２によれば、投影画像６２の明るさをより適切な明るさに制御することができる。
【0113】
以上説明したように、本実施形態のスマートフォン１２は、ユーザの眼９０に現実像を提供する右眼用透過部２０Ｒと、右眼用透過部２０Ｒにユーザの眼９０により視認が可能な状態に投影画像６２を投影するＯＬＥＤ２６と、を備えたＡＲグラス１０に対して、投影画像６２の投影を制御するプロセッサ４０を備える。プロセッサ４０は、ユーザの眼９０の瞳孔９２の大きさＳについて、ＯＬＥＤ２６が投影画像６２を例えば、明るさ「ゼロ」等、第１の明るさで投影している場合の瞳孔９２の大きさＳ１を取得する。また、プロセッサ４０は、ＯＬＥＤ２６が投影画像６２を第１の明るさよりも明るい、第２の明るさで投影している場合の瞳孔９２の大きさＳ２を取得する。さらに、プロセッサ４０は、大きさＳ１と大きさＳ２との比較結果に応じて、右眼用ＯＬＥＤ２６Ｒに投影する投影画像６２の明るさを制御する。
【0114】
このように、上記各形態のスマートフォン１２によれば、ユーザの瞳孔９２の大きさＳ１と大きさＳ２との比較結果に応じて投影画像６２の明るさを適切な明るさに制御する。従って、上記各形態のスマートフォン１２によれば、投影画像６２の視認性を良好に保ち、かつユーザの眼９０にかかる負担を軽減することができる。
【0115】
なお、上記各形態では、ユーザの瞳孔９２の大きさＳ１を取得する場合、投影画像６２の明るさを「ゼロ」として投影画像６２を表示させない状態としていたが、投影画像６２を表示させる形態としてもよい。また、上記各形態では、投影画像が静止画像である場合について説明したが、投影画像は動画像であってもよい。
【0116】
また、ＡＲグラス１０は、現実像６０の透過率を調整する調光機能を有していてもよい。例えば、周辺環境が明るすぎ、瞳孔９２の大きさＳ１が小さすぎる場合、大きさＳ１が予め定められた大きさ以上となるように、調光機能により現実像６０の透過率を調整してもよく、上記各形態においては、右眼用透過部２０Ｒの透過率を下げてもよい。このように現実像６０の透過率を調整することで、投影画像６２の明るさを明るくする上限値を低く抑えることができる。これにより、消費電力の増加や、ＯＬＥＤ２６の大型化及び重量の増加等を抑制することができる。
【0117】
また、上記形態では、ユーザの右の眼９０で投影画像６２を視認する形態のＡＲグラス１０について説明したが、ＡＲグラス１０は、本形態に限定されず、ユーザの左の眼９０で投影画像６２を視認する形態のＡＲグラス１０であってもよい。また、ユーザの左右の眼９０の各々で投影画像６２を視認する形態のＡＲグラス１０であってもよい。なお、この場合、左右の眼９０の各々について、スマートフォン１２が、投影制御処理を行うことが好ましい。
【0118】
また、上記第２実施形態では、スマートフォン１２の記憶部４４に基準対応関係情報４１が記憶されている形態について説明したが、基準対応関係情報４１が記憶されている場所は、スマートフォン１２に限定されない。例えば、ＡＲグラス１０が基準対応関係情報４１を記憶する形態であってもよい。
【0119】
また、上記各形態では、第１取得部５０、第２取得部５２、及び投影制御部５４の各機能をスマートフォン１２が備える形態としたが、これら各部の機能の一部または全部を他の装置が備える形態としてもよい。他の装置としては、例えば、ＡＲグラス１０であってもよいし、クラウド上に設けられたサーバコンピュータ等であってもよい。
【0120】
また、上記各形態において、例えば、第１取得部５０、第２取得部５２、及び投影制御部５４といった各種の処理を実行する処理部（processing unit）のハードウェア的な構造としては、次に示す各種のプロセッサ（processor）を用いることができる。上記各種のプロセッサには、前述したように、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵに加えて、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：PLD）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
【0121】
１つの処理部は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせや、ＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。
【0122】
複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアント及びサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip：SoC）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの１つ以上を用いて構成される。
【0123】
更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）を用いることができる。
【0124】
また、上記各形態では、投影制御プログラム４５が記憶部４４に予め記憶（インストール）されている態様を説明したが、これに限定されない。投影制御プログラム４５は、ＣＤ－ＲＯＭ（Compact Disc Read Only Memory）、ＤＶＤ－ＲＯＭ（Digital Versatile Disc Read Only Memory）、及びＵＳＢ（Universal Serial Bus）メモリ等の記録媒体に記録された形態で提供されてもよい。また、投影制御プログラム４５は、ネットワークを介して外部装置からダウンロードされる形態としてもよい。
【符号の説明】
【0125】
１ 表示システム
１０ ＡＲグラス
１２ スマートフォン
２０Ｌ 左眼用透過部、２０Ｒ 右眼用透過部
２２Ｌ 左眼用レンズ、２２Ｒ 右眼用レンズ
２４ 導光板
２６ ＯＬＥＤ
２７ 瞳孔センサ
４０ プロセッサ
４１ 基準対応関係情報
４２ メモリ
４３ Ｉ／Ｆ部
４４ 記憶部
４５ 投影制御プログラム
４６ ディスプレイ
４８ 入力装置
４９ バス
５０ 第１取得部
５２ 第２取得部
５４ 投影制御部
５５ 基準対応関係情報更新部
６０ 現実像
６２、６２１～６２９ 投影画像
９０ 眼
９２ 瞳孔
Ｓ、Ｓ１、Ｓ２ （瞳孔の）大きさ
１０ ＡＲグラス
１２ スマートフォン
２０Ｌ 左眼用透過部、２０Ｒ 右眼用透過部
２２Ｌ 左眼用レンズ、２２Ｒ 右眼用レンズ
２４ 導光板
２６ ＯＬＥＤ
２７ 瞳孔センサ
４０ プロセッサ
４１ 基準対応関係情報
４２ メモリ
４３ Ｉ／Ｆ部
４４ 記憶部
４５ 投影制御プログラム
４６ ディスプレイ
４８ 入力装置
４９ バス
５０ 第１取得部
５２ 第２取得部
５４ 投影制御部
５５ 基準対応関係情報更新部
６０ 現実像
６２、６２１～６２９ 投影画像
９０ 眼
９２ 瞳孔
Ｓ、Ｓ１、Ｓ２ （瞳孔の）大きさ
【図1】
【図2】
【図3】
【図4】
【図5】
【図6A】
【図6B】
【図6C】
【図6D】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
