知財求人 - 知財ポータルサイト「IP Force」
特開2023-159741電子機器、電子機器の制御方法、プログラム、および記憶媒体
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023159741
(43)【公開日】2023-11-01
(54)【発明の名称】電子機器、電子機器の制御方法、プログラム、および記憶媒体
(51)【国際特許分類】
A61B 3/113 20060101AFI20231025BHJP
G03B 17/02 20210101ALI20231025BHJP
【ＦＩ】
A61B3/113
G03B17/02
【審査請求】未請求
【請求項の数】27
【出願形態】ＯＬ
(21)【出願番号】P 2022069647
(22)【出願日】2022-04-20
(71)【出願人】
【識別番号】000001007
【氏名又は名称】キヤノン株式会社
(74)【代理人】
【識別番号】110002860
【氏名又は名称】弁理士法人秀和特許事務所
(72)【発明者】
【氏名】峰 陽介
【テーマコード（参考）】
2H100
4C316
【Ｆターム（参考）】
2H100AA11
2H100CC07
4C316AA21
4C316AB16
4C316FB21
4C316FY08
4C316FZ01
(57)【要約】
【課題】撮像された眼球の画像の輝度ムラを抑制する。
【解決手段】本発明の電子機器は、複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得手段と、前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段と、前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正手段とを有することを特徴とする。
【選択図】図１１
【解決手段】本発明の電子機器は、複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得手段と、前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段と、前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正手段とを有することを特徴とする。
【選択図】図１１
【特許請求の範囲】
【請求項1】
複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得手段と、
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段と、
前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正手段と
を有することを特徴とする電子機器。
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段と、
前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正手段と
を有することを特徴とする電子機器。
【請求項2】
前記複数の光源と前記撮像手段とをさらに有する
ことを特徴とする請求項１に記載の電子機器。
ことを特徴とする請求項１に記載の電子機器。
【請求項3】
前記補正手段は、前記距離情報により示された距離が第１の距離である場合に、当該距離が前記第１の距離よりも長い第２の距離である場合に比べて補正量を大きくする
ことを特徴とする請求項１に記載の電子機器。
ことを特徴とする請求項１に記載の電子機器。
【請求項4】
前記補正手段は、前記距離情報により示された距離が第１の距離である場合に、当該距離が前記第１の距離よりも長い第２の距離である場合に比べて、前記複数の光源のうち、前記撮像手段からの距離が所定の距離よりも長い光源が照射する領域の補正量を大きくする
ことを特徴とする請求項１に記載の電子機器。
ことを特徴とする請求項１に記載の電子機器。
【請求項5】
前記眼球から前記撮像手段までの距離と、補正値との対応関係が予め定められており、
前記補正手段は、前記距離情報が示す距離に対応する補正値を用いて前記輝度ムラを補正する
ことを特徴とする請求項１に記載の電子機器。
前記補正手段は、前記距離情報が示す距離に対応する補正値を用いて前記輝度ムラを補正する
ことを特徴とする請求項１に記載の電子機器。
【請求項6】
前記対応関係として、前記眼球から前記撮像手段までの距離と、補正値との複数の組み合わせが予め定められており、
前記補正手段は、前記距離情報が示す距離と、補正値との組み合わせが予め定められていない場合に、前記複数の組み合わせを用いた補間処理により、前記距離情報が示す距離に対応する前記補正値を取得する
ことを特徴とする請求項５に記載の電子機器。
前記補正手段は、前記距離情報が示す距離と、補正値との組み合わせが予め定められていない場合に、前記複数の組み合わせを用いた補間処理により、前記距離情報が示す距離に対応する前記補正値を取得する
ことを特徴とする請求項５に記載の電子機器。
【請求項7】
前記補正手段は、初回撮像時または前記画像に所定量以上の輝度変化が生じた際には、前記輝度ムラを補正しないようにする
ことを特徴とする請求項１に記載の電子機器。
ことを特徴とする請求項１に記載の電子機器。
【請求項8】
前記画像から視線位置を検出する検出手段をさらに有し、
前記補正手段は、
前記検出手段のキャリブレーション動作中である場合に、前記距離情報または当該距離情報に応じた補正値のいずれかを記憶媒体に記憶しておき、
前記キャリブレーション動作中でない場合には、前記キャリブレーション動作中の前記距離情報に応じた前記補正値を用いて前記輝度ムラを補正する
ことを特徴とする請求項１に記載の電子機器。
前記補正手段は、
前記検出手段のキャリブレーション動作中である場合に、前記距離情報または当該距離情報に応じた補正値のいずれかを記憶媒体に記憶しておき、
前記キャリブレーション動作中でない場合には、前記キャリブレーション動作中の前記距離情報に応じた前記補正値を用いて前記輝度ムラを補正する
ことを特徴とする請求項１に記載の電子機器。
【請求項9】
前記補正手段は、前記画像のうち他の領域よりも暗い領域が明るくなるように、前記画像の輝度ムラを補正する
ことを特徴とする請求項１に記載の電子機器。
ことを特徴とする請求項１に記載の電子機器。
【請求項10】
眼球を照明する複数の光源と、
前記複数の光源により照明された前記眼球を撮像する撮像手段と、
前記複数の光源を制御する制御手段と、
を有し、
前記制御手段は、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御する
ことを特徴とする電子機器。
前記複数の光源により照明された前記眼球を撮像する撮像手段と、
前記複数の光源を制御する制御手段と、
を有し、
前記制御手段は、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御する
ことを特徴とする電子機器。
【請求項11】
前記複数の光源は、第１の光源と、前記撮像手段からの距離が前記撮像手段から前記第１の光源までの距離よりも長い第２の光源とを含み、
前記制御手段は、前記第２の光源の発光量を前記第１の光源の発光量よりも大きくすることを特徴とする請求項１０に記載の電子機器。
前記制御手段は、前記第２の光源の発光量を前記第１の光源の発光量よりも大きくすることを特徴とする請求項１０に記載の電子機器。
【請求項12】
前記制御手段は、前記複数の光源のそれぞれについて、前記光源を駆動する駆動信号の振幅とデューティー比の少なくとも一方を制御する
ことを特徴とする請求項１０に記載の電子機器。
ことを特徴とする請求項１０に記載の電子機器。
【請求項13】
前記複数の光源は、第１の光源群と、前記撮像手段からの距離が前記撮像手段から前記第１の光源群までの距離よりも長い第２の光源群とを含む、個別に発光量を制御可能な複数の光源群に分類されており、
前記制御手段は、前記第２の光源群の発光量を前記第１の光源群の発光量よりも大きくする
ことを特徴とする請求項１０に記載の電子機器。
前記制御手段は、前記第２の光源群の発光量を前記第１の光源群の発光量よりも大きくする
ことを特徴とする請求項１０に記載の電子機器。
【請求項14】
前記複数の光源群は、前記撮像手段からの距離が前記撮像手段から前記第２の光源群までの距離以上である第３の光源群をさらに含み、
前記第２の光源群に含まれる光源の数は、前記第３の光源群に含まれる光源の数よりも少なく、
前記制御手段は、前記第３の光源群の発光量を前記第２の光源群の発光量よりも大きくしない
ことを特徴とする請求項１３に記載の電子機器。
前記第２の光源群に含まれる光源の数は、前記第３の光源群に含まれる光源の数よりも少なく、
前記制御手段は、前記第３の光源群の発光量を前記第２の光源群の発光量よりも大きくしない
ことを特徴とする請求項１３に記載の電子機器。
【請求項15】
前記制御手段は、前記複数の光源群のそれぞれについて、前記光源群を駆動する駆動信号の振幅、前記駆動信号のデューティー比、前記光源群のなかで点灯する光源の数の少なくともいずれかを制御する
ことを特徴とする請求項１３に記載の電子機器。
ことを特徴とする請求項１３に記載の電子機器。
【請求項16】
前記制御手段は、前記第１の光源群において点灯させる光源の数よりも多くの数の光源を、前記第２の光源群において点灯させる
ことを特徴とする請求項１３に記載の電子機器。
ことを特徴とする請求項１３に記載の電子機器。
【請求項17】
前記第２の光源群に含まれる光源の数は、前記第１の光源群に含まれる光源の数よりも多い
ことを特徴とする請求項１３に記載の電子機器。
ことを特徴とする請求項１３に記載の電子機器。
【請求項18】
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段をさらに有し、
前記眼球から前記撮像手段までの距離と、前記複数の光源の発光量との対応関係が予め定められており、
前記制御手段は、前記距離情報が示す距離に対応する前記複数の光源の発光量で発光するように前記複数の光源を制御する
ことを特徴とする請求項１０に記載の電子機器。
前記眼球から前記撮像手段までの距離と、前記複数の光源の発光量との対応関係が予め定められており、
前記制御手段は、前記距離情報が示す距離に対応する前記複数の光源の発光量で発光するように前記複数の光源を制御する
ことを特徴とする請求項１０に記載の電子機器。
【請求項19】
前記対応関係として、前記眼球から前記撮像手段までの距離と、前記複数の光源の発光量との複数の組み合わせが予め定められており、
前記制御手段は、前記距離情報が示す距離と、前記複数の光源の発光量との組み合わせが予め定められていない場合に、前記複数の組み合わせを用いた補間処理により、前記距離情報が示す距離に対応する前記複数の光源の発光量を取得する
ことを特徴とする請求項１８に記載の電子機器。
前記制御手段は、前記距離情報が示す距離と、前記複数の光源の発光量との組み合わせが予め定められていない場合に、前記複数の組み合わせを用いた補間処理により、前記距離情報が示す距離に対応する前記複数の光源の発光量を取得する
ことを特徴とする請求項１８に記載の電子機器。
【請求項20】
前記撮像手段により撮像された前記眼球の画像を取得する第１取得手段をさらに有し、
前記制御手段は、初回撮像時または前記画像に所定量以上の輝度変化が生じた際には、前記眼球から前記撮像手段までの、使用頻度が所定の閾値よりも高い距離に対応する前記複数の光源の発光量で発光するように前記複数の光源を制御する
ことを特徴とする請求項１８に記載の電子機器。
前記制御手段は、初回撮像時または前記画像に所定量以上の輝度変化が生じた際には、前記眼球から前記撮像手段までの、使用頻度が所定の閾値よりも高い距離に対応する前記複数の光源の発光量で発光するように前記複数の光源を制御する
ことを特徴とする請求項１８に記載の電子機器。
【請求項21】
前記撮像手段により撮像された前記眼球の画像を取得する第１取得手段と、
前記画像から視線位置を検出する検出手段と、
をさらに有し、
前記制御手段は、
前記検出手段のキャリブレーション動作中である場合に、前記距離情報または当該距離情報に応じた前記複数の光源の発光量のいずれかを記憶媒体に記憶しておき、
前記キャリブレーション動作中でない場合には、前記キャリブレーション動作中の前記距離情報に応じた前記複数の光源の発光量で発光するように、前記複数の光源を制御する
ことを特徴とする請求項１８に記載の電子機器。
前記画像から視線位置を検出する検出手段と、
をさらに有し、
前記制御手段は、
前記検出手段のキャリブレーション動作中である場合に、前記距離情報または当該距離情報に応じた前記複数の光源の発光量のいずれかを記憶媒体に記憶しておき、
前記キャリブレーション動作中でない場合には、前記キャリブレーション動作中の前記距離情報に応じた前記複数の光源の発光量で発光するように、前記複数の光源を制御する
ことを特徴とする請求項１８に記載の電子機器。
【請求項22】
前記制御手段は、前記複数の光源のそれぞれの発光効率を考慮して、前記複数の光源を制御する
ことを特徴とする請求項１０に記載の電子機器。
ことを特徴とする請求項１０に記載の電子機器。
【請求項23】
眼球から前記眼球を撮像する撮像手段までの距離が第１の距離である場合と、前記距離が前記第１の距離よりも長い第２の距離である場合とで、輝度ムラが略同一である前記眼球の画像が取得されるように制御する制御手段
を有することを特徴とする電子機器。
を有することを特徴とする電子機器。
【請求項24】
複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得ステップと、
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得ステップと、
前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正ステップと
を有することを特徴とする電子機器の制御方法。
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得ステップと、
前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正ステップと
を有することを特徴とする電子機器の制御方法。
【請求項25】
複数の光源により照明された眼球を撮像手段により撮像する撮像ステップと、
前記複数の光源を制御する制御ステップと、
を有し、
前記制御ステップでは、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御する
ことを特徴とする電子機器の制御方法。
前記複数の光源を制御する制御ステップと、
を有し、
前記制御ステップでは、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御する
ことを特徴とする電子機器の制御方法。
【請求項26】
コンピュータを、請求項１～２３のいずれか１項に記載の電子機器の各手段として機能させるためのプログラム。
【請求項27】
コンピュータを、請求項１～２３のいずれか１項に記載の電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、電子機器、電子機器の制御方法、プログラム、および記憶媒体に関する。
【背景技術】
【0002】
ユーザー（観察者）が観察面上のどの位置を観察しているかを検出する方法が提案されている。例えば、特許文献１に開示の技術では、複数の光源からの平行光束をユーザーの眼球の角膜（前眼部）へ投射し、角膜からの反射光が結像した角膜反射像と瞳孔中心との位置関係を利用して、視線が検出される。また、特許文献２の開示の技術では、角膜反射像の水平／垂直方向の座標に基づいて瞳孔円を推定し、瞳孔円の中心座標を視線検出に用いる。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開昭６１－１７２５５２号公報
【特許文献2】特開平４－３４７１３２号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、特許文献１または特許文献２に開示の技術では、複数の光源からユーザーの眼球までの距離が近い場合には遠い場合よりも顕著に眼画像（撮像された眼球の画像）の輝度ムラが発生してしまう。特に、接眼レンズの外に受光レンズとエリアセンサを配置する構成においてより顕著に輝度ムラが発生してしまう。
【0005】
そこで、本発明は、撮像された眼球の画像の輝度ムラを抑制することを目的とする。
【課題を解決するための手段】
【0006】
本発明の第１の態様は、複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得手段と、前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段と、前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正手段とを有することを特徴とする電子機器である。
【0007】
本発明の第２の態様は、眼球を照明する複数の光源と、前記複数の光源により照明された前記眼球を撮像する撮像手段と、前記複数の光源を制御する制御手段と、を有し、前記制御手段は、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御することを特徴とする電子機器である。
【0008】
本発明の第３の態様は、眼球から前記眼球を撮像する撮像手段までの距離が第１の距離である場合と、前記距離が前記第１の距離よりも長い第２の距離である場合とで、輝度ムラが略同一である前記眼球の画像が取得されるように制御する制御手段を有することを特徴とする電子機器である。
【0009】
本発明の第４の態様は、複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得ステップと、前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得ステップと、前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正ステップとを有することを特徴とする電子機器の制御方法である。
【0010】
本発明の第５の態様は、複数の光源により照明された眼球を撮像手段により撮像する撮
像ステップと、前記複数の光源を制御する制御ステップと、を有し、前記制御ステップでは、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御することを特徴とする電子機器の制御方法である。
像ステップと、前記複数の光源を制御する制御ステップと、を有し、前記制御ステップでは、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御することを特徴とする電子機器の制御方法である。
【0011】
本発明の第６の態様は、コンピュータを上述した電子機器の各手段として機能させるためのプログラムである。
【0012】
本発明の第７の態様は、コンピュータを上述した電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体である。
【発明の効果】
【0013】
本発明によれば、撮像された眼球の画像の輝度ムラを抑制することができる。
【図面の簡単な説明】
【0014】
【図1】実施形態１に係るカメラの断面図である。
【図2】実施形態１に係るカメラのブロック図である。
【図3】実施形態１に係る視線検出方法の原理を説明するための図である。
【図4】実施形態１に係る眼画像を示す図である。
【図5】実施形態１に係る眼画像の輝度ムラの発生原理を示す図である。
【図6】実施形態１に係る輝度ムラを説明するための図である。
【図7】実施形態１に係る輝度ムラを抑制した眼画像を示す図である。
【図8】実施形態１に係る複数の光源の配置を示す図である。
【図9】実施形態１に係るキャリブレーション動作のフローチャートである。
【図10】実施形態１に係る撮影動作のフローチャートである。
【図11】実施形態１に係る視線検出動作のフローチャートである。
【図12】実施形態２に係る視線検出動作のフローチャートである。
【図13】実施形態３に係る視線検出動作のフローチャートである。
【図14】実施形態４に係る表示装置の外観図である。
【発明を実施するための形態】
【0015】
以下、図面を参照して本発明の実施形態を説明する。
【0016】
（実施形態１）
＜構成＞
図１は、カメラ１（撮像装置；電子機器）の断面図であり、カメラ１の大まかな内部構成を示す。撮影レンズユニット１Ａ内には、２枚のレンズ１０１，１０２、絞り１１１、絞り駆動部１１２、レンズ駆動モーター１１３、レンズ駆動部材１１４、フォトカプラー１１５、パルス板１１６、マウント接点１１７、焦点調節回路１１８等が含まれている。レンズ駆動部材１１４は駆動ギヤ等からなり、フォトカプラー１１５は、レンズ駆動部材１１４に連動するパルス板１１６の回転を検知して、焦点調節回路１１８に伝える。焦点調節回路１１８は、フォトカプラー１１５からの情報と、カメラ筐体１Ｂからの情報（レンズ駆動量の情報）とに基づいてレンズ駆動モーター１１３を駆動し、レンズ１０１を移動させて合焦位置を変更する。マウント接点１１７は、撮影レンズユニット１Ａとカメラ筐体１Ｂとのインターフェイスである。なお、簡単のために２枚のレンズ１０１，１０２を示したが、実際は２枚より多くのレンズが撮影レンズユニット１Ａ内に含まれている。
＜構成＞
図１は、カメラ１（撮像装置；電子機器）の断面図であり、カメラ１の大まかな内部構成を示す。撮影レンズユニット１Ａ内には、２枚のレンズ１０１，１０２、絞り１１１、絞り駆動部１１２、レンズ駆動モーター１１３、レンズ駆動部材１１４、フォトカプラー１１５、パルス板１１６、マウント接点１１７、焦点調節回路１１８等が含まれている。レンズ駆動部材１１４は駆動ギヤ等からなり、フォトカプラー１１５は、レンズ駆動部材１１４に連動するパルス板１１６の回転を検知して、焦点調節回路１１８に伝える。焦点調節回路１１８は、フォトカプラー１１５からの情報と、カメラ筐体１Ｂからの情報（レンズ駆動量の情報）とに基づいてレンズ駆動モーター１１３を駆動し、レンズ１０１を移動させて合焦位置を変更する。マウント接点１１７は、撮影レンズユニット１Ａとカメラ筐体１Ｂとのインターフェイスである。なお、簡単のために２枚のレンズ１０１，１０２を示したが、実際は２枚より多くのレンズが撮影レンズユニット１Ａ内に含まれている。
【0017】
カメラ筐体１Ｂ内には、撮像素子２、ＣＰＵ３、メモリ部４、表示デバイス１０、表示デバイス駆動回路１１等が含まれている。撮像素子２は、撮影レンズユニット１Ａの予定結像面に配置されている。ＣＰＵ３は、マイクロコンピュータの中央処理部であり、カメラ１全体を制御する。メモリ部４は、撮像素子２により撮像された画像等を記憶する。表
示デバイス１０は、液晶等で構成されており、撮像された画像（被写体像）等を表示デバイス１０の画面（表示面）に表示する。表示デバイス駆動回路１１は、表示デバイス１０を駆動する。ユーザーは、接眼レンズ１２を通して、表示デバイス１０の画面を見ることができる。
示デバイス１０は、液晶等で構成されており、撮像された画像（被写体像）等を表示デバイス１０の画面（表示面）に表示する。表示デバイス駆動回路１１は、表示デバイス１０を駆動する。ユーザーは、接眼レンズ１２を通して、表示デバイス１０の画面を見ることができる。
【0018】
カメラ筐体１Ｂ内には、光源１３ａ，１３ｂ、受光レンズ１５、眼用撮像素子１６等も含まれている。光源１３ａ，１３ｂは、光の角膜反射による反射像（角膜反射像）と瞳孔の関係から視線方向を検出するために従来から一眼レフカメラ等で用いられている光源であり、ユーザーの眼球１４を照明するための光源である。具体的には、光源１３ａ，１３ｂは、ユーザーに対して不感の赤外光を発する赤外発光ダイオード等であり、接眼レンズ１２の周りに配置されている。照明された眼球１４の光学像（眼球像；光源１３ａ，１３ｂから発せられて眼球１４で反射した反射光による像）は、接眼レンズ１２を透過し、受光レンズ１５によって、ＣＣＤ等の光電素子列を２次元的に配した眼用撮像素子１６上に結像される。受光レンズ１５は、眼球１４の瞳孔と眼用撮像素子１６を共役な結像関係に位置付けている。後述する所定のアルゴリズムにより、眼用撮像素子１６上に結像された眼球像における角膜反射像の位置から、眼球１４の視線方向（視線位置；表示デバイス１０の画面における視点）が検出される。カメラ筐体１Ｂの背面には、ユーザーからの各種操作を受け付ける操作部材４１～４３も配置されている。
【0019】
図２は、カメラ１内の電気的構成を示すブロック図である。ＣＰＵ３には、視線検出回路２０１、測光回路２０２、自動焦点検出回路２０３、信号入力回路２０４、表示デバイス駆動回路１１、光源駆動回路２０５等が接続されている。また、ＣＰＵ３は、撮影レンズユニット１Ａ内に配置された焦点調節回路１１８と、撮影レンズユニット１Ａ内の絞り駆動部１１２に含まれた絞り制御回路２０６とに、マウント接点１１７を介して信号を伝達する。ＣＰＵ３に付随したメモリ部４は、撮像素子２および眼用撮像素子１６からの撮像信号の記憶機能を有する。
【0020】
視線検出回路２０１は、眼用撮像素子１６（ＣＣＤ－ＥＹＥ）上に眼球像が結像した状態での眼用撮像素子１６の出力（眼を撮像した眼画像）をＡ／Ｄ変換し、その結果をＣＰＵ３に送信する。ＣＰＵ３は、後述する所定のアルゴリズムに従って眼画像から視線検出に必要な特徴点を抽出し、特徴点の位置からユーザーの視線（表示デバイス１０の画面における視点）を算出する。
【0021】
測光回路２０２は、測光センサの役割を兼ねた撮像素子２から得られる信号、具体的には被写界の明るさに対応した輝度信号の増幅、対数圧縮、Ａ／Ｄ変換等を行い、その結果を被写界輝度情報としてＣＰＵ３に送る。
【0022】
自動焦点検出回路２０３は、撮像素子２におけるＣＣＤの中に含まれる、位相差検出のために使用される複数の検出素子（複数の画素）からの信号電圧をＡ／Ｄ変換し、ＣＰＵ３に送る。ＣＰＵ３は、複数の検出素子の信号から、各焦点検出ポイントに対応する被写体までの距離を演算する。これは撮像面位相差ＡＦとして知られる公知の技術である。実施例１では、一例として、図４のファインダ内視野像（表示デバイス１０の画面）に示した１８０か所に対応する撮像面上の１８０か所のそれぞれに、焦点検出ポイントがあるとする。
【0023】
信号入力回路２０４には、レリーズボタンの第１ストロークでＯＮし、カメラ１の測光、測距、視線検出動作等を開始するためのスイッチＳＷ１と、レリーズボタンの第２ストロークでＯＮし、撮影動作を開始するためのスイッチＳＷ２が接続されている。スイッチＳＷ１，ＳＷ２からのＯＮ信号が信号入力回路２０４に入力され、ＣＰＵ３に送信される。
【0024】
光源駆動回路２０５は、光源１３ａ，１３ｂを駆動する。
【0025】
画像処理回路２０７は、画像データに対して予め定められた画像処理を適用し、信号や画像データを生成したり、各種の情報を取得および／または生成したりする。画像処理回路２０７は例えば、特定の機能を実現するように設計されたＡＳＩＣのような専用のハードウェア回路であってもよいし、ＤＳＰのようなプロセッサがソフトウェアを実行することで特定の機能を実現するように構成されてもよい。
【0026】
ここで、画像処理回路２０７が適用する画像処理には、前処理、色補間処理、補正処理、検出処理、データ加工処理などが含まれる。前処理には、信号増幅、基準レベル調整、欠陥画素補正などが含まれる。色補間処理は、画像データに含まれていない色成分の値を補間する処理であり、デモザイク処理とも呼ばれる。補正処理には、ホワイトバランス調整、画像の輝度を補正する処理、撮影レンズユニット１Ａの光学収差を補正する処理、色を補正する処理などが含まれる。検出処理には、特徴領域（たとえば顔領域、人体領域、物体領域）の検出および追尾処理、人物の認識処理などが含まれる。データ加工処理には、スケーリング処理、符号化および復号処理、ヘッダ情報生成処理などが含まれる。なお、これらは画像処理回路２０７が実施可能な画像処理の例示であり、画像処理回路２０７が実施する画像処理を限定するものではない。
【0027】
＜視線検出動作の原理＞
次に図３，４（ａ），４（ｂ）を参照して、視線検出動作の原理に関して説明する。図３は、視線検出方法の原理を説明するための図であり、視線検出を行うための光学系の概略図である。図３に示すように、光源１３ａ，１３ｂは受光レンズ１５の光軸に対して略対称に配置され、ユーザーの眼球１４を照らす。光源１３ａ，１３ｂから発せられて眼球１４で反射した光の一部は、受光レンズ１５によって、眼用撮像素子１６に集光する。
次に図３，４（ａ），４（ｂ）を参照して、視線検出動作の原理に関して説明する。図３は、視線検出方法の原理を説明するための図であり、視線検出を行うための光学系の概略図である。図３に示すように、光源１３ａ，１３ｂは受光レンズ１５の光軸に対して略対称に配置され、ユーザーの眼球１４を照らす。光源１３ａ，１３ｂから発せられて眼球１４で反射した光の一部は、受光レンズ１５によって、眼用撮像素子１６に集光する。
【0028】
図４（ａ）は眼用撮像素子１６で撮像された眼画像（眼用撮像素子１６に投影された眼球像）の概略図である。眼画像から光源１３ａ，１３ｂの角膜反射像Ｐｄ，Ｐｅ及び瞳孔中心ｃが検出され、眼球１４の回転角θｘが算出される。次に回転角θｘとキャリブレーションデータとにより、表示デバイス１０上におけるユーザー（観察者）の視線位置が算出される。
【0029】
まず、角膜反射像Ｐｄ，Ｐｅの検出方法を説明する。図４（ａ）は、眼画像の水平方向をＸ軸、垂直方向をＹ軸とする。このとき、光源１３ａ，１３ｂの角膜反射像Ｐｄ，Ｐｅは、受光レンズ１５により集光され、眼用撮像素子１６上に結像して、眼画像における角膜反射像Ｐｄ’，Ｐｅ’となる。角膜反射像Ｐｄ’の座標を（Ｘｄ，Ｙｄ）、角膜反射像Ｐｅ’の座標を（Ｘｅ，Ｙｅ）とする。同様に、瞳孔１４１の端部ａ，ｂからの光束は、眼用撮像素子１６上に結像して、眼画像における瞳孔端像ａ’，ｂ’となる。瞳孔端像ａ’の座標を（Ｘａ，Ｙａ）、瞳孔端像ｂ’の座標を（Ｘｂ，Ｙｂ）とする。また、瞳孔中心ｃからの光束は、眼用撮像素子１６上に結像して、瞳孔中心像ｃ’となる。
【0030】
図４（ｂ）は、図４（ａ）の眼画像における任意の１行分（以下、検索行という）の輝度情報（輝度分布）を示す。図４（ｂ）に示すように角膜反射像Ｐｄ’，Ｐｅ’では、輝度閾値ＴＨ１以上の極端に強いレベルの輝度が得られる。検索行を変えて輝度のレベル判定を順次行うことで、眼画像全体に対して、輝度が輝度閾値ＴＨ１以上となった座標が検出される。ひいては、輝度が輝度閾値ＴＨ１以上となった２つの領域が検出される。それら２つの領域それぞれの重心を演算することで、角膜反射像Ｐｄ’の座標（Ｘｄ，Ｙｄ）、角膜反射像Ｐｅ’の座標（Ｘｅ，Ｙｅ）を得ることができる。
【0031】
次に、瞳孔１４１の中心（輪郭中心）ｃの検出方法を説明する。図４（ｂ）において、瞳孔輪郭部（瞳孔端部）の座標を（Ｘａ，Ｙａ），（Ｘｂ，Ｙｂ）とする。瞳孔１４１の領域に相当する部分では座標（Ｘｄ，Ｙｄ），（Ｘｅ，Ｙｅ）の位置を除き、輝度閾値ＴＨ２以下の低いレベルの輝度が得られる。これに対し、瞳孔１４１の外側の光彩１４３の領域に相当する部分では、輝度閾値ＴＨ１と輝度閾値ＴＨ２の間である比較的明るいレベルの輝度が得られる。つまり、輝度閾値ＴＨ１と輝度閾値ＴＨ２の間の明るいレベルから、輝度閾値ＴＨ２以下のレベルとなる座標（Ｘａ，Ｙａ），（Ｘｂ，Ｙｂ）が瞳孔輪郭部と判定される。検索行を変えて、輝度のレベル判定を順次行うことで、眼画像全体に対して瞳孔１４１の輪郭座標を検出することができる。なお、瞳孔１４１の複数の輪郭座標を、瞳孔１４１の輪郭座標群とも称する。また、瞳孔１４１の輪郭座標の検出を、輪郭検出とも称する。
【0032】
瞳孔１４１の輪郭座標を用いた真円近似法により、瞳孔１４１の中心ｃの座標および瞳孔１４１の半径ｒを演算する。ここでは、輪郭座標が２０個あるとし、輪郭座標を（Ｘｉ，Ｙｉ）（ここで、ｉ＝１～２０）で表した場合、瞳孔１４１の中心ｃの座標（Ｘ０，Ｙ０）と半径ｒとは以下の式１で算出できる。
【数1】
【0033】
次に、眼球像の結像倍率βの算出方法を説明する。結像倍率βは受光レンズ１５に対する眼球１４の位置により決まる倍率で、角膜反射像Ｐｄ’，Ｐｅ’の間隔（Ｘｄ－Ｘｅ）の関数を用いて求めることができる。
【0034】
角膜反射像Ｐｄ’と角膜反射像Ｐｅ’の中点の座標と角膜１４２の曲率中心Ｏの座標とはほぼ一致する。このため、角膜１４２の曲率中心Ｏから瞳孔１４１の中心ｃまでの標準的な距離をＯｃとすると、眼球１４の光軸のＺ－Ｘ平面（Ｙ軸に垂直な平面）内の眼球１４の回転角θｘは以下の式２で算出できる。Ｚ－Ｙ平面（Ｘ軸に垂直な平面）内での眼球１４の回転角θｙも、回転角θｘの算出方法と同様の方法で算出できる。
β×Ｏｃ×ＳＩＮθｘ≒｛（Ｘｄ＋Ｘｅ）／２｝－Ｘ０ ・・・（式２）
β×Ｏｃ×ＳＩＮθｘ≒｛（Ｘｄ＋Ｘｅ）／２｝－Ｘ０ ・・・（式２）
【0035】
算出された回転角θｘ，θｙを用いて、表示デバイス１０の画面におけるユーザーの視点（視線が注がれた位置；ユーザーが見ている位置）を求める（推定する）。視線位置（視点の座標）（Ｈｘ，Ｈｙ）が瞳孔１４１の中心ｃに対応する座標であるとすると、視線位置（Ｈｘ，Ｈｙ）は以下の式３，４で算出できる。
Ｈｘ＝ｍ×（θｘ－θｘ＿ｃａｌ） ・・・（式３）
Ｈｙ＝ｍ×（θｙ－θｙ＿ｃａｌ） ・・・（式４）
Ｈｘ＝ｍ×（θｘ－θｘ＿ｃａｌ） ・・・（式３）
Ｈｙ＝ｍ×（θｙ－θｙ＿ｃａｌ） ・・・（式４）
【0036】
式３，４のパラメータｍは、カメラ１のファインダ光学系（受光レンズ１５等）の構成で定まる定数であり、回転角θｘ，θｙを表示デバイス１０の画面において瞳孔１４１の中心ｃに対応する座標に変換する変換係数である。パラメータｍは、あらかじめ決定されてメモリ部４に格納されるとする。また、パラメータ（補正値）θｘ＿ｃａｌ，θｙ＿ｃａｌは、視線の個人差を補正する視線補正パラメータであり、後述するキャリブレーション作業を行うことで取得される。パラメータθｘ＿ｃａｌ，θｙ＿ｃａｌは、視線検出動作が開始する前にメモリ部４に格納されるとする。
【0037】
キャリブレーション作業とは、眼球形状の個人差等の要因により、ユーザー（使用者、撮影者）が実際に注視している位置と演算された視線位置との位置ずれを抑制するためのオフセット量を得る作業である。キャリブレーション動作時には、表示デバイス１０にキャリブレーション用の画像が表示される。キャリブレーション用の画像の中心部には、ユーザーが注視するためのターゲット枠が表示される。キャリブレーション動作時の回転角θｘ＿ｃａｌ，θｙ＿ｃａｌが取得され、オフセット量（補正値）としてメモリ部４に格納される。なお、キャリブレーション動作では、ターゲット枠を複数位置に表示し、複数位置それぞれの回転角で複数位置間を補間することで、視線位置の検出精度を向上することが可能である。以上が、視線検出動作の原理に関する説明である。
【0038】
＜眼画像の輝度ムラの発生原理と抑制方法＞
次に、図５（ａ），５（ｂ），６（ａ），６（ｂ），７（ａ），７（ｂ），８を参照して、眼画像の輝度ムラの発生原理と抑制方法とについて説明する。
次に、図５（ａ），５（ｂ），６（ａ），６（ｂ），７（ａ），７（ｂ），８を参照して、眼画像の輝度ムラの発生原理と抑制方法とについて説明する。
【0039】
図５（ａ），５（ｂ）は輝度ムラの発生原理を示す図である。図５（ａ），５（ｂ）では図３と同様に、光源１３ａ，１３ｂは眼球１４を照明する。ユーザーは表示デバイス１０に表示された画像を見ている。ユーザーの眼球１４で反射した光の一部は眼用撮像素子１６に集光する。図５（ｂ）のアイポイント（接眼レンズ１２から眼球１４までの距離）５００は、図５（ａ）のアイポイント５００よりも長い。光線５１０ａ，５１０ｂは、光源１３ａ，１３ｂが主に照射している領域（エリア）から反射した光が眼用撮像素子１６に到達するまでの光路を示す。
【0040】
図６（ａ）は、図５（ａ）に示すアイポイント５００のときに眼用撮像素子１６で撮像された眼画像の輝度ムラを説明するための図である。図６（ｂ）は、図５（ｂ）に示すアイポイント５００のときに眼用撮像素子１６で撮像された眼画像の輝度ムラを説明するための図である。図６（ａ）の眼画像は、画面下部が明るく、画面上部が暗い輝度ムラが発生している。図６（ａ）に示すような輝度ムラは、光源１３ａ，１３ｂが主に照射している領域の光量が、それぞれ光線５１０ａ，５１０ｂの距離の二乗に反比例することに起因する。図６（ｂ）の眼画像の輝度ムラが図６（ａ）の眼画像の輝度ムラよりも小さいのは、図５（ｂ）における光線５１０ａと光線５１０ｂとの差が、図５（ａ）における光線５１０ａと光線５１０ｂとの差よりも小さいためである。
【0041】
輝度ムラが発生した画像を用いて図４（ｂ）に示した視線検出動作を行う場合、瞳孔輪郭部の座標（Ｘａ，Ｙａ），（Ｘｂ，Ｙｂ）を検出することが困難となる。検出される瞳孔の輪郭座標が少なくなると、真円近似法による瞳孔の中心ｃの座標（Ｘ０、Ｙ０）および半径ｒの演算結果も悪化する。演算結果が悪化すると、視線検出のエラー（視線検出の失敗；視点の検出誤差の増大）が生じ、適切な焦点検出及び調整ができない状態に陥いる可能性がある。アイポイントに応じて、画像内で輝度閾値ＴＨ２を変更する方法もあるが、演算量が大きくなってしまう。
【0042】
そこで、輝度ムラを抑制する第一の方法では、カメラ１のＣＰＵ３は、輝度ムラが生じた眼画像に対して、アイポイントに応じた補正値（補正量）でシェーディング補正を行う。図７（ａ），７（ｂ）は、図６（ａ），６（ｂ）の眼画像に対して各アイポイントに応じたシェーディング補正を適用した眼画像である。図７（ａ），７（ｂ）の眼画像は、図６（ａ），６（ｂ）の眼画像に比べて輝度ムラが抑制されており、図７（ａ）と図７（ｂ）の輝度ムラが略同一であることが確認できる。
【0043】
輝度ムラを抑制する第二の方法では、ＣＰＵ３は、アイポイントに応じて光源１３ａ，１３ｂの発光量（照明光量）をそれぞれ変更する。例えば、図５（ａ）のようにアイポイント５００が所定の距離よりも短い場合には、ＣＰＵ３は、光源１３ａの発光量を光源１３ｂの発光量よりも相対的に大きくする。図５（ｂ）のようにアイポイントが所定の距離よりも長い場合には、ＣＰＵ３は、光源１３ａと光源１３ｂとの発光量差を、図５（ａ）の発光量差よりも小さくする。第二の方法でも、第一の方法と同様の効果が得られる。なお、光源１３ａ，１３ｂが発光ダイオードの場合には、ＣＰＵ３は、例えば光源を駆動する駆動信号の振幅とデューティー比の少なくとも一方を変更して、光源間の発光量差を調整する。
【0044】
図８（ａ）～８（ｃ）は、複数の光源の配置例を示す図である。図８（ａ）～８（ｃ）に示すように接眼レンズの周りに複数の光源が存在する場合には、ＣＰＵ３は、複数の光源を複数の光源群（図８（ａ）～８（ｃ）では４つの光源群１３ｃ～１３ｆ）に分けて、光源群ごとに発光量を調整してもよい。各光源群は、１つの光源、または距離が近い２つ以上の光源を含む。また、ＣＰＵ３は、光源群の中で発光（点灯）する光源の数を変更することで、光源群間の発光量差を調整してもよい。
【0045】
また、ＣＰＵ３は、第一の手法と第二の手法とを組み合わせて輝度ムラを抑制してもよい。以上が、眼画像の輝度ムラの発生原理と抑制方法とに関する説明である。
【0046】
以下、図９～１１を参照して、実施形態１におけるキャリブレーション動作、撮影動作、視線検出動作を説明する。
【0047】
＜キャリブレーション動作＞
図９は、視線検出のキャリブレーション動作を説明するためのフローチャートである。
図９は、視線検出のキャリブレーション動作を説明するためのフローチャートである。
【0048】
ステップＳ９０１では、ＣＰＵ３は、表示デバイス１０にキャリブレーション用画像を表示する。キャリブレーション用画像は、例えば、表示デバイス１０の表示面上でユーザーの見るべき位置を示す画像であればよい。
【0049】
ステップＳ９０２では、ＣＰＵ３は、光源１３ａ，１３ｂの赤外光をユーザーの眼球１４に向けて放射する。赤外光によって照明された眼球像は、受光レンズ１５を通して眼用撮像素子１６上に結像され、眼用撮像素子１６により光電変換される。これにより、処理可能な眼画像の電気信号が得られる。
【0050】
ステップＳ９０３では、ＣＰＵ３は、眼用撮像素子１６から眼画像（眼球画像信号；眼画像の電気信号）を受信する。
【0051】
ステップＳ９０４では、ＣＰＵ３は、ステップＳ９０３で受信した眼画像から、光源１３ａ，１３ｂの角膜反射像Ｐｄ，Ｐｅに対応する座標と、瞳孔１４１の輪郭に対応する座標とを求める。
【0052】
ステップＳ９０５では、ＣＰＵ３は、接眼レンズ１２からユーザーの眼球１４までの距離（アイポイント）を示す距離情報を取得する。例えば、ＣＰＵ３は、ステップＳ９０３で受信した眼画像の角膜反射像Ｐｄ，Ｐｅの間隔からアイポイントを算出する。アイポイントは公知の技術を用いて算出できる。
【0053】
ステップＳ９０６では、ＣＰＵ３は、ステップＳ９０４で求めた瞳孔１４１の輪郭座標を用いて、真円近似法により瞳孔１４１の中心ｃの座標および半径ｒを算出する。
【0054】
ステップＳ９０７では、ＣＰＵ３は、眼球像の結像倍率βを算出する。ステップＳ９０８では、ＣＰＵ３は、受光レンズ１５の光軸に対する眼球１４の光軸の回転角θｘ，θｙを算出する。
【0055】
ステップＳ９０９では、ＣＰＵ３は、ステップＳ９０８で算出した回転角θｘ，θｙを補正値θｘ＿ｃａｌ，θｙ＿ｃａｌとしてメモリ部４に格納する。また、ＣＰＵ３は、ステップＳ９０５で算出したアイポイントをメモリ部４に格納する。なお、ステップＳ９０９では、ＣＰＵ３は、アイポイントに応じたシェーディング補正値（シェーディング補正の補正値、周辺光量落ち補正値）または複数の光源（例えば光源１３ａ，１３ｂ）の発光量をメモリ部４に格納してもよい。ステップＳ９０９の処理を終了すると、ＣＰＵ３は、視線検出のキャリブレーション動作を終了する。
【0056】
＜撮影動作＞
図９で説明した視線検出のキャリブレーション動作後には、撮影動作が行われる。図１０は、視線検出機能を有するカメラ１の撮影動作を説明するためのフローチャートである。ＣＰＵ３は、カメラ１の電源がＯＮされることにより図１０のフローを開始する。
図９で説明した視線検出のキャリブレーション動作後には、撮影動作が行われる。図１０は、視線検出機能を有するカメラ１の撮影動作を説明するためのフローチャートである。ＣＰＵ３は、カメラ１の電源がＯＮされることにより図１０のフローを開始する。
【0057】
ステップＳ１００１では、ＣＰＵ３は、撮像素子２を駆動し、画像を取得（撮像）する。ＣＰＵ３は、取得した画像を表示デバイス１０に表示（ライブビュー表示；ＬＶ表示）する。
【0058】
ステップＳ１００２では、ＣＰＵ３は、撮影動作を終了するか否かを判定する。例えば、ＣＰＵ３は、カメラ１の電源をＯＦＦにする指示があった場合に、撮影動作を終了すると判定する。ＣＰＵ３は、撮影動作を終了すると判定した場合に本フローを終了し、そうでない場合にステップＳ１００３に進む。
【0059】
ステップＳ１００３では、ＣＰＵ３は、視線検出動作を行う。視線検出動作の詳細は図１１のフローチャートを用いて後述する。
【0060】
ステップＳ１００４では、ＣＰＵ３は、ステップＳ１００３で検出した眼球の回転角θｘ，θｙを補正する。ＣＰＵ３は、ステップＳ１００３で検出した回転角θｘ，θｙと、ステップＳ９０９で記憶した補正値θｘ＿ｃａｌ，θｙ＿ｃａｌとから、視線位置（Ｈｘ，Ｈｙ）を算出する。
【0061】
ステップＳ１００５では、ＣＰＵ３は、表示デバイス１０のうちステップＳ１００４で算出された視線位置に、ＡＦ（オートフォーカス）枠を表示する。
【0062】
ステップＳ１００６では、ＣＰＵ３は、スイッチＳＷ１がＯＮであるか否か（レリーズボタンが半押しされているか否か）を判定する。ＣＰＵ３は、スイッチＳＷ１がＯＮである場合にはステップＳ１００７に進み、そうでない場合にはステップＳ１００１に戻り、画像の表示と視線検出動作とを繰り返す。
【0063】
ステップＳ１００７では、ＣＰＵ３は、ＡＦ動作を行う。撮像素子２は位相差検出のために使用される複数の画素から構成されている。ＣＰＵ３は、複数の画素の信号から、公知の技術である撮像面位相差ＡＦにより、ステップＳ１００６で決定したＡＦ枠に対応する被写体の焦点状態を演算し、レンズ位置を制御する。
【0064】
ステップＳ１００８では、ＣＰＵ３は、レリーズボタンがさらに押しこまれ、スイッチＳＷ２がＯＮになったか否か（レリーズボタンの全押しが行われたか否か）を判定する。ＣＰＵ３は、スイッチＳＷ２がＯＮになった場合にはステップＳ１００９に進み、そうでない場合にはＳ１００６に戻り、同じ位置でＡＦ動作を繰り返す。
【0065】
ステップＳ１００９では、ＣＰＵ３は、撮像素子２を駆動して画像を取得し、取得した画像を不図示の記憶媒体に格納する。その後、ＣＰＵ３は、ステップＳ１００１へ戻り処理を繰り返す。
【0066】
【0067】
ステップＳ１１０１では、ＣＰＵ３は、初回撮像時（視線検出動作が初回）であるか、前回撮像時に所定の環境変化が生じたか、またはそれら以外であるかを判定する。ＣＰＵ３は、初回撮像時である場合または前回撮像時に所定の環境変化が生じた場合にはステップＳ１１０２に進み、そうでない場合にはステップＳ１１０８に進む。ＣＰＵ３は、例えば、前回撮像時に撮像された眼画像の輝度が、角膜反射像Ｐｄ，Ｐｅおよび輪郭座標の検出に適した輝度（所定の輝度範囲内の輝度）でなかった場合に、所定の環境変化が生じたと判定してもよい。例えば、アイポイントが前々回以前の撮像時よりも急に短くなった場合や、外光が漏れ込んだ場合などは、所定量以上の輝度変化が生じ、角膜反射像Ｐｄ，Ｐｅおよび輪郭座標の検出が困難となる。したがって、適切な露光量、照明光量、シェーディング補正値を決定するため、ＣＰＵ３は、ステップＳ１１０２～Ｓ１１０７の処理を再度実行する。
【0068】
ステップＳ１１０２～Ｓ１１０７では、ＣＰＵ３は、アイポイントを検知（算出）して、次回撮像時の露光量、発光量、シェーディング補正値を決定する。ステップＳ１１０２～Ｓ１１０５の処理は、図９のステップＳ９０２～９０５の処理と同じである。
【0069】
なお、ステップＳ１１０２では、ＣＰＵ３は、光源１３ａの発光量を光源１３ｂの発光量と同等にしてもよい。もしくは、ＣＰＵ３は、露光量の決定処理とアイポイントの検知処理とに適した発光量差をつけて、光源１３ａおよび光源１３ｂの発光量を定めてもよい。例えば、ＣＰＵ３は、使用頻度が所定の閾値よりも高いアイポイントで眼画像の輝度ムラが抑制されるように、光源１３ａおよび光源１３ｂの発光量を定めてもよい。もしくは、ＣＰＵ３は、光源１３ａおよび光源１３ｂの発光量を、キャリブレーション動作中（ステップＳ９０９）にメモリ部４に記憶したアイポイントに応じた発光量としてもよい。
【0070】
ステップＳ１１０６では、ＣＰＵ３は、次回撮像時（次回の眼用撮像素子１６の電荷蓄積時）の露光量を決定する。例えば、ステップＳ１１０６では、ＣＰＵ３は、瞳孔の輪郭および角膜反射像が所望の明るさで写った眼画像が得られるように、眼用撮像素子１６の蓄積時間またはゲイン値を決定する。
【0071】
ステップＳ１１０７では、ＣＰＵ３は、ステップＳ１１０５で算出したアイポイントに応じて、次回撮像時の発光量とシェーディング補正値とを決定する。ここで、アイポイントと複数の光源の発光量との対応関係、および、アイポイントとシェーディング補正値との対応関係は予め定められている。予め定められている発光量またはシェーディング補正
値を用いることで、複数の光源が設けられている場合にも、アイポイントに応じて視線検出に適した眼画像を迅速に取得することができる。
値を用いることで、複数の光源が設けられている場合にも、アイポイントに応じて視線検出に適した眼画像を迅速に取得することができる。
【0072】
各アイポイントにおける複数の光源の発光量について図５（ａ），５（ｂ），８（ａ）を参照して説明する。ＣＰＵ３は、各アイポイントにおいて、複数の光源と眼用撮像素子１６との位置関係に基づく発光量で発光するように、複数の光源を制御する。例えば、複数の光源は、光源群１３ｄ（第１の光源；光源群）と光源群１３ｃ（第２の光源；光源群）とを含む、個別に発光量を制御可能な複数の光源群に分類されているとする。光源群１３ｃは、眼用撮像素子１６からの距離が眼用撮像素子１６から光源群１３ｄまでの距離よりも長い。このような場合、ＣＰＵ３は、光源群１３ｃの発光量を光源群１３ｄの発光量よりも大きくしてもよい。例えば、ＣＰＵ３は、光源群１３ｄにおいて点灯させる光源の数よりも多くの数の光源を、光源群１３ｃにおいて点灯させてもよい。なお、光源群１３ｃに含まれる光源の数が、光源群１３ｄに含まれる光源の数よりも多くなるように、光源が配置されてもよい。これにより、光源群１３ｄが照射している領域よりも光源群１３ｃが照射している領域が暗くなることを抑制できる。また、ＣＰＵ３は、アイポイントが第１の距離である場合（図５（ａ））に、第１の距離よりも長い第２の距離である場合（図５（ｂ））に比べて、光源間の発光量差を大きくしてもよい。これにより、アイポイントが所定の距離より短く輝度ムラが発生しやすいような場合にも、より効果的に輝度ムラを抑制することができる。このようなアイポイントと複数の光源の発光量との複数の組み合わせが予め定められているとよい。
【0073】
なお、眼用撮像素子１６からの距離が眼用撮像素子１６から第２の光源群（光源）までの距離以上である第３の光源群（光源）を、カメラ１がさらに備える場合には、ＣＰＵ３は、第３の光源群の発光量を第２の光源群の発光量よりも大きくしてもよい。例えば、図８（ａ）～８（ｃ）では、眼用撮像素子１６から各光源群までの距離の大小関係は、光源群１３ｃまでの距離＞光源群１３ｅ（１３ｆ）までの距離＞光源群１３ｄまでの距離となっている。図８（ａ）の例では、ＣＰＵ３は、各光源群の発光量の大小関係が、光源群１３ｃの発光量＞光源群１３ｅ（１３ｆ）の発光量＞光源群１３ｄの発光量となるように制御する。また、ＣＰＵ３は、各光源群に含まれる光源の発光量の大小関係が、光源群１３ｃに含まれる光源の発光量＞光源群１３ｅ（１３ｆ）に含まれる光源の発光量＞光源群１３ｄに含まれる光源の発光量となるように制御してもよい。なお、光源の発光量の大小関係は、光源群１３ｃに含まれる光源の発光量＞光源群１３ｅ（１３ｆ）に含まれる光源の発光量＞光源群１３ｄに含まれる光源の発光量でなくてもよい。同様に、光源群の発光量の大小関係は、光源群１３ｃの発光量＞光源群１３ｅ（１３ｆ）の発光量＞光源群１３ｄの発光量でなくてもよい。
【0074】
例えば、ＣＰＵ３は、第３の光源群の発光量を第２の光源群の発光量より大きくしなくてもよい。ＣＰＵ３は、各光源群に含まれる光源の数も考慮して、各光源の発光量を制御してもよい。図８（ｂ）の例では、光源群１３ｅ（１３ｆ）に含まれる光源の数は、光源群１３ｃに含まれる光源の数よりも少ない。図８（ｂ）のような場合に、ＣＰＵ３は、各光源群の発光量の大小関係が、光源群１３ｅ（１３ｆ）の発光量＞光源群１３ｃの発光量＞光源群１３ｄの発光量となるように制御してもよい。また、ＣＰＵ３は、各光源群に含まれる光源の発光量の大小関係が、光源群１３ｅ（１３ｆ）に含まれる光源の発光量＞光源群１３ｃに含まれる光源の発光量＞光源群１３ｄに含まれる光源の発光量となるように制御してもよい。これにより、光源群１３ｅが照射している領域が他の光源群が照射している領域よりも暗くなることを抑制することができる。
【0075】
なお、光源群に含まれる光源の数によっては、眼用撮像素子１６からの距離が最も短い光源群の発光量を、最も小さくしない場合もある。図８（ｃ）の例では、眼用撮像素子１６からの距離が最も短い光源群である光源群１３ｄの光源の数は、光源群１３ｃ，１３ｅ
の光源の数よりも少ない。図８（ｃ）のような場合に、ＣＰＵ３は、各光源群の発光量の大小関係が、光源群１３ｄの発光量＞光源群１３ｅ（１３ｆ）の発光量＞光源群１３ｃの発光量となるように制御してもよい。また、ＣＰＵ３は、各光源群に含まれる光源の発光量の大小関係が、光源群１３ｄに含まれる光源の発光量＞光源群１３ｅ（１３ｆ）に含まれる光源の発光量＞光源群１３ｃに含まれる光源の発光量となるように制御してもよい。これにより、光源群１３ｄが照射している領域が他の光源群が照射している領域よりも暗くなることを抑制することができる。このように、ＣＰＵ３は、眼用撮像素子１６からの各光源までの距離または各光源群に含まれる光源の数を考慮して、各光源の発光量を制御することで、輝度ムラを抑制することができる。なお、図８（ａ）～８（ｃ）の例では、光源群１３ｃ～１３ｆについて説明したが、少なくともいずれか１つが光源群ではなく光源であってもよい。
の光源の数よりも少ない。図８（ｃ）のような場合に、ＣＰＵ３は、各光源群の発光量の大小関係が、光源群１３ｄの発光量＞光源群１３ｅ（１３ｆ）の発光量＞光源群１３ｃの発光量となるように制御してもよい。また、ＣＰＵ３は、各光源群に含まれる光源の発光量の大小関係が、光源群１３ｄに含まれる光源の発光量＞光源群１３ｅ（１３ｆ）に含まれる光源の発光量＞光源群１３ｃに含まれる光源の発光量となるように制御してもよい。これにより、光源群１３ｄが照射している領域が他の光源群が照射している領域よりも暗くなることを抑制することができる。このように、ＣＰＵ３は、眼用撮像素子１６からの各光源までの距離または各光源群に含まれる光源の数を考慮して、各光源の発光量を制御することで、輝度ムラを抑制することができる。なお、図８（ａ）～８（ｃ）の例では、光源群１３ｃ～１３ｆについて説明したが、少なくともいずれか１つが光源群ではなく光源であってもよい。
【0076】
各アイポイントにおけるシェーディング補正値について図５（ａ），５（ｂ），８を参照して説明する。ＣＰＵ３は、アイポイントが第１の距離である場合（図５（ａ））に、第１の距離よりも長い第２の距離である場合（図５（ｂ））に比べて補正量を大きくするとよい。例えば、アイポイントが第１の距離である場合に、第２の距離である場合に比べて、光源群１３ｃが照射する領域（眼球の一部）に対応する画像領域（眼画像の一部）の補正量を、光源群１３ｄが照射する領域に対応する画像領域の補正量よりも大きくするとよい。このようなアイポイントとシェーディング補正値との複数の組み合わせが予め定められているとよい。
【0077】
例えば、アイポイント毎に、光源１３ａおよび光源１３ｂの発光量とシェーディング補正値とがメモリ部４に保持されている。ＣＰＵ３は、ステップＳ１１０５で算出したアイポイントに対応する発光量とシェーディング補正値とをメモリ部４から読み出して、次回演算時（撮像時）に用いる。ステップＳ１１０５で算出したアイポイントがメモリ部４に保持されたアイポイントの間の距離である場合には、ＣＰＵ３は、補間処理を行ってもよい。つまり、ステップＳ１１０５で算出したアイポイントについて、アイポイントと、発光量またはシェーディング補正値との組み合わせが予め定められていない場合には、ＣＰＵ３は、補間処理を行う。例えば、ＣＰＵ３は、メモリ部４に保持されたアイポイントのうち、算出したアイポイントに近いアイポイントと発光量との複数の組み合わせを用いた補間処理により、算出したアイポイントに対応する発光量を取得する。シェーディング補正値の補間処理も同様である。もしくは、ＣＰＵ３は、キャリブレーション動作中（ステップＳ９０９）に、アイポイントに応じた発光量とシェーディング補正値とをメモリ部４に格納しておく。ステップＳ１１０７では、ＣＰＵ３は、キャリブレーション時のアイポイントに応じた発光量とシェーディング補正値とをメモリ部４から読み出してもよい。なお、ＣＰＵ３は、メモリ部４ではなく外部の記憶媒体に記憶された情報を参照して、発光量またはシェーディング補正値を決定してもよい。
【0078】
このように、初回撮像時または前回撮像時に所定の環境変化が生じた際には、眼画像の輝度ムラを補正せず次回の撮像に進むことで、露光条件をいち早く決定してアイポイントや瞳孔などを検知することができる。
【0079】
ステップＳ１１０８では、ＣＰＵ３は、ステップＳ１１０７もしくはステップＳ１１１７で決定した発光量で、光源１３ａ，１３ｂの赤外光をユーザーの眼球１４に向けて放射する。
【0080】
ステップＳ１１１０では、ＣＰＵ３は、ステップＳ１１０９で得られた眼画像に対して、ステップＳ１１０７もしくはステップＳ１１１７で決定した補正値でシェーディング補正を行う。
【0081】
ステップＳ１１０９，Ｓ１１１１～Ｓ１１１５の処理は、図９のステップＳ９０３～Ｓ９０８の処理と同じである。また、ステップＳ１１１６の処理は、ステップＳ１１０６の処理と同じである。
【0082】
ステップＳ１１１７では、ＣＰＵ３は、ステップＳ１１１２で算出したアイポイントに応じて、ステップＳ１１０７の処理と同様に次回撮像時の発光量とシェーディング補正値とを決定する。ステップＳ１１１７の処理を終了すると、ＣＰＵ３は、撮影時の視線検出動作を終了する。
【0083】
なお、複数の光源が発光ダイオードから構成され、発光ダイオードの発光量が個体毎にばらつく場合には、ＣＰＵ３は、複数の光源それぞれの発光効率を考慮して、複数の光源の発光量を制御（調整）するとよい。ＣＰＵ３は、発光効率を考慮することで、メモリ部４に保持された発光量での発光を高精度に実現できる。したがって、輝度ムラを高精度に抑制できる。もしくは視線検出装置の個体毎に各アイポイントで輝度ムラを測定し、輝度ムラを抑制する発光量とシェーディング補正値とをメモリ部４に保持してもよい。
【0084】
なお、図１１の例では、初回撮像時または前回撮像時に所定の環境変化があった場合には、ＣＰＵ３は、瞳孔の中心座標等の算出処理（ステップＳ１１１３～Ｓ１１１５の処理）は行わないが、瞳孔の中心座標等の算出処理を行ってもよい。例えば、ＣＰＵ３は、使用頻度が所定の閾値よりも高いアイポイントで眼画像の輝度ムラが抑制されるように光源１３ａおよび光源１３ｂの発光量を定め、当該発光量で撮像された眼画像から、瞳孔の中心座標等の算出処理を行うようにしてもよい。
【0085】
以上述べたように、実施形態１では、ＣＰＵ３は、アイポイントに応じて光源の発光量を変更し、シェーディング補正を行う。これにより、撮像された眼画像の輝度ムラを抑制することができる。
【0086】
（実施形態２）
実施形態１では、ＣＰＵ３は、アイポイントに応じて、光源の発光量の変更およびシェーディング補正の双方を実施する。なお、ＣＰＵ３は、アイポイントに応じて、光源の発光量の制御またはシェーディング補正のいずれか一方のみ実施してもよい。実施形態２では、ＣＰＵ３は、アイポイントに応じてシェーディング補正を実施する例について説明する。実施形態２は、アイポイントに応じて光源の発光量を変更しない点が実施形態１と異なる。
実施形態１では、ＣＰＵ３は、アイポイントに応じて、光源の発光量の変更およびシェーディング補正の双方を実施する。なお、ＣＰＵ３は、アイポイントに応じて、光源の発光量の制御またはシェーディング補正のいずれか一方のみ実施してもよい。実施形態２では、ＣＰＵ３は、アイポイントに応じてシェーディング補正を実施する例について説明する。実施形態２は、アイポイントに応じて光源の発光量を変更しない点が実施形態１と異なる。
【0087】
図１２は、図１０のステップＳ１００３で実行される視線検出動作の一例を示すフローチャートである。ステップＳ１２０１～Ｓ１２０６，Ｓ１２０９～Ｓ１２１６の処理は、図１１のステップＳ１１０１～Ｓ１１０６，Ｓ１１０９～Ｓ１１１６の処理と同じである。
【0088】
ステップＳ１２０７では、ＣＰＵ３は、ステップＳ１２０５で算出したアイポイントに応じて、次回撮像時のシェーディング補正値を決定する。
【0089】
ステップＳ１２０８では、ＣＰＵ３は、光源１３ａ，１３ｂの赤外光をユーザーの眼球１４に向けて放射する。ステップＳ１２０８の処理は、例えばステップＳ１１０２（Ｓ１２０２）の処理と同じとしてもよい。例えば、ＣＰＵ３は、使用頻度が所定の閾値よりも高いアイポイントで眼画像の輝度ムラが抑制されるような発光量で、光源１３ａ，１３ｂの赤外光をユーザーの眼球１４に向けて放射してもよい。このように、実施形態２では、ＣＰＵ３は、アイポイントに応じて光源の発光量は変更せず、固定の値を用いる。
【0090】
ステップＳ１２１７では、ＣＰＵ３は、ステップＳ１２１２で算出したアイポイントに応じて、次回撮像時のシェーディング補正値を決定する。
【0091】
以上述べたように、実施形態２では、ＣＰＵ３は、光源の発光量には固定の値を用い、アイポイントに応じてシェーディング補正値を決定する。これにより、実施形態１よりも簡易的な処理で眼画像の輝度ムラを抑制することができる。
【0092】
（実施形態３）
実施形態３では、ＣＰＵ３は、アイポイントに応じて光源の発光量を変更する例について説明する。実施形態３は、シェーディング補正を行わない点が実施形態１と異なる。
実施形態３では、ＣＰＵ３は、アイポイントに応じて光源の発光量を変更する例について説明する。実施形態３は、シェーディング補正を行わない点が実施形態１と異なる。
【0093】
図１３は、図１０のステップＳ１００３で実行される視線検出動作の一例を示すフローチャートである。ステップＳ１３０１～Ｓ１３０６，Ｓ１３０８～Ｓ１３１５の処理は、図１１のステップＳ１１０１～Ｓ１１０６，Ｓ１１０８，Ｓ１１０９，Ｓ１１１１～Ｓ１１１６の処理と同じである。
【0094】
ステップＳ１３０７では、ＣＰＵ３は、ステップＳ１３０５で算出したアイポイントに応じて、次回撮像時の発光量を決定する。
【0095】
ステップＳ１３１６では、ＣＰＵ３は、ステップＳ１３１１で算出したアイポイントに応じて、次回撮像時の発光量を決定する。
【0096】
以上述べたように、実施形態３では、ＣＰＵ３は、シェーディング補正は行わず、アイポイントに応じて光源の発光量を変更する。これにより、実施形態１よりも簡易的な処理で眼画像の輝度ムラを抑制することができる。
【0097】
（実施形態４）
実施形態１～３では、本発明をカメラ１に適用する例について説明したが、本発明は例えばヘッドマウントディスプレイ（ＨＭＤ）にも適用可能である。以下、本発明をＨＭＤに適用する例について説明する。
実施形態１～３では、本発明をカメラ１に適用する例について説明したが、本発明は例えばヘッドマウントディスプレイ（ＨＭＤ）にも適用可能である。以下、本発明をＨＭＤに適用する例について説明する。
【0098】
図１４（ａ），１４（ｂ）は、実施形態４に係る表示装置５の外観を示す。図１４（ａ）は正面斜視図であり、図１４（ｂ）は背面斜視図である。表示装置５は、光学シースルー方式の表示装置であり、頭部に対して着脱可能なＨＭＤの一種であり、ＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）やＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）を利用した眼鏡型デバイスである。表示装置５は、表示装置５を頭部に装着したユーザーの右眼の視線と左眼の視線とを個別に検出することができる。
【0099】
レンズ５０は、ユーザーの眼に対向する光学部材である。ユーザーは、レンズ５０を通して外界を視認することができる。表示デバイス５１は、表示装置５全体を制御するＣＰＵ３からの制御（表示制御）により、ユーザーの両眼（右眼と左眼の両方）に対して、仮想物体（仮想物体の虚像）を表示する。ユーザーは、表示された仮想物体を、外界に存在するように見ることができる。光源駆動回路２０５は、光源１３ａ，１３ｂを駆動する。光源１３ａ，１３ｂそれぞれは、ユーザーの眼を照明する光源であり、例えばユーザーに対して不感の赤外光を発する赤外発光ダイオードなどである。光源１３ａ，１３ｂから発せられてユーザーの眼で反射した光の一部は、受光レンズ１５によって、眼用撮像素子１６に集光する。これらの部材は、左眼と右眼のそれぞれについて設けられている。例えば、眼用撮像素子１６として、右眼を撮像する右撮像素子と、左眼を撮像する左撮像素子とが設けられている。なお、図１４（ｂ）では、左眼と右眼のそれぞれについて、レンズ５０の上下に光源１３ａ，１３ｂが１つずつ設けられている例を示すが、１つより多くの光
源が設けられていてもよいし、レンズ５０の左右に光源が設けられていてもよい。調光デバイス１９（調光パネル）は外界からの光を調節する。調光制御回路１８は、調光デバイス１９の透過率を変化させる回路であり、例えば調光デバイス１９に印加する電圧を制御する回路である。調光デバイス１９は、調光制御回路１８によって制御された透過率で外界からの光を透過する。
源が設けられていてもよいし、レンズ５０の左右に光源が設けられていてもよい。調光デバイス１９（調光パネル）は外界からの光を調節する。調光制御回路１８は、調光デバイス１９の透過率を変化させる回路であり、例えば調光デバイス１９に印加する電圧を制御する回路である。調光デバイス１９は、調光制御回路１８によって制御された透過率で外界からの光を透過する。
【0100】
ユーザーは表示装置５を鼻に乗せて使用するため、アイポイントはユーザーに依らず略一定の値となる。したがって、ＣＰＵ３は、特定のアイポイント（例えばユーザーが表示装置５を鼻に乗せて使用する際の平均的なアイポイント）における眼画像の輝度ムラが抑制されるように、発光量の制御またはシェーディング補正を行う。例えば、ＣＰＵ３は、複数の光源と眼用撮像素子１６との位置関係に基づく発光量で発光するように、複数の光源を制御する。また、ＣＰＵ３は、特定のアイポイントの輝度ムラを抑制するような補正値でシェーディング補正を行う。
【0101】
以上述べたように、実施形態４では、ＣＰＵ３は、ＨＭＤを使用するユーザーの眼画像の輝度ムラを抑制することができる。
【0102】
（その他の実施形態）
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【0103】
なお、上記実施形態はあくまで一例であり、本発明の要旨の範囲内で上記実施形態の構成を適宜変形したり変更したりすることにより得られる構成も、本発明に含まれる。上記実施形態の構成を適宜組み合わせて得られる構成も、本発明に含まれる。
【0104】
本実施形態の開示は、以下の構成および方法を含む。
（構成１）
複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得手段と、
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段と、
前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正手段と
を有することを特徴とする電子機器。
（構成２）
前記複数の光源と前記撮像手段とをさらに有する
ことを特徴とする構成１に記載の電子機器。
（構成３）
前記補正手段は、前記距離情報により示された距離が第１の距離である場合に、当該距離が前記第１の距離よりも長い第２の距離である場合に比べて補正量を大きくする
ことを特徴とする構成１または２に記載の電子機器。
（構成４）
前記補正手段は、前記距離情報により示された距離が第１の距離である場合に、当該距離が前記第１の距離よりも長い第２の距離である場合に比べて、前記複数の光源のうち、前記撮像手段からの距離が所定の距離よりも長い光源が照射する領域の補正量を大きくする
ことを特徴とする構成１から３のいずれか１項に記載の電子機器。
（構成５）
前記眼球から前記撮像手段までの距離と、補正値との対応関係が予め定められており、
前記補正手段は、前記距離情報が示す距離に対応する補正値を用いて前記輝度ムラを補
正する
ことを特徴とする構成１から４のいずれか１項に記載の電子機器。
（構成６）
前記対応関係として、前記眼球から前記撮像手段までの距離と、補正値との複数の組み合わせが予め定められており、
前記補正手段は、前記距離情報が示す距離と、補正値との組み合わせが予め定められていない場合に、前記複数の組み合わせを用いた補間処理により、前記距離情報が示す距離に対応する前記補正値を取得する
ことを特徴とする構成５に記載の電子機器。
（構成７）
前記補正手段は、初回撮像時または前記画像に所定量以上の輝度変化が生じた際には、前記輝度ムラを補正しないようにする
ことを特徴とする構成１から６のいずれか１項に記載の電子機器。
（構成８）
前記画像から視線位置を検出する検出手段をさらに有し、
前記補正手段は、
前記検出手段のキャリブレーション動作中である場合に、前記距離情報または当該距離情報に応じた補正値のいずれかを記憶媒体に記憶しておき、
前記キャリブレーション動作中でない場合には、前記キャリブレーション動作中の前記距離情報に応じた前記補正値を用いて前記輝度ムラを補正する
ことを特徴とする構成１から７のいずれか１項に記載の電子機器。
（構成９）
前記補正手段は、前記画像のうち他の領域よりも暗い領域が明るくなるように、前記画像の輝度ムラを補正する
ことを特徴とする構成１から８のいずれか１項に記載の電子機器。
（構成１０）
眼球を照明する複数の光源と、
前記複数の光源により照明された前記眼球を撮像する撮像手段と、
前記複数の光源を制御する制御手段と、
を有し、
前記制御手段は、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御する
ことを特徴とする電子機器。
（構成１１）
前記複数の光源は、第１の光源と、前記撮像手段からの距離が前記撮像手段から前記第１の光源までの距離よりも長い第２の光源とを含み、
前記制御手段は、前記第２の光源の発光量を前記第１の光源の発光量よりも大きくすることを特徴とする構成１０に記載の電子機器。
（構成１２）
前記制御手段は、前記複数の光源のそれぞれについて、前記光源を駆動する駆動信号の振幅とデューティー比の少なくとも一方を制御する
ことを特徴とする構成１０または１１に記載の電子機器。
（構成１３）
前記複数の光源は、第１の光源群と、前記撮像手段からの距離が前記撮像手段から前記第１の光源群までの距離よりも長い第２の光源群とを含む、個別に発光量を制御可能な複数の光源群に分類されており、
前記制御手段は、前記第２の光源群の発光量を前記第１の光源群の発光量よりも大きくする
ことを特徴とする構成１０から１２のいずれか１項に記載の電子機器。
（構成１４）
前記複数の光源群は、前記撮像手段からの距離が前記撮像手段から前記第２の光源群までの距離以上である第３の光源群をさらに含み、
前記第２の光源群に含まれる光源の数は、前記第３の光源群に含まれる光源の数よりも少なく、
前記制御手段は、前記第３の光源群の発光量を前記第２の光源群の発光量よりも大きくしない
ことを特徴とする構成１３に記載の電子機器。
（構成１５）
前記制御手段は、前記複数の光源群のそれぞれについて、前記光源群を駆動する駆動信号の振幅、前記駆動信号のデューティー比、前記光源群のなかで点灯する光源の数の少なくともいずれかを制御する
ことを特徴とする構成１３または１４に記載の電子機器。
（構成１６）
前記制御手段は、前記第１の光源群において点灯させる光源の数よりも多くの数の光源を、前記第２の光源群において点灯させる
ことを特徴とする構成１３に記載の電子機器。
（構成１７）
前記第２の光源群に含まれる光源の数は、前記第１の光源群に含まれる光源の数よりも多い
ことを特徴とする構成１３に記載の電子機器。
（構成１８）
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段をさらに有し、
前記眼球から前記撮像手段までの距離と、前記複数の光源の発光量との対応関係が予め定められており、
前記制御手段は、前記距離情報が示す距離に対応する前記複数の光源の発光量で発光するように前記複数の光源を制御する
ことを特徴とする構成１０から１５のいずれか１項に記載の電子機器。
（構成１９）
前記対応関係として、前記眼球から前記撮像手段までの距離と、前記複数の光源の発光量との複数の組み合わせが予め定められており、
前記制御手段は、前記距離情報が示す距離と、前記複数の光源の発光量との組み合わせが予め定められていない場合に、前記複数の組み合わせを用いた補間処理により、前記距離情報が示す距離に対応する前記複数の光源の発光量を取得する
ことを特徴とする構成１８に記載の電子機器。
（構成２０）
前記撮像手段により撮像された前記眼球の画像を取得する第１取得手段をさらに有し、
前記制御手段は、初回撮像時または前記画像に所定量以上の輝度変化が生じた際には、前記眼球から前記撮像手段までの、使用頻度が所定の閾値よりも高い距離に対応する前記複数の光源の発光量で発光するように前記複数の光源を制御する
ことを特徴とする構成１８または１９に記載の電子機器。
（構成２１）
前記撮像手段により撮像された前記眼球の画像を取得する第１取得手段と、
前記画像から視線位置を検出する検出手段と、
をさらに有し、
前記制御手段は、
前記検出手段のキャリブレーション動作中である場合に、前記距離情報または当該距離情報に応じた前記複数の光源の発光量のいずれかを記憶媒体に記憶しておき、
前記キャリブレーション動作中でない場合には、前記キャリブレーション動作中の前記距離情報に応じた前記複数の光源の発光量で発光するように、前記複数の光源を制御す
る
ことを特徴とする構成１８から２０のいずれか１項に記載の電子機器。
（構成２２）
前記制御手段は、前記複数の光源のそれぞれの発光効率を考慮して、前記複数の光源を制御する
ことを特徴とする構成１０から２１のいずれか１項に記載の電子機器。
（構成２３）
眼球から前記眼球を撮像する撮像手段までの距離が第１の距離である場合と、前記距離が前記第１の距離よりも長い第２の距離である場合とで、輝度ムラが略同一である前記眼球の画像が取得されるように制御する制御手段
を有することを特徴とする電子機器。
（方法１）
複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得ステップと、
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得ステップと、
前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正ステップと
を有することを特徴とする電子機器の制御方法。
（方法２）
複数の光源により照明された眼球を撮像手段により撮像する撮像ステップと、
前記複数の光源を制御する制御ステップと、
を有し、
前記制御ステップでは、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御する
ことを特徴とする電子機器の制御方法。
（プログラム）
コンピュータを、構成１～２３のいずれか１項に記載の電子機器の各手段として機能させるためのプログラム。
（媒体）
コンピュータを、構成１～２３のいずれか１項に記載の電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
（構成１）
複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得手段と、
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段と、
前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正手段と
を有することを特徴とする電子機器。
（構成２）
前記複数の光源と前記撮像手段とをさらに有する
ことを特徴とする構成１に記載の電子機器。
（構成３）
前記補正手段は、前記距離情報により示された距離が第１の距離である場合に、当該距離が前記第１の距離よりも長い第２の距離である場合に比べて補正量を大きくする
ことを特徴とする構成１または２に記載の電子機器。
（構成４）
前記補正手段は、前記距離情報により示された距離が第１の距離である場合に、当該距離が前記第１の距離よりも長い第２の距離である場合に比べて、前記複数の光源のうち、前記撮像手段からの距離が所定の距離よりも長い光源が照射する領域の補正量を大きくする
ことを特徴とする構成１から３のいずれか１項に記載の電子機器。
（構成５）
前記眼球から前記撮像手段までの距離と、補正値との対応関係が予め定められており、
前記補正手段は、前記距離情報が示す距離に対応する補正値を用いて前記輝度ムラを補
正する
ことを特徴とする構成１から４のいずれか１項に記載の電子機器。
（構成６）
前記対応関係として、前記眼球から前記撮像手段までの距離と、補正値との複数の組み合わせが予め定められており、
前記補正手段は、前記距離情報が示す距離と、補正値との組み合わせが予め定められていない場合に、前記複数の組み合わせを用いた補間処理により、前記距離情報が示す距離に対応する前記補正値を取得する
ことを特徴とする構成５に記載の電子機器。
（構成７）
前記補正手段は、初回撮像時または前記画像に所定量以上の輝度変化が生じた際には、前記輝度ムラを補正しないようにする
ことを特徴とする構成１から６のいずれか１項に記載の電子機器。
（構成８）
前記画像から視線位置を検出する検出手段をさらに有し、
前記補正手段は、
前記検出手段のキャリブレーション動作中である場合に、前記距離情報または当該距離情報に応じた補正値のいずれかを記憶媒体に記憶しておき、
前記キャリブレーション動作中でない場合には、前記キャリブレーション動作中の前記距離情報に応じた前記補正値を用いて前記輝度ムラを補正する
ことを特徴とする構成１から７のいずれか１項に記載の電子機器。
（構成９）
前記補正手段は、前記画像のうち他の領域よりも暗い領域が明るくなるように、前記画像の輝度ムラを補正する
ことを特徴とする構成１から８のいずれか１項に記載の電子機器。
（構成１０）
眼球を照明する複数の光源と、
前記複数の光源により照明された前記眼球を撮像する撮像手段と、
前記複数の光源を制御する制御手段と、
を有し、
前記制御手段は、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御する
ことを特徴とする電子機器。
（構成１１）
前記複数の光源は、第１の光源と、前記撮像手段からの距離が前記撮像手段から前記第１の光源までの距離よりも長い第２の光源とを含み、
前記制御手段は、前記第２の光源の発光量を前記第１の光源の発光量よりも大きくすることを特徴とする構成１０に記載の電子機器。
（構成１２）
前記制御手段は、前記複数の光源のそれぞれについて、前記光源を駆動する駆動信号の振幅とデューティー比の少なくとも一方を制御する
ことを特徴とする構成１０または１１に記載の電子機器。
（構成１３）
前記複数の光源は、第１の光源群と、前記撮像手段からの距離が前記撮像手段から前記第１の光源群までの距離よりも長い第２の光源群とを含む、個別に発光量を制御可能な複数の光源群に分類されており、
前記制御手段は、前記第２の光源群の発光量を前記第１の光源群の発光量よりも大きくする
ことを特徴とする構成１０から１２のいずれか１項に記載の電子機器。
（構成１４）
前記複数の光源群は、前記撮像手段からの距離が前記撮像手段から前記第２の光源群までの距離以上である第３の光源群をさらに含み、
前記第２の光源群に含まれる光源の数は、前記第３の光源群に含まれる光源の数よりも少なく、
前記制御手段は、前記第３の光源群の発光量を前記第２の光源群の発光量よりも大きくしない
ことを特徴とする構成１３に記載の電子機器。
（構成１５）
前記制御手段は、前記複数の光源群のそれぞれについて、前記光源群を駆動する駆動信号の振幅、前記駆動信号のデューティー比、前記光源群のなかで点灯する光源の数の少なくともいずれかを制御する
ことを特徴とする構成１３または１４に記載の電子機器。
（構成１６）
前記制御手段は、前記第１の光源群において点灯させる光源の数よりも多くの数の光源を、前記第２の光源群において点灯させる
ことを特徴とする構成１３に記載の電子機器。
（構成１７）
前記第２の光源群に含まれる光源の数は、前記第１の光源群に含まれる光源の数よりも多い
ことを特徴とする構成１３に記載の電子機器。
（構成１８）
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得手段をさらに有し、
前記眼球から前記撮像手段までの距離と、前記複数の光源の発光量との対応関係が予め定められており、
前記制御手段は、前記距離情報が示す距離に対応する前記複数の光源の発光量で発光するように前記複数の光源を制御する
ことを特徴とする構成１０から１５のいずれか１項に記載の電子機器。
（構成１９）
前記対応関係として、前記眼球から前記撮像手段までの距離と、前記複数の光源の発光量との複数の組み合わせが予め定められており、
前記制御手段は、前記距離情報が示す距離と、前記複数の光源の発光量との組み合わせが予め定められていない場合に、前記複数の組み合わせを用いた補間処理により、前記距離情報が示す距離に対応する前記複数の光源の発光量を取得する
ことを特徴とする構成１８に記載の電子機器。
（構成２０）
前記撮像手段により撮像された前記眼球の画像を取得する第１取得手段をさらに有し、
前記制御手段は、初回撮像時または前記画像に所定量以上の輝度変化が生じた際には、前記眼球から前記撮像手段までの、使用頻度が所定の閾値よりも高い距離に対応する前記複数の光源の発光量で発光するように前記複数の光源を制御する
ことを特徴とする構成１８または１９に記載の電子機器。
（構成２１）
前記撮像手段により撮像された前記眼球の画像を取得する第１取得手段と、
前記画像から視線位置を検出する検出手段と、
をさらに有し、
前記制御手段は、
前記検出手段のキャリブレーション動作中である場合に、前記距離情報または当該距離情報に応じた前記複数の光源の発光量のいずれかを記憶媒体に記憶しておき、
前記キャリブレーション動作中でない場合には、前記キャリブレーション動作中の前記距離情報に応じた前記複数の光源の発光量で発光するように、前記複数の光源を制御す
る
ことを特徴とする構成１８から２０のいずれか１項に記載の電子機器。
（構成２２）
前記制御手段は、前記複数の光源のそれぞれの発光効率を考慮して、前記複数の光源を制御する
ことを特徴とする構成１０から２１のいずれか１項に記載の電子機器。
（構成２３）
眼球から前記眼球を撮像する撮像手段までの距離が第１の距離である場合と、前記距離が前記第１の距離よりも長い第２の距離である場合とで、輝度ムラが略同一である前記眼球の画像が取得されるように制御する制御手段
を有することを特徴とする電子機器。
（方法１）
複数の光源により照明され、撮像手段により撮像された眼球の画像を取得する第１取得ステップと、
前記眼球から前記撮像手段までの距離を示す距離情報を取得する第２取得ステップと、
前記距離情報に応じた補正量で、前記画像の輝度ムラを補正する補正ステップと
を有することを特徴とする電子機器の制御方法。
（方法２）
複数の光源により照明された眼球を撮像手段により撮像する撮像ステップと、
前記複数の光源を制御する制御ステップと、
を有し、
前記制御ステップでは、前記複数の光源と前記撮像手段との位置関係に基づく発光量で発光するように、前記複数の光源を制御する
ことを特徴とする電子機器の制御方法。
（プログラム）
コンピュータを、構成１～２３のいずれか１項に記載の電子機器の各手段として機能させるためのプログラム。
（媒体）
コンピュータを、構成１～２３のいずれか１項に記載の電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
【符号の説明】
【0105】
１：カメラ ３：ＣＰＵ １３ａ，１３ｂ：光源 １４：眼球 １６：眼用撮像素子
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】