特許 7467071 電子機器、電子機器の制御方法、プログラム、記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-04-05

(45)【発行日】2024-04-15

(54)【発明の名称】電子機器、電子機器の制御方法、プログラム、記憶媒体

(51)【国際特許分類】

   G06F 3/0346 20130101AFI20240408BHJP

   G02B 7/28 20210101ALI20240408BHJP

   G03B 7/00 20210101ALI20240408BHJP

   G03B 17/18 20210101ALI20240408BHJP

   G03B 17/02 20210101ALI20240408BHJP

   G03B 13/36 20210101ALI20240408BHJP

   G03B 13/02 20210101ALI20240408BHJP

   G06F 3/038 20130101ALI20240408BHJP

【ＦＩ】

G06F3/0346 423

G02B7/28 N

G03B7/00

G03B17/18

G03B17/02

G03B13/36

G03B13/02

G06F3/038 350R

【請求項の数】 12

(21)【出願番号】P 2019193317

(22)【出願日】2019-10-24

(65)【公開番号】P2021068208

(43)【公開日】2021-04-30

【審査請求日】2022-10-18

【前置審査】

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】110002860

【氏名又は名称】弁理士法人秀和特許事務所

(72)【発明者】

【氏名】小川 誠司

【審査官】上田 泰

(56)【参考文献】

【文献】特開２００７－１３３０２７（ＪＰ，Ａ）

【文献】特開２０１９－０７５７１９（ＪＰ，Ａ）

【文献】特開平０５－２８８９８２（ＪＰ，Ａ）

【文献】特開平０５－３３３２５９（ＪＰ，Ａ）

【文献】特開平０７－２８３９９４（ＪＰ，Ａ）

【文献】特開２０１５－１１８５３１（ＪＰ，Ａ）

【文献】特開２０１５－０２８７３３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０３４６

Ｇ０６Ｆ ３／０３８

Ｇ０２Ｂ ７／２８

Ｇ０３Ｂ ７／００

Ｇ０３Ｂ １３／０２

Ｇ０３Ｂ １３／３６

Ｇ０３Ｂ １７／０２

Ｇ０３Ｂ １７／１８ －１７／２０

Ｈ０４Ｎ ２３／６３

Ｈ０４Ｎ ２３／６７

(57)【特許請求の範囲】

【請求項1】

表示部を見るユーザーの視線を検出する検出手段と、
ユーザーによる第１の操作を受け付ける操作部と、
前記第１の操作が行われたことに応じて実行される処理を無効にする設定が可能である設定手段と、
前記検出手段により検出されたユーザーの視線に基づき前記表示部上での位置の指定が可能でない第１の状態である場合に、前記設定手段の設定により、ユーザーによる前記操作部への前記第１の操作が行われたことに応じて、前記表示部における所定の位置に位置指標を表示し、
前記検出手段により検出されたユーザーの視線に基づき前記表示部上での位置の指定が可能である第２の状態である場合に、前記設定手段の設定に関わらず、ユーザーによる前記操作部への前記第１の操作が行われたことに応じて、前記表示部における視線に基づく位置に前記位置指標を表示するように制御する制御手段と、
を有することを特徴とする電子機器。

【請求項2】

前記所定の位置は、前記表示部の画面の中央の位置である、
ことを特徴とする請求項１に記載の電子機器。

【請求項3】

前記所定の位置は、前記視線に基づく位置には関わらない位置である、
ことを特徴とする請求項１又は２に記載の電子機器。

【請求項4】

前記制御手段は、ユーザーによる前記操作部への前記第１の操作に続いて、前記第１の操作を受け付けた前記操作部への第２の操作が行われたことに応じて、表示されている前記位置指標を移動させるように制御する、
ことを特徴とする請求項１乃至３のいずれか１項に記載の電子機器。

【請求項5】

前記第２の状態は、前記検出手段により検出されたユーザーの視線に基づき前記表示部上での位置の指定が可能であり、かつ、前記検出手段により前記表示部を見るユーザーの視線を検出している状態である、
ことを特徴とする請求項１乃至４のいずれか１項に記載の電子機器。

【請求項6】

前記操作部は、方向とは関係のない指示をする前記第１の操作と方向を指示する前記第２の操作とを受け付けることが可能である、
ことを特徴とする請求項４に記載の電子機器。

【請求項7】

前記電子機器は撮像装置であり、自動焦点調節処理を実行するＡＦ手段をさらに有し、
前記制御手段は、
前記第２の状態であり、かつ、被写体を追尾せずに前記自動焦点調節処理を実行する場合、前記表示部における前記視線に基づく位置に前記位置指標を表示し、
前記第２の状態であり、かつ、被写体を追尾し、前記追尾した被写体に基づいて前記自動焦点調節処理を実行する場合、前記操作部への操作が行われたことに応じて、前記表示部における前記視線に基づく位置から所定の範囲内にある前記被写体に前記位置指標を表示し、前記被写体の追尾を開始するように制御する、
ことを特徴とする請求項１乃至６のいずれか１項に記載の電子機器。

【請求項8】

前記制御手段は、前記第２の状態であり、かつ、被写体を追尾し、前記追尾した被写体に基づいて前記自動焦点調節処理を実行する場合、前記被写体の追尾が開始され、前記被写体を追尾している状態であれば、前記操作部への前記操作が行われても、前記被写体に前記位置指標を表示せずに、前記被写体の追尾を解除するように制御する、
ことを特徴とする請求項７に記載の電子機器。

【請求項9】

前記位置指標は、ＡＦ枠又は追尾枠である、
ことを特徴とする請求項１乃至８のいずれか１項に記載の電子機器。

【請求項10】

表示部を見るユーザーの視線を検出する検出ステップと、
第１の操作が行われたことに応じて実行される処理を無効にする設定が可能である設定ステップと、
前記検出ステップにより検出されたユーザーの視線に基づき前記表示部上での位置の指定が可能でない第１の状態である場合に、前記設定ステップの設定により、ユーザーによる操作部への前記第１の操作が行われたことに応じて、前記表示部における所定の位置に位置指標を表示し、
前記検出ステップにより検出されたユーザーの視線に基づき前記表示部上での位置の指定が可能である第２の状態である場合に、前記設定ステップの設定に関わらず、ユーザーによる前記操作部への前記第１の操作が行われたことに応じて、前記表示部における視線に基づく位置に前記位置指標を表示するように制御する制御ステップと、
を有することを特徴とする電子機器の制御方法。

【請求項11】

コンピュータを、請求項１乃至９のいずれか１項に記載された電子機器の各手段として機能させるためのプログラム。

【請求項12】

コンピュータを、請求項１乃至９のいずれか１項に記載された電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は電子機器、電子機器の制御方法、プログラム、記憶媒体に関するものである。

【背景技術】

【0002】

ユーザーが自身の視線によって操作を行う（以下、視線入力）電子機器が知られている。特に、デジタルカメラやゲーム機などの電子機器に対して、ユーザーが即時的に操作指示を行いたい場合に、視線入力は有効である。

【0003】

ところで、人間の特性上、視線入力はブレが大きいため、視線によって電子機器を操作する場合は、視線の検知位置を電子機器の操作指示に直接用いない場合もある。このような場合には、ユーザーの所望のタイミングで視線入力位置を確定させる手段や、視線の位置からユーザー操作により最終的な位置を微調整できる手段を提供することによって、よりユーザーの意図に合った視線入力による操作が実現できる。

【0004】

特許文献１では、ユーザーによる所定の操作があると、視線の先にポインタを移動させ、移動先の位置から方向指示操作によって継続してポインタの位置を移動可能な技術が述べられている。この特許文献１では、所定の操作があることに応じて視線先にポインタの位置が移動した後の一定時間は、方向指示操作があったとしても当該操作を無効とし、当該位置にポインタを留まらせる。これは、所定の操作および方向指定操作がともに、検出部の姿勢や加速度に応じた操作であるので、所定の操作検出後の検出部への操作が方向指定操作として検出される可能性があり、ユーザーの意思に反するポインタの移動を防ぐ必要があるためである。

【先行技術文献】

【特許文献】

【0005】

【文献】国際公開第２０１５／１０４８８４号

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、特許文献１に係る技術では、視線入力が無効な場合と有効な場合との双方を考慮した好適な操作性について検討の余地があった。

【0007】

そこで、本発明は、視線入力による操作を受付可能な電子機器において操作性をより向上させることを目的とする。

【課題を解決するための手段】

【0008】

本発明の１つの態様は、
表示部を見るユーザーの視線を検出する検出手段と、
ユーザーによる第１の操作を受け付ける操作部と、
前記第１の操作が行われたことに応じて実行される処理を無効にする設定が可能である設定手段と、
前記検出手段により検出されたユーザーの視線に基づき前記表示部上での位置の指定が可能でない第１の状態である場合に、前記設定手段の設定により、ユーザーによる前記操作部への前記第１の操作が行われたことに応じて、前記表示部における所定の位置に位置指標を表示し、
前記検出手段により検出されたユーザーの視線に基づき前記表示部上での位置の指定が可能である第２の状態である場合に、前記設定手段の設定に関わらず、ユーザーによる前記操作部への前記第１の操作が行われたことに応じて、前記表示部における視線に基づく位置に前記位置指標を表示するように制御する制御手段と、
を有することを特徴とする電子機器である。

【発明の効果】

【0009】

視線入力による操作を受付可能な電子機器において操作性をより向上させることができる。

【図面の簡単な説明】

【0010】

【図1】実施形態１に係るデジタルカメラの外観図である。

【図2】実施形態１に係るデジタルカメラの構成図である。

【図3】実施形態１に係る撮影設定の画面を示す図である。

【図4】実施形態１に係る撮影処理を示すフローチャートである。

【図5】実施形態１に係るデジタルカメラの画面を示す図である。

【図6】実施形態１に係る中央ボタン処理を示すフローチャートである。

【発明を実施するための形態】

【0011】

視線入力による操作を受け付ける電子機器の操作性を高めるためには、上述した方向指示操作の手段とは別に、視線位置への位置指標の移動操作（ジャンプ操作）の手段を設けることが考えられる。この場合、特に電子機器の一例であるデジタルカメラにおいては下記の２つの課題が発生し得る。

【0012】

（課題１）
デジタルカメラにおいて、ＡＦ（オートフォーカス）を行う位置を示す枠（以下、ＡＦ枠）を、初期位置である画面中央に戻す操作は重要であるが、視線入力が有効である場合は、ユーザーは視線の先にＡＦ枠を移動させることを望む可能性が高い。従って、視線入力が有効である場合には中央に戻す操作の重要度は下がるため、中央に戻す操作をそのまま残しておくことは、デジタルカメラにおいて限られた操作部材の中で多様な機能を実現する上で障壁となる。

【0013】

（課題２）
ＡＦ枠の視線位置へのジャンプ手段と、ＡＦ枠の微調整の手段とが、物理的に離れた位置にあると、ユーザーが操作する場合に指の移動が発生して素早く操作を行うことが困難である。

【0014】

［実施形態１］
＜デジタルカメラの外観＞
以下、上述の課題を解決すべく図面を参照して本発明の好適な実施形態を説明する。図１（ａ）、（ｂ）に本発明を適用可能な装置の一例としてのデジタルカメラ１００の外観図を示す。図１（ａ）はデジタルカメラ１００の前面斜視図であり、図１（ｂ）はデジタルカメラ１００の背面斜視図である。

【0015】

表示部２８は、画像や各種情報を表示する、カメラ背面に設けられた表示部である。タッチパネル７０ａは、表示部２８の表示面（操作面）に対するタッチ操作を検出することができる。ファインダー外表示部４３は、カメラ上面に設けられた表示部であり、シャッター速度や絞りをはじめとするカメラの様々な設定値が表示される。シャッターボタン６１は、撮影指示を行うための操作部である。モード切替スイッチ６０は、各種モードを切り替えるための操作部である。端子カバー４０は、外部機器との接続ケーブルとデジタルカメラ１００とを接続するコネクタ（不図示）を保護するカバーである。

【0016】

メイン電子ダイヤル７１は、回転操作部材であり、ユーザーはメイン電子ダイヤル７１を回すことで、シャッター速度や絞りなどの設定値の変更等が行える。電源スイッチ７２は、デジタルカメラ１００の電源のＯＮおよびＯＦＦを切り替える操作部材である。サブ電子ダイヤル７３は、回転操作部材であり、選択枠の移動や画像送りなどを行える。

【0017】

４方向キー７４は、上、下、左、右部分（４方向）にそれぞれ押し込み可能な押しボタンを有する４方向キー操作部材（十字キー）である。ユーザーは、４方向キー７４において押下した方向に応じた操作が可能である。ＳＥＴボタン７５は、押しボタンであり、主に設定項目の決定などに用いられる。動画ボタン７６は、動画撮影（記録）の開始、停止の指示に用いられる。

【0018】

ＡＥロックボタン７７は、撮影待機状態で押下されることにより、露出状態を固定することができる。拡大ボタン７８は、撮影モードのライブビュー表示において拡大モードのＯＮ、ＯＦＦを行うための操作ボタンである。拡大モードをＯＮとしてからメイン電子ダイヤル７１を操作することにより、ライブビュー画像の拡大、縮小を行える。拡大ボタン７８は、再生モードにおいて、再生画像を拡大し、拡大率を増加させるための拡大ボタンとして機能する。

【0019】

再生ボタン７９は、撮影モードと再生モードとを切り替える操作ボタンである。撮影モード中に再生ボタン７９が押下されることで再生モードに移行し、記録媒体２００に記録された画像のうち最新の画像を表示部２８に表示させることができる。メニューボタン８１は、押下されることにより各種の設定可能なメニュー画面が表示部２８に表示される。ユーザーは、表示部２８に表示されたメニュー画面と、４方向キー７４やＳＥＴボタン７５、またはマルチコントローラー（以下、ＭＣ）６５を用いて直感的に各種設定を行うことができる。

【0020】

ＭＣ６５は、上、下、左、右、右上、左上、右下、左下の八方向への方向指示の操作（方向指示操作）と、中央ボタンの押し込み操作を、ユーザーの親指（１つの指）をＭＣ６５に常に接触させた状態で受け付けることが可能である。つまり、ＭＣ６５は、中央ボタンと方向指示操作のための操作部とを有する１つの操作部材である。通信端子１０は、デジタルカメラ１００が後述するレンズユニット１５０（着脱可能）と通信を行うための通信端子である。

【0021】

接眼部１６は、接眼ファインダー（覗き込み型のファインダー）の接眼部である。ユーザーは、接眼部１６を介して内部のＥＶＦ（Ｅｌｅｃｔｒｉｃ Ｖｉｅｗ Ｆｉｎｄｅｒ）２９に表示された映像を視認することができる。接眼検知部５７は、接眼部１６に撮影者が接眼しているか否かを検知する接眼検知センサーである。蓋２０２は、記録媒体２００を格納したスロットの蓋である。グリップ部９０は、ユーザーがデジタルカメラ１００を構えた際に右手で握りやすい形状とした保持部である。グリップ部９０を右手の小指、薬指、中指で握ってデジタルカメラを保持した状態で、右手の人差指で操作可能な位置にシャッターボタン６１、メイン電子ダイヤル７１が配置されている。また、同じ状態で、右手の親指で操作可能な位置に、サブ電子ダイヤル７３が配置されている。サムレスト部９１（親指待機位置）は、デジタルカメラ１００の背面側の、どの操作部材も操作しない状態でグリップ部９０を握った右手の親指を置きやすい箇所に設けられたグリップ部材である。サムレスト部９１は、保持力（グリップ感）を高めるためのラバー部材などで構成される。

【0022】

＜デジタルカメラの構成＞
図２は、本実施形態によるデジタルカメラ１００の構成例を示すブロック図である。レンズユニット１５０は、交換可能な撮影レンズを搭載するレンズユニットである。レンズ１０３は、通常、複数枚のレンズから構成されるが、ここでは簡略して一枚のレンズのみで示している。通信端子６は、レンズユニット１５０がデジタルカメラ１００と通信を行うための通信端子である。レンズユニット１５０は、この通信端子６と前述の通信端子１０を介してシステム制御部５０と通信し、内部のレンズシステム制御回路４によって絞り駆動回路２を介して絞り１の制御を行う。その後、レンズシステム制御回路４は、ＡＦ駆
動回路３を介して、レンズ１０３を変位させることで焦点を合わせる。シャッター１０１は、システム制御部５０の制御によって撮像部２２の露光時間を自由に制御できるフォーカルプレーンシャッターである。

【0023】

撮像部２２は、光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子（撮像センサー）である。Ａ／Ｄ変換器２３は、撮像部２２から出力されるアナログ信号をデジタル信号に変換するために用いられる。

【0024】

画像処理部２４は、Ａ／Ｄ変換器２３からのデータ、または、後述するメモリ制御部１５からのデータに対し所定の画素補間、縮小といったリサイズ処理や色変換処理を行う。また、画像処理部２４は、撮像した画像データを用いて所定の演算処理を行う。画像処理部２４により得られた演算結果に基づいてシステム制御部５０が露光制御、測距制御を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理が行われる。画像処理部２４は、さらに、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理を行う。

【0025】

メモリ制御部１５は、Ａ／Ｄ変換器２３、画像処理部２４、メモリ３２間のデータ送受を制御する。Ａ／Ｄ変換器２３からの出力データは、画像処理部２４およびメモリ制御部１５を介して、あるいは、メモリ制御部１５を介してメモリ３２に直接書き込まれる。

【0026】

メモリ３２は、撮像部２２によって得られた後にＡ／Ｄ変換器２３によりデジタルデータに変換された画像データや、表示部２８、ＥＶＦ２９に表示するための画像データを格納する。メモリ３２は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。また、メモリ３２は、画像表示用のメモリ（ビデオメモリ）を兼ねている。メモリ３２に書き込まれた表示用の画像データは、メモリ制御部１５を介して表示部２８、ＥＶＦ２９により表示される。

【0027】

表示部２８、ＥＶＦ２９は、ＬＣＤや有機ＥＬ等の表示器上に、メモリ制御部１５からの信号に応じた表示を行う。Ａ／Ｄ変換器２３によってＡ／Ｄ変換された後にメモリ３２に蓄積されたデータを、表示部２８またはＥＶＦ２９に逐次転送して表示することによって、ライブビュー表示（ＬＶ表示）を行える。以下、ライブビューで表示される画像をライブビュー画像（ＬＶ画像）と称する。

【0028】

赤外発光ダイオード１６６は、ファインダー画面内におけるユーザーの視線位置を検出するための発光素子であり、接眼部１６に接眼したユーザーの眼球（目）１６１に赤外光を照射する。赤外発光ダイオード１６６から発した赤外光は、眼球（目）１６１において反射し、その反射した赤外光はダイクロイックミラー１６２に到達する。ダイクロイックミラー１６２は、赤外光だけを反射して可視光を透過させる。光路が変更された赤外光は、結像レンズ１６３を介して視線検知センサー１６４の撮像面に結像する。結像レンズ１６３は、視線検知光学系を構成する光学部材である。視線検知センサー１６４は、ＣＣＤ型イメージセンサ等の撮像デバイスから構成される。

【0029】

視線検知センサー１６４は、入射された赤外反射光を電気信号にする光電変換をして視線検出回路１６５へ出力する。視線検出回路１６５は、少なくとも１つのプロセッサを含み、視線検知センサー１６４の出力信号に基づき、ユーザーの眼球（目）１６１の画像または動きからユーザーの視線位置を検出し、システム制御部５０に検出情報を出力する。このようにダイクロイックミラー１６２、結像レンズ１６３、視線検知センサー１６４、赤外発光ダイオード１６６、視線検出回路１６５により、ユーザーの視線による視線入力を受け付ける視線検出部１６０（受付部）が構成される。

【0030】

本実施形態では、デジタルカメラ１００は、視線検出部１６０を用いて、角膜反射法と呼ばれる方式で視線を検出する。角膜反射法とは、赤外発光ダイオード１６６から発した赤外光が眼球（目）１６１（特に角膜）において反射した反射光と、眼球（目）１６１の瞳孔との位置関係から、視線の向き・位置を検出する方式である。この他にも黒目と白目での光の反射率が異なることを利用する強膜反射法と呼ばれる方式など、様々な視線の向き・位置を検出する方式がある。なお、視線の向き・位置を検出できる方式であれば、上記以外の視線検出の方式を用いてもよい。

【0031】

ファインダー外表示部４３には、ファインダー外表示部駆動回路４４を介して、シャッター速度や絞りをはじめとするカメラの様々な設定値が表示される。

【0032】

不揮発性メモリ５６は、電気的に消去・記録可能なメモリであり、例えばＦｌａｓｈ－ＲＯＭ等が用いられる。不揮発性メモリ５６には、システム制御部５０の動作用の定数、プログラム等が記憶される。ここでいう、プログラムとは、本実施形態にて後述する各種フローチャートを実行するためのコンピュータープログラムのことである。

【0033】

システム制御部５０は、少なくとも１つのプロセッサまたは回路からなる制御部であり、デジタルカメラ１００全体を制御する。システム制御部５０は、前述した不揮発性メモリ５６に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。システムメモリ５２には、例えばＲＡＭが用いられ、システム制御部５０の動作用の定数、変数、不揮発性メモリ５６から読み出したプログラム等が展開される。また、システム制御部５０はメモリ３２、表示部２８等を制御することにより表示制御も行う。システムタイマー５３は各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。

【0034】

モード切替スイッチ６０、第１シャッタースイッチ６２、第２シャッタースイッチ６４、操作部７０は、システム制御部５０に各種の動作指示を入力するための操作手段である。モード切替スイッチ６０は、システム制御部５０の動作モードを静止画撮影モード、動画撮影モード等のいずれかに切り替える。静止画撮影モードに含まれるモードとして、オート撮影モード、オートシーン判別モード、マニュアルモード、絞り優先モード（Ａｖモード）、シャッター速度優先モード（Ｔｖモード）、プログラムＡＥモード（Ｐモード）、がある。また、撮影シーン別の撮影設定となる各種シーンモード、カスタムモード等がある。モード切替スイッチ６０により、ユーザーは、これらのモードのいずれかに直接切り替えることができる。あるいは、モード切替スイッチ６０で撮影モードの一覧画面に一旦切り換えた後に、表示された複数のモードのいずれかを選択し、他の操作部材を用いて切り替えるようにしてもよい。同様に、動画撮影モードにも複数のモードが含まれていてもよい。

【0035】

第１シャッタースイッチ６２は、デジタルカメラ１００に設けられたシャッターボタン６１の操作途中、いわゆる半押し（撮影準備指示）でＯＮとなり第１シャッタースイッチ信号ＳＷ１を発生する。システム制御部５０は、第１シャッタースイッチ信号ＳＷ１により、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の撮影準備動作を開始する。

【0036】

第２シャッタースイッチ６４は、シャッターボタン６１の操作完了、いわゆる全押し（撮影指示）でＯＮとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部５０は、第２シャッタースイッチ信号ＳＷ２により、撮像部２２からの信号読み出しから撮像された画像を画像ファイルとして記録媒体２００に書き込むまでの一連の撮影処理の動作を開始する。

【0037】

操作部７０は、ユーザーからの操作を受け付ける入力部としての各種の操作部材である。操作部７０には、少なくとも以下の操作部（操作部材）が含まれる。つまり、操作部７０は、シャッターボタン６１、マルチコントローラー６５、タッチパネル７０ａ、メイン電子ダイヤル７１、電源スイッチ７２、サブ電子ダイヤル７３を含む。操作部７０は、４方向キー７４、ＳＥＴボタン７５、動画ボタン７６、ＡＥロックボタン７７、拡大ボタン７８、再生ボタン７９、メニューボタン８１を含む。

【0038】

電源制御部８０は、電池検出回路、ＤＣ－ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部８０は、その検出結果およびシステム制御部５０の指示に基づいてＤＣ－ＤＣコンバータを制御し、必要な期間、記録媒体２００を含む各部へ必要な電圧を供給する。電源部３０は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。

【0039】

記録媒体Ｉ／Ｆ１８は、メモリカードやハードディスク等の記録媒体２００とのインターフェースである。記録媒体２００は、撮影された画像を記録するためのメモリカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。

【0040】

通信部５４は、無線または有線ケーブルによって外部機器等と接続し、映像信号や音声信号の送受信を行う。通信部５４は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）やインターネットとも接続可能である。また、通信部５４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＢｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙでも外部機器と通信可能である。通信部５４は、撮像部２２で撮像した画像（ライブビュー画像を含む）や、記録媒体２００に記録された画像を送信可能であり、また、外部機器から画像やその他の各種情報を受信することができる。

【0041】

姿勢検知部５５は、重力方向に対するデジタルカメラ１００の姿勢を検知する。姿勢検知部５５が検知した姿勢に基づいて、撮像部２２が撮影した画像が、デジタルカメラ１００を横に構えて撮影された画像であるか、縦に構えて撮影された画像であるかが判別可能である。システム制御部５０は、姿勢検知部５５で検知された姿勢に応じた向き情報を撮像部２２で撮像された画像の画像ファイルに付加したり、画像を回転して記録したりすることが可能である。姿勢検知部５５には、加速度センサーやジャイロセンサーなどを用いることができる。また、システム制御部５０は、姿勢検知部５５における加速度センサーやジャイロセンサーを用いて、デジタルカメラ１００の動き（パン、チルト、持ち上げ、静止しているか否か等）を検知することも可能である。

【0042】

接眼検知部５７は、ファインダーの接眼部１６に対する目（物体）１６１の接近（接眼）および離脱（離眼）を検知する接眼検知（接近検知）センサーである。システム制御部５０は、接眼検知部５７で検知された状態に応じて、表示部２８とＥＶＦ２９の表示（表示状態）／非表示（非表示状態）を切り替える。例えば、デジタルカメラ１００が撮影待機状態であり、かつ、ライブビュー画像の表示先の切替設定が自動切替設定である場合において、非接眼中には、システム制御部５０は、ライブビュー画像の表示先を表示部２８として、ＥＶＦ２９を非表示とする。また、システム制御部５０は、接眼中には、ライブビュー画像の表示先をＥＶＦ２９として、表示部２８を非表示とする。接眼検知部５７には、例えば赤外線近接センサーを用いることができ、ＥＶＦ２９を内蔵するファインダーの接眼部１６への何らかの物体の接近を検知することができる。物体が接近した場合は、接眼検知部５７の投光部（不図示せず）から投光した赤外線が反射して赤外線近接センサーの受光部（不図示せず）に受光される。接眼検知部５７は、受光された赤外線の量によって、接眼部１６からどのくらいの距離まで物体が近づいているか（接眼距離）も判別す
ることができる。このように、接眼検知部５７は、接眼部１６への物体の近接距離を検知する接眼検知を行う。

【0043】

また、接眼検知部５７は、非接眼状態（非接近状態）から、接眼部１６に対して所定距離以内に近づく物体が検出された場合に、接眼されたと検出する。接眼検知部５７は、接眼状態（接近状態）から、接近を検知していた物体が所定距離以上離れた場合に、離眼されたと検出する。接眼を検出する閾値と、離眼を検出する閾値は例えばヒステリシスを設けるなどして異なっていてもよい。また、接眼が検出された後は、離眼が検出されるまでは接眼状態であるものとする。離眼が検出された後は、接眼が検出されるまでは非接眼状態であるものとする。なお、赤外線近接センサーは一例であって、接眼検知部５７には、接眼とみなせる目や物体の接近を検知できるものであれば他のセンサーを採用してもよい。なお、本実施形態では接眼検知部５７の投光部および受光部は前述の赤外発光ダイオード１６６および視線検知センサー１６４とは別体のデバイスであるものとする。ただし、接眼検知部５７の投光部を赤外発光ダイオード１６６で兼ねてもよい。また、受光部を視線検知センサー１６４で兼ねてもよい。

【0044】

システム制御部５０は、視線検出部１６０からの出力に基づいて以下の操作、あるいは状態を検知できる。
・接眼部１６に接眼したユーザーの視線が新たに入力（検出）されたこと。すなわち、視線入力の開始。
・接眼部１６に接眼したユーザーの視線入力がある状態であること。
・接眼部１６に接眼したユーザーが注視している状態であること。
・接眼部１６に接眼したユーザーが入力していた視線を外したこと。すなわち、視線入力の終了。
・接眼部１６に接眼したユーザーが何も視線入力していない状態。

【0045】

なお、注視とは、ユーザーの視線位置が所定時間内に所定の移動量を超えなかった場合のことを指す。つまり、システム制御部５０は、視線検出回路１６５から受け取った検出情報に基づいて、ユーザーの視線がある領域に固定されている期間が所定の閾値を越えた場合に、その領域を注視していると判定する。従って、当該領域は、注視が行われた位置である注視位置（注視領域）であるといえる。なお、「視線がある領域に固定されている」とは、例えば、所定の期間経過するまでの間、視線の動きの平均位置が当該領域内にあり、かつ、ばらつき（分散）が所定値よりも少ないことである。

【0046】

タッチパネル７０ａと表示部２８とは一体的に構成することができる。例えば、タッチパネル７０ａは光の透過率が表示部２８の表示を妨げないように構成され、表示部２８の表示面の上層に取り付けられる。そして、タッチパネル７０ａにおける入力座標と、表示部２８の表示画面上の表示座標とを対応付ける。これにより、あたかもユーザーが表示部２８上に表示された画面を直接的に操作可能であるＧＵＩ（グラフィカルユーザーインターフェース）を提供できる。

【0047】

システム制御部５０はタッチパネル７０ａへの以下の操作、あるいは状態を検出できる。
・タッチパネル７０ａにタッチしていなかった指やペンが新たにタッチパネル７０ａにタッチしたこと。すなわち、タッチの開始（以下、タッチダウン（Ｔｏｕｃｈ－Ｄｏｗｎ）と称する）。
・タッチパネル７０ａを指やペンでタッチしている状態であること（以下、タッチオン（Ｔｏｕｃｈ－Ｏｎ）と称する）。
・タッチパネル７０ａを指やペンでタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ－Ｍｏｖｅ）と称する）。
・タッチパネル７０ａへタッチしていた指やペンを離したこと。すなわち、タッチの終了（以下、タッチアップ（Ｔｏｕｃｈ－Ｕｐ）と称する）。
・タッチパネル７０ａに何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ－Ｏｆｆ）と称する）。

【0048】

なお、システム制御部５０によってタッチダウンが検出されると、同時にタッチオンであることも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出されている状態であれば、タッチオンが検出されている状態でもある。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていた全ての指やペンがタッチアップしたことが検出された後は、タッチオフとなる。

【0049】

これらの操作・状態や、タッチパネル７０ａ上に指やペンがタッチしている位置座標は内部バスを通じて、タッチパネル７０ａからシステム制御部５０に通知される。システム制御部５０は通知された情報に基づいてタッチパネル７０ａ上にどのような操作（タッチ操作）が行われたかを判定する。タッチムーブについてはタッチパネル７０ａ上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル７０ａ上の垂直成分・水平成分毎に判定できる。所定距離以上をタッチムーブしたことが検出された場合は、システム制御部５０は、スライド操作が行われたと判定する。

【0050】

タッチパネル上に指をタッチしたままある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックと呼ぶ。フリックは、言い換えればタッチパネル７０ａ上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行われたと判定できる（スライド操作に続いてフリックがあったものと判定できる）。

【0051】

さらに、複数箇所（例えば２点）を同時にタッチして、互いのタッチ位置を近づけるタッチ操作をピンチイン、互いのタッチ位置を遠ざけるタッチ操作をピンチアウトと称する。ピンチアウトとピンチインを総称してピンチ操作（あるいは単にピンチ）と称する。

【0052】

タッチパネル７０ａは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサー方式等、様々な方式のタッチパネルのうちいずれの方式のものを用いてもよい。方式によって、タッチパネルに対する接触があったことでタッチがあったと検出する方式や、タッチパネルに対する指やペンの接近があったことでタッチがあったと検出する方式があるが、いずれの方式でもよい。

【0053】

接眼状態でタッチムーブ操作が行われると、ユーザーはタッチムーブ操作に応じた位置指標の位置の指定方法を、絶対位置指定と相対位置指定のいずれかに設定することができる。例えば、位置指標がＡＦ枠であれば、絶対位置指定の場合、タッチパネル７０ａがタッチされると、タッチされる前に設定されていたＡＦ位置（現在のＡＦ位置）にかかわらず、タッチされた位置（座標入力された位置）に対応付けられたＡＦ位置が設定される。つまり、タッチ操作が行われた位置座標と、表示部２８の位置座標とが対応づけられる。一方、相対位置指定の場合は、タッチ操作が行われた位置座標と表示部２８の位置座標とは対応付けられない。相対位置指定では、タッチパネル７０ａに対するタッチダウン位置にかかわらず、タッチされる前に設定されていたＡＦ位置（現在のＡＦ位置）からタッチムーブの移動方向にタッチムーブの移動量に応じた距離だけ、ＡＦ位置を移動させる。

【0054】

＜撮影に関する設定について＞
まず、以下では、本実施形態に係る撮影に関する設定について図３（ａ）～図３（ｃ）に示す画面を用いて説明する。

【0055】

図３（ａ）は、ＥＶＦ２９または表示部２８に表示される撮影に関する設定メニュー画面を示す。メニュー画面には、設定項目３０１～設定項目３０４が表示されている。本実施形態では、図３（ａ）の画面を用いることによって、後述する、ＡＦ方式の設定、タッチ＆ドラッグＡＦの設定、視線機能関連の設定、ＭＣ６５の中央ボタンに関する設定が可能である。

【0056】

設定項目３０１は、ＡＦ方式の設定を示す。ＡＦ方式の設定には、ユーザーが指定した位置をＡＦの位置にする「１点ＡＦ」と、ライブビュー画像における撮影の対象である被写体（対象物）を検出するモードであり、被写体を追尾してＡＦの位置とすることが可能な「顔＋追尾優先ＡＦ」がある。

【0057】

設定項目３０２は、タッチ＆ドラッグＡＦの設定を示す。本実施形態では、タッチ＆ドラッグＡＦの設定は、タッチ＆ドラッグによって位置指標を移動させる際に、上述した絶対位置指定と相対位置指定とのいずれを用いるかの設定である。

【0058】

設定項目３０３は、視線機能関連の設定を示す。設定項目３０３が選択されると図３（ｂ）に示す画面に遷移する。設定項目３０４は、ＭＣ６５の中央ボタンに関する設定を示す。つまり、設定項目３０４は、当該中央ボタンに何の機能を割り当てるかの設定を示す。設定項目３０４が選択されると図３（ｃ）に示す画面に遷移する。

【0059】

図３（ｂ）に示す画面では、ＥＶＦ２９または表示部２８に設定項目３０５～設定項目３０７が表示されている。設定項目３０５は、視線入力を受け付ける視線機能の有効／無効についての設定（視線ＡＦの設定）を示す。設定項目３０６は、視線位置に基づいてポインタを表示するか否かの設定（ポインタ表示の設定）を示す。設定項目３０７は、ＳＷ１押下時に視線検出位置に基づいて、ＡＦ枠を移動（ジャンプ）させる機能（視線位置確定機能）の有効／無効を示す。例えば、設定項目３０５における選択肢３０５ａが選択されれば、視線機能が有効にされるため、視線入力による位置指標（ＡＦ枠）の位置の指定が可能な状態にされる。一方、選択肢３０５ｂが選択されれば、視線機能が無効にされるため、視線入力による位置指標（ＡＦ枠）の位置の指定が可能でない状態にされる。

【0060】

図３（ｃ）に示す画面では、ＥＶＦ２９または表示部２８に設定候補３０８ａ～設定候補３０８ｃが表示されている。設定候補３０８ａは、ＭＣ６５の中央ボタンを押下しても、特別な機能は何も実行しない設定（無効の設定）にする選択肢である。設定候補３０８ｂは、ＡＦ枠の位置を画面上の中央に戻す（移動させる）機能を中央ボタンに設定にする選択肢である。設定候補３０８ｃは、ＡＦを実行する機能を中央ボタンに設定する選択肢である。図３（ｃ）に示す例では、太枠にて示したカーソルが設定候補３０８ａを示しているため、中央ボタンの機能に対して無効の設定がされている。

【0061】

＜撮影処理について＞
以下では、本実施形態によるデジタルカメラ１００の撮影モード処理について、図４に示すフローチャートを用いて説明する。本フローチャートでは、デジタルカメラ１００は、視線入力によって位置指標であるＡＦ枠の位置を指定できる状態と、視線入力によってＡＦ枠の位置を指定できない状態とで、所定の操作をされた場合における当該ＡＦ枠の移動（表示）する位置を異ならせる。これによって、ユーザーの操作性を向上させることができる。

【0062】

本フローチャートの処理の開始前に、まず、電源スイッチ７２が操作されて電源がオンに切り替わると、システム制御部５０は、フラグや制御変数等を初期化した後、撮像部２２でのライブビュー画像の撮影を開始し、ライブビュー画像を表示部２８に表示する。ま
た、カメラ設定値に基づいて、システム制御部５０は、カメラ設定値を示す情報アイコンをライブビュー画像に重畳して表示する。その後、図４の処理が開始する。なお、本フローチャートの処理は、不揮発性メモリ５６に記憶したプログラムをシステムメモリ５２に展開して、システム制御部５０が実行することで実現する。

【0063】

Ｓ４０１において、システム制御部５０は、操作部７０に対して、視線機能の有効／無効を切り替える操作（設定項目３０５の設定を変更する操作）がされたか否かを判定する。当該操作がされた場合はＳ４０２へ進み、そうでなければＳ４０３へ進む。Ｓ４０２において、システム制御部５０は、視線機能の有効／無効を切り替える。システム制御部５０は、切り替えた結果の設定内容を不揮発性メモリ５６に記録する。

【0064】

Ｓ４０３において、システム制御部５０は、操作部７０に対して、ユーザーの視線先を示す視線ポインタ表示の有効／無効を切り替える操作（設定項目３０６の設定を変更する操作）がされたか否かを判定する。当該操作がされた場合はＳ４０４へ進み、そうでなければＳ４０５へ進む。Ｓ４０４において、システム制御部５０は、視線ポインタ表示の有効／無効を切り替える。システム制御部５０は、切り替えた結果の設定内容を不揮発性メモリ５６に記録する。

【0065】

Ｓ４０５において、システム制御部５０は、視線位置確定機能の有効／無効を切り替える操作（設定項目３０７の設定を変更する操作）がされたか否かを判定する。視線位置確定機能とは、第１シャッタースイッチ６２の押下に応じて、視線位置を確定する機能である。当該操作がされた場合はＳ４０６へ進み、そうでなければＳ４０７へ進む。Ｓ４０６において、システム制御部５０は、視線位置確定機能の有効／無効を切り替える。システム制御部５０は、切り替えた結果の設定内容を不揮発性メモリ５６に記録する。

【0066】

Ｓ４０７において、システム制御部５０は、タッチ＆ドラッグＡＦの設定を切り替える操作（設定項目３０２の設定を変更する操作）がされたか否かを判定する。当該操作がされた場合はＳ４０８へ進み、そうでなければＳ４０９へ進む。Ｓ４０８において、システム制御部５０は、タッチ＆ドラッグＡＦの設定を切り替える。システム制御部５０は、切り替えた結果の設定内容を不揮発性メモリ５６に記録する。

【0067】

Ｓ４０９において、システム制御部５０は、ＡＦ方式の設定を切り替える操作（設定項目３０１の設定を変更する操作）がされたか否かを判定する。当該操作がされた場合はＳ４１０へ進み、そうでなければＳ４１１へ進む。Ｓ４１０において、システム制御部５０は、ＡＦ方式の設定を切り替える。システム制御部５０は、切り替えた結果の設定内容を不揮発性メモリ５６に記録する。

【0068】

Ｓ４１１において、システム制御部５０は、ＭＣ６５の中央ボタンの機能を切り替える操作（設定項目３０４の設定を変更する操作）がされたか否かを判定する。当該操作がされた場合はＳ４１２へ進み、そうでなければＳ４１３へ進む。Ｓ４１２において、システム制御部５０は、ＭＣ６５の中央ボタンの機能を切り替える。システム制御部５０は、切り替えた結果の設定内容（設定候補３０８ａ～３０８ｃのいずれかに対応する情報）を不揮発性メモリ５６に記録する。

【0069】

Ｓ４１３において、システム制御部５０は、不揮発性メモリ５６を参照し、視線機能が有効であるか否かを判定する。視線機能が有効である場合はＳ４１４へ進み、そうでなければＳ４１６へ進む。

【0070】

Ｓ４１４において、システム制御部５０は、不揮発性メモリ５６を参照し、視線ポインタ表示が有効であるか否かを判定する。視線ポインタ表示が有効である場合はＳ４１５へ
進み、そうでなければＳ４１６へ進む。

【0071】

Ｓ４１５において、システム制御部５０は、視線ポインタ表示をＥＶＦ２９に行う。なお、視線ポインタは、視線検出部１６０で視線入力を検知している場合に表示する。従って、ユーザーが接眼部１６に接眼しておらず、表示先が表示部２８となっている場合は視線ポインタは表示されない。図５（ｃ）は、視線のポインタ表示がＥＶＦ２９に行われた画面例である。一点ＡＦ枠５０２と、視線入力に基づいた位置である視線ポインタ５０３が、ライブビュー画像５０１に重畳して表示されている。視線ポインタ５０３の表示位置は視線検出部１６０で検出している視線入力の入力位置に追従して移動する。ユーザーがライブビュー画像を見る理由はＡＦ位置の指定を行いたい場合に限らない。そのため、視線ポインタ５０３は視線入力位置に追従して移動するが、視線位置確定の操作が行われるまでは視線ポインタ５０３の位置でのＡＦの実行、あるいは追尾対象の更新は行わない。

【0072】

Ｓ４１６において、システム制御部５０は、ＭＣ６５に対する方向指示操作がされたか否かを判定する。方向指示操作がされた場合はＳ４１７へ進み、そうでなければＳ４２２へ進む。

【0073】

Ｓ４１７において、システム制御部５０は、不揮発性メモリ５６を参照し、ＡＦ方式が「顔＋追尾優先ＡＦ」であるか否かを判定する。ＡＦ方式が「顔＋追尾優先ＡＦ」である場合はＳ４１９へ、そうでなければＳ４１８へ進む。

【0074】

Ｓ４１８において、システム制御部５０は、ＭＣ６５に対する方向指示操作に従って、一点ＡＦ枠５０２を移動する。このＭＣ６５に対する方向指示操作に応じたＡＦ枠５０２の移動は、視線入力が有効であっても、ＭＣ６５に対する方向指示操作がなされている間の視線入力位置（視線ポインタ５０３が表示されている場合はその表示位置）にはかかわらない移動である。図５（ａ）、図５（ｂ）は、システム制御部５０が一点ＡＦ枠５０２を移動させる際のＥＶＦ２９または表示部２８の画面例である。図５（ａ）に示すように画面の中央に一点ＡＦ枠５０２が表示されている状態から、例えば、ＭＣ６５に対して右下方向への指示操作を数回すると、図５（ｂ）のような画面の右下の方向に一点ＡＦ枠５０２が移動する。

【0075】

Ｓ４１９において、システム制御部５０は、撮像部２２で撮像されたライブビュー画像から特定の種別の被写体（人物の顔、人物の目、動物、乗り物、建物など)が検出された
か否かを判定する。特定の種別の被写体が検出された場合はＳ４２０へ進み、そうでなければＳ４２２へ進む。なお、特定の種別の被写体の検出は、システム制御部５０が、撮像部２２にて撮像したライブビュー画像を解析（分析）することによって実現可能である（被写体認識処理）。

【0076】

Ｓ４２０において、システム制御部５０は、検出された被写体が１つか否かを判定する。検出された被写体が１つであった場合はＳ４２２へ進み、そうでなければＳ４２１へ進む。

【0077】

Ｓ４２１において、システム制御部５０は、追尾する被写体を決定（変更）する。図５（ｆ）、図５（ｇ）は追尾する被写体を決定する（切り替える）際のＥＶＦ２９または表示部２８の画面例である。図５（ｆ）では、被写体５０４ａ、被写体５０４ｂが含まれるライブビュー画像５０１に対して、顔検出枠５０５と左右アイコン５０８を重畳して表示している。このとき、顔検出枠５０５と左右アイコン５０８が被写体５０４ｂに重畳されており、被写体５０４ｂを追尾するように設定されている。左右アイコン５０８は、ＭＣ６５や４方向キー７４によって、追尾（選択）する被写体が切り替え可能であることを示している。図５（ｆ）の状態から、ＭＣ６５に対して左方向への指示操作が行われると、
追尾の対象が被写体５０４ａに切り替わり、図５（ｇ）に示すように、被写体５０４ａに対して追尾枠５０６と左右アイコン５０８が表示（重畳）される。

【0078】

Ｓ４２２において、システム制御部５０は、ＭＣ６５の中央ボタンが押下されたか否かを判定する。中央ボタンが押下された場合はＳ４２３へ進み、そうでなければＳ４２４へ進む。

【0079】

Ｓ４２３において、システム制御部５０は、ＭＣ６５の中央ボタンが押下されたことに応じた処理（中央ボタン処理）を実行する。なお、当該処理については、図６に示すフローチャートを用いて詳細に後述する。

【0080】

Ｓ４２４において、システム制御部５０は、操作部７０に対して撮影操作（シャッターボタン６１の半押し及び全押し）が行われたか否かを判定する。当該操作が行われた場合はＳ４２５へ進み、そうでなければＳ４２６へ進む。

【0081】

Ｓ４２５において、システム制御部５０は、現在の一点ＡＦ枠の位置または追尾枠の位置においてＡＦを実行して、撮影（ライブビュー画像の撮影ではなく、本露光を行い記録媒体２００に画像ファイルとして記録するまでの一連の処理）を行う。従って、本実施形態では、追尾枠はＡＦ枠であるともいえる。

【0082】

Ｓ４２６において、システム制御部５０は、操作部７０に対して、その他の操作がされたか否かを判定する。当該操作が行われた場合はＳ４２７へ進み、そうでなければＳ４２８へ進む。

【0083】

Ｓ４２７において、システム制御部５０は、Ｓ４２６において行われた操作に応じた処理を行う。この処理には、例えば、動画記録の開始操作による動画撮影であったり、ＡＥの位置の移動操作などが含まれる。

【0084】

Ｓ４２８において、システム制御部５０は、操作部７０に対して終了操作がされたか否かを判定する。終了操作がされた場合は、本フローチャートの処理が終了し、そうでなければＳ４０１へ進む。

【0085】

＜中央ボタン処理について；Ｓ４２３＞
以下では、Ｓ４２３の処理であるＭＣ６５の中央ボタンが押下された場合の処理について、図６に示すフローチャートを用いて説明する。なお、本フローチャートの処理は、不揮発性メモリ５６に記憶したプログラムをシステムメモリ５２に展開して、システム制御部５０が実行することで実現する。

【0086】

Ｓ６０１において、システム制御部５０は、ＭＣ６５の中央ボタンへの割り当て機能が、「ＡＦ枠を画面中央に戻す機能」（設定候補３０８ｂ）であるか否かを判定する。中央ボタンへの割り当て機能が「ＡＦ枠を画面中央に戻す機能」である場合はＳ６０３へ進み、そうでなければＳ６０２へ進む。

【0087】

Ｓ６０２において、システム制御部５０は、ＭＣ６５の中央ボタンへの割り当て機能を実行する。例えば、割り当てられた機能が「ＡＦの実行」（設定候補３０８ｃ）であれば、システム制御部５０は、現在のＡＦ方式、ＡＦ枠（一点ＡＦ枠または追尾枠）の位置に基づいてＡＦを実行する。

【0088】

Ｓ６０３において、システム制御部５０は、視線機能が有効か否かを判定する。視線機能が有効である場合はＳ６０４へ進み、そうでなければＳ６１０へ進む。

【0089】

Ｓ６０４において、システム制御部５０は、視線入力を検出したか否かを判定する。視線入力が検出された場合はＳ６０５へ進み、そうでなければＳ６１０へ進む。

【0090】

Ｓ６０５において、システム制御部５０は、ＡＦ方式が「顔＋追尾優先ＡＦ」であるか否かを判定する。ＡＦ方式が「顔＋追尾優先ＡＦ」である場合はＳ６０７へ、そうでなければＳ６０６へ進む。

【0091】

Ｓ６０６において、システム制御部５０は、視線ポインタ５０３の位置（視線が検出された位置）に、一点ＡＦ枠５０２を表示（移動）する。図５（ｃ）、図５（ｄ）は、視線位置に一点ＡＦ枠５０２を移動させる場合のＥＶＦ２９における画面例である。図５（ｃ）、図５（ｄ）では、一点ＡＦ枠５０２と視線ポインタ５０３がライブビュー画像５０１に重畳して表示されている。ここで、図５（ｃ）では、一点ＡＦ枠５０２と視線ポインタ５０３が互いに離れた位置に表示されている。このときに、視線機能が有効であり、かつ視線入力を検出している状態でＭＣ６５の中央ボタンが押下されることによって、図５（ｄ）に示すように視線ポインタ５０３の位置へ、一点ＡＦ枠５０２が移動する。なお、その後に、ＭＣ６５に対する方向指示操作がされた場合は、図５（ｅ）に示すように、視線検出した位置から一点ＡＦ枠５０２の微調整が可能である（Ｓ４１６～Ｓ４１８）。このＭＣ６５に対する方向指示操作に応じたＡＦ枠５０２の移動は、視線入力が有効であっても、ＭＣ６５に対する方向指示操作がなされている間の視線入力位置（視線ポインタ５０３が表示されている場合はその表示位置）にはかかわらない移動である。

【0092】

Ｓ６０７において、システム制御部５０は、検出した被写体を追尾中である否かを判定する。被写体を追尾中であればＳ６０９へ進み、そうでなければＳ６０８へ進む。Ｓ６０８において、システム制御部５０は、視線の位置にある被写体を選択して、当該被写体に対して追尾を開始する。Ｓ６０９において、システム制御部５０は、被写体の追尾（追尾状態）を解除する。ここで、システム制御部５０は、被写体の追尾を解除すると、追尾枠を非表示にする。

【0093】

図５（ｊ）～図５（ｏ）は、ＡＦ方式が「顔＋追尾優先ＡＦ」である場合の、視線による被写体の追尾のＥＶＦ２９における画面例である。図５（ｊ）では、被写体５０４を含むライブビュー画像５０１に重畳して、視線ポインタ５０３と顔検出枠５０５が表示されている。ここで、視線ポインタ５０３は、視線検出位置に応じて移動する。しかし、視線ポインタ５０３が顔検出枠５０５に近づいた場合は、２種類の表示物が被って視認性が悪い。このため、この場合には、システム制御部５０は、図５（ｋ）に示すように視線ポインタ５０３を非表示とし、顔検出枠５０５を、吸着表現の顔検出枠５０７へ変化させてもよい。また、この場合に、システム制御部５０は、単に、視線ポインタ５０３を非表示とし、顔検出枠５０５を表示させておいてもよい。

【0094】

図５（ｋ）に示す状態で、ＭＣ６５の中央ボタンが押下されると、システム制御部５０は、図５（ｌ）に示すように視線ポインタ５０３の位置にある被写体に追尾枠５０６を表示して、当該被写体の追尾を開始する。また、このとき、視線ポインタ５０３の位置に被写体が存在しなかった場合には、システム制御部５０は、追尾枠５０６の表示および被写体の追尾は行わないが、視線ポインタ５０３の位置に１点ＡＦ枠５０２を表示してもよい。なお、視線ポインタ５０３の位置に追尾枠５０６を表示する場合についても２種類の表示物が被って視認性が悪いため、図５（ｍ）に示すように視線ポインタ５０３を非表示とし、追尾枠５０６を、吸着表現の追尾枠５０８に変化させてもよい。また、この場合に、システム制御部５０は、単に、視線ポインタ５０３を非表示とし、追尾枠５０６を表示させておいてもよい。

【0095】

また、図５（ｎ）に示すように、視線ポインタ５０３が家の被写体を示している状態において、ＭＣ６５の中央ボタンが押下されると、システム制御部５０は、図５（ｏ）に示すように家の被写体に対して追尾枠５０６を表示して、家の被写体の追尾を開始する。

【0096】

なお、Ｓ６０９で被写体の追尾（追尾状態）を解除した場合には、例えば図５（ｏ）の表示状態から図５（ｊ）または図５（ｋ）または図５（ｎ）のような表示状態に変更される（視線ポインタを表示する設定の場合）。また、例えば図５（ｉ）の表示状態から図５（ｈ）のような表示状態に変更される（視線ポインタを表示しない設定の場合）。

【0097】

Ｓ６１０において、システム制御部５０は、ＡＦ方式が「顔＋追尾優先ＡＦ」であるか否かを判定する。ＡＦ方式が「顔＋追尾優先ＡＦ」である場合はＳ６１２へ進み、そうでなければＳ６１１へ進む。

【0098】

Ｓ６１１において、システム制御部５０は、ＭＣ６５の中央ボタンへの割り当て機能が、「ＡＦ枠を画面中央に戻す機能」であるため、ＥＶＦ２９または表示部２８の画面中央（画面の中心）に一点ＡＦ枠５０２を表示（移動）する。これにより、例えば図５（ｂ）のような表示状態でＭＣ６５の中央ボタンが押下されたことに応じて、図５（ａ）のような表示に更新され、１点ＡＦ枠５０２が画面中央に移動する。これにより、ＭＣ６５に対する方向指示操作を行うよりも素早く、ＡＦ位置を中央にリセットすることができる。なおこの画面中央へのリセットは、視線入力位置にはかかわらない位置（中央）への移動である。

【0099】

Ｓ６１２において、システム制御部５０は、検出した被写体を追尾中か否かを判定する。追尾中であればＳ６１４へ進み、そうでなければＳ６１３へ進む。Ｓ６１３において、システム制御部５０は、ＥＶＦ２９または表示部２８の画面中央にある被写体を選択して、当該被写体に対して追尾を開始する。Ｓ６１４において、システム制御部５０は、被写体の追尾（追尾状態）を解除する。

【0100】

図５（ｈ）、図５（ｉ）は、視線を用いない場合における被写体の追尾の画面例である。図５（ｈ）では、ライブビュー画像５０１が表示されており、被写体を追尾していない状態である。Ｓ６１３では、この状態からＭＣ６５の中央ボタンが押下されると、システム制御部５０は、図５（ｉ）に示すように画面中央の被写体に追尾枠５０６を表示して、当該被写体の追尾を開始する。なお、ＭＣ６５の中央ボタンが押下されたときに、画面中央に追尾可能な被写体が存在しない場合には、追尾枠５０６の表示および被写体の追尾は行われない。

【0101】

以上により、視線機能が有効な状態であれば、ＭＣ６５の中央ボタンが押下されると、ＡＦ枠を中央に戻す処理の代わりに、視線検出位置での確定処理が行われることで、操作性向上が実現される。また、ＭＣ６５が視線位置へのジャンプ手段と微調整の手段を有するため、２つの手段が物理的に近い位置に配置されており、素早い操作が実現できる。

【0102】

なお、ＭＣ６５には中央ボタンと方向指示操作のための操作部材が存在する例に説明したが、これに限らない。一つの形態としては、方向指示操作と、方向に関係のない操作を切り替え可能な操作部材であればよい。例えば、タッチパネルにおける、タッチムーブ操作（方向指示）と、タップ操作（方向無関係）の組み合わせでもよいし、感圧タッチパネルにおける、タッチムーブ操作（方向指示）と、強いプレス（方向無関係）の組み合わせでもよい。また、４方向キー７４とＳＥＴボタン７５のような、一対の方向指示操作と、それらに囲まれた位置にあるボタンの組み合わせでもよい。この場合には、４方向キー７４とＳＥＴボタン７５とは、１つの操作部材であるとみなすことができる。一対の方向指示操作は、４方向キー７４だけでなく、回転操作部材でもよい。

【0103】

なお、ＭＣ６５は、カメラをホールドしているときに触りやすい位置に配置しているため、撮影時は操作がしやすいが、反面、カメラを持ち歩いている場合には、意図せず触ってしまい、ＡＦ枠の位置が変わってしまうなどの誤操作の懸念がある。そのため、デフォルト設定では、ＭＣ６５に対する操作に応じた処理を撮影モード処理中は無効とする設定を設けてもよい。ただし、無効に設定している状態でも、視線機能が有効であれば、ＭＣ６５の八方向や中央ボタンの操作に応じた処理を有効としてもよい。つまり、システム制御部５０は、視線機能が無効であれば中央ボタンの押下に応じたＡＦ枠の移動が無効であっても、視線機能が有効であれば中央ボタンの押下に応じたＡＦ枠の移動が可能であるように設定してもよい。

【0104】

なお、システム制御部５０が行うものとして説明した上述の各種制御は１つのハードウェアが行ってもよいし、複数のハードウェア（例えば、複数のプロセッサや回路）が処理を分担することで、装置全体の制御を行ってもよい。

【0105】

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。さらに、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。

【0106】

また、上述した実施形態においては、本発明をデジタルカメラに適用した場合を例にして説明したが、これはこの例に限定されず、視線入力による操作が可能な電子機器であれば適用可能である。すなわち、本発明は、パーソナルコンピュータやＰＤＡ、携帯電話端末や携帯型の画像ビューワ、ディスプレイを備えるプリンタ装置、デジタルフォトフレーム、音楽プレーヤー、ゲーム機、電子ブックリーダーなどに適用可能である。

【0107】

また、デジタルカメラといった撮像装置本体に限らず、有線または無線通信を介して撮像装置（ネットワークカメラを含む）と通信し、撮像装置を遠隔で制御する制御装置にも本発明を適用可能である。撮像装置を遠隔で制御する装置としては、例えば、スマートフォンやタブレットＰＣ、デスクトップＰＣなどの装置がある。制御装置側で行われた操作や制御装置側で行われた処理に基づいて、制御装置側から撮像装置に各種動作や設定を行わせるコマンドを通知することにより、撮像装置を遠隔から制御可能である。また、撮像装置で撮影したライブビュー画像を有線または無線通信を介して受信して制御装置側で表示できるようにしてもよい。

【0108】

なお、上記の各実施形態の各機能部は、個別のハードウェアであってもよいし、そうでなくてもよい。２つ以上の機能部の機能が、共通のハードウェアによって実現されてもよい。１つの機能部の複数の機能のそれぞれが、個別のハードウェアによって実現されてもよい。１つの機能部の２つ以上の機能が、共通のハードウェアによって実現されてもよい。また、各機能部は、ＡＳＩＣ、ＦＰＧＡ、ＤＳＰなどのハードウェアによって実現されてもよいし、そうでなくてもよい。例えば、装置が、プロセッサと、制御プログラムが格納されたメモリ（記憶媒体）とを有していてもよい。そして、装置が有する少なくとも一部の機能部の機能が、プロセッサがメモリから制御プログラムを読み出して実行することにより実現されてもよい。

【0109】

（その他の実施形態）
本発明は、上記の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

【符号の説明】

【0110】

１００：デジタルカメラ、５０：システム制御部、１６０：視線検出部、
６５：ＭＣ（マルチコントローラー）

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】