特開 2024-179407 撮像装置およびその制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024179407

(43)【公開日】2024-12-26

(54)【発明の名称】撮像装置およびその制御方法

(51)【国際特許分類】

   H04N 23/60 20230101AFI20241219BHJP

   G03B 15/00 20210101ALI20241219BHJP

   G03B 17/18 20210101ALI20241219BHJP

【ＦＩ】

H04N23/60 100

G03B15/00 Q

G03B17/18

【審査請求】未請求

【請求項の数】17

【出願形態】ＯＬ

(21)【出願番号】P 2023098239

(22)【出願日】2023-06-15

(71)【出願人】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】100110412

【弁理士】

【氏名又は名称】藤元 亮輔

(74)【代理人】

【識別番号】100104628

【弁理士】

【氏名又は名称】水本 敦也

(74)【代理人】

【識別番号】100121614

【弁理士】

【氏名又は名称】平山 倫也

(72)【発明者】

【氏名】長谷川 玲治

【テーマコード（参考）】

2H102

5C122

【Ｆターム（参考）】

2H102AA71

2H102BB44

5C122EA42

5C122EA65

5C122EA69

5C122FD01

5C122FD13

5C122FH11

5C122FH14

5C122FK37

5C122FK41

5C122FL06

5C122HA13

5C122HA35

5C122HB01

5C122HB05

(57)【要約】

【課題】撮像装置において、被写体の検出に関するユーザへの通知を振動により行う。
【解決手段】撮像装置２０は、撮像により画像データを生成する。該撮像装置は、画像データから特定の被写体を検出する検出手段３０１～３０３と、特定の被写体を撮像に関する処理の対象として選択する選択手段３０４と、ユーザが認識できる振動を発生する振動手段２１３と、検出手段による検出結果に応じて振動手段を制御する制御手段３０とを有する。
【選択図】図１

【特許請求の範囲】

【請求項1】

撮像により画像データを生成する撮像装置であって、
前記画像データから特定の被写体を検出する検出手段と、
前記特定の被写体を撮像に関する処理の対象として選択する選択手段と、
ユーザが認識できる振動を発生する振動手段と、
前記検出手段による検出結果に応じて前記振動手段を制御する制御手段とを有することを特徴とする撮像装置。

【請求項2】

前記制御手段は、前記検出手段により前記特定の被写体が検出された場合と検出されなかった場合とで前記振動手段の制御を変えることを特徴とする請求項１に記載の撮像装置。

【請求項3】

前記特定の被写体が検出されなかった場合には、前記特定の被写体が誤検出された場合を含むことを特徴とする請求項２に記載の撮像装置。

【請求項4】

前記制御手段は、前記特定の被写体が検出された場合は前記振動手段を振動させ、前記特定の被写体が検出されなかった場合は前記振動手段を振動させないことを特徴とする請求項２に記載の撮像装置。

【請求項5】

前記制御手段は、前記特定の被写体が検出された場合は前記振動手段に第１の振動を発生させ、前記特定の被写体が検出されなかった場合は前記振動手段に前記第１の振動とは異なる第２の振動を発生させることを特徴とする請求項２に記載の撮像装置。

【請求項6】

前記検出手段は、特定の動きを行った被写体を前記特定の被写体として検出することを特徴とする請求項１に記載の撮像装置。

【請求項7】

前記検出手段は、予め登録された被写体を前記特定の被写体として検出することを特徴とする請求項１に記載の撮像装置。

【請求項8】

前記撮像に関する処理は、前記特定の被写体に対する追尾、自動露出制御、オートフォーカスおよびオートホワイトバランス調節のうち少なくとも１つを含むことを特徴とする請求項１に記載の撮像装置。

【請求項9】

ユーザにより操作される操作部材を有し、
前記振動手段は、前記操作部材を振動させることを特徴とする請求項１に記載の撮像装置。

【請求項10】

前記操作部材は、撮像を指示する操作部材であることを特徴とする請求項９に記載の撮像装置。

【請求項11】

前記操作部材は、撮像を指示する以外の機能が割り当てられた操作部材であることを特徴とする請求項９に記載の撮像装置。

【請求項12】

前記振動手段が振動している間での前記操作部材の操作に応じて、該操作部材に割り当てられた第１の機能に対応する動作を行うことを特徴とする請求項１１に記載の撮像装置。

【請求項13】

前記第１の機能は、前記選択手段による前記特定の被写体の選択の変更をキャンセルする又は指示する機能であることを特徴とする請求項１２に記載の撮像装置。

【請求項14】

前記振動手段が振動している間での前記操作部材の操作に応じて前記第１の機能に対応する動作を行い、前記振動手段が振動していないときの前記操作部材の操作に応じて前記第１の機能とは異なる第２の機能に対応する動作を行うことを特徴とする請求項１２に記載の撮像装置。

【請求項15】

前記制御手段は、選択された前記特定の被写体が変化した場合に、該変化の方向を示す振動を前記振動手段に生じさせることを特徴とする請求項１に記載の撮像装置。

【請求項16】

撮像により画像データを生成し、ユーザが認識できる振動を発生する振動手段を有する撮像装置の制御方法であって、
前記画像データから特定の被写体を検出する検出ステップと、
前記特定の被写体を撮像に関する処理の対象として選択するステップと、
前記検出ステップでの検出結果に応じて前記振動手段を制御するステップとを有することを特徴とする制御方法。

【請求項17】

請求項１６に記載の制御方法に従う処理を、前記撮像装置のコンピュータに実行させることを特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、被写体検出機能を有する撮像装置に関する。

【背景技術】

【0002】

デジタルカメラ等の撮像装置には、特定の人物（顔）を検出して撮像対象としての主被写体として選択し、その主被写体に対するＡＥやＡＦ等を行うものがある。従来の撮像装置では、背面モニタや電子ビューファインダ（ＥＶＦ）に、検出した主被写体を囲む枠を画像にオーバーレイ表示することでユーザに主被写体が選択されたことを伝え、この表示を見たユーザがレリーズボタンを操作して撮像を行う。

【0003】

ただし、撮像装置の背面モニタやＥＶＦは表示サイズがそもそも小さく、そこにオーバーレイ表示される枠をユーザが注視し続けたり、枠の位置等の変化に応じた撮像指示操作をユーザが咄嗟に行ったりすることは難しい。

【0004】

特許文献１には、カメラシステムにおいて、ＡＦのピント方向や合焦状態を振動モータが発生する振動によりユーザに通知することが開示されている。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２０２１－２７３６８号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

特許文献１には、被写体の検出に関する通知を振動を利用して行うことについては開示されていない。

【0007】

本発明は、被写体の検出に関するユーザへの通知を振動により行えるようにした撮像装置を提供する。

【課題を解決するための手段】

【0008】

本発明の一側面としての撮像装置は、撮像により画像データを生成する。該撮像装置は、画像データから特定の被写体を検出する検出手段と、特定の被写体を撮像に関する処理の対象として選択する選択手段と、ユーザが認識できる振動を発生する振動手段と、検出手段による検出結果に応じて振動手段を制御する制御手段とを有する。

【0009】

また本発明の他の一側面としての制御方法は、撮像により画像データを生成し、ユーザが認識できる振動を発生する振動手段を有する撮像装置に適用される。該制御方法は、画像データから特定の被写体を検出する検出ステップと、特定の被写体を撮像に関する処理の対象として選択するステップと、検出手段による検出結果に応じて振動手段を制御するステップとを有することを特徴とする。なお、上記制御方法に従う処理を撮像装置のコンピュータに実行させるプログラムも、本発明の他の一側面を構成する。

【発明の効果】

【0010】

本発明によれば、被写体の検出に関するユーザへの通知を振動により行うことができる。

【図面の簡単な説明】

【0011】

【図1】実施例１におけるレンズ交換式カメラシステムの構成を示すブロック図。

【図2】実施例１おける処理を示すフローチャート。

【図3】実施例２における処理を示すフローチャート。

【図4】実施例１～３での表示画像の例を示す図。

【図5】実施例３における処理を示すフローチャート。

【発明を実施するための形態】

【0012】

以下、本発明の実施例について図面を参照しながら説明する。

【実施例0013】

実施例１では、撮像装置としてのカメラ２０は、人物の特定の動き（行動）を検出して追尾することで撮像をサポートする。

【0014】

図１は、上記カメラ２０を含むレンズ交換式カメラシステムの構成を示している。カメラシステムは、カメラ２０と、該カメラ２０に対して着脱（交換）可能なレンズユニット１０とにより構成されている。レンズユニット１０にはレンズユニット１０全体の動作を制御するレンズ制御部１０６が設けられ、カメラ２０にはカメラシステム全体の動作を制御するカメラ制御部３０が設けられている。カメラ制御部３０とレンズ制御部１０６は、不図示のマウントに設けられた端子を通じて相互に通信が可能である。

【0015】

レンズユニット１０において、固定レンズ１０１、絞り１０２およびフォーカスレンズ１０３は撮像光学系を構成する。絞り１０２は、絞り駆動部１０４によって開口径が変化するように駆動され、後述する撮像素子２０１への入射光量を制御する。フォーカスレンズ１０３は、フォーカスレンズ駆動部１０５によって光軸方向での位置が変化するように駆動され、撮像光学系の焦点調節を行う。絞り駆動部１０４とフォーカスレンズ駆動部１０５は、レンズ制御部１０６によって制御される。

【0016】

レンズ操作部１０７は、ユーザがレンズユニット１０の動作に関する設定を行うための入力デバイス群である。レンズ操作部１０７が操作を通じて、ＡＦ（オートフォーカス）とＭＦ（マニュアルフォーカス）の切り替え、ＭＦでのフォーカスレンズの位置調整、フォーカスレンズの移動範囲の設定および手振れ補正モードの設定等を行うことができる。レンズ制御部１０６は、これらの設定に応じた制御や処理を行う。

【0017】

また、レンズ制御部１０６は、カメラ制御部３０から受信した制御命令や制御情報に応じて絞り駆動部１０４やフォーカスレンズ駆動部１０５を制御したり、撮像光学系の状態を示すレンズ情報をカメラ制御部３０に送信したりする。

【0018】

なお、本実施例ではカメラ２０がレンズ交換式である場合について説明しているが、撮像装置はレンズ一体型カメラであってもよい。

【0019】

カメラ２０において、撮像素子２０１は、ＣＣＤセンサやＣＭＯＳセンサにより構成され、レンズユニット１０の撮像光学系により形成された被写体像を光電変換（撮像）する。撮像素子２０１は、二次元配列された複数の画素を有し、各画素はフォトダイオードにより受光量に応じた電荷を蓄積する。各フォトダイオードに蓄積された電荷は、カメラ制御部３０の指令に従ってタイミングジェネレータ２１４から出力される駆動パルスのタイミングで撮像信号として読み出される。このとき、撮像信号とは別にＡＦに使用される信号としてのＡＦ信号も読み出される。

【0020】

ＣＤＳ／ＡＧＣ／ＡＤコンバータ（以下、単にコンバータ２０２という）は、撮像素子２０１から読み出された撮像信号およびＡＦ信号に対して、リセットノイズを除去するための相関二重サンプリング、ゲイン調節およびＡＤ変換を行って画像データおよびＡＦデータを生成する。コンバータ２０２は、これら画像データおよびＡＦデータをそれぞれ、画像入力コントローラ２０３およびＡＦ信号処理部２０４に出力する。

【0021】

画像入力コントローラ２０３は、コンバータ２０２から出力された画像データをバス２１を介してＳＤＲＡＭ２０９に格納する。ＳＤＲＡＭ２０９に格納された画像データは、バス２１を介して表示制御部２０５によって読み出され、表示部２０６に表示される。また、画像データの記録を行う録画モードでは、ＳＤＲＡＭ２０９に格納された画像データは記録媒体制御部２０７によって半導体メモリ等の記録媒体２０８に記録される。

【0022】

ＲＯＭ２１０には、カメラ制御部３０が実行するプログラムやその実行に必要な各種データ等が格納されている。フラッシュＲＯＭ２１１には、ユーザにより設定されたカメラ２０の動作に関する各種設定情報等が格納されている。

【0023】

カメラ制御部３０内において、検出部Ａ３０１は、画像入力コントローラ２０３から入力された画像データ内の人物等の被写体を検出し、その座標や特徴量を取得して記憶する。被写体を検出する方法は、ニューラルネットワークや機械学習モデルを使用した公知の方法を用いることができる。

【0024】

検出部Ｂ３０２は、画像入力コントローラ２０３から入力された画像データ内において検出部Ａ３０１が検出した被写体とは別の被写体を検出し、その座標や特徴量を取得して記憶する。別の被写体を検出する方法は、検出部Ａと同じである。

【0025】

行動検出部３０３は、画像入力コントローラ２０３から入力された画像データ内の人物の特定の行動を検出し、その人物の座標や特徴量を取得して記憶する。特定の行動を検出する方法にも、ニューラルネットワークや機械学習モデルを使用した公知の方法を用いることができる。検出部Ａ３０１、検出部Ｂ３０２および行動検出部３０３により検出手段が構成される。

【0026】

選択手段としての追尾部３０４は、追尾対象（撮像に関する処理の対象）としての特定の被写体を選択してその座標を記憶するかその被写体の特徴量を抽出して記憶し、別の画像データから同じ被写体を検出してその特徴量を更新するとともにその座標を出力する。これを連続的な画像データ（フレーム画像）で繰り返し行うことにより、特定の被写体を追尾することができる。特徴量の抽出と特徴量を用いて同じ被写体を検出する方法は、公知の方法を用いることができる。

【0027】

画像処理部３０６ は、ＳＤＲＡＭ２０９内に格納された画像データに対して所定の画像処理を実行する。所定の画像処理には、オートホワイトバランス調節処理（ＡＷＢ）、色補間（デモザイク）処理、ガンマ補正処理等の現像処理や、信号形式変換処理、スケーリング処理等がある。

【0028】

制御手段としてのカメラ制御部３０は、カメラ２０内の各部と情報をやり取りしながら各部を制御する。またカメラ制御部３０は、ユーザ操作に基づく操作部２１２からの入力に応じて、電源のＯＮ／ＯＦＦ、ライブビュー表示のＯＮ／ＯＦＦ、撮像動作、ＡＦ動作、記録画像の再生動作および各種設定の変更等の様々な処理を実行する。操作部２１２には、電源のＯＮ／ＯＦＦを指示する電源ボタンと、ライブビュー表示のＯＮ／ＯＦＦを指示するライブビューボタンと、ＡＦ動作や撮像動作を指示するレリーズボタン等が含まれる。

【0029】

さらにカメラ制御部３０は、レンズユニット１０（レンズ制御部１０６）に対する制御命令やカメラ２０の情報を送信したり、レンズ制御部１０６からレンズ情報を受信したりする。カメラ制御部３０は、マイクロコンピュータにより構成され、ＲＯＭ２１０に記憶されたプログラムを実行することで、カメラシステム全体の制御を司る。

【0030】

また、カメラ２０には、振動素子２１３が設けられている。振動素子２１３は、圧電素子、振動（偏心）モータおよびリニアアクチュエータ等により構成され、レリーズボタン等の操作部材にユーザが認識できる振動を生じさせる。この振動によりユーザに通知を行うことができる。カメラ制御部３０は、検出部Ａ３０１、検出部Ｂ３０２および行動検出部３０３による検出結果に応じて振動素子２１３を制御する。

【0031】

以下、カメラ制御部３０がプログラムに従って実行する処理（制御方法）について説明する。図２のフローチャートは、カメラ２０にライブビュー表示および連写を実行させる処理を示している。Ｓはステップを意味する。ライブビュー表示動作は、ユーザに被写体の観察やフレーミング等を行わせるために、撮像素子２０１を通じて取得した画像データを表示部２０６にリアルタイムに表示させる動作である。ここでは、ユーザがレリーズボタンを操作すると撮像動作が開始され、レリーズボタンが操作し続けられている間は、連続した複数回の静止画撮像である連写が継続されるものとして説明する。また、振動素子２１３は、その振動の開始が指示されると、所定時間だけ振動した後に振動を終了するものとする。

【0032】

まずＳ２０１では、カメラ制御部３０は、撮像素子２０１を通じてライブビュー表示に用いる画像データ（ライブビュー画像）を取得するための撮像を開始する。

【0033】

次にＳ２０２（検出ステップ）では、カメラ制御部３０は、行動検出部３０３において、画像データ内の少なくとも１人の人物のうち特定の行動をとった人物を検出する。特定の行動をとった人物が存在すれば、その人物を追尾部３０４で追尾対象として選択し、その人物（の顔）を囲むようにライブビュー画像に重畳表示される追尾枠のデータを生成する。そしてＳ２０３の処理を行う。一方、特定の行動をとった人物が存在しなければＳ２０４の処理を行う。

【0034】

Ｓ２０３では、カメラ制御部３０は、振動素子２１３を所定時間の間振動させる。これにより、レリーズボタンが振動し、その振動をユーザが感じる。そしてＳ２０４の処理を行う。

【0035】

Ｓ２０４では、カメラ制御部３０は、現在、追尾部３０４にて追尾対象として選択している被写体を、追尾部３０４が保持している特徴量を用いて検出する。そして検出した被写体の特徴量で追尾部３０４が保持している特徴量を更新するとともに、検出した被写体を追尾するように追尾枠の位置を更新する。

【0036】

次にＳ２０５では、カメラ制御部３０は、追尾部３０４が現在追尾対象として選択している被写体に対するＡＥ（自動露出制御）、ＡＦおよびＡＷＢを行う。

【0037】

次にＳ２０６では、カメラ制御部３０は、表示部２０６にライブビュー画像を表示する。そして、追尾部３０４が現在選択している人物を囲むように追尾枠を重畳表示させる。

【0038】

次にＳ２０７では、カメラ制御部３０は、操作部２１２にてレリーズボタンが操作されているか否かを判定する。レリーズボタンが操作されていれば、追尾部３０４が現在追尾対象として選択している被写体をユーザが撮像しようとしているものとしてＳ２１１の処理を行う。レリーズボタンが操作されていなければ、Ｓ２０８の処理を行う。

【0039】

Ｓ２０８では、カメラ制御部３０は、操作部２１２にてライブビューボタンがライブビュー表示のＯＦＦするように操作されているか否かを判定する。ライブビューボタンがＯＦＦ操作されていれば本処理を終了し、ＯＦＦ操作されていなければＳ２０１に戻ってライブビュー表示のための撮像を継続する。

【0040】

Ｓ２１１では、カメラ制御部３０は、撮像素子２０１を通じた静止画撮像を行い、得られた画像データに対して前述した所定の画像処理を行い、画像処理後の画像データを記憶媒体２０８へ書き込む。

【0041】

次にＳ２１２では、カメラ制御部３０は、Ｓ２０２と同様に、行動検出部３０３において画像データ内の少なくとも１人の人物のうち特定の行動をとった人物を検出する。特定の行動をとった人物が存在すれば、その人物を追尾部３０４で追尾対象として選択し、連写中のライブビュー画像に重畳表示される追尾枠のデータを生成する。そしてＳ２１３の処理を行う。一方、特定の行動をとった人物が存在しなければＳ２１４の処理を行う。

【0042】

Ｓ２１３では、カメラ制御部３０は、Ｓ２０３と同様に、振動素子２１３を所定時間の間、振動させる。そしてＳ２１４の処理を行う。

【0043】

Ｓ２１４では、カメラ制御部３０は、Ｓ２０４と同様に、現在、追尾部３０４にて追尾対象として選択している被写体を、追尾部３０４が保持している特徴量を用いて検出する。そして検出した被写体の特徴量で追尾部３０４が保持している特徴量を更新するとともに、検出した被写体を追尾するように追尾枠の位置に更新する。

【0044】

次にＳ２１５では、カメラ制御部３０は、Ｓ２０５と同様に、追尾部３０４が現在追尾対象として選択している被写体に対するＡＥ、ＡＦおよびＡＷＢを行う。

【0045】

次にＳ２１６では、カメラ制御部３０は、Ｓ２０６と同様に、表示部２０６にライブビュー画像を表示する。そして、追尾部３０４が現在選択している人物を囲むように追尾枠を重畳表示させる。

【0046】

次にＳ２１７では、カメラ制御部３０は、Ｓ２０７と同様に、操作部２１２にてレリーズボタンが操作されているか否かを判定する。レリーズボタンが操作されていればＳ２２１に戻って静止画撮像を繰り返す。レリーズボタンが操作されていなければ、Ｓ２０８の処理を行う。

【0047】

このように、カメラ制御部３０は、ライブビュー表示中と連写中に特定の行動をとった人物を検出した場合に振動素子２１３に振動を発生させてユーザに通知する。

【0048】

次に、より具体的なカメラ制御部３０の動作について説明する。図４（ａ）～（ｇ）は、表示部２０６に表示される表示画像の例を示している。ここでは、サッカー試合の画像が表示されている。

【0049】

図４（ａ）の表示画像４０１において、被写体としての人物４０２は、サッカーボールをドリブルするというサッカー試合に関連する行動をとっている。一方、別の被写体としての人物４０３は、単に立っているだけで、サッカー試合に関連する行動をとっていない。この場合、人物４０２が行動検出部３０３により特定の行動をとっている被写体として検出されて追尾部３０４により追尾対象として選択され、人物４０２の顔を囲む追尾枠４０４が重畳表示される。カメラ制御部３０は、人物４０３に対して図２のＳ２０５でＡＥ、ＡＦおよびＡＷＢを行う。人物４０３に対する追尾枠は表示されない。

【0050】

図４（ｂ）、（ｃ）、（ｄ）が、図２のＳ２０１～Ｓ２０８の処理を繰り返しているライブビュー表示中の表示画像である場合について説明する。図４（ｂ）では、人物４０３が（人物４０２から奪った）サッカーボールを保持するというサッカー試合に関連した行動をとっている。このため、その行動が行動検出部３０３より特定の行動として検出され、人物４０３が追尾部３０４により追尾対象として選択され、人物４０３の顔を囲む追尾枠４０４が重畳表示される。この状態の撮像をユーザが狙っているものとする。

【0051】

ここで、図４（ｂ）の状態から図４（ｃ）の状態に遷移した場合について説明する。図４（ｃ）では、追尾部３０４が左上の木を人物４０３と間違って追尾対象として選択して誤追尾した例を示している。この結果、追尾枠４０４が木を囲むように表示されている。この際、追尾部３０４は行動検出部３０３の検出結果に基づいて木を選択したわけではないので、図２のＳ２０２からＳ２０３に進んで振動素子２１３が振動することはない。振動が発生していないので、ユーザはそのまま図４（ｃ）の状態の撮像を狙い続けることになる。

【0052】

一方、図４（ｂ）の状態から図４（ｄ）の状態に遷移した場合について説明する。図４（ｄ）では、人物４０２が人物４０３から再びサッカーボールを奪ってドリブルをするというサッカー試合に関連する行動をとっている。この行動は行動検出部３０３により特定の行動として検出され、人物４０２が追尾部３０４により追尾対象として選択される。その結果、図２のＳ２０２からＳ２０３へ進んで振動素子２１３がレリーズボタンを振動させる。レリーズボタンの振動を感じた（通知を受けた）ユーザは、この状態が撮像すべき状態であると判断してレリーズボタンを操作する。これにより、図２のＳ２１１での静止画撮像が行われる。

【0053】

従来のカメラでは、ユーザは行動検出の結果に基づく被写体の追尾と誤追尾とを見分けるために、表示画像を注視しながら撮像すべき状態となるのを監視し続ける必要がある。これに対して本実施例のカメラ２０では、撮像すべき状態となったことが振動によりユーザにより通知されるので、ユーザは表示画像を注視しなくても撮像すべき状態になったことを知ることができる。この結果、撮像すべき状態を見落とすことなく撮像することができる。

【0054】

次に、図４（ｂ）、（ｃ）、（ｄ）が、図２のＳ２１１～Ｓ２１７の処理を繰り返している連写中の表示画像である場合について説明する。

【0055】

先に説明したように、図４（ｂ）では、人物４０３がサッカーボールを保持するというサッカー試合に関連した行動をとっているため、行動検出部３０３よりその行動が特定の行動として検出されて人物４０３が追尾部３０４により追尾対象として選択される。そして、人物４０３の顔を囲む追尾枠４０４が重畳表示される。カメラ制御部３０は、人物４０３に対して図２のＳ２１５でＡＥ、ＡＦおよびＡＷＢを行う。ユーザは、人物４０３に対する連写を行っている。

【0056】

連写中に図４（ｂ）の状態から図４（ｃ）の状態に遷移した場合について説明する。図４（ｃ）では、先に説明したように追尾部３０４が左上の木を人物４０３と追尾対象として誤選択（誤検出）して誤追尾している。この結果、追尾枠４０４が木を囲む位置に移動する。この際、追尾部３０４は行動検出部３０３の検出結果に基づいて木を選択したわけではないので、図２のＳ２１２からＳ２１３に進んで振動素子２１３が振動することはない。追尾枠４０４が人物４０３から他に移動したにもかかわらず振動が発生していないので、ユーザは間違った被写体の撮像が行われようとしていることを知り、レリーズボタンの操作を解除して連写を中断する。

【0057】

一方、連写中に図４（ｂ）の状態から図４（ｄ）の状態に遷移した場合について説明する。図４（ｄ）では、先に説明したように、人物４０２が人物４０３から再びサッカーボールを奪ってドリブルをするというサッカー試合に関連する行動をとっている。この行動は行動検出部３０３により特定の行動として検出され、人物４０２が追尾部３０４により追尾対象として選択される。これにより、追尾枠４０４が人物４０３から人物４０２に移動する。また、図２のＳ２１２からＳ２１３へ進んで振動素子２１３がレリーズボタンを振動させる。レリーズボタンの振動を感じたユーザは、追尾枠４０４が移動したが振動により新たな撮像すべき被写体が選択されたことを知り、レリーズボタンを操作し続けて連写を継続する。

【0058】

従来のカメラでは、先に説明したようにユーザは行動検出の結果に基づく被写体の追尾と誤追尾とを見分けるために、表示画像を注視しながら撮像すべき状態となるのを監視し続ける必要がある。これに対して本実施例のカメラ２０では、表示画像を注視しなくても、振動により撮像すべき被写体が追尾され続けていることを知ることができる。この結果、ユーザは誤った被写体を撮像する心配なく正しい被写体に対する連写を継続することができる。

【0059】

以上説明したように、本実施例によれば、人物の特定の行動に基づいて追尾対象の被写体が選択されたか追尾対象として誤選択されたかを振動によってユーザが知ることができ、撮像を開始したり連写を続行したりする判断を容易に行うことができる。この際、撮像を指示するレリーズボタンが振動するので、ユーザはカメラ２０に対して容易に撮像を指示することができる。

【実施例0060】

次に実施例２について説明する。実施例２では、カメラ２０が特定の被写体を検出して追尾し、撮像をサポートする。この際、特定の被写体は、人物でもよいし、動物、乗り物および物体等の人物以外の被写体でもよい。本実施例のカメラ２０の構成は、実施例１と同じである。

【0061】

検出部Ａ３０１は、第１の被写体を検出する。ここでは第１の被写体を人物とする。

【0062】

検出部Ｂ３０２は、第２の被写体を検出する。ここでは、第２の被写体をサッカーボールとする。検出部Ｂが検出する第２の被写体は、操作部２１２を通じてユーザが選択することができる。検出部Ｂ３０２が検出するサッカーボールがユーザにより撮像前に登録されるため、撮像すべき特定の被写体（追尾対象）としてサッカーボールを検出部Ａ３０１により検出される人物より優先して追尾部３０４に設定される。

【0063】

図３のフローチャートは、カメラ２０にライブビュー表示および静止画撮像を実行させる処理を示している。

【0064】

まずＳ３０１では、カメラ制御部３０は、撮像素子２０１を通じてライブビュー表示に用いるライブビュー画像を取得するための撮像を開始する。

【0065】

次にＳ３０２（検出ステップ）では、カメラ制御部３０は、検出部Ａ３０１による人物の検出を行う。ここで人物が検出された場合において追尾部３０４がサッカーボールを選択していなければ、追尾部３０４は検出された人物を選択する。

【0066】

次にＳ３０３（検出ステップ）では、カメラ制御部３０は、検出部Ｂ３０２により予め設定（登録）されたサッカーボールの検出を行う。サッカーボールが検出された場合は、追尾部３０４は検出されたサッカーボールを追尾対象として選択する。

【0067】

次にＳ３０４では、カメラ制御部３０は、Ｓ３０３にてサッカーボールが検出されたか否かを判定し、検出された場合はＳ３０５の処理を行い、検出されなかった場合はＳ３０６の処理を行う。

【0068】

Ｓ３０５では、カメラ制御部３０は、振動素子２１３を所定時間の間振動させる。これにより、レリーズボタンが振動し、その振動をユーザが感じる。そしてＳ３０６の処理を行う。

【0069】

Ｓ３０６では、カメラ制御部３０は、追尾部３０４が現在追尾対象として選択している被写体（人物またはサッカーボール）を、追尾部３０４が保持している特徴量を用いて検出する。そして検出した被写体の特徴量で追尾部３０４が保持している特徴量を更新するとともに、検出した被写体を追尾するように追尾枠の位置を更新する。

【0070】

次にＳ３０７では、カメラ制御部３０は、追尾部３０４が現在追尾対象として選択している被写体に対するＡＥ、ＡＦおよびＡＷＢを行う。

【0071】

次にＳ３０８では、カメラ制御部３０は、表示部２０６にライブビュー画像を表示する。そして、追尾部３０４が現在選択している人物に枠４０４を重畳表示させる。

【0072】

次にＳ３０９では、カメラ制御部３０は、操作部２１２にてレリーズボタンが操作されているか否かを判定する。レリーズボタンが操作されていれば、追尾部３０４が現在選択している被写体をユーザが撮像しようとしているものとしてＳ３１０の処理を行う。レリーズボタンが操作されていなければ、Ｓ３１１の処理を行う。

【0073】

Ｓ３１０では、カメラ制御部３０は、撮像素子２０１を通じた静止画撮像を行い、得られた画像データに対して前述した所定の画像処理を行い、画像処理後の画像データを記憶媒体２０８へ書き込む。そしてＳ３１１の処理を行う。

【0074】

Ｓ３１１では、カメラ制御部３０は、操作部２１２にてライブビューボタンがライブビュー表示のＯＦＦするように操作されているか否かを判定する。ライブビューボタンがＯＦＦ操作されていれば本処理を終了し、ＯＦＦ操作されていなければＳ３０１に戻ってライブビュー表示のための撮像を継続する。

【0075】

ここで、図４（ｅ）、（ｆ）を用いて、図３のＳ３０１～Ｓ３０９の処理を繰り返しているライブビュー表示中のカメラ制御部３０のより具体的な動作について説明する。

【0076】

図４（ｅ）の表示画像には、人物４０３のみが表示されている。ユーザはこの状態から撮像すべき状態となるのを待つ。この状態では、検出部Ａが人物４０３を検出するが、検出部Ｂがサッカーボールを検出せず、図３のＳ３０５に進まないため、振動素子２１３は振動することがない。人物４０３は追尾部３０４により追尾対象として選択され、人物４０３を囲む追尾枠４０４が重畳表示されている。

【0077】

ライブビュー表示中に図４（ｅ）の状態から図４（ｆ）の状態に遷移した場合について説明する。図４（ｆ）は、別の人物４０２がサッカーボールをドリブルしながら撮像範囲内に入ってきた状態での表示画像を示す。このとき、検出部Ｂ３０２がサッカーボールを検出するため、図３のＳ３０４からＳ３０５に進み、振動素子２１３が振動してレリーズボタンを振動させる。レリーズボタンの振動を感じたユーザは、事前に登録したサッカーボールが撮像範囲内に入ったことを認識し、レリーズボタンを操作してカメラ２０に静止画撮像を行わせる。

【0078】

従来のカメラでは、表示画像を注視しながらサッカーボールが撮像範囲内に入るのを監視し続ける必要がある。これに対して本実施例のカメラ２０では、サッカーボールが撮像範囲内に入ったことが振動によりユーザにより通知されるので、ユーザは表示画像を注視しなくてもサッカーボールを含むシーンを見落とすことなく撮像することができる。

【0079】

以上説明したように、本実施例によれば、予め登録した被写体が撮像可能な状態になったこと振動によってユーザが知ることができ、その被写体を含むシーンの静止画撮像を容易に行うことができる。