特許 5888069 領域判定装置、撮像装置、及び領域判定プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5888069

(24)【登録日】2016年2月26日

(45)【発行日】2016年3月16日

(54)【発明の名称】領域判定装置、撮像装置、及び領域判定プログラム

(51)【国際特許分類】

   H04N 5/232 20060101AFI20160303BHJP

   G02B 7/28 20060101ALI20160303BHJP

   G02B 7/36 20060101ALI20160303BHJP

   G03B 13/36 20060101ALI20160303BHJP

【ＦＩ】

   H04N5/232 C

   G02B7/28

   G02B7/36

   G03B13/36

   H04N5/232 H

【請求項の数】13

【全頁数】28

(21)【出願番号】特願2012-83245(P2012-83245)

(22)【出願日】2012年3月30日

(65)【公開番号】特開2013-214833(P2013-214833A)

(43)【公開日】2013年10月17日

【審査請求日】2015年3月20日

(73)【特許権者】

【識別番号】000004112

【氏名又は名称】株式会社ニコン

(74)【代理人】

【識別番号】100064908

【弁理士】

【氏名又は名称】志賀 正武

(74)【代理人】

【識別番号】100108578

【弁理士】

【氏名又は名称】高橋 詔男

(72)【発明者】

【氏名】鉾井 逸人

【審査官】 ▲徳▼田 賢二

(56)【参考文献】

【文献】 特開２００８−１８７２３１（ＪＰ，Ａ）

【文献】 特開２００６−１０１１８６（ＪＰ，Ａ）

【文献】 特開２００９−０１７２７１（ＪＰ，Ａ）

【文献】 特開２０１１−００４１５２（ＪＰ，Ａ）

【文献】 特開２０１０−０１６５４４（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２３２

Ｇ０２Ｂ ７／２８

Ｇ０２Ｂ ７／３６

Ｇ０３Ｂ １３／３６

(57)【特許請求の範囲】

【請求項1】

異なる時刻に撮像された画像列から、画像特徴量に基づいて被写体領域をそれぞれ抽出し、抽出された被写体領域同士が同じ被写体による被写体領域であるか否かを判定するための条件を示す抽出情報と、被写体領域を撮像するための設定を示す撮像情報とを、抽出された被写体領域にそれぞれ対応付ける領域抽出部と、
前記画像列の第１画像からフレームアウトした被写体領域と、前記画像列の第２画像にフレームインした被写体領域とが、同じ被写体による被写体領域であるか否かを、前記抽出情報に基づいて判定し、同じ被写体による被写体領域であると判定した場合、前記第２画像にフレームインした被写体領域を撮像するための前記撮像情報として、前記第１画像からフレームアウトした被写体領域に対応付けられた前記撮像情報を選択する領域判定部と、
を備えることを特徴とする領域判定装置。

【請求項2】

前記領域抽出部は、前記被写体領域の合焦位置を、前記撮像情報として前記被写体領域に対応付けることを特徴とする請求項１に記載の領域判定装置。

【請求項3】

前記領域抽出部は、露光量、ゲイン及び階調カーブのうち少なくとも一つを、前記撮像情報として被写体領域に対応付けることを特徴とする請求項１又は請求項２に記載の領域判定装置。

【請求項4】

前記領域抽出部は、被写体に対する撮像装置の動作、移動又は向きのうち少なくとも一つを表すアクション情報を、前記撮像情報として被写体領域に対応付けることを特徴とする請求項１から請求項３のいずれか一項に記載の領域判定装置。

【請求項5】

前記領域抽出部は、センサにより測定された撮像装置の向きを、前記抽出情報として被写体領域に対応付けることを特徴とする請求項４に記載の領域判定装置。

【請求項6】

前記領域抽出部は、撮像された被写体領域の色情報を、前記抽出情報として被写体領域に対応付けることを特徴とする請求項１から請求項５のいずれか一項に記載の領域判定装置。

【請求項7】

前記領域判定部は、前記抽出情報であるズーム倍率に基づいて、前記同じ被写体の被写体領域であるか否かを判定することを特徴とする請求項１から請求項６のいずれか一項に記載の領域判定装置。

【請求項8】

前記領域判定部は、前記第１画像が撮像された時刻から、前記第２画像が撮像された時刻までが、予め定められた時間内である場合、前記同じ被写体の被写体領域であるか否かを判定することを特徴とする請求項１から請求項７のいずれか一項に記載の領域判定装置。

【請求項9】

前記領域判定部は、前記抽出情報が被写体領域同士で一致している度合いに基づいて、同じ被写体の被写体領域であるか否かを判定することを特徴とする請求項８に記載の領域判定装置。

【請求項10】

請求項１から請求項９のいずれか一つに記載の領域判定装置と、
前記領域判定装置が選択した前記撮像情報である合焦位置に基づいて、光学系により被写体領域に合焦させる焦点調節部と、
被写体領域に合焦した状態の画像を撮像する撮像部と、
を備えることを特徴とする撮像装置。

【請求項11】

前記撮像部は、前記領域判定装置が選択した前記撮像情報である露光量に応じて画像を撮像することを特徴とする請求項１０に記載の撮像装置。

【請求項12】

前記焦点調節部は、前記抽出情報である色情報に基づいてコントラストスキャンを実行することを特徴とする請求項１０又は請求項１１に記載の撮像装置。

【請求項13】

コンピュータに、
異なる時刻に撮像された画像列から、画像特徴量に基づいて被写体領域をそれぞれ抽出し、抽出された被写体領域同士が同じ被写体による被写体領域であるか否かを判定するための条件を示す抽出情報と、被写体領域を撮像するための設定を示す撮像情報とを、抽出された被写体領域にそれぞれ対応付ける手順と、
前記画像列の第１画像からフレームアウトした被写体領域と、前記画像列の第２画像にフレームインした被写体領域とが、同じ被写体による被写体領域であるか否かを、前記抽出情報に基づいて判定し、同じ被写体による被写体領域であると判定した場合、前記第２画像にフレームインした被写体領域を撮像するための前記撮像情報として、前記第１画像からフレームアウトした被写体領域に対応付けられた前記撮像情報を選択する手順と、
を実行させるための領域判定プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、領域を判定する領域判定装置、撮像装置、及び領域判定プログラムに関する。

【背景技術】

【0002】

被写体がカメラ方向に移動する場合でも、その被写体に対して最適に焦点調節することを目的とした撮像装置が開示されている（特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００９−６９７４８号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１に開示された撮像装置は、撮像された画像にフレームインした被写体領域を精度よく判定することができないという問題がある。被写体領域を精度よく判定することができない場合、撮像装置は、被写体領域が画像にフレームインする度に合焦レンズを光軸方向に大きく移動させて、被写体領域に合焦させなければならない等、被写体を適切に撮像することができない。

【0005】

本発明は、前記の点に鑑みてなされたものであり、撮像された画像にフレームインした被写体領域を精度よく判定し、被写体を適切に撮像させることができる領域判定装置、撮像装置、及び領域判定プログラムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明は、上記の課題を解決するためになされたものであり、異なる時刻に撮像された画像列から、画像特徴量に基づいて被写体領域をそれぞれ抽出し、抽出された被写体領域同士が同じ被写体による被写体領域であるか否かを判定するための条件を示す抽出情報と、被写体領域を撮像するための設定を示す撮像情報とを、抽出された被写体領域にそれぞれ対応付ける領域抽出部と、前記画像列の第１画像からフレームアウトした被写体領域と、前記画像列の第２画像にフレームインした被写体領域とが、同じ被写体による被写体領域であるか否かを、前記抽出情報に基づいて判定し、同じ被写体による被写体領域であると判定した場合、前記第２画像にフレームインした被写体領域を撮像するための前記撮像情報として、前記第１画像からフレームアウトした被写体領域に対応付けられた前記撮像情報を選択する領域判定部と、を備えることを特徴とする領域判定装置である。

【0007】

また、本発明は、領域判定装置と、前記領域判定装置が選択した前記撮像情報である合焦位置に基づいて、光学系により被写体領域に合焦させる焦点調節部と、被写体領域に合焦した状態の画像を撮像する撮像部と、を備えることを特徴とする撮像装置である。

【0008】

また、本発明は、コンピュータに、異なる時刻に撮像された画像列から、画像特徴量に基づいて被写体領域をそれぞれ抽出し、抽出された被写体領域同士が同じ被写体による被写体領域であるか否かを判定するための条件を示す抽出情報と、被写体領域を撮像するための設定を示す撮像情報とを、抽出された被写体領域にそれぞれ対応付ける手順と、前記画像列の第１画像からフレームアウトした被写体領域と、前記画像列の第２画像にフレームインした被写体領域とが、同じ被写体による被写体領域であるか否かを、前記抽出情報に基づいて判定し、同じ被写体による被写体領域であると判定した場合、前記第２画像にフレームインした被写体領域を撮像するための前記撮像情報として、前記第１画像からフレームアウトした被写体領域に対応付けられた前記撮像情報を選択する手順と、を実行させるための領域判定プログラムである。

【発明の効果】

【0009】

本発明によれば、領域判定装置は、撮像された画像にフレームインした被写体領域を精度よく判定することができる。

【図面の簡単な説明】

【0010】

【図1】本発明の一実施形態における、レンズ鏡筒と、撮像装置と、記憶媒体との構成を表すブロック図である。

【図2】本発明の一実施形態における、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（前半）である。

【図3】本発明の一実施形態における、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（後半）である。

【図4】本発明の一実施形態における、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作手順を説明するための図である。

【図5】本発明の一実施形態における、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作例を説明するための図である。

【図6】本発明の一実施形態における、被写体領域の撮像情報に基づいてコントラストＡＦを順次実行する動作手順を示すフローチャートである。

【図7】本発明の一実施形態における、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（前半）である。

【図8】本発明の一実施形態における、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（前半の続き）である。

【図9】本発明の一実施形態における、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（後半）である。

【図10】本発明の一実施形態における、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を説明するための図である。

【図11】本発明の一実施形態における、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を説明するための図である。

【図12】本発明の一実施形態における、ズーム倍率が変更された場合に、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャートである。

【図13】本発明の一実施形態における、被写体領域の抽出情報である色チャネルに基づいてコントラストＡＦを実行する動作手順を示すフローチャートである。

【図14】本発明の一実施形態における、ＡＦレンズ位置とコントラスト評価値との関係を示す図である。

【発明を実施するための形態】

【0011】

本発明の一実施形態について図面を参照して詳細に説明する。図１には、レンズ鏡筒と、撮像装置と、記憶媒体との構成が、ブロック図により表されている。撮像装置１００は、レンズ鏡筒１１１から入射される光学像を撮像し、静止画形式の画像、又は動画形式の画像列を、記憶媒体２００に記憶させる。

【0012】

まず、レンズ鏡筒１１１の構成を説明する。
レンズ鏡筒１１１は、焦点調整レンズ（以下、「ＡＦ（Ａｕｔｏ Ｆｏｃｕｓ）レンズ」という）１１２と、レンズ駆動部１１６と、ＡＦエンコーダ１１７と、鏡筒制御部１１８を備える。なお、レンズ鏡筒１１１は、撮像装置１００に着脱可能に接続されてもよいし、撮像装置１００と一体であってもよい。

【0013】

ＡＦレンズ１１２は、レンズ駆動部１１６により駆動され、撮像部１１０（後述）の撮像素子１１９の受光面（光電変換面）に、光学像を導く。

【0014】

ＡＦエンコーダ１１７は、ＡＦレンズ１１２の移動を検出し、ＡＦレンズ１１２の移動量に応じた信号を、鏡筒制御部１１８に出力する。ここで、ＡＦレンズ１１２の移動量に応じた信号とは、例えば、ＡＦレンズ１１２の移動量に応じて位相が変化するサイン（ｓｉｎ）波信号であってもよい。

【0015】

鏡筒制御部１１８は、撮像装置１００のＣＰＵ１９０（後述）から入力される駆動制御信号に応じて、レンズ駆動部１１６を制御する。ここで、駆動制御信号とは、ＡＦレンズ１１２を光軸方向に駆動させる制御信号である。鏡筒制御部１１８は、駆動制御信号に応じて、例えば、レンズ駆動部１１６に出力するパルス電圧のステップ数を変更する。

【0016】

また、鏡筒制御部１１８は、ＡＦレンズ１１２の移動量に応じた信号に基づいて、レンズ鏡筒１１１におけるＡＦレンズ１１２の位置（フォーカスポジション）を、撮像装置１００のＣＰＵ１９０に出力する。ここで、鏡筒制御部１１８は、例えば、ＡＦレンズ１１２の移動量に応じた信号を、ＡＦレンズ１１２の移動方向に応じて積算することで、レンズ鏡筒１１１におけるＡＦレンズ１１２の移動量（位置）を算出してもよい。

【0017】

レンズ駆動部１１６は、鏡筒制御部１１８の制御に応じてＡＦレンズ１１２を駆動し、ＡＦレンズ１１２をレンズ鏡筒１１１内で光軸方向に移動させる。

【0018】

次に、撮像装置１００の構成を説明する。
撮像装置１００は、撮像部１１０と、画像処理部１４０と、領域判定装置１４１と、表示部１５０と、バッファメモリ部１３０と、操作部１８０と、記憶部１６０と、ＣＰＵ１９０と、通信部１７０とを備える。

【0019】

撮像部１１０は、撮像素子１１９と、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換部１２０とを備える。撮像部１１０は、設定された撮像条件（例えば、絞り値、露光量）に基づいて、ＣＰＵ１９０により制御される。

【0020】

撮像素子１１９は、光電変換面を備え、レンズ鏡筒１１１（光学系）により光電変換面に結像された光学像を電気信号に変換して、Ａ／Ｄ変換部１２０に出力する。撮像素子１１９は、例えば、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）で構成されていてもよい。また、撮像素子１１９は、光電変換面の一部の領域について、光学像を電気信号に変換するようにしてもよい（画像切り出し）。

【0021】

また、撮像素子１１９は、操作部１８０を介してユーザからの撮影指示を受け付けた際に得られる画像を、Ａ／Ｄ変換部１２０を介して記憶媒体２００に記憶させる。一方、撮像素子１１９は、操作部１８０を介してユーザからの撮影指示を受け付けていない状態において、連続的に得られる画像をスルー画像として、バッファメモリ部１３０及び表示部１５０に、Ａ／Ｄ変換部１２０を介して出力する。

【0022】

Ａ／Ｄ変換部１２０は、撮像素子１１９によって変換された電気信号をデジタル化して、デジタル信号である画像をバッファメモリ部１３０に出力する。

【0023】

操作部１８０は、例えば、電源スイッチ、シャッタボタン、マルチセレクタ（十字キー）、又はその他の操作キーを備え、ユーザによって操作されることでユーザの操作入力を受け付け、受け付けた操作入力に応じた信号をＣＰＵ１９０に出力する。

【0024】

画像処理部１４０は、記憶部１６０に記憶されている画像処理条件に基づいて、バッファメモリ部１３０に一時的に記憶されている画像を画像処理する。画像処理された画像は、通信部１７０を介して記憶媒体２００に記憶される。

【0025】

領域判定装置１４１は、バッファメモリ部１３０に一時的に記憶されている画像列から、画像特徴量に基づいて被写体領域を抽出する。また、領域判定装置１４１は、抽出した被写体領域について、第１画像からフレームアウトした被写体領域と、この第１画像とは異なる時刻に撮像された第２画像にフレームインした被写体領域とが、同じ被写体による被写体領域であるか否かを、被写体領域に対応付けた属性情報（属性データ）に基づいて判定する。

【0026】

この属性情報には、抽出された被写体領域同士が同じ被写体による被写体領域であるか否かを判定するための条件を示す抽出情報と、被写体領域を撮像するための設定を示す撮像情報とがある。

【0027】

抽出情報には、例えば、被写体領域の輝度と、被写体領域の色情報と、被写体領域のテクスチャと、被写体領域の面積と、被写体領域に外接する矩形と、その矩形に対する被写体領域の占有率と、画像フレームにおける被写体領域の重心位置と、画角中心から被写体領域までの距離と、被写体領域の慣性モーメントと、被写体領域のＡＦ評価値（例えば、コントラスト、位相差）と、被写体領域の境界（エッジ）を表す情報と、ズーム倍率と、画像における被写体領域の動きと、被写体領域が背景による被写体領域であるか否かを示す情報と、センサにより測定された撮像装置の向き（例えば、撮像装置１００に対する被写体の向き）を示す情報とがある。例えば、抽出された被写体領域同士が同じ被写体による被写体領域であるか否かは、被写体領域同士の抽出情報の近似度に基づいて判定されてもよい。

【0028】

また、撮像情報には、例えば、合焦位置（焦点距離）と、絞り値と、露光量と、アクション情報（アクションデータ）とがある。ここで、アクション情報とは、被写体に対して実行した撮像装置のアクション（例えば、動作、移動、向き）を表す情報である。例えば、アクション情報は、画像にフレームインした複数の被写体領域に順次合焦させるための優先度を定めるために参照されてもよい。

【0029】

領域判定装置１４１は、被写体領域に対応付けた属性情報（抽出情報、撮像情報）を記憶部１６０に記憶させる。また、領域判定装置１４１は、バッファメモリ部１３０に一時的に記憶されている画像から抽出した被写体領域に、被写体領域に合焦させるための優先度を設定する。領域判定装置１４１の詳細については、後述する。

【0030】

表示部１５０は、撮像部１１０によって得られた画像、及び操作画面等を表示する。表示部１５０は、例えば、液晶ディスプレイである。

【0031】

バッファメモリ部１３０は、撮像部１１０によって撮像された画像を、一時的に記憶する。

【0032】

記憶部１６０は、シーン判定の際にＣＰＵ１９０によって参照される判定条件と、シーン判定によって判断されたシーン毎に対応付けられた撮像条件と、被写体領域毎に定まる属性情報（抽出情報、撮像情報）とを記憶する。

【0033】

ＣＰＵ１９０は、設定された撮像条件（例えば、絞り値、露光量）に基づいて、撮像部１１０を制御する。また、ＣＰＵ１９０は、領域判定装置１４１から属性情報（抽出情報、撮像情報）を取得する。

【0034】

ＣＰＵ１９０は、撮像情報に基づいて、画像処理のプレ処理又はポスト処理として、焦点調整（ＡＦ）の設定、露出調整（ＡＥ）の設定、ホワイトバランス調整（ＡＷＢ）の設定、被写体像（オブジェクト）の追尾の設定、夜景か否かの判定の設定、色補正処理の設定、被写体像の拡大表示の設定、パンニング表示の設定、ズーム倍率に連動した明るさの最適化の設定、などを制御する。また、ＣＰＵ１９０は、撮像情報に基づいて、トーンカーブ（階調カーブ）の設定、静止画及び動画による同時撮像を実行するか否かの設定などを制御する。

【0035】

また、ＣＰＵ１９０は、撮像情報に基づいて、プレ処理又はポスト処理として、連写するか否かの設定、及び、連写において、合焦させる被写体像の切り替えの設定、焦点距離の連続変更の設定、撮像装置１００の発光部（不図示）が発光する閃光の発光量の変更の設定、露光量の変更の設定、又はシャッタスピードの変更を実行するか否かの設定などを制御する。また、ＣＰＵ１９０は、操作部１８０から入力された「操作入力に応じた信号」に基づいて、静止画形式又は動画形式の画像を、画像処理部１４０に画像処理させる。

【0036】

また、ＣＰＵ１９０（焦点調節部）は、撮像情報に基づいてレンズ鏡筒１１１の鏡筒制御部１１８に駆動制御信号を出力することで、被写体領域に合焦させるよう焦点を調節する。

【0037】

例えば、ＣＰＵ１９０は、第１画像からフレームアウトした被写体領域と、第２画像にフレームインした被写体領域とが同じ被写体による被写体領域である、と領域判定装置１４１により判定された場合、次のように動作する。

【0038】

ＣＰＵ１９０は、撮像情報として記憶部１６０に記憶されている合焦位置に基づいて、第１画像からフレームアウトした被写体領域の合焦位置に、ＡＦレンズ１１２を移動させることにより、第２画像にフレームインした被写体領域に合焦させる。

【0039】

また、ＣＰＵ１９０は、抽出情報として色情報が記憶されている場合、記憶されている色情報に基づいてコントラストスキャンを実行してもよい。また、ＣＰＵ１９０は、撮像情報として露光量が記憶されている場合、その露光量で露光するよう撮像部１１０を制御する。これにより、画像列は、記憶されている露光量に応じて撮像部１１０により撮像される。

【0040】

通信部１７０は、取り外し可能な記憶媒体２００（カードメモリ等）と接続され、この記憶媒体２００への情報（画像データ、属性情報など）の書込み、読み出し、あるいは消去を行う。

【0041】

記憶媒体２００は、撮像装置１００に対して着脱可能に接続される記憶部であって、情報（画像データ、属性情報など）を記憶する。なお、記憶媒体２００は、撮像装置１００と一体であってもよい。

【0042】

センサ５００は、撮像装置１００に対する被写体の方位、すなわち、領域判定装置１４１の向きを測定し、その測定結果を表す情報を領域判定装置１４１に出力する。

【0043】

次に、領域判定装置１４１の詳細について説明する。
領域判定装置１４１は、特徴量算出部１４２と、領域抽出部１４３と、領域処理部１４４と、優先度設定部１４５とを備える。

【0044】

特徴量算出部１４２は、撮像部１１０が撮像した画像を、バッファメモリ部１３０から取得する。また、特徴量算出部１４２は、バッファメモリ部１３０から取得した画像における複数の特徴（例えば、色相、彩度、明度、テクスチャ、エッジ）毎に、その特徴量（例えば、輝度情報に基づく特徴量、色情報に基づく特徴量）を算出し、算出した特徴量を領域抽出部１４２に出力する。

【0045】

領域抽出部１４３は、特徴量算出部１４２が算出した特徴量を取得する。また、領域抽出部１４３は、異なる時刻に撮像部１１０が撮像した画像列を、バッファメモリ部１３０から取得する。また、領域抽出部１４３は、取得した画像列から、画像特徴量に基づいて被写体領域を抽出する。ここで、領域抽出部１４３は、画像列を構成する全ての画像から被写体領域を抽出するようにしてもよいし、画像列を構成する画像に変化があった場合のみ、変化があった画像から被写体領域を抽出するようにしてもよい。

【0046】

領域抽出部１４３は、例えば、画像特徴量である輝度（Ｙ）、色情報（Ｃｒ，Ｃｂ、ＲＧＢ）に基づいて、被写体領域を抽出する。また、領域抽出部１４３は、一定範囲の画像特徴量と、その一定範囲外の画像特徴量とに２値化された画像から、被写体領域を抽出する。また、領域抽出部１４３は、被写体領域にラベルを割り当てる（ラベリング）。

【0047】

また、領域抽出部１４３は、被写体領域に対応付けた属性情報（抽出情報、撮像情報）を、記憶部１６０に記憶させる。ここで、領域抽出部１４３は、例えば、被写体領域に対する合焦位置を、撮像情報として記憶部１６０に記憶させる。また、領域抽出部１４３は、例えば、被写体領域に対する露光量、ゲイン及び階調カーブのうち少なくとも一つを、撮像情報として記憶部１６０に記憶させる。また、領域抽出部１４３は、例えば、被写体に対する撮像装置の動作、移動又は向きのうち少なくとも一つを表すアクション情報を、撮像情報として記憶部１６０に記憶させる。また、領域抽出部１４３は、例えば、センサ５００により測定された撮像装置１００の向きを、抽出情報として記憶部１６０に記憶させる。また、領域抽出部１４３は、例えば、被写体領域の色情報を、抽出情報として記憶部１６０に記憶させる。

【0048】

領域判定部１４４は、撮像装置１００が移動（例えば、ブームアップ、ブームダウン）、又は向きを変更（例えば、パンニング、チルト）したか否かを判定する。

【0049】

また、領域判定部１４４は、第１画像からフレームアウトした被写体領域と、第１画像とは異なる時刻に撮像された第２画像にフレームインした被写体領域とが、同じ被写体による被写体領域であるか否かを、抽出情報に基づいて判定する。また、領域判定部１４４は、同じ被写体による被写体領域であると判定した場合、その同じ被写体による被写体領域に対応付けられた最新の撮像情報を選択する。

【0050】

また、領域判定部１４４は、抽出情報として記憶部１６０に記憶された、被写体領域に対するズーム倍率に基づいて、第１画像からフレームアウトした被写体領域と、第２画像にフレームインした被写体領域とが同じ被写体の被写体領域であるか否かを判定する。

【0051】

また、領域判定部１４４は、第１画像が撮像された時刻から、第２画像が撮像された時刻までの時間が、予め定められた時間内である場合、第１画像からフレームアウトした被写体領域と、第２画像にフレームインした被写体領域とが同じ被写体の被写体領域であるか否かを、抽出情報に基づいて判定する。また、領域判定部１４４は、抽出情報が被写体領域同士で一致している度合いに基づいて、第１画像からフレームアウトした被写体領域と、第２画像にフレームインした被写体領域とが同じ被写体の被写体領域であるか否かを判定する。

【0052】

図１に戻り、領域判定装置１４１の説明を続ける。優先度設定部１４５は、予め定められた条件（例えば、面積が閾値以上であること）を満たす被写体領域に、画像における「領域の優先度」を定める。この「領域の優先度」とは、人がより注目しているであろう領域の優先度である。優先度設定部１４４は、設定した「領域の優先度」を被写体領域に対応付けて、属性情報（抽出情報、撮像情報）として記憶部１６０に記憶させる。

【0053】

領域の優先度は、次のように定められてもよい。以下では、優先度を示す数字が小さいほど、領域の優先度が高いものとする。また、以下に示す優先度は、一例である。

【0054】

優先度１．
動いている領域（動いている領域が画像に複数ある場合、画角からはみ出していない領域、又は画角の中央に分布する領域）。また、パンニングしたことにより、動いている領域が画像に広く分布している場合は、動いていない領域。
これらの領域は、優先度「１」に設定される。
人は、動いている領域及びパンニングした際に変化量の少ない領域に注目するためである。

【0055】

なお、画像からフレームアウトするまで優先度１に設定されていた被写体領域が、画像に再びフレームインしたと判定された場合、その被写体領域には、優先度１が設定されるようにしてもよい。

【0056】

優先度２．
画角（構図）、奥行（パースペクト）、被写体距離（デプス、深度）に関する領域。画角の中央付近に分布する領域。画像に奥行がある場合、至近側に分布する領域のうち、画角からはみ出していない領域であって、面積が所定の範囲内である（極端に大きくない）領域。
これらの領域は、優先度「２」に設定される。
主要な被写体像の領域が、至近から無限までの広い範囲に存在する可能性があるためである。

【0057】

優先度３．
人の顔検出、動物（ペット）の顔検出、顔が検出された領域における肌色検出、動物の毛並みのテクスチャ（模様）、又は植物のテクスチャに基づいて抽出された領域。
これらの領域は、優先度「３」に設定される。
人または動物が撮像されている場合、人は、その顔に注目するためである。

【0058】

優先度４．
特異である特徴量（例えば、色相環において不連続である色相）がある領域。背景の領域とそれ以外の領域とに分割された領域。彩度が高い領域。周囲と比較して明度が著しく異なる領域。周囲と比較して色相（色合い）が著しく異なる領域。テクスチャ（模様）が周囲と異なる領域。周囲と比較して空間周波数（画像周波数）が高い領域。ある特徴量において不連続な分布が一定量あり、その特徴量に基づいてラベリングされた結果、領域が形成された場合に、画像において違和感がある領域。
これらの領域は、優先度「４」に設定される。

【0059】

優先度５．
特定の色相又は彩度に基づいて抽出された領域。
これらの領域は、優先度「５」に設定される。
人は、赤色、黄色、肌色の領域に注目するためである。

【0060】

優先度６．
明度（明暗）に基づいて抽出された領域。
これらの領域は、優先度「６」に設定される。

【0061】

優先度７．
テクスチャ（模様）に基づいて抽出された領域。
これらの領域は、優先度「７」に設定される。

【0062】

優先度８．
空間周波数（画像周波数）に基づいて抽出された領域。
これらの領域は、優先度「８」に設定される。

【0063】

優先度９．
縦又は横に延びたエッジで囲まれた領域であって、一定以上の太さがある領域。
これらの領域は、優先度「９」に設定される。

【0064】

次に、領域判定装置の処理の手順を説明する。
＜被写体領域の撮像情報を撮影設定（例えば、焦点調整（コントラストＡＦ））に活用する場合について＞
図２は、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（前半）である。また、図３は、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（後半）である。また、図４には、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作手順を説明するための図が表されている。

【0065】

撮像部１１０（図１を参照）は、動画モードに遷移し、動画形式の画像列を撮像する（ステップＳ１）。ＣＰＵ１９０（図１を参照）は、動画モードにおける合焦（ＡＦ）駆動（例えば、ウォブリング）を、仮の合焦駆動として実行する（ステップＳ２）。領域判定部１４４は、撮像装置１００が移動（例えば、ブームアップ、ブームダウン）、又は向きを変更（例えば、パンニング、チルト）したか否かを判定する（ステップＳ３）。

【0066】

撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳ３−Ｎｏ）、領域抽出部１４３は、特徴量算出部１４２が前回算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳ４）。領域抽出部１４３は、有効な（例えば、面積が閾値以上である）被写体領域が画像に在るか否かを判定する。

【0067】

有効な被写体領域が画像に在る場合（ステップＳ５−Ｙｅｓ）、且つ、有効な被写体領域が複数である場合、優先度設定部１４５（図１を参照）は、それら有効な被写体領域に優先度を定める（ステップＳ６）。ＣＰＵ１９０は、優先度が最も高い被写体領域について、コントラストＡＦを実行する。本フローチャートでは、優先度が最も高い被写体領域が、被写体領域４００（図４（Ａ）を参照）と定められたものとして説明を続ける。なお、被写体領域４００には、コントラスト評価値が算出される領域である評価領域３００が定められてもよい（ステップＳ７）。

【0068】

領域抽出部１４３は、被写体領域４００により定まる属性情報（撮像情報）として、被写体領域４００に対する合焦位置を示す情報を、記憶部１６０に記憶させる（ステップＳ８）。特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳ９）。領域抽出部１４３は、特徴量算出部１４２が前回算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳ１０）。

【0069】

領域判定部１４４は、被写体領域４００が画像の規定範囲に在るか否かを判定する。ここで、規定範囲とは、例えば、前回読み込んだ画像における被写体領域４００の位置の周辺範囲、又は、画像フレーム（画角）の少し内側に定められた範囲である（図４（Ｂ）の規定範囲６００を参照）（ステップＳ１１）。

【0070】

被写体領域４００が画像の規定範囲に無い場合（ステップＳ１１−Ｎｏ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳ１２）。撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳ１２−Ｎｏ）、特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳ１３）。領域抽出部１４３は、特徴量算出部１４２が前回算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳ１４）。

【0071】

領域判定部１４４（図１を参照）は、有効な被写体領域が画像に在るか否かを判定する（ステップＳ１５）。有効な被写体領域が画像に在る場合（ステップＳ１５−Ｙｅｓ）、領域判定部１４４は、画像に在る有効な被写体領域が被写体領域４００（既存ラベル）である可能性が高いか否かを判定する。ここで、方位を測定することが可能なセンサ５００が撮像装置１００に備えられている場合、領域判定部１４４は、撮像装置１００に対する被写体の方位が一致するか否かに基づいて、画像に在る有効な被写体領域が被写体領域４００である可能性が高いか否かを判定する。

【0072】

なお、画像に在る有効な被写体領域が既存ラベルである可能性が高いか否かを判定する方法は、上記の方法に限らなくてよい。例えば、領域判定部１４４は、方位を測定することが可能なセンサ５００が撮像装置１００に備えられていない場合、画像に在る有効な被写体領域が被写体領域４００である可能性が高いか否かを、領域形状に基づいて判定してもよい（ステップＳ１６）。

【0073】

画像に在る有効な被写体領域が被写体領域４００（既存ラベル）である可能性が高い場合（ステップＳ１６−Ｙｅｓ）、領域判定部１４４は、被写体領域４００により定まる属性情報（抽出情報）を、記憶部１６０から読み込む（ステップＳ１７）。そして、領域判定部１４４は、被写体領域４００により定まる属性情報（抽出情報）と、抽出した領域により定まる属性情報（抽出情報）との近似度を算出し、算出した近似度が所定閾値よりも高いか否かを判定する（ステップＳ１８）。

【0074】

近似度が所定閾値よりも高い場合（ステップＳ１８−Ｙｅｓ）、ＣＰＵ１９０は、被写体領域４００に対する合焦位置に、ＡＦレンズ１１２（図１を参照）を移動させる。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳ１９）。特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳ２０）。領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳ２１）。

【0075】

領域判定部１４４は、前回に最優先であった被写体領域４００が画像の規定範囲に在るか否かを判定する（ステップＳ２２）。前回に最優先であった被写体領域４００が画像の規定範囲に無い場合（ステップＳ２２−Ｎｏ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳ２３）。撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳ２３−Ｎｏ）、特徴量算出部１４２は、ステップ１３に処理を戻す。

【0076】

一方、ステップＳ３において、撮像装置１００が移動又は向きを変更している場合（ステップＳ３−Ｙｅｓ）、領域判定部１４４は、ステップＳ３における判定処理を繰り返す。また、ステップＳ５において、有効な被写体領域が画像に無い場合（ステップＳ５−Ｎｏ）、ＣＰＵ１９０は、ステップ２に処理を戻す。また、ステップＳ１１において、被写体領域４００が画像の規定範囲に在る場合（ステップＳ１１−Ｙｅｓ）、特徴量算出部１４２は、ステップ９に処理を戻す。

【0077】

また、ステップＳ１２において、撮像装置１００が移動又は向きを変更している場合（ステップＳ１２−Ｙｅｓ）、領域判定部１４４は、ステップＳ１２における判定処理を繰り返す。また、ステップＳ１５において、有効な被写体領域が画像に無い場合（ステップＳ１５−Ｎｏ）、且つ、一定時間が経過した場合、ＣＰＵ１９０は、コントラストＡＦを実行する（ステップＳ２４）。そして、特徴量算出部１４２は、ステップ１３に処理を戻す。

【0078】

また、ステップＳ１６において、画像に在る有効な被写体領域が被写体領域４００（既存ラベル）である可能性が高くない場合（ステップＳ１６−Ｎｏ）、且つ、有効な被写体領域が複数である場合、優先度設定部１４５（図１を参照）は、それら有効な被写体領域に優先度を定める（ステップＳ２５）。また、ＣＰＵ１９０は、優先度が最も高い被写体領域について、コントラストＡＦを実行する。本フローチャートでは、ここで優先度が最も高い被写体領域が、被写体領域４１０（図４（Ｃ）を参照）と定められたものとして説明を続ける。なお、被写体領域４１０には、コントラスト評価値が算出される領域である評価領域３１０が定められてもよい（ステップＳ２６）。領域抽出部１４３は、被写体領域４１０により定まる属性情報（撮像情報）として、被写体領域４１０に対する合焦位置を示す情報を、記憶部１６０に記憶させる（ステップＳ２７）。そして、領域抽出部１４３は、ステップＳ２０に処理を戻す。

【0079】

また、ステップＳ１８において、近似度が所定閾値よりも高くない場合（ステップＳ１８−Ｎｏ）、ＣＰＵ１９０は、被写体領域４００に対する合焦位置の付近に定められた、ＡＦレンズ１１２（図１を参照）の駆動範囲の手前に、ＡＦレンズ１１２を移動させる（ステップＳ２８）。そして、ＣＰＵ１９０は、被写体領域４００により定まる属性情報（撮像情報）に基づいて、狭い駆動範囲でコントラストＡＦを実行する。属性情報（撮像情報）である合焦位置は、このようにコントラストＡＦに活用される（ステップＳ２９）。そして、ＣＰＵ１９０は、ステップＳ２０に処理を戻す。

【0080】

また、ステップＳ２２において、前回に最優先であった被写体領域４００が画像の規定範囲に在る場合（ステップＳ２２−Ｙｅｓ）、特徴量算出部１４２は、ステップＳ２０に処理を戻す。

【0081】

図５には、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作例を説明するための図が表されている。ここで、横軸は、時刻を表す。また、縦軸は、ＡＦレンズ１１２の位置を表す。

【0082】

まず、時刻ｔ１から時刻ｔ２までの間に、ＣＰＵ１９０は、ＡＦレンズ１１２（図１を参照）を駆動させながらコントラスト評価値を算出することにより、コントラストスキャンを実行したとする。また、これにより、被写体領域４００（図４（Ａ）を参照）に合焦させることができる合焦位置Ａが定まったとする。領域抽出部１４３は、被写体領域４００に対する合焦位置Ａを、被写体領域４００により定まる属性情報（撮像情報）として記憶部１６０に記憶させる。

【0083】

時刻ｔ３において、ＣＰＵ１９０は、被写体領域４００に対する合焦位置Ａに、ＡＦレンズ１１２を移動させる。その後、被写体領域４００は、画像からフレームアウトしたとする。そして、ＣＰＵ１９０は、コントラストスキャンを実行し、被写体領域４１０（図４（Ｃ）を参照）に対する合焦位置Ｂに、ＡＦレンズ１１２を移動させる。領域抽出部１４３は、被写体領域４１０に対する合焦位置Ｂを、被写体領域４１０により定まる属性情報（撮像情報）として記憶部１６０に記憶させる。

【0084】

その後、被写体領域４００が画像に再びフレームインしたとする。領域判定部１４４は、時刻ｔ１から時刻ｔ２までの間に撮像された画像からフレームアウトした被写体領域と、時刻ｔ４までに撮像された画像にフレームインした被写体領域とが、同じ被写体による被写体領域４００であるか否かを、属性情報（抽出情報）に基づいて判定する。ここで、領域判定部１４４は、同じ被写体による被写体領域４００であると判定したとする。

【0085】

時刻ｔ４から時刻ｔ５までの間に、ＣＰＵ１９０は、コントラストスキャンを実行することなく属性情報（撮像情報＝合焦位置Ａ）に基づいて、被写体領域４００（図４（Ａ）を参照）に対する合焦位置Ａに、ＡＦレンズ１１２を移動させる。

【0086】

＜画像に在る複数の被写体領域に、順次合焦させる場合について＞
図６は、被写体領域の撮像情報に基づいてコントラストＡＦを順次実行する動作手順を示すフローチャートである。撮像部１１０（図１を参照）は、動画モードに遷移し、動画形式の画像列を撮像する（ステップＳａ１）。領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出する。ここで、被写体領域４００、４１０及び４２０（図４には不図示）が抽出されたとする（ステップＳａ２）。領域抽出部１４３は、抽出した各被写体領域の属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を被写体領域毎に記憶部１６０に記憶させる（ステップＳａ３）。

【0087】

特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳａ４）。領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳａ５）。領域判定部１４４（図１を参照）は、前回までに抽出した被写体領域（既存ラベル）が画像に在るか否かを判定する（ステップＳａ６）。

【0088】

前回までに抽出した被写体領域（既存ラベル）が画像に無い場合（ステップＳａ６−Ｎｏ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳａ７）。撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳａ７−Ｎｏ）、領域判定部１４４は、前回合焦させた被写体領域が１番中心域に在るか否か、すなわち、画角中心に最も近い領域に在るか否かを判定する（ステップＳａ８）。

【0089】

前回合焦させた被写体領域（既存ラベル）が１番中心域に在る場合（ステップＳａ８−Ｙｅｓ）、ＣＰＵ１９０は、その１番中心域に在る被写体領域（例えば、被写体領域４００）により定まる属性情報（撮像情報）に基づいて、その被写体領域に対する合焦位置にＡＦレンズ１１２を移動させる。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳａ９）。そして、特徴量算出部１４２は、一定時間が経過するのを待ってから（ステップＳａ１０）、ステップＳａ４に処理を戻す。

【0090】

一方、ステップＳａ８において、前回合焦させた被写体領域が１番中心域に無い場合（ステップＳａ８−Ｎｏ）、領域判定部１４４は、前回合焦させた被写体領域が２番中心域に在るか否か、すなわち、１番中心域のすぐ外側の領域に在るか否かを判定する（ステップＳａ１１）。

【0091】

前回合焦させた被写体領域（既存ラベル）が２番中心域に在る場合（ステップＳａ１１−Ｙｅｓ）、ＣＰＵ１９０は、その２番中心域に在る被写体領域（例えば、被写体領域４１０）により定まる属性情報（撮像情報）に基づいて、その被写体領域に対する合焦位置にＡＦレンズ１１２を移動させる。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳａ１２）。そして、特徴量算出部１４２は、一定時間が経過するのを待ってから（ステップＳａ１０）、ステップＳａ４に処理を戻す。

【0092】

また、ステップＳａ１１において、前回合焦させた被写体領域（既存ラベル）が２番中心域に無い場合（ステップＳａ１１−Ｎｏ）、ＣＰＵ１９０は、その２番中心域のすぐ外側の３番中心域に在る被写体領域（例えば、被写体領域４２０（図４には不図示））により定まる属性情報（撮像情報）に基づいて、その被写体領域に対する合焦位置にＡＦレンズ１１２を移動させる。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳａ１３）。そして、特徴量算出部１４２は、一定時間が経過するのを待ってから（ステップＳａ１０）、ステップＳａ４に処理を戻す。

【0093】

また、ステップＳａ６において、前回までに抽出した被写体領域（既存ラベル）が画像に在る場合（ステップＳａ６−Ｙｅｓ）、特徴量算出部１４２は、ステップＳａ４に処理を戻す。また、ステップＳａ７において、撮像装置１００が移動又は向きを変更した場合（ステップＳａ７−Ｙｅｓ）、領域判定部１４４は、ステップＳａ７における判定処理を繰り返す。

【0094】

＜被写体領域に対する撮像装置のアクション情報に基づいて、被写体領域の優先度（注目フラグ）を変更する場合について＞
図７は、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（前半）である。また、図８は、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（前半の続き）である。また、図９は、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャート（後半）である。

【0095】

また、図１０には、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を説明するための図が表されている。また、図１１には、被写体領域の撮像情報であるアクション情報に基づいてコントラストＡＦを実行する動作手順を説明するための図が表されている。

【0096】

撮像部１１０（図１を参照）は、動画モードに遷移し、動画形式の画像列を撮像する（ステップＳｂ１）。ＣＰＵ１９０（図１を参照）は、動画モードにおける合焦（ＡＦ）駆動（例えば、ウォブリング）を、仮の合焦駆動として実行する（ステップＳｂ２）。領域判定部１４４は、撮像装置１００が移動（例えば、ブームアップ、ブームダウン）、又は向きを変更（例えば、パンニング、チルト）したか否かを判定する（ステップＳｂ３）。

【0097】

撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳｂ３−Ｎｏ）、領域抽出部１４３は、特徴量算出部１４２が前回算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳｂ４）。領域抽出部１４３は、有効な（例えば、面積が閾値以上である）被写体領域が画像に在るか否かを判定する（ステップＳｂ５）。

【0098】

有効な被写体領域が画像に在る場合（ステップＳｂ５−Ｙｅｓ）、且つ、有効な被写体領域が複数である場合、優先度設定部１４５（図１を参照）は、それら有効な被写体領域に優先度を定める（ステップＳｂ６）。ＣＰＵ１９０は、優先度が最も高い被写体領域について、コントラストＡＦを実行する。本フローチャートでは、ここで優先度が最も高い被写体領域が、被写体領域４２０（図１０（Ａ）を参照）と定められたものとして説明を続ける。なお、被写体領域４２０には、コントラスト評価値が算出される領域である評価領域３２０が定められてもよい（ステップＳｂ７）。

【0099】

領域抽出部１４３は、被写体領域４２０により定まる属性情報（撮像情報）として、被写体領域４２０に対する合焦位置を示す情報を、記憶部１６０に記憶させる（ステップＳｂ８）。特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｂ９）。領域抽出部１４３は、特徴量算出部１４２が前回算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳｂ１０）。領域判定部１４４は、被写体領域４２０が画像の規定範囲に在るか否かを判定する（ステップＳｂ１１）。

【0100】

被写体領域４２０が画像の規定範囲に無い場合（ステップＳｂ１１−Ｎｏ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳｂ１２）。撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳｂ１２−Ｎｏ）、特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｂ１３）。領域抽出部１４３は、特徴量算出部１４２が前回算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳｂ１４）。

【0101】

領域判定部１４４（図１を参照）は、被写体領域４２０ではない有効な被写体領域が画像に在るか否か、を判定する。本フローチャートでは、被写体領域４２０ではない有効な被写体領域が被写体領域４３０（図１０（Ｂ）を参照）と定められたものとして、説明を続ける（ステップＳｂ１５）。有効な被写体領域が画像に在る場合（ステップＳｂ１５−Ｙｅｓ）、特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｂ１６）。

【0102】

領域抽出部１４３は、特徴量算出部１４２が前回算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳｂ１７）。領域判定部１４４は、被写体領域４３０が画像に在るか否かを判定する（ステップＳｂ１８）。

【0103】

被写体領域４３０（図１０（Ｃ）を参照）が画像に無い場合（ステップＳｂ１８−Ｎｏ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳｂ１９）。撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳｂ１９−Ｎｏ）、特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｂ２０）。

【0104】

領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳｂ２１）。領域判定部１４４（図１を参照）は、有効な被写体領域が画像に在るか否かを判定する（ステップＳｂ２２）。有効な被写体領域が画像に在る場合（ステップＳｂ２２−Ｙｅｓ）、領域判定部１４４は、画像に在る有効な被写体領域が被写体領域４２０又は被写体領域４３０であるか否かを判定する（ステップＳｂ２３）。

【0105】

画像に在る有効な被写体領域が被写体領域４２０でない、且つ、被写体領域４３０でない場合（ステップＳｂ２３−Ｎｏ）、特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｂ２４）。

【0106】

領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる。本フローチャートでは、移動している被写体領域４４０（図１１（Ａ）を参照）が抽出されたものとして説明を続ける。ここで、被写体領域４４０が移動している場合、領域判定部１４４は、撮像装置１００が移動又は向きを変更することにより（図１１（Ｂ）を参照）、被写体領域４４０を追尾しているか否か（図１１（Ｃ）を参照）を判定する（ステップＳｂ２５）。

【0107】

撮像装置１００が移動又は向きを変更することにより、被写体領域４４０を追尾している場合（ステップＳｂ２５−Ｙｅｓ）、領域判定部１４４は、被写体領域４４０が画像の規定範囲に在るか否かを判定する（ステップＳｂ２６）。被写体領域４４０が画像の規定範囲に無い場合（ステップＳｂ２６−Ｎｏ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳｂ２７）。

【0108】

撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳｂ２７−Ｎｏ）、特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｂ２８）。領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳｂ２９）。

【0109】

領域判定部１４４（図１を参照）は、有効な被写体領域が画像に在るか否かを判定する（ステップＳｂ３０）。有効な被写体領域が画像に在る場合（ステップＳｂ３０−Ｙｅｓ）、領域判定部１４４は、画像に在る有効な被写体領域が被写体領域４２０、被写体領域４３０又は被写体領域４４０であるか否かを判定する（ステップＳｂ３１）。

【0110】

画像に在る有効な被写体領域が被写体領域４２０、被写体領域４３０又は被写体領域４４０である場合（ステップＳｂ３１−Ｙｅｓ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳｂ３２）。撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳ３２−Ｎｏ）、領域抽出部１４３は、複数の被写体領域が画像に在れば、画像フレームの一定の内側領域（例えば、中心域）から被写体領域を抽出する（ステップＳｂ３３）。

【0111】

領域抽出部１４３は、画像フレームの一定の内側領域以外に在る被写体領域を、処理対象から除外する（ステップＳｂ３４）。領域判定部１４４（図１を参照）は、有効な被写体領域が被写体領域４３０（図１０（Ｂ）を参照）のみであるか否かを判定する（ステップＳｂ３５）。

【0112】

有効な被写体領域が被写体領域４３０のみである場合（ステップＳｂ３５−Ｙｅｓ）、領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報（例えば、無限合焦位置、各色のコントラスト評価値）を算出し、算出した属性情報を記憶部１６０に記憶させる。ＣＰＵ１９０は、被写体領域４３０に対する合焦位置に、ＡＦレンズ１１２（図１を参照）を移動させる。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳｂ３６）。

【0113】

特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｂ３７）。領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる（ステップＳｂ３８）。

【0114】

領域判定部１４４は、前回に最優先であった被写体領域が画像の規定範囲に在るか否かを判定する。ここで、規定領域とは、前回の画像フレームにおける被写体領域の位置の周辺か、画像フレーム（画角）より少し内側の範囲である（ステップＳｂ３９）。

【0115】

前回に最優先であった被写体領域が画像の規定範囲に無い場合（ステップＳｂ３９−Ｎｏ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳｂ４０）。撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳ４０−Ｎｏ）、領域抽出部１４３は、特徴量算出部１４２が前回算出した画像特徴量に基づいて、被写体領域を抽出する（ステップＳｂ４１）。

【0116】

領域抽出部１４３は、有効な（例えば、面積が閾値以上である）被写体領域が画像に在るか否かを判定する（ステップＳｂ４２）。有効な被写体領域が画像に在る場合（ステップＳ４２−Ｙｅｓ）、領域抽出部１４３は、被写体領域を解析し、解析した被写体領域により定まる属性情報（抽出情報、撮像情報）を、記憶部１６０に記憶させる。ＣＰＵ１９０は、優先度が最も高い被写体領域について、コントラストＡＦを実行する。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳｂ４３）。そして、領域抽出部１４３は、ステップＳｂ３に処理を進める。

【0117】

一方、ステップＳｂ１１において、被写体領域４２０（図１０（Ａ）を参照）が画像の規定範囲に在る場合（ステップＳｂ１１−Ｙｅｓ）、且つ、一定時間以上、被写体領域４２０が中心域に在る場合、優先度設定部１４５は、被写体領域４２０の優先度を上げる。また、領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる。ここで、領域抽出部１４３は、「被写体領域を中心域に据えることを示すアクション情報」を記憶させる。また、領域抽出部１４３は、撮影者による被写体領域の注目度を表すフラグである注目フラグに、値１を設定する（ステップＳｂ４４）。

【0118】

また、ステップＳｂ１８において、被写体領域４３０（図１０（Ｃ）を参照）が画像に在る場合（ステップＳｂ１８−Ｙｅｓ）、且つ、被写体領域４３０が画像に在る時間が所定時間以下である場合、優先度設定部１４５は、被写体領域４３０の優先度を下げる。また、領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる。ここで、領域抽出部１４３は、「被写体領域を無視したことを示すアクション情報」を記憶させる。また、領域抽出部１４３は、撮影者による被写体領域の注目度を表すフラグである注目フラグに、値０を設定する（ステップＳｂ４５）。

【0119】

また、ステップＳｂ２６において、被写体領域４４０（図１１（Ａ）を参照）が画像の規定範囲に在る場合（ステップＳｂ２６−Ｙｅｓ）、領域判定部１４４は、領域４４０が画像に在る時間を計測し、その計測結果に基づいて、被写体領域４４０を追尾しているか否かを判定する。

【0120】

撮像装置１００（図１を参照）が被写体領域４４０を追尾している場合、優先度設定部１４５は、被写体領域４３０の優先度を下げる。また、領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる。ここで、領域抽出部１４３は、「追尾していることを示すアクション情報」を記憶させる。また、領域抽出部１４３は、撮影者による被写体領域の注目度を表すフラグである注目フラグに、値２を設定する（ステップＳｂ４６）。

【0121】

また、ステップＳｂ３０において、有効な被写体領域が画像に在る場合（ステップＳｂ３０−Ｎｏ）、ＣＰＵ１９０は、優先度が最も高い被写体領域について、コントラストＡＦを実行する（ステップＳｂ４７）。

【0122】

また、ステップＳｂ３５において、有効な被写体領域が被写体領域４３０でない場合（ステップＳｂ３５−Ｎｏ）、領域判定部１４４は、有効な被写体領域が被写体領域４２０（図１０（Ａ）を参照）のみ、又は、有効な被写体領域が被写体領域４２０及び被写体領域４３０であるか否かを判定する（ステップＳｂ４８）。

【0123】

有効な被写体領域が被写体領域４２０のみ、又は、有効な被写体領域が被写体領域４２０及び被写体領域４３０である場合（ステップＳｂ４８−Ｙｅｓ）、領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域４２０を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる。ＣＰＵ１９０は、被写体領域４２０に対する合焦位置に、ＡＦレンズ１１２（図１を参照）を移動させる。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳｂ４９）。

【0124】

一方、ステップＳｂ４８において、有効な被写体領域が被写体領域４２０のみでない、且つ、有効な被写体領域が被写体領域４２０及び被写体領域４３０でない場合（ステップＳｂ４８−Ｎｏ）、領域判定部１４４は、有効な被写体領域が被写体領域４４０（図１１を参照）のみ、又は、有効な被写体領域が被写体領域４２０、被写体領域４３０及び被写体領域４４０であるか否かを判定する（ステップＳｂ５０）。

【0125】

有効な被写体領域が被写体領域４４０のみ、又は、有効な被写体領域が被写体領域４２０、被写体領域４３０及び被写体領域４４０である場合（ステップＳｂ５０−Ｙｅｓ）、領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域４２０を抽出して属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を記憶部１６０に記憶させる。ＣＰＵ１９０は、被写体領域４４０に対する合焦位置に、ＡＦレンズ１１２（図１を参照）を移動させる。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳｂ５１）。

【0126】

一方、ステップＳｂ５０において、有効な被写体領域が被写体領域４４０のみでない、且つ、有効な被写体領域が被写体領域４２０、被写体領域４３０及び被写体領域４４０でない場合（ステップＳｂ５０−Ｎｏ）、領域抽出部１４３及びＣＰＵ１９０は、処理をステップＳｂ４３に進める。

【0127】

また、ステップＳｂ３において、撮像装置１００が移動又は向きを変更している場合（ステップＳｂ３−Ｎｏ）、領域判定部１４４は、ステップＳｂ３における判定処理を繰り返す。また、ステップＳｂ５において、有効な被写体領域が画像に無い場合（ステップＳｂ５−Ｎｏ）、ＣＰＵ１９０（図１を参照）は、ステップＳｂ２に処理を戻す。

【0128】

また、ステップＳｂ１２において、撮像装置１００が移動又は向きを変更している場合（ステップＳｂ１２−Ｙｅｓ）、領域判定部１４４は、ステップＳｂ１２における判定処理を繰り返す。また、ステップＳｂ１５において、有効な被写体領域が画像に無い場合（ステップＳｂ１５−Ｎｏ）、特徴量算出部１４２は、ステップＳｂ１３に処理を戻す。

【0129】

また、ステップＳｂ１９において、撮像装置１００が移動又は向きを変更している場合（ステップＳｂ１９−Ｙｅｓ）、領域判定部１４４は、ステップＳｂ１９における判定処理を繰り返す。また、ステップＳｂ２２において、有効な被写体領域が画像に無い場合（ステップＳｂ２２−Ｎｏ）、特徴量算出部１４２は、ステップＳｂ２０に処理を戻す。

【0130】

また、ステップＳｂ２３において、画像に在る有効な被写体領域が被写体領域４２０又は被写体領域４３０である場合（ステップＳｂ２３−Ｙｅｓ）、領域判定部１４４は、ステップＳｂ３２に処理を進める。また、ステップＳｂ３２において、撮像装置１００が移動又は向きを変更している場合（ステップＳ３２−Ｙｅｓ）、領域判定部１４４は、ステップＳｂ３２における判定処理を繰り返す。

【0131】

また、ステップＳｂ３９において、前回に最優先であった被写体領域が画像の規定範囲に在る場合（ステップＳｂ３９−Ｙｅｓ）、特徴量算出部１４２は、ステップＳｂ３７に処理を戻す。また、ステップＳｂ４０において、撮像装置１００が移動又は向きを変更している場合（ステップＳ４０−Ｙｅｓ）、領域判定部１４４は、ステップＳｂ４０における判定処理を繰り返す。また、ステップＳｂ４２において、有効な被写体領域が画像に無い場合（ステップＳ４２−Ｎｏ）、領域抽出部１４３は、ステップＳｂ４１に処理を戻す。

【0132】

＜被写体領域が抽出された後にズーム倍率が変更された場合について＞
図１２は、ズーム倍率が変更された場合に、被写体領域の撮像情報に基づいてコントラストＡＦを実行する動作手順を示すフローチャートである。撮像部１１０（図１を参照）は、動画モードに遷移し、動画形式の画像列を撮像する（ステップＳｃ１）。領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出する。ここで、被写体領域４００（図４（Ａ）を参照）が抽出されたとする（ステップＳｃ２）。領域抽出部１４３は、抽出した被写体領域４００の属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を被写体領域４００に対応付けて記憶部１６０に記憶させる（ステップＳｃ３）。そして、被写体領域４００が、画像からフレームアウトしたとする。

【0133】

特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｃ４）。領域抽出部１４３は、ＣＰＵ１９０からズーム倍率を取得して、取得したズーム倍率を記憶する（ステップＳｃ５）。領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出する。領域抽出部１４３は、抽出した被写体領域の属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を被写体領域毎に記憶部１６０に記憶させる（ステップＳｃ６）。

【0134】

領域抽出部１４３は、記憶したズーム倍率に応じて、抽出情報（例えば、被写体領域のサイズ及び位置）を換算する。例えば、抽出情報が被写体領域のサイズを表す場合、領域抽出部１４３は、記憶したズーム倍率の二乗に応じて、被写体領域のサイズを換算（例えば、ズーム倍率を乗算又は除算）する（ステップＳｃ７）。領域判定部１４４は、前回までに抽出した被写体領域（既存ラベル）を含む有効な被写体領域が、画像の規定領域に在るか否かを判定する。ここで、規定領域とは、前回の画像フレームにおける被写体領域のズーム倍率に応じて換算した位置の周辺か、ズーム倍率に応じて換算した画像フレーム（画角）より少し内側の範囲である（ステップＳｃ８）。前回までに抽出した被写体領域を含む有効な被写体領域が、画像の規定領域に在る場合（ステップＳｃ８−Ｙｅｓ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳｃ９）。

【0135】

撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳｃ１０−Ｎｏ）、有効な被写体領域が被写体領域４００であれば、ＣＰＵ１９０は、被写体領域４００により定まる属性情報（撮像情報）に基づいて、被写体領域４００に対する合焦位置にＡＦレンズ１１２を移動させる。一方、有効な被写体領域が被写体領域４００以外であれば、領域抽出部１４３は、その被写体領域により定まる属性情報（撮像情報）を更新し、更新した属性情報（撮像情報）を記憶部１６０に記憶させる。

【0136】

また、特徴量算出部１４２は、画像列における後続の画像フレームを取り込む（ステップＳｃ１１）。領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出する。領域抽出部１４３は、抽出した被写体領域の属性情報（抽出情報、撮像情報）を算出し、算出した属性情報を被写体領域毎に記憶部１６０に記憶させる（ステップＳｃ１２）。

【0137】

領域判定部１４４は、被写体領域４００が画像の規定範囲に在るか否かを判定する（ステップＳｃ１３）。被写体領域４００が画像の規定範囲に在る場合（ステップＳｃ１３−Ｙｅｓ）、領域判定部１４４は、撮像装置１００が移動又は向きを変更したか否かを判定する（ステップＳｃ１４）。撮像装置１００が移動していない、且つ、向きを変更していない場合（ステップＳｃ１４−Ｎｏ）、領域抽出部１４３は、特徴量算出部１４２が算出した画像特徴量に基づいて、被写体領域を抽出する（ステップＳｃ１５）。

【0138】

領域判定部１４４は、有効な被写体領域が画像に在るか否かを判定する（ステップＳｃ１６）。有効な被写体領域が画像に在る場合（ステップＳｃ１６−Ｙｅｓ）、領域抽出部１４３は、被写体領域を解析し、解析した被写体領域により定まる属性情報（抽出情報、撮像情報）を、記憶部１６０に記憶させる。ＣＰＵ１９０は、優先度が最も高い被写体領域について、コントラストＡＦを実行する。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳｃ１７）。そして、領域抽出部１４３は、ステップＳｃ４に処理を戻す。

【0139】

一方、ステップＳｃ８において、前回までに抽出した被写体領域を含む有効な被写体領域が、画像の規定領域に無い場合（ステップＳｃ８−Ｎｏ）、特徴量算出部１４２は、ステップＳｃ４に処理を進める。また、ステップＳｃ９において、撮像装置１００が移動又は向きを変更している場合（ステップＳｃ９−Ｙｅｓ）、領域判定部１４４は、ステップＳｃ９における判定処理を繰り返す。また、ステップＳｃ１３において、被写体領域４００が画像の規定範囲に無い場合（ステップＳｃ１３−Ｎｏ）、特徴量算出部１４２は、ステップＳｃ１１に処理を戻す。

【0140】

また、ステップＳｃ１４において、撮像装置１００が移動又は向きを変更している場合（ステップＳｃ１４−Ｙｅｓ）、領域判定部１４４は、ステップＳｃ１４における判定処理を繰り返す。また、ステップＳｃ１６において、有効な被写体領域が画像に無い場合（ステップＳｃ１６−Ｎｏ）、領域抽出部１４３は、ステップＳｃ１５に処理を戻す。

【0141】

＜コントラスト評価値を算出（隣接画素差を加算）する際、コントラスト評価値が最大である色チャネルを記憶し、その色チャネルのコントラスト評価値を次回のコントラストＡＦに活用する場合について＞
図１３は、被写体領域の抽出情報である色チャネルに基づいてコントラストＡＦを実行する動作手順を示すフローチャートである。また、図１４には、ＡＦレンズ位置とコントラスト評価値との関係が示されている。ここで、横軸は、ＡＦレンズ位置を表す。また、縦軸は、コントラスト評価値を表す。図１４では、コントラスト評価値のピーク値が、赤（Ｒ）チャネル、緑（Ｇ）チャネル、青（Ｂ）チャネルの順に高いものとする。

【0142】

図１３に戻り、動作手順の説明を続ける。撮像部１１０（図１を参照）は、動画モードに遷移し、動画形式の画像列を撮像する（ステップＳｄ１）。ＣＰＵ１９０（図１を参照）は、動画モードにおける合焦（ＡＦ）駆動（例えば、ウォブリング）を、仮の合焦駆動として実行する（ステップＳｄ２）。ＣＰＵ１９０は、画像に定められたコントラスト評価値ウィンドウに対して、コントラストＡＦを実行する。領域抽出部１４３は、複数の被写体領域における、コントラスト評価値が最大である色チャネルを示す情報、コントラスト評価値の順位、コントラスト評価値の比率を、属性情報（抽出情報）として被写体領域毎に記憶部１６０に記憶させる、また、領域抽出部１４３は、属性情報（撮像情報）として、合焦位置を被写体領域毎に記憶部１６０に記憶させる（ステップＳｄ３）。

【0143】

領域判定部１４４は、露光量が大きく変化してから一定時間が経過したか否かを判定する（ステップＳｄ４）。露光量が大きく変化してから一定時間が経過した場合（ステップＳｄ４−Ｙｅｓ）、領域判定部１４４は、記憶された合焦位置と、被写体領域により定まる合焦位置との類似度が高いか否かを判定する。

【0144】

ここで、例えば、コントラスト評価値のピーク値の順位が、Ｒ＞Ｇ＞Ｂである場合、コントラスト評価値が類似であると判定される。また、例えば、コントラスト評価値のピーク値（Ｒ／Ｇ）及び（Ｂ／Ｇ）に基づいて、コントラスト評価値が類似であると判定されてもよい。また、例えば、画像に定められたコントラスト評価値ウィンドウ内のＲＧＢの統計量（例えば、平均値、分散）に基づいて、コントラスト評価値が類似であると判定されてもよい（ステップＳｄ５）。

【0145】

記憶された合焦位置と、被写体領域により定まる合焦位置との類似度が高い場合（ステップＳｄ５−Ｙｅｓ）、ＣＰＵ１９０は、記憶された合焦位置に基づいて、コントラスト評価値のピーク（合焦位置Ｐ１）付近に限定したコントラストＡＦ（合焦駆動）を実行する。属性情報（撮像情報）である合焦位置は、このようにＡＦレンズ１１２の移動に活用される（ステップＳｄ６）。そして、領域判定部１４４は、ステップＳｄ４に処理を戻す。

【0146】

一方、ステップＳｄ４において、露光量が大きく変化してから一定時間が経過していない場合（ステップＳｄ４−Ｎｏ）、領域判定部１４４は、ステップＳｄ４における判定処理を繰り返す。また、ステップＳｄ５において、記憶された合焦位置と、被写体領域により定まる合焦位置との類似度が高くない場合（ステップＳｄ５−Ｎｏ）、ＣＰＵ１９０は、ステップＳｄ２に処理を戻す。

【0147】

以上のように、領域判定装置１４１は、異なる時刻に撮像された画像列から、画像特徴量に基づいて被写体領域をそれぞれ抽出し、抽出された被写体領域同士が同じ被写体による被写体領域であるか否かを判定するための条件を示す抽出情報と、被写体領域を撮像するための設定を示す撮像情報とを、抽出された被写体領域にそれぞれ対応付ける領域抽出部１４３と、前記画像列の第１画像からフレームアウトした被写体領域と、前記画像列の第２画像にフレームインした被写体領域とが、同じ被写体による被写体領域であるか否かを、前記抽出情報に基づいて判定し、同じ被写体による被写体領域であると判定した場合、前記第２画像にフレームインした被写体領域を撮像するための前記撮像情報として、前記第１画像からフレームアウトした被写体領域に対応付けられた前記撮像情報を選択する領域判定部１４４と、を備える。
この構成により、領域判定部１４４は、同じ被写体による被写体領域であると判定した場合、前記第２画像にフレームインした被写体領域を撮像するための前記撮像情報として、前記第１画像からフレームアウトした被写体領域に対応付けられた前記撮像情報を選択する。これにより、領域判定装置１４１は、撮像された画像にフレームインした被写体領域を精度よく判定し、選択した前記撮像情報に基づいて、被写体を適切に撮像させることができる。

【0148】

また、領域抽出部１４３は、前記被写体領域の合焦位置を、前記撮像情報として前記被写体領域に対応付ける。
これにより、領域判定装置１４１は、選択した前記合焦位置に基づいて短時間で合焦させた被写体領域を撮像させることができる。

【0149】

また、領域抽出部１４３は、露光量、ゲイン及び階調カーブのうち少なくとも一つを、前記撮像情報として被写体領域に対応付ける。
これにより、領域判定装置１４１は、選択した前記露光量、ゲイン及び階調カーブのうち少なくとも一つに基づいて適切に露光等させた被写体領域を撮像させることができる。

【0150】

また、領域抽出部１４３は、被写体に対する撮像装置の動作、移動又は向きのうち少なくとも一つを表すアクション情報を、前記撮像情報として被写体領域に対応付ける。
これにより、領域判定装置１４１は、選択した前記アクション情報に基づいて適切に追尾等させた被写体領域を撮像させることができる。

【0151】

また、領域抽出部１４３は、センサにより測定された撮像装置の向きを、前記抽出情報として被写体領域に対応付ける。
これにより、領域判定装置１４１は、撮像された画像にフレームインした被写体領域が前記同じ被写体であるか否かを、撮像装置の向きに基づいて精度よく判定することができる。

【0152】

また、領域抽出部１４３は、撮像された被写体領域の色情報を、前記抽出情報として被写体領域に対応付ける。
これにより、領域判定装置１４１は、撮像された画像にフレームインした被写体領域が前記同じ被写体であるか否かを、被写体領域の色情報に基づいて精度よく判定することができる。

【0153】

また、領域判定部１４４は、前記抽出情報であるズーム倍率に基づいて、前記同じ被写体の被写体領域であるか否かを判定する。
これにより、領域判定装置１４１は、撮像された画像にフレームインした被写体領域が前記同じ被写体であるか否かを、ズーム倍率に基づいて精度よく判定することができる。

【0154】

また、領域判定部１４４は、前記第１画像が撮像された時刻から、前記第２画像が撮像された時刻までが、予め定められた時間内である場合、前記同じ被写体の被写体領域であるか否かを判定する。
これにより、領域判定装置１４１は、撮像時刻の間隔が離れすぎている画像に基づくことなく、撮像された画像にフレームインした被写体領域を精度よく判定することができる。

【0155】

また、領域判定部１４４は、前記抽出情報が被写体領域同士で一致している度合いに基づいて、同じ被写体の被写体領域であるか否かを判定する。
これにより、領域判定装置１４１は、撮像された画像にフレームインした被写体領域が前記同じ被写体であるか否かを、前記抽出情報が被写体領域同士で一致している度合いに基づいて、精度よく判定することができる。

【0156】

また、撮像装置１００は、領域判定装置と、前記領域判定装置が選択した前記撮像情報である合焦位置に基づいて、光学系により被写体領域に合焦させる焦点調節部と、被写体領域に合焦した状態の画像を撮像する撮像部と、を備える。
この構成により、ＣＰＵ１９０は、記憶されている撮像情報（合焦位置）に基づいて、光学系（ＡＦレンズ１１２）により被写体領域に合焦させる。これにより、撮像装置１００は、領域判定装置１４１に精度良く判定された被写体領域に合焦した状態の画像を撮像することができる。

【0157】

また、撮像部１１０は、前記領域判定装置が選択した前記撮像情報である露光量に応じて画像を撮像する。
この構成により、ＣＰＵ１９０は、記憶されている撮像情報（露光量）に基づいて、撮像素子１１９における露光量を制御する。これにより、撮像装置１００は、領域判定装置１４１に精度良く判定された被写体領域が最適に露光された状態の画像を撮像することができる。

【0158】

また、ＣＰＵ１９０は、前記抽出情報である色情報に基づいてコントラストスキャンを実行する。
この構成により、ＣＰＵ１９０は、記憶されている色情報（色チャネル）に基づいて、コントラストスキャン（コントラストＡＦ）を実行する。これにより、撮像装置１００は、領域判定装置１４１に精度良く判定された被写体領域に合焦した状態の画像を撮像することができる。

【0159】

以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。

【0160】

例えば、属性情報（撮像情報）は、焦点調整のみならず、露光量調整、ホワイトバランス調整などの撮影設定に活用されてもよい。

【0161】

また、上記に説明した領域判定装置、撮像装置を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより、実行処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものであってもよい。

【0162】

また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、フラッシュメモリ等の書き込み可能な不揮発性メモリ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。

【0163】

さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ））のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。
さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。

【符号の説明】

【0164】

１００…撮像装置、１１０…撮像部、１１１…レンズ鏡筒、１４０…画像処理部、１４１…領域判定装置、１４２…特徴量算出部、１４３…領域抽出部、１４４…領域判定部、１４５…優先度設定部、１６０…記憶部、１９０…ＣＰＵ、５００…センサ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】