特許 5944246 撮像装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5944246

(24)【登録日】2016年6月3日

(45)【発行日】2016年7月5日

(54)【発明の名称】撮像装置

(51)【国際特許分類】

   H04N 5/232 20060101AFI20160621BHJP

   G03B 5/00 20060101ALI20160621BHJP

   H04N 101/00 20060101ALN20160621BHJP

【ＦＩ】

   H04N5/232 Z

   G03B5/00 J

   H04N101:00

【請求項の数】11

【全頁数】18

(21)【出願番号】特願2012-147013(P2012-147013)

(22)【出願日】2012年6月29日

(65)【公開番号】特開2014-11628(P2014-11628A)

(43)【公開日】2014年1月20日

【審査請求日】2015年5月20日

(73)【特許権者】

【識別番号】313003417

【氏名又は名称】株式会社ザクティ

(74)【代理人】

【識別番号】100085501

【弁理士】

【氏名又は名称】佐野 静夫

(74)【代理人】

【識別番号】100124132

【弁理士】

【氏名又は名称】渋谷 和俊

(74)【代理人】

【識別番号】100128842

【弁理士】

【氏名又は名称】井上 温

(74)【代理人】

【識別番号】100129562

【弁理士】

【氏名又は名称】山本 昌則

(74)【代理人】

【識別番号】100141092

【弁理士】

【氏名又は名称】山本 英生

(72)【発明者】

【氏名】高田 昌彦

【審査官】 村山 絢子

(56)【参考文献】

【文献】 特開２００６−１７４１０５（ＪＰ，Ａ）

【文献】 特開２００８−１７７９７２（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２２２−５／２５７

Ｇ０３Ｂ ５／００−５／０８

Ｈ０４Ｎ １０１／００

(57)【特許請求の範囲】

【請求項1】

被写体像の信号を出力する撮像部を用いて対象画像を撮影する撮像装置であって、
当該撮像装置の動きを検出する装置動き検出センサと、
当該撮像装置の動きによる前記被写体像のぶれを前記装置動き検出センサの検出結果を用いて光学的に補正する光学補正部と、
前記光学的な補正を経た前記撮像部の出力信号による画像列に基づき前記画像列上における前記被写体の動きを検出する被写体動き検出部と、
所定期間中における前記装置動き検出センサの検出結果及び前記被写体動き検出部の検出結果に基づき、前記所定期間後において前記対象画像の撮影タイミングを決定する撮影制御部と、を備え、
前記撮影制御部は、前記所定期間中において前記装置動き検出センサにより検出された動きの大きさから第１基準量を設定するとともに、前記所定期間中において前記被写体動き検出部により検出された動きの大きさから第２基準量を設定し、
前記所定期間後において、前記装置動き検出センサにより検出された動きの大きさ及び前記被写体動き検出部により検出された動きの大きさと前記第１基準量及び前記第２基準量との比較結果に基づき、前記対象画像の撮影タイミングを決定する
ことを特徴とする撮像装置。

【請求項2】

前記撮影制御部は、前記所定期間後において、前記装置動き検出センサにより検出された動きの大きさが前記第１基準量以下であって且つ前記被写体動き検出部により検出された動きの大きさが前記第２基準量以下であるとき、前記撮像部に前記対象画像を撮影させる
ことを特徴とする請求項１に記載の撮像装置。

【請求項3】

前記撮影制御部は、前記所定期間中において前記装置動き検出センサにより検出された動きの大きさから前記第１基準量を設定する際に用いる第１パラメータ、及び、前記所定期間中において前記被写体動き検出部により検出された動きの大きさから前記第２基準量を設定する際に用いる第２パラメータの内、少なくとも一方を、当該撮像装置へ入力されるパラメータ変更指示に応じて変更する
ことを特徴とする請求項１又は請求項２に記載の撮像装置。

【請求項4】

前記撮影制御部は、前記所定期間の終了から所定時間が経過しても前記対象画像の撮影が行われないとき、前記第１及び第２基準量の内の少なくとも一方を変更する
ことを特徴とする請求項１〜請求項３の何れかに記載の撮像装置。

【請求項5】

前記撮影制御部は、
前記所定期間の終了から所定時間が経過しても前記対象画像の撮影が行われないとき前記対象画像の撮影を中止する、或いは、
前記所定期間の終了から前記所定時間が経過しても前記対象画像の撮影が行われないとき前記第１及び第２基準量の内の少なくとも一方を変更し、その変更を介した後においても前記対象画像の撮影が行われないとき前記対象画像の撮影を中止する
ことを特徴とする請求項１〜請求項３の何れかに記載の撮像装置。

【請求項6】

前記撮影制御部は、
前記所定期間の終了から所定時間が経過しても前記対象画像の撮影が行われないとき、所定の通知処理を行う、或いは、
前記所定期間の終了から前記所定時間が経過しても前記対象画像の撮影が行われないとき前記第１及び第２基準量の内の少なくとも一方を変更し、その変更を介した後においても前記対象画像の撮影が行われないとき、前記通知処理を行う
ことを特徴とする請求項１〜請求項３の何れかに記載の撮像装置。

【請求項7】

前記撮影制御部は、当該撮像装置へ入力される期間長変更指示に応じて前記所定期間の長さを変更する
ことを特徴とする請求項１〜請求項６の何れかに記載の撮像装置。

【請求項8】

前記撮影制御部は、
前記所定期間中において前記装置動き検出センサにより検出された動きの大きさから第１基準量を設定する第１基準量設定部と、
前記所定期間中において前記被写体動き検出部により検出された動きの大きさから第２基準量を設定する第２基準量設定部と、
前記撮影タイミングの決定に前記第１基準量及び前記第２基準量の双方を用いるか或いはどちらか一方のみを用いるのかを、当該撮像装置へ入力された選択指示に応じて選択する選択部と、を有する
ことを特徴とする請求項１に記載の撮像装置。

【請求項9】

前記装置動き検出センサの検出結果に基づく表示を行う表示部を更に備えた
ことを特徴とする請求項１〜請求項８の何れかに記載の撮像装置。

【請求項10】

前記所定期間中における前記装置動き検出センサの検出結果及び前記被写体動き検出部の検出結果に基づき、前記所定期間中における前記画像列の中から複数の画像を抽出して前記複数の画像を合成する画像合成部を更に備えた
ことを特徴とする請求項１〜請求項９の何れかに記載の撮像装置。

【請求項11】

前記所定期間中における前記装置動き検出センサの検出結果及び前記被写体動き検出部の検出結果に基づき、前記所定期間中における前記画像列の中から１枚の画像を抽出する画像抽出部を更に備えた
ことを特徴とする請求項１〜請求項１０の何れかに記載の撮像装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、デジタルカメラ等の撮像装置に関する。

【背景技術】

【0002】

撮影画像のぶれを抑制すべく、角加速度センサにより所謂手ぶれを監視し、手ぶれ量が所定量以下になるタイミングで撮影を許可する方法が提案されている（下記特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開平６−３０８５６２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、例えば屋外で花をマクロ撮影するような状況では、手ぶれ量が少なくても風などの影響で花が揺れている場合もあり、意図する撮影（花のぶれが少ない状態での撮影）を行い難いこともある。

【0005】

そこで本発明は、望ましい形で画像のぶれを抑制可能な撮像装置を提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明に係る撮像装置は、被写体像の信号を出力する撮像部を用いて対象画像を撮影する撮像装置であって、当該撮像装置の動きを検出する装置動き検出センサと、当該撮像装置の動きによる前記被写体像のぶれを前記装置動き検出センサの検出結果を用いて光学的に補正する光学補正部と、前記光学的な補正を経た前記撮像部の出力信号による画像列に基づき前記画像列上における前記被写体の動きを検出する被写体動き検出部と、所定期間中における前記装置動き検出センサの検出結果及び前記被写体動き検出部の検出結果に基づき、前記所定期間後において前記対象画像の撮影タイミングを決定する撮影制御部と、を備えたことを特徴とする。

【0007】

これにより、撮像装置の動き及び被写体の動きを考慮した、ぶれの少ない対象画像を取得することが可能となる。典型的には例えば、撮像装置の動きに基づく画像ぶれ及び被写体の動きに基づく画像ぶれが共に小さな対象画像の取得が期待される。

【0008】

具体的には例えば、前記撮影制御部は、前記所定期間中において前記装置動き検出センサにより検出された動きの大きさから第１基準量を設定するとともに、前記所定期間中において前記被写体動き検出部により検出された動きの大きさから第２基準量を設定し、前記所定期間後において、前記装置動き検出センサにより検出された動きの大きさ及び前記被写体動き検出部により検出された動きの大きさと前記第１基準量及び前記第２基準量との比較結果に基づき、前記対象画像の撮影タイミングを決定してもよい。

【0009】

より具体的には例えば、前記撮影制御部は、前記所定期間後において、前記装置動き検出センサにより検出された動きの大きさが前記第１基準量以下であって且つ前記被写体動き検出部により検出された動きの大きさが前記第２基準量以下であるとき、前記撮像部に前記対象画像を撮影させてもよい。

【0010】

また例えば、前記撮影制御部は、前記所定期間中において前記装置動き検出センサにより検出された動きの大きさから前記第１基準量を設定する際に用いる第１パラメータ、及び、前記所定期間中において前記被写体動き検出部により検出された動きの大きさから前記第２基準量を設定する際に用いる第２パラメータの内、少なくとも一方を、当該撮像装置へ入力されるパラメータ変更指示に応じて変更しても良い。

【0011】

これにより、ユーザ所望の条件で対象画像の撮影を行うことが可能となる。ユーザは、例えば自身の撮影技量を考慮しつつ、対象画像の取得のしやすさと対象画像の品質とのバランスを考慮してパラメータ変更指示を行うことができる。

【0012】

また例えば、前記撮影制御部は、前記所定期間の終了から所定時間が経過しても前記対象画像の撮影が行われないとき、前記第１及び第２基準量の内の少なくとも一方を変更してもよい。

【0013】

これにより、対象画像の撮影が長時間に亘って行われないという状況の発生を抑制可能である。

【0014】

また例えば、前記撮影制御部は、前記所定期間の終了から所定時間が経過しても前記対象画像の撮影が行われないとき前記対象画像の撮影を中止してもよい、或いは、前記所定期間の終了から前記所定時間が経過しても前記対象画像の撮影が行われないとき前記第１及び第２基準量の内の少なくとも一方を変更し、その変更を介した後においても前記対象画像の撮影が行われないとき前記対象画像の撮影を中止してもよい。

【0015】

また例えば、前記撮影制御部は、前記所定期間の終了から所定時間が経過しても前記対象画像の撮影が行われないとき、所定の通知処理を行ってもよい、或いは、前記所定期間の終了から前記所定時間が経過しても前記対象画像の撮影が行われないとき前記第１及び第２基準量の内の少なくとも一方を変更し、その変更を介した後においても前記対象画像の撮影が行われないとき、前記通知処理を行ってもよい。

【0016】

また例えば、前記撮影制御部は、当該撮像装置へ入力される期間長変更指示に応じて前記所定期間の長さを変更しても良い。

【0017】

また例えば、前記撮影制御部は、前記所定期間中において前記装置動き検出センサにより検出された動きの大きさから第１基準量を設定する第１基準量設定部と、前記所定期間中において前記被写体動き検出部により検出された動きの大きさから第２基準量を設定する第２基準量設定部と、前記撮影タイミングの決定に前記第１基準量及び前記第２基準量の双方を用いるか或いはどちらか一方のみを用いるのかを、当該撮像装置へ入力された選択指示に応じて選択する選択部と、を有していてもよい。

【0018】

これにより、ユーザの好みに合わせた撮影タイミング制御が可能となる。

【0019】

また例えば、前記装置動き検出センサの検出結果に基づく表示を行う表示部を、当該撮像装置に更に設けておいても良い。

【0020】

また例えば、前記所定期間中における前記装置動き検出センサの検出結果及び前記被写体動き検出部の検出結果に基づき、前記所定期間中における前記画像列の中から複数の画像を抽出して前記複数の画像を合成する画像合成部を、当該撮像装置に更に設けておいても良い。

【0021】

これにより、撮像装置の動き及び被写体の動きを考慮した、ぶれの少ない合成画像を取得することが可能となる。

【0022】

また例えば、前記所定期間中における前記装置動き検出センサの検出結果及び前記被写体動き検出部の検出結果に基づき、前記所定期間中における前記画像列の中から１枚の画像を抽出する画像抽出部を、当該撮像装置に更に設けておいても良い。

【0023】

これにより、撮像装置の動き及び被写体の動きを考慮した、ぶれの少ない画像を抽出及び取得することが可能となる。

【発明の効果】

【0024】

本発明によれば、望ましい形で画像のぶれを抑制可能な撮像装置を提供できる。

【図面の簡単な説明】

【0025】

【図1】本発明の実施形態に係る撮像装置の概略全体ブロック図である。

【図2】本発明の実施形態に係る撮像部の内部構成図である。

【図3】本発明の実施形態に係る主制御部の内部ブロック図を含む、撮像装置の一部ブロック図である。

【図4】装置動き量及び被写体動き量の時間変化を示す図である。

【図5】２枚の入力画像を示す図である。

【図6】本発明の第１実施例に係る撮像装置の動作フローチャートである。

【図7】本発明の実施形態に係る撮影制御部の機能ブロック図である。

【図8】本発明の第７実施例に係る撮像装置の動作フローチャートである。

【図9】本発明の第７実施例に係る画像合成方法を示す図である。

【図10】本発明の第７実施例に係り、合成に利用される２枚の入力画像を示す図である。

【図11】本発明の第８実施例に係る撮像装置の動作フローチャートである。

【図12】本発明の第８実施例に係る画像抽出部を示す図である。

【発明を実施するための形態】

【0026】

以下、本発明の実施形態の例を、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。尚、本明細書では、記述の簡略化上、情報、信号、物理量、状態量又は部材等を参照する記号又は符号を記すことによって該記号又は符号に対応する情報、信号、物理量、状態量又は部材等の名称を省略又は略記することがある。

【0027】

図１は、本発明の実施形態に係る撮像装置１の概略全体ブロック図である。撮像装置１は、静止画像及び動画像を撮影及び記録可能なデジタルビデオカメラである。但し、撮像装置１は、静止画像のみを撮影及び記録可能なデジタルスチルカメラであっても良い。撮像装置１は、携帯電話機などの携帯端末に搭載されるものであっても良い。撮像装置１は符号１１〜１７によって参照される各部位を備える。

【0028】

撮像部１１は、撮像素子を用いて被写体の撮影を行う。図２は、撮像部１１の内部構成図である。撮像部１１は、光学系３５と、絞り３２と、ＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどから成る撮像素子（固体撮像素子）３３と、光学系３５や絞り３２を駆動制御するためのドライバ３４と、を有している。光学系３５は、撮像部１１の画角を調節するためのズームレンズ３０、焦点を合わせるためのフォーカスレンズ３１及び光学式ぶれ補正を実現するための補正レンズ３６を含む複数枚のレンズから形成される。ズームレンズ３０及びフォーカスレンズ３１は光軸方向に移動可能である。光軸とは、光学系３５及び撮像部１１の光軸を指す。主制御部１３からの制御信号に基づき、光学系３５内におけるズームレンズ３０及びフォーカスレンズ３１の位置並びに絞り３２の開度（即ち絞り値）が制御される。撮像素子３３は、水平及び垂直方向に複数の受光画素が配列されることによって形成される。撮像素子３３の各受光画素は、光学系３５及び絞り３２を介して入射した被写体像（被写体の光学像）を光電変換し、該光電変換によって得られた被写体像の信号を撮像部１１の出力信号として出力する。

【0029】

補正レンズ３６は、光軸に直交する方向に移動可能である。即ち、補正レンズ３６は、光軸に直交する面に沿って移動することが可能となるように、光学系３５内に配置されている。但し、当該面は光軸に対して斜めに交差する面であっても良い。ドライバ３４は、主制御部１３から出力されるぶれ補正信号（補正レンズ駆動信号）に基づいて補正レンズ３６を上記面上で移動させることにより、光学式ぶれ補正を実現する。

【0030】

装置動きセンサ１２は、撮像装置１の動きを検出する。撮像装置１の動きは、いわゆる手ぶれなどによって生じる。装置動きセンサ１２は、例えば、撮像装置１のヨー方向（水平方向）及びピッチ方向（垂直方向）の角速度を検出して、それらの角速度の検出値を表すセンサ信号を出力する。光学式ぶれ補正は、このセンサ信号に基づき実現される。

【0031】

主制御部１３は、信号処理回路、ＣＰＵ（Central Processing Unit）、ＲＯＭ(Read Only Memory)及びＲＡＭ（Random Access Memory）等にて形成され、撮像装置１内の各部位の動作を統括的に制御する。主制御部１３は、撮像部１１の出力信号に対して所定の信号処理を施すことで、撮像部１１による撮影画像である被写体像の画像データを生成することができる。内部メモリ１４は、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）等にて形成され、撮像装置１内で生成された各種データを一時的に記憶する。表示部１５は、液晶ディスプレイパネル等の表示画面を有する表示装置であり、主制御部１３の制御の下、撮影画像や記録媒体１６に記録されている画像などを表示する。記録媒体１６は、カード状半導体メモリや磁気ディスク等の不揮発性メモリであり、主制御部１３の制御の下、撮影画像の画像データ等を記録する。操作部１７は、静止画像の撮影及び記録を指示するシャッタボタン１７ａ等から成り、ユーザからの各種指示を受け付ける。ユーザの任意の指示は、操作部１７等を通じて撮像装置１に入力される。操作部１７はタッチパネルを含んでいても良く、シャッタボタン１７ａはタッチパネル上のボタンであっても良い。

【0032】

図３に示す如く、主制御部１３には、センサ信号処理部５１、光学式ぶれ補正制御部５２、被写体動き検出部５３及び撮影制御部５４が内在している。

【0033】

センサ信号処理部５１は、所定の演算式等を用いて、装置動きセンサ１２からのセンサ信号を撮像装置１の動きを示す装置動き情報に変換する。装置動き情報は、撮像装置１の動きの大きさ及び向きを示す情報を含む。

【0034】

光学式ぶれ補正制御部５２は、装置動き情報に基づき光学式ぶれ補正を実行する。補正レンズ３６が固定されている場合、撮像素子３３上に形成される被写体の光学像は、撮像装置１の動きによってぶれる。補正制御部５１は、撮像装置１の動きによる被写体の光学像のぶれが打ち消されるように、装置動き情報からぶれ補正信号を生成してドライバ３４を通じて補正レンズ３６の位置を制御する。このような制御が光学式ぶれ補正に相当し、光学式ぶれ補正により、撮像装置１の動きによる被写体の光学像のぶれが光学的に補正される。

【0035】

被写体動き検出部５３は、光学式ぶれ補正を経た撮像部１１の出力信号による入力画像列に基づき入力画像列上における被写体の動きを検出し、その検出結果を表す被写体動き情報を生成する。入力画像列とは、時系列に並ぶ入力画像の集まり（時間的に連続する複数の入力画像）を指す。撮像部１１は、周期的に被写体の光学像の信号を出力することができる。１枚の入力画像は、撮像部１１の出力信号に基づく１枚の静止画像（１つのフレーム又はフィールド）である。被写体動き検出部５３は、時間的に連続する複数の入力画像の画像データに基づき、当該複数の入力画像間におけるオプティカルフローを導出する。このオプティカルフローにより、当該複数の入力画像間における被写体の動きの向き及び大きさが示される。被写体動き情報は、任意の２枚の入力画像間における被写体の動きの向き及び大きさを特定する。

【0036】

撮影制御部５４は、装置動き情報及び被写体動き情報に基づき、対象画像の撮影タイミングの決定及び制御等を行う。対象画像とは、シャッタ指示に応答して取得及び記録されるべき、撮像部１１の撮影画像である。入力画像と同様、対象画像も、光学式ぶれ補正を経た撮像部１１の出力信号にて形成される。シャッタ指示とは、ユーザが操作部１７等を通じて撮像装置１に入力することができる指示の一種である。例えば、シャッタボタン１７ａを押す操作がシャッタ指示の入力に相当する。但し、シャッタ指示は、どのような形態で撮像装置１に入力されても良い。

【0037】

以下、対象画像の取得方法に関して特に注目しつつ、撮像装置１の動作又は構成に関する幾つかの実施例を説明する。矛盾なき限り、以下に述べる第１〜第８実施例の内、任意の２以上の実施例を組み合わせて実施することも可能である。

【0038】

＜＜第１実施例＞＞
撮像装置１の第１実施例を説明する。図４において、実線曲線３１０_A及び破線曲線３１０_Bは、夫々、装置動き量Ｖ_A及び被写体動き量Ｖ_Bの時間変化を表している。装置動き量Ｖ_Aは、装置動き情報にて特定される撮像装置１の動きの大きさを示す。被写体動き量Ｖ_Bは、被写体動き情報にて特定される入力画像列上の被写体の動きの大きさを表す。時刻ｔにおける装置動き量Ｖ_A及び被写体動き量Ｖ_Bを夫々記号Ｖ_A［ｔ］及びＶ_B［ｔ］にて表す。

【0039】

詳細には、被写体動き量Ｖ_B［ｔ］は、時刻ｔにおける入力画像及び時刻ｔ’における入力画像間における被写体の動きの大きさを表す。図５（ａ）及び（ｂ）には、時刻ｔにおける入力画像Ｉ［ｔ］及び時刻ｔ’における入力画像Ｉ［ｔ’］が示されている。入力画像Ｉ［ｔ］及びＩ［ｔ’］は時間的に隣接する２枚の入力画像である。第１実施例及び後述の任意の実施例では、撮像部１１の撮影領域内に収まる被写体に花である主要被写体ＳＵＢが含まれているものとする。撮像部１１の撮影領域内に収まる全被写体の内、主要被写体ＳＵＢ以外の被写体を背景被写体と呼ぶ。主制御部１３に内在する被写体分類部（不図示）は、入力画像の画像データに基づく公知の方法を用いて、入力画像上に存在する各被写体を主要被写体又は背景被写体に分類することができる。例えば、被写体分類部は、入力画像上においてピントが合っている被写体を主要被写体に分類し、それ以外の被写体を背景被写体に分類する。この際、被写体分類部は、入力画像の各領域の画像データに含まれる空間周波数成分に基づき、入力画像上の各被写体についてピントが合っているか否かを判断することができる。或いは例えば、被写体分類部は、入力画像上の所定領域（例えば中央付近の領域）に存在している被写体を主要被写体に分類し、それ以外の被写体を背景被写体に分類しても良い。更に或いは、入力画像から特定種類の物体（例えば人物の顔）が検出されたとき、被写体分類部は、その物体を主要被写体に分類し、それ以外の被写体を背景被写体に分類しても良い。

【0040】

被写体動き量Ｖ_B［ｔ］は、主要被写体ＳＵＢの動き及び背景被写体の動きを含む、入力画像全体における被写体の動きの大きさを表すものであっても良い。この場合例えば、被写体動き量Ｖ_B［ｔ］は、入力画像Ｉ［ｔ］及びＩ［ｔ’］間のオプティカルフローを形成する全動きベクトルの大きさの平均値として求められる。被写体動き量Ｖ_B［ｔ］は、主要被写体ＳＵＢの動きの大きさを表すものであっても良い。この場合例えば、入力画像Ｉ［ｔ］及びＩ［ｔ’］間のオプティカルフローから、入力画像Ｉ［ｔ］及びＩ［ｔ’］間における主要被写体ＳＵＢの動きを表す動きベクトルを抽出し、抽出した動きベクトルから被写体動き量Ｖ_B［ｔ］を求めればよい。被写体動き量Ｖ_B［ｔ］の導出は、被写体動き検出部５３又は撮影制御部５４にて行われる。

【0041】

図６は、１枚の対象画像を撮影及び記録する際における撮像装置１の動作フローチャートである。図４を参照しつつ、図６のフローチャートに沿って、対象画像の撮影及び記録動作を説明する。まず、時刻ｔ₁において、ユーザによりシャッタ指示が撮像装置１に入力される（ステップＳ１１）。シャッタ指示が入力されると、ステップＳ１２において、撮影制御部５４は、シャッタ指示の入力タイミングを基準とし且つ所定の時間長さを有する情報収集期間を設定して、情報収集を開始する。具体的には、この情報収集において、撮影制御部５４は、情報収集期間中のセンサ信号及び入力画像列に基づく情報収集期間中の各時刻における装置動き量Ｖ_A及び被写体動き量Ｖ_Bを収集する。収集された動き量Ｖ_A及びＶ_Bは内部メモリ１４等に一時的に保存される。ここでは、情報収集期間が時刻ｔ₁から時刻ｔ₂までの期間であるとする。図４の時刻ｔ_A及びｔ_Bは情報収集期間に属する。

【0042】

情報収集期間が終了すると（ステップＳ１３）、ステップＳ１４において、撮影制御部５４は、情報収集期間中の動き量Ｖ_A及びＶ_Bに基づいて装置動き統計量Ｄ_A及び被写体動き統計量Ｄ_Bを求め、装置動き統計量Ｄ_A及び被写体動き統計量Ｄ_Bから装置動き閾値である基準量ＴＨ_A（第１基準量）と被写体動き閾値である基準量ＴＨ_B（第２基準量）を設定する。装置動き統計量Ｄ_Aは、情報収集期間中に収集された複数の装置動き量Ｖ_Aを複数の標本（変数）として用いた統計量であり、被写体動き統計量Ｄ_Bは、情報収集期間中に収集された複数の被写体動き量Ｖ_Bを複数の標本（変数）として用いた統計量である。ここでは、情報収集期間中に収集された複数の装置動き量Ｖ_Aの最小値及び情報収集期間中に収集された複数の被写体動き量Ｖ_Bの最小値が、夫々、装置動き統計量Ｄ_A及び被写体動き統計量Ｄ_Bとして求められるとする。図４の例では、情報収集期間中において、装置動き量Ｖ_Aは時刻ｔ_Aにて最小となり且つ被写体動き量Ｖ_Bは時刻ｔ_Bにて最小となっている。従って、“Ｄ_A＝Ｖ_A［ｔ_A］”且つ“Ｄ_B＝Ｖ_B［ｔ_B］”である。

【0043】

但し、所定のオフセット値Δ_A及びΔ_Bを用い、“Ｄ_A＝Ｖ_A［ｔ_A］＋Δ_A”且つ“Ｄ_B＝Ｖ_B［ｔ_B］＋Δ_B”に従って統計量Ｄ_A及びＤ_Bを定めても良い。オフセット値Δ_A及びΔ_Bは正の所定値を持つ（但し、Δ_A＜０、Δ_B＜０でも構わない）。或いは、複数の標本の平均値に基づき統計量Ｄ_A及びＤ_Bを定めても良い。即ち例えば、撮影制御部５４は、情報収集期間中に収集された複数の装置動き量Ｖ_Aの平均値ＡＶＥ_VA及び情報収集期間中に収集された複数の被写体動き量Ｖ_Bの平均値ＡＶＥ_VBを求め、“Ｄ_A＝ＡＶＥ_VA”且つ“Ｄ_B＝ＡＶＥ_VB”に従って、或いは、“Ｄ_A＝ＡＶＥ_VA−Δ_A”且つ“Ｄ_B＝ＡＶＥ_VB−Δ_B”に従って、統計量Ｄ_A及びＤ_Bを定めても良い。

【0044】

撮影制御部５４は、統計量Ｄ_A及びＤ_Bを求めた後、下記式（１）及び式（２）に従って基準量ＴＨ_A及びＴＨ_Bを設定し、対象画像の撮影が完了するまで基準量ＴＨ_A及びＴＨ_Bを保持する。係数ｋ_A及びｋ_Bは予め定められた値を有していても良い。ｋ_A＞０且つｋ_B＞０である。係数ｋ_A及びｋ_Bは互いに一致していても良いし、一致していなくても良い。
ＴＨ_A＝ｋ_A×Ｄ_A …（１）
ＴＨ_B＝ｋ_B×Ｄ_B …（２）

【0045】

情報収集期間が終了した後、対象画像を撮影するための期間である実撮影用期間が開始される。本例では、時刻ｔ₂から始まって対象画像の撮影が完了するまでの期間が実撮影用期間に相当する。

【0046】

実撮影用期間において、撮影制御部５４は、装置動き量Ｖ_A及び被写体動き量Ｖ_Bを監視し、実撮影用期間中の各時刻における動き量Ｖ_A及びＶ_Bを基準量ＴＨ_A及びＴＨ_Bと比較することで第１条件及び第２条件が充足しているか否かを判断する（ステップＳ１５）。第１条件は、実撮影用期間中の時刻ｔにおいて第１不等式“Ｖ_A［ｔ］≦ＴＨ_A”が成立する時、即ち、実撮影用期間中の動き量Ｖ_Aが基準量ＴＨ_A以下であるときに充足する。第２条件は、実撮影用期間中の時刻ｔにおいて第２不等式“Ｖ_B［ｔ］≦ＴＨ_B”が成立する時、即ち、実撮影用期間中の動き量Ｖ_Bが基準量ＴＨ_B以下であるときに充足する。

【0047】

第１条件及び第２条件は、対象画像撮影条件を形成している。撮影制御部５４は、実撮影用期間において第１及び第２条件が同時に成立している場合、対象画像撮影条件が充足したと判断して、対象画像の撮影を撮像部１１に行わせ（即ち、撮像部１１の出力信号から対象画像の画像データを生成して）対象画像の画像データを記録媒体１６に記録させる（ステップＳ１６）。このように、撮影制御部５４は、情報収集期間中に検出された動き量Ｖ_A及びＶ_Bに基づき、その後の実撮影用期間において対象画像の撮影タイミングを決定する。図４の例では、時刻ｔ₂以後、時刻ｔ₃において初めて第１及び第２条件が同時に充足している。このため、時刻ｔ₃において対象画像の撮影が実行される、即ち、時刻ｔ₃における光学式ぶれ補正を経た撮像部１１の出力信号に基づき対象画像が生成される。

【0048】

統計量Ｄ_A及びＤ_Bは、注目した撮影環境における撮像装置１の動き度合い及び被写体の動き度合いを表している。例えば、“Ｄ_A＝Ｖ_A［ｔ_A］”且つ“Ｄ_B＝Ｖ_B［ｔ_B］”であるならば、統計量Ｄ_A及びＤ_Bは、実撮影用期間中において期待される動き量Ｖ_A及びＶ_Bの最小値に相当する。仮に、撮像装置１の動きの影響だけを排除する方式を採用した場合、風などの影響で主要被写体ＳＵＢとしての花が揺れれば花自体の画像はぶれが多いものとなる。逆に、画像データを用いて検出した被写体の動きに基づき被写体のぶれのみを軽減したとしても、撮像装置１自体に動きがあれば背景被写体等にぶれが残る。これを考慮し、撮像装置１では、統計量Ｄ_A及びＤ_Bを用いて対象画像の撮影タイミング決定用の基準量ＴＨ_A及びＴＨ_Bを設定し、動き量Ｖ_A及びＶ_Bが基準量ＴＨ_A及びＴＨ_B以下になったときに対象画像の実撮影を行うようにする。これにより、撮像装置１の動きに基づく画像ぶれ及び被写体の動きに基づく画像ぶれが共に小さな対象画像を取得することが可能となる。屋外で花のマクロ撮影を行う時のように、シャッタチャンスを重視するのではなく、シャッタ指示から或る程度の時間を要しても注目物体をぶれなく撮影することが重視されるような状況において、上述のような制御は特に有益である。

【0049】

尚、光学式ぶれ補正により、撮像装置１の動きによってもたらされる撮影画像全体のぶれは抑制されるのであるが、この抑制は完璧なものではなく、撮像装置１の動きによるぶれの一部は、光学式ぶれ補正を実行しても残存する。故に、光学式ぶれ補正が実行される環境下においても、撮像装置１の動きがなるだけ小さいときに対象画像の撮影が行われることが望ましい。

【0050】

＜＜第２実施例＞＞
撮像装置１の第２実施例を説明する。第２実施例及び後述の第３〜第８実施例では、第１実施例に対する応用技術又は変形技術を説明し、第２〜第８実施例において特に述べない事項に関しては第１実施例の記載が第２〜第８実施例にも適用される。

【0051】

撮影制御部５４は、図７に示す如く、第１実施例で述べた方法に従い基準量ＴＨ_Aを設定する第１基準量設定部６１及び基準量ＴＨ_Bを設定する第２基準量設定部６２を備える。設定部６１は、情報収集期間中の装置動き量Ｖ_A（即ち、情報収集期間中において装置動きセンサ１２により検出された撮像装置１の動きの大きさ）から基準量ＴＨ_Aを設定する際、第１パラメータを利用し、設定部６２は、情報収集期間中の被写体動き量Ｖ_B（即ち、情報収集期間中において被写体動き検出部５３により検出された被写体の動きの大きさ）から基準量ＴＨ_Bを設定する際、第２パラメータを利用する。第１パラメータは上述のオフセット値Δ_A及び係数ｋ_Aの少なくとも一方を含み、第２パラメータは上述のオフセット値Δ_B及び係数ｋ_Bの少なくとも一方を含む。

【0052】

撮影制御部５４は、図７に示す如く、パラメータ変更部６３を有していても良い。パラメータ変更部６３は、ユーザが操作部１７等を通じて撮像装置１に入力したパラメータ変更指示に従い、第１及び第２パラメータの内、少なくとも一方を変更することができる。これにより、ユーザ所望の条件で対象画像の撮影が行われる。例えば、係数ｋ_A及びｋ_Bが大きいほど、対象画像撮影条件が充足しやすくなる一方で対象画像に含まれるぶれが大きくなり、係数ｋ_A及びｋ_Bが小さいほど、対象画像撮影条件が充足しにくくなる一方で対象画像に含まれるぶれが小さくなる。ユーザは、自身の撮影技量を考慮しつつ、対象画像の取得のしやすさと対象画像の品質とのバランスを考慮してパラメータ変更指示を行うことができる。

【0053】

＜＜第３実施例＞＞
撮像装置１の第３実施例を説明する。撮影制御部５４は、情報収集期間を設定する情報収集期間設定部６４を有している（図７参照）。情報収集期間設定部（期間長変更部）６４は、ユーザが操作部１７等を通じて撮像装置１に入力した期間長変更指示に従い、情報収集期間の長さを変更できても良い。これにより、情報収集期間の長さをユーザ所望の長さにすることができる。

【0054】

＜＜第４実施例＞＞
撮像装置１の第４実施例を説明する。撮影制御部５４は、一旦設定した基準量ＴＨ_A及びＴＨ_Bの値を変更する基準量変更部６５を有していても良い（図７参照）。これについて説明する。まず、第１実施例で述べた方法に従って求められた基準量ＴＨ_A及びＴＨ_Bを、夫々、基準量ＴＨ_Aの初期値ＴＨ_A0及び基準量ＴＨ_Bの初期値ＴＨ_B0とする。基準量変更部６５は、時刻ｔ₂より後、所定の第１待機時間が経過しても対象画像撮影条件が充足しないとき、基準量ＴＨ_Aの値を初期値ＴＨ_A0から値ＴＨ_A1へと増大させ、且つ、基準量ＴＨ_Bの値を初期値ＴＨ_B0から値ＴＨ_B1へと増大させる。その後、更に第２待機期間が経過しても対象画像撮影条件が充足しないとき、基準量変更部６５は、基準量ＴＨ_Aの値を更に値ＴＨ_A1から値ＴＨ_A2へと増大させ、且つ、基準量ＴＨ_Bの値を更に値ＴＨ_B1から値ＴＨ_B2へと増大させる。当然、“ＴＨ_A0＜ＴＨ_A1＜ＴＨ_A2”且つ“ＴＨ_B0＜ＴＨ_B1＜ＴＨ_B2”である。その後、更に第３待機時間が経過しても対象画像撮影条件が充足しないとき、撮影制御部５４は、実撮影中止処理を実行する。

【0055】

実撮影中止処理は、対象画像を撮影するための動作（シャッタ指示の入力に応答して対象画像の取得を試みる動作）を中止する処理を含む。実撮影中止処理は、対象画像撮影条件が充足しなかったことをユーザに通知するための通知処理を含んでいてもよい。通知処理では、定められた時間内に対象画像撮影条件を満たした状態での対象画像の撮影をできなかったことをユーザに通知する。通知処理における通知は、ユーザである人間の五感に訴える任意の通知であって良く、通常は、表示部１５による映像出力又は図示されないスピーカ部（不図示）を用いた音声出力にて該通知が実現される。例えば、「条件が整わなかったため、撮影することができませんでした」という文言を表示部１５に表示することで上記通知を実現しつつ、対象画像の撮影を中止しても良い。或いは例えば、「条件が整わなかったため、最適条件での撮影を行うことができませんでした」という文言を表示部１５に表示することで上記通知を実現しつつ、実撮影中止処理の実行時点における入力画像を対象画像として記録媒体１６に記録するようにしても良い。

【0056】

実撮影中止処理において表示される文言、及び、実撮影中止処理において撮像装置１がどのような動作を行うのかについて、複数の形式を予め用意しておき、何れの形式を採用するのかを、操作部１７等を通じたユーザの指示により選択できるようにしても良い。上述の動作例では、基準量（ＴＨ_A、ＴＨ_B）の値が最大で２回変更されるが、基準量（ＴＨ_A、ＴＨ_B）の値の変更最大回数は１回であっても良いし、３回以上であっても良い。その変更最大回数を、操作部１７等を通じたユーザの指示により選択できるようにしても良い。変更最大回数はゼロに設定されうる。変更最大回数がゼロである場合、時刻ｔ₂から所定の第１待機時間が経過しても対象画像撮影条件が充足しないときにおいて、基準量の変更を介することなく、撮影制御部５４により実撮影中止処理が実行される。変更最大回数を幾つにするかは、撮像装置１内で予め定められていても良い。また、上述の第１、第２又は第３待機時間のような待機時間の長さ、及び、基準量の値の変更量（例えば、“ＴＨ_A1−ＴＨ_A0”や“ＴＨ_B1−ＴＨ_B0”）も、撮像装置１内で予め定められていても良いし、操作部１７等を通じたユーザの指示により変更できても良い。尚、基準量変更部６５による基準量の値の変更は、基準量ＴＨ_A及びＴＨ_Bの内、何れか一方にのみ行われるものであっても良い。

【0057】

対象画像の撮影が長時間に亘って行われないという状況は、ユーザにとって好ましいものではない。本実施例は、このような状況の回避に寄与する。

【0058】

＜＜第５実施例＞＞
撮像装置１の第５実施例を説明する。上述の説明では、基準量ＴＨ_A及びＴＨ_Bの双方を用いて対象画像の撮影タイミングを決定しているが、基準量ＴＨ_A及びＴＨ_Bのどちらか一方のみを用いて該決定を行うようにしても良い。対象画像の撮影タイミングの決定に基準量ＴＨ_A及びＴＨ_Bの双方を用いる方式、対象画像の撮影タイミングの決定に基準量ＴＨ_Aのみを用いる方式、対象画像の撮影タイミングの決定に基準量ＴＨ_Bのみを用いる方式を、夫々、第１、第２、第３基準量使用方式と呼ぶ。第１〜第３基準量使用方式の何れを用いるのかを予め撮像装置１内で定めておくこともできるし、ユーザが選択できても良い。基準量使用方式のユーザ選択を実現すべく、ユーザが操作部１７等を通じて撮像装置１に入力した使用基準量選択指示に従い、第１、第２又は第３基準量使用方式を選択及び採用する使用基準量選択部６６を撮影制御部５４に設けておいても良い（図７参照）。これにより、ユーザの好みの条件で対象画像の撮影を行うことができる。

【0059】

第１基準量使用方式が選択及び採用された場合、第１実施例の如く、撮影制御部５４は、第１及び第２条件が同時に成立している場合に対象画像撮影条件が充足したと判断して、対象画像の撮影を撮像部１１に行わせ且つ対象画像の画像データを記録媒体１６に記録させる。第２基準量使用方式が選択及び採用された場合、撮影制御部５４は、第２条件の成否に関係なく第１条件の成立を以って対象画像撮影条件が充足したと判断して、対象画像の撮影を撮像部１１に行わせ且つ対象画像の画像データを記録媒体１６に記録させる。第３基準量使用方式が選択及び採用された場合、撮影制御部５４は、第１条件の成否に関係なく第２条件の成立を以って対象画像撮影条件が充足したと判断して、対象画像の撮影を撮像部１１に行わせ且つ対象画像の画像データを記録媒体１６に記録させる。

【0060】

＜＜第６実施例＞＞
撮像装置１の第６実施例を説明する。撮像装置１は、装置動き情報に応じた何らかの評価情報をユーザに通知しても良い。これについて説明する。ユーザが操作部１７等を通じて撮像装置１に対し所定の評価開始指示を入力すると、主制御部１３は、評価開始指示の入力タイミングを基準とし且つ所定の時間長さを有する評価期間を設定して、評価期間中における装置動き情報を収集する。評価期間の開始タイミングは、評価開始指示の入力タイミングと一致していても良いし、それよりも所定時間だけ後のタイミングであっても良い。

【0061】

主制御部１３は、評価期間中の装置動き情報に基づき手ぶれの大小を評価し、ユーザが認知できる形式で評価結果をユーザに通知する。この通知は、ユーザである人間の五感に訴える任意の通知であって良く、通常は、表示部１５による映像出力又は図示されないスピーカ部（不図示）を用いた音声出力にて該通知が実現される。例えば、評価期間中における装置動き量Ｖ_Aの最小値、最大値、平均値などを、数値、グラフ又はアイコン等にて表示部１５に表示するようにしても良いし、評価期間中の装置動き量Ｖ_Aの時間変化をグラフとして表示部１５に表示するようにしても良い。通知内容に、評価期間中の撮像装置１の動きの向きの時間変化等が含まれていても良い。尚、主制御部１３は、評価期間中に被写体動き情報をも収集して、評価期間中の装置動き情報及び被写体動き情報に基づく通知を行うようにしてもよい。例えば、主制御部１３は、評価期間中の装置動き量Ｖ_A及び被写体動き量Ｖ_Bの時間変化をグラフとして表示部１５に表示しても良い。

【0062】

尚、評価開始指示及び評価期間はシャッタ指示及び情報収集期間と同じであっても良い。この場合、上述の実撮影用期間中において、上述の通知が成されても良い。

【0063】

評価期間が実撮影用期間の前に設定された場合（評価期間と情報収集期間が一致する場合を含む）、主制御部１３（撮影制御部５４）は、評価期間中の装置動き情報に基づき、又は、評価期間中の装置動き情報及び被写体動き情報に基づき、第１及び第２パラメータの具体的数値の決定を行っても良いし（第２実施例を参照）、第４実施例における選択又は変更対象の選択又は変更を行っても良いし、第１、第２又は第３基準量使用方式の何れを採用するのかの選択を行っても良い（第５実施例を参照）。評価期間が情報収集期間の前に設定された場合、主制御部１３（撮影制御部５４）は、評価期間中の装置動き情報に基づき、又は、評価期間中の装置動き情報及び被写体動き情報に基づき、情報収集期間の長さの設定を行っても良い。

【0064】

＜＜第７実施例＞＞
撮像装置１の第７実施例を説明する。撮像装置１は、情報収集期間中に取得された画像データから、画像合成処理を介してぶれの少ない画像を生成する画像合成機能を備えていても良い。第７実施例では、この画像合成機能について説明する。図８は、画像合成機能が有効になっているときの撮像装置１の動作フローチャートである。第７実施例及び後述の第８実施例でも、第１実施例及び図４で示したものと同じ情報収集期間が設定され、装置動き量Ｖ_A及び被写体動き量Ｖ_Bの時間変化は図４で示したものと同じであると仮定する。

【0065】

時刻ｔ₁において、ユーザによりシャッタ指示が撮像装置１に入力されると（ステップＳ２１）、ステップＳ２２において、撮影制御部５４は、情報収集期間を設定して情報収集を開始する。ステップＳ２２における情報収集期間の設定方法及び情報収集方法は、上述した通りである。また、ステップＳ２２において、撮影制御部５４は入力画像の記録を開始する。入力画像の記録は情報収集期間が終了するまで継続する。即ち、撮影制御部５４は、情報収集期間中に取得される入力画像列の画像データ（換言すれば入力動画像の画像データ）を内部メモリ１４等に一時的に記録させる。尚、第３実施例で述べた情報収集期間の長さの変更機能を第７実施例に適用することもできる（後述の第８実施例でも同様）。

【0066】

情報収集期間が終了すると（ステップＳ２３）、ステップＳ２４において、撮影制御部５４は、情報収集期間中の装置動き量Ｖ_A及び被写体動き量Ｖ_Bに基づき、内部メモリ１４等に一時的に記録された情報取集期間中の入力画像列の中から複数の入力画像を複数の被合成画像として選択及び抽出する。続くステップＳ２５において、画像合成部７１（図９参照）は、抽出された複数の被合成画像を合成することで、１枚の静止画像である合成結果画像を生成する。画像合成部７１は主制御部１３内に設けられる。生成された合成結果画像の画像データは記録媒体１６に記録される（ステップＳ２６）。

【0067】

複数の被合成画像は、入力画像列の内、装置動き量Ｖ_Aが最小になっているタイミングの入力画像である入力画像Ｉ［ｔ_A］と、被写体動き量Ｖ_Bが最小になっているタイミングの入力画像である入力画像Ｉ［ｔ_B］とを含む（図４参照）。入力画像Ｉ［ｔ_A］及びＩ［ｔ_B］は、夫々、時刻ｔ_A及びｔ_Bに撮影された入力画像である。

【0068】

主要被写体ＳＵＢである花が風の影響によって時折揺れる一方、背景被写体は風の影響を受けず常に静止している撮影環境を想定する。時刻ｔ_Aでは、撮像装置１の動きが最小になっているため、撮像装置１の動きによる入力画像上の背景被写体のぶれは最小化されている。一方、時刻ｔ_Bでは、主要被写体ＳＵＢを含む被写体の動きが最小になっているため、入力画像上の主要被写体ＳＵＢのぶれは最小化されている。

【0069】

そこで、図９に示す如く、画像合成部７１は、第１被合成画像としての入力画像Ｉ［ｔ_A］における、背景被写体が存在する画像領域の画像データと、第２被合成画像としての入力画像Ｉ［ｔ_B］における、主要被写体ＳＵＢが存在する画像領域の画像データとを合成することで、合成結果画像３６０を生成する。前者の画像領域は、図９の入力画像Ｉ［ｔ_A］における斜線部分以外の画像領域に対応し、後者の画像領域は、図９の入力画像Ｉ［ｔ_B］における斜線部分以外の画像領域に対応する。この方法によれば、撮像装置１の動きによる画像ぶれ及び被写体の動きによる画像ぶれの双方が抑制された合成結果画像を得ることができる。合成結果画像も対象画像の一種であると考えても良い。

【0070】

尚、入力画像Ｉ［ｔ_A］では、入力画像Ｉ［ｔ_B］と比べて主要被写体ＳＵＢにぶれが多いことが想定され、結果、主要被写体ＳＵＢ及び背景被写体間の境界付近において、入力画像Ｉ［ｔ_B］上では現れている背景被写体の一部が入力画像Ｉ［ｔ_A］上では主要被写体ＳＵＢに遮蔽されて写っていない、ということも生じえる。便宜上、かなり誇張して図示しているが、図１０（ｂ）において、斜線部分３７１が当該背景被写体の一部に相当し、図１０（ａ）の入力画像Ｉ［ｔ_A］では、部分３７１が、ぶれた主要被写体ＳＵＢに遮蔽されている（部分３７１は遮蔽されている部分の一部である）。よって、画像合成部７１は、入力画像Ｉ［ｔ_A］以外の入力画像であって且つ時刻ｔ_Aを基準とする１枚以上の入力画像を補助画像として更に用いて合成結果画像３６０を生成しても良い。補助画像は、例えば入力画像Ｉ［ｔ_A］の直前又は直後に撮影された入力画像を含む。画像合成部７１は、背景被写体の部分３７１における画像データを補助画像から取得して、取得した部分３７１の画像データを合成結果画像３６０に含めることで、欠落領域の無い合成結果画像３６０を生成することができる。

【0071】

＜＜第８実施例＞＞
撮像装置１の第８実施例を説明する。撮像装置１は、上述した各動作とは別に以下に示すような動作を実行できても良い。図１１は、第８実施例に係る撮像装置１の動作フローチャートである。

【0072】

情報収集期間が終了するまでの動作は第７実施例で述べたもの同様である。即ち、時刻ｔ₁において、ユーザによりシャッタ指示が撮像装置１に入力されると（ステップＳ３１）、情報収集期間が設定されると共に情報収集及び入力画像の記録が開始される（ステップＳ３２）。

【0073】

情報収集期間が終了すると（ステップＳ３３）、ステップＳ３４において、主制御部１３に内在している画像抽出部７２（図１２参照）は、情報収集期間中の装置動き量Ｖ_A及び被写体動き量Ｖ_Bに基づき、内部メモリ１４等に一時的に記録された情報取集期間中の入力画像列の中から１枚の入力画像を小ぶれ画像として選択及び抽出する。抽出された小ぶれ画像の画像データは記録媒体１６に記録される（ステップＳ３５）。

【0074】

画像抽出部７２は、情報収集期間中の各時刻ｔにおける動き量Ｖ_A［ｔ］及びＶ_B［ｔ］を用い、下記式（３）に従って各時刻ｔにおける動き評価値Ｅ［ｔ］を求め、情報収集期間中において動き評価値Ｅ［ｔ］が最小化される時刻ｔ_Oを特定する。そして、画像抽出部７２は、時刻ｔ_Oにて撮影された入力画像を小ぶれ画像として抽出する。これにより、撮像装置１の動きによる画像ぶれ及び被写体の動きによる画像ぶれの双方がバランス良く抑制された小ぶれ画像を得ることができる。小ぶれ画像も対象画像の一種であると考えても良い。係数ｋ₁及びｋ₂は正の値を持つ。但し、ｋ₁及びｋ₂の内の何れか一方をゼロにすることも可能である。係数ｋ₁及びｋ₂の値は、予め定められていても良いし、操作部１７等を通じたユーザの指示により決定又は変更されても良い。
Ｅ［ｔ］＝ｋ₁×Ｖ_A［ｔ］＋ｋ₂×Ｖ_B［ｔ］ …（３）

【0075】

＜＜変形等＞＞
本発明の実施形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。以上の実施形態は、あくまでも、本発明の実施形態の例であって、本発明ないし各構成要件の用語の意義は、以上の実施形態に記載されたものに制限されるものではない。上述の説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。上述の実施形態に適用可能な注釈事項として、以下に、注釈１〜注釈４を記す。各注釈に記載した内容は、矛盾なき限り、任意に組み合わせることが可能である。

【0076】

［注釈１］
撮像装置１の動きを検出して該動きによる画像のぶれを抑制する技術、撮像部１１の出力信号に基づき被写体の動きを検出する技術、及び、複数の画像を合成する技術の例を上述したが、それらの技術を任意の公知技術（例えば、特開２００６−１８０４７１号公報又は特開２００８−７８９４５号公報に記載の技術）を用いて実現しても良い。

【0077】

［注釈２］
装置動きセンサ１２を角速度センサにて構成する例を上述したが、撮像装置１の動きを表す、角速度以外の物理量（例えば撮像装置１の加速度又は角加速度）を検出するセンサにて、装置動きセンサ１２を構成しても良い。

【0078】

［注釈３］
上述の実施形態では、光学式ぶれ補正を実現するための補正用部材として補正レンズ３６を用いている。但し、補正用部材は補正レンズ３６に限定されない。例えば、補正レンズ３６の代わりにバリアングルプリズム（不図示）を補正用部材として用いて光学式ぶれ補正を実現しても良い。バリアングルプリズムを用いる場合、バリアングルプリズムは補正レンズ３６の代わりに光学系３５内に配置され、被写体からの入射光は、バリアングルプリズムを介して撮像素子３３に入射する。或いは例えば、補正レンズ３６又はバリアングルプリズムを用いず、光軸に直交する面に沿って撮像素子３３を移動させることにより、光学式ぶれ補正を実現してもよい。

【0079】

［注釈４］
主制御部１３を、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって構成することができる。ソフトウェアを用いて主制御部１３を構成する場合、ソフトウェアにて実現される部位についてのブロック図は、その部位の機能ブロック図を表す。主制御部１３にて実現される機能（特に例えば、センサ信号処理部５１、光学式ぶれ補正制御部５２、被写体動き検出部５３、撮影制御部５４、画像合成部７１及び画像抽出部７２にて実現される機能）の内、任意の特定の機能をプログラムとして記述して、該プログラムを主制御部１３に搭載可能なフラッシュメモリに保存しておき、該プログラムを主制御部１３内の演算処理装置（例えば、主制御部１３に搭載可能なマイクロコンピュータ）上で実行することによって、その特定の機能を実現するようにしてもよい。

【符号の説明】

【0080】

１ 撮像装置
１１ 撮像部
１２ 装置動きセンサ
１５ 表示部
１６ 記録媒体
１７ 操作部
５２ 光学式ぶれ補正部
５３ 被写体動き検出部
５４ 撮影制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】