特許 7599842 撮像装置およびその制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-12-06

(45)【発行日】2024-12-16

(54)【発明の名称】撮像装置およびその制御方法

(51)【国際特許分類】

   H04N 23/63 20230101AFI20241209BHJP

   H04N 23/60 20230101ALI20241209BHJP

【ＦＩ】

H04N23/63

H04N23/60 500

【請求項の数】 24

(21)【出願番号】P 2020084135

(22)【出願日】2020-05-12

(65)【公開番号】P2021010160

(43)【公開日】2021-01-28

【審査請求日】2023-05-09

(31)【優先権主張番号】P 2019123133

(32)【優先日】2019-07-01

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】110003281

【氏名又は名称】弁理士法人大塚国際特許事務所

(72)【発明者】

【氏名】大輪 寧司

(72)【発明者】

【氏名】石川 拓海

(72)【発明者】

【氏名】▲高▼山 和紀

(72)【発明者】

【氏名】坂井田 稔

(72)【発明者】

【氏名】大森 勇司

【審査官】▲うし▼田 真悟

(56)【参考文献】

【文献】特開２００９－１３０５９８（ＪＰ，Ａ）

【文献】特開２００６－１５７３４７（ＪＰ，Ａ）

【文献】特開２０１８－００６８２７（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２３／４０－２３／７６

(57)【特許請求の範囲】

【請求項1】

撮像素子と、
前記撮像素子による動画の撮影と、該撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合、前記撮像素子に静止画の撮影を優先して実行させるとともに、前記静止画の撮影によって前記ライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御する制御手段と、を有し、
前記制御手段は、前記静止画の撮影における露光時間の長さに基づいて、前記繰り返し表示する画像の輝度を低下させ、
前記制御手段は、前記静止画の撮影における前記露光時間の長さが増加すると、前記輝度の低下量が増加するように、前記輝度の低下量を決定することを特徴とする撮像装置。

【請求項2】

撮像素子と、
前記撮像素子による動画の撮影と、該撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合、前記撮像素子に静止画の撮影を優先して実行させるとともに、前記静止画の撮影によって前記ライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御する制御手段と、を有する撮像装置であって、
前記制御手段は、前記繰り返し表示する画像の輝度を低下させ、
前記制御手段は、静止画の撮影によって更新できないライブビュー表示のフレーム数、静止画の撮影によってライブビュー表示を更新できない期間の長さ、および静止画の撮影における露光時間の長さのいずれか一つに加え、表示する画像から得られる情報、表示する画像の種類、静止画撮影モード、前記撮像装置の動きのいずれか一つを考慮して前記輝度の低下量を決定することを特徴とする撮像装置。

【請求項3】

前記表示する画像から得られる情報が画像全体もしくは主被写体の輝度であり、前記制御手段は、前記輝度が増加すると、前記輝度の低下量が増加するように、前記輝度の低下量を決定することを特徴とする請求項２に記載の撮像装置。

【請求項4】

前記表示する画像から得られる情報が主被写体の動き量であり、前記制御手段は、前記動き量が増加すると、前記輝度の低下量が増加するように、前記輝度の低下量を決定することを特徴とする請求項２に記載の撮像装置。

【請求項5】

前記表示する画像の種類が、前記表示する画像が静止画撮影で得られた画像から生成された画像か、動画の撮影で得られた画像から生成された画像であり、前記制御手段は、前記表示する画像が動画の撮影で得られた画像から生成された画像である場合、静止画撮影で得られた画像から生成された画像である場合よりも、前記輝度の低下量が大きくなるように、前記輝度の低下量を決定することを特徴とする請求項２に記載の撮像装置。

【請求項6】

前記静止画撮影モードが、連写速度の異なる複数の静止画撮影モードを含み、前記制御手段は、第１の静止画撮影モードよりも連写速度が高い第２の静止画撮影モードについて前記輝度の低下量が増加するように、前記輝度の低下量を決定することを特徴とする請求項２に記載の撮像装置。

【請求項7】

前記制御手段は、前記撮像装置の動きが増加すると、前記輝度の低下量が増加するように、前記輝度の低下量を決定することを特徴とする請求項２に記載の撮像装置。

【請求項8】

前記制御手段は、前記撮像装置の動きが所定の一定時間継続して閾値を超える場合に、前記繰り返し表示する画像の輝度を低下させることを特徴とする請求項２に記載の撮像装置。

【請求項9】

前記制御手段は、前記撮像装置の動きが所定の一定時間継続して第１の閾値を超えると、前記繰り返し表示する画像の輝度を低下させることを開始し、前記撮像装置の動きが所定の一定時間継続して前記第１の閾値より小さい第２の閾値を下回ると、前記繰り返し表示する画像の輝度を低下させることを終了する、特徴とする請求項２に記載の撮像装置。

【請求項10】

前記撮像装置の動きが、前記撮像装置の角速度であることを特徴とする請求項２および７から９のいずれか１項に記載の撮像装置。

【請求項11】

撮像素子と、
前記撮像素子による動画の撮影と、該撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合、前記撮像素子に静止画の撮影を優先して実行させるとともに、前記静止画の撮影によって前記ライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御する制御手段と、を有し、
前記制御手段は、前記静止画の撮影における露光時間の長さに基づいて、前記繰り返し表示する画像に特定の色を有する調整画像を合成することにより、前記繰り返し表示する画像の色合いを変化させ、
前記制御手段は、前記静止画の撮影における前記露光時間の長さに基づいて、前記特定の色および／または前記調整画像の合成比率を決定し、
前記制御手段は、前記静止画の撮影における前記露光時間の長さが増加すると前記調整画像の合成比率が増加するように、前記調整画像の合成比率を決定することを特徴とする撮像装置。

【請求項12】

撮像素子と、
前記撮像素子による動画の撮影と、該撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合、前記撮像素子に静止画の撮影を優先して実行させるとともに、前記静止画の撮影によって前記ライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御する制御手段と、を有する撮像装置であって、
前記制御手段は、前記繰り返し表示する画像に特定の色を有する調整画像を合成することにより、前記繰り返し表示する画像の色合いを変化させ、
前記制御手段は、前記静止画の撮影における露光時間の長さに基づいて、前記特定の色および／または前記調整画像の合成比率を決定し、
前記制御手段は、さらに、表示する画像から得られる情報、表示する画像の種類、静止画撮影モード、前記撮像装置の動きを考慮して前記調整画像の合成比率を決定することを特徴とする撮像装置。

【請求項13】

前記表示する画像から得られる情報が画像全体もしくは主被写体の輝度であり、前記制御手段は、前記輝度が増加すると前記調整画像の合成比率が増加するように、前記調整画像の合成比率を決定することを特徴とする請求項１２に記載の撮像装置。

【請求項14】

前記表示する画像から得られる情報が主被写体の動き量であり、前記制御手段は、前記動き量が増加すると前記調整画像の合成比率が増加するように、前記調整画像の合成比率を決定することを特徴とする請求項１２に記載の撮像装置。

【請求項15】

前記表示する画像の種類が、前記表示する画像が静止画撮影で得られた画像から生成された画像か、動画の撮影で得られた画像から生成された画像であり、前記制御手段は、前記表示する画像が動画の撮影で得られた画像から生成された画像である場合、静止画撮影で得られた画像から生成された画像である場合よりも前記調整画像の合成比率が大きくなるように、前記調整画像の合成比率を決定することを特徴とする請求項１２に記載の撮像装置。

【請求項16】

前記静止画撮影モードが、連写速度の異なる複数の静止画撮影モードを含み、前記制御手段は、第１の静止画撮影モードよりも連写速度が高い第２の静止画撮影モードについて前記調整画像の合成比率が増加するように、前記調整画像の合成比率を決定することを特徴とする請求項１２に記載の撮像装置。

【請求項17】

前記制御手段は、前記撮像装置の動きが増加すると前記調整画像の合成比率が増加するように、前記調整画像の合成比率を決定することを特徴とする請求項１２に記載の撮像装置。

【請求項18】

前記特定の色が、黒色もしくは無彩色であり、前記無彩色である場合には、前記静止画の撮影における前記露光時間の長さに基づく明るさを有することを特徴とする請求項１１に記載の撮像装置。

【請求項19】

前記特定の色が、黒色もしくは無彩色であり、前記無彩色である場合には、画像全体もしくは主被写体の輝度、主被写体の動き量、前記表示する画像が静止画撮影で得られた画像から生成された画像か動画の撮影で得られた画像か、および静止画撮影モードのいずれかと、に基づく明るさを有することを特徴とする請求項１１に記載の撮像装置。

【請求項20】

撮像素子を有する撮像装置が実行する制御方法であって、
前記撮像素子による動画の撮影と、該撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合に、
前記撮像素子に静止画の撮影を優先して実行させることと、
前記静止画の撮影によって前記ライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御することと、を有し、
前記制御することは、
前記静止画の撮影における露光時間の長さに基づいて、前記繰り返し表示する画像の輝度を低下させることと、
前記静止画の撮影における前記露光時間の長さが増加すると、前記輝度の低下量が増加するように、前記輝度の低下量を決定することと、
を含むことを特徴とする撮像装置の制御方法。

【請求項21】

撮像素子を有する撮像装置が実行する制御方法であって、
前記撮像素子による動画の撮影と、該撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合、
前記撮像素子に静止画の撮影を優先して実行させることと、
前記静止画の撮影によって前記ライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御することと、
前記繰り返し表示する画像の輝度を低下させることと、を有し
前記輝度を低下させることは、静止画の撮影によって更新できないライブビュー表示のフレーム数、静止画の撮影によってライブビュー表示を更新できない期間の長さ、および静止画の撮影における露光時間の長さのいずれか一つに加え、表示する画像から得られる情報、表示する画像の種類、静止画撮影モード、前記撮像装置の動きのいずれか一つを考慮して前記輝度の低下量を決定することを含む、ことを特徴とする撮像装置の制御方法。

【請求項22】

撮像素子を有する撮像装置が実行する制御方法であって、
前記撮像素子による動画の撮影と、該撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合、
前記撮像素子に静止画の撮影を優先して実行させることと、
前記静止画の撮影によって前記ライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御することと、を有し、
前記制御することは、
前記静止画の撮影における露光時間の長さに基づいて、前記繰り返し表示する画像に特定の色を有する調整画像を合成することにより、前記繰り返し表示する画像の色合いを変化させることと、
前記静止画の撮影における前記露光時間の長さに基づいて、前記特定の色および／または前記調整画像の合成比率を決定することと、
前記静止画の撮影における前記露光時間の長さが増加すると前記調整画像の合成比率が増加するように、前記調整画像の合成比率を決定することと、を含む、
ことを特徴とする撮像装置の制御方法。

【請求項23】

撮像素子を有する撮像装置が実行する制御方法であって、
前記撮像素子による動画の撮影と、該撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合、
前記撮像素子に静止画の撮影を優先して実行させることと、
前記静止画の撮影によって前記ライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御することと、を有し、
前記制御することは、
前記繰り返し表示する画像に特定の色を有する調整画像を合成することにより、前記繰り返し表示する画像の色合いを変化させることと、
前記静止画の撮影における露光時間の長さに基づいて、前記特定の色および／または前記調整画像の合成比率を決定することと、
さらに、表示する画像から得られる情報、表示する画像の種類、静止画撮影モード、前記撮像装置の動きを考慮して前記調整画像の合成比率を決定することと、を含む、
ことを特徴とする撮像装置の制御方法。

【請求項24】

撮像装置が有するコンピュータを、請求項１から１９のいずれか１項に記載の撮像装置の制御手段として機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は撮像装置およびその制御方法に関する。

【背景技術】

【0002】

撮像素子を用いる撮像装置には、ライブビュー（以下ＬＶと表記）表示機能を有するものがある。ライブビュー表示機能は、撮影と表示とを高速に、かつ継続的に実行することにより、ユーザが現在の撮影範囲を確認することを可能にする機能である。ＬＶ表示は、撮像装置の筐体の背面やファインダー内に設けられる表示装置で行われる。ＬＶ表示に用いる画像（ＬＶ用画像）は、解像度（画素数）などが記録用の静止画と異なる。そのため、撮像素子の駆動制御（駆動モードともいう）は、表示用の動画（ＬＶ用画像）を撮影する場合と、記録用の静止画を撮影する場合とで異なる。以下、便宜上、ＬＶ用画像を撮影する場合の駆動モードを動画モード、記録用の静止画を撮影する場合の駆動制御を静止画モードと呼ぶ。動画モードと静止画モードとの切り替えには切り替え動作が必要である。

【0003】

例えば、ＬＶ用画像と記録用画像とを同じ撮像素子で撮影する構成において、静止画撮影にＬＶ表示を行う場合を考える。ＬＶ画像の更新間隔は一定であることが望ましいが、静止画の撮影開始タイミングや露光時間によっては、静止画駆動の期間が予定されていた表示用駆動の期間と重複することがある。

【0004】

静止画撮影を優先し、ＬＶ画像の撮影をスキップする場合、直前に撮影したＬＶ画像を繰り返し表示するか、ＬＶ画像の代わりに黒画像を表示（ブラックアウト）する。特許文献１では、ＬＶ表示期間以外に黒画像を表示する構成において、ＬＶ画像の表示輝度を通常よりも高くすることで、黒画像の間に表示されるＬＶ画像が暗く感じられることを改善することが提案されている。

【先行技術文献】

【特許文献】

【0005】

【文献】特開２０１８―００６８２７号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、ＬＶ画像が撮影できない場合に黒画像を表示する構成では、黒画像とＬＶ画像の輝度差が大きいため、視認性が低下したり、目が疲れやすくなったりする。この問題は、特許文献１のようにＬＶ画像を通常よりも高い輝度で表示すると、さらに大きくなる。また、黒画像の代わりに過去のＬＶ画像を繰り返し表示した場合、ＬＶ表示における移動被写体の動きが不自然になる。

【0007】

本発明はこのような従来技術の課題を緩和するためになされたものである。本発明は、静止画撮影によってＬＶ画像の撮影が行えない場合でも、視認性の低下を抑制しつつ、滑らかなＬＶ表示が可能な撮像装置およびその制御方法の提供を目的とする。

【課題を解決するための手段】

【0008】

上述の目的は、撮像素子と、撮像素子による動画の撮影と、撮影で得られた動画の表示とによってライブビュー表示を実行している際に静止画の撮影指示が検出された場合、撮像素子に静止画の撮影を優先して実行させるとともに、静止画の撮影によってライブビュー表示の更新ができない期間については同一の画像を繰り返し表示するように制御する制御手段と、を有し、制御手段は、静止画の撮影における露光時間の長さに基づいて、繰り返し表示する画像の輝度を低下させ、制御手段は、静止画の撮影における露光時間の長さが増加すると、輝度の低下量が増加するように、輝度の低下量を決定することを特徴とする撮像装置によって達成される。

【発明の効果】

【0009】

本発明によれば、静止画撮影によってＬＶ画像の撮影が行えない場合でも、視認性の低下を抑制しつつ、滑らかなＬＶ表示が可能な撮像装置およびその制御方法を提供することができる。

【図面の簡単な説明】

【0010】

【図1】実施形態に係る撮像装置の機能構成例を示すブロック図

【図2】第１実施形態における動画撮影中の静止画撮影時の動作に関するタイミングチャート

【図3】第１実施形態におけるＬＶ画像の輝度調整動作に関するフローチャート

【図4】第２実施形態におけるＬＶ画像の輝度調整動作に関するフローチャート

【図5】第３実施形態におけるＬＶ画像の輝度調整動作に関するフローチャート

【図6】実施形態に係る撮像装置の別の機能構成例を示すブロック図

【図7】第４実施形態におけるＬＶ画像の調整動作に関するフローチャート

【図8】第５実施形態におけるＬＶ画像の調整動作に関するフローチャート

【図9】第６実施形態におけるＬＶ画像の調整動作に関するフローチャート

【図10】第７実施形態におけるＬＶ画像の調整動作に関するフローチャート

【図11】第８実施形態におけるＬＶ画像の調整動作に関するフローチャート

【発明を実施するための形態】

【0011】

以下、添付図面を参照して本発明をその例示的な実施形態に基づいて詳細に説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定しない。また、実施形態には複数の特徴が記載されているが、その全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

【0012】

以下の実施形態では本発明をデジタルカメラのような撮像装置に適用した例について説明する。しかし、本発明は１つの撮像センサを用いて動画撮影中に静止画撮影可能な撮像機能を有する任意の電子機器に対して適用可能である。このような電子機器には、ビデオカメラ、コンピュータ機器（パーソナルコンピュータ、タブレットコンピュータ、メディアプレーヤ、ＰＤＡなど）、携帯電話機、スマートフォン、ゲーム機、ロボット、ドローン、ドライブレコーダが含まれる。これらは例示であり、本発明は他の電子機器にも適用可能である。

【0013】

●（第１実施形態）
図１は本発明に係る撮像装置の一例としてのデジタルカメラ１の機能構成例を示すブロック図である。
撮像素子１００は例えばＣＣＤイメージセンサやＣＭＯＳイメージセンサであり、光電変換部を有する画素が複数配列されている。撮像素子１００は、撮像レンズ１２０が撮像面に形成する光学像を複数の画素で電気信号に変換し、複数の画素データから構成される画像データを生成する。撮像素子１００が生成した画像データは、データ転送部１０５を介して一時記憶部（バッファメモリ）１０７に書き込まれる。

【0014】

画像処理部１０１は、動画データおよび静止画データに予め定められた画像処理を適用し、表示用や記録用の画像データ（ライブビュー画像データ、記録用および表示用の静止画データ）を生成する。画像処理部１０１は、一時記憶部１０７に記憶された画像データに対してさまざまな画像処理を適用する。静止画の撮影が画像データに適用する画像処理には、前処理、色補間処理、補正処理、データ加工処理などが含まれる。前処理には、ノイズ低減、信号増幅、基準レベル調整、欠陥画素補正などが含まれる。色補間処理は、画素から読み出した画像データに含まれていない色成分の値を補間する処理であり、デモザイク処理とも呼ばれる。補正処理には、ホワイトバランス調整、画像の輝度を補正する処理、撮像レンズ１２０の光学系の収差を補正する処理、色を補正する処理などが含まれる。データ加工処理には、スケーリング処理、符号化および復号処理、ヘッダ情報生成処理などが含まれる。なお、これらは静止画の撮影が実施可能な画像処理の例示であり、画像処理部１０１が実施する画像処理を限定するものではない。画像処理部１０１は、生成した画像データを一時記憶部１０７に書き込む。ＬＶ画像データを生成した場合、画像処理部１０１はデータ転送部１０５を介して表示部１０２に出力する。

【0015】

なお、画像処理部１０１は、生成したＬＶ画像データに対して検出処理や評価値算出処理を適用してもよい。検出処理は、特徴領域（たとえば顔領域や人体領域）やその動きの検出、人物の認識処理などである。また、評価値算出処理は、位相差ＡＦ（自動焦点検出）用の１対の像信号、コントラストＡＦ用の評価値、自動露出制御（ＡＥ）に用いる評価値など、制御部１０４の動作に用いる評価値を算出する処理である。なお、これらは画像処理部１０１が実施可能な画像処理の例示であり、画像処理部１０１が実施する画像処理を限定するものではない。

【0016】

表示部１０２は、データ転送部１０５を介して一時記憶部１０７からＬＶ画像データを受け取る。表示部１０２は、ＬＶ画像データに対し、表示デバイス１０３に表示するための加工処理を必要に応じて適用する。加工処理には例えば表示デバイスの表示画面とＬＶ画像のアスペクト比が異なる場合の縁部の処理（レターボックス処理など）がある。また、撮影時間などの補助情報を合成する処理、ＯＳＤ画像などのＧＵＩ画像の合成や、信号形式の変換なども加工処理に含まれる。

【0017】

表示部１０２は、必要な加工処理を適用したＬＶ画像データを、表示デバイス１０３に出力する。表示デバイス１０３は、例えば、ＬＣＤ(Liquid Crystal Display)やＯＬＥＤ（Organic Light Emitting Diode）ディスプレイである。ＬＶ画像データ（動画データを）表示する表示デバイス１０３は、電子ビューファインダー（ＥＶＦ）として機能する。

【0018】

撮影指示部１１１は、ユーザが静止画撮影の指示をデジタルカメラ１に与えるための入力部材である。撮影指示部１１１はデジタルカメラ１に設けられたレリーズボタンでもよいし、リモコンなど他の入力部材であってもよい。撮影指示部１１１を通じたユーザ指示は制御部１０４によって検出される。

【0019】

制御部１０４は、ＣＰＵを有し、例えばＲＯＭ１１３に記憶されたプログラムをＲＡＭ１１２に読み込んで実行する。なお、ＣＰＵの代わりにプログラマブルプロセッサであるＦＰＧＡ(field-programmable gate array)を用いてもよい。制御部１０４は、各機能ブロックの動作を制御することにより、デジタルカメラ１の機能を実現する。ＲＯＭ１１３は例えば書き換え可能な不揮発性メモリであり、制御部１０４のＣＰＵが実行可能なプログラム、設定値、ＧＵＩデータなどを記憶する。ＲＡＭ１１２は、制御部１０４のＣＰＵが実行するプログラムを読み込んだり、プログラムの実行中に必要な値を保存したりするために用いられる。後述する、撮像素子１００からの読み出し動作の制御も制御部１０４が主体となって行う。また、制御部１０４はシステムタイマーを含み、各種制御に用いる時間や、内蔵された時計の時間を計測する。

【0020】

データ転送部１０５は例えば複数のＤＭＡ(Direct Memory Access)コントローラ（ＤＭＡＣ）で構成される。各種の画像データは、ＤＭＡＣにより、バス１０６を介して一時記憶部１０７に一時記憶される。また、一時記憶部１０７に記憶された画像データは、ＤＭＡＣによってバス１０６に読み出され、データ転送部１０５に接続されている各部へ供給される。

【0021】

また、データ転送部１０５は、撮像素子１００が動画データ（ここでは表示用のＬＶ画像データ）の撮影および読み出しに用いる垂直同期信号（撮像表示Ｖ同期信号）１１０を生成し、撮像素子１００に供給する。例えば、動画のフレームレートが６０フレーム／秒の場合、データ転送部１０５は１／６０秒周期の撮像表示Ｖ同期信号を生成する。

【0022】

動画の撮影中に静止画撮影の指示が検出された場合、制御部１０４はデータ転送部１０５による撮像表示Ｖ同期信号の生成を一時停止させてから、撮像素子１００の読み出しモードを動画読み出しモードから静止画読み出しモードに切り替える。そして制御部１０４は、静止画の撮影タイミングに応じた同期信号（静止画同期信号）を生成して撮像素子１００に供給する。

【0023】

制御部１０４は、１フレーム分の静止画撮影が終了すると、撮像素子１００の読み出しモードを静止画読み出しモードから動画読み出しモードに切り替える。そして、制御部１０４は、データ転送部１０５に撮像表示Ｖ同期信号１１０の生成を再開させる。

【0024】

バス１０６は、例えば独立したシステムバスとデータバスとを有する。バス１０６に接続された機能ブロックは、双方向の通信が可能である。
一時記憶部１０７は、メモリ制御部とメモリから構成され、制御部１０４またはデータ転送部１０５の指示に応じて、メモリにデータを書き込んだり、メモリからデータを読み出して出力する。一時記憶部１０７は、動画データや静止画データのバッファとしても用いられる。

【0025】

記録部１０８は、画像処理部１０１が生成した記録用の静止画データや動画データを、制御部１０４の制御に従ってメモリカードなどの記録媒体に記録する。また、記録部１０８は、制御部１０４の制御に従って、記録媒体に記録された画像データを読み出して出力する。制御部１０４は、読み出した画像データを一時記憶部１０７に記憶する。

【0026】

本実施形態のデジタルカメラは、電源スイッチによって起動されると、撮影スタンバイ状態になる。撮影スタンバイ状態で制御部１０４はＬＶ表示を継続的に実行し、静止画または動画の撮影指示が操作部１０９を通じて入力されるのを待機する。撮影スタンバイ状態において制御部１０４は、画像処理部１０１から得られる評価値に基づく露出制御や焦点調節などを実行することができる。撮影スタンバイ状態で静止画の撮影指示が入力されると、制御部１０４は静止画の撮影処理を開始する。撮影で得られた静止画のデータは画像処理部１０１による処理のあと、一時記憶部１０７に格納される。

【0027】

また、静止画の撮影指示の継続入力を制御部１０４は静止画の連写指示と認識し、撮影指示の入力が終了するか、連写枚数が予め定められた上限に達するまで、繰り返し静止画の撮影処理を実行する。なお、静止画の撮影指示の継続入力を静止画の連写処理と認識するのは、モード選択ダイヤルにより連写モードが設定されている場合だけであってもよい。

【0028】

静止画の撮影指示の入力が終了すると、制御部１０４は一時記憶部１０７に格納されていた静止画データを所定形式のデータファイルに含めてメモリカードや記録部１０８などに記録する。撮影スタンバイ状態において静止画の撮影指示が入力されてから、実際に静止画撮影が開始されるまでの時間をレリーズタイム（またはレリーズタイムラグ）と呼ぶ。また、制御部１０４は、静止画の連写時における、連続する２回の撮影タイミングの間隔を、連写間隔と呼ぶ。

【0029】

図２は、本実施形態のデジタルカメラにおける、静止画連写とライブビュー表示（ＬＶ表示）の動作に関するタイミングチャートであり、右方向に時間が経過している。図２（ａ）と図２（ｂ）とは、静止画撮影時の露光時間が異なる。

【0030】

図２は、ライブビュー表示（動画表示）を行いながら静止画撮影を行う場合の撮影ならびに表示動作のタイミング制御を模式的に示した図である。横軸が時間軸であり、図面左から右方向に時間が進む。ここでは、静止画撮影の指示が連続的に入力される連写撮影の場合を示している。

【0031】

撮像表示Ｖ同期（信号）は、撮像素子１００からＬＶ画像の露光およびデータ読み出しを開始するタイミングを示す垂直同期信号の出力タイミングを示している。上述の通り、垂直同期信号は、ＬＶ画像（動画）のフレームレートに応じた周期で出力される。

【0032】

静止画同期（信号）は、撮像素子１００で静止画データを読み出すタイミングを示す信号である。制御部１０４は、撮影指示部１１１から静止画撮影の指示が入力されている間、所定のタイミングで静止画同期信号を生成する。本実施形態では、最初に静止画撮影の指示を検出すると、制御部１０４は一定時間（レリーズタイム）Ｔ０後に静止画同期信号を出力する。その後、静止画撮影の指示が連続して入力されている場合、制御部１０４は予め定められた連写間隔Ｔ１で静止画同期信号を出力する。

【0033】

センサ出力画像は、撮像素子１００において撮像および画像データ（ＬＶ画像データ、静止画データ）の読み出しが行われる期間と、ＬＶ画像（動画）読み出しと静止画読み出しとを切り替える期間（読み出しモード切り替え期間）を示している。表示１～表示９がＬＶ画像の撮像および読み出し期間（動画駆動期間または第１の駆動期間）、静止画１～静止画２が静止画の撮像および読み出し期間（静止画駆動期間または第２の駆動期間）を示す。また、２０１および２０２は撮像素子１００の駆動モード切り替え期間を示す。２０１はＬＶ画像（動画）取得用の駆動モード（動画モード）から静止画取得用の駆動モード(静止画モード）への切り替え期間、２０２は静止画モードから動画モードへの切り替え期間を示す。撮像素子１００の駆動モードの切り替えは、例えば制御部１０４が撮像素子１００の設定を変更することによって行う。

【0034】

表示用の動画であるＬＶ画像と、記録用の静止画とは、解像度や露光時間が異なる。特に、ＬＶ画像の解像度は静止画データの解像度より低いため、読み出す画像データの量が少ない。また、図２の例では、静止画の露光時間Ｔ２が動画の露光時間より長い。そのため、動画駆動期間は静止画駆動期間よりも短い。なお、表示１～表示９のうち、表示５、８で示す動画駆動期間には実際にはＬＶ画像データの読み出しが行われないため、斜線が付されている。

【0035】

画像処理は、画像処理部１０１における画像処理期間を示す。表示１、２、３、４、６、７、９、静止画１、２は、処理の対象となるセンサ出力画像を示している。画像処理期間は、撮像素子１００から読み出された画像データが一時記憶部１０７を介して画像処理部１０１に供給され、画像処理後に再び一時記憶部１０７に記憶されるまでの期間である。

【0036】

ＬＶ画像に関しては、１画面分の画像データが全て一時記憶部１０７に記憶されるのを待たずに画像処理部１０１への供給が開始される。一方、静止画に関しては、撮像素子１００から読み出された１画面分の静止画データが一時記憶部１０７に全て記憶されてから画像処理部１０１への供給が開始される。ただし、これは必須でなく、ＬＶ画像と同様、撮像素子１００から一時記憶部１０７への記憶動作と、一時記憶部１０７から画像処理部１０１への供給動作とを並行して実施してもよい。なお、データ転送部１０５は、一時記憶部１０７に記憶された画像データのみを画像処理部１０１に供給する。一時記憶部１０７に記憶されずに画像処理部１０１に供給される画像データはない。

【0037】

表示Ｖ同期は、表示デバイス１０３の垂直同期信号である。なお、撮像表示Ｖ同期に対する表示Ｖ同期の遅れを短くすることにより、ＬＶ表示のリアルタイム性が向上する。

【0038】

表示は、表示デバイス１０３における表示期間と、表示される画像を示している。なお、表示４、表示７がそれぞれ２フレーム連続で出力されているのは、表示５、８に対応するＬＶ画像データが生成されないからである。

【0039】

次に図２（ｂ）について説明する。静止画の露光時間Ｔ２が図２（ａ）では撮像表示Ｖ同期、表示Ｖ同期の１周期以内に収まっていたのに対して、図２（ｂ）では２周期にまたがる程度に長い点で異なる。静止画の露光時間Ｔ２が長くなった影響により、静止画１の画像処理期間が２０３から２１３に遅れている。この結果、図２（ｂ）では表示６を表示することができず、表示４を３フレーム連続して表示することになる。このように、静止画の露光時間によって、ＬＶ画像の連続表示フレーム数が変化する。

【0040】

図２では、静止画の露光時間Ｔ２が撮像表示Ｖ同期、表示Ｖ同期の１周期以内に収まる場合と、２周期にまたがる場合について例示した。しかし、静止画の露光時間Ｔ２がさらに長くなると、ＬＶ画像の連続表示フレーム数が４以上に増加する。

【0041】

図３は、同一のＬＶ画像が２フレーム以上連続して表示される場合の輝度調整動作に関するフローチャートである。ＬＶ画像の輝度調整は画像処理部１０１でＬＶ画像を生成する際に行ってもよいし、表示部１０２においてＬＶ画像を加工する際に行ってもよい。図３に示す動作は、制御部１０４が実行する。

【0042】

図３（ａ）は、ＬＶ表示を更新できない期間について、繰り返し表示するＬＶ画像の輝度調整を行う動作に関するフローチャートである。制御部１０４は、例えば静止画の撮影動作を開始するごとに、本動作を繰り返し実行する。

【0043】

Ｓ３０１で制御部１０４は、ＬＶ画像の更新が可能か否かを判定する。例えば制御部１０４は、現在表示中のＬＶ画像より後に撮影されたＬＶ画像について、画像処理部１０１における画像処理、もしくは表示部１０２における加工処理が予め定めた段階まで完了していれば、ＬＶ画像の更新が可能と判定してもよい。あるいは、制御部１０４は、静止画撮影の露光期間もしくは静止画データの画像処理期間が次の表示Ｖ同期のタイミングと重複している場合には、ＬＶ画像の更新が不能と判定することができる。なお、判定方法に特に制限は無く、他の任意の方法を採用しうる。制御部１０４は、現在表示中のＬＶ画像より新しいＬＶ画像が表示可能であると判定されればＳ３０２へ、判定されなければＳ３０３へ、処理を進める。

【0044】

Ｓ３０２で制御部１０４は、新たなＬＶ画像を表示部１０２を通じて表示デバイス１０３に表示させる。これは、撮影スタンバイ状態におけるＬＶ画像の更新処理と同様である。なお、本実施形態において制御部１０４は、静止画撮影が開始された後にＬＶ画像が更新できる状態になったことをもって（１フレーム分の）静止画撮影が終了したと判定し、ＬＶ画像の輝度調整動作を終了する。しかし、静止画データの撮像素子１００からの読み出し完了など、他の条件に基づいて（１フレーム分の）静止画撮影が終了したと判定してもよい。

【0045】

Ｓ３０３で制御部１０４は、連続表示するＬＶ画像を輝度調整する。本実施形態では、同一のＬＶ画像について、１回目の表示については輝度調整せず、連続表示（２回目以降の表示）については１回目よりも低い輝度で表示されるようにする。例えば、ここでは元画像（輝度を調整していないＬＶ画像）の画素値（ＲＧＢ値または輝度値）に対して所定のＧａｉｎ（例えば１未満かつ０より大きい下限値以上の係数）を乗算することにより、輝度を調整する。前述の通り、輝度の調整は画像処理部１０１で行っても、表示部１０２で行ってもよい。例えば元画像データ（直近のＬＶ画像データ）が表示部１０２に保持されている場合や、画像処理部１０１が処理を提供した後の画像データが一時記憶部１０７に保持されている場合には、表示部１０２で輝度調整を行えばよい。制御部１０４は、画像処理部１０１または表示部１０２に対して、次に表示するＬＶ画像に対する輝度調整（低下）の実行を指示する。Ｇａｉｎの値は制御部１０４が指定してもよいし、画像処理部１０１または表示部１０２が保持もしくは決定してもよい。

【0046】

Ｓ３０４で、制御部１０４は、次の表示Ｖ同期から輝度調整したＬＶ画像が表示されるように、表示部１０２を制御する。そして、制御部１０４は処理をＳ３０１に戻し、ＬＶ画像の更新が可能と判定されるまで、Ｓ３０３およびＳ３０４の処理を繰り返し実行する。なお、図３（ａ）の例では、元画像に対する輝度の低下量は連続表示フレーム数によらず一定である。そのため、直近のＬＶ画像データが表示部１０２に保持されている場合など、既に輝度調整済みのＬＶ画像データが存在する場合には、Ｓ３０３の処理をスキップしてもよい。

【0047】

一方、図３（ｂ）～図３（ｄ）は、元画像に対して適用するゲインを動的に変更する例を示している。制御部１０４は、図３（ｂ）～図３（ｄ）のいずれかの動作を、図３（ａ）のＳ３０３の動作に代えて実行することができる。

【0048】

図３（ｂ）のＳ３１１で、制御部１０４は、静止画撮影によってＬＶ画像の更新ができず、直近のＬＶ画像が連続表示されるフレーム数（回数）Ｎ（Ｎ≧１）を取得する。ここで、２回目の表示がＮ＝１に相当する。制御部１０４は、例えば静止画撮影が開始されてからの表示Ｖ同期の回数をＮとして得ることができるが、他の方法で取得してもよい。

【0049】

Ｓ３１２で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｎ×ＮとしてＧａｉｎの値を決定するものとする。Ａｎは固定係数であり、例えば、予め定められたＮの最大数に基づいて、Ｇａｉｎの値が下限値以上１未満の値になるようにＡｎの値を決定することができる。または、Ａｎ×Ｎの実値が１を超えた場合には１未満の最大値とするようにしてもよい。Ｇａｉｎの値は、Ｎが大きいほど小さくなる（輝度の低下量が大きくなる）。したがって、同一ＬＶ画像の連続表示回数が増加するほど、元画像より暗くなるような輝度調整が行われる。なお、Ｇａｉｎの下限値は０より大きい任意の値であってよいが、例えば０．２～０．３程度とすることができる。下限値は予め実験的に定めることができる。

【0050】

Ｓ３１３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。

【0051】

図３（ｃ）のＳ３２１で、制御部１０４は、静止画撮影によってＬＶ画像の更新ができず、直近のＬＶ画像が連続表示される期間Ｔｃ［ｍｓｅｃ］を取得する。制御部１０４は、例えば静止画撮影を開始してから発生する最初の表示Ｖ同期からの経過時間を計測することにより、期間Ｔｃを取得することができるが、他の方法で取得してもよい。

【0052】

Ｓ３２２で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｃ×ＴｃとしてＧａｉｎの値を決定するものとする。Ａｃは固定係数であり、例えば、予め定められたＴｃの最大数に基づいて、Ｇａｉｎの値が下限値以上１未満の値になるようにＡｃの値を決定することができる。または、Ａｃ×Ｔｃの実値が１を超えた場合には１未満の最大値とするようにしてもよい。Ｇａｉｎの値は、Ｔｃが長い（大きい）ほど小さくなる（輝度の低下量が大きくなる）。したがって、静止画撮影によってＬＶ画像の更新ができない時間が長くなるほど、元画像より暗くなるような輝度調整が行われる。

【0053】

Ｓ３２３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。

【0054】

図３（ｄ）のＳ３３１で、制御部１０４は、静止画撮影の露光時間Ｔｓ［ｓｅｃ］を取得する。制御部１０４は、例えば露光開始からの時間を測定することにより露光時間Ｔｓを取得することができるが、他の方法で取得してもよい。

【0055】

Ｓ３３２で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｓ×ＴｓとしてＧａｉｎの値を決定するものとする。Ａｓは固定係数であり、例えば、予め定められたＴｓの最大数に基づいて、Ｇａｉｎの値が下限値以上１未満の値になるようにＡｓの値を決定することができる。または、Ａｓ×Ｔｓの実値が１を超えた場合には１未満の最大値とするようにしてもよい。また、１－Ａｓ×ＴｓがＧａｉｎの下限値を下回る場合には、Ｇａｉｎを下限値とする。Ｇａｉｎの値は、露光時間Ｔｓが長いほど小さくなる（輝度の低下量が大きくなる）。また、したがって、静止画撮影の露光時間Ｔｓが長くなるほど、元画像より暗くなるような輝度調整が行われる。

【0056】

Ｓ３２３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。

【0057】

なお、図３（ｂ）～図３（ｄ）で説明した動作におけるＧａｉｎの値は、１フレーム分の静止画撮影が開始されてから終了するまでの期間で固定であってもよい。この場合、図３（ｂ）のＳ３１１および図３（ｃ）のＳ３２１において制御部１０４は、例えば静止画撮影の露光時間と、想定される画像処理期間と、表示Ｖ同期のタイミングと、表示周期とに基づいてＮおよびＴｃをそれぞれ取得することができる。また、図３（ｄ）のＳ３３１では露出条件として決定されているシャッタースピードの逆数として得られる露光時間Ｔｓを用いればよい。

【0058】

図３を用いて説明したように、本実施形態のデジタルカメラは、静止画撮影によってＬＶ表示の更新ができない期間について、黒画像ではなく直近のＬＶ画像を繰り返し表示する。そのため、黒画像を表示する場合のようなＬＶ画像の大きな輝度変化がない。さらに、繰り返し表示するＬＶ画像の輝度を、本来の輝度よりも低下させることで、次にＬＶ画像が更新された際の移動被写体の状態の差が目立ちにくくなる。そのため、ＬＶ画像の更新停止中や更新再開時におけるＬＶ表示の視認性を改善することができる。

【0059】

●（第２実施形態）
次に、本発明の第２実施形態について説明する。本実施形態は、元画像の輝度調整に用いるＧａｉｎの値を、ＬＶ画像の連続表示フレーム数Ｎに加え、表示するＬＶ画像から得られる情報などの他の情報を考慮して決定する。

【0060】

図４（ａ）～図４（ｆ）は本実施形態にしたがってＧａｉｎの値を決定する動作に関するフローチャートである。図４（ａ）～図４（ｆ）において図３（ｂ）と同様の処理を行うステップには同じ参照数字を付してある。

【0061】

図４（ａ）は、ＬＶ画像の輝度情報を考慮してＧａｉｎの値を決定する例を示している。Ｓ３１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ４０２で制御部１０４は、連続表示するＬＶ画像（輝度補正前）の全体に関する輝度Ｙを取得する。輝度Ｙは、画像処理部１０１から露出制御用の評価値として得られる輝度情報であってよい。輝度Ｙは例えば画像全体の平均輝度とすることができる。また、輝度Ｙは画像全体の輝度ヒストグラムのような情報であってもよい。この場合、制御部１０４は、予め定められた方法で、輝度ヒストグラムからＧａｉｎ値の決定に反映させる輝度情報を生成することができる。輝度Ｙが取り得る値の範囲は０から２５５といったものでもよいし、０から１に正規化されてもよい。

【0062】

Ｓ４０３で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｎ×Ｎ×Ｂｙ×ＹとしてＧａｉｎの値を決定するものとする。Ａｎは固定係数であり、例えば、予め定められたＮの最大数に基づいて、Ａｎ×Ｎの値が０より大きく１未満の値になるようにＡｎの値を決定することができる。または、Ａｎ×Ｎの実値が１を超えた場合には１未満の最大値とするようにしてもよい。また、Ｂｙは固定係数であり、例えば、予め定められた輝度Ｙの最大値に基づいて、Ｂｙ×Ｙの値が０より大きく１以下の値になるようにＢｙの値を決定することができる。または、Ｂｙ×Ｙの実値が１を超えた場合には１とするようにしてもよい。なお、１－Ａｎ×Ｎ×Ｂｙ×ＹがＧａｉｎの下限値を下回る場合には、Ｇａｉｎを下限値とする。Ｎが大きいほど、また輝度Ｙが大きいほど、Ｇａｉｎの値は小さくなる（輝度の低下量が大きくなる）。

【0063】

Ｓ３１３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。

【0064】

図４（ｂ）は、ＬＶ画像の輝度情報を考慮してＧａｉｎの値を決定する別の例を示している。Ｓ３１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ４１２で制御部１０４は、連続表示するＬＶ画像（輝度補正前）の主被写体領域に関する輝度Ｙｔを取得する。輝度Ｙｔは、画像処理部１０１から露出制御用の評価値として得られる輝度情報であってよい。輝度Ｙｔは例えばＬＶ画像で検出された主被写体領域（顔領域や人体領域など、予め定められた特徴に合致する領域）の平均輝度とすることができる。また、輝度Ｙｔは主被写体領域の輝度ヒストグラムのような情報であってもよい。この場合、制御部１０４は、予め定められた方法で、輝度ヒストグラムからＧａｉｎ値の決定に反映させる輝度情報を生成することができる。輝度Ｙｔが取り得る値の範囲は０から２５５といったものでもよいし、０から１に正規化されてもよい。

【0065】

Ｓ４１３で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｎ×Ｎ×Ｂｔ×ＹｔとしてＧａｉｎの値を決定するものとする。Ａｎについては図４（ａ）の場合と同様である。また、Ｂｔは固定係数であり、例えば、予め定められた輝度Ｙｔの最大値に基づいて、Ｂｔ×Ｙｔの値が０より大きく１以下の値になるようにＢｔの値を決定することができる。または、Ｂｔ×Ｙｔの最大値を１とし、実値が１を超えた場合には１とするようにしてもよい。なお、１－Ａｎ×Ｎ×Ｂｔ×ＹｔがＧａｉｎの下限値を下回る場合には、Ｇａｉｎを下限値とする。Ｎが大きいほど、また輝度Ｙｔが大きいほど、Ｇａｉｎの値は小さくなる（輝度の低下量が大きくなる）。

【0066】

Ｓ３１３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。

【0067】

図４（ｃ）は、主被写体の動きを考慮してＧａｉｎの値を決定する例を示している。Ｓ３１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ４２２で制御部１０４は、連続表示するＬＶ画像（輝度補正前）の主被写体領域に関する動き量Ｖｔを取得する。ここで、動き量Ｖｔは、連続表示するＬＶ画像と、その１つ前のＬＶ画像とで検出された主被写体領域の位置変化であり、画像処理部１０１で求めることができる。そのため、制御部１０４は画像処理部１０１から主被写体の動き量Ｖｔを取得できる。

【0068】

Ｓ４２３で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｎ×Ｎ×Ｂｖ×ＶｔとしてＧａｉｎの値を決定するものとする。Ａｎについては図４（ａ）の場合と同様である。また、Ｂｖは固定係数であり、例えば、予め定められた動き量Ｖｔの最大値に基づいて、Ｂｖ×Ｖｔの値が０より大きく１以下の値になるようにＢｖの値を決定することができる。または、Ｂｖ×Ｖｔの最大値を１とし、実値が１を超えた場合には１とするようにしてもよい。なお、１－Ａｎ×Ｎ×Ｂｖ×ＶｔがＧａｉｎの下限値を下回る場合には、Ｇａｉｎを下限値とする。Ｎが大きいほど、また動き量Ｖｔが大きいほど、Ｇａｉｎの値は小さくなる（輝度の低下量が大きくなる）。

【0069】

Ｓ３１３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。

【0070】

図４（ｄ）は、静止画から生成したＬＶ画像を表示することが可能な場合における、Ｇａｉｎの値を決定する動作に関して示している。例えば、静止画撮影によってＬＶ画像の撮影が行えない場合、静止画撮影で得られた静止画からＬＶ画像を生成することが考えられる。この場合、一時記憶部１０７に格納されている静止画データから、画像処理部１０１または表示部１０２がＬＶ画像（元画像）を生成する。

【0071】

Ｓ３１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ４３２で制御部１０４は、表示するＬＶ画像の種類を判定する。具体的には、制御部１０４は、表示するＬＶ画像が静止画から生成されたものか否かを判定する。なお、（動画モードで撮像された）直近のＬＶ画像を繰り返し表示するか、それよりも後に撮影された静止画から生成したＬＶ画像を表示するかは、予め定められた条件にしたがって制御部１０４が決定することができる。制御部１０４は例えば静止画データに対する画像処理が所定割合以上完了していれば、静止画から生成したＬＶ画像を表示し、完了していなければ（動画モードで撮像された）直近のＬＶ画像を表示すると決定することができる。

【0072】

そして、制御部１０４は、Ｇａｉｎの値を決定する際に用いる係数Ｂｓの値を決定する。ここでは、制御部１０４は、静止画から生成されたＬＶ画像を表示する場合の係数Ｂｓを０＜Ｂｓ＜１の範囲で予め定めた固定値とし、静止画から生成されていない（動画モードで撮像された）ＬＶ画像を表示する場合には係数Ｂｓ＝１とする。

【0073】

Ｓ４３３で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｎ×Ｎ×ＢｓとしてＧａｉｎの値を決定するものとする。Ａｎについては図４（ａ）の場合と同様である。なお、１－Ａｎ×Ｎ×ＢｓがＧａｉｎの下限値を下回る場合には、Ｇａｉｎを下限値とする。Ｎが大きいほどＧａｉｎの値は小さくなる（輝度の低下量が大きくなる）。また、表示するＬＶ画像が静止画から生成される場合よりも、動画モードで撮影されたＬＶ画像を繰り返し表示する場合には、さらにＧａｉｎの値が小さくなる。これは、ＬＶ画像の生成に使用する静止画が、動画モードで撮影されたＬＶ画像よりも後に撮影されているためである。

【0074】

Ｓ３１３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。

【0075】

図４（ｅ）は、静止画撮影モードを考慮してＧａｉｎの値を決定する例を示している。ここでは、静止画撮影モードが、１枚撮影（単写）、低速連写、高速連写のいずれかであるものとする。Ｓ３１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。

【0076】

Ｓ４４２で制御部１０４は、設定されている静止画撮影モードを例えばＲＡＭ１１２から取得する。また、静止画撮影モードごとの係数Ｇｍは、例えばテーブルとしてＲＯＭ１１３に予め記憶されている。制御部１０４は、ＲＯＭ１１３に記憶されたテーブルから、現在の静止画撮影モードに対応するＧｍの値を取得する。係数Ｇｍは０より大きく１以下の値であり、単写を最低速の連写と見なした場合、連写速度の低下に対し、係数Ｇｍの値は変わらないか小さくなるように定められている。ここでは一例として、１枚撮影では係数Ｇｍ＝０．４、低速連写では係数Ｇｍ＝０．６、高速連写では係数Ｇｍ＝０．８であるものとする。

【0077】

Ｓ４４３で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｎ×Ｎ×ＧｍとしてＧａｉｎの値を決定するものとする。Ａｎについては図４（ａ）の場合と同様である。なお、１－Ａｎ×Ｎ×ＧｍがＧａｉｎの下限値を下回る場合には、Ｇａｉｎを下限値とする。Ｎが大きいほど、また連写速度が高いほど、Ｇａｉｎの値は小さくなる（輝度の低下量が大きくなる）。

【0078】

Ｓ３１３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。

【0079】

図４（ｆ）は、デジタルカメラ１の動きを考慮してＧａｉｎの値を決定する例を示している。図６は、デジタルカメラ１の動きを測定する動き測定部１１４をデジタルカメラ１に設けた構成を示すブロック図であり、図１と同じ構成には同じ参照数字を付してある。
動き測定部１１４はデジタルカメラ１の動きを示す信号を制御部１０４に出力する。動き測定部１１４は例えばデジタルカメラ１の動きとして角速度の大きさを測定するジャイロセンサであってよい。なお、動き測定部１１４は手ブレ補正用に設けられた動きセンサであってもよい。

【0080】

Ｓ３１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ４５２で制御部１０４は、デジタルカメラ１の動きとして角速度Ωｍ［ｄｅｇ／ｓｅｃ］を示す信号を動き測定部１１４から取得する。角速度Ωｍの更新は、ＬＶ画像の更新のタイミングで実行される。なお、動き測定部１１４が複数の回転軸について角速度を出力する場合、制御部１０４は複数の角速度から所定の方法で１つの代表角速度を求める。例えば代表角速度は複数の角速度のうち最大のものであってもよいし、複数の角速度の平均値や合計値であってもよい。動き測定部１１４が複数の回転軸について角速度を出力する場合、以下における角速度Ωｍは代表角速度を意味するものとする。

【0081】

Ｓ４５３で制御部１０４は、元画像に適用するＧａｉｎの値を決定する。ここでは、制御部１０４が、Ｇａｉｎ=１－Ａｎ×Ｎ×Ｂｐ×ΩｍとしてＧａｉｎの値を決定するものとする。Ａｎについては図４（ａ）の場合と同様である。また、Ｂｐは固定係数であり、例えば、予め定められた角速度Ωｍのとりうる値の範囲において、Ｂｐ×Ωｍの値が０より大きく１以下の値になるようにＢｐの値を決定することができる。あるいは、Ｂｐ×Ωｍが上限値１を超える場合には値を１に補正（クリップ）してもよい。なお、１－Ａｎ×Ｎ×Ｂｐ×ΩｍがＧａｉｎの下限値を下回る場合には、Ｇａｉｎを下限値とする。Ｎが大きいほど、あるいは角速度Ωｍが大きいほど、Ｇａｉｎの値は小さくなる（輝度の低下量が大きくなる）。

【0082】

Ｓ３１３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。
なお、ここでは動き測定部１１４を用いてデジタルカメラ１の動きを測定するものとしたが、ＬＶ画像からデジタルカメラ１の動きを測定してもよい。例えば、Ｓ４１２で主被写体領域の動きを検出するのと同様にして画像全体の動きを検出し、デジタルカメラ１の動きとして用いてもよい。

【0083】

また、ここでは第１実施形態の図３（ｂ）に示した動作について、他の情報を考慮してＧａｉｎの値を決定する場合を図４（ａ）～（ｆ）で説明した。しかし、本実施形態の構成は、図３（ｃ）および図３（ｄ）の構成と組み合わせても実施可能である。

【0084】

本実施形態によれば、第１実施形態の効果に加え、他の情報を考慮してＧａｉｎの値を決定することで、よりきめ細かな輝度調整を行うことができる。そのため、視認性の向上により効果的な輝度調整を実現することができる。

【0085】

●（第３実施形態）
次に、本発明の第３実施形態について説明する。本実施形態は、連続表示フレーム数が増加するにつれて輝度の低下量を変化させる構成であり、第１および第２実施形態の構成（連続表示中のＬＶ画像の輝度が固定である構成）と組み合わせることができる。ここでは、第１実施形態の図３（ｂ）と組み合わせた構成について説明する。図５において図３（ｂ）と同様の処理を行うステップには同じ参照数字を付してある。

【0086】

Ｓ３１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。
Ｓ５０３で制御部１０４は、ループ回数Ｋを１に初期化する。

【0087】

Ｓ５０４で制御部１０４は、Ｇａｉｎの値を求める。ここでは、制御部１０４が、Ｇａｉｎ=１－Ｃｋ×ＫとしてＧａｉｎの値を決定するものとする。Ｃｋは固定係数であり、例えば、予め定められたＮの最大数に基づいて、Ｃｋ×Ｎの値が０より大きく１未満の値になるようにＣｋの値を決定することができる。または、Ｃｋ×Ｋの実値が１を超えた場合には１未満の最大値とするようにしてもよい。１－Ｃｋ×ＫがＧａｉｎの下限値を下回る場合には、Ｇａｉｎを下限値とする。Ｋが大きいほど、Ｇａｉｎの値は小さくなる（輝度の低下量が大きくなる）。したがって、同一のＬＶ画像が繰り返し表示される期間では、フレームごとに表示輝度が低下する。

【0088】

Ｓ３１３で制御部１０４は、図３（ａ）で説明したように、連続表示するＬＶ画像を輝度調整する。
Ｓ５０６で制御部１０４は、ＫがＮに等しくなったか否かを判定し、等しくなったと判定されれば処理を終了し、判定されなければ処理をＳ５０７に進める。Ｓ５０７で制御部１０４は、Ｋを１増加させて、処理をＳ５０４に戻す。このように、ＬＶ画像の繰り返し表示の回数がＳ３１１で取得したＮになるまで、１フレームごとにＬＶ画像の輝度が低減される。

【0089】

なお、ここでは第１実施形態の図３（ｂ）に示した動作について、連続表示回数の増加にしたがってＧａｉｎの値を変化させる構成について説明した。しかし、本実施形態の構成は、図３（ｃ）および図３（ｄ）の構成と組み合わせても実施可能である。この場合、期間Ｔｃや露光時間Ｔｓが複数のフレームにわたる場合、フレームごとに低下量を調整すれば良い。

【0090】

本実施形態によれば、第１および第２実施形態の効果に加え、同じＬＶ画像が繰り返し表示されるごとに徐々にＧａｉｎの値を変化（低減）させることで、よりきめ細かな輝度調整を行うことができる。そのため、視認性の向上により効果的な輝度調整を実現することができる。

【0091】

●（第４実施形態）
次に、本発明の第４実施形態について説明する。本実施形態は、連続表示するＬＶ画像を輝度を、デジタルカメラ１の動きを考慮して制御する構成であり、図６に示した、動き測定部１１４を有する構成のデジタルカメラ１において実施可能である。本実施形態では、デジタルカメラ１の動きとして、図４（ｆ）（第２実施形態）で説明した角速度Ωｍ［ｄｅｇ／ｓｅｃ］を用いるものとする。

【0092】

図７は、本実施形態における、ＬＶ画像の輝度調整動作に関するフローチャートである。なお、図７においてＳ６０７で実行する画像輝度調整処理として、制御部１０４は図３（ａ）もしくは図５のフローチャートに示した処理のいずれかを実行することができる。この際、制御部１０４は、図３（ａ）とＳ３０３と図５のＳ３１３の動作として、図４（ｆ）のフローチャートに示した動作を実行する。

【0093】

本実施形態は、基準角速度Ωｐ［ｄｅｇ／ｓｅｃ］を設定し、動き測定部１１４から基準値（閾値）を超える角速度Ωｍが所定の一定時間継続して得られたことに応答してＧａｉｎの値を決定する。基準角速度Ωｐは０以上とし、ここでは一例として５０［ｄｅｇ／ｓｅｃ］であるものとする。基準角速度Ωｐは例えばＲＯＭ１１３に記憶しておくことができる。

【0094】

Ｓ６０１で制御部１０４は、タイマの動作を開始させる。タイマは制御部１０４が内蔵するものであってもよいし、制御部１０４の外部に存在するものであってもよい。タイマは例えばデジタルカメラ１が用いるクロック信号のパルス数をカウントするカウンタであってよい。また、実際にはシステムクロックから現在の時刻を取得してＲＡＭ１１２に記憶する動作であってもよい。

【0095】

Ｓ６０２で制御部１０４は、動き測定部１１４から角速度Ωｍを取得する。角速度Ωｍの更新は、ＬＶ画像の更新のタイミングで実行される。
Ｓ６０３で制御部１０４は、取得した角速度Ωｍが基準角速度Ωｐ（閾値）より大きいか否かを判定する。制御部１０４は、角速度Ωｍが基準角速度Ωｐより大きいと判定されればＳ６０５を、角速度Ωｍが基準角速度Ωｐより大きいと判定されなければＳ６０４を実行する。

【0096】

Ｓ６０４で制御部１０４は、タイマを初期化する。これにより、角速度Ωｍが基準角速度Ωｐより大きい期間の計測が終了する。その後、制御部１０４はＳ６０１を再度実行する。なお、タイマがフリーランカウンタの場合、制御部１０４はＳ６０４でカウンタの値を初期値（例えば０）にし、Ｓ６０２から再度実行してもよい。

【0097】

Ｓ６０５で制御部１０４はタイマによる計測時間Ｔを取得する。制御部１０４５は、タイマの種類により、カウント値、経過時間などを計測時間Ｔとして取得することができる。

【0098】

Ｓ６０６で制御部１０４は、計測時間Ｔが予め定められた基準時間Ｔ３より大きいか否かを判定する。制御部１０４は、計測時間Ｔが予め定められた基準時間Ｔ３より大きいと判定されればＳ６０７を、計測時間Ｔが予め定められた基準時間Ｔ３より大きいと判定されなければＳ６０２を実行する。基準時間Ｔ３は０以上とし、ここでは一例として５００［ｍｓｅｃ］であるものとする。基準時間Ｔ３は例えばＲＯＭ１１３に記憶しておくことができる。

【0099】

このように、本実施形態では、静止画の撮影中にデジタルカメラ１の一定以上の動きが一定時間継続したときに、ＬＶ画像の輝度を調整する。より具体的には、デジタルカメラ１がパンニングしながら静止画撮影していると考えられる場合に、ＬＶ画像の輝度を調整する。一方、パンニングしていない、通常の静止画撮影時にはＬＶ画像の輝度を調整しない。これにより、動体の撮影中にのみ効果的な輝度調整を実施し、視認性の向上を実現することができる。

【0100】

なお、一般的にパンニングは一定方向への動きであることを考慮して、角速度の大きさに加え、動きの主方向が逆転しないことをタイマによる時間計測を継続する条件として追加してもよい。

【0101】

●（第５実施形態）
次に、本発明の第５実施形態について説明する。本実施形態は第４実施形態における基準角速度Ωｐにヒステリシスを持たせたものである。図８は、本実施形態における、ＬＶ画像の輝度調整動作に関するフローチャートであり、図７と同様の処理を行うステップには同じ参照数字を付してある。

【0102】

本実施形態では２つの基準角速度Ωｑ１（第１の閾値）および基準角速度Ωｑ２（第２の閾値）を用いる。基準角速度Ωｑ１は基準角速度Ωｑ２より大きい。なお、基準角速度Ωｑ１および基準角速度Ωｑ２は予めＲＯＭ１１３に記憶しておくことができる。

【0103】

制御部１０４はＳ６０２で角速度Ωｍを取得したのち、Ｓ７０３を実行する。
Ｓ７０３で制御部１０４は、取得した角速度Ωｍが基準角速度Ωｑ１より大きいか否かを判定する。制御部１０４は、角速度Ωｍが基準角速度Ωｑ１より大きいと判定されればＳ６０５を、角速度Ωｍが基準角速度Ωｑ１より大きいと判定されなければＳ６０４を実行する。

【0104】

制御部１０４はＳ６０５でタイマによる計測時間Ｔを取得し、Ｓ６０６で計測時間Ｔが基準時間Ｔ３より大きいか否かを判定する。制御部１０４は、計測時間Ｔが基準時間Ｔ３より大きいと判定されればＳ７０７を、計測時間Ｔが基準時間Ｔ３より大きいと判定されなければＳ６０１を実行する。

【0105】

Ｓ７０７で制御部１０４は、角速度Ωｍが基準角速度Ωｑ２より大きいか否かを判定する。制御部１０４は、角速度Ωｍが基準角速度Ωｑ２より大きいと判定されればＳ７１１を、角速度Ωｍが基準角速度Ωｑ２より大きいと判定されなければＳ７０９を実行する。

【0106】

Ｓ７０９およびＳ７１０で制御部１０４は、Ｓ６０５およびＳ６０６と同様にタイマによる計測時間Ｔが基準時間Ｔ３より大きいか否かを判定する。制御部１０４は、計測時間Ｔが基準時間Ｔ３より大きいと判定されればＳ６０１を、計測時間Ｔが基準時間Ｔ３より大きいと判定されなければＳ６０７を実行する。

【0107】

一方、Ｓ７１１で制御部１０４はＳ６０４と同様にタイマを初期化し、その後Ｓ６０７を実行する。
Ｓ６０７でＬＶ画像の輝度を調整した後、制御部１０４はＳ７１２を実行し、Ｓ６０２と同様に動き測定部１１４から角速度Ωｍを取得する。その後、制御部１０４はＳ７０７を実行する。

【0108】

基準角速度が１つの場合、デジタルカメラ１の動きが基準角速度付近で遷移した場合、輝度調整されたＬＶ画像と輝度調整されないＬＶ画像が頻繁に入れ替わることが起こりうる。この場合、ＬＶ画像の視認性が低下する恐れがある。

【0109】

本実施形態では、大きさの異なる２つの基準角速度を用い、ＬＶ画像の輝度調整を行う条件を満たした場合には、より小さな基準角速度を用いて輝度調整の継続要否を判定するようにした。そのため、輝度調整が一旦行われた後、基準角速度が１つの場合よりも輝度調整が中止されづらくなり、デジタルカメラ１の動きが最初に用いる（大きい方の）基準角速度付近で遷移した場合における視認性の低下を抑制することができる。

【0110】

●（第６実施形態）
次に、本発明の第６実施形態について説明する。本実施形態は、図１に示したデジタルカメラ１で実施可能であるため、デジタルカメラ１の構成に関する説明は省略する。図９は、本実施形態におけるＬＶ画像の輝度調整動作に関するフローチャートである。第６～第８実施形態は、静止画撮影によってＬＶ画像を更新できない期間に繰り返し表示されるＬＶ画像に特定色の画像を合成することにより、ＬＶ画像の明るさおよび／または色合いを調整する。特定色が無彩色の場合には、ＬＶ画像の輝度を調整することと実質的に等しい。

【0111】

図９（ａ）に示すフローチャートは、ＬＶ表示を更新できるか否かによってＬＶ画像の明るさおよび／または色合い調整を行う場合の動作を示している。制御部１０４は、静止画の撮影動作の開始とともにこの動作を実行する。図９（ａ）において、第１実施形態と同一の動作を行うステップについては図３（ａ）と同じ参照番号を付してある。

【0112】

Ｓ３０１で制御部１０４は、ＬＶ画像の更新が可能か否かを判定し、更新可能と判定されればＳ３０２を、判定されなければＳ９０３へ、処理を進める。例えば制御部１０４は表示Ｖ同期のタイミングで、現在表示中のＬＶ画像より後に撮影されたＬＶ画像について画像処理部１０１における画像処理もしくは表示部１０２における加工処理が予め定めた段階まで完了していれば、ＬＶ画像の更新が可能と判定できる。

【0113】

Ｓ３０２で制御部１０４は、新たなＬＶ画像を表示部１０２を通じて表示デバイス１０３に表示させる。

【0114】

Ｓ９０３で制御部１０４は、連続表示するＬＶ画像の明るさおよび／または色合いを調整する。本実施形態では連続表示するＬＶ画像（元画像）データと、特定の色（合成色Ｉとする）を有する調整画像データとを合成した合成ＬＶ画像データを表示することにより、連続表示されるＬＶ画像の明るさおよび／または色合いを調整する。調整画像データは、合成色Ｉの画素のみから構成される、ＬＶ画像データと同じ解像度（画素数）の画像であってよい。

【0115】

合成ＬＶ画像データを生成する際の調整画像データの合成比率α（０＜α＜１）は、固定値であってもよいし、何らかの条件に基づいて動的に決定される値であってもよい。同様に、合成色Ｉは固定（例えば黒色）であっても、何らかの条件に基づいて動的に決定されてもよい。合成色Ｉは無彩色であっても有彩色であってもよい。

【0116】

Ｓ９０４で制御部１０４は、次の表示Ｖ同期から明るさおよび／または色合いが調整されたＬＶ画像が表示されるように、表示部１０２を制御する。そして、制御部１０４は処理をＳ３０１に戻し、ＬＶ画像の更新が可能と判定されるまで、Ｓ９０３およびＳ９０４の処理を繰り返し実行する。

【0117】

なお、図９（ａ）の例では、合成比率αは同一元画像を連続表示する回数（連続表示フレーム数）によらず一定である。一方、図９（ｂ）～図９（ｄ）は、合成比率αおよび合成色Ｉを、動的に決定する例を示している。制御部１０４は、図９（ｂ）～図９（ｄ）のいずれかの動作を、図９（ａ）のＳ９０３の動作に代えて実行することができる。

【0118】

図９（ｂ）のフローチャートは、合成比率αおよび合成色Ｉを、ＬＶ表示が更新されないフレーム数に応じて決定する例を示している。
Ｓ９１１で制御部１０４は、静止画撮影によってＬＶ画像の更新ができず、直近のＬＶ画像（元画像）を連続して表示する回数（フレーム数）Ｎを取得する。制御部１０４は、例えば、撮影前に決定された静止画の露出時間と、静止画の画像処理に要するであろう時間などに基づいて、回数Ｎ（以下、連続表示フレーム数Ｎという）を求めることができるが、他の方法を用いて取得してもよい。

【0119】

Ｓ９１２で制御部１０４は、合成色Ｉと、合成色Ｉの画像の合成比率αとを決定する。ここでは、制御部１０４は、合成色Ｉ＝Ｙｎ×（１－Ａｎ×Ｎ）、合成比率α＝Ａｎ×Ｎとして決定するものとする。Ａｎは固定係数であり、合成比率α＝Ａｎ×Ｎが０より大きく、１以下となるようなＡｎを用いる。例えば、Ｎが最大値のときに特定の合成比率α（≦１）となるようにＡｎを決定することができる。あるいは、Ａｎ×Ｎが１を超える場合にはＡｎ×Ｎ＝１としてもよい。

【0120】

ここでは、合成色Ｉについても合成比率α（＝Ａｎ×Ｎ）に応じた無彩色としている、黒色などの固定色としてもよい。Ｙｎは所定の基準輝度値である。合成色Ｉは、Ｎが大きいほど基準輝度値Ｙｎに近い輝度を有する無彩色となる。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を連続表示フレーム数Ｎに基づいて決定するものとしたが、いずれか一方を固定としてもよい。

【0121】

Ｓ９１３で制御部１０４は、Ｓ９１２で決定した合成色Ｉと合成比率αとを画像処理部１０１または表示部１０２に通知する。画像処理部１０１または表示部１０２は、直近に用いたＬＶ画像データ（元画像データ）に対して合成色Ｉを有する画像を合成比率αに従って合成し、更新用のＬＶ画像データを生成する。より具体的には、画像処理部１０１または表示部１０２は、
更新用の画像データ＝元画像データ×（１－α）＋合成色Ｉの画像×α
として更新用の画像データを生成する。

【0122】

例えば、合成色Ｉが黒色の場合、元画像データを（１－α）、黒色画像データをαの比率で合成するため、元画像を全体的に暗くした画像のデータが更新用の画像データとして生成され、また表示される。つまり、合成色Ｉが黒色の場合、連続表示フレーム数Ｎが大きいほど、連続して表示されるＬＶ画像が暗く表示される。また合成色Ｉがフレーム数Ｎに基づく場合、連続して表示されるＬＶ画像は、元画像よりも合成色Ｉの画像に近い色合いで表示される。つまり、ＬＶ画像の連続表示フレーム数Ｎが大きいほど、ＬＶ画像の色合いは合成色Ｉに近くなる。

【0123】

図９（ｃ）のフローチャートは、合成比率αおよび合成色Ｉを、ＬＶ表示が更新されない期間の長さに応じて決定する例を示している。Ｓ９２１で、制御部１０４は、静止画撮影によってＬＶ画像の更新ができず、直近のＬＶ画像が連続表示される期間Ｔｃ［ｍｓｅｃ］を取得する。制御部１０４は、例えば図９（ａ）のＳ９１１で説明した連続表示フレーム数Ｎにフレーム周期を乗じることにより期間Ｔｃを取得することができるが、他の方法で取得してもよい。

【0124】

Ｓ９２２で制御部１０４は、合成色Ｉと、合成色Ｉの画像の合成比率αとを決定する。ここでは、制御部１０４は、合成色Ｉ＝Ｙｃ×（１－Ａｃ×Ｔｃ）、合成比率α＝Ａｃ×Ｔｃとして決定するものとする。Ａｃは固定係数であり、合成比率α＝Ａｃ×Ｔｃが０より大きく、１以下となるようなＡｃを用いる。例えば、Ｔｃが最大値のときに特定の合成比率α（≦１）となるようにＡｃを決定することができる。あるいは、Ａｃ×Ｔｃが１を超える場合にはＡｃ×Ｔｃ＝１としてもよい。

【0125】

ここでは、合成色Ｉについても合成比率α（＝Ａｃ×Ｔｃ）に応じた無彩色としている、黒色などの固定色としてもよい。Ｙｃは所定の基準輝度値である。合成色Ｉは、Ｔｃが大きいほど基準輝度値Ｙｃに近い輝度を有する無彩色となる。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を期間Ｔｃに基づいて決定するものとしたが、いずれか一方を固定としてもよい。

【0126】

Ｓ９１３における動作は先に説明した通りである。例えば合成色Ｉが黒色の場合、期間Ｔｃが長いほど、連続して表示されるＬＶ画像が暗く表示される。また合成色Ｉが期間Ｔｃに基づく場合、連続して表示されるＬＶ画像は、元画像よりも合成色Ｉの画像に近い色合いで表示される。つまり、直近のＬＶ画像が連続表示される期間（あるいはＬＶ画像が更新されない期間）Ｔｃが長いほど、ＬＶ画像の色合いは合成色Ｉに近くなる。

【0127】

図９（ｄ）のフローチャートは、合成比率αおよび合成色Ｉを、静止画の露光時間Ｔｓの長さに応じて決定する例を示している。Ｓ９３１で、制御部１０４は、静止画撮影の露光時間Ｔｓ［ｓｅｃ］を取得する。制御部１０４は、例えば静止画撮影の開始前に決定された露出条件に基づいて露光時間Ｔｓを取得することができるが、他の方法で取得してもよい。

【0128】

Ｓ９３２で制御部１０４は、合成色Ｉと、合成色Ｉの画像の合成比率αとを決定する。ここでは、制御部１０４は、合成色Ｉ＝Ｙｓ×（１－Ａｓ×Ｔｓ）、合成比率α＝Ａｓ×Ｔｓとして決定するものとする。Ａｓは固定係数であり、合成比率α＝Ａｓ×Ｔｓが０より大きく、１以下となるようなＡｓを用いる。例えば、Ｔｓが最大値のときに特定の合成比率α（≦１）となるようにＡｓを決定することができる。あるいは、Ａｓ×Ｔｓが１を超える場合にはＡｓ×Ｔｓ＝１としてもよい。

【0129】

ここでは、合成色Ｉについても合成比率α（＝Ａｓ×Ｔｓ）に応じた無彩色としている、黒色などの固定色としてもよい。Ｙｓは所定の基準輝度値である。合成色Ｉは、Ｔｓが大きいほど基準輝度値Ｙｓに近い輝度を有する無彩色となる。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を露光時間Ｔｓに基づいて決定するものとしたが、いずれか一方を固定としてもよい。

【0130】

Ｓ９１３における動作は先に説明した通りである。例えば合成色Ｉが黒色の場合、露光時間Ｔｓが長いほど、連続して表示されるＬＶ画像が暗く表示される。また合成色Ｉが露光時間Ｔｓに基づく場合、連続して表示されるＬＶ画像は、元画像よりも合成色Ｉの画像に近い色合いで表示される。つまり、静止画撮影の露光時間Ｔｓが長いほど、ＬＶ画像の色合いは合成色Ｉに近くなる。

【0131】

図９（ｂ）～図９（ｄ）のフローチャートに示した動作は、図９（ａ）のＳ９０３に変えて実行するものとして説明した。この場合、表示Ｖ同期ごとにＬＶ画像の調整が実行される。一方、図９（ｂ）～図９（ｄ）のフローチャートに示した動作を、静止画撮影指示に応じて実行してもよい。この場合、ＬＶ画像が更新可能な場合に対応するため、合成比率αの下限値は０とする。

【0132】

以上、図９で説明したように連続ＬＶ表示するフレーム画像の明るさおよび／または色合いを調整することで、被写体の動きが不自然になることも、完全なブラックアウト表示も回避できる。そのため、静止画撮影によってＬＶ画像が更新できない期間において、視認性のよい滑らかなライブビュー表示が可能となる。

【0133】

●（第７実施形態）
次に、本発明の第７実施形態について説明する。本実施形態は、ＬＶ画像の連続表示フレーム数Ｎに加え、表示するＬＶ画像から得られる情報などの他の情報を考慮して合成色Ｉと、合成色Ｉの画像の合成比率αとを決定する。

【0134】

図１０（ａ）～図１０（ｆ）は本実施形態にしたがって合成色Ｉと合成比率αとを決定する動作に関するフローチャートである。ここでは一例として、連続表示フレーム数Ｎと他の情報とに基づいて合成色Ｉと合成比率αとを決定する構成について説明する。なお、図１０（ａ）～図１０（ｆ）において図９（ｂ）と同様の処理を行うステップには同じ参照数字を付してある。

【0135】

図１０（ａ）～図１０（ｆ）に示す動作は、図９（ｂ）に示した動作と同様に、図９（ａ）のＳ９０３に代えて実行することができる。本実施形態に従って決定された合成色Ｉと合成比率αに基づく合成ＬＶ画像の生成は、画像処理部１０１または表示部１０２のいずれで行ってもよい。

【0136】

図１０（ａ）は、ＬＶ画像の輝度情報を考慮して合成色Ｉと合成比率αとを決定する例を示している。Ｓ９１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ１００２で制御部１０４は、例えば第２実施形態におけるＳ４０２と同様にして、連続表示するＬＶ画像（輝度補正前）の全体に関する輝度Ｙを取得する。

【0137】

Ｓ１００３で制御部１０４は、元画像に適用する合成色Ｉと合成比率αとを決定する。ここでは、制御部１０４が、合成色Ｉ＝Ｙ×（１－Ａｎ×Ｎ）、合成比率α＝Ａｎ×Ｎ×Ｂｙ×Ｙとして合成色Ｉと合成比率αとを決定するものとする。Ａｎは固定係数であり、例えば、予め定められたＮの最大数に基づいて、Ａｎ×Ｎの値が０より大きく１以下の値になるようにＡｎの値を決定することができる。または、Ａｎ×Ｎの実値が１を超えた場合には１とするようにしてもよい。また、Ｂｙは固定係数であり、例えば、予め定められた輝度Ｙの最大値に基づいて、Ｂｙ×Ｙの値が０より大きく１以下の値になるようにＢｙの値を決定することができる。または、Ｂｙ×Ｙの実値が１を超えた場合には１とするようにしてもよい。

【0138】

この場合、合成比率αは輝度Ｙが高いほど、またＮが大きいほど大きくなる。また、合成色Ｉは、輝度Ｙが高いほど明るく、かつ連続表示フレーム数Ｎが大きいほど輝度Ｙよりも暗い無彩色となる。なお、ここでは合成色Ｉを輝度Ｙと連続表示フレーム数Ｎに応じた無彩色としているが、黒色などの固定色としてもよい。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を輝度Ｙに基づいて決定するものとしたが、いずれか一方は輝度Ｙに依存しない（連続表示フレーム数Ｎのみに依存する）ようにしてもよい。

【0139】

Ｓ９１３で制御部１０４は、Ｓ９１２で決定した合成色Ｉと合成比率αとを画像処理部１０１または表示部１０２に通知する。画像処理部１０１または表示部１０２は、直近に用いたＬＶ画像データ（元画像データ）に対して合成色Ｉを有する画像を合成比率αに従って合成し、更新用のＬＶ画像データを生成する。より具体的には、画像処理部１０１または表示部１０２は、
更新用の画像データ＝元画像データ×（１－α）＋合成色Ｉの画像×α
として更新用の画像データを生成する。

【0140】

更新用の画像データは、元画像データよりも合成色Ｉの画像データに近い画像データとなる。合成比率αは輝度Ｙが高いほど大きくなるため、元画像の輝度Ｙが大きいほど、繰り返し表示されるＬＶ画像は合成色Ｉの無彩色画像に近い画像となる。

【0141】

図１０（ｂ）は、ＬＶ画像の輝度情報を考慮して合成色Ｉと合成比率αとを決定する別の例を示している。Ｓ９１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ１０１２で制御部１０４は、例えば第２実施形態におけるＳ４１２と同様にして、連続表示するＬＶ画像（輝度補正前）の主被写体領域に関する輝度Ｙｔを取得する。

【0142】

Ｓ１０１３で制御部１０４は、元画像に適用する合成色Ｉと合成比率αとを決定する。ここでは、制御部１０４が、合成色Ｉ＝Ｙｔ×（１－Ａｎ×Ｎ）、合成比率α＝Ａｎ×Ｎ×Ｂｔ×Ｙｔとして合成色Ｉと合成比率αとを決定するものとする。Ａｎについては図１０（ａ）の場合と同様である。また、Ｂｔは固定係数であり、例えば、予め定められた輝度Ｙｔの最大値に基づいて、Ｂｔ×Ｙｔの値が０より大きく１以下の値になるようにＢｔの値を決定することができる。または、Ｂｔ×Ｙｔの最大値を１とし、実値が１を超えた場合には１とするようにしてもよい。

【0143】

この場合、合成比率αは輝度Ｙｔが高いほど、またＮが大きいほど大きくなる。また、合成色Ｉは、輝度Ｙｔが高いほど明るく、かつ連続表示フレーム数Ｎが大きいほど輝度Ｙｔよりも暗い無彩色となる。なお、ここでは合成色Ｉを輝度Ｙｔと連続表示フレーム数Ｎに応じた無彩色としているが、黒色などの固定色としてもよい。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を輝度Ｙｔに基づいて決定するものとしたが、いずれか一方は輝度Ｙｔに依存しない（連続表示フレーム数Ｎのみに依存する）ようにしてもよい。

【0144】

Ｓ９１３で制御部１０４は、Ｓ９１２で決定した合成色Ｉと合成比率αとを画像処理部１０１または表示部１０２に通知する。画像処理部１０１または表示部１０２は、上述したようにして更新用の画像データを生成する。

【0145】

更新用の画像データは、元画像データよりも合成色Ｉの画像データに近い画像データとなる。合成比率αは輝度Ｙｔが高いほど大きくなるため、元画像の主被写体領域の輝度Ｙｔが大きいほど、繰り返し表示されるＬＶ画像は合成色Ｉの無彩色画像に近い画像となる。

【0146】

図１０（ｃ）は、主被写体の動きを考慮して合成色Ｉと合成比率αとを決定する例を示している。Ｓ９１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ１０２２で制御部１０４は、例えば第２実施形態におけるＳ４２２と同様にして、連続表示するＬＶ画像（明るさおよび／または色合いの調整前）の主被写体領域に関する動き量Ｖｔを取得する。

【0147】

Ｓ１０２３で制御部１０４は、元画像に適用する合成色Ｉと合成比率αとを決定する。ここでは、制御部１０４が、合成色Ｉ=Ｙｖ（１－Ａｎ×Ｎ×Ｂｖ×Ｖｔ）、合成比率α＝Ａｎ×Ｎ×Ｂｖ×Ｖｔとして合成色Ｉと合成比率αとを決定するものとする。ここで、Ｙｖは予め定められた基準輝度値である。Ａｎについては図１０（ａ）の場合と同様である。また、Ｂｖは固定係数であり、例えば、予め定められた動き量Ｖｔの最大値に基づいて、Ｂｖ×Ｖｔの値が０より大きく１以下の値になるようにＢｖの値を決定することができる。または、Ｂｖ×Ｖｔの最大値を１とし、実値が１を超えた場合には１とするようにしてもよい。

【0148】

この場合、合成比率αは動き量Ｖｔが大きいほど、またＮが大きいほど大きくなる。また、合成色Ｉは、動き量Ｖｔが大きいほど暗く、かつ連続表示フレーム数Ｎが大きいほど輝度Ｙｖよりも暗い無彩色となる。なお、ここでは合成色Ｉを動き量Ｖｔと連続表示フレーム数Ｎに応じた無彩色としているが、黒色などの固定色としてもよい。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を主被写体領域に関する動き量Ｖｔに基づいて決定するものとしたが、いずれか一方は動き量Ｖｔに依存しない（連続表示フレーム数Ｎのみに依存する）ようにしてもよい。

【0149】

Ｓ９１３で制御部１０４は、Ｓ９１２で決定した合成色Ｉと合成比率αとを画像処理部１０１または表示部１０２に通知する。画像処理部１０１または表示部１０２は、上述したようにして更新用の画像データを生成する。

【0150】

更新用の画像データは、元画像データよりも合成色Ｉの画像データに近い画像データとなる。合成比率αは主被写体領域に関する動き量Ｖｔが大きいほど大きくなるため、元画像の主被写体領域に関する動き量Ｖｔが大きいほど、繰り返し表示されるＬＶ画像は合成色Ｉの無彩色画像に近い画像となる。

【0151】

図１０（ｄ）は、静止画から生成したＬＶ画像を表示することが可能な場合における、合成色Ｉと合成比率αとを決定する例を示している。例えば、静止画撮影によってＬＶ画像の撮影が行えない場合、静止画撮影で得られた静止画からＬＶ画像を生成することが考えられる。この場合、一時記憶部１０７に格納されている静止画データから、画像処理部１０１または表示部１０２がＬＶ画像（元画像）を生成する。

【0152】

Ｓ９１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。そして、Ｓ１０３２で制御部１０４は、表示するＬＶ画像の種類を判定する。具体的には、制御部１０４は、第２実施形態のＳ４３２と同様にして、表示するＬＶ画像が静止画から生成されたものか否かを判定する。

【0153】

そして、制御部１０４は、合成色Ｉと合成比率αとを決定する際に用いる係数Ｂｓの値を決定する。ここでは、制御部１０４は、静止画から生成されたＬＶ画像を表示する場合の係数Ｂｓを０＜Ｂｓ＜１の範囲で予め定めた固定値とし、静止画から生成されていない（動画モードで撮像された）ＬＶ画像を表示する場合には係数Ｂｓ＝１とする。

【0154】

Ｓ１０３３で制御部１０４は、元画像に適用する合成色Ｉと合成比率αとを決定する。ここでは、制御部１０４が、合成色Ｉ=Ｙｂｓ（１－Ａｎ×Ｎ×Ｂｓ）、合成比率α＝Ａｎ×Ｎ×Ｂｓとして合成色Ｉと合成比率αとを決定するものとする。ここで、Ｙｂｓは予め定められた基準輝度値である。Ａｎについては図１０（ａ）の場合と同様である。

【0155】

この場合、合成比率αは表示するＬＶ画像が静止画から生成される場合よりも、動画モードで撮影されたＬＶ画像を繰り返し表示する場合の方が大きくなる。また、表示するＬＶ画像が静止画から生成される場合よりも、動画モードで撮影されたＬＶ画像を繰り返し表示する場合には、合成色Ｉがより暗い無彩色となる。これは、ＬＶ画像の生成に使用する静止画が、動画モードで撮影されたＬＶ画像よりも後に撮影されているためである。なお、ここでは合成色Ｉを基準輝度値Ｙｂｓに基づく無彩色としているが、黒色などの固定色としてもよい。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を、表示するＬＶ画像が静止画から生成されたか動画から生成されたかに応じた係数Ｂｓに基づいて決定するものとしたが、いずれか一方は係数Ｂｓに依存しない（連続表示フレーム数Ｎのみに依存する）ようにしてもよい。

【0156】

Ｓ９１３で制御部１０４は、Ｓ９１２で決定した合成色Ｉと合成比率αとを画像処理部１０１または表示部１０２に通知する。画像処理部１０１または表示部１０２は、上述したようにして更新用の画像データを生成する。

【0157】

更新用の画像データは、元画像データよりも合成色Ｉの画像データに近い画像データとなる。また、合成比率αはＬＶ画像が動画から生成される場合の方が静止画から生成される場合よりも大きくなる。そのため、ＬＶ画像が動画から生成される場合の方が静止画から生成される場合よりも繰り返し表示されるＬＶ画像は合成色Ｉの無彩色画像に近い画像となる。

【0158】

図１０（ｅ）は、静止画撮影モードを考慮して合成色Ｉと合成比率αとを決定する例を示している。ここでは、静止画撮影モードが、１枚撮影（単写）、低速連写、高速連写のいずれかであるものとする。Ｓ９１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。

【0159】

Ｓ１０４２で制御部１０４は、設定されている静止画撮影モードを例えばＲＡＭ１１２から取得する。また、静止画撮影モードごとの係数Ｇｍは、例えばテーブルとしてＲＯＭ１１３に予め記憶されている。ここでは第２実施形態と同様に、１枚撮影では係数Ｇｍ＝０．４、低速連写では係数Ｇｍ＝０．６、高速連写では係数Ｇｍ＝０．８であるものとする。

【0160】

Ｓ１０４３で制御部１０４は、元画像に適用する合成色Ｉと合成比率αとを決定する。ここでは、制御部１０４が、合成色Ｉ=Ｙｍ（１－Ａｎ×Ｎ×Ｇｍ）、合成比率α＝Ａｎ×Ｎ×Ｇｍとして合成色Ｉと合成比率αとを決定するものとする。ここで、Ｙｍは予め定められた基準輝度値である。Ａｎについては図１０（ａ）の場合と同様である。

【0161】

この場合、合成比率αは係数Ｇｍが大きいほど、すなわち連写速度が大きいほど大きくなる。また、係数Ｇｍが大きいほど、すなわち連写速度が大きいほど、合成色Ｉがより暗い無彩色となる。なお、ここでは合成色Ｉを基準輝度値Ｙｍに基づく無彩色としているが、黒色などの固定色としてもよい。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を、撮影モードに応じた係数Ｇｍに基づいて決定するものとしたが、いずれか一方は係数Ｇｍに依存しない（連続表示フレーム数Ｎのみに依存する）ようにしてもよい。

【0162】

Ｓ９１３で制御部１０４は、Ｓ９１２で決定した合成色Ｉと合成比率αとを画像処理部１０１または表示部１０２に通知する。画像処理部１０１または表示部１０２は、上述したようにして更新用の画像データを生成する。

【0163】

更新用の画像データは、元画像データよりも合成色Ｉの画像データに近い画像データとなる。また、合成比率αは係数Ｇｍが大きいほど大きくなる。上述の例では撮影速度が速い撮影モードであるほど係数Ｇｍが大きくなるため、繰り返し表示されるＬＶ画像が合成色Ｉの無彩色画像に近い画像となる。なお、連写モード以外の撮影モードについても同様の方法で対応可能である。

【0164】

図１０（ｆ）は、デジタルカメラ１の動きを考慮して合成色Ｉと合成比率αとを決定する例を示している。Ｓ９１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。

【0165】

そして、Ｓ１０５２で制御部１０４は、デジタルカメラ１の動きとして角速度Ωｍ［ｄｅｇ／ｓｅｃ］を示す信号を例えば図６に示した動き測定部１１４から取得する。角速度Ωｍの更新は、ＬＶ画像の更新のタイミングで実行される。なお、動き測定部１１４が複数の回転軸について角速度を出力する場合、制御部１０４は複数の角速度から所定の方法で１つの代表角速度を求める。例えば代表角速度は複数の角速度のうち最大のものであってもよいし、複数の角速度の平均値や合計値であってもよい。動き測定部１１４が複数の回転軸について角速度を出力する場合、以下における角速度Ωｍは代表角速度を意味するものとする。

【0166】

Ｓ１０５３で制御部１０４は、元画像に適用する合成色Ｉと合成比率αとを決定する。ここでは、制御部１０４が、合成色Ｉ＝Ｙｖ（１－Ａｎ×Ｎ×Ωｍ）、合成比率α=Ａｎ×Ｎ×Ｂｐ×Ωｍとして合成色Ｉと合成比率αとを決定するものとする。ここで、Ｙｖは予め定められた基準輝度値である。Ａｎについては図１０（ａ）の場合と同様である。また、Ｂｐは固定係数であり、例えば、予め定められた角速度Ωｍのとりうる値の範囲において、Ｂｐ×Ωｍの値が０より大きく１以下の値になるようにＢｐの値を決定することができる。あるいは、Ｂｐ×Ωｍが上限値１を超える場合には値を１に補正（クリップ）してもよい。

【0167】

この場合、合成比率αは角速度Ωｍが大きいほど大きくなる。また、角速度Ωｍが大きいほど、合成色Ｉがより暗い無彩色となる。なお、ここでは合成色Ｉを基準輝度値Ｙｖに基づく無彩色としているが、黒色などの固定色としてもよい。なお、合成色Ｉは有彩色であってもよい。ここでは合成比率α、合成色Ｉの両方を、角速度Ωｍに基づいて決定するものとしたが、いずれか一方は角速度Ωｍに依存しない（連続表示フレーム数Ｎのみに依存する）ようにしてもよい。

【0168】

Ｓ９１３で制御部１０４は、Ｓ９１２で決定した合成色Ｉと合成比率αとを画像処理部１０１または表示部１０２に通知する。画像処理部１０１または表示部１０２は、上述したようにして更新用の画像データを生成する。

【0169】

更新用の画像データは、元画像データよりも合成色Ｉの画像データに近い画像データとなる。また、合成比率αは角速度Ωｍが大きいほど大きくなるため、角速度Ωｍが大きいほど、繰り返し表示されるＬＶ画像が合成色Ｉの無彩色画像に近い画像となる。

【0170】

なお、ここでは動き測定部１１４を用いてデジタルカメラ１の動きを測定するものとしたが、ＬＶ画像からデジタルカメラ１の動きを測定してもよい。例えば、Ｓ１０１２で主被写体領域の動きを検出するのと同様にして画像全体の動きを検出し、デジタルカメラ１の動きとして用いてもよい。

【0171】

また、ここでは第６実施形態の図９（ｂ）に示した動作について、他の情報を考慮して合成色Ｉと合成比率αとを決定する場合を図１０（ａ）～（ｆ）で説明した。しかし、本実施形態の構成は、図９（ｃ）および図９（ｄ）の構成と組み合わせても実施可能である。

【0172】

本実施形態によれば、第６実施形態の効果に加え、他の情報を考慮して合成色Ｉと合成比率αとを決定する。そのため、繰り返し表示されるＬＶ画像に対する明るさおよび／または色合いの調整をよりきめ細かく行うことができる。そのため、ＬＶ画像が更新されない期間のライブビュー表示の視認性をより向上させることができる。

【0173】

●（第８実施形態）
次に、本発明の第８実施形態について説明する。本実施形態は、同一元画像に基づくＬＶ画像の連続表示回数の増加とともにＬＶ画像の明るさおよび／または色合いを変化させる構成である。本実施形態は、第６および第７実施形態の構成（連続表示中のＬＶ画像の明るさおよび／または色合いが固定の構成）と組み合わせることができる。ここでは、第６実施形態の図９（ｂ）の構成と組み合わせた場合について説明する。図１１において図９（ｂ）と同様の処理を行うステップには同じ参照数字を付してある。本実施形態に従って決定された合成色Ｉと合成比率αに基づく合成ＬＶ画像の生成は、画像処理部１０１または表示部１０２のいずれで行ってもよい。

【0174】

Ｓ９１１で制御部１０４はＬＶ画像の連続表示フレーム数Ｎを取得する。
Ｓ１１０３で制御部１０４は、ループ回数Ｋを１に初期化する。

【0175】

Ｓ１１０４で制御部１０４は、合成色Ｉおよび合成比率αを決定する。ここでは、制御部１０４が、合成色Ｉ＝Ｙｋ×（１－Ｃｋ×Ｋ）、合成比率α=Ｃｋ×Ｋとして合成色Ｉと合成比率αとを決定するものとする。ここで、Ｙｋは予め定められた基準輝度値である。なお、ここでは合成色Ｉを基準輝度値Ｙｋに基づく無彩色としているが、黒色などの固定色としてもよい。なお、合成色Ｉは有彩色であってもよい。

【0176】

Ｃｋは固定係数であり、Ｋ＝ＮのときのＣｋ×Ｋの値（合成比率α）が０より大きく１以下の目標値になるようにＣｋの値を決定することができる。または、Ｃｋ×Ｋの実値が１を超えた場合には１とするようにしてもよい。ＫがＮに近づくほど合成比率αは大きくなる。また、合成色Ｉは暗い無彩色となる。したがって、同一のＬＶ画像が繰り返し表示される期間では、フレームごとにＬＶ画像の明るさが減少する。ここでは合成比率α、合成色Ｉの両方を、同一の元画像に基づくＬＶ画像が表示されるフレームごとに異ならせるものとしたが、いずれか一方は固定値としてもよい。

【0177】

Ｓ９１３で制御部１０４は、Ｓ１１０４で決定した合成色Ｉと合成比率αとを画像処理部１０１または表示部１０２に通知する。画像処理部１０１または表示部１０２は、上述したようにして更新用の画像データを生成する。

【0178】

Ｓ１１０５で制御部１０４は、ループ回数Ｋが、Ｓ９１１で取得した連続表示フレーム数Ｎに等しくなったか否かを判定し、等しくなったと判定されれば処理を終了し、判定されなければ処理をＳ１１０６に進める。Ｓ１１０６で制御部１０４は、ループ回数Ｋを１増加させて、Ｓ１１０４から再度実行する。このように、ＬＶ画像の繰り返し表示の回数がＳ９１１で取得したＮになるまで、１フレームごとに異なる合成ＬＶ画像が表示される。

【0179】

なお、ここでは第６実施形態の図９（ｂ）に示した動作について、連続表示回数の増加にしたがって合成比率αおよび／または合成色Ｉを変化させる構成について説明した。しかし、本実施形態の構成は、図９（ｃ）および図９（ｄ）の構成と組み合わせても実施可能である。この場合、期間Ｔｃや露光時間Ｔｓが複数のフレームにわたる場合、フレームごとに合成比率αおよび／または合成色Ｉを変化させればよい。

【0180】

本実施形態によれば、第６および第７実施形態の効果に加え、同じＬＶ画像が繰り返し表示されるごとに、ＬＶ画像の明るさおよび／または色合いを徐々に変化させるようにした。そのため、ＬＶ画像が更新されない期間におけるライブビュー表示の変化をより滑らかに制御することができる。そのため、第６および第７実施形態よりもさらに高品質なライブビュー表示を実現することができる。

【0181】

（その他の実施形態）
上述の実施形態で説明したＬＶ画像の輝度調整動作は、画像処理部１０１でＬＶ画像を生成する際に実施してもよいし、表示部１０２においてＬＶ画像を表示デバイス１０３に表示する際に実施してもよい。

【0182】

本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

【0183】

本発明は上述した実施形態の内容に制限されず、発明の精神および範囲から離脱することなく様々な変更及び変形が可能である。したがって、発明の範囲を公にするために請求項を添付する。

【符号の説明】

【0184】

１００…センサ、１０１…画像処理部、１０２…表示部、１０３…表示デバイス、１０４…制御部、１０５…データ転送部、１０６…バス、１０７…一時記録部、１０８…記録部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】