特許 7028960 カメラ、撮像方法、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-02-21

(45)【発行日】2022-03-02

(54)【発明の名称】カメラ、撮像方法、及びプログラム

(51)【国際特許分類】

   H04N 5/232 20060101AFI20220222BHJP

   G03B 17/18 20210101ALI20220222BHJP

   G03B 7/091 20210101ALI20220222BHJP

【ＦＩ】

H04N5/232 380

H04N5/232 220

H04N5/232 941

H04N5/232 990

G03B17/18 Z

G03B7/091

【請求項の数】 13

(21)【出願番号】P 2020508203

(86)(22)【出願日】2019-03-08

(86)【国際出願番号】 JP2019009477

(87)【国際公開番号】W WO2019181579

(87)【国際公開日】2019-09-26

【審査請求日】2020-09-07

(31)【優先権主張番号】P 2018052742

(32)【優先日】2018-03-20

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】306037311

【氏名又は名称】富士フイルム株式会社

(74)【代理人】

【識別番号】100083116

【弁理士】

【氏名又は名称】松浦 憲三

(74)【代理人】

【識別番号】100170069

【弁理士】

【氏名又は名称】大原 一樹

(74)【代理人】

【識別番号】100128635

【弁理士】

【氏名又は名称】松村 潔

(74)【代理人】

【識別番号】100140992

【弁理士】

【氏名又は名称】松浦 憲政

(72)【発明者】

【氏名】石田 一樹

(72)【発明者】

【氏名】小林 潤

(72)【発明者】

【氏名】杉原 祐樹

(72)【発明者】

【氏名】宮田 真彦

【審査官】大西 宏

(56)【参考文献】

【文献】特開平０８－２２３４８１（ＪＰ，Ａ）

【文献】特開２０１０－００４１１３（ＪＰ，Ａ）

【文献】特開２０１６－０９６４８７（ＪＰ，Ａ）

【文献】特開２０１７－０５５２６８（ＪＰ，Ａ）

【文献】国際公開第２００９／１４２３２７（ＷＯ，Ａ１）

【文献】国際公開第２０１２／１３２２０４（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ５／２２２－ ５／２５７

Ｇ０３Ｂ ７／００ － ７／３０

Ｇ０３Ｂ １７／１８ －１７／２０

Ｇ０３Ｂ １７／３６

(57)【特許請求の範囲】

【請求項1】

撮像範囲を移動させながら露光を行い撮像画像を取得可能なカメラであって、
表示部と、
前記撮像画像の撮像予定領域よりも広角で撮像した第１の撮像画像を取得する第１の撮像画像取得部と、
前記露光を開始する直前における前記撮像予定領域の一部が撮像された第２の撮像画像を取得する第２の撮像画像取得部と、
前記カメラの姿勢情報を検出するセンサと、
前記露光を開始する状態からの前記センサの検出情報に基づいて、前記第２の撮像画像の撮像範囲を基準にした単位時間毎の撮像範囲を検出する撮像範囲検出部と、
前記単位時間毎の撮像範囲に対応する第１の再現画像を、前記第１の撮像画像、又は前記第１の撮像画像及び前記第２の撮像画像から生成する第１の再現画像生成部と、
前記第１の再現画像を積算した前記露光中の第２の再現画像を生成する第２の再現画像生成部と、
前記表示部に前記第２の再現画像を表示させる表示制御部と、
を備えるカメラ。

【請求項2】

前記第１の撮像画像と前記第２の撮像画像とを比較することによって、前記第１の撮像画像における前記露光の開始位置を検出する開始位置検出部を備え、
前記撮像範囲検出部は、前記開始位置に基づいて、前記単位時間毎の撮像範囲を検出する請求項１に記載のカメラ。

【請求項3】

前記センサは、前記第１の撮像画像及び前記第２の撮像画像を取得する場合の前記カメラの姿勢情報を検出し、
前記撮像範囲検出部は、前記第１の撮像画像及び前記第２の撮像画像を取得する場合の前記検出情報に基づいて、前記露光の前記開始位置を検出し、前記単位時間毎の撮像範囲を検出する請求項２に記載のカメラ。

【請求項4】

前記センサは、前記カメラの方位情報及び基準面からの高さ情報のうち少なくとも一つをさらに検出する請求項１から３のいずれか１項に記載のカメラ。

【請求項5】

前記撮像範囲検出部は、前記センサの前記検出情報に基づいて、前記単位時間毎の撮像範囲の移動方向を検出する請求項４に記載のカメラ。

【請求項6】

前記露光の設定された露光時間を取得し前記露光を制御する露光時間制御部を備える請求項１から５のいずれか１項に記載のカメラ。

【請求項7】

前記露光時間が閾値より長い場合に、前記表示制御部は、前記表示部に前記第２の再現画像を表示させる請求項６に記載のカメラ。

【請求項8】

前記第１の再現画像生成部は、前記撮像範囲検出部が検出する前記単位時間毎の撮像範囲が前記第１の撮像画像以外の範囲にある場合には、ユーザに報知する報知画像及び報知文字のうち少なくとも一方を含む前記第１の再現画像を生成する請求項１から７のいずれか１項に記載のカメラ。

【請求項9】

前記表示制御部は、前記第１の再現画像と前記第２の再現画像とを切り替えて前記表示部に表示させる請求項１から８のいずれか１項に記載のカメラ。

【請求項10】

前記センサは、手ぶれセンサである請求項１から９のいずれか１項に記載のカメラ。

【請求項11】

前記第１の撮像画像と前記単位時間毎の撮像範囲とに応じて、ズーム機能を固定させるズーム制御部を備える請求項１から１０のいずれか１項に記載のカメラ。

【請求項12】

撮像範囲を移動させながら露光を行い撮像画像を取得可能な撮像方法であって、
前記撮像画像の撮像予定領域よりも広角で撮像した第１の撮像画像を取得する第１の撮像画像取得ステップと、
前記露光を開始する直前における前記撮像予定領域の一部が撮像された第２の撮像画像を取得する第２の撮像画像取得ステップと、
カメラの姿勢情報をセンサにより検出する検出ステップと、
前記露光を開始する状態からの前記センサの検出情報に基づいて、前記第２の撮像画像の撮像範囲を基準にした単位時間毎の撮像範囲を検出する撮像範囲検出ステップと、
前記単位時間毎の撮像範囲に対応する第１の再現画像を、前記第１の撮像画像、又は前記第１の撮像画像及び前記第２の撮像画像から生成する第１の再現画像生成ステップと、
前記第１の再現画像を積算した前記露光中の第２の再現画像を生成する第２の再現画像生成ステップと、
表示部に前記第２の再現画像を表示させる表示制御ステップと、
を含む撮像方法。

【請求項13】

撮像範囲を移動させながら露光を行い撮像画像を取得可能な撮像工程をコンピュータに実行させるプログラムであって、
前記撮像画像の撮像予定領域よりも広角で撮像した第１の撮像画像を取得する第１の撮像画像取得ステップと、
前記露光を開始する直前における前記撮像予定領域の一部が撮像された第２の撮像画像を取得する第２の撮像画像取得ステップと、
カメラの姿勢情報をセンサにより検出する検出ステップと、
前記露光を開始する状態からの前記センサの検出情報に基づいて、前記第２の撮像画像の撮像範囲を基準にした単位時間毎の撮像範囲を検出する撮像範囲検出ステップと、
前記単位時間毎の撮像範囲に対応する第１の再現画像を、前記第１の撮像画像、又は前記第１の撮像画像及び前記第２の撮像画像から生成する第１の再現画像生成ステップと、
前記第１の再現画像を積算した前記露光中の第２の再現画像を生成する第２の再現画像生成ステップと、
表示部に前記第２の再現画像を表示させる表示制御ステップと、
を含む撮像工程をコンピュータに実行させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、カメラ、撮像方法、及びプログラムに関し、特に撮像範囲を移動させながら露光を行う場合の技術に関する。

【背景技術】

【0002】

従来より、露光のタイミングを変化させたり、露光を行っている間に撮像範囲を移動させたりして、得られる画像に特殊な効果を持たせる撮像方法が知られている。これらの撮像方法として、例えば長時間露光撮像や多重露光撮像があげられる。

【0003】

長時間露光撮像とは、露光時間を通常の露光よりも長くして撮像を行う手法であり、多重露光撮像とは複数回の露光を行って１枚の画像を取得する手法である。

【0004】

ここで長時間露光や多重露光を行う場合に、撮像装置がユーザ（撮影者）の意図に反してブレてしまうと、ユーザの意図する画像は得られなくなる。したがって、長時間露光や多重露光を行う場合には、ユーザは撮像装置がブレることを抑制することが必要であり、ユーザのブレの抑制を補助する技術が考えられてきた。

【0005】

特許文献１では、多重露光を行う際に、表示装置に報知画像を表示し多重露光を行っていることをユーザに知らせることにより、撮像装置を大きく動かすことを抑制することを目的とした技術が記載されている。

【先行技術文献】

【特許文献】

【0006】

【文献】特開２００９－２３２２２７号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

ここで、長時間露光の期間中に意図的に所定の方向に撮像装置を移動させて、特殊な効果を持たせた画像を得る手法がある（移動撮像）。移動撮像を行う場合には、撮像装置の動きは得られる画像に現れてしまうので、ユーザが意図した方向に撮像装置を移動させることが必要であり、露光中に撮像素子に蓄積された電荷情報を確認することが望まれている。

【0008】

例えばユーザは、露光開始直後に既に撮像装置が意図していない方向に動いており撮像が失敗していたりする場合であっても、撮像素子に蓄積されている電荷情報を確認することができないので、最後まで露光を完了させてしまう。また、ユーザは、撮像素子に蓄積されている電荷情報を確認することができないので、撮像装置が意図していない方向に動いた場合に、その意図していない撮像装置の移動で得られた電荷情報を利用することができない。

【0009】

しかしながら、露光を行っている期間は、撮像素子に蓄積された電荷情報を読み出すことは困難であり、ユーザは、露光中に撮像素子に蓄積されている電荷情報を確認することができない。

【0010】

したがって、露光時間中に撮像素子に蓄積されている電荷情報を読み出すことなく、撮像素子に蓄積されている電荷情報を確認する手法が望まれている。

【0011】

本発明はこのような事情に鑑みてなされたもので、その目的は、露光中に撮像素子に蓄積されている電荷情報を読み出すことなく、ユーザに報知することができるカメラ、撮像方法、及びプログラムを提供することである。

【課題を解決するための手段】

【0012】

上記目的を達成するための、本発明の一の態様は、撮像範囲を移動させながら露光を行い撮像画像を取得可能なカメラであって、表示部と、撮像画像の撮像予定領域よりも広角で撮像した第１の撮像画像を取得する第１の撮像画像取得部と、露光を開始する直前における撮像予定領域の一部が撮像された第２の撮像画像を取得する第２の撮像画像取得部と、カメラの姿勢情報を検出するセンサと、露光を開始する状態からのセンサの検出情報に基づいて、第２の撮像画像の撮像範囲を基準にした単位時間毎の撮像範囲を検出する撮像範囲検出部と、単位時間毎の撮像範囲に対応する第１の再現画像を、第１の撮像画像、又は第１の撮像画像及び第２の撮像画像から生成する第１の再現画像生成部と、第１の再現画像を積算した露光中の第２の再現画像を生成する第２の再現画像生成部と、表示部に第２の再現画像を表示させる表示制御部と、を備えるカメラである。

【0013】

本態様によれば、撮像範囲検出部により、露光を開始する状態からのセンサの検出情報に基づいて、第２の撮像画像の撮像範囲を基準にした単位時間毎の撮像範囲が検出され、第１の再現画像生成部により、単位時間毎の撮像範囲に対応する第１の再現画像が、第１の撮像画像、又は第１の撮像画像及び第２の撮像画像から生成され、第２の再現画像生成部により、第１の再現画像を積算した露光中の第２の再現画像が生成される。これにより、露光中に撮像素子に蓄積された電荷情報を読み出すことをせずにユーザに報知することができる。

【0014】

好ましくは、カメラは、第１の撮像画像と第２の撮像画像とを比較することによって、第１の撮像画像における露光の開始位置を検出する開始位置検出部を備え、撮像範囲検出部は、開始位置に基づいて、単位時間毎の撮像範囲を検出する。

【0015】

本態様によれば、開始位置検出部により、第１の撮像画像と第２の撮像画像とを比較することによって、第１の撮像画像における露光の開始位置が検出される。これにより、正確な露光の開始位置を検出し、その後の単位時間毎の撮像範囲を正確に特定することができる。

【0016】

好ましくは、センサは、第１の撮像画像及び第２の撮像画像を取得する場合のカメラの姿勢情報を検出し、撮像範囲検出部は、第１の撮像画像及び第２の撮像画像を取得する場合の検出情報に基づいて、露光の開始位置を検出し、単位時間毎の撮像範囲を検出する。

【0017】

本態様によれば、センサにより、第１の撮像画像及び第２の撮像画像を取得する場合のカメラの姿勢情報が検出され、撮像範囲検出部により、第１の撮像画像及び第２の撮像画像を取得する場合の検出情報に基づいて、露光の開始位置を検出し、単位時間毎の撮像範囲が検出される。これにより、正確な露光の開始位置を検出し、その後の単位時間毎の撮像範囲を正確に特定することができる。

【0018】

好ましくは、センサは、カメラの方位情報及び基準面からの高さ情報のうち少なくとも一つをさらに検出する。

【0019】

本態様によれば、センサにより、カメラの方位情報及び基準面からの高さ情報のうち少なくとも一つがさらに検出される。これにより、正確に撮像範囲の検出を行うことができる。

【0020】

好ましくは、撮像範囲検出部は、センサの検出情報に基づいて、単位時間毎の撮像範囲の移動方向を検出する。

【0021】

本態様によれば、撮像範囲検出部により、センサの検出情報に基づいて、単位時間毎の撮像範囲の移動方向が検出される。これにより、正確に撮像範囲の検出を行うことができる。

【0022】

好ましくは、カメラは、露光の設定された露光時間を取得し露光を制御する露光時間制御部を備える。

【0023】

本態様によれば、露光時間制御部により、露光の設定された露光時間が取得され露光が制御されるので、正確な期間の露光を行うことができる。

【0024】

好ましくは、露光時間が閾値より長い場合に、表示制御部は、表示部に第２の再現画像を表示させる。

【0025】

本態様によれば、露光時間が閾値より長い場合に、表示制御部により、表示部に第２の再現画像を表示させる。これにより、露光時間が閾値より長い長時間露光において、効率的に撮像素子に蓄積された電荷情報の報知が行われる。

【0026】

好ましくは、第１の再現画像生成部は、撮像範囲検出部が検出する単位時間毎の撮像範囲が第１の撮像画像以外の範囲にある場合には、ユーザに報知する報知画像及び報知文字のうち少なくとも一方を含む第１の再現画像を生成する。

【0027】

本態様によれば、第２の再現画像生成部により、撮像範囲検出部が検出する単位時間毎の撮像範囲が第１の撮像画像以外の範囲にある場合には、ユーザに報知する報知画像及び報知文字のうち少なくとも一方を含む第２の再現画像が生成される。これにより、ユーザに対して撮像範囲が第１の撮像画像以外の範囲にあること、すなわち大きく撮像範囲の移動が外れていることを報知することができる。

【0028】

好ましくは、表示制御部は、第１の再現画像と第２の再現画像とを切り替えて表示部に表示させる。

【0029】

本態様によれば、表示制御部は、第１の再現画像と第２の再現画像とを切り替えて表示部に表示させるので、ユーザに対して現在撮像されている画像と、現在までに積算された画像とを確認させることができる。

【0030】

好ましくは、センサは、手ブレセンサである。

【0031】

好ましくは、第１の撮像画像と単位時間毎の撮像範囲とに応じて、ズーム機能を固定させるズーム制御部を備える。

【0032】

本態様によれば、ズーム制御部により、第１の撮像画像と単位時間毎の撮像範囲とに応じて、ズーム機能が固定されるので、撮像予定領域以外の領域を撮像してしまうことを抑制することができる。

【0033】

本発明の他の態様は、撮像範囲を移動させながら露光を行い撮像画像を取得可能な撮像方法であって、撮像画像の撮像予定領域よりも広角で撮像した第１の撮像画像を取得する第１の撮像画像取得ステップと、露光を開始する直前における撮像予定領域の一部が撮像された第２の撮像画像を取得する第２の撮像画像取得ステップと、カメラの姿勢情報をセンサにより検出する検出ステップと、露光を開始する状態からのセンサの検出情報に基づいて、第２の撮像画像の撮像範囲を基準にした単位時間毎の撮像範囲を検出する撮像範囲検出ステップと、単位時間毎の撮像範囲に対応する第１の再現画像を、第１の撮像画像、又は第１の撮像画像及び第２の撮像画像から生成する第１の再現画像生成ステップと、第１の再現画像を積算した露光中の第２の再現画像を生成する第２の再現画像生成ステップと、表示部に第２の再現画像を表示させる表示制御ステップと、を含む撮像方法である。

【0034】

本発明の他の態様は、撮像範囲を移動させながら露光を行い撮像画像を取得可能な撮像工程をコンピュータに実行させるプログラムであって、撮像画像の撮像予定領域よりも広角で撮像した第１の撮像画像を取得する第１の撮像画像取得ステップと、露光を開始する直前における撮像予定領域の一部が撮像された第２の撮像画像を取得する第２の撮像画像取得ステップと、カメラの姿勢情報をセンサにより検出する検出ステップと、露光を開始する状態からのセンサの検出情報に基づいて、第２の撮像画像の撮像範囲を基準にした単位時間毎の撮像範囲を検出する撮像範囲検出ステップと、単位時間毎の撮像範囲に対応する第１の再現画像を、第１の撮像画像、又は第１の撮像画像及び第２の撮像画像から生成する第１の再現画像生成ステップと、第１の再現画像を積算した露光中の第２の再現画像を生成する第２の再現画像生成ステップと、表示部に第２の再現画像を表示させる表示制御ステップと、を含む撮像工程をコンピュータに実行させるプログラムである。

【発明の効果】

【0035】

本発明によれば、撮像範囲検出部により、露光を開始する状態からのセンサの検出情報に基づいて、第２の撮像画像の撮像範囲を基準にした単位時間毎の撮像範囲が検出され、第１の再現画像生成部により、単位時間毎の撮像範囲に対応する第１の再現画像が、第１の撮像画像、又は第１の撮像画像及び第２の撮像画像から生成され、第２の再現画像生成部により、第１の再現画像を積算した露光中の第２の再現画像が生成されるので、露光中に撮像素子に蓄積された電荷情報を読み出すことをせずにユーザに報知することができる。

【図面の簡単な説明】

【0036】

【図1】図１は、撮像範囲を移動させながら長時間露光を行う撮像について説明する図である。

【図2】図２は、カメラの斜視図である。

【図3】図３は、カメラの背面図である。

【図4】図４は、カメラの内部構成の実施形態を示すブロック図である。

【図5】図５は、画像処理部の機能構成例を示すブロック図である。

【図6】図６は、第１の撮像画像の撮像の一例を示す図である。

【図7】図７は、第１の撮像画像を示す図である。

【図8】図８は、第２の撮像画像を示す図である。

【図9】図９は、第１の再現画像の例を示す図である。

【図10】図１０は、第２の再現画像の例を示す図である。

【図11】図１１は、第２の再現画像の例を示す図である。

【図12】図１２は、カメラの撮像の流れを示したフロー図である。

【図13】図１３は、ゼブラパターンを有する第１の再現画像を示す図である。

【図14】図１４は、撮像範囲の移動させる場合のカメラの動作形態の一例を示す図である。

【図15】図１５は、表示部の表示の切替を説明するための図である。

【発明を実施するための形態】

【0037】

以下、添付図面に従って本発明にかかるカメラ、撮像方法、及びプログラムの好ましい実施の形態について説明する。

【0038】

［長時間露光－移動撮像］
図１は、撮像範囲を移動させながら長時間露光を行う撮像について説明する図である。図１には、木１２５の幹１２６（幹１２６の外皮の模様１４５が示されている）の部分を撮像予定領域Ｈとして撮像する場合である。ユーザ（撮影者）は、カメラ１０（図２）の撮像範囲を移動させながら撮像予定領域Ｈを撮像する。具体的にはカメラ１０がチルト方向（図中の矢印Ｌ）に傾けられて、撮像範囲が移動し、撮像予定領域Ｈの全域が撮像される。

【0039】

カメラ１０の露光時間の設定は１回の露光で撮像範囲の移動が完了するように設定され、比較的長い露光時間が設定される。具体的には露光時間は撮像範囲を移動させて撮像予定領域Ｈの撮像が完了する期間が必要であり、少なくとも１秒より大きく、このましくは５秒よりも大きい。撮像予定領域Ｈや被写体によっては、露光時間を１０秒、３０秒にしてもよい。

【0040】

このように、露光時間が比較的長時間に設定され、露光時間中に撮像範囲の移動を伴う撮像形態において、本発明は好適に用いられる。

【0041】

［カメラ］
図２及び図３は、カメラ（デジタルカメラ）１０を示す斜視図及び背面図である。このカメラ１０は、レンズを通った光を撮像素子で受け、デジタル信号に変換して静止画又は動画の画像データとして記録メディアに記録するデジタルカメラである。図２に示すようにカメラ１０は、その正面に撮影レンズ１２、ストロボ１等が配設され、上面にはシャッタボタン２、電源／モードスイッチ３、モードダイヤル４等が配設されている。一方、図３に示すように、カメラ背面には、液晶モニタ（ＬＣＤ：Liquid Crystal Display)３０、ズームボタン５、十字ボタン６、ＭＥＮＵ／ＯＫボタン７、再生ボタン８、ＢＡＣＫボタン９等が配設されている。

【0042】

撮影レンズ１２は、沈胴式のズームレンズで構成されており、電源／モードスイッチ３によってカメラ１０の作動モードを撮影モードに設定することにより、カメラ本体から繰り出される。ストロボ１は、主要被写体にストロボ光を照射するものである。

【0043】

シャッタボタン２は、いわゆる「半押し」と「全押し」とからなる２段ストローク式のスイッチで構成され、撮像準備指示部として機能するとともに、画像の記録指示部として機能する。

【0044】

カメラ１０は、撮影モードとして静止画撮影モードが選択され、シャッタボタン２が「半押し」されると、ＡＦ（Autofocus）／ＡＥ（Auto Exposure)制御を行う撮像準備動作を行い、シャッタボタン２が「全押し」されると、静止画の撮像及び記録を行う。

【0045】

また、カメラ１０は、撮影モードとして動画撮影モードが選択され、シャッタボタン２が「全押し」されると、動画の録画を開始し、シャッタボタン２が再度「全押し」されると、録画を停止して待機状態になる。

【0046】

電源／モードスイッチ３は、カメラ１０の電源をＯＮ／ＯＦＦする電源スイッチとしての機能と、カメラ１０のモードを設定するモードスイッチとしての機能とを併せ持っており、「ＯＦＦ位置」と「再生位置」と「撮像位置」との間をスライド自在に配設されている。カメラ１０は、電源／モードスイッチ３をスライドさせて、「再生位置」又は「撮像位置」に合わせることにより、電源がＯＮになり、「ＯＦＦ位置」に合わせることにより、電源がＯＦＦになる。そして、電源／モードスイッチ３をスライドさせて、「再生位置」に合わせることにより、「再生モード」に設定され、「撮像位置」に合わせることにより、「撮影モード」に設定される。

【0047】

モードダイヤル４は、カメラ１０の撮影モードを設定するモード切替部として機能し、このモードダイヤル４の設定位置により、カメラ１０の撮影モードが様々なモードに設定される。例えば、静止画撮影を行う「静止画撮影モード」、動画撮影を行う「動画撮影モード」、図１で説明を行った「長時間露光－移動撮像モード」等である。

【0048】

液晶モニタ３０は、表示部として機能し、撮影モード時のライブビュー画像の表示、再生モード時の静止画又は動画の表示を行うとともに、メニュー画面の表示等を行うことでグラフィカルユーザーインターフェースの一部としても機能する。また、液晶モニタ３０は、後で説明をする第１の再現画像及び第２の再現画像を表示する。

【0049】

ズームボタン５は、ズームを指示するズーム指示手段として機能し、望遠側へのズームを指示するテレボタン５Ｔと、広角側へのズームを指示するワイドボタン５Ｗとからなる。カメラ１０は、撮影モード時に、このテレボタン５Ｔとワイドボタン５Ｗとが操作されることにより、撮影レンズ１２の焦点距離が変化する。また、再生モード時に、このテレボタン５Ｔとワイドボタン５Ｗとが操作されることにより、再生中の画像が拡大、縮小する。

【0050】

十字ボタン６は、上下左右の４方向の指示を入力する操作部であり、メニュー画面から項目を選択したり、各メニューから各種設定項目の選択を指示したりするボタン（カーソル移動操作手段）として機能する。左／右キーは再生モード時のコマ送り（順方向／逆方向送り）ボタンとして機能する。

【0051】

ＭＥＮＵ／ＯＫボタン７は、液晶モニタ３０の画面上にメニューを表示させる指令を行うためのメニューボタンとしての機能と、選択内容の確定及び実行などを指令するＯＫボタンとしての機能とを兼備した操作ボタンである。

【0052】

再生ボタン８は、撮像記録した静止画又は動画を液晶モニタ３０に表示させる再生モードに切り替えるためのボタンである。

【0053】

ＢＡＣＫボタン９は、入力操作のキャンセルや一つ前の操作状態に戻すことを指示するボタンとして機能する。

【0054】

尚、本実施形態に係るカメラ１０において、ボタン／スイッチ類に対して固有の部材を設けるのではなく、タッチパネルを設けこれを操作することでそれらボタン／スイッチ類の機能を実現するようにしてもよい。

【0055】

［カメラの内部構成］
図４はカメラ１０の内部構成の実施形態を示すブロック図である。このカメラ１０は、撮像した画像をメモリカード５４に記録するもので、装置全体の動作は、中央処理装置（ＣＰＵ：Central Processing Unit）４０によって統括制御される。

【0056】

カメラ１０には、シャッタボタン２、電源／モードスイッチ３、モードダイヤル４、テレボタン５Ｔ、ワイドボタン５Ｗ、十字ボタン６、ＭＥＮＵ／ＯＫボタン７、再生ボタン８、ＢＡＣＫボタン９等の操作部３８が設けられている。この操作部３８からの信号はＣＰＵ４０に入力され、ＣＰＵ４０は入力信号に基づいてカメラ１０の各回路を制御し、例えば、センサ駆動部３２により撮像素子１６の駆動制御、レンズ駆動部３６によりレンズ駆動制御、絞り駆動部３４により絞り駆動制御、撮像動作制御、画像処理制御、画像データの記録／再生制御、及び、表示制御部６１により液晶モニタ３０の表示制御などを行う。

【0057】

撮影レンズ１２、絞り１４、メカシャッタ（機械的シャッタ）１５等を通過した光束は、ＣＭＯＳ（Complementary Metal-Oxide Semiconductor）型のカラーイメージセンサである撮像素子１６に結像される。尚、撮像素子１６は、ＣＭＯＳ型に限らず、ＸＹアドレス型、又はＣＣＤ（Charge Coupled Device）型のカラーイメージセンサでもよい。

【0058】

撮像素子１６は、多数の受光素子（フォトダイオード）が２次元配列されており、各フォトダイオードの受光面に結像された被写体像は、その入射光量に応じた量の信号電圧（又は電荷）に変換され、撮像素子１６内のＡ／Ｄ（Analog/Digital）変換器を介してデジタル信号に変換されて出力される。

【0059】

またＣＰＵ４０は、露光時間制御部６５及びズーム制御部６７を備える。

【0060】

露光時間制御部６５は、設定された露光時間を取得し露光の開始から露光の終了を制御する。具体的には、ユーザがシャッタボタン２を押下すると露光が開始され、露光時間制御部６５は取得した露光時間が経過する露光を終了させるように、センサ駆動部３２を制御する。

【0061】

ズーム制御部６７は、レンズ駆動部３６を制御して、ズーム機能に制限を加える。例えば、後で説明をする第１の撮像画像と単位時間毎の撮像範囲とに応じて、ズーム機能を固定させる。すなわち、撮像範囲が撮像予定領域Ｈから外れないように、ズーム機能を固定させる。

【0062】

動画又は静止画の撮影時に撮像素子１６から読み出された画像信号（画像データ）は、画像入力コントローラ２２を介してメモリ（ＳＤＲＡＭ(Synchronous Dynamic Random Access Memory)）４８に一時的に記憶され、あるいはＡＦ処理部４２、ＡＥ検出部４４等に取り込まれる。

【0063】

ＣＰＵ４０は、操作部３８での操作に基づいてカメラ１０の各部を統括制御するが、ライブビュー画像の撮影（表示）、及び動画の撮影（記録）中には、常時ＡＦ処理部４２によりＡＦ動作及びＡＥ検出部４４によるＡＥ動作を行う。

【0064】

撮影モードが静止画撮影モードの場合には、シャッタボタン２の第１段階の押下（半押し）があると、ＣＰＵ４０は、前述のＡＦ制御を再度行い、シャッタボタン２の全押しがあると、被写体の明るさ（撮影Ｅｖ値）を算出し、算出した撮影Ｅｖ値に基づいて絞り１４のＦ値及びメカシャッタ１５による露光時間（シャッタ速度）をプログラム線図にしたがって決定し、静止画の撮影（露出制御）を行う。

【0065】

一方、撮影モードが動画撮影モードの場合には、シャッタボタン２の全押しがあると、ＣＰＵ４０は、動画の撮影及び記録（録画）を開始させる。尚、動画撮影時には、メカシャッタ１５を開放し、撮像素子１６から画像データを連続的に読み出し（例えば、フレームレートとして３０フレーム／秒、６０フレーム／秒）、連続的に位相差ＡＦを行うとともに、被写体の明るさを算出し、シャッタ駆動部３３によりシャッタ速度（ローリングシャッタによる電荷蓄積時間）及び／又は絞り駆動部３４による絞り１４を制御する。

【0066】

ＣＰＵ４０は、ズームボタン５からのズーム指令に応じてレンズ駆動部３６を介してズームレンズを光軸方向に進退動作させ、焦点距離を変更させる。

【0067】

また、ＲＯＭ（Read Only Memory）４７は、カメラ制御プログラム、撮像素子１６の欠陥情報、画像処理等に使用する各種のパラメータやテーブルが記憶している。ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）により代用可能である。

【0068】

センサ６３は、カメラ１０の姿勢情報を検出する。例えば、手振れセンサによりカメラ１０の姿勢情報を検出してもよい。さらに、センサ６３は、カメラ１０の方位情報、又は基準面からの高さ情報を検出するものであってもよい。具体的にはＧＰＳ（Global Positioning System）、ジャイロセンサ、圧力センサ等があげられる。

【0069】

画像処理部２４は、動画又は静止画の撮影時に画像入力コントローラ２２を介して取得され、メモリ４８に一時的に記憶された未処理の画像データ（ＲＡＷデータ）を読み出す。画像処理部２４は、読み出したＲＡＷデータに対してオフセット処理、画素補間処理（位相差検出用画素、傷画素等の補間処理）、ホワイトバランス補正、感度補正を含むゲインコントロール処理、ガンマ補正処理、同時化処理（「デモザイク処理」ともいう）、輝度及び色差信号生成処理、輪郭強調処理、及び色補正等を行う。

【0070】

画像処理部２４により処理された画像データであって、ライブビュー画像として処理された画像データは、ＶＲＡＭ（Video RAM Random access memory）５０に入力される。

【0071】

ＶＲＡＭ５０には、それぞれが１コマ分の画像を表す画像データを記録するＡ領域とＢ領域とが含まれている。ＶＲＡＭ５０において１コマ分の画像を表す画像データがＡ領域とＢ領域とで交互に書き換えられる。ＶＲＡＭ５０のＡ領域及びＢ領域のうち、画像データが書き換えられている方の領域以外の領域から、書き込まれている画像データが読み出される。

【0072】

ＶＲＡＭ５０から読み出された画像データは、ビデオエンコーダ２８においてエンコーディングされ、カメラ背面に設けられている液晶モニタ３０に出力される。これにより、被写体像を示すライブビュー画像が液晶モニタ３０に表示される。

【0073】

画像処理部２４により処理された画像データであって、記録用の静止画又は動画として処理された画像データ（輝度データ(Ｙ)及び色差データ(Ｃｂ),(Ｃｒ)）は、再びメモリ４８に記憶される。

【0074】

圧縮伸張処理部２６は、静止画又は動画の記録時に、画像処理部２４により処理され、メモリ４８に格納された輝度データ(Ｙ)及び色差データ(Ｃｂ),(Ｃｒ)に対して圧縮処理を施す。静止画の場合には、例えばJPEG(Joint Photographic coding Experts Group)形式で圧縮し、動画の場合には、例えばH.264形式で圧縮する。圧縮伸張処理部２６により圧縮された圧縮画像データは、メディアコントローラ５２を介してメモリカード５４に記録される。

【0075】

また、圧縮伸張処理部２６は、再生モード時にメディアコントローラ５２を介してメモリカード５４から得た圧縮画像データに対して伸張処理を施す。メディアコントローラ５２は、メモリカード５４に対する圧縮画像データの記録及び読み出しなどを行う。

【0076】

＜画像処理部の機能構成＞
図５は、画像処理部２４の機能構成例を示すブロック図である。

【0077】

画像処理部２４は、第１の撮像画像取得部１０１、第２の撮像画像取得部１０３、撮像範囲検出部１０５、開始位置検出部１０７、第１の再現画像生成部１０９、及び第２の再現画像生成部１１１を備えている。以下に画像処理部２４で行われる各処理について説明をする。

【0078】

［第１の撮像画像］
第１の撮像画像取得部１０１は、撮像範囲を移動させながら露光を行って得る撮像画像の撮像予定領域Ｈよりも広角で撮像した第１の撮像画像（以下、Ａ画像と記載する）１２１（図７）を取得する。Ａ画像１２１は、長時間露光－移動撮像を行う準備段階において撮像され、撮像予定領域Ｈよりも広角で撮像される。

【0079】

図６は、Ａ画像１２１の撮像の一例を示す図である。なお、図６は、図１で説明をした長時間露光－移動撮像を行う場合のＡ画像１２１の撮像である。Ａ画像１２１は、撮像予定領域Ｈを含むように広角でカメラ１０により撮像される。

【0080】

図７は、図６で示した撮像形態により撮像されたＡ画像１２１を示す図である。Ａ画像１２１は、木１２５の全体を画角内に収めており、当然に撮像予定領域Ｈである幹１２６も画角に収められている。Ａ画像１２１には、撮像予定領域Ｈが示されており、単位時間毎の撮像範囲（１２７Ａ、１２７Ｂ、１２７Ｃ）が示されている。撮像範囲に関しては後で詳述する。

【0081】

［第２の撮像画像］
第２の撮像画像取得部１０３は、露光を開始する直前における撮像予定領域Ｈの一部が撮像された第２の撮像画像（以下、Ｂ画像と記載する）１３１（図８）を取得する。Ｂ画像１３１は、長時間露光－移動撮像の本露光を開始する直前に撮像される撮像画像である。

【0082】

図８は、Ｂ画像１３１を示す図である。Ｂ画像１３１は、長時間露光を開始する直前に撮像される画像であり、Ａ画像１２１よりも画角が狭くズームされた状態で、幹１２６の一部が大きく写されている。Ｂ画像１３１は例えば、本露光が行われる直前のライブビュー画像（確認画像）から静止画を切り出して、Ｂ画像１３１とする。

【0083】

［撮像範囲検出］
撮像範囲検出部１０５は、露光を開始する状態からのセンサ６３の検出情報に基づいて、Ｂ画像１３１の撮像範囲を基準にした単位時間毎の撮像範囲を検出する。例えば撮像範囲検出部１０５は、Ｂ画像１３１の撮像範囲をＡ画像１２１において検出し、その検出した撮像範囲を露光開始位置として単位時間毎の撮像範囲をＡ画像１２１において検出する検出手法１を使用する。また、例えば撮像範囲検出部１０５は、Ｂ画像１３１及びＡ画像１２１を撮像した際のセンサ６３の検出情報から単位時間毎の撮像範囲を検出する検出手法２を使用する。なお単位時間とは、後で説明する第１の再現画像又は第２の再現画像の表示のフレームレート（ｆｐｓ：frames per second）を意味する。

【0084】

≪検出手法１≫
撮像範囲検出部１０５は、開始位置検出部１０７で検出された開始位置に基づいて単位時間毎の撮像範囲を検出する。

【0085】

開始位置検出部１０７は、Ａ画像１２１とＢ画像１３１とを比較することによって、Ａ画像１２１における露光の開始位置を検出する。例えば開始位置検出部１０７は、Ａ画像１２１とＢ画像１３１とのパターンマッチングにより、Ａ画像１２１におけるＢ画像１３１の位置を検出する。そして撮像範囲検出部１０５は、開始位置検出部１０７の開始位置の検出結果を取得する。撮像範囲検出部１０５は、取得した開始位置を基準にして、センサ６３の検出情報に基づいて単位時間毎の撮像範囲を検出する。

【0086】

≪検出手法２≫
撮像範囲検出部１０５は、Ａ画像１２１及びＢ画像１３１の撮像した際のカメラ１０の姿勢情報に基づいて、開始位置を検出し、単位時間毎の撮像範囲を検出する。

【0087】

センサ６３は、Ａ画像１２１及びＢ画像１３１を取得する場合のカメラ１０の姿勢情報を検出する。例えば、センサ６３は手振れセンサである場合には、撮像範囲検出部１０５は、Ａ画像１２１及びＢ画像１３１を撮像した場合の手振れセンサの検出情報を比較して撮像範囲を検出する。そして撮像範囲検出部１０５は、露光の開始位置を検出し、検出した露光の開始位置を基準にして、その後の単位時間毎の撮像範囲を検出する。

【0088】

なお、撮像範囲検出部１０５は、センサ６３の検出情報に基づいて、露光の単位時間毎の撮像範囲の移動方向を検出してもよい。撮像範囲検出部１０５は、撮像範囲の移動方向を取得することにより、正確な撮像範囲の検出を行うことができる。

【0089】

先に説明をした図７のＡ画像１２１には、撮像範囲検出部１０５で検出された撮像範囲が示されている。撮像範囲１２７Ａ、撮像範囲１２７Ｂ、及び撮像範囲１２７Ｃは、単位時間毎に順次移動する撮像範囲である。露光の開始位置を撮像範囲１２７Ａとして、カメラ１０をチルトさせることによって順次撮像範囲が１２７Ｂ及び１２７Ｃと移動する（図１参照）。なお、図７では簡略化して３つの撮像範囲を示しているが、実際では撮像予定領域Ｈには多数の撮像範囲が存在する。

【0090】

［第１の再現画像］
第１の再現画像生成部１０９は、単位時間毎の撮像範囲に対応する第１の再現画像（図９）を、Ａ画像１２１、又は、Ａ画像１２１及びＢ画像１３１から生成する。第１の再現画像生成部１０９は、第１の再現画像における単位時間毎の撮像範囲の画像情報を用いて、第１の再現画像を生成する。また、第１の再現画像生成部１０９は、露光を開始する直前に撮像されたＢ画像１３１に基づいて、第１の再現画像を生成してもよい。特に、露光開始直後であって、カメラ１０の姿勢の変化が微小である場合には、Ｂ画像１３１と、Ａ画像１２１における開始直後の撮像範囲に対応する領域とは重なる部分が多い。したがって、第１の再現画像生成部１０９は、Ｂ画像１３１とＡ画像１２１とから第１の再現画像を生成してもよい。

【0091】

図９は、第１の再現画像の例を示す図である。図７で説明をした撮像範囲１２７Ａ、撮像範囲１２７Ｂ、撮像範囲１２７Ｃに対応する第１の再現画像１３３Ａ、第１の再現画像１３３Ｂ、及び第１の再現画像１３３Ｃが示されている。具体的には、撮像範囲１２７Ａを露光の開始位置とし、それに対応する第１の再現画像１３３Ａが示されており、次の単位時間経過後の撮像範囲１２７Ｂに対応する第１の再現画像１３３Ｂが示されており、次の単位時間経過後の撮像範囲１２７Ｃに対応する第１の再現画像１３３Ｃが示されている。すなわち、第１の再現画像１３３は、単位時間毎に撮像素子１６に蓄積される電荷情報を表している。なお、第１の再現画像を符号１３３で表し、各単位時間での第１の再現画像を符号１３３Ａ、１３３Ｂ、及び１３３Ｃで表す。

【0092】

［第２の再現画像］
第２の再現画像生成部１１１は、第１の再現画像１３３を積算することにより第２の再現画像を生成する。具体的には第２の再現画像生成部１１１は、露光開始から現在まで得られた、単位時間毎の第１の再現画像１３３を重ねることにより、第２の再現画像を生成する。

【0093】

図１０は、第２の再現画像の例を示す図である。なお、第２の再現画像１３５においてボケが発生している箇所を点線で示している。

【0094】

第２の再現画像１３５は、図９で示した第１の再現画像１３３Ａ、第１の再現画像１３３Ｂ、及び第１の再現画像１３３Ｃを重ねることによって得られる。単位時間毎に異なる像が写された第１の再現画像（１３３Ａ、１３３Ｂ、１３３Ｃ）を重ねるので、第２の再現画像１３５ではボケが発生する。具体的には、第２の再現画像１３５において幹１２６の輪郭の部分ではボケが発生しており、また幹１２６の外皮の模様１４５でもボケが発生している。

【0095】

このように得られた第２の再現画像１３５は、単位時間毎の第１の再現画像１３３を重ねて生成されているので、露光開始から現在までに撮像素子１６に蓄積された電荷情報を表している。

【0096】

図１１は、第２の再現画像１３５の他の例を示す図である。図１１の場合には、カメラ１０の移動が意図しない方向へ移動してしまった場合であり、ユーザの意図する画像が得られないという観点からは失敗例である。

【0097】

第２の再現画像１３５は、図１０と同様に木１２５の幹１２６を撮像したものである。図１１に示した場合では、撮像範囲を移動させる際にカメラ１０の姿勢がブレてしまった場合である。この場合カメラ１０のセンサ６３の検出情報に基づいて、撮像範囲及び第１の再現画像１３３もカメラ１０の姿勢のブレの影響が反映される。したがって、第１の再現画像１３３を積算して生成される第２の再現画像１３５においてもカメラ１０のブレの影響が表現されることになる。

【0098】

このように、露光中のカメラ１０の姿勢のブレを第２の再現画像１３５で表現することができると、ユーザは、第２の再現画像１３５を確認することにより、露光が完了する前に撮像を中止して撮り直しを行うことができる。また、露光中のカメラ１０の姿勢のブレを利用して新たな画像を作成することができる。

【0099】

［撮像方法］
次に、カメラ１０の撮像方法（撮像工程）に関して説明する。図１２は、カメラ１０の撮像の流れを示したフロー図である。

【0100】

長時間露光で撮像を行う領域（撮像予定領域Ｈ）を含む広角で、撮像したＡ画像１２１がカメラ１０により撮像され（ステップＳ１０）、第１の撮像画像取得部１０１はＡ画像１２１を取得する（第１の撮像画像取得ステップ）。次にカメラ１０は、長時間露光の露光が開始するまで、ライブビュー画像を撮像し記憶保存をする（ステップＳ１１）。

【0101】

次に、カメラ１０は移動撮像の本露光を開始する（ステップＳ１２）。そして、第２の撮像画像取得部１０３は、本露光開始の直前に撮像されたＢ画像１３１を記憶されたライブビュー画像から取得する（ステップＳ１３：第２の撮像画像取得ステップ）。

【0102】

その後、開始位置検出部１０７は、Ａ画像１２１におけるＢ画像１３１の位置（露光の開始位置）を検出する（ステップＳ１４：検出ステップ）。そして、開始位置検出部１０７は、Ａ画像１２１の中にＢ画像１３１の位置が検出可能か否かを判定する（ステップＳ１５）。開始位置検出部１０７がＡ画像１２１の中にＢ画像１３１の位置が検出できない場合には、表示制御部６１は液晶モニタ３０にエラーメッセージを表示させる（ステップＳ２３）。

【0103】

開始位置検出部１０７は、Ａ画像１２１の中にＢ画像１３１の位置の検出ができた場合には、露光時間制御部６５は、取得した露光時間が閾値以下であるかを判定する（ステップＳ１６）。露光時間制御部６５が取得した露光時間が閾値以下と判定した場合には、表示制御部６１は、第２の再現画像１３５を液晶モニタ３０に表示させることなく表示を終了させる。一方、露光時間制御部６５が取得した露光時間が閾値より大きいと判定した場合には、表示制御部６１は、第２の再現画像１３５を液晶モニタ３０に表示させるために以下の処理を行う。

【0104】

撮像範囲検出部１０５は、現在のカメラ１０の姿勢情報（煽り等）及び相対位置座標（Δｘ、Δｙ、Δｚ）を取得する（ステップＳ１７）。なお、相対位置座標は、撮像範囲の中心の座標であり、Ａ画像１２１における相対的な座標である。相対位置座標は、撮像範囲に基づいて算出することでき、露光の開始位置の撮像範囲の中心（Ｂ画像の中心）を原点として、センサ６３からの検出情報により座標（Δｘ、Δｙ、Δｚ）を取得することが可能である。その後、撮像範囲検出部１０５はＡ画像１２１、Ｂ画像１３１、相対位置座標から現在の撮像範囲を検出し（撮像範囲検出ステップ）、第１の再現画像生成部１０９は第１の再現画像１３３を生成する（ステップＳ１８：第１の再現画像生成ステップ）。

【0105】

そして、撮像範囲検出部１０５は撮像範囲がＡ画像１２１の範囲外にあるか否かを判定する（ステップＳ１９）。そして、撮像範囲検出部１０５が撮像範囲がＡ画像１２１の範囲外であると判定した場合には、第１の再現画像生成部１０９は範囲外の部分をゼブラパターンで表示した第１の再現画像１３３を生成する（ステップＳ２４）。

【0106】

図１３は、ゼブラパターンを有する第１の再現画像１３３を示す図である。第１の再現画像１３３には木の幹１２６が写っているが、画角が図に向かって左側により過ぎてしまっているため、Ａ画像１２１の範囲を超えてしまっている。したがって、Ａ画像１２１の範囲を超えてしまっている部分に関してはゼブラパターン１４３により、ユーザに範囲外であることを報知しており、ゼブラパターン１４３は報知画像の一例である。また、ユーザへの報知は、報知画像だけではなく報知文字により行ってもよいし、報知画像及び報知文字によって行ってもよい。

【0107】

図１２に戻って、撮像範囲検出部１０５が検出した撮像範囲がＡ画像１２１の範囲内である場合には、第２の再現画像生成部１１１は、現時点までに撮像素子１６に積算されている画像を、第１の再現画像１３３を積算することにより生成し（第２の再現画像生成ステップ）、表示制御部６１は生成された第２の再現画像１３５を液晶モニタ３０に表示させる（ステップＳ２０：表示制御ステップ）。

【0108】

次に露光時間制御部６５により、現在時刻が取得された露光時間内であるか否かの判定がされる（ステップＳ２１）。そして、現在時刻が露光時間内である場合には、撮像範囲検出部１０５は、現在のカメラ１０の姿勢情報及び相対位置座標値を取得して、現在の撮像範囲を検出する。なお、一点鎖線Ｆで示したフローは、例えば通常のフレームレート（５０から６０ｆｐｓ）毎に行われる。その後、露光時間が終了すると、表示制御部６１は液晶モニタ３０での再現画像の表示を終了させる（ステップＳ２２）。

【0109】

上記実施形態において、各種の処理を実行する処理部（processing unit）のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。

【0110】

１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、あるいはＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。

【0111】

さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）である。

【0112】

上述の各構成及び機能は、任意のハードウェア、ソフトウェア、或いは両者の組み合わせによって適宜実現可能である。例えば、上述の処理ステップ（処理手順）をコンピュータに実行させるプログラム、そのようなプログラムを記録したコンピュータ読み取り可能な記録媒体（非一時的記録媒体）、或いはそのようなプログラムをインストール可能なコンピュータに対しても本発明を適用することが可能である。

【0113】

以上説明したように、本発明では第１の再現画像生成部１０９により、単位時間毎の撮像範囲に対応する第１の再現画像１３３が、Ａ画像１２１、又は、Ａ画像１２１及びＢ画像１３１から生成され、第２の再現画像生成部１１１により、第１の再現画像１３３を積算した露光中の第２の再現画像１３５が生成される。これにより、露光中に撮像素子１６に積算されている情報を再現することにより、ユーザに報知することができる。

【0114】

＜その他＞
［カメラの移動形態］
上述の説明では、カメラ１０はチルト方向に動作させることにより撮像範囲を移動させることを説明したが、撮像範囲を移動させるカメラ１０の動作はこれに限定されるものではない。

【0115】

図１４は、撮像範囲の移動させる場合のカメラ１０の動作形態の一例を示す図である。図に示すようにカメラ１０の姿勢はそのままで、高さを変えることにより、撮像範囲を移動させて、撮像予定領域Ｈを撮像してもよい。カメラ１０は本露光が開始であるｔ＝０からｔ＝Δｔまでに地面に対して垂直上方に移動し、撮像範囲を移動させて撮像予定領域Ｈの撮像を行っている。

【0116】

［第１の再現画像と第２の再現画像との表示切替］
上述の説明では、カメラ１０の液晶モニタ３０に第２の再現画像１３５を表示する形態を説明したが、これに限定されるものではない。例えば、液晶モニタ３０に第１の再現画像１３３と第２の再現画像を切り替えて表示させてもよい。

【0117】

図１５は、液晶モニタ３０の表示の切り替えを説明するための図である。符号１４０で示された表示形態では、第１の再現画像１３３が液晶モニタ３０に表示されている。また符号１４１で示された表示形態では、第２の再現画像１３５が液晶モニタ３０に表示されている。例えばユーザは、必要とする情報に応じて操作部３８を使用して、液晶モニタ３０に第１の再現画像１３３を表示させるか、第２の再現画像１３５を表示させるかを切り替えてもよい。

【0118】

このように液晶モニタ３０での表示を制御することにより、ユーザは現在撮像している画像と積算された画像とを切り替えて確認することができる。

【0119】

［露光時間］
上述の説明では、予め露光時間が設定されている場合に関して説明したが、これに限定されるものではない。例えば、カメラ１０のシャッタボタン２をユーザが押下し、ユーザが押下を解放した場合に露光が終了するような長時間露光においても、本発明は適用される。

【0120】

以上で本発明の例に関して説明してきたが、本発明は上述した実施の形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。

【符号の説明】

【0121】

１ ：ストロボ
２ ：シャッタボタン
３ ：電源／モードスイッチ
４ ：モードダイヤル
５ ：ズームボタン
６ ：十字ボタン
７ ：ＭＥＮＵ／ＯＫボタン
８ ：再生ボタン
９ ：ＢＡＣＫボタン
１０ ：カメラ
１２ ：撮影レンズ
１４ ：絞り
１５ ：メカシャッタ
１６ ：撮像素子
２２ ：画像入力コントローラ
２４ ：画像処理部
２６ ：圧縮伸張処理部
２８ ：ビデオエンコーダ
３０ ：液晶モニタ
３２ ：センサ駆動部
３３ ：シャッタ駆動部
３４ ：絞り駆動部
３６ ：レンズ駆動部
３８ ：操作部
４０ ：ＣＰＵ
４２ ：ＡＦ処理部
４４ ：ＡＥ検出部
４７ ：ＲＯＭ
４８ ：メモリ
５０ ：ＵＲＡＭ
５２ ：メディアコントローラ
５４ ：メモリカード
６１ ：表示制御部
６３ ：センサ
６５ ：露光時間制御部
６７ ：ズーム制御部
１０１ ：第１の撮像画像取得部
１０３ ：第２の撮像画像取得部
１０５ ：撮像範囲検出部
１０７ ：開始位置検出部
１０９ ：第１の再現画像生成部
１１１ ：第２の再現画像生成部
１２１ ：第１の撮像画像
１２５ ：木
１２６ ：木の幹
１２７Ａ ：撮像範囲
１２７Ｂ ：撮像範囲
１２７Ｃ ：撮像範囲
１３１ ：第２の撮像画像
１３３ ：第１の再現画像
１３３Ａ ：第１の再現画像
１３３Ｂ ：第１の再現画像
１３３Ｃ ：第１の再現画像
１３５ ：第２の再現画像
１４５ ：木の幹の模様
Ｈ ：撮像予定領域
ステップＳ１０－Ｓ２４：カメラの動作工程

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】