特許 6238735 撮像装置およびその制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6238735

(24)【登録日】2017年11月10日

(45)【発行日】2017年11月29日

(54)【発明の名称】撮像装置およびその制御方法

(51)【国際特許分類】

   H04N 5/232 20060101AFI20171120BHJP

   H04N 5/225 20060101ALI20171120BHJP

   H04N 5/92 20060101ALI20171120BHJP

【ＦＩ】

   H04N5/232 300

   H04N5/225 800

   H04N5/92

【請求項の数】12

【全頁数】19

(21)【出願番号】特願2013-269686(P2013-269686)

(22)【出願日】2013年12月26日

(65)【公開番号】特開2015-126391(P2015-126391A)

(43)【公開日】2015年7月6日

【審査請求日】2016年12月22日

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】100126240

【弁理士】

【氏名又は名称】阿部 琢磨

(74)【代理人】

【識別番号】100124442

【弁理士】

【氏名又は名称】黒岩 創吾

(72)【発明者】

【氏名】羽田 徹也

【審査官】 吉川 康男

(56)【参考文献】

【文献】 特開２０１２−２５３６９３（ＪＰ，Ａ）

【文献】 特開２０１３−０４６２９２（ＪＰ，Ａ）

【文献】 特開２０１３−２４３５３１（ＪＰ，Ａ）

【文献】 特開２００６−０５４６３６（ＪＰ，Ａ）

【文献】 特開２０１２−００９９１６（ＪＰ，Ａ）

【文献】 特開２００５−０７３１６１（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２３２

Ｈ０４Ｎ ５／２２５

Ｈ０４Ｎ ５／９２

(57)【特許請求の範囲】

【請求項1】

第１の撮像手段と、
第２の撮像手段と、
前記第１の撮像手段による静止画の撮影を指示するための撮影指示手段と、
前記撮影指示手段により静止画の撮影が指示されたことに応じて、前記第１の撮像手段により撮影した静止画を記録媒体に記録する静止画記録手段と、
前記撮影指示手段により静止画の撮影が指示されたことに応じて、前記第１の撮像手段により撮影した画像を動画として前記記録媒体に記録する動画記録手段と、
前記第１の撮像手段により撮影した画像を動画として記録するかを設定するための第１の設定手段と、
前記第２の撮像手段により撮影した画像を記録するかを設定するための第２の設定手段とを有し、
前記第２の設定手段により前記第２の撮像手段により撮影した画像を記録することが設定されていた場合は、前記第１の設定手段の設定に関わらず、前記動画記録手段は、前記第１の撮像手段により撮影した画像と前記第２の撮像手段により撮影した画像とを合成した画像を動画として記録することを特徴とする撮像装置。

【請求項2】

前記第１の設定手段は、前記撮影指示手段により静止画の撮影が指示されたことに応じて前記第１の撮像手段により撮影した静止画を動画として記録するかをユーザが設定するための設定手段であり、
前記動画記録手段は、前記撮影指示手段により静止画の撮影が指示されたことに応じて、前記第１の撮像手段により撮影した静止画を動画として前記記録媒体に記録することを特徴とする請求項１に記載の撮像装置。

【請求項3】

前記第２の設定手段により前記第２の撮像手段により撮影した画像を記録することが設定されていない場合は、前記第１の設定手段による設定に応じて、前記動画記録手段により動画を記録するかを切り替えることを特徴とする請求項１または２に記載の撮像装置。

【請求項4】

前記動画記録手段は、前記撮影指示手段により静止画の撮影が指示されるまでに前記第１の撮像手段により撮影した動画を前記記録媒体に記録することが可能であり、前記撮影指示手段により静止画の撮影が指示されるまでに前記第１の撮像手段により撮影した動画の撮影時間が所定の時間以上の場合に、前記撮影指示手段により静止画の撮影が指示されるまでに前記第１の撮像手段により撮影した動画を前記記録媒体に記録することを特徴とする請求項１ないし３のいずれか１項に記載の撮像装置。

【請求項5】

前記動画記録手段は、前記撮影指示手段により静止画の撮影が指示されるまでに前記第１の撮像手段により撮影した動画の撮影時間が所定の時間以上ではない場合には、前記撮影指示手段により静止画の撮影が指示されるまでに前記第１の撮像手段により撮影した動画および前記撮影指示手段により静止画の撮影が指示された後に前記第１の撮像手段により撮影した画像を動画として前記記録媒体に記録しないことを特徴とする請求項４に記載の撮像装置。

【請求項6】

前記動画記録手段は、前記撮影指示手段により静止画の撮影が指示されるまでに前記第１の撮像手段により撮影した動画の撮影時間が所定の時間以上でなくても、前記第２の設定手段により前記第２の撮像手段により撮影した画像を記録することが設定されている場合は、前記撮影指示手段により静止画の撮影が指示された後に前記第１の撮像手段により撮影した画像を動画として前記記録媒体に記録することを特徴とする請求項５に記載の撮像装置。

【請求項7】

前記撮影指示手段により静止画の撮影が指示されたことに応じて前記静止画記録手段により静止画を記録すると共に前記動画記録手段により動画を記録する同時記録モードに設定するためのモード設定手段を有し、
前記同時記録モードに設定されている場合に、前記動画記録手段は、前記記録媒体に記録すべき複数の動画を所定の１つの動画ファイルに記録することを特徴とする請求項１ないし６のいずれか１項に記載の撮像装置。

【請求項8】

前記動画記録手段は、前記第２の設定手段により前記第２の撮像手段により撮影した画像を記録することが設定されている場合は、前記第１の撮像手段により撮影した画像に前記第２の撮像手段により撮影した動画を合成して前記記録媒体に記録することを特徴とする請求項１ないし７のいずれか１項に記載の撮像装置。

【請求項9】

前記第２の設定手段により前記第２の撮像手段により撮影した画像を記録することが設定されていない場合は、前記第２の撮像手段により画像を撮影しない、または、前記第２の撮像手段により画像を撮影したとしても前記記録媒体に記録しないことを特徴とする請求項１ないし８のいずれか１項に記載の撮像装置。

【請求項10】

第１の撮像手段と、第２の撮像手段とを有する撮像装置の制御方法であって、
前記第１の撮像手段による静止画の撮影指示を受け付ける撮影指示工程と、
前記静止画の撮影指示を受け付けたことに応じて、前記第１の撮像手段により撮影した静止画を記録媒体に記録するための制御を行う静止画記録工程と、
前記静止画の撮影指示を受け付けたことに応じて、前記第１の撮像手段により撮影した画像を動画として前記記録媒体に記録するための制御を行う動画記録工程と、
前記第１の撮像手段により撮影した画像を動画として記録するかを設定するための第１の設定工程と、
前記第２の撮像手段により撮影した画像を記録するかを設定するための第２の設定工程とを有し、
前記第２の設定工程で前記第２の撮像手段により撮影した画像を記録することが設定された場合は、前記第１の設定工程での設定に関わらず、前記動画記録工程では、前記第１の撮像手段により撮影した画像と前記第２の撮像手段により撮影した画像とを合成した画像を動画として記録するように制御することを特徴とする撮像装置の制御方法。

【請求項11】

コンピュータを請求項１ないし９のいずれか１項に記載の撮像装置の各手段として機能させるためのプログラム。

【請求項12】

コンピュータを請求項１ないし９のいずれか１項に記載の撮像装置の各手段として機能させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、複数の撮像手段を有する撮像装置およびその制御方法に関する。

【背景技術】

【0002】

携帯電話やスマートフォンのように、通常の撮影用の撮像部（以下アウトカメラと呼称する）と反対方向に携帯電話等の使用者側に向けられた撮影部（以下インカメラと呼称する）を備えた撮像装置がある。そのような撮像装置では一度のレリーズ操作で、アウトカメラと呼称とインカメラのシャッターを同時に切ることで同時に複数の画像を撮影し、インカメラで撮影した画像とアウトカメラで撮影した画像を関連付けて記録することが可能である。（特許文献１参照）

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００５−９４７４１

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１に記載のような撮像装置の場合、レリーズ操作に応じてアウトカメラでの撮影とインカメラでの撮影を同時に行っている。そのため、被写体を撮影した瞬間の撮影者の表情しか残すことができなかった。また、レリーズ操作に応じてインカメラで静止画しか撮影していない。そのため、撮影時の撮影者の表情の変化や反応等、また、実際に撮影された画像を見たときの撮影者の反応や表情、感情までを記録することができていなかった。

【0005】

そこで、複数の撮像手段を有する撮像装置において、静止画撮影時の状況や、例えば撮影者等の静止画の被写体以外の人物の変化や反応等を記録することが可能な撮像装置を提供することを目的とする。

【課題を解決するための手段】

【0006】

上記課題を解決する為に本発明の撮像装置は、
第１の撮像手段と、第２の撮像手段と、第１の撮像手段による静止画の撮影を指示するための撮影指示手段と、撮影指示手段により静止画の撮影が指示されたことに応じて、第１の撮像手段により撮影した静止画を記録媒体に記録する静止画記録手段と、撮影指示手段により静止画の撮影が指示された後に第１の撮像手段により撮影した画像を動画として記録媒体に記録する動画記録手段と、撮影指示手段により静止画の撮影が指示された後に第１の撮像手段により撮影した画像を動画として記録するかを設定するための第１の設定手段と、第２の撮像手段により撮影した画像を記録するかを設定するための第２の設定手段とを有し、第２の設定手段により第２の撮像手段により撮影した画像を記録することが設定されていた場合は、第１の設定手段の設定に関わらず、動画記録手段は、第１の撮像手段により撮影した画像と第２の撮像手段により撮影した画像とを合成した画像を動画として記録することを特徴とする。

【発明の効果】

【0007】

本発明によれば、第１の撮像手段と第２の撮像手段とを有する撮像装置において、第１の撮像手段による静止画撮影指示があった場合に、第２の撮像手段により撮影した動画を記録するので、撮影時の状況の変化や、例えば撮影者等の第１の撮像手段の被写体以外の表情の変化や反応等を記録することが可能となる。

【図面の簡単な説明】

【0008】

【図1】デジタルカメラの背面図である。

【図2】デジタルカメラの構成を示すブロック図である。

【図3】静止画・動画同時撮影モードの撮影処理を示すフローチャートである。

【図4】静止画・動画同時撮影モードの撮影処理を示すフローチャートである。

【図5】静止画・動画同時撮影モードで撮影および表示される画像の例を示す図である。

【図6】動画記録パターンを説明するための図である。

【図7】各種設定と動画記録パターンの関係を説明するための図である。

【発明を実施するための形態】

【0009】

以下、図面を参照して本発明の好適な実施形態を説明する。

【0010】

（第１の実施形態）
本実施形態では、本発明に係る撮像装置の一例として、デジタルカメラ１００を説明する。

【0011】

＜デジタルカメラ１００の外観について＞
図１は、本発明に係る撮像装置の一例としてのデジタルカメラ１００の背面図を示している。

【0012】

表示部２８は画像や各種情報を表示する表示部である。シャッターボタン６０は、静止画撮影指示を行うための操作部である。動画撮影ボタン７０は、動画撮影指示を行うための操作部材である。操作部６２はユーザからの各種操作を受け付ける各種スイッチ、ボタン等の操作部材より成る操作部である。操作部６２は、デジタルカメラ１００の電源ＯＮ、ＯＦＦを切り替える電源スイッチ、デジタルカメラ１００の動作モードを切り替えるモード切り替えスイッチ、メニュー設定を行うメニューボタン、メニューや設定を指示する十字キーボタンなどが含まれている。記録媒体９１はメモリカードやハードディスク等の記録媒体である。蓋９３は記録媒体９１を収納するための蓋である。

【0013】

１０４は、被写体を撮影している撮影者を撮影、または、表示部２８に表示されている画像を観賞している鑑賞者を撮影するための、カメラモジュールであり、撮影可能なレンズ、撮像素子等からなる。以後、このカメラをインカメラと呼ぶことする。

【0014】

インカメラ１０４は、鑑賞者または撮影者を撮影するために、デジタルカメラ１００の表示部２８が設けられている側を撮影するように配置されている。また、図１では、表示部２８が設けられているデジタルカメラの背面側の外観図であるが、デジタルカメラ１００の表側の面には、被写体側を撮影する撮像部であるアウトカメラが設けられている。アウトカメラとサブカメラの光軸（撮影方向）は互いに略平行であり、アウトカメラの光軸（撮影方向）は、サブカメラの光軸（撮影方向）と逆方向に設定されている。

【0015】

＜デジタルカメラ１００の構成について＞
図２は、本発明の実施例であるデジタルカメラ１００の構成を示すブロック図である。

【0016】

１０は、デジタルカメラ１００の撮影レンズ１１を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである保護手段である。１１は撮影レンズ、１２は絞り機能を備えるシャッター、１３は光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子、１５は撮像素子１３のアナログ信号出力をディジタル信号に変換して画像データを取得するためのＡ／Ｄ変換器である。これらの、バリア１０、撮影レンズ１１、シャッター１２、撮像素子１３により、アウトカメラが構成されている。

【0017】

同様に１０１の撮影レンズは撮影レンズ１１とは別にデジタルカメラ１００を使用している撮影者を撮影可能な方向に設置されているズームレンズ、フォーカスレンズを含むレンズ群である。１０２は絞り機能を備えるシャッターである。１０３は撮影者側の光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子である。これらの、撮影レンズ１０１、シャッター１０２、撮像素子１０３により、インカメラが構成されている。

【0018】

１４は撮像素子１３や１０３、Ａ／Ｄ変換器１５、Ｄ／Ａ変換器２１にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御部５０により制御される。

【0019】

インカメラについては、インカメラ撮影機能の有効、無効を設定可能である。インカメラ撮影機能を有効に設定されている場合は、撮像素子１０３から読み出したデータに基づいて生成された画像、つまりインカメラで撮影した画像が外部記録媒体９１に記録されることになる。そして、インカメラ撮影機能を無効にしている場合は、撮像素子１０３を駆動させない、つまり、インカメラでの撮影を行わない。または、撮像素子１０３を駆動させ、撮影は行ったとしても、撮像素子１０３からデータを読み出さずに、外部記録媒体９１への撮像素子１０３の出力に基づく画像の記録は行わないようにする。

【0020】

２０は画像処理回路であり、Ａ／Ｄ変換器１５からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。

【0021】

また、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行う。そして、得られた演算結果に基づいてシステム制御部５０が露光制御部４０、測距制御部４１に対して制御を行い、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理を行っている。

【0022】

画像処理回路２０において、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＡＷＢ（オートホワイトバランス）処理も行っている。

【0023】

さらに、画像処理回路２０においては、メモリ２５に格納された画像を読み込んでＪＰＥＧ方式やＭＰＥＧ−４ ＡＶＣ／Ｈ．２６４方式での圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ２５に書き込む。

【0024】

２２はメモリ制御回路であり、Ａ／Ｄ変換器１５、タイミング発生回路１４、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２１、メモリ２５を制御する。

【0025】

Ａ／Ｄ変換器１５のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１５のデータが直接メモリ制御回路２２を介して、画像表示メモリ２４或いはメモリ２５に書き込まれる。

【0026】

２４は画像表示メモリ、２１はＤ／Ａ変換器である。２３はＴＦＴ、ＬＣＤ等から成る表示部であり、Ｄ／Ａ変換器２１を介して画像表示メモリ２４に書き込まれた表示用の画像データに基づいて表示を行う。表示部２８を用いて撮像した画像データを逐次表示すれば、ライブ映像を表示する電子ファインダ機能を実現することが可能である。このように、表示部２８は、撮影した画像やさらに、メニューや設定の変更を行うためのグラフィックユーザインタフェースを表示するためにも用いられる。また、表示部２８は、ＴＶ等の外部表示装置に映像信号を出力する端子も備えている。システム制御部５０は、表示部２８に対する表示制御を行うだけでなく、外部表示装置に撮影した画像やグラフィックユーザインタフェースを表示させるように表示制御を行ってもよい。

【0027】

２５は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。また、メモリ２５はシステム制御部５０の作業領域としても使用することが可能である。

【0028】

４０は絞り機能を備えるシャッター１２、１０２を個別に制御する露光制御手段である。

【0029】

４１は撮影レンズ１１、１０１のフォーカシングを個別に制御する測距制御手段、４２は撮影レンズ１１、１０１のズーミングを個別に制御するズーム制御手段、４３はバリア１０の動作を制御するバリア制御手段である。

【0030】

５０は本デジタルカメラ全体を制御するシステム制御回路である。

【0031】

５１は電気的に消去・記録可能な不揮発性メモリであり、例えばＥＥＰＲＯＭ等が用いられる。不揮発性メモリ５１には、プログラムや各種設定情報等が記録されている。

【0032】

６０はシャッターボタンで、シャッターボタン６０の操作途中（半押し状態）でシャッタースイッチＳＷ１がＯＮとなり、ＳＷ１信号がシステム制御部５０に入力される。ＳＷ１信号が入力されると、システム制御部５０は、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の撮影準備動作開始を指示する。そして、シャッターボタン６０の操作完了（全押し）するとシャッタースイッチＳＷ２がＯＮとなり、ＳＷ２信号がシステム制御部５０に入力される。ＳＷ２信号が入力されると、システム制御部５０は、アウトカメラによる静止画の撮影、記録動作の開始を指示する。静止画の撮影、記録動作の開始が指示されると、まず、撮像素子１３から読み出した信号をＡ／Ｄ変換器１５、メモリ制御回路２２を介してメモリ２５に画像データを書き込む露光処理が行われる。そして、メモリ２５に書き込まれた画像データに対して画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理が行われ、現像処理が施された画像データに対し、画像処理回路２０により圧縮を行ってメモリ２５に格納する。その後、圧縮された画像データをメモリ２５から読み出して、カードコントローラ９０を介して、外部記録媒体９１に画像データを書き込む。このようにして、ＳＷ２信号の入力に応じて、静止画像データの撮影および記録という一連の静止画撮影、静止画記録動作が行われる。

【0033】

６２は、システム制御部５０の各種の動作指示を入力するための各種ボタンやタッチパネル等からなる操作部である。電源ボタン、メニューボタン、撮影モード／再生モード／その他特殊撮影モードの切替えを行うモード切替スイッチ、十字キー、セットボタン等である。また、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン等も含まれる。さらに、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン等も含まれる。さらに、音声認識装置等を用いてもよく、上記のボタンやタッチパネルを単数あるいは複数の組み合わせで構成される。

【0034】

７０は動画撮影ボタンであり、動画撮影ボタンが操作（押下）されたことに応じて、システム制御部は、アウトカメラによる動画の撮影を開始するように指示する。動画撮影開始が指示されると、撮像素子１３から信号を読み出し、その信号をＡ／Ｄ変換器１５で変換して画像データ取得し、画像処理回路２０により動画圧縮処理を行なって外部記録媒体９１に記憶する。この、動画圧縮処理および記録処理を、周期的に行うことで、動画を外部記録媒体９１に記録する。この動画圧縮処理および記録処理は、再び動画撮影ボタン７０が押下されるまで実行される。再び動画撮影ボタン７０が押下されると、動画圧縮処理を終了し、それまで記録した動画を１つの動画ファイルとして外部記録媒体９１に記録する。

【0035】

８１は電源制御手段である。

【0036】

８０はアルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる電源である。

【0037】

９０はメモリカード等の外部記録媒体とデータの送受信を行うカードコントローラである。９１はメモリカード等の外部記録媒体である。

【0038】

＜静止画・動画撮影同時記録モードについて＞
デジタルカメラ１００は、静止画撮影モードとして、静止画・動画撮影同時記録モードを有している。静止画・動画撮影同時記録モードでは、シャッターボタン６０を全押ししたことに応じて、アウトカメラで静止画を撮影して記録すると共に、静止画撮影前にアウトカメラて撮影した動画も外部記録媒体９１に記録する。静止画・動画撮影同時記録モードにおいては、静止画の撮影毎に裏で動画（ショートムービー）を自動的に記録し、静止画・動画撮影同時記録モードで記録した動画（ショートムービー）は、毎回同じ動画ファイルに記録される。そのため、ユーザ何も操作しなくても、静止画撮影時の状況をおさめた動画を自動で作成することができ、さらに、複数回の静止画撮影で得られた動画（ショートムービー）を連続的に観賞することができる１つのダイジェスト動画を得ることができる。以降、静止画・動画撮影同時記録モードにおいて動画（ショートムービー）が記録される動画ファイルをダイジェスト用動画ファイルと呼ぶこととする。静止画・動画撮影同時記録モードは、ユーザが操作部６２に含まれるモード切り替えスイッチにより静止画の撮影モード設定を切り替えることにより、設定可能である。

【0039】

静止画・動画撮影同時記録モードにおいて、前述したようにインカメラ撮影機能を有効または無効に設定することができる。インカメラ撮影機能を有効に設定することで、インカメラで撮影した画像を、アウトカメラに撮影した画像に重畳合成して記録することが可能である。インカメラ撮影機能の設定は、ユーザが操作部を操作することにより有効または無効に設定可能である。インカメラ撮影機能の設定ではなく、インカメラで撮影した画像の表示の入／切をユーザの操作により設定可能とし、インカメラ画像の表示が入に設定されている場合にインカメラ撮影機能を有効にし、表示が切の場合にインカメラ撮影機能を無効にしてもよい。

【0040】

また、静止画・動画撮影同時記録モードにおいては、さらに、ユーザが操作部を操作することによりストップモーションの入／切を設定可能である。ストップモーション設定が入に設定されている場合は、撮影した静止画を動画に変換したストップモーションが作成され、作成されたストップモーションが、静止画・動画撮影同時記録モード用の動画ファイルに記録される。つまり、静止画撮影前の動画（ショートムービー）に続いて、ストップモーションが記録される。ストップモーションの設定が切に設定されている場合は、ストップモーションの生成および記録は行われない。また、ストップモーションの設定が入に設定され、かつ、インカメラ撮影機能を有効に設定されている場合には、撮影した静止画のストップモーションに、インカメラで撮影された動画が合成された合成動画が記録される。

【0041】

なお、静止画・動画撮影同時記録モードが設定されているときに、動画撮影ボタンで７０が押下された場合には、アウトカメラによる動画の撮影および記録処理が開始され、静止画の撮影は行われない。この時記録される動画には、インカメラ撮影機能の設定が有効に設定されている場合は、インカメラで撮影した動画合成されて記録され、インカメラ撮影機能の設定が無効の場合は、アウトカメラで撮影した動画のみが記録される。

【0042】

つまり、静止画・動画撮影同時記録モードが設定されている場合、シャッターボタン６０により静止画の撮影指示があった時には、静止画と動画が記録されるが、動画撮影ボタン７０により動画撮影の指示があっても、動画は記録されるが静止画は記録されない。

【0043】

＜静止画・動画撮影同時記録モードでの撮影処理について＞
図３、図４は、デジタルカメラ１００の静止画・動画撮影同時記録モード時の撮影動作について説明する。なお、これらの処理は、システム制御部５０が不揮発性メモリ５１から読み出したプログラムに基づいて各部の制御や演算処理、判断等を行うことにより実現される。

【0044】

まず、デジタルカメラ１００において、静止画・動画撮影同時記録モードが選択されると、ステップＳ３０１において、露出制御４０によって制御された適正露出の撮像素子１３の出力を基に表示用画像を生成する。つまり、アウトカメラで撮影したメイン画像に基づいて表示用画像が生成される。以後、アウトカメラの撮像素子１３の出力から作成された画像をメイン画像と呼ぶこととする。生成した表示用画像は、メモリ２５に一時的に格納する。

【0045】

ステップＳ３０２では、アウトカメラの撮像素子１３の出力であるメイン画像を基に動画記録用画像（メイン動画）を生成する。以後、アウトカメラの撮像素子１３の出力から作成された動画をメイン動画と呼ぶこととする。生成した動画記録用画像は、メモリ２５に一時的に格納する。

【0046】

ステップＳ３０３では、デジタルカメラ１００に設定されているインカメラに関する設定を確認する。インカメラ撮影機能が有効となるように設定されていた場合、ステップＳ３０４に進み、ステップＳ３０４〜Ｓ３０８の処理が行われる。インカメラ撮影機能が無効となるように設定されていた場合には、ステップＳ３０４〜Ｓ３０８処理は行わずに、ステップＳ３０９に進む。

【0047】

ステップＳ３０４では、デジタルカメラ１００に設定されているインカメラの表示位置、表示サイズに関する設定を不揮発性メモリ５１から取得する。本実施形態では、インカメラの表示位置、表示サイズをユーザがメニュー等で指示することができ、設定された表示位置、表示サイズの情報が不揮発性メモリ５１に格納されている。

【0048】

ステップＳ３０５にでは、露出制御４０によって制御された適正露出の撮像素子１０３の出力を基に、表示用のインカメラ画像を生成する。生成される画像のサイズは、ステップＳ３０４で取得したサイズを基に生成される。

【0049】

ステップＳ３０６において、ステップＳ３０１で作成したメイン画像の表示用画像とステップＳ３０５で作成された表示用インカメラ画像とを合成して、表示用合成画像を生成する。このとき作成される画像は、例えば図５（ｂ）のように、メイン画像の上にインカメラ画像が重畳合成された画像になる。図５のように、表示用のメイン画像５００に重畳して表示用インカメラ画像５０１を配置する場合、表示用インカメラ画像５０１を重畳する位置は、ステップＳ３０４で取得したインカメラ表示位置情報に従う。ステップ３０６で生成さした表示用合成画像は、ステップＳ３０１でメモリ２５に格納した表示用画像を上書きする形でメモリ２５に一時的に格納する。つまり、メモリ２５に格納される表示用画像が、ステップＳ３０１で生成したメイン画像から、ステップＳ３０６で生成した合成画像に置き換えられる。なお、本実施形態では、図５（ｂ）のように、メイン画像の上にインカメラ画像を重畳合成したが、インカメラ画の上に、小さなメイン画像を重畳合成するようにしてもよい。

【0050】

ステップＳ３０７では、、露出制御４０によって制御された適正露出の撮像素子１０３の出力を基に動画記録用のインカメラ動画を生成する。以後、インカメラの撮像素子１０３の出力から作成された動画をインカメラ動画と呼ぶこととする。生成されるインカメラ動画のサイズは、ステップＳ３０４で取得したサイズを基に生成される。

【0051】

ステップＳ３０８では、、ステップＳ３０２で作成した動画記録用のメイン動画とステップＳ３０７で作成された動画記録用のインカメラ動画を合成して動画記録用の動画として合成動画を生成する。インカメラ動画の合成位置は、表示用画像と同様の位置に合成されるようにするため、ステップＳ３０６と同様にインカメラ表示位置情報に従って、動画記録用メイン動画に動画記録用インカメラ動画を重畳して合成動画を作成する。つまり、Ｓ３０１またはＳ３０６で生成される表示用画像とＳ３０２またはＳ３０８で生成される動画記録用の画像サイズは、メイン画像、インカメラ画像ともにそれぞれ異なっている。しかし、表示用画像と動画記録用画像とで、メイン画像、インカメラ画像のサイズの比率が同じになるように作成され、表示されている画像と記録される画像が同じとなるようにそれぞれ表示用画像、動画用画像を作成する。３０８で生成した動画記録用の合成動画は、動画記録用画像としてメモリ２５に一時的に記録する。つまり、メモリ２５に記録される動画記録用画像が、ステップＳ３０２で生成したメイン動画から、ステップＳ３０８で生成した合成動画に書き換えられる。

【0052】

ステップＳ３０９では、メモリ２５に一時的に格納されている表示用画像を表示部２８に表示する。つまり、インカメラ撮影機能が有効に設定されている場合は、ステップＳ３０６で生成した、例えば図５（ｂ）のような合成画像が表示され、インカメラ撮影機能が無効の場合は、ステップＳ３０１で生成した図５（ａ）のようなメイン画像が表示される。

【0053】

次に、ステップＳ３１０において、メモリ２５から動画記録用画像を読み出して画像処理回路２０により動画圧縮処理を行い、動画データへと圧縮し、メモリ２５に格納する動画記録用画像の動画圧縮処理を開始する。インカメラ撮影機能が有効の場合は、ステップＳ３０８で生成した合成画像に基づいて動画データを生成し、インカメラ撮影機能が無効の場合は、ステップＳ３０２で生成したメイン画像に基づいて動画データを生成して、メモリ２５に格納する。また、動画データの圧縮とともに不図示のマイク等で入力された音声データについてもシステム制御部５０に含まれる音声圧縮処理を用いて、圧縮し、メモリ２５に格納する。ステップＳ３０１〜Ｓ３１０の処理は、基本的には、静止画・動画撮影同時記録モードの間繰り返し実行されることになる。そこで、ここでは、リングバッファ形式で最大４秒間分の圧縮された動画データをメモリ２５に保持しておく。

【0054】

このように、ステップＳ３０１〜Ｓ３１０においては、表示用画像の生成および表示処理と、動画記録用画像の生成および動画圧縮処理（メモリ２５への一時記録）が行われる。これらの処理は、上記の順番に限定されない。表示用画像の生成および表示処理と、動画記録用画像の生成および一時記録を並行して実行してもよい。

【0055】

次に、ステップＳ３１１において、静止画、動画同時記録モードからのモード変更が行われたか判定する。モード切り替えスイッチによるほかの撮影モードの変更や再生モードへの移行、メニューボタンによる設定メニューへの移行、電源スイッチによる電源ＯＦＦなどがモード変更に含まれる。ステップＳ３１１においてモード変更が行われたと判断された場合は、ステップＳ３１２に進み、動画圧縮処理を終了し、メモリ２５に格納していた動画データ、音声データを破棄して、静止画、動画同時記録モードを終了する。ステップＳ３１１においてモード変更が行われていないと判断された場合は、ステップＳ３１３に進む。

【0056】

ステップＳ３１３では、撮影設定の変更が行われたか確認する。変更されたかを確認する撮影設定項目としては、ホワイトバランス、露出補正値、ＭＦ・マクロ撮影などのフォーカス方法切り替え、静止画の画像サイズや圧縮率など撮影時に被写体や状況に応じて、即座に切り替えが必要となる撮影条件が含まれる。これらの撮影設定は、操作部６２に含まれる割り当てられた撮影設定変更ボタンや表示部２８に併設されたタッチパネルへのユーザ操作に応じて、ユーザが撮影設定を変更するためのＧＵＩ画面を表示中の画面に一時的に重畳して提供する。このＧＵＩ画面において操作部６２またはタッチパネルを操作することより撮影設定を変更することができる。ステップＳ３１３において撮影設定が変更されたと判断された場合は、ステップＳ３１４に進み、ユーザの変更に応じて撮影設定を変更し、撮影設定が変更されていない場合は、ステップＳ３１５に進む。

【0057】

ステップＳ３１５では、インカメラの設定が変更が行われたか確認する。インカメラの設定に関してもユーザの操作に応じて設定可能な項目がある。設定可能な項目としては、表示位置、表示サイズ、また、インカメラの撮影機能の有効・無効の切り替えがある。これらのインカメラに関する設定項目についても操作部６２や表示部２８に併設されたタッチパネルへのユーザ操作に応じてユーザが設定を変更できる。

【0058】

ステップＳ３１５でインカメラの設定が変更がされたと判定された場合は、ステップＳ３１６に進み、動画圧縮処理を停止し、メモリ２５に格納していた動画データ、音声データを破棄する。これは、インカメラ表示の設定を変更するとそれまでに記録された動画データとこれから撮影される動画データでインカメラ表示の切り替わりが記録され、動画データの品位が低下することを防ぐ目的がある。次に、ステップＳ３１７において、変更されたインカメラの設定が、インカメラ撮影機能の有効・無効設定であるかを確認する。ステップＳ３１７においてインカメラ撮影機能の有効・無効が切り替えられたと判定された場合は、ステップＳ３１８でインカメラ設定の有効・無効をユーザの指示に従って変更する。そして、ステップＳ３０１に戻り、変更された設定に基づいて、ステップＳ３０１からの処理を再度行う。ステップＳ３１７において変更されたインカメラの設定がインカメラ撮影機能の有効・無効ではなくインカメラ表示の位置、サイズであると判定された場合は、ステップＳ３１９において、ユーザの指示に従ってインカメラ表示の位置、サイズをそれぞれ変更する。その後、ステップＳ３０１に進み、新たに設定された内容に応じて再度ステップＳ３０１からの処理を行う。

【0059】

インカメラの設定が変更がされていない場合は、ステップＳ３１５からステップＳ３２０に進む。ステップＳ３２０では、シャッターボタン６０が半押しされ、ＳＷ１信号が入力されたか確認する。ＳＷ１信号が入力されていなければ、ステップＳ３２１にの処理を行わずにステップＳ３２２へ進む。ＳＷ１が入力された場合は、ステップＳ３２１に進み、デジタルカメラ１００に設定されているフォーカスモードや露出モードに応じた合焦・露出処理、つまり前述の撮影準備動作を行う。

【0060】

ステップＳ３２２において、シャッターボタン６０が全押しされ、ＳＷ２信号が入力されたか確認する。ＳＷ２信号が入力されていなければ、ステップＳ０１に戻り、処理を繰り返す。ステップＳ３２２において、ＳＷ２信号が入力されたと判定した場合、ステップＳ３２３において、表示部２８の画像表示を一時停止すると共に、ステップＳ３１０で開始した動画圧縮処理を一時停止させる。ここでは、すでにメモリ２５に格納されている動画データおよび音声データは保持しておく。

【0061】

次に、ステップＳ３２４において、アウトカメラの撮像素子１３の出力を基に記録用の静止画データ（メイン静止画）を撮影する。そして、ステップＳ３２５において、ステップＳ３２４で撮影した静止画データ（メイン静止画）から、画像確認用のレビュー用画像を生成する。そして、ステップＳ３２６において、画像処理回路２０によりステップＳ３２４で撮影した静止画データ（メイン静止画）に対して静止画圧縮処理を行い、記録用の静止画データ（ＪＰＥＧデータ）を生成し、メモリ２５に格納する。ここで、静止画・動画撮影同時記録モードにおいては、インカメラの撮影機能の有効無効の設定に関わらず、インカメラ画像が合成されていないメイン画像のみが静止画として外部記録媒体９１に記録されるため、メイン静止画に対して静止画圧縮処理を行っている。

【0062】

その後、図４に示すステップＳ４０１へ進む。

【0063】

ステップＳ４０１では、ステップＳ３２６でメモリ２５に格納された静止画データ（ＪＰＥＧデータ）を１つの静止画ファイル（ＪＰＥＧファイル）として外部記録媒体９１に記録する。

【0064】

次に、ステップＳ４０２において、メモリ２５に格納されている動画記録用の動画データの動画記録時間（撮影時間）が、所定の時間（）ｔ０より長いか否かの判定を行う。本実施形態では、ｔ０＝２秒とする。ステップＳ４０２において、動画記録時間が２秒以上であると判定した場合はステップＳ４０３へ進み、２秒よりも短いと判定した場合はステップＳ４０４へ進む。

【0065】

ステップＳ４０３において、メモリ２５に格納されている動画データ、音声データを外部記録媒体９１に記録する。ここで、動画データおよび音声データは、外部記録媒体９１に記録されているダイジェスト用動画ファイルの動画データおよび音声データに追加するようにして記録する。静止画撮影に対応する動画が区別可能となるように、静止画撮影毎に動画をチャプタ分けしてダイジェスト用動画ファイルに記録する。そして、それぞれのチャプタに対応する静止画ファイルを特定できるような静止画特定情報をチャプタ情報として記録し、静止画と動画の関連付けをする。静止画特定情報は、対応する静止画ファイルのファイル名または撮影日時を用いるとよい。チャプタ情報には、このような静止画特定情報や、動画データにおけるそれぞれのチャプタの開始位置（開始フレーム）および時間（フレーム数）または終了位置（終了フレーム）を記載し、ダイジェスト用動画ファイルのヘッダ部に記録するとよい。これにより、動画データ全体を解析しなくても、そのダイジェスト用動画ファイルに含まれている静止画ファイルに対応する動画を判断することが可能となる。また、外部記録媒体９１にダイジェスト用動画ファイルがない場合は、新しくダイジェスト用動画ファイルを作成して、メモリ２５から読み出した動画データおよび音声データを記録する。また、撮影日が切り替わった場合や、動画データのサイズが所定のサイズよりも大きくなった場合には、新しいダイジェスト用動画ファイルを作成して記録するようにしてもよい。ステップＳ４０４では、メモリ２５に格納していた動画データ、音声データを破棄する。つまり、動画記録時間（撮影時間）が２秒よりも短い場合は、ステップＳ３２５において静止画を撮影する前に撮影して、メモリ２５に一時保存していた動画データおよび音声データは外部記録媒体９１に記録されず保存されない。これは、あまりに短い動画だと、撮影時の状況を確認することができないため、本実施形態では、２秒よりも短い場合は外部記録媒体９１に記録しないようにしている。

【0066】

次にステップＳ４０５において、ステップＳ３２５で作成したレビュー用画像を、表示部２８に表示する。この表示により、ユーザは、撮影した静止画を確認することができる。

【0067】

ステップＳ４０６において、インカメラの撮影機能が有効か無効かの判定を行う。インカメラ撮影機能が有効であると判定した場合はステップＳ４０７へ進み、ステップＳ４０７〜Ｓ４１４のインカメラ画像を合成した静止画撮影後動画の生成処理を行う。インカメラ設定が無効の場合はステップＳ４１８へ進む。

【0068】

ステップＳ４０７では、ステップＳ３２４でアウトカメラで撮影したメイン静止画から動画記録用のストップモーション画像を生成する。つまり、メイン静止画を動画データに変換する。ここで、外部記録媒体９１に記録する静止画と動画のアスペクト比が異なる場合は、ストップモーション画像にメイン静止画全体が含まれるようにメイン静止画のリサイズ処理をおこない、メイン静止画領域以外は黒塗りにてストップモーション画像を生成する。例えば、静止画のアスペクトが４：３で動画のアスペクトが１６：９の場合、左右の領域を黒塗りしたストップモーション画像が生成される。

【0069】

次に、ステップＳ４０８では、ステップＳ３０５と同様に、撮像素子１０３の出力を基に表示用のインカメラ画像を生成する。

【0070】

そして、ステップＳ４０９では、ステップＳ３０６と同様に、表示用合成画像を生成する。ただし、ステップＳ４０９では、ステップＳ３２４でアウトカメラで撮影したメイン静止画の上に、ステップＳ４０８で生成したインカメラ画像を合成して表示用合成画像を生成する。

【0071】

次に、ステップＳ４１０では、ステップＳ３０７と同様に、撮像素子１０３の出力を基に動画記録用のインカメラ動画を生成する。

【0072】

そして、ステップＳ４１１では、ステップＳ４０９で生成した表示用合成画像を表示部２８に表示する。ここでは、アウトカメラで撮影し外部記録媒体９１に記録される静止画の上にインカメラで撮影した画像が動画として表示される。

【0073】

次に、ステップＳ４１２において、ステップＳ３０８と同様に、動画記録用画像として、インカメラ動画を合成した合成動画を生成する。ただし、ステップＳ４１２では、ステップＳ４０７で生成したストップモーション画像の上に、ステップＳ４１０で生成したインカメラ動画を合成して動画記録用合成画像を生成する。

【0074】

そして、ステップＳ４１３では、ステップＳ３１０と同様に、ステップＳ４１２んもおいて生成した合成動画に対して動画圧縮処理を行って動画データを生成し、静止画撮影後動画データとしてメモリ２５に格納する。また、動画データの圧縮とともに、不揮発性メモリ５１にあらかじめ記憶してあるシャッター音データおよび、不図示のマイク等で入力された音声データについてもシステム制御部５０に含まれる音声圧縮処理を用いて、圧縮し、メモリ２５に格納する。

【0075】

ステップＳ４１４では、ステップＳ４１３にて生成しメモリ２５に格納されている静止画撮影後動画データの動画記録時間（撮影時間）が所定の時間ｔ１以上であるかの判定を行う。本実施形態では、ｔ１＝２秒とする。動画データの動画記録時間が２秒以上であると判定した場合はステップＳ４２０へ進む。動画データの動画記録時間が２秒よりも短いと判定した場合は、ステップＳ４０８へ進み、ステップＳ４０８〜Ｓ４１４の処理を繰り返す。つまり、インカメラ撮影機能が有効に設定されている場合、静止画のレビュー表示を開始した後に、静止画撮影後動画データの動画記録時間が２秒になるまで、インカメラにより動画が撮影される。そして、静止画撮影後動画データの動画記録時間が２秒になるまで、ストップモーション画像とインカメラ動画を合成した画像の表示と、合成画像の動画圧縮処理が繰り返される。

【0076】

また、ステップＳ４１１において、アウトカメラ撮影して外部記録媒体９１に記録した静止画を表示している間に、インカメラにより動画を撮影している。そのため、表示部２８により撮影した静止画を確認しているユーザ（撮影者）の表情をインカメラで撮影して、静止画と共に記録することができる。

【0077】

ステップＳ４１５において、静止画撮影前に撮影した動画記録用の動画データの動画記録時間（撮影時間）がｔ０以上であるか否か判定を行う。動画記録時間の判定の代わりに、ステップＳ４０４において動画データのキャンセル処理が行われたか否かを判定してもよい。静止画撮影前動画の動画記録時願がｔ０より短いためキャンセル処理が行われた場合は、ステップＳ３０１へ戻り、最初から処理を繰り返す。静止画撮影前動画の動画記録時願がｔ０以上でありキャンセル処理が行われなかったと判定した場合はステップＳ４１６へと進む。

【0078】

ステップＳ４１６では、ストップモーション設定が入か切かの判定を行う。ストップモーション設定が入の場合はステップＳ４１７へ進み、ストップモーション設定が切の場合は、ステップＳ３０１へ戻る。

【0079】

ステップＳ４１７では、ステップＳ４０７と同様にストップモーション画像を生成する。

【0080】

次に、ステップＳ４１８において、ステップＳ４１７で生成したストップモーション画像に対して動画圧縮処理を行い、静止画撮影後動画データとしてメモリ２５に格納する。ここで圧縮する音声データは不揮発性メモリ５１にあらかじめ記憶してあるシャッター音データおよび無音データである。

【0081】

ステップＳ４１９において、ステップＳ４１８にて動画圧縮処理を行い、メモリ２５に一時保存されている静止画撮影後動画データの動画記録時間（撮影時間）が、所定の時間ｔ２以上であるかの判定を行う。本実施形ではｔ２＝１秒とする。ステップＳ４１９において静止画撮影後動画データの動画記録時間が１秒以上であると判断されるまで、Ｓ４１８のストップモーション画像の動画圧縮処理が繰り返される。

【0082】

ステップＳ４２０において、ステップＳ４１３またはステップＳ４１９にて動画圧縮処理により作成した静止画撮影後動画データを外部記録媒体９１に記録する。記録する際は、ステップＳ４０３と同様にダイジェスト用動画ファイルの動画データおよび音声データに追加するようにして記録する。つまり、ステップＳ４０３で静止画撮影前の動画データを記録している場合には、静止画撮影前動画データに続いて静止画撮影後動画データが記録されることになる。

【0083】

ステップＳ４２１において、ステップＳ４２０の静止画撮影後動画データの記録が完了したか否かの判定を行う。静止画撮影後動画データの記録が完了したと判定した場合は、メモリ２５に一時保存している動画データを消去し、Ｓ３０１に戻る。

【0084】

＜各種設定と記録される動画の動画記録パターンについて＞
次に、静止画・動画撮影同時記録モードで上記の撮影処理を行った場合に外部記録媒体９１に記録される動画データについて、図６、図７を参照して説明する。

【0085】

図６は、動画記録パターンを説明するための図である。図７は、インカメラの撮影機能設定、静止画撮影前動画データの記録時間（撮影時間）、ストップモーション設定と、静止画・動画撮影同時記録モードで外部記録媒体９１に記録される動画のパターンの関係を示す図である。ここで、静止画撮影前動画データの記録時間とは、静止画撮影前にメモリ２５に一時記録されている動画データの動画記録時間（撮影時間）のことを示している。

【0086】

図６を参照して各動画記録パターンについて説明する。

【0087】

動画記録パターン１では、２〜４秒の静止画撮影前動画と２秒の静止画撮影後動画が記録される。動画記録パターン１では、アウトカメラで撮影したメイン動画にインカメラで撮影したインカメラ動画が合成された合成動画が静止画撮影前動画として記録される。そして、アウトカメラで撮影した静止画から生成したストップモーションにインカメラで撮影したインカメラ動画が合成された合成動画が静止画撮影後動画として記録される。また、静止画撮影前動画の音声データとしては、マイク等で入力された環境音が記録され、静止画撮影後動画の音声データは、まずはシャッター音データが記録され、それに続いて環境音が記録される。

【0088】

動画記録パターン２では、静止画撮影前動画は記録されず、２秒の静止画撮影後動画のみが記録される。動画記録パターン２では、アウトカメラで撮影した静止画から生成したストップモーションにインカメラで撮影したインカメラ動画が合成された合成動画が静止画撮影後動画として記録される。また、静止画撮影後動画の音声データは、まずはシャッター音データが記録され、それに続いて環境音が記録される。つまり、動画記録パターン２では、動画記録パターン１で記録される静止画撮影後動画と同様の形式で静止画撮影後動画の動画データおよび音声データが記録される。

【0089】

動画記録パターン３では、２〜４秒の静止画撮影前動画と１秒の静止画撮影後動画が記録される。動画記録パターン３では、インカメラ動画が合成されていないアウトカメラで撮影したメイン動画が静止画撮影前動画として記録される。そして、アウトカメラで撮影した静止画から生成したストップモーションが静止画撮影後動画として記録される。

【0090】

また、静止画撮影前動画の音声データとしては、マイク等で入力された環境音が記録され、静止画撮影後動画の音声データは、シャッター音データのみが記録され、その後、無音となって記録される。

【0091】

動画記録パターン４では、２〜４秒の静止画撮影前動画のみが記録され、の静止画撮影後動画は記録されない。動画記録パターン４では、インカメラ動画が合成されていないアウトカメラで撮影したメイン動画が静止画撮影前動画として記録される。また、静止画撮影前動画の音声データとしては、マイク等で入力された環境音が記録される。つまり、つまり、動画記録パターン４では、動画記録パターン３で記録される静止画撮影前動画と同様の形式で、記録される静止画撮影後動画の動画データおよび音声データが記録される。

【0092】

ここで、ステップＳ３０１〜Ｓ３１０の処理においてメモリ２５に一時する動画データを、最大４秒間分と設定しているため、静止画撮影前動画は４秒以下になる。さらに、ステップＳ４０２〜Ｓ４０４において、メモリ２５に格納されている静止画撮影前動画データの記録時間が２秒以上である場合にしか、静止画撮影前動画は外部記録媒体９１記録されないため、静止画撮影前動画は２〜４秒となる。

【0093】

また、動画記録パターン１および２の場合は、静止画撮影後動画として２秒の動画を記録するのに対し、動画記録パターン３では、静止画撮影後動画として１秒の動画を記録する。これは、動画記録パターン１および２の場合はストップモーションにインカメラ動画を合成して、動きのある合成動画が記録されるのに対し、動画記録パターン３では動きのないストップモーションを記録するため、記録時間を短くしている。本実施形態では、動画記録パターン１および２のように、動きのある合成動画が記録される場合に記録する動画を２秒（ｔ１）とし、動画記録パターン３のように動きのない動画を記録する場合は、１秒（ｔ２）と設定している。

【0094】

次に、図７を参照して、各設定と動画記録パターンの関係について説明する。

【0095】

まず、インカメラ撮影機能が有効に設定されている場合は、動画記録パターン１または２となる。つまり、インカメラ撮影機能が有効の場合、静止画撮影前動画データの記録時間およびストップモーションの設定に関わらず、必ず静止画撮影後動画としてストップモーションにインカメラ動画が合成された合成動画が記録される。そのため、静止画を観賞中の撮影者の表情や反応を記録することができる。そして、インカメラ撮影機能が有効である場合、静止画撮影前動画データの記録時間が２秒以上であるかに応じて、静止画撮影前動画としてメイン動画にインカメラ動画が合成された合成画像を記録するかが変わる。つまり、予め決められているｔ０時間以上であるかに応じて合成画像を記録するかが変わる。静止画撮影前動画データの記録時間が２秒（ｔ０）以上の場合は、静止画撮影前動画を記録する。そのため、静止画撮影直前の被写体や撮影者の状況や表情を記録することができる。静止画撮影前動画データの記録時間が２秒（ｔ０）未満の場合は、静止画撮影前動画は記録しない。

【0096】

インカメラ撮影機能が無効に設定されており、静止画撮影前動画データの記録時間が２秒（ｔ０）未満の場合については、ストップモーションの設定に関わらず動画（静止画撮影前動画および静止画撮影後動画）を記録しない。この場合、静止画撮影前動画データの記録時間が２秒未満なため、ステップＳ４０２〜Ｓ４０４で説明したように静止画撮影前動画は記録されない。静止画撮影後動画については、ストップモーションの設定に応じてストップモーションを静止画撮影後動画として記録することもできるが、インカメラ撮影機能が無効に設定されている場合は、インカメラ動画が合成されないストップモーションとなる。インカメラ動画が合成されないと、動きのない動画になってしまう。そのため、インカメラ撮影機能が無効に設定されており、静止画撮影前動画データの記録時間が２秒未満の場合については、ストップモーションの設定に関わらず静止画撮影後動画も記録しないようにしている。

【0097】

インカメラ撮影機能が無効に設定されており、静止画撮影前動画データの記録時間が２秒（ｔ０）以上の場合については、動画記録パターン３または４となり、静止画撮影前動画が記録される。そのため、静止画撮影直前の状況や被写体の表情の変化等を記録することができる。そして、ストップモーションの設定に応じて、記録するかが決定される。ストップモーションの設定が入の場合は、動画記録パターン３となり、インカメラ動画が合成されないストップモーションが静止画撮影後動画として記録される。ストップモーションの設定が切の場合は、動画記録パターン４となり静止画撮影後動画は記録されない。動画記録パターン３については、動きのないストップモーションを静止画撮影後動画として記録している。これは、撮影前動画と共にストップモーションを記録することで、静止画撮影前と撮影時の画像を両方確認することができるようになるため、動きのないストップモーションを記録するようにしている。

【0098】

静止画撮影前動画データの記録時間が２秒（ｔ０）以上の場合は、動画記録パターン１または、３または４となり、他の設定に関わらず必ず静止画撮影前動画が記録される。また、静止画撮影前動画データの記録時間が２秒（ｔ０）未満の場合は、動画記録パターン２または動画を記録しないとなる。通常は、静止画撮影前動画データの記録時間が２秒未満の場合は、動画（静止画撮影前動画および静止画撮影後動画）を記録しないのだが、インカメラ撮影設定が有効の場合は、静止画撮影後にインカメラ動画を取得可能である。そのため、動画記録パターン２のように、ストップモーション画像にインカメラ動画を合成した合成動画を静止画撮影後動画として記録するようにしている。

【0099】

このように、静止画・動画撮影同時記録モードにおいて、上記のように撮影処理を行うことで、図７で示した設定に応じて、適した動画記録パターンで動画を記録することができる。なお、静止画・動画撮影同時記録モードにおいて、動画については図７で示した設定に応じて動画記録パターンや記録するか否かが変化するが、静止画については図７で示した設定に関わらず、記録サイズや圧縮率に応じて記録される。

【0100】

（その他の実施形態）
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれらの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態では、本発明を適応した撮像装置を例に説明したが、カメラ付き携帯電話や携帯ゲーム機等の電子機器で本発明を実施してもよい。また、１つの装置で上述の実施形態の機能を実現せずに、複数の装置、例えば、複数の撮像部を有する撮像装置、表示部を有する表示装置、システム制御部を有する制御装置を接続したシステムで実施してもよい。また、上述の実施形態の一部を適宜組み合わせて実施してもよい。

【0101】

また、上述の実施形態の機能を実現するソフトウェアのプログラムを、記録媒体から直接、或いは有線／無線通信を用いてプログラムを実行可能なコンピュータを有するシステム又は装置に供給し、そのプログラムを実行する場合も本発明に含む。従って、本発明の機能処理をコンピュータで実現するために、該コンピュータに供給、インストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明の機能処理を実現するためのコンピュータプログラム自体も本発明に含まれる。その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。プログラムを供給するための記録媒体としては、例えば、ハードディスク、磁気テープ等の磁気記録媒体、光／光磁気記憶媒体、不揮発性の半導体メモリでもよい。また、プログラムの供給方法としては、コンピュータネットワーク上のサーバに本発明を形成するコンピュータプログラムを記憶し、接続のあったクライアントコンピュータはがコンピュータプログラムをダウンロードしてプログラムするような方法も考えられる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】