特許 6242425 撮影機器及び動画像データの記録方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6242425

(24)【登録日】2017年11月17日

(45)【発行日】2017年12月6日

(54)【発明の名称】撮影機器及び動画像データの記録方法

(51)【国際特許分類】

   H04N 5/232 20060101AFI20171127BHJP

   H04N 5/92 20060101ALI20171127BHJP

【ＦＩ】

   H04N5/232 930

   H04N5/92

【請求項の数】3

【全頁数】24

(21)【出願番号】特願2016-71964(P2016-71964)

(22)【出願日】2016年3月31日

(62)【分割の表示】特願2012-118778(P2012-118778)の分割

【原出願日】2012年5月24日

(65)【公開番号】特開2016-131397(P2016-131397A)

(43)【公開日】2016年7月21日

【審査請求日】2016年3月31日

(73)【特許権者】

【識別番号】000000376

【氏名又は名称】オリンパス株式会社

(74)【代理人】

【識別番号】100076233

【弁理士】

【氏名又は名称】伊藤 進

(74)【代理人】

【識別番号】100101661

【弁理士】

【氏名又は名称】長谷川 靖

(74)【代理人】

【識別番号】100135932

【弁理士】

【氏名又は名称】篠浦 治

(72)【発明者】

【氏名】渋谷 浩之

(72)【発明者】

【氏名】原 聡司

【審査官】 鹿野 博嗣

(56)【参考文献】

【文献】 特許第５９１２０６２（ＪＰ，Ｂ２）

【文献】 特開２０１２−０３４２４２（ＪＰ，Ａ）

【文献】 特開２００９−２９０８６０（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２３２

Ｈ０４Ｎ ５／９２

(57)【特許請求の範囲】

【請求項1】

被写体像を撮像する撮像部と、
上記撮像部によって取得された画像データに基く画像を表示する表示部と、
上記表示部に表示中の画像内に含まれる被写体像を検出する被写体検出部と、
上記被写体検出部によって検出された被写体像を識別可能に表示すると共に、記録モードを識別可能に表示する識別用表示枠を表示させる記録枠表示部と、
上記識別用表示枠に応じて記録用画像領域を設定する記録領域設定部と、
上記記録領域設定部によって設定された複数の上記記録用画像領域に各対応する複数の動画像データの同時記録処理を実行する制御部と、
を具備し、
上記表示部の表示画面内において上記被写体検出部によって検出された複数の被写体像に各対応する複数の上記識別用表示枠に重なりがない場合には、
上記記録枠表示部は、上記複数の被写体像に各対応する上記複数の識別用表示枠を表示し、
上記記録領域設定部は、上記複数の識別用表示枠に応じた上記記録用画像領域を設定し、
上記表示部の表示画面内において上記被写体検出部によって検出された複数の被写体像に各対応する複数の上記識別用表示枠に重なりが生じた場合には、
上記記録枠表示部は、サイズの異なる上記複数の識別用表示枠が存在する際に、サイズの小さい識別用表示枠を拡大表示させてサイズが大きい識別用表示枠へ近付けた後、上記複数の識別用表示枠を合成して得た新たな識別用表示枠を表示させ、
上記記録領域設定部は、上記新たな識別用表示枠に対応する新たな記録用画像領域を設定することを特徴とする撮影機器。

【請求項2】

上記表示部の表示画面上に配置されるタッチパネル部を、さらに具備し、
上記記録枠表示部は、上記タッチパネル部の指示入力を受けて上記記録モードを設定し、設定された記録モードに対応する上記識別用表示枠を表示させることを特徴とする請求項１に記載の撮影機器。

【請求項3】

被写体像を撮像し、取得された画像データに基く画像を表示部に表示するステップと、
上記表示部に表示中の画像内に含まれる複数の被写体像を検出するステップと、
検出された複数の被写体像を個々に識別可能に表示すると共に、予め設定された記録モードを識別可能に表示する識別用表示枠を表示させるステップと、
複数の上記識別用表示枠に対応する複数の記録用画像領域を設定するステップと、
設定された複数の上記記録用画像領域に各対応する複数の動画像データの同時記録処理を実行するステップと、
表示部に表示中の表示画面内において上記検出された複数の被写体像に各対応する複数の上記識別用表示枠の重なりを判定するステップと、
上記判定ステップにおける判定の結果、上記複数の識別用表示枠が重なっていない場合には、
上記複数の被写体像に各対応する上記複数の識別用表示枠を表示し、上記複数の識別用表示枠に応じた上記記録用画像領域を設定し、各領域に対応する複数の動画像データを同時記録し、
上記判定ステップにおける判定の結果、上記複数の識別用表示枠が重なった場合には、
サイズの異なる上記複数の識別用表示枠が存在する際に、サイズの小さい識別用表示枠を拡大表示させてサイズが大きい識別用表示枠へ近付けた後、上記複数の識別用表示枠を合成して新たな識別用表示枠を表示させ、上記新たな識別用表示枠に対応する新たな記録用画像領域を設定し、対応する領域の動画像データを上記複数の画像データのそれぞれに継続して記録することを特徴とする動画像データの記録方法。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、マルチレコーディング機能を有する撮影機器と、この撮影機器を用いた動画像データの記録方法に関するものである。

【背景技術】

【0002】

近年、デジタルカメラ等の撮影機器において、単一の撮影機器を用いて撮影を行うのに際し、撮影範囲内における複数の領域に各対応する複数の画像を同時に撮影して、内容の異なる画像（静止画像，動画像）を同時に記録し得るように、例えば複数の画像処理エンジン等を具備することで、いわゆるマルチレコーディング機能を実現した撮影機器が実用化されている。

【0003】

例えば、特開２０１０−２６８０１９号公報等によって開示されている撮影機器は、第２画像（一部領域）を含む第１画像（全体）を取得する画像取得手段と、第１画像とは異なる第２画像を第１画像と略同時に取得する画像取得手段との二つの画像取得手段を有し、第１画像に対して第２画像を合成処理し、その結果得られた合成静止画像を記録するというものである。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１０−２６８０１９号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

ところが、上記特開２０１０−２６８０１９号公報等によって開示されている手段は、取得された２つの静止画像データを合成することによって、その合成静止画像を得ることを主眼として構成されているものであって、例えば複数の動画像を取得して、それらを利用することについては開示されていない。

【0006】

近年においては、一般に普及している安価な小型デジタルカメラによっても、高画質な動画像の撮影を極めて容易に行なうことができるようになっている。したがって、近年、動画像を撮影する機会は急速に増えつつあり、従来の静止画像だけでなく、動画像の撮影手法についての多様化が望まれている。

【0007】

本発明は、上述した点に鑑みてなされたものであって、その目的とするところは、マルチレコーディング機能を有する撮影機器において、内容の異なる複数の動画像の同時記録を容易に行なうことができる撮影機器と、その動画像データの記録方法を提供することである。

【課題を解決するための手段】

【0008】

上記目的を達成するために、本発明の一態様の撮影機器は、被写体像を撮像する撮像部と、上記撮像部によって取得された画像データに基く画像を表示する表示部と、上記表示部に表示中の画像内に含まれる被写体像を検出する被写体検出部と、上記被写体検出部によって検出された被写体像を識別可能に表示すると共に、記録モードを識別可能に表示する識別用表示枠を表示させる記録枠表示部と、上記識別用表示枠に応じて記録用画像領域を設定する記録領域設定部と、上記記録領域設定部によって設定された複数の上記記録用画像領域に各対応する複数の動画像データの同時記録処理を実行する制御部と、を具備し、上記表示部の表示画面内において上記被写体検出部によって検出された複数の被写体像に各対応する複数の上記識別用表示枠に重なりがない場合には、記記録枠表示部は、上記複数の被写体像に各対応する上記複数の識別用表示枠を表示し、上記記録領域設定部は、上記複数の識別用表示枠に応じた上記記録用画像領域を設定し、上記表示部の表示画面内において上記被写体検出部によって検出された複数の被写体像に各対応する複数の上記識別用表示枠に重なりが生じた場合には、上記記録枠表示部は、サイズの異なる上記複数の識別用表示枠が存在する際に、サイズの小さい識別用表示枠を拡大表示させてサイズが大きい識別用表示枠へ近付けた後、上記複数の識別用表示枠を合成して得た新たな識別用表示枠を表示させ、上記記録領域設定部は、上記新たな識別用表示枠に対応する新たな記録用画像領域を設定する。

【0009】

また、本発明の一態様の動画像データの記録方法は、被写体像を撮像し、取得された画像データに基く画像を表示部に表示するステップと、上記表示部に表示中の画像内に含まれる複数の被写体像を検出するステップと、検出された複数の被写体像を個々に識別可能に表示すると共に、予め設定された記録モードを識別可能に表示する識別用表示枠を表示させるステップと、複数の上記識別用表示枠に対応する複数の記録用画像領域を設定するステップと、設定された複数の上記記録用画像領域に各対応する複数の動画像データの同時記録処理を実行するステップと、表示部に表示中の表示画面内において上記検出された複数の被写体像に各対応する複数の上記識別用表示枠の重なりを判定するステップと、上記判定ステップにおける判定の結果、上記複数の識別用表示枠が重なっていない場合には、上記複数の被写体像に各対応する上記複数の識別用表示枠を表示し、上記複数の識別用表示枠に応じた上記記録用画像領域を設定し、各領域に対応する複数の動画像データを同時記録し、上記判定ステップにおける判定の結果、上記複数の識別用表示枠が重なった場合には、サイズの異なる上記複数の識別用表示枠が存在する際に、サイズの小さい識別用表示枠を拡大表示させてサイズが大きい識別用表示枠へ近付けた後、上記複数の識別用表示枠を合成して新たな識別用表示枠を表示させ、上記新たな識別用表示枠に対応する新たな記録用画像領域を設定し、対応する領域の動画像データを上記複数の画像データのそれぞれに継続して記録する。

【発明の効果】

【0010】

本発明によれば、マルチレコーディング機能を有する撮影機器において、内容の異なる複数の動画像の同時記録を容易に行なうことができる撮影機器と、その動画像データの記録方法を提供することができる。

【図面の簡単な説明】

【0011】

【図1】本発明の概念を説明する図

【図2】本発明の一実施形態の撮影機器（カメラ）の内部構成の概略を示すブロック構成図

【図3】本発明の一実施形態の撮影機器（カメラ）の撮影動作時の処理シーケンスを示すフローチャート

【図4】本発明の一実施形態における撮影機器（カメラ）において、タッチ操作で記録枠を表示させると共に、撮影記録モードを選択設定する際の作用の概略を示す図

【図5】図３の処理シーケンスに対応し、撮影動作時の記録枠の表示変化を示す図

【図6】図５の各タイミングで記録される第１被写体を主要被写体とする動画像の変化を示す図

【図7】図５の各タイミングで記録される第２被写体を主要被写体とする動画像の変化を示す図

【図8】本発明の一実施形態の撮影機器（カメラ）の表示部に表示される画像の表示画面上に想定する座標系を示す図

【図9】本発明の一実施形態の撮影機器（カメラ）における表示画面（全体画像）において、２つの記録枠の重なりを判定する際の記録枠重なり判定処理シーケンスを示すフローチャート

【図10】本発明の一実施形態の撮影機器（カメラ）の表示部に表示される複数の各記録枠の座標系を示す図

【図11】本発明の一実施形態の撮影機器（カメラ）の表示部に表示される合成記録枠の座標系を示す図

【図12】本発明の一実施形態の撮影機器（カメラ）において合成記録枠表示処理シーケンスのうち合成記録枠のＸ１の決定シーケンスを示すフローチャート

【図13】本発明の一実施形態の撮影機器（カメラ）において合成記録枠表示処理シーケンスのうち合成記録枠のＸ２の決定シーケンスを示すフローチャート

【図14】本発明の一実施形態の撮影機器（カメラ）において合成記録枠表示処理シーケンスのうち合成記録枠のＹ１の決定シーケンスを示すフローチャート

【図15】本発明の一実施形態の撮影機器（カメラ）において合成記録枠表示処理シーケンスのうち合成記録枠のＹ２の決定シーケンスを示すフローチャート

【図16】本発明の一実施形態の撮影機器（カメラ）における表示画面上の２つの記録枠表示が合成記録枠に変化する際のようすを示す概念図

【図17】図１６の記録枠サイズ変更時のようすをグラフ化した図であって、記録枠のＸ軸上の点の拡大時，縮小時の変遷を示す図

【図18】図１６の記録枠サイズ変更時のようすをグラフ化した図であって、記録枠のＹ軸上の点の拡大時，縮小時の変遷を示す図

【発明を実施するための形態】

【0012】

以下、図示の実施の形態によって本発明を説明する。
本発明の一実施形態は、例えば光学レンズにより形成される光学像を固体撮像素子を用いて光電変換し、これによって得られる画像信号を静止画像又は動画像を表わすデジタル画像データに変換し、こうして生成されたデジタルデータを記録媒体に記録し、また記録媒体に記録されたデジタル画像データに基いて静止画像又は動画像を表示装置に再生表示し得るように構成され、かつ複数の画像処理エンジンを備えて一操作で複数の画像データ（静止画像，動画像）を取得し得るように構成された撮影機器であるデジタルカメラに適用した場合の例示である。

【0013】

なお、以下の説明に用いる各図面においては、各構成要素を図面上で認識可能な程度の大きさとするため、各構成要素毎に縮尺を異ならせて示している場合がある。したがって、本発明は、これらの図面に記載された構成要素の数量，構成要素の形状，構成要素の大きさの比率及び各構成要素の相対的な位置関係は、図示の形態のみに限定されるものではない。

【0014】

図１は、本発明の概念を説明する図である。図２は、本発明の一実施形態の撮影機器（カメラ）の内部構成の概略を示すブロック構成図である。図３〜図１８は、本実施形態の撮影機器（カメラ）における作用を説明する図である。このうち、図３は本実施形態の撮影機器（カメラ）の撮影動作時の処理シーケンスを示すフローチャートである。

【0015】

図４は、本実施形態における撮影機器（カメラ）においてタッチ操作を行って記録枠を表示させると共に、撮影記録モードを選択設定する際の作用の概略を示す図である。図５は図３の処理シーケンスに対応し、撮影動作時の記録枠の表示変化を示す図である。図６，図７は図５の各タイミングで記録される動画像の変化を示す図であって、図６は第１被写体を主要被写体とする動画像を示し、図７は第２被写体を主要被写体とする動画像を示している。図８は本実施形態の撮影機器（カメラ）の表示部に表示される画像の表示画面上に想定する座標系の例を示す。図９は本実施形態の撮影機器（カメラ）における表示画面（全体画像）において、２つの記録枠の重なりを判定する際の記録枠重なり判定処理シーケンスを示すフローチャートである。図１０は本実施形態の撮影機器（カメラ）の表示部に表示される複数の各記録枠の座標系の例を示す図である。図１１は本実施形態の撮影機器（カメラ）の表示部に表示される合成記録枠の座標系の例を示す図である。

【0016】

図１２〜図１４は合成記録枠が生成され表示される際の合成記録枠表示処理シーケンスを示すフローチャートである。このうち図１２は合成記録枠のＸ１の決定シーケンスを、図１３は合成記録枠のＸ２の決定シーケンスを、図１４は合成記録枠のＹ１の決定シーケンスを、図１５は合成記録枠のＹ２の決定シーケンスを、それぞれ示す。図１６は、表示画面において２つの記録枠の表示が合成記録枠に変化する際のようすを示す概念図である。図１７，図１８は、図１６の記録枠サイズ変更時のようすをグラフ化した図である。図１７は記録枠のＸ軸上の点の、図１８は記録枠のＹ軸上の点の、それぞれ拡大時，縮小時の変遷を示している。

【0017】

まず、図１を用いて本発明の概念を簡単に説明する。
撮影機器を用いて複数の被写体を撮影対象として撮影を行うものとする。
撮影者は撮影機器を所望の撮影対象に向けて構える。この場合において、撮影機器の表示部の表示画面（符号６０）には、図１に示されるような表示画像が表示される。ここで、符号１０１，１０２は撮影対象となる複数の被写体とし、それぞれ第１被写体１０１，第２被写体１０２というものとする。

【0018】

また、図１（Ａ）に示す符号６７ａ，６７ｂは、撮影対象（記録対象）とする複数の被写体、即ち第１被写体１０１，第２被写体１０２を識別可能に表示するための識別用表示枠である撮影対象枠（記録枠）である。この撮影対象枠（以下、記録枠という）は、例えば顔検出機能によって検出された顔画像領域に対して自動的に附される顔検出枠等が相当する。

【0019】

なお、記録枠は、例えばタッチパネル等の指示入力装置を操作することによって、表示画面に表示中の画像から所望の被写体を選択設定し、その選択設定結果を受けて表示させるようにしてもよい。その場合においても、顔検出機能によって検出された顔検出枠を表示させた後、この顔検出枠を選択設定する際の設定候補とするようにしてもよい。撮影者は、設定候補を示す表示から所定の操作（タッチ操作）等によって撮影を所望する被写体の選択設定を行う。これにより、選択設定された被写体に重畳させて記録枠を表示させる。

【0020】

図１（Ａ）に示す状態は、撮影準備状態において、撮影対象の複数（本例示では２つ）の被写体が設定された直後の状態を示している。上述のようにして、記録枠（６７ａ，６７ｂ）が設定されると、各記録枠（６７ａ，６７ｂ）は、各対応する被写体の動きに合わせて追従して移動する。

【0021】

続いて、撮影記録を行う際の記録モードを設定する。撮影記録モードとしては、例えば、
所望被写体の顔領域を主として設定する顔アップモード，
所望被写体の顔を含む半身が入るように設定するバストアップモード，
所望被写体の顔を含む全身が入るように設定する全身モード，
等がある。

【0022】

なお、バストアップモードは、検出した顔領域を中心としその顔領域の下側に向けて画像全体の高さが顔領域画像の２倍の高さとなる領域が設定される。また、全身モードは、検出した顔領域を中心としその顔領域の下側に向けて画像全体の高さが顔領域画像の５倍の高さとなる領域が設定される。ただし、バストアップモード，全身モードも共に、顔領域を始点として上記した各モードに応じた領域サイズが設定されるが、その場合に表示部６０の表示画像からはみ出る部分はカットする等、自動的に記録領域の調整がなされる。この調整は、後述する記録領域設定部６８により行われる。

【0023】

これらの撮影記録モードは撮影者が任意に選択設定できる。その選択設定操作は、例えばタッチパネル等の指示入力装置を操作して行う。そして、各記録モードに応じて記録枠の表示を異ならせるようにする。したがって、この点において、記録モードを識別可能に表示する識別用表示枠として機能する。

【0024】

撮影者が撮影記録モードを選択設定すると、図１（Ｂ）に示すように、複数の被写体を含み選択設定された記録枠６９ａ，６９ｂが表示される。ここで、記録枠６９ａは第１被写体１０１を含む顔検出枠６７ａに基く枠表示であり、記録枠６９ｂは第２被写体１０２を含む顔検出枠６７ｂに基く枠表示である。この記録枠６９ａ，６９ｂも、各対応する被写体の動きに合わせて追従して移動する。

【0025】

この状態で、撮影動作を開始するレリーズ操作を行うと、各記録枠６９ａ，６９ｂにそれぞれ対応する複数の動画像の記録が開始される。ここで、記録枠６９ａ，６９ｂは、上述したように、撮影対象の主要領域を示すための枠表示である。したがって、実際に記録される動画像は、記録枠６９ａ，６９ｂを主要領域として含む規定の縦横比、例えば１６：９，４：３等の動画像として記録される。なお、これら各被写体を主要とする複数の動画像以外に、表示画面で示される全体領域の動画像を同時に記録するようにしてもよい。
このときの様子を、図１（Ｃ）に示す。

【0026】

図１（Ｃ）の状態から撮影を継続していると、表示画面内において複数の被写体１０１，１０２には動きが生じる。ここで、例えば被写体１０１，１０２が表示画面内において互いに近付く方向に移動して、図１（Ｄ）に示すように、２つの記録枠６９ａ，６９ｂが所定量以上重なり合ったとする。

【0027】

すると、２つの記録枠６９ａ，６９ｂは、図１（Ｅ）に示すように、１つの大きな記録枠６９ｃに切り換わる。この新たな記録枠６９ｃは、２つの記録枠６９ａ，６９ｂが対応する２つの被写体１０１，１０２を共に含むように、２つの記録枠６９ａ，６９ｂに基いて形成される合成記録枠である。この合成記録枠は、２つの記録枠６９ａ，６９ｂのサイズ（記録モード）に応じて、そのサイズが設定される。例えば、２つの記録枠６９ａ，６９ｂのサイズ（記録モード）が互いに対して異なる場合には、大きい記録枠（この例では記録枠６９ｂ）のサイズに準じて新たな記録枠６９ｃが設定される。そして、記録枠６９ｃを主要とする動画像は、上記２つの動画像のそれぞれに継続して記録される。

【0028】

なお、この場合においても、元の２つの記録枠６９ａ，６９ｂのデータは保持しており、枠表示がなされないだけで各対応する被写体の追従処理は継続して行っている。

【0029】

図１（Ｅ）の状態で撮影を継続していると、例えば被写体１０１，１０２が表示画面内において互いに遠ざかる方向に移動したものとする。２つの被写体１０１，１０２に各対応する２つの記録枠６９ａ，６９ｂ（このときは非表示状態にある）の重なりが所定量以下になると、記録枠６９ｃは、図１（Ｆ）に示すように、再度２つの記録枠６９ａ，６９ｂに切り換わり、引き続き、撮影動作を停止させる操作が行われるまで、異なる複数の動画記録が継続する。

【0030】

次に、本発明の一実施形態の撮影機器（以下、単にカメラという）の内部構成の概略を図２を用いて以下に説明する。

【0031】

図２に示すように、本実施形態のカメラ１は、撮影光学系４１と、絞り機構部４２と、レンズドライバ４３と、絞りドライバ４４と、シャッタ機構部５１と、シャッタドライバ４５と、撮像素子５２と、アナログ処理部５３と、アナログデジタル変換部（以下、ＡＤ変換部と略称する）５４と、ＡＥ処理部５５と、ＡＦ処理部５６と、画像処理部５７と、画像圧縮展開部５８と、表示ドライバ５９と、表示部６０と、メモリインターフェース（以下、メモリＩＦと略記する）６１と、記録媒体６２と、ＳＤＲＡＭ６３と、フラッシュメモリ６４と、操作部６５と、制御部６６と、顔検出部６７と、記録領域設定部６８と、記録枠表示部７９と、電源回路７０と、通信用バス７３等を具備して構成されている。なお、図２において符号Ｏは、撮影光学系４１の光軸を示す。

【0032】

撮影光学系４１は、被写体からの光束を透過させて被写体像を形成し、その被写体像を撮像素子５２の受光面上に結像させるユニットである。撮影光学系４１は、例えば光軸Ｏに沿って並べて配設される複数の光学レンズと、これら複数の光学レンズをそれぞれ支持するレンズ枠等によって構成される。撮影光学系４１は、レンズドライバ４３を介して制御部６６によって駆動制御される。なお、図２においては、撮影光学系４１の複数の光学レンズやレンズ枠等を簡略化して図示している。

【0033】

レンズドライバ４３は、上記撮影光学系４１の少なくとも一部の光学レンズ（を支持するレンズ枠）を光軸Ｏに沿う方向に進退移動させるためのユニットである。レンズドライバ４３は、アクチュエータ等の駆動源や、この駆動源からの駆動力を伝達する駆動機構等の構成要素と、上記駆動源を駆動制御するための電気回路等を含んで構成される。

【0034】

絞り機構部４２は、上記撮影光学系４１内に配設されており、この撮影光学系４１を通過する被写体からの光量を調節するユニットである。絞り機構部４２は、絞りドライバ４４を介して制御部６６によって駆動制御される。

【0035】

絞りドライバ４４は、例えばステッピングモータ等の駆動源や、この駆動源からの駆動力を伝達する駆動機構等の構成要素と、上記駆動源を駆動制御するための電気回路等を含んで構成される。

【0036】

シャッタ機構部５１は、撮像素子５２の受光面上に結像される被写体像の露出時間を制御するユニットである。シャッタ機構部５１は、シャッタドライバ４５を介して制御部６６によって駆動制御される。シャッタドライバ４５は、シャッタ機構部５１を制御部６６の制御下で駆動制御する制御ユニットである。

【0037】

撮像素子５２は、撮影光学系４１によって形成され自身の受光面上に受光された光学像（被写体像）を光電変換処理することによって、その被写体像の光量を電荷量を表わすアナログ信号へと変換する光電変換素子である。撮像素子５２は、例えばＣＭＯＳ，ＣＣＤ等の光電変換素子が適用される。撮像素子５２によって生成された電気信号（アナログ画像信号）はアナログ処理部５３へと出力される。

【0038】

なお、上記撮影光学系４１，絞り機構部４２，シャッタ機構部５１，撮像素子５２等によって、本カメラ１の撮像部が構成されている。

【0039】

アナログ処理部５３は、撮像素子５２から出力された電気信号（アナログ画像信号）を受けて、リセットノイズ等を低減した上で波形整形を行った後、所望の明るさとなるようにゲインアップ処理等を行う信号処理部である。アナログ処理部５３による処理済み信号は、ＡＤ変換部５４へと出力される。

【0040】

ＡＤ変換部５４は、アナログ処理部５３から出力されたアナログ画像信号を受けて、これをデジタル画像データに変換する信号処理部である。ＡＤ変換部５４から出力された画像データは、通信用バス７３を介してＳＤＲＡＭ６３へと送られ、これに一時的に記憶される。

【0041】

ＡＥ処理部５５は、ＳＤＲＡＭ６３に一時的に記憶されたＡＤ変換後の画像データに基いて画像内の被写体輝度を算出するデータ処理部であり、また画像内の光源を検出する光源検出部でもある。なお、ＡＥ処理部５５において扱うデータ、即ち被写体輝度算出用データとしては、上記の画像データ以外に、例えば専用測光センサを設け、この専用測光センサからの出力データとしてもよい。

【0042】

ＡＦ処理部５６は、上記画像データから高周波成分の信号を取り出して、ＡＦ（Auto Focus；オートフォーカス）積算処理を行って合焦評価値を取得するデータ処理部である。

【0043】

画像処理部５７は、上記ＳＤＲＡＭ６３から読み出した画像データに対して様々な画像処理を施すデータ処理部である。この画像処理部５７において各種の処理が行われた後の画像データは、再度ＳＤＲＡＭ６３に一時的に記憶される。

【0044】

画像圧縮展開部５８は、所定の圧縮方式による画像データの圧縮処理や、所定の圧縮方式により圧縮された圧縮画像データの展開（伸長）処理等を行うデータ処理部である。この画像圧縮展開部５８において取り扱う画像データが静止画像データである場合には、例えばＪＰＥＧ規格に準拠した方式等による圧縮及び展開処理を行う。また、画像圧縮展開部５８において取り扱う画像データが動画像データである場合には、例えばＭｏｔｉｏｎ−ＪＰＥＧ規格やＨ．２６４規格等に準拠した各種方式等による圧縮及び展開処理を行う。なお、静止画に係る画像データの記録を行う場合には、画像圧縮展開部５８は、ＳＤＲＡＭ６３から画像データを読み出し、読み出した画像データを、例えばＪＰＥＧ圧縮方式に従った圧縮処理を施して、圧縮処理済みのＪＰＥＧ画像データを、再度ＳＤＲＡＭ６３に一時記憶するという、一連の処理が実行される。

【0045】

表示部６０は、撮像素子５２等の撮像部によって取得された画像データに基く画像を表示するために、例えば液晶表示装置（ＬＣＤ）等、各種形態の表示装置によって構成される。表示部６０は、制御部６６の制御下で表示ドライバ５９を介して駆動制御される。表示ドライバ５９は、制御部６６の制御下で上記表示部６０を駆動制御するユニットである。

【0046】

表示部６０には、例えば、撮影動作直後の画像データを受けて所定の短い時間だけ撮影取得結果としての画像表示を行うレックビュー表示、記録媒体６２に記録済みの画像データ（ＪＰＥＧファイル等）に基く画像の再生表示、スルー画像表示（ライブビュー表示ともいう）等の動画表示が行われる。

【0047】

ここで、例えば記録媒体６２に記録済みの画像データ（ＪＰＥＧファイル）に基いて画像再生を行う場合には、制御部６６は、画像圧縮展開部５８を介して記録媒体６２に記録済みの画像データ（ＪＰＥＧファイル）の中から所望のデータを読み出して伸張処理（展開処理）を施す。画像圧縮展開部５８において伸張処理された画像データはＳＤＲＡＭ６３に一時記憶される。続いて、制御部６６は、表示ドライバ５９を介して上記伸張処理済み画像データをＳＤＲＡＭ６３から読み出し、表示部６０を用いて表示可能な映像信号に変換処理した後、表示部６０へと出力する。これにより、表示部６０には画像が表示される。

【0048】

メモリＩＦ６１は、制御部６６の制御下で記録媒体６２をドライブし、該記録媒体６２に記録済みの画像データファイルを読み込んだり、所定形式の画像データを記録媒体６２に記録する等の処理を行う際のインターフェースである。

【0049】

記録媒体６２は、画像データ等を記録するための媒体であって、例えばカメラ１に対して着脱自在に配設されるカード形状の半導体メモリ、いわゆるメモリカード等が適用される。なお、記録媒体６２の形態は、この形態に限られることはなく、他の形態、例えばカメラ１内に固定される媒体としてもよいし、半導体メモリ以外にも、光学板媒体，磁気媒体等、様々な形態のものを適用し得る。なお、メモリＩＦ６１と、記録媒体６２とによって、記録部が構成される。

【0050】

ＳＤＲＡＭ６３は、ＡＤ変換部５４において生成された画像データや、画像処理部５７，画像圧縮展開部５８において処理された画像データ等の各種データを一時的に記憶する揮発性メモリからなる記憶部である。

【0051】

フラッシュメモリ６４は、ホワイトバランスモードに応じたホワイトバランスゲイン，ローパスフィルタ係数等のカメラ動作に必要となる各種パラメータ，銀塩粒子による粒状感に似せた粒状パターンの画像データ，カメラ１を特定するための固有情報、例えば製品名，製造番号等の各種の情報が予め記憶されている不揮発性メモリからなる記憶部である。さらに、フラッシュメモリ６４には、制御部６６にて実行される各種プログラム等も予め記憶されている。したがって、制御部６６は、フラッシュメモリ６４に記憶されているプログラムを適宜のタイミングで読み込んで実行する。その際、制御部６６は、各種シーケンス処理に必要となる各種のパラメータ等を、フラッシュメモリ６４から読み込む。

【0052】

操作部６５は、本カメラ１に対する各種操作を行うための複数の操作部材及び対応する操作スイッチ等によって構成される。使用者が操作部６５のうちの所定の操作部材を操作すると、対応する操作スイッチより所定の指示信号が発生し、その指示信号は、制御部６６へと伝達されるようになっている。この指示信号を受けて、制御部６６は、適宜操作に応じた各種シーケンスを実行する。操作部６５としては、具体的には例えば電源ボタン，レリーズボタン，再生ボタン，メニューボタン，動画ボタン，モード切換ボタン等の機械的スイッチに連動する操作部材等のほか、タッチパネル等、カメラ１の制御部６６への指示入力を行うための入力用操作部材等が含まれる。

【0053】

制御部６６は、当該カメラ１の各種シーケンスを統括的に制御する制御手段である。また、制御部６６は、ＳＤＲＡＭ６３に一時記憶されたＪＰＥＧ画像データに対して、必要となるＪＰＥＧヘッダ情報等を付加してＪＰＥＧファイルを作成し、作成されたＪＰＥＧファイルをメモリＩＦ６１を介して記録媒体６２へと記録する処理等をも行う。制御部６６には、操作部６５と、フラッシュメモリ６４と、顔検出部６７とが、直接接続されている。

【0054】

顔検出部６７は、撮像動作の結果表示画面上に表示されている画像中に含まれる所定の特徴を有する画像、例えば人物やペット等の顔画像の形態，大きさ等の被写体に関する情報を、所定の画像解析処理に基いて検出すると共に、その検出された顔画像が画面内で移動する時には、これを追尾し続ける機能を有し、さらに追尾中の顔画像が画面外に出たとしても再度画面内に入った時には続けて追尾する機能等を実現する回路部である。つまり、顔検出部６７は被写体検出部として機能する顔検出手段である。

【0055】

記録枠表示部７９は、顔検出部６７若しくは操作部６５のタッチパネル等によって選択設定され撮影を所望する画像領域に所定の形態の記録枠を表示画面に重畳表示させ、かつ顔検出部６７の検出結果に応じて当該記録枠を追従表示させる回路部である。また、記録枠表示部７９は、設定された記録モードに応じた記録モード識別用表示枠を表示させる機能も有する。

【0056】

記録領域設定部６８は、記録枠表示部７９により表示される記録枠に応じた記録用画像領域を設定する回路部である。

【0057】

電源回路７０は、バッテリ等の電源と、この電源を制御する回路等によって構成され、制御部６６の制御下で、本カメラ１内の各構成ユニットや回路ユニットに対し必要となる電力を適宜供給する回路部である。

【0058】

通信用バス７３は、カメラ１の内部で発生した各種データ等を、本カメラ１を構成する内部構成ユニットの各部へと転送するための転送路である。通信用バス７３は、ＡＤ変換部５４，ＡＥ処理部５５，ＡＦ処理部５６，画像処理部５７，画像圧縮展開部５８，表示ドライバ５９，メモリＩＦ６１，ＳＤＲＡＭ６３，制御部６６，レンズドライバ４３，絞りドライバ４４，シャッタドライバ４５等に接続されている。

【0059】

その他の構成は、従来一般の撮影機器（カメラ）と同様の構成を有するものとして、その図示を省略している。また、図２に示された構成要素について、本発明に直接関連しないものについては、簡略な説明に留めている。

【0060】

このように構成された本実施形態のカメラ１の作用を以下に説明する。
まず、カメラ１の電源回路７０がオン状態とされて、カメラ１が撮影準備状態にあるものとする。撮影者は、この状態のカメラ１を所望の被写体（複数）に対峙するように向ける。そして、所望の複数の被写体が表示部６０の表示画面内に入るように構えることになる。

【0061】

こうしておいて、撮影者は、表示部６０の表示画面上において、撮影対象とする被写体の選択設定操作を行って記録枠を表示させる（図１（Ａ））。上述した如く、撮影準備状態にあるカメラ１を所望の被写体に向けて構えたとき、表示部６０の表示画面には撮像素子５２によって連続的に取得された画像データに基くが順次表示される。そして、撮像素子５２によって取得された画像データに基いて制御部６６は顔検出部６７を制御して顔検出処理を同時に実行する。

【0062】

したがって、表示部６０の表示画面に、例えば撮影対象の被写体である複数の人物１０１，１０２が表示されている場合においては、それら複数の人物１０１，１０２に対して顔検出がなされ、それぞれの顔領域には顔検出枠６７ａ，６７ｂが表示されることになる。なお、ここで示す実施形態においては、顔検出枠６７ａ，６７ｂを記録枠として取り扱う。

【0063】

ここで、撮影者は、複数の記録枠である顔検出枠６７ａ，６７ｂのうち所望の顔検出枠６７ｂを選択操作するものとする。この場合における選択操作としては、例えば操作部６５の一部を構成するタッチパネルに対するタッチ操作とする。

【0064】

ここで、図４は、本実施形態における撮影機器（カメラ）においてタッチ操作を行って撮影記録を行う対象を示す撮影対象枠である記録枠を表示させると共に、撮影記録モードを選択設定する際の作用の概略を示している。なお、図４に示す例は、複数の被写体１０１，１０２のうち、一方の被写体１０１に対するタッチ操作，枠表示，モード設定が既に実行済で、続いて、他方の被写体１０２に対する操作を行う場合の作用を例示するものである。

【0065】

図４（Ａ）において、撮影者は自身の手指１０３によって、表示部６０の表示画面内の複数の被写体１０１，１０２のうち他方の被写体１０２に対する顔検出枠６７ｂをタッチ操作している状況を示している。この場合において、顔検出枠６７ｂに対して一回のタッチ操作を行うと、顔検出枠６７ｂに対応する被写体を第２被写体１０２として決定し、この第２被写体１０２の顔領域を中心とする所定の領域を囲む記録枠６９ｂａを表示させる。このときの切り換え後の表示画面は、図４（Ｂ）のようになる。この状態で、撮影記録モードは、上記顔アップモードが設定された状態にある。撮影記録モードは、例えば上述したように、３つのモードが用意され、タッチ操作に伴って、順次切り換わるようになっている。そして、所望の撮影記録モードに対応した記録枠（図４に示す例では３種の枠６９ｂａ，６９ｂｂ，６９ｂｃ）のうち所望の撮影記録モードを表わす記録枠６９ｂｘ（ｘ＝ａ，ｂ，ｃ）が表示されている時に、所定時間以上のタッチ操作（いわゆる長押し操作）を行うことで選択設定がなされる。即ち、図４（Ｂ）の表示状態では、上述したように顔アップモードに対応する記録枠６９ｂａが表示されている。ここで、長押し操作を行うと、顔アップモードが選択設定される。一方、図４（Ｂ）の表示状態で、通常のタッチ操作を行うと図４（Ｃ）の表示に切り換わり、バストアップモードに対応する記録枠６９ｂｂが表示される。ここで、長押し操作を行うと、バストアップモードが選択設定される。一方、図４（Ｃ）の表示状態で、通常のタッチ操作を行うと図４（Ｄ）の表示に切り換わり、全身モードに対応する記録枠６９ｂｃが表示される。ここで、長押し操作を行うと、全身モードが選択設定される。一方、図４（Ｄ）の表示状態で、通常のタッチ操作を行うと、再度図４（Ｂ）の表示に切り換わる。

【0066】

このように、長押し操作によって撮影記録モードが選択設定され、選択設定された撮影記録モードに対応する記録枠６９ｂｘ（ｘ＝ａ，ｂ，ｃ）が表示される。図４（Ｅ）に示す表示例では、第１被写体１０１は顔アップモードが設定され、これに対応する記録枠６９ａが表示され、第２被写体１０２は全身モードが設定されて、これに対応する記録枠６９ｂｃが表示されている状態を示している。

【0067】

図４を用いて説明した作用は、図３のステップＳ１〜ステップＳ８の処理に対応する。即ち、タッチ操作がなされると、まず図３のステップＳ１において、制御部６６は操作部６５に含まれるタッチパネルからの信号を監視すると共に、表示中の顔検出枠６７ａ，６７ｂに対応する各被写体１０１，１０２に対する追従処理を実行する。そして、撮影者によるタッチ操作を検出すると、そのタッチ操作によるタッチ位置に顔があるか否か、即ちタッチ位置が複数の顔検出枠（６７ａ，６７ｂ）のいずれかの表示領域内であるか否かの確認を行う。

【0068】

ここで、タッチ位置に顔がある、即ちタッチ位置が複数の顔検出枠（６７ａ，６７ｂ）のいずれかの表示領域内であると確認された場合には、ステップＳ４の処理に進み、このステップＳ４において、タッチ位置に対応する顔検出枠を基準設定する。その後、ステップＳ３において、上記ステップＳ４の処理にて設定された基準位置に基いて記録枠６９ａ，６９ｂを表示させる。その後、ステップＳ５の処理に進む。

【0069】

一方、上記ステップＳ１において、タッチ位置が顔検出枠（６７ａ，６７ｂ）の表示領域以外であることが確認された場合には、ステップＳ２の処理に進み、このステップＳ２において、タッチ操作された位置（場所）を基準設定する。その後、ステップＳ３において、上記ステップＳ２の処理にて設定された基準位置に基いて記録枠６９ａ，６９ｂを表示させる。その後、ステップＳ５の処理に進む。

【0070】

ステップＳ５において、制御部６６は、上記ステップＳ１の直前になされたタッチ操作についての信号を判別する。即ち、検出されたタッチ操作が所定時間以上の長押し操作であった場合にはステップＳ７の処理へ進み、通常のタッチ操作であった場合にはステップＳ６の処理に進む。

【0071】

ステップＳ６において、制御部６６は記録枠サイズの変更処理を行う。即ち、現在表示中の記録枠とは異なる記録枠を表示させる。換言すれば、撮影記録モードを変更する。その後、ステップＳ５の処理に戻り、長押し操作がなされるまで同様の処理を繰り返す。

【0072】

一方、ステップＳ７において、制御部６６は、記録枠サイズの決定、即ち現在表示中の記録枠に対応する撮影記録モードを選択設定する。その後、ステップＳ８の処理に進む。

【0073】

次に、ステップＳ８において、制御部６６は、操作部６５からの信号を監視して、撮影対象についてのさらなる選択を行うか、若しくは撮影動作を実行するか確認を行う。ここで、撮影対象選択操作がなされた場合にはタッチパネル等からの選択操作指示信号が検出される。この場合には上述のステップＳ１の処理に戻り、以降同様の処理を繰り返す。また、撮影操作がなされた場合にはレリーズボタンもしくはタッチパネル等からの撮影操作指示信号が検出される。この場合には次のステップＳ９の処理に進む。

【0074】

ステップＳ９において、制御部６６は、撮像素子５２を含む撮像部を駆動制御して動画像データの取り込み、即ち撮影記録動作を開始する。

【0075】

このときの表示部６０の表示画面においては、図５（Ａ）に示す表示がなされている。この場合において、図５（Ａ）の第１被写体１０１は顔アップモードが選択設定されており、このとき、図６（Ａ）において示されるような動画像６０ａが記録される。また、図５（Ａ）の第２被写体１０２は全身モードが選択設定されており、図７（Ａ）において示されるような動画像６０ｂが記録される。こうして、予め撮影対象として選択された複数の被写体のそれぞれを主要対象とする異なる動画撮影記録が同時に実行される。なお、これに加えて、さらに図５（Ａ）に示す全体の動画を同時に撮影記録するようにしてもよい。

【0076】

図５（Ａ），図６（Ａ），図７（Ａ）に示す状態で動画撮影動作を継続している際に、図５（Ａ）の表示画面内において２つの被写体１０１，１０２が例えば互いに近付く方向に移動したものとする。すると、図５（Ａ）の表示画面は、図５（Ｂ）の表示を経て図５（Ｃ），図５（Ｄ）の表示に変化し、やがて図５（Ｅ）に示すような表示となる。このとき、第１被写体１０１を主要対象とする動画像は、図６（Ｂ），図６（Ｃ），図６（Ｄ）を経て図６（Ｅ）に示すような画像が記録される。つまり、図６（Ａ）〜図６（Ｄ）において顔アップモードによる動画像が記録されており、このうち図６（Ｄ）においては、画面右端より第２被写体１０２が画面内に侵入してくる様子が示されている。そして、図６（Ｅ）においては、それまでの記録枠６９ａに基く顔アップモードから合成記録枠６９ｃに基く合成記録モードに切り換わる。

【0077】

同様に、第２被写体１０１を主要対象とする動画像は、図７（Ｂ），図７（Ｃ），図７（Ｄ）を経て図７（Ｅ）に示すような画像が記録される。このうち図７（Ｄ）においては、画面左端より第１被写体１０１が画面内に侵入してくる様子が示されている。そして、図７（Ｅ）においては、それまでの記録枠６９ｂに基く全身モードから合成記録枠６９ｃに基く合成記録モードに切り換わる。

【0078】

上述したように、２つの撮影対象の被写体１０１，１０２が表示部６０の表示画面内において接近すると、各対応する記録枠６９ａ，６９ｂは、図５（Ｅ）に示す合成記録枠６９ｃに切り換わる。そして、この合成記録枠６９ｃに基く動画像、即ち図６（Ｅ），図７（Ｅ）に示されるような合成記録モードによる動画像が継続して記録される。

【0079】

この状態からさらに動画撮影動作を継続している時、２つの被写体１０１，１０２が表示画面内において互いに離間する方向に移動したものとすると、やがて、図５（Ｆ）に示すような表示となる。このとき、図５（Ｅ）の合成記録枠６９ｃは、元の記録枠６９ａ，６９ｃに戻り、記録される動画像もそれぞれの記録枠６９ａ，６９ｂに基く形態に戻ることになる。

【0080】

この間の経緯を、図３のステップＳ９〜ステップＳ２６の処理にて説明する。即ち、上述したように、図３のステップＳ９において、制御部６６は撮影記録動作を開始する。

【0081】

すると、ステップＳ１０において、制御部６６は、撮像素子５２を含む撮像部を駆動制御して動画像データにかかる１フレーム分の画像データを取得する。なお、動画像データの取得処理に関する詳細は従来一般のカメラにおいて適用されいる従来技術が適用される。したがって、その詳細説明は省略する。

【0082】

続いて、ステップＳ１１において、制御部６６は、顔検出部６７の検出結果に基いて２つの記録枠の表示部６０の表示画面内におけるそれぞれの位置を、２つの被写体１０１，１０２の移動に追従させて更新し表示する処理を実行する。

【0083】

次に、ステップＳ１２において、制御部６６は、顔検出部６７の検出結果に基いて２つの記録枠の表示部６０の表示画面内における相対的な位置に変化が生じたか否かを確認する。ここで、相対位置変化が確認されない場合には、次のステップＳ２３の処理に進む。また、相対位置変化が確認されて、かつ２つの被写体１０１，１０２が互いに離れる方向へと位置変化したことが確認された場合には、ステップＳ１３の処理に進む。また、相対位置変化が確認されて、かつ２つの被写体１０１，１０２が互いに接近する方向へと位置変化したことが確認された場合には、ステップＳ１８の処理に進む。

【0084】

上述のステップＳ１２の処理にて、相対位置変化がなく、ステップＳ２３の処理に進むと、このステップＳ２３において、制御部６６は、枠制御フラグをｃｏｎｔｒｏｌ＝０に設定する。その後、ステップＳ２４の処理に進む。

【0085】

上述のステップＳ１２の処理にて、相対位置変化が離れる方向が確認されて、ステップＳ１３の処理に進むと、このステップＳ１３において、制御部６６は、記録枠の変更中か否かの確認を行うと共に、枠制御フラグｃｏｎｔｒｏｌ＝１に設定する。ここで、記録枠の変更中である場合にはステップＳ１５の処理に進む。また、記録枠の変更中ではない場合にはステップＳ１４の処理に進む。

【0086】

続いて、ステップＳ１４において、制御部６６は記録枠の変更制御を開始する（枠制御フラグｃｏｎｔｒｏｌ＝１は維持される）。その後、ステップＳ１５の処理に進む。

【0087】

ステップＳ１５において、制御部６６は、記録枠表示部７９，記録領域設定部６８等を制御して、表示中の記録枠を徐々に縮小表示させる制御を行う。

【0088】

続いてステップＳ１６において、制御部６６は、記録枠変更制御が終了したか否かの確認を行う。ここで、記録枠変更制御の終了が確認されたら、次のステップＳ１７の処理に進み、このステップＳ１７において、枠制御フラグｃｏｎｔｒｏｌ＝０に設定し、ステップＳ２４の処理に進む。また、上述のステップＳ１６の処理において、記録枠変更制御の終了が確認されない場合には、ステップＳ２４の処理に進む。

【0089】

一方、上述のステップＳ１２の処理にて、相対位置変化が接近する方向が確認されて、ステップＳ１８の処理に進むと、このステップＳ１８において、制御部６６は、記録枠の変更中か否かの確認を行うと共に、枠制御フラグｃｏｎｔｒｏｌ＝１に設定する。ここで、記録枠の変更中である場合にはステップＳ２０の処理に進む。また、記録枠の変更中ではない場合にはステップＳ１９の処理に進む。

【0090】

続いて、ステップＳ１９において、制御部６６は記録枠の変更制御を開始する（枠制御フラグｃｏｎｔｒｏｌ＝１は維持される）。その後、ステップＳ２０の処理に進む。

【0091】

ステップＳ２０において、制御部６６は、記録枠表示部７９，記録領域設定部６８等を制御して、表示中の記録枠を徐々に拡大表示させる制御を行う。

【0092】

続いてステップＳ２１において、制御部６６は、記録枠変更制御が終了したか否かの確認を行う。ここで、記録枠変更制御の終了が確認されたら、次のステップＳ２２の処理に進み、このステップＳ２２において、枠制御フラグｃｏｎｔｒｏｌ＝０に設定し、ステップＳ２４の処理に進む。また、上述のステップＳ２１の処理において、記録枠変更制御の終了が確認されない場合には、ステップＳ２４の処理に進む。

【0093】

ステップＳ２４において、制御部６６は、ＳＤＲＡＭ６３に一時記憶されている１フレーム分のそれぞれのデータファイルに対してそれぞれの記録枠に関する附加情報等を記録する処理を実行する。その後、ステップＳ２５の処理に進む。

【0094】

ステップＳ２５において、制御部６６は、最終フレームの処理が完了したか否かの確認を行う。ここで、最終フレームの処理が完了したことが確認された場合には、ステップＳ２６の処理に進む。また、最終フレームの処理ではないことが確認された場合には、ステップＳ１０の処理に戻り、以降の処理を繰り返す。

【0095】

ステップＳ２６において、制御部６６は、ＳＤＲＡＭ６３，メモリＩＦ６１，記録媒体６２を制御して、生成中の複数（２つ若しくは３つの）動画像ファイルに対して、例えば関連付け情報，同期再生用タグ等の各種必要な付加情報を付加してファイルクローズ処理を行う。

【0096】

上記の附加情報は、例えば同時記録な行われた元の全体画像データと、その中の複数被写体を主要対象とする複数の動画像データを互いに関連付けるための情報である。このような附加情報を有していることにより、独立した複数の動画像データファイルを取り扱う際に至便である。例えば画像再生を行う際には、マルチウインド表示やマルチディスプレイ表示の再生環境を構成すれば、複数の動画像を同期させて同時再生させることができ、よって臨場感溢れる再生や変化に富んだ再生を行うことができるようになる。

【0097】

ここで、表示画面内にて２つの被写体１０１，１０２が接近した時、若しくは離間した時の記録枠６９ａ，６９ｂが合成記録枠６９ｃに切り換わる際のメカニズムを、図８〜を用いて以下に説明する。図８は、本実施形態のカメラにおける表示部に表示される画像の表示画面上に想定する座標系の例を示す。

【0098】

この図８に示す例では、表示部６０に表示される表示画面（撮像素子５２によって取得される全体画像に相当する）の画面左下隅角の点を原点（０，０）とし、横軸をＸ軸、縦軸をＹ軸とする座標系を想定している。

【0099】

表示部６０の表示画面（全体画像）内には、２つの被写体１０１，１０２が表示され、各被写体１０１，１０２には記録枠６９ａ，６９ｂが選択設定されているものとする。そして、各記録枠６９ａ，６９ｂについての座標を
第１被写体１０１に対応する記録枠６９ａの左下角の座標（ＡＸ１，ＡＹ１）
第１被写体１０１に対応する記録枠６９ａの右下角の座標（ＡＸ２，ＡＹ１）
第２被写体１０２に対応する記録枠６９ｂの左下角の座標（ＢＸ１，ＢＹ１）
第２被写体１０２に対応する記録枠６９ｂの右下角の座標（ＢＸ２，ＢＹ１）
第２被写体１０２に対応する記録枠６９ｂの右上角の座標（ＢＸ２，ＢＹ２）
と規定する。

【0100】

このように規定した表示画面（全体画像）の座標系において、表示画面内で２つの被写体１０１，１０２が接近した時に、２つの記録枠６９ａ，６９ｂの重なりを判定する記録枠重なり判定処理シーケンスを図９に示す。この処理シーケンスは撮像動作の実行中には、常に実行されているものである。また、この記録枠重なり判定処理シーケンスは、制御部６６の制御下で、顔検出部６７，記録枠表示部７９，記録領域設定部６８等の協働により行われる。

【0101】

まず、図９のステップＳ３１において、表示画面（全体画像）における座標系内のＸ軸上の所定の点ＡＸ１，ＢＸ１について、「ＡＸ１＜ＢＸ１」であるか否かの確認を行う。
ここで、「ＡＸ１＜ＢＸ１」であることが確認された場合にはステップＳ３２の処理に進む。

【0102】

ステップＳ３２において、「ＡＸ２＜ＢＸ１」であるか否かの確認を行う。ここで、「ＡＸ２＜ＢＸ１」ではない、即ち「ＡＸ２＞＝ＢＸ１」であることが確認された場合にはステップＳ３８の処理に進む。そして、このステップＳ３８において、記録枠の重なりがありと判断されて一連の処理を終了する（エンド）。

【0103】

一方、ステップＳ３１において「ＡＸ１＜ＢＸ１」ではない、即ち「ＡＸ１＞＝ＢＸ１」であることが確認された場合にはステップＳ３３の処理に進む。

【0104】

ステップＳ３３において、「ＢＸ２＜ＡＸ１」であるか否かの確認を行う。ここで、「ＢＸ２＜ＡＸ１」ではない、即ち「ＢＸ２＞＝ＡＸ１」であることが確認された場合にはステップＳ３８の処理に進む。そして、このステップＳ３８において、記録枠の重なりがありと判断されて一連の処理を終了する（エンド）。

【0105】

他方、上記ステップＳ３２において「ＡＸ２＜ＢＸ１」であることが確認された場合、及び上記ステップＳ３３において「ＢＸ２＜ＡＸ１」であることが確認された場合には、いずれの場合もステップＳ３４の処理に進む。

【0106】

ステップＳ３４において、「ＡＹ１＜ＢＹ１」であるか否かの確認を行う。ここで、「ＡＹ１＜ＢＹ１」であることが確認された場合にはステップＳ３５の処理に進む。

【0107】

ステップＳ３５において、「ＡＹ２＜ＢＹ１」であるか否かの確認を行う。ここで、「ＡＹ２＜ＢＹ１」ではない、即ち「ＡＹ２＞＝ＢＹ１」であることが確認された場合にはステップＳ３８の処理に進む。そして、このステップＳ３８において、記録枠の重なりがありと判断されて一連の処理を終了する（エンド）。

【0108】

一方、ステップＳ３４において「ＡＹ１＜ＢＹ１」ではない、即ち「ＡＹ１＞＝ＢＹ１」であることが確認された場合にはステップＳ３６の処理に進む。

【0109】

ステップＳ３６において、「ＢＹ２＜ＡＹ１」であるか否かの確認を行う。ここで、「ＢＹ２＜ＡＹ１」ではない、即ち「ＢＹ２＞＝ＡＹ１」であることが確認された場合にはステップＳ３８の処理に進む。そして、このステップＳ３８において、記録枠の重なりがありと判断されて一連の処理を終了する（エンド）。

【0110】

他方、上記ステップＳ３５において「ＡＹ２＜ＢＹ１」であることが確認された場合、及びステップＳ３６において「ＢＹ２＜ＡＹ１」であることが確認された場合には、いずれの場合もステップＳ３７の処理に進む。そして、このステップＳ３７において、記録枠の重なりが無いと判断されて一連の処理を終了する（エンド）。

【0111】

上述のようにして、表示画面（全体画像）中における２つの被写体１０１，１０２に各対応する記録枠６９ａ，６９ｂの重なりが確認されると、続いて上記２の記録枠６９ａ，６９ｂの両方をカバーする合成記録枠６９ｃを生成し、これを表示画面に表示させる。このときの一連の合成記録枠表示処理シーケンスを、図１０〜図１４を用いて以下に説明する。

【0112】

図１０，図１１は、上記図８と同様に、本実施形態のカメラにおける表示部に表示される表示画面上に想定する座標系の例を示す。図１０に示す例においても、表示部６０に表示される表示画面（撮像素子５２によって取得される全体画像に相当する）の画面左下隅角の点を原点（０，０）とし、横軸をＸ軸、縦軸をＹ軸とする座標系を想定している。

【0113】

図１０に示す表示部６０の表示画面（全体画像）内には、２つの被写体１０１，１０２が表示され、各被写体１０１，１０２には記録枠６９ａ，６９ｂが選択設定されている。そして、各記録枠６９ａ，６９ｂについての座標は、上記の図８と同様に規定する。そして、この座標系において、上述した記録枠重なり判定処理シーケンス（図９参照）によって２つの記録枠６９ａ，６９ｂが重なっているものとする（図１０参照）。

【0114】

この場合において、合成記録枠６９ｃを生成するのに際して、２つの記録枠６９ａ，６９ｂのサイズ（記録モード）が互いに対して異なる場合には、上述したように、大きい記録枠（この例では記録枠６９ｂ）のサイズに準じて新たな合成記録枠６９ｃが設定される。これにより、図１１に示す表示部６０の表示画面に示される合成記録枠６９ｃの如く、２つの被写体１０１，１０２が一画面内に納まるような撮影画像領域を持つ合成記録枠６９ｃが設定される。なお、図１１において、合成記録枠６９ｃについての座標を
合成記録枠６９ｃの左下角の座標（Ｘ１，Ｙ１）
合成記録枠６９ｃの右下角の座標（Ｘ２，Ｙ１）
合成記録枠６９ｃの左上角の座標（Ｘ１，Ｙ２）
と規定する。

【0115】

図１２〜図１５は、合成記録枠生成処理シーケンスである。この処理シーケンスは、制御部６６の制御下で、顔検出部６７，記録枠表示部７９，記録領域設定部６８等の協働により行われる。

【0116】

図１２の処理シーケンスは合成記録枠の座標Ｘ１を決定する処理である。
即ち、図１２のステップＳ４１において、図１０の「ＡＸ１＜ＢＸ１」であるか否かの確認を行う。ここで、「ＡＸ１＜ＢＸ１」であることが確認された場合にはステップＳ４２の処理に進む。そして、このステップＳ４２において、「Ｘ１＝ＡＸ１」が適用されて一連の処理を終了する（リターン）。

【0117】

一方、図１２のステップＳ４１において、「ＡＸ１＜ＢＸ１」ではない、即ち「ＡＸ１＞＝ＢＸ１」であることが確認された場合にはステップＳ４３の処理に進む。そして、このステップＳ４３において、「Ｘ１＝ＢＸ１」が適用されて一連の処理を終了する（リターン）。

【0118】

図１３の処理シーケンスは合成記録枠の座標Ｘ２を決定する処理である。
即ち、図１３のステップＳ４４において、図１０の「ＡＸ２＜ＢＸ２」であるか否かの確認を行う。ここで、「ＡＸ２＜ＢＸ２」であることが確認された場合にはステップＳ４６の処理に進む。そして、このステップＳ４６において、「Ｘ２＝ＢＸ２」が適用されて一連の処理を終了する（リターン）。

【0119】

一方、図１３のステップＳ４４において、「ＡＸ２＜ＢＸ２」ではない、即ち「ＡＸ２＞＝ＢＸ２」であることが確認された場合にはステップＳ４５の処理に進む。そして、このステップＳ４５において、Ｘ２＝ＡＸ２が適用されて一連の処理を終了する（リターン）。

【0120】

図１４の処理シーケンスは合成記録枠の座標Ｙ１を決定する処理である。
即ち、図１４のステップＳ４７において、図１０の「ＡＹ１＜ＢＹ１」であるか否かの確認を行う。ここで、「ＡＹ１＜ＢＹ１」であることが確認された場合にはステップＳ４８の処理に進む。そして、このステップＳ４８において、「Ｙ１＝ＡＹ１」が適用されて一連の処理を終了する（リターン）。

【0121】

一方、図１４のステップＳ４７において、「ＡＹ１＜ＢＹ１」ではない、即ち「ＡＹ１＞＝ＢＹ１」であることが確認された場合にはステップＳ４９の処理に進む。そして、このステップＳ４９において、「Ｙ１＝ＢＹ１」が適用されて一連の処理を終了する（リターン）。

【0122】

図１５の処理シーケンスは合成記録枠の座標Ｙ２を決定する処理である。
即ち、図１５のステップＳ５０において、図１０の「ＡＹ２＜ＢＹ２」であるか否かの確認を行う。ここで、「ＡＹ２＜ＢＹ２」であることが確認された場合にはステップＳ５２の処理に進む。そして、このステップＳ５２において、「Ｙ２＝ＢＹ２」が適用されて一連の処理を終了する（リターン）。

【0123】

一方、図１５のステップＳ５０において、「ＡＹ２＜ＢＹ２」ではない、即ち「ＡＹ２＞＝ＢＹ２」であることが確認された場合にはステップＳ５１の処理に進む。そして、このステップＳ５１において、Ｙ２＝ＡＹ２が適用されて一連の処理を終了する（リターン）。

【0124】

以上のようにして、合成記録枠６９ｃが設定され、表示部６０の表示画面上の所定の位置に表示される。ここで、上記の例では、サイズの小さい記録枠６９ａを徐々に拡大表示させてサイズの大きい記録枠６９ｂのサイズへと近付けた後、両者を重ね合わせるようにして最終的に合成記録枠６９ｃを表示させる。このときの様子を経時的に示したのが図１６である。

【0125】

図１６（Ａ）においては、表示部６０の表示画面内に２つの被写体１０１，１０２が表示されていて、各被写体１０１，１０２について、サイズ（モード）の異なる記録枠６９ａ，６９ｂが表示されている。そして、２つの記録枠６９ａ，６９ｂは一部で重なり合っているものとする。

【0126】

この図１６（Ａ）の状態から図１６（Ｂ），図１６（Ｃ）の状態へと遷移する場合においては、２つの被写体１０１，１０２が互いに近接する方向に移動して、２つの記録枠６９ａ，６９ｂが徐々に重なり合う。これと同時に、サイズの小さい記録枠６９ａは、サイズの大きい記録枠６９ｂに合わせるように徐々に拡大表示される。そして、最終的に図１６（Ｄ）に示されるような一つの合成記録枠６９ｃが表示される。

【0127】

なお、２つの被写体１０１，１０２が離れる方向に移動した場合には、合成記録枠６９ｃから再度各対応する記録枠６９ａ，６９ｂへと切り換わる。この場合の枠サイズ変更（縮小変更）の手順は、上記の拡大時のサイズ変更と逆の手順となるが略同様である。

【0128】

また、複数の被写体１０１，１０２に各対応する記録枠６９ａ，６９ｂが合成記録枠６９ｃへと表示を切り換える際には、瞬間的な切り換えではなく、上述したように徐々に切り換わるようにしている。

【0129】

図１７，図１８は、枠サイズ変更時のようすをグラフ化した図である。図１７は、記録枠のＸ軸上の点の拡大時，縮小時の変遷を示すグラフである。図１８は、記録枠のＹ軸上の点の拡大時，縮小時の変遷を示すグラフである。図１７，図１８においては、横軸に時間をとり、縦軸に移動量（座標）が示される。図１７，図１８に示されるような枠表示の切り換えを行うことによって、より違和感のない動画像とすることができる。

【0130】

上述したように、例えば表示画面内の２つの被写体１０１，１０２が近接した時には、個々の被写体に各対応させた記録枠６９ａ，６９ｂを、２つの被写体１０１，１０２が同時に納まるようにした合成記録枠６９ｃに基く画像領域によって撮影を行うようにしている。

【0131】

したがって、記録枠６９ａ，６９ｂと合成記録枠６９ｃとの切り換えの際には、記録中の条件（記録モード）に対して撮影画像領域の変更が行われることになる。具体的には、例えば、顔アップモードで撮影中の第１被写体１０１を記録中の動画像は、合成記録枠６９ｃに対応させるためにズームダウン方向へのズーミングが行われる。動画像記録中の急激なズーミング切り換えを行うと不自然動画像となってしまうので、画面切り換えは徐々に行われることが望ましい。そこで、上述の図１７，図１８を用いて説明したように、個々の記録枠６９ａ，６９ｂと合成記録枠６９ｃとの切り換え時に枠表示を徐々に拡大，縮小させるのと同様に、記録中の動画像についても徐々にズーミングを行うように制御される。なお、ここで行われるズーミングは、撮影光学系４１を駆動させて行う光学的なズーミングではなく、撮像素子５２によって取得された画像データに基いて行われるいわゆる電子ズーム処理である。

【0132】

以上説明したように上記一実施形態によれば、一画面内の複数被写体を撮影対象として撮影記録動作を行う際に、複数の被写体のそれぞれを主要被写体とする別個の動画像を複数同時に記録することができる。このとき、表示画面内において複数の被写体同士が近付いたり離れたりした時には、各被写体の移動に応じて各対応する動画像記録の連続性を保持しながら不自然なく撮影記録を行うことができる。例えば、２つの被写体同士が表示画面内で近付いて、同じ記録領域内に入ると、２つの被写体を主要被写体とする撮影対象としての撮影記録を行い、２つの被写体同士が表示画面内で離れると、各被写体を主要被写体とする撮影対象としての撮影記録に切り換わる。

【0133】

したがって、撮影者は、撮影対象とする複数の被写体を表示部６０の表示画面内に捉え続けるのみで、表示画面内の複数の被写体のそれぞれを主要対象とする複数の動画像を同時に撮影記録することができる。これに加えて、表示部６０の表示画面に対応した全体画像を撮影記録することも可能である。

【0134】

上述の一実施形態で説明した各処理シーケンスは、その性質に反しない限り、手順の変更を許容し得る。したがって、上述の処理シーケンスに対して、例えば各処理ステップの実行順序を変更したり、複数の処理ステップを同時に実行させたり、一連の処理シーケンスを実行する毎に、各処理ステップの順序が異なるようにしてもよい。

【0135】

なお、本発明は上述した実施形態に限定されるものではなく、発明の主旨を逸脱しない範囲内において種々の変形や応用を実施し得ることが可能であることは勿論である。さらに、上記実施形態には、種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせによって、種々の発明が抽出され得る。例えば、上記一実施形態に示される全構成要件から幾つかの構成要件が削除されても、発明が解決しようとする課題が解決でき、発明の効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。

【産業上の利用可能性】

【0136】

本発明は、デジタルカメラ等の撮影機能に特化した電子機器である撮影機器に限られることはなく、撮影機能を備えた他の形態の電子機器、例えば携帯電話，録音機器，電子手帳，パーソナルコンピュータ，ゲーム機器，テレビ，時計，ＧＰＳ（Global Positioning System）を利用したナビゲーション機器等、各種の撮影機能付き電子機器にも適用することができる。

【符号の説明】

【0137】

１……カメラ，４１……撮影光学系，４２……絞り機構部，４３……レンズドライバ，４４……絞りドライバ，４５……シャッタドライバ，５１……シャッタ機構部，５２……撮像素子，５３……アナログ処理部，５４……ＡＤ変換部，５５……ＡＥ処理部，５６……ＡＦ処理部，５７……画像処理部，５８……画像圧縮展開部，５９……表示ドライバ，６０……表示部，６２……記録媒体，６３……ＳＤＲＡＭ，６４……フラッシュメモリ，６５……操作部，６６……制御部，６７……顔検出部，６８……記録領域設定部，７０……電源回路，７３……通信用バス，７９……記録枠表示部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】