(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023181634
(43)【公開日】2023-12-25
(54)【発明の名称】電子機器、電子機器の制御方法、プログラム
(51)【国際特許分類】
H04N 23/63 20230101AFI20231218BHJP
H04N 23/55 20230101ALI20231218BHJP
G03B 17/18 20210101ALI20231218BHJP
【ＦＩ】
H04N5/232 945
H04N5/225 400
G03B17/18 Z
【審査請求】未請求
【請求項の数】11
【出願形態】ＯＬ
(21)【出願番号】P 2022094874
(22)【出願日】2022-06-13
(71)【出願人】
【識別番号】000001007
【氏名又は名称】キヤノン株式会社
(74)【代理人】
【識別番号】110002860
【氏名又は名称】弁理士法人秀和特許事務所
(72)【発明者】
【氏名】岸野 紘士
(72)【発明者】
【氏名】稲澤 佳祐
【テーマコード（参考）】
2H102
5C122
【Ｆターム（参考）】
2H102AA71
2H102BB06
2H102BB08
2H102BB22
2H102CA03
5C122EA42
5C122FA04
5C122FB02
5C122FC06
5C122FC07
5C122FH19
5C122FK12
5C122FK28
5C122FK41
5C122HB01
(57)【要約】
【課題】ユーザによる撮像に適した位置にマーカーを生成する技術を提供する。
【解決手段】電子機器は、１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得手段と、前記撮像画像に合成するマーカーの種別を判定する種別判定手段と、前記撮像画像における前記像の領域の数を判定する判定手段と、１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成手段と、を有する。
【選択図】図２
【解決手段】電子機器は、１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得手段と、前記撮像画像に合成するマーカーの種別を判定する種別判定手段と、前記撮像画像における前記像の領域の数を判定する判定手段と、１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成手段と、を有する。
【選択図】図２
【特許請求の範囲】
【請求項1】
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得手段と、
前記撮像画像に合成するマーカーの種別を判定する種別判定手段と、
前記撮像画像における前記像の領域の数を判定する判定手段と、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成手段と、
を有することを特徴とする電子機器。
前記撮像画像に合成するマーカーの種別を判定する種別判定手段と、
前記撮像画像における前記像の領域の数を判定する判定手段と、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成手段と、
を有することを特徴とする電子機器。
【請求項2】
前記光学系情報は、前記撮像に用いられた複数の光学系それぞれの光軸中心座標の設計値および前記設計値からのずれの情報を含む、
ことを特徴とする請求項１に記載の電子機器。
ことを特徴とする請求項１に記載の電子機器。
【請求項3】
前記合成手段は、前記像の領域の数が２以上である場合には、前記複数の光学系それぞれの前記設計値および前記ずれの情報に基づき、前記像の領域ごとの基準位置を判定して、前記像の領域ごとの基準位置に基づき前記マーカーを合成する、
ことを特徴とする請求項２に記載の電子機器。
ことを特徴とする請求項２に記載の電子機器。
【請求項4】
前記マーカーの種別が第１のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置に前記第１のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとの中心位置に前記第１のマーカーを合成する、
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
【請求項5】
前記マーカーの種別が第２のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置を通り左右方向に延在する前記第２のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとに、当該領域の中心位置を通り左右方向に延在する前記第２のマーカーを合成する、
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
【請求項6】
前記マーカーの種別が第３のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置を通り上下方向に延在する前記第３のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとに、当該領域の中心位置を通り上下方向に延在する前記第３のマーカーを合成する、
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
【請求項7】
前記マーカーの種別が第４のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像におけるユーザが設定した位置に前記第４のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記ユーザが設定した位置に第１の像の領域に対して前記第４のマーカーを合成するとともに、前記第１の像以外の像の領域それぞれに対して、前記ユーザが設定した位置を像の領域ごとに前記光学系情報に基づき補正した位置に前記第４のマーカーを合成する、
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
【請求項8】
前記判定手段は、前記１または複数の光学系を含むレンズユニットの種類の情報に基づき、前記像の領域の数を判定する、
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
【請求項9】
前記マーカーは、ユーザが撮影時の構図を決める際の目安として使用されるマーカーである、
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
ことを特徴とする請求項１から３のいずれか１項に記載の電子機器。
【請求項10】
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得ステップと、
前記撮像画像に合成するマーカーの種別を判定する種別判定ステップと、
前記撮像画像における前記像の領域の数を判定する判定ステップと、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成ステップと、
を有することを特徴とする電子機器の制御方法。
前記撮像画像に合成するマーカーの種別を判定する種別判定ステップと、
前記撮像画像における前記像の領域の数を判定する判定ステップと、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成ステップと、
を有することを特徴とする電子機器の制御方法。
【請求項11】
コンピュータを、請求項１から３のいずれか１項に記載された電子機器の各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、電子機器、電子機器の制御方法、プログラムに関する。
【背景技術】
【0002】
１度の撮影により視差を有する２枚の画像を取得し、これらの２枚の画像を用いて立体視可能な画像を表示することができる。特許文献１には、互いに視差を有する左眼用の画像と右眼用の画像とを、左右の領域に並べて表示することが記載されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１２－１３４８３３号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
また、通常の１眼カメラを使用して撮影を行う場合には、撮像センサの信号を処理して得られた１枚の撮像画像の中心位置にマーカーが表示されることがある。しかし、２眼レンズを使用して得られた１枚の撮像画像に左眼用の領域と右眼用の領域が含まれる場合には、１枚の撮像画像の中心位置にマーカーを表示されてしまうと、ユーザは各領域の中心位置を把握できない。
【0005】
本発明は、ユーザによる撮像に適した位置にマーカーを生成する技術の提供を目的とする。
【課題を解決するための手段】
【0006】
本発明の１つの態様は、
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得手段と、
前記撮像画像に合成するマーカーの種別を判定する種別判定手段と、
前記撮像画像における前記像の領域の数を判定する判定手段と、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成手段と、
を有することを特徴とする電子機器である。
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得手段と、
前記撮像画像に合成するマーカーの種別を判定する種別判定手段と、
前記撮像画像における前記像の領域の数を判定する判定手段と、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成手段と、
を有することを特徴とする電子機器である。
【0007】
本発明の１つの態様は、
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得ステップと、
前記撮像画像に合成するマーカーの種別を判定する種別判定ステップと、
前記撮像画像における前記像の領域の数を判定する判定ステップと、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成ステップと、
を有することを特徴とする電子機器の制御方法である。
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得ステップと、
前記撮像画像に合成するマーカーの種別を判定する種別判定ステップと、
前記撮像画像における前記像の領域の数を判定する判定ステップと、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成ステップと、
を有することを特徴とする電子機器の制御方法である。
【発明の効果】
【0008】
本発明によれば、ユーザによる撮像に適した位置にマーカーを生成することが可能になる。
【図面の簡単な説明】
【0009】
【図1】カメラの外観図である。
【図2】カメラの内部構成図である。
【図3】レンズユニットの構成を示す図である。
【図4A】マーカー制御処理のフローチャートである。
【図4B】マーカー制御処理のフローチャートである。
【図5】レンズ情報を説明する図である。
【図6】レンズ個体値を説明する図である。
【図7】センターマーカーを説明する図である。
【図8】垂直マーカーを説明する図である。
【図9】水平マーカーを説明する図である。
【図10】ユーザマーカーを説明する図である。
【発明を実施するための形態】
【0010】
＜実施形態＞
以下、図面を参照して本発明の好適な実施形態について説明する。本実施形態では、電子機器がデジタルカメラ（撮像装置）である場合を例にして説明する。
以下、図面を参照して本発明の好適な実施形態について説明する。本実施形態では、電子機器がデジタルカメラ（撮像装置）である場合を例にして説明する。
【0011】
【0012】
カメラ１００は、上面に、シャッターボタン１０１、電源スイッチ１０２、モード切替スイッチ１０３、メイン電子ダイヤル１０４、サブ電子ダイヤル１０５、動画ボタン１０６、ファインダ外表示部１０７を有する。シャッターボタン１０１は、撮影準備あるいは撮影指示を行うための操作部である。電源スイッチ１０２は、カメラ１００の電源のオンとオフとを切り替える操作部である。モード切替スイッチ１０３は、各種モードを切り替えるための操作部である。メイン電子ダイヤル１０４は、シャッター速度や絞りなどの設定値を変更するための回転式の操作部である。サブ電子ダイヤル１０５は、選択枠（カーソル）の移動や画像送りなどを行うための回転式の操作部である。動画ボタン１０６は、動画撮影（記録）の開始や停止の指示を行うための操作部である。ファインダ外表示部１０７は、シャッター速度や絞りなどの様々な設定値を表示する。
【0013】
また、カメラ１００は、背面に、表示部１０８、タッチパネル１０９、方向キー１１０、ＳＥＴボタン１１１、ＡＥロックボタン１１２を有する。カメラ１００は、背面に、拡大ボタン１１３、再生ボタン１１４、メニューボタン１１５、接眼部１１６、接眼検知部１１８、タッチバー１１９を有する。
【0014】
表示部１０８は、画像や各種情報を表示する。タッチパネル１０９は、表示部１０８の表示面（タッチ操作面）に対するタッチ操作を検出する操作部である。方向キー１１０は、上下左右にそれぞれ押下可能なキー（４方向キー）から構成される操作部である。カメラ１００は、押下された位置（方向キー１１０の位置）に応じた処理が可能である。
【0015】
ＳＥＴボタン１１１は、主に選択項目を決定するときに押下される操作部である。ＡＥロックボタン１１２は、撮影待機状態で露出状態を固定するときに押下される操作部である。
【0016】
拡大ボタン１１３は、撮影モードのライブビュー表示（ＬＶ表示）において拡大モードのオンとオフとを切り替えるための操作部である。拡大モードがオンである場合にはメイン電子ダイヤル１０４を操作することにより、ライブビュー画像（ＬＶ画像）が拡大または縮小する。また、拡大ボタン１１３は、再生モードにおいて再生画像を拡大させたり、拡大率を大きくさせたりするときに用いられる。
【0017】
再生ボタン１１４は、撮影モードと再生モードとを切り替えるための操作部である。撮影モードの場合に再生ボタン１１４を押下することで再生モードに移行し、後述する記録媒体２２７に記録された画像のうち最新の画像を表示部１０８に表示させることができる。
【0018】
メニューボタン１１５は、各種設定が可能なメニュー画面を表示部１０８に表示させるときに押下される操作部である。ユーザが表示部１０８に表示されたメニュー画面と、方向キー１１０やＳＥＴボタン１１１とを用いて直感的に各種設定を行うことができる。
【0019】
接眼部１１６は、接眼ファインダ（覗き込み型のファインダ）１１７に対して接眼するための部位である。ユーザは接眼部１１６を介して内部の後述するＥＶＦ２１７（Ｅｌｅｃｔｒｏｎｉｃ Ｖｉｅｗ Ｆｉｎｄｅｒ）に表示された映像を視認することができる。接眼検知部１１８は、接眼部１１６にユーザが接眼しているか否かを検知するセンサである。
【0020】
タッチバー１１９は、タッチ操作を受け付けることが可能なライン状のタッチ操作部（ラインタッチセンサ）である。タッチバー１１９は、右手の人差し指でシャッターボタン１０１を押下可能なようにグリップ部１２０を右手で握った状態（右手の小指、薬指、中指で握った状態）で、右手の親指でタッチ操作可能（タッチ可能）な位置に配置される。すなわち、タッチバー１１９は接眼部１１６に接眼して接眼ファインダ１１７を覗き、いつでもシャッターボタン１０１を押下できるように構えた状態（撮影姿勢）で操作可能である。タッチバー１１９は、タッチバー１１９に対するタップ操作（タッチして所定期間以内に移動せずに離す操作）、左右へのスライド操作（タッチした後、タッチしたままタッチ位置を移動する操作）などを受け付け可能である。タッチバー１１９は、タッチパネル１０９とは異なる操作部であり、表示機能を備えていない。本実施形態のタッチバー１１９は、マルチファンクションバーであって、例えばＭ－Ｆｎバーとして機能する。
【0021】
また、カメラ１００は、グリップ部１２０、サムレスト部１２１、端子カバー１２２、蓋１２３、通信端子１２４などを有する。グリップ部１２０は、ユーザがカメラ１００を構える際に右手で握りやすい形状に形成された保持部である。グリップ部１２０を右手の小指、薬指、中指で握ってカメラ１００を保持した状態で、右手の人差指で操作可能な位置にシャッターボタン１０１とメイン電子ダイヤル１０４が配置される。また、同様な状態で、右手の親指で操作可能な位置にサブ電子ダイヤル１０５とタッチバー１１９が配置される。
【0022】
サムレスト部１２１（親指待機位置）は、カメラ１００の背面側の、どの操作部も操作しない状態でグリップ部１２０を握った右手の親指を置きやすい箇所に設けられたグリップ部である。サムレスト部１２１は、保持力（グリップ感）を高めるためのラバー部材などで構成される。
【0023】
端子カバー１２２は、カメラ１００を外部機器に接続する接続ケーブルなどのコネクタを保護する。蓋１２３は、後述する記録媒体２２７を格納するためのスロットを閉塞することで記録媒体２２７およびスロットを保護する。通信端子１２４は、カメラ１００が着脱可能な後述するレンズユニット２００側と通信を行うための端子である。
【0024】
【0025】
まず、レンズユニット２００について説明する。レンズユニット２００は、カメラ１００に着脱可能な交換レンズの一種である。レンズユニット２００は、１眼レンズであり、通常のレンズの一例である。レンズユニット２００は、絞り２０１、レンズ２０２、絞り駆動回路２０３、ＡＦ（オートフォーカス）駆動回路２０４、レンズシステム制御回路２０５、通信端子２０６などを有する。
【0026】
絞り２０１は、開口径が調整可能に構成される。レンズ２０２は、複数枚のレンズから構成される。絞り駆動回路２０３は、絞り２０１の開口径を制御することで光量を調整する。ＡＦ駆動回路２０４は、レンズ２０２を駆動させて焦点を合わせる。レンズシステム制御回路２０５は、後述するシステム制御部５０の指示に基づいて、絞り駆動回路２０３、ＡＦ駆動回路２０４などを制御する。レンズシステム制御回路２０５は、絞り駆動回路２０３を介して絞り２０１の制御を行い、ＡＦ駆動回路２０４を介してレンズ２０２の位置を変位させることで焦点を合わせる。レンズシステム制御回路２０５は、カメラ１００との間で通信可能である。具体的には、レンズユニット２００の通信端子２０６と、カメラ１００の通信端子１２４とを介して通信される。通信端子２０６は、レンズユニット２００がカメラ１００側と通信を行うための端子である。
【0027】
次に、カメラ１００について説明する。カメラ１００は、シャッター２１０、撮像部２１１、Ａ／Ｄ変換器２１２、メモリ制御部２１３、画像処理部２１４、メモリ２１５、Ｄ／Ａ変換器２１６、ＥＶＦ２１７、表示部１０８、システム制御部５０を有する。
【0028】
シャッター２１０は、システム制御部５０の指示に基づいて撮像部２１１の露光時間を自由に制御できるフォーカルプレーンシャッターである。撮像部２１１は、光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子などで構成される撮像素子（イメージセンサ）である。撮像部２１１は、システム制御部５０にデフォーカス量情報を出力する撮像面位相差センサを有していてもよい。Ａ／Ｄ変換器２１２は、撮像部２１１から出力されるアナログ信号をデジタル信号に変換する。
【0029】
画像処理部２１４は、Ａ／Ｄ変換器２１２からのデータまたはメモリ制御部２１３からのデータに対し所定の処理（画素補間、縮小などのリサイズ処理、色変換処理など）を行う。また、画像処理部２１４は、撮影した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御部５０が露光制御や測距制御を行う。この処理により、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理などが行われる。更に、画像処理部２１４は、撮影した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理を行う。
【0030】
Ａ／Ｄ変換器２１２からの画像データは、画像処理部２１４およびメモリ制御部２１３を介してメモリ２１５に書き込まれる。あるいは、Ａ／Ｄ変換器２１２からの画像データは、画像処理部２１４を介さずにメモリ制御部２１３を介してメモリ２１５に書き込まれる。メモリ２１５は、撮像部２１１によって得られＡ／Ｄ変換器２１２によりデジタルデータに変換された画像データや、表示部１０８やＥＶＦ２１７に表示するための画像データを格納する。メモリ２１５は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。また、メモリ２１５は画像表示用のメモリ（ビデオメモリ）を兼ねている。
【0031】
Ｄ／Ａ変換器２１６は、メモリ２１５に格納されている画像表示用のデータをアナログ信号に変換して表示部１０８やＥＶＦ２１７に供給する。したがって、メモリ２１５に書き込まれた表示用の画像データは、Ｄ／Ａ変換器２１６を介して表示部１０８やＥＶＦ２１７に表示される。表示部１０８やＥＶＦ２１７は、Ｄ／Ａ変換器２１６からのアナログ信号に応じた表示を行う。表示部１０８やＥＶＦ２１７は、例えば、ＬＣＤや有機ＥＬなどのディスプレイである。Ａ／Ｄ変換器２１２によってＡ／Ｄ変換されメモリ２１５に蓄積されたデジタル信号をＤ／Ａ変換器２１６でアナログ信号に変換し、表示部１０８やＥＶＦ２１７に逐次転送して表示することで、ライブビュー表示が行われる。
【0032】
システム制御部５０は、少なくとも１つのプロセッサおよび／または少なくとも１つの回路からなる制御部である。すなわち、システム制御部５０は、プロセッサであってもよく、回路であってもよく、プロセッサと回路の組み合わせであってもよい。システム制御部５０は、カメラ１００全体を制御する。システム制御部５０は、不揮発性メモリ２１９に記録されたプログラムを実行することで、後述するフローチャートの各処理を実現する。また、システム制御部５０は、メモリ２１５、Ｄ／Ａ変換器２１６、表示部１０８、ＥＶＦ２１７などを制御することにより表示制御も行う。
【0033】
また、カメラ１００は、システムメモリ２１８、不揮発性メモリ２１９、システムタイマ２２０、通信部２２１、姿勢検知部２２２、接眼検知部１１８を有する。
【0034】
システムメモリ２１８には、例えばＲＡＭが用いられる。システムメモリ２１８には、システム制御部５０の動作用の定数、変数、不揮発性メモリ２１９から読み出したプログラムなどが展開される。不揮発性メモリ２１９は、電気的に消去・記録可能なメモリである。不揮発性メモリ２１９には、例えばＥＥＰＲＯＭが用いられる。不揮発性メモリ２１９には、システム制御部５０の動作用の定数、プログラムなどが記録される。ここでのプログラムとは、後述するフローチャートを実行するためのプログラムである。
【0035】
システムタイマ２２０は、各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。通信部２２１は、無線または有線ケーブルによって接続された外部機器との間で、映像信号や音声信号の送受信を行う。
【0036】
通信部２２１は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）やインターネットとも接続可能である。また、通信部２２１は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＢｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙでも外部機器と通信可能である。通信部２２１は、撮像部２１１で撮影した画像（ライブ画像を含む）や、記録媒体２２７に記録された画像を送信可能であり、外部機器から画像データやその他の各種情報を受信することができる。
【0037】
姿勢検知部２２２は、重力方向に対するカメラ１００の姿勢を検知する。姿勢検知部２２２で検知された姿勢に基づいて、撮像部２１１で撮影された画像が、カメラ１００を横に構えて撮影された画像であるか、縦に構えて撮影された画像であるかを判別可能である。システム制御部５０は、姿勢検知部２２２で検知された姿勢に応じた向き情報を撮像部２１１で撮影された画像の画像ファイルに付加したり、検知された姿勢に応じて画像を回転したりすることが可能である。姿勢検知部２２２には、例えば、加速度センサやジャイロセンサなどを用いることができる。姿勢検知部２２２を用いて、カメラ１００の動き（パン、チルト、持ち上げ、静止しているか否かなど）を検知することも可能である。
【0038】
接眼検知部１１８は、ＥＶＦ２１７を内蔵する接眼ファインダ１１７の接眼部１１６に対する何らかの物体の接近を検知することができる。接眼検知部１１８は、例えば、赤外
線近接センサを用いることができる。物体が接近した場合、接眼検知部１１８の投光部から投光した赤外線が物体で反射して赤外線近接センサの受光部で受光される。受光された赤外線の量によって接眼部１１６から物体までの距離を判別することができる。このように、接眼検知部１１８は、接眼部１１６に対する物体の近接距離を検知する接眼検知を行う。
線近接センサを用いることができる。物体が接近した場合、接眼検知部１１８の投光部から投光した赤外線が物体で反射して赤外線近接センサの受光部で受光される。受光された赤外線の量によって接眼部１１６から物体までの距離を判別することができる。このように、接眼検知部１１８は、接眼部１１６に対する物体の近接距離を検知する接眼検知を行う。
【0039】
接眼検知部１１８は、接眼ファインダ１１７の接眼部１１６に対する眼（物体）の接近（接眼）および離反（離眼）を検知する接眼検知センサである。接眼検知部１１８は、非接眼状態（非接近状態）から、接眼部１１６に対して所定距離以内に近づく物体が検知された場合に、接眼されたと検知する。一方、接眼検知部１１８は、接眼状態（接近状態）から、接近を検知していた物体が所定距離以上離れた場合に、離眼されたと検知する。接眼を検知する閾値と、離眼を検知する閾値は、例えばヒステリシスを設けることなどにより異なっていてもよい。また、接眼を検知した後は、離眼を検知するまでは接眼状態であるものとする。離眼を検知した後は、接眼を検知するまでは非接眼状態であるものとする。
【0040】
システム制御部５０は、接眼検知部１１８で検知された状態に応じて、表示部１０８とＥＶＦ２１７の表示（表示状態）／非表示（非表示状態）を切り替える。具体的には、少なくとも撮影待機状態であって、かつ、表示先の切替設定が自動切替である場合、非接眼中には表示先を表示部１０８として、ＥＶＦ２１７では非表示とする。また、接眼中には表示先をＥＶＦ２１７として、表示部１０８では非表示とする。なお、接眼検知部１１８は、赤外線近接センサである場合に限られず、接眼とみなせる状態を検知できるものであれば他のセンサを用いてもよい。
【0041】
また、カメラ１００は、ファインダ外表示部１０７、ファインダ外表示駆動回路２２３、電源制御部２２４、電源部２２５、記録媒体Ｉ／Ｆ２２６、操作部２２８などを有する。
【0042】
ファインダ外表示部１０７は、ファインダ外表示駆動回路２２３を介して、シャッター速度や絞りなどのカメラ１００の様々な設定値を表示する。
【0043】
電源制御部２２４は、電池検出回路、ＤＣ－ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路などを有する。電源制御部２２４は、電池の装着の有無、電池の種類、および電池残量などを検出する。また、電源制御部２２４は、その検出結果およびシステム制御部５０の指示に基づいてＤＣ－ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２２７を含む各部へ供給する。
【0044】
電源部２２５は、一次電池（アルカリ電池またはリチウム電池など）、二次電池（ＮｉＣｄ電池、ＮｉＭＨ電池またはＬｉ電池など）、またはＡＣアダプターなどである。
【0045】
記録媒体Ｉ／Ｆ２２６は、メモリカードやハードディスクなどの記録媒体２２７とのインターフェースである。記録媒体２２７は、撮影された画像を記録するためのメモリカードなどであり、半導体メモリや磁気ディスクなどから構成される。記録媒体２２７は、カメラ１００に対して着脱可能であってもよく、カメラ１００に内蔵されていてもよい。
【0046】
操作部２２８は、ユーザからの操作（ユーザ操作）を受け付ける入力部であり、システム制御部５０に各種の指示を入力するために用いられる。操作部２２８は、シャッターボタン１０１、電源スイッチ１０２、モード切替スイッチ１０３、タッチパネル１０９、他の操作部２２９などを含む。
【0047】
他の操作部２２９は、メイン電子ダイヤル１０４、サブ電子ダイヤル１０５、動画ボタン１０６、方向キー１１０、ＳＥＴボタン１１１、ＡＥロックボタン１１２、拡大ボタン１１３、再生ボタン１１４、メニューボタン１１５、タッチバー１１９などを含む。
【0048】
シャッターボタン１０１は、第１シャッタースイッチ２３０と第２シャッタースイッチ２３１を有する。第１シャッタースイッチ２３０は、シャッターボタン１０１の操作途中、いわゆる半押し（撮影準備指示）でオンとなり、第１シャッタースイッチ信号ＳＷ１を発生させる。システム制御部５０は、第１シャッタースイッチ信号ＳＷ１の発生により、撮影準備処理（ＡＦ処理、ＡＥ処理、ＡＷＢ処理、またはＥＦ処理など）を開始する。第２シャッタースイッチ２３１は、シャッターボタン１０１の操作完了、いわゆる全押し（撮影指示）でオンとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部５０は、第２シャッタースイッチ信号ＳＷ２の発生により、一連の撮影処理（撮像部２１１からの信号読み出しから、撮影された画像を含む画像ファイルを生成して記録媒体２２７に書き込むまでの処理）を開始する。
【0049】
モード切替スイッチ１０３は、静止画撮影モード、動画撮影モード、再生モードなどのいずれかに、システム制御部５０の動作モードを切り替える。静止画撮影モードに含まれるモードには、オート撮影モード、オートシーン判別モード、マニュアルモード、絞り優先モード（Ａｖモード）、シャッター速度優先モード（Ｔｖモード）、プログラムＡＥモード（Ｐモード）がある。また、静止画撮影モードに含まれるモードには、撮影シーン別の撮影設定となる各種シーンモード、カスタムモードなどがある。ユーザは、モード切替スイッチ１０３により、上述した撮影モードのいずれかに直接、切り替えることができる。あるいは、ユーザは、モード切替スイッチ１０３により撮影モードの一覧画面に一旦切り替えた後に、表示された複数のモードのいずれかに操作部２２８を用いて選択的に切り替えることができる。同様に、動画撮影モードにも複数のモードが含まれていてもよい。
【0050】
タッチパネル１０９は、表示部１０８の表示面（タッチパネル１０９の操作面）への各種タッチ操作を検出するタッチセンサである。タッチパネル１０９と表示部１０８とは一体的に構成することができる。例えば、タッチパネル１０９は、光の透過率が表示部１０８の表示を妨げないように、表示部１０８の表示面の上層に取り付けられる。そして、タッチパネル１０９における入力座標と、表示部１０８の表示面上の表示座標とを対応付けることで、あたかもユーザが表示部１０８上に表示された画面を直接的に操作可能であるかのようなＧＵＩ（グラフィカルユーザインターフェース）を構成できる。
【0051】
タッチパネル１０９には、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式などの様々な方式のうちいずれかの方式を用いることができる。方式によって、タッチパネル１０９に対する接触があったことでタッチがあったと検知する方式や、タッチパネル１０９に対する指やペンの接近があったことでタッチがあったと検知する方式があるが、いずれの方式であってもよい。
【0052】
システム制御部５０は、タッチパネル１０９に対する以下の操作あるいは状態を検出できる。
・タッチパネル１０９にタッチしていなかった指やペンが新たにタッチパネル１０９にタッチしたこと、すなわちタッチの開始（以下、タッチダウン（Ｔｏｕｃｈ－Ｄｏｗｎ）という）。
・タッチパネル１０９を指やペンでタッチしている状態（以下、タッチオン（Ｔｏｕｃｈ－Ｏｎ）という）。
・タッチパネル１０９を指やペンがタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ－Ｍｏｖｅ）という）。
・タッチパネル１０９へタッチしていた指やペンがタッチパネル１０９から離れた（リリ
ースされた）こと、すなわちタッチの終了（以下、タッチアップ（Ｔｏｕｃｈ－Ｕｐ）という）。
・タッチパネル１０９に何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ－Ｏｆｆ）という）。
・タッチパネル１０９にタッチしていなかった指やペンが新たにタッチパネル１０９にタッチしたこと、すなわちタッチの開始（以下、タッチダウン（Ｔｏｕｃｈ－Ｄｏｗｎ）という）。
・タッチパネル１０９を指やペンでタッチしている状態（以下、タッチオン（Ｔｏｕｃｈ－Ｏｎ）という）。
・タッチパネル１０９を指やペンがタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ－Ｍｏｖｅ）という）。
・タッチパネル１０９へタッチしていた指やペンがタッチパネル１０９から離れた（リリ
ースされた）こと、すなわちタッチの終了（以下、タッチアップ（Ｔｏｕｃｈ－Ｕｐ）という）。
・タッチパネル１０９に何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ－Ｏｆｆ）という）。
【0053】
タッチダウンが検出されると、同時にタッチオンも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出された場合も、同時にタッチオンが検出される。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていた全ての指やペンがタッチアップしたことが検出された後は、タッチオフとなる。
【0054】
これらの操作・状態や、タッチパネル１０９上に指やペンがタッチしている位置座標は内部バスを通じてシステム制御部５０に通知される。システム制御部５０は通知された情報に基づいてタッチパネル１０９上にどのような操作（タッチ操作）が行われたかを判定する。タッチムーブについてはタッチパネル１０９上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル１０９上の垂直成分・水平成分ごとに判定できる。所定距離以上をタッチムーブしたことが検出された場合はスライド操作が行われたと判定される。
【0055】
タッチパネル１０９上に指をタッチしたままある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックという。フリックは、言い換えればタッチパネル１０９上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行われたと判定される（スライド操作に続いてフリックがあったものと判定できる）。更に、複数箇所（例えば２点）をともにタッチして（マルチタッチして）、互いのタッチ位置を近づけるタッチ操作をピンチイン、互いのタッチ位置を遠ざけるタッチ操作をピンチアウトという。ピンチアウトとピンチインを総称してピンチ操作（あるいは単にピンチ）という。
【0056】
図３は、レンズユニット３００の構成の一例を示す模式図である。図３では、レンズユニット３００をカメラ１００に装着した状態を示している。なお、図３に示すカメラ１００のうち図２で説明した構成と同一の構成は、同一符号を付して適宜、説明を省略する。
【0057】
レンズユニット３００は、カメラ１００に着脱可能な交換レンズの一種である。レンズユニット３００は、左像および右像で視差がある撮影が可能な２眼レンズである。レンズユニット３００は、２つの光学系を有し、それぞれ略１８０度の広視野角であって、前方半球の範囲を撮影できる。具体的に、レンズユニット３００の２つの光学系は、それぞれ左右方向（水平角度、方位角、ヨー角）１８０度、上下方向（垂直角度、仰俯角、ピッチ角）１８０度の視野分（画角分）の被写体を撮影できる。
【0058】
レンズユニット３００は、複数のレンズと反射ミラーなどを有する右眼光学系３０１Ｒ、複数のレンズと反射ミラーなどを有する左眼光学系３０１Ｌ、レンズシステム制御回路３０３を有する。右眼光学系３０１Ｒは第１の光学系の一例であり、左眼光学系３０１Ｌは第２の光学系の一例である。右眼光学系３０１Ｒは被写体側に配置されるレンズ３０２Ｒを有し、左眼光学系３０１Ｌは被写体側に配置されるレンズ３０２Ｌを有する。レンズ３０２Ｒとレンズ３０２Ｌは同じ方向を向いており、それらの光軸は略平行である。
【0059】
本実施形態のレンズユニット３００は、２眼立体視が可能なＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）画像のフォーマットであるいわゆるＶＲ１８０の画像を得るためのＶＲ１８０用レンズである。ＶＲ１８０用レンズでは、右眼光学系３０１Ｒおよび左眼光学系３０１Ｌのそれぞれが、略１８０度の範囲を捉えることが可能な魚眼レンズを有する。なお
、ＶＲ１８０用レンズは、右眼光学系３０１Ｒおよび左眼光学系３０１ＬがそれぞれＶＲ１８０としての２眼ＶＲ表示が可能な映像が取得できればよく、１８０度の範囲よりも狭い１６０度程度の広視野角の範囲を捉えることが可能なレンズであってもよい。ＶＲ１８０用レンズは、右眼光学系３０１Ｒを介して形成される右像（第一像）と、右像とは視差を有する左眼光学系３０１Ｌを介して形成される左像（第二像）とを、装着したカメラの１つまたは２つの撮像素子上に結像することができる。
、ＶＲ１８０用レンズは、右眼光学系３０１Ｒおよび左眼光学系３０１ＬがそれぞれＶＲ１８０としての２眼ＶＲ表示が可能な映像が取得できればよく、１８０度の範囲よりも狭い１６０度程度の広視野角の範囲を捉えることが可能なレンズであってもよい。ＶＲ１８０用レンズは、右眼光学系３０１Ｒを介して形成される右像（第一像）と、右像とは視差を有する左眼光学系３０１Ｌを介して形成される左像（第二像）とを、装着したカメラの１つまたは２つの撮像素子上に結像することができる。
【0060】
また、レンズユニット３００は、レンズマウント部３０４と、カメラ１００のカメラマウント部３０５とを介して、カメラ１００に装着される。レンズユニット３００がカメラ１００に装着されることで、通信端子１２４と通信端子３０６とを介して、カメラ１００のシステム制御部５０とレンズユニット３００のレンズシステム制御回路３０３とが電気的に接続される。
【0061】
本実施形態では、右眼光学系３０１Ｒを介して形成される右像と、右像とは視差を有する左眼光学系３０１Ｌを介して形成される左像とは、並んでカメラ１００の撮像部２１１に結像される。すなわち、右眼光学系３０１Ｒおよび左眼光学系３０１Ｌにより形成される２つの光学像が１つの撮像素子上に形成される。撮像部２１１は、結像された被写体像（光信号）をアナログ電気信号に変換する。このように、レンズユニット３００を用いることで、右眼光学系３０１Ｒと左眼光学系３０１Ｌとの２つの箇所（光学系）から視差がある２つの画像を同時に（セットで）取得することができる。また、取得された画像を左眼用の画像と右眼用の画像とに分けてＶＲ表示することで、ユーザは略１８０度の範囲の立体的なＶＲ画像、いわゆるＶＲ１８０を視聴することができる。
【0062】
ここで、ＶＲ画像とは、後述するＶＲ表示することができる画像である。ＶＲ画像には、全方位カメラ（全天球カメラ）で撮影した全方位画像（全天球画像）や、表示部に一度で表示できる表示範囲より広い映像範囲（有効映像範囲）を持つパノラマ画像などが含まれる。また、ＶＲ画像には、静止画に限られず、動画、ライブ画像（カメラからほぼリアルタイムで取得した画像）も含まれる。ＶＲ画像は、最大で、左右方向３６０度、上下方向３６０度の視野分の映像範囲（有効映像範囲）を持つ。また、ＶＲ画像には、左右方向３６０度未満、上下方向３６０度未満であっても、通常のカメラで撮影可能な画角よりも広範な画角、あるいは、表示部に一度で表示できる表示範囲より広い映像範囲を持つ画像も含まれる。
【0063】
上述したレンズユニット３００を用いてカメラ１００で撮影される画像は、ＶＲ画像の一種である。ＶＲ画像は、例えば、表示装置（ＶＲ画像を表示できる表示装置）の表示モードを「ＶＲビュー」に設定することでＶＲ表示することができる。３６０度の画角を有するＶＲ画像をＶＲ表示させて、ユーザが表示装置の姿勢を左右方向（水平回転方向）に変化させることで、左右方向に継ぎ目のない全方位の映像を観賞することができる。
【0064】
ここで、ＶＲ表示（ＶＲビュー）とは、ＶＲ画像のうち、表示装置の姿勢に応じた視野範囲の映像を表示する、表示範囲を変更可能な表示方法（表示モード）である。ＶＲ表示には、ＶＲ画像を仮想球体にマッピングする変形（歪曲補正が施される変形）を行って１つの画像を表示する「１眼ＶＲ表示（１眼ＶＲビュー）」がある。また、ＶＲ表示には、左眼用のＶＲ画像と右眼用のＶＲ画像とをそれぞれ仮想球体にマッピングする変形を行って左右の領域に並べて表示する「２眼ＶＲ表示（２眼ＶＲビュー）」がある。互いに視差を有する左眼用のＶＲ画像と右眼用のＶＲ画像を用いて「２眼ＶＲ表示」を行うことで、ユーザは立体視することが可能である。
【0065】
いずれのＶＲ表示であっても、例えば、ユーザがＨＭＤ（ヘッドマウントディスプレイ）などの表示装置を装着した場合、ユーザの顔の向きに応じた視野範囲の映像が表示され
る。例えば、ＶＲ画像のうち、ある時点で左右方向に０度（特定の方位、例えば北）、上下方向に９０度（天頂から９０度、すなわち水平）を中心とした視野範囲の映像を表示しているとする。この状態から表示装置の姿勢を表裏反転させる（例えば、表示面を南向きから北向きに変更する）と、同じＶＲ画像のうち、左右方向に１８０度（逆の方位、例えば南）、上下方向に９０度を中心とした視野範囲の映像に、表示範囲が変更される。すなわち、ユーザがＨＭＤを装着した状態で、顔を北から南に向く（すなわち後ろを向く）ことで、ＨＭＤに表示される映像も北の映像から南の映像に変更される。
る。例えば、ＶＲ画像のうち、ある時点で左右方向に０度（特定の方位、例えば北）、上下方向に９０度（天頂から９０度、すなわち水平）を中心とした視野範囲の映像を表示しているとする。この状態から表示装置の姿勢を表裏反転させる（例えば、表示面を南向きから北向きに変更する）と、同じＶＲ画像のうち、左右方向に１８０度（逆の方位、例えば南）、上下方向に９０度を中心とした視野範囲の映像に、表示範囲が変更される。すなわち、ユーザがＨＭＤを装着した状態で、顔を北から南に向く（すなわち後ろを向く）ことで、ＨＭＤに表示される映像も北の映像から南の映像に変更される。
【0066】
なお、本実施形態のレンズユニット３００を用いて撮影したＶＲ画像は、前方略１８０度の範囲を撮影したＶＲ１８０の画像であり、後方略１８０度の範囲の映像は存在しない。このようなＶＲ１８０の画像をＶＲ表示させて、映像が存在しない側に表示装置の姿勢を変更した場合にはブランク領域が表示される。
【0067】
このようにＶＲ画像をＶＲ表示することによって、ユーザは視覚的にあたかもＶＲ画像内（ＶＲ空間内）にいるような感覚になる。なお、ＶＲ画像の表示方法は表示装置の姿勢を変更する方法に限られない。例えば、タッチパネルや方向ボタンなどを介したユーザ操作に応じて、表示範囲を移動（スクロール）させてもよい。また、ＶＲ表示時（表示モード「ＶＲビュー」時）において、姿勢変化による表示範囲の変更に加え、タッチパネルでのタッチムーブ、マウスなどでのドラッグ操作、方向ボタンの押下などに応じて表示範囲が変更されてもよい。なお、ＶＲゴーグル（ヘッドマウントアダプタ）に装着されたスマートフォンはＨＭＤの一種である。
【0068】
レンズユニット３００を介するカメラ１００の撮影による撮像画像は、右眼光学系および左眼光学系を介してそれぞれ撮影されるために２つの領域に分かれる。
【0069】
（マーカー制御処理について）
図４Ａおよび図４Ｂのフローチャートを参照して、マーカー（撮影者が撮影時の構図を決める際の目安として使用される指標）の表示を制御するマーカー制御処理を説明する。図４Ａおよび図４Ｂのフローチャートは、システム制御部５０が不揮発性メモリ２１９に記録されたプログラムをシステムメモリ２１８に展開して実行することにより実現する。また、図４Ａのフローチャートの処理は、デジタルカメラ１００が静止画撮影モード、あるいは動画撮影モードに設定されることにより、開始する。
図４Ａおよび図４Ｂのフローチャートを参照して、マーカー（撮影者が撮影時の構図を決める際の目安として使用される指標）の表示を制御するマーカー制御処理を説明する。図４Ａおよび図４Ｂのフローチャートは、システム制御部５０が不揮発性メモリ２１９に記録されたプログラムをシステムメモリ２１８に展開して実行することにより実現する。また、図４Ａのフローチャートの処理は、デジタルカメラ１００が静止画撮影モード、あるいは動画撮影モードに設定されることにより、開始する。
【0070】
なお、ユーザは、マーカー表示の有無の設定（撮影者が撮影時の構図を決める際の目安として使用される機能の設定）や、マーカー種別（マーカーを表示する場合のマーカーの表示形態）の設定を予め行うことができる。
【0071】
ステップＳ４０１では、システム制御部５０は、撮像部２１１の撮像処理により生成された撮像画像を取得する。
【0072】
ステップＳ４０２では、システム制御部５０は、カメラ１００に装着されたレンズユニット（以下、「装着レンズユニット」と呼ぶ）の種類の情報を取得する。そして、システム制御部５０は、装着レンズユニットの種類の情報を参照して、装着レンズユニットが２眼レンズであるか否かを判定する。具体的には、システム制御部５０は、通信端子１２４，２０６，３０６を介して装着レンズユニットと通信することによって、装着レンズユニットから装着レンズユニットの種類の情報を取得する。装着レンズユニットが２眼レンズであると判定された場合には、ステップＳ４０３に進む。一方、装着レンズユニットが２眼レンズでないと判定された場合には、図４ＢのステップＳ４３３に進む。装着レンズユニットが２眼レンズでないと判定された場合とは、例えば、レンズユニットが非装着であると判定された場合、または装着レンズユニットが１眼レンズなどの通常のレンズユニッ
トであると判定された場合である。なお、システム制御部５０は、レンズ情報におけるレンズフラグ（後述）に基づき、装着レンズユニットが２眼レンズであるか否かを判定してもよい。
トであると判定された場合である。なお、システム制御部５０は、レンズ情報におけるレンズフラグ（後述）に基づき、装着レンズユニットが２眼レンズであるか否かを判定してもよい。
【0073】
なお、ステップＳ４０２では、システム制御部５０は、光学系に対応する像の領域（撮像画像に含まれる像の領域）の数が２であるか否かを判定できればよい。例えば、システム制御部５０は、撮像画像を分析することにより、像の領域の数が２であるか否かを判定できる。この場合には、像の領域の数が２であればステップＳ４０３に進み、像の領域の数が１であれば図４ＢのステップＳ４３３に進めばよい。
【0074】
ステップＳ４０３では、システム制御部５０は、マーカー表示の有無の設定において、「マーカー表示あり」に設定されている（マーカーを表示する設定がされている）か否かを判定する。「マーカー表示あり」に設定されていると判定された場合には、ステップＳ４１０に進む。「マーカー表示なし」に設定されていると判定された場合にはステップＳ４０４に進む。
【0075】
ステップＳ４０４では、システム制御部５０は、ステップＳ４０１において取得した撮像画像からライブビュー表示用画像（表示部１０８に表示するＬＶ表示用画像）を生成する。なお、ライブビュー表示用画像には、撮影設定の内容を示すアイコンなども合成されていてもよい。
【0076】
ステップＳ４０５では、システム制御部５０は、ライブビュー表示用画像を表示部１０８に表示する。
【0077】
ステップＳ４０６では、システム制御部５０は、ＬＶ表示を終了する指示（ユーザからの指示）を受け付けたか否かを判定する。終了する指示を受け付けたと判定された場合には、本フローチャートの処理が終了する。終了する指示を受け付けていないと判定された場合には、ステップＳ４０１に進む。
【0078】
ステップＳ４１０では、システム制御部５０は、撮像素子上に形成された右眼光学系３０１Ｒを介して形成される右像（第一像）の領域と、左眼光学系３０１Ｌを介して形成される左像（第二像）の領域とのそれぞれの中心位置の座標（中心座標）を算出する。カメラ１００に二眼レンズが装着されている場合には、右像の領域と左像の領域それぞれの中心位置の座標について、以下に説明されるような原因によって設計値から誤差が発生する。そこで、ステップＳ４１０では、システム制御部５０は、撮像素子上に形成される画像（撮像画像）を左右に分割した領域それぞれの中心位置を、レンズ情報（下記のイメージサークル位置やイメージサークル位置ずれの情報）にしたがって補正する。これにより、システム制御部５０は、マーカーを合成する位置を決定する際の基準位置の座標として、撮像画像における右像の中心位置の座標と左像の中心位置の座標を算出する。なお、ステップＳ４１０において算出される座標は、中心位置の座標以外であってもよく、例えば、各像の領域の右端、左端、上端および下端の位置の座標であってもよい。また、ステップＳ４１０において算出される座標は、例えば、各像の領域が矩形であれば、４つの頂点の座標であってもよいし、各像の領域が楕円であれば、２つの焦点の座標であってもよい。つまり、ステップＳ４１０において算出される座標は、マーカーを合成する際の基準となる座標であれば、任意の基準位置の座標であってよい。
【0079】
図５Ａは、レンズ情報（カメラ１００に装着された光学系に関する情報；光学系情報）の一例を示す模式図である。カメラ１００のシステム制御部５０は、通信端子１２４とレンズユニット３００の通信端子３０６とを介して、レンズユニット３００からレンズ情報を取得する。レンズ情報は、レンズ設計値、レンズ個体値、レンズフラグ、レンズ焦点距
離、およびレンズ温度などを含む。
離、およびレンズ温度などを含む。
【0080】
レンズ設計値は、収差補正を行うための設計値である。２眼レンズの製造過程では、２つの光学系（左眼光学系３０１Ｌと右眼光学系３０１Ｒ）それぞれにおいて、レンズの偏芯や傾きなどの誤差が発生する。レンズ個体値は、２眼レンズの製造過程で検出した誤差（設定値からの誤差）の測定結果などである。レンズ設計値とレンズ個体値の詳細については、図５Ｂを用いて後述する。レンズフラグは、２眼レンズであることを示すフラグである。レンズフラグは、カメラ１００に装着されているレンズユニット３００の種別が２眼レンズであるか否かを識別するために使用できる。レンズ焦点距離は、レンズの中心である「主点」から撮像素子（結像位置）までの距離である。レンズ焦点距離は、２眼レンズの２つの光学系（左眼光学系３０１Ｌと右眼光学系３０１Ｒ）で共通のパラメータであってもよいし、そうでなくてもよい。レンズ温度は、２眼レンズの温度であり、撮影時の環境温度などを把握するために使用される。
【0081】
図５Ｂは、レンズ設計値とレンズ個体値の詳細を示す模式図である。レンズ設計値は、イメージサークル位置、イメージサークル直径、画角、歪曲補正係数などを含む。
【0082】
イメージサークル位置は、撮像される画像における光学系の光軸中心座標（光軸中心座標の設計値）であり、２眼レンズの２つの光学系（左眼光学系３０１Ｌと右眼光学系３０１Ｒ）のそれぞれについて用意される。つまり、イメージサークル位置は、撮像素子上に結像するイメージサークル（円周魚眼画像）の中心座標（中心位置の座標）であり、右像と左像のそれぞれについて用意される。座標の原点は、例えば、撮像素子の中心（撮像画像の中心）である。イメージサークル位置は、水平方向の座標と垂直方向の座標とを含む。なお、撮像画像における光学系の光軸中心に関する様々な情報を、イメージサークル位置として使用することができる。例えば、イメージサークル位置として、撮像画像における所定の位置（中心や左上隅など）から光軸中心までの距離などを使用することができる。
【0083】
イメージサークル直径は、撮像素子上に結像するイメージサークル（円周魚眼画像）の直径である。画角は、撮像素子上に結像するイメージサークル（円周魚眼画像）の画角である。歪曲補正係数は、レンズの理想像高に対する設計像高の比である。像高ごとに歪曲補正係数を設定し、歪曲補正係数が設定されていない像高については、複数の歪曲補正係数を用いた補間演算により歪曲補正係数を算出してもよい。像高と歪曲補正係数の関係を近似した多項式を設定してもよい。イメージサークル直径、画角、および歪曲補正係数は、２眼レンズの２つの光学系（左眼光学系３０１Ｌと右眼光学系３０１Ｒ）で共通のパラメータであってもよいし、そうでなくてもよい。
【0084】
レンズ個体値は、イメージサークル位置ずれ、光軸傾き、像倍率ずれなどを含む。これらの情報は、２眼レンズの２つの光学系（左眼光学系３０１Ｌと右眼光学系３０１Ｒ）のそれぞれについて測定を行って用意される。
【0085】
イメージサークル位置ずれは、撮像素子上に結像するイメージサークル（円周魚眼画像）の中心座標の、設計値からのずれである。例えば、イメージサークル位置ずれは、水平方向のずれと、垂直方向のずれとを含む。設計値の座標（水平方向の座標と垂直方向の座標とを含む２次元座標）を原点として、水平方向の座標により水平方向のずれが示され、垂直方向の座標により垂直方向のずれが示される。
【0086】
図６Ａにイメージサークル位置ずれの一例を示す。領域６０１はセンサーサイズ画面（撮像面）の右または左半分の領域を示す。イメージサークル６０２は実際の右または左のレンズのイメージサークルである。イメージサークル６０３は理想の光学系（設計値）の
イメージサークルである。実際のイメージサークル６０２の位置と理想のイメージサークル６０３との間には、ずれが発生している。
イメージサークルである。実際のイメージサークル６０２の位置と理想のイメージサークル６０３との間には、ずれが発生している。
【0087】
光軸傾きは、被写体側の光軸の向きの、設計値からのずれである。例えば、光軸傾きは、水平方向のずれと垂直方向のずれとを含む。各方向のずれは角度で示される。図６Ｂに光学傾きによる水平方向のずれの一例を示す。線６１２は実際の右または左のレンズの水平方向の光軸の向き（傾き）を示す。線６１３は理想の光学系（設計値）の水平方向の光軸の向きを示す。実際の水平方向の光軸の向き６１２と理想の水平方向の光軸の向き６１３との間には、ずれが発生している。
【0088】
また、図６Ｃに光学傾きによる垂直方向のずれの一例を示す。線６２２は実際の右または左のレンズの水平方向の光軸の向きを示す。線６２３は理想の光学系（設計値）の水平方向の光軸の向きを示す。実際の水平方向の光軸の向き６２２と理想の水平方向の光軸の向き６２３との間には、ずれが発生している。
【0089】
像倍率ずれは、撮像素子上に結像するイメージサークル（円周魚眼画像）の大きさの、設計値からのずれである。このずれは、例えば、設計値に対する比率で示される。図６Ｄに像倍率ずれの一例を示す。イメージサークル６３２は実際の右または左のレンズを介して撮像素子上に結像するイメージサークルである。イメージサークル６３３は理想の光学系（設計値）を介して撮像素子上に結像するイメージサークルである。実際のイメージサークル６３２と理想の光学系のイメージサークル６３３との間には、ずれが発生している。
【0090】
なお、レンズ情報に含まれる情報は、上述した情報に限られない。例えば、レンズ情報は、撮影された画像における右像と左像それぞれの境界位置（円周魚眼画像の縁の位置）を含んでもよい。レンズ情報は、撮影された画像における右像と左像の間の中点座標を含んでもよい。多くの場合、中点座標は撮影された画像の中心座標と一致する。
【0091】
上述のレンズ設計値やレンズ個体値で示されるように、デジタルカメラ１００に装着されているレンズユニット３００のイメージサークルの位置は誤差が発生するため、単に画面を左右に分割した領域の中央は、左像および右像の中心とは一致しない。
【0092】
ステップＳ４１１では、システム制御部５０は、ユーザにより設定されているマーカー種別（マーカーの種別）がセンターマーカーであるか否かを判定する。マーカー種別がセンターマーカーであると判定された場合には、ステップＳ４１２に進む。マーカー種別がセンターマーカーでないと判定された場合には、ステップＳ４１３に進む。
【0093】
ステップＳ４１２では、システム制御部５０は、ステップＳ４１０で算出された右像の領域と左像の領域それぞれの中心位置にセンターマーカーを合成して、ライブビュー表示用画像（合成画像）を生成する。
【0094】
ステップＳ４１３では、システム制御部５０は、ユーザにより設定されているマーカー種別が垂直マーカーであるか否かを判定する。マーカー種別が垂直マーカーであると判定された場合には、ステップＳ４１４に進む。マーカー種別が垂直マーカーでないと判定された場合には、ステップＳ４１５に進む。
【0095】
ステップＳ４１４では、システム制御部５０は、２つの垂直マーカー（ステップＳ４１０で算出された右像の領域の中心位置を通る縦線と左像の領域の中心位置を通る縦線）を撮像画像に合成する。これにより、システム制御部５０は、ライブビュー表示用画像（合成画像）を生成する。
【0096】
ステップＳ４１５では、システム制御部５０は、ユーザにより設定されているマーカー種別が水平マーカーであるか否かを判定する。マーカー種別が水平マーカーであると判定された場合には、ステップＳ４１６に進む。マーカー種別が水平マーカーでないと判定された場合には、ステップＳ４２１に進む。
【0097】
ステップＳ４１６では、システム制御部５０は、水平マーカー（ステップＳ４１０で算出された右像の領域の中心位置を通る横線と、左像の領域の中心位置を通る横線）を撮像画像に合成する。これにより、システム制御部５０は、ライブビュー表示用画像を生成する。
【0098】
なお、システム制御部５０は、右眼光学系３０１Ｒを介して形成される右像（第一像）の領域と、左眼光学系３０１Ｌを介して形成される左像（第二像）の領域が左右に並べて表示されるか、上下に並べて表示されるかを判定してもよい。そして、システム制御部５０は、２つの像の領域が左右に並べて表示されている場合にのみ、水平マーカーを表示するようにしてもよい。また、システム制御部５０は、２つの像の領域が上下に並べて表示されている場合にも、水平マーカーを表示するようにしてもよい。右像の領域と左像の領域の並べ方は、撮影時のカメラの向き、レンズユニットの構造、あるいはユーザの設定などによって決定される。
【0099】
ステップＳ４２１では、システム制御部５０は、ユーザにより設定されているマーカー種別がユーザマーカーであるとみなして（判定して）、ユーザマーカーの表示位置が既に設定されている（設定済みである）か否かを判定する。ユーザマーカーの表示位置が設定済みであると判定された場合には、ステップＳ４２２に進む。ユーザマーカーの表示位置が設定済みでないと判定された場合には、ステップＳ４２３に進む。
【0100】
ステップＳ４２２では、システム制御部５０は、右像の領域に設定されているユーザマーカーの位置、および左像の領域に設定されているユーザマーカーの表示位置にそれぞれ、ユーザマーカーを合成する。これにより、システム制御部５０は、ライブビュー表示用画像を生成する。
【0101】
ステップＳ４２３では、システム制御部５０は、ユーザの操作にしたがって、右像の領域および左像の領域のうちいずれか一方（ユーザが選択した一方の像の領域）において、ユーザマーカーの表示位置を調整する。これにより、システム制御部５０は、ユーザマーカーの表示位置を設定（決定）する。
【0102】
ステップＳ４２４では、システム制御部５０は、右像の領域および左像の領域のうち、ステップＳ４２３でユーザによる調整に用いられなかった方について、ユーザマーカーの表示位置を設定（決定）する。システム制御部５０は、上述のレンズ設計値やレンズ個体値の情報に従い、ステップＳ４２３で決定された位置を補正した位置を、ユーザマーカーの表示位置として設定する。例えば、システム制御部５０は、右像の領域の中心位置に対するユーザマーカーの表示位置の相対位置と、左像の領域の中心位置に対するユーザマーカーの表示位置の相対位置を同一にするように、右像の領域と左像の領域のユーザマーカーの表示位置を設定する。
【0103】
ステップＳ４２５では、システム制御部５０は、撮像画像におけるステップＳ４２３およびＳ４２４で設定された表示位置に、ユーザマーカーを合成（重畳）する。これにより、システム制御部５０は、ライブビュー表示用画像を生成する。
【0104】
図４ＢのステップＳ４３３では、システム制御部５０は、ステップＳ４０３と同様に「
マーカー表示あり」に設定されている（マーカーを表示する設定がされている）か否かを判定する。「マーカー表示あり」に設定されていると判定された場合にはステップＳ４４０に進み、システム制御部５０は、ステップＳ４４０で表示部１０８の画面（撮像画像全体）の中心位置の座標を取得する。なお、「マーカー表示なし」に設定されていると判定された場合には、ステップＳ４０４に進む。
マーカー表示あり」に設定されている（マーカーを表示する設定がされている）か否かを判定する。「マーカー表示あり」に設定されていると判定された場合にはステップＳ４４０に進み、システム制御部５０は、ステップＳ４４０で表示部１０８の画面（撮像画像全体）の中心位置の座標を取得する。なお、「マーカー表示なし」に設定されていると判定された場合には、ステップＳ４０４に進む。
【0105】
ステップＳ４４１～Ｓ４４６では、システム制御部５０は、ステップＳ４４０で取得された中心位置の座標に基づき、ステップＳ４１１～Ｓ４１６と同様の処理を実行する。なお、システム制御部５０は、ステップＳ４１１～Ｓ４１６では、像の領域ごとにマーカーを撮像画像に合成していたが、ステップＳ４４１～Ｓ４４６では、１つのマーカーのみを撮像画像に合成する（図７Ａ、図８Ａ、および図９Ａ参照）。
【0106】
ステップＳ４５１では、システム制御部５０は、ユーザにより設定されているマーカー種別がユーザマーカーであるとみなして（判定して）、ユーザマーカーの表示位置が既に設定されている（設定済みである）か否かを判定する。ユーザマーカーの表示位置が設定済みであると判定された場合には、ステップＳ４５２に進む。ユーザマーカーの表示位置が設定済みでないと判定された場合には、ステップＳ４５３に進む。
【0107】
ステップＳ４５２では、システム制御部５０は、設定されているユーザマーカーの表示位置に、ユーザマーカーを合成する。これにより、システム制御部５０は、ライブビュー表示用画像を生成する。
【0108】
ステップＳ４５３では、システム制御部５０は、表示部１０８の画面（撮像画像）全体において、ユーザの操作にしたがって、ユーザマーカーの表示位置の調整を行い、ユーザマーカーの表示位置を設定（決定）する。
【0109】
上述のように、システム制御部５０は、ユーザが設定したマーカー種別（マーカーの種別）を判定する種別判定部、撮像画像における像の領域の数を判定する判定部として動作することができる。また、システム制御部５０は、マーカーを撮像画像に合成してライブビュー表示用画像を生成する生成部として動作することができる。
【0110】
（マーカーの表示について）
以下、図７Ａ～図１０Ｂに示すライブビュー表示の一例を用いて、マーカーの表示について説明する。なお、各図におけるマーカーの表示形態は、一例であり、各図に表されている表示形態に限らない。例えば、センターマーカーおよびユーザマーカーの形状は、星形や丸形であってもよい。水平マーカーや垂直マーカーは、破線や点線により表されていてもよい。
以下、図７Ａ～図１０Ｂに示すライブビュー表示の一例を用いて、マーカーの表示について説明する。なお、各図におけるマーカーの表示形態は、一例であり、各図に表されている表示形態に限らない。例えば、センターマーカーおよびユーザマーカーの形状は、星形や丸形であってもよい。水平マーカーや垂直マーカーは、破線や点線により表されていてもよい。
【0111】
図７Ａは、カメラ１００に装着されたレンズユニットが１眼レンズであり、かつ、マーカー種別がセンターマーカーである場合（ステップＳ４４１でＹＥＳの場合）におけるライブビュー表示７０１を示す。図７Ａの例では、画面（撮像画像）の中心位置にセンターマーカー７０２が表示されている。
【0112】
図７Ｂは、カメラ１００に装着されたレンズユニットが２眼レンズであり、かつ、マーカー種別がセンターマーカーである場合（ステップＳ４１１でＹＥＳの場合）におけるライブビュー表示７０３を示す。領域７０４は、レンズユニット３００における右眼光学系３０１Ｒを介する撮像により得られた右像の領域である。領域７０５は、レンズユニット３００における左眼光学系３０１Ｌを介する撮像により得られた左像の領域である。図７Ｂの例では、領域７０４の中心位置にセンターマーカー７０６が表示されており、領域７０５の中心位置にセンターマーカー７０７が表示されている。
【0113】
図８Ａは、カメラ１００に装着されたレンズユニットが１眼レンズであり、かつ、マーカー種別が垂直マーカーである場合（ステップＳ４４３にてＹＥＳの場合）におけるライブビュー表示８０１を示す。図８Ａの例では、画面（撮像画像）の中心位置を通り、上下方向に延在する垂直マーカー８０２が表示されている。
【0114】
図８Ｂは、カメラ１００に装着されたレンズユニットが２眼レンズであり、かつ、マーカー種別が垂直マーカーである場合（ステップＳ４１３にてＹＥＳの場合）におけるライブビュー表示８０３を示す。垂直マーカー８０６は、右像の領域８０４における中心位置を通り、上下方向に延在する。垂直マーカー８０７は、左像の領域８０５における中心位置を通り、上下方向に延在する。
【0115】
図９Ａは、カメラ１００に装着されたレンズユニットが１眼レンズであり、かつ、マーカー種別が水平マーカーである場合（ステップＳ４４５にてＹＥＳの場合）におけるライブビュー表示９０１を示す。図９Ａの例では、画面（撮像画像）の中心位置を通り、左右方向に延在する水平マーカー９０２が表示されている。
【0116】
図９Ｂは、カメラ１００に装着されたレンズユニットが２眼レンズであり、かつ、マーカー種別が水平マーカーである場合（ステップＳ４１５にてＹＥＳの場合）におけるライブビュー表示９０３を示す。水平マーカー９０６は、右像の領域９０４における中心位置を通り、左右方向に延在する。水平マーカー９０７は、左像の領域９０５における中心位置を通り、左右方向に延在する。
【0117】
図１０Ａは、カメラ１００に装着されたレンズユニットが１眼レンズであり、かつ、マーカー種別がユーザマーカーである場合（ステップＳ４４５にてＮＯの場合）におけるライブビュー表示１００１を示す。図１０Ａの例では、ユーザが設定した表示位置に、ユーザマーカー１００２が表示されている。
【0118】
図１０Ｂは、カメラ１００に装着されたレンズユニットが２眼レンズであり、かつ、マーカー種別がユーザマーカーである場合（ステップＳ４１５にてＮＯの場合）におけるライブビュー表示１００３の一例を示す図である。ユーザマーカー１００６は、右像の領域１００４に表示するユーザマーカーである。ユーザマーカー１００７は、左像の領域１００５に表示するユーザマーカーである。
【0119】
なお、本実施形態では、１眼レンズと２眼レンズを使用した場合のライブビュー画像にマーカーを表示する例を説明したが、２眼レンズの代わりに３眼以上の複眼レンズを使用して撮影された画像にマーカーを表示してもよい。つまり、撮像画像は、２以上の像（光学像）の領域を含んでいてもよい。なお、３眼以上の複眼レンズ（３以上の光学系を有するレンズユニット）を使用して撮影された画像にマーカーを表示する場合には、ステップＳ４１１～Ｓ４２５では、光学系に対応する像の領域ごとに、マーカーが合成される。例えば、マーカー種別が水平マーカーであれば、像の領域ごとに、当該像の領域の中心位置を通る水平マーカーが表示される。マーカー種別がユーザマーカーであれば、１つの像の領域ではユーザが設定した表示位置にユーザマーカーが表示され、他の複数の像（１つの像以外）の領域では、像の領域ごとに、ユーザが設定した表示位置を補正した位置にユーザマーカーが表示される。
【0120】
また、本実施形態では、マーカー種別として４種類のマーカー（センターマーカー、垂直マーカー、水平マーカー、およびユーザマーカー）について説明を行ったが、マーカー種別は、グリッドマーカーなどの他のマーカーを含んでいてもよい。
【0121】
また、本実施形態では、撮像装置における撮像素子（イメージセンサ）が１つである場合について説明を行ったが、撮像素子（イメージセンサ）を２つ以上使用した撮像装置を使用して撮影された画像にマーカーを表示してもよい。
【0122】
本実施形態によれば、システム制御部５０は、カメラ１００に装着されたレンズユニットの種類を判定して、判定した結果に応じてマーカーの位置を制御する。また、カメラ１００に装着されたレンズユニットが２眼レンズであれば、システム制御部５０は、像の領域ごとに、レンズ（光学系）に関する情報（レンズ設計値またはレンズ個体値など）に応じてマーカーの位置を制御（補正）する。このため、ユーザによる撮像に適した位置にマーカーを表示することが可能になる。
【0123】
また、上記において、「ＡがＢ以上の場合にはステップＳ１に進み、ＡがＢよりも小さい（低い）場合にはステップＳ２に進む」は、「ＡがＢよりも大きい（高い）場合にはステップＳ１に進み、ＡがＢ以下の場合にはステップＳ２に進む」と読み替えてもよい。逆に、「ＡがＢよりも大きい（高い）場合にはステップＳ１に進み、ＡがＢ以下の場合にはステップＳ２に進む」は、「ＡがＢ以上の場合にはステップＳ１に進み、ＡがＢよりも小さい（低い）場合にはステップＳ２に進む」と読み替えてもよい。このため、矛盾が生じない限り、「Ａ以上」という表現は、「ＡまたはＡよりも大きい（高い；長い；多い）」と置き換えてもよいし、「Ａよりも大きい（高い；長い；多い）」と読み替えてよく、置き換えてもよい。一方で、「Ａ以下」という表現は、「ＡまたはＡよりも小さい（低い；短い；少ない）」と置き換えてもよいし、「Ａよりも小さい（低い；短い；少ない）」と置き換えても読み替えてもよい。そして、「Ａよりも大きい（高い；長い；多い）」は、「Ａ以上」と読み替えてもよく、「Ａよりも小さい（低い；短い；少ない）」は「Ａ以下」と読み替えてもよい。
【0124】
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。
【0125】
なお、上記の各実施形態（各変形例）の各機能部は、個別のハードウェアであってもよいし、そうでなくてもよい。２つ以上の機能部の機能が、共通のハードウェアによって実現されてもよい。１つの機能部の複数の機能のそれぞれが、個別のハードウェアによって実現されてもよい。１つの機能部の２つ以上の機能が、共通のハードウェアによって実現されてもよい。また、各機能部は、ＡＳＩＣ、ＦＰＧＡ、ＤＳＰなどのハードウェアによって実現されてもよいし、そうでなくてもよい。例えば、装置が、プロセッサと、制御プログラムが格納されたメモリ（記憶媒体）とを有していてもよい。そして、装置が有する少なくとも一部の機能部の機能が、プロセッサがメモリから制御プログラムを読み出して実行することにより実現されてもよい。
【0126】
（その他の実施形態）
本発明は、上記の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
本発明は、上記の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【0127】
上記の実施形態の開示は、以下の構成、方法、およびプログラムを含む。
［構成１］
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得手段と、
前記撮像画像に合成するマーカーの種別を判定する種別判定手段と、
前記撮像画像における前記像の領域の数を判定する判定手段と、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成手段と、
を有することを特徴とする電子機器。
［構成２］
前記光学系情報は、前記撮像に用いられた複数の光学系それぞれの光軸中心座標の設計値および前記設計値からのずれの情報を含む、
ことを特徴とする構成１に記載の電子機器。
［構成３］
前記合成手段は、前記像の領域の数が２以上である場合には、前記複数の光学系それぞれの前記設計値および前記ずれの情報に基づき、前記像の領域ごとの基準位置を判定して、前記像の領域ごとの基準位置に基づき前記マーカーを合成する、
ことを特徴とする構成２に記載の電子機器。
［構成４］
前記マーカーの種別が第１のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置に前記第１のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとの中心位置に前記第１のマーカーを合成する、
ことを特徴とする構成１から３のいずれか１項に記載の電子機器。
［構成５］
前記マーカーの種別が第２のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置を通り左右方向に延在する前記第２のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとに、当該領域の中心位置を通り左右方向に延在する前記第２のマーカーを合成する、
ことを特徴とする構成１から４のいずれか１項に記載の電子機器。
［構成６］
前記マーカーの種別が第３のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置を通り上下方向に延在する前記第３のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとに、当該領域の中心位置を通り上下方向に延在する前記第３のマーカーを合成する、
ことを特徴とする構成１から５のいずれか１項に記載の電子機器。
［構成７］
前記マーカーの種別が第４のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像におけるユーザが設定した位置に前記第４のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記ユーザが設定した位置に第１の像の領域に対して前記第４のマーカーを合成するとともに、前記第１の像以外の像の領域それぞれに対して、前記ユーザが設定した位置を像の領域ごとに前記光学系情報に基づき補正した位置に前記第４のマーカーを合成する、
ことを特徴とする構成１から６のいずれか１項に記載の電子機器。
［構成８］
前記判定手段は、前記１または複数の光学系を含むレンズユニットの種類の情報に基づき、前記像の領域の数を判定する、
ことを特徴とする構成１から７のいずれか１項に記載の電子機器。
［構成９］
前記マーカーは、ユーザが撮影時の構図を決める際の目安として使用されるマーカーで
ある、
ことを特徴とする構成１から８のいずれか１項に記載の電子機器。
［方法］
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得ステップと、
前記撮像画像に合成するマーカーの種別を判定する種別判定ステップと、
前記撮像画像における前記像の領域の数を判定する判定ステップと、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成ステップと、
を有することを特徴とする電子機器の制御方法。
［プログラム］
コンピュータを、構成１から９のいずれか１項に記載された電子機器の各手段として機能させるためのプログラム。
［構成１］
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得手段と、
前記撮像画像に合成するマーカーの種別を判定する種別判定手段と、
前記撮像画像における前記像の領域の数を判定する判定手段と、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成手段と、
を有することを特徴とする電子機器。
［構成２］
前記光学系情報は、前記撮像に用いられた複数の光学系それぞれの光軸中心座標の設計値および前記設計値からのずれの情報を含む、
ことを特徴とする構成１に記載の電子機器。
［構成３］
前記合成手段は、前記像の領域の数が２以上である場合には、前記複数の光学系それぞれの前記設計値および前記ずれの情報に基づき、前記像の領域ごとの基準位置を判定して、前記像の領域ごとの基準位置に基づき前記マーカーを合成する、
ことを特徴とする構成２に記載の電子機器。
［構成４］
前記マーカーの種別が第１のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置に前記第１のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとの中心位置に前記第１のマーカーを合成する、
ことを特徴とする構成１から３のいずれか１項に記載の電子機器。
［構成５］
前記マーカーの種別が第２のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置を通り左右方向に延在する前記第２のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとに、当該領域の中心位置を通り左右方向に延在する前記第２のマーカーを合成する、
ことを特徴とする構成１から４のいずれか１項に記載の電子機器。
［構成６］
前記マーカーの種別が第３のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像における中心位置を通り上下方向に延在する前記第３のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記光学系情報に基づき前記像の領域ごとに中心位置を判定して、前記像の領域ごとに、当該領域の中心位置を通り上下方向に延在する前記第３のマーカーを合成する、
ことを特徴とする構成１から５のいずれか１項に記載の電子機器。
［構成７］
前記マーカーの種別が第４のマーカーを示していれば、前記合成手段は、１）前記像の領域の数が１である場合には、前記撮像画像におけるユーザが設定した位置に前記第４のマーカーを合成し、２）前記像の領域の数が２以上である場合には、前記ユーザが設定した位置に第１の像の領域に対して前記第４のマーカーを合成するとともに、前記第１の像以外の像の領域それぞれに対して、前記ユーザが設定した位置を像の領域ごとに前記光学系情報に基づき補正した位置に前記第４のマーカーを合成する、
ことを特徴とする構成１から６のいずれか１項に記載の電子機器。
［構成８］
前記判定手段は、前記１または複数の光学系を含むレンズユニットの種類の情報に基づき、前記像の領域の数を判定する、
ことを特徴とする構成１から７のいずれか１項に記載の電子機器。
［構成９］
前記マーカーは、ユーザが撮影時の構図を決める際の目安として使用されるマーカーで
ある、
ことを特徴とする構成１から８のいずれか１項に記載の電子機器。
［方法］
１または複数の光学系を介した撮像により取得された撮像画像であって、光学系ごとの像の領域を有する撮像画像を取得する取得ステップと、
前記撮像画像に合成するマーカーの種別を判定する種別判定ステップと、
前記撮像画像における前記像の領域の数を判定する判定ステップと、
１）前記像の領域の数が１である場合には、前記撮像画像における前記マーカーの種別に応じた位置に前記マーカーを合成して、２）前記像の領域の数が２以上である場合には、前記像の領域ごとに、前記撮像に用いられた光学系に関する光学系情報と前記マーカーの種別とに基づく位置に前記マーカーを合成する合成ステップと、
を有することを特徴とする電子機器の制御方法。
［プログラム］
コンピュータを、構成１から９のいずれか１項に記載された電子機器の各手段として機能させるためのプログラム。
【符号の説明】
【0128】
１００：カメラ、２１１：撮像部、５０：システム制御部
【図1】
【図2】
【図3】
【図4A】
【図4B】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】