知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024162501
(43)【公開日】2024-11-21
(54)【発明の名称】撮像装置
(51)【国際特許分類】
H04N 23/60 20230101AFI20241114BHJP
G03B 17/14 20210101ALI20241114BHJP
G03B 35/08 20210101ALI20241114BHJP
【ＦＩ】
H04N23/60 300
G03B17/14
G03B35/08
【審査請求】未請求
【請求項の数】24
【出願形態】ＯＬ
(21)【出願番号】P 2023078054
(22)【出願日】2023-05-10
(71)【出願人】
【識別番号】000001007
【氏名又は名称】キヤノン株式会社
(74)【代理人】
【識別番号】110002860
【氏名又は名称】弁理士法人秀和特許事務所
(72)【発明者】
【氏名】相場 俊孝
【テーマコード（参考）】
2H059
2H101
5C122
【Ｆターム（参考）】
2H059AA09
2H101EE08
5C122EA47
5C122EA68
5C122FA04
5C122FA11
5C122FA18
5C122FB06
5C122GA34
5C122HA01
5C122HA75
5C122HA81
5C122HB01
(57)【要約】
【課題】視差補正処理のような調整処理（各画像領域の位置とサイズの少なくとも一方の調整処理）を高精度に行えるパラメータの決定と、当該パラメータの決定に要する時間の短縮とを両立することができる技術を提供する。
【解決手段】本発明の撮像装置は、複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段と、前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得手段と、前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御手段とを有することを特徴とする。
【選択図】図５
【解決手段】本発明の撮像装置は、複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段と、前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得手段と、前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御手段とを有することを特徴とする。
【選択図】図５
【特許請求の範囲】
【請求項1】
複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段と、
前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得手段と、
前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御手段と
を有することを特徴とする撮像装置。
前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得手段と、
前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御手段と
を有することを特徴とする撮像装置。
【請求項2】
前記判断情報は、前記画像を前記記憶部に格納した日時の情報を含む
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項3】
前記判断情報は、前記画像を前記記憶部に格納するまでの期間における、前記撮像装置に対するレンズユニットの脱着の回数の情報を含む
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項4】
前記判断情報は、前記画像を前記記憶部に格納するまでの期間における、閾値よりも大きい前記撮像装置の動きの回数の情報を含む
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項5】
前記判断情報は、前記画像を前記記憶部に格納した際の前記レンズユニットの周囲の温度の情報を含む
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項6】
前記判断情報は、前記画像を前記記憶部に格納するモードの情報を含む
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項7】
前記複数の画像領域は、立体視のための２つの画像領域である
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項8】
前記複数の光学系は、レンズユニットの左右方向に並んだ２つの光学系である
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項9】
前記複数の光学系それぞれは魚眼レンズを含む
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項10】
前記複数の画像領域それぞれは魚眼画像領域である
ことを特徴とする請求項１に記載の撮像装置。
ことを特徴とする請求項１に記載の撮像装置。
【請求項11】
請求項１に記載の撮像装置によって前記記憶部に格納された前記画像を取得する画像取得手段と、
前記撮像装置によって前記画像に関連付けて前記記憶部に格納された前記判断情報を取得する情報取得手段と、
前記調整処理のパラメータを決定する決定手段と、
前記パラメータを前記画像に関連付ける関連付け手段と、
前記決定手段が前記画像に基づいてパラメータを更新した場合に、更新後のパラメータを保持する保持手段と
を有し、
前記決定手段は、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかを、前記判断情報に基づいて切り替える
ことを特徴とする情報処理装置。
前記撮像装置によって前記画像に関連付けて前記記憶部に格納された前記判断情報を取得する情報取得手段と、
前記調整処理のパラメータを決定する決定手段と、
前記パラメータを前記画像に関連付ける関連付け手段と、
前記決定手段が前記画像に基づいてパラメータを更新した場合に、更新後のパラメータを保持する保持手段と
を有し、
前記決定手段は、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかを、前記判断情報に基づいて切り替える
ことを特徴とする情報処理装置。
【請求項12】
前記パラメータを前記画像に関連付けることは、前記パラメータを用いた前記調整処理を前記画像に施すことである
ことを特徴とする請求項１１に記載の情報処理装置。
ことを特徴とする請求項１１に記載の情報処理装置。
【請求項13】
前記保持手段は、前記更新後のパラメータと、取得された判断情報とを保持し、
前記決定手段は、取得された判断情報と保持されている判断情報とを比較して、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかを切り替える
ことを特徴とする請求項１１に記載の情報処理装置。
前記決定手段は、取得された判断情報と保持されている判断情報とを比較して、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかを切り替える
ことを特徴とする請求項１１に記載の情報処理装置。
【請求項14】
前記判断情報は、前記画像が前記記憶部に格納された日時の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納された日時から、取得された画像が前記記憶部に格納された日時までの時間が閾値よりも長い場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする請求項１３に記載の情報処理装置。
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納された日時から、取得された画像が前記記憶部に格納された日時までの時間が閾値よりも長い場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする請求項１３に記載の情報処理装置。
【請求項15】
前記判断情報は、前記画像が前記記憶部に格納されるまでの期間における、前記撮像装置に対するレンズユニットの脱着の回数の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納されるまでの期間における前記脱着の回数と、取得された画像が前記記憶部に格納されるまでの期間における前記脱着の回数とが異なる場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする請求項１１に記載の情報処理装置。
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納されるまでの期間における前記脱着の回数と、取得された画像が前記記憶部に格納されるまでの期間における前記脱着の回数とが異なる場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする請求項１１に記載の情報処理装置。
【請求項16】
前記判断情報は、前記画像が前記記憶部に格納されるまでの期間における、閾値よりも大きい前記撮像装置の動きの回数の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納されるまでの期間における前記動きの回数と、取得された画像が前記記憶部に格納されるまでの期間における前記動きの回数とが異なる場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする請求項１１に記載の情報処理装置。
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納されるまでの期間における前記動きの回数と、取得された画像が前記記憶部に格納されるまでの期間における前記動きの回数とが異なる場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする請求項１１に記載の情報処理装置。
【請求項17】
前記判断情報は、前記画像が前記記憶部に格納された際の前記レンズユニットの周囲の温度の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納される際の前記温度と、取得された画像が前記記憶部に格納される際の前記温度との差分が閾値よりも大きい場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする請求項１１に記載の情報処理装置。
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納される際の前記温度と、取得された画像が前記記憶部に格納される際の前記温度との差分が閾値よりも大きい場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする請求項１１に記載の情報処理装置。
【請求項18】
前記判断情報は、前記画像を前記記憶部に格納するモードの情報を含み、
前記決定手段は、前記モードが、所定の時間間隔よりも短い時間間隔で画像の格納を繰り返し行うモードであった場合に、保持されている前記パラメータを今回のパラメータとして流用する
ことを特徴とする請求項１１に記載の情報処理装置。
前記決定手段は、前記モードが、所定の時間間隔よりも短い時間間隔で画像の格納を繰り返し行うモードであった場合に、保持されている前記パラメータを今回のパラメータとして流用する
ことを特徴とする請求項１１に記載の情報処理装置。
【請求項19】
複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段を有する撮像装置の
制御方法であって、
前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得ステップと、
前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御ステップと
を有することを特徴とする撮像装置の制御方法。
制御方法であって、
前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得ステップと、
前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御ステップと
を有することを特徴とする撮像装置の制御方法。
【請求項20】
請求項１に記載の撮像装置によって前記記憶部に格納された前記画像を取得する画像取得ステップと、
前記撮像装置によって前記画像に関連付けて前記記憶部に格納された前記判断情報を取得する情報取得ステップと、
前記調整処理のパラメータを決定する決定ステップと、
前記パラメータを前記画像に関連付ける関連付けステップと、
前記決定ステップにおいて前記画像に基づいてパラメータが更新された場合に、更新後のパラメータを保持する保持ステップと
を有し、
前記決定ステップは、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかが、前記判断情報に基づいて切り替えられる
ことを特徴とする情報処理装置の制御方法。
前記撮像装置によって前記画像に関連付けて前記記憶部に格納された前記判断情報を取得する情報取得ステップと、
前記調整処理のパラメータを決定する決定ステップと、
前記パラメータを前記画像に関連付ける関連付けステップと、
前記決定ステップにおいて前記画像に基づいてパラメータが更新された場合に、更新後のパラメータを保持する保持ステップと
を有し、
前記決定ステップは、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかが、前記判断情報に基づいて切り替えられる
ことを特徴とする情報処理装置の制御方法。
【請求項21】
コンピュータを、請求項１～１０のいずれか１項に記載の撮像装置の各手段として機能させるためのプログラム。
【請求項22】
コンピュータを、請求項１～１０のいずれか１項に記載の撮像装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
【請求項23】
コンピュータを、請求項１１～１８のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。
【請求項24】
コンピュータを、請求項１１～１８のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、撮像装置に関し、特に複数の画像領域の間の視差を補正する技術に関する。
【背景技術】
【0002】
１つのレンズマウント部（および１つの撮像素子）を有し、２つの光学系をそれぞれ介して２つの画像領域を一度に撮像することのできる撮像装置が提案されている。例えば、立体視のために、視差のある２つの画像領域が一度に撮像される。
【0003】
２つの画像領域の間の視差は誤差（視差誤差）を含むことがある。違和感のない立体視のためには、２つの画像領域の間の視差を補正する視差補正処理を行って、視差誤差を低減する必要があるが、視差補正処理のパラメータ（視差補正パラメータ）の決定（生成、更新）には長い時間を要する。
【0004】
特許文献１には、連写、各コマの撮影条件が固定（露出固定）の撮影、または各コマの撮影時間間隔が所定値以下の撮影によって得られた一連の画像（複数の画像）のそれぞれに対して、同じパラメータを用いた画像処理を行う技術が開示されている。特許文献１に開示の技術によれば、パラメータの決定に要する時間を短縮することができる。
【先行技術文献】
【特許文献】
【0005】
【特許文献1】特開２０００－９８５１４号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
しかしながら、一連の画像（複数の画像）の間で視差誤差が（大きく）異なることがある。そのため、特許文献１に開示の技術を用いて、一連の画像のそれぞれに対して同じ視差補正パラメータを用いた視差補正処理を行うとすると、一連の画像の少なくともいずれかについて、視差補正処理が高精度に行えず、視差誤差が十分に低減されないことがある。
【0007】
本発明は、視差補正処理のような調整処理（各画像領域の位置とサイズの少なくとも一方の調整処理）を高精度に行えるパラメータの決定と、当該パラメータの決定に要する時間の短縮とを両立することができる技術を提供することを目的とする。
【課題を解決するための手段】
【0008】
本発明の撮像装置は、複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段と、前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得手段と、前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御手段とを有することを特徴とする。
【発明の効果】
【0009】
本発明によれば、視差補正処理のような調整処理（各画像領域の位置とサイズの少なくとも一方の調整処理）を高精度に行えるパラメータの決定と、当該パラメータの決定に要する時間の短縮とを両立することができる。
【図面の簡単な説明】
【0010】
【図1】撮像画像の模式図である。
【図2】撮像装置のブロック図である。
【図3】パーソナルコンピュータ（ＰＣ）のブロック図である。
【図4】撮像装置の動作を示すフローチャートである。
【図5】起動状態処理のフローチャートである。
【図6】ＰＣの動作を示すフローチャートである。
【図7】更新判断処理のフローチャートである。
【図8】判断情報の模式図である。
【発明を実施するための形態】
【0011】
以下、本発明の実施形態を、図面を参照して詳細に説明する。
【0012】
図１（ａ）～１（ｃ）は、２つの光学系を有するレンズユニット（例えば、ＶＲ１８０に対応した２眼レンズユニット）が装着された撮像装置によって得られた撮像画像を示す模式図である。図１（ａ）～１（ｃ）に示す撮像画像は、２つの光学系をそれぞれ介して撮像された２つの画像領域（図１（ａ）～１（ｃ）において「ＡＢ」が記載された２つの領域）を含んでいる。２つの光学系はレンズユニットの左右方向に並んでおり、２つの画像領域が左右方向に並ぶことが想定されている。２つの画像領域は立体視のための領域であり、２つの画像領域の間には視差がある。２つの光学系それぞれは魚眼レンズを含み、２つの画像領域それぞれは魚眼画像領域（魚眼画像（円周魚眼画像）の領域、イメージサークル）である。
【0013】
図１（ａ）は、視差の誤差（視差誤差）がない理想的な撮像画像を示す。図１（ａ）の撮像画像では、同じ大きさの２つの画像領域が左右方向（水平方向）に並んでおり、２つの画像領域それぞれの中心を通る線１０１が水平方向に平行になっている。図１（ｂ）は、撮像装置に対するレンズユニットの装着状態に起因した視差誤差が生じている撮像画像を示す。例えば、撮像装置（レンズマウント部）に対するレンズユニットのガタつきが生じると、撮像装置に対するレンズユニットの装着状態が変化する。図１（ｂ）では、撮像装置に対してレンズユニットが斜めに装着されている。そのため、２つの画像領域が斜めに並んでおり、２つの画像領域それぞれの中心を通る線１０２が斜めに傾いている。図１（ｃ）は、レンズユニットの周囲の温度（撮像装置の周囲の温度、環境温度）に起因した視差誤差が生じている撮像画像を示す。図１（ｃ）では、環境温度に起因して、左の光学系の特性と右の光学系の特性とのずれが生じている。そのため、２つの画像領域のサイズが異なっている。図１（ｃ）では、左の画像領域（イメージサークル）の半径と、右の画像領域（イメージサークル）の半径との差１０３（サイズ差）が生じている。
【0014】
違和感のない立体視のためには、２つの画像領域の間の視差を補正する視差補正処理を行って、視差誤差を低減する必要があるが、視差補正処理のパラメータ（視差補正パラメータ）の決定（生成、更新）には長い時間を要する。
【0015】
図１（ｂ）のような状況では、撮像装置に対するレンズユニットの装着状態が変化しなければ、生成した視差補正パラメータを流用（再利用）することができる。また、図１（ｃ）のような状況では、環境温度が変化しなければ、生成した視差補正パラメータを流用することができる。このような知見に基づき、本実施形態では、記憶部への撮像画像の格納時に（撮影時に）、上述した装着状態と環境温度の少なくとも一方に関する情報を、撮像画像に関連付けて記憶部に格納する。この情報は、視差補正パラメータを更新するか否かを判断するための判断情報として使用する。例えば、記憶部に格納されている撮像画像を編集したり表示したりする際に、当該撮像画像に関連付けられた判断情報を用いて、視
差補正パラメータを更新するか否かを判断する。こうすることによって、視差補正処理のような調整処理（各画像領域の位置とサイズの少なくとも一方の調整処理）を高精度に行えるパラメータの決定と、当該パラメータの決定に要する時間の短縮とを両立することができる。
差補正パラメータを更新するか否かを判断する。こうすることによって、視差補正処理のような調整処理（各画像領域の位置とサイズの少なくとも一方の調整処理）を高精度に行えるパラメータの決定と、当該パラメータの決定に要する時間の短縮とを両立することができる。
【0016】
なお、光学系の数、光学系の配置、光学系に含まれるレンズの種類、画像領域の数、画像領域の配置、および画像領域の形状は特に限定されない。例えば、３つ以上の光学系をそれぞれ介して３つ以上の画像領域が撮像されてもよい。画像領域は、正距円筒画像の領域であってもよい。
【0017】
図２は、本実施形態に係る電子機器の一例としての撮像装置２００の構成を示すブロック図である。撮像装置２００は、例えば、レンズユニットを脱着可能なデジタルカメラである。なお、本実施形態に係る電子機器は、デジタルカメラに限られず、例えばスマートフォンまたはタブレット端末であってもよい。本実施形態に係る電子機器は、撮像装置に限られず、例えば、撮像装置から撮像画像と情報を受信して記憶部に格納するパーソナルコンピュータ（ＰＣ）であってもよい。このように、本実施形態に係る電子機器として、様々な電子機器を用いることができる。
【0018】
制御部２０１は、例えばＣｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ（ＣＰＵ）であり、撮像装置２００の全体を制御する。Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ（ＲＯＭ）２０２は、変更を必要としない各種データ（例えばプログラムおよびパラメータ）を記憶する。Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ（ＲＡＭ）２０３は、各種データ（例えばプログラムおよびパラメータ）を一時的に記憶する。
【0019】
記憶装置２０４は、各種データを記憶する。例えば、記憶装置２０４は、撮像装置２００に固定（内蔵）されたＳｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ（ＳＳＤ）、Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ（ＨＤＤ）、またはフラッシュストレージである。記憶装置２０４は、撮像装置２００に対して脱着可能な光ディスク、磁気カード、光カード、ＩＣカード、またはメモリーカードであってもよい。
【0020】
操作部２０５は、ボタンまたはタッチパネルといった操作部材を含み、ユーザによる操作（ユーザ操作）を受け付ける。操作部２０５は、リモートコントローラといった操作デバイスから、当該操作デバイスに対するユーザ操作に応じた操作信号を、有線または無線で受信する受信部であってもよい。表示部２０６は、撮像装置２００に予め格納されている画像データ、撮像装置２００によって生成された画像データ、および撮像装置２００に共有された画像データといった様々な画像データに基づく画像を表示する。
【0021】
撮像部２０７は、Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅｓ（ＣＣＤ）といったイメージセンサである。２つの光学系を有するレンズユニット（例えば、ＶＲ１８０に対応した２眼レンズユニット）が撮像装置２００に装着された状態においては、撮像部２０７は、２つの光学系をそれぞれ介して２つの画像領域を撮像する。これによって、図１（ａ）～１（ｃ）に示すような撮像画像が得られる。センサ部２０８は、モーションセンサ、環境温度センサ、および脱着センサ（撮像装置２００に対するレンズユニットの脱着を検知するセンサ）といった様々なセンサを含む。システムバス２０９は、撮像装置２００内での通信を可能にするために、撮像装置２００の各部に接続されている。
【0022】
図３は、本実施形態に係る情報処理装置の一例としてのパーソナルコンピュータ（ＰＣ）３００の構成を示すブロック図である。なお、本実施形態に係る情報処理装置は、パーソナルコンピュータに限られず、例えばスマートフォンまたはタブレット端末であってもよい。本実施形態に係る情報処理装置は、表示装置であってもよい。このように、本実施
形態に係る情報処理装置として、様々な情報処理装置を用いることができる。
形態に係る情報処理装置として、様々な情報処理装置を用いることができる。
【0023】
制御部３０１は、例えばＣｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ（ＣＰＵ）であり、ＰＣ３００の全体を制御する。Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ（ＲＯＭ）３０２は、変更を必要としない各種データ（例えばプログラムおよびパラメータ）を記憶する。Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ（ＲＡＭ）３０３は、各種データ（例えばプログラムおよびパラメータ）を一時的に記憶する。
【0024】
記憶装置３０４は、各種データを記憶する。例えば、記憶装置３０４は、ＰＣ３００に固定（内蔵）されたＳｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ（ＳＳＤ）、Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ（ＨＤＤ）、またはフラッシュストレージである。記憶装置３０４は、ＰＣ３００に対して脱着可能な光ディスク、磁気カード、光カード、ＩＣカード、またはメモリーカードであってもよい。
【0025】
操作部３０５は、ボタンまたはタッチパネルといった操作部材を含み、ユーザによる操作（ユーザ操作）を受け付ける。操作部３０５は、リモートコントローラといった操作デバイスから、当該操作デバイスに対するユーザ操作に応じた操作信号を、有線または無線で受信する受信部であってもよい。表示部３０６は、ＰＣ３００に予め格納されている画像データ、ＰＣ３００によって生成された画像データ、およびＰＣ３００に共有された画像データといった様々な画像データに基づく画像を表示する。通信部３０７は、有線または無線で外部装置と接続し、通信するための通信インタフェースである。システムバス３０８は、ＰＣ３００内での通信を可能にするために、ＰＣ３００の各部に接続されている。
【0026】
撮像装置２００の動作の概要を説明する。撮像装置２００の電源がオフの状態（通電が行われているスタンバイ状態）において、撮像装置２００は、撮像装置２００に対するレンズユニットの装着状態に関する情報として、モーション情報とレンズ脱着情報を収集する。モーション情報は、モーションセンサの検出結果に基づく情報であり、脱着情報は、脱着センサの検出結果に基づく情報である。モーション情報と脱着情報は特に限定されないが、本実施形態では、モーション情報は、閾値よりも大きい撮像装置２００の動きの回数の情報であるとする。そして、脱着情報は、撮像装置２００に対するレンズユニットの脱着の回数の情報であるとする。撮像装置２００の電源がオンの状態（起動状態）でも、撮像装置２００は、モーション情報と脱着情報を収集する。撮影時に、撮像装置２００は、撮影日時の情報（撮影日時情報、現在の日時の情報）、および環境温度センサによって検出された環境温度の情報（環境温度情報）を取得する。そして、撮像装置２００は、撮像画像と判断情報（撮影日時情報、脱着情報、モーション情報、および環境温度情報）を互いに関連付けて記憶装置２０４に格納する。
【0027】
ＰＣ３００の動作の概要を説明する。ＰＣ３００は、撮像画像に視差補正パラメータを関連付ける処理を、複数の画像について順次行うことができる。撮像画像に視差補正パラメータを関連付ける処理は特に限定されないが、本実施形態では、視差補正パラメータを用いた視差補正処理を画像に施すことによって、視差補正パラメータが画像に関連付けられるとする。１枚目の撮像画像については、ＰＣ３００は、当該１枚目の撮像画像に基づいて視差補正パラメータを生成する。ＰＣ３００は、生成した視差補正パラメータを保持する。２枚目以降の撮像画像については、ＰＣ３００は、上述した判断情報に基づいて、保持している視差補正パラメータを流用するか、撮像画像に基づいて視差補正パラメータを更新（生成）するかを切り替える。
【0028】
図４は、撮像装置２００の動作の詳細を示すフローチャートである。図４の動作は、制御部２０１が、ＲＯＭ２０２に格納されているプログラムをＲＡＭ２０３に展開して実行
することによって実現される。例えば、撮像装置２００に電池が挿入され、撮像装置２００における通電が開始する（撮像装置２００の状態がスタンバイ状態になる）と、制御部２０１は、図４の動作を開始する。
することによって実現される。例えば、撮像装置２００に電池が挿入され、撮像装置２００における通電が開始する（撮像装置２００の状態がスタンバイ状態になる）と、制御部２０１は、図４の動作を開始する。
【0029】
Ｓ４０１では、制御部２０１は、センサ部２０８に含まれたモーションセンサと脱着センサを駆動する。
【0030】
Ｓ４０２では、制御部２０１は、モーションセンサの出力信号に基づいて、閾値よりも大きい撮像装置２００の動きが生じたか否かを判定する。撮像装置２００の動きが生じた場合はＳ４０３に進み、そうでない場合はＳ４０４に進む。閾値は、例えば、撮像装置２００（レンズマウント部）に対するレンズユニットのガタつきが生じ得る動き（撮像装置２００に対するレンズユニットの装着状態が変化し得る動き）の最小の大きさである。閾値の決定方法は特に限定されないが、例えば、撮像装置２００の大きさ、レンズユニットの大きさ、およびレンズマウント部の強度といった情報に基づいて閾値が予め決定される。
【0031】
Ｓ４０３では、制御部２０１は、閾値よりも大きい撮像装置２００の動きの回数を示すカウント値（モーションカウント値、モーション情報）に１を加算する。モーションカウント値の初期値（図４の動作の開始時におけるモーションカウント値）は、例えば０である。モーションカウント値は、例えばＲＡＭ２０３で保持される。
【0032】
Ｓ４０４では、制御部２０１は、脱着センサの出力信号に基づいて、撮像装置２００に対するレンズユニットの脱着が行われたか否かを判定する。レンズユニットの脱着が行われた場合はＳ４０５に進み、そうでない場合はＳ４０６に進む。
【0033】
Ｓ４０５では、制御部２０１は、撮像装置２００に対するレンズユニットの脱着の回数を示すカウント値（脱着カウント値、脱着情報）に１を加算する。脱着カウント値の初期値（図４の動作の開始時における脱着カウント値）は、例えば０である。脱着カウント値は、例えばＲＡＭ２０３で保持される。
【0034】
Ｓ４０６では、制御部２０１は、ユーザによって撮像装置２００の起動（電源オン）が指示されたか否か、例えば操作部２０５に含まれた電源ボタンが押下されたか否かを判定する。起動が指示された場合はＳ４０７に進み、そうでない場合はＳ４０２に進む。
【0035】
Ｓ４０７では、制御部２０１は、起動状態処理を行う。起動状態処理の詳細は、図５を用いて後述する。
【0036】
Ｓ４０８では、制御部２０１は、通電が終了したか否かを判定する。電池が取り外されたり、電池の残量が０になったりすると、通電が終了する。通電が終了した場合は図４の動作を終了し、そうでない場合はＳ４０２に進む。
【0037】
【0038】
Ｓ５０１では、図４のＳ４０２と同様に、制御部２０１は、モーションセンサの出力信号に基づいて、閾値よりも大きい撮像装置２００の動きが生じたか否かを判定する。撮像装置２００の動きが生じた場合はＳ５０２に進み、そうでない場合はＳ５０３に進む。
【0039】
Ｓ５０２では、Ｓ４０３と同様に、制御部２０１は、モーションカウント値に１を加算
する。
する。
【0040】
Ｓ５０３では、Ｓ４０４と同様に、制御部２０１は、脱着センサの出力信号に基づいて、撮像装置２００に対するレンズユニットの脱着が行われたか否かを判定する。レンズユニットの脱着が行われた場合はＳ５０４に進み、そうでない場合はＳ５０５に進む。
【0041】
Ｓ５０４では、Ｓ４０５と同様に、制御部２０１は、脱着カウント値に１を加算する。
【0042】
Ｓ５０５では、制御部２０１は、ユーザによって撮影開始が指示されたか否かを判定する。例えば、制御部２０１は、操作部２０５に含まれたシャッターボタンが押下されたか否かを判定したり、操作部２０５に含まれた動画撮影ボタンが押下されたか否かを判定したりする。撮影開始が指示された場合はＳ５０６に進み、そうでない場合はＳ５０１に進む。
【0043】
Ｓ５０６では、制御部２０１は、撮像装置２００に装着されているレンズユニットから、当該レンズユニットに関する情報（レンズ情報）を取得する。例えば、レンズ情報は、レンズユニットの少なくとも種類を識別可能な識別情報であり、レンズユニットの種類、型番、シリアルナンバー、および名前の少なくともいずれかを示す。レンズ情報は、レンズユニットの各種設計値を示してもよいし、レンズユニットの各種個体値を示してもよい。
【0044】
Ｓ５０７では、Ｓ５０１と同様に、制御部２０１は、モーションセンサの出力信号に基づいて、閾値よりも大きい撮像装置２００の動きが生じたか否かを判定する。撮像装置２００の動きが生じた場合はＳ５０８に進み、そうでない場合はＳ５０９に進む。
【0045】
Ｓ５０８では、Ｓ５０２と同様に、制御部２０１は、モーションカウント値に１を加算する。
【0046】
Ｓ５０９では、制御部２０１は、撮像部２０７から撮像画像を取得し、当該撮像画像をファイル形式で記憶装置２０４に格納する。
【0047】
Ｓ５１０では、制御部２０１は、センサ部２０８に含まれた環境温度センサから、環境温度の情報（環境温度情報）を取得する。そして、制御部２０１は、取得した環境温度情報を、Ｓ５０９で格納した撮像画像のメタデータの一部として記憶装置２０４に格納する。環境温度センサによって検出される環境温度は、撮像装置２００の周囲の温度であり、撮像装置２００に装着されたレンズユニットの周囲の温度である。なお、環境温度情報はレンズユニットから取得されてもよい。メタデータが撮像画像のファイルに格納されてもよいし、撮像画像のファイルとは異なるファイルに格納されてもよい。
【0048】
Ｓ５１１では、制御部２０１は、Ｓ５０６で取得したレンズ情報を、Ｓ５０９で格納した撮像画像のメタデータの一部として記憶装置２０４に格納する。
【0049】
Ｓ５１２では、制御部２０１は、ＲＡＭ２０３で保持しているモーションカウント値と脱着カウント値を、Ｓ５０９で格納した撮像画像のメタデータの一部として記憶装置２０４に格納する。
【0050】
Ｓ５１３では、制御部２０１は、撮影日時の情報（撮影日時情報、現在の日時の情報、撮像画像が記憶装置２０４に格納した日時の情報）を、Ｓ５０９で格納した撮像画像のメタデータの一部として記憶装置２０４に格納する。撮影日時情報は、公知の様々な方法で取得することができる。
【0051】
Ｓ５１４では、制御部２０１は、ユーザによって撮影終了が指示されたか否かを判定する。例えば、制御部２０１は、シャッターボタンの押下が解除されたか否かを判定したり、動画撮影ボタンが再び押下されたか否かを判定したりする。撮影終了が指示された場合はＳ５１５に進み、そうでない場合はＳ５０７に進む。Ｓ５０７～Ｓ５１４の処理を繰り返すことによって、１枚の静止画の撮影だけではなく、連写、タイムラプス撮影、動画撮影といった複数のフレームの撮影を行うことができる。
【0052】
Ｓ５１５では、制御部２０１は、ユーザによって撮像装置２００の停止（電源オフ）が指示されたか否か、例えば操作部２０５に含まれた電源ボタンが押下されたか否かを判定する。停止が指示された場合は図５の起動状態処理を終了し、そうでない場合はＳ５０１に進む。
【0053】
図６は、ＰＣ３００の動作の詳細を示すフローチャートである。図６の動作は、制御部３０１が、ＲＯＭ３０２に格納されているプログラムをＲＡＭ３０３に展開して実行することによって実現される。ここでは、撮像装置２００から記憶装置２０４が取り外され、記憶装置３０４としてＰＣ３００に装着されたとする。記憶装置３０４に格納されている画像ファイル（撮像装置２００によって得られた撮像画像）がユーザによって指定（選択）されると、制御部３０１は、図６の動作を開始する。ユーザは複数の撮像画像を一度に指定することができ、複数の撮像画像が指定された場合は、制御部３０１は、指定された撮像画像ごとにＳ６０１～Ｓ６１４の処理を行う。指定される複数の撮像画像は、例えば、１回の連写、タイムラプス撮影、または動画撮影によって得られた複数のフレームである。動画ファイルの指定は、動画の複数のフレームの指定と解釈することができる。指定される複数の撮像画像は、個別の静止画撮影によって得られた複数の静止画であってもよい。
【0054】
Ｓ６０１では、制御部３０１は、ユーザによって指定された撮像画像を、記憶装置３０４から読み出す（画像取得）。
【0055】
Ｓ６０２では、制御部３０１は、Ｓ６０１で読み出した撮像画像のメタデータを、記憶装置３０４から読み出す（情報取得）。メタデータには、図５のＳ５１０～Ｓ５１３で格納された環境温度情報、レンズ情報、モーションカウント値、脱着カウント値、および撮影日時情報が含まれている。
【0056】
Ｓ６０３では、制御部３０１は、Ｓ６０２で読み出したメタデータから、撮影日時情報を取得する。
【0057】
Ｓ６０４では、制御部３０１は、Ｓ６０２で読み出したメタデータから、レンズ情報を取得する。
【0058】
Ｓ６０５では、制御部３０１は、Ｓ６０４で取得したレンズ情報に基づいて、Ｓ６０１で読み出した撮像画像の撮影時において撮像装置２００に所定のレンズユニットが装着されていたか否かを判定する。所定のレンズユニットは、例えば、複数の光学系を有する複眼レンズユニットである。ここでは、制御部３０１は、ＶＲ１８０に対応した２眼レンズユニット（２つの魚眼レンズを有するレンズユニット）が撮像装置２００に装着されていたか否かを判定するとする。所定のレンズユニットが装着されていた場合はＳ６０６に進み、そうでない場合はＳ６１５に進む。
【0059】
Ｓ６０６では、制御部３０１は、Ｓ６０２で読み出したメタデータから、センサ情報（環境温度情報、モーションカウント値、および脱着カウント値）を取得する。
【0060】
Ｓ６０７では、制御部３０１は、Ｓ６０１で読み出した撮像画像が１枚目の画像であるか否かを判定する。１枚目の画像である場合はＳ６０８に進み、そうでない場合はＳ６１１に進む。
【0061】
Ｓ６０８では、制御部３０１は、Ｓ６０１で読み出した撮像画像に基づいて、視差補正パラメータを生成する。そして、制御部３０１は、生成した視差補正パラメータを用いた視差補正処理を、Ｓ６０１で読み出した撮像画像に施す。視差補正パラメータは、公知の様々な方法で生成することができる。また、視差補正処理は、公知の様々な方法で行うことができる。
【0062】
Ｓ６０９では、制御部３０１は、Ｓ６０８で生成した視差補正パラメータ、または後述するＳ６１３で生成した視差補正パラメータ（更新後の視差補正パラメータ）を、ＲＡＭ３０３で保持する。
【0063】
Ｓ６１０では、制御部３０１は、Ｓ６０３で取得した撮影日時情報と、Ｓ６０６で取得したセンサ情報とを、Ｓ６０９で保持した視差補正パラメータに関連付けてＲＡＭ３０３で保持する。
【0064】
Ｓ６１１では、制御部３０１は、更新判断処理（視差補正パラメータを更新するか否かを判断する処理）を行う。視差補正パラメータを更新する場合はリセットフラグが１（オン）に設定され、視差補正パラメータを更新しない（流用する）場合はリセットフラグが０（オフ）に設定される。更新判断処理の詳細は、図７を用いて後述する。
【0065】
Ｓ６１２では、制御部３０１は、リセットフラグが１（オン）に設定されているか否かを判定する。リセットフラグが１に設定されている場合はＳ６１３に進み、そうでない場合はＳ６１４に進む。
【0066】
Ｓ６１３では、制御部３０１は、Ｓ６０１で読み出した撮像画像に基づいて、視差補正パラメータを生成する。これによって、視差補正処理に用いる視差補正パラメータが更新される。そして、制御部３０１は、生成した視差補正パラメータを用いた視差補正処理を、Ｓ６０１で読み出した撮像画像に施す。その後、Ｓ６０９とＳ６１０の処理が行われ、保持される情報（視差補正パラメータ、撮影日時情報、およびセンサ情報）が更新される。
【0067】
Ｓ６１４では、制御部３０１は、保持している視差補正パラメータを流用して、Ｓ６０１で読み出した撮像画像に視差補正処理を施す。
【0068】
Ｓ６１５では、制御部３０１は、指定された全ての撮像画像についてＳ６０１～Ｓ６１４の処理を行ったか否かを判定する。全ての撮像画像についてＳ６０１～Ｓ６１４の処理を行った場合は図６の動作を終了し、そうでない場合はＳ６０１に進む。
【0069】
【0070】
図７の更新判断処理では、図８に示す判断情報（撮影日時情報、脱着カウント値、モーションカウント値、および環境温度情報）を用いて、視差補正パラメータを更新するか否かが判断される。視差補正パラメータの生成（更新）が行われると、生成（更新）された視差補正パラメータはＳ６０９で保持され、Ｓ６０３とＳ６０６で取得された判断情報は
Ｓ６１０で保持される。その後、Ｓ６０３とＳ６０６の処理が再び行われ、新たな判断情報が取得される。図７の更新判断処理では、取得された新たな判断情報と保持されている判断情報とを比較して、視差補正パラメータを更新するか否かが判断される。
Ｓ６１０で保持される。その後、Ｓ６０３とＳ６０６の処理が再び行われ、新たな判断情報が取得される。図７の更新判断処理では、取得された新たな判断情報と保持されている判断情報とを比較して、視差補正パラメータを更新するか否かが判断される。
【0071】
Ｓ７０１では、制御部３０１は、視差補正パラメータを更新するか否かを示すリセットフラグを０（オフ）に設定する。
【0072】
Ｓ７０２では、制御部３０１は、保持している撮影日時情報と新たな撮影日時情報とを比較する。保持している撮影日時情報は、保持している視差補正パラメータへの更新に用いた撮像画像の撮影日時を示し、新たな撮影日時情報は、処理対象の撮像画像の撮影日時を示す。制御部３０１は、保持している撮影時日情報が示す撮影日時から、新たな撮影日時情報が示す撮影日時までの時間が閾値よりも長いか否かを判定する。閾値が１時間であり、保持している撮影日時情報が示す撮影日時が３：００であったとする。この場合には、制御部３０１は、新たな撮影日時情報が示す撮影日時が「２：００よりも前または４：００よりも後」という条件を満たすか否かを判定する。２つの撮影日時の間の時間が長い場合は、２つの撮像画像との間で、撮影時における装着状態（撮像装置２００に対するレンズユニットの装着状態）または環境温度が（大きく）異なる可能性が高く、視差誤差が（大きく）異なる可能性が高い。そのため、２つの撮影日時の間の時間が閾値よりも長い場合は、視差補正パラメータを更新すると判断し、Ｓ７０６に進む。そうでない場合は、Ｓ７０３に進む。
【0073】
Ｓ７０３では、制御部３０１は、保持している脱着カウント値と新たな脱着カウント値とを比較する。保持している脱着カウント値は、保持している視差補正パラメータへの更新に用いた撮像画像の撮影までの期間における脱着（撮像装置２００に対するレンズユニットの脱着）の回数を示す。新たな脱着カウント値は、処理対象の撮像画像の撮影までの期間における脱着の回数を示す。制御部３０１は、保持している脱着カウント値と新たな脱着カウント値とが異なるか否かを判定する。２つの脱着カウント値が異なる場合は、２つの撮像画像の一方の撮影から他方の撮影までの期間に撮像装置２００に対するレンズユニットの脱着が行われている。撮像装置２００に対するレンズユニットの脱着によって撮像装置２００に対するレンズユニットの装着状態が変化することがある。従って、２つの脱着カウント値が異なる場合は、２つの撮像画像との間で、撮影時における装着状態（撮像装置２００に対するレンズユニットの装着状態）が（大きく）異なる可能性が高く、視差誤差が（大きく）異なる可能性が高い。そのため、２つの脱着カウント値が異なる場合は、視差補正パラメータを更新すると判断し、Ｓ７０６に進む。そうでない場合は、Ｓ７０４に進む。
【0074】
Ｓ７０４では、制御部３０１は、保持しているモーションカウント値と新たなモーションカウント値とを比較する。保持しているモーションカウント値は、保持している視差補正パラメータへの更新に用いた撮像画像の撮影までの期間における撮像装置２００の動き（閾値よりも大きい動き）の回数を示す。新たなモーションカウント値は、処理対象の撮像画像の撮影までの期間における撮像装置２００の動きの回数を示す。制御部３０１は、保持しているモーションカウント値と新たなモーションカウント値とが異なるか否かを判定する。２つのモーションカウント値が異なる場合は、２つの撮像画像の一方の撮影から他方の撮影までの期間に閾値よりも大きい撮像装置２００の動きが生じている。閾値よりも大きい撮像装置２００の動きによって撮像装置２００に対するレンズユニットの装着状態が変化することがある。従って、２つのモーションカウント値が異なる場合は、２つの撮像画像との間で、撮影時における装着状態（撮像装置２００に対するレンズユニットの装着状態）が（大きく）異なる可能性が高く、視差誤差が（大きく）異なる可能性が高い。そのため、２つのモーションカウント値が異なる場合は、視差補正パラメータを更新すると判断し、Ｓ７０６に進む。そうでない場合は、Ｓ７０５に進む。
【0075】
Ｓ７０５では、制御部３０１は、保持している環境温度情報と新たな環境温度情報とを比較する。保持している環境温度情報は、保持している視差補正パラメータへの更新に用いた撮像画像の撮影時における環境温度を示す。新たなモーションカウント値は、処理対象の撮像画像の撮影時における環境温度を示す。制御部３０１は、保持している環境温度情報が示す環境温度と、新たな環境温度情報が示す環境温度との差分が閾値よりも大きいか否かを判定する。閾値が５℃であり、保持している環境温度情報が示す環境温度が２０℃であったとする。この場合には、制御部３０１は、新たな環境温度情報が示す環境温度が「１５℃よりも低いまたは２５℃よりも高い」という条件を満たすか否かを判定する。２つの環境温度の差分が大きい場合は、視差誤差が（大きく）異なる可能性が高い。そのため、２つの環境温度の差分が閾値よりも大きい場合は、視差補正パラメータを更新すると判断し、Ｓ７０６に進む。そうでない場合は、視差補正パラメータを更新しない（流用する）と判断し、図７の更新判断処理を終了する。
【0076】
Ｓ７０６では、制御部３０１は、視差補正パラメータを更新するか否かを示すリセットフラグを１（オン）に設定する。
【0077】
以上述べたように、本実施形態によれば、複数の光学系をそれぞれ介して撮像された複数の画像領域を含んだ撮像画像が記憶部に格納される。その際に、撮像装置に対するレンズユニットの装着状態と、環境温度の少なくとも一方に関する情報が、撮像画像に関連付けられて記憶部に格納される。そして、この情報を用いて、視差補正処理のような調整処理（各画像領域の位置とサイズの少なくとも一方の調整処理）のパラメータを更新するか否かが判断される。こうすることによって、調整処理を高精度に行えるパラメータの決定と、当該パラメータの決定に要する時間の短縮とを両立することができる。
【0078】
なお、上記実施形態（変形例を含む）はあくまで一例であり、本発明の要旨の範囲内で上記実施形態の構成を適宜変形したり変更したりすることにより得られる構成も、本発明に含まれる。上記実施形態の構成を適宜組み合わせて得られる構成も、本発明に含まれる。
【0079】
例えば、撮像装置に所定のレンズユニットが装着されていたか否かをレンズ情報に基づいて判定する例（図６のＳ６０５）を説明したが、撮像画像を解析することによって、撮像装置に所定のレンズユニットが装着されていたか否かを判定してもよい。
【0080】
判断情報は図８に示す情報に限られない。判断情報は、図８に示す撮影日時情報、脱着カウント値、モーションカウント値、および環境温度情報の少なくともいずれかを含んでいなくてもよい。判断情報は、撮影モード（撮像画像を記憶部に格納するモード）の情報を含んでもよい。所定の時間間隔よりも短い時間間隔で撮影（画像の格納）を繰り返し行う撮影モード（例えば連写撮影を行う撮影モード）で得られる複数の撮像画像の間では視差誤差の変化が生じないまたは小さいことがある。そのため、そのような撮影モードで得られたが得られた一連の撮像について視差補正処理（視差補正パラメータの関連付け、図６のＳ６０１～Ｓ６１４の処理）が行われる場合には、視差補正パラメータの更新を行わないとしてよい。つまり、１枚目の撮像画像に対して生成した視差補正パラメータを、２枚目以降の撮像画像に対して流用するとしてもよい。
【0081】
また、撮像装置は、非通電時にも情報を保持し続けることが可能なストレージを備えてもよい。モーションカウント値と着脱カウント値の少なくとも一方は、そのようなストレージで管理されてもよい。判断情報は、撮像装置における通電のオンとオフに関する情報を含んでもよい。電池の残量が０になった（通電がオフになった）後、電池を入れ替える（通電を再びオンにする）際に、撮像装置に対するレンズユニットの装着状態が変化し、
視差誤差が変化することがある。そのため、そのような状況に対しては、視差補正パラメータの更新を行うとしてもよい。
視差誤差が変化することがある。そのため、そのような状況に対しては、視差補正パラメータの更新を行うとしてもよい。
【0082】
また、判断情報は、撮影に使用されたレンズユニットの種類、型番、シリアルナンバー、および名前といった識別情報を含んでもよい。撮影に使用するレンズユニットが別のレンズユニットに交換されると視差誤差が変化することがあるため、そのような状況に対しては、視差補正パラメータの更新を行うとしてもよい。
【0083】
複数の撮像画像を視差補正処理（視差補正パラメータの関連付け、図６のＳ６０１～Ｓ６１４の処理）の対象として１つずつ選択する際の選択順は特に限定されない。選択順は撮影日時順であってもよいし、そうでなくてもよい。選択順が撮影日時順である場合には、撮影時に、以下の４つの情報の少なくともいずれかを含む判断情報が格納されてもよい。
・前回の撮影日時と今回の撮影日時との間の時間が閾値よりも長いか否かを示す情報（前回の撮影から今回の撮影までに所定時間が経過したか否かを示す情報）
・前回の撮影から今回の撮影までに、撮像装置に対するレンズユニットの脱着が行われたか否かを示す情報
・前回の撮影から今回の撮影までに、閾値よりも大きい撮像装置の動きが生じたか否かを示す情報
・前回の撮影時における環境温度と今回の撮影時における環境温度との差分が閾値よりも大きいか否かを示す情報
・前回の撮影日時と今回の撮影日時との間の時間が閾値よりも長いか否かを示す情報（前回の撮影から今回の撮影までに所定時間が経過したか否かを示す情報）
・前回の撮影から今回の撮影までに、撮像装置に対するレンズユニットの脱着が行われたか否かを示す情報
・前回の撮影から今回の撮影までに、閾値よりも大きい撮像装置の動きが生じたか否かを示す情報
・前回の撮影時における環境温度と今回の撮影時における環境温度との差分が閾値よりも大きいか否かを示す情報
【0084】
（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【0085】
本実施形態の開示は、以下の構成、方法、プログラム、および媒体を含む。
（構成１）
複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段と、
前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得手段と、
前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御手段と
を有することを特徴とする撮像装置。
（構成２）
前記判断情報は、前記画像を前記記憶部に格納した日時の情報を含む
ことを特徴とする構成１に記載の撮像装置。
（構成３）
前記判断情報は、前記画像を前記記憶部に格納するまでの期間における、前記撮像装置に対するレンズユニットの脱着の回数の情報を含む
ことを特徴とする構成１または２に記載の撮像装置。
（構成４）
前記判断情報は、前記画像を前記記憶部に格納するまでの期間における、閾値よりも大きい前記撮像装置の動きの回数の情報を含む
ことを特徴とする構成１～３のいずれかに記載の撮像装置。
（構成５）
前記判断情報は、前記画像を前記記憶部に格納した際の前記レンズユニットの周囲の温度の情報を含む
ことを特徴とする構成１～４のいずれかに記載の撮像装置。
（構成６）
前記判断情報は、前記画像を前記記憶部に格納するモードの情報を含む
ことを特徴とする構成１～５のいずれかに記載の撮像装置。
（構成７）
前記複数の画像領域は、立体視のための２つの画像領域である
ことを特徴とする構成１～６のいずれかに記載の撮像装置。
（構成８）
前記複数の光学系は、レンズユニットの左右方向に並んだ２つの光学系である
ことを特徴とする構成１～７のいずれかに記載の撮像装置。
（構成９）
前記複数の光学系それぞれは魚眼レンズを含む
ことを特徴とする構成１～８のいずれかに記載の撮像装置。
（構成１０）
前記複数の画像領域それぞれは魚眼画像領域である
ことを特徴とする構成１～９のいずれかに記載の撮像装置。
（構成１１）
構成１～１０のいずれかに記載の撮像装置によって前記記憶部に格納された前記画像を取得する画像取得手段と、
前記撮像装置によって前記画像に関連付けて前記記憶部に格納された前記判断情報を取得する情報取得手段と、
前記調整処理のパラメータを決定する決定手段と、
前記パラメータを前記画像に関連付ける関連付け手段と、
前記決定手段が前記画像に基づいてパラメータを更新した場合に、更新後のパラメータを保持する保持手段と
を有し、
前記決定手段は、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかを、前記判断情報に基づいて切り替える
ことを特徴とする情報処理装置。
（構成１２）
前記パラメータを前記画像に関連付けることは、前記パラメータを用いた前記調整処理を前記画像に施すことである
ことを特徴とする構成１１に記載の情報処理装置。
（構成１３）
前記保持手段は、前記更新後のパラメータと、取得された判断情報とを保持し、
前記決定手段は、取得された判断情報と保持されている判断情報とを比較して、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかを切り替える
ことを特徴とする構成１１または１２に記載の情報処理装置。
（構成１４）
前記判断情報は、前記画像が前記記憶部に格納された日時の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納された日時から、取得された画像が前記記憶部に格納された日時までの時間が閾値よりも長い場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする構成１３に記載の情報処理装置。
（構成１５）
前記判断情報は、前記画像が前記記憶部に格納されるまでの期間における、前記撮像装置に対するレンズユニットの脱着の回数の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納されるまでの期間における前記脱着の回数と、取得された画像が前記記憶部に格納されるまでの期間における前記脱着の回数とが異なる場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする構成１１～１４のいずれかに記載の情報処理装置。
（構成１６）
前記判断情報は、前記画像が前記記憶部に格納されるまでの期間における、閾値よりも大きい前記撮像装置の動きの回数の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納されるまでの期間における前記動きの回数と、取得された画像が前記記憶部に格納されるまでの期間における前記動きの回数とが異なる場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする構成１１～１５のいずれかに記載の情報処理装置。
（構成１７）
前記判断情報は、前記画像が前記記憶部に格納された際の前記レンズユニットの周囲の温度の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納される際の前記温度と、取得された画像が前記記憶部に格納される際の前記温度との差分が閾値よりも大きい場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする構成１１～１６のいずれかに記載の情報処理装置。
（構成１８）
前記判断情報は、前記画像を前記記憶部に格納するモードの情報を含み、
前記決定手段は、前記モードが、所定の時間間隔よりも短い時間間隔で画像の格納を繰り返し行うモードであった場合に、保持されている前記パラメータを今回のパラメータとして流用する
ことを特徴とする構成１１～１７のいずれかに記載の情報処理装置。
（方法１）
複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段を有する撮像装置の制御方法であって、
前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得ステップと、
前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御ステップと
を有することを特徴とする電子機器の制御方法。
（方法２）
構成１～１０のいずれかに記載の撮像装置によって前記記憶部に格納された前記画像を取得する画像取得ステップと、
前記撮像装置によって前記画像に関連付けて前記記憶部に格納された前記判断情報を取得する情報取得ステップと、
前記調整処理のパラメータを決定する決定ステップと、
前記パラメータを前記画像に関連付ける関連付けステップと、
前記決定ステップにおいて前記画像に基づいてパラメータが更新された場合に、更新後のパラメータを保持する保持ステップと
を有し、
前記決定ステップは、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかが、前記判断情報に基づいて切り替えられる
ことを特徴とする情報処理装置の制御方法。
（プログラム１）
コンピュータを、構成１～１０のいずれかに記載の撮像装置の各手段として機能させるためのプログラム。
（媒体１）
コンピュータを、構成１～１０のいずれかに記載の撮像装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
（プログラム２）
コンピュータを、構成１１～１８のいずれかに記載の情報処理装置の各手段として機能させるためのプログラム。
（媒体２）
コンピュータを、構成１１～１８のいずれかに記載の情報処理装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
（構成１）
複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段と、
前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得手段と、
前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御手段と
を有することを特徴とする撮像装置。
（構成２）
前記判断情報は、前記画像を前記記憶部に格納した日時の情報を含む
ことを特徴とする構成１に記載の撮像装置。
（構成３）
前記判断情報は、前記画像を前記記憶部に格納するまでの期間における、前記撮像装置に対するレンズユニットの脱着の回数の情報を含む
ことを特徴とする構成１または２に記載の撮像装置。
（構成４）
前記判断情報は、前記画像を前記記憶部に格納するまでの期間における、閾値よりも大きい前記撮像装置の動きの回数の情報を含む
ことを特徴とする構成１～３のいずれかに記載の撮像装置。
（構成５）
前記判断情報は、前記画像を前記記憶部に格納した際の前記レンズユニットの周囲の温度の情報を含む
ことを特徴とする構成１～４のいずれかに記載の撮像装置。
（構成６）
前記判断情報は、前記画像を前記記憶部に格納するモードの情報を含む
ことを特徴とする構成１～５のいずれかに記載の撮像装置。
（構成７）
前記複数の画像領域は、立体視のための２つの画像領域である
ことを特徴とする構成１～６のいずれかに記載の撮像装置。
（構成８）
前記複数の光学系は、レンズユニットの左右方向に並んだ２つの光学系である
ことを特徴とする構成１～７のいずれかに記載の撮像装置。
（構成９）
前記複数の光学系それぞれは魚眼レンズを含む
ことを特徴とする構成１～８のいずれかに記載の撮像装置。
（構成１０）
前記複数の画像領域それぞれは魚眼画像領域である
ことを特徴とする構成１～９のいずれかに記載の撮像装置。
（構成１１）
構成１～１０のいずれかに記載の撮像装置によって前記記憶部に格納された前記画像を取得する画像取得手段と、
前記撮像装置によって前記画像に関連付けて前記記憶部に格納された前記判断情報を取得する情報取得手段と、
前記調整処理のパラメータを決定する決定手段と、
前記パラメータを前記画像に関連付ける関連付け手段と、
前記決定手段が前記画像に基づいてパラメータを更新した場合に、更新後のパラメータを保持する保持手段と
を有し、
前記決定手段は、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかを、前記判断情報に基づいて切り替える
ことを特徴とする情報処理装置。
（構成１２）
前記パラメータを前記画像に関連付けることは、前記パラメータを用いた前記調整処理を前記画像に施すことである
ことを特徴とする構成１１に記載の情報処理装置。
（構成１３）
前記保持手段は、前記更新後のパラメータと、取得された判断情報とを保持し、
前記決定手段は、取得された判断情報と保持されている判断情報とを比較して、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかを切り替える
ことを特徴とする構成１１または１２に記載の情報処理装置。
（構成１４）
前記判断情報は、前記画像が前記記憶部に格納された日時の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納された日時から、取得された画像が前記記憶部に格納された日時までの時間が閾値よりも長い場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする構成１３に記載の情報処理装置。
（構成１５）
前記判断情報は、前記画像が前記記憶部に格納されるまでの期間における、前記撮像装置に対するレンズユニットの脱着の回数の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納されるまでの期間における前記脱着の回数と、取得された画像が前記記憶部に格納されるまでの期間における前記脱着の回数とが異なる場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする構成１１～１４のいずれかに記載の情報処理装置。
（構成１６）
前記判断情報は、前記画像が前記記憶部に格納されるまでの期間における、閾値よりも大きい前記撮像装置の動きの回数の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納されるまでの期間における前記動きの回数と、取得された画像が前記記憶部に格納されるまでの期間における前記動きの回数とが異なる場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする構成１１～１５のいずれかに記載の情報処理装置。
（構成１７）
前記判断情報は、前記画像が前記記憶部に格納された際の前記レンズユニットの周囲の温度の情報を含み、
前記決定手段は、保持されているパラメータへの更新に用いた画像が前記記憶部に格納される際の前記温度と、取得された画像が前記記憶部に格納される際の前記温度との差分が閾値よりも大きい場合に、前記画像に基づいてパラメータを更新する
ことを特徴とする構成１１～１６のいずれかに記載の情報処理装置。
（構成１８）
前記判断情報は、前記画像を前記記憶部に格納するモードの情報を含み、
前記決定手段は、前記モードが、所定の時間間隔よりも短い時間間隔で画像の格納を繰り返し行うモードであった場合に、保持されている前記パラメータを今回のパラメータとして流用する
ことを特徴とする構成１１～１７のいずれかに記載の情報処理装置。
（方法１）
複数の光学系をそれぞれ介して複数の画像領域を撮像する撮像手段を有する撮像装置の制御方法であって、
前記複数の光学系を有するレンズユニットの装着状態と、前記レンズユニットの周囲の温度との少なくとも一方に関する情報であり、且つ前記複数の画像領域それぞれの位置とサイズの少なくとも一方の調整処理のパラメータを更新するか否かの判断に使用される情報である判断情報を取得する取得ステップと、
前記複数の画像領域を含んだ画像と、前記判断情報とを、互いに関連付けて記憶部に格納する制御ステップと
を有することを特徴とする電子機器の制御方法。
（方法２）
構成１～１０のいずれかに記載の撮像装置によって前記記憶部に格納された前記画像を取得する画像取得ステップと、
前記撮像装置によって前記画像に関連付けて前記記憶部に格納された前記判断情報を取得する情報取得ステップと、
前記調整処理のパラメータを決定する決定ステップと、
前記パラメータを前記画像に関連付ける関連付けステップと、
前記決定ステップにおいて前記画像に基づいてパラメータが更新された場合に、更新後のパラメータを保持する保持ステップと
を有し、
前記決定ステップは、前記画像に基づいてパラメータを更新するか、保持されているパラメータを今回のパラメータとして流用するかが、前記判断情報に基づいて切り替えられる
ことを特徴とする情報処理装置の制御方法。
（プログラム１）
コンピュータを、構成１～１０のいずれかに記載の撮像装置の各手段として機能させるためのプログラム。
（媒体１）
コンピュータを、構成１～１０のいずれかに記載の撮像装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
（プログラム２）
コンピュータを、構成１１～１８のいずれかに記載の情報処理装置の各手段として機能させるためのプログラム。
（媒体２）
コンピュータを、構成１１～１８のいずれかに記載の情報処理装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
【符号の説明】
【0086】
２００：撮像装置 ２０１：制御部
３００：パーソナルコンピュータ（ＰＣ） ３０１：制御部 ３０２：ＲＡＭ
３００：パーソナルコンピュータ（ＰＣ） ３０１：制御部 ３０２：ＲＡＭ
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】