特許 7532076 撮像装置、その制御方法およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-08-02

(45)【発行日】2024-08-13

(54)【発明の名称】撮像装置、その制御方法およびプログラム

(51)【国際特許分類】

   H04N 23/60 20230101AFI20240805BHJP

   H04N 23/695 20230101ALI20240805BHJP

【ＦＩ】

H04N23/60 500

H04N23/695

【請求項の数】 11

(21)【出願番号】P 2020076074

(22)【出願日】2020-04-22

(65)【公開番号】P2021175046

(43)【公開日】2021-11-01

【審査請求日】2023-04-17

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】100090273

【弁理士】

【氏名又は名称】國分 孝悦

(72)【発明者】

【氏名】丸橋 尚佳

【審査官】越河 勉

(56)【参考文献】

【文献】特開２０１９－１４９６０２（ＪＰ，Ａ）

【文献】特開２０１８－０１９２９３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２３／６０

Ｈ０４Ｎ ２３／６９５

(57)【特許請求の範囲】

【請求項1】

ローリングシャッタ方式で画像を撮影する撮像装置であって、
追尾して撮影する被写体の情報を取得する第１の取得手段と、
前記撮像装置のパン駆動およびチルト駆動のうちの少なくともいずれか一つの駆動の情報を取得する第２の取得手段と、
前記第１の取得手段により取得された被写体の情報と、前記第２の取得手段により取得された駆動の情報とに基づいてローリングシャッタ歪み補正の補正強度を変更する変更手段と、
前記変更手段により変更された補正強度によりローリングシャッタ歪み補正を行う補正手段と、を有し、
前記第１の取得手段は、追尾して撮影する被写体の速度の情報を取得し、
前記第２の取得手段は、前記駆動の情報としての駆動の速度の情報を取得し、
前記変更手段は、
前記第１の取得手段により取得された被写体の速度と、前記第２の取得手段により取得された駆動の速度との速度差が所定以上である場合には、速度差が所定未満である場合よりもローリングシャッタ歪み補正の補正強度を増加させることを特徴とする撮像装置。

【請求項2】

前記第１の取得手段は、追尾して撮影する被写体の移動方向の情報を取得し、
前記第２の取得手段は、前記駆動の情報に基づく駆動方向の情報を取得し、
前記変更手段は、
前記第１の取得手段により取得された被写体の移動方向と、前記第２の取得手段により取得された駆動方向とに基づいてローリングシャッタ歪み補正の補正強度を変更することを特徴とする請求項１に記載の撮像装置。

【請求項3】

前記変更手段は、
被写体を追尾せずに駆動する場合には被写体を追尾して駆動する場合よりもローリングシャッタ歪み補正の補正強度を増加させることを特徴とする請求項１または２に記載の撮像装置。

【請求項4】

前記第１の取得手段は、追尾して撮影する被写体の位置の情報を取得し、
前記第２の取得手段は、パン駆動およびチルト駆動のうちの少なくともいずれか一つの駆動の状態の情報を取得し、
前記変更手段は、
前記第２の取得手段により取得された、前記撮像装置のパン駆動およびチルト駆動の少なくとも一方の駆動の状態が駆動中であって、前記第１の取得手段により取得された被写体の位置が画像内で同じ位置である場合には、異なる位置である場合よりもローリングシャッタ歪み補正の補正強度を低下させることを特徴とする請求項１ないし３の何れか１項に記載の撮像装置。

【請求項5】

前記第１の取得手段は、追尾して撮影する被写体の大きさの情報を取得し、
前記変更手段は、
前記第１の取得手段により取得された被写体の大きさに基づいてローリングシャッタ歪み補正の補正強度を変更することを特徴とする請求項１ないし４の何れか１項に記載の撮像装置。

【請求項6】

前記変更手段は、
前記第１の取得手段により取得された被写体の大きさが所定以上である場合には、所定未満である場合よりもローリングシャッタ歪み補正の補正強度を低下させることを特徴とする請求項５に記載の撮像装置。

【請求項7】

前記第１の取得手段は、追尾して撮影する被写体の位置の情報を取得し、
前記変更手段は、
前記第１の取得手段により取得された被写体の位置が画面外に外れた場合には、ローリングシャッタ歪み補正の補正強度を変更しないことを特徴とする請求項１ないし６の何れか１項に記載の撮像装置。

【請求項8】

前記第１の取得手段は、追尾して撮影する被写体以外の被写体の情報を取得し、
前記変更手段は、
前記第１の取得手段により取得された、追尾して撮影する被写体以外の被写体が存在する場合には、ローリングシャッタ歪み補正の補正強度を変更しないことを特徴とする請求項１ないし７の何れか１項に記載の撮像装置。

【請求項9】

ローリングシャッタ方式で画像を撮影する撮像装置の制御方法であって、
追尾して撮影する被写体の情報を取得する第１の取得ステップと、
前記撮像装置のパン駆動およびチルト駆動のうちの少なくともいずれか一つの駆動の情報を取得する第２の取得ステップと、
前記第１の取得ステップにより取得された被写体の情報と、前記第２の取得ステップにより取得された駆動の情報とに基づいてローリングシャッタ歪み補正の補正強度を変更する変更ステップと、
前記変更ステップにより変更された補正強度によりローリングシャッタ歪み補正を行う補正ステップと、を有し、
前記第１の取得ステップでは、追尾して撮影する被写体の速度の情報を取得し、
前記第２の取得ステップでは、前記駆動の情報としての駆動の速度の情報を取得し、
前記変更ステップでは、
前記第１の取得ステップにより取得された被写体の速度と、前記第２の取得ステップにより取得された駆動の速度との速度差が所定以上である場合には、速度差が所定未満である場合よりもローリングシャッタ歪み補正の補正強度を増加させることを特徴とする撮像装置の制御方法。

【請求項10】

コンピュータを、請求項１ないし８の何れか１項に記載された撮像装置の各手段として機能させるためのプログラム。

【請求項11】

コンピュータを、請求項１ないし８の何れか１項に記載された撮像装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記録媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、撮像装置、その制御方法、プログラムおよび記録媒体に関するものである。

【背景技術】

【0002】

撮像装置に用いられるＣＭＯＳセンサは、センサの上部と下部との間で読み出しラグが生じることが知られている。このようなＣＭＯＳセンサをパンチルト駆動が可能なカメラに用いると、パン駆動させた場合には画像が斜めに歪み、チルト駆動させた場合には画像が伸び縮みする、ローリングシャッタ歪みが生じるために、ローリングシャッタ歪み補正を行うことが有効である。

【0003】

近年、パンチルト駆動が可能なカメラでは、被写体を自動で追尾できるような追尾機能を備えている。このようなカメラで、追尾中のカメラの動きに応じてローリングシャッタ歪み補正を行ってしまうと、追尾対象の被写体の歪みが更に増してしまう。これは、追尾中にカメラの動きに応じてローリングシャッタ歪み補正を行ったことに起因する。すなわち、追尾対象の被写体の速度と合わせるようにパンチルト駆動することで、被写体が画面内の所定位置で静止しているように見える。相対的に静止している被写体であればローリングシャッタ歪みが生じず、ローリングシャッタ歪み補正を行う必要がないにも関わらず補正を行ってしまうためである。

【0004】

特許文献１には、動き検出手段により検出された動き量と、合焦検出手段により検出された合焦度合いから、ローリングシャッタ方式に起因する歪みの補正量を決定し、画像の各ラインの読み出し位置を変更することで歪みの補正を行う撮像装置が開示されている。

【先行技術文献】

【特許文献】

【0005】

【文献】特開２０１３－３８４８２号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、特許文献１では、合焦度合いによって追従していると判断した場合にローリングシャッタ歪み補正を行わないようにしているが、実際に追従していなかった場合には被写体が歪んでしまうおそれがある。
本発明は、上述したような問題点に鑑みてなされたものであり、被写体を追尾して撮影する場合にローリングシャッタ歪み補正をしたときの被写体の歪みを低減させることを目的とする。

【課題を解決するための手段】

【0007】

本発明は、ローリングシャッタ方式で画像を撮影する撮像装置であって、追尾して撮影する被写体の情報を取得する第１の取得手段と、前記撮像装置のパン駆動およびチルト駆動のうちの少なくともいずれか一つの駆動の情報を取得する第２の取得手段と、前記第１の取得手段により取得された被写体の情報と、前記第２の取得手段により取得された駆動の情報とに基づいてローリングシャッタ歪み補正の補正強度を変更する変更手段と、前記変更手段により変更された補正強度によりローリングシャッタ歪み補正を行う補正手段と、を有し、前記第１の取得手段は、追尾して撮影する被写体の速度の情報を取得し、前記第２の取得手段は、前記駆動の情報としての駆動の速度の情報を取得し、前記変更手段は、前記第１の取得手段により取得された被写体の速度と、前記第２の取得手段により取得された駆動の速度との速度差が所定以上である場合には、速度差が所定未満である場合よりもローリングシャッタ歪み補正の補正強度を増加させることを特徴とする。

【発明の効果】

【0008】

本発明によれば、被写体を追尾して撮影する場合にローリングシャッタ歪み補正をしたときの被写体の歪みを低減させることができる。

【図面の簡単な説明】

【0009】

【図1】カメラの構成を示す図である。

【図2】第１の実施形態のカメラの動作を示すフローチャートである。

【図3】追尾対象の被写体の一例を示す図である。

【図4】追尾対象の被写体の一例を示す図である。

【図5】第２の実施形態のカメラの動作を示すフローチャートである。

【図6】第３の実施形態のカメラの動作を示すフローチャートである。

【図7】第４の実施形態のカメラの動作を示すフローチャートである。

【図8】第５の実施形態のカメラの動作を示すフローチャートである。

【図9】第６の実施形態のカメラの動作を示すフローチャートである。

【図10】第７の実施形態のカメラの動作を示すフローチャートである。

【発明を実施するための形態】

【0010】

以下、本発明の好ましい実施形態について図面を参照して説明する。本実施形態では、撮像装置として、パン駆動およびチルト駆動が可能なカメラについて説明する。

【0011】

＜第１の実施形態＞
図１は、カメラ１００の構成の一例を示す図である。
カメラ１００は、レンズ群１０１、光学フィルタ１０２、撮像素子１０３、ＡＧＣ１０４、Ａ／Ｄ変換部１０５、映像信号処理部１０６、露出制御部１０７、光学制御部１０８、動き情報取得部１０９、ＲＳ歪み補正量演算部１１０、映像信号出力部１１１を有する。また、カメラ１００は、パンチルトモータ１１２、パンチルト駆動部１１３、パルス変調部１１４等を有する。

【0012】

レンズ群１０１は、被写体からの光を撮像素子１０３上に集光する光学系である。レンズ群１０１には、被写体に対するピント合わせを行うフォーカスレンズ、画角を調整するズームレンズ等が含まれる。レンズ群１０１を通してカメラ１００内に入射した光は光学フィルタ１０２を通過して撮像素子１０３で受光される。光学フィルタ１０２は、例えば赤外線カットフィルタ（ＩＲＣＦ）等が用いられる。映像情報は、撮像素子１０３の受光面の画素毎に所定の順序で配列されたカラーフィルタを通り、撮像素子１０３で結像される。撮像素子１０３は、撮影対象の映像情報をアナログ信号として出力する。撮像素子１０３は、ローリングシャッタ方式で撮影するＣＭＯＳセンサである。撮像素子１０３で出力された映像は、ＡＧＣ１０４でゲインコントロールされて映像信号の輝度の調整が行われる。輝度の調整が行われた映像信号は、Ａ/Ｄ変換部１０５でアナログ撮像信号からデジタル撮像信号に変換される。

【0013】

映像信号処理部１０６は、Ａ／Ｄ変換部１０５で変換されたデジタル撮像信号に所定の処理を施し、画素毎に輝度信号と色信号とを出力する。映像信号処理部１０６は、出力用の映像を生成すると共に、カメラ制御を行うための各パラメータを生成する。カメラ制御を行うための各パラメータとして、例えば絞りの制御、ピント合わせの制御、色味を調整するホワイトバランス制御等に用いられる。

【0014】

露出制御部１０７は、映像信号処理部１０６から出力される輝度情報から撮影画面内の輝度情報を算出し、撮影画像を所望の明るさに調整するために絞りおよびＡＧＣ１０４を制御する。
また、ピント合わせは、映像信号処理部１０６で生成された映像信号から高周波成分を抜き出し、高周波成分の値をフォーカスピント情報（フォーカス評価値）として、フォーカス評価値が最大となるように光学制御部１０８によりレンズ群１０１を制御する。また、光学制御部１０８は光学フィルタ１０２の挿抜動作も行う。

【0015】

パルス変調部１１４は、ＰＷＭ波形に変換してパンチルト駆動部１１３に出力する。パンチルト駆動部１１３は、パンチルトモータ１１２を駆動する。パンチルトモータ１１２が駆動されることによって、レンズ群１０１とセンサとを含む撮像光学系がパンチルト方向に移動する。

【0016】

動き情報取得部１０９は、映像信号処理部１０６から出力された映像信号に基づいて、追尾する被写体の情報を取得する。被写体の情報には、例えば、追尾する被写体の移動方向や移動速度等の動き情報が含まれる。
ローリングシャッタ歪み補正量演算部１１０は、パンチルト駆動部１１３から取得したパンチルト駆動の情報と、動き情報取得部１０９で取得された追尾対象の被写体の情報とに基づいてローリングシャッタ歪み補正の補正強度を変更して、補正量を算出する。
映像信号出力部１１１は、ローリングシャッタ歪み補正量演算部１１０により算出された補正量に基づいて幾何変換を行うことで、ローリングシャッタ歪み補正を行う。映像信号出力部１１１は補正した後の映像信号を出力する。

【0017】

＜第１の実施形態＞
第１の実施形態では、追尾対象の被写体の情報と、パンチルト駆動の情報とに基づいてローリングシャッタ歪み補正の補正強度を変更する場合について説明する。
図２は、第１の実施形態のカメラ１００の動作を示すフローチャートである。図２のフローチャートは、カメラ１００の電源がオンされることで開始される。

【0018】

Ｓ２０１では、動き情報取得部１０９は、追尾する対象（追尾対象）の被写体を検出する。具体的に、動き情報取得部１０９は、画像内の人や車等の動体を物体認識で認識し、認識した動体を追尾対象の被写体として検出する。なお、動き情報取得部１０９は、ユーザにより手動で選択された画像内の被写体を、追尾対象の被写体として検出してもよい。

【0019】

Ｓ２０２では、動き情報取得部１０９は、検出した追尾対象の被写体の情報を取得する。具体的には、動き情報取得部１０９は、現フレームと前フレームとの背景差分等を比較することで、追尾対象の被写体の画面内での動きベクトル量を算出する。また、動き情報取得部１０９は、算出された動きベクトル量から追尾対象の被写体の移動方向および被写体の速度を算出する。

【0020】

図３（ａ）は、前フレーム３０１の一例を示す図である。
前フレーム３０１では、パンが右から左に駆動し、パン駆動の速度と、右から左へ移動する追尾対象の被写体３０２の速度とが一致しているため、被写体３０２が画像の中央に位置している状態である。パン駆動の速度と、追尾対象の被写体３０２の速度とが同一速度で移動しているために追尾対象の被写体３０２は静止しているように見える。この場合、ローリングシャッタ歪み補正を行っていない状態であれば、追尾対象の被写体３０２は斜めに歪むことなく撮影されている。

【0021】

図３（ｂ）は、現フレーム３０３の一例を示す図である。
現フレーム３０３では、パンが右から左に駆動し、追尾対象の被写体３０４が前フレーム３０１までの速度とは異なる速度、すなわちこの場合低速で移動したことによって、パン駆動の速度と、追尾対象の被写体の速度とに差異が生じている。したがって、追尾対象の被写体３０４が画像の中央に位置ではなく端に位置している状態である。この状態で、前フレーム３０１と同様にローリングシャッタ歪み補正を行わない場合には、追尾対象の被写体３０４が歪んで撮影されてしまう。このように歪んで撮影されるのは、パン駆動の速度と追尾対象の被写体３０４の速度とに差異が生じたため、追尾対象の被写体３０４が静止して見えなくなってしまったためである。

【0022】

ここで、Ｓ２０２において算出される、パン駆動に対して相対的な追尾対象の被写体の移動方向は、図３（ａ）、図３（ｂ）の場合は右であり、被写体の速度は算出されたベクトル量とフレームレート等を用いて算出することができる。左向きをプラスの速度、右向きをマイナスの速度とすると、図３（ａ）、図３（ｂ）の場合には、追尾対象の被写体が相対的に右方向に移動しているため被写体の速度はマイナスとなる。

【0023】

Ｓ２０３では、ＲＳ歪み補正量演算部１１０は、パンチルト駆動部１１３からパンチルト駆動の情報を取得する。具体的には、ＲＳ歪み補正量演算部１１０は、パンチルト駆動部１１３からパン駆動の駆動方向の情報を取得する。ＲＳ歪み補正量演算部１１０は、パンチルト駆動部１１３がパンを右向きに駆動している場合には右向きの情報を取得し、パンを左向きに駆動している場合には左向きの情報を取得する。図３（ａ）、図３（ｂ）の場合には右から左へ移動しており、左向きの情報が取得される。なお、左向きをプラス、右向きをマイナスとしているので、この場合の駆動速度はプラスとなる。

【0024】

Ｓ２０４では、ＲＳ歪み補正量演算部１１０は、Ｓ２０２で取得した追尾対象の被写体の移動方向と、Ｓ２０３で取得したパン駆動の駆動方向とを比較する。追尾対象の被写体の移動方向と、パン駆動の駆動方向とが同一の場合には、ローリングシャッタ歪み補正の補正強度を変更せず終了する。一方、追尾対象の被写体の移動方向と、パン駆動の駆動方向とが異なる場合にはＳ２０５に進む。

【0025】

Ｓ２０５では、ＲＳ歪み補正量演算部１１０は、パン駆動の速度から追尾対象の被写体の速度を減算した値が所定以上であるか否かを判定する。ＲＳ歪み補正量演算部１１０は、パンチルト駆動部１１３からパン駆動の速度を取得することができる。なお、ＲＳ歪み補正量演算部１１０は、ジャイロセンサの値を用いてパン駆動の速度を算出してもよい。パン駆動の速度から追尾対象の被写体の速度を減算した値が所定以上ではない場合には、ローリングシャッタ歪み補正の補正強度を変更せず終了する。一方、パン駆動の速度から追尾対象の被写体の速度を減算した値が所定以上の場合には、追尾対象の被写体の速度と、パン駆動の速度との差異によって被写体が静止しているようには見えなくなり歪んでしまうため、歪みを防止するためにＳ２０６に進む。

【0026】

Ｓ２０６では、ＲＳ歪み補正量演算部１１０は、ローリングシャッタ歪み補正の補正強度を増加させて、補正量を算出する。すなわち、ＲＳ歪み補正量演算部１１０は、パン駆動の速度から追尾対象の被写体の速度を減算した値が所定未満である場合よりも、ローリングシャッタ歪み補正の補正強度を増加させる。映像信号出力部１１１は、ローリングシャッタ歪み補正量演算部１１０により算出された補正量に基づいて幾何変換を行うことで、ローリングシャッタ歪み補正を行う。
図４は、ローリングシャッタ歪み補正を行って表示されたフレーム４０１の一例を示す図である。図４に示すように、ローリングシャッタ歪み補正の補正強度を増加させることで、追尾対象の被写体の速度とパン駆動の速度とに差異が生じて被写体４０２が端に位置しても歪みのない被写体４０２を撮影することができる。

【0027】

本実施形態によれば、パン駆動の情報と、追尾して撮影する被写体の情報とに基づいてローリングシャッタ歪み補正の補正強度を変更することでローリングシャッタ歪み補正をしたときの被写体の歪みを低減させることができる。

【0028】

なお、本実施形態では、追尾対象の被写体の移動方向と、パン駆動の駆動方向とが異なる場合の方が速度差が大きくなるために、ローリングシャッタ歪み補正の補正強度を増加させている。しかしながら、追尾対象の被写体の移動方向と、パン駆動の駆動方向とが同一の場合であっても速度差が生じている場合にはローリングシャッタ歪み補正の補正強度を増加させるようにしてもよい。すなわち、パン駆動の速度と、被写体の速度との速度差が所定以上である場合には、ローリングシャッタ歪み補正の補正強度を増加させるようにしてもよい。

【0029】

また、本実施形態では、対象の被写体を追尾する場合について説明したが、被写体を追尾せずにパン駆動している場合には、ＲＳ歪み補正量演算部１１０は、被写体を追尾してパン駆動している場合よりもローリングシャッタ歪み補正の補正強度を増加させてもよい。
また、本実施形態では、パン駆動の場合について説明したが、この場合に限られず、パン駆動およびチルト駆動のうち少なくとも何れかの駆動（パンチルト駆動）の場合でも同様に適用することができる。

【0030】

＜第２の実施形態＞
第２の実施形態では、追尾対象の被写体の位置の情報に基づいてローリングシャッタ歪み補正の補正強度を変更する場合について説明する。
図５は、第２の実施形態のカメラ１００の動作を示すフローチャートである。なお、図５のフローチャートは、カメラ１００の電源がオンされることで開始される。

【0031】

Ｓ５０１では、ＲＳ歪み補正量演算部１１０は、パンチルト駆動部１１３からパンチルト駆動の情報を取得する。具体的には、ＲＳ歪み補正量演算部１１０は、パンチルト駆動部１１３の状態の情報を取得して、パンチルト駆動が駆動中であるか否かを判定する。パンチルト駆動部１１３が駆動中ではない場合にはローリングシャッタ歪み補正の補正強度を変更することなく終了する。一方、パンチルト駆動部１１３が駆動中の場合にはＳ５０２に進む。

【0032】

Ｓ５０２では、動き情報取得部１０９は、追尾対象の被写体の情報を取得する。具体的には、動き情報取得部１０９は、追尾対象の被写体の画像内での位置を確認する。
Ｓ５０３では、動き情報取得部１０９は、被写体の位置が画像内で同じ位置であるか否かを判定する。例えば、動き情報取得部１０９は動体検出や物体認識した動体の重心位置が前フレームと現フレームとを比較して所定のピクセル数以内に位置する場合に、被写体の位置が画像内で同じ位置であると判定する。被写体の位置が画像内で同じ位置である場合には追尾対象の被写体を追尾していると考えられ、被写体が静止しているように見える。被写体の位置が画像内で異なる位置である場合にはローリングシャッタ歪み補正の補正強度を変更しないで終了する。一方、被写体の位置が画像内で同じ位置である場合にはＳ５０４に進む。

【0033】

Ｓ５０４では、ＲＳ歪み補正量演算部１１０は、ローリングシャッタ歪み補正の補正強度を低下させて、補正量を算出する。すなわち、ＲＳ歪み補正量演算部１１０は、被写体の位置が画像内で異なる位置である場合よりも、ローリングシャッタ歪み補正の補正強度を低下させる。

【0034】

本実施形態によれば、被写体の位置が画像内で同じ位置である場合には、ローリングシャッタ歪み補正の補正強度を低下させることで、ローリングシャッタ歪み補正による被写体の歪みを防止することができる。
なお、本実施形態では、対象の被写体を追尾する場合について説明したが、被写体を追尾せずにパン駆動している場合に、被写体の位置が画像内で同じ位置である場合にも適用することができる。
また、本実施形態では、Ｓ５０３からＮＯに進むことでローリングシャッタ歪み補正の補正強度を変更しないで終了する場合について説明したが、Ｓ５０３からＮＯに進むことで図２のフローチャートを実行するなどして適宜、他の実施形態と組み合わせてもよい。

【0035】

＜第３の実施形態＞
以下の実施形態では、追尾対象の被写体の情報に基づいてローリングシャッタ歪み補正の補正強度を変更する。第３の実施形態では、追尾対象の被写体の種類に基づいてローリングシャッタ歪み補正の補正強度を変更する場合について説明する。

【0036】

Ｓ６０１では、動き情報取得部１０９は、追尾対象の被写体の情報を取得する。具体的には、動き情報取得部１０９は、追尾対象の被写体の種類の情報を取得する。
Ｓ６０２では、動き情報取得部１０９は、被写体の種類が人であるか否かを判定する。被写体の種類が人以外（例えば、車両等の乗り物）である場合にはローリングシャッタ歪み補正の補正強度を変更しないで終了する。一方、被写体の種類が人である場合には６０３に進む。

【0037】

Ｓ６０３では、ＲＳ歪み補正量演算部１１０は、ローリングシャッタ歪み補正の補正強度を低下させて、補正量を算出する。すなわち、ＲＳ歪み補正量演算部１１０は、被写体の種類が人以外である場合よりも、ローリングシャッタ歪み補正の補正強度を低下させる。

【0038】

本実施形態によれば、被写体が人である場合には、ローリングシャッタ歪み補正の補正強度を低下させることで、ローリングシャッタ歪み補正による被写体の歪みを少なくして人の顔を認識しやすくすることができる。
なお、図６のフローチャートは、上述した図２のフローチャートのＳ２０１とＳ２０２との間に追加し、Ｓ６０２からＮＯに分岐した場合にＳ２０２に進むなどして適宜、他の実施形態と組み合わせてもよい。

【0039】

＜第４の実施形態＞
第４の実施形態では、追尾対象の被写体の大きさに基づいてローリングシャッタ歪み補正の補正強度を変更する場合について説明する。

【0040】

Ｓ７０１では、動き情報取得部１０９は、追尾対象の被写体の情報を取得する。具体的には、動き情報取得部１０９は、追尾対象の被写体の大きさの情報を取得する。
Ｓ７０２では、動き情報取得部１０９は、被写体の大きさが所定以上であるか否かを判定する。被写体の大きさが所定未満である場合にはローリングシャッタ歪み補正の補正強度を変更しないで終了する。一方、被写体の大きさが所定以上である場合にはＳ７０３に進む。

【0041】

Ｓ７０３では、ＲＳ歪み補正量演算部１１０は、ローリングシャッタ歪み補正の補正強度を低下させて、補正量を算出する。すなわち、ＲＳ歪み補正量演算部１１０は、被写体の大きさが所定未満である場合よりも、ローリングシャッタ歪み補正の補正強度を低下させる。
なお、図７のフローチャートは、上述した図２のフローチャートのＳ２０１とＳ２０２との間に追加し、Ｓ７０２からＮＯに分岐した場合にＳ２０２に進むなどして適宜、他の実施形態と組み合わせてもよい。

【0042】

＜第５の実施形態＞
第５の実施形態では、追尾対象の被写体の位置に基づいてローリングシャッタ歪み補正の補正強度を変更する場合について説明する。

【0043】

Ｓ８０１では、動き情報取得部１０９は、追尾対象の被写体の情報を取得する。具体的には、動き情報取得部１０９は、追尾対象の被写体の位置の情報を取得する。
Ｓ８０２では、動き情報取得部１０９は、被写体の位置が画面外に外れたか否かを判定する。被写体の位置が画面外に外れておらず画面内に存在している場合には、補正強度が適切な強度になるように変更する。一方、被写体の位置が画面外に外れて存在しない場合にはＳ８０３に進む。

【0044】

Ｓ８０３では、ＲＳ歪み補正量演算部１１０は、ローリングシャッタ歪み補正が所定以上の強度で有効になっていれば、ローリングシャッタ歪み補正の補正強度を変更しないで終了する。したがって、ローリングシャッタ歪み補正を行うことで、背景等の被写体が歪むのを抑制することができる。
なお、図８のフローチャートは、上述した図２のフローチャートのＳ２０１とＳ２０２との間に追加し、Ｓ８０２からＮＯに分岐した場合にＳ２０２に進むなどして適宜、他の実施形態と組み合わせてもよい。

【0045】

＜第６の実施形態＞
第６の実施形態では、追尾対象の被写体以外の被写体に基づいてローリングシャッタ歪み補正の補正強度を変更する場合について説明する。

【0046】

Ｓ９０１では、動き情報取得部１０９は、被写体の情報を取得する。具体的には、動き情報取得部１０９は、追尾対象の被写体以外の被写体を検出する。
Ｓ９０２では、動き情報取得部１０９は、追尾対象の被写体以外の被写体が画面内に存在するか否かを判定する。追尾対象の被写体以外の被写体が存在しない場合には、補正強度が適切な強度になるように変更する。一方、追尾対象の被写体以外の被写体が存在する場合にはＳ９０３に進む。

【0047】

Ｓ９０３では、ＲＳ歪み補正量演算部１１０は、ローリングシャッタ歪み補正が所定以上の強度で有効になっていれば、ローリングシャッタ歪み補正の補正強度を変更しないで終了する。
なお、図９のフローチャートは、上述した図２のフローチャートのＳ２０１とＳ２０２との間に追加し、Ｓ９０２からＮＯに分岐した場合にＳ２０２に進むなどして適宜、他の実施形態と組み合わせてもよい。

【0048】

＜第７の実施形態＞
第７の実施形態では、追尾対象の被写体の動作に基づいてローリングシャッタ歪み補正の補正強度を変更する場合について説明する。

【0049】

Ｓ１００１では、動き情報取得部１０９は、追尾対象の被写体の情報を取得する。具体的には、動き情報取得部１０９は、追尾対象の被写体の動作の情報を取得する。
Ｓ１００２では、動き情報取得部１０９は、被写体の動作が歩きであるか否かを判定する。被写体の動作が歩きではない場合にはローリングシャッタ歪み補正の補正強度を変更しないで終了する。一方、被写体の動作が歩きである場合にはＳ１００３に進む。

【0050】

Ｓ１００３では、ＲＳ歪み補正量演算部１１０は、ローリングシャッタ歪み補正の補正強度を低下させて、補正量を算出する。すなわち、ＲＳ歪み補正量演算部１１０は、被写体の動作が歩き以外である場合よりも、ローリングシャッタ歪み補正の補正強度を低下させる。
なお、図１０のフローチャートは、上述した図２のフローチャートのＳ２０１とＳ２０２との間に追加し、Ｓ１００２からＮＯに分岐した場合にＳ２０２に進むなどして適宜、他の実施形態と組み合わせてもよい。

【0051】

＜その他の実施形態＞
本発明は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するプログラムをネットワークまたは各種記録媒体を介してシステムまたは装置に供給し、そのシステムまたは装置のコンピュータ（ＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、該プログラムおよび該プログラムを格納した記録媒体は本発明を構成する。

【0052】

以上、本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、本発明の範囲内で変更等が可能であり、上述した実施形態を適時組み合わせてもよい。

【符号の説明】

【0053】

１００：カメラ １０３：撮像素子 １０９：動き情報取得部 １１０：ＲＳ歪み補正量演算部 １１１：映像信号出力部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】