特許 6994119 撮像装置および焦点制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2021-12-14

(45)【発行日】2022-01-14

(54)【発明の名称】撮像装置および焦点制御方法

(51)【国際特許分類】

   G02B 7/36 20210101AFI20220106BHJP

   G03B 15/00 20210101ALI20220106BHJP

   G03B 13/36 20210101ALI20220106BHJP

   H04N 5/232 20060101ALI20220106BHJP

【ＦＩ】

G02B7/36

G03B15/00 S

G03B13/36

H04N5/232 120

【請求項の数】 8

(21)【出願番号】P 2020548187

(86)(22)【出願日】2019-08-23

(86)【国際出願番号】 JP2019033060

(87)【国際公開番号】W WO2020059424

(87)【国際公開日】2020-03-26

【審査請求日】2020-12-16

(31)【優先権主張番号】P 2018174122

(32)【優先日】2018-09-18

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000001122

【氏名又は名称】株式会社日立国際電気

(74)【代理人】

【識別番号】110000062

【氏名又は名称】特許業務法人第一国際特許事務所

(72)【発明者】

【氏名】向後 清孝

【審査官】越河 勉

(56)【参考文献】

【文献】特開２００７－３１０１４３（ＪＰ，Ａ）

【文献】特開２００３－３２２７８９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０２Ｂ ７／２８－７／４０

Ｇ０３Ｂ １５／００

Ｇ０３Ｂ １３／３６

Ｈ０４Ｎ ５／２３２

(57)【特許請求の範囲】

【請求項1】

光学系を介して形成される被写体像を撮像して映像信号を生成する撮像部と、
前記映像信号から低周波成分を低減し、ＡＦ検波用の映像信号を生成する帯域補正部と、
前記ＡＦ検波用の映像信号からコントラスト評価値ＣＴを求めるＡＦ検波部と、
前記コントラスト評価値ＣＴが高くなる方向に前記光学系の合焦位置を制御する焦点制御部と
を備え、
前記帯域補正部は、
前記映像信号から前記低周波成分を抽出するローパスフィルタと、
前記映像信号から前記低周波成分を減算する減算部と、
前記減算した後の映像信号に対して黒レベルの補正を行い、前記ＡＦ検波用の映像信号を生成する黒レベル補正部とを備える
撮像装置。

【請求項2】

請求項１に記載の撮像装置において、
前記帯域補正部は、
霧や霞などの低コントラストに起因する信号ムラの空間周波数帯域を、前記低周波成分として前記映像信号から低減する
ことを特徴とする撮像装置。

【請求項3】

請求項１または２に記載の撮像装置において、
前記帯域補正部は、
前記合焦位置までの撮影距離を取得し、
前記撮影距離が遠くなるほど、前記低周波成分の低減量を増やす
ことを特徴とする撮像装置。

【請求項4】

請求項１～３のいずれか１項に記載の撮像装置において、
前記帯域補正部は、
前記光学系および前記撮像部の少なくとも一方において生じる前記映像信号の信号ムラの空間周波数帯域を、前記低周波成分として前記映像信号から低減する
ことを特徴とする撮像装置。

【請求項5】

光学系を介して形成される被写体像を撮像して映像信号を生成する撮像部を備えた撮像装置の焦点制御方法であって、
前記映像信号から低周波成分を低減し、ＡＦ検波用の映像信号を生成する帯域補正ステップと、
前記ＡＦ検波用の映像信号からコントラスト評価値ＣＴを求めるＡＦ検波ステップと、
前記コントラスト評価値ＣＴが高くなる方向に前記光学系の合焦位置を制御する焦点制御ステップと
を備え、
前記帯域補正ステップは、
前記映像信号から前記低周波成分を抽出するローパスフィルタ処理ステップと、
前記映像信号から前記低周波成分を減算する減算ステップと、
前記減算した後の映像信号に対して黒レベルの補正を行い、前記ＡＦ検波用の映像信号を生成する黒レベル補正ステップとを備える
焦点制御方法。

【請求項6】

請求項５に記載の焦点制御方法において、
前記帯域補正ステップは、
霧や霞などの低コントラストに起因する信号ムラの空間周波数帯域を、前記低周波成分として前記映像信号から低減する
ことを特徴とする焦点制御方法。

【請求項7】

請求項５または６に記載の焦点制御方法において、
前記帯域補正ステップは、
前記合焦位置までの撮影距離を取得し、
前記撮影距離が遠くなるほど、前記低周波成分の低減量を増やす
ことを特徴とする焦点制御方法。

【請求項8】

請求項５～７のいずれか１項に記載の焦点制御方法において、
前記帯域補正ステップは、
前記光学系および前記撮像部の少なくとも一方において生じる前記映像信号の信号ムラの空間周波数帯域を、前記低周波成分として前記映像信号から低減する
ことを特徴とする焦点制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、撮像装置および焦点制御方法に関する。

【背景技術】

【0002】

従来、コントラストＡＦ方式として、映像信号のコントラストが最大ピークとなるよう にレンズの自動焦点調節を行う技術が知られている。

【0003】

例えば、特許文献１には、ＣＣＤ撮像素子のスミア現象や夜景の点光源による偽の合焦 状態を回避するため、コントラストの他に、映像中のエッジ数やエッジ幅重心値を合焦判 定に併用する技術が開示されている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００３－２６２７８３号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

屋外において遠方を撮影する監視カメラでは、霧や霞などの影響を受けやすく、撮像映 像のコントラストが低くなる。そこで、カメラ内において、撮像映像のコントラストをリ アルタイムに伸張させて明暗をくっきりさせる処理（以下「霞補正」という）が施される 。

【0006】

この霞補正により、映像信号のコントラストはリアルタイムに変動する。そのため、霞 補正がかかった映像信号に対してコントラストＡＦを行うと、霞補正のコントラスト変動 （信号ムラ）を合焦状態のピークと間違え、偽の合焦状態（以下「偽合焦」という）に陥 ってしまう虞がある。

【0007】

また、撮像装置では、レンズの周辺減光やフレア、撮像素子のシェーディングによって 偽の映像信号が生じる。この偽の映像信号によってもコントラスト変動（信号ムラ）が発 生し、合焦状態のピークと間違えて偽合焦してしまう虞がある。

【0008】

なお、上述した特許文献１には、このような信号ムラの課題や、そのための偽合焦を解 決する手段について開示も示唆もない。

【0009】

そこで、本発明は、信号ムラによる偽合焦を低減する技術を提供することを目的とする 。

【課題を解決するための手段】

【0010】

上記課題を解決するために、代表的な本発明の撮像装置の一つは、光学系を介して結像 される被写体像を撮像して映像信号を生成する撮像部と、映像信号から低周波成分を低減 し、ＡＦ検波用の映像信号を生成する帯域補正部と、ＡＦ検波用の映像信号からコントラ スト評価値を求めるＡＦ検波部と、コントラスト評価値が高くなる方向に光学系の合焦位 置を制御する焦点制御部とを備える。

【発明の効果】

【0011】

本発明では、コントラストＡＦにおいて信号ムラによる偽合焦を低減することが可能に なる。
上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。

【図面の簡単な説明】

【0012】

【図1】撮像装置の構成を示すブロック図である。

【図2】コントラストＡＦを説明するデータフローである。

【図3】コントラストＡＦの各部波形の様子を説明する図である。

【図4】フルＨＤの映像信号に含まれる映像コントラスト成分と信号ムラ成分を示す 図である。

【図5】ＡＦ検波用の輝度信号Ｙafの映像帯域を示す図である。

【図6】フォーカス位置によるコントラスト評価値ＣＴの変化を説明する図である。

【発明を実施するための形態】

【0013】

以下、図面に従って、実施形態を説明する。

【0014】

＜撮像装置の構成説明＞
図１は、屋外遠方監視用の撮像装置１の構成を示すブロック図である。
同図において、撮像装置１は、レンズ１０、撮像部２０、帯域補正部３０、ＡＦ検波部 ４０、および焦点制御部５０を備える。

【0015】

レンズ１０は、屋外遠方監視用のレンズであり、被写体像を撮像部２０の撮像面に形成 する。レンズ１０の内部には、レンズ１０の合焦位置を遠近方向に変化させるレンズ駆動 部１０ａを備える。このレンズ駆動部１０ａは、撮像面から合焦位置までの距離（以下「 撮影距離」という）に換算可能なレンズ位置情報を帯域補正部３０に出力する。

【0016】

撮像部２０は、撮像面に形成される被写体像を撮像して映像信号を出力する撮像素子２ １と、映像信号に対して信号処理、デモザイク処理、ＹＣ処理、霞補正、階調補正（ガン マ補正）、輪郭補正、および色補正などを施して外部出力する映像信号処理部２２とを備 える。
この映像信号処理部２２は、霞補正を施した映像信号の輝度信号Ｙ０を、帯域補正部３ ０に出力する。

【0017】

帯域補正部３０は、ローパスフィルタ３１、減算部３２、および黒レベル補正部３３を 備える。

【0018】

ローパスフィルタ３１は、輝度信号Ｙ０から、霧や霞などの信号ムラの空間周波数帯域 や、レンズ１０または撮像素子２１による信号ムラの空間周波数帯域の成分を抽出して、 低周波成分として出力する。

【0019】

減算部３２は、この低周波成分に対して係数α（ｋ≦α≦１）を乗算した信号を、輝度 信号Ｙ０から減算し、輝度信号Ｙ１として出力する。

【0020】

この係数αは、レンズ駆動部１０ａから取得するレンズ位置情報（撮影距離）に応じて 適応的に変化する。例えば、減算部３２は、撮影距離が遠くなるほど係数αを大きくする 。

【0021】

黒レベル補正部３３は、シーンの明るさに応じて、減算後の輝度信号Ｙ１をオフセット 補正して黒レベルを復元する。黒レベルが復元した信号は、ＡＦ検波用の映像信号Ｙafと して出力される。

【0022】

ＡＦ検波部４０は、このＡＦ検波用の映像信号Ｙafからフレーム単位にコントラスト評 価値ＣＴを算出して焦点制御部５０に出力する。

【0023】

焦点制御部５０は、コントラスト評価値ＣＴが高くなる方向に（いわゆる山登り式に） レンズ駆動部１０ａを駆動制御して、レンズ１０の焦点制御を行う。

【0024】

＜撮像装置の動作説明＞
図２は、撮像装置１のコントラストＡＦを説明するデータフローである。
図３は、コントラストＡＦの各部波形の様子を説明する図である。
以下、図２に示すステップ番号に沿って、コントラストＡＦの動作を説明する。

【0025】

ステップＳ１１： 帯域補正部３０は、撮影距離に換算可能なレンズ位置情報をレンズ駆 動部１０ａから取得し、最新のレンズ位置情報の値を更新する。

【0026】

ステップＳ１２： 撮像装置１は、ピントを合わせる被写体領域（ＡＦ領域）を自動また は手動で設定する機能を有する。この機能に従って、帯域補正部３０は、映像信号処理部 ２２から霞補正などを施した輝度信号のうち、ＡＦ領域に相当する範囲の輝度信号Ｙ０を 取り込む（図３［Ａ］参照）。

【0027】

図３［Ａ］に示すように、合焦時の輝度信号Ｙ０に比べて、非合焦時の輝度信号Ｙ０は 高域の信号成分が少なくなる分だけ、信号ムラΔＹのコントラスト変動が相対的に大きく 現れる。

【0028】

この輝度信号Ｙ０には、霧や霞などの低コントラストに起因する信号ムラが含まれる。 また、輝度信号Ｙ０には、レンズ１０の周辺減光やフレア、撮像素子２１のシェーディン グに伴う信号ムラが含まれる。

【0029】

ステップＳ１３： ローパスフィルタ３１は、輝度信号Ｙ０に対して移動加重平均や局所 積和演算をとるフィルタ処理を施し、低周波成分Ｙlpを抽出する（図３［Ｂ］参照）。図 ３［Ｂ］に示すように、低周波成分Ｙlpには、高域の信号成分がカットされることにより 、信号ムラΔＹが現れる。

【0030】

なお、図３では、合焦時と非合焦時において、信号ムラΔＹの大きさを等しく図示して いるが、霞補正の影響などにより非合焦時の信号ムラΔＹの方が大きくなりやすい。

【0031】

このローパスフィルタ３１のサイズや係数は、霧や霞などの低コントラストに起因する 信号ムラの空間周波数帯域や、レンズ１０の周辺減光やフレア、撮像素子２１のシェーデ ィングによる信号ムラの空間周波数帯域の成分を抽出するように設定される。

【0032】

ステップＳ１４： 減算部３２は、最新のレンズ位置情報に基づいて、撮像素子２１の撮 像面からレンズ１０の合焦位置までの撮影距離を求める。減算部３２は、この撮影距離が 遠いほど、係数α（ｋ≦α≦１）を大きくする。ここで、係数αの最小設定値ｋは、撮影 距離の影響を受けない信号ムラの量（例えばレンズ１０の周辺減光やフレア、撮像素子２ １のシェーディングに伴う信号ムラの量）に応じて設定される。

【0033】

ステップＳ１５： ローパスフィルタ３１により低周波成分に遅延が生じる場合は、減算 部３２は、減算演算の対象である輝度信号Ｙ０にも低周波成分と同様の遅延処理を施す。 減算部３２は、遅延処理後の輝度信号Ｙ０から、低周波成分に係数αを乗じた信号を減算 して、信号ムラΔＹを適度に低減した輝度信号Ｙ１を生成する（図３［Ｃ］参照）。
減算部３２は、輝度信号Ｙ０および輝度信号Ｙ１を黒レベル補正部３３に出力する。

【0034】

ステップＳ１６： 黒レベル補正部３３は、輝度信号Ｙ０をフレーム単位に積算する。

【0035】

ステップＳ１７： 黒レベル補正部３３は、輝度信号Ｙ０のフレーム積算値をフレーム画 素数で除算することにより、フレーム平均輝度を求める。

【0036】

ステップＳ１８： 黒レベル補正部３３は、フレーム平均輝度をシーンの明るさとしてホ ールドする（図３［Ｄ］参照）。

【0037】

ステップＳ１９： 黒レベル補正部３３は、信号ムラを低減した輝度信号Ｙ１に対して、 シーンの明るさを加算（オフセット）して、輝度信号Ｙ１の黒レベル（ＤＣ成分）を復元 する（図３［Ｅ］参照）。

【0038】

ステップＳ２０： 黒レベル補正部３３は、黒レベルを復元した輝度信号を、ＡＦ検波用 の輝度信号Ｙafとして、ＡＦ検波部４０に出力する。

【0039】

ステップＳ２１： ＡＦ検波部４０は、輝度信号Ｙafに対して、移動差分や局所積差演算 をとるハイパスフィルタ処理を施し、エッジやディテール成分を抽出する。このハイパス フィルタ処理のサイズや係数は、コントラストＡＦをかけたい映像のエッジやディテール 成分の空間周波数帯域に合わせて設定される。

【0040】

このハイパスフィルタ後の信号は、正負両方の信号となるため、絶対値化して、コント ラスト（コントラストの大きさ）を求める。

【0041】

ステップＳ２２： ＡＦ検波部４０は、ＡＦ領域のコントラストをフレーム毎に積算して 、ＡＦ領域のコントラスト評価値ＣＴを求める。なお、ＡＦ領域のコントラストの最大値 をフレーム毎に求めて、コントラスト評価値ＣＴとしてもよい。

【0042】

ステップＳ２３： 焦点制御部５０は、ＡＦ検波部４０から取得するコントラスト評価値 ＣＴが高くなるように（いわゆる山登り式に）、レンズ駆動部１０ａを介してレンズ１０ の合焦位置を遠近方向に制御する。なお、コントラスト評価値ＣＴのピーク付近では、合 焦判定に応じて合焦位置の行き過ぎ幅を小さくすることにより、合焦付近での収束を速め てもよい。

【0043】

以上の一連のデータフロー（ステップＳ１１～Ｓ２３）を繰り返し行うことにより、コ ントラストＡＦによって撮像装置１の自動焦点調整が行われる。

【0044】

＜帯域補正部３０の周波数特性の一例＞
続いて、帯域補正部３０の周波数特性について説明する。
図４は、フルＨＤの輝度信号Ｙ０に含まれる映像コントラスト成分（エッジやディテー ルなど）の周波数帯域と、信号ムラの周波数帯域とを示す図である。

【0045】

フルＨＤ用の撮像素子２１（サンプリング周波数７４ＭＨｚ）により、輝度信号Ｙ０と して再現可能な映像帯域は上限が約３７ＭＨｚとなる。

【0046】

この映像帯域のうち、３～４画素ピッチのエッジ幅やディテールが人間の視覚には鮮鋭 かつ目立つ絵柄として視認されやすい。この３～４画素ピッチはおよそ１０ＭＨｚの映像 帯域に相当する。そこで、コントラスト評価値ＣＴのためのハイパスフィルタとしては、 およそ１０ＭＨｚの抽出感度を高めることが好ましい。

【0047】

さらに、２００ｋＨｚの映像帯域は、なだらかに変化する幅広のエッジ成分である。こ の映像帯域は、合焦しているか否かがぎりぎり視認される帯域である。２００ｋＨｚ未満 の映像帯域については、コントラストが高くても合焦しているとは視認されにくい帯域で ある。そこで、コントラスト評価値ＣＴのためのハイパスフィルタとしては、およそ２０ ０ｋＨｚ未満の映像帯域には抽出感度を持たせない方が好ましい。

【0048】

したがって、図４に示すように、２００ｋＨｚ未満の映像帯域をカットし、かつ１０Ｍ Ｈｚ付近に最大感度を有するように、ＡＦ検波部４０内のハイパスフィルタを設計するこ とが好ましい。

【0049】

一方、霧や霞などの低コントラストに起因する信号ムラの妨害帯域は、４０ｋＨｚ以下 に集中する。また、レンズ１０の周辺減光やフレア、撮像素子２１のシェーディングによ る信号ムラの妨害帯域も、４０ｋＨｚ以下に集中する。

【0050】

これらの妨害帯域は、霞補正や混変調などのプロセスを経て、非合焦時の映像帯域のコ ントラストに影響を及ぼす可能性がある。

【0051】

したがって、図４に示すように、およそ４０ｋＨｚ以下の低周波成分を通過帯域とする ように、ローパスフィルタ３１を設計する。

【0052】

図５は、ＡＦ検波用の輝度信号Ｙafの映像帯域を示す図である。
同図に示すように、およそ４０ｋＨｚ以下の信号ムラの妨害帯域を低減した輝度信号Ｙ afとなっている。

【0053】

なお、ＳＤ用の撮像素子の場合は、サンプリング周波数は２４．５４ＭＨｚ（正方画素 ）であり、フルＨＤの場合のおよそ１／３倍である。

【0054】

そこで、ＳＤ用のコントラスト評価値ＣＴ用のハイパスフィルタについては、フルＨＤ 用の周波数を１／３倍に換算すればよい。
また、信号ムラ抽出用の周波数については、信号ムラの妨害帯域を実験やシミュレーシ ョンで求めて決定すればよい。

【0055】

フルＨＤよりも高いサンプリング周波数の場合についても、そのサンプリング周波数の 倍数でコントラスト評価値ＣＴ用のハイパスフィルタを換算すればよい。また、信号ムラ の妨害帯域についても、実験やシミュレーションで求めて決定すればよい。

【0056】

＜実施形態の効果＞
図６は、フォーカス位置によるコントラスト評価値ＣＴの変化を説明する図である。

【0057】

実施形態では、ＡＦ検波用の映像信号において低周波成分を低減することにより、フォ ーカス位置の変位に伴って発生するコントラスト評価値ＣＴの偽のピークが小さくなり、 偽合焦を防止することが可能になる。

【0058】

また、実施形態では、霧や霞などの低コントラストに起因する信号ムラの空間周波数帯 域を、低周波成分として映像信号から低減する。そのため、霧や霞などの低コントラスト 要因によって生じていた偽合焦を抑制することができる。

【0059】

特に、屋外遠方監視の場合、霧や霞の影響を受けて低コントラストのシーンが多くなる 。そのため、ＡＦ検波用の映像信号において低周波成分を低減することの効果が大きく、 偽合焦を顕著に抑制することが可能になる。

【0060】

また、ＡＦ検波用の映像信号に霞補正が加わることで、コントラストＡＦに対する妨害 作用（信号ムラ）は複雑になる。すなわち、霞補正は、非合焦状態のコントラスト低下を 打ち消す方向に働く。この作用により、低周波のコントラスト成分が変動してコントラス トＡＦがかかりづらくなり、合焦までの時間が長くかかるようになる。また、低周波のコ ントラスト成分の変動に偽ピークが生じれば、偽合焦を生じてしまう。しかしながら、霧 や霞による低周波成分を霞補正後に帯域補正部３０で低減することにより、霞補正による 妨害作用が抑えられる。その結果、合焦までの時間が短縮されて早くなり、かつ偽合焦を 防止することが可能になる。

【0061】

その上、実施形態では撮影距離が遠くなるほど霧や霞などの低コントラストに起因する 信号ムラの低周波成分の低減量を増やす。この撮影距離が遠くなるほど、被写体とカメラ との間に入る霧や霞の空気層が厚くなり、映像信号のコントラストが一層低くなる。この とき、霞補正によるコントラストの伸張がさらに強く働き、信号ムラの成分が大きくなる 。しかし、実施形態のように撮影距離に応じて、信号ムラの低周波成分の低減量を適応的 に増やすことにより、信号ムラの増大を適量に抑えて偽合焦を防止することが可能になる 。

【0062】

さらに、実施形態では、レンズ１０のシェーディングやフレア、撮像素子２１のシェー ディングといった偽信号（信号ムラ）の空間周波数帯域を、低周波成分として映像信号か ら低減する。したがって、レンズ１０や撮像素子２１による信号ムラで発生する偽合焦を 防止することが可能になる。

【0063】

また、実施形態では、黒レベル補正部３３を設け、減算部３２において失ったＤＣ（直 流）成分を復元する。そのため、ＤＣ成分を含む映像信号を扱うＡＦ検波部４０を、従来 通りにそのまま使用することが可能になる。

【0064】

＜実施形態の補足事項＞
なお、実施形態では、輝度信号のコントラスト評価値ＣＴに基づいて焦点制御を行う。 しかしながら、本発明はこれに限定されない。映像信号の緑色光信号Ｇのコントラスト評 価値ＣＴに基づいて焦点制御を行ってもよい。また、監視カメラなどにおいて夜間など近 赤外線画像を撮影する場合は、映像信号の赤色光信号Ｒのコントラスト評価値ＣＴに基づ いて焦点制御を行ってもよい。

【0065】

また、実施形態では、シーンの明るさ（平均値）を加算することで黒レベルを補正して 、ＡＦ検波用の映像信号のＤＣ成分を復元している。しかしながら、本発明はこれに限定 されない。クランプ回路によりＡＦ検波用の映像信号を所定のクランプレベルにクランプ することで、黒レベルを補正して、ＡＦ検波用の映像信号のＤＣ成分を復元してもよい。

【産業上の利用可能性】

【0066】

本発明は、監視カメラなどの撮像装置や、撮像装置の焦点制御方法に利用することができる。この出願は、２０１８年９月１８日に出願された日本出願特願２０１８－１７４１２２を基礎として優先権の利益を主張するものであり、その開示の全てを引用によってここに取り込む。

【符号の説明】

【0067】

１…撮像装置、１０…レンズ、１０ａ…レンズ駆動部、２０…撮像部、２１…撮像素子、 ２２…映像信号処理部、３０…帯域補正部、３１…ローパスフィルタ、３２…減算部、３ ３…黒レベル補正部、４０…ＡＦ検波部、５０…焦点制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】