特許 6169186 画像処理方法及び装置並びに撮影端末

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6169186

(24)【登録日】2017年7月7日

(45)【発行日】2017年7月26日

(54)【発明の名称】画像処理方法及び装置並びに撮影端末

(51)【国際特許分類】

   H04N 5/232 20060101AFI20170713BHJP

   G06T 5/00 20060101ALI20170713BHJP

【ＦＩ】

   H04N5/232 290

   G06T5/00 705

   G06T5/00 710

【請求項の数】14

【全頁数】26

(21)【出願番号】特願2015-551114(P2015-551114)

(86)(22)【出願日】2014年1月3日

(65)【公表番号】特表2016-503926(P2016-503926A)

(43)【公表日】2016年2月8日

(86)【国際出願番号】CN2014070079

(87)【国際公開番号】WO2014106470

(87)【国際公開日】20140710

【審査請求日】2015年9月3日

(31)【優先権主張番号】201310005051.9

(32)【優先日】2013年1月7日

(33)【優先権主張国】CN

【前置審査】

(73)【特許権者】

【識別番号】512165101

【氏名又は名称】▲華▼▲為▼終端有限公司

【氏名又は名称原語表記】ＨＵＡＷＥＩ ＤＥＶＩＣＥ ＣＯ．， ＬＴＤ．

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100091214

【弁理士】

【氏名又は名称】大貫 進介

(72)【発明者】

【氏名】朱 ▲ツォン▼超

(72)【発明者】

【氏名】▲陳▼ ▲剛▼

(72)【発明者】

【氏名】王 ▲ハオ▼

(72)【発明者】

【氏名】▲齊▼ 家

(72)【発明者】

【氏名】▲羅▼ ▲ウエイ▼

(72)【発明者】

【氏名】杜 成

(72)【発明者】

【氏名】▲ドン▼ 斌

【審査官】 佐田 宏史

(56)【参考文献】

【文献】 特開２００２−１０１４２２（ＪＰ，Ａ）

【文献】 特開２００３−１６３８８２（ＪＰ，Ａ）

【文献】 特開２００９−３０３１１１（ＪＰ，Ａ）

【文献】 特開２００８−０６１２１７（ＪＰ，Ａ）

【文献】 特開２００３−３４８３７７（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ １／４０−１／４０９，５／２３２

Ｇ０６Ｔ ５／００，５／２０

(57)【特許請求の範囲】

【請求項1】

撮影されたが画像処理されていない処理されるべき画像を取得するステップと、
前記処理されるべき画像の撮影特性情報を抽出するステップであり、前記撮影特性情報は、前記処理されるべき画像の撮影場面情報及び撮影メタデータを有するステップと、
前記処理されるべき画像の前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行するステップと
を有し、
前記撮影特性情報は、前記処理されるべき画像の撮影された場面を有し、前記処理されるべき画像の前記撮影メタデータは、前記処理されるべき画像が撮影されたときの光感度及び露光時間を有し、
前記処理されるべき画像の前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行するステップは、
前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理を実行するステップ、及び／又は
前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像のクロミナンス情報において雑音低減及び／又はエンハンスメント処理を実行するステップを有し、
前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像の輝度情報において雑音低減処理を実行するステップは、
前記輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、前記輝度情報において局所絶対値差分の計算を実行するステップと、
前記周辺輝度値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得するステップと、
前記第１のガウス雑音低減フィルタカーネルに従って、前記輝度情報においてガウス雑音低減処理を実行するステップと
を有し、
前記処理されるべき画像の輝度情報においてエンハンスメント処理を実行するステップは、
ベースレイヤの輝度情報と少なくとも１つのディテールレイヤの輝度情報とを取得するために、前記輝度情報においてエッジ保存に基づくフィルタリング分解を実行するステップと、
前記撮影場面情報及び前記撮影メタデータに従って、前記ベースレイヤの前記輝度情報においてコントラストエンハンスメント処理を実行するステップと、
前記周辺輝度値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、少なくとも１つのゲインを決定するステップと、
前記ゲインを使用することにより前記ディテールレイヤの前記輝度情報においてディテールエンハンスメント処理を実行するステップと、
エンハンスメント処理を受けている前記輝度情報を取得するために、コントラストエンハンスメント処理を受けている前記ベースレイヤの前記輝度情報と、ディテールエンハンスメント処理を受けている前記ディテールレイヤの前記輝度情報との加算を実行するステップと
を有する画像処理方法。

【請求項2】

前記処理されるべき画像の前記輝度情報においてエンハンスメント処理を実行する前に、
ガウス雑音低減処理を受けている前記輝度情報のα₁倍を取得するために、ガウス雑音低減処理を受けている前記輝度情報を第１の係数α₁で乗算するステップであり、α₁は0から1の範囲の数値であるステップと、
ガウス雑音低減処理を受けていない前記輝度情報の(1-α₁)倍を取得するために、ガウス雑音低減処理を受けていない前記輝度情報を(1-α₁)で乗算するステップと、
第１の輝度情報を取得するために、ガウス雑音低減処理を受けている前記輝度情報のα₁倍と、ガウス雑音低減処理を受けていない前記輝度情報の(1-α₁)倍との加算を実行するステップと
を更に有し、
前記処理されるべき画像の輝度情報においてエンハンスメント処理を実行するステップは、
前記第１の輝度情報においてエンハンスメント処理を実行するステップを有する、請求項１に記載の方法。

【請求項3】

前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理を実行するステップは、
前記輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、前記輝度情報において局所絶対値差分の計算を実行するステップと、
前記周辺輝度値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得するステップと、
畳み込みフィルタカーネルを取得するために、高域フィルタカーネル及び前記第１のガウス雑音低減フィルタカーネルにおいて畳み込みを実行するステップと、
前記周辺輝度値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、前記畳み込みフィルタカーネルの重みを決定するステップと、
鮮鋭度エンハンスメントフィルタカーネルを取得するために、前記畳み込みフィルタカーネルを前記重みで乗算するステップと、
ガウス雑音低減鮮鋭フィルタカーネルを取得するために、前記第１のガウス雑音低減フィルタカーネルと前記鮮鋭度エンハンスメントフィルタカーネルとの加算を実行するステップと、
前記ガウス雑音低減鮮鋭フィルタカーネルに従って、前記輝度情報においてガウス雑音低減処理及び鮮鋭度エンハンスメント処理を実行するステップと
を有する、請求項１に記載の方法。

【請求項4】

前記輝度情報の周辺輝度値のSADを取得するために、前記輝度情報において局所絶対値差分の計算を実行する前に、
前記撮影場面情報及び前記撮影メタデータに従って、前記輝度情報においてゴマ塩雑音低減処理を実行するステップを更に有する、請求項１ないし３のうちいずれか１項に記載の方法。

【請求項5】

前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像のクロミナンス情報において雑音低減処理を実行するステップは、
前記クロミナンス情報の周辺クロミナンス値のSADを取得するために、前記クロミナンス情報に従って、局所絶対値差分の計算を実行するステップと、
前記周辺クロミナンス値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、第２のガウス雑音低減フィルタカーネルを取得するステップと、
前記第２のガウス雑音低減フィルタカーネルに従って、前記クロミナンス情報においてガウス雑音低減処理を実行するステップと
を有し、
前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像のクロミナンス情報においてエンハンスメント処理を実行するステップは、
合成画像情報を取得するために、前記クロミナンス情報と前記輝度情報とを組み合わせるステップと、
前記合成画像情報の色飽和度を取得するステップと、
前記撮影場面情報及び前記撮影メタデータに従って、前記色飽和度を調整するステップと
を有する、請求項１ないし４のうちいずれか１項に記載の方法。

【請求項6】

合成画像情報を取得するために、前記クロミナンス情報と前記輝度情報とを組み合わせる前に、
エンハンスメント処理を受けている前記輝度情報のα₂倍を取得するために、エンハンスメント処理を受けている前記輝度情報を第２の係数α₂で乗算するステップであり、α₂は0から1の範囲の数値であるステップと、
雑音低減処理を受けている前記輝度情報の(1-α₂)倍を取得するために、雑音低減処理を受けている前記輝度情報を(1-α₂)で乗算するステップと、
第２の輝度情報を取得するために、エンハンスメント処理を受けている前記輝度情報のα₂倍と、雑音低減処理を受けている前記輝度情報の(1-α₂)倍との加算を実行するステップと
を更に有し、
合成画像情報を取得するために、前記クロミナンス情報と前記輝度情報とを組み合わせるステップは、
前記合成画像情報を取得するために、前記クロミナンス情報と前記第２の輝度情報とを組み合わせるステップを有する、請求項５に記載の方法。

【請求項7】

前記クロミナンス情報の周辺クロミナンス値のSADを取得するために、前記クロミナンス情報に従って、局所絶対値差分の計算を実行する前に、
前記撮影場面情報及び前記撮影メタデータに従って、前記クロミナンス情報においてゴマ塩雑音低減処理を実行するステップを更に有する、請求項５又は６に記載の方法。

【請求項8】

撮影されたが画像処理されていない処理されるべき画像を取得するように構成された撮影モジュールと、
前記処理されるべき画像の撮影特性情報を抽出するように構成された抽出モジュールであり、前記撮影特性情報は、前記処理されるべき画像の撮影場面情報及び撮影メタデータを有する抽出モジュールと、
前記処理されるべき画像の前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行するように構成された処理モジュールと
を有し、
前記撮影特性情報は、前記処理されるべき画像の撮影された場面を有し、前記処理されるべき画像の前記撮影メタデータは、前記処理されるべき画像が撮影されたときの光感度及び露光時間を有し、
前記処理モジュールは、前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理を実行するように、及び／又は前記撮影場面情報及び前記撮影メタデータに従って、前記処理されるべき画像のクロミナンス情報において雑音低減及び／又はエンハンスメント処理を実行するように構成され、
前記処理モジュールは、第１のガウス雑音低減ユニット及び／又は第１のエンハンスメントユニットを有し、
前記第１のガウス雑音低減ユニットは、前記輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、前記輝度情報において局所絶対値差分の計算を実行し、前記周辺輝度値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、前記第１のガウス雑音低減フィルタカーネルに従って、前記輝度情報においてガウス雑音低減処理を実行するように構成され、
前記第１のエンハンスメントユニットは、ベースレイヤの輝度情報と少なくとも１つのディテールレイヤの輝度情報とを取得するために、前記輝度情報においてエッジ保存に基づくフィルタリング分解を実行し、前記撮影場面情報及び前記撮影メタデータに従って、前記ベースレイヤの前記輝度情報においてコントラストエンハンスメント処理を実行し、前記周辺輝度値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、少なくとも１つのゲインを決定し、前記ゲインを使用することにより前記ディテールレイヤの前記輝度情報においてディテールエンハンスメント処理を実行し、エンハンスメント処理を受けている前記輝度情報を取得するために、コントラストエンハンスメント処理を受けている前記ベースレイヤの前記輝度情報と、ディテールエンハンスメント処理を受けている前記ディテールレイヤの前記輝度情報との加算を実行するように構成される画像処理装置。

【請求項9】

前記処理モジュールは、ガウス雑音低減処理を受けている前記輝度情報のα₁倍を取得するために、ガウス雑音低減処理を受けている前記輝度情報を第１の係数α₁で乗算し、α₁は0から1の範囲の数値であり、ガウス雑音低減処理を受けていない前記輝度情報の(1-α₁)倍を取得するために、ガウス雑音低減処理を受けていない前記輝度情報を(1-α₁)で乗算し、第１の輝度情報を取得するために、ガウス雑音低減処理を受けている前記輝度情報のα₁倍と、ガウス雑音低減処理を受けていない前記輝度情報の(1-α₁)倍との加算を実行するように構成された第１の取得ユニットを更に有し、
前記第１のエンハンスメントユニットは、前記第１の輝度情報においてエンハンスメント処理を実行するように構成される、請求項８に記載の装置。

【請求項10】

前記処理モジュールは、前記輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、前記輝度情報において局所絶対値差分の計算を実行し、前記周辺輝度値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、畳み込みフィルタカーネルを取得するために、高域フィルタカーネル及び前記第１のガウス雑音低減フィルタカーネルにおいて畳み込みを実行し、前記周辺輝度値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、前記畳み込みフィルタカーネルの重みを決定し、鮮鋭度エンハンスメントフィルタカーネルを取得するために、前記畳み込みフィルタカーネルを前記重みで乗算し、ガウス雑音低減鮮鋭フィルタカーネルを取得するために、前記第１のガウス雑音低減フィルタカーネルと前記鮮鋭度エンハンスメントフィルタカーネルとの加算を実行し、前記ガウス雑音低減鮮鋭フィルタカーネルに従って、前記輝度情報においてガウス雑音低減処理及び鮮鋭度エンハンスメント処理を実行するように構成された雑音低減エンハンスメントユニットを有する、請求項８に記載の装置。

【請求項11】

前記処理モジュールは、前記撮影場面情報及び前記撮影メタデータに従って、前記輝度情報においてゴマ塩雑音低減処理を実行するように構成された第１のゴマ塩雑音低減ユニットを更に有する、請求項８ないし１０のうちいずれか１項に記載の装置。

【請求項12】

前記処理モジュールは、第２のガウス雑音低減ユニットと、第２のエンハンスメントユニットとを更に有し、
前記第２のガウス雑音低減ユニットは、前記クロミナンス情報の周辺クロミナンス値のSADを取得するために、前記クロミナンス情報に従って、局所絶対値差分の計算を実行し、前記周辺クロミナンス値のSAD、前記撮影場面情報及び前記撮影メタデータに従って、第２のガウス雑音低減フィルタカーネルを取得し、前記第２のガウス雑音低減フィルタカーネルに従って、前記クロミナンス情報においてガウス雑音低減処理を実行ように構成され、
前記第２のエンハンスメントユニットは、合成画像情報を取得するために、前記クロミナンス情報と前記輝度情報とを組み合わせ、前記合成画像情報の色飽和度を取得し、前記撮影場面情報及び前記撮影メタデータに従って、前記色飽和度を調整するように構成される、請求項８ないし１１のうちいずれか１項に記載の装置。

【請求項13】

前記処理モジュールは、前記第２のエンハンスメントユニットが前記合成画像情報を取得するために、前記クロミナンス情報と前記輝度情報とを組み合わせる前に、エンハンスメント処理を受けている前記輝度情報のα₂倍を取得するために、エンハンスメント処理を受けている前記輝度情報を第２の係数α₂で乗算し、α₂は0から1の範囲の数値であり、雑音低減処理を受けている前記輝度情報の(1-α₂)倍を取得するために、雑音低減処理を受けている前記輝度情報を(1-α₂)で乗算し、第２の輝度情報を取得するために、エンハンスメント処理を受けている前記輝度情報のα₂倍と、雑音低減処理を受けている前記輝度情報の(1-α₂)倍との加算を実行するように構成された第２の取得ユニットを更に有し、
前記第２のエンハンスメントユニットは、前記合成画像情報を取得するために、前記クロミナンス情報と前記第２の輝度情報とを組み合わせ、前記合成画像情報の前記色飽和度を取得し、前記撮影場面情報及び前記撮影メタデータに従って、前記色飽和度を調整するように構成される、請求項１２に記載の装置。

【請求項14】

前記処理モジュールは、前記第２のガウス雑音低減ユニットが前記クロミナンス情報の前記周辺クロミナンス値のSADを取得するために、前記クロミナンス情報に従って、局所絶対値差分の計算を実行する前に、前記撮影場面情報及び前記撮影メタデータに従って、前記クロミナンス情報においてゴマ塩雑音低減処理を実行するように構成された第２のゴマ塩雑音低減ユニットを更に有する、請求項１２又は１３に記載の装置。

【発明の詳細な説明】

【技術分野】

【0001】

この出願は、2013年1月7日に「画像処理方法及び装置並びに撮影端末」という題で中国専利局に出願された中国特許出願第CN201310005051.9号の優先権を主張し、この全内容を援用する。

【0002】

［技術分野］
本発明の実施例は、画像処理技術に関し、特に、画像処理方法及び装置並びに撮影端末に関する。

【背景技術】

【0003】

レンズ、開口及びセンサのようなハードウェアの側面の制限のため、移動電話により撮影された画像及びデジタルカメラにより撮影された画像の品質の間に比較的大きいギャップが存在する。画像品質に影響を与える要因は、雑音、コントラスト、鮮鋭度、色等を主に含む。コストの理由のため、ハードウェア条件が改善されないことに基づいて、画像品質は、画像処理アルゴリズムを使用することにより改善可能である。

【0004】

従来技術では、撮影画像の雑音レベルは、画像の雑音レベルより低い領域情報が雑音情報であると決定し、画像の雑音レベルより高い領域情報が有効画像情報であると決定するように主に評価されている。そして、雑音抑圧処理は、雑音低減の目的を達成するために、固定の画像雑音低減アルゴリズムを使用することにより、雑音レベルより低い領域情報において実行される。エンハンスメント処理は、画像エンハンスメントの目的を達成するために、固定のコントラストエンハンスメントアルゴリズム及び鮮鋭度エンハンスメントアルゴリズムを使用することにより、雑音レベルより高い領域情報において実行される。その結果、画像品質が改善され得る。

【0005】

本発明を実施する過程において、発明者は、従来技術では異なる撮影画像が処理されるときに画像品質が一様でないことを見出している。

【発明の概要】

【0006】

本発明は、各画像の品質を適応的に改善するため、処理されるべき画像の撮影特性情報に従って、処理されるべき画像において画像処理を実行するために使用される画像処理方法及び装置並びに撮影端末を提供する。

【0007】

第１の態様によれば、本発明の実施例は、画像処理方法を提供し、撮影されたが画像処理されていない処理されるべき画像を取得するステップと、処理されるべき画像の撮影特性情報を抽出するステップと、撮影特性情報に従って、処理されるべき画像において画像処理を実行するステップとを含む。

【0008】

第１の態様の第１の可能な実現方式では、撮影特性情報に従って、処理されるべき画像において画像処理を実行するステップは、処理されるべき画像の撮影場面情報及び撮影メタデータに従って、処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行するステップを含む。

【0009】

第１の態様の第１の可能な実現方式を参照して、第１の態様の第２の可能な実現方式では、処理されるべき画像の撮影場面情報及び撮影メタデータに従って、処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行するステップは、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理を実行するステップ、及び／又は撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減及び／又はエンハンスメント処理を実行するステップを含む。

【0010】

第１の態様の第２の可能な実現方式を参照して、第１の態様の第３の可能な実現方式では、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減処理を実行するステップは、輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、輝度情報において局所絶対値差分の計算を実行するステップと、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得するステップと、第１のガウス雑音低減フィルタカーネルに従って、輝度情報においてガウス雑音低減処理を実行するステップとを含み、処理されるべき画像の輝度情報においてエンハンスメント処理を実行するステップは、ベースレイヤの輝度情報と少なくとも１つのディテールレイヤの輝度情報とを取得するために、輝度情報においてエッジ保存に基づくフィルタリング分解を実行するステップと、撮影場面情報及び撮影メタデータに従って、ベースレイヤの輝度情報においてコントラストエンハンスメント処理を実行するステップと、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、少なくとも１つのゲインを決定するステップと、ゲインを使用することによりディテールレイヤの輝度情報においてディテールエンハンスメント処理を実行するステップと、エンハンスメント処理を受けている輝度情報を取得するために、コントラストエンハンスメント処理を受けているベースレイヤの輝度情報と、ディテールエンハンスメント処理を受けているディテールレイヤの輝度情報との加算を実行するステップとを含む。

【0011】

第１の態様の第３の可能な実現方式を参照して、第１の態様の第４の可能な実現方式では、輝度情報においてエンハンスメント処理を実行する前に、この方法は、ガウス雑音低減処理を受けている輝度情報のα₁倍を取得するために、ガウス雑音低減処理を受けている輝度情報を第１の係数α₁で乗算するステップであり、α₁は0から1の範囲の数値であるステップと、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍を取得するために、ガウス雑音低減処理を受けていない輝度情報を(1-α₁)で乗算するステップと、第１の輝度情報を取得するために、ガウス雑音低減処理を受けている輝度情報のα₁倍と、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍との加算を実行するステップとを更に含み、処理されるべき画像の輝度情報においてエンハンスメント処理を実行するステップは、第１の輝度情報においてエンハンスメント処理を実行するステップを含む。

【0012】

第１の態様の第２の可能な実現方式を参照して、第１の態様の第５の可能な実現方式では、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減及びエンハンスメント処理を実行するステップは、輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、輝度情報において局所絶対値差分の計算を実行するステップと、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得するステップと、畳み込みフィルタカーネルを取得するために、高域フィルタカーネル及び第１のガウス雑音低減フィルタカーネルにおいて畳み込みを実行するステップと、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、畳み込みフィルタカーネルの重みを決定するステップと、鮮鋭度エンハンスメントフィルタカーネルを取得するために、畳み込みフィルタカーネルを重みで乗算するステップと、ガウス雑音低減鮮鋭フィルタカーネルを取得するために、第１のガウス雑音低減フィルタカーネルと鮮鋭度エンハンスメントフィルタカーネルとの加算を実行するステップと、ガウス雑音低減鮮鋭フィルタカーネルに従って、輝度情報においてガウス雑音低減処理及び鮮鋭度エンハンスメント処理を実行するステップとを含む。

【0013】

第１の態様の第３の可能な実現方式、第１の態様の第４の可能な実現方式又は第１の態様の第５の可能な実現方式を参照して、第１の態様の第６の可能な実現方式では、輝度情報の周辺輝度値のSADを取得するために、輝度情報において局所絶対値差分の計算を実行する前に、この方法は、撮影場面情報及び撮影メタデータに従って、輝度情報においてゴマ塩雑音低減処理を実行するステップを更に含む。

【0014】

第１の態様の第２の可能な実現方式、第１の態様の第３の可能な実現方式、第１の態様の第４の可能な実現方式、第１の態様の第５の可能な実現方式又は第１の態様の第６の可能な実現方式を参照して、第１の態様の第７の可能な実現方式では、撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減処理を実行するステップは、クロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報に従って、局所絶対値差分の計算を実行するステップと、周辺クロミナンス値のSAD、撮影場面情報及び撮影メタデータに従って、第２のガウス雑音低減フィルタカーネルを取得するステップと、第２のガウス雑音低減フィルタカーネルに従って、クロミナンス情報においてガウス雑音低減処理を実行するステップとを含み、撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報においてエンハンスメント処理を実行するステップは、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせるステップと、合成画像情報の色飽和度を取得するステップと、撮影場面情報及び撮影メタデータに従って、色飽和度を調整するステップとを含む。

【0015】

第１の態様の第７の可能な実現方式を参照して、第１の態様の第８の可能な実現方式では、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせる前に、この方法は、エンハンスメント処理を受けている輝度情報のα₂倍を取得するために、エンハンスメント処理を受けている輝度情報を第２の係数α₂で乗算するステップであり、α₂は0から1の範囲の数値であるステップと、雑音低減処理を受けている輝度情報の(1-α₂)倍を取得するために、雑音低減処理を受けている輝度情報を(1-α₂)で乗算するステップと、第２の輝度情報を取得するために、エンハンスメント処理を受けている輝度情報のα₂倍と、雑音低減処理を受けている輝度情報の(1-α₂)倍との加算を実行するステップとを更に含み、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせるステップは、合成画像情報を取得するために、クロミナンス情報と第２の輝度情報とを組み合わせるステップを含む。

【0016】

第１の態様の第７の可能な実現方式又は第１の態様の第８の可能な実現方式を参照して、第１の態様の第９の可能な実現方式では、クロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報に従って、局所絶対値差分の計算を実行する前に、この方法は、撮影場面情報及び撮影メタデータに従って、クロミナンス情報においてゴマ塩雑音低減処理を実行するステップを更に含む。

【0017】

第２の態様によれば、本発明の実施例は、画像処理装置を提供し、撮影されたが画像処理されていない処理されるべき画像を取得するように構成された撮影モジュールと、処理されるべき画像の撮影特性情報を抽出するように構成された抽出モジュールと、撮影特性情報に従って、処理されるべき画像において画像処理を実行するように構成された処理モジュールとを含む。

【0018】

第２の態様の第１の可能な実現方式では、処理モジュールは、処理されるべき画像の撮影場面情報及び撮影メタデータに従って、処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行するように具体的に構成される。

【0019】

第２の態様の第１の可能な実現方式を参照して、第２の態様の第２の可能な実現方式では、処理モジュールは、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理を実行するように、及び／又は撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減及び／又はエンハンスメント処理を実行するように具体的に構成される。

【0020】

第２の態様の第２の可能な実現方式を参照して、第２の態様の第３の可能な実現方式では、処理モジュールは、第１のガウス雑音低減ユニット及び／又は第１のエンハンスメントユニットを含み、第１のガウス雑音低減ユニットは、輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、輝度情報において局所絶対値差分の計算を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、第１のガウス雑音低減フィルタカーネルに従って、輝度情報においてガウス雑音低減処理を実行するように構成され、第１のエンハンスメントユニットは、ベースレイヤの輝度情報と少なくとも１つのディテールレイヤの輝度情報とを取得するために、輝度情報においてエッジ保存に基づくフィルタリング分解を実行し、撮影場面情報及び撮影メタデータに従って、ベースレイヤの輝度情報においてコントラストエンハンスメント処理を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、少なくとも１つのゲインを決定し、ゲインを使用することによりディテールレイヤの輝度情報においてディテールエンハンスメント処理を実行し、エンハンスメント処理を受けている輝度情報を取得するために、コントラストエンハンスメント処理を受けているベースレイヤの輝度情報と、ディテールエンハンスメント処理を受けているディテールレイヤの輝度情報との加算を実行するように構成される。

【0021】

第２の態様の第３の可能な実現方式を参照して、第２の態様の第４の可能な実現方式では、処理モジュールは、ガウス雑音低減処理を受けている輝度情報のα₁倍を取得するために、ガウス雑音低減処理を受けている輝度情報を第１の係数α₁で乗算し、α₁は0から1の範囲の数値であり、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍を取得するために、ガウス雑音低減処理を受けていない輝度情報を(1-α₁)で乗算し、第１の輝度情報を取得するために、ガウス雑音低減処理を受けている輝度情報のα₁倍と、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍との加算を実行するように構成された第１の取得ユニットを更に含み、第１のエンハンスメントユニットは、第１の輝度情報においてエンハンスメント処理を実行するように具体的に構成される。

【0022】

第２の態様の第２の可能な実現方式を参照して、第２の態様の第５の可能な実現方式では、処理モジュールは、輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、輝度情報において局所絶対値差分の計算を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、畳み込みフィルタカーネルを取得するために、高域フィルタカーネル及び第１のガウス雑音低減フィルタカーネルにおいて畳み込みを実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、畳み込みフィルタカーネルの重みを決定し、鮮鋭度エンハンスメントフィルタカーネルを取得するために、畳み込みフィルタカーネルを重みで乗算し、ガウス雑音低減鮮鋭フィルタカーネルを取得するために、第１のガウス雑音低減フィルタカーネルと鮮鋭度エンハンスメントフィルタカーネルとの加算を実行し、ガウス雑音低減鮮鋭フィルタカーネルに従って、輝度情報においてガウス雑音低減処理及び鮮鋭度エンハンスメント処理を実行するように構成された雑音低減エンハンスメントユニットを含む。

【0023】

第２の態様の第３の可能な実現方式、第２の態様の第４の可能な実現方式又は第２の態様の第５の可能な実現方式を参照して、第２の態様の第６の可能な実現方式では、処理モジュールは、撮影場面情報及び撮影メタデータに従って、輝度情報においてゴマ塩雑音低減処理を実行するように構成された第１のゴマ塩雑音低減ユニットを更に含む。

【0024】

第２の態様の第２の可能な実現方式、第２の態様の第３の可能な実現方式、第２の態様の第４の可能な実現方式、第２の態様の第５の可能な実現方式又は第２の態様の第６の可能な実現方式を参照して、第２の態様の第７の可能な実現方式では、処理モジュールは、第２のガウス雑音低減ユニットと、第２のエンハンスメントユニットとを更に含み、第２のガウス雑音低減ユニットは、クロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報に従って、局所絶対値差分の計算を実行し、周辺クロミナンス値のSAD、撮影場面情報及び撮影メタデータに従って、第２のガウス雑音低減フィルタカーネルを取得し、第２のガウス雑音低減フィルタカーネルに従って、クロミナンス情報においてガウス雑音低減処理を実行ように構成され、第２のエンハンスメントユニットは、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせ、合成画像情報の色飽和度を取得し、撮影場面情報及び撮影メタデータに従って、色飽和度を調整するように構成される。

【0025】

第２の態様の第７の可能な実現方式を参照して、第２の態様の第８の可能な実現方式では、処理モジュールは、第２のエンハンスメントユニットが合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせる前に、エンハンスメント処理を受けている輝度情報のα₂倍を取得するために、エンハンスメント処理を受けている輝度情報を第２の係数α₂で乗算し、α₂は0から1の範囲の数値であり、雑音低減処理を受けている輝度情報の(1-α₂)倍を取得するために、雑音低減処理を受けている輝度情報を(1-α₂)で乗算し、第２の輝度情報を取得するために、エンハンスメント処理を受けている輝度情報のα₂倍と、雑音低減処理を受けている輝度情報の(1-α₂)倍との加算を実行するように構成された第２の取得ユニットを更に含み、第２のエンハンスメントユニットは、合成画像情報を取得するために、クロミナンス情報と第２の輝度情報とを組み合わせ、合成画像情報の色飽和度を取得し、撮影場面情報及び撮影メタデータに従って、色飽和度を調整するように具体的に構成される。

【0026】

第２の態様の第７の可能な実現方式又は第２の態様の第８の可能な実現方式を参照して、第２の態様の第９の可能な実現方式では、処理モジュールは、第２のガウス雑音低減ユニットがクロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報に従って、局所絶対値差分の計算を実行する前に、撮影場面情報及び撮影メタデータに従って、クロミナンス情報においてゴマ塩雑音低減処理を実行するように構成された第２のゴマ塩雑音低減ユニットを更に含む。

【0027】

第３の態様によれば、本発明の実施例は、前述の画像処理装置を含む撮影端末を更に提供する。

【0028】

第３の態様の第１の可能な実現方式では、撮影端末は、移動電話又はタブレットコンピュータを含む。

【0029】

本発明の実施例で提供される画像処理方法及び装置並びに撮影端末によれば、撮影されたが画像処理されていない処理されるべき画像が取得され、処理されるべき画像から撮影特性情報が抽出され、撮影特性情報に従って、画像処理が実行される。このように、撮影された処理されるべき画像を取得した後に、撮影端末は、撮影端末により処理された後に取得された画像の品質が適応的に改善され得るように、画像の適応処理の基礎として、処理されるべき画像の撮影特性情報を使用し、それぞれの処理されるべき画像の撮影特性情報に従って、それぞれの処理されるべき画像において処理を実行する。

【図面の簡単な説明】

【0030】

本発明の実施例又は従来技術の技術的対策を明確に説明するために、以下に、実施例又は従来技術を説明するために必要な添付図面を簡単に紹介する。明らかに、以下の説明の添付図面は、本発明の単に幾つかの実施例を示しているに過ぎず、当業者は、創造的取り組みを行うことなく、これらの添付図面から依然として他の図面を導き得る。

【図1】本発明による画像処理方法の第１の実施例のフローチャート

【図2】本発明による画像処理方法の第２の実施例のフローチャート

【図3A】本発明による画像処理方法の第３の実施例のフローチャート

【図3B】本発明による画像処理方法の第３の実施例のフローチャート

【図4】本発明による画像処理装置の第１の実施例の概略構成図

【図5】本発明による画像処理装置の第２の実施例の概略構成図

【図6】本発明による画像処理装置の第３の実施例の概略構成図

【図7】本発明による画像処理装置の第４の実施例の概略構成図

【図8】本発明の実施例による撮影端末の第１の実施例の概略構成図

【発明を実施するための形態】

【0031】

本発明の実施例の目的、技術的対策及び利点を明確にするために、以下に、本発明の実施例の添付図面を参照して、本発明の実施例の技術的対策を明確且つ完全に説明する。明らかに、説明する実施例は、本発明の実施例の全てではなく、一部に過ぎない。創造的取り組みを行うことなく、本発明の実施例に基づいて当業者により得られる全ての他の実施例は、本発明の保護範囲内に入るものとする。

【0032】

図１は、本発明による画像処理方法の第１の実施例のフローチャートである。図１に示すように、この実施例は、画像処理装置を使用することにより実現されてもよく、この装置は、例えば、この実施例の方法を実現するために撮影端末に統合されてもよい。この実施例の方法は以下を含んでもよい。

【0033】

ステップ101：撮影されたが画像処理されていない処理されるべき画像を取得する。

【0034】

この実施例では、撮影された処理されるべき画像が取得される。処理されるべき画像は、画像処理アルゴリズムを使用することにより処理されていない画像でもよく、例えば、撮影端末により撮影された画像でもよい。撮影端末は、移動電話、タブレットコンピュータ（PAD）、ノートブックコンピュータ又は多機能プレイヤのような撮影レンズを有するデバイスでもよい。これらの撮影端末のハードウェア条件の制限のため、撮影画像の品質は比較的悪い。従って、画像は処理される必要がある。

【0035】

ステップ102：処理されるべき画像の撮影特性情報を抽出する。

【0036】

この実施例では、撮影された処理されるべき画像が取得された後、処理されるべき画像の撮影特性情報は、処理されるべき画像から直接抽出される。撮影特性情報は、処理されるべき画像の撮影された場面についての情報、例えば、青空、緑色植物、日没、夜の場面、人物でもよく、処理されるべき画像が撮影されたときのメタデータ、例えば、処理されるべき画像が撮影されたときの光感度及び露光時間でもよい。特性が処理されるべき画像を反映できることができる限り、特性は、この実施例で使用される撮影特性情報として使用されてもよい点に留意すべきである。

【0037】

ステップ103：撮影特性情報に従って、処理されるべき画像において画像処理を実行する。

【0038】

この実施例では、撮影特性情報は、撮影端末により撮影された処理されるべき画像からリアルタイムで抽出されてもよい。撮影特性情報は、処理されるべき画像に関係する必要がある特性及び品質欠陥を反映することができる。処理されるべき画像の撮影特性情報は、異なってもよく、従って、画像処理は、異なる撮影特性情報に従って、異なる処理されるべき画像において特別に実行されてもよい。

【0039】

具体的には、従来技術では、撮影端末が撮影画像を取得した後に、固定の画像処理方式が使用される。例えば、撮影端末に予め設定された固定の画像処理アルゴリズムが画像処理に使用される。すなわち、従来技術では、撮影された異なる処理されるべき画像において同じ処理が実行される。従って、画像処理の適応性が比較的悪く、このことは、処理された画像の品質が一様でないことを生じる。

【0040】

従来技術に比べて、この実施例では、撮影された処理されるべき画像を取得した後に、撮影端末は、撮影端末により処理された後に取得された画像の品質が適応的に改善され得るように、画像の適応処理の基礎として、画像処理されていない処理されるべき画像の撮影特性情報を使用し、それぞれの処理されるべき画像の撮影特性情報に従って、それぞれの処理されるべき画像において処理を実行する。

【0041】

この実施例の画像処理方法は、撮影端末が撮影された生の画像を取得した後に適用されてもよく、画像が撮影端末の表示画面に表示される前に実行されてもよい点に留意すべきである。

【0042】

本発明の第１の実施例で提供される画像処理方法によれば、撮影されたが画像処理されていない処理されるべき画像が取得され、処理されるべき画像から撮影特性情報が抽出され、撮影特性情報に従って、画像処理が実行される。このように、撮影された処理されるべき画像を取得した後に、撮影端末は、撮影端末により処理された後に取得された画像の品質が適応的に改善され得るように、画像の適応処理の基礎として、処理されるべき画像の撮影特性情報を使用し、それぞれの処理されるべき画像の撮影特性情報に従って、それぞれの処理されるべき画像において処理を実行する。

【0043】

図２は、本発明による画像処理方法の第２の実施例のフローチャートである。図２に示すように、この実施例は、画像処理装置を使用することにより実現されてもよく、この装置は、例えば、この実施例の方法を実現するために撮影端末に統合されてもよい。この実施例の方法は以下を含んでもよい。

【0044】

ステップ201：撮影されたが画像処理されていない処理されるべき画像を取得する。

【0045】

この実施例では、撮影された処理されるべき画像が取得される。処理されるべき画像は、画像処理アルゴリズムを使用することにより処理されていない画像でもよく、例えば、撮影端末により撮影された画像でもよい。撮影端末は、移動電話、PAD、ノートブックコンピュータ又は多機能プレイヤのような撮影レンズを有するデバイスでもよい。これらの撮影端末のハードウェア条件の制限のため、撮影画像の品質は比較的悪い。従って、画像は処理される必要がある。

【0046】

ステップ202：処理されるべき画像の撮影場面情報及び撮影メタデータを抽出する。

【0047】

この実施例では、撮影された処理されるべき画像が取得された後、処理されるべき画像の撮影場面情報及び撮影メタデータは、処理されるべき画像から直接抽出される。撮影場面情報は、青空の場面、緑色植物の場面、日没の場面、夜の場面、低照度の場面、人の顔の領域等でもよい。撮影メタデータは、処理されるべき画像が撮影されたときの光感度、露光時間等でもよい。当業者は、撮影場面情報及び撮影メタデータの抽出は、従来技術のものと一致しており、この実施例では詳細をここで繰り返し説明しないことを認識し得る。

【0048】

この実施例では、撮影場面情報及び撮影メタデータが取得された後に、雑音低減及び／又はエンハンスメント処理が、撮影場面情報及び撮影メタデータに従って、処理されるべき画像において実行されてもよい。処理されるべき画像から抽出された撮影場面情報及び撮影メタデータは、どの品質欠陥が処理されるべき画像に存在するかを反映することができ、従って、雑音低減及び／又はエンハンスメント処理が画像の品質を改善するために特別に実行されてもよい。具体的な実現の間に、処理されるべき画像は、処理されるべき画像の輝度情報及びクロミナンス情報に分解され、撮影場面情報及び撮影メタデータに従って、処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行することは、ステップ203及びステップ204を含んでもよい。当業者は、処理されるべき画像を処理されるべき画像の輝度情報及びクロミナンス情報に分割することは、従来技術の色空間変換に一致しており、この実施例では詳細をここで繰り返し説明しないことを認識し得る。

【0049】

ステップ203：撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理を実行する。

【0050】

この実施例では、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減処理を実行することは、輝度情報の周辺輝度値の差分絶対値和（Sum of Absolute Difference、略してSAD）を取得するために、輝度情報において局所絶対値差分の計算を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、第１のガウス雑音低減フィルタカーネルに従って、輝度情報においてガウス雑音低減処理を実行することを含んでもよい。

【0051】

具体的には、当業者は、局所絶対値差分の計算を実行することは、従来技術のものに一致しており、この実施例では詳細をここで繰り返し説明しないことを認識し得る。各画素の周辺輝度値のSAD（すなわち、中央の画素と周辺の画素との間の輝度値の差分の絶対値の和）は、局所絶対値差分の計算により取得されてもよい。周辺輝度値の各SADは、各画素の局所特性（例えば、画素がエッジ領域に位置するか平坦領域に位置するか）を表してもよい。第１のガウス雑音低減フィルタカーネルは、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って取得される。第１のガウス雑音低減フィルタカーネルは、従来技術のバイラテラルフィルタカーネルでもよく、この実施例では詳細をここで繰り返し説明しない。第１のガウス雑音低減フィルタカーネルの分散パラメータが雑音低減度を決定するため、大きい分散パラメータは、大きい雑音低減度をもたらす。従って、各画素の周辺輝度値のSADが取得された後に、周辺輝度値の各SADにおいて分析が実行される。周辺輝度値の大きいSADがエッジ情報の大きい強度値を示し、画素に含まれる多くのエッジ情報を示す。エッジ情報が雑音低減処理においてぼやかされないことを維持するために、画素に対応する第１のガウス雑音低減フィルタカーネルの分散パラメータは、低減されてもよい。対応して、周辺輝度値の小さいSADは、エッジ情報の小さい強度値を示し、画素に含まれる小さいエッジ情報を示す。雑音低減効果を確保するために、画素に対応する第１のガウス雑音低減フィルタカーネルの分散パラメータは増加してもよい。画素の周辺輝度値のSADは異なってもよいため、異なる分散パラメータが周辺輝度値の異なるSADに従って決定されてもよい。更に、処理されるべき画像の撮影メタデータの光感度が低い場合、第１のガウス雑音低減フィルタカーネルの分散パラメータは、雑音低減度を弱めるために低減されてもよい。処理されるべき画像の撮影メタデータの光感度が高い場合、第１のガウス雑音低減フィルタカーネルの分散パラメータは、雑音低減度を強めるために増加してもよい。処理されるべき画像の撮影場面情報が夜の場面又は低照度の場面である場合、第１のガウス雑音低減フィルタカーネルの分散パラメータは、雑音低減度を強めるために増加してもよい。このように、第１のガウス雑音低減フィルタカーネルが決定されてもよい。第１のガウス雑音低減フィルタカーネルは、ガウス雑音低減フィルタを生成するために使用される。ガウス雑音において雑音低減処理を実行するために、ガウス雑音低減処理は、輝度情報において実行される。

【0052】

この実施例では、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減処理を実行することは、ベースレイヤの輝度情報と少なくとも１つのディテールレイヤの輝度情報とを取得するために、輝度情報においてエッジ保存に基づくフィルタリング分解を実行し、撮影場面情報及び撮影メタデータに従って、ベースレイヤの輝度情報においてコントラストエンハンスメント処理を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、少なくとも１つのゲインを決定し、ゲインを使用することによりディテールレイヤの輝度情報においてディテールエンハンスメント処理を実行し、エンハンスメント処理を受けている輝度情報を取得するために、コントラストエンハンスメント処理を受けているベースレイヤの輝度情報と、ディテールエンハンスメント処理を受けているディテールレイヤの輝度情報との加算を実行することを含んでもよい。

【0053】

具体的には、エッジ保存に基づくフィルタリングアルゴリズム（例えば、バイラテラルフィルタリングアルゴリズム、及びエッジ保存機能を有する他のフィルタリングアルゴリズム）は、各レイヤのディテールのコントラストが画像の定義を改善するために後のエンハンスメント処理で管理され得るように、１つのベースレイヤの輝度情報と、異なるディテール度を有する複数のディテールレイヤの輝度情報とを取得するために、輝度情報においてマルチレベルの分解を実行するために使用されてもよい。例えば、ベースレイヤの輝度情報と、中間のディテールレイヤの輝度情報と、小さいディテールレイヤの輝度情報とを取得するために、２つのレベルのエッジ保存フィルタリング分解が輝度情報において実行されてもよい。次に、コントラストエンハンスメント処理は、ハイライト領域及び暗い領域の輝度及びコントラストを改善するために、撮影場面情報及び撮影メタデータに従って、ベースレイヤの輝度情報において実行されてもよい。コントラストエンハンスメント処理は、トーンマッピング、ヒストグラム均一化、リニアストレッチング、Gamma補正等を含んでもよい。例えば、撮影場面情報が暗光の場面である場合、トーンマッピング曲線の形状は、画像の暗い領域を明るくするように制御されてもよい。

【0054】

この実施例では、各ディテールレイヤの輝度情報のゲインは、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って取得される。例えば、小さいディテールレイヤの輝度情報は、より多くの雑音を含み得るため、小さいディテールレイヤの輝度情報について、より小さいゲインが設定されてもよい。中間のディテールレイヤの中間周波数輝度情報は、より多くのディテール情報及びエッジ情報を含むため、中間のディテールレイヤの輝度情報について、より大きいゲインが設定されてもよい。撮影メタデータの光感度が低い場合、ディテール情報が更に豊富になることを可能にするために、中間のディテールレイヤの輝度情報及び小さいディテールレイヤのゲインは、エッジ情報エンハンスメントを強めるように別々に増加してもよい。撮影メタデータの光感度が高い場合、中間のディテールレイヤの輝度情報及び小さいディテールレイヤの輝度情報のゲインは、エッジ情報エンハンスメントを弱めるように別々に低減されてもよい。撮影場面情報が人の顔の領域である場合、表示される人の顔がより自然になることを可能にするために、中間のディテールレイヤの輝度情報及び小さいディテールレイヤの輝度情報のゲインは、エッジ情報エンハンスメントを弱めるように別々に低減されてもよい。このように、中間のディテールレイヤの輝度情報及び小さいディテールレイヤの輝度情報のゲインは、撮影場面情報及び撮影メタデータに従って別々に決定され、ディテールエンハンスメント処理は、各ゲインを使用することにより各ディテールレイヤの輝度情報において別々に実行され、エンハンスメント処理を受けている輝度情報を取得するために、コントラストエンハンスメント処理を受けているベースレイヤの輝度情報と、ディテールエンハンスメント処理を受けている中間のディテールレイヤの輝度情報と、ディテールエンハンスメント処理を受けている小さいディテールレイヤの輝度情報とで加算が実行されることが実現されてもよい。エンハンスメント処理を受けていない輝度情報は、雑音低減処理を受けていない輝度情報でもよく、雑音低減処理を受けている輝度情報でもよい点に留意すべきである。

【0055】

任意選択で、輝度情報においてエンハンスメント処理を実行する前に、この方法は、ガウス雑音低減処理を受けている輝度情報のα₁倍を取得するために、ガウス雑音低減処理を受けている輝度情報を第１の係数α₁で乗算し、α₁は0から1の範囲の数値であり、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍を取得するために、ガウス雑音低減処理を受けていない輝度情報を(1-α₁)で乗算し、第１の輝度情報を取得するために、ガウス雑音低減処理を受けている輝度情報のα₁倍と、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍との加算を実行し、第１の輝度情報においてエンハンスメント処理を実行することを更に含んでもよい。具体的な実現処理については、この実施例の前述の関係する説明を参照し、詳細をここで繰り返し説明しない。α₁の値は、実際の用途事例に従って決定され、この実施例においてここで限定されない点に留意すべきである。

【0056】

ステップ204：撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減及び／又はエンハンスメント処理を実行する。

【0057】

この実施例では、撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減処理を実行することは、クロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報において局所絶対値差分の計算を実行し、周辺クロミナンス値のSAD、撮影場面情報及び撮影メタデータに従って、第２のガウス雑音低減フィルタカーネルを取得し、第２のガウス雑音低減フィルタカーネルに従って、クロミナンス情報においてガウス雑音低減処理を実行することを含んでもよい。

【0058】

具体的には、クロミナンス情報において雑音低減処理を実行する処理は、この実施例の輝度情報において雑音低減処理を実行する前述の処理と同様である。詳細については、前述の関係する説明を参照し、この実施例では詳細をここで繰り返し説明しない。

【0059】

ステップ203及びステップ204の１つが実行のために選択されてもよい点に留意すべきである。

【0060】

この実施例では、撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報においてエンハンスメント処理を実行することは、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせ、合成画像情報の色飽和度を取得し、撮影場面情報及び撮影メタデータに従って、色飽和度を調整することを含んでもよい。

【0061】

具体的には、クロミナンス情報及び輝度情報は、合成画像情報を取得するために組み合わせられる。各色飽和度は、合成画像情報から取得される。色飽和度は、画像の明るさを改善するために、画像場面情報及び撮影メタデータに従って調整される。色飽和度を取得することは、従来技術のものと一致しており、この実施例では詳細をここで繰り返し説明しない点に留意すべきである。例えば、撮影メタデータの光感度が低い場合、各色飽和度は、色を明るくするために増加してもよい。撮影メタデータの光感度が高い場合、各色飽和度のエンハンスメントは、色雑音を低減するために弱められてもよい。撮影場面情報が青空の場面である場合、青色を有する画素点の飽和度は、青空を更に青くなることを可能にするために増加してもよい。撮影場面情報が緑色植物の場面である場合、緑色を有する画素点の飽和度は、緑色植物が更に緑色になることを可能にするために増加してもよい。撮影場面情報が日没の場面である場合、赤みを帯びた黄色を有する画素点の飽和度は、日没が更にすばらしくなることを可能にするために増加してもよい。組み合わせに使用されるクロミナンス情報は、雑音低減処理を受けていないクロミナンス情報でもよく、雑音低減処理を受けているクロミナンス情報でもよく、組み合わせに使用される輝度情報は、雑音低減処理を受けている輝度情報でもよく、エンハンスメント処理を受けている輝度情報でもよい点に留意すべきである。

【0062】

任意選択で、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせる前に、この方法は、エンハンスメント処理を受けている輝度情報のα₂倍を取得するために、エンハンスメント処理を受けている輝度情報を第２の係数α₂で乗算し、α₂は0から1の範囲の数値であり、雑音低減処理を受けている輝度情報の(1-α₂)倍を取得するために、雑音低減処理を受けている輝度情報を(1-α₂)で乗算し、第２の輝度情報を取得するために、エンハンスメント処理を受けている輝度情報のα₂倍と、雑音低減処理を受けている輝度情報の(1-α₂)倍との加算を実行し、合成画像情報を取得するために、クロミナンス情報と第２の輝度情報とを組み合わせることを更に含んでもよい。具体的な実現処理については、この実施例の前述の詳細な説明を参照し、詳細をここで繰り返し説明しない。α₂の値は、実際の用途事例に従って決定され、この実施例においてここで限定されない点に留意すべきである。

【0063】

本発明の第２の実施例で提供される画像処理方法によれば、撮影されたが画像処理されていない処理されるべき画像が取得され、処理されるべき画像の撮影場面情報及び撮影メタデータが抽出され、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理が実行され、撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減及び／又はエンハンスメント処理が実行される。このように、撮影された処理されるべき画像を取得した後に、撮影端末は、撮影端末により処理された後に取得された画像の品質が適応的に改善され得るように、画像の適応処理の基礎として、処理されるべき画像の撮影場面情報及び撮影メタデータを使用し、それぞれの処理されるべき画像の撮影場面情報及び撮影メタデータに従って、それぞれの処理されるべき画像のクロミナンス情報及び輝度情報において処理を実行する。

【0064】

図３Ａ及び図３Ｂは、本発明による画像処理方法の第３の実施例のフローチャートである。図３Ａ及び図３Ｂに示すように、この実施例は、画像処理装置を使用することにより実現されてもよく、この装置は、例えば、この実施例の方法を実現するために撮影端末に統合されてもよい。この実施例の方法は、図２に示す方法の実施例の更に詳細な対策である。この実施例の方法は以下を含む。

【0065】

ステップ301：撮影場面情報及び撮影メタデータに従って、輝度情報においてゴマ塩雑音低減処理を実行する。

【0066】

この実施例では、輝度においてゴマ塩雑音低減処理を実行するために、ゴマ塩雑音除去効果を有するゴマ塩雑音低減フィルタ（例えば、標準的なメジアンフィルタ）が使用されてもよい。ゴマ塩雑音低減フィルタの周辺ウィンドウのサイズは、撮影場面情報及び撮影メタデータに従って調整されてもよい。ゴマ塩雑音低減処理は、ゴマ塩雑音において雑音低減処理を実行するために、輝度情報において実行される。撮影メタデータの光感度が低い場合、ゴマ塩雑音フィルタの周辺ウィンドウのサイズは、雑音低減処理度を弱めるために低減されてもよい。撮影メタデータの光感度が高い場合、ゴマ塩雑音フィルタの周辺ウィンドウのサイズは、雑音低減処理度を強めるために増加してもよい。撮影場面情報が夜の場面又は低照度の場面である場合、ゴマ塩雑音低減フィルタの周辺ウィンドウのサイズは、雑音低減処理度を強めるために増加してもよい。

【0067】

ステップ302：ゴマ塩雑音低減処理を受けている輝度情報の周辺輝度値のSADを取得するために、ゴマ塩雑音低減処理を受けている輝度情報において局所絶対値差分の計算を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得する。

【0068】

この実施例では、ゴマ塩雑音低減処理が輝度情報において実行された後に、局所絶対値差分の計算は、ゴマ塩雑音低減処理を受けている輝度情報の周辺輝度値のSADを取得するために、ゴマ塩雑音低減処理を受けている輝度情報に従って実行される。第１のガウス雑音低減フィルタカーネルは、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って取得される。ステップ302の具体的な実現処理については、本発明の第２の実施例のステップ203における撮影場面情報及び撮影メタデータに従って輝度情報において雑音低減処理を実行する関係する説明を参照し、この実施例では詳細をここで繰り返し説明しない。

【0069】

ステップ303：畳み込みフィルタカーネルを取得するために、高域フィルタカーネル及び第１のガウス雑音低減フィルタカーネルにおいて畳み込みを実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、畳み込みフィルタカーネルの重みを決定し、鮮鋭度エンハンスメントフィルタカーネルを取得するために、畳み込みフィルタカーネルを重みで乗算する。

【0070】

この実施例では、高域フィルタカーネルは、高域通過機能を有するフィルタカーネル（例えば、Laplacian高域フィルタカーネル）でもよい。畳み込みは、畳み込みフィルタカーネルを取得するために、高域フィルタカーネル及び第１のガウス雑音低減フィルタカーネルにおいて実行される。畳み込みフィルタカーネルの重みは、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って決定される。畳み込みフィルタカーネルは、鮮鋭度エンハンスメントフィルタカーネルを取得するために、重みで乗算される。例えば、周辺輝度値のSADが大きい場合、これは、多くのエッジ情報が存在することを示し、重みは、エッジエンハンスメント処理を強めるために増加してもよい。周辺輝度値のSADが小さい場合、これは、エッジ情報があまり存在せず、多くの雑音が存在することを示し、重みは、雑音を抑圧するために低減されてもよい。撮影メタデータの光感度が低い場合、重みは、エッジエンハンスメント処理を強めるために増加してもよい。撮影メタデータの光感度が高い場合、重みは、雑音増幅を抑圧するために低減されてもよい。撮影場面情報が人の顔の領域情報である場合、重みは、人の顔がより自然になることを可能にするため、エッジエンハンスメント処理を弱めるために低減されてもよい。

【0071】

ステップ304：ガウス雑音低減鮮鋭フィルタカーネルを取得するために、第１のガウス雑音低減フィルタカーネルと鮮鋭度エンハンスメントフィルタカーネルとの加算を実行し、ガウス雑音低減鮮鋭フィルタカーネルに従って、輝度情報においてガウス雑音低減処理及び鮮鋭度エンハンスメント処理を実行する。

【0072】

この実施例では、ガウス雑音低減鮮鋭フィルタカーネルを取得するために、第１のガウス雑音低減フィルタカーネル及び鮮鋭度エンハンスメントフィルタカーネルとで加算が実行され、ガウス雑音低減鮮鋭フィルタは、ガウス雑音低減鮮鋭フィルタカーネルに従って生成される。第１のガウス雑音低減フィルタカーネルは、周辺輝度値（すなわち、エッジ情報）のSADに従って決定されるため、ガウス雑音低減鮮鋭フィルタは、エッジ情報の方向に輝度情報において円滑な雑音低減処理を実行してもよく、エッジ情報と垂直の方向に輝度情報においてエッジエンハンスメント処理を実行してもよい。このように、ガウス雑音低減処理及び鮮鋭度エンハンスメント処理は、輝度情報において同時に実行可能になり、画像処理効率が改善される。

【0073】

ステップ305：ガウス雑音低減処理及び鮮鋭度エンハンスメント処理を受けている輝度情報のα₁倍を取得するために、ガウス雑音低減処理及び鮮鋭度エンハンスメント処理を受けている輝度情報を第１の係数α₁で乗算し、α₁は0から1の範囲の数値であり、ゴマ塩雑音低減処理を受けている輝度情報の(1-α₁)倍を取得するために、ゴマ塩雑音低減処理を受けている輝度情報を(1-α₁)で乗算し、第１の輝度情報を取得するために、ガウス雑音低減処理及び鮮鋭度エンハンスメント処理を受けている輝度情報のα₁倍と、ゴマ塩雑音低減処理を受けている輝度情報の(1-α₁)倍との加算を実行する。

【0074】

この実施例では、α₁の値は、実際の用途事例に従って決定され、この実施例においてここで限定されない点に留意すべきである。

【0075】

ステップ306：撮影場面情報及び撮影メタデータに従って、第１の輝度情報においてエンハンスメント処理を実行する。

【0076】

この実施例では、ステップ306の具体的な実現処理については、本発明の第２の実施例のステップ203における撮影場面情報及び撮影メタデータに従って、輝度情報においてエンハンスメント処理を実行する関係する説明を参照し、この実施例では詳細をここで繰り返し説明しない。

【0077】

ステップ307：エンハンスメント処理を受けている第１の輝度情報のα₂倍を取得するために、エンハンスメント処理を受けている第１の輝度情報を第２の係数α₂で乗算し、α₂は0から1の範囲の数値であり、エンハンスメント処理を受けていない第１の輝度情報の(1-α₂)倍を取得するために、エンハンスメント処理を受けていない第１の輝度情報を(1-α₂)で乗算し、第２の輝度情報を取得するために、エンハンスメント処理を受けている第１の輝度情報のα₂倍と、エンハンスメント処理を受けていない第１の輝度情報の(1-α₂)倍との加算を実行する。

【0078】

この実施例では、α₂の値は、実際の用途事例に従って決定され、この実施例においてここで限定されない点に留意すべきである。

【0079】

ステップ308：撮影場面情報及び撮影メタデータに従ってクロミナンス情報においてゴマ塩雑音低減処理を実行する。

【0080】

この実施例では、ステップ308の具体的な実現処理については、この実施例のステップ301における関係する説明を参照し、この実施例では詳細をここで繰り返し説明しない。

【0081】

ステップ309：ゴマ塩雑音低減処理を受けているクロミナンス情報の周辺クロミナンス値のSADを取得するために、ゴマ塩雑音低減処理を受けているクロミナンス情報において局所絶対値差分の計算を実行し、周辺クロミナンス値のSAD、撮影場面情報及び撮影メタデータに従って、第２のガウス雑音低減フィルタカーネルを取得し、第２のガウス雑音低減フィルタカーネルに従って、ゴマ塩雑音低減処理を受けているクロミナンス情報においてガウス雑音低減処理を実行する。

【0082】

この実施例では、ステップ309の具体的な実現処理については、本発明の第２の実施例のステップ204における撮影場面情報及び撮影メタデータに従って、クロミナンス情報において雑音低減処理を実行する関係する説明を参照し、この実施例では詳細をここで繰り返し説明しない。

【0083】

ステップ310：合成画像情報を取得するために、ガウス雑音低減処理を受けているクロミナンス情報と第２の輝度情報とを組み合わせ、合成画像情報の色飽和度を取得し、撮影場面情報及び撮影メタデータに従って、色飽和度を調整する。

【0084】

この実施例では、ステップ310の具体的な実現処理については、本発明の第２の実施例のステップ204における撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報においてエンハンスメント処理を実行する関係する説明を参照し、この実施例では詳細をここで繰り返し説明しない。

【0085】

ステップ308及びステップ309は、ステップ301〜ステップ307の前に実行されてもよく、ステップ308及びステップ309とステップ301〜ステップ307とは、同時に実行されてもよく、この実施例においてここで限定されない点に留意すべきである。

【0086】

本発明の第３の実施例で提供される画像処理方法によれば、図２に示す方法の第２の実施例に基づいて、更に、撮影された処理されるべき画像を取得した後に、撮影端末は、画像の適応処理の基礎として、処理されるべき画像の撮影場面情報及び撮影メタデータを使用し、それぞれの処理されるべき画像の撮影特性情報に従って、それぞれの処理されるべき画像のクロミナンス情報及び輝度情報において、ゴマ塩雑音低減処理、ガウス雑音低減処理及びエンハンスメント処理のような統合された処理を別々に実行する。これにより、撮影端末により処理された後に取得された画像の品質が適応的に改善され、各画像の処理効率も改善されるように、雑音低減、コントラストの改善、エッジの増強及び飽和度の調整のような効果を達成する。

【0087】

本発明の前述の実施例で提供される画像処理方法を使用することにより、画像は、撮影場面情報及び撮影メタデータ（metadata）に従って特別且つ動的にリアルタイムで処理され得る点に留意すべきである。このように、本発明の前述の実施例は、より普遍的でありより広く適用可能であり、様々な場面における撮影された画像の品質を改善し、ユーザの撮影経験を向上するために大きい意味を有する。

【0088】

図４は、本発明による画像処理装置の第１の実施例の概略構成図である。図４に示すように、この実施例の装置は、撮影モジュール11と、抽出モジュール12と、処理モジュール13とを含んでもよい。撮影モジュール11は、撮影されたが画像処理されていない処理されるべき画像を取得するように構成される。抽出モジュール12は、処理されるべき画像の撮影特性情報を抽出するように構成される。処理モジュール13は、撮影特性情報に従って、処理されるべき画像において画像処理を実行するように構成される。

【0089】

本発明の画像処理装置の第１の実施例で提供される画像処理装置は、図１に示す方法の実施例の技術的対策を実行するように構成されてもよく、これらの実現原理及び技術的効果は同様である。詳細については、前述の実施例の関係する説明を参照し、詳細はここでは繰り返し説明しない。

【0090】

図５は、本発明による画像処理装置の第２の実施例の概略構成図である。図５に示すように、この実施例の装置では、図４に示す装置の構成に基づいて、処理モジュール13は、処理されるべき画像の撮影場面情報及び撮影メタデータに従って、処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行するように具体的に構成される。更に、処理モジュール13は、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理を実行するように、及び／又は撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減及び／又はエンハンスメント処理を実行するように具体的に構成される。

【0091】

更に、処理モジュール13は、第１のガウス雑音低減ユニット131及び／又は第１のエンハンスメントユニット132を含んでもよい。第１のガウス雑音低減ユニット131は、輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、輝度情報において局所絶対値差分の計算を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、第１のガウス雑音低減フィルタカーネルに従って、輝度情報においてガウス雑音低減処理を実行するように構成される。第１のエンハンスメントユニット132は、ベースレイヤの輝度情報と少なくとも１つのディテールレイヤの輝度情報とを取得するために、輝度情報においてエッジ保存に基づくフィルタリング分解を実行し、撮影場面情報及び撮影メタデータに従って、ベースレイヤの輝度情報においてコントラストエンハンスメント処理を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、少なくとも１つのゲインを決定し、ゲインを使用することによりディテールレイヤの輝度情報においてディテールエンハンスメント処理を実行し、エンハンスメント処理を受けている輝度情報を取得するために、コントラストエンハンスメント処理を受けているベースレイヤの輝度情報と、ディテールエンハンスメント処理を受けているディテールレイヤの輝度情報との加算を実行するように構成される。

【0092】

任意選択で、処理モジュール13は、第１の取得ユニット133を更に含む。第１の取得ユニット133は、ガウス雑音低減処理を受けている輝度情報のα₁倍を取得するために、ガウス雑音低減処理を受けている輝度情報を第１の係数α₁で乗算し、α₁は0から1の範囲の数値であり、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍を取得するために、ガウス雑音低減処理を受けていない輝度情報を(1-α₁)で乗算し、第１の輝度情報を取得するために、ガウス雑音低減処理を受けている輝度情報のα₁倍と、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍との加算を実行するように構成される。第１のエンハンスメントユニット132は、第１の輝度情報においてエンハンスメント処理を実行するように具体的に構成される。

【0093】

更に、処理モジュール13は、第２のガウス雑音低減ユニット134と、第２のエンハンスメントユニット135とを更に含む。第２のガウス雑音低減ユニット134は、クロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報に従って、局所絶対値差分の計算を実行し、周辺クロミナンス値のSAD、撮影場面情報及び撮影メタデータに従って、第２のガウス雑音低減フィルタカーネルを取得し、第２のガウス雑音低減フィルタカーネルに従って、クロミナンス情報においてガウス雑音低減処理を実行ように構成される。第２のエンハンスメントユニット135は、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせ、合成画像情報の色飽和度を取得し、撮影場面情報及び撮影メタデータに従って、色飽和度を調整するように構成される。

【0094】

任意選択で、処理モジュール13は、第２の取得ユニット136を更に含んでもよい。第２の取得ユニット136は、第２のエンハンスメントユニット135が合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせる前に、エンハンスメント処理を受けている輝度情報のα₂倍を取得するために、エンハンスメント処理を受けている輝度情報を第２の係数α₂で乗算し、α₂は0から1の範囲の数値であり、雑音低減処理を受けている輝度情報の(1-α₂)倍を取得するために、雑音低減処理を受けている輝度情報を(1-α₂)で乗算し、第２の輝度情報を取得するために、エンハンスメント処理を受けている輝度情報のα₂倍と、雑音低減処理を受けている輝度情報の(1-α₂)倍との加算を実行するように構成される。第２のエンハンスメントユニット135は、合成画像情報を取得するために、クロミナンス情報と第２の輝度情報とを組み合わせ、合成画像情報の色飽和度を取得し、撮影場面情報及び撮影メタデータに従って、色飽和度を調整するように具体的に構成される。

【0095】

本発明の画像処理装置の第２の実施例で提供される画像処理装置は、図２に示す方法の実施例の技術的対策を実行するように構成されてもよく、これらの実現原理及び技術的効果は同様である。詳細については、前述の実施例の関係する説明を参照し、詳細はここでは繰り返し説明しない。

【0096】

図６は、本発明による画像処理装置の第３の実施例の概略構成図である。図６に示すように、この実施例の装置では、図５に示す装置の構成に基づいて、更に、処理モジュール13は、雑音低減エンハンスメントユニット137を含んでもよい。雑音低減エンハンスメントユニット137は、輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、輝度情報において局所絶対値差分の計算を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、畳み込みフィルタカーネルを取得するために、高域フィルタカーネル及び第１のガウス雑音低減フィルタカーネルにおいて畳み込みを実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、畳み込みフィルタカーネルの重みを決定し、鮮鋭度エンハンスメントフィルタカーネルを取得するために、畳み込みフィルタカーネルを重みで乗算し、ガウス雑音低減鮮鋭フィルタカーネルを取得するために、第１のガウス雑音低減フィルタカーネルと鮮鋭度エンハンスメントフィルタカーネルとの加算を実行し、ガウス雑音低減鮮鋭フィルタカーネルに従って、輝度情報においてガウス雑音低減処理及び鮮鋭度エンハンスメント処理を実行するように構成される。

【0097】

好ましくは、処理モジュール13は、第１のゴマ塩雑音低減ユニット138を更に含んでもよい。第１のゴマ塩雑音低減ユニット138は、撮影場面情報及び撮影メタデータに従って、輝度情報においてゴマ塩雑音低減処理を実行するように構成される。

【0098】

更に、処理モジュール13は、第２のゴマ塩雑音低減ユニット139を更に含んでもよい。第２のゴマ塩雑音低減ユニット139は、第２のガウス雑音低減ユニット134がクロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報に従って、局所絶対値差分の計算を実行する前に、撮影場面情報及び撮影メタデータに従って、クロミナンス情報においてゴマ塩雑音低減処理を実行するように構成される。

【0099】

本発明の画像処理装置の第３の実施例で提供される画像処理装置は、図３Ａ及び図３Ｂに示す方法の実施例の技術的対策を実行するように構成されてもよく、これらの実現原理及び技術的効果は同様である。詳細については、前述の実施例の関係する説明を参照し、詳細はここでは繰り返し説明しない。

【0100】

図７は、本発明による画像処理装置の第４の実施例の概略構成図である。図７に示すように、この実施例の装置は、メモリ21と、メモリ21に接続されたプロセッサ22とを含む。メモリ21は、一式のプログラムコードを格納し、メモリ21は、不揮発性メモリ（Non-volatile Memory）を含んでもよい。プロセッサ22は、中央処理装置（Central Processing Unit、略してCPU）又は特定用途向け集積回路（Application Specific Integrated Circuit、略してASIC）でもよく、本発明の実施例を実現する１つ又は複数の集積回路として構成されてもよい。プロセッサ22は、メモリ21に格納されたプログラムコードを呼び出すように構成され、前述の動作、すなわち、撮影されたが画像処理されていない処理されるべき画像を取得し、処理されるべき画像の撮影特性情報を抽出し、撮影特性情報に従って、処理されるべき画像において画像処理を実行するように構成される。

【0101】

更に、撮影特性情報に従って、処理されるべき画像において画像処理を実行することは、処理されるべき画像の撮影場面情報及び撮影メタデータに従って、処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行することを含む。

【0102】

好ましくは、処理されるべき画像の撮影場面情報及び撮影メタデータに従って、処理されるべき画像において雑音低減及び／又はエンハンスメント処理を実行することは、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減及び／又はエンハンスメント処理を実行すること、及び／又は撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減及び／又はエンハンスメント処理を実行することを含む。

【0103】

更に、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減処理を実行することは、輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、輝度情報において局所絶対値差分の計算を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、第１のガウス雑音低減フィルタカーネルに従って、輝度情報においてガウス雑音低減処理を実行することを含む。

【0104】

処理されるべき画像の輝度情報においてエンハンスメント処理を実行することは、ベースレイヤの輝度情報と少なくとも１つのディテールレイヤの輝度情報とを取得するために、輝度情報においてエッジ保存に基づくフィルタリング分解を実行し、撮影場面情報及び撮影メタデータに従って、ベースレイヤの輝度情報においてコントラストエンハンスメント処理を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、少なくとも１つのゲインを決定し、ゲインを使用することによりディテールレイヤの輝度情報においてディテールエンハンスメント処理を実行し、エンハンスメント処理を受けている輝度情報を取得するために、コントラストエンハンスメント処理を受けているベースレイヤの輝度情報と、ディテールエンハンスメント処理を受けているディテールレイヤの輝度情報との加算を実行するステップとを含む。

【0105】

任意選択で、輝度情報においてエンハンスメント処理を実行する前に、この方法は、ガウス雑音低減処理を受けている輝度情報のα₁倍を取得するために、ガウス雑音低減処理を受けている輝度情報を第１の係数α₁で乗算し、α₁は0から1の範囲の数値であり、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍を取得するために、ガウス雑音低減処理を受けていない輝度情報を(1-α₁)で乗算し、第１の輝度情報を取得するために、ガウス雑音低減処理を受けている輝度情報のα₁倍と、ガウス雑音低減処理を受けていない輝度情報の(1-α₁)倍との加算を実行することを更に含む。

【0106】

処理されるべき画像の輝度情報においてエンハンスメント処理を実行することは、第１の輝度情報においてエンハンスメント処理を実行することを含む。

【0107】

更に、撮影場面情報及び撮影メタデータに従って、処理されるべき画像の輝度情報において雑音低減及びエンハンスメント処理を実行することは、輝度情報の周辺輝度値の差分絶対値和（SAD）を取得するために、輝度情報において局所絶対値差分の計算を実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、第１のガウス雑音低減フィルタカーネルを取得し、畳み込みフィルタカーネルを取得するために、高域フィルタカーネル及び第１のガウス雑音低減フィルタカーネルにおいて畳み込みを実行し、周辺輝度値のSAD、撮影場面情報及び撮影メタデータに従って、畳み込みフィルタカーネルの重みを決定し、鮮鋭度エンハンスメントフィルタカーネルを取得するために、畳み込みフィルタカーネルを重みで乗算し、ガウス雑音低減鮮鋭フィルタカーネルを取得するために、第１のガウス雑音低減フィルタカーネルと鮮鋭度エンハンスメントフィルタカーネルとの加算を実行し、ガウス雑音低減鮮鋭フィルタカーネルに従って、輝度情報においてガウス雑音低減処理及び鮮鋭度エンハンスメント処理を実行することを含む。

【0108】

好ましくは、輝度情報の周辺輝度値のSADを取得するために、輝度情報において局所絶対値差分の計算を実行する前に、この方法は、撮影場面情報及び撮影メタデータに従って、輝度情報においてゴマ塩雑音低減処理を実行することを更に含む。

【0109】

更に、撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報において雑音低減処理を実行することは、クロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報に従って、局所絶対値差分の計算を実行し、周辺クロミナンス値のSAD、撮影場面情報及び撮影メタデータに従って、第２のガウス雑音低減フィルタカーネルを取得し、第２のガウス雑音低減フィルタカーネルに従って、クロミナンス情報においてガウス雑音低減処理を実行することを含む。

【0110】

撮影場面情報及び撮影メタデータに従って、処理されるべき画像のクロミナンス情報においてエンハンスメント処理を実行することは、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせ、合成画像情報の色飽和度を取得し、撮影場面情報及び撮影メタデータに従って、色飽和度を調整することを含む。

【0111】

任意選択で、合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせる前に、この方法は、エンハンスメント処理を受けている輝度情報のα₂倍を取得するために、エンハンスメント処理を受けている輝度情報を第２の係数α₂で乗算し、α₂は0から1の範囲の数値であり、雑音低減処理を受けている輝度情報の(1-α₂)倍を取得するために、雑音低減処理を受けている輝度情報を(1-α₂)で乗算し、第２の輝度情報を取得するために、エンハンスメント処理を受けている輝度情報のα₂倍と、雑音低減処理を受けている輝度情報の(1-α₂)倍との加算を実行することを更に含む。

【0112】

合成画像情報を取得するために、クロミナンス情報と輝度情報とを組み合わせることは、合成画像情報を取得するために、クロミナンス情報と第２の輝度情報とを組み合わせることを含む。

【0113】

好ましくは、クロミナンス情報の周辺クロミナンス値のSADを取得するために、クロミナンス情報に従って、局所絶対値差分の計算を実行する前に、この方法は、撮影場面情報及び撮影メタデータに従って、クロミナンス情報においてゴマ塩雑音低減処理を実行することを更に含む。

【0114】

メモリ21に格納されたプログラムコードを呼び出すことによりプロセッサ22により具体的に実現される技術的対策については、本発明の図１、図２、図３Ａ及び図３Ｂに示す画像処理方法の実施例を参照し、これらの実現原理及び技術的効果は同様である点に留意すべきである。詳細については、前述の実施例の関係する説明を参照し、詳細はここでは繰り返し説明しない。

【0115】

図８は、本発明による撮影端末の第１の実施例の概略構成図である。図８に示すように、この実施例の撮影端末30は、画像処理装置31を含んでもよい。画像処理装置31は、図４〜図６に示す画像処理装置の実施例のいずれか１つの構成を使用してもよく、対応して図１〜図３Ｂに示す実施例のいずれか１つの技術的対策を実行してもよい。これらの実現原理及び技術的効果は同様である。詳細については、前述の実施例の関係する説明を参照し、詳細はここでは繰り返し説明しない。

【0116】

撮影端末30は、移動電話又はタブレットコンピュータでもよく、ノートブックコンピュータ又は多機能プレイヤのような撮影レンズを有するデバイスでもよい。

【0117】

当業者は、方法の実施例のステップの全部又は一部が、関係するハードウェアに命令するプログラムにより実現されてもよいことを認識し得る。プログラムは、コンピュータ読み取り可能記憶媒体に格納されてもよい。プログラムが実行する場合、方法の実施例のステップが実行される。前述の記憶媒体は、ROM、RAM、磁気ディスク、光ディスク等のようなプログラムコードを格納可能ないずれかの媒体を含む。

【0118】

最後に、前述の実施例は、単に本発明の技術的対策を説明することを意図するものであり、本発明を限定することを意図するものではない。前述の実施例を参照して本発明について詳細に説明したが、当業者は、本発明の実施例の技術的対策の範囲を逸脱することなく、依然として前述の実施例の技術的対策に変更を行うか、その一部又は全部の技術的特徴に対して等価置換を行い得ることを認識すべきである。

【図1】

【図2】

【図3A】

【図3B】

【図4】

【図5】

【図6】

【図7】

【図8】