特表 2024-504476 画像処理方法、装置、電子機器、及び媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-01-31

(54)【発明の名称】画像処理方法、装置、電子機器、及び媒体

(51)【国際特許分類】

   G06T 5/90 20240101AFI20240124BHJP

   H04N 23/741 20230101ALI20240124BHJP

   H04N 23/60 20230101ALI20240124BHJP

【ＦＩ】

G06T5/00 730

H04N23/741

H04N23/60 500

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2023546001

(86)(22)【出願日】2021-11-25

(85)【翻訳文提出日】2023-09-27

(86)【国際出願番号】 CN2021133224

(87)【国際公開番号】W WO2022160906

(87)【国際公開日】2022-08-04

(31)【優先権主張番号】202110126858.2

(32)【優先日】2021-01-29

(33)【優先権主張国・地域又は機関】CN

(81)【指定国・地域】

(71)【出願人】

【識別番号】520476341

【氏名又は名称】北京字節跳動網絡技術有限公司

【氏名又は名称原語表記】Ｂｅｉｊｉｎｇ Ｂｙｔｅｄａｎｃｅ Ｎｅｔｗｏｒｋ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ．

【住所又は居所原語表記】Ｒｏｏｍ Ｂ－００３５， ２／Ｆ， Ｎｏ．３ Ｂｕｉｌｄｉｎｇ， Ｎｏ．３０， Ｓｈｉｘｉｎｇ Ｒｏａｄ， Ｓｈｉｊｉｎｇｓｈａｎ Ｄｉｓｔｒｉｃｔ Ｂｅｉｊｉｎｇ １０００４１ Ｃｈｉｎａ

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】▲許▼ ▲譯▼天

【テーマコード（参考）】

5B057

5C122

【Ｆターム（参考）】

5B057CC01

5B057CE08

5B057CE11

5B057DC22

5C122EA21

5C122FH18

5C122HB01

(57)【要約】

【課題】
本開示は、画像処理方法、装置、電子機器および媒体に関する。
【解決手段】
該方法は、同一の被写体が異なる露出度で撮像された画像である少なくとも２枚の合成待ち画像を取得するステップと、各前記合成待ち画像の画像輝度値を確定するステップと、前記合成待ち画像毎に対して、該合成待ち画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップと、前記少なくとも２枚の合成待ち画像における各画素点の輝度値と、各画素点の輝度重みとに基づいて画像合成処理を行い、目標画像を得るステップと、を含む。該方法は、合成された画像の品質を向上させ、ユーザエクスペリエンスを向上させる。
【選択図】 図１

【特許請求の範囲】

【請求項1】

画像処理方法であって、
同一の被写体が異なる露出度で撮像された画像である、少なくとも２枚の合成待ち画像を取得するステップと、
各前記合成待ち画像の画像輝度値を確定するステップと、
前記合成待ち画像毎に対して、該合成待ち画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップと、
前記少なくとも２枚の合成待ち画像における各画素点の輝度値、および、各画素点の輝度重みに基づいて、画像合成処理を行い、目標画像を得るステップと、
を含む、
ことを特徴とする方法。

【請求項2】

該合成待ち画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップは、
画像輝度値が該合成待ち画像の画像輝度値に隣接する合成待ち画像である、該合成待ち画像の第１関連画像を確定するステップと、
該合成待ち画像の画像輝度値、前記第１関連画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップと、
を含む、
ことを特徴とする、請求項１に記載の方法。

【請求項3】

該合成待ち画像の画像輝度値、前記第１関連画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップは、
該合成待ち画像の画像輝度値、および、前記第１関連画像の画像輝度値に基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定するステップと、
該合成待ち画像のいずれか１つの画素点について、
該画素点の輝度値が前記輝度値区間に位置していれば、該合成待ち画像の画像輝度値、前記第１関連画像の画像輝度値、および、該画素点の輝度値に基づいて、該画素点の輝度重みを確定し、
該画素点の輝度値が前記輝度値区間外に位置していれば、該画素点の輝度重みを第１設定値として確定する、
ステップと、を含む、
ことを特徴とする、請求項２に記載の方法。

【請求項4】

該合成待ち画像の画像輝度値、および、前記第１関連画像の画像輝度値に基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定するステップは、
該合成待ち画像の画像輝度値、および、前記第１関連画像の画像輝度値からなる区間を、該合成待ち画像の各目標画素点の輝度値区間として確定するステップ、を含む、
ことを特徴とする請求項３に記載の方法。

【請求項5】

該合成待ち画像の画像輝度値、前記第１関連画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップは、
該合成待ち画像の画像輝度値、前記第１関連画像の画像輝度値、および、該合成待ち画像の第２関連画像の画像輝度値に基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定するステップと、
該合成待ち画像のいずれか１つの画素点について、
該画素点の輝度値が前記輝度値区間に位置していれば、該合成待ち画像の画像輝度値、前記第１関連画像の画像輝度値、前記第２関連画像の画像輝度値、および、該画素点の輝度値に基づいて、該画素点の輝度重みを確定し、
該画素点の輝度値が前記輝度値区間外に位置していれば、該画素点の輝度重みを第２設定値として確定する、
ステップと、を含み、
その中で前記第２関連画像は、画像輝度値が前記第１関連画像の画像輝度値に隣接する、該合成待ち画像以外の合成待ち画像である、
ことを特徴とする、請求項２に記載の方法。

【請求項6】

該合成待ち画像の画像輝度値、前記第１関連画像の画像輝度値、および、該合成待ち画像の第２関連画像の画像輝度値に基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定するステップは、
該合成待ち画像の画像輝度値、および、前記第１関連画像の画像輝度値に基づいて、該合成待ち画像の各目標画素点の初期輝度区間を確定するステップと、
前記第１関連画像の画像輝度値、および、該合成待ち画像の第２関連画像の画像輝度値に基づいて、前記初期輝度区間の拡張輝度区間を確定するステップと、
前記初期輝度区間と前記拡張輝度区間とをスティッチングし、該合成待ち画像の各目標画素点の輝度値区間を得るステップと、
を含む、
ことを特徴とする、請求項５に記載の方法。

【請求項7】

前記第１関連画像の画像輝度値、および、該合成待ち画像の第２関連画像の画像輝度値に基づいて、前記初期輝度区間の拡張輝度区間を確定するステップは、
前記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値との画像輝度値の差分値を確定するステップと、
前記画像輝度値の差分値と第３設定値とに基づいて、前記初期輝度区間の拡張輝度区間を確定するステップと、
を含む、
ことを特徴とする、請求項６に記載の方法。

【請求項8】

該合成待ち画像の各目標画素点の輝度値区間について、前記輝度値区間の輝度最大値が各合成待ち画像の画像輝度値のうちの最大値以下であり、前記輝度値区間の輝度最小値が各合成待ち画像の画像輝度値のうちの最小値以上である、
ことを特徴とする、請求項３乃至７のいずれか一項に記載の方法。

【請求項9】

画像処理装置であって、
同一の被写体が異なる露出度で撮像された画像である、少なくとも２枚の合成待ち画像を取得するための取得モジュールと、
各前記合成待ち画像の画像輝度値を確定するための第１確定モジュールと、
前記合成待ち画像毎に対して、該合成待ち画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するための第２確定モジュールと、
前記少なくとも２枚の合成待ち画像における各画素点の輝度値、および、各画素点の輝度重みに基づいて、画像合成処理を行い、目標画像を得るための合成モジュールと、
を含む、
ことを特徴とする、画像処理装置。

【請求項10】

電子機器であって、
１つ以上のプロセッサと、
メモリと、
前記メモリに記憶された１つ以上のアプリケーションであり、
前記１つ以上のプロセッサによって実行されると、
請求項１乃至８のいずれか一項に記載の方法を実行する、
ように構成されている、１つ以上のアプリケーションと、
を含む、
ことを特徴とする、電子機器。

【請求項11】

コンピュータプログラムが記憶されているコンピュータ読み取り可能媒体であって、
前記コンピュータプログラムがプロセッサによって実行されると、請求項１乃至８のいずれか一項に記載の方法をコンピュータに実施させる、
ことを特徴とする、コンピュータ読み取り可能媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、画像処理の技術分野に関し、特には、画像処理方法、装置、電子機器、及び媒体に関する。

【0002】

関連出願の相互参照
本出願は、２０２１年０１月２９日に中国国家知識産権局に提出された、出願番号が２０２１１０１２６８５８.２であり、発明の名称が「画像処理方法、装置、電子機器、及び媒体」であるの中国特許出願について優先権を主張するものであり、この出願の全内容は、引用により本出願に組み込まれている。

【背景技術】

【0003】

人々の生活水準が不断に高まるにつれて、様々な電子機器が、生活のあらゆる面に漸次に広く応用され、写真撮影用のカメラを備えた電子機器がますます増えている。ユーザが撮像している間、環境要因により、画像が局所的に明るすぎたり、画像が局所的に暗すぎたりすることが避けられない場合がある。

【0004】

従来技術では、環境要因による局所的な明る過ぎ、または、局所的な暗過ぎの画像について、異なる露光値を用いて複数枚の輝度の異なる画像を撮像し、その後、複数枚の画像を１枚の画像に合成することができる。このように合成すると、複数枚の画像の画像輝度が明るいと合成した画像が明るくなり、または、暗いと合成した画像が暗くなり、すなわち、合成された画像の画像輝度は複数枚の合成待ち画像の画像輝度分布に関係する。複数枚の合成待ち画像の画像輝度分布が不均一であると、すなわち、画像輝度の明るい合成待ち画像と画像輝度の暗い合成待ち画像との数の差が大きいと、合成された画像の画像輝度が明るくなったり、暗くなったりして、合成された画像の品質に影響を与える。

【発明の概要】

【0005】

本開示は、複数枚の合成待ち画像の画像輝度が不均一に分布する場合、複数枚の合成待ち画像を１枚の画像に合成する際の画質の低下の課題を解決することができる、画像処理方法、装置、電子機器、及び媒体を提供する。

【0006】

第１態様によれば、
同一の被写体が異なる露出度で撮像された画像である、少なくとも２枚の合成待ち画像を取得するステップと、
各合成待ち画像の画像輝度値を確定するステップと、
合成待ち画像毎に対して、該合成待ち画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップと、
少なくとも２枚の合成待ち画像における各画素点の輝度値、および、各画素点の輝度重みに基づいて、画像合成処理を行い、目標画像を得るステップと、
を含む、画像処理方法を提供する。

【0007】

第２態様によれば、
同一の被写体が異なる露出度で撮像された画像である、少なくとも２枚の合成待ち画像を取得するための取得モジュールと、
各合成待ち画像の画像輝度値を確定するための第１確定モジュールと、
合成待ち画像毎に対して、該合成待ち画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するための第２確定モジュールと、
少なくとも２枚の合成待ち画像における各画素点の輝度値、および、各画素点の輝度重みに基づいて、画像合成処理を行い、目標画像を得るための合成モジュールと、
を含む、画像処理装置を提供する。

【0008】

第３態様によれば、
１つ以上のプロセッサと、
メモリと、
メモリに記憶された１つ以上のアプリケーションであり、
前記１つ以上のプロセッサによって実行されると、第１態様に記載の画像処理方法に対応する動作を実行する、
ように構成された、１つ以上のアプリケーションと、
を含む、電子機器を提供する。

【0009】

第４態様によれば、
プロセッサによって実行されると、第１態様に記載の画像処理方法を実施させるコンピュータプログラムが記憶されているコンピュータ読み取り可能媒体を提供する。

【0010】

本開示の提供する技術案による有益な効果は、次の通りである。

【0011】

本開示は、画像処理方法、装置、電子機器、及び媒体を提供する。本開示は、従来技術に比べて、合成待ち画像毎に対して、該合成待ち画像の画像輝度値、および、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定する。その後、少なくとも２枚の合成待ち画像における各画素点の輝度値、および、各画素点の輝度重みに基づいて、画像合成処理を行い、目標画像を得ることにより、１枚毎の合成待ち画像における各画素点の輝度重みは、該合成待ち画像の画像輝度値及び該合成待ち画像における各画素点の輝度値に相関する。すなわち、枚毎の合成待ち画像における各画素点の輝度重みは、該合成待ち画像自体の画像輝度値を考慮することで、少なくとも２枚の合成待ち画像の画像輝度の不均一分布の影響を低減し、合成された画像の品質を向上させ、ユーザエクスペリエンスを向上させることができる。

【図面の簡単な説明】

【0012】

添付図面と併せて、以下の具体的な実施形態を参照すると、本開示の各実施例の上記および他の特徴、利点、および態様がより明確になる。添付図面にわたって、同一又は類似の符号は、同一又は類似の要素を示す。図面は、模式的なものであり、必ずしも原本および要素が比例して描画されることはないものと理解すべきである。

【図1】本開示の一実施例に従った、画像処理方法のフローを示す模式図である。

【図2】本開示の一実施例に従った、輝度と輝度重みとの間のマッピング関係を示す模式図である。

【図3】本開示の一実施例に従った、他の輝度と輝度重みとの間のマッピング関係を示す模式図である。

【図4】本開示の一実施例に従った、さらに他の輝度と輝度重みとの間のマッピング関係を示す模式図である。

【図5】本開示の一実施例に従った、画像処理装置の構成を示す模式図である。

【図6】本開示の一実施例に従った、電子機器の構成を示す模式図である。

【発明を実施するための形態】

【0013】

以下では、添付図面を参照して、本開示の実施例をより詳細に説明する。添付図面には、本開示のいくつかの実施例が示されているが、本開示は、様々な形態で実現可能であり、ここで述べる実施例に限定されるものとして解釈されるべきものではない。逆に、これらの実施形態は、本開示をより徹底かつ完全に理解するために提供されていることが理解されるべきである。なお、本開示の添付図面および実施例は、例示的な作用のために使用されるものであり、本開示の保護範囲を制限するために使用されるものではないことを理解されたい。

【0014】

本開示の方法の実施形態に記載された各ステップは、異なる順序で実行することができ、かつ／あるいは、並列に実行することができることが理解されるべきである。また、方法の実施形態は、追加のステップ及び／又は実行表示を省略するステップを含むことができる。本開示の範囲は、この点において限定されない。

【0015】

本明細書で使用される用語「含む」およびその変形は、「含むが、これらに限定されない」という開放性のものとする。「一つの実施例」という用語は、「少なくとも一つの実施例」を表示し、「他の一つの実施例」という用語は、「少なくとも一つの他の実施例」を表示し、「いくつかの実施例」という用語は、「少なくともいくつかの実施例」を表示する。その他の用語に関する定義は、以下の説明において示される。

【0016】

なお、本開示において言及される「第１」、「第２」、等の概念は、単に、装置、モジュール、または、ユニットを区別するためのものであり、これらの装置、モジュール、または、ユニットが、必ずしも異なる装置、モジュール、またはユニットであることを限定するものではなく、もしくは、これらの装置、モジュール、またはユニットが実行する機能の順序または相互依存関係を限定するものでもない。

【0017】

なお、本開示において言及される「１つ」、「複数」の修飾は、限定的ではなく、概略的なものであり、当業者であれば、文脈で特に明示されない限り、「１つ以上」と理解されるべきであることを理解すべきである。

【0018】

本開示の実施形態における複数の装置間で交互するメッセージまたは情報の名称は、説明的な目的にのみ使用されるものであり、これらのメッセージまたは情報の範囲を制限するためのものではない。

【0019】

以下に、本開示の技術案および本開示の技術案が上記技術的課題をどのように解決するかについて、具体的な実施例を用いて詳細に説明する。以下のいくつかの具体的な実施例は、互いに結合することができ、同一または類似の概念またはプロセスについては、何らかの実施例において、これ以上言及されないことがある。以下に、添付図面と併せて、本開示の実施例について説明する。

【0020】

本開示の実施例は、携帯電話、ノートパソコン、デスクトップコンピュータ、タブレットＰＣ、等のいずれか１つの端末機器で実行されてよく、サーバまたはサーバクラスタで実行されてもよい画像処理方法を提供する。図１に示すように、この方法は、ステップＳ１０１～ステップＳ１０４を含む。

【0021】

ステップＳ１０１においては、同一の被写体が異なる露出度で撮像された少なくとも２枚の合成待ち画像を取得する。

【0022】

本開示の一実施例において、少なくとも２枚の合成待ち画像は、カメラが異なる露出パラメータを用いて同一シーンを撮像さしたものであってよいので、各合成待ち画像の画像輝度が異なる。その中で、カメラは、端末機器におけるハードウェアであってもよいし、端末に接続された独立した電子機器であってもよい。端末機器は、カメラによって撮像された少なくとも２枚の合成待ち画像を取得してもよく、サーバは、端末機器におけるクライアントを介して、カメラによって撮像された少なくとも２枚の合成待ち画像を取得してもよい。

【0023】

ステップＳ１０２においては、各合成待ち画像の画像輝度値を確定する。

【0024】

画像輝度値は、画像の明るさ度合いを反映することができる。本開示の実施例において、いずれか１つの合成待ち画像の画像輝度値を確定する方法は、限定されない。

【0025】

例えば、該合成待ち画像の画像輝度値は、いずれか１つの合成待ち画像において各画素点の輝度値によって算出されてもよいし、まず、所定の輝度値区間を満たす画素点の輝度値の画素点をいずれか１つの合成待ち画像からスクリーニングした後で、スクリーニングした画素点の輝度値を用いて算出されてもよい。

【0026】

ステップＳ１０３においては、合成待ち画像毎に対して、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定する。

【0027】

各合成待ち画像は、それぞれ１つの画像輝度値に対応して、該合成待ち画像の明るさ度合いを示す。該合成待ち画像における各画素点は、それぞれ１つの輝度値に対応して、該画素点の明るさ度合いを示す。

【0028】

該合成待ち画像のいずれか１つの画素点について、該画素点の輝度重みは、該画素点の輝度値、および、該合成待ち画像の画像輝度値に関連する。

【0029】

一つの可能な実施形態では、画素点の輝度値が該合成待ち画像の画像輝度値に近づくほど、そして、画素点の明るさ度合いが画像全体の明るさ度合いに近づくほど、画素点の輝度重みが大きくなることを示す。その中で、画素点に対応する近づく度合い、すなわち、画素点の輝度値が該合成待ち画像の画像輝度値に近づく度合いを、画素点の輝度値と該合成待ち画像の画像輝度値との差分絶対値によって示すことができる。

【0030】

例えば、該合成待ち画像の画像輝度値を５０とし、該合成待ち画像における画素点Ａの輝度値を４８とし、画素点Ｂの輝度値を５５とすると、４８が５５よりも５０に近いため、画素点Ａの輝度重みは画素点Ｂの輝度重みよりも大きくなる。

【0031】

一つの可能な実施形態では、ステップＳ１０３において、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定する。具体的には、画像輝度値が該合成待ち画像の画像輝度値に隣接する合成待ち画像である第１関連画像を確定し、該合成待ち画像の画像輝度値と、第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定することを含む。

【0032】

本開示の一実施例において、各合成待ち画像を画像輝度値の大きさ順に従ってソートすることができ、いずれか１つの合成待ち画像について、該合成待ち画像の第１関連画像は、画像輝度値が該合成待ち画像の画像輝度値に隣接する合成待ち画像である。その中で、該合成待ち画像の第１関連画像は１つまたは２つであり、該合成待ち画像が画像輝度値の最も小さい、または、画像輝度値の最も大きい合成待ち画像である場合、該合成待ち画像の第１関連画像は１つであり、該合成待ち画像が画像輝度値の最も小さいものではなく、かつ、画像輝度値の最も大きいものでもない合成待ち画像である場合、該合成待ち画像の第１関連画像は２つである。

【0033】

例えば、合成待ち画像１から合成待ち画像５までの画像輝度値は、それぞれＰ１～Ｐ５である、その中で、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５である。そして、合成待ち画像１と合成待ち画像５の第１関連画像は、それぞれ１つであり、例えば、合成待ち画像５の画像輝度値Ｐ５が合成待ち画像４の画像輝度値Ｐ４に隣接しているので、合成待ち画像５の第１関連画像は、合成待ち画像４となる。合成待ち画像２、合成待ち画像３、及び合成待ち画像４の第１関連画像は、それぞれ２つであり、例えば、合成待ち画像３の画像輝度値Ｐ３が合成待ち画像２の画像輝度値Ｐ２に隣接し、且つ、合成待ち画像３の画像輝度値Ｐ３が合成待ち画像４の画像輝度値Ｐ４に隣接しているので、合成待ち画像３の第１関連画像は、合成待ち画像２及び合成待ち画像４となる。

【0034】

オプションとして、第１関連画像は、画像輝度値が該合成待ち画像の画像輝度値に隣接する１枚の合成待ち画像であってもよいし、または、画像輝度値が該合成待ち画像の画像輝度値に隣接する全ての合成待ち画像であってもよい。

【0035】

本開示の実施例では、合成待ち画像毎に対して、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像に対応する輝度と輝度重みとの間のマッピング関係を確定し、該マッピング関係を基礎として、該合成待ち画像における各画素点の輝度値に基づき、該合成待ち画像における各画素点の輝度重みを確定することができる。

【0036】

図２に示すように、図２は、本開示の実施例に係る輝度と輝度重みとの間のマッピング関係を示す模式図である。その中で、Ｐ１～Ｐ５は、それぞれ合成待ち画像１から合成待ち画像５までの画像輝度値を示し、且つ、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５である。合成待ち画像３については、合成待ち画像２の画像輝度値Ｐ２と、合成待ち画像３の画像輝度値Ｐ３と、合成待ち画像４の画像輝度値Ｐ４とに基づき、図２のように合成待ち画像３に対応する輝度と輝度重みとの間のマッピング関係を確定し、合成待ち画像３における各画素点について、該マッピング関係と、該画素点の輝度とに基づき、該画素点の輝度重みを確定することができる。

【0037】

なお、図２において合成待ち画像３に対応する輝度と輝度重みとの間のマッピング関係は、概略的なものであり、例えば、該マッピング関係は、図２に示す三角形であってもよいし、台形であってもよいし、曲線であってもよいなど、ここでは限定されない。オプションとして、該マッピング関係は、図２に示す関係曲線のように線形関係であってもよい。

【0038】

ステップＳ１０４において、少なくとも２枚の合成待ち画像における各画素点の輝度値と、各画素点の輝度重みとに基づいて画像合成処理を行い、目標画像を得る。

【0039】

本開示の実施例では、合成待ち画像毎に対して、該合成待ち画像のいずれか１つの画素点にその輝度値および輝度重みが存在する場合、まず、該合成待ち画像における各画素点の輝度値および輝度重みを用い、該合成待ち画像における各画素点の輝度調整を行い、輝度調整後の合成待ち画像を得ることができる。その後、調整後の合成待ち画像の少なくとも２枚を１枚の目標画像に合成する。

【0040】

本開示の実施例は、画像処理方法を提供する。本開示の実施例は、従来技術に比べて、合成待ち画像毎に対して、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定する。その後、少なくとも２枚の合成待ち画像における各画素点の輝度値と、各画素点の輝度重みとに基づき、画像合成処理を行い、目標画像を得ることにより、１枚毎の合成待ち画像における各画素点の輝度重みは、該合成待ち画像の画像輝度値及び該合成待ち画像における各画素点の輝度値に相関する。すなわち、枚毎の合成待ち画像における各画素点の輝度重みは、該合成待ち画像自体の画像輝度値を考慮することで、少なくとも２枚の合成待ち画像の画像輝度の不均一分布の影響を低減し、合成された画像の品質を向上させ、ユーザエクスペリエンスを向上させることができる。

【0041】

本開示の実施例の他の可能な実施形態では、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定するものであり、具体的には、ステップＳ１０３１およびステップＳ１０３２を含むことができる。

【0042】

ステップＳ１０３１において、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定する。

【0043】

その中で、輝度値区間は、開区間または閉区間または半開半閉区間であってもよく、合成待ち画像の第１関連画像は、１つまたは２つである。

【0044】

本開示の実施例では、該合成待ち画像の各目標画素点の輝度値区間について、輝度値区間の輝度最大値が、各合成待ち画像の画像輝度値における最大値以下であり、輝度値区間の輝度最小値が、各合成待ち画像の画像輝度値における最小値以上である。

【0045】

例えば、Ｐ１からＰ５までが合成待ち画像１から合成待ち画像５までの画像輝度値をそれぞれ示し、且つ、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５である場合、いずれか１つの合成待ち画像の輝度値区間の輝度最大値は、Ｐ５以下であり、いずれか１つの合成待ち画像の輝度値区間の輝度最小値は、Ｐ１以上である。

【0046】

合成待ち画像の第１関連画像が１つである場合、輝度値区間は、方式Ａ１により確定される。

【0047】

方式Ａ１において、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定するが、確定方式は限定されない。

【0048】

例えば、オプションの一実施形態として、ステップＳ１０３１において、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定する。具体的には、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とからなる区間を、該合成待ち画像の各目標画素点の輝度値区間として確定することを含む。

【0049】

具体的な確定方式は、まず、合成待ち画像の画像輝度値と該合成待ち画像の第１関連画像の画像輝度値との大小を確定し、小さい画像輝度値を輝度値区間の最小輝度値とし、大きい画像輝度値を輝度値区間の最大輝度値とする。すなわち、輝度値区間を［小さい画像輝度値、大きい画像輝度値］としてもよい。

【0050】

例えば、合成待ち画像１の画像輝度値Ｐ１が合成待ち画像２の画像輝度値Ｐ２よりも小さい場合には、Ｐ１を輝度値区間の最小輝度値とし、Ｐ２を輝度値区間の最大輝度値とする。すなわち、輝度値区間を［Ｐ１、Ｐ２］とする。

【0051】

また、他のオプションの一実施形態として、例えば、確定方式は、まず、合成待ち画像の画像輝度値の大小と、該合成待ち画像の第１関連画像の画像輝度値の大小と、両者の差分値とを確定する。小さい画像輝度値－所定値*差分値を輝度値区間の最小輝度値とし、大きい画像輝度値＋所定値*差分値を輝度値区間の最大輝度値とし、所定値は限定されず、例えば、所定値は０.１としてもよい。

【0052】

例えば、合成待ち画像１の画像輝度値Ｐ１が合成待ち画像２の画像輝度値Ｐ２よりも小さく、且つ、両者の差分値がＰ２－Ｐ１であれば、Ｐ１－０.１（Ｐ２－Ｐ１）に従って最小輝度値を算出し、Ｐ２＋０.１（Ｐ２－Ｐ１）に従って最大輝度値を算出することができる。即ち、輝度値区間は［Ｐ１－０.１（Ｐ２－Ｐ１）、Ｐ２＋０.１（Ｐ２－Ｐ１）］である。

【0053】

合成待ち画像の第１関連画像が２つである場合、輝度値区間は、方式Ａ２により確定される。

【0054】

方式Ａ２において、第１関連画像毎に対して、まず、方式Ａ１に従って、該第１関連画像に対応する輝度値区間を確定し、次いで、２つの第１関連画像に対応する輝度値区間に基づき、該合成待ち画像の各目標画素点の輝度値区間を得ることができる。

【0055】

例えば、合成待ち画像２の第１関連画像が合成待ち画像１と合成待ち画像３であり、且つ、合成待ち画像１の画像輝度値Ｐ１が合成待ち画像２の画像輝度値Ｐ２よりも小さく、且つ、Ｐ２が合成待ち画像３の画像輝度値Ｐ３よりも小さい場合には、方式Ａ１に従って、合成待ち画像１に対応する輝度値区間[Ｐ１、Ｐ２]、合成待ち画像３に対応する輝度値区間[Ｐ２、Ｐ３]を確定し、次いで、[Ｐ１、Ｐ２]、[Ｐ２、Ｐ３]に基づき、合成待ち画像２の各目標画素点の輝度値区間[Ｐ１、Ｐ３]を得る。

【0056】

また、例えば、合成待ち画像２の第１関連画像が、合成待ち画像１と合成待ち画像３であり、合成待ち画像１の画像輝度値Ｐ１が、合成待ち画像２の画像輝度値Ｐ２よりも小さく、且つ、Ｐ２が、合成待ち画像３の画像輝度値Ｐ３よりも小さい場合には、方式Ａ１に従って、合成待ち画像１に対応する輝度値区間[Ｐ１－０.１（Ｐ２－Ｐ１）、Ｐ２＋０.１（Ｐ２－Ｐ１）]、合成待ち画像３に対応する輝度値区間[Ｐ２－０.１（Ｐ３－Ｐ２）、Ｐ３＋０.１（Ｐ３－Ｐ２）］を確定し、次いで、［Ｐ１－０.１（Ｐ２－Ｐ１）、Ｐ２＋０.１（Ｐ２－Ｐ１）］及び［Ｐ２－０.１（Ｐ３－Ｐ２）、Ｐ３＋０.１（Ｐ３－Ｐ２）］に基づき、合成待ち画像２の各目標画素点の輝度値区間［Ｐ１－０.１（Ｐ２－Ｐ１）、Ｐ３＋０.１（Ｐ３－Ｐ２）］を得る。

【0057】

ステップＳ１０３２において、該合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が輝度値区間に位置していれば、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該画素点の輝度値とに基づき、該画素点の輝度重みを確定する。該画素点の輝度値が輝度値区間外に位置していれば、該画素点の輝度重みを第１設定値として確定する。

【0058】

その中で、第１設定値の大きさは限定されないが、例えば、第１設定値は０であってもよい。

【0059】

本開示の実施例においては、合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が輝度値区間にある場合には、まず、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像に対応する輝度と輝度重みとの間のマッピング関係を確定し、次いで、該画素点の輝度値と該マッピング関係とに基づき、該画素点の輝度重みを確定し、該画素点の輝度値が輝度値区間外に位置していれば、該画素点の輝度重みを第１設定値として確定し、例えば、該画素点の輝度重みを０として確定することができる。

【0060】

本開示の実施例の他の可能な実施形態は、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定するものであり、具体的には、ステップＳ１０３３～ステップＳ１０３４を含むことができる。

【0061】

ステップＳ１０３３において、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定する。

【0062】

その中で、第２関連画像は、画像輝度値が第１関連画像の画像輝度値に隣接する該合成待ち画像以外の合成待ち画像である。

【0063】

本開示の実施例において、少なくとも２枚の合成待ち画像を画像輝度値の大きさに従ってソートすると、それぞれ可能性１から可能性４までと記す、以下の４つの可能性がある。

【0064】

可能性１において、合成待ち画像が２枚であれば、いずれか１つの合成待ち画像について、該合成待ち画像の第１関連画像は１つであり、該合成待ち画像の第２関連画像は存在しない。

【0065】

可能性２において、合成待ち画像が３枚であれば、１枚目または最後の１枚目の合成待ち画像については、該合成待ち画像の第１関連画像が１枚であり、且つ、該合成待ち画像の第２関連画像も１枚であり、２枚目の合成待ち画像については、該合成待ち画像の第１関連画像が２枚であり、且つ、該合成待ち画像の第２関連画像は存在しない。

【0066】

可能性３において、合成待ち画像が４枚であれば、１枚目または最後の１枚目の合成待ち画像については、該合成待ち画像の第１関連画像が１枚であり、且つ、該合成待ち画像の第２関連画像も１枚であり、２枚目または３枚目の合成待ち画像については、該合成待ち画像の第１関連画像が２枚であり、且つ、該合成待ち画像の第２関連画像が１枚である。

【0067】

可能性４において、合成待ち画像が少なくとも５枚であれば、１枚目または最後の１枚目の合成待ち画像については、該合成待ち画像の第１関連画像が１枚であり、且つ、該合成待ち画像の第２関連画像も１枚であり、２枚目または最後の２枚目の合成待ち画像については、該合成待ち画像の第１関連画像が２枚であり、且つ、該合成待ち画像の第２関連画像が１枚であり、１枚目、２枚目、最後の２枚目および最後の１枚目以外のいずれか１つの合成待ち画像については、該合成待ち画像の第１関連画像が２枚であり、且つ、該合成待ち画像の第２関連画像も２枚である。

【0068】

例えば、合成待ち画像１から合成待ち画像５までの画像輝度値は、それぞれＰ１からＰ５までである。その中で、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５である。合成待ち画像１の第１関連画像が合成待ち画像２であり、合成待ち画像１の第２関連画像が合成待ち画像３であり、合成待ち画像５の第１関連画像が合成待ち画像４であり、合成待ち画像５の第２関連画像が合成待ち画像３であり、合成待ち画像２の第１関連画像が合成待ち画像１と合成待ち画像３であり、合成待ち画像２の第２関連画像が合成待ち画像４であり、合成待ち画像４の第１関連画像が合成待ち画像３と合成待ち画像５であり、合成待ち画像４の第２関連画像が合成待ち画像２であり、合成待ち画像３の第１関連画像１が合成待ち画像２と合成待ち画像４であり、合成待ち画像３の第２関連画像１が合成待ち画像１と合成待ち画像５である。

【0069】

その中で、オプションの一実施形態として、ステップＳ１０３３において、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定し、具体的には、ステップＳ１０３３１～ステップＳ１０３３３を含むことができる。

【0070】

ステップＳ１０３３１において、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の初期輝度区間を確定する。

【0071】

本開示の実施例において、初期輝度区間は、開区間、又は閉区間、又は半開半閉区間とすることができ、初期輝度区間の確定方法は、ステップＳ１０３１における該合成待ち画像の各目標画素点の輝度値区間の確定方式と同一である。すなわち、ステップＳ１０３１で確定された輝度値区間は、初期輝度区間と同等であり、初期輝度区間の具体的な確定方法については、ステップＳ１０３１における関連説明を参照することができ、ここでは省略する。

【0072】

なお、該合成待ち画像に第２関連画像が存在しない場合には、初期輝度区間を、該合成待ち画像の各目標画素点の輝度値区間として確定し、該合成待ち画像に１つまたは２つの第２関連画像が存在する場合には、ステップＳ１０３３２およびステップＳ１０３３３の方式に従って、該合成待ち画像の各目標画素点の輝度値区間をさらに確定してもよい。

【0073】

ステップＳ１０３３２において、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、初期輝度区間の拡張輝度区間を確定する。

【0074】

その中で、拡張輝度区間は、開区間または閉区間または半開半閉区間であってもよい。合成待ち画像の第２関連画像は、１つまたは２つである。

【0075】

合成待ち画像の第２関連画像が１つである場合、合成待ち画像の第１関連画像は１つまたは２つであり、この場合、画像輝度値が該第２関連画像の画像輝度値に隣接する第１関連画像を用い、方式Ｂ１で該合成待ち画像の拡張輝度区間を確定することができる。

【0076】

例えば、合成待ち画像２の第１関連画像を合成待ち画像１と合成待ち画像３とし、合成待ち画像２の第２関連画像を合成待ち画像４とし、且つ、合成待ち画像４の画像輝度値と合成待ち画像３の画像輝度値とが隣接している場合には、合成待ち画像３と合成待ち画像４とを用いて、合成待ち画像２の拡張輝度区間を確定することができる。

【0077】

方式Ｂ１は、該合成待ち画像について、画像輝度値が該第２関連画像の画像輝度値に隣接する第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とを用いて、該合成待ち画像の拡張輝度区間を確する。その中で、確定方式は限定されない。

【0078】

例えば、まず、該合成待ち画像の第１関連画像の画像輝度値と該合成待ち画像の第２関連画像の画像輝度値との間の大小関係を確定し、小さい画像輝度値を拡張輝度区間の最小輝度値とし、大きい画像輝度値を拡張輝度区間の最大輝度値とすること、すなわち、拡張輝度区間を［小さい画像輝度値、大きい画像輝度値］とすることができる。

【0079】

例えば、合成待ち画像１の第１関連画像を合成待ち画像２とし、合成待ち画像１の第２関連画像を合成待ち画像３とし、且つ、合成待ち画像２の画像輝度値Ｐ２が合成待ち画像３の画像輝度値Ｐ３よりも小さい場合には、拡張輝度区間を［Ｐ２、Ｐ３］とすることができる。

【0080】

また、例えば、オプションの一実施形態として、ステップＳ１０３３２において、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、初期輝度区間の拡張輝度区間を確定する。具体的には、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値との画像輝度値の差分値を確定し、画像輝度値の差分値と第３設定値とに基づき、初期輝度区間の拡張輝度区間を確定することを含む。

【0081】

その中で、第１関連画像の画像輝度値が第２関連画像の画像輝度値よりも大きいと確定されると、第１関連画像の画像輝度値－画像輝度値の差分値*第３設定値を拡張輝度区間の最小輝度値としする。第１関連画像の画像輝度値が第２関連画像の画像輝度値よりも小さいと確定されると、第１関連画像の画像輝度値を拡張輝度区間の最小輝度値とし、第１関連画像の画像輝度値＋画像輝度値の差分値*第３設定値を、拡張輝度区間の最大輝度値とする。

【0082】

なお、第３設定値の大きさは限定されないが、例えば、第３設定値は０.３であってもよい。

【0083】

例えば、合成待ち画像１の第１関連画像を合成待ち画像２とし、合成待ち画像１の第２関連画像を合成待ち画像３とし、且つ、合成待ち画像２の画像輝度値Ｐ２が合成待ち画像３の画像輝度値Ｐ３よりも小さい場合には、Ｐ２を拡張輝度区間の最小輝度値とし、Ｐ３－Ｐ２と、第３設定値０.３と、Ｐ２とに基づき、拡張輝度区間の最大輝度値Ｐ２＋０.３（Ｐ３－Ｐ２）を確定する。すなわち、拡張輝度区間を[Ｐ２、Ｐ２＋０.３（Ｐ３－Ｐ２）］とする。

【0084】

合成待ち画像の第２関連画像が２つである場合、拡張輝度区間は、方式Ｂ２により確定される。

【0085】

方式Ｂ２は、第１関連画像毎に、方式Ｂ１により、該第１関連画像に対応する拡張輝度区間を確定することができる。その後、２つの第１関連画像に対応する拡張輝度区間を初期輝度区間の拡張輝度区間とする。

【0086】

例えば、合成待ち画像１－合成待ち画像５の画像輝度値がそれぞれＰ１からＰ５までであり、その中で、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５である場合、合成待ち画像３については、その第１関連画像が合成待ち画像２と合成待ち画像４となり、その第２関連画像が合成待ち画像１と合成待ち画像５となる。合成待ち画像２に対応する拡張輝度区間［Ｐ１、Ｐ２］と、合成待ち画像４に対応する輝度拡張区間［Ｐ４、Ｐ５］とは、方式Ｂ１により確定される。そうすると、初期輝度区間の拡張輝度区間は［Ｐ１、Ｐ２］及び［Ｐ４、Ｐ５］を含む。

【0087】

また、例えば、合成待ち画像１－合成待ち画像５の画像輝度値がそれぞれＰ１からＰ５までであり、その中で、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５である場合、合成待ち画像３については、その第１関連画像が合成待ち画像２と合成待ち画像４となり、その第２関連画像が合成待ち画像１と合成待ち画像５となる。合成待ち画像２に対応する拡張輝度区間［Ｐ２－０.３（Ｐ２－Ｐ１）、Ｐ２］と、合成待ち画像４に対応する輝度拡張区間［Ｐ４、Ｐ４＋０.３（Ｐ５－Ｐ４）］とは、方式Ｂ１により確定される。そうすると、初期輝度区間の拡張輝度区間は［Ｐ２－０.３（Ｐ２－Ｐ１）、Ｐ２］及び［Ｐ４、Ｐ４＋０.３（Ｐ５－Ｐ４）］を含む。

【0088】

ステップＳ１０３３３において、初期輝度区間と拡張輝度区間とをスティッチングし、該合成待ち画像の各目標画素点の輝度値区間を得る。

【0089】

本開示の実施例では、初期輝度区間と拡張輝度区間とをスティッチングし、合成待ち画像の各目標画素点の輝度値区間を得る。

【0090】

例えば、合成待ち画像１の初期輝度区間を［Ｐ１、Ｐ２］、拡張輝度区間を［Ｐ２、Ｐ２＋０.３（Ｐ３－Ｐ２）］とする場合、［Ｐ１、Ｐ２］と［Ｐ２、Ｐ２＋０.３（Ｐ３－Ｐ２）］とを［Ｐ１、Ｐ２＋０.３（Ｐ３－Ｐ２）］としてスティッチングし、合成待ち画像１の各目標画素点の輝度値区間とすることができる。

【0091】

また、例えば、合成待ち画像３の初期輝度区間を［Ｐ２、Ｐ４］とし、拡張輝度区間が［Ｐ２－０.３（Ｐ２－Ｐ１）、Ｐ２］及び［Ｐ４、Ｐ４＋０.３（Ｐ５－Ｐ４）］を含む場合、［Ｐ２、Ｐ４］と、［Ｐ２－０.３（Ｐ２－Ｐ１）、Ｐ２］と、［Ｐ４、Ｐ４＋０.３（Ｐ５－Ｐ４）］とを、［Ｐ２－０.３（Ｐ２－Ｐ１）、Ｐ４＋０.３（Ｐ５－Ｐ４）］としてスティッチングし、合成待ち画像３の各目標画素点の輝度値区間とすることができる。

【0092】

本開示の実施例では、該合成待ち画像の各目標画素点の輝度値区間について、輝度値区間の輝度最大値が、各合成待ち画像の画像輝度値のうちの最大値以下であり、輝度値区間の輝度最小値が、各合成待ち画像の画像輝度値のうちの最小値以上である。

【0093】

例えば、Ｐ１からＰ５までが合成待ち画像１から合成待ち画像５までの画像輝度値をそれぞれ表し、且つ、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５である場合、いずれか１つの合成待ち画像の輝度値区間の輝度最大値は、Ｐ５以下であり、いずれか１つの合成待ち画像の輝度値区間の輝度最小値は、Ｐ１以上である。

【0094】

ステップＳ１０３４において、該合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が輝度値区間に位置すると、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値と、該画素点の輝度値とに基づき、該画素点の輝度重みを確定する。該画素点の輝度値が輝度値区間外に位置すると、該画素点の輝度重みを、第２設定値として確定する。

【0095】

その中で、第２設定値の大きさは限定されず、例えば、第２設定値は０であってもよい。

【0096】

本開示の実施例では、合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が輝度値区間に位置する場合には、まず、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、該合成待ち画像に対応する輝度と輝度重みとの間のマッピング関係を確定し、その後、該画素点の輝度値と該マッピング関係とに基づき、該画素点の輝度重みを確定する。画素点の輝度値が輝度値区間外に位置すると、該画素点の輝度重みを第２設定値として確定し、例えば、該画素点の輝度重みを０として確定する。

【0097】

図３に示すように、図３は、本開示の実施例に係る他の輝度と輝度重みとの間のマッピング関係を示す模式図である。その中で、Ｐ１からＰ５までは、それぞれ合成待ち画像１から合成待ち画像５までの画像輝度値を表し、且つ、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５、Ｐ２－Ｎ１=０.３＊（Ｐ２－Ｐ１）、Ｎ２－Ｐ４=０.３＊（Ｐ５－Ｐ４）である。合成待ち画像３については、合成待ち画像１乃至合成待ち画像５のそれぞれに対応する画像輝度値Ｐ１乃至Ｐ５に基づき、図３のように、合成待ち画像３に対応する輝度と輝度重みとの間のマッピング関係を確定し、合成待ち画像３のうちの画素点毎については、該マッピング関係及び該画素点の輝度に基づき、該画素点の輝度重みを確定することができる。

【0098】

なお、図３における合成待ち画像３に対応する輝度と輝度重みとの間のマッピング関係は、概略的なものである。例えば、該マッピング関係は、図３に示す三角形であってもよいし、台形であってもよいし、曲線であってもよいなど、ここでは限定されない。

【0099】

本開示によって提供される技術案をよりよく理解し、説明するために、以下では、一つのオプションの実施例を結合し、本開示の技術案について詳細に説明する。本開示の実施例では、図４を結合し、３枚の合成待ち画像について説明し、その中で、図４は、本開示の実施例に係るさらに他の輝度と輝度加重値との間のマッピング関係を示す模式図である。具体的には、次のようである。

【0100】

まず、３枚の合成待ち画像を取得し、この３枚の合成待ち画像は、それぞれ合成待ち画像１、合成待ち画像２、合成待ち画像３と記録する。その後、各合成待ち画像の画像輝度値をそれぞれ確定する。その中で、合成待ち画像１の画像輝度値はＰ１、合成待ち画像２の画像輝度値はＰ２、合成待ち画像３の画像輝度値はＰ３である。

【0101】

合成待ち画像毎に対して、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値に基づき、該合成待ち画像における各画素点の輝度重みを確定し、その中で、第１関連画像は、画像輝度値が該合成待ち画像の画像輝度値に隣接した合成待ち画像である。

【0102】

具体的には、Ｐ１、Ｐ２に基づき、図４に示す合成待ち画像１に対応する画素点の輝度と画素点の輝度重みとの間のマッピング関係を確定することができ、合成待ち画像１における各画素点について、該画素点の輝度と該マッピング関係に基づき、該画素点の輝度重みを得ることができる。相応に、Ｐ１、Ｐ２、及びＰ３に基づき、図４に示す合成待ち画像２に対応する画素点の輝度と画素点の輝度重みとの間のマッピング関係を確定することができ、合成待ち画像２における各画素点について、該画素点の輝度と該マッピング関係に基づき、該画素点の輝度重みを得ることができる。Ｐ２、Ｐ３に基づき、図４に示す合成待ち画像３に対応する画素点の輝度と画素点の輝度重みとの間のマッピング関係を確定することができ、合成待ち画像３における各画素点について、該画素点の輝度と該マッピング関係に基づき、該画素点の輝度重みを得ることができる。

【0103】

さらに、３枚の合成待ち画像における各画素点の輝度値と、各画素点の輝度重みとに基づいて、画像合成処理を行い、目標画像を得る。

【0104】

本開示の実施例の具体的な実施形態は、上述した実施例の関連する説明を参照することができ、ここでは省略する。

【0105】

以上、方法ステップの観点から画像処理方法を具体的に述べ、以下に、仮想モジュールの観点から画像処理装置について紹介する。具体的には、次のようである。

【0106】

本開示の実施例は、図５に示すように、取得モジュール５０１と、第１確定モジュール５０２と、第２確定モジュール５０３と、合成モジュール５０４と、を備える画像処理装置５０を提供する。

【0107】

取得モジュール５０１は、同一の被写体が異なる露出度で撮像された少なくとも２枚の合成待ち画像を取得する。

【0108】

第１確定モジュール５０２は、合成待ち画像の画像輝度値を確定する。

【0109】

第２確定モジュール５０３は、合成待ち画像毎に対して、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定する。

【0110】

合成モジュール５０４は、少なくとも２枚の合成待ち画像における各画素点の輝度値と、各画素点の輝度重みとに基づいて、画像合成処理を行い、目標画像を得る。

【0111】

本開示の実施例の他の可能な実施形態では、第２確定モジュール５０３は、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定する場合、具体的には、
該合成待ち画像の第１関連画像を確定し、第１関連画像は画像輝度値が該合成待ち画像の画像輝度値に隣接する合成待ち画像であり、
該合成待ち画像の画像輝度値と、第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定する。

【0112】

本開示の実施例の他の可能な実施形態では、第２確定モジュール５０３は、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定する場合、具体的には、
該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定し、
該合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が輝度値区間に位置していれば、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該画素点の輝度値とに基づき、該画素点の輝度重みを確定する。該画素点の輝度値が輝度値区間外に位置していれば、該画素点の輝度重みを第１設定値として確定する。

【0113】

本開示の実施例の他の可能な実施形態では、第２確定モジュール５０３は、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定する場合、具体的には、
該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とからなる区間を、該合成待ち画像の各目標画素点の輝度値区間として確定する。

【0114】

本開示の実施例の他の可能な実施形態では、第２確定モジュール５０３は、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値に基づき、該合成待ち画像における各画素点の輝度重みを確定する場合、具体的には、
該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定する。
該合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が輝度値区間に位置していれば、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値と、該画素点の輝度値とに基づき、該画素点の輝度重みを確定する。該画素点の輝度値が輝度値区間外に位置していれば、該画素点の輝度重みを第２設定値として確定する。
その中で、第２関連画像は、画像輝度値が第１関連画像の画像輝度値に隣接する、該合成待ち画像以外の合成待ち画像である。

【0115】

本開示の実施例の他の可能な実施形態では、第２確定モジュール５０３は、該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定する場合、具体的には、
該合成待ち画像の画像輝度値と、該合成待ち画像の第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の初期輝度区間を確定し、
該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、初期輝度区間の拡張輝度区間を確定し、
初期輝度区間と拡張輝度区間とをスティッチングし、該合成待ち画像の各目標画素点の輝度値区間を得る。

【0116】

本開示の実施例の他の可能な実施形態では、第２確定モジュール５０３は、該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づき、初期輝度区間の拡張輝度区間を確定する場合、具体的には、
該合成待ち画像の第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値との画像輝度値の差分値を確定し、
画像輝度値の差分値と第３設定値とに基づき、初期輝度区間の拡張輝度区間を確定する。

【0117】

本開示の実施例の他の可能な実施形態では、該合成待ち画像の各目標画素点の輝度値区間について、輝度値区間の輝度最大値が、各合成待ち画像の画像輝度値のうちの最大値以下であり、輝度値区間の輝度最小値が、各合成待ち画像の画像輝度値のうちの最小値以上である。

【0118】

本開示の実施例において、第１確定モジュール５０２および第２確定モジュール５０３は、同一の確定モジュールであってよく、また、２つの異なる確定モジュールであってもよく、ここでは限定されない。

【0119】

本開示の実施例の画像処理装置は、上述した方法の実施形態に示した画像処理方法と同様の実現原理を有するので、ここでは省略する。

【0120】

本開示の実施例は、画像処理方法を提供し、本開示の実施例は、従来技術に比べて、合成待ち画像毎に対して、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定する。その後、少なくとも２枚の合成待ち画像における各画素点の輝度値と、各画素点の輝度重みとに基づき、画像合成処理を行い、目標画像を得ることにより、１枚毎の合成待ち画像における各画素点の輝度重みは、該合成待ち画像の画像輝度値及び該合成待ち画像における各画素点の輝度値に相関する。すなわち、枚毎の合成待ち画像における各画素点の輝度重みは、該合成待ち画像自体の画像輝度値を考慮することで、少なくとも２枚の合成待ち画像の画像輝度の不均一分布の影響を低減し、合成された画像の品質を向上させ、ユーザエクスペリエンスを向上させることができる。

【0121】

以上、仮想モジュールの観点から本開示の画像処理装置について紹介し、以下では、実体装置の観点から本開示の電子機器について紹介する。

【0122】

以下、図６を参照すると、図６は本開示の実施例を実現するために好適な電子機器（例えば、図１における端末機器またはサーバ）６００の構成を示す模式図である。本開示の実施例における端末機器は、携帯電話、ノートパソコン、デジタル放送受信機、ＰＤＡ（パーソナルデジタルアシスタント）、ＰＡＤ（タブレットＰＣ）、ＰＭＰ（ポータブルマルチメディアプレーヤ）、車載端末（例えば、カーナビゲーション端末）、等の移動端末、デジタルテレビ、デスクトップコンピュータ、等の固定端末を含むことができるが、これらに限定されない。図６に示す電子機器は一例であり、本開示の実施例の機能および使用範囲に何ら制限はない。

【0123】

電子機器は、メモリおよびプロセッサを含む。ここで、プロセッサは、以下に示す処理装置６０１と称されてよく、メモリは、以下に示すように、読み取り専用メモリ（ＲＯＭ）６０２、ランダムアクセスメモリ（ＲＡＭ）６０３、および記憶装置６０８のうちの少なくとも１つを含むことができる。具体的には、以下のようである。

【0124】

図６に示すように、電子機器６００は、読み取り専用メモリ（ＲＯＭ）６０２に記憶されたプログラムや、記憶装置６０８からランダムアクセスメモリ（ＲＡＭ）６０３にロードされたプログラムに従って、様々な適切な動作や処理を実行可能な処理装置（例えば、CＰU、グラフィックスプロセッサ、等）６０１を備えていてよい。ＲＡＭ６０３には、電子機器６００の動作に必要な各種プログラムやデータも記憶されている。処理装置６０１、ＲＯＭ６０２、およびＲＡＭ６０３は、バス６０４を介して互いに接続されている。バス６０４には、入出力（Ｉ/Ｏ）インタフェース６０５も接続されている。

【0125】

一般に、I/Oインタフェース６０５には、タッチパネル、キーボード、マウス、カメラ、マイク、加速度計、ジャイロ、等を含む入力装置６０６と、液晶ディスプレイ（ＬＣＤ）、スピーカ、バイブレータ、等を含む出力装置６０７と、磁気テープ、ハードディスク、等を含む記憶装置６０８と、通信装置６０９とが接続されている。通信装置６０９は、電子機器６００がデータを交換するために他のデバイスと無線または有線通信を行うことを可能にし得る。図６は、種々の装置を有する電子機器６００を示しているが、必ずしも表示されている全ての装置の実施又は具備を要求するものではないことが理解される。より多く、または、より少ない装置を、代替的に、実施又は具備することができる。

【0126】

特に、本開示の実施例によれば、フローチャートを参照して、上述したプロセスをコンピュータソフトウェアプログラムとして実現することができる。例えば、本開示の実施例は、フローチャートに示される方法を実行するためのプログラムコードを含む、非一時的なコンピュータ読み取り可能媒体上にロードされたコンピュータプログラムを含む、コンピュータプログラム製品を含んでいる。このような実施例において、このコンピュータプログラムは、通信装置６０９を介してネットワークからダウンロードしてインストールすることができ、記憶装置６０８からインストールすることができ、ＲＯＭ６０２からインストールすることができる。このコンピュータプログラムが処理装置６０１によって実行されると、本開示の実施例の方法に限定される上述した機能が実行される。

【0127】

なお、上述した本開示のコンピュータ読み取り可能媒体は、コンピュータ読み取り可能信号媒体、またはコンピュータ読み取り可能記憶媒体、または上記の２つの任意の組み合わせであってもよい。コンピュータ読み取り可能記憶媒体は、例えば、電気、磁気、光、電磁、赤外線、または半導体のシステム、装置、または、デバイス、もしくは、上記の任意の組み合わせであってもよい。コンピュータ読み取り可能記憶媒体のより具体的な例としては、１つ以上の導線を有する電気的接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥＰＲＯＭまたはフラッシュメモリ）、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）、光記憶デバイス、磁気記憶デバイス、または、上記の任意の適切な組み合わせを含むが、これらに限定されない。本開示において、コンピュータ読み取り可能記憶媒体は、命令実行システム、装置、またはデバイスによって使用されてもよく、または、これらと組み合わせて使用してもよいプログラムを含み、または、記憶する任意の有形媒体であってもよい。本開示において、コンピュータ読み取り可能プログラムコードを搭載したコンピュータ読み取り可能信号媒体は、ベースバンドに含まれてもよく、または、搬送波の一部として伝搬するデータ信号であってもよい。このような伝搬するデータ信号は、電磁信号、光信号、または上述した任意の適切な組み合わせを含むが、これらに限定されない様々な形態をとることができる。コンピュータ読み取り可能信号媒体は、命令実行システム、装置、またはデバイスによって使用される、もしくは、これらと組み合わせて使用するためのプログラムを送信、伝搬、または伝送することができる、コンピュータ読み取り可能記憶媒体以外の任意のコンピュータ読み取り可能媒体であってもよい。コンピュータ読み取り可能媒体に含まれるプログラムコードは、電線、光ケーブル、ＲＦ（無線周波数）等、または、上述した任意の適切な組み合わせを含むが、これらに限定されない任意の適切な媒体で伝送することができる。

【0128】

いくつかの実施形態では、クライアント、サーバは、ＨＴＴＰ（ＨｙｐｅｒＴｅｘｔ Ｔｒａｎｓｆｅｒ Ｐｒｏｔｏｃｏｌ、ハイパーテキスト転送プロトコル）のような、現在知られている、または、将来開発されている任意のネットワークプロトコルを使用して通信することができ、任意の形式または媒体のデジタルデータ通信（例えば、通信ネットワーク）と相互接続することができる。通信ネットワークの例としては、ローカルエリアネットワーク（「ＬＡＮ」）、広域ネットワーク（「ＷＡＮ」）、国際網（例えば、インターネット）、エンドツーエンドネットワーク（例えば、ａｄ ｈｏｃエンドツーエンドネットワーク）、および、現在知られているネットワークまたは将来開発されている任意のネットワークが挙げられる。

【0129】

上記コンピュータ読み取り可能媒体は、上記電子機器に含まれるものであってもよいし、または、電子機器に組み込まれておらず単独で存在していてもよい。

【0130】

上記コンピュータ読み取り可能媒体は、１つ以上のプログラムを搭載し、上記１つ以上のプログラムが該電子機器によって実行された場合、該電子機器は、同一の被写体が異なる露出度で撮像された画像である少なくとも２枚の合成待ち画像を取得し、各上記合成待ち画像の画像輝度値を確定し、合成待ち画像毎に対して、該合成待ち画像の画像輝度値および該合成待ち画像における各画素点の輝度値に基づき、該合成待ち画像における各画素点の輝度重みを確定し、上記少なくとも２枚の合成待ち画像における各画素点の輝度値および各画素点の輝度重みに基づいて、画像合成処理を行い、目標画像を得る。

【0131】

本開示の動作を実行するためのコンピュータプログラムコードは、１つ以上のプログラミング言語またはそれらの組み合わせによって作成されることができ、上述したプログラミング言語には、Ｊａｖａ（登録商標）、Ｓｍａｌｌｔａｌｋ（登録商標）、Ｃ++（登録商標）、などのオブジェクト指向プログラミング言語が含まれるが、これらに限定されるものではなく、「Ｃ」言語または類似のプログラミング言語などの通常のプロセス式プログラミング言語も含まれる。

【0132】

プログラムコードは、完全にユーザコンピュータ上で実行され、部分的にユーザコンピュータ上で実行され、独立のパッケージソフトウェアとして実行され、部分的にユーザコンピュータ上で部分的にリモートコンピュータ上で実行され、または、完全にリモートコンピュータまたはサーバ上で実行され得る。リモートコンピュータに関する場合、リモートコンピュータは、ローカルエリアネットワーク（ＬＡＮ）または広域ネットワーク（ＷＡＮ）を含む、任意の種類のネットワークを介して、ユーザコンピュータに接続することができ、または、外部コンピュータに接続することができる（例えば、インターネットサービスプロバイダを利用してインターネットを介して接続する）。

【0133】

添付図面におけるフローチャートおよびブロック図は、本開示の様々な実施例に従うシステム、方法、およびコンピュータ・プログラム製品の実現可能なアーキテクチャ、機能、および動作を図示している。ここで、フローチャートまたはブロック図における各ブロックは、規定の論理機能を実現するための１つ以上の実行可能命令を含むモジュール、プログラムセグメント、またはコードの一部を示すことができる。また、いくつかを代替して実現する中に、ブロックにラベリングされた機能が、添付図面にラベリングされたものとは異なる順序で発生してもよいことに留意されたい。例えば、連続して表される２つのブロックは、実際には、実質的に並列に実行されてもよく、場合によっては、関連する機能に応じて、逆の順序で実行されてもよい。なお、ブロック図及び／又はフローチャートの各ブロック、及びブロック図及び／又はフローチャートにおけるブロックの組み合わせは、規定の機能または動作を実行する専用のハードウェアベースのシステムで実現してもよいし、または、専用のハードウェアとコンピュータ命令との組み合わせで実現してもよい。

【0134】

本開示の実施例に関するモジュールまたはユニットは、ソフトウェア的に実現されてもよいし、または、ハードウェア的に実現されてもよい。その中で、モジュールまたはユニットの名称は、ある場合において、このユニット自体を限定せず、例えば、取得モジュールは、「少なくとも２枚の合成待ち画像を取得するモジュール」として記述することもできる。

【0135】

本明細書で上述した機能は、少なくとも部分的に、１つ以上のハードウェア論理部材によって実行され得る。例えば、非限定的に使用可能な例示的なタイプのハードウェア論理部材は、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、専用集積回路（ＡＳＩＣ）、専用標準製品（ＡＳＳＰ）、オンチップシステム（ＳＯＣ）、複雑プログラマブル論理デバイス（ＣＰＬＤ）、等を含む。

【0136】

本開示のコンテキストにおいて、機械読み取り可能媒体は、命令実行システム、装置、またはデバイスによって使用される、もしくは、命令実行システム、装置、またはデバイスと組み合わせて使用されるプログラムを含むか、または、記憶することができる有形媒体であってもよい。機械読み取り可能媒体は、機械読み取り可能信号媒体または機械読み取り可能記憶媒体であってもよい。機械読み取り可能媒体は、電子的、磁気的、光学的、電磁的、赤外線的であり、もしくは、半導体システム、装置またはデバイス、または上記のいずれの適切な組み合わせを含むが、これらに限定されない。機械読み取り可能記憶媒体のより具体的な例は、１つ以上のラインベースの電気的接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥＰＲＯＭまたはフラッシュメモリ）、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ（ＣＤ-ＲＯＭ）、光記憶デバイス、磁気記憶デバイス、または、上記のいずれの適切な組み合わせを含むことができる。

【0137】

本開示の実施例は、１つ以上のプロセッサと、メモリと、メモリに記憶され、且つ、１つ以上のプロセッサによって実行され、方法の実施例に従って、示される画像処理方法を実行するように構成された１つ以上のアプリケーションと、を含む電子機器を提供する。

【0138】

以上は、エンティティデバイスの観点から本開示の電子機器を紹介し、以下には、媒体の観点から本開示のコンピュータ読み取り可能媒体を紹介する。

【0139】

本開示の実施例は、コンピュータ上で稼働するときに、コンピュータが上述した方法の実施例における対応するコンテンツを実行できるようにするコンピュータプログラムを記憶した、コンピュータ読み取り可能媒体を提供する。

【0140】

本開示の１つ以上の実施例によれば、
同一の被写体が異なる露出度で撮像された画像である少なくとも２枚の合成待ち画像を取得するステップと、
各上記合成待ち画像の画像輝度値を確定するステップと、
合成待ち画像毎に対して、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップと、
上記少なくとも２枚の合成待ち画像における各画素点の輝度値と、各画素点の輝度重みとに基づいて、画像合成処理を行い、目標画像を得るステップと、を含む画像処理方法を提供する。

【0141】

本開示の１つ以上の実施例によれば、上記該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップは、
画像輝度値が合成待ち画像の画像輝度値に隣接する合成待ち画像である該合成待ち画像の第１関連画像を確定するステップと、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づいて、該合成待ち画像における各画素点の輝度重みを確定するステップと、を含む。

【0142】

本開示の１つ以上の実施例によれば、上記該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づき、該合成待ち画像における各画素点の輝度重みを確定するステップは、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値とに基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定するステップと、
該合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が上記輝度値区間に位置していれば、該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該画素点の輝度値とに基づいて、該画素点の輝度重みを確定し、該画素点の輝度値が上記輝度値区間外に位置していれば、該画素点の輝度重みを第１設定値として確定するステップと、を含む。

【0143】

本開示の１つ以上の実施形態によれば、上記該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の輝度値区間を確定するステップは、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値とからなる区間を、該合成待ち画像の各目標画素点の輝度値区間として確定するステップを含む。

【0144】

本開示の１つ以上の実施例によれば、上記該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値に基づき、該合成待ち画像における各画素点の輝度重みを確定するステップは、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定するステップと、
該合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が上記輝度値区間に位置していれば、該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、上記第２関連画像の画像輝度値と、該画素点の輝度値とに基づいて、該画素点の輝度重みを確定し、該画素点の輝度値が輝度値区間外に位置していれば、該画素点の輝度重みを第２設定値として確定するステップと、を含み、
その中で、上記第２関連画像は、画像輝度値が上記第１関連画像の画像輝度値に隣接する、該合成待ち画像以外の合成待ち画像である。

【0145】

本開示の１つ以上の実施例によれば、上記該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定するステップは、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値とに基づき、該合成待ち画像の各目標画素点の初期輝度区間を確定するステップと、
上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づいて、上記初期輝度区間の拡張輝度区間を確定するステップと、
上記初期輝度区間と上記拡張輝度区間とをスティッチングし、該合成待ち画像の各目標画素点の輝度値区間を得る。

【0146】

本開示の１つ以上の実施例によれば、上記の上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づいて、上記初期輝度区間の拡張輝度区間を確定するステップは、
上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値との画像輝度値の差分値を確定するステップと、
上記画像輝度値の差分値と第３設定値とに基づいて、上記初期輝度区間の拡張輝度区間を確定するステップと、を含む。

【0147】

本開示の１つ以上の実施例によれば、該合成待ち画像の各目標画素点の輝度値区間について、上記輝度値区間の輝度最大値が、各合成待ち画像の画像輝度値のうちの最大値以下であり、上記輝度値区間の輝度最小値が、各合成待ち画像の画像輝度値のうちの最小値以上である。

【0148】

本開示の１つ以上の実施例によれば、
同一の被写体が異なる露出度で撮像された画像である少なくとも２枚の合成待ち画像を取得するための取得モジュールと、
各上記合成待ち画像の画像輝度値を確定するための第１確定モジュールと、
上記合成待ち画像毎に対して、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値に基づいて、該合成待ち画像における各画素点の輝度重みを確定するための第２確定モジュールと、
上記少なくとも２枚の合成待ち画像における各画素点の輝度値と、各画素点の輝度重みとに基づいて、画像合成処理を行い、目標画像を得る合成モジュールと、を含む画像処理装置を提供する。

【0149】

本開示の１つ以上の実施例によれば、第２確定モジュールは、該合成待ち画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づいて、該合成待ち画像における各画素点の輝度重みを確定する場合、具体的には、
画像輝度値が該合成待ち画像の画像輝度値に隣接する合成待ち画像である該合成待ち画像の第１関連画像を確定し、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づいて、該合成待ち画像における各画素点の輝度重みを確定するためのものである。

【0150】

本開示の１つ以上の実施例によれば、該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づいて、該合成待ち画像における各画素点の輝度重みを確定する場合、具体的には、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値とに基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定し、
該合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が上記輝度値区間に位置していれば、該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該画素点の輝度値とに基づいて、該画素点の輝度重みを確定し、該画素点の輝度値が上記輝度値区間外に位置していれば、該画素点の輝度重みを第１設定値として確定するためのものである。

【0151】

本開示の１つ以上の実施例によれば、上記第２確定モジュールは、該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値とに基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定する場合、具体的には、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値とからなる区間を、該合成待ち画像の各目標画素点の輝度値区間として確定するためのものである。

【0152】

本開示の１つ以上の実施例によれば、上記第２確定モジュールは、該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像における各画素点の輝度値とに基づいて、該合成待ち画像における各画素点の輝度重みを確定する場合、具体的には、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定し、
該合成待ち画像のいずれか１つの画素点について、該画素点の輝度値が上記輝度値区間に位置していれば、該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、上記第２関連画像の画像輝度値と、該画素点の輝度値とに基づいて、該画素点の輝度重みを確定し、該画素点の輝度値が輝度値区間外に位置していれば、該画素点の輝度重みを第２設定値として確定するためのものであり、
その中で、上記第２関連画像は、画像輝度値が上記第１関連画像の画像輝度値に隣接する、該合成待ち画像以外の合成待ち画像である。

【0153】

本開示の１つ以上の実施例によれば、上記第２確定モジュールは、該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づいて、該合成待ち画像の各目標画素点の輝度値区間を確定する場合、具体的には、
該合成待ち画像の画像輝度値と、上記第１関連画像の画像輝度値とに基づいて、該合成待ち画像の各目標画素点の初期輝度区間を確定し、
上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づいて、上記初期輝度区間の拡張輝度区間を確定し、
上記初期輝度区間と上記拡張輝度区間とをスティッチングし、該合成待ち画像の各目標画素点の輝度値区間を得るためのものである。

【0154】

本開示の１つ以上の実施例によれば、上記第２確定モジュールは、上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値とに基づいて、上記初期輝度区間の拡張輝度区間を確定する場合、具体的には、
上記第１関連画像の画像輝度値と、該合成待ち画像の第２関連画像の画像輝度値との画像輝度値の差分値を確定し、
上記画像輝度値の差分値と第３設定値とに基づいて、上記初期輝度区間の拡張輝度区間を確定するためのものである。

【0155】

本開示の１つ以上の実施例によれば、該合成待ち画像の各目標画素点の輝度値区間について、上記輝度値区間の輝度最大値が、各合成待ち画像の画像輝度値のうちの最大値以下であり、上記輝度値区間の輝度最小値が、各合成待ち画像の画像輝度値のうちの最小値以上である。

【0156】

本開示の１つ以上の実施例によれば、
１つ以上のプロセッサと、
メモリと、
上記メモリに記憶され、且つ、上記１つ以上のプロセッサによって実行され、方法の実施例に従って示される画像処理方法を実行するように構成されている１つ以上のアプリケーションと、を含む電子機器を提供する。

【0157】

本開示の１つ以上の実施例によれば、プロセッサによって実行される際に方法の実施例に示す画像処理方法を実現するコンピュータプログラムが記憶されたコンピュータ読み取り可能媒体を提供する。

【0158】

以上の説明は、本開示の好ましい実施例および運用される技術原理の説明に過ぎない。当業者は、本開示に係る開示の範囲は、上述した技術的特徴の特定の組み合わせからなる技術案に限定されるものではなく、同時に、上述した技術的特徴又はその同等の特徴を上記開示の趣旨から逸脱することなく任意に組み合わせて形成される他の技術案も含むべきであることを理解すべきである。例えば、上述した特徴を本明細書に開示されている（これらに限定されない）類似の機能を有する技術的特徴に置き換えて形成される技術案である。

【0159】

また、各動作は特定の順序で描画されているが、これらの動作は、図示された特定の順序で実行されることを要求するものと理解してはならない。一定の環境では、マルチタスクと並列処理が有利になる場合がある。同様に、上述したように、いくつかの具体的な実現の詳細が含まれているが、これらは、本開示の範囲を限定するものとして解釈されるべきではない。単独の実施例のコンテキストで説明されるいくつかの特徴は、また、単一の実施例に組み合わされて実現されてもよい。逆に、単一の実施例のコンテキストで説明される様々な特徴は、単独で、または、任意の適切なサブ組合せで複数の実施例に実現されてもよい。

【0160】

本技術的事項は、構造的特徴および/または方法的論理動作に特定の言語で説明されているが、添付の特許請求の範囲に限定される技術的事項は、必ずしも上述した特定の特徴または動作に限定されるものではないことが理解されるべきである。逆に、上述した特定の特徴および動作は、特許請求の範囲を実現する例示的な形態に過ぎない。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【国際調査報告】