特許 7166382 画像処理の方法、装置、機器及び記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-10-27

(45)【発行日】2022-11-07

(54)【発明の名称】画像処理の方法、装置、機器及び記憶媒体

(51)【国際特許分類】

   G06T 7/00 20170101AFI20221028BHJP

   H04N 5/232 20060101ALI20221028BHJP

   G08G 1/16 20060101ALI20221028BHJP

【ＦＩ】

G06T7/00 350

H04N5/232 290

G08G1/16 C

【請求項の数】 19

(21)【出願番号】P 2021064162

(22)【出願日】2021-04-05

(65)【公開番号】P2021108169

(43)【公開日】2021-07-29

【審査請求日】2021-04-05

(31)【優先権主張番号】202010610256.X

(32)【優先日】2020-06-30

(33)【優先権主張国・地域又は機関】CN

(73)【特許権者】

【識別番号】514322098

【氏名又は名称】ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド

【氏名又は名称原語表記】Ｂｅｉｊｉｎｇ Ｂａｉｄｕ Ｎｅｔｃｏｍ Ｓｃｉｅｎｃｅ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ．

【住所又は居所原語表記】２／Ｆ Ｂａｉｄｕ Ｃａｍｐｕｓ， Ｎｏ．１０， Ｓｈａｎｇｄｉ １０ｔｈ Ｓｔｒｅｅｔ， Ｈａｉｄｉａｎ Ｄｉｓｔｒｉｃｔ， Ｂｅｉｊｉｎｇ １０００８５， Ｃｈｉｎａ

(74)【代理人】

【識別番号】110002952

【氏名又は名称】弁理士法人鷲田国際特許事務所

(72)【発明者】

【氏名】ワン チョンチン

【審査官】山田 辰美

(56)【参考文献】

【文献】特開２０１８－０６３５５１（ＪＰ，Ａ）

【文献】特許第６２７５３６２（ＪＰ，Ｂ１）

【文献】国際公開第２０１７／１６３５３８（ＷＯ，Ａ１）

【文献】O.K. Al-Shaykh et al.，Lossy compression of noisy images，IEEE Transactions on Image Processing，Volume: 7, Issue: 12，米国，IEEE，1998年12月，p.1641－p.1652，https://ieeexplore.ieee.org/stamp/stamp.jsp?tp=&arnumber=730376，IEL Online IEEE Xplore

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ ７／００－７／９０

Ｈ０４Ｎ ５／２３２

Ｇ０８Ｇ １／１６

(57)【特許請求の範囲】

【請求項1】

車両の自動運転システムを実行する車載端末に適用される画像処理方法であって、
オリジナル画像とノイズ付加画像を取得することであって、前記ノイズ付加画像は、前記オリジナル画像にノイズを加えた後の画像であり、前記オリジナル画像においてノイズのあるピクセルの数はプリセットの数より少ない、取得することと、
前記オリジナル画像及び前記ノイズ付加画像をそれぞれコーデックして、前記オリジナル画像に対応する第１の復号画像、及び前記ノイズ付加画像に対応する第２の復号画像を取得することと、
前記オリジナル画像と前記第１の復号画像に基づいて、前記第１の復号画像と前記オリジナル画像との間の第１のピーク信号対雑音比ＰＳＮＲを取得することと、
前記ノイズ付加画像と前記第２の復号画像に基づいて、前記第２の復号画像と前記ノイズ付加画像との間の第２のＰＳＮＲを取得することと、
前記第１のＰＳＮＲ及び前記第２のＰＳＮＲを出力することと、
前記第１のＰＳＮＲ、前記第２のＰＳＮＲ及びプリセットの分析ルールに基づいて、前記第２のＰＳＮＲが低い原因を取得することであって、前記分析ルールは、前記第１のＰＳＮＲが第２のプリセットの閾値より大きく、かつ、前記第２のＰＳＮＲが前記第１のＰＳＮＲより低い場合、前記第２のＰＳＮＲが低い原因はコーデックアルゴリズムではなく、前記第２のＰＳＮＲが低い原因は、車載端末が画像を圧縮符号化する前にノイズ低減処理を行ったことと決定し、前記第１のＰＳＮＲが前記第２のプリセットの閾値より小さい場合、前記第２のＰＳＮＲが低い原因のうちの１つは、コーデックアルゴリズムが適用できないことであると決定する、取得することと、
前記第２のＰＳＮＲが低い原因を指示するための指示情報を出力することと、を含む、
ことを特徴とする画像処理方法。

【請求項2】

前記オリジナル画像とノイズ付加画像を取得することは、
前記オリジナル画像及び前記ノイズ付加画像を受信することを含む、
ことを特徴とする請求項１に記載の画像処理方法。

【請求項3】

前記オリジナル画像とノイズ付加画像を取得することは、
前記オリジナル画像を受信することと、
前記オリジナル画像にノイズを加えて、前記ノイズ付加画像を生成することと、を含む、
ことを特徴とする請求項１に記載の画像処理方法。

【請求項4】

前記オリジナル画像にノイズを加えて、前記ノイズ付加画像を生成することは、
前記オリジナル画像の少なくとも１つのピクセルをランダムに選択してソルトノイズ又はペッパーノイズを加えて、前記ノイズ付加画像を取得することを含む、
ことを特徴とする請求項３に記載の画像処理方法。

【請求項5】

前記オリジナル画像にノイズを加えて、前記ノイズ付加画像を生成することは、
前記オリジナル画像の少なくとも１つの第１のピクセルをランダムに選択してソルトノイズを加え、前記オリジナル画像の少なくとも１つの第２のピクセルをランダムに選択してペッパーノイズを加えて、前記ノイズ付加画像を取得することを含む、
ことを特徴とする請求項３に記載の画像処理方法。

【請求項6】

前記オリジナル画像にノイズを加えて、前記ノイズ付加画像を生成することは、
前記オリジナル画像の各々のピクセルにガウスノイズを加えて、前記ノイズ付加画像を取得することを含む、
ことを特徴とする請求項３に記載の画像処理方法。

【請求項7】

前記オリジナル画像は、前記車両の自動運転の時に、前記車両に設けられたカメラによって収集されるビデオの１フレームの画像である、
ことを特徴とする請求項１～請求項６のいずれか一項に記載の画像処理方法。

【請求項8】

前記オリジナル画像のフォーマットは、ＹＵＶフォーマットである、
ことを特徴とする請求項１～請求項６のいずれか一項に記載の画像処理方法。

【請求項9】

車両の、自動運転システムを実行する車載端末に適用される画像処理装置であって、
取得モジュール、コーデックモジュール、及び出力モジュールを含み、
前記取得モジュールは、オリジナル画像とノイズ付加画像を取得するために用いられ、前記ノイズ付加画像は、前記オリジナル画像にノイズを加えた後の画像であり、前記オリジナル画像においてノイズのあるピクセルの数はプリセットの数より少なく、
前記コーデックモジュールは、前記オリジナル画像及び前記ノイズ付加画像をそれぞれコーデックして、前記オリジナル画像に対応する第１の復号画像、及び前記ノイズ付加画像に対応する第２の復号画像を取得するために用いられ、
前記取得モジュールは、さらに、前記オリジナル画像と前記第１の復号画像に基づいて、前記第１の復号画像と前記オリジナル画像との間の第１のピーク信号対雑音比ＰＳＮＲを取得し、且つ、前記ノイズ付加画像と前記第２の復号画像に基づいて、前記第２の復号画像と前記ノイズ付加画像との間の第２のＰＳＮＲを取得するために用いられ、
前記出力モジュールは、前記第１のＰＳＮＲ及び前記第２のＰＳＮＲを出力するために用いられ、
前記取得モジュールは、さらに前記第１のＰＳＮＲ、前記第２のＰＳＮＲ及びプリセットの分析ルールに基づいて、前記第２のＰＳＮＲが低い原因を取得することであって、前記分析ルールは、前記第１のＰＳＮＲが第２のプリセットの閾値より大きく、かつ、前記第２のＰＳＮＲが前記第１のＰＳＮＲより低い場合、前記第２のＰＳＮＲが低い原因はコーデックアルゴリズムではなく、前記第２のＰＳＮＲが低い原因は、車載端末が画像を圧縮符号化する前にノイズ低減処理を行ったことと決定し、前記第１のＰＳＮＲが前記第２のプリセットの閾値より小さい場合、前記第２のＰＳＮＲが低い原因のうちの１つは、コーデックアルゴリズムが適用できないことであると決定する、取得することに用いられ、
前記出力モジュールは、さらに前記第２のＰＳＮＲが低い原因を指示するための指示情報を出力することに用いられる、
ことを特徴とする画像処理装置。

【請求項10】

前記取得モジュールは、
前記オリジナル画像及び前記ノイズ付加画像を受信するために用いられる、
ことを特徴とする請求項９に記載の画像処理装置。

【請求項11】

前記取得モジュールは、
前記オリジナル画像を受信し、
前記オリジナル画像にノイズを加えて、前記ノイズ付加画像を生成するために用いられる、
ことを特徴とする請求項９に記載の画像処理装置。

【請求項12】

前記取得モジュールは、
前記オリジナル画像の少なくとも１つのピクセルをランダムに選択してソルトノイズ又はペッパーノイズを加えて、前記ノイズ付加画像を取得するために用いられる、
ことを特徴とする請求項１１に記載の画像処理装置。

【請求項13】

前記取得モジュールは、
前記オリジナル画像の少なくとも１つの第１のピクセルをランダムに選択してソルトノイズを加え、前記オリジナル画像の少なくとも１つの第２のピクセルをランダムに選択してペッパーノイズを加えて、前記ノイズ付加画像を取得するために用いられる、
ことを特徴とする請求項１１に記載の画像処理装置。

【請求項14】

前記取得モジュールは、
前記オリジナル画像の各々のピクセルにガウスノイズを加えて、前記ノイズ付加画像を取得するために用いられる、
ことを特徴とする請求項１１に記載の画像処理装置。

【請求項15】

前記オリジナル画像は、前記車両の自動運転の時に、前記車両に設けられたカメラによって収集されるビデオの１フレームの画像である、
ことを特徴とする請求項９～請求項１４のいずれか一項に記載の画像処理装置。

【請求項16】

前記オリジナル画像のフォーマットは、ＹＵＶフォーマットである、
ことを特徴とする請求項９～請求項１４のいずれか一項に記載の画像処理装置。

【請求項17】

少なくとも１つのプロセッサと、
前記少なくとも１つのプロセッサに通信接続されるメモリと、を含み、
前記メモリには前記少なくとも１つのプロセッサによって実行可能な命令が記憶され、前記命令は、前記少なくとも１つのプロセッサが請求項１～請求項８のいずれか一項に記載の画像処理方法を実行できるように、前記少なくとも１つのプロセッサによって実行される、
ことを特徴とする電子機器。

【請求項18】

コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体であって、
前記コンピュータ命令はコンピュータに請求項１～請求項８のいずれか一項に記載の画像処理方法を実行させるために用いられる、
ことを特徴とする非一時的なコンピュータ読み取り可能な記憶媒体。

【請求項19】

コンピュータプログラムであって、前記コンピュータプログラムがプロセッサで実行されると、コンピュータに請求項１～請求項８のいずれか一項に記載の画像処理方法を実行させる、
ことを特徴とするコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本願の実施例は、画像処理の分野に関し、特に、自動運転分野に使用できる画像処理の方法、装置、機器及び記憶媒体に関する。

【背景技術】

【0002】

自動運転システムでは、カメラによって収集されたオリジナルビデオを圧縮符号化してから、ディスクに保存する必要がある。ここで、オリジナルビデオのオリジナル画像と、当該オリジナル画像を圧縮符号化してから復号した後に取得する復号画像との差異は、ピーク信号対雑音比（Ｐｅａｋ Ｓｉｇｎａｌ ｔｏ Ｎｏｉｓｅ Ｒａｔｉｏ、ＰＳＮＲと略称する）で特徴付けることができ、オリジナル画像とそれに対応する復号画像との間のＰＳＮＲ値が低いほど、オリジナル画像とそれに対応する復号画像との差異が大きいことを意味する。

【0003】

現在、検出により、オリジナルビデオの一部のオリジナル画像とそれに対応する復号画像との間のＰＳＮＲが、第１のプリセットの閾値より小さい値であることを分かり、これは、一部のオリジナル画像はコーデックして取得した復号画像がオリジナル画像と大きく異なること、即ち、復号画像の品質が悪いことを意味し、復号画像の品質は自動運転の正常な運行に直接に影響するため、オリジナル画像とそれに対応する復号画像との間のＰＳＮＲが低い原因を取得することは特に重要である。

【0004】

しかし、現在提供された、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低い原因は、いずれも一部の推測にすぎず、信頼性が低い。そのため、画像とそれに対応するコーデック後の復号画像との間のＰＳＮＲが低いということの信頼できる原因をどのように取得するかは、早急に解決する必要のある技術的な問題である。

【発明の概要】

【発明が解決しようとする課題】

【0005】

本願は、画像処理の方法、装置、機器及び記憶媒体を提供し、画像とそれに対応するコーデック後の復号画像との間のＰＳＮＲが低いということの信頼できる原因を取得でき、それにより自動運転車両の正常な運行を確保する。

【課題を解決するための手段】

【0006】

本願の第１の態様によれば、画像処理方法を提供し、当該方法は、オリジナル画像とノイズ付加画像を取得することであって、前記ノイズ付加画像は、前記オリジナル画像にノイズを加えた後の画像であり、前記オリジナル画像においてノイズのあるピクセルの数はプリセットの数より少ない、取得することと、前記オリジナル画像及び前記ノイズ付加画像をそれぞれコーデックして、前記オリジナル画像に対応する第１の復号画像、及び前記ノイズ付加画像に対応する第２の復号画像を取得することと、前記オリジナル画像と前記第１の復号画像に基づいて、前記第１の復号画像と前記オリジナル画像との間の第１のピーク信号対雑音比ＰＳＮＲを取得することと、前記ノイズ付加画像と前記第２の復号画像に基づいて、前記第２の復号画像と前記ノイズ付加画像との間の第２のＰＳＮＲを取得することと、前記第１のＰＳＮＲ及び前記第２のＰＳＮＲを出力することと、を含む。

【0007】

本願の第２の態様によれば、画像処理装置を提供し、当該装置は、車両の、自動運転システムを実行する車載端末に適用される画像処理装置であって、取得モジュール、コーデックモジュール、及び出力モジュールを含み、前記取得モジュールは、オリジナル画像とノイズ付加画像を取得するために用いられ、ただし、前記ノイズ付加画像は、前記オリジナル画像にノイズを加えた後の画像であり、前記オリジナル画像においてノイズのあるピクセルの数はプリセットの数より少なく、前記コーデックモジュールは、前記オリジナル画像及び前記ノイズ付加画像をそれぞれコーデックして、前記オリジナル画像に対応する第１の復号画像、及び前記ノイズ付加画像に対応する第２の復号画像を取得するために用いられ、前記取得モジュールは、さらに、前記オリジナル画像と前記第１の復号画像に基づいて、前記第１の復号画像と前記オリジナル画像との間の第１のピーク信号対雑音比ＰＳＮＲを取得し、且つ、前記ノイズ付加画像と前記第２の復号画像に基づいて、前記第２の復号画像と前記ノイズ付加画像との間の第２のＰＳＮＲを取得するために用いられ、前記出力モジュールは、前記第１のＰＳＮＲ及び前記第２のＰＳＮＲを出力するために用いられる。

【0008】

本願の第３の態様によれば、電子機器を提供し、前記電子機器は、少なくとも１つのプロセッサと、前記少なくとも１つのプロセッサに通信接続されるメモリと、を含み、ただし、前記メモリには前記少なくとも１つのプロセッサによって実行可能な命令が記憶され、前記命令は、前記少なくとも１つのプロセッサが請求項１～９のいずれか一項に記載の画像処理方法を実行できるように、上記第１の態様のいずれかに記載の方法を実行させる。

【0009】

本願の第４の態様によれば、コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体を提供し、前記コンピュータ命令はコンピュータに上記第１の態様のいずれかに記載の方法を実行させるために用いられる。

【0010】

本願の第５の態様によれば、コンピュータプログラムを提供し、前記コンピュータプログラムは、コンピュータ可読記憶媒体に記憶され、電子機器の少なくとも１つのプロセッサは、前記コンピュータ可読記憶媒体から前記コンピュータプログラムを読み取ることができ、前記少なくとも１つのプロセッサは、前記コンピュータプログラムを実行することによって、前記電子機器に上記第１の態様のいずれかに記載の方法を実行させる。

【発明の効果】

【0011】

本願による技術手段は、画像とそれに対応するコーデック後の復号画像との間のＰＳＮＲが低いということの信頼できる原因を取得できないという技術的問題を解決し、自動運転車両の正常な運行を確保する。

【0012】

本明細書に記載の内容は、本願の実施例の主要な特徴又は重要な特徴を特定することを意図したものではなく、本願の範囲を限定することを意図したものでもないことを理解されたい。本願のその他の特徴は、以下の明細書によって容易に理解される。

【図面の簡単な説明】

【0013】

図面は、本実施形態をより良く理解するために使用され、本願の制限を構成するものではない。

【図1】本願の実施例にて提供される画像処理方法のフローチャート１である。

【図2】本願の実施例にて提供される画像処理方法のフローチャート２である。

【図3A】本願の実施例にて提供されるシステムアーキテクチャ図１である。

【図3B】本願の実施例にて提供されるシステムアーキテクチャ図２である。

【図4A】本願の実施例にて提供されるシステムアーキテクチャ図３である。

【図4B】本願の実施例にて提供されるシステムアーキテクチャ図４である。

【図5A】本願の実施例にて提供されるシステムアーキテクチャ図５である。

【図5B】本願の実施例にて提供されるシステムアーキテクチャ図６である。

【図6A】本願の実施例にて提供される第１のオリジナル画像の概略図である。

【図6B】本願の実施例にて提供される第１のオリジナル画像にソルトノイズを加えた後のノイズ付加画像の概略図である。

【図7】本願の実施例にて提供される第１のオリジナル画像にペッパーノイズを加えた後のノイズ付加画像の概略図である。

【図8】本願の実施例にて提供される第１のオリジナル画像にガウスノイズを加えた後のノイズ付加画像の概略図である。

【図9】本願の実施例にて提供される画像処理装置の構造概略図である。

【図10】本願の実施例の画像処理方法を実現するための電子機器のブロック図である。

【発明を実施するための形態】

【0014】

以下、図面を参照しながら本願の例示的な実施例を説明するが、この説明には、理解を容易にするために本願の実施例の様々な詳細事項が含まれており、それらは単なる例示的なものと見なされるべきである。したがって、当業者は、本願の範囲及び精神から逸脱することなく、ここで説明される実施例に対して様々な変更と修正を行うことができることを理解できる。同様に、わかりやすくかつ簡潔にするために、以下の説明では、周知の機能及び構造についての説明を省略する。

【0015】

本願は、画像処理の方法、装置、機器及び記憶媒体を提供し、画像処理分野における自動運転の分野に適用され、それにより、取得された画像とそれに対応するコーデック後の復号画像との間のＰＳＮＲが低いということの信頼できる原因を取得し、自動運転の正常な運行を確保するという目的を達成する。

【0016】

自動運転システムにおいて、カメラによって収集されたオリジナルビデオを圧縮符号化してから、ディスクに保存する必要がある。ただし、オリジナルビデオのオリジナル画像と、当該オリジナル画像を圧縮符号化してから復号した後に取得した復号画像との差異は、ピーク信号対雑音比（Ｐｅａｋ Ｓｉｇｎａｌ ｔｏ Ｎｏｉｓｅ Ｒａｔｉｏ、ＰＳＮＲと略称する）によって特徴付けられ、オリジナル画像とそれに対応する復号画像との間のＰＳＮＲ値が低いほど、オリジナル画像とそれに対応する復号画像との差異が大きいことを意味する。

【0017】

現在、検出により、オリジナルビデオの一部のオリジナル画像とそれに対応するコーデック後の復号画像との間のＰＳＮＲが、第１のプリセットの閾値より小さい値であることが分かり、これは、当該一部のオリジナル画像をコーデックして取得した復号画像が深刻な損傷を受けていることを示し、復号画像の品質が自動運転の正常な運行に直接に影響するため、一部のオリジナル画像とそれに対応する復号画像との間のＰＳＮＲが低い原因を取得することは特に重要である。しかし、現在提供される、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低い原因は、いずれも推測にすぎず、理論的根拠がない。例えば、対応するＰＳＮＲが第１のプリセットの閾値より小さい全ての画像を取得して、共通点を観察し、詳細な検出により分かるように、対応するＰＳＮＲが第１のプリセットの閾値より小さい画像は、いずれもオリジナル画像のノイズが大きいという問題があり、そのため、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低いと推測する原因は次のとおりである。コーデックアルゴリズムに問題があることにより、画像ノイズが大きい場合、画像に対応する復号画像と当該画像との差異が大きく、即ち、画像とそれに対応する復号画像との間のＰＳＮＲが低い。しかし、この原因はただの推測にすぎず、理論的根拠はない。したがって、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因を取得する方法は、早急に解決する必要のある技術的な問題である。

【0018】

本願は、上記の技術的問題を解決するために、画像処理方法を提供し、明らかなノイズのないオリジナル画像とそれに対応する復号画像との間のＰＳＮＲを取得し、且つ、当該オリジナル画像にノイズを加えた後のノイズ付加画像とそれに対応する復号画像との間のＰＳＮＲを取得することにより、当該２つのＰＳＮＲに基づいて、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因を決定することができる。以下、具体的な実施例を用いて本願の画像処理方法について説明する。

【0019】

図１は、本願の実施例にて提供される画像処理方法のフローチャート１であり、本実施例の方法は自動運転システムを実行する車載端末に適用され、図１に示すように、本実施例の方法はステップＳ１０１～Ｓ１０５を含む。

【0020】

ステップＳ１０１、車載端末が第１のオリジナル画像とノイズ付加画像を取得し、ただし、当該ノイズ付加画像は、当該第１のオリジナル画像にノイズを加えた後の画像であり、第１のオリジナル画像においてノイズのあるピクセルの数はプリセットの数より少ない。

【0021】

即ち、本ステップの第１のオリジナル画像は、明らかなノイズのない画像である。

【0022】

ここで、当該第１のオリジナル画像と当該ノイズ付加画像のフォーマットは、ＹＵＶフォーマットであってもよい。

【0023】

ステップＳ１０２、車載端末は当該第１のオリジナル画像及び当該ノイズ付加画像をそれぞれコーデックして、当該第１のオリジナル画像に対応する第１の復号画像、及び当該ノイズ付加画像に対応する第２の復号画像を取得する。

【0024】

本実施例では、画像をコーデックするステップは、画像を圧縮符号化してから当該画像を解凍することを意味し、解凍は復号のことである。例えば、当該第１のオリジナル画像に対応する第１の復号画像とは、第１のオリジナル画像を圧縮符号化してから復号することで取得する画像を言い、当該ノイズ付加画像に対応する第２の復号画像とは、ノイズ付加画像を圧縮符号化してから復号することで取得した画像を言う。

【0025】

本実施例において、現在、画像をコーデックする方法は現在の一般的な方法であり、例えば、Ｈ２６５プロトコルに基づくビデオのコーデック方法がある。

【0026】

ステップＳ１０３、車載端末は当該第１のオリジナル画像及び当該第１の復号画像に基づいて、当該第１のオリジナル画像と当該第１の復号画像との間の第１のＰＳＮＲを取得する。

【0027】

ここで、現在、当該第１のオリジナル画像と当該第１の復号画像との間のＰＳＮＲを取得する方法は現在の一般的な方法であり、ここでは詳細な説明を省略する。

【0028】

ステップＳ１０４、車載端末は当該ノイズ付加画像及び当該第２の復号画像に基づいて、当該ノイズ付加画像と当該第２の復号画像との間の第２のＰＳＮＲを取得する。

【0029】

ここで、現在、当該ノイズ付加画像と当該第２の復号画像との間のＰＳＮＲを取得する方法は一般的な方法であり、ここでは詳細な説明を省略する。

【0030】

ステップＳ１０５、車載端末は当該第１のオリジナル画像と当該第１の復号画像との間の第１のＰＳＮＲ、及び当該ノイズ付加画像と当該第２の復号画像との間の第２のＰＳＮＲを出力する。

【0031】

１つの方式では、車載端末は、車載端末のディスプレイが第１のＰＳＮＲ及び第２のＰＳＮＲを表示するように、当該第１のＰＳＮＲ及び当該第２のＰＳＮＲを車載端末のディスプレイに出力することが可能である。

【0032】

別の方式では、車載端末は、他の機器が当該第１のＰＳＮＲ及び当該第２のＰＳＮＲを表示するように、当該第１のＰＳＮＲ及び当該第２のＰＳＮＲを、ディスプレイを備えた他の機器に出力することが可能である。他の機器は、端末機器又はサーバであってもよい。

【0033】

本実施例では、第１のオリジナル画像と第１のオリジナル画像に対応する第１の復号画像との間の第１のＰＳＮＲ、及び、ノイズ付加画像と当該ノイズ付加画像に対応する第２の復号画像との間の第２のＰＳＮＲを取得し、第１のオリジナル画像はノイズの少ない画像であるため、ノイズの干渉を受けずに、第１のＰＳＮＲに基づいて、コーデックアルゴリズムが、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低くなる原因であるか否かを決定できる。一部の画像とそれに対応する復号画像との間のＰＳＮＲが低くなる原因が、コーデックアルゴリズムではないと決定した場合、第２のＰＳＮＲ値に基づいて、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低くなる原因を決定でき、例えば、第２のＰＳＮＲ値が小さい場合、車載端末がノイズ付加画像を圧縮符号化する前にノイズ低減処理を行ったことを決定できる。即ち、本実施例の方法によって、第１のＰＳＮＲ及び第２のＰＳＮＲの２つの客観的実験データを取得し、当該２つの客観的実験データを分析することで、画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因を取得することができ、それにより自動運転の正常な運行を保証する。

【0034】

以下、第１のＰＳＮＲ及び第２のＰＳＮＲのいくつかの具体的な例を挙げて、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因を決定するプロセスについて説明する。

【0035】

１つの具体的な例において、表１－１に示すように、第１のオリジナル画像は画像１であり、第１のオリジナル画像とそれに対応する第１の復号画像との間の第１のＰＳＮＲは４０．５８２であり、第１のオリジナル画像にソルトノイズを加えた後のノイズ付加画像１１とそれに対応する第２の復号画像との間の第２のＰＳＮＲは１７．６０９である。又は、表１－２に示すように、第１のオリジナル画像は画像２であり、第１のオリジナル画像と第１のオリジナル画像に対応する第１の復号画像との間の第１のＰＳＮＲは３８．３３７であり、第１のオリジナル画像にソルトノイズを加えた後のノイズ付加画像２１とノイズ付加画像２１に対応する第２の復号画像との間の第２のＰＳＮＲは１８．２６１である。

【0036】

【0037】

【0038】

別の具体的な例において、表２－１に示すように、第１のオリジナル画像は画像１であり、第１のオリジナル画像とそれに対応する第１の復号画像との間の第１のＰＳＮＲは４０．５８２であり、第１のオリジナル画像にペッパーノイズを加えた後のノイズ付加画像１２とノイズ付加画像１２に対応する第２の復号画像との間の第２のＰＳＮＲは２９．０６４である。又は、表２－２に示すように、第１のオリジナル画像は画像２であり、第１のオリジナル画像と第１のオリジナル画像に対応する第１の復号画像との間の第１のＰＳＮＲは３８．３３７であり、第１のオリジナル画像にペッパーノイズを加えた後のノイズ付加画像２２とノイズ付加画像２２に対応する第２の復号画像との間の第２のＰＳＮＲは２６．６３２である。

【0039】

【0040】

【0041】

さらなる具体的な例において、表３－１に示すように、第１のオリジナル画像は画像１であり、第１のオリジナル画像とそれに対応する第１の復号画像との間の第１のＰＳＮＲは４０．５８２であり、第１のオリジナル画像にガウスノイズを加えた後のノイズ付加画像１３と、ノイズ付加画像１３に対応する第２の復号画像との間の第２のＰＳＮＲは２０．６２８である。又は、表３－２に示すように、第１のオリジナル画像は画像２であり、第１のオリジナル画像と第１のオリジナル画像に対応する第１の復号画像との間の第１のＰＳＮＲは３８．３３７であり、第１のオリジナル画像にガウスノイズを加えた後のノイズ付加画像２３とノイズ付加画像２３に対応する第２の復号画像との間の第２のＰＳＮＲは２０．０９４である。

【0042】

【0043】

【0044】

第２のプリセットの閾値が３５である場合、上記のいくつかの例から分かるように、第１のオリジナル画像と、第１のオリジナル画像に対応する第１の復号画像との間の第１のＰＳＮＲはいずれも高く、かつ、第２のプリセットの閾値より大きく、これは、第１のオリジナル画像とそれに対応する第１の復号画像との差異が小さいことを示し、即ち、当該コーデックアルゴリズムによって、第１のオリジナル画像の圧縮及び解凍プロセスにおいて第１のオリジナル画像のオリジナル情報の損失がわずかにすると、コーデックアルゴリズムは問題がないため、第２のＰＳＮＲが低い原因ではなく、即ち、それは一部の画像とそれに対応する復号画像との間のＰＳＮＲが低い原因でもない。

【0045】

第２のＰＳＮＲは、第１のＰＳＮＲより明らかに小さいため、コーデックアルゴリズムに問題がない場合、理論上では、ノイズ付加画像とそれに対応する第２の復号画像との差異も大きくないが、第２のＰＳＮＲが第１のＰＳＮＲより明らかに低いことから分かるように、ノイズ付加画像とそれに対応する第２の復号画像との差異が大きいため、車載端末がノイズ付加画像を圧縮符号化する前にノイズ低減処理を行ったことを決定でき、これは、ノイズ低減処理されたノイズ付加画像とノイズ付加画像との差異が大きいと、ノイズ低減処理されたノイズ付加画像をコーデックして取得した第２の復号画像とノイズ付加画像との差異も大きくなるためであり、その結果、ノイズ付加画像と当該第２の復号画像との間の第２のＰＳＮＲが低くなり、即ち、車載端末がノイズ付加画像を圧縮符号化する前にノイズ低減処理を行ったことが、第２のＰＳＮＲが低い原因であり、つまり、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低い原因は、車載端末が当該画像を圧縮符号化する前にノイズ低減処理を行ったことである。当該原因は、第１のＰＳＮＲが第２のプリセットの閾値より高いこともサポートし、分析結果は以下のとおりである。第１のオリジナル画像のノイズが小さく、車載端末が第１のオリジナル画像を圧縮符号化する前にノイズ低減処理を行い、ノイズ低減処理された第１のオリジナル画像と、第１のオリジナル画像との差異が非常に小さいため、コーデックアルゴリズムに問題がない場合、ノイズ低減処理された第１のオリジナル画像をコーデックして取得した第１の復号画像と、第１のオリジナル画像との差異も小さくなり、その結果、第１のＰＳＮＲが高くなる。そのため、車載端末が画像を圧縮符号化する前にノイズ低減処理を行ったことは、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低くなる信頼できる原因になる。

【0046】

一部の画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因の取得効率を向上させるために、本実施例は、前の実施例を基に改良した。図２は、本願の実施例にて提供される画像処理方法のフローチャート２であり、図２に示すように、本実施例は、前の実施例に加え、ステップＳ２０１～Ｓ２０２をさらに含む。

【0047】

ステップＳ２０１、車載端末は、第１のオリジナル画像と第１のオリジナル画像に対応する復号画像との間の第１のＰＳＮＲ、及びノイズ付加画像と当該ノイズ付加画像に対応する第２の復号画像との間の第２のＰＳＮＲに基づいて、第２のＰＳＮＲが低い原因を取得する。

【0048】

具体的な一実施形態において、車載端末は、プリセットの分析ルール、第１のＰＳＮＲ、及び第２のＰＳＮＲに基づいて、第２のＰＳＮＲが低い原因を取得する。分析ルールは、例えば、以下の（１）と（２）を含んでもよい。（１）、第１のＰＳＮＲが第２のプリセットの閾値より大きく、かつ、第２のＰＳＮＲが第１のＰＳＮＲより低く、また第２のＰＳＮＲが低い原因がコーデックアルゴリズムではないと決定した場合、第２のＰＳＮＲが低い原因は、車載端末が画像を圧縮符号化する前にノイズ低減処理を行ったことである。（２）、第１のＰＳＮＲが第２のプリセットの閾値より小さい場合、第２のＰＳＮＲが低い原因のうちの１つは、コーデックアルゴリズムが適用できないことであると決定する。ただし、プリセットの分析ルールは正しい理論に基づいて得られたものである。

【0049】

ステップＳ２０２、車載端末は、第２のＰＳＮＲが低い原因を指示するための指示情報を出力する。

【0050】

１つの方式では、車載端末は、車載端末のディスプレイが指示情報を表示するように、当該指示情報を車載端末のディスプレイに出力することが可能である。

【0051】

別の方式では、車載端末は、他の機器が当該指示情報を表示するように、当該指示情報をディスプレイを備えた他の機器に出力することが可能である。他の機器は、端末機器又はサーバであってもよい。

【0052】

本実施例では、車載端末は一部の画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因を取得し、人間による分析は必要でなく、一部の画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因の取得効率を向上させる。

【0053】

以下、具体的な実施例を用いて、図１又は図２に示す実施例について詳しく説明する。

【0054】

まず、具体的な実施例を用いて、「車載端末が第１のオリジナル画像とノイズ付加画像を取得する」ことについて説明する。

【0055】

「車載端末が第１のオリジナル画像とノイズ付加画像を取得する」ことは以下いくつかの方法を含むが、これらに限定されない。

【0056】

第１の方式では、車載端末が第１のオリジナル画像とノイズ付加画像を取得することは、他の機器からの第１のオリジナル画像を受信することと、第１のオリジナル画像にノイズを加えて、ノイズ付加画像を生成することと、を含む。ただし、他の機器はサーバ又は端末機器であり得る。第１のオリジナル画像は任意の撮影機器で撮影した画像であり得る。

【0057】

車載端末が第１のＰＳＮＲ及び第２のＰＳＮＲを他の機器に出力する場合、このような方式に対応するシステムアーキテクチャは図３Ａに示すとおりである。図３Ａに示すように、他の機器は、自動運転システムを実行する車載端末に第１のオリジナル画像を送信し、車載端末は第１のオリジナル画像を受信して、第１のオリジナル画像にノイズを加え、ノイズ付加画像を取得し、車載端末は第１のオリジナル画像及びノイズ付加画像に基づいて、第１のＰＳＮＲ及び第２のＰＳＮＲを取得し、第１のＰＳＮＲ及び第２のＰＳＮＲを他の機器に出力する。選択可能に、車載端末は図２に示す実施例における指示情報も他の機器に出力することができる。

【0058】

車載端末が第１のＰＳＮＲ及び第２のＰＳＮＲを車載端末のディスプレイに出力する場合、このような方式に対応するシステムアーキテクチャは図３Ｂに示すとおりである。図３Ｂに示すように、他の機器は、自動運転システムを実行する車載端末に第１のオリジナル画像を送信し、車載端末は第１のオリジナル画像を受信して、第１のオリジナル画像にノイズを加えてノイズ付加画像を取得し、車載端末は第１のオリジナル画像及びノイズ付加画像に基づいて、第１のＰＳＮＲ及び第２のＰＳＮＲを取得し、第１のＰＳＮＲ及び第２のＰＳＮＲを車載端末のディスプレイに出力する。選択可能に、車載端末は図２に示す実施例における指示情報も車載端末のディスプレイに出力することができる。

【0059】

このような方式により、他の機器と車載端末とのシグナリングオーバーヘッドを節約できる。

【0060】

第２の方式では、車載端末が第１のオリジナル画像とノイズ付加画像を取得することは、車載端末が他の機器からの第１のオリジナル画像及びノイズ付加画像を受信することを含む。ただし、他の機器はサーバ又は端末機器であり得る。第１のオリジナル画像は任意の撮影機器で撮影した画像であり得る。

【0061】

車載端末が第１のＰＳＮＲ及び第２のＰＳＮＲを他の機器に出力する場合、このような方式に対応するシステムアーキテクチャは図４Ａに示すとおりであり、図４Ａに示すように、他の機器は第１のオリジナル画像にノイズを加えて、ノイズ付加画像を取得し、自動運転システムを実行する車載端末に第１のオリジナル画像及びノイズ付加画像を送信し、車載端末は第１のオリジナル画像及びノイズ付加画像に基づいて、第１のＰＳＮＲ及び第２のＰＳＮＲを取得し、第１のＰＳＮＲ及び第２のＰＳＮＲを他の機器に出力する。選択可能に、車載端末は図２に示す実施例における指示情報も他の機器に出力することができる。他の機器が第１のオリジナル画像にノイズを加えてノイズ付加画像を取得する方法は、車載端末が第１のオリジナル画像にノイズを加えてノイズ付加画像を取得する方法と同じであってもよいことは理解できる。

【0062】

車載端末が第１のＰＳＮＲ及び第２のＰＳＮＲを車載端末のディスプレイに出力する場合、このような方式に対応するシステムアーキテクチャは図４Ｂに示すとおりである。図４Ｂに示すように、他の機器は第１のオリジナル画像にノイズを加えて、ノイズ付加画像を取得し、自動運転システムを実行する車載端末に第１のオリジナル画像及びノイズ付加画像を送信し、車載端末は第１のオリジナル画像及びノイズ付加画像に基づいて、第１のＰＳＮＲ及び第２のＰＳＮＲを取得し、第１のＰＳＮＲ及び第２のＰＳＮＲを車載端末のディスプレイに出力する。選択可能に、車載端末は図２に示す実施例における指示情報も車載端末のディスプレイに出力することができる。

【0063】

このような方式により、自動運転システムを実行する車載端末の消費電力を低減することができる。

【0064】

第３の方式では、車載端末が第１のオリジナル画像及びノイズ付加画像を取得することは、車載端末が第１のカメラからの第１のオリジナル画像を受信し、第１のカメラは、車載端末が配置された車両に設けられたカメラであることと、車載端末が第１のオリジナル画像にノイズを加えて、ノイズ付加画像を取得することと、を含む。つまり、第１のオリジナル画像は、車載端末が配置された車両に設けられたカメラで撮影した画像であり、具体的には、当該車両の自動運転の時に、当該車両に設けられたカメラによって収集されるビデオの１フレームの画像であってよい。

【0065】

車載端末が第１のＰＳＮＲ及び第２のＰＳＮＲを他の機器に出力する場合、このような方式に対応するシステムアーキテクチャは図５Ａに示すとおりであり、図５Ａに示すように、自動運転システムを実行する車載端末が配置された車両に設けられた第１のカメラは、第１のオリジナル画像を撮影した後、当該車載端末に第１のオリジナル画像を送信し、車載端末は第１のオリジナル画像を取得し、車載端末は第１のオリジナル画像にノイズを加えて、ノイズ付加画像を取得し、車載端末は第１のオリジナル画像及びノイズ付加画像に基づいて、第１のＰＳＮＲ及び第２のＰＳＮＲを取得し、第１のＰＳＮＲ及び第２のＰＳＮＲを他の機器に出力する。選択可能に、車載端末は図２に示す実施例における指示情報も他の機器に出力することもできる。

【0066】

車載端末が第１のＰＳＮＲ及び第２のＰＳＮＲを車載端末のディスプレイに出力する場合、このような方式に対応するシステムアーキテクチャは図５Ｂに示すとおりである。図５Ｂに示すように、自動運転システムを実行する車載端末が配置された車両に設けられた第１のカメラは、第１のオリジナル画像を撮影した後、当該車載端末に第１のオリジナル画像を送信し、車載端末は第１のオリジナル画像を取得し、車載端末は第１のオリジナル画像にノイズを加えて、ノイズ付加画像を取得し、車載端末は第１のオリジナル画像及びノイズ付加画像に基づいて、第１のＰＳＮＲ及び第２のＰＳＮＲを取得し、第１のＰＳＮＲ及び第２のＰＳＮＲを車載端末のディスプレイに出力する。選択可能に、車載端末は図２に示す実施例における指示情報も車載端末のディスプレイに出力することができる。

【0067】

このような方式により、他の機器と車載端末とのシグナリングオーバーヘッドを節約することができ、また第１のオリジナル画像及びノイズ付加画像の取得効率を向上させることもできる。

【0068】

本実施例は、車載端末が第１のオリジナル画像及びノイズ付加画像を取得することに関するいくつかの具体的な実現方式を提供した。

【0069】

次に、具体的な実施例を用いて、「車載端末が第１のオリジナル画像にノイズを加えて、ノイズ付加画像を生成する」ことの具体的な実現について説明する。

【0070】

画像を信号として見なすと、ノイズは干渉信号である。即ち、画像を関数と見なすことができ、ノイズ付加画像の関数を、オリジナル画像の関数にノイズ関数を加えた合計と見なすことができる。加えられたノイズが異なると、対応するノイズ関数も異なる。

【0071】

具体的には、「車載端末が第１のオリジナル画像にノイズを加えて、ノイズ付加画像を生成する」ことの具体的な実現は、以下のいくつかの方式を含むが、これらに限定されない。

【0072】

第１の方式では、車載端末が第１のオリジナル画像にノイズを加えて、ノイズ付加画像を生成することは、第１のオリジナル画像にソルトノイズを加えて、ノイズ付加画像を取得することを含む。

【0073】

ここで、第１のオリジナル画像にソルトノイズを加えることは、第１のオリジナル画像の少なくとも１つのピクセルをランダムに選択してソルトノイズを加え、即ち、ランダムに第１のオリジナル画像の少なくとも１つのピクセルを強度値が２５５である白点に変換することを含み得る。

【0074】

例示的には、図６Ａは、本願の実施例にて提供される第１のオリジナル画像の概略図であり、図６Ｂは、本願の実施例にて提供される第１のオリジナル画像にソルトノイズを加えた後のノイズ付加画像の概略図である。

【0075】

第２の方式では、車載端末が第１のオリジナル画像にノイズを加えてノイズ付加画像を生成することは、前記第１のオリジナル画像にペッパーノイズを加えて、ノイズ付加画像を取得することを含む。

【0076】

ここで、第１のオリジナル画像にペッパーノイズを加えることは、第１のオリジナル画像の少なくとも１つのピクセルをランダムに選択してペッパーノイズを加え、即ち、ランダムに第１のオリジナル画像の少なくとも１つのピクセルを強度値が０である黒点に変換することを含む。

【0077】

例示的に、図７は、本願の実施例にて提供される第１のオリジナル画像にペッパーノイズを加えた後のノイズ付加画像の概略図である。

【0078】

第３の方式では、車載端末が第１のオリジナル画像にノイズを加えて、ノイズ付加画像を生成することは、前記第１のオリジナル画像にソルトアンドペッパーノイズを加えて、ノイズ付加画像を取得することを含む。

【0079】

ここで、第１のオリジナル画像にソルトアンドペッパーノイズを加えることは、第１のオリジナル画像の少なくとも１つのピクセルをランダムに選択して強度値が０である黒点に変換することと、第１のオリジナル画像の少なくとも１つのピクセルをランダムに選択して強度値が２５５である白点に変換することと、を含む。

【0080】

第４の方式では、車載端末が第１のオリジナル画像にノイズを加えて、ノイズ付加画像を生成することは、第１のオリジナル画像にガウスノイズを加えて、ノイズ付加画像を取得することを含む。具体的には、車載端末がオリジナル画像の各々のピクセルにガウスノイズを加えて、ノイズ付加画像を取得することであってもよい。

【0081】

例示的に、図８は、本願の実施例にて提供される第１のオリジナル画像にガウスノイズを加えた後のノイズ付加画像の概略図である。

【0082】

上記のノイズ付加方式は例示に過ぎず、他のノイズ付加方法を用いてノイズ付加画像を取得することもでき、本実施例ではこれについて限定しない。

【0083】

本実施例は「車載端末が第１のオリジナル画像にノイズを加えて、ノイズ付加画像を生成する」に関するいくつかの具体的な実現を提供した。

【0084】

以上では、本願の画像処理方法について説明し、以下、本願に関連する画像処理装置について説明する。

【0085】

図９は、本願の実施例にて提供される画像処理装置の構造概略図であり、前記装置は車両の、自動運転システムを実行する車載端末に適用される。図９に示すように、本実施例に係る装置は、取得モジュール９０１と、コーデックモジュール９０２と、出力モジュール９０３と、を含む。

【0086】

取得モジュール９０１は、オリジナル画像とノイズ付加画像を取得するために用いられ、ただし、前記ノイズ付加画像は、前記オリジナル画像にノイズを加えた後の画像であり、前記オリジナル画像においてノイズのあるピクセルの数はプリセットの数より少ない。

【0087】

コーデックモジュール９０２は、前記オリジナル画像及び前記ノイズ付加画像をそれぞれコーデックして、前記オリジナル画像に対応する第１の復号画像、及び前記ノイズ付加画像に対応する第２の復号画像を取得するために用いられる。

【0088】

前記取得モジュール９０１は、さらに、前記オリジナル画像と前記第１の復号画像に基づいて、前記第１の復号画像と前記オリジナル画像との間の第１のピーク信号対雑音比ＰＳＮＲを取得し、且つ、前記ノイズ付加画像と前記第２の復号画像に基づいて、前記第２の復号画像と前記ノイズ付加画像との間の第２のＰＳＮＲを取得するために用いられる。

【0089】

出力モジュール９０３は、前記第１のＰＳＮＲ及び前記第２のＰＳＮＲを出力するために用いられる。

【0090】

選択可能に、前記取得モジュール９０１は、具体的には、前記オリジナル画像及び前記ノイズ付加画像を受信するために用いられる。

【0091】

選択可能に、前記取得モジュール９０１は、具体的には、前記オリジナル画像を受信し、前記オリジナル画像にノイズを加えて、前記ノイズ付加画像を生成するために用いられる。

【0092】

選択可能に、前記取得モジュール９０１は、具体的には、前記オリジナル画像の少なくとも１つのピクセルをランダムに選択してソルトノイズ又はペッパーノイズを加えて、前記ノイズ付加画像を取得するために用いられる。

【0093】

選択可能に、前記取得モジュール９０１は、具体的には、前記オリジナル画像の少なくとも１つの第１のピクセルをランダムに選択してソルトノイズを加え、前記オリジナル画像の少なくとも１つの第２のピクセルをランダムに選択してペッパーノイズを加えて、前記ノイズ付加画像を取得するために用いられる。

【0094】

選択可能に、前記取得モジュール９０１は、具体的には、前記オリジナル画像の各々のピクセルにガウスノイズを加えて、前記ノイズ付加画像を取得するために用いられる。

【0095】

選択可能に、前記第１のＰＳＮＲがプリセットの閾値より大きく、かつ、前記第１のＰＳＮＲが前記第２のＰＳＮＲより大きく、前記取得モジュール９０１は、さらに、第１のＰＳＮＲ及び前記第２のＰＳＮＲに基づいて、前記第２のＰＳＮＲが低い原因を取得するために用いられ、前記出力モジュール９０３は、さらに、前記第２のＰＳＮＲが低い原因を指示するための指示情報を出力するために用いられる。

【0096】

選択可能に、前記オリジナル画像は、前記車両の自動運転の時に、前記車両に設けられたカメラによって収集されるビデオの１フレームの画像である。

【0097】

選択可能に、前記オリジナル画像のフォーマットは、ＹＵＶフォーマットである。

【0098】

本実施例の装置は、上記の方法の実施例の技術的解決手段を実行するために用いられ、その実現原理と技術的効が類似するため、ここでは詳細な説明を省略する。

【0099】

本願の実施例によれば、本願は、電子機器及び読み取り可能な記憶媒体をさらに提供する。

【0100】

図１０に示すように、本願の実施例による画像処理方法を実現するための電子機器のブロック図である。電子機器は、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、メインフレームコンピュータ、及びその他の適切なコンピュータなどの様々な形態のデジタルコンピュータを表すことを意図している。電子機器は、例えば、パーソナルデジタルアシスタント、携帯電話、スマートフォン、ウェアラブルデバイス、他の類似するコンピューティングデバイスなどの様々な形態のモバイルデバイスを表すこともできる。本明細書に示されるコンポーネント、それらの接続と関係、及びそれらの機能は単なる例であり、本明細書の説明及び／又は要求される本願の実現を制限する意図したものではない。

【0101】

図１０に示すように、当該電子機器は、１つ又は複数のプロセッサ１００１と、メモリ１００２と、高速インターフェース及び低速インターフェースを含む各コンポーネントを接続するためのインターフェースと、を含む。各コンポーネントは、異なるバスを介して互いに接続され、共通のマザーボードに取り付けられるか、又は必要に応じて他の方式で取り付けられることができる。プロセッサは、電子機器内で実行される命令を処理することができ、当該命令は、外部入力／出力装置（例えば、インターフェースに結合されたディスプレイデバイスなど）にＧＵＩのグラフィック情報を表示するために、メモリ内又はメモリ上に格納されている命令を含む。他の実施形態では、複数のプロセッサ及び／又は複数のバスを、必要に応じて、複数のメモリと一緒に使用することができる。同様に、複数の電子機器を接続することができ、各機器は一部の必要な操作（例えば、サーバアレイ、ブレードサーバのグループ、又はマルチプロセッサシステムとする）を提供することができる。図１０では、１つのプロセッサ１００１を例とする。

【0102】

メモリ１００２は、本願にて提供される非一時的なコンピュータ読み取り可能な記憶媒体である。前記メモリには、少なくとも１つの前記プロセッサが本願にて提供されるスクリーン画像処理方法を実行するように、前記少なくとも１つのプロセッサによって実行可能な命令が格納されている。本願の非一時的なコンピュータ読み取り可能な記憶媒体には、コンピュータに本願にて提供される画像処理方法を実行させるためのコンピュータ命令が格納されている。

【0103】

メモリ１００２は、非一時的なコンピュータ読み取り可能な記憶媒体として、本願の実施例における画像処理方法に対応するプログラム命令／モジュール（例えば、図９に示す取得モジュール９０１、コーデックモジュール９０２及び出力モジュール９０３）のような非一時的なソフトウェアプログラム、非一時的なコンピュータ実行可能なプログラム及びモジュールを格納することができる。プロセッサ１００１は、メモリ１００２に格納されている非一時的なソフトウェアプログラム、命令、及びモジュールを実行することによって、サーバの様々な機能アプリケーション及びデータ処理を実行し、すなわち、上記方法の実施例におけるスクリーン画像処理方法を実現する。

【0104】

メモリ１００２は、プログラム記憶領域及びデータ記憶領域を含むことができ、ただし、プログラム記憶領域は、オペレーティングシステム、及び少なくとも１つの機能に必要なアプリケーションプログラムを格納することができ、データ記憶領域は、画像処理の電子機器の使用にしたがって作成されたデータなどを格納することができる。また、メモリ１００２は、高速ランダムアクセスメモリを含むことができ、さらに、例えば少なくとも１つの磁気ディスクストレージデバイス、フラッシュメモリデバイス、又は他の非一時的なソリッドステートストレージデバイスなどの非一時的なメモリを含むことができる。一部の実施例では、メモリ１００２は、プロセッサ１００１に対して遠隔に設置されたメモリを選択的に含んでもよく、これらの遠隔メモリは、ネットワークを介して画像処理の電子機器に接続されることができる。上記のネットワークの例には、インターネット、イントラネット、ローカルエリアネットワーク、モバイル通信ネットワーク、及びそれらの組み合わせを含むが、これらに限定されない。

【0105】

画像処理方法の電子機器は、入力装置１００３と出力装置１００４とをさらに含んでもよい。プロセッサ１００１、メモリ１００２、入力装置１００３及び出力装置１００４は、バス又は他の方式を介して接続することができ、図１０では、バスを介して接続することを例とする。

【0106】

入力装置１００３は、入力された数字又はキャラクター情報を受信すること、画像処理の電子機器のユーザ設定及び機能制御に関連するキー信号入力を生成することができ、例えば、タッチスクリーン、キーパッド、マウス、トラックパッド、タッチパッド、ディスプレイデバイス、１つ又は複数のマウスボタン、トラックボール、ジョイスティックなどの入力装置である。出力装置１００４は、ディスプレイデバイス、補助照明装置（例えば、ＬＥＤ）、触覚フィードバックデバイス（例えば、振動モータ）などを含んでもよい。当該ディスプレイデバイスは、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイ、及びプラズマディスプレイを含んでもよいが、これらに限定されない。一部の実施形態では、ディスプレイデバイスはタッチスクリーンであり得る。

【0107】

本明細書で説明されるシステム及び技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、特定用途向けＡＳＩＣ（特定用途向け集積回路）、コンピュータハードウェア、ファームウェア、ソフトウェア、及び／又はそれらの組み合わせで実現することができる。これらの様々な実施形態は、１つ又は複数のコンピュータプログラムで実施され、当該１つ又は複数のコンピュータプログラムは、少なくとも１つのプログラマブルプロセッサを含むプログラマブルシステムで実行及び／又は解釈されることができ、当該プログラマブルプロセッサは専用又は汎用のプログラマブルプロセッサであってもよく、ストレージシステム、少なくとも１つの入力装置、及び少なくとも１つの出力装置からデータ及び命令を受信し、データ及び命令を当該ストレージシステム、少なくとも１つの入力装置、及び少なくとも１つの出力装置に伝送することができる。

【0108】

これらのコンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、又はコードとも呼ばれる）には、プログラマブルプロセッサの機械命令が含まれ、高レベルのプロセス及び／又はオブジェクト指向のプログラミング言語、及び／又はアセンブリ／機械言語でこれらのコンピュータプログラムを実施することができる。本明細書に使用されるような、「機械読み取り可能な媒体」及び「コンピュータ読み取り可能な媒体」という用語は、機械命令及び／又はデータをプログラマブルプロセッサに提供するための任意のコンピュータプログラム製品、機器、及び／又は装置（例えば、磁気ディスク、光ディスク、メモリ、プログラマブルロジック機器（ＰＬＤ））を指し、機械読み取り可能な信号である機械命令を受信するための機械読み取り可能な媒体を含む。「機械読み取り可能な信号」という用語は、プログラマブルプロセッサに機械命令及び／又はデータを提供するための任意の信号を指す。

【0109】

本開示の実施例の別の態様において、本開示の実施例はさらに、コンピュータプログラムをさらに提供し、前記コンピュータプログラムは、コンピュータ可読記憶媒体に記憶され、電子機器の少なくとも１つのプロセッサは、コンピュータ可読記憶媒体からコンピュータプログラムを読み取ることができ、少なくとも１つのプロセッサは、コンピュータプログラムを実行することによって、電子機器に上記実施例に記載の方法を実行させる。

【0110】

ユーザとのインタラクションを提供するために、コンピュータ上で本明細書に説明したシステム及び技術をコンピュータに実施することができ、当該コンピュータは、ユーザに情報を表示するための表示装置（例えば、ＣＲＴ（陰極線管）又はＬＣＤ（液晶ディスプレイ）モニタ）と、キーボード及びポインティングデバイス（例えば、マウスやトラックボール）とを有し、ユーザは、当該キーボード及び当該ポインティングデバイスによって、コンピュータに入力することが可能になる。他の種類の装置も、ユーザとのインタラクションを提供することができ、例えば、ユーザに提供されるフィードバックは、任意の形態のセンシングフィードバック（例えば、視覚的フィードバック、聴覚フィードバック、又は触覚フィードバック）であってもよく、そして、任意の形態（音響入力、音声入力、又は触覚入力を含む）でユーザからの入力を受信できる。

【0111】

本明細書に説明したシステム及び技術は、バックエンドコンポーネントを含むコンピューティングシステム（例えば、データサーバとする）、又はミドルウェアコンポーネントを含むコンピューティングシステム（例えば、アプリケーションサーバ）、又はフロントエンドコンポーネントを含むコンピューティングシステム（例えば、グラフィカルユーザインターフェース又はＷＥＢブラウザーを有するユーザコンピュータであり、ユーザは、当該グラフィカルユーザインターフェース又は当該ＷＥＢブラウザーを介して本明細書に説明したシステム及び技術の実施形態とインタラクションすることができる）、又はこのようなバックエンドコンポーネント、ミドルウェアコンポーネント、又はフロントエンドコンポーネントを含む任意の組み合わせコンピューティングシステム中で実施できる。任意の形態又は媒体のデジタルデータ通信（例えば、通信ネットワーク）を介してシステムのコンポーネントを相互に接続することができる。通信ネットワークの例は、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、及びインターネットを含む。

【0112】

コンピュータシステムは、クライアントとサーバとを含むことができる。クライアントとサーバは、通常、互いに遠く離れており、通信ネットワークを介して互いにインタラクションするのが一般的である。クライアントとサーバの関係は、対応するコンピュータで実行され、且つ互いにクライアント－サーバの関係を持つコンピュータプログラムによって生成される。

【0113】

本願の実施例の技術的解決手段によれば、本願の実施例では、第１のオリジナル画像と、第１のオリジナル画像に対応する第１の復号画像との間の第１のＰＳＮＲ、及びノイズ付加画像と、当該ノイズ付加画像に対応する第２の復号画像との間の第２のＰＳＮＲを取得し、第１のＰＳＮＲ及び第２のＰＳＮＲの２つの客観的実験データに基づいて、画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因を取得することができ、即ち、本願の実施例の方法によって、画像とそれに対応する復号画像との間のＰＳＮＲが低いということの信頼できる原因を取得でき、それにより自動運転の正常な運行を保証する。

【0114】

なお、上記の様々な形態のフローを使用して、ことを並べ替えたり、追加したり、削除したりすることができる。例えば、本願に記載の各工程は、本願に開示されている技術案が所望の結果を達成できる限り、並行に実施されてもよいし、順次実施されてもよいし、異なる順序で実施されてもよく、本明細書では、それについて限定しない。

【0115】

上記の具体的な実施形態は、本願の特許保護範囲に対する制限を構成するものではない。当業者にとって明らかなように、設計要件及び他の要因に応じて、様々な修正、組み合わせ、サブ組み合わせ、及び置換を行うことができる。本願の精神と原則の範囲内で行われる修正、同等の置換、及び改良であれば、本願の特許保護範囲に含まれるべきである。

【図1】

【図2】

【図3A】

【図3B】

【図4A】

【図4B】

【図5A】

【図5B】

【図6A】

【図6B】

【図7】

【図8】

【図9】

【図10】