特表2023-514340 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

青山学院大学 (神奈川県相模原市中央区淵野辺)

▶ 北京達佳互▲れん▼信息技術有限公司の特許一覧

特表2023-514340画像処理方法、電子機器、および記憶媒体

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2
3
4
5
6
7
8
9

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2023-04-05

(54)【発明の名称】画像処理方法、電子機器、および記憶媒体

(51)【国際特許分類】

G06T 3/00 20060101AFI20230329BHJP

G06T 7/70 20170101ALI20230329BHJP

H04N 23/60 20230101ALI20230329BHJP

【ＦＩ】

G06T3/00

G06T7/70 A

H04N23/60 500

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2022549506

(86)(22)【出願日】2020-11-30

(85)【翻訳文提出日】2022-08-17

(86)【国際出願番号】 CN2020132994

(87)【国際公開番号】W WO2021189927

(87)【国際公開日】2021-09-30

(31)【優先権主張番号】202010208723.6

(32)【優先日】2020-03-23

(33)【優先権主張国・地域又は機関】CN

(81)【指定国・地域】

(71)【出願人】

【識別番号】520230293

【氏名又は名称】北京達佳互▲れん▼信息技術有限公司

(74)【代理人】

【識別番号】100108453

【弁理士】

【氏名又は名称】村山靖彦

(74)【代理人】

【識別番号】100110364

【弁理士】

【氏名又は名称】実広信哉

(74)【代理人】

【識別番号】100133400

【弁理士】

【氏名又は名称】阿部達彦

(72)【発明者】

【氏名】▲劉▼ ▲瑩▼

【テーマコード（参考）】

5B057

5C122

5L096

【Ｆターム（参考）】

5B057BA02

5B057CA08

5B057CA12

5B057CA16

5B057CB08

5B057CB12

5B057CB16

5B057CC03

5B057CE11

5C122DA03

5C122DA09

5C122EA61

5C122FH05

5C122FH10

5C122FH12

5C122FH22

5C122FK24

5C122FK41

5C122HB01

5C122HB05

5L096AA06

5L096CA02

5L096DA02

5L096FA69

5L096GA51

(57)【要約】

画像処理方法、画像処理装置、電子機器、および記憶媒体を開示する。当該方法は、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、初期変化形態として、変化した前のターゲットオブジェクトの最後の変化形態を取得することと、上記の変化に対応するターゲット変化形態を取得することと、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、ターゲットオブジェクトをグラデーションで表示することと、を含み得る。当該スキームでは、オブジェクト識別結果の動的変化に基づいて、ターゲットオブジェクトに対して動的に適応する変化処理を行うことができ、ターゲットオブジェクトの初期変化形態からターゲット変化形態へのグラデーションプロセスによって、表示インタフェースに表示されるターゲットオブジェクトを初期変化形態からターゲット変化形態へ徐々に移行させることができる。

【特許請求の範囲】

【請求項1】

画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、前記ターゲットオブジェクトの初期変化形態として、変化した前の前記ターゲットオブジェクトの最後の変化形態を取得し、前記ターゲットオブジェクトは、変化処理のオブジェクトであることと、
前記ターゲットオブジェクトの前記変化に対応するターゲット変化形態を取得することと、
前記初期変化形態および前記ターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示することと、を含む、
画像処理方法。

【請求項2】

前記初期変化形態および前記ターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示することは、
前記初期変化形態およびターゲット変化形態に基づいて、前記ターゲットオブジェクトの変化幅を得て、前記変化幅は、前記ターゲットオブジェクトの変化形態の変化幅であることと、
前記変化幅に応じたグラデーション速度で、前記ターゲットオブジェクトを表示することと、を含む、
請求項１に記載の画像処理方法。

【請求項3】

前記初期変化形態およびターゲット変化形態に基づいて、前記ターゲットオブジェクトの変化幅を得ることは、
前記初期変化形態および前記ターゲット変化形態に基づいて、前記ターゲットオブジェクトのキーポイントの前記画像における初期位置およびターゲット位置をそれぞれ得て、前記キーポイントは、前記画像における前記ターゲットオブジェクトを変化処理するための画素点であることと、
前記初期位置とターゲット位置との距離に基づいて、前記変化幅を得ることと、を含む、
請求項２に記載の画像処理方法。

【請求項4】

プリセットされた前記ターゲットオブジェクトの変化時間閾値を取得することと、
前記変化幅および変化時間閾値に基づいて、変化速度閾値を得ることと、
前記変化速度閾値以下のグラデーション速度を、前記グラデーション速度として取得することと、をさらに含む、
請求項２に記載の画像処理方法。

【請求項5】

前記グラデーション速度は、前記変化速度閾値以下の一定値である請求項４に記載の画像処理方法。

【請求項6】

前記変化幅に応じたグラデーション速度で、前記ターゲットオブジェクトを表示することは、
前記初期形態から前記終了形態への前記ターゲットオブジェクトのグラデーションを表示するために、前記グラデーション速度で、前記ターゲットオブジェクトのキーポイントを、前記キーポイントの前記画像における初期位置から前記キーポイントの前記画像におけるターゲット位置へ徐々に移動させることを含み、ここで、前記キーポイントの前記画像における前記初期位置および前記ターゲット位置は、それぞれ前記初期変化形態および前記ターゲット変化形態に基づいて得られる請求項２に記載の画像処理方法。

【請求項7】

前記画像におけるターゲットオブジェクトのオブジェクト識別結果が変化することを確定することは、
前記画像におけるターゲットオブジェクトに対するオブジェクト識別結果を取得し、前記オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含むことと、
前記オブジェクト識別結果が、画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化し、または画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化したことに応答して、前記オブジェクト識別結果が変化したと判断することと、を含む、
請求項１に記載の画像処理方法。

【請求項8】

前記ターゲット変化形態は、前記オブジェクト識別結果の変化によってトリガーされた前記ターゲットオブジェクトを変化処理する最終的な変化形態である請求項１に記載の画像処理方法。

【請求項9】

前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されたものから前記画像において前記ターゲットオブジェクトが識別されなかったものに変化したことに応答して、前記ターゲット変化形態は、変化処理されていない前記ターゲットオブジェクトの形態であり、
前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されなかったものから前記画像において前記ターゲットオブジェクトが識別されたものに変化したことに応答して、前記ターゲット変化形態は、完全に変化処理された前記ターゲットオブジェクトの形態である、
請求項８に記載の画像処理方法。

【請求項10】

画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、前記ターゲットオブジェクトの初期変化形態として、変化した前の前記ターゲットオブジェクトの最後の変化形態を取得するために使用され、前記ターゲットオブジェクトは、変化処理のオブジェクトである初期形態取得モジュールと、
前記ターゲットオブジェクトの前記変化に対応するターゲット変化形態を取得するために使用されるターゲット形態取得モジュールと、
前記初期変化形態および前記ターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示するために使用されるオブジェクト表示モジュールと、を含む、
画像処理装置。

【請求項11】

前記オブジェクト表示モジュールは、
前記初期変化形態およびターゲット変化形態に基づいて、前記ターゲットオブジェクトの変化幅を得るために使用され、前記変化幅は、前記ターゲットオブジェクトの変化形態の変化幅である幅取得ユニットと、
前記変化幅に応じたグラデーション速度で、前記ターゲットオブジェクトを表示するために使用されるオブジェクト表示ユニットと、を含む、
請求項１０に記載の画像処理装置。

【請求項12】

前記幅取得ユニットは、さらに、前記初期変化形態および前記ターゲット変化形態に基づいて、前記ターゲットオブジェクトのキーポイントの前記画像における初期位置およびターゲット位置をそれぞれ得て、前記キーポイントは、前記画像における前記ターゲットオブジェクトを変化処理するための画素点であり、前記初期位置とターゲット位置との距離に基づいて、前記変化幅を得るために使用される請求項１１に記載の画像処理装置。

【請求項13】

前記オブジェクト表示ユニットは、プリセットされた前記ターゲットオブジェクトの変化時間閾値を取得し、前記変化幅および変化時間閾値に基づいて、変化速度閾値を得て、前記変化速度閾値以下のグラデーション速度を、前記グラデーション速度として取得するためにも使用される請求項１１に記載の画像処理装置。

【請求項14】

前記グラデーション速度は、前記変化速度閾値以下の一定値である請求項１３に記載の画像処理装置。

【請求項15】

前記オブジェクト表示ユニットは、さらに、前記初期形態から前記終了形態への前記ターゲットオブジェクトのグラデーションを表示するために、前記グラデーション速度で、前記ターゲットオブジェクトのキーポイントを、前記キーポイントの前記画像における初期位置から前記キーポイントの前記画像におけるターゲット位置へ徐々に移動させるために使用され、ここで、前記キーポイントの前記画像における前記初期位置および前記ターゲット位置は、それぞれ前記初期変化形態および前記ターゲット変化形態に基づいて得られる請求項１１に記載の画像処理装置。

【請求項16】

前記画像におけるターゲットオブジェクトに対するオブジェクト識別結果を取得するために使用され、前記オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含む結果取得モジュールと、
前記オブジェクト識別結果が、画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化し、または画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化したことに応答して、前記オブジェクト識別結果が変化したと判断するために使用される変化判断モジュールと、をさらに含む、
請求項１０に記載の画像処理装置。

【請求項17】

前記ターゲット変化形態は、前記オブジェクト識別結果の変化によってトリガーされた前記ターゲットオブジェクトを変化処理する最終的な変化形態である請求項１０に記載の画像処理装置。

【請求項18】

前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されたものから前記画像において前記ターゲットオブジェクトが識別されなかったものに変化したことに応答して、前記ターゲット変化形態は、変化処理されていない前記ターゲットオブジェクトの形態であり、前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されなかったものから前記画像において前記ターゲットオブジェクトが識別されたものに変化したことに応答して、前記ターゲット変化形態は、完全に変化処理された前記ターゲットオブジェクトの形態である請求項１７に記載の画像処理装置。

【請求項19】

プロセッサと、
前記プロセッサによって実行可能な命令を記憶するためのメモリと、を含み、
ここで、前記プロセッサは、前記命令を実行するときに以下のことを実現するように構成され、即ち、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、前記ターゲットオブジェクトの初期変化形態として、変化した前の前記ターゲットオブジェクトの最後の変化形態を取得し、前記ターゲットオブジェクトは、変化処理のオブジェクトであり、前記ターゲットオブジェクトの前記変化に対応するターゲット変化形態を取得し、前記初期変化形態および前記ターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示する、
電子機器。

【請求項20】

前記プロセッサは、具体的に、以下のことを実行するように構成され、即ち、前記初期変化形態およびターゲット変化形態に基づいて、前記ターゲットオブジェクトの変化幅を得て、前記変化幅は、前記ターゲットオブジェクトの変化形態の変化幅であり、前記変化幅に応じたグラデーション速度で、前記ターゲットオブジェクトを表示する請求項１９に記載の電子機器。

【請求項21】

前記プロセッサは、具体的に、以下のことを実行するように構成され、即ち、前記初期変化形態および前記ターゲット変化形態に基づいて、前記ターゲットオブジェクトのキーポイントの前記画像における初期位置およびターゲット位置をそれぞれ得て、前記キーポイントは、前記画像における前記ターゲットオブジェクトを変化処理するための画素点であり、前記初期位置とターゲット位置との距離に基づいて、前記変化幅を得る請求項２０に記載の電子機器。

【請求項22】

前記プロセッサは、さらに、以下のことを実行するように構成され、即ち、プリセットされた前記ターゲットオブジェクトの変化時間閾値を取得し、前記変化幅および変化時間閾値に基づいて、変化速度閾値を得て、前記変化速度閾値以下のグラデーション速度を、前記グラデーション速度として取得する請求項２０に記載の電子機器。

【請求項23】

前記グラデーション速度は、前記変化速度閾値以下の一定値である請求項２２に記載の電子機器。

【請求項24】

前記プロセッサは、具体的に、以下のことを実行するように構成され、即ち、前記初期形態から前記終了形態への前記ターゲットオブジェクトのグラデーションを表示するために、前記グラデーション速度で、前記ターゲットオブジェクトのキーポイントを、前記キーポイントの前記画像における初期位置から前記キーポイントの前記画像におけるターゲット位置へ徐々に移動させ、ここで、前記キーポイントの前記画像における前記初期位置および前記ターゲット位置は、それぞれ前記初期変化形態および前記ターゲット変化形態に基づいて得られる請求項２０に記載の電子機器。

【請求項25】

前記プロセッサは、さらに、以下のように構成され、即ち、前記画像におけるターゲットオブジェクトに対するオブジェクト識別結果を取得し、前記オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含み、前記オブジェクト識別結果が、画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化し、または画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化したことに応答して、前記オブジェクト識別結果が変化したと判断する請求項１９に記載の電子機器。

【請求項26】

前記ターゲット変化形態は、前記オブジェクト識別結果の変化によってトリガーされた前記ターゲットオブジェクトを変化処理する最終的な変化形態である請求項１９に記載の電子機器。

【請求項27】

前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されたものから前記画像において前記ターゲットオブジェクトが識別されなかったものに変化したことに応答して、前記ターゲット変化形態は、変化処理されていない前記ターゲットオブジェクトの形態であり、前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されなかったものから前記画像において前記ターゲットオブジェクトが識別されたものに変化したことに応答して、前記ターゲット変化形態は、完全に変化処理された前記ターゲットオブジェクトの形態である請求項２６に記載の電子機器。

【請求項28】

命令が電子機器のプロセッサによって実行されるときに、以下のことを電子機器に実行させることができ、即ち、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、前記ターゲットオブジェクトの初期変化形態として、変化した前の前記ターゲットオブジェクトの最後の変化形態を取得し、前記ターゲットオブジェクトは、変化処理のオブジェクトであり、前記ターゲットオブジェクトの前記変化に対応するターゲット変化形態を取得し、前記初期変化形態および前記ターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示する記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、２０２０年０３月２３日に中国特許庁に提出された出願番号２０２０１０２０８７２３.６、発明名称「画像処理方法、画像処理装置、電子機器、および記憶媒体」の中国特許出願の優先権を主張し、その全ての内容は参照により本開示に援用する。

【0002】

本開示は、画像処理の分野に関し、特に画像処理方法、画像処理装置、電子機器、および記憶媒体に関するものである。

【背景技術】

【0003】

画像処理技術の発展に伴い、画像を変化処理する技術が登場し、当該技術では、画像におけるターゲットオブジェクトを最適化して表示する効果を達成するために、処理すべき画像に含まれる顔部、腕などのターゲットオブジェクトを変化処理することができる。従来技術では、ターゲットオブジェクトを識別するキーポイントに過度に依存し、キーポイントが外れたり失われたりする場合、ターゲットオブジェクトに対する変化効果が直接に失われ、表示インタフェース上に処理されていないターゲットオブジェクトの画像が直接に表示され、ターゲットオブジェクトが再び出現する場合、現在のターゲットオブジェクト識別キーポイントに対して再び変化処理を行い、最終的な変化効果も直接に表示インタフェース上で再び有効になり、結果として、画面のちらつきを引き起こす。

【発明の概要】

【課題を解決するための手段】

【0004】

本開示は、関連技術において画像におけるターゲットオブジェクトに対する変化処理の効果が劣る問題を少なくとも解決するための画像処理方法、画像処理装置、電子機器、および記憶媒体に関する。本開示の技術案は、以下の通りである。

【0005】

本開示の実施例の第１側面によれば、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、前記ターゲットオブジェクトの初期変化形態として、前記変化した前の前記ターゲットオブジェクトの最後の変化形態を取得し、前記ターゲットオブジェクトは、変化処理のオブジェクトであることと、前記ターゲットオブジェクトの前記変化に対応するターゲット変化形態を取得することと、前記初期変化形態および前記ターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示することと、を含む画像処理方法に関する。

【0006】

本開示の実施例の第２側面によれば、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、前記ターゲットオブジェクトの初期変化形態として、前記変化した前の前記ターゲットオブジェクトの最後の変化形態を取得するために使用され、前記ターゲットオブジェクトは、変化処理のオブジェクトである初期形態取得モジュールと、前記ターゲットオブジェクトの前記変化に対応するターゲット変化形態を取得するために使用されるターゲット形態取得モジュールと、前記初期変化形態および前記ターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示するために使用されるオブジェクト表示モジュールと、を含む画像処理装置に関する。

【0007】

本開示の実施例の第３側面によれば、プロセッサと、前記プロセッサによって実行可能な命令を記憶するためのメモリと、を含み、ここで、前記プロセッサは、前記命令を実行することにより以下のことを実現するように構成され、即ち、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、前記ターゲットオブジェクトの初期変化形態として、変化した前の前記ターゲットオブジェクトの最後の変化形態を取得し、前記ターゲットオブジェクトは、変化処理のオブジェクトであり、前記ターゲットオブジェクトの前記変化に対応するターゲット変化形態を取得し、前記初期変化形態および前記ターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示する電子機器に関する。

【0008】

本開示の実施例の第４側面によれば、前記記憶媒体における命令が電子機器のプロセッサによって実行されるときに、上述したような画像処理方法を電子機器に実行させることができる記憶媒体に関する。

【0009】

本開示の実施例の第５側面によれば、コンピュータプログラムを含み、前記コンピュータプログラムは、読み取り可能な記憶媒体に記憶され、機器の少なくとも１つのプロセッサは、前記読み取り可能な記憶媒体から前記コンピュータプログラムを読み出して実行することにより、上述したような画像処理方法を機器に実行させるコンピュータプログラム製品に関する。

【0010】

上記の一般的な説明および後述の詳細な説明は、単なる例示的および説明的なものに過ぎず、本開示を限定するものではないことを理解すべきである。

【0011】

ここでの図面は、明細書に組み込まれ、本明細書の一部を構成し、本開示に適合する実施例を示し、明細書とともに本開示の原理を説明するために使用され、本開示を不当に限定するものではない。

【図面の簡単な説明】

【0012】

【図1】一実施例による画像処理方法の適用環境図である。

【図2】一実施例による画像処理方法のフローチャートである。

【図3】一実施例による画像処理方法の概略効果図である。

【図4】一実施例によるターゲットオブジェクトを表示する方法のフローチャートである。

【図5】一実施例による変化幅を取得する方法のフローチャートである。

【図6】一実施例によるグラデーション速度を取得する方法のフローチャートである。

【図7】一実施例による画像処理方法のフローチャートである。

【図8】一実施例による画像処理装置のブロック図である。

【図9】一実施例による電子機器の内部構造図である。

【発明を実施するための形態】

【0013】

以下、当業者に本開示の技術案をよりよく理解させるために、図面を参照して、本開示の実施例における技術案を明確かつ完全に説明する。

【0014】

なお、本開示の明細書および請求の範囲並びに上述の図面における用語「第１」、「第２」などは、必ずしも特定の順序または前後の順序を説明するためのものではなく、類似のオブジェクトを区別するためのものである。このように使用されたデータは、本明細書で説明された本開示の実施例が本明細書に図示または説明されたもの以外の順序で実施可能であるように、適切な場合には交換可能であることが理解されるべきである。以下、例示的な実施例で説明された実施形態は、本開示と一致する全ての実施形態を表していない。逆に、それらは、添付の特許請求の範囲に詳述された、本開示のいくつかの側面に一致する装置および方法の例にすぎない。

【0015】

本開示による画像処理方法は、図１に示された適用環境に適用されることができ、図１は、一実施例による画像処理方法の適用環境図であり、当該適用環境には端末１００が含まれ、当該端末１００は、様々なパーソナルコンピュータ、ノートブックコンピュータ、スマートフォン、タブレットコンピュータ、および携帯型ウェアラブルデバイスであってもよいが、これらに限定されない。

【0016】

端末１００は、その上に配置されたカメラによって収集されたユーザ１０の画像を使用し、当該画像に基づいてユーザ１０の顔部１１を変化処理することができ、例えば、収集された画像における人の顔部のキーポイントをもとに、液化変化処理を用いてユーザ１０の顔部１１に対応する画像を小顔補正処理することにより、端末１００がその表示インタフェース上に小顔補正処理された画像を表示するようにしてもよい。

【0017】

いくつかの実施例において、端末１００は、ユーザ１０の画像をリアルタイムで収集し、顔部を変化処理のターゲットオブジェクトとし、顔部を小顔補正処理することができ、端末１００は、小顔補正処理された第１画像１１１を表示することができ、当該第１画像１１１には、小顔補正処理された顔部１２が含まれていてもよい。一方、当該第１画像１１１に遮蔽物２０が現れると、第２画像１１２に示すように、遮蔽物２０は、ターゲットオブジェクトである顔部１２をある程度に遮蔽し、この結果、端末１００の顔部識別モデルが顔部１２を識別することができなく、この場合、関連技術では顔部１２に対する小顔補正効果が無効であり、表示インタフェースに第３画像１１３が直接に表示され、第３画像１１３における顔部１３は、小顔補正処理されていない顔部である。遮蔽物２０が第３画像１１３から除去されると、第４画像１１４に示すように、端末１００は、当該第４画像１１４において顔部１３を再識別することができ、この場合、関連技術では当該顔部１３を再び小顔補正処理し、その表示インタフェースに第５画像１１５が直接に表示され、当該第５画像１１５の顔部１２は、小顔補正処理されていない顔部である。このように、関連技術では人の顔部などのターゲットオブジェクトが画像に対して失われたり、再び出現したりする場合、画面のちらつきを引き起こし、ターゲットオブジェクトに対する美肌補正処理の効果が劣る。

【0018】

本開示による画像処理方法では、端末１００は、まず、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したかどうかを判断することができ、画像におけるターゲットオブジェクトに対するオブジェクト識別結果が変化した場合、ターゲットオブジェクトの初期変化形態として、変化した前のターゲットオブジェクトの最後の変化形態を取得し、当該ターゲットオブジェクトの当該変化に対応するターゲット変化形態も取得し、この後、端末１００は、その表示インタフェースに、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、ターゲットオブジェクトをグラデーションで表示することができる。

【0019】

いくつかの実施例において、本開示による画像処理方法では、端末１００は、第２画像１１２における顔部１２が遮蔽物２０によって遮蔽された場合、オブジェクト識別結果が変化したと判断し、即ち画像において顔部が識別されたものから第２画像１１２に示すように画像において顔部が識別されなかったものに変化し、これにより、端末１００は、変化した前の顔部１２の第１画像１１１における変化形態を当該顔部１２の初期変化形態とすることができ、当該初期変化形態は、小顔補正の最終形態であってもよく、小顔補正処理された前の顔部１２の原始形態をターゲット変化形態とすることができ、当該ターゲット変化形態は、第３画像１１３の顔部１３の変化形態に対応し、この場合、端末１００は、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、その表示インタフェースに顔部をグラデーションで表示することができ、即ち第２画像１１２の顔部１２の変化形態から第３画像１１３の顔部１３の変化形態へのグラデーションプロセスを表示する。

【0020】

第３画像１１３における遮蔽物２０が除去された場合、端末１００は、画像において顔部が識別されなかったものから第４画像１１４に示すように画像において顔部が識別されたものに変化し、これにより、端末１００は、変化した前の顔部１３の第３画像１１３における変化形態を当該顔部１３の初期変化形態とすることができ、当該初期変化形態は、小顔補正処理された前の顔部の原始形態であってもよく、小顔補正の最終形態をターゲット変化形態とすることができ、当該ターゲット変化形態は、第５画像１１５の顔部１２の変化形態に対応し、この場合、端末１００は、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、その表示インタフェースに顔部をグラデーションで表示することができ、即ち第４画像１１４の顔部１３の変化形態から第５画像１１５の顔部１２の変化形態へのグラデーションプロセスを表示することにより、人の顔部などのターゲットオブジェクトが画像において突然現れたり失われたりすることによる変化効果の急変による画面のちらつきを回避し、ターゲットオブジェクトの変化処理效果を最適化することができる。

【0021】

図２は、一実施例による画像処理方法のフローチャートであり、図２に示すように、当該画像処理方法は、図１に示された端末１００に適用することができる。

【0022】

Ｓ２０１において、画像におけるターゲットオブジェクトのに対するオブジェクト識別結果が変化した場合、ターゲットオブジェクトの初期変化形態として、変化した前のターゲットオブジェクトの最後の変化形態を取得する。

【0023】

いくつかの実施例において、端末１００は、リアルタイムで動画を撮影したり、生中継したりする際に、各フレームにおける画像を取得し、画像におけるターゲットオブジェクトを識別することができる。ここで、画像におけるターゲットオブジェクトとは、変化処理のオブジェクトを指し、例えば，当該ターゲットオブジェクトは、人の顔部、腕、目、または顎などであってもよい。

【0024】

端末１００が、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことを検出した場合、当該ターゲットオブジェクトの初期変化形態として、変化した前の当該ターゲットオブジェクトの最後の変化形態を取得する。ここで、当該初期変化形態は、変化処理されていない当該ターゲットオブジェクトの原始形態であってもよいし、完全に変化処理された当該ターゲットオブジェクトの最終形態であってもよいし、原始形態と最終形態との間にある中間形態であってもよい。例えば、変化した前に、当該ターゲットオブジェクトの最後の変化形態が原始形態である場合、端末１００は、原始形態を当該ターゲットオブジェクトの初期変化形態とし、変化した前に、当該ターゲットオブジェクトの最後の変化形態が最終形態である場合、端末１００は、最終形態をターゲットオブジェクトの初期変化形態とする。

【0025】

いくつかの実施例において、端末１００は、オブジェクト識別結果が変化したかどうかを判断することができる。まず、端末１００は、画像におけるターゲットオブジェクトに対するオブジェクト識別結果をリアルタイムで取得することができ、当該オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含み得る。端末１００は、顔部識別モデルなどのオブジェクト識別モデルによって、画像における顔部などの対応するターゲットオブジェクトを識別し、例えば画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものなどのオブジェクト識別結果を得ることができる。次に、端末１００が、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化したことを検出した場合、または、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化した場合、端末１００は、オブジェクト識別結果が変化したと判断することができる。

【0026】

ここで、端末１００が、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化したことを検出した場合、以下のことが分かり、即ち、端末１００は、本来、ターゲットオブジェクトが画像内にあることを識別できたが、その後、端末１００は、遮蔽などの要因によって、画像においてターゲットオブジェクトを識別できない可能性があり、この場合、端末１００は、オブジェクト識別結果が変化したと判断する。なお、端末１００が、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化したことを検出した場合、以下のことが分かり、即ち、端末１００は、本来、遮蔽などの要因によって、画像においてターゲットオブジェクトを識別できなかったが、その後、端末１００は、遮蔽物の除去などの要因によって、画像においてターゲットオブジェクトを再識別でき、この場合、端末１００は、オブジェクト識別結果が変化したと判断する。

【0027】

例えば、端末１００が人の顔部を撮影ターゲットとする場合、端末１００は、そのスクリーン上に撮影した人の顔部をリアルタイムで表示することができ、端末１００は、フレームごとの人の顔部の位置を追跡し、人の顔部のキーポイントをマークして美肌補正処理することができる。ここで、人が速く移動したり、急に頭を回転したり、急にスクリーン外に出たり、物体によって人の顔部が遮蔽されたりした場合、対応するフレーム画像は、実際に人の顔部のキーポイントを失い、即ち、端末１００は、対応するフレーム画像において人の顔部のキーポイントを識別できないため、得られたオブジェクト識別結果が、画像において人の顔部が識別されなかったものであり、例えば人の顔部がスクリーン外からスクリーン内に戻った場合、端末１００は、再び画像において人の顔部を検出することができ、端末１００によって得られたオブジェクト識別結果は、画像において人の顔部が識別されたものであり、オブジェクト識別結果が変化したと判断することができる。

【0028】

Ｓ２０２において、ターゲットオブジェクトの変化に対応するターゲット変化形態を取得する。

【0029】

いくつかの実施例において、端末１００は、ターゲットオブジェクトの変化に対応するターゲット変化形態を取得することができる。

【0030】

いくつかの実施例において、変化した前にターゲットオブジェクトの変化形態が変化処理されていない当該ターゲットオブジェクトの原始形態である場合、変化に対応するターゲット変化形態は、完全に変化処理された当該ターゲットオブジェクトの最終形態であり、変化した前にターゲットオブジェクトの変化形態が完全に変化処理された当該ターゲットオブジェクトの最終形態である場合、ターゲット変化形態は、変化処理されていない当該ターゲットオブジェクトの原始形態であり、変化した前にターゲットオブジェクトの変化形態が原始形態と最終形態との中間形態である場合、上記の変化前の中間形態に対応する還元形態をターゲット変化形態とすることができ、例えば、変化した前にターゲットオブジェクトの変化形態が原始形態から中間形態に変化した場合、当該上記の変化前の中間形態に対応する還元形態は、原始形態であり、即ち原始形態をターゲット変化形態とし、同様に、変化した前にターゲットオブジェクトの変化形態が最終形態から中間形態に変化した場合、当該上記の変化前の中間形態に対応する還元形態は、最終形態であり、即ち最終形態をターゲット変化形態とする。

【0031】

Ｓ２０３において、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、ターゲットオブジェクトをグラデーションで表示する。

【0032】

いくつかの実施例において、端末１００は、その表示インタフェースにターゲットオブジェクトをグラデーションで表示する。ここで、グラデーションは、初期形態および終了形態を有し、端末１００は、初期変化形態およびターゲット変化形態を取得した後、初期変化形態をグラデーションの初期形態とし、ターゲット変化形態を終了形態とし、ターゲットオブジェクトを当該初期形態からターゲット変化形態へのグラデーションとして表示することができる。

【0033】

図３は、一実施例による画像処理方法の概略効果図であり、第６画像３１１における顔部３０は、ターゲットオブジェクトとなり、当該顔部３０は、遮蔽物４０によって遮蔽され、この場合、端末１００は、当該顔部３０をグラデーションで表示する。当該顔部３０の当該第６画像３１１における初期変化形態が第１変化形態３１に示されていると仮定すると、当該第１変化形態３１は、完全に変化処理された当該顔部３０の最終形態であってもよく、当該第１変化形態３１における顔部３０が遮蔽物４０によって遮蔽された場合、端末１００は、第４変化形態３４をターゲット変化形態とし、当該ターゲット変化形態は、変化処理されていない当該顔部３０の原始形態であり、一方、第２変化形態３２および第３変化形態３３が原始形態と最終形態との間にある２つの可能性のある中間形態である場合、端末１００がターゲットオブジェクトを表示する際、グラデーションとは、第１変化形態３１から中間形態である第２変化形態３２および第３変化形態３３を順次に経るように、顔部３０を第４変化形態３４に徐々に移行させることであり、その逆も同様である。

【0034】

グラデーションプロセスでは、遮蔽物４０は除去され、端末１００は、人の顔部３０の変化形態を復元することができ、例えば、グラデーションプロセスが、端末１００が第１変化形態３１から中間形態である第２変化形態３２および第３変化形態３３を順次に経るように、顔部３０を第４変化形態３４に徐々に移行させることであり、顔部３０が第３変化形態３３にグラデーションしたと仮定する場合、遮蔽物４０は除去され、このとき、端末１００は、除去前の当該第３変化形態３３に対応する還元形態である第１変化形態３１をターゲット変化形態とし、第３変化形態３３自身を初期変化形態とし、顔部３０の第３変化形態３３から第１変化形態３１へのグラデーションを表示することができる。このようにして、人の顔部が画像から失われ、画像に再出現するなどの状況下でのグラデーション的な小顔補正を実現することができ、当該プロセスは、端末１００のユーザが明らかな変化を観察することができないように、連続的かつ比較的ゆっくりと変化するプロセスに制御されることができ、これにより、人の顔部などのターゲットオブジェクトの画像における動的変化に応じて変化効果の動的適応を行うことで、画面のちらつきを回避し、ターゲットオブジェクトが画像において突然現れたり失われたりすることによる変化効果の急変による画面のちらつきを回避し、人の顔部を美肌補正処理するシーンにおいて、人の顔部が画像において無から有へ、あるいは有から無への際に美肌補正処理するときに露見現象が発生することを回避し、変化処理效果を最適化することができる。

【0035】

上記の画像処理方法では、端末１００が、画像におけるターゲットオブジェクトに対するオブジェクト識別結果が変化したことを検出した場合、端末１００は、当該ターゲットオブジェクトの初期変化形態として、変化した前の当該ターゲットオブジェクトの最後の変化形態を取得し、且つ当該ターゲットオブジェクトの上記の変化に対応するターゲット変化形態を取得し、これにより、端末１００は、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、ターゲットオブジェクトをグラデーションで表示する。

【0036】

本開示の実施例のスキームでは、オブジェクト識別結果の動的変化に基づいて、ターゲットオブジェクトに対して動的に適応する変化処理を行うことができ、ターゲットオブジェクトの初期変化形態からターゲット変化形態へのグラデーションプロセスによって、端末１００の表示インタフェースに表示されるターゲットオブジェクトを初期変化形態からターゲット変化形態へ徐々に移行させることができ、ターゲットオブジェクトが画像において突然現れたり失われたりすることによる変化効果の急変による画面のちらつきを回避し、ターゲットオブジェクトの変化処理效果を最適化する。

【0037】

いくつかの実施例において、Ｓ２０２におけるターゲット変化形態は、オブジェクト識別結果の変化によってトリガーされたターゲットオブジェクトを変化処理する最終的な変化形態であってもよい。さらに、当該オブジェクト識別結果の変化が画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化した場合、ターゲット変化形態は、変化処理されていないターゲットオブジェクトの形態であり、オブジェクト識別結果の変化が画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化した場合、ターゲット変化形態は、完全に変化処理されたターゲットオブジェクトの形態である。

【0038】

人の顔部がターゲットオブジェクトであることを例に挙げると、顔部識別結果の変化が画像において人の顔部が識別されたものから画像において人の顔部が識別されなかったものに変化した場合、ターゲット変化形態は、小顔補正効果なし状態であってもよく、顔部識別結果の変化が画像において人の顔部が識別されなかったものから画像において人の顔部が識別されたものに変化した場合、ターゲット変化形態は、最終的な小顔補正効果状態であってもよい。

【0039】

図４は、一実施例によるターゲットオブジェクトを表示する方法のフローチャートであり、Ｓ２０３における初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示する。

【0040】

Ｓ４０１において、初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトの変化幅を得る。

【0041】

ここで、端末１００は、ターゲットオブジェクトの初期変化形態およびターゲット変化形態に基づいて、当該ターゲットオブジェクトの変化幅を得ることができ、当該変化幅とは、当該ターゲットオブジェクトの変化形態の変化幅を指す。

【0042】

Ｓ４０２において、変化幅に応じたグラデーション速度で、ターゲットオブジェクトを表示する。

【0043】

いくつかの実施例において、端末１００は、変化幅の大きさに応じて適切なグラデーション速度を確定することができる。一般的に、変化幅が大きいほど、グラデーション速度は、それに応じて大きくなり、変化幅が小さいほど、グラデーション速度は小さくなる。ここで、変化幅の大きさは、初期変化形態およびターゲット変化形態に関係する。

【0044】

図３を参照して説明し、以下の２つのケースについて分析する。ケース１として、初期変化形態が第１変化形態３１であり、ターゲット変化形態が第４変化形態３４であり、ケース２として、初期変化形態が第３変化形態３３であり、ターゲット変化形態が第１変化形態３１である。これに対して、ケース１に対応する変形幅は、ケース２に対応する変形幅より大きく、理由として、ケース１は、最終形態から原始形態に変形する必要があり、ケース２は、中間形態から最終形態に変化するだけでよい。このようにして、端末１００は、この２つの変化幅に対してそれぞれに対応するグラデーション速度を設定することができ、ケース１において設定されたグラデーション速度は、ケース２において設定されたグラデーション速度よりも若干速く、結果として、ターゲットオブジェクトが異なる初期変化形態にある場合、ターゲットオブジェクトのグラデーションプロセスを表示するために、対応する変化幅に応じて、対応するグラデーション速度を柔軟に適応させることができる。

【0045】

いくつかの実施例において、図５は、一実施例による変化幅を取得する方法のフローチャートであり、Ｓ４０１における初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトの変化幅を得ることは、以下のことを含み得る。

【0046】

Ｓ５０１において、初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトのキーポイントの画像における初期位置およびターゲット位置をそれぞれ得る。

【0047】

ここで、ターゲットオブジェクトのキーポイントは、画像におけるターゲットオブジェクトを変化処理するための画素点である。具体的な適用シーンでは、端末１００は、人の顔部などのターゲットオブジェクトのキーポイントを画像上で識別してマークすることができ、キーポイントによりターゲットオブジェクトに対して液化変化などの変形処理を行うことで、人の顔部に対する美肌補正などの変化効果を達成することができる。

【0048】

いくつかの実施例において、端末１００は、ターゲットオブジェクトの初期変化形態に基づいて、当該ターゲットオブジェクトのキーポイントの画像における初期位置を得て、当該ターゲットオブジェクトのターゲット変化形態に基づいて、当該ターゲットオブジェクトのキーポイントの画像におけるターゲット位置を得ることができる。

【0049】

Ｓ５０２において、初期位置とターゲット位置との距離に基づいて、変化幅を得る。

【0050】

いくつかの実施例において、端末１００は、ターゲットオブジェクトのキーポイントの画像における初期位置とターゲット位置との距離を、当該ターゲットオブジェクトの変化幅とすることができる。ここで、初期位置とターゲット位置との距離が大きいほど、ターゲットオブジェクトの変化幅が大きくなる場合、端末１００は、ターゲットオブジェクトに対して比較的大幅なグラデーション変化を行う必要があり、初期位置とターゲット位置との距離が小さいほど、ターゲットオブジェクトの変化幅が小さくなる場合、端末１００は、ターゲットオブジェクトに対して比較的小さい幅なグラデーション変化のみを行う必要がある。

【0051】

本開示の実施例のスキームでは、ターゲットオブジェクトの変化処理效果を最適化するために、ターゲットオブジェクトの変化幅を正確かつ効率的に確定することができる。

【0052】

いくつかの実施例において、図６は、一実施例によるグラデーション速度を取得する方法のフローチャートであり、上記のＳ５０２の変化幅に応じたグラデーション速度で、ターゲットオブジェクトを表示する前に、以下のことをさらに含み得る。

【0053】

Ｓ６０１において、プリセットされたターゲットオブジェクトの変化時間閾値を取得する。

【0054】

Ｓ６０２において、変化幅および変化時間閾値に基づいて、変化速度閾値を得る。

【0055】

Ｓ６０３において、変化速度閾値以下のグラデーション速度を、変化幅に応じたグラデーション速度として取得する。

【0056】

いくつかの実施例において、端末１００は、予め設定されたターゲットオブジェクトに対する変化時間閾値を取得することができる。ここで、当該変化時間閾値は、ターゲットオブジェクトのグラデーションプロセスの最長時間であってもよく、ターゲットオブジェクトのグラデーションプロセスが比較的連続し、且つターゲットオブジェクトが比較的ゆっくりと変化するように、ターゲットオブジェクトのグラデーション速度を制限するために使用されることができ、いくつかの実施例において、当該変化速度閾値を２秒に設定することができる。この後、端末１００は、変化幅および変化時間閾値に基づいて、変化速度閾値を得ることができる。端末１００は、変化幅と変化時間閾値との比を変化速度閾値とすることができる。例えば、変化幅は、ターゲットオブジェクトのキーポイントの画像における初期位置とターゲット位置との距離であってもよく、当該距離と変化速度閾値との比を変化速度閾値とすることができる。

【0057】

変化速度閾値を得た後、端末１００は、当該変化速度閾値に基づいて、適切なグラデーション速度を得ることができる。本開示の実施例では、ゆっくりとした速度でターゲットオブジェクトを初期変化形態からターゲット変化形態へグラデーションさせるために、端末１００が、変化速度閾値以下のグラデーション速度を変化幅に応じたグラデーション速度とすることができる。さらに、いくつかの実施例において、ターゲットオブジェクトを初期変化形態からターゲット変化形態へと等速にグラデーションさせ、さらにグラデーションプロセスをより連続的でわずかに変化させるために、ランプ速度が、上記の変化速度閾値以下の一定値であってもよく、グラデーション速度の設定を容易にするために、端末１００が、変化速度閾値を直接にグラデーション速度としてもよい。

【0058】

いくつかの実施例において、Ｓ４０２における変化幅に応じたグラデーション速度で、ターゲットオブジェクトを表示することは、

【0059】

初期形態から終了形態へのターゲットオブジェクトのグラデーションを表示するために、上記のグラデーション速度で、ターゲットオブジェクトのキーポイントを、当該キーポイントの画像における初期位置から当該キーポイントの当該画像におけるターゲット位置へ徐々に移動させることを含む。

【0060】

本開示の実施例は、主に端末１００が、ターゲットオブジェクトのキーポイントの画像における位置を移動させることにより、ターゲットオブジェクトの初期形態から終了形態へのグラデーションプロセスを実現するものである。当該ターゲットオブジェクトのキーポイントの画像における位置は、初期位置およびターゲット位置を含み、この２つの位置は、それぞれ初期変化形態およびターゲット変化形態に基づいて得られ、ここで、初期変化形態に基づいて初期位置を得ることができ、ターゲット変化形態に基づいてターゲット位置を得ることができる。

【0061】

本開示の実施例のスキームでは、ターゲットオブジェクトのキーポイントの画像における初期位置とターゲット位置との距離に基づいて、キーポイントが画像における初期位置からターゲット位置へ徐々に移動する漸進的な移動過程に対して適切なグラデーション速度を設定することができ、端末１００は、プリセットされたターゲットオブジェクトの変化時間閾値を取得し、距離と当該変化時間閾値との比をグラデーション速度とし、当該グラデーション速度でターゲットオブジェクトのキーポイントを画像における初期位置からターゲット位置へ徐々に移動させることにより、ターゲットオブジェクトの初期形態から終了形態へのグラデーションを実現することができる。

【0062】

図７は、一実施例による画像処理方法のフローチャートであり、前記画像処理方法では、図１に示された端末１００またはその類似装置を実行主体とすることができる。

【0063】

Ｓ７０１において、端末１００は、画像におけるターゲットオブジェクトに対するオブジェクト識別結果を取得する。

【0064】

いくつかの実施例において、ターゲットオブジェクトとは、変化処理のオブジェクトを指し、オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含む。

【0065】

Ｓ７０２において、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化した場合、または、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化した場合、端末１００は、オブジェクト識別結果が変化したと判断する。

【0066】

Ｓ７０３において、画像におけるターゲットオブジェクトに対するオブジェクト識別結果が変化した場合、端末１００は、ターゲットオブジェクトの初期変化形態として、変化した前のターゲットオブジェクトの最後の変化形態を取得する。

【0067】

Ｓ７０４において、端末１００は、ターゲットオブジェクトの変化に対応するターゲット変化形態を取得する。

【0068】

Ｓ７０５において、端末１００は、初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトのキーポイントの画像における初期位置およびターゲット位置をそれぞれ得る。

【0069】

いくつかの実施例において、キーポイントは、画像におけるターゲットオブジェクトを変化処理するための画素点である。

【0070】

Ｓ７０６において、端末１００は、初期位置とターゲット位置との距離に基づいて、変化幅を得る。

【0071】

ここで、端末１００は、初期位置とターゲット位置との距離を変化幅とすることができる。

【0072】

Ｓ７０７において、端末１００は、プリセットされたターゲットオブジェクトの変化時間閾値を取得する。

【0073】

Ｓ７０８において、端末１００は、変化幅および変化時間閾値に基づいて、変化速度閾値を得る。
端末１００は、変化幅と変化時間閾値との比を変化速度閾値とすることができる。

【0074】

Ｓ７０９において、変化速度閾値以下のグラデーション速度を、変化幅に応じたグラデーション速度として取得する。

【0075】

ここで、端末１００は、変化速度閾値をグラデーション速度とすることができる。

【0076】

Ｓ７１０において、端末１００は、初期形態から終了形態へのターゲットオブジェクトのグラデーションを表示するために、グラデーション速度で、ターゲットオブジェクトのキーポイントを、当該キーポイントの画像における初期位置から当該キーポイントの当該画像におけるターゲット位置へ徐々に移動させる。

【0077】

上記の画像処理方法では、ターゲットオブジェクトのキーポイントに応じて、オブジェクト識別結果の動的変化に基づいてターゲットオブジェクトに対して動的に適応する変化処理を行うことができ、ターゲットオブジェクトの変化処理效果を最適化する。

【0078】

本開示による画像処理方法をより明確に説明するために、当該方法を顔画像に対する美肌補正処理に適用することについて説明する。

【0079】

全体として、端末１００によってリアルタイムで動画を撮影したり、生中継したりする際に、端末１００は、各フレームにおける画像を取得し、画像における人の顔部のキーポイントを識別してマークし、キーポイントによって人の顔部を液化美肌補正処理し、小顔補正などの美肌補正の效果を達成することができる。ここで、人が速く移動したり、急に頭を回転したり、突然にスクリーンに対して出てから入ったりした場合、あるいは物体によって人の顔部が遮蔽されたりした場合、対応するフレーム画像は、実際に人の顔部のキーポイントを失い、通常の方法で処理する場合、人の顔部に対する小顔補正効果は、すでに無効になり、画像に顔部が現れたときに顔部が再び突然に小さくなり、動画には変顔の瞬間が録画され、生中継室では、視聴者は、この小顔補正の突然変異の過程を直接に視聴し、人の顔部に対する美肌補正の效果が比較的に悪く、ユーザの体験にも影響を与える。

【0080】

本開示による画像処理方法では、画像における人の顔部を美肌補正処理することができる。いくつかの実施例において、まず、画像に人の顔部がある場合、顔部識別と追跡によってフレームごとの人の顔部の位置を追跡し、人の顔部のキーポイントをマークして美肌補正処理することができる。

【0081】

次に、人の顔部が失われた場合、最後のフレームにおいて人の顔部があるキーポイントの位置を記録し、当該最後のフレームの小顔補正効果を保持して、この後、グラデーション処理を行うことができる。グラデーションの始点を人の顔部がある最後のフレームの小顔補正効果と定義し、グラデーションの終点を人の顔部の原始形態である小顔補正美肌補正の効果を完全に取り除いた時の形態と定義し、この後、始点から終点まで２秒間の等速グラデーション復元を行うことができ、グラデーション效果は、始点での人の顔部のキーポイントから終点での人の顔部のキーポイントへのピクセル移動を実現する。ここで、２秒は、最終的な小顔補正効果から人の顔部の原始形態にグラデーションしたプリセット最大時間であり、実際のシーンの必要に応じて当該時間を設定することができる。これにより、人の顔部のグラデーションの平均速度は、ｖ＝人の顔部のキーポイントの変化幅である人の顔部のキーポイントのピクセル間の距離/プリセット最大時間２秒として取得されることができる。ここで、始点から終点までの人の顔部のキーポイントの変化が比較的ゆっくりであるため、ユーザ一が一般的にこのプロセスを知覚することができず、そして、一般的にこの時間内に人の顔部が再び現れて、無から有への小顔補正が始まるので、実際の撮影中に人の顔部が現れたり消えたりする場合、二度とブレる現象が生じない。

【0082】

最後に、人の顔部のキーポイントが再び検出された場合、始点を人の顔部の現在の状態と定義し、ここで、当該状態は、小顔補正効果なしの人の顔部であってもよいし、小顔補正効果が徐々に消えていく中間状態であってもよい。人の顔部のキーポイントの現在位置を取得する。終点を小顔補正の最終状態と定義し、当該最終状態は、人の顔部の現在の状態とキーポイントの位置に基づいて小顔補正効果を計算することで得られることができ、始点から終点まで速度ｖの等速グラデーション変化を作る。

【0083】

これにより、ユーザーは、画面から人の顔部が失われ、また画面に人の顔部が現れるように、徐々に小顔補正を始め、これは、連続的かつ比較的ゆっくりと変化するプロセスであり、ユーザーが明らかな変化を観察することは困難であり、この美肌補正グラデーション論理処理により、人の顔部のキーポイントが無から有へ、あるいは有から無への時の小顔補正効果の露見現象を効果的に回避することができる。

【0084】

図２、図４～図７のフローチャートの各ステップは矢印の指示に従って順次に表示されるが、これらのステップは必ずしも矢印の指示に従って順次に実行されるわけではないことを理解すべきである。本明細書において明示的に説明しない限り、これらのステップの実行には厳密な順序制限はなく、これらのステップは他の順序で実行されてもよい。そして、図２、図４～図７のステップの少なくとも一部は、複数のステップまたは複数のステージを含み得て、これらのステップまたはステージは、必ずしも同じタイミングで実行されるとは限らないが、異なるタイミングで実行されてもよく、これらのステップまたはステージの実行順序も必ずしも順次に実行されるとは限らないが、他のステップまたは他のステップにおけるステップまたはステージの少なくとも一部と交代にまたは交互に実行されてもよい。

【0085】

図８は、一実施例による画像処理装置のブロック図である。図８を参照すると、当該画像処理装置８００は、初期形態取得モジュール８０１、ターゲット形態取得モジュール８０２、およびオブジェクト表示モジュール８０３を含む。

【0086】

初期形態取得モジュール８０１は、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことに応答して、ターゲットオブジェクトの初期変化形態として、変化した前のターゲットオブジェクトの最後の変化形態を取得するために使用され、ターゲットオブジェクトは、変化処理のオブジェクトである。

【0087】

ターゲット形態取得モジュール８０２は、ターゲットオブジェクトの変化に対応するターゲット変化形態を取得するために使用される。

【0088】

オブジェクト表示モジュール８０３は、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、ターゲットオブジェクトをグラデーションで表示するために使用される。

【0089】

いくつかの実施例において、オブジェクト表示モジュール８０３は、
初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトの変化幅を得るために使用され、変化幅は、ターゲットオブジェクトの変化形態の変化幅である幅取得ユニットと、
変化幅に応じたグラデーション速度で、ターゲットオブジェクトを表示するために使用されるオブジェクト表示ユニットと、を含む。

【0090】

いくつかの実施例において、幅取得ユニットは、さらに、初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトのキーポイントの画像における初期位置およびターゲット位置をそれぞれ得て、初期位置とターゲット位置との距離に基づいて、変化幅を得るために使用され、キーポイントは、画像におけるターゲットオブジェクトを変化処理するための画素点である。

【0091】

いくつかの実施例において、オブジェクト表示ユニットは、プリセットされたターゲットオブジェクトの変化時間閾値を取得し、変化幅および変化時間閾値に基づいて、変化速度閾値を得て、変化速度閾値以下のグラデーション速度を、前記グラデーション速度として取得するためにも使用される。

【0092】

いくつかの実施例において、グラデーション速度は、変化速度閾値以下の一定値である。

【0093】

いくつかの実施例において、オブジェクト表示ユニットは、さらに、初期形態から終了形態へのターゲットオブジェクトのグラデーションを表示するために、グラデーション速度で、ターゲットオブジェクトのキーポイントを、キーポイントの画像における初期位置からキーポイントの画像におけるターゲット位置へ徐々に移動させるために使用され、ここで、キーポイントの画像における初期位置およびターゲット位置、は、それぞれ初期変化形態およびターゲット変化形態に基づいて得られる。

【0094】

いくつかの実施例において、画像処理装置８００は、
画像におけるターゲットオブジェクトに対するオブジェクト識別結果を取得するために使用され、オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含む結果取得モジュールと、
前記オブジェクト識別結果が、画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化し、または画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化したことに応答して、前記オブジェクト識別結果が変化したと判断するために使用される変化判断モジュールと、をさらに含む。

【0095】

いくつかの実施例において、ターゲット変化形態は、オブジェクト識別結果の変化によってトリガーされたターゲットオブジェクトを変化処理する最終的な変化形態である。

【0096】

いくつかの実施例において、前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されたものから前記画像において前記ターゲットオブジェクトが識別されなかったものに変化したことに応答して、前記ターゲット変化形態は、変化処理されていない前記ターゲットオブジェクトの形態であり、前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されなかったものから前記画像において前記ターゲットオブジェクトが識別されたものに変化したことに応答して、前記ターゲット変化形態は、完全に変化処理された前記ターゲットオブジェクトの形態である。

【0097】

上記の実施例における装置について、各モジュールが動作を実行する具体的な態様は、当該方法に関する実施例において詳細に説明されたが、ここでは詳細な説明を省略する。

【0098】

図９は、一実施例による電子機器の内部構造図である。例えば、電子機器９００は、携帯電話、コンピュータ、デジタル放送端末、メッセージングデバイス、ゲームコンソール、タブレットデバイス、医療機器、フィットネスデバイス、パーソナルデジタルアシスタントなどであってもよい。

【0099】

図９を参照すると、電子機器９００は、処理コンポーネント９０２、メモリ９０４、電力コンポーネント９０６、マルチメディアコンポーネント９０８、オーディオコンポーネント９１０、入出力（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ、Ｉ／Ｏ）インターフェース９１２、センサーコンポーネント９１４、および通信コンポーネント９１６のうちの１つ以上を含み得る。

【0100】

処理コンポーネント９０２は、一般に、表示、電話コール、データ通信、カメラ動作、記録動作に関連する動作などの電子機器９００の全体的な動作を制御する。処理コンポーネント９０２は、上記の方法のステップの全部または一部を完了するために、命令を実行する１つ以上のプロセッサ９２０を含むことができる。また、処理コンポーネント９０２は、処理コンポーネント９０２と他のコンポーネントとの間の対話を容易にする１つ以上のモジュールを含むことができる。例えば、処理コンポーネント９０２は、マルチメディアコンポーネント９０８と処理コンポーネント９０２との間の対話を容易にするマルチメディアモジュールを含むことができる。

【0101】

メモリ９０４は、電子機器９００での動作をサポートするために様々なタイプのデータを記憶するように構成される。これらのデータの例には、電子機器９００上で動作するための任意のアプリケーションまたは方法の命令、連絡先データ、電話帳データ、メッセージ、画像、動画などが含まれる。メモリ９０４は、例えばスタティックランダムアクセスメモリ（ＳｔａｔｉｃＲａｎｄｏｍ-ＡｃｃｅｓｓＭｅｍｏｒｙ、ＳＲＡＭ）、電気的消去可能プログラマブル読み取り専用メモリ（Ｅｌｅｃｔｒｉｃａｌｌｙ-ＥｒａｓａｂｌｅＰｒｏｇｒａｍｍａｂｌｅＲｅａｄ-ＯｎｌｙＭｅｍｏｒｙ、ＥＥＰＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥｒａｓａｂｌｅＰｒｏｇｒａｍｍａｂｌｅＲｅａｄ-ＯｎｌｙＭｅｍｏｒｙ、ＥＰＲＯＭ）、プログラマブル読み取り専用メモリ（ＰｒｏｇｒａｍｍａｂｌｅＲｅａｄＯｎｌｙＭｅｍｏｒｙ、ＰＲＯＭ）、読み取り専用メモリ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ、ＲＯＭ）、磁気メモリ、フラッシュメモリ、磁気ディスクまたは光ディスクなどの任意のタイプの揮発性記憶装置や不揮発性記憶装置またはそれらの組合せによって実現されてもよい。

【0102】

電源コンポーネント９０６は、電子機器９００の様々なコンポーネントに電力を供給する。電源コンポーネント９０６は、電源管理システム、１つ以上の電源、および電子機器９００に対する電力の生成、管理、および割り当てに関連する他のコンポーネントを含むことができる。

【0103】

マルチメディアコンポーネント９０８は、前記電子機器９００とユーザとの間に配置された出力インターフェースを提供するスクリーンを含む。いくつかの実施例において、スクリーンは、液晶ディスプレイ（ＬｉｑｕｉｄＣｒｙｓｔａｌＤｉｓｐｌａｙ、ＬＣＤ）とタッチパネル（ＴｏｕｃｈＰａｎｅｌ、ＴＰ）とを含むことができる。スクリーンがタッチパネルを含む場合、スクリーンは、ユーザからの入力信号を受信するためのタッチスクリーンとして実現されてもよい。タッチパネルは、タッチ、スライド、およびタッチパネル上のジェスチャーを感知するための１つ以上のタッチセンサーを含む。タッチセンサは、タッチまたはスライド動作の境界を感知するだけでなく、タッチまたはスライド動作に関連する持続時間および圧力も検出することができる。いくつかの実施例において、マルチメディアコンポーネント９０８は、１つのフロントカメラおよび/またはリアカメラを含む。電子機器９００が撮影モードまたは動画モードなどの動作モードにある場合、フロントカメラおよび/またはリアカメラは、外部のマルチメディアデータを受信することができる。各フロントカメラおよび/またはリアカメラは、固定光学系であってもよく、又は焦点距離および光学ズーム能力を持っている。

【0104】

オーディオコンポーネント９１０は、オーディオ信号を出力および/または入力するように構成される。例えば、オーディオコンポーネント９１０は、1つのマイクロホン（Ｍｉｃｒｏｐｈｏｎｅ、ＭＩＣ）を含み、電子機器９００がコールモード、記録モードおよび音声識別モードなどの動作モードにある場合、マイクロホンは、外部のオーディオ信号を受信するように構成される。受信したオーディオ信号は、さらに、メモリ９０４に記憶されてもよく、または通信コンポーネント９１６を介して送信されてもよい。いくつかの実施例において、オーディオコンポーネント９１０は、オーディオ信号を出力するためのスピーカをさらに含む。

【0105】

Ｉ／Ｏインターフェース９１２は、コンポーネント９０２と周辺インターフェースモジュールとの間にインターフェースを提供し、上記の周辺インターフェースモジュールは、キーボード、クリックホイール、ボタンなどであってもよい。これらのボタンは、ホームボタン、音量ボタン、スタートボタン、およびロックボタンを含むが、これらに限定されない。

【0106】

センサーコンポーネント９１４は、電子機器９００に対して各態様の状態評価を提供するための１つ以上のセンサーを含む。例えば、センサーコンポーネント９１４は、電子機器９００のオン/オフ状態、コンポーネント相対的な位置を検出でき、例えば前記コンポーネントは、電子機器９００のディスプレイおよびキーパッドであり、センサーコンポーネント９１４は、電子機器９００または電子機器９００における１つのコンポーネントの位置の変化、ユーザと電子機器９００との接触の有無、電子機器９００の方位または加速/減速、および電子機器９００の温度変化を検出することもできる。センサーコンポーネント９１４は、いかなる物理的な接触がないときに近くの物体の存在を検出するように構成された近接センサーを含むことができる。センサーコンポーネント９１４は、イメージングアプリに使用された相補型金属酸化膜半導体（ＣｏｍｐｌｅｍｅｎｔａｒｙＭｅｔａｌ-ＯｘｉｄｅＳｅｍｉｃｏｎｄｕｃｔｏｒ、ＣＭＯＳ）または電荷結合素子（ＣｈａｒｇｅＣｏｕｐｌｅｄＤｅｖｉｃｅ、ＣＣＤ）画像センサーなどの光センサーをさらに含むことができる。いくつかの実施例において、当該センサーコンポーネント９１４は、加速度センサー、ジャイロスコープセンサー、磁気センサー、圧力センサー、または温度センサーを含むことができる。

【0107】

通信コンポーネント９１６は、電子機器９００と他のデバイスとの間の有線または無線方式の通信を容易にするように構成される。電子機器９００は、ワイファイ（ＷｉｒｅｌｅｓｓＦｉｄｅｌｉｔｙ、ＷｉＦｉ）、キャリア網（例えば２Ｇ、３Ｇ、４Ｇまたは５Ｇ）、またはそれらの組み合わせなどの通信規格に基づく無線ネットワークにアクセスすることができる。一実施例では、通信コンポーネント９１６は、放送チャネルを介して外部の放送管理システムからの放送信号または放送関連情報を受信する。一実施例では、前記通信コンポーネント９１６は、短距離通信を容易にするために、近距離無線通信（ＮｅａｒＦｉｅｌｄＣｏｍｍｕｎｉｃａｔｉｏｎ、ＮＦＣ）モジュールをさらに含む。例えば、ＮＦＣモジュールは、近距離無線通信を用いた自動認識（ＲａｄｉｏＦｒｅｑｕｅｎｃｙＩｄｅｎｔｉｆｉｃａｔｉｏｎ、ＲＦＩＤ）技術、赤外線データ協会（ＩｎｆｒａｒｅｄＤａｔｅＡｓｓｏｃｉａｔｉｏｎA、ＩｒＤＡ）技術、超広帯域（ＵｌｔｒａＷｉｄｅＢａｎｄ、ＵＷＢ）技術、ブルートゥース（登録商標、（Ｂｌｕｅｔｏｏｔｈ、ＢＴ））、および他の技術に基づいて実現されてもよい。

【0108】

いくつかの実施例において、電子機器９００は、上記の画像処理方法を実行するために、１つ以上の特定用途向け集積回路（ＡｐｐｌｉｃａｔｉｏｎＳｐｅｃｉｆｉｃＩｎｔｅｇｒａｔｅｄＣｉｒｃｕｉｔ、ＡＳＩＣ）、デジタル信号プロセッサ（ＤＳＰ）、デジタル信号処理プロセッサ（ＤｉｇｉｔａｌＳｉｇｎａｌＰｒｏｃｅｓｓｏｒＤｅｖｉｃｅ、ＤＳＰ）、デジタル信号処理デバイス（ＤｉｇｉｔａｌＳｉｇｎａｌＰｒｏｃｅｓｓｏｒＤｅｖｉｃｅ、ＤＳＰＤ）、プログラマブルロジックデバイス（ＰｒｏｇｒａｍｍａｂｌｅＬｏｇｉｃＤｅｖｉｃｅ、ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦｉｅｌｄＰｒｏｇｒａｍｍａｂｌｅＧａｔｅＡｒｒａｙ、ＦＰＧＡ）、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他の電子部品によって実現されてもよい。

【0109】

いくつかの実施例において、例えば命令を含むメモリ９０４などの命令を含む非一時的なコンピュータ可読記憶媒体をさらに提供し、上記の命令は、上記の画像処理方法を実行するために電子機器９００のプロセッサ９２０によって実行可能である。

【0110】

例えば、前記非一時的なコンピュータ可読記憶媒体は、ＲＯＭ、ランダムアクセスメモリ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ、ＲＡＭ）、コンパクトディスク読み取り専用メモリ（ＣｏｍｐａｃｔＤｉｓｋＲｅａｄＯｎｌｙＭｅｍｏｒｙ、ＣＤ-ＲＯＭ）、磁気テープ、フロッピーディスク、および光データ記憶デバイスなどであってもよい。

【0111】

いくつかの実施例において、コンピュータプログラム製品をさらに提供し、前記プログラム製品は、コンピュータプログラムを含み、前記コンピュータプログラムは、読み取り可能な記憶媒体に記憶され、機器の少なくとも１つのプロセッサは、前記読み取り可能な記憶媒体から前記コンピュータプログラムを読み出して実行することにより、上記の実施例に記載された画像処理方法を機器に実行させる。

【0112】

当業者は、明細書を考慮し、本明細書に開示された発明を実践した後、本開示の他の実施形態を容易に想到する。本出願は、本開示の任意の変形、用途、または適応的変化をカバーすることを意図し、これらの変形、用途、または適応的変化は、本開示の一般的な原理に従い、本開示に開示されていない本技術分野における公知の常識または慣用的な技術手段を含む。明細書および実施例は、単に例示的なものとみなされ、本開示の真の範囲および精神は、以下の特許請求の範囲によって示される。本開示は、上記で説明され図面に示された正確な構造に限定されず、その範囲から逸脱することなく、様々な修正および変更を行うことができることを理解すべきである。本開示の範囲は、添付の特許請求の範囲のみによって制限される。

【符号の説明】

【0113】

８００画像処理装置
８０１初期形態取得モジュール
８０２ターゲット形態取得モジュール
８０３オブジェクト表示モジュール８０３
９００電子機器
９０２処理コンポーネント
９０４メモリ
９０６電力コンポーネント
９０８マルチメディアコンポーネント
９１０オーディオコンポーネント
９１２入出力インターフェース
９１４センサーコンポーネント
９１６通信コンポーネント９１６
９２０プロセッサ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【手続補正書】

【提出日】2022-08-17

【手続補正1】

【補正対象書類名】明細書

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【発明の詳細な説明】

【技術分野】

【0001】

【0002】

本開示は、画像処理の分野に関し、特に画像処理方法、電子機器、および記憶媒体に関するものである。

【背景技術】

【0003】

画像処理技術の発展に伴い、画像を変化処理する技術が登場し、当該技術では、画像におけるターゲットオブジェクトを最適化して表示する効果を達成するために、処理すべき画像に含まれる顔部、腕などのターゲットオブジェクトを変化処理することができる。

【発明の概要】

【課題を解決するための手段】

【0004】

本開示は、画像処理方法、電子機器、および記憶媒体に関する。本開示の技術案は、以下の通りである。

【0005】

本開示の実施例の第１側面によれば、端末によって実行される画像処理方法であって、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、前記ターゲットオブジェクトの初期変化形態を取得し、前記初期変化形態は、変化した前の前記ターゲットオブジェクトの最後の変化形態を取得し、前記ターゲットオブジェクトは、変化処理のオブジェクトであることと、前記ターゲットオブジェクトのターゲット変化形態を取得することと、前記ターゲットオブジェクトが前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示することと、を含む画像処理方法に関する。

【0006】

本開示の実施例の別の側面によれば、プロセッサと、前記プロセッサによって実行可能な命令を記憶するためのメモリと、を含み、ここで、前記プロセッサは、前記命令を実行することにより以下のステップを実現するように構成され、即ち、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、前記ターゲットオブジェクトの初期変化形態を取得し、前記初期変化形態は、変化した前の前記ターゲットオブジェクトの最後の変化形態であり、前記ターゲットオブジェクトは、変化処理のオブジェクトであり、前記ターゲットオブジェクトのターゲット変化形態を取得し、前記ターゲットオブジェクトが前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示する電子機器に関する。

【0007】

本開示の実施例の別の側面によれば、命令が電子機器のプロセッサによって実行されるときに、以下のステップを電子機器に実行させることができ、即ち、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、前記ターゲットオブジェクトの初期変化形態を取得し、前記初期変化形態は、変化した前の前記ターゲットオブジェクトの最後の変化形態を取得し、前記ターゲットオブジェクトは、変化処理のオブジェクトであり、前記ターゲットオブジェクトのターゲット変化形態を取得し、前記ターゲットオブジェクトが前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示する記憶媒体に関する。

【0008】

本開示の実施例の別の側面によれば、コンピュータプログラムを含み、前記コンピュータプログラムは、読み取り可能な記憶媒体に記憶され、機器の少なくとも１つのプロセッサは、前記読み取り可能な記憶媒体から前記コンピュータプログラムを読み出して実行することにより、以下のステップを機器に実行させ、即ち、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、前記ターゲットオブジェクトの初期変化形態を取得し、前記初期変化形態は、変化した前の前記ターゲットオブジェクトの最後の変化形態を取得し、前記ターゲットオブジェクトは、変化処理のオブジェクトであり、前記ターゲットオブジェクトのターゲット変化形態を取得し、前記ターゲットオブジェクトが前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示するコンピュータプログラム製品に関する。

【図面の簡単な説明】

【0009】

【図1】一実施例による画像処理方法の適用環境図である。

【図2】一実施例による画像処理方法のフローチャートである。

【図3】一実施例による画像処理方法の概略効果図である。

【図4】一実施例によるターゲットオブジェクトを表示する方法のフローチャートである。

【図5】一実施例による変化幅を取得する方法のフローチャートである。

【図6】一実施例によるグラデーション速度を取得する方法のフローチャートである。

【図7】一実施例による別の画像処理方法のフローチャートである。

【図8】一実施例による画像処理装置のブロック図である。

【図9】一実施例による電子機器の内部構造図である。

【発明を実施するための形態】

【0010】

以下、当業者に本開示の技術案をよりよく理解させるために、図面を参照して、本開示の実施例における技術案を明確かつ完全に説明する。

【0011】

【0012】

関連技術では、ターゲットオブジェクトを識別するキーポイントに過度に依存し、キーポイントが外れたり失われたりする場合、ターゲットオブジェクトに対する変化効果が直接に失われ、表示インタフェース上に処理されていないターゲットオブジェクトの画像が直接に表示され、ターゲットオブジェクトが再び出現する場合、現在のターゲットオブジェクト識別キーポイントに対して再び変化処理を行い、最終的な変化効果も直接に表示インタフェース上で再び有効になり、結果として、画面のちらつきを引き起こす。

【0013】

【0014】

【0015】

いくつかの実施例において、端末１００は、ユーザ１０の画像をリアルタイムで収集し、顔部を変化処理のターゲットオブジェクトとし、顔部を小顔補正処理することができ、端末１００は、小顔補正処理された第１画像１１１を表示することができ、当該第１画像１１１には、小顔補正処理された顔部１２が含まれていてもよい。一方、当該第１画像１１１に遮蔽物２０が現れると、第２画像１１２に示すように、遮蔽物２０がターゲットオブジェクトである顔部１２をある程度に遮蔽することで、端末１００の顔部識別モデルが顔部１２を識別することができない。この場合、関連技術では顔部１２に対する小顔補正効果が無効であり、表示インタフェースに第３画像１１３が直接に表示され、第３画像１１３における顔部１３は、小顔補正処理されていない顔部である。遮蔽物２０が第３画像１１３から除去されると、第４画像１１４に示すように、端末１００は、当該第４画像１１４において顔部１３を再識別することができ、この場合、関連技術では当該顔部１３を再び小顔補正処理し、その表示インタフェースに第５画像１１５が直接に表示され、当該第５画像１１５の顔部１２は、小顔補正処理された顔部である。このように、関連技術では人の顔部などのターゲットオブジェクトが画像に対して失われたり、再び出現したりする場合、画面のちらつきを引き起こし、ターゲットオブジェクトに対する美肌補正処理の効果が劣る。

【0016】

本開示による画像処理方法では、端末１００は、まず、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したかどうかを判断することができ、画像におけるターゲットオブジェクトに対するオブジェクト識別結果が変化した場合、ターゲットオブジェクトの初期変化形態を取得し、当該初期変化形態は、変化した前のターゲットオブジェクトの最後の変化形態であり、つまり、ターゲットオブジェクトの初期変化形態として、変化した前のターゲットオブジェクトの最後の変化形態を取得する。端末１００は、当該ターゲットオブジェクトのターゲット変化形態も取得する。この後、端末１００は、その表示インタフェースに、ターゲットオブジェクトが初期変化形態からターゲット変化形態にグラデーションで変化することを表示することができ、つまり、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、ターゲットオブジェクトをグラデーションで表示する。

【0017】

いくつかの実施例において、本開示による画像処理方法では、端末１００は、第２画像１１２における顔部１２が遮蔽物２０によって遮蔽された場合、オブジェクト識別結果が変化したと判断し、即ち画像において顔部が識別されたものから第２画像１１２に示すように画像において顔部が識別されなかったものに変化し、これにより、端末１００は、変化した前の顔部１２の第１画像１１１における変化形態を当該顔部１２の初期変化形態とすることができ、当該初期変化形態は、小顔補正の最終形態であってもよく、小顔補正処理された前の顔部１２の原始形態をターゲット変化形態とすることができ、当該ターゲット変化形態は、第３画像１１３の顔部１３の変化形態に対応する。この場合、端末１００は、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、その表示インタフェースに顔部をグラデーションで表示することができ、即ち第２画像１１２の顔部１２の変化形態から第３画像１１３の顔部１３の変化形態へのグラデーションプロセスを表示する。

【0018】

第３画像１１３における遮蔽物２０が除去された場合、端末１００は、画像において顔部が識別されなかったものから第４画像１１４に示すように画像において顔部が識別されたものに変化し、これにより、端末１００は、変化した前の顔部１３の第３画像１１３における変化形態を当該顔部１３の初期変化形態とすることができ、当該初期変化形態は、小顔補正処理された前の顔部の原始形態であってもよく、小顔補正の最終形態をターゲット変化形態とすることができ、当該ターゲット変化形態は、第５画像１１５の顔部１２の変化形態に対応する。この場合、端末１００は、初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、その表示インタフェースに顔部をグラデーションで表示することができ、即ち第４画像１１４の顔部１３の変化形態から第５画像１１５の顔部１２の変化形態へのグラデーションプロセスを表示することにより、人の顔部などのターゲットオブジェクトが画像において突然現れたり失われたりすることによる変化効果の急変による画面のちらつきを回避し、ターゲットオブジェクトの変化処理效果を最適化することができる。

【0019】

図２は、一実施例による画像処理方法のフローチャートであり、図２に示すように、当該画像処理方法は、図１に示された端末１００に適用することができ、ステップＳ２０１からステップＳ２０３を含む。

【0020】

ステップＳ２０１において、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、ターゲットオブジェクトの初期変化形態を取得し、初期変化形態は、変化した前のターゲットオブジェクトの最後の変化形態である。

【0021】

ここで、ターゲットオブジェクトは、変化処理のオブジェクトである。

【0022】

言い換えれば、画像におけるターゲットオブジェクトに対するオブジェクト識別結果が変化した場合、ターゲットオブジェクトの初期変化形態として、変化した前のターゲットオブジェクトの最後の変化形態を取得する。

【0023】

いくつかの実施例において、端末１００は、リアルタイムで動画を撮影したり、生中継したりする際に、各フレームにおける画像を取得し、画像におけるターゲットオブジェクトを識別することができる。ここで、画像におけるターゲットオブジェクトとは、変化処理のオブジェクトを指す。例えば，当該ターゲットオブジェクトは、人の顔部、腕、目、または顎などであってもよい。

【0024】

端末１００が、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化したことを検出した場合、ターゲットオブジェクトの初期変化形態を取得する。ここで、当該初期変化形態は、変化処理されていない当該ターゲットオブジェクトの原始形態であってもよいし、完全に変化処理された当該ターゲットオブジェクトの最終形態であってもよいし、原始形態と最終形態との間にある中間形態であってもよい。例えば、変化した前に、当該ターゲットオブジェクトの最後の変化形態が原始形態である場合、端末１００は、原始形態を当該ターゲットオブジェクトの初期変化形態とし、または、変化した前に、当該ターゲットオブジェクトの最後の変化形態が最終形態である場合、端末１００は、最終形態をターゲットオブジェクトの初期変化形態とする。

【0025】

いくつかの実施例において、端末１００は、オブジェクト識別結果が変化したかどうかを判断することができる。まず、端末１００は、画像におけるターゲットオブジェクトに対するオブジェクト識別結果をリアルタイムで取得することができ、当該オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含み得る。端末１００は、オブジェクト識別モデルによって、ターゲットオブジェクトを識別し、オブジェクト識別結果を得ることができ、ここで、オブジェクト識別モデルは、顔部識別モデルであってもよい。ターゲットオブジェクトは、画像における顔部などであってもよい。オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものであってもよい。次に、端末１００が、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化したことを検出した場合、または、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化した場合、端末１００は、オブジェクト識別結果が変化したと確定することができる。

【0026】

ここで、端末１００が、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化したことを検出した場合、以下のことが分かり、即ち、端末１００は、本来、ターゲットオブジェクトが画像内にあることを識別できたが、その後、端末１００は、遮蔽などの要因によって、画像においてターゲットオブジェクトを識別できない可能性があり、この場合、端末１００は、オブジェクト識別結果が変化したと確定する。なお、端末１００が、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化したことを検出した場合、以下のことが分かり、即ち、端末１００は、本来、遮蔽などの要因によって、画像においてターゲットオブジェクトを識別できなかったが、その後、端末１００は、遮蔽物の除去などの要因によって、画像においてターゲットオブジェクトを再識別でき、この場合、端末１００は、オブジェクト識別結果が変化したと確定する。

【0027】

例えば、端末１００が人の顔部を撮影ターゲットとする場合、端末１００は、スクリーン上に撮影した人の顔部をリアルタイムで表示することができ、端末１００は、フレームごとの人の顔部の位置を追跡し、人の顔部のキーポイントをマークして美肌補正処理することができる。ここで、人が速く移動したり、急に頭を回転したり、急にスクリーン外に出たり、物体によって人の顔部が遮蔽されたりした場合、対応するフレーム画像は、人の顔部のキーポイントを失い、即ち、端末１００は、対応するフレーム画像において人の顔部のキーポイントを識別できないため、得られたオブジェクト識別結果が、画像において人の顔部が識別されなかったものである。人の顔部がスクリーン外からスクリーン内に戻った場合、端末１００は、再び画像において人の顔部を検出することができ、端末１００によって得られたオブジェクト識別結果は、画像において人の顔部が識別されたものであり、オブジェクト識別結果が変化したと判断することができる。

【0028】

ステップＳ２０２において、ターゲットオブジェクトのターゲット変化形態を取得する。

【0029】

いくつかの実施例において、端末１００は、ターゲットオブジェクトの変化に対応するターゲット変化形態を取得することができる。変化した前にターゲットオブジェクトの変化形態が変化処理されていない当該ターゲットオブジェクトの原始形態である場合、変化に対応するターゲット変化形態は、完全に変化処理された当該ターゲットオブジェクトの最終形態であり、変化した前にターゲットオブジェクトの変化形態が完全に変化処理された当該ターゲットオブジェクトの最終形態である場合、ターゲット変化形態は、変化処理されていない当該ターゲットオブジェクトの原始形態であり、変化した前にターゲットオブジェクトの変化形態が原始形態と最終形態との中間形態である場合、上記の変化前の中間形態に対応する還元形態をターゲット変化形態とすることができる。例えば、変化した前にターゲットオブジェクトの変化形態が原始形態から中間形態に変化した場合、当該上記の変化前の中間形態に対応する還元形態は、原始形態であり、即ち原始形態をターゲット変化形態とし、同様に、変化した前にターゲットオブジェクトの変化形態が最終形態から中間形態に変化した場合、当該上記の変化前の中間形態に対応する還元形態は、最終形態であり、即ち最終形態をターゲット変化形態とする。

【0030】

ステップＳ２０３において、ターゲットオブジェクトが初期変化形態からターゲット変化形態にグラデーションで変化することを表示する。

【0031】

【0032】

図３は、一実施例による画像処理方法の概略効果図であり、第６画像３１１における顔部３０は、ターゲットオブジェクトとなり、当該顔部３０は、遮蔽物４０によって遮蔽され、この場合、端末１００は、当該顔部３０をグラデーションで表示する。当該顔部３０の当該第６画像３１１における初期変化形態が第１変化形態３１に示されていると仮定すると、当該第１変化形態３１は、完全に変化処理された当該顔部３０の最終形態である。当該第１変化形態３１における顔部３０が遮蔽物４０によって遮蔽された場合、端末１００は、第４変化形態３４をターゲット変化形態とし、当該ターゲット変化形態は、変化処理されていない当該顔部３０の原始形態である。一方、第２変化形態３２および第３変化形態３３が原始形態と最終形態との間にある２つの可能性のある中間形態である。端末１００がターゲットオブジェクトを表示する場合、グラデーションとは、第１変化形態３１から中間形態である第２変化形態３２および第３変化形態３３を順次に経るように、顔部３０を第４変化形態３４に徐々に移行させることであり、その逆も同様である。

【0033】

グラデーションプロセスでは、遮蔽物４０は除去され、端末１００は、人の顔部３０の変化形態を復元することができる。例えば、グラデーションプロセスとは、端末１００が第１変化形態３１から第２変化形態３２および第３変化形態３３を順次に経るように、顔部３０を第４変化形態３４に徐々に移行させることである。顔部３０が第３変化形態３３にグラデーションしたと仮定する場合、遮蔽物４０は除去され、このとき、端末１００は、除去前の当該第３変化形態３３に対応する還元形態である第１変化形態３１をターゲット変化形態とし、第３変化形態３３自身を初期変化形態とし、顔部３０の第３変化形態３３から第１変化形態３１へのグラデーションプロセスを表示することができる。このようにして、人の顔部が画像から失われ、画像に再出現するなどの状況下でのグラデーション的な小顔補正を実現することができ、当該プロセスは、端末１００のユーザが明らかな変化を観察することができないように、連続的かつ比較的ゆっくりと変化するプロセスに制御されることができ、これにより、人の顔部などのターゲットオブジェクトの画像における動的変化に応じて変化効果の動的適応を行うことで、画面のちらつきを回避し、ターゲットオブジェクトが画像において突然現れたり失われたりすることによる変化効果の急変による画面のちらつきを回避し、人の顔部を美肌補正処理するシーンにおいて、人の顔部が画像において無から有へ、あるいは有から無への際に美肌補正処理するときに露見現象が発生することを回避し、変化処理效果を最適化することができる。

【0034】

【0035】

【0036】

【0037】

【0038】

図４は、一実施例によるターゲットオブジェクトを表示する方法のフローチャートであり、Ｓ２０３における初期変化形態およびターゲット変化形態を、それぞれ、グラデーションの初期形態および終了形態とし、前記ターゲットオブジェクトをグラデーションで表示することについて、以下のステップＳ４０１からステップＳ４０２を参照する。

【0039】

ステップＳ４０１において、初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトの変化幅を得る。

【0040】

ここで、端末１００は、ターゲットオブジェクトの初期変化形態およびターゲット変化形態に基づいて、当該ターゲットオブジェクトの変化幅を確定することができ、当該変化幅とは、当該ターゲットオブジェクトの変化形態の変化幅を指す。

【0041】

ステップＳ４０２において、ターゲットオブジェクトが、変化幅に応じたグラデーション速度で、初期変化形態からターゲット変化形態にグラデーションで変化することを表示する。

【0042】

言い換えれば、端末１００は、変化幅に応じたグラデーション速度で、ターゲットオブジェクトを表示することができる。

【0043】

いくつかの実施例において、端末１００は、変化幅の大きさに応じて適切なグラデーション速度を確定することができる。ここで、変化幅が大きいほど、グラデーション速度は、それに応じて大きくなり、変化幅が小さいほど、グラデーション速度は小さくなる。選択肢の一つとして、変化幅の大きさは、初期変化形態およびターゲット変化形態に関係する。

【0044】

図３を参照して説明し、以下の２つのケースについて分析する。ケース１として、初期変化形態が第１変化形態３１であり、ターゲット変化形態が第４変化形態３４であり、ケース２として、初期変化形態が第３変化形態３３であり、ターゲット変化形態が第１変化形態３１である。ここで、ケース１に対応する変形幅は、ケース２に対応する変形幅より大きく、理由として、ケース１について、最終形態から原始形態に変形する必要があり、ケース２について、中間形態から最終形態に変化するだけでよい。このようにして、端末１００は、この２つの変化幅に対してそれぞれに異なるグラデーション速度を設定することができ、ケース１において設定されたグラデーション速度は、ケース２において設定されたグラデーション速度よりも若干速く、結果として、ターゲットオブジェクトが異なる初期変化形態にある場合、ターゲットオブジェクトのグラデーションプロセスを表示するために、対応する変化幅に応じて、対応するグラデーション速度を柔軟に適応させることができる。

【0045】

いくつかの実施例において、図５は、一実施例による変化幅を取得する方法のフローチャートであり、ステップＳ４０１における初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトの変化幅を得ることは、以下のステップＳ５０１からステップＳ５０２を含み得る。

【0046】

ステップＳ５０１において、初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトのキーポイントの画像における初期位置およびターゲット位置をそれぞれ確定する。

【0047】

【0048】

いくつかの実施例において、端末１００は、ターゲットオブジェクトの初期変化形態に基づいて、当該ターゲットオブジェクトのキーポイントの画像における初期位置を確定し、当該ターゲットオブジェクトのターゲット変化形態に基づいて、当該ターゲットオブジェクトのキーポイントの画像におけるターゲット位置を確定することができる。

【0049】

ステップＳ５０２において、初期位置とターゲット位置との距離に基づいて、変化幅を確定する。

【0050】

【0051】

【0052】

いくつかの実施例において、図６は、一実施例によるグラデーション速度を取得する方法のフローチャートであり、上記のＳ５０２の変化幅に応じたグラデーション速度で、ターゲットオブジェクトを表示する前に、以下のステップＳ６０１からステップＳ６０２をさらに含み得る。

【0053】

ステップＳ６０１において、プリセットされたターゲットオブジェクトの変化時間閾値を取得する。

【0054】

ステップＳ６０２において、変化幅および変化時間閾値に基づいて、変化速度閾値を確定する。

【0055】

ステップＳ６０３において、変化速度閾値以下のグラデーション速度を、変化幅に応じたグラデーション速度として取得する。

【0056】

いくつかの実施例において、端末１００は、予め設定されたターゲットオブジェクトに対する変化時間閾値を取得することができる。ここで、当該変化時間閾値は、ターゲットオブジェクトのグラデーションプロセスの最長時間であってもよく、ターゲットオブジェクトのグラデーションプロセスが比較的連続し、且つターゲットオブジェクトが比較的ゆっくりと変化するように、ターゲットオブジェクトのグラデーション速度を制限するために使用されることができる。いくつかの実施例において、当該変化速度閾値を２秒に設定することができる。この後、端末１００は、変化幅および変化時間閾値に基づいて、変化速度閾値を得ることができる。端末１００は、変化幅と変化時間閾値との比を変化速度閾値とすることができる。例えば、変化幅は、ターゲットオブジェクトのキーポイントの画像における初期位置とターゲット位置との距離であってもよく、当該距離と変化速度閾値との比を変化速度閾値とすることができる。

【0057】

【0058】

いくつかの実施例において、ステップＳ４０２におけるターゲットオブジェクトが、変化幅に応じたグラデーション速度で、初期変化形態からターゲット変化形態にグラデーションで変化することを表示することは、初期形態から終了形態へのターゲットオブジェクトのグラデーションを表示するために、上記のグラデーション速度で、ターゲットオブジェクトのキーポイントを、当該キーポイントの画像における初期位置から当該キーポイントの当該画像におけるターゲット位置へ徐々に移動させることを含む。ここで、キーポイントの画像における初期位置およびターゲット位置は、それぞれ初期変化形態およびターゲット変化形態に基づいて得られる。

【0059】

【0060】

【0061】

図７は、一実施例による別の画像処理方法のフローチャートであり、前記画像処理方法は、図１に示された端末１００またはその類似装置を実行主体とすることができ、以下のステップＳ７０１からステップＳ７０２を含む。

【0062】

ステップＳ７０１において、端末１００は、画像におけるターゲットオブジェクトに対するオブジェクト識別結果を取得する。

【0063】

【0064】

ステップＳ７０２において、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化した場合、または、オブジェクト識別結果が画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化した場合、端末１００は、オブジェクト識別結果が変化したと確定する。

【0065】

ステップＳ７０３において、画像におけるターゲットオブジェクトに対するオブジェクト識別結果が変化した場合、端末１００は、ターゲットオブジェクトの初期変化形態を取得する。

【0066】

つまり、端末１００は、ターゲットオブジェクトの初期変化形態として、変化した前のターゲットオブジェクトの最後の変化形態を取得する。

【0067】

ステップＳ７０４において、端末１００は、ターゲットオブジェクトのターゲット変化形態を取得する。

【0068】

ステップＳ７０５において、端末１００は、初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトのキーポイントの画像における初期位置およびターゲット位置をそれぞれ確定する。

【0069】

いくつかの実施例において、キーポイントは、画像におけるターゲットオブジェクトを変化処理するための画素点である。

【0070】

ステップＳ７０６において、端末１００は、初期位置とターゲット位置との距離に基づいて、変化幅を確定する。

【0071】

ここで、端末１００は、初期位置とターゲット位置との距離を変化幅とすることができる。

【0072】

ステップＳ７０７において、端末１００は、プリセットされたターゲットオブジェクトの変化時間閾値を取得する。

【0073】

ステップＳ７０８において、端末１００は、変化幅および変化時間閾値に基づいて、変化速度閾値を確定する。

【0074】

端末１００は、変化幅と変化時間閾値との比を変化速度閾値とすることができる。

【0075】

ステップＳ７０９において、端末１００は、変化速度閾値以下のグラデーション速度を、変化幅に応じたグラデーション速度として取得する。

【0076】

ここで、端末１００は、変化速度閾値をグラデーション速度とすることができる。

【0077】

ステップＳ７１０において、端末１００は、初期形態から終了形態へのターゲットオブジェクトのグラデーションを表示するために、グラデーション速度で、ターゲットオブジェクトのキーポイントを、当該キーポイントの画像における初期位置から当該キーポイントの当該画像におけるターゲット位置へ徐々に移動させる。

【0078】

【0079】

本開示による画像処理方法をより明確に説明するために、当該方法を顔画像に対する美肌補正処理に適用することについて説明する。

【0080】

【0081】

【0082】

次に、人の顔部が失われた場合、最後のフレームにおいて人の顔部があるキーポイントの位置を記録し、当該最後のフレームの小顔補正効果を保持して、この後、グラデーション処理を行うことができる。グラデーションの始点を人の顔部がある最後のフレームの小顔補正効果と定義し、グラデーションの終点を人の顔部の原始形態である小顔補正美肌補正の効果を完全に取り除いた時の形態と定義し、この後、始点から終点まで２秒間の等速グラデーション復元を行うことができ、グラデーション效果は、始点での人の顔部のキーポイントから終点での人の顔部のキーポイントへのピクセル移動を実現する。ここで、２秒は、最終的な小顔補正効果から人の顔部の原始形態にグラデーションしたプリセット最大時間であり、実際のシーンの必要に応じて当該時間を設定することができる。これにより、人の顔部のグラデーションの平均速度ｖを取得することができ、平均速度の値は、人の顔部のキーポイントの変化幅である人の顔部のキーポイントのピクセル間の距離とプリセット最大時間２秒との比である。ここで、始点から終点までの人の顔部のキーポイントの変化が比較的ゆっくりであるため、ユーザ一が一般的にこのプロセスを知覚することができず、そして、一般的にこの時間内に人の顔部が再び現れて、無から有への小顔補正が始まるので、実際の撮影中に人の顔部が現れたり消えたりする場合、二度とブレる現象が生じない。

【0083】

【0084】

【0085】

【0086】

【0087】

初期形態取得モジュール８０１は、画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、ターゲットオブジェクトの初期変化形態を取得するために使用され、初期変化形態は、変化した前のターゲットオブジェクトの最後の変化形態であり、ターゲットオブジェクトは、変化処理のオブジェクトである。

【0088】

ターゲット形態取得モジュール８０２は、ターゲットオブジェクトのターゲット変化形態を取得するために使用される。

【0089】

オブジェクト表示モジュール８０３は、ターゲットオブジェクトが初期変化形態からターゲット変化形態にグラデーションで変化することを表示するために使用される。

【0090】

いくつかの実施例において、オブジェクト表示モジュール８０３は、
初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトの変化幅を確定するために使用され、変化幅は、ターゲットオブジェクトの変化形態の変化幅である幅取得ユニットと、
ターゲットオブジェクトが、変化幅に応じたグラデーション速度で、初期変化形態からターゲット変化形態にグラデーションで変化することを表示するために使用されるオブジェクト表示ユニットと、を含む。

【0091】

いくつかの実施例において、幅取得ユニットは、初期変化形態およびターゲット変化形態に基づいて、ターゲットオブジェクトのキーポイントの画像における初期位置およびターゲット位置をそれぞれ確定し、初期位置とターゲット位置との距離に基づいて、変化幅を確定するために使用され、キーポイントは、画像におけるターゲットオブジェクトを変化処理するための画素点である。

【0092】

いくつかの実施例において、オブジェクト表示ユニットは、プリセットされたターゲットオブジェクトの変化時間閾値を取得し、変化幅および変化時間閾値に基づいて、変化速度閾値を確定し、変化速度閾値以下のグラデーション速度を、グラデーション速度として取得するためにも使用される。

【0093】

いくつかの実施例において、グラデーション速度は、変化速度閾値以下の一定値である。

【0094】

いくつかの実施例において、オブジェクト表示ユニットは、初期形態から終了形態へのターゲットオブジェクトのグラデーションを表示するために、グラデーション速度で、ターゲットオブジェクトのキーポイントを、キーポイントの画像における初期位置からキーポイントの画像におけるターゲット位置へ徐々に移動させるために使用され、ここで、キーポイントの画像における初期位置およびターゲット位置、は、それぞれ初期変化形態およびターゲット変化形態に基づいて得られる。

【0095】

いくつかの実施例において、画像処理装置８００は、
画像におけるターゲットオブジェクトに対するオブジェクト識別結果を取得するために使用され、オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含む結果取得モジュールと、
オブジェクト識別結果が、画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化し、または画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化した場合、前記オブジェクト識別結果が変化したと確定するために使用される変化判断モジュールと、をさらに含む。

【0096】

【0097】

いくつかの実施例において、オブジェクト識別結果が、画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化したことに応答して、ターゲット変化形態は、変化処理されていないターゲットオブジェクトの形態であり、オブジェクト識別結果が、画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化したことに応答して、ターゲット変化形態は、完全に変化処理されたターゲットオブジェクトの形態である。

【0098】

【0099】

【0100】

【0101】

【0102】

【0103】

【0104】

【0105】

【0106】

【0107】

【0108】

【0109】

いくつかの実施例において、電子機器９００は、以下のステップを実行するために、１つ以上の特定用途向け集積回路（ＡｐｐｌｉｃａｔｉｏｎＳｐｅｃｉｆｉｃＩｎｔｅｇｒａｔｅｄＣｉｒｃｕｉｔ、ＡＳＩＣ）、デジタル信号プロセッサ（ＤＳＰ）、デジタル信号処理プロセッサ（ＤｉｇｉｔａｌＳｉｇｎａｌＰｒｏｃｅｓｓｏｒＤｅｖｉｃｅ、ＤＳＰ）、デジタル信号処理デバイス（ＤｉｇｉｔａｌＳｉｇｎａｌＰｒｏｃｅｓｓｏｒＤｅｖｉｃｅ、ＤＳＰＤ）、プログラマブルロジックデバイス（ＰｒｏｇｒａｍｍａｂｌｅＬｏｇｉｃＤｅｖｉｃｅ、ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦｉｅｌｄＰｒｏｇｒａｍｍａｂｌｅＧａｔｅＡｒｒａｙ、ＦＰＧＡ）、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他の電子部品によって実現されてもよい。

【0110】

画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、ターゲットオブジェクトの初期変化形態を取得し、初期変化形態は、変化した前のターゲットオブジェクトの最後の変化形態であり、ターゲットオブジェクトは、変化処理のオブジェクトであり、
ターゲットオブジェクトのターゲット変化形態を取得し、
ターゲットオブジェクトが初期変化形態からターゲット変化形態にグラデーションで変化することを表示する。

【0111】

いくつかの実施例において、例えば命令を含むメモリ９０４などの命令を含む非一時的なコンピュータ可読記憶媒体をさらに提供し、上記の命令は、以下のステップを実行するために電子機器９００のプロセッサ９２０によって実行可能である。

【0112】

【0113】

【0114】

【0115】

【0116】

本開示のすべての実施例は、単独で実行されることができ、他の実施例と組み合わせて実行されることもでき、いずれも本開示の保護範囲とみなすことができる。

【符号の説明】

【0117】

【手続補正2】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

電子機器によって実行される画像処理方法であって、
画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、前記ターゲットオブジェクトの初期変化形態を取得し、前記初期変化形態は、変化した前の前記ターゲットオブジェクトの最後の変化形態であり、前記ターゲットオブジェクトは、変化処理のオブジェクトであることと、
前記ターゲットオブジェクトのターゲット変化形態を取得することと、
前記ターゲットオブジェクトが前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示することと、を含む、
画像処理方法。

【請求項2】

前記ターゲットオブジェクトが前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示することことは、
前記初期変化形態および前記ターゲット変化形態に基づいて、前記ターゲットオブジェクトの変化幅を確定し、前記変化幅は、前記ターゲットオブジェクトの変化形態の変化幅であることと、
前記ターゲットオブジェクトが、前記変化幅に応じたグラデーション速度で、前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示することと、を含む、
請求項１に記載の画像処理方法。

【請求項3】

前記初期変化形態および前記ターゲット変化形態に基づいて、前記ターゲットオブジェクトの変化幅を確定することは、
前記初期変化形態および前記ターゲット変化形態に基づいて、前記ターゲットオブジェクトのキーポイントの前記画像における初期位置およびターゲット位置をそれぞれ確定し、前記キーポイントは、前記画像における前記ターゲットオブジェクトを変化処理するための画素点であることと、
前記初期位置とターゲット位置との距離に基づいて、前記変化幅を確定することと、
を含む、
請求項２に記載の画像処理方法。

【請求項4】

プリセットされた前記ターゲットオブジェクトの変化時間閾値を取得することと、
前記変化幅および前記変化時間閾値に基づいて、変化速度閾値を確定することと、
前記変化速度閾値以下のグラデーション速度を、前記グラデーション速度として取得することと、をさらに含む、
請求項２に記載の画像処理方法。

【請求項5】

前記グラデーション速度は、前記変化速度閾値以下の一定値である請求項４に記載の画像処理方法。

【請求項6】

前記ターゲットオブジェクトが、前記変化幅に応じたグラデーション速度で、前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示することは、
前記初期形態から前記終了形態への前記ターゲットオブジェクトのグラデーションを表示するために、前記グラデーション速度で、前記ターゲットオブジェクトのキーポイントを、前記キーポイントの前記画像における初期位置から前記キーポイントの前記画像におけるターゲット位置へ徐々に移動させることを含み、ここで、前記キーポイントの前記画像における前記初期位置および前記ターゲット位置は、それぞれ前記初期変化形態および前記ターゲット変化形態に基づいて得られる請求項２に記載の画像処理方法。

【請求項7】

前記画像におけるターゲットオブジェクトに対するオブジェクト識別結果を取得し、前記オブジェクト識別結果は、画像においてターゲットオブジェクトが識別されたもの、または画像においてターゲットオブジェクトが識別されなかったものを含むことと、
前記オブジェクト識別結果が、画像においてターゲットオブジェクトが識別されたものから画像においてターゲットオブジェクトが識別されなかったものに変化し、または画像においてターゲットオブジェクトが識別されなかったものから画像においてターゲットオブジェクトが識別されたものに変化した場合、前記オブジェクト識別結果が変化したと確定することと、をさらに含む、
請求項１に記載の画像処理方法。

【請求項8】

【請求項9】

前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されたものから前記画像において前記ターゲットオブジェクトが識別されなかったものに変化した場合、前記ターゲット変化形態は、変化処理されていない前記ターゲットオブジェクトの形態であり、
前記オブジェクト識別結果が、前記画像において前記ターゲットオブジェクトが識別されなかったものから前記画像において前記ターゲットオブジェクトが識別されたものに変化した場合、前記ターゲット変化形態は、完全に変化処理された前記ターゲットオブジェクトの形態である、
請求項８に記載の画像処理方法。

【請求項10】

プロセッサと、
前記プロセッサによって実行可能な命令を記憶するためのメモリと、を含み、
ここで、前記プロセッサは、前記命令を実行するときに以下のステップを実現するように構成され、即ち、
画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、前記ターゲットオブジェクトの初期変化形態を取得し、前記初期変化形態は、変化した前の前記ターゲットオブジェクトの最後の変化形態であり、前記ターゲットオブジェクトは、変化処理のオブジェクトであり、
前記ターゲットオブジェクトのターゲット変化形態を取得し、
前記ターゲットオブジェクトが前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示する、
電子機器。

【請求項11】

命令が電子機器のプロセッサによって実行されるときに、以下のステップを電子機器に実行させることができ、即ち、
画像におけるターゲットオブジェクトのオブジェクト識別結果が変化した場合、前記ターゲットオブジェクトの初期変化形態を取得し、前記初期変化形態は、変化した前の前記ターゲットオブジェクトの最後の変化形態であり、前記ターゲットオブジェクトは、変化処理のオブジェクトであり、
前記ターゲットオブジェクトのターゲット変化形態を取得し、
前記ターゲットオブジェクトが前記初期変化形態から前記ターゲット変化形態にグラデーションで変化することを表示する、
記憶媒体。

【手続補正3】

【補正対象書類名】図面

【補正対象項目名】全図

【補正方法】変更

【補正の内容】

【図1】