特許 7469510 画像処理方法、装置、電子機器及びコンピュータ可読記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-04-08

(45)【発行日】2024-04-16

(54)【発明の名称】画像処理方法、装置、電子機器及びコンピュータ可読記憶媒体

(51)【国際特許分類】

   G06T 1/00 20060101AFI20240409BHJP

   G06T 7/00 20170101ALI20240409BHJP

   G06V 10/40 20220101ALI20240409BHJP

【ＦＩ】

G06T1/00 340A

G06T7/00 660A

G06V10/40

【請求項の数】 11

(21)【出願番号】P 2022561575

(86)(22)【出願日】2021-04-02

(65)【公表番号】

(43)【公表日】2023-05-18

(86)【国際出願番号】 CN2021085326

(87)【国際公開番号】W WO2021208764

(87)【国際公開日】2021-10-21

【審査請求日】2022-10-07

(31)【優先権主張番号】202010287393.4

(32)【優先日】2020-04-13

(33)【優先権主張国・地域又は機関】CN

(73)【特許権者】

【識別番号】520476341

【氏名又は名称】北京字節跳動網絡技術有限公司

【氏名又は名称原語表記】Ｂｅｉｊｉｎｇ Ｂｙｔｅｄａｎｃｅ Ｎｅｔｗｏｒｋ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ．

【住所又は居所原語表記】Ｒｏｏｍ Ｂ－００３５， ２／Ｆ， Ｎｏ．３ Ｂｕｉｌｄｉｎｇ， Ｎｏ．３０， Ｓｈｉｘｉｎｇ Ｒｏａｄ， Ｓｈｉｊｉｎｇｓｈａｎ Ｄｉｓｔｒｉｃｔ Ｂｅｉｊｉｎｇ １０００４１ Ｃｈｉｎａ

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】潘 嘉▲り▼

(72)【発明者】

【氏名】▲張▼ ▲樹▼▲鵬▼

【審査官】佐藤 直樹

(56)【参考文献】

【文献】中国特許出願公開第１０９３７６６１８（ＣＮ，Ａ）

【文献】韓国公開特許第１０－２００８－０１０６５９６（ＫＲ，Ａ）

【文献】特表２０１８－５３１４４９（ＪＰ，Ａ）

【文献】中国特許出願公開第１０１５５６７０１（ＣＮ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ １／００

Ｇ０６Ｔ ７／００

Ｇ０６Ｖ １０／４０

(57)【特許請求の範囲】

【請求項1】

取得された第１の画像が顔を含む場合、前記第１の画像に第１の変換処理を実行し、第２の画像を取得するステップと、
前記第１の画像における顔の第１の目標顔のキーポイントに基づいて、前記第２の画像における顔の第２の目標顔のキーポイントの前記第１の画像での目標位置を決定するステップと、
前記目標位置に基づき、前記第２の画像に第１の移動処理を実行するステップと、
前記第１の画像と前記第１の移動処理後の第２の画像とに基づき、目標画像を生成し、前記目標画像を表示するステップと、を含む、
画像処理方法。

【請求項2】

前記第１の画像に第１の変換処理を実行し、第２の画像を取得するステップは、
前記第１の画像における顔の各第１の顔特徴にそれぞれ特徴変換処理を実行し、所定の年齢層の顔に一致する各第２の顔特徴を取得し、前記各第２の顔特徴を含む顔の画像を第３の画像として決定するステップと、
所定のポートレートマスクに基づいて、前記第３の画像にカットアウト処理を行い、前記カットアウト処理後の画像を前記第２の画像として決定するステップと、を含む、
請求項１に記載の画像処理方法。

【請求項3】

当該画像処理方法は、前記目標位置に基づき、前記第２の画像に第１の移動処理を実行する前に、前記第２の画像に顔特徴に対応する付加情報を添加するステップをさらに含み、
前記第２の画像に第１の移動処理を実行するステップは、
顔特徴に対応する付加情報を添加した後の第２の画像に第１の移動処理を実行するステップを含む、
請求項１に記載の画像処理方法。

【請求項4】

前記第１の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントおよび１６番目の顔のキーポイントであり、前記第２の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントであり、
前記第１の画像における顔の第１の目標顔のキーポイントに基づいて、前記第２の画像における顔の第２の目標顔のキーポイントの前記第１の画像での目標位置を決定するステップは、
前記第１の画像における顔の４４番目の顔のキーポイントから１６番目の顔のキーポイントまでの方向ベクトルを決定するステップと、
第１の所定の計算式に基づいて、所定の変位倍数、前記方向ベクトル及び前記第１の画像における顔の１６番目の顔のキーポイントに基づき、第１の位置点を取得し、前記第１の位置点を前記第２の画像における顔の４４番目の顔のキーポイントの前記第１の画像での目標位置を決定するステップと、を含む、
請求項１～３のいずれかに記載の画像処理方法。

【請求項5】

前記目標位置に基づき、前記第２の画像に第１の移動処理を実行するステップは、
所定の縮小倍数に基づき、前記第１の画像における顔の４４番目の顔のキーポイントを顔の中心点とする第２の画像に縮小処理を実行し、第４の画像を取得数するステップと、
前記目標位置に基づき、前記第４の画像に並進処理を実行するステップと、を含む、
請求項４に記載の画像処理方法。

【請求項6】

当該画像処理方法は、前記目標位置に基づき、前記第２の画像に第１の移動処理を実行した後、前記第１の移動処理後の第２の画像の所定の位置に目標付加情報を添加し、第５の画像を取得するステップをさらに含み、
前記第１の画像と前記第１の移動処理後の第２の画像とに基づき、目標画像を生成するステップは、
前記第１の画像と前記第５の画像とに基づき、目標画像を生成するステップを含む、
請求項１または５に記載の画像処理方法。

【請求項7】

当該画像処理方法は、前記目標位置に基づき、前記第２の画像に第１の移動処理を実行した後、所定の移動軌跡に基づいて、前記第１の移動処理後の第２の画像に第２の移動処理を実行し、前記並進処理後の第４の画像を前記所定の移動軌跡に従って移動させるステップをさらに含み、
前記第１の画像と前記第１の移動処理後の第２の画像とに基づき、目標画像を生成するステップは、
前記第１の画像と前記第２の移動処理後の第２の画像とに基づき、目標画像を生成するステップを含む、
請求項５に記載の画像処理方法。

【請求項8】

所定の移動軌跡に基づいて、前記第１の移動処理後の第２の画像に第２の移動処理を実行するステップは、
現在の時間と前記所定の移動軌跡の移動開始時間との間の時差値を決定するステップと、
前記時差値に基づき、前記所定の移動軌跡が複数の所定の時間での変位と回転角度とを含む所定の移動配列から現在の時間に対応する目標変位と目標回転角度とを決定するステップと、
前記目標変位と前記回転角度とに基づき、前記第１の移動処理後の第２の画像の現在の時間での移動位置を決定し、前記第１の移動処理後の第２の画像が前記移動位置を移動開始位置として、前記所定の移動軌跡に従って移動し続けることを決定するステップと、を含む、
請求項７に記載の画像処理方法。

【請求項9】

取得された第１の画像が顔を含む場合、前記第１の画像に第１の変換処理を実行し、第２の画像を取得するための第１の処理モジュールと、
前記第１の画像における顔の第１の目標顔のキーポイントに基づいて、前記第２の画像における顔の第２の目標顔のキーポイントの前記第１の画像での目標位置を決定するための決定モジュールと、
前記目標位置に基づき、前記第２の画像に第１の移動処理を実行するための第２の処理モジュールと、
前記第１の画像と前記第１の移動処理後の第２の画像とに基づき、目標画像を生成し、前記目標画像を表示するための第３の処理モジュールと、を含む、
画像処理装置。

【請求項10】

メモリ、プロセッサ及びメモリに記憶されてプロセッサで稼動できるコンピュータプログラムを備える、電子機器であって、
前記プロセッサが前記コンピュータプログラムを実行するとき、請求項１～８のいずれかに記載の方法が実現される、
電子機器。

【請求項11】

コンピュータプログラムが記憶される非一時的なコンピュータ可読記憶媒体であって、
前記コンピュータプログラムがプロセッサによって実行されるとき、請求項１～８のいずれかに記載の方法が実現される、
非一時的なコンピュータ可読記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本開示の実施例は、画像処理技術分野に関し、具体的に、本開示は、画像処理方法、装置、電子機器及びコンピュータ可読記憶媒体に関する。

【背景技術】

【0002】

近年、インテリジェント端末技術の発達に伴い、インテリジェント端末によって収集された画像情報を対応して処理するための様々なアプリケーションプログラムがますます増えている。これらのアプリケーションプログラムは、収集された画像情報に美化、特殊効果を追加する等の処理を実行することができ、例えば、写真撮影後の画像情報や自分撮り過程における画像情報に、ウサギ、ネコ、ブタ等などの動物に関連する形象の特殊効果を追加し、また、例えば写真撮影後の画像情報や自分撮り過程における画像情報を別の背景環境に変更する等の特殊効果処理を追加する。しかし、従来のアプリケーションプログラムによる画像情報の処理は、形態が単一である場合が多く、ユーザの基本的なニーズをある程度満たすことができ、ユーザのニーズの増加に応じて、ユーザの多様なニーズを満たすことができない。

【発明の概要】

【発明が解決しようとする課題】

【0003】

本開示の実施例は、上記の技術的欠陥の一つを少なくとも解決することができることを目的とし、該発明内容部分を提供して簡単な形で構想を紹介し、これらの構想は以下の具体的な実施形態部分で詳細に説明される。該発明内容部分は、主張された技術的解決手段の主要な特徴または必要な特徴を示すことを意図しておらず、主張された技術的解決手段の範囲を制限するために使用されることも意図しない。

【課題を解決するための手段】

【0004】

一態様は、画像処理方法であって、
取得された第１の画像は顔を含む場合、第１の画像に第１の変換処理を実行し、第２の画像を取得するステップと、
第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定するステップと、
目標位置に基づき、第２の画像に第１の移動処理を実行するステップと、
第１の画像と第１の移動処理後の第２の画像に基づき、目標画像を生成し、目標画像を表示するステップと、を含む。

【0005】

他の態様は、画像処理装置であって、
取得された第１の画像は顔を含む場合、第１の画像に第１の変換処理を実行し、第２の画像を取得するための第１の処理モジュールと、
第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定するための決定モジュールと、
目標位置に基づき、第２の画像に第１の移動処理を実行するための第２の処理モジュールと、
第１の画像と第１の移動処理後の第２の画像に基づき、目標画像を生成し、目標画像を表示するための第３の処理モジュールと、を備える。

【0006】

さらなる態様は、電子機器を提供し、前記電子機器は、メモリ、プロセッサ及びメモリに記憶されてプロセッサで稼働できるコンピュータプログラムを備え、プロセッサは、前記プログラムを実行する際に上記の画像処理方法が実現される。

【0007】

別の態様は、非一時的なコンピュータ可読記憶媒体を提供し、非一時的なコンピュータ可読記憶媒体には、コンピュータプログラムが記憶され、プログラムがプロセッサによって実行されるとき、上記の画像処理方法が実現される。

【0008】

本開示の実施例による画像処理方法は、第１の画像における顔の第１の目標顔のキーポイントに基づいて、第１の変換処理後の第２の画像に第１の移動処理を実行し、第１の画像と第１の移動処理後の第２の画像に基づき、目標画像を生成し、その結果、目標画像は第１の画像の画像情報だけでなく、第１の画像に第１の変換処理を実行することによって得られた第２の画像の画像情報も含み、そして、目標画像における第１の画像の画像情報と第２の画像の画像情報は異なる画像位置に位置することができ、ユーザに様式が新規な特殊効果画像を提供し、画像変更に対するユーザの多様なニーズを満たし、ユーザエクスペリエンスとユーザ満足度を効果的に向上させる。

【0009】

本開示の実施例の追加の態様及び利点は、以下の説明から部分的に示され、これらは以下の説明から明らかになるか、または本開示の実践によって了解されることができる。

【図面の簡単な説明】

【0010】

図面を組み合わせて以下の具体的な実施形態を参照し、本開示の各実施例の上記及び他の特徴、利点及び態様を明らかになる。図面全体を通して、同じまたは類似の図面符号は同じまたは類似の要素を指す。図面は例示的なものであり、アセンブリと要素は必ずしも一定の縮尺で描かれているわけではないことを理解すべきである。

【図1】本開示の実施例による画像処理方法的フローチャートである。

【図2】本開示の実施例による目標画像の模式図である。

【図3】本開示の実施例による画像処理装置の基本的な構造模式図である。

【図4】本開示の実施例による電子機器の構造模式図である。

【発明を実施するための形態】

【0011】

以下、図面を参照して本開示の実施例を詳細に説明する。図面には本開示のいくつかの実施例が示されるが、本開示は様々な形態で実現されることができ、ここで説明される実施例に制限されると解釈されるべきではなく、逆に、これらの実施例は、本開示をより徹底的かつ完全に理解するために提供されるのを理解すべきである。本開示の図面及び実施例は、例示的なものであり、本開示の保護範囲を制限するためのものではないのを理解すべきである。

【0012】

理解すべき点として、本開示の方法実施形態に記載の各ステップは、異なる順序に従って実行し、及び／又は並行して実行することができる。なお、方法実施形態は、付加的なステップを含み、及び／又は示されたステップを省略して実行することができ。本開示の範囲はこの点で制限されない。

【0013】

本明細書に使用される用語「含む」及びその変形は、オープン型を含み、即ち、「含むが、これに限定されない」ということである。用語「に基づいて」は、「少なくとも部分的に…に基づいて」ということである。用語「一実施例」は、「少なくとも１つの実施例」を示し、用語「別の実施例」は、「少なくとも１つの別の実施例」を示し、用語「一部の実施例」は、「少なくとも一部の実施例」を示す。他の用語に関連する定義は、以下の記述で説明される。

【0014】

注意すべき点として、本開示に言及された「第１」、「第２」等の概念は、装置、モジュールまたはユニットを区別するためにのみ使用され、これらの装置、モジュールまたはユニットを必ず異なる装置、モジュールまたはユニットに制限することも、これらの装置、モジュールまたはユニットによって実行される機能の順序または相互依存関係を制限するためのものでもない。

【0015】

注意すべき点として、本開示に言及された「一つ」、「複数」の修飾は、制限的ではなく、例示的なものであり、当業者は、文脈で明確に示されていない限り、「一つまたは複数」として理解すべきである。

【0016】

本開示の実施形態における複数の装置間で交換されるメッセージまたは情報の名称は、例示の目的のためだけであり、これらのメッセージまたは情報の範囲を制限することを意図するものではない。

【0017】

本開示の実施例の目的、技術的解決手段及び利点をより明らかにさせるために、以下、図面を参照して本開示の実施形態を更に詳細に説明する。

【0018】

以下、本開示の実施例の技術的解決手段及び本開示の実施例の技術的解決手段は具体的な実施例によって上記技術的問題の解決方法を詳細に説明する。以下、このいくつかの具体的な実施例を互いに組み合わせることができ、同じまたは類似の概念または過程について、ある実施例において繰り返して説明しない。以下、図面を参照して、本開示の実施例を説明する。

【0019】

本開示の一実施例は、画像処理方法を提供し、該方法は、端末により実行され、端末は、デスクトップのコンピュータ機器または移動端末を含む。図１に示すように、該方法は、
取得された第１の画像が顔を含む場合、第１の画像に第１の変換処理を実行し、第２の画像を取得するステップＳ１１０と、第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定するステップＳ１２０と、目標位置に基づき、第２の画像に第１の移動処理を実行するステップＳ１３０と、第１の画像と第１の移動処理後の第２の画像とに基づき目標画像を生成し、目標画像を表示するステップＳ１４０と、を含む。

【0020】

具体的には、端末機器は、マルチメディア収集機器（例えば、カメラ、ウェブカメラ等）を介してビデオ情報を収集し、ビデオ情報から処理対象の画像（即ち、第１の画像）としてフレームを抽出することができ、ローカルに予め記憶された画像セット（例えば、アルバム）から任意の画像を処理対象の画像（即ち、第１の画像）として抽出することもでき、無論、他の実現可能な方式によって処理対象の画像（即ち、第１の画像）を取得してもよく、本開示の実施例はこれを制限しない。ここで、第１の画像の取得といった操作、画像を処理する前に処理する必要がある画像を予め選択してもよいし、ユーザが画像処理操作をトリガーしたのを検出した後、ユーザに処理する必要がある画像を提供またはアップロードするように通知することもできる。

【0021】

具体的には、第１の画像は、人、動物、風景、物品等を含む様々な画像であってもよい。第１の画像は顔を含む場合、第１の画像に変換処理（即ち、第１の変換処理）を実行することにより、変換処理後の第１の画像（即ち、第２の画像）を取得し、このとき、端末機器に２枚の画像があることに相当し、１つは第１の画像であり、もう１つは第２の画像である。第１の画像に顔が含まない場合、第１の画像に変換処理（即ち、第１の変換処理）を実行しなく、第２の画像を取得することができないことが言うまでもない。

【0022】

具体的には、第１の画像は顔を含む画像であるため、端末機器は第２の画像を取得した後、第１の画像における顔の目標顔のキーポイント（即ち、第１の目標顔のキーポイント）、例えば、顔の輪郭、目、眉毛、唇及び鼻の輪郭等に基づいて、第２の画像における顔の目標顔のキーポイント（即ち、第２の目標顔のキーポイント）の第１の画像での目標位置を決定することができる。１つの例では、第１の画像における顔の目標顔のキーポイントに基づき、第２の画像の第１の画像での位置を決定することができる。第２の目標顔のキーポイントは、第１の目標顔のキーポイントと同じ顔のキーポイントであってもよいし、第１の目標顔のキーポイントの一部であってもよいし、また、第１の目標顔のキーポイントと異なる顔のキーポイントであってもよく、本開示の実施例は、これを制限しない。

【0023】

具体的には、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定した後、該目標位置に基づき、第２の画像に移動処理（即ち、第１の移動処理）を実行することにより、移動処理後の第２の画像を取得する。一例では、第２の画像における顔の第２の目標顔のキーポイントを該目標位置に移動することによって、第２の画像全体に移動処理を実行し、移動処理後の第２の画像を取得する。

【0024】

具体的に、移動処理後の第２の画像を取得した後、第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成することができ、これにより、目標画像は、第１の画像の画像情報だけでなく、第２の画像の画像情報を含み、そして、第１の画像の画像情報および第２の画像の画像情報は、異なる画像位置に位置することができる。ここでの第１の画像は、端末機器によって取得された処理対象の画像（元の画像に相当する）である。一例では、第１の画像と第１の移動処理後の第２の画像とに合成処理（例えば、ｉｍａｇｅ ｆｌａｔｔｅｎｉｎｇ処理またはｉｍａｇｅ ｍｅｒｇｉｎｇ処理）を実行することにより、目標画像を生成することができる。他の例では、第１の画像を画像層（例えば、画像層１）とし、第１の移動処理後の第２の画像を他の画像層（例えば、画像層２）とし、この２つの画像層に重ね合わせ処理を実行することにより、目標画像を生成し、重ね合わせ時に必要に応じて画像層１を下層とし、画像層２を上層とすることができる。

【0025】

本開示の実施例による画像処理方法は、第１の画像における顔の第１の目標顔のキーポイントに基づいて、第１の変換処理後の第２の画像に第１の移動処理を実行し、第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成し、目標画像は、第１の画像の画像情報だけでなく、第１の画像に第１の変換処理を実行することによって得られた第２の画像の画像情報も含み、目標画像における第１の画像の画像情報および第２の画像の画像情報は、異なる画像位置に位置することができ、ユーザに様式が新規な特殊効果画像を提供し、画像変更に対するユーザの多様なニーズを満たし、ユーザエクスペリエンスとユーザ満足度を効果的に向上させる。

【0026】

一可能な実現手段では、まず、第１の画像における顔の各第１の顔特徴にそれぞれ特徴変換処理を行い、所定の年齢層の顔に一致する各第２の顔特徴を取得し、各第２の顔特徴を含む顔の画像を第３の画像として決定するプロセス、及び所定のポートレートマスクに基づいて、第３の画像にカットアウト処理を実行し、カットアウト処理後の画像を第２の画像として決定するプロセスという変換処理プロセスによって、第１の画像に第１の変換処理を実行し、第２の画像を取得することができる。

【0027】

通常、人の年齢は、例えば、０歳から１歳までの幼児、１歳から４歳までの幼児、５歳から１１歳までの子供、１２歳から１８歳までのティーンエイジャー、１９歳から３５歳までの若者、３６歳からの中年及び６０歳以上の高齢者などのさまざまな年齢層に分けることができ、もちろん、他の年齢層分割方式にすることもでき、本開示の実施例は、これを制限しない。異なる年齢層の顔の各顔特徴は、異なる場合が多く、例えば、０歳から１歳までの幼児の顔は、脂肪が多いことがよくあり、また、例えば６０歳以上の高齢者は、顔しわやたるみなどでいっぱいである。上記の所定の年齢層の顔は、予め選択された任意の年齢層の顔、例えば、０歳から１歳までの幼児の顔、１９歳から３５歳までの若者の顔、６０歳以上の高齢者の顔等であってもよい。

【0028】

具体的には、第１の画像に第１の変換処理を実行する過程において、第１の画像における顔の各第１の顔特徴にそれぞれ特徴変換処理を実行し、所定の年齢層の顔に一致する各第２の顔特徴を取得し、例えば、幼児の顔の各顔特徴に一致する各第２の顔特徴、若者の顔の各顔特徴に一致する各第２の顔特徴、高齢者の顔の各顔特徴に一致する各第２の顔特徴を取得することができる。所定の年齢層の顔に一致する各第２の顔特徴を取得した後、各第２の顔特徴を含む顔の画像を第３の画像として決定し、該第３の画像は、得られた特徴変換処理後の画像である。所定の年齢層の顔の各顔特徴（即ち各第２の顔特徴）に従って、第１の画像における顔の各顔特徴（即ち各第１の顔特徴）にそれぞれ特徴変換処理を実行し、特徴変換処理後の第１の画像（即ち上記の第３の画像）を取得する。

【0029】

実際の使用では、各年齢層の顔の各顔特徴に従って訓練されたニューラルネットワーク（例えば、敵対ニューラルネットワーク）によって、所定の年齢層の顔の各顔特徴（即ち、各第２の顔特徴）に従って、第１の画像における顔の各顔特徴（即ち、各第１の顔特徴）にそれぞれ特徴変換処理を行うことができる。

【0030】

一例では、第１の画像は複数の顔（例えば、２つ）、例えば、それぞれ顔１および顔２である２つの顔を含む場合、このとき、目標顔を決定し、目標顔の各第１の顔特徴にそれぞれ特徴変換処理を実行することができる。顔１が目標顔であると仮定し、顔１の各第１の顔特徴にそれぞれ特徴変換処理を実行し、所定の年齢層の顔に一致する各第２の顔特徴を取得し、各第２の顔特徴の顔１の画像を第３の画像とし、勿論、第３の画像は、各第２の顔特徴を含む顔１の画像以外、顔２または他の関連画像を含み、本開示の実施例は、これを制限しない。

【0031】

具体的には、第３の画像を取得した後、第３の画像の顔を含む目標対象に後続処理を実行し、所定のポートレートマスクに基づいて、第３の画像にカットアウト処理を実行することができ、顔を含む目標対象を第３の画像からカットアウトし、カットアウト処理後の画像（即ち顔を含む目標対象の画像）を第２の画像として決定し、即ち、第２の画像は、所定のポートレートマスクに基づいて、第３の画像からカットアウトされた顔を含む目標対象の画像である。第３の画像は、複数の顔、例えば、それぞれ顔１と顔２である２つの顔を含み、且つ顔１を含む人物１を目標対象とする場合、このとき、所定のポートレートマスクを利用して、第３の画像にカットアウト処理を実行することができ、顔を含む目標対象（即ち、顔１を含む人物１）を第３の画像からカットアウトし、それを第２の画像とする。

【0032】

一可能な実現手段では、目標位置に基づき、第２の画像に第１の移動処理を実行する前に、第２の画像に顔特徴に対応する付加情報を添加してもよい。第２の画像に顔特徴に対応する付加情報を添加した後、顔特徴に対応する付加情報を添加した後の第２の画像に第１の移動処理を実行することができる。

【0033】

具体的には、顔特徴に対応する付加情報は、様々なスタイルの帽子、ヘアアクセサリー、イヤリング、眼鏡等であってもよいし、顔特徴に対応するアニメーション効果を有する他の付加情報であってもよく、例えば、ウサギ、ネコ、ブタ、犬等の動物関連形象の付加情報であり、また、例えば、面白い、なりすまし効果のある付加情報であり、更に、例えば、「泣く」という表現に関連する「涙」の付加情報、及びかわいらしさに関連する他の幾つかの付加情報等であり、ここで一々に挙げられない。第２の画像に顔特徴に対応する付加情報を添加することにより、第２の画像の顔がより鮮明になり、ある程度、楽しみを増やし、ユーザの個人化のニーズを満たす。

【0034】

一例では、所定の年齢層の顔は０歳から１歳までの幼児の顔、即ち、第２の画像に幼児の顔の各顔特徴に一致する各第２の顔特徴の顔（例えば、顔３）であり、このとき、顔３をより鮮明にさせるために、第２の画像の顔３に幾つかの幼児に対応する装飾物品、例えば、ベビーハット、ベビーヘアアクセサリー等を添加することができる。

【0035】

具体的に、第２の画像に顔特徴に対応する付加情報を添加した後、第２の画像に第１の移動処理を実行する過程において、添加された、顔特徴に対応する付加情報とともに第１の移動処理を実行し、即ち、顔特徴に対応する付加情報を添加した後の第２の画像に第１の移動処理を実行する。

【0036】

一可能な実現手段では、第１の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントおよび１６番目の顔のキーポイントであり、第２の目標顔のキーポイントは、１０６個の顔のキーポイントの４４番目の顔のキーポイントである。第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定する過程において、以下の処理を実行することができ、まず、第１の画像における顔の４４番目の顔のキーポイントから１６番目の顔のキーポイントまでの方向ベクトルを決定し、第１の所定の計算式に基づいて、所定の変位倍数、方向ベクトル及び第１の画像における顔の１６番目の顔のキーポイントに基づいて、第１の位置点を取得し、第１の位置点を第２の画像における顔の４４番目の顔のキーポイントの第１の画像での目標位置として決定する。

【0037】

具体的には、現在の１０６個の顔のキーポイントに基づき、第１の画像における顔の４４番目の顔のキーポイントおよび１６番目の顔のキーポイントを決定することができ、４４番目の顔のキーポイントおよび１６番目の顔のキーポイントを第１の画像における顔の第１の目標顔のキーポイントとする。１０６個の顔のキーポイントのうち、４４番目の顔のキーポイントは、鼻梁にあり、１６番目の顔のキーポイントは、あごにある。４４番目の顔のキーポイントおよび１６番目の顔のキーポイントを決定した後、４４番目の顔のキーポイント（即ち、Ｐ０点）から１６番目の顔のキーポイント（即ち、Ｐ１点）までの方向ベクトルを決定することができ、説明を簡単にするため、４４番目の顔のキーポイントをＰ０とし、１６番目の顔のキーポイントをＰ１とすることができ、このようにして、４４番目の顔のキーポイント（即ち、Ｐ０点）から１６番目の顔のキーポイント（即ち、Ｐ１点）までの方向ベクトルを決定し、即ち、Ｐ０点からＰ１点までの二次元方向ベクトルを決定し、Ｐ０１とすることができ、即ちＰ０１＝Ｐ１－Ｐ０である。

【0038】

具体的には、方向ベクトル（即ち、Ｐ０１）を決定した後、第１の所定の計算式に基づいて、所定の変位倍数、方向ベクトルＰ０１及び第１の画像における顔の１６番目の顔のキーポイント（即ち、Ｐ１点）に基づき、第１の位置点を決定することができる。実際の使用では、Ｐ１点からＰ０１方向に沿ってＫ倍のＰ０１のベクトルを重ね合わせ、位置点Ｐ２（即ち、第１の位置点）を取得することができる。第１の所定の計算式は、Ｐ２＝（Ｐ１－Ｐ０）＊Ｋ＋Ｐ１であってもよく、該計算式では、（Ｐ１－Ｐ０）は、Ｐ０点からＰ１点までの二次元方向ベクトルであり、Ｋは、所定の変位倍数であり、Ｐ１は、第１の画像における顔の１６番目の顔のキーポイントであり、一例では、Ｋの取る値は１である。Ｋの取る値が１である場合、第１の位置点Ｐ２は、第１の画像における顔のあごから顔の下半分にほぼ位置する。

【0039】

具体的には、第１の位置点を決定した後、第１の位置点を第２の画像における顔の４４番目の顔のキーポイントの第１の画像での目標位置として決定し、即ち、第２の画像における顔の４４番目の顔のキーポイントを第１の画像のＰ２まで移動し、また、即ち、第１の画像のＰ２を第２の画像における顔の４４番目の顔のキーポイントの固定アンカーポイントとする。これは、第２の画像における顔の４４番目の顔のキーポイントを第１の画像のＰ２位置に移動することにより、第２の画像全体を移動することに相当する。

【0040】

具体的には、目標位置に基づき、第２の画像に第１の移動処理を実行する過程において、まず、所定の縮小倍数に基づき、第１の画像における顔の４４番目の顔のキーポイントを顔の中心点とする第２の画像に縮小処理を実行し、第４の画像を取得する処理、及び目標位置に基づき、第４の画像を並進処理する処理を実行することができる。

【0041】

具体的には、第１の画像に第１の変換処理を実行して第２の画像を取得した後、第２の画像の画像情報は、第１の画像の画像情報に重なり合い、第２の画像における顔の各顔特徴（即ち、各第２の顔特徴）は、第１の画像における顔の各顔特徴（即ち、各第１の顔特徴）とわずかに異なるだけであり、即ち、このとき、端末機器は、２枚の画像を取得し、１つは各第１の顔特徴を含む顔の第１の画像であり、もう１つは各第２の顔特徴を含む顔の第２の画像であり、この２つの画像の画像情報（または画像特徴）は重なり合う。ここでの重なり合いとは、この２つの画像の画像情報（または画像特徴）の位置は重なり合せることを指し、例えば、第１の画像における顔の目の位置は第２の画像における顔の目の位置に重なり合せ、また、例えば、第１の画像における顔の口位置は第２の画像における顔の口の位置に重なり合せること等を指す。

【0042】

勿論、第２の画像に顔特徴に対応する付加情報を添加すると、第２の画像のうち、顔特徴に対応するこの付加情報以外、第２の画像の画像情報は、第１の画像の画像情報に重なり合う。

【0043】

一例では、目標位置に基づき、第２の画像に第１の移動処理を実行する過程において、第１の画像の画像情報は、第２の画像の画像情報に重なり合うため、第１の画像における顔の４４番目の顔のキーポイントは、第２の画像における顔の４４番目の顔のキーポイントに重なり合う。これに基づいて、第２の画像における顔の４４番目の顔のキーポイントを第１の画像における顔の４４番目の顔のキーポイントに移動し、即ち、４４番目の顔のキーポイントをアンカーポイントとして第２の画像と第１の画像とを重なり合せ、第２の画像における顔の４４番目の顔のキーポイントをアンカーポイントとして、第２の画像全体に所定の縮小倍数で縮小処理を行い、縮小処理後の第２の画像（即ち、第４の画像）を取得し、目標位置に基づき、第４の画像に並進処理を行い、目標位置は第２の画像における顔の４４番目の顔のキーポイントが第１の画像での位置であるため、第４の画像における顔の４４番目の顔のキーポイントを目標位置に移動して、第４の画像全体に並進処理を行うことに相当し、即ち、並進処理後の第４の画像の４４番目の顔のキーポイントは、目標位置に位置する。

【0044】

この例では、目標位置に基づき、第４の画像に並進処理を実行する過程において、目標位置、第４の画像のサイズに基づき適切なサイズのマスク（例えばＴ形マスク）を決定することができ、目標位置に基づき該マスクを第１の画像の適切な位置に覆い、目標位置に基づき第４の画像を該マスクに並進移動し、第２の画像を第１の画像に描くことに相当し、第２の画像を第１の画像に描く過程において、第２の画像における顔の４４番目の顔のキーポイントが目標位置にあるのを確保する。

【0045】

なお、該例では、目標位置に基づき、第２の画像に第１の移動処理を実行する過程において、第２の画像を、まずＰ０を中心としてＳ倍縮小させ、次に並進し、第２の画像の各ピクセルＰに対して、以下の式（１）に従ってそれをＰ’の位置に移動し、

【数0001】

ここで、Ｐは、二次元データであり、端末機器の画面スペースにおける第２の画像の各ピクセルの位置座標を示し、端末機器の画面は、０～１に正規化される座標スペースであり、即ち、Ｐは、０～１範囲内の座標であり、Ｐ２＝（Ｐ１－Ｐ０）＊Ｋ＋Ｐ１であり、具体的には、上記の説明を参照する。

【0046】

他の例では、目標位置に基づき、第２の画像に第１の移動処理を実行する過程において、まず、第１の画像のＰ２を第２の画像における顔の４４番目の顔のキーポイントとすることができ、即ち、第２の画像における顔の４４番目の顔のキーポイントをＰ２に並進することによって、第２の画像全体を並進し、また、即ち、Ｐ２を第２の画像における顔の４４番目の顔の主要な固定アンカーポイントとすることにより、第２の画像全体を対応な位置に移動し、該固定アンカーポイントに基づき第２の画像に所定の縮小倍数で縮小処理を実行し、これにより、第１の移動処理後の第２の画像を取得する。該例の実現過程は上記示例の実現過程と類似し、ここで繰り返して説明しない。

【0047】

具体的には、目標位置に基づき、第２の画像に第１の移動処理を実行した後、第１の移動処理後の第２の画像の所定の位置に目標付加情報を添加し、第５の画像を取得する。第１の画像と第１の移動処理後の第２の画像に基づき、目標画像を生成するステップは、第１の画像と第５の画像に基づき、目標画像を生成するステップを含む。

【0048】

具体的には、第１の移動処理後の第２の画像を取得した後、表示しようとしない部分画像情報を覆い、または画像の面白さを増加するために、第１の移動処理後の第２の画像の所定の位置に目標付加情報を添加することができ、該目標付加情報は所定の年齢層にマッチする様々なアクセサリーであってもよく、例えば、所定の年齢層が幼児である場合、目標付加情報は、オーバーオール、ウエストチェア等であってもよく、又、例えば、所定の年齢層が高齢者である場合、目標付加情報は、車椅子、松葉杖等であってもよく、勿論、目標付加情報は、必要に応じて選択された他の特定の装飾物品であってもよく、本開示の実施例は、これを制限しない。該所定の位置は、顔の下の身体部位であってもよいし、他の身体部分であってもよく、本開示の実施例は、これを制限しない。

【0049】

具体的には、第１の移動処理後の第２の画像の所定の位置に目標付加情報を添加した後、目標画像は、実際に第１の画像と添加目標付加情報後の第２の画像とに基づき生成される。簡単に説明するために、第１の移動処理後の第２の画像の所定の位置に目標付加情報後の画像を第５の画像として添加することができ、即ち、目標画像は、第１の画像と第５の画像とに基づき生成される。図２は、本開示の実施例の目標画像の一模式図を示す。

【0050】

一可能な実現手段では、目標位置に基づき、第２の画像に第１の移動処理を実行した後、所定の移動軌跡に基づいて、第１の移動処理後の第２の画像に第２の移動処理を実行し、並進処理後の第４の画像を所定の移動軌跡で移動するという処理を実行することもできる。第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成する過程は、具体的に、第１の画像と第２の移動処理後の第２の画像に基づき、目標画像を生成することである。

【0051】

具体的には、所定の移動軌跡に基づいて、第１の移動処理後の第２の画像に第２の移動処理を実行する過程において、まず、現在の時間と所定の移動軌跡の移動開始時間の間の時差値を決定する処理、時差値に基づき、所定の移動軌跡が複数の所定の時間での変位と回転角度を含む所定の移動配列から現在の時間に対応する目標変位と目標回転角度を決定する処理、及び目標変位と回転角度とに基づき、第１の移動処理後の第２の画像の現在の時間での移動位置を決定し、第１の移動処理後の第２の画像が移動位置を移動開始位置とし、所定の移動軌跡に従って移動し続けることを決定する処理、を実行することができる。

【0052】

具体的には、さらに画像の面白さを増加し、特殊効果がより鮮明になるために、所定の移動軌跡に基づいて、第１の移動処理後の第２の画像（即ち、並進処理後の第４の画像）に第２の移動処理を実行することができ、並進処理後の第４の画像に１つの所定の移動軌跡を増加することで、それが所定の移動軌跡に沿って移動することに相当する。該所定の移動軌跡は、上下、左右に揺れることができる移動軌跡であってもよい。該所定の移動軌跡が上下、左右に揺れる移動軌跡である場合、第１の移動処理後の第２の画像に上下、左右に揺れる予め設定された運動に増加することに相当する。このときの第１の移動処理後の第２の画像に目標付加情報を添加したと、第１の移動処理後の第２の画像を目標付加情報とともに所定の移動軌跡に基づいて移動する。

【0053】

具体的には、所定の移動軌跡に基づいて、並進処理後の第４の画像に第２の移動処理を実行し、即ち、所定の移動軌跡に基づいて、並進処理後の第４の画像に第２の移動処理を実行することにより、第２の移動処理後の第４の画像を取得する。第２の移動処理後の第４の画像を取得した後、前記第１の画像と前記第２の移動処理後の第２の画像とに基づき、目標画像を生成することができる。

【0054】

通常、所定の移動軌跡は、時間ごとに異なる変位と回転角度があるとともに、何度も繰り返され、このように、１つの移動データ（即ち、所定の移動データ）を通じて、１つの運動周期内で、所定の移動軌跡が複数の所定の時間での変位と回転角度とを記憶することができる。各運動周期内の各所定の時間での変位および回転角度は同じであり、例えば、運動周期１内の所定の時間Ｔ１＿１の変位と運動周期２内の所定の時間Ｔ２＿１の変位とは同じであり、運動周期１内の所定の時間Ｔ１＿１の回転角度は、運動周期２内の所定の時間Ｔ２＿１の回転角度と同じである。

【0055】

具体的には、異なる運動時間点は、所定の移動軌跡における異なる位置に対応し、即ち、異なる運動時間点は、異なる変位と回転角度とに対応するため、並進処理後の第４の画像に１つの所定の移動軌跡を増加する際に、現在の時間に基づき現在の時間に対応する１つの変位（即ち、目標変位）と回転角度（即ち、目標回転角度）とを決定する必要がある。現在の時間と所定の移動軌跡の移動開始時間との間の時差値に基づき、現在の時間に対応する変位と回転角度とを決定することができる。時差値に基づき現在の時間に対応する変位と回転角度とを決定する際に、該時差値に基づき、所定の移動配列から対応する変位と回転角度とを選択することができ、該選択された変位を現在の時間の目標変位とするとともに、該選択された回転角度を現在の時間の目標回転角度とする。

【0056】

具体的には、目標変位と目標回転角度とを決定した後、該目標変位と目標回転角度とに基づき、所定の移動軌跡における現在の時間の対応な位置を決定し、該位置を運動開始位置として、該所定の移動軌跡に従って移動し続ける。

【0057】

一例では、現在の時間がＴ＿ｃｕｒｒｅｎｔであり、所定の移動軌跡の移動開始時間がＴ＿ｂｅｇｉｎであると仮定し、まず、時間差は、Ｔ＿ｃｕｒｒｅｎｔからＴ＿ｂｅｇｉｎを引くことで計算でき、時間差を取得した後、該時間差に基づき所定の移動配列に記憶された各変位と各回転角度から、対応する変位Ｔと回転角度Ｄとを選択することができ、該変位Ｔは、現在の時間の目標変位であり、該回転角度Ｄはｋ現在の時間の目標回転角度であり、該目標変位と該目標回転角度とに基づき、並進処理後の第４の画像の現在の時間での移動位置を決定し、並進処理後の第４の画像が該移動位置を移動開始位置として、該所定の移動軌跡に従って移動し続ける。

【0058】

この例では、所定の移動軌跡に基づいて、並進処理後の第４の画像に実行された第２の移動処理は、式（１）の上で予め設定されたＰ２に基づく変位と回転を増加し、変位と回転角度を増加した後の式は式（２）、

【数0002】

に示される。

【0059】

Ｍは、回転角度Ｄによって得られる二次元回転行列であり、

【数0003】

であり、Ｔは、変位である。

【0060】

説明する必要がある点として、第２の画像のみに第１の移動処理を実行すると、上記式（１）を使用すればよく、第２の画像に第１の移動処理を実行する必要があるだけでなく、第１の移動処理後の第２の画像に第２の移動処理を実行する必要もあると、式（１）を使用せず、上記式（２）を直接使用する。

【0061】

図３は、本開示の他の実施例による画像処理装置の構造模式図であり、図３に示すように、該装置３００は、第１の処理モジュール３０１、決定モジュール３０２、第２の処理モジュール３０３及び第３の処理モジュール３０４を備えることができ、
第１の処理モジュール３０１は、取得された第１の画像は顔を含む場合、第１の画像に第１の変換処理を実行し、第２の画像を取得するために使用され、
決定モジュール３０２は、第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定するために使用され、
第２の処理モジュール３０３は、目標位置に基づき、第２の画像に第１の移動処理を実行するために使用され、
第３の処理モジュール３０４は、第１の画像と第１の移動処理後の第２の画像に基づき、目標画像を生成し、目標画像を表示するために使用される。

【0062】

一可能な実現手段では、第１の処理モジュールは、
第１の画像における顔の各第１の顔特徴にそれぞれ特徴変換処理を実行し、所定の年齢層の顔に一致する各第２の顔特徴を取得し、各第２の顔特徴を含む顔の画像を第３の画像として決定することと、
所定のポートレートマスクに基づいて、第３の画像にカットアウト処理を実行し、カットアウト処理後の画像を第２の画像として決定することと、に用いられる。

【0063】

一可能な実現手段では、第１の添加モジュールを更に備え、
第１の添加モジュールは、第２の画像に顔特徴に対応する付加情報を添加するために使用され、
第２の処理モジュールは、顔特徴に対応する付加情報を添加した後の第２の画像に第１の移動処理を実行するために使用される。

【0064】

一可能な実現手段では、第１の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントおよび１６番目の顔のキーポイントであり、第２の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントであり、
決定モジュールは、具体的には、
第１の画像における顔の４４番目の顔のキーポイントから１６番目の顔のキーポイントまでの方向ベクトルを決定することと、
第１の所定の計算式に基づいて、所定の変位倍数、方向ベクトル及び第１の画像における顔の１６番目の顔のキーポイントに基づき、第１の位置点を取得し、第１の位置点を第２の画像における顔の４４番目の顔のキーポイントの第１の画像での目標位置として決定することと、に用いられる。

【0065】

一可能な実現手段では、第２の処理モジュールは、
所定の縮小倍数に基づき、第１の画像における顔の４４番目の顔のキーポイントを顔の中心点とする第２の画像に縮小処理を実行し、第４の画像を取得することと、
目標位置に基づき、第４の画像に並進処理を実行することと、に用いられる。

【0066】

一可能な実現手段では、第２の添加モジュールを更に備え、
第２の添加モジュールは、第１の移動処理後の第２の画像の所定の位置に目標付加情報を添加し、第５の画像を取得するために使用され、
第３の処理モジュールは、第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成する際に、第１の画像と第５の画像とに基づき、目標画像を生成するために使用される。

【0067】

一可能な実現手段では、第４の処理モジュールを更に備え、
第４の処理モジュールは、所定の移動軌跡に基づいて、第１の移動処理後の第２の画像に第２の移動処理を実行することで、並進処理後の第４の画像が所定の移動軌跡で移動するために使用され、
第３の処理モジュールは、第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成するとき、第１の画像と第２の移動処理後の第２の画像に基づき、目標画像を生成するために使用される。

【0068】

一可能な実現手段では、第４の処理モジュールは、具体的には、
現在の時間と所定の移動軌跡の移動開始時間の間の時差値を決定することと、
時差値に基づき、所定の移動軌跡が複数の所定の時間での変位と回転角度とを含む所定の移動配列から現在の時間に対応する目標変位と目標回転角度とを決定することと、
目標変位と回転角度に基づき、第１の移動処理後の第２の画像の現在の時間での移動位置を決定し、第１の移動処理後の第２の画像が移動位置を移動開始位置とし、所定の移動軌跡に従って移動し続けることを決定することと、に用いられる。

【0069】

本開示の実施例による装置は、第１の画像における顔の第１の目標顔のキーポイントに基づいて、第１の変換処理後の第２の画像に第１の移動処理を実行し、第１の画像と第１の移動処理後の第２の画像に基づき、目標画像を生成し、目標画像は第１の画像の画像情報だけでなく、第１の画像に第１の変換処理を実行することによって得られた第２の画像の画像情報も含み、目標画像における第１の画像の画像情報と第２の画像の画像情報とは異なる画像位置に位置することができ、ユーザに様式が新規な特殊効果画像を提供し、画像変更に対するユーザの多様なニーズを満たし、ユーザエクスペリエンスとユーザ満足度を効果的に向上させる。

【0070】

説明する必要がある点として、本実施例は、上記の方法実施例に対応する装置実施例であり、本実施例が上記方法実施例に合わせて実施することができる。上記方法実施例に言及された関連技術細部は、本実施例において依然として有効であり、繰り返しを減らすために、ここで説明しない。対応的に、本実施例に言及された関連技術細部は上記方法実施例にも適用できる。

【0071】

以下、図４を参照すると、図４は、本開示の実施例を実現するのに適する電子機器４００の概略構造図を示している。本開示の実施例における端末機器は、携帯電話、ノートパソコン、デジタル放送受信機、ＰＤＡ（パーソナルデジタルアシスタント）、ＰＡＤ（タブレット）、ＰＭＰ（ポータブルマルチメディアプレーヤー）、車載端末（例えば車載ナビゲーション端末）などのモバイル端末、及び、デジタルＴＶ、デスクトップコンピュータなどの固定端末を含み得るが、これらに限定されない。図４に示す電子機器は、一例にすぎず、本開示の実施例の機能及び使用範囲にいかなる制限を与えるべきではない。

【0072】

電子機器は、メモリ及びプロセッサを備え、ここでのプロセッサは、後述する処理装置４０１とも呼ばれ、メモリは、以下の読み取り専用メモリ（ＲＯＭ）４０２、ランダムアクセスメモリ（ＲＡＭ）４０３及び存儲装置４０８のうちの少なくとも１つを含み、具体的に以下のとおりである。

【0073】

図４に示すように、電子機器４００は、処理装置（例えば、中央プロセッサ、グラフィックスプロセッサなど）４０１を含み得、読み取り専用メモリ（ＲＯＭ）４０２に記憶されているプログラム又は装置４０８からランダムアクセスメモリ（ＲＡＭ）４０３にロードされるプログラムに応じて、様々な適切な動作及び処理を実行することができる。ＲＡＭ４０３には、さらに、電子機器の４００操作に必要な様々なプログラム及びデータが記憶されている。処理装置４０１、ＲＯＭ４０２及びＲＡＭ４０３は、バス４０４を介して互いに接続されている。入力／出力（Ｉ／Ｏ）インターフェース４０５も、バス４０４に接続されている。

【0074】

通常、例えば、タッチスクリーン、タッチパッド、キーボード、マウス、カメラ、マイクロフォン、加速度計、ジャイロスコープなどを含む入力装置４０６と、例えば、液晶ディスプレイ（ＬＣＤ）、スピーカ、バイブレータなどを含む出力装置４０７と、例えば、磁気テープ、ハードディスクなどを含む記憶装置４０８と、通信装置４０９とは、Ｉ／Ｏインターフェース４０５に接続されることができる。通信装置４０９は、電子機器４００が他の機器と無線又は有線で通信してデータを交換することを可能にすることができる。図４に様々な装置を有する電子機器４００を示したが、示された全ての装置を実施するか又は備える必要がないことを理解されたい。これに代えて、よりも多く又は少ない装置を実施するか又は備えてもよい。

【0075】

特に、本開示の実施例によれば、以上でフローチャートを参照して説明したプロセスは、コンピュータソフトウェアプログラムとして実装され得る。例えば、本開示の実施例は、コンピュータ可読媒体に担持されているコンピュータプログラムを含むコンピュータプログラム製品を含み、当該コンピュータプログラムは、フローチャートに示す方法を実行するためのプログラムコードを含む。このような実施例において、当該コンピュータプログラムは、通信装置４０９によってネットワークからダウンロードされてインストールされてもよいし、記憶装置４０８からインストールされてもよいし、ＲＯＭ４０２からインストールされてもよい。当該コンピュータプログラムが処理装置４０１によって実行されると、本開示の実施例の方法に限定される上記の機能が実行される。

【0076】

説明する必要がある点として、本開示の上記のコンピュータ可読媒体は、コンピュータ可読信号媒体であっても、コンピュータ可読記憶媒体であっても、上記の両者の任意のオーバーレイであってもよい。コンピュータ可読記憶媒体は、例えば、電気、磁気、光、電磁気、赤外線、もしくは半導体のシステム、装置もしくはデバイス、又は以上の任意のオーバーレイであり得るが、これらに限定されない。コンピュータ可読記憶媒体のより具体的な例は、１つ又は複数のワイヤを有する電気接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥＰＲＯＭ又はフラッシュメモリ）、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）、光記憶デバイス、磁気記憶デバイス、又は上記の任意の適切なオーバーレイを含み得るが、これらに限定されない。本開示において、コンピュータ可読記憶媒体は、プログラムを含むか又は記憶する任意の有形媒体であり得、当該プログラムは、命令実行システム、装置又はデバイスによって、又はそれらと組み合わせて使用することができる。本開示において、コンピュータ可読信号媒体は、ベースバンドで、又は搬送波の一部として伝播されるデータ信号を含み、データ信号は、コンピュータ可読なプログラムコードを担持する。このような伝播されるデータ信号は、複数の形態を採用することができ、電磁気信号、光信号又は上記の任意の適切なオーバーレイを含むが、これらに限定されない。コンピュータ可読信号媒体は、さらに、コンピュータ可読記憶媒体以外のいずれのコンピュータ可読媒体であってもよく、当該コンピュータ可読信号媒体は、命令実行システム、装置又はデバイスによって、又はそれらと組み合わせて使用するためのプログラムを送信、伝播又は伝送することができる。コンピュータ可読媒体に含まれているプログラムコードをいずれの適切な媒体で伝送することができ、前記媒体は、電線、光ケーブル、ＲＦ（無線周波数）など、又は上記の任意の適切なオーバーレイを含むが、これらに限定されない。

【0077】

上記のコンピュータ可読媒体は、上記の電子機器に含まれるものであってもよいし、当該電子機器に組み込まれず、単独で存在するものであってもよい。

【0078】

上記のコンピュータ可読媒体には、１つ又は複数のプログラムが担持されており、上記の１つ又は複数のプログラムが当該電子機器によって実行されると、当該電子機器に、取得された第１の画像は顔を含む場合、第１の画像に第１の変換処理を実行し、第２の画像を取得するステップと、第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定するステップと、目標位置に基づき、第２の画像に第１の移動処理を実行するステップと、第１の画像と第１の移動処理後の第２の画像に基づき、目標画像を生成し、目標画像を表示するステップと、を実行させる。

【0079】

１つ又は複数のプログラミング言語又はそれらのオーバーレイで本開示の操作を実行するためのコンピュータプログラムコードを作成することができ、上記のプログラミング言語は、Ｊａｖａ、Ｓｍａｌｌｔａｌｋ、Ｃ＋＋などのオブジェクト指向のプログラミング言語だけでなく、「Ｃ」言語又は類似しているプログラミング言語などの一般的なプロシージャプログラミング言語を含む。プログラムコードは、完全にユーザコンピュータ上で実行されても、部分的にユーザコンピュータ上で実行されても、１つのソフトウェアパケットとして実行されても、一部がユーザコンピュータ上で一部がリモートコンピュータ上で実行されても、完全にリモートコンピュータ又はサーバで実行されてもよい。リモートコンピュータに関する場合、リモートコンピュータは、ローカルエリアネットワーク（ＬＡＮ）又はワイドエリアネットワーク（ＷＡＮ）を含む任意のタイプのネットワークを介してユーザコンピュータに接続することができるか、又は、外部のコンピュータに接続することができる（例えば、インターネットサービスプロバイダを利用してインターネットを介して接続することができる）。

【0080】

図面におけるフローチャート及びブロック図は、本開示の様々な実施例のシステム、方法及びコンピュータプログラム製品に従って実現可能な体系アーキテクチャ、機能と操作を示した。この点で、フローチャート又はブロック図における各ブロックは、１つのモジュール、プログラムセグメント、又はコードの一部を代表することができ、当該モジュール、プログラムセグメント、又はコードの一部はプリセットの論理機能を実現するための１つ又は複数の実行可能命令を含む。置き換えとする一部の実装において、ブロックに注記される機能が図面に注記された順序と異なる順序で発生されることができると注意すべきである。例えば、２つの連続して表示されたブロックは、実際には基本的に並列に実行されてもよく、それらは、関係のある機能に応じて逆の順序で実行される場合もある。ブロック図又はフローチャートにおける各ブロック、及びブロック図又はフローチャートにおけるブロックの組み合わせは、プリセットの機能又は操作を実行するために専用の、ハードウェアに基づくシステムで実装できるか、又は、専用のハードウェアとコンピュータ命令との組み合わせで実装できることに注意されたい。

【0081】

本開示の実施例の説明に係るモジュールまたはユニットは、ソフトウェアの方式で実装されても、ハードウェアの方式で実装されてもよい。ここで、モジュールまたはユニットの名称は、ある場合には、当該ユニット自体に対する限定を構成しなく、例えば、取得モジュールは、「所定のライブイベントが発生したことを検出すると、所定のライブイベントに対応する少なくとも１つのイベント処理方式を取得するモジュール」として説明されてもよい。

【0082】

本明細書において上述した機能は、少なくても一部が、１つ又は複数のハードウェア論理部品によって実行されてもよい。例えば、限定ではなく、使用可能な例示的なハードウェア論理部品は、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、特定用途向け標準製品（ＡＳＳＰ）、システムオンチップ（ＳＯＣ）、複雑プログラマブル論理デバイス（ＣＰＬＤ）などを含む。

【0083】

本開示のコンテキストでは、機器可読媒体は、有形の媒体であってもよく、それは、命令実行システム、装置又は機器の使用に提供するか、又は、命令実行システム、装置又は機器と結合して使用するためのプログラムを含むか又は記憶することができる。機器可読媒体は、機器可読信号媒体であっても、機器可読記憶媒体であってもよい。機器可読媒体は、電子的、磁気的、光学的、電磁気的、赤外線的、又は半導体システム、装置又は機器、又は上記内容の任意の適切な組合せを含んでもよいが、これらに限定されない。機器可読記憶媒体のより具体的な例は、１つ又は複数の線に基づく電気接続、携帯型コンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥＰＲＯＭ又はファラッシュメモリ）、光ファイバ、携帯型コンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）、光学記憶機器、磁気記憶機器、又は上記内容の任意の適切な組合せを含む。

【0084】

本開示の１つまたは複数の実施例によれば、画像処理方法を提供し、
取得された第１の画像は顔を含む場合、第１の画像に第１の変換処理を実行し、第２の画像を取得するステップと、
第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定するステップと、
目標位置に基づき、第２の画像に第１の移動処理を実行するステップと、
第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成し、目標画像を表示するステップと、を含む。

【0085】

一つの可能な実現手段では、第１の画像に第１の変換処理を実行し、第２の画像を取得するステップは、
第１の画像における顔の各第１の顔特徴にそれぞれ特徴変換処理を実行し、所定の年齢層の顔に一致する各第２の顔特徴を取得し、各第２の顔特徴を含む顔の画像を第３の画像として決定するステップと、
所定のポートレートマスクに基づいて、第３の画像にカットアウト処理を実行し、カットアウト処理後の画像を第２の画像として決定するステップと、を含む。

【0086】

一つの可能な実現手段では、目標位置に基づき、第２の画像に第１の移動処理を実行する前に、
第２の画像に顔特徴に対応する付加情報を添加するステップをさらに含み、
第２の画像に第１の移動処理を実行するステップは、
顔特徴に対応する付加情報を添加した後の第２の画像に第１の移動処理を実行するステップを含む。

【0087】

一つの可能な実現手段では、第１の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントおよび１６番目の顔のキーポイントであり、第２の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントであり、
第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定するステップは、
第１の画像における顔の４４番目の顔のキーポイントから１６番目の顔のキーポイントまでの方向ベクトルを決定するステップと、
第１の所定の計算式に基づいて、所定の変位倍数、方向ベクトル及び第１の画像における顔の１６番目の顔のキーポイントに基づき、第１の位置点を取得し、第１の位置点を第２の画像における顔の４４番目の顔のキーポイントの第１の画像での目標位置として決定するステップと、を含む。

【0088】

一つの可能な実現手段では、目標位置に基づき、第２の画像に第１の移動処理を実行するステップは、
所定の縮小倍数に基づき、第１の画像における顔の４４番目の顔のキーポイントを顔の中心点とする第２の画像に縮小処理を実行し、第４の画像を取得するステップと、
目標位置に基づき、第４の画像に並進処理を実行するステップと、を含む。

【0089】

一つの可能な実現手段では、目標位置に基づき、第２の画像に第１の移動処理を実行した後、
第１の移動処理後の第２の画像の所定の位置に目標付加情報を添加し、第５の画像を取得するステップをさらに含み、
第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成するステップは、
第１の画像と第５の画像とに基づき、目標画像を生成するステップを含む。

【0090】

一つの可能な実現手段では、目標位置に基づき、第２の画像に第１の移動処理を実行した後、
所定の移動軌跡に基づいて、第１の移動処理後の第２の画像に第２の移動処理を実行することで、並進処理後の第４の画像が所定の移動軌跡で移動するステップをさらに含み、
第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成するステップは、
第１の画像と第２の移動処理後の第２の画像とに基づき、目標画像を生成するステップを含む。

【0091】

一つの可能な実現手段では、所定の移動軌跡に基づいて、第１の移動処理後の第２の画像に第２の移動処理を実行するステップは、
現在の時間と所定の移動軌跡の移動開始時間との間の時差値を決定するステップと、
時差値に基づき、所定の移動軌跡が複数の所定の時間での変位と回転角度とを含む所定の移動配列から現在の時間に対応する目標変位と目標回転角度とを決定するステップと、
目標変位と回転角度に基づき、第１の移動処理後の第２の画像の現在の時間での移動位置を決定し、第１の移動処理後の第２の画像が移動位置を移動開始位置とし、所定の移動軌跡に従って移動し続けることを決定するステップと、を含む。

【0092】

本開示の１つまたは複数の実施例によれば、画像処理装置を提供し、
取得された第１の画像は顔を含む場合、第１の画像に第１の変換処理を実行し、第２の画像を取得するための第１の処理モジュールと、
第１の画像における顔の第１の目標顔のキーポイントに基づいて、第２の画像における顔の第２の目標顔のキーポイントの第１の画像での目標位置を決定するための決定モジュールと、
目標位置に基づき、第２の画像に第１の移動処理を実行するための第２の処理モジュールと、
第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成し、目標画像を表示するための第３の処理モジュールと、を備える。

【0093】

一つの可能な実現手段では、第１の処理モジュールは、
第１の画像における顔の各第１の顔特徴にそれぞれ特徴変換処理を実行し、所定の年齢層の顔に一致する各第２の顔特徴を取得し、各第２の顔特徴を含む顔の画像を第３の画像として決定することと、
所定のポートレートマスクに基づいて、第３の画像にカットアウト処理を実行し、カットアウト処理後の画像を第２の画像として決定することと、に用いられる。

【0094】

一つの可能な実現手段では、第１の添加モジュールを更に備え、
第１の添加モジュールは、第２の画像に顔特徴に対応する付加情報を添加するために使用され、
第２の処理モジュールは、顔特徴に対応する付加情報を添加した後の第２の画像に第１の移動処理を実行するために使用される。

【0095】

一つの可能な実現手段では、第１の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントおよび１６番目の顔のキーポイントであり、第２の目標顔のキーポイントは、１０６個の顔のキーポイントのうちの４４番目の顔のキーポイントであり、
決定モジュールは、具体的には、
第１の画像における顔の４４番目の顔のキーポイントから１６番目の顔のキーポイントまでの方向ベクトルを決定することと、
第１の所定の計算式に基づいて、所定の変位倍数、方向ベクトル及び第１の画像における顔の１６番目の顔のキーポイントに基づき、第１の位置点を取得し、第１の位置点を第２の画像における顔の４４番目の顔のキーポイントの第１の画像での目標位置として決定することと、に用いられる。

【0096】

一つの可能な実現手段では、第２の処理モジュールは、
所定の縮小倍数に基づき、第１の画像における顔の４４番目の顔のキーポイントを顔の中心点とする第２の画像に縮小処理を実行し、第４の画像を取得することと、
目標位置に基づき、第４の画像に並進処理を実行することと、に用いられる。

【0097】

一つの可能な実現手段では、第２の添加モジュールを更に備え、
第２の添加モジュールは、第１の移動処理後の第２の画像の所定の位置に目標付加情報を添加し、第５の画像を取得するために使用され、
第３の処理モジュールは、第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成する際に、第１の画像と第５の画像とに基づき、目標画像を生成するために使用される。

【0098】

一つの可能な実現手段では、第４の処理モジュールを更に備え、
第４の処理モジュールは、所定の移動軌跡に基づいて、第１の移動処理後の第２の画像に第２の移動処理を実行することで、並進処理後の第４の画像が所定の移動軌跡で移動するために使用され、
第３の処理モジュールは、第１の画像と第１の移動処理後の第２の画像とに基づき、目標画像を生成する際に、第１の画像と第２の移動処理後の第２の画像とに基づき、目標画像を生成するために使用される。

【0099】

一つの可能な実現手段では、第４の処理モジュールは、具体的には、
現在の時間と所定の移動軌跡の移動開始時間との間の時差値を決定することと、
時差値に基づき、所定の移動軌跡が複数の所定の時間での変位と回転角度とを含む所定の移動配列から現在の時間に対応する目標変位と目標回転角度とを決定することと、
目標変位と回転角度とに基づき、第１の移動処理後の第２の画像の現在の時間での移動位置を決定し、第１の移動処理後の第２の画像が移動位置を移動開始位置とし、所定の移動軌跡に従って移動し続けることを決定することと、に用いられる。

【0100】

以上の記述は、本開示の好適な実施例及び使用された技術原理に対する説明にすぎない。当業者であれば、本開示に係る開示範囲は、上記の技術的特徴の特定の組合せによる技術案に限定されず、上記の開示の構想から逸脱しない範囲内に含まれている場合、上記の技術的特徴又はそれらの同等の特徴を任意に組合せすることにより形成された他の技術案を含むべきであると理解するであろう。例えば、上記の特徴と、本開示に開示されている（但し、これらに限定されない）類似する機能を有する技術的特徴とを互に置き換えて形成する技術案である。

【0101】

なお、特定の手順で各操作を説明したが、これは、示された特定の手順又は順序の手順でこれらの操作を実行すると理解してはいけない。一定の環境では、マルチタスクと並行処理が有利である可能性がある。同様に、上記の論述にはいくつかの具体的な実装の詳細が含まれるが、これらは、本開示の範囲に対する限定として解釈されるべきではない。個別の実施例のコンテキストに説明された一部の特徴は、さらに、単一の実施例に組合せして実装されてもよい。むしろ、単一の実施例のコンテキストに説明された様々な特徴は、単独で、又は任意の適切なサブ組合せの方式で複数の実施例で実現されてもよい。

【0102】

構造的特徴又は方法論理動作に特有の言語を用いて本主題を説明したが、特許請求の範囲に限定される主題は、必ずしも上述した特定の特徴又は動作に限定されるものである必要はないことを理解されたい。むしろ、上述した特定の特徴と動作は、特許請求の範囲を実現する例示的な形態にすぎない。

【0103】

本開示は、２０２０年４月１３日に中国国家知識産権局に提出された、出願番号が、ＣＮ２０２０１０２８７３９３．４の中国特許出願の優先権を主張し、そのすべての内容は引用により全体として本明細書に組み込まれる。

【図1】

【図2】

【図3】

【図4】