特許 7540796 画像処理方法、装置、電子デバイス及び記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-08-19

(45)【発行日】2024-08-27

(54)【発明の名称】画像処理方法、装置、電子デバイス及び記憶媒体

(51)【国際特許分類】

   G06T 5/80 20240101AFI20240820BHJP

   G06T 19/20 20110101ALI20240820BHJP

   G06F 3/04883 20220101ALI20240820BHJP

【ＦＩ】

G06T5/80

G06T19/20

G06F3/04883

【請求項の数】 14

(21)【出願番号】P 2023507570

(86)(22)【出願日】2021-08-10

(65)【公表番号】

(43)【公表日】2023-09-07

(86)【国際出願番号】 CN2021111737

(87)【国際公開番号】W WO2022042291

(87)【国際公開日】2022-03-03

【審査請求日】2023-02-03

(31)【優先権主張番号】202010901576.0

(32)【優先日】2020-08-31

(33)【優先権主張国・地域又は機関】CN

(73)【特許権者】

【識別番号】520476341

【氏名又は名称】北京字節跳動網絡技術有限公司

【氏名又は名称原語表記】Ｂｅｉｊｉｎｇ Ｂｙｔｅｄａｎｃｅ Ｎｅｔｗｏｒｋ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ．

【住所又は居所原語表記】Ｒｏｏｍ Ｂ－００３５， ２／Ｆ， Ｎｏ．３ Ｂｕｉｌｄｉｎｇ， Ｎｏ．３０， Ｓｈｉｘｉｎｇ Ｒｏａｄ， Ｓｈｉｊｉｎｇｓｈａｎ Ｄｉｓｔｒｉｃｔ Ｂｅｉｊｉｎｇ １０００４１ Ｃｈｉｎａ

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】パン，ジアリ

(72)【発明者】

【氏名】グオ，イ

(72)【発明者】

【氏名】リ，シャオフォン

(72)【発明者】

【氏名】ウ，ジンユアン

(72)【発明者】

【氏名】チェン，シュイ

【審査官】渡部 幸和

(56)【参考文献】

【文献】中国特許出願公開第１１０６３９２０４（ＣＮ，Ａ）

【文献】特開２０１２－０５３６３１（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１８／０１２２１３８（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ ５／００

Ｇ０６Ｔ １９／２０

Ｇ０６Ｆ ３／０４８８３

(57)【特許請求の範囲】

【請求項1】

表示アセンブリ上でユーザーが入力したスライド軌跡を取得するステップと、
前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成するステップと、
前記第１の仮想モデルをターゲット画像における第１の位置に表示するステップと、
前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整するステップと、
を含むことを特徴とする画像処理方法。

【請求項2】

前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成するステップは、
前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定するステップと、
前記複数のターゲット点のそれぞれに対応するプリセットサブモデルを取得するステップと、
前記複数のターゲット点のそれぞれの幾何学的情報に基づき、各ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換するステップと、
前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成するステップと、
を含むことを特徴とする請求項１に記載の方法。

【請求項3】

前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定するステップは、
前記スライド軌跡に従って、前記スライド軌跡内の複数の軌跡点を決定するステップと、
前記複数の軌跡点に対してフィット計算を行って、フィット曲線を得るステップと、
前記フィット曲線に対してサンプリングを行って、前記スライド軌跡に関連する複数のターゲット点を得るステップであって、前記ターゲット点には、前記フィット曲線上のサンプリング点が含まれるステップと、
を含むことを特徴とする請求項２に記載の方法。

【請求項4】

前記ターゲット点の幾何学的情報には、
複数の軌跡点における開始軌跡点に対する前記ターゲット点のオフセット量と、
フィット曲線上の前記ターゲット点の接線方向とのうちの少なくとも１つが含まれている、
ことを特徴とする請求項２に記載の方法。

【請求項5】

前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成するステップは、
前記各ターゲット点の識別子に基づいて、前記各ターゲット点のそれぞれに対応するターゲットサブモデルを結合させて、前記スライド軌跡に対応する第１の仮想モデルを得るステップを含み、
前記ターゲット点の識別子は、前記第１の仮想モデルにおける前記ターゲット点に対応するターゲットサブモデルの位置を決定するために使用される、
ことを特徴とする請求項２に記載の方法。

【請求項6】

前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整するステップは、
前記スライド軌跡内の他の軌跡点に対する前記スライド軌跡内の開始軌跡点の方向を決定するステップと、
前記スライド軌跡内の他の軌跡点に対する前記スライド軌跡内の開始軌跡点の方向に対して集約計算を行い、集約方向を得るステップと、
前記集約方向に基づいて、前記第１の仮想モデルの方向を調整するステップと、
を含むことを特徴とする請求項１に記載の方法。

【請求項7】

前記第１の仮想モデルをターゲット画像における第１の位置に表示するステップは、
前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示するステップを含む、
ことを特徴とする請求項１に記載の方法。

【請求項8】

前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示した後、前記方法は、さらに、
鏡像制御コマンドを受信するステップと、
前記鏡像制御コマンドに応答して、前記ターゲットオブジェクトにおける前記第１の位置と対称な第２の位置を決定するステップと、
前記第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを前記第２の位置に表示するステップと、
を含むことを特徴とする請求項７に記載の方法。

【請求項9】

前記第１の仮想モデルをターゲット画像における第１の位置に表示した後、さらに、
前記第１の仮想モデルのパラメータを調整するステップと、
調整された前記パラメータに基づいて、前記第１の仮想モデルを更新するステップと、
を含むことを特徴とする請求項１に記載の方法。

【請求項10】

前記第１の仮想モデルのパラメータを調整するステップは、
前記第１の仮想モデルに対するパラメータ調整コマンドを受信するステップと、
前記パラメータ調整コマンドに応答して、前記第１の仮想モデルのパラメータを調整するステップと、
を含むことを特徴とする請求項９に記載の方法。

【請求項11】

前記第１の仮想モデルのパラメータを調整するステップは、
オーディオ情報を取得するステップと、
前記オーディオ情報のパラメータに基づいて、前記第１の仮想モデルのパラメータを調整するステップと、
を含むことを特徴とする請求項９に記載の方法。

【請求項12】

表示アセンブリ上でユーザーが入力したスライド軌跡を取得する取得モジュールと、
前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成して、前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整する作成モジュールと、
前記第１の仮想モデルをターゲット画像における第１の位置に表示する表示モジュールと、
を含むことを特徴とする画像処理装置。

【請求項13】

１つ以上のプロセッサと、
１つ以上のプログラムを記憶するための記憶装置と、
を含む電子デバイスであって、
前記１つ以上のプログラムが前記１つ以上のプロセッサによって実行されるときに、前記１つ以上のプロセッサに請求項１から１１のいずれか１項に記載の方法を実現させる、ことを特徴とする電子デバイス。

【請求項14】

コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムがプロセッサによって実行されるときに、請求項１から１１のいずれか１項に記載の方法を実現する、ことを特徴とするコンピュータ読取可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本出願は、２０２０年０８月３１日に中国国家知識産権局に提出された、出願番号が２０２０１０９０１５７６．０であって発明の名称が「画像処理方法、装置、電子デバイス及び記憶媒体」である中国特許出願に基づく優先権を主張し、その内容全体が援用により本明細書に組み込まれる。

【0002】

本開示は、情報の技術分野に関し、特に画像処理方法、装置、電子デバイス及び記憶媒体に関する。

【背景技術】

【0003】

スマート端末の発展に伴い、ますます多くのアプリケーションプログラム(Ａｐｐｌｉｃａｔｉｏｎ,ＡＰＰ)をスマート端末にインストールして、ユーザー向けに対応するサービスを提供することができる。

【0004】

例えば、従来の技術におけるアプリケーションプログラムは、仮想モデルを所定の画像または端末デバイスによって収集された画像に追加したりすることによって、画像の趣味性を高めることができる。

【0005】

しかしながら、従来の技術では、所定の画像またはスマート端末によって収集された画像に追加された仮想モデルが予め設定されており、例えば、仮想モデルがアプリケーションプログラム、端末デバイスまたはリモートサーバに予め格納されていてもよく、ユーザーが選択可能な仮想モデルが比較的限定されており、仮想モデルの表示時の柔軟性が低下してしまう。

【発明の概要】

【課題を解決するための手段】

【0006】

上記の技術的問題を解決するか、または上記の技術的問題を少なくとも部分的に解決するために、本開示の実施形態は、ユーザーが入力したスライド軌跡に従ってユーザーのニーズを満たした仮想モデルをリアルタイムで生成することができ、仮想モデルの柔軟性を向上させることができる画像処理方法、装置、電子デバイス及び記憶媒体を提供する。

【0007】

本開示の実施形態は、画像処理方法であって、
表示アセンブリ上でユーザーが入力したスライド軌跡を取得するステップと、
前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成するステップと、
前記第１の仮想モデルをターゲット画像における第１の位置に表示するステップと、
を含む方法を提供する。

【0008】

本開示の実施形態はさらに、
表示アセンブリ上でユーザーが入力したスライド軌跡を取得する取得モジュールと、
前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成する作成モジュールと、
前記第１の仮想モデルをターゲット画像における第１の位置に表示する表示モジュールと、を含む画像処理装置を提供する。

【0009】

本開示の実施形態はさらに、
１つ以上のプロセッサと、
１つ以上のプログラムを記憶するための記憶装置と、
を含む電子デバイスであって、
前記１つ以上のプログラムが前記１つ以上のプロセッサによって実行されるときに、前記１つ以上のプロセッサに上述した画像処理方法を実現させる電子デバイスを提供する。

【0010】

本開示の実施形態はさらに、コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体であって、当該プログラムがプロセッサによって実行されるときに、上述した画像処理方法を実現させるコンピュータ読取可能な記憶媒体を提供する。

【0011】

本開示の実施形態に係る技術案は従来の技術と比べて以下の利点がある。即ち、本開示の実施形態に係る画像処理方法は、表示アセンブリ上でユーザーが入力したスライド軌跡を取得し、当該スライド軌跡に対応する仮想モデルを作成するとともに、仮想モデルをターゲット画像における第１の位置に表示することによって、ユーザーが入力した異なるスライド軌跡に従って異なる仮想モデルを作成することができ、例えば、スライド軌跡の形状が異なると、仮想モデルの形状も異なるため、ターゲット画像内の仮想モデルは、ユーザーが入力したスライド軌跡の変化に応じて変化することができ、即ち、ユーザーが入力したスライド軌跡に従って、ユーザーのニーズを満たした仮想モデルをリアルタイムで作成することができるため、仮想モデルの表示時の柔軟性を向上させることができる。

【図面の簡単な説明】

【0012】

本開示の各実施例の上記及び他の特徴、利点、及び態様は、添付の図面と併せて、以下の具体的な実施形態を参照すると、より明らかになるであろう。図面全体において、同じまたは類似の図面符号は、同じまたは類似の要素を指す。図面は概略図であって、部材及び要素は必ずしも一定の縮尺で描かれるわけではないことは、理解されるべきであろう。

【図1】本開示の実施形態による画像処理方法のフローチャートである。

【図2】本開示の実施形態によるスライド軌跡の概略図である。

【図3】本開示の実施形態による人の顔画像の概略図である。

【図4】本開示の実施形態による仮想モデルの概略図である。

【図5】本開示の実施形態による互いに鏡像関係にある仮想モデルの概略図である。

【図6】本開示の実施形態による別の画像処理方法のフローチャートである。

【図7】本開示の実施形態による軌跡点の概略図である。

【図8】本開示の実施形態によるプリセットサブモデル及びターゲットサブモデルの概略図である。

【図9】本開示の実施形態における仮想モデルの概略図である。

【図10】本開示の実施形態における別の画像処理方法のフローチャートである。

【図11】本開示の実施形態によるスライド軌跡と仮想モデルの概略図である。

【図12】本開示の実施形態による別の画像処理方法のフローチャートである。

【図13】本開示の実施形態によるユーザーインターフェースの概略図である。

【図14】本開示の実施形態による別の画像処理方法のフローチャートである。

【図15】本開示の実施形態による画像処理装置の構成概略図である。

【図16】本開示の実施形態による電子デバイスの構成概略図である。

【発明を実施するための形態】

【0013】

以下、本開示の実施例について図面を参照してより詳しく説明する。本開示のいくつかの実施例は図面に示されているが、本開示は様々な形態で実現されてもよく、本明細書に記載された実施例に制限されるものと解釈されるべきではなく、むしろこれらの実施例は本開示をより深くかつ完全に理解するために提供されることに理解されたい。また、本開示の図面及び実施例は、例示的な目的に挙げられるだけであって、本開示の保護範囲を制限することを意図するものではないことは理解されるべきであろう。

【0014】

本開示の方法実施形態に記載される各ステップは、異なる順序に従って実行され、及び／または並行して実行されることが理解されるべきである。また、方法実施形態は、追加のステップを含み、及び／または図示されるステップの実行を省略することができる。本開示の範囲はこの点に関して限定されない。

【0015】

本明細書に使用される「含む」という用語及びその変形は、自由形式の包含、即ち、「含むがこれらに限定されない」という意味である。「に基づく」という用語は、「少なくとも部分的に基づく」という意味である。「一実施形態」という用語は、「少なくとも１つの実施形態」を意味し、「別の実施形態」という用語は、「少なくとも１つの別の実施形態」を意味し、「いくつかの実施形態」という用語は、「少なくともいくつかの実施形態」を意味する。また、他の用語に関連する定義は、以下で説明される。

【0016】

なお、本開示に言及される「第１」、「第２」などの概念は、異なる装置、モジュールまたはユニットを区別するためにのみ使用され、これらの装置、モジュール、またはユニットによって実行される機能の順序または相互依存関係を制限することを意図するものではない。

【0017】

なお、本開示に言及される「１つ」及び「複数」などの修飾は、限定的ではなく例示的であり、当業者であれば理解できるように、文脈において明示的に特段の指示がない限り、「１つ以上」として解釈されるべきである。

【0018】

本開示の実施形態による複数の装置間でやり取りされるメッセージまたは情報の名称は、例示のみを目的とし、これらのメッセージまたは情報の範囲を限定することを意図するものではない。

【0019】

図１は、本開示の実施形態による画像処理方法のフローチャートである。本実施形態はクライアント端末において画像処理を実行する場合に適用でき、当該方法は、画像処理装置によって実行され、当該装置はソフトウェア及び／またはハードウェアの方式で実装され、当該装置は具体的に、携帯電話、コンピュータまたはタブレットコンピュータなどを含む携帯端末などの電子デバイスに搭載され得る。或いは、本実施形態は、サーバー端末において画像処理を実行する場合に適用でき、当該方法は、画像処理装置によって実行され、当該装置はソフトウェア及び／またはハードウェアで実装され、当該装置はサーバーなどの電子デバイスに搭載され得る。

【0020】

図１に示すように、当該方法は具体的に以下のステップを含む。

【0021】

ステップＳ１０１：表示アセンブリ上でユーザーが入力したスライド軌跡を取得する。

【0022】

図２に示すように、端末２１に表示アセンブリを設けることができ、当該表示アセンブリは、具体的には、タッチスクリーンなどのスクリーンを含むことができる。端末２１から、当該タッチスクリーン上でユーザーが入力したスライド軌跡を取得することができる。或いは、端末２１は、タッチパッドなどの外部の表示アセンブリに接続されてもよく、端末２１は、タッチパッド上でユーザーが入力したスライド軌跡を取得する。

【0023】

具体的には、端末２１にカメラを搭載することもできる。ユーザーが端末２１のカメラボタンをオンにすると、このカメラを利用して顔画像などの画像を撮影することができる。または、当該端末２１は、画像系または動画系のアプリケーションプログラムをインストールすることができ、当該アプリケーションプログラムによって当該カメラが呼び出されると、当該カメラを利用して画像を収集することができ、収集された画像が当該表示アセンブリ上でプレビュー形成されることができる。本開示の実施形態では、端末２１は、仮想モデルを画像に追加することができる。例えば、ユーザーが仮想モデルを画像上に表示する必要がある場合、ユーザーは表示アセンブリ上をスライドすることができ、これにより、端末２１は、表示アセンブリ上でのユーザーによるスライド軌跡を取得することができる。或いは、端末２１の表示アセンブリまたはアプリケーションプログラムのユーザーインターフェース上には、仮想モデルトリガーボタンが表示されてもよく、端末２１は、当該仮想モデルトリガーボタンに対するユーザーの操作に応じて、表示アセンブリ上でユーザーが入力したスライド軌跡を検出して取得することができる。図２に示すように、当該スライド軌跡は、連続した曲線であってもよい。いくつかの実施可能な形態では、スライド軌跡は、直線であってもよく、本実施形態は、これを限定しない。

【0024】

ステップＳ１０２：前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成する。

【0025】

さらに、端末２１は、当該スライド軌跡に従って、当該スライド軌跡に対応する仮想モデルを作成することができ、当該仮想モデルを第１の仮想モデルとする。当該仮想モデルは、３次元モデルであっても、２次元モデルであってもよい。第１の仮想モデルは、スクリーン上でのユーザーによるスライド軌跡に従って作成されるため、第１の仮想モデルの形状は、スライド軌跡の形状に似ている。例えば、図２におけるスライド軌跡を例にとると、当該スライド軌跡に対応する第１の仮想モデルは、牛角みたいな仮想モデルであってもよい。

【0026】

ステップＳ１０３：前記第１の仮想モデルをターゲット画像における第１の位置に表示する。

【0027】

図３に示すように、端末２１の画面にはターゲット画像が表示され、当該ターゲット画像は、例えば、人間の顔画像を含み得る。さらに、図２におけるスライド軌跡を例にとると、端末は、当該スライド軌跡に従って、当該スライド軌跡に対応する牛角みたいな第１の仮想モデルを作成する。端末２１は、この牛角みたいな第１の仮想モデルを顔画像における第１の位置に表示することができ、当該第１の位置は予め設定された位置であってもよく、ランダムな位置であってもよい。

【0028】

第１の位置が予め設定された位置である場合、当該予め設定された位置は、ユーザーによって決定され、例えば、当該予め設定された位置は、表示アセンブリまたは顔画像においてユーザーによって選択された位置であってもよい。或いは、当該予め設定された位置は、端末２１によって予め定められた表示アセンブリまたは顔画像内の特定の位置であってもよい。本実施形態は、当該予め設定された位置を具体的に限定しない。図３の例示的な図示では、当該第１の位置は、顔画像における顔の額の特定の位置であり、当該第１の位置は、（μ，ν）とする。ここで、（μ，ν）は、当該第１の位置の顔座標系における座標を表すことができる。

【0029】

具体的には、端末２１は、牛角みたいな第１の仮想モデル２３を当該第１の位置（μ，ν）に吸着することができ、図４に示すように、２２は第１の位置（μ，ν）を表し、２３は第１の位置（μ，ν）に吸着された第１の仮想モデルを表す。ここで、端末２１は、マッピングなどの方式により第１の仮想モデル２３を第１の位置（μ，ν）に配置することができる。

【0030】

本開示の実施形態に係る画像処理方法は、表示アセンブリ上でユーザーが入力したスライド軌跡を取得し、当該スライド軌跡に対応する仮想モデルを作成し、仮想モデルをターゲット画像における第１の位置に表示することによって、ユーザーが入力した異なるスライド軌跡に従って異なる仮想モデルを作成することができ、例えば、スライド軌跡の形状が異なると、仮想モデルの形状も異なる。これにより、ターゲット画像内の仮想モデルは、ユーザーが入力したスライド軌跡の変化に応じて変化することができ、即ち、ユーザーが入力したスライド軌跡に従って、ユーザーのニーズを満たした仮想モデルをリアルタイムで作成することができるため、仮想モデルの表示時の柔軟性を向上させることができる。

【0031】

上記の実施形態に基づいて、前記第１の仮想モデルをターゲット画像における第１の位置に表示するステップは、前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示するステップを含む。

【0032】

図４に示すように、端末２１は、第１の仮想モデル２３を顔の第１の位置２２に吸着させることができる。第１の仮想モデル２３が顔の第１の位置２２に吸着された場合、端末２１は、具体的に、第１の仮想モデル２３の底面の中心点を顔の第１の位置２２と重ね合わせることができる。一実施形態では、当該第１の位置２２上の点は、具体的に、顔画像における顔のある重要点であってもよい。また、３次元空間における当該第１の位置上の重要点の向きは、第１の仮想モデル２３が配置されたモデル座標系のＹ軸と一致する。ここで、３次元空間における重要点の向きは、機械学習のアルゴリズムによって決定されることができる。モデル座標系のＹ軸方向は、第１の仮想モデル２３の底面の中心点を通り当該底面と直交する方向であってもよい。

【0033】

好ましくは、前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示した後、前記方法はさらに、鏡像制御コマンドを受信するステップと、前記鏡像制御コマンドに応答して、前記ターゲットオブジェクトにおける前記第１の位置と対称な第２の位置を決定するステップと、前記第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを前記第２の位置に表示するステップと、を含む。

【0034】

一実施形態では、端末２１は、ユーザーのトリガー操作、例えば、画面上の「鏡像化」ボタンのトリガー、音声トリガー、ジェスチャートリガー、表情トリガーなどを受け付け、前記顔画像における前記第１の位置と対称な第２の位置を決定し、前記第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを前記第２の位置に表示することができる。別の実施形態では、端末２１はさらに、ターゲット画像における顔の第１の位置に前記第１の仮想モデルを表示した直後、または所定の時間の経過後に、前記顔における前記第１の位置と対称な第２の位置を決定し、前記第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを前記第２の位置に表示することもできる。

【0035】

例えば、図４に示すように、鏡像化ボタン１３４は、端末２１の表示アセンブリまたはアプリケーションプログラムのユーザーインターフェース上に表示されてもよい。端末２１が第１の仮想モデル２３を顔の第１の位置２２に吸着した後、ユーザーは、鏡像化ボタン１３４に対してトリガー操作を行うことができ、当該トリガー操作は、端末２１が鏡像制御コマンドを生成することをトリガーすることができる。さらに、端末２１は、当該鏡像制御コマンドに応答して、顔における当該第１の位置（μ，ν）と対称な第２の位置を決定することができ、例えば、当該第２の位置は、（１－μ，ν）とする。ここで、（μ，ν）及び（１－μ，ν）は、いずれも顔座標系における座標である。さらに、端末２１は、第１の仮想モデル２３と互いに鏡像関係にある第２の仮想モデルを当該第２の位置（１－μ，ν）に表示することができる。図５に示すように、２４は第２の位置（１－μ，ν）を表し、２５は（１－μ，ν）に吸着された第２の仮想モデルを表す。

【0036】

具体的には、端末２１は、第１の仮想モデル２３と互いに鏡像関係にある第２の仮想モデルを当該第２の位置（１－μ，ν）に表示するために、以下のいくつかの実施可能な形態を含んでもよい。

【0037】

一実施可能な形態では、図４を基礎とし、端末２１は、まず、第１の仮想モデル２３を１８０度回転させて第２の仮想モデル２５を得、次に、第２の仮想モデル２５を第２の位置２４上に吸着することができる。

【0038】

別の実施可能な態様では、図４を基礎とし、端末２１は、まず、第１の仮想モデル２３を第２の位置２４に吸着させ、次に、第２の位置２４に吸着された第１の仮想モデル２３を１８０度回転させて第２の仮想モデル２５を得ることができる。

【0039】

本開示の実施形態に係る画像処理方法では、ターゲット画像における第１の位置と対称な第２の位置を決定し、第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを第２の位置に表示することによって、第１の位置に吸着された第１の仮想モデルと、第２の位置に吸着された第２の仮想モデルが鏡像を形成する効果が得られる。これによって、第２の仮想モデルを再構築するのに必要な計算量が削減されるだけでなく、ターゲット画像内の仮想モデルの表示時の柔軟性及び美観性をさらに向上させる。

【0040】

図４において、顔画像を例に挙げて例示的に説明する。他の実施形態では、ターゲット画像は人の顔画像に限定されず、例えば、他の物体画像であってもよいことは、当業者に理解されるべきであろう。また、ターゲット物体は人の顔に限定されず、例えば他の物体などであってもよい。本開示は、これを制限しない。

【0041】

図２に示すように、ユーザーがスクリーンにおいてスライド軌跡を入力した場合、以下、端末２１を例として、端末２１が当該スライド軌跡に従って、当該スライド軌跡に対応する第１の仮想モデルを作成する手順について紹介する。上記の実施形態に基づいて、前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成することは、図６に示すように、以下のいくつかのステップを含む。

【0042】

ステップＳ６０１：前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定する。

【0043】

図２に示すように、ユーザーがスクリーンにおいてスライド軌跡を入力した後、端末２１は当該スライド軌跡に従って、当該スライド軌跡に関連する複数のターゲット点を決定することができる。

【0044】

一実施可能な形態では、当該スライド軌跡に関連する複数のターゲット点は、具体的には、当該スライド軌跡の複数の軌跡点または複数のサンプリング点であってもよい。図７に示すように、スライド軌跡は、複数の軌跡点から構成されることができ、各軌跡点は、１つのターゲット点とすることができる。或いは、端末２１は、スライド軌跡上で均一サンプリングまたは不均一サンプリングを行って複数のサンプリング点を取得し、各サンプリング点を１つのターゲット点としてすることができる。例えば、ターゲット点７１は、複数のターゲット点のいずれか１つであってもよい。

【0045】

別の実施可能な形態では、前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定するステップは、前記スライド軌跡に従って、前記スライド軌跡内の複数の軌跡点を決定するステップと、前記複数の軌跡点に対してフィット計算を行い、フィット曲線を得るステップと、前記フィット曲線に対してサンプリングを行い、前記スライド軌跡に関連する複数のターゲット点を得るステップであって、前記ターゲット点には、前記フィット曲線上のサンプリング点が含まれるステップと、を含む。

【0046】

ユーザーがスクリーンにおいてスライド軌跡を入力した後、端末２１は、当該スライド軌跡に従って当該スライド軌跡上の軌跡点を取得することができ、当該軌跡点は１つまたは複数であってもよい。本実施形態では、複数の軌跡点を例として例示的に説明する。図７に示す複数の点は、スライド軌跡上の複数の軌跡点であってもよいと仮定する。複数の軌跡点は、Ｐとして示される点集合を構成することができ、Ｐ＝｛Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎ｝である。ここで、Ｐ＝｛Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎ｝は、それぞれ軌跡点を表す。例えば、点集合Ｐには、ｎ個の軌跡点を含む。ここで、ｎの具体的な数値は限定されない。具体的には、Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎは、それぞれ２次元の点であり、即ち、点集合Ｐは、２次元の点集合であってもよい。例えば、Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎはスクリーン座標系の２次元点であってもよく、当該スクリーン座標系の座標原点はスクリーンの右下隅であってもよい。

【0047】

スライド軌跡の各軌跡点に対応するスライド速度は、当該スライド軌跡を生成する過程中に均一ではないため、スライド軌跡上のＰ１，Ｐ２，Ｐ３，．．．，Ｐｎの分布は不均一である可能性がある。本実施形態では、予め設定されたフィッティングアルゴリズムを利用してＰ１，Ｐ２，Ｐ３，．．．，Ｐｎに対してフィット計算を実行し、フィット曲線を得ることができる。ここで、本実施形態は、このフィッティングアルゴリズムを具体的に限定するものではなく、例えば、フィッティングされたフィット曲線は、３次スプラインフィット曲線であってもよい。当該フィット曲線は、ｙ＝ａｘ^３＋ｂｘ^２＋ｃｘ＋ｄとして表されることができる。ここで、ｘは、フィット曲線上の任意の点の、スクリーン座標系のＸ軸における座標を表し、ｙはフィット曲線上の任意の点の、スクリーン座標系のＹ軸における座標を表す。ａ、ｂ、ｃ、ｄはそれぞれ、フィッティング係数を表す。

【0048】

さらに、端末２１は、フィット曲線に対して、例えば均一サンプリングまたは不均一サンプリングなどのサンプリングを行って、フィット曲線上のサンプリング点を得ることができ、当該サンプリング点は、１つまたは複数であってもよい。具体的には、複数のサンプリング点を例として例示的に説明する。例えば、複数のサンプリング点は、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍとして表され、即ち、サンプリング点はｍ個であり、ここでは、ｍの具体的な数値が限定されず、ｎとｍの大きさ関係も限定されない。さらに、端末２１はサンプリング点Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍを、スライド軌跡に関連する複数のターゲット点とすることができる。各サンプリング点は、１つのターゲット点とすることができる。同様に、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍは、スクリーン座標系における２次元点であってもよい。

【0049】

ステップＳ６０２：前記複数のターゲット点のそれぞれに対応するプリセットサブモデルを取得する。

【0050】

Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍをスライド軌跡に関連する複数のターゲット点とすることを例にとると、各ターゲット点は、１つのプリセットサブモデルに対応し得る。ここで、異なるターゲット点に対応するプリセットサブモデルは、同じであっても異なっていてもよい。また、本実施形態は、各ターゲット点に対応するプリセットサブモデルの形状を限定するものではなく、例えば、規則体であっても不規則体であってもよく、または、規則的な平面図形であっても不規則的な平面図形であってもよい。

【0051】

具体的には、端末２１は、スライド軌跡に関連する複数のターゲット点を決定した後、複数のターゲット点のそれぞれに対応するプリセットサブモデルを取得することもできる。

【0052】

ステップＳ６０３：前記複数のターゲット点のそれぞれの幾何学的情報に基づき、各ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換する。

【0053】

具体的には、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの異なるターゲット点に対応するプリセットサブモデルの形状は異なる場合がある。例えば、ターゲット点Ｃ１に対応するプリセットサブモデルは円柱体であり、ターゲット点Ｃ２に対応するプリセットサブモデルは円錐体である。

【0054】

或いは、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの異なるターゲット点に対応するプリセットサブモデルの形状は同じであってもよく、例えばいずれも円柱体である。ここで、異なるターゲット点に対応する円柱体は、同じサイズであっても異なるサイズであってもよい。

【0055】

本実施形態では、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの異なるターゲット点に対応するプリセットサブモデルがすべて円柱体であり、かつ異なるターゲット点に対応する円柱体のサイズが異なることを例として例示的に説明する。例えば、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの各ターゲット点に対応する円柱体のサイズは順次小さくなる。

【0056】

さらに、当該ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換する。例えば、ターゲット点Ｃ１を例にとると、Ｃ１に対応するプリセットサブモデルは、ラジアンのない円柱体であり、プリセットサブモデルを変換することで得られたターゲットサブモデルは、ラジアンのある円柱体であってもよい。

【0057】

好ましくは、前記ターゲット点の幾何学的情報には、前記複数の軌跡点における開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とのうちの少なくとも１つが含まれている。

【0058】

例えば、図７に示す複数の点は、スライド軌跡上の複数の軌跡点であってもよい。Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎのうちの軌跡点Ｐ１は、スライド軌跡における開始軌跡点であってもよい。Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎ及びＣ１，Ｃ２，Ｃ３，．．．，Ｃｍはいずれもスクリーン座標系における２次元点であり、即ちＰ１，Ｐ２，Ｐ３，．．．，Ｐｎ及びＣ１，Ｃ２，Ｃ３，．．．，Ｃｍは同一の座標系に位置する。そのため、当該スクリーン座標系におけるターゲット点Ｃ１の座標と、当該スクリーン座標系における開始軌跡点Ｐ１の座標に基づいて、開始軌跡点Ｐ１に対するターゲット点Ｃ１のオフセット量を求めることができ、当該オフセット量をＴとする。また、フィット曲線上のターゲット点Ｃ１の接線方向を決定することもでき、当該接線方向をＲとする。ここで、開始軌跡点Ｐ１に対するターゲット点Ｃ１のオフセット量及び／またはフィット曲線上のターゲット点Ｃ１の接線方向は、ターゲット点Ｃ１の幾何学的情報とすることができる。ここで、ターゲット点Ｃ１の幾何学的情報はこれに限定されず、他の幾何学的情報をさらに含んでもよいことは、理解されるべきであろう。さらに、ターゲット点Ｃ１以外の他のターゲット点の幾何学的情報については、ターゲット点Ｃ１の幾何学的情報を参照すればよいので、ここでは繰り返さない。具体的には、端末２１は、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうち各ターゲット点の幾何学的情報に基づき、各ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換することができる。

【0059】

前記複数のターゲット点のそれぞれの幾何学的情報に基づいて、各ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換するステップは、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換するステップを含む。

【0060】

例えば、開始軌跡点Ｐ１に対するターゲット点Ｃ１のオフセット量Ｔ、及びフィット曲線上のターゲット点Ｃ１の接線方向Ｒに基づいて、ターゲット点Ｃ１に対応するプリセットサブモデルをターゲットサブモデルに変換することができる。同様に、開始軌跡点Ｐ１に対する他のターゲット点のオフセット量、及びフィット曲線上の他のターゲット点の接線方向に基づいて、他のターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換することができる。

【0061】

ここで、開始軌跡点Ｐ１に対するＣ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの異なるターゲット点のオフセット量は異なってもよく、また、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの異なるターゲット点のフィット曲線上の接線方向も異なってもよいことは、理解されるべきであろう。従って、開始軌跡点Ｐ１に対するＣ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの異なるターゲット点のオフセット量、及びフィット曲線上の異なるターゲット点の接線方向に基づいて、異なるターゲット点に対応するプリセットサブモデルを異なるターゲットサブモデルに変換することができる。

【0062】

好ましくは、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換するステップは、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップと、前記複数の第２の点に基づいて、前記ターゲット点に対応するターゲットサブモデルを作成するステップと、を含む。

【0063】

例えば、ターゲット点Ｃ１を例にとると、Ｃ１に対応するプリセットサブモデルは、ラジアンのない円柱体、例えば図８に示す円柱体８１である。この円柱体の上側円形面、下側円形面及び側壁上の点はいずれも当該円柱体の頂点とすることができる。開始軌跡点Ｐ１に対するターゲット点Ｃ１のオフセット量Ｔ、及びフィット曲線上のターゲット点Ｃ１の接線方向Ｒに基づいて、当該円柱体上の各頂点の座標を新しい頂点の座標に変換することができる。具体的には、変換前の頂点を第１の点とし、変換後の頂点を第２の点とする。第１の点と第２の点とは１対１で対応している。さらに、新しい頂点の座標に基づいて、新しい頂点を繋いで新しい円柱体を形成することができる。具体的には、第１の点と第２の点とは１対１で対応しているので、各第１の点の間の相対的位置関係に基づいて、各第２の点の間の相対的位置関係を決定することができ、さらに、各第２の点の間の相対位置関係及び各第２の点の座標に基づいて、隣接する第２の点を繋いで新しい円柱体を形成することができる。この新しい円柱体は、一定のラジアンがある円柱体であってもよい。また、この新しい円柱体は、ターゲットサブモデルとすることができる。

【0064】

好ましくは、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップは、前記開始軌跡点に対する前記ターゲット点のオフセット量を３次元オフセット量に変換するステップと、前記フィット曲線上の前記ターゲット点の接線方向を３次元接線方向に変換するステップと、前記３次元オフセット量と前記３次元接線方向に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップと、を含む。

【0065】

例えば、ターゲット点Ｃ１を例にとると、Ｃ１に対応するプリセットサブモデルは、図８に示す円柱体８１である。この円柱体の上側円形面、下側円形面及び側壁上の点はいずれも当該円柱体の頂点とすることができる。各頂点のモデル座標系における座標をＶとし、当該モデル座標系は、３次元の座標系であってもよい。従って、ターゲット点Ｃ１に対応するプリセットサブモデル上の各頂点は、３次元点であってもよい。開始軌跡点Ｐ１に対するターゲット点Ｃ１のオフセット量Ｔ、及びフィット曲線上のターゲット点Ｃ１の接線方向Ｒはいずれも２次元ベクトルであるので、オフセット量Ｔを３次元オフセット量に変換し、接線方向Ｒを３次元接線方向に変換することができる。例えば、オフセット量Ｔから変換された３次元オフセット量をＴ１とし、具体的には、Ｔ１は、オフセット量Ｔを当該モデル座標系に変換することによって得られた３次元オフセット量、またはオフセット量Ｔを基礎とし０などの３次元の値を直接追加することによって得られた３次元オフセット量であってもよい。同様に、接線方向Ｒから変換された３次元接線方向をＲ１とし、Ｒ１は、接線方向Ｒを当該モデル座標系に変換することによって得られた３次元接線方向、または接線方向Ｒを基礎とし０などの３次元の値を直接追加することによって得られた３次元接線方向であってもよい。

【0066】

さらに、Ｔ１及びＲ１に基づいて、ターゲット点Ｃ１に対応するプリセットサブモデル上の各頂点の座標Ｖを変換することができ、変換された座標はＶ１とする。ここで、Ｖ１、Ｔ１、Ｒ１、Ｖの間の関係は、以下の式（１）のようになる。
Ｖ１＝Ｔ１＊Ｒ１＊Ｖ （１）

【0067】

例えば、ターゲット点Ｃ１に対応するプリセットサブモデル上の各頂点を第１の点とし、ここで、第１の点の座標Ｖを変換することによって得られた座標Ｖ１上の点を第２の点とすることができ、即ち、第１の点と第２の点とは１対１で対応している。さらに、各第１の点に対応する第２の点に基づいて、当該プリセットサブモデルに対応するターゲットサブモデルを作成することができ、例えば、各第１の点の隣接点に基づいて、各第２の点の隣接点を決定することができ、さらに、隣接する第２の点を繋いで当該プリセットサブモデルに対応するターゲットサブモデルを構成することができる。例えば、当該ターゲットサブモデルは、一定のラジアンがある円柱体、例えば図８に示すような円柱体８２であってもよい。ここで、図８に示す変換は、例示的な説明に過ぎず、特に限定されないことは、理解されるべきであろう。

【0068】

好ましくは、前記３次元オフセット量と前記３次元接線方向に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップは、前記３次元オフセット量、前記３次元接線方向、及び前記ターゲット点に対応するスケーリング値に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップを含む。

【0069】

例えば、いくつかの実施形態では、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの異なるターゲット点に対応するプリセットサブモデルはいずれも円柱体であり、かつ異なるターゲット点に対応する円柱体は同じサイズである。このような情況に、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの異なるターゲット点は、異なるスケーリング値に対応することもある。例えば、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの各ターゲット点に対応するプリセットサブモデルのスケーリング値は順次に大きくなる。ここで、スケーリング値が大きいほど、プリセットサブモデルを変換することで得られたターゲットサブモデルが小さくなる。

【0070】

例えば、ターゲット点Ｃ１に対応するプリセットサブモデルのスケーリング値をＳ１とすると、Ｖ１、Ｔ１、Ｒ１、Ｖ、Ｓ１の間の関係は、以下の式（２）のようになる。
Ｖ１＝Ｔ１＊Ｒ１＊Ｖ＊Ｓ１ （２）

【0071】

例えば、ターゲット点Ｃ１に対応するプリセットサブモデル上の各頂点を第１の点とし、ここで、第１の点の座標Ｖを変換することによって得られた座標Ｖ１上の点を第２の点とすることができ、即ち、第１の点と第２の点とは１対１で対応している。図８に示すように、円柱体８２は円柱体８１を変換することで得られた新しい円柱体である。円柱体８２上の各頂点を第２の点とし、円柱体８２上の各頂点と円柱体８１上の各頂点とは１対１で対応している。また、円柱体８２は、ターゲット点Ｃ１に対応するスケーリング値に基づいて縮小された円柱体であってもよい。

【0072】

ステップＳ６０４：前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成する。

【0073】

Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの開始軌跡点Ｐ１に対する異なるターゲット点のオフセット量、及びフィット曲線上の異なるターゲット点の接線方向に基づいて、異なるターゲット点に対応するプリセットサブモデルを異なるターゲットサブモデルに変換することができる。従って、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの各ターゲット点に対応するターゲットサブモデルを接続すると、スクリーン上のユーザーによるスライド軌跡に対応する第１の仮想モデルを構成することができる。具体的には、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの各ターゲット点に対応するターゲットサブモデルを順次に接続して第１の仮想モデルとする。例えば、ターゲット点Ｃ１に対応するターゲットサブモデルの下側円形面を第１の仮想モデルの底面とし、ターゲット点Ｃ１に対応するターゲットサブモデルの上側円形面を、ターゲット点Ｃ２に対応するターゲットサブモデルの下側円形面と接続し、ターゲット点Ｃ２に対応するターゲットサブモデルの上側円形面を、ターゲット点Ｃ３に対応するターゲットサブモデルの下側円形面と接続し、以下同様に類推して第１の仮想モデルを得る。つまり、１つのターゲットサブモデルに別のターゲットサブモデルを接続することができる。

【0074】

他の実施形態では、１つのターゲットサブモデル上に複数のターゲットサブモデルを接続することもできる。例えば、１つの大きなターゲットサブモデルに、複数の小さなターゲットサブモデルを接続でき、またそれぞれの小さなターゲットサブモデルに、引き続き１つまたは複数の小さなターゲットサブモデルを接続でき、以下同様に類推して、第１の仮想モデルに枝分かれが生じ得る。

【0075】

好ましくは、前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成するステップは、前記各ターゲット点の識別子に基づいて、前記各ターゲット点のそれぞれに対応するターゲットサブモデルを結合させて、前記スライド軌跡に対応する第１の仮想モデルを得るステップを含み、前記ターゲット点の識別子は、前記ターゲット点に対応するターゲットサブモデルの前記第１の仮想モデルでの位置を決定するために使用される。

【0076】

図９に示すように、ターゲットサブモデル９１は、ターゲット点Ｃ１に対応するターゲットサブモデルであり、ターゲットサブモデル９２は、ターゲット点Ｃ２に対応するターゲットサブモデルであり、以下同様である。Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの各ターゲット点に対応するターゲットサブモデルを順次に接続することで、スクリーン上のユーザーによるスライド軌跡に対応する第１の仮想モデルを構成することができ、当該第１の仮想モデルは、図９に示す９０であり得る。他のいくつかの実施形態では、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの各ターゲット点に対応するプリセットサブモデルが前記方法によって変換された後、各ターゲット点に対応するターゲットサブモデルは、既に相互に接続されたままであり得るため、追加の結合プロセスを節約することができる。

【0077】

具体的には、Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍのうちの各ターゲット点には、１つの識別子、例えばｉｎｄｅｘが対応付けられている。即ち、各ターゲット点について、１つの識別子が対応し、各ターゲット点の識別子が一意である。具体的には、各ターゲット点の識別子は、第１の仮想モデル９０での当該ターゲット点に対応するターゲットサブモデルの位置を決定するために使用される。任意選択で、各ターゲットサブモデルは、当該第１の仮想モデル９０の一要素として使用され得る。当該第１の仮想モデル９０における各要素の位置は、当該要素の頂点カラー（ｖｅｒｔｅｘ
ｃｏｌｏｒ）として記すことができる。

【0078】

本開示の実施形態に係る画像処理方法では、スクリーン上でユーザーが入力したスライド軌跡に従って、当該スライド軌跡上の軌跡点を決定する。当該スライド軌跡上の各軌跡点に対応するスライド速度は均一ではないため、スライド軌跡上の各軌跡点の分布は、均一でない場合がある。各軌跡点に対してフィット計算を行い、フィット曲線を求め、さらにフィット曲線に対してサンプリングを行うことによって、当該フィット曲線上のサンプリング点の分布が均一になり得る。さらに、フィット曲線上に均一に分布しているサンプリング点に基づいて、各サンプリング点に対応するプリセットサブモデルをターゲットサブモデルに変換し、各サンプリング点に対応するターゲットサブモデルに基づいて、スライド軌跡に対応する第１の仮想モデルを作成することができるため、第１の仮想モデルとスライド軌跡の類似性が高められ、結果として、第１の仮想モデルは、より一層ユーザーのニーズを満たし、ユーザー体験を向上させることができる。

【0079】

図１０は、本発明の実施形態に係る別の画像処理方法のフローチャートである。本実施例は、上記の実施例に加えて、さらに画像処理方法について具体的に説明する。相応的に、図１０に示すように、本実施例の方法は端末に応用され、具体的には以下のステップを含む。

【0080】

ステップＳ１００１：表示アセンブリ上でユーザーが入力したスライド軌跡を取得する。

【0081】

具体的には、Ｓ１００１は、上記実施例に記載の表示アセンブリにおけるユーザーによるスライド軌跡を取得する過程と類似しているため、ここで説明を省略する。

【0082】

ステップＳ１００２：前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成する。

【0083】

具体的には、Ｓ１００２は上記実施例に記載の前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを生成する過程と類似しているため、ここで説明を省略する。

【0084】

ステップＳ１００３：前記スライド軌跡に従って、前記第１の仮想モデルの方向を調整する。

【0085】

図７に示すように、スライド軌跡のスライド方向は、例えば、上から下へ、または下から上への縦方向となっている。他のいくつかの実施形態では、スライド軌跡のスライド方向は、図１１に示すように、左から右へ、又は右から左への横方向であってもよい。本実施形態では、さらにスライド軌跡のスライド方向に基づいて、第１の仮想モデルの方向を調整することができる。第１の仮想モデルの方向は具体的に、当該第１の仮想モデルが位置するモデル座標系のＹ軸方向であってもよい。

【0086】

さらに、上記実施形態に基づいて、スライド軌跡に従って軌跡点Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎを取得する際に、スライド軌跡のスライド方向に沿って、Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎを順次取得するようにしてもよい。また、Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎに基づいてフィッティングされたフィット曲線の方向は、スライド軌跡のスライド方向と一致するようにしてもよく、フィット曲線をサンプリングすると、スライド軌跡のスライド方向に沿って、ターゲット点Ｃ１，Ｃ２，Ｃ３，．．．，Ｃｍを順次収集することができる。

【0087】

任意選択で、前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整するステップは、前記スライド軌跡内の他の軌跡点に対する開始軌跡点の方向を決定するステップと、前記スライド軌跡内の他の軌跡点に対する開始軌跡点の方向に対して集約計算を行い、集約方向を得るステップと、前記集約方向に基づいて、前記第１の仮想モデルの方向を調整するステップと、を含む。

【0088】

例えば図１１に示すスライド軌跡を例にとると、当該スライド軌跡のスライド方向は左から右である。当該スライド軌跡は横方向であるため、図１１に示す第１の仮想モデル１１０のように、スライド軌跡に対応する第１の仮想モデルも横方向となる。さらに、当該スライド軌跡のスライド方向に応じて、第１の仮想モデル１１０の方向を調整することができる。

【0089】

具体的には、Ｐ１は当該スライド軌跡内の開始軌跡点であり、Ｐ２は当該スライド軌跡内の第２の軌跡点であり、以下同様に、Ｐｎは当該スライド軌跡内の第ｎの軌跡点である。Ｐ１，Ｐ２，Ｐ３，．．．，Ｐｎの各軌跡点の座標から、他の軌跡点に対する開始軌跡点Ｐ１の方向を決定することができる。ここで、他の軌跡点に対する開始軌跡点Ｐ１の方向は、具体的には、開始軌跡点Ｐ１から他の軌跡点に向かうベクトルであってもよい。例えば、開始軌跡点Ｐ１から第２の軌跡点Ｐ２に向かうベクトルをＬ１、開始軌跡点Ｐ１からＰ３に向かうベクトルをＬ２とし、以下同様に、開始軌跡点Ｐ１からＰｎに向かうベクトルをＬ（ｎ－１）とする。具体的には、Ｌ１、Ｌ２、・・・、Ｌ（ｎ－１）はベクトル集合Ｌ、Ｌ＝｛Ｌ１，Ｌ２，．．．，Ｌ（ｎ－１）｝を構成する。さらに、予め設定されたクラスタリングアルゴリズムを用いてベクトル集合Ｌにおける各ベクトルに対してクラスタリング計算を行い、クラスタリングされたベクトルを得、当該クラスタリングされたベクトルの方向を主軸方向とし、当該主軸方向を集約方向とする。そのうち、本実施形態は当該クラスタリングアルゴリズムを具体的に限定するものではない。ベクトル集合Ｌにおける各ベクトルはスクリーン座標系の２次元ベクトルであるため、クラスタリングされたベクトルも２次元ベクトルとなる。さらに、集約方向をモデル座標系に変換して３次元ベクトルを得ることができる。この３次元ベクトルをＫとする。さらに３次元ベクトルＫとモデル座標系のＹ軸とがなす角度を算出し、当該角度を３次元行列に変換する。第１の仮想モデルは、複数のターゲットサブモデルで構成されており、各ターゲットサブモデル上の頂点座標は上記実施形態で説明したＶ１であるため、第１の仮想モデル上の頂点座標はＶ１である。この３次元行列に、第１の仮想モデル上の各頂点座標Ｖ１を乗じることで、第１の仮想モデルの回転が実現される。例えば、回転された第１の仮想モデルは、図４又は図５に示すような第１の仮想モデル２３であってもよい。

【0090】

理解されるように、スライド軌跡が図７に示すスライド軌跡である場合、第１の仮想モデルが図４又は図５に示す第１の仮想モデル２３に回転できるように、当該スライド軌跡のスライド方向に基づいて、第１の仮想モデルの方向を調整することができる。つまり、スライド軌跡のスライド方向によって第１の仮想モデルの方向を調整することで、第１の仮想モデルがターゲット画像上に現れるときに常に正面を上向きにし、即ち、第１の仮想モデル２３の底面の中心点が、人間の顔上の吸着点と重なり、当該吸着点の３次元空間における向きは、第１の仮想モデル２３が位置するモデル座標系のＹ軸と一致するようにすることができる。

【0091】

ステップＳ１００４：前記第１の仮想モデルをターゲット画像における第１の位置に表示する。

【0092】

具体的には、方向が調整された第１の仮想モデルをターゲット画像における第１の位置に表示することができる。図４又は図５に示す第１の仮想モデル２３は、人間の顔の第１の位置２２に吸着される。ここで、方向が調整された第１の仮想モデルをターゲット画像における第１の位置に表示することは、上記の実施例に記載の第１の仮想モデルをターゲット画像における第１の位置に表示する過程を参照することができ、ここで説明を省略する。

【0093】

理解されるように、本実施形態はＳ１００２からＳ１００４の実行順序を限定するものではなく、例えば、いくつかの実施形態では、Ｓ１００３はＳ１００４の後に実行することもできる。つまり、前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成した後、まず当該第１の仮想モデルをターゲット画像における第１の位置に表示し、次に、第１の位置における第１の仮想モデルの方向を調整する。

【0094】

理解されるように、本実施形態に基づいて、第１の位置と対称な第２の位置には、図５に示すように、第２の仮想モデルが表示されてもよい。第２の仮想モデルの方向を調整する方法は第１の仮想モデルの方向を調整する方法と類似することができるため、ここで説明を省略する。別の選択可能な実現方式では、まず第１の仮想モデルの方向を調整し、調整後の第１の仮想モデルを得る。次に、第１の位置と対称な第２の位置を決定し、当該第２の位置に第２の仮想モデルを表示することもでき、当該第２の仮想モデルと調整後の第１の仮想モデルは互いに鏡像関係にある。

【0095】

本開示の実施形態に係る画像処理方法は、スライド軌跡のスライド方向によって第１の仮想モデルの方向を調整することで、第１の仮想モデルがターゲット画像に表示されるときに常に正面を上向きにすることができるため、スライド軌跡のスライド方向が第１の仮想モデルのターゲット画像における表示に影響を与えるのを回避することができる。

【0096】

図１２は、本発明の実施形態に係る別の画像処理方法のフローチャートである。本実施例は、上記実施例に加えて、さらに画像処理方法について具体的に説明する。相応的に、図１２に示すように、本実施例の方法は端末に適用され、具体的には以下のステップを含む。

【0097】

ステップＳ１２０１：表示アセンブリ上でユーザーが入力したスライド軌跡を取得する。

【0098】

具体的には、Ｓ１２０１とＳ１０１の実現方式及び具体的な原理は一致しているため、ここで説明を省略する。

【0099】

ステップＳ１２０２：前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成する。

【0100】

具体的には、Ｓ１２０２は上述した前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを生成する過程を参照できるため、ここで説明を省略する。

【0101】

ステップＳ１２０３：前記第１の仮想モデルをターゲット画像における第１の位置に表示する。

【0102】

具体的には、Ｓ１２０３は上述した前記第１の仮想モデルをターゲット画像における第１の位置に表示する過程を参照できるため、ここで説明を省略する。

【0103】

ステップＳ１２０４：前記第１の仮想モデルのパラメータを調整する。

【0104】

例えば、第１の仮想モデルがターゲット画像における第１の位置に表示された後、端末２１は、さらにユーザーの要求及び／またはオーディオ情報に基づいて、当該第１の仮想モデルのパラメータを調整することができる。当該オーディオ情報は、端末２１の周辺環境におけるオーディオ情報であってもよく、端末２１が再生したオーディオ情報であってもよい。

【0105】

一実施可能な形態では、前記第１の仮想モデルのパラメータを調整するステップは、前記第１の仮想モデルに対するパラメータ調整コマンドを受信するステップと、前記パラメータ調整コマンドに応答して、前記第１の仮想モデルのパラメータを調整するステップと、を含む。

【0106】

例えば、端末の画面には、仮想モデルパラメータを調整するためのアイコンが表示されてもよい。ユーザーが当該アイコンを操作すると、第１の仮想モデルに対するパラメータ調整コマンドをトリガーすることができる。端末は当該パラメータ調整コマンドに応答して、第１の仮想モデルのパラメータを調整する。具体的には、第１の仮想モデルのパラメータには、大きさ、ラジアン、サブモデルの個数、サブモデルの材質、サブモデルの形状、サブモデルの回転情報、サブモデルの角度などの少なくとも１つを含む。具体的には、仮想モデルのパラメータを調整するためのアイコンは、図１３に示すような複数の矢印セットであってもよく、ここで、各矢印セットは、第１の仮想モデルにおける１つのパラメータを調整するために使用され、異なる矢印の方向は、異なる調整方向、例えば、増加または減少を示すものである。本開示は、モデルパラメータを調整するアイコンの形式又はトリガー調整の方式について制限しない。

【0107】

別の実施可能な形態では、前記第１の仮想モデルのパラメータを調整するステップは、オーディオ情報を取得するステップと、前記オーディオ情報のパラメータに基づいて、前記第１の仮想モデルのパラメータを調整するステップと、を含む。

【0108】

例えば、端末２１は、オーディオ情報を収集し、オーディオ情報のパラメータに基づいて第１の仮想モデルのパラメータを調整することができる。例えば、オーディオ情報のパラメータは、音量、周波数スペクトル、強拍、音調などを含むことができる。オーディオ情報のパラメータは、オーディオ情報の属性情報と呼ぶこともできる。第１の仮想モデルのパラメータは、第１の仮想モデルの属性情報と呼ぶこともできる。ここで、本実施形態は、オーディオ情報のパラメータと第１の仮想モデルのパラメータとの対応関係を限定するものではない。例えば、端末は、オーディオ情報の音量に基づいて第１の仮想モデルの大きさを調整し、オーディオ情報の強拍に基づいて第１の仮想モデルの材質を調整し、オーディオ情報の周波数スペクトルに基づいて第１の仮想モデルのラジアンを調整することができる。ここで、第１の仮想モデルの材質は、発光材質、非発光材質などを含むことができる。

【0109】

一実施可能な形態では、オーディオ情報を取得する前に、前記方法は、さらに、オーディオ情報再生コマンドを受信するステップと、前記オーディオ情報再生コマンドに応答して、前記オーディオ情報を再生するステップと、を含む。

【0110】

例えば、図１３に示す端末画面に音声スイッチキー１３０が表示されてもよい。ユーザーが音声スイッチキー１３０を操作する時にオーディオ情報の再生コマンドをトリガーすることができ、さらに、端末２１は当該オーディオ情報の再生コマンドに応答してオーディオ情報を再生する。さらに、端末２１は当該オーディオ情報を収集し、当該オーディオ情報のパラメータに基づいて、第１の仮想モデルのパラメータを調整することができる。

【0111】

別の実施可能な形態では、オーディオ情報を取得するステップは、周辺環境におけるオーディオ情報を収集するステップを含む。

【0112】

例えば、他のいくつかの実施形態では、端末２１はオーディオ情報を再生せず、周辺環境におけるオーディオ情報を収集し、さらに、当該オーディオ情報のパラメータに基づいて、第１の仮想モデルのパラメータを調整することができる。

【0113】

ステップＳ１２０５：調整された前記パラメータに基づいて、前記第１の仮想モデルを更新する。

【0114】

例えば、端末２１は、上述した方法によって第１の仮想モデルのパラメータを調整した後、調整されたパラメータに基づいて、第１の仮想モデルを更新することができる。さらに、端末２１は、更新後の第１の仮想モデルをターゲット画像における第１の位置に表示する。

【0115】

理解されるように、端末２１は第１の仮想モデルのパラメータを調整し、第１の仮想モデルを更新した後、さらに図５に示す方法を参照し、第１の位置と対称な第２の位置に、この更新後の第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを表示することができる。

【0116】

或いは、ターゲット画像に複数の仮想モデル、例えば図５に示す第１の仮想モデル２３及び第２の仮想モデル２５が表示された場合、上記の第１の仮想モデルのパラメータを調整する方法は、同様に第２の仮想モデルのパラメータを調整する際に適用でき、第２の仮想モデルのパラメータは上記の第１の仮想モデルのパラメータと類似しているため、ここで説明を省略する。また、ターゲット画像における第１の仮想モデル及び第２の仮想モデル以外の他の仮想モデルのパラメータも、上述した第１の仮想モデルのパラメータを参照することができる。具体的には、第１の仮想モデルのパラメータ及び第２の仮想モデルのパラメータを同時に調整することができ、例えば、端末は、あるアイコンに対するユーザーの操作に応じて、第１の仮想モデル及び第２の仮想モデルの当該アイコンに対応するパラメータを同時に調整することができる。或いは、第１の仮想モデルのパラメータと第２の仮想モデルのパラメータとは個別に調整されてもよく、例えば、端末は、あるアイコンに対するユーザーの操作に応じて、第１の仮想モデルの当該アイコンに対応するパラメータを調整し、別のアイコンに対するユーザーの操作に応じて、第２の仮想モデルの当該別のアイコンに対応するパラメータを調整することができる。

【0117】

本開示の実施形態に係る画像処理方法は、仮想モデルをターゲット画像に表示した後、さらに、ユーザーがトリガーしたパラメータ調整コマンド又はオーディオ情報のパラメータに基づいて、仮想モデルのパラメータを調整することができ、これにより、仮想モデルをターゲット画像においてリアルタイムで変化させることができ、仮想モデルをターゲット画像に表示する時の柔軟性をより一層向上させる。

【0118】

以下、一具体的な実施例を用いて、仮想モデルの作成過程、及び仮想モデルパラメータの調整過程について説明する。図１４に示すように、開始状態において、端末２１は、カメラによって人間の顔画像を収集することができる。当該端末２１の画面には、音声スイッチキー１３０と、モデリング開始キー１３１とが表示される。端末２１は、ユーザーによる音声スイッチキー１３０の操作に応じて、オーディオ情報を再生したり、オーディオ情報の再生を停止したりすることができる。端末２１は、ユーザーによるモデリング開始ボタン１３１の操作に応じて、軌跡描画領域を表示することができ、本実施形態は、当該軌跡描画領域の位置を限定するものではない。当該軌跡描画領域は、例えば、画面の任意の位置に表示されることができる。また、当該軌跡描画領域の表示中に、顔画像は画面に表示されたままであってもよいし、表示されなくてもよい。顔画像と軌跡描画領域が同時に画面に表示される場合、顔画像と軌跡描画領域は同じレイヤに位置してもよく、それぞれ異なるレイヤに位置してもよく、例えば、当該軌跡描画領域の表示レイヤは顔画像の表示レイヤの上層に位置してもよい。さらに、ユーザーは、当該軌跡描画領域で軌跡を入力する。端末２１は、ユーザーによるモデル作成ボタン１３２の操作に応じて、軌跡とプログラムアルゴリズムを組み合わせて仮想モデルを作成する。さらに、端末２１は、その仮想モデルを顔画像における第１の位置に表示する。このとき、仮想モデルのパラメータはリアルタイムで調整可能である。例えば、端末２１は画面における矢印式アイコンに対するユーザーの操作に応じて、仮想モデルが異なる様子や異なる材質に変換できるように、仮想モデルのパラメータを調整する。例えば、仮想モデルを大きくする。ユーザーによるパラメータの調整が完了すると、端末２１は、ユーザーによる調整完了ボタン１３３の操作に応じて、顔画像における仮想モデルを更新することができる。さらに、端末２１は、ユーザーによるミラーリングボタン１３４の操作に応じて、顔画像において互いに鏡像関係にある仮想モデルを作成してもよく、それにより、顔画像における仮想モデルの個数を増加させる。さらに、端末２１は、ユーザーによる復帰制御ボタン１３５の操作に応じて、起動状態に復帰することもできる。

【0119】

理解されるように、仮想モデルは、端末が、ユーザーによって入力された軌跡及び端末におけるプログラムアルゴリズムを結合することで作成される。ユーザーが入力した同一の軌跡について、異なるプログラムアルゴリズムを採用する場合、端末は異なる仮想モデルを構築することができる。例えば、同じ軌跡について、第１のプログラムアルゴリズムを採用する場合、端末が作成する仮想モデルは上記のような牛角みたいな仮想モデルであってもよい。一方、第２のプログラムアルゴリズムを採用する場合、端末が生成する仮想モデルは鹿角みたいな仮想モデルであってもよい。

【0120】

一実施可能な形態では、第１のプログラムアルゴリズムと第２のプログラムアルゴリズムに採用されるプリセットサブモデルが異なる。このため、第１のプログラムアルゴリズムと第２のプログラムアルゴリズムについて、同一の軌跡から生成される仮想モデルが異なる。

【0121】

別の実施可能な形態では、第１のプログラムアルゴリズム及び第２のプログラムアルゴリズムは、仮想モデルを構築する際に、仮想モデルの作成方式が異なる。この作成方式は、仮想モデルの複数の要素間の接続形態であってもよい。例えば、第１のプログラムアルゴリズムによって仮想モデルを構築する場合、１つの要素に１つの要素を接続することができ、例えば、１つの大きな円柱体に１つの小さな円柱体を接続することができる。一方、第２のプログラムアルゴリズムによって仮想モデルを構築する場合、１つの要素に複数の要素を接続することができ、例えば、１つの大きな円柱体に複数の小さな円柱体を接続することができ、それにより、仮想モデルが枝分かれている。

【0122】

具体的には、端末画面には複数種類の仮想モデルの識別子又は複数種類のプログラムアルゴリズムの識別子が表示されることができ、ユーザーが選択した仮想モデルの識別子又はプログラムアルゴリズムの識別子に基づき、ユーザーが入力した軌跡を結合して当該識別子に対応する仮想モデルを作成することができる。それにより、仮想モデルをよりユーザーのニーズに適合させ、即ち、ユーザーのニーズに応じて、仮想モデルをリアルタイムで作成し、仮想モデルの柔軟性をさらに向上させることができる。

【0123】

理解されるように、仮想モデルの形状は牛角及び鹿角に限定されず、他の形状であってもよい。仮想モデルを構築するプログラムアルゴリズムも、第１のプログラムアルゴリズム及び第２のプログラムアルゴリズムに限定されず、他のプログラムアルゴリズムであってもよい。

【0124】

図１５は本開示の実施形態による画像処理装置の構成概略図である。本開示の実施形態によって提供される画像処理装置は、クライアント端末に配置されてもよいし、サーバーに配置されてもよい。当該画像処理装置１５０は、具体的に、
表示アセンブリ上でユーザーが入力したスライド軌跡を取得する取得モジュール１５１と、
前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成する作成モジュール１５２と、
前記第１の仮想モデルをターゲット画像における第１の位置に表示する表示モジュール１５３と、を備える。

【0125】

好ましくは、作成モジュール１５２は、決定ユニット１５２１と、変換ユニット１５２２及び作成ユニット１５２３を含む。
決定ユニット１５２１は、前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定し、
取得モジュール１５１は、さらに前記複数のターゲット点のそれぞれに対応するプリセットサブモデルを取得し、
変換ユニット１５２２は、前記複数のターゲット点のそれぞれの幾何学的情報に基づき、各ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換し、
作成ユニット１５２３は、前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成する。

【0126】

好ましくは、決定ユニット１５２１は前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定する際に、具体的に、前記スライド軌跡に従って、前記スライド軌跡内の複数の軌跡点を決定し、前記複数の軌跡点に対してフィット計算を行い、フィット曲線を得、前記フィット曲線に対してサンプリングを行い、前記スライド軌跡に関連する複数のターゲット点を得るように構成され、前記ターゲット点は、前記フィット曲線上のサンプリング点を含む。

【0127】

好ましくは、前記ターゲット点の幾何学的情報には、
前記複数の軌跡点における開始軌跡点に対する前記ターゲット点のオフセット量と、
前記フィット曲線上の前記ターゲット点の接線方向とのうちの少なくとも１つが含まれている。好ましくは、前記ターゲット点の幾何学的情報には、前記複数の軌跡点における開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向が含まれている。変換ユニット１５２２は、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換し、前記複数の第２の点に基づいて、前記ターゲット点に対応するターゲットサブモデルを作成するように構成される。

【0128】

好ましくは、変換ユニット１５２２は、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換する際に、具体的に、前記開始軌跡点に対する前記ターゲット点のオフセット量を３次元オフセット量に変換し、前記フィット曲線上の前記ターゲット点の接線方向を３次元接線方向に変換し、前記３次元オフセット量と前記３次元接線方向に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するように構成される。

【0129】

好ましくは、変換ユニット１５２２は、前記３次元オフセット量と前記３次元接線方向に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換する際に、具体的に、前記３次元オフセット量、前記３次元接線方向、及び前記ターゲット点に対応するスケーリング値に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するように構成される。

【0130】

好ましくは、作成ユニット１５２３は、前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成する際に、具体的に、前記各ターゲット点の識別子に基づいて、前記各ターゲット点のそれぞれに対応するターゲットサブモデルを接続して、前記スライド軌跡に対応する第１の仮想モデルを得るように構成される。ここで、前記ターゲット点の識別子は、前記ターゲット点に対応するターゲットサブモデルの前記第１の仮想モデルでの位置を決定するために使用される。

【0131】

好ましくは、当該画像処理装置１５０は、さらに、前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整するための調整モジュール１５４を含む。

【0132】

好ましくは、調整モジュール１５４は、前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整する際に、具体的に、前記スライド軌跡における他の軌跡点に対する前記スライド軌跡における開始軌跡点の方向を決定し、前記スライド軌跡内の他の軌跡点に対する前記スライド軌跡における開始軌跡点の方向に対して集約計算を行い、集約方向を得、前記集約方向に基づいて、前記第１の仮想モデルの方向を調整するように構成される。

【0133】

好ましくは、表示モジュール１５３は、前記第１の仮想モデルをターゲット画像における第１の位置に表示する際に、具体的に、前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示するステップように構成される。

【0134】

好ましくは、当該画像処理装置１５０は、さらに決定モジュール１５５及び受信モジュール１５６を含む。受信モジュール１５６は、表示モジュール１５３が前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示した後、さらに、鏡像制御コマンドを受信するように構成され、決定モジュール１５５は、前記鏡像制御コマンドに応答して、前記ターゲットオブジェクトにおける前記第１の位置と対称な第２の位置を決定するように構成され、表示モジュール１５３は、さらに前記第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを前記第２の位置に表示するように構成される。

【0135】

好ましくは、調整モジュール１５４は、表示モジュール１５３が前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示した後、さらに、前記第１の仮想モデルのパラメータを調整し、調整された前記パラメータに基づいて、前記第１の仮想モデルを更新するように構成される。

【0136】

好ましくは、調整モジュール１５４は、前記第１の仮想モデルのパラメータを調整する際に、具体的に、前記第１の仮想モデルに対するパラメータ調整コマンドを受信し、前記パラメータ調整コマンドに応答して、前記第１の仮想モデルのパラメータを調整するように構成される。

【0137】

好ましくは、取得モジュール１５１は、さらにオーディオ情報を取得ように構成され、調整モジュール１５４は前記第１の仮想モデルのパラメータを調整する際に、具体的に、前記オーディオ情報のパラメータに基づいて、前記第１の仮想モデルのパラメータを調整するように構成される。

【0138】

好ましくは、当該画像処理装置１５０は、音声再生モジュール１５７をさらに含み、取得モジュール１５１はオーディオ情報を取得する前に、受信モジュール１５６はオーディオ情報再生コマンドを受信するように構成され、音声再生モジュール１５７は、前記オーディオ情報再生コマンドに応答して、前記オーディオ情報を再生するように構成される。

【0139】

好ましくは、当該画像処理装置１５０は、収集モジュール１５８をさらに含み、収集モジュール１５８は、周辺環境におけるオーディオ情報を収集するように構成される。

【0140】

本開示の実施形態によって提供される画像処理装置は、本開示の方法実施例による画像処理方法におけるクライアント端末またはサーバーによって実行されるステップを実行することができ、具体的な実行ステップ及び有益な効果はここでは繰り返されない。

【0141】

図１６は、本開示の実施形態による電子デバイスの構成概略図である。以下、具体的に図１６を参照すると、本開示の実施例を実施するのに適している電子デバイス１６００の構成概略図が示されている。本開示の実施例に係る電子デバイス１６００は、携帯電話、ノートブックコンピュータ、デジタル放送受信機、ＰＤＡ（パーソナルデジタルアシスタント）、ＰＡＤ（タブレットコンピュータ）、ＰＭＰ（ポータブルマルチメディアプレーヤ）、車載端末（例えば、カーナビゲーション端末）などの携帯端末、デジタルＴＶやデスクトップパソコンなどの据え置き型端末などを含み得るが、これらに限定されない。図１６に示す電子デバイスは単なる一例に過ぎず、本開示の実施形態の機能及び使用範囲にいかなる制限もかけるべきではない。

【0142】

図１６に示すように、電子デバイス１６００は、処理装置（例えばＣＰＵ、グラフィックプロセッサなど）１６０１を含み得、処理装置は、読み取り専用メモリ（ＲＯＭ）１６０２に格納されたプログラムまたは格納装置１６０８からランダムアクセスメモリ（ＲＡＭ）１６０３内にロードされたプログラムに従い、様々な適切な動作と処理を実行することができる。ＲＡＭ１６０３には、電子デバイス１６００を操作するのに必要な様々なプログラム及びデータも格納されている。処理装置１６０１、ＲＯＭ１６０２及びＲＡＭ１６０３は、バス１６０４を介して互いに接続されている。入出力（Ｉ／Ｏ）インターフェース１６０５もバス１６０４に接続されている。

【0143】

典型的には、Ｉ／Ｏインターフェース１６０５には、例えば、タッチスクリーン、タッチパッド、キーボード、マウス、カメラ、マイクロフォン、加速度計、ジャイロスコープなどを含む入力デバイス１６０６、例えば、液晶ディスプレイ（ＬＣＤ）、スピーカー、振動器などを含む出力装置１６０７、例えば、磁気テープ、ハードディスクなどを含む格納装置７０６、及び通信装置１６０９が接続され得る。通信ユニット１６０９は、電子デバイス１６００が他のデバイスと無線または有線で通信してデータを交換することを可能にする。図１６には、各種の装置を有する電子デバイス１６００が示されているが、図示された装置のすべてを実施または具備する必要があるわけではないことは理解されるべきである。代替的に、より多くのまたはより少ない装置を実施または具備することができる。

【0144】

特に、本開示の実施形態によれば、フローチャートを参照して上記で説明されたプロセスは、コンピュータソフトウェアプログラムとして実現され得る。例えば、本開示の実施形態は、非一時的なコンピュータ可読媒体上で実行されるコンピュータプログラムを含むコンピュータプログラム製品を含み、当該コンピュータプログラムは、フローチャートに示される方法を実行するためのプログラムコードを含む。このような実施形態では、当該コンピュータプログラムは、通信装置１６０９を介してネットワークからダウンロード及びインストールされ得るか、または格納装置１６０８、またはＲＯＭ１６０２からインストールされ得る。当該コンピュータプログラムが処理装置１６１０によって実行されると、本開示の実施形態に係る方法で定義された上記の機能が実行される。

【0145】

なお、本開示に言及された上記のコンピュータ可読媒体は、コンピュータ可読信号媒体またはコンピュータ可読格納媒体、或いは上記２つの任意の組み合わせであり得る。コンピュータ可読格納媒体は、例えば、電気的、磁気的、光学的、電磁気的、赤外線または半導体システム、装置またはデバイス、或いは上記の任意の組み合わせであり得るが、これらに限定されない。コンピュータ可読格納媒体のより具体的な例には、１つまたは複数のワイヤを有する電気接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能なプログラミング可能読み取り専用メモリ（ＥＰＲＯＭまたはフラッシュメモリ）、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ（ＣＤ-ＲＯＭ）、光ストレージデバイス、磁気ストレージデバイス、または上記の任意の適切な組み合わせを含み得るが、これらに限定されない。本開示では、コンピュータ可読格納媒体は、コマンド実行システム、装置、またはデバイスによって使用されるか、またはそれらと組み合わせて使用されることができるプログラムを含むか、または格納する任意の有形媒体であり得る。しかしながら、本開示では、コンピュータ可読信号媒体は、ベースバンドで、または搬送波の一部として伝搬されるデータ信号を含むことができ、当該データ信号には、コンピュータ可読プログラムコードが担持される。このように伝搬されたデータ信号は、様々な形態をとることができ、電磁信号、光信号、または前述の任意の適切な組み合わせを含むが、これらに限定されない。コンピュータ可読信号媒体はまた、コンピュータ可読格納媒体以外の任意のコンピュータ可読媒体であり得、当該コンピュータ可読信号媒体は、コマンド実行システム、装置、またはデバイスによって使用されるか、またはそれらと組み合わせて使用されるためのプログラムを送信、伝搬、または伝送することができる。コンピュータ可読媒体上に含まれたプログラムコードは、電線、光ファイバーケーブル、ＲＦ（無線周波数）、または前述の任意の適切な組み合わせなどを含むがこれらに限定されない任意の適切な媒体を使用して伝送することができる。

【0146】

いくつかの実施形態では、クライアント端末、サーバーは、ＨＴＴＰ（ＨｙｐｅｒＴｅｘｔ Ｔｒａｎｓｆｅｒ Ｐｒｏｔｏｃｏｌ、ハイパーテキスト転送プロトコル）などの現在既知、または将来開発される任意のネットワークプロトコルを使用して通信することができ、任意の形式または媒体のデジタルデータ通信（例えば、通信ネットワーク）と相互接続されることができる。通信ネットワークの例としては、ローカルエリアネットワーク（「ＬＡＮ」）、ワイドエリアネットワーク（「ＷＡＮ」）、インターネット（インターネットなど）、及びエンドツーエンドネットワーク（例えば、ａｄｈｏｃエンドツーエンドネットワーク）、及び現在既知、又は将来開発される任意のネットワークが含まれる。

【0147】

上記のコンピュータ可読媒体は、上記の電子デバイスに含まれていてもよく、または電子装置に組み込まれずに単独で存在していてもよい。

【0148】

上記のコンピュータ可読媒体には、１つ以上のプログラムが格納されている。上記の１つ以上のプログラムが電子デバイスによって実行されるとき、当該電子デバイスに、
表示アセンブリ上でユーザーが入力したスライド軌跡を取得するステップと、
前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成するステップと、
前記第１の仮想モデルをターゲット画像における第１の位置に表示するステップと、を実行させる。

【0149】

また、当該電子デバイスに、上述した画像処理方法における他のステップを実行させることもできる。

【0150】

また、本開示の操作を実行するためのコンピュータプログラムコードは、１種または多種のプログラミング言語またはそれらの組み合わせで作成されることができ、上記プログラミング言語は、Ｊａｖａ、Ｓｍａｌｌｔａｌｋ、Ｃ＋＋のようなオブジェクト指向プログラミング言語を含み、「Ｃ」言語のような従来の手続き型プログラミング言語または類似するプログラミング言語をさらに含むが、これらに限定されない。プログラムコードは、ユーザーのコンピュータ上で完全に、ユーザーのコンピュータ上で一部的に、１つの独立型ソフトウェアパッケージとして、ユーザーのコンピュータ上で一部的にかつリモートコンピュータ上で一部的に、またはリモートコンピュータ若しくはサーバー上で完全に実行することができる。リモートコンピュータが関与する場合、リモートコンピュータは、ローカルエリアネットワーク（ＬＡＮ）またはワイドエリアネットワーク（ＷＡＮ）を含む任意の種類のネットワークを介してユーザーのコンピュータに接続することができ、または、外部コンピュータに接続することができる（例えば、インタネットサービスプロバイダを利用してインターネットを介して接続する）。

【0151】

図面におけるフローチャート及びブロック図は、本開示の様々な実施例に係るシステム、方法、及びコンピュータプログラム製品によって実現可能な体系アーキテクチャ、機能及び操作を示している。この点に関して、フローチャートまたはブロック図の各ブロックは、所定の論理機能を実現するための１つ以上の実行可能コマンドを含むモジュール、プログラムセグメント、またはコードの一部を表すことができる。なお、いくつかの代替的な実現では、ブロックに示されている機能が、図示されている順序とは異なる順で発生する場合もあることに注意されたい。例えば、連続して示される２つのブロックは、実際にほぼ並行して実行される場合もあれば、逆な順序に従って実行される場合もあり、関連する機能に応じて決定される。なお、ブロック図及び／またはフローチャート図の各ブロック、及びブロック図及び／またはフローチャート図のブロックの組み合わせは、所定の機能または操作を実行するための専用のハードウェアによるシステムで実現されるか、または専用のハードウェアとコンピュータコマンドの組み合わせで実現されることができる。

【0152】

本開示の実施例に記載されるユニットは、ソフトウェアまたはハードウェアによって実現され得る。ここで、ユニットの名称は、ある場合、当該ユニット自体への制限にならない。

【0153】

本明細書で上記に説明された機能は、少なくとも部分的に、１つ以上のハードウェアロジック部材によって実行され得る。例えば、使用できるハードウェアロジック部材の例示的なタイプには、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、特定用途向け標準製品（ＡＳＳＰ）、システムオンチップ（ＳＯＣ）、コンプレックスプログラマブル論理デバイス（ＣＰＬＤ）などが含まれているが、これらに限定されない。

【0154】

本開示の文脈において、機械可読媒体は、命令実行システム、装置、またはデバイスによって、またはそれらと組み合わせて使用されるためのプログラムを含むか、または格納することができる有形の媒体であり得る。機械可読媒体は、機械可読信号媒体または機械可読格納媒体であり得る。機械可読媒体には、電子的、磁気的、光学的、電磁的、赤外線、または半導体システム、装置またはデバイス、或いは上記の任意の適切な組み合わせが含まれ得るが、これらに限定されない。機械可読格納媒体のより具体的な例には、１つまたは複数のワイヤによる電気接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能なプログラムミング可能な読み取り専用メモリ（ＥＰＲＯＭまたはフラッシュメモリ）、光ファイバ、コンパクトディスク読み取り専用メモリ（ＣＤ-ＲＯＭ）、光ストレージ、磁気ストレージ、または上記の任意の適切な組み合わせが含まれ得る。

【0155】

本開示の１つまたは複数の実施形態によれば、本開示は、
表示アセンブリ上でユーザーが入力したスライド軌跡を取得するステップと、
前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成するステップと、
前記第１の仮想モデルをターゲット画像における第１の位置に表示させるステップと、
を含む画像処理方法を提供する。

【0156】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成するステップは、
前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定するステップと、
前記複数のターゲット点のそれぞれに対応するプリセットサブモデルを取得するステップと、
前記複数のターゲット点のそれぞれの幾何学的情報に基づき、各ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換するステップと、
前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成するステップと、を含む。

【0157】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定するステップは、
前記スライド軌跡に従って、前記スライド軌跡内の複数の軌跡点を決定するステップと、
前記複数の軌跡点に対してフィット計算を行い、フィット曲線を得るステップと、
前記フィット曲線に対してサンプリングを行って、前記スライド軌跡に関連する複数のターゲット点を得るステップであって、前記ターゲット点には、前記フィット曲線上のサンプリング点が含まれるステップと、を含む。

【0158】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記ターゲット点の幾何学的情報には、
前記複数の軌跡点における開始軌跡点に対する前記ターゲット点のオフセット量と、
前記フィット曲線上の前記ターゲット点の接線方向と、のうちの少なくとも１つが含まれ、
前記複数のターゲット点のそれぞれの幾何学的情報に基づき、各ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換するステップは、
前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換するステップを含む。

【0159】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換するステップは、
前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップと、
前記複数の第２の点に基づいて、前記ターゲット点に対応するターゲットサブモデルを作成するステップと、を含む。

【0160】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップは、
前記開始軌跡点に対する前記ターゲット点のオフセット量を３次元オフセット量に変換するステップと、
前記フィット曲線上の前記ターゲット点の接線方向を３次元接線方向に変換するステップと、
前記３次元オフセット量と前記３次元接線方向に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップと、を含む。

【0161】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記３次元オフセット量と前記３次元接線方向に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップは、
前記３次元オフセット量、前記３次元接線方向、及び前記ターゲット点に対応するスケーリング値に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するステップを含む。

【0162】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成するステップは、
前記各ターゲット点の識別子に基づいて、前記各ターゲット点のそれぞれに対応するターゲットサブモデルを結合させて、前記スライド軌跡に対応する第１の仮想モデルを得るステップを含み、
前記ターゲット点の識別子は、前記ターゲット点に対応するターゲットサブモデルの前記第１の仮想モデルでの位置を決定するために使用される。

【0163】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整するステップをさらに含む。

【0164】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整するステップは、
前記スライド軌跡内の他の軌跡点に対する前記スライド軌跡内の開始軌跡点の方向を決定するステップと、
前記スライド軌跡内の他の軌跡点に対する前記スライド軌跡内の開始軌跡点の方向に対して集約計算を行って、集約方向を得るステップと、
前記集約方向に基づいて、前記第１の仮想モデルの方向を調整するステップと、を含む。

【0165】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記第１の仮想モデルをターゲット画像における第１の位置に表示するステップは、
前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示するステップを含む。

【0166】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示した後、さらに、
鏡像制御コマンドを受信するステップと、
前記鏡像制御コマンドに応答して、前記ターゲットオブジェクトにおける前記第１の位置と対称な第２の位置を決定するステップと、
前記第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを前記第２の位置に表示するステップと、を含む。

【0167】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記第１の仮想モデルをターゲット画像における第１の位置に表示した後、さらに、
前記第１の仮想モデルのパラメータを調整するステップと、
調整された前記パラメータに基づいて、前記第１の仮想モデルを更新するステップと、を含む。

【0168】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記第１の仮想モデルのパラメータを調整するステップは、
前記第１の仮想モデルに対するパラメータ調整コマンドを受信するステップと、
前記パラメータ調整コマンドに応答して、前記第１の仮想モデルのパラメータを調整するステップと、を含む。

【0169】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、前記第１の仮想モデルのパラメータを調整するステップは、
オーディオ情報を取得するステップと、
前記オーディオ情報のパラメータに基づいて、前記第１の仮想モデルのパラメータを調整するステップと、を含む。

【0170】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、オーディオ情報を取得する前に、さらに、
オーディオ情報再生コマンドを受信するステップと、
前記オーディオ情報再生コマンドに応答して、前記オーディオ情報を再生するステップと、を含む。

【0171】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理方法において、オーディオ情報を取得する前記ステップは、
周辺環境におけるオーディオ情報を収集するステップを含む。

【0172】

本開示の１つまたは複数の実施形態によれば、本開示は、
表示アセンブリ上でユーザーが入力したスライド軌跡を取得する取得モジュールと、
前記スライド軌跡に従って、前記スライド軌跡に対応する第１の仮想モデルを作成する作成モジュールと、
前記第１の仮想モデルをターゲット画像における第１の位置に表示する表示モジュールと、
を含む画像処理装置を提供する。

【0173】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、生成モジュールは、決定ユニットと、変換ユニット及び作成ユニットを含み、
決定ユニットは、前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定し、
取得モジュールは、さらに、前記複数のターゲット点のそれぞれに対応するプリセットサブモデルを取得するように構成され、変換ユニットは、前記複数のターゲット点のそれぞれの幾何学的情報に基づき、各ターゲット点に対応するプリセットサブモデルをターゲットサブモデルに変換し、
作成ユニットは、前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成する。

【0174】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、決定ユニットは前記スライド軌跡に従って、前記スライド軌跡に関連する複数のターゲット点を決定する際に、具体的に、前記スライド軌跡に従って、前記スライド軌跡内の複数の軌跡点を決定し、前記複数の軌跡点に対してフィット計算を行って、フィット曲線を求め、前記フィット曲線に対してサンプリングを行って、前記スライド軌跡に関連する複数のターゲット点を得るように構成され、前記ターゲット点は、前記フィット曲線上のサンプリング点を含む。

【0175】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、前記ターゲット点の幾何学的情報には、
前記複数の軌跡点における開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とのうちの少なくとも１つが含まれている。

【0176】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、変換ユニットは、具体的に、前記開始軌跡点に対する前記ターゲット点のオフセット量と、前記フィット曲線上の前記ターゲット点の接線方向とに基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換し、前記複数の第２の点に基づいて、前記ターゲット点に対応するターゲットサブモデルを作成するように構成される。

【0177】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、変換ユニットは、具体的に、前記開始軌跡点に対する前記ターゲット点のオフセット量を３次元オフセット量に変換し、前記フィット曲線上の前記ターゲット点の接線方向を３次元接線方向に変換し、前記３次元オフセット量と前記３次元接線方向に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するように構成される。

【0178】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、変換ユニットは、前記３次元オフセット量と前記３次元接線方向に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換する際に、具体的に、前記３次元オフセット量、前記３次元接線方向、及び前記ターゲット点に対応するスケーリング値に基づいて、前記ターゲット点に対応するプリセットサブモデル上の複数の第１の点を対応する複数の第２の点に変換するように構成される。

【0179】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、作成ユニットは、前記各ターゲット点のそれぞれに対応するターゲットサブモデルに基づいて、前記スライド軌跡に対応する第１の仮想モデルを作成する際に、具体的に、前記各ターゲット点の識別子に基づいて、前記各ターゲット点のそれぞれに対応するターゲットサブモデルを結合させて、前記スライド軌跡に対応する第１の仮想モデルを得るように構成される。ここで、前記ターゲット点の識別子は、前記ターゲット点に対応するターゲットサブモデルの前記第１の仮想モデルでの位置を決定するために使用される。

【0180】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、さらに、前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整するための調整モジュールを含む。

【0181】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、調整モジュールは、前記スライド軌跡のスライド方向に基づいて、前記第１の仮想モデルの方向を調整する際に、具体的に、前記スライド軌跡内の他の軌跡点に対する前記スライド軌跡内の開始軌跡点の方向を決定し、前記スライド軌跡内の他の軌跡点に対する前記スライド軌跡内の開始軌跡点の方向に対して集約計算を行い、集約方向を得、前記集約方向に基づいて、前記第１の仮想モデルの方向を調整するように構成される。

【0182】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、表示モジュールは、前記第１の仮想モデルをターゲット画像における第１の位置に表示する際に、具体的に、前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示するように構成される。

【0183】

本開示の１つまたは複数の実施形態によれば、本開示は、決定モジュール及び受信モジューをさらに含む画像処理装置を提供する。受信モジュールは、表示モジュールが前記第１の仮想モデルをターゲット画像におけるターゲットオブジェクトの第１の位置に表示した後、鏡像制御コマンドを受信するように構成され、決定モジュールは、前記鏡像制御コマンドに応答して、前記ターゲットオブジェクトにおける前記第１の位置と対称な第２の位置を決定するように構成され、表示モジュールは、さらに前記第１の仮想モデルと互いに鏡像関係にある第２の仮想モデルを前記第２の位置に表示するように構成される。

【0184】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、調整モジュールは、表示モジュールが前記第１の仮想モデルをターゲット画像における第１の位置に表示した後、さらに、前記第１の仮想モデルのパラメータを調整し、調整された前記パラメータに基づいて、前記第１の仮想モデルを更新するように構成される。

【0185】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、調整モジュールは前記第１の仮想モデルのパラメータを調整する際に、具体的に、前記第１の仮想モデルに対するパラメータ調整コマンドを受信し、前記パラメータ調整コマンドに応答して、前記第１の仮想モデルのパラメータを調整するように構成される。

【0186】

本開示の１つまたは複数の実施形態によれば、本開示による画像処理装置において、取得モジュールは、さらにオーディオ情報を取得するように構成され、調整モジュールは前記第１の仮想モデルのパラメータを調整する際に、具体的に、前記オーディオ情報のパラメータに基づいて、前記第１の仮想モデルのパラメータを調整するように構成される。

【0187】

本開示の１つまたは複数の実施形態によれば、本開示は、音声再生モジュールをさらに含む画像処理装置を提供する。取得モジュールがオーディオ情報を取得する前に、受信モジュールはさらに、オーディオ情報再生コマンドを受信するように構成され、音声再生モジュールは、前記オーディオ情報再生コマンドに応答して、前記オーディオ情報を再生するように構成される。

【0188】

本開示の１つまたは複数の実施形態によれば、本開示は、収集モジュールをさらに含む画像処理装置を提供する。収集モジュールは、周辺環境におけるオーディオ情報を収集するように構成される。

【0189】

本開示の１つまたは複数の実施形態によれば、本開示は、
１つ以上のプロセッサと、
１つ以上のプログラムを記憶するための記憶装置と、
を含む電子デバイスであって、
前記１つ以上のプログラムが前記１つ以上のプロセッサによって実行されるときに、前記１つ以上のプロセッサに本開示のいずれか１項に記載の画像処理方法を実現させる電子デバイスを提供する。

【0190】

本開示の１つまたは複数の実施形態によれば、本開示は、コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体を提供する。当該プログラムがプロセッサによって実行されるときに、本開示のいずれか１項に記載の画像処理方法を実現させる。

【0191】

上記の記述は、本開示の好適な実施形態及び利用された技術原理を説明するものに過ぎない。本開示に係る開示の範囲は、上記の技術的特徴の特定の組み合わせによって形成された技術案に限定されず、さらに、上記の開示の構想から逸脱しない限り、上記の技術的特徴または均等的な特徴を任意に組み合わせることによって形成された他の技術案、例えば上記の特徴を、本開示に開示された（ただしこれに限定されない）同様な機能を有する技術的特徴に置き換えることによって形成された技術案も含まれるべきであることは、当業者に理解されるべきであろう。

【0192】

また、操作は特定の順序で説明されているが、これらの操作が示されている特定の順序または順番に従って実行されることを要求するものとして解釈されるべきではない。ある特定の状況で、マルチタスクと並列処理が有利な場合がある。同様に、上記の記述には、いくつかの具体的な実現ステップが含まれているが、これらは、本開示の範囲に対する制限として解釈されるべきではない。単独の実施形態の文脈において説明されるある特徴はまた、単一の実施形態において組み合わせて実施され得る。他方、単一の実施形態の文脈において説明される様々な特徴はまた、単独で、または複数の実施形態において任意の適切なサブ組み合わせの形で実施されることもできる。

【0193】

本主題は、構造的特徴及び／または方法の論理的動作に拘束される言語で説明されてきたが、添付される特許請求の範囲で限定される主題は、必ずしも上記で説明された特定の特徴や動作に限定されるとは言えず、むしろ、上記で説明された特定の特徴及び動作は、特許請求の範囲を実現するための単なる例示的な形態に過ぎないことは、理解されるべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】