特許 6773883 インターネットに基づく美顔システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6773883

(24)【登録日】2020年10月5日

(45)【発行日】2020年10月21日

(54)【発明の名称】インターネットに基づく美顔システム

(51)【国際特許分類】

   G06T 1/00 20060101AFI20201012BHJP

   G06T 1/40 20060101ALI20201012BHJP

   G06T 7/00 20170101ALI20201012BHJP

【ＦＩ】

   G06T1/00 340A

   G06T1/40

   G06T7/00 660A

   G06T7/00 350C

【請求項の数】11

【全頁数】10

(21)【出願番号】特願2019-501994(P2019-501994)

(86)(22)【出願日】2017年11月8日

(65)【公表番号】特表2019-523489(P2019-523489A)

(43)【公表日】2019年8月22日

(86)【国際出願番号】CN2017109834

(87)【国際公開番号】WO2019000777

(87)【国際公開日】20190103

【審査請求日】2019年1月9日

(31)【優先権主張番号】201710498941.6

(32)【優先日】2017年6月27日

(33)【優先権主張国】CN

(73)【特許権者】

【識別番号】519008304

【氏名又は名称】五邑大学

(74)【代理人】

【識別番号】100112737

【弁理士】

【氏名又は名称】藤田 考晴

(74)【代理人】

【識別番号】100136168

【弁理士】

【氏名又は名称】川上 美紀

(74)【代理人】

【識別番号】100196117

【弁理士】

【氏名又は名称】河合 利恵

(72)【発明者】

【氏名】甘 俊英

(72)【発明者】

【氏名】姜 ▲開▼永

(72)【発明者】

【氏名】▲譚▼ 海英

【審査官】 板垣 有紀

(56)【参考文献】

【文献】 特開２００４−２４６６７３（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１３／０１０８１２３（ＵＳ，Ａ１）

【文献】 特開２０１６−０８５５７９（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｔ １／００ − ７／９０

ＩＥＥＥ Ｘｐｌｏｒｅ

(57)【特許請求の範囲】

【請求項1】

クライアント側で画像及びビデオを取得し、処理し、且つサーバ側にアップロードする画像及びビデオ取得ユニットと、
前記画像及びビデオ取得ユニットによりアップロードされた前記画像及びビデオから顔情報を検出するとともに、その結果を前記クライアント側または美化処理ユニットにフィードバックする顔検出ユニットと、
前記顔検出ユニットが検出した前記顔情報に対応し前記美化処理ユニットによって選択されたモデルを応用し、多様体学習方法、深層学習及び画像処理における疑似変換技術により、前記顔検出ユニットが検出した前記顔情報を前記モデルにマッピングさせ、深層学習方法により前記顔検出ユニットが検出した前記顔情報及び前記モデルに対してその細部を組み合わせることにより前記顔検出ユニットが検出した前記顔情報を美化処理するとともに、その美化処理した結果を前記顔検出ユニットまたは前記クライアント側にフィードバックする前記美化処理ユニットと
を備えるインターネットに基づく美顔システム。

【請求項2】

前記画像及びビデオ取得ユニットが撮像した前記画像及びビデオの元画像は、ＲＡＷ高解像度フォーマットで高解像度の画像として記憶され、
前記元画像は、画像処理アルゴリズムを応用してその解像度が低下され、シャープを強調し、コントラストを強調することにより低解像度の画像が得られ、
ソフトウェアによる処理が完了した後、前記高解像度の画像および前記低解像度の画像の二枚の画像がインターネットを介して前記サーバにアップロードされ、前記サーバにより前記高解像度の画像および前記低解像度の画像が受信された後に、前記低解像度の画像が顔検出に用いられ、前記高解像度の画像が顔の美化に用いられる請求項１に記載のインターネットに基づく美顔システム。

【請求項3】

前記画像及びビデオ取得ユニットは、画像資源を記憶することに用いられ、ローカルストレージとサーバ側ストレージを含み、
前記ローカルストレージは、前記画像資源をクライアント側の記憶媒体に記憶することに用いられ、
前記サーバ側ストレージは、前記画像資源をパブリッククラウドストレージプラットフォーム及びサーバストレージプラットフォームに記憶することに用いられる請求項２に記載のインターネットに基づく美顔システム。

【請求項4】

前記顔検出ユニットは、顔検出アルゴリズムをリモートサーバに配置し、ローカルクライアント側で前記顔検出アルゴリズムが予備のＡＰＩインタフェースを応用し、リモートサーバで画像処理を行い、
前記顔検出ユニットは、クライアント側画像アップロードユニットと、クラウド側顔検出ユニットと、サーバ側画像ダウンロードユニットとを含み、
前記クライアント側画像アップロードユニットは、前記画像及びビデオを前記クライアント側から前記サーバにアップロードを行い、
前記クラウド側顔検出ユニットは、前記サーバに配置された前記顔検出アルゴリズムを応用して受信された前記画像及びビデオに対して顔検出処理を行い、
前記サーバ側画像ダウンロードユニットは、前記顔検出処理後の顔画像及び顔座標を含む前記顔情報を前記サーバから前記クライアント側にフィードバックする請求項２または請求項３に記載のインターネットに基づく美顔システム。

【請求項5】

前記顔検出ユニットは、リモートで顔における６８個のキーポイントを検出することによって顔の五官のエリアを確定するとともに特徴を抽出することに用いられるクラウド側顔キーポイント検出ユニットを含み、
前記クラウド側顔キーポイント検出ユニットは、前記低解像度の画像を用い、抽出されたキーポイント座標が前記クライアント側にフィードバックされるとともに美顔アルゴリズムに伝送される請求項４に記載のインターネットに基づく美顔システム。

【請求項6】

前記顔検出ユニットは、前記元画像と美化処理ユニットにより美化された画像が同じ人であるかを判定することに用いられるクラウド側顔検証ユニットを含み、
前記クラウド側顔検証ユニットが前記元画像と前記美化された画像との類似度が低すぎ、且つシステムデフォルトの類似度閾値より低いと判定すると、前記美化処理ユニットは再び美化処理を行う請求項５に記載のインターネットに基づく美顔システム。

【請求項7】

前記美化処理ユニットは、顔の美しさの予測アルゴリズムを用いて前記顔画像の美しさを予備判断し、顔の美しさを表す予備判断の点数を取得し、前記予備判断の点数が１００点制を採用し、１点から１００点まで分けられ、１点と評価する場合に最も醜いことを示し、１００点と評価する場合に最も美しいことを示し、点数が高いほど美しさが高く、点数が低いほど美しさが低いことを示す請求項４に記載のインターネットに基づく美顔システム。

【請求項8】

前記美化処理ユニットは、五官の美しさの予測ユニットを含み、
前記五官の美しさの予測ユニットは、顔面偏差値の予測のもとに、五官の美しさの予測アルゴリズムによって、抽出された顔の特徴と顔における６８個のキーポイントに基づき顔の五官の輪郭を抽出するとともに、五官の美しさの予備判断を行い、前記五官の美しさの予備判断が１００点制を採用し、１点から１００点まで分けられ、１点と評価する場合に最も醜いことを示し、１００点と評価する場合に最も美しいことを示し、点数が高いほど美しさが高く、点数が低いほど美しさが低いことを示す請求項７に記載のインターネットに基づく美顔システム。

【請求項9】

前記美化処理ユニットは、顔の美しさのデータベースを含み、
前記顔の美しさのデータベースは、アジアの各主要国と地域の人の顔の構造及び輪郭、五官の分布、肌の色、肌理の細かさ、男性の顔の美しさの標準テンプレート、女性の顔の美しさの標準テンプレート、男性の五官の美しさの標準テンプレート及び女性の五官の美しさの標準テンプレートに関するデータが記憶される請求項８に記載のインターネットに基づく美顔システム。

【請求項10】

前記美化処理ユニットは、美化実施ユニットと、自動美化ユニットとを含み、
前記美化実施ユニットは、前記顔の美しさのデータベースから美しさの標準モデルを選択するように美顔アルゴリズムを指導し、
前記自動美化ユニットは、美化実施方法に基づいて顔の五官をスムーズに調整することを自動的に実現するとともに、顔の表面の従来のテクスチャを変更しない請求項９に記載のインターネットに基づく美顔システム。

【請求項11】

ユーザ登録、ログインと個人化アプリ設置機能を含み、顔識別技術と指紋識別技術によりソフトウェアアカウントのログインとメンテナンスを実現するソフトウェア基本機能ユニットと、
第三者のソーシャルメディアアカウントによりログインして即時にチャットする機能を含み、ネットワークで友達を作る、チャットする、及び他のユーザを親友として追加することに用いられ、グループ分け管理モードを採用し、システム情報とユーザの個人のウェブスペースにおけるネットフレンドによる評価情報を受信する即時通信ユニットと、
個人ホームページとＥＸＥウェブアルバムの表示を含み、個人化空間装飾、文字入力、ＥＸＥウェブアルバムのオートプレイを行うことができ、オンラインでＥＸＥウェブアルバムを作るとともに、オンラインでダウンロードできる機能を有する個人ホームページユニットと
を備える請求項１に記載のインターネットに基づく美顔システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明はインターネット、機械学習と生体認証システムの分野に関し、特にインターネットに基づく美顔システムに関する。

【背景技術】

【0002】

現在、スマートフォンとインターネット技術の進展に伴い、ソーシャルメディアは益々注目され、ソーシャルメディアに個人の日常写真、旅行写真をアップロードすることが人々の生活において不可欠の一部である。

【0003】

しかし、元画像の画質に満足しないためや個人の容姿に自信を持っていないために、ソーシャルメディアに画像をアップロードする前に常に画像の視覚効果を改善するように画像をレタッチする。

【0004】

まず、人々は自分の美しさに対する認識が不十分であり、定量の分析と比較が足りない。次に、ソフトウェアツールで画像を美化し観賞効果を改善することができるにもかかわらず、一つのレタッチソフトウェアを上手に使用し画像を完璧にレタッチすることは通常作業量が大きく、大量の手間が掛かる。且つ画像が美化処理された後に、一部の細部処理の不良が発生する、全体の表示が歪む、などの問題がよくある。

【0005】

従来の解決方法では、顔画像の美化と顔面偏差値の予測とは異なるソフトウェアによってそれぞれ実現される。また、従来の顔面偏差値の採点ソフトウェアは、顔画像のみに対して採点して予備判断を行う。具体的な顔と予備判断の点数に対して点数の高さの判定基準を示さず、かつ視覚効果を改善する美化方法を提供しなかった。そのため、美化ソフトウェアによって画像をレタッチする時に、個人の主観的認識と継続的な試みにより顔の美しさを調整する必要がある。

【0006】

顔面偏差値の予測と顔の美化とを合わせ、予備判断の点数の高さに基づいてシステムにより対応する美化方法を提供するとともに、自動的に顔の美化を行い、且つ画像の品質の劣化を避けることは、即刻に解決すべき問題となる。

【発明の概要】

【発明が解決しようとする課題】

【0007】

上記した問題を解決するために、本発明は顔面偏差値の予測と自動美化とを合わせ、顔画像の美化を実現し、且つ画像の劣化を避けるインターネットプラットフォームに基づく美顔システムを提供することを目的とする。

【課題を解決するための手段】

【0008】

本発明に係るインターネットに基づく美顔システムは、クライアント側で画像及びビデオを取得し、処理し、且つサーバ側にアップロードする画像及びビデオ取得ユニットと、前記画像及びビデオ取得ユニットによりアップロードされた前記画像及びビデオから顔情報を検出するとともに、その結果を前記クライアント側または美化処理ユニットにフィードバックする顔検出ユニットと、前記顔検出ユニットが検出した前記顔情報に対応し前記美化処理ユニットによって選択されたモデルを応用し、多様体学習方法、深層学習及び画像処理における疑似変換技術により、前記顔検出ユニットが検出した前記顔情報を前記モデルにマッピングさせ、深層学習方法により前記顔検出ユニットが検出した前記顔情報及び前記モデルに対してその細部を組み合わせることにより前記顔検出ユニットが検出した前記顔情報を美化処理するとともに、その美化処理した結果を前記顔検出ユニットまたは前記クライアント側にフィードバックするための前記美化処理ユニットとを備える。

【0009】

さらに、前記画像及びビデオ取得ユニットが撮像した前記画像及びビデオの元画像はＲＡＷ高解像度フォーマットで高解像度の画像として記憶され、前記元画像は、画像処理アルゴリズムを応用してその解像度が低下され、シャープを強調し、コントラストを強調することにより低解像度の画像が得られ、ソフトウェアによる処理が完了した後、前記高解像度の画像および前記低解像度の画像の二枚の画像がインターネットを介して前記サーバにアップロードされ、前記サーバにより前記高解像度の画像および前記低解像度の画像が受信された後に、前記低解像度の画像が顔の検出、顔の検証と顔のキーポイントの検出に用いられ、前記高解像度の画像が顔の美化に用いられる。

【0010】

さらに、前記画像及びビデオ取得ユニットは、画像資源を記憶することに用いられ、ローカルストレージとサーバ側ストレージを含み、前記ローカルストレージが前記画像資源を前記クライアント側の記憶媒体に記憶することに用いられ、前記サーバ側ストレージが前記画像資源をパブリッククラウドストレージプラットフォーム及びサーバストレージプラットフォームに記憶することに用いられる。そのうち、パブリッククラウドストレージプラットフォームの記憶容量が１０００Ｍに限られ、サーバストレージプラットフォームの記憶容量が２００Ｍに限られる。

【0011】

さらに、前記顔検出ユニットはリモートで顔画像を検出することを含み、顔検出アルゴリズムをリモートサーバに配置することによってし、ローカルクライアント側で前記顔検出アルゴリズムが予備のＡＰＩインタフェースを応用し、前記リモートサーバで画像処理を行い、前記顔検出ユニットは、クライアント側画像アップロードユニットと、クラウド側顔検出ユニットと、サーバ側画像ダウンロードユニットとを含み、前記クライアント側画像アップロードユニットは、前記画像及びビデオを前記クライアント側から前記サーバにアップロードすることに用いられを行い、前記クラウド側顔検出ユニットは、前記サーバに配置された顔検出アルゴリズムを応用して受信された前記画像及びビデオに対して顔検出処理をすることに用いられ行い、前記サーバ側画像ダウンロードユニットは、処理後前記顔検出処理後の顔画像及び顔座標を含む前記顔情報を前記サーバから前記クライアント側にフィードバックすることに用いられる。

【0012】

さらに、前記顔検出ユニットは、リモートで顔における６８個のキーポイントを検出することによって顔の五官のエリアを確定するとともに特徴を抽出することに用いられるクラウド側顔キーポイント検出ユニットを含み、前記クラウド側顔キーポイント検出ユニットは、前記低解像度の画像を用い、抽出されたキーポイント座標が前記クライアント側にフィードバックされるとともに美顔アルゴリズムに伝送される。

【0013】

さらに、前記顔検出ユニットは、前記元画像と前記美化処理ユニットにより美化された画像とが同じ人であるかを判定することに用いられるクラウド側顔検証ユニットを含み、前記クラウド側顔検証ユニットが前記元画像と前記美化された画像との類似度が低すぎ、且つシステムデフォルトの類似度閾値より低いと判定すると、前記美化処理ユニットは再び美化処理を行う。類似度は、美顔のパラメーターが課題に調整されると低くなる。またシステムデフォルトの類似度閾値は、例えば０．４であるとする。

【0014】

さらに、前記美化処理ユニットは顔の美しさの予測アルゴリズムを用いて前記顔画像の美しさを予備判断し、顔の美しさを表す予備判断の点数を取得し、前記予備判断の点数が１００点制を採用し、１点から１００点まで分けられ、１点と評価する場合に最も醜いことを示し、１００点と評価する場合に最も美しいことを示し、点数が高いほど美しさが高く、点数が低いほど美しさが低いことを示す。顔の美しさの予測アルゴリズムは、例えば「深層学習」に基づく。

【0015】

さらに、前記美化処理ユニットは五官の美しさの予測を含み、前記五官の美しさの予測は、顔面偏差値の予測のもとに、五官の美しさの予測アルゴリズムによって、抽出された顔の特徴と顔における６８個のキーポイントに基づいて顔の五官の輪郭を抽出するとともに、五官の美しさの予備判断を行い、前記五官の美しさの予備判断が１００点制を採用し、１点から１００点まで分けられ、１点と評価する場合に最も醜いことを示し、１００点と評価する場合に最も美しいことを示し、点数が高いほど美しさが高く、点数が低いほど美しさが低いことを示す。ここで、顔の五官における目、眉、口、鼻のみを選択して評価する。

【0016】

さらに、前記美化処理ユニットは、顔の美しさのデータベースを含み、前記顔の美しさのデータベースには、アジアの各主要国と地域の人の顔の構造及び輪郭、五官の分布、肌の色、肌理の細かさ、男性の顔の美しさの標準テンプレート、女性の顔の美しさの標準テンプレート、男性の五官の美しさの標準テンプレート及び女性の五官の美しさの標準テンプレートなどのデータが記憶され、顔の美しさを予測し評価する従来の知識として、異なる地域の顔画像のトレーニングに基づく多数の予測モデルがデータベースに記憶される。

【0017】

さらに、前記美化処理ユニットは、美化実施ユニットと自動美化ユニットとを含み、前記美化実施ユニットは、前記顔の美しさのデータベースから美しさの標準モデルを選択するように美顔アルゴリズムを指導し、前記自動美化ユニットが美化実施方法に基づいて顔の五官をスムーズに調整することを自動的に実現するとともに、顔の表面の従来のテクスチャを変更しない。

【0018】

さらに、本発明に係るインターネットに基づく美顔システムは、ユーザ登録、ログインと個人化アプリ設置機能を含み、顔識別技術と指紋識別技術によりソフトウェアアカウントのログインとメンテナンスを実現するソフトウェア基本機能ユニットと、第三者のソーシャルメディアアカウントによりログインして即時にチャットする機能を含み、ネットワークで友達を作る、チャットする、及び他のユーザを親友として追加することに用いられ、グループ分け管理モードを採用し、システム情報とユーザの個人のウェブスペースにおけるネットフレンドによる評価情報を受信する即時通信ユニットと、個人ホームページとＥＸＥウェブアルバムの表示を含み、個人化空間装飾、文字入力、ＥＸＥウェブアルバムのオートプレイを行うことができ、オンラインでＥＸＥウェブアルバムを作るとともに、オンラインでダウンロードできる機能を有する個人ホームページユニットとを備える。

【発明の効果】

【0019】

本発明はインターネットプラットフォームで「深層学習」に基づく顔の美化を実現し、クライアント側でユーザの顔画像を採集するとともに圧縮処理を行った後に、インターネットを介してサーバにアップロードし、サーバで顔の検出、顔の検証、顔のキーポイントの検出と美顔アルゴリズム処理を行い、これによって、携帯電話の性能が劣るために深層学習ネットワークを適用できない弊害を避ける。

【0020】

同時に、顔の美しさの予測と顔の美化を合わせ、美しさの予測を完成するとともに、ユーザが設定した関連パラメーターに基づいて、システムにより改善方法が自動的に薦められ、擬似などの画像処理技術と深層学習、多様体学習などの機械学習アルゴリズムにより顔形状、五官の一部がスムーズに調整され、これによって、より高い点数をとるように顔を変える。前記工程全体はシステムにより自動的に完成され、顔の一部のみをスムーズに調整し、画像全体に影響を与えることなく、処理が完成した後に、処理の痕跡を残すことがない。

【0021】

本発明は一つのソフトウェアとして、インターネットと生体認証技術を合わせることを実現し、知能的に且つ全自動的に処理する機能を有し、画像の処理速度と美化の品質を向上させることができる。

【図面の簡単な説明】

【0022】

【図1】本発明に係るシステムのブロック図である。

【図2】本発明に示す画像の美化のフローチャートである。

【発明を実施するための形態】

【0023】

以下、本発明が解決しようとする技術問題、技術方案及び有益な効果をさらにわかりやすくするために、実施例を参照しつつ本発明を詳細に説明する。ここで述べた具体的な実施例は本発明を解釈するだけに用いられ、本発明を限定するものではない。

【0024】

本出願の実施例には、携帯端末における美顔アプリに適用されるインターネットに基づくシステムが提供され、この美顔アプリは画像の撮像とビデオの録画、画像及びビデオの記憶、クラウド側での顔検出、クラウド側での顔キーポイント検出、クラウド側での顔検証、クラウド側での顔面偏差値の予測、クラウド側での五官の美しさの予測、顔の美しさのデータベース、顔の美化方法と顔の自動美化、即時チャットと個人のウェブスペースに関する機能を含み、前記美顔アプリはさらにソフトウェア登録、ログインと個人化アプリ設置機能を含む。

【0025】

ソフトウェアが起動された後、システムのログイン及び登録のページが開かれる。このソフトウェアを初めて使用する場合に、登録してからシステムにログインする必要がある。システムにログインしない場合、システムのいずれの機能も使用できない。ソフトウェアは、第三者のソーシャルメディアアカウントによる登録とログインも可能である。通常は電話番号により登録するが、電子メールにより登録してもよい。登録が成功してシステムにログインした後、設置ページでソフトウェアのＰＩＮコード、図形パスワード、指紋識別と顔識別のログイン方法を設置することができ、ソフトウェアがログインしたアカウントとパスワードを自動的に記録する。

【0026】

さらに、ソフトウェアの一部の機能は、「深層学習」技術により開発されたアルゴリズムによって実現される。携帯電話の性能が劣るため、携帯電話は深層学習ネットワークを適用できない。ソフトウェアでは、クラウド側サーバに顔検出、顔検証、顔キーポイント検出と美顔アルゴリズムが配置され、クライアント（携帯電話）側で画像を採集するとともに、アルゴリズムが予備のＡＰＩインタフェースを応用して画像をクラウド側サーバに伝送してアルゴリズム処理を行い、アルゴリズム処理の終了を検出した後、サーバから結果をクライアント側にフィードバックするとともにクライアント側で表示させる。アルゴリズムがサーバで実現され、画像のアップロード及びダウンロードの工程に係わるため、好ましいネットワーク状態はソフトウェアのユーザ体験を向上させることにとって重要である。

【0027】

さらに、クライアント側で画像を採集してサーバにアップロードした後に、サーバで「深層学習」に基づく顔検出アルゴリズムによって顔検出が行われ、顔を検出できた場合に、アルゴリズムにより顔のＲＯＩ（Region Of Interest）座標をフィードバックし、且つサーバからクライアント側にフィードバックし、クライアント側で描画アルゴリズムを応用し、画像において赤枠で顔のエリアを示す。顔を検出できなかった場合は、システムからエラーメッセージをフィードバックし、画像を取り替えて再びテストを行うようユーザに要求する。顔検出アルゴリズムにより顔が検出されたと同時に、顔における６８個のキーポイントも検出される。サーバは、検出された情報をクライアント側にフィードバックするとともに、他のアルゴリズムに伝送する。顔を美化する段階で、クライアント側にフィードバックされた６８個のキーポイントは顔画像に表示されない。キーポイントを確認する場合は、ソフトウェアの設置ページに対応する機能を起動する必要がある。

【0028】

さらに、「深層学習」に基づく顔検出アルゴリズムにより顔と６８個のキーポイントが検出された後に、画像処理技術によって顔の五官のエリアを分割し、五官の具体的な位置とエリアを位置決めする。ユーザが提供した画像パラメーター、例えば出身地、性別、年齢などに基づいて、システムによりデータベースから対応するエリア、性別と年齢段階がトレーニング済みの「深層学習」に基づく美しさモデルが抽出され、顔の美しさの予測と五官の美しさの予測が行われる。ユーザが個人の画像パラメーターを提供しない場合、システムは通常性別と年齢のテストを行うとともに、パブリックトレーニングモデルを応用してファズテストを行う。異なる国と地域の人において、顔立ちと美的理念には相違があるため、ファジィアルゴリズムにより予測される美しさの結果に大きな偏差が存在する可能性がある。これによってシステムがその後に提供する美化方法が適合しない可能性がある。例えばウイグル人の五官の美化方法を江蘇省及び浙江省の人に薦めてしまう可能性がある。

【0029】

さらに、システムにより顔と五官の美しさが予備判断された後に、情報はクライアント側にフィードバックされるとともにクライアント側のスクリーンに表示される。顔と五官の美しさの予備判断は、１００点制の点数を採用する。そのうち、１点が最も醜いことを示し、１００点が最も美しいことを示し、点数が高いほど美しさが高く、点数が低いほど美しさが低いことを示す。ユーザは、美しさの点数を受けた後、システムが設定されたパラメーターに基づき自動的に改善モデルを選択するとともに参照用の改善方法を提供するように、美顔のパラメーター、例えば所要の美しさの点数、所要の年齢段階などを設定することができる。システムは、ユーザが提出したパラメーターを得た後に、美しさ解析データベースにおける美しさモデルを応用し、多様体学習方法、深層学習及び画像処理における疑似変換技術により、五官を設定された美しさモデルにマッピングする。また深層学習方法により光の輝度などの細部を組み合わせ、これによって処理後の顔における器官と顔との完璧な組み合わせを実現する。ユーザはパラメーターを設置しなくてもよく、アルゴリズムが標準化処理を行い、標準な美しさに達していない五官に対して微調整を行うとしてもよい。

【0030】

さらに、画像美化処理が行われた後、「深層学習」に基づく顔検証アルゴリズムは、美化処理された画像と元画像とが同じ人の画像であるかを判定する。顔検証アルゴリズムは、類似度により検証を行う。顔の五官が調整された後に、顔の特徴的な細部が変化し、抽出された特徴点を再びテストすると相違がある。そのため、顔検証アルゴリズムが同じ人であるか否かの判定結果を直接与えず、類似度の判定を与える。類似度は１００点制を採用し、０点から１００点まで分けられ、そのうち、０点が完全に異なることを示し、１００点が完全に同じことを示し、点数が高いほど類似度が高く、点数が低いほど類似度が低いことを示す。システムには顔の類似度の閾値、即ち０．４が設置され、画像処理が行われた後、類似度がこの値より低いと、再び美化処理を行う。この閾値はシステムの設置ページにおいて修正されてもよい。ソフトウェアには顔検証機能も設置され、ユーザが二枚の画像を同時にアップロードして検証することができ、この時に、システム処理が行われた後、同じ人である又は同じ人ではないとの判定結果が与えられる。

【0031】

さらに、ユーザは自分の元画像と美化処理された画像とをソフトウェアパブリックプラットフォームにアップロードして表示させ、ほかのユーザによる採点を受け付けることができる。採点システムには１点から１０点までの点数が設定され、そのうち、１点が最も醜いことを示し、１０点が最も美しいことを示し、点数が高いほど美しさが高く、点数が低いほど美しさが低いことを示す。ネットフレンドは、採点すると同時に、システムに設定された顔の美しさの判定に関する問題を答えることもでき、画像の下にコメントすることもできる。システムは、ユーザに参考させるように、ネットフレンドの関与状況、採点した点数に基づいて、点数統計ヒストグラム、顔面偏差値の平均値と点数の分散を計算し、これによって採点の有効性を考察する。ユーザはほかのユーザとのＰＫに参加することもでき、応援の形で、限られた時間に応援数が多いほうが勝ち、且つより高水準のＰＫ戦に突入する。

【0032】

さらに、ユーザは自分の個人スペースに画像、ビデオとＥＸＥ（実行ファイル）形式の電子アルバムをアップロードすることができる。電子アルバムは、オンライン作成とローカルアップロードができる。オンラインで作成される電子アルバムはダウンロードできる。個人スペースのアルバムにおける画像は、顔面偏差値の採点と美化処理をバッチ式で行うことができ、ユーザは採点の痕跡を残すか否かを選択できる。

【0033】

さらに、ユーザの間で便利にコミュニケーションをとれるように、ソフトウェアには即時チャット機能が設定される。ユーザからパブリックプラットフォームにアップロードされ、投票及び採点を受ける画像により、新たな投票とコメントが受信された後、投票情報とコメント情報がシステムによってチャットエリアに転送され、ユーザはいつでも関連するコンサルティング情報を取得することができる。

【0034】

さらに、投稿資格と書き込み資格の審査はソフトウェアの使用を規則的にするために用いられる。礼儀正しい発言を提唱し、国家の利益と他人の合法的権益を損なう言論の発表を禁止する。第三者のアルゴリズムにより検出し、ソフトウェアの使用規則に違反する言論が発見された場合には、事態の厳しさに基づいて、削除及び発言禁止など処置を行う。

【0035】

以上は本発明の好ましい実施例に過ぎず、本発明を限定するものではなく、本発明の原則と精神を逸脱しない範囲で行われた全ての修正、均等の置き換え、改善などはいずれも本発明の保護範囲に含まれるものとする。

【図1】

【図2】