特表 2021-518626 多重検出を伴う拡張現実に基づく衣服の仮想試着のための方法およびデバイス

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】特表2021-518626(P2021-518626A)

(43)【公表日】2021年8月2日

(54)【発明の名称】多重検出を伴う拡張現実に基づく衣服の仮想試着のための方法およびデバイス

(51)【国際特許分類】

   G06T 19/00 20110101AFI20210705BHJP

   G06F 3/14 20060101ALI20210705BHJP

   G06F 3/0488 20130101ALI20210705BHJP

   G06F 3/0484 20130101ALI20210705BHJP

【ＦＩ】

   G06T19/00 600

   G06F3/14 310A

   G06F3/0488

   G06F3/0484 150

【審査請求】有

【予備審査請求】未請求

【全頁数】16

(21)【出願番号】特願2021-503221(P2021-503221)

(86)(22)【出願日】2019年3月28日

(85)【翻訳文提出日】2020年11月17日

(86)【国際出願番号】IB2019052547

(87)【国際公開番号】WO2019193467

(87)【国際公開日】20191010

(31)【優先権主張番号】15/946,073

(32)【優先日】2018年4月5日

(33)【優先権主張国】US

(81)【指定国】 AP(BW,GH,GM,KE,LR,LS,MW,MZ,NA,RW,SD,SL,ST,SZ,TZ,UG,ZM,ZW),EA(AM,AZ,BY,KG,KZ,RU,TJ,TM),EP(AL,AT,BE,BG,CH,CY,CZ,DE,DK,EE,ES,FI,FR,GB,GR,HR,HU,IE,IS,IT,LT,LU,LV,MC,MK,MT,NL,NO,PL,PT,RO,RS,SE,SI,SK,SM,TR),OA(BF,BJ,CF,CG,CI,CM,GA,GN,GQ,GW,KM,ML,MR,NE,SN,TD,TG),AE,AG,AL,AM,AO,AT,AU,AZ,BA,BB,BG,BH,BN,BR,BW,BY,BZ,CA,CH,CL,CN,CO,CR,CU,CZ,DE,DJ,DK,DM,DO,DZ,EC,EE,EG,ES,FI,GB,GD,GE,GH,GM,GT,HN,HR,HU,ID,IL,IN,IR,IS,JO,JP,KE,KG,KH,KN,KP,KR,KW,KZ,LA,LC,LK,LR,LS,LU,LY,MA,MD,ME,MG,MK,MN,MW,MX,MY,MZ,NA,NG,NI,NO,NZ,OM,PA,PE,PG,PH,PL,PT,QA,RO,RS,RU,RW,SA,SC,SD,SE,SG,SK,SL,SM,ST,SV,SY,TH,TJ,TM,TN,TR,TT

(71)【出願人】

【識別番号】520384703

【氏名又は名称】ページ インターナショナル エフゼッド エルエルシー

【氏名又は名称原語表記】ＰＡＧＥ ＩＮＴＥＲＮＡＴＩＯＮＡＬ ＦＺ ＬＬＣ

(74)【代理人】

【識別番号】100080447

【弁理士】

【氏名又は名称】太田 恵一

(72)【発明者】

【氏名】アラヤ ジレイリヤ モハメッド

(72)【発明者】

【氏名】コヴァセヴィチ，ミシェル

【テーマコード（参考）】

5B050

5B069

5E555

【Ｆターム（参考）】

5B050BA07

5B050BA12

5B050CA07

5B050DA01

5B050EA05

5B050EA12

5B050EA19

5B069AA14

5B069BA03

5E555AA25

5E555AA76

5E555AA79

5E555BA04

5E555BA70

5E555BB04

5E555BC08

5E555CA42

5E555CB45

5E555CC23

5E555CC26

5E555CC27

5E555DB53

5E555DC09

5E555DC19

5E555DC21

5E555DC24

5E555DC25

5E555DC60

5E555DD06

5E555EA11

5E555EA22

5E555FA00

(57)【要約】

拡張現実に基づく衣服（９）の仮想試着のための方法で、ａ）電子デバイス（１）の前に位置する少なくとも２人の人物（５、６）を検出するステップ、ｂ）人物（５、６）各人を表わすデータを定義するステップ、ｃ）人物（５、６）各人の位置を定義するステップ、ｄ）人物（５、６）各人の画像上に衣服（９）の画像を重ね合わせるステップ、ｅ）人物が動く間、人物（５、６）各人の画像上への衣服（９）の画像の重ね合わせを維持するステップ。ステップａ）〜ｅ）は、人物（５、６）の数と同じ回数だけ反復される。ステップｄ）の前に、衣服（９）の画像上にモチーフ（７）の画像を重ね合わせるステップ。
【選択図】図１

【特許請求の範囲】

【請求項1】

少なくとも１つのスクリーン（２）および１つの画像取得機構（３）が備わった電子通信デバイス（１）を用いた拡張現実に基づく衣服（９〜９Ｄ）の仮想試着のための方法において、
ａ） 前記電子通信デバイス（１）の前に位置する少なくとも２人の人物（５〜５Ｄ、６）の少なくとも顔面（１１〜１１Ｄ）および肩（１６）を、前記画像取得機構（３）で検出するステップと、
ｂ） ステップａ）において検出された前記人物（５〜５Ｄ、６）各人の前記顔面（１１〜１１Ｄ）および肩（１６）の形状および寸法を表わすデジタルデータを定義するステップと、
ｃ） ステップｂ）において定義された前記データに基づいて、前記電子通信デバイス（１）のスクリーン（２）上で前記人物（５〜５Ｄ、６）各人の前記顔面（１１〜１１Ｄ）および肩（１６）の位置を表わすデジタルデータを定義するステップと、
ｄ） 前記電子通信デバイス（１）の前記スクリーン（２）上でデータマッピングにより、ステップｂ）およびｃ）で定義された前記デジタルデータを用いて前記人物（５〜５Ｄ、６）各人の画像上にデータベースからの衣服（９〜９Ｄ）の画像を重ね合わせるステップと、
ｅ） 前記電子通信デバイス（１）の前記スクリーン（２）上で、前記電子通信デバイス（１）の前記画像取得機構（３）の検出フィールド内で前記人物が動く間、前記人物（５〜５Ｄ、６）各人の前記画像上への前記衣服（９〜９Ｄ）の前記画像の重ね合わせを維持するステップと、
を含み、ここで
− ステップａ）〜ｅ）は、前記電子通信デバイス（１）の前記画像取得機構（３）の前に位置する人物（５〜５Ｄ、６）の数と同じ回数だけ反復され、ステップｄ）の前に、データベース（８）からのグラフィックモチーフ（７）の画像を前記衣服（９〜９Ｄ）の前記画像上に重ね合わせマージすることを伴う少なくとも１つの追加ステップｆ）が行なわれる、
方法。

【請求項2】

グラフィックモチーフ（７）が所与の衣服（９〜９Ｄ）上で、印刷表面を境界画定する仮想フレームとの関係における前記グラフィックモチーフのサイズ（Ｓ）、前記グラフィックモチーフの位置（Ｐ）および前記グラフィックモチーフ（７）の回転（Ｒ）を考慮に入れて、場所変数（ＳＰＲ）と結び付けられた識別変数（ＤＶ）によって定義される、請求項１に記載の方法。

【請求項3】

前記グラフィックモチーフ（７）の変数（ＳＰＲ）および（ＤＶ）を、衣服（９〜９Ｄ）を特徴づける変数（ＡＢ１）と結び付けることによって、前記衣服（９〜９Ｄ）上の前記グラフィックモチーフ（７）の前記マージを表わす変数（ＧＦ）を定義する、請求項２に記載の方法。

【請求項4】

ステップｅ）およびｆ）において、各人物（５〜５Ｄ、６）上でグラフィックモチーフ（７）と前記衣服（９〜９Ｄ）の画像を重ね合わせるために前記変数（ＧＦ）を使用する、請求項３に記載の方法。

【請求項5】

前記電子通信デバイスが、スマートフォン（１）、タブレット、ラップトップ型またはデスクトップ型コンピュータ、マルチメディアタッチスクリーンまたはスクリーンを備えたロボットの中から選択される、請求項１に記載の方法。

【請求項6】

前記画像取得機構（３）が、固定画像取得機構または動画像取得機構の中から選択される、請求項１に記載の方法。

【請求項7】

ステップｆ）中、前記グラフィックモチーフ（７）が、データベース（８）内に記憶された描画、絵画または写真の中から選択される、請求項１に記載の方法。

【請求項8】

ステップｆ）中、前記データベース（８）が、前記電子通信デバイス（１）から遠隔であり、クラウドホストされている、請求項７に記載の方法。

【請求項9】

ステップｆ）中、前記データベース（８）が前記電子通信デバイス（１）によってホストされている、請求項７に記載の方法。

【請求項10】

ステップｆ）中、データベース（８）中に記憶された前記グラフィックモチーフ（７）が前記方法のユーザによって提供される、請求項７に記載の方法。

【請求項11】

ステップｆ）中、データベース中に記憶された前記グラフィックモチーフ（７）が、前記データベース（８）に対して制限されたアクセスしか有さない第３者により提供される、請求項７に記載の方法。

【請求項12】

ステップｆ）中、前記グラフィックモチーフ（７）を提供する第３者についての追加情報が、前記グラフィックモチーフ（７）と結び付けられる、請求項７に記載の方法。

【請求項13】

前記追加情報が、前記第３者の地理位置情報、専用サイトへのインターネットリンクである、請求項１２に記載の方法。

【請求項14】

少なくとも１つの電子通信デバイス（１）、グラフィックモチーフ（７）のデータベース（８）、および衣服（９〜９Ｄ）の画像のデータベース（１０）を含む、請求項１に記載の方法を用いる衣服（９〜９Ｄ）の仮想試着デバイス。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、多重検出を伴う拡張現実に基づく衣服の仮想試着のための方法およびデバイスに関する。

【背景技術】

【0002】

ここ数年間、シャツ、Ｔシャツ、ズボンまたはメガネや帽子または縁なし帽などの付属品のいずれであれ、衣服の仮想試着のために拡張現実を使用することが知られてきている。この場合、ユーザは、カメラが接続されたＰＣタイプのコンピュータまたは通常は専用であるコンピュータデバイスを用いて、自身の画像上に衣服を仮想的に重ね合わせ、スクリーン上に結果を表示することができる。通常、これらのデバイスは、機材の観点から見て比較的重く、異なる姿勢でおよび／または運動中の状態でユーザを表示することを可能にしない。

【0003】

近年、使用するデバイスをより軽量にすることを目的とした技術的改良が出現している。こうして、米国特許出願公開第２０１７／００１８０２４号は、スマートフォンまたはタブレットなどの無線移動体デバイスを用いた拡張現実による仮想試着方法を開示している。この方法は、人物の顔面、次に肩および首を検出して、この人物の上半身の形状をモデリングし、シャツまたはＴシャツなどの衣服をこの静的形状の上に重ね合わせる。

【0004】

該方法は、追跡によって人物の動きをたどり、こうして衣服の動きを人物の動きに適応させることを可能にする。あらゆる場合において、人物の画像上に重ね合わされる衣服は、所与の数の衣服を伴う定義済みのデータベースから引き出される。実際、ユーザは、デバイスの提供者によって提供される多少の差こそあれ大量の衣服コレクションから１つの衣服を選択する。したがってユーザは、選択された衣服をパーソナライズすることができない。さらに、この方法では、１人の人物上に１つの衣服の１つの画像しか重ね合わせることができない。

【発明の概要】

【発明が解決しようとする課題】

【0005】

以上のことは、実装が容易でありながら、かつさまざまな形態の複数のユーザにより、仮想的かつ同時に試着されるべき衣服のパーソナライゼーションの可能性を提供する方法およびデバイスを提案することによって、本発明がより特定的に克服しようとする欠点である。

【課題を解決するための手段】

【0006】

この目的で、本発明の主題は、少なくとも１つのスクリーンおよび１つの画像取得機構が備わった電子通信デバイスを用いた拡張現実に基づく衣服の仮想試着のための方法において、
ａ） 電子通信デバイスの前に位置する少なくとも２人の人物の少なくとも顔面および肩を、画像取得機構で検出するステップと、
ｂ） ステップａ）において検出された人物各人の顔面および肩の形状および寸法を表わすデジタルデータを定義するステップと、
ｃ） ステップｂ）において定義されたデータに基づいて、電子通信デバイスのスクリーン上で人物各人の顔面および肩の位置を表わすデジタルデータを定義するステップと、
ｄ） 電子通信デバイスのスクリーン上でデータマッピングにより、ステップｂ）およびｃ）で定義されたデジタルデータを用いて人物各人の画像上にデータベースからの衣服の画像を重ね合わせるステップと、
ｅ） 電子通信デバイスのスクリーン上で、電子通信デバイスの画像取得機構の検出フィールド内で人物が動く間、人物各人の画像上への衣服の画像の重ね合わせを維持するステップと、
を少なくとも含み、ここで
− ステップａ）〜ｅ）は、電子通信デバイスの画像取得機構の前に位置する人物の数と同じ回数だけ反復され、ステップｄ）の前に、データベースからのグラフィックモチーフの画像を衣服の画像上に重ね合わせマージすることを伴う少なくとも１つの追加ステップｆ）が行なわれる、
方法に関する。

【0007】

したがって、人物が電子通信デバイスのビデオ画像取得機構の前に位置していることを条件として、２人以上の人物のために本発明を使用することが可能であり、ここで、該取得機構は、例えばスチルカメラまたはビデオカメラは固定画像または動画像を取得するように適応しているということが理解される。人物の多重検出は、これらの人物が大人および／または子供のいずれであっても、人物が単独であるか１つの群の中にいるかに関わらず各人物の画像上に衣服を仮想的に重ね合わせることを可能にする。本発明は、方法のステップを規則的に反復することによって、他の人物との関係における各人物の相対的位置の如何に関わらず、画像取得機構の視界内の人物の動きのみならず、画像取得機構の視界内の所与の瞬間において目に見える人物の数をも管理することを可能にする。

【0008】

その上、試着すべき衣服は、ステップｆ）中にデータベースから所与のグラフィックモチーフを重ね合わせることによってパーソナライズされ得る。こうして、本発明の使用中における広範囲にわたるパーソナライゼーションの可能性が利用可能となる。

【0009】

本発明の有利な、ただし強制的でない態様によると、このような方法は、以下のステップのうちの一つ以上を含むことができる。
− グラフィックモチーフが所与の衣服上で、印刷表面を境界画定する仮想フレームとの関係におけるグラフィックモチーフのサイズ（Ｓ）、グラフィックモチーフの位置（Ｐ）およびグラフィックモチーフの回転（Ｒ）を考慮に入れて、場所変数（ＳＰＲ）と結び付けられた識別変数（ＤＶ）によって定義される。
− グラフィックモチーフの変数（ＳＰＲ）および（ＤＶ）を、衣服を特徴づける変数と結び付けることによって、衣服上のグラフィックモチーフのマージを表わす変数（ＧＦ）を定義する。
− ステップｅ）およびｆ）において、各人物上でグラフィックモチーフと衣服の画像を重ね合わせるために変数（ＧＦ）を使用する。
− 電子通信デバイスは、スマートフォン、タブレット、ラップトップ型またはデスクトップ型コンピュータ、マルチメディアタッチスクリーンまたはスクリーンを備えたロボットの中から選択される。
− 画像取得機構は、固定画像取得機構または動画像取得機構の中から選択される。
− ステップｆ）中、グラフィックモチーフは、データベース内に記憶された描画、絵画または写真の中から選択される。
− ステップｆ）中、データベースは、電子通信デバイスから遠隔であり、クラウドホストされている。
− ステップｆ）中、データベースは、電子通信デバイスによってホストされている。
− ステップｆ）中、データベース中に記憶されたグラフィックモチーフは、方法のユーザによって提供される。
− ステップｆ）中、データベース中に記憶されたグラフィックモチーフは、データベースに対して制限されたアクセスしか有さない第３者により提供される。
− ステップｆ）中、グラフィックモチーフを提供する第３者についての追加情報は、グラフィックモチーフと結び付けられる。
− 追加情報は、第３者の地理位置情報、または専用サイトへのインターネットリンクである。

【0010】

本発明は同様に、少なくとも１つの電子通信デバイス、グラフィックモチーフのデータベースおよび衣服の画像のデータベースを含む、前述のステップのうちの１つに係る方法を用いる衣服の仮想試着デバイスにも関する。

【0011】

添付図面を参照しながら、非限定的な例として示されている本発明の複数の実施形態についての以下の説明から、本発明およびそのさらなる利点をより良く、より明確に理解できるものである。

【図面の簡単な説明】

【0012】

【図1】本発明の一実施形態に係る方法の異なるステップを示す概略図である。

【図2】図１に表わされた方法のステップａ）を示す斜視図である。

【図3】ステップｂ）およびｃ）を示す、図２と類似の図である。

【図4】一人の人物を伴う、ステップｄ）およびｅ）を完遂した時点での移動体電子デバイスのスクリーンを示す。

【図5】複数の人物を伴う、ステップｄ）およびｅ）を完遂した時点での移動体電子デバイスのスクリーンを示す。

【発明を実施するための形態】

【0013】

図１は、本発明の一実施形態に係る方法の複数のステップの実装の概略図である。ここで方法は、スマートフォンタイプの電子通信デバイス１を用いて示されている。一変形形態として、タブレット、ラップトップ型またはデスクトップ型コンピュータ、マルチメディアタッチスクリーン、スクリーンを備えたロボット、または任意の他の有線または無線電子通信デバイスを使用することができる。これ以降、読み易さのために、スマートフォンおよび電子通信デバイスという表現は、互換的に使用されるものとする。

【0014】

スマートフォン１には少なくとも１つのスクリーン２および少なくとも１つのビデオ画像取得機構３が具備されている。ここで、スクリーン２はタッチスクリーンである。変形形態として、非タッチスクリーンを使用することができる。別の実施形態において、スクリーンはフレキシブルタイプのスクリーンである。典型的には、スマートフォン１の場合、画像取得機構は、スマートフォン１に組み込まれたカメラである。このようなカメラは、写真を撮影しビデオシーケンスを生成することができるように適応されている。換言すると、画像取得機構３は、固定画像または動画像を取得するように適応されている。別の実施形態において、機構３は、夜間画像、赤外線画像さらには熱画像さえも取得するように適応されていることが分かるであろう。以下では、読み易さのため、カメラなる用語は、固定画像または動画像の取得機構を描写するために使用されるものとする。

【0015】

カメラ３は、スクリーン２が取付けられた面とは反対側のスマートフォン１の面に位置設定されている。一変形形態として、これが、スマートフォン１に対する有線または無線接続によって接続された独立したカメラであることが分かるであろう。

【0016】

図１の左側に概略的に表わされているユーザ４は、スクリーン２に対面して身を置いており、この場合、カメラ３は、概略的に示されている２人の人物５および人物６に向けられている。

【0017】

カメラ３によって行なわれる画像取得から、人物が静止しているか運動中であるかに関わらず、スマートフォン１のスクリーン２上に人物５、人物６の上半身を位置できるようにする特性が定義される。運動は、通常の歩行ペースでの人物５、人物６の動きを意味し、こうして、６ｋｍ／時の速度を超えるあらゆる運動、つまり、速い速度で歩いているまたは走っている人物は除外される。

【0018】

人物５および人物６の上半身の特性および位置に関する詳細を捕捉およびエンコードした後、ユーザは、データベース８のグラフィックモチーフ７を選択する。ここで「グラフィックモチーフ」なる表現は、絵画、描画、ロゴまたは写真のいずれであれ、かつ文字および／または番号を含め、示された対象の如何に関わらず、カラーまたは白黒のあらゆるモチーフを意味する。これらの異なるタイプのモチーフを共に組合わせることが可能であり、例えば成句または表現を形成する文字と描画を組合わせることができるということが分かるであろう。したがって、広義では、これは、美的および装飾的機能を有する図形的または絵画的表現に関する。

【0019】

図１では、データベース８は、スマートフォン１とは独立したエンティティとして示されている。換言すると、このデータベースは、スマートフォン１から遠隔のサーバ上、有利にはクラウドコンピューティング内または外部ストレージディスク上でホストされ得る。データベース８と電子通信デバイス１間のデータ交換は、無線または非無線で、例えばＷｉＦｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）他によって行なわれる。

【0020】

変形形態として、データベースは、電子通信デバイス１内、例えばＳＤまたはマイクロＳＤメモリカード上、さらにはスマートフォン１の内部メモリ内でさえホストされる。例えば、グラフィックモチーフ７がスマートフォン１のカメラ３で撮られその中に記憶された写真である場合がそれである。したがって、ユーザ４自身が、データベース８にグラフィックモチーフ７を投入することができる。本発明によると、ユーザは、スマートフォン１内に記憶されたデータベースから選択されたモチーフに対して、テキスト、数字他を追加することができる。

【0021】

選択されたグラフィックモチーフ７は、データベース１０中に記憶された衣服９の画像上に重ね合わせられマージされる。ここで、衣服なる用語は、縁なし帽または帽子などの付属品を含め、衣服のタイプ（シャツ、Ｔシャツ、スウェットシャツ、セータなど）、布地材料の如何に関わらず、広義でとらえられなければならない。読み易さのために、Ｔシャツの例が以下で説明されるものとする。

【0022】

ここで、データベース１０も同様に、スマートフォン１から遠隔であり、この場合、ベース８とスマートフォン１の間の接続と類似の手法で、有線または無線接続でこのスマートフォン１に接続される。

【0023】

別の実施形態では、データベース８およびデータベース１０は組み合わされかつ／または遠隔サーバ上でホストされる。衣服９のモチーフ７を選択した後、本発明が網羅する方法は、これら２つのマージ画像を、スマートフォン１のスクリーン上の人物５、人物６の画像上に重ね合わせることを可能にする。この重ね合わせは、人物がカメラ３の視界内にいることを条件として、一方または両方の人物５、人物６が動く間も持続する。同様にして、人物がカメラ３の視界から出た場合、本発明が網羅する方法は、他方の人物の画像に影響を及ぼすことなく、スクリーン２からその人物の画像を消去することを可能にする。新たな人物がカメラ３の視界内に入った場合、またはカメラ３の視界を離れた人物が再び視界内に戻った場合、この人物は、該方法によって考慮され、この人物の画像は、選択された衣服およびモチーフと共にスクリーン２上に現われる。

【0024】

該方法の異なるステップについてここで、図２〜５を参照しながらより詳細に説明する。

【0025】

図２は、読み易さのために、人物５は一人だけで、該方法のステップａ）およびｂ）を示す。第１に、人物５は、この場合はスチルカメラ３であるビデオカメラのレンズの前に自らを位置付けなければならない。姿勢は、一定の制約条件を順守していなければならない。したがって人物５の上半身、少なくとも顔面１１および胴１２、腹部に至るまでは、カメラ３の視界内に見えなくてはならない。明らかに、人物５の身体の他の部分、例えば脚１３も、カメラ３の視界内に見えることが可能である。人物５は、カメラ３に対面して自らを位置付けなくてはならない。このステップ中、人物は、静止はしていなくても、少なくとも６ｋｍ／時前後の速度を超えないペースで、すなわちいわゆる通常の歩行ペースで動いている状態にとどまらなくてはならない。

【0026】

ひとたび人物５が位置したならば、その顔面１１は、例えばグーグルによって開発されたＧｏｏｇｌｅ Ｃｌｏｕｄ Ｖｉｓｉｏｎ ＡＰＩソフトウェアなどの公知のコンピュータ手段により検出される。ソフトウェアが顔面を全く検出しない場合、ソフトウェアは、人物の顔面１１が検出されるまでサーチし続ける。このソフトウェアは、デジタル画像、写真またはビデオ内で人間の顔面の自動位置特定を保証するということを覚えておきたい。位置特定は、顔面の所与のサイズおよび配向と結び付けられる。ひとたび顔面１１が検出されたならば、出願人が開発したアプリケーションは、顔面１１内の特異点をサーチする。例えば、左右の眼または鼻である。この任意のステップは、ひとたび顔面１１が全体として検出された時点で行なわれる。実際、注視点のサーチは、比較的長く、したがって、デフォルトによるルーティンとして行なわれない。いずれの場合でも、顔面１１の形状およびサイズに関係する情報は、アプリケーションにより、Ａ１と呼ばれる数値変数の形で記録される。

【0027】

図３で示されているように、スクリーン２上の顔面１１の位置ならびにスクリーン２のサイズとの関係におけるそのサイズ、ひいてはスクリーン２との関係における顔面１１の寸法を定義する比率は、顔面１１の形状および寸法を定義する変数Ａ１と結び付けられながら３本の軸ＸＹＺに沿って予め収集されアプリケーションによって記録された、ＡＡ１として公知の、位置特定特性に基づいて決定される。

【0028】

顔面１１を検出するために使用されるソフトウェアは、人物の胴１２の残りの部分の検出を可能にしない。検出エリアは、下部で顎１４により制限される。ここで、衣服を仮想試着できるためには、人物の胴１２を検出することが必要である。このために、出願人は、当該方法の範囲内で、人物の首１５の長さ、その肩１６の幅および両肩間の距離を、スクリーン上の人物の肩１６の位置と結び付けて考慮するソフトウェアを開発した。このために、該方法は、背景画像そして次にこの画像内に存在する任意の他の要素を、人物の身体の一部とみなすことによって記録する。記憶された画像上で、首１５の長さを考慮に入れて、顔面１１の顎１４と肩１６の間の空間について測定が行なわれる。こうして、人物の胴１２の開始場所を演繹することが可能である。出願人により提供され専用データベース内に記憶された統計に基づいて、該方法は、人物が顔面、首または胴に目立った奇形を有さず、人物の形態が衣服のサイズを定義するのに使用される通常の規格内に入ることを条件として、人物の顔面および首の寸法をその胴の寸法と結び付ける。

【0029】

この情報は、数値変数の形で、変数Ａ１およびＡＡ１と組合わされる。こうして、人物５の胴１２の寸法および位置が知られる。ひとたびこのステップｃ）が完了したならば、次にステップｄ）において衣服は重ね合わされる。このために、公知の寸法および形状の一定数の衣服９が、排他的ではないものの有利にはスマートフォン１内にホストされているデータベース１０中に記憶されている。ここで、衣服９は、ＸＳ、Ｓ、Ｍ、Ｌ、ＸＬおよびＸＸＬという文字によって表示される標準的な公知のサイズのＴシャツである。これらのＴシャツ９は、各サイズについて少なくとも１つの色で記憶される。各々のＴシャツ９は、スクリーン２上のその位置を定義することになる２つの軸に沿ったその座標およびその寸法を考慮に入れて、数値変数ＡＢ１によって定義される。ここで衣服９は平担なオブジェクトであることから、３本の軸に沿った位置付けを必要とする体積オブジェクトである顔面１１とは異なり、２本の軸に沿ったその位置を定義するだけで十分である。

【0030】

変数Ａ１、ＡＡ１およびＡＢ１を組合わせることによって、人物５の胴１２上の衣服９の最適な重ね合わせが、公知の手法で保証される。この段階において、追加ステップｆ）がすでに行なわれているか、あるいはここで実施される。

【0031】

このステップｆ）には、先に定義済みのグラフィックモチーフ７を、衣服９上に重ね合わせるステップ、より厳密にはマージするステップを伴う。グラフィックモチーフ７は、スマートフォン１に内蔵されたデータベース８から、または典型的にはサーバによりホストされる遠隔データベースから、またはスマートフォンの外部に位置設定されているもののユーザによって管理されているデータベースから来ている。いずれの場合でも、モチーフは、ユーザ自身によってかまたは第３者によって提供され得る。モチーフは、例えば写真、会社、協会またはスポーツクラブのロゴ、描画またはアーチストの絵画であってよい。該方法の使用に先立ち、例えば絵画作品を提供したアーチストによってデータベース８が増加され得るということは容易に理解できる。この場合、ユーザは、ベース８から直接モチーフを選択する。一変形形態として、ユーザは自ら個人的なグラフィックモチーフ、例えば自らが創作した写真または絵画作品を導入することができる。

【0032】

同様にして、モチーフ７を供給した第３者についての追加の情報をモチーフと結び付けることができる。これは、例えば、第３者の地理位置情報、そのウェブサイト、伝記的情報、第３者にリンクされたイベントダイアリに対するアクセス、またはモチーフおよび／またはモチーフの第３者のクリエータに関する他の任意の情報であり得る。

【0033】

各モチーフ７は、ＤＶという名の識別変数によって識別される。モチーフ７は、２次元オブジェクトであり、ベクトルの形で、つまり２つのＸ、ＹまたはＺ軸に沿ったその空間座標で、データベース８上に記憶される、有利には、このモチーフは、サーバ上に ．ＥＰＳフォーマットで記憶される。サーバは同様に、ユーザが自らのスマートフォン上で使用できる少なくとも１つの形態を有するように少なくとも１つの他の形態、例えば ．ＰＮＧフォーマットでファイルを記憶する。

【0034】

サーバが管理するデータベース８内でユーザがモチーフ７を選択する場合、モチーフの著作者が許可しかつ／または著作権および美術創作品の権利に関する現行の法律を遵守していることを条件として、ユーザは、モチーフの色を変更し、モチーフを回転させ、それを拡大または縮小し、モチーフの一部上でズームし、それを複製し、テキストまたはサーバが許可した他の任意の修正を追加する可能性を有する。

【0035】

所与の衣服９に対する印刷上の制約条件によって定義される仮想フレームが、印刷エリアを具体化し、したがって、最適な印象を得るために、選択されたモチーフ７が上に印刷される衣服９の表面を境界画定する。仮想フレームは、２本の軸Ｘ、ＹまたはＺに沿ったその空間座標によりサーバによって識別される。

【0036】

読み易さのためにさまざまな図の中に示されていないこのフレームは、二次フレームが最大寸法の仮想フレームの一部であることを条件として、同一の形状を有するかまたは有していない複数の二次フレームへと分割され得る。ユーザは、1つ以上のコピー中で、選択されたモチーフ７を単数または複数のこのフレーム内に位置付けすることができる。

【0037】

選択されたモチーフ７の座標ならびにそれに対する何らかの変更は、ＳＰＲ（サイズ、位置、回転）と名付けられた一時的場所変数として、サーバ内に記憶される。この変数中、パラメータＳ（サイズ）は、仮想フレームの最大エリアとの関係におけるモチーフ７の表面の百分率として与えられる。パラメータＲ（回転）は、Ｚ軸に沿った数値であり、パラメータＰ（位置）は、Ｘ、ＹまたはＺ軸のうちの２本に沿った値である。モチーフ７がサーバにより管理される非データベースに由来する場合、ＳＰＲ一時的変数は、いかなる修正も含まず、モチーフの初期パラメータのみを含むことが考えられる。

【0038】

ユーザが、「拡張現実」モードに切換えるかまたはモチーフを自らのバスケット内にセーブするかのいずれかによって、修正の有無にかかわらず自らのモチーフ選択を有効化した時点で、サーバは、モチーフ７に関係する全てのパラメータ、つまり識別変数ＤＶおよび場所変数ＳＰＲを、衣服９ひいては衣服を定義する変数ＡＢ１、および衣服９上の印刷フレームの座標に結び付ける。

【0039】

このとき、ＧＦ（大域融合）と呼ばれる大域変数が得られる。この変数ＧＦに対して、それ自体公知である融合アルゴリズム、例えばＩｍａｇｅＭａｇｉｃｋ（登録商標）ソフトウェアが応用される。

【0040】

これにより、一時的かつ汎用のブランクファイルが作成され、サイズおよび特性は予め定義され、サーバにより記憶されている。モチーフに関するデータ（ＤＶおよびＳＰＲ変数）および衣服に関するデータ（変数ＡＢ１）を含むこのソースファイルは、異なる用途のために使用可能な異なるフォーマットへと分解され得るように、ベクトルの形で記憶される。これらには、例えば、ユーザのスマートフォン上でのビューイングのための ．ＰＮＧフォーマットファイル、ウェブページディスプレイ用の ．ＪＰＧフォーマットファイルまたは、印刷用の ．ＰＤＦファイルが含まれる。

【0041】

変数ＧＦによって、モチーフ７および衣服９は単一の画像であるものとみなされる。このとき、先に説明した通り、変数Ａ１、ＡＡ１およびＧＦを組合わせて、衣服９が人物５の胴１２に重ね合わされている状態で、衣服９上へのモチーフ７の最適な重ね合わせを、それ自体公知の手法で、保証することが可能である。また２つの明確に異なる画像（衣服およびモチーフ）の変位は人物の変位に関係付けされるのではなく、事実上、一人の人物の変位との関係における一画像（モチーフと結び付けられた衣服）の変位に関係付けされる。

【0042】

ＧＦ変数は、速度および流動性の観点から見た人物の追跡を容易にする。追跡の計算時間は半分になり、こうして、メモリおよびエネルギーの観点から見た消費量の低減が誘発される。

【0043】

この画像融合ひいては変数ＧＦは、人数の追跡の流動性、速度、および適応可能性を保ちながら、人物の多重検出を容易にし、最適化する。

【0044】

図５は、人物の多重検出を示す。このためには顔面１１を検出するステップａ）において、本発明によって網羅されている方法は、顔面１１がすでに検出されている場合でも、顔面の継続的サーチを可能にする。この継続的サーチは、カメラ３の視界に入る全ての新しい顔面１１Ａ〜１１Ｄの検出を可能にする。ひとたびこの他の顔面１１Ａ〜１１Ｄが検出されたならば、アプリケーションはそれに対して、最初の顔面の場合と同様に、３本の軸に沿った位置付けおよび寸法設定の数値的変数を割り当てる。この第２の顔面１１Ａ〜１１Ｄに結び付けられた肩ひいては胴の検出および特徴付けに関する同じステップが行なわれる。そうすることにより、スクリーン２上に見える人物５〜５Ｄは、その位置および／または数が変動するか否かとは関わりなく、継続的にモデリングされる。こうして、検出された人物５〜５Ｄの各々について、モチーフ７と結び付けられた衣服９〜９Ｄを重ね合わせることが可能である。実際、ステップａ）は、停止命令無く継続的に行なわれ、検出された要素は記憶される。検出された新たな顔面は全て、変数の集積を定義し、すでに検出された顔面についてすでに収集された変数のベースに追加する。

【0045】

第１の実施形態によると、全ての検出された人物５〜５Ｄは、仮想的に、同じグラフィックモチーフ７を伴う同じ衣服９〜９Ｄを着用している。一変形形態として、各々の検出された人物５〜５Ｄには、色、形状および選択されたグラフィックモチーフすべてに関して、他の人物５〜５Ｄとは異なっていてよいパーソナライズされた衣服９〜９Ｄが提供される。このために、人物５〜５Ｄ、衣服９〜９Ｄおよびグラフィックモチーフ７を定義する変数の結び付けは個別化される。

【0046】

いずれの場合でも、本発明により網羅されている方法は、人物が運動中であるときでさえ、検出された人物５〜５Ｄの形態に適応されたサイズの衣服９〜９Ｄの継続的重ね合わせを可能にする。換言すると、カメラ３の視界内に子供または大人が出現した場合、衣服９〜９Ｄが小さ過ぎるまたは大き過ぎる視覚的効果を与えないように、人物５〜５Ｄのための正しいサイズの衣服の重ね合わせが自動的に行われることになる。いずれの場合でも、ユーザは、本発明により、自らのシルエット上に衣服を仮想的にディスプレーするだけでなく、グラフィックモチーフで衣服をパーソナライズすることもできる。

【0047】

示されていない他の実施形態において、サポートは、例えば縁なし帽、帽子、スカーフまたはバッグなどの付属品であることが理解されるであろう。ユーザにとって試着が満足のいくものである場合、ユーザは公知の方法で、選択されたグラフィックモチーフ７を伴う衣服９を注文できるということが理解されるであろう。このために、グラフィックモチーフ７を定義する変数ＤＶおよびＳＰＲならびに衣服９を定義する変数ＡＢ１を含むファイルが、衣服上にモチーフを適用する目的で提供者に対し送付される。これは、例えば、衣服上でフロック加工、スクリーン印刷、レーザーエッチングまたは刺繍を行なう提供者であり得る。

【符号の説明】

【0048】

１ 電子通信デバイス（スマートフォン）
２ スクリーン
３ ビデオ画像取得機構（カメラ）
４ ユーザ
５ 人物
６ 人物
７ グラフィックモチーフ
８ データベース
９ 衣服（Ｔシャツ）
１０ データベース
１１ 顔面
１２ 胴
１３ 脚
１４ 顎
１５ 首
１６ 肩

【図1】

【図2】

【図3】

【図4】

【図5】

【国際調査報告】