特許 7470999 情報処理装置、情報処理方法及び情報処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-04-11

(45)【発行日】2024-04-19

(54)【発明の名称】情報処理装置、情報処理方法及び情報処理プログラム

(51)【国際特許分類】

   G06Q 30/0601 20230101AFI20240412BHJP

【ＦＩ】

G06Q30/0601 322

G06Q30/0601 340

【請求項の数】 10

(21)【出願番号】P 2021210315

(22)【出願日】2021-12-24

(65)【公開番号】P2023094801

(43)【公開日】2023-07-06

【審査請求日】2024-01-11

【早期審査対象出願】

(73)【特許権者】

【識別番号】517369896

【氏名又は名称】ＥｎｃｏｄｅＲｉｎｇ株式会社

(74)【代理人】

【識別番号】100185270

【弁理士】

【氏名又は名称】原田 貴史

(74)【代理人】

【識別番号】100225347

【弁理士】

【氏名又は名称】鬼澤 正徳

(72)【発明者】

【氏名】角村 嘉信

【審査官】大野 朋也

(56)【参考文献】

【文献】特許第６６５６５７２（ＪＰ，Ｂ１）

【文献】韓国公開特許第１０－２０２０－００４７２４０（ＫＲ，Ａ）

【文献】米国特許出願公開第２００８／０１６３３４４（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０１８／０３５７７０２（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０１４／０１６８２１７（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

(57)【特許請求の範囲】

【請求項1】

ユーザが目視できる表示部を有するユーザ端末に対して、ネットワークを介して接続される情報処理装置において、
前記ユーザが身体の一部に装着できる装身具に関する商品情報を前記ネットワークへ提供する情報提供部と、
前記ユーザが選択した前記装身具の商品情報、及び前記身体の一部を撮影した映像の情報を、前記ネットワークを介して取得する情報取得部と、
前記身体の一部の映像、前記身体の一部に対応する骨格のフレーム及び前記ユーザが選択した前記装身具を含む試着映像を生成する映像生成部と、
前記映像生成部が生成した前記試着映像を前記表示部で表示できるように、前記ネットワークへ提供する試着映像提供部と、
を有する、情報処理装置。

【請求項2】

請求項１記載の情報処理装置において、
前記身体の一部は上肢であり、
前記装身具は、前記上肢に装着されるリング形状を有し、
前記試着映像は、前記装身具が装着される固定位置を含む、情報処理装置。

【請求項3】

請求項２記載の情報処理装置において、
前記上肢は、前記ユーザの手、及び前記手につながる前腕を含み、
前記映像生成部は、
前記手の指の爪に基づいて前記手の表側部と裏側部とを識別する処理と、
前記表側部及び前記裏側部に対応させて、前記装身具の円周方向の位置を固定して前記試着映像を生成する処理と、
を行う、情報処理装置。

【請求項4】

請求項３記載の情報処理装置において、
前記装身具は、前記手の指に装着されるリングであり、
前記映像生成部は、前記リングに設けられた装飾部が、前記表側部に対応する位置に表示されるように、前記指に対する前記リングの円周方向の位置を固定して前記試着映像を生成する、情報処理装置。

【請求項5】

請求項２記載の情報処理装置において、
前記上肢は、前記ユーザの手、及び前記手につながる前腕を含み、
前記装身具は、前記前腕に装着されるブレスレットを含む、情報処理装置。

【請求項6】

請求項１乃至５の何れか１項記載の情報処理装置において、
前記映像生成部は、
前記身体の一部の映像における鉛直方向を識別する処理と、
前記装身具が自重で前記鉛直方向に垂れ下がった状態で前記試着映像を生成する処理と、
を行う、情報処理装置。

【請求項7】

請求項２または３記載の情報処理装置において、
前記上肢は、前記ユーザの手、及び前記手につながる前腕を含み、
前記装身具は、前記前腕に装着される腕時計を含む、情報処理装置。

【請求項8】

請求項１乃至７の何れか１項記載の情報処理装置において、
前記装身具は、透過映像として表示される、情報処理装置。

【請求項9】

ユーザが目視できる表示部を有するユーザ端末に対して、ネットワークを介して接続される情報処理装置が、
前記ユーザが身体の一部に装着できる装身具に関する商品情報を前記ネットワークへ提供する第１ステップと、
前記ユーザが選択した前記装身具の商品情報、及び前記身体の一部を撮影した映像の情報を、前記ネットワークを介して取得する第２ステップと、
前記身体の一部の映像、前記身体の一部に対応する骨格のフレーム及び前記ユーザが選択した前記装身具を含む試着映像を生成する第３ステップと、
前記第３ステップで生成された前記試着映像を前記表示部で表示できるように、前記ネットワークへ提供する第４ステップと、
を実行する、情報処理方法。

【請求項10】

ユーザが目視できる表示部を有するユーザ端末に対して、ネットワークを介して接続される情報処理装置に、
前記ユーザが身体の一部に装着できる装身具に関する商品情報を前記ネットワークへ提供する第１処理と、
前記ユーザが選択した前記装身具の商品情報、及び前記ユーザの身体の一部を撮影した映像の情報を、前記ネットワークを介してを取得する第２処理と、
前記身体の一部の映像、前記身体の一部に対応する骨格のフレーム及び前記ユーザが選択した前記装身具を含む試着映像を生成する第３処理と、
前記第３処理で生成された前記試着映像を前記表示部で表示できるように、前記ネットワークへ提供する第４処理と、
を実行させる、情報処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、身体の一部及び装身具を含む映像を、ネットワークを介してユーザ端末に提供する情報処理装置、情報処理方法及び情報処理プログラムに関する。

【背景技術】

【0002】

身体の一部及び装身具を含む映像を、ネットワークを介してユーザ端末に提供する情報処理装置の一例が、特許文献１に記載されている。特許文献１には、商品の閲覧、試着、購入などの各種サービスを提供する商品サーバと、商品サーバにネットワークを介して接続されるユーザ端末と、が記載されている。商品サーバは、例えばリング（指輪）などの商品の値段やサイズなどの商品に関する情報である商品情報と、商品の３次元画像データとを保存する。ユーザは、ユーザ端末は、商品サーバから商品に関する情報を取得して、Ｗｅｂブラウザ上で試着サービスを実行できる。

【0003】

ユーザ端末には、Ｗｅｂページが表示され、商品サイト上で商品「リング」が選択され、かつ、商品ページ上で「試着」ボタンが選択されると、表示中の商品「リング」の３次元画像データを画像データから取得して、３次元画像データを用いて試着を行うための試着ページが表示される。したがって、恋人同士で婚約リングを検討する際に、ユーザ端末を用いて、商品サーバが提供する試着サービスを利用することにより、様々なブランドの婚約リングの試着をリビングで繰り返すことができ、ユーザが店舗に行く前に、リングの購入対象を絞り込むこともできる、とされている。

【先行技術文献】

【特許文献】

【0004】

【文献】特許第６６５６５７２号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

本願発明者は、特許文献１に記載されている情報処理装置では、身体の一部の骨格を考慮した装身具の装着位置を確認できない、という課題を認識した。

【0006】

本開示の目的は、身体の一部の骨格を考慮した装身具の装着位置を確認する映像を、ネットワークに提供することのできる情報処理装置、情報処理方法及び情報処理プログラムを提供することにある。

【課題を解決するための手段】

【0007】

本開示は、ユーザが目視できる表示部を有するユーザ端末に対して、ネットワークを介して接続される情報処理装置において、前記ユーザが身体の一部に装着できる装身具に関する商品情報を前記ネットワークへ提供する情報提供部と、前記ユーザが選択した前記装身具の商品情報、及び前記ユーザの身体の一部を撮影した映像の情報を、前記ネットワークを介して取得する情報取得部と、前記身体の一部の映像、前記身体の一部に対応する骨格のフレーム及び前記ユーザが選択した前記装身具を含む試着映像を生成する映像生成部と、前記映像生成部が生成した前記試着映像を前記表示部で表示できるように、前記ネットワークへ提供する試着映像提供部と、を有する。

【発明の効果】

【0008】

本開示によれば、ユーザの身体の一部の映像、骨格のフレーム及び装身具を含む試着映像がネットワークへ提供される。したがって、ユーザは、ユーザ端末をネットワークに接続して表示部に試着映像を表示させ、身体の一部の骨格を考慮した装身具の装着位置を確認することができる。

【図面の簡単な説明】

【0009】

【図1】本開示の情報処理システムの概念図である。

【図2】情報処理システムで行われる処理例を示すフローチャートである。

【図3】（Ａ），（Ｂ），（Ｃ）は、ユーザ端末の表示部の遷移を示す模式図である。

【図4】商品サーバで生成され、かつ、ユーザ端末の表示部に表示される映像情報の一例を示す模式図ある。

【図5】（Ａ）は、ブレスレットを前腕に装着した試着映像の模式図、（Ｂ）は、腕時計を前腕に装着した試着情報の模式図である。

【発明を実施するための形態】

【0010】

以下、図面に基づいて、本開示の実施形態を説明する。以下の実施形態の構成は例示であり、本開示は実施形態の内容に限定されない。

【0011】

（概要）
図１のように、本開示の情報処理システム１０では、商品サーバ１１とユーザ端末１２とがネットワーク１３を介して通信可能に接続される。商品サーバ１１は、装身具を販売するための仮想店舗をネットワーク１３上に提供する。ユーザ端末１２は、仮想店舗にアクセスして、装身具を身体の一部に装着する試着映像を入手できる。具体的には、ユーザ端末１２から、ユーザの身体の一部を撮影した映像情報をリアルタイムで商品サーバ１１へ送信する。商品サーバ１１は、映像情報を処理して試着映像を生成し、試着映像は、商品サーバ１１からネットワーク１３へ提供される。ユーザは、ユーザ端末１２を利用してネットワーク１３にアクセスし、試着情報を取得できる。

【0012】

（商品サーバ）
商品サーバ１１は、商品販売者により管理及び運営されるコンピュータであり、商品サーバ１１は、ネットワーク１３上に提供するウェブサイトにおいて、仮想店舗を構築する。商品サーバ１１は、仮想店舗を介して、ユーザ端末１２から装身具の注文を受けること、加工済みの装身具の展示及び販売すること、等を行う。商品サーバ１１は、制御部１４、記憶部１５、通信部１６を有する。制御部１４は、入力ポート、出力ポート及び演算処理回路を備えており、制御部１４は、情報提供部１７、情報取得部１８、映像生成部１９、決済処理部２１、ユーザ情報処理部２２等を構築する。

【0013】

情報提供部１７は、ユーザ端末１２から閲覧可能な商品情報を仮想店舗に提供する機能と、映像生成部１９で生成された試着映像をネットワーク１３へ提供する機能と、を有する。商品情報は、商品としてのリング（指輪）の種類、リングのサイズ及びデザイン、宝石の有無等を目視で確認できる映像の他、リングに使用される素材の種類、仕上げ加工の種類、リングのサイズ、リングの価格、リング毎に付された識別記号（商品番号）等を含む。情報取得部１８は、ユーザ端末１２からネットワーク１３を介して送られる指定情報及び試着情報を取得し、かつ、情報を処理する。指定情報は、リングを装着する指を指定する情報、及びリングを装着する指の位置を指定する情報を含む。

【0014】

試着情報は、リングの試着に際してユーザが指定する情報であり、リングの種類、リングのデザイン及びサイズ、リングの素材、リングの仕上げ加工の種類等の情報を含む。映像生成部１９は、ユーザ端末から送られてくる手の映像情報、指定情報及び試着情報に基づいて、商品サーバ１１からネットワーク１３へ提供する試着映像を生成する機能を有する。試着映像は、ユーザ端末１２からリアルタイムで送られる手の映像において、手の指に３次元のリングモデルを装着した映像である。決済処理部２１は、ユーザ端末１２からリングの購入注文があった場合に、その決済処理を行う。ユーザ情報処理部２２は、ユーザ端末１２から送られてくるユーザ情報を処理する。ユーザ情報は、ユーザの氏名、住所、電話番号、メールアドレス、ユーザＩＤ、パスワード、決済情報等の情報を含む。決済情報は、現金払いとクレジットカード払いとの区別、クレジットカード番号等の情報を含む。

【0015】

記憶部１５は、商品情報、指定情報、試着情報、映像情報、ユーザ情報等を記憶する機能を有する。また、記憶部１５には、情報提供部１７、情報取得部１８、映像生成部１９、決済処理部２１、ユーザ情報処理部２２等で行われる各種の処理、判断、制御等に用いられるプログラム、データ、画像、映像等が記憶されている。記憶部１５には、例えば、試着映像を生成するため、リングの既製品の映像データ、及びユーザ端末１２から送られてくるオリジナルのリングの映像データが記憶されている。この映像データは、３次元画像であり、リングの実物を撮影して得られた映像データ、仮想空間上で作成した映像データを含む。通信部１６は、制御部１４に通信可能に接続され、かつ、ネットワーク１３に通信可能に接続される。ネットワーク１３は、無線通信または有線通信の少なくとも一方により構築されている。

【0016】

（ユーザ端末）
ユーザがユーザ端末１２を操作し、かつ、ネットワーク１３を介して仮想店舗にアクセスすることができる。ユーザ端末１２は、ネットワーク１３を介して商品情報を取得すること、ネットワーク１３へ指定情報を送信すること、ネットワーク１３を介して試着映像を取得すること、ネットワーク１３へリングの変更依頼を出すこと、ネットワーク１３へリングの購入注文を送信すること、等を行う機能を有する。ユーザ端末１２は、固定型パーソナルコンピュータ、可搬型パーソナルコンピュータ、タブレット型端末、スマートフォン等のうちの何れでもよい。図１においては、便宜上、単数のユーザ端末１２がネットワーク１３に接続されているが、複数のユーザ端末１２がネットワーク１３に接続できる。

【0017】

ユーザ端末１２は、操作部２３、表示部２４、カメラ２５、記憶部２６、制御部２７及び通信部２８を有する。操作部２３は、ユーザがユーザ端末１２の操作、情報入力、作動、機能、制御等を選択、変更、切り替えるため等に操作される。ユーザ端末１２が固定型パーソナルコンピュータ、または、可搬型パーソナルコンピュータの何れかであると、操作部２３は、キーボード、マウス等を含む。表示部２４は、利用者が目視可能な構成を有し、表示部２４は、液晶ディスプレイ、発光ダイオードディスプレイ、プラズマディスプレイ等の何れでもよい。液晶ディスプレイは、タッチパネルであってもよい。タッチパネルは、静電容量方式、抵抗膜方式、赤外線方式の何れでもよい。なお、ユーザ端末１２が、ディスプレイを有するスマートフォンまたはタブレット端末である場合、ディスプレイは、操作部２３を兼ねる。

【0018】

さらに、表示部２４は、固定型パーソナルコンピュータ、スマートフォン、タブレット端末等に接続されたされたＶＲ（virtual reality）ゴーグルであってもよい。カメラ２５は、ユーザの手を撮影し、かつ、映像を信号化して出力する。記憶部２６は、ユーザ端末１２で行われる処理、判断、制御等に用いられるプログラム、データ等の情報が記憶されている。

【0019】

さらに、鉛直方向検出部８３は、カメラ２５の撮影される映像及び画像等の鉛直方向、つまり、重力の作用方向を検出及び認識できる。鉛直方向検出部８３は、一例として、重力加速度センサにより構成できる。ユーザ端末１２が、スマートフォンまたはタブレット端末のように、ユーザが手で持ち上げることができるものであると、ユーザ端末１２を構成するケーシングの内部、または、本体の内部に、鉛直方向検出部８３として重力加速度センサが設けられる。ユーザ端末１２が固定型パーソナルコンピュータであると、固定型コンピュータの本体部またはケーシングに対してカメラ２５が移動できるように接続され、鉛直方向検出部８３として重力加速度センサが、カメラ２５に設けられる。さらに、鉛直方向検出部８３は、カメラ２５で撮影される映像及び画像等に対し、操作部２３の操作によって鉛直方向を設定する演算処理を行う処理回路であってもよい。

【0020】

制御部２７は、入力ポート、出力ポート及び演算処理回路等を有する。ここで、制御部２７は、カメラ２５で撮影された映像、鉛直方向検出部８３の信号、記憶部２６に記憶されている情報に基づいて、カメラ２５で撮影された映像の鉛直方向を認識できる。制御部２７は、カメラ２５で撮影された映像を処理して記憶部２６に記憶する処理、カメラ２５で撮影された映像を通信部２８を介してネットワーク１３へ送る処理、を行う。

【0021】

また、制御部２７は、操作部２３を操作して入力される情報、指示、選択等の操作内容を処理して記憶部２６へ記憶させる機能を有する。さらに、制御部２７は、ネットワーク１３を介して通信部２８へ入力される商品情報及び試着映像を、記憶部２６に記憶させる。また、制御部２７は、ネットワーク１３を介して通信部２８へ入力される商品情報及び試着映像を、表示部２４で表示させる。通信部２８は、制御部２７に通信可能に接続され、かつ、ネットワーク１３に通信可能に接続される。

【0022】

（制御例）
次に、情報処理システム１０で行われる操作、処理、制御等の一例を、図２のフローチャートを参照して説明する。ステップＳ１０において、商品サーバ１１は、ネットワーク１３上の仮想店舗で商品情報を提供する。ステップＳ１１において、ユーザがユーザ端末１２を操作して仮想店舗にアクセスし、かつ、商品情報（リング情報）を取得する操作を行う。また、ステップＳ１１において、ユーザがユーザ端末１２を操作してユーザ情報を入力し、かつ、ユーザ情報をネットワーク１３へ送る操作を行うこともできる。

【0023】

ステップＳ１２において、商品サーバ１１は、ユーザ端末１２から商品情報を取得する要求を受けて、商品情報をネットワーク１３へ提供する。また、商品サーバ１１は、ネットワーク１３を介してユーザ情報を取得すると、ユーザ情報を記憶部１５に記憶すること、即ち、ユーザ登録の処理をおこなう。ステップＳ１３において、ユーザ端末１２は、図３（Ａ）のように、表示部２４で商品情報画面５０を表示させる。商品情報画面５０には、商品情報、つまり、複数のリングＲ１，Ｒ２，Ｒ３，Ｒ４の画像（映像）、識別番号を含む選択ボタン８５等が表示される。リングＲ１，Ｒ２，Ｒ３，Ｒ４の何れかには、装飾、例えば、宝石８０、彫刻８１等が施されている。

【0024】

ステップＳ１４において、商品情報画面５０に表示されるリングＲ１，Ｒ２，Ｒ３，Ｒ４の何れかに対応する選択ボタン８５をユーザが操作すると、図３（Ｂ）のように、表示部２４に入力画面５１が表示される。そして、ユーザがユーザ端末１２を操作して、リングの素材の種類、宝石の有無、仕上げ加工の種類、サイズ及びデザイン、価格等を指定する。入力画面５１に、操作ボタンとして、戻る６０、試着６１、購入６２が設けられている。戻る６０が操作されると、表示部２４に商品情報画面５０が表示され、購入６２が操作されると、表示部２４に決済画面（図示せず）が表示される。

【0025】

試着６１が操作されると、図３（Ｃ）に示す指定情報画面５２が、表示部２４に表示される。指定情報画面５２には、カメラ２５で撮影された上肢５３の映像５４が表示され、操作ボタンとして指６３及び装着位置６４が表示される。上肢５３は、手５３Ａ、及び手５３Ａにつながる前腕５３Ｂを含む。映像５４は、カメラ２５で撮影されたリアルタイム映像である。また、ユーザは、指６３ボタンを操作して、リングを装着する指を指定し、かつ、装着位置６４ボタンを操作して、リングを装着する指の位置を指定する。ステップＳ１５において、ユーザがユーザ端末１２を操作することにより、選択した試着情報、上肢５３の映像情報及び指定情報を、ユーザ端末１２からネットワーク１３へ送る。

【0026】

ステップＳ１６において、商品サーバ１１は、試着情報、上肢５３の映像情報、指定情報をネットワーク１３を介して取得し、記憶部１５に記憶する。ステップＳ１７において、商品サーバ１１は、ネットワーク１３を介して取得した試着情報、手の映像情報、及び指定情報を処理して、リングを手の指に装着した仮想オブジェクト、具体的には、「試着映像」を生成する。図４には、商品サーバ１１の映像生成部１９で生成される試着映像Ａ１の一例が示されている。ユーザ端末１２からリアルタイムで送られる上肢１１０の外観形状が示されている。上肢１１０は、手２９と、手２９に手首３０を介してつながった前腕９１と、を含む。手２９は、親指３１、人差し指３２、中指３３、小指４５を有する。具体的に説明すると、画像認識処理により、手首３０、親指３１、人差し指３２、中指３３、小指４５の外観形状が認識され、かつ、親指３１の爪３５Ｅ、人差し指３２の爪３６Ｅ、中指３３の爪３７Ｅ、薬指３４の爪３８Ｅ、小指４５の爪３９Ｅが認識される。

【0027】

また、親指３１、人差し指３２、中指３３、小指４５のそれぞれの外観形状、及びそれぞれの長さ、爪３５Ｅ，３６Ｅ，３７Ｅ，３８Ｅ，３９Ｅの位置により、手２９が右手か左手かが識別され、かつ、表側部（手の甲）７０と裏側部（手のひら）７１とが識別される。さらに、骨格認識処理により、骨格に対応するフレーム３５，３６，３７，３８，３９が認識され、かつ、手首３０及び各指３１，３２，３３，３４，４５の骨格に対応する位置に、フレーム３５，３６，３７，３８，３９がそれぞれ表示される。親指３１に対応するフレーム３５には、複数の関節、骨格の先端に対応する位置３５Ａ，３５Ｂ，３５Ｃ，３５Ｄがそれぞれ示される。人差し指３２に対応するフレーム３６には、複数の関節及び骨格の先端に対応する位置３６Ａ，３６Ｂ，３６Ｃ，３６Ｄがそれぞれ示される。

【0028】

中指３３に対応するフレーム３７には、複数の関節、骨格の先端に対応する位置３７Ａ，３７Ｂ，３７Ｃ，３７Ｄがそれぞれ示される。薬指３４に対応するフレーム３８には、複数の関節、骨格の先端に対応する位置３８Ａ，３８Ｂ，３８Ｃ，３８Ｄが表示され、かつ、関節同士の間にリング４０が装着される固定位置４０Ａがそれぞれ示される。固定位置４０Ａは、薬指３４の基節骨の長さ方向の略中央に相当する。ここで、リング４０は、リング形状（環状）であり、リング４０の円周方向の所定箇所には、図３（Ａ）を参照して説明した装飾、例えば、宝石８０または彫刻８１が施されている。このため、リング４０を薬指３４に装着した状態で、宝石８０または彫刻８１が、手２９の表側部７０に対応する位置に表示されるように、リング４０の円周方向の位置を薬指３４に対して固定して、試着映像Ａ１を生成する。小指４５に対応するフレーム３９には、複数の関節、骨格の先端に対応する位置３９Ａ，３９Ｂ，３９Ｃ，３９Ｄがそれぞれ示される。

【0029】

さらに、手首３０には、手根骨と、橈骨及び尺骨との接続箇所を示す基準位置３０Ａが示される。そして、基準位置３０Ａから、それぞれのフレーム３５，３６，３７，３８の端部が接続された状態で示される。商品サーバ１１で生成される試着映像Ａ１は、ユーザ端末１２から送られる上肢５３の映像５４を加工処理した３次元映像のリアルタイム映像である。つまり、３次元映像は、Ｘ軸、Ｙ軸、Ｚ軸の座標系において生成されている。

【0030】

ステップＳ１８において、商品サーバ１１は、生成した試着映像Ａ１をネットワーク１３へ提供する。ステップＳ１９において、ユーザ端末１２は、ネットワーク１３を介して試着映像Ａ１を受け取り、かつ、図４のように表示部２４へ試着映像Ａ１を表示させる。

【0031】

ステップＳ２０において、ユーザは、表示部２４を目視し、かつ、カメラ２５で撮影している自分の上肢５３を動かして試着映像Ａ１を検討する。試着映像Ａ１の手２９には、薬指３４にリング４０が装着されている。また、ユーザが、上肢５３の回転、手首の曲げ伸ばし、指の伸縮等を行うと、試着映像Ａ１の手２９も、３次元映像のＸ軸、Ｙ軸、Ｚ軸の座標系において動作する。また、上肢１１０の回転、手首３０の曲げ伸ばし、指の曲げ伸ばし、等の動作に追従して、骨格に対応するフレーム３５，３６，３７，３８は、各指の関節の位置を支点として動作する。上肢１１０の回転、手首３０の曲げ伸ばし、指の曲げ伸ばしが行われても、リング４０は、薬指３４の固定位置４０Ａに装着された状態が維持される。

【0032】

このため、ユーザは、手首３０を伸縮させたり、上肢１１０を回転させたり、各指の曲げ伸ばし等を行いながら、あたかもリング４０を薬指３４に装着しているかのようなシミュレーションを行うことができる。また、薬指３４の骨格に対応するフレーム３８及び関節の位置３８Ａ，３８Ｂが表示されるため、ユーザは、薬指３４の骨格に対するリング４０の正しい装着位置を認識できる。さらに、試着映像Ａ１において、ユーザの視点で指とリング４０とが重なる箇所では、リング２０を表す映像のメッシュが透過映像で表示され、リング４０の輪郭のみが表示される。したがって、指の手前にリング４０が表示されることを防止でき、実際の装着感に近いものになる。さらに、試着映像Ａ１に表示されるリング４０は、図３（Ａ）に示す装飾、例えば、宝石８０または彫刻８１が、図４で表側部７０に対応する位置に表示されるように、リング４０の円周方向の位置が、薬指３４に対して固定される。したがって、リング４０を薬指３４に装着する場合の装飾性を疑似体験できる。

【0033】

ステップＳ２１において、ユーザは、試着映像Ａ１のリング４０を購入するか、他のリングに変更するかを判断する。ユーザは、ステップＳ２１で他のリングに変更することを選択すると、ステップＳ２２に進む。ユーザは、ステップＳ２１で、そのリング４０を購入すると判断すると、ステップＳ２３に進む。

【0034】

ステップＳ２２において、ユーザは、表示部２４において、リングを変更する操作を行い、ステップＳ１４へ進む。ステップＳ２３において、ユーザが、ユーザ端末１２でリング購入の操作を行うと、表示部２４に決済画面が表示される。決済画面では、住所、氏名、電話番号、メールアドレス、決済方法、リングの受け取り方法を入力し、送信ボタンを操作する。ステップＳ２４において、商品サーバ１１は、ユーザ端末１２からリングの購入情報、及び決済情報を受信する。商品販売者は、ユーザから購入注文があったリングを作成し、そのリングをユーザに届ける処理を行う。

【0035】

なお、ステップＳ２０において、ユーザ端末１２の操作部２３を操作して、試着映像Ａ１を一時的に商品サーバ１１に保管できるようにしてもよい。この場合、ステップＳ１１でユーザ端末１２から再度、ネットワーク１３にアクセスした場合に、商品サーバ１１がステップＳ１２において、予め保管済の試着映像Ａ１をネットワーク１３経由でユーザ端末１２へ送ることができる。なお、このような処理を行う場合、ステップＳ１２でユーザ登録がおこなわれていることが前提である。そして、再度、ステップＳ１１でネットワーク１３へアクセスして、ユーザＩＤ、パスワードを入力することで、商品サーバ１１に保管されている試着映像Ａ１を、ステップＳ１３でユーザ端末１２が取得することができる。

【0036】

（他の装身具の例）
図５（Ａ）には、図２のステップＳ１７において、商品サーバ１１で生成される試着映像Ａ１に、リングに代えてブレスレット９０が含まれる例が示されている。手２９は手首３０を介して前腕９１に接続されている。前腕９１には、尺骨に対応する骨格のフレーム９２、及び橈骨に対応する骨格のフレーム９３が、基準位置３０Ａからそれぞれ延ばされた状態で表示される。試着映像Ａ１では、前腕９１には固定位置９４が示され、固定位置９４を囲むように、リング状のブレスレット９０が前腕９１に装着されている。ブレスレット９０における円周方向の所定箇所には、チャーム９５が取り付けられている。

【0037】

図２のステップＳ１９において、試着映像Ａ１が表示部２４に表示されると、ユーザは、ステップＳ２０において、カメラ２５で撮影される上肢５３を動かしながら、試着映像Ａ１を検討できる。また、前腕９１の骨格に対応するフレーム９２，９３、及び基準位置３０Ａが表示されるため、ユーザは、前腕９１の骨格に対するブレスレット９０の正しい装着位置を認識できる。さらに、ブレスレット９０を表す映像のメッシュが透明化して表示され、ブレスレット９０の輪郭のみが表示される。また、商品サーバ１１の映像生成部１９は、手２９の表側部７０と裏側部７１とを識別できるため、ブレスレット９０に装飾が施されている場合、装飾が表側部７０に対応して位置するように、ブレスレット９０の円周方向の位置を固定して試着映像Ａ１を生成できる。

【0038】

さらに、ユーザ端末１２から商品サーバ１１へ送られる上肢５３の映像情報には、鉛直方向を示す情報を含まれている。このため、映像生成部１９は、ユーザ端末１２から送られてくる映像において、鉛直方向を認識できる。そして、ブレスレット９０がチェーン等のように撓む構造または形状を有していると、前腕９１に装着されたブレスレット９０が自重で垂れ下がった状態になるように、映像生成部１９が物理演算を設定して試着映像Ａ１を生成する。同様に、チャーム９５が、ブレスレット９０から自重で垂れ下がった状態で、試着映像Ａ１が生成される。そして、カメラ２５で撮影される上肢５３の動きに追従して、前腕９１及び手首３０に対するブレスレット９０及びチャーム９５の垂れ下がり方向等が変化する。したがって、ユーザは表示部２４の試着映像Ａ１を目視することで、前腕９１に対しブレスレット９０を装着し、かつ、前腕９１を動かした場合の装飾性、ブレスレット９０及びチャーム９５と、衣服の袖との関連性等を疑似体験できる。

【0039】

図５（Ｂ）には、図２のステップＳ１７において、商品サーバ１１で生成される試着映像Ａ１に、リングに代えて腕時計１００が含まれる例が示されている。試着映像Ａ１では、前腕９１には固定位置９４が示され、固定位置９４を囲むように、リング状の腕時計１００が前腕９１に装着されている。腕時計１００は、前腕９１に巻かれるベルト部１０１と、ベルト部１０１に接続された時刻表示部１０２と、を有する。

【0040】

図２のステップＳ１９において、試着映像Ａ１が表示部２４に表示されると、ユーザは、ステップＳ２０において、カメラ２５で撮影される上肢５３を動かしながら、試着映像Ａ１を検討できる。また、前腕９１の骨格に対応するフレーム９２，９３、及び基準位置３０Ａが表示されるため、ユーザは、前腕９１の骨格に対する腕時計１００の正しい装着位置を認識できる。さらに、腕時計１００を表す映像のメッシュが透明化して表示され、腕時計１００の輪郭のみが表示される。また、商品サーバ１１の映像生成部１９は、手２９の表側部７０と裏側部７１とを識別できるため、腕時計１００の時刻表示部１０２が手２９の表側部７０に対応して位置するように、腕時計１００の円周方向の位置を固定して試着映像Ａ１を生成できる。

【0041】

（補足説明）
本実施形態で説明した事項の技術的意味の一例は、次の通りである。ユーザ端末１２は、ユーザ端末の一例であり、表示部２４は、表示部の一例である。商品サーバ１１は、情報処理装置の一例である。情報提供部１７は、商品情報提供部及び試着映像提供部の一例である。上肢１１０は、ユーザの身体の一部の一例である。手２９は、手の一例であり、前腕９１は、前腕の一例である。情報取得部１８は、情報取得部の一例である。フレーム３５，３６，３７，３８，３９は、フレームの一例である。リング４０、ブレスレット９０、腕時計１００は、装身具の一例である。試着映像Ａ１は、試着映像の一例である。映像生成部１９は、映像生成部の一例である。固定位置４０Ａ，９４は、固定位置の一例である。表側部７０は、手の表側部の一例であり、裏側部７１は、手の裏側部の一例である。宝石８０及び彫刻８１は、装飾部の一例である。

【0042】

図２のステップＳ１０は、第１ステップ及び第１処理の一例である。図２のステップＳ１６は、第２ステップ及び第２処理の一例である。図２のステップＳ１７は、第３ステップ及び第３処理の一例である。図２のステップＳ１８は、第４ステップ及び第４処理の一例である。図２に示すフローチャートは、情報処理方法の一例である。図２に示すフローチャートを実行するために商品サーバ１１の記憶部１５に記憶されるプログラムが、情報処理プログラムの一例である。

【0043】

本実施形態で説明した情報処理装置は、図面を用いて説明したものに限定されない。例えば身体の一部は、ユーザの足でもよく、装身具は、足に装着するアンクレットを含む。この場合、足の骨格に対応するフレームと、アンクレットの固定位置とが、試着映像に含まれる。情報処理装置で生成される試着映像は、リアルタイムの動画映像の他、静止画像でもよい。静止映像は、２次元映像または３次元映像の何れでもよい。情報処理装置としてのコンピュータは、サーバの他、ワークステーション、スーパーコンピュータ、メインフレーム等を含む。装身具を装着する手の指は、薬指に限らず、親指、人差し指、中指、小指でもよい。

【産業上の利用可能性】

【0044】

本開示の情報処理装置、情報処理方法及び情報処理プログラムは、ネットワーク上の仮想店舗において、ユーザが装身具を試着する環境で利用可能である。

【符号の説明】

【0045】

１１…商品サーバ、１２…ユーザ端末、１７…情報提供部、１８…情報取得部、１９…試着映像、２９…手、２４…表示部、３５，３６，３７，３８，３９…フレーム、４０…リング、４０Ａ，９４…固定位置、７０…表側部、７１…裏側部、８０…宝石、８１…彫刻、９０…ブレスレット、９１…前腕、１００…腕時計、１１０…上肢、Ａ１…試着映像

【図1】

【図2】

【図3】

【図4】

【図5】