7190785 情報処理装置及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2022-12-08

(45)【発行日】2022-12-16

(54)【発明の名称】情報処理装置及びプログラム

(51)【国際特許分類】

   G06T 19/20 20110101AFI20221209BHJP

【ＦＩ】

G06T19/20

【請求項の数】 10

(21)【出願番号】P 2022130143

(22)【出願日】2022-08-17

【審査請求日】2022-09-26

【新規性喪失の例外の表示】特許法第３０条第２項適用 令和４年４月１４日、ＳＮＳ（Ｔｗｉｔｔｅｒ， Ｉｎｃ．が提供するアプリケーション）にて発表

【新規性喪失の例外の表示】特許法第３０条第２項適用 令和４年４月２９日、ｈｔｔｐｓ：／／ｍｅｔａｐｙｌｏｎ．ｉｏ／にて発表

【新規性喪失の例外の表示】特許法第３０条第２項適用 令和４年４月２９日、ＳＮＳ（Ｔｗｉｔｔｅｒ， Ｉｎｃ．が提供するアプリケーション）にて発表

【新規性喪失の例外の表示】特許法第３０条第２項適用 令和４年４月１６日、顧客への送付資料により発表

【権利譲渡・実施許諾】特許権者において、実施許諾の用意がある。

【早期審査対象出願】

(73)【特許権者】

【識別番号】522328080

【氏名又は名称】株式会社ＷｏＯ

(74)【代理人】

【識別番号】110002871

【氏名又は名称】弁理士法人坂本国際特許商標事務所

(72)【発明者】

【氏名】佐藤 雅弘

【審査官】村松 貴士

(56)【参考文献】

【文献】特開２００１－３２５６１５（ＪＰ，Ａ）

【文献】“ＮＦＴコンテンツ制作者向けにオリジナルグッズ作成・販売機能提供開始”, [online]，2022年05月23日，[令和4年10月7日検索], インターネット<URL: https://suzuri.jp/surisurikun/journals/2022-05-20>

【文献】Benjamin，「Ｂｌｅｎｄｅｒ ２．７ ３ＤＣＧ スーパーテクニック」，初版，株式会社ソーテック社，2014年，p.136-139

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ １９／００ － １９／２０

Ｇ０６Ｆ ３０／００ － ３０／２８

Ｇ０６Ｑ ３０／００ － ３０／０８

Ｇ０６Ｑ ５０／００ － ５０／３４

(57)【特許請求の範囲】

【請求項1】

３Ｄオブジェクトを取得する３Ｄオブジェクト取得部と、
対応するメタデータに基づいて２Ｄ画像データを取得する画像データ取得部と、
前記３Ｄオブジェクトに基づく物体の表面に沿うように前記２Ｄ画像データに基づく画像が描画された前記物体の画像データを生成する画像データ生成部と、
前記画像データ生成部により前記物体の画像データが生成された場合に、前記物体の画像データの生成に利用された前記２Ｄ画像データに対して、その旨を表す所定情報を対応付けるデータ管理部とを備え、
前記データ管理部は、前記所定情報が対応付けられている前記２Ｄ画像データを利用した前記画像データ生成部による新たな前記物体の画像データの生成を禁止する、情報処理装置。

【請求項2】

前記２Ｄ画像データは、ＮＦＴとして発行された作品に関連する、請求項１に記載の情報処理装置。

【請求項3】

ユーザ入力を取得するユーザ入力取得部を更に備え、
前記画像データ生成部は、前記ユーザ入力に基づいて、前記表面上に描画された前記画像を削除可能であり、
前記データ管理部は、前記表面上に描画された前記画像が削除された場合に、削除された前記画像に係る前記２Ｄ画像データに対する前記所定情報の対応付け状態を解除する、請求項１に記載の情報処理装置。

【請求項4】

前記ユーザ入力取得部は、前記２Ｄ画像データに対応付けられている複数の２Ｄ画像の表示と、前記複数の２Ｄ画像の表示にそれぞれ対応付けられる選択ボタンとを含むユーザインタフェースを生成し、
前記ユーザ入力は、前記選択ボタンを介して取得される選択入力を含み、
前記画像データ生成部は、前記選択入力に対応した前記２Ｄ画像データを利用して前記物体の画像データを生成する、請求項３に記載の情報処理装置。

【請求項5】

前記ユーザ入力取得部は、前記所定情報が対応付けられている前記２Ｄ画像データに係る前記２Ｄ画像の表示と、前記所定情報が対応付けられていない前記２Ｄ画像データに係る前記２Ｄ画像の表示とを、識別可能な態様で表示する、請求項４に記載の情報処理装置。

【請求項6】

前記画像データ生成部により生成された前記画像データは、仮想空間内のオブジェクトの生成に利用可能である、請求項１に記載の情報処理装置。

【請求項7】

ユーザ入力を取得するユーザ入力取得部を更に備え、
前記画像データ生成部は、前記ユーザ入力に基づいて、前記表面上における前記画像の位置、向き及びサイズのうちの少なくともいずれか１つを変更可能である、請求項１に記載の情報処理装置。

【請求項8】

前記画像データ生成部は、一の前記物体に対して、複数の前記画像が重なる態様で描画された前記物体の画像データを生成可能である、請求項１に記載の情報処理装置。

【請求項9】

ユーザ入力を取得するユーザ入力取得部を更に備え、
前記画像データ生成部は、前記ユーザ入力に基づいて、複数の前記画像のうちの重なり合う画像間のレイヤーを変更可能である、請求項８に記載の情報処理装置。

【請求項10】

３Ｄオブジェクトを取得し、
対応するメタデータに基づいて２Ｄ画像データを取得し、
前記３Ｄオブジェクトに基づく物体の表面に沿うように前記２Ｄ画像データに基づく画像が描画された前記物体の画像データを生成し、
前記物体の画像データが生成された場合に、前記物体の画像データの生成に利用された前記２Ｄ画像データに対して、その旨を表す所定情報を対応付けるとともに、前記所定情報が対応付けられている前記２Ｄ画像データを利用した新たな前記物体の画像データの生成を禁止する処理を、コンピュータに実行させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、情報処理装置及びプログラムに関する。

【背景技術】

【0002】

３Ｄモデル化オブジェクトを表す細分割曲面上に２Ｄ画像に基づくエングレーブを形成する技術が知られている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１６－１５７４２９号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

上記のような従来技術は、量産を前提とした工業製品への適用に特化しており、２Ｄ画像と３Ｄ画像とを組み合わせた最終作品（３Ｄオブジェクトデータ）の芸術性やオリジナリティを高めることが難しい。

【0005】

そこで、本開示は、３Ｄオブジェクトに２Ｄ画像を適用した最終作品（３Ｄオブジェクトデータ）の芸術性やオリジナリティを高めることを目的とする。

【課題を解決するための手段】

【0006】

１つの側面では、３Ｄオブジェクトを取得する３Ｄオブジェクト取得部と、
対応するメタデータに基づいて２Ｄ画像データを取得する画像データ取得部と、
前記３Ｄオブジェクトに基づく物体の表面に沿うように前記２Ｄ画像データに基づく画像が描画された前記物体の画像データを生成する画像データ生成部とを備える、情報処理装置が提供される。

【発明の効果】

【0007】

本開示によれば、３Ｄオブジェクトに２Ｄ画像を適用した最終作品（３Ｄオブジェクトデータ）の芸術性やオリジナリティを高めることが可能となる。

【図面の簡単な説明】

【0008】

【図1】一実施例による情報処理システムの全体構成の概略図である。

【図2】情報処理サーバのハードウェア構成の一例を示す図である。

【図3】本実施例における新たな３Ｄオブジェクトが保存されるまでの処理の一例の流れを概略的に示すタイミングチャートである。

【図4】パイロンを模した３Ｄオブジェクトを示す説明図である。

【図5】選択ＵＩの一例を示す説明図である。

【図6】貼り付けＵＩの一例を示す説明図である。

【図7】貼り付け対象の２Ｄ画像の別の形態の説明図である。

【図8】３Ｄオブジェクトの表面上に複数の２Ｄ画像が貼り付けられた状態の一例を示す説明図である。

【図9】メタバース空間内に配置された３Ｄオブジェクト（複数の２Ｄ画像が貼り付けられた３Ｄオブジェクト）の一例を示す説明図である。

【図10】被貼り付け側の３Ｄオブジェクトの他の例を示す図である。

【図11】情報処理システムの機能の一例を示す概略的なブロック図である。

【図12】３Ｄオブジェクトに貼り付け可能な２Ｄ画像の販売形態の一例の説明図である。

【図13】結合画像データの生成方法の一例のフローチャートである。

【図14】ユーザ情報記憶部内のデータの一例の説明図である。

【発明を実施するための形態】

【0009】

以下、添付図面を参照しながら各実施例について詳細に説明する。

【0010】

なお、以下の説明において、「３Ｄ」や「２Ｄ」は、「３次元」や「２次元」に係るＤｉｍｅｎｓｉｏｎを表す。

【0011】

図１は、一実施例による情報処理システム１の全体構成の概略図である。

【0012】

情報処理システム１は、情報処理サーバ１００を含む。

【0013】

情報処理サーバ１００は、ネットワーク４を介して各ユーザ端末２１と通信可能である。すなわち、ユーザ端末２１及び情報処理サーバ１００は、ネットワーク４を介して接続される。以下では、特に言及しない限り、ユーザとは、ある１つ以上のユーザ端末２１に対応付けられた一のユーザを指す。

【0014】

ネットワーク４は、インターネット、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、無線通信網、有線ネットワーク、又はこれらの任意の組み合わせ等を含んでもよい。なお、ネットワーク４には、クラウドサーバ９１が接続されている。また、ネットワーク４の一部又は全部は、Ｐ２Ｐネットワークにより実現されてもよい。

【0015】

ユーザ端末２１は、例えばスマートフォンや携帯電話であるが、ウェアラブル端末（例えばスマートウォッチ、リング等）、タブレット端末、ラップトップ端末、デスクトップ端末等であってもよい。

【0016】

ユーザ端末２１は、表示部２４を備える。表示部２４は、液晶ディスプレイや、有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ等であってよい。

【0017】

情報処理サーバ１００は、サーバの形態であり、例えばサーバコンピュータにより形成される。情報処理サーバ１００は、複数のサーバコンピュータにより実現されてもよい。例えば、情報処理サーバ１００は、互いに異なる場所に配置された複数のサーバコンピュータが協動することで実現されてもよい。また、情報処理サーバ１００は、Ｗｅｂサーバを含んでよい。この場合、後述するユーザ端末２１の機能の一部は、Ｗｅｂサーバから受領したＨＴＭＬ文書やそれに付随する各種プログラム（Ｊａｖａｓｃｒｉｐｔ）をブラウザが処理することによって実現されてもよい。

【0018】

図２は、情報処理サーバ１００のハードウェア構成の一例を示す図である。なお、ユーザ端末２１のハードウェア構成自体は、表示部２４を備える以外は、情報処理サーバ１００のハードウェア構成と同様であってよい。ただし、情報処理サーバ１００については、表示部を有してもよい。

【0019】

図２に示す例では、情報処理サーバ１００は、制御部１０１、主記憶部１０２、補助記憶部１０３、ドライブ装置１０４、ネットワークＩ／Ｆ部１０６、及び入力部１０７を含む。

【0020】

制御部１０１は、主記憶部１０２や補助記憶部１０３に記憶されたプログラムを実行する演算装置であり、入力部１０７や記憶装置からデータを受け取り、演算、加工した上で、記憶装置などに出力する。

【0021】

主記憶部１０２は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などである。主記憶部１０２は、制御部１０１が実行する基本ソフトウェアであるＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）やアプリケーションソフトウェアなどのプログラムやデータを記憶又は一時保存する記憶装置である。

【0022】

補助記憶部１０３は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）やＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）などであり、アプリケーションソフトウェアなどに関連するデータを記憶する記憶装置である。

【0023】

ドライブ装置１０４は、記録媒体１０５、例えばフレキシブルディスクからプログラムを読み出し、記憶装置にインストールする。

【0024】

記録媒体１０５は、所定のプログラムを格納する。この記録媒体１０５に格納されたプログラムは、ドライブ装置１０４を介して情報処理サーバ１００にインストールされる。インストールされた所定のプログラムは、情報処理サーバ１００により実行可能となる。

【0025】

ネットワークＩ／Ｆ部１０６は、ネットワーク４を介して接続された通信機能を有する周辺機器やユーザ端末２１等と情報処理サーバ１００とのインターフェースである。

【0026】

入力部１０７は、カーソルキー、数字入力及び各種機能キー等を備えたキーボード、マウスやタッチパッド等を有する。

【0027】

なお、図２に示す例において、以下で説明する各種処理等は、プログラムを情報処理サーバ１００に実行させることで実現することができる。また、プログラムを記録媒体１０５に記録し、このプログラムが記録された記録媒体１０５を情報処理サーバ１００に読み取らせて、以下で説明する各種処理等を実現させることも可能である。なお、記録媒体１０５は、様々なタイプの記録媒体を用いることができる。例えば、記録媒体１０５は、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）－ＲＯＭ、フレキシブルディスク、光磁気ディスク等のように情報を光学的、電気的あるいは磁気的に記録する記録媒体、ＲＯＭ、フラッシュメモリ等のように情報を電気的に記録する半導体メモリ等であってよい。

【0028】

図３は、本実施例におけるユーザ端末２１、情報処理サーバ１００（図３では、「ブラウザ」と表記）、及びクラウドサーバ９１間での情報やデータのやり取りであって、新たな３Ｄオブジェクトが保存されるまでの処理の一例の流れを概略的に示すタイミングチャートである。図４～図８は、図３の説明図である。

【0029】

以下の図３に関する説明等において、特に言及しない限り、一のユーザに関する処理を説明するが、他のユーザに関する処理も同様である。また、以下の情報処理サーバ１００の機能は、ブラウザ上の専用エディタにより実現されてもよい。

【0030】

図３では、まず、ユーザは、ユーザ端末２１を利用して、サービス上から権利を購入する（ステップＳ３０）。なお、購入は、通常の決済態様で実現されてもよいし、スマートコントラクト等を介して実現されてもよい。なお、決済には、任意の通貨が利用されてよい。

【0031】

ステップＳ３０の権利購入に応答して、情報処理サーバ１００は、３Ｄオブジェクト（図３では、“オリジナル３Ｄ”と表記）をクラウドサーバ９１から取得する（読み込む）（ステップＳ３２、Ｓ３４）。この際、情報処理サーバ１００は、ユーザが閲覧できる態様で、取得した３Ｄオブジェクトを表示してよい（ステップＳ３６）。図４には、３Ｄオブジェクトの一例として、パイロンを模した３Ｄオブジェクト（以下、単に「パイロン」とも称する）が図示されている。図４に示す例では、パイロンの表面上には何も描画されておらず（すなわち無地のキャンバスである）。しかしながら、変形例では、購入時のパイロンには、何らかのデザインや文字等がすでに描画されていてもよい。また、図４に示す例では、パイロンは、例えば白地であるが、他のカラーが付与されてもよいし、模様が付与されてもよい。また、図４に示す例では、パイロンは、平滑な表面を有するが、凹凸やテクスチャーが付与されてもよい。なお、パイロンは、購入画面等において、２Ｄ画像で表示されてもよいし、２Ｄ画像の組み合わせによりパイロンのアニメーション表示が可能とされてもよい。

【0032】

ついで、ユーザは、ユーザ端末２１を利用して、貼り付け対象の２Ｄ画像（図３は、“読込画像”と表記）を選択する（ステップＳ３８）。図５には、ユーザ端末２１としてスマホを利用した場合の選択用ユーザインタフェース（以下、「選択ＵＩ」と称する）の一例が示されている。図５の場合、選択ＵＩは、ユーザが所有する２Ｄ画像データに対応付けられている複数の２Ｄ画像の表示Ｇ５１～Ｇ５４と、複数の２Ｄ画像の表示Ｇ５１～Ｇ５４にそれぞれ対応付けられる選択ボタンＢ５１～Ｂ５４とを含む。図５では、選択ボタンＢ５１～Ｂ５４は、対応する表示Ｇ５１～Ｇ５４自体であり、タップ等の操作が可能である。ただし、変形例では、複数の２Ｄ画像の表示Ｇ５１～Ｇ５４にそれぞれ対応付けられる別の位置に、選択ボタンＢ５１～Ｂ５４が設定されてもよい。また、選択ＵＩは、２Ｄ画像の表示Ｇ５１～Ｇ５４以外の、２Ｄ画像の表示が閲覧できるようにスクロール等が可能とされてもよい。なお、２Ｄ画像の表示Ｇ５１～Ｇ５４は、対応する２Ｄ画像データを識別可能な態様で表す表示であればよく、対応する２Ｄ画像データに基づいて生成されてもよいし、対応する２Ｄ画像データとは異なる画像データに基づいて生成されてもよい。なお、対応する２Ｄ画像データに基づいて生成される場合、２Ｄ画像データ自体は、対応するメタデータに基づいて取得されてよい。

【0033】

ここで、ユーザにより選択可能な貼り付け対象の２Ｄ画像は、好ましくは、ＮＦＴとして発行された作品に関連し、ユーザが所有者である。この場合、貼り付け対象の２Ｄ画像は、複製が実質的に不能であり、代替不可能性（唯一無二さ）が高い画像である。このように、選択ＵＩに表示される複数の２Ｄ画像の表示は、ユーザが所有するＮＦＴに係る２Ｄ画像に係る表示であってよい。

【0034】

ステップＳ３８のユーザ選択に応答して、情報処理サーバ１００は、選択された貼り付け対象の２Ｄ画像を読み込む（図３は、“２Ｄ読込”と表記）（ステップＳ４０）。２Ｄ画像は、対応するメタデータに基づいて取得されてもよい。例えば、ＮＦＴに係る２Ｄ画像は、Ｐ２Ｐ分散型ファイルシステム（例えばＩＰＦＳ（ＩｎｔｅｒＰｌａｎｅｔａｒｙ Ｆｉｌｅ Ｓｙｓｔｅｍ））又はその類から取得されてよい。そして、情報処理サーバ１００は、読み込んだ２Ｄ画像を３次元に変換し、対応する３Ｄ画像を生成する（ステップＳ４２）。ついで、オリジナル３Ｄ上の３Ｄ画像の貼り付け場所を決定する（ステップＳ４４）。なお、貼り付け場所は、ユーザにより指定されてよい。また、３Ｄオブジェクトにおける２Ｄ画像の貼り付け場所や向き等は、後述するように各種の調整が可能とされてもよい。

【0035】

図６には、貼り付け場所を指定する際のユーザインタフェース（以下、「貼り付けＵＩ」と称する）の一例が示されている。図６に示す例では、オリジナル３Ｄ上の３Ｄ画像の貼り付け場所が、貼り付け対象の２Ｄ画像とともに、視覚的に示されている。ユーザは、貼り付け位置以外にも、向きやサイズ、レイヤー等が変更可能であってよい。また、ユーザは、通常的なＣＡＤ（Ｃｏｍｐｕｔｅｒ Ａｉｄｅｄ Ｄｅｓｉｇｎ）等の３Ｄビューワーと同じように、回転やパンなどビューを自由に変えることが可能であってよい。レイヤーは、２つ以上の２Ｄ画像を重ねて貼り付ける場合のレイヤーに関する。なお、図６に示す例では、貼り付けＵＩは、比較的大きい画面用（例えばＰＣ画面用）であり、選択ＵＩを含んでいる。この場合、ユーザは、選択ＵＩ内の所望の２Ｄ画像をドラッグして右側の貼り付けＵＩ内に移動させることで、貼り付け対象の２Ｄ画像として選択可能であってもよい。また、ユーザは、貼り付けＵＩ内で２Ｄ画像の位置や向き等を適宜変更可能とされてよい。

【0036】

なお、図６に示す例では、貼り付け対象の２Ｄ画像は、矩形の外形を有するが、図７に示すように、シールをイメージできるような態様で、画像の外形に沿った輪郭線Ｌ１を有してもよい。

【0037】

ついで、情報処理サーバ１００は、オリジナル３Ｄの表面（貼り付け場所の表面）に合わせて画像３Ｄを湾曲させつつ、オリジナル３Ｄの表面上に画像３Ｄを重ねる（重畳する）（ステップＳ４６）。この場合、情報処理サーバ１００は、オリジナル３Ｄの表面上に画像３Ｄに係る２Ｄ画像が貼り付けられた態様で、新たな３Ｄオブジェクトを生成及び出力する（ステップＳ４８）。以下、このようにしてオリジナル３Ｄの表面上に、その表面に沿って２Ｄ画像を結合（描画）することを、２Ｄ画像を“貼り付ける”とも称する。本実施例では、被貼り付け側の３Ｄオブジェクトは、表面が湾曲しているパイロンであるが、被貼り付け側の３Ｄオブジェクトは、必ずしも表面全体が湾曲している必要はなく、表面の一部又は全部が平面であってもよい。また、被貼り付け側の３Ｄオブジェクトは、複数の平面からなる多面体構造を有してもよい。

【0038】

そして、情報処理サーバ１００は、このようにして得られた結合結果（図３は、“３Ｄ結合”と表記）をクラウドサーバ９１に保存させる（ステップＳ５０、ステップＳ５２）。なお、クラウドサーバ９１に加えて又は代えて、Ｐ２Ｐ分散型ファイルシステム（例えばＩＰＦＳ）又はその類に、新たな３Ｄオブジェクトに係る２Ｄ画像等が保存されてもよい。

【0039】

図８には、３Ｄオブジェクト（本実施例ではパイロンの形態）の表面上に複数の２Ｄ画像Ｇ８１～Ｇ８４が貼り付けられた状態が模式的に示されている。図８には、４つの２Ｄ画像Ｇ８１～Ｇ８４が貼り付けられた状態が示されているが、貼り付け可能な２Ｄ画像の数は、任意であり、無制限であってもよいし、貼り付け可能な数が所定条件に応じて設定されてもよい。また、２Ｄ画像は、互いに重ねて貼り付けも可能とされてよく、この場合、上に貼り付けられた２Ｄ画像は、下の２Ｄ画像を隠すように描画されてよい。この際、ユーザは、上述したように、レイヤーを調整することで、各２Ｄ画像間のレイヤー（上下関係）を適宜変更可能とされてよい。

【0040】

このようにして生成される３Ｄオブジェクトは、例えばメタバース空間のような３Ｄの３次元空間（仮想空間）に配置されてよい。図９には、メタバース空間の地面（オブジェクト）上に、一の２Ｄ画像が貼り付けられた状態のパイロンが配置されている。なお、メタバース空間におけるパイロンが配置可能な位置は、ユーザ自身の所有する土地（ランド）内であってもよいし、管理者から許可された位置であってもよい。

【0041】

このようして、本実施例によれば、メタデータに基づいて貼り付け対象の２Ｄ画像を読み込むことができ、読み込んだ２Ｄ画像を３Ｄオブジェクトに貼り付けることができる。この場合、貼り付け位置やサイズ、向き、複数の２Ｄ画像同士の重なり態様、一の３Ｄオブジェクトに貼り付ける２Ｄ画像の数や種類等、ユーザが任意に決定できる。これにより、オリジナルの３Ｄオブジェクトから得られる最終作品（３Ｄオブジェクトデータ）の芸術性やオリジナリティを高めることができる。また、貼り付け対象の２Ｄ画像が、ＮＦＴに係る画像である場合は、代替不可能性（唯一無二さ）を更に高めることができる。

【0042】

なお、上述した実施例では、パイロンが被貼り付け側の３Ｄオブジェクトであるが、被貼り付け側の３Ｄオブジェクトは、任意であり、ありとあらゆる３Ｄ物体を利用できる。また、被貼り付け側の３Ｄオブジェクトは、必ずしも固定物である必要はなく、可動物であってもよいし、可搬性を有する物体であってもよい。また、被貼り付け側の３Ｄオブジェクトは、必ずしも形状が変化しない物体である必要はなく、可逆的又は不可逆的な変形が可能な物体であってもよい。

【0043】

例えば図１０に示すように、被貼り付け側の３Ｄオブジェクトは、仮想空間内でアバターのようなキャラクタが身に着けるオブジェクト（例えば帽子に係るオブジェクトＯＢ１０）を含んでよい。この場合、ユーザは、自身のアバターが身に着けるオブジェクトを、所望の態様で変更でき、オリジナル性（希少性）や芸術性等を高めることができる。また、このようなアバターが身に着けるオブジェクトは、アバターの動き等に応じて、その形状が動的に変化しうるが、かかる形状の変化に追従して２Ｄ画像が動的に貼り付けられてもよい。

【0044】

また、被貼り付け側の３Ｄオブジェクトのサイズは、ユーザにより可変とされてもよいし、複数種類のサイズの３Ｄオブジェクトがあらかじめ用意されてもよい。また、被貼り付け側の３Ｄオブジェクトのサイズは、貼り付け対象の２Ｄ画像のサイズや貼り付け数に応じて変更可能とされてもよい。

【0045】

なお、図３に示す例では、ステップＳ４２で、２Ｄ画像を３次元に変換し、対応する３Ｄ画像を生成してから、ステップＳ４４で、３Ｄオブジェクトにおける貼り付け位置が指定されているが、これに限られない。例えば、３Ｄオブジェクトにおける貼り付け位置が指定されてから、対応する３Ｄ画像が生成されてもよいし、対応する３Ｄ画像を経由せずに、２Ｄ画像を３Ｄオブジェクトに貼り付けることとしてもよい。また、上述した特開２０１６－１５７４２９号公報に記載されるような技術を利用して、３Ｄオブジェクトの表面に２Ｄ画像を貼り付けてもよい。

【0046】

次に、図１１以降を参照して、情報処理システム１をさらに説明する。

【0047】

図１１は、情報処理システム１の機能の一例を示す概略的なブロック図である。以下では、情報処理システム１の機能は、例えば、情報処理サーバ１００により実現されるが、情報処理システム１の機能の一部又は全部は、ユーザ端末２１、情報処理サーバ１００、及びクラウドサーバ９１のうちの、任意の１つ又は２つ以上の組み合わせにより実現されてもよい。

【0048】

情報処理システム１は、図１１に示すように、ユーザ入力取得部１１、３次元データ取得部１２と、画像データ取得部１３と、結合画像データ生成部１４と、データ管理部１５と、ユーザ情報記憶部１６と、結合画像記憶部１７とを含む。

【0049】

ユーザ入力取得部１１は、上述した選択ＵＩや貼り付けＵＩ等のような各種ＵＩを介して、ユーザ入力を取得する。なお、ユーザ入力は、タッチパネル等のような通常的なユーザインタフェースに加えて又は代えて、音声やジェスチャ（モーションキャプチャ）等を介して取得されてもよい。

【0050】

３次元データ取得部１２は、上述した３Ｄオブジェクト（例えばパイロンのような被貼り付け側の３Ｄオブジェクト）のデータを取得する。なお、３Ｄオブジェクトの保存場所は、情報処理サーバ１００内であってもよいし、他のサーバであってもよい。また、３Ｄオブジェクトは、ユーザ等により新たに生成されることで取得されてもよい。

【0051】

画像データ取得部１３は、３Ｄオブジェクトに貼り付け可能な２Ｄ画像を取得する。例えば、画像データ取得部１３は、上述したように、選択ＵＩを介してユーザにより選択された２Ｄ画像を取得してもよい。あるいは、画像データ取得部１３は、選択ＵＩの生成時に、ユーザの所有する２Ｄ画像のすべて又は一部を取得してもよい。

【0052】

なお、ユーザは、３Ｄオブジェクトに貼り付け可能な２Ｄ画像を任意のマーケットプレイスで取得（購入）してもよいし、自身でオリジナルに作成することで取得してもよいし、取得方法は任意である。例えば、図１２に示すように、３Ｄオブジェクトに貼り付け可能な２Ｄ画像は、パッケージングされた形態でインターネット上のマーケットプレイス等にて販売されてもよい。また、３Ｄオブジェクトとセットで販売されてもよい。

【0053】

結合画像データ生成部１４は、上述したように２Ｄ画像が貼り付けられた３Ｄオブジェクト（以下、「結合画像データ」とも称する）を生成する。図１３は、結合画像データの生成方法の一例のフローチャートである。なお、図１３に示す生成方法は、図３に示したステップＳ４０～ステップＳ４８の処理の具体例として適用できる。

【0054】

図１３に示す例では、結合画像データ生成部１４は、２Ｄ画像に係る画像２Ｄファイルを読込み（ステップＳ１３１）、オリジナルの３Ｄオブジェクトの表面の貼り付け場所（図１３では、「オリジナル３Ｄ曲面貼り付け場所」と表記）がユーザにより指定される（ステップＳ１３２）。結合画像データ生成部１４は、貼り付け場所に係る表面のデータ量を測定（算出）する（ステップＳ１３３）とともに、画像２Ｄファイルのデータ量を測定（算出）する（ステップＳ１３４）。そして、結合画像データ生成部１４は、オリジナルの３Ｄオブジェクトの表面（曲面）に係るデータ量から、画像２Ｄファイルのデータ量を補間する（ステップＳ１３５）。また、結合画像データ生成部１４は、画像２Ｄに奥行きデータを追加する（ステップＳ１３６）ことで、画像２Ｄデータを画像３Ｄデータに変換する（ステップＳ１３７）。そして、結合画像データ生成部１４は、オリジナルの３Ｄオブジェクトの表面データを、変換後の画像３Ｄデータで上書きする（ステップＳ１３８）ことで、新しい３Ｄデータ（すなわち結合画像データ）を生成し出力する（ステップＳ１３９）。

【0055】

なお、図１３では、示されていないが、ユーザからの貼り付け場所（位置）の変更や向き、サイズの変更指示があった場合は、新たな貼り付け場所等の指示に基づいて、ステップＳ１３２からの処理が同様に実行されてよい。

【0056】

このように結合画像データ生成部１４は、３Ｄ画像技術（２Ｄから３Ｄへの変換、及び３Ｄオブジェクトの貼り付け）で画像補間を行い、２Ｄデータと３Ｄデータの差異をなくす機能を有する。

【0057】

データ管理部１５は、結合画像データ生成部１４により結合画像データが生成された場合に、結合画像データの生成に利用された２Ｄ画像に対して、その旨（貼り付け済みであること）を表す所定情報を対応付ける。例えば、データ管理部１５は、貼り付け済みを表す所定情報を表すフラグを、結合画像データの生成に利用された２Ｄ画像に対して対応付けてよい。

【0058】

データ管理部１５は、所定情報が対応付けられている２Ｄ画像に対しては、当該２Ｄ画像を利用した結合画像データ生成部１４による新たな結合画像データの生成を禁止してもよい。この場合、ある一の２Ｄ画像が貼り付け可能な３Ｄオブジェクトは、１つだけになり、当該一の２Ｄ画像の希少性等にも起因して、生成可能な結合画像データ（３Ｄオブジェクトデータ）の芸術性やオリジナリティを高めることができる。

【0059】

本実施例において、３Ｄオブジェクトに貼り付けられた２Ｄ画像は、ユーザ入力に基づいて、引き剥がしが可能とされてもよい。データ管理部１５は、３Ｄオブジェクト上に描画された２Ｄ画像が削除された場合（すなわち剥がされた場合）に、３Ｄオブジェクト上から削除された２Ｄ画像に対する所定情報の対応付け状態を解除してもよい。すなわち、３Ｄオブジェクト上から削除された２Ｄ画像は、再び、３Ｄオブジェクト上に貼り付け可能となる。これにより、ユーザによる貼り付け直しなどが可能となり、利便性が向上する。

【0060】

ユーザ情報記憶部１６は、各ユーザのユーザ情報を記憶する。ユーザ情報は、任意であるが、例えば図１４に示すように、ユーザ名（又はユーザＩＤ）ごとに、コレクション、貼り付け状態、保存場所等の情報を含んでよい。この場合、コレクションは、対応するユーザが所有する２Ｄ画像を表す。貼り付け状態は、対応する２Ｄ画像の状態を表し、上述した所定情報（結合画像データの生成に利用されていることを表す情報）に対応する“Ｐａｓｔｅｄ”状態や、それ以外の“Ｎｏｔ Ｐａｓｔｅｄ”状態を表してよい。また、貼り付け状態の情報は、“Ｐａｓｔｅｄ”状態を表す場合、貼り付けられた３Ｄオブジェクトを特定する情報を含んでもよい。保存場所は、対応する２Ｄ画像の保存場所を表す情報であり、対応する２Ｄ画像のメタデータから生成されてよい。また、保存場所の情報は、対応するメタデータ自体であってもよい。なお、保存場所の情報は、対応するＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）を含んでよい。

【0061】

このようなユーザ情報は、データ管理部１５により適宜更新されてよい。例えば、データ管理部１５は、ユーザが新たな２Ｄ画像を購入した場合、新たな２Ｄ画像をコレクションに追加し、それに対応する保存場所等の情報を追加してよい。なお、購入した２Ｄ画像は、貼り付け可能な状態（すなわち“Ｎｏｔ Ｐａｓｔｅｄ”状態）であるが、貼り付け不能な状態“Ｐａｓｔｅｄ”状態で流通される場合もありうる。このような貼り付け状態は、マーケットプレイスで識別可能に表示されてもよく、また、その価格に反映されてもよい。

【0062】

また、ユーザ情報は、ユーザ入力取得部１１や画像データ取得部１３により利用されてよい。例えば、ユーザ入力取得部１１は、上述した選択ＵＩを生成する際に、ユーザ情報のコレクションに基づいて、ユーザが所有する２Ｄ画像を特定してよい。また、この際、ユーザ入力取得部１１は、ユーザ情報の貼り付け状態に基づいて、各２Ｄ画像が貼り付け可能か否かの情報を、選択ＵＩに追加的に出力してもよい。例えば、貼り付け不能な２Ｄ画像は、“Ｐａｓｔｅｄ”といった文字が付与されてもよいし（図６参照）、対応する選択ボタン（図５の選択ボタンＢ５１～Ｂ５２参照）が非アクティブ化されてもよい。あるいは、ユーザ入力取得部１１は、ユーザ情報の貼り付け状態に基づいて、貼り付け可能な２Ｄ画像に係る表示（図５の表示Ｇ５１～Ｇ５４参照）を出力してもよい。また、画像データ取得部１３は、上述した選択ＵＩを生成する際に、ユーザ情報のコレクションに基づいて、ユーザが所有する２Ｄ画像とともに保存場所を特定し、特定した２Ｄ画像を、対応する保存場所から取得してよい。

【0063】

結合画像記憶部１７は、上述したように結合画像データ生成部１４により生成される結合画像データが記憶される。なお、結合画像記憶部１７の機能の一部又は全部は、上述したように他のシステム（例えばＰ２Ｐ分散型ファイルシステム）やサーバにより実現されてもよい。なお、結合画像データ生成部１４により生成される結合画像データに対しては、ＮＦＴ化されてもよい。また、この場合も、図１２に示した形態のように、結合画像データは、パッケージングされた形態で販売等されてもよい。

【0064】

以上、各実施例について詳述したが、特定の実施例に限定されるものではなく、特許請求の範囲に記載された範囲内において、種々の変形及び変更が可能である。また、前述した実施例の構成要素を全部又は複数を組み合わせることも可能である。

【0065】

例えば、上述した実施例では、３Ｄオブジェクトに貼り付けられる２Ｄ画像は、静止画であるが、動画やアニメーションに適用されてもよい。

【0066】

また、上述した実施例では、３Ｄオブジェクトに２Ｄ画像を貼り付けてから、当該３Ｄオブジェクトをメタバース空間等に配置可能としているが、メタバース空間にすでに配置されている３Ｄオブジェクトに対して、同様の態様で２Ｄ画像を貼り付け可能としてもよい。

【符号の説明】

【0067】

１ 情報処理システム
４ ネットワーク
１１ ユーザ入力取得部
１２ ３次元データ取得部
１３ 画像データ取得部
１４ 結合画像データ生成部（画像データ生成部）
１５ データ管理部
１６ ユーザ情報記憶部
１７ 結合画像記憶部
２１ ユーザ端末
２４ 表示部
９１ クラウドサーバ
１００ 情報処理サーバ
１０１ 制御部
１０２ 主記憶部
１０３ 補助記憶部
１０４ ドライブ装置
１０５ 記録媒体
１０６ ネットワークＩ／Ｆ部
１０７ 入力部

【要約】

【課題】３Ｄオブジェクトに２Ｄ画像を適用した最終作品（３Ｄオブジェクトデータ）の芸術性やオリジナリティを高める。
【解決手段】３Ｄオブジェクトを取得する３Ｄオブジェクト取得部と、対応するメタデータに基づいて２Ｄ画像データを取得する画像データ取得部と、３Ｄオブジェクトに基づく物体の表面に沿うように２Ｄ画像データに基づく画像が描画された物体の画像データを生成する画像データ生成部とを備える、情報処理装置が開示される。
【選択図】図１１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】