特開 2024-101553 動的に生成される仮想環境

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024101553

(43)【公開日】2024-07-29

(54)【発明の名称】動的に生成される仮想環境

(51)【国際特許分類】

   G06T 19/00 20110101AFI20240722BHJP

   G06T 1/00 20060101ALI20240722BHJP

   H04L 67/131 20220101ALI20240722BHJP

【ＦＩ】

G06T19/00 A

G06T1/00 200E

H04L67/131

【審査請求】未請求

【請求項の数】20

【出願形態】ＯＬ

【外国語出願】

(21)【出願番号】P 2024001280

(22)【出願日】2024-01-09

(31)【優先権主張番号】18/155,618

(32)【優先日】2023-01-17

(33)【優先権主張国・地域又は機関】US

(71)【出願人】

【識別番号】520509030

【氏名又は名称】ティーエムアールダブリュー ファウンデーション アイピー エスエーアールエル

(74)【代理人】

【識別番号】100107456

【弁理士】

【氏名又は名称】池田 成人

(74)【代理人】

【識別番号】100162352

【弁理士】

【氏名又は名称】酒巻 順一郎

(74)【代理人】

【識別番号】100123995

【弁理士】

【氏名又は名称】野田 雅一

(72)【発明者】

【氏名】ヤーリ， チェヴァット

【テーマコード（参考）】

5B050

【Ｆターム（参考）】

5B050AA03

5B050BA09

5B050BA10

5B050BA12

5B050CA07

5B050CA08

5B050DA04

5B050EA04

5B050EA26

5B050FA02

5B050FA05

5B050FA13

5B050GA08

(57)【要約】      （修正有）

【課題】仮想環境を動的に生成するシステム、方法及びコンピュータ可読媒体を提供する。
【解決手段】システム１００において、サーバは、少なくとも１つの仮想環境の生成に使用される１つ又は複数の仮想環境構成要素を含み、各構成要素が事前に定義された寸法及び形状を備える３Ｄ仮想環境作成モジュールと、１つ又は複数のデータベースを検索する検索エンジンと、を備える。検索エンジンは、検索照会の受信に対し、少なくとも１つのデータベースから少なくとも１つの検索語に関連する少なくとも１つの属性に基づきインデックス付けされた複数の仮想オブジェクトを表すデータを取り出して仮想環境作成モジュールに送信する。３Ｄ仮想環境作成モジュールは、仮想オブジェクトに基づき仮想環境構成要素を選択し、選択された仮想環境構成要素を仮想環境内に配置し仮想オブジェクトを上記仮想環境構成要素内に配置することで仮想環境を生成する。
【選択図】図１

【特許請求の範囲】

【請求項1】

少なくとも１つのプロセッサ及び少なくとも１つのメモリを備えている少なくとも１つのサーバコンピュータ、を備えるシステムであって、前記メモリは、
少なくとも１つの仮想環境の生成において使用される複数の仮想環境構成要素を含んでいる仮想環境作成モジュールであって、前記仮想環境構成要素の各々が事前に定義された寸法及び事前に定義された形状を含む、当該仮想環境作成モジュールと、
１つ又は複数のデータベースを検索するように構成された検索エンジンと、
を格納しており、
前記検索エンジンは、
少なくとも１つのクライアントデバイスを介して１つ又は複数の検索語を含んでいる検索照会を受信することに応答して、前記１つ又は複数のデータベースから、前記１つ又は複数の検索語に関連付けられた少なくとも１つの仮想オブジェクト属性に基づいてインデックス付けされた複数の仮想オブジェクトを表すデータを取り出すことと、
前記仮想オブジェクトを表す前記データを前記仮想環境作成モジュールに送信することと、
を行うように構成され、
前記仮想環境作成モジュールは、
前記複数の仮想オブジェクトに基づいて前記仮想環境構成要素のうちの少なくとも１つを選択することと、
前記選択された少なくとも１つの仮想環境構成要素を前記少なくとも１つの仮想環境内に配置し、前記複数の仮想オブジェクトを前記選択された少なくとも１つの仮想環境構成要素内に配置することによって、少なくとも１つの仮想環境を生成することと、
を行うように構成される、
システム。

【請求項2】

前記仮想環境作成モジュールは、さらに、
前記仮想オブジェクトの表示優先度を決定することと、
前記複数の仮想オブジェクトの数及び表示優先度のうち少なくとも一部に基づいて前記少なくとも１つの仮想環境のレイアウトを決定することと、
を行うように構成される、請求項１に記載のシステム。

【請求項3】

前記少なくとも１つの仮想オブジェクト属性が、オブジェクトのテーマ、寸法、重量、色、形状、テクスチャ、材料、歴史的関連性、作成者、作成年、芸術の期間、歴史の期間、作成場所、又は現在の位置、を含む、請求項１に記載のシステム。

【請求項4】

前記検索エンジンが、前記１つ又は複数の検索語に基づいてオブジェクトのテーマを決定し、前記少なくとも１つの仮想オブジェクト属性が、前記決定されたオブジェクトのテーマを含む、請求項１に記載のシステム。

【請求項5】

前記仮想環境作成モジュールは、さらに、
前記決定されたオブジェクトのテーマに基づいて、前記少なくとも１つの仮想環境のレイアウト及び少なくとも１つのテーマを決定するように構成される、請求項４に記載のシステム。

【請求項6】

前記仮想環境作成モジュールは、さらに、
拡散モデルを使用して、前記決定されたオブジェクトのテーマに基づいて前記少なくとも１つの仮想環境の視覚コンテンツを作成又は変更するように構成される、請求項４に記載のシステム。

【請求項7】

前記検索エンジンが、前記１つ又は複数の検索語を補完するさらなる検索語を要求するように構成される、請求項１に記載のシステム。

【請求項8】

前記インデックス付けが、過去の検索データに基づき、前記少なくとも１つの関連する仮想環境を生成するために、前記仮想環境作成モジュールによって複数の属性に関連する仮想オブジェクトが使用される、請求項１に記載のシステム。

【請求項9】

前記仮想環境作成モジュールが、前記少なくとも１つの仮想環境の提案された訪問ルートを生成する、請求項１に記載のシステム。

【請求項10】

前記少なくとも１つの仮想環境が、対応するクライアントデバイスを介して前記仮想環境にアクセスするユーザのユーザグラフィック表現によって、仮想訪問を可能にし、
前記システムが、
ユーザ間の前記ユーザグラフィック表現を介する通信を可能にする通信モジュール、
をさらに備える、請求項１に記載のシステム。

【請求項11】

前記仮想環境作成モジュールは、さらに、
前記少なくとも１つの仮想環境の検索照会及び対応するレイアウトを保存するように構成される、請求項１に記載のシステム。

【請求項12】

前記仮想環境構成要素の各々が、仮想オブジェクトの位置、光学特性及び照明を決定する事前に定義されたテンプレート、
を含む、請求項１に記載のシステム。

【請求項13】

前記仮想環境作成モジュールは、さらに、
前記少なくとも１つの仮想環境を生成する前に、予め定められた寸法又は形状を変更するように構成される、請求項１に記載のシステム。

【請求項14】

コンピュータシステムのメモリに格納された検索エンジンによって、少なくとも１つのクライアントデバイスを介して入力された１つ又は複数の検索語を含んでいる検索照会を受信するステップと、
前記検索エンジンによって、少なくとも１つのデータベースから、前記検索照会の前記１つ又は複数の検索語に関連付けられた少なくとも１つの仮想オブジェクト属性に基づいてインデックス付けされた複数の仮想オブジェクトを表すデータを取り出すステップと、
前記仮想オブジェクトを表す前記データを、前記コンピュータシステムの前記メモリに格納された仮想環境作成モジュールに送信するステップと、
前記仮想環境作成モジュールによって、前記複数の仮想オブジェクトに基づいて仮想環境構成要素のうちの少なくとも１つを選択するステップと、
前記仮想環境作成モジュールによって、前記選択された少なくとも１つの前記仮想環境構成要素を前記少なくとも１つの仮想環境内に配置し、前記複数の仮想オブジェクトを前記選択された少なくとも１つの前記仮想環境構成要素内に配置することによって、少なくとも１つの仮想環境を生成するステップと、
を含む、コンピュータ実施方法。

【請求項15】

前記仮想オブジェクトの表示優先度を決定するステップと、
仮想オブジェクトの数及び表示優先度のうち少なくとも一部に基づいて前記少なくとも１つの仮想環境のレイアウトを決定するステップと、
をさらに含む、請求項１４に記載のコンピュータ実施方法。

【請求項16】

前記仮想環境作成モジュールによって、前記少なくとも１つの仮想環境の提案された訪問ルートを生成するステップ、
をさらに含む、請求項１５に記載のコンピュータ実施方法。

【請求項17】

前記少なくとも１つの仮想オブジェクト属性が、オブジェクトのテーマ、寸法、重量、色、形状、テクスチャ、材料、歴史的関連性、作成者、作成年、芸術の期間、歴史の期間、作成場所、又は現在の位置を含む、請求項１５に記載のコンピュータ実施方法。

【請求項18】

前記１つ又は複数の検索語に基づいてオブジェクトのテーマを決定するステップと、
前記決定されたオブジェクトのテーマに基づいて、前記少なくとも１つの仮想環境のレイアウト及び少なくとも１つのテーマを決定するステップと、
をさらに含む、請求項１５に記載のコンピュータ実施方法。

【請求項19】

命令を記憶している少なくとも１つの非一時的コンピュータ読み取り可能な記憶媒体であって、
前記命令は、
少なくとも１つのプロセッサによって実行された場合に、コンピュータシステムに、
前記コンピュータシステムのメモリに格納された検索エンジンによって、少なくとも１つのクライアントデバイスを介して入力された１つ又は複数の検索語を含んでいる検索照会を受信するステップと、
前記検索エンジンによって、少なくとも１つのデータベースから、前記１つ又は複数の検索語に関連付けられた少なくとも１つの仮想オブジェクト属性に基づいてインデックス付けされた複数の仮想オブジェクトを表すデータを取り出すステップと、
前記仮想オブジェクトを表す前記データを、前記コンピュータシステムの前記メモリに格納された仮想環境作成モジュールに送信するステップと、
前記仮想環境作成モジュールによって、前記複数の仮想オブジェクトに基づいて仮想環境構成要素のうちの少なくとも１つを選択するステップと、
前記仮想環境作成モジュールによって、前記選択された少なくとも１つの前記仮想環境構成要素を前記少なくとも１つの仮想環境内に配置し、前記複数の仮想オブジェクトを前記選択された少なくとも１つの前記仮想環境構成要素内に配置することによって、少なくとも１つの仮想環境を生成するステップと、
を実行させるための命令である、
非一時的コンピュータ読み取り可能な記憶媒体。

【請求項20】

前記命令は、さらに、
前記仮想オブジェクトの表示優先度を決定するステップと、
前記複数の仮想オブジェクトの数及び表示優先度のうち少なくとも一部に基づいて前記少なくとも１つの仮想環境のレイアウトを決定するステップと、
を実行させるための命令である、
請求項１９に記載の非一時的コンピュータ読み取り可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、一般には、コンピュータシステムに関する。より詳細には、本開示は、動的に生成される仮想環境を可能にするシステム、方法、及びコンピュータ可読媒体に関する。

【背景技術】

【0002】

コロナウイルス感染症の大流行などの状況が、世界的な移動制限を強いており、会議、学習、買い物、及び仕事が行われる方法を変更しているため、特に、リモートの社会的交流を含む、リモートの協力及び対話がより重要性を獲得している。市場では、リアルタイムの通信及び協力を可能にするために、スカイプ（Ｓｋｙｐｅ）（登録商標）、ズーム（Ｚｏｏｍ）（登録商標）、又はプラーリ（Ｐｒａｇｌｉ）（登録商標）によって提供される仮想オフィスなどの２Ｄアバターによって表されたリモートチームのための仮想オフィスなどの、チャットアプリケーションからテレビ電話にわたる、さまざまな解決策がすでに使用可能である。

【0003】

ビデオゲーム型の仕組みを使用する仮想環境内のリモートの対話は、上記で示された解決策の少なくとも一部よりも多くの現実感を可能にする解決策になることができる。仮想環境は、ユーザグラフィック表現又はアバターを介して、ユーザが互いに、及び仮想オブジェクトと情報をやりとりすることができる、シミュレートされる環境である。これらの仮想環境は、テキストメッセージ並びにリアルタイムの音声及び／又はビデオ通信などの、ユーザ間のさまざまな種類の通信を可能にすることができる。

【0004】

ロックダウン制限による影響を特に受けた１つの産業界は、芸術作品、美術館収蔵品、市販用製品などの展示会を含む、展示会業界だった。一部のオンラインプラットフォームは、仮想展示会を可能にするための代替手段をすでに提供している。しかし、展示会のテーマ、展示物のレイアウト及び選択などの側面は、１人又は複数の主催者によって事前に定義された選択に制限される傾向があり、ユーザ体験の個人化を制限する。

【0005】

したがって、展示品のユーザ体験及び展示速度を改善するカスタマイズされた個別の、又は共有された体験を提供して、仮想展示会の個人化の程度を向上させることができる技術的代替手段に対する必要性が存在する。

【発明の概要】

【0006】

この概要は、概念の選択を簡略化された形態で導入するために提供されており、これらの概念は、「詳細な説明」において下でさらに説明される。この概要は、特許請求される主題の重要な特徴を識別するよう意図されておらず、特許請求される主題の範囲を決定することにおける補助として使用されることも意図されていない。

【0007】

本開示の１つの態様では、動的に生成される仮想環境を可能にするシステムは、少なくとも１つのプロセッサ及びメモリを備えている少なくとも１つのサーバコンピュータを備える。このメモリは、少なくとも１つの仮想環境の生成において使用される仮想環境構成要素を含んでいる仮想環境作成モジュールを格納し、各構成要素は、事前に定義された寸法及び事前に定義された形状を備える。このメモリは、１つ又は複数のデータベースを検索するように構成された検索エンジンをさらに格納する。検索エンジンは、少なくとも１つのクライアントデバイスを介して１つ又は複数の検索語を含んでいる検索照会を受信することに応答して、少なくとも１つのデータベースから、１つ又は複数の検索語に関連付けられた少なくとも１つの仮想オブジェクト属性に基づいてインデックス付けされた複数の仮想オブジェクトを表すデータ（例えば、そのようなオブジェクトの識別子）を取り出し、仮想オブジェクトを表すデータを仮想環境作成モジュールに送信する。仮想環境作成モジュールは、複数の仮想オブジェクトに基づいて仮想環境構成要素のうちの少なくとも１つを選択することと、選択された少なくとも１つの仮想環境構成要素を少なくとも１つの仮想環境内に配置し、複数の仮想オブジェクトを選択された少なくとも１つの仮想環境構成要素内に配置することによって、少なくとも１つの仮想環境を生成することとを行うように構成される。

【0008】

１つの実施形態では、仮想環境作成モジュールは、仮想オブジェクトの表示優先度を決定することと、複数の仮想オブジェクトの数及び表示優先度のうち少なくとも一部に基づいて少なくとも１つの仮想環境のレイアウトを決定することとを行うようにさらに構成される。例示的な状況では、仮想環境作成モジュールは、表示される関連する仮想オブジェクトの数を決定し、関連する仮想オブジェクトの表示優先度を決定し、１つ又は複数の構成要素を考慮して、関連する仮想オブジェクトの数及び表示優先度を考慮して少なくとも１つの仮想環境のレイアウトを決定する。

【0009】

一部の実施形態では、少なくとも１つの仮想オブジェクト属性は、オブジェクトのテーマ、寸法、重量、色、形状、テクスチャ、材料、歴史的関連性、作成者、作成年、芸術／歴史の期間、作成場所、又は現在の位置を含む。さらなる実施形態では、検索エンジンは、１つ又は複数の検索語に基づいてオブジェクトのテーマを決定し、少なくとも１つの仮想オブジェクト属性は、決定されたオブジェクトのテーマを含む。例示的な状況では、検索エンジンは、検索照会語に基づいて１つ又は複数の重要なオブジェクトのテーマを決定し、それに応じて仮想オブジェクトを取り出す。さらなる実施形態では、仮想環境作成モジュールは、決定されたオブジェクトのテーマに基づいて、少なくとも１つの仮想環境のレイアウト及び少なくとも１つのテーマを決定するようにさらに構成される。例示的な状況では、生成される仮想環境のレイアウト及び少なくとも１つのテーマが、１つ又は複数の重要なオブジェクトのテーマに関連付けられる。さらなる実施形態では、仮想環境作成モジュールは、拡散モデルを使用して、決定されたオブジェクトのテーマに基づいて少なくとも１つの仮想環境の視覚コンテンツを作成又は変更するようにさらに構成される。

【0010】

１つの実施形態では、検索エンジンは、１つ又は複数の検索語を補完することができるさらなる検索語を要求するように構成される。例示的な状況では、さらなる検索語は、１つ又は複数の属性を決定して少なくとも１つの仮想環境の作成を推進するために、現在提供されている検索照会語を補完する。

【0011】

一部の実施形態では、インデックス付けは、過去の検索データに基づき、少なくとも１つの関連する仮想環境を生成するために、仮想環境作成モジュールによって複数の属性に関連する仮想オブジェクトが使用される。

【0012】

一部の実施形態では、仮想環境作成モジュールは、少なくとも１つの仮想環境の提案された訪問ルートを生成する。１つの実施形態では、提案された訪問ルートは、関連する仮想オブジェクトを含み、仮想環境作成モジュールは、提案された訪問ルートをさらに考慮して、少なくとも１つの仮想環境のレイアウトを決定する。

【0013】

一部の実施形態では、少なくとも１つの仮想環境は、対応するクライアントデバイスを介して仮想環境にアクセスするユーザのユーザグラフィック表現によって、仮想訪問を可能にする。さらなる実施形態では、システムは、ユーザ間のユーザグラフィック表現を介する通信を可能にする通信モジュールをさらに備える。ユーザが仮想環境にアクセスしている例示的な状況では、通信モジュールは、ユーザが他のユーザを、仮想環境内の共有体験を経験することに招待することを、さらに可能にする。

【0014】

一部の実施形態では、仮想環境作成モジュールは、少なくとも１つの仮想環境の検索照会及び対応するレイアウトを保存するようにさらに構成される。例示的な状況では、検索照会及び対応するレイアウトは、将来のセッションにおけるアクセス及び再作成のために保存される。

【0015】

一部の実施形態では、仮想環境構成要素の各々は、仮想オブジェクトの位置、光学特性、及び照明を決定する事前に定義されたテンプレートを含む。例示的な状況では、各構成要素は、仮想オブジェクトが収容される好ましい空間を決定する事前に定義されたテンプレートを含み、事前に定義されたテンプレートは、収容される仮想オブジェクトの特性によって調整される、事前に定義された光学特性及び照明を含む。

【0016】

一部の実施形態では、仮想環境作成モジュールは、少なくとも１つの仮想環境を生成する前に、予め定められた寸法又は形状を変更するようにさらに構成される。１つの実施形態では、構成要素の組み合わせが少なくとも１つの仮想オブジェクトを収容できないことに応答して、仮想環境作成モジュールは、仮想環境を生成する前に少なくとも１つの仮想オブジェクトに適合するように、少なくとも１つの構成要素の予め定められた寸法、形状、及び／又は他の特性、或いはこれらの組み合わせを変更する。

【0017】

一部の実施形態では、少なくとも１つの生成される仮想環境は、芸術作品、又は美術館の収集品、又は商業展示品、或いはこれらの組み合わせを展示するように構成される。

【0018】

本開示の別の態様では、動的に生成される仮想環境を可能にするコンピュータ実施方法が提供され、このコンピュータ実施方法は、コンピュータシステムのメモリに格納された検索エンジンによって、少なくとも１つのクライアントデバイスを介して入力された１つ又は複数の検索語を含んでいる検索照会を受信することと、検索エンジンによって、少なくとも１つのデータベースから、検索照会の１つ又は複数の検索語に関連付けられた少なくとも１つの仮想オブジェクト属性に基づいてインデックス付けされた複数の仮想オブジェクトを表すデータを取り出すことと、仮想オブジェクトを表すデータを、コンピュータシステムのメモリに格納された仮想環境作成モジュールに送信することと、仮想環境作成モジュールによって、複数の仮想オブジェクトに基づいて仮想環境構成要素のうちの少なくとも１つを選択することと、仮想環境作成モジュールによって、選択された少なくとも１つの仮想環境構成要素を少なくとも１つの仮想環境内に配置し、複数の仮想オブジェクトを選択された少なくとも１つの仮想環境構成要素内に配置することによって、少なくとも１つの仮想環境を生成することと、を含む。

【0019】

一部の実施形態では、少なくとも１つの仮想環境を生成するために、１つ又は複数の属性及び少なくとも１つの検索照会語を考慮して、仮想環境作成モジュールは、表示される関連する仮想オブジェクトの数を決定することと、関連する仮想オブジェクトの表示優先度を決定することと、関連する仮想オブジェクトの数及び表示優先度を考慮して少なくとも１つの仮想環境のレイアウトを決定することとを含むステップをさらに実行する。

【0020】

一部の実施形態では、仮想オブジェクト属性は、オブジェクトのテーマ、寸法、重量、色、形状、テクスチャ、材料、歴史的関連性、作成者、作成年、芸術／歴史の期間、作成場所、及び現在の位置のうちの１つ又は複数を含む。さらなる実施形態では、この方法は、検索エンジンによって、検索照会語に基づいて１つ又は複数の重要なオブジェクトのテーマを決定することをさらに含み、生成される仮想環境のレイアウト及び少なくとも１つのテーマが、１つ又は複数の重要なオブジェクトのテーマに関連付けられる。

【0021】

一部の実施形態では、この方法は、検索エンジンによって、１つ又は複数の属性を決定して少なくとも１つの仮想環境の作成を推進するために、現在提供されている検索照会語を補完することができる、さらなる検索語を要求することをさらに含む。

【0022】

一部の実施形態では、この方法は、少なくとも１つの関連する仮想環境を生成するために仮想環境作成モジュールによって使用される複数の属性に関連する仮想オブジェクトを含んでいる過去の検索データに基づいて、事前に記録されたプレイリスト内の仮想オブジェクトにインデックス付けすることをさらに含む。

【0023】

一部の実施形態では、この方法は、仮想環境作成モジュールによって、関連する仮想オブジェクトを含んでいる少なくとも１つの仮想環境の提案された訪問ルートを生成することをさらに含み、仮想環境作成モジュールは、提案された訪問ルートをさらに考慮して、少なくとも１つの仮想環境のレイアウトを決定する。

【0024】

一部の実施形態では、この方法は、将来のセッションにおけるアクセス及び再作成のために検索照会及び対応するレイアウトを保存することをさらに含む。

【0025】

一部の実施形態では、この方法は、構成要素ごとに、仮想オブジェクトが収容される好ましい空間を決定する事前に定義されたテンプレートを提供することをさらに含み、事前に定義されたテンプレートは、収容される仮想オブジェクトの特性によって調整される、事前に定義された光学特性及び照明を含む。

【0026】

一部の実施形態では、この方法は、構成要素の組み合わせが少なくとも１つの仮想オブジェクトを収容できないことに応答して、仮想環境作成モジュールによって、仮想環境を生成する前に少なくとも１つの仮想オブジェクトに適合するように、少なくとも１つの構成要素の予め定められた寸法、形状、及び／又は他の特性、或いはこれらの組み合わせを変更することをさらに含む。

【0027】

本開示の別の態様では、少なくとも１つの非一時的コンピュータ読み取り可能な記憶媒体が命令を記憶しており、これらの命令は、少なくとも１つのプロセッサによって実行された場合に、コンピュータシステムに、コンピュータシステムのメモリに格納された検索エンジンによって、少なくとも１つのクライアントデバイスを介して入力された１つ又は複数の検索語を含んでいる検索照会を受信することと、検索エンジンによって、少なくとも１つのデータベースから、１つ又は複数の検索語に関連付けられた少なくとも１つの仮想オブジェクト属性に基づいてインデックス付けされた複数の仮想オブジェクトを表すデータを取り出すことと、仮想オブジェクトを表すデータを、コンピュータシステムのメモリに格納された仮想環境作成モジュールに送信することと、仮想環境作成モジュールによって、複数の仮想オブジェクトに基づいて仮想環境構成要素のうちの少なくとも１つを選択することと、仮想環境作成モジュールによって、選択された少なくとも１つの仮想環境構成要素を少なくとも１つの仮想環境内に配置し、複数の仮想オブジェクトを選択された少なくとも１つの仮想環境構成要素内に配置することによって、少なくとも１つの仮想環境を生成することと、を含むステップを実行させる。

【0028】

上記の概要は、本開示のすべての態様の網羅的なリストを含まない。本開示が、上で要約されたさまざまな態様に加えて、下の「詳細な説明」において開示され、特に、本出願と共に出願される特許請求の範囲において指摘される態様の、すべての適切な組み合わせから実践され得るすべてのシステム及び方法を含むということが企図される。そのような組み合わせは、上記の概要において特に列挙されない利点を有する。本発明の他の特徴及び利点が、添付の図面から、及び以下に続く詳細な説明から明らかになるであろう。

【0029】

本開示の特定の特徴、態様、及び利点は、以下の説明及び添付の図面に関してよりよく理解されるであろう。

【図面の簡単な説明】

【0030】

【図1】実施形態に従って、動的に生成される仮想環境を提供するためのシステムの略図である。

【図2A】実施形態に従って、少なくとも１つの仮想環境内の仮想オブジェクトの取り出し及び収容の略図である。

【図2B】実施形態に従って、少なくとも１つの仮想環境内の仮想オブジェクトの取り出し及び収容の略図である。

【図3】実施形態に従って、アートギャラリーを例示する略図である。

【図4】実施形態に従って、動的に生成される仮想環境を提供するための方法のブロック図である。

【図5】少なくとも１つの仮想環境を生成するための方法を説明する、動的に生成される仮想環境を提供するための方法のさらなるステップを詳述するブロック図である。

【発明を実施するための形態】

【0031】

以下の説明では、さまざまな実施形態を例として示す図面への参照が行われる。また、さまざまな実施形態が、複数の実施例を参照することによって下で説明される。特許請求される主題の範囲から逸脱することなく、実施形態が設計及び構造における変更を含んでもよいということが、理解されるべきである。

【0032】

本開示のシステム、方法、及び非一時的コンピュータ読み取り可能な記憶媒体は、ユーザからの検索照会に基づいて仮想環境の動的生成を可能にすることによって、背景において説明された欠点の少なくとも一部を解決する。検索照会は、検索エンジンが、検索照会の用語に一致する仮想オブジェクトを取り出すために、１つ又は複数のデータベースを検索することを引き起こす。仮想オブジェクトの選択は、仮想オブジェクトを収容するための仮想環境の生成を推進する。仮想環境は、複数の構成要素を組み立てることによって作成され、これにより、仮想オブジェクトを適切に収容するための仮想空間を提供し、ユーザが、対応するユーザグラフィック表現を介して、生成される仮想環境にアクセスすることを可能にすることができる、仮想環境のレイアウトを作成する。仮想環境は、芸術作品、美術館の収集品、又は商業展示品などの、任意の種類のオブジェクトを仮想的に展示することに適していることがある。検索に基づいて特注の仮想環境を生成する能力をユーザに提供することによって、改善されたユーザ体験がもたらされ、仮想展示会へのより多くのトラフィックを促進することができる。

【0033】

図１は、実施形態に従って、動的に生成される仮想環境を提供するためのシステム１００の略図を示している。

【0034】

システム１００は、少なくとも１つのプロセッサ１０４と、少なくとも１つの仮想環境１１２の生成において使用される１つ又は複数の仮想環境構成要素１１０を含む仮想環境作成モジュール１０８を格納するメモリ１０６とを備えているサーバコンピュータシステムの少なくとも１つのサーバコンピュータ１０２を備える。各仮想環境構成要素１１０は、事前に定義された寸法及び形状などの属性を含む。システム１００は、１つ又は複数のデータベース１１６を検索するように構成された検索エンジン１１４をさらに含む。

【0035】

検索エンジン１１４は、少なくとも１つのクライアントデバイス１１８を介して１つ又は複数の検索語を含んでいる検索照会を受信することに応答して、少なくとも１つのデータベース１１６から、少なくとも１つの検索語に関連付けられた少なくとも１つの仮想オブジェクト属性に基づいてインデックス付けされた複数の仮想オブジェクト１２０を表すデータを取り出し、このデータを仮想環境作成モジュール１０８に転送し、仮想環境作成モジュール１０８は、このデータを使用して、それに応じて複数の仮想オブジェクト１２０を収容するように仮想環境構成要素１１０を構造化することによって、少なくとも１つの仮想環境１１２を生成する。仮想環境作成モジュール１０８は、複数の仮想オブジェクト１２０に基づいて仮想環境構成要素１１０のうちの少なくとも１つを選択することと、選択された少なくとも１つの仮想環境構成要素を少なくとも１つの仮想環境内に配置し、複数の仮想オブジェクトを選択された少なくとも１つの仮想環境構成要素１１０内に配置することによって、少なくとも１つの仮想環境１１２を生成することとを行うように構成される。したがって、各仮想環境構成要素１１０は、検索照会語によって定義された特性を有する少なくとも１つの仮想環境１１２を作成するために、一緒に組み立てられて構造化されてもよい。

【0036】

システム１００は、複数のオブジェクトを１人又は複数のユーザ１２２に仮想的に展示する目的で、仮想環境１１２を動的に提供するために使用されてもよい。仮想環境１１２が少なくとも１人のユーザ１２２からの検索照会に基づいて生成されると仮定すると、生成される仮想環境１１２は、検索照会を入力する特定のユーザ１２２のためにカスタマイズされ、例えば、仮想展示会へのより多くのトラフィックを促進することができる改善されたユーザ体験をもたらす。

【0037】

１つの実施形態では、１つ又は複数の属性及び少なくとも１つの検索照会語を考慮して少なくとも１つの仮想環境１１２を生成するために、仮想環境作成モジュール１０８は、仮想オブジェクト１２０の表示優先度を決定することと、複数の仮想オブジェクト１２０の数及び表示優先度のうち少なくとも一部に基づいて少なくとも１つの仮想環境１１２のレイアウトを決定することとを行うようにさらに構成される。例示的な状況では、仮想環境作成モジュール１０８は、表示される関連する仮想オブジェクト１２０の数を決定する。次に、仮想環境作成モジュール１０８は、関連する仮想オブジェクト１２０の表示優先度を決定する。最後に、仮想環境作成モジュール１０８は、１つ又は複数の仮想環境構成要素１１０を考慮して、関連する仮想オブジェクト１２０の数及び表示優先度を考慮して少なくとも１つの仮想環境１１２のレイアウトを決定する。したがって、検索照会の入力された用語から、検索エンジン１１４は、仮想環境１１２内に表示される仮想オブジェクト１２０の数の選択に役立つことができる属性を決定し、これらの属性は、少なくとも１つの仮想環境１１２の構築に関する情報を提供する表示優先度を決定するために使用される。

【0038】

一部の実施形態では、仮想オブジェクト属性は、オブジェクトのテーマ、寸法、重量、色、形状、テクスチャ、材料、歴史的関連性スコア、作成者、作成年、芸術／歴史の期間、並びに作成場所及び現在の位置のうちの１つ又は複数を含む。属性は、各仮想オブジェクト１２０を特徴付け、少なくとも１つの仮想環境１１２に表示される仮想オブジェクト１２０の選択を推進することができる特徴である。例えば、少なくとも１つのデータベースに格納されたモナリザの絵画などの仮想オブジェクト１２０は、以下の属性を有することができる。
オブジェクトのテーマ：ルネサンス芸術
種類：油絵
寸法：７７ｃｍ×５３ｃｍ
重量：８．１６ｋｇ
色（複数可）：黒色、灰色、黄色、茶色
歴史的関連性スコア１０／１０
作成者：レオナルド・ダ・ビンチ
形状：長方形
作成年：西暦１５０３年
芸術／歴史の期間：ルネサンス
作成場所：フィレンツェ
現在の位置：ルーブル美術館

【0039】

したがって、「ルネサンスの絵画」又は「有名なルーブルの絵画」の検索は、少なくとも１つの仮想環境１１２での表示ために、検索エンジン１１４が絵画のうちからモナリザを取り出すことを引き起こす。検索エンジン１１４は、検索に基づいて仮想オブジェクト１２０の最も一般的な属性を分析して比較し、それに応じて仮想オブジェクト１２０を取り出してもよい。

【0040】

少なくとも１つの仮想オブジェクト１２０を含むデータベース１１６は、一部の実施形態では、仮想オブジェクト１２０を提供する企業に属してもよい。本開示の仮想オブジェクト１２０は、現実世界の要素の仮想バージョンのことを指し、コンピュータ支援描画（ＣＡＤ：ｃｏｍｐｕｔｅｒ ａｓｓｉｓｔｅｄ ｄｒａｗｉｎｇ）又はコンピュータ支援工学（ＣＡＥ：ｃｏｍｐｕｔｅｒ－ａｓｓｉｓｔｅｄ ｅｎｇｉｎｅｅｒｉｎｇ）手法によってマッピング又はモデル化され、合成開口レーダー、実開口レーダー、光検知測距（ＬＩＤＡＲ：Ｌｉｇｈｔ Ｄｅｔｅｃｔｉｏｎ ａｎｄ Ｒａｎｇｉｎｇ）、逆開口レーダー、モノパルスレーダー、及び他の種類の画像処理技術などの、レーダー撮像を使用することによって、現実のオブジェクト（例えば、建物情報モデル（ＢＩＭ：ｂｕｉｌｄｉｎｇ ｉｎｆｏｒｍａｔｉｏｎ ｍｏｄｅｌｓ））のコンピュータモデルによって入力されてもよい。仮想複製を作成するために使用されるモデル化技術とは無関係に、各現実世界のオブジェクトの非常に正確なリアルタイムの３Ｄ仮想複製がデータベース１１６において仮想オブジェクト１２０として使用可能になるように、各仮想複製の情報は、各対応する現実世界の要素に関する十分な詳細を提供するべきである。例えば、芸術作品を所有している美術館は、対応する芸術作品のコンピュータモデルがデータベース１１６において使用可能になるように、芸術作品を撮影するか、スキャンするか、又はモデル化してもよい。システム１００の管理者は、対応する仮想オブジェクト１２０をデータベース１１６に入力するために、現実のオブジェクトの所有者と協力してもよい。

【0041】

一部の実施形態では、検索エンジン１１４は、どの仮想オブジェクト１２０を対応するデータベース１１６から取り出すかを定義するために使用される１つ又は複数の属性を決定するために、現在提供されている検索照会語を補完することができる、さらなる検索語を要求するように構成される。この補完情報は、例えば、関連する仮想オブジェクト１１６の数及び表示優先度を決定し、少なくとも１つの仮想環境１１２の構築を推進するために使用され得る。例えば、ユーザ１２２が「ワイン製品」という用語を検索する場合、検索エンジン１１４は、この検索語を分析し、提供された検索語を使用して十分な情報が使用可能であるかどうかを分析してもよい。検索エンジン１１４が、より多くの情報が必要とされるということを決定する場合、検索エンジン１１４は、元の検索照会に関する固有の補完データをユーザ１２２に要求するテキストを生成してユーザ１２２に表示することによって進んでもよい。例えば、検索エンジン１１４は、ユーザが白ワイン、赤ワイン、又はその両方に興味があるかどうか、ユーザがワインのみに興味があるのか、又はワイン用品にも興味があるのか、ユーザが特定の地域からのワイン又は原産地の決定に興味があるかどうか、及び／或いは同様のこと指定するように、ユーザに要求してもよい。さらに特定の検索は、少なくとも１つのデータベース１１６からの仮想オブジェクト１２０の取り出しを推進し、したがって、１つ又は複数の生成される仮想環境１１２の精度を向上させる、関連するパラメータのより正確な定義を可能にしてもよい。

【0042】

一部の実施形態では、検索エンジン１１４は、１つ又は複数の検索語に基づいてオブジェクトのテーマを決定し、少なくとも１つの仮想オブジェクト属性は、決定されたオブジェクトのテーマを含む。例示的な状況では、検索エンジン１１４は、検索照会語に基づいて１つ又は複数の重要なオブジェクトのテーマを決定し、それに応じて仮想オブジェクト１２０を取り出す。重要なオブジェクトのテーマは、検索照会に関連付けられた仮想オブジェクト１２０のリスト全体にわたって最も多く繰り返されたテーマである。さらなる実施形態では、仮想環境作成モジュール１０８は、決定されたオブジェクトのテーマに基づいて、少なくとも１つの仮想環境のレイアウト及び少なくとも１つのテーマを決定するようにさらに構成される。例示的な状況では、生成される仮想環境１１２のレイアウト及び少なくとも１つのテーマが、１つ又は複数の重要なオブジェクトのテーマに関連付けられる。例えば、検索照会が「機械」という用語を含み、ユーザに対してさらなる情報を要求した後に、さらなる用語が、「金属を切断するための電気機械」を含む場合、検索エンジン１１４は、重要なオブジェクトのテーマが、金属切断機械のテーマであるということを決定し、それに応じて、金属切断機械に関連する対応する仮想オブジェクト１２０を取り出す。次に、そのような機械のために適切にサイズ設定されて成形された構成要素を使用して、大型である可能性がある機械をホストするために、生成される仮想環境１１２のレイアウトが生成されてもよく、仮想環境１１２のテーマは、金属切断機械が展示会の主要なトピックである商業展示会のテーマであってもよい。少なくとも１つの仮想環境１１２の各部屋の装飾及び照明も、選択されたテーマに関連していてもよい。同様に、「ルネサンス芸術」の重要なテーマは、ルネサンス様式の装飾を含んでいる美術館のレイアウト及び対応するルネサンスのテーマを生成してもよい。

【0043】

一部の実施形態では、重要なテーマは、生成される仮想環境１１２の音楽の選択にさらに影響を与えてもよい。例えば、「ルネサンス芸術」の重要なテーマは、仮想環境作成モジュール１０８が、少なくとも１つの美術館の仮想環境で再生するために、ルネサンス様式の音楽を選択することを引き起こしてもよい。さらなる実施形態では、仮想環境作成モジュール１０８は、重要なテーマに基づいて、仮想環境の雰囲気になることができる複数の人工知能アバターを、少なくとも１つの仮想環境に追加してもよく、人工知能アバターのドレスコードは、重要なテーマによる影響を受ける。例えば、商業展示会では、商業展示会の雰囲気を与えるために、ビジネススーツを身に着けている人工知能アバターが仮想環境に挿入されてもよく、一方、仮想美術展のテーマには、よりカジュアルなドレスコードが使用されてもよい。

【0044】

一部の実施形態では、仮想オブジェクト１２０のインデックス付けが、過去の検索データに基づく。例えば、仮想オブジェクト１２０は、少なくとも１つの関連する仮想環境１１２を生成するために仮想環境作成モジュール１０８によって使用される複数の属性に関連する仮想オブジェクト１２０を含んでいる過去の検索データに基づいて、事前に記録されたプレイリストに構造化されてもよい。したがって、一部の実施形態では、各データベース１１６は、他のユーザが過去に検索した検索照会語に従ってインデックス付けされた複数の仮想オブジェクト１２０を含み、仮想環境作成モジュール１０８が、単に、１つ又は複数の事前に記録されたプレイリストから選択することを必要とすることができるため、検索エンジン１１４が適切な仮想オブジェクト１２０に関して少なくとも１つのデータベース１１６内を検索して、適切な仮想オブジェクト１２０を取り出し、少なくとも１つの仮想環境１１２を生成することに要する可能性がある時間の削減をもたらす。

【0045】

一部の実施形態では、仮想環境作成モジュール１０８は、ユーザが、適切なユーザグラフィカルインターフェイスを介して、少なくとも１つの仮想環境１１２の、特に装飾、色、照明、雰囲気、及び音を含む、スタイルを調整することを可能にするように構成される。そのような選択肢は、複数のスタイル編集の選択肢をユーザに提供することによって、少なくとも１つの仮想環境１１２が生成される前に、又は少なくとも１つの仮想環境１１２の作成後に、例えば、ユーザ１２２が仮想環境１１２にアクセスし、仮想環境１１２の探索を行う時間を持った後に、使用可能であってもよい。

【0046】

一部の実施形態では、仮想環境作成モジュール１０８は、将来のセッションにおけるアクセス及び再作成のために、検索照会及び対応する仮想環境のレイアウトを保存することをさらに可能にする。したがって、ユーザ１２２は、セッションを閉じた後に、検索中に取り出されたすべての関連する仮想オブジェクト１２０、テーマ、装飾などを含む、前に作成された仮想環境１１２にアクセスし、探索し続けることができてもよい。

【0047】

仮想環境作成モジュール１０８は、さまざまな方法で実装され得る。一部の実施形態では、仮想環境作成モジュール１０８は、構成要素を選択、配置、又は変更して仮想環境１１２を構築することなどのタスクを実行するために、人工知能（ＡＩ：ａｒｔｉｆｉｃｉａｌ ｉｎｔｅｌｌｉｇｅｎｃｅ）技術を採用する。一部の実施形態では、仮想環境作成モジュール１０８は、建築要素、壁の装飾、テクスチャ、照明の特徴、配色、テーマに関する要素、又は同様のものを使用して仮想環境１１２をさらに定義するために、ＡＩ技術を採用する。例示的な状況では、仮想環境作成モジュール１０８は、仮想環境をさらに定義するために、スタビリティＡＩ（Ｓｔａｂｉｌｉｔｙ ＡＩ）から入手できるＳｔａｂｌｅ Ｄｉｆｆｕｓｉｏｎ潜在拡散モデル又はオープンＡＩ（Ｏｐｅｎ ＡＩ）から入手できるＤＡＬＬ－Ｅ ２拡散モデルなどの生成的ニューラルネットワークを採用する。そのような状況では、仮想環境作成モジュール１０８は、テキスト入力に応答して、仮想環境１１２の構造要素、表面テクスチャ、配色、壁紙、家具又は他のオブジェクト、照明効果、或いは仮想環境１１２の他の側面の形態で、出力を生成してもよい。そのような技術では、仮想オブジェクト１２０の属性（例えば、オブジェクトのテーマ、芸術家／作成者、歴史／芸術の期間、作成日、作成場所など）、ユーザプロフィールデータ、検索語、又はユーザ１２２によって提供されたテキストプロンプトなどの、さまざまなソースからテキスト入力が取得されてもよい。そのようなＡＩ技術は、テキスト入力を使用して、仮想環境１１２に表示される新しい芸術品又は変更された芸術品を作成することなどによって、仮想オブジェクト１２０を作成又は変更するために使用されてもよい。そのような変更は、オリジナルのスタイルに一致する追加コンテンツを使用して元の画像又は芸術品をより大きい面積又は「カンバス」に拡大することを含む、アウトペインティングなどの技術を含んでもよい。ＡＩ技術は、他の方法でも使用され得る。場合によっては、仮想環境作成モジュール１０８は、例えば、教師あり学習手法における既存のレイアウトに関する、既知のユーザによって提供された仮想美術館体験のスコア又は評価を分析し、ＡＩ技術使用して、そのようなスコア又は評価を最大化することを目指す将来のレイアウトを設計してもよい。

【0048】

一部の実施形態では、仮想環境作成モジュール１０８は、ＡＩ技術の代わりに、又はＡＩ技術と組み合わせて、他の手法を採用する。例えば、仮想オブジェクト１２０が標準化されたサイズ及び形状で実装される場合、仮想環境作成モジュール１０８は、ルックアップテーブルを使用して、対応する仮想オブジェクト１２０のサイズ及び形状に基づいて、良好な適合であると前に決定された構成要素を選択してもよい。仮想環境作成モジュール１０８は、オブジェクトのテーマ、キーワード、色、芸術若しくは歴史の期間、又は同様のものなどの要因に基づいて、仮想空間を作成するため、又は仮想空間への分岐若しくは追加を作成するために、ルールセット又はルールシステムも使用してもよい。例えば、検索照会が、歴史の期間に関する制限を伴わずに「有名な油絵」という用語を含む場合、ルールセットは、定義された歴史の期間からのテーマに関する要素又は建築要素を含んでいる構成要素を使用して仮想環境の分岐、翼、又は部屋が構築されることを指示してもよく、ルールセットによって指定されたとおりに、それらの期間からの仮想オブジェクトがそれらの領域に追加される。

【0049】

検索エンジン１１４は、さまざまな方法で実装され得る。一部の実施形態では、検索エンジン１１４は、例えば関連する仮想オブジェクト１２０を識別するために、ＢＥＲＴ（Ｂｉｄｉｒｅｃｔｉｏｎａｌ Ｅｎｃｏｄｅｒ Ｒｅｐｒｅｓｅｎｔａｔｉｏｎｓ ｆｒｏｍ Ｔｒａｎｓｆｏｒｍｅｒｓ：Ｔｒａｎｓｆｏｒｍｅｒによる双方向のエンコード表現）モデルなどのＡＩ支援検索技術を採用する。ＢＥＲＴは、質問回答システムのトレーニングを可能にする、オープンソースのニューラルネットワークに基づく技術である。検索エンジン設計のための多くの他の手法が使用されてもよい。

【0050】

ユーザは、音声（例えば、音声テキスト化）、キーボード、又はタッチ画面入力によるなどの、さまざまな方法で検索エンジン１１４と情報をやりとりすることができる。一部の実施形態では、検索エンジン１１４は、検索が生成され得る照会領域を含んでいるグラフィカルユーザインターフェイスをクライアントデバイス１１８に提示する。このグラフィカルユーザインターフェイスは、フォームベースのインターフェイスなどの、任意の適切なインターフェイスを含んでもよい。フォームベースのインターフェイスは、テキストを使用して記入され得るフィールド、又は選択が行われ得るポップアップメニューを含み、通常は、「送信」又は「照会」ボタン及び「消去」又は「キャンセル」ボタンを含む。グラフィカルユーザインターフェイスは、任意選択で、プルダウンメニューを含む。１つの実施形態では、このインターフェイスは、芸術作品、美術館収蔵品、又は市販用製品などの、少なくともオブジェクトのテーマによる検索を提供し、必要に応じて、補完データを追加するためのさらなる選択肢を提供してもよい。

【0051】

一部の実施形態では、少なくとも１つの作成された仮想環境１１２は、対応するクライアントデバイス１１８を介して仮想環境１１２にアクセスするユーザ１２２のユーザグラフィック表現によって、仮想訪問を可能にする。ユーザグラフィック表現は、対応するクライアントデバイス１１８のユーザに似ていても似ていなくてもよいユーザアバターであり、仮想環境１１２内で情報をやりとりしているときにユーザ１２２を表すために使用されてもよい。

【0052】

一部の実施形態では、ユーザグラフィック表現は、ユーザによってアップロードされた写真若しくはサードパーティソース（例えば、ソーシャルメディアウェブサイト）の写真から構築されたユーザの３Ｄ仮想カットアウト、或いは背景が除去されたユーザ１２２のリアルタイムビデオストリーム、又は背景が除去されたビデオ、若しくは背景が除去されていないビデオを含んでいるユーザのリアルタイムの３Ｄ仮想カットアウトである。さらなる実施形態では、クライアントデバイス１１８は、１つ又は複数のカメラ１２４によって取得されたユーザ１２２のライブカメラフィードを処理して分析することによって、ユーザグラフィック表現を生成し、他のピアクライアントデバイス１１８に送信されるアニメーションデータを生成する。受信側のピアクライアントデバイス１１８は、アニメーションデータを使用してユーザグラフィック表現をローカルに構築及び更新する。

【0053】

ユーザの３Ｄ仮想カットアウトは、ユーザによってアップロードされた２Ｄ写真又はサードパーティソースの２Ｄ写真から構築されたユーザの仮想複製を含んでもよい。実施形態では、ユーザの３Ｄ仮想カットアウトは、ユーザによってアップロードされた２Ｄ写真又はサードパーティソースの２Ｄ写真を入力データとして使用して、背景が除去されたユーザの３Ｄメッシュ又は３Ｄ点群を生成する、マシンビジョン技術による３Ｄ仮想再構築プロセスを介して作成される。

【0054】

ユーザのリアルタイムの３Ｄ仮想カットアウトは、少なくとも１つのカメラ１２４から取得され、ユーザの背景が除去された後の、リアルタイムの２Ｄ又は３Ｄライブビデオストリームのデータフィードに基づくユーザの仮想複製を含んでもよい。実施形態では、ユーザのリアルタイムの３Ｄ仮想カットアウトは、ユーザのライブデータフィードを入力データとして使用して、背景が除去されたユーザの３Ｄメッシュ又は３Ｄ点群を生成することによって、マシンビジョン技術による３Ｄ仮想再構築プロセスを介して作成される。例えば、ユーザのリアルタイムの３Ｄ仮想カットアウトは、ホログラフィック３Ｄメッシュ又は３Ｄ点群を作成するために処理され得る、カメラ（例えば、ウェブカメラ）からの２Ｄビデオから生成されてもよい。別の例では、ユーザのリアルタイムの３Ｄ仮想カットアウトは、ホログラフィック３Ｄメッシュ又は３Ｄ点群を作成するために処理され得る、奥行きカメラ（例えば、ＬＩＤＡＲ又は任意の奥行きカメラ）からの３Ｄビデオから生成されてもよい。したがって、ユーザのリアルタイムの３Ｄ仮想カットアウトは、ユーザをグラフィカルに、３次元でリアルタイムに表す。

【0055】

背景が除去されたビデオは、クライアントデバイス１１８にストリーミングされるビデオを含んでもよく、背景除去プロセスは、ユーザ１２２のみが可視になり、その後、多角形構造を利用して受信側のクライアントデバイスに表示され得るように、実行されている。

【0056】

背景が除去されていないビデオは、クライアントデバイスにストリーミングされるビデオを含んでもよく、このビデオは、ユーザ及びユーザの背景が可視になり、その後、多角形構造を利用して受信側のクライアントデバイスに表示されるように、カメラキャプチャを忠実に表している。多角形構造は、ビデオをサポートするための仮想フレームとして使用されるクアッド構造又はさらに複雑な３Ｄ構造であることができる。

【0057】

一部の実施形態では、ライブデータフィード及び／又はユーザによってアップロードされた２Ｄ写真若しくはサードパーティソースの２Ｄ写真に含まれる入力データとして使用されるデータは、特に、２Ｄ又は３Ｄ画像データ、３Ｄ形状、ビデオデータ、メディアデータ、音声データ、テキストデータ、触覚データ、時間データ、３Ｄ実体、３Ｄ動的オブジェクト、メタデータ、優先度データ、セキュリティデータ、位置データ、照明データ、奥行きデータ、及び赤外線データを含む。

【0058】

一部の実施形態では、クライアントデバイス１１８は、特に、モバイルデバイス、パーソナルコンピュータ、ゲーム機、メディアセンター、スマートコンタクトレンズ、及びヘッドマウントディスプレイのうちの１つ又は複数であってもよい。カメラ１２４は、特に、２Ｄ又は３Ｄカメラ、３６０度カメラ、ウェブカメラ、ＲＧＢＤカメラ、ＣＣＴＶカメラ、専門的カメラ、携帯電話カメラ、奥行きカメラ（例えば、ＬＩＤＡＲ）、或いはライトフィールドカメラのうちの１つ又は複数であってもよい。

【0059】

一部の実施形態では、クライアントデバイス１１８及び少なくとも１つのサーバコンピュータ１０２は、有線ネットワーク又はワイヤレスネットワーク１２６を介して接続する。一部の実施形態では、ネットワークは、ミリ波（ｍｍＷ）、又は第５世代ワイヤレスシステム通信（５Ｇ）などの、ｍｍＷ及びサブ６ＧＨｚ通信システムの組み合わせを含んでもよい。他の実施形態では、システムは、ワイヤレスローカルエリアネットワーク（Ｗｉ－Ｆｉ（登録商標））を介して接続してもよい。他の実施形態では、システムは、第４世代ワイヤレスシステム通信（４Ｇ）を介して通信可能に接続してもよく、４Ｇ通信システムによってサポートされてもよく、又は他の有線若しくはワイヤレス通信システムを含んでもよい。

【0060】

一部の実施形態では、仮想環境１１２は、１つ又は複数の構成要素１１０から成る仮想構造物（例えば、仮想モデル）のことを指す。各構成要素１１０は、予め定められた寸法及び形状を含んでもよい。したがって、仮想環境１１２は、複数の仮想オブジェクト１２０を収容するために、構成要素１１０から組み立てられる。

【0061】

検索エンジン１１４、仮想環境作成モジュール１０８、及び少なくとも１つの仮想環境１１２などの、本開示のモジュールは、本開示では、本明細書に記載された目的に使用されるために独立して作成され、維持され得る、コンピュータコードの個別の要素を含んでいるソフトウェアモジュールのことを指す。これらのモジュールは、さまざまなモジュールの機能を使用するために、システム１００のために分散され、システム１００によって使用され得る。これらのソフトウェアモジュールは、対応するハードウェアモジュールに接続されてもよく、ハードウェアモジュールは、対応するソフトウェアモジュールの機能を提供するように構成された独立した電子回路の選択であってもよい。仮想化技術及び分散コンピューティング技術によって、本開示のモジュールは、ネットワーク１２６を介して互いに接続された複数のサーバコンピュータ１０２などの、複数のコンピューティングデバイスにわたって分散されてもよい。

【0062】

図２Ａは、実施形態に従って、少なくとも１つの仮想環境内の仮想オブジェクトの取り出し及び収容において使用されるシステム２００の略図を示す。

【0063】

図２Ａは、仮想オブジェクトの取り出し及び収容を可能にするシステム２００の実施形態を示し、ユーザ１２２Ａは、検索エンジン２０４を介して少なくとも１つの用語を検索照会２０２に入力する。検索エンジン２０４は、１つ又は複数の仮想オブジェクト２０８を取り出すために、データベース２０６Ａ～２０６Ｃなどの複数のデータベースを検索し始める。仮想オブジェクト２０８は、少なくとも１つの検索語に関連付けられた少なくとも１つの属性に基づいてインデックス付けされる。検索エンジン２０４は、データを、図１を参照して前に説明された仮想環境作成モジュール１０８に転送し、仮想環境作成モジュール１０８は、このデータを使用して、それに応じて複数の仮想オブジェクト２０８を収容するように複数の仮想環境構成要素を構造化することによって、少なくとも１つの仮想環境２１０を生成する。

【0064】

ユーザ１２２Ａは、次に、ユーザグラフィック表現を介して仮想環境２１０にアクセスし、ユーザ１２２Ｂなどの他のユーザを仮想環境２１０内の共有体験に招待してもよい。

【0065】

図２Ｂは、仮想オブジェクト２０８Ａ～２０８Ｉが収容されている、生成される仮想環境２１０のクローズアップを示す。仮想環境作成モジュールは、取り出された仮想オブジェクト２０８Ａ～２０８Ｉの属性に基づいて、それに応じて仮想オブジェクト２０８Ａ～２０８Ｉを含んでいる仮想環境構成要素１１０Ａ～１１０Ｆを組み立てて構造化することによって、仮想環境２１０を生成した。より詳細には、仮想環境作成モジュール１０８は、仮想オブジェクト２０８Ａ～２０８Ｂを仮想環境構成要素１１０Ａに収容し、仮想オブジェクト２０８Ｄを仮想環境構成要素１１０Ｂに収容し、仮想オブジェクト２０８Ｅを仮想環境構成要素１１０Ｃに収容し、仮想オブジェクト２０８Ｃを仮想環境構成要素１１０Ｄに収容し、仮想オブジェクト２０８Ｇ、２０８Ｈ、及び２０８Ｉを仮想環境構成要素１１０Ｅに収容し、仮想オブジェクト２０８Ｆを仮想環境構成要素１１０Ｆに収容した。各仮想環境構成要素１１０Ａ～１１０Ｆは、仮想環境２１０内に集まり、対応するテーマ及び仮想オブジェクト２０８Ａ～２０８Ｉを提供された後に、ユーザ１２２Ａ～１２２Ｂ（図２Ａを参照）がユーザグラフィック表現２２２Ａ～２２２Ｂを介して探索し、情報をやりとりすることができる仮想環境２１０の部屋になる。

【0066】

一部の実施形態では、仮想環境作成モジュールは、各位置の可視性及び仮想オブジェクトごとの相対的優先度に従って、仮想オブジェクトをさまざまな位置に割り当ててもよい。したがって、仮想環境作成モジュールは、相対的に高い優先度を有する仮想オブジェクトを、ユーザグラフィック表現へのより高い可視度を有する位置に収容し、ユーザが、より低い優先度の仮想オブジェクトよりも、より高い優先度の仮想オブジェクトと情報をやりとりする可能性を高めることができる。例えば、仮想オブジェクト２０８Ｄが相対的に高い優先度を有するという条件で、仮想環境作成モジュールは、仮想オブジェクト２０８Ｄを仮想環境構成要素１１０Ｂの上側の中央に提供し、より低い相対的優先度を有する仮想オブジェクトが収容されることがある仮想環境構成要素１１０Ｂの右上隅には提供しないことを決定してもよい。

【0067】

一部の実施形態では、仮想環境作成モジュールは、照明条件、表示領域の光学特性、及び仮想オブジェクトの特性を分析し、それに応じて、仮想オブジェクトを仮想環境２１０に収容してもよい。照明特性は、仮想環境内の特定の位置に応じて光がより集中されるか、又は拡散され得るときの、仮想環境の異なる領域内の照明の特性のことを指す。光学特性は、屈折率、分散、吸収、散乱などを含む、光との相互作用に関する表示位置を取り囲む領域の特性のことを指す。例えば、仮想オブジェクトがガラスの後ろに配置された場合、仮想環境のその表示領域内の照明条件の種類を特に考慮して、その表示領域の光学特性が、仮想オブジェクトの外観に影響を与えてもよい。仮想オブジェクトの特性は、サイズ、形状、表面テクスチャ、反射率、又は色などの、仮想オブジェクトの属性のことを指す。例えば、仮想環境作成モジュールは、仮想オブジェクト２０８Ａの特性、仮想環境構成要素１１０Ａの照明特性、及び仮想環境構成要素１１０Ａ内の表示領域の光学特性を考慮して、仮想オブジェクト２０８Ａが、仮想環境構成要素１１０Ａの照明条件下でよりよく見えることができるということを決定してもよく、それに応じて、仮想オブジェクト２０８Ａを仮想環境構成要素１１０Ａの位置に収容してもよい。

【0068】

一部の実施形態では、仮想環境作成モジュールは、仮想オブジェクトを、仮想オブジェクトとの情報のやりとりに関するユーザの嗜好に基づく位置に収容する。そのようなユーザの嗜好は、過去にユーザによって実行された前の検索事例に基づいて、過去の嗜好から抽出されてもよい。次に、仮想環境作成モジュールは、仮想オブジェクトを、ユーザが仮想オブジェクトと情報をやりとりする可能性がより高い場所に割り当ててもよい。例えば、前の事例で、ユーザが仮想環境構成要素１１０Ｅの下部で仮想オブジェクトを見て情報をやりとりする可能性が高かった場合、仮想環境作成モジュールは、高優先度の仮想オブジェクトをその位置に置くことを決定してもよい。

【0069】

一部の実施形態では、各構成要素は、仮想オブジェクトが収容される好ましい空間を決定する事前に定義されたテンプレートを含む。例えば、絵画などの仮想オブジェクトを構成要素１１０Ａに配置するための好ましい空間は、構成要素１１０Ａの上側及び下側であってもよく、例えば、図２Ｂに見られるように、仮想オブジェクト２０８Ａ～２０８Ｂが、それに応じて収容されている。さらなる実施形態では、事前に定義されたテンプレートは、収容される仮想オブジェクトの特性によって調整され得る、事前に定義された光学特性及び照明を含む。しかし、図１に関して詳述されたように、仮想環境作成モジュール１０８は、仮想環境の部屋の各々の照明などの条件の調整も可能にする。

【0070】

一部の実施形態では、仮想環境作成モジュール１０８は、少なくとも１つの仮想環境２１０を生成する前に、予め定められた寸法又は形状を変更するようにさらに構成される。１つの実施形態では、構成要素の組み合わせが少なくとも１つの仮想オブジェクトを収容できないことに応答して、仮想環境作成モジュールは、仮想環境を生成する前に少なくとも１つの仮想オブジェクトに適合するように、少なくとも１つの構成要素の予め定められた寸法、形状、及び／又は他の特性、或いはこれらの組み合わせを変更する。例えば、仮想オブジェクト２０８Ａ～２０８Ｉの寸法が大き過ぎるため、選択された構成要素１１０Ａ～１１０Ｆの寸法内に適切に適合しなかった場合、仮想環境作成モジュールは、それに応じて、仮想オブジェクトを収容できるように構成要素１１０Ａ～１１０Ｆの寸法を変更してもよい。

【0071】

一部の実施形態では、少なくとも１つの仮想環境２１０が、ユーザ１２２Ａ～１２２Ｂなどのユーザ間のビデオ通信を可能にするテレビ会議プラットフォームの一部としてホストされる。テレビ会議プラットフォームは、ユーザグラフィック表現２２２Ａ～２２２Ｂなどのユーザグラフィック表現を介してユーザ間の通信を可能にする通信モジュールを備える。通信モジュールは、ユーザが他のユーザを、少なくとも１つの仮想環境内の共有体験を経験することに招待することを、さらに可能にする。例えば、ユーザ１２２Ａは、検索照会を行ったことによって、仮想環境２１０の作成者になっていてもよい。仮想環境２１０が生成された後に、ユーザ１２２Ａは、通信モジュールを介してユーザ１２２Ｂを招待していてもよい。テレビ会議プラットフォームは、仮想環境２１０によって、チャット、画面共有、参加者、マルチメディアファイルの送信若しくは受信、挙手、会議概要の作成、オブジェクトの移動、ゲームのプレイ、トランザクションの実行、プライベートな会話若しくはグループの会話への参加、及び／又は同様のことなどの、複数の社会的交流を可能にしてもよい。そのようなテレビ会議プラットフォームは、仮想環境内の通信を可能にするために、特に、ピアツーピア（Ｐ２Ｐ：ｐｅｅｒ－ｔｏ－ｐｅｅｒ）アーキテクチャ、選択的転送ユニット（ＳＦＵ：ｓｅｌｅｃｔｉｖｅ ｆｏｒｗａｒｄｉｎｇ ｕｎｉｔ）アーキテクチャ、メディア結合ユニット（ＭＣＵ：ｍｅｄｉａ ｃｏｍｂｉｎｉｎｇ ｕｎｉｔ）アーキテクチャを含む、ＷｅｂＲＴＣアーキテクチャのうちの１つなどの、任意の適切なシステムアーキテクチャを使用してもよい。

【0072】

仮想環境２１０は、芸術作品、美術館の収集品、商業展示品、又はこれらの組み合わせのカスタマイズされた展示会などの、複数の体験をリアルタイムに共有することを可能にしてもよく、ユーザ１２２Ａ～１２２Ｂは、対応するユーザグラフィック表現２２２Ａ～２２２Ｂを介してこれらの展示会を探索することができ、仮想展示会の要素に加えて、他のユーザと情報をやりとりすることができる。これらの仮想展示会は、世界のさまざまな部分からの多数のユーザを収容するために、仮想環境２１０の複数のインスタンスにマルチキャストされてもよい。例えば、展示会の主催者が、仮想展示会をホストするために少なくとも１つの仮想環境を作成する場合、この主催者は、世界の任意の部分から複数のユーザを招待してもよい。次に、仮想環境２１０は、招待客のさまざまなクライアントデバイスにマルチキャストされ、ユーザが仮想環境２１０内で仮想体験を共有できるようにする。

【0073】

一部の実施形態では、仮想環境作成モジュールは、関連する仮想オブジェクト２０８Ａ～２０８Ｇを含んでいる少なくとも１つの仮想環境２１０の提案された訪問ルート２１２を生成する。さらなる実施形態では、仮想環境作成モジュール１０８は、提案された訪問ルート２１２を考慮して、少なくとも１つの仮想環境２１０のレイアウトを決定する。この実施形態は、少なくとも１つの仮想環境２１０に含められる適切な仮想オブジェクトの選択後に実施されてもよい。例えば、図２Ｂの例では、提案された訪問ルート２１２は、仮想環境構成要素１１０Ａで開始して、ユーザが仮想オブジェクト２０８Ａ～２０８Ｂを見ることができるようにし、次に、仮想環境構成要素１１０Ｂ及び１１０Ｃに進み、ユーザが仮想オブジェクト２０８Ｅを見ることができるようにし、次に、仮想環境構成要素１１０Ｄに進み、ユーザが仮想オブジェクト２０８Ｃを見ることができるようにし、次に、仮想環境構成要素１１０Ｅに進み、ユーザが仮想オブジェクト２０８Ｈ、２０８Ｉ、及び２０８Ｇを見ることができるようにし、その後、仮想環境構成要素１１０Ｆを通って、ユーザが仮想オブジェクト２０８Ｆを見ることができるようにし、オブジェクト２０８Ｄを見るために仮想環境構成要素１１０Ｂで終了してもよい。提案された訪問ルート２１２は、ルートをユーザに提案するために、少なくとも１つの仮想環境の床に明確にマーク付けされてもよい。しかし、ユーザは、自由に、提案された訪問ルート２１２に従うか、又はユーザの好みの任意の順序で探索することができてもよい。

【0074】

図３は、実施形態に従って、仮想アートギャラリーの部屋３００を例示する略図を示す。部屋３００は、図１～２Ａに示されたシステム１００～２００などの動的に生成される仮想環境を可能にするシステムの仮想環境作成モジュールによって生成された仮想環境の一部である。したがって、仮想アートギャラリーの部屋３００は、例えば、ユーザＡからの検索照会に応答して生成された多くの仮想環境構成要素のうちの１つであり、この検索照会のテーマに一致するように、部屋３００のテーマが選択されている。

【0075】

この例では、部屋３００は、「ルネサンス芸術」という検索照会語によって作成されており、したがって、取り出されて収容された芸術作品２０８Ａ～２０８Ｃはすべて、検索されたテーマに一致する。この例では、芸術作品２０８Ａはモナリザであり、芸術作品２０８Ｂはケルビムであり、芸術作品２０８Ｃはウィトルウィウス的人体である。ユーザ１２２Ａは、ユーザグラフィック表現２２２Ａを介して部屋３００を探索してもよく、ユーザ１２２Ｂを、対応するユーザグラフィック表現２２２Ｂを介して部屋３００を経験することに招待してもよい。ユーザ１２２Ａ及び１２２Ｂは、対応するユーザグラフィック表現２２２Ａ～２２２Ｂを介して、互いに、及び仮想オブジェクト２０８Ａ～２０８Ｃ又は部屋の他の要素と、情報をやりとりしてもよい。

【0076】

部屋３００は、仮想アートギャラリーの複数の部屋のうちの１つであってもよく、各部屋は、仮想アートギャラリーの一部として組み立てられた構成要素である。したがって、仮想アートギャラリーは、ドア３０２によって図３で分離された他の領域を含んでもよく、各領域は、検索照会のテーマ、すなわちルネサンス芸術に含まれる他の仮想オブジェクトへのアクセスを提供してもよい。しかし、検索が、「有名な油絵」などのように、より広かった場合、仮想環境の他の部屋が、異なる時代及び様式からの芸術作品によって占められていてもよいが、各部屋は、限定されるものではないが、「有名な油絵」に関連する１つのテーマを含むのが好ましいことがある。

【0077】

部屋３００は、この場合、アートギャラリーの部屋３００のテーマに一致するベンチ３０４、ライト３０６などの他の要素をさらに含む。部屋３００は、クラシック音楽などの、部屋３００の雰囲気に一致する音声を提供するスピーカ３０８をさらに含み、この音声は、ユーザによって調整されることも可能である。

【0078】

図４は、実施形態に従って、動的に生成される仮想環境を提供するための方法４００のブロック図を示す。

【0079】

方法４００は、図１～図２Ａを参照して説明されたシステム１００～２００などのシステムによって実施されてもよい。方法４００は、ステップ４０２で、少なくとも１つのサーバコンピュータのメモリに格納された検索エンジンによって、少なくとも１つのクライアントデバイスを介して入力された１つ又は複数の検索語を含んでいる検索照会を受信することから開始する。次に、ステップ４０４で、方法は、検索エンジンによって、少なくとも１つの属性に基づいてカテゴリー的にインデックス付けされた複数の仮想オブジェクトを格納している少なくとも１つのデータベースから、検索照会の少なくとも１つの用語に関連付けられた複数の仮想オブジェクトを表すデータを取り出すことによって進む。ステップ４０６で、方法は、このデータを、少なくとも１つのサーバコンピュータのメモリに格納された仮想環境作成モジュールに転送することによって続行する。最後に、ステップ４０８で、方法４００は、仮想環境作成モジュールによって、１つ又は複数の選択された仮想環境構成要素を３Ｄ仮想環境内に配置し、仮想オブジェクトを選択された構成要素（複数可）内に配置することによって、少なくとも１つの３Ｄ仮想環境を生成することによって終了する。

【0080】

図５は、動的に生成される仮想環境を提供するため、並びに特に、仮想オブジェクトの表示優先度を決定し、仮想オブジェクトの数及び表示優先度のうち少なくとも一部に基づいて少なくとも１つの仮想環境のレイアウトを決定するために、方法４００と組み合わせて実行され得るさらなるステップを詳述する方法５００のブロック図を示す。

【0081】

方法５００は、ステップ５０２で、表示される関連する仮想オブジェクトの数を決定することから開始する。次に、ステップ５０４で、方法は、関連する仮想オブジェクトの表示優先度を決定することによって進む。最後に、ステップ５０６で、方法は、関連する仮想オブジェクトの数及び表示優先度を考慮して、少なくとも１つの仮想環境のレイアウトを決定することによって終了する。

【0082】

特定の実施形態が説明され、添付の図面に示されたが、そのような実施形態が単に広い本発明の例示であり、限定ではないということ、及び当業者が、さまざまな他の変更を思い付いてもよいため、本発明が、示されて説明された特定の構造及び配置に限定されないということが、理解されるべきである。したがって本説明は、限定ではなく例示と考えられるべきである。

【図1】

【図2A】

【図2B】

【図3】

【図4】

【図5】

【外国語明細書】