特開 2024-166710 仮想空間制御装置、仮想空間制御方法、およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024166710

(43)【公開日】2024-11-29

(54)【発明の名称】仮想空間制御装置、仮想空間制御方法、およびプログラム

(51)【国際特許分類】

   G06T 19/00 20110101AFI20241122BHJP

【ＦＩ】

G06T19/00 300A

【審査請求】有

【請求項の数】15

【出願形態】ＯＬ

(21)【出願番号】P 2023083004

(22)【出願日】2023-05-19

(11)【特許番号】

(45)【特許公報発行日】2024-04-09

(71)【出願人】

【識別番号】000003193

【氏名又は名称】ＴＯＰＰＡＮホールディングス株式会社

(74)【代理人】

【識別番号】100149548

【弁理士】

【氏名又は名称】松沼 泰史

(74)【代理人】

【識別番号】100139686

【弁理士】

【氏名又は名称】鈴木 史朗

(74)【代理人】

【識別番号】100169764

【弁理士】

【氏名又は名称】清水 雄一郎

(74)【代理人】

【識別番号】100147267

【弁理士】

【氏名又は名称】大槻 真紀子

(72)【発明者】

【氏名】岡田 亮

(72)【発明者】

【氏名】大野 森太郎

(72)【発明者】

【氏名】小泉 香織

【テーマコード（参考）】

5B050

【Ｆターム（参考）】

5B050AA03

5B050BA09

5B050CA07

5B050CA08

5B050EA26

5B050FA02

(57)【要約】

【課題】仮想空間に配置されるオブジェクトが有する世界観にユーザが没入しやすい環境を提供できるようにする。
【解決手段】仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御部を備えて仮想空間制御装置を構成する。
【選択図】図５

【特許請求の範囲】

【請求項1】

仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御部
を備える仮想空間制御装置。

【請求項2】

前記仮想空間制御部は、前記拡張状態として、前記オブジェクトが所定の平面方向にて延伸していく平面拡張の状態を再生する
請求項１に記載の仮想空間制御装置。

【請求項3】

前記仮想空間において、前記平面拡張が行われるオブジェクトに対して、前記平面拡張が可能なオブジェクトであることを示す拡張状態標示が設けられる
請求項２に記載の仮想空間制御装置。

【請求項4】

前記仮想空間制御部は、前記拡張状態として、拡張するオブジェクトが所定形状のオブジェクト拡張空間の内壁を延伸していく空間内壁拡張の状態を再生する
請求項１に記載の仮想空間制御装置。

【請求項5】

前記仮想空間において、前記空間内壁拡張が行われるオブジェクトに対して、前記空間内壁拡張が可能なオブジェクトであることを示す拡張状態標示が設けられる
請求項４に記載の仮想空間制御装置。

【請求項6】

前記仮想空間制御部は、前記仮想空間において存在するアバターが、拡張対象のオブジェクトに対応して定められた前記仮想空間における所定のトリガ領域に到達したことに応じて、前記拡張状態の再生を開始する
請求項１から５のいずれか一項に記載の仮想空間制御装置。

【請求項7】

前記仮想空間制御部は、前記オブジェクトが前記拡張状態にあるもとで、拡張されるオブジェクトに対する視点の変更が可能とされる
請求項１から５のいずれか一項に記載の仮想空間制御装置。

【請求項8】

前記仮想空間制御部は、拡張前のオブジェクトの全体または一部を起点として拡張された内容を有する拡張オブジェクトのデータを利用して、前記拡張状態を再生する
請求項１から５のいずれか一項に記載の仮想空間制御装置。

【請求項9】

前記拡張オブジェクトのデータは、拡張前のオブジェクトの入力に応じて、入力されたオブジェクトを拡張した拡張オブジェクトを生成するように学習させた学習済みモデルを利用して生成される
請求項８に記載の仮想空間制御装置。

【請求項10】

仮想空間制御装置における仮想空間制御方法であって、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御ステップ
を備える仮想空間制御方法。

【請求項11】

コンピュータを、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御部
として機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、仮想空間制御装置、仮想空間制御方法、およびプログラムに関する。

【背景技術】

【0002】

３Ｄ画像による美術品を展示するバーチャル美術館を３Ｄ画像により構築するようにされた技術が知られている（例えば、特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００３－２９６５８７号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

仮想空間において美術品等の作品としてのオブジェクトを展示するにあたっては、ユーザが美術品の有する世界観、雰囲気といったものに没入できる環境が整えられれば、鑑賞の面白みも増して好ましい。

【0005】

本発明は、上記した課題を考慮して、仮想空間に配置されるオブジェクトが有する世界観にユーザが没入しやすい環境を提供できるようにすることを目的とする。

【課題を解決するための手段】

【0006】

上述した課題を解決する本発明の一態様は、仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御部を備える仮想空間制御装置である。

【0007】

本発明の一態様は、仮想空間制御装置における仮想空間制御方法であって、仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御ステップを備える仮想空間制御方法である。

【0008】

本発明の一態様は、コンピュータを、仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御部として機能させるためのプログラムである。

【発明の効果】

【0009】

本発明によれば、仮想空間に配置されるオブジェクトが有する世界観にユーザが没入しやすい環境を提供できるようになるとの効果が得られる。

【図面の簡単な説明】

【0010】

【図1】本実施形態における仮想空間制御システムの全体的な構成例を示す図である。

【図2】本実施形態における平面拡張の態様例を示す図である。

【図3】本実施形態における平面拡張の態様例を示す図である。

【図4】本実施形態における平面拡張の態様例を示す図である。

【図5】本実施形態における平面拡張の態様例を示す図である。

【図6】本実施形態における空間内壁拡張の態様例を示す図である。

【図7】本実施形態における空間内壁拡張の態様例を示す図である。

【図8】本実施形態における空間内壁拡張の態様例を示す図である。

【図9】本実施形態における空間内壁拡張の態様例を示す図である。

【図10】本実施形態における空間内壁拡張の態様例を示す図である。

【図11】本実施形態における空間内壁拡張の態様例を示す図である。

【図12】本実施形態における空間内壁拡張の態様例を示す図である。

【図13】本実施形態における仮想空間制御装置の機能構成例を示す図である。

【図14】本実施形態における原オブジェクトデータの構造例を示す図である。

【図15】本実施形態における拡張オブジェクトデータの構造例を示す図である。

【図16】本実施形態における仮想空間制御装置が、美術品オブジェクトの拡張に関連して実行する処理手順例を示すフローチャートである。

【発明を実施するための形態】

【0011】

＜実施形態＞
［仮想空間制御システムの全体的な構成例］
図１は、本実施形態における仮想空間制御システムの全体的な構成例を示している。本実施形態の仮想空間制御システムは、仮想空間制御装置１００と１以上のユーザ端末２００とを備える。
仮想空間制御装置１００とユーザ端末２００とはネットワーク経由で通信可能に接続される。

【0012】

仮想空間制御装置１００は、美術品を再現した３次元による美術品オブジェクトを配置した３次元の仮想空間（メタバース）を構築する。このような仮想空間は、例えば、美術品が展示された実在もしくは仮想の美術館を再現したものであってよい。
仮想空間制御装置１００は、仮想空間においてユーザ端末２００に対応するユーザのアバターを存在させることで、仮想空間による美術館（仮想美術館）にてアバターが美術品を鑑賞する環境を提供する。

【0013】

また、ユーザは、ユーザ端末２００により、仮想空間内に存在する対応のアバターの行動を指示するなど、対応のアバターに関する各種操作を行うことも可能とされる。

【0014】

仮想空間制御装置１００は、ネットワーク上に存在する単一のサーバ等の装置として設けられてもよいし、ネットワーク上において複数に分散されて各々が所定の機能を有するサーバ等の装置間で連携して処理を実行することにより実現されてもよい。

【0015】

ユーザ端末２００は、スマートフォン、タブレット端末、パーソナルコンピュータ、ウェアラブルＶＲ端末等であってよい。

【0016】

［美術品オブジェクト拡張の概要］
ユーザは、ユーザ端末２００を操作して、仮想美術館内にてアバターに美術品を鑑賞させるように行動させることができる。ユーザは、ユーザ端末２００にて表示される仮想美術館の映像により、自身に対応するアバターが仮想美術館にて美術品を鑑賞している様子を通じて、自身も仮想美術館内の美術品を鑑賞することになる。

【0017】

本実施形態においては、アバターが仮想美術館にて１つの美術品としてのオブジェクト美術品を鑑賞するにあたり、当該美術品としてのオブジェクトが仮想美術館内で時間経過に応じて拡張されていくようにして変化が与えられる。

【0018】

本実施形態において美術品としてのオブジェクトが拡張される態様（拡張状態）として、平面拡張と空間内壁拡張との２例を挙げる。
平面拡張は、例えば絵画としての平面的なオブジェクトが時間経過に応じて平面方向に沿って拡張していくようにされる拡張状態である。
空間内壁拡張は、仮想美術館において設定された所定形状の三次元空間の内壁に沿って二次元的な絵画としてのオブジェクトが時間経過に応じて三次元的に拡張していくようにされる拡張状態である。

【0019】

［平面拡張の態様例］
図２～図５を参照して、平面拡張の一態様例について説明する。
図２においては、仮想美術館内にてある１つの絵画としての美術品オブジェクトＯＢＪが壁に掛けられた状態で展示されており、当該美術品オブジェクトＯＢＪに向かってアバターＡＶＴが近づいている様子の映像が示されている。また、図２においては、美術品オブジェクトＯＢＪの手前から所定の距離を隔てた床の位置にて、拡張トリガエリアＡＲ（トリガ領域、拡張状態標示の一例）が示されている。

【0020】

ユーザは、図２の仮想美術館にて展示されている美術品オブジェクトＯＢＪを拡張させたい場合には、ユーザ端末２００を操作して、アバターＡＶＴが拡張トリガエリアＡＲに位置するように移動させる。拡張トリガエリアＡＲは、対応の美術品オブジェクトＯＢＪについて平面拡張が可能であることを示すとともに、平面拡張のトリガを発生させる位置であることを示す。

【0021】

アバターＡＶＴが拡張トリガエリアＡＲに位置したことに応じて、図２に示されるオリジナルの美術品オブジェクトＯＢＪの状態を起点として、美術品オブジェクトＯＢＪが拡張を開始する。
図３は、美術品オブジェクトＯＢＪが拡張を開始して或る時間を経過したときの様子を示している。同図における矢印Ａ～Ｄは、美術品オブジェクトＯＢＪが拡張される方向を示している。
同図に示されるように、美術品オブジェクトＯＢＪは、展示されている壁面に沿って、図２の初期状態からさらに上下左右の各方向に拡張されている。つまり、美術品オブジェクトＯＢＪは、壁に対応する平面方向に沿って拡張されている。

【0022】

同図に示される美術品オブジェクトＯＢＪの拡張としては、図２に示した初期状態の絵画を拡大させていくのではなく、初期状態の絵画につながる描写部分が新たに描画されていくようにして延伸されていくものとなる。

【0023】

図４は、図３の状態に対応するときから或る時間を経過したことに応じて、美術品オブジェクトＯＢＪがさらに図３の状態から拡張された状態を示している。
同図においては、美術品オブジェクトＯＢＪは、図３の状態からさらに上下左右の各方向に拡張されている。そのうえで、下方向への拡張部分については、矢印Ｂにより示されるように、床に対応する位置にまで拡張されると、さらに床に沿って手前に延伸していくようにしてさらに拡張していくようにされている。

【0024】

図５は、図４の状態からさらに或る時間を経過して、美術品オブジェクトＯＢＪの拡張が完了した段階の様子を示している。
同図における美術品オブジェクトＯＢＪは、図４の状態からさらに各方向に拡張されており、床部分においては、アバターＡＶＴが位置していた拡張トリガエリアＡＲまでも含む程度にまで延伸されている。
このような状態では、アバターＡＶＴが絵画により表される環境内にて存在しているような状態となることから、同図の映像をユーザ端末２００により鑑賞しているユーザも、同様に絵画により表される環境内にて存在しているかのような感覚を有することができる。つまり、美術品オブジェクトＯＢＪが拡張されることで、仮想美術館にて展示される美術品オブジェクトＯＢＪとしての絵画が有する世界観にユーザが没入しやすい環境が得られる。

【0025】

また、美術品オブジェクトＯＢＪが拡張を開始した後は、拡張トリガエリアＡＲの外にアバターＡＶＴが移動しても美術品オブジェクトＯＢＪの拡張が継続されてよい。この場合、ユーザは、仮想美術館内の床にて拡張されている美術品オブジェクトＯＢＪの上でアバターＡＶＴを移動させつつ視点も移動させながら鑑賞することも可能とされる。これにより、ユーザは、アバターＡＶＴの行動を通じて、自分も拡張された美術品オブジェクトＯＢＪを目の前にして鑑賞しているかのような感覚を得ることができる。

【0026】

なお、拡張の対象とされた美術品オブジェクトＯＢＪの周囲に、拡張トリガエリアＡＲに到達して美術品オブジェクトＯＢＪの拡張を開始させたアバターＡＶＴ以外のアバターも存在している場合がある。
この場合において、拡張されている美術品オブジェクトＯＢＪの様子は、アバターＡＶＴ以外のアバターに対応するユーザのユーザ端末２００においても同様に表示されてよい。あるいは、逆に、アバターＡＶＴ以外のアバターに対応するユーザのユーザ端末２００においては反映されずに、美術品オブジェクトＯＢＪが拡張されていない様子が表示されるようにしてもよい。

【0027】

なお、美術品オブジェクトＯＢＪの鑑賞を終えたユーザが、アバターＡＶＴを拡張された美術品オブジェクトＯＢＪの外に移動させる操作を行うことで、美術品オブジェクトＯＢＪが拡張前の図２の状態に戻るようにされてよい。

【0028】

なお、美術品オブジェクトＯＢＪが拡張している途中において、アバターＡＶＴが美術品オブジェクトＯＢＪから所定以上の距離となるまで移動したことに応じて、美術品オブジェクトＯＢＪが拡張を中断して拡張前の図２の状態に戻るようにされてもよい。

【0029】

［空間内壁拡張の態様例］
次に、図６～図１２を参照して、空間内壁拡張の一態様例について説明する。
図６は、仮想美術館にて展示される美術品オブジェクトＯＢＪのうち、空間内壁拡張が可能な或る１つの美術品オブジェクトＯＢＪの近傍にまでアバターＡＶＴが位置した状態を示している。
同図における美術品オブジェクトＯＢＪは、絵画とされて、仮想美術館内の壁に掛けられた状態で展示されている。また、この場合の美術品オブジェクトＯＢＪの周囲は、例えば、当該美術品オブジェクトＯＢＪとしての絵画の内容が渦巻き状に動かされている状態（拡張状態標示の一例）となっていることで、当該美術品オブジェクトＯＢＪについては空間内壁拡張が可能であることが表されている。

【0030】

ユーザは、同図の美術品オブジェクトＯＢＪについて空間内壁拡張された様子を鑑賞しようとする場合には、ユーザは、美術品オブジェクトＯＢＪが収められた額縁の中にアバターＡＶＴを入り込ませるようなイメージでアバターＡＶＴを移動させる操作（空間入場操作）をユーザ端末２００により行う。空間入場操作が行われたことに応じて、アバターＡＶＴは、空間内壁拡張が行われる三次元空間であるオブジェクト拡張空間（トリガ領域の一例）内に入場する。

【0031】

なお、オブジェクト拡張空間への入場の態様は、上記の例に限定されない。オブジェクト拡張空間への入場の態様は、例えば仮想美術館内に設けられた所定形状の室内に入場するといった態様であってもよい。また、仮想美術館の美術品オブジェクトＯＢＪの近傍に設けられた入場ボタンをユーザ（あるいはユーザ端末２００に対するユーザ操作に応じて行動するアバターＡＶＴ）が操作することに応じて、アバターＡＶＴがオブジェクト拡張空間に入場可能となるようにされてもよい。

【0032】

図７は、アバターＡＶＴがオブジェクト拡張空間内に入場したときの状態が示されている。同図では、オブジェクト拡張空間が半球による天面と平らな底面とによる形状とされた例を示している。同図に示されるように、オブジェクト拡張空間内では、図６において示されていたオリジナル（拡張前）の美術品オブジェクトＯＢＪの状態を起点として、オブジェクト拡張空間の内壁に沿って延伸するようにして拡張されていく。
なお、オブジェクト拡張空間は、半球による天面と平らな底面とによる形状に限定されない。オブジェクト拡張空間は、例えば直方体、立方体、三角錐、円錐、球面以外の曲面を有する形状等であってよい。

【0033】

図８は、図７の状態から或る時間を経過したときの拡張途中のオブジェクト拡張空間内の様子を示している。
図９は、図７の状態からさらに或る時間を経過したときの拡張途中のオブジェクト拡張空間内の様子を示している。
図１０は、図８の状態からさらに或る時間を経過したときの拡張途中のオブジェクト拡張空間内の様子を示している。
図７～図１０に示されるように、美術品オブジェクトＯＢＪは、オブジェクト拡張空間の半天球面と内壁の底面とに沿って時間経過に応じて延伸していくようにして拡張される。

【0034】

図１１、図１２は、美術品オブジェクトＯＢＪの拡張が完了した状態のオブジェクト拡張空間内の様子を示している。
図１１、図１２に示されるように、美術品オブジェクトＯＢＪが拡張されたオブジェクト拡張空間内ではアバターＡＶＴが移動したり視点を変更したりすること可能とされている。オブジェクト拡張空間内にてアバターＡＶＴが移動することに応じて、オブジェクト拡張空間内を観察する視点も変更されることから、図１１と図１２とでは、観察される美術品オブジェクトＯＢＪとしての風景の視野が異なっている。

【0035】

ユーザ端末２００には、上記のような図６～図１２に示される態様の映像が表示される。このように表示される映像を視ることで、ユーザは、平空間において３６０度方向で美術品オブジェクトＯＢＪとしての絵画が有する世界観、イメージを体験することができる。このため、空間内壁拡張によってもユーザが没入しやすい環境が得られる。

【0036】

オブジェクト拡張空間においては、アバターＡＶＴがオブジェクト拡張空間から退出して仮想美術館のフロアに戻るための出口が設けられてよい。アバターＡＶＴが出口から仮想美術館のフロアに戻ることに応じて、空間内壁拡張空間における美術品オブジェクトＯＢＪの拡張が解除されてよい。

【0037】

なお、例えばアバターＡＶＴとともに、他のアバターも一緒に行動しているような場合において、アバターＡＶＴの後から他のアバターがオブジェクト拡張空間に入場してきたときには、既に入場しているアバターＡＶＴのユーザに見えているのと同じように拡張されている美術品オブジェクトＯＢＪの状態が他のアバターのユーザにも見えるようにされてよい。
あるいは、アバターＡＶＴの後から他のアバターがオブジェクト拡張空間に入場してきた場合には、アバターＡＶＴとは無関係に、美術品オブジェクトＯＢＪの拡張が開始される様子が他のアバターのユーザに見えるようにされてよい。

【0038】

［仮想空間制御装置の機能構成例］
図１３は、仮想空間制御装置１００の機能構成例を示している。同図に示される仮想空間制御装置１００としての機能は、仮想空間制御装置１００としてのハードウェアが有するＣＰＵ（Central Processing Unit）がプログラムを実行することにより実現される。
同図の仮想空間制御装置１００は、通信部１０１、制御部１０２、および記憶部１０３を備える。

【0039】

通信部１０１は、ネットワーク経由でユーザ端末２００と通信可能に接続する。

【0040】

制御部１０２は、仮想空間制御装置１００における各種の制御を実行する。制御部１０２は、拡張オブジェクトデータ生成部１２１と仮想空間制御部１２２とを備える。

【0041】

拡張オブジェクトデータ生成部１２１は、仮想美術館において展示される美術品オブジェクトＯＢＪに対応する拡張オブジェクトデータを生成する。
拡張オブジェクトデータは、図２～図１０に示したように、美術品オブジェクトＯＢＪを拡張させたデータである。拡張オブジェクトデータ生成部１２１は、オリジナルの美術品オブジェクトのデータ（原オブジェクトデータ）を利用して、拡張オブジェクトデータを生成してよい。

【0042】

拡張オブジェクトデータ生成部１２１は、原オブジェクトデータの入力に応じて、原オブジェクトデータが示す絵画の内容を拡張させるようにされた学習済みモデルを利用して拡張オブジェクトデータを生成してよい。このような学習済みモデルは、例えば具体的には、入力された原オブジェクトが示すオリジナルの絵画の内容に基づいて、当該絵画の内容に対して自然につながる態様の周辺のオブジェクトのデータを生成するように学習モデルを学習させることにより構築されてよい。
拡張オブジェクトデータ生成部１２１が生成した拡張オブジェクトデータは、拡張オブジェクトデータ記憶部１３３が記憶する。

【0043】

なお、拡張オブジェクトデータ生成部１２１としての機能は仮想空間制御装置１００以外の外部の装置が備えてよい。この場合には、拡張オブジェクトデータ生成部１２１としての機能を有する外部の装置が生成した拡張オブジェクトデータが、所定の伝送経路で仮想空間制御装置１００に伝送され、仮想空間制御装置１００が伝送されたデータを拡張オブジェクトデータ記憶部１３３に記憶させてよい。

【0044】

仮想空間制御部１２２は、本実施形態の仮想美術館を構築し、構築された仮想美術館内でアバターＡＶＴを行動させる制御を行う。また、仮想空間制御部１２２は、美術品オブジェクトＯＢＪを拡張させる制御を行う。

【0045】

記憶部１０３は、仮想空間制御装置１００に対応する各種の情報を記憶する。記憶部１０３は、仮想空間データ記憶部１３１、原オブジェクトデータ記憶部１３２、および拡張オブジェクトデータ記憶部１３３を備える。

【0046】

仮想空間データ記憶部１３１は、仮想空間制御部１２２が仮想美術館としての仮想空間を構築するのに用いるデータ（仮想空間データ）を記憶する。仮想空間構築データは、仮想美術館としての構造物を構築するデータを含む。また、仮想美術館の映像とともに出力される音を再現するオーディオデータも含まれてよい。

【0047】

原オブジェクトデータ記憶部１３２は、原オブジェクトデータを記憶する。原オブジェクトデータは、仮想美術館において展示される、拡張されていないオリジナルの美術品オブジェクトＯＢＪを再現するオブジェクトデータである。
仮想空間制御部１２２は、原オブジェクトデータを利用して仮想美術館において展示する拡張前の状態の美術品オブジェクトＯＢＪを再現する。

【0048】

図１４は、原オブジェクトデータ記憶部１３２が１つの美術品オブジェクトＯＢＪに対応して記憶する原オブジェクトデータの構造例を示している。同図に示されるように、１つの美術品オブジェクトＯＢＪに対応する原オブジェクトデータは、対応の美術品オブジェクトＯＢＪを一意に示すオブジェクトＩＤが対応付けられる構造を有する。

【0049】

説明を図１３に戻す。拡張オブジェクトデータ記憶部１３３は、拡張オブジェクトデータ生成部１２１が生成した拡張オブジェクトデータを記憶する。

【0050】

図１５は、拡張オブジェクトデータ記憶部１３３が１つの美術品オブジェクトＯＢＪに対応して記憶する拡張オブジェクトデータの構造例を示している。
同図に示されるように、１つの原オブジェクトに対応する拡張オブジェクトデータは、対応の美術品オブジェクトＯＢＪを一意に示すオブジェクトＩＤが対応付けられる構造を有する。
同図の拡張オブジェクトデータのフィールドに格納される拡張オブジェクトデータは、対応の美術品オブジェクトＯＢＪが平面拡張するものとされている場合には、対応の美術品オブジェクトＯＢＪの平面拡張を再生する平面拡張オブジェクトデータとなり、空間内拡張するものとされている場合には、美術品オブジェクトＯＢＪの空間内壁拡張を再生する空間内拡張オブジェクトデータとなる。

【0051】

図１４および図１５から理解されるように、本実施形態においては、同じ美術品オブジェクトＯＢＪに対応する原オブジェクトデータと拡張オブジェクトデータとに対して、対応の美術品オブジェクトＯＢＪに付与されたオブジェクトＩＤを対応付けて記憶するようにしている。これにより、同じ美術品オブジェクトＯＢＪに対応する原オブジェクトデータと拡張オブジェクトデータとを対応付けることができる。

【0052】

なお、仮想美術館において展示される全ての美術品オブジェクトＯＢＪが拡張可能とされなくともよく、仮想美術館において展示される一部の美術品オブジェクトＯＢＪが拡張可能とされてもよい。この場合、拡張オブジェクトデータ記憶部１３３は、原オブジェクトデータ記憶部１３２に記憶される全ての原オブジェクトデータのうち、対応の美術品オブジェクトＯＢＪについて拡張可能とされた原オブジェクトデータに対応する拡張オブジェクトデータを記憶してよい。

【0053】

［処理手順例］
図１６のフローチャートを参照して、本実施形態の仮想空間制御装置１００が、美術品オブジェクトＯＢＪの拡張に関連して実行する処理手順例について説明する。同図の処理は、平面拡張と空間内壁拡張とで共通とされてよい。

【0054】

ステップＳ１００：仮想空間制御装置１００において仮想空間制御部１２２は、拡張トリガが発生するのを待機する。
拡張トリガは、対象の美術品オブジェクトＯＢＪが平面拡張するものである場合には、アバターＡＶＴが拡張トリガエリアＡＲ内に到達したことに応じて発生される。また、拡張トリガは、対象の美術品オブジェクトＯＢＪが空間内壁拡張するものである場合には、仮想空間制御部１２２が、ユーザ端末２００に対して行われた空間入場操作を受け付けたことに応じて発生される。

【0055】

ステップＳ１０２：拡張トリガが発生すると、仮想空間制御部１２２は、対象の美術品オブジェクトＯＢＪのオブジェクトＩＤに対応付けられた拡張オブジェクトデータを、拡張オブジェクトデータ記憶部１３３から取得する。

【0056】

ステップＳ１０４：仮想空間制御部１２２は、取得した拡張オブジェクトデータを再生することで、平面拡張または空間内壁拡張により美術品オブジェクトＯＢＪを拡張させる。

【0057】

ステップＳ１０６：仮想空間制御部１２２は、美術品オブジェクトＯＢＪが拡張されている状態において、拡張範囲内にてアバターＡＶＴを移動させる操作が行われたか否かを判定する。
ここでの拡張範囲は、平面拡張の場合には、例えば仮想美術館の床にて拡張されている美術品オブジェクトＯＢＪの範囲であってよい。また、拡張範囲は、空間内壁拡張の場合には、オブジェクト拡張空間内とされてよい。

【0058】

ステップＳ１０８：拡張範囲内にてアバターＡＶＴを移動させる操作が行われたことに応じて、仮想空間制御部１２２は、操作に応じた方向、速度で拡張範囲内にてアバターＡＶＴを移動させる。

【0059】

ステップＳ１１０：ステップＳ１０６にてアバターＡＶＴを移動させる操作は行われていないと判定された場合、あるいはステップＳ１０８の処理の後、仮想空間制御部１２２は、ユーザ端末２００に対して視点を変更する操作（視点変更操作）が行われたか否かを判定する。視点変更操作により変更される視点は、アバターＡＶＴの視線の方向として指定されてもよいし、アバターＡＶＴとは無関係に任意に指定されてもよい。

【0060】

ステップＳ１１２：視点変更操作が行われた場合、仮想空間制御部１２２は、視点移動操作により指定された視点に変更する。

【0061】

ステップＳ１０６～ステップＳ１１２の処理により、アバターＡＶＴが拡張範囲内に存在しているときに、ユーザがユーザ端末２００を操作することにより、アバターＡＶＴの移動、視点の変更が可能とされる。

【0062】

ステップＳ１１４：ステップＳ１１０にて視点変更操作が行われないと判定された場合、あるいはステップＳ１１２の処理の後、仮想空間制御部１２２は、アバターＡＶＴが拡張範囲外に移動したか否かを判定する。
アバターＡＶＴが拡張範囲外に移動していないと判定した場合には、ステップＳ１０６に処理が戻される。

【0063】

ステップＳ１１６：アバターＡＶＴが拡張範囲外に移動すると、仮想空間制御部１２２は、これまでの美術品オブジェクトＯＢＪの拡張を解除する。

【0064】

＜変形例＞
以下、本実施形態の変形例について説明する。以下の変形例は、適宜組み合わされてよい。

【0065】

例えば風景が描写されている絵画等の美術品オブジェクトＯＢＪを拡張している際には、例えば、風により草木、人物の髪や衣類等がなびいていたり、雲が動いていたりする様子などが表されるようにしてよい。この場合には、拡張された美術品オブジェクトＯＢＪに動きを与えるように生成された拡張オブジェクトデータが利用されてよい。
さらには、拡張オブジェクトデータに音のデータも含めることで、美術品オブジェクトＯＢＪの内容に応じて、例えば周囲において聞こえる人、動物、風、川の流れ、雨等の音がユーザ端末２００にて出力されるようにしてよい。

【0066】

例えば、屋外の様子が描写された絵画等の美術品オブジェクトＯＢＪを拡張している際に、現在における現実の天候が反映されるようにしてよい。
具体的には、美術品オブジェクトＯＢＪが拡張されている空間範囲の様子として、現在の天候が晴天であれば、例えば日なたと日陰が明確となって晴天であることが分かる様子が描写され、現在の天候が雨なのであれば、美術品オブジェクトＯＢＪが拡張されている空間範囲においても雨が降っている状態が表現されるようにしてよい。
このように現実の天候に応じて拡大された美術品オブジェクトＯＢＪにおける表現を変更するには、例えば拡張オブジェクトデータ生成部１２１が、通信部１０１経由で気象情報を提供するウェブサイト等から現在の天候を取得し、取得した天候を反映させた拡張オブジェクトデータを生成してよい。仮想空間制御部１２２が生成された拡張オブジェクトデータを再生することで、現在の天候が反映された描写が付与されるようにして美術品オブジェクトＯＢＪが拡張される。

【0067】

上記実施形態においては、オリジナルの美術品オブジェクトＯＢＪの全体を起点とするようにして拡張するようにされていたが、オリジナルの美術品オブジェクトＯＢＪにおける所定の一部を起点として拡張が行われるようにされてよい。また、仮想美術館において展示されるオリジナルの状態の美術品オブジェクトＯＢＪは、全体が展示されてもよいし、所定の一部が展示されていてもよい。

【0068】

本実施形態において拡張の対象とされる美術品オブジェクトは、絵画に限定されるものではなく、例えば彫刻、写真、彫刻、書道、陶芸、工芸品等の美術品を再現するものであってよい。また、拡張の対象とされるオブジェクトは美術品に限定されるものではなく、例えば写真、幼児等が描いた絵、花や果物等をはじめとする各種植物、仮想空間における住宅に備えられる所定の物品等であってもよい。

【0069】

なお、上述の仮想空間制御装置１００およびユーザ端末２００等としての機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述の仮想空間制御装置１００およびユーザ端末２００等としての処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやＷＡＮ、ＬＡＮ、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるＨＤＤ、ＳＳＤ等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、ＣＤ－ＲＯＭ等の非一過性の記録媒体であってもよい。また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部または外部に設けられた記録媒体も含まれる。配信サーバの記録媒体に記憶されるプログラムのコードは、端末装置で実行可能な形式のプログラムのコードと異なるものでもよい。すなわち、配信サーバからダウンロードされて端末装置で実行可能な形でインストールができるものであれば、配信サーバで記憶される形式は問わない。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に端末装置で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。

【0070】

＜付記＞
（１）本実施形態の一態様は、仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御部を備える仮想空間制御装置である。

【0071】

（２）本実施形態の一態様は、（１）に記載の仮想空間制御装置であって、前記仮想空間制御部は、前記拡張状態として、前記オブジェクトが所定の平面方向にて延伸していく平面拡張の状態を再生してよい。

【0072】

（３）本実施形態の一態様は、（２）に記載の仮想空間制御装置であって、前記仮想空間において、前記平面拡張が行われるオブジェクトに対して、前記平面拡張が可能なオブジェクトであることを示す拡張状態標示が設けられてよい。

【0073】

（４）本実施形態の一態様は、（１）または（２）に記載の仮想空間制御装置であって、前記仮想空間制御部は、前記拡張状態として、拡張するオブジェクトが所定形状のオブジェクト拡張空間の内壁を延伸していく空間内壁拡張の状態を再生してよい。

【0074】

（５）本実施形態の一態様は、（４）に記載の仮想空間制御装置であって、前記仮想空間において、前記空間内壁拡張が行われるオブジェクトに対して、前記空間内壁拡張が可能なオブジェクトであることを示す拡張状態標示が設けられてよい。

【0075】

（６）本実施形態の一態様は、（１）から（５）のいずれか１つに記載の仮想空間制御装置であって、前記仮想空間制御部は、前記仮想空間において存在するアバターが、拡張対象のオブジェクトに対応して定められた前記仮想空間における所定のトリガ領域に到達したことに応じて、前記拡張状態の再生を開始してよい。

【0076】

（７）本実施形態の一態様は、（１）から（６）のいずれか１つに記載の仮想空間制御装置であって、前記仮想空間制御部は、前記オブジェクトが前記拡張状態にあるもとで、拡張されるオブジェクトに対する視点の変更が可能とされてよい。

【0077】

（８）本実施形態の一態様は、（１）から（７）のいずれか１つに記載の仮想空間制御装置であって、前記仮想空間制御部は、拡張前のオブジェクトの全体または一部を起点として拡張された内容を有する拡張オブジェクトのデータを利用して、前記拡張状態を再生してよい。

【0078】

（９）本実施形態の一態様は、（８）に記載の仮想空間制御装置であって、前記拡張オブジェクトのデータは、拡張前のオブジェクトの入力に応じて、入力されたオブジェクトを拡張した拡張オブジェクトを生成するように学習させた学習済みモデルを利用して生成されるものであってよい。

【0079】

（１０）本実施形態の一態様は、仮想空間制御装置における仮想空間制御方法であって、仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御ステップを備える仮想空間制御方法である。

【0080】

（１１）本実施形態の一態様は、コンピュータを、仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが所定の態様で拡張していく拡張状態を再生する仮想空間制御部として機能させるためのプログラムである。

【符号の説明】

【0081】

１００ 仮想空間制御装置、１０１ 通信部、１０２ 制御部、１０３ 記憶部、１２１ 拡張オブジェクトデータ生成部、１２２ 仮想空間制御部、１３１ 仮想空間データ記憶部、１３２ 原オブジェクトデータ記憶部、１３３ 拡張オブジェクトデータ記憶部、２００ ユーザ端末

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【手続補正書】

【提出日】2023-10-02

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御部
を備える仮想空間制御装置。

【請求項2】

前記仮想空間制御部は、前記拡張状態として、前記オブジェクトが所定の平面方向にて延伸していく平面拡張の状態を再生する
請求項１に記載の仮想空間制御装置。

【請求項3】

前記仮想空間において、前記平面拡張が行われるオブジェクトに対して、前記平面拡張が可能なオブジェクトであることを示す拡張状態標示が設けられる
請求項２に記載の仮想空間制御装置。

【請求項4】

前記仮想空間制御部は、前記拡張状態として、拡張するオブジェクトが所定形状のオブジェクト拡張空間の内壁を延伸していく空間内壁拡張の状態を再生する
請求項１に記載の仮想空間制御装置。

【請求項5】

前記仮想空間において、前記空間内壁拡張が行われるオブジェクトに対して、前記空間内壁拡張が可能なオブジェクトであることを示す拡張状態標示が設けられる
請求項４に記載の仮想空間制御装置。

【請求項6】

前記仮想空間制御部は、前記仮想空間において存在するアバターが、拡張対象のオブジェクトに対応して定められた前記仮想空間における所定のトリガ領域に到達したことに応じて、前記拡張状態の再生を開始する
請求項１から５のいずれか一項に記載の仮想空間制御装置。

【請求項7】

前記仮想空間制御部は、前記オブジェクトが前記拡張状態にあるもとで、拡張されるオブジェクトに対する視点の変更が可能とされる
請求項１から５のいずれか一項に記載の仮想空間制御装置。

【請求項8】

前記仮想空間制御部は、拡張前のオブジェクトの全体または一部を起点として拡張された内容を有する拡張オブジェクトのデータを利用して、前記拡張状態を再生する
請求項１から５のいずれか一項に記載の仮想空間制御装置。

【請求項9】

前記拡張オブジェクトのデータは、拡張前のオブジェクトの入力に応じて、入力されたオブジェクトを拡張した拡張オブジェクトを生成するように学習させた学習済みモデルを利用して生成される
請求項８に記載の仮想空間制御装置。

【請求項10】

仮想空間制御装置における仮想空間制御方法であって、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御ステップ
を備える仮想空間制御方法。

【請求項11】

コンピュータを、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御部
として機能させるためのプログラム。

【手続補正書】

【提出日】2024-02-09

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態として、前記オブジェクトが所定の平面方向にて延伸していく平面拡張の状態を再生する仮想空間制御部を備え、
前記仮想空間において、前記平面拡張が行われるオブジェクトに対して、前記平面拡張が可能なオブジェクトであることを示す拡張状態標示が設けられる
仮想空間制御装置。

【請求項2】

仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態として、拡張するオブジェクトが所定形状のオブジェクト拡張空間の内壁を延伸していく空間内壁拡張の状態を再生する仮想空間制御部
を備える仮想空間制御装置。

【請求項3】

前記仮想空間において、前記空間内壁拡張が行われるオブジェクトに対して、前記空間内壁拡張が可能なオブジェクトであることを示す拡張状態標示が設けられる
請求項２に記載の仮想空間制御装置。

【請求項4】

仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御部を備え、
前記仮想空間制御部は、前記仮想空間において存在するアバターが、拡張対象のオブジェクトに対応して定められた前記仮想空間における所定のトリガ領域に到達したことに応じて、前記拡張状態の再生を開始する
仮想空間制御装置。

【請求項5】

前記仮想空間制御部は、前記オブジェクトが前記拡張状態にあるもとで、拡張されるオブジェクトに対する視点の変更が可能とされる
請求項１から４のいずれか一項に記載の仮想空間制御装置。

【請求項6】

仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御部を備え、
前記仮想空間制御部は、拡張前のオブジェクトの全体または一部を起点として拡張された内容を有する拡張オブジェクトのデータを利用して、前記拡張状態を再生する
仮想空間制御装置。

【請求項7】

前記拡張オブジェクトのデータは、拡張前のオブジェクトの入力に応じて、入力されたオブジェクトを拡張した拡張オブジェクトを生成するように学習させた学習済みモデルを利用して生成される
請求項６に記載の仮想空間制御装置。

【請求項8】

仮想空間制御装置における仮想空間制御方法であって、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態として、前記オブジェクトが所定の平面方向にて延伸していく平面拡張の状態を再生する仮想空間制御ステップを備え、
前記仮想空間において、前記平面拡張が行われるオブジェクトに対して、前記平面拡張が可能なオブジェクトであることを示す拡張状態標示が設けられる
仮想空間制御方法。

【請求項9】

仮想空間制御装置における仮想空間制御方法であって、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態として、拡張するオブジェクトが所定形状のオブジェクト拡張空間の内壁を延伸していく空間内壁拡張の状態を再生する仮想空間制御ステップ
を備える仮想空間制御方法。

【請求項10】

仮想空間制御装置における仮想空間制御方法であって、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御ステップを備え、
前記仮想空間制御ステップは、前記仮想空間において存在するアバターが、拡張対象のオブジェクトに対応して定められた前記仮想空間における所定のトリガ領域に到達したことに応じて、前記拡張状態の再生を開始する
仮想空間制御方法。

【請求項11】

仮想空間制御装置における仮想空間制御方法であって、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御ステップを備え、
前記仮想空間制御ステップは、拡張前のオブジェクトの全体または一部を起点として拡張された内容を有する拡張オブジェクトのデータを利用して、前記拡張状態を再生する
仮想空間制御方法。

【請求項12】

コンピュータを、
所定の平面方向にて延伸していく平面拡張が可能であることを示す拡張状態標示がオブジェクトに対して設けられる仮想空間において全体または一部が配置された前記オブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態として、前記平面拡張の状態を再生する仮想空間制御部
として機能させるためのプログラム。

【請求項13】

コンピュータを、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態として、拡張するオブジェクトが所定形状のオブジェクト拡張空間の内壁を延伸していく空間内壁拡張の状態を再生する仮想空間制御部として機能させるためのプログラム。

【請求項14】

コンピュータを、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御部として機能させるためのプログラムであって、
前記仮想空間制御部は、前記仮想空間において存在するアバターが、拡張対象のオブジェクトに対応して定められた前記仮想空間における所定のトリガ領域に到達したことに応じて、前記拡張状態の再生を開始する
プログラム。

【請求項15】

コンピュータを、
仮想空間において全体または一部が配置されたオブジェクトを起点として、前記オブジェクトが時間経過に応じて所定の態様で拡張していく拡張状態を再生する仮想空間制御部として機能させるためのプログラムであって、
前記仮想空間制御部は、拡張前のオブジェクトの全体または一部を起点として拡張された内容を有する拡張オブジェクトのデータを利用して、前記拡張状態を再生する
プログラム。