特開2023-91777３次元シーンにおけるグラフィカルユーザーインターフェース（ＧＵＩ）要素を複製する方法
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023091777
(43)【公開日】2023-06-30
(54)【発明の名称】３次元シーンにおけるグラフィカルユーザーインターフェース（ＧＵＩ）要素を複製する方法
(51)【国際特許分類】
G06F 3/0484 20220101AFI20230623BHJP
G06F 3/04815 20220101ALI20230623BHJP
G06F 3/0486 20130101ALI20230623BHJP
G06F 3/0488 20220101ALI20230623BHJP
G06T 19/00 20110101ALI20230623BHJP
【ＦＩ】
G06F3/0484
G06F3/04815
G06F3/0486
G06F3/0488
G06T19/00 A
【審査請求】未請求
【請求項の数】15
【出願形態】ＯＬ
(21)【出願番号】P 2022202693
(22)【出願日】2022-12-20
(31)【優先権主張番号】21306850.5
(32)【優先日】2021-12-20
(33)【優先権主張国・地域又は機関】EP
(71)【出願人】
【識別番号】500102435
【氏名又は名称】ダッソー システムズ
【氏名又は名称原語表記】ＤＡＳＳＡＵＬＴ ＳＹＳＴＥＭＥＳ
(74)【代理人】
【識別番号】110001243
【氏名又は名称】弁理士法人谷・阿部特許事務所
(72)【発明者】
【氏名】クリストフ デルフィーノ
(72)【発明者】
【氏名】マリーヌ ズリアン
【テーマコード（参考）】
5B050
5E555
【Ｆターム（参考）】
5B050AA03
5B050BA09
5B050CA07
5B050CA08
5B050EA26
5B050FA02
5B050FA05
5B050FA16
5B050FA17
5E555AA27
5E555BA01
5E555BA70
5E555BB01
5E555BC18
5E555BE16
5E555BE17
5E555CA12
5E555CB08
5E555CB12
5E555CB16
5E555CB37
5E555CB44
5E555CB45
5E555CB46
5E555CB57
5E555CC13
5E555CC14
5E555CC20
5E555CC26
5E555DA11
5E555DB03
5E555DB11
5E555DB41
5E555DB51
5E555DC09
5E555DC13
5E555DC19
5E555DC25
5E555DC33
5E555DC35
5E555DC61
5E555DD07
5E555EA07
5E555FA00
(57)【要約】 （修正有）
【課題】マークアップの複製にかかる時間およびジェスチャーを低減することによって、ワークフローを簡略化するためのコンピュータ実装方法及びコンピュータシステムを提供する。
【解決手段】３次元シーンのＧＵＩ要素を複製するためのコンピューター実装方法は、３次元モデル及びＧＵＩ要素を提供し、ユーザーが第１の付属物を用いて、ホールドジェスチャーを示す第１のユーザーインタラクションを受信しＳ２０、第１の付属物のホールドジェスチャーを維持しながら第２の付属物を用いて、ボディーに対するホールドジェスチャーを示す第２のユーザーインタラクションを受信しＳ３０、第１の付属物及び第２の付属物を用いるホールドジェスチャーを維持しながら第２の付属物をボディーの外側に移動させ、ＧＵＩ要素を第２のＧＵＩ要素へと複製する。
【選択図】図７
【解決手段】３次元シーンのＧＵＩ要素を複製するためのコンピューター実装方法は、３次元モデル及びＧＵＩ要素を提供し、ユーザーが第１の付属物を用いて、ホールドジェスチャーを示す第１のユーザーインタラクションを受信しＳ２０、第１の付属物のホールドジェスチャーを維持しながら第２の付属物を用いて、ボディーに対するホールドジェスチャーを示す第２のユーザーインタラクションを受信しＳ３０、第１の付属物及び第２の付属物を用いるホールドジェスチャーを維持しながら第２の付属物をボディーの外側に移動させ、ＧＵＩ要素を第２のＧＵＩ要素へと複製する。
【選択図】図７
【特許請求の範囲】
【請求項1】
３次元シーンにおけるグラフィカルユーザーインターフェース要素を複製するためのコンピューター実装方法であって、
Ｓ１０）前記３次元シーンにおいて表示される３次元モデル（ＭＯＤ）およびＧＵＩ要素（ＧＵＩ）、および前記３次元シーンにおいて表示される少なくとも１つの第２の３次元モデルを提供するステップであって、前記ＧＵＩ要素は、前記３次元モデル（ＭＯＤ）に添え付けられたアンカー（ＡＮＣ）を含み、およびボディー（ＢＯＤ）を含み、前記ボディーは、前記３次元モデルに対応するテキストおよび／またはグラフィカル要素を含むウィンドウであるステップと、
Ｓ２０）第１の付属物（１）を用いるユーザーによるアンカー（ＡＮＣ）に対するホールドジェスチャーを示す第１のユーザーインタラクションを受信するステップと、
Ｓ３０）前記アンカー（ＡＮＣ）に対する前記第１の付属物（１）の前記ホールドジェスチャーを維持しながら、第２の付属物（２）を用いる前記ユーザーによる前記ボディー（ＢＯＤ）に対するホールドジェスチャーを示す第２のユーザーインタラクションを受信するステップと、
Ｓ４０）前記第１の付属物（１）を用いる前記ホールドジェスチャーおよび前記第２の付属物（２）を用いる前記ホールドジェスチャーを維持しながら、前記第２の付属物（２）を前記ボディー（ＢＯＤ）の外側に移動させることによって、前記ＧＵＩ要素（ＧＵＩ）を第２のＧＵＩ要素（ＧＵＩ２）へと複製するステップであって、前記第２のＧＵＩ要素（ＧＵＩ２）は、前記第２の３次元モデルに添え付けられ、アンカー（ＡＮＣ２）を含み、前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ２）の位置は、前記第２の付属物（２）の位置によって画定されるステップとを
備える方法。
Ｓ１０）前記３次元シーンにおいて表示される３次元モデル（ＭＯＤ）およびＧＵＩ要素（ＧＵＩ）、および前記３次元シーンにおいて表示される少なくとも１つの第２の３次元モデルを提供するステップであって、前記ＧＵＩ要素は、前記３次元モデル（ＭＯＤ）に添え付けられたアンカー（ＡＮＣ）を含み、およびボディー（ＢＯＤ）を含み、前記ボディーは、前記３次元モデルに対応するテキストおよび／またはグラフィカル要素を含むウィンドウであるステップと、
Ｓ２０）第１の付属物（１）を用いるユーザーによるアンカー（ＡＮＣ）に対するホールドジェスチャーを示す第１のユーザーインタラクションを受信するステップと、
Ｓ３０）前記アンカー（ＡＮＣ）に対する前記第１の付属物（１）の前記ホールドジェスチャーを維持しながら、第２の付属物（２）を用いる前記ユーザーによる前記ボディー（ＢＯＤ）に対するホールドジェスチャーを示す第２のユーザーインタラクションを受信するステップと、
Ｓ４０）前記第１の付属物（１）を用いる前記ホールドジェスチャーおよび前記第２の付属物（２）を用いる前記ホールドジェスチャーを維持しながら、前記第２の付属物（２）を前記ボディー（ＢＯＤ）の外側に移動させることによって、前記ＧＵＩ要素（ＧＵＩ）を第２のＧＵＩ要素（ＧＵＩ２）へと複製するステップであって、前記第２のＧＵＩ要素（ＧＵＩ２）は、前記第２の３次元モデルに添え付けられ、アンカー（ＡＮＣ２）を含み、前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ２）の位置は、前記第２の付属物（２）の位置によって画定されるステップとを
備える方法。
【請求項2】
前記方法は、ステップＳ４０）の後に、
Ｓ５１０）前記第２の付属物（２）の解放ジェスチャーを示す第３のユーザーインタラクションを解放ポイント（ＲＰＯ）で受信することを含むステップであって、前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ２）の前記位置は、前記解放ポイント（ＲＰＯ）の位置によって画定されるステップをさらに備える、請求項１に記載の方法。
Ｓ５１０）前記第２の付属物（２）の解放ジェスチャーを示す第３のユーザーインタラクションを解放ポイント（ＲＰＯ）で受信することを含むステップであって、前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ２）の前記位置は、前記解放ポイント（ＲＰＯ）の位置によって画定されるステップをさらに備える、請求項１に記載の方法。
【請求項3】
前記方法は、ステップＳ４０）の後に、
Ｓ５２０）前記アンカー（ＡＮＣ２）に対する前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いる前記ユーザーによるタップジェスチャーを示す第４のユーザーインタラクションを受信することを含むステップであって、前記第２のＧＵＩ要素（ＧＵＩ２，ＧＵＩ3）の前記アンカー（ＡＮＣ２，ＡＮＣ３）の位置は、前記タップジェスチャーの受信とともに前記第２の付属物（２）の位置によって画定されるステップをさらに備える、請求項１に記載の方法。
Ｓ５２０）前記アンカー（ＡＮＣ２）に対する前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いる前記ユーザーによるタップジェスチャーを示す第４のユーザーインタラクションを受信することを含むステップであって、前記第２のＧＵＩ要素（ＧＵＩ２，ＧＵＩ3）の前記アンカー（ＡＮＣ２，ＡＮＣ３）の位置は、前記タップジェスチャーの受信とともに前記第２の付属物（２）の位置によって画定されるステップをさらに備える、請求項１に記載の方法。
【請求項4】
前記方法は、ステップＳ４０）の後に、
Ｓ５３０）前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いる前記ユーザーによるホールドジェスチャーを示す第５のユーザーインタラクションを受信するステップと、
Ｓ５３１）前記第２の付属物（２）および前記第３の付属物（３）を用いる前記ユーザーによる同時ドラッグジェスチャーを示す第６のユーザーインタラクションを受信するステップと、
Ｓ５３２）少なくとも１つの他の３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）と、前記第２の付属物（２）または前記第３の付属物（３）のうちの１つとの交点を計算するステップと、
Ｓ５３３）交差した他の３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）ごとに前記ＧＵＩ要素を複製するステップと
をさらに備える、
請求項１に記載の方法。
Ｓ５３０）前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いる前記ユーザーによるホールドジェスチャーを示す第５のユーザーインタラクションを受信するステップと、
Ｓ５３１）前記第２の付属物（２）および前記第３の付属物（３）を用いる前記ユーザーによる同時ドラッグジェスチャーを示す第６のユーザーインタラクションを受信するステップと、
Ｓ５３２）少なくとも１つの他の３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）と、前記第２の付属物（２）または前記第３の付属物（３）のうちの１つとの交点を計算するステップと、
Ｓ５３３）交差した他の３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）ごとに前記ＧＵＩ要素を複製するステップと
をさらに備える、
請求項１に記載の方法。
【請求項5】
前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ）は、前記他の交差した３次元モデルと前記第２または第３の付属物との第１の交点に配置される、
請求項４に記載の方法。
請求項４に記載の方法。
【請求項6】
前記３次元シーンは、少なくとも２つの３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）を含み、前記方法は、ステップＳ４０の後に、
Ｓ５４０）予め画定された時間よりも長い間、前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いるホールドジェスチャーを示す第７のユーザーインタラクションを受信するステップと、
Ｓ５４１）前記３次元モデル(ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５)のすべてに対対して前記ＧＵＩ要素を複製するステップ
をさらに備える、
請求項１に記載の方法。
Ｓ５４０）予め画定された時間よりも長い間、前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いるホールドジェスチャーを示す第７のユーザーインタラクションを受信するステップと、
Ｓ５４１）前記３次元モデル(ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５)のすべてに対対して前記ＧＵＩ要素を複製するステップ
をさらに備える、
請求項１に記載の方法。
【請求項7】
前記ボディー（ＢＯＤ）および前記アンカー（ＡＮＣ）は、互いに間隔を空けて表示される、
請求項１ないし６のいずれか一項に記載の方法。
請求項１ないし６のいずれか一項に記載の方法。
【請求項8】
ステップＳ４０）は、
Ｓ４０１）前記３次元モデルの前記ＧＵＩ要素のボディーのうちの少なくとも１つのスタイル要素を決定するサブステップと、
Ｓ４０２）前記第２のＧＵＩ要素のテキストおよび／またはグラフィカル要素を更新し、前記ＧＵＩ要素の前記スタイル要素を前記第２のＧＵＩ要素に適用するサブステップと
を備える、
請求項１ないし７のいずれか一項に記載の方法。
Ｓ４０１）前記３次元モデルの前記ＧＵＩ要素のボディーのうちの少なくとも１つのスタイル要素を決定するサブステップと、
Ｓ４０２）前記第２のＧＵＩ要素のテキストおよび／またはグラフィカル要素を更新し、前記ＧＵＩ要素の前記スタイル要素を前記第２のＧＵＩ要素に適用するサブステップと
を備える、
請求項１ないし７のいずれか一項に記載の方法。
【請求項9】
前記テキストおよび／またはグラフィカル要素は、前記３次元モデルの名前、前記３次元モデルの材料、前記３次元モデルの色、前記３次元シーンにおける前記３次元モデルの位置、前記３次元モデルの寸法のうちの少なくとも１つを含み、
スタイル要素は、前記ボディーのフォント、スタイル、サイズ、および色のうちの１つを含む、
請求項８に記載の方法。
スタイル要素は、前記ボディーのフォント、スタイル、サイズ、および色のうちの１つを含む、
請求項８に記載の方法。
【請求項10】
ステップＳ４０）は、前記ＧＵＩ要素（ＧＵＩ）の前記複製の後に、前記第１の付属物（１）の解放ジェスチャーを受信するステップを含む、
請求項１ないし９のいずれか一項に記載の方法。
請求項１ないし９のいずれか一項に記載の方法。
【請求項11】
コンピューターシステムに、請求項１ないし１０のいずれか一項に記載の方法を実行させるコンピューター実行可能命令を含むコンピュータープログラム製品。
【請求項12】
コンピューターシステムに、請求項１ないし１０のいずれか一項に記載の方法を実行させるためのコンピューター実行可能命令を含む、非一時的なコンピューター可読データ記憶媒体（ＭＥＭ１，ＭＥＭ２，ＭＥＭ３，ＭＥＭ４）。
【請求項13】
コンピューターシステムであって、
メモリ（ＭＥＭ１，ＭＥＭ２，ＭＥＭ３，ＭＥＭ４）に結合されたプロセッサ（CP）を備え、前記メモリは、前記コンピューターシステムに請求項１ないし１０のいずれか一項に記載の方法を実行させるコンピューター実行可能命令を格納するコンピューターシステム。
メモリ（ＭＥＭ１，ＭＥＭ２，ＭＥＭ３，ＭＥＭ４）に結合されたプロセッサ（CP）を備え、前記メモリは、前記コンピューターシステムに請求項１ないし１０のいずれか一項に記載の方法を実行させるコンピューター実行可能命令を格納するコンピューターシステム。
【請求項14】
前記３次元シーンを表示して、前記付属物のうちの１つのインタラクションを検出するためのタッチセンサー式ディスプレーを備える、
請求項１３に記載のコンピューターシステム。
請求項１３に記載のコンピューターシステム。
【請求項15】
仮想環境における前記３次元シーンを表示するための仮想現実ヘッドセットと、前記付属物のうちの１つのインタラクションを検出するための制御デバイスまたは感知デバイスとを備える、
請求項１３に記載のコンピューターシステム。
請求項１３に記載のコンピューターシステム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、コンピュータープログラムおよびシステムの分野、より具体的には、３次元シーンにおけるマークアップを複製するためのコンピューター実装方法に関する。それは、コンピューターグラフィックス、オーサリング、コンピューター支援設計（ＣＡＤ）、コンピューター支援用エンジニアリング（ＣＡＥ）、およびコンピューター支援製造（ＣＡM）の分野に関連しており、デジタルモデル化されたオブジェクトが３次元シーンにおいて注釈を付けられなければならないすべての状況に適用する。
【背景技術】
【0002】
ＣＡＤアプリケーションは、Dassault SystemesによってCatiaの商標下で提供されるものの１つのように、ユーザーがオブジェクトまたはオブジェクトのアセンブリの複雑な３次元すなわち３次元モデルを構築および操作することを可能とする。
【0003】
この説明において、表現「３次元モデル」は、ユーザーに表示されることが可能である任意の仮想オブジェクトを含み、限定するものではないが、３次元オブジェクト、２次元オブジェクト、図面、デジタル画像などを含む。
【0004】
タッチスクリーンは、テキストおよび／またはモデル化されたオブジェクトを表示するために多くの電子デバイスおよびシステムにおいて一般に用いられる。これらは、また、タッチスクリーン、タッチパネル、またはタッチセンサー式ディスプレーとして知られている。ユーザーは、ユーザーインターフェースオブジェクトを含むユーザーインターフェースを通してタッチスクリーンとインタラクションすることが可能である。タッチスクリーンデバイスは、タッチスクリーンへの接触を検出して、応答する。
【0005】
共同設計プロセスにおいて、これは、何人かの設計者、または設計およびマーケティングチームのような異なるチームが関与し、他の協力者に関連情報を表示するために、設計された３次元モデルに注釈を付けることが有用であり得る。
【発明の概要】
【0006】
以下において、マークアップは、３次元モデルに関連付けられた注釈、または３次元モデルの一部を参照する。
【0007】
マークアップは、図１に図示されるように、アンカーＡＮＣおよびボディーＢＯＤで構成されるグラフィカルユーザーインターフェース要素（ＧＵＩ）である。アンカーＡＮＣは、３次元モデルＭＯＤに取り付けられる３次元ポイントである。ボディーＢＯＤは、アンカーＡＮＣが配置される３次元モデルＭＯＤに関連される設計機能を含む２次元表面である。ボディーＢＯＤのスタイル、つまり、審美的な外観は、ユーザーによって設定されることが可能であり、またはデフォルト設定を有することが可能である。
【0008】
ボディーＢＯＤがどの要素を指しているかをユーザーが視覚化し得るように、アンカーＡＮＣおよびボディーＢＯＤは、ラインＬＩＮによって接続され得るが、特にボディーＢＯＤがどの３次元モデルに対応するかが十分に明確である場合に、必ずしもラインの存在は、要求されない。
【0009】
マークアップの複製、つまり、コピー／ペースト動作は、特に複数の３次元オブジェクト、または３次元オブジェクトのうちの複数の部分に注釈が付けられる場合に、時間を節約し得る。
【0010】
しかしながら、３次元オブジェクトごとに一からのマークアップの作成は、面倒であることがある。
【0011】
実際に、図１に示される既存のソリューションは、タッチモードで既存のスタイルを有するマークアップを複製すべく、ユーザーは、まず、付属物（指またはスタイラス）を用いてボディーＢＯＤを長くホールドさせ、これは、パネルＰＡＮを出現させる。パネルＰＡＮは、「コピー」、「ペースト」、「削除」、「隠す」などの機能に対応するいくつかのボタン、またはボディーＢＯＤに色を適用するためのカラーパレットを含んでよい。
【0012】
ユーザーは「コピー」ボタンをタップする。次に、ユーザーが別の３次元モデルをタップすると、これは、パネルＰＡＮを再び出現させる。ユーザーは「ペースト」ボタンをタップする。次に、ユーザーは、複製したマークアップに初期マークアップのスタイルを適用して、３次元モデルを用いてマークアップをバインドする。
【0013】
マークアップのうち別の複製に対して、ユーザーは、同一のジェスチャーをさせて、新たに作成されるあらゆるインスタンスを最適な位置に配置しなくてはならない。多くのマークアップを複製することは、非常に退屈であることがある。
【0014】
代替的に、「ペースト」コマンドを多様な回数用いることによって一度に多くのマークアップを作成してよく、次に、すべてのマークアップに同様のスタイルを適用してよい。
【0015】
これらの方法は、多くのタップおよび手の動きを誘発する。
【0016】
したがって、マークアップの複製にかかる時間およびジェスチャーを低減することによって、ワークフローを簡略化する必要がある。
【0017】
本発明の目的は、３次元シーンにおけるグラフィカルユーザーインターフェース要素を複製するためのコンピューター実装方法であり、
－Ｓ１０）３次元モデルおよび３次元シーンにおいて表示されるＧＵＩ要素を提供することであって、ＧＵＩ要素は、３次元モデルに添え付けられたアンカーを含み、および、ボディーを含み、当該ボディーは、３次元モデルに対応するテキストおよび／またはグラフィカル要素を含むウィンドウであること、
－Ｓ２０）第１の付属物を用いるユーザーによるアンカーに対するホールドジェスチャーを示す第１のユーザーインタラクションを受信すること、
－Ｓ３０）アンカーに対する第１の付属物のホールドジェスチャーを維持しながら、第２の付属物を用いるユーザーによるボディーに対するホールドジェスチャーを示す第２のユーザーインタラクションを受信すること、並びに
－Ｓ４０）第１の付属物を用いるホールドジェスチャーおよび第２の付属物を用いるホールドジェスチャーを維持しながら、第２の付属物をボディーの外側に移動させることによって、ＧＵＩ要素を第２のＧＵＩ要素へと複製し、第２のＧＵＩ要素は、アンカーを含み、第２のＧＵＩ要素のアンカーの位置は、第２の付属物の位置によって画定されることのステップを含む。
－Ｓ１０）３次元モデルおよび３次元シーンにおいて表示されるＧＵＩ要素を提供することであって、ＧＵＩ要素は、３次元モデルに添え付けられたアンカーを含み、および、ボディーを含み、当該ボディーは、３次元モデルに対応するテキストおよび／またはグラフィカル要素を含むウィンドウであること、
－Ｓ２０）第１の付属物を用いるユーザーによるアンカーに対するホールドジェスチャーを示す第１のユーザーインタラクションを受信すること、
－Ｓ３０）アンカーに対する第１の付属物のホールドジェスチャーを維持しながら、第２の付属物を用いるユーザーによるボディーに対するホールドジェスチャーを示す第２のユーザーインタラクションを受信すること、並びに
－Ｓ４０）第１の付属物を用いるホールドジェスチャーおよび第２の付属物を用いるホールドジェスチャーを維持しながら、第２の付属物をボディーの外側に移動させることによって、ＧＵＩ要素を第２のＧＵＩ要素へと複製し、第２のＧＵＩ要素は、アンカーを含み、第２のＧＵＩ要素のアンカーの位置は、第２の付属物の位置によって画定されることのステップを含む。
【0018】
本発明は、また、コンピューターシステムに事前に定義された方法を実行させるためのコンピューター実行可能命令を含むコンピュータープログラム製品に関する。
【0019】
本発明は、また、コンピューターシステムに事前に定義された方法を実行させるためのコンピューター実行可能命令を含む非一時的なコンピューター可読データ記憶媒体に関する。
【0020】
本発明は、また、メモリに結合されたプロセッサを含むコンピューターシステムに関しており、メモリは、コンピューターシステムに事前に定義された方法を実行させるためのコンピューター実行可能命令を格納する。
【図面の簡単な説明】
【0021】
本発明のさらなる特徴および利点は、添付の図面と併せて以下の説明から明らかになるであろう。
【0022】
【図1】従来技術にかかるマークアップの複製方法を示す図である。
【図2】マークアップの構成を示す図である。
【図3A】本発明の第１の実施形態にかかるマークアップの複製方法を示す図である。
【図3B】本発明の第１の実施形態にかかるマークアップの複製方法を示す図である。
【図3C】本発明の第１の実施形態にかかるマークアップの複製方法を示す図である。
【図3D】本発明の第１の実施形態にかかるマークアップの複製方法を示す図である。
【図3E】本発明の第１の実施形態にかかるマークアップの複製方法を示す図である。
【図4A】本発明の第２の実施形態にかかるマークアップの複製方法を示す図である。
【図4B】本発明の第２の実施形態にかかるマークアップの複製方法を示す図である。
【図4C】本発明の第２の実施形態にかかるマークアップの複製方法を示す図である。
【図4D】本発明の第２の実施形態にかかるマークアップの複製方法を示す図である。
【図4E】本発明の第２の実施形態にかかるマークアップの複製方法を示す図である。
【図4F】本発明の第２の実施形態にかかるマークアップの複製方法を示す図である。
【図4G】本発明の第２の実施形態にかかるマークアップの複製方法を示す図である。
【図4H】本発明の第２の実施形態にかかるマークアップの複製方法を示す図である。
【図5A】本発明の第３の実施形態にかかるマークアップの複製方法を示す図である。
【図5B】本発明の第３の実施形態にかかるマークアップの複製方法を示す図である。
【図5C】本発明の第３の実施形態にかかるマークアップの複製方法を示す図である。
【図5D】本発明の第３の実施形態にかかるマークアップの複製方法を示す図である。
【図5E】本発明の第３の実施形態にかかるマークアップの複製方法を示す図である。
【図5F】本発明の第３の実施形態にかかるマークアップの複製方法を示す図である。
【図6A】本発明の第４の実施形態にかかるマークアップの複製方法を示す図である。
【図6B】本発明の第４の実施形態にかかるマークアップの複製方法を示す図である。
【図6C】本発明の第４の実施形態にかかるマークアップの複製方法を示す図である。
【図6D】本発明の第４の実施形態にかかるマークアップの複製方法を示す図である。
【図7】発明された方法を示すフロー図である。
【図8】発明された方法を実行するためのコンピューターを示す図である。
【図9】方法を実行するために適切なコンピューターシステムを示すブロック図である。
【発明を実施するための形態】
【0023】
発明された方法の第１のステップＳ１０において、図２に図示されるように、３次元モデルＭＯＤおよびマークアップ等のＧＵＩ要素ＧＵＩが、３次元シーンにおいて表示される。
【0024】
マークアップは、ねじに向かっている。３次元シーンは、ヘッドバンド、プロテクター、クッション、チャンバー、およびホルダーなどの他の３次元モデルを含む。これらの３次元モデルは、すべて、３次元モデルのアセンブリを形成するために互いにバインドされている。図２では、３次元モデルのアセンブリは、オーディオヘッドセットである。
【0025】
アンカーＡＮＣは、ねじに添え付けられている。マークアップのボディーＢＯＤは、３次元モデル（「金属」）の材料である、指し示された３次元モデム（「ねじ」）のラベルを示すウィンドウである。背景の色、テキストの色、およびテキストのフォントなどのグラフィカルな要素は、また、ボディーＢＯＤを特徴づける。
【0026】
その点で、タッチパネルでのユーザー入力は受信されていない。
【0027】
【0028】
図３Ａでは、ホールドジェスチャーを示す第１のユーザーインタラクションがアンカーＡＮＣに対して受信される（ステップＳ２０）。ホールドジェスチャーは、付属物とタッチスクリーンとの間の事前に定義された時間と等しいかそれより長い時間間隔の間に、解放することなく、維持された接触として定義され得る。
【0029】
付属物は、他の実施形態について以下で説明されるように、ユーザーの指であってよく、または指を用いることがより適切であるにもかかわらず、スタイラスであってもよい。
【0030】
図３Ａでは、第１のユーザーインタラクションは、丸数字の「１」によって表現される。
【0031】
第３のステップＳ３０において、ユーザーがアンカーＡＮＣに対して第１の付属物のホールドジェスチャーを維持しながら、ホールドジェスチャーを示す第２のユーザーインタラクションがボディーＢＯＤに対して受信される。第２のユーザーインタラクションは、これは、図３Ｂでの丸数字の「２」によって表現され、第２の付属物２を用いて実装される。
【0032】
第２の付属物は、ユーザーの同一の手の別の指であってよく、または他の手の指であってもよく、または別のスタイラスであってもよい。
【0033】
第４のステップＳ４０において、ユーザーは、図３Ｃに図示されるように、第１および第２の付属物がタッチスクリーンとの接触を維持しながら、第２の付属物２をボディーＢＯＤの外側に移動させる。
【0034】
図３Ｃに図示されるように、ボディーＢＯＤの外側での第２の付属物２の動作は、コピーモードを作動させる。コピーモードにおいて、マークアップＧＵＩが第２のマークアップＧＵＩ２へと複製される。任意選択で、ユーザーは、次に、後でそれを用いるために、第１の付属物１を解放してよい。第１の付属物の接触が第２の付属物がドラッグされる前に解放される場合、複製処理は、停止される（図７のステップＳ４１）。
【0035】
コピーモードが起動される場合に、ユーザーは、タッチスクリーンとの接触を維持しながら、３次元シーンにおける第２のマークアップＧＵＩ２を移動させてよい。ユーザーは、複製されたマークアップを選択した位置に配置するために、３次元シーンにおいてナビゲートする。
【0036】
【0037】
それ故に、解放ポイントが３次元シーンの別の３次元モデルと一致することが検出される場合、第２のマークアップＧＵＩ２が表示されて、他の３次元モデルに対応するテキストおよび／またはグラフィカル要素を表示する（図７のステップＳ５１１）。
【0038】
第２のマークアップＧＵＩ２は、第１のマークアップと同一の構造を有し、第２のマークアップＧＵＩ２は、第２の３次元モデルに添え付けられたアンカーＡＮＣ２、および第２の３次元モデルに対応するテキストおよび／またはグラフィカル要素を含むウィンドウであるボディーを含む。
【0039】
それ故に、第２のマークアップＧＵＩ２のアンカーＡＮＣ２の位置は、タッチスクリーンに対する第２の付属物２の最後の接触の位置に対応する解放ポイントＲＰＯの位置によって画定される。
【0040】
図３Ｄで図示されるように、マークアップのテキストは、第２の３次元モデルに基づいて更新される。同一のフィールド、つまり、第２の３次元モデルの名前／ラベル（「プロテクター」）、および第２の３次元モデルの材料（「フォーム」）が表示される。第２のマークアップのスタイル要素（背景色、テキストの色、テキストのサイズなど）は、第１のマークアップのスタイル要素と同一である。ボディーのテキストは、また、３次元モデルの色、３次元シーンにおける３次元モデルの位置、３次元モデルの寸法を含んでよい。
【0041】
それ故に、発明された方法は、非常に使用しやすく、且つ直感的である。
【0042】
有利なことに、ボディーおよびアンカーは、それぞれのマークアップに対して互いに離して表示されることによって、ユーザーは、１つの付属物でアンカーに容易に接触することができ、ボディーは、別の付属物で接触することができる。
【0043】
図４Ａ～図４Ｈは、本発明の別の実施形態を図示する。その実施形態のステップＳ１０、Ｓ２０、およびＳ３０は、前述の実施形態と同一であり、３次元モデルおよび３次元モデルにアンカーされたマークアップが提供され（図４ＡおよびステップＳ１０）、第１のユーザーインタラクションがアンカーに対して受信され（図４ＡおよびステップＳ２０）、第２のユーザーインタラクションがボディーに対して受信され（図４Ｂ、図４ＣおよびステップＳ３０）、およびマークアップが第２のマークアップへと複製される（図４ＤおよびステップＳ４０）。
【0044】
次に、ユーザーが第３の付属物３を用いることによってタップジェスチャーを示す第４のユーザーインタラクションが受信される（図７のステップＳ５２０）。タップジェスチャーは、付属物とタッチスクリーンとの間の迅速な接触（事前に定義された時間よりも短い時間間隔の間の押下）として定義されてよく、後に付属物の解放が続く。
【0045】
第３の付属物は、第２の付属物を除く任意の付属物であることが可能であり、ユーザーは、後者の接触がタッチスクリーンから除去された場合、第３の指、または第１の指を再び用いて、コピーを確認することが可能である。
【0046】
ユーザーがアンカーＡＮＣ２で第２の付属物２のホールドジェスチャーを維持する間に、タップジェスチャーがどこで受信されようとも、タッチスクリーンでのタップジェスチャーの受信は、図４Ｅで図示されるように、マークアップの複製を検証する。第２のマークアップＧＵＩ２は、第２の３次元モデル（ヘッドセットのプロテクター）にアンカーされており、コンテンツは、ボディーのスタイルが第１のマークアップのスタイルと同一である間に、第２の３次元モデル（名前、材料）の特徴に適合している。
【0047】
それ故に、複製は、タップジェスチャーが受信される場合に終了するのに対して、第１の実施形態において、複製は、解放ジェスチャーが受信される場合に終了する。
【0048】
ユーザーは、別の時間にマークアップを複製すべく、第２の付属物２のホールドジェスチャーを維持することによって、依然として３次元シーンにおいてナビゲートすることが可能である（図７のステップＳ５２１）。図４Ｆで、第２の付属物２がヘッドセットのクッションに配置される場合に、第３の付属物３による別のタップジェスチャーが受信される。したがって、第３のマークアップＧＵＩ３は、作成され、それは、タップジェスチャーの受信とともに接触ポイントにアンカーされる。それは、アンカーＡＮＣ３、およびボディーを含み、これは、ボディーの情報が第３の３次元モデルに適合することを除いて、第１のマークアップの複製である。
【0049】
【0050】
その結果として、ユーザーは、多様なコピーを迅速に作成することが可能である。
【0051】
図５Ａ～図５Ｆは、発明された方法の別の実施形態を図示する。その実施形態のステップＳ１０、Ｓ２０、およびＳ３０は、前述の実施形態と同一であり、３次元モデルおよび３次元モデルにアンカーされるマークアップが提供され（図５ＡおよびステップＳ１０）、アンカーに対して第１のユーザーインタラクションが受信され（図５ＡおよびステップＳ２０）、ボディーに対して第２のユーザーインタラクションが受信され（図５Ｂ、図５Ｃ、およびステップＳ３０）、マークアップは、第２のマークアップへと複製される（図５ＣおよびステップＳ４０）。
【0052】
次に、ホールドジェスチャーは、図５Ｃに図示されるように、第２の付属物２のホールドジェスチャーが維持されながら、第３の付属物（第５のユーザーインタラクション、および図７のステップＳ５３０）を用いることによって受信される。ここにおいても、第３の付属物は、第２の付属物を除く任意の付属物であることが可能である。
【0053】
ユーザーは、第２および第３の付属物を同時にドラッグする（図５Ｄ）。ドラッグ動作は、タッチスクリーンでの接触を維持している間に第２および第３の付属物の変位を参照する（第６のユーザーインタラクション、図７のステップＳ５３１）。
【0054】
第２および第３の付属物のドラッグの間に、第２または第３の付属物の位置と少なくとも１つの他の３次元モデルとの交点が計算されて、格納される（図７のステップＳ５３２）。
【0055】
次に、マークアップは、それぞれの交差した３次元モデルに対して複製され（図７のステップＳ５３３）、それぞれのマークアップのスタイル要素は、第１のマークアップＧＵＩのスタイル要素と同一であり、それぞれのマークアップのテキストおよび／またはグラフィック要素は、交差した３次元モデルの特徴に対応する。ユーザーが第２または第３の付属物を解放する場合に、複製は、停止する。
【0056】
例えば、図５Ｅおよび図５Ｆで、ねじにアンカーされた初期のマークアップは、以下のように複製され、
－ヘッドバンドＭＯＤ２にアンカーされているマークアップ、
－プロテクターＭＯＤ３にアンカーされたマークアップ、
－クッションＭＯＤ４にアンカーされたマークアップ、および
－ホルダーＭＯＤ５にアンカーされたマークアップである。
－ヘッドバンドＭＯＤ２にアンカーされているマークアップ、
－プロテクターＭＯＤ３にアンカーされたマークアップ、
－クッションＭＯＤ４にアンカーされたマークアップ、および
－ホルダーＭＯＤ５にアンカーされたマークアップである。
【0057】
好ましい実施形態において、３次元モデルのアセンブリの特徴ツリーＦＴＲが表示され（または３次元モデルを構成するすべての部分／サブモデルの特徴ツリー）、および複製マークアップに対応する３次元モデルがリアルタイムで強調表示されてよい。それぞれの３次元モデルの材料は、対応するボディーに表示されて、ラベルも同様である。
【0058】
好ましい実施形態において、複製されたマークアップのそれぞれのアンカーＡＮＣは、交差した３次元モデルを取り囲む境界ボックスの中心に配置される。代替的に、アンカーは、第２または第３の付属物と３次元モデルとの第１の交点に配置されてよい。
【0059】
それ故に、ユーザーは、３次元モデルまたはサブモデルにカーソルを合わせることによって、オンザフライで多様なコピーを作成することが可能である。
【0060】
図６Ａ～図６Ｄは、発明された方法の別の実施形態を再び図示する。図６Ａは、以前に開示されたように、アンカーＡＮＣで受信される第１のユーザーインタラクションを図示する。図６Ｂは、ボディーＢＯＤで受信される前述の第２のユーザーインタラクションを図示する。
【0061】
次に、第２の付属物２のホールドジェスチャーが維持される間に、第３の付属物３のホールドジェスチャーは、図６Ｃに図示されるように、事前に定義された時間よりも長い間受信される（図７のステップＳ５４０での第７のユーザーインタラクション）。
【0062】
第３の付属物３のホールドジェスチャーは、タッチスクリーンのどこで行われてもよい。
【0063】
事前定義された時間を超えると、３次元シーンのすべての３次元モデルに対してマークアップが複製される（図６Ｄ）。マークアップの新たなコピーは、３次元シーンにおける任意のモデルにアンカーを介して添え付けられる。それぞれの複製されたマークアップのテキストおよび／またはグラフィカル要素は、対応する３次元モデルに適合して、それぞれのマークアップのスタイル要素は、ソースマークアップのスタイル要素と同一である（図７のステップＳ５４１）。
【0064】
次に、ユーザーは、タッチスクリーンを用いて第２および第３の付属物の接触を解放することが可能である。
【0065】
図７は、発明された方法のフローチャートを示し、すべての前述の実施形態を含む。第２の付属物がドラッグされると、ユーザーが必要に応じて、さらなる入力をすることなく、複製モードのうちの１つを簡単に選択することが可能であるとわかる。
【0066】
それ故に、ユーザーは、新たに作成されたマークアップをほぼ同時に複製して、配置されることが可能である。
【0067】
本発明は、マークアップを複製するために開示されているが、それは、３次元モデルに添え付けられたアンカーを含み、ボディーを含む任意の種類のＧＵＩ要素に拡張されることが可能であり、当該ボディーは、３次元モデルに対応するテキストおよび／またはグラフィカル要素を含むウィンドウである。
【0068】
発明の方法は、場合によりコンピューターネットワークを含み、ハードディスク、ソリッドステートディスクまたはＣＤ－ＲＯＭなどのコンピューター可読媒体に不揮発性の形態で適切なプログラムを格納し、そのマイクロプロセッサおよびメモリを用いて当該プログラムを実行する適切にプログラムされた汎用コンピューターまたはコンピューターシステムによって実施されることが可能である。
【0069】
本発明の例示的な実施形態にかかる方法を実行するために適切なコンピューター、より正確にはコンピューター支援設計ステーションが、図８を参照して説明される。図８で、コンピューターは、上記の処理を実行する中央処理装置ＣＰを含む。プロセスは、実行可能プログラム、つまり、ＲＡＭ ＭＥＭ１またはＲＯＭ ＭＥＭ２などのメモリにおけるコンピューター可読命令のセット、またはハードディスクドライブ（ＨＤＤ）ＭＥＭ３、ＤＶＤ／ＣＤドライブＭＥＭ４に格納されることが可能であり、または遠隔で格納されることが可能である。本発明の方法にかかる実行可能プログラムによって処理されるために適する形態で３次元モデルデータベースは、また、メモリデバイスＭＥＭ１～ＭＥＭ４のうちの１つまたは複数に格納されてよく、または遠隔で格納されてもよい。
【0070】
特許請求の範囲に記載された発明は、発明のプロセスのコンピューター可読命令が格納されるコンピューター可読媒体の形態によって限定されない。例えば、命令およびデータベースは、ＣＤ、ＤＶＤ、フラッシュメモリ、ＲＡＭ、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ハードディスク、またはサーバーまたはコンピューターなどのコンピューター支援設計ステーションが通信するその他の情報処理デバイスに格納されることが可能である。プログラムおよびデータベースは、同一のメモリデバイス、または異なるメモリデバイスに格納されることが可能である。
【0071】
さらに、発明の方法を実行するために適するコンピュータープログラムは、ＣＰＵ ＰＲ、およびMicrosoft VISTA（登録商標）、Microsoft Windows 7（登録商標）、UNIX（登録商標）、Solaris（登録商標）、LINUX（登録商標）、Apple MAC-OS（登録商標）、および当業者に周知のその他のシステムなどのオペレーティングシステムと連動して実行されているユーティリティアプリケーション、バックグラウンドデーモン、またはオペレーティングシステムのコンポーネント、またはそれらの組み合わせとして提供されることが可能である。
【0072】
中央処理ユニットＣＰは、米国のIntel社のXenon（登録商標）プロセッサまたは米国のAMD社のOpteron（登録商標）プロセッサであることが可能であり、または米国のFreescale CorporationのFreescale ColdFire（登録商標）、IMX（登録商標）、またはARM（登録商標）プロセッサなどの他のプロセッサタイプであることが可能である。代替的に、中央処理ユニットCPは、当業者が認識することとなるように、米国のIntel CorporationのCore2Duo（登録商標）などのプロセッサであることが可能であり、ＦＰＧＡ（登録商標）、ＡＳＩＣ（登録商標）、ＰＬＤ、または個別論理回路を用いて実装されることが可能である。さらに、ＣＰＵは、上記の発明のプロセスのコンピューター可読命令を実行するために協働して実行する多様なプロセッサとして実装されることが可能である。
【0073】
図７のコンピューター支援設計ステーションは、また、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、インターネットなどのネットワークを用いてインターフェースするための米国のIntel CorporationのIntel Ethernet PRO（登録商標）ネットワークインターフェースカードなどのネットワークインターフェースＮＩを含む。コンピューター支援設計ステーションは、Hewlett Packard HPL2445w LCDモニター、または仮想現実ヘッドセットなどのディスプレーＤＹとインターフェースするための米国のNVIDIA CorporationのNVIDIA GeForce GTX（登録商標）グラフィックスアダプターなどのディスプレーコントローラーＤＣをさらに含む。汎用Ｉ／ＯインターフェースＩＦは、ローラーボール、マウス、タッチパッド、仮想現実システムの制御デバイスなどのキーボードＫＢ、およびポインティングデバイスＰＤとインターフェースする。ディスプレー、キーボードおよびポインティングデバイスは、ディスプレーコントローラーおよびＩ／Ｏインターフェースと共に、グラフィカルユーザーインターフェースを形成する。
【0074】
本発明は、タッチモードでの実装のために開示されており、コンピューターシステムは、３次元シーンを表示するためのタッチセンサー式ディスプレー、および付属物のうちの１つのインタラクションを検出することを備える。
【0075】
本発明は、また、没入環境において実装されることが可能である。その場合において、コンピューターシステムは、仮想現実ヘッドセットを備え、これは、３次元シーンを表示するためにユーザーによって着用される。異なるユーザーインタラクションは、制御デバイスを用いて検出されてよく、これは、タップジェスチャー、ドラッグまたはホールドジェスチャーを検出するためにボタンを装備してよい。コンピューターシステムは、また、制御デバイスの位置を決定すべく、赤外線センサーのような感知デバイスを含んでよい。
【0076】
ディスクコントローラーＤＫＣは、ＭＥＭ３ＨＤＤ ＭＥＭ３およびＭＥＭ４ＤＶＤ／ＣＤ ＭＥＭ４を通信バスＣＢと接続し、これは、コンピューター支援設計ステーションのすべてのコンポーネントを相互接続するためにＩＳＡ、ＥＩＳＡ、ＶＥＳＡ、ＰＣＩ、または類似するものとすることが可能である。
【0077】
ディスプレーコントローラー、ディスクコントローラー、ネットワークインターフェース、およびＩ／Ｏインターフェースと同様に、ディスプレー、キーボード、ポインティングデバイスの一般的な特徴および機能の説明は、これらの特徴が周知であるため、簡潔にするために本明細書では省略される。
【0078】
図９は、本発明の異なる例示的な実施形態にかかる方法を実行するために適するコンピューターシステムのブロック図である。
【0079】
図９で、サーバーＳＣは、ネットワークＮＷを介して管理者システムＡＤＳおよびエンドユーザーコンピューターＥＵＣに接続される。
【0080】
理解されるように、ネットワークＮＷは、インターネットのような公共ネットワーク、またはＬＡＮまたはＷＡＮネットワークなどのプライベートネットワーク、またはそれらの任意の組み合わせであることが可能であり、ＰＳＴＮまたはＩＳＤＮサブネットワークも含むことが可能である。ネットワークＮＷは、また、Ｅｔｈｅｒｎｅｔ（登録商標）ネットワークのような有線であることが可能であり、またはＥＤＧＥ（登録商標）、３Ｇ、および４Ｇの無線セルラーシステムを含むセルラーネットワークのような無線であることが可能である。無線ネットワークは、また、Ｗｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、または周知の任意の他の無線通信形態であることが可能である。それ故に、ネットワークＮＷは、単に例示であり、決して本発展の範囲を限定するものではない。
【0081】
クライアントプログラムは、エンドユーザーコンピューターのメモリデバイスに格納され、ネットワークＮＷを介して、後者のＣＰＵによって実行されるサーバーに対する３次元モデルデータベースにアクセスする。これは、エンドユーザーに３次元モデルを選択すること、および３次元シーンにおいて事前にそれらを配置することを可能とする。サーバーは、ユーザーからの入力を考慮して、図２～図７を参照して上記のような処理を実行する。次に、それは、ネットワークＮＷを用いて、注釈付きの３次元モデルをエンドユーザーコンピューターに伝送する。
【0082】
１つの管理者システムＡＤＳおよび１つのエンドユーザーシステムＥＵＸだけが示されているが、システムは、限定することなく、任意の数の管理者システムおよび／またはエンドユーザーシステムをサポートすることが可能である。
【0083】
本明細書で説明される任意のプロセス、フローチャートでの記述、またはブロックは、処理における特定の論理機能またはステップを実装するための１つまたは複数の実行可能命令を含むモジュール、セグメント、またはコードの一部を表現するものとして理解されるべきであり、代替の実装は、本発明の例示的な実施形態の範囲内に含まれる。
【図1】
【図2】
【図3A】
【図3B】
【図3C】
【図3D】
【図3E】
【図4A】
【図4B】
【図4C】
【図4D】
【図4E】
【図4F】
【図4G】
【図4H】
【図5A】
【図5B】
【図5C】
【図5D】
【図5E】
【図5F】
【図6A】
【図6B】
【図6C】
【図6D】
【図7】
【図8】
【図9】
【手続補正書】
【提出日】2023-01-17
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
３次元シーンにおけるグラフィカルユーザーインターフェース要素を複製するためのコンピューター実装方法であって、
Ｓ１０）前記３次元シーンにおいて表示される３次元モデル（ＭＯＤ）およびＧＵＩ要素（ＧＵＩ）、および前記３次元シーンにおいて表示される少なくとも１つの第２の３次元モデルを提供するステップであって、前記ＧＵＩ要素は、前記３次元モデル（ＭＯＤ）に添え付けられたアンカー（ＡＮＣ）を含み、およびボディー（ＢＯＤ）を含み、前記ボディーは、前記３次元モデルに対応するテキストまたはグラフィカル要素のうちの少なくとも１つを含むウィンドウであるステップと、
Ｓ２０）第１の付属物（１）を用いるユーザーによるアンカー（ＡＮＣ）に対するホールドジェスチャーを示す第１のユーザーインタラクションを受信するステップと、
Ｓ３０）前記アンカー（ＡＮＣ）に対する前記第１の付属物（１）の前記ホールドジェスチャーを維持しながら、第２の付属物（２）を用いる前記ユーザーによる前記ボディー（ＢＯＤ）に対するホールドジェスチャーを示す第２のユーザーインタラクションを受信するステップと、
Ｓ４０）前記第１の付属物（１）を用いる前記ホールドジェスチャーおよび前記第２の付属物（２）を用いる前記ホールドジェスチャーを維持しながら、前記第２の付属物（２）を前記ボディー（ＢＯＤ）の外側に移動させることによって、前記ＧＵＩ要素（ＧＵＩ）を第２のＧＵＩ要素（ＧＵＩ２）へと複製するステップであって、前記第２のＧＵＩ要素（ＧＵＩ２）は、前記第２の３次元モデルに添え付けられ、アンカー（ＡＮＣ２）を含み、前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ２）の位置は、前記第２の付属物（２）の位置によって画定されるステップとを
備える方法。
Ｓ１０）前記３次元シーンにおいて表示される３次元モデル（ＭＯＤ）およびＧＵＩ要素（ＧＵＩ）、および前記３次元シーンにおいて表示される少なくとも１つの第２の３次元モデルを提供するステップであって、前記ＧＵＩ要素は、前記３次元モデル（ＭＯＤ）に添え付けられたアンカー（ＡＮＣ）を含み、およびボディー（ＢＯＤ）を含み、前記ボディーは、前記３次元モデルに対応するテキストまたはグラフィカル要素のうちの少なくとも１つを含むウィンドウであるステップと、
Ｓ２０）第１の付属物（１）を用いるユーザーによるアンカー（ＡＮＣ）に対するホールドジェスチャーを示す第１のユーザーインタラクションを受信するステップと、
Ｓ３０）前記アンカー（ＡＮＣ）に対する前記第１の付属物（１）の前記ホールドジェスチャーを維持しながら、第２の付属物（２）を用いる前記ユーザーによる前記ボディー（ＢＯＤ）に対するホールドジェスチャーを示す第２のユーザーインタラクションを受信するステップと、
Ｓ４０）前記第１の付属物（１）を用いる前記ホールドジェスチャーおよび前記第２の付属物（２）を用いる前記ホールドジェスチャーを維持しながら、前記第２の付属物（２）を前記ボディー（ＢＯＤ）の外側に移動させることによって、前記ＧＵＩ要素（ＧＵＩ）を第２のＧＵＩ要素（ＧＵＩ２）へと複製するステップであって、前記第２のＧＵＩ要素（ＧＵＩ２）は、前記第２の３次元モデルに添え付けられ、アンカー（ＡＮＣ２）を含み、前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ２）の位置は、前記第２の付属物（２）の位置によって画定されるステップとを
備える方法。
【請求項2】
前記方法は、ステップＳ４０）の後に、
Ｓ５１０）前記第２の付属物（２）の解放ジェスチャーを示す第３のユーザーインタラクションを解放ポイント（ＲＰＯ）で受信することを含むステップであって、前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ２）の前記位置は、前記解放ポイント（ＲＰＯ）の位置によって画定されるステップをさらに備える、請求項１に記載の方法。
Ｓ５１０）前記第２の付属物（２）の解放ジェスチャーを示す第３のユーザーインタラクションを解放ポイント（ＲＰＯ）で受信することを含むステップであって、前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ２）の前記位置は、前記解放ポイント（ＲＰＯ）の位置によって画定されるステップをさらに備える、請求項１に記載の方法。
【請求項3】
前記方法は、ステップＳ４０）の後に、
Ｓ５２０）前記アンカー（ＡＮＣ２）に対する前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いる前記ユーザーによるタップジェスチャーを示す第４のユーザーインタラクションを受信することを含むステップであって、前記第２のＧＵＩ要素（ＧＵＩ２，ＧＵＩ3）の前記アンカー（ＡＮＣ２，ＡＮＣ３）の位置は、前記タップジェスチャーの受信とともに前記第２の付属物（２）の位置によって画定されるステップをさらに備える、請求項１に記載の方法。
Ｓ５２０）前記アンカー（ＡＮＣ２）に対する前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いる前記ユーザーによるタップジェスチャーを示す第４のユーザーインタラクションを受信することを含むステップであって、前記第２のＧＵＩ要素（ＧＵＩ２，ＧＵＩ3）の前記アンカー（ＡＮＣ２，ＡＮＣ３）の位置は、前記タップジェスチャーの受信とともに前記第２の付属物（２）の位置によって画定されるステップをさらに備える、請求項１に記載の方法。
【請求項4】
前記方法は、ステップＳ４０）の後に、
Ｓ５３０）前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いる前記ユーザーによるホールドジェスチャーを示す第５のユーザーインタラクションを受信するステップと、
Ｓ５３１）前記第２の付属物（２）および前記第３の付属物（３）を用いる前記ユーザーによる同時ドラッグジェスチャーを示す第６のユーザーインタラクションを受信するステップと、
Ｓ５３２）少なくとも１つの他の３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）と、前記第２の付属物（２）または前記第３の付属物（３）のうちの１つとの交点を計算するステップと、
Ｓ５３３）交差した他の３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）ごとに前記ＧＵＩ要素を複製するステップと
をさらに備える、
請求項１に記載の方法。
Ｓ５３０）前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いる前記ユーザーによるホールドジェスチャーを示す第５のユーザーインタラクションを受信するステップと、
Ｓ５３１）前記第２の付属物（２）および前記第３の付属物（３）を用いる前記ユーザーによる同時ドラッグジェスチャーを示す第６のユーザーインタラクションを受信するステップと、
Ｓ５３２）少なくとも１つの他の３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）と、前記第２の付属物（２）または前記第３の付属物（３）のうちの１つとの交点を計算するステップと、
Ｓ５３３）交差した他の３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）ごとに前記ＧＵＩ要素を複製するステップと
をさらに備える、
請求項１に記載の方法。
【請求項5】
前記第２のＧＵＩ要素（ＧＵＩ２）の前記アンカー（ＡＮＣ）は、前記他の交差した３次元モデルと前記第２または第３の付属物との第１の交点に配置される、
請求項４に記載の方法。
請求項４に記載の方法。
【請求項6】
前記３次元シーンは、少なくとも２つの３次元モデル（ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５）を含み、前記方法は、ステップＳ４０の後に、
Ｓ５４０）予め画定された時間よりも長い間、前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いるホールドジェスチャーを示す第７のユーザーインタラクションを受信するステップと、
Ｓ５４１）前記３次元モデル(ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５)のすべてに対対して前記ＧＵＩ要素を複製するステップ
をさらに備える、
請求項１に記載の方法。
Ｓ５４０）予め画定された時間よりも長い間、前記第２の付属物（２）の前記ホールドジェスチャーを維持しながら、第３の付属物（３）を用いるホールドジェスチャーを示す第７のユーザーインタラクションを受信するステップと、
Ｓ５４１）前記３次元モデル(ＭＯＤ２，ＭＯＤ３，ＭＯＤ４，ＭＯＤ５)のすべてに対対して前記ＧＵＩ要素を複製するステップ
をさらに備える、
請求項１に記載の方法。
【請求項7】
前記ボディー（ＢＯＤ）および前記アンカー（ＡＮＣ）は、互いに間隔を空けて表示される、
請求項１または２に記載の方法。
請求項１または２に記載の方法。
【請求項8】
ステップＳ４０）は、
Ｓ４０１）前記３次元モデルの前記ＧＵＩ要素のボディーのうちの少なくとも１つのスタイル要素を決定するサブステップと、
Ｓ４０２）前記第２のＧＵＩ要素のテキストまたはグラフィカル要素のうちの少なくとも１つを更新し、前記ＧＵＩ要素の前記スタイル要素を前記第２のＧＵＩ要素に適用するサブステップと
を備える、
請求項１または２に記載の方法。
Ｓ４０１）前記３次元モデルの前記ＧＵＩ要素のボディーのうちの少なくとも１つのスタイル要素を決定するサブステップと、
Ｓ４０２）前記第２のＧＵＩ要素のテキストまたはグラフィカル要素のうちの少なくとも１つを更新し、前記ＧＵＩ要素の前記スタイル要素を前記第２のＧＵＩ要素に適用するサブステップと
を備える、
請求項１または２に記載の方法。
【請求項9】
前記テキストまたはグラフィカル要素のうちの少なくとも１つは、前記３次元モデルの名前、前記３次元モデルの材料、前記３次元モデルの色、前記３次元シーンにおける前記３次元モデルの位置、前記３次元モデルの寸法のうちの少なくとも１つを含み、
スタイル要素は、前記ボディーのフォント、スタイル、サイズ、および色のうちの１つを含む、
請求項８に記載の方法。
スタイル要素は、前記ボディーのフォント、スタイル、サイズ、および色のうちの１つを含む、
請求項８に記載の方法。
【請求項10】
ステップＳ４０）は、前記ＧＵＩ要素（ＧＵＩ）の前記複製の後に、前記第１の付属物（１）の解放ジェスチャーを受信するステップを含む、
請求項１に記載の方法。
請求項１に記載の方法。
【請求項11】
コンピューターシステムに、請求項１に記載の方法を実行させるコンピューター実行可能命令を含むコンピュータープログラム。
【請求項12】
コンピューターシステムに、請求項１に記載の方法を実行させるためのコンピューター実行可能命令を含む、非一時的なコンピューター可読データ記憶媒体（ＭＥＭ１，ＭＥＭ２，ＭＥＭ３，ＭＥＭ４）。
【請求項13】
コンピューターシステムであって、
メモリ（ＭＥＭ１，ＭＥＭ２，ＭＥＭ３，ＭＥＭ４）に結合されたプロセッサ（ＣＰ）を備え、前記メモリは、前記コンピューターシステムに請求項１に記載の方法を実行させるコンピューター実行可能命令を格納するコンピューターシステム。
メモリ（ＭＥＭ１，ＭＥＭ２，ＭＥＭ３，ＭＥＭ４）に結合されたプロセッサ（ＣＰ）を備え、前記メモリは、前記コンピューターシステムに請求項１に記載の方法を実行させるコンピューター実行可能命令を格納するコンピューターシステム。
【請求項14】
前記３次元シーンを表示して、前記付属物のうちの１つのインタラクションを検出するためのタッチセンサー式ディスプレーを備える、
請求項１３に記載のコンピューターシステム。
請求項１３に記載のコンピューターシステム。
【請求項15】
仮想環境における前記３次元シーンを表示するための仮想現実ヘッドセットと、前記付属物のうちの１つのインタラクションを検出するための制御デバイスまたは感知デバイスとを備える、
請求項１３に記載のコンピューターシステム。
請求項１３に記載のコンピューターシステム。