ホーム > 特許ランキング > 株式会社ＮＴＴドコモ
知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2025-08-05
(45)【発行日】2025-08-14
(54)【発明の名称】メッセージ送信装置及びメッセージ受信装置
(51)【国際特許分類】
G06T 19/00 20110101AFI20250806BHJP
G06F 3/01 20060101ALI20250806BHJP
G06F 3/04817 20220101ALI20250806BHJP
G06F 3/04845 20220101ALI20250806BHJP
H04L 51/04 20220101ALI20250806BHJP
H04L 67/131 20220101ALI20250806BHJP
【ＦＩ】
G06T19/00 A
G06F3/01 570
G06F3/04817
G06F3/04845
H04L51/04
H04L67/131
【請求項の数】
3
(21)【出願番号】P 2023576671
(86)(22)【出願日】2022-12-07
(86)【国際出願番号】 JP2022045071
(87)【国際公開番号】W WO2023145265
(87)【国際公開日】2023-08-03
【審査請求日】2024-07-25
(31)【優先権主張番号】P 2022011593
(32)【優先日】2022-01-28
(33)【優先権主張国・地域又は機関】JP
(73)【特許権者】
【識別番号】392026693
【氏名又は名称】株式会社ＮＴＴドコモ
(74)【代理人】
【識別番号】110003177
【氏名又は名称】弁理士法人旺知国際特許事務所
(72)【発明者】
【氏名】山▲崎▼ 智仁
【審査官】松浦 功
(56)【参考文献】
【文献】米国特許出願公開第２０１３／０２９３５８４（ＵＳ，Ａ１）
【文献】特開２０２１－０５１５１２（ＪＰ，Ａ）
【文献】国際公開第２０１７／０１３８０５（ＷＯ，Ａ１）
【文献】特開２００５－０７８４２７（ＪＰ，Ａ）
【文献】特開２０００－２０７３１３（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１３／０３０７８７５（ＵＳ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｔ １９／００ － １９／２０
Ｇ０６Ｆ ３／００ － ３／１８
Ｈ０４Ｌ ５１／０４ － ５１／０４６
Ｈ０４Ｌ ６７／１３１
(57)【特許請求の範囲】
【請求項1】
送信元のユーザの操作に応じて、メッセージに対応する仮想オブジェクトが仮想空間において移動された場合、前記仮想オブジェクトの軌道に関する軌道情報を生成する軌道情報生成部と、前記メッセージを示すメッセージ情報と前記軌道情報とを含む送信情報を生成する送信情報生成部と、
通信装置を用いて前記送信情報を前記ユーザが指定する送信先に送信させる送信制御部とを備え、
前記送信元のユーザの操作は、前記仮想オブジェクトの軌道として予め用意された複数の軌道から１以上の軌道を前記送信元のユーザが選択する第１操作と、前記送信元のユーザが前記仮想オブジェクトを前記仮想空間において移動させる第２操作とを含み、
前記軌道情報生成部は、前記第１操作によって選択される前記１以上の軌道と、前記第２操作によって指定される前記仮想オブジェクトの軌道とを合成することによって得られる軌道を示す情報を、前記軌道情報として生成する、
メッセージ送信装置。
【請求項2】
前記軌道は、前記仮想オブジェクトの仮想空間における位置の時間変化を示し、前記軌道情報生成部は、前記軌道に対して前記ユーザの操作に伴うノイズ成分を除去する処理を施すことによって、前記軌道情報を生成する、請求項１に記載のメッセージ送信装置。
【請求項3】
請求項１又は２に記載のメッセージ送信装置から送信される前記送信情報を通信装置に受信させる受信制御部と、前記送信情報に含まれる前記軌道情報に従って、仮想空間において仮想オブジェクトが移動する画像を生成する画像生成部と、
前記生成された画像を、前記送信先のユーザの表示装置に表示させる表示制御部とを備える、
メッセージ受信装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、メッセージを送信するメッセージ送信装置及びメッセージを受信するメッセージ受信装置に関する。
【背景技術】
【0002】
非特許文献１には、メールの送受信において、キャラクタがメールを配達するアニメーションを表示する点が開示されている。この技術では、ユーザがメールを送信する場合、動物のキャラクタがメールを持参して部屋から出ていくアニメーションがディスプレイに表示される。また、ユーザがメールを受信する場合、メールを携えたキャラクタが訪れるアニメーションがディスプレイに表示される。
【0003】
ところで、ＶＲ（Virtual Reality）技術、ＡＲ（Augmented Reality）技術、及びＭＲ（Mixed Reality）技術を含むＸＲ技術では、ユーザが頭部に装着するＸＲグラスに三次元の仮想空間が表示される。この仮想空間に、メッセージに対応付けられた仮想オブジェクトが表示されることがある。非特許文献１に記載の技術を三次元仮想空間に適用した場合、キャラクタが仮想オブジェクトを配達するアニメーションがＸＲグラスに表示されることになる。
【先行技術文献】
【非特許文献】
【0004】
【文献】“今注目のメールソフト、ポストペットで遊ぼう！”，［online］，1997年10月13日，ウォッチ編集部INTERNET，［令和4年1月24日検索］，インターネット＜URL：https://internet.watch.impress.co.jp/www/article/971013/special.htm＞
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、キャラクタが仮想オブジェクトを配達する動作は、予め定められた動作である。従って、送信元のユーザは、送信先のユーザが視認する仮想空間における仮想オブジェクトの動きを制御することはできなかった。
【0006】
本開示は、メッセージの送信元のユーザが、メッセージの送信先のユーザが視認する仮想空間における仮想オブジェクトの動きを制御できるメッセージ送信装置及びメッセージ受信装置を提供することを目的とする。
【課題を解決するための手段】
【0007】
本発明の好適な態様に係るメッセージ送信装置は、送信元のユーザの操作に応じて、メッセージに対応する仮想オブジェクトが仮想空間において移動された場合、前記仮想オブジェクトの軌道に関する軌道情報を生成する軌道情報生成部と、前記メッセージを示すメッセージ情報と前記軌道情報とを含む送信情報を生成する送信情報生成部と、通信装置を用いて前記送信情報を前記ユーザが指定する送信先に送信させる送信制御部とを備える。
【0008】
本発明の好適な態様に係るメッセージ受信装置は、メッセージ送信装置から送信される前記送信情報を通信装置に受信させる受信制御部と、前記送信情報に含まれる前記軌道情報に従って、仮想空間において仮想オブジェクトが移動する画像を生成する画像生成部と、前記生成された画像を、前記送信先のユーザの表示装置に表示させる表示制御部とを備える。
【発明の効果】
【0009】
本発明によれば、メッセージの送信元のユーザが、メッセージの送信先のユーザが視認する仮想空間における仮想オブジェクトの動きを制御できる。
【図面の簡単な説明】
【0010】
【図1】実施形態に係る情報処理システム１の全体構成を示す図。
【図2】送信元のユーザＵ[Ｋ]がＸＲグラス２０－Ｋを介して視認する仮想空間ＶＳの一例を示す模式図。
【図3】実施形態に係るＸＲグラス２０－Ｋの外観を示す斜視図。
【図4】実施形態に係るＸＲグラス２０－Ｋの構成例を示すブロック図。
【図5】実施形態に係る端末装置１０－Ｋの構成例を示すブロック図。
【図6】基準軌道情報Ｄの情報構造の一例を示す説明図。
【図7】第１の基準軌道Ｓｒ１から第７の基準軌道Ｓｒ７までを示す模式図。
【図8】軌道情報生成部１１３の機能ブロック図。
【図9】補正前のユーザ軌道Ｓｕ１と補正後のユーザ軌道Ｓｕ２との一例を示す説明図
【図10A】軌道Ｓと第１の基準軌道Ｓｒ１とを合成した軌道Ｓｘの一例を示す模式図。
【図10B】第１の基準軌道Ｓｒ１と第３の基準軌道Ｓｒ３とを合成した軌道Ｓｙの一例を示す模式図。
【図11】ユーザＵ［Ｋ］が複数の軌道の中から１以上の軌道を選択する場合の仮想空間ＶＳの一例を示す模式図。
【図12】サーバ３０の構成例を示すブロック図。
【図13】実施形態に係る端末装置１０－Ｋの送信処理の動作例を示すフローチャート。
【図14A】メッセージ情報と仮想オブジェクトＶＯとの対応付けの一例を示す模式図。
【図14B】仮想オブジェクトＶＯの軌道の生成に関する仮想空間ＶＳの一例を示す模式図。
【図15】軌道情報の生成に関する処理内容の一例を示すフローチャート。
【図16A】ユーザ軌道の入力の受付に関する仮想空間ＶＳの一例を示す模式図。
【図16B】軌道の合成に関する指示の受付に関する仮想空間ＶＳの一例を示す模式図。
【図17】実施形態に係る端末装置１０－Ｋの送信処理の動作例を示すフローチャート。
【発明を実施するための形態】
【0011】
【0012】
１．１：実施形態の構成
１．１．１：全体構成
図１は、情報処理システム１の全体構成を示すブロック図である。図１に示されるように、情報処理システム１は、端末装置１０－１、１０－２、…１０－Ｋ、…１０－Ｊ、ＸＲグラス２０－１、２０－２、…２０－Ｋ、…２０－Ｊ、及びサーバ３０を備える。Ｊは１以上の整数である。Ｋは１以上Ｊ以下の整数である。本実施形態において、端末装置１０－１、１０－２、…１０－Ｋ、…１０－Ｊは同一の構成である。但し、他の端末装置と構成が同一でない端末装置が含まれてもよい。本実施形態において、ＸＲグラス２０－１、２０－２、…２０－Ｋ、…２０－Ｊは同一の構成である。但し、他のＸＲグラスと構成が同一でないＸＲグラスが含まれてもよい。
１．１．１：全体構成
図１は、情報処理システム１の全体構成を示すブロック図である。図１に示されるように、情報処理システム１は、端末装置１０－１、１０－２、…１０－Ｋ、…１０－Ｊ、ＸＲグラス２０－１、２０－２、…２０－Ｋ、…２０－Ｊ、及びサーバ３０を備える。Ｊは１以上の整数である。Ｋは１以上Ｊ以下の整数である。本実施形態において、端末装置１０－１、１０－２、…１０－Ｋ、…１０－Ｊは同一の構成である。但し、他の端末装置と構成が同一でない端末装置が含まれてもよい。本実施形態において、ＸＲグラス２０－１、２０－２、…２０－Ｋ、…２０－Ｊは同一の構成である。但し、他のＸＲグラスと構成が同一でないＸＲグラスが含まれてもよい。
【0013】
情報処理システム１において、端末装置１０－Ｋとサーバ３０とは、通信網ＮＥＴを介して互いに通信可能に接続される。また、端末装置１０－ＫとＸＲグラス２０－Ｋとは互いに通信可能に接続される。なお、図１において、ユーザＵ[Ｋ]は、端末装置１０－ＫとＸＲグラス２０－Ｋとの組を利用する。ユーザＵ[１]、Ｕ[２]、…Ｕ[Ｋ-１]、Ｕ[Ｋ+１]、…Ｕ[Ｊ]についても同様に端末装置とＸＲグラスとの組が利用される。端末装置１０－Ｋは、メッセージ送信装置及びメッセージ受信装置の一例である。
【0014】
サーバ３０は、通信網ＮＥＴを介して、端末装置１０－Ｋに対して各種データ及びクラウドサービスを提供する。クラウドサービスにはメッセージの送受信に関するサービスが含まれる。
【0015】
端末装置１０－Ｋは、ユーザＵ[Ｋ]が頭部に装着するＸＲグラス２０－Ｋに対して、仮想空間に配置される仮想オブジェクトを表示させる。仮想空間は三次元の空間である。仮想オブジェクトは三次元で表現される。仮想オブジェクトは、例えば、静止画像、動画、３ＤＣＧモデル、ＨＴＭＬファイル、及びテキストファイル等のデータを示す仮想オブジェクト、及びアプリケーションを示す仮想オブジェクトである。ここで、テキストファイルとしては、例として、メモ、ソースコード、日記、及びレシピが挙げられる。また、アプリケーションとしては、例として、ブラウザ、ＳＮＳを用いるためのアプリケーション、及びドキュメントファイルを生成するためのアプリケーションが挙げられる。なお、端末装置１０－Ｋは、例として、スマートフォン、及びタブレット等の携帯端末装置であることが好適である。
【0016】
ＸＲグラス２０－Ｋは、ユーザＵ[Ｋ]の頭部に装着するシースルー型のウェアラブルディスプレイである。ＸＲグラス２０－Ｋは、端末装置１０－Ｋの制御に基づいて、両眼用のレンズの各々に設けられた表示パネルに仮想オブジェクトを表示させる。なお、ＸＲグラス２０－Ｋは、表示装置の一例である。
【0017】
本実施形態において、ＸＲグラス２０－Ｋを頭部に装着したユーザＵ[Ｋ]は、端末装置１０－Ｋを用いて、例えば、他のユーザであるＵ[１]が利用する端末装置１０－１に対して、メッセージを示すメッセージ情報を送信する。メッセージは、例えば、テキスト、音声、又はアニメーション等の動画であってもよい。
【0018】
図２は、送信元のユーザＵ[Ｋ]がＸＲグラス２０－Ｋを介して視認する仮想空間ＶＳの一例である。図２においてＸ軸、Ｙ軸、及びＺ軸は互いに直交する。以下の説明では、Ｘ軸に沿った正方向をＸ正方向、Ｘ軸に沿った負方向をＸ負方向、Ｙ軸に沿った正方向をＹ正方向、Ｙ軸に沿った負方向をＹ負方向、Ｚ軸に沿った正方向をＺ正方向、Ｚ軸に沿った負方向をＺ負方向と称する。図２に示される仮想空間ＶＳには、ユーザＵ[Ｋ]のメッセージに対応する仮想オブジェクトＶＯが存在する。ユーザＵ[Ｋ]は、送信先を指定することによって、メッセージ情報を送信することができる。この例の仮想オブジェクトＶＯは球体の形状をしている。また、仮想オブジェクトＶＯは、ユーザＵ[Ｋ]の操作に応じて、仮想空間ＶＳを移動する。図２に示される仮想オブジェクトＶＯは、軌道Ｓに沿って移動する。例えば、ユーザＵ[Ｋ]は仮想オブジェクトＶＯを一方の手で持って、体の周りを一周させることによって、仮想オブジェクトＶＯを移動させる。なお、図２において、ユーザＵ[Ｋ]は省略されている。
【0019】
本実施形態では、送信元のユーザが仮想オブジェクトＶＯを仮想空間ＶＳで移動させた軌道Ｓに関する軌道情報が、メッセージ情報と対応づけて送信先のユーザＵ[１]に対して送信される。ユーザＵ[１]がＸＲグラス２０－１を用いて仮想空間ＶＳを視認する場合、仮想オブジェクトＶＯは、軌道情報に基づいて仮想空間ＶＳ上で移動する。情報処理システム１によれば、送信元のユーザＵ[Ｋ]は、送信先のユーザＵ[１]が視認する仮想空間における仮想オブジェクトＶＯの挙動を制御することができる。ユーザＵ[１]は、送信先のユーザの一例である。
【0020】
１．１．２：ＸＲグラスの構成
図３は、ＸＲグラス２０－Ｋの外観を示す斜視図である。図２に示されるようにＸＲグラス２０－Ｋの外観は、一般的な眼鏡と同様にテンプル９１及び９２、ブリッジ９３、フレーム９４及び９５、並びにレンズ４１Ｌ及び４１Ｒを有する。
図３は、ＸＲグラス２０－Ｋの外観を示す斜視図である。図２に示されるようにＸＲグラス２０－Ｋの外観は、一般的な眼鏡と同様にテンプル９１及び９２、ブリッジ９３、フレーム９４及び９５、並びにレンズ４１Ｌ及び４１Ｒを有する。
【0021】
ブリッジ９３には撮像装置２６が設けられる。撮像装置２６は外界を撮像する。また、撮像装置２６は、撮像した画像を示す撮像情報を出力する。フレーム９４には左用の深度検出装置２９Ｌが設けられる。フレーム９５には右用の深度検出装置２９Ｒが設けられる。深度検出装置２９Ｌ及び深度検出装置２９Ｒは、現実空間に存在する物体までの距離を示す深度情報を出力する。
【0022】
レンズ４１Ｌ及び４１Ｒの各々は、ハーフミラーを備えている。フレーム９４には、左眼用の液晶パネル又は有機ＥＬパネルと、左眼用の表示パネルから射出された光をレンズ４１Ｌに導光する光学部材が設けられる。液晶パネル又は有機ＥＬパネルは、以下、表示パネルと総称する。レンズ４１Ｌに設けられるハーフミラーは、外界の光を透過させて左眼に導くと共に、光学部材によって導光された光を反射した後、反射した光を左眼に入射させる。フレーム９５には、右眼用の表示パネルと、右眼用の表示パネルから射出された光をレンズ４１Ｒに導光する光学部材が設けられる。レンズ４１Ｒに設けられるハーフミラーは、外界の光を透過させて右眼に導くと共に、光学部材によって導光された光を反射した後、反射した光を右眼に入射させる。
【0023】
後述するディスプレイ２８は、レンズ４１Ｌ、左眼用の表示パネル、及び左眼用の光学部材、並びにレンズ４１Ｒ、右眼用の表示パネル、及び右眼用の光学部材を含む。
【0024】
以上の構成において、ユーザＵ[Ｋ]は表示パネルが表示する画像を、外界の様子と重ね合わせたシースルーの状態で観察できる。また、ＸＲグラス２０－Ｋは、視差を伴う両眼画像のうち、左眼用画像を左眼用の表示パネルに表示させ、右眼用画像を右眼用の表示パネルに表示させる。このため、ＸＲグラス２０－Ｋは、ユーザＵ[Ｋ]に対し、表示された画像があたかも奥行き、及び立体感を持つかのように知覚させる。
【0025】
図４は、ＸＲグラス２０－Ｋの構成例を示すブロック図である。ＸＲグラス２０－Ｋは、処理装置２１、記憶装置２２、視線検出装置２３、ＧＰＳ装置２４、動き検出装置２５、撮像装置２６、通信装置２７、ディスプレイ２８、並びに深度検出装置２９Ｌ及び２９Ｒを備える。ＸＲグラス２０－Ｋが有する各要素は、情報を通信するための単体又は複数のバスによって相互に接続される。なお、本明細書における「装置」という用語は、回路、デバイス又はユニット等の他の用語に読替えてもよい。
【0026】
処理装置２１は、ＸＲグラス２０－Ｋの全体を制御するプロセッサである。処理装置２１は、例えば、単数又は複数のチップを用いて構成される。また、処理装置２１は、例えば、周辺装置とのインタフェース、演算装置及びレジスタ等を含む中央処理装置（ＣＰＵ：Central Processing Unit）を用いて構成される。なお、処理装置２１が有する機能の一部又は全部を、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）等のハードウェアによって実現してもよい。処理装置２１は、各種の処理を並列的又は逐次的に実行する。
【0027】
記憶装置２２は、処理装置２１による読取及び書込が可能な記録媒体である。また、記憶装置２２は、処理装置２１が実行する制御プログラムＰＲ１を含む複数のプログラムを記憶する。
【0028】
視線検出装置２３は、ユーザＵ[Ｋ]の視線を検出した後、検出結果を示す視線情報を生成する。視線検出装置２３が視線を検出する方法としては、どのような方法を用いてもよい。視線検出装置２３は、例えば、目頭の位置と虹彩の位置に基づいて視線情報を生成してもよい。視線情報はユーザＵ[Ｋ]の視線の方向を示す。視線検出装置２３は、視線情報を処理装置２１に出力する。処理装置２１に出力された視線情報は、通信装置２７を介して、端末装置１０－Ｋに出力される。
【0029】
ＧＰＳ装置２４は、複数の衛星からの電波を受信する。また、ＧＰＳ装置２４は、受信した電波からユーザＵ[Ｋ]の位置を示すユーザ位置情報を生成する。ユーザ位置情報は、ユーザＵ[Ｋ]の位置を特定できるのであれば、どのような形式であってもよい。ユーザ位置情報は、例えば、ＸＲグラス２０－Ｋの緯度と経度とを示す。ユーザ位置情報は、処理装置２１に出力される。処理装置２１は、通信装置２７を介して、ユーザ位置情報を端末装置１０－Ｋに出力する。
【0030】
動き検出装置２５は、ＸＲグラス２０－Ｋの動きを検出する。動き検出装置２５は、加速度を検出する加速度センサ及び角加速度を検出するジャイロセンサなどの慣性センサを含む。加速度センサは、直交するＸ軸、Ｙ軸、及びＺ軸の軸ごとに当該軸に沿う方向の加速度を検出する。ジャイロセンサは、Ｘ軸、Ｙ軸、及びＺ軸の軸ごとに当該軸を回転の中心軸とする角加速度を検出する。動き検出装置２５は、ジャイロセンサの出力情報に基づいて、ＸＲグラス２０－Ｋの姿勢を示すユーザ姿勢情報を生成できる。ユーザ動き情報は、３軸の加速度を各々示す加速度情報及び３軸の角加速度を各々示す角加速度情報を含む。また、動き検出装置２５は、ＸＲグラス２０－Ｋの姿勢を示すユーザ姿勢情報、及びＸＲグラス２０－Ｋの動きに関するユーザ動き情報を処理装置２１に出力する。処理装置２１に出力されたユーザ姿勢情報及びユーザ動き情報は、通信装置２７を介して、端末装置１０－Ｋに出力される。
【0031】
撮像装置２６は、外界を撮像して得られた撮像情報を出力する。また、撮像装置２６は、例えば、レンズ、撮像素子、増幅器、及びＡＤ変換器を備える。レンズを介して集光された光は、撮像素子によってアナログ信号である撮像信号に変換される。増幅器は撮像信号を増幅した上で、増幅された撮像信号をＡＤ変換器に出力する。ＡＤ変換器はアナログ信号である増幅された撮像信号をデジタル信号である撮像情報に変換する。変換された撮像情報は、処理装置２１に出力される。処理装置２１に出力された撮像情報は、通信装置２７を介して、端末装置１０－Ｋに出力される。撮像装置２６は、例えば、カメラである。
【0032】
通信装置２７は、他の装置と通信を行うための、送受信デバイスとしてのハードウェアである。また、通信装置２７は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュール等とも呼ばれる。通信装置２７は、有線接続用のコネクターを備え、上記コネクターに対応するインタフェース回路を備えていてもよい。また、通信装置２７は、無線通信インタフェースを備えていてもよい。有線接続用のコネクター及びインタフェース回路としては有線ＬＡＮ、ＩＥＥＥ１３９４、ＵＳＢに準拠した製品が挙げられる。また、無線通信インタフェースとしては無線ＬＡＮ及びＢｌｕｅｔｏｏｔｈ（登録商標）等に準拠した製品が挙げられる。
【0033】
ディスプレイ２８は、画像を表示するデバイスである。ディスプレイ２８は、処理装置２１の制御のもとで各種の画像を表示する。ディスプレイ２８は、上記のように、レンズ４１Ｌ、左眼用の表示パネル、及び左眼用の光学部材、並びにレンズ４１Ｒ、右眼用の表示パネル、及び右眼用の光学部材を含む。表示パネルとしては、例えば、液晶表示パネル及び有機ＥＬ表示パネル等の各種の表示パネルが好適に利用される。
【0034】
１．１．３：端末装置の構成
図５は、端末装置１０－Ｋの構成例を示すブロック図である。端末装置１０－Ｋは、処理装置１１、記憶装置１２、通信装置１３、ディスプレイ１４、入力装置１５、及び慣性センサ１６を備える。端末装置１０－Ｋが有する各要素は、情報を通信するための単体又は複数のバスによって相互に接続される。
図５は、端末装置１０－Ｋの構成例を示すブロック図である。端末装置１０－Ｋは、処理装置１１、記憶装置１２、通信装置１３、ディスプレイ１４、入力装置１５、及び慣性センサ１６を備える。端末装置１０－Ｋが有する各要素は、情報を通信するための単体又は複数のバスによって相互に接続される。
【0035】
処理装置１１は、端末装置１０－Ｋの全体を制御するプロセッサである。また、処理装置１１は、例えば、単数又は複数のチップを用いて構成される。処理装置１１は、例えば、周辺装置とのインタフェース、演算装置及びレジスタ等を含む中央処理装置（ＣＰＵ）を用いて構成される。なお、処理装置１１が有する機能の一部又は全部を、ＤＳＰ、ＡＳＩＣ、ＰＬＤ、ＦＰＧＡ等のハードウェアによって実現してもよい。処理装置１１は、各種の処理を並列的又は逐次的に実行する。
【0036】
記憶装置１２は、処理装置１１による読取及び書込が可能な記録媒体である。また、記憶装置１２は、処理装置１１が実行する制御プログラムＰＲ２を含む複数のプログラムを記憶する。また、記憶装置１２は、ＸＲグラス２０－Ｋに表示される画像を示す外部画像情報を更に記憶してもよい。この外部画像情報にはメッセージに対応付けられる仮想オブジェクトＶＯを示す外部画像情報が含まれる。
【0037】
更に、記憶装置１２は、基準軌道情報Ｄを記憶する。基準軌道情報Ｄは、予め定められた仮想オブジェクトＶＯの複数の軌道を示す。図２を参照して説明したように、ユーザＵ[Ｋ]は、仮想オブジェクトＶＯを直接操作することによって、仮想オブジェクトＶＯを仮想空間ＶＳにおいて移動させることができる。また、ユーザＵ[Ｋ]は、予め定められた複数の軌道から、一の軌道を選択することができる。この場合、仮想オブジェクトＶＯは、選択された一の軌道に沿って移動する。この例の基準軌道情報Ｄは、図６に示されるように、第１の基準軌道Ｓｒ１を示す第１基準軌道情報Ｄ１、第２の基準軌道Ｓｒ２を示す第２基準軌道情報Ｄ２、第３の基準軌道Ｓｒ３を示す第３基準軌道情報Ｄ３、第４の基準軌道Ｓｒ４を示す第４基準軌道情報Ｄ４、第５の基準軌道Ｓｒ５を示す第５基準軌道情報Ｄ５、第６の基準軌道Ｓｒ６を示す第６基準軌道情報Ｄ６及び第７の基準軌道Ｓｒ７を示す第７基準軌道情報Ｄ７を含む。
【0038】
図７は、第１の基準軌道Ｓｒ１から第７の基準軌道Ｓｒ７までを示す模式図である。第１の基準軌道Ｓｒ１は、仮想オブジェクトＶＯをＺ正方向、即ち、図中、上方向に移動させる軌道である。第２の基準軌道Ｓｒ２は、仮想オブジェクトＶＯを、Ｚ負方向、即ち、図中、下方向に移動させる軌道である。第３の基準軌道Ｓｒ３は、仮想オブジェクトＶＯをＸ正方向、即ち、図中、右方向に移動させる軌道である。第４の基準軌道Ｓｒ４は、仮想オブジェクトＶＯをＸ負方向、即ち、図中、左方向に移動させる軌道である。第５の基準軌道Ｓｒ５は、仮想オブジェクトＶＯをＸ正方向に波打つように移動させる軌道である。第６の基準軌道Ｓｒ６は、仮想オブジェクトＶＯをＸ負方向に波打つように移動させる軌道である。第７の基準軌道Ｓｒ７は、仮想オブジェクトＶＯが仮想空間ＶＳを漂うように移動させる軌道である。
【0039】
図５に示される通信装置１３は、他の装置と通信を行うための、送受信デバイスとしてのハードウェアである。通信装置１３は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュール等とも呼ばれる。通信装置１３は、有線接続用のコネクターを備え、上記コネクターに対応するインタフェース回路を備えていてもよい。また、通信装置１３は、無線通信インタフェースを備えていてもよい。有線接続用のコネクター及びインタフェース回路としては有線ＬＡＮ、ＩＥＥＥ１３９４、ＵＳＢに準拠した製品が挙げられる。また、無線通信インタフェースとしては無線ＬＡＮ及びＢｌｕｅｔｏｏｔｈ（登録商標）等に準拠した製品が挙げられる。
【0040】
ディスプレイ１４は、画像及び文字情報を表示するデバイスである。ディスプレイ１４は、処理装置１１の制御のもとで各種の画像を表示する。例えば、液晶表示パネル及び有機ＥＬ（Electro Luminescence）表示パネル等の各種の表示パネルがディスプレイ１４として好適に利用される。
【0041】
入力装置１５は、ユーザＵ[Ｋ]の入力装置１５に対する操作に応じた操作情報を生成する。入力装置１５は、操作情報を処理装置１１に出力する。例えば、入力装置１５は、キーボード、タッチパッド、タッチパネル又はマウス等のポインティングデバイスを含んで構成される。ここで、入力装置１５は、タッチパネルを含んで構成される場合、ディスプレイ１４を兼ねてもよい。
【0042】
慣性センサ１６は、慣性力を検出するセンサである。慣性センサ１６は、例えば、加速度センサ、角速度センサ、及びジャイロセンサのうち、１以上のセンサを含む。慣性センサ１６は、１以上のセンサの検出結果を示すセンサ情報を処理装置１１に出力する。処理装置１１は、センサ情報に基づいて、端末装置１０－Ｋの姿勢を検出する。更に、処理装置１１は、端末装置１０－Ｋの姿勢に基づいて、仮想空間ＶＳにおいて、仮想オブジェクトＶＯの選択、文字の入力、及び指示の入力を受け付ける。例えば、ユーザＵ[Ｋ]が端末装置１０－Ｋの中心軸を仮想空間ＶＳの所定領域に向けた状態で、入力装置１５を操作すると、所定領域に配置される仮想オブジェクトＶＯが選択される。入力装置１５に対するユーザＵ[Ｋ]の操作は、例えば、ダブルタップである。このようにユーザＵ[Ｋ]は端末装置１０－Ｋを操作することで、端末装置１０－Ｋの入力装置１５を見なくても仮想オブジェクトＶＯを選択できる。また、処理装置１１は、文字の入力において、仮想空間に複数の仮想キーを有する仮想キーボードを表示させる。ユーザＵ[Ｋ]は、端末装置１０－Ｋの中心軸を仮想キーに向けた状態で、入力装置１５を操作することによって、文字が入力される。ユーザＵ[Ｋ]は、この入力操作によって、メッセージの送信先のアドレスを入力することができる。
【0043】
処理装置１１は、記憶装置１２から制御プログラムＰＲ２を読み出して、読み出した制御プログラムＰＲ２を実行する。その結果、処理装置１１は、取得部１１１、受付部１１２、軌道情報生成部１１３、送信情報生成部１１４、表示制御部１１５、送信制御部１１６、及び受信制御部１１７として機能する。
【0044】
取得部１１１は、通信装置１３を介して、撮像情報、視線情報、ユーザ位置情報、ユーザ姿勢情報、ユーザ動き情報及び深度情報を含む情報を取得する。
【0045】
受付部１１２は、入力装置１５から出力される操作情報、及び慣性センサ１６から出力されるセンサ情報を受け付ける。受付部１１２は、センサ情報に基づいて、端末装置１０－Ｋの姿勢を示す装置姿勢情報を生成する。
【0046】
軌道情報生成部１１３は、ユーザＵ［Ｋ］の操作に応じて、メッセージに対応する仮想オブジェクトＶＯが仮想空間において移動された場合、仮想オブジェクトＶＯの軌道に関する軌道情報を生成する。但し、ユーザＵ［Ｋ］はメッセージの送信元のユーザであるとする。ユーザＵ［Ｋ］の操作には、入力装置１５に対する操作の他に、ユーザＵ［Ｋ］の視線に基づく操作、及びユーザＵ［Ｋ］のジェスチャーが含まれる。視線に基づく操作は、ＸＲグラス２０－Ｋから取得される視線情報によって、特定される。ジェスチャーに基づく操作は、ＸＲグラス２０－Ｋから取得される撮像情報によって、特定される。
【0047】
図８は、軌道情報生成部１１３の詳細な構成を示すブロック図である。軌道情報生成部１１３は、ユーザ軌道生成部１１３Ａ、基準軌道選択部１１３Ｂ、及び軌道合成部１１３Ｃを含む。
【0048】
ユーザ軌道生成部１１３Ａは、ユーザＵ[Ｋ]が、メッセージに対応する仮想オブジェクトＶＯを直接操作することによって移動する仮想オブジェクトＶＯの軌道をユーザ軌道として生成する。仮想オブジェクトＶＯに対するユーザＵ［Ｋ］の直接の操作は、第２操作の一例である。仮想オブジェクトＶＯに対するユーザＵ[Ｋ]の操作は、例えば、ユーザＵ[Ｋ]が仮想オブジェクトＶＯを手に持って、仮想オブジェクトＶＯを仮想空間ＶＳにおいて移動させる操作である。この操作が為された場合、ユーザ軌道生成部１１３Ａは、ユーザＵ［Ｋ］の手の位置をトラッキングすることによって、仮想オブジェクトＶＯの軌道を特定する。ユーザ軌道生成部１１３Ａは、ユーザＵ［Ｋ］の手の位置を、深度情報に基づいて特定する。あるいは、ユーザ軌道生成部１１３Ａは、撮像情報に基づいてユーザＵ［Ｋ］の手の位置を特定する。撮像情報に基づく手の位置の特定において、ユーザ軌道生成部１１３Ａは、撮像画像と手の位置との関係を学習済みの学習モデルを用いて、手の位置を特定してもよい。
【0049】
ユーザ軌道生成部１１３Ａは、ユーザＵ［Ｋ］の手の位置の時間変化を示す軌跡情報を生成する。ユーザＵ［Ｋ］の手の位置と仮想オブジェクトＶＯの中心位置との相対的な位置関係を示す相対位置情報は既知である。ユーザ軌道生成部１１３Ａは、軌跡情報と相対位置情報とに基づいて、仮想オブジェクトＶＯの仮想空間ＶＳにおける位置の時間変化を示すユーザ軌道を算出し、算出したユーザ軌道を示すユーザ軌道情報を生成する。図２に示される軌道Ｓは、ユーザ軌道の一例である。
【0050】
ところで、ユーザＵ[Ｋ]が、仮想オブジェクトＶＯに対して直接操作を加える場合、ユーザＵ[Ｋ]の手がぶれる場合がある。この場合、ユーザ軌道は、微妙にぶれた軌道となる。そこで、ユーザ軌道生成部１１３Ａは、ユーザ軌道にユーザＵ[Ｋ]の操作に伴うノイズ成分を除去する処理を施すことによって、ユーザ軌道を補正してもよい。補正が実行された場合、ユーザ軌道生成部１１３Ａが生成するユーザ軌道情報は、補正済のユーザ軌道を示す。例えば、図９に示されるユーザ軌道Ｓｕ１は補正前の軌道である。ユーザ軌道生成部１１３Ａは、ユーザ軌道Ｓｕ１にノイズ成分を除去する処理を施すことによって、補正済のユーザ軌道Ｓｕ２を生成する。ノイズ成分を除去する処理は、例えば、ユーザ軌道から高域周波数成分を除去するローパスフィルタ処理である。但し、ノイズ成分を除去する処理は、ローパスフィルタ処理に限定されず、ノイズを除去できるのであれば、どのような処理であってもよい。
【0051】
ユーザＵ［Ｋ］は、仮想オブジェクトＶＯを直接操作することによって、仮想オブジェクトＶＯの軌道としてユーザ軌道を指定してもよいし、あるいは、予め用意されている複数の軌道の中から一の軌道を選択することによって、仮想オブジェクトＶＯの軌道を指定してもよい。本実施形態において、予め用意されている複数の軌道は、図７に示される第１の基準軌道Ｓｒ１、第２の基準軌道Ｓｒ２、…第７の基準軌道Ｓｒ７である。更に、軌道情報生成部１１３は、ユーザ軌道と選択された１以上の軌道とを合成することによって合成された軌道を生成し、合成された軌道を示す軌道情報を生成してもよい。軌道の合成は、２以上の基準軌道の合成であってよいし、あるいは、ユーザ軌道と１以上の基準軌道との合成であってもよい。予め用意されている複数の軌道の中から１以上の軌道を選択する操作は、第１操作の一例である。
【0052】
基準軌道選択部１１３Ｂは、ユーザＵ［Ｋ］の操作が第１操作である場合に、第１操作によって選択される１以上の軌道を特定する。具体的には、基準軌道選択部１１３Ｂは、第１操作によって選択される１以上の軌道に対応する基準軌道情報Ｄを記憶装置１２から読み出す。
【0053】
軌道合成部１１３Ｃは、２以上の軌道を合成して、合成された軌道を生成する。ユーザＵ［Ｋ］が仮想オブジェクトＶＯを仮想空間ＶＳ上で移動させる第２操作を行った場合、ユーザ軌道が生成される。ユーザ軌道が生成されている状態において、基準軌道選択部１１３Ｂによって１以上の軌道が選択された場合、軌道合成部１１３Ｃは、ユーザ軌道と選択された１以上の軌道を合成する。例えば、ユーザ軌道が図２に示されるループ状の軌道Ｓであり、選択された軌道が図７に示される第１の基準軌道Ｓｒ１である場合、軌道合成部１１３Ｃは、軌道Ｓと第１の基準軌道Ｓｒ１を合成することによって、図１０Ａに示される軌道Ｓｘを生成する。
【0054】
また、ユーザ軌道が生成されていない状態において、基準軌道選択部１１３Ｂによって１以上の軌道が選択された場合、軌道合成部１１３Ｃは、１以上の軌道を合成する。例えば、基準軌道選択部１１３Ｂによって、図７に示される第１の基準軌道Ｓｒ１が選択された後、第３の基準軌道Ｓｒ３が選択された場合、軌道合成部１１３Ｃは、第１の基準軌道Ｓｒ１と第３の基準軌道Ｓｒ３とを合成することによって、図１０Ｂに示される軌道Ｓｙを生成する。
【0055】
次に、図５に示される送信情報生成部１１４は、メッセージ情報、軌道情報生成部１１３によって生成された軌道情報、送信先情報、及び送信元情報を含む送信情報を生成する。送信先情報は、例えば、メッセージの送信先を示すアドレスである。送信元情報は、例えば、メッセージの送信元を示すアドレスである。
【0056】
表示制御部１１５は、ディスプレイ１４に表示させる画像を示す内部画像情報と、ＸＲグラス２０－Ｋに表示させる画像を示す外部画像情報とを生成する。表示制御部１１５は、内部画像情報をディスプレイ１４に出力する。表示制御部１１５は通信装置１３を介して外部画像情報をＸＲグラス２０－Ｋに出力することによって、ＸＲグラス２０－Ｋに仮想オブジェクトＶＯを含む仮想空間ＶＳを表示させる。
【0057】
表示制御部１１５は、例えば、ユーザＵ［Ｋ］が複数の軌道の中から１以上の軌道を選択する場合に、図１１に示される仮想空間ＶＳの画像を生成する。図１１に示されるように、仮想空間ＶＳには、仮想オブジェクトＶＯに対応付けられて第１アイコンＡ１、第２アイコンＡ２、…第７アイコンＡ７が配置される。第１アイコンＡ１、第２アイコンＡ２、…第７アイコンＡ７は第１の基準軌道Ｓｒ１、第２の基準軌道Ｓｒ２、…第７の基準軌道Ｓｒ７と１対１に対応する。ユーザＵ[Ｋ]は、アイコンを選択することによって、１以上の基準軌道を指定することができる。
【0058】
図５に示される送信制御部１１６は、通信装置１３を用いて送信情報をユーザＵ[Ｋ]が指定する送信先に送信させる。具体的には、送信先情報を含む送信情報が、サーバ３０に送信される。
【0059】
受信制御部１１７は、サーバ３０を介して、送信元のユーザの端末装置から送信される送信情報を通信装置１３に受信させる。ユーザＵ[１]が送信元のユーザであり、ユーザＵ[Ｋ]が送信先のユーザである場合、端末装置１０－１から送信される送信情報は、サーバ３０を経由して、端末装置１０－Ｋが受信する。
【0060】
画像生成部１１８は、メッセージに対応する仮想オブジェクトＶＯを生成する。また、画像生成部１１８は、受信された送信情報に含まれる軌道情報に従って、仮想空間ＶＳにおいて仮想オブジェクトＶＯが移動する画像を生成する。画像生成部１１８は、生成された画像を示す外部画像情報を表示制御部１１５に出力する。表示制御部１１５は、送信先のユーザであるユーザＵ[Ｋ]のＸＲグラス２０－Ｋに外部画像情報を出力する。ユーザＵ[１]が送信元のユーザである場合、ユーザＵ[１]の操作に応じて仮想空間ＶＳを移動する仮想オブジェクトＶＯの挙動が、送信先のユーザＵ[Ｋ]のＸＲグラス２０－Ｋに表示される。この表示によって、ユーザＵ[Ｋ]はＸＲグラス２０－Ｋを介して、仮想空間ＶＳを移動する仮想オブジェクトＶＯを視認できる。
【0061】
１．１．４：サーバの構成
図１２は、サーバ３０の構成例を示すブロック図である。サーバ３０は、処理装置３１、記憶装置３２、通信装置３３、ディスプレイ３４、及び入力装置３５を備える。サーバ３０が有する各要素は、情報を通信するための単体又は複数のバスによって相互に接続される。
図１２は、サーバ３０の構成例を示すブロック図である。サーバ３０は、処理装置３１、記憶装置３２、通信装置３３、ディスプレイ３４、及び入力装置３５を備える。サーバ３０が有する各要素は、情報を通信するための単体又は複数のバスによって相互に接続される。
【0062】
処理装置３１は、サーバ３０の全体を制御するプロセッサである。また、処理装置３１は、例えば、単数又は複数のチップを用いて構成される。処理装置３１は、例えば、周辺装置とのインタフェース、演算装置及びレジスタ等を含む中央処理装置（ＣＰＵ）を用いて構成される。なお、処理装置３１の機能の一部又は全部を、ＤＳＰ、ＡＳＩＣ、ＰＬＤ、ＦＰＧＡ等のハードウェアによって実現してもよい。処理装置３１は、各種の処理を並列的又は逐次的に実行する。
【0063】
記憶装置３２は、処理装置３１による読取及び書込が可能な記録媒体である。また、記憶装置３２は、処理装置３１が実行する制御プログラムＰＲ３を含む複数のプログラムを記憶する。また、記憶装置３２は、データベースＤＢを記憶する。データベースＤＢは、識別情報、送信情報、受信日時情報、及び送信日時情報を相互に対応付けて記憶する。識別情報は送信情報を一意に識別する情報である。送信情報は、送信元の端末装置１０－１～１０-Ｊから受信される。受信日時情報は送信情報をサーバ３０が受信した日時を示す。送信日時情報は、送信情報を送信先の端末装置１０－１～１０-Ｊへ送信した送信日時を示す。
【0064】
通信装置３３は、他の装置と通信を行うための、送受信デバイスとしてのハードウェアである。通信装置３３は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュール等とも呼ばれる。通信装置３３は、有線接続用のコネクターを備え、上記コネクターに対応するインタフェース回路を備えていてもよい。また、通信装置３３は、無線通信インタフェースを備えていてもよい。有線接続用のコネクター及びインタフェース回路としては有線ＬＡＮ、ＩＥＥＥ１３９４、ＵＳＢに準拠した製品が挙げられる。また、無線通信インタフェースとしては無線ＬＡＮ及びＢｌｕｅｔｏｏｔｈ（登録商標）等に準拠した製品が挙げられる。
【0065】
ディスプレイ３４は、画像及び文字情報を表示するデバイスである。ディスプレイ３４は、処理装置３１の制御のもとで各種の画像を表示する。例えば、液晶表示パネル及び有機ＥＬ表示パネル等の各種の表示パネルがディスプレイ３４として好適に利用される。
【0066】
入力装置３５は、情報処理システム１の管理者からの操作を受け付ける機器である。例えば、入力装置３５は、キーボード、タッチパッド、タッチパネル又はマウス等のポインティングデバイスを含んで構成される。ここで、入力装置３５は、タッチパネルを含んで構成される場合、ディスプレイ３４を兼ねてもよい。
【0067】
処理装置３１は、例えば、記憶装置３２から制御プログラムＰＲ３を読み出して、読み出した制御プログラムＲＰ３を実行する。その結果、処理装置３１は、取得部３１１、及び出力部３１２として機能する。
【0068】
取得部３１１は、通信装置３３を介して、端末装置１０－Ｋから送信情報を含む各種の情報を取得する。
【0069】
出力部３１２は、送信情報に含まれる送信先情報を参照して、当該送信情報を送信先情報の示す送信先アドレスへ通信装置３３を介して出力する。
【0070】
１．２：実施形態の動作
端末装置１０－Ｋの動作を送信処理と受信処理とに分けて説明する。
端末装置１０－Ｋの動作を送信処理と受信処理とに分けて説明する。
【0071】
１．２．１：送信処理
図１３は、実施形態に係る端末装置１０－Ｋの送信処理の動作を示すフローチャートである。
図１３は、実施形態に係る端末装置１０－Ｋの送信処理の動作を示すフローチャートである。
【0072】
ステップＳ１において、処理装置１１は、取得部１１１として機能する。処理装置１１は、ユーザＵ[Ｋ]によって作成されたメッセージ情報を取得する。
【0073】
ステップＳ２において、処理装置１１は、表示制御部１１５及び画像生成部１１８として機能する。処理装置１１は、ステップＳ１において作成されたメッセージ情報に対応する仮想オブジェクトＶＯを生成し、生成した仮想オブジェクトＶＯをＸＲグラス２０－Ｋに表示させる。ユーザＵ[Ｋ]は、例えば、以下の操作を行ってもよい。第１に、ユーザＵ[Ｋ]は、メッセージ用の仮想オブジェクトＶＯを生成する指示を、ジェスチャー、視線、又は入力装置１５に対する操作によって入力する。処理装置１１は、上記操作を受け付けて、仮想オブジェクトＶＯを仮想空間ＶＳに表示させる。第２に、ユーザＵ[Ｋ]は、テキスト等のメッセージを表す仮想オブジェクトを、送信用の仮想オブジェクトＶＯにドラック＆ドロップする操作を行う。例えば、図１４Ａにおいて、「こんにちは！」を示す仮想オブジェクトＶＯｔを送信用の仮想オブジェクトＶＯにドラック＆ドロップする操作によって、「こんにちは！」に対応するメッセージ情報と仮想オブジェクトＶＯとが対応付けられる。
【0074】
ステップＳ３において、処理装置１１は、表示制御部１１５及び受付部１１２として機能する。処理装置１１は、送信先の装置において仮想オブジェクトＶＯを移動させる操作を受け付けたかを判定する。処理装置１１は、例えば、図１４Ｂに示される仮想空間ＶＳをＸＲグラス２０－Ｋに表示させる。この例では、仮想オブジェクトＶＯに対応付けて、「仮想オブジェクトの軌道を生成しますか？」といったメッセージと共に、ボタンＢ１及びボタンＢ２が表示される。ボタンＢ１は、ユーザＵ[Ｋ]が送信先の装置において仮想オブジェクトＶＯの移動させる指示を入力するために用いられる。ボタンＢ２は、ユーザＵ[Ｋ]が送信先の装置において仮想オブジェクトＶＯを移動させない指示を入力するために用いられる。ユーザＵ[Ｋ]がボタンＢ１を操作した場合、処理装置１１は、送信先の装置において仮想オブジェクトＶＯを移動させる操作を受け付けたと判定する。一方、ユーザＵ[Ｋ]がボタンＢ２を操作した場合、処理装置１１は、送信先の装置において仮想オブジェクトＶＯを移動さない操作を受け付けたと判定する。
【0075】
ステップＳ３の判定結果が否定の場合、処理装置１１は、処理をステップＳ５に進める。一方、ステップＳ３の判定結果が肯定の場合、処理装置１１は、軌道情報を生成する（ステップＳ４）。
【0076】
図１５は、軌道情報の生成に関する端末装置１０－Ｋの詳細な動作を示すフローチャートである。ステップＳ４１において、処理装置１１は、表示制御部１１５及び受付部１１２として機能する。処理装置１１は、ユーザ軌道の入力を受け付けたか否かを判定する。処理装置１１は、例えば、図１６Ａに示される仮想空間ＶＳをＸＲグラス２０－Ｋに表示させる。この例では、仮想オブジェクトＶＯに対応付けて、「あなたが仮想オブジェクト移動させますか？」といったメッセージと共に、ボタンＢ３及びボタンＢ４が表示される。ボタンＢ３は、ユーザＵ[Ｋ]が自ら仮想オブジェクトＶＯの移動する旨の指示を入力するために用いられる。ボタンＢ４は、ユーザＵ[Ｋ]が自ら仮想オブジェクトＶＯの移動させない旨の指示を入力するために用いられる。ユーザＵ[Ｋ]がボタンＢ３を操作した場合、処理装置１１は、ユーザ軌道の入力を受け付けたと判定する。一方、ユーザＵ[Ｋ]がボタンＢ４を操作した場合、処理装置１１は、ユーザ軌道の入力を受け付けなかったと判定する。
【0077】
処理装置１１は、ステップＳ４１の判定結果が肯定の場合、処理をステップＳ４２に進める。ステップＳ４２において、処理装置１１は、ユーザ軌道生成部１１３Ａとして機能する。処理装置１１は、ユーザＵ［Ｋ］が仮想オブジェクトＶＯを手に持って仮想空間ＶＳを移動させる場合、ユーザＵ［Ｋ］の手の位置をトラッキングすることによって、仮想オブジェクトＶＯの軌道を特定する。処理装置１１は、特定された軌道を示すユーザ軌道情報を生成する。
【0078】
ステップＳ４３において、処理装置１１は、表示制御部１１５及び受付部１１２として機能する。処理装置１１は、軌道を合成する指示を受け付けたかを判定する。処理装置１１は、例えば、図１６Ｂに示される仮想空間ＶＳをＸＲグラス２０－Ｋに表示させる。この例では、仮想オブジェクトＶＯに対応付けて、「軌道を合成しますか？」といったメッセージと共に、ボタンＢ５及びボタンＢ６が表示される。ボタンＢ５は、ユーザＵ[Ｋ]が軌道を合成する指示を入力するために用いられる。ボタンＢ６は、ユーザＵ[Ｋ]が軌道を合成しない指示を入力するために用いられる。ユーザＵ[Ｋ]がボタンＢ５を操作した場合、処理装置１１は、軌道を合成する指示を受け付けたと判定する。一方、ユーザＵ[Ｋ]がボタンＢ６を操作した場合、処理装置１１は、軌道を合成する指示を受け付けなかったと判定する。
【0079】
処理装置１１は、ステップＳ４３の判定結果が否定の場合、処理をステップＳ４６に進める。処理装置１１は、ステップＳ４３の判定結果が肯定の場合、処理をステップＳ４４に進める。
【0080】
ステップＳ４４において、処理装置１１は、基準軌道選択部１１３Ｂ、表示制御部１１５及び受付部１１２として機能する。処理装置１１は、例えば、図１１Ｂに示される仮想空間ＶＳをＸＲグラス２０－Ｋに表示させる。この表示によって、ユーザＵ［Ｋ］は、複数の基準軌道のうち、１以上の基準軌道を選択することが促される。処理装置１１は、ユーザＵ［Ｋ］によって選択された１以上の基準軌道を受け付ける。
【0081】
ステップＳ４５において、処理装置１１は、軌道合成部１１３Ｃとして機能する。処理装置１１は、ステップＳ４４において受け付けた１以上の軌道に対応する基準軌道情報及びステップＳ４２において生成されたユーザ軌道情報に基づいて、合成された軌道を生成する。
【0082】
ステップＳ４６において、処理装置１１は、軌道情報生成部１１３として機能する。処理装置１１は、仮想オブジェクトＶＯが仮想空間ＶＳを移動する軌道を示す軌道情報を生成する。
【0083】
ステップＳ４１において、ユーザ軌道の入力を受け付けなかったと判定された場合、処理装置１１は、処理をステップＳ４７に進める。ステップＳ４７において、処理装置１１は、ステップＳ４４と同様に、ユーザＵ［Ｋ］によって選択された１以上の基準軌道を受け付ける。
【0084】
ステップＳ４８において、処理装置１１は、ユーザＵ［Ｋ］によって２以上の基準軌道が選択された否かを判定する。
【0085】
ステップＳ４８の判定結果が肯定の場合、処理装置１１は、処理をステップＳ４５に進める。この場合、処理装置１１は、ユーザＵ[Ｋ]によって選択された２以上の基準軌道を合成する。
【0086】
一方、ステップＳ４８の判定結果が否定の場合、処理装置１１は、処理をステップＳ４６に進める。この場合、処理装置１１は、ユーザＵ[Ｋ]によって選択された１の基準軌道を示す軌道情報を生成する。以上が、図１３に示されるステップＳ４の詳細な処理内容である。
【0087】
図１３に示されるステップＳ５において、処理装置１１は、受付部１１２として機能する。処理装置１１は、ユーザＵ[Ｋ]が指定する送信先を受け付ける。この受付によって、処理装置１１は、送信先情報を取得する。
【0088】
ステップＳ６において、処理装置１１は、送信情報を生成する。具体的には、処理装置１１は、ステップＳ１において生成したメッセージ情報、ステップＳ４において取得した軌道情報、ステップＳ５において取得した送信先情報、及び送信元情報を含む送信情報を生成する。
【0089】
ステップＳ７において、処理装置１１は、送信制御部１１６として機能する。処理装置１１は、通信装置１３を用いて、送信情報を送信先へ送信させる。
【0090】
１．２．２：受信処理
図１７は、実施形態に係る端末装置１０－Ｋの受信処理の動作を示すフローチャートである。
図１７は、実施形態に係る端末装置１０－Ｋの受信処理の動作を示すフローチャートである。
【0091】
ステップＳ１１において、処理装置１１は、受信制御部１１７として機能する。処理装置１１は、送信情報を通信装置１３に受信させることによって、送信情報を取得する。
【0092】
ステップＳ１２において、処理装置１１は、受信制御部１１７として機能する。処理装置１１は、送信情報に軌道情報が含まれるか否かを判定する。ステップＳ１２の判定結果が否定の場合、処理装置１１は、受信処理を終了する。
【0093】
ステップＳ１２の判定結果が肯定の場合、処理装置１１は、ステップＳ１３において、画像生成部１１８として機能する。処理装置１１は、送信情報に含まれる軌道情報に基づいて、仮想オブジェクトＶＯが仮想空間ＶＳにおいて移動する画像を示す外部画像情報を生成する。
【0094】
ステップＳ１４において、処理装置１１は、表示制御部１１５として機能する。処理装置１１は、通信装置１３を介してステップＳ１３において生成された外部画像情報をＸＲグラス２０－Ｋに出力する。この出力によって、ＸＲグラス２０－Ｋに仮想オブジェクトＶＯが移動する仮想空間ＶＳを表示させることができる。
【0095】
１．３：実施形態が奏する効果
以上の説明によれば、メッセージ送信装置としての端末装置１０－Ｋは、軌道情報生成部１１３と、送信情報生成部１１４と、送信制御部１１６とを備える。軌道情報生成部１１３は、送信元のユーザＵ［Ｋ］の操作に応じて、メッセージに対応する仮想オブジェクトＶＯが仮想空間ＶＳにおいて移動された場合、仮想オブジェクトＶＯの軌道に関する軌道情報を生成する。送信情報生成部１１４は、メッセージを示すメッセージ情報と軌道情報とを含む送信情報を生成する。送信制御部１１６は通信装置１３を用いて送信情報をユーザＵ［Ｋ］が指定する送信先に送信させる。
以上の説明によれば、メッセージ送信装置としての端末装置１０－Ｋは、軌道情報生成部１１３と、送信情報生成部１１４と、送信制御部１１６とを備える。軌道情報生成部１１３は、送信元のユーザＵ［Ｋ］の操作に応じて、メッセージに対応する仮想オブジェクトＶＯが仮想空間ＶＳにおいて移動された場合、仮想オブジェクトＶＯの軌道に関する軌道情報を生成する。送信情報生成部１１４は、メッセージを示すメッセージ情報と軌道情報とを含む送信情報を生成する。送信制御部１１６は通信装置１３を用いて送信情報をユーザＵ［Ｋ］が指定する送信先に送信させる。
【0096】
端末装置１０－Ｋは、メッセージ情報と仮想オブジェクトＶＯの軌道に関する軌道情報とを含む送信情報を送信先に送信するので、送信先の装置では軌道情報に基づいて、送信元のユーザＵ［Ｋ］の操作に応じて移動する仮想オブジェクトＶＯの動きを再現することが可能になる。よって、メッセージの送信元のユーザＵ[Ｋ]は、メッセージの送信先のユーザが視認する仮想空間における仮想オブジェクトＶＯの動きを制御できる。
【0097】
また以上の説明によれば、軌道は、仮想オブジェクトＶＯの仮想空間ＶＳにおける位置の時間変化を示す。また、軌道情報生成部１１３は、軌道に対してユーザＵ［Ｋ］の操作に伴うノイズ成分を除去する処理を施すことによって、軌道情報を生成する。
【0098】
ユーザＵ［Ｋ］が仮想空間ＶＳにおいて仮想オブジェクトＶＯに触れることによって、仮想オブジェクトＶＯを移動させる場合、ユーザＵ［Ｋ］の手ぶれが、仮想オブジェクトＶＯの軌道に反映される。端末装置１０－Ｋが、ノイズ成分を除去する処理を実行することによって、軌道に反映されるユーザＵ［Ｋ］の手ぶれの成分が除去される。よって、送信先のユーザが視認する仮想空間における仮想オブジェクトＶＯの動きを円滑にできる。
【0099】
また以上の説明によれば、送信元のユーザＵ［Ｋ］の操作は、仮想オブジェクトＶＯの軌道として予め用意された複数の軌道から１以上の軌道を送信元のユーザＵ［Ｋ］が選択する第１操作と、送信元のユーザＵ［Ｋ］が仮想オブジェクトＶＯを仮想空間ＶＳ上で移動させる第２操作とを含む。また、軌道情報生成部１１３は、第１操作によって選択される１以上の軌道と、第２操作によって指定される仮想オブジェクトの軌道とを合成した軌道を示す情報を、軌道情報として生成する。
【0100】
端末装置１０－Ｋは、以上の構成を備えるので、第２操作によって指定される仮想オブジェクトの軌道に効果を付与することができる。また、送信元のユーザＵ［Ｋ］が複数の軌道から１以上の軌道を選択することによって、多様な仮想オブジェクトの軌道を生成することができる。
【0101】
以上の説明によれば、メッセージ受信装置としての端末装置１０－Ｋは、メッセージ送信装置から送信される送信情報を通信装置１３に受信させる受信制御部１１７と、送信情報に含まれる軌道情報に従って、仮想空間ＶＳにおいて仮想オブジェクトＶＯが移動する画像を生成する画像生成部１１８と、生成された画像を、送信先のユーザＵ［Ｋ］のＸＲグラス２０－Ｋに表示させる表示制御部１１５とを備える。
【0102】
端末装置１０－Ｋは、以上の構成を備えるので、送信元のユーザが仮想空間において仮想オブジェクトを移動させた軌道を、送信先のユーザＵ［Ｋ］が視認する仮想空間ＶＳにおいて再現することができる。
【0103】
３：変形例
本開示は、以上に例示した実施形態に限定されない。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様を併合してもよい。
本開示は、以上に例示した実施形態に限定されない。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様を併合してもよい。
【0104】
３．１：変形例１
実施形態に係る情報処理システム１においては、端末装置１０－Ｋが、取得部１１１、受付部１１２、及び軌道情報生成部１１３を備える。しかし、端末装置１０－Ｋの代わりに、サーバ３０がこれらと同様の構成要素を備えてもよい。他の構成要素についても同様に、端末装置１０－Ｋの代わりに、サーバ３０がそれらと同様の構成要素を備えてもよい。サーバ３０が取得部１１１、受付部１１２、及び軌道情報生成部１１３を備える場合、ＸＲグラス２０－Ｋから端末装置１０－Ｋが取得する各種の情報は、端末装置１０－Ｋからサーバ２０へ送信される。また、端末装置１０－Ｋの入力装置１５から出力される操作情報も同様に、サーバ３０へ送信される。
実施形態に係る情報処理システム１においては、端末装置１０－Ｋが、取得部１１１、受付部１１２、及び軌道情報生成部１１３を備える。しかし、端末装置１０－Ｋの代わりに、サーバ３０がこれらと同様の構成要素を備えてもよい。他の構成要素についても同様に、端末装置１０－Ｋの代わりに、サーバ３０がそれらと同様の構成要素を備えてもよい。サーバ３０が取得部１１１、受付部１１２、及び軌道情報生成部１１３を備える場合、ＸＲグラス２０－Ｋから端末装置１０－Ｋが取得する各種の情報は、端末装置１０－Ｋからサーバ２０へ送信される。また、端末装置１０－Ｋの入力装置１５から出力される操作情報も同様に、サーバ３０へ送信される。
【0105】
３．２：変形例２
実施形態に係る情報処理システム１において、端末装置１０－ＫとＸＲグラス２０－Ｋとは別体として実現されている。しかし、本発明の実施形態における、端末装置１０－ＫとＸＲグラス２０－Ｋの実現方法は、これには限定されない。例えば、ＸＲグラス２０－Ｋが、端末装置１０－Ｋと同一の機能を備えてもよい。換言すれば、端末装置１０－ＫとＸＲグラス２０－Ｋとが単一の筐体内において実現されてもよい。
実施形態に係る情報処理システム１において、端末装置１０－ＫとＸＲグラス２０－Ｋとは別体として実現されている。しかし、本発明の実施形態における、端末装置１０－ＫとＸＲグラス２０－Ｋの実現方法は、これには限定されない。例えば、ＸＲグラス２０－Ｋが、端末装置１０－Ｋと同一の機能を備えてもよい。換言すれば、端末装置１０－ＫとＸＲグラス２０－Ｋとが単一の筐体内において実現されてもよい。
【0106】
３．３：変形例３
実施形態に係る端末装置１０－Ｋにおいては、メッセージ情報が生成された後に、メッセージに対応付けられる仮想オブジェクトＶＯが生成される。しかし、最初に、ユーザＵ[Ｋ]が入力装置１５を用いて、仮想オブジェクトＶＯを生成した後に、当該仮想オブジェクトＶＯに紐づくメッセージ情報を作成してもよい。
実施形態に係る端末装置１０－Ｋにおいては、メッセージ情報が生成された後に、メッセージに対応付けられる仮想オブジェクトＶＯが生成される。しかし、最初に、ユーザＵ[Ｋ]が入力装置１５を用いて、仮想オブジェクトＶＯを生成した後に、当該仮想オブジェクトＶＯに紐づくメッセージ情報を作成してもよい。
【0107】
３．４：変形例４
実施形態に係る情報処理システム１は、ＸＲグラス２０－Ｋを備える。しかし、情報処理システム１は、ＸＲグラス２０－Ｋの代わりに、ＶＲ技術が採用されたＶＲグラス、ＶＲ技術が採用されたＨＭＤ（Head Mounted Display）、ＡＲ技術が採用されたＡＲグラス、及びＡＲ技術が採用されたＨＭＤのうちいずれか１つを備えてもよい。あるいは、情報処理システム１は、ＸＲグラス２０－Ｋの代わりに、撮像装置を備えた通常のスマートフォン及びタブレットのうちいずれか１つを備えてもよい。これらのＶＲグラス、ＡＲグラス、ＨＭＤ、スマートフォン、及びタブレットは、表示装置の一例である。
実施形態に係る情報処理システム１は、ＸＲグラス２０－Ｋを備える。しかし、情報処理システム１は、ＸＲグラス２０－Ｋの代わりに、ＶＲ技術が採用されたＶＲグラス、ＶＲ技術が採用されたＨＭＤ（Head Mounted Display）、ＡＲ技術が採用されたＡＲグラス、及びＡＲ技術が採用されたＨＭＤのうちいずれか１つを備えてもよい。あるいは、情報処理システム１は、ＸＲグラス２０－Ｋの代わりに、撮像装置を備えた通常のスマートフォン及びタブレットのうちいずれか１つを備えてもよい。これらのＶＲグラス、ＡＲグラス、ＨＭＤ、スマートフォン、及びタブレットは、表示装置の一例である。
【0108】
４：その他
（１）上述した実施形態では、記憶装置１２、記憶装置２２、並びに記憶装置３２は、ＲＯＭ及びＲＡＭなどを例示したが、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Ｂｌｕ－ｒａｙ（登録商標）ディスク)、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、キードライブ)、ＣＤ－ＲＯＭ（Compact Disc－ＲＯＭ）、レジスタ、リムーバブルディスク、ハードディスク、フロッピー（登録商標）ディスク、磁気ストリップ、データベース、サーバその他の適切な記憶媒体である。また、プログラムは、電気通信回線を介してネットワークから送信されてもよい。また、プログラムは、電気通信回線を介して通信網ＮＥＴから送信されてもよい。
（１）上述した実施形態では、記憶装置１２、記憶装置２２、並びに記憶装置３２は、ＲＯＭ及びＲＡＭなどを例示したが、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Ｂｌｕ－ｒａｙ（登録商標）ディスク)、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、キードライブ)、ＣＤ－ＲＯＭ（Compact Disc－ＲＯＭ）、レジスタ、リムーバブルディスク、ハードディスク、フロッピー（登録商標）ディスク、磁気ストリップ、データベース、サーバその他の適切な記憶媒体である。また、プログラムは、電気通信回線を介してネットワークから送信されてもよい。また、プログラムは、電気通信回線を介して通信網ＮＥＴから送信されてもよい。
【0109】
（２）上述した実施形態において、説明した情報、信号などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップなどは、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。
【0110】
（３）上述した実施形態において、入出力された情報等は特定の場所（例えば、メモリ）に保存されてもよいし、管理テーブルを用いて管理してもよい。入出力される情報等は、上書き、更新、又は追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。
【0111】
（４）上述した実施形態において、判定は、１ビットを用いて表される値（０か１か）によって行われてもよいし、真偽値（Boolean：true又はfalse）によって行われてもよいし、数値の比較（例えば、所定の値との比較）によって行われてもよい。
【0112】
（５）上述した実施形態において例示した処理手順、シーケンス、フローチャートなどは、矛盾の無い限り、順序を入れ替えてもよい。例えば、本開示において説明した方法については、例示的な順序を用いて様々なステップの要素を提示しており、提示した特定の順序に限定されない。
【0113】
（６）図１～図１７に例示された各機能は、ハードウェア及びソフトウェアの少なくとも一方の任意の組み合わせによって実現される。また、各機能ブロックの実現方法は特に限定されない。すなわち、各機能ブロックは、物理的又は論理的に結合した１つの装置を用いて実現されてもよいし、物理的又は論理的に分離した２つ以上の装置を直接的又は間接的に（例えば、有線、無線などを用いて）接続し、これら複数の装置を用いて実現されてもよい。機能ブロックは、上記１つの装置又は上記複数の装置にソフトウェアを組み合わせて実現されてもよい。
【0114】
（７）上述した実施形態において例示したプログラムは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語と呼ばれるか、他の名称を用いて呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、プログラム、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順、機能などを意味するよう広く解釈されるべきである。
【0115】
また、ソフトウェア、命令、情報などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、有線技術（同軸ケーブル、光ファイバケーブル、ツイストペア、デジタル加入者回線（ＤＳＬ：Digital Subscriber Line）など）及び無線技術（赤外線、マイクロ波など）の少なくとも一方を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び無線技術の少なくとも一方は、伝送媒体の定義内に含まれる。
【0116】
（８）前述の各形態において、「システム」及び「ネットワーク」という用語は、互換的に使用される。
【0117】
（９）本開示において説明した情報、パラメータなどは、絶対値を用いて表されてもよいし、所定の値からの相対値を用いて表されてもよいし、対応する別の情報を用いて表されてもよい。
【0118】
（１０）上述した実施形態において、端末装置１０－１～１０－J、及びサーバ３０は、移動局（ＭＳ：Mobile Station）である場合が含まれる。移動局は、当業者によって、加入者局、モバイルユニット、加入者ユニット、ワイヤレスユニット、リモートユニット、モバイルデバイス、ワイヤレスデバイス、ワイヤレス通信デバイス、リモートデバイス、モバイル加入者局、アクセス端末、モバイル端末、ワイヤレス端末、リモート端末、ハンドセット、ユーザエージェント、モバイルクライアント、クライアント、又はいくつかの他の適切な用語によって呼ばれる場合もある。また、本開示においては、「移動局」、「ユーザ端末（user terminal）」、「ユーザ装置（ＵＥ：User Equipment）」、「端末」等の用語は、互換的に使用され得る。
【0119】
（１１）上述した実施形態において、「接続された(connected)」、「結合された(coupled)」という用語、又はこれらのあらゆる変形は、２又はそれ以上の要素間の直接的又は間接的なあらゆる接続又は結合を意味し、互いに「接続」又は「結合」された２つの要素間に１又はそれ以上の中間要素が存在することを含められる。要素間の結合又は接続は、物理的な結合又は接続であっても、論理的な結合又は接続であっても、或いはこれらの組み合わせであってもよい。例えば、「接続」は「アクセス」を用いて読み替えられてもよい。本開示において使用する場合、２つの要素は、１又はそれ以上の電線、ケーブル及びプリント電気接続の少なくとも一つを用いて、並びにいくつかの非限定的かつ非包括的な例として、無線周波数領域、マイクロ波領域及び光（可視及び不可視の両方）領域の波長を有する電磁エネルギーなどを用いて、互いに「接続」又は「結合」されると考えられる。
【0120】
（１２）上述した実施形態において、「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。
【0121】
（１３）本開示において使用される「判断(determining)」、「決定(determining)」という用語は、多種多様な動作を包含する場合がある。「判断」、「決定」は、例えば、判定(judging)、計算(calculating)、算出(computing)、処理(processing)、導出(deriving)、調査(investigating)、探索(looking up、search、inquiry)（例えば、テーブル、データベース又は別のデータ構造での探索）、確認(ascertaining)した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、受信(receiving)（例えば、情報を受信すること）、送信(transmitting)(例えば、情報を送信すること)、入力(input)、出力(output)、アクセス(accessing)（例えば、メモリ中のデータにアクセスすること）した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、解決(resolving)、選択(selecting)、選定(choosing)、確立(establishing)、比較(comparing)などした事を「判断」「決定」したとみなす事を含み得る。つまり、「判断」「決定」は、何らかの動作を「判断」「決定」したとみなす事を含み得る。また、「判断（決定）」は、「想定する（assＵ[Ｍ]ing）」、「期待する（expecting）」、「みなす（considering）」などによって読み替えられてもよい。
【0122】
（１４）上述した実施形態において、「含む（include）」、「含んでいる（including）」及びそれらの変形が使用されている場合、これらの用語は、用語「備える（comprising）」と同様に、包括的であることが意図される。更に、本開示において使用されている用語「又は（or）」は、排他的論理和ではないことが意図される。
【0123】
（１５）本開示において、例えば、英語でのa, an及びtheのように、翻訳により冠詞が追加された場合、本開示は、これらの冠詞の後に続く名詞が複数形であることを含んでもよい。
【0124】
（１６）本開示において、「ＡとＢが異なる」という用語は、「ＡとＢが互いに異なる」ことを意味してもよい。なお、当該用語は、「ＡとＢがそれぞれＣと異なる」ことを意味してもよい。「離れる」、「結合される」等の用語も、「異なる」と同様に解釈されてもよい。
【0125】
（１７）本開示において説明した各態様／実施形態は単独で用いてもよいし、組み合わせて用いてもよいし、実行に伴って切り替えて用いてもよい。また、所定の情報の通知（例えば、「Ｘであること」の通知）は、明示的に行う通知に限られず、暗黙的（例えば、当該所定の情報の通知を行わない）ことによって行われてもよい。
【0126】
以上、本開示について詳細に説明したが、当業者にとっては、本開示が本開示中に説明した実施形態に限定されないということは明らかである。本開示は、請求の範囲の記載により定まる本開示の趣旨及び範囲を逸脱することなく修正及び変更態様として実施できる。従って、本開示の記載は、例示説明を目的とし、本開示に対して何ら制限的な意味を有さない。
【符号の説明】
【0127】
１…情報処理システム、１０－１，１０－２，１０－Ｋ，１０－Ｊ…端末装置、１１…処理装置、１２…記憶装置、１３…通信装置、１４…ディスプレイ、１５…入力装置、１６…慣性センサ、２０－１，２０－２，２０－Ｋ，２０－Ｊ…ＸＲグラス、２１…処理装置、２３…視線検出装置、２６…撮像装置、２７…通信装置、２９Ｌ，２９Ｒ…深度検出装置、３０…サーバ、３１…処理装置、３２…記憶装置、３３…通信装置、１１１…取得部、１１２…受付部、１１３…軌道情報生成部、１１４…送信情報生成部、１１５…表示制御部、１１６…送信制御部、１１７…受信制御部、１１８…画像生成部、Ｕ[Ｋ]…ユーザ、ＶＯ…仮想オブジェクト。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10A】
【図10B】
【図11】
【図12】
【図13】
【図14A】
【図14B】
【図15】
【図16A】
【図16B】
【図17】