特開 2024-170971 情報処理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024170971

(43)【公開日】2024-12-11

(54)【発明の名称】情報処理装置

(51)【国際特許分類】

   G06F 3/01 20060101AFI20241204BHJP

   G06T 19/00 20110101ALI20241204BHJP

【ＦＩ】

G06F3/01 510

G06T19/00 C

G06T19/00 300B

G06T19/00 600

【審査請求】未請求

【請求項の数】14

【出願形態】ＯＬ

(21)【出願番号】P 2023087774

(22)【出願日】2023-05-29

(71)【出願人】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】110002860

【氏名又は名称】弁理士法人秀和特許事務所

(72)【発明者】

【氏名】土屋 英鷹

【テーマコード（参考）】

5B050

5E555

【Ｆターム（参考）】

5B050BA09

5B050CA08

5B050DA01

5B050EA07

5B050EA19

5B050FA02

5B050FA10

5B050FA14

5E555AA27

5E555AA64

5E555BA38

5E555BA76

5E555BB38

5E555BD07

5E555BE17

5E555CA44

5E555DA08

5E555DB32

5E555FA00

(57)【要約】

【課題】アバター同士の接触といったユーザ同士の仮想的な接触を十分なコミュニケーションツールとして利用できるようにする。
【解決手段】本発明の情報処理装置は、仮想空間または複合現実空間である３次元空間における、第１のユーザに対する第２のユーザの仮想的な接触を検知する検知手段と、前記仮想的な接触があった場合に、当該接触の位置に関する情報を前記第１のユーザに通知するように制御する制御手段とを有することを特徴とする。
【選択図】図３

【特許請求の範囲】

【請求項1】

仮想空間または複合現実空間である３次元空間における、第１のユーザに対する第２のユーザの仮想的な接触を検知する検知手段と、
前記仮想的な接触があった場合に、当該接触の位置に関する情報を前記第１のユーザに通知するように制御する制御手段と
を有することを特徴とする情報処理装置。

【請求項2】

前記検知手段は、複合現実空間である３次元空間における、前記第１のユーザに対する前記第２のユーザのアバターの接触を検知する
ことを特徴とする請求項１に記載の情報処理装置。

【請求項3】

前記検知手段は、仮想空間である３次元空間における、前記第１のユーザのアバターに対する前記第２のユーザのアバターの接触を検知する
ことを特徴とする請求項１に記載の情報処理装置。

【請求項4】

前記制御手段は、前記接触の位置および強度に関する前記情報を通知するように制御する
ことを特徴とする請求項１に記載の情報処理装置。

【請求項5】

前記制御手段は、表示または音声によって前記情報を通知するように制御する
ことを特徴とする請求項１に記載の情報処理装置。

【請求項6】

前記制御手段は、振動によって前記情報を通知するように制御する
ことを特徴とする請求項１に記載の情報処理装置。

【請求項7】

前記第２のユーザが第１のリストに含まれていない場合には前記情報は通知しない
ことを特徴とする請求項１に記載の情報処理装置。

【請求項8】

前記第２のユーザが第２のリストに含まれている場合には前記情報は通知しない
ことを特徴とする請求項１に記載の情報処理装置。

【請求項9】

前記３次元空間において前記第２のユーザが前記第１のユーザの視界に存在する場合には前記情報は通知しない
ことを特徴とする請求項１に記載の情報処理装置。

【請求項10】

前記検知手段は、前記第１のユーザに対する前記第２のユーザの手の仮想的な接触を検知する
ことを特徴とする請求項１に記載の情報処理装置。

【請求項11】

前記第２のユーザの複数の部位の少なくとも一部がトラッキングされており、
前記検知手段は、前記第２のユーザの複数の部位のうち、トラッキングされている部位の、前記第１のユーザに対する仮想的な接触を検知する
ことを特徴とする請求項１に記載の情報処理装置。

【請求項12】

前記検知手段は、前記第１のユーザに対する、前記第２のユーザが保持している仮想オブジェクトの接触を検知する
ことを特徴とする請求項１に記載の情報処理装置。

【請求項13】

仮想空間または複合現実空間である３次元空間における、第１のユーザに対する第２の
ユーザの仮想的な接触を検知するステップと、
前記仮想的な接触があった場合に、当該接触の位置に関する情報を前記第１のユーザに通知するように制御するステップと
を有することを特徴とする情報処理装置の制御方法。

【請求項14】

コンピュータを、請求項１～１２のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置に関し、特に仮想空間または複合現実空間におけるユーザ間のコミュニケーションを支援する技術に関する。

【背景技術】

【0002】

ユーザが仮想オブジェクトと相互に作用しあえる環境をコンピュータなどで生成する仮想現実（以下、ＶＲ）技術が知られている。現実世界と仮想世界の映像をリアルタイムに融合させる技術として、複合現実（以下、ＭＲ）技術や拡張現実（以下、ＡＲ）技術も知られている。通常、これらの技術（以下、ＸＲ技術）を用いた映像の視聴には、ヘッドマウントディスプレイ（以下、ＨＭＤ）と呼ばれる、ゴーグル型や眼鏡型の表示デバイスが使用される。ＨＭＤは、例えば、左右の目の位置に合うように配置された２つのディスプレイを備える。外部の映像を取得するカメラを前面に備えたＨＭＤも提案されている。

【0003】

仮想空間（以下、ＶＲ空間）または複合現実空間（以下、ＭＲ空間）において、ユーザを表現したキャラクター（以下、アバター）を用い、ユーザ間のコミュニケーションを可能とする技術も提案されている。アバターは、コントローラを用いて操作したり、モーショントラッキングによって操作したりできる。

【0004】

特許文献１には、仮想オブジェクトに接触したことのフィードバックをユーザに与える技術が開示されている。特許文献２には、ＶＲ空間においてアバター同士が接触したことをトリガーとして、ユーザ間のチャットを開始する技術が開示されている。特許文献３には、ＶＲ空間において、ＨＭＤを装着していないユーザのアバターが他のアバターに揺さぶられたことに応答して、ＨＭＤを装着していない当該ユーザの端末に通知を行う技術が開示されている。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２０２０－８０１５２号公報

【特許文献2】特開２００１－２３６２９１号公報

【特許文献3】特開２０１９－６１４３４号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、特許文献１～３に開示の技術では、アバター同士の接触を十分なコミュニケーションツールとして利用することができない。特許文献１に開示の技術は、ユーザが仮想オブジェクトに対して能動的に接触したことのフィードバックを当該ユーザに与えるものである。特許文献１に開示の技術を用いても、他のアバターに能動的に接触したアバターのユーザ（接触者）に対してフィードバックを与えることはできるが、他のアバターから接触されたアバターのユーザ（被接触者）に対しては何ら通知がされない。このため、被接触者は接触を認知することができない。特許文献２に開示の技術では、アバター同士の接触がチャットの開始に利用されるに過ぎずない。特許文献３に開示の技術では、アバター同士の接触（アバターに対する他のアバターの揺さぶり）が、ＨＭＤを装着していないユーザの端末への通知に利用されるに過ぎない。このように、特許文献２，３に開示の技術では、アバター同士の接触は、現実世界での接触と同じようには利用されず、コミュニケーションツールとしては不十分である。

【0007】

本発明は、アバター同士の接触といったユーザ同士の仮想的な接触を十分なコミュニケ
ーションツールとして利用できるようにすることを目的とする。

【課題を解決するための手段】

【0008】

本発明の第１の態様は、仮想空間または複合現実空間である３次元空間における、第１のユーザに対する第２のユーザの仮想的な接触を検知する検知手段と、前記仮想的な接触があった場合に、当該接触の位置に関する情報を前記第１のユーザに通知するように制御する制御手段とを有することを特徴とする情報処理装置である。

【0009】

本発明の第２の態様は、仮想空間または複合現実空間である３次元空間における、第１のユーザに対する第２のユーザの仮想的な接触を検知するステップと、前記仮想的な接触があった場合に、当該接触の位置に関する情報を前記第１のユーザに通知するように制御するステップとを有することを特徴とする情報処理装置の制御方法である。

【0010】

本発明の第３の態様は、コンピュータを、上述した情報処理装置の各手段として機能させるためのプログラムである。

【発明の効果】

【0011】

本発明によれば、アバター同士の接触といったユーザ同士の仮想的な接触を十分なコミュニケーションツールとして利用できるようになる。

【図面の簡単な説明】

【0012】

【図1】ヘッドマウントディスプレイ（以下、ＨＭＤ）の外観図である。

【図2】ＨＭＤのブロック図である。

【図3】接触情報の模式図である。

【図4】接触通知処理のフローチャートである。

【図5】接触検知処理のフローチャートである。

【図6】通知判定処理のフローチャートである。

【発明を実施するための形態】

【0013】

以下に、本発明の実施の形態を、添付の図面に基づいて詳細に説明する。

【0014】

図１は、本発明を適用可能な情報処理装置の一例であるヘッドマウントディスプレイ（以下、ＨＭＤ）１００の外観を示す外観図である。ＨＭＤ１００はユーザの頭部に装着するゴーグル型の表示装置である。本体部１０１は、後述する各種ハードウェアを備える。例えば、本体部１０１は、本体部１０１の背面側にディスプレイを備える。ＨＭＤ１００を装着したユーザは、ディスプレイに表示された各種コンテンツを見ることができる。ストラップ１０２は、本体部１０１をユーザの頭部に固定するために使用される。カメラ１０３は、ＨＭＤ１００の周囲（例えば前面側）を撮像する。

【0015】

ＨＭＤ１００は、カメラ１０３によって撮像された映像、または当該撮像された映像に基づく映像をディスプレイに表示することによって、ユーザに複合現実空間（以下、ＭＲ空間）を提供することができる。ＨＭＤ１００は、カメラ１０３によって撮像された映像とは無関係の映像をディスプレイに表示することによって、ユーザに仮想空間（以下、ＶＲ空間）を提供することもできる。ＨＭＤ１００は、ＶＲ空間およびＭＲ空間において、ユーザ（ＨＭＤ１００のユーザ、またはＨＭＤ１００とは異なるＨＭＤのユーザ）として、当該ユーザを表現したキャラクター（以下、アバター）を表示することができる。ＨＭＤ１００は、ＨＭＤ１００のユーザとして、アバターではなく、カメラ１０３によって撮像された当該ユーザ本人を表示してもよい。

【0016】

ＭＲ空間をユーザに提供する方式には、ビデオシースルー方式と光学シースルー方式と
がある。ビデオシースルー方式では、撮像された現実空間の映像が表示され、ユーザは当該映像によって現実空間を確認することができる。アバターといった仮想オブジェクトは、例えば、現実空間の映像に合成（重畳）されて表示される。光学シースルー方式では、ユーザは、当該ユーザの目と対向するように配置されたレンズを介して、映像でない現実空間を確認することができる。仮想オブジェクトは、例えば、レンズに表示される。ＨＭＤ１００の方式はビデオシースルー方式であるとするが、光学シースルー方式であってもよい。光学シースルー方式のＨＭＤのユーザは、当該ユーザ（当該ユーザの手や腕、胴体、足など）として、表示されたアバターを確認できてもよいし、映像でない当該ユーザ本人を確認できてもよい（当該ユーザのアバターは表示されなくてもよい）。ＨＭＤに接続されたパーソナルコンピュータやゲーム機、サーバーなどにも、本発明は適用可能である。

【0017】

本体部１０１の背面側に設けられたディスプレイ（ＨＭＤ１００を装着したユーザの目と対向するように配置された表示面を有するディスプレイ）の代わりに、ユーザの網膜に映像を投影する網膜投影ディスプレイを用いてもよい。光学シースルー方式の場合には、ユーザの目と対向するように配置されたレンズに映像を投影する投影ディスプレイを用いてもよい。

【0018】

図２は、ＨＭＤ１００のハードウェア構成を示すブロック図である。内部バス２５０に対して制御部２０１、メモリ２０２、不揮発性メモリ２０３、画像・音声処理部２０４、ディスプレイ２０５、操作部２０６、記憶媒体Ｉ／Ｆ２０７、外部Ｉ／Ｆ２０９、および通信Ｉ／Ｆ２１０が接続されている。また、内部バス２５０に対して音声出力部２１２および姿勢検出部２１３も接続されている。これらは、図１に示す本体部１０１に設けられている。内部バス２５０に接続された各部は、内部バス２５０を介して互いにデータのやりとりを行うことができる。

【0019】

制御部２０１は、少なくとも１つのプロセッサーまたは回路によって構成され、ＨＭＤ１００全体を制御する。制御部２０１は、例えばＣＰＵである。メモリ２０２は、例えばＲＡＭ（半導体素子を利用した揮発性のメモリなど）である。制御部２０１は、例えば不揮発性メモリ２０３に格納されたプログラムに従い、メモリ２０２をワークメモリとして用いて、ＨＭＤ１００の各部を制御する。不揮発性メモリ２０３には、画像データや音声データ、その他のデータ、制御部２０１が動作するための各種プログラムなどが格納される。不揮発性メモリ２０３は、例えばフラッシュメモリやＲＯＭなどである。

【0020】

画像・音声処理部２０４は、制御部２０１の制御に基づいて、不揮発性メモリ２０３や記憶媒体２０８に格納された画像や、外部Ｉ／Ｆ２０９を介して取得した画像、通信Ｉ／Ｆ２１０を介して取得した画像などに対して各種画像処理を施す。同様に、画像・音声処理部２０４は、制御部２０１の制御に基づいて、不揮発性メモリ２０３や記憶媒体２０８に格納された音声や、外部Ｉ／Ｆ２０９を介して取得した音声、通信Ｉ／Ｆ２１０を介して取得した音声などに対して各種音声処理を施す。画像・音声処理部２０４が行う画像処理や音声処理には、Ａ／Ｄ変換処理や、Ｄ／Ａ変換処理、符号化処理、圧縮処理、デコード処理、ノイズ低減処理などが含まれる。画像・音声処理部２０４が行う画像処理には、拡大／縮小処理（リサイズ）や色変換処理なども含まれる。画像・音声処理部２０４が行う画像処理には、全方位画像あるいは全方位ではないにせよ広範囲のデータを有する広範囲画像であるＶＲ画像のパノラマ展開やマッピング処理、変換処理なども含まれる。画像・音声処理部２０４は、図１に示すカメラ１０３によって撮像された画像に対して各種画像処理を施すこともできる。ＨＭＤ１００がマイクロフォンを備えていたり、ＨＭＤ１００にマイクロフォンが接続されていたりする場合には、画像・音声処理部２０４は、マイクロフォンによって取得された音声に対して各種音声処理を施すこともできる。画像・音声処理部２０４は、例えば、各種画像処理や各種音声処理を行う専用の回路である。画像
・音声処理部２０４を用いずに制御部２０１がプログラムに従って各種画像処理や各種音声処理を行ってもよい。

【0021】

ディスプレイ２０５は、図１に示す本体部１０１の背面側に設けられた上記ディスプレイであり、制御部２０１の制御に基づいて、画像やＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）画面などを表示する。制御部２０１は、プログラムに従って表示制御信号を生成し、ディスプレイ２０５に表示するための映像信号を生成してディスプレイ２０５に入力するようにＨＭＤ１００の各部を制御する。ディスプレイ２０５は、ディスプレイ２０５に入力された映像信号に基づいて映像を表示する。

【0022】

操作部２０６は、キーボードなどの文字情報入力デバイスや、マウス等のポインティングデバイス、ボタン、ダイヤル、ジョイスティック、タッチセンサ、タッチパッドなどを含む、ユーザ操作を受け付けるための入力デバイスである。

【0023】

記憶媒体Ｉ／Ｆ２０７は、メモリーカードやＣＤ、ＤＶＤといった記憶媒体２０８が着脱可能に構成され、制御部２０１の制御に基づいて、装着された記憶媒体２０８からのデータの読み出しや、当該記憶媒体２０８に対するデータの書き込みを行う。外部Ｉ／Ｆ２０９は、外部機器と有線または無線で接続し、ＨＭＤ１００に対する映像信号や音声信号の入出力を行うためのインターフェースである。通信Ｉ／Ｆ２１０は、外部機器やインターネット２１１などと通信して、ファイルやコマンドなどの各種データの送受信を行うためのインターフェースである。

【0024】

音声出力部２１２は、動画データや音楽データの音声や、操作音、着信音、各種通知音などを出力する。音声出力部２１２には、イヤホンなどを接続する音声出力端子２１２ａと、スピーカー２１２ｂとが含まれるものとするが、無線通信などで外部機器から音声を出力してもよい。

【0025】

姿勢検出部２１３は、重力方向に対するＨＭＤ１００の姿勢（傾き）や、ヨー、ロール、ピッチの各軸に対する姿勢を検出する。姿勢検出部２１３で検出された姿勢に基づいて、ＨＭＤ１００が横に保持されているか、縦に保持されているか、上に向けられたか、下に向けられたか、斜めの姿勢になったかなどを判別可能である。姿勢検出部２１３としては、加速度センサー、ジャイロセンサー、地磁気センサー、方位センサー、高度センサーなどのうち少なくとも１つを用いることができ、複数を組み合わせて用いることも可能である。

【0026】

本実施形態では、ＶＲ空間またはＭＲ空間である３次元空間（以下、ＸＲ空間）において、アバター同士の（仮想的な）接触があった場合に、当該接触の位置および強度に関する情報（接触情報）を被接触ユーザ（被接触者）に通知する。上述したように、ＨＭＤ１００は、ＨＭＤ１００のユーザとして、アバターではなく、カメラ１０３によって撮像された当該ユーザ本人を表示してもよい。このため、上記接触は、被接触ユーザから見た場合に、被接触ユーザに対する接触ユーザ（接触者）のアバターの接触であってもよい。被接触ユーザから見た場合における、被接触ユーザに対する接触ユーザのアバターの接触は、接触ユーザから見た場合における、被接触ユーザのアバターに対する接触ユーザの接触と解釈することができる。

【0027】

図３（ａ），３（ｂ）は、被接触ユーザに通知される接触情報の一例を示す模式図である。被接触ユーザは、ＨＭＤ１００のユーザであるとする。図３（ａ），３（ｂ）では、ディスプレイ２０５の表示面３００にＸＲ空間の映像が表示されている。図３（ａ）では、通知アイテム３０１がＸＲ空間の映像に重畳されて表示されており、図３（ｂ）では、通知アイテム３０２がＸＲ空間の映像に重畳されて表示されている。通知アイテム３０１
，３０２は、被接触ユーザのアバターに接触ユーザのアバターが接触した際に表示される。通知アイテム３０１，３０２の表示位置は、アバター同士の接触の位置を示し、通知アイテム３０１，３０２の表示サイズは、アバター同士の接触の強度を示す。図３（ａ）は、被接触ユーザのアバターの左肩に接触ユーザのアバターが軽く（弱く）接触した場合に対応する。そのため、通知アイテム３０１は、左側に小さく表示されている。図３（ｂ）は、被接触ユーザのアバターの頭に接触ユーザのアバターが強く接触した場合（例えば、被接触ユーザのアバターの頭を接触ユーザのアバターが強く叩いた場合）に対応する。そのため、通知アイテム３０２は、上側に大きく表示されている。

【0028】

なお、接触の強度は通知されなくてもよい。また、ディスプレイ２０５での表示でなく、音声出力部２１２を用いて出力される音声によって接触情報が通知されてもよい。この場合は、例えば、音声の方向が接触の位置を示し、音声の大きさ（音量）が接触の強度を示す。外部Ｉ／Ｆ２０９に接続されたデバイスなどの振動によって接触情報が通知されてもよい（例えば、ハプティクスによる通知）。この場合は、例えば、振動の位置が接触の位置を示し、振動の強度が接触の強度を示す。表示、音声、および振動のうちの２つまたは３つを組み合わせて接触情報が通知されてもよい。

【0029】

図４は、ＨＭＤ１００が行う接触通知処理のフローチャートである。この接触通知処理は、制御部２０１が不揮発性メモリ２０３に格納されているプログラムをメモリ２０２に展開して実行することによって実現される。例えば、ユーザがＨＭＤ１００を装着して起動し、ＸＲ空間（ＸＲ空間内でのユーザ間のコミュニケーション）を体験するための所定のアプリケーションを実行すると、接触通知処理が開始され、所定の周期で繰り返し行われる。

【0030】

ステップＳ４０１では、制御部２０１は、アバター同士の接触（ＨＭＤ１００のユーザのアバターに対する他のユーザのアバターの接触）を検知する接触検知処理を行い、接触検知処理の結果をメモリ２０２に格納する。接触検知処理の詳細は、図５を用いて後述する。

【0031】

ステップＳ４０２では、制御部２０１は、メモリ２０２に格納された接触検知処理の結果（ステップＳ４０１の接触検知処理の結果）を確認し、ステップＳ４０１で接触が検知されたか否かを判定する。接触が検知された場合はステップＳ４０３に進み、そうでない場合は接触通知処理を終了する。

【0032】

ステップＳ４０３では、制御部２０１は、接触情報を通知するか否かを判定する通知判定処理を行い、通知判定処理の結果をメモリ２０２に格納する。通知判定処理の詳細は、図６を用いて後述する。

【0033】

ステップＳ４０４では、制御部２０１は、メモリ２０２に格納された通知判定処理の結果（ステップＳ４０３の通知判定処理の結果）を確認し、当該結果に従って接触情報を通知するか否かを判定する。接触情報を通知する場合はステップＳ４０５に進み、そうでない場合は接触通知処理を終了する。

【0034】

ステップＳ４０５では、制御部２０１は、被接触ユーザの視界に対する、ステップＳ４０１で検知された接触の位置の方向を算出し、メモリ２０２に格納する。接触の位置（の方向）を算出する方法は特に限定されないが、例えば、被接触ユーザ（ＨＭＤ１００のユーザ）のアバターの位置と姿勢や、接触ユーザのアバターの位置と姿勢などに基づいて、接触の位置（の方向）が算出される。被接触ユーザのアバターの位置と姿勢の情報は、例えば、ＨＭＤ１００（メモリ２０２）またはサーバーで管理されており、メモリ２０２から取得されたり、サーバーからインターネット２１１を介して取得されたりする。被接触
ユーザのアバターの位置と姿勢は、例えば、被接触ユーザの動作（移動および姿勢変化）や、ＨＭＤ１００のコントローラ（不図示）を用いたユーザ操作などによって更新される。被接触ユーザのアバターの位置と姿勢は、例えば、カメラ１０３の撮像結果や、姿勢検出部２１３の検出結果、ユーザ操作などに基づいて決定される。接触ユーザのアバターの位置と姿勢の情報は、例えば、サーバーや、接触ユーザのＨＭＤなどから、インターネット２１１を介して取得される。

【0035】

ステップＳ４０６では、制御部２０１は、ステップＳ４０１で検知された接触の強度を算出し、メモリ２０２に格納する。接触の強度を算出する方法は特に限定されないが、例えば、被接触ユーザ（ＨＭＤ１００のユーザ）のアバターの位置と姿勢や、接触ユーザのアバターの位置と姿勢などに基づいて、接触の強度が算出される。接触の強度を算出する際に、アバターの動作速度や、アバターの質量（仮想的な質量）、アバターが所持する仮想オブジェクトの質量（仮想的な質量）などの情報を用いてもよい。被接触ユーザのアバターの質量の情報と仮想オブジェクトの質量の情報とは、例えば、ＨＭＤ１００（メモリ）またはサーバーで管理されており、メモリ２０２から取得されたり、サーバーからインターネット２１１を介して取得されたりする。被接触ユーザのアバターの質量は、例えば、当該被接触ユーザによってＨＭＤ１００またはサーバーに予め登録される。仮想オブジェクトの質量は、例えば、ＸＲ空間を体験するアプリケーションの作成時に予め定められる。接触ユーザの質量の情報は、例えば、サーバーや、接触ユーザのＨＭＤなどから、インターネット２１１を介して取得される。

【0036】

ステップＳ４０７では、制御部２０１は、メモリ２０２に格納されたステップＳ４０５，Ｓ４０６の算出結果に基づて、ステップＳ４０１で検知された接触の位置および強度に関する情報（接触情報）を被接触ユーザ（ＨＭＤ１００のユーザ）に通知する。通知方法は、上述したとおりである。

【0037】

なお、ステップＳ４０３，Ｓ４０４，Ｓ４０６の少なくともいずれかを省略してもよい。例えば、ステップＳ４０３，Ｓ４０４を省略し、接触を検知した場合にステップＳ４０２からステップＳ４０５に進んでもよい。ステップＳ４０６を省略し、ステップＳ４０５からステップＳ４０７に進んでもよい。

【0038】

図５は、接触検知処理（図４のステップＳ４０１）のフローチャートである。この接触検知処理は、制御部２０１が不揮発性メモリ２０３に格納されているプログラムをメモリ２０２に展開して実行することによって実現される。

【0039】

ステップＳ５０１では、制御部２０１は、ＨＭＤ１００のユーザのアバターに対する他のユーザのアバターの接触を検出する検出処理を行う。検出処理の方法は特に限定されないが、例えば、ＨＭＤ１００のユーザのアバターの位置と姿勢や、他のユーザのアバターの位置と姿勢などに基づいて、接触が検出される。なお、検出処理は、サーバーなどで行われてもよい。制御部２０１は、検出処理の結果を、サーバーなどからインターネット２１１を介して取得してもよい。

【0040】

ステップＳ５０２では、制御部２０１は、ＨＭＤ１００のユーザのアバターに接触した他のアバターの部位（接触部位）に関する接触部位情報を取得し、メモリ２０２に格納する。接触部位は、例えば、上記検出処理において特定（検出）される。本実施形態では、接触部位情報は、接触部位と、接触部位がトラッキング部位（後述）であるか否かとを示す。トラッキング部位の情報は、例えば、ＨＭＤ１００（記憶媒体２０８）またはサーバーで管理されており、記憶媒体２０８から取得されたり、サーバーからインターネット２１１を介して取得されたりする。ステップＳ５０１で接触が検出されなかった場合には、接触部位情報は取得されない。

【0041】

トラッキング部位は、トラッキングされている部位であり、コントローラやＨＭＤの位置情報に基づいて位置が決定される部位である。例えば、コントローラの位置情報に基づいてアバターの手の位置が決定され、手の位置に基づいて肘の位置が決定される場合には、手はトラッキング部位に該当し、肘はトラッキング部位に該当しない。なお、トラッキング用のデバイスはコントローラやＨＭＤに限られない。例えば、トラッキング用のデバイスは、肘や肩、膝、足、腰などに装着するデバイスであってもよく、それらデバイスの位置に基づいて、アバターの肘や肩、膝、足、腰などの位置が決定されてもよい。そのため、アバターの肘や肩、膝、足、腰なども、トラッキング部位に該当し得る。

【0042】

なお、アバターが手で仮想オブジェクトを保持することが可能な場合には、保持している仮想オブジェクトを手の一部とみなしてもよい。同様に、トラッキング部位で仮想オブジェクトを保持することが可能な場合には、保持している仮想オブジェクトをトラッキング部位の一部とみなしてもよい。

【0043】

ステップＳ５０３では、制御部２０１は、メモリ２０２に格納された接触部位情報（ステップＳ５０２で取得した接触部位情報）に基づいて、接触部位がトラッキング部位であるか否かを判定する。接触部位がトラッキング部位である場合はステップＳ５０５に進み、そうでない場合はステップＳ５０４に進む。ステップＳ５０２で接触部位情報が取得されなかった場合（ステップＳ５０１で接触が検出されなかった場合）は、ステップＳ５０４に進む。

【0044】

ステップＳ５０４では、制御部２０１は、メモリ２０２に格納された接触部位情報（ステップＳ５０２で取得した接触部位情報）に基づいて、接触部位が手であるか否かを判定する。接触部位が手である場合はステップＳ５０５に進み、そうでない場合はステップＳ５０６に進む。ステップＳ５０２で接触部位情報が取得されなかった場合（ステップＳ５０１で接触が検出されなかった場合）は、ステップＳ５０６に進む。

【0045】

ステップＳ５０５では、制御部２０１は、ＨＭＤ１００のユーザのアバターに対する他のユーザのアバターの接触が検知されたという処理結果をメモリ２０２に格納する。

【0046】

ステップＳ５０６では、制御部２０１は、ＨＭＤ１００のユーザのアバターに対する他のユーザのアバターの接触が検知されなかったという処理結果をメモリ２０２に格納する。

【0047】

なお、ステップＳ５０２～Ｓ５０４，Ｓ５０６の少なくともいずれかを省略してもよい。例えば、ステップＳ５０３を省略し、ステップＳ５０２からステップＳ５０４に進んでもよい。ステップＳ５０４を省略し、接触部位がトラッキング部位でない場合にステップＳ５０３からステップＳ５０６に進んでもよい。ステップＳ５０２～Ｓ５０４，Ｓ５０６を省略し、ステップＳ５０１からステップＳ５０５に進んでもよい。

【0048】

図６は、通知判定処理（図４のステップＳ４０３）のフローチャートである。この通知判定処理は、制御部２０１が不揮発性メモリ２０３に格納されているプログラムをメモリ２０２に展開して実行することによって実現される。

【0049】

ステップＳ６０１では、制御部２０１は、通知対象ユーザリストを用いたフィルタリングが有効であるか否かを判定する。有効である場合はステップＳ６０２に進み、そうでない場合はステップＳ６０５に進む。通知対象ユーザリストは、接触情報を通知するユーザ（通知対象ユーザ）を示すリストである。通知対象ユーザリストを用いたフィルタリングの設定（有効／無効）の情報は、例えば、ＨＭＤ１００（メモリ２０２や記憶媒体２０８
）またはサーバーで管理されている。そのため、通知対象ユーザリストを用いたフィルタリングの設定の情報は、メモリ２０２から取得されたり、記憶媒体２０８から取得されたり、サーバーからインターネット２１１を介して取得されたりする。

【0050】

ステップＳ６０２では、制御部２０１は、接触ユーザのユーザ情報をサーバーや接触ユーザのＨＭＤなどからインターネット２１１を介して取得し、メモリ２０２に格納する。接触ユーザのユーザ情報は、例えば、接触ユーザを示す情報（接触ユーザを識別するＩＤ情報など）を含む。

【0051】

ステップＳ６０３では、制御部２０１は、通知対象ユーザリストを取得し、接触ユーザのユーザ情報と照合する。通知対象ユーザリストは、例えば、ＨＭＤ１００（記憶媒体２０８）またはサーバーで管理されており、記憶媒体２０８から取得されたり、サーバーからインターネット２１１を介して取得されたりする。

【0052】

ステップＳ６０４では、制御部２０１は、接触ユーザが通知対象ユーザに該当するか否かを判定する。接触ユーザが通知対象ユーザに該当する場合はステップＳ６０９に進み、そうでない場合はステップＳ６１１に進む。

【0053】

ステップＳ６０５では、制御部２０１は、通知対象外ユーザリストを用いたフィルタリングが有効であるか否かを判定する。有効である場合はステップＳ６０６に進み、そうでない場合はステップＳ６０９に進む。通知対象外ユーザリストは、接触情報を通知しないユーザ（通知対象外ユーザ）を示すリストである。通知対象外ユーザリストを用いたフィルタリングの設定（有効／無効）の情報は、例えば、ＨＭＤ１００（メモリ２０２や記憶媒体２０８）またはサーバーで管理されている。そのため、通知対象外ユーザリストを用いたフィルタリングの設定の情報は、メモリ２０２から取得されたり、記憶媒体２０８から取得されたり、サーバーからインターネット２１１を介して取得されたりする。

【0054】

ステップＳ６０６では、制御部２０１は、接触ユーザのユーザ情報をサーバーや接触ユーザのＨＭＤなどからインターネット２１１を介して取得し、メモリ２０２に格納する。

【0055】

ステップＳ６０７では、制御部２０１は、通知対象外ユーザリストを取得し、接触ユーザのユーザ情報と照合する。通知対象外ユーザリストは、例えば、ＨＭＤ１００（記憶媒体２０８）またはサーバーで管理されており、記憶媒体２０８から取得されたり、サーバーからインターネット２１１を介して取得されたりする。

【0056】

ステップＳ６０８では、制御部２０１は、接触ユーザが通知対象外ユーザに該当するか否かを判定する。接触ユーザが通知対象外ユーザに該当する場合はステップＳ６１１に進み、そうでない場合はステップＳ６０９に進む。

【0057】

ステップＳ６０９では、制御部２０１は、接触ユーザのアバターが被接触ユーザ（ＨＭＤ１００のユーザ）の視界に存在するか否かを判定する。接触ユーザのアバターが視界に存在する場合はステップＳ６１１に進み、そうでない場合はステップＳ６１０に進む。ステップＳ６０９の判定方法は特に限定されない。例えば、制御部２０１は、ディスプレイ２０５に表示する映像信号（映像信号の生成に用いた情報）に基づいて、接触ユーザのアバターが視界に存在するか否かを判定してもよい。制御部２０１は、被接触ユーザのアバターの位置と姿勢や、接触ユーザのアバターの位置と姿勢などに基づいて、接触ユーザのアバターが視界に存在するか否かを判定してもよい。

【0058】

ステップＳ６１０では、制御部２０１は、接触情報を通知するという判定結果をメモリ２０２に格納する。

【0059】

ステップＳ６１１では、制御部２０１は、接触情報を通知しないという判定結果をメモリ２０２に格納する。

【0060】

なお、ステップＳ６０１～Ｓ６０９の少なくともいずれかを省略してもよい。例えば、ステップＳ６０１～Ｓ６０４を省略し、ステップＳ６０５を最初のステップとしてもよい。ステップＳ６０５～Ｓ６０８を省略し、通知対象ユーザリストによるフィルタリングが無効である場合にステップＳ６０１からステップＳ６０９に進んでもよい。ステップＳ６０１～Ｓ６０８を省略し、ステップＳ６０９を最初のステップとしてもよい。ステップＳ６０９を省略し、通知対象ユーザに該当する場合、通知対象外ユーザリストによるフィルタリングが無効である場合、および通知対象外ユーザに該当する場合に、ステップＳ６１０の処理を行ってもよい。通知対象ユーザリストによるフィルタリングが無効である場合に、ステップＳ６１０の処理を行ってもよい。

【0061】

以上で説明した本実施形態によれば、ＶＲ空間またはＭＲ空間における、ユーザに対する他のユーザの仮想的な接触が検知され、仮想的な接触があった場合に、当該接触の位置に関する情報が、被接触者であるユーザに通知される。こうすることによって、アバター同士の接触といったユーザ同士の仮想的な接触を十分なコミュニケーションツールとして利用できるようになる。例えば、被接触者は、被接触者のどこに接触されたのかを把握して、（背後から）右肩に接触されたのであれば右に振り向き、左肩に接触されたのであれば左に振り向くといった、接触された方向を見る自然なリアクションをとることができる。

【0062】

さらに、本実施形態によれば、接触の位置だけでなく、接触の強度にも関する情報が、被接触者に通知される。こうすることによって、被接触者は、接触の強度が弱い場合には気づかない、接触の強度が強い場合に驚くといったような、より自然なリアクションをとることができる。

【0063】

なお、上記実施形態（変形例を含む）はあくまで一例であり、本発明の要旨の範囲内で上記実施形態の構成を適宜変形したり変更したりすることにより得られる構成も、本発明に含まれる。上記実施形態の構成を適宜組み合わせて得られる構成も、本発明に含まれる。

【0064】

例えば、被接触者側（被接触者のＨＭＤ）で仮想的な接触が検知される例を説明したが、これに限られない。例えば、接触者側（接触者のＨＭＤ）で仮想的な接触が検知されてもよい。そして、仮想的な接触の検知結果が接触者側から被接触者側に通知されてもよい。この場合に、接触者側において、仮想的な接触があったことの検知結果（情報）の通知を、仮想的な接触の位置に関する情報を被接触者に通知する制御と解釈することができる。このように、本発明を適用可能な情報処理装置は、被接触者側の装置に限られず、接触者側の装置であってもよい。本発明を適用可能な情報処理装置はサーバーであってもよい。なお、被接触者側において、仮想的な接触があったことの検知結果（情報）の取得を、仮想的な接触の検知と解釈することもできる。

【0065】

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

【0066】

本実施形態の開示は、以下の構成、方法、プログラム、および媒体を含む。
（構成１）
仮想空間または複合現実空間である３次元空間における、第１のユーザに対する第２のユーザの仮想的な接触を検知する検知手段と、
前記仮想的な接触があった場合に、当該接触の位置に関する情報を前記第１のユーザに通知するように制御する制御手段と
を有することを特徴とする情報処理装置。
（構成２）
前記検知手段は、複合現実空間である３次元空間における、前記第１のユーザに対する前記第２のユーザのアバターの接触を検知する
ことを特徴とする構成１に記載の情報処理装置。
（構成３）
前記検知手段は、仮想空間である３次元空間における、前記第１のユーザのアバターに対する前記第２のユーザのアバターの接触を検知する
ことを特徴とする構成１に記載の情報処理装置。
（構成４）
前記制御手段は、前記接触の位置および強度に関する前記情報を通知するように制御する
ことを特徴とする構成１～３のいずれか１項に記載の情報処理装置。
（構成５）
前記制御手段は、表示または音声によって前記情報を通知するように制御する
ことを特徴とする構成１～４のいずれかに記載の情報処理装置。
（構成６）
前記制御手段は、振動によって前記情報を通知するように制御する
ことを特徴とする構成１～５のいずれかに記載の情報処理装置。
（構成７）
前記第２のユーザが第１のリストに含まれていない場合には前記情報は通知しない
ことを特徴とする構成１～６のいずれかに記載の情報処理装置。
（構成８）
前記第２のユーザが第２のリストに含まれている場合には前記情報は通知しない
ことを特徴とする構成１～７のいずれかに記載の情報処理装置。
（構成９）
前記３次元空間において前記第２のユーザが前記第１のユーザの視界に存在する場合には前記情報は通知しない
ことを特徴とする構成１～８のいずれかに記載の情報処理装置。
（構成１０）
前記検知手段は、前記第１のユーザに対する前記第２のユーザの手の仮想的な接触を検知する
ことを特徴とする構成１～９のいずれかに記載の情報処理装置。
（構成１１）
前記第２のユーザの複数の部位の少なくとも一部がトラッキングされており、
前記検知手段は、前記第２のユーザの複数の部位のうち、トラッキングされている部位の、前記第１のユーザに対する仮想的な接触を検知する
ことを特徴とする構成１～１０のいずれかに記載の情報処理装置。
（構成１２）
前記検知手段は、前記第１のユーザに対する、前記第２のユーザが保持している仮想オブジェクトの接触を検知する
ことを特徴とする構成１～１１のいずれかに記載の情報処理装置。
（方法）
仮想空間または複合現実空間である３次元空間における、第１のユーザに対する第２のユーザの仮想的な接触を検知するステップと、
前記仮想的な接触があった場合に、当該接触の位置に関する情報を前記第１のユーザに通知するように制御するステップと
を有することを特徴とする情報処理装置の制御方法。
（プログラム）
コンピュータを、構成１～１２のいずれかに記載の情報処理装置の各手段として機能させるためのプログラム。

【符号の説明】

【0067】

１００：ヘッドマウントディスプレイ ２０１：制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】