特開 2023-126844 ヘッドマウントディスプレイシステム及びそれに用いるヘッドマウントディスプレイ及びその操作方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023126844

(43)【公開日】2023-09-12

(54)【発明の名称】ヘッドマウントディスプレイシステム及びそれに用いるヘッドマウントディスプレイ及びその操作方法

(51)【国際特許分類】

   G06F 3/01 20060101AFI20230905BHJP

   G06F 3/0488 20220101ALI20230905BHJP

   G06F 3/0346 20130101ALI20230905BHJP

【ＦＩ】

G06F3/01 514

G06F3/0488

G06F3/0346 425

【審査請求】有

【請求項の数】14

【出願形態】ＯＬ

(21)【出願番号】P 2023104928

(22)【出願日】2023-06-27

(62)【分割の表示】P 2021530401の分割

【原出願日】2019-07-09

(71)【出願人】

【識別番号】000005810

【氏名又は名称】マクセル株式会社

(74)【代理人】

【識別番号】110001689

【氏名又は名称】青稜弁理士法人

(72)【発明者】

【氏名】川前 治

(57)【要約】

【課題】
ヘッドマウントディスプレイ（ＨＭＤ）に対して多彩な入力操作を実現して操作性を向上させることができるＨＭＤシステム及びそれに用いるＨＭＤ及びその操作方法を提供する。
【解決手段】
そのために、外部操作機器からの操作入力が可能なＨＭＤと、複数の外部操作機器が接続されたＨＭＤシステムであって、外部操作機器は、ＨＭＤを使用するユーザの体に装着する機器であり、移動を検出するセンサを備え、外部操作機器の移動により操作情報を送信し、ＨＭＤは、近距離無線通信部と操作制御部を備え、近距離無線通信部を介して複数の外部操作機器からの操作情報を受信し、操作制御部は、受信した複数の外部操作機器からのそれぞれの操作情報により所定の操作を実行する構成とした。
【選択図】図１

【特許請求の範囲】

【請求項1】

複数の外部操作機器からの操作入力が可能なヘッドマウントディスプレイであって、
前記外部操作機器は、前記ヘッドマウントディスプレイを使用するユーザに装着可能な指輪型または時計型の機器であり、スイッチを備え、
前記ヘッドマウントディスプレイは、操作制御部を備え、
前記操作制御部は、前記複数の外部操作機器からのそれぞれの操作入力により所定の操作を実行するように構成され、
前記複数の外部操作機器のそれぞれの前記スイッチを押すタイミングの関係により異なる操作を実行することを特徴とするヘッドマウントディスプレイ。

【請求項2】

請求項１に記載のヘッドマウントディスプレイであって、
前記操作制御部は、それぞれの外部操作機器の操作入力の連携動作に基づいて所定の操作を実行することを特徴とするヘッドマウン卜ディスプレイ。

【請求項3】

請求項１に記載のヘッドマウントディスプレイであって、
前記操作制御部は、前記複数の外部操作機器の同じ座標系における相対的な移動量に基づき前記所定の操作を実行することを特徴とするヘッドマウントディスプレイ。

【請求項4】

請求項１に記載のヘッドマウントディスプレイであって、
前記操作制御部は、前記複数の外部操作機器のそれぞれの前記スイッチを同時に長押した場合の前記複数の外部操作機器の空間上の位置をスタート地点とし、前記スタート地点からの前記複数の外部操作機器の移動を検出することを特徴とするヘッドマウン卜ディスプレイ。

【請求項5】

請求項１に記載のヘッドマウントディスプレイであって、
前記複数の外部操作機器は、タッチパッドと、前記タッチパッドに触れた指の移動方向や速さや距離を検出するタッチパッドセンサを備え、
前記操作制御部は、前記タッチパッドセンサで検出された指の移動方向や速さや距離に基づいて所定の操作を実行することを特徴とするヘッドマウン卜ディスプレイ。

【請求項6】

請求項１に記載のヘッドマウントディスプレイであって、
前記所定の操作はカーソルの移動であることを特徴とするヘッドマウン卜ディスプレイ。

【請求項7】

請求項６に記載のヘッドマウン卜ディスプレイであって、
前記操作制御部は、前記複数の外部操作機器のうちの１つのスイッチが長押しされている場合の前記カーソルの移動の距離を、前記複数の外部操作機器のうちの１つのスイッチが長押しされていない場合のカーソルの移動の距離と異なるように制御することを特徴とするヘッドマウン卜ディスプレイ。

【請求項8】

複数の外部操作機器からの操作入力が可能なヘッドマウントディスプレイの操作方法であって、
前記外部操作機器は、前記ヘッドマウントディスプレイを使用するユーザに装着可能な指輪型または時計型の機器であり、スイッチを備え、
前記ヘッドマウントディスプレイは、前記複数の外部操作機器からのそれぞれの操作入力により所定の操作を実行するように構成され、
前記複数の外部操作機器のそれぞれの前記スイッチを押すタイミングの関係により異なる操作を実行することを特徴とするヘッドマウントディスプレイの操作方法。

【請求項9】

請求項８に記載のヘッドマウントディスプレイの操作方法であって、
それぞれの前記外部操作機器の操作入力の連携動作に基づいて所定の操作を実行することを特徴とするヘッドマウン卜ディスプレイの操作方法。

【請求項10】

請求項８に記載のヘッドマウントディスプレイの操作方法であって、
前記複数の外部操作機器の同じ座標系における相対的な移動量に基づき前記所定の操作を実行することを特徴とするヘッドマウントディスプレイの操作方法。

【請求項11】

請求項８に記載のヘッドマウントディスプレイの操作方法であって、
前記複数の外部操作機器のそれぞれの前記スイッチを同時に長押した場合の前記複数の外部操作機器の空間上の位置をスタート地点とし、前記スタート地点からの前記複数の外部操作機器の移動を検出することを特徴とするヘッドマウン卜ディスプレイの操作方法。

【請求項12】

請求項８に記載のヘッドマウントディスプレイの操作方法であって、
前記複数の外部操作機器は、タッチパッドと、前記タッチパッドに触れた指の移動方向や速さや距離を検出するタッチパッドセンサを備え、
前記タッチパッドセンサで検出された指の移動方向や速さや距離に基づいて所定の操作を実行することを特徴とするヘッドマウン卜ディスプレイの操作方法。

【請求項13】

請求項８に記載のヘッドマウントディスプレイの操作方法であって、
前記所定の操作はカーソルの移動であることを特徴とするヘッドマウン卜ディスプレイの操作方法。

【請求項14】

請求項１３に記載のヘッドマウン卜ディスプレイの操作方法であって、
前記複数の外部操作機器のうちの１つの前記スイッチが長押しされている場合の前記カーソルの移動の距離を、前記複数の外部操作機器のうちの１つの前記スイッチが長押しされていない場合の前記カーソルの移動の距離と異なるように制御することを特徴とするヘッドマウン卜ディスプレイの操作方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ヘッドマウントディスプレイ（ＨＭＤ:Head Mounted Display）及びＨＭＤ用のコントローラを含めたＨＭＤシステムに関する。

【背景技術】

【0002】

ディスプレイを搭載し、頭部に装着して情報を視聴するＨＭＤは、近年、ゲーム用途や作業支援の分野で徐々に広がりつつある。ＨＭＤは、両手が自由になる反面、操作入力をするための方法はまだ確立されたものが無く様々である。例えば、音声による入力は、周囲のノイズとの分離が難しいという欠点がある。また、ジェスチャによる入力は、認識範囲内で特定の動作をすることで操作が可能であるが、広い動作範囲と規定された手や指の動きをする必要があり、動作認識や作業範囲の面で制限がある。

【0003】

本技術分野における従来技術として特許文献１がある。特許文献１には、内蔵したセンサにより動きの角速度や加速度を検出しそれらの情報を送信する指輪型デバイスについて開示されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１６－７６１０５号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

ＨＭＤは、ユーザの両手が自由に使える利点があるが、特許文献１に開示されている指輪型デバイスでは、入力できる操作が限られており、多彩な情報を取り扱う際には不便が生じる。そのためユーザの操作の自由度が下がるという課題が残る。

【0006】

本発明は、上記課題を解決するためになされたものであり、両手の自由度を確保しつつ、ＨＭＤに対して多彩な操作が可能となるように操作性を向上させたＨＭＤシステム及びそれに用いるＨＭＤ及びその操作方法を実現することを目的とする。

【課題を解決するための手段】

【0007】

本発明は、上記課題を解決するために、その一例を挙げるならば、外部操作機器からの操作入力が可能なＨＭＤと、複数の外部操作機器が接続されたＨＭＤシステムであって、外部操作機器は、ＨＭＤを使用するユーザの体に装着する機器であり、移動を検出するセンサを備え、外部操作機器の移動により操作情報を送信し、ＨＭＤは、近距離無線通信部と操作制御部を備え、近距離無線通信部を介して複数の外部操作機器からの操作情報を受信し、操作制御部は、受信した複数の外部操作機器からのそれぞれの操作情報により所定の操作を実行する構成とした。

【発明の効果】

【0008】

本発明によれば、ＨＭＤに対して多彩な入力操作を実現して操作性を向上させることができるＨＭＤシステム及びそれに用いるＨＭＤ及びその操作方法を提供できる。

【図面の簡単な説明】

【0009】

【図1】実施例におけるＨＭＤシステムの装着状態模式図である。

【図2】実施例におけるＨＭＤの近距離無線通信の動作状態を示す図である。

【図3】実施例におけるＨＭＤシステムのハードウェア構成図である。

【図4】実施例におけるＨＭＤシステムの他の装着状態模式図である。

【図5】実施例におけるＨＭＤシステムの他のハードウェア構成図である。

【図6】実施例における指輪型コントローラの外観を示す図である。

【図7】実施例における指輪型コントローラのハードウェア構成図である。

【図8】実施例における指輪型コントローラの起動動作を示す図である。

【図9】実施例における左右の指輪型コントローラの移動方向のベクトル定義を示す図である。

【図10】実施例における指輪型コントローラの移動方向のＨＭＤ表示を示す図である。

【図11】実施例における２個の指輪型コントローラを起動・停止する動作を示す図である。

【図12】実施例における２個の指輪型コントローラをＨＭＤと接続する時の処理フローチャートである。

【図13】実施例におけるデュアルモード時の動作モードの切り替え操作を示す図である。

【図14】実施例におけるデュアルモード時の動作モードの他の切り替え操作を示す図である。

【図15】実施例におけるデュアルモード時の動作モードの他の切り替え操作を示す図である。

【図16】実施例におけるデュアルモード時の動作モードの他の切り替え操作を示す図である。

【図17】実施例におけるゲーム機と指輪型コントローラの構成例を示す図である。

【発明を実施するための形態】

【0010】

以下、本発明の実施例について図面を用いて説明する。なお、全図を通じて同一の構成、処理には同一の符号を付し、重複説明を省略する。

【実施例0011】

図１は、本実施例におけるＨＭＤシステムの装着状態模式図である。図１に示すように、ＨＭＤシステムは、ユーザの頭部に装着されたＨＭＤ１００及びスマートフォン２００、指輪型コントローラ右３００、指輪型コントローラ左４００を含む。スマートフォン２００は、近距離無線通信回線を介してＨＭＤ１００に通信接続され、情報の送受信を行う。なお、スマートフォン２００とは有線で情報の送受信を行ってもよい。

【0012】

サーバ５００は、外部ネットワーク６００を介して、スマートフォン２００からの指示により情報を検索したり、ＨＭＤ１００に表示するコンテンツを提供したりする。

【0013】

指輪型コントローラ右３００、指輪型コントローラ左４００は、近距離無線通信回線を介してＨＭＤ１００に通信接続され、指輪型コントローラの操作情報をＨＭＤ１００に送信する。ここで指輪型コントローラは、一つでも二つ同時でもＨＭＤに接続し、動作することが可能である。

【0014】

図２は、本実施例におけるＨＭＤの近距離無線通信の動作状態を説明する図である。図２に示すように、ＨＭＤの近距離無線通信器は、スマートフォン２００と指輪型コントローラ右３００、指輪型コントローラ左４００に接続されており、例えば、無線通信を時間的に分割してそれぞれのデバイスと通信を行うようにすることで同時に動作させることが可能である。

【0015】

図３は、本実施例におけるＨＭＤシステムのハードウェア構成図である。図３に示すように、ＨＭＤ１００は、カメラ１１１、インカメラ１１２、測距センサ１１３、照度センサ１１４、加速度センサ１１５、ジャイロセンサ１１６、地磁気センサ１１７、ＧＰＳ受信器１１８、近距離無線通信器１２３、制御器１３０、表示器１５０を備える。また、制御器１３０は、ＣＰＵ１３１、メモリ１３２、操作制御１３５からなり、メモリ１３２は、プログラム１３３と情報データ１３４を有する。

【0016】

近距離無線通信器１２３は、ＨＭＤ１００と指輪型コントローラ右３００、指輪型コントローラ左４００、スマートフォン２００との間で近距離無線通信を行う通信インターフェースである。近距離無線通信器１２３は、例えば、Bluetooth（登録商標）、ＩｒＤＡ（Infrared Data Association）、Ｚｉｇｂｅｅ（登録商標）、ＨｏｍｅＲＦ（Home Radio Frequency、登録商標）、又は、無線ＬＡＮ（IEEE802.11a、IEEE802.11b、IEEE802.11g）等に対応した通信器により構成される。

【0017】

指輪型コントローラ右３００、指輪型コントローラ左４００は、近距離無線通信器１２３を介してＨＭＤ１００に接続される。ＨＭＤ１００は、近距離無線通信回線を介して指輪型コントローラ右３００、指輪型コントローラ左４００が受け付けた操作情報を受信する。受信した操作情報は操作制御１３５によってどのような入力操作がなされたかを検出し、操作内容に従った処理を行うようＣＰＵ１３１に伝える。

【0018】

ＣＰＵ１３１は、メモリ１３２に格納されたプログラム１３３をロードして実行し、必要に応じて情報データ１３４を読み出してプログラム１３３の実行処理に用いる。制御器１３０では、ＣＰＵ１３１を用いて、各種センサからの情報を解析したり、操作制御１３５の情報を処理したり、スマートフォン２００と情報の送受信を行ったり、表示器１５０への表示画面を作成したりして、ＨＭＤ全体の制御を行う。ここで、指輪型コントローラにセンサの出力を演算する機能を備えている場合には、指輪型コントローラ内で移動に関する情報を演算処理した後に、ＨＭＤ１００に送信しても良い。

【0019】

図４は、本実施例におけるＨＭＤシステムの別の装着状態模式図である。図４において、図１と同じ機能は同じ符号を付し、その説明は省略する。図４に示すように、ＨＭＤ１００は、スマートフォンを介さず、自ら外部ネットワーク６００を介して、サーバ５００に接続するように構成している。この場合、ＨＭＤはスマートフォンで行う演算処理や画像加工処理、通信処理などの機能を有する。

【0020】

また、図５は、図４に対応するＨＭＤシステムのハードウェア構成図である。図５において、図３と同じ機能は同じ符号を付し、その説明は省略する。図５において、図３と異なる点は、ＨＭＤ１００内にネットワーク通信器１２０を備え、スマートフォンを介さず、ＨＭＤ１００から外部ネットワーク６００に接続する構成とした点である。

【0021】

ネットワーク通信器１２０は、無線ＬＡＮ、有線ＬＡＮ或いは基地局通信により外部のサーバと通信を行う通信インターフェースであり、外部ネットワーク６００に接続し、サーバ５００と情報の送受信を行う。ネットワーク通信器１２０は、Ｗ－ＣＤＭＡ（Wideband Code Division Multiple Access）（登録商標）やＧＳＭ（Global System for Mobile communications）（登録商標）などの遠距離の無線通信規格に対応した通信器により構成される。

【0022】

図６は、本実施例における指輪型コントローラ右３００の外観を示した図である。図６において、押下スイッチ２０１は、長押しや短押しの操作で電源を制御したり、操作を切り替えたりすることが可能である。タッチパッド２０２は、例えば静電容量方式で人の指が触れた位置を検出することができ、その位置がどの方向に移動したかにより、操作指示を検出することができる。ここでは十文字の矢印で示したように、隣の親指を用いて上下左右の方向の操作を検出できるタッチパッドの例を示している。突起２０３は、指輪型コントローラの外周の一部に設けられており、指輪型コントローラが操作中に勝手に回転したりすることを抑えたり、操作する親指のホームポジションとして、所定位置を定めるものである。また、動作モードを示すＬＥＤ２０４が搭載されている。なお、押下スイッチとタッチパッド、突起、ＬＥＤの位置関係は、この順序に限定されない。また、指輪型コントローラ左４００については、図６の外観と同じでも構わないし、構造的に左右で対称な配置としても構わない。

【0023】

図７は、指輪型コントローラ右３００のハードウェア構成図である。図７に示すように、移動を検出するための加速度センサ２１１、ジャイロセンサ２１２、地磁気センサ２１３を備え、タッチパッドに触れた指の移動方向や速さ、距離を検出するタッチパッドセンサ２１４、押下スイッチのon/offを検出するプッシュスイッチ検出器２１５、近距離無線通信器２１６を備える。また、右コントローラ制御部２１０は、これらの全体を制御する。なお、バッテリーや充電のためのコネクタ、ＬＥＤドライバ等は、ここでは省略する。

【0024】

図８は、本実施例における指輪型コントローラの起動動作を示した図である。図８（ａ）のように、初めてＨＭＤと近距離無線通信にてペアリングを行う時には、ＨＭＤをペアリングモードにした状態で、押下スイッチ２０１を長押しして双方で認証データを交換することでペアリングを行うことができる。一旦、ペアリングを行った後は、図８（ｂ）のように指輪型コントローラの押下スイッチ２０１を長押しして起動動作させる。この時、ペアリングしたＨＭＤが通信を行うことができる範囲内に居れば自動でペアリングを行うようにする。また、しばらく動作させずにスリープモードになっていた場合には、押下スイッチ２０１の短押しにてスリープ解除を行うようにしても良い。このように、押下スイッチを押す時間の長さによって異なる操作を入力することが可能である。

【0025】

図９は、本実施例における左右の指輪型コントローラの移動方向のベクトル定義を示す図である。図９（ａ）は右手に装着した指輪型コントローラ右３００とそのＸ、Ｙ、Ｚ座標系を示しており、ある位置を起点として、右手に装着した指輪型コントローラ右３００が移動すると、加速度センサ２１１やジャイロセンサ２１２、地磁気センサ２１３により、所定の時間間隔の２地点のＸ、Ｙ、Ｚ座標の差分から、どの方向にどのような速度でどの距離を指輪型コントローラ右３００が移動したか検出することができる。また、図９（ｂ）は左手に装着した指輪型コントローラ左４００とそのＸ、Ｙ、Ｚ座標系を示しており、左手に装着した指輪型コントローラ左４００も同様に、どのように移動をしたか検出することができる。このように左右２個の指輪型コントローラを用いることで、２つのカーソルを同時に独立で動作させることができる。

【0026】

ここで、指輪型コントローラは、１個の場合でも左右独立に用いる場合でも操作は可能であるが、２個同時に用いることで多様な操作が実現できる。例えば、右手に装着した指輪型コントローラ右３００と左手に装着した指輪型コントローラ左４００の移動方向を同じＸ、Ｙ、Ｚ軸を基準に検出すると、二つの指輪型コントローラが所定の時間間隔の間に相対的にどのような位置に移動したのかも検出することができる。例えば、スマートフォンで、画面上に２本の指を置いて、２点間を広げて、表示サイズを拡大するような動作も、二つの指輪型コントローラを用いることで容易に実現できる。

【0027】

図１０は、ＨＭＤのメガネの片方のレンズ部に表示された画像オブジェクトとその移動方向を示した例である。ＨＭＤのメガネ部分には○△□の図形オブジェクトが表示されており、これを例えば、図９（ａ）の右手に装着した指輪型コントローラ右の移動方向Ｘ、Ｙ、Ｚに従ってオブジェクトを移動させる。このとき、ＨＭＤのレンズ面と同じ面方向Ｘ、Ｙだけでなく、奥行方向であるＺ方向にも図形の拡大縮小を用いて遠近（前後）に移動したように表示する。このように、指輪型コントローラを用いて上下左右前後方向に、表示オブジェクトを移動させるような操作をすることができる。

【0028】

図１１は、本実施例における２個の指輪型コントローラを起動する場合と、２個の指輪型コントローラをそれぞれ動作停止する場合の動作について示した図である。図１１（ａ）は２個同時動作を起動する場合であり、指輪型コントローラ右の押下スイッチを長押しして指輪型コントローラ右を立ち上げ、次に指輪型コントローラ左の押下スイッチを長押しして指輪型コントローラ左を立ち上げると、指輪型コントローラを２個同時に動作するデュアルモードとして操作が可能となる。また、図１１（ｂ）のように、デュアルモードの状態から、指輪型コントローラ左の押下スイッチを長押しして指輪型コントローラ左を停止しシングルモードとし、次に指輪型コントローラ右の押下スイッチを長押しして指輪型コントローラ右を停止させることで、指輪型コントローラ２個を停止する操作が可能となる。このように、それぞれの押下スイッチを押すタイミングの関係により異なる操作入力を規定できる。

【0029】

図１２は、本実施例における２個の指輪型コントローラをＨＭＤと接続する時の処理フローチャートである。図１２において、まず、Ｓ９００にて指輪型コントローラの接続する処理を開始する。次に、Ｓ９０１にてＨＭＤとのペアリングの初期設定を行う。そして、Ｓ９０２にて全ての指輪型コントローラとのペアリングが済んでいるかを確認し、まだペアリングの初期設定が済んでいない指輪型コントローラがあればＳ９０１にて初期設定を行う。２個のペアリングの初期設定が完了したことで、この例の場合のＳ９０２はｙｅｓとなる。次に、Ｓ９０３にて一つの指輪型コントローラを認識してペアリングを行う。Ｓ９０４にてもう一つの指輪型コントローラを認識して同様にペアリングを行う。そしてＳ９０５にて、２個の指輪型コントローラの動作モードを確定する。必要であれば、Ｓ９０６にて２個の指輪型コントローラの動作モードを切り替える。終了時にはＳ９０７にて１個の指輪型コントローラを停止し、次にＳ９０８にてもう一つの指輪型コントローラを停止する。このような処理によって、２個の指輪型コントローラとＨＭＤをペアリングして動作させることができる。

【0030】

図１３は、本実施例における２個の指輪型コントローラを用いて、デュアルモード時の動作モードの切り替えを行う操作を示した図である。ここで、動作モードとは、例えば、アプリケーションの切り替えモードや、音声入力の受付けモード、表示を右レンズから左レンズに替える等の表示モード、また、ＨＭＤのメガネ部分をサングラスにするサングラスモード等である。図１３はモードＡからモードＢに切り替える操作を示したもので、２個の指輪型コントローラがデュアルモードで動作している期間内に、両方の押下スイッチを同時に２回押すことで、モードが切り替わる操作を示している。

【0031】

図１４は、本実施例におけるデュアルモード時の動作モードの他の切り替え操作を示す図である。図１４はモードＣからモードＤに切り替える操作を示したもので、２個の指輪型コントローラがデュアルモードで動作している期間内に、左右の押下スイッチを交互に２回ずつ押すことで、モードが切り替わる操作を示している。ここでモードＡ～Ｄをどのような動作モードに割り付けるかは、使用者の設定次第であり特に限定はしない。

【0032】

また、図１５は、本実施例におけるデュアルモード時の動作モードのさらに他の切り替え操作を示す図である。図１５に示すように、デュアルモードの状態において、２個の指輪型コントローラの押下スイッチを同時に長押しする操作を定義する。例えば、このモードを２個の指輪型コントローラの動作のスタート地点を決める起点リセットに対応させれば、このモードにより、それぞれの指輪型コントローラのその時点の空間上の位置を起点として、その位置からの移動を検出するように設定する。その位置から２個の指輪型コントローラがそれぞれ独立に移動した場合、その差分の軌跡が変化量として検出され、その軌跡に応じた操作を行うことができる。

【0033】

また、図１６は、本実施例におけるデュアルモード時の動作モードのさらに他の切り替え操作を示す図である。図１６に示すように、デュアルモードの状態において、指輪型コントローラ右の押下スイッチを長押し、その期間内に指輪型コントローラ左を用いて操作するモードを定義する。例えば、指輪型コントローラ左の押下スイッチを押しているときにカーソルが移動するモードの場合、指輪型コントローラ右の押下スイッチの長押し期間の間に指輪型コントローラ左の操作を行うと、通常の操作の２倍の距離にカーソルが移動する等の定義ができる。また、押下スイッチの代わりに、指輪型コントローラ左のタッチパッドに触れて指を移動させる操作でも、同様の定義をすることができる。

【0034】

このように、２個の指輪型コントローラを同時に操作させることで、それぞれの押下スイッチを押す時間の長さや押すタイミングの関係により異なる操作を入力することが可能であり、それぞれの指輪型コントローラの操作入力の連携動作により多様な動作の定義が可能となる。

【0035】

図１７は、指輪型コントローラをゲーム機に接続した場合の構成例を示した図である。指輪型コントローラ２個がゲーム機７００と通信により接続され、指輪型コントローラ２個それぞれ独立もしくは２個を連携してゲーム機７００の操作入力が可能である。ゲーム機の出力はＴＶ８００に表示される。このように、指輪型コントローラをゲーム機の操作入力装置として用いることも可能である。

【0036】

なお、上記の指輪型コントローラは、ＨＭＤやゲーム機器を操作する外部操作機器であるが、ユーザへの装着の負担を軽減することができればよいので、ＨＭＤやゲーム機器を使用するユーザの体に装着する機器であってもよい。例えば、ユーザの手首に装着するブレスレット型や、腕時計型でもよい。

【0037】

また、上記の説明では指輪型コントローラをＨＭＤやゲーム機に接続して操作する例を示したが、操作する機器はこれらに限定されず、例えば、スマートフォンやタブレットＰＣ（Personal Computer）、また、リモコン機器からの操作のように入力に応じて動作の切り替えを操作できる機器であれば適用可能である。

【0038】

以上のように、本実施例によれば、ＨＭＤに対して多彩な入力操作を実現して操作性を向上させつつ、ユーザへの装着の負担を軽減することができるＨＭＤシステム及びそれに用いるＨＭＤ及びその操作方法を提供できる。

【0039】

以上、本発明の実施例について説明したが、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、上記の各構成は、それらの一部又は全部が、ハードウェアで構成されても、プロセッサでプログラムが実行されることにより実現されるように構成されてもよい。

【符号の説明】

【0040】

１００：ＨＭＤ、２００：スマートフォン、３００：指輪型コントローラ右、４００：指輪型コントローラ左、５００：サーバ、６００：外部ネットワーク、７００：ゲーム機、８００：ＴＶ、１２３：近距離無線通信器、１３０：制御器、１３１：ＣＰＵ、１３２：メモリ、１３３：プログラム、１３４：情報データ、１３５：操作制御、１５０：表示器、２０１：押下スイッチ、２０２：タッチパッド、２０３：突起、２０４：ＬＥＤ、２１１：加速度センサ、２１２：ジャイロセンサ、２１３：地磁気センサ、２１４：タッチパッドセンサ、２１５：プッシュスイッチ検出器、２１６：近距離無線通信器

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】