特許 7455277 モーション信号とマウス信号を使用してホスト装置を制御するための電子装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-03-14

(45)【発行日】2024-03-25

(54)【発明の名称】モーション信号とマウス信号を使用してホスト装置を制御するための電子装置

(51)【国際特許分類】

   G06F 3/01 20060101AFI20240315BHJP

   G06F 3/0346 20130101ALI20240315BHJP

【ＦＩ】

G06F3/01 510

G06F3/01 514

G06F3/01 570

G06F3/0346 424

【請求項の数】 9

(21)【出願番号】P 2023510353

(86)(22)【出願日】2021-05-28

(65)【公表番号】

(43)【公表日】2023-09-05

(86)【国際出願番号】 KR2021006642

(87)【国際公開番号】W WO2022035027

(87)【国際公開日】2022-02-17

【審査請求日】2023-02-28

(31)【優先権主張番号】10-2020-0100795

(32)【優先日】2020-08-11

(33)【優先権主張国・地域又は機関】KR

(73)【特許権者】

【識別番号】523048284

【氏名又は名称】コックス スペース カンパニー リミテッド

(73)【特許権者】

【識別番号】523047601

【氏名又は名称】キム，ホヨン

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】キム，ホヨン

【審査官】遠藤 孝徳

(56)【参考文献】

【文献】特表２０１８－５０５５００（ＪＰ，Ａ）

【文献】国際公開第２０１８／０４３７２２（ＷＯ，Ａ１）

【文献】中国特許出願公開第１０７６７８５４２（ＣＮ，Ａ）

【文献】特開２００２－１１０２８４（ＪＰ，Ａ）

【文献】特開２００１－１１７６８６（ＪＰ，Ａ）

【文献】特表２０１７－５２８７８６（ＪＰ，Ａ）

【文献】特表２０１２－５０８４１６（ＪＰ，Ａ）

【文献】国際公開第２０１４／０４６２０４（ＷＯ，Ａ１）

【文献】特開２０１５－１５０００（ＪＰ，Ａ）

【文献】特開２０１７－１３４８２０（ＪＰ，Ａ）

【文献】特許第６５４５５６９（ＪＰ，Ｂ２）

【文献】韓国公開特許第１０－２０１９－００４０７６８（ＫＲ，Ａ）

【文献】韓国公開特許第１０－２０１８－００４４６１３（ＫＲ，Ａ）

【文献】韓国公開特許第１０－２０１８－０１１２３０８（ＫＲ，Ａ）

【文献】韓国公開特許第１０－２０１５－０１１８３７７（ＫＲ，Ａ）

【文献】韓国公開特許第１０－２０１４－０１２５５７４（ＫＲ，Ａ）

【文献】韓国登録特許第１０－１８７０５４２（ＫＲ，Ｂ１）

【文献】特開２０１７－１６８０６０（ＪＰ，Ａ）

【文献】特許第６５４５２５８（ＪＰ，Ｂ２）

【文献】特開２０１２－６８９２２（ＪＰ，Ａ）

【文献】特表２０１９－５３６１８９（ＪＰ，Ａ）

【文献】特表２０１６－５０４６９７（ＪＰ，Ａ）

【文献】特許第６５２４１１１（ＪＰ，Ｂ２）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／０３３ － ３／０３９

(57)【特許請求の範囲】

【請求項1】

ホスト装置とペアリングされて前記ホスト装置のコンテンツを制御するための電子装置であって、
第１タッチ領域と、第２タッチ領域と、第３タッチ領域とに区分される表面を含むタッチセンシングモジュールと、
加速度センサと、ジャイロセンサと、地磁気センサとに基づいて前記電子装置の３次元空間上の第１動き情報を獲得するための動きセンシングモジュールと、
前記第１動き情報を演算することで第２動き情報を獲得し、ジェスチャモードの下で、前記第２動き情報に基づいて前記電子装置の動きに対応するモーションを決定し、前記決定されたモーションを示すモーション信号を前記ホスト装置に出力し、マウスモードの下で、前記タッチセンシングモジュールから獲得されるタッチ情報及び前記第２動き情報のうち少なくとも一つに基づいてマウスの動作を決定し、前記マウスの動作を示すマウス信号を前記ホスト装置に出力するための制御信号出力部と、
前記タッチセンシングモジュールと、前記動きセンシングモジュールと、前記制御信号出力部とを埋め込むための筐体と、
前記筐体を収納し、蓋を閉めるか前記蓋を開けて前記筐体を取り出すためのクレードル装置と、を含み、
前記第１動き情報は、前記加速度センサによって獲得される加速度データと前記ジャイロセンサによって獲得される角速度データのうち少なくとも一つを含み、
前記動きセンシングモジュールは、前記第１動き情報を内部バスを介して前記制御信号出力部に伝達し、
前記第２動き情報は、角度データ、距離データ、速度データ、及び方向データのうち少なくとも一つを含み、
前記マウス信号は、マウスのクリック、マウスのスクロール、マウスのムーブ、またはマウスのドラッグを含み、
前記タッチセンシングモジュールによって感知されるタッチ動作によって前記マウスモードと前記ジェスチャモードとの間の切り替えが行われ、
前記クレードル装置の下側には重心おもりが位置し、
前記クレードル装置に前記筐体が収納されて前記蓋が閉まったら前記タッチ動作のための前記第１タッチ領域と、前記第２タッチ領域と、前記第３タッチ領域とが露出され、ユーザが前記クレードル装置を手で握って動くか前記露出された前記第１タッチ領域、前記第２タッチ領域、または前記第３タッチ領域をタッチすることで前記モーション信号または前記マウス信号が出力され、
前記ユーザが前記クレードル装置から分離された前記筐体を指に着用したまま前記筐体を動かすか、前記第１タッチ領域、前記第２タッチ領域、または前記第３タッチ領域をタッチすることで前記モーション信号または前記マウス信号が出力され、
前記制御信号出力部は、前記マウスモードの下で、前記マウスのムーブが、前記第２動き情報から決定され、前記タッチセンシングモジュールによって感知されるタッチ動作が、前記第１タッチ領域のみのタッチであるか、または前記第１タッチ領域と前記第２タッチ領域の同時タッチである場合、前記マウスの動作を前記マウスのクリックと決定し、前記タッチセンシングモジュールによって感知されるタッチ動作が、前記第１タッチ領域、前記第２タッチ領域、及び前記第３タッチ領域の順次のタッチである場合、前記マウスの動作を前記マウスのスクロールと決定する、電子装置。

【請求項2】

前記距離データは、ｘ軸方向、ｙ軸方向、及びｚ軸方向それぞれに対する距離データを含み、
前記速度データは、ｘ軸方向、ｙ軸方向、及びｚ軸方向それぞれに対する速度データを含み、
前記方向データは、ｘ軸方向への増減可否、ｙ軸方向への増減可否、及びｚ軸方向への増減可否に対する情報を含み、
前記制御信号出力部は、前記タッチセンシングモジュールを基準時間より長い間前記筐体を動かしたら前記マウスの動作を前記マウスのドラッグと決定する、請求項１に記載の電子装置。

【請求項3】

前記制御信号出力部は、前記ジェスチャモードの下、前記ホスト装置を制御するための予め定義されたモーションのうち前記第２動き情報に対応するモーションを決定するように構成されるが、
前記予め定義されたモーションは前記ホスト装置で実行される文書のページをめくるためのムーブを含み、
前記予め定義されたモーションはユーザ定義モーションを含むが、
前記ユーザ定義モーションは、前記電子装置を手で握るか着用したユーザが特定の動きを繰り返してとり、前記ユーザが前記特定の動きを前記ユーザ定義モーションと対応することで定義される、請求項１に記載の電子装置。

【請求項4】

前記制御信号出力部は、前記電子装置のユーザが第１ユーザであれば前記第１ユーザの第２動き情報を第１決定モデルに入力して対応するモーションを決定し、前記電子装置のユーザが第２ユーザであれば前記第２ユーザの第２動き情報を第２決定モデルに入力して対応するモーションを決定するが、
前記第１決定モデルは、前記第１ユーザの前記第２動き情報と特定モーションをそれぞれ入力と出力として繰り返し適用した機械学習技法に基づいて生成されたものであり、
前記第２決定モデルは、前記第２ユーザの前記第２動き情報と特定モーションをそれぞれ入力と出力として繰り返し適用した機械学習技法に基づいて生成されたものである、請求項３に記載の電子装置。

【請求項5】

前記動きセンシングモジュールは、前記加速度センサと、前記ジャイロセンサと、前記地磁気センサそれぞれから獲得されるデータをフィルタに基づいて補償及び融合することで最適化された前記第１動き情報を獲得するためのセンサ融合部を更に含む、請求項１に記載の電子装置。

【請求項6】

前記制御信号出力部は、
前記第１動き情報を演算することで前記第２動き情報を獲得し、前記第２動き情報に基づいて前記電子装置の動きと対応する前記モーションまたはマウスの動作を決定するためのプロセッサと、
無線通信インタフェースに基づいて前記モーション信号または前記マウス信号を前記ホスト装置に伝達するための通信部と、を含む、請求項１に記載の電子装置。

【請求項7】

前記プロセッサは、前記第２動き情報を基準時間ごとに獲得するが、前記基準時間は３０ｍｓ以下である、請求項６に記載の電子装置。

【請求項8】

前記プロセッサは、前記加速度データから重力加速度成分を除去した線形加速度データに積分演算を行うことで前記速度データと前記距離データを獲得する、請求項６に記載の電子装置。

【請求項9】

前記プロセッサは、
前記角速度データに積分演算を行うことで前記角度データを獲得し、
現在の距離データと以前の距離データとの比較に基づいて前記方向データを獲得する、請求項６に記載の電子装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ホスト装置を制御するための電子装置に関し、より詳しくは、タッチ操作や３次元空間上の動きに基づいてホスト装置の多様なコンテンツを容易で直感的に制御するための電子装置に関する。

【背景技術】

【0002】

最近、拡張現実（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ、ＡＲ）、仮想現実（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ、ＶＲ）、複合現実（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ、ＭＲ）のような仮想現実に基づくコンテンツ市場が発展しつつある。また、仮想現実の大衆化につれ仮想コンテンツを生成し制御するインタフェースに対する関心が高まっている。仮想コンテンツは仮想の３次元空間に再生されて扱われる仮想のオブジェクトであって、現在までのインタフェース装置は消費者のニーズを完全に充足することができず、汎用インタフェースとしても適合ではなかった。

【0003】

従来のＶＲコントローラの場合、器具が大きくて重くて高価なだけでなく、多様な機能に対する学習が必要であった。また、ＶＲコントローラは特定のＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）に専用に使用されるため、一般の汎用マウスのようにいつどこでも使用することができないという問題点があった。

【発明の概要】

【発明が解決しようとする課題】

【0004】

３次元空間上でのモーショントラッキング（Ｍｏｔｉｏｎ Ｔｒａｃｋｉｎｇ）とタッチセンシングによって、汎用マウスの動作とコンテンツを制御する動作をいずれも行うことができる電子装置が提供される。

【0005】

本実施例がなそうとする技術的課題は、上述した技術的課題に限らず、以下の実施例から他の技術的課題が類推される。

【課題を解決するための手段】

【0006】

３次元空間上でのモーショントラッキングとタッチセンシングによって、汎用マウスの動作とコンテンツを制御する動作をいずれも行うことができる電子装置が提供される。

【0007】

ホスト装置とペアリングされて前記ホスト装置のコンテンツを制御するための電子装置は、タッチセンシングモジュールと、加速度センサと、ジャイロセンサと、地磁気センサとに基づいて前記電子装置の第１動き情報を獲得するための動きセンシングモジュールと、前記第１動き情報を演算することで第２動き情報を獲得し、ジェスチャモードの下、前記第２動き情報に基づいて前記電子装置の動きに対応するモーションを決定し、前記決定されたモーションを示すモーション信号を前記ホスト装置に出力し、マウスモードの下、前記タッチセンシングモジュールから獲得されるタッチ情報及び前記第２動き情報のうち少なくとも一つに基づいてマウスの動作を決定し、前記マウスの動作を示すマウス信号を出力するための制御信号出力部と、を含むが、前記第１動き情報は、前記加速度センサによって獲得される加速度データと前記ジャイロセンサによって獲得される角速度データのうち少なくとも一つを含み、前記動きセンシングモジュールは、前記第１動き情報を内部バスによって前記制御信号出力部に伝達し、前記第２動き情報は、角度データと、距離データと、速度データと、方向データとのうち少なくとも一つを含み、前記マウス信号は、マウスのクリック、マウスのスクロール、マウスのムーブ、またはマウスのドラッグを含み、前記タッチセンシングモジュールによって感知されるタッチ動作によって前記マウスモードと前記ジェスチャモードとの間の切り替えが行われる。
前記距離データは、ｘ軸方向、ｙ軸方向、及びｚ軸方向それぞれに対する距離データを含み、前記速度データは、ｘ軸方向、ｙ軸方向、及びｚ軸方向それぞれに対する速度データを含み、前記方向データは、ｘ軸方向への増減可否、ｙ軸方向への増減可否、及びｚ軸方向への増減可否に関する情報を含む。
前記制御信号出力部は、前記ジェスチャモードの下、前記ホスト装置を制御するための予め定義されたモーションのうち前記第２動き情報に対応するモーションを決定するように構成されるが、前記予め定義されたモーションはムーブ及びロテーションを含む。

【0008】

前記予め定義されたモーションはユーザ定義モーションを更に含むが、前記ユーザ定義モーションは、前記電子装置を手で握るか着用したユーザが繰り返し特定の動きをとり、前記ユーザが前記特定の動きを前記ユーザ定義モーションと対応することで定義される。

【0009】

前記制御信号出力部は、前記電子装置のユーザが第１ユーザであれば前記第１ユーザの第２動き情報を第１決定モデルに入力して対応するモーションを決定し、前記電子装置のユーザが第２ユーザであれば前記第２ユーザの第２動き情報を第２決定モデルに入力して対応するモーションを決定するが、前記第１決定モデルは、前記第１ユーザの前記第２動き情報と特定モーションをそれぞれ入力と出力として繰り返し適用した機械学習技法に基づいて生成されたものであり、前記第２決定モデルは、前記第２ユーザの前記第２動き情報と特定モーションをそれぞれ入力と出力として繰り返し適用した機械学習技法に基づいて生成されたものである。

【0010】

前記動きセンシングモジュールは、前記加速度センサと、前記ジャイロセンサと、前記地磁気センサそれぞれから獲得されるデータをフィルタまたはアルゴリズムに基づいて補償及び融合することで最適化された前記第１動き情報を獲得するためのセンサ融合部を更に含む。

【0011】

前記制御信号出力部は、前記第１動き情報を演算することで前記第２動き情報を獲得し、前記第２動き情報に基づいて前記電子装置の動きと対応する前記モーションまたはマウスの動作を決定するためのプロセッサと、無線通信インタフェースに基づいて前記モーション信号または前記マウス信号を前記ホスト装置に伝達するための通信部と、を含む。

【0012】

前記プロセッサは、前記第２動き情報を基準時間ごとに獲得するが、前記基準時間は３０ｍｓ以下である。

【0013】

前記プロセッサは、前記加速度データから重力加速度成分を除去した線形加速度データに積分演算を行うことで前記速度データと前記距離データを獲得する。

【0014】

前記プロセッサは、前記角速度データに積分演算を行うことで前記角度データを獲得し、現在の距離データと以前の距離データとの比較に基づいて前記方向データを獲得する。

【0015】

前記制御信号出力部は、前記マウスモードの下、前記電子装置のユーザがキーボードを使用している際とマウスを使用している際とを区分し、前記ユーザがキーボードを使用していると判断されれば前記マウス信号を出力しない。

【0016】

前記タッチセンシングモジュール、前記動きセンシングモジュール、及び前記制御信号出力部のうち少なくとも一つの動作のために必要な電源を供給するバッテリを更に含む。

【0017】

前記タッチセンシングモジュール、前記動きセンシングモジュール、及び前記制御信号出力部を埋め込むための筐体を更に含むが、前記筐体をユーザの指に着用または固定するための連結部を更に含む。

【0018】

前記筐体と前記連結部を収納するためのクレードル装置を更に含むが、前記クレードル装置によって前記バッテリが充電され、前記クレードル装置の下側には重心おもりが位置し、前記クレードル装置に前記筐体と前記連結部が収納されたら、前記筐体のうち一面が露出される。

【0019】

前記タッチセンシングモジュールは、第１タッチ領域と、第２タッチ領域と、第３タッチ領域とを含み、前記制御信号出力部は、前記マウスモードの下、前記タッチセンシングモジュールによって感知されるタッチ動作が前記第１タッチ領域のみのタッチであるか、前記第１タッチ領域と前記第２タッチ領域の同時タッチであれば、前記マウスの動作を前記マウスのクリックと決定し、前記タッチセンシングモジュールによって感知されるタッチ動作が前記第１タッチ領域、前記第２タッチ領域、及び第３タッチ領域の順次タッチであれば、前記マウスの動作を前記マウスのスクロールと決定する。

【発明の効果】

【0020】

着用が容易で、直感的で、操作方法に対する学習が不必要な電子装置が提供される。

【0021】

前記電子装置は形態が簡便なため、いつどこでもスマートフォン、テレビ、タブレットＰＣ、ホログラム、ＨＭＤ上の多様なコンテンツを容易で精密にコントロールすることができる。

【図面の簡単な説明】

【0022】

【図1a】一実施例によって、ホスト装置を制御するための電子装置（閉まった状態）を示す図である。

【図1b】一実施例によって、ホスト装置を制御するための電子装置（開いた状態）を示す図である。

【図2a】一実施例によって、電子装置内のリング状装置を示す図である。

【図2b】一実施例によって、電子装置を使用してコンテンツを制御することを示す図である。

【図3】一実施例によって、電子装置を含むシステムを示す図である。

【図4a】一実施例によって、マウスモードの下、電子装置で行われるマウスの動作を示す図である。

【図4b】一実施例によって、電子装置の正面部分が３つのタッチ領域に区分されることを示す図である。

【図4c】一実施例によって、３つの領域を利用して認識されるマウスの動作を示す図である。

【図5】一実施例によって、ユーザの動き情報に対応するモーションを決定するための決定モデルを示す図である。

【図6】一実施例によって、電子装置を活用したジョイスティックを示す図である。

【図7】一実施例によって、ジェスチャモードの下、電子装置でホスト装置を制御するためのモーションを示す図である。

【図8】一実施例によって、電子装置が埋め込まれたさいころを示す図である。

【図9】一実施例によって、電子装置が連結された杖を示す図である。

【図10】一実施例によって、電子装置を使用してコンテンツを制御する方法を示すフローチャートである。

【図11】一実施例によって、距離データを確保するための方法を示すフローチャートである。

【図12】一実施例によって、電子装置がオブジェクトの動きをマウスモード下におけるマウスのムーブ、またはジェスチャモード下におけるムーブモーションと決定し、動いた距離データを獲得するための方法を示すフローチャートである。

【図13】一実施例によって、ホスト装置がムーブモーションに基づいてコンテンツをズームインするかズームアウトする動作を示すフローチャートである。

【図14】一実施例によって、電子装置がオブジェクトの動きをタップモーションと決定するための方法を示すフローチャートである。

【図15】一実施例によって、電子装置がオブジェクトの動きを握るモーションと決定するための方法を示すフローチャートである。

【図16】一実施例によって、電子装置がオブジェクトの動きをスクロールモーションと決定するための方法を示すフローチャートである。

【図17】一実施例によって電子装置がオブジェクトの動きをスワイプモーションと決定するための方法を示すフローチャートである。

【図18】一実施例によって、電子装置がオブジェクトの動きをロテーションモーションと決定するための方法を示すフローチャートである。

【発明を実施するための形態】

【0023】

以下、当業者が本発明を容易に実施し得るように、添付した図面を参照していくつかの実施例が明確にかつ詳細に説明される。

【0024】

また、明細書で使用される「部」または「モジュール」という用語は、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）またはＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）のようなハードウェア構成要素または回路を意味する。

【0025】

以下、「コンテンツ」は、ゲーム、音楽、映画、画像、アニメーション、キャラクタ、アイテム、物体のようなメディア自体またはメディア上で再生されるオブジェクトを含むが、これに限らない。「コンテンツ」はホスト装置で駆動される運営体制またはソフトウェアを含む。ソフトウェアは、ワードプロセッサ、パワーポイントのような文書プログラムと、専門的な作業を行うための画像処理プログラムと、ＣＡＤプログラムと、ゲームとを含む。「コンテンツ」はＡＲ／ＶＲ／ＭＲのような仮想現実で生成される仮想コンテンツを含む。「コンテンツ」は、２次元の画面に再生されるオブジェクトまたはホログラムのような３次元空間上に表現される３次元立体オブジェクトを含む。「コンテンツ」はホスト装置によって生成、実行、または再生される。「コンテンツ」が３次元空間上で表現される仮想コンテンツ（例えば、ホログラム）であれば、ホスト装置と「コンテンツ」の物理的位置は異なり得る。

【0026】

以下、「モーション（ｍｏｔｉｏｎ）」はコンテンツを制御するためにユーザがとる有意味な動き（ｍｏｖｅｍｅｎｔ）であって、ユーザの動きからキャプチャ、抽出、認識、分析、または決定される。

【0027】

以下、「制御信号」はモーション自体またはモーションのタイプに関する情報を含む信号であって、電子装置は「制御信号」を発生し、ホスト装置は電子装置から受信される「制御信号」に基づいてコンテンツを動作するか制御する。例えば、「制御信号」はビット列の形態であり、モーションそれぞれはそれぞれ異なるビット列に表現される。

【0028】

図１ａは、一実施例によってホスト装置を制御するための電子装置（閉まった状態）を示す図である。図１ｂは、一実施例によってホスト装置を制御するための電子装置（開いた状態）を示す図である。

【0029】

ユーザは電子装置１０００を手で握るか手に持った状態でタッチや手の動きによってホスト装置をコントロールする。ホスト装置は多様な種類の電子装置を含む。例えば、ホスト装置は、ゲーム機、スマートフォン、タブレットＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、テレビ、デスクトップＰＣ、ノートブックＰＣ、モバイル医療機器、カメラ、またはウェアラブル装置（例えば、電子眼鏡、電子衣服、電子ブレスレット、電子ネックレス、電子アクセサリ、電子タトゥー、またはスマートウォッチ）のうちいずれか一つであるが、これに限らない。例えば、ホスト装置は仮想コンテンツを表示するためのＨＭＤと、仮想現実ゲームまたは仮想現実コンテンツを実行するか再生するためのゲーム機と（例えば、コンソール機器）を含む。ホスト装置はプレゼンテーション資料を表示するためのコンピュータを含む。
図１ａと図１ｂを共に参照すると、電子装置１０００は、ユーザの指に着用可能なリング状装置１２００と、リング状装置１２００を収納するためのクレードル（Ｃｒａｄｌｅ）装置１４００とを含む。ユーザはリング状装置１２００をクレードル装置１４００に収納し蓋を閉める。

【0030】

リング状装置１２００がクレードル装置１４００に収納されてクレードル装置１４００の蓋が閉まっている状態で、リング状装置１２００の正面部分（ヘッド部分、後述するメインモジュール１２４０の正面（または一面））がクレードル装置１４００の正面に露出され、ユーザはクレードル装置１４００を手で握ったまま動くことでモーション信号を発生するか、露出されたリング状装置１２００の正面部分をタッチすることでタッチ動作を行う。一実施例によって、リング状装置１２００の正面部分にタッチセンシングモジュールが位置する。

【0031】

ユーザはクレードル装置１４００の蓋を開けてリング状装置１２００を取り出す。ユーザはリング状装置１２００を指に着用したままタッチ動作やモーションによってホスト装置を制御する。クレードル装置１４００は人が手で握りやすい形態に製作され、クレードル装置１４００の下側には重心おもいりが位置してクレードル装置１４００の重心が低く設計される。クレードル装置１４００はリング状装置１２００を充電するための充電端子と電源装置を含む。

【0032】

リング状装置１２００は、ユーザの動き情報を獲得するためのモーションセンサと、ユーザのタッチ情報を獲得するためのタッチセンサとを含む。リング状装置１２００は獲得された動き情報とタッチ情報に基づいて制御信号を生成し、生成された制御信号をホスト装置に出力する。ホスト装置はリング状装置１２００から受信される制御信号に基づいてコンテンツを制御する。

【0033】

図２ａは一実施例によるリング状装置を示す図であり、図２ｂは一実施例によってユーザがリング状装置を着用したままコンテンツを制御することを示す図である。
図２ａと図２ｂを共に参照すると、リング状装置１２００は人体または物体取り付けられるか、連結乃至着用可能な小型のウェアラブル装置である。リング状装置１２００は着用が楽で、ユーザは別途に学習しなくても直感的にリング状装置１２００の機能を動作することができる。また、リング状装置１２００は動き情報とタッチ情報を利用して汎用マウスのように汎用装置として使用することができる。
リング状装置１２００は、ユーザの指２３００に着用されるようにするための連結部１２００と、センサを利用して動き情報とタッチ情報を獲得するためのメインモジュール１２４０を含む。連結部１２２０はシリコン、メタルなどの素材からなる。メインモジュール１２４０はユーザのタッチ情報と動き情報を獲得し、獲得した情報に対応する制御信号を出力する。メインモジュール１２４０は、後述する電子装置３０００の構成要素及び構成要素が埋め込まれた筐体を意味する。一実施例によって、メインモジュール１２４０は連結部１２２０と分離されるが、ユーザはメインモジュール１２４０のみを多様な種類のオブジェクト（杖、さいころ、ペンなど）に挿入、取り付け、またな埋め込み、多様な種類のオブジェクトを使用してホスト装置を制御する。

【0034】

メインモジュール１２４０はタッチ情報と動き情報（例えば、メインモジュール１２４０の動きに対する角速度、加速度、速度、距離、角度、方向、位置（３次元空間座標）情報）を獲得し、それを加工及び処理することでコンテンツ２５００を制御するための制御信号を出力する。

【0035】

図２ｂにはリング状装置１２００がユーザの指２３００に着用されると示したが、リング状装置１２００は他の形態のオブジェクトと連結されるか取り付けられてもよい。

【0036】

例えば、メインモジュール１２４０はさいころに埋め込まれて、さいころの動きに基づいてコンテンツ２５００が制御されてもよい。または、メインモジュール１２４０は杖に取り付けられて、杖の動きに基づいてコンテンツ２５００が制御されてもよい。または、メインモジュール１２４０はペンに埋め込まれて、スマートフォン上のコンテンツ２５００がペンの動きに基づいて制御されてもよい。以下、オブジェクトは人の身体部位（例えば、指）、人が着用できるが持ち上げられるもの、または後述する電子装置３０００自体を意味する。

【0037】

また、図２ｂにはコンテンツ２５００が３次元空間上のホログラムオブジェクトとして示されたが、コンテンツ２５００はホスト装置で再生されるいかなる形態のコンテンツやソフトウェア（マイクロソフト社のＭＳ ｏｆｆｉｃｅ、ゲームなど）なども含む。

【0038】

図３は、一実施例によって電子装置を含むシステムを示す図である。図３を参照すると、システム１０００は電子装置３０００とホスト装置（または、ターゲット装置）を含む。電子装置３０００はホスト装置と無線通信方式によって連結される。例えば、電子装置３０００はホスト装置とブルートゥース（登録商標）方式によってペアリング（ｐａｉｒｉｎｇ）される。電子装置３０００は、図１ａのリング状装置１２００が収納されたクレードル装置１４００、クレードル装置１４００から分離されたリング状装置１２００、または図２ａのリング状装置１２００のメインモジュール１２４０を意味する。

【0039】

ユーザは電子装置３０００を使用してホスト装置の多様なコンテンツを制御する。一実施例によって、ユーザは電子装置３０００自体または電子装置３０００と連結されたオブジェクトの動き及び／または電子装置３０００に入力されるユーザのタッチ動作に基づいてホスト装置のコンテンツを制御する。例えば、ユーザは電子装置３０００を自らの指に着用して指を動かすか、指で電子装置３０００をタッチすることでホスト装置の多様なコンテンツを制御する。

【0040】

図３を参照すると、電子装置３０００は、動きセンシングモジュール３２００と、タッチセンシングモジュール３３００と、通信チャネル３４００と、制御信号出力部３６００とを含む。

【0041】

電子装置３０００はマウスモード（Ｍｏｕｓｅ Ｍｏｄｅ）またはジェスチャモード（Ｇｅｓｔｕｒｅ Ｍｏｄｅ）で動作する。マウスモードの下では電子装置３０００は汎用マウスのように動作し、ジェスチャモードの下では電子装置３０００はモーション認識装置として動作する。

【0042】

マウスモードの下、電子装置３０００はタッチセンシングモジュール３３００によって感知されるタッチ動作及び動きセンシングモジュール３２００によって感知される動き情報のうち少なくとも一つに基づいてマウスの動作を決定し、マウスの動作を示すマウス信号を出力する。

【0043】

例えば、マウスのクリック（Ｃｌｉｃｋ）は電子装置３０００の一面を一回タッチすることで行われ、マウスのダブルクリック（Ｄｏｕｂｌｅ Ｃｌｉｃｋ）は電子装置３０００の一面を基準時間内に２回タッチすることで行われ、マウスのムーブ（Ｍｏｖｅ）は電子装置３０００の動き情報（例えば、後述する第２動き情報）から決定され、マウスのスクロール（Ｓｃｒｏｌｌ Ｕｐ／Ｄｏｗｎ）はタッチの連続的な変化（例えば、スクロールアップは電子装置３０００の一面を指で左から右になでる動き、スクロールダウンは電子装置３０００の一面を指で右から左になでる動き）、マウスのドラッグ（Ｄｒａｇ）はタッチ時間（例えば、ロングタッチ）と電子装置３０００の動き情報によって決定される。一実施例によって、タッチ時間が２００ｍｓ以内であればショートタッチと決定され、タッチ時間が５００ｍｓ以上であればロングタッチと決定される。タッチが行われる電子装置３０００の一面はタッチセンシングモジュール３３００として図２ａを参照して説明した正面部分である。

【0044】

ジェスチャモードの下、電子装置３０００はセンサを利用して電子装置３０００の動き情報を獲得し、獲得された動き情報に基づいて電子装置３０００の動きに対応するモーションを決定する。電子装置３０００は決定されたモーションを示すモーション信号をホスト装置に出力する。一実施例によって、動き情報は、オブジェクトの動きに対する特徴（例えば、角速度、角速度、速度、距離、角度、方向、及び位置のうち少なくとも一つ）を含む。

【0045】

以下、電子装置３０００の構成要素の動作と機能について説明する。

【0046】

図３を参照すると、タッチセンシングモジュール３３００はユーザのタッチを感知する。例えば、ユーザがリング状装置１２００を人差し指に着用した状態でユーザが親指でリング状装置１２００の正面部分をタッチすれば、タッチセンシングモジュール３３００はタッチ動作を感知する。タッチセンシングモジュール３３００によって感知されたタッチ動作は通信チャネル３４００を介して制御信号出力部３６００に伝達される。

【0047】

タッチセンシングモジュール３３００によって感知されるタッチ動作は上述したマウスモードの下でのマウスの動作を決定するために使用される。または、タッチセンシングモジュール３３００によって感知されるタッチ動作は、ジェスチャモードの下でオブジェクトの動きに対応するモーションを決定するために使用される。または、タッチセンシングモジュール３３００によって感知されるタッチ動作は、マウスモードとジェスチャモードとの間の切り替えのために使用される。

【0048】

マウスモードとジェスチャモードとの間の切り替えはタッチ動作によって行われる。例えば、タッチセンシングモジュール３３００によってユーザのショートタッチ、ショートタッチ、ロングタッチが連続的に感知されたら、ジェスチャモードからマウスモードに、またはマウスモードからジェスチャモードに切り替えられる。または、タッチセンシングモジュール３３００によってリング状装置１２００の正面部分のうち中間部分を基準時間以上タッチしたら、ジェスチャモードからマウスモードに、またはマウスモードからジェスチャモードに切り替えられる。

【0049】

動きセンシングモジュール３２００は電子装置３０００の第１動き情報を獲得する。第１動き情報はマウスモードとジェスチャモードのいずれでも使用される。第１動き情報は、加速度センサによって獲得される加速度データと、ジャイロセンサによって獲得される角速度データのうち少なくとも一つを含む。

【0050】

動きセンシングモジュール３２００は、加速度センサ（Ａｃｃｅｌｅｒｏｍｅｔｅｒ）３２２０と、ジャイロセンサ（Ｇｙｒｏｓｃｏｐｅ）３２４０と、地磁気センサ（Ｍａｇｎｅｔｏｍｅｔｅｒ）３２６０と、センサ融合部３２８０とを含む。一実施例によるジャイロセンサ３２４０は角速度を測定するためのセンサである。一実施例による加速度センサ３２２０は加速度を測定し、振動、衝撃などの動的力を測定するためのセンサである。一実施例による地磁気センサ３２６０は地球の磁気を測定し、その大きさを検出するためのセンサである。

【0051】

ジャイロセンサ３２４０で測定される値には温度の影響で誤差が発生し、誤差が積分過程で累積されて最終値がドリフト（ｄｒｉｆｔ）される現象が起こる恐れがある。よって、温度センサも共に使用してジャイロセンサ３２４０の誤差を補償する必要がある。

【0052】

停止状態の長い時間の観点からすると、加速度センサ３２２０によって計算された傾いた角度は正しい値を示すが、ジャイロセンサ３２４０は時間が経つほど累積ドリフトのため間違った値を示す可能性がある。それに対し、動いている短い時間の観点では、ジャイロセンサ３２４０は正しい角速度を示すが、加速度センサ３２２０は傾いた角度とは異なる計算値が導出される可能性がある。また、サブジェクトが停止した状態で直進方向に動いたら勾配を測定することができない。

【0053】

よって、加速度センサ３２２０とジャイロセンサ３２４０をいずれも使用してそれぞれの短所を補完及び補償するために、カルマンフィルタのようなフィルタまたは補償及び融合アルゴリズムが適用される。但し、このような補償及び融合動作にもかかわらず、ジャイロセンサ３２４０と加速度センサ３２２０のみを使用すれば３次元空間での座標を演算する際に誤差率が上がるため、ＶＲ機器のようなホスト装置を制御するためのインタフェースとして使用するのに不適切である。また、加速度センサ３２２０とジャイロセンサ３２４０のみを使用すれば、絶対方位角ではなく相対方位角を使用するため、動いているサブジェクトの絶対位置を把握することが難しい。

【0054】

よって、動きセンシングモジュール３２００は地磁気センサ３２６０を更に含むことによって、地磁気センサ３２６０によって測定される絶対方位角の変化を加速度センサ３２２０とジャイロセンサ３２４０で測定されたデータと共に演算することで、誤差率の低いデータを生成することができる。動きセンシングモジュール３２００は地磁気センサ３２６０を含むことでジャイロセンサ３２４０で発生する累積ドリフトをより完璧に保障することができ、ジャイロセンサ３２４０は地磁気センサ３２６０の磁気変化によって発生する瞬間的に磁場がおかしくなる現象（急に起こる磁場の大きな変化）を解決するため、互いの短所を補完及び補償する役割をする。

【0055】

一実施例によって、動きセンシングモジュール３２００は３次元空間上での位置データを正確に獲得する９軸センサを含む。９軸センサは加速度３軸、ジャイロ２軸、地磁気３軸、温度１軸からなるセンサであって、３次元空間上で３次元位置と３軸方向の回転程度をいずれも獲得するセンサである。

【0056】

図３を参照すると、動きセンシングモジュール３２００はセンサ３２２０、３２４０、３２６０の出力を補償及び融合して最適化された位置データを生成するセンサ融合（Ｓｅｎｓｏｒ Ｆｕｓｉｏｎ）動作を行うためのセンサ融合部３２８０を含む。センサ融合部３２８０は、加速度センサ３２２０、ジャイロセンサ３２４０、及び地磁気センサ３２６０でそれぞれ獲得されるデータを雑音（Ｎｏｉｓｅ）除去、補償、及び融合しデータを最適化することで第１動き情報を生成する。センサ３２２０、３２４０、３２６０によって獲得されるロー（ｒｏｗ）データをそのまま利用したら正確な位置データを獲得することができないため、フィルタによって正確な位置を推定（Ｐｏｓｉｔｉｏｎ Ｅｓｔｉｍａｔｉｏｎ）することで最適化された位置データが生成される。例えば、センサ融合動作はカルマンフィルタ（Ｋａｌｍａｎ Ｆｉｌｔｅｒ）のようなフィルタまたはデータ補償及び融合アルゴリズムに基づいて行われる。

【0057】

動きセンシングモジュール３２００によって獲得された第１動き情報は通信チャネル３４００を介して制御信号出力部３６００に伝達される。一実施例によって、通信チャネル３４００は第１動き情報をプロセッサ３６２０に伝達するための電子装置３０００内の内部バス（Ｉｎｔｅｒｎａｌ Ｂｕｓ）である。動きセンシングモジュール３２００と制御信号出力部３６００は通信チャネル３４００のバスフォーマットに基づいて互いにデータを交換する。例えば、バスフォーマットはＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）、ＳＰＩ（Ｓｅｒｉａｌ Ｐｅｒｉｐｈｅｒａｌ Ｉｎｔｅｒｆａｃｅ）、及びＩ２Ｃ（Ｉｎｔｅｒ－Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）などのような多様なインタフェース規約のうち一つ以上を含む。

【0058】

制御信号出力部３６００はホスト装置を制御するための制御信号を出力する。制御信号はモーション信号とマウス信号を含む。制御信号出力部３６００は第１動き情報を演算することで第２動き情報を獲得する。制御信号出力部３６００はジェスチャモードの下、第２動き情報に基づいて電子装置３０００の動きに対応するモーションを決定し、決定されたモーションを示すモーション信号を出力する。制御信号出力部３６００はマウスモードの下、タッチセンシングモジュール３３００から獲得されるタッチ情報及び第２動き情報のうち少なくとも一つに基づいてマウスの動作を決定し、マウスの動作を示すマウス信号を出力する。制御信号はホスト装置のコンテンツを制御するための制御するためのインタラプト（Ｉｎｔｅｒｒｕｐｔ）信号である。例えば、制御信号は特定マウスまたは特定モーション信号を示すビット列を含む。

【0059】

制御信号出力部３６００は、通信チャネル３４００を介して受信される第１動き情報を演算することで第２動き情報を生成する。第２動き情報は、電子装置３０００の角度データ、距離データ、速度データ、及び方向データのうち少なくとも一つを含む。電子装置３０００の第２動き情報はマウスモードとジェスチャモードのいずれでも活用される。例えば、マウスモードの下、第２動き情報は電子装置３０００のマウスのムーブ（Ｍｏｖｅ）動作を決定するために活用される。ジェスチャモードの下、第２動き情報は電子装置３０００から出力される多様なモーション信号を決定するために活用される。

【0060】

一実施例によって、制御信号出力部３６００はプロセッサ３６２０と通信部３６４０とを含む。

【0061】

プロセッサ３６２０は動きセンシングモジュール３２００から通信チャネル３４００を介して受信される第１動き情報を演算することで第２動き情報を生成する。第２動き情報は、動きに対する角度データ、距離データ、速度データ、及び方向データのうち少なくとも一つを含む。プロセッサ３６２０は基準時間（例えば、５ｍｓ）ごとに第１動き情報に対する演算を行うことで第２動き情報を獲得する。基準時間は３０ｍｓ以下であるが、これに限らない。

【0062】

角度データはｘ軸方向、ｙ軸方向、及びｚ軸方向それぞれに対する角度データを含む。一実施例によって、プロセッサ３６２０は角速度データに積分演算を行うことで角度データを獲得する。

【0063】

速度データはｘ軸方向、ｙ軸方向、及びｚ軸方向それぞれに対する速度データを含む。距離データはｘ軸方向、ｙ軸方向、及びｚ軸方向それぞれに対する距離データを含む。一実施例によって、プロセッサ３６２０は加速度データに積分演算を行うことで速度データと距離データを獲得する。プロセッサ３６２０は加速度データから重力加速度成分を除去して線形加速度データを獲得する。プロセッサ３６２０は線形加速度データに積分演算を行うことで速度データを獲得し、速度データに更に積分演算を行うことで距離データを獲得する。

【0064】

方向データはオブジェクトの瞬間移動方向に関し、ｘ軸方向への増減可否、ｙ軸方向への増減可否、及びｚ軸方向への増減可否を含む。一実施例によって、プロセッサ３６２０は現在の距離データと以前の距離データの比較に基づいて方向データを含む。例えば、現在の距離データのｘ軸方向値が＋５０、ｙ軸方向値が＋１０、ｚ軸方向値が－５で、以前の距離データのｘ軸方向値が＋６０、ｙ軸方向値が＋１５、ｚ軸方向値が－１０であれば、プロセッサ３６２０は現在の動き方向をｘ軸方向に増加、ｙ軸方向に増加、ｚ軸方向に減少と決定する。

【0065】

マウスモードの下、プロセッサ３６２０はタッチセンシングモジュール３３００から獲得されるタッチ情報と第２動き情報に基づいて対応するマウスの動作を決定する。図４ａは、一実施例によってマウスモードの下で電子装置３０００で行われるマウスの動作を示す図である。マウスの動作は、マウスのクリック、ズームイン／アウト（または、スクロールアップ／ダウン）、マウスのムーブ、マウスのドラッグを含む。マウスのクリックはシングルクリック（Ｏｎｅ Ｃｌｉｃｋ）、ダブルクリック（Ｄｏｕｂｌｅ Ｃｌｉｃｋ）、ロングクリック（Ｌｏｎｇ Ｃｌｉｃｋ）を含む。マウスのムーブはホスト装置のマウスのポインタを動かう。
図４ｂを参照すると、マウスモードの下におけるマウスの動作を認識するために、電子装置３０００のタッチセンシングモジュール３３００の表面（図２ａのメインモジュール１２４０の正面）は左側に位置するタッチ領域Ｒ１と、中間に位置するタッチ領域Ｒ２と、右側に位置するタッチ領域Ｒ３とに区分される。タッチセンシングモジュール３３００がタッチ領域Ｒ１、タッチ領域Ｒ２、及びタッチ領域Ｒ３のうち少なくとも一つのタッチ動作を感知することでマウス信号が決定される。

【0066】

図４ｃを参照すると、ユーザがタッチ領域Ｒ１のみをタッチするかタッチ領域Ｒ１とタッチ領域Ｒ２を同時にタッチしたら、該当動作はマウスの左クリック（Ｍｏｕｓｅ Ｌｅｆｔ Ｃｌｉｃｋ）と決定される。ユーザがタッチ領域Ｒ３のみをタッチするかタッチ領域Ｒ３とタッチ領域Ｒ２を同時にタッチしたら、該当動作はマウスの右クリック（Ｍｏｕｓｅ Ｒｉｇｈｔ Ｃｌｉｃｋ）と決定される。ユーザがタッチ領域Ｒ２のみをタッチするか、タッチ領域Ｒ２、タッチ領域Ｒ１、及びとタッチ領域Ｒ３を同時にタッチしたら、該当動作はマウスモードとジェスチャモードとの間の切り替え（Ｍｏｄｅ Ｃｈａｎｇｅ）と決定される。ユーザがタッチ領域Ｒ１、タッチ領域Ｒ２、及びタッチ領域Ｒ３を順次に及び連続してタッチしたら、該当動作はマウスのスクロールアップ（Ｍｏｕｓｅ Ｓｃｒｏｌｌ Ｕｐ）と決定される。ユーザがタッチ領域Ｒ３、タッチ領域Ｒ２、及びタッチ領域Ｒ１を順次に及び連続してタッチしたら、該当動作はマウスのスクロールダウン（Ｍｏｕｓｅ Ｓｃｒｏｌｌ Ｄｏｗｎ）と決定される。

【0067】

プロセッサ３６２０は、マウスモードの下、ユーザがキーボードを使用している際とマウスを使用している際とを区分し、前記ユーザがキーボードを使用していると判断されればマウス信号を出力しない。

【0068】

ジェスチャモードの下、プロセッサ３６２０は第２動き情報に基づいて電子装置３０００の動きに対応するモーションを決定する。例えば、プロセッサ３６２０は第２動き情報に基づいて、予め定義されたモーションのうち電子装置３０００の動きに対応する一つのモーションを決定する。プロセッサ３６２０は決定されたモーションを示すモーション信号を生成し、それを通信部３６４０を介してホスト装置に伝達する。プロセッサ３６２０は、もし電子装置３０００とホスト装置との間の距離が基準距離より大きいか、電子装置３０００の動きが予め定義されたモーションのうちいずれにも当たらないか、無意味な動きと判断されれば、例外処理する。

【0069】

予め定義されたモーションは、ムーブ（Ｍｏｖｅ）、タップ（Ｔａｐ）、握る（Ｇｒａｓｐ）、スクロール（Ｓｃｒｏｌｌ）、スワイプ（Ｓｗｉｐｅ）、ジェスチャ（Ｇｅｓｔｕｒｅ）、ロテーション（Ｒｏｔａｔｉｏｎ）などを含む。ムーブモーションは電子装置３０００を任意の方向に移動する動作であって、仮想のコンテンツを移動するかページをめくる動作などをのために使用される。例えば、ムーブモーションは３軸（ｘ、ｙ、ｚ軸）方向への動きを含む。タップモーションは何かを叩く動作であって、仮想のコンテンツを選択するかクリックするために使用される。ユーザがタップモーションを基準時間内に２回連続とることで、仮想のオブジェクトをダブルクリックする。タップモーションはマウスモードの下におけるクリック動作とは別の動作である。握るモーションは離れている２つのオブジェクトが互いに突き当たる動作であって、仮想のコンテンツを握るために使用される。ジェスチャはテキスト、記号、または模様（例えば、「？」または「Ｘ」）を表現するための動きを意味する。

【0070】

予め定義されたモーションはユーザ定義モーションによって追加される。ユーザ定義モーションとは、電子装置３０００の製造会社ではないユーザによって定義されるモーションであって、ユーザは自らが入力する特定の動きをユーザ定義モーションとして追加する。例えば、ユーザは電子装置３０００を手で握るか着用した状態で特定の動きを繰り返してとり、それを特定の機能またはモーションとマッチングする。電子装置３０００にユーザが繰り返してとった動き情報、及び動き情報に当たる機能またはモーションが対応して保存される。例えば、電子装置３０００を指に着用したユーザは何かを刺すような刺す動作を１０回繰り返してとり、それを刺すモーションと指定して保存する。次に、ユーザが電子装置３０００を着用して刺す動作をとれば、プロセッサ３６２０は刺すモーションを示すモーション信号を通信部３６４０を介してホスト装置に伝達する。

【0071】

電子装置３０００の動き情報は機械学習に基づいて特定のモーションまたは予め定義されたモーションとマッチングされる。つまり、特定の動き情報を機械学習によって学習された決定モデルに入力したら、決定モデルは入力された特定の動き情報に対応するモーション信号を出力する。

【0072】

一実施例によって、電子装置３０００はユーザ別に独立した決定モデルを使用する。ユーザが同じ動きをとっても生成される動き情報がユーザごとに異なるためである。例えば、腕を回して円を描く動作が電子装置３０００から出力される特定モーション信号またはホスト装置における特定機能と対応するとすれば、ユーザごとに前記動作をとりながら生成される動き情報はいずれも同じではなく、ユーザごとに特有のパターンを有する可能性があるためである。または、ユーザごとに左ムーブ動作をとりながら生成される動き情報はいずれも同じではなく、ユーザごとに特有のパターン有する可能性がある。

【0073】

図５を参照すると、第１決定モデルＤＥＣ＃１、第２決定モデルＤＥＣ＃２、第３決定モデルＤＥＣ＃３は、それぞれ第１ユーザの動き情報、第２ユーザの動き情報、第３ユーザの動き情報から対応するモーション信号を出力するために使用される。制御信号出力部３６００またはプロセッサ３６２０は、電子装置３０００を現在使用中のユーザが第１ユーザであれば、獲得された第１ユーザの動き情報（例えば、上述した第２動き情報）を第１決定モデルＤＥＣ＃１に入力し、対応するモーション信号を決定する。制御信号出力部３６００またはプロセッサ３６２０は、現在電子装置３０００を使用中のユーザが第３ユーザであれば、獲得された第３ユーザの動き情報（例えば、上述した第２動き情報）を第３決定モデルＤＥＣ＃３に入力し、対応するモーションを決定する。

【0074】

モーション信号を決定するための決定モデルは機械学習に基づいて生成される。例えば、第１決定モデルＤＥＣ＃１は、第１ユーザの動き情報（例えば、上述した第２動き情報）と特定のモーションをそれぞれ入力と出力として繰り返し適用する機械学習を行うことで生成される。第１決定モデルＤＥＣ＃１は、第１ユーザが腕を回して円を描く動作から生成される第１ユーザの第２動き情報を１０回以上入力され、入力された動き情報が特定のモーション信号と対応するように学習される。例えば、第２決定モデルＤＥＣ＃２は、第２ユーザの動き情報（例えば、上述した第２動き情報）と特定のモーションをそれぞれ入力と出力として繰り返し適用する機械学習を行うことで生成される。第２決定モデルＤＥＣ＃２は、第２ユーザが腕を回して円を描く動作から生成される第２ユーザの第２動き情報を１０回以上入力され、入力された動き情報が特定のモーション信号と対応するように学習される。

【0075】

機械学習技法は、ＳＶＭ（Ｓｕｐｐｏｒｔ Ｖｅｃｔｏｒ Ｍａｃｈｉｎｅ）、ランダムフォレスト（Ｒａｎｄｏｍ ｆｏｒｅｓｔ）、サポートベクトルマシン（Ｓｕｐｐｏｒｔ Ｖｅｃｔｏｒ Ｍａｃｈｉｎｅ：ＳＶＭ）、ナイーブベイズ（Ｎａｉｖｅ Ｂａｙｅｓ）、適応型ブースティング（Ａｄａｐｔｉｖｅ Ｂｏｏｓｔｉｎｇ：ＡｄａＢｏｏｓｔ）、ランダムフォレスト（Ｒａｎｄｏｍ Ｆｏｒｅｓｔ）、勾配ブースティング（Ｇｒａｄｉｅｎｔ Ｂｏｏｓｔｉｎｇ）、Ｋ－平均クラスタリング（Ｋ－ｍｅａｎｓ ｃｌｕｓｔｅｒｉｎｇ）、人工神経網（Ａｒｔｉｆｉｃｉａｌ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ）などを含む。

【0076】

モーション信号を決定するために使用される機械学習基盤の決定モデルは、電子装置３０００内のメモリ（図示せず）に保存されるかホスト装置に保存される。また、決定モデルを生成するための学習は電子装置３０００で行われるかホスト装置で行われる。一実施例によって、決定モデルを生成するための学習はホスト装置で行われ、生成された決定モデルは電子装置３０００内のメモリ（図示せず）に保存される。または、決定モデルに対する学習が電子装置３０００で行われ、電子装置３０００のメモリ（図示せず）に決定モデルが保存されてもよい。

【0077】

図６は、一実施例によって電子装置１０００がジョイスティックのように使用されることを示す図である。図６を参照すると、電子装置１０００は台の上に乗せられてジョイスティックのように動作する。電子装置１０００が台の上で回転することでマウスのムーブ動作が行われ、マウスのポインタを制御する。ユーザは電子装置１０００のメインモジュール１２４０の正面部分をタッチすることで各種マウスの動作を行う。マウスの動作は図４ａ乃至図４ｃを参照して上述したようである。

【0078】

図７は、一実施例によって、ジェスチャモードの下、電子装置３０００でホスト装置を制御するための左側ムーブ（Ｌｅｆｔ Ｍｏｖｅ）モーション、右側ムーブ（Ｒｉｇｈｔ Ｍｏｖｅ）モーション、上側ムーブ（Ｕｐ Ｍｏｖｅ）モーション、下側ムーブ（Ｄｏｗｎ Ｍｏｖｅ）モーション、ロテーション（Ｃｌｏｃｋｗｉｓｅ Ｒｏｔａｔｉｏｎ、Ｃｏｕｎｔｅｒ Ｃｌｏｃｋｗｉｓｅ Ｒｏｔａｔｉｏｎ）モーション、フォワード／バック方向ムーブ（Ｆｏｒｗａｒｄ／Ｂａｃｋ Ｍｏｖｅ）モーションを示す。左側ムーブモーションと右側ムーブモーションはｘ軸＋／－方向の動きから決定される。上側ムーブモーションと下側ムーブモーションはｚ軸＋／－方向の動きから決定される。フォワードムーブモーションとバックムーブモーションはｙ軸＋／－方向の動きから決定される。一実施例によって、ユーザがリング状装置１２００を指に着用した状態でジェスチャモードを使用するが、これに限らない。

【0079】

このような実施例において、ユーザは電子装置３０００を着用したまま３次元空間で左側ムーブまたは右側ムーブモーションをとることで、ホスト装置で実行中のワード文書のページをめくることができる。ジェスチャモードの下、電子装置３０００がホスト装置を制御するためのモーションは上述した実施例に限らない。例えば、電子装置３０００が支援するモーションはタップ、握る、スクロール、スワイプなどを更に含んでもよい。また、ジェスチャモードの下でのモーション（ユーザ定義モーションを含む）は上述した機械学習基盤の決定モデルによってユーザによって追加され使用される。

【0080】

更に図３を参照すると、プロセッサ３６２０はモーション信号またはマウス信号を示す制御信号を生成する。例えば、プロセッサ３６２０はユーザの動きが左側ムーブモーションと決定されたら、左側ムーブモーションを示す第１ビット列を制御信号として生成する。プロセッサ３６２０はユーザの動きが時計回りのロテーションモーションと決定されたら、時計回りのロテーションモーションを示す第２ビット列を制御信号として生成する。または、電子装置２０００とホスト装置と約束された規約を使用すれば、モーションそれぞれに割り当てられた番号を制御信号として生成してもよい。プロセッサ３６２０はユーザの動きがマウスモードの下でのマウスのムーブと決定されたら、マウスのムーブを示す第３ビット列を制御信号として生成する。

【0081】

プロセッサ３６２０は一つのプロセッサコア（Ｓｉｎｇｌｅ Ｃｏｒｅ）を含むか、複数のプロセッサコア（Ｍｕｌｔｉ－Ｃｏｒｅ）を含む。例えば、プロセッサ３６２０はデュアルコア（Ｄｕａｌ－Ｃｏｒｅ）、クアッドコア（Ｑｕａｄ－Ｃｏｒｅ）、ヘキサコア（Ｈｅｘａ－Ｃｏｒｅ）などのマルチコアを含んでもよい。また、プロセッサ３６２０は内部または外部に位置するキャッシュメモリ（Ｃａｃｈｅ Ｍｅｍｏｒｙ）を更に含む。

【0082】

通信部３６４０は、制御信号を無線通信インタフェースを介してホスト装置に伝達する。通信部３６４０は、Ｗｉ－ｆｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）のような近距離無線通信網（Ｗｉｒｅｌｅｓｓ Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ；ＷＬＡＮ）、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）のような無線個人通信網（Ｗｉｒｅｌｅｓｓ Ｐｅｒｓｏｎａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ；ＷＰＡＮ）、無線ＵＳＢ（Ｗｉｒｅｌｅｓｓ Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）、Ｚｉｇｂｅｅ、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、ＲＦＩＤ（Ｒａｄｉｏ－ｆｒｅｑｕｅｎｃｙ ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、または３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）、４Ｇ（４ｔｈ Ｇｅｎｅｒａｔｉｏｎ）、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）など移動通信網（ｍｏｂｉｌｅ ｃｅｌｌｕｌａｒ ｎｅｔｗｏｒｋ）にアクセス可能なモデム通信インタフェースなどを含む。ブルートゥースインタフェースはＢＬＥ（Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ）を支援する。

【0083】

電子装置３０００は、電子装置３０００で行われる動作に必要なメモリ（図示せず）を含む。例えば、電子装置３０００はセンサ融合部３２８０におけるセンサ融合動作を行うために必要なメモリ（図示せず）を含む。また、電子装置３０００は、予め定義されたモーション及び／またはユーザ定義モーションを保存するために使用されるか、プロセッサ３６２０で行われる動作に必要なメモリ（図示せず）を含む。メモリ（図示せず）は、ユーザの動きに対応するモーション信号を決定するために機械学習に基づいて生成された決定モデルを保存する。メモリ（図示せず）は、ダイナミックランダムアクセスメモリ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ；ＤＲＡＭ）、スタティックランダムアクセスメモリ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ；ＳＲＡＭ）などのような揮発性メモリ装置、フラッシュメモリ装置（ｆｌａｓｈ ｍｅｍｏｒｙ ｄｅｖｉｃｅ）、ソリッドステートドライブ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ；ＳＳＤ）などのような非揮発性メモリ装置を含む。

【0084】

電子装置３０００は、電子装置３０００で行われる動作に必要な電源を供給するためのバッテリ（図示せず）を含む。バッテリ（図示せず）はリチウムイオンバッテリまたはリチウムポリマーバッテリを含むが、これに限らない。例えば、バッテリ（図示せず）は制御信号出力部３６００に含まれ、バッテリ（図示せず）から出力される電源のうち一部が動きセンシングモジュール３２００にバイパスされる。

【0085】

電子装置３０００はバッテリ（図示せず）を充電するための充電端子を含む。電子装置３０００はＵＳＢタイプの充電端子を含む。充電端子を介して流入される電流はバッテリを充電するために使用される。一実施例によって、図１ａ及び図１ｂのリング状装置１２００に充電端子が存在してもよく、クレードル装置１４００に充電端子が存在してもよい。例えば、メインモジュール１２４０に充電端子が存在し、リング状装置１２００がクレードル装置１４００に収納されることでメインモジュール１２４０に対する充電が行われる。クレードル装置１４００にはメインモジュール１２４０を充電するための電源装置が搭載される。

【0086】

図８は、一実施例によって電子装置が埋め込まれたさいころを示す図である。さいころは図２乃至図３を参照して上述した電子装置３０００を埋め込んだものであって、ユーザはさいころを利用してＡＲボードゲームなどを楽しむことができる。

【0087】

さいころは、加速度センサと、ジャイロセンサと、地磁気センサとに基づいてさいころの第１動き情報を獲得するためのセンシングモジュールと、さいころの第１動き情報を演算することで第２動き情報を生成し、第２動き情報に基づいてさいころの動きに対応する制御信号をホスト装置に出力するための制御信号出力部と、センシングモジュール及び制御信号出力部のうち少なくとも一つの動作のために必要な電源を供給するバッテリとを含む。

【0088】

一実施例によって、制御信号出力部は、第１動き情報を演算することで第２動き情報を獲得し、第２動き情報のうち少なくとも一つに基づいてさいころの動きと対応する制御信号を生成するためのプロセッサと、ブルートゥース通信に基づいて制御信号をホスト装置に伝達するための通信部とを含む。制御信号出力部は、加速度データと、角速度データと、速度データと、距離データと、方向データとのうち少なくとも一つに基づいてさいころが示す数字を決定し、数字情報を含む制御信号を出力する。さいころから出力される制御信号は、さいころの動きによるロテーションモーション及び／またはロテーションモーションによって決定されるさいころの数字情報（または、数字変化情報）を含む。さいころの数字変化はホスト装置によって３次元空間上に表現される。

【0089】

さいころは電子装置３０００を埋め込むための中空を含む。さいころはセンシングモジュール、制御信号出力部、及びバッテリを埋め込むための中空を更に含むことで、電子装置３０００を埋め込むことができる。

【0090】

さいころはバッテリを充電するための充電端子を更に含む。例えば、さいころの表面に充電電流を受信するための充電端子が位置する。よって、さいころに埋め込まれた電子装置３０００を充電するために電子装置３０００をさいころから取り出すことなく、さいころに充電ケーブルを連結するだけで電子装置３０００を受電することができる。

【0091】

図９は、一実施例によって電子装置が連結された杖を示す図である。

【0092】

杖は図３を参照して上述した電子装置３０００を連結したものであって、ユーザは杖を利用してフェンシングゲーム、斬り合いゲームなど、杖を活用した多様なゲームを楽しむことができる。他の実施例によって、図３を参照して上述した電子装置３０００が杖に埋め込まれてもよい。

【0093】

または、電子装置３０００はジョイスティックのようなコンテンツコントローラに埋め込まれてもよい。

【0094】

以下、図１０乃至図１８を参照して、電子装置を使用してコンテンツを制御する方法を説明する。図１０乃至図１８を参照して説明する方法は、図３の電子装置３０００及びホスト装置のうち少なくとも一つで行われる。よって、以下で省略された内容であっても、図３の電子装置３０００またはホスト装置について述べられた内容な図１０乃至図１８にも適用される。また、図１０乃至図１８の方法に関する内容も図３の電子装置３０００またはホスト装置に適用される。

【0095】

図１０は、一実施例によって電子装置を使用してコンテンツを制御する方法を示すフローチャートである。

【0096】

ステップＳ２２０において、電子装置はセンシングモジュールに基づいてオブジェクトの第１動き情報を獲得する。オブジェクトは電子装置自体を意味する。センシングモジュールは加速度センサと、ジャイロセンサと、地磁気センサとを含む。第１動き情報は、オブジェクトの動きに対する加速度データと角速度データとを含む。例えば、第１動き情報は、加速度センサによって獲得される加速度データと、ジャイロセンサによって獲得される角速度データがセンサ融合部によって最適化されたデータである。

【0097】

ステップＳ４００において、電子装置はステップＳ２００で獲得された第１動き情報を演算することで第２動き情報を生成する。第２動き情報は、角度データ、速度データ、距離データ、及び方向データのうち少なくとも一つを含む。電子装置はオブジェクトが動いている間、第２動き情報をリアルタイムで計算し獲得する。例えば、電子装置は基準時間（例えば、５ｍｓ）ごとに第１動き情報に対する演算を行うことで第２動き情報を獲得する。基準時間は３０ｍｓ以下であるが、これに限らない。電子装置は人差し指の第２関節に着用されることで、人差し指の第１関節と第２関節との間の関節を軸にして、人差し指の第２関節が動いた角度と速度を決定する。また、電子装置は人差し指の第３関節に着用されることで、人差し指の第１関節と第２関節との間の関節を軸にして、人差し指の第３関節が動いた角度と速度を決定する。

【0098】

ステップＳ５００において、電子装置は現在のモードがマウスモードであるのかジェスチャモードであるのかを判断する。電子装置は、現在モードがマウスモードであれば（Ｙｅｓ）、ステップＳ５２０でタッチ情報を獲得し、ステップＳ５４０で第２動き情報とタッチ情報のうち少なくとも一つに基づいてマウス信号を決定する。

【0099】

電子装置は、現在モードがジェスチャモードであれば（Ｎｏ）、ステップＳ６００において、電子装置は獲得された第２動き情報に基づいて、オブジェクトの動きに対応するモーション信号を決定する。一実施例によって、電子装置はオブジェクトの動きに対応するモーション信号を決定する。一実施例によって、電子装置は人差し指が動いた速度、角度、距離などに基づいてモーションを決定する。モーションは、ムーブ（ｘ、ｙ、ｚ軸方向を含む）、タップ、握る、スクロール、スワイプ、ジェスチャ、及びロテーションモーションなどを含むが、これに限らない。モーションはユーザによって定義されるユーザ定義モーションを含む。電子装置は、オブジェクトの動きが製造会社によって予め定義されたモーションやユーザによって追加されたユーザ定義モーションのうちいずれにも当たらないか、無意味な動きと判断されれば、モーション信号を生成せずに例外処理する。

【0100】

ステップＳ８００において、電子装置は、決定されたモーション信号またはマウス信号を示す制御信号を無線通信インタフェースを介してホスト装置に伝達する。制御信号は、ホスト装置を制御するためのインタラプト信号である。一実施例によって、電子装置は、オブジェクトの位置がコンテンツが再生される位置から基準距離内にあるのかを判断し、判断の結果、基準距離内にある際にのみ制御信号をホスト装置に伝達する。ユーザがコンテンツから遠く離れていれば、ユーザの動きがコンテンツを制御するための動きであるとみなすことが難しいためである。

【0101】

ステップＳ９００において、ホスト装置は受信された制御信号に基づいてコンテンツを制御する。例えば、ホスト装置は、受信された制御信号がムーブモーションであれば、ゲーム上の野球ボールをオブジェクトの動きに比例する方向、速度、距離で動かす。ホスト装置は、受信された制御信号がタップモーションであればゲーム上のアイテムを選択する。ホスト装置は、受信された制御信号がロテーションモーションであればゲーム上の円板を回転させる。ホスト装置は、受信された制御信号がムーブモーションであれば、オブジェクトとコンテンツとの間の距離によってコンテンツをズームインまたはズームアウトする。ホスト装置は、受信された制御信号が左側ムーブモーションであれば、実行中のワード文書またはプレゼンテーション文書のページを前にめくる。ホスト装置は、受信された制御信号が右側ムーブモーションであれば、実行中のワード文書またはプレゼンテーション文書のページを後ろにめくる。ホスト装置は、受信された制御信号がマウスのムーブであればマウスのポインタを動かす。ホスト装置は、受信された制御信号がマウスのクリックであれば、現在のマウスのポジションでクリック動作を行う。ホスト装置は、受信された制御信号がマウスのスクロールアップであれば、マウスのスクロールアップに対応する動作を行う。

【0102】

図１１は、一実施例によって電子装置がオブジェクトの動きに対する距離データを獲得するための方法を示すフローチャートである。

【0103】

ステップＳ４２０において、電子装置は、加速度データから重力加速度成分を除去して線形加速度データを生成する。加速度データから重力加速度による影響を除去することで、オブジェクトの動きに対する加速度データが獲得される。

【0104】

ステップＳ４４０において、電子装置は、線形加速度データに積分演算を行って速度データを獲得する。

【0105】

ステップＳ４６０において、電子装置は、速度データに積分演算を行って距離データを獲得する。

【0106】

図１２は、一実施例によってオブジェクトの動きをマウスモード下におけるマウスのムーブ、またはジェスチャモード下におけるムーブモーションと決定し、動いた距離データを獲得するための方法を示すフローチャートである。図１２は、図１０のステップＳ５４０またはＳ６００の下位ステップを示す。

【0107】

ステップＳ６１２において、電子装置は、オブジェクトの初期動きに対する角度と速度を決定する。電子装置は、オブジェクトの動きが始まった後、初期動き（例えば、動きが始まってから基準時間以内）に対する角度データと速度データを獲得する。

【0108】

ステップＳ１６４において、電子装置は、ステップＳ６１２で獲得された角度データと速度データが基準条件を満足するのかを判断する。例えば、速度が基準値以上で角度の変化幅が２０度以内であれば、電子装置はオブジェクトの動きを直進方向の動きと決定する。電子装置は、角度データと速度データが基準条件を満足しなければ（Ｎｏ）、オブジェクトの動きが他のモーションに当たるのかを判断するか、いかなるモーションにも当たらないと判断されれば例外処理するＳ６１８。

【0109】

電子装置は、角度データと速度データが基準条件を満足すれば（Ｙｅｓ）、動きをムーブモーションまたはマウスのムーブと決定し、オブジェクトの動きに対する距離データを獲得するＳ６１６。例えば、電子装置は、動こうとする方向に電子装置が予め設定された速度以上で動く時点を動きに対する開始点と決定する。オブジェクトの動きに対する距離データは図１１を参照して上述した方法で決定される。
一実施例によって、電子装置は、距離データ以外に位置データ（例えば、オブジェクトの３次元空間座標）と方向データを更に獲得する。

【0110】

電子装置は、任意の時点におけるオブジェクトの位置または任意の空間上の位置を基準点にする際、オブジェクトが動いた距離データに基づいて現在のオブジェクトの位置データを獲得する。電子装置は、オブジェクトの動き単位ごとに動いた距離を決定し、決定された距離データをメモリに保存する。電子装置は、メモリから動きに対する距離データを読み込み、読み込んだデータを合算して現在のオブジェクトの位置データを決定する。

【0111】

例えば、電子装置は、任意の以前の時点におけるオブジェクトの位置データが（０、０、０）で、ムーブモーションが３回連続して発生したならば、第１ムーブモーションの第１距離データが（１０、－２０、３０）、第２ムーブモーションの第２距離データが（－１０、－３０、－１０）、及び第３ムーブモーションの第３距離データが（２０、１００、１００）であれば、現在のオブジェクトの位置データを（２０、５０、１２０）と決定する。例えば、第１ムーブモーションが一回発生し、オブジェクトが人が位置を移動することで単純移動され、更に他のムーブモーションがもう一回発生したならば、第１ムーブモーションの第１距離データが（５、３０、２０）、単純移動に対する第２距離データが（５００、５００、０）、第２ムーブモーションの第２距離データが（１０、３０、３０）であれば、現在のオブジェクトの位置データを（５１５、５６０、５０）と決定する。

【0112】

電子装置は、現在の距離データと以前の距離データの比較に基づいてオブジェクトが動いている方向データを獲得する。以前の距離データとは、直前に獲得された距離データを意味する。例えば、５ｍｓごとに距離データが演算されるのであれば、時点ｔの距離データと時点ｔ－５ｍｓで獲得された距離データに基づいてｘ軸方向への増減可否、ｙ軸方向への増減可否、及びｚ軸方向への増減可否を決定する。例えば、現在の距離データのｘ軸方向値が＋５０、ｙ軸方向値が＋１０、ｚ軸方向値が－５で、以前の距離データのｘ軸方向値が＋６０、ｙ軸方向値が＋１５、ｚ軸方向値が－１０であれば、電子装置３０００は現在の動き方向をｘ軸方向に増加、ｙ軸方向に増加、ｚ軸方向に減少と決定する。

【0113】

図１３は、一実施例によって、ホスト装置がムーブモーションに基づいてコンテンツをズームインするかズームアウトする動作を示すフローチャートである。図１４のフローチャートは、図１０のステップＳ９００の下位ステップを示す。
ステップＳ９２０において、ホスト装置は電子装置から受信された制御信号がムーブモーションであるのかを判断する。ムーブモーションは、図７を参照して上述したフォワード方向またはバック方向のムーブモーションである。受信された制御信号がムーブ信号ではなければ（Ｎｏ）、ホスト装置は受信された制御信号に対応する他の動作を行うＳ９３０。

【0114】

受信された制御信号がムーブ信号であれば（Ｙｅｓ）、ステップＳ９４０において、コンテンツとオブジェクトとの間の距離が近くなるのか否かを判断する。ホスト装置のディスプレイ上にコンテンツが再生されていればコンテンツの位置はホスト装置自体の位置と同じであり、コンテンツがホスト装置によって再生される仮想現実コンテンツであればコンテンツの位置はホスト装置の位置と同じでなはい。

【0115】

ホスト装置は、オブジェクトの動き距離から決定されるオブジェクトの位置とコンテンツの位置との間の距離が近づいていると判断されれば（Ｙｅｓ）、コンテンツをズームインするＳ９５０。ホスト装置は、オブジェクトの位置とホスト装置との間の距離が遠くなっていると判断されれば（Ｎｏ）、コンテンツをズームアウトするＳ９６０。但し、図１４のフローチャートはホスト装置がムーブモーションに基づいてズームイン／ズームアウト動作を行うための一実施例に過ぎず、ズームイン／ズームアウト動作は他のムーブモーションで定義されてもよい。例えば、コンテンツがオブジェクトの間の距離が近ければズームアウトを行い、距離が遠くなるほどズームインを行ってもよい。または、オブジェクトが右側（または、左側）に移動したらズームインを行い、オブジェクトが左側（または、右側）に移動したらズームアウトを行ってもよい。または、電子装置でコンテンツとオブジェクトとの間の距離を判断し、判断結果によって制御信号をムーブ信号ではなくズームイン／ズームアウト信号としてホスト装置に出力してもよい。このような場合、コンテンツとオブジェクトとの間の距離の判断、及びズームイン／ズームアウト信号の伝達動作は、それぞれ図１０のステップＳ６００とステップＳ８００で行われる。

【0116】

以下、図１４乃至図１８は、一実施例によって電子装置がジェスチャモードの下、オブジェクトの動き情報からホスト装置を制御するための特定のモーション信号を決定するための方法を示すフローチャートである。

【0117】

図１４は、一実施例によって電子装置がオブジェクトの動きをタップ（または、クリック）モーションと決定するための方法を示すフローチャートである。図１４のフローチャートは、図１０のステップＳ６００の下位ステップを示す。

【0118】

ステップＳ６２４において、電子装置は、動きに対する角度データと速度データが基準条件を満足するのか否かを判断する。電子装置は、角度が第１基準範囲内に属し、速度が第２基準範囲内に属するのかを判断する。

【0119】

角度と速度が基準条件を満足すると判断されれば（Ｙｅｓ）、ステップＳ６２６において、電子装置はオブジェクトの動きをタップモーションと決定する。そうでなければ（Ｎｏ）、ステップＳ６２８において、電子装置はオブジェクトの動きが他のモーションに当たるのかを判断するか、いかなるモーションにも当たらないと判断されれば例外処理する。

【0120】

図１５は、一実施例によって電子装置がオブジェクトの動きを握るモーションと決定するための方法を示すフローチャートである。図１６のフローチャートは、図１０のステップＳ６００の下位ステップを示す。

【0121】

ステップＳ６３４において、電子装置は、角度と速度が基準条件を満足するのか否かと、動きに残響（Ｒｅｖｅｒｂｅｒａｔｉｏｎ）があるのか否かを判断する。例えば、電子装置は、角度が第１基準範囲内に属し、速度が第２基準範囲以内であるのかを判断する。それと共に、電子装置はオブジェクトの動きに対する残響可否を判断する。残響とは、ユーザが動きを終了したにもかかわらず、オブジェクトの特性または動きの慣性によってユーザの意図とは関係なく発生するオブジェクト（例えば、指）の動き（または、震え）を意味する。例えば、残響は加速度センサの慣性による残りの信号を意味する。握るモーションの場合、タップモーションとは異なって、オブジェクト（例えば、人差し指）が他のオブジェクト（例えば、親指）と接触または結合することで動きが終了して残響が発生しないため、残響の有無がタップモーションと握るモーションを区別するための基準になる。

【0122】

角度と速度が基準条件を満足し、残響がないと判断されれば（Ｙｅｓ）、ステップＳ６３６において、電子装置はオブジェクトの動きを握るモーションと決定する。そうでなければ（Ｎｏ）、ステップＳ６３８において、電子装置はオブジェクトの動きが他のモーションに当たるのかを判断するか、いかなるモーションにも当たらないと判断されれば例外処理する。

【0123】

図１６は、一実施例によって電子装置がオブジェクトの動きをスクロールモーションと決定するための方法を示すフローチャートである。図１６のフローチャートは、図１０のステップＳ６００の下位ステップを示す。

【0124】

ステップＳ６４４において、電子装置は、角度、速度、及び距離が基準条件を満足するのか否かを判断する。例えば、電子装置は、角度が第１基準範囲内に属し、速度が第２基準範囲内に属し、距離が第３基準範囲内に属するのかを判断する。例えば、電子装置は、ｘ、ｙ、ｚ軸のうちいずれか一つの方向に対する角速度が基準値以上で、ｘ、ｙ、ｚ軸のうち少なくとも一つの方向に対する角度が基準範囲以内であるのかを判断する。それと共に、電子装置は、距離（例えば、人差し指の第２関節または第３関節が動いた距離）が臨界値より大きいのか否かを判断する。スクロールモーションはタップモーションに比べ指の動きが大きいことを考慮し、距離がタップモーションとスクロールモーションを区別するための基準になる。

【0125】

角度、速度、及び距離が基準条件を満足すると判断されれば（Ｙｅｓ）、ステップＳ６４６において、電子装置はオブジェクトの動きをタスクロールモーションと決定する。そうでなければ（Ｎｏ）、ステップＳ６４８において、電子装置はオブジェクトの動きが他のモーションに当たるのかを判断するか、いかなるモーションにも当たらないと判断されれば例外処理する。

【0126】

図１７は、一実施例によって電子装置がオブジェクトの動きをスワイプモーションと決定するための方法を示すフローチャートである。図１７のフローチャートは、図１０のステップＳ６００の下位ステップを示す。

【0127】

ステップＳ６５４において、電子装置は速度及び距離が基準条件を満足するのか否かを判断する。例えば、電子装置は、速度が第１基準範囲内に属し、距離が第２基準範囲内に属するのかを判断する。スワイプモーションはムーブモーションに比べ動きが大きいことを考慮し、速度と距離がいずれも臨界値より大きいのか否かがスワイプモーションとムーブモーションを区別するための基準になる。

【0128】

モーションに対する角度及び距離が基準条件を満足すれば（Ｙｅｓ）、ステップＳ６５６において、電子装置はオブジェクトの動きをスワイプモーションと決定する。そうでなければ（Ｎｏ）、ステップＳ６５８において、電子装置はオブジェクトの動きが他のモーションに当たるのかを判断するか、いかなるモーションにも当たらないと判断されれば例外処理する。

【0129】

図１８は、一実施例によって電子装置がオブジェクトの動きをロテーションモーションと決定するための方法を示すフローチャートである。図１９のフローチャートは、図１０のステップＳ６００の下位ステップを示す。

【0130】

ステップＳ６６４において、電子装置は角度が基準条件を満足するのか否かを判断する。例えば、電子装置は、ｘ軸、ｙ軸、ｚ軸方向それぞれに対して動いた角度が基準条件をいずれも満足すれば（Ｙｅｓ）、ステップＳ６６６において、電子装置はオブジェクトの動きをロテーションモーションと決定する。そうでなければ（Ｎｏ）、ステップＳ６６８において、電子装置はオブジェクトの動きが他のモーションに当たるのかを判断するか、いかなるモーションにも当たらないと判断されれば例外処理する。

【0131】

一方、上述したコンテンツ制御方法は、コンピュータで判読可能な記録媒体にコンピュータで判読可能なコードとして具現することができる。コンピュータで判読可能な記録媒体は、コンピュータシステムによって判読可能なデータが保存される全ての種類の記録装置を含む。コンピュータで判読可能な記録媒体の例としては、ＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、光データ保存装置などがある。また、コンピュータで判読可能な記録媒体は、ネットワークで連結されたコンピュータシステムに分散され、分散方式でプロセッサが判読可能なコードが保存され実行される。

【0132】

前記説明は本発明を具現するための例示的な構成及び動作を提供するように意図される。本発明の技術思想は上述した実施例のみならず、前記実施例を単純に変更するか修正して得られる具現も含む。また、本発明の技術思想は、上述した実施例を今後容易に変更するか修正して達成される具現も含む。

【図1a】

【図1b】

【図2a】

【図2b】

【図3】

【図4a】

【図4b】

【図4c】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】