特許 6602803 双方向性コンテンツの触覚的に強化された双方向性

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6602803

(24)【登録日】2019年10月18日

(45)【発行日】2019年11月6日

(54)【発明の名称】双方向性コンテンツの触覚的に強化された双方向性

(51)【国際特許分類】

   G06F 3/01 20060101AFI20191028BHJP

   H04M 1/00 20060101ALI20191028BHJP

【ＦＩ】

   G06F3/01 560

   H04M1/00 R

【請求項の数】17

【外国語出願】

【全頁数】15

(21)【出願番号】特願2017-21994(P2017-21994)

(22)【出願日】2017年2月9日

(62)【分割の表示】特願2011-201748(P2011-201748)の分割

【原出願日】2011年9月15日

(65)【公開番号】特開2017-111833(P2017-111833A)

(43)【公開日】2017年6月22日

【審査請求日】2017年3月7日

(31)【優先権主張番号】12/895,161

(32)【優先日】2010年9月30日

(33)【優先権主張国】US

(73)【特許権者】

【識別番号】500390995

【氏名又は名称】イマージョン コーポレーション

【氏名又は名称原語表記】ＩＭＭＥＲＳＩＯＮ ＣＯＲＰＯＲＡＴＩＯＮ

(74)【代理人】

【識別番号】100083806

【弁理士】

【氏名又は名称】三好 秀和

(74)【代理人】

【識別番号】100095500

【弁理士】

【氏名又は名称】伊藤 正和

(74)【代理人】

【識別番号】100111235

【弁理士】

【氏名又は名称】原 裕子

(74)【代理人】

【識別番号】100195257

【弁理士】

【氏名又は名称】大渕 一志

(72)【発明者】

【氏名】バーンバウム，ディビッド，エム．

(72)【発明者】

【氏名】グラント，ダニー エー．

(72)【発明者】

【氏名】ヒューベル，ロバート，ダブリュー．

【審査官】 円子 英紀

(56)【参考文献】

【文献】 特許第６０９２５０６（ＪＰ，Ｂ２）

【文献】 特開２００５−３０１４２８（ＪＰ，Ａ）

【文献】 特開２０１０−０９７２９１（ＪＰ，Ａ）

【文献】 特開２００７−０６７７２４（ＪＰ，Ａ）

【文献】 特開２００６−１６３５７９（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ ３／０１

Ｈ０４Ｍ １／００

(57)【特許請求の範囲】

【請求項1】

双方向性コンテンツを提示するためのコンピュータプログラムであって、
前記コンピュータプログラムは、
周辺機器の位置に関連する一又は複数の位置パラメータを位置センサ又は撮像装置の出力信号に基づいて決定する位置パラメータ決定ステップと、
複数の周辺機器の候補の中から前記周辺機器を識別する周辺機器識別ステップと、
電子ディスプレイを含むコンテンツ出力装置によって出力された双方向性コンテンツを
前記一又は複数の位置パラメータに基づいて調整するコンテンツステップと、
ハプティックフィードバックを前記周辺機器の識別情報及び前記一又は複数の位置パラ
メータに基づいて決定するハプティクスステップと、
を実行するようにプロセッサによって実行可能なコードを備えるコンピュータプログラ
ム。

【請求項2】

前記周辺機器識別ステップは、複数の周辺機器の種類の中から周辺機器の種類を識別す
ることにより前記周辺機器を識別するステップを含む請求項１に記載のコンピュータプロ
グラム。

【請求項3】

前記周辺機器が図柄を有するカードを含み、前記周辺機器識別ステップが当該図柄に基
づいて前記周辺機器を識別するステップを含む請求項１に記載のコンピュータプログラム
。

【請求項4】

前記周辺機器が携帯電話である請求項１に記載のコンピュータプログラム。

【請求項5】

前記出力信号は第１出力信号であり、前記周辺機器識別ステップが周辺機器識別センサの第２出力信号に基づいて前記周辺機器を識別するステップを含む請求項１に記載のコンピュータプログラム。

【請求項6】

前記コンテンツ出力装置が電子音響変換器をさらに含む請求項１に記載のコンピュータ
プログラム。

【請求項7】

前記ハプティクスステップは、前記コンテンツ出力装置によって出力される双方向性コ
ンテンツにさらに基づいて前記ハプティックフィードバックを決定するステップを含む請
求項１に記載のコンピュータプログラム。

【請求項8】

前記決定されたハプティックフィードバックに関連する情報を、前記ハプティックフィ
ードバックを提示するように構成されたアクチュエータに無線送信するように、無線送信
機を操作するように、プロセッサによって実行可能なコードを備える請求項１に記載のコ
ンピュータプログラム。

【請求項9】

請求項１〜８のいずれか１項に記載のコンピュータプログラムが記憶された記憶媒体。

【請求項10】

双方向性コンテンツを提示するための方法であって、
前記方法は、
周辺機器の位置に関連する一又は複数の位置パラメータを位置センサ又は撮像装置の出力信号に基づいて決定する位置パラメータ決定ステップと、
複数の周辺機器の候補の中から前記周辺機器を識別する周辺機器識別ステップと、
電子ディスプレイを含むコンテンツ出力装置によって出力された双方向性コンテンツを
前記一又は複数の位置パラメータに基づいて調整するコンテンツステップと、
ハプティックフィードバックを前記周辺機器の識別情報及び前記一又は複数の位置パラ
メータに基づいて決定するハプティクスステップと、
を備える方法。

【請求項11】

前記周辺機器識別ステップは、複数の周辺機器の種類の中から周辺機器の種類を識別す
ることにより前記周辺機器を識別するステップを含む請求項１０に記載の方法。

【請求項12】

前記周辺機器が図柄を有するカードを含み、前記周辺機器識別ステップが当該図柄に基
づいて前記周辺機器を識別するステップを含む請求項１０に記載の方法。

【請求項13】

前記周辺機器が携帯電話である請求項１０に記載の方法。

【請求項14】

前記出力信号は第１出力信号であり、前記周辺機器識別ステップが周辺機器識別センサの第２出力信号に基づいて前記周辺機器を識別するステップを含む請求項１０に記載の方法。

【請求項15】

前記コンテンツ出力装置が電子音響変換器をさらに含む請求項１０に記載の方法。

【請求項16】

前記ハプティクスステップは、前記コンテンツ出力装置によって出力される双方向性コンテンツにさらに基づいて前記ハプティックフィードバックを決定するステップを含む請求項１０に記載の方法。

【請求項17】

前記決定されたハプティックフィードバックに関連する情報を、前記ハプティックフィ
ードバックを提示するように構成されたアクチュエータに無線送信するステップをさらに
を備える請求項１０に記載の方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、コンテンツ出力装置によってユーザに伝達される双方向性コンテンツの触覚的に強化された双方向性に関する。前記コンテンツ出力装置は、ユーザによって操作される周辺機器の一又は複数の位置パラメータに基づいて当該双方向性コンテンツの出力を制御する一又は複数のプロセッサによって制御される。

【背景技術】

【0002】

ユーザは、仮想環境において様々な方法で仮想物体と相互作用することができる。ユーザは、現実世界における実在の物体を操作することによって仮想物体と相互作用できる場合もある。このような相互作用には、拡張現実技術を用いることができる。拡張現実技術によって、デジタル処理されその２次元や３次元仮想物体で「拡張された」ライブビデオに２次元や３次元の仮想物体が組み込まれる。つまり、このデジタル処理によって、現実世界と仮想世界とがリアルタイムや準リアルタイムでミックスされる。ユーザは、従来、視覚フィードバックや音響フィードバックによって仮想物体との相互作用の感覚を得ている。例えば、仮想物体はディスプレイ上でユーザに提示される。この仮想物体は、ユーザの目には当該ディスプレイ上を付随する音響効果を伴って又は伴わずに動いているように映る。しかしながら、既存のシステムにおいては、仮想物体との物理的な相互作用はユーザに提供されていない。

【発明の概要】

【0003】

本発明の一態様は、周辺機器を操作するユーザに対して双方向性コンテンツを提示するように構成されたシステムに関する。このシステムは、前記ユーザに対して双方向性コンテンツを出力するように構成されたコンテンツ出力装置と、コンピュータプログラムモジュールを実行するように構成されたプロセッサとを含む。このコンピュータプログラムモジュールは、位置モジュール、周辺機器識別モジュール、コンテンツモジュール、及びハプティクスモジュールを含むことができる。この位置モジュールは、前記周辺機器の位置に関連する一又は複数の位置パラメータを決定するように構成されてもよい。周辺機器識別モジュールは、複数の周辺機器の候補の中から前記周辺機器を識別するように構成されてもよい。コンテンツモジュールは、前記コンテンツ出力装置によって出力された双方向性コンテンツを前記一又は複数の位置パラメータに基づいて調整するように構成されてもよい。ハプティクスモジュールは、前記ユーザに提供されるハプティックフィードバックを前記周辺機器の識別情報及び前記一又は複数の位置パラメータに基づいて決定するように構成されてもよい。

【0004】

本発明の他の態様は、コンテンツ出力装置によってユーザに伝達される双方向性コンテンツの双方向性を向上させるように構成された周辺機器に関する。このコンテンツ出力装置は、前記周辺機器の一又は複数の状態パラメータに基づいて前記双方向性コンテンツの出力を制御する一又は複数のプロセッサによって制御されてもよい。周辺機器は、アクチュエータ、無線受信機、アクチュエータ制御部、及び一又は複数の識別部を含むことができる。アクチュエータは、ユーザのためにハプティックフィードバックを生成するように構成されてもよい。無線受信機は、アクチュエータによって生成される前記ハプティックフィードバックの一又は複数のフィードバックパラメータを定義する情報を前記一又は複数のプロセッサから受信するように構成されてもよい。アクチュエータ制御部は、アクチュエータが前記一又は複数のフィードバックパラメータを定義する前記受信情報に従って前記ユーザのためにハプティックフィードバックを生成するように前記アクチュエータを制御するように構成されてもよい。一又は複数の識別部は、前記一又は複数のプロセッサから前記周辺機器に伝達される前記一又は複数のフィードバックパラメータが前記周辺機器の前記識別部によって変わるように、前記双方向性コンテンツと共に用いることができる他の周辺機器から前記一又は複数のプロセッサに対する前記周辺機器を特定することができる。

【0005】

本発明の上記及び上記以外の特徴及び性質、並びに、関連する構成要素及び各部分の組み合わせの動作方法及び機能、及び、製造の経済性については、添付図面を参照しつつ以下の詳細な説明と添付の特許請求の範囲を検討することによってさらに明らかになる。これらはいずれも本明細書の一部を構成する。本明細書においては、様々な図面において関連する部分は類似の参照符号によって示される。添付図面は例示及び説明のためのものであり、本発明の発明特定事項の定義として用いることは意図されていない。本明細書及び特許請求の範囲における用法によれば、単数形の"a"、"an"及び"the"には複数のものへの言及が含まれるが、文脈上別に解すべきことが明白な場合はこの限りでない。

【図面の簡単な説明】

【0006】

【図1】図１は、本発明の一又は複数の実装態様に従って、一又は複数の周辺機器を操作する一又は複数のユーザに双方向性コンテンツを提示するように構成されたシステムを示す。

【0007】

【図2】図２は、本発明の一又は複数の実装態様に従って、コンテンツ出力装置によってユーザに伝達される双方向性コンテンツの双方向性を向上するように構成された周辺機器を示す。

【0008】

【図3】図３は、本発明の一又は複数の実装態様に従って、コンテンツ出力装置によってユーザに伝達される双方向性コンテンツの双方向性を向上するように構成された他の周辺機器を示す。

【0009】

【図4】図４は、本発明の一又は複数の実装態様に従って、コンテンツ出力装置によってユーザに伝達される双方向性コンテンツと相互作用する方法を示す。

【発明を実施するための形態】

【0010】

図１は、本発明の一又は複数の実装態様に従って、一又は複数の周辺機器を操作する一又は複数のユーザに双方向性コンテンツを提示するように構成されたシステム100を示す
。双方向性コンテンツには、現実世界の表示、仮想環境の表示、ユーザの表示、現実世界の物体、仮想物体、現実の音や人工の音等のコンテンツの表示、及び／又はこれらの組み合わせを含んでもよい。例示的な実装態様は、双方向性コンテンツとの双方向性を向上させるハプティック技術又は「ハプティクス（”haptics”）」を提供する。ハプティクス
には、力、振動、動き等の接触フィードバックをユーザに与えることによってユーザの触感を利用する触知フィードバック技術及び／又は運動感覚（力）フィードバック技術（kinesthetic feedback (force) feedback technology）を含んでも良い。これにより、双方向性コンテンツとの相互作用の際により魅力的で完全なユーザ体験を提供することができる。

【0011】

一部の実装態様において、システム100は、少なくとも一つの周辺機器102、一又は複数の外部リソース104、少なくとも一つのデジタル装置106等のコンポーネントを含むことができる。システム100、周辺機器102、外部リソース104、及び／又はデジタル装置106のコンポーネントは、一又は複数の電子通信リンクを介して動作可能に接続される。例えば、かかる電子通信リンクは、少なくとも部分的に通信ネットワーク108を介して確立され、
インターネット等のネットワークを含むことができる。この説明は本発明を限定するものではなく、前記周辺機器102、外部リソース104、及び／又はデジタル装置106が他の通信媒体によって動作可能に接続された実装態様も本開示の範囲に含まれる。

【0012】

周辺機器102には、双方向性コンテンツと相互作用するためにユーザによって操作される実在の物体、実在の装置、及び／又はこれらの組み合わせが含まれてもよい。周辺機器102の操作には、平行移動、回転、変形、及び／又はこれら以外の態様で周辺機器102を動かすことが含まれる。周辺機器102を構成する実在の物体の例には、玩具、飲料容器、包装、雑誌、彫像、カード（例えば、スポーツカード、ゲームカード、ギフトカード、及び／又はこれら以外のカード）、本、スポーツ用品／フィットネス用品、収集品等のコンシューマー製品、ユーザの体の部位（例えば、手、頭、顔、胴等の部位）、図柄付きの紙片及び／又はカード用紙（ユーザによって印刷されたものであっても良いしそうでなくとも良い）等の実在の物体が含まれる。周辺機器102の例である実在の装置には、例えば、携帯電話、デジタル・ミュージック・プレイヤー、携帯情報端末、スマートフォン、腕時計、電子書籍リーダー、ラップトップコンピューター、タブレットコンピューター、リモコン装置、ウェアラブルコンピューター（双方向性の洋服やアクセサリ（双方向性の洋服やアクセサリ））、ユーザの体に埋め込まれるコンピューター・デジタル・メディアデバイスや双方向性デジタル・メディアデバイス（computing/interactive digital media device）等の実在の装置が含まれる。しかしながら、例示的な実装態様に従ってユーザによって操作され又はユーザによって相互作用される任意のものが広く周辺機器102の構成要素となることができる。周辺機器102の構成要素となる例示的な周辺機器については、本発明の一又は複数の実装態様に従って図２及び図３に関連してさらに説明される。

【0013】

外部リソース104には、システム100の外部にある情報リソース、双方向性コンテンツのホスト及び／又はプロバイダー、システム100に参加している外部主体等のリソースが含まれる。一部の実装態様においては、外部リソース104の機能の一部又は全部がシステム100内のリソースによって提供されてもよい。

【0014】

デジタル装置106は、双方向性コンテンツをユーザに提供し、周辺機器102を操作するユーザと双方向性コンテンツとの相互作用を促進するように構成されてもよい。図１に示されているように、デジタル装置106には、電子記憶装置110、コンテンツ出力装置112、撮像装置114、周辺機器識別センサ116、位置センサ118、無線送受信機120、少なくとも一つのプロセッサ122等のコンポーネントを少なくとも一つ含むことができる。デジタル装置106には、例えば、デスクトップコンピューター、携帯電話、デジタル・ミュージック・プレイヤー、携帯情報端末、スマートフォン、腕時計、電子書籍リーダー、ラップトップコンピューター、タブレットコンピューター、リモコン装置、ウェアラブルコンピューター（双方向性の洋服やアクセサリ）、ユーザの体に埋め込まれるコンピューター・デジタル・メディアデバイスや双方向性デジタル・メディアデバイス、及び／又はこれら以外のコンピュータプラットフォームを少なくとも一つ含むことができる。

【0015】

デジタル装置106を構成する一又は複数のコンポーネントが、デジタル装置106の一又は複数の構成要素の機能と組み合わされることにより、単一のコンポーネントとなっていてもよい。図１においては、デジタル装置106の構成要素は一つの装置に配置されているが、そうでなくともよい。一部の実装態様においては、デジタル装置106の一又は複数の構成要素は、デジタル装置106の他の構成要素から離れて別個に配置されていてもよい。かかる実装態様においては、デジタル装置106の別個の構成要素は、デジタル装置106の一又は複数の他の構成要素と（有線又は無線で）通信可能に接続されていてもよい。通信接続は、通信ネットワーク108によって提供されてもよい。

【0016】

電子記憶装置110は、情報を電子的に記憶する電子記録媒体を含んでいてもよい。電子記憶装置110の電子記録媒体は、デジタル装置106と一体に設けられる（すなわち実質的に取り外し不可能な）システム記憶装置、及び／又は、例えばポート（例えば、USBポート、ファイヤーワイヤーポート等）やドライブ（例えばディスクドライブ等）を介してデジタル装置106に取り外し可能に接続されるリムーバブル記憶装置の両方又は一方を含むことができる。電子記憶装置110は、光学的に読み取り可能な記録媒体（光ディスク等）、磁気的に読み取り可能な記録媒体（磁気テープ、磁気ハードドライブ、フロッピードライブ等）、電気チャージ型の記録媒体（例えば、EEPROM、RAM等）、半導体記録媒体（フラッシュドライブ等）、及び／又はこれら以外の電子的に読み取り可能な記録媒体を少なくとも一つ含むことができる。電子記憶装置110は、ソフトウェアアルゴリズム、プロセッサ122によって決定された情報、周辺機器102によって受信された情報、外部リソース104から受信された情報、及び／又はデジタル装置106が以下に説明する動作を行うためのこれら以外の情報を記憶することができる。

【0017】

コンテンツ出力装置112は、双方向性コンテンツをユーザに出力するように構成されてもよい。双方向性コンテンツは、視覚的に、音響的に、及び／又はハプティックに（触覚的に）出力可能である。双方向性コンテンツは、電子記憶装置110、プロセッサ122やそのモジュール、外部リソース104等のソースからの出力のために、コンテンツ出力装置112に提供される。例示的な実装態様におけるコンテンツ出力装置112は、電子ディスプレイ（モニターやスクリーン等）、電子音響変換器（スピーカー等）等のコンテンツ出力装置を含むことができる。コンテンツ出力装置112は、触覚的に知覚できる双方向性コンテンツを出力することができる。例えば、コンテンツ出力装置112に含まれる電子音響変換器は、ユーザの触覚知覚システムによって知覚される位置において所定範囲のエネルギーを出力するように構成されてもよい。このハプティック出力は、アクチュエータ等の追加的なハプティック出力専用装置とは独立に、ハプティック出力専用装置と協調して、又はハプティック出力専用装置の代わりに用いられる。

【0018】

撮像装置114は、デジタル装置106の周辺環境やその構成要素の視覚的表示に関する情報を記録するように構成されてもよい。この周辺環境には、ユーザ、周辺機器102、ユーザの物理的な環境等の視覚的表示を含んでもよい。この視覚的表示には、少なくとも一つの静止画像、動画、及び／又はこれら以外の視覚的表示を含むことができる。撮像装置114によって記録される情報は、コンテンツ出力装置112、プロセッサ122やそのモジュールに、及び／又はシステム100のこれら以外のコンポーネントに対して提供されてもよい。撮像装置114には、デジタルカメラ、ウェブカメラ、アナログカメラ、三次元カメラ、ステレオカメラ等撮像装置が含まれるが、これらには限られない。

【0019】

周辺機器識別センサ116は、周辺機器102を識別する情報を伝達する出力信号を生成するように構成されてもよい。一部の実装態様における周辺機器識別センサ116は、複数の他の周辺機器から周辺機器102を識別するように構成されてもよい。一部の実装態様における周辺機器識別センサ116は、周辺機器102を視覚的に識別することができる。かかる実装態様における周辺機器識別センサ116は、撮像装置114であってもよい。一部の実装態様における周辺機器識別センサ116は、周辺機器102をリモートセンシングにより識別することができる。周辺機器102の同一性のリモートセンシングには、RFID、画像認識、光符号識別及び／又は光符号変換、GPS等の位置センサ、無線信号強度、ネットワークアドレス、無線プロトコル（ブルートゥース（登録商標）等）、有線接続等のリモートセンシング技術が含まれる。周辺機器識別センサ116は、プロセッサ122やそのモジュール及び／又はシステム100の他のコンポーネントに対して、出力信号等によって周辺機器102の識別情報を提供することができる。

【0020】

位置センサ118は、現実世界における周辺機器102の位置を検出するように構成されてもよい。一部の実装態様における位置センサ118は、周辺機器102の位置を視覚的に検出することができる。かかる実装態様において、位置センサ118は撮像装置114であってもよい。一部の実装態様において、位置センサ118は、周辺機器102の位置をリモートセンシングにより検出することができる。周辺機器102の位置のリモートセンシングには、RFID、WiFi等の無線通信プロトコルに基づく三角測量、容量性センシング、光学的な動き追跡もしくは他のタイプの動き追跡、磁力計、加速度計、ジャイロスコープ等の機器組み込み型センサから得られるデータへのアクセス、及び／又はこれらの以外のリモートセンシング技術を含むことができる。位置センサ118は、周辺機器102の位置に関連する情報を伝達する出力信号を生成するように構成されてもよい。かかる出力信号は、プロセッサ122やそのモジュール及び／又はシステム100のそれ以外のコンポーネントに対して提供されてもよい。一部の実装態様における位置センサ118は、周辺機器102によって支持される一又は複数のセンサを含む。例えば、位置センサ118は、加速度計、ジャイロスコープ、デジタルコンパス等の周辺機器102の位置及び／又は動きに関連する情報を伝達する出力信号を生成するように構成されたセンサを一又は複数含むことができる。

【0021】

無線送受信機120は、システム100の一又は複数のコンポーネントへ情報を無線送信し、及び／又は、システム100の一又は複数のコンポーネントから情報を無線受信するように構成されてもよい。このように、無線送受信機120は、無線送信機、無線受信機、及び／又は無線送信機と無線受信機との組み合わせを含むことができる。無線送受信機120によって送受信される情報は、ユーザに提示されるハプティックフィードバックに関連するものでもよい。

【0022】

プロセッサ122は、デジタル装置106において情報処理能力を提供するように構成されてもよい。このように、プロセッサ122は、デジタルプロセッサ、アナログプロセッサ、情報を処理するように構成されたデジタル回路、情報を処理するように構成されたアナログ回路、ステートマシーン、及び／又は電子的に情報を処理するこれら以外のメカニズムを少なくとも一つ含んでも良い。プロセッサ122は図１において単一の部材として示されているが、これは説明の便宜のために過ぎない。一部の実装態様において、プロセッサ122は、複数の処理ユニットを含むことができる。これらの処理ユニットは、同一の装置内に物理的に配置されてもよく、又は、プロセッサ122は、協働する複数の装置の処理機能を表すものであってもよい。プロセッサ122等は、デジタル装置106に含まれる第１のプロセッサと、周辺機器102に含まれる第２のプロセッサを含んでいてもよい。この第１のプロセッサ及び第２のプロセッサは、互いに通信することができ、協働してプロセッサ122に属する機能を提供することもできる。

【0023】

図１に示されているように、プロセッサ122は、一又は複数のコンピュータプログラムモジュールを実行するように構成されてもよい。この一又は複数のコンピュータプログラムモジュールは、位置モジュール124、周辺機器識別モジュール126、コンテンツモジュール128、ハプティクスモジュール130等のモジュールを少なくとも一つ含むことができる。プロセッサ122は、モジュール124、126、128、及び／又は130を、ソフトウェア、ハードウェア、ファームウェア、これらの組み合わせ、及び／又はプロセッサ122上での処理能力を構成するこれら以外のメカニズムを実行するように構成されてもよい。

【0024】

モジュール124、126、128、及び130は図１において単一の処理ユニットに配置されるように示されているが、プロセッサ122が複数の処理ユニットを含む実装態様においては、モジュール124、126、128、及び／又は130を少なくとも一つ他のモジュールと離れて配置してもよい。異なるモジュール124、126、128、及び／又は130によって提供される機能についての以下の説明は説明のためになされたものであり、発明を限定することを意図するものではない。モジュール124、126、128、及び／又は130の任意のモジュールは、説明された機能よりも少ない機能や、それよりも多い機能を提供することができる。例えば、モジュール124、126、128、及び／又は130の少なくとも一つを除外することができ、その機能の一部又は全部をモジュール124、126、128、及び／又は130の他のモジュールによって提供することも可能である。他の例においては、モジュール124、126、128、及び／又は130の一つの機能の一部又は全部を実行できる一又は複数の追加的なモジュールを実行するように、プロセッサ122を構成することができる。

【0025】

位置モジュール124は、一又は複数の周辺機器（周辺機器102等）の位置に関連する一又は複数の位置パラメータを測定するように構成されてもよい。位置パラメータには、ユーザやデジタル装置106等の参照位置に対する周辺機器の位置、周辺機器の向き、周辺機器の寸法等に関連する情報を含めることができる。一部の実装態様における位置モジュールは、位置センサ118の出力信号に少なくとも部分的に基づいて一又は複数の位置パラメータを測定するように構成されてもよい。一部の実装態様においては、撮像装置114からの情報を一又は複数の位置パラメータを測定するために用いることができる。

【0026】

周辺機器識別モジュール126は、複数の周辺機器の候補の中から周辺機器（周辺機器102等）を特定するように構成されてもよい。周辺機器の候補には、ユーザの近くにある様々な実在の物体及び／又は実在の装置を含んでもよい。一部の実装態様における周辺機器識別モジュール126は、周辺機器識別センサ116の出力信号に基づいて周辺機器を識別するように構成されてもよい。周辺機器識別モジュール126は、周辺機器の外観及び／又は視覚的側面に基づいて、その周辺機器を識別するように構成されてもよい。例えば、一部の実装態様における周辺機器識別モジュール126は、周辺機器が有する図柄に基づいて、その周辺機器を識別するように構成されてもよい。一部の実装態様においては、周辺機器識別モジュール126は、複数の周辺機器の種類の中から周辺機器の種類を識別することによって周辺機器を識別するように構成される。周辺機器の種類には、例えば、実在の物体の種類、実在の装置の種類等が含まれる

【0027】

コンテンツモジュール128は、コンテンツ出力装置112によって出力される双方向性コンテンツを調整するように構成されてもよい。双方向性コンテンツの調整は、位置モジュール124によって測定された一又は複数の位置パラメータ、周辺機器識別モジュール126によって決定された周辺機器の識別情報や種類等の要素に基づいて行われる。コンテンツ出力装置112によって出力された双方向性コンテンツの調整には、外観、向き、寸法、位置、テーマ、音響、音量、及び／又は双方向性コンテンツの他の側面の調整を含むことができる。

【0028】

ハプティクスモジュール130は、ユーザに提供されるハプティックフィードバックを決定するように構成されてもよい。ユーザは、図２及び図３に関連してさらに説明されるように、周辺機器102を介してハプティックフィードバックを体験することができる。ハプティックフィードバックには、ユーザの触覚を利用した触知フィードバック（tactile feedback）を含んでもよい。ハプティックフィードバックは、物理的な力、振動、動き等の周辺機器102によってユーザに作用させる触知フィードバックを含むことができる。ハプティクスモジュール130は、周辺機器識別モジュール126によって決定された周辺機器102の識別情報に少なくとも部分的に基づいてハプティックフィードバックを決定するように構成されてもよい。ハプティクスモジュール130は、位置モジュール124によって測定された一又は複数の位置パラメータに少なくとも部分的に基づいてハプティックフィードバックを決定するように構成されてもよい。ハプティクスモジュール130は、ハプティックフィードバックがコンテンツ出力装置112から出力される双方向性コンテンツにさらに少なくとも部分的に基づくように構成されてもよい。ユーザに提供されるハプティックフィードバックに関連する情報は、無線送受信機120によって伝達されてもよい。

【0029】

図２は、本発明の一又は複数の実装態様に従って周辺機器202を示す。周辺機器202は、コンテンツ出力装置112によってユーザに伝達される双方向性コンテンツの双方向性を向上させるように構成されてもよい。一部の実装態様において、周辺機器202は、図１に示されている周辺機器102の構成要素であってもよい。図２に示されているように、周辺機器202は、付属装置204、ベース装置206等のコンポーネントを含むことができる。図２において、付属装置204及びベース装置206には所定のコンポーネントが含まれるように示されているが、この図示は、付属装置204及び／又はベース装置206がアクチュエータ208、無線送受信機210、アクチュエータ制御部212、一又は複数の識別部214等のコンポーネントの一又は複数を含む態様に本発明を限定することを意図するものではない。一部の実装態様においては、例えば、付属装置204及び／又はベース装置206は、バッテリー、音声再生装置、加速度計、動き検出器、ボタン等のコンポーネント（図２には示されていない）を少なくとも一つ含むことができる。

【0030】

アクチュエータ208は、ユーザのためにハプティックフィードバックを生成するように構成されてもよい。ハプティックフィードバックは、物理的な力、振動、動き、マルチモード信号のハプティック成分、及び／又はこれら以外の周辺機器202がユーザに作用させる触知フィードバックを含むことができる。アクチュエータ208は、周辺機器202に一又は複数の動きを取らせるように構成された機械装置を含むことができる。アクチュエータ208は、エネルギー（例えば、電気エネルギー、空気エネルギー、油圧エネルギー等のエネルギー）を機械的エネルギーに変換し、周辺機器202の動きを生じさせる。一部の実装態様におけるアクチュエータ208は、そのドライブシャフトの回転によって振動が生成されるように、当該ドライブシャフトに偏った質量が付加された電気モーターを含んでも良い。例示的な実装態様において、アクチュエータ208は、付属装置204及び／又はベース装置206によって支持される。

【0031】

無線送受信機210は、システム100の一又は複数のコンポーネントへ情報を無線送信し、及び／又は、同一又は複数のコンポーネントから情報を無線受信するように構成されてもよい。このように、無線送受信機210は、無線送信機、無線受信機、及び／又は無線送信機と無線受信機との組み合わせを含んでもよい。無線送受信機210によって送受信される情報は、ユーザに伝達されるハプティックフィードバックに関連するものであってもよい。例えば、無線送受信機210は、アクチュエータ208によって生成されるハプティックフィードバックの一又は複数のフィードバックパラメータを定義する一又は複数のプロセッサ（プロセッサ122等）からの情報を送受信するように構成される。フィードバックパラメータは、ハプティックフィードバックの種類、ハプティックフィードバックの持続期間、ハプティックフィードバックの強度又は強さ、周期的なハプティック信号の周波数、ハプティック信号の高調波成分、ハプティックパルスのパターンやハプティック信号の態様、静的な及び／又は変化する変形特性、及び／又はハプティックフィードバックのこれら以外の側面を含むことができる。

【0032】

アクチュエータ制御部212は、アクチュエータ208を制御するように構成されてもよい。アクチュエータ制御部212は、アクチュエータ208を制御して、ユーザのためにハプティックフィードバックを生成させる。アクチュエータ制御部212によるアクチュエータ208の制御は、一又は複数のフィードバックパラメータを定義する一又は複数のプロセッサ（プロセッサ122等）からの受信情報に従って行われてもよい。アクチュエータ制御部212 は、例えば、付属装置204及び／又はベース装置206によって支持される。

【0033】

識別部214は、一又は複数のプロセッサ（プロセッサ122等）に対して周辺機器202及び／又は付属装置204を識別するように構成されてもよい。識別部214は、双方向性コンテンツに関して使用できる他の周辺機器及び／又は付属装置の中から周辺機器202及び／又は付属装置204を識別できる。一又は複数のプロセッサ（プロセッサ122等）から周辺機器202に送信された一又は複数のフィードバックパラメータは、周辺機器202及び／又は付属装置204の識別部に依存するものであってもよい。識別部は、図柄、模様、色彩、及び／又はこれら以外の視覚的特徴を含んでもよい。

【0034】

付属装置204は、ベース装置206と関連するように構成された実在の物体及び／又は実在の装置であってもよい。付属装置204とベース装置206との関係には、物理的な結合等の関係が含まれてもよい。付属装置204とベース装置206との物理的な結合には、付属装置204をベース装置206に取り外し可能に取り付けること、付属装置204をベース装置206に取り外しできないように取り付けること、付属装置204とベース装置206とを交換可能に結合すること等の物理的な結合を含むことができる。ベース装置206において、付属装置204等の複数の付属装置を入れ替えることができる。ベース装置206に関連する特定の付属装置は、コンテンツ出力装置112を介してユーザに提供される双方向性コンテンツに影響を与えることができる。付属装置204は、プロセッサ122の一又は複数のモジュールによって使用される識別部の構成要素となる所定の図柄を有していてもよい。

【0035】

一部の実装態様において、付属装置204は、カード状又はそれ以外の紙状の物理的形態要素を有していても良い。かかる形態要素の例には、コレクションカード（スポーツカード及び／又はゲームカード等）、グリーティングカード（誕生日カード等）、製品カタログ等の宣伝用部材、地図等のガイド、書籍、雑誌、新聞等のカード状又はそれ以外の紙状の形態要素が含まれる。ベース装置206は付属装置204を受け入れるように構成され、付属装置204は取り外し可能にベース装置206に接続されてもよい。このように、付属装置204に類似する複数の付属装置は、ベース装置206において入れ替え可能である。例えば、ベース装置206は、カード状の形態要素を有する付属装置（付属装置204等）をその一部分が視認できるように挿入可能なスロットを備えることができる。ベース装置206は、付属装置204がベース装置206に接続されたときにハプティックフィードバックをユーザに提供するように構成されてもよい。ユーザに提供されるハプティックフィードバックは、付属装置204に依存してもよく、異なる付属装置によって異なるハプティックフィードバックが提供されてもよい。

【0036】

一部の実装態様において、付属装置204は、ベース装置206と無関係にハプティックフィードバックをユーザに提供することができる。かかる実装態様において、ベース装置206をシステム100から省略し、又は他の用途に用いることができる。例えば、ベース装置206は、一又は複数の付属装置を格納し、一又は複数の付属装置を充電し、一又は複数の付属装置を選択し、及び／又はこれら以外の方法で付属装置204の使用を補完することができる。

【0037】

付属装置204が書籍状の形態要素を有する一部の実装態様においては、一又は複数の個別ページが、デジタル装置106のコンテンツ出力装置112による双方向性コンテンツの提示を開始させる組み込み情報を含むことができる。かかる実装態様においては、装丁部分がデジタル装置106の構成要素となることができ、書籍状の形態要素において開かれている特定のページが付属装置204の構成要素となることができる。

【0038】

図３は、本発明の一又は複数の実装態様に従って周辺機器302を示す。この周辺機器302は、コンテンツ出力装置112によってユーザに伝達される双方向性コンテンツの双方向性を向上させるように構成されてもよい。一部の実装態様において、周辺機器302は、図１に示された周辺機器102の構成要素であってもよい。図２に示されたように、周辺機器302は、アクチュエータ304、a 無線送受信機306、アクチュエータ制御部308、一又は複数の識別部310、電子ディスプレイ312、ディスプレイ制御部314、ユーザインタフェース316、及び／又はこれら以外のコンポーネントを少なくとも一つ含むことができる。例えば、一部の実装態様における周辺機器302は、バッテリー、音声再生装置、加速度計、動き検出器、ボタン等のコンポーネント（図３には不図示）を少なくとも一つ含むことができる。アクチュエータ304、無線送受信機306、アクチュエータ制御部308、及び／又は識別部310は、図２に示したアクチュエータ208、無線送受信機210、アクチュエータ制御部212、及び／又は識別部214にそれぞれ類似するものであってもよい。一部の実装態様において、識別部310は、周辺機器302に取り外し可能に接続できる加入者識別モジュールカード318を含むことができる。

【0039】

電子ディスプレイ312は、コンテンツ（例えば、画像、動画、テキスト等のコンテンツ）をユーザに表示するように構成されてもよい。電子ディスプレイ312に表示されるコンテンツは、コンテンツ出力装置112の一又は複数のモジュールによって使用される識別部を含むことができる。電子ディスプレイ312によって表示されるコンテンツは、双方向性コンテンツを含むことができる。この双方向性コンテンツは、デジタル装置106のコンテンツ出力装置112によって提示される双方向性コンテンツと同一や類似のものであってもよく、異なるものであってもよい。電子ディスプレイ312は、単一の装置として周辺機器302に一体化されてもよい。電子ディスプレイ312は、周辺機器302と別個に設けられ、周辺機器302と通信可能に接続されてもよい。一部の実装態様において、電子ディスプレイ312は、ユーザから情報を受容するように構成されたタッチスクリーンを含んでいてもよい。

【0040】

ディスプレイ制御部314は、電子ディスプレイ312を制御するように構成されてもよい。ディスプレイ制御部314は、電子ディスプレイ312を制御し、コンテンツ出力装置112によってユーザに伝達される双方向性コンテンツに対応する双方向性コンテンツをユーザに提示することができる。ディスプレイ制御部314は、識別部を提示するために電子ディスプレイ312を制御することができる。

【0041】

ユーザインタフェース316は、ユーザから情報を受容し、及び／又はユーザに対して情報を提供するように構成されてもよい。このように、ユーザインタフェース316は、ユーザからの情報の受容及び／又はユーザへの情報の提供を促進するハードウェア及び／又はソフトウェアを含むことができる。例えば、ハードウェアは、ボタン、ダイアル、タッチパッド等のハードウェアを少なくとも一つ含むことができる。一部の実装態様において、ユーザインタフェース316の一部又は全部は、電子ディスプレイ312を介してユーザに提供される。電子ディスプレイ312がタッチスクリーンを含む実装態様においては、ユーザはそのタッチスクリーンを操作することによって情報をユーザインタフェース316に提供することができる。

【0042】

一部の実装態様におけるユーザインタフェース316は、ユーザ構成可能な設定をユーザに提示するように構成されてもよい。ユーザインタフェース316は、ユーザ構成可能な設定に関する設定値の選択をユーザから受け取るように構成されてもよい。一又は複数のユーザ構成可能な設定は、周辺機器302のアクチュエータ304によって生成されるハプティックフィードバックに影響を与えることができる。ユーザ構成可能な設定は、周辺機器302のアクチュエータ制御部308の一又は複数の動作を構成することができる。このユーザ構成可能な設定は、一又は複数のプロセッサに提供されてもよい。一部の実装態様において、ユーザ構成可能な設定は、周辺機器302の無線送受信機306によってデジタル装置106のプロセッサ122に提供されてもよい。

【0043】

一部の実装態様において、周辺機器302は、携帯電話、デジタル・ミュージック・プレイヤー、携帯情報端末、スマートフォン、腕時計、電子書籍リーダー、ラップトップコンピューター、タブレットコンピューター、リモコン装置、ウェアラブルコンピューター（双方向性の洋服やアクセサリ）、ユーザの体に埋め込まれるコンピューター・デジタル・メディアデバイスや双方向性デジタル・メディアデバイス等の携帯型装置を含んでもよい。これらの携帯型装置は、シングルプレイヤーゲーム、マルチプレイヤーゲーム、ソーシャルネットワーク、仮想現実環境や拡張現実環境との相互作用、双方向メッセージ等のコミュニケーション、遠隔操作の確認（例えば、テレロボティクス、現実の鍵や仮想的な鍵の施錠・解錠）、テキストベースのストーリーや映像ベースのストーリーにおけるストーリー内キャラクターの動作や物語の展開に基づく対話式応答、及び／又はこれら以外のモバイルアプリケーションの少なくとも一つのために設定されてもよい。

【0044】

シングルプレイヤーゲームやマルチプレイヤーゲームに関連する実装態様においては、ゲーム内のイベントや相互作用に応答して周辺機器302を介してハプティックフィードバックをユーザに提供してもよい。例えば、アクチュエータ304は、ゲームにおいて爆発が起きている間、又は、所定の音楽が鳴っている間に振動することができる。ソーシャルネットワークに関連する実装態様においては、ソーシャルネットワーク内のイベントや相互作用に応答して周辺機器302を介してハプティックフィードバックをユーザに提供することができる。例えば、アクチュエータ304は、ソーシャルネットワークにおいてユーザに友人ができたときに振動することができる。

【0045】

双方向メッセージ等のコミュニケーションに関連する実装態様において、コミュニケーションにはハプティックフィードバックを含むことができる。かかるコミュニケーションには、ユーザが双方向メッセージ要素（感情等）の反応を感じることができる仮想的な接触コミュニケーションを含んでもよい。かかるコミュニケーションは、互いに接触する仮想的な接触物体を含むことができる。例えば、ユーザに関連づけられた仮想的な手が他の仮想的な手に接触することにより、周辺機器302を介してハプティック効果を生じさせることができる。

【0046】

遠隔操作の確認に関連する実装態様においては、仮想環境は、例えば、コンテンツ出力装置112や電子ディスプレイ312を介してユーザに提供される。この仮想環境は、現実世界の環境を表現するものである。ユーザは、現実世界の環境におけるロボット等のメカニズムを制御し、現実世界の環境における物体と相互作用することができる。これらの相互作用によって、周辺機器302によるハプティックフィードバックの提供が開始される。

【0047】

テキストベースのストーリーや映像ベースのストーリーにおけるストーリー内キャラクターの動作や物語の展開に基づく対話式応答に関連する実装態様においては、所定のキャラクターの動作及び／又は物語の展開が、対応するハプティックフィードバック用のトリガーとして機能してもよい。例えば、ストーリー内キャラクターが野球バットを振って野球ボールを打つときに、ボールがバットに当たる衝撃を表すハプティックフィードバックが周辺機器302を介して提供されてもよい。

【0048】

上述のように、周辺機器102は、玩具を含むことができる。周辺機器202及び／又は周辺機器302に関連して説明された一又は複数のコンポーネントは、かかる玩具に備えられていても良い。このような玩具の例には、アクションフィギュア、人形、乗り物、武器等の玩具が含まれる。この玩具の表示は、コンテンツ出力装置112等の装置により出力される双方向性コンテンツに含まれていても良い。ユーザは、玩具の表示によって実行されたアクションに応答するハプティックフィードバックをその玩具を介して体験することができる。玩具の表示は双方向性コンテンツに含まれていても良い。例えば、その玩具がアクションフィギュアであり、その玩具が双方向性コンテンツにおいて歩行しているように表示された場合には、その玩具は歩行に対応するハプティックフィードバックを提供することができる。ハプティックフィードバックは、ユーザによる玩具の操作に少なくとも部分的に基づいて開始されてもよい。例えば、玩具が武器である場合には、ユーザがその武器を模擬的に使用することによって、その玩具によって提供されるハプティックフィードバックが開始される。

【0049】

図４は、本発明の一又は複数の実装態様に従って、コンテンツ出力装置によってユーザに提供される双方向性コンテンツと相互作用する方法400を示す。以下に示される方法400の工程は、説明のためのものである。一部の実装態様において、方法400は、明示していない一又は複数の追加的な工程とともに実行され、及び／又は、説明されている一又は複数の工程を省略して実行される。また、方法400の工程の実行順序が図４に示され以下に説明されるが、本発明の方法はこれに限定されるものではない。

【0050】

一部の実装態様において、方法400は、一又は複数の処理装置（例えば、デジタルプロセッサ、アナログプロセッサ、情報処理用に設計されたデジタル回路、情報処理用に設計されたアナログ回路、ステートマシーン、及び／又はこれら以外の情報を電子的に処理するメカニズム）において実行される。これらの一又は複数の処理装置は、電子記憶装置媒体に電子的に記録された命令に応じて方法400の工程の一部又は全部を実行する一又は複数の装置を含むことができる。この一又は複数の処理装置には、方法400の工程の少なくとも一部を実行するように設計された専用のハードウェア、ファームウェア、及び／又はソフトウェアによって構成された一又は複数の装置が含まれる。

【0051】

工程402において、双方向性コンテンツはユーザに対して出力される。一部の実装態様において、この双方向性コンテンツは、デジタル装置106のコンテンツ出力装置112及び／又は周辺機器302の電子ディスプレイ312によって出力されてもよい。一部の実装態様において、出力されるコンテンツはコンテンツモジュール128によって決定される。

【0052】

工程404において、ユーザによって操作される周辺機器の位置に関連する一又は複数の位置パラメータが決定される。一部の実装態様において、この一又は複数の位置パラメータは、位置モジュール124と連動して決定される。一又は複数の位置パラメータを決定する際に、撮像装置114及び／又は位置センサ118を用いることができる。

【0053】

工程406において、ユーザによって操作される周辺機器が、周辺機器の複数の候補の中から識別される。周辺機器識別モジュール126を実行することによって、ユーザによって操作される周辺機器を識別することができる。一部の実装態様においては、ユーザによって操作される周辺機器を識別する際に撮像装置114及び／又は周辺機器識別センサ116が用いられる。

【0054】

工程408において、出力される双方向性コンテンツが調整される。この調整は、工程404において決定された位置パラメータ、工程406におけるユーザによって操作される周辺機器の識別情報、及び／又はこれら以外の要素の少なくとも一つに少なくとも部分的に基づいて行われる。一部の実装態様において、コンテンツモジュール128を実行することにより、工程408を実行することができる。

【0055】

工程410において、ユーザに提供されるハプティックフィードバックが決定される。この決定は、工程404において決定された位置パラメータ、工程406におけるユーザによって操作される周辺機器の識別情報、及び／又はこれら以外の要素の少なくとも一つに少なくとも部分的に基づいて行われる。一部の実装態様において、ハプティクスモジュール130を実行することにより、工程410を実行することができる。

【0056】

以上、現時点で最も実用的で望ましいと考えられる態様に基づいて本発明を説明したが、これらの説明は、本発明の説明のみを目的としたものであり、何ら本発明を限定することを意図したものではない。一方、これらの説明は、請求項の趣旨及び範囲に含まれる変更及び均等物を含むものである。例えば、任意の実施形態の特徴と他の実施形態の一又は複数の特徴との組み合わせも可能な限り本発明の範囲に含まれる。

【図1】

【図2】

【図3】

【図4】