特許 6385389 パーソナライズされたオーディオを提供するためのシステムと方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6385389

(24)【登録日】2018年8月17日

(45)【発行日】2018年9月5日

(54)【発明の名称】パーソナライズされたオーディオを提供するためのシステムと方法

(51)【国際特許分類】

   H04R 3/00 20060101AFI20180827BHJP

   H04S 7/00 20060101ALI20180827BHJP

   H04R 1/40 20060101ALI20180827BHJP

【ＦＩ】

   H04R3/00 310

   H04S7/00 320

   H04R1/40 310

【請求項の数】12

【外国語出願】

【全頁数】14

(21)【出願番号】特願2016-90621(P2016-90621)

(22)【出願日】2016年4月28日

(65)【公開番号】特開2017-28679(P2017-28679A)

(43)【公開日】2017年2月2日

【審査請求日】2016年4月28日

(31)【優先権主張番号】14/805,405

(32)【優先日】2015年7月21日

(33)【優先権主張国】US

【前置審査】

(73)【特許権者】

【識別番号】504399716

【氏名又は名称】ディズニー エンタープライゼス インコーポレイテッド

(74)【代理人】

【識別番号】100114890

【弁理士】

【氏名又は名称】アインゼル・フェリックス＝ラインハルト

(74)【代理人】

【識別番号】100116403

【弁理士】

【氏名又は名称】前川 純一

(74)【代理人】

【識別番号】100135633

【弁理士】

【氏名又は名称】二宮 浩康

(74)【代理人】

【識別番号】100162880

【弁理士】

【氏名又は名称】上島 類

(72)【発明者】

【氏名】メフル パテル

【審査官】 堀 洋介

(56)【参考文献】

【文献】 特表２００９−５３１９２６（ＪＰ，Ａ）

【文献】 特開２０１５−０５６９０５（ＪＰ，Ａ）

【文献】 特開２０１２−２１７０１５（ＪＰ，Ａ）

【文献】 特開２００８−０４２６５６（ＪＰ，Ａ）

【文献】 特開２００６−２５８４４２（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｒ ３／００

Ｈ０４Ｒ １／４０

Ｈ０４Ｓ ７／００

(57)【特許請求の範囲】

【請求項1】

環境中の複数のスピーカと、
映画を再生するメディアデバイスであって、前記映画は、前記映画に関する第１の言語の第１のオーディオコンテンツと、前記映画に関する前記第１の言語とは異なる第２の言語の第２のオーディオコンテンツを含む、メディアデバイスと、
を備えたシステムにおいて、
前記メディアデバイスは、
オーディオアプリケーションを記憶するように構成されているメモリと、
プロセッサと、
を有しており、
前記プロセッサは、前記オーディオアプリケーションを実行して、
−前記複数のスピーカの各スピーカに対する第１のユーザデバイスの第１のユーザの第１の位置を取得し、
−前記複数のスピーカの各スピーカに対する第２のユーザデバイスの第２のユーザの第２の位置を取得し、
−前記複数のスピーカの各スピーカに対する前記第１のユーザデバイスの前記第１のユーザの前記第１の位置に基づき、前記映画の再生中、前記複数のスピーカのうちの少なくとも１つからなる第１のスピーカを使用して、前記映画に関する前記第１の言語の前記第１のオーディオコンテンツを再生し、
−前記複数のスピーカの各スピーカに対する前記第２のユーザデバイスの前記第２のユーザの前記第２の位置に基づき、前記映画の再生中、前記複数のスピーカのうちの少なくとも１つからなる第２のスピーカを使用して、前記映画に関する前記第２の言語の前記第２のオーディオコンテンツを再生する、
ように構成されており、
前記第１の位置および前記第２の位置を取得することは、
前記環境への放出のために前記複数のスピーカに少なくとも１つのオーディオ較正信号を送信することと、
前記複数のスピーカから放出され、前記第１のユーザデバイスおよび前記第２のユーザデバイスにより受信された前記少なくとも１つのオーディオ較正信号を、前記第１の位置および前記第２の位置をそれぞれ求めるために、解析することを含むことを特徴とする、
システム。

【請求項2】

前記プロセッサは、更に、前記オーディオアプリケーションを実行して、
−前記第１のオーディオコンテンツを再生するための、前記第１のユーザデバイスからの第１の再生リクエストを受信し、
−前記第２のオーディオコンテンツを再生するための、前記第２のユーザデバイスからの第２の再生リクエストを受信する、
ように構成されている、
請求項１に記載のシステム。

【請求項3】

前記プロセッサは、更に、前記第１のユーザデバイスから第１のオーディオプロファイルを受信し、更に該第１のオーディオプロファイルに基づき、前記第１のオーディオコンテンツを再生するように構成されている、
請求項１に記載のシステム。

【請求項4】

前記第１のオーディオプロファイルは、言語及びリスニングモードのうちの少なくとも１つを含んでいる、
請求項３に記載のシステム。

【請求項5】

前記リスニングモードは、標準リスニングモード、向上されたダイアログリスニングモード、カスタムリスニングモード及びジャンルリスニングモードのうちの少なくとも１つを含んでいる、
請求項４に記載のシステム。

【請求項6】

前記第１のオーディオコンテンツは、ユーザにより選択された言語のダイアログを含んでいる、
請求項１に記載のシステム。

【請求項7】

環境中の複数のスピーカと、メモリと、プロセッサと、を含んでいるシステムと共に使用するための方法において、
映画を再生するステップであって、前記映画は、前記映画に関する第１の言語の第１のオーディオコンテンツと、前記映画に関する前記第１の言語とは異なる第２の言語の第２のオーディオコンテンツを含む、ステップと、
前記プロセッサを使用して前記複数のスピーカの各スピーカに対する第１のユーザデバイスの第１のユーザの第１の位置を取得するステップと、
前記プロセッサを使用して、前記複数のスピーカの各スピーカに対する第２のユーザデバイスの第２のユーザの第２の位置を取得するステップと、
前記映画の再生中、前記複数のスピーカのうちの少なくとも１つからなる第１のスピーカを使用して、前記複数のスピーカの各スピーカに対する前記第１のユーザの前記第１の位置に基づき、前記映画に関する前記第１の言語の前記第１のオーディオコンテンツを再生するステップと、
前記映画の再生中、前記複数のスピーカのうちの少なくとも１つの第２のスピーカを使用して、前記複数のスピーカの各スピーカに対する前記第２のユーザデバイスの前記第２のユーザの前記第２の位置に基づき、前記映画に関する前記第２の言語の前記第２のオーディオコンテンツを再生するステップと、
を備えており、
前記第１の位置および前記第２の位置を取得するステップは、
前記環境への放出のために前記複数のスピーカに少なくとも１つのオーディオ較正信号を送信するステップと、
前記複数のスピーカから放出され、前記第１のユーザデバイスおよび前記第２のユーザデバイスにより受信された前記少なくとも１つのオーディオ較正信号を、前記第１の位置および前記第２の位置をそれぞれ求めるために、解析するステップとを含むことを特徴とする、
方法。

【請求項8】

更に、
前記プロセッサを使用して、前記第１のオーディオコンテンツを再生するための、前記第１のユーザデバイスからの第１の再生リクエストを受信するステップと、
前記プロセッサを使用して、前記第２のオーディオコンテンツを再生するための、前記第２のユーザデバイスからの第２の再生リクエストを受信するステップと、
を備えている、
請求項７に記載の方法。

【請求項9】

前記方法は、更に、前記第１のユーザデバイスからの第１のオーディオプロファイルを受信するステップを含んでおり、前記第１のオーディオコンテンツの再生は、更に、前記第１のオーディオプロファイルに基づく、
請求項７に記載の方法。

【請求項10】

前記第１のオーディオプロファイルは、言語及びリスニングモードのうちの少なくとも１つを含んでいる、
請求項９に記載の方法。

【請求項11】

前記リスニングモードは、標準リスニングモード、向上されたダイアログリスニングモード、カスタムリスニングモード及びジャンルリスニングモードのうちの少なくとも１つを含んでいる、
請求項１０に記載の方法。

【請求項12】

前記第１のオーディオコンテンツは、ユーザにより選択された言語のダイアログを含んでいる、
請求項７に記載の方法。

【発明の詳細な説明】

【背景技術】

【0001】

品質を向上させたオーディオの提供は、サウンドバー、５．１Ｃｈサラウンドサウンド及び７．１Ｃｈサラウンドサウンドを利用できるようになって著しく改善された。品質を向上させたそれらのオーディオを提供するシステムは、オーディオを複数のオーディオチャネルに分割し、それらの複数のオーディオチャネルを、聴取者の周囲の異なる位置に配置されている複数のスピーカを介して再生することによって、オーディオ提供の質を改善している。現存のサラウンドサウンド技術は、検知した音の場所又はソースを方向及び距離から識別する聴取者の能力、音源定位（sound localization）を利用することによって、立体音響の知覚を向上させている。

【発明の概要】

【課題を解決するための手段】

【0002】

本発明は、実質的に少なくとも１つの図面に示されており、及び／又は、少なくとも１つの図面と関連させて説明されており、より詳細には特許請求の範囲に記載されている、パーソナライズされたオーディオを提供するためのシステムと方法に取り組むものである。

【図面の簡単な説明】

【0003】

【図1】本発明の１つの実施の形態による、パーソナライズされたオーディオを提供するための例示的なシステムを示す。

【図2】本発明の１つの実施の形態による、図１のシステムを使用する例示的な環境を示す。

【図3】本発明の１つの実施の形態による、図１のシステムを使用する別の例示的な環境を示す。

【図4】本発明の１つの実施の形態による、パーソナライズされたオーディオを提供するための方法の例示的なフローチャートを示す。

【発明を実施するための形態】

【0004】

以下の記述には、本発明の実施の形態に関係する特定の情報が含まれている。本願の図面及び付属の詳細な説明は、例示的な実施の形態を対象としているに過ぎない。特に明記されない限り、種々の図面間において類似の構成要素又は対応する構成要素を、類似の参照番号又は対応する参照番号によって同定することができる。更に、本願の図面に描かれているものは概して縮尺通りではなく、実際の相対的な寸法に対応させることを意図したものではない。

【0005】

図１には、本発明の１つの実施の形態による、パーソナライズされたオーディオを提供するための例示的なシステム１００が示されている。図示されているように、システム１００は、ユーザデバイス１０５と、オーディオコンテンツ１０７と、メディアデバイス１１０と、複数のスピーカ１９７ａ，１９７ｂ，...，１９７ｎと、を含んでいる。メディアデバイス１１０は、プロセッサ１２０及びメモリ１３０を含んでいる。プロセッサ１２０は、ハードウェアプロセッサ、例えばコンピューティングデバイスにおいて使用される中央処理装置（ＣＰＵ）である。メモリ１３０は、プロセッサ１２０によって実行されるコンピュータコードを記憶するための、また種々のデータ及びパラメータを記憶するための非一時的なストレージデバイスである。

【0006】

ユーザデバイス１０５は、ハンドヘルド型のパーソナルデバイス、例えば携帯電話、タブレットコンピュータ等であって良い。ユーザデバイス１０５を、コネクション１５５を介してメディアデバイス１１０に接続することができる。幾つかの実施の形態においては、ユーザデバイス１０５を無線で利用することができ、また、無線技術、例えばBluetooth，WiFi等を使用して、メディアデバイス１１０に無線接続されるようにユーザデバイス１０５を構成することができる。更に、ユーザデバイス１０５は、選択可能な複数のオーディオプロファイルをユーザに提供するソフトウェアアプリケーションを含むことができ、また、ユーザによるオーディオ言語及びリスニングモードの選択を実現することができる。ダイアログは、口から発せられる言葉、例えばスピーチ、意見又はナレーションのオーディオを表し、また、２人以上の役者又はキャラクタ間でのやりとりも含むと考えられる。

【0007】

オーディオコンテンツ１０７は、メディアソース、例えばテレビ番組、映画、音楽ファイルに由来するオーディオトラック、又は、オーディオ部分を含むその他のメディアソースに由来するオーディオトラックを含むことができる。幾つかの実施の形態において、オーディオコンテンツ１０７は、１つのメディアソースに由来する全てのオーディオを有している単一のトラックを含んでいても良いし、オーディオコンテンツ１０７は、オーディオコンテンツ１０７の別個の複数の部分を含む複数のトラックであっても良い。例えば、映画は、ダイアログに関するオーディオコンテンツ、音楽に関するオーディオコンテンツ及びエフェクトに関するオーディオコンテンツを含むことができる。幾つかの実施の形態において、オーディオコンテンツ１０７は複数のダイアログコンテンツを含むことができ、各ダイアログコンテンツは、ダイアログを異なる言語で含んでいる。１人のユーザがダイアログに対して関して１つの言語を選択することができるか、又は、複数のユーザがダイアログに関して複数の言語を選択することができる。

【0008】

メディアデバイス１１０を、複数のスピーカ、例えばスピーカ１９７ａ，スピーカ１９７ｂ，...，及びスピーカ１９７ｎに接続されるように構成することができる。メディアデバイス１１０は、複数のスピーカを使用してオーディオコンテンツ１０７を再生することに適している、コンピュータ、セットトップボックス、ＤＶＤプレーヤ又はその他の任意のメディアデバイスであって良い。幾つかの実施の形態においては、メディアデバイス１１０を、有線又は無線を介して複数のスピーカに接続されるように構成することができる。

【0009】

１つの実施の形態においては、オーディオコンテンツ１０７を複数のチャネルで、例えば２Ｃｈステレオ、又は５．１Ｃｈサラウンドサウンド等で提供することができる。その他の実施の形態においては、オーディオコンテンツ１０７をオブジェクトの観点から提供することができ、これは、オブジェクトベースのオーディオ又はサウンドとしても知られている。そのような実施の形態においては、１つの楽曲の個々の楽器のトラックが混合されるのではなく、又は、周囲の音、サウンドエフェクト及び映画のオーディオトラックにおけるダイアログが混合されるのではなく、それらのオーディオの一部を正確に、複数のスピーカ１９７ａ〜１９７ｎのうちの１つ又は複数のスピーカに向けること、またどれ程の音量でそれらを再生することができるかを管理することができる。例えば、全てのオーディオ部分が何処でどのように再生されるかに関するメタデータ及び命令として、オーディオコンテンツ１０７を生成することができる。その後、メディアデバイス１１０は、複数のスピーカ１９７ａ〜１９７ｎにおいてオーディオを再生するために、それらのメタデータ及び命令を使用することができる。

【0010】

図１に示されているように、メディアデバイス１１０のメモリ１３０は、オーディオアプリケーション１４０を含んでいる。オーディオアプリケーション１４０は、パーソナライズされたオーディオを供給するためのコンピュータアルゴリズムであって、プロセッサ１２０によって実行するためにメモリ１３０に記憶されている。幾つかの実施の形態においては、オーディオアプリケーション１４０は、ポジションモジュール１４１及びオーディオプロファイル１４３を含むことができる。オーディオアプリケーション１４０は、複数のスピーカ１９７ａ，１９７ｂ，...，１９７ｎに対して相対的な種々異なる位置にいる１人以上の聴取者に、パーソナライズされたオーディオを、各聴取者のパーソナライズされたオーディオプロファイルに基づいて供給するためにオーディオプロファイル１４３を使用することができる。

【0011】

オーディオアプリケーション１４０はポジションモジュール１４１も含んでおり、このポジションモジュール１４１は、ユーザデバイス１０５の位置及び室内又はシアター内のその他のユーザデバイス（図示せず）の位置を取得するためのコンピュータコードモジュールである。幾つかの実施の形態において、ユーザデバイス１０５の位置の取得は、メディアデバイス１１０による較正信号の送信を含むことができる。較正信号は、複数のスピーカ１９７ａ，１９７ｂ，...，１９７ｎから送出されるオーディオ信号を含むことができる。これに応答して、ユーザデバイス１０５は、マイクロフォン（図示せず）を使用して、複数のスピーカ１９７ａ，１９７ｂ，...，１９７ｎの各スピーカから送出された較正信号を検出することができ、また、三角測量技術を使用して、複数のスピーカ１９７ａ，１９７ｂ，...，１９７ｎの各スピーカに対して相対的なユーザデバイス１０５の場所に基づき、ユーザデバイス１０５の位置を求めることができる。幾つかの実施の形態においては、ポジションモジュール１４１は、システム１００の１つ又は複数のカメラ（図示せず）を使用してユーザデバイス１０５の位置を求めることができる。そのようにして、複数あるスピーカ１９７ａ，１９７ｂ，...，１９７ｎの各スピーカに相対的な各ユーザの位置を求めることができる。

【0012】

オーディオアプリケーション１４０はオーディオプロファイル１４３も含んでおり、このオーディオプロファイル１４３は、種々異なるオーディオコンテンツに関するオプションであって良い、規定済みの複数のリスニングモードを含んでいる。例えば、オーディオプロファイル１４３は、映画に関するオプションであって良いイコライザセッティングを有しているリスニングモードを含むことができる。イコライザセッティングには、例えば、ベース音の低減、また、聴覚に問題がある聴取者のために、映画のダイアログの再生の品質を向上させるトレブル周波数の増大が含まれる。オーディオプロファイル１４３は、プログラムの特定のジャンル、例えばドラマ及びアクションにとって最適化されたリスニングモード、カスタムリスニングモード、並びに、オーディオを顕著に変化させない標準リスニングモードを含むことができる。幾つかの実施の形態においては、カスタムリスニングモードによって、ユーザはオーディオコンテンツ１０７の一部、例えば音楽、ダイアログ及び／又はエフェクトを向上させることができる。オーディオコンテンツ１０７の一部を向上させることは、オーディオコンテンツ１０７のその部分の音量を、そのオーディオコンテンツ１０７のその他の部分に相対的に上げる又は下げることを含むことができる。オーディオコンテンツ１０７の一部を向上させることは、イコライザセッティングを変更して、オーディオコンテンツ１０７のその部分の音量をより大きくすることを含むことができる。オーディオプロファイル１４３は、ユーザがダイアログを聴く際の言語を含むことができる。幾つかの実施の形態において、オーディオプロファイル１４３は複数の言語を含むことができ、またユーザはダイアログを聴く際に１つの言語を選択することができる。

【0013】

複数のスピーカ１９７ａ，１９７ｂ，...，１９７ｎは、サラウンドサウンドスピーカであっても良いし、複数のオーディオコンテンツ１０７から選択されたオーディオの提供に適したその他のスピーカであっても良い。複数のスピーカ１９７ａ，１９７ｂ，...，１９７ｎを、スピーカ線を使用してメディアデバイス１１０に接続しても良いし、無線技術を使用してメディアデバイス１１０に接続しても良い。スピーカ１９７はモバイルスピーカであって良く、従ってユーザは複数のスピーカ１９７ａ，１９７ｂ，...，１９７ｎのうちの１つ又は複数のスピーカの位置を変更することができる。幾つかの実施の形態においては、スピーカ１９７ａ〜１９７ｎの位置と、それらのスピーカ１９７ａ〜１９７ｎの各スピーカから送信されたオーディオ間の干渉と、を使用して、仮想スピーカを生成し、音が仮想スピーカに由来するものであると錯覚させるために、スピーカ１９７ａ〜１９７ｎを使用することができる。換言すれば、仮想スピーカは、音が発生していると思われる位置に物理的に存在しないスピーカである。

【0014】

図２には、本発明の１つの実施の形態による、図１のシステム１００を使用する例示的な環境２００が示されている。ユーザ２１１はユーザデバイス２０５ａを所有しており、またユーザ２１２はユーザデバイス２０５ｂを所有している。幾つかの実施の形態において、ユーザデバイス２０５ａはユーザ２１１と同じ場所に位置していても良く、またユーザデバイス２０５ｂはユーザ２１２と同じ場所に位置していても良い。従って、メディアデバイス２１０が、スピーカ２９７ａ〜２９７ｅに対するユーザデバイス２０５ａの位置を取得すると、メディアデバイス２１０は、スピーカ２９７ａ〜２９７ｅに対するユーザ２１１の位置を取得することができる。同様に、メディアデバイス２１０が、スピーカ２９７ａ〜２９７ｅに対するユーザデバイス２０５ｂの位置を取得すると、メディアデバイス２１０は、スピーカ２９７ａ〜２９７ｅに対するユーザ２１２の位置を取得することができる。

【0015】

ユーザデバイス２０５ａは、三角測量法によって、スピーカ２９７ａ〜２９７ｅに対する相対的な位置を求めることができる。例えば、ユーザデバイス２０５ａは、ユーザデバイス２０５ａのマイクロフォンを使用して、スピーカ２９７ａ、スピーカ２９７ｂ、スピーカ２９７ｄ及びスピーカ２９７ｅからのオーディオ較正信号を受信することができる。受信したオーディオ較正信号に基づいて、ユーザデバイス２０５ａは、例えば三角測量法によって、スピーカ２９７ａ〜２９７ｅに対して相対的なユーザデバイス２０５ａの位置を求めることができる。図示されているようなコネクション２５５ａを介して、ユーザデバイス２０５ａをメディアデバイス２１０に接続することができる。幾つかの実施の形態においては、ユーザデバイス２０５ａは、求めた位置をメディアデバイス２１０に伝送することができる。ユーザデバイス２０５ｂは、ユーザデバイス２０５ｂのマイクロフォンを使用して、スピーカ２９７ａ、スピーカ２９７ｂ、スピーカ２９７ｃ及びスピーカ２９７ｅからのオーディオ較正信号を受信することができる。受信したオーディオ較正信号に基づいて、ユーザデバイス２０５ｂは、例えば三角測量法によって、スピーカ２９７ａ〜２９７ｅに対して相対的なユーザデバイス２０５ｂの位置を求めることができる。幾つかの実施の形態においては、図示されているようなコネクション２５５ｂを介して、ユーザデバイス２０５ｂをメディアデバイス２１０に接続することができる。幾つかの実施の形態において、ユーザデバイス２０５ｂはコネクション２５５ｂを介して、自身の位置をメディアデバイス２１０に伝送することができる。別の実施の形態においては、ユーザデバイス２０５ｂが、例えば三角測量法によってユーザデバイス２０５ｂの位置を求めるために、較正信号を受信して、コネクション２５５ｂを介して、情報をメディアデバイス２１０に伝送することができる。

【0016】

図３には、本発明の１つの実施の形態による、図１のシステム１００を使用する例示的な環境３００が示されている。オーディオはユーザ３１１及びユーザ３１２に提供されることを明示的に示していることを言及しておく。図３において、ユーザデバイス２０５ａ及び２０５ｂは図示していない。図３に示されているように、ユーザ３１１は、第１の位置にいて、第１のオーディオコンテンツ３５６を受信する。ユーザ３１２は、第２の位置にいて、第２のオーディオコンテンツ３５８を受信する。

【0017】

第１のオーディオコンテンツ３５６は、ユーザ３１１によって選択された言語のダイアログを含むことができ、また、その他のオーディオコンテンツ、例えば音楽及びエフェクトも含むことができる。幾つかの実施の形態において、ユーザ３１１は通常のオーディオプロファイルを選択することができる。ここで、通常のオーディオプロファイルとは、オーディオコンテンツ１０７から変更されていないレベルでオーディオをユーザ３１１に提供する選択を表す。第２のオーディオコンテンツ３５８は、ユーザ３１２によって選択された言語のダイアログを含むことができ、また、その他のオーディオコンテンツ、例えば音楽及びエフェクトも含むことができる。幾つかの実施の形態において、ユーザ３１２は通常のオーディオプロファイルを選択することができる。ここで、通常のオーディオプロファイルとは、オーディオコンテンツ１０７から変更されていないレベルでオーディオ部分をユーザ３１２に提供する選択を表す。

【0018】

各スピーカ３９７ａ〜３９７ｅは、キャンセレーションオーディオ３５７を送信することができる。キャンセレーションオーディオ３５７は、スピーカ３９７ａ、スピーカ３９７ｂ、スピーカ３９７ｃ、スピーカ３９７ｄ及びスピーカ３９７ｅから送信されるオーディオコンテンツの一部を打ち消すことができる。幾つかの実施の形態において、キャンセレーションオーディオ３５７は、第１のオーディオコンテンツ３５６の一部又は第２のオーディオコンテンツ３５８の一部を完全に打ち消すことができる。例えば、第１のオーディオコンテンツ３５６が第１の言語のダイアログを含んでおり、且つ、第２のオーディオコンテンツ３５８が第２の言語のダイアログを含んでいる場合、キャンセレーションオーディオ３５７は、第１のオーディオコンテンツ３５６の第１の言語部分を完全に打ち消すことができ、それによって、ユーザ３１２は第２の言語のダイアログだけを受信する。幾つかの実施の形態において、キャンセレーションオーディオ３５７は、第１のオーディオコンテンツ３５６の一部又は第２のオーディオコンテンツ３５８の一部を部分的に打ち消すことができる。例えば、第１のオーディオコンテンツ３５６が、高められたレベルで第１の言語のダイアログを含んでおり、且つ、第２のオーディオコンテンツ３５８が、通常のレベルで第１の言語のダイアログを含んでいる場合、キャンセレーションオーディオ３５７は、第１のオーディオコンテンツ３５６のダイアログ部分を部分的に打ち消して、適切なレベルでユーザ３１２にダイアログを提供することができる。

【0019】

図４には、本発明の１つの実施の形態による、パーソナライズされたオーディオを提供するための方法のフローチャート４００が例示的に示されている。方法はステップ４０１において始まり、オーディオアプリケーションはオーディオコンテンツ１０７を受信する。幾つかの実施の形態において、オーディオコンテンツ１０７は、複数のオーディオトラック、例えば音楽トラック、ダイアログトラック、エフェクトトラック、周囲音トラック、背景音トラック等を含むことができる。別の実施の形態においては、オーディオコンテンツ１０７が、１つのオーディオトラックにおいてユーザに再生されるメディアに関連付けられた全てのオーディオを含むことができる。

【0020】

ステップ４０２においては、メディアデバイス１１０が、スピーカ１９７を使用してオーディオコンテンツ１０７の第１のオーディオコンテンツを再生するための、第１のユーザデバイスからの第１の再生リクエストを受信する。幾つかの実施の形態において、第１のユーザデバイスはスマートフォン、タブレットコンピュータ、又は、再生リクエストをメディアデバイス１１０に送信し、且つ、メディアデバイス１１０から送信される較正信号を受信することに適している、マイクロフォンを含むその他のハンドヘルド型のデバイスであって良い。第１の再生リクエストは、第１のユーザデバイスからメディアデバイス１１０に送信される無線信号であって良い。幾つかの実施の形態において、メディアデバイス１１０は、ユーザデバイス１０５におけるアプリケーションソフトウェアの起動をユーザに促す信号をユーザデバイス１０５に送信することができる。ユーザデバイス１０５の位置を求める際にアプリケーションソフトウェアを使用することができ、また、ユーザはオーディオセッティング、例えば言語及びオーディオプロファイルを選択するためにアプリケーションソフトウェアを使用することができる。

【0021】

ステップ４０３においては、メディアデバイス１１０が、第１の再生リクエストに応答して、複数のスピーカの各スピーカに対する、第１のユーザデバイスの第１のユーザの第１の位置を取得する。幾つかの実施の形態において、ユーザデバイス１０５は、オーディオアプリケーション１４０と共に使用するための較正アプリケーションを含むことができる。較正アプリケーションの起動後に、ユーザデバイス１０５は、メディアデバイス１１０から較正信号を受信することができる。較正信号は、複数のスピーカ、例えばスピーカ１９７から送信されたオーディオ信号であって良く、またユーザデバイス１０５は較正信号を使用して、複数のスピーカ１９７の各スピーカに対して相対的なユーザデバイス１０５の位置を求めることができる。幾つかの実施の形態においては、ユーザデバイス１０５が、各スピーカに対して相対的な位置をメディアデバイス１１０に供給する。別の実施の形態においては、ユーザデバイス１０５が、ユーザデバイス１０５のマイクロフォンを使用して、較正信号を受信し、また、処理のために情報をメディアデバイス１１０に送信することができる。幾つかの実施の形態において、メディアデバイス１１０は、ユーザデバイス１０５から受信した情報に基づき、スピーカ１９７に対して相対的なユーザデバイス１０５の位置を求めることができる。

【0022】

メディアデバイス１１０から送信された較正信号を、スピーカ１９７を使用して送信することができる。幾つかの実施の形態において、較正信号は、人間が聴き取ることができるオーディオ信号、例えば、約２０Ｈｚから約２０ｋＨｚまでの間のオーディオ信号であっても良いし、人間が聴き取ることができないオーディオ信号、例えば約２０ｋＨｚよりも高い周波数を有しているオーディオ信号であっても良い。複数のスピーカ１９７の各スピーカに対して相対的なユーザデバイス１０５の位置を求めるために、スピーカ１９７ａ〜１９７ｎは、種々の時点において較正信号を送信することができるか、又は、複数のスピーカ１９７が較正信号を同時に送信することができる。幾つかの実施の形態において、複数のスピーカ１９７の各スピーカから送信される較正信号は、各スピーカ１９７ａ〜１９７ｎから送出された各較正信号のユーザデバイス１０５による区別を実現する、ユニークな較正信号であって良い。各スピーカ１９７ａ〜１９７ｎに対して相対的なユーザデバイス１０５の位置を求めるために較正信号を使用することができ、また、各スピーカ１９７ａ〜１９７ｎに対して相対的なユーザデバイス１０５の位置を更新するために較正信号を使用することができる。

【0023】

幾つかの実施の形態において、スピーカ１９７はワイヤレススピーカであっても良いし、ユーザによって位置を変更することができるモバイルスピーカであっても良い。従って、複数のスピーカ１９７ａ〜１９７ｎの各スピーカの位置を変更することができ、また、複数のスピーカ１９７ａ〜１９７ｎの各スピーカ間の距離も変更することができる。各スピーカ１９７ａ〜１９７ｎの相対的な位置及び／又は各スピーカ１９７ａ〜１９７ｎ間の距離を求めるために、較正信号を使用することができる。各スピーカ１９７ａ〜１９７ｎの相対的な位置及び／又は各スピーカ１９７ａ〜１９７ｎ間の距離を更新するために、較正信号を使用することができる。

【0024】

択一的に、システム１００は、カメラを使用して１人のユーザ又は複数人のユーザの位置を取得、算出及び／又は追跡することができる。幾つかの実施の形態においては、システム１００はカメラ、例えばディジタルカメラを含むことができる。システム１００は、ユーザデバイス１０５の位置を取得し、続いて、ユーザデバイス１０５の位置を、カメラがキャプチャした画像にマッピングすることによって、ユーザの位置を求めることができる。幾つかの実施の形態において、システム１００はカメラ及び認識ソフトウェア、例えば顔認識ソフトウェアを使用して、ユーザの位置を取得することができる。

【0025】

システム１００がユーザの位置を一度取得すると、システム１００はカメラを使用して、ユーザの位置を連続的に追跡することができる、及び／又は、ユーザの位置を周期的に更新することができる。オーディオコンテンツ１０７の再生中にユーザが移動することも考えられるので、ユーザの位置を連続的に追跡すること、又は、ユーザの位置を周期的に更新することは有用であると考えられる。例えば、映画を見ているユーザは、軽食を取りに行って戻って来た後に、その位置が変化している可能性がある。ユーザの位置を追跡及び／又は更新することによって、システム１００は、映画の再生期間全体を通して、パーソナライズされたオーディオをユーザに提供し続けることができる。幾つかの実施の形態においては、ユーザ又はユーザデバイスがオーディオの再生環境、例えば部屋を離れたことを検出するように、システム１００は構成されている。これに応答して、システム１００は、ユーザが部屋に戻ってくるまでそのユーザに対応するパーソナライズされたオーディオの送信を中断することができる。システム１００は、ユーザが移動した場合には、ユーザに自身の位置の更新を促すことができる。ユーザの位置を更新するために、メディアデバイス１１０は較正信号を、例えば２０ｋＨｚよりも高い周波数の信号を送信し、ユーザの更新された位置を取得することができる。

【0026】

更に、部屋のオーディオ品質を求めるために、例えばスピーカ１９７に対して相対的な壁の位置及び部屋の形状を求めるために、較正信号を使用することができる。システム１００は、較正信号を使用して、壁の位置を求めることができ、また室内で音がどのように反響するかを求めることができる。幾つかの実施の形態においては、壁をその他の音源として使用することができる。例えば、エコーを打ち消すのではなく、又は、エコーの打ち消しと関連させて、壁及びその構成を、エコーの低下又は除去のために考慮することができる。システム１００は、周囲環境において音がどのように伝播するかに影響を及ぼす別の要因、例えば空気中の湿度を求めることもできる。

【0027】

ステップ４０４においては、メディアデバイス１１０が、第１のユーザデバイスから第１のオーディオプロファイルを受信する。オーディオプロファイルは、ユーザに提供されるパーソナライズされたオーディオを決定するユーザ選択を含むことができる。例えば、オーディオプロファイルは、言語選択及び／又はリスニングモードを含むことができる。幾つかの実施の形態において、オーディオコンテンツ１０７は、１つの言語の１つのダイアログトラックを含むことができるか、又は、それぞれが異なる言語の複数のダイアログトラックを含むことができる。ユーザデバイス１０５のユーザは、ダイアログトラックを聴く際の言語を選択することができ、またメディアデバイス１１０は、選択された言語のダイアログも含めて、パーソナライズされたオーディオを第１のユーザに提供することができる。第１のユーザが聴く言語は、再生されているメディアのオリジナル言語を含むことができるか、又は、第１のユーザが聴く言語は、再生されているメディアのオリジナル言語とは異なる言語であっても良い。

【0028】

リスニングモードは、ユーザのリスニング経験の質を向上させるように設計されたセッティングを含むことができ、また種々の状況に応じて種々のリスニングモードを使用することができる。システム１００は、向上されたダイアログリスニングモード、アクションプログラム、ドラマプログラムのためのリスニングモード、又はその他のジャンル固有のリスニングモード、標準リスニングモード、及びカスタムリスニングモードを含むことができる。標準リスニングモードは、オリジナルのメディアコンテンツで供給されたオーディオを提供することができる。またカスタムリスニングモードでは、ユーザが、向上させるべきオーディオコンテンツ１０７の部分、例えば音楽、ダイアログ及びエフェクトを規定することができる。

【0029】

ステップ４０５においては、メディアデバイス１１０が、複数のスピーカを使用して、複数のオーディオコンテンツの第２のオーディオコンテンツを再生するための、第２のユーザデバイスからの第２の再生リクエストを受信する。幾つかの実施の形態において、第２のユーザデバイスはスマートフォン、タブレットコンピュータ、又は、再生リクエストをメディアデバイス１１０に送信し、且つ、メディアデバイス１１０から送信される較正信号を受信することに適している、マイクロフォンを含むその他のハンドヘルド型のデバイスであって良い。第２の再生リクエストは、第２のユーザデバイスからメディアデバイス１１０に送信される無線信号であって良い。

【0030】

ステップ４０６においては、メディアデバイス１１０が、第２の再生リクエストに応答して、複数のスピーカの各スピーカに対する、第２のユーザデバイスの第２のユーザの第２の位置を取得する。幾つかの実施の形態において、第２のユーザデバイスは、オーディオアプリケーション１４０と共に使用するための較正アプリケーションを含むことができる。較正アプリケーションの起動後に、第２のユーザデバイスは、メディアデバイス１１０から較正信号を受信することができる。較正信号は、複数のスピーカ、例えばスピーカ１９７から送信されたオーディオ信号であって良く、また第２のユーザデバイスは較正信号を使用して、複数のスピーカ１９７の各スピーカに対して相対的なユーザデバイス１０５の位置を求めることができる。幾つかの実施の形態においては、第２のユーザデバイスが、各スピーカに対して相対的な位置をメディアデバイス１１０に供給することができる。別の実施の形態において、第２のユーザデバイスは、較正信号の受信に関する情報をメディアデバイス１１０に送信することができ、またメディアデバイス１１０は、各スピーカ１９７に対して相対的な第２のユーザの位置を求めることができる。

【0031】

ステップ４０７においては、メディアデバイス１１０が、第２のユーザデバイスから第２のオーディオプロファイルを受信する。第２のオーディオプロファイルは、言語選択及び／又は第２のリスニングモードを含むことができる。第２のオーディオプロファイルの受信後に、ステップ４０８では、メディアデバイス１１０が、第１のオーディオプロファイルに基づき第１のリスニングモードを選択し、また、第２のオーディオプロファイルに基づき第２のリスニングモードを選択する。幾つかの実施の形態においては、第１のリスニングモード及び第２のリスニングモードが同一のリスニングモードであっても良いし、異なるリスニングモードであっても良い。ステップ４０９に進むと、メディアデバイス１１０は、第１のオーディオプロファイルに基づき第１の言語を選択し、また、第２のオーディオプロファイルに基づき第２の言語を選択する。幾つかの実施の形態においては、第１の言語は第２の言語と同一の言語であっても良いし、第１の言語及び第２の言語は異なる言語であっても良い。

【0032】

ステップ４１０においては、システム１００が、第１のオーディオプロファイルと、複数のスピーカの各スピーカに対する第１のユーザデバイスの第１のユーザの第１の位置と、に基づき、複数のオーディオコンテンツの第１のオーディオコンテンツを再生する。またシステム１００は、第２のオーディオプロファイルと、複数のスピーカの各スピーカに対する第２のユーザデバイスの第２のユーザの第２の位置と、に基づき、複数のオーディオコンテンツの第２のオーディオコンテンツを再生する。幾つかの実施の形態において、複数のスピーカによって再生される、複数のオーディオコンテンツの第１のオーディオコンテンツは、第１の言語の第１のダイアログを含むことができ、また、複数のスピーカによって再生される、複数のオーディオコンテンツの第２のオーディオコンテンツは、第２の言語の第２のダイアログを含むことができる。

【0033】

第１のオーディオコンテンツは、複数のスピーカ１９７によって再生される第２のオーディオコンテンツの少なくとも一部を打ち消すキャンセレーションオーディオを含むことができる。幾つかの実施の形態において、キャンセレーションオーディオは、複数のスピーカ１９７によって再生される第２のオーディオコンテンツの一部を部分的に打ち消すことができるか、又は完全に打ち消すことができる。キャンセレーションオーディオの効果を検証するために、システム１００は、ユーザデバイス１０５を使用して、ユーザにそのユーザには聞こえるべきではないオーディオトラックが聞こえているか否か、例えばユーザには選択した言語以外の言語のダイアログが聞こえているか否かを指示することをユーザに促すことができる。幾つかの実施の形態においては、付加的な主観的フィードバック、つまり音楽は十分な音量であるか否かを提供するようにユーザを促すことができる。

【0034】

上記の記載からは、本発明の構想から逸脱することなく、本明細書において開示した構想を実現するために種々の技術を使用できることは明らかである。更に、種々の構想を、特定の実施の形態と関連させて説明したが、当該技術分野に属する当業者であれば、本発明の構想から逸脱することなく、形態及び詳細に関して種々の変更を行えることが分かる。例えば、上述の実施の形態は、全ての態様において例示的なものであって、制限的なものではないとみなされるべきである。また、本願発明は上述の特定の実施の形態に限定されるものではなく、本発明の精神から逸脱することなく、種々の再編成、修正及び置換が可能であると解される。

【図1】

【図2】

【図3】

【図4】