特許 7167104 音声機器及び音声機器のインタラクション方法、機器、記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-10-28

(45)【発行日】2022-11-08

(54)【発明の名称】音声機器及び音声機器のインタラクション方法、機器、記憶媒体

(51)【国際特許分類】

   G06F 3/01 20060101AFI20221031BHJP

   G06F 3/16 20060101ALI20221031BHJP

   G06F 3/0488 20220101ALN20221031BHJP

【ＦＩ】

G06F3/01 510

G06F3/01 570

G06F3/16 630

G06F3/0488

【請求項の数】 13

(21)【出願番号】P 2020141881

(22)【出願日】2020-08-25

(65)【公開番号】P2021082251

(43)【公開日】2021-05-27

【審査請求日】2020-08-25

(31)【優先権主張番号】202010014939.9

(32)【優先日】2020-01-07

(33)【優先権主張国・地域又は機関】CN

(73)【特許権者】

【識別番号】512015127

【氏名又は名称】バイドゥ オンライン ネットワーク テクノロジー（ペキン） カンパニー リミテッド

(73)【特許権者】

【識別番号】521235408

【氏名又は名称】シャンハイ シャオドゥ テクノロジー カンパニー リミテッド

(74)【代理人】

【識別番号】110002952

【氏名又は名称】弁理士法人鷲田国際特許事務所

(72)【発明者】

【氏名】ジャン ジン

(72)【発明者】

【氏名】リ ウェイナン

(72)【発明者】

【氏名】カオ インチャオ

(72)【発明者】

【氏名】リュウ フェン

(72)【発明者】

【氏名】カオ ユシン

(72)【発明者】

【氏名】ユ ジャン

(72)【発明者】

【氏名】カオ ホンウェイ

【審査官】三吉 翔子

(56)【参考文献】

【文献】特開２０１３－１０８８５１（ＪＰ，Ａ）

【文献】特開２０１８－２０６４４１（ＪＰ，Ａ）

【文献】特開２０１７－０５５９３６（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／１６

Ｇ０６Ｆ ３／０４８８

(57)【特許請求の範囲】

【請求項1】

音声機器のインタラクション方法であって、前記方法は音声機器に適用され、前記音声機器が制御機器と通信的に接続され、前記方法は、
受信したウェイクアップメッセージに応答し、前記ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するステップであって、前記第１の対象アプリケーションは前記音声機器にインストールされているアプリケーションソフトウェア又はアプリケーションプラグインであるステップと、
受信した前記制御機器によって送信されたユーザの操作データに応答し、前記ユーザの操作データを第１の制御命令に変換するステップであって、前記第１の制御命令は前記音声機器が直接読み取って実行する命令であるステップと、
前記第１の制御命令に応じ、前記第１の対象アプリケーションが前記第１の制御命令で指示された操作を実行するように制御するステップと、を含み、
受信したウェイクアップメッセージに応答するステップは、受信した前記制御機器のウェイクアップメッセージに応答することを含み、前記制御機器のウェイクアップメッセージは、ユーザが前記制御機器で第２の対象アプリケーションを開始するときに生成されたものであり、
前記第２の対象アプリケーションは、前記制御機器にインストールされた、前記第１の対象アプリケーションに対応し、且つ前記音声機器へデータを伝送できるアプリケーションソフトウェア又はアプリケーションプラグインであることを特徴とする音声機器のインタラクション方法。

【請求項2】

前記音声機器には通信コントローラが設置され、受信した前記制御機器によって送信されたユーザの操作データに応答することは、
前記通信コントローラが受信した、前記制御機器によって送信されたユーザの操作データに応答することを含み、前記制御機器が無線ネットワークで前記ユーザの操作データを送信することを特徴とする請求項１に記載の方法。

【請求項3】

前記ユーザの操作データは、
前記制御機器での前記ユーザによる音声入力、
前記制御機器のシミュレーションインタフェースでの前記ユーザによるタッチ入力、
前記制御機器での前記ユーザによるカメラ収集入力、
前記制御機器での前記ユーザによるセンサ収集入力のうちの任意の１つ又は任意の複数を含むことを特徴とする請求項２に記載の方法。

【請求項4】

前記方法はさらに、
前記制御機器によって送信された第２の制御命令を受信し、前記第２の制御命令に応じ、前記第１の対象アプリケーションが前記第２の制御命令で指示された操作を実行するように制御するステップを含み、前記第２の制御命令は、前記制御機器が検出されたユーザの操作データに応じて生成されたものであることを特徴とする請求項１～請求項３のいずれか１項に記載の方法。

【請求項5】

前記音声機器は画面付き音声機器を含み、前記制御機器はモバイル通信端末を含むことを特徴とする請求項１～請求項４のいずれか１項に記載の方法。

【請求項6】

音声機器であって、前記音声機器が制御機器と通信的に接続され、前記音声機器は、
受信したウェイクアップメッセージに応答し、前記ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第１の処理ユニットであって、前記第１の対象アプリケーションは前記音声機器にインストールされているアプリケーションソフトウェア又はアプリケーションプラグインである第１の処理ユニットと、
受信した前記制御機器によって送信されたユーザの操作データに応答し、前記ユーザの操作データを第１の制御命令に変換するための第２の処理ユニットであって、前記第１の制御命令は前記音声機器が直接読み取って実行する命令である第２の処理ユニットと、
前記第１の制御命令に応じ、前記第１の対象アプリケーションが前記第１の制御命令で指示された操作を実行するように制御するための第３の処理ユニットと、を含み、
第１の処理ユニットは、
受信した前記制御機器のウェイクアップメッセージに応答し、前記制御機器のウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第１の処理サブユニットを含み、
前記制御機器のウェイクアップメッセージは、ユーザが前記制御機器で第２の対象アプリケーションを開始するときに生成されたものであり、
前記第２の対象アプリケーションは、前記制御機器にインストールされた、前記第１の対象アプリケーションに対応し、且つ前記音声機器へデータを伝送できるアプリケーションソフトウェア又はアプリケーションプラグインであることを特徴とする音声機器。

【請求項7】

前記音声機器には通信制御ユニットが設置され、前記第１の処理ユニットは、
前記通信制御ユニットが受信した、前記制御機器によって送信されたユーザの操作データに応答するためのものであり、前記制御機器が無線ネットワークで前記ユーザの操作データを送信することを特徴とする請求項６に記載の音声機器。

【請求項8】

前記ユーザの操作データは、
前記制御機器での前記ユーザによる音声入力、
前記制御機器のシミュレーションインタフェースでの前記ユーザによるタッチ入力、
前記制御機器での前記ユーザによるカメラ収集入力、及び
前記制御機器での前記ユーザによるセンサ収集入力のうちの任意の１つ又は任意の複数を含むことを特徴とする請求項７に記載の音声機器。

【請求項9】

前記音声機器はさらに、
前記制御機器によって送信された第２の制御命令を受信し、前記第２の制御命令に応じ、前記第１の対象アプリケーションが前記第２の制御命令で指示された操作を実行するように制御するための第５の処理ユニットを含み、前記第２の制御命令は、前記制御機器が検出されたユーザの操作データに応じて生成されたものであることを特徴とする請求項６～請求項８のいずれか１項に記載の音声機器。

【請求項10】

前記音声機器は画面付き音声機器を含み、前記制御機器はモバイル通信端末を含むことを特徴とする請求項６～請求項９のいずれか１項に記載の音声機器。

【請求項11】

電子機器であって、
少なくとも１つのプロセッサ、及び
前記少なくとも１つのプロセッサと通信的に接続されたメモリを含み、
前記メモリには前記少なくとも１つのプロセッサによって実行可能な命令が記憶され、前記少なくとも１つのプロセッサが請求項１～請求項５のいずれか１項に記載の方法を実行できるようにさせるために、前記命令が前記少なくとも１つのプロセッサによって実行されることを特徴とする電子機器。

【請求項12】

コンピュータ命令が記憶された非一時的なコンピュータ可読記憶媒体であって、前記コンピュータ命令がコンピュータに請求項１～請求項５のいずれか１項に記載の方法を実行させるためのものであることを特徴とする非一時的なコンピュータ可読記憶媒体。

【請求項13】

コンピュータプログラムであって、前記コンピュータプログラムがコンピュータで実行されると、前記コンピュータに請求項１～請求項５のいずれか１項に記載の方法を実行させることを特徴とするコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本願は、インタラクション技術分野に関し、特に、音声機器及び音声機器のインタラクション方法、機器、記憶媒体に関する。

【背景技術】

【0002】

人工スマート技術の迅速な発展に伴い、音声機器は機能が多様化になっており、広く応用されている。音声機器のインタラクションモードは音声機器の機能や応用に影響を及ぼす重要な要素の１つである。

【0003】

関連技術において、音声機器のインタラクションモードは音声制御とタッチ制御とを含み、そのうち、音声制御は、ユーザが音声機器へ音声命令を送信し、音声機器が音声命令を認識して実行するプロセスを含み、タッチ制御は、ユーザがタッチスクリーンを操作することによって音声機器へ制御命令を送信し、音声機器が制御命令を認識して実行するプロセスを含む。

【0004】

しかしながら、音声制御のインタラクションモードは集約操作シナリオに適せず、タッチ制御のインタラクションモードは遠隔操作シナリオに適せず、音声機器は従来のインタラクションモードがユーザの使用感に支障を与え、音声機器の革新と発展の需要を満たすことができない。

【発明の概要】

【発明が解決しようとする課題】

【0005】

本願の実施例は、集約操作シナリオと遠隔操作シナリオに適されない従来の音声機器インタラクションモードの問題を解決するための音声機器及び音声機器のインタラクション方法、機器、記憶媒体を提供する。

【課題を解決するための手段】

【0006】

第１の態様では、本願は、音声機器のインタラクション方法を提供し、前記方法は音声機器に適用され、前記音声機器が制御機器と通信的に接続され、前記方法は、
受信したウェイクアップメッセージに応答し、前記ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するステップと、
受信した前記制御機器によって送信されたユーザの操作データに応答し、前記ユーザの操作データに応じて第１の制御命令を生成するステップと、
前記第１の制御命令に応じて、前記第１の対象アプリケーションが前記第１の制御命令で指示された操作を実行するように制御するステップと、を含む。

【0007】

受信したウェイクアップメッセージに応じて、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始することによって、ユーザが遠隔に制御して第１の対象アプリケーションを開始することが実現できる。受信した制御機器によって検出されたユーザの操作データに応じて、第１の対象アプリケーションが相応の操作を実行するように制御するための第１の制御命令を生成することによって、音声機器の第１の対象アプリケーションに対する遠隔制御を実現し、音声機器の遠隔操作シナリオを実現し、音声機器に対する集約操作シナリオに適用される。

【0008】

さらに、受信したウェイクアップメッセージに応答するステップは、受信した前記制御機器のウェイクアップメッセージに応答することを含み、前記制御機器のウェイクアップメッセージは、ユーザが前記制御機器で第２の対象アプリケーションを開始するときに生成されるものであり、
前記第２の対象アプリケーションは、前記制御機器にインストールされた、前記第１の対象アプリケーションに対応し、且つ前記音声機器へデータを伝送できるアプリケーションソフトウェア又はアプリケーションプラグインである。

【0009】

ユーザが制御機器で第２の対象アプリケーションを開始した後に、制御機器が、音声機器にインストールされている、第２の対象アプリケーションに対応する第１の対象アプリケーションをウェイクアップするためのウェイクアップメッセージを音声機器へ送信することによって、音声機器の第１の対象アプリケーションに対する遠隔ウェイクアップを実現し、音声機器に対する遠隔操作を実現する。

【0010】

さらに、受信したウェイクアップメッセージに応答するステップは、受信したユーザのウェイクアップメッセージに応答することをさらに含み、
受信した前記ユーザのウェイクアップメッセージに応答し、前記ユーザのウェイクアップメッセージで指示された第１の対象アプリケーションを開始した後に、前記方法はさらに、
前記第１の対象アプリケーションのアイデンティティ識別子が指示されている開始命令をアプリケーションサーバに送信し、前記アプリケーションサーバが前記開始命令を前記端末機器に送信するステップであって、前記アプリケーションサーバと前記端末機器とは長い接続状態であるステップと、
前記端末機器が前記開始命令を受信した後に、前記開始命令に対応する前記第２の対象アプリケーションを開始するステップと、を含む。

【0011】

ユーザが直接に音声機器へウェイクアップメッセージを入力し、音声機器がウェイクアップメッセージに応じて第１の対象アプリケーションを開始した後に、音声機器は、制御機器にインストールされている、第１の対象アプリケーションに対応する第２の対象アプリケーションを開始するための開始命令を制御機器へ送信し、音声機器中の第１の対象アプリケーションと制御機器中の第２の対象アプリケーションとを同期して開始することにより、ユーザの音声機器に対する後続の遠隔操作に実現の基礎を提供する。

【0012】

さらに、前記音声機器には通信コントローラが設置され、受信した前記制御機器によって送信されたユーザの操作データに応答することは、
前記通信コントローラが受信した、前記制御機器によって送信されたユーザの操作データに応答することを含み、前記制御機器が無線ネットワークで前記ユーザの操作データを送信する。

【0013】

音声機器には通信コントローラが設置され、音声機器と制御機器との間の直接データ伝送を実現でき、ユーザの音声機器に対する遠隔操作に実現の基礎を提供する。

【0014】

さらに、前記ユーザの操作データは、
前記制御機器での前記ユーザによる音声入力、
前記制御機器のシミュレーションインタフェースでの前記ユーザによるタッチ入力、
前記制御機器での前記ユーザによるカメラ収集入力、及び
前記制御機器での前記ユーザによるセンサ収集入力のうちの任意の１つ又は任意の複数を含む。

【0015】

利用可能なユーザの操作データが多様化され、制御機器のセンシング能力が十分に利用されるようになり、音声機器のインタラクション能力の向上、及び音声機器の技能種類の拡大には有利である。

【0016】

さらに、前記方法はさらに、
前記制御機器によって送信された第２の制御命令を受信し、前記第２の制御命令に応じて、前記第１の対象アプリケーションが前記第２の制御命令で指示された操作を実行するように制御するステップを含み、前記第２の制御命令は、前記制御機器が検出されたユーザの操作データに応じて生成したものである。

【0017】

制御機器は、検出されたユーザの操作データに応じて、第１の対象アプリケーションが相応の操作を実行するように制御するための第２の制御命令を直接に生成することができ、音声機器に対する遠隔制御モードが柔軟的であり、音声機器のインタラクション能力の向上には有利である。

【0018】

さらに、前記音声機器は画面付き音声機器を含み、前記制御機器はモバイル通信端末を含む。

【0019】

モバイル通信端末のセンシング能力を十分に利用することにより、画面付き音声機器のインタラクションパフォーマンスを効果的に向上させ、画面付き音声機器の技能種類が多様化される。

【0020】

第２の態様では、本願は、音声機器を提供し、前記音声機器が制御機器と通信的に接続され、前記機器は、
受信したウェイクアップメッセージに応答し、前記ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第１の処理ユニットと、
受信した前記制御機器によって送信されたユーザの操作データに応答し、前記ユーザの操作データに応じて第１の制御命令を生成するための第２の処理ユニットと、
前記第１の制御命令に応じ、前記第１の対象アプリケーションが前記第１の制御命令で指示された操作を実行するように制御するための第３の処理ユニットと、を含む。

【0021】

さらに、第１の処理ユニットは、
受信した前記制御機器のウェイクアップメッセージに応答し、前記制御機器のウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第１の処理サブユニットを含み、
前記制御機器のウェイクアップメッセージは、ユーザが前記制御機器で第２の対象アプリケーションを開始するときに生成されたものであり、
前記第２の対象アプリケーションは、前記制御機器にインストールされた、前記第１の対象アプリケーションに対応し、且つ前記音声機器へデータを伝送できるアプリケーションソフトウェア又はアプリケーションプラグインである。

【0022】

さらに、第１の処理ユニットはさらに、
受信したユーザのウェイクアップメッセージに応答し、前記ユーザのウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第２の処理サブユニットを含み、
前記機器はさらに、
前記第１の対象アプリケーションのアイデンティティ識別子が指示されている開始命令をアプリケーションサーバに送信し、前記アプリケーションサーバが前記開始命令を前記端末機器に送信し、前記アプリケーションサーバと前記端末機器とは長い接続状態であり、
前記端末機器が前記開始命令を受信した後に、前記開始命令に対応する前記第２の対象アプリケーションを開始するための第４の処理ユニットを含む。

【0023】

さらに、前記音声機器には通信制御ユニットが設置され、前記第１の処理ユニットは、
前記通信制御ユニットが受信した、前記制御機器によって送信されたユーザの操作データに応答するためのものであり、前記制御機器が無線ネットワークで前記ユーザの操作データを送信する。

【0024】

さらに、前記ユーザの操作データは、
前記制御機器での前記ユーザによる音声入力、
前記制御機器のシミュレーションインタフェースでの前記ユーザによるタッチ入力、
前記制御機器での前記ユーザによるカメラ収集入力、及び
前記制御機器での前記ユーザによるセンサ収集入力のうちの任意の１つ又は任意の複数を含む。

【0025】

さらに、前記機器はさらに、
前記制御機器によって送信された第２の制御命令を受信し、前記第２の制御命令に応じ、前記第１の対象アプリケーションは前記第２の制御命令で指示された操作を実行するように制御するための第５の処理ユニットを含み、前記第２の制御命令は、前記制御機器が検出されたユーザの操作データに応じて生成されたものである。

【0026】

さらに、前記音声機器は画面付き音声機器を含み、前記制御機器はモバイル通信端末を含む。

【0027】

第３の態様では、本願は、電子機器を提供し、
少なくとも１つのプロセッサ、および
前記少なくとも１つのプロセッサと通信的に接続されたメモリを含み、
前記メモリには前記少なくとも１つのプロセッサによって実行可能な命令が記憶され、前記少なくとも１つのプロセッサが第１の態様のいずれか１つの実施形態に記載の方法を実行できるように、前記命令が前記少なくとも１つのプロセッサによって実行される。

【0028】

第４の態様では、本願は、コンピュータ命令が記憶されている非一時的なコンピュータ可読記憶媒体を提供し、前記コンピュータ命令が前記コンピュータに第１の態様のいずれか１つの実施形態に記載の方法を実行させるためのものである。

【発明の効果】

【0029】

本願は、音声機器及び音声機器のインタラクション方法、機器、記憶媒体を開示しており、前記方法は音声機器に適用され、前記音声機器が制御機器と通信的に接続され、前記方法は、受信したウェイクアップメッセージに応答し、前記ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するステップと、受信した前記制御機器によって送信されたユーザの操作データに応答し、前記ユーザの操作データに応じて第１の制御命令を生成するステップと、前記第１の制御命令に応じ、前記第１の対象アプリケーションが前記第１の制御命令で指示された操作を実行するように制御するステップと、を含む。音声機器の第１の対象アプリケーションに対するユーザの遠隔制御を実現し、音声機器の遠隔操作シナリオを実現するとともに、音声機器に対するユーザによる直接操作の必要がなくなり、音声機器の集約型操作シナリオに適用される。

【0030】

上記代表的な形態が持つその他の効果について、以下、具体的な実施例に合わせて説明する。

【図面の簡単な説明】

【0031】

図面は、本解決手段をよりよく理解するためのものであり、本願に対する限定を構成しない。

【図1】本願の実施例による１つの音声機器のインタラクション方法のフローチャートである。

【図1a】本願の実施例による音声機器のインタラクションシナリオの概略図である。

【図2】本願の実施例による他の音声機器のインタラクション方法のフローチャートである。

【図3】本願の実施例による１つの音声機器の構造概略図である。

【図4】本願の実施例による他の音声機器の構造概略図である。

【図5】本願の実施例による１つの音声機器のインタラクション機器の構造概略図である。

【発明を実施するための形態】

【0032】

以下、本願の例示的実施例を図面に合わせて説明し、理解しやすくするために本願の実施例の様々な詳細が含まれているが、それらは例示的なものにすぎないと見なされるべきである。したがって、当業者であれば、本明細書で説明する実施例に対して様々な変更や修正を行うことができ、本願の範囲と主旨から逸脱しないと意識すべきである。同様に、明瞭と簡潔のために、周知の機能と構造の説明は以下に省略されている。

【0033】

本願にかかわる用語の解釈
通信的接続について：通信の伝送インタラクションにより、接続された機器の間で通信を構成し、通信的接続は、有線通信的な接続と無線通信的な接続とを含む。
ＳＤＫについて：Ｓｏｆｔｗａｒｅ Ｄｅｖｅｌｏｐｍｅｎｔ Ｋｉｔ、ソフトウェア開発キット、開発ソフトウェアを支援するための関連ドキュメント、例及びツールのコレクションである。
通信コントローラについて：Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｃｏｎｔｒｏｌ Ｕｎｉｔ、データ通信システムにおいて、データ回路とホストとの間にあるデータ伝送を制御するための通信インタフェース機器のことを指し、略称ＣＣＵである。
Ａｐｐについて：Ａｐｐｌｉｃａｔｉｏｎの略称で、アプリケーションソフトウェアである。
長い接続について：１つの接続では複数のパケットを連続的に送信することができ、接続保持期間内には、パケットが何１つも送信されなかった場合、両方ともリンク検出パケットを送信する必要があり、長い接続は、操作が頻繁である、ポイントツーポイントの通信に多く応用されている。
ＭＤ５アルゴリズムについて：Ｍｅｓｓａｇｅ－Ｄｉｇｅｓｔ Ａｌｇｏｒｉｔｈｍ、メッセージダイジェストアルゴリズムは、広く利用されているパスワードハッシュ関数であり、情報伝送の完全性と一貫性を確保するための１２８ビット（１６バイト）のハッシュ値（ｈａｓｈ ｖａｌｕｅ）を生成することができる。

【0034】

本願の応用シナリオについて：人工スマート技術の迅速な発展に伴い、音声機器は機能が多様化になっており、広く応用されている。音声機器のインタラクションモードは音声機器の機能や応用に影響を及ぼす重要な要素の１つである。関連技術において、音声機器のインタラクションモードは音声制御とタッチ制御とを含み、そのうち、音声制御は、ユーザが音声機器へ音声命令を送信し、音声機器が音声命令を認識して実行するプロセスを含み、タッチ制御は、ユーザがタッチスクリーンを操作することによって音声機器へ制御命令を送信し、音声機器が制御命令を認識して実行するプロセスを含む。

【0035】

しかしながら、音声制御のインタラクションモードは集約操作シナリオに適せず、タッチ制御のインタラクションモードは遠隔操作シナリオに適せず、音声機器の従来のインタラクションモードはユーザの使用感に支障を与え、音声機器の革新と発展の需要を満たすことができない。

【0036】

本願による音声機器及び音声機器のインタラクション方法、機器、記憶媒体は、上記技術問題を解决することを目的とする。

【0037】

図１は、本願の実施例による１つの音声機器のインタラクション方法であり、本方法は音声機器に適用され、音声機器が制御機器と通信的に接続され、図１に示すように、該方法は、以下のステップを含む。

【0038】

ステップ１０１において、受信したウェイクアップメッセージに応答し、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始する。

【0039】

音声機器はウェイクアップメッセージを受信した後に、受信したウェイクアップメッセージに応答し、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始し、第１の対象アプリケーションは音声機器にインストールされたアプリケーションソフトウェアとアプリケーションプログラムとを含み、アプリケーションソフトウェアが音声機器にインストールされている、独立のＡＰＰを含み、アプリケーションプログラムが音声機器にインストールされているプラグイン、ミニプログラムなどを含む。ウェイクアップメッセージには第１の対象アプリケーションのアイデンティティ識別子が含まれ、音声機器がウェイクアップメッセージ中のアイデンティティ識別子に応じ、アイデンティティ識別子に対応する第１の対象アプリケーションを開始する。ウェイクアップメッセージに含まれるアイデンティティ識別子は、第１の対象アプリケーションの唯一の識別コードであり、具体的に、第１の対象アプリケーションのアプリケーションパケット名またはＭＤ５アルゴリズムなどであってもよい。例示的に、音声機器が受信したウェイクアップメッセージは、ユーザの音声命令「フルーツニンジャを開始する」であり、音声機器が音声命令中の主要な情報「フルーツニンジャ」を認識して抽出し、音声命令の意味情報を識別した後に、音声機器は音声命令に応じて対象アプリケーションを開始するための制御命令を生成し、制御命令に応じて「フルーツニンジャ」ＡＰＰを開始する。ウェイクアップメッセージを受信し、ウェイクアップメッセージに応じてウェイクアップメッセージで指示された第１の対象アプリケーションを開始することにより、ユーザにとって、音声機器中の対象アプリケーションを遠隔に開始することが実現でき、音声機器に対する遠隔制御が実現される。

【0040】

ステップ１０２において、受信した制御機器によって送信されたユーザの操作データに応答し、ユーザの操作データに応じて第１の制御命令を生成する。

【0041】

本実施例において、具体的に、音声機器と制御機器とは通信的接続状態であり、通信的接続は主に、無線通信的接続を含み、無線通信的接続は、ＷＩＦＩ、セルラーネットワーク、ブルートゥース（登録商標）、赤外線、ネットワークホットスポットなどを含むが、それらに限定されない。音声機器には通信コントローラが設置され、通信コントローラが実現できる機能は、データ回路でのシリアルビットストリームをキャラクタに組み立て、またはキャラクタをシリアルビットストリームに分割することと、伝送コードと音声機器ホスト内部コードとの変換を実現し、これによって音声機器と制御機器との間の無線通信を実現する。

【0042】

音声機器は制御機器によって送信されたユーザの操作データを受信し、ユーザの操作データは、ユーザが制御機器を操作するときに発したものであり、ユーザの操作データは、制御機器でのユーザによるキー入力、制御機器でのユーザによる音声入力、制御機器のシミュレーションインタフェースでのユーザによるタッチ入力、制御機器でのユーザによるカメラ収集入力、制御機器でのユーザによるセンサ収集入力のうちの任意の１つ又は任意の複数を含む。具体的に、制御機器でのユーザによるキー入力は、ユーザが制御機器のキー、ボタンを利用して入力された情報を含み、制御機器でのユーザによる音声入力は、ユーザが制御機器へ入力した音声情報を含み、制御機器のシミュレーションインタフェースでのユーザによるタッチ入力は、制御機器のシミュレーションインタフェースでのユーザによる手書き、タイピング、触れ押し、スライド、クリックなどの形態を用いたタッチ入力を含み、制御機器でのユーザによるカメラ収集入力は、ユーザが制御機器のカメラ収集によって発生した画像データ、ビデオデータなどを含み、制御機器でのユーザによるセンサ収集入力は、ユーザが制御機器のセンサ収集によって発生した位置、動作、変位、温度などのデータを含む。例示的に、ユーザの操作データは、スマートフォンにおけるジャイロによって検出されたユーザの体感データを含み、具体的に、ユーザ四肢の変位量、変位方向、速度、加速度などの情報を含む。音声機器が受信したユーザの操作データは、多様性と柔軟性があり、これは、音声機器の機能の更なる多様化と応用の更なる広範囲化には有利である。

【0043】

図１ａは、本願の実施例による音声機器のインタラクションシナリオの概略図であり、図１ａに示すように、ユーザによって実行された制御機器に対する操作は揺動操作であり、制御機器は、ユーザの揺動操作による操作データを検出し、具体的に、揺動角度、揺動方向、揺動速度などの情報が含まれ、音声機器は、ユーザ揺動制御機器に応じて生成された操作データによって、第１の対象アプリケーションが相応の操作を実行するように制御するための第１の制御命令を生成するよう、制御機器は検出したユーザの操作データを音声機器に送信する。

【0044】

制御機器によって送信されたユーザの操作データを取得した後に、音声機器が受信したユーザの操作データを認識し、ユーザの操作データに応じて第１の制御命令を生成する。具体的に、音声機器は、制御機器によって送信されたユーザの操作データで構成されたアレイを受信した後に、通信コントローラを利用してユーザの操作データで構成されたアレイを音声機器が認識できるデータに変換し、第１の制御命令を構成する。音声機器がユーザの操作データに応じて第１の制御命令を生成するプロセスは、従来技術を用いて実現されることができ、本願はここで繰り返して説明しない。

【0045】

ステップ１０３において、第１の制御命令に応じ、第１の対象アプリケーションは第１の制御命令で指示された操作を実行するように制御する。

【0046】

本実施例において、具体的に、音声機器は受信したユーザの操作データに応じ、第１の制御命令を生成し、第１の制御命令は、音声機器が直接読み取って実行する命令である。第１の対象アプリケーションは第１の制御命令で指示された操作を実行するように制御し、即ち、第１の対象アプリケーションが端末機器によって検出されたユーザの操作データに対応する操作を実行するように制御し、端末機器でのユーザによる操作が実現され、対応する操作に対する音声機器の第１の対象アプリケーションによる遠隔実行は、音声機器に対するユーザによる遠隔制御を実現し、音声機器に対する遠隔制御の応用シナリオに適用され、音声機器に対するユーザの直接操作を効果的に削減することができる。

【0047】

本実施例は、音声機器のインタラクション方法を提供し、該方法は音声機器に適用され、受信したウェイクアップメッセージに応答することにより、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するステップと、受信した制御機器によって送信されたユーザの操作データに応答し、ユーザの操作データに応じて第１の制御命令を生成するステップと、第１の制御命令に応じ、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御するステップと、を含む。ウェイクアップメッセージを受信した後に、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始することによって、音声機器の対象アプリケーションを遠隔に開始することを実現できる。端末機器によって送信されたユーザの操作データを受信した後に、受信したユーザの操作データに応じ第１の制御命令を生成し、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御することによって、制御機器側でユーザの操作データを検出することを実現し、ユーザの操作データを音声機器に送信することにより、音声機器は、第１の対象アプリケーションがユーザの操作データに対応する操作を実行するように制御することによって、音声機器のユーザによる遠隔制御を実現し、音声機器の遠隔操作シナリオを実現する。音声機器のユーザによる直接操作の必要がなくなり、かつユーザが音声機器を遠隔に操作する操作形態は、柔軟性と多様性があり、音声機器の集約型操作シナリオに適用される。

【0048】

図２は、本願の実施例による他の音声機器のインタラクション方法のフローチャートであり、該方法は音声機器に適用され、図２に示すように、該方法は以下のステップを含む。

【0049】

ステップ２０１において、受信した制御機器又はユーザのウェイクアップメッセージに応答し、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始する。

【0050】

選択的に、ステップ２０１は、受信した制御機器のウェイクアップメッセージに応答することを含み、制御機器のウェイクアップメッセージは、ユーザが制御機器で第２の対象アプリケーションを開始するときに生成されたものであり、第２の対象アプリケーションは、制御機器にインストールされた、第１の対象アプリケーションに対応し、且つ音声機器へデータを伝送できるアプリケーションソフトウェア又はアプリケーションプラグインである。

【0051】

ユーザが制御機器で第２の対象アプリケーションを開始した後に、音声機器はウェイクアップメッセージを受信した後に、第２の対象アプリケーションに対応する第１の対象アプリケーションを開始するよう、第２の対象アプリケーションは音声機器と無線通信方式で接続を確立し、制御機器はウェイクアップメッセージを生成し、ウェイクアップメッセージを音声機器に送信する。第１の対象アプリケーションと第２の対象アプリケーションはそれぞれ、音声機器と制御機器にインストールされた、対応関係があるアプリケーションソフトウェア又はアプリケーションプラグインであり、１つの機器で１つの対象アプリケーションを開始した後に、もう１つの機器でもう１つの対象アプリケーションを同期して開始することを実現するために、第１の対象アプリケーションと第２の対象アプリケーションとに対して「同期開始」と「遠隔制御を許可」と類似するオプション設定を予め開始することを要求する。例えば、第１の対象アプリケーションは音声機器にインストールされている「フルーツニンジャ」のＡＰＰであり、第２の対象アプリケーションは制御機器にインストールされている「フルーツニンジャ」のミニプログラムである。第２の対象アプリケーションが音声機器へデータを直接伝送でき、第２の対象アプリケーションには音声機器のソフトウェア開発キットＳＤＫが集積され、または第２の対象アプリケーションが音声機器と直接通信できるアプリケーションソフトウェアにインストールされたアプリケーションプラグインであることを要求し、例示的に、音声機器はスマートスピーカーであり、制御機器はスマートフォンであり、第２の対象アプリケーションはスマートフォンにおけるスピーカー制御ソフトウェアにインストールされた「フルーツニンジャ」のミニプログラムであると、アプリケーションソフトウェアが音声機器と直接通信できるため、アプリケーションソフトウェアのもとにインストールされたアプリケーションプラグインも音声機器と直接通信できるようになり、このため第２の対象アプリケーションは音声機器へウェイクアップメッセージを直接送信することができる。

【0052】

選択的に、ステップ２０１はさらに、受信したユーザのウェイクアップメッセージに応答することを含み、受信したユーザのウェイクアップメッセージに応答し、ユーザのウェイクアップメッセージで指示された第１の対象アプリケーションを開始した後に、本方法はさらに、第１の対象アプリケーションのアイデンティティ識別子が指示される開始命令をアプリケーションサーバに送信し、アプリケーションサーバが開始命令を端末機器に送信するステップであって、アプリケーションサーバと端末機器とは長い接続状態であるステップと、端末機器は開始命令を受信した後に、開始命令に対応する第２の対象アプリケーションを開始するステップと、を含む。

【0053】

受信したウェイクアップメッセージがユーザのウェイクアップメッセージである場合、ユーザのウェイクアップメッセージで指示された第１の対象アプリケーションを開始する。ユーザのウェイクアップメッセージは、ユーザの音声命令と音声機器でのユーザによる操作命令を含み、ウェイクアップメッセージは、音声機器中の第１の対象アプリケーションを開始するように指示するためのものである。音声機器中の第１の対象アプリケーションを開始するのに成功した後に、ユーザが制御機器を介して音声機器を遠隔制御することを実現するために、このとき、第１の対象アプリケーションに対応する制御機器中の第２の対象アプリケーションを開始する必要がある。

【0054】

音声機器に対するユーザのウェイクアップメッセージを受信した後に、制御機器中の第２の対象アプリケーションを同期して開始するために、音声機器は、無線ネットワークを介して第１の対象アプリケーションのアイデンティティ識別子が含まれた開始命令をクラウドプラットフォームに送信し、クラウドプラットフォームは開始命令をアプリケーションサーバに転送し、アプリケーションサーバと制御機器とは長い接続状態であり、アプリケーションサーバは開始命令を制御機器に転送し、制御機器は第１の対象アプリケーションのアイデンティティ識別子が含まれた開始命令を受信した後に、開始命令に対応する第２の対象アプリケーションを開始する。

【0055】

ステップ２０２において、受信した制御機器によって送信されたユーザの操作データに応答し、ユーザの操作データに応じて第１の制御命令を生成する。

【0056】

本実施例において、具体的に、ユーザが端末機器で操作するとき、端末機器は、音声機器が第１の対象アプリケーションが相応の操作を実行するように制御するための制御命令を生成するよう、ユーザの操作データを検出し、検出されたユーザの操作データを音声機器に送信し、音声機器の第１の対象アプリケーションに対するユーザの遠隔制御を実現する。

【0057】

検出された、端末機器でのユーザによる操作データに応じ、第１の対象アプリケーションが相応の操作を実行するように制御するための制御命令を生成し、制御命令を生成する１つの形態は、端末機器は検出されたユーザの操作データを音声機器に送信し、音声機器は受信したユーザの操作データに応じ、第１の制御命令を生成し、第１の制御命令に応じて第１の対象アプリケーションがユーザの操作データに対応する操作を実行するように制御するプロセスを含む。制御命令を生成するもう１つの形態は、音声機器が第２の制御命令に応じて、第１の対象アプリケーションがユーザの操作データに対応する操作を実行するように制御するよう、端末機器は検出されたユーザの操作データに応じて、第２の制御命令を生成し、第２の制御命令を音声機器に送信するプロセスを含む。

【0058】

例示的に、スマートフォンとスマートスピーカー中の「フルーツニンジャ」のＡＰＰを開始した後に、ユーザがスマートフォンを手持ちしてシェイクの動作をし、スマートフォンに設置されたジャイロを利用してユーザの操作データを検出し、ユーザの操作データは、左から右へのユーザ体感変位方向、３０センチの体感変位量、０.５メートル／秒の速度によって構成されたアレイであり、スマートフォンはユーザの操作データによって構成されたアレイをスマートスピーカーに送信し、スマートスピーカーは受信した、ユーザの操作データによって構成されたアレイに基づいて第１の制御命令を生成し、第１の制御命令に応じて「フルーツニンジャ」のＡＰＰ中のゲームオブジェクトが対応する操作を完成させるように制御する。

【0059】

ステップ２０３において、第１の制御命令に応じ、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御する。

【0060】

本実施例において、具体的に、音声機器は第１の制御命令に応じ、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御し、第１の対象アプリケーションが対応する操作を実行するとき、音声機器はライト級の操作データと操作結果とをアプリケーションサーバにアップロードすると同時に、アプリケーションサーバが配信する操作論理と操作内容を受信する。音声機器中の第１の対象アプリケーションは第１の制御命令で指示された操作を実行するとき、制御機器中の第２の対象アプリケーションは操作中という提示情報を表示する。

【0061】

本実施例において、音声機器は画面付き音声機器を含み、例えば画面付きスマートスピーカー、スマートビデオスピーカーなどを含む。制御機器はモバイル通信端末を含み、例えばスマートフォン、タブレットなどを含む。ユーザはモバイル通信端末を利用することによって操作し、モバイル通信端末はユーザの操作データを収集し、収集したユーザの操作データを画面付きスマートスピーカーに送信し、画面付きスマートスピーカーは受信したユーザの操作データに応じて第１の制御命令を生成し、第１の制御命令に応じて対象アプリケーションが相応の操作を完成させるように制御し、例示的に、ユーザはハンドスティックを手に握ってゲームをし、ハンドスティックはユーザの体感情報を取得し、体感情報をゲーム機に送信することにより、ゲーム機はユーザの体感情報に基づいてゲームオブジェクトの操作を制御するための制御命令を生成する従来技術と比べて、本実施例において、ユーザはスマートフォンを手に握り、スマートフォンがハンドスティックの役目を果たしており、スマートフォンはユーザの体感情報を取得し、体感情報を画面付きスマートスピーカーに送信し、画面付きスマートスピーカーは体感情報に基づいてゲームオブジェクトの操作を制御するための第１の制御命令を生成する。本方法は、モバイル通信端末のセンシング能力を十分に利用しており、画面付き音声機器のインタラクションパフォーマンスを向上させ、画面付き音声機器の技能種類を多様化させる。

【0062】

本実施例は、もう１つの音声機器のインタラクション方法を提供することにより、該方法は音声機器に適用され、受信した制御機器又はユーザのウェイクアップメッセージに応答することにより、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始し、受信した制御機器によって送信されたユーザの操作データに応答し、ユーザの操作データに応じて第１の制御命令を生成し、第１の制御命令に応じ、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御する。ユーザは、音声機器中の第１の対象アプリケーションを直接ウェイクアップしてもよいが、制御機器中の第２の対象アプリケーションをウェイクアップすることにより、音声機器中の第１の対象アプリケーションを間接にウェイクアップしてもよく、音声機器の第１の対象アプリケーションに対する遠隔ウェイクアップが実現され、音声機器に対する遠隔操作が実現される。音声機器はユーザの操作データに応じて第１の対象アプリケーションが相応の操作を実行するように制御するための第１の制御命令を生成するよう、制御機器は制御機器でのユーザによる操作データを収集し、ユーザの操作データを音声機器に送信し、ユーザは、制御機器で操作することにより、音声機器の第１の対象アプリケーションに対する遠隔制御を実現し、音声機器の遠隔操作シナリオを実現する。音声機器のユーザによる直接操作の必要がなくて、音声機器中の対象アプリケーションが相応の操作を実現するように制御することができるようになり、音声機器の集約操作シナリオに適用され、音声機器に対するユーザの直接操作が効果的に削減され、ユーザの使用感の向上と音声機器の耐用年数の延びには有利である。制御機器のセンシング能力が十分に利用されるようになり、音声機器のインタラクション能力を向上させ、音声機器の技能種類が効果的に多様化され、音声機器機能の革新や発展には有利である。

【0063】

図３は、本願の実施例による１つの音声機器の構造概略図であり、図３に示すように、該音声機器は、
受信したウェイクアップメッセージに応答し、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第１の処理ユニット１と、
受信した制御機器によって送信されたユーザの操作データに応答し、ユーザの操作データに応じて第１の制御命令を生成するための第２の処理ユニット２と、
第１の制御命令に応じ、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御するための第３の処理ユニット３と、を含む。

【0064】

本実施例は、音声機器の構造概略図を提供し、音声機器は、受信したウェイクアップメッセージに応答し、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第１の処理ユニットと、受信した制御機器によって送信されたユーザの操作データに応答し、ユーザの操作データに応じて第１の制御命令を生成するための第２の処理ユニットと、第１の制御命令に応じ、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御するための第３の処理ユニットと、を含む。ウェイクアップメッセージを受信した後に、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始することによって、音声機器の対象アプリケーションを遠隔に開始することを実現できる。端末機器によって送信されたユーザの操作データを受信した後に、受信したユーザの操作データに応じて第１の制御命令を生成し、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御することによって、制御機器側でユーザの操作データを検出することを実現し、ユーザの操作データを音声機器に送信し、音声機器は第１の対象アプリケーションがユーザの操作データに対応する操作を実行するように制御することにより、音声機器に対するユーザによる遠隔制御が実現され、音声機器の遠隔操作シナリオが実現される。音声機器に対するユーザによる直接操作の必要がなくなり、かつユーザが音声機器を遠隔に操作する操作形態は柔軟性と多様性があり、音声機器の集約型操作シナリオに適用される。

【0065】

図４は、本願の実施例による他の音声機器の構造概略図であり、図３のうえで、図４に示すように、
第１の処理ユニット１は、
受信した制御機器のウェイクアップメッセージに応答し、制御機器のウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第１の処理サブユニット１１を含み、
制御機器のウェイクアップメッセージは、ユーザが制御機器で第２の対象アプリケーションを開始するときに生成されたものであり、
第２の対象アプリケーションは、制御機器にインストールされた、第１の対象アプリケーションに対応し、且つ音声機器へデータを伝送できるアプリケーションソフトウェア又はアプリケーションプラグインである。

【0066】

第１の処理ユニット１はさらに、
受信したユーザのウェイクアップメッセージに応答し、ユーザのウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第２の処理サブユニット１２を含み、
音声機器はさらに、
第１の対象アプリケーションのアイデンティティ識別子が指示される開始命令をアプリケーションサーバに送信し、アプリケーションサーバが開始命令を端末機器に送信し、アプリケーションサーバと端末機器とは長い接続状態であり、
端末機器は開始命令を受信した後に、開始命令に対応する第２の対象アプリケーションを開始するための第４の処理ユニット４を含む。

【0067】

音声機器には通信制御ユニットが設置され、第１の処理ユニット１は、
通信制御ユニットが受信した、制御機器によって送信されたユーザの操作データに応答するためのものであり、制御機器が無線ネットワークでユーザの操作データを送信する。

【0068】

ユーザの操作データは、
制御機器でのユーザによる音声入力、
制御機器のシミュレーションインタフェースでのユーザによるタッチ入力、
制御機器でのユーザによるカメラ収集入力、及び
制御機器でのユーザによるセンサ収集入力のうちの任意の１つ又は任意の複数を含む。

【0069】

音声機器はさらに、
制御機器によって送信された第２の制御命令を受信し、第２の制御命令に応じ、第１の対象アプリケーションが第２の制御命令で指示された操作を実行するように制御するための第５の処理ユニット５を含み、第２の制御命令は、制御機器が検出されたユーザの操作データに応じて生成されたものである。

【0070】

音声機器は画面付き音声機器を含み、制御機器はモバイル通信端末を含む。

【0071】

本実施例は、他の音声機器の構造概略図を提供し、音声機器は、受信したユーザ又は制御機器のウェイクアップメッセージに応答し、ウェイクアップメッセージで指示された第１の対象アプリケーションを開始するための第１の処理ユニットと、受信した制御機器によって送信されたユーザの操作データに応答し、ユーザの操作データに応じて第１の制御命令を生成するための第２の処理ユニットと、第１の制御命令に応じ、第１の対象アプリケーションが第１の制御命令で指示された操作を実行するように制御するための第３の処理ユニットと、を含む。ユーザは、音声機器中の第１の対象アプリケーションを直接ウェイクアップしてもよいが、制御機器中の第２の対象アプリケーションをウェイクアップすることにより、音声機器中の第１の対象アプリケーションを間接にウェイクアップしてもよく、音声機器の第１の対象アプリケーションに対する遠隔ウェイクアップが実現され、音声機器に対する遠隔操作が実現される。音声機器はユーザの操作データに応じて第１の対象アプリケーションが相応の操作を実行するように制御するための第１の制御命令を生成するよう、制御機器は制御機器でのユーザによる操作データを収集し、ユーザの操作データを音声機器に送信し、ユーザは、制御機器で操作することにより、音声機器の第１の対象アプリケーションに対する遠隔制御を実現し、音声機器の遠隔操作シナリオを実現する。音声機器に対するユーザによる直接操作の必要がなくて、音声機器中の対象アプリケーションが相応の操作を実現するように制御することができるようになり、音声機器の集約操作シナリオに適用され、音声機器に対するユーザの直接操作が効果的に削減され、ユーザの使用感の向上と音声機器の耐用年数の延びには有利である。制御機器のセンシング能力が十分に利用されるようになり、音声機器のインタラクション能力を向上させ、音声機器の技能種類が効果的に多様化され、音声機器機能の革新や発展には有利である。

【0072】

本願の実施例によれば、本願はさらに、電子機器と可読記憶媒体とを提供する。

【0073】

図５に示すように、本願の実施例の音声機器のインタラクション方法による電子機器のブロック図である。電子機器は、ラップトップコンピューター、デスクトップコンピューター、ワークベンチ、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、メインフレームコンピューター、その他の適切なコンピュータなど、様々な形のデジタルコンピューターを表すことを旨としている。電子機器はさらに、パーソナルデジタルアシスタント、セルラー電話、スマートフォン、ウェアラブルデバイス、その他の類似のコンピューティング機器など、様々な形のモバイルデバイスを表すこともできる。本明細書で示すコンポーネント、それらの接続と関係、及びそれらの機能は例示的ものにすぎず、かつ、本明細書で説明及び/又は要請する本願の実現を制限することを意図するものではない。

【0074】

図５に示すように、該電子機器は、１つ又は複数のプロセッサ５０１、メモリ５０２、および高速インタフェースと低速インタフェースとが含まれる、各コンポーネントを接続するためのインタフェースを含む。各コンポーネントは、異なるバスを使用して相互に接続されており、かつ、汎用マザーボードにインストールされるか、または、必要に応じて他の形態でインストールされてもよい。プロセッサは、外部入力／出力装置（例えば、インタフェースに結合された表示デバイス）でグラフィカルユーザーインターフェイス（ＧＵＩ）のグラフィック情報を表示するためにメモリ又はメモリ上に記憶された命令が含まれる、電子機器内で実行される命令を処理することができる。他の実施形態において、必要に応じて、複数のプロセッサ及び／又は複数のバスは、複数のメモリとともに使用することができる。同様に、複数の電子機器に接続することができ、各機器が必要な操作の一部を提供する（例えば、サーバアレイ、１つのグループのブレードサーバ、または、マルチプロセッサシステムとして作用する）。図５では、１つのプロセッサ５０１を例とする。

【0075】

メモリ５０２は即ち、本願による非一時的なコンピュータ可読記憶媒体である。そのうち、少なくとも１つのプロセッサが本願による音声機器のインタラクション方法を実行するようにさせるために、メモリには少なくとも１つのプロセッサによって実行できる命令が記憶されている。本願の非一時的なコンピュータ可読記憶媒体にはコンピュータ命令を記憶しており、該コンピュータ命令がコンピュータに本願による音声機器のインタラクション方法を実行させるためのものである。

【0076】

メモリ５０２は、非一時的なコンピュータ可読記憶媒体として、非一時的なソフトウェアプログラム、非一時的なコンピュータ実行可能プログラム及びモジュール、例えば本願の実施例における音声機器のインタラクション方法に対応するプログラム命令／モジュール（例えば、図３に示すような第１の処理ユニット１、第２の処理ユニット２及び第３の処理ユニット３）を記憶するためのものである。プロセッサ５０１は、メモリ５０２に記憶された非一時的なソフトウェアプログラム、命令およびモジュールを実行することにより、サーバの様々な機能アプリケーション及びデータ処理を実行し、即ち、上記方法の実施例における音声機器のインタラクション方法を実現する。

【0077】

メモリ５０２はプログラム記憶エリアとデータ記憶エリアとを含んでもよく、そのうち、プログラム記憶エリアは、操作システム、少なくとも１つの機能に必要なアプリケーションプログラムを記憶することができる。データ記憶エリアは、音声機器のインタラクション電子機器の使用によって作成されたデータなどを記憶することができる。なお、メモリ５０２は、高速ランダムアクセスメモリを含んでもよいが、少なくとも１つの磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の非一時的なソリッドステートストレージデバイスなどの非一時的なメモリを含んでもよい。いくつかの実施例において、メモリ５０２は、プロセッサ５０１に対して遠隔に設置されたメモリを含んでもよく、これらの遠隔メモリは、ネットワークを介して音声機器のインタラクション電子機器に接続されることができる。上記ネットワークの実例は、インターネット、イントラネット、ローカルエリアネットワーク、モバイル通信ネットワーク、及びそれらの組み合わせを含むが、それらに限定されない。

【0078】

音声機器のインタラクション方法の電子機器はさらに、入力装置５０３と出力装置５０４とを含んでもよい。プロセッサ５０１、メモリ５０２、入力装置５０３及び出力装置５０４はバスまたは他の方法を介して接続されることができ、図５では、バスを介して接続されることを例としている。

【0079】

入力装置５０３は、入力された数字又はキャラクタ情報を受信し、音声機器のインタラクション電子機器のユーザ設定および機能制御に関連するキーシグナルの入力を呼び起こすことができ、例えば、タッチスクリーン、キーパッド、マウス、トラックパッド、タッチパッド、インディケータロッド、１つ又は複数のマウスボタン、トラックボール、操縦ハンドルなどの入力装置であってもよい。出力装置５０４は、ディスプレイデバイス、補助照明装置（例えば、ＬＥＤ）と触感フィードバック装置（例えば、振動モータ）などを含んでもよい。該ディスプレイデバイスは、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイ及びプラズマディスプレイを含んでもよいが、それらに限定されない。いくつかの実施形態において、ディスプレイデバイスはタッチスクリーンであってもよい。

【0080】

本明細書で説明したシステムと技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、特定用途向けＡＳＩＣ（特定用途向け集積回路）、コンピュータハードウェア、ファームウェア、ソフトウェア、及び／又はこれらの組み合わせで実現されることができる。これらの様々な実施形態は、１つ又は複数のコンピュータプログラムで実施されることを含んでもよく、該１つ又は複数のコンピュータプログラムは、少なくとも１つのプログラマブルプロセッサが含まれたプログラマブルシステムで実行及び／又は解釈されることができ、該プログラマブルプロセッサは、特定用途向け、又は汎用プログラマブルプロセッサであってもよく、記憶システム、少なくとも１つの入力装置、及び少なくとも１つの出力装置から、データと命令を受信し、かつ、該記憶システム、該少なくとも１つの入力装置、及び該少なくとも１つの出力装置にデータと命令を伝送することができる。

【0081】

これらのコンピューティングプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、またはコードとも呼ばれる）は、プログラマブルプロセッサの機械語命令を含み、かつ、アドバンスプロセス及び／又はオブジェクト指向型プログラミング言語、及び／又はアセンブリ言語／機械語を用いて、これらのコンピューティングプログラムを実施することができる。例えば、本明細書で使用された用語の「機械可読媒体」と「コンピュータ可読媒体」は、機械語命令及び／又はデータをプログラマブルプロセッサに提供するための任意のコンピュータプログラム製品、デバイス、及び／又は装置（例えば磁気ディスク、光ディスク、メモリ、プログラマブルロジック装置（ＰＬＤ））のことを指し、機械可読信号とされる機械語命令を受信する機械可読媒体を含む。用語の「機械可読信号」は、機械語命令及び／又はデータをプログラマブルプロセッサに提供するための任意の信号のことを指す。

【0082】

ユーザとのインタラクションを提供するために、本明細書で説明したシステムと技術は、情報をユーザにディスプレイするためのディスプレイ装置（例えば、ＣＲＴ（陰極線管）またはＬＣＤ（液晶ディスプレイ）モニター）、およびキーボードとポインティングデバイス（例えば、マウス又はトラックボール）を有するコンピュータで実施されることができ、該キーボードと該ポインティングデバイスとを通じ、ユーザは、入力をコンピュータに提供することができる。その他の種類の装置も、ユーザとのインタラクションを提供するためのものとして、使用されることができ、例えば、ユーザに提供されるフィードバックが任意の形の感覚フィードバック（視覚フィードバック、聴覚フィードバック、または触感フィードバックなど）であってもよく、かつ、任意の形（サウンド入力、音声入力、または触感入力を含む）をもって、ユーザからの入力を受信することができる。

【0083】

本明細書で説明したシステムと技術は、バックグランドコンポーネントが含まれたコンピューティングシステム（例えば、データサーバとして作用する）で、またはミドルウェアコンポーネントが含まれたコンピューティングシステム（例えば、アプリケーションサーバ）で、またはフロントエンドコンポーネントが含まれたコンピューティングシステム（例えば、図形ユーザインタフェース、またはネットワークブラウザを備えたユーザコンピュータであり、ユーザが、該図形ユーザインタフェース、または該ネットワークブラウザを通じて本明細書で説明したシステムと技術の実施形態とインタラクションをする）で、またはこの種のバックグランドコンポーネント、ミドルウェアコンポーネント、またはフロントエンドコンポーネントの任意の組み合わせを含むコンピューティングシステムで実施される。任意の形のまたは媒体のデジタルデータ通信（例えば、通信ネットワーク）を通じてシステムのコンポーネントを相互接続させることができる。通信ネットワークは、例示的に、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）及びインターネットを含む。

【0084】

コンピューティングシステムは、クライアントとサーバとを含んでよい。クライアントとサーバとは一般的に、相互遠く離れており、通信ネットワークを通じてインタラクションをしている。対応するコンピュータで実行されるとともに、相互クライアント―サーバ関係を有するコンピュータプログラムにより、クライアントとサーバとの関係を築き上げる。

【0085】

本願の実施例において、上記各実施例は、相互参照と参考することができ、同様又は類似したステップおよび用語は、繰り返して説明しない。

【0086】

上記に示した様々な形のフローを用いて、ステップを改めて並べ替えるか、増加するか、又は削除することができると理解されるべきである。例えば、本願に記載した各ステップは、本願で開示された技術的解決手段によって期待される結果さえ実現されれば、並行して実行されてもよいが、順番に従って実行されてもよく、さらに順番を乱して実行されてもよく、本明細書はここで限定しない。

【0087】

上記具体的な実施形態は、本願の保護範囲に対する制限を構成しない。当業者であれば、設計要求とその他の要素に基づいた修正、組み合わせ、下位組み合わせと代替が可能であると理解すべきである。本願の主旨と原則の範囲内に行われるすべての修正、等価置換及び改善が、いずれも本願の保護範囲に含まれるべきである。

【図1】

【図1a】

【図2】

【図3】

【図4】

【図5】