特許 7335979 音声認識を用いて装置を制御する方法、及びこれを具現する装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-08-22

(45)【発行日】2023-08-30

(54)【発明の名称】音声認識を用いて装置を制御する方法、及びこれを具現する装置

(51)【国際特許分類】

   G10L 15/32 20130101AFI20230823BHJP

   G10L 15/00 20130101ALI20230823BHJP

【ＦＩ】

G10L15/32 220Z

G10L15/00 200N

【請求項の数】 14

(21)【出願番号】P 2021569147

(86)(22)【出願日】2019-05-24

(65)【公表番号】

(43)【公表日】2022-08-03

(86)【国際出願番号】 KR2019006252

(87)【国際公開番号】W WO2020241906

(87)【国際公開日】2020-12-03

【審査請求日】2021-11-19

(73)【特許権者】

【識別番号】502032105

【氏名又は名称】エルジー エレクトロニクス インコーポレイティド

【氏名又は名称原語表記】ＬＧ ＥＬＥＣＴＲＯＮＩＣＳ ＩＮＣ．

【住所又は居所原語表記】１２８， Ｙｅｏｕｉ－ｄａｅｒｏ， Ｙｅｏｎｇｄｅｕｎｇｐｏ－ｇｕ， ０７３３６ Ｓｅｏｕｌ，Ｒｅｐｕｂｌｉｃ ｏｆ Ｋｏｒｅａ

(74)【代理人】

【識別番号】100099759

【弁理士】

【氏名又は名称】青木 篤

(74)【代理人】

【識別番号】100123582

【弁理士】

【氏名又は名称】三橋 真二

(74)【代理人】

【識別番号】100165191

【弁理士】

【氏名又は名称】河合 章

(74)【代理人】

【識別番号】100114018

【弁理士】

【氏名又は名称】南山 知広

(74)【代理人】

【識別番号】100159259

【弁理士】

【氏名又は名称】竹本 実

(72)【発明者】

【氏名】パク ユン シク

(72)【発明者】

【氏名】ファン ソン モク

【審査官】山下 剛史

(56)【参考文献】

【文献】特許第６５１１５９０（ＪＰ，Ｂ１）

【文献】特開２００３－３３０４８３（ＪＰ，Ａ）

【文献】特開２００１－１４５１８０（ＪＰ，Ａ）

【文献】韓国登録特許第１０－１９７２５４５（ＫＲ，Ｂ１）

【文献】特開２０１８－１９４８１０（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１５／０１９４１５２（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ１０Ｌ １３／００－９９／００

ＩＥＥＥ Ｘｐｌｏｒｅ

(57)【特許請求の範囲】

【請求項1】

音声が入力される第１の音声認識装置において、
音声が入力される音声入力部と、
機能を提供する機能提供部と
前記音声入力部の入力された音声命令語を分析して、前記音声命令語を実行する第２の音声認識装置を識別し、前記第２の音声認識装置に伝送する制御メッセージを生成する制御部と、
前記制御メッセージを前記第２の音声認識装置又は前記第２の音声認識装置を含む複数の装置に伝送する通信部を含み、
前記第２の音声認識装置は、クラウドサーバ又は外部装置から前記第１の音声認識装置の位置情報又は前記位置情報を含むマップ情報を発信する、音声認識を用いて他の装置を制御する装置。

【請求項2】

前記制御部は、前記第１の音声認識装置の位置情報を含む前記制御メッセージを生成する、請求項１記載の音声認識を用いて他の装置を制御する装置。

【請求項3】

前記制御部は、前記第２の音声認識装置の位置情報を基準に、前記第１の音声認識装置の相対位置情報を生成し、前記制御メッセージは、前記相対位置情報を含む、請求項２記載の音声認識を用いて他の装置を制御する装置。

【請求項4】

前記制御メッセージは、前記第１の音声認識装置により生成された音声ファイルを含む、請求項１記載の音声認識を用いて他の装置を制御する装置。

【請求項5】

複数の音声認識装置の機能に対応する命令語が貯蔵された命令語データベース部をさらに含み、
前記制御部は、前記命令語データベース部を用いて、前記入力された音声命令語から前記第２の音声認識装置の識別情報と制御情報を抽出して、前記制御メッセージを生成する、請求項１記載の音声認識を用いて他の装置を制御する装置。

【請求項6】

音声が入力されて動作する第２の音声認識装置において、
音声が入力される音声入力部と、
機能を提供する機能提供部と、
第１の音声認識装置から制御メッセージを受信する通信部と、
前記制御メッセージに従って前記機能提供部を制御する制御部を含み、
前記通信部は、クラウドサーバ又は外部装置から前記第１の音声認識装置の位置情報又は前記位置情報を含むマップ情報を受信する、音声認識を用いて動作する装置。

【請求項7】

前記制御部は、前記制御メッセージから前記第１の音声認識装置の位置情報を抽出する、請求項６記載の音声認識を用いて動作する装置。

【請求項8】

前記制御部は、前記第２の音声認識装置の位置情報を基準に生成された前記第１の音声認識装置の相対位置情報を前記制御メッセージから抽出する、請求項７記載の音声認識を用いて動作する装置。

【請求項9】

前記制御メッセージは、前記第１の音声認識装置により生成された音声ファイルを含む、請求項６記載の音声認識を用いて動作する装置。

【請求項10】

音声が入力されて動作する第２の音声認識装置において、
音声が入力される音声入力部と、
機能を提供する機能提供部と、
第１の音声認識装置から制御メッセージを受信する通信部と、
前記制御メッセージに従って前記機能提供部を制御する制御部を含み、
前記第２の音声認識装置が空気清浄機又はエアコンである場合、
前記制御部は、前記第１の音声認識装置の周辺に使用者が位置したと判断し、前記空気清浄機又はエアコンの風の方向又は力を調節し、前記制御メッセージが指示する機能を提供するように前記機能提供部を制御する、音声認識を用いて動作する装置。

【請求項11】

音声が入力されて動作する第２の音声認識装置において、
音声が入力される音声入力部と、
機能を提供する機能提供部と、
第１の音声認識装置から制御メッセージを受信する通信部と、
前記制御メッセージに従って前記機能提供部を制御する制御部を含み、
前記第２の音声認識装置がテレビである場合、
前記制御部は、前記第１の音声認識装置との距離を計算する両装置間の距離が一定基準以下である場合、動作を行うことによって、前記制御メッセージが指示する機能を提供するか否かを判断する、音声認識を用いて動作する装置。

【請求項12】

音声が入力される第１の音声認識装置、第３の音声認識装置、及び前記入力された音声命令語に対応する機能を提供する第２の音声認識装置において、
前記第１の音声認識装置は、前記第１の音声認識装置の音声入力部が入力された音声命令語に対応する第１の制御メッセージを伝送するステップと、
前記第３の音声認識装置は、前記第３の音声認識装置の音声入力部が入力された音声命令語に対応する第２の制御メッセージを伝送するステップと、
前記第２の音声認識装置の通信部が、前記第１の制御メッセージ及び前記第２の制御メッセージを受信するステップと、
前記第２の音声認識装置の制御部が、前記第１の音声認識装置及び前記第３の音声認識装置の位置情報に基づいて、前記第１の制御メッセージ及び第２の制御メッセージが指示する機能を提供するステップを含み、
前記通信部は、クラウドサーバ又は外部装置から前記第１の音声認識装置及び前記第３の音声認識装置の位置情報又は前記位置情報を含むマップ情報を受信する、音声認識を用いて装置を制御する方法。

【請求項13】

前記第２の音声認識装置の制御部は、前記第１の制御メッセージから前記第１の音声認識装置の位置情報を抽出し、前記第２の制御メッセージから前記第３の音声認識装置の位置情報を抽出する、請求項１２記載の音声認識を用いて装置を制御する方法。

【請求項14】

前記第１の音声認識装置のインターフェース部が第１作動音を出力するステップと、
前記第２の音声認識装置のインターフェース部が第２作動音を出力するステップと、
前記第２の音声認識装置の制御部が前記第１作動音の大きさを用いて、前記第１の音声認識装置と前記第２の音声認識装置の間の距離を算出するステップをさらに含む、請求項１２記載の音声認識を用いて装置を制御する方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、複数の装置の音声認識及び使用者の位置によって装置を制御する方法、及びこれを具現する装置に関する技術である。

【背景技術】

【0002】

最近、家電製品、家電機器などを制御することにおいて、音声に基づいて制御する技術が多様に提示されている。特に、家電製品や家電機器などの装置を制御することにおいて、人間の音声を速やかに認識させるために、音声認識率を上げるようにマイクを多様に設置するか、音声認識処理モジュールを新開発するなどの研究が続いている。

【0003】

一方、音声認識は、多様な変数が発生する状況で行われなければならないため、このような変数に基づいて、装置が音声認識の正確度を高めることに対応して動作するのが必要である。このため、本明細書では、空間内に配置された複数の家電機器の協業によって、使用者の命令語の発話位置を確認し、これに基づいて機器を制御する方案について提示する。

【発明の概要】

【発明が解決しようとする課題】

【0004】

前述した問題点を解決するために本明細書では、複数の音声認識装置が配置されて、使用者位置情報を入力された音声に基づいて判断する装置と、これを具現する方法を提示する。

【0005】

また、本明細書では、命令語の発話時、使用者の位置を計算して装置等を制御する方案を提示する。

【0006】

また、本明細書では、使用者の位置を正確に判断するために、ロボット掃除機がマップ情報を提供する方案を提示する。

【0007】

本発明の目的は、以上に言及した目的に制限されず、言及していない本発明の他の目的及び長所は、下記の説明によって理解することができ、本発明の実施形態によってより明らかに理解することができる。また、本発明の目的及び長所は、特許請求の範囲に示した手段及びその組み合わせによって実現できることが分かりやすい。

【課題を解決するための手段】

【0008】

本発明の一実施形態による音声認識を用いて他の装置を制御する装置は、音声入力部の入力された音声命令語を分析して、前記命令語を実行する第２の音声認識装置を識別し、前記第２の音声認識装置に伝送する制御メッセージを生成する制御部を含む。

【0009】

本発明の一実施形態による音声認識を用いて他の装置を制御する装置は、前記第１の音声認識装置の位置情報を前記制御メッセージに含ませる。

【0010】

本発明の一実施形態による音声認識を用いて他の装置を制御する装置は、音声入力部の入力された音声ファイルを前記制御メッセージに含ませる。

【0011】

本発明の一実施形態による音声認識を用いて他の装置を制御する装置は、複数の音声認識装置の機能に対応する命令語が貯蔵された命令語データベース部をさらに含む。

【0012】

本発明の一実施形態による音声認識を用いて動作する装置は、第１の音声認識装置から制御メッセージを受信する通信部と、前記制御メッセージに従って前記機能提供部を制御する制御部とを含む。

【0013】

本発明の一実施形態による音声認識を用いて動作する装置が、空気清浄機又はエアコンである場合、装置の制御部は、第１の音声認識装置の周辺に使用者が位置したと判断し、制御メッセージが指示する機能を提供するように前記機能提供部を制御する。

【0014】

本発明の一実施形態による音声認識を用いて装置を制御する方法は、音声が入力される第１の音声認識装置、第３の音声認識装置、及び前記入力された音声命令語に対応する機能を提供する第２の音声認識装置において、前記第１の音声認識装置は、前記第１の音声認識装置の音声入力部が入力された音声命令語に対応する第１の制御メッセージを伝送するステップ、前記第３の音声認識装置は、前記第３の音声認識装置の音声入力部が入力された音声命令語に対応する第２の制御メッセージを伝送するステップ、前記第２の音声認識装置の通信部が、前記第１の制御メッセージ及び前記第２の制御メッセージを受信するステップ、及び前記第２の音声認識装置の制御部が、前記第１の音声認識装置及び前記第２の音声認識装置の位置情報に基づいて、前記第１の制御メッセージ及び第２の制御メッセージが指示する機能を提供するステップとを含む。

【発明の効果】

【0015】

本発明の実施形態を適用する場合、複数の音声認識装置が配置されて、使用者位置情報を、入力された音声に基づいて装置等が判断することができる。

【0016】

本発明の実施形態を適用する場合、命令語の発話時、使用者の位置を計算して、各装置が動作することができる。

【0017】

本発明の実施形態を適用する場合、使用者の位置を正確に判断するために、ロボット掃除機がマップ情報を提供することができる。

【0018】

本発明の効果は、前述した効果に限定されず、本発明の当業者らは、本発明の構成から本発明の様々な効果を容易に想到することができる。

【図面の簡単な説明】

【0019】

【図1】本発明の一実施形態による音声認識装置の構成を示す図面。

【図2】本発明の一実施形態による音声認識装置等が配置された構成を示す図面。

【図3】本発明の一実施形態によるロボット掃除機が保有した位置情報を用いて、使用者の位置に基づく装置制御過程を示す図面。

【図4】本発明の一実施形態による複数の音声認識装置が、発話者の入力した音声命令語を処理する過程を示す図面。

【図5】本発明の一実施形態による各々の装置が自分の位置を共有するために作動音を実行する過程を示す図面。

【図6】本発明の一実施形態によるエアコン又は空気清浄機の動作過程を示す図面。

【図7】本発明の一実施形態によるテレビ動作過程を示す図面。

【発明を実施するための形態】

【0020】

以下、図面を参照して、本発明の実施形態について、本発明の属する技術分野における通常の知識を有する者が容易に実施できるように詳説する。本発明は、色々と異なる形態に具現され得、ここに説明する実施形態に限定されない。

【0021】

本発明を明確に説明するために説明と関係ない部分は略いており、全明細書における同一又は類似の構成要素に対しては同じ参照符号を付する。また、本発明の一部の実施形態を例示的な図面を参照して詳説する。各図面の構成要素に参照符号を付することにおいて、同じ構成要素に対しては、たとえ他の図面上に示されても、可能な限り同じ符号を有し得る。また、本発明の説明において、係る公知の構成又は機能に対する具体的な説明が本発明の要旨を曖昧にすると判断される場合には、その詳細な説明を省略することができる。

【0022】

本発明の構成要素を説明するにあたって、第１、第２、Ａ、Ｂ、（ａ）、（ｂ）などの用語を使うことができる。かかる用語は、その構成要素を他の構成要素と区別するためであり、その用語によって該構成要素の本質、順番、順序又は個数などが限定されない。ある構成要素が他の構成要素に「連結」、「結合」又は「接続」されると記載されている場合、その構成要素は、その他の構成要素に直接に連結されるか又は接続され得るが、各構成要素の間に他の構成要素が「介在」するか、各構成要素が他の構成要素を介して「連結」、「結合」又は「接続」され得ると理解しなければならない。

【0023】

また、本発明の具現において、説明の便宜のため構成要素を細分化して説明することができるが、これら構成要素が一装置又はモジュール内に具現され得、あるいは一構成要素が複数の装置又はモジュールに分けて具現され得る。

【0024】

本明細書における特定の空間内に配置されて、所定の機能を行う家電製品、家電機器などをいずれも装置と通称する。装置のうち、音声認識を行う装置を音声認識装置と称する。また、特定の空間内に配置される二以上の装置は、通信機能を使って制御メッセージを送受信することができる。

【0025】

本明細書における使用者は、装置に設定された命令語を音声で発話して、装置を動作させることができる。命令語は、装置の動作を指示するものであって、装置の分類によって多様に構成され得る。一実施形態として、命令語は、装置のオン／オフを制御するか、装置に構成された特定の機能を行うことを指示することができる。これは、装置別に多様に構成され得る。

【0026】

また、命令語は、起動命令語と制御命令語に細分され得る。制御命令語は、装置の動作を制御する命令語である。制御命令語は、「つけて」、「消して」、「弱風」などのように、装置別に装置の機能を制御する命令語に相当する。

【0027】

起動命令語は、装置が制御命令語を受信できるように装置に知らせる機能を提供する。一実施形態として、起動命令語は、装置の分類的名称（「テレビ」、「ラジオ」、「冷蔵庫」）になるか、装置のブランド（「フィセン」、「トロム」）、又は感嘆詞や会話体の単語（「おい」、「ここ」）になり得る。

【0028】

使用者の生活空間内には複数の装置が配置され得る。よって、本明細書では、複数の音声認識装置（ｄｅｖｉｃｅ）に装着されたマイクアレイ（ａｒｒａｙ）を活用する。使用者が命令語の発話時、音声認識装置のうち、使用者の位置を把握することによって近距離装置が活性化され、使用者及び装置の位置情報を活用して自動に家電製品を制御できるようにする。

【0029】

図１は、本発明の一実施形態による音声認識装置の構成を示す。音声認識装置は、使用者が発話した命令語を入力されて、音声認識装置が直接動作するか、あるいは命令語に含まれた対象装置を確認して、対象装置に動作を指示することができる。

【0030】

音声入力部１１０は、音声が入力される。機能提供部１３０は、所定の機能を提供する。例えば、音声認識装置が冷蔵庫である場合、機能提供部１３０は、冷蔵室及び冷凍室の冷蔵／冷凍機能を提供する。音声認識装置がエアコンである場合、機能提供部１３０は、空気を吐出し、空気吐出の量と方向を提供する。音声認識装置が空気清浄機である場合、機能提供部１３０は、空気を吸入する機能と、吸入した空気を清浄させる機能を提供する。

【0031】

通信部１８０は、他の装置又は外部のクラウドサーバと通信を行うことができる。クラウドサーバは、装置等の位置情報を提供するか、入力された音声命令語をテキストに変換することができる。また、制御部１５０が別途音声認識機能を提供できない場合、クラウドサーバは、入力された音声命令語に対する音声認識機能を提供することができる。

【0032】

第１の音声認識装置が音声命令語を入力されて、第２の音声認識装置に伝送する実施形態における第１の音声認識装置の制御部１５０は、音声入力部１１０の入力された音声命令語を分析して命令語を実行する第２の音声認識装置を識別する。そして、第１の音声認識装置の制御部１５０は、第２の音声認識装置に伝送する制御メッセージを生成する。

【0033】

第１の音声認識装置の通信部１８０は、制御メッセージを第２の音声認識装置又は第２の音声認識装置を含む複数の装置に伝送する。複数伝送するときは、ブロードキャスティング方式により伝送することができる。

【0034】

第１の音声認識装置が音声命令語を入力されて、第２の音声認識装置に伝送する実施形態における第２の音声認識装置の通信部１８０は、第１の音声認識装置から制御メッセージを受信する。そして、第２の音声認識装置の制御部１５０は、制御メッセージに従って機能提供部１３０を制御する。

【0035】

制御メッセージは、第１の音声認識装置の位置情報を含む。または、制御メッセージは、第２の音声認識装置の位置情報を基準に生成された前記第１の音声認識装置の相対位置情報を含む。

【0036】

よって、第１の音声認識装置の制御部１５０は、第１の音声認識装置の位置情報（または、前述した相対位置情報）を前記制御メッセージに含ませる。すなわち、前記制御メッセージは、位置情報を含むように生成される。第２の音声認識装置の制御部１５０は、受信された制御メッセージから第１の音声認識装置の位置情報（または、前述した相対位置情報）を抽出することができる。

【0037】

また、第１の音声認識装置の制御部１５０は、別途第１の音声認識装置の位置情報（または、前述した相対位置情報）を制御メッセージに含ませなくても、第２の音声認識装置の制御部１５０は、クラウドサーバや外部装置から第１の音声認識装置の位置情報又は前記位置情報を含むマップ情報を受信することができる。

【0038】

命令語データベース部１７０は、複数の音声認識装置の機能に対応する命令語を貯蔵する。該音声認識装置の機能に対応する命令語のほかにも、他の装置の機能に対応する命令語をさらに貯蔵することができる。この場合、音声認識装置は、入力された命令語がどの装置をターゲットとするかを確認することができる。

【0039】

すなわち、第１の音声認識装置の制御部１５０は、命令語データベース部１７０を用いて、入力された音声命令語から第２の音声認識装置の識別情報と制御情報を抽出して、制御メッセージを生成することができる。

【0040】

図１における音声認識装置は、入力された命令語が該装置自体に対する命令語である場合、命令語に対応する機能を提供する。このとき、命令語を発話した使用者の位置を音声認識装置又は他の装置によって確認することができる。

【0041】

他の実施形態として、音声認識装置は、入力された命令語が該装置ではない他の装置に対する命令語である場合、命令語を実行する装置に命令語を伝送することができる。

【0042】

インターフェース部１９０は、外部に音や文字、グラフィックなどの情報を出力するか、外部のリモートコントローラから制御信号を入力される。

【0043】

以下、音声認識装置が動作するプロセスを考察する。

【0044】

図２は、本発明の一実施形態による音声認識装置等が配置された構成を示す。空間が壁と門に分けられて、厨房に冷蔵庫１００ａが配置された状態である。居間に空気清浄機１００ｂ、ＡＩスピーカ１００ｃ、エアコン１００ｄ、ロボット掃除機１００ｅが配置された状態である。使用者（つまり、発話者）１は、冷蔵庫の周辺に立っている。１００ａ～１００ｅは、いずれも音声認識機能を行う音声認識装置に属する。

【0045】

図２における発話者１が、「Ｈｉ、ＬＧ、エアコンつけて！」と命令語を入力する。命令語を細分すると、「Ｈｉ、ＬＧ」は起動命令語であり、「エアコンつけて！」は制御命令語である。

【0046】

発話者１の命令語は、冷蔵庫１００ａの音声入力部１１０に入力される。冷蔵庫１００ａが音声で命令語を入力されており、入力された命令語を冷蔵庫１００ａが分析して音声認識を行う。冷蔵庫１００ａは、発話者１がエアコンの動作を命令したことを確認する。

【0047】

また、冷蔵庫１００ａは、エアコン１００ｄ又は他の音声認識装置１００ｂ，１００ｃ，１００ｅのうちいずれか以上にエアコンの動作が指示されたという制御メッセージを伝送する。このとき、制御メッセージは、発話者１が冷蔵庫１００ａの周辺にいるという情報を含む。

【0048】

冷蔵庫１００ａは、制御メッセージをエアコン１００ｄに直接伝送することができる。または、冷蔵庫１００ａは、制御メッセージをブロードキャスティング方式により伝送し、空間内の音声認識装置がいずれもこれを受信することができる。

【0049】

または、冷蔵庫１００ａは、入力された命令語をＡＩスピーカ１００ｃに伝送することができる。

【0050】

エアコン１００ｄは、冷蔵庫の位置を予め貯蔵することもでき、ＡＩスピーカ１００ｃ又はロボット掃除機１００ｅによって冷蔵庫の位置を受信することができる。例えば、ロボット掃除機１００ｅが空間を移動しながら掃除する過程で、各々の家電製品や空間の配置状態を貯蔵することができる。

【0051】

また、ロボット掃除機１００ｅが空間を学習する過程で、装置（冷蔵庫、空気清浄機、エアコンなど）の位置を反映したマップを生成することができる。そして、マップに冷蔵庫の位置が貯蔵され得る。

【0052】

例えば、使用者がロボット掃除機に、過去では、「冷蔵庫の周辺を掃除しなさい」と命令語を入力して、ロボット掃除機を冷蔵庫１００ａの周辺に置くことができる。または、ロボット掃除機の生成したマップに使用者又は外部における特定の地点を冷蔵庫１００ａと設定することができる。

【0053】

すなわち、予め入力された空間に対する事物等の位置情報に基づいて、ロボット掃除機１００ｅが空間に対する情報を確保した場合、ロボット掃除機１００ｅは、冷蔵庫１００ａの位置とエアコン１００ｄの位置を保有することができる。

【0054】

よって、ロボット掃除機１００ｅは、冷蔵庫１００ａの位置情報又はエアコン１００ｄを基準に、冷蔵庫１００ａの相対的位置情報をエアコン１００ｄに提供することができる。

【0055】

エアコン１００ｄは、冷蔵庫１００ａの位置情報を用いて使用者の位置情報を確認し、風向と風量を制御して、使用者に向かって空気を送り出すことができる。

【0056】

図３は、本発明の一実施形態によるロボット掃除機が保有した位置情報を用いて、使用者の位置に基づく装置制御過程を示す。図２の実施形態のように、冷蔵庫１００ａのように音声が入力される第１の音声認識装置１００ｉ、ロボット掃除機１００ｅ、図２におけるエアコン１００ｄのように、音声で入力された命令語を実行する第２の音声認識装置１００ｗで構成される。

【0057】

第１の音声認識装置１００ｉは、発話者１から第２の音声認識装置１００ｗを制御するように命令する音声命令語を入力される（Ｓ１１）。そして、入力された命令語を変換して、制御メッセージを生成する（Ｓ１２）。第１の音声認識装置１００ｉは、制御メッセージを他の装置等に伝送する（Ｓ１３）。このとき、制御メッセージは、ブロードキャスティング方式により伝送されるか、第２の音声音声認識装置１００ｗに１：１で伝送され得る。

【0058】

ここで、第１の音声認識装置１００ｉ又は第２の音声認識装置１００ｗは、ロボット掃除機１００ｅから予め第１の音声認識装置１００ｉの位置情報を受信することができる（Ｓ１０ａ，Ｓ１０ｂ）。この場合、制御メッセージは、第１の音声認識装置１００ｉの位置情報を含んでいてもよい。

【0059】

または、Ｓ１３の伝送がブロードキャスティングである場合、ロボット掃除機１００ｅは、Ｓ１３の伝送状態を確認して、第２の音声認識装置１００ｗに第１の音声認識装置１００ｉの位置を伝達することができる（Ｓ１０ｃ）。または、クラウドサーバ３００が各音声認識装置の位置情報を音声認識装置等に伝送することができる。

【0060】

第２の音声認識装置１００ｗは、制御メッセージ及び第１の音声認識装置に基づいて動作する（Ｓ１４）。例えば、第１の音声認識装置１００ｉにおける「エアコンつけて！」という命令語から算出された制御メッセージが伝達されると、第２の音声認識装置１００ｗは、第１の音声認識装置１００ｉの方に空気を送り出す。

【0061】

図３におけるロボット掃除機１００ｅのほかにも、クラウドサーバ３００が各々の音声認識装置の位置情報を貯蔵し、これをさらに音声認識装置等に提供することができる。このとき、クラウドサーバ３００は、各音声認識装置を基準に他の音声認識装置等の位置を相対的な位置情報として提供することができる。または、クラウドサーバ３００は、各々の音声認識装置の位置情報を含むマップ情報を伝送し、音声認識装置等の通信部１８０がこれを受信することができる。

【0062】

図４は、本発明の一実施形態による複数の音声認識装置が発話者の入力した音声命令語を処理する過程を示す。

【0063】

図２の空間で発話者が音声で命令語を発話する場合、発話者に最も近く配置された冷蔵庫１００ａに入力された命令語の音の大きさが、これより遠く配置された空気清浄機１００ｂに入力された命令語の音の大きさよりも大きい。

【0064】

よって、二以上の音声認識装置に音声が入力された場合、入力された音声の大きさを制御メッセージに含ませる。

【0065】

図４における第１の音声認識装置１００ｉと第３の音声認識装置１００ｊが音声命令語を入力される（Ｓ２１ｉ，Ｓ２１ｊ）。各々の装置は、音声命令語を変換して、制御メッセージを生成する。このとき、各装置１００ｉ，１００ｊは、制御メッセージの生成時、各装置１００ｉ，１００ｊの入力された音声の音の大きさ情報を含ませる（Ｓ２２ｉ，Ｓ２２ｊ）。

【0066】

各装置１００ｉ，１００ｊは、第２の音声認識装置１００ｗに制御メッセージを伝送する（Ｓ２３ｉ，Ｓ２３ｊ）。第２の音声認識装置１００ｗは、制御メッセージ及び制御メッセージに含まれた音声の音の大きさに基づいて動作する（Ｓ２４）。

【0067】

例えば、第１の音声認識装置１００ｉの入力された音の大きさが５であり、第３の音声認識装置１００ｊの入力された音の大きさが３である場合、第２の音声認識装置１００ｗは、第１の音声認識装置１００ｉの周辺で使用者が発話したと判断する。そして、第２の音声認識装置１００ｗは、第１の音声認識装置１００ｉを使用者の位置と設定して、制御メッセージに含まれた所定の機能を行うことができる。

【0068】

ここで、第２の音声認識装置１００ｗは、図３のＳ１０ａ、Ｓ１０ｂ、Ｓ１０ｃなどの過程を通じて、各装置の位置情報を受信して貯蔵することができる。または、第２の音声認識装置１００ｗは、ＡＩスピーカ１００ｃ又は外部に配置されたクラウドサーバから各装置の位置情報を受信して貯蔵することができる。

【0069】

制御メッセージは、第１及び第３の音声認識装置の位置情報を含む。または、制御メッセージは、第２の音声認識装置の位置情報を基準に生成された第１及び第３の音声認識装置の相対位置情報を含む。または、図３のように、ロボット掃除機１００ｅから第２の音声認識装置１００ｗが予め位置情報を受信することができる。

【0070】

また、図３及び図４における制御メッセージは、第１の音声認識装置１００ｉ又は第３の音声認識装置１００ｊの音声入力部が入力された音声ファイルを含んでいてもよい。例えば、使用者が「エアコンつけて！」と発話した場合、これを貯蔵した音声ファイルを第１の音声認識装置１００ｉ又は第３の音声認識装置１００ｊが生成して、制御メッセージに含ませることができる。

【0071】

図４における第１の音声認識装置１００ｉと第３の音声認識装置１００ｊは、それぞれ制御メッセージを第２の音声認識装置１００ｗに伝送することができる。例えば、第１の音声認識装置１００ｉは、第１の音声認識装置１００ｉの音声入力部１１０が入力された音声命令語に対応する第１の制御メッセージを伝送する（Ｓ２３ｉ）。

【0072】

同様、第３の音声認識装置１００ｊは、第３の音声認識装置１００ｊの音声入力部１１０が入力された音声命令語に対応する第２の制御メッセージを伝送する（Ｓ２３ｊ）。

【0073】

また、第２の音声認識装置１００ｗの通信部１８０は、第１の制御メッセージ及び第２の制御メッセージを受信する。そして、第２の音声認識装置１００ｗの制御部１５０は、第１の音声認識装置１００ｉ及び第３の音声認識装置１００ｊの位置情報に基づいて、第１の制御メッセージ及び第２の制御メッセージが指示する機能を提供する（Ｓ２４）。

【0074】

ここで、第２の音声認識装置１００ｗの制御部１５０は、第１の制御メッセージから前記第１の音声認識装置１００ｉの位置情報を抽出し、第２の制御メッセージから前記第３の音声認識装置１００ｊの位置情報を抽出することができる。２つの位置情報を用いて、使用者の位置をより正確に確認することができる。特に、制御メッセージに含まれた音声の大きさ情報を比較する場合、使用者の位置を正確に確認することができる。

【0075】

例えば、図２の実施形態における冷蔵庫が第１の音声認識装置１００ｉであり、空気清浄機が第３の音声認識装置１００ｊで、両装置が入力された音声の大きさは、同じ水準である。

【0076】

この場合、エアコンが第２の音声認識装置１００ｗである場合、エアコンの制御部１５０は、発話者の位置が空気清浄機と冷蔵庫の間と判断し、風の方向を両装置の中間地点に向かうように機能制御部１３０を制御することができる。

【0077】

図５は、本発明の一実施形態による各々の装置が自分の位置を共有するために作動音を実行する過程を示す。

【0078】

第１の音声認識装置１００ｉ、第２の音声認識装置１００ｗ、第３の音声認識装置１００ｊは、それぞれ装置の識別情報をブロードキャスティングして作動音を出力する（Ｓ３１，Ｓ３２，Ｓ３３）。各々の装置は、他の装置等の識別情報と入力された作動音に対する方向又は距離情報を貯蔵する。

【0079】

例えば、第２の音声認識装置１００ｗに設置された音声入力部１１０が指向性マイクである場合、第１の音声認識装置１００ｉが左側方向に配置されたことを確認することができる。または、音声入力部１１０が第２の音声認識装置１００ｗの左側及び右側の両方とも配置された場合、両側音声入力部１１０が入力された音の大きさ差を利用して方向を、第２の音声認識装置１００ｗは、第１の音声認識装置１００ｉの位置を判断することができる。

【0080】

また、入力された作動音の大きさによって距離を算出することができる。先に識別情報のブロードキャスティング過程で、第１の音声認識装置１００ｉは、作動音の大きさも共に含ませて、他の装置に通報することができる。

【0081】

よって、作動音が出力されると、各々の装置の制御部１５０は、他の装置が出力した作動音の元の音の大きさと、音声入力部１１０に入力された作動音の大きさとを比較する。これを用いて制御部１５０は、作動音を出力した他の装置の距離を算出することができる。音の大きさによって距離は、反比例する。

【0082】

前述した実施形態に基づく場合、各装置は、他の装置等の位置や距離などに対する情報を貯蔵することができる。例えば、ロボット掃除機１００ｅが生成したマップを利用するか作動音を用いる場合、装置等は、他の装置等の位置や距離を確認することができる。

【0083】

その結果、第１の音声認識装置１００ｉが使用者より音声命令語を入力されると、これを実際に動作しなければならない第２の音声認識装置１００ｗに伝達して、動作を指示することができる。第２の音声認識装置１００ｗは、音声命令語を入力した使用者が、第１の音声認識装置１００ｉの周辺にいたという情報を反映して機能を行う。特に、空気清浄機１００ｂとエアコン１００ｄ、又は複数の部屋や居間に複数配置されたテレビを動作させる際に使用者の位置情報は重要である。

【0084】

本発明の実施形態を適用する場合、音声入力部１１０が単一のマイクアレイである場合も、ロボット掃除機１００ｅの生成したマップを用いて使用者の方向を判断することができ、音声認識装置等は、これに基づいて正確な位置判断が可能である。

【0085】

特に、ロボット掃除機１００ｂの制御過程において、音声命令制御過程で、又は掃除を始めるか学習された特定区域を制御する過程で、家電製品の位置を把握することができる。使用者が特定の地点を音声で入力すると、ロボット掃除機１００ｅは、該地点の情報を使用者が音声入力した地点と貯蔵する。

【0086】

前述した実施形態を適用する場合、音声認識装置は、音声サービスを提供する様々な装置の音声入力部１１０、例えば、マイクを活用して発話者の位置を推定することができる。また、音声認識装置は、各々の家電製品の位置情報と発話者の位置を結合して、使用者の位置情報を正確に確認し、使用者の位置に基づいて動作を行う。よって、機器使用の便宜性を高めて、性能を改善することができ、装置等の自動制御が可能になる。

【0087】

また、色んな位置に配置された音声認識装置に搭載された音声入力部１１０、例えば、マイクアレイは、音声認識装置が使用者の位置情報を取得できるようにする。また、音声認識装置に配置された音声入力部１１０が指向性マイクである場合、各音声認識装置が入力された音声の方向情報は、制御メッセージに含まれていてもよい。

【0088】

また、制御メッセージを受信した音声認識装置は、方向情報等を収集して、使用者の位置情報を算出することができる。

【0089】

また、各々の装置が一定した時点で製品の作動音（お知らせ音）を出力し、これを入力された他の装置等は、該装置の位置を計算することができる。

【0090】

もちろん、図２及び図３に示されたように、ロボット掃除機が走行過程で学習及び生成したマップ情報を共有することによって、各々の装置が自分の位置情報及び他の装置の位置情報を算出することができる。

【0091】

特に、エアコンや空気清浄機、ロボット掃除機のように機能を行うことにおいて、位置情報が必要な際に、前述した実施形態を適用する場合、装置等は、方向性をもって動作することができる。

【0092】

また、使用者との距離や使用者の位置によって音声認識装置は、フィードバック音声メントのボリュームを自動に調節することができる。

【0093】

図６は、本発明の一実施形態によるエアコン又は空気清浄機の動作過程を示す。

【0094】

第１の音声認識装置１００ｉは、音声命令語を入力される（Ｓ４１）。第１の音声認識装置１００ｉは、前述したプロセスに従って制御メッセージを生成して、第２の音声認識装置１００ｗに伝送する（Ｓ４２）。

【0095】

第２の音声認識装置１００ｗが空気清浄機又はエアコンである場合、第２の音声認識装置１００ｗの制御部１５０は、第１の音声認識装置１００ｉの周辺に使用者が位置したと判断し、第１の音声認識装置１００ｉの位置をターゲットに動作を始める（Ｓ４３）。よって、第２の音声認識装置１００ｗの制御部１５０は、制御メッセージが指示する機能を提供するように機能制御部１３０を制御する。第２の音声認識装置１００ｗの制御部１５０は、風の方向、力などを調節することができる。

【0096】

その後、一定時間以内（例えば、３秒～１０秒以内）、第２の音声認識装置１００ｗのインターフェース部１９０が方向転換制御信号を入力された場合、これは、使用者が風の方向を変えたと判断する。そして、第２の音声認識装置１００ｗの制御部１５０は、第１の音声認識装置１００ｉの位置情報を、転換された方向に修正する（Ｓ４４）。これは、使用者が発話後、エアコン／空気清浄機の方向をさらに調節するための状況を含む。

【0097】

図７は、本発明の一実施形態によるテレビ動作過程を示す。Ｓ４１，Ｓ４２は、図６で考察したとおりである。

【0098】

第２の音声認識装置１００ｗがテレビである場合、第２の音声認識装置１００ｗの制御部１５０は、第１の音声認識装置１００ｉとの距離を算出する（Ｓ５３）。そして、両装置間の距離が一定基準以下である場合、動作を行う（Ｓ５４）。

【0099】

例えば、図２を基準に、使用者の発話した地点は、冷蔵庫の前であるのに、「テレビつけて！」と使用者が発話した場合を仮定する。このとき、寝室４と居間にいずれもテレビが配置されており、居間に配置されたテレビと寝室４に配置されたテレビがいずれも制御メッセージを受信した状態である。

【0100】

このとき、居間に配置されたテレビは、受信した制御メッセージ又は前に受信した位置情報を用いて冷蔵庫（第１の音声認識装置）との距離を算出する。一定距離以内であると判断されると、居間に配置されたテレビは、制御メッセージに含まれた指示に従ってつく。

【0101】

一方、寝室４に配置されたテレビは、受信した制御メッセージ又は前に受信した位置情報を用いて冷蔵庫（第１の音声認識装置）との距離を算出する。一定距離よりも遠い距離と判断されると、寝室４に配置されたテレビは、制御メッセージに含まれた指示に従わない。

【0102】

その結果、使用者の意図に応じて近い所に位置していたテレビのみつき得る。

【0103】

その後、一定時間以内（例えば、３秒～１０秒以内）、第２の音声認識装置１００ｗのインターフェース部１９０が方向転換制御信号を入力された場合、これは、使用者が風の方向を変えたと判断する。そして、第２の音声認識装置１００ｗの制御部１５０は、第１の音声認識装置１００ｉの位置情報を、転換された方向に修正する（Ｓ４４）。これは、使用者が発話後、エアコン／空気清浄機の方向をさらに調節するための状況を含む。

【0104】

本発明の実施形態を構成する諸構成要素が一つに結合されるか、結合して動作すると説明されたとして、本発明が必ずしもかかる実施形態に限定されるものではなく、本発明の目的範囲内で諸構成要素が一以上に選択的に結合して動作することもできる。また、その諸構成要素がそれぞれ一つの独立的なハードウェアに具現され得るが、各構成要素のその一部又は全部が選択的に組み合わされて、一つ又は複数本のハードウェアで組み合わされた一部又は全部の機能を行うプログラムモジュールを有するコンピュータプログラムとしても具現され得る。そのコンピュータプログラムを構成するコード及びコードセグメントは、本発明の技術分野の当業者によって容易に推論することができる。このようなコンピュータプログラムは、コンピュータが読み取れる貯蔵媒体（Ｃｏｍｐｕｔｅｒ Ｒｅａｄａｂｌｅ Ｍｅｄｉａ）に貯蔵され、コンピュータによって読み取られて実行されることで、本発明の実施形態を具現することができる。コンピュータプログラムの貯蔵媒体としては、磁気記録媒体、光記録媒体、半導体記録素子を含む貯蔵媒体を含む。また、本発明の実施形態を具現するコンピュータプログラムは、外部装置によってリアルタイムに伝送されるプログラムモジュールを含む。

【0105】

以上では、本発明の実施形態を中心に説明したが、通常の技術者の水準における多様な変更や変形を加えることができる。よって、このような変更と変形が本発明の範囲を外れない限り、本発明の範疇内に含まれると理解することができる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】