特許 7269812 家電機器

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-04-26

(45)【発行日】2023-05-09

(54)【発明の名称】家電機器

(51)【国際特許分類】

   G06F 3/16 20060101AFI20230427BHJP

   G06F 3/01 20060101ALI20230427BHJP

   G10L 15/00 20130101ALI20230427BHJP

   G10L 15/28 20130101ALI20230427BHJP

【ＦＩ】

G06F3/16 520

G06F3/16 630

G06F3/16 690

G06F3/01 510

G10L15/00 200N

G10L15/28 230K

【請求項の数】 15

(21)【出願番号】P 2019133092

(22)【出願日】2019-07-18

(65)【公開番号】P2021018543

(43)【公開日】2021-02-15

【審査請求日】2022-03-10

(73)【特許権者】

【識別番号】503376518

【氏名又は名称】東芝ライフスタイル株式会社

(74)【代理人】

【識別番号】100141139

【弁理士】

【氏名又は名称】及川 周

(74)【代理人】

【識別番号】100205785

【弁理士】

【氏名又は名称】▲高▼橋 史生

(74)【代理人】

【識別番号】100175824

【弁理士】

【氏名又は名称】小林 淳一

(74)【代理人】

【識別番号】100135301

【弁理士】

【氏名又は名称】梶井 良訓

(74)【代理人】

【識別番号】100146835

【弁理士】

【氏名又は名称】佐伯 義文

(74)【代理人】

【識別番号】100129115

【弁理士】

【氏名又は名称】三木 雅夫

(74)【代理人】

【識別番号】100203297

【弁理士】

【氏名又は名称】橋口 明子

(72)【発明者】

【氏名】丸谷 裕樹

(72)【発明者】

【氏名】中川 達也

(72)【発明者】

【氏名】瀧川 正史

(72)【発明者】

【氏名】金山 将也

(72)【発明者】

【氏名】神田 博紀

【審査官】酒井 優一

(56)【参考文献】

【文献】米国特許出願公開第２０１４／０１８８４８５（ＵＳ，Ａ１）

【文献】特開２０１７－０８４１７７（ＪＰ，Ａ）

【文献】特開２０１５－１４８６４８（ＪＰ，Ａ）

【文献】特開２０１８－０３６３９７（ＪＰ，Ａ）

【文献】特開２００３－１９５８９１（ＪＰ，Ａ）

【文献】特開２０１７－００４２３１（ＪＰ，Ａ）

【文献】特開２０１４－１９６８４７（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／１６

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ １３／００

Ｇ１０Ｌ １５／００

Ｇ１０Ｌ １５／２８

(57)【特許請求の範囲】

【請求項1】

所定の状況が検知された場合、外部機器の音声対話機能を起動させるための第１信号を前記外部機器またはサーバ装置に送信する制御部、
を備え、
前記外部機器は、ユーザがトリガワードを発話した場合と、前記第１信号であるまたは前記第１信号に基づいて生成された信号であるトリガ信号を受信した場合とで、それぞれ前記音声対話機能を起動させ、前記ユーザの発話が無い状態でも前記音声対話機能の起動状態を維持する待機時間を設定し、前記ユーザが前記トリガワードを発話した場合には、前記待機時間として第１所定時間を設定し、前記トリガ信号を受信した場合には、前記待機時間として前記第１所定時間よりも長い第２所定時間を設定し、
前記制御部は、前記所定の状況が検知された場合、前記待機時間として前記第２所定時間を設定させるための前記第１信号を前記外部機器または前記サーバ装置に送信する、
家電機器。

【請求項2】

前記第２所定時間は、前記第１所定時間の倍以上の時間である、
請求項１に記載の家電機器。

【請求項3】

前記第２所定時間は、５分以上の時間である、
請求項２に記載の家電機器。

【請求項4】

所定の状況が検知された場合、外部機器の音声対話機能を起動させるための第１信号を前記外部機器またはサーバ装置に送信する制御部、
を備え、
前記外部機器は、ユーザがトリガワードを発話した場合と、前記第１信号であるまたは前記第１信号に基づいて生成された信号であるトリガ信号を受信した場合とで、それぞれ前記音声対話機能を起動させ、前記ユーザの発話が無い状態でも前記音声対話機能の起動状態を維持する待機時間を設定し、
前記制御部は、前記第１信号を前記外部機器または前記サーバ装置に送信した後に前記ユーザの発話がない場合、前記待機時間が経過する前に、前記待機時間を延長するための追加信号を、少なくとも１回、前記外部機器または前記サーバ装置に送信する、
家電機器。

【請求項5】

前記制御部は、前記所定の状況が検知され続ける場合、前記追加信号を繰り返し送信する、
請求項４に記載の家電機器。

【請求項6】

前記音声対話機能を起動させるための操作を受け付けるトリガ操作部をさらに備え、
前記制御部は、前記トリガ操作部が操作された場合、前記第１信号を送信する、
請求項１から請求項５のうちいずれか１項に記載の家電機器。

【請求項7】

開口を有した筐体と、
前記開口を閉じる扉と、をさらに備え、
前記制御部は、前記開口に対して前記扉が開かれた場合、前記第１信号を送信する、
請求項１から請求項６のうちいずれか１項に記載の家電機器。

【請求項8】

開口を有した筐体と、
前記開口を閉じる扉と、をさらに備え、
前記制御部は、前記開口に対して前記扉が閉じられた場合、前記第１信号を送信する、
請求項１から請求項７のうちいずれか１項に記載の家電機器。

【請求項9】

人感センサをさらに備え、
前記制御部は、前記人感センサにより人の存在が検知された場合、前記第１信号を送信する、
請求項１から請求項８のうちいずれか１項に記載の家電機器。

【請求項10】

電源操作部をさらに備え、
前記制御部は、前記電源操作部が操作された場合、前記第１信号を送信する、
請求項１から請求項９のうちいずれか１項に記載の家電機器。

【請求項11】

前記制御部は、前記家電機器の操作受付部に対するユーザの操作と、前記家電機器とは別の端末機器に対するユーザの操作とのうち少なくとも一方に基づき、１つ以上の状況に関して前記第１信号を送信するか否かの設定を変更する、
請求項１から請求項１０のうちいずれか１項に記載の家電機器。

【請求項12】

前記制御部は、前記所定の状況が検知された場合、前記第１信号に加え、前記家電機器を制御するサーバ装置を特定するために用いることができる情報を送信する、
請求項１から請求項１１のうちいずれか１項に記載の家電機器。

【請求項13】

前記制御部は、前記所定の状況が検知された場合、前記第１信号に加え、前記家電機器の種別を特定するために用いることができる情報を送信する、
請求項１から請求項１２のうちいずれか１項に記載の家電機器。

【請求項14】

前記制御部は、前記家電機器が第１特定状況にある場合、前記外部機器に対するユーザの発話と前記家電機器とを関連付けて処理させるための、または前記発話と前記家電機器とを関連付けて処理させる優先順位を高めるための第２信号を前記外部機器または前記サーバ装置に送信する、
請求項１から請求項１３のうちいずれか１項に記載の家電機器。

【請求項15】

前記制御部は、前記家電機器が第２特定状況にある場合、前記外部機器に対するユーザの発話と前記家電機器とを関連付けさせないための、または前記発話と前記家電機器とを関連付けて処理させる優先順位を低くするための第３信号を前記外部機器または前記サーバ装置に送信する、
請求項１から請求項１４のうちいずれか１項に記載の家電機器。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、家電機器に関する。

【背景技術】

【0002】

家電機器が対話を開始するトリガとなる所定の事象の発生を検知する検知部と、該検知部が上記事象の発生を検知すると、所定の開始条件を満たすかを判定する判定部とを備えた家電機器が提案されている。

【0003】

ところで、家電機器とは独立して配置される音声対話装置を利用して家電機器を操作する場合を想定すると、音声対話装置を起動させるためのトリガワードや操作対象の家電機器を特定するためのワードを発話する必要があり、ユーザの利便性に改善の余地がある。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１７－８４１７７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明が解決しようとする課題は、ユーザの利便性の向上を図ることができる家電機器を提供することである。

【課題を解決するための手段】

【0006】

実施形態の家電機器は、制御部を持つ。前記制御部は、所定の状況が検知された場合、外部機器の音声対話機能を起動させるための第１信号を前記外部機器またはサーバ装置に送信する。前記外部機器は、ユーザがトリガワードを発話した場合と、前記第１信号であるまたは前記第１信号に基づいて生成された信号であるトリガ信号を受信した場合とで、それぞれ前記音声対話機能を起動させ、前記ユーザの発話が無い状態でも前記音声対話機能の起動状態を維持する待機時間を設定し、前記ユーザが前記トリガワードを発話した場合には、前記待機時間として第１所定時間を設定し、前記トリガ信号を受信した場合には、前記待機時間として前記第１所定時間よりも長い第２所定時間を設定し、前記制御部は、前記所定の状況が検知された場合、前記待機時間として前記第２所定時間を設定させるための前記第１信号を前記外部機器または前記サーバ装置に送信する。

【図面の簡単な説明】

【0007】

【図1】第１の実施形態の情報処理システムの全体構成を示す図。

【図2】第１の実施形態のスマートスピーカの機能構成を示すブロック図。

【図3】第１の実施形態の家電機器のいくつかの例を示す斜視図。

【図4】第１の実施形態の家電機器の機能構成を示すブロック図。

【図5】第１の実施形態の表示画面の内容の一例を示す図。

【図6】第１の実施形態の音声対話サーバ装置の機能構成を示すブロック図。

【図7】第１の実施形態の音声操作管理ＤＢの内容の一例を示す図。

【図8】第１の実施形態の機器制御サーバ装置の機能構成を示すブロック図。

【図9】第１の実施形態の制御の全体フローの一例を示すシーケンス図。

【図10】第１の実施形態の発話対象の判定に関する処理の流れを示すフローチャート。

【図11】第１の実施形態の判定ルールの一例を示す図。

【図12】第２の実施形態の情報処理システムの全体構成を示す図。

【発明を実施するための形態】

【0008】

以下、実施形態の家電機器および情報処理システムを、図面を参照して説明する。以下の説明では、同一または類似の機能を有する構成に同一の符号を付す。そして、それら構成の重複する説明は省略する場合がある。

【0009】

本明細書で「ＸＸに基づく」とは、「少なくともＸＸに基づく」ことを意味し、ＸＸに加えて別の要素に基づく場合も含む。また「ＸＸに基づく」とは、ＸＸを直接に用いる場合に限定されず、ＸＸに対して演算や加工が行われたものに基づく場合も含む。「ＸＸ」は、任意の要素（例えば任意の情報）である。本明細書で「ＹＹをさせるための」または「ＹＹをさせるために」とは、ＹＹをさせることを主目的とする場合に限定されず、主目的の実現とともに、または主目的の実現の前または後に、ＹＹが副次的に実現される場合も含む。「ＹＹ」は、例えば任意の動作である。また本明細書では、「データベース」を「ＤＢ」と表記する。

【0010】

（第１の実施形態）
まず、第１の実施形態について説明する。第１の実施形態は、家電機器１００とは独立して配置されるスマートスピーカ２００が音声対話機能を有する例である。また第１の実施形態は、後述するトリガ信号が家電機器１００からスマートスピーカ２００に送信される例である。

【0011】

［１．全体構成］
図１は、第１の実施形態の情報処理システム１の全体構成を示す図である。情報処理システム１は、例えば、１つ以上（例えば複数）の家電機器１００、スマートスピーカ２００、家庭内のルータ３００、音声対話用のサーバ装置４００（以下、「音声対話サーバ装置４００」と称する）、家電機器制御用のサーバ装置５００（以下、「機器制御サーバ装置５００」と称する）、および端末機器６００を含む。本実施形態では、それぞれ後述するスマートスピーカ２００の制御部２５０と、音声対話サーバ装置４００の情報処理部４３０と、機器制御サーバ装置５００の情報処理部５３０とにより、情報処理システム１の情報処理部が実現されている。なお後述するネットワークＮＷは、例えば、インターネット、セルラー網、Ｗｉ－Ｆｉ網、ＷＡＮ（Wide Area Network）、ＬＡＮ（Local Area Network）、公衆回線、電話回線、無線基地局などのうち１つ以上を含む。

【0012】

家電機器１００は、ユーザの家庭に配置されている。家電機器１００は、ルータ３００を介してネットワークＮＷと接続され、音声対話サーバ装置４００および機器制御サーバ装置５００と通信可能である。また、家電機器１００は、ルータ３００を介してまたは直接に、スマートスピーカ２００と通信可能である。さらに、家電機器１００は、ルータ３００を介して、またはルータ３００およびネットワークＮＷを介して、端末機器６００と通信可能である。本実施形態では、家電機器１００として、冷蔵庫１００Ａ、オーブンレンジ１００Ｂ、および洗濯機１００Ｃが配置された例を取り上げている。ただし、家電機器１００は、上記例に限定されず、掃除機や炊飯器、またはテレビジョン受像機など他の家電機器でもよい。以下では、家電機器１００の種類を問わない場合は、単に「家電機器１００」と称する。

【0013】

スマートスピーカ２００は、「音声対話装置」の一例である。また、スマートスピーカ２００は、家電機器１００から見た「外部機器」の一例でもある。スマートスピーカ２００は、ユーザの家庭に配置されている。スマートスピーカ２００は、例えば、ルータ３００を介してネットワークＮＷと接続され、音声対話サーバ装置４００および機器制御サーバ装置５００と通信可能である。スマートスピーカ２００は、例えば、キッチンに１つ配置されるなど、複数の家電機器１００に対して１つ配置される。本実施形態では、スマートスピーカ２００は、汎用的なスマートスピーカであり、家電機器１００の操作以外にも、天気や時刻などの質問に対する回答や、音楽のストリーミングなどにも対応可能である。ただし、本明細書でいう「音声対話装置」および「外部機器」は、家電機器１００を操作するため専用の音声対話装置であってもよい。

【0014】

ルータ３００は、ユーザの家庭に配置されている。ルータ３００は、例えば無線ルータであるが、これに限らない。言い換えると、家電機器１００とスマートスピーカ２００とのうち少なくとも一方は、有線（例えば電力線）を介してルータ３００と接続されることで、ルータ３００と通信可能であってもよい。

【0015】

音声対話サーバ装置４００は、例えば、ネットワークＮＷに接続されたクラウドサーバである。音声対話サーバ装置４００は、スマートスピーカ２００に対するユーザの発話内容を分析し、スマートスピーカ２００を通じた音声による回答や、ユーザの発話内容に応じた家電機器１００に対する制御指示を機器制御サーバ装置５００に通知することなどを行う。音声対話サーバ装置４００は、例えば、スマートスピーカ２００の製造元または販売元がサービスを提供するサーバ装置である。なお、音声対話サーバ装置４００の後述する機能の一部または全部は、スマートスピーカ２００に設けられてもよい。

【0016】

機器制御サーバ装置５００は、例えば、ネットワークＮＷに接続されたクラウドサーバである。機器制御サーバ装置５００は、家電機器１００に対する制御指示を音声対話サーバ装置４００から通知された場合、通知された制御指示に基づき家電機器１００を制御する。機器制御サーバ装置５００は、例えば、家電機器１００の製造元または販売元がサービスを提供するサーバ装置である。機器制御サーバ装置５００は、家電機器１００の製造元または販売元ごとに複数存在する場合がある。なお、音声対話サーバ装置４００と、機器制御サーバ装置５００とは、別々の装置である必要は無く、１つの装置によって実現されてもよい。

【0017】

端末機器６００は、例えば、ユーザが所有する携帯端末機器であり、スマートフォンやタブレット端末機器などである。例えば、端末機器６００には、家電機器１００の設定や遠隔操作を行うためのアプリケーションプログラムがインストールされている。ただし、端末機器６００は、パーソナルコンピュータや、入力機能を有したテレビジョン受像機などでもよい。

【0018】

以下、家電機器１００、スマートスピーカ２００、音声対話サーバ装置４００、および機器制御サーバ装置５００について詳しく説明する。ここでは説明の便宜上、スマートスピーカ２００、家電機器１００、音声対話サーバ装置４００、機器制御サーバ装置５００の順で説明する。

【0019】

［２．スマートスピーカ］
まず、スマートスピーカ２００について説明する。
図２は、スマートスピーカ２００の機能構成を示すブロック図である。スマートスピーカ２００は、例えば、マイク２１０、スピーカ２２０、無線通信モジュール２３０、記憶部２４０、および制御部（情報処理部）２５０を有する。

【0020】

マイク２１０は、スマートスピーカ２００に対して発話されたユーザの音声を取得する。スピーカ２２０は、スマートスピーカ２００の外部に向けて音声を出力する。無線通信モジュール２３０は、高周波回路およびアンテナなどを含み、例えばルータ３００と無線通信可能である。

【0021】

記憶部２４０は、音声ＤＢ２４１を格納している。音声ＤＢ２４１は、例えば、簡易音声認識ＤＢ２４１ａを含む。簡易音声認識ＤＢ２４１ａには、例えば、スマートスピーカ２００を起動させる音声コマンドであるトリガワード（例えば「ハロー、〇〇」など予め規定されたユーザが発話するワード）が登録されている。

【0022】

制御部２５０は、スマートスピーカ２００の全体を制御する。制御部２５０は、例えば、音声受信部２５１、起動判定部２５２、待機時間設定部２５３、データ送受信部２５４、および音声出力部２５５を有する。なおこれら機能部の一部（例えば、起動判定部２５２および待機時間設定部２５３）は、スマートスピーカ２００の出荷時に搭載されている必要はなく、例えば、追加のアプリケーションプログラムがスマートスピーカ２００にインストールされることで実現されてもよい。

【0023】

音声受信部２５１は、マイク２１０に対して入力されたユーザの発話を、音声データとして受信する。

【0024】

起動判定部２５２は、スマートスピーカ２００の音声対話機能の起動の要否を判定する。「起動」とは、例えば、消費電力が所定以下に抑えられた休止状態（トリガワード以外のユーザの発話には反応しない状態）から、トリガワード以外のユーザの発話にも反応可能（対話可能）な待機状態（音声コマンドを受信可能な状態）に変化することを意味する。「待機状態」は、「起動状態」と称されてもよい。起動判定部２５２は、例えば、音声受信部２５１により受信された音声データに、簡易音声認識ＤＢ２４１ａに登録されているトリガワードが含まれる場合、起動が必要と判定し、音声対話機能を起動させる。また本実施形態では、起動判定部２５２は、データ送受信部２５４によって後述するトリガ信号が受信された場合、起動が必要と判定し、音声対話機能を起動させる。

【0025】

待機時間設定部２５３は、起動判定部２５２により音声対話機能の起動が必要と判定され、音声対話機能が起動させられる場合、上記待機状態を維持させる待機時間（タイムアウトまでの時間）を設定する。

【0026】

ここで、待機時間設定部２５３は、トリガワードに基づいて音声対話機能を起動させる場合と、トリガ信号に基づいて音声対話機能を起動させる場合とで、上記待機時間を異ならせてもよい。例えば、待機時間設定部２５３は、トリガワードに基づいて音声対話機能を起動させる場合、ユーザの発話がない場合であっても第１所定時間（例えば１０秒間）に亘り、上記待機時間を維持させる。一方で、待機時間設定部２５３は、トリガ信号に基づいて音声対話機能を起動させる場合、ユーザの発話がない場合であっても、上記第１所定時間よりも長い第２所定時間（例えば１０秒から３０秒程度でもよく、１０分から３０分程度でもよい）に亘り、上記待機時間を維持させてもよい。第２所定時間の長さは、例えば第１所定時間の長さの倍以上である。

【0027】

例えば、第２所定時間が５分未満（さらに言えば、例えば１０秒から３０秒程度）に設定される場合、トリガ信号が送信されたタイミングではユーザが家電機器１００に対する作業（例えば、家電機器１００の内部に対する物の出し入れ）を行っており、ユーザの発話がすぐにない場合であっても、それら作業の間や作業の後に発話されるユーザの指示を受け取り損ねる可能性を小さくすることができる。

【0028】

例えば、第２所定時間が５分以上（さらに言えば、１０分から３０分程度）に設定される場合、トリガ信号が送信されたタイミングではユーザが家電機器１００または家電機器１００の設置場所に関連する作業（例えば、調理や調理後の片付け、洗濯の準備、部屋の掃除などの家事）を行っており、ユーザの発話がすぐにない場合であっても、スマートスピーカ２００を使用する場合にその都度呼び掛けなくても済む（例えば、調理中にその都度呼び掛けなくても調理の手順を聞くことができる）ようになる。

【0029】

例えば、待機時間設定部２５３は、上述した後者の長時間待機の機能（ユーザが家電機器１００または家電機器１００の設置場所に関連する作業を行っている間はスマートスピーカ２００の起動状態を維持させる機能、例えば１０分から３０分程度の長時間に亘りスマートスピーカ２００の起動状態を維持させる機能）をＯＮにする設定機能を有してもよい。以下では、この機能を「長時間待機機能」と称する。

【0030】

例えば、待機時間設定部２５３は、ユーザの発話による所定の音声コマンドに基づいて、上述の長時間待機機能のＯＮ／ＯＦＦを切り替えてもよい。待機時間設定部２５３は、長時間待機機能がＯＦＦである場合、第１所定時間（例えば１０秒間）または上述した短い第２所定時間（例えば５分未満）の間、ユーザの発話がないとスマートスピーカ２００の起動状態を終了する。一方で、待機時間設定部２５３は、トリガワード（または家電機器１００からのトリガ信号）に基づいて通常通り待機状態となった後、長時間待機機能をＯＮにする音声コマンドを受け付けた場合、長時間待機の状態となる。その後、ユーザの発話がないと、スマートスピーカ２００は、所定の長時間待機の時間（例えば１０分から３０分程度）の経過をもってスマートスピーカ２００の起動状態を終了する。あるいは、スマートスピーカ２００は、長時間待機の機能をＯＦＦにする音声コマンドを受け付けた場合、スマートスピーカ２００の起動状態を終了してもよい。

【0031】

データ送受信部２５４は、無線通信モジュール２３０を制御することで、家電機器１００や音声対話サーバ装置４００などとの間で信号およびデータを送受信する。例えば、データ送受信部２５４は、音声受信部２５１により取得されたトリガワード以外の音声データを、音声対話サーバ装置４００に送信する。また、データ送受信部２５４は、音声対話サーバ装置４００により準備された回答用の音声データを、音声対話サーバ装置４００から受信する。データ送受信部２５４は、受信した回答用の音声データを、音声出力部２５５に出力する。

【0032】

さらに本実施形態では、データ送受信部２５４は、所定の信号（後述するトリガ信号や補助信号など）を家電機器１００から受信する。また、データ送受信部２５４は、上記所定の信号の受信に伴って、上記所定の信号の送信元である家電機器１００を特定するために用いることができる情報（識別情報）をその家電機器１００から受信する。本明細書で言う「識別情報」は、家電機器１００のＩＤ番号（例えばシリアルナンバー）を示す情報に限定されず、家電機器１００の通信アドレス（例えばＩＰアドレス）を示す情報などでもよく、家電機器１００を別の家電機器１００と区別可能な情報であればよい。以下では、上記識別情報としてデータ送受信部２５４が家電機器１００の通信アドレスを取得する場合を例に説明する。データ送受信部２５４は、上記所定の信号を受信したことを示す情報と、上記所定の信号を受信した時刻を示す情報と、上記所定の信号を送信した家電機器１００の識別情報とを対応付けて音声対話サーバ装置４００に送信する。

【0033】

音声出力部２５５は、音声対話サーバ装置４００から送信されてデータ送受信部２５４により受信された音声データを、スピーカ２２０を通じて音声として外部に出力する。

【0034】

［３．家電機器］
次に、家電機器１００について説明する。
図３は、家電機器１００のいくつかの例を示す斜視図である。家電機器１００は、例えば、筐体１０１と、扉１０２とを備えている。筐体１０１は、筐体１０１の内部空間に物を出し入れするための開口１０１ａを有する。扉１０２は、筐体１０１の開口１０１ａを開閉可能に閉じる。

【0035】

図４は、家電機器１００の機能構成を示すブロック図である。家電機器１００は、例えば、扉開閉検知センサ１１０、人感センサ１２０、トリガ専用操作部１３０、電源操作部１４０、表示・操作部１５０、無線通信モジュール１６０、アクチュエータ１７０、および制御部１８０を有する。なお、家電機器１００は、これら構成の一部を有しなくてもよい。

【0036】

扉開閉検知センサ１１０は、筐体１０１の開口１０１ａに対する扉１０２の開閉を検出する。扉開閉検知センサ１１０は、例えば筐体１０１と扉１０２との間に設けられ、扉１０２の開閉時にＯＮ／ＯＦＦ状態が切り替わる扉開閉スイッチである。ただし、扉開閉検知センサ１１０は、扉１０２の開閉を検出可能な別のセンサ（例えばカメラ）でもよい。人感センサ１２０は、家電機器１００の周囲（例えば家電機器１００の正面）における人の存在を検知する。

【0037】

トリガ専用操作部１３０は、後述するトリガ信号を送信させたい場合に、ユーザによって操作される専用の操作部である。すなわち、トリガ専用操作部１３０は、スマートスピーカ２００の音声対話機能を起動させるための操作を受け付ける操作部である。トリガ専用操作部１３０は、例えばトリガ信号を送信させるため専用のボタンまたはスイッチを含む。トリガ専用操作部１３０は、「トリガ操作部」の一例である。ただし、本明細書でいう「トリガ操作部」は、専用の操作部に限定されず、他の機能と兼用の操作部でもよい。

【0038】

電源操作部１４０は、家電機器１００の電源をＯＦＦ状態からＯＮ状態にする、またはＯＮ状態からＯＦＦ状態にする場合に、ユーザによって操作される操作部である。電源操作部１４０は、電源のＯＮ状態とＯＦＦ状態を切り替えるボタンまたはスイッチを含む。

【0039】

表示・操作部１５０は、例えば、表示装置と、タッチ入力式の操作部とを含む。表示装置は、例えば、液晶ディスプレイや有機ＥＬ（Organic Electro-Luminescence）ディスプレイなどであり、画像や映像が表示される表示画面を含む。操作部は、表示装置の表示画面と重ねて配置されたタッチセンサを含む。表示・操作部１５０は、例えば、家電機器１００の動作開始や動作モードの変更を行うためのユーザの操作を受け付ける。

【0040】

本実施形態では、トリガ専用操作部１３０、電源操作部１４０、および表示・操作部１５０により、ユーザの操作を受け付ける操作受付部Ｒの一例が構成されている。ただし、操作受付部Ｒは、トリガ専用操作部１３０、電源操作部１４０、および表示・操作部１５０に代えて、または加えて、家電機器１００の動作開始や動作モードの変更を行うためのユーザの操作を受け付ける一般的なボタンやスイッチなどを有してもよい。

【0041】

無線通信モジュール１６０は、高周波回路およびアンテナなどを含み、例えばルータ３００と無線通信可能である。

【0042】

アクチュエータ１７０は、家電機器１００を動作させるための駆動部である。例えば、家電機器１００が冷蔵庫である場合、アクチュエータ１７０は、冷媒を圧縮する圧縮器や、冷蔵庫内で冷気を循環させる送風機などである。家電機器１００がオーブンレンジである場合、アクチュエータ１７０は、マイクロ波発生器などである。家電機器１００が洗濯機である場合、アクチュエータ１７０は、洗濯槽を回転させるモータなどである。

【0043】

制御部１８０は、家電機器１００の全体を制御する。制御部１８０は、例えば、トリガ信号生成部１８１、トリガモード設定部１８２、補助信号生成部１８３、機器制御部１８４、およびデータ送受信部１８５を有する。

【0044】

トリガ信号生成部１８１は、所定の状況が検知された場合、スマートスピーカ２００の音声対話機能を起動させるためのトリガ信号を生成する。トリガ信号は、「第１信号」の一例である。「所定の状況」とは、トリガ信号を送信する状況として家電機器１００に予め設定されている状況である。「所定の状況」は、例えば、トリガ操作部１３０が操作された場合、電源操作部１４０が操作された場合、筐体１０１の開口１０１ａに対して扉１０２が開かれた場合、筐体１０１の開口１０１ａに対して扉１０２が閉じられた場合、および家電機器１００の近くに人の存在が検知された場合のうち任意の１つ以上である。「所定の状況が検知された場合」とは、例えば、トリガ操作部１３０が操作されたことがトリガ操作部１３０により検知された場合、電源操作部１４０が操作（例えば、家電機器１００の電源をＯＦＦ状態からＯＮ状態にする操作）されたことが電源操作部１４０により検知された場合、筐体１０１の開口１０１ａに対して扉１０２が開かれたことが扉開閉検知センサ１１０により検知された場合、筐体１０１の開口１０１ａに対して扉１０２が閉じられたことが扉開閉検知センサ１１０により検知された場合、および人感センサ１２０により人の存在が検知された場合のうちの任意の１つ以上である。

【0045】

例えば、トリガ信号生成部１８１は、トリガ操作部１３０が操作された場合と、電源操作部１４０が操作された場合と、筐体１０１の開口１０１ａに対して扉１０２が開かれた場合と、筐体１０１の開口１０１ａに対して扉１０２が閉じられた場合と、人感センサ１２０により人の存在が検知された場合とで、異なるトリガ信号を生成してもよい。このような構成によれば、後述する音声対話サーバ装置４００において、トリガ信号を送信した複数の家電機器１００のなかからユーザの発話対象である家電機器１００を判定する必要がある場合に、家電機器１００の状況に応じた優先付けを行うことができる。例えば、音声対話サーバ装置４００は、人感センサ１２０により人の存在が検知されることでトリガ信号が送信された家電機器１００よりも、筐体１０１の開口１０１ａに対して扉１０２が開かれた（または閉じられた）ことでトリガ信号が送信された家電機器１００の優先順位を高くすることができ、トリガ操作部１３０が操作されることでトリガ信号が送信された家電機器１００の優先順位をさらに高くすることができる。また、電源操作部１４０や扉開閉検知センサ１００などトリガ操作部としての機能も兼用する各種操作部やセンサの種類に応じて、スマートスピーカ２００が起動状態（音声受付状態）を維持する待機時間を異ならせるように、異なる種類のトリガ操作部に対して異なるトリガ信号を割り当てるようにしてもよい。すなわち、異なる種類のトリガ操作部が操作された場合、互いに異なるトリガ信号が送信されてもよい。

【0046】

ところで、スマートスピーカ２００によっては、待機状態（起動状態）を維持する待機時間が固定的である場合がある。すなわち、スマートスピーカ２００が上述したような待機時間設定部２５３を有さず、トリガワードに基づいて音声対話機能を起動させる場合と、トリガ信号に基づいて音声対話機能を起動させる場合とで、同じ所定時間（第１所定時間、例えば５分間）の待機時間が設定される場合がある。

【0047】

本実施形態では、待機時間が固定的なスマートスピーカ２００に対応するトリガ信号生成部１８１は、上記所定の状況が検知された場合、ユーザの発話が無い場合であってもスマートスピーカ２００の音声対話機能の待機状態を上記第１所定時間よりも長い第２所定時間に亘り維持させるための追加信号を生成してもよい。追加信号は、上記トリガ信号と同じ信号でもよく、別の信号でもよい。この場合、後述するデータ送受信部１８５は、スマートスピーカ２００にトリガ信号を送信してから第１所定時間が経過する前にスマートスピーカ２００に上記追加信号を送信すること、またはそのような追加信号を繰り返し送信することで、スマートスピーカ２００の待機時間を第２所定時間まで延長させてもよい。このような構成によれば、スマートスピーカ２００が特別な構成を有しなくても、トリガワードに基づいて音声対話機能を起動させる場合と、トリガ信号に基づいて音声対話機能を起動させる場合とで待機時間を異ならせることができる。

【0048】

一例では、トリガ信号生成部１８１は、家電機器１００の扉１０２が開閉された場合やトリガ専用操作部１３０が操作された場合、または電源操作部１４０が操作された場合に、トリガ信号を生成して、データ送受信部１８５によりスマートスピーカ２００に送信させる。その後、トリガ信号生成部１８１は、人感センサ１２０により人の存在が検知され続ける限り（例えばキッチンに人がいることが検知され続ける限り）、所定の周期で追加信号を生成し、データ送受信部１８５によりスマートスピーカ２００に送信させてもよい。このような構成によれば、家電機器１００を操作した後にユーザが近くにいる間に亘りスマートスピーカ２００の待機状態を維持できる一方で、家電機器１００とは無関係にユーザが近くを通る場合にスマートスピーカ２００を起動させることを抑制することができる。

【0049】

トリガモード設定部１８２は、家電機器１００の操作受付部Ｒに対するユーザの操作と、端末機器６００に対するユーザの操作とのうち少なくとも一方に基づき、１つ以上の状況に関してトリガ信号を送信するか否かの設定を変更する。

【0050】

図５は、表示・操作部１５０または端末機器６００に表示される表示画面１５１の内容の一例を示す図である。例えば、表示画面１５１には、家電機器１００が検知可能な１つ以上の状況に関して、トリガ信号を送信するか否かの変更を受け付ける画面が表示される。トリガモード設定部１８２は、表示画面１５１に対するユーザの操作に基づき、１つ以上の状況に関してトリガ信号を送信するか否かの設定を変更する。

【0051】

図４に戻り、家電機器１００の残りの構成について説明する。補助信号生成部１８３は、後述する音声対話サーバ装置４００における「ユーザの発話」と「発話対象の家電機器」との関連付けを補助する信号を生成する。例えば、補助信号生成部１８３は、自家電機器１００が第１特定状況にある場合、スマートスピーカ２００に対するユーザの発話と自家電機器１００とを関連付けて処理させるための、または上記発話と自家電機器１００とを関連付けて処理させる優先順位を高めるための第１補助信号を生成する。第１特定状況は、ユーザの発話と自家電機器１００とが優先して関連付けられるべき状況である。第１補助信号は、「第２信号」の一例である。これらの具体例については後述する。

【0052】

また、補助信号生成部１８３は、自家電機器１００が第２特定状況にある場合、スマートスピーカ２００に対するユーザの発話と自家電機器１００とを関連付けさせないための、または上記発話と自家電機器１００とを関連付けて処理させる優先順位を低くするための第２補助信号を生成する。第２特定状況は、ユーザの発話と自家電機器１００とが優先して関連付けられるべきでない状況である。第２補助信号は、「第３信号」の一例である。これらの具体例については後述する。以下では、第１補助信号と第２補助信号とを互いに区別しない場合は、単に「補助信号」と称する。

【0053】

機器制御部１８４は、操作受付部Ｒにより受け付けられたユーザの操作、および機器制御サーバ装置５００から受信する制御コマンドに基づき、家電機器１００を制御する。例えば、機器制御部１８４は、操作受付部Ｒにより受け付けられたユーザの操作、および機器制御サーバ装置５００から受信する制御コマンドに基づき、アクチュエータ１７０を駆動する。

【0054】

データ送受信部１８５は、無線通信モジュール１６０を制御することで、スマートスピーカ２００や機器制御サーバ装置５００などとの間で信号およびデータを送受信する。例えば、データ送受信部１８５は、家電機器１００を制御するための制御コマンドを機器制御サーバ装置５００から受信する。また、データ送受信部１８５は、トリガ信号生成部１８１によりトリガ信号や追加信号が生成された場合、生成されたトリガ信号や追加信号をスマートスピーカ２００に送信する。データ送受信部１８５は、補助信号生成部１８３により補助信号が生成された場合、生成された補助信号をスマートスピーカ２００に送信する。

【0055】

データ送受信部１８５は、上記所定の状況が検知された場合、トリガ信号に加え、家電機器１００を制御する機器制御サーバ装置５００を特定するために用いることができる識別情報を送信する。別の観点で見ると、データ送受信部１８５は、上記所定の状況が検知された場合、トリガ信号に加え、家電機器１００の種別を特定するために用いることができる識別情報を送信する。またデータ送受信部１８５は、追加信号や補助信号を送信する場合、追加信号や補助信号に加えて、上記識別情報を送信する。

【0056】

上述したように、識別情報は、家電機器１００のＩＤ番号を示す情報に限らず、家電機器１００の通信アドレスなどを示す情報でもよい。例えば、識別情報が家電機器１００の通信アドレスである場合、音声対話サーバ装置４００は、後述する音声操作管理ＤＢ４２２を参照することで、家電機器１００を制御する機器制御サーバ装置５００および家電機器１００の種別を特定可能である。なお本明細書で「信号に加え、識別情報を送信する」とは、信号と同時に識別情報が送信される場合に限定されず、信号の送信前や信号の送信後に識別情報が送信される場合も含む。

【0057】

また、家電機器１００は、トリガ信号および識別情報をスマートスピーカ２００に送信することに代えて、トリガ信号および識別情報を音声対話サーバ装置４００または機器制御サーバ装置５００に送信してもよい。この場合、音声対話サーバ装置４００または機器制御サーバ装置５００は、家電機器１００から受信したトリガ信号をスマートスピーカ２００に送信（例えば転送）してもよい。

【0058】

また、家電機器１００は、スマートスピーカ２００の音声対話機能を起動させるトリガ信号そのものを送信することに代えて、上記所定の状況が検知された場合、トリガ信号に準ずる信号（以下、説明の便宜上「サブトリガ信号」と称する）を音声対話サーバ装置４００または機器制御サーバ装置５００に送信してもよい。サブトリガ信号は、上記所定の状況が発生したことを示す信号である。この場合、音声対話サーバ装置４００または機器制御サーバ装置５００は、家電機器１００から受け取るサブトリガ信号に基づきスマートスピーカ２００の音声対話機能を起動させるトリガ信号を生成し、生成したトリガ信号をスマートスピーカ２００に送信してもよい。サブトリガ信号は、「第１信号」の別の一例である。また以下の説明における「トリガ信号」は、「サブトリガ信号」と読み替えられてもよい。

【0059】

これらは、上述した追加信号や補助信号についても同様である。なお本明細書で「信号が家電機器１００から音声対話サーバ装置４００に送信される」とは、信号が家電機器１００から音声対話サーバ装置４００に直接送信される場合に限定されず、信号が家電機器１００から機器制御サーバ装置５００を経由して音声対話サーバ装置４００に送信される場合なども含む。

【0060】

［４．音声対話サーバ装置］
次に、音声対話サーバ装置４００について説明する。
図６は、音声対話サーバ装置４００の機能構成を示すブロック図である。音声対話サーバ装置４００は、例えば、通信モジュール４１０、記憶部４２０、および情報処理部４３０を有する。

【0061】

通信モジュール４１０は、高周波回路などを含む。通信モジュール４１０は、ネットワークＮＷおよびルータ３００を介してスマートスピーカ２００と通信可能である。また、通信モジュール４１０は、ネットワークＮＷを介して機器制御サーバ装置５００と通信可能である。

【0062】

記憶部４２０は、音声ＤＢ４２１と、音声操作管理ＤＢ４２２とを格納している。音声ＤＢ４２１は、例えば、音声認識ＤＢ４２１ａと、発話ＤＢ４２１ｂとを含む。音声認識ＤＢ４２１ａには、スマートスピーカ２００に対するユーザの発話を分析するために用いられる辞書や物事の関係性を規定した情報などが登録されている。発話ＤＢ４２１ｂには、スマートスピーカ２００から出力される回答を生成するための音声データ（発話データ）が登録されている。

【0063】

図７は、音声操作管理ＤＢ４２２の内容の一例を示す図である。音声操作管理ＤＢ４２２には、家電機器１００から送信される識別情報（例えば通信アドレス）に基づき、家電機器１００を特定するための情報が登録されている。例えば、音声操作管理ＤＢ４２２では、家電機器１００の識別情報（例えば通信アドレス）と、家電機器１００を識別可能な家電機器ＩＤと、その家電機器１００のユーザを識別可能なユーザＩＤと、その家電機器１００に対応する機器制御サーバ装置５００のＩＤと、家電機器１００の種別とが対応付けられている。

【0064】

図６に戻り、音声対話サーバ装置４００の残りの構成について説明する。情報処理部４３０は、例えば、音声処理部４３１、発話対象判定部４３２、制御内容特定部４３３、制御指示生成部４３４、応答生成部４３５、およびデータ送受信部４３６を有する。

【0065】

音声処理部４３１は、スマートスピーカ２００により取得されたユーザの発話の音声データを分析する。例えば、音声処理部４３１は、音声認識処理を行うことで音声データをテキスト化する。また、音声処理部４３１は、テキスト化された音声データに対して自然言語処理を行うことで意味解釈（一次の意味解釈）を行う。これらの処理が行われたユーザの発話データは、発話対象判定部４３２および制御内容特定部４３３に出力される。

【0066】

発話対象判定部４３２は、複数の家電機器１００からトリガ信号が送信された場合、トリガ信号を送信した複数の家電機器１００のなかからユーザの発話対象である家電機器１００を判定する。例えば、発話対象判定部４３２は、家電機器１００から送信されたトリガ信号および識別情報、音声処理部４３１で意味解釈が行われたユーザの発話内容、音声操作管理ＤＢ４２２に登録されている内容（各家電機器１００の種別など）、および家電機器１００からの補助信号の有無などに基づき、ユーザの発話対象である家電機器１００を判定する。なお、発話対象判定部４３２の処理は、詳しく後述する。

【0067】

制御内容特定部４３３は、音声処理部４３１で意味解釈が行われたユーザの発話内容と、発話対象判定部４３２により判定された（特定された）発話対象の家電機器１００の種別とに基づき、ユーザの発話内容に対してより深い意味解釈（二次の意味解釈）を行い、家電機器１００に対する制御内容を特定する。言い換えると、制御内容特定部４３３は、家電機器１００の種別に基づいてユーザの発話内容を解析する。「家電機器１００の種別に基づきユーザの発話内容を解釈する」ことは、「ユーザの発話と、識別情報に基づいて特定された家電機器とを関連付けて行う所定の処理」の一例である。

【0068】

例えば、家電機器１００が冷蔵庫の場合、家電機器１００に対する制御内容は、「急速冷凍」や「急速製氷」、「解凍」などである。家電機器１００がオーブンレンジの場合、家電機器１００に対する制御内容は、「〇〇分加熱」や「解凍」などである。家電機器１００が洗濯機の場合、家電機器１００に対する制御内容は、「水量普通」や「ドライコース」などである。制御内容特定部４３３は、特定された制御内容を応答生成部４３５および制御指示生成部４３４に出力する。

【0069】

制御指示生成部４３４は、制御内容特定部４３３により特定された制御内容に応じた家電機器１００に対する制御指示を生成する。

【0070】

応答生成部４３５は、制御内容特定部４３３により意味解釈されたユーザの発話内容に対して回答すべき内容がある場合や、その他ユーザに報知すべき内容がある場合、発話ＤＢ４２１ｂを参照し、スマートスピーカ２００から出力させる音声データを生成する。ユーザの発話内容に対して回答すべき内容は、例えば、「冷蔵庫に急速製氷を指示しました」などである。報知すべき内容は、例えば、「あと〇〇分で氷ができます」などである。

【0071】

また応答生成部４３５は、トリガ信号を送信した家電機器１００（識別情報に基づいて特定された家電機器１００）に関してユーザに報知すると好ましい情報が機器制御サーバ装置５００から音声対話サーバ装置４００に送信された場合、その情報に基づき、スマートスピーカ２００から出力させる音声データを生成する。ユーザに報知すると好ましい情報は、トリガ信号を送信した家電機器１００に関連した情報であり、例えば、家電機器１００が冷蔵庫の場合は、在庫情報やレシピ情報であり、家電機器１００が洗濯機の場合は、直近１週間の花粉情報などである。

【0072】

データ送受信部４３６は、通信モジュール４１０を制御することで、スマートスピーカ２００や機器制御サーバ装置５００などとの間で信号およびデータを送受信する。データ送受信部４３６は、スマートスピーカ２００からユーザの発話の音声データを受信する。データ送受信部４３６は、受信した音声データを音声処理部４３１に出力する。またデータ送受信部４３６は、所定の信号（トリガ信号や補助信号など）を受信したことを示す情報と、上記所定の信号を受信した時刻を示す情報と、上記所定の信号を送信した家電機器１００の識別情報とをスマートスピーカ２００から受信する。

【0073】

また、データ送受信部４３６は、家電機器１００に対する制御指令を制御指示生成部４３４から受け取る。データ送受信部４３６は、音声操作管理ＤＢ４２２を参照し、ユーザの発話対象の家電機器１００に対応した機器制御サーバ装置５００を特定する。そしてデータ送受信部４３６は、特定された機器制御サーバ装置５００に、制御指示生成部４３４から受け取る制御指令を送信する。「ユーザの発話対象の家電機器１００に対応した機器制御サーバ装置５００を特定し、特定された機器制御サーバ装置５００に制御指令を送信することは、「ユーザの発話と、識別情報に基づいて特定された家電機器とを関連付けて行う所定の処理」の別の一例である。

【0074】

また、データ送受信部４３６は、スマートスピーカ２００により出力させる音声データを応答生成部４３５から受け取る。データ送受信部４３６は、応答生成部４３５から受け取る音声データをスマートスピーカ２００に送信する。

【0075】

［５．機器制御サーバ装置］
次に、機器制御サーバ装置５００について説明する。
図８は、機器制御サーバ装置５００の機能構成を示すブロック図である。機器制御サーバ装置５００は、例えば、通信モジュール５１０、記憶部５２０、および情報処理部５３０を有する。

【0076】

通信モジュール５１０は、高周波回路などを含む。通信モジュール５１０は、ネットワークＮＷおよびルータ３００を介して家電機器１００と通信可能である。通信モジュール５１０は、ネットワークＮＷを介して音声対話サーバ装置４００と通信可能である。

【0077】

記憶部５２０は、制御コマンドＤＢ５２１と、情報管理ＤＢ５２２とを格納している。制御コマンドＤＢ５２１には、家電機器１００を動作させるための各種制コマンドが記憶されている。情報管理ＤＢ５２２には、家電機器１００に関連した情報が記憶されている。例えば、家電機器１００が冷蔵庫の場合、情報管理ＤＢ５２２には、冷蔵庫内の食材の在庫情報（在庫の有無や入庫日、消費期限など）が記憶されている。例えば、家電機器１００が洗濯機の場合、直近１週間程度の間の花粉量などが記憶されている。

【0078】

情報処理部５３０は、例えば、制御コマンド生成部５３１、情報収集部５３２、情報選択部５３３、およびデータ送受信部５３４を有する。

【0079】

制御コマンド生成部５３１は、音声対話サーバ装置４００から受信した制御指示に基づき、家電機器１００に応じた制御コマンドを生成する。

【0080】

情報収集部５３２は、情報管理ＤＢ５２２に記憶させる家電機器１００に関連した情報を収集する。例えば、情報収集部５３２は、ユーザの端末機器６００に入力された情報（例えば冷蔵庫の在庫情報）や、ネットワークＮＷに接続された各種ウェブサイトで提供される情報を収集する。収集された情報は、情報管理ＤＢ５２２に記憶される。

【0081】

情報選択部５３３は、情報管理ＤＢ５２２に登録されている情報のなかから、スマートスピーカ２００からユーザに報知されると好ましい情報を選択する。

【0082】

データ送受信部５３４は、通信モジュール５１０を制御することで、家電機器１００や音声対話サーバ装置４００との間で信号およびデータを送受信する。データ送受信部５３４は、家電機器１００に対する制御指示を音声対話サーバ装置４００から受信した場合、受信した制御指示を、制御コマンド生成部５３１に出力する。データ送受信部５３４は、制御コマンド生成部５３１により生成された制御コマンドを、家電機器１００に送信する。また、データ送受信部５３４は、情報選択部５３３により選択された情報を、音声対話サーバ装置４００に送信する。

【0083】

［６．制御の全体フロー］
次に、制御の全体フローについて説明する。
図９は、情報処理システム１の制御の全体フローの一例を示すシーケンス図である。まず、家電機器１００のトリガ信号生成部１８１は、所定の状況の発生の有無を監視する。そして、トリガ信号生成部１８１は、所定の状況が発生した場合、扉開閉検知センサ１１０の検知結果や操作受付部Ｒに対する操作などに基づき、所定の状況が発生したことを検知する（Ｓ１０１）。

【0084】

次に、家電機器１００のトリガ信号生成部１８１は、所定の状況が発生したことが検知された場合、トリガ信号を生成する。家電機器１００のデータ送受信部１８５は、生成されたトリガ信号および家電機器１００の識別情報をスマートスピーカ２００に送信する（Ｓ１０２）。スマートスピーカ２００の起動判定部２５２は、家電機器１００からトリガ信号を受信した場合、スマートスピーカ２００の音声対話機能を起動させ、スマートスピーカ２００を待機状態とする（Ｓ１０３）。また、スマートスピーカ２００のデータ送受信部２５４は、家電機器１００からトリガ信号を受信したことを示す情報およびトリガ信号を送信した家電機器１００の識別情報などを、音声対話サーバ装置４００に送信する。

【0085】

次に、スマートスピーカ２００の音声受信部２５１は、マイク２１０に対するユーザの発話の有無を判定する（Ｓ１０４）。音声受信部２５１は、マイク２１０に対してユーザの発話がない場合（Ｓ１０４：ＮＯ）、スマートスピーカ２００が待機状態を維持する所定時間（待機時間）の経過の有無を判定する（Ｓ１０５）。

【0086】

音声受信部２５１は、上記所定時間が経過した場合（Ｓ１０５：ＹＥＳ）、タイムアウトすることで音声対話機能を終了する（Ｓ１０６）。一方で、音声受信部２５１は、上記所定時間が経過していない場合（Ｓ１０５：ＮＯ）、ステップＳ１０３の処理に戻る。

【0087】

音声受信部２５１は、マイク２１０に対してユーザの発話がある場合（Ｓ１０４：ＹＥＳ）、マイク２１０に入力されたユーザの発話を音声データとして受信する。データ送受信部２５４は、音声受信部２５１により受信された音声データを、音声対話サーバ装置４００に送信する（Ｓ１０７）。

【0088】

音声対話サーバ装置４００の音声処理部４３１は、音声認識ＤＢ４２１などを参照し、ユーザの発話の音声データを分析する（Ｓ１０８）。音声対話サーバ装置４００の制御内容特定部４３３は、音声処理部４３１などにより分析された音声データに基づき、家電機器１００に対してユーザが意図した制御内容を特定する（Ｓ１０９）。

【0089】

音声対話サーバ装置４００の制御指示生成部４３４は、制御内容特定部４３３により特定された制御内容に基づき、家電機器１００に対する制御指示を生成する。音声対話サーバ装置４００のデータ送受信部４３６は、制御指示生成部４３４により生成された制御指示を、機器制御サーバ装置５００に送信する（Ｓ１１０）。

【0090】

機器制御サーバ装置５００の制御コマンド生成部５３１は、音声対話サーバ装置４００から受信した制御指示に基づき、家電機器１００に対する制御コマンドを生成する（Ｓ１１１）。機器制御サーバ装置５００のデータ送受信部５３４は、生成した制御コマンドを、家電機器１００に送信する（Ｓ１１２）。

【0091】

家電機器１００のデータ送受信部１８５は、受信した制御コマンドに対する制御応答を機器制御サーバ装置５００に送信する（Ｓ１１３）。制御応答は、例えば、制御コマンドが家電機器１００に正常に通知されたか否かを示すものである。家電機器１００の機器制御部１８４は、受信した制御コマンドに基づき家電機器１００を制御する（Ｓ１１４）。

【0092】

機器制御サーバ装置５００のデータ送受信部５３４は、家電機器１００から受信した制御応答を、音声対話サーバ装置４００に送信する（Ｓ１１５）。音声対話サーバ装置４００の応答生成部４３５は、機器制御サーバ装置５００から受信した制御応答に基づき、スマートスピーカ２００により出力する音声データを生成する（Ｓ１１６）。音声対話サーバ装置４００のデータ送受信部４３６は、生成した音声データをスマートスピーカ２００に送信する（Ｓ１１７）。スマートスピーカ２００の音声出力部２５５は、音声対話サーバ装置４００から受信した音声データに基づき、制御応答に対応した音声をスピーカ２２０から出力する（Ｓ１１８）。なお、Ｓ１１３、Ｓ１１５～Ｓ１１８の処理は、家電機器１００の制御が完了したタイミングで行われてもよい。

【0093】

［７．発話対象の判定処理］
［７．１ 基本処理］
次に、音声対話サーバ装置４００の発話対象の判定に関する処理について説明する。
図１０は、発話対象の判定に関する処理の流れを示すフローチャートである。まず、音声対話サーバ装置４００の音声受信部２５１は、スマートスピーカ２００に対して発話されたユーザの音声データを取得する（Ｓ２０１）。

【0094】

音声対話サーバ装置４００の発話対象判定部４３２は、音声受信部２５１により音声データが取得された場合、同じ待機時間中において音声受信部２５１により音声データが取得される前に複数の家電機器１００からトリガ信号が受信されているか否かを判定する（Ｓ２０２）。

【0095】

発話対象判定部４３２は、１つの家電機器１００のみからトリガ信号が受信されている場合（Ｓ２０２：ＮＯ）、その家電機器１００がユーザの発話対象であると判定する。この場合、音声対話サーバ装置４００の情報処理部４３０は、当該１つの家電機器１００とユーザの発話とを関連付けて所定の処理を行う。「所定の処理」は、例えば、家電機器１００の識別情報と音声操作管理ＤＢ４２２とに基づき家電機器１００の種別を特定し、特定された家電機器１００の種別に基づきユーザの発話内容の意味解釈を行う第１処理と、家電機器１００の識別情報と音声操作管理ＤＢ４２２とに基づき家電機器１００に対応する機器制御サーバ装置５００を特定し、特定された機器制御サーバ装置５００にユーザの発話内容に基づく制御指示を送信する第２処理とを含む。ただし、本明細書でいう「所定の処理」は、上記第１処理と第２処理とのうち少なくとも一方でもよいし、上記第１処理および第２処理とは異なる別の処理でもよい。なお、発話対象判定部４３２は、１つの家電機器１００のみからトリガ信号が受信されている場合であっても、後述する親和性の判定を行い、親和性が基準未満である場合は、ユーザの発話が家電機器１００の制御と無関係なものと判定し、特段の処理は行わなくてもよい。

【0096】

一方で、制御内容特定部４３３は、複数の家電機器１００からトリガ信号が受信されている場合（Ｓ２０２：ＹＥＳ）、複数の家電機器１００のなかでどの家電機器１００が発話対象であるかを判定する。本実施形態では、制御内容特定部４３３は、トリガ信号を受信した時刻が後の家電機器１００ほど、発話との関連付けに対する高い優先度を与える。このため、制御内容特定部４３３は、まず、複数の家電機器１００のなかで最後にトリガ信号を送信した家電機器１００とユーザの発話内容との親和性が基準以上（閾値以上）であるか否かを判定する（Ｓ２０４）。なお「親和性が基準以上（または親和性が基準未満）」とは、親和性を示す値が基準以上（または親和性を示す値が基準未満）であることを意味する。「親和性を示す値」とは、例えば、「家電機器の種類と発話の内容との親和性に応じて予め設定された値」または「家電機器になされる操作の種類と発話の内容との親和性に応じて予め設定された値」などである。

【0097】

ここで、例えば「冷やす」や「冷却」といった発話内容は、冷蔵庫１００Ａの基本動作と一致する内容であるため、冷蔵庫１００Ａとの親和性は基準以上と判定される。一方で、「冷やす」や「冷却」といった内容は、オーブンレンジ１００Ｂや洗濯機１００Ｃの基本動作とは一致しないため、オーブンレンジ１００Ｂや洗濯機１００Ｃとの親和性は基準未満と判定される。逆に「温めて」や「トースト」、「５００Ｗ」といった発話内容は、オーブンレンジ１００Ｂの基本動作と一致する内容であるため、オーブンレンジ１００Ｂとの親和性は基準以上と判定される。一方で、「温めて」や「トースト」、「５００Ｗ」といった発話内容は、冷蔵庫１００Ａや洗濯機１００Ｃの基本動作とは一致しないため、冷蔵庫１００Ａや洗濯機１００Ｃとの親和性は基準未満と判定される。

【0098】

発話対象判定部４３２は、家電機器１００とユーザの発話内容との親和性が基準以上である場合（Ｓ２０４：ＹＥＳ）、その家電機器１００がユーザの発話対象であると判定する。この場合、音声対話サーバ装置４００の情報処理部４３０は、ユーザの発話対象と判定された家電機器１００とユーザの発話とを関連付けて上記所定の処理を行う（Ｓ２０５）。

【0099】

一方で、発話対象判定部４３２は、親和性が基準未満であると判定された場合（Ｓ２０４：ＮＯ）、次に、複数の家電機器１００のなかで１つ前にトリガ信号を送信した家電機器１００とユーザの発話内容との親和性が基準以上であるか否かを判定する（Ｓ２０６）。そして、発話対象判定部４３２は、家電機器１００とユーザの発話内容との親和性が基準以上である場合（Ｓ２０６：ＹＥＳ）、その家電機器１００がユーザの発話対象であると判定する。この場合、音声対話サーバ装置４００の情報処理部４３０は、ユーザの発話対象と判定された家電機器１００とユーザの発話とを関連付けて上記所定の処理を行う（Ｓ２０７）。

【0100】

発話対象判定部４３２は、Ｎ台（Ｎは１以上の整数）の家電機器１００からトリガ信号が受信されている場合、Ｎ台の家電機器１００に対して上記判定処理を繰り返す（Ｓ２０８）。そして、発話対象判定部４３２は、家電機器１００とユーザの発話内容との親和性が基準以上である場合（Ｓ２０８：ＹＥＳ）、その家電機器１００がユーザの発話対象であると判定する。この場合、音声対話サーバ装置４００の情報処理部４３０は、ユーザの発話対象と判定された家電機器１００とユーザの発話とを関連付けて上記所定の処理を行う（Ｓ２０９）。

【0101】

その後、応答生成部４３５は、家電機器１００の種別に基づいて意味解釈を行うことで特定された家電機器１００に対する制御内容に基づき、特定された制御内容（実行予定の制御内容）をユーザに報知する音声データを生成する（Ｓ２１０）。そして、データ送受信部４３６は、応答生成部４３５により生成された音声データをスマートスピーカ２００に送信し、特定された制御内容をスマートスピーカ２００により報知させる。これにより、例えば「電子レンジで温めを開始します」という音声がスマートスピーカ２００から出力される。このような報知を行うことで、音声対話サーバ装置４００での推定が誤っても、ユーザの意図に反した制御を回避しやすくなる。

【0102】

なお上記に代えて、応答生成部４３５は、特定された制御内容で問題がないかをユーザに確認するための音声データを生成してもよい。データ送受信部４３６は、応答生成部４３５により生成された音声データをスマートスピーカ２００に送信し、特定された制御内容で問題がないかユーザに確認するための音声をスマートスピーカ２００により出力させる。これにより、例えば「電子レンジで温めを開始しますか？」という音声がスマートスピーカ２００から出力される。このような報知を行うことで、音声対話サーバ装置４００での推定が誤っても、ユーザの意図に反した制御を回避しやすくなる。

【0103】

一方で、Ｎ台の家電機器１００に対して上記判定処理を繰り返してもユーザの発話内容との親和性が基準以上の家電機器１００が発見されない場合（Ｓ２０８：ＮＯ）、発話対象判定部４３２は、ユーザの発話が家電機器１００の制御と無関係なものと判定し、特段の処理は行わない。これにより、家電機器１００とは無関係な内容がユーザによって発話された場合に、ユーザが意図しない処理を行うことを避けることができる。

【0104】

［７．２ 別の処理］
次に、いくつかの別の処理について説明する。これら処理は、上記基本処理と組み合わされて実行されてもよいし、上記基本処理の代わりに実行されてもよい。

【0105】

［７．２．１ 処理１］
発話対象判定部４３２は、例えば、原則としてトリガ信号を後に送信した家電機器１００ほど、ユーザの発話と関連付ける優先順位を高くする。ここで、スマートスピーカ２００が家電機器１００から上記第１補助信号（優先順位を高くするための信号）を受信した場合、第１補助信号を送信した家電機器１００の優先順位を高める処理を行う。例えば、発話対象判定部４３２は、複数の家電機器１００からトリガ信号が受信されている状態において、第１補助信号を送信した家電機器１００から優先して上記親和性を判定する。また、発話対象判定部４３２は、親和性の判定を行うことなく、最も後に第１補助信号を送信した家電機器１００と、ユーザの発話とを関連付けて上記所定の処理を行ってもよい。

【0106】

具体的な一例を説明する。例えば、オーブンレンジ１００Ｂは、扉１０２が開閉された場合にトリガ信号を送信し、操作受付部Ｒのモード選択ボタン（オーブンモードやレンジモードなどを選択するためのボタン）が押されたが、その後の所定時間内に操作受付部Ｒの加熱開始ボタンが押されない場合（第１特定状況の一例）、第１補助信号を送信するものとする。ある場面で、オーブンレンジ１００Ｂの扉１０２が開閉され、オーブンレンジ１００Ｂのモード選択ボタンが押されたが、その後、加熱開始ボタンが押されないまま、冷蔵庫１００Ａの扉１０２が開閉されて冷蔵庫１００Ａからトリガ信号が送信され、その後、ユーザの発話があったとする。この場合、最後にトリガ信号を送信した家電機器１００は冷蔵庫１００Ａであるが、発話対象判定部４３２は、第１補助信号を送信したオーブンレンジ１００Ｂとユーザの発話とを関連付けを、冷蔵庫１００Ａとユーザの発話との関連付けよりも優先する。

【0107】

このような構成によれば、例えば、オーブンレンジ１００Ｂの動作モードを選択したものの、加熱時間が分からず、冷蔵庫１００Ａに収納された食品のパッケージの表記を確認して、発話により加熱の時間を指定する場合などでも、家電機器１００とユーザの発話とを適切に関連付けすることができる。第１特定状態は、例えば、家電機器１００を動作させるユーザの意図が推定されるが、家電機器１００の動作がまだ開始されていない状態である。「モード選択ボタンが押される」ことは、家電機器１００を動作させるユーザの意図が推定させる事象の一例である。

【0108】

［７．２．２ 処理２］
発話対象判定部４３２は、例えば、原則としてトリガ信号を後に送信した家電機器１００ほど、ユーザの発話内容と関連付ける優先順位を高くする。ここで、スマートスピーカ２００が家電機器１００から上記第２補助信号（優先順位を低くするための信号）を受信した場合、第２補助信号を送信した家電機器１００の優先順位を低下させる処理を行う。例えば、発話対象判定部４３２は、複数の家電機器１００からトリガ信号が受信されている状態において、第２補助信号を送信した家電機器１００を後回しにして上記親和性を判定する。また、発話対象判定部４３２は、第２補助信号を送信した家電機器１００を親和性の判定対象から除外してもよい。

【0109】

具体的な一例を紹介する。例えば、オーブンレンジ１００Ｂは、扉１０２が開閉された場合にトリガ信号を送信し、操作受付部Ｒの加熱開始ボタンが押された場合（第２特定状況の一例）、第２補助信号を送信するものとする。ある場面で、冷蔵庫１００Ａの扉１０２が開閉されて冷蔵庫１００Ａからトリガ信号が送信され、その後、オーブンレンジ１００Ｂの扉１０２が開閉されてオーブンレンジ１００Ｂからトリガ信号が送信され、その後、オーブンレンジ１００Ｂの加熱開始ボタンが押されて第２補助信号が送信されたとする。この場合、最後にトリガ信号を送信した家電機器１００はオーブンレンジ１００Ｂであるが、発話対象判定部４３２は、第２補助信号を送信したオーブンレンジ１００Ｂの優先順位を低下させ、先に冷蔵庫１００Ａとユーザの発話内容の親和性を判定する。

【0110】

このような構成によれば、例えば、冷蔵庫１００Ａに対する発話による操作が後回しにされた場合などでも、家電機器１００とユーザの発話とを適切に関連付けすることができる。第２特定状態は、例えば、ユーザの意図に従って家電機器１００の動作がすでに開始された状態である。「加熱開始ボタン」は、ユーザの意図に従って家電機器１００の動作を開始させる操作部の一例である。

【0111】

［７．２．３ 処理３］
図１１は、発話対象判定部４３２の判定ルールの内容の一例を示す図である。図１１には、複数の家電機器１００のいずれに対しても親和性が基準以上の言葉が発話に含まれる場合を示している。このような場合、発話対象判定部は、以下に示す（Ａ）～（Ｅ）のうちいずれか１つ以上の判定ルールに従い発話対象の判定を行う。

【0112】

（Ａ）発話対象判定部４３２は、「あとおねがい」、「あとよろしく」など、具体的な内容はなく開始だけを指示する発話である場合、原則として、直前に（最も後に）トリガ信号を送信した家電機器１００を優先して、家電機器１００とユーザの発話との関連付けを行う。

【0113】

（Ｂ）発話対象判定部４３２は、「あとおねがい」、「あとよろしく」など、具体的な内容はなく開始だけを指示する発話である場合であっても、基本機能が常時働く家電機器１００（例えば冷蔵庫１００Ａ）よりも、操作された場合のみ基本機能が働く家電機器１００（例えばオーブンレンジ１００Ｂ）を優先して、家電機器１００とユーザの発話との関連付けを行う。例えば、オーブンレンジ１００Ｂが開閉された後、冷蔵庫１００Ａが開閉された場合でも、オーブンレンジ１００Ｂを優先して家電機器１００と発話との関連付けを行う。

【0114】

（Ｃ）発話対象判定部４３２は、「せつでんもーど」のような節電や省エネだけを指示する発話である場合、直前に（最も後に）トリガ信号を送信した家電機器１００を優先して、家電機器１００とユーザの発話との関連付けを行う。

【0115】

（Ｄ）発話対象判定部４３２は、「ひやしておいて」、「きゅうれい」のような、家電機器１００（例えば冷蔵庫１００Ａ）におけるどの空間（例えば、冷蔵室、冷凍室、製氷室）に対する指示であるか不明な場合は、直前に操作（開閉）された空間とユーザの発話との関連付けを行う。

【0116】

（Ｅ）発話対象判定部４３２は、「いそいで」のような、通常よりも急ぐことだけを指示する発話である場合、直前に（最も後に）トリガ信号を送信した家電機器１００を優先して、家電機器１００とユーザの発話との関連付けを行う。

【0117】

［７．２．４ 処理４］
例えば、家電機器１００は、筐体１０１の空間（例えば、冷蔵庫１００Ａの貯蔵室、オーブンレンジ１００Ｂの加熱室、洗濯機１００Ｃの洗濯槽の内部）内の物の有無を検出可能なセンサを備える。そして、家電機器１００のトリガ信号生成部１８１は、筐体１０１の空間内に物が存在しない（空である）ことがセンサにより検出された場合、筐体１０１内の空間の中身が存在しないことを示す情報を、スマートスピーカ２００を介して音声対話サーバ装置４００に出力してもよい。音声対話サーバ装置４００の発話対象判定部４３２は、筐体１０１内の空間の中身が存在しないことを示す情報が受信された場合、その情報を送信した家電機器１００とユーザの発話との関連付けの優先順位を低下させる。

【0118】

また、家電機器１００のトリガ信号生成部１８１は、筐体１０１の空間内に物が存在しない（空である）状態から空間に物が投入されたことがセンサにより検出された場合、筐体１０１の空間内に物が新しく投入されたことを示す情報を、スマートスピーカ２００を介して音声対話サーバ装置４００に出力してもよい。音声対話サーバ装置４００の発話対象判定部４３２は、筐体１０１の空間内に新しく物が投入されたことを示す情報が受信された場合、その情報を送信した家電機器１００とユーザの発話との関連付けの優先順位を高めてもよい。

【0119】

［７．２．５ 処理５］
音声対話サーバ装置４００の発話対象判定部４３２は、トリガ信号が送信されたタイミングと、ユーザの発話のタイミングが所定時間内である場合（例えば、ユーザの発話のタイミングの直前にトリガ信号が送信された場合）、そのトリガ信号を送信した家電機器１００とユーザの発話とを関連付けてもよい。

【0120】

［８．利点］
比較例として、スマートスピーカ２００の音声対話機能を起動させるのにトリガワードの発話が必要である場合を考える。この場合、ユーザは、トリガワードを覚えておく必要があり、またスマートスピーカ２００の音声対話機能を起動させるために毎回トリガワードを発する必要がある。

【0121】

一方で、本実施形態では、家電機器１００の制御部１８０は、所定の状況が検知された場合、スマートスピーカ２００の音声対話機能を起動させるためのトリガ信号をスマートスピーカ２００に送信する。このような構成によれば、トリガワードを覚えておく必要もなく、トリガワードを発する必要もなくなる。これにより、ユーザの利便性を高めることができる。

【0122】

本実施形態では、家電機器１００の制御部は、トリガ専用操作部１３０が操作された場合、トリガ信号を送信する。このような構成によれば、ユーザが任意のタイミングでトリガ信号を送信することができる。これにより、ユーザの利便性をさらに高めることができる。例えば、スマートスピーカ２００がキッチンに置かれている場合を想定する。ユーザは、食事の準備をするために、家事を行っている。ユーザは、冷蔵庫１００Ａの中を確認して何を作ろうか考えるときに、冷蔵庫１００Ａにあるトリガ専用操作部１３０を操作し、冷蔵庫１００Ａの扉１０２を開ける。そこで、冷蔵庫１００Ａに入っていた牛肉をみて、「牛肉を使ったレシピ教えて」と発話すると、スマートスピーカ２００が音声対話サーバ装置４００に問い合わせて、牛肉を使ったレシピを提案してくれる。このように使用することで、家事をしながら手間なく音声操作をすることができる。

【0123】

本実施形態では、家電機器１００の制御部１８０は、筐体１０１の開口１０１ａに対して扉１０２が開かれた場合、トリガ信号を送信する。このような構成によれば、家電機器１００の内部に物を入れるときにトリガワードを発することなくスマートスピーカ２００の音声対話機能を起動させることができる。一例としては、冷蔵庫１００Ａの扉１０２を開けたタイミングで音声対話機能が起動すると、ユーザは、冷蔵庫１００Ａの内部を確認しながら、スマートスピーカ２００との音声対話により冷蔵庫１００Ａの在庫状態の登録などを行うことができる。

【0124】

本実施形態では、家電機器１００の制御部１８０は、筐体１０１の開口１０１ａに対して扉１０２が閉められた場合、トリガ信号を送信する。このような構成によれば、家電機器１００の内部に対する作業を完了した後にトリガワードを発することなくスマートスピーカ２００の音声対話機能を起動させることができる。一例としては、冷蔵庫１００Ａの扉１０２を閉めたタイミングで音声対話機能が起動すると、ユーザは、スマートスピーカ２００との音声対話により冷蔵庫１００Ａの急速冷凍の指示などを行うことができる。例えば、洗面所にスマートスピーカ２００が設置された場合を想定する。洗濯機１００Ｃの電源を入れ、洗濯物を洗濯槽に入れ扉１０２を閉める。このときに、洗濯機１００Ｃからスマートスピーカ２００にトリガ信号が送信される。ここで「毛布を洗う」と発話すると、スマートスピーカ２００は、音声対話サーバ装置４００（または機器制御サーバ装置５００）に問い合わせて、洗濯機１００Ｃに毛布洗いモードの制御コマンドを送信する。

【0125】

本実施形態では、家電機器１００の制御部１８０は、人感センサ１２０により人の存在が検知された場合、トリガ信号を送信する。このような構成によれば、ユーザは、家電機器１００に近付くだけで、手間なく、スマートスピーカ２００との音声対話により家電機器１００を制御することができる。例えば、スマートスピーカ２００がキッチンに置かれている場合を想定する。冷蔵庫１００Ａには人感センサ１２０が搭載されている。ユーザがキッチンの冷蔵庫１００Ａの前にきたことが検知された場合、冷蔵庫１００Ａはスマートスピーカ２００にトリガ信号を送信する。ユーザが「おすすめのレシピ教えて」と発話すると、スマートスピーカ２００は、音声対話サーバ装置４００に問い合わせて、おすすめレシピを提案してくれる。

【0126】

本実施形態では、家電機器１００の制御部１８０は、電源操作部１４０が操作された場合（例えば、電源をＯＮ状態にする操作がされた場合）、トリガ信号を送信する。このような構成によれば、電源ＯＮ後のモード設定などを、手間なく、スマートスピーカ２００との音声対話により行うことができる。例えば、洗濯機１００Ｃやオーブンレンジ１００Ｂなど、通常は電源がＯＦＦ状態となっている家電機器１００がある。このような家電機器１００においては洗濯機１００Ｃの電源操作部１４０を操作された場合や、オーブンレンジ１００Ｂの扉１０２が開いて電源がオン状態にされた場合に、家電機器１００はスマートスピーカ２００にトリガ信号を送信する。ここでユーザが洗濯モードやレシピなどを発話することで、手軽に音声操作を行うことができる。また、家電機器１００の制御部１８０は、電源がＯＮ状態からＯＦＦ状態にされた場合にトリガ信号を送信してもよい。このような構成によれば、家電機器１００の動作の予約の設定などをし忘れた場合でも、家電機器１００の電源が切れた状態で、音声対話により行うことができる。

【0127】

ここで、ユーザによっては操作の仕方や癖などにより、音声対話機能を起動させたい行為と、音声対話機能を起動させたくない行為があることが想定される。そこで本実施形態では、家電機器１００の制御部１８０は、家電機器１００の操作受付部Ｒに対するユーザの操作と、家電機器１００とは端末機器６００に対するユーザの操作とのうち少なくとも一方に基づき、１つ以上の状況に関してトリガ信号を送信するか否かの設定を変更する。このような構成によれば、ユーザの使い勝手によりトリガ信号を送信する操作や状況を任意に設定することができる。さらに、家電機器１００とは別の端末機器６００に対するユーザの操作によって設定が可能であると、家電機器１００に表示画面を含むユーザインターフェースがない場合であっても、上記設定を行うことができる。

【0128】

本実施形態では、家電機器１００の制御部１８０は、所定の状況が検知された場合、トリガ信号に加え、家電機器１００を制御する機器制御サーバ装置５００を特定するために用いられる情報を送信する。このような構成によれば、ユーザは、家電機器１００を特定するためのワードを発することなく、音声により家電機器１００を操作することができる。これにより、ユーザの利便性をさらに高めることができる。

【0129】

本実施形態では、スマートスピーカ２００の情報処理部２５０は、家電機器１００からトリガ信号が送信された場合、家電機器１００とは独立して配置されるスマートスピーカ２００の音声対話機能を起動させる。このような構成によれば、予め定められたトリガワードを発話することなく、スマートスピーカ２００の音声対話機能を起動させることができる。これにより、ユーザの利便性を高めることができる。

【0130】

（第２の実施形態）
次に、第２の実施形態について説明する。本実施形態では、ユーザの家屋に配置される１台の家電機器１００（以下、音声対話家電機器１００Ｖ）が音声対話機能を有する例である。また第２の実施形態は、後述するトリガ信号が家電機器１００から音声対話家電機器１００Ｖに送信される例である。なお以下に説明する以外の構成は、第１の実施形態と同様である。

【0131】

図１２は、第２の実施形態の情報処理システム１の全体構成を示す図である。情報処理システム１は、例えば、１つ以上（例えば複数）の家電機器１００、音声対話家電機器１００Ｖ、家庭内のルータ３００、音声対話サーバ装置４００、機器制御サーバ装置５００、および端末機器６００を含む。なお、音声対話サーバ装置４００および機器制御サーバ装置５００は、１台のサーバ装置によって構成されてもよい。

【0132】

音声対話家電機器１００Ｖは、家電機器１００から見た「外部機器」の一例である。音声対話家電機器１００Ｖは、通常の家電機器１００と同じ機能（例えば、冷蔵庫の機能、オーブンレンジの機能、または洗濯機の機能）に加え、音声対話装置２００を有する。音声対話装置２００は、例えば、第１の実施形態のスマートスピーカ２００と同様の機能を有してもよく、家電機器１００を操作するため専用の音声対話装置であってもよい。

【0133】

以上、第１および第２の実施形態について説明したが、実施形態は上記例に限定されない。例えば、第１および第２の実施形態では、家電機器１００に対する制御コマンドは、機器制御サーバ装置５００から家電機器１００に送信されているが、これに限定されない。家電機器１００に対する制御コマンドは、機器制御サーバ装置５００（または音声対話サーバ装置４００）からスマートスピーカ２００または音声対話家電装置２００に送られ、スマートスピーカ２００または音声対話家電装置２００から家電機器１００に送られてもよい。本明細書中の「第１」、「第２」などの序数は、説明の便宜上のものであり、適宜付け直されてよい。

【0134】

スマートスピーカ２００の記憶部２４０、音声対話サーバ装置４００の記憶部４２０、および機器制御サーバ装置５００の記憶部５２０は、例えば、半導体メモリチップや、ＳＳＤ（Solid State Drive）、またはＨＤＤ（Hard Disk Drive）などのうち１つ以上により構成されている。

【0135】

家電機器１００の制御部１８０、スマートスピーカ２００の制御部２５０、音声対話サーバ装置４００の情報処理部４３０、および機器制御サーバ装置５００の情報処理部５３０は、例えば、ＣＰＵ（Central Processing Unit）のようなハードウェアプロセッサがプログラム（ソフトウェア）を実行することにより実現される。ただし、制御部１８０、制御部２５０、情報処理部４３０、および情報処理部５３０の各々の全部または一部は、ＡＳＩＣ（Application Specific Integrated Circuit）やＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）などのハードウェア（回路部；circuitryを含む）によって実現されてもよいし、ソフトウェアとハードウェアとの協働によって実現されてもよい。

【0136】

以上説明した少なくともひとつの実施形態によれば、家電機器は、外部機器の音声対話機能を起動させるための第１信号を前記外部機器またはサーバ装置に送信する制御部を持つことにより、ユーザの利便性の向上を図ることができる。
＜付記＞
以下にいくつかの家電機器および情報処理システムを付記する。
（１）所定の状況が検知された場合、外部機器の音声対話機能を起動させるための第１信号を前記外部機器またはサーバ装置に送信する制御部、
を備えた家電機器。
（２）前記音声対話機能を起動させるための操作を受け付けるトリガ操作部をさらに備え、 前記制御部は、前記トリガ操作部が操作された場合、前記第１信号を送信する、
（１）に記載の家電機器。
（３）開口を有した筐体と、
前記開口を閉じる扉と、をさらに備え、
前記制御部は、前記開口に対して前記扉が開かれた場合、前記第１信号を送信する、
（１）または（２）に記載の家電機器。
（４）開口を有した筐体と、
前記開口を閉じる扉と、をさらに備え、
前記制御部は、前記開口に対して前記扉が閉じられた場合、前記第１信号を送信する、
（１）から（３）のうちいずれか１つに記載の家電機器。
（５）人感センサをさらに備え、
前記制御部は、前記人感センサにより人の存在が検知された場合、前記第１信号を送信する、
（１）から（４）のうちいずれか１項に記載の家電機器
（６）電源操作部をさらに備え、
前記制御部は、前記電源操作部が操作された場合、前記第１信号を送信する、
（１）から（５）のうちいずれか１項に記載の家電機器。
（７）前記制御部は、前記家電機器の操作受付部に対するユーザの操作と、前記家電機器とは別の端末機器に対するユーザの操作とのうち少なくとも一方に基づき、１つ以上の状況に関して前記第１信号を送信するか否かの設定を変更する、
（１）から（６）のうちいずれか１項に記載の家電機器。
（８）前記制御部は、前記所定の状況が検知された場合、前記第１信号に加え、前記家電機器を制御するサーバ装置を特定するために用いることができる情報を送信する、
（１）から（７）のうちいずれか１項に記載の家電機器。
（９）前記制御部は、前記所定の状況が検知された場合、前記第１信号に加え、前記家電機器の種別を特定するために用いることができる情報を送信する、
（１）から（８）のうちいずれか１項に記載の家電機器。
（１０）前記制御部は、前記家電機器が第１特定状況にある場合、前記外部機器に対するユーザの発話と前記家電機器とを関連付けて処理させるための、または前記発話と前記家電機器とを関連付けて処理させる優先順位を高めるための第２信号を前記外部機器または前記サーバ装置に送信する、
（１）から（９）のうちいずれか１項に記載の家電機器。
（１１）前記制御部は、前記家電機器が第２特定状況にある場合、前記外部機器に対するユーザの発話と前記家電機器とを関連付けさせないための、または前記発話と前記家電機器とを関連付けて処理させる優先順位を低くするための第３信号を前記外部機器または前記サーバ装置に送信する、
（１）から（１０）のうちいずれか１項に記載の家電機器。
（１２）前記外部機器は、ユーザが発話したトリガワードに基づいて前記音声対話機能を起動させた場合、第１所定時間に亘りユーザの発話が無い場合に前記音声対話機能を終了し、
前記制御部は、前記所定の状況が検知された場合、ユーザの発話が無い場合であっても前記音声対話機能の起動状態を前記第１所定時間よりも長い第２所定時間に亘り維持させるための追加信号を前記外部機器または前記サーバ装置に送信する、
（１）から（１１）のうちいずれか１項に記載の家電機器。
（１３）家電機器から第１信号が送信された場合、前記家電機器とは独立して配置される機器の音声対話機能を起動させる情報処理部、
を備えた情報処理システム。
（１４）前記情報処理部は、前記第１信号と、前記家電機器を特定するために用いることができる識別情報とを受信した場合、前記音声対話機能に対するユーザの発話と、前記識別情報に基づいて特定された前記家電機器とを関連付けて所定の処理を行う、
（１３）に記載の情報処理システム。
（１５）前記情報処理部は、複数の家電機器から前記第１信号を受信した後に前記音声対話機能に対するユーザの発話があった場合、前記複数の家電機器のなかで最後に前記第１信号を送信した家電機器と前記発話とを関連付けて前記所定の処理を行う、
（１４）に記載の情報処理システム。
（１６）前記所定の処理は、前記家電機器の種別に基づいて前記発話の内容を解析することを含む、
（１４）または（１５）に記載の情報処理システム。
（１７）前記情報処理部は、複数の家電機器から前記第１信号を受信した後に前記音声対話機能に対するユーザの発話があった場合、前記複数の家電機器のなかで最後に前記第１信号を送信した家電機器と前記発話の内容との親和性が基準以上であるか否かを判定し、前記親和性が基準以上である場合、最後に前記第１信号を送信した前記家電機器と前記発話の内容とを関連付けて所定の処理を行う、
（１３）１３から（１６）のいずれか１項に記載の情報処理システム。
（１８）前記情報処理部は、前記複数の家電機器のなかで最後に前記第１信号を送信した家電機器と前記発話の内容との親和性が前記基準未満である場合、前記複数の家電機器のなかで１つ前に前記第１信号を送信した家電機器と前記発話の内容との親和性を判定する、
（１７）に記載の情報処理システム。
（１９）前記情報処理部は、前記第１信号と、前記家電機器を特定するために用いることができる識別情報とを受信した場合、前記識別情報に基づいて特定された前記家電機器に関する情報を前記音声対話機能により報知させる、
（１３）から（１８）のいずれか１項に記載の情報処理システム。

【0137】

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

【符号の説明】

【0138】

１…情報処理システム、１００…家電機器、１００Ｖ…音声対話家電機器（外部機器）、１０１…筐体、１０１ａ…開口、１０２…扉、１１０…扉開閉検知センサ、１２０…人感センサ、１３０…トリガ専用操作部、１４０…電源操作部、１５０…表示・操作部、Ｒ…入力受付部、１８０…制御部、２００…スマートスピーカ（外部機器）、２５０…制御部（情報処理部）、４００…音声対話用のサーバ装置、４３０…情報処理部、５００…家電機器制御用のサーバ装置、５３０…情報処理部。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】