特許 7341426 通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-09-01

(45)【発行日】2023-09-11

(54)【発明の名称】通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法

(51)【国際特許分類】

   G06F 3/16 20060101AFI20230904BHJP

   H04Q 9/00 20060101ALI20230904BHJP

【ＦＩ】

G06F3/16 500

G06F3/16 680

H04Q9/00 311Q

【請求項の数】 12

(21)【出願番号】P 2019214632

(22)【出願日】2019-11-27

(65)【公開番号】P2021086383

(43)【公開日】2021-06-03

【審査請求日】2022-10-24

(73)【特許権者】

【識別番号】504165591

【氏名又は名称】国立大学法人岩手大学

(73)【特許権者】

【識別番号】504261077

【氏名又は名称】大学共同利用機関法人自然科学研究機構

(74)【代理人】

【識別番号】100098545

【弁理士】

【氏名又は名称】阿部 伸一

(74)【代理人】

【識別番号】100189717

【弁理士】

【氏名又は名称】太田 貴章

(72)【発明者】

【氏名】千葉 寿

(72)【発明者】

【氏名】豊田 朋範

(72)【発明者】

【氏名】古舘 守通

(72)【発明者】

【氏名】藤崎 聡美

【審査官】星野 裕

(56)【参考文献】

【文献】特開２０１６－０７６７９９（ＪＰ，Ａ）

【文献】特開２０１４－２３００６１（ＪＰ，Ａ）

【文献】特開２０１４－００２５０１（ＪＰ，Ａ）

【文献】特開２０１８－１２９７５１（ＪＰ，Ａ）

【文献】特開２００５－２３４６９５（ＪＰ，Ａ）

【文献】特開２００５－０１７９７４（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／１６

Ｈ０４Ｑ ９／００

(57)【特許請求の範囲】

【請求項1】

外部からの音声を認識してデータを送信する音声認識中継処理装置と、
前記音声認識中継処理装置から送信される前記データを受信し、前記データに基づく動作指示データを制御対象装置に送信するとともに、前記動作指示データを送信したことを知らせる指示送信データを携帯端末に送信するサーバーと、
検出器で検出される検出信号からイベントを判断すると、前記音声認識中継処理装置に対して前記制御対象装置を動作させる識別音声を発する制御装置と
を備えた通知システムであって、
前記制御装置が、
前記検出器で検出される前記検出信号から前記イベントを判断するイベント判断部と、
前記イベント判断部で前記イベントを判断すると、あらかじめ設定した第１識別音声を出力する音声出力部と、
前記サーバーから送信される送信データを受信する受信部と、
前記音声出力部から前記第１識別音声を出力したタイミングからの時間を計測するタイマー部と、
前記受信部で前記送信データの受信がなされたかを確認する受信確認部と
を有し、
前記タイマー部で計測する第１所定時間を経過しても、前記受信確認部で前記送信データの受信が確認できない場合には、前記音声出力部から前記第１識別音声を再度出力する
ことを特徴とする通知システム。

【請求項2】

前記受信確認部では、前記第１所定時間が経過した後、前記送信データの受信が確認できない限り、前記第１所定時間より長い時間に設定した第２所定時間内に、前記音声出力部から前記第１識別音声を繰り返し出力する
ことを特徴とする請求項１に記載の通知システム。

【請求項3】

前記受信確認部では、前記第２所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部から前記第１識別音声と異なる第２識別音声を出力する
ことを特徴とする請求項２に記載の通知システム。

【請求項4】

前記受信確認部では、前記第２所定時間が経過した後、前記送信データの受信が確認できない限り、前記第２所定時間より長い時間に設定した第３所定時間内に、前記音声出力部から前記第２識別音声を繰り返し出力する
ことを特徴とする請求項３に記載の通知システム。

【請求項5】

検出器で検出される検出信号からイベントを判断するイベント判断部と、
前記イベント判断部で前記イベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置に対して、あらかじめ設定した第１識別音声を出力する音声出力部と、
前記音声認識中継処理装置から送信される前記データを受信することで前記データに基づく動作指示データを制御対象装置に送信するとともに、前記動作指示データを送信したことを知らせる指示送信データを携帯端末に送信するサーバーから送信される送信データを受信する受信部と、
前記音声出力部から前記第１識別音声を出力したタイミングからの時間を計測するタイマー部と、
前記受信部で前記送信データの受信がなされたかを確認する受信確認部と
を有し、
前記タイマー部で計測する第１所定時間を経過しても、前記受信確認部で前記送信データの受信が確認できない場合には、前記音声出力部から前記第１識別音声を再度出力する
ことを特徴とする通知システムにおける制御装置。

【請求項6】

前記受信確認部では、前記第１所定時間が経過した後、前記送信データの受信が確認できない限り、前記第１所定時間より長い時間に設定した第２所定時間内に、前記音声出力部から前記第１識別音声を繰り返し出力する
ことを特徴とする請求項５に記載の通知システムにおける制御装置。

【請求項7】

前記受信確認部では、前記第２所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部から前記第１識別音声と異なる第２識別音声を出力する
ことを特徴とする請求項６に記載の通知システムにおける制御装置。

【請求項8】

前記受信確認部では、前記第２所定時間が経過した後、前記送信データの受信が確認できない限り、前記第２所定時間より長い時間に設定した第３所定時間内に、前記音声出力部から前記第２識別音声を繰り返し出力する
ことを特徴とする請求項７に記載の通知システムにおける制御装置。

【請求項9】

検出器で検出される検出信号からイベントを判断するイベント判断ステップと、
前記イベント判断ステップで前記イベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置に対して、あらかじめ設定した第１識別音声を出力する音声出力ステップと、
前記音声出力ステップで前記第１識別音声を出力したタイミングからの時間が第１所定時間を経過しても、前記音声認識中継処理装置から送信される前記データによってサーバーから送信される送信データを、受信部で受信しない場合には、前記第１識別音声を再度出力する音声再出力ステップと
を有する
ことを特徴とする通知システムにおける制御方法。

【請求項10】

前記音声再出力ステップでは、前記送信データの受信が確認できない限り、前記第１所定時間より長い時間に設定した第２所定時間内に、前記第１識別音声を繰り返し出力する
ことを特徴とする請求項９に記載の通知システムにおける制御方法。

【請求項11】

前記第２所定時間が経過した後、前記送信データの受信が確認できない場合には、前記第１識別音声と異なる第２識別音声を出力する異音声出力ステップを
有する
ことを特徴とする請求項１０に記載の通知システムにおける制御方法。

【請求項12】

前記異音声出力ステップでは、前記送信データの受信が確認できない限り、前記第２所定時間より長い時間に設定した第３所定時間内に、前記第２識別音声を繰り返し出力する
ことを特徴とする請求項１１に記載の通知システムにおける制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、外部からの音声を認識してデータを送信する音声認識中継処理装置と、音声認識中継処理装置から送信されるデータを受信し、データに基づく動作指示データを制御対象装置に送信するとともに、動作指示データを送信したことを知らせる送信データを携帯端末に送信するサーバーとを利用した通知システムに関する。

【背景技術】

【0002】

装置の異常や危険を検知するとブザーやチャイム、光フラッシュなどにより周囲に異常を知らせるセンサが多くの大学や研究所、一般家庭でも利用されている。
しかし、外出中などにより、常にこの異常に気がつく状況にあるとは限らない。このような場合には、携帯端末へのメール、又は携帯端末に電話をかけるなどして素早く異常を示す通知が欲しいと思う場面も多い。しかし、これを実現するためには、例えばセンサの信号を処理して携帯端末にメールを送るなどのシステムを新たに構築する必要があり、コストや運用面でも気軽に導入できる環境ではない。
大学の研究室などでは、例えばサンプルを加熱する実験を行っている際に実験装置がオーバーヒートをすると、警報ブザーが鳴り電源を遮断する仕組みなどが一般的な安全対策である。その際に装置周辺に人がいれば即座に対応できるが、そうでない場合には実験の失敗や装置の故障に直結するため、素早く装置の異常を知らせるシステムが必要であった。
特許文献１には、電気機器を遠隔操作する遠隔操作機能を有し、当該遠隔操作を行ったことに関する情報を無線通信機能により発信することを特徴とするリモートコントロール機器が開示されている。
また、特許文献２には、計測データを判断して、この計測データに対応した、音声データ記憶部に記憶された音声データを読出す計測データ判断部と、この計測データ判断部の制御で読出された音声データを出力する音声データ出力部とを備えた計測結果出力装置が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１１－２５００２７号公報

【文献】特開平９－６１１９７号公報

【発明の開示】

【発明が解決しようとする課題】

【0004】

特許文献１のリモートコントロール機器（携帯端末）によれば、制御コードを含む赤外線信号を赤外線通信部から送信させた後、遠隔操作を行ったことに関する情報（「ユーザＩＤ」、遠隔操作対象の電気機器の「機器名」、「場所」、「操作内容」、遠隔操作を行ったタイミング<時刻>など）を管理装置に宛てて電話通信部から発信（送信）させるため、何れかの電気機器が遠隔操作されると、当該遠隔操作を行ったことに関する情報が自動的に発信されるので、電気機器の遠隔操作を行ったことに関する情報を取得できるが、全てのシステムを新たに構築する必要がある。
本発明は、このようなシステムに対して、市販されているスマートスピーカー、又はＡＩスピーカと呼ばれているデバイスを利用することで、遠隔地にいてもメールを送信し、または自動で電話をかけるなど、あらかじめ設定されている動作を次々と行い素早くイベントを通知するものである。
すなわち、本発明は、各種センサ、さらには住宅用火災警報器などが異常を検知した際に、音声を出力することで、スマートスピーカー、又はＡＩスピーカと呼ばれているデバイス（音声認識中継処理装置）を用いたシステムによって制御対象装置を動作させるとともに通知を受けるものである。
しかし、デバイス（音声認識中継処理装置）を利用するには、これらのデバイスが認識する音声を出力する必要があるが、音声をインターフェイスとする限り、騒音などの外部からの音によってデバイスが音声を正しく認識できない場合が生じる。
なお、特許文献２は、計測結果を音声で出力するが、計測結果を容易に判断するためのものにすぎない。

【0005】

本発明は、例えば、突発的な他の音によって音声認識中継処理装置が音声を認識できなかった場合であっても、音声認識中継処理装置が音声を認識でき、制御対象装置を動作させることができる通知システムを提供することを目的とする。

【課題を解決するための手段】

【0006】

請求項１記載の本発明の通知システムは、外部からの音声を認識してデータを送信する音声認識中継処理装置１０と、前記音声認識中継処理装置１０から送信される前記データを受信し、前記データに基づく動作指示データを制御対象装置４０に送信するとともに、前記動作指示データを送信したことを知らせる指示送信データを携帯端末５０に送信するサーバー２０と、検出器３０で検出される検出信号からイベントを判断すると、前記音声認識中継処理装置１０に対して前記制御対象装置４０を動作させる識別音声を発する制御装置６０とを備えた通知システムであって、前記制御装置６０が、前記検出器３０で検出される前記検出信号から前記イベントを判断するイベント判断部６１と、前記イベント判断部６１で前記イベントを判断すると、あらかじめ設定した第１識別音声を出力する音声出力部６２と、前記サーバー２０から送信される送信データを受信する受信部６３と、前記音声出力部６２から前記第１識別音声を出力したタイミングからの時間を計測するタイマー部６４と、前記受信部６３で前記送信データの受信がなされたかを確認する受信確認部６５とを有し、前記タイマー部６４で計測する第１所定時間を経過しても、前記受信確認部６５で前記送信データの受信が確認できない場合には、前記音声出力部６２から前記第１識別音声を再度出力することを特徴とする。
請求項２記載の本発明は、請求項１に記載の通知システムにおいて、前記受信確認部６５では、前記第１所定時間が経過した後、前記送信データの受信が確認できない限り、前記第１所定時間より長い時間に設定した第２所定時間内に、前記音声出力部６２から前記第１識別音声を繰り返し出力することを特徴とする。
請求項３記載の本発明は、請求項２に記載の通知システムにおいて、前記受信確認部６５では、前記第２所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部６２から前記第１識別音声と異なる第２識別音声を出力することを特徴とする。
請求項４記載の本発明は、請求項３に記載の通知システムにおいて、前記受信確認部６５では、前記第２所定時間が経過した後、前記送信データの受信が確認できない限り、前記第２所定時間より長い時間に設定した第３所定時間内に、前記音声出力部６２から前記第２識別音声を繰り返し出力することを特徴とする。
請求項５記載の本発明の通知システムにおける制御装置６０は、検出器３０で検出される検出信号からイベントを判断するイベント判断部６１と、前記イベント判断部６１で前記イベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置１０に対して、あらかじめ設定した第１識別音声を出力する音声出力部６２と、前記音声認識中継処理装置１０から送信される前記データを受信することで前記データに基づく動作指示データを制御対象装置４０に送信するとともに、前記動作指示データを送信したことを知らせる指示送信データを携帯端末５０に送信するサーバー２０から送信される送信データを受信する受信部６３と、前記音声出力部６２から前記第１識別音声を出力したタイミングからの時間を計測するタイマー部６４と、前記受信部６３で前記送信データの受信がなされたかを確認する受信確認部６５とを有し、前記タイマー部６４で計測する第１所定時間を経過しても、前記受信確認部６５で前記送信データの受信が確認できない場合には、前記音声出力部６２から前記第１識別音声を再度出力することを特徴とする。
請求項６記載の本発明は、請求項５に記載の通知システムにおける制御装置６０において、前記受信確認部６５では、前記第１所定時間が経過した後、前記送信データの受信が確認できない限り、前記第１所定時間より長い時間に設定した第２所定時間内に、前記音声出力部６２から前記第１識別音声を繰り返し出力することを特徴とする。
請求項７記載の本発明は、請求項６に記載の通知システムにおける制御装置６０において、前記受信確認部６５では、前記第２所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部６２から前記第１識別音声と異なる第２識別音声を出力することを特徴とする。
請求項８記載の本発明は、請求項７に記載の通知システムにおける制御装置６０において、前記受信確認部６５では、前記第２所定時間が経過した後、前記送信データの受信が確認できない限り、前記第２所定時間より長い時間に設定した第３所定時間内に、前記音声出力部６２から前記第２識別音声を繰り返し出力することを特徴とする。
請求項９記載の本発明の通知システムにおける制御方法は、検出器３０で検出される検出信号からイベントを判断するイベント判断ステップと、前記イベント判断ステップで前記イベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置１０に対して、あらかじめ設定した第１識別音声を出力する音声出力ステップと、前記音声出力ステップで前記第１識別音声を出力したタイミングからの時間が第１所定時間を経過しても、前記音声認識中継処理装置１０から送信される前記データによってサーバー２０から送信される送信データを、受信部６３で受信しない場合には、前記第１識別音声を再度出力する音声再出力ステップとを有することを特徴とする。
請求項１０記載の本発明は、請求項９に記載の通知システムにおける制御方法において、前記音声再出力ステップでは、前記送信データの受信が確認できない限り、前記第１所定時間より長い時間に設定した第２所定時間内に、前記第１識別音声を繰り返し出力することを特徴とする。
請求項１１記載の本発明は、請求項１０に記載の通知システムにおける制御方法において、前記第２所定時間が経過した後、前記送信データの受信が確認できない場合には、前記第１識別音声と異なる第２識別音声を出力する異音声出力ステップを有することを特徴とする。
請求項１２記載の本発明は、請求項１１に記載の通知システムにおける制御方法において、前記異音声出力ステップでは、前記送信データの受信が確認できない限り、前記第２所定時間より長い時間に設定した第３所定時間内に、前記第２識別音声を繰り返し出力することを特徴とする。

【発明の効果】

【0007】

本発明によれば、制御装置から出力される第１識別音声を、例えば、突発的な他の音によって音声認識中継処理装置が音声を認識できなかった場合であっても、制御装置から第１識別音声を再度出力することで、音声認識中継処理装置が音声を認識でき、制御対象装置を動作させることができる。

【図面の簡単な説明】

【0008】

【図1】本発明の一実施例による通知システムを機能実現手段で表したブロック図

【図2】同通知システムにおける処理流れを示すフローチャート

【図3】同通知システムにおける制御装置での処理流れを示すフローチャート

【発明を実施するための形態】

【0009】

本発明の第１の実施の形態による通知システムは、検出器で検出される検出信号からイベントを判断すると、音声認識中継処理装置に対して制御対象装置を動作させる識別音声を発する制御装置が、検出器で検出される検出信号からイベントを判断するイベント判断部と、イベント判断部でイベントを判断すると、あらかじめ設定した第１識別音声を出力する音声出力部と、サーバーから送信される送信データを受信する受信部と、音声出力部から第１識別音声を出力したタイミングからの時間を計測するタイマー部と、受信部で送信データの受信がなされたかを確認する受信確認部とを有し、タイマー部で計測する第１所定時間を経過しても、受信確認部で送信データの受信が確認できない場合には、音声出力部から第１識別音声を再度出力するものである。本実施の形態によれば、制御装置から出力される第１識別音声を、例えば、突発的な他の音によって音声認識中継処理装置が第１識別音声を認識できなかった場合であっても、制御装置から第１識別音声を再度出力することで、音声認識中継処理装置が第１識別音声を認識でき、制御対象装置を動作させることができる。

【0010】

本発明の第２の実施の形態は、第１の実施の形態による通知システムにおいて、受信確認部では、第１所定時間が経過した後、送信データの受信が確認できない限り、第１所定時間より長い時間に設定した第２所定時間内に、音声出力部から第１識別音声を繰り返し出力するものである。本実施の形態によれば、例えば騒音が継続した場合であっても、制御装置から第１識別音声を繰り返し出力することで、音声認識中継処理装置が第１識別音声を認識でき、制御対象装置を動作させることができる。

【0011】

本発明の第３の実施の形態は、第２の実施の形態による通知システムにおいて、受信確認部では、第２所定時間が経過した後、送信データの受信が確認できない場合には、音声出力部から第１識別音声と異なる第２識別音声を出力するものである。本実施の形態によれば、制御装置から出力される第１識別音声を、音声認識中継処理装置が認識できなかった場合であっても、制御装置から第２識別音声を出力することで、音声認識中継処理装置が第２識別音声を認識できる可能性を高め、制御対象装置を動作させることができる。

【0012】

本発明の第４の実施の形態は、第３の実施の形態による通知システムにおいて、受信確認部では、第２所定時間が経過した後、送信データの受信が確認できない限り、第２所定時間より長い時間に設定した第３所定時間内に、音声出力部から第２識別音声を繰り返し出力するものである。本実施の形態によれば、制御装置から第２識別音声を繰り返し出力することで、音声認識中継処理装置が第２識別音声を認識でき、制御対象装置を動作させることができる。

【0013】

本発明の第５の実施の形態による通知システムにおける制御装置は、検出器で検出される検出信号からイベントを判断するイベント判断部と、イベント判断部でイベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置に対して、あらかじめ設定した第１識別音声を出力する音声出力部と、音声認識中継処理装置から送信されるデータを受信することでデータに基づく動作指示データを制御対象装置に送信するとともに、動作指示データを送信したことを知らせる指示送信データを携帯端末に送信するサーバーから送信される送信データを受信する受信部と、音声出力部から第１識別音声を出力したタイミングからの時間を計測するタイマー部と、受信部で送信データの受信がなされたかを確認する受信確認部とを有し、タイマー部で計測する第１所定時間を経過しても、受信確認部で送信データの受信が確認できない場合には、音声出力部から第１識別音声を再度出力するものである。本実施の形態によれば、制御装置から出力される第１識別音声を、例えば、突発的な他の音によって音声認識中継処理装置が認識できなかった場合であっても、制御装置から第１識別音声を再度出力することで、音声認識中継処理装置が第１識別音声を認識でき、制御対象装置を動作させることができる。

【0014】

本発明の第６の実施の形態は、第５の実施の形態による通知システムにおける制御装置において、受信確認部では、第１所定時間が経過した後、送信データの受信が確認できない限り、第１所定時間より長い時間に設定した第２所定時間内に、音声出力部から第１識別音声を繰り返し出力するものである。本実施の形態によれば、例えば騒音が継続した場合であっても、制御装置から第１識別音声を繰り返し出力することで、音声認識中継処理装置が第１識別音声を認識でき、制御対象装置を動作させることができる。

【0015】

本発明の第７の実施の形態は、第６の実施の形態による通知システムにおける制御装置において、受信確認部では、第２所定時間が経過した後、送信データの受信が確認できない場合には、音声出力部から第１識別音声と異なる第２識別音声を出力するものである。本実施の形態によれば、制御装置から出力される第１識別音声を、音声認識中継処理装置が認識できなかった場合であっても、制御装置から第２識別音声を出力することで、音声認識中継処理装置が第２識別音声によって指示を認識できる可能性を高め、制御対象装置を動作させることができる。

【0016】

本発明の第８の実施の形態は、第７の実施の形態による通知システムにおける制御装置において、受信確認部では、第２所定時間が経過した後、送信データの受信が確認できない限り、第２所定時間より長い時間に設定した第３所定時間内に、音声出力部から第２識別音声を繰り返し出力するものである。本実施の形態によれば、制御装置から第２識別音声を繰り返し出力することで、音声認識中継処理装置が第２識別音声を認識でき、制御対象装置を動作させることができる。

【0017】

本発明の第９の実施の形態による通知システムにおける制御方法は、検出器で検出される検出信号からイベントを判断するイベント判断ステップと、イベント判断ステップでイベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置に対して、あらかじめ設定した第１識別音声を出力する音声出力ステップと、音声出力ステップで第１識別音声を出力したタイミングからの時間が第１所定時間を経過しても、音声認識中継処理装置から送信されるデータによってサーバーから送信される送信データを、受信部で受信しない場合には、第１識別音声を再度出力する音声再出力ステップとを有するものである。本実施の形態によれば、制御装置から出力される第１識別音声を、例えば、突発的な他の音によって音声認識中継処理装置が認識できなかった場合であっても、制御装置から第１識別音声を再度出力することで、音声認識中継処理装置が第１識別音声を認識でき、制御対象装置を動作させることができる。

【0018】

本発明の第１０の実施の形態は、第９の実施の形態による通知システムにおける制御方法において、音声再出力ステップでは、送信データの受信が確認できない限り、第１所定時間より長い時間に設定した第２所定時間内に、第１識別音声を繰り返し出力するものである。本実施の形態によれば、例えば騒音が継続した場合であっても、制御装置から第１識別音声を繰り返し出力することで、音声認識中継処理装置が第１識別音声を認識でき、制御対象装置を動作させることができる。

【0019】

本発明の第１１の実施の形態は、第１０の実施の形態による通知システムにおける制御方法において、第２所定時間が経過した後、送信データの受信が確認できない場合には、第１識別音声と異なる第２識別音声を出力する異音声出力ステップを有するものである。本実施の形態によれば、制御装置から出力される第１識別音声を、音声認識中継処理装置が認識できなかった場合であっても、制御装置から第２識別音声を出力することで、音声認識中継処理装置が第２識別音声によって指示を認識できる可能性を高め、制御対象装置を動作させることができる。

【0020】

本発明の第１２の実施の形態は、第１１の実施の形態による通知システムにおける制御方法において、異音声出力ステップでは、送信データの受信が確認できない限り、第２所定時間より長い時間に設定した第３所定時間内に、第２識別音声を繰り返し出力するものである。本実施の形態によれば、制御装置から第２識別音声を繰り返し出力することで、音声認識中継処理装置が第２識別音声を認識でき、制御対象装置を動作させることができる。

【実施例】

【0021】

以下本発明の一実施例について図面とともに説明する。
図１は、本発明の一実施例による通知システムを機能実現手段で表したブロック図である。
本実施例による通知システムは、外部からの音声を認識してデータを送信する音声認識中継処理装置１０と、音声認識中継処理装置１０から送信されるデータを受信し、データに基づく動作指示データを制御対象装置４０に送信するとともに、動作指示データを送信したことを知らせる指示送信データを携帯端末５０に送信するサーバー２０と、検出器３０で検出される検出信号からイベントを判断すると、音声認識中継処理装置１０に対して制御対象装置４０を動作させる識別音声を発する制御装置６０とで構成される。
例えば、実験室の場合には、検出器３０が温度検出器であり、制御対象装置４０が空調機や加熱機であり、検出される温度が異常値になると、空調機を動作させ、又は加熱機を停止する。本実施例では、異常値をイベントとした警報システムで説明するが、検出される温度が正常値に戻った場合や設定値に到達した場合にも適用でき、イベントを任意の設定状態や閾値とすることができる。

【0022】

音声認識中継処理装置１０は、外部からの音声を認識する音声認識部１１と、音声認識部１１で認識した音声データを送信するデータ送信部１２とを備えている。
サーバー２０は、データ送信部１２から送信されるデータを受信するデータ受信部２１と、データ受信部２１で受信したデータから、制御対象装置４０や制御装置６０を特定するとともに動作指示データを決定する指示内容決定部２２と、指示内容決定部２２で決定された動作指示データを制御対象装置４０や制御装置６０に送信するとともに、動作指示データを送信したことを知らせる指示送信データをあらかじめ通知先として登録している携帯端末５０に送信する指示送信部２３とを備えている。
制御対象装置４０は、指示送信部２３からの動作指示データを受信する受信部４１と、受信部４１で受信した動作指示データによって動作指示を行う動作指示部４２とを備えている。
携帯端末５０は、指示送信部２３からの指示送信データを受信する受信部５１と、受信部５１で受信した指示送信データによって指示内容を出力する指示内容出力部５２とを備えている。指示内容出力部５２は、文字データや音声データとして出力される。
制御装置６０は、検出器３０で検出される検出信号からイベントを判断するイベント判断部６１と、イベント判断部６１でイベントを判断すると、あらかじめ設定した識別音声を出力する音声出力部６２と、サーバー２０から送信される送信データを受信する受信部６３と、音声出力部６２から第１識別音声を出力したタイミングからの時間を計測するタイマー部６４と、受信部６３で送信データの受信がなされたかを確認する受信確認部６５とを備えている。
なお、サーバー２０から制御装置６０に対して送信する送信データは、制御対象装置４０に対して送信される動作指示データと同種のものであることが好ましく、受信部６３で動作指示データを受信すると、制御装置６０では動作を終了する。

【0023】

図２は、本発明の一実施例による通知システムにおける処理流れを示すフローチャートである。
検出器３０は、継続的に実験室内の室温を検出している（Ｓ１）。
検出器３０で検出される室温データは、制御装置６０に入力され、イベント判断部６１において異常か否かを判断している（Ｓ２）。
イベント判断部６１が異常を判断すると音声出力部６２から、異常であること、又はこの異常に基づく動作指示を音声で出力する（Ｓ３）。なお、本実施例において、異常であること、又はこの異常に基づく動作指示を表す音声を識別音声とする。
制御装置６０から識別音声が出力されると、音声認識中継処理装置１０では、音声認識部１１において、この識別音声を認識する（Ｓ４）。
音声認識部１１で認識された音声データはデータ送信部１２において送信される（Ｓ５）。
音声認識中継処理装置１０から音声データが送信されると、サーバー２０では、データ受信部２１において、音声データを受信する（Ｓ６）。
データ受信部２１で受信された音声データから、指示内容決定部２２では、制御対象装置４０や制御装置６０を特定するとともに動作指示データを決定する（Ｓ７）。
指示内容決定部２２で決定された動作指示データ、指示送信データ、及び送信データは、指示送信部２３において、制御対象装置４０や制御装置６０に送信するとともに、あらかじめ通知先として登録している携帯端末５０に送信する（Ｓ８）。
サーバー２０から送信されるデータによって、制御対象装置４０では動作を行い（Ｓ９）、携帯端末５０では制御対象装置４０を動作させたことを出力し（Ｓ１０）、制御装置６０では正常にサーバー２０から指示が送信されたことを確認する（Ｓ１１）。

【0024】

図３は、本発明の一実施例による通知システムにおける制御装置での処理流れを示すフローチャートである。
制御装置６０では、イベント判断部６１において異常か否かを判断し（Ｓ２）、イベント判断部６１が異常を判断すると音声出力部６２から第１識別音声を出力する（Ｓ３）。ここで第１識別音声は、例えば「空調機を作動」という音声とする。
タイマー部６４では、音声出力部６２から第１識別音声を出力したタイミングからの時間を計測する（Ｓ２１）。

【0025】

タイマー部６４で計測する時間が第１所定時間を経過し（Ｓ２２でＹｅｓ）、第１所定時間より長い時間に設定した第２所定時間内に（Ｓ２３でＮｏ）、受信部６３で指示を受信していない場合には（Ｓ２４でＮｏ）、音声出力部６２から第１識別音声を再度出力する（Ｓ２５）。
このように、タイマー部６４で計測する第１所定時間を経過しても、受信確認部６５で指示送信データの受信が確認できない場合には、音声出力部６２から第１識別音声を再度出力する（Ｓ２５）。
制御装置６０から第１識別音声を再度出力することで、制御装置６０から出力される第１識別音声を、例えば、突発的な他の音によって音声認識中継処理装置１０が認識できなかった場合であっても、音声認識中継処理装置１０が第１識別音声を認識でき、制御対象装置４０を動作させることができる。
受信確認部６５では、第１所定時間が経過した後（Ｓ２２でＹｅｓ）、送信データの受信が確認できない限り、第１所定時間より長い時間に設定した第２所定時間内に（Ｓ２３でＮｏ）、音声出力部６２から第１識別音声を繰り返し出力することが好ましい。
例えば騒音が継続した場合であっても、制御装置６０から第１識別音声を繰り返し出力することで、音声認識中継処理装置１０が第１識別音声を認識でき、制御対象装置４０を動作させることができる。
タイマー部６４で計測する時間が第２所定時間内に（Ｓ２３でＮｏ）、受信部６３で指示を受信した場合には（Ｓ２４でＹｅｓ）、正常終了となる（Ｓ２６）。

【0026】

タイマー部６４で計測する時間が第２所定時間を経過し（Ｓ２３でＹｅｓ）、第２所定時間より長い時間に設定した第３所定時間内に（Ｓ２７でＮｏ）、受信部６３で指示を受信していない場合には（Ｓ２８でＮｏ）、音声出力部６２から第１識別音声と異なる第２識別音声を出力する（Ｓ２９）。ここで第２識別音声は、例えば「エアコンオン」という音声とする。
制御装置６０から出力される第１識別音声を、音声認識中継処理装置１０が認識できなかった場合であっても、制御装置６０から第２識別音声を出力することで、音声認識中継処理装置１０が第２識別音声によって指示を認識できる可能性を高め、制御対象装置４０を動作させることができる。
受信確認部６５では、第２所定時間が経過した後（Ｓ２３でＹｅｓ）、送信データの受信が確認できない限り、第２所定時間より長い時間に設定した第３所定時間内に（Ｓ２７でＮｏ）、音声出力部６２から第２識別音声を繰り返し出力することが好ましい。
制御装置６０から第２識別音声を繰り返し出力することで、音声認識中継処理装置１０が第２識別音声を認識でき、制御対象装置４０を動作させることができる。
タイマー部６４で計測する時間が第３所定時間内に（Ｓ２７でＮｏ）、受信部６３で指示を受信した場合には（Ｓ２８でＹｅｓ）、正常終了となる（Ｓ３０）。
なお、タイマー部６４で計測する時間が第３所定時間を経過した場合には（Ｓ２７でＹｅｓ）、異常終了となる（Ｓ３１）。

【0027】

このように、本実施例による通知システムにおける制御装置６０は、検出器３０で検出される検出信号から異常を判断するイベント判断部６１と、イベント判断部６１で異常を判断すると、音声認識中継処理装置１０に対して、あらかじめ設定した第１識別音声を出力する音声出力部６２と、サーバー２０から送信される送信データを受信する受信部６３と、音声出力部６２から第１識別音声を出力したタイミングからの時間を計測するタイマー部６４と、受信部６３で送信データの受信がなされたかを確認する受信確認部６５とを有し、タイマー部６４で計測する第１所定時間を経過しても、受信確認部６５で送信データの受信が確認できない場合には、音声出力部６２から第１識別音声を再度出力する。
制御装置６０から出力される第１識別音声を、例えば、突発的な他の音によって音声認識中継処理装置１０が認識できなかった場合であっても、制御装置６０から第１識別音声を再度出力することで、音声認識中継処理装置１０が第１識別音声を認識でき、制御対象装置４０を動作させることができる。
また、本実施例による通知システムにおける制御装置６０は、受信確認部６５では、第１所定時間が経過した後、送信データの受信が確認できない限り、第１所定時間より長い時間に設定した第２所定時間内に、音声出力部６２から第１識別音声を繰り返し出力することが好ましい。
例えば騒音が継続した場合であっても、制御装置６０から第１識別音声を繰り返し出力することで、音声認識中継処理装置１０が第１識別音声を認識でき、制御対象装置４０を動作させることができる。

【0028】

また、本実施例による通知システムにおける制御装置６０は、受信確認部６５では、第２所定時間が経過した後、送信データの受信が確認できない場合には、音声出力部６２から第１識別音声と異なる第２識別音声を出力する。
制御装置６０から出力される第１識別音声を、音声認識中継処理装置１０が認識できなかった場合であっても、制御装置６０から第２識別音声を出力することで、音声認識中継処理装置１０が第１識別音声を認識できる可能性を高め、制御対象装置４０を動作させることができる。
また、本実施例による通知システムにおける制御装置６０は、受信確認部６５では、第２所定時間が経過した後、送信データの受信が確認できない限り、第２所定時間より長い時間に設定した第３所定時間内に、音声出力部６２から第２識別音声を繰り返し出力する。
制御装置６０から第２識別音声を繰り返し出力することで、音声認識中継処理装置１０が第２識別音声を認識でき、制御対象装置４０を動作させることができる。

【0029】

また、本実施例による通知システムにおける制御方法は、検出器３０で検出される検出信号から異常を判断するイベント判断ステップ（Ｓ２）と、イベント判断ステップ（Ｓ２）で異常を判断すると、音声認識中継処理装置１０に対して、あらかじめ設定した第１識別音声を出力する音声出力ステップ（Ｓ３）と、音声出力ステップ（Ｓ３）で第１識別音声を出力したタイミングからの時間が第１所定時間を経過しても（Ｓ２２でＹｅｓ）、音声認識中継処理装置１０から送信されるデータによってサーバー２０から送信される送信データを、受信部６３で受信しない場合には、第１識別音声を再度出力する音声再出力ステップ（Ｓ２５）とを有する。
制御装置６０から出力される第１識別音声を、例えば、突発的な他の音によって音声認識中継処理装置１０が認識できなかった場合であっても、制御装置６０から第１識別音声を再度出力することで、音声認識中継処理装置１０が第１識別音声を認識でき、制御対象装置４０を動作させることができる。
また、本実施例による通知システムにおける制御方法は、音声再出力ステップ（Ｓ２５）では、送信データの受信が確認できない限り（Ｓ２４でＮｏ）、第１所定時間より長い時間に設定した第２所定時間内に、音声出力部６２から第１識別音声を繰り返し出力する。
例えば騒音が継続した場合であっても、制御装置６０から第１識別音声を繰り返し出力することで、音声認識中継処理装置１０が第１識別音声を認識でき、制御対象装置４０を動作させることができる。

【0030】

また、本実施例による通知システムにおける制御方法は、第２所定時間が経過した後（Ｓ２３でＹｅｓ）、送信データの受信が確認できない場合には（Ｓ２８でＮｏ）、音声出力部６２から第１識別音声と異なる第２識別音声を出力する異音声出力ステップ（Ｓ２９）を有する。
制御装置６０から出力される第１識別音声を、音声認識中継処理装置１０が認識できなかった場合であっても、制御装置６０から第２識別音声を出力することで、音声認識中継処理装置１０が第２識別音声によって指示を認識できる可能性を高め、制御対象装置４０を動作させることができる。
また、本実施例による通知システムにおける制御方法は、異音声出力ステップ（Ｓ２９）では、送信データの受信が確認できない限り（Ｓ２８でＮｏ）、第２所定時間より長い時間に設定した第３所定時間内に（Ｓ２７でＮｏ）、音声出力部６２から第２識別音声を繰り返し出力する。
制御装置６０から第２識別音声を繰り返し出力することで、音声認識中継処理装置１０が第２識別音声を認識でき、制御対象装置４０を動作させることができる。
なお、本実施例では、識別音声は、異常であること、又はこの異常に基づく動作指示を表す音声として説明したが、録音したヒトの声であっても合成音声でもよく、ヒトが意味を理解する言語音に限られず音信号も含む。また、音声出力部６２からの識別音声の出力は、スピーカを用いた出力の他に、骨伝導式イヤホンを用いた出力でもよく、骨伝導式イヤホンを用いる場合には、骨伝導式イヤホンを音声認識中継処理装置１０に装着する。

【0031】

また、制御装置６０、又は制御装置６０と音声認識中継処理装置１０の動作確認を定期的に行う機能を備えていることが好ましい。
この定期的な動作確認のためには、制御装置６０に、イベント判断部６１が異常を判断した場合に音声出力部６２から出力される識別音声とは異なる、動作確認用識別音声を、タイマー部６４で計測されたタイミング、例えば２４時間間隔で、音声出力部６２から出力する。タイマー部６４が時計機能を備えている場合には、時刻指定によって行ってもよい。
例えば、毎日零時に音声出力部６２から動作確認用識別音声を出力する。音声認識中継処理装置１０では、音声認識部１１においてこの動作確認用識別音声を認識し（Ｓ４）、音声認識部１１で認識された音声データをデータ送信部１２において送信する（Ｓ５）。

【0032】

音声認識中継処理装置１０から音声データが送信されると、サーバー２０では、データ受信部２１において、音声データを受信し（Ｓ６）、データ受信部２１で受信された音声データから、指示内容決定部２２では、制御装置６０を特定して送信データを決定する（Ｓ７）。
指示内容決定部２２で決定された送信データは、指示送信部２３において制御装置６０に送信する（Ｓ８）。制御装置６０では、サーバー２０からの送信データを受信することで正常動作を確認して処理を終了する。制御装置６０でサーバー２０からの送信データを受信しない場合には、異常を知らせる出力を行う。
指示内容決定部２２で決定された送信データは、指示送信部２３において制御装置６０に送信するとともに、あらかじめ通知先として登録している携帯端末５０に指示送信データを送信することもできる（Ｓ８）。この場合には、制御装置６０においてだけでなく、携帯端末５０においても正常動作の確認結果を知ることができる。
なお、指示内容決定部２２で決定された送信データは、指示送信部２３において制御装置６０に送信する代わりに、あらかじめ通知先として登録している携帯端末５０に指示送信データを送信することもできる（Ｓ８）。

【0033】

また定期的な動作確認のためには、音声認識中継処理装置１０に音出力部を設け、制御装置６０には音信号受信部を設け、音出力部からあらかじめ設定した定刻に音信号データを出力し、音信号受信部で音信号データを受信すると、制御装置６０から動作確認用識別音声を出力する。
音声認識中継処理装置１０では、音声認識部１１においてこの動作確認用識別音声を認識し（Ｓ４）、音声認識部１１で認識された音声データをデータ送信部１２において送信する（Ｓ５）。
音声認識中継処理装置１０から音声データが送信されると、サーバー２０では、データ受信部２１において、音声データを受信し（Ｓ６）、データ受信部２１で受信された音声データから、指示内容決定部２２では、制御装置６０を特定して送信データを決定する（Ｓ７）。

【0034】

指示内容決定部２２で決定された送信データは、指示送信部２３において制御装置６０に送信する（Ｓ８）。制御装置６０では、サーバー２０からの送信データを受信することで正常動作を確認して処理を終了する。制御装置６０でサーバー２０からの送信データを受信しない場合には、異常を知らせる出力を行う。
指示内容決定部２２で決定された送信データは、指示送信部２３において制御装置６０に送信するとともに、あらかじめ通知先として登録している携帯端末５０に指示送信データを送信することもできる（Ｓ８）。この場合には、制御装置６０においてだけでなく、携帯端末５０においても正常動作の確認結果を知ることができる。
また、指示内容決定部２２で決定された送信データは、指示送信部２３において制御装置６０に送信する代わりに、あらかじめ通知先として登録している携帯端末５０に指示送信データを送信することもできる（Ｓ８）。
なお、音声認識中継処理装置１０に音出力部を設け、制御装置６０には音信号受信部を設け、音出力部からあらかじめ設定した定刻に音信号データを出力し、音信号受信部で音信号データを受信すると、制御装置６０から動作確認用識別音声を出力する場合には、音声認識中継処理装置１０では、音声認識部１１においてこの動作確認用識別音声を認識しない場合に、異常を伝えるデータをデータ送信部１２から送信することもできる（Ｓ５）。
このように、音声認識部１１においてこの動作確認用識別音声を認識しない場合に、異常を伝えるデータをデータ送信部１２から送信すると、サーバー２０では、あらかじめ通知先として登録している携帯端末５０に、異常であることを伝える指示送信データを送信する（Ｓ８）。

【0035】

また、制御装置６０又は音声認識中継処理装置１０に、周囲の騒音に反応して逆位相の音波を発することでノイズを取り除くノイズキャンセリング部を設けることが好ましい。

【産業上の利用可能性】

【0036】

本発明は、現在既に広く利用されている各種センサを検出器として適用でき、住宅用火災報知器やドア開閉などと連動した防犯システムとしても適用できる。

【符号の説明】

【0037】

１０ 音声認識中継処理装置
１１ 音声認識部
１２ データ送信部
２０ サーバー
２１ データ受信部
２２ 指示内容決定部
２３ 指示送信部
３０ 検出器
４０ 制御対象装置
４１ 受信部
４２ 動作指示部
５０ 携帯端末
５１ 受信部
５２ 指示内容出力部
６０ 制御装置
６１ イベント判断部
６２ 音声出力部
６３ 受信部
６４ タイマー部
６５ 受信確認部

【図1】

【図2】

【図3】