特許 7287206 発光制御プログラム、発光制御方法および発光制御システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-05-29

(45)【発行日】2023-06-06

(54)【発明の名称】発光制御プログラム、発光制御方法および発光制御システム

(51)【国際特許分類】

   H05B 47/12 20200101AFI20230530BHJP

   G08B 5/36 20060101ALI20230530BHJP

   G08B 21/24 20060101ALI20230530BHJP

   G10L 15/10 20060101ALI20230530BHJP

   H05B 47/165 20200101ALI20230530BHJP

【ＦＩ】

H05B47/12

G08B5/36 A

G08B21/24

G10L15/10 500Z

H05B47/165

【請求項の数】 7

(21)【出願番号】P 2019167117

(22)【出願日】2019-09-13

(65)【公開番号】P2021044202

(43)【公開日】2021-03-18

【審査請求日】2022-06-09

(73)【特許権者】

【識別番号】000005223

【氏名又は名称】富士通株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】松田 善機

(72)【発明者】

【氏名】小野 晋一

(72)【発明者】

【氏名】萩原 克守

(72)【発明者】

【氏名】長丸 崇徳

【審査官】塩治 雅也

(56)【参考文献】

【文献】特開平１０－２８２９８５（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１１／００３７６０６（ＵＳ，Ａ１）

【文献】韓国公開特許第１０－２０１７－００３７７５３（ＫＲ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０５Ｂ ４７／００

Ｇ０８Ｂ ５／３６

Ｇ０８Ｂ ２１／２４

Ｇ１０Ｌ １５／１０

(57)【特許請求の範囲】

【請求項1】

コンピュータに、
マイクによって収録される環境音情報を取得し、
取得した環境音情報を所定時間毎の部分音情報に分割し、各部分音情報について、複数の状態の音の種別と、各状態の音の種別に関する尤度とをそれぞれ算出し、
前記複数の状態の音の種別のうち、尤度が閾値以上となる状態の音の種別を特定し、
特定した状態の音の種別が複数である場合、各状態の音の種別および優先度を対応付けたテーブルと、特定した複数の状態の音の種別とを基にして、状態の音の種別を選択し、
選択した状態の音の種別に対応する色またはパターンのうち少なくとも一方を用いて光端末を発光させる
処理を実行させることを特徴とする発光制御プログラム。

【請求項2】

前記発光させる処理は、前記特定する処理によって特定される複数の状態の音の種別の組み合わせが、所定の組み合わせである場合、前記所定の組み合わせに対応する色またはパターンのうち少なくとも一方を用いて、前記光端末を発光させることを特徴とする請求項１に記載の発光制御プログラム。

【請求項3】

前記発光させる処理は、選択した状態の音の種別に応じて、前記光端末を発光させる時間を調整することを特徴とする請求項１に記載の発光制御プログラム。

【請求項4】

前記環境音情報を基にして、対象物が存在するか否かを判定し、判定結果を基にして、前記テーブルに登録された優先度を調整する処理を更に実行することを特徴とする請求項１に記載の発光制御プログラム。

【請求項5】

前記調整する処理は、前記特定する処理によって特定される状態の音の種別について、同一の状態の音の種別が連続する場合に、前記テーブルに登録された優先度を調整することを特徴とする請求項４に記載の発光制御プログラム。

【請求項6】

コンピュータが実行する発光制御方法であって、
マイクによって収録される環境音情報を取得し、
取得した環境音情報を所定時間毎の部分音情報に分割し、各部分音情報について、複数の状態の音の種別と、各状態の音の種別に関する尤度とをそれぞれ算出し、
前記複数の状態の音の種別のうち、尤度が閾値以上となる状態の音の種別を特定し、
特定した状態の音の種別が複数である場合、各状態の音の種別および優先度を対応付けたテーブルと、特定した複数の状態の音の種別とを基にして、状態の音の種別を選択し、
選択した状態の音の種別に対応する色またはパターンのうち少なくとも一方を用いて光端末を発光させる
処理を実行することを特徴とする発光制御方法。

【請求項7】

環境音を収録するマイクと、発光する光端末と、発光制御装置とを有する発光制御システムであって、
前記発光制御装置は、
前記マイクによって収録される環境音情報を取得し、取得した環境音情報を所定時間毎の部分音情報に分割し、各部分音情報について、複数の状態の音の種別と、各状態の音の種別に関する尤度とをそれぞれ算出する算出部と、
前記複数の状態の音の種別のうち、尤度が閾値以上となる状態の音の種別を特定し、特定した状態の音の種別が複数である場合、各状態の音の種別および優先度を対応付けたテーブルと、特定した複数の状態の音の種別とを基にして、状態の音の種別を選択する選択部と、
前記選択部によって選択された状態の音の種別に対応する色またはパターンのうち少なくとも一方を用いて前記光端末を発光させる発光制御部と
を有することを特徴とする発光制御システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、発光制御プログラム等に関する。

【背景技術】

【0002】

ランプを用いて、環境音に対応する固有の色を発光させる従来技術がある。たとえば、環境音には、人の話し声、ドアノック音、玄関チャイム音、水道の流水音、鍵が落ちた音等の各状態に対応する音が含まれる。かかる従来技術を用いることで、聴覚障害者等の利用者であっても、環境音に対応する状態を把握することが可能となる。以下の説明では、聴覚障害者等の利用者を単に「利用者」と表記する。

【0003】

従来技術では、環境音を分析し、環境音に含まれる各状態が発生している確からしさのスコアを算出し、最もスコアの高い状態の音を優先した色を発光させる。たとえば、環境音について、流水音のスコアが最も大きい場合、流水音に対応する水色を発光させることで、利用者は、水道の蛇口が開けっ放しになっていることを把握できる。

【0004】

なお、従来技術では、スコアの高い複数の状態の音が環境音に含まれている場合には、よりスコアの高い状態の音に対応した色を発光させ、かかる状態の音が終了した後に、次にスコアの高い状態の音に対応する色を発光させている。

【先行技術文献】

【特許文献】

【0005】

【文献】特表２０１８－５３１４６０号公報

【文献】特開２００４－２０７８７６号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

上述した従来技術では、環境音の分析結果となる各状態のスコアに基づいて、発光させる色を特定しているため、通知すべき状態を利用者に通知することができないという問題がある。

【0007】

たとえば、水道の流水音と、鍵が落ちた音とが環境音に含まれ、流水音のスコアが、鍵が落ちた音のスコアよりも大きい場合には、流水音に対応する色によってランプが発光し、鍵が落ちたことに関する色の発光は、後回しにされるため、利用者は、鍵を落としたことに気がつきにくい。

【0008】

１つの側面では、本発明は、発光によって、通知すべき状態を利用者に通知することができる発光制御プログラム、発光制御方法および発光制御システムを提供することを目的とする。

【課題を解決するための手段】

【0009】

第１の案では、コンピュータは、次の処理を実行する。コンピュータは、マイクによって収録される環境音情報を取得し、取得した環境音情報を所定時間毎の部分音情報に分割し、各部分音情報について、複数の状態の音の種別と、各状態の音の種別に関する尤度とをそれぞれ算出する。コンピュータは、複数の状態の音の種別のうち、尤度が閾値以上となる状態の音の種別を特定する。コンピュータは、特定した状態の音の種別が複数である場合、各状態の音の種別および優先度を対応付けたテーブルと、特定した複数の状態の音の種別とを基にして、状態の音の種別を選択する。コンピュータは、選択した状態の音の種別に対応する色またはパターンのうち少なくとも一方を用いて光端末を発光させる。

【発明の効果】

【0010】

発光によって、通知すべき状態を利用者に通知することができる。

【図面の簡単な説明】

【0011】

【図1】図１は、本実施例に係る発光制御システムの一例を示す図である。

【図2】図２は、本実施例に係る発光制御装置の構成を示す機能ブロック図である。

【図3】図３は、ＡＩエンジンの出力結果のデータ構造の一例を示す図である。

【図4】図４は、出力結果テーブルのデータ構造の一例を示す図である。

【図5】図５は、優先度テーブルのデータ構造の一例を示す図である。

【図6】図６は、第１特定テーブルのデータ構造の一例を示す図である。

【図7】図７は、第２特定テーブルのデータ構造の一例を示す図である。

【図8】図８は、本実施例に係る発光制御装置の処理手順を示すフローチャートである。

【図9】図９は、発光制御装置と同様の機能を実現するコンピュータのハードウェア構成の一例を示す図である。

【発明を実施するための形態】

【0012】

以下に、本願の開示する発光制御プログラム、発光制御方法および発光制御システムの実施例を図面に基づいて詳細に説明する。なお、この実施例によりこの発明が限定されるものではない。

【実施例1】

【0013】

図１は、本実施例に係る発光制御システムの一例を示す図である。図１に示すように、この発光制御システムは、集音マイク１０と、光端末２０と、発光制御装置１００とを有する。集音マイク１０および光端末２０は、有線または無線によって、発光制御装置１００に接続される。

【0014】

集音マイク１０は、各種の環境音を集音（収録）するマイクである。たとえば、環境音には、家電の音、水道の流水音、ドアの開閉音、鍵を落とした音等が含まれる。図示を省略するが、環境音には、人の話し声、車のクラクション、玄関のチャイム音等が含まれていてもよい。集音マイク１０は、集音した環境音の情報を、発光制御装置１００に出力する。以下の説明では、集音マイク１０が集音した環境音の情報を「環境音情報」と表記する。

【0015】

光端末２０は、ＬＥＤ（Light Emitting Diode）等を備え、発光制御装置１００から取得する制御情報を基にして、発光する端末である。ここで、発光制御装置１００から取得する制御情報には、発光させる色や発光パターンを一意に識別する色識別情報が含まれる。

【0016】

光端末２０は、制御情報を受け付けると、制御情報を受け付けてから２０秒間、色識別情報に対応する色および発光パターンによって発光する。光端末２０は、色識別情報に対応する色、発光パターンで発光している間に、次の制御情報を、発光制御装置１００から取得すると、次の制御情報の色識別情報に対応する色、発光パターンで発光する。

【0017】

発光制御装置１００は、ＡＩ（Artificial Intelligence）エンジン等を有し、環境音情報を、ＡＩエンジンに入力することで、状態の音の種別を特定する。発光制御装置１００は、状態の音の種別に対応する色を発光させるための制御情報を、光端末２０に送信し、光端末２０に対して発光制御を行う。

【0018】

ここで、発光制御装置１００は、複数の状態が同時間帯に発生した場合、通知すべき状態を利用者に通知可能にするため、スコア（尤度）の高い複数の状態の音の種別から、優先度の高い種別を選択し、選択した種別の固有の色、発光パターンで光端末２０を発光させる。これによって、発光によって、通知すべき状態を利用者に通知することができる。

【0019】

次に、図１に示した発光制御装置１００の構成の一例について説明する。図２は、本実施例に係る発光制御装置の構成を示す機能ブロック図である。図２に示すように、この発光制御装置１００は、ＡＩエンジン１１０と、入力部１２０と、表示部１３０と、記憶部１４０と、制御部１５０とを有する。

【0020】

ＡＩエンジン１１０は、音情報が入力された場合に、各状態の音の種別の尤度（スコア）を出力するＮＮ（Neural Network）である。ＡＩエンジン１１０のパラメータは、学習データを基にして予め学習されているものとする。ＡＩエンジン１１０は「算出部」の一例である。

【0021】

たとえば、ＡＩエンジン１１０は、集音マイク１０に接続され、集音マイク１０から環境音情報を取得する。ＡＩエンジン１１０は、環境音情報を、４秒毎の「部分音情報」に分割する。ＡＩエンジン１１０は、時系列に各部分音情報を入力し、各状態の音の種別の尤度を出力する。本実施例では、部分音情報の時間長を４秒とするがこれに限定されるものではなく、適宜変更可能である。

【0022】

図３は、ＡＩエンジンの出力結果のデータ構造の一例を示す図である。図３に示すように、ＡＩエンジンの出力結果には、種別識別情報と尤度とが対応付けられる。種別識別情報は、状態の音の種別を一意に識別する情報である。尤度は、状態の音の確からしさを示すものである。尤度が大きいほど、より確からしいことを意味する。図３に示す例では、種別識別情報「Ｉ３（水道の流水音）」に対応する尤度が最大となっている。ＡＩエンジン１１０は、環境音情報の部分音情報毎に、出力結果を制御部１５０に出力する。

【0023】

図２の説明に戻る。入力部１２０は、発光制御装置１００に各種の情報を入力するための入力装置である。たとえば、入力部１２０は、入力ボタン、キーボード、タッチパネル等の入力装置に対応する。たとえば、ユーザは、入力部１２０を操作して、後述する優先度テーブル１４２、第１特定テーブル１４３、第２特定テーブル１４４を更新してもよい。

【0024】

表示部１３０は、制御部１５０から出力される各種の情報を表示する表示装置である。たとえば、表示部１３０は、液晶ディスプレイ、有機ＥＬ（Electro-Luminescence）ディスプレイ、タッチパネル等に対応する。たとえば、ユーザは、入力部１２０を操作して、制御部１５０に対して、優先度テーブル１４２、第１特定テーブル１４３、第２特定テーブル１４４の表示要求を行ってもよい。制御部１５０は、表示要求を受け付けた情報を、表示部１３０に出力して表示させる。

【0025】

記憶部１４０は、出力結果テーブル１４１と、優先度テーブル１４２と、第１特定テーブル１４３と、第２特定テーブル１４４とを有する。記憶部１４０は、ＲＡＭ（Random Access Memory）、フラッシュメモリ（Flash Memory）などの半導体メモリ素子や、ＨＤＤ（Hard Disk Drive）などの記憶装置に対応する。

【0026】

出力結果テーブル１４１は、ＡＩエンジン１１０の出力結果を時系列に格納するテーブルである。図４は、出力結果テーブルのデータ構造の一例を示す図である。図４に示すように、出力結果テーブルは、順番と、出力結果とを対応付ける。順番は、ＡＩエンジン１１０から出力結果が出力された順番を示す。出力結果は、部分音情報に対応する出力結果であり、状態の音の種別毎の尤度を示す情報である。各出力結果は、図３で説明した出力結果に対応する。

【0027】

優先度テーブル１４２は、状態の音の種別毎の優先度を定義するテーブルである。図５は、優先度テーブルのデータ構造の一例を示す図である。図５に示すように、この優先度テーブル１４２は、種別識別情報と優先順位とを対応付ける。種別識別情報は、状態の音の種別を一意に識別する情報である。優先順位は、種別の優先度の大小関係を示すのである。本実施例では、優先順位の値が小さいほど、種別の優先度が大きいものとする。

【0028】

たとえば、種別識別情報「Ｉ１（玄関チャイム音）」の優先順位は「１」、種別識別情報「Ｉ２（鍵を落とした音）」の優先順位は「２」である。このため、種別識別情報「Ｉ１」の種別「玄関チャイム音」は、種別識別情報「Ｉ２」の種別「鍵を落とした音」よりも優先する種別である。

【0029】

第１特定テーブル１４３は、種別識別情報と、色識別情報とを対応付けるテーブルである。図６は、第１特定テーブルのデータ構造の一例を示す図である。図６に示すように、第１特定テーブル１４３は、種別識別情報と、色識別情報とを含む。種別識別情報は、状態の音の種別を一意に識別する情報である。色識別情報は、光端末２０に発光させる色および発光パターンを一意に識別する情報である。各種別識別情報に対応する色識別情報は、それぞれ異なるものである。

【0030】

第２特定テーブル１４４は、種別の組み合わせと、色識別情報とを対応付けるテーブルである。図７は、第２特定テーブルのデータ構造の一例を示す図である。図７に示すように、第２特定テーブル１４４は、種別の組み合わせと、色識別情報とを含む。

【0031】

種別の組み合わせを、第１種別識別情報と第２種別識別情報とで示す。第１種別識別情報、第２種別識別情報は、状態の音の種別を一意に識別する情報である。色識別情報は、光端末２０に発光させる色および発光パターンを一意に識別する情報である。第１特定テーブル１４３の色識別情報と、第２特定テーブル１４４の色識別情報は、それぞれ異なる色識別情報であるものとする。

【0032】

たとえば、図７において、ＡＩエンジン１１０から出力される２つの連続する出力結果に含まれる各種別識別情報が、「Ｉ１（玄関チャイム音）」と「Ｉ２（鍵を落とした音）」との組み合わせとなる場合、色識別情報は「Ｃ１０１」となる。

【0033】

図２の説明に戻る。制御部１５０は、取得部１５１と、選択部１５２と、発光制御部１５３とを有する。制御部１５０は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）などによって実現できる。また、制御部１５０は、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）などのハードワイヤードロジックによっても実現できる。

【0034】

取得部１５１は、ＡＩエンジン１１０から、出力結果を順に取得する処理部である。取得部１５１は、取得した出力結果を、取得した順番で、出力結果テーブル１４１に格納する。

【0035】

選択部１５２は、出力結果テーブル１４１に格納された出力結果を取得し、尤度が閾値以上となる種別識別情報を特定する。閾値は、予め設定される。以下において、尤度が閾値以上となる種別識別情報が１つの場合、複数の場合、存在しない場合の選択部１５２の処理について説明する。

【0036】

尤度が閾値以上となる種別識別情報が１つの場合の処理について説明する。選択部１５２は、尤度が閾値以上となる種別識別情報を、発光制御部１５３に出力する。

【0037】

尤度が閾値以上となる種別識別情報が複数の場合の処理について説明する。選択部１５２は、尤度が閾値以上となる種別識別情報と、優先度テーブル１４２とを比較し、優先度が最も大きい種別識別情報を、発光制御部１５３に出力する。

【0038】

たとえば、出力結果が、図３に示した出力結果とし、閾値を「３０％」とすると、閾値以上となる種別識別情報はＩ２およびＩ３となる。選択部１５２が、種別識別情報Ｉ２，Ｉ３と、優先度テーブル１４２とを比較すると、種別識別情報Ｉ２の優先順位は「２」、受別識別情報Ｉ３の優先順位は「３」となる。このため、選択部１５２は、優先度が大きい、種別識別情報Ｉ２を選択し、選択した種別識別情報Ｉ２を、発光制御部１５３に出力する。

【0039】

尤度が閾値以上となる種別識別情報が存在しない場合について説明する。選択部１５２は、選択対象となる種別識別情報がない旨を示す「選択対象無し」の情報を、発光制御部１５３に出力する。

【0040】

選択部１５２は、出力結果テーブル１４１に格納された出力結果を順番に取得し、出力結果に対する上記の処理を繰り返し実行する。

【0041】

発光制御部１５３は、選択部１５２から取得する種別識別情報を基にして、光端末２０に制御情報を出力し、種別識別情報に対応する色または発光パターンによって、光端末２０の発光制御を行う処理部である。以下の説明において、発光制御部１５３が、選択部１５２から、１回目の種別識別情報を受け付けた場合の処理、２回目以降の種別識別情報を受け付けた場合の処理について説明する。

【0042】

１回目の種別識別情報を取得した場合の処理について説明する。発光制御部１５３は、種別識別情報と、第１特定テーブル１４３とを比較して、色識別情報を特定する。発光制御部１５３は、特定した色識別情報を含む制御情報を、光端末２０に送信し、発光制御を行う。

【0043】

なお、発光制御部１５３は、選択部１５２から最後に種別識別情報を取得してから、２０秒以上経過したのち、次の種別識別情報を取得した場合、上記の１回目の種別識別情報を取得した場合の処理と同様の処理を実行する。

【0044】

２回目の種別識別情報を取得した場合の処理について説明する。以下の説明では、適宜、前回（１つ前）取得した種別識別情報を「第１種別識別情報」と表記し、今回取得した種別識別情報を「第２種別識別情報」と表記する。

【0045】

発光制御部１５３は、第１種別識別情報と、第２種別識別情報とが同一である場合には、第２種別識別情報と、第１特定テーブル１４３とを比較して、色識別情報を特定する。発光制御部１５３は、特定した色識別情報を含む制御情報を、光端末２０に送信し、発光制御を行う。

【0046】

一方、発光制御部１５３は、第１種別識別情報と、第２種別識別情報とが異なる場合、第１種別識別情報と、第２種別識別情報との組み合わせが、第２特定テーブル１４４の種別の組み合わせに存在するか否かを判定する。

【0047】

第１種別識別情報と、第２種別識別情報との組み合わせが、第２特定テーブル１４４の種別の組み合わせに存在する場合、発光制御部１５３は、次の処理を行う。発光制御部１５３は、第１種別識別情報と、第２種別識別情報に対応する色識別情報を、第２特定テーブル１４４を基にして特定する。発光制御部１５３は、特定した色識別情報を含む制御情報を、光端末２０に送信し、発光制御を行う。

【0048】

第１種別識別情報と、第２種別識別情報との組み合わせが、第２特定テーブル１４４の種別の組み合わせに存在しない場合、発光制御部１５３は、次の処理を行う。発光制御部１５３は、第１種別識別情報および第２種別識別情報と、優先度テーブル１４２とを比較し、第２種別識別情報が、第１種別識別情報よりも優先度が大きいか否かを判定する。

【0049】

発光制御部１５３は、第２種別識別情報が、第１種別識別情報よりも優先度が大きい場合には、第２種別識別情報に対応する色識別情報を、第１特定テーブル１４３を基にして特定する。発光制御部１５３は、特定した色識別情報を含む制御情報を、光端末２０に送信し、発光制御を行う。これによって、第１種別識別情報に対応する色識別情報に基づいて発光中の光端末２０を、第２種別識別情報に対応する色識別情報の発光に切り替えることができる。

【0050】

一方、発光制御部１５３は、第２種別識別情報が、第１種別識別情報よりも優先度が大きくない場合には、第１種別識別情報に応じた制御情報を光端末２０に送信してから２０秒間待機する。発光制御部１５３は、２０秒間待機した後に、第２種別識別情報に対応する色識別情報を、第１特定テーブル１４３を基にして特定する。発光制御部１５３は、特定した色識別情報を含む制御情報を、光端末２０に送信し、発光制御を行う。

【0051】

ところで、発光制御部１５３は、選択部１５２から、「選択対象無し」の情報を受け付けた場合には、制御情報を光端末２０に送信する処理を待機する。

【0052】

発光制御部１５３は、選択部１５２から、種別識別情報、選択対象無しの情報を受け付ける度に、上記処理を繰り返し実行する。

【0053】

次に、本実施例に係る発光制御装置１００の処理手順の一例について説明する。図８は、本実施例に係る発光制御装置の処理手順を示すフローチャートである。図８に示すように、発光制御装置１００のＡＩエンジン１１０は、集音マイク１０からの環境音情報の受付を開始する（ステップＳ１０１）。

【0054】

ＡＩエンジン１１０は、環境音情報を４秒毎の部分音情報に分割し、各種別識別情報の尤度を算出する（ステップＳ１０２）。発光制御装置１００の選択部１５２は、尤度が閾値以上となる種別識別情報と、優先度テーブル１４２とを基にして、種別識別情報（第２種別識別情報）を選択する（ステップＳ１０３）。

【0055】

発光制御装置１００の発光制御部１５３は、前回（１つ前）、種別識別情報（第１種別識別情報）を取得した場合には（ステップＳ１０４，Ｙｅｓ）、ステップＳ１０５に移行する。一方、発光制御部１５３は、前回、種別識別情報（第１種別識別情報）を取得していない場合には（ステップＳ１０４，Ｎｏ）、ステップＳ１１１に移行する。

【0056】

発光制御部１５３は、第１種別識別情報と第２種別識別情報とが同一であるか否かを判定する（ステップＳ１０５）。発光制御部１５３は、第１種別識別情報と第２種別識別情報とが同一である場合には（ステップＳ１０５，Ｙｅｓ）、第２種別識別情報に対応する色識別情報によって、光端末２０を発光制御し（ステップＳ１０６）、ステップＳ１１４に移行する。

【0057】

一方、発光制御部１５３は、第１種別識別情報と第２種別識別情報とが同一でない場合には（ステップＳ１０５，Ｎｏ）、ステップＳ１０７に移行する。発光制御部１５３は、第１、２種別識別情報の組み合わせが、第２特定テーブル１４４に存在するか否かを判定する（ステップＳ１０７）。

【0058】

発光制御部１５３は、第１、２種別識別情報の組み合わせが、第２特定テーブル１４４に存在する場合には（ステップＳ１０７，Ｙｅｓ）、種別の組み合わせに対応する色識別情報によって、光端末２０を発光制御し（ステップＳ１０８）、ステップＳ１１４に移行する。

【0059】

一方、発光制御部１５３は、第１、２種別識別情報の組み合わせが、第２特定テーブル１４４に存在しない場合には（ステップＳ１０７，Ｎｏ）、第１種別識別情報に対応する発光制御が継続中であるか否かを判定する（ステップＳ１０９）。

【0060】

発光制御部１５３は、第１種別識別情報に対応する発光制御が継続中でない場合には（ステップＳ１０９，Ｎｏ）、第２種別識別情報に対応する色識別情報によって、光端末を発光制御し（ステップＳ１１０）、ステップＳ１１４に移行する。

【0061】

一方、発光制御部１５３は、第１種別識別情報に対応する発光制御が継続中である場合には（ステップＳ１０９，Ｙｅｓ）、ステップＳ１１１に移行する。発光制御部１５３は、第１種別識別情報の優先度よりも、第２種別識別情報の優先度が大きいか否かを判定する（ステップＳ１１１）。

【0062】

発光制御部１５３は、第１種別識別情報の優先度よりも、第２種別識別情報の優先度が大きい場合には（ステップＳ１１１，Ｙｅｓ）、第２種別識別情報に対応する色識別情報によって、光端末２０を発光制御し（ステップＳ１１２）、ステップＳ１１４に移行する。

【0063】

一方、発光制御部１５３は、第１種別識別情報の優先度よりも、第２種別識別情報の優先度が大きくない場合には（ステップＳ１１１，Ｎｏ）、第２種別識別情報に対応する発光制御が終了した後に、第２種別識別情報に対応する色識別情報によって、光端末を発光制御する（ステップＳ１１３）。ＡＩエンジン１１０は、次の部分音情報について、各種別識別情報の尤度を算出し（ステップＳ１１４）、ステップＳ１０３に移行する。

【0064】

次に、本実施例に係る発光制御装置１００の効果について説明する。発光制御装置１００は、複数の種別識別情報（状態の音の種別）が同時間帯に発生した際に、各種別識別情報の優先度を基にして、優先度の大きい種別識別情報を選択する。発光制御装置１００は、選択した種別識別情報に対応する色識別情報を、光端末２０に出力して発光制御する。これによって、発光によって、通知すべき状態（優先度の大きい状態）を利用者に通知することができる。

【0065】

発光制御装置１００は、２つの種別識別情報の組み合わせが、第２特定テーブル１４４に含まれる場合、２つの種別識別情報に対応する色識別情報を、光端末２０に出力して発光制御する。これによって、異なる種別識別情報が連続で発生した場合、２つの種別識別情報の組み合わせに応じた色、発光パターンによって、複数の状態の発生を、利用者に通知することができる。

【0066】

ところで、上述した発光制御装置１００の処理は一例であり、発光制御装置１００はその他の処理を実行してもよい。以下において、発光制御装置１００のその他の処理（１）～（７）について説明する。

【0067】

発光制御装置１００のその他の処理（１）について説明する。発光制御装置１００は、連続する第１種別識別情報と、第２種別識別情報との組み合わせと、第２特定テーブル１４４とを比較して、色識別情報を特定していたが、これに限定されるものではない。たとえば、発光制御装置１００は、ＡＩエンジン１１０から出力される１つの出力結果において、複数の種別識別情報の尤度が閾値以上である場合に次の処理を行う。発光制御装置１００は、１つの出力結果に含まれる２つの種別識別情報（尤度が閾値以上となる種別識別情報）の組み合わせと、第２特定テーブル１４４とを比較して、色識別情報を特定し、光端末２０に送信してもよい。

【0068】

また、本実施例では、発光制御装置１００は、２つの種別識別情報の組み合わせを基にして、色識別情報を特定していたが、２つ以上の種別識別情報の組み合わせを定義しておき、２つ以上の種別識別情報の組み合わせに対応する色識別情報を特定してもよい。

【0069】

発光制御装置１００のその他の処理（２）について説明する。発光制御装置１００は、色識別情報を含む制御情報を、光端末２０に送信していたが、これに限定されるものではない。発光制御装置１００（発光制御部１５３）は、選択部１５２によって選択された種別識別情報の優先順位を、制御情報に更に格納して、光端末２０に送信してもよい。発光制御部１５３は、優先順位を制御情報に格納することで、光端末２０を発光させる時間を調整する。

【0070】

たとえば、光端末２０は、制御情報を受け付けてからの発光時間「２０秒」を基本とし、制御情報に含まれる優先順位に応じて、発光時間を調整する。光端末２０は、優先順位がある順位以上（たとえば、優先順位「５」以上）である場合には、発光時間にＴ秒加算する。光端末２０は、優先順位がある順位未満（たとえば、優先順位「１０」以上）である場合には、発光時間からＴ秒減算する。Ｔ秒は、適宜変更してもよい。

【0071】

発光制御装置１００のその他の処理（３）について説明する。発光制御装置１００は、ＡＩエンジン１１０の出力結果を基にして、対象物（訪問客等）が存在するか否かを判定し、対象物が存在する場合に、優先度テーブル１４２の優先順位を調整してもよい。たとえば、選択部１５２は、出力結果を参照し、種別識別情報「Ｉ８（人の話し声）」の尤度が閾値以上である場合に、対象物が存在すると判定する。

【0072】

選択部１５２は、対象物が存在すると判定した場合には、所定の種別識別情報（たとえば、Ｉ３、Ｉ４、Ｉ６）の優先順位を上げて、種別識別情報の選択を行う。どの種別識別情報の優先順位を上げるのかは、利用者が適宜設定してもよい。これによって、対象物の有無に応じた優先度によって、発光制御を行うことができる。

【0073】

発光制御装置１００のその他の処理（４）について説明する。発光制御装置１００は、選択部１５２によって選択される種別識別情報が、Ｎ回連続して、同一の種別識別情報となる場合に、かかる種別識別情報の優先順位を下げる調整を行ってもよい。Ｎの値は、利用者が適宜変更してもよい。

【0074】

このように、Ｎ回連続して、同一の種別識別情報が選択された場合に、かかる種別識別情報の優先順位を下げることで、他の種別識別情報を選択され易くすることができる。

【0075】

発光制御装置１００のその他の処理（５）について説明する。発光制御装置１００は、光端末２０に制御情報を出力して、発光制御を行っていたがこれに限定されるものではない。発光制御装置１００は、スマートウォッチ、パソコン等の他のデバイスに接続して、状態の音の種別をユーザに通知してもよい。

【0076】

発光制御装置１００は、複数のデバイスを複合的に利用してもよい。たとえば、発光制御装置１００は、光端末２０の電源が「オン」となっている間は、実施例で説明した処理を実行する。一方、発光制御装置１００は、光端末２０の電源が「オフ」となっている間は、利用者の身に着けているスマートウォッチや、パソコンに、状態を文字情報等に変換して通知する。発光制御装置１００は、スマートウォッチが発光機能を有している場合、光端末２０と同様にして、色、発光パターンによる発光制御を行ってもよい。

【0077】

発光制御装置１００のその他の処理（６）について説明する。発光制御装置１００は、４秒毎に、種別識別情報に対応する色識別情報（制御情報）を、光端末２０に出力し、光端末２０は、色識別情報に対応する色および発光パターンによって発光しているが、光端末２０は、発光パターンを少しずつ変更して発光してもよい。たとえば、光端末２０は、一つの色識別情報に対応する色を発光する場合、２０秒間の発光時間のうち、最初の４秒間は、点滅および強調した発光を行い、５秒以降は、点滅や強調のない発光を行う。

【0078】

発光制御装置１００のその他の処理（７）について説明する。発光制御装置１００は、制御情報を光端末２０に出力する場合、複数の種別識別情報の組み合わせに応じた緊急度を、光端末２０に更に通知してもよい。複数の種別識別情報の組み合わせに応じた緊急度は、予めテーブル（図示略）に登録されているものとする。光端末２０は、発光制御装置１００からの制御情報に応じて、発光している間に、緊急度「大」の通知を取得した場合には、発光の強度を大きくする。一方、光端末２０は、発光制御装置１００からの制御情報に応じて、発光している間に、緊急度「小」の通知を取得した場合には、発光の強度を小さくしてもよいし、発光を中止してもよい。

【0079】

たとえば、選択部１５２が、種別識別情報「Ｉ１（玄関チャイム音）」を選択した後に、所定時間以内に、「Ｉ６（ドアの開閉）」を選択した場合には、利用者は、玄関のチャイム音に気付いた可能性が高い。この場合には、発光制御装置１００は、緊急度「小」を、光端末２０に通知して、発光の強度を弱める。

【0080】

たとえば、選択部１５２が、種別識別情報「Ｉ１（玄関チャイム音）」を選択した後に、所定時間以内に、「Ｉ８（人の話し声）」を選択した場合には、緊急性が高い可能性がある。この場合には、発光制御装置１００は、緊急度「大」を、光端末２０に通知して、発光の強度を強める。

【0081】

たとえば、選択部１５２が、所定の種別識別情報を所定回数以上連続して選択している場合には、緊急度「大」を、光端末２０に通知して、発光の強度を強めてもよい。所定の種別識別情報は「Ｉ１（玄関チャイム音）、Ｉ５（車のクラクション）」等が対応する。

【0082】

このように、発光制御装置１００が、複数の種別識別情報の組み合わせを基にして、緊急度を判定し、緊急度に応じて光端末２０の発光制御を行うことで、緊急度が大きいものに関しては、利用者により気付かせやすくすることができる。また、緊急度が小さくなったものに関しては、利用者に煩雑な思いをさせることを防止できる。

【0083】

次に、上記実施例に示した発光制御装置１００と同様の機能を実現するコンピュータのハードウェア構成の一例について順に説明する。

【0084】

図９は、発光制御装置と同様の機能を実現するコンピュータのハードウェア構成の一例を示す図である。図９に示すように、コンピュータ２００は、各種演算処理を実行するＣＰＵ２０１と、ユーザからのデータの入力を受け付ける入力装置２０２と、ディスプレイ２０３とを有する。コンピュータ２００は、集音マイク１０、光端末２０と接続するインタフェース装置２０４を有する。コンピュータ２００は、状態の音の種別に対する尤度を計算するＡＩエンジン２０５を有する。コンピュータ２００は、各種情報を一時記憶するＲＡＭ２０６と、ハードディスク装置２０７とを有する。そして、各装置２０１～２０７は、バス２０８に接続される。

【0085】

ハードディスク装置２０７は、選択プログラム２０７ａおよび発光制御プログラム２０７ｂを有する。ＣＰＵ２０１は、選択プログラム２０７ａおよび発光制御プログラム２０７ｂを読み出してＲＡＭ２０６に展開する。

【0086】

選択プログラム２０７ａは、選択プロセス２０６ａとして機能する。発光制御プログラム２０７ｂは、発光制御プロセス２０６ｂとして機能する。

【0087】

選択プロセス２０６ａの処理は、選択部１５２の処理に対応する。発光制御プロセス２０６ｂの処理は、発光制御部１５３の処理に対応する。

【0088】

なお、各プログラム２０７ａ，２０７ｂについては、必ずしも最初からハードディスク装置２０７に記憶させておかなくてもよい。例えば、コンピュータ２００に挿入されるフレキシブルディスク（ＦＤ）、ＣＤ－ＲＯＭ、ＤＶＤディスク、光磁気ディスク、ＩＣカードなどの「可搬用の物理媒体」に各プログラムを記憶させておく。そして、コンピュータ２００が各プログラム２０７ａ，２０７ｂを読み出して実行するようにしてもよい。

【0089】

以上の各実施例を含む実施形態に関し、さらに以下の付記を開示する。

【0090】

（付記１）コンピュータに、
マイクによって収録される環境音情報を取得し、
取得した環境音情報を所定時間毎の部分音情報に分割し、各部分音情報について、複数の状態の音の種別と、各状態の音の種別に関する尤度とをそれぞれ算出し、
前記複数の状態の音の種別のうち、尤度が閾値以上となる状態の音の種別を特定し、
特定した状態の音の種別が複数である場合、各状態の音の種別および優先度を対応付けたテーブルと、特定した複数の状態の音の種別とを基にして、状態の音の種別を選択し、
選択した状態の音の種別に対応する色またはパターンのうち少なくとも一方を用いて光端末を発光させる
処理を実行させることを特徴とする発光制御プログラム。

【0091】

（付記２）前記発光させる処理は、前記特定する処理によって特定される複数の状態の音の種別の組み合わせが、所定の組み合わせである場合、前記所定の組み合わせに対応する色またはパターンのうち少なくとも一方を用いて、前記光端末を発光させることを特徴とする付記１に記載の発光制御プログラム。

【0092】

（付記３）前記発光させる処理は、選択した状態の音の種別に応じて、前記光端末を発光させる時間を調整することを特徴とする付記１に記載の発光制御プログラム。

【0093】

（付記４）前記環境音情報を基にして、対象物が存在するか否かを判定し、判定結果を基にして、前記テーブルに登録された優先度を調整する処理を更に実行することを特徴とする付記１に記載の発光制御プログラム。

【0094】

（付記５）前記調整する処理は、前記特定する処理によって特定される状態の音の種別について、同一の状態の音の種別が連続する場合に、前記テーブルに登録された優先度を調整することを特徴とする付記４に記載の発光制御プログラム。

【0095】

（付記６）コンピュータが実行する発光制御方法であって、
マイクによって収録される環境音情報を取得し、
取得した環境音情報を所定時間毎の部分音情報に分割し、各部分音情報について、複数の状態の音の種別と、各状態の音の種別に関する尤度とをそれぞれ算出し、
前記複数の状態の音の種別のうち、尤度が閾値以上となる状態の音の種別を特定し、
特定した状態の音の種別が複数である場合、各状態の音の種別および優先度を対応付けたテーブルと、特定した複数の状態の音の種別とを基にして、状態の音の種別を選択し、
選択した状態の音の種別に対応する色またはパターンのうち少なくとも一方を用いて光端末を発光させる
処理を実行することを特徴とする発光制御方法。

【0096】

（付記７）前記発光させる処理は、前記特定する処理によって特定される複数の状態の音の種別の組み合わせが、所定の組み合わせである場合、前記所定の組み合わせに対応する色またはパターンのうち少なくとも一方を用いて、前記光端末を発光させることを特徴とする付記６に記載の発光制御方法。

【0097】

（付記８）前記発光させる処理は、選択した状態の音の種別に応じて、前記光端末を発光させる時間を調整することを特徴とする付記６に記載の発光制御方法。

【0098】

（付記９）前記環境音情報を基にして、対象物が存在するか否かを判定し、判定結果を基にして、前記テーブルに登録された優先度を調整する処理を更に実行することを特徴とする付記６に記載の発光制御方法。

【0099】

（付記１０）前記調整する処理は、前記特定する処理によって特定される状態の音の種別について、同一の状態の音の種別が連続する場合に、前記テーブルに登録された優先度を調整することを特徴とする付記９に記載の発光制御方法。

【0100】

（付記１１）環境音を収録するマイクと、発光する光端末と、発光制御装置とを有する発光制御システムであって、
前記発光制御装置は、
前記マイクによって収録される環境音情報を取得し、取得した環境音情報を所定時間毎の部分音情報に分割し、各部分音情報について、複数の状態の音の種別と、各状態の音の種別に関する尤度とをそれぞれ算出する算出部と、
前記複数の状態の音の種別のうち、尤度が閾値以上となる状態の音の種別を特定し、特定した状態の音の種別が複数である場合、各状態の音の種別および優先度を対応付けたテーブルと、特定した複数の状態の音の種別とを基にして、状態の音の種別を選択する選択部と、
前記選択部によって選択された状態の音の種別に対応する色またはパターンのうち少なくとも一方を用いて前記光端末を発光させる発光制御部と
を有することを特徴とする発光制御システム。

【0101】

（付記１２）前記発光制御部は、特定した複数の状態の音の種別の組み合わせが、所定の組み合わせである場合、前記所定の組み合わせに対応する色またはパターンのうち少なくとも一方を用いて、前記光端末を発光させることを特徴とする付記１１に記載の発光制御システム。

【0102】

（付記１３）前記発光制御部は、選択された状態の音の種別に応じて、前記光端末を発光させる時間を調整することを特徴とする付記１１に記載の発光制御システム。

【0103】

（付記１４）前記選択部は、前記環境音情報を基にして、対象物が存在するか否かを判定し、判定結果を基にして、前記テーブルに登録された優先度を調整する処理を更に実行することを特徴とする付記１１に記載の発光制御システム。

【0104】

（付記１５）前記発光制御部は、前記特定する処理によって特定される状態の音の種別について、同一の状態の音の種別が連続する場合に、前記テーブルに登録された優先度を調整する処理を更に実行することを特徴とする付記１４に記載の発光制御システム。

【符号の説明】

【0105】

１０ 集音マイク
２０ 光端末
１００ 発光制御装置
１１０ ＡＩエンジン
１２０ 入力部
１３０ 表示部
１４０ 記憶部
１４１ 出力結果テーブル
１４２ 優先度テーブル
１４３ 第１特定テーブル
１４４ 第２特定テーブル
１５０ 制御部
１５１ 取得部
１５２ 選択部
１５３ 発光制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】