特開 2022-190585 注文受付装置、注文受付システム、およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022190585

(43)【公開日】2022-12-26

(54)【発明の名称】注文受付装置、注文受付システム、およびプログラム

(51)【国際特許分類】

   G06F 3/16 20060101AFI20221219BHJP

   G07G 1/00 20060101ALI20221219BHJP

   G07G 1/12 20060101ALI20221219BHJP

   G10L 15/00 20130101ALI20221219BHJP

   G10L 17/00 20130101ALI20221219BHJP

   G06Q 50/12 20120101ALI20221219BHJP

【ＦＩ】

G06F3/16 640

G07G1/00 311Z

G07G1/12 361C

G10L15/00 200Z

G10L17/00 200C

G06F3/16 650

G06Q50/12

【審査請求】未請求

【請求項の数】9

【出願形態】ＯＬ

(21)【出願番号】P 2021098973

(22)【出願日】2021-06-14

(71)【出願人】

【識別番号】000003562

【氏名又は名称】東芝テック株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】楢崎 大輔

(72)【発明者】

【氏名】齋藤 雄

(72)【発明者】

【氏名】中西 淳

(72)【発明者】

【氏名】大熊 裕美子

(72)【発明者】

【氏名】曹永 紗世

【テーマコード（参考）】

3E142

5L049

【Ｆターム（参考）】

3E142AA07

3E142BA07

3E142BA20

3E142CA11

3E142KA01

5L049CC23

5L049CC24

(57)【要約】

【課題】本発明が解決しようとする課題は、顧客の音声による注文を確実に受付けることが可能な注文受付装置、注文受付システム、およびプログラムを提供することである。
【解決手段】実施形態の注文受付装置は、店舗の客席を識別する席情報と対応付けられた音声情報が入力される入力部と、前記入力部に入力された音声情報が示す内容を認識する音声認識部と、前記入力部に入力された音声情報の特性を示す特性データを抽出する特性抽出部と、前記特性抽出部が抽出した特性データが、店員の音声情報の特性データを記憶する店員特性情報記憶部に記憶されているか否かに基づいて、前記入力部に入力された音声情報の話者が店員であるか否かを判定する判定部と、前記判定部によって音声情報の話者が店員でないと判定されたことを条件として、前記音声認識部が認識した注文内容と前記席情報とを対応付けた注文情報を受け付ける受付部と、を備える。
【選択図】図１０

【特許請求の範囲】

【請求項1】

店舗の客席を識別する席情報と対応付けられた音声情報が入力される入力部と、
前記入力部に入力された音声情報が示す内容を認識する音声認識部と、
前記入力部に入力された音声情報の特性を示す特性データを抽出する特性抽出部と、
前記特性抽出部が抽出した特性データが、店員の音声情報の特性データを記憶する店員特性情報記憶部に記憶されているか否かに基づいて、前記入力部に入力された音声情報の話者が店員であるか否かを判定する判定部と、
前記判定部によって音声情報の話者が店員でないと判定されたことを条件として、前記音声認識部が認識した注文内容と前記席情報とを対応付けた注文情報を受け付ける受付部と、
を備える注文受付装置。

【請求項2】

音声情報が入力される入力部と、
前記入力部に入力された音声情報が示す内容を認識する音声認識部と、
前記入力部に入力された音声情報の特性を示す特性データを抽出する特性抽出部と、
前記音声認識部が認識した内容に店舗の客席を識別する席情報が含まれている場合、前記特性抽出部が抽出した特性データと当該席情報とを対応付けて顧客特性情報記憶部に登録する登録部と、
前記音声認識部が認識した内容に注文内容が含まれている場合、前記顧客特性情報記憶部において前記特性抽出部が抽出した特性データに対応する席情報と当該注文内容とを対応付けた注文情報を受付ける受付部と、
を備える注文受付装置。

【請求項3】

前記音声認識部が認識した内容に基づいて、前記受付部が受付けた注文情報のステータスを管理する注文管理部をさらに備える、
請求項１または請求項２に記載の注文受付装置。

【請求項4】

前記入力部に入力された音声情報の話者を特定する話者特定部をさらに備え、
前記注文管理部は、前記話者特定部による話者の特定結果と前記音声認識部の認識内容とに基づいて、前記注文情報のステータスを管理する、
請求項３に記載の注文受付装置。

【請求項5】

前記話者特定部は、店員を識別する店員識別情報と前記特性データとを対応付けて記憶する店員特性情報記憶部において前記特性抽出部が抽出した特性データに対応する店員識別情報で識別される店員を前記入力部に入力された音声情報の話者と特定する、
請求項４に記載の注文受付装置。

【請求項6】

店舗の客席に対応して配設され、当該客席に位置する顧客の音声を収音し、当該音声を特定する音声情報を出力する客用収音部と、前記客用収音部が出力した音声情報に基づいて、顧客からの注文を受付ける注文受付装置と、を備える注文受付システムであって、
前記注文受付装置は、
店舗の客席を識別する席情報と対応付けられた音声情報が入力される入力部と、
前記入力部に入力された音声情報が示す内容を認識する音声認識部と、
前記入力部に入力された音声情報の特性を示す特性データを抽出する特性抽出部と、
前記特性抽出部が抽出した特性データが、店員の音声情報の特性データを記憶する店員特性情報記憶部に記憶されているか否かに基づいて、前記入力部に入力された音声情報の話者が店員であるか否かを判定する判定部と、
前記判定部によって音声情報の話者が店員でないと判定されたことを条件として、前記音声認識部が認識した注文内容と前記席情報とを対応付けた注文情報を受け付ける受付部と、
を備える注文受付システム。

【請求項7】

店舗の客席に位置する顧客の音声を収音し、当該音声を特定する音声情報を出力する客用収音部と、前記客用収音部が出力した音声情報に基づいて、顧客からの注文を受付ける注文受付装置と、を備える注文受付システムであって、
前記注文受付装置は、
音声情報が入力される入力部と、
前記入力部に入力された音声情報が示す内容を認識する音声認識部と、
前記入力部に入力された音声情報の特性を示す特性データを抽出する特性抽出部と、
前記音声認識部が認識した内容に店舗の客席を識別する席情報が含まれている場合、前記特性抽出部が抽出した特性データと当該席情報とを対応付けて顧客特性情報記憶部に登録する登録部と、
前記音声認識部が認識した内容に注文内容が含まれている場合、前記顧客特性情報記憶部において前記特性抽出部が抽出した特性データに対応する席情報と当該注文内容とを対応付けた注文情報を受付ける受付部と、
を備える注文受付システム。

【請求項8】

注文受付装置をコンピュータで制御するためのプログラムであって、
前記コンピュータを、
店舗の客席を識別する席情報と対応付けられた音声情報が入力される入力部と、
前記入力部に入力された音声情報が示す内容を認識する音声認識部と、
前記入力部に入力された音声情報の特性を示す特性データを抽出する特性抽出部と、
前記特性抽出部が抽出した特性データが、店員の音声情報の特性データを記憶する店員特性情報記憶部に記憶されているか否かに基づいて、前記入力部に入力された音声情報の話者が店員であるか否かを判定する判定部と、
前記判定部によって音声情報の話者が店員でないと判定されたことを条件として、前記音声認識部が認識した注文内容と前記席情報とを対応付けた注文情報を受け付ける受付部と、
して機能させるプログラム。

【請求項9】

注文受付装置をコンピュータで制御するためのプログラムであって、
前記コンピュータを、
音声情報が入力される入力部と、
前記入力部に入力された音声情報が示す内容を認識する音声認識部と、
前記入力部に入力された音声情報の特性を示す特性データを抽出する特性抽出部と、
前記音声認識部が認識した内容に店舗の客席を識別する席情報が含まれている場合、前記特性抽出部が抽出した特性データと当該席情報とを対応付けて顧客特性情報記憶部に登録する登録部と、
前記音声認識部が認識した内容に注文内容が含まれている場合、前記顧客特性情報記憶部において前記特性抽出部が抽出した特性データに対応する席情報と当該注文内容とを対応付けた注文情報を受付ける受付部と、
して機能させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、注文受付装置、注文受付システム、およびプログラムに関する。

【背景技術】

【0002】

近年、飲食店においては、人手不足や、感染症対策として店員と顧客との会話削減が要求されていることなどを背景として、顧客自身の操作によって注文するオーダー端末装置などが用いられている。ところが、オーダー端末装置の操作に慣れていない顧客が多く、顧客がオーダー端末装置の操作に戸惑う場面が見受けられる。このため、顧客が容易に注文できるシステムの導入が望まれている。

【0003】

顧客が複雑な操作を行うことなく注文できるようなものとして、音声認識を用いた注文入力システムが提案されている（例えば、特許文献１）。上記注文入力システムは、いわゆるドライブスルーにおいて顧客の注文を音声で受付けるものである。

【0004】

しかしながら、このような音声認識を用いた注文入力システムを複数の顧客が存在する店舗内に採用すると、注文を意図していない顧客あるいは店員の音声に基づいて誤った注文を受付けてしまう可能性があるという問題があった。

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明が解決しようとする課題は、顧客の音声による注文を確実に受付けることが可能な注文受付装置、注文受付システム、およびプログラムを提供することである。

【課題を解決するための手段】

【0006】

実施形態の注文受付装置は、店舗の客席を識別する席情報と対応付けられた音声情報が入力される入力部と、前記入力部に入力された音声情報が示す内容を認識する音声認識部と、前記入力部に入力された音声情報の特性を示す特性データを抽出する特性抽出部と、前記特性抽出部が抽出した特性データが、店員の音声情報の特性データを記憶する店員特性情報記憶部に記憶されているか否かに基づいて、前記入力部に入力された音声情報の話者が店員であるか否かを判定する判定部と、前記判定部によって音声情報の話者が店員でないと判定されたことを条件として、前記音声認識部が認識した注文内容と前記席情報とを対応付けた注文情報を受け付ける受付部と、を備える。

【図面の簡単な説明】

【0007】

【図1】図１は、第１の実施形態における注文受付システムを含む店舗システムの概略を示す図である。

【図2】図２は、第１の実施形態における注文受付装置のハードウェア構成を示すブロック図である。

【図3】図３は、第１の実施形態における注文受付装置のメモリ部に記憶されるメニューマスタのデータ構成を示す図である。

【図4】図４は、第１の実施形態における注文受付装置のメモリ部に記憶される商品辞書ファイルのデータ構成を示す図である。

【図5】図５は、第１の実施形態における注文受付装置のメモリ部に記憶される注文数辞書ファイルのデータ構成を示す図である。

【図6】図６は、第１の実施形態における注文受付装置のメモリ部に記憶される注文管理辞書ファイルのデータ構成を示す図である。

【図7】図７は、第１の実施形態における注文受付装置のメモリ部に記憶される店員特性管理ファイルのデータ構成を示す図である。

【図8】図８は、第１の実施形態における注文受付装置のメモリ部に記憶される注文管理ファイルのデータ構成を示す図である。

【図9】図９は、第１の実施形態における注文受付装置の機能構成を示すブロック図である。

【図10】図１０は、第１の実施形態における注文受付システムの動作の流れを示すシーケンスチャートである。

【図11】図１１は、第１の実施形態における注文受付装置の制御部による注文受付処理の流れを示すフローチャートである。

【図12】図１２は、第１の実施形態における注文受付装置の制御部によるステータス更新処理の流れを示すフローチャートである。

【図13】図１３は、第２の実施形態における注文受付装置のハードウェア構成を示すブロック図である。

【図14】図１４は、第２の実施形態における注文受付装置のメモリ部に記憶される顧客特性管理ファイルのデータ構成を示す図である。

【図15】図１５は、第２の実施形態における注文受付システムの機能構成を示すブロック図である。

【図16】図１６は、第２の実施形態における注文受付システムの動作の流れを示すシーケンスチャートである。

【図17】図１７は、第２の実施形態における注文受付装置の制御部による注文受付処理の流れを示すフローチャートである。

【図18】図１８は、第２の実施形態における注文受付装置の制御部によるステータス更新処理の流れを示すフローチャートである。

【発明を実施するための形態】

【0008】

以下、注文受付装置、注文受付システム、およびプログラムについて説明する。なお、以下に説明する実施形態によりこの発明が限定されるものではない。例えば、以下の実施形態では、注文受付システムを飲食店に採用した例について説明するが、これに限らない。注文受付装置は、注文を受けて顧客に商品を提供する店舗に広く用いることができる。

【0009】

（第１の実施形態）
以下、第１の実施形態の注文受付装置、注文受付システム、およびプログラムについて、図面を参照して説明する。図１は、注文受付システムを含む店舗システムの概略を示す図である。店舗システム１００は、商品を提供する店舗、例えば複数の客席が設置された飲食店などに採用される。店舗に設置される客席は、一人ずつ利用されるカウンター席でも複数人で利用するテーブル席でもよく、また立食用の客席でもよい。店舗システム１００は、注文受付システム１およびＰＯＳ（Point Of Sales）端末２００を備える。

【0010】

ＰＯＳ端末２００は、チェックアウトカウンタに設けられ、飲食を終えた顧客の支払に関する会計処理を実行する。ＰＯＳ端末２００が実行する会計処理は、現金決済においては、例えば、顧客が注文した商品情報等の表示、釣銭額の算出、釣銭の払出等であり、クレジット決済においては、決済代行業者の決済サーバとの各種情報の送受信等である。

【0011】

注文受付システム１は、管理サーバ２、客マイク３、表示器４、調理者マイク５、キッチンディスプレイ６、キッチンプリンタ７、およびホール担当者マイク８を備える。これら各装置は、ＬＡＮ（Local Area Network）や無線ＬＡＮ等のネットワークを介して互いに通信可能に接続されている。また、上記各装置は、ネットワークを介してＰＯＳ端末２００に通信可能に接続されている。なお、例えばカウンター席のみで店舗であって、カウンター内で調理する店員が顧客への商品の提供も行う場合、注文受付システム１は、調理者マイク５またはホール担当者マイク８のいずれか一方を備えていればよい。

【0012】

管理サーバ２は、店舗のバックヤードに配設される。管理サーバ２は、ＰＯＳ端末２００から会計処理が実行された商品の商品情報や決済方法等に関する決済情報を受信する。さらに、管理サーバ２は、ＰＯＳ端末２００から売上金額を示した売上情報を受信する。管理サーバ２は、受信した商品情報、決済情報、売上情報等を集中的に管理して、一店舗での売上管理等を行う。

【0013】

また、管理サーバ２は、客マイク３が収音した顧客の音声に基づいて注文情報を受付ける。注文情報は、客席の位置を示す席情報および注文内容（商品を特定する情報、商品の個数を示す情報）を含む。具体的には、管理サーバ２は、客マイク３から入力された音声情報に基づいて顧客の音声であるか店員の音声であるかを判定し、顧客の音声であれば当該音声情報の内容を認識して注文情報を受付ける。以下の説明において、音声情報の内容を認識することを音声認識、音声情報の特性データに基づいて話者を認識することを話者認識、とそれぞれいう場合がある。話者認識および音声認識は広く知られた技術により実行され、管理サーバ２は、これら音声認識および話者認識を活用して注文情報を受付ける。管理サーバ２は、注文受付装置の一例である。

【0014】

さらに、管理サーバ２は、調理者マイク５およびホール担当者マイク８が収音した音声に基づいて、受付けた注文情報のステータスを管理する。例えば、管理サーバ２は、受付けた注文情報にかかる商品の調理が完了したこと、あるいは、当該商品が顧客に提供されたことなどを記憶する。管理サーバ２は注文管理機能を備えた注文受付装置ということができる。

【0015】

客マイク３は、各客席に対応して設置されている。客マイク３は、対応する客席の顧客の音声を収音し、収音した音声の音声情報をマイクＮｏとともに管理サーバ２に出力する。マイクＮｏは、客席に設けられたマイクを識別する、言い換えれば客マイクが設けられた客席を識別するもので、席情報の一例である。客マイク３は、他の客席の顧客の音声は収音しない、あるいは収音しても音声情報として出力しないように設定されている。例えば、客マイク３は入力された音声の音量が所定値以下の場合、ノイズであると判断して音声情報を出力しない。なお、音量に基づくノイズ音の判断は管理サーバ２で行ってもよい。客マイク３は、客席に位置する顧客の音声を収音し、当該音声を特定する音声情報を出力する客用収音部の一例である。

【0016】

表示器４は、客マイク３とセットになって各客席に対応して設置されている。表示器４は、例えば、対応する客マイク３が出力した音声情報に基づいて管理サーバ２が認識した注文内容を表示する。表示器４に表示された注文内容を確認して、顧客が「はい」「ＯＫ」などの注文を確定するための音声を発すると、管理サーバ２は注文を受付ける。表示器４は、その他各種情報を表示することができる。例えば、表示器４は、店舗のメニューや顧客が注文した商品の商品情報（商品名、価格など）を表示することができる。なお、表示器４は設けなくてもよい。また、表示器４に代えて、あるいは表示器４に加えて、当該表示器４が表示する内容を音声で出力するスピーカを設けてもよい。

【0017】

調理者マイク５は、キッチンで商品を調理する調理者の音声を収音し、収音した音声の音声情報を管理サーバ２に出力する。調理者マイク５は、例えば調理者のみの音声を収音するヘッドセットで構成される。調理者マイク５にも調理者マイク５を識別するマイクＮｏが設定されている。

【0018】

キッチンディスプレイ６は、キッチンに設けられ、例えば、管理サーバ２が受付けた注文情報や当該注文情報のステータス等を表示する。調理者は、キッチンディスプレイ６に表示された注文情報を確認して調理を行う。

【0019】

キッチンプリンタ７は、キッチンに設けられ、管理サーバ２が受付けた注文情報を印刷し伝票として発行する。ホール担当者は、顧客が注文した商品の調理が完了して当該顧客に商品を提供する際にキッチンプリンタ７で印刷された伝票を顧客に渡す。

【0020】

ホール担当者マイク８は、複数の客席が設置されたホールを移動して顧客に商品を提供するホール担当者の音声を収音し、収音した音声の音声情報を管理サーバ２に出力する。ホール担当者マイク８は、例えばホール担当者のみの音声を収音するヘッドセットで構成される。ホール担当者マイク８にもホール担当者マイク８を識別するマイクＮｏが設定されている。

【0021】

次に、管理サーバ２について詳細に説明する。図２は、管理サーバ２のハードウェア構成を示すブロック図である。管理サーバ２は、制御部２０と、メモリ部２１と、表示部２２と、操作部２３と、通信部２４と、を備えている。制御部２０、メモリ部２１、表示部２２、操作部２３および通信部２４は、バス２５等を介して互いに接続されている。

【0022】

制御部２０は、ＣＰＵ（Central Processing Unit）２０１、ＲＯＭ（Read Only Memory）２０２、ＲＡＭ（Random Access Memory）２０３を備えたコンピュータで構成されている。ＣＰＵ２０１、ＲＯＭ２０２、およびＲＡＭ２０３は、互いにバス２５を介して接続されている。

【0023】

ＣＰＵ２０１は管理サーバ２の全体の動作を制御する。ＲＯＭ２０２は、ＣＰＵ２０１の駆動に用いられるプログラムなどの各種プログラムや各種データを記憶する。ＲＡＭ２０３は、ＣＰＵ２０１のワークエリアとして使用され、ＲＯＭ２０２やメモリ部２１に記憶された各種プログラムや各種データを展開する。制御部２０は、ＣＰＵ２０１がＲＯＭ２０２や、メモリ部２１に記憶されＲＡＭ２０３に展開された制御プログラムに従って動作することによって、管理サーバ２の各種制御処理を実行する。

【0024】

メモリ部２１は、ＨＤＤ（Hard Disk Drive）やフラッシュメモリ等の記憶媒体で構成されており、電源を遮断しても記憶内容を維持する。メモリ部２１は、制御プログラム２１１、メニューマスタ２１２、商品辞書ファイル２１３、注文数辞書ファイル２１４、注文管理辞書ファイル２１５、店員特性管理ファイル２１６、および注文管理ファイル２１７を記憶する。

【0025】

制御プログラム２１１は、管理サーバ２を売上管理装置として機能させるプログラム、管理サーバ２を注文受付装置として機能させるプログラム等である。

【0026】

メニューマスタ２１２は、店舗のメニューの商品の情報を記憶したマスタファイルである。メニューマスタ２１２は、店舗のメニューに変更があった場合に更新される。図３は、メニューマスタ２１２のデータ構成を示す図である。メニューマスタ２１２は、メニューＮｏ、商品名、および価格を示す各情報が対応づけられている。

【0027】

メニューＮｏの項目には、商品ごとに設定された番号が登録されている。メニューＮｏは、商品を識別する商品識別情報の一例である。商品名の項目には、商品の名称を示す情報が登録されている。価格の項目には、商品の単価を示す情報が登録されている。単価は、本体価格でも消費税を含んだ税込価格でもよい。

【0028】

商品辞書ファイル２１３は、音声認識による注文受付において注文商品を認識する際に用いられる用語の辞書データである。図４は、商品辞書ファイル２１３のデータ構成を示す図である。商品辞書ファイル２１３は、商品名および用語を示す各情報が対応づけられている。

【0029】

商品名の項目には、商品の名称を示す情報が登録されている。用語の項目には、商品を識別する用語を示す情報が登録されている。商品を識別する用語は、商品名、商品名の一部の文言、メニューＮｏなどである。例えば商品名がカレーライスの場合、対応する用語は「カレーライス」、「カレー」、「メニューＮｏ１」などとすることができる。

【0030】

注文数辞書ファイル２１４は、音声認識による注文受付において注文商品の個数を認識する際に用いられる用語の辞書データである。図５は、注文数辞書ファイル２１４のデータ構成を示す図である。注文数辞書ファイル２１４は、注文数および用語を示す各情報が対応づけられている。

【0031】

注文数の項目には、注文数を示す情報が登録されている。用語の項目には、注文数を識別する用語を示す情報が登録されている。例えば、注文数１に対応する用語は、「１個」、「１つ」などである。

【0032】

注文管理辞書ファイル２１５は、音声認識による注文管理において注文情報の管理を行う際に用いられる用語の辞書データである。図６は、注文管理辞書ファイル２１５のデータ構成を示す図である。注文管理辞書ファイル２１５は、更新処理および用語を示す各情報が対応づけられている。

【0033】

更新処理の項目には、注文情報に対するステータスの更新処理（注文情報の登録を含む）を示す情報が登録されている。更新処理の項目には、例えば、注文登録、調理完了、商品提供済の処理を示す情報が登録される。用語の項目には、ステータスの更新処理を決定する際に用いられる用語を示す情報が登録されている。例えば、注文登録に対応する用語は、「はい」、「ＯＫ」などである。これは、顧客が表示器４に表示された注文内容を確認した際に発する音声に含まれる用語である。また、調理完了に対応する用語は、「できあがり」、「お願いします」などである。これは、注文された商品の調理を完了した際に調理担当者が商品名に続いて発する音声に含まれる用語である。さらに、商品提供済に対応する用語は、「お待たせしました」「どうぞ」などである。これは、個客に対して商品を提供した際にホール担当者が商品名に続いて発する音声に含まれる用語である。

【0034】

なお、メモリ部２１は、その他の辞書ファイルを記憶してもよい。例えば、Ｌサイズ、Ｍサイズ、Ｓサイズなど飲み物等のサイズを認識するための辞書ファイルを備えていてもよい。各辞書ファイルで用いられる用語は、店舗のルールや運用によって定めることができる。

【0035】

店員特性管理ファイル２１６は、店員ごとに音声情報の特性データを管理するファイルである。音声情報の特性データは、話者認識を行うためのデータであり、例えば音声を周波数分析したデータ等である。店員特性管理ファイル２１６は、全ての店員のデータを登録しているが、客席で音声を発する可能性がある店員（例えば、ホール担当者）のデータを登録するものであればよい。本実施形態では、店員特性管理ファイル２１６は、客マイク３が収音した音声が店員の音声であるか否かを話者認識する際に活用されるものだからである。なお、ホール担当者以外のデータの活用については、第２の実施形態で詳述する。店員の音声情報の特性データは、営業前に予め登録されていてもよく、また店員が営業中に最初に音声を発する際に登録してもよい。図７は、店員特性管理ファイル２１６のデータ構成を示す図である。店員特性管理ファイル２１６は、店員を識別する店員ＩＤ、担当、および特徴データを示す各情報が対応づけられている。店員特性管理ファイル２１６は、店員の音声情報の特性データを記憶する店員特性情報記憶部、および、店員を識別する店員識別情報と音声情報の特性データとを対応付けて記憶する店員特性情報記憶部の一例である。

【0036】

店員ＩＤの項目には、店員を識別する店員ＩＤが登録される。店員ＩＤは、店員を識別する店員識別情報の一例である。店員ＩＤは、店員ごとに異なるＩＤが設定されている。しかしながら、店員ＩＤは全て同じとしてもよい。本実施形態においては、必ずしも店員個人を識別する必要はなく、店員であることを識別できればよいからである。担当の項目には、店員の担当を示す情報が登録される。担当とは、例えば、調理者、ホール担当者などである。この項目のデータの活用については、第２の実施形態で述べる。特性データの項目には、音声情報の特性データを示す情報が登録される。

【0037】

注文管理ファイル２１７は、顧客から受付けた注文情報のステータスを管理するファイルである。注文管理ファイル２１７は、客マイク３、調理者マイク５、およびホール担当者マイク８が収音した音声の音声情報に基づいて更新される。図８は、注文管理ファイル２１７のデータ構成を示す図である。注文管理ファイル２１７は、席Ｎｏ、注文Ｎｏ、注文商品名、ステータス、および登録フラグを示す各情報が対応づけられている。

【0038】

席Ｎｏの項目には、客席ごとに定められた番号が登録される。席Ｎｏは各客マイク３に設定されたマイクＮｏと対応づけられており、席Ｎｏを示す情報はマイクＮｏを示す情報であるということもできる。以下の説明において、席Ｎｏを登録することを、マイクＮｏを登録する、という場合がある。注文Ｎｏの項目には、受付けた注文情報を特定する注文Ｎｏを示す情報が登録される。本実施形態では、注文Ｎｏは注文商品１つずつに対応して発行されるが、１客席から受付けた注文情報全体に注文Ｎｏを設定してもよい。注文商品名の項目には、注文された商品の名称を示す情報が登録される。ステータスの項目には、受付けた注文情報の状況を示す情報が入力される。ステータスの項目は、注文情報を受付けた後、状況に応じて書き換えられる。登録フラグの項目には、受付けた注文情報が未確定状態の仮登録か、確定した状態の本登録かを示す情報が登録される。登録フラグの項目には、受付けた注文情報が仮登録の場合「０」が登録され、本登録の場合「１」が登録される。

【0039】

図２に戻って、管理サーバ２のハードウェア構成を説明する。表示部２２は、例えば液晶パネルで構成されており、各種情報を表示する。表示部２２は、例えば各辞書ファイルに用語を登録するための登録画面等を表示する。

【0040】

操作部２３は、キーボードやタッチパネル等で構成される。操作部２３は、顧客によって操作されると、当該操作に応じた情報を制御部２０に入力する。

【0041】

通信部２４は、客マイク３、表示器４、調理者マイク５、キッチンディスプレイ６、キッチンプリンタ７、ホール担当者マイク８、およびＰＯＳ端末２００などの外部装置と通信するためのインターフェイスである。制御部２０は、通信部２４を介して上記外部装置と接続されることで、当該外部装置と情報（データ）の送受信が可能となる。

【0042】

続いて、管理サーバ２の制御部２０の機能構成について説明する。図９は、管理サーバ２の制御部２０の主要な機能構成を示すブロック図である。制御部２０は、ＣＰＵ２０１がＲＯＭ２０２やメモリ部２１に記憶された制御プログラムにしたがって動作することで、入力部２００１、音声認識部２００２、特性抽出部２００３、話者特定部２００４、判定部２００５、受付部２００６および注文管理部２００７として機能する。なお、これら各機能を専用回路等のハードウェアで構成してもよい。

【0043】

入力部２００１には、店舗の客席を識別する席情報と対応付けられた音声情報が入力される。具体的には、入力部２００１には、客マイク３で収音された音声の音声情報と当該客マイクのマイクＮｏとが対応づけられた情報が入力される。また、入力部２００１には、調理者マイク５で収音された音声の音声情報と当該調理者マイク５のマイクＮｏとが対応づけられた情報、およびホール担当者マイク８で収音された音声の音声情報と当該ホール担当者マイク８のマイクＮｏとが対応づけられた情報が入力される。

【0044】

音声認識部２００２は、入力部２００１に入力された音声情報が示す内容を認識する。具体的には、音声認識部２００２は、客マイク３、調理者マイク５、ホール担当者マイク８で収音された音声の音声情報を分析して、これら音声情報が示す内容を認識する。また、音声認識部２００２は、認識した内容に含まれる用語と各辞書ファイルとに基づいて、注文内容や注文に対するステータスを認識する。例えば、音声認識部２００２は、認識した音声情報の内容に「メニューＮｏ」の用語が含まれている場合、当該音声情報は当該メニューＮｏに対応する商品を注文する内容であることを認識する。また、例えば、音声認識部２００２は、認識した音声情報の内容に「ＯＫ」の用語が含まれている場合、当該音声情報は注文登録することを指示する内容であると認識する。

【0045】

特性抽出部２００３は、入力部２００１に入力された音声情報の特性を示す特性データを抽出する。特性抽出部２００３は、例えば、音声情報を周波数分析して特徴となる特性データを抽出する。話者を識別するために用いられる特性データは、公知の方法で抽出される。

【0046】

話者特定部２００４は、入力部２００１に入力された音声情報の話者を特定する。話者特定部２００４は、話者と特性データとを対応付けた特性情報を参照して、特性抽出部２００３が抽出した特性データに対応する話者を特定する。例えば、話者特定部２００４は、入力部２００１に入力された音声情報から特性抽出部２００３が抽出した特性データと、店員特性管理ファイル２１６に登録された特性データとを比較して、入力部２００１に入力された音声情報の話者を特定する。

【0047】

判定部２００５は、特性抽出部２００３が抽出した特性データ、および、店員を識別する店員識別情報と音声情報の特性データとを対応付けて記憶する店員特性情報に基づいて、入力部２００１に入力された音声情報の話者が店員であるか否かを判定する。具体的には、判定部２００５は、特性抽出部２００３が抽出した特性データが店員特性管理ファイル２１６に登録されているか否か判断し、登録されていれば、入力部２００１に入力された音声情報の話者が店員であると判定する。判定部２００５は、特性抽出部２００３が抽出した特性データが店員特性管理ファイル２１６に登録されていなければ、入力部２００１に入力された音声情報の話者が店員でないと判定する。

【0048】

受付部２００６は、判定部２００５によって音声情報の話者が店員でないと判定されたことを条件として、音声認識部２００２が認識した注文内容と席情報とを対応付けた注文情報を受け付ける。具体的には、受付部２００６は、判定部２００５によって、客マイク３のマイクＮｏとともに入力された音声情報の話者が店員でないと判定されたことを条件として、当該音声情報が示す注文内容とマイクＮｏとを対応付けた注文情報を注文管理ファイル２１７に登録する。言い換えれば、客マイク３で収音された音声が店員の音声でない場合、当該音声の音声情報が注文内容を示すものであれば当該注文内容に基づいて注文情報を受付ける。受付部２００６は、判定部２００５によって音声情報の話者が店員であると判定された場合、当該音声情報が音声認識部２００２によって注文内容を示すものと認識されても、注文情報を受付けない。

【0049】

また、受付部２００６は、入力部２００１に入力された音声情報が客マイク３から注文内容を示すものである場合、当該注文内容と席Ｎｏとを対応付けた注文情報を注文管理ファイル２１７に仮登録する。そして、受付部２００６は、顧客が注文内容を確認するための情報を表示器４に送信する。顧客の確認の結果、注文情報が確定すると受付部２００６は、注文管理ファイル２１７の注文情報を仮登録から本登録に更新する。すなわち、注文情報に対応する登録フラグを「０」から「１」に書き換える。これにより、受付部２００６は注文情報を受付ける。受付部２００６は、注文情報を受付けると、受付けた注文情報をキッチンディスプレイ６およびキッチンプリンタ７に出力する。これにより、キッチンディスプレイ６は新たに受けた注文の注文情報を表示し、キッチンプリンタ７は当該注文情報にかかる伝票を発行する。

【0050】

注文管理部２００７は、音声認識部２００２が認識した内容に基づいて、受付部２００６が受付けた注文情報のステータスを管理する。具体的には、注文管理部２００７は、入力部２００１に入力されたマイクＮｏと、当該マイクＮｏとともに入力された音声情報の内容とに基づいて注文管理ファイル２１７を更新する。例えば、入力部２００１に調理者マイク５を特定するマイクＮｏとともに入力された音声情報の内容が調理完了を示すものである場合、注文管理部２００７は、注文管理ファイル２１７のステータスの項目に「調理済」を登録する。また、入力部２００１にホール担当者マイク８を特定するマイクＮｏとともに入力された音声情報の内容が商品提供済を示すものである場合、注文管理部２００７は、注文管理ファイル２１７のステータスの項目に「商品提供済」を登録する。そして、注文管理部２００７は、更新された注文情報のステータスをキッチンディスプレイ６に出力して表示させる。

【0051】

次に、注文受付システム１による注文受付および注文管理の動作概要について説明する。図１０は、注文受付システム１の動作の流れを示すシーケンスチャートである。

【0052】

入店して客席に着いた顧客が注文する内容を発声すると、客マイク３には注文入力がなされる（Ｓ１）。客マイク３は、自機のマイクＮｏと入力された音声の音声情報を管理サーバ２に送信する（Ｓ２）。

【0053】

管理サーバ２は、入力された音声情報について音声認識を行い、当該音声情報が示す注文内容を認識する（Ｓ３）。また、管理サーバ２は、入力された音声情報について話者認識を行い、当該音声情報の話者が店員でないことを確認する（Ｓ４）。この話者認識により、例えば、ホール担当者が商品提供時に「カレーライスお待たせしました」などと発声した音声が客マイク３に収音されても、これを注文と認識することを防止できる。このとき、管理サーバ２は注文情報を仮登録する。続いて、管理サーバ２は、入力されたマイクＮｏと対応する表示器４に対して、認識した注文内容を送信する（Ｓ５）。

【0054】

表示器４は、受信した注文内容とメッセージを表示する。表示器４が表示するメッセージは、例えば、「この内容で注文しますか。よろしければ、「はい」と発声してください」などの注文を確定するための用語の発声を促すものである。顧客が表示器４に表示された注文内容を確認して「はい」と発声すると、客マイク３には注文確定入力として「はい」の音声が入力される（Ｓ６）。客マイク３は、マイクＮｏと入力された音声の音声情報とを管理サーバ２に送信する（Ｓ７）。

【0055】

管理サーバ２は、入力された音声情報について音声認識を行い、当該音声情報が示す注文確定内容を認識する（Ｓ８）。また、管理サーバ２は、入力された音声情報について話者認識を行い、当該音声情報の話者が店員でないことを確認する（Ｓ９）。そして、管理サーバ２は、注文内容とマイクＮｏとを対応付けた注文情報の仮登録を本登録に更新することで、注文情報を受付ける（Ｓ１０）。管理サーバ２は、当該注文情報をキッチンディスプレイ６およびキッチンプリンタ７に送信する（Ｓ１１）。

【0056】

キッチンでは、注文内容を確認した調理者が調理を行い、調理者は、調理が完了すると商品名と調理完了を示す用語を含む言葉、例えば、「カレーができあがりました」と発声する。調理完了時に調理者が発生する言葉は、店舗によって予め決めておくことが望ましい。これにより、調理者マイク５に調理完了入力がなされる（Ｓ１２）。調理者マイク５は、自機のマイクＮｏと音声情報を管理サーバ２に送信する（Ｓ１３）。

【0057】

管理サーバ２は、入力された音声情報について音声認識を行い、当該音声情報が示す商品名と調理完了とを認識する（Ｓ１４）。調理者マイク５は顧客の音声を収音することはないので、管理サーバ２は、入力された音声情報が店員の音声であるか否かの話者認識は行う必要がない。管理サーバ２は、該当する商品の注文情報のステータスを「調理完了」に更新し（Ｓ１５）、調理が完了した旨の情報を店内に別途設けられた表示器やホール担当者のヘッドセットが備えるスピーカに出力する（Ｓ１６）。これにより、ホール担当者は、商品の調理が完了したことを認識することができる。

【0058】

できあがった商品を顧客に提供すると、ホール担当者は、商品名と商品提供済を示す用語を含む言葉、例えば、「カレーライスお待たせしました」と発声する。商品提供時にホール担当者が発生する言葉は、店舗によって予め決めておくことが望ましい。これにより、ホール担当者マイク８に商品提供済入力がなされる（Ｓ１７）。ホール担当者マイク８は、自機のマイクＮｏと音声情報を管理サーバ２に送信する（Ｓ１８）。

【0059】

管理サーバ２は、入力された音声情報について音声認識を行い、当該音声情報が示す商品名と商品提供済とを認識する（Ｓ１９）。ホール担当者マイク８も顧客の音声を収音することはないので、管理サーバ２は、入力された音声情報が店員の音声であるか否かの話者認識は行う必要がない。管理サーバ２は、該当する商品の注文情報のステータスを「商品提供済」に更新する（Ｓ２０）。

【0060】

以上により、管理サーバ２は、音声により顧客の注文情報を受付けるとともに、受付けた注文情報を音声により管理することができる。

【0061】

次に、管理サーバ２で実行される注文受付処理について説明する。図１１は、制御部２０による注文受付処理の流れを示すフローチャートである。

【0062】

まず、制御部２０は、入力部２００１に音声情報が入力されたか判断し（Ｓ３１）、入力されなければ（Ｓ３１のＮ）、Ｓ３１の処理に戻って待機する。音声情報が入力されると（Ｓ３１のＹ）、制御部２０は、音声情報とともに入力されたマイクＮｏに基づいて、当該音声情報が客マイク３から入力されたものか否か判断する（Ｓ３２）。

【0063】

入力部２００１に入力された音声情報が客マイク３から入力されたものである場合（Ｓ３２のＹ）、判定部２００５は、入力部２００１に入力された音声情報の音声が店員の音声か否か判定する（Ｓ３３）。店員の音声でなければ（Ｓ３３のＹ）、音声認識部２００２は、音声情報が注文内容を示すものであるか否か判断する（Ｓ３４）。

【0064】

音声認識部２００２が認識した内容が注文内容を示すものである場合（Ｓ３４のＹ）、受付部２００６は、マイクＮｏと注文内容とを対応付けた注文情報を注文管理ファイル２１７に仮登録し（Ｓ３５）、表示器４に顧客が注文を確認するための情報を送信する（Ｓ３５）。そして、制御部２０は、Ｓ３１の処理に戻る。

【0065】

Ｓ３２の処理において、入力部２００１に入力された音声情報が客マイク３からのものでない場合（Ｓ３２のＮ）、制御部２０は、注文受付処理を終了する。同様に、Ｓ３３の処理において、客マイク３が収音した音声が店員の音声である場合（Ｓ３３のＮ）、制御部２０は、注文受付処理を終了する。

【0066】

また、Ｓ３４の処理において、音声認識部２００２が認識した内容が注文内容を示すものでない場合（Ｓ３４のＮ）、音声認識部２００２は、音声情報から認識した内容が注文確認入力であるか否か判断する（Ｓ３７）。注文確認入力であれば（Ｓ３７のＹ）、受付部２００６は、仮登録されている注文情報を本登録し（Ｓ３８）、本登録した注文情報をキッチンディスプレイ６およびキッチンプリンタ７に送信する（Ｓ３９）。そして、制御部２０は、注文受付処理を終了する。なお、Ｓ３７の処理において、音声認識部２００２が注文確認入力でないと判断すると（Ｓ３７のＮ）、制御部２０は注文受付処理を終了する。

【0067】

続いて、管理サーバ２で実行されるステータス更新処理について説明する。図１２は、制御部２０によるステータス更新処理の流れを示すフローチャートである。

【0068】

まず、制御部２０は、入力部２００１に音声情報が入力されたか判断し（Ｓ４１）、入力されなければ（Ｓ４１のＮ）、Ｓ４１の処理に戻って待機する。音声情報が入力されると（Ｓ４１のＹ）、制御部２０は、音声情報とともに入力されたマイクＮｏに基づいて、当該音声情報が調理者マイク５から入力されたものか否か判断する（Ｓ４２）。

【0069】

入力部２００１に入力された音声情報が調理者マイク５から入力されたものである場合（Ｓ４２のＹ）、音声認識部２００２は、音声情報が商品名と調理完了を示すものであるか否か判断する（Ｓ４３）。音声認識部２００２が認識した内容が商品名とその調理完了を示すものである場合（Ｓ４３のＹ）、注文管理部２００７は、当該商品名に対応するステータスの項目に「調理完了」を登録して注文管理ファイル２１７を更新する（Ｓ４４）。注文管理ファイル２１７に同じ商品が複数登録されている場合、注文管理部２００７は、最も早く登録された注文のステータスを更新する。なお、調理者が商品名に加えて注文Ｎｏを発声し、管理サーバ２が当該注文Ｎｏを認識するようにすることで、ステータスを更新する注文情報を特定するようにしてもよい。

【0070】

続いて、注文管理部２００７は、調理が完了した旨の情報を店内に別途設けられた表示器やホール担当者のヘッドセットが備えるスピーカに出力してホール担当者に通知する（Ｓ４５）。そして、制御部２０は、ステータス更新処理を終了する。なお、Ｓ４３の処理において、音声認識部２００２が認識した内容が商品名とその調理完了を示すものでない場合（Ｓ４３のＮ）、制御部２０はＳ４４およびＳ４５の処理をスキップして、ステータス更新処理を終了する。

【0071】

Ｓ４２の処理において、入力部２００１に入力された音声情報が調理者マイク５からのものでない場合（Ｓ４２のＮ）、制御部２０は、当該音声情報がホール担当者マイク８から入力されたものか否か判断する（Ｓ４６）。

【0072】

入力部２００１に入力された音声情報がホール担当者マイク８から入力されたものである場合（Ｓ４６のＹ）、音声認識部２００２は、音声情報が商品名と商品提供済を示すものであるか否か判断する（Ｓ４７）。音声認識部２００２が認識した内容が商品名と商品提供済を示すものである場合（Ｓ４７のＹ）、注文管理部２００７は、当該商品名に対応するステータスの項目に「商品提供済了」を登録して注文管理ファイル２１７を更新する（Ｓ４８）。そして、制御部２０は、ステータス更新処理を終了する。

【0073】

なお、Ｓ４６の処理において、入力部２００１に入力された音声情報がホール担当者マイク８からのものでない場合（Ｓ４６のＮ）、制御部２０は、ステータス更新処理を終了する。同様に、Ｓ４７の処理において、音声認識部２００２が認識した内容が商品提供済を示すものでない場合（Ｓ４７のＮ）、制御部２０はステータス更新処理を終了する。

【0074】

以上のとおり、第１の実施形態の管理サーバ２は、入力部２００１にマイクＮｏと対応付けた音声情報が入力されると、マイクＮｏに基づいてどの客マイク３からの音声情報か判断する。また、管理サーバ２は、話者認識により、客マイク３から入力された音声情報が店員の音声情報でないことを判定する。さらに、管理サーバ２は、音声認識により、入力された音声情報から注文内容を認識する。これにより、管理サーバ２は、音声により顧客から確実に注文を受付けることができる。

【0075】

また、第１の実施形態の管理サーバ２は、入力部２００１にマイクＮｏと対応付けた音声情報が入力されると、マイクＮｏに基づいてどの店員のマイクからの音声情報か判断する。また、管理サーバ２は、音声認識により、入力された音声情報からステータスを更新するための内容を認識する。これにより、管理サーバ２は、音声により注文情報を管理することができる。

【0076】

（第２の実施形態）
次に、第２の実施形態について説明する。第２の実施形態は、客マイク３で収音される音声の顧客を話者認識によって特定することで、マイクの数を削減することができるようにした点において、第１の実施形態と異なる。以下、第１の実施形態と同様の構成、機能については、説明を省略あるいは簡略化する場合がある。以下の説明が不必要に冗長になることを避け、当業者の理解を容易にするためである。

【0077】

本実施形態においては、客マイク３は、客席に対応して設けられておらず、複数の客席の顧客の音声を収音するようになっている。。また、ホール担当者マイク８は設けられておらず、客マイク３がホール担当者の音声も収音するようになっている。

【0078】

図１３は、本実施形態の管理サーバ２のハードウェア構成を示す図である。管理サーバ２のメモリ部２１には、第１の実施形態のものに加えて顧客特性管理ファイル２１８が記憶されている。

【0079】

顧客特性管理ファイル２１８は、顧客ごとに音声情報の特性データを管理するファイルである。顧客特性管理ファイル２１８は、客マイク３が収音した音声の話者を認識する際に活用される。図１４は、顧客特性管理ファイル２１８のデータ構成を示す図である。顧客特性管理ファイル２１８は、席Ｎｏおよび特徴データを示す各情報が対応づけられている。顧客特性管理ファイル２１８は、特性抽出部２００３が抽出した特性データと席情報とを対応付けた顧客特性情報記憶部の一例である。

【0080】

席Ｎｏの項目には、客席の番号を示す席Ｎｏが登録される。特性データの項目には、音声情報の特性データを示す情報が登録される。これらの項目に登録される情報は以下のようにして登録される。顧客は、入店して客席に着席すると、表示器４の表示にしたがい自己が着席した客席を特定する席Ｎｏを発声する。表示器４には、例えば「お座りの席Ｎｏを発声ください」等の表示がなされている。客マイク３は、顧客が発生した音声情報を管理サーバ２に送信する。管理サーバ２は、音声認識部２００２が席Ｎｏを認識するとともに特性抽出部２００３が音声情報から特性データを抽出する。管理サーバ２は、これら席Ｎｏと特性データとを対応付けて顧客特性管理ファイル２１８に登録する。

【0081】

続いて、管理サーバ２の制御部２０の機能構成について説明する。図１５は、管理サーバ２の制御部２０の主要な機能構成を示すブロック図である。制御部２０は、ＣＰＵ２０１がＲＯＭ２０２やメモリ部２１に記憶された制御プログラムにしたがって動作することで、入力部２００１、音声認識部２００２、特性抽出部２００３、話者特定部２００４、受付部２００６、注文管理部２００７、および登録部２００８として機能する。なお、これら各機能を専用回路等のハードウェアで構成してもよい。

【0082】

入力部２００１には、音声情報が入力される。具体的には、客マイク３で収音された音声の音声情報が入力される。客マイク３は、ホールに設けられたマイクであり、複数の顧客とホール担当者の音声を収音する共通のマイクとして機能する。また、入力部２００１には、調理者マイク５で収音された音声の音声情報と当該調理者マイク５のマイクＮｏとが対応づけられた情報が入力される。

【0083】

音声認識部２００２、特性抽出部２００３、および注文管理部２００７の機能は、第１の実施形態と同様であるので、重複する説明は省略する。

【0084】

話者特定部２００４は、入力部２００１に入力された音声情報から特性抽出部２００３が抽出した特性データと、店員特性管理ファイル２１６や顧客特性管理ファイル２１８に登録された特性データとを比較して、入力部２００１に入力された音声情報の話者を特定する。

【0085】

受付部２００６は、音声認識部２００２が認識した内容に注文内容が含まれている場合、顧客特性情報において特性抽出部２００３が抽出した特性データに対応する席情報と、当該注文内容とを対応付けた注文情報を受付ける。具体的には、受付部２００６は、音声認識部２００２によって音声情報を認識した内容に注文内容が含まれている場合、顧客特性管理ファイル２１８を参照して、当該音声情報の特性データに対応する席Ｎｏを抽出する。そして、受付部２００６は、音声認識部２００２が認識した注文内容と抽出した席Ｎｏとを対応付けた注文情報を受付ける。

【0086】

登録部２００８は、音声認識部２００２が認識した内容に店舗の客席を識別する席情報が含まれている場合、特性抽出部２００３が抽出した特性データと当該席情報とを対応付けた顧客特性情報を登録する。具体的には、登録部２００８は、入力部２００１に入力された音声情報が示す内容に席Ｎｏが含まれている場合、当該音声情報を特性データ抽出用の音声情報であると判断して、特性抽出部２００３が抽出した当該音声情報の特性データを席Ｎｏと対応付けて顧客特性管理ファイル２１８に登録（記憶）する。

【0087】

次に、注文受付システム１による注文受付および注文管理の動作概要について説明する。図１６は、注文受付システム１の動作の流れを示すシーケンスチャートである。

【0088】

顧客は、入店して客席に着くと表示器４に表示された案内にしたがって着席した客席の席Ｎｏを発声する。これにより、客マイク３には席Ｎｏを含む音声が入力される（Ｓ５１）。客マイク３は、入力された音声の音声情報を管理サーバ２に送信する（Ｓ５２）。

【0089】

管理サーバ２は、入力された音声情報について音声認識を行い、認識した内容に席Ｎｏが含まれていれば席Ｎｏの抽出を行う（Ｓ５３）。次いで、管理サーバ２は入力された音声情報から特性データを抽出し（Ｓ５４）、抽出した特性データと席Ｎｏとを対応付けして顧客特性管理ファイル２１８に登録する（Ｓ５５）。これにより、顧客が着席した客席の席Ｎｏと顧客の音声の特徴が対応づけられる。

【0090】

その後、顧客が注文内容を発声すると、客マイク３には注文内容を含む音声が入力される（Ｓ５６）。客マイク３は入力された音声の音声情報を管理サーバ２に送信する（Ｓ５７）。

【0091】

管理サーバ２は、入力された音声情報について音声認識を行い、当該音声情報が示す内容を認識し（Ｓ５８）、認識した内容に注文内容が含まれていると話者認識を行う（Ｓ５９）。詳細には、管理サーバ２は、入力された音声情報から特性データを抽出し、顧客特性管理ファイル２１８を参照して対応する席Ｎｏを特定する。続いて、管理サーバ２は、特定した席Ｎｏと対応する表示器４に対して、認識した注文内容を送信する（Ｓ６０）。このとき、管理サーバ２は注文内容と席Ｎｏとを対応付けた注文情報を仮登録する。

【0092】

客マイク３に注文確定入力を示す音声が入力されると（Ｓ６１）、客マイク３は、入力された音声の音声情報を管理サーバ２に送信する（Ｓ６２）。

【0093】

管理サーバ２は、入力された音声情報について音声認識を行い、当該音声情報が示す注文確定内容を認識する（Ｓ６３）。また、管理サーバ２は、入力された音声情報について話者認識を行い、当該音声情報の話者が顧客特性管理ファイル２１８に登録された顧客であることを確認する（Ｓ６４）。そして、管理サーバ２は、顧客特性管理ファイル２１８を参照して、認識した注文内容と席Ｎｏを対応付けた仮登録を本登録に更新することによって注文情報を受付ける。（Ｓ６５）。管理サーバ２は、登録した注文情報をキッチンディスプレイ６およびキッチンプリンタ７に送信する（Ｓ６６）。

【0094】

キッチンでは、注文内容を確認した調理者が調理を行い、調理者は、調理が完了すると商品名と調理完了を示す用語を含む言葉を発声する。これにより、調理者マイク５に調理完了入力がなされる（Ｓ６７）。調理者マイク５は、自機のマイクＮｏと音声情報を管理サーバ２に送信する（Ｓ６８）。

【0095】

管理サーバ２は、入力された音声情報について音声認識を行い、当該音声情報が示す商品名と調理完了とを認識する（Ｓ６９）。管理サーバ２は、該当する商品の注文情報のステータスを「調理完了」に更新し（Ｓ７０）、調理が完了した旨の情報を店内に別途設けられた表示器などに出力する（Ｓ７１）。これにより、ホール担当者は、商品の調理が完了したことを認識することができる。

【0096】

できあがった商品を客席で顧客に提供すると、ホール担当者は、商品名と商品提供済を示す用語を含む言葉を発声する。これにより、客マイク３に商品提供済入力がなされる（Ｓ７２）。客マイク３は、音声情報を管理サーバ２に送信する（Ｓ７３）。

【0097】

管理サーバ２は、入力された音声情報について音声認識を行い、当該音声情報が示す商品名と商品提供済とを認識する（Ｓ７４）。また、管理サーバ２は、入力された音声情報について話者認識を行い、当該音声情報の話者が店員特性管理ファイル２１６に登録された店員（ホール担当者）であることを確認する（Ｓ７５）。管理サーバ２は、該当する商品の注文情報のステータスを「商品提供済」に更新する（Ｓ７６）。

【0098】

以上により、管理サーバ２は、各客席に対応したマイクを設けることなく、また、ホール担当者マイク８を設けることなく、音声により顧客の注文情報を受付けるとともに、受けた注文情報を音声により管理することができる。

【0099】

次に、管理サーバ２で実行される注文受付処理について説明する。図１７は、制御部２０による注文受付処理の流れを示すフローチャートである。

【0100】

まず、制御部２０は、入力部２００１に音声情報が入力されたか判断し（Ｓ８１）、入力されなければ（Ｓ８１のＮ）、Ｓ８１の処理に戻って待機する。音声情報が入力されると（Ｓ８１のＹ）、音声認識部２００２は、音声情報の内容に席Ｎｏが含まれているか否か判断する（Ｓ８２）。

【0101】

音声情報の内容に席Ｎｏが含まれていると（Ｓ８２のＹ）、特性抽出部２００３は、入力部２００１に入力された音声情報の特性データを抽出する（Ｓ８３）。次いで、受付部２００６は、音声認識部２００２が認識した席Ｎｏと特性抽出部２００３が抽出した特性データとを対応付けして顧客特性管理ファイル２１８に登録する（Ｓ８４）。そして、制御部２０はＳ８１の処理に戻る。

【0102】

Ｓ８２の処理において、音声情報の内容に席Ｎｏが含まれていないと（Ｓ８２のＮ）、音声認識部２００２は、当該音声情報の内容が注文内容を示すものであるか否か判断する（Ｓ８５）。注文内容であると（Ｓ８５のＹ）、特性抽出部２００３は、音声情報の特性データを抽出する（Ｓ８６）。制御部２０は、抽出された特性データが顧客特性管理ファイル２１８に登録されているか否か判断する（Ｓ８７）。登録されていれば（Ｓ８７のＹ）、受付部２００６は、特性データに対応付けられている席Ｎｏと注文内容とを対応付けた注文情報を注文管理ファイル２１７に仮登録し（Ｓ８８）、顧客が注文を確認するための情報を表示器４に送信する（Ｓ８９）。そして、制御部２０は、Ｓ８１の処理に戻る。

【0103】

なお、Ｓ８７の処理において、抽出された特性データが顧客特性管理ファイル２１８に登録されていない場合（Ｓ８７のＮ）、制御部２０は、顧客に対して席Ｎｏの発声からやり直すことを促すエラー表示を表示器４に表示させ（Ｓ９０）、注文受付処理を終了する。

【0104】

また、Ｓ８５の処理において、音声情報の内容が注文内容を示すものでない場合（Ｓ８５のＮ）、音声認識部２００２は、当該音声情報の内容が注文確認入力であるか否か判断する（Ｓ９１）。注文確認入力であると（Ｓ９１のＹ）、特性抽出部２００３は、音声情報の特性データを抽出する（Ｓ９２）。制御部２０は、抽出された特性データが顧客特性管理ファイル２１８に登録されているか否か判断する（Ｓ９３）。登録されていれば（Ｓ９３のＹ）、受付部２００６は、特性データに対応付けられている席Ｎｏをキーとして注文管理ファイル２１７を検索し、注文当該席Ｎｏを含む注文情報を本登録し（Ｓ９４）、本登録した注文情報をキッチンディスプレイ６およびキッチンプリンタ７に送信する（Ｓ９５）。そして、制御部２０は、注文受付処理を終了する。

【0105】

なお、Ｓ９１の処理において、音声認識部２００２が注文確認入力でないと判断すると（Ｓ９１のＮ）、制御部２０は注文受付処理を終了する。また、Ｓ９３の処理において、抽出された特性データが顧客特性管理ファイル２１８に登録されていない場合（Ｓ９３のＮ）、制御部２０は、Ｓ９０の処理に移行する。

【0106】

続いて、管理サーバ２で実行されるステータス更新処理について説明する。図１８は、制御部２０によるステータス更新処理の流れを示すフローチャートである。

【0107】

まず、制御部２０は、入力部２００１に音声情報が入力されたか否か判断し（Ｓ１０１）、入力されなければ（Ｓ１０１のＮ）、Ｓ１０１の処理に戻って待機する。音声情報が入力されると（Ｓ１０１のＹ）、特性抽出部２００３は、入力された音声情報の特性データを抽出する（Ｓ１０２）。制御部２０は、店員特性管理ファイル２１６を参照して、特性抽出部２００３が抽出した特性データに対応する店員ＩＤで識別される店員が調理者か否か判断する（Ｓ１０３）。

【0108】

入力部２００１に入力された音声情報が調理者のものである場合（Ｓ１０３のＹ）、音声認識部２００２は、音声情報が商品名と調理完了を示すものであるか否か判断する（Ｓ１０４）。音声認識部２００２が認識した内容が商品名とその調理完了を示すものである場合（Ｓ１０４のＹ）、注文管理部２００７は、当該商品名に対応するステータスの項目に「調理完了」を登録して注文管理ファイル２１７を更新する（Ｓ１０５）。

【0109】

続いて、注文管理部２００７は、調理が完了した旨の情報を店内に別途設けられた表示器などに出力してホール担当者に通知する（Ｓ１０６）。そして、制御部２０は、ステータス更新処理を終了する。なお、Ｓ１０４の処理において、音声認識部２００２が認識した内容が商品名とその調理完了を示すものでない場合（Ｓ１０４のＮ）、制御部２０はＳ１０５およびＳ１０６の処理をスキップして、ステータス更新処理を終了する。

【0110】

Ｓ１０３の処理において、入力部２００１に入力された音声情報が調理者のものでない場合（Ｓ１０３のＮ）、制御部２０は、店員特性管理ファイル２１６を参照して、特性抽出部２００３が抽出した特性データに対応する店員ＩＤで識別される店員がホール担当者か否か判断する（Ｓ１０７）。

【0111】

入力部２００１に入力された音声情報がホール担当者のものである場合（Ｓ１０７のＹ）、音声認識部２００２は、音声情報が商品名と商品提供済を示すものであるか否か判断する（Ｓ１０８）。音声認識部２００２が認識した内容が商品名と商品提供済を示すものである場合（Ｓ１０８のＹ）、注文管理部２００７は、当該商品名に対応するステータスの項目に「商品提供済了」を登録して注文管理ファイル２１７を更新する（Ｓ１０９）。そして、制御部２０は、ステータス更新処理を終了する。

【0112】

なお、Ｓ１０７の処理において、入力部２００１に入力された音声情報がホール担当者のものでない場合（Ｓ１０７のＮ）、制御部２０は、ステータス更新処理を終了する。同様に、Ｓ１０８の処理において、音声認識部２００２が認識した内容が商品提供済を示すものでない場合（Ｓ１０８のＮ）、制御部２０はステータス更新処理を終了する。

【0113】

以上のとおり、第２の実施形態の管理サーバ２は、入力部２００１に入力された音声情報の内容が席Ｎｏを含むものであると、当該音声情報の特性データと当該席Ｎｏとを対応付けて顧客特性管理ファイル２１８に登録する。そして、管理サーバ２は、話者認識により、入力された音声情報がどの席Ｎｏの顧客なのかを認識する。また、管理サーバ２は、音声認識により、入力された音声情報から注文内容を認識する。これにより、管理サーバ２は、音声により顧客から確実に注文を受付けることができるばかりでなく、音声を収音するマイク数を減らすことができる。

【0114】

また、第２の実施形態の管理サーバ２は、話者認識により、入力部２００１に入力された音声情報がどの店員のものか判断する。そして、管理サーバ２は、音声認識により、入力された音声情報からステータスを更新するための内容を認識する。これにより、管理サーバ２は、音声により注文情報を管理することができる。

【0115】

以上説明したとおり、上記実施形態の注文受付装置は、店舗の客席を識別する席情報と対応付けられた音声情報が入力される入力部２００１と、入力部２００１に入力された音声情報が示す内容を認識する音声認識部２００２と、入力部２００１に入力された音声情報の特性を示す特性データを抽出する特性抽出部２００３と、特性抽出部２００３が抽出した特性データ、および、店員を識別する店員識別情報と音声情報の特性データとを対応付けて記憶する店員特性情報（店員特性管理ファイル２１６）に基づいて、入力部２００１に入力された音声情報の話者が店員であるか否かを判定する判定部２００５と、判定部２００５によって音声情報の話者が店員でないと判定されたことを条件として、音声認識部２００２が認識した注文内容と前記席情報とを対応付けた注文情報を受け付ける受付部２００６と、を備える。

【0116】

これにより、注文受付装置は、複数の顧客が存在する店舗内であっても、顧客の音声による注文を確実に受付けることができる。したがって、顧客は注文入力装置等の操作を要することなく、容易に商品を注文することができる。

【0117】

また、上記実施形態の注文受付装置は、音声情報が入力される入力部２００１と、入力部２００１に入力された音声情報が示す内容を認識する音声認識部２００２と、入力部２００１に入力された音声情報の特性を示す特性データを抽出する特性抽出部２００３と、音声認識部２００２が認識した内容に店舗の客席を識別する席情報が含まれている場合、特性抽出部２００３が抽出した特性データと当該席情報とを対応付けた顧客特性情報（顧客特性管理ファイル２１８）を登録する登録部２００８と、音声認識部２００２が認識した内容に注文内容が含まれている場合、前記顧客特性情報において特性抽出部２００３が抽出した特性データに対応する席情報と当該注文内容とを対応付けた注文情報を受付ける受付部２００６と、を備える。

【0118】

これにより、注文受付装置は、複数の顧客が存在する店舗内であっても、顧客の音声による注文を確実に受付けることができるばかりでなく、顧客や店員の音声を収音するマイクの数を少なくすることができる。したがって、顧客は容易に商品を注文することができ、また、店舗は設備に要する負担を低減することができる。

【0119】

さらに、上記実施形態の注文受付装置は、音声認識部２００２が認識した内容に基づいて、受付部２００６が受付けた注文情報のステータスを管理する注文管理部２００７をさらに備える。

【0120】

これにより、注文受付装置は、音声により注文情報のステータス管理も行うことができる。したがって、注文情報のステータス管理を容易に行うことができる。

【0121】

加えて、上記実施形態の注文受付装置は、入力部２００１に入力された音声情報の話者を特定する話者特定部２００４をさらに備え、注文管理部２００７は、話者特定部２００４による話者の特定結果と音声認識部２００２の認識内容とに基づいて、前記注文情報のステータスを管理する。

【0122】

これにより、注文受付装置は、音声による注文情報のステータス管理をより正確に行うことができる。

【0123】

また、上記実施形態の注文受付装置の話者特定部２００４は、店員を識別する店員識別情報と特性抽出部２００３が抽出した特性データとを対応付けた店員特性情報に基づいて、入力部２００１に入力された音声情報の話者である店員を特定する。

【0124】

これにより、注文受付装置は、音声により注文情報のステータス管理を行うにあたって、店員の音声を収音するマイクの数を少なくすることができる。したがって、店舗は設備に要する負担を低減することができる。

【0125】

なお、上記各実施形態において、管理サーバ２で実行される制御プログラムは、ＣＤ－ＲＯＭ等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。また、上記各実施形態の管理サーバ２で実行される制御プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良く、さらには、インターネット等のネットワーク経由で提供するように構成しても良い。

【0126】

以上、本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。

【符号の説明】

【0127】

１ 注文受付システム
２ 管理サーバ（注文受付装置）
３ 客マイク（客用収音部）
２１６ 店員特性管理ファイル（店員特性情報記憶部）
２１８ 顧客特性管理ファイル（顧客特性情報記憶部）
２００１ 入力部
２００２ 音声認識部
２００３ 特性抽出部
２００４ 話者特定部
２００５ 判定部
２００６ 受付部
２００７ 注文管理部

【先行技術文献】

【特許文献】

【0128】

【特許文献1】特開２０１６-２１１９６号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】