特許 7566476 情報処理装置、情報処理システム及びその制御プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-10-04

(45)【発行日】2024-10-15

(54)【発明の名称】情報処理装置、情報処理システム及びその制御プログラム

(51)【国際特許分類】

   G06Q 50/12 20120101AFI20241007BHJP

   G07G 1/12 20060101ALI20241007BHJP

   G10L 15/00 20130101ALI20241007BHJP

   G10L 13/00 20060101ALI20241007BHJP

   G06F 16/90 20190101ALI20241007BHJP

【ＦＩ】

G06Q50/12

G07G1/12 361C

G10L15/00 200T

G10L13/00 100M

G06F16/90 100

【請求項の数】 5

(21)【出願番号】P 2020046336

(22)【出願日】2020-03-17

(65)【公開番号】P2021149267

(43)【公開日】2021-09-27

【審査請求日】2023-02-17

(73)【特許権者】

【識別番号】000003562

【氏名又は名称】東芝テック株式会社

(74)【代理人】

【識別番号】110003708

【氏名又は名称】弁理士法人鈴榮特許綜合事務所

(74)【代理人】

【識別番号】100108855

【弁理士】

【氏名又は名称】蔵田 昌俊

(74)【代理人】

【識別番号】100103034

【弁理士】

【氏名又は名称】野河 信久

(74)【代理人】

【識別番号】100179062

【弁理士】

【氏名又は名称】井上 正

(74)【代理人】

【識別番号】100075672

【弁理士】

【氏名又は名称】峰 隆司

(74)【代理人】

【識別番号】100153051

【弁理士】

【氏名又は名称】河野 直樹

(74)【代理人】

【識別番号】100162570

【弁理士】

【氏名又は名称】金子 早苗

(72)【発明者】

【氏名】綿田 将悟

(72)【発明者】

【氏名】関根 直樹

【審査官】樋口 龍弥

(56)【参考文献】

【文献】特開２０１８－０９２５８５（ＪＰ，Ａ）

【文献】特開２０１５－２３０５１４（ＪＰ，Ａ）

【文献】特開２００７－００４２８２（ＪＰ，Ａ）

【文献】特開２０１２－１５５３７４（ＪＰ，Ａ）

【文献】国際公開第２０１８／１７４２８７（ＷＯ，Ａ１）

【文献】特開２００１－３１９２７５（ＪＰ，Ａ）

【文献】特開２０１８－１０６５２４（ＪＰ，Ａ）

【文献】特開２０１８－０１８１３６（ＪＰ，Ａ）

【文献】特開２０１８－１４２１６０（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００ － ９９／００

Ｇ０７Ｇ １／１２

Ｇ１０Ｌ １５／００

Ｇ１０Ｌ １３／００

Ｇ０６Ｆ １６／９０

(57)【特許請求の範囲】

【請求項1】

ユーザの音声データを取得する取得部と、
前記音声データを解析する解析部と、
前記解析部による解析結果に基づいて店舗で提供される１以上のメニュー品目を検索する検索条件を生成する第１の生成部と、
注文済メニュー品目を検索したときのキーワードを加味し、前記検索条件を満たす１以上のメニュー品目を検索する検索部と、
前記検索部による検索結果に基づいて前記ユーザへの応答データを生成する第２の生成部と、
を備える情報処理装置。

【請求項2】

前記第２の生成部は、前記検索条件に含まれていないカテゴリに基づいて前記ユーザへの応答データを生成する、請求項１記載の情報処理装置。

【請求項3】

前記検索部は、前記検索条件を満たす１以上のメニュー品目を優先度順に検索し、
前記第２の生成部は、前記検索条件を満たす１以上のメニュー品目の中で最も優先度の高いメニュー品目についての応答データを生成する、請求項１記載の情報処理装置。

【請求項4】

ユーザの音声データを取得する取得部、
前記音声データを解析する解析部、
前記解析部による解析結果に基づいて店舗で提供される１以上のメニュー品目を検索する検索条件を生成する第１の生成部、
注文済メニュー品目を検索したときのキーワードを加味し、前記検索条件を満たす１以上のメニュー品目を検索する検索部、及び、
前記検索部による検索結果に基づいて前記ユーザへの応答データを生成する第２の生成部、
を備える第１の情報処理装置と、
前記第１の情報処理装置に前記ユーザの前記音声データを送信する送信部、及び、
前記第２の生成部で生成された前記応答データを音声として出力する出力部、
を備える第２の情報処理装置と、
を備える情報処理システム。

【請求項5】

情報処理装置のコンピュータを、
ユーザの音声データを取得する取得部、
前記音声データを解析する解析部、
前記解析部による解析結果に基づいて店舗で提供される１以上のメニュー品目を検索する検索条件を生成する第１の生成部、
注文済メニュー品目を検索したときのキーワードを加味し、前記検索条件を満たす１以上のメニュー品目を検索する検索部、及び、
前記検索部による検索結果に基づいて前記ユーザへの応答データを生成する第２の生成部、
として機能させるための制御プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、情報処理装置、情報処理システム及びその制御プログラムに関する。

【背景技術】

【0002】

近年、飲食店において、客自身で注文可能な情報処理端末、いわゆるセルフオーダー端末の導入が普及している。例えば客がセルフオーダー端末に備えられたマイクに向かってキーワードを発すると、そのキーワードに関連付けられたメニュー品目を検索することができるというものである。しかしながら、飲食したいものが決まっていない場合、客は明確なキーワードを発することができない。したがって、客の希望に合ったメニュー品目を検索し、提案することは困難である。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１９－１０６１５４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

本発明の実施形態が解決しようとする課題は、音声による対話形式で希望に合ったメニュー品目を検索できる情報処理装置、情報処理システム及びその制御プログラムを提供しようとするものである。

【課題を解決するための手段】

【0005】

一実施形態において、情報処理装置は、取得部と、解析部と、第１の生成部と、検索部と、第２の生成部と、を備える。取得部は、ユーザの音声データを取得する。解析部は、音声データを解析する。第１の生成部は、解析部による解析結果に基づいて１以上の対象を検索する検索条件を生成する。検索部は、検索条件を満たす１以上の対象を検索する。第２の生成部は、検索部による検索結果に基づいてユーザへの応答データを生成する。

【図面の簡単な説明】

【0006】

【図1】一実施形態に係る情報処理システムの概略構成を示す模式図。

【図2】セルフオーダー端末の要部回路構成を示すブロック図。

【図3】メニューデータベースの一例を示す模式図。

【図4】音声対話サーバの要部回路構成を示すブロック図。

【図5】メニューデータベースの一例を示す模式図。

【図6】検索スロットデータベースの一例を示す模式図。

【図7】音声対話サーバにおけるプロセッサの要部制御手順を示す流れ図。

【図8】音声対話サーバにおけるプロセッサの要部制御手順を示す流れ図。

【図9】音声対話サーバにおけるプロセッサの要部制御手順を示す流れ図。

【図10】セルフオーダー端末において表示されるメニュー品目画面の一例を示す模式図。

【図11】セルフオーダー端末において表示される検索条件追加後のメニュー品目画面の一例を示す模式図。

【図12】セルフオーダー端末において表示される検索結果が１件であるメニュー品目画面の一例を示す模式図。

【図13】セルフオーダー端末において表示される追加注文時のメニュー品目画面の一例を示す模式図。

【発明を実施するための形態】

【0007】

以下、一実施形態について、図面を用いて説明する。
図１は、一実施形態に係る情報処理システム１の概略構成を示す模式図である。
情報処理システム１は、セルフオーダー端末２、店員端末３、音声対話サーバ４、オーダーステーションサーバ５、キッチンプリンタ６、ＰＯＳ端末７及びアクセスポイント８を含む。音声対話サーバ４、オーダーステーションサーバ５、キッチンプリンタ６、ＰＯＳ端末７及びアクセスポイント８は、ＬＡＮ（Local Area Network）等のネットワーク９に接続されている。アクセスポイント８は、ネットワーク９に繋がる各機器、すなわち音声対話サーバ４、オーダーステーションサーバ５、キッチンプリンタ６及びＰＯＳ端末７と、セルフオーダー端末２及び店員端末３との通信を中継する。アクセスポイント８は、図１では１台のみ示しているが、店舗の規模等により２台以上あってもよい。

【0008】

セルフオーダー端末２は、店舗内の各テーブルに設置される。セルフオーダー端末２は、客であるユーザがテーブルに着席した状態で店員を介さずに注文する機器である。店員端末３は、店舗内にいる店員が携帯する。店員端末３は、店員による業務を支援する機器である。

【0009】

音声対話サーバ４は、音声認識処理と対話制御処理を支援する機器である。音声認識処理は、主にセルフオーダー端末２に入力された音声をテキストデータに変換する処理である。対話制御処理は、主にそのテキストデータを解析し、制御する処理である。オーダーステーションサーバ５は、注文処理を支援する機器である。

【0010】

キッチンプリンタ６は、厨房内に設置される。キッチンプリンタ６は、ユーザから注文を受けたメニュー品目に係る情報が表示された注文票を出力する機器である。ＰＯＳ端末７は、注文済メニュー品目の決済を店員若しくはユーザが行うことを可能とした機器である。ＰＯＳ端末７の台数は、特に制限されない。決済方法は、特に限定されるものではない。例えば現金支払い、クレジットカード支払い、電子マネー支払い等であってもよい。また、複数の決済方法に対応したものであってもよい。

【0011】

図２は、セルフオーダー端末２の要部回路構成を示すブロック図である。セルフオーダー端末２は、プロセッサ２１、メインメモリ２２、補助記憶デバイス２３、無線ユニット２４、入力デバイス２５、表示デバイス２６、読取デバイス２７、出力デバイス２８及びシステム伝送路２９を備える。システム伝送路２９は、アドレスバス、データバス、制御信号線等を含む。セルフオーダー端末２は、システム伝送路２９に、プロセッサ２１、メインメモリ２２、補助記憶デバイス２３、無線ユニット２４、入力デバイス２５、表示デバイス２６、読取デバイス２７及び出力デバイス２８を接続する。セルフオーダー端末２では、プロセッサ２１、メインメモリ２２及び補助記憶デバイス２３と、これらを接続するシステム伝送路２９とによってコンピュータが構成される。

【0012】

プロセッサ２１は、上記コンピュータの中枢部分に相当する。プロセッサ２１は、オペレーティングシステム又はアプリケーションプログラムに従って、セルフオーダー端末２としての各種の機能を実現するべく各部を制御する。プロセッサ２１は、例えばＣＰＵ（Central Processing Unit）である。

【0013】

メインメモリ２２は、上記コンピュータの主記憶部分に相当する。メインメモリ２２は、不揮発性のメモリ領域と揮発性のメモリ領域とを含む。メインメモリ２２は、不揮発性のメモリ領域ではオペレーティングシステム又はアプリケーションプログラムを記憶する。メインメモリ２２は、プロセッサ２１が各部を制御するための処理を実行する上で必要なデータを不揮発性又は揮発性のメモリ領域で記憶する場合もある。メインメモリ２２は、揮発性のメモリ領域を、プロセッサ２１によってデータが適宜書き換えられるワークエリアとして使用する。不揮発性のメモリ領域は、例えばＲＯＭ（Read Only Memory）である。揮発性のメモリ領域は、例えばＲＡＭ（Random Access Memory）である。

【0014】

補助記憶デバイス２３は、上記コンピュータの補助記憶部分に相当する。例えばＥＥＰＲＯＭ（登録商標）（Electric Erasable Programmable Read-Only Memory）、ＨＤＤ（Hard Disc Drive）、あるいはＳＳＤ（Solid State Drive）等が補助記憶デバイス２３となり得る。補助記憶デバイス２３は、プロセッサ２１が各種の処理を行う上で使用するデータ、あるいはプロセッサ２１での処理によって作成されたデータ等を保存する。補助記憶デバイス２３は、メニューデータベース２３１（図３を参照）を記憶する。補助記憶デバイス２３は、情報処理プログラムを記憶する場合もある。補助記憶デバイス２３が記憶する情報処理プログラムは、メニューオーダーアプリケーションプログラム２３２（以下、メニューオーダーアプリ２３２と称する）と、音声対話クライアントアプリケーションプログラム２３３（以下、音声対話クライアントアプリ２３３と称する）とである。

【0015】

メニューオーダーアプリ２３２は、ユーザによるセルフオーダー端末２へのタッチ操作に基づいて、メニュー品目の検索や画面表示情報の変更等を行うアプリケーションプログラムである。音声対話クライアントアプリ２３３は、入力デバイス２５から入力された音声を音声対話サーバ４に送信し、その解析結果を受信するアプリケーションプログラムである。

【0016】

メインメモリ２２又は補助記憶デバイス２３に記憶されるアプリケーションプログラムには、セルフオーダー端末２で実行される情報処理に関して記述した制御プログラムが含まれる。制御プログラムをメインメモリ２２又は補助記憶デバイス２３にインストールする方法は特に限定されるものではない。リムーバブルな記録媒体に制御プログラムを記録して、あるいはネットワークを介した通信により制御プログラムを配信して、メインメモリ２２又は補助記憶デバイス２３にインストールすることができる。記録媒体は、ＣＤ－ＲＯＭ，メモリカード等のようにプログラムを記憶でき、かつ装置が読み取り可能であれば、その形態は問わない。

【0017】

無線ユニット２４は、アクセスポイント８との間で無線通信プロトコルに従いデータの無線通信を行う。

【0018】

入力デバイス２５は、セルフオーダー端末２へデータ又は指示を入力可能なデバイスである。例えば入力デバイス２５は、キーボード、タッチパネル又はマイク等である。

【0019】

表示デバイス２６は、プロセッサ２１の制御により種々の画面を表示可能なデバイスである。例えば表示デバイス２６は、液晶ディスプレイ又はＥＬ（Electroluminescence）ディスプレイ等である。

【0020】

読取デバイス２７は、種々のデータを読取可能なデバイスである。例えば読取デバイス２７は、接触式ＩＣカードからデータを読取可能なリーダを含む。例えば読取デバイス２７は、非接触式ＩＣカード又はＲＦＩＤ（Radio Frequency Identification）を使用した記録媒体からデータを読取可能なリーダを含む。例えば読取デバイス２７は、カード媒体の磁気ストライプからデータを読取可能なリーダを含む。例えば読取デバイス２７は、コードシンボルからデータを読取可能なスキャナを含む。コードシンボルは、バーコードシンボル及びＱＲコード（登録商標）等の二次元コードシンボル等である。スキャナは、レーザ光の走査によりコードシンボルを読み取るタイプであってもいいし、撮像デバイスで撮像した画像からコードシンボルを読み取るタイプであってもよい。

【0021】

出力デバイス２８は、セルフオーダー端末２からデータ又は指示を出力可能なデバイスである。例えば出力デバイス２８は、スピーカー等である。

【0022】

図３は、メニューデータベース２３１の一例を示す模式図である。メニューデータベース２３１は、店舗で提供されるメニュー品目のデータを記述したメニューデータレコードを保存する。メニューデータレコードは、ＩＤ、メニュー品目名等の項目を含む。ＩＤは、メニュー品目を個々に識別するためにメニュー品目毎に設定されたメニュー品目識別データである。メニュー品目名は、メニュー品目の名称である。

【0023】

図４は、音声対話サーバ４の要部回路構成を示すブロック図である。音声対話サーバ４は、プロセッサ４１、メインメモリ４２、補助記憶デバイス４３、通信インターフェース４４及びシステム伝送路４５を備える。システム伝送路４５は、アドレスバス、データバス、制御信号線等を含む。音声対話サーバ４は、システム伝送路４５に、プロセッサ４１、メインメモリ４２、補助記憶デバイス４３及び通信インターフェース４４を接続する。音声対話サーバ４では、プロセッサ４１、メインメモリ４２及び補助記憶デバイス４３と、これらを接続するシステム伝送路４５とによってコンピュータが構成される。

【0024】

プロセッサ４１は、上記コンピュータの中枢部分に相当する。プロセッサ４１は、オペレーティングシステム又はアプリケーションプログラムに従って、音声対話サーバ４としての各種の機能を実現するべく各部を制御する。プロセッサ４１は、例えばＣＰＵである。

【0025】

メインメモリ４２は、上記コンピュータの主記憶部分に相当する。メインメモリ４２は、不揮発性のメモリ領域と揮発性のメモリ領域とを含む。メインメモリ４２は、不揮発性のメモリ領域ではオペレーティングシステム又はアプリケーションプログラムを記憶する。メインメモリ４２は、プロセッサ４１が各部を制御するための処理を実行する上で必要なデータを不揮発性又は揮発性のメモリ領域で記憶する場合もある。メインメモリ４２は、揮発性のメモリ領域を、プロセッサ４１によってデータが適宜書き換えられるワークエリアとして使用する。不揮発性のメモリ領域は、例えばＲＯＭである。揮発性のメモリ領域は、例えばＲＡＭである。

【0026】

補助記憶デバイス４３は、上記コンピュータの補助記憶部分に相当する。例えばＥＥＰＲＯＭ、ＨＤＤ、あるいはＳＳＤ等が補助記憶デバイス４３となり得る。補助記憶デバイス４３は、プロセッサ４１が各種の処理を行う上で使用するデータ、あるいはプロセッサ４１での処理によって作成されたデータ等を保存する。補助記憶デバイス４３は、メニューデータベース４３１（図５を参照）と、検索スロットデータベース４３２（図６を参照）とを記憶する。補助記憶デバイス４３は、情報処理プログラムを記憶する場合もある。補助記憶デバイス４３が記憶する情報処理プログラムは、音声認識処理アプリケーションプログラム４３３（以下、音声認識処理アプリ４３３と称する）と、対話制御処理アプリケーションプログラム４３４（以下、対話制御処理アプリ４３４と称する）とである。

【0027】

音声認識処理アプリ４３３は、上述した音声認識処理を行うアプリケーションプログラムである。対話制御処理アプリ４３４は、上述した対話制御処理を行うアプリケーションプログラムである。

【0028】

メインメモリ４２又は補助記憶デバイス４３に記憶されるアプリケーションプログラムには、音声対話サーバ４で実行される情報処理に関して記述した制御プログラムが含まれる。制御プログラムをメインメモリ４２又は補助記憶デバイス４３にインストールする方法は特に限定されるものではない。リムーバブルな記録媒体に制御プログラムを記録して、あるいはネットワークを介した通信により制御プログラムを配信して、メインメモリ４２又は補助記憶デバイス４３にインストールすることができる。記録媒体は、ＣＤ－ＲＯＭ，メモリカード等のようにプログラムを記憶でき、かつ装置が読み取り可能であれば、その形態は問わない。

【0029】

通信インターフェース４４は、ネットワーク９に接続される。通信インターフェース４４は、ネットワーク９を介して接続される他の機器との間で通信プロトコルに従いデータ通信を行う。

【0030】

図５は、メニューデータベース４３１の一例を示す模式図である。メニューデータベース４３１は、店舗で提供されるメニュー品目のデータを記述したメニューデータレコードを保存する。メニューデータレコードは、ＩＤ、メニュー品目名、スロット１（種類）、スロット２（食材）、スロット３（味）、スロット４（カロリー）、スロットＭ（温度）、おすすめ度等の項目を含む。ＩＤ及びメニュー品目名は、上述のメニューデータベース２３１と同様の構成である。スロットは、メニュー品目の特徴を示すカテゴリである。スロット１～Ｍには、例えばメニュー品目の種類、使用される食材、味、カロリー、ユーザへの提供時のメニュー品目の温度が設定される。各メニュー品目には複数のスロットが設定でき、スロットは上記の項目に限定されない。また、各スロットにはそれぞれ関連付けられた０個以上のキーワードを登録することができる。キーワードは、図５の単語に限定されない。おすすめ度は、店舗があらかじめ設定する各メニュー品目の推奨度合い(優先度)である。おすすめ度は、検索結果として複数のメニュー品目が該当する場合、優先度順にメニュー品目を並び替えて絞り込むために使用するものである。おすすめ度は、例えば“１”～“５”の中から選択された１つである。“５”は、“１”よりもおすすめ度が高いすなわち優先度が高いとする。

【0031】

図６は、検索スロットデータベース４３２の一例を示す模式図である。検索スロットデータベース４３２は、上述したメニューデータベース４３１のスロットに係るデータを記述した検索スロットデータレコードを保存する。検索スロットデータレコードは、スロット、スロット番号、エイリアス情報等の項目を含む。スロット番号は、スロットに対応する１番～Ｍ番の番号である。エイリアス情報は、スロットに関連付けられたキーワードの発話表現の情報である。例えば「パスタ」は、「スパゲッティ」と表現する場合がある。「カレー」は、「カリー」と発声する場合がある。すなわちエイリアス情報には、別の言い方がある場合又は発声の違いがある場合であっても、同じスロットを指す表現が登録される。

【0032】

図７乃至図９は、音声対話サーバ４におけるプロセッサ４１の要部制御手順を示す流れ図である。

【0033】

以下、これらの流れ図を用いて、客であるユーザがセルフオーダー端末２を使用して音声によるメニュー品目の検索を行う場合の情報処理システム１の主要な動作について説明する。なお、以下に説明する動作は一例である。同様な結果が得られるのであれば、その手順は特に限定されるものではない。

【0034】

はじめに、セルフオーダー端末２を使用して音声によるメニュー品目の検索を行うユーザは、表示デバイス２６にタッチする。表示デバイス２６がタッチされると、アイドル状態であったプロセッサ２１が起動する。プロセッサ２１は、出力デバイス２８から、例えば「ご注文は何になさいますか。」という音声を出力する。これに対し、ユーザが入力デバイス２５に向かって注文に係る言葉を発すると、プロセッサ２１は、図７の流れ図に示す手順の音声対話クライアントアプリ２３３による処理を開始する。

【0035】

プロセッサ２１は、ＡＣＴ１１として入力デバイス２５から入力された音声を受信すると、その音声データを音声対話サーバ４に送信するように無線ユニット２４を制御する。この制御により、無線ユニット２４は、音声データを無線送信する。音声データは、アクセスポイント８で受信され、ネットワーク９を経由して音声対話サーバ４へと送られる。

【0036】

音声対話サーバ４のプロセッサ４１は、図８の流れ図に示す手順の音声認識処理アプリ４３３による処理を開始する。
プロセッサ４１は、ＡＣＴ２１として音声データを取得する。そしてプロセッサ４１は、ＡＣＴ２２としてその音声データを解析する。

【0037】

プロセッサ４１は、ＡＣＴ２３として音声データの解析結果に基づいて発話文章を生成する。そしてプロセッサ４１は、ＡＣＴ２４として発話文章を送信するように通信インターフェース４４を制御する。この制御により、通信インターフェース４４を介して発話文章が送信される。発話文章は、ネットワーク９を介してアクセスポイント８から無線送信され、セルフオーダー端末２で受信される。以上で、プロセッサ４１は、図８の流れ図に示す手順の音声認識処理アプリ４３３による処理を終了する。

【0038】

図７の説明に戻る。
セルフオーダー端末２のプロセッサ２１は、ＡＣＴ１２として発話文章を待ち受けている。プロセッサ２１は、音声対話サーバ４から発話文章を受信しない場合、ＡＣＴ１２においてＮＯと判定し、ＡＣＴ１１に戻る。音声対話サーバ４から発話文章を受信した場合には、プロセッサ２１は、ＡＣＴ１２においてＹＥＳと判定し、ＡＣＴ１３へと進む。

【0039】

プロセッサ２１は、ＡＣＴ１３として発話文章を音声対話サーバ４に送信するように無線ユニット２４を制御する。この制御により、無線ユニット２４は、発話文章を無線送信する。発話文章は、アクセスポイント８で受信され、ネットワーク９を経由して音声対話サーバ４へと送られる。

【0040】

音声対話サーバ４のプロセッサ４１は、図９の流れ図に示す手順の対話制御処理アプリ４３４による処理を開始する。
プロセッサ４１は、ＡＣＴ３１として発話文章を受信する。そしてプロセッサ４１は、ＡＣＴ３２として検索スロットデータベース４３２を用いて発話文章を解析する。例えば「スパゲッティがいい。」という発話文章である場合、プロセッサ４１は、「スロット１＝パスタ」というように解析する。

【0041】

プロセッサ４１は、ＡＣＴ３３として発話意図を推定する。すなわちプロセッサ４１は、ユーザが発した言葉を手掛かりにしてユーザの考えをくみ取る。ここでは、発話意図は、ユーザの行動と、それに関連付けられたスロット及びスロット番号の情報とする。ユーザの行動は、例えば検索条件を追加すること、検索条件を変更すること、検索条件を削除すること、検索条件をリセットすることである。検索条件は、1以上のスロットの集合である。例えば上述の解析結果である「スロット１＝パスタ」の場合、プロセッサ４１は、「検索条件の追加、スロット１＝パスタ」というように発話意図を推定する。なお、発話意図の推定処理は既存の処理で周知なので、具体的な説明は省略する。

【0042】

プロセッサ４１は、ＡＣＴ３４として検索条件を生成する。例えば発話意図が「検索条件の追加、スロット１＝パスタ」であり、その直前に生成された検索条件が「スロット２＝トマト」である場合、プロセッサ４１は、発話意図と直前に生成された検索条件とを統合して「スロット１＝パスタ、スロット２=トマト」というように検索条件を生成する。したがって、プロセッサ４１は、発話文章を受信するたびに検索条件を生成し直す。

【0043】

プロセッサ４１は、ＡＣＴ３５としてメニューデータベース４３１を用いて検索条件を満たすメニュー品目を検索する。プロセッサ４１は、ＡＣＴ３６として検索結果が１件であるか否かすなわち１つのメニュー品目に確定したか否かを確認する。検索結果として複数のメニュー品目が該当する場合、プロセッサ４１は、ＡＣＴ３６においてＮＯと判定し、ＡＣＴ３７へと進む。

【0044】

プロセッサ４１は、ＡＣＴ３７としてユーザへの応答行動を決定する。ここでは、応答行動は、応答の種類と、それに関連付けられたスロットの情報とする。応答の種類は、例えばメニュー品目を提案すること、検索条件に係る質問をすること、検索条件を確認することである。検索結果として複数のメニュー品目が該当する場合、その時点までの検索条件に含まれていないスロットがあるならば、プロセッサ４１は、そのスロットに係る質問をすることで件数を絞り込む。例えばスロット１が未だ検索条件に含まれていない場合、プロセッサ４１は、メニュー品目の種類に希望があるか否かを質問する。このスロット選択方法として、例えばスロット１～Ｍの番号順に選択する。スロット１は、スロットＭよりもメニュー品目の件数を絞り込みやすい質問ができるものとする。なお、応答行動の決定処理は既存の処理で周知なので、具体的な説明は省略する。

【0045】

プロセッサ４１は、ＡＣＴ３８として検索結果と応答行動に基づいた応答文章を生成する。例えば応答行動が上述したメニュー品目の種類に係る質問である場合、プロセッサ４１は、「メニュー品目の種類にご希望はありますか。」というような応答文章を生成する。

【0046】

プロセッサ４１は、ＡＣＴ３９として検索条件及び応答文章を送信するように通信インターフェース４４を制御する。この制御により、通信インターフェース４４を介して検索条件及び応答文章が送信される。検索条件及び応答文章は、ネットワーク９を介してアクセスポイント８から無線送信され、セルフオーダー端末２で受信される。検索条件及び応答文章を送信した後、プロセッサ４１は、ＡＣＴ３１に戻る。

【0047】

１つのメニュー品目に確定した場合には、プロセッサ４１は、ＡＣＴ３６においてＹＥＳと判定し、ＡＣＴ４０へと進む。プロセッサ４１は、ユーザへの応答行動を決定し、応答行動に基づいた応答文章を生成する。すなわちプロセッサ４１は、当該メニュー品目をユーザに提案する応答文章を生成する。そしてプロセッサ４１は、ＡＣＴ４０として応答文章を送信するように通信インターフェース４４を制御する。この制御により、通信インターフェース４４を介して応答文章が送信される。応答文章は、ネットワーク９を介してアクセスポイント８から無線送信され、セルフオーダー端末２で受信される。以上で、プロセッサ４１は、図９の流れ図に示す手順の対話制御処理アプリ４３４による処理を終了する。

【0048】

図７の説明に戻る。
ＡＣＴ１３において発話文章の送信を制御したセルフオーダー端末２のプロセッサ２１は、ＡＣＴ１４として音声対話サーバ４から検索条件及び応答文章又は応答文章を受信する。なお、検索条件及び応答文章を受信する場合は、検索結果として複数のメニュー品目が該当する場合である。応答文章を受信する場合は、１つのメニュー品目に確定した場合である。

【0049】

プロセッサ２１は、ＡＣＴ１５としてテキストデータである応答文章を音声データに変換する。そしてプロセッサ２１は、ＡＣＴ１６として出力デバイス２８から音声を出力する。以上で、プロセッサ２１は、図７の流れ図に示す手順の音声対話クライアントアプリ２３３による処理を終了する。

【0050】

さて、図１０乃至図１３は、セルフオーダー端末２の表示デバイス２６に表示されるメニュー品目画面１００、１０９乃至１１１の一例を示す模式図である。

【0051】

以下、これらの模式図を用いて、ユーザがセルフオーダー端末２を使用して音声によるメニュー品目の検索を行う場合に、表示デバイス２６に表示されるメニュー品目画面１００、１０９乃至１１１について説明する。

【0052】

図１０は、セルフオーダー端末２において表示されるメニュー品目画面１００の一例を示す模式図である。図１０に示すようにメニュー品目画面１００は、料理区分表示エリア１０１、メニュー品目表示エリア１０２、及び注文を指示するための注文送信ボタン１０３の画像を含む。料理区分表示エリア１０１は、料理の区分、例えば肉料理ボタン１０４、魚料理ボタン１０５、おつまみボタン１０６、サラダボタン１０７、お飲み物ボタン１０８の各画像を表示するためのエリアである。ユーザは、検索したい料理区分のボタン１０４乃至１０８にタッチすることでメニュー品目の検索を行ってもよい。メニュー品目表示エリア１０２は、音声による対話形式で検索されたメニュー品目を表示するためのエリアである。メニュー品目表示エリア１０２には、検索条件に係るテキストデータと、検索結果のメニュー品目の画像、メニュー品目名及び金額と、注文リストとが表示される。金額は、メニューデータベース２３１又はメニューデータベース４３１のメニューデータレコードに含まれるメニュー品目名に対応するメニュー品目の単価である。金額は、メニューデータベース２３１又はメニューデータベース４３１のメニューデータレコードの項目として含まれてもよい。注文リストは、注文済メニュー品目名と注文点数が表示される。注文点数は、そのメニュー品目の注文数である。この時点ではメニュー品目を注文していないため、メニュー品目名及び注文点数は表示されない。

【0053】

メニュー品目表示エリア１０２には、検索結果として複数のメニュー品目が該当する場合、例えばおすすめ度の高い上位５件のメニュー品目が表示される。最もおすすめ度の高いメニュー品目については、画像が大きく表示される。なお、図１０に表示されているテキストデータの内容及び画像は一例である。ユーザに対して検索結果のメニュー品目を通知する内容であればよい。因みに、メニュー品目画面１００は、音声による対話として、例えば出力デバイス２８から、「ご注文は何になさいますか。」という音声を出力したことに対して、ユーザが「肉料理が食べたい。」と発したことで表示される画面である。またユーザは、注文送信ボタン１０３にタッチせずに、例えば「それください。」と発することで注文を指示してもよい。

【0054】

図１１は、セルフオーダー端末２において表示される検索条件追加後のメニュー品目画面１０９の一例を示す模式図である。図１０に示した検索条件による検索結果として複数のメニュー品目が該当するため、音声対話サーバ４のプロセッサ４１は、未だ検索条件に含まれていないスロットに係る質問をする。ユーザがその質問に対して言葉を発すると、図１１に示すようにメニュー品目表示エリア１０２には、検索条件に係るテキストデータが追加され、生成し直された検索条件に基づいて検索結果のメニュー品目が再表示される。メニュー品目画面１０９は、例えば音声による対話として、出力デバイス２８から、「メニュー品目の種類にご希望はありますか。」という音声を出力したことに対して、ユーザが「焼物がいい。」と発したことで表示される画面である。このようにして検索結果が１件になるまで、メニュー品目の件数を絞り込む。

【0055】

図１２は、セルフオーダー端末２において表示される検索結果が１件であるメニュー品目画面１１０の一例を示す模式図である。図１２に示すようにメニュー品目表示エリア１０２には、１つのメニュー品目の画像が大きく表示される。メニュー品目画面１１０は、例えば音声による対話として、出力デバイス２８から、「カロリーが低めな肉の焼物ですと“ＯＯＯ”はいかがでしょうか。」という音声を出力したことで表示される画面である。ユーザは、当該メニュー品目を注文する場合、注文送信ボタン１０３にタッチする又は音声により注文を指示する。

【0056】

図１３は、セルフオーダー端末２において表示される追加注文時のメニュー品目画面１１１の一例を示す模式図である。ユーザは、図１２に示したメニュー品目を注文すると、図１３に示すようにメニュー品目表示エリア１０２の注文リストには、注文済メニュー品目名及び注文点数が表示される。ここで、ユーザは、注文済メニュー品目に加えて、他のメニュー品目を注文する場合がある。例えば肉料理を注文した後、飲み物も注文したいが明確なメニュー品目が決まっていない場合、音声対話サーバ４のプロセッサ４１は、当該肉料理に合う飲み物を検索する。すなわちプロセッサ４１は、注文済メニュー品目を検索したときのスロットのキーワード等を加味して、当該注文済メニュー品目に関連付けられたスロットのキーワードを有するメニュー品目を検索する。そしてプロセッサ４１は、その検索結果に基づいてメニュー品目を提案する又は検索条件に係る質問をする。このようにして検索した結果のメニュー品目は、図１３に示すようにメニュー品目表示エリア１０２に表示される。メニュー品目画面１１１は、音声による対話として、例えばユーザが「飲み物も教えて。」と発したことに対して、出力デバイス２８から、「カロリーが低めで、冷たく、肉料理に合う飲み物ですと“ＰＰＰ”はいかがでしょうか。」という音声を出力したことで表示される画面である。

【0057】

以上の説明から明らかなように、情報処理装置の一例である音声対話サーバ４は、プロセッサ４１が図８のＡＣＴ２１の処理を実行することによって、取得部を構成する。すなわち音声対話サーバ４は、ユーザの音声データを取得する。

【0058】

音声対話サーバ４は、プロセッサ４１が図８のＡＣＴ２２の処理を実行することによって、解析部を構成する。すなわち音声対話サーバ４は、音声データを解析する。

【0059】

音声対話サーバ４は、プロセッサ４１が図９のＡＣＴ３４の処理を実行することによって、第１の生成部を構成する。すなわち音声対話サーバ４は、解析部による解析結果に基づいて１以上の対象すなわちメニュー品目を検索する検索条件を生成する。

【0060】

音声対話サーバ４は、プロセッサ４１が図９のＡＣＴ３５の処理を実行することによって、検索部を構成する。すなわち音声対話サーバ４は、検索条件を満たす１以上のメニュー品目を検索する。

【0061】

音声対話サーバ４は、プロセッサ４１が図９のＡＣＴ３８の処理を実行することによって、第２の生成部を構成する。すなわち音声対話サーバ４は、検索部による検索結果に基づいてユーザへの応答データすなわち応答文章を生成する。

【0062】

したがって、このような情報処理装置を備えた情報処理システム１であれば、音声による対話形式で希望に合ったメニュー品目を検索できる。また、検索結果として複数のメニュー品目が該当する場合、音声対話サーバ４のプロセッサ４１は、その時点までの検索条件に含まれていないスロットに係る質問をする。したがって、その時点までの音声による対話を考慮したメニュー品目の検索をすることができ、効率的である。さらに、その時点までの検索条件に含まれていないスロットの選択方法として、スロット１～Ｍの番号順に選択することで、メニュー品目の件数を絞り込みやすい質問から順に質問をすることができ、効率的である。

【0063】

さらに、検索結果として複数のメニュー品目が該当する場合、音声対話サーバ４のプロセッサ４１は、優先度順に検索する。そしてプロセッサ４１は、該当するメニュー品目の中で最も優先度の高いメニュー品目についての応答文章を生成する。したがって、飲食したいものが明確に決まっていないユーザは、優先度を参考にしてメニュー品目を絞り込むことができ、効率的である。

【0064】

以上、情報処理装置、情報処理システム及びその制御プログラムの実施形態について説明したが、かかる実施形態はこれに限定されるものではない。

【0065】

前記実施形態では、飲食店において、ユーザがセルフオーダー端末２を使用して音声によるメニュー品目の検索を行う場合を説明した。セルフオーダー端末２の使用は飲食店に限定されない。例えば本実施形態は、カラオケ店において、歌唱の検索を行う端末に使用してもよい。本実施形態は、デジタルサイネージに適用してもよい。

【0066】

前記実施形態では、検索結果として複数のメニュー品目が該当する場合、優先度順にメニュー品目を並び替えて絞り込むためのものとして、店舗があらかじめ設定するおすすめ度を説明した。例えばメニュー品目の金額の高低順、メニュー品目の調理時間順、店舗の混み具合を加味したメニュー品目の提供時間順に基づいて、メニュー品目を並び替えて絞り込んでもよい。

【0067】

前記実施形態では、１つのメニュー品目に確定した場合、音声対話サーバ４のプロセッサ４１は、当該メニュー品目をユーザに提案する応答文章をセルフオーダー端末２に送信することを説明した。例えばプロセッサ４１は、検索条件及び応答文章をセルフオーダー端末２に送信してもよい。また、１つのメニュー品目に確定した場合に限定されない。例えばメニュー品目の件数が閾値以下になった場合、プロセッサ４１は、その中で最も優先度の高いメニュー品目を提案する応答文章をセルフオーダー端末２に送信してもよい。この場合、メニュー品目画面のメニュー品目表示エリアには、閾値以下の件数分のメニュー品目が表示される。最も優先度の高いメニュー品目については、画像が大きく表示される。

【0068】

前記実施形態では、音声対話サーバ４を情報処理装置の一態様として説明した。音声対話サーバ４は、前記実施形態で説明したものに限定されるものではない。例えばオーダーステーションサーバ５としての機能をさらに備えた音声対話サーバ４を情報処理装置としてもよい。換言すれば、音声対話サーバ４としての機能を備えたオーダーステーションサーバ５を情報処理装置としてもよい。

【0069】

この他、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態及びその変形は、発明の範囲に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
以下に、当初の特許請求の範囲の記載を付記する。
(１)
ユーザの音声データを取得する取得部と、
前記音声データを解析する解析部と、
前記解析部による解析結果に基づいて１以上の対象を検索する検索条件を生成する第１の生成部と、
前記検索条件を満たす１以上の対象を検索する検索部と、
前記検索部による検索結果に基づいて前記ユーザへの応答データを生成する第２の生成部と、
を備える情報処理装置。
（２）
前記第２の生成部は、前記検索条件に含まれていないカテゴリに基づいて前記ユーザへの応答データを生成する、（１）記載の情報処理装置。
（３）
前記検索部は、前記検索条件を満たす１以上の対象を優先度順に検索し、
前記第２の生成部は、前記検索条件を満たす１以上の対象の中で最も優先度の高い対象についての応答データを生成する、（１）記載の情報処理装置。
（４）
ユーザの音声データを取得する取得部、
前記音声データを解析する解析部、
前記解析部による解析結果に基づいて１以上の対象を検索する検索条件を生成する第１の生成部、
前記検索条件を満たす１以上の対象を検索する検索部、及び、
前記検索部による検索結果に基づいて前記ユーザへの応答データを生成する第２の生成部、
を備える第１の情報処理装置と、
前記第１の情報処理装置に前記ユーザの前記音声データを送信する送信部、及び、
前記第２の生成部で生成された前記応答データを音声として出力する出力部、
を備える第２の情報処理装置と、
を備える情報処理システム。
（５）
情報処理装置のコンピュータを、
ユーザの音声データを取得する取得部、
前記音声データを解析する解析部、
前記解析部による解析結果に基づいて１以上の対象を検索する検索条件を生成する第１の生成部、
前記検索条件を満たす１以上の対象を検索する検索部、及び、
前記検索部による検索結果に基づいて前記ユーザへの応答データを生成する第２の生成部、
として機能させるための制御プログラム。

【符号の説明】

【0070】

１…情報処理システム、２…セルフオーダー端末、３…店員端末、４…音声対話サーバ、５…オーダーステーションサーバ、６…キッチンプリンタ、７…ＰＯＳ端末、８…アクセスポイント、９…ネットワーク、２１，４１…プロセッサ、２２，４２…メインメモリ、２３，４３…補助記憶デバイス、２４…無線ユニット、２５…入力デバイス、２６…表示デバイス、２７…読取デバイス、２８…出力デバイス、２９，４５…システム伝送路、４４…通信インターフェース、２３１，４３１…メニューデータベース、２３２…メニューオーダーアプリケーションプログラム、２３３…音声対話クライアントアプリケーションプログラム、４３２…検索スロットデータベース、４３３…音声認識処理アプリケーションプログラム、４３４…対話制御処理アプリケーションプログラム。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】