知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2025108914
(43)【公開日】2025-07-24
(54)【発明の名称】対話システム、端末及びプログラム
(51)【国際特許分類】
H04M 3/50 20060101AFI20250716BHJP
H04M 3/51 20060101ALI20250716BHJP
G10L 13/00 20060101ALI20250716BHJP
G10L 15/22 20060101ALI20250716BHJP
G06F 3/16 20060101ALI20250716BHJP
G06F 3/01 20060101ALI20250716BHJP
【ＦＩ】
H04M3/50 A
H04M3/51
G10L13/00 100M
G10L15/22 300Z
G06F3/16 650
G06F3/16 690
G06F3/01 510
【審査請求】未請求
【請求項の数】11
【出願形態】ＯＬ
(21)【出願番号】P 2024002450
(22)【出願日】2024-01-11
(71)【出願人】
【識別番号】000002897
【氏名又は名称】大日本印刷株式会社
(74)【代理人】
【識別番号】100106002
【弁理士】
【氏名又は名称】正林 真之
(74)【代理人】
【識別番号】100165157
【弁理士】
【氏名又は名称】芝 哲央
(74)【代理人】
【識別番号】100120891
【弁理士】
【氏名又は名称】林 一好
(72)【発明者】
【氏名】伊藤 直之
(72)【発明者】
【氏名】松葉 靖寿
【テーマコード（参考）】
5E555
5K201
【Ｆターム（参考）】
5E555AA46
5E555AA47
5E555BA02
5E555BB23
5E555BC04
5E555CA45
5E555CA47
5E555CB82
5E555DA23
5E555DB32
5E555DC85
5E555EA03
5E555EA23
5E555FA00
5K201BA13
5K201CA01
5K201CC04
5K201DC05
5K201EC06
5K201ED04
(57)【要約】
【課題】移動中であっても対話を継続して行うことを可能にした対話システム、端末及びプログラムを提供する。
【解決手段】対話システム１００は、移動中のユーザＰ１が用いる端末１が、対話サーバ４との間の通信状況を確認し、通信状況の確認結果に応じて、ユーザＰ１との対話を特定の知識を有する知識部を用いて行うローカル対話部による処理と、ユーザＰ１との対話を対話サーバ４を介し複数の文書及び対話内容を学習した言語モデル６ａを用いて行うリモート対話部による処理とを切り替え、ローカル対話部による処理からリモート対話部による処理に切り替えた場合に、ユーザＰ１及びユーザＰ１が対話をする相手方との間の対話内容である対話履歴データを記憶する端末履歴記憶部の対話履歴データを対話サーバ４に送信し、対話サーバ４が、端末１から受信した対話履歴データを、対話履歴データを端末識別情報に対応付けて記憶するサーバ履歴記憶部に登録する。
【選択図】図１
【解決手段】対話システム１００は、移動中のユーザＰ１が用いる端末１が、対話サーバ４との間の通信状況を確認し、通信状況の確認結果に応じて、ユーザＰ１との対話を特定の知識を有する知識部を用いて行うローカル対話部による処理と、ユーザＰ１との対話を対話サーバ４を介し複数の文書及び対話内容を学習した言語モデル６ａを用いて行うリモート対話部による処理とを切り替え、ローカル対話部による処理からリモート対話部による処理に切り替えた場合に、ユーザＰ１及びユーザＰ１が対話をする相手方との間の対話内容である対話履歴データを記憶する端末履歴記憶部の対話履歴データを対話サーバ４に送信し、対話サーバ４が、端末１から受信した対話履歴データを、対話履歴データを端末識別情報に対応付けて記憶するサーバ履歴記憶部に登録する。
【選択図】図１
【特許請求の範囲】
【請求項1】
移動中のユーザが用いる端末と、サーバとを備えた対話システムであって、
前記端末は、
特定の知識を有する知識部と、
前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、
前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、
前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、
前記サーバとの間の通信状況を確認する通信状況確認手段と、
前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、
前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、
を備え、
前記サーバは、
前記対話履歴データを、前記ユーザに対応付けて記憶するサーバ履歴記憶部と、
前記端末から受信した前記対話履歴データを、前記サーバ履歴記憶部に登録する履歴登録手段と、
を備える、対話システム。
前記端末は、
特定の知識を有する知識部と、
前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、
前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、
前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、
前記サーバとの間の通信状況を確認する通信状況確認手段と、
前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、
前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、
を備え、
前記サーバは、
前記対話履歴データを、前記ユーザに対応付けて記憶するサーバ履歴記憶部と、
前記端末から受信した前記対話履歴データを、前記サーバ履歴記憶部に登録する履歴登録手段と、
を備える、対話システム。
【請求項2】
請求項１に記載の対話システムにおいて、
前記端末の前記履歴送信手段は、少なくとも前記ローカル対話手段による処理の間に生じた前記対話履歴データを、前記サーバに送信する、対話システム。
前記端末の前記履歴送信手段は、少なくとも前記ローカル対話手段による処理の間に生じた前記対話履歴データを、前記サーバに送信する、対話システム。
【請求項3】
請求項１に記載の対話システムにおいて、
前記端末の前記対話切替手段は、前記リモート対話手段による処理中において前記サーバから一定期間内に前記対話の応答である返答データを受信しない場合には、前記ローカル対話手段による処理に切り替える、対話システム。
前記端末の前記対話切替手段は、前記リモート対話手段による処理中において前記サーバから一定期間内に前記対話の応答である返答データを受信しない場合には、前記ローカル対話手段による処理に切り替える、対話システム。
【請求項4】
請求項１に記載の対話システムにおいて、
前記サーバは、
前記端末から前記ユーザの発話データを受信する発話受信手段と、
前記発話受信手段が受信した前記発話データと、前記サーバ履歴記憶部に記憶された前記ユーザの前記対話履歴データとを前記言語モデルに入力し、前記言語モデルが出力した返答データを、前記端末に送信する対話処理手段と、
を備える、対話システム。
前記サーバは、
前記端末から前記ユーザの発話データを受信する発話受信手段と、
前記発話受信手段が受信した前記発話データと、前記サーバ履歴記憶部に記憶された前記ユーザの前記対話履歴データとを前記言語モデルに入力し、前記言語モデルが出力した返答データを、前記端末に送信する対話処理手段と、
を備える、対話システム。
【請求項5】
請求項４に記載の対話システムにおいて、
前記端末は、
位置情報を所定の時間間隔で取得する位置取得手段と、
前記リモート対話手段による処理の間に前記位置取得手段が取得した前記位置情報を、前記サーバに送信する位置送信手段と、
を備え、
前記サーバは、前記位置情報を前記端末から受信する位置受信手段を備え、
前記サーバの前記対話処理手段は、前記位置受信手段が受信した前記位置情報をさらに前記言語モデルに入力する、対話システム。
前記端末は、
位置情報を所定の時間間隔で取得する位置取得手段と、
前記リモート対話手段による処理の間に前記位置取得手段が取得した前記位置情報を、前記サーバに送信する位置送信手段と、
を備え、
前記サーバは、前記位置情報を前記端末から受信する位置受信手段を備え、
前記サーバの前記対話処理手段は、前記位置受信手段が受信した前記位置情報をさらに前記言語モデルに入力する、対話システム。
【請求項6】
請求項１に記載の対話システムにおいて、
前記サーバは、
前記端末から前記ユーザの発話データを受信する発話受信手段と、
前記発話受信手段が受信した前記発話データと、前記サーバ履歴記憶部に記憶された前記ユーザの前記対話履歴データとを、相手方端末に出力する情報出力手段と、
前記相手方端末から送信された返答データを、前記端末に送信する返答送信手段と、
を備える、対話システム。
前記サーバは、
前記端末から前記ユーザの発話データを受信する発話受信手段と、
前記発話受信手段が受信した前記発話データと、前記サーバ履歴記憶部に記憶された前記ユーザの前記対話履歴データとを、相手方端末に出力する情報出力手段と、
前記相手方端末から送信された返答データを、前記端末に送信する返答送信手段と、
を備える、対話システム。
【請求項7】
請求項６に記載の対話システムにおいて、
前記端末は、
位置情報を所定の時間間隔で取得する位置取得手段と、
前記リモート対話手段による処理の間に前記位置取得手段が取得した前記位置情報を、前記サーバに送信する位置送信手段と、
を備え、
前記サーバは、
前記位置情報を前記端末から受信する位置受信手段を備え、
前記サーバの前記情報出力手段は、前記位置受信手段が受信した前記位置情報をさらに前記相手方端末に出力する、対話システム。
前記端末は、
位置情報を所定の時間間隔で取得する位置取得手段と、
前記リモート対話手段による処理の間に前記位置取得手段が取得した前記位置情報を、前記サーバに送信する位置送信手段と、
を備え、
前記サーバは、
前記位置情報を前記端末から受信する位置受信手段を備え、
前記サーバの前記情報出力手段は、前記位置受信手段が受信した前記位置情報をさらに前記相手方端末に出力する、対話システム。
【請求項8】
請求項４から請求項７までのいずれかに記載の対話システムにおいて、
前記発話データ及び前記返答データは、音声データであり、
前記端末は、
前記発話データを取得する音声入力部と、
前記返答データを出力する音声出力部と、
を備える、対話システム。
前記発話データ及び前記返答データは、音声データであり、
前記端末は、
前記発話データを取得する音声入力部と、
前記返答データを出力する音声出力部と、
を備える、対話システム。
【請求項9】
請求項８に記載の対話システムにおいて、
前記端末は、
前記相手方に対応したキャラクタを出力する表示部と、
前記相手方の返答に対応して前記キャラクタを動作させるキャラクタ処理手段と、
を備える、対話システム。
前記端末は、
前記相手方に対応したキャラクタを出力する表示部と、
前記相手方の返答に対応して前記キャラクタを動作させるキャラクタ処理手段と、
を備える、対話システム。
【請求項10】
サーバを介してユーザと対話を行う、前記ユーザが用いる端末であって、
特定の知識を有する知識部と、
前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、
前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、
前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、
前記サーバとの間の通信状況を確認する通信状況確認手段と、
前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、
前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、
を備える、端末。
特定の知識を有する知識部と、
前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、
前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、
前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、
前記サーバとの間の通信状況を確認する通信状況確認手段と、
前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、
前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、
を備える、端末。
【請求項11】
サーバを介してユーザと対話を行う、前記ユーザが用いるコンピュータが、
特定の知識を有する知識部と、
前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、
を備え、
前記コンピュータを、
前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、
前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、
前記サーバとの間の通信状況を確認する通信状況確認手段と、
前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、
前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、
して機能させるためのプログラム。
特定の知識を有する知識部と、
前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、
を備え、
前記コンピュータを、
前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、
前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、
前記サーバとの間の通信状況を確認する通信状況確認手段と、
前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、
前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、
して機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、対話システム、端末及びプログラムに関する。
【背景技術】
【0002】
従来、観光バスによるツアーでは、観光バスに乗車した添乗員が、例えば、車窓から見える景色について車中で案内をすることが行われている。現在では、ツアーが多様化しており、オンラインによる仮想的なツアーを参加者に提供するようなサービスも出てきている（例えば、特許文献１参照）。
このように、多様なサービスが提供されている現状においても、従来と同様に、現地に足を運んで観光をしたいと思う参加者のニーズは多い。しかし、人材不足等により添乗員等のガイドを確保できない状況が生じることがある。そのような場合に、例えば、乗り物の位置に応じたコンテンツを提供する技術を用いることが可能である（例えば、特許文献２参照）。
このように、多様なサービスが提供されている現状においても、従来と同様に、現地に足を運んで観光をしたいと思う参加者のニーズは多い。しかし、人材不足等により添乗員等のガイドを確保できない状況が生じることがある。そのような場合に、例えば、乗り物の位置に応じたコンテンツを提供する技術を用いることが可能である（例えば、特許文献２参照）。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０２１－１９０１２６号公報
【特許文献2】特開２０２２－５８３１２号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献２に記載の乗り物の位置に応じたコンテンツでは、一方的なコンテンツの表示にすぎず、満足度が低くなってしまう。そこで、対話ができるシステムが望まれるが、移動中であっても対話が継続できる仕組みが求められる。
【0005】
そこで、本発明は、移動中であっても対話を継続して行うことを可能にした対話システム、端末及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【0006】
本発明は、以下のような解決手段により、前記課題を解決する。
第１の発明は、移動中のユーザが用いる端末と、サーバとを備えた対話システムであって、前記端末は、特定の知識を有する知識部と、前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、前記サーバとの間の通信状況を確認する通信状況確認手段と、前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、を備え、前記サーバは、前記対話履歴データを、前記ユーザに対応付けて記憶するサーバ履歴記憶部と、前記端末から受信した前記対話履歴データを、前記サーバ履歴記憶部に登録する履歴登録手段と、を備える、対話システムである。
第２の発明は、第１の発明の対話システムにおいて、前記端末の前記履歴送信手段は、少なくとも前記ローカル対話手段による処理の間に生じた前記対話履歴データを、前記サーバに送信する、対話システムである。
第３の発明は、第１の発明又は第２の発明の対話システムにおいて、前記端末の前記対話切替手段は、前記リモート対話手段による処理中において前記サーバから一定期間内に前記対話の応答である返答データを受信しない場合には、前記ローカル対話手段による処理に切り替える、対話システムである。
第４の発明は、第１の発明から第３の発明までのいずれかの対話システムにおいて、前記サーバは、前記端末から前記ユーザの発話データを受信する発話受信手段と、前記発話受信手段が受信した前記発話データと、前記サーバ履歴記憶部に記憶された前記ユーザの前記対話履歴データとを前記言語モデルに入力し、前記言語モデルが出力した返答データを、前記端末に送信する対話処理手段と、を備える、対話システムである。
第５の発明は、第４の発明の対話システムにおいて、前記端末は、位置情報を所定の時間間隔で取得する位置取得手段と、前記リモート対話手段による処理の間に前記位置取得手段が取得した前記位置情報を、前記サーバに送信する位置送信手段と、を備え、前記サーバは、前記位置情報を前記端末から受信する位置受信手段を備え、前記サーバの前記対話処理手段は、前記位置受信手段が受信した前記位置情報をさらに前記言語モデルに入力する、対話システムである。
第６の発明は、第１の発明から第３の発明までのいずれかの対話システムにおいて、前記サーバは、前記端末から前記ユーザの発話データを受信する発話受信手段と、前記発話受信手段が受信した前記発話データと、前記サーバ履歴記憶部に記憶された前記ユーザの前記対話履歴データとを、相手方端末に出力する情報出力手段と、前記相手方端末から送信された返答データを、前記端末に送信する返答送信手段と、を備える、対話システムである。
第７の発明は、第６の発明の対話システムにおいて、前記端末は、位置情報を所定の時間間隔で取得する位置取得手段と、前記リモート対話手段による処理の間に前記位置取得手段が取得した前記位置情報を、前記サーバに送信する位置送信手段と、を備え、前記サーバは、前記位置情報を前記端末から受信する位置受信手段を備え、前記サーバの前記情報出力手段は、前記位置受信手段が受信した前記位置情報をさらに前記相手方端末に出力する、対話システムである。
第８の発明は、第４の発明から第７の発明までのいずれかの対話システムにおいて、前記発話データ及び前記返答データは、音声データであり、前記端末は、前記発話データを取得する音声入力部と、前記返答データを出力する音声出力部と、を備える、対話システムである。
第９の発明は、第１の発明から第８の発明までのいずれかの対話システムにおいて、前記端末は、前記相手方に対応したキャラクタを出力する表示部と、前記相手方の返答に対応して前記キャラクタを動作させるキャラクタ処理手段と、を備える、対話システムである。
第１０の発明は、サーバを介してユーザと対話を行う、前記ユーザが用いる端末であって、特定の知識を有する知識部と、前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、前記サーバとの間の通信状況を確認する通信状況確認手段と、前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、を備える、端末である。
第１１の発明は、サーバを介してユーザと対話を行う、前記ユーザが用いるコンピュータが、特定の知識を有する知識部と、前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、を備え、前記コンピュータを、前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、前記サーバとの間の通信状況を確認する通信状況確認手段と、前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、して機能させるためのプログラムである。
第１の発明は、移動中のユーザが用いる端末と、サーバとを備えた対話システムであって、前記端末は、特定の知識を有する知識部と、前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、前記サーバとの間の通信状況を確認する通信状況確認手段と、前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、を備え、前記サーバは、前記対話履歴データを、前記ユーザに対応付けて記憶するサーバ履歴記憶部と、前記端末から受信した前記対話履歴データを、前記サーバ履歴記憶部に登録する履歴登録手段と、を備える、対話システムである。
第２の発明は、第１の発明の対話システムにおいて、前記端末の前記履歴送信手段は、少なくとも前記ローカル対話手段による処理の間に生じた前記対話履歴データを、前記サーバに送信する、対話システムである。
第３の発明は、第１の発明又は第２の発明の対話システムにおいて、前記端末の前記対話切替手段は、前記リモート対話手段による処理中において前記サーバから一定期間内に前記対話の応答である返答データを受信しない場合には、前記ローカル対話手段による処理に切り替える、対話システムである。
第４の発明は、第１の発明から第３の発明までのいずれかの対話システムにおいて、前記サーバは、前記端末から前記ユーザの発話データを受信する発話受信手段と、前記発話受信手段が受信した前記発話データと、前記サーバ履歴記憶部に記憶された前記ユーザの前記対話履歴データとを前記言語モデルに入力し、前記言語モデルが出力した返答データを、前記端末に送信する対話処理手段と、を備える、対話システムである。
第５の発明は、第４の発明の対話システムにおいて、前記端末は、位置情報を所定の時間間隔で取得する位置取得手段と、前記リモート対話手段による処理の間に前記位置取得手段が取得した前記位置情報を、前記サーバに送信する位置送信手段と、を備え、前記サーバは、前記位置情報を前記端末から受信する位置受信手段を備え、前記サーバの前記対話処理手段は、前記位置受信手段が受信した前記位置情報をさらに前記言語モデルに入力する、対話システムである。
第６の発明は、第１の発明から第３の発明までのいずれかの対話システムにおいて、前記サーバは、前記端末から前記ユーザの発話データを受信する発話受信手段と、前記発話受信手段が受信した前記発話データと、前記サーバ履歴記憶部に記憶された前記ユーザの前記対話履歴データとを、相手方端末に出力する情報出力手段と、前記相手方端末から送信された返答データを、前記端末に送信する返答送信手段と、を備える、対話システムである。
第７の発明は、第６の発明の対話システムにおいて、前記端末は、位置情報を所定の時間間隔で取得する位置取得手段と、前記リモート対話手段による処理の間に前記位置取得手段が取得した前記位置情報を、前記サーバに送信する位置送信手段と、を備え、前記サーバは、前記位置情報を前記端末から受信する位置受信手段を備え、前記サーバの前記情報出力手段は、前記位置受信手段が受信した前記位置情報をさらに前記相手方端末に出力する、対話システムである。
第８の発明は、第４の発明から第７の発明までのいずれかの対話システムにおいて、前記発話データ及び前記返答データは、音声データであり、前記端末は、前記発話データを取得する音声入力部と、前記返答データを出力する音声出力部と、を備える、対話システムである。
第９の発明は、第１の発明から第８の発明までのいずれかの対話システムにおいて、前記端末は、前記相手方に対応したキャラクタを出力する表示部と、前記相手方の返答に対応して前記キャラクタを動作させるキャラクタ処理手段と、を備える、対話システムである。
第１０の発明は、サーバを介してユーザと対話を行う、前記ユーザが用いる端末であって、特定の知識を有する知識部と、前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、前記サーバとの間の通信状況を確認する通信状況確認手段と、前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、を備える、端末である。
第１１の発明は、サーバを介してユーザと対話を行う、前記ユーザが用いるコンピュータが、特定の知識を有する知識部と、前記ユーザと、前記ユーザが対話をする相手方との間の対話内容である対話履歴データを記憶するローカル履歴記憶部と、を備え、前記コンピュータを、前記ユーザとの対話を前記知識部を用いて行うローカル対話手段と、前記ユーザとの対話を前記サーバを介し複数の文書及び対話内容を学習した言語モデルを用いて行うリモート対話手段と、前記サーバとの間の通信状況を確認する通信状況確認手段と、前記通信状況確認手段による通信状況の確認結果に応じて、前記ローカル対話手段による処理と、前記リモート対話手段による処理とを切り替える対話切替手段と、前記対話切替手段が前記ローカル対話手段による処理から前記リモート対話手段による処理に切り替えた場合に、前記ローカル履歴記憶部の前記対話履歴データを前記サーバに送信する履歴送信手段と、して機能させるためのプログラムである。
【発明の効果】
【0007】
本発明によれば、移動中であっても対話を継続して行うことを可能にした対話システム、端末及びプログラムを提供することができる。
【図面の簡単な説明】
【0008】
【図1】第１実施形態に係る対話システムの全体構成図である。
【図2】第１実施形態に係る端末の機能ブロック図である。
【図3】第１実施形態に係る対話サーバの機能ブロック図である。
【図4】第１実施形態に係る対話システムにおける対話例を示す図である。
【図5】第１実施形態に係る対話システムにおける対話と履歴との関係を説明するための図である。
【図6】第１実施形態に係る端末の対話処理を示すフローチャートである。
【図7】第１実施形態に係る端末のローカル処理を示すフローチャートである。
【図8】第１実施形態に係る対話サーバのサーバ処理を示すフローチャートである。
【図9】第２実施形態に係る対話システムの全体構成図である。
【図10】第２実施形態に係る対話サーバ及びオペレータ端末の機能ブロック図である。
【図11】第２実施形態に係る対話サーバのサーバ処理を示すフローチャートである。
【発明を実施するための形態】
【0009】
以下、本発明を実施するための形態について、図を参照しながら説明する。なお、これは、あくまでも一例であって、本発明の技術的範囲は、これに限られるものではない。
（第１実施形態）
＜対話システム１００の全体構成＞
図１は、第１実施形態に係る対話システム１００の全体構成図である。
図２は、第１実施形態に係る端末１の機能ブロック図である。
図３は、第１実施形態に係る対話サーバ４の機能ブロック図である。
図１に示す対話システム１００は、端末１と、対話サーバ４（サーバ）と、言語モデルサーバ６（言語モデル）とを備える。端末１と、対話サーバ４と、言語モデルサーバ６とは、通信ネットワークＮ及び基地局Ｒを介して通信可能に接続されている。
（第１実施形態）
＜対話システム１００の全体構成＞
図１は、第１実施形態に係る対話システム１００の全体構成図である。
図２は、第１実施形態に係る端末１の機能ブロック図である。
図３は、第１実施形態に係る対話サーバ４の機能ブロック図である。
図１に示す対話システム１００は、端末１と、対話サーバ４（サーバ）と、言語モデルサーバ６（言語モデル）とを備える。端末１と、対話サーバ４と、言語モデルサーバ６とは、通信ネットワークＮ及び基地局Ｒを介して通信可能に接続されている。
【0010】
対話システム１００は、例えば、バスの車内ＳＰ１に設置された端末１を用いて、ユーザＰ１が、仮想の相手と対話を行うことを可能にしたバーチャルガイドのシステムである。端末１のディスプレイ２７（表示部）には、対話を行う仮想の相手として、例えば、バスガイドを模した仮想のキャラクタが表示される。そして、対話システム１００では、端末１が通信ネットワークＮに接続されている状態において、対話サーバ４が、言語モデルサーバ６を用いて、バスの位置に応じた案内を端末１に出力させ、また、ユーザＰ１の発話に対する返答をも行う。他方、端末１が通信ネットワークＮに接続されていない状態になった場合においては、端末１が、ユーザＰ１の発話に対する返答を行う。
【0011】
このように、対話システム１００は、端末１の移動中において、通信状態にかかわらずに対話を継続して行うことを可能にしたシステムである。
以下において、対話システム１００を、バスの車内ＳＰ１で利用することを想定して説明するが、これに限定されるものではない。また、以降の説明において、発話する乗客をユーザＰ１として説明する。ユーザＰ１は、１人の特定した乗客に限定されるものではない。
以下において、対話システム１００を、バスの車内ＳＰ１で利用することを想定して説明するが、これに限定されるものではない。また、以降の説明において、発話する乗客をユーザＰ１として説明する。ユーザＰ１は、１人の特定した乗客に限定されるものではない。
【0012】
＜端末１＞
端末１は、例えば、バスの車内ＳＰ１に設置され、ユーザＰ１をはじめとするバスに乗車中の乗客が用いる装置である。図１では、ディスプレイ２７が車内ＳＰ１の天井に設置され、複数の乗客が１つのディスプレイ２７を見ることができるものであり、端末１が１以上のディスプレイ２７を備えるものを例に説明する。しかし、端末１は、これに限定されるものではない。例えば、車内ＳＰ１にスクリーンを取り付けて、ディスプレイ２７に代わってスクリーンに映像を映し出す態様のものであってもよい。また、車内ＳＰ１の各座席にディスプレイが備え付けられたものであってもよい。さらに、端末１は、各乗客が所持するスマートフォンやタブレット等の携帯端末であってもよいし、スマートグラスであってもよい。さらにまた、端末１は、例えば、一般的なパーソナルコンピュータ（ＰＣ）等であってもよい。
端末１は、例えば、バスの車内ＳＰ１に設置され、ユーザＰ１をはじめとするバスに乗車中の乗客が用いる装置である。図１では、ディスプレイ２７が車内ＳＰ１の天井に設置され、複数の乗客が１つのディスプレイ２７を見ることができるものであり、端末１が１以上のディスプレイ２７を備えるものを例に説明する。しかし、端末１は、これに限定されるものではない。例えば、車内ＳＰ１にスクリーンを取り付けて、ディスプレイ２７に代わってスクリーンに映像を映し出す態様のものであってもよい。また、車内ＳＰ１の各座席にディスプレイが備え付けられたものであってもよい。さらに、端末１は、各乗客が所持するスマートフォンやタブレット等の携帯端末であってもよいし、スマートグラスであってもよい。さらにまた、端末１は、例えば、一般的なパーソナルコンピュータ（ＰＣ）等であってもよい。
【0013】
図２に示すように、端末１は、制御部１０と、記憶部２０と、マイク２５（音声入力部）と、スピーカ２６（音声出力部）と、ディスプレイ２７と、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）受信部２８と、通信インタフェース部２９とを備える。
制御部１０は、端末１の全体を制御するＣＰＵ（中央処理装置）である。制御部１０は、記憶部２０に記憶されているＯＳ（オペレーティングシステム）や、各種のアプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。
制御部１０は、端末１の全体を制御するＣＰＵ（中央処理装置）である。制御部１０は、記憶部２０に記憶されているＯＳ（オペレーティングシステム）や、各種のアプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。
【0014】
制御部１０を説明する前に、記憶部２０を説明する。
記憶部２０は、端末１の動作に必要なプログラム、データ等を記憶するためのハードディスク、半導体メモリ素子等の記憶装置である。
記憶部２０は、プログラム記憶部２１と、知識部２２と、端末履歴記憶部２３（ローカル履歴記憶部）とを備える。
プログラム記憶部２１は、プログラムを記憶するための記憶領域である。プログラム記憶部２１は、対話プログラム２１ａ（プログラム）を記憶している。
対話プログラム２１ａは、例えば、次に説明する制御部１０の各種機能を実行するためのプログラムである。なお、制御部１０の各種機能を、１つの対話プログラム２１ａによって実行してもよいし、機能ごとに複数のプログラムによって実行してもよい。
記憶部２０は、端末１の動作に必要なプログラム、データ等を記憶するためのハードディスク、半導体メモリ素子等の記憶装置である。
記憶部２０は、プログラム記憶部２１と、知識部２２と、端末履歴記憶部２３（ローカル履歴記憶部）とを備える。
プログラム記憶部２１は、プログラムを記憶するための記憶領域である。プログラム記憶部２１は、対話プログラム２１ａ（プログラム）を記憶している。
対話プログラム２１ａは、例えば、次に説明する制御部１０の各種機能を実行するためのプログラムである。なお、制御部１０の各種機能を、１つの対話プログラム２１ａによって実行してもよいし、機能ごとに複数のプログラムによって実行してもよい。
【0015】
知識部２２は、例えば、案内をする場所に関する知識を記憶する記憶領域である。知識部２２は、例えば、質問と回答とを対にしたものを記憶したルールベースのものであってもよいし、案内する場所に関する文書を学習した学習モデルであってもよい。知識部２２が学習モデルである場合には、当該学習モデルは、端末１に記憶されるものであるため、後述する言語モデル６ａと比較してモデルサイズの小さいものである。
端末履歴記憶部２３は、端末１に入力された発話内容や、対話サーバ４や端末１が出力した返答を含む対話内容を、時系列に記憶する記憶領域である。端末履歴記憶部２３は、例えば、車両を用いた観光の開始から終了までの間や、目的地到着までの間等の対話内容を、対話履歴データとして記憶する。
端末履歴記憶部２３は、端末１に入力された発話内容や、対話サーバ４や端末１が出力した返答を含む対話内容を、時系列に記憶する記憶領域である。端末履歴記憶部２３は、例えば、車両を用いた観光の開始から終了までの間や、目的地到着までの間等の対話内容を、対話履歴データとして記憶する。
【0016】
次に、制御部１０について説明する。
図１に示す制御部１０は、位置取得部１１と、通信接続確認部１２と、対話切替部１３と、リモート対話部１４と、ローカル対話部１５と、キャラクタ処理部１６と、履歴送信部１７と、履歴登録部１８とを備える。
位置取得部１１は、位置取得手段としての機能を有する。位置取得部１１は、所定の時間間隔でＧＰＳ受信部２８を介して位置情報を取得する。
通信接続確認部１２は、通信状況確認手段としての機能を有する。通信接続確認部１２は、対話サーバ４との間の通信状況を確認する。通信接続確認部１２は、通信ネットワークＮに接続されている場合には、通信状況が通信可であると確認する。また、通信接続確認部１２は、通信ネットワークＮに接続されていない場合には、通信状況が通信不可であると確認する。なお、通信接続確認部１２は、通信ネットワークＮに接続されているが電波が弱い場合には、通信状況が通信不可であると確認してもよい。
図１に示す制御部１０は、位置取得部１１と、通信接続確認部１２と、対話切替部１３と、リモート対話部１４と、ローカル対話部１５と、キャラクタ処理部１６と、履歴送信部１７と、履歴登録部１８とを備える。
位置取得部１１は、位置取得手段としての機能を有する。位置取得部１１は、所定の時間間隔でＧＰＳ受信部２８を介して位置情報を取得する。
通信接続確認部１２は、通信状況確認手段としての機能を有する。通信接続確認部１２は、対話サーバ４との間の通信状況を確認する。通信接続確認部１２は、通信ネットワークＮに接続されている場合には、通信状況が通信可であると確認する。また、通信接続確認部１２は、通信ネットワークＮに接続されていない場合には、通信状況が通信不可であると確認する。なお、通信接続確認部１２は、通信ネットワークＮに接続されているが電波が弱い場合には、通信状況が通信不可であると確認してもよい。
【0017】
対話切替部１３は、対話切替手段としての機能を有する。対話切替部１３は、通信接続確認部１２による通信状況の確認結果に応じて、ローカル対話部１５による処理と、リモート対話部１４による処理とを切り替える。より具体的には、対話切替部１３は、通信接続確認部１２による通信状況が通信可である場合には、リモート対話部１４による処理を行うようにし、通信接続確認部１２による通信状況が通信不可の場合に限り、ローカル対話部１５による処理を行うように処理を切り替える。
また、対話切替部１３は、リモート対話部１４による処理中において対話サーバ４から一定期間内に対話の応答である返答データを受信しない場合には、ローカル対話部１５による処理を行うように切り替える。
また、対話切替部１３は、リモート対話部１４による処理中において対話サーバ４から一定期間内に対話の応答である返答データを受信しない場合には、ローカル対話部１５による処理を行うように切り替える。
【0018】
リモート対話部１４は、リモート対話手段及び位置送信手段としての機能を有する。リモート対話部１４は、ユーザＰ１との対話を対話サーバ４を介して行う。より具体的には、リモート対話部１４は、ユーザＰ１の発話を、マイク２５を介して発話データとして取得し、当該発話データを対話サーバ４に送信する。また、リモート対話部１４は、位置取得部１１が取得した位置情報を、対話サーバ４に送信する。さらに、リモート対話部１４は、対話サーバ４から受信した返答データを、スピーカ２６を介して出力する。
【0019】
ローカル対話部１５は、ローカル対話手段としての機能を有する。ローカル対話部１５は、ユーザＰ１との対話を知識部２２を用いて行う。より具体的には、ローカル対話部１５は、ユーザＰ１の発話を、マイク２５を介して発話データとして取得し、当該発話データを、例えば、公知の音声認識の技術を用いてテキストにして知識部２２に入力する。そして、ローカル対話部１５は、知識部２２から出力された返答に係るテキストを、公知の技術を用いて音声である返答データに変換し、スピーカ２６を介して出力する。
キャラクタ処理部１６は、キャラクタ処理手段としての機能を有する。キャラクタ処理部１６は、対話相手としてキャラクタをディスプレイ２７に出力する。そして、キャラクタ処理部１６は、相手方の返答に対応してキャラクタを動作させる。
キャラクタ処理部１６は、キャラクタ処理手段としての機能を有する。キャラクタ処理部１６は、対話相手としてキャラクタをディスプレイ２７に出力する。そして、キャラクタ処理部１６は、相手方の返答に対応してキャラクタを動作させる。
【0020】
履歴送信部１７は、履歴送信手段としての機能を有する。履歴送信部１７は、対話切替部１３がローカル対話部１５による処理からリモート対話部１４による処理に切り替えた場合に、端末履歴記憶部２３の対話履歴データを、対話サーバ４に送信する。その際、履歴送信部１７は、少なくともローカル対話部１５による処理の間に生じた対話履歴データを、対話サーバ４に送信する。
履歴登録部１８は、ユーザＰ１と相手方との対話内容を、対話履歴データとして端末履歴記憶部２３に登録する。
なお、これらの各機能の詳細については、後述する。
履歴登録部１８は、ユーザＰ１と相手方との対話内容を、対話履歴データとして端末履歴記憶部２３に登録する。
なお、これらの各機能の詳細については、後述する。
【0021】
マイク２５は、ユーザＰ１の発話を取得するために用いられる音声入力装置である。マイク２５は、例えば、ディスプレイ２７の近傍に設けられる。ユーザＰ１の発話内容は、マイク２５を介した音声データとして制御部１０が取得できる。
スピーカ２６は、対話の相手方の発話内容や返答内容に係る音声を出力する音声出力装置である。スピーカ２６は、例えば、ディスプレイ２７の近傍に設けられる。スピーカ２６は、制御部１０が出力した音声データを音声として出力する。
ディスプレイ２７は、例えば、液晶パネル等で構成される表示装置である。
ＧＰＳ受信部２８は、例えば、衛星から受信した電波を利用して、端末１の現在の位置情報（緯度及び経度）を計測するものである。
通信インタフェース部２９は、基地局Ｒを経由し、通信ネットワークＮを介して対話サーバ４との間の通信を行うためのインタフェースである。
スピーカ２６は、対話の相手方の発話内容や返答内容に係る音声を出力する音声出力装置である。スピーカ２６は、例えば、ディスプレイ２７の近傍に設けられる。スピーカ２６は、制御部１０が出力した音声データを音声として出力する。
ディスプレイ２７は、例えば、液晶パネル等で構成される表示装置である。
ＧＰＳ受信部２８は、例えば、衛星から受信した電波を利用して、端末１の現在の位置情報（緯度及び経度）を計測するものである。
通信インタフェース部２９は、基地局Ｒを経由し、通信ネットワークＮを介して対話サーバ４との間の通信を行うためのインタフェースである。
【0022】
＜対話サーバ４＞
対話サーバ４は、端末１と通信接続されている場合に、端末１から受信した発話データに基づく返答や、端末１から受信した位置情報に基づく対話処理をするサーバである。
図３に示すように、対話サーバ４は、制御部４０と、記憶部５０と、通信インタフェース部５９とを備える。
制御部４０は、対話サーバ４の全体を制御するＣＰＵである。制御部４０は、記憶部５０に記憶されているＯＳや、各種のアプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。
対話サーバ４は、端末１と通信接続されている場合に、端末１から受信した発話データに基づく返答や、端末１から受信した位置情報に基づく対話処理をするサーバである。
図３に示すように、対話サーバ４は、制御部４０と、記憶部５０と、通信インタフェース部５９とを備える。
制御部４０は、対話サーバ４の全体を制御するＣＰＵである。制御部４０は、記憶部５０に記憶されているＯＳや、各種のアプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。
【0023】
制御部４０は、位置受信部４１と、発話受信部４２と、対話処理部４３と、履歴受信部４７と、履歴登録部４８とを備える。
位置受信部４１は、位置受信手段としての機能を有する。位置受信部４１は、端末１か位置情報を受信する。
発話受信部４２は、発話受信手段としての機能を有する。発話受信部４２は、端末１から発話データを受信する。
対話処理部４３は、対話処理手段としての機能を有する。対話処理部４３は、受信した発話データを、例えば、公知の音声認識の技術を用いてテキストにして、サーバ履歴記憶部５３に記憶された対話履歴データ及び位置受信部４１が受信した位置情報と共に言語モデルサーバ６に送信する。そして、対話処理部４３は、言語モデルサーバ６から返答内容を受信し、公知の技術を用いて音声である返答データに変換して端末１に送信する。
位置受信部４１は、位置受信手段としての機能を有する。位置受信部４１は、端末１か位置情報を受信する。
発話受信部４２は、発話受信手段としての機能を有する。発話受信部４２は、端末１から発話データを受信する。
対話処理部４３は、対話処理手段としての機能を有する。対話処理部４３は、受信した発話データを、例えば、公知の音声認識の技術を用いてテキストにして、サーバ履歴記憶部５３に記憶された対話履歴データ及び位置受信部４１が受信した位置情報と共に言語モデルサーバ６に送信する。そして、対話処理部４３は、言語モデルサーバ６から返答内容を受信し、公知の技術を用いて音声である返答データに変換して端末１に送信する。
【0024】
履歴受信部４７は、端末１が送信した対話履歴データを受信する。
履歴登録部４８は、履歴登録手段としての機能を有する。履歴登録部４８は、履歴受信部４７が受信した対話履歴データを、例えば、端末１を識別する端末識別情報（ユーザ）に対応付けてサーバ履歴記憶部５３に登録する。また、履歴登録部４８は、対話処理部４３によって取得した発話内容や返答内容を、対話履歴データとして、端末識別情報に対応付けてサーバ履歴記憶部５３に登録する。
履歴登録部４８は、履歴登録手段としての機能を有する。履歴登録部４８は、履歴受信部４７が受信した対話履歴データを、例えば、端末１を識別する端末識別情報（ユーザ）に対応付けてサーバ履歴記憶部５３に登録する。また、履歴登録部４８は、対話処理部４３によって取得した発話内容や返答内容を、対話履歴データとして、端末識別情報に対応付けてサーバ履歴記憶部５３に登録する。
【0025】
記憶部５０は、対話サーバ４の動作に必要なプログラム、データ等を記憶するためのハードディスク、半導体メモリ素子等の記憶装置である。
記憶部５０は、プログラム記憶部５１と、サーバ履歴記憶部５３とを備える。
プログラム記憶部５１は、プログラムを記憶するための記憶領域である。プログラム記憶部５１は、制御部４０の各種機能を実行するためのプログラムを含む、各種のプログラムを記憶する。
サーバ履歴記憶部５３は、対話サーバ４と端末１との間での対話内容や、端末１から受信した対話履歴データを、端末識別情報に対応付けて時系列に記憶する記憶領域である。
通信インタフェース部５９は、通信ネットワークＮを介して端末１及び言語モデルサーバ６との間の通信を行うためのインタフェースである。
記憶部５０は、プログラム記憶部５１と、サーバ履歴記憶部５３とを備える。
プログラム記憶部５１は、プログラムを記憶するための記憶領域である。プログラム記憶部５１は、制御部４０の各種機能を実行するためのプログラムを含む、各種のプログラムを記憶する。
サーバ履歴記憶部５３は、対話サーバ４と端末１との間での対話内容や、端末１から受信した対話履歴データを、端末識別情報に対応付けて時系列に記憶する記憶領域である。
通信インタフェース部５９は、通信ネットワークＮを介して端末１及び言語モデルサーバ６との間の通信を行うためのインタフェースである。
【0026】
なお、対話サーバ４を構成するハードウェアの数に制限はない。必要に応じて、１又は複数で構成してもよい。また、対話サーバ４のハードウェアは、必要に応じてウェブサーバ、ＤＢ（データベース）サーバ、アプリケーションサーバ等の各種サーバを含んで構成してもよく、１台のサーバで構成しても、それぞれ別のサーバで構成してもよい。また、対話サーバ４は、例えば、クラウドであってもよい。
コンピュータとは、制御部、記憶装置等を備えた情報処理装置をいい、端末１及び対話サーバ４は、各々制御部、記憶部等を備えた情報処理装置であり、コンピュータの概念に含まれる。
コンピュータとは、制御部、記憶装置等を備えた情報処理装置をいい、端末１及び対話サーバ４は、各々制御部、記憶部等を備えた情報処理装置であり、コンピュータの概念に含まれる。
【0027】
＜言語モデルサーバ６＞
図１に示す言語モデルサーバ６は、複数の文書及び対話内容を学習した言語モデル６ａを備えたサーバである。言語モデル６ａは、膨大なテキストデータから言語のパターンを学習し、テキスト生成や要約等のテキストに関わるタスクを高い精度で行うことを可能にした巨大なニューラルネットワークである深層学習モデルであり、例えば、大規模言語モデル（ＬＬＭ）である。また、言語モデル６ａは、生成ＡＩ（ジェネレーティブＡＩ）であってもよい。なお、言語モデルサーバ６は、言語モデル６ａが大規模な計算指令が必要なものであるため、例えば、クラウドであってもよい。
図１に示す言語モデルサーバ６は、複数の文書及び対話内容を学習した言語モデル６ａを備えたサーバである。言語モデル６ａは、膨大なテキストデータから言語のパターンを学習し、テキスト生成や要約等のテキストに関わるタスクを高い精度で行うことを可能にした巨大なニューラルネットワークである深層学習モデルであり、例えば、大規模言語モデル（ＬＬＭ）である。また、言語モデル６ａは、生成ＡＩ（ジェネレーティブＡＩ）であってもよい。なお、言語モデルサーバ６は、言語モデル６ａが大規模な計算指令が必要なものであるため、例えば、クラウドであってもよい。
【0028】
基地局Ｒは、無線通信の基地局であって、端末１と対話サーバ４との間で通信をするための中継を行う。基地局Ｒは、例えば、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）や、携帯電話事業者の無線局等である。
通信ネットワークＮは、各種のサーバ間や、各種のサーバと基地局Ｒとの間のネットワークである。通信ネットワークＮは、例えば、インターネット回線等の通信網であり、有線であるか無線であるかを問わない。
通信ネットワークＮは、各種のサーバ間や、各種のサーバと基地局Ｒとの間のネットワークである。通信ネットワークＮは、例えば、インターネット回線等の通信網であり、有線であるか無線であるかを問わない。
【0029】
＜処理の説明＞
次に、対話システム１００で行う処理について説明する。
図４は、第１実施形態に係る対話システム１００における対話例を示す図である。
図５は、第１実施形態に係る対話システム１００における対話と履歴との関係を説明するための図である。
図４に示すように、対話システム１００は、案内が開始されると、まず、位置情報に基づく対話Ｒ１が端末１から出力される。端末１は、通信状況が通信可であるため、リモートでの対話処理を行う。そのため、端末１から対話サーバ４に対して位置情報が送信され、位置情報に基づく対話Ｒ１を、対話サーバ４が端末１に送信することで、対話Ｒ１が端末１に出力される。対話Ｒ１は、位置情報を言語モデル６ａに入力することで言語モデル６ａから出力されたものである。なお、案内開始の対話Ｒ１は、例えば、位置情報が所定の位置の場合に、所定の位置に対応した対話Ｒ１を記憶部５０から取得して出力するものであってもよい。
次に、対話システム１００で行う処理について説明する。
図４は、第１実施形態に係る対話システム１００における対話例を示す図である。
図５は、第１実施形態に係る対話システム１００における対話と履歴との関係を説明するための図である。
図４に示すように、対話システム１００は、案内が開始されると、まず、位置情報に基づく対話Ｒ１が端末１から出力される。端末１は、通信状況が通信可であるため、リモートでの対話処理を行う。そのため、端末１から対話サーバ４に対して位置情報が送信され、位置情報に基づく対話Ｒ１を、対話サーバ４が端末１に送信することで、対話Ｒ１が端末１に出力される。対話Ｒ１は、位置情報を言語モデル６ａに入力することで言語モデル６ａから出力されたものである。なお、案内開始の対話Ｒ１は、例えば、位置情報が所定の位置の場合に、所定の位置に対応した対話Ｒ１を記憶部５０から取得して出力するものであってもよい。
【0030】
それを聞いたユーザＰ１が質問Ｑ１をした際、端末１は、依然として通信状況が通信可である。そのため、端末１は、リモートでの対話処理を行う。端末１は、対話サーバ４に質問Ｑ１を送信することで、対話サーバ４は、返答Ａ１を端末１に出力する。返答Ａ１は、質問Ｑ１と対話履歴データとして対話Ｒ１とを言語モデル６ａに入力することで、言語モデル６ａから出力されたものである。
次に、ユーザＰ１が質問Ｑ２をした場合、端末１は、通信状況が通信不可になっている。そのため、端末１は、ローカルでの対話処理を行う。具体的には、端末１は、知識部２２を用いて質問Ｑ２に対する返答Ａ２を取得し、出力する。
次に、ユーザＰ１が質問Ｑ２をした場合、端末１は、通信状況が通信不可になっている。そのため、端末１は、ローカルでの対話処理を行う。具体的には、端末１は、知識部２２を用いて質問Ｑ２に対する返答Ａ２を取得し、出力する。
【0031】
その後、ユーザＰ１が質問Ｑ３をした場合、端末１は、通信状況が通信可である。そのため、端末１は、リモートでの対話処理を行う。端末１は、対話サーバ４に質問Ｑ３と共に、対話履歴データとして、ローカルでの対話処理の対話履歴である質問Ｑ２と返答Ａ２とを送信することで、対話サーバ４は、返答Ａ３を端末１に出力する。返答Ａ３は、質問Ｑ３と、対話履歴データとして質問Ｑ１から返答Ａ２までの間の対話とを言語モデル６ａに入力することで言語モデル６ａから出力されたものである。
図５は、返答Ａ３を生成する態様を示す。サーバ履歴記憶部５３には、ローカルでの対話処理男の対話履歴データも登録されている。そのため、返答Ａ３は、端末１のみで行ったローカルでの対話処理での対話履歴データをも用いて生成されたものである。
図５は、返答Ａ３を生成する態様を示す。サーバ履歴記憶部５３には、ローカルでの対話処理男の対話履歴データも登録されている。そのため、返答Ａ３は、端末１のみで行ったローカルでの対話処理での対話履歴データをも用いて生成されたものである。
【0032】
次に、上記で説明した処理を、フローチャートに基づいて説明する。
まず先に、端末１における処理を説明する。
図６は、第１実施形態に係る端末１の対話処理を示すフローチャートである。
図７は、第１実施形態に係る端末１のローカル処理を示すフローチャートである。
図６のステップＳ（以下、「ステップＳ」を、単に「Ｓ」という。）１１において、端末１の位置取得部１１は、端末１の位置情報を、ＧＰＳ受信部２８を介して取得する。位置取得部１１は、例えば、１分おき等の所定の時間間隔で位置情報を取得することができる。
まず先に、端末１における処理を説明する。
図６は、第１実施形態に係る端末１の対話処理を示すフローチャートである。
図７は、第１実施形態に係る端末１のローカル処理を示すフローチャートである。
図６のステップＳ（以下、「ステップＳ」を、単に「Ｓ」という。）１１において、端末１の位置取得部１１は、端末１の位置情報を、ＧＰＳ受信部２８を介して取得する。位置取得部１１は、例えば、１分おき等の所定の時間間隔で位置情報を取得することができる。
【0033】
Ｓ１２において、通信接続確認部１２は、通信状況を確認し、通信状況が通信可であるか否かを判断する。通信状況が通信可である場合（Ｓ１２：ＹＥＳ）には、通信接続確認部１２は、処理をＳ１３に移し、対話切替部１３は、リモート対話部１４による処理に切り替える。他方、通信状況が通信可ではない場合（Ｓ１２：ＮＯ）には、通信接続確認部１２は、処理をＳ１９に移し、対話切替部１３は、ローカル対話部１５による処理に切り替える。
Ｓ１３において、リモート対話部１４は、ユーザＰ１の発話を受け付けたか否かを判断する。ユーザＰ１の発話を受け付けた場合（Ｓ１３：ＹＥＳ）には、リモート対話部１４は、処理をＳ１４に移す。他方、ユーザＰ１の発話を受け付けていない場合（Ｓ１３：ＮＯ）には、リモート対話部１４は、処理をＳ１５に移す。
Ｓ１３において、リモート対話部１４は、ユーザＰ１の発話を受け付けたか否かを判断する。ユーザＰ１の発話を受け付けた場合（Ｓ１３：ＹＥＳ）には、リモート対話部１４は、処理をＳ１４に移す。他方、ユーザＰ１の発話を受け付けていない場合（Ｓ１３：ＮＯ）には、リモート対話部１４は、処理をＳ１５に移す。
【0034】
Ｓ１４において、リモート対話部１４は、Ｓ１１の処理で取得した位置情報と、発話データとを、対話サーバ４に送信する。その後、制御部１０は、処理をＳ１６に移す。
Ｓ１５において、リモート対話部１４は、Ｓ１１の処理で取得した位置情報を、対話サーバ４に送信する。
Ｓ１６において、対話切替部１３は、一定期間内に対話サーバ４が送信する返答データを受信したか否かを判断する。ここで、一定期間は、対話サーバ４に送信した時点を開始時間とした経過時間であり、例えば、１０秒等である。一定期間内に返答データを受信した場合（Ｓ１６：ＹＥＳ）には、対話切替部１３は、処理をＳ１７に移す。他方、一定期間内に返答データを受信しなかった場合（Ｓ１６：ＮＯ）には、対話切替部１３は、処理をＳ１９に移す。一定期間内に返答データを受信しなかった場合とは、例えば、処理の途中で通信状況が通信不可になった場合等が考えられる。そこで、一定期間内に返答データを受信しなかった場合には、対話切替部１３は、ローカル対話部１５による処理に切り替える。
Ｓ１５において、リモート対話部１４は、Ｓ１１の処理で取得した位置情報を、対話サーバ４に送信する。
Ｓ１６において、対話切替部１３は、一定期間内に対話サーバ４が送信する返答データを受信したか否かを判断する。ここで、一定期間は、対話サーバ４に送信した時点を開始時間とした経過時間であり、例えば、１０秒等である。一定期間内に返答データを受信した場合（Ｓ１６：ＹＥＳ）には、対話切替部１３は、処理をＳ１７に移す。他方、一定期間内に返答データを受信しなかった場合（Ｓ１６：ＮＯ）には、対話切替部１３は、処理をＳ１９に移す。一定期間内に返答データを受信しなかった場合とは、例えば、処理の途中で通信状況が通信不可になった場合等が考えられる。そこで、一定期間内に返答データを受信しなかった場合には、対話切替部１３は、ローカル対話部１５による処理に切り替える。
【0035】
Ｓ１７において、履歴登録部１８は、発話及び返答からなる対話履歴データを端末履歴記憶部２３に登録する。
Ｓ１８において、リモート対話部１４は、受信した返答データを、スピーカ２６に出力する。そうすることで、ユーザＰ１は、自身の発話に対する返答を聞くことができる。
なお、当該処理を行っている間、キャラクタ処理部１６は、端末１のディスプレイ２７に、キャラクタを出力する。また、キャラクタ処理部１６は、返答データをスピーカ２６に出力している間、キャラクタがしゃべっているように口を動かす動作処理を行う。その後、制御部１０は、処理をＳ１１に移す。
Ｓ１８において、リモート対話部１４は、受信した返答データを、スピーカ２６に出力する。そうすることで、ユーザＰ１は、自身の発話に対する返答を聞くことができる。
なお、当該処理を行っている間、キャラクタ処理部１６は、端末１のディスプレイ２７に、キャラクタを出力する。また、キャラクタ処理部１６は、返答データをスピーカ２６に出力している間、キャラクタがしゃべっているように口を動かす動作処理を行う。その後、制御部１０は、処理をＳ１１に移す。
【0036】
他方、Ｓ１９において、ローカル対話部１５は、ローカル処理を行う。
ここで、ローカル処理について、図７に基づき説明する。
図７のＳ３１において、ローカル対話部１５は、ユーザＰ１の発話を受け付けたか否かを判断する。ユーザＰ１の発話を受け付けた場合（Ｓ３１：ＹＥＳ）には、ローカル対話部１５は、処理をＳ３２に移す。他方、ユーザＰ１の発話を受け付けていない場合（Ｓ３１：ＮＯ）には、ローカル対話部１５は、処理をＳ３５に移す。なお、図６のＳ１６の処理でＮＯになったことにより本処理に遷移した場合には、ユーザＰ１の発話を受け付けた（Ｓ３１：ＹＥＳ）ものとして処理を進める。
ここで、ローカル処理について、図７に基づき説明する。
図７のＳ３１において、ローカル対話部１５は、ユーザＰ１の発話を受け付けたか否かを判断する。ユーザＰ１の発話を受け付けた場合（Ｓ３１：ＹＥＳ）には、ローカル対話部１５は、処理をＳ３２に移す。他方、ユーザＰ１の発話を受け付けていない場合（Ｓ３１：ＮＯ）には、ローカル対話部１５は、処理をＳ３５に移す。なお、図６のＳ１６の処理でＮＯになったことにより本処理に遷移した場合には、ユーザＰ１の発話を受け付けた（Ｓ３１：ＹＥＳ）ものとして処理を進める。
【0037】
Ｓ３２において、ローカル対話部１５は、発話データを知識部２２に入力する。その際、ローカル対話部１５は、発話データを音声からテキストに変換した上で知識部２２に入力する。
Ｓ３３において、ローカル対話部１５は、知識部２２が出力した返答をテキストから音声に変換した上で、スピーカ２６を介して出力する。
Ｓ３４において、履歴登録部１８は、発話及び返答からなる対話履歴データを、端末履歴記憶部２３に登録する。
Ｓ３３において、ローカル対話部１５は、知識部２２が出力した返答をテキストから音声に変換した上で、スピーカ２６を介して出力する。
Ｓ３４において、履歴登録部１８は、発話及び返答からなる対話履歴データを、端末履歴記憶部２３に登録する。
【0038】
Ｓ３５において、通信接続確認部１２は、対話サーバ４との間の通信状況を確認し、通信状況が通信可であるか否かを判断する。通信状況が通信可である場合（Ｓ３５：ＹＥＳ）には、通信接続確認部１２は、処理をＳ３６に移し、対話切替部１３は、リモート対話部１４による処理に切り替える。他方、通信状況が通信可ではない場合（Ｓ３５：ＮＯ）には、通信接続確認部１２は、処理を図６のＳ１１に移す。
Ｓ３６において、履歴送信部１７は、少なくともローカルでの対話処理で端末履歴記憶部２３に登録した対話履歴データを、対話サーバ４に送信する。その後、制御部１０は、処理を図６のＳ１１に移す。
Ｓ３６において、履歴送信部１７は、少なくともローカルでの対話処理で端末履歴記憶部２３に登録した対話履歴データを、対話サーバ４に送信する。その後、制御部１０は、処理を図６のＳ１１に移す。
【0039】
次に、対話サーバ４の処理を説明する。
図８は、第１実施形態に係る対話サーバ４のサーバ処理を示すフローチャートである。
対話サーバ４の処理は、端末１が対話サーバ４に情報を送信し（図６のＳ１４、Ｓ１５及び図７のＳ３６を参照）、対話サーバ４が情報を受信したことを契機に処理を開始する。
図８のＳ４１において、位置受信部４１は、端末１から位置情報を受信したか否かを判断する。位置情報を受信した場合（Ｓ４１：ＹＥＳ）には、制御部４０は、処理をＳ４２に移す。他方、位置情報を受信していない場合（Ｓ４１：ＮＯ）には、制御部４０は、処理をＳ４６に移す。
図８は、第１実施形態に係る対話サーバ４のサーバ処理を示すフローチャートである。
対話サーバ４の処理は、端末１が対話サーバ４に情報を送信し（図６のＳ１４、Ｓ１５及び図７のＳ３６を参照）、対話サーバ４が情報を受信したことを契機に処理を開始する。
図８のＳ４１において、位置受信部４１は、端末１から位置情報を受信したか否かを判断する。位置情報を受信した場合（Ｓ４１：ＹＥＳ）には、制御部４０は、処理をＳ４２に移す。他方、位置情報を受信していない場合（Ｓ４１：ＮＯ）には、制御部４０は、処理をＳ４６に移す。
【0040】
Ｓ４２において、発話受信部４２は、端末１から発話データを受信したか否かを判断する。発話データを受信した場合（Ｓ４２：ＹＥＳ）には、制御部４０は、処理をＳ４３に移す。他方、発話データを受信していない場合（Ｓ４２：ＮＯ）には、制御部４０は、処理をＳ４４に移す。
Ｓ４３において、対話処理部４３は、受信した発話データと位置情報とを、端末１の端末識別情報に対応付けられた対話履歴データと共に、言語モデルサーバ６に送信する。ここで、発話データは、テキストに変換したものを言語モデルサーバ６に送信する。また、位置情報は、例えば、緯度経度から住所に変換したものを言語モデルサーバ６に送信する。言語モデルサーバ６では、受信したデータを言語モデル６ａに入力する。その後、制御部４０は、処理をＳ４５に移す。
Ｓ４３において、対話処理部４３は、受信した発話データと位置情報とを、端末１の端末識別情報に対応付けられた対話履歴データと共に、言語モデルサーバ６に送信する。ここで、発話データは、テキストに変換したものを言語モデルサーバ６に送信する。また、位置情報は、例えば、緯度経度から住所に変換したものを言語モデルサーバ６に送信する。言語モデルサーバ６では、受信したデータを言語モデル６ａに入力する。その後、制御部４０は、処理をＳ４５に移す。
【0041】
Ｓ４４において、対話処理部４３は、受信した位置情報を、端末１の端末識別情報に対応付けられた対話履歴データと共に、言語モデルサーバ６に送信する。言語モデルサーバ６では、受信したデータを言語モデル６ａに入力する。
Ｓ４５において、対話処理部４３は、言語モデル６ａが出力し、言語モデルサーバ６から受信した返答データを、端末１に送信する。ここで、対話処理部４３は、言語モデルサーバ６から受信した返答内容を、返答データとして音声化してから、端末１に送信する。その後、制御部４０は、本処理を終了する。
Ｓ４５において、対話処理部４３は、言語モデル６ａが出力し、言語モデルサーバ６から受信した返答データを、端末１に送信する。ここで、対話処理部４３は、言語モデルサーバ６から受信した返答内容を、返答データとして音声化してから、端末１に送信する。その後、制御部４０は、本処理を終了する。
【0042】
他方、Ｓ４６において、履歴受信部４７は、端末１から対話履歴データを受信したか否かを判断する。対話履歴データを受信した場合（Ｓ４６：ＹＥＳ）には、履歴受信部４７は、処理をＳ４７に移す。他方、対話履歴データを受信していない場合（Ｓ４６：ＮＯ）には、制御部４０は、本処理を終了する。
Ｓ４７において、履歴登録部４８は、対話履歴データを、端末識別情報に対応付けてサーバ履歴記憶部５３に登録する。その後、制御部４０は、本処理を終了する。
Ｓ４７において、履歴登録部４８は、対話履歴データを、端末識別情報に対応付けてサーバ履歴記憶部５３に登録する。その後、制御部４０は、本処理を終了する。
【0043】
このように、第１実施形態によれば、対話システム１００は、以下のような効果がある。
（１）端末１は、ユーザＰ１と、ユーザＰ１が対話をする相手方との間の対話内容である対話履歴データを記憶する端末履歴記憶部２３と、ユーザＰ１との対話を特定の知識を有する知識部２２を用いて行うローカル対話部１５と、ユーザＰ１との対話を対話サーバ４を介して行うリモート対話部１４と、対話サーバ４との間の通信状況を確認する通信接続確認部１２と、通信接続確認部１２による通信状況の確認結果に応じて、ローカル対話部１５による処理と、リモート対話部１４による処理とを切り替える対話切替部１３と、対話切替部１３がローカル対話部１５による処理からリモート対話部１４による処理に切り替えた場合に、端末履歴記憶部２３の対話履歴データを対話サーバ４に送信する履歴送信部１７とを備える。そして、対話サーバ４は、端末１から受信した対話履歴データを、端末識別情報に対応付けてサーバ履歴記憶部５３に登録する。
（１）端末１は、ユーザＰ１と、ユーザＰ１が対話をする相手方との間の対話内容である対話履歴データを記憶する端末履歴記憶部２３と、ユーザＰ１との対話を特定の知識を有する知識部２２を用いて行うローカル対話部１５と、ユーザＰ１との対話を対話サーバ４を介して行うリモート対話部１４と、対話サーバ４との間の通信状況を確認する通信接続確認部１２と、通信接続確認部１２による通信状況の確認結果に応じて、ローカル対話部１５による処理と、リモート対話部１４による処理とを切り替える対話切替部１３と、対話切替部１３がローカル対話部１５による処理からリモート対話部１４による処理に切り替えた場合に、端末履歴記憶部２３の対話履歴データを対話サーバ４に送信する履歴送信部１７とを備える。そして、対話サーバ４は、端末１から受信した対話履歴データを、端末識別情報に対応付けてサーバ履歴記憶部５３に登録する。
【0044】
よって、端末１では、通信状況の確認結果に応じて、ユーザＰ１と対話をする相手を、端末１に有する知識部２２を用いたローカルでの対話処理によって行うか、対話サーバ４を介したリモートでの対話処理によって行うかを切り替えることができる。また、ローカルでの対話処理からリモートでの対話処理に切り替えた場合に、ローカルでの対話処理での対話履歴データを、対話サーバ４に送信するので、対話サーバ４には、端末１と接続されていない間に端末１内で行われた対話に係る履歴をも有することができる。
【0045】
（２）端末１の履歴送信部１７は、少なくともローカル対話部１５による処理の間に生じた対話履歴データを、対話サーバ４に送信する。
よって、ユーザＰ１がローカル対話部１５による処理によって生じた対話履歴を、対話サーバ４に送信するので、時系列に行われたユーザＰ１と相手方との対話に係る最小限の対話履歴データを、対話サーバ４が有することができる。
よって、ユーザＰ１がローカル対話部１５による処理によって生じた対話履歴を、対話サーバ４に送信するので、時系列に行われたユーザＰ１と相手方との対話に係る最小限の対話履歴データを、対話サーバ４が有することができる。
【0046】
（３）端末１の対話切替部１３は、リモート対話部１４による処理中において対話サーバ４から一定期間内に対話の応答である返答データを受信しない場合には、ローカル対話部１５による処理に切り替える。
よって、ユーザＰ１が返答を待ち続けることがなく、対話サーバ４からの返答がない場合には、ローカル対話部１５による処理に切り替えることよって、対話を継続させることができる。
よって、ユーザＰ１が返答を待ち続けることがなく、対話サーバ４からの返答がない場合には、ローカル対話部１５による処理に切り替えることよって、対話を継続させることができる。
【0047】
（４）対話サーバ４は、端末１からユーザＰ１の発話データを受信する発話受信部４２と、発話受信部４２が受信した発話データと、サーバ履歴記憶部５３に記憶されたユーザＰ１の対話履歴データとを、複数の文書及び対話内容を学習した言語モデル６ａに入力し、言語モデル６ａが出力した返答データを、端末１に送信する対話処理部４３を備える。
よって、ユーザＰ１の発話に対する返答を、発話と、それまでの対話履歴とから言語モデル６ａが生成したものにできる。その結果、違和感のないシームレスな対話をユーザＰ１に提供できる。
よって、ユーザＰ１の発話に対する返答を、発話と、それまでの対話履歴とから言語モデル６ａが生成したものにできる。その結果、違和感のないシームレスな対話をユーザＰ１に提供できる。
【0048】
（５）端末１は、位置情報を所定の時間間隔で取得する位置取得部１１を備え、リモート対話部１４は、当該リモート対話部１４による処理の間に位置取得部１１が取得した位置情報を、対話サーバ４に送信し、対話サーバ４は、位置情報を端末１から受信する位置受信部４１を備え、対話サーバ４の対話処理部４３は、位置情報をさらに言語モデル６ａに入力する。
よって、ユーザＰ１の発話に対する返答を、発話と、それまでの対話履歴と、位置情報とから言語モデル６ａが生成したものにできる。その結果、さらにユーザＰ１の位置情報をも加味した返答を、ユーザＰ１に提供できる。
よって、ユーザＰ１の発話に対する返答を、発話と、それまでの対話履歴と、位置情報とから言語モデル６ａが生成したものにできる。その結果、さらにユーザＰ１の位置情報をも加味した返答を、ユーザＰ１に提供できる。
【0049】
（６）発話データ及び返答データは、音声データであり、端末１は、発話データを取得するマイク２５と、返答データを出力するスピーカ２６と、を備える。
よって、ユーザＰ１は、音声による対話を行うことができる。
よって、ユーザＰ１は、音声による対話を行うことができる。
【0050】
（７）端末１は、相手方に対応したキャラクタを出力するディスプレイ２７と、相手方の返答に対応してキャラクタを動作させるキャラクタ処理部１６と、を備える。
よって、ユーザＰ１は、キャラクタと対話をしているように感じることができる。また、キャラクタが返答に対応した動作をすることで、キャラクタの動作を自然なものにできる。
よって、ユーザＰ１は、キャラクタと対話をしているように感じることができる。また、キャラクタが返答に対応した動作をすることで、キャラクタの動作を自然なものにできる。
【0051】
（第２実施形態）
第２実施形態では、端末のユーザとの対話を、言語モデルに代わってオペレータが行うものについて説明する。なお、以降の説明において、上述した第１実施形態と同様の機能を果たす部分には、同一の符号又は末尾に同一の符号を付して、重複する説明を適宜省略する。
第２実施形態では、端末のユーザとの対話を、言語モデルに代わってオペレータが行うものについて説明する。なお、以降の説明において、上述した第１実施形態と同様の機能を果たす部分には、同一の符号又は末尾に同一の符号を付して、重複する説明を適宜省略する。
【0052】
＜対話システム２００の全体構成＞
図９は、第２実施形態に係る対話システム２００の全体構成図である。
図１０は、第２実施形態に係る対話サーバ２０４及びオペレータ端末２０７の機能ブロック図である。
図９に示す対話システム２００は、端末１と、対話サーバ２０４と、オペレータ端末２０７（相手方端末）とを備える。端末１と、対話サーバ２０４と、オペレータ端末２０７とは、通信ネットワークＮ及び基地局Ｒを介して通信可能に接続されている。
図９は、第２実施形態に係る対話システム２００の全体構成図である。
図１０は、第２実施形態に係る対話サーバ２０４及びオペレータ端末２０７の機能ブロック図である。
図９に示す対話システム２００は、端末１と、対話サーバ２０４と、オペレータ端末２０７（相手方端末）とを備える。端末１と、対話サーバ２０４と、オペレータ端末２０７とは、通信ネットワークＮ及び基地局Ｒを介して通信可能に接続されている。
【0053】
対話システム２００は、例えば、バスの車内ＳＰ１に設置された端末１を用いて、ユーザＰ１が、自宅等の室内ＳＰ２にいるオペレータＰ２を相手に対話を行うことを可能にした、遠隔ガイドのシステムである。対話システム１００では、端末１が通信ネットワークＮに接続されている状態において、対話サーバ２０４が、オペレータ端末２０７に発話データを送信する仲介を行う。オペレータＰ２は、オペレータ端末２０７から返答データを対話サーバ２０４に送信するので、対話サーバ２０４から端末１に返答データが送信される。また、端末１が通信ネットワークＮに接続されていない状態になった場合においては、端末１が、ユーザＰ１の発話に対する処理を行って、ユーザＰ１の発話に対する返答を行う。
【0054】
＜対話サーバ２０４＞
図１０（Ａ）に示す対話サーバ２０４は、制御部２４０と、記憶部２５０と、通信インタフェース部５９とを備える。
制御部２４０は、位置受信部４１と、発話受信部４２と、情報送信部２４４と、返答受信処理部２４５と、履歴受信部４７と、履歴登録部４８とを備える。
情報送信部２４４は、情報出力手段としての機能を有する。情報送信部２４４は、端末１から受信した発話データ及び位置情報と、サーバ履歴記憶部５３に記憶された端末１の端末識別情報に対応付けられた対話履歴データとを、オペレータ端末２０７に送信する。
返答受信処理部２４５は、返答送信手段としての機能を有する。返答受信処理部２４５は、オペレータ端末２０７から返答データを受信し、端末１に送信する。
図１０（Ａ）に示す対話サーバ２０４は、制御部２４０と、記憶部２５０と、通信インタフェース部５９とを備える。
制御部２４０は、位置受信部４１と、発話受信部４２と、情報送信部２４４と、返答受信処理部２４５と、履歴受信部４７と、履歴登録部４８とを備える。
情報送信部２４４は、情報出力手段としての機能を有する。情報送信部２４４は、端末１から受信した発話データ及び位置情報と、サーバ履歴記憶部５３に記憶された端末１の端末識別情報に対応付けられた対話履歴データとを、オペレータ端末２０７に送信する。
返答受信処理部２４５は、返答送信手段としての機能を有する。返答受信処理部２４５は、オペレータ端末２０７から返答データを受信し、端末１に送信する。
【0055】
記憶部２５０は、プログラム記憶部２５１と、サーバ履歴記憶部５３とを備える。
プログラム記憶部２５１は、制御部２４０の各種機能を実行するためのプログラムを含む、各種のプログラムを記憶する記憶領域である。
プログラム記憶部２５１は、制御部２４０の各種機能を実行するためのプログラムを含む、各種のプログラムを記憶する記憶領域である。
【0056】
＜オペレータ端末２０７＞
図１０（Ｂ）に示すオペレータ端末２０７は、制御部２７０と、記憶部２７５と、入力部２７６と、ディスプレイ２７７と、ヘッドセット２７８と、通信インタフェース部２７９とを備える。
制御部２７０は、情報受信部２７１と、情報出力部２７２と、返答受付処理部２７３とを備える。
情報受信部２７１は、対話サーバ２０４から発話データ及び位置情報と、対話履歴データとを受信する。
情報出力部２７２は、情報受信部２７１が受信した各種の情報を、ディスプレイ２７７やヘッドセット２７８に出力する。情報出力部２７２は、例えば、発話データをヘッドセット２７８に音声として出力すると共に、対話履歴データを、例えば、ディスプレイ２７７に時系列に文字で出力する。また、情報出力部２７２は、例えば、地図上に位置情報を示した地図情報を、ディスプレイ２７７に出力してもよい。
返答受付処理部２７３は、オペレータＰ２の返答をヘッドセット２７８を介して受け付けて、返答データを対話サーバ２０４に送信する。
図１０（Ｂ）に示すオペレータ端末２０７は、制御部２７０と、記憶部２７５と、入力部２７６と、ディスプレイ２７７と、ヘッドセット２７８と、通信インタフェース部２７９とを備える。
制御部２７０は、情報受信部２７１と、情報出力部２７２と、返答受付処理部２７３とを備える。
情報受信部２７１は、対話サーバ２０４から発話データ及び位置情報と、対話履歴データとを受信する。
情報出力部２７２は、情報受信部２７１が受信した各種の情報を、ディスプレイ２７７やヘッドセット２７８に出力する。情報出力部２７２は、例えば、発話データをヘッドセット２７８に音声として出力すると共に、対話履歴データを、例えば、ディスプレイ２７７に時系列に文字で出力する。また、情報出力部２７２は、例えば、地図上に位置情報を示した地図情報を、ディスプレイ２７７に出力してもよい。
返答受付処理部２７３は、オペレータＰ２の返答をヘッドセット２７８を介して受け付けて、返答データを対話サーバ２０４に送信する。
【0057】
記憶部２７５は、制御部２７０の処理を行うプログラムの他、各種のプログラム等を記憶する記憶領域である。
入力部２７６は、例えば、キーボードやマウス等の入力装置である。
ディスプレイ２７７は、例えば、液晶パネル等で構成される表示装置である。
ヘッドセット２７８は、例えば、オペレータＰ２が頭部に装着する、マイクとヘッドフォンとが一体になった装置である。
通信インタフェース部２７９は、通信ネットワークＮを介して対話サーバ２０４との間の通信を行うためのインタフェースである。
入力部２７６は、例えば、キーボードやマウス等の入力装置である。
ディスプレイ２７７は、例えば、液晶パネル等で構成される表示装置である。
ヘッドセット２７８は、例えば、オペレータＰ２が頭部に装着する、マイクとヘッドフォンとが一体になった装置である。
通信インタフェース部２７９は、通信ネットワークＮを介して対話サーバ２０４との間の通信を行うためのインタフェースである。
【0058】
＜処理の説明＞
次に、対話システム２００で行う処理について説明する。
端末１における処理は、第１実施形態（図６及び図７）と同様である。
対話サーバ２０４の処理について説明する。
図１１は、第２実施形態に係る対話サーバ２０４のサーバ処理を示すフローチャートである。
対話サーバ２０４の処理は、端末１が対話サーバ２０４に情報を送信し（図６のＳ１４、Ｓ１５及び図７のＳ３６を参照）、対話サーバ２０４が情報を受信した場合や、オペレータ端末２０７から情報を受信したことを契機に処理を開始する。
次に、対話システム２００で行う処理について説明する。
端末１における処理は、第１実施形態（図６及び図７）と同様である。
対話サーバ２０４の処理について説明する。
図１１は、第２実施形態に係る対話サーバ２０４のサーバ処理を示すフローチャートである。
対話サーバ２０４の処理は、端末１が対話サーバ２０４に情報を送信し（図６のＳ１４、Ｓ１５及び図７のＳ３６を参照）、対話サーバ２０４が情報を受信した場合や、オペレータ端末２０７から情報を受信したことを契機に処理を開始する。
【0059】
図１１のＳ２４１において、位置受信部４１は、端末１から位置情報を受信したか否かを判断する。位置情報を受信した場合（Ｓ２４１：ＹＥＳ）には、制御部２４０は、処理をＳ２４２に移す。他方、位置情報を受信していない場合（Ｓ２４１：ＮＯ）には、制御部２４０は、処理をＳ２４３に移す。
Ｓ２４２において、情報送信部２４４は、端末１から受信した位置情報を、オペレータ端末２０７に送信する。ここで、情報送信部２４４は、端末１から受信した位置情報から住所を特定し、当該住所を含む地図上に位置情報を示した地図情報として、オペレータ端末２０７に送信してもよい。また、位置情報は、例えば、それ以前に取得したものを軌跡として含んだものにしてもよい。そうすることで、オペレータＰ２は、車両の移動方向を含めた車両の位置が分かるので、案内がしやすくなる。
Ｓ２４２において、情報送信部２４４は、端末１から受信した位置情報を、オペレータ端末２０７に送信する。ここで、情報送信部２４４は、端末１から受信した位置情報から住所を特定し、当該住所を含む地図上に位置情報を示した地図情報として、オペレータ端末２０７に送信してもよい。また、位置情報は、例えば、それ以前に取得したものを軌跡として含んだものにしてもよい。そうすることで、オペレータＰ２は、車両の移動方向を含めた車両の位置が分かるので、案内がしやすくなる。
【0060】
Ｓ２４３において、発話受信部４２は、端末１から発話データを受信したか否かを判断する。発話データを受信した場合（Ｓ２４３：ＹＥＳ）には、制御部２４０は、処理をＳ２４４に移す。他方、発話データを受信していない場合（Ｓ２４３：ＮＯ）には、制御部２４０は、処理をＳ２４５に移す。
Ｓ２４４において、情報送信部２４４は、端末１から受信した発話データ及びサーバ履歴記憶部５３に記憶された当該端末１の端末識別情報に対応付けられた対話履歴データを、オペレータ端末２０７に送信する。
当該処理によって、オペレータ端末２０７の情報受信部２７１は、各種の情報を受信し、情報出力部２７２は、受信した各種の情報を出力する。よって、オペレータＰ２は、出力された情報を参照し、発話データに対する返答をすることができる。
Ｓ２４４において、情報送信部２４４は、端末１から受信した発話データ及びサーバ履歴記憶部５３に記憶された当該端末１の端末識別情報に対応付けられた対話履歴データを、オペレータ端末２０７に送信する。
当該処理によって、オペレータ端末２０７の情報受信部２７１は、各種の情報を受信し、情報出力部２７２は、受信した各種の情報を出力する。よって、オペレータＰ２は、出力された情報を参照し、発話データに対する返答をすることができる。
【0061】
Ｓ２４５において、返答受信処理部２４５は、オペレータ端末２０７から返答データを受信したか否かを判断する。オペレータ端末２０７から返答データを受信した場合（Ｓ２４５：ＹＥＳ）には、制御部２４０は、処理をＳ２４６に移す。他方、オペレータ端末２０７から返答データを受信していない場合（Ｓ２４５：ＮＯ）には、制御部２４０は、処理をＳ２４７に移す。
Ｓ２４６において、返答受信処理部２４５は、返答データを端末１に送信する。
Ｓ２４７及びＳ２４８の処理は、第１実施形態（図８）のＳ４６及びＳ４７の処理と同様である。
Ｓ２４６において、返答受信処理部２４５は、返答データを端末１に送信する。
Ｓ２４７及びＳ２４８の処理は、第１実施形態（図８）のＳ４６及びＳ４７の処理と同様である。
【0062】
このように、第２実施形態によれば、対話システム２００は、以下のような効果がある。
（１）対話サーバ２０４は、端末１からユーザＰ１の発話データを受信する発話受信部４２と、発話受信部４２が受信した発話データと、サーバ履歴記憶部５３に記憶されたユーザＰ１の対話履歴データとを、オペレータ端末２０７に出力する情報送信部２４４と、オペレータ端末２０７から送信された返答データを、端末１に送信する返答受信処理部２４５とを備える。
よって、対話サーバ２０４を仲介して、端末１のユーザＰ１と、オペレータ端末２０７のオペレータＰ２とが対話をすることができる。
また、サーバ履歴記憶部５３に記憶された対話履歴データを、オペレータ端末２０７に送信するので、オペレータＰ２は、ローカルでの対話処理によって端末１で行われた対話履歴を確認しながら、対話を進めることができる。
（１）対話サーバ２０４は、端末１からユーザＰ１の発話データを受信する発話受信部４２と、発話受信部４２が受信した発話データと、サーバ履歴記憶部５３に記憶されたユーザＰ１の対話履歴データとを、オペレータ端末２０７に出力する情報送信部２４４と、オペレータ端末２０７から送信された返答データを、端末１に送信する返答受信処理部２４５とを備える。
よって、対話サーバ２０４を仲介して、端末１のユーザＰ１と、オペレータ端末２０７のオペレータＰ２とが対話をすることができる。
また、サーバ履歴記憶部５３に記憶された対話履歴データを、オペレータ端末２０７に送信するので、オペレータＰ２は、ローカルでの対話処理によって端末１で行われた対話履歴を確認しながら、対話を進めることができる。
【0063】
（２）端末１は、位置情報を所定の時間間隔で取得する位置取得部１１を備え、リモート対話部１４は、当該リモート対話部１４による処理の間に位置取得部１１が取得した位置情報を、対話サーバ２０４に送信し、対話サーバ２０４は、位置情報を端末１から受信する位置受信部４１を備え、情報送信部２４４は、位置受信部４１が受信した位置情報をさらにオペレータ端末２０７に出力する。
よって、オペレータＰ２は、端末１の位置情報を確認することができるので、返答や対話を、位置情報を加味したものにできる。
よって、オペレータＰ２は、端末１の位置情報を確認することができるので、返答や対話を、位置情報を加味したものにできる。
【0064】
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではない。また、実施形態に記載した効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、実施形態に記載したものに限定されない。なお、上述した実施形態及び後述する変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。
【0065】
（変形形態）
（１）各実施形態では、対話システムを観光バスで用いるものを例に説明したが、これに限定されない。車載端末と対話サーバとを備え、言語モデルを用いて、又は、オペレータによる対話を行うものであれば、例えば、カーナビシステムに用いたり、他の用途に用いたりすることができる。さらに、電車内の端末であってもよいし、端末を、例えば、ユーザが持ち歩く携帯端末としてもよい。
（１）各実施形態では、対話システムを観光バスで用いるものを例に説明したが、これに限定されない。車載端末と対話サーバとを備え、言語モデルを用いて、又は、オペレータによる対話を行うものであれば、例えば、カーナビシステムに用いたり、他の用途に用いたりすることができる。さらに、電車内の端末であってもよいし、端末を、例えば、ユーザが持ち歩く携帯端末としてもよい。
【0066】
（２）各実施形態では、音声データからテキストへの変換及びテキストから音声データへの変換を対話サーバが行うものを例に説明したが、これに限定されない。端末で音声とテキストとの間の変換処理を行ってもよい。
【0067】
（３）各実施形態では、対話を音声で行うものを例に説明したが、これに限定されない。少なくとも一方の対話をテキストで行うものであってもよい。その場合には、端末がテキストでの入力を行う場合には、マイクに代えて、キーボード等の入力部を備えるようにすればよい。また、対話サーバがテキストの場合には、ディスプレイにテキストを出力するようにすればよい。
【0068】
（４）各実施形態では、ディスプレイにキャラクタとして、ガイドを模した人物の画像を表示させるものを例に説明したが、これに限定されない。他のキャラクタの画像であってもよいし、キャラクタの画像を用いなくてもよい。
【0069】
（５）第１実施形態では、言語モデルサーバに有する言語モデルを用いた処理をするものを例に説明したが、これに限定されない。対話サーバが言語モデルを有するものであってもよい。
【符号の説明】
【0070】
１ 端末
４，２０４ 対話サーバ
６ 言語モデルサーバ
６ａ 言語モデル
１０，４０，２４０，２７０ 制御部
１１ 位置取得部
１２ 通信接続確認部
１３ 対話切替部
１４ リモート対話部
１５ ローカル対話部
１６ キャラクタ処理部
１７ 履歴送信部
１８，４８ 履歴登録部
２０，５０，２５０，２７５ 記憶部
２１ａ 対話プログラム
２２ 知識部
２３ 端末履歴記憶部
２５ マイク
２６ スピーカ
２７，２７７ ディスプレイ
２８ ＧＰＳ受信部
４１ 位置受信部
４２ 発話受信部
４３ 対話処理部
４７ 履歴受信部
５３ サーバ履歴記憶部
１００，２００ 対話システム
２０７ オペレータ端末
２４４ 情報送信部
２４５ 返答受信処理部
２７１ 情報受信部
２７２ 情報出力部
２７３ 返答受付処理部
２７６ 入力部
２７８ ヘッドセット
Ｎ 通信ネットワーク
Ｐ１ ユーザ
Ｐ２ オペレータ
ＳＰ１ 車内
ＳＰ２ 室内
Ｒ 基地局
４，２０４ 対話サーバ
６ 言語モデルサーバ
６ａ 言語モデル
１０，４０，２４０，２７０ 制御部
１１ 位置取得部
１２ 通信接続確認部
１３ 対話切替部
１４ リモート対話部
１５ ローカル対話部
１６ キャラクタ処理部
１７ 履歴送信部
１８，４８ 履歴登録部
２０，５０，２５０，２７５ 記憶部
２１ａ 対話プログラム
２２ 知識部
２３ 端末履歴記憶部
２５ マイク
２６ スピーカ
２７，２７７ ディスプレイ
２８ ＧＰＳ受信部
４１ 位置受信部
４２ 発話受信部
４３ 対話処理部
４７ 履歴受信部
５３ サーバ履歴記憶部
１００，２００ 対話システム
２０７ オペレータ端末
２４４ 情報送信部
２４５ 返答受信処理部
２７１ 情報受信部
２７２ 情報出力部
２７３ 返答受付処理部
２７６ 入力部
２７８ ヘッドセット
Ｎ 通信ネットワーク
Ｐ１ ユーザ
Ｐ２ オペレータ
ＳＰ１ 車内
ＳＰ２ 室内
Ｒ 基地局
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】