特許 7609146 情報処理装置、情報処理システム、プログラム、及び情報処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-12-23

(45)【発行日】2025-01-07

(54)【発明の名称】情報処理装置、情報処理システム、プログラム、及び情報処理方法

(51)【国際特許分類】

   G06F 3/16 20060101AFI20241224BHJP

   G06F 3/01 20060101ALI20241224BHJP

   G06F 3/0481 20220101ALI20241224BHJP

【ＦＩ】

G06F3/16 540

G06F3/01 510

G06F3/16 610

G06F3/0481

【請求項の数】 8

(21)【出願番号】P 2022150751

(22)【出願日】2022-09-21

(65)【公開番号】P2024044920

(43)【公開日】2024-04-02

【審査請求日】2023-11-30

(73)【特許権者】

【識別番号】000003207

【氏名又は名称】トヨタ自動車株式会社

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】230118913

【弁護士】

【氏名又は名称】杉村 光嗣

(74)【代理人】

【識別番号】100139491

【弁理士】

【氏名又は名称】河合 隆慶

(74)【代理人】

【識別番号】100202326

【弁理士】

【氏名又は名称】橋本 大佑

(72)【発明者】

【氏名】澤渡 愛子

(72)【発明者】

【氏名】菊地 大輔

(72)【発明者】

【氏名】加来 航

【審査官】仲野 一秀

(56)【参考文献】

【文献】特開２０１５－４６８２２（ＪＰ，Ａ）

【文献】特開２０２２－９８８２５（ＪＰ，Ａ）

【文献】特開２０２２－１０９０２５（ＪＰ，Ａ）

【文献】国際公開第２０２０／０５４８５５（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／１６

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／０４８１

(57)【特許請求の範囲】

【請求項1】

相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理装置であって、
遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信する制御部、を備える、
情報処理装置。

【請求項2】

請求項１に記載の情報処理装置であって、
前記制御部は、前記第２ユーザが前記第１ユーザに視線を向けて発話すると、前記第１ユーザの前記対話装置に前記第１音声データを送信し、前記第１ユーザ及び発話した前記第２ユーザ以外の前記ユーザの前記対話装置に前記第２音声データを送信する、
情報処理装置。

【請求項3】

請求項１又は２に記載の情報処理装置であって、
前記対話装置は、前記第１ユーザが使用する第１対話装置と、前記第２ユーザが使用する第２対話装置と、を備え、
前記制御部は、前記第２対話装置を使用する前記第２ユーザとしての複数の前記対話相手の前記パラメータを推定し、
前記パラメータが閾値未満である前記第２ユーザとしての前記対話相手を示すアラートを前記第１対話装置に表示させ、
前記第１ユーザは、前記遠隔対話の話題に対する教師を含み、
前記第２ユーザは、前記教師との前記対話相手としての生徒を含む、
情報処理装置。

【請求項4】

請求項１又は２に記載の情報処理装置であって、
前記制御部は、前記第１ユーザの前記対話装置の前記画面に表示されている前記対話相手を強調表示させることで前記アラートを表示させる、
情報処理装置。

【請求項5】

請求項１又は２に記載の情報処理装置であって、
前記パラメータは、前記遠隔対話の話題に対する各対話相手の理解度、関心度、及集中度の少なくとも１つを含む、
情報処理装置。

【請求項6】

請求項１又は２に記載の情報処理装置と、
複数の前記ユーザのそれぞれによって使用される前記対話装置と、
を備える、
情報処理システム。

【請求項7】

相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理装置に、
遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信することを含む動作を実行させる、
プログラム。

【請求項8】

相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理方法であって、
遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信することを含む、
情報処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、情報処理装置、情報処理システム、プログラム、及び情報処理方法に関する。

【背景技術】

【0002】

従来、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する技術が知られている。例えば、特許文献１には、複数の通信端末間で通信によって遠隔会議などを行う際に、聴取者が会議などの内容を理解しているのかを認識し易くすることができる通信装置が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２００９－２６７６２１号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１に記載の従来技術では、ユーザが対話相手として所定のユーザに呼びかけたい場合、呼びかけた声が所定のユーザへの出力と同様の音量で他のユーザへも出力される。したがって、所定のユーザへの呼びかけが届かない可能性もある。結果として、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話サービスの利便性が低下していた。

【0005】

本開示は、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話サービスの利便性が向上する情報処理装置、情報処理システム、プログラム、及び情報処理方法を提供することを目的とする。

【課題を解決するための手段】

【0006】

本開示の一実施形態に係る情報処理装置は、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理装置であって、遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信する制御部、を備える。

【0007】

本開示の一実施形態に係るプログラムは、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理装置に、遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信することを含む動作を実行させる。

【0008】

本開示の一実施形態に係る情報処理方法は、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理方法であって、遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信することを含む。

【発明の効果】

【0009】

本開示の一実施形態に係る情報処理装置、情報処理システム、プログラム、及び情報処理方法によれば、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話サービスの利便性が向上する。

【図面の簡単な説明】

【0010】

【図1】本開示の一実施形態に係る情報処理装置を含む情報処理システムの構成を示す構成図である。

【図2】図１の情報処理装置、第１対話装置、及び第２対話装置のそれぞれの概略構成を示す機能ブロック図である。

【図3】図１の情報処理システムにより実行される情報処理方法の第１例を説明するためのシーケンス図である。

【図4】図１の情報処理システムにより実行される情報処理方法の第２例を説明するためのシーケンス図である。

【図5】第１ユーザの第１対話装置の出力部の画面に表示される映像の一例を示す模式図である。

【図6】第２ユーザの第２対話装置の出力部の画面に表示される映像の一例を示す模式図である。

【発明を実施するための形態】

【0011】

以下、本開示の一実施形態について、図面を参照して説明する。

【0012】

図１は、本開示の一実施形態に係る情報処理装置１０を含む情報処理システム１の構成を示す構成図である。図１を参照しながら、本開示の一実施形態に係る情報処理装置１０を含む情報処理システム１の概要について主に説明する。情報処理システム１は、情報処理装置１０に加えて、１つの第１対話装置２０と、複数の第２対話装置３０と、を有する。

【0013】

図１では説明の簡便のため、第２対話装置３０について１つのみ図示しているが、情報処理システム１が有する第２対話装置３０の数は２つ以上である。図１では説明の簡便のため、情報処理装置１０について１つのみ図示しているが、情報処理システム１が有する情報処理装置１０の数は２つ以上であってもよい。情報処理装置１０、１つの第１対話装置２０、及び複数の第２対話装置３０のそれぞれは、移動体通信網及びインターネットなどを含むネットワーク４０と通信可能に接続されている。

【0014】

一実施形態の概要として、情報処理装置１０は、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する。本開示において、「対話装置」は、第１対話装置２０又は第２対話装置３０を含む。

【0015】

情報処理装置１０は、遠隔対話の実行中、各対話相手の映像に基づいて、遠隔対話の話題に対する各対話相手のパラメータを推定する。本開示において、「話題」は、例えば授業で説明している内容などを含む。「パラメータ」は、例えば理解度、関心度、及び集中度の少なくとも１つを含む。情報処理装置１０は、推定されたパラメータが閾値未満である各対話相手を示すアラートを第１ユーザの対話装置に表示させる。

【0016】

情報処理装置１０は、当該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、アラートが表示された対話相手に第１ユーザが視線を向けて発話すると、当該対話相手の対話装置に大きな音量の第１音声データを送信する。情報処理装置１０は、当該対話相手以外の対話相手の対話装置に小さな音量の第２音声データを送信する。

【0017】

本開示において、「第１ユーザ」は、例えば遠隔対話の話題に対する教師を含む。「第２ユーザ」は、例えば当該教師との対話相手としての生徒を含む。「第１音声データ」は、ユーザが発話したときの音声データに対して、他のユーザの対話装置から当該発話内容を音声として出力するときに音量が大きくなるように設定されたデータを含む。「第２音声データ」は、ユーザが発話したときの音声データに対して、他のユーザの対話装置から当該発話内容を音声として出力するときに音量が小さくなるように設定されたデータを含む。

【0018】

ユーザは、例えば自身の対話装置にインストールされ、情報処理装置１０と連携する遠隔対話用のＷｅｂアプリケーションを用いて、当該対話装置の画面を視認しながら他のユーザと対話する。例えば、第１ユーザの対話装置の画面には、複数の第２ユーザの映像が映し出される。例えば、第２ユーザの対話装置の画面には、第１ユーザの映像と他の第２ユーザの映像とが映し出される。ユーザの対話装置は、ユーザが発話した内容を音声データとして情報処理装置１０を介し他のユーザの対話装置に送信する。ユーザの対話装置は、他のユーザの対話装置から受信した音声データに基づいて当該他のユーザの発話内容を音声として出力する。

【0019】

情報処理装置１０は、１つ又は互いに通信可能な複数のサーバ装置である。情報処理装置１０は、これらに限定されず、ＰＣ（Personal Computer）又はスマートフォンなどの任意の汎用の電子機器であってもよいし、情報処理システム１に専用の他の電子機器であってもよい。

【0020】

第１対話装置２０は、ＰＣ、タブレットＰＣ、又はスマートフォンなどの汎用の電子機器である。第１対話装置２０は、第１ユーザが使用する電子機器である。第１対話装置２０は、これらに限定されず、第１ユーザが使用する１つ又は互いに通信可能な複数のサーバ装置であってもよいし、情報処理システム１に専用の他の電子機器であってもよい。

【0021】

第２対話装置３０は、ＰＣ、タブレットＰＣ、又はスマートフォンなどの汎用の電子機器である。第２対話装置３０は、第２ユーザが使用する電子機器である。第２対話装置３０は、これらに限定されず、第２ユーザが使用する１つ又は互いに通信可能な複数のサーバ装置であってもよいし、情報処理システム１に専用の他の電子機器であってもよい。

【0022】

図２は、図１の情報処理装置１０、第１対話装置２０、及び第２対話装置３０のそれぞれの概略構成を示す機能ブロック図である。図２を参照しながら、情報処理システム１に含まれる情報処理装置１０、第１対話装置２０、及び第２対話装置３０のそれぞれの構成の一例について主に説明する。

【0023】

図２に示すとおり、情報処理装置１０は、通信部１１、記憶部１２、及び制御部１３を有する。

【0024】

通信部１１は、ネットワーク４０に接続する通信モジュールを含む。例えば、通信部１１は、４Ｇ（4th Generation）及び５Ｇ（5th Generation）などの移動体通信規格又はインターネット規格に対応する通信モジュールを含む。一実施形態において、情報処理装置１０は、通信部１１を介してネットワーク４０に接続されている。通信部１１は、ネットワーク４０を介して多様な情報を送信及び受信する。

【0025】

記憶部１２は、例えば半導体メモリ、磁気メモリ、又は光メモリなどであるが、これらに限定されない。記憶部１２は、主記憶装置、補助記憶装置、又はキャッシュメモリとして機能する。記憶部１２は、情報処理装置１０の動作に用いられる任意の情報を記憶する。記憶部１２は、システムプログラム、アプリケーションプログラム、及び通信部１１により受信又は送信される各種情報などを記憶する。記憶部１２に記憶された情報は、通信部１１を介してネットワーク４０から受信される情報で更新可能である。

【0026】

制御部１３は、１つ以上のプロセッサを含む。一実施形態において「プロセッサ」は、汎用のプロセッサ、又は特定の処理に特化した専用のプロセッサであるが、これらに限定されない。制御部１３は、情報処理装置１０を構成する各構成部と通信可能に接続され、情報処理装置１０全体の動作を制御する。

【0027】

情報処理システム１に含まれる第１対話装置２０の構成について主に説明する。図２に示すとおり、第１対話装置２０は、通信部２１、記憶部２２、取得部２３、入力部２４、出力部２５、及び制御部２６を有する。

【0028】

通信部２１は、ネットワーク４０に接続する通信モジュールを含む。例えば、通信部２１は、４Ｇ及び５Ｇなどの移動体通信規格又はインターネット規格に対応する通信モジュールを含む。一実施形態において、第１対話装置２０は、通信部２１を介してネットワーク４０に接続されている。通信部２１は、ネットワーク４０を介して多様な情報を送信及び受信する。

【0029】

記憶部２２は、例えば半導体メモリ、磁気メモリ、又は光メモリなどであるが、これらに限定されない。記憶部２２は、主記憶装置、補助記憶装置、又はキャッシュメモリとして機能する。記憶部２２は、第１対話装置２０の動作に用いられる任意の情報を記憶する。記憶部２２は、システムプログラム、アプリケーションプログラム、及び通信部２１により受信又は送信される各種情報などを記憶する。記憶部２２に記憶された情報は、通信部２１を介してネットワーク４０から受信される情報で更新可能である。

【0030】

取得部２３は、第１ユーザが発話している様子などを撮像可能な任意の撮像装置を含む。例えば、取得部２３は、Ｗｅｂカメラなどを含む。取得部２３は、第１対話装置２０を用いて遠隔対話を行っている第１ユーザの様子を撮像する。取得部２３は、第１ユーザの様子を、遠隔対話が実行されている間常時撮像する。

【0031】

入力部２４は、ユーザ入力を検出して、ユーザの操作に基づく入力情報を取得する１つ以上の入力インタフェースを含む。例えば、入力部２４は、物理キー、静電容量キー、出力部２５のディスプレイと一体的に設けられたタッチスクリーン、及び音声入力を受け付けるマイクロフォンなどを含む。

【0032】

出力部２５は、情報を出力してユーザに通知する１つ以上の出力インタフェースを含む。例えば、出力部２５は、情報を映像で出力するディスプレイ、並びに情報を音声で出力するスピーカ、イヤホン、及びヘッドホンなどを含む。

【0033】

制御部２６は、１つ以上のプロセッサを含む。制御部２６は、第１対話装置２０を構成する各構成部と通信可能に接続され、第１対話装置２０全体の動作を制御する。

【0034】

情報処理システム１に含まれる第２対話装置３０の構成について主に説明する。図２に示すとおり、第２対話装置３０は、通信部３１、記憶部３２、取得部３３、入力部３４、出力部３５、及び制御部３６を有する。

【0035】

通信部３１は、ネットワーク４０に接続する通信モジュールを含む。例えば、通信部３１は、４Ｇ及び５Ｇなどの移動体通信規格又はインターネット規格に対応する通信モジュールを含む。一実施形態において、第２対話装置３０は、通信部３１を介してネットワーク４０に接続されている。通信部３１は、ネットワーク４０を介して多様な情報を送信及び受信する。

【0036】

記憶部３２は、例えば半導体メモリ、磁気メモリ、又は光メモリなどであるが、これらに限定されない。記憶部３２は、主記憶装置、補助記憶装置、又はキャッシュメモリとして機能する。記憶部３２は、第２対話装置３０の動作に用いられる任意の情報を記憶する。記憶部３２は、システムプログラム、アプリケーションプログラム、及び通信部３１により受信又は送信される各種情報などを記憶する。記憶部３２に記憶された情報は、通信部３１を介してネットワーク４０から受信される情報で更新可能である。

【0037】

取得部３３は、第２ユーザが発話している様子などを撮像可能な任意の撮像装置を含む。例えば、取得部３３は、Ｗｅｂカメラなどを含む。取得部３３は、第２対話装置３０を用いて遠隔対話を行っている第２ユーザの様子を撮像する。取得部３３は、第２ユーザの様子を、遠隔対話が実行されている間常時撮像する。

【0038】

入力部３４は、ユーザ入力を検出して、ユーザの操作に基づく入力情報を取得する１つ以上の入力インタフェースを含む。例えば、入力部３４は、物理キー、静電容量キー、出力部３５のディスプレイと一体的に設けられたタッチスクリーン、及び音声入力を受け付けるマイクロフォンなどを含む。

【0039】

出力部３５は、情報を出力してユーザに通知する１つ以上の出力インタフェースを含む。例えば、出力部３５は、情報を映像で出力するディスプレイ、並びに情報を音声で出力するスピーカ、イヤホン、及びヘッドホンなどを含む。

【0040】

制御部３６は、１つ以上のプロセッサを含む。制御部３６は、第２対話装置３０を構成する各構成部と通信可能に接続され、第２対話装置３０全体の動作を制御する。

【0041】

図３は、図１の情報処理システム１により実行される情報処理方法の第１例を説明するためのシーケンス図である。図３を参照しながら、図１の情報処理システム１が実行する情報処理方法の第１例について主に説明する。図３に示すシーケンス図は、第１対話装置２０を使用する第１ユーザが第２対話装置３０を使用する第２ユーザに向けて発話するときの情報処理方法の基本的な処理の流れを主に示す。図３では一例として第２対話装置３０について２つのみ図示しているが、情報処理システム１に含まれる第２対話装置３０の数は、３つ以上であってもよい。

【0042】

ステップＳ１００では、一の第２ユーザが使用する第２対話装置３０の制御部３６は、取得部３３に含まれる撮像装置を用いて、遠隔対話を行う一の第２ユーザの映像を取得する。このとき、制御部３６は、一の第２ユーザが発話すると、入力部３４に含まれるマイクロフォンを用いて一の第２ユーザの発話内容を音声データとして映像と共に取得する。

【0043】

ステップＳ１０１では、一の第２ユーザが使用する第２対話装置３０の制御部３６は、ステップＳ１００において取得された映像を、通信部３１及びネットワーク４０を介して情報処理装置１０に送信する。このとき、制御部３６は、一の第２ユーザの発話内容に基づく音声データを、当該映像と共に必要に応じて情報処理装置１０に送信する。情報処理装置１０の制御部１３は、一の第２ユーザが使用する第２対話装置３０により取得された映像を、ネットワーク４０及び通信部１１を介して当該第２対話装置３０から受信する。このとき、制御部１３は、一の第２ユーザの発話内容に基づく音声データを、当該映像と共に必要に応じて当該第２対話装置３０から受信する。

【0044】

ステップＳ１０２では、他の第２ユーザが使用する第２対話装置３０の制御部３６は、取得部３３に含まれる撮像装置を用いて、遠隔対話を行う他の第２ユーザの映像を取得する。このとき、制御部３６は、他の第２ユーザが発話すると、入力部３４に含まれるマイクロフォンを用いて他の第２ユーザの発話内容を音声データとして映像と共に取得する。

【0045】

ステップＳ１０３では、他の第２ユーザが使用する第２対話装置３０の制御部３６は、ステップＳ１０２において取得された映像を、通信部３１及びネットワーク４０を介して情報処理装置１０に送信する。このとき、制御部３６は、他の第２ユーザの発話内容に基づく音声データを、当該映像と共に必要に応じて情報処理装置１０に送信する。情報処理装置１０の制御部１３は、他の第２ユーザが使用する第２対話装置３０により取得された映像を、ネットワーク４０及び通信部１１を介して当該第２対話装置３０から受信する。このとき、制御部１３は、他の第２ユーザの発話内容に基づく音声データを、当該映像と共に必要に応じて当該第２対話装置３０から受信する。

【0046】

情報処理装置１０の制御部１３は、ステップＳ１０１及びステップＳ１０３において取得された第２ユーザの映像及び音声データを、通信部１１及びネットワーク４０を介して第１対話装置２０に送信する。これにより、制御部１３は、ステップＳ１０１及びステップＳ１０３において取得された第２ユーザの映像及び音声データを、第１対話装置２０の出力部２５に出力させる。

【0047】

ステップＳ１０４では、情報処理装置１０の制御部１３は、遠隔対話の実行中、各対話相手の映像、すなわちステップＳ１０１及びステップＳ１０３において取得された第２ユーザの映像に基づいて、遠隔対話の話題に対する各対話相手のパラメータを推定する。より具体的には、制御部１３は、映像に示される第２ユーザの表情及び仕草などから画像解析などの技術に基づいて当該第２ユーザのパラメータを推定する。このとき、制御部１３は、ユーザの表情及び仕草などとパラメータとを互いに関連付けた学習データに基づき、、ユーザの表情及び仕草などに応じたパラメータを学習して構築された学習モデルを用いて、第２ユーザのパラメータを推定してもよい。

【0048】

ステップＳ１０５では、情報処理装置１０の制御部１３は、ステップＳ１０４において推定されたパラメータが閾値未満である各対話相手を示すアラートに関するアラート情報を生成する。

【0049】

ステップＳ１０６では、情報処理装置１０の制御部１３は、ステップＳ１０５において生成されたアラート情報を、通信部１１及びネットワーク４０を介して第１対話装置２０に送信する。第１対話装置２０の制御部２６は、情報処理装置１０により生成されたアラート情報を、ネットワーク４０及び通信部２１を介して情報処理装置１０から受信する。これにより、情報処理装置１０の制御部１３は、ステップＳ１０４において推定されたパラメータが閾値未満である各対話相手を示すアラートを第１ユーザの第１対話装置２０に表示させる。第１対話装置２０の制御部２６は、情報処理装置１０から取得されたアラート情報に基づいて、ステップＳ１０４において推定されたパラメータが閾値未満である各対話相手を示すアラートを出力部２５に表示する。

【0050】

ステップＳ１０７では、第１対話装置２０の制御部２６は、第１対話装置２０の出力部２５の画面に表示される、第２ユーザとしての複数の対話相手のうち、ステップＳ１０６においてアラートが表示された対話相手に第１ユーザが視線を向けて発話したときの視線情報を、取得部２３を用いて取得する。このとき、制御部２６は、第１ユーザの発話内容を、入力部２４に含まれるマイクロフォンを用いて音声データとして視線情報と共に取得する。

【0051】

ステップＳ１０８では、第１対話装置２０の制御部２６は、ステップＳ１０７において取得された視線情報及び音声データを、通信部２１及びネットワーク４０を介して情報処理装置１０に送信する。情報処理装置１０の制御部１３は、第１対話装置２０により取得された視線情報及び音声データを、ネットワーク４０及び通信部１１を介して第１対話装置２０から受信する。

【0052】

ステップＳ１０９では、情報処理装置１０の制御部１３は、ステップＳ１０８において取得された視線情報に基づいて、第１対話装置２０の画面に表示される、第２ユーザとしての複数の対話相手のうち、ステップＳ１０６においてアラートが表示された対話相手に第１ユーザが視線を向けて発話したと判定する。制御部１３は、このように判定すると、ステップＳ１０８において取得された音声データに基づいて、第１ユーザの当該対話相手に向けた発話内容を当該対話相手の第２対話装置３０において大きな音量で出力するための第１音声データを生成する。

【0053】

ステップＳ１１０では、情報処理装置１０の制御部１３は、ステップＳ１０９における判定処理に応じて、ステップＳ１０８において取得された音声データに基づいて、第１ユーザの上記対話相手に向けた発話内容を当該対話相手以外の対話相手の第２対話装置３０において小さな音量で出力するための第２音声データを生成する。

【0054】

ステップＳ１１１では、情報処理装置１０の制御部１３は、ステップＳ１０９において生成された大きな音量の第１音声データを、上記対話相手の第２対話装置３０に送信する。より具体的には、制御部１３は、ステップＳ１０９において生成された第１音声データを、第１ユーザが視線を向けて発話した、ステップＳ１０６においてアラートが表示された対話相手としての第２ユーザの第２対話装置３０に、通信部１１及びネットワーク４０を介して送信する。当該第２対話装置３０の制御部３６は、情報処理装置１０において生成された第１音声データを、ネットワーク４０及び通信部３１を介して情報処理装置１０から受信する。

【0055】

以上により、情報処理装置１０の制御部１３は、第１対話装置２０の画面に表示される、第２ユーザとしての複数の対話相手のうち、ステップＳ１０６においてアラートが表示された対話相手に第１ユーザが視線を向けて発話すると、当該対話相手の第２対話装置３０に大きな音量の第１音声データを送信する。当該第２対話装置３０の制御部３６は、第１ユーザが発話した内容を、取得された第１音声データに基づいて大きな音量で、出力部３５のスピーカなどから第２ユーザに向けて出力する。

【0056】

ステップＳ１１２では、情報処理装置１０の制御部１３は、ステップＳ１１０において生成された小さな音量の第２音声データを、上記対話相手以外の対話相手の第２対話装置３０に送信する。より具体的には、制御部１３は、ステップＳ１１０において生成された第２音声データを、第１ユーザが視線を向けて発話した対話相手以外の対話相手としての第２ユーザの第２対話装置３０に、通信部１１及びネットワーク４０を介して送信する。当該第２対話装置３０の制御部３６は、情報処理装置１０において生成された第２音声データを、ネットワーク４０及び通信部３１を介して情報処理装置１０から受信する。

【0057】

以上により、情報処理装置１０の制御部１３は、第１対話装置２０の画面に表示される、第２ユーザとしての複数の対話相手のうち、ステップＳ１０６においてアラートが表示され第１ユーザが視線を向けて発話した対話相手以外の対話相手の第２対話装置３０に小さな音量の第２音声データを送信する。当該第２対話装置３０の制御部３６は、第１ユーザが発話した内容を、取得された第２音声データに基づいて小さな音量で、出力部３５のスピーカなどから第２ユーザに向けて出力する。

【0058】

図４は、図１の情報処理システム１により実行される情報処理方法の第２例を説明するためのシーケンス図である。図４を参照しながら、図１の情報処理システム１が実行する情報処理方法の第２例について主に説明する。図４に示すシーケンス図は、第２対話装置３０を使用する第２ユーザが第１対話装置２０を使用する第１ユーザに向けて発話するときの情報処理方法の基本的な処理の流れを主に示す。図４では一例として第２対話装置３０について２つのみ図示しているが、情報処理システム１に含まれる第２対話装置３０の数は、３つ以上であってもよい。

【0059】

ステップＳ２００では、第１ユーザが使用する第１対話装置２０の制御部２６は、取得部２３に含まれる撮像装置を用いて、遠隔対話を行う第１ユーザの映像を取得する。このとき、制御部２６は、第１ユーザが発話すると、入力部２４に含まれるマイクロフォンを用いて第１ユーザの発話内容を音声データとして映像と共に取得する。

【0060】

ステップＳ２０１では、第１ユーザが使用する第１対話装置２０の制御部２６は、ステップＳ２００において取得された映像を、通信部２１及びネットワーク４０を介して情報処理装置１０に送信する。このとき、制御部２６は、第１ユーザの発話内容に基づく音声データを、当該映像と共に必要に応じて情報処理装置１０に送信する。情報処理装置１０の制御部１３は、第１ユーザが使用する第１対話装置２０により取得された映像を、ネットワーク４０及び通信部１１を介して当該第１対話装置２０から受信する。このとき、制御部１３は、第１ユーザの発話内容に基づく音声データを、当該映像と共に必要に応じて当該第１対話装置２０から受信する。

【0061】

ステップＳ２０２では、情報処理装置１０の制御部１３は、ステップＳ２０１において取得された第１ユーザの映像及び音声データを、通信部１１及びネットワーク４０を介して複数の第２対話装置３０に送信する。これにより、制御部１３は、ステップＳ２０１において取得された第１ユーザの映像及び音声データを、複数の第２対話装置３０の各々の出力部３５に出力させる。

【0062】

ステップＳ２０３では、第２対話装置３０の制御部３６は、第２対話装置３０の出力部３５の画面に表示される第１ユーザに第２ユーザが視線を向けて発話したときの視線情報を、取得部３３を用いて取得する。このとき、制御部３６は、第２ユーザの発話内容を、入力部３４に含まれるマイクロフォンを用いて音声データとして視線情報と共に取得する。

【0063】

ステップＳ２０４では、第２対話装置３０の制御部３６は、ステップＳ２０３において取得された視線情報及び音声データを、通信部３１及びネットワーク４０を介して情報処理装置１０に送信する。情報処理装置１０の制御部１３は、第２対話装置３０により取得された視線情報及び音声データを、ネットワーク４０及び通信部１１を介して第２対話装置３０から受信する。

【0064】

ステップＳ２０５では、情報処理装置１０の制御部１３は、ステップＳ２０４において取得された視線情報に基づいて、第２対話装置３０の画面に表示される第１ユーザに第２ユーザが視線を向けて発話したと判定する。制御部１３は、このように判定すると、ステップＳ２０４において取得された音声データに基づいて、第２ユーザの対話相手に相当する第１ユーザに向けた発話内容を当該第１ユーザの第１対話装置２０において大きな音量で出力するための第１音声データを生成する。

【0065】

ステップＳ２０６では、情報処理装置１０の制御部１３は、ステップＳ２０５における判定処理に応じて、ステップＳ２０４において取得された音声データに基づいて、第２ユーザの対話相手に相当する第１ユーザに向けた発話内容を当該第１ユーザ以外の対話相手の第２対話装置３０において小さな音量で出力するための第２音声データを生成する。

【0066】

ステップＳ２０７では、情報処理装置１０の制御部１３は、ステップＳ２０５において生成された大きな音量の第１音声データを、上記対話相手としての第１ユーザの第１対話装置２０に送信する。より具体的には、制御部１３は、ステップＳ２０５において生成された第１音声データを、第２ユーザが視線を向けて発話した対話相手としての第１ユーザの第１対話装置２０に、通信部１１及びネットワーク４０を介して送信する。当該第１対話装置２０の制御部２６は、情報処理装置１０において生成された第１音声データを、ネットワーク４０及び通信部２１を介して情報処理装置１０から受信する。

【0067】

以上により、情報処理装置１０の制御部１３は、第２対話装置３０の画面に表示される第１ユーザに第２ユーザが視線を向けて発話すると、第１ユーザの第１対話装置２０に大きな音量の第１音声データを送信する。当該第１対話装置２０の制御部２６は、第２ユーザが発話した内容を、取得された第１音声データに基づいて大きな音量で、出力部２５のスピーカなどから第１ユーザに向けて出力する。

【0068】

ステップＳ２０８では、情報処理装置１０の制御部１３は、ステップＳ２０６において生成された小さな音量の第２音声データを、上記対話相手としての第１ユーザ及び発話した第２ユーザ以外のユーザの第２対話装置３０に送信する。より具体的には、制御部１３は、ステップＳ２０６において生成された第２音声データを、第２ユーザが視線を向けて発話した対話相手としての第１ユーザ及び発話した第２ユーザ以外のユーザの第２対話装置３０に、通信部１１及びネットワーク４０を介して送信する。当該第２対話装置３０の制御部３６は、情報処理装置１０において生成された第２音声データを、ネットワーク４０及び通信部３１を介して情報処理装置１０から受信する。

【0069】

以上により、情報処理装置１０の制御部１３は、第２対話装置３０の画面に表示される第１ユーザに第２ユーザが視線を向けて発話すると、第１ユーザ及び発話した第２ユーザ以外のユーザの第２対話装置３０に小さな音量の第２音声データを送信する。当該第２対話装置３０の制御部３６は、第２ユーザが発話した内容を、取得された第２音声データに基づいて小さな音量で、出力部３５のスピーカなどから第２ユーザに向けて出力する。

【0070】

図５は、第１ユーザの第１対話装置２０の出力部２５の画面に表示される映像の一例を示す模式図である。

【0071】

第１対話装置２０の制御部２６は、第２対話装置３０を用いて取得された第２ユーザの映像及び音声データを、出力部２５を用いて出力する。より具体的には、制御部２６は、複数の第２ユーザの映像を出力部２５の画面に表示する。制御部２６は、複数の第２ユーザの音声を出力部２５のイヤホンから出力する。

【0072】

このとき、制御部２６は、情報処理装置１０から取得されたアラート情報に基づいて、推定されたパラメータが閾値未満である各対話相手を示すアラートを出力部２５の画面に表示する。より具体的には、情報処理装置１０の制御部１３は、第１ユーザの第１対話装置２０の出力部２５の画面に表示されている対話相手を強調表示させることでアラートを表示させる。

【0073】

例えば、制御部２６は、推定された理解度が閾値未満である第２ユーザＡを示す第１アラートＵ１を出力部２５の画面に表示する。制御部２６は、出力部２５の画面に表示されている第２ユーザＡの周囲を枠で囲って第２ユーザＡを強調表示させることで第１アラートＵ１を表示させる。

【0074】

例えば、制御部２６は、推定された関心度が閾値未満である第２ユーザＢ及び第２ユーザＣを示す第２アラートＵ２を出力部２５の画面に表示する。制御部２６は、出力部２５の画面に表示されている第２ユーザＢ及び第２ユーザＣの各々の周囲を第１アラートＵ１と異なる枠で囲って第２ユーザＢ及び第２ユーザＣの各々を強調表示させることで第２アラートＵ２を表示させる。

【0075】

制御部２６は、出力部２５の画面において第１アラートＵ１が表示されている第２ユーザＡに第１ユーザが視線を向けて発話したときの視線情報を、取得部２３を用いて取得する。このとき、制御部２６は、第１ユーザの発話内容を、入力部２４に含まれるマイクロフォンを用いて音声データとして視線情報と共に取得する。

【0076】

第２ユーザＡの第２対話装置３０の制御部３６は、第１ユーザが発話した内容を、情報処理装置１０により生成され情報処理装置１０から取得された第１音声データに基づいて大きな音量で、出力部３５のスピーカなどから第２ユーザＡに向けて出力する。第２ユーザＡ以外の第２ユーザの第２対話装置３０の制御部３６は、第１ユーザが発話した内容を、情報処理装置１０により生成され情報処理装置１０から取得された第２音声データに基づいて小さな音量で、出力部３５のスピーカなどから第２ユーザに向けて出力する。

【0077】

制御部２６は、出力部２５の画面において第２アラートＵ２が表示されている第２ユーザＢに第１ユーザが視線を向けて発話したときの視線情報を、取得部２３を用いて取得する。このとき、制御部２６は、第１ユーザの発話内容を、入力部２４に含まれるマイクロフォンを用いて音声データとして視線情報と共に取得する。

【0078】

第２ユーザＢの第２対話装置３０の制御部３６は、第１ユーザが発話した内容を、情報処理装置１０により生成され情報処理装置１０から取得された第１音声データに基づいて大きな音量で、出力部３５のスピーカなどから第２ユーザＢに向けて出力する。第２ユーザＢ以外の第２ユーザの第２対話装置３０の制御部３６は、第１ユーザが発話した内容を、情報処理装置１０により生成され情報処理装置１０から取得された第２音声データに基づいて小さな音量で、出力部３５のスピーカなどから第２ユーザに向けて出力する。

【0079】

情報処理システム１における以上のような処理内容は、出力部２５の画面において第２アラートＵ２が表示されている第２ユーザＣに対しても同様に当てはまる。

【0080】

図６は、第２ユーザの第２対話装置３０の出力部３５の画面に表示される映像の一例を示す模式図である。

【0081】

第２対話装置３０の制御部３６は、第１対話装置２０を用いて取得された第１ユーザの映像及び音声データを、出力部３５を用いて出力する。より具体的には、制御部３６は、第１ユーザの映像を出力部３５の画面に表示する。制御部３６は、第１ユーザの音声を出力部３５のイヤホンから出力する。

【0082】

第２対話装置３０の制御部３６は、他の第２対話装置３０を用いて取得された他の第２ユーザの映像及び音声データを、出力部３５を用いて出力する。より具体的には、制御部３６は、複数の他の第２ユーザの映像を出力部３５の画面に表示する。制御部３６は、複数の他の第２ユーザの音声を出力部３５のイヤホンから出力する。

【0083】

制御部３６は、出力部３５の画面に表示されている第１ユーザＤに第２ユーザが視線を向けて発話したときの視線情報を、取得部３３を用いて取得する。このとき、制御部３６は、第２ユーザの発話内容を、入力部３４に含まれるマイクロフォンを用いて音声データとして視線情報と共に取得する。

【0084】

第１ユーザＤの第１対話装置２０の制御部２６は、第２ユーザが発話した内容を、情報処理装置１０により生成され情報処理装置１０から取得された第１音声データに基づいて大きな音量で、出力部２５のスピーカなどから第１ユーザＤに向けて出力する。第１ユーザＤ及び発話した第２ユーザ以外のユーザの第２対話装置３０の制御部３６は、第２ユーザが発話した内容を、情報処理装置１０により生成され情報処理装置１０から取得された第２音声データに基づいて小さな音量で、出力部３５のスピーカなどから第２ユーザに向けて出力する。

【0085】

以上のような一実施形態によれば、相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話サービスの利便性が向上する。情報処理装置１０は、推定されたパラメータが閾値未満である各対話相手を示すアラートを第１ユーザの第１対話装置２０に表示させる。これにより、第１ユーザは、遠隔対話における話題に対するパラメータが低い各対話相手を視認可能となる。したがって、第１ユーザは、例えば話題に対する理解度が低い対話相手に対して理解度を向上させるためにより詳細な説明を当該対話相手に対して行うこともできる。第１ユーザは、例えば話題に対する関心度又は集中度が低い対話相手に対して当該話題に意識をより向けさせるために適切なフォローを当該対話相手に対して行うこともできる。

【0086】

情報処理装置１０は、第１ユーザが視線を向けて発話した、アラートが表示されている対話相手の第２対話装置３０に大きな音量の第１音声データを送信する。一方で、情報処理装置１０は、当該対話相手以外の対話相手の第２対話装置３０に小さな音量の第２音声データを送信する。以上により、第１ユーザの発話した音声が、第１ユーザの注目対象である対話相手の第２対話装置３０では比較的大きな音量で出力される一方、注目対象以外の対話相手の第２対話装置３０では比較的小さな音量で出力される。したがって、例えば第１ユーザが教師である場合に、第１ユーザは、パラメータが低い対話相手に対して選択的に呼びかけを行うことができる。

【0087】

情報処理装置１０は、第２ユーザが第１ユーザに視線を向けて発話すると、第１ユーザの第１対話装置２０に大きな音量の第１音声データを送信する。情報処理装置１０は、第１ユーザ及び発話した第２ユーザ以外のユーザの第２対話装置３０に小さな音量の第２音声データを送信する。以上により、第２ユーザの発話した音声が、第２ユーザの注目対象である第１ユーザの第１対話装置２０では比較的大きな音量で出力される一方、注目対象以外の対話相手の第２対話装置３０では比較的小さな音量で出力される。したがって、例えば第２ユーザが生徒である場合に、当該第２ユーザは、自身の第２対話装置３０の画面上の教師に注目しながら質問することで、他の生徒には質問内容を伝わりにくくすることができる。したがって、情報処理装置１０は、当該第２ユーザに対して積極的に質問を促すことが可能となる。

【0088】

第１ユーザが遠隔対話の話題に対する教師を含み、第２ユーザが教師との対話相手としての生徒を含むことで、情報処理システム１は、一対複数によるオンライン授業のサービスに活用可能である。

【0089】

情報処理装置１０は、第１ユーザの第１対話装置２０の画面に表示されている対話相手を強調表示させることでアラートを表示させる。これにより、所定の第２ユーザを示すアラートの視認性が向上する。第１ユーザは、自身の第１対話装置２０の画面上で、アラートが示された所定の第２ユーザを容易に認識することができる。

【0090】

パラメータが、遠隔対話の話題に対する各対話相手の理解度、関心度、及集中度の少なくとも１つを含むことで、情報処理装置１０は、理解度、関心度、及集中度の少なくとも１つを基準にして閾値未満の所定の第２ユーザを特定することができる。

【0091】

本開示を諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び改変を行うことが可能であることに注意されたい。したがって、これらの変形及び改変は本開示の範囲に含まれることに留意されたい。例えば、各構成又は各ステップなどに含まれる機能などは論理的に矛盾しないように再配置可能であり、複数の構成又はステップなどを１つに組み合わせたり、或いは分割したりすることが可能である。

【0092】

例えば、上述した実施形態で情報処理装置１０において実行される少なくとも一部の処理動作が第１対話装置２０又は第２対話装置３０において実行されてもよい。例えば、情報処理装置１０に代えて、第１対話装置２０又は第２対話装置３０自体が、情報処理装置１０に関する上述した一連の処理動作を実行してもよい。第１対話装置２０又は第２対話装置３０において実行される少なくとも一部の処理動作が情報処理装置１０において実行されてもよい。

【0093】

例えば、スマートフォン又はコンピュータなどの汎用の電子機器を、上述した実施形態に係る情報処理装置１０として機能させる構成も可能である。具体的には、実施形態に係る情報処理装置１０などの各機能を実現する処理内容を記述したプログラムを、電子機器のメモリに格納し、電子機器のプロセッサにより当該プログラムを読み出して実行させる。したがって、一実施形態に係る開示は、プロセッサが実行可能なプログラムとしても実現可能である。

【0094】

又は、一実施形態に係る開示は、実施形態に係る情報処理装置１０などに各機能を実行させるために１つ又は複数のプロセッサにより実行可能なプログラムを記憶した非一時的なコンピュータ読取可能な媒体としても実現し得る。本開示の範囲には、これらも包含されると理解されたい。

【0095】

上記実施形態では、情報処理装置１０は、第２ユーザが第１ユーザに視線を向けて発話すると第１対話装置２０に第１音声データを送信し、第１ユーザ及び発話した第２ユーザ以外のユーザの第２対話装置３０に第２音声データを送信すると説明したが、これに限定されない。情報処理装置１０は、このような処理を実行しなくてもよい。すなわち、情報処理システム１は、第２ユーザが第１ユーザに視線を向けて発話したときであっても、発話した第２ユーザ以外のユーザの対話装置に同様の音量で当該第２ユーザの音声を出力させてもよい。

【0096】

上記実施形態では、第１ユーザは、遠隔対話の話題に対する教師を含むと説明したが、これに限定されない。第１ユーザは、教師との対話相手としての生徒を含んでもよいし、教師及び生徒の関係性以外の関係性を有する任意の他のユーザを含んでもよい。例えば、第１ユーザは、ビジネス会議などの任意の会議にオンラインで参加しているユーザを含んでもよい。

【0097】

上記実施形態では、情報処理システム１を利用する第１ユーザは１人であり情報処理システム１が１つの第１対話装置２０のみ有すると説明したが、これに限定されない。情報処理システム１を利用する第１ユーザは複数人であってもよく、情報処理システム１が複数の第１対話装置２０を有してもよい。

【0098】

上記実施形態では、第２ユーザは、教師との対話相手としての生徒を含むと説明したが、これに限定されない。第２ユーザは、遠隔対話の話題に対する教師を含んでもよいし、教師及び生徒の関係性以外の関係性を有する任意の他のユーザを含んでもよい。例えば、第２ユーザは、ビジネス会議などの任意の会議にオンラインで参加しているユーザを含んでもよい。

【0099】

上記実施形態では、情報処理システム１を利用する第２ユーザは複数人であり情報処理システム１が複数の第２対話装置３０を有すると説明したが、これに限定されない。情報処理システム１を利用する第２ユーザは１人であってもよく、情報処理システム１が１つの第２対話装置３０のみを有してもよい。

【0100】

上記実施形態では、情報処理システム１は、教師一人に対し複数人の生徒によるオンライン授業のサービスに活用されると説明したが、これに限定されない。情報処理システム１は、教師一人に対し一人の生徒によるオンライン授業のサービスに活用されてもよいし、教師複数人に対し一人又は複数人の生徒によるオンライン授業のサービスに活用されてもよい。その他にも、情報処理システム１は、第１ユーザ及び第２ユーザについて一対一、一対複数、複数対一、又は複数対複数のオンライン会議のサービスに活用されてもよい。

【0101】

上記実施形態では、情報処理装置１０は、第１ユーザの第１対話装置２０の画面に表示されている対話相手を強調表示させることでアラートを表示させると説明したが、これに限定されない。情報処理装置１０は、第１ユーザの第１対話装置２０の画面に表示されている対話相手を強調表示以外の任意の表示手段で表示させることでアラートを表示させてもよい。

【0102】

上記実施形態では、パラメータは、遠隔対話の話題に対する各対話相手の理解度、関心度、及集中度の少なくとも１つを含むと説明したが、これに限定されない。パラメータは、遠隔対話の話題に対する各対話相手の状態を数値として客観的に捉えることが可能な任意の他の指標を含んでもよい。

【0103】

以下に本開示の実施形態の一部について例示する。しかしながら、本開示の実施形態はこれらに限定されない点に留意されたい。
［付記１］
相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理装置であって、
遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信する制御部、を備える、
情報処理装置。
［付記２］
付記１に記載の情報処理装置であって、
前記制御部は、前記第２ユーザが前記第１ユーザに視線を向けて発話すると、前記第１ユーザの前記対話装置に前記第１音声データを送信し、前記第１ユーザ及び発話した前記第２ユーザ以外の前記ユーザの前記対話装置に前記第２音声データを送信する、
情報処理装置。
［付記３］
付記１又は２に記載の情報処理装置であって、
前記第１ユーザは、前記遠隔対話の話題に対する教師を含み、
前記第２ユーザは、前記教師との前記対話相手としての生徒を含む、
情報処理装置。
［付記４］
付記１乃至３のいずれか１つに記載の情報処理装置であって、
前記制御部は、前記第１ユーザの前記対話装置の前記画面に表示されている前記対話相手を強調表示させることで前記アラートを表示させる、
情報処理装置。
［付記５］
付記１乃至４のいずれか１つに記載の情報処理装置であって、
前記パラメータは、前記遠隔対話の話題に対する各対話相手の理解度、関心度、及集中度の少なくとも１つを含む、
情報処理装置。
［付記６］
付記１乃至５のいずれか１つに記載の情報処理装置と、
複数の前記ユーザのそれぞれによって使用される前記対話装置と、
を備える、
情報処理システム。
［付記７］
相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理装置に、
遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信することを含む動作を実行させる、
プログラム。
［付記８］
相互に遠隔に位置する複数のユーザのそれぞれによって使用される対話装置を用いた対話を支援する情報処理方法であって、
遠隔対話の実行中、各対話相手の映像に基づいて、前記遠隔対話の話題に対する各対話相手のパラメータを推定し、推定された前記パラメータが閾値未満である各対話相手を示すアラートを第１ユーザの前記対話装置に表示させ、該対話装置の画面に表示される、第２ユーザとしての複数の対話相手のうち、前記アラートが表示された対話相手に前記第１ユーザが視線を向けて発話すると、該対話相手の前記対話装置に大きな音量の第１音声データを送信し、該対話相手以外の対話相手の前記対話装置に小さな音量の第２音声データを送信することを含む、
情報処理方法。

【符号の説明】

【0104】

１ 情報処理システム
１０ 情報処理装置
１１ 通信部
１２ 記憶部
１３ 制御部
２０ 第１対話装置
２１ 通信部
２２ 記憶部
２３ 取得部
２４ 入力部
２５ 出力部
２６ 制御部
３０ 第２対話装置
３１ 通信部
３２ 記憶部
３３ 取得部
３４ 入力部
３５ 出力部
３６ 制御部
４０ ネットワーク
Ａ、Ｂ、Ｃ 第２ユーザ
Ｄ 第１ユーザ
Ｕ１ 第１アラート
Ｕ２ 第２アラート

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】