特許 7500452 心理状態管理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-06-07

(45)【発行日】2024-06-17

(54)【発明の名称】心理状態管理装置

(51)【国際特許分類】

   A61B 5/16 20060101AFI20240610BHJP

   G10L 25/63 20130101ALI20240610BHJP

   G10L 13/08 20130101ALI20240610BHJP

   G10L 15/10 20060101ALI20240610BHJP

   G10L 15/22 20060101ALI20240610BHJP

   G16H 20/00 20180101ALI20240610BHJP

【ＦＩ】

A61B5/16 120

G10L25/63

G10L13/08 124

G10L15/10 200W

G10L15/22 300U

G16H20/00

【請求項の数】 5

(21)【出願番号】P 2021011382

(22)【出願日】2021-01-27

(65)【公開番号】P2022114906

(43)【公開日】2022-08-08

【審査請求日】2023-08-15

(73)【特許権者】

【識別番号】392026693

【氏名又は名称】株式会社ＮＴＴドコモ

(74)【代理人】

【識別番号】100088155

【弁理士】

【氏名又は名称】長谷川 芳樹

(74)【代理人】

【識別番号】100113435

【弁理士】

【氏名又は名称】黒木 義樹

(74)【代理人】

【識別番号】100121980

【弁理士】

【氏名又は名称】沖山 隆

(74)【代理人】

【識別番号】100128107

【弁理士】

【氏名又は名称】深石 賢治

(72)【発明者】

【氏名】瀧上 順也

(72)【発明者】

【氏名】飯島 采永

(72)【発明者】

【氏名】菊入 圭

【審査官】田中 洋行

(56)【参考文献】

【文献】米国特許出願公開第２０１８／０１３２７７６（ＵＳ，Ａ１）

【文献】特開２０１７－１４４２２２（ＪＰ，Ａ）

【文献】特開２０２０－１３４７１９（ＪＰ，Ａ）

【文献】特開２０１７－２１５４６８（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ａ６１Ｂ ５／０６－５／２２

Ｇ１０Ｌ ２５／６３

Ｇ１０Ｌ １３／０８

Ｇ１０Ｌ １５／１０

Ｇ１０Ｌ １５／２２

Ｇ１６Ｈ ２０／００

(57)【特許請求の範囲】

【請求項1】

対象者の心理状態を管理する心理状態管理装置であって、
前記対象者の生体の状態を示し該対象者から検知された事象に基づく所定の生体情報を取得する生体情報取得部と、
前記生体情報に基づいて、前記対象者の心理状態を推定する心理状態推定部と、
前記心理状態推定部により推定された心理状態を示す推定心理状態情報を前記対象者に提示する提示部と、
前記推定心理状態情報の提示に応じて前記対象者により入力された、前記推定心理状態情報の妥当性の評価を示す妥当性評価情報を取得する妥当性評価取得部と、
前記推定心理状態情報及び前記妥当性評価情報に基づいて、前記対象者の心理状態を決定する心理状態決定部と、
前記心理状態決定部により決定された心理状態を示す心理状態情報を出力する心理状態出力部と、
前記推定心理状態情報に対する妥当性の評価の履歴に基づいて、調整パラメータを生成し、生成した前記調整パラメータを適用して前記推定心理状態情報を調整する調整部と、を備え、
前記推定心理状態情報は、心理状態の種類を示す１以上の指標項目及び該指標項目に該当する程度を示す指標値を含み、
前記調整部は、指標値の高さに対して妥当性が低いと評価された頻度が高い指標項目ほど、より低い指標値が推定されるような前記調整パラメータを生成し、又は、指標値の低さに対して妥当性が低いと評価された頻度が高い指標項目ほど、より高い指標値が推定されるような前記調整パラメータを生成し、
前記提示部は、前記調整部により調整された前記推定心理状態情報を前記対象者に提示する、
心理状態管理装置。

【請求項2】

対象者の心理状態を管理する心理状態管理装置であって、
前記対象者の生体の状態を示し該対象者から検知された事象に基づく所定の生体情報を取得する生体情報取得部と、
前記生体情報に基づいて、前記対象者の心理状態を推定する心理状態推定部と、
前記心理状態推定部により推定された心理状態を示す推定心理状態情報を前記対象者に提示する提示部と、
前記推定心理状態情報の提示に応じて前記対象者により入力された、前記推定心理状態情報の妥当性の評価を示す妥当性評価情報を取得する妥当性評価取得部と、
前記推定心理状態情報及び前記妥当性評価情報に基づいて、前記対象者の心理状態を決定する心理状態決定部と、
前記心理状態決定部により決定された心理状態を示す心理状態情報を出力する心理状態出力部と、を備え、
前記生体情報は、前記対象者が発した音声情報を含み、
前記心理状態管理装置は、
前記音声情報及び前記推定心理状態情報の少なくともいずれか一方に基づいて、前記対象者に対して出力する発話内容を示す発話情報を生成する発話生成部と、
前記発話情報により示される発話内容を所定の出力形式で出力する発話出力部と、を更に備え、
前記発話生成部は、
前記音声情報からキーワードを抽出し、キーワードと発話内容とが予め関連付けてられている第１対話シナリオを参照して、前記音声情報から抽出されたキーワードに関連付けられた発話内容を取得する、
心理状態管理装置。

【請求項3】

前記生体情報取得部は、前記発話出力部による発話内容の出力に応じて前記対象者から検知された事象に基づく前記生体情報を更に取得し、
前記心理状態推定部は、前記生体情報取得部により更に取得された前記生体情報を含む複数の前記生体情報に基づいて、前記対象者の心理状態を推定する、
請求項２に記載の心理状態管理装置。

【請求項4】

前記発話生成部は、
心理状態と発話内容とが予め関連付けられている第２対話シナリオを参照して、前記推定心理状態情報により示される心理状態に関連付けられた発話内容を取得する、
請求項２又は３に記載の心理状態管理装置。

【請求項5】

前記発話出力部は、
前記発話情報により示される発話内容を合成音声により出力し、
前記推定心理状態情報に基づいて、前記合成音声の前記対象者による感じられ方に寄与する１以上の音声合成パラメータを決定し、
前記音声合成パラメータを用いて前記合成音声を生成する、
請求項２～４のいずれか一項に記載の心理状態管理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、対象者の心理状態を管理する心理状態管理装置に関する。

【背景技術】

【0002】

教育機関及び企業等に例示される組織において、学習効率及び労働生産性等の向上のために、教師及び上司等の管理者が、生徒及び従業員等の心理状態を把握及び管理することが求められている。例えば、特許文献１には、話者の音声に基づいて感情状態を推定し、各話者の感情情報の統計に基づいて判定した異常状態等を示す一覧表示画面を管理者等に提供するシステムが開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０２０－１６０２４６号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１に記載されたシステムでは、話者の音声に基づいて感情状態が推定されるので、話者の主観によらずに感情状態を推定できる。しかしながら、感情状態の推定に誤りがあった場合には、管理者は感情状態の推定の正誤を判断できないので、誤った感情状態の情報が管理者に提示されていた。

【0005】

そこで、本発明は、上記問題点に鑑みてなされたものであり、管理者が、対象者に関する信頼性の高い心理状態の情報を得ることを目的とする。

【課題を解決するための手段】

【0006】

上記課題を解決するために、本発明の一形態に係る心理状態管理装置は、対象者の心理状態を管理する心理状態管理装置であって、対象者の生体の状態を示し該対象者から検知された事象に基づく所定の生体情報を取得する生体情報取得部と、生体情報に基づいて、対象者の心理状態を推定する心理状態推定部と、心理状態推定部により推定された心理状態を示す推定心理状態情報を対象者に提示する提示部と、推定心理状態情報の提示に応じて対象者により入力された、推定心理状態情報の妥当性の評価を示す妥当性評価情報を取得する妥当性評価取得部と、推定心理状態情報及び妥当性評価情報に基づいて、対象者の心理状態を決定する心理状態決定部と、心理状態決定部により決定された心理状態を示す心理状態情報を出力する心理状態出力部と、を備える。

【0007】

上記の形態によれば、生体情報に基づいて推定された心理状態を示す推定心理状態情報が対象者に提示され、推定心理状態情報の妥当性の評価を示す妥当性評価情報が取得されるので、推定心理状態情報の正誤の判断が可能となる。そして、妥当性評価情報を用いて決定された心理状態情報が出力されるので、管理者は、対象者に関する信頼性の高い心理状態の情報を得ることが可能となる。

【発明の効果】

【0008】

管理者が、対象者に関する信頼性の高い心理状態の情報を得ることが可能となる。

【図面の簡単な説明】

【0009】

【図1】本実施形態の心理状態管理装置を含むシステムの装置構成を示す図である。

【図2】第１実施形態の心理状態管理装置の機能的構成を示すブロック図である。

【図3】心理状態管理装置のハードブロック図である。

【図4】推定心理状態情報の例を示す図である。

【図5】対象者の端末における推定心理状態情報の提示及び妥当性評価情報の入力のための表示画面例を示す図である。

【図6】推定心理状態情報及び妥当性評価情報に基づく心理状態の決定の例を示す図である。

【図7】複数の指標項目からなる推定心理状態情報及び心理状態情報の変換の例を示す図である。

【図8】心理状態記憶部の構成及び記憶されている心理状態情報の例を示す図である。

【図9】管理者の端末に出力された心理状態情報を表示する表示画面例を示す図である。

【図10】第１実施形態の心理状態管理装置における心理状態管理方法の処理内容を示すフローチャートである。

【図11】第２実施形態の心理状態管理装置の機能的構成を示すブロック図である。

【図12】推定心理状態情報の調整の例を示す図である。

【図13】第３実施形態の心理状態管理装置の機能的構成を示すブロック図である。

【図14】第３実施形態の心理状態管理装置における心理状態管理方法の処理内容を示すフローチャートである。

【図15】キーワードと発話内容とを予め関連付けて記憶している第１対話シナリオの例を示す図である。

【図16】心理状態と発話内容とを予め関連付けて記憶している第２対話シナリオの例を示す図である。

【図17】推定心理状態情報と音声合成パラメータセットとを予め関連付けて記憶している音声合成パラメータテーブルの例を示す図である。

【図18】心理状態管理プログラムの構成を示す図である。

【発明を実施するための形態】

【0010】

本発明に係る心理状態管理装置の実施形態について図面を参照して説明する。なお、可能な場合には、同一の部分には同一の符号を付して、重複する説明を省略する。

【0011】

図１は、本実施形態に係る心理状態管理装置を含むシステムの装置構成を示す図である。図１に示されるように、心理状態管理装置１０は通信ネットワークＮを解して対象者の端末３０Ａ（３０）及び管理者の端末３０Ｂ（３０）と通信可能に構成されている。

【0012】

心理状態管理装置１０は、対象者の心理状態を管理する装置である。具体的には、本実施形態の心理状態管理装置１０は、例えば、教育機関及び企業等に例示される組織において、学習効率及び労働生産性等の向上のために、教師及び上司等の管理者が、生徒及び従業員等の心理状態を把握及び管理するために適用される装置である。

【0013】

端末３０は、管理者または対象者により操作される装置である。対象者の端末３０Ａは、後に詳述されるように、各種のセンサによるユーザの生体情報の検出、生体情報の心理状態管理装置１０への送信、対象者による入力の受け付け及び受け付けた情報の心理状態管理装置１０への送信並びに心理状態管理装置１０から受信した情報の表示等を実施する。管理者の端末３０Ｂは、心理状態管理装置１０から受信した情報の提示等を実施する。端末３０を構成する装置は限定されず、例えば高機能携帯電話機（スマートフォン）、携帯電話機及び携帯情報端末（ＰＤＡ）などの携帯端末であってもよい。

【0014】

図２は、第１実施形態の心理状態管理装置１０の機能的構成を示すブロック図である。心理状態管理装置１０は、機能的には、生体情報取得部１１、心理状態推定部１２、提示部１３、妥当性評価取得部１４、心理状態決定部１５及び心理状態出力部１６を含む。これらの各機能部１１～１６は、一つの装置（コンピュータ）に構成されてもよいし、複数の装置に分散されて構成されてもよい。

【0015】

また、心理状態管理装置１０は、心理状態記憶部２０といった記憶手段にアクセス可能に構成されている。心理状態記憶部２０は、後述されるように、心理状態決定部１５により決定された各対象者の心理状態情報等を記憶している。心理状態記憶部２０は、心理状態管理装置１０内に構成されてもよいし、図２に示されるように、心理状態管理装置１０の外部に、心理状態管理装置からアクセス可能な別の装置として構成されてもよい。

【0016】

なお、図１及び図２に示す例では、心理状態管理装置１０と端末３０とは別の装置として示されているが、心理状態管理装置１０の一部又は全ての機能部が端末３０に構成されてもよい。

【0017】

なお、図２に示したブロック図は、機能単位のブロックを示している。これらの機能ブロック（構成部）は、ハードウェア及びソフトウェアの少なくとも一方の任意の組み合わせによって実現される。また、各機能ブロックの実現方法は特に限定されない。すなわち、各機能ブロックは、物理的又は論理的に結合した１つの装置を用いて実現されてもよいし、物理的又は論理的に分離した２つ以上の装置を直接的又は間接的に（例えば、有線、無線などを用いて）接続し、これら複数の装置を用いて実現されてもよい。機能ブロックは、上記１つの装置又は上記複数の装置にソフトウェアを組み合わせて実現されてもよい。

【0018】

機能には、判断、決定、判定、計算、算出、処理、導出、調査、探索、確認、受信、送信、出力、アクセス、解決、選択、選定、確立、比較、想定、期待、見做し、報知（broadcasting）、通知（notifying）、通信（communicating）、転送（forwarding）、構成（configuring）、再構成（reconfiguring）、割り当て（allocating、mapping）、割り振り（assigning）などがあるが、これらに限られない。たとえば、送信を機能させる機能ブロック（構成部）は、送信部（transmitting unit）や送信機（transmitter）と呼称される。いずれも、上述したとおり、実現方法は特に限定されない。

【0019】

例えば、本発明の一実施の形態における心理状態管理装置１０は、コンピュータとして機能してもよい。図３は、本実施形態に係る心理状態管理装置１０のハードウェア構成の一例を示す図である。心理状態管理装置１０は、物理的には、プロセッサ１００１、メモリ１００２、ストレージ１００３、通信装置１００４、入力装置１００５、出力装置１００６、バス１００７などを含むコンピュータ装置として構成されてもよい。

【0020】

なお、以下の説明では、「装置」という文言は、回路、デバイス、ユニットなどに読み替えることができる。心理状態管理装置１０のハードウェア構成は、図に示した各装置を１つ又は複数含むように構成されてもよいし、一部の装置を含まずに構成されてもよい。

【0021】

心理状態管理装置１０における各機能は、プロセッサ１００１、メモリ１００２などのハードウェア上に所定のソフトウェア（プログラム）を読み込ませることで、プロセッサ１００１が演算を行い、通信装置１００４による通信や、メモリ１００２及びストレージ１００３におけるデータの読み出し及び／又は書き込みを制御することで実現される。

【0022】

プロセッサ１００１は、例えば、オペレーティングシステムを動作させてコンピュータ全体を制御する。プロセッサ１００１は、周辺装置とのインターフェース、制御装置、演算装置、レジスタなどを含む中央処理装置（ＣＰＵ：Central Processing Unit）で構成されてもよい。例えば、図２に示した各機能部１１～１６などは、プロセッサ１００１で実現されてもよい。

【0023】

また、プロセッサ１００１は、プログラム（プログラムコード）、ソフトウェアモジュールやデータを、ストレージ１００３及び／又は通信装置１００４からメモリ１００２に読み出し、これらに従って各種の処理を実行する。プログラムとしては、上述の実施の形態で説明した動作の少なくとも一部をコンピュータに実行させるプログラムが用いられる。例えば、心理状態管理装置１０の各機能部１１～１６は、メモリ１００２に格納され、プロセッサ１００１で動作する制御プログラムによって実現されてもよい。上述の各種処理は、１つのプロセッサ１００１で実行される旨を説明してきたが、２以上のプロセッサ１００１により同時又は逐次に実行されてもよい。プロセッサ１００１は、１以上のチップで実装されてもよい。なお、プログラムは、電気通信回線を介してネットワークから送信されても良い。

【0024】

メモリ１００２は、コンピュータ読み取り可能な記録媒体であり、例えば、ＲＯＭ（Read Only Memory）、ＥＰＲＯＭ（Erasable Programmable ＲＯＭ）、ＥＥＰＲＯＭ（Electrically Erasable Programmable ＲＯＭ）、ＲＡＭ（Random Access Memory）などの少なくとも１つで構成されてもよい。メモリ１００２は、レジスタ、キャッシュ、メインメモリ（主記憶装置）などと呼ばれてもよい。メモリ１００２は、本発明の一実施の形態に係る心理状態管理方法を実施するために実行可能なプログラム（プログラムコード）、ソフトウェアモジュールなどを保存することができる。

【0025】

ストレージ１００３は、コンピュータ読み取り可能な記録媒体であり、例えば、ＣＤ－ＲＯＭ（Compact Disc ＲＯＭ）などの光ディスク、ハードディスクドライブ、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Ｂｌｕ－ｒａｙ（登録商標）ディスク)、スマートカード、フラッシュメモリ(例えば、カード、スティック、キードライブ)、フロッピー（登録商標）ディスク、磁気ストリップなどの少なくとも１つで構成されてもよい。ストレージ１００３は、補助記憶装置と呼ばれてもよい。上述の記憶媒体は、例えば、メモリ１００２及び／又はストレージ１００３を含むデータベース、サーバその他の適切な媒体であってもよい。

【0026】

通信装置１００４は、有線及び／又は無線ネットワークを介してコンピュータ間の通信を行うためのハードウェア（送受信デバイス）であり、例えばネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュールなどともいう。

【0027】

入力装置１００５は、外部からの入力を受け付ける入力デバイス（例えば、キーボード、マウス、マイクロフォン、スイッチ、ボタン、センサなど）である。出力装置１００６は、外部への出力を実施する出力デバイス（例えば、ディスプレイ、スピーカー、LEDランプなど）である。なお、入力装置１００５及び出力装置１００６は、一体となった構成（例えば、タッチパネル）であってもよい。

【0028】

また、プロセッサ１００１やメモリ１００２などの各装置は、情報を通信するためのバス１００７で接続される。バス１００７は、単一のバスで構成されてもよいし、装置間で異なるバスで構成されてもよい。

【0029】

また、心理状態管理装置１０は、マイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ：Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）などのハードウェアを含んで構成されてもよく、当該ハードウェアにより、各機能ブロックの一部又は全てが実現されてもよい。例えば、プロセッサ１００１は、これらのハードウェアの少なくとも１つで実装されてもよい。

【0030】

再び図２を参照して、心理状態管理装置１０の機能部を説明する。生体情報取得部１１は、対象者の生体の状態を示す生体情報を対象者の端末３０Ａから取得する。生体情報は、端末３０Ａにおいて対象者から検知された事象に基づく所定の情報である。

【0031】

生体情報は、音声情報、映像情報及びその他の検出情報の少なくともいずれか一つであることができる。音声情報は、対象者により発せられた音声を含み、例えば端末３０Ａに備えられたマイク等により検知されてもよい。映像情報は、対象者を撮像した映像を含み、例えば端末３０Ａに備えられたカメラ等により検知されてもよい。映像情報は、対象者の表情、目線及びしぐさ等の情報を含み得る。生体情報としてのその他の検出情報は、端末３０Ａに備えられた又は端末３０Ａの外部に設けられた各種のセンサにより検知された情報であって、例えば、対象者の心拍、体温、発汗、呼吸及び脳波等の情報であってもよい。

【0032】

心理状態推定部１２は、生体情報に基づいて対象者の心理状態を推定する。心理状態推定部１２は、種々の既知の手法により、生体情報に基づいて心理状態を推定してもよい。一例として、心理状態推定部１２は、機械学習により構築された推定モデルを用いて、心理状態を推定してもよい。具体的には、生体情報を定量化及びベクトル化した入力データと当該生体情報に対応する心理状態を表す正解データとのペアからなる学習データを用いて、生体情報と心理状態との関係を機械学習させることにより推定モデルが構築される。推定モデルは、例えば、ニューラルネットワークを含むモデルであってもよい。

【0033】

機械学習に供される入力データは、例えば生体情報が音声情報である場合には、声の高さ及び音色等の音響的要素を定量化した数値であってもよく、発声されている音声をテキストとして認識した後の単語や文章であってもよい。生体情報が対象者の表情及びしぐさ等の映像情報である場合には、目や口などの特徴点の位置情報に対応する数値であり、生体情報が体温、心拍、脳波、発汗及び呼吸等である場合にはそれらに対応した各種センサで取得できる数値である。

【0034】

図４は、心理状態推定部１２により推定された心理状態を示す推定心理状態情報の一例を示す図である。図４に示される例では、推定心理状態情報は、心理状態の種類（感情の種類）を示す複数の指標項目、及び、各指標項目に該当する程度（確からしさ）を示す指標値を含む。具体的には、推定心理状態情報は、怒り、喜び、悲しみ、不安、興味及び興奮の６つの指標項目を含む。なお、推定心理状態情報は、図４に示される例に限定されず、例えば、集中度及び理解度といった指標項目を更に含んでもよいし、１つの指標値から構成されてもよい。

【0035】

提示部１３は、推定心理状態情報を対象者に提示する。具体的には、提示部１３は、推定心理状態情報を対象者の端末３０Ａに送信し、端末３０Ａが備える表示装置に推定心理状態情報を表示させる。

【0036】

妥当性評価取得部１４は、推定心理状態情報の妥当性の評価を示す妥当性評価情報を取得する。妥当性評価情報は、推定心理状態情報の提示に応じて対象者により入力された情報である。具体的には、端末３０Ａにおいて対象者により入力された妥当性評価情報が、端末３０Ａから心理状態管理装置１０に送信される。妥当性評価取得部１４は、端末３０Ａから送信された妥当性評価情報を取得する。

【0037】

図５は、端末３０Ａの表示装置において表示された表示画面の例を示す図であって、推定心理状態情報の提示及び妥当性評価情報の入力のための表示画面例を示す図である。

【0038】

図５に示されるように、端末３０Ａは、提示部１３から送信された推定心理情報を、符号ｆ１に示されるように、所定の表示形式により表示画面Ｄ１に表示させる。また、端末３０Ａは、推定心理状態情報の妥当性の評価結果の対象者による入力を受け付けるための入力欄ｖ１を、表示画面Ｄ１に表示させる。図５に示される例では、妥当性評価情報は、３段階の評価尺度（そうだ（ＹＥＳ）／まあそうだ（ＢＡＳＩＣＡＬＬＹ ＹＥＳ）／ちがう（ＮＯ））のいずれかの選択により入力される。

【0039】

妥当性評価情報は、３段階のいずれかの入力には限定されず、「はい（ＹＥＳ）」又は「いいえ（ＮＯ）」の２値で入力されてもよいし、その他の入力態様であってもよい。また、図５に示される例では、推定心理状態情報の全体に対して一つの妥当性評価情報が入力されるが、この例には限定されず、例えば、推定心理状態情報を構成する複数の指標項目のそれぞれに対して妥当性評価情報が入力されることとしてもよい。

【0040】

再び図２を参照して、心理状態決定部１５は、推定心理状態情報及び妥当性評価情報に基づいて、対象者の心理状態を決定する。図６は、推定心理状態情報及び妥当性評価情報に基づく心理状態の決定の例を示す図である。図６に示す例では、心理状態決定部１５は、推定心理状態情報ｆ２に妥当性評価情報ｖ２を適用して対象者の心理状態を決定し、決定された心理状態を示す心理状態情報ｆ２１～ｆ２３を出力する。

【0041】

具体的には、妥当性評価情報ｖ２が「そうだ」又は「まあそうだ」である場合には、心理状態決定部１５は、心理状態情報の各指標項目の指標値が推定心理状態情報の各指標項目の指標値と等しくなるように心理状態情報ｆ２１，ｆ２２を生成する。また、妥当性評価情報ｖ２が「ちがう」である場合には、心理状態情報の各指標項目の指標値が「ＮＵＬＬ」となるように、心理状態情報ｆ２３を生成する。

【0042】

なお、心理状態情報の生成は、図６に示された例に限定されず、心理状態決定部１５は、妥当性評価情報に応じて異なる係数を推定心理状態情報の各各指標項目の指標値に乗じて、心理状態情報の指標値を算出してもよい。

【0043】

心理状態決定部１５は、心理状態情報の複数の指標項目の各指標値を変換して、一の指標値を生成及び出力してもよい。図７は、複数の指標項目からなる心理状態情報の変換の例を示す図である。

【0044】

具体的には、図７に例示されるように、心理状態決定部１５は、心理状態情報の複数の指標項目の各指標値ｆ３１に対して指標項目ごとに設定された係数ｃ３を適用して加重平均を算出することにより、一の指標値ｆ３２を生成してもよい。心理状態決定部１５は、このように算出された指標値ｆ３２を当該対象者の心理状態情報として出力してもよい。

【0045】

また、心理状態決定部１５は、対象者の心理状態を表すシンボルを判定及び出力してもよい。具体的には、心理状態決定部１５は、指標値とシンボルとの関連付けｔ３を参照して、指標値ｆ３２に関連付けられたシンボルｆ３３を抽出及び出力してもよい。

【0046】

なお、図７は、心理状態決定部１５による心理状態情報の変換の例であるが、この変換を推定心理状態情報に対して適用してもよい。即ち、心理状態推定部１２が、複数の指標項目からなる推定心理状態情報を、図７に示した例と同様に変換して一の指標値を生成してもよいし、さらに、推定された心理状態を表すシンボルを一の指標値に基づいて抽出及び出力してもよい。

【0047】

心理状態出力部１６は、心理状態決定部１５により決定された対象者の心理状態を示す心理状態情報を出力する。心理状態情報の出力の一態様として、心理状態出力部１６は、心理状態情報を心理状態記憶部２０に記憶させてもよい。図８は、心理状態記憶部２０の構成及び記憶されている心理状態情報の例を示す図である。図８に示される例では、心理状態記憶部２０は、心理状態の推定を実施した時刻、対象者のＩＤ、心理状態情報及び音声認識結果を関連付けて記憶している。図８の示される例における心理状態情報は、一の指標値を含むが、複数の指標項目及び指標値を含んでもよい。音声認識結果は、生体情報の一態様として生体情報取得部１１により取得された音声情報の音声認識結果である。

【0048】

また、心理状態情報の出力の一態様として、心理状態出力部１６は、心理状態情報を管理者の端末３０Ｂに送信し、送信した心理状態情報を表示させてもよい。図９は、管理者の端末３０Ｂに出力された心理状態情報を表示する表示画面の例を示す図である。

【0049】

図９に示されるように、表示画面Ｄ２は、心理状態出力部１６により出力された各対象者の心理状態情報ｆ４を表示する。図９に示される例では、心理状態情報ｆ４は、対象者の心理状態を表すシンボルの態様を有する。また、表示画面Ｄ２は、心理状態の推定の根拠とされた音声情報の音声認識結果ｒ４の表示を含んでもよい。また、表示画面Ｄ２は、各対象者の心理状態情報の時系列の遷移を示すグラフとして示される心理状態遷移情報ｆ４１を含んでもよい。

【0050】

図１０は、心理状態管理装置１０における心理状態管理方法の処理内容を示すフローチャートである。

【0051】

ステップＳ１において、生体情報取得部１１は、対象者の生体の状態を示す生体情報を対象者の端末３０Ａから取得する。

【0052】

ステップＳ２において、心理状態推定部１２は、生体情報に基づいて対象者の心理状態を推定する。

【0053】

ステップＳ３において、提示部１３は、ステップＳ２において推定された、対象者の心理状態を示す推定心理状態情報を当該対象者に提示する。具体的には、提示部１３は、推定心理状態情報を対象者の端末３０Ａに表示させる。

【0054】

ステップＳ４において、妥当性評価取得部１４は、推定心理状態情報の提示に応じて対象者により入力された妥当性評価情報を取得する。

【0055】

ステップＳ５において、心理状態決定部１５は、推定心理状態情報及び妥当性評価情報に基づいて、対象者の心理状態を決定する。

【0056】

ステップＳ６において、心理状態出力部１６は、心理状態決定部１５により決定された対象者の心理状態を示す心理状態情報を出力する。心理状態出力部１６は、心理状態情報を心理状態記憶部２０に記憶させてもよいし、管理者の端末３０Ｂに心理状態情報を表示させてもよい。

【0057】

図１１は、第２実施形態の心理状態管理装置１０Ａ（１０）の機能的構成を示すブロック図である。心理状態管理装置１０Ａは、第１実施形態の心理状態管理装置１０が備える機能部１１～１６に加えて、調整部１７を備える。

【0058】

調整部１７は、推定心理状態に対する妥当性の評価の履歴に基づいて、推定心理状態情報を調整する。提示部１３は、調整部１７により調整された推定心理状態を対象者に提示する。

【0059】

図１２は、調整部１７による推定心理状態情報の調整の一例を示す図である。推定心理状態情報の調整の一例として、調整部１７は、推定心理状態情報に対する妥当性の評価の履歴に基づいて、調整パラメータを生成し、生成した調整パラメータを適用して前記推定心理状態情報を調整する。

【0060】

調整部１７は、心理状態推定部１２により推定された一の対象者の推定心理状態情報ｆ５を取得する。推定心理状態情報ｆ５は、調整部１７による調整前の推定心理状態情報である。推定心理状態情報ｆ５は、心理状態の種類を示す複数の指標項目及び当該指標項目に該当する程度を示す指標値を含む。

【0061】

調整部１７は、当該対象者に関する、妥当性評価情報の履歴である妥当性評価履歴情報ｖ５を取得する。妥当性評価履歴情報ｖ５は、対象者ごとに集計された妥当性評価情報の履歴であって、具体的には、当該対象者により妥当性の評価「ちがう」が入力された累計回数Ｎを指標項目ごとに集計した情報である。累計回数Ｎが大きい指標項目は、当該対象者において誤推定されやすい指標項目である。なお、累計回数の算出は過去の一定期間を対象としてもよいことは自明である。

【0062】

調整部１７は、指標値の高さに対して妥当性が低いと評価された頻度が高い指標項目ほど、より低い指標値が推定されるような調整パラメータｊ５を生成する。具体的には、調整部１７は、指標項目ごとに、例えば、（１．０－０．０１×Ｎ）という数式により、各指標項目の調整パラメータを生成する。なお、調整パラメータの生成の方法は、この数式によるものに限定されない。なお、調整部１７は、指標値の低さに対して妥当性が低いと評価された頻度が高い指標項目に対して、より高い指標値が推定されるような調整パラメータを生成してもよい。

【0063】

調整部１７は、調整前の推定心理状態情報ｆ５の各指標値に、調整パラメータｊ５を指標項目ごとに乗じて、調整された推定心理状態情報ｆ５１を生成する。提示部１３は、調整部１７により調整された推定心理状態情報ｆ５１を対象者に提示する。

【0064】

このように、推定心理状態情報が対象者ごとに調整されることにより、対象者ごとに最適化され妥当性がより向上された心理状態の推定結果を対象者に提示できる。

【0065】

図１３は、第３実施形態の心理状態管理装置１０Ｂ（１０）の機能的構成を示すブロック図である。心理状態管理装置１０Ｂは、第１実施形態の心理状態管理装置１０が備える機能部１１～１６に加えて、発話生成部１８及び発話出力部１９を備える。なお、心理状態管理装置１０Ｂは、第２実施形態の心理状態管理装置１０Ａが有する調整部１７を更に備えていてもよい。第３実施形態では、生体情報取得部１１により取得される生体情報は、対象者により発せられた音声を表す音声情報を含む。

【0066】

発話生成部１８は、音声情報及び推定心理状態情報の少なくともいずれか一方に基づいて、対象者に対して出力する発話内容を示す発話情報を生成する。

【0067】

発話出力部１９は、発話情報により示される発話内容を所定の出力形式で出力する。発話内容を所定の出力形式は、例えば、音声出力またはテキスト表示であり、発話出力部１９は、発話情報を端末３０Ａに送信し、端末３０Ａに発話内容を出力させる。

【0068】

図１４を参照しながら、発話情報の生成及び発話内容の出力について説明する。図１４は、第３実施形態の心理状態管理装置１０Ｂにおける心理状態管理方法の処理内容を示すフローチャートである。

【0069】

ステップＳ１１において、生体情報取得部１１は、対象者の生体情報（音声情報）を取得する。ステップＳ１２において、心理状態推定部１２は、生体情報に基づいて心理状態を推定する。

【0070】

ステップＳ１３において、心理状態推定部１２は、対象者からの音声の取得及び心理状態管理装置１０からの発話の出力からなる対話を終了させるか否かを判定する。対話の終了条件は、音声情報からなる生体情報の所定回数が予め設定された所定回数に達した場合等であってもよいが、この例に限定されない。対話を終了させると判定された場合には、処理はステップＳ１６に進む。一方、対話を終了させると判定されなかった場合には、処理はステップＳ１４に進む。

【0071】

ステップＳ１４において、発話生成部１８は、音声情報から認識される対象者の発話内容及び推定心理状態情報（ステップＳ１２において推定）の少なくともいずれか一方に基づいて、対象者に対して出力する発話内容を示す発話情報を生成する。

【0072】

発話情報の生成の一例として、発話生成部１８は、キーワードと発話内容とが予め関連付けてられている第１対話シナリオを参照して、音声情報から抽出されたキーワードに関連付けられた発話内容を取得する。図１５は、第１対話シナリオの例を示す図である。第１対話シナリオは、心理状態管理装置１０Ｂの内部または外部に構成され発話生成部１８からアクセス可能な記憶手段に予め設定及び記憶されている。図１５に示されるように、第１対話シナリオでは、キーワードに１又は複数の発話内容が関連付けられている。

【0073】

具体的には、発話生成部１８は、生体情報の一態様として取得された音声情報に対して既知の手法のよる音声認識処理を実施して音声情報をテキスト化し、テキストから、第１対話シナリオに記憶されているキーワードの抽出を試みる。例えば、テキスト化された音声情報から、「学校」及び「楽しい」という２つのキーワードが抽出された場合には、発話生成部１８は、第１対話シナリオから、発話内容「一番楽しかったのはどんなこと？」を取得し、取得した発話内容を示す発話情報を生成する。なお、第１対話シナリオにおいて、一つのキーワードに対して複数の発話内容が対応付けられている場合には、当該キーワードの抽出に応じて、複数の発話内容が順番に又はランダムに選択及び抽出されることとしてもよい。

【0074】

また、発話情報の生成の他の例として、発話生成部１８は、心理状態と発話内容とが予め関連付けられている第２対話シナリオを参照して、推定心理状態情報により示される心理状態に関連付けられた発話内容を取得する。図１６は、第２対話シナリオの例を示す図である。第２対話シナリオは、心理状態管理装置１０Ｂの内部または外部に構成され発話生成部１８からアクセス可能な記憶手段に予め設定及び記憶されている。図１６に示されるように、第２対話シナリオでは、推定心理状態情報の指標項目に１又は複数の発話内容が関連付けられている。

【0075】

具体的には、発話生成部１８は、ステップＳ１２において心理状態推定部１２により推定された対象者の心理状態を取得する。例えば、推定心理状態情報が複数の指標項目及び指標値を含む場合には、発話生成部１８は、推定心理状態情報において指標値が最も大きい指標項目に係る心理状態を、対象者の心理状態として取得する。例えば、対象者の心理状態「怒り」が取得された場合には、発話生成部１８は、第２対話シナリオから、発話内容「怒りを感じるよ。どうしたらスッキリするかな？」を取得し、取得した発話内容を示す発話情報を生成する。なお、第２対話シナリオにおいて、一つの心理状態に対して複数の発話内容が対応付けられている場合には、当該心理状態の取得に応じて、複数の発話内容が順番に又はランダムに選択及び抽出されることとしてもよい。

【0076】

なお、第２対話シナリオの構成は、図１６に示された例に限定されない。第２対話シナリオは、例えば、指標値が高いものから上位所定数（例えば、上位２つ）の指標項目の組み合わせに対して発話内容が関連付けられている態様でもよいし、指標値が最も高い指標項目が表す心理状態が対象者にとってポジティブな心理状態であるかネガティブな心理状態であるかに応じて発話内容が関連付けられている態様であってもよいし、図７を参照して説明したような心理状態を表す各シンボルのそれぞれに発話内容が関連付けられている態様であってもよい。

【0077】

ステップＳ１５において、発話出力部１９は、発話情報により示される発話内容を所定の出力形式で対象者に対して出力する。発話出力部１９は、発話情報により示される発話内容を合成音声により出力してもよい。即ち発話出力部１９は、発話内容を示す合成音声を端末３０Ａに出力させてもよい。

【0078】

発話内容の合成音声による出力に際して、推定心理状態情報に応じて合成音声のニュアンスを異ならせることとしてもよい。具体的には、発話出力部１９は、推定心理状態情報に基づいて、合成音声の対象者による感じられ方に寄与する１以上の音声合成パラメータを決定し、決定された音声合成パラメータを用いて合成音声を生成してもよい。音声合成パラメータは、例えば、合成音声における声色及び抑揚の付け方等を決定するパラメータである。

【0079】

発話出力部１９は、心理状態と発話出力のニュアンスを決定する音声合成パラメータセットとが予め関連付けられている音声合成パラメータテーブルを参照して、推定心理状態情報により示される心理状態に関連付けられた音声合成パラメータセットを取得する。

【0080】

図１７は、音声合成パラメータテーブルの例を示す図である。音声合成パラメータテーブルは、心理状態管理装置１０Ｂの内部または外部に構成され発話出力部１９からアクセス可能な記憶手段に予め設定及び記憶されている。図１７に示されるように、音声合成パラメータテーブルでは、推定心理状態情報の指標項目に発話出力のニュアンス及び音声合成パラメータセットが関連付けられている。

【0081】

具体的には、発話出力部１９は、ステップＳ１２において心理状態推定部１２により推定された対象者の心理状態を取得する。例えば、推定心理状態情報が複数の指標項目及び指標値を含む場合には、発話出力部１９は、推定心理状態情報において指標値が最も大きい指標項目に係る心理状態を、対象者の心理状態として取得する。例えば、対象者の心理状態「怒り」が取得された場合には、発話出力部１９は、音声合成パラメータテーブルから、「穏やか」、「怒りを静める」ようなニュアンス（ニュアンス１）の合成音声が生成されるような音声合成パラメータセット「パラメータ１」を取得する。そして、発話出力部１９は、取得した音声合成パラメータセットを用いて、ステップＳ１４において生成された発話内容を表す合成音声を生成する。

【0082】

なお、音声合成パラメータテーブルの構成は、図１７に示された例に限定されない。音声合成パラメータテーブルは、例えば、指標値が高いものから上位所定数（例えば、上位２つ）の指標項目の組み合わせに対して音声合成パラメータセットが関連付けられている態様でもよいし、指標値が最も高い指標項目が表す心理状態が対象者にとってポジティブな心理状態であるかネガティブな心理状態であるかに応じて音声合成パラメータセットが関連付けられている態様であってもよいし、図７を参照して説明したような心理状態を表す各シンボルのそれぞれに音声合成パラメータセットが関連付けられている態様であってもよい。

【0083】

ステップＳ１５における発話の出力の後に、処理はステップＳ１１に戻る。生体情報取得部１１は、ステップＳ１５における発話出力部１９による発話内容の出力に応じて対象者から検知された事象に基づく、当該対象者の生体情報を更に取得する。更に引き続くステップＳ１２において、心理状態推定部１２は、ステップＳ１４～ステップＳ１５の処理を経て更に取得された生体情報を含む複数の生体情報に基づいて、対象者の心理状態を推定する。なお、ステップＳ１５における発話の出力は、対象者による発話を促すような内容であってもよいし、対象者に対するアドバイスであってもよい。

【0084】

ステップＳ１６～ステップＳ１９の処理内容は、図１０のフローチャートのステップＳ３～Ｓ６の処理内容と同様であるので、説明を省略する。

【0085】

複数の生体情報の取得（ステップＳ１４，Ｓ１５を経たステップＳ１１の処理）に応じた心理状態の推定（ステップＳ１４，Ｓ１５を経たステップＳ１２の処理。推定心理状態情報の生成）及び妥当性評価情報の取得（ステップＳ１４，Ｓ１５を経たステップＳ１７の処理）のパターンは、以下のような如何なるパターンであってもよい。即ち、複数の生体情報のそれぞれに基づいて推定心理状態情報が生成され、複数の推定心理状態情報における指標値の平均値が対象者に提示されて、一の妥当性評価情報が取得されてもよい。また、複数の生体情報のそれぞれに基づいて推定心理状態情報が生成され、複数の推定心理状態情報の全てが対象者に提示され、推定心理状態情報のそれぞれに対する妥当性評価情報が取得され、各妥当性評価情報を重みとして複数の推定心理状態情報の重み付け平均等の集計値が算出されることにより、当該対象者の心理状態情報が決定されてもよい。また、複数の推定心理状態情報の一部又は全部が対象者に選択肢として提示され、対象者により選択された推定心理状態情報に基づいて、当該対象者の心理状態情報が決定されてもよい。

【0086】

次に、図１８を参照して、コンピュータを、本実施形態の心理状態管理装置１０として機能させるための心理状態管理プログラムについて説明する。

【0087】

図１８は、心理状態管理プログラムの構成を示す図である。心理状態管理プログラムＰ１は、心理状態管理装置１０における心理状態管理処理を統括的に制御するメインモジュールｍ１０、生体情報取得モジュールｍ１１、心理状態推定モジュールｍ１２、提示モジュールｍ１３、妥当性評価取得モジュールｍ１４、心理状態決定モジュールｍ１５、心理状態出力モジュールｍ１６、調整モジュールｍ１７、発話生成モジュールｍ１８及び発話出力モジュールｍ１９を備えて構成される。そして、各モジュールｍ１１～ｍ１９により、生体情報取得部１１、心理状態推定部１２、提示部１３、妥当性評価取得部１４、心理状態決定部１５、心理状態出力部１６、調整部１７、発話生成部１８及び発話出力部１９のための各機能が実現される。なお、調整モジュールｍ１７、発話生成モジュールｍ１８及び発話出力モジュールｍ１９は、心理状態管理プログラムＰ１において備えることが必須のモジュールではなく、第２実施形態の心理状態管理装置１０Ａまたは第３実施形態の心理状態管理装置１０Ｂを構成するために必要に応じて心理状態管理プログラムＰ１に含められる。

【0088】

なお、心理状態管理プログラムＰ１は、通信回線等の伝送媒体を介して伝送される態様であってもよいし、図１８に示されるように、記録媒体Ｍ１に記憶される態様であってもよい。

【0089】

以上説明した本実施形態の心理状態管理装置１０、心理状態管理方法及び心理状態管理プログラムＰ１によれば、生体情報に基づいて推定された心理状態を示す推定心理状態情報が対象者に提示され、推定心理状態情報の妥当性の評価を示す妥当性評価情報が取得されるので、推定心理状態情報の正誤の判断が可能となる。そして、妥当性評価情報を用いて決定された心理状態情報が出力されるので、管理者は、対象者に関する信頼性の高い心理状態の情報を得ることが可能となる。

【0090】

また、別の形態に係る心理状態管理装置は、推定心理状態に対する妥当性の評価の履歴に基づいて、推定心理状態情報を調整する調整部、を更に備え、提示部は、調整部により調整された推定心理状態情報を対象者に提示することとしてもよい。

【0091】

上記形態によれば、対象者に対して提示された推定心理状態情報に対する妥当性の評価の履歴に基づいて、対象者に対して提示するための推定心理状態情報が調整され、調整された推定心理状態情報が対象者に提示される。従って、妥当性がより向上された心理状態の推定結果を対象者に提示できる。

【0092】

また、別の形態に係る心理状態管理装置では、調整部は、推定心理状態情報に対する妥当性の評価の履歴に基づいて、調整パラメータを生成し、生成した調整パラメータを適用して推定心理状態情報を調整することとしてもよい。

【0093】

上記形態によれば、妥当性の評価の履歴に基づいて生成された調整パラメータの適用により推定心理状態情報が調整されるので、推定心理状態情報の調整が容易である。

【0094】

また、別の形態に係る心理状態管理装置では、推定心理状態情報は、心理状態の種類を示す１以上の指標項目及び該指標項目に該当する程度を示す指標値を含み、調整部は、指標値の高さに対して妥当性が低いと評価された頻度が高い指標項目ほど、より低い指標値が推定されるような調整パラメータを生成することとしてもよい。また、調整部は、指標値の低さに対して妥当性が低いと評価された頻度が高い指標項目ほど、より高い指標値が推定されるような調整パラメータを生成することとしてもよい。

【0095】

上記形態によれば、対象者により入力された妥当性評価情報に基づいて、調整パラメータが生成されるので、対象者ごとに最適化された推定心理状態情報を提示できる。

【0096】

また、別の形態に係る心理状態管理装置では、生体情報は、対象者が発した音声情報を含み、心理状態管理装置は、音声情報及び推定心理状態情報の少なくともいずれか一方に基づいて、対象者に対して出力する発話内容を示す発話情報を生成する発話生成部と、発話情報により示される発話内容を所定の出力形式で出力する発話出力部と、を更に備えることとしてもよい。

【0097】

上記形態によれば、音声情報及び推定心理状態情報の少なくともいずれか一つに基づいて生成された発話情報に示される発話が出力されるので、生体情報として取得可能な発話を対象者に促すことができる。

【0098】

また、別の形態に係る心理状態管理装置では、生体情報取得部は、発話出力部による発話内容の出力に応じて対象者から検知された事象に基づく生体情報を更に取得し、心理状態推定部は、生体情報取得部により更に取得された生体情報を含む複数の生体情報に基づいて、対象者の心理状態を推定することとしてもよい。

【0099】

上記形態によれば、発話内容の出力に応じて検知された生体情報が更に取得され、更に取得された生体情報が心理状態の推定に用いられるので、心理状態の推定の精度を向上できる。

【0100】

また、別の形態に係る心理状態管理装置では、発話生成部は、音声情報からキーワードを抽出し、キーワードと発話内容とが予め関連付けてられている第１対話シナリオを参照して、音声情報から抽出されたキーワードに関連付けられた発話内容を取得することとしてもよい。

【0101】

上記形態によれば、音声情報に含まれるキーワードに基づいて発話内容が取得されるので、対象者の発話を促すのに好適な発話内容からなる発話情報を生成できる。

【0102】

また、別の形態に係る心理状態管理装置では、発話生成部は、心理状態と発話内容とが予め関連付けられている第２対話シナリオを参照して、推定心理状態情報により示される心理状態に関連付けられた発話内容を取得することとしてもよい。

【0103】

上記形態によれば、対象者の生体情報に基づいて推定された推定心理状態情報に基づいて発話内容が取得されるので、対象者の発話を促すのに好適な発話内容からなる発話情報を生成できる。

【0104】

また、別の形態に係る心理状態管理装置では、発話出力部は、発話情報により示される発話内容を合成音声により出力し、推定心理状態情報に基づいて、合成音声の対象者による感じられ方に寄与する１以上の音声合成パラメータを決定し、音声合成パラメータを用いて合成音声を生成することとしてもよい。

【0105】

上記形態によれば、対象者の生体情報に基づいて推定された推定心理状態情報に基づいて決定された音声合成パラメータを用いて合成音声が生成されるので、対象者の発話を促すのに好適なニュアンス（例えば、声色及び抑揚等）の合成音声を出力できる。

【0106】

以上、本実施形態について詳細に説明したが、当業者にとっては、本実施形態が本明細書中に説明した実施形態に限定されるものではないということは明らかである。本実施形態は、特許請求の範囲の記載により定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施することができる。したがって、本明細書の記載は、例示説明を目的とするものであり、本実施形態に対して何ら制限的な意味を有するものではない。

【0107】

本明細書で説明した各態様／実施形態は、ＬＴＥ（Long Term Evolution）、ＬＴＥ－Ａ（LTE-Advanced）、ＳＵＰＥＲ ３Ｇ、ＩＭＴ－Ａｄｖａｎｃｅｄ、４Ｇ、５Ｇ、ＦＲＡ（Future Radio Access）、Ｗ－ＣＤＭＡ（登録商標）、ＧＳＭ（登録商標）、ＣＤＭＡ２０００、ＵＭＢ（Ultra Mobile Broadband）、ＩＥＥＥ ８０２．１１（Ｗｉ－Ｆｉ）、ＩＥＥＥ ８０２．１６（ＷｉＭＡＸ）、ＩＥＥＥ ８０２．２０、ＵＷＢ（Ultra-WideBand）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、その他の適切なシステムを利用するシステム及び／又はこれらに基づいて拡張された次世代システムに適用されてもよい。

【0108】

本明細書で説明した各態様／実施形態の処理手順、シーケンス、フローチャートなどは、矛盾の無い限り、順序を入れ替えてもよい。例えば、本明細書で説明した方法については、例示的な順序で様々なステップの要素を提示しており、提示した特定の順序に限定されない。

【0109】

入出力された情報等は特定の場所(例えば、メモリ)に保存されてもよいし、管理テーブルで管理してもよい。入出力される情報等は、上書き、更新、または追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。

【0110】

判定は、１ビットで表される値（０か１か）によって行われてもよいし、真偽値（Boolean：trueまたはfalse）によって行われてもよいし、数値の比較（例えば、所定の値との比較）によって行われてもよい。

【0111】

本明細書で説明した各態様／実施形態は単独で用いてもよいし、組み合わせて用いてもよいし、実行に伴って切り替えて用いてもよい。また、所定の情報の通知（例えば、「Ｘであること」の通知）は、明示的に行うものに限られず、暗黙的（例えば、当該所定の情報の通知を行わない）ことによって行われてもよい。

【0112】

以上、本開示について詳細に説明したが、当業者にとっては、本開示が本開示中に説明した実施形態に限定されるものではないということは明らかである。本開示は、請求の範囲の記載により定まる本開示の趣旨及び範囲を逸脱することなく修正及び変更態様として実施することができる。したがって、本開示の記載は、例示説明を目的とするものであり、本開示に対して何ら制限的な意味を有するものではない。

【0113】

ソフトウェアは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語と呼ばれるか、他の名称で呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、プログラム、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順、機能などを意味するよう広く解釈されるべきである。

【0114】

また、ソフトウェア、命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線（ＤＳＬ）などの有線技術及び／又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び／又は無線技術は、伝送媒体の定義内に含まれる。

【0115】

本開示において説明した情報、信号などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップなどは、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。

【0116】

なお、本開示において説明した用語及び／又は本明細書の理解に必要な用語については、同一の又は類似する意味を有する用語と置き換えてもよい。

【0117】

本明細書で使用する「システム」および「ネットワーク」という用語は、互換的に使用される。

【0118】

また、本明細書で説明した情報、パラメータなどは、絶対値で表されてもよいし、所定の値からの相対値で表されてもよいし、対応する別の情報で表されてもよい。

【0119】

本開示で使用する「判断(determining)」、「決定(determining)」という用語は、多種多様な動作を包含する場合がある。「判断」、「決定」は、例えば、判定(judging)、計算(calculating)、算出(computing)、処理(processing)、導出(deriving)、調査(investigating)、探索(looking up、search、inquiry)（例えば、テーブル、データベース又は別のデータ構造での探索）、確認(ascertaining)した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、受信(receiving)（例えば、情報を受信すること）、送信(transmitting)(例えば、情報を送信すること)、入力(input)、出力(output)、アクセス(accessing)（例えば、メモリ中のデータにアクセスすること）した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、解決(resolving)、選択(selecting)、選定(choosing)、確立(establishing)、比較(comparing)などした事を「判断」「決定」したとみなす事を含み得る。つまり、「判断」「決定」は、何らかの動作を「判断」「決定」したとみなす事を含み得る。また、「判断（決定）」は、「想定する（assuming）」、「期待する（expecting）」、「みなす（considering）」などで読み替えられてもよい。

【0120】

本開示で使用する「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。

【0121】

本明細書で「第１の」、「第２の」などの呼称を使用した場合においては、その要素へのいかなる参照も、それらの要素の量または順序を全般的に限定するものではない。これらの呼称は、２つ以上の要素間を区別する便利な方法として本明細書で使用され得る。したがって、第１および第２の要素への参照は、２つの要素のみがそこで採用され得ること、または何らかの形で第１の要素が第２の要素に先行しなければならないことを意味しない。

【0122】

「含む（include）」、「含んでいる（including）」、およびそれらの変形が、本明細書あるいは特許請求の範囲で使用されている限り、これら用語は、用語「備える(comprising)」と同様に、包括的であることが意図される。さらに、本明細書あるいは特許請求の範囲において使用されている用語「または（or）」は、排他的論理和ではないことが意図される。

【0123】

本明細書において、文脈または技術的に明らかに1つのみしか存在しない装置である場合以外は、複数の装置をも含むものとする。

【0124】

本開示の全体において、文脈から明らかに単数を示したものではなければ、複数のものを含むものとする。

【符号の説明】

【0125】

１０，１０Ａ，１０Ｂ…心理状態管理装置、１１…生体情報取得部、１２…心理状態推定部、１３…提示部、１４…妥当性評価取得部、１５…心理状態決定部、１６…心理状態出力部、１７…調整部、１８…発話生成部、１９…発話出力部、２０…心理状態記憶部、３０，３０Ａ，３０Ｂ…端末、Ｍ１…記録媒体、ｍ１０…メインモジュール、ｍ１１…生体情報取得モジュール、ｍ１２…心理状態推定モジュール、ｍ１３…提示モジュール、ｍ１４…妥当性評価取得モジュール、ｍ１５…心理状態決定モジュール、ｍ１６…心理状態出力モジュール、ｍ１７…調整モジュール、ｍ１８…発話生成モジュール、ｍ１９…発話出力モジュール、Ｐ１…心理状態管理プログラム。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】