特許 6165306 生成装置、生成方法及び生成プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】6165306

(24)【登録日】2017年6月30日

(45)【発行日】2017年7月19日

(54)【発明の名称】生成装置、生成方法及び生成プログラム

(51)【国際特許分類】

   G06F 17/30 20060101AFI20170710BHJP

【ＦＩ】

   G06F17/30 350C

   G06F17/30 210D

【請求項の数】16

【全頁数】21

(21)【出願番号】特願2016-182901(P2016-182901)

(22)【出願日】2016年9月20日

【審査請求日】2016年11月1日

【早期審査対象出願】

(73)【特許権者】

【識別番号】500257300

【氏名又は名称】ヤフー株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】特許業務法人酒井国際特許事務所

(72)【発明者】

【氏名】北岸 郁雄

(72)【発明者】

【氏名】津森 暁史

(72)【発明者】

【氏名】上永 徹

(72)【発明者】

【氏名】西田 成臣

(72)【発明者】

【氏名】小宮 崇央

【審査官】 樋口 龍弥

(56)【参考文献】

【文献】 特開２０１６−０５８１０１（ＪＰ，Ａ）

【文献】 特開２００１−２６５８０８（ＪＰ，Ａ）

【文献】 特開２０１４−１２００５３（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ １７／３０

(57)【特許請求の範囲】

【請求項1】

利用者から他の利用者に関する問い合わせを受け付けた場合は、利用者によって入力された他の利用者の属性に基づいて、問い合わせに対する応答を生成するための複数のモデルであって、それぞれ異なる属性に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する選択部と、
前記選択部により選択されたモデルを用いて、前記利用者からの問い合わせに対する応答を生成する生成部と
を有することを特徴とする生成装置。

【請求項2】

前記選択部は、さらに、前記利用者の属性に基づいて、それぞれ異なる属性に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する
ことを特徴とする請求項１に記載の生成装置。

【請求項3】

前記選択部は、前記利用者の属性と同じ属性に対応する応答を生成するためのモデルを選択する
ことを特徴とする請求項２に記載の生成装置。

【請求項4】

前記選択部は、前記利用者の属性と異なる属性に対応する応答を生成するためのモデルを選択する
ことを特徴とする請求項２に記載の生成装置。

【請求項5】

前記選択部は、前記モデルとして、前記応答と当該応答の確度とを出力する複数のモデルの中から、前記利用者からの問い合わせに対して各モデルが出力した確度の値に基づき、当該問い合わせに対して応答を生成するためのモデルを選択する
ことを特徴とする請求項１〜４のうちいずれか１つに記載の生成装置。

【請求項6】

前記選択部は、さらに、前記利用者が所在する地域に基づいて、それぞれ異なる地域に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する
ことを特徴とする請求項１〜５のうちいずれか１つに記載の生成装置。

【請求項7】

前記選択部は、前記モデルの中から複数のモデルを選択する
ことを特徴とする請求項１〜６のうちいずれか１つに記載の生成装置。

【請求項8】

前記選択部は、前記モデルとして、前記応答と当該応答の確度とを出力する複数のモデルの中から複数のモデルを選択し、
前記生成部は、前記選択部により選択された複数のモデルを用いて、前記利用者からの問い合わせに対する応答と当該応答の確度とをそれぞれ生成し、生成した応答のうち、確度の値が最も高い応答を出力する
ことを特徴とする請求項７に記載の生成装置。

【請求項9】

前記生成部は、前記選択部により選択された複数のモデルを用いて、前記利用者からの問い合わせに対する応答と当該応答の確度とをそれぞれ生成し、生成した応答の内容ごとに確度の平均値を算出し、算出した平均値の値が最も高い内容の応答を出力する
ことを特徴とする請求項７に記載の生成装置。

【請求項10】

前記利用者から、前記生成部が生成した応答に対する評価を受け付ける受付部と、
前記利用者からの問い合わせと、当該問い合わせに対して生成された応答と、当該応答に対する評価とを用いて、前記モデルを学習する学習部と
を有することを特徴とする請求項１〜９のうちいずれか１つに記載の生成装置。

【請求項11】

前記学習部は、前記応答に対する評価が好意的な評価である場合は、前記利用者からの問い合わせと、当該問い合わせに対して生成された応答とを前記モデルに学習させ、前記応答に対する評価が否定的な評価である場合は、前記利用者からの問い合わせと、当該問い合わせに対して生成された応答とは逆の内容の応答とを前記モデルに学習させる
ことを特徴とする請求項１０に記載の生成装置。

【請求項12】

前記学習部は、前記利用者からの問い合わせと、当該問い合わせに対して生成された応答と、当該応答に対する評価とを用いて、当該利用者によって入力された前記他の利用者の属性に対応する応答を生成するためのモデルを学習する
ことを特徴とする請求項１０または１１に記載の生成装置。

【請求項13】

前記学習部は、前記利用者からの問い合わせであって、他の利用者に関する問い合わせと、当該問い合わせに対する応答と、当該応答に対する評価とを用いて、当該他の利用者の属性に対応する応答を生成するためのモデルを学習する
ことを特徴とする請求項１０〜１２のうちいずれか１つに記載の生成装置。

【請求項14】

前記選択部は、前記モデルとして、前記利用者からの問い合わせに対し、所定の応答または所定の応答とは逆の内容の応答のいずれか一方を出力するモデルの中から、応答を生成する際に用いるモデルを選択する
ことを特徴とする請求項１〜１３のうちいずれか１つに記載の生成装置。

【請求項15】

生成装置が実行する生成方法であって、
利用者から他の利用者に関する問い合わせを受け付けた場合は、利用者によって入力された他の利用者の属性に基づいて、問い合わせに対する応答を生成するための複数のモデルであって、それぞれ異なる属性に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する選択工程と、
前記選択工程により選択されたモデルを用いて、前記利用者からの問い合わせに対する応答を生成する生成工程と
を含むことを特徴とする生成方法。

【請求項16】

利用者から他の利用者に関する問い合わせを受け付けた場合は、利用者によって入力された他の利用者の属性に基づいて、問い合わせに対する応答を生成するための複数のモデルであって、それぞれ異なる属性に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する選択手順と、
前記選択手順により選択されたモデルを用いて、前記利用者からの問い合わせに対する応答を生成する生成手順と
をコンピュータに実行させるための生成プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、生成装置、生成方法及び生成プログラムに関する。

【背景技術】

【0002】

近年、自然言語処理や深層学習などの人工知能関連技術を用いた情報処理の技術が提案されている。例えば、自然言語による質問文を受け付けると、入力された質問文が有する特徴量を抽出し、抽出した特徴量を用いて、質問文に対する応答を推定する技術が知られている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特許第５５９１８７１号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、上述した従来技術では、判断基準となる条件が異なる場合には、応答の精度が悪化する場合がある。

【0005】

例えば、恋愛相談等の人間関係に関する質問では、性別や年齢等、質問者自身や相手方の属性によって判断基準が変化するので、同一の判断基準を用いて質問文に対する応答を推定した場合には、誤った応答を出力する恐れがある。

【0006】

本願は、上記に鑑みてなされたものであって、質問文に対する応答の推定精度を向上させることができる生成装置、生成方法及び生成プログラムを提供することを目的とする。

【課題を解決するための手段】

【0007】

本願に係る生成装置は、利用者によって入力された条件に基づいて、問い合わせに対する応答を生成するための複数のモデルであって、それぞれ異なる条件に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する選択部と、前記選択部により選択されたモデルを用いて、前記利用者からの問い合わせに対する応答を生成する生成部とを有することを特徴とする。

【発明の効果】

【0008】

実施形態の一態様によれば、質問文に対する応答の精度を向上させることができる。

【図面の簡単な説明】

【0009】

【図1】図１は、実施形態に係る情報処理装置が発揮する作用効果の一例を説明するための図である。

【図2】図２は、実施形態に係る情報処理装置が有する機能構成の一例を説明する図である。

【図3】図３は、実施形態に係るモデルデータベースに登録される情報の一例を示す図である。

【図4】図４は、実施形態に係る教師データデータベースに登録される情報の一例を示す図である。

【図5】図５は、実施形態に係る情報処理装置が実行する生成処理の流れの一例を説明するフローチャートである。

【図6】図６は、実施形態に係る情報処理装置が実行する学習処理の流れの一例を説明するフローチャートである。

【図7】図７は、実施形態に係る情報処理装置が条件を取得する処理の一例を示す図である。

【発明を実施するための形態】

【0010】

以下に、本願に係る生成装置、生成方法及び生成プログラムを実施するための形態（以下、「実施形態」と呼ぶ。）について図面を参照しつつ詳細に説明する。なお、この実施形態により本願に係る生成装置、生成方法及び生成プログラムが限定されるものではない。また、以下の各実施形態において同一の部位及び処理には同一の符号を付し、重複する説明は省略される。

【0011】

また、以下の説明では、生成装置の一例である情報処理装置１０が実行する生成処理の一例として、利用者Ｕ０１から、他の利用者に関する問い合わせとして、利用者Ｕ０１と他の利用者との恋愛相談に関連する問い合わせを受け付ける処理の一例について記載するが、実施形態は、これに限定されるものではない。例えば、情報処理装置１０は、他の利用者等、利用者Ｕ０１の相手方となる利用者に関連しない問い合わせを受け付ける際に、後述する生成処理を実行してもよい。

【0012】

〔１．生成処理の概念〕
まず、図１を用いて、情報処理装置１０が実行する生成処理の概念について説明する。図１は、実施形態に係る情報処理装置が発揮する作用効果の一例を説明するための図である。例えば、情報処理装置１０は、サーバ装置やクラウドシステム等、単数または複数の情報処理装置により実現され、移動通信網や無線ＬＡＮ（Local Area Network）等のネットワークＮを介して、利用者Ｕ０１が使用する端末装置１００と通信可能な情報処理装置である。

【0013】

端末装置１００は、例えば、スマートフォン、タブレット端末やＰＤＡ（Personal Digital Assistant）等の移動端末、ノート型ＰＣ（Personal Computer）等の情報処理装置である。例えば、端末装置１００は、所定のＵＩ（User Interface）を介して、利用者Ｕ０１が入力した問い合わせの文章（以下、「質問」と記載する。）を受け付けると、受付けた質問を情報処理装置１０へと送信する。

【0014】

一方、情報処理装置１０は、端末装置１００から質問を受け付けると、質問に対する応答となる文章（以下、単に「応答」と記載する。）を生成し、生成した応答を端末装置１００へと送信する。例えば、情報処理装置１０は、ｗ２ｖ（word2vec）やディープラーニング等といった人工知能関連技術を用いて、質問の内容に応じた応答を生成し、生成した応答を出力する。より具体的な例を挙げると、情報処理装置１０は、質問が入力された際に応答の内容を推定するモデルをあらかじめ学習する。そして、情報処理装置１０は、モデルを用いて、利用者から受付けた質問に対する応答の内容を推定し、推定結果に応じた応答を出力する。

【0015】

しかしながら、質問には、判断基準となる条件が異なる場合がある。具体的な例を挙げると、恋愛相談等、質問者となる利用者と他の利用者との間の関係についての質問では、利用者と他の利用者との年代や性別等といった属性によって、質問に対する応答が変化する場合がある。

【0016】

例えば、情報処理装置１０は、図１中（Ａ）に示すように、利用者Ｕ０１が利用者Ｕ０２に対して行った行為や利用者Ｕ０２が利用者Ｕ０１に対して行った行為、利用者Ｕ０１と利用者Ｕ０２との間の関係性や状態等、利用者Ｕ０２が利用者Ｕ０１に対して好意を有しているか否かの推定の元となる情報（以下、「推定情報」と記載する。）を用いて、利用者Ｕ０２が利用者Ｕ０１に対して好意を有しているか否かを推定するモデルをあらかじめ学習する。そして、情報処理装置１０は、利用者Ｕ０１から推定情報を含む質問を取得すると、モデルを用いて、取得した推定情報から利用者Ｕ０２が利用者Ｕ０１に対して好意を有しているか否かを示す応答を出力する。

【0017】

しかしながら、例えば、利用者Ｕ０１および利用者Ｕ０２が２０代である場合は、推定情報の内容が利用者Ｕ０２が利用者Ｕ０１に対して好意を有する旨を想起させるとしても、利用者Ｕ０１および利用者Ｕ０２が３０代である場合は、推定情報の内容が利用者Ｕ０２が利用者Ｕ０１に対して好意を有する旨を想起させるとは限らない。

【0018】

また、利用者Ｕ０１や利用者Ｕ０２の属性だけではなく、利用者Ｕ０２が利用者Ｕ０１に対して行為を行ったタイミング、利用者Ｕ０１と利用者Ｕ０２との年齢差等、各種の条件に応じて、応答が変化するとも考えられる。このため、従来技術のように、質問に対する応答を単一のモデルにより生成した場合は、応答の精度が悪化してしまう。

【0019】

〔２．実施形態に係る情報処理装置が実行する生成処理について〕
そこで、情報処理装置１０は、以下の生成処理を実行する。例えば、情報処理装置１０は、利用者Ｕ０１によって入力された条件に基づいて、質問に対する応答を生成するための複数のモデルであって、それぞれ異なる条件に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する。そして、情報処理装置１０は、選択されたモデルを用いて、利用者Ｕ０１からの質問に対する応答を生成する。そして、情報処理装置１０は、生成した応答を利用者Ｕ０１の端末装置１００へと送信する。

【0020】

以下、図を用いて、上述した生成処理を実現する情報処理装置１０の機能構成及び作用効果の一例を説明する。なお、以下の説明では、利用者Ｕ０１から取得した質問の中に、応答を推定するための推定情報が含まれているものとする。

【0021】

〔２−１．機能構成の一例〕
図２は、実施形態に係る情報処理装置が有する機能構成の一例を説明する図である。図２に示すように、情報処理装置１０は、通信部２０、記憶部３０、および制御部４０を有する。通信部２０は、例えば、ＮＩＣ（Network Interface Card）等によって実現される。そして、通信部２０は、ネットワークＮと有線または無線で接続され、端末装置１００との間で、質問や応答の送受信を行う。

【0022】

記憶部３０は、例えば、ＲＡＭ（Random Access Memory)、フラッシュメモリ（Flash Memory）等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。また、記憶部３０は、生成処理を実行するための各種データであるモデルデータベース３１、および教師データデータベース３２を有する。以下、図３および図４を用いて、モデルデータベース３１、および教師データデータベース３２に登録される情報の一例を説明する。

【0023】

モデルデータベース３１には、利用者によって入力された条件に基づいて、問い合わせに対する応答を生成するための複数のモデルであって、それぞれ異なる条件に対応する応答を生成するためのモデルが登録されている。例えば、モデルデータベース３１には、質問者となる利用者や、質問において相手方となる利用者等の属性に対応する応答を生成するためのモデルが登録されている。ここで、利用者の属性とは、例えば、利用者の性別や年代、居住地域や出身地域といったデモグラフィック属性のみならず、利用者の好み等といったサイコグラフィック属性等、利用者を示す任意の属性が採用可能である。

【0024】

ここで、モデルデータベース３１には、モデルとして、利用者Ｕ０１からの質問に対し、所定の応答または所定の応答とは逆の内容の応答のいずれか一方を出力するモデルが登録されている。例えば、モデルデータベース３１に登録されたモデルは、相手方となる利用者（例えば、利用者Ｕ０２）が質問者となる利用者（例えば、利用者Ｕ０１）に対して興味があるか否かといった内容の質問を受け付けると、推定情報に基づいて、質問者となる利用者に対し「脈あり（興味がある）」である旨の応答、または「脈なし（興味がない）」である旨の推定結果を出力する。

【0025】

例えば、図３は、実施形態に係るモデルデータベースに登録される情報の一例を示す図である。図３に示すように、モデルデータベース３１には、「属性」、および「モデル」といった項目を有する情報が登録される。ここで「モデル」とは、例えば、ＤＮＮ（Deep Neural Network）等によって生成されたモデルである。また、「属性」とは、対応付けられたモデルがどのような条件の元で応答を生成するかを示す情報である。すなわち、モデルデータベース３１に登録された各モデルは、対応付けられた「属性」が示す属性の利用者が納得する可能性が高い応答、すなわち、対応付けられた「属性」が示す属性に対して適正化された応答を出力する。

【0026】

例えば、図３に示す例では、モデルデータベース３１には、属性「１０代 女性」、およびモデル「モデル＃１」が対応付けて登録されている。このような情報は、利用者からの質問に対して、モデル＃１が１０代の女性にとって適正化された応答を出力するように学習が行われている旨を示す。ここで、モデルデータベース３１に登録されるモデルは、質問を行う側の利用者に対して適正化が行われているものとする。

【0027】

教師データデータベース３２には、各モデルを学習するために用いる教師データが登録されている。より具体的には、教師データデータベース３２には、情報処理装置１０が利用者から受付けた質問と、質問に対する応答と、応答に対する評価を示す情報とが教師データとして登録されている。

【0028】

例えば、図４は、実施形態に係る教師データデータベースに登録される情報の一例を示す図である。図４に示すように、教師データデータベース３２には、「属性」、「質問文」、「分類ラベル」、および「極性」といった項目を有する情報が登録されている。ここで、図４に示す「属性」とは、質問を行った利用者の属性を示す情報である。また「質問文」とは、利用者が入力した質問の文章、すなわち、テキストデータである。

【0029】

また、「分類ラベル」とは、対応付けられた「質問文」が示す質問に対してモデルが出力した応答の内容を示す情報である。例えば、各モデルは、「質問文」のテキストデータが入力されると、入力されたテキストデータに含まれる推定情報の内容から、「質問文」を「脈あり」または「脈なし」のいずれかに分類する。そして、情報処理装置１０は、各モデルによる分類結果に基づいて、応答を生成する。例えば、各モデルは、「質問文」が入力されると、入力された「質問文」を「脈あり」または「脈なし」に分類する。そして、情報処理装置１０は、「質問文」が「脈あり」に分類された場合は、「脈あり」である旨の応答を生成し、「質問文」が「脈なし」に分類された場合は、「脈なし」である旨の応答を生成する。

【0030】

また、「極性」とは、情報処理装置１０が出力した応答に対する利用者からの評価を示す情報である。より具体的には、「極性」とは、応答の内容に対して利用者が好意的な評価（例えば、「いいね！」等）を行ったか、利用者が否定的な評価（例えば、「そうかな？」等）を行ったかを示す情報である。

【0031】

例えば、図４に示す例では、教師データデータベース３２には、属性「１０代 男性」、質問文「質問文＃１」、分類ラベル「脈あり」、極性「＋（いいね！）」等が対応付けて登録されている。このような情報は、質問を行った利用者の属性が「１０代 男性」であり、質問文が「質問文＃１」であり、応答の内容が「脈あり」であった旨を示す。また、このような情報は、「脈あり」の内容の応答に対して、質問を行った利用者が好意的な評価（「＋（いいね！）」）を行った旨を示す。

【0032】

図２に戻り、説明を続ける。制御部４０は、例えば、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等によって、情報処理装置１０内部の記憶装置に記憶されている各種プログラムが、ＲＡＭ等の記憶領域を作業領域として実行されることにより実現される。図２に示す例では、制御部４０は、取得部４１、選択部４２、生成部４３、応答部４４、受付部４５、および学習部４６（以下、総称して各処理部４１〜４６と記載する場合がある。）を有する。

【0033】

なお、制御部４０が有する各処理部４１〜４６の接続関係は、図２に示した接続関係に限られず、他の接続関係であってもよい。また、各処理部４１〜４６は、以下に説明するような生成処理および学習処理の機能・作用（例えば図１）を実現・実行するものであるが、これらは説明のために整理した機能単位であり、実際のハードウェア要素やソフトウェアモジュールとの一致は問わない。すなわち、以下の生成処理および学習処理の機能・作用を実現・実行することができるのであれば、情報処理装置１０は、任意の機能単位で案内処理を実現・実行して良い。

【0034】

〔２−２．生成処理における作用効果の一例〕
以下、図５に示すフローチャートを用いて、各処理部４１〜４５が実行・実現する生成処理の内容について説明する。図５は、実施形態に係る情報処理装置が実行する生成処理の流れの一例を説明するフローチャートである。

【0035】

まず、取得部４１は、端末装置１００から質問を受け付ける（ステップＳ１０１）。例えば、情報処理装置１０は、図１中ステップＳ１に示すように、端末装置１００から質問文＃１と、利用者Ｕ０１の属性「１０代 男性」とを取得する。ここで、情報処理装置１０は、Ｂクッキー等の技術を用いて、利用者Ｕ０１の属性を自動的に取得してもよく、利用者Ｕ０１に属性を入力させてもよい。例えば、情報処理装置１０は、端末装置１００に対して「あなたの情報を教えてください。」等といった文章を表示させ、利用者Ｕ０１に属性を入力させてもよい。すなわち、情報処理装置１０は、利用者Ｕ０１に属性を入力させることで、応答を生成する際に使用するモデルを選択させてもよい。

【0036】

このような場合、選択部４２は、利用者Ｕ０１の属性等に基づいて、応答を生成する際に用いるモデルを選択する（ステップＳ１０２）。すなわち、選択部４２は、利用者Ｕ０１によって入力された条件に基づいて、問い合わせに対する応答を生成するための複数のモデルであって、それぞれ異なる条件に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する。

【0037】

より具体的には、選択部４２は、それぞれ異なる属性に対応する応答を生成するためのモデルの中から、利用者Ｕ０１の属性に基づいて、応答を生成する際に用いるモデルを選択する。例えば、選択部４２は、質問を行った利用者Ｕ０１の属性と同じ属性に対応する応答を生成するためのモデルを選択する。ここで、選択部４２は、利用者Ｕ０１に対して属性等の条件の入力を求め、利用者Ｕ０１が入力した属性に基づいて、モデルの中から応答を生成する際に用いるモデルを選択してもよい。このような選択の結果、選択部４２は、モデルとして、利用者Ｕ０１からの質問に対し、所定の応答または所定の応答とは逆の内容の応答のいずれか一方を出力するモデルの中から、応答を生成する際に用いるモデルを選択することとなる。

【0038】

例えば、情報処理装置１０は、図１中ステップＳ２に示すように、利用者Ｕ０１から利用者Ｕ０１と利用者Ｕ０２との関係性に関する質問文を受付けた場合は、利用者Ｕ０１の属性「１０代 男性」を特定する。そして、情報処理装置１０は、属性「１０代 男性」と対応付けられたモデル＃２、すなわち、属性「１０代 男性」に対して適正化された応答を生成するためのモデル＃２を選択する。

【0039】

また、生成部４３は、選択部４２がモデルを選択した場合は、選択したモデルを用いて、質問に対する応答内容を生成する（ステップＳ１０３）。例えば、生成部４３は、モデルに質問文を入力し、モデルによる質問文の分類結果に基づいた応答を生成する。例えば、情報処理装置１０は、図１中ステップＳ３に示すように、選択されたモデル＃２を用いて、利用者Ｕ０１からの質問に対する応答を生成する。

【0040】

より具体的な例を挙げると、情報処理装置１０は、モデル＃２に利用者Ｕ０１から受付けた質問文＃１を入力する。このような場合、モデル＃２は、属性「１０代 男性」について適正化された応答として、分類ラベル「脈あり」を出力する。また、モデル＃２は、分類ラベル「脈あり」が示す応答の内容が正しい可能性を示す値、すなわち、確度の値を出力する。

【0041】

また、情報処理装置１０は、分類ラベル「脈あり」が示す内容の応答を生成する。例えば、情報処理装置１０は、利用者Ｕ０２が利用者Ｕ０１に対して好意を有する旨や、モデル＃２が出力した確度を示す応答Ｃ１０を生成する。より具体的な例を挙げると、情報処理装置１０は、「脈あり度は、７５パーセント」等というように、「脈あり」であるか「脈なし」であるかといった応答とともに、モデルが出力した確度を示す情報を応答Ｃ１０として生成する。

【0042】

そして、応答部４４は、生成した応答を端末装置１００へと送信する（ステップＳ１０４）。例えば、情報処理装置１０は、図１中ステップＳ４に示すように、生成した応答を端末装置１００へと出力する。

【0043】

続いて、受付部４５は、端末装置１００から応答に対する評価を受付けたか否かを判定する（ステップＳ１０５）。そして、受付部４５は、評価を受付けていない場合は（ステップＳ１０５：Ｎｏ）、受け付けるまで待機する。また、受付部４５は、応答に対する評価を受付けた場合は（ステップＳ１０５：Ｙｅｓ）、質問文と、利用者Ｕ０１の属性と、評価との組を教師データとして教師データデータベース３２に登録し（ステップＳ１０６）、処理を終了する。

【0044】

例えば、図１に示す応答Ｃ１０には、「いいね！」といった肯定的な評価を受け付けるボタンＣ１１と、「そうかな？」等といった否定的な評価を受付るボタンＣ１２とが配置されている。このような場合、端末装置１００は、応答Ｃ１０を画面上に表示し、図１中ステップＳ５に示すように、応答に対する評価を受け付ける。また、情報処理装置１０は、利用者Ｕ０１がボタンＣ１１またはボタンＣ１２のいずれかを選択した場合には、図１中ステップＳ６に示すように、利用者Ｕ０１が選択したボタンが示す評価を取得する。

【0045】

そして、情報処理装置１０は、利用者Ｕ０１の属性「１０代 男性」と、利用者Ｕ０１が入力した質問文「質問文＃１」と、選択したモデル＃２が出力した応答の内容を示す分類ラベル「脈あり」と、利用者Ｕ０１の評価を示す極性「＋（いいね！）」との組を教師データとして、教師データデータベース３２に登録する。

【0046】

なお、情報処理装置１０は、教師データデータベース３２に登録された教師データを用いて、モデルデータベース３１に登録された各モデルの学習を行う学習処理を実行する。より具体的には、情報処理装置１０は、図１中ステップＳ７に示すように、評価が示す極性に応じて、応答の内容を示す分類ラベル、すなわち、質問文の分類結果を示す分類ラベルと質問文との組をモデルに学習させる学習処理を実行する。

【0047】

〔２−３．学習処理における作用効果の一例〕
以下、図６に示すフローチャートを用いて、学習部４６が実行・実現する取得処理の内容について説明する。図６は、実施形態に係る情報処理装置が実行する学習処理の流れの一例を説明するフローチャートである。学習部４６は、図６に示す学習処理を実行することで、利用者Ｕ０１からの質問と、質問に対して生成された応答と、応答に対する評価とを用いて、モデルを学習する。

【0048】

例えば、学習部４６は、学習対象となるモデルの属性と対応する教師データを選択する（ステップＳ２０１）。すなわち、学習部４６は、利用者Ｕ０１からの質問と、質問に対して生成された応答と、応答に対する評価とを用いて、その利用者Ｕ０１によって入力された条件に対応する応答を生成するためのモデルを学習する。

【0049】

例えば、学習部４６は、モデルデータベース３１を参照し、学習が行われていないモデルを一つ選択する。また、学習部４６は、選択したモデルの属性を参照し、参照した属性と同じ属性を含む教師データを教師データデータベース３２から全て抽出する。すなわち、学習部４６は、利用者Ｕ０１によって入力された条件に対応する応答を生成するためのモデルを、その条件に対応する応答と、その応答に対する評価とに基づいて学習する。

【0050】

また、学習部４６は、選択した教師データの極性が「＋」であるか否かを判定する（ステップＳ２０２）。また、学習部４６は、極性が「＋」である場合は（ステップＳ２０２：Ｙｅｓ）、分類ラベルの内容をそのまま教師データとして採用する（ステップＳ２０３）。一方、学習部４６は、極性が「＋」ではない場合は（ステップＳ２０２：Ｎｏ）、分類ラベルの内容を反転させる（ステップＳ２０４）。例えば、学習部４６は、極性が「−」である際に、分類ラベルが「脈あり」である場合には、分類ラベルを「脈なし」に変更する。また、学習部４６は、極性が「−」である際に、分類ラベルが「脈なし」である場合には、分類ラベルを「脈あり」に変更する。

【0051】

そして、学習部４６は、教師データの質問文と分類ラベルとの関係性をモデルに学習させる（ステップＳ２０５）。すなわち、学習部４６は、応答に対する評価が好意的な評価である場合は、利用者Ｕ０１からの質問と、質問に対して生成された応答とをモデルに学習させる。一方、学習部４６は、応答に対する評価が否定的な評価である場合は、利用者Ｕ０１からの質問と、質問に対して生成された応答とは逆の内容の応答とをモデルに学習させる。

【0052】

例えば、学習部４６は、図１に示すモデル＃３の学習を行う場合、モデル＃３と対応する属性「２０代 女性」を特定し、特定した属性「２０代 女性」と対応付けられた教師データを抽出する。この結果、学習部４６は、教師データの属性が「２０代 女性」であり、質問文が「質問文＃２」であり、分類ラベルが「脈なし」であり、極性が「−（そうかな？）」である教師データを抽出する。ここで、学習部４６は、抽出した教師データの極性が「−（そうかな？）」であるので、分類ラベルを「脈なし」から「脈あり」へと変換する。そして、学習部４６は、モデル＃３に対して質問文「質問文＃２」を入力した際に、分類ラベル「脈あり」を出力するように、モデル＃３の調整を行う。より具体的には、学習部４６は、モデル＃３がＤＮＮ（Deep Neural Network）等により実現される場合は、バックプロパゲーション等の公知の学習手法を用いて、モデル＃３が有する各ノード間の接続係数を修正することで、モデル＃３の再学習を行う。

【0053】

また、例えば、学習部４６は、図１に示すモデル＃２の学習を行う場合、モデル＃２と対応する属性「１０代 男性」を特定し、特定した属性「１０代 男性」と対応付けられた教師データを抽出する。この結果、学習部４６は、教師データの属性が「１０代 男性」であり、質問文が「質問文＃１」であり、分類ラベルが「脈あり」であり、極性が「＋（いいね！）」である教師データを抽出する。ここで、学習部４６は、抽出した教師データの極性が「＋（いいね！）」であるので、分類ラベルを「脈あり」のままにする。そして、学習部４６は、モデル＃２に対して質問文「質問文＃１」を入力した際に、分類ラベル「脈あり」を出力するように、モデル＃２の調整を行う。

【0054】

このような処理の結果、学習部４６は、質問文が入力された際に、条件に応じて、質問文を「脈あり」または「脈なし」に分類する分類モデルを取得することができる。より具体的には、学習部４６は、推定情報を含む質問文を入力すると、利用者Ｕ０２が利用者Ｕ０１に好意を持っているか（すなわち「脈あり」）、好意を持っていないか（すなわち「脈なし」）を示す情報を出力するモデルであって、各利用者の属性に応じて適正化がなされたモデルの学習を行うことができる。

【0055】

また、学習部４６は、全てのモデルの学習が終了したか否かを判定し（ステップＳ２０６）、全てのモデルの学習が終了した場合は（ステップＳ２０６：Ｙｅｓ）、処理を終了する。一方、学習部４６は、学習が終了していないモデルが存在する場合は（ステップＳ２０６：Ｎｏ）、学習対象となる次のモデルを選択し（ステップＳ２０７）、ステップＳ２０１を実行する。

【0056】

なお、学習部４６は、図６に示す学習処理を、任意のタイミングで実行して良い。例えば、学習部４６は、教師データの数が所定の閾値を超えたタイミングで、学習処理を実行すればよい。

【0057】

ここで、上述した説明では、情報処理装置１０が有する学習部４６は、質問文を入力すると、質問文の内容に応じた分類ラベルを出力するようにモデルの学習を行った。しかしながら、実施形態は、これに限定されるものではない。例えば、情報処理装置１０は、質問文を入力すると、質問文の内容に応じた分類ラベルが示す内容の応答文そのものを出力するモデルの学習を行ってもよい。

【0058】

例えば、情報処理装置１０は、質問文が「質問文＃１」であり、応答として出力されるテキストである応答文が「応答文＃１」であり、極性が「＋（いいね！）」である教師データが存在する場合、質問文「質問文＃１」を入力した際に応答文が「応答文＃１」を出力するようにモデルの学習を行う。また、情報処理装置１０は、質問文が「質問文＃１」であり、応答文が「応答文＃１」であり、極性が「−（そうかな？）」である教師データが存在する場合、質問文「質問文＃１」を入力した際に応答文が「応答文＃１」とは逆の意味を有する「応答文＃２」を出力するようにモデルの学習を行う。例えば、情報提供装置１０は、形態素解析の技術やｗ２ｖの技術等を用いて、「応答文＃１」とは逆の意味を有する「応答文＃２」をあらかじめ生成し、質問文「質問文＃１」を入力した際に応答文が「応答文＃２」を出力するようにモデルの学習を行う。例えば、情報処理装置１０は、ウェブ検索等の検索処理において順位付けを行うためのモデルを作成する処理と類似した処理により、応答文を出力するようなモデルを学習可能である。このような学習を行う場合、情報処理装置１０は、質問文「質問文＃１」、応答文「応答文＃１」、および極性「＋（いいね！）」を対応付けた教師データを収集することとなる。

【0059】

ここで、情報処理装置１０は、質問文とともに極性をモデルに入力することで、質問文から極性に応じた分類ラベルや応答文を出力するモデルの学習を行ってもよい。例えば、情報処理装置１０は、質問文「質問文＃１」と極性「＋（いいね！）」を入力した際に分類ラベル「脈あり」や応答文「応答文＃１」を出力し、質問文「質問文＃１」と極性「−（そうかな？）」を入力した際に分類ラベル「脈なし」や応答文「応答文＃２」を出力するようなモデルの学習を行ってもよい。

【0060】

すなわち、情報処理装置１０は、利用者によって入力された条件に基づいて、問い合わせに対する応答を生成するための複数のモデルであれば、応答を生成するために用いられる情報を生成するモデルのみならず、応答そのものを生成するモデルの利用や学習を行ってよい。また、情報処理装置１０は、教師データに含まれる極性（すなわち、応答文に対する利用者の評価）を考慮してモデルの学習を行うのであれば、極性に応じて変換した教師データを用いた学習を行ってもよく、極性の値そのものを教師データとしてモデルに学習させてもよい。

【0061】

〔３．変形例〕
上述した実施形態に係る情報処理装置１０は、上記実施形態以外にも種々の異なる形態にて実施されてよい。そこで、以下では、上記の情報処理装置１０の他の実施形態について説明する。

【0062】

〔３−１．モデルの選択について〕
ここで、情報処理装置１０は、利用者Ｕ０１の属性に対して適正化されたモデルを選択し、選択したモデルを用いて、利用者Ｕ０１に対する応答を生成した。しかしながら、実施形態は、これに限定されるものではない。例えば、情報処理装置１０は、利用者Ｕ０１の属性以外にも、任意の選択基準に基づき、応答を生成するモデルの選択をおこなってよい。

【0063】

例えば、情報処理装置１０は、利用者Ｕ０１の属性と異なる属性に対応する応答を生成するためのモデルを選択してもよい。例えば、恋愛相談に関する質問を受け付ける場合、利用者Ｕ０１の属性が「１０代 男性」である場合は、相手方となる利用者Ｕ０２の属性は「１０代 女性」であると予測される。そこで、情報処理装置１０は、利用者Ｕ０１の属性が「１０代 男性」である場合は、属性「１０代 女性」に対して適正化されたモデルを選択し、選択したモデルを用いて、推定情報から応答の生成を行ってもよい。

【0064】

また、例えば、情報処理装置１０は、上司との関係に関する質問を受け付ける場合、利用者Ｕ０１の属性が「２０代 男性」である場合は、相手方となる利用者Ｕ０２の属性が「３０代 男性」であると予測される。そこで、情報処理装置１０は、利用者Ｕ０１の属性が「２０代 男性」である場合は、属性「３０代 男性」に対して適正化されたモデルを選択し、選択したモデルを用いて、推定情報から応答の生成を行ってもよい。

【0065】

また、情報処置装置１０は、相手方となる利用者Ｕ０２の属性を特定可能である場合は、かかる属性に対して適正化されたモデルを選択してもよい。すなわち、情報処理装置１０は、利用者Ｕ０１から他の利用者Ｕ０２に関する問い合わせを受け付けた場合は、他の利用者Ｕ０２の属性に基づき、それぞれ異なる属性に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択してもよい。例えば、情報処理装置１０は、「相手の年齢や性別を教えてください」等といった応答を出力することで、利用者Ｕ０１に相手方となる利用者Ｕ０２の年齢や性別といった属性を入力させる。そして、情報処理装置１０は、入力された属性に対して適正化されたモデルを選択し、応答の出力をおこなってもよい。

【0066】

また、例えば、情報処理装置１０は、質問を行った利用者Ｕ０１に対して、使用するモデルの選択を行わせてもよい。すなわち、情報処理装置１０は、利用者Ｕ０１が選択した条件に対応する応答を生成するためのモデルを選択してもよい。例えば、情報処理装置１０は、モデルデータベース３１に登録された「属性」を利用者に対して提示し、どの「属性」に対応するモデルを用いて応答を生成すればよいかを利用者に対して問い合わせる。そして、情報処理装置１０は、利用者が選択した「属性」に対して適正化されたモデル、すなわち、利用者が選択した条件に対して適正化されたモデルを用いて、応答の生成を行ってもよい。

【0067】

また、情報処理装置１０は、複数のモデルを選択し、選択した複数のモデルを用いて、応答の生成を行ってもよい。例えば、情報処理装置１０は、各モデルに対して推定情報を入力した際に、各モデルが出力した確度に基づいて、応答を生成する際に用いるモデルの選択を行ってもよい。すなわち、情報処理装置１０は、応答と応答の確度とを出力する複数のモデルの中から、利用者Ｕ０１からの質問に対して各モデルが出力した確度の値に基づき、質問に対して応答を生成するためのモデルを選択してもよい。

【0068】

例えば、情報処理装置１０は、利用者Ｕ０１から推定情報を含む質問を受付けた場合は、推定情報を各モデル＃１〜＃３に入力し、各モデル＃１〜＃３の応答と確度とを取得する。ここで、例えば、モデル＃１が分類ラベル「脈あり」および確度「０．７５」を出力し、モデル＃２が分類ラベル「脈なし）」および確度「０．６５」を出力し、モデル＃３が分類ラベル「脈あり」および確度「０．９９」を出力したものとする。このような場合、情報処理装置１０は、確度の値が最も高いモデル＃３を選択し、モデル＃３が出力した分類ラベル「脈あり」に基づく応答を生成してもよい。

【0069】

また、例えば、情報処理装置１０は、複数のモデルを用いて、利用者Ｕ０１からの質問に対する応答と応答の確度とをそれぞれ生成し、生成した応答の内容ごとに確度の平均値を算出し、算出した平均値の値が最も高い内容の応答を出力してもよい。例えば、情報処理装置１０は、モデル＃１が分類ラベル「脈あり」および確度「０．７５」を出力し、モデル＃２が分類ラベル「脈なし」および確度「０．６５」を出力し、モデル＃３が分類ラベル「脈あり」および確度「０．９９」を出力した場合、分類ラベル「脈あり」の確度の平均値「０．８７」と、分類ラベル「脈なし」の確度の平均値「０．６５」とを算出する。そして、情報処理装置１０は、確度の平均値の値がより高い分類ラベル「脈あり」に基づく応答を生成してもよい。

【0070】

また、例えば、情報処理装置１０は、利用者Ｕ０１の属性に「男性」が含まれる場合は、属性に「男性」が含まれる全てのモデルを選択し、選択した複数のモデルのうち、確度の値が高い方のモデルを用いて、応答の生成を行ってもよい。また、情報処理装置１０は、利用者Ｕ０１の属性に「１０代」が含まれる場合は、属性に「１０代」が含まれる全てのモデルを選択し、選択した複数のモデルのうち、確度の値が高い方のモデルを用いて、応答の生成を行ってもよい。

【0071】

なお、情報処理装置１０は、任意の粒度の条件に対して適正化がなされたモデルをあらかじめ学習しておき、これら全てのモデルを用いて質問に対する応答の内容（「脈あり」であるか「脈なし」であるか等）を取得する。そして、情報処理装置１０は、取得した内容の多数決や内容に対する確度に基づく多数決に基づいて、応答の内容を決定してもよい。また、情報処理装置１０は、質問者となる利用者Ｕ０１の属性や利用者Ｕ０２の属性、各モデルが推定した応答の内容や確度の値等に基づく重みづけを考慮して、応答の内容を決定してもよい。

【0072】

〔３−２．モデルについて〕
上述した例では、情報処理装置１０は、質問者である利用者に対し、相手方となる利用者が「脈あり」であるか「脈なし」であるかを応答するためのモデルの学習や利用を行った。しかしながら、実施形態は、これに限定されるものではない。すなわち、情報処理装置１０は、質問の種別に応じて様々な条件に対する適正化が行われたモデルの学習や利用を行ってもよい。

【0073】

例えば、情報処理装置１０は、会社における人間関係に関する質問に対する応答を生成するためのモデルの学習や利用を行ってもよい。このような場合、情報処理装置１０は、質問者となる利用者の属性や、相手方となる利用者の属性、および推定情報の内容に基づいて、相手方となる利用者が質問者となる利用者を気に入っているか否かを推定するモデルの学習を行ってもよい。また、情報処理装置１０は、質問者となる利用者の属性のみならず、相手方となる利用者の属性に対して適正化されたモデルの学習を行えばよい。

【0074】

また、情報処理装置１０は、就職活動に関する質問に対する応答を生成するためのモデルの学習や利用を行ってもよい。例えば、情報処理装置１０は、推定情報として、質問者となる利用者の大学や専攻の内容に基づいて、就職できるか否かを推定するモデルであって、各会社ごとに適正化がなされたモデルを保持する。そして、情報処理装置１０は、利用者の大学や専攻の内容を受け付けるとともに、就職を希望する会社の選択を受け付けると、かかる会社に対して適正化がなされたモデルを用いて、利用者が就職できるか否かの推定結果を応答として出力してもよい。

【0075】

なお、情報処理装置１０は、上述した内容以外にも、任意の内容について質問に対する応答を生成するモデルの利用や学習を行ってよい。すなわち、情報処理装置１０は、条件ごとに適正化がなされた複数のモデルのうち、利用者の入力に基づく条件（例えば、質問者の属性や相手方の属性等）に応じて応答を生成するためのモデルを選択するのであれば、任意の内容の質問に対する応答を生成するモデルの利用や学習を行ってよい。

【0076】

〔３−３．属性について〕
上述した情報処理装置１０は、推定情報から利用者の属性ごとに適正化された応答を出力するための複数のモデルを学習し、質問を行った利用者の属性に対して適正化された応答を出力するためのモデルを選択した。しかしながら、実施形態は、これに限定されるものではない。例えば、情報処理装置１０は、推定情報から、相手方となる利用者が好意を有するか否かを推定するモデルであれば、任意の条件に対して適正化された推定を行うモデルの学習を行ってよい。

【0077】

例えば、利用者Ｕ０２が利用者Ｕ０１に対してある行為を行った場合、ある地域では利用者Ｕ０２が利用者Ｕ０１に対して好意を有すると推定されるが、他の地域では好意を有していないと推定される場合がある。そこで、情報処理装置１０は、利用者Ｕ０１が所在する地域に基づいて、それぞれ異なる地域に対応する応答（すなわち、各地域に対して適正化された応答）を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択してもよい。

【0078】

例えば、情報処理装置１０は、推定情報に基づいて、相手方となる利用者が好意を有するか否かを推定するモデルを所定の地域ごとに学習する。また、情報処理装置１０は、利用者Ｕ０１から推定情報を含む質問を受付けた場合は、利用者Ｕ０１の所在地をＧＰＳ（Global Positioning System）等の測位システムを用いて特定する。なお、情報処理装置１０は、「どこに住んでいますか？」等といった応答を出力することで、利用者Ｕ０１が所在する地域を入力させてもよい。そして、情報処理装置１０は、利用者Ｕ０１の所在地を特定した場合は、特定した地域と対応するモデルを用いて、利用者Ｕ０１から受信した質問に対する応答を生成してもよい。

【0079】

〔３−４．学習処理について〕
上述した処理では、情報処理装置１０は、質問者である利用者から受付けた応答に対する評価に応じて、応答の内容をそのまま若しくは反転させて、質問者である利用者の属性に対して適正化がなされたモデルの学習を行った。しかしながら、実施形態は、これに限定されるものではない。

【0080】

例えば、情報処理装置１０は、質問における相手方の利用者の属性を特定可能である場合は、質問と、質問に対する応答と、応答に対する評価とを教師データとして、相手方の利用者の属性に対して適正化がなされたモデルの学習を行ってもよい。例えば、情報処理装置１０は、利用者Ｕ０１から利用者Ｕ０２に関する質問を受付けた場合は、その質問と、その質問に対する応答と、応答に対する評価とに基づいて、利用者Ｕ０２の属性「１０代 女性」と対応するモデル＃１の学習を行ってもよい。

【0081】

また、情報処理装置１０は、上述した選択処理の変形例と同様に、質問と、質問に対する応答と、応答に対する評価とを用いて、質問者となる利用者の属性とは異なる属性に対して最適化がなされたモデルの学習を行ってもよい。例えば、情報処理装置１０は、質問者となる利用者Ｕ０１の属性が「１０代 男性」である場合は、利用者Ｕ０１の質問と、質問に対する応答と、応答に対する評価とに基づいて、「１０代 女性」に対して適正化がなされたモデルの学習を行ってもよい。

【0082】

なお、情報処理装置１０は、「脈あり」および「脈なし」といった２値の分類を行うモデルのみならず、「脈あり」、「脈なし」、「不明」といった３値以上の分類を行うモデルの利用や学習を行ってもよい。このようなモデルの学習を行う場合、情報処理装置１０は、応答に対する極性が「＋」である場合は、質問と、応答の内容（分類結果ラベル）とをそのまま教師データすることで、モデルの学習を行えばよい。

【0083】

また、情報処理装置１０は、応答に対する極性が「−」である場合は、応答の内容以外の内容と、質問とを対応づけた教師データを生成し、生成した教師データを用いて、モデルの学習を行う。例えば、情報処理装置１０は、ある質問に対する応答の内容が「脈あり」であり、かかる応答に対する極性が「−」であった場合は、質問と応答の内容「脈なし」とを対応付けた教師データと、質問と応答の内容「不明」とを対応付けた教師データとを用いて、モデルの学習を行えばよい。

【0084】

〔３−５．オフトピックスの判定〕
ここで、情報処理装置１０は、上述した処理に加えて、オフトピックスの判定を行うモデルの学習や利用を行ってもよい。例えば、情報処理装置１０は、質問を受け付けると、任意の文章解析技術を用いて、質問が属する分野が恋愛相談であるか否かを判定する。そして、情報処理装置１０は、質問が属する分野が恋愛相談である場合は、質問者の属性や相手方の属性に応じてモデルを選択し、選択したモデルを用いて質問に対する応答を出力すればよい。

【0085】

また、情報処理装置１０は、例えば、入力された質問から「脈あり」であるか「脈なし」であるか「オフトピックス」であるかを推定するモデルの学習や利用を行ってもよい。このような場合、情報処理装置１０は、モデルが「オフトピックス」である旨を出力した場合は、質問者に対して応答ができない旨を通知してもよく、他の質問を入力するように促す応答を出力してもよい。

【0086】

〔３−６．条件の取得〕
ここで、情報処理装置１０は、質問者との会話を進めることで、質問者の属性や相手方の属性等といったモデルを選択するための条件を取得してもよい。例えば、図７は、実施形態に係る情報処理装置が条件を取得する処理の一例を示す図である。なお、図７に示す例では、情報処理装置１０が端末装置１００に表示させるメッセージと、端末装置１００が利用者Ｕ０１から受け付ける文章（すなわち、「質問」）の一例について記載した。

【0087】

例えば、情報処理装置１０は、図７中（Ａ）に示すように「どんなことがありましたか？」等というように、推定情報を含む質問の入力を促すメッセージを表示させる。ここで、利用者Ｕ０１は、図７中（Ｂ）に示すように、「頻繁に目があってどきどきします。」等といった推定情報を含むメッセージを入力したとする。このような場合、情報処理装置１０は、図７中（Ｃ）に示すように、「あなたや相手のことを教えてください。」等といった利用者Ｕ０１や相手方となる利用者の情報（すなわち、「条件」）の入力を促すメッセージを表示させる。

【0088】

ここで、図７中（Ｄ）に示すように、利用者Ｕ０１が「自分は、１０代の男性です。相手は、１０代の女性です。」といったメッセージを入力したとする。このような場合、情報処理装置１０は、利用者Ｕ０１が入力したメッセージから、利用者Ｕ０１の属性が「１０代 男性」であり、相手方となる利用者の属性が「１０代 女性」である旨を特定する。そして、情報処理装置１０は、特定した利用者Ｕ０１の属性や相手方となる利用者の属性に基づいて、応答を生成するためのモデルを選択し、選択したモデルを用いて応答を生成する。そして、情報処理装置１０は、図７中（Ｅ）に示すように、「脈あり」であるか「脈なし」であるか、どれくらいの確度であるかを示すとともに、利用者Ｕ０１からの評価を受け付けるための応答Ｃ１０を表示させる。

【0089】

〔３−７．評価の受付〕
ここで、情報処理装置１０は、質問を行った利用者Ｕ０１から、質問に対する応答への評価を受付けた。しかしながら、実施形態は、これに限定されるものではない。例えば、情報処理装置１０は、利用者Ｕ０１からの質問と、質問に対する応答とを公開し、第三者からの評価を受け付ける。そして、情報処理装置１０は、利用者Ｕ０１からの質問と、質問に対する応答とを公開し、第三者からの評価とを用いて、モデルの学習を行ってもよい。例えば、情報処理装置１０は、第三者の属性が「女性 １０代」である場合は、利用者Ｕ０１からの質問と、質問に対する応答と、第三者からの評価とを用いて、属性「女性 １０代」に対して適正化されたモデルの学習を行ってもよい。このような学習を行う場合、情報処理装置１０は、利用者Ｕ０１からの質問に対し、相手方となる利用者Ｕ０２の属性に基づいてモデルの選択を行うことで、応答内容の推定精度を向上させることができる。

【0090】

〔３−８．その他〕
上述した情報処理装置１０は、上述したモデル以外にも、任意のモデルの学習や利用を行ってよい。例えば、情報処理装置１０は、入力された文章が犬に関する文章であるのか猫に関する文章であるのかを判定するモデルであって、それぞれ異なる条件（例えば、質問者の性別）に対して適正化がなされたモデルの学習を行ってもよい。また、情報処理装置１０は、米ドルに関する文章であるのかユーロに関する文章であるのかを判定するモデルであって、それぞれ異なる条件（例えば、入力された文章の言語）に対して適正化がなされたモデルの学習を行ってもよい。また、情報処理装置１０は、野球に関する文章であるのかサッカーに関する文章であるのかを判定するモデルであって、それぞれ異なる条件（例えば、質問者の年代）に対して適正化がなされたモデルの学習を行ってもよい。

【0091】

また、例えば、情報処理装置１０は、質問者となる利用者Ｕ０１と相手方の利用者Ｕ０２との間の年齢差ごとに、異なる適正化がなされた複数のモデルを生成し、質問者となる利用者Ｕ０１と相手方の利用者Ｕ０２との間の年齢差に応じて、応答を生成するモデルを選択してもよい。このようなモデルを学習する場合、情報処理装置１０は、質問を行った利用者Ｕ０１と相手方の利用者Ｕ０２との年齢差を算出し、算出した年齢差に対して適正化がなされたモデルを学習対象として選択する。そして、情報処理装置１０は、質問と、応答と、評価とを教師データとして、選択したモデルの学習を行えばよい。

【0092】

また、情報処理装置１０は、応答に対する評価のみならず、応答に対する結果を利用者Ｕ０１から受付け、受付けた結果に基づいて、モデルを選択する際の重みづけやモデルを学習する際の重みづけを行ってもよい。例えば、情報処理装置１０は、利用者Ｕ０１に対して利用者Ｕ０２が「脈あり」である旨の応答を提供する。このような場合、情報処理装置１０は、利用者Ｕ０２が利用者Ｕ０１に対して好意を持っていたか否かを利用者Ｕ０１に問い合わせる。そして、情報処理装置１０は、好意を持っていた旨の通知を利用者Ｕ０１から得られた場合は、利用者Ｕ０１が入力した質問文に対して「脈あり」である旨を出力するように、モデルの調整を行ってもよい。また、情報処理装置１０は、利用者Ｕ０１が入力した質問文に対して応答を生成する際に用いたモデルの結果をより信頼するような重みづけを行ってもよい。

【0093】

〔３−９．他の実施形態〕
なお、上記実施形態は例示に過ぎず、本発明は、以下に例示するものやそれ以外の他の実施態様も含むものである。例えば、本出願における機能構成、データ構造、フローチャートに示す処理の順序や内容などは例示に過ぎず、各要素の有無、その配置や処理実行などの順序、具体的内容などは適宜変更可能である。例えば、上述した生成処理や学習処理は、上記実施形態で例示したように情報処理装置１０が実現する以外にも、クラウドシステムにおける装置、方法やプログラムとして実現することもできる。

【0094】

また、情報処理装置１０を構成する各処理部４１〜４６を、さらにそれぞれ独立した装置で実現する構成も一般的である。同様に、外部のプラットフォーム等をＡＰＩ（アプリケーション・プログラム・インタフェース）やネットワークコンピューティング（いわゆるクラウドなど）で呼び出すことで、上記実施形態で示した各手段を実現するなど、本発明の構成は柔軟に変更できる。さらに、本発明に関する手段などの各要素は、コンピュータの演算制御部に限らず物理的な電子回路など他の情報処理機構で実現してもよい。

【0095】

また、情報処理装置１０は、端末装置１００との間で質問や応答の送受信を行うフロントエンドサーバと、生成処理や学習処理を実行するバックエンドサーバとにより実現されてもよい。例えば、フロントエンドサーバは、端末装置１００から利用者Ｕ０１の属性や質問を受け付けると、受付けた属性や質問をバックエンドサーバへと送信する。このような場合、バックエンドサーバは、受付けた属性に基づいてモデルの選択を行うとともに、選択したモデルを用いて質問に対する応答を生成する。そして、バックエンドサーバは、生成した応答をフロントエンドサーバへと送信する。その後、フロントエンドサーバは、応答をメッセージとして端末装置１００へと送信する。

【0096】

また、フロントエンドサーバは、端末装置１００から応答に対する評価を受け付けると、受付けた評価と、送信した質問と、利用者の属性（すなわち、条件）とを対応付けた教師データを生成し、生成した教師データをバックエンドサーバへと送信する。この結果、バックエンドサーバは、教師データを用いて、モデルの学習を行うことができる。

【0097】

〔４．効果〕
上述したように、情報処理装置１０は、利用者Ｕ０１によって入力された条件に基づいて、質問に対する応答を生成するための複数のモデルであって、それぞれ異なる条件に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する。そして、情報処理装置１０は、選択されたモデルを用いて、利用者Ｕ０１からの質問に対する応答を生成する。このため、情報処理装置１０は、質問に対する応答の推定精度を向上させることができる。

【0098】

また、情報処理装置１０は、条件として、利用者Ｕ０１の属性に基づいて、それぞれ異なる属性に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する。例えば、情報処理装置１０は、利用者Ｕ０１の属性と同じ属性に対応する応答を生成するためのモデルを選択する。このため、情報処理装置１０は、利用者Ｕ０１が納得しやすい（利用者Ｕ０１に対して適正化された）応答を出力することができる。

【0099】

また、情報処理装置１０は、利用者Ｕ０１の属性と異なる属性に対応する応答を生成するためのモデルを選択する。例えば、情報処理装置１０は、利用者Ｕ０１から他の利用者Ｕ０２に関する質問を受け付けた場合は、条件として、当該他の利用者Ｕ０２の属性に基づき、それぞれ異なる属性に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する。例えば、情報処理装置１０は、利用者Ｕ０２の属性に対して適正化されたモデルを選択する。このため、情報処理装置１０は、人間関係に関する質問に対する応答の推定精度を向上させることができる。

【0100】

また、情報処理装置１０は、モデルとして、応答と応答の確度とを出力する複数のモデルの中から、利用者Ｕ０１からの質問に対して各モデルが出力した確度の値に基づき、質問に対して応答を生成するためのモデルを選択する。このため、情報処理装置１０は、正答を出力する確率が高いモデルを用いて、応答を生成することができる。

【0101】

また、情報処理装置１０は、条件として、利用者Ｕ０１が所在する地域に基づいて、それぞれ異なる地域に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する。このため、情報処理装置１０は、利用者Ｕ０１の所在地域を考慮して、応答を生成することができる。

【0102】

また、情報処理装置１０は、モデルのうち、利用者Ｕ０１が選択した条件に対応する応答を生成するためのモデルを選択する。このため、情報処理装置１０は、質問に対する応答の推定精度を向上させることができる。

【0103】

また、情報処理装置１０は、モデルの中から複数のモデルを選択する。例えば、情報処理装置１０は、応答と応答の確度とを出力する複数のモデルの中から複数のモデルを選択し、選択された複数のモデルを用いて、利用者Ｕ０１からの質問に対する応答と応答の確度とをそれぞれ生成し、生成した応答のうち、確度の値が最も高い応答を出力する。また、例えば、情報処理装置１０は、生成した応答の内容ごとに確度の平均値を算出し、算出した平均値の値が最も高い内容の応答を出力する。このため、情報処理装置１０は、質問に対する応答の推定精度をより向上させることができる。

【0104】

また、情報処理装置１０は、利用者Ｕ０１から、生成部が生成した応答に対する評価を受け付ける。そして、情報処理装置１０は、利用者Ｕ０１からの質問と、質問に対して生成された応答と、応答に対する評価とを用いて、モデルを学習する。例えば、情報処理装置１０は、モデルとして、利用者Ｕ０１からの質問に対し、所定の応答または所定の応答とは逆の内容の応答のいずれか一方を出力するモデルの中から、応答を生成する際に用いるモデルを選択する。そして、情報処理装置１０は、応答に対する評価が好意的な評価である場合は、利用者Ｕ０１からの質問と、質問に対して生成された応答とをモデルに学習させ、応答に対する評価が否定的な評価である場合は、利用者Ｕ０１からの質問と、質問に対して生成された応答とは逆の内容の応答とをモデルに学習させる。このため、情報処理装置１０は、出力した応答の内容が適切であったか否かに関わらず、出力した応答を教師データとすることができるので、教師データの数を増やす結果、応答の推定精度をより向上させることができる。

【0105】

また、情報処理装置１０は、利用者Ｕ０１からの質問と、質問に対して生成された応答と、応答に対する評価とを用いて、利用者Ｕ０１によって入力された条件に対応する応答を生成するためのモデルを学習する。このため、情報処理装置１０は、質問に対する応答を生成するための複数のモデルであって、それぞれ異なる条件に対応する応答を生成するためのモデルを学習することができる。

【0106】

また、情報処理装置１０は、利用者Ｕ０１からの質問であって、他の利用者Ｕ０２に関する質問と、質問に対する応答と、応答に対する評価とを用いて、他の利用者Ｕ０１の属性に対応する応答を生成するためのモデルを学習する。このため、情報処理装置１０は、人間関係に関する質問に対する応答精度を向上させることができる。

【0107】

以上、本願の実施形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。

【0108】

また、上記してきた「部（section、module、unit）」は、「手段」や「回路」などに読み替えることができる。例えば、選択部は、選択手段や選択回路に読み替えることができる。

【符号の説明】

【0109】

１０ 情報処理装置
２０ 通信部
３０ 記憶部
３１ モデルデータベース
３２ 教師データデータベース
４０ 制御部
４１ 取得部
４２ 選択部
４３ 生成部
４４ 応答部
４５ 受付部
４６ 学習部
１００ 端末装置

【要約】

【課題】質問文に対する応答の精度を向上させること。
【解決手段】本願に係る生成装置は、利用者によって入力された条件に基づいて、問い合わせに対する応答を生成するための複数のモデルであって、それぞれ異なる条件に対応する応答を生成するためのモデルの中から、応答を生成する際に用いるモデルを選択する選択部と、前記選択部により選択されたモデルを用いて、前記利用者からの問い合わせに対する応答を生成する生成部とを有することを特徴とする。
【選択図】図１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】