特許 6231944 学習モデル作成装置、判定システムおよび学習モデル作成方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6231944

(24)【登録日】2017年10月27日

(45)【発行日】2017年11月15日

(54)【発明の名称】学習モデル作成装置、判定システムおよび学習モデル作成方法

(51)【国際特許分類】

   G06N 99/00 20100101AFI20171106BHJP

【ＦＩ】

   G06N99/00 153

【請求項の数】8

【全頁数】16

(21)【出願番号】特願2014-116280(P2014-116280)

(22)【出願日】2014年6月4日

(65)【公開番号】特開2015-230570(P2015-230570A)

(43)【公開日】2015年12月21日

【審査請求日】2016年9月12日

(73)【特許権者】

【識別番号】000004226

【氏名又は名称】日本電信電話株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】特許業務法人酒井国際特許事務所

(72)【発明者】

【氏名】熊谷 充敏

(72)【発明者】

【氏名】折原 慎吾

(72)【発明者】

【氏名】岡野 靖

【審査官】 多賀 実

(56)【参考文献】

【文献】 特開２００５−１８１９２８（ＪＰ，Ａ）

【文献】 特開２００１−２７３４７５（ＪＰ，Ａ）

【文献】 安田 陽介 外１名，「身体的特徴情報を用いた適応的トレーニングデータ選択による日常行動認識手法」，電気学会研究会資料 情報システム研究会，一般社団法人電気学会，２０１３年 ６月２１日，ＩＳ−１３−２６，ｐｐ．２３−２７

【文献】 木村 周 外２名，「モバイル端末上における行動認識のための距離関数を用いた分類モデル生成手法の提案と評価」，電子情報通信学会技術研究報告，社団法人電子情報通信学会，２０１２年 ３月，第１１１巻，第４８５号，ｐｐ．１１３−１１８

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｎ ３／００−９９／００

Ｇ０６Ｆ１７／３０

(57)【特許請求の範囲】

【請求項1】

複数のユーザについて、入力情報と、当該入力情報に対応したラベルとを少なくとも組とする学習データを受け付ける受付部と、
前記ユーザごとの学習データが示す当該ユーザの特徴に基づいて、前記ユーザごとに、当該ユーザの特徴と、他のユーザの特徴との相違を示す指標値を算出する算出部と、
前記複数のユーザの学習データに基づいて、ラベルが未知の入力データに対応したラベルを判定するための学習モデルを作成する際に、前記ユーザごとに算出された指標値に基づいて、他のユーザと特徴の相違が大きいユーザの学習データが前記学習モデルに寄与する度合いを小さくして前記学習モデルを作成する学習モデル作成部と
を備えることを特徴とする学習モデル作成装置。

【請求項2】

前記複数のユーザの学習データに基づいて、前記ユーザごとに、当該ユーザの特徴をベクトルで示したユーザモデルを作成するユーザモデル作成部を更に備え、
前記算出部は、前記ユーザごとに作成された前記ユーザモデルのベクトルが示す大きさまたは方向、あるいは大きさと方向の両方を、前記ユーザごとに、他のユーザと比較して前記指標値を算出する
ことを特徴とする請求項１に記載の学習モデル作成装置。

【請求項3】

前記算出部は、前記ユーザごとに作成された前記ユーザモデルの平均のユーザモデルと、前記ユーザごとのユーザモデルとを比較して前記指標値を算出する
ことを特徴とする請求項２に記載の学習モデル作成装置。

【請求項4】

前記算出部は、前記ユーザごとに、当該ユーザの学習データ数と、他のユーザの学習データ数とを比較して前記指標値を算出する
ことを特徴とする請求項１に記載の学習モデル作成装置。

【請求項5】

前記学習モデル作成部は、前記ユーザごとに算出された指標値が所定の閾値を超えるか否かに基づいて、前記ユーザの学習データが前記学習モデルに寄与する度合いを変更する
ことを特徴とする請求項１乃至４のいずれか一項に記載の学習モデル作成装置。

【請求項6】

前記学習モデル作成部は、前記ユーザごとに、当該ユーザの学習データが前記学習モデルに寄与する度合いを更新する処理と、当該更新された度合いをもとに前記学習モデルを更新する処理とを、所定の収束条件を満たすまで繰り返して前記学習モデルを作成する
ことを特徴とする請求項１に記載の学習モデル作成装置。

【請求項7】

学習モデルを作成する学習モデル作成装置と、前記学習モデルに基づいてラベルが未知の入力データに対応したラベルを判定する判定装置とを有する判定システムであって、
前記学習モデル作成装置は、
複数のユーザについて、入力情報と、当該入力情報に対応したラベルとを少なくとも組とする学習データを受け付ける受付部と、
前記ユーザごとの学習データが示す当該ユーザの特徴に基づいて、前記ユーザごとに、当該ユーザの特徴と、他のユーザの特徴との相違を示す指標値を算出する算出部と、
前記複数のユーザの学習データに基づいて、ラベルが未知の入力データに対応したラベルを判定するための前記学習モデルを作成する際に、前記ユーザごとに算出された指標値に基づいて、他のユーザと特徴の相違が大きいユーザの学習データが前記学習モデルに寄与する度合いを小さくして前記学習モデルを作成する学習モデル作成部とを備え、
前記判定装置は、
前記学習モデル作成部が作成した学習モデルを格納する格納部と、
前記格納された学習モデルに基づいて、前記ラベルが未知の入力データに対応したラベルを判定する判定部と
を備えることを特徴とする判定システム。

【請求項8】

学習モデル作成装置によって実行される学習モデル作成方法であって、
複数のユーザについて、入力情報と、当該入力情報に対応したラベルとを少なくとも組とする学習データを受け付けるステップと、
前記ユーザごとの学習データが示す当該ユーザの特徴に基づいて、前記ユーザごとに、当該ユーザの特徴と、他のユーザの特徴との相違を示す指標値を算出するステップと、
前記複数のユーザの学習データに基づいて、ラベルが未知の入力データに対応したラベルを判定するための学習モデルを作成する際に、前記ユーザごとに算出された指標値に基づいて、他のユーザと特徴の相違が大きいユーザの学習データが前記学習モデルに寄与する度合いを小さくして前記学習モデルを作成するステップと
を含むことを特徴とする学習モデル作成方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、学習モデル作成装置、判定システムおよび学習モデル作成方法に関する。

【背景技術】

【0002】

従来、機械学習においては、判別対象のデータの入力を受け付け、そのデータの内容の種別（これをラベルとよぶ）を判定して出力する手法として、教師つき学習と呼ばれるものがある。この教師つき学習では、複数のユーザから与えられる学習データを基に学習モデルを作成する。次いで、ラベルが未知であるデータの入力を受け付け、作成した学習モデルに基づいてそのデータのラベルを判定する。なお、学習データは、テキスト、画像、音声等のデータと、そのデータの内容の種別であるラベルとの組を複数のユーザから集めたものである。また、学習モデルは、データに対応するラベルを判定するためのパラメータである。

【0003】

ラベルが未知であるデータの判定精度は元となる学習モデルによる影響が大きい。このため、学習モデルの作成においては、各ユーザからの学習データを基に、各ユーザ固有の学習モデル（ユーザモデル）を作成し、各ユーザのユーザモデルの単純平均によって、判定に用いる学習モデルを作成するものがある（非特許文献１参照）。また、ラベルの信頼度が所定の基準を満たす学習データ（エキスパートデータ）を基に、非エキスパートデータごとに信頼度を算出し、算出した信頼度を学習データに加味して学習モデルを作成するものがある（特許文献１参照）。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００９−２８２６８６号公報

【非特許文献】

【0005】

【非特許文献1】Hiroshi Kajino, Yuta Tsuboi, Hisashi Kashima, "A Convex Formulation for Learning from Crowds", Proceedings of the Twenty-Sixth AAAI Conference on Artificial Intelligence

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、上述した従来技術では、誤ったラベルを付与されたデータ（以後、これを誤った学習データと呼ぶ）を与えるユーザが存在した場合であっても、そのユーザのユーザモデルも単純平均によって、判定に用いる学習モデルの作成に影響を及ぼすことから、判定精度が落ちてしまう場合があった。また、エキスパートデータが少ない場合には、非エキスパートデータの信頼度を算出することが困難となる。このため、高精度な判定が可能な学習モデルの作成が困難となる場合があった。

【0007】

本発明は、上記に鑑みてなされたものであって、判定精度の高い学習モデルを作成することを可能とする学習モデル作成装置、判定システムおよび学習モデル作成方法を提供することを目的とする。

【課題を解決するための手段】

【0008】

上述した課題を解決し、目的を達成するために、実施形態にかかる学習モデル作成装置は、複数のユーザについて、入力情報と、当該入力情報に対応したラベルとを少なくとも組とする学習データを受け付ける受付部と、前記ユーザごとの学習データが示す当該ユーザの特徴に基づいて、前記ユーザごとに、当該ユーザの特徴と、他のユーザの特徴との相違を示す指標値を算出する算出部と、前記複数のユーザの学習データに基づいて、ラベルが未知の入力データに対応したラベルを判定するための学習モデルを作成する際に、前記ユーザごとに算出された指標値に基づいて、他のユーザと特徴の相違が大きいユーザの学習データが前記学習モデルに寄与する度合いを小さくして前記学習モデルを作成する学習モデル作成部とを備えることを特徴とする。

【発明の効果】

【0009】

本発明によれば、判定精度の高い学習モデルを作成することができる、という効果を奏する。

【図面の簡単な説明】

【0010】

【図1】図１は、第１の実施形態にかかる判定システムの構成の一例を示すブロック図である。

【図2】図２は、学習データを説明する説明図である。

【図3】図３は、ユーザモデル作成部を説明する説明図である。

【図4】図４は、異常度の算出を説明する説明図である。

【図5】図５は、異常度の算出を説明する説明図である。

【図6】図６は、異常度の算出を説明する説明図である。

【図7】図７は、第１の実施形態にかかる判定システムの処理フローを説明する説明図である。

【図8】図８は、第２の実施形態にかかる判定システムの構成の一例を示すブロック図である。

【図9】図９は、第２の実施形態にかかる学習モデル作成の処理を示すフローチャートである。

【図10】図１０は、実施形態にかかる判定システムの学習モデル作成装置および判定装置における処理がコンピュータを用いて具体的に実現されることを示す図である。

【発明を実施するための形態】

【0011】

以下、添付図面を参照して実施形態にかかる学習モデル作成装置、判定システムおよび学習モデル作成方法を詳細に説明する。なお、以下の説明において、同様の構成要素には共通の符号を付与するとともに、重複する説明を省略する。

【0012】

（第１の実施形態）
図１は、第１の実施形態にかかる判定システムの構成の一例を示すブロック図である。図１に示すように、判定システム１は、複数のユーザの学習データＤ１を受け付けて学習モデルＭ１を作成する学習モデル作成装置１０と、ラベルが未知であるデータＤ２の入力を受け付け、学習モデル作成装置１０が作成した学習モデルＭ１に基づいてデータＤ２のラベルを判定する判定装置２０とを有する。

【0013】

学習モデル作成装置１０は、学習データ変換部１０１と、学習データ格納部１０２と、ユーザモデル作成部１０３と、異常度算出部１０４と、学習モデル作成部１０５とを有する。

【0014】

学習データ変換部１０１は、学習データＤ１の入力を受け付ける。学習データＤ１は、複数のユーザから与えられ、教師つき学習における教師データに相当するデータである。具体的には、学習データＤ１は、ユーザの入力情報であるテキスト、画像、音声等のデータと、そのデータの内容の種別であるラベルとを少なくとも組としたデータである。

【0015】

図２は、学習データＤ１を説明する説明図である。図２に示すように、学習データＤ１は、ユーザの入力情報がテキストである場合、「野球をしたい」などのテキストと、そのテキスト内容の種別を示す「スポーツ」等のラベルと、ユーザを識別するためのユーザＩＤとを有する。この学習データＤ１は、例えばコンソールからの入力の他、インターネット上の掲示板、ブログ、ＳＮＳ（ソーシャル・ネットワーキング・サービス）などへのユーザの書き込みを収集したものであってもよい。

【0016】

学習データ変換部１０１は、入力された学習データＤ１について、データの特徴をｎ次元のベクトルで表記した特徴ベクトルと、ラベルの内容を数値化した数値ラベルの組に変換する。特徴ベクトルへの変換は、機械学習で一般的に用いられている公知の手法を利用する。例えば、データがテキストの場合には、形態素解析、ｎ−ｇｒａｍまたは区切り文字により特徴ベクトルへ変換する手法がある。一般に、形態素解析は日本語のテキストに、空白区切りは英語のテキストに適用されることが多く、テキストの種別（日本語／英語）によって手法を変更してもよい。

【0017】

形態素解析の場合は、予め設定された辞書データをもとに、データを品詞に分割し、分割された要素をもとに特徴ベクトルへ変換する。例えば、「今日は、サッカーを、する」というテキストは、「今日／は／、／サッカー／を／、／する」と分割され、分割された要素をもとに特徴ベクトルに変換する。

【0018】

また、ｎ−ｇｒａｍの場合は、データを先頭から１文字ずつずらしながらｎ文字の組をつくり、それらを特徴ベクトルに変換する。例えば、「今日は、サッカーを、する」というテキストは、ｎ−ｇｒａｍ（ｎ＝６）の場合、「今日は、サッ／日は、サッカ／…／カーを、する」という要素が作られ、これらの要素をもとに特徴ベクトルに変換する。

【0019】

また、区切り文字の場合は、データを予め定めた区切り文字（空白、句読点、カンマ等）によって分割し、分割された要素をもとに特徴ベクトルへ変換する。例えば、「今日は、サッカーを、する」というテキストは、区切り文字（”、”）の場合、「今日は／サッカーを／する」と分割され、分割された要素をもとに特徴ベクトルへ変換する。

【0020】

特徴ベクトルへの変換には、各要素の出現回数をそのまま特徴ベクトルとする方式、出現回数によらず、ある要素が出現する（１）／出現しない（０）で数値化する方式等がある。ラベルに関しても所定の規則に従って数値化する。例えば、「スポーツ」／「非スポーツ」のラベルがある場合は、「スポーツ」を「１」、「非スポーツ」を「０」のように数値化する。

【0021】

学習データ格納部１０２は、学習データ変換部１０１による変換済の学習データＤ１と、ユーザＩＤの組を格納する。学習データ格納部１０２は、一般のデータベース（ＭｙＳＱＬやＰｏｓｔｇｒｅＳＱＬ等）を用いてもよいし、表形式やテキスト形式での格納などであってもよい。学習データ格納部１０２における、格納方法の種類は問わない。また、学習データ格納部１０２は、ＲＡＭ（Random Access Memory）上に確保された作業領域で代用してもよい。

【0022】

ユーザモデル作成部１０３は、学習データ格納部１０２から変換済の学習データＤ１とユーザＩＤの組を取り出し、ユーザＩＤ（ユーザ）ごとに固有の学習モデルであるユーザモデルを作成する。

【0023】

図３は、ユーザモデル作成部１０３を説明する説明図である。図３に示すように、ユーザモデル作成部１０３は、ユーザＩＤごとの学習データＤ１１、Ｄ１２に対応したユーザモデルＵ１、Ｕ２を作成する。ユーザモデルＵ１、Ｕ２は、ユーザＩＤが「１」、「２」におけるユーザの特徴ベクトルと数値化ラベルとの組をもとに作成される、ユーザごとの学習モデルである。ユーザモデルＵ１、Ｕ２の作成には、一般の機械学習手法である、ロジスティック回帰、サポートベクターマシン、パーセプトロン等を用いてもよい。作成されたユーザモデルＵ１、Ｕ２は、ｎ次元のベクトルで表記される。

【0024】

異常度算出部１０４は、ユーザごとの学習データＤ１が示す各ユーザの特徴に基づいて、ユーザごとに、ユーザの特徴と、他のユーザの特徴とが、どの程度相違するかを示す指標値である異常度を算出する。具体的には、各ユーザの学習データＤ１や、ユーザモデルＵ１、Ｕ２を互いに比較することで、あるユーザが他のユーザとどの程度相違するかを示す異常度を算出する。この異常度の算出方法には、大きく分けて、各ユーザの学習データＤ１の違いにより算出する第１の算出方法、ユーザモデルＵ１、Ｕ２の違いにより算出する第２の算出方法、第１の算出方法と第２の算出方法を組み合わせた第３の算出方法がある。

【0025】

第１の算出方法では、各ユーザの学習データＤ１の要素の違いを基に、各ユーザの異常度を算出する。例えば、他のユーザと比べて学習データの要素が極端に少ない、もしくは多いユーザの異常度を高く算出する。

【0026】

図４は、異常度の算出を説明する説明図であり、より具体的には、第１の算出方法による異常度の算出を説明する図である。図４に示すように、第１の算出方法の具体例としては、全てのユーザの学習データ数の平均（図示例では「４０」）を算出し、算出した平均と各ユーザの学習データ数との差を、各ユーザの異常度と定義する方法がある。また、全てのユーザの学習データ数の中央値（図示例では「３０」）と、各ユーザの学習データ数の差を、各ユーザの異常度と定義する方法がある。なお、第１の算出方法は、図４の例に限定するものではなく、各ユーザの学習データＤ１の要素を互いに比較する方法であれば他の方法を用いてもよい。

【0027】

第２の算出方法では、ユーザモデルＵ１、Ｕ２を表すベクトルの大きさや方向の違いを基に、各ユーザの異常度を算出する。例えば、ユーザモデルＵ１、Ｕ２を表すベクトルの大きさや方向が、他とは異なるユーザの異常度を高く算出する。

【0028】

図５、図６は、異常度の算出を説明する説明図であり、より具体的には、第２の算出方法による異常度の算出を説明する図である。ここで、図５、図６におけるＶ_１、Ｖ_２およびＶ_３はユーザＩＤが「１」、「２」、「３」のユーザモデルを２次元のベクトルとして表記したものである。また、図５におけるＶ_ａは、Ｖ_１、Ｖ_２およびＶ_３の平均のベクトルである。また、図６におけるＶ_１ｎ、Ｖ_２ｎおよびＶ_３ｎは、Ｖ_１、Ｖ_２およびＶ_３を正規化したベクトルである。また、図６におけるＶ_ａｎは、Ｖ_１ｎ、Ｖ_２ｎおよびＶ_３ｎの平均のベクトルである。

【0029】

図５に示すように、第２の算出方法としては、各ユーザのユーザモデルであるＶ_１、Ｖ_２およびＶ_３の平均をとり、平均とＶ_１、Ｖ_２およびＶ_３との距離Ｄ_１、Ｄ_２、Ｄ_３をユーザごとの異常度と定義する方法がある。この場合、Ｖ_ａと、Ｖ_１、Ｖ_２およびＶ_３との距離Ｄ_１、Ｄ_２、Ｄ_３が大きくなるほど、異常度は高くなる。

【0030】

また、図６に示すように、第２の算出方法としては、各ユーザのユーザモデルであるＶ_１、Ｖ_２およびＶ_３について正規化し、正規化したＶ_１ｎ、Ｖ_２ｎおよびＶ_３ｎの平均をとる。そして、平均したＶ_ａｎと、Ｖ_１、Ｖ_２およびＶ_３とのなす角度をユーザごとの異常度と定義する方法がある。この場合、Ｖ_ａｎと、Ｖ_１、Ｖ_２およびＶ_３とのなす角度が大きくなるほど、異常度は高くなる。なお、第２の算出方法は、図５、６の例に限定するものではなく、各ユーザのユーザモデルＵ１、Ｕ２をもとに比較を行う方法であれば他の方法を用いてもよい。

【0031】

第３の算出方法としては、例えば、（第１の算出方法で算出された異常度）＋（第２の算出方法で算出された異常度）と算出する方法がある。なお、第１の算出方法および第２の算出方法の組み合わせは、上述した単純加算以外に乗算を用いてもよく、特に限定しない。

【0032】

学習モデル作成部１０５は、入力された学習データＤ１に基づいて、判定装置２０がデータＤ２に対応したラベルを判定するための学習モデルＭ１を作成する。具体的には、学習モデル作成部１０５は、ユーザモデル作成部１０３が作成した各ユーザのユーザモデルを統合した学習モデルＭ１を作成し、判定装置２０へ出力する。この学習モデルＭ１の作成に際し、学習モデル作成部１０５は、異常度算出部１０４が算出した各ユーザの異常度に基づいて、他のユーザと特徴の相違が大きい、すなわち異常度の大きいユーザのユーザモデルが学習モデルＭ１に寄与する度合いを小さくして、学習モデルＭ１を作成する。異常度に応じてユーザの学習データＤ１の寄与を変更する方法としては、異常度から各ユーザモデルの重みを定義し、その重み付き平均により学習モデルを作成する方法、所定の閾値未満の重みに対応するユーザモデルを排除した上で学習モデルを作成する方法などがある。

【0033】

重み付き平均により学習モデルを作成する方法において、ユーザモデルの重みの定め方としては、例えば異常度の逆数を重みとする方法がある。異常度の逆数を重みとする場合、異常度が０の時には、逆数の計算ができないため、予め設定しておいた数値を重みとする等の例外処理を行う。なお、重要度から重みを定める方法は上記に限定しない。

【0034】

例えば、ｗ_iをユーザＩＤ＝ｉのユーザモデルとし、λ_ｉをユーザモデルｗ_ｉの重み、Ｋをユーザの総数としたとき、学習モデルｗ_０は以下の式（１）で算出してもよい。

【0035】

【数1】

【0036】

式（１）を用いる方法では、異常度の高いユーザモデルｗ_ｉは、学習モデルｗ_０への寄与が小さくなる。

【0037】

所定の閾値未満の重みに対応するユーザモデルを排除した上で学習モデルを作成する方法としては、重みλ_ｉがある所定の閾値を下回っているユーザモデルｗ_ｉは用いずに学習モデルｗ_０を作成する方法がある。この閾値の設定方法は、ユーザがコンソール等より予め定める方法、重みλ_ｉの平均を閾値とする方法があるが、それらに限定しない。

【0038】

例えば、所定の閾値をａとした場合の学習モデルｗ_０は、以下の式（２）で算出してもよい。

【0039】

【数2】

【0040】

また、重みが閾値ａ以上となるユーザモデルｗ_ｉは、すべて均等に扱って学習モデルｗ_０を算出してもよい。この場合、学習モデルｗ_０は、以下の式（３）で与えられる。

【0041】

【数3】

【0042】

なお、すべてのユーザモデルの重みλ_ｉが閾値ａを下回った場合は、学習モデルｗ_０は０ベクトルとしてもよい。

【0043】

判定装置２０は、データ変換部２０１と、判定部２０２と、学習モデル格納部２０３と、判定結果出力部２０４とを有する。

【0044】

データ変換部２０１は、ラベルが未知であるデータＤ２を入力として受け付ける。このデータＤ２は、例えばコンソールからの入力の他、例えば、入力がテキストの場合には、インターネット上の掲示板、ブログ、ＳＮＳなどへの任意の書き込みを収集したものであってもよい。データ変換部２０１は、学習データ変換部１０１と同様、受け付けたデータＤ２を特徴ベクトルに変換する。特徴ベクトルに変換されたデータＤ２は判定部２０２へ出力される。

【0045】

判定部２０２は、特徴ベクトルに変換されたデータＤ２を受け取ると、学習モデル格納部２０３に格納されている学習モデルＭ１を参照し、データＤ２に対応するラベルを判定する。具体的には、特徴ベクトルと学習モデルＭ１との内積が０より大きければ数値化ラベル＝１、０より小さければ数値化ラベル＝０、０であれば数値化ラベル＝−１（「−１」は「判定不能」を示す）のように、判定部２０２は、特徴ベクトルと学習モデルＭ１との内積の値をもとにラベル判定を行う。

【0046】

学習モデル格納部２０３は、学習モデル作成装置１０にて作成された学習モデルＭ１を格納する。学習モデル格納部２０３は、一般のデータベース（ＭｙＳＱＬやＰｏｓｔｇｒｅＳＱＬ等）を用いてもよいし、表形式やテキスト形式での格納などであってもよい。学習モデル格納部２０３における、格納方法の種類は問わない。

【0047】

判定結果出力部２０４は、判定部２０２で得られた判定結果（数値化ラベル）を、数値化ラベルとラベル表記との対応テーブルなどを参照し、数値化する前のラベルに変換する。そして、判定結果出力部２０４は、変換したラベルをユーザに識別可能な判定結果Ｒ１として出力する。ただし、判定部２０２で得られた判定結果が「−１」の場合には、「判定不能」などの文字列を判定結果Ｒ１として出力する。ここで、判定結果出力部２０４が行う判定結果Ｒ１の出力は、ディスプレイへの表示出力、ＨＤＤ（Hard Disk Drive）等の記憶媒体へ書き込み、ネットワーク上の他の情報処理装置（例えばＰＣ（Personal Computer）等）への送信などであってよい。

【0048】

図７は、第１の実施形態にかかる判定システム１の処理フローを説明する説明図である。図７に示すように、学習モデル作成装置１０は、複数のユーザについて、入力情報と、その入力情報に対応したラベルとを少なくとも組とする学習データＤ１１、Ｄ１２、Ｄ１３…を受け付ける。そして、学習モデル作成装置１０は、学習データ変換部１０１において、ユーザごとの学習データＤ１１、Ｄ１２、Ｄ１３が示す特徴ベクトルへの変換等の学習データ変換の処理を行う（Ｓ１）。

【0049】

次いで、学習モデル作成装置１０は、ユーザモデル作成部１０３において、変換後のデータをもとにユーザモデルを作成し、異常度算出部１０４において、ユーザごとに、このユーザの特徴と、他のユーザの特徴との相違を示す異常度を算出する。そして、学習モデル作成装置１０は、学習モデル作成部１０５において、算出した異常度と、ユーザモデルとに基づいて学習モデルＭ１を作成する処理（Ｓ２）を行う。このＳ２では、ユーザごとに算出された異常度に基づいて、他のユーザと特徴の相違が大きいユーザのユーザモデルが学習モデルＭ１に寄与する度合いを小さくする。

【0050】

判定装置２０は、ラベルが未知のデータＤ２の入力を受け付ける。そして、判定装置２０は、データ変換部２０１において、受け付けたデータＤ２の特徴ベクトルへの変換等のデータ変換の処理を行う（Ｓ３）。次いで、判定装置２０は、判定部２０２において、データ変換後のデータＤ２を受け取り、Ｓ２で作成された学習モデルＭ１を参照し、データＤ２に対応するラベルを判定する（Ｓ４）。そして、判定装置２０は、判定したラベル（図示例では「スポーツ」）を判定結果Ｒ１として出力する。

【0051】

以上のように、学習モデル作成装置１０は、複数のユーザについて、入力情報と、その入力情報に対応したラベルとを少なくとも組とする学習データＤ１を受け付ける。そして、学習モデル作成装置１０は、ユーザごとの学習データＤ１が示す特徴に基づいて、ユーザごとに、このユーザの特徴と、他のユーザの特徴との相違を示す異常度を算出する。そして、学習モデル作成装置１０は、判定装置２０がデータＤ２に対応したラベルを判定するための学習モデルＭ１を学習データＤ１に基づいて作成する際に、ユーザごとに算出された異常度に基づいて、他のユーザと特徴の相違が大きいユーザの学習データＤ１が学習モデルＭ１に寄与する度合いを小さくする。

【0052】

このため、学習モデル作成装置１０は、誤った学習データＤ１を与えるユーザが存在した場合であっても、そのユーザの学習データＤ１が学習モデルＭ１に寄与する度合いを小さくすることができ、判定精度の高い学習モデルＭ１を作成することができる。例えば、誤った学習データＤ１を与えるユーザが少数の場合には、それらのユーザが与える学習データＤ１やユーザモデルは多数のユーザのものと大きく異なるものとなる。したがって、誤った学習データＤ１を与えるユーザは異常度が高くなる。異常度の高いユーザの学習データＤ１は学習モデルＭ１へ寄与する度合いが小さくなるため、エキスパードデータなどで信頼度を加味することなく、判定精度の高い学習モデルＭ１の作成が可能となる。また、判定装置２０では、学習モデル作成装置１０で作成された学習モデルＭ１を参照してデータＤ２のラベル判定を行うことから、誤った学習データＤ１を与えるユーザの影響を抑えた、精度の高い判定を行うことが可能となる。

【0053】

（第２の実施形態）
次に、第２の実施形態について説明する。上述した第１の実施形態では、各ユーザのユーザモデルを作成した後、ユーザごとの異常度を求め、求めた異常度を重みに変換する。そして、ユーザモデルと重みを用いて学習モデルＭ１を作成する。すなわち、第１の実施形態では、上述した処理を順次行って学習モデルＭ１を作成する順次法を例示した。第２の実施形態では、学習モデル（ユーザごとのユーザモデルおよびそれらを統合した学習モデル）と、ユーザごとの重みの更新を繰り返し、所定の収束条件を満たしたところで学習モデルとして出力する繰り返し法を例示する。

【0054】

図８は、第２の実施形態にかかる判定システム１ａの構成の一例を示すブロック図である。図８に示すように、判定システム１ａの学習モデル作成装置１０ａは、初期化部１１１、学習モデル更新部１１２及びパラメータ更新部１１３を有する学習モデル作成部１１０としているところが判定システム１と異なっている。

【0055】

初期化部１１１は、学習データ格納部１０２から学習データＤ１を受け取ると、各ユーザ（任意のユーザＩＤ＝ｋをユーザｋとする）のユーザモデルｗ_ｋ、学習モデルｗ_０、重みλ_ｋ、正則化パラメータη（実数）を予め定めておいた値で初期化する。次いで、初期化部１１１は、ユーザモデルｗ_ｋ、学習モデルｗ_０および学習データＤ１を学習モデル更新部１１２に出力し、重みλ_ｋ、正則化パラメータηをパラメータ更新部１１３へ出力する。

【0056】

学習モデル更新部１１２は、各ユーザのユーザモデルｗ_ｋと学習モデルｗ_０を更新する。ここで、学習モデル更新部１１２における更新処理の詳細について説明する。先ず、ユーザＩＤ＝ｋのユーザｋが与えたｉ番目の学習データＤ１を（ｘ_ｋｉ，ｙ_ｋｉ）で表す。ここで、ｘ_ｋｉはｎ次元の特徴ベクトル、ｙ_ｋｉはラベルを表し、このラベルは０または１の値をとるものとする。なお、特徴ベクトルｘ_ｋｉは列ベクトルである。

【0057】

また、ユーザｋの与えた学習データＤ１の要素の総数をＩ_ｋとしたとき、Ｉ_ｋ個の特徴ベクトルの転置を縦に並べて作ったＩ_ｋ×ｎ行列を次の式（４）のＸ_ｋで表す。

【0058】

【数4】

【0059】

ここで、ｘ^Ｔ_ｋｉはｘ_ｋｉの転置を表す。また、行列Ａの逆行列はＡ^−１と表記する。

【0060】

学習モデル更新部１１２は、各ユーザのユーザモデルｗ_ｋと学習モデルｗ_０を次の式（５）に従って更新する。なお、式（５）におけるｗ_ｋは更新前のユーザモデル、ｗ^ｎｅｗ_ｋは更新後のユーザモデルを示す。また、ｗ_０は更新前の学習モデル、ｗ^ｎｅｗ_０は更新後の学習モデルを示す。

【0061】

【数5】

【0062】

ここで、βは予め定めておく必要がある正の実数であり、Ｈとｇは次の式（６）で与えられる。

【0063】

【数6】

【0064】

Ｂ_ｋは、（ｉ，ｉ）成分が（１−σ（ｗ^Ｔ_ｋｘ_ｋｉ））σ（ｗ^Ｔ_ｋｘ_ｋｉ）のＩ_ｋ次対角行列である。また、Ｄ_ｋは、ｉ成分がｙ_ｋｉ−σ（ｗ^Ｔ_ｋｘ_ｋｉ）のＩ_ｋ次列ベクトルである。また、Ｉはｎ次単位行列である。ここで、σは次の式（７）で与えられる関数（シグモイド関数）である。

【0065】

【数7】

【0066】

学習モデル更新部１１２における更新は、所定の終了条件（収束条件）が満たされるまで実施される。ここで、終了条件としては、更新の回数が予定の数を超えた場合、更新の前後における学習モデルの変化が所定の値以下である場合などがある。

【0067】

パラメータ更新部１１３は、各ユーザのユーザモデルにおける重みλ_ｋと、正則化パラメータηを次の式（８）に従って更新する。この重みλ_ｋは、他のユーザとの相違を示す指標値である。

【0068】

【数8】

【0069】

ここで、Ｔｒ[Ａ]は行列Ａのトレースを示す。なお、異常度の定め方としては、例えば重みの逆数を異常度とする方法が考えられるが、この方法以外であってもよく、特に限定しない。

【0070】

上述した、学習モデル更新部１１２による学習モデル（ユーザごとのユーザモデルおよびそれらを統合した学習モデル）の更新と、パラメータ更新部１１３によるユーザごとの重みの更新を繰り返すことで得られる学習モデルｗ_０は、式（５）より以下の式（９）となる。

【0071】

【数9】

【0072】

上記の式（９）より、学習モデルｗ_０は、各ユーザモデルｗ_ｋの重み付き平均の定数倍で与えられることがわかる。なお、第１の実施形態における、所定の閾値未満を切り捨てる場合と同様、ある閾値ａを定め、重みが閾値ａを下回っているユーザモデルは上記の式で用いずに学習モデルｗ_０を作成してもよい。

【0073】

図９は、第２の実施形態にかかる学習モデル作成の処理を示すフローチャートである。図９に示すように、学習モデル作成部１１０における処理が開始されると、初期化部１１１は、ユーザモデルｗ_ｋ、学習モデルｗ_０、重みλ_ｋ、正則化パラメータη（実数）を初期化する（Ｓ１１）。次いで、学習モデル更新部１１２は、初期化されたユーザモデルｗ_ｋと学習モデルｗ_０を更新する（Ｓ１２）。

【0074】

次いで、パラメータ更新部１１３は、ユーザモデルにおける重みλ_ｋと、正則化パラメータηを更新する（Ｓ１３）。次いで、学習モデル更新部１１２は、Ｓ１３で更新された重みλ_ｋと、正則化パラメータηをもとに、ユーザモデルｗ_ｋと学習モデルｗ_０を更新する（Ｓ１４）。次いで、学習モデル作成部１１０は、更新の回数が予定の数を超えたか否か、更新の前後における学習モデルの変化が所定の値以下であるか否かなど、所定の収束条件を満たすか否かを判定する（Ｓ１５）。

【0075】

所定の収束条件を満たさない場合（Ｓ１５：ＮＯ）、学習モデル作成部１１０はＳ１３へ処理を戻す。これにより、所定の収束条件を満たさない間は、ユーザモデルにおける重みλ_ｋおよび正則化パラメータηの更新と、ユーザモデルｗ_ｋおよび学習モデルｗ_０の更新とが交互に繰り返し実施されることとなる。

【0076】

所定の収束条件を満たす場合（Ｓ１５：ＹＥＳ）、学習モデル作成部１１０は処理を終了し、収束条件を満たすまでに演算された学習モデルｗ_０を判定装置２０へ出力する。

【0077】

また、上述した実施形態において説明した学習モデル作成装置１０および判定装置２０が実行する処理をコンピュータが実行可能な言語で記述したプログラムを作成することもできる。この場合、コンピュータがプログラムを実行することにより、上述した実施形態にかかる学習モデル作成装置１０および判定装置２０における処理と同様の効果を得ることができる。さらに、かかるプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータに読み込ませて実行することにより上述した実施形態と同様の処理を実現してもよい。以下に、上述したプログラムを実行するコンピュータの一例を説明する。

【0078】

図１０は、実施形態にかかる判定システム１の学習モデル作成装置１０および判定装置２０における処理がコンピュータを用いて具体的に実現されることを示す図である。図１０に例示するように、コンピュータ１０００は、例えば、メモリ１０１０と、ＣＰＵ１０２０と、ハードディスクドライブインタフェース１０３０と、ディスクドライブインタフェース１０４０と、シリアルポートインタフェース１０５０と、ビデオアダプタ１０６０と、ネットワークインタフェース１０７０とを有し、これらの各部はバス１０８０によって接続される。

【0079】

メモリ１０１０は、ＲＯＭ（Read Only Memory）１０１１及びＲＡＭ１０１２を含む。ＲＯＭ１０１１は、例えば、ＢＩＯＳ（Basic Input Output System）等のブートプログラムを記憶する。ハードディスクドライブインタフェース１０３０は、ハードディスクドライブ１０３１に接続される。ディスクドライブインタフェース１０４０は、ディスクドライブ１０４１に接続される。例えば磁気ディスクや光ディスク等の着脱可能な記憶媒体が、ディスクドライブに挿入される。シリアルポートインタフェース１０５０は、例えばマウス１０５１、キーボード１０５２に接続される。ビデオアダプタ１０６０は、例えばディスプレイ１０６１に接続される。

【0080】

ハードディスクドライブ１０３１は、例えば、ＯＳ１０９１、アプリケーションプログラム１０９２、プログラムモジュール１０９３、プログラムデータ１０９４を記憶する。すなわち、上記のプログラムは、コンピュータ１０００によって実行される指令が記述されたプログラムモジュール１０９３として、例えばハードディスクドライブ１０３１に記憶される。例えば、図１に例示した学習モデル作成装置１０の機能構成（学習データ変換部１０１、学習データ格納部１０２、ユーザモデル作成部１０３、異常度算出部１０４、学習モデル作成部１０５）や判定装置２０の機能構成（データ変換部２０１、判定部２０２、判定結果出力部２０４、学習モデル格納部２０３）と同様の情報処理を実行するためのプログラムモジュール１０９３が、ハードディスクドライブ１０３１に記憶される。

【0081】

また、上述したプログラムを実行する際の作業領域などは、ＲＡＭ１０１２に確保される。処理に必要な設定データは、プログラムデータ１０９４として、例えばメモリ１０１０やハードディスクドライブ１０３１に記憶される。そして、ＣＰＵ１０２０が、メモリ１０１０やハードディスクドライブ１０３１に記憶されたプログラムモジュール１０９３やプログラムデータ１０９４を必要に応じてＲＡＭ１０１２に読み出して実行する。

【0082】

なお、プログラムモジュール１０９３やプログラムデータ１０９４は、ハードディスクドライブ１０３１に記憶される場合に限られず、例えば着脱可能な記憶媒体に記憶され、ディスクドライブ等を介してＣＰＵ１０２０によって読み出されてもよい。あるいは、プログラムモジュール１０９３やプログラムデータ１０９４は、ネットワーク（ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）等）を介して接続された他のコンピュータに記憶され、ネットワークインタフェース１０７０を介してＣＰＵ１０２０によって読み出されてもよい。また、学習モデル作成装置１０および判定装置２０を備える判定システム１は、上述した一つのコンピュータで実現されるものであってよいことは言うまでもないことである。

【符号の説明】

【0083】

１、１ａ…判定システム
１０、１０ａ…学習モデル作成装置
２０…判定装置
１０１…学習データ変換部
１０２…学習データ格納部
１０３…ユーザモデル作成部
１０４…異常度算出部
１０５、１１０…学習モデル作成部
１１１…初期化部
１１２…学習モデル更新部
１１３…パラメータ更新部
２０１…データ変換部
２０２…判定部
２０３…学習モデル格納部
２０４…判定結果出力部
Ｄ１、Ｄ１１、Ｄ１２、Ｄ１３…学習データ
Ｄ２…データ
Ｍ１…学習モデル
Ｕ１、Ｕ２…ユーザモデル
Ｒ１…判定結果
１０００…コンピュータ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】