特開 2024-15680 データ評価システム、データ評価方法、及びデータ評価プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024015680

(43)【公開日】2024-02-06

(54)【発明の名称】データ評価システム、データ評価方法、及びデータ評価プログラム

(51)【国際特許分類】

   G06F 40/205 20200101AFI20240130BHJP

   G06Q 10/063 20230101ALI20240130BHJP

【ＦＩ】

G06F40/205

G06Q10/06 300

【審査請求】未請求

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2022117910

(22)【出願日】2022-07-25

(71)【出願人】

【識別番号】000002945

【氏名又は名称】オムロン株式会社

(74)【代理人】

【識別番号】100135817

【弁理士】

【氏名又は名称】華山 浩伸

(74)【代理人】

【識別番号】100167302

【弁理士】

【氏名又は名称】種村 一幸

(74)【代理人】

【識別番号】100181869

【弁理士】

【氏名又は名称】大久保 雄一

(72)【発明者】

【氏名】菊岡 拓

【テーマコード（参考）】

5B091

5L049

【Ｆターム（参考）】

5B091AA15

5B091CA01

5B091CD11

5L049AA06

(57)【要約】

【課題】大量の評価対象データの評価を行う際のユーザーの手間を省力化することが可能なデータ評価システム、データ評価方法、及びデータ評価プログラムを提供する。
【解決手段】データ評価システム１０は、複数の評価対象データから所定数の評価対象データを取得する取得処理部１１１と、前記所定数の評価対象データのそれぞれに対してユーザー評価値を受け付ける受付処理部１１２と、所定のキーワードを抽出する抽出処理部１１３と、前記キーワードに設定される複数の重みのそれぞれに対応するサンプル評価値を算出する第１算出処理部１１５と、前記ユーザー評価値と前記サンプル評価値とに基づいて所定の重みを決定する決定処理部１１６と、前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する第２算出処理部１１５と、を備える。
【選択図】図１

【特許請求の範囲】

【請求項1】

複数の評価対象データから所定数の評価対象データを取得する取得処理部と、
前記取得処理部により取得される前記所定数の評価対象データのそれぞれに対してユーザーにより設定される評価値を受け付ける受付処理部と、
前記取得処理部により取得される前記所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出する抽出処理部と、
前記抽出処理部により抽出される前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データのそれぞれの評価値を算出する第１算出処理部と、
前記ユーザーにより設定される前記所定数の評価対象データの評価値と、前記第１算出処理部により算出される前記所定数の評価対象データのそれぞれにおける前記重みごとの評価値とに基づいて、前記複数の重みのうち所定の重みを決定する決定処理部と、
前記決定処理部により決定される前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する第２算出処理部と、
を備えるデータ評価システム。

【請求項2】

前記抽出処理部により抽出される複数の前記キーワードのそれぞれに重みを対応付ける複数の重みパターンを設定する設定処理部をさらに備え、
前記第１算出処理部は、前記所定数の評価対象データのそれぞれについて、前記重みパターンごとに評価値を算出する、
請求項１に記載のデータ評価システム。

【請求項3】

前記決定処理部は、前記複数の重みパターンのうち、前記第１算出処理部により算出される前記重みパターンごとの評価値が前記ユーザーにより設定される前記所定数の評価対象データの評価値に最も近くなる重みパターンを決定し、
前記第２算出処理部は、前記決定処理部により決定される前記重みパターンに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する、
請求項２に記載のデータ評価システム。

【請求項4】

前記第１算出処理部は、前記所定数の評価対象データのそれぞれについて、前記評価対象データに出現する前記キーワードの出現回数と前記重みとを乗算した結果を当該評価対象データの評価値として算出する、
請求項２に記載のデータ評価システム。

【請求項5】

前記抽出処理部は、前記取得処理部により取得される前記所定数の評価対象データのうち、前記ユーザーにより設定される評価値が閾値以上の一又は複数の前記評価対象データから、前記キーワードを抽出する、
請求項１に記載のデータ評価システム。

【請求項6】

前記重みは、前記評価対象データの評価値に対する前記キーワードの影響度を表すパラメータである、
請求項１～５のいずれかに記載のデータ評価システム。

【請求項7】

前記抽出処理部は、前記取得処理部により取得される前記所定数の評価対象データに含まれる複数の単語のうち少なくとも接続詞及び助詞を除く単語を前記キーワードとして抽出する、
請求項１～５のいずれかに記載のデータ評価システム。

【請求項8】

前記第２算出処理部により算出される前記複数の評価対象データのそれぞれの評価値を、前記ユーザーに提示する出力処理部をさらに備える、
請求項１～５のいずれかに記載のデータ評価システム。

【請求項9】

一又は複数のプロセッサーが、
複数の評価対象データから所定数の評価対象データを取得する取得ステップと、
前記取得ステップにおいて取得される前記所定数の評価対象データのそれぞれに対してユーザーにより設定される評価値を受け付ける受付ステップと、
前記取得ステップにおいて取得される前記所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出する抽出ステップと、
前記抽出ステップにより抽出される前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データのそれぞれの評価値を算出する第１算出ステップと、
前記ユーザーにより設定される前記所定数の評価対象データの評価値と、前記第１算出ステップにおいて算出される前記所定数の評価対象データのそれぞれにおける前記重みごとの評価値とに基づいて、前記複数の重みのうち所定の重みを決定する決定ステップと、
前記決定ステップにより決定される前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する第２算出ステップと、
を実行するデータ評価方法。

【請求項10】

複数の評価対象データから所定数の評価対象データを取得する取得ステップと、
前記取得ステップにおいて取得される前記所定数の評価対象データのそれぞれに対してユーザーにより設定される評価値を受け付ける受付ステップと、
前記取得ステップにおいて取得される前記所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出する抽出ステップと、
前記抽出ステップにより抽出される前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データのそれぞれの評価値を算出する第１算出ステップと、
前記ユーザーにより設定される前記所定数の評価対象データの評価値と、前記第１算出ステップにおいて算出される前記所定数の評価対象データのそれぞれにおける前記重みごとの評価値とに基づいて、前記複数の重みのうち所定の重みを決定する決定ステップと、
前記決定ステップにより決定される前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する第２算出ステップと、
を一又は複数のプロセッサーに実行させるためのデータ評価プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、データ評価システム、データ評価方法、及びデータ評価プログラムに関する。

【背景技術】

【0002】

従来、様々な分野において評価対象データを評価するシステムが知られている（例えば特許文献１参照）。例えば、コールセンターにおいて、ユーザーから問い合わせを受けた場合に、当該問い合わせを所定の観点に基づいて分析して評価するシステムが知られている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００４－１５１７５７号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

従来の技術では、例えば「緊急度の高いデータ（問い合わせ）を抽出する」という観点で緊急度の高い問い合わせを抽出する場合に、ユーザーが当該緊急度に関連するキーワード（例えば、至急、緊急、大至急、急ぎなど）を設定し、これらのキーワードを含む問い合わせ、キーワードの頻出回数の多い問い合わせなどを抽出している。このため、ユーザーは適切な問い合わせを抽出するために適切なキーワードを設定する必要があり、キーワードの設定に手間がかかる。また、ユーザー自身が全ての問い合わせに対して評価を行うことも考えられるが、この場合、問い合わせ数が多くなると評価作業に時間がかかる。

【0005】

本発明の目的は、大量の評価対象データの評価を行う際のユーザーの手間を省力化することが可能なデータ評価システム、データ評価方法、及びデータ評価プログラムを提供することにある。

【課題を解決するための手段】

【0006】

本発明の一の態様に係るデータ評価システムは、取得処理部と受付処理部と抽出処理部と第１算出処理部と決定処理部と第２算出処理部とを備える。前記取得処理部は、複数の評価対象データから所定数の評価対象データを取得する。前記受付処理部は、前記取得処理部により取得される前記所定数の評価対象データのそれぞれに対してユーザーにより設定される評価値を受け付ける。前記抽出処理部は、前記取得処理部により取得される前記所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出する。前記第１算出処理部は、前記抽出処理部により抽出される前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データのそれぞれの評価値を算出する。前記決定処理部は、前記ユーザーにより設定される前記所定数の評価対象データの評価値と、前記第１算出処理部により算出される前記所定数の評価対象データのそれぞれにおける前記重みごとの評価値とに基づいて、前記複数の重みのうち所定の重みを決定する。前記第２算出処理部は、前記決定処理部により決定される前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する。

【0007】

本発明の他の態様に係るデータ評価方法は、一又は複数のプロセッサーが、複数の評価対象データから所定数の評価対象データを取得する取得ステップと、前記取得ステップにおいて取得される前記所定数の評価対象データのそれぞれに対してユーザーにより設定される評価値を受け付ける受付ステップと、前記取得ステップにおいて取得される前記所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出する抽出ステップと、前記抽出ステップにより抽出される前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データのそれぞれの評価値を算出する第１算出ステップと、前記ユーザーにより設定される前記所定数の評価対象データの評価値と、前記第１算出ステップにおいて算出される前記所定数の評価対象データのそれぞれにおける前記重みごとの評価値とに基づいて、前記複数の重みのうち所定の重みを決定する決定ステップと、前記決定ステップにより決定される前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する第２算出ステップと、を実行する。

【0008】

本発明の他の態様に係るデータ評価プログラムは、複数の評価対象データから所定数の評価対象データを取得する取得ステップと、前記取得ステップにおいて取得される前記所定数の評価対象データのそれぞれに対してユーザーにより設定される評価値を受け付ける受付ステップと、前記取得ステップにおいて取得される前記所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出する抽出ステップと、前記抽出ステップにより抽出される前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データのそれぞれの評価値を算出する第１算出ステップと、前記ユーザーにより設定される前記所定数の評価対象データの評価値と、前記第１算出ステップにおいて算出される前記所定数の評価対象データのそれぞれにおける前記重みごとの評価値とに基づいて、前記複数の重みのうち所定の重みを決定する決定ステップと、前記決定ステップにより決定される前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する第２算出ステップと、を一又は複数のプロセッサーに実行させるためのプログラムである。

【発明の効果】

【0009】

本発明によれば、大量の評価対象データの評価を行う際のユーザーの手間を省力化することが可能なデータ評価システム、データ評価方法、及びデータ評価プログラムを提供することができる。

【図面の簡単な説明】

【0010】

【図1】図１は、本発明の実施形態に係るデータ評価システムの構成を示す機能ブロック図である。

【図2】図２は、本発明の実施形態に係るデータ評価システムにおいて利用されるデータ情報の一例を示す図である。

【図3】図３は、本発明の実施形態に係るデータ評価システムにおいて利用されるサンプルデータ情報の一例を示す図である。

【図4】図４は、本発明の実施形態に係るデータ評価システムにおいて利用されるキーワード情報の一例を示す図である。

【図5】図５は、本発明の実施形態に係るデータ評価システムにおいて利用されるサンプル評価結果の一例を示す図である。

【図6】図６は、本発明の実施形態に係るデータ評価システムにおいて利用される評価結果の一例を示す図である。

【図7】図７は、本発明の実施形態に係るデータ評価システムで実行されるデータ評価処理の手順の一例を説明するためのフローチャートである。

【発明を実施するための形態】

【0011】

以下、添付図面を参照しながら、本発明の実施形態について説明する。なお、以下の実施形態は、本発明を具体化した一例であって、本発明の技術的範囲を限定する性格を有さない。

【0012】

［データ評価システム１０］
図１は、本発明の実施形態に係るデータ評価システム１０の構成を示すブロック図である。データ評価システム１０は、管理サーバー１と操作端末２とを含んでいる。管理サーバー１と操作端末２とは、ネットワークＮ１（例えばインターネット、ＬＡＮなど）を介して互いに接続されている。データ評価システム１０には、複数台の操作端末２が含まれてもよい。

【0013】

データ評価システム１０は、操作端末２から送信される各種データの内容を評価するシステムである。例えば、データ評価システム１０は、顧客に提供する製品、サービスに対する質問、修理依頼、苦情、アンケート、評価などの問い合わせ（評価対象データ）を、顧客から受け付け、当該評価対象データの内容を分析、評価するシステムに適用される。

【0014】

データ評価システム１０において、管理サーバー１は、前記顧客の操作端末２から前記問い合わせをテキストデータとして取得してもよいし、評価対象データを管理する管理者が前記顧客から口頭、電話で受け付けた問い合わせを管理者の操作端末２を介してテキストデータとして取得してもよい。

【0015】

管理サーバー１は、前記評価対象データを取得すると、所定の観点（例えば、緊急度）で当該評価対象データの評価値を算出して、評価結果をユーザー（例えば、製品、サービスの事業者、管理者など）に提示する。前記ユーザーは、例えば、前記評価結果を製品、サービスの品質向上に活用することができる。

【0016】

データ評価システム１０は、本発明のデータ評価システムの一例である。なお、本発明のデータ評価システムは、管理サーバー１単体で構成されてもよい。

【0017】

［管理サーバー１］
図１に示すように、管理サーバー１は、制御部１１、記憶部１２、操作表示部１３、通信部１４などを備える。管理サーバー１は、パーソナルコンピュータ、クラウドサーバなどで構成されてもよい。

【0018】

通信部１４は、管理サーバー１を有線又は無線でネットワークＮ１に接続し、ネットワークＮ１を介して操作端末２との間で所定の通信プロトコルに従ったデータ通信を実行するための通信インターフェースである。ネットワークＮ１は、例えばインターネット、ＬＡＮなどで構成される。

【0019】

操作表示部１３は、各種の情報を表示する液晶ディスプレイ又は有機ＥＬディスプレイのような表示部と、操作を受け付けるマウス、キーボード、又はタッチパネルなどの操作部とを備えるユーザーインターフェースである。

【0020】

記憶部１２は、各種の情報を記憶するＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、又はフラッシュメモリーなどの不揮発性の記憶部である。記憶部１２には、管理サーバー１が管理及び評価する複数のデータ（評価対象データ）が記憶される。

【0021】

例えば、顧客は、操作端末２において、問い合わせページ（ＷＥＢページなど）に問い合わせ内容を入力して管理サーバー１にアップロードする。これにより、問い合わせに対応する評価対象データが、管理サーバー１にアップロードされる。なお、評価対象データには、入力者の識別情報（ユーザー名、ユーザーＩＤなど）、送信日時などの情報が含まれる。

【0022】

管理サーバー１は、複数の操作端末２のそれぞれから前記評価対象データを取得する。記憶部１２には各操作端末２からアップロードされた評価対象データが格納される。また、記憶部１２には、前記評価対象データに関するデータ情報Ｄ１が記憶される。図２には、データ情報Ｄ１の一例を示している。データ情報Ｄ１には、操作端末２からアップロードされた評価対象データごとに、「データＩＤ」、「受付日時」、「問い合わせ内容」などの情報が含まれる。前記データＩＤは前記評価対象データの識別情報である。管理サーバー１の制御部１１は、評価対象データを取得するごとに任意の識別情報を当該評価対象データに付与する。前記受付日時は、管理サーバー１が前記評価対象データを受け付けた日時（受信日時）の情報である。

【0023】

前記問い合わせ内容は、前記評価対象データの具体的な内容であり、操作端末２から取得するテキスト文書である。なお、前記問い合わせ内容は、音声データをテキスト化した文書であってもよい。制御部１１は、前記評価対象データを取得するごとに、データ情報Ｄ１に各情報を登録する。

【0024】

また、記憶部１２には、複数の前記評価対象データのうち所定数の前記評価対象データであるサンプルデータに関するサンプルデータ情報Ｄ２が記憶される。図３には、サンプルデータ情報Ｄ２の一例を示している。図３に示すように、サンプルデータ情報Ｄ２には、サンプルデータごとに、「データＩＤ」、「問い合わせ内容」、「ユーザー評価値」などの情報が登録される。例えば、制御部１１は、データ情報Ｄ１に登録された複数の前記評価対象データの中から、所定数（図３では５個）の前記評価対象データをサンプルデータとして抽出し、サンプルデータ情報Ｄ２に登録する。

【0025】

前記データＩＤ及び前記問い合わせ内容は、データ情報Ｄ１と同一である。前記ユーザー評価値は、前記サンプルデータに対してユーザーが設定した評価値の情報である。例えば、管理者は、前記サンプルデータの問い合わせ内容を確認すると、緊急度の観点で前記サンプルデータを評価する。管理者は、操作端末２において、各サンプルデータの評価値を登録する。このように、制御部１１は、複数の前記評価対象データの中から所定数のサンプルデータを抽出し、各サンプルデータに対する管理者の主観による評価値をサンプルデータ情報Ｄ２に登録する。

【0026】

また、記憶部１２には、キーワードに関するキーワード情報Ｄ３（図４参照）、サンプルデータに対する評価結果（サンプル評価値）に関するサンプル評価結果Ｄ４（図５参照）、及び、全ての評価対象データに対する評価結果Ｄ５（図６参照）が記憶される。キーワード情報Ｄ３、サンプル評価結果Ｄ４、及び評価結果Ｄ５の詳細については後述する。

【0027】

なお、他の実施形態として、データ情報Ｄ１、サンプルデータ情報Ｄ２、キーワード情報Ｄ３、サンプル評価結果Ｄ４、及び評価結果Ｄ５の一部又は全部が、管理サーバー１からネットワークＮ１を介してアクセス可能な他のサーバーに記憶されてもよい。この場合、管理サーバー１の制御部１１は、前記他のサーバーから前記情報を取得して、後述のデータ評価処理（図７参照）などの各処理を実行してもよい。

【0028】

さらに、記憶部１２には、制御部１１に後述のデータ評価処理（図７参照）を実行させるためのデータ評価プログラムが記憶されている。例えば、前記データ評価プログラムは、ＣＤ又はＤＶＤなどのコンピュータ読取可能な記録媒体に非一時的に記録され、管理サーバー１が備えるＣＤドライブ又はＤＶＤドライブなどの読取装置（不図示）で読み取られて記憶部１２に記憶される。なお、前記データ評価プログラムは、他のサーバーから配信されて記憶部１２に記憶されてもよい。

【0029】

制御部１１は、ＣＰＵ、ＲＯＭ、及びＲＡＭなどの制御機器を有する。前記ＣＰＵは、各種の演算処理を実行するプロセッサーである。前記ＲＯＭは、前記ＣＰＵに各種の処理を実行させるためのＢＩＯＳ及びＯＳなどの制御プログラムを予め記憶する。前記ＲＡＭは、各種の情報を記憶し、前記ＣＰＵが実行する各種の処理の一時記憶メモリー（作業領域）として使用される。そして、制御部１１は、前記ＲＯＭ又は記憶部１２に予め記憶された各種の制御プログラムを前記ＣＰＵで実行することにより管理サーバー１を制御する。

【0030】

具体的に、制御部１１は、図１に示すように、取得処理部１１１、受付処理部１１２、抽出処理部１１３、設定処理部１１４、算出処理部１１５、決定処理部１１６、出力処理部１１７などの各種の処理部を含む。なお、制御部１１は、前記データ評価プログラムに従った各種の処理を実行することによって前記各種の処理部として機能する。また、制御部１１に含まれる一部又は全部の処理部が電子回路で構成されていてもよい。なお、前記データ評価プログラムは、複数のプロセッサーを前記各種の処理部として機能させるためのプログラムであってもよい。

【0031】

取得処理部１１１は、複数の評価対象データを取得する。例えば、取得処理部１１１は、各操作端末２において入力された問い合わせなどのデータ（評価対象データ）を、各操作端末２から取得する。取得処理部１１１は、取得した複数の評価対象データを記憶部１２に記憶する。また、取得処理部１１１は、前記評価対象データごとに、データＩＤ、受付日時、問い合わせ内容の各情報をデータ情報Ｄ１（図２参照）に登録する。

【0032】

また、取得処理部１１１は、前記複数の評価対象データから所定数の評価対象データを取得する。具体的には、取得処理部１１１は、データ情報Ｄ１に登録された複数の前記評価対象データの中から、所定数の前記評価対象データをサンプルデータとして抽出する。例えば、取得処理部１１１は、５個の前記評価対象データ（サンプルデータ）を取得する。取得処理部１１１は、取得したサンプルデータの情報をサンプルデータ情報Ｄ２（図３参照）に登録する。

【0033】

取得処理部１１１は、前記複数の評価対象データの中から任意（ランダム）に所定数の評価対象データを取得する。例えば、取得処理部１１１は、ユーザーが設定した数の評価対象データをランダムに取得する。ユーザーは、例えば設定画面において評価対象データの取得数を設定及び変更可能であってもよい。

【0034】

受付処理部１１２は、取得処理部１１１により取得される前記所定数の評価対象データのそれぞれに対してユーザー（管理者）により設定される評価値を受け付ける。例えば、管理者は、前記サンプルデータの問い合わせ内容（図３参照）を確認すると、緊急度の観点で前記サンプルデータを評価する。管理者は、操作端末２において、各サンプルデータの評価値を登録する。

【0035】

具体的には、データＩＤ「００００２」について、管理者は、問い合わせ内容に含まれる「うまく動かない」、「エラー」などの文言から直感で緊急度として「２」を登録する。また、データＩＤ「００３４５」について、管理者は、問い合わせ内容に含まれる「出力が仕様通りに出ません」などの文言から直感で緊急度として「１」を登録する。また、データＩＤ「０５０６３」について、管理者は、問い合わせ内容に含まれる「動きません」、「至急」などの文言から直感で緊急度として「４」を登録する。また、データＩＤ「８９９９１」について、管理者は、問い合わせ内容から直感で緊急度として「０」を登録する。また、データＩＤ「９０５０２」について、管理者は、問い合わせ内容に含まれる「エラーが発生」、「大至急」、「回答」などの文言から直感で緊急度として「５」を登録する。

【0036】

受付処理部１１２は、各サンプルデータに対する管理者の主観による評価値（ユーザー評価値）を受け付けて、当該ユーザー評価値をサンプルデータ情報Ｄ２（図３参照）に登録する。

【0037】

抽出処理部１１３は、取得処理部１１１により取得される所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出する。前記キーワードは、評価対象データから接続詞、助詞などの一般的な単語を除外して残った単語である。

【0038】

例えば、図３に示す５個のサンプルデータについて、抽出処理部１１３は、キーワードとして、「エラー」、「動かず」、「至急」、「大至急」を抽出する。抽出処理部１１３は、抽出したキーワードをキーワード情報Ｄ３に登録する。図４には、キーワード情報Ｄ３の一例を示している。図４に示すように、キーワード情報Ｄ３には、所定数のサンプルデータのそれぞれに含まれるキーワードが登録される。ここでは、抽出処理部１１３は、「エラー」、「動かず」、「至急」、「大至急」のキーワードをキーワード情報Ｄ３に登録する。

【0039】

ここで、記憶部１２に、キーワードリストが記憶されていてもよい。この場合、抽出処理部１１３は、前記サンプルデータに含まれる単語のうち前記キーワードリストに登録された単語と一致する単語をキーワードとして抽出してキーワード情報Ｄ３に登録してもよい。

【0040】

また、抽出処理部１１３は、取得処理部１１１により取得される前記所定数の評価対象データのうち、ユーザーにより設定される評価値（ユーザー評価値）が閾値以上の一又は複数の評価対象データからキーワードを抽出してもよい。すなわち、抽出処理部１１３は、ユーザー評価値が高いサンプルデータから前記キーワードを抽出し、ユーザー評価値が低いサンプルデータから前記キーワードを抽出しない構成としてもよい。また、記憶部１２に、キーワードとして採用しない単語の除外ワードリストが登録されていてもよい。この場合、抽出処理部１１３は、前記除外ワードリストを参照して、前記サンプルデータに含まれる除外ワードを除外してキーワードを抽出してもよい。

【0041】

設定処理部１１４は、抽出処理部１１３により抽出される複数のキーワードのそれぞれに重みを対応付ける複数の重みパターンを設定する。具体的には、設定処理部１１４は、各キーワードに、評価対象データの評価値に対する当該キーワードの影響度を表すパラメータである重みを設定する。また、設定処理部１１４は、複数のキーワードのそれぞれについて重みを対応付けた重みパターンを生成するとともに、当該複数のキーワードに対して重みを変化させた複数の重みパターンを生成する。例えば、設定処理部１１４は、４個のキーワード「エラー」、「動かず」、「至急」、「大至急」のそれぞれに、重み「１」、「０」、「０」、「０」のそれぞれを対応付けた「重みパターン１」、重み「２」、「１」、「１」、「１」のそれぞれを対応付けた「重みパターン２」、重み「１」、「２」、「１」、「１」のそれぞれを対応付けた「重みパターン３」、重み「１」、「１」、「２」、「３」のそれぞれを対応付けた「重みパターン４」、重み「１」、「３」、「３」、「３」のそれぞれを対応付けた「重みパターンＮ」などを生成する。

【0042】

設定処理部１１４は、複数の重みパターンをキーワード情報Ｄ３に登録する。図４には、キーワード情報Ｄ３の一例を示している。キーワード情報Ｄ３には、複数のキーワードに対して、複数の重みパターンが登録される。また、設定処理部１１４は、複数のキーワードに対して、各キーワードに対応する重みの組み合わせである複数の重みパターンを設定してキーワード情報Ｄ３に登録する。ここでは、設定処理部１１４は、４段階の重み（「０」～「３」）を各キーワードに設定し、４段階の重みを組み合わせた複数の重みパターンを設定する。設定処理部１１４は、４個のキーワードに対して４段階の重みを組み合わせた全て（Ｎ個）の組み合わせパターンの重みパターンを生成する。

【0043】

算出処理部１１５は、抽出処理部１１３により抽出される前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データ（サンプルデータ）のそれぞれの評価値（サンプル評価値）を算出する。具体的には、算出処理部１１５は、前記所定数のサンプルデータのそれぞれについて、前記重みパターンごとにサンプル評価値を算出する。

【0044】

例えば、算出処理部１１５は、前記所定数のサンプルデータのそれぞれについて、問い合わせ内容に出現する前記キーワードの出現回数と前記重みとを乗算した結果を当該サンプルデータの評価値として算出する。

【0045】

具体的には、算出処理部１１５は、データＩＤ「００００２」のサンプルデータ（図３参照）について、「重みパターン１」（図４参照）を利用して、４個のキーワード「エラー」、「動かず」、「至急」、「大至急」の各出現回数と、「エラー」、「動かず」、「至急」、「大至急」のそれぞれに対応する各重み「１」、「０」、「０」、「０」（図４参照）とをそれぞれ乗算した各算出値を合計した合計値「１」を、データＩＤ「００００２」の「重みパターン１」に対応する評価値として算出する。同様にして、算出処理部１１５は、データＩＤ「００３４５」の「重みパターン１」に対応する評価値「０」、データＩＤ「０５０６３」の「重みパターン１」に対応する評価値「０」、データＩＤ「８９９９１」の「重みパターン１」に対応する評価値「０」、データＩＤ「９０５０２」の「重みパターン１」に対応する評価値「０」を算出する。このように、算出処理部１１５は、「重みパターン１」を用いて各サンプルデータを評価する場合、各サンプルデータの評価値として「１」、「０」、「０」、「０」、「０」を算出する。

【0046】

また、例えば、算出処理部１１５は、データＩＤ「００００２」のサンプルデータ（図３参照）について、「重みパターン２」（図４参照）を利用して、４個のキーワード「エラー」、「動かず」、「至急」、「大至急」の各出現回数と、「エラー」、「動かず」、「至急」、「大至急」のそれぞれに対応する各重み「２」、「１」、「１」、「１」（図４参照）とをそれぞれ乗算した各算出値を合計した合計値「２」を、データＩＤ「００００２」の「重みパターン１」に対応する評価値として算出する。同様にして、算出処理部１１５は、データＩＤ「００３４５」の「重みパターン２」に対応する評価値「０」、データＩＤ「０５０６３」の「重みパターン２」に対応する評価値「１」、データＩＤ「８９９９１」の「重みパターン２」に対応する評価値「０」、データＩＤ「９０５０２」の「重みパターン２」に対応する評価値「３」を算出する。このように、算出処理部１１５は、「重みパターン２」を用いて各サンプルデータを評価する場合、各サンプルデータの評価値として「２」、「０」、「１」、「０」、「３」を算出する。

【0047】

また、例えば、算出処理部１１５は、データＩＤ「００００２」のサンプルデータ（図３参照）について、「重みパターン４」（図４参照）を利用して、４個のキーワード「エラー」、「動かず」、「至急」、「大至急」の各出現回数と、「エラー」、「動かず」、「至急」、「大至急」のそれぞれに対応する重み「１」、「１」、「２」、「３」（図４参照）とをそれぞれ乗算した各算出値を合計した合計値「２」を、データＩＤ「００００２」の「重みパターン４」に対応する評価値として算出する。同様にして、算出処理部１１５は、データＩＤ「００３４５」の「重みパターン４」に対応する評価値「１」、データＩＤ「０５０６３」の「重みパターン４」に対応する評価値「４」、データＩＤ「８９９９１」の「重みパターン４」に対応する評価値「１」、データＩＤ「９０５０２」の「重みパターン４」に対応する評価値「５」を算出する。このように、算出処理部１１５は、「重みパターン４」を用いて各サンプルデータを評価する場合、各サンプルデータの評価値として「２」、「１」、「４」、「１」、「５」を算出する。

【0048】

このようにして、算出処理部１１５は、各サンプルデータについて、キーワード情報Ｄ３（図４参照）に登録された各重みパターンを用いてサンプル評価値を算出する。

【0049】

決定処理部１１６は、複数の重みのうち所定の重み（最適重み）を決定する。具体的には、決定処理部１１６は、ユーザー（管理者）により設定される前記所定数の評価対象データ（サンプルデータ）の評価値（図３のユーザー評価値）と、算出処理部１１５により算出される前記所定数の評価対象データのそれぞれにおける前記重みごとの評価値（図５のサンプル評価値）とに基づいて、前記複数の重みのうち所定の重みを決定する。

【0050】

例えば、決定処理部１１６は、前記複数の重みパターン（図４参照）のうち、算出処理部１１５により算出される前記重みパターンごとのサンプル評価値（図５参照）が前記ユーザー評価値（図３参照）に最も近くなる重みパターンを最適重みパターンとして決定する。図３及び図５に示す例では、「重みパターン４」による５個のサンプルデータに対するサンプル評価値「２」、「１」、「４」、「１」、「５」（図５参照）が、ユーザー評価値「２」、「１」、「４」、「０」、「５」（図３参照）に最も近くなるため、決定処理部１１６は、前記複数の重みパターン（図４参照）のうち、「重みパターン４」を最適重みパターンに決定する。

【0051】

決定処理部１１６が所定の重みを決定すると、算出処理部１１５は、前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する。具体的には、算出処理部１１５は、決定処理部１１６により決定される最適重みパターンに基づいて、取得処理部１１１が取得した前記複数の評価対象データ（図２参照）のそれぞれの評価値を算出する。上述の例では、算出処理部１１５は、「重みパターン４」を用いて、データＩＤ「００００１」～「９０９９９」の全ての評価対象データのそれぞれについて評価値を算出する。各評価対象データの評価値の算出方法は、上述した前記サンプルデータの評価値の算出方法と同一である。

【0052】

算出処理部１１５は、各評価対象データの評価値を評価結果Ｄ５に登録する。図６には、評価結果Ｄ５の一例を示している。評価結果Ｄ５には、評価対象データごとに、「データＩＤ」、「評価値」などの情報が登録される。算出処理部１１５は、本発明の第１算出処理部及び第２算出処理部の一例である。

【0053】

出力処理部１１７は、算出処理部１１５により算出される前記複数の評価対象データのそれぞれの評価値（評価結果）を、ユーザー（管理者）に提示する。例えば、出力処理部１１７は、評価結果Ｄ５の情報を管理者の操作端末２に表示させる。また、例えば、出力処理部１１７は、評価結果Ｄ５を評価値が高い順に並べ、上位の所定数の評価結果を抽出した上位リストを管理者の操作端末２に表示させる。管理者は、前記評価値の情報を利用して、問い合わせに対して対処したり、製品及びサービスの品質向上に役立てたりすることができる。

【0054】

［操作端末２］
図１に示すように、操作端末２は、制御部２１、記憶部２２、操作表示部２３、及び通信部２４などを備える。操作端末２は、例えばパーソナルコンピュータ、スマートフォン、タブレット端末などの情報処理装置である。例えば、顧客は、操作端末２を利用して問い合わせ内容（図２参照）を入力することができる。また例えば、管理者は、操作端末２を利用して顧客から電話により受け付けた問い合わせ内容を入力することができる。また例えば、管理者は、操作端末２を利用して、前記サンプルデータを確認して前記サンプルデータに対する評価値（図３参照）を入力したり、各評価対象データの評価結果（図６参照）を取得したりすることができる。

【0055】

通信部２４は、操作端末２を有線又は無線でネットワークＮ１に接続し、ネットワークＮ１を介して管理サーバー１などの外部機器との間で所定の通信プロトコルに従ったデータ通信を実行するための通信インターフェースである。

【0056】

操作表示部２３は、各種のウェブページなどの情報を表示する液晶ディスプレイ又は有機ＥＬディスプレイのような表示部と、操作を受け付けるマウス、キーボード、又はタッチパネルのような操作部とを備えるユーザーインターフェースである。

【0057】

記憶部２２は、各種の情報を記憶するＨＤＤ、ＳＳＤ又はフラッシュメモリーなどの不揮発性の記憶部である。例えば、記憶部２２には、ブラウザプログラム等の制御プログラムが記憶される。具体的に、前記ブラウザプログラムは、ＨＴＴＰ（Ｈｙｐｅｒｔｅｘｔ Ｔｒａｎｓｆｅｒ Ｐｒｏｔｏｃｏｌ）などの通信プロトコルに従って管理サーバー１などの外部装置との間で通信処理を制御部２１に実行させるための制御プログラムである。また、前記ブラウザプログラムは、管理サーバー１との間で予め定められた通信プロトコルに従って通信処理を実行するための専用アプリケーションであってもよい。

【0058】

制御部２１は、ＣＰＵ、ＲＯＭ、及びＲＡＭなどの制御機器を有する。前記ＣＰＵは、各種の演算処理を実行するプロセッサーである。前記ＲＯＭは、前記ＣＰＵに各種の処理を実行させるためのＢＩＯＳ及びＯＳなどの制御プログラムが予め記憶された不揮発性の記憶部である。前記ＲＡＭは、各種の情報を記憶する揮発性又は不揮発性の記憶部であり、前記ＣＰＵが実行する各種の処理の一時記憶メモリー（作業領域）として使用される。そして、制御部２１は、前記ＲＯＭ又は記憶部２２に予め記憶された各種の制御プログラムを前記ＣＰＵで実行することにより操作端末２を制御する。

【0059】

具体的には、制御部２１は、記憶部２２に記憶されている前記ブラウザプログラムに従って各種の処理を実行することによりブラウザ処理部として機能する。制御部２１は、管理サーバー１からネットワークＮ１を介して提供されるＷＥＢページを操作表示部２３に表示させ、操作表示部２３に対する操作を管理サーバー１に入力するブラウザ処理を実行することが可能である。すなわち、操作端末２は、制御部２１によって前記ブラウザプログラムが実行されることにより、管理サーバー１の操作用端末として機能することが可能である。なお、制御部２１に含まれる一部又は全部の処理部は電子回路で構成されていてもよい。

【0060】

操作端末２では、管理サーバー１で提供されるＷＥＢサイトに対応する所定のＵＲＬへのアクセス要求を行うためのユーザー操作が行われた場合に、制御部２１が、管理サーバー１から前記ＷＥＢサイトのウェブページのデータを取得して、操作表示部２３に前記ＷＥＢサイトのＷＥＢページを表示させる。なお、操作端末２に管理サーバー１に対応する所定のアプリケーション（データ管理アプリケーション）がインストールされている場合には、操作端末２のユーザーが前記データ管理アプリケーションを起動する操作を行うことにより操作表示部２３に前記ＷＥＢサイトのＷＥＢページが表示される。

【0061】

また、制御部２１は、ユーザー（顧客、管理者など）の操作に応じて、問い合わせ内容のデータ（評価対象データ）を管理サーバー１にアップロードする。また、制御部２１は、管理サーバー１によるデータ評価処理の評価結果を表示させる。また、制御部２１は、評価結果を操作端末２にダウンロードする。

【0062】

［データ評価処理］
以下、図７を参照しつつ、データ評価システム１０において実行されるデータ評価処理の手順の一例について説明する。

【0063】

なお、本発明は、前記データ評価処理に含まれる一又は複数のステップを実行するデータ評価方法の発明として捉えることができる。また、ここで説明する前記データ評価処理に含まれる一又は複数のステップが適宜省略されてもよい。また、前記データ評価処理における各ステップは、同様の作用効果を生じる範囲で実行順序が異なってもよい。さらに、ここでは管理サーバー１の制御部１１が前記データ評価処理における各ステップを実行する場合を例に挙げて説明するが、他の実施形態では、一又は複数のプロセッサーが前記データ評価処理における各ステップを分散して実行してもよい。

【0064】

先ず、ステップＳ１において、制御部１１は、複数の評価対象データを取得する。例えば、制御部１１は、各操作端末２において入力された問い合わせなどのデータ（評価対象データ）を、各操作端末２から取得する。制御部１１は、取得した複数の評価対象データを記憶部１２に記憶し、各評価対象データの情報をデータ情報Ｄ１（図２参照）に登録する。

【0065】

次に、ステップＳ２において、制御部１１は、ユーザー（管理者）から評価値の算出要求を取得したか否かを判定する。例えば、管理者は、評価対象データに対する評価結果の取得を希望する場合に、操作端末２において前記評価値の算出要求を入力する。制御部１１は、操作端末２から前記算出要求を取得すると（Ｓ２：Ｙｅｓ）、処理をステップＳ３に移行させる。一方、制御部１１は、操作端末２から前記算出要求を取得しない間、評価対象データの取得処理を継続する（Ｓ２：Ｎｏ）。

【0066】

ステップＳ３において、制御部１１は、複数の評価対象データから所定数の評価対象データを取得する。具体的には、制御部１１は、データ情報Ｄ１に登録された複数の評価対象データの中から、所定数（例えば５個）の評価対象データをサンプルデータとして取得する。制御部１１は、取得したサンプルデータをサンプルデータ情報Ｄ２（図３参照）に登録する。

【0067】

次に、ステップＳ４において、制御部１１は、ユーザーから前記サンプルデータに対する評価値（ユーザー評価値）を受け付けたか否かを判定する。例えば、管理者は、前記サンプルデータの問い合わせ内容（図３参照）を確認すると、緊急度の観点で前記サンプルデータを評価し、０～５の６段階の評価値を登録する。管理者は、問い合わせ内容に緊急性がないと判断したサンプルデータに対して「０」を登録し、緊急性が高くなるほど高い評価値を登録する。制御部１１は、管理者の操作端末２から各サンプルデータの評価値（ユーザー評価値）を取得すると、サンプルデータ情報Ｄ２（図３参照）に登録する。制御部１１は、ユーザーから前記サンプルデータに対する評価値を受け付けると（Ｓ４：Ｙｅｓ）、処理をステップＳ５に移行させる。制御部１１は、ユーザーから前記サンプルデータに対する評価値を受け付けるまで待機する（Ｓ４：Ｎｏ）。

【0068】

ステップＳ５において、制御部１１は、所定数のサンプルデータのそれぞれに含まれる所定のキーワードを抽出する。図３に示す例では、制御部１１は、各サンプルデータから一般的な単語（少なくとも接続詞、助詞など）を除外した残りの単語、例えば「エラー」、「動かず」、「至急」、「大至急」をキーワードとして抽出する。制御部１１は、抽出した各キーワードをキーワード情報Ｄ３（図４参照）に登録する。

【0069】

次に、ステップＳ６において、制御部１１は、評価対象データの評価値に対するキーワードの影響度を表す重みを、複数のキーワードに対応して組み合わせた重みパターンを設定する。具体的には、制御部１１は、複数のキーワードのそれぞれについて重みを変化させた複数の重みパターンを生成する。制御部１１は、複数のキーワードのそれぞれについて重みを変化させた重みパターンの組み合わせがＮ通りある場合に、Ｎ個の重みパターン（重みパターン１～重みパターンＮ）を生成する。制御部１１は、生成した複数の重みパターンをキーワード情報Ｄ３（図４参照）に登録する。

【0070】

次に、ステップＳ７において、制御部１１は、前記所定数のサンプルデータのそれぞれについて、前記重みパターンごとに評価値（サンプル評価値）を算出する。具体的には、制御部１１は、前記所定数のサンプルデータのそれぞれについて、前記重みパターンを用いて、問い合わせ内容に出現する前記キーワードの出現回数と前記キーワードに対応する前記重みとを乗算して算出値を求め、各キーワードの算出値を合計した合計値を、当該重みパターンに対応する当該サンプルデータの評価値として算出する。制御部１１は、各サンプルデータについて、重みパターンごとのサンプル評価値を算出する。

【0071】

例えば図５に示すように、制御部１１は、５個のサンプルデータについて、重みパターン１～重みパターンＮのそれぞれを用いてサンプル評価値を算出する。

【0072】

次に、ステップＳ８において、制御部１１は、前記複数の重みパターンの中から最適重みパターンを決定する。具体的には、制御部１１は、ユーザー（管理者）により設定されるサンプルデータの評価値（図３のユーザー評価値）と、ステップＳ７において算出したサンプルデータの評価値（図５のサンプル評価値）とに基づいて、最適重みパターンを決定する。例えば、制御部１１は、前記複数の重みパターン（図４参照）のうち、前記サンプル評価値（図５参照）が前記ユーザー評価値（図３参照）に最も近くなる重みパターンを最適重みパターンとして決定する。

【0073】

また、制御部１１は、サンプルデータごとの前記サンプル評価値の合計が最大となる重みパターンを最適重みパターンに決定してもよい。例えば図５に示す例において、「重みパターン４」に対応するサンプルデータごとの前記サンプル評価値（「２」、「１」、「４」、「１」、「５」）の合計（「１３」）が最大となるため、制御部１１は、「重みパターン４」を最適重みパターンに決定する。

【0074】

次に、ステップＳ９において、制御部１１は、前記最適重みパターンに基づいて、ステップＳ１において取得した複数の評価対象データ（図２参照）のそれぞれについて評価値を算出する。上述の例では、制御部１１は、「重みパターン４」を用いて、データＩＤ「００００１」～「９０９９９」の評価対象データのそれぞれについて評価値を算出する。例えば、制御部１１は、データＩＤ「００００１」の評価対象データについて、「重みパターン４」を用いて、問い合わせ内容に出現する前記キーワードの出現回数と前記キーワードに対応する前記重みとをそれぞれ乗算して算出値を求め、各キーワードの算出値を合計した合計値を当該評価対象データの評価値として算出する。制御部１１は、全ての評価対象データについて上記方法により評価値を算出する。制御部１１は、各評価対象データの評価値を評価結果Ｄ５（図６参照）に登録する。

【0075】

次に、ステップＳ１０において、制御部１１は、評価結果を出力する。例えば、制御部１１は、評価結果Ｄ５の情報を管理者の操作端末２に表示させる。また、例えば、制御部１１は、評価結果Ｄ５を評価値が高い順に並べ、上位の所定数の評価結果を抽出した上位リストを管理者の操作端末２に表示させる。

【0076】

以上のようにして、制御部１１は、前記データ評価処理を実行する。制御部１１は、評価対象データを取得して評価値算出要求を受け付けるごとに、前記データ評価処理を実行する。

【0077】

以上説明したように、本実施形態に係るデータ評価システム１０は、複数の評価対象データから所定数の評価対象データを取得し、前記所定数の評価対象データのそれぞれに対してユーザーにより設定される評価値（ユーザー評価値）を受け付ける。また、データ評価システム１０は、前記所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出し、抽出した前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データのそれぞれの評価値（サンプル評価値）を算出する。また、データ評価システム１０は、前記所定数の評価対象データのユーザー評価値と、前記所定数の評価対象データのそれぞれにおける前記重みごとのサンプル評価値とに基づいて、前記複数の重みのうち所定の重みを決定し、決定した前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する。

【0078】

また、データ評価システム１０は、複数の前記キーワードのそれぞれに重みを対応付ける複数の重みパターンを設定し、前記所定数の評価対象データのそれぞれについて、前記重みパターンごとに評価値を算出する。例えば、データ評価システム１０は、前記複数の重みパターンのうち、前記重みパターンごとのサンプル評価値が前記所定数の評価対象データのユーザー評価値に最も近くなる最適重みパターンを決定し、決定した最適重みパターンに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する。

【0079】

上記構成によれば、評価対象の複数のデータの中から、一部のデータ（サンプルデータ）を抜粋してユーザーが任意の観点で評価した結果（ユーザー評価値）を用いて、他の全てのデータに対しても同様の観点で評価を行うことができる。これにより、ユーザーは全てのデータについて評価を行う必要がなく、また一部のデータをユーザーが評価することにより他の全てのデータについてユーザーの観点を反映させて自動的に評価することができる。よって、大量の評価対象データの評価を行う際のユーザーの手間を省力化することができる。すなわち、人による評価作業の負担を軽減することができる。

【0080】

また、データ評価システム１０は、前記所定数の評価対象データのそれぞれについて、前記評価対象データに出現する前記キーワードの出現回数と前記重みとを乗算した結果を当該評価対象データの評価値として算出する。これにより、キーワードの重みを評価結果に反映させることができる。

【0081】

また、データ評価システム１０は、前記所定数の評価対象データのうち、前記ユーザー評価値が閾値以上の一又は複数の前記評価対象データから前記キーワードを抽出する。これにより、評価対象データの評価値に対する影響度の小さい文言をキーワードから除外することができるため、評価値の信頼性を向上させることができる。

【0082】

また、データ評価システム１０は、前記所定数の評価対象データから、緊急度の観点に対応するキーワードを抽出してもよい。これにより、評価対象データを緊急度の観点で評価することができる。本発明の観点は、緊急度に限定されない。例えば、前記観点は、満足度、好感度などであってもよい。例えば、データ評価システム１０は、宿泊施設、飲食店、小売店などの施設において、利用者のアンケート結果、口コミ、投稿などの評価対象データについて、満足度、好感度の観点で評価値を算出してもよい。

【0083】

また、データ評価システム１０は、前記複数の評価対象データのそれぞれの評価値を、ユーザーに提示する。これにより、ユーザーは、評価結果に応じて対処することができる。

【0084】

ここで、上述の実施形態では、制御部１１は、キーワード情報Ｄ３（図４参照）に登録された全ての重みパターンを利用して、サンプルデータの評価値を算出している。本発明はこれに限定されず、他の実施形態として、制御部１１は、所定数の重みパターンを利用して、サンプルデータの評価値を算出してもよい。例えば、制御部１１は、全組み合わせパターンの重みパターンの中から、各キーワードに対してユーザー評価値（図３参照）に応じた重み閾値を設定し、重み閾値以上の重みパターンを設定する。例えば、ユーザーがデータＩＤ「００００２」に対して評価値「２」を設定した場合に、制御部１１は、データＩＤ「００００２」の問い合わせ内容に含まれるキーワード「エラー」に対して重み閾値「１」を設定する。この場合、制御部１１は、「エラー」に対する重みを「１」以上に設定する。つまり、サンプルデータに対してユーザーが評価値を例えば「２」に設定した場合には、当該サンプルデータはユーザーにとって緊急度が高いと言える。この場合、前記サンプルデータに含まれるキーワード（「エラー」）の重みは、少なくとも０よりも大きいことが望ましい。そこで、制御部１１は、各重みパターンにおける、キーワード「エラー」の重みを例えば「１」以上に設定する。これにより、キーワード「エラー」の重みが「０」の重みパターンが生成されなくなる。

【0085】

また例えば、ユーザーがデータＩＤ「０５０６３」に対して評価値「４」を設定した場合に、制御部１１は、データＩＤ「０５０６３」の問い合わせ内容に含まれるキーワード「至急」に対して重み閾値「２」を設定する。この場合、制御部１１は、「至急」に対する重みを「２」以上に設定する。つまり、サンプルデータに対してユーザーが評価値を例えば「４」に設定した場合には、当該サンプルデータはユーザーにとって緊急度が非常に高いと言える。この場合、前記サンプルデータに含まれるキーワード（「至急」）の重みは、少なくとも１よりも大きいことが望ましい。そこで、制御部１１は、各重みパターンにおける、キーワード「至急」の重みを例えば「２」以上に設定する。これにより、「至急」の重みが「０」の重みパターンと「１」の重みパターンとが生成されなくなる。

【0086】

このようにして、制御部１１は、サンプルデータに対するユーザーの評価値に基づいて各キーワードに対して設定可能な重みの範囲を狭くすることにより、前記重みパターンの数を抑制する。これにより、データ評価システム１０における評価値の算出負荷を軽減することができる。

【0087】

また、制御部１１は、ユーザー評価値（図３参照）に応じたキーワードの緊急度の大小関係に基づいて前記重みパターンの設定数を抑制してもよい。例えば、制御部１１は、ユーザー評価値（図３参照）に基づいて、各サンプルデータのキーワードの緊急度を判定する。具体的には、ユーザーがデータＩＤ「９０５０２」のサンプルデータに対して評価値「５」（最大値）を設定した場合に、制御部１１は、当該サンプルデータに含まれるキーワード「大至急」の緊急度を１位に設定する。また、ユーザーがデータＩＤ「０５０６３」のサンプルデータに対して評価値「４」（２番目に大きい値）を設定した場合に、制御部１１は、当該サンプルデータに含まれるキーワード「至急」の緊急度を２位に設定する。また、ユーザーがデータＩＤ「００００２」のサンプルデータに対して評価値「２」（３番目に大きい値）を設定した場合に、制御部１１は、当該サンプルデータに含まれるキーワード「エラー」の緊急度を３位に設定する。このように、制御部１１は、ユーザーの評価値が高いサンプルデータに含まれるキーワードの緊急度を高く設定し、ユーザーの評価値が低いサンプルデータに含まれるキーワードの緊急度を低く設定する。

【0088】

これにより、例えば「大至急」、「至急」及び「エラー」の緊急度は、「エラー」、「至急」、「大至急」の順に高くなる。この場合、制御部１１は、「エラーに対応する重み」＜「至急に対応する重み」＜「大至急に対応する重み」の関係式を満たす重みパターンのみを生成し、当該関係式を満たさない重みパターンを除外する。これにより、前記重みパターンの数が抑制されるため、データ評価システム１０における評価値の算出負荷を軽減することができる。

【0089】

また、本発明の他の実施形態として、制御部１１は、所定の観点に対応する１つのキーワードを抽出してもよい。この場合、制御部１１は、前記キーワードに設定される複数の重みのそれぞれに対応する、前記サンプルデータのそれぞれの評価値を算出し、前記ユーザー評価値と前記サンプル評価値とに基づいて、複数の重みのうち所定の重み（最適重み）を決定し、最適重みに基づいて前記複数の評価対象データのそれぞれの評価値を算出する。

【0090】

［発明の付記］
以下、上述の実施形態から抽出される発明の概要について付記する。なお、以下の付記で説明する各構成及び各処理機能は取捨選択して任意に組み合わせることが可能である。

【0091】

＜付記１＞
複数の評価対象データから所定数の評価対象データを取得する取得処理部と、
前記取得処理部により取得される前記所定数の評価対象データのそれぞれに対してユーザーにより設定される評価値を受け付ける受付処理部と、
前記取得処理部により取得される前記所定数の評価対象データのそれぞれに含まれる所定のキーワードを抽出する抽出処理部と、
前記抽出処理部により抽出される前記キーワードに設定される複数の重みのそれぞれに対応する、前記所定数の評価対象データのそれぞれの評価値を算出する第１算出処理部と、
前記ユーザーにより設定される前記所定数の評価対象データの評価値と、前記第１算出処理部により算出される前記所定数の評価対象データのそれぞれにおける前記重みごとの評価値とに基づいて、前記複数の重みのうち所定の重みを決定する決定処理部と、
前記決定処理部により決定される前記所定の重みに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する第２算出処理部と、
を備えるデータ評価システム。

【0092】

＜付記２＞
前記抽出処理部により抽出される複数の前記キーワードのそれぞれに重みを対応付ける複数の重みパターンを設定する設定処理部をさらに備え、
前記第１算出処理部は、前記所定数の評価対象データのそれぞれについて、前記重みパターンごとに評価値を算出する、
付記１に記載のデータ評価システム。

【0093】

＜付記３＞
前記決定処理部は、前記複数の重みパターンのうち、前記第１算出処理部により算出される前記重みパターンごとの評価値が前記ユーザーにより設定される前記所定数の評価対象データの評価値に最も近くなる重みパターンを決定し、
前記第２算出処理部は、前記決定処理部により決定される前記重みパターンに基づいて、前記複数の評価対象データのそれぞれの評価値を算出する、
付記２に記載のデータ評価システム。

【0094】

＜付記４＞
前記第１算出処理部は、前記所定数の評価対象データのそれぞれについて、前記評価対象データに出現する前記キーワードの出現回数と前記重みとを乗算した結果を当該評価対象データの評価値として算出する、
付記１～３のいずれかに記載のデータ評価システム。

【0095】

＜付記５＞
前記抽出処理部は、前記取得処理部により取得される前記所定数の評価対象データのうち、前記ユーザーにより設定される評価値が閾値以上の一又は複数の前記評価対象データから、前記キーワードを抽出する、
付記１～４のいずれかに記載のデータ評価システム。

【0096】

＜付記６＞
前記重みは、前記評価対象データの評価値に対する前記キーワードの影響度を表すパラメータである、
付記１～５のいずれかに記載のデータ評価システム。

【0097】

＜付記７＞
前記抽出処理部は、前記取得処理部により取得される前記所定数の評価対象データに含まれる複数の単語のうち少なくとも接続詞及び助詞を除く単語を前記キーワードとして抽出する、
付記１～６のいずれかに記載のデータ評価システム。

【0098】

＜付記８＞
前記第２算出処理部により算出される前記複数の評価対象データのそれぞれの評価値を、前記ユーザーに提示する出力処理部をさらに備える、
付記１～７のいずれかに記載のデータ評価システム。

【符号の説明】

【0099】

１ ：管理サーバー
２ ：操作端末
１０ ：データ評価システム
１１ ：制御部
１２ ：記憶部
１３ ：操作表示部
１４ ：通信部
１１１ ：取得処理部
１１２ ：受付処理部
１１３ ：抽出処理部
１１４ ：設定処理部
１１５ ：算出処理部
１１６ ：決定処理部
１１７ ：出力処理部
Ｄ１ ：データ情報
Ｄ２ ：サンプルデータ情報
Ｄ３ ：キーワード情報
Ｄ４ ：サンプル評価結果
Ｄ５ ：評価結果

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】