特許 7702830 施策評価システム、施策評価方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-06-26

(45)【発行日】2025-07-04

(54)【発明の名称】施策評価システム、施策評価方法及びプログラム

(51)【国際特許分類】

   G06Q 10/00 20230101AFI20250627BHJP

【ＦＩ】

G06Q10/00

【請求項の数】 6

(21)【出願番号】P 2021129131

(22)【出願日】2021-08-05

(65)【公開番号】P2023023529

(43)【公開日】2023-02-16

【審査請求日】2024-03-07

(73)【特許権者】

【識別番号】000005108

【氏名又は名称】株式会社日立製作所

(74)【代理人】

【識別番号】110000279

【氏名又は名称】弁理士法人ウィルフォート国際特許事務所

(72)【発明者】

【氏名】高橋 正和

(72)【発明者】

【氏名】恵木 正史

(72)【発明者】

【氏名】リョウ ウシン

【審査官】板垣 有紀

(56)【参考文献】

【文献】特表２０１１－５２６７０５（ＪＰ，Ａ）

【文献】国際公開第２０１９／２０８３１９（ＷＯ，Ａ１）

【文献】特開２００３－２８１３４２（ＪＰ，Ａ）

【文献】特開２０１３－１３７７５９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００ － ９９／００

(57)【特許請求の範囲】

【請求項1】

所定の施策条件を備えた施策対象への施策に関する試験を実行した実行結果に基づいて、前記試験前後の前記施策条件の変化である条件変化を判定する追跡部と、
前記実行結果に基づいて、前記施策の効果を評価した評価値を算出する検証部と、
前記評価値に対する前記条件変化の寄与の度合いである変化寄与度を算出する分配部と、を有し、
前記施策条件は、前記施策対象の属性であり、
前記実行結果は、前記施策対象ごとの前記効果を表す値を含み、
前記評価値は、前記施策対象ごとの前記効果を表す値から所定の算出式に基づいて算出される値の平均値であり、
前記試験は、複数の前記施策対象を含む集合を分割した２つの群の一方に対してのみ前記施策を実施することであり、
前記検証部は、前記２つの群の一方に対応する前記施策の効果を評価した前記評価値である施策評価値と、前記２つの群の他方に対応する前記施策の効果を評価した前記評価値である環境評価値とを算出し、
前記分配部は、前記施策評価値に対する前記変化寄与度である施策変化寄与度と、前記環境評価値に対する前記変化寄与度である環境変化寄与度とを算出し、
前記分配部は、前記条件変化ごとに、前記２つの群の他方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値から、前記環境評価値を差し引いた値を前記環境変化寄与度として算出し、また、前記条件変化ごとに、前記２つの群の一方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値から、前記２つの群の他方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値と前記施策評価値を差し引いた値とを前記施策変化寄与度として算出する、施策評価システム。

【請求項2】

前記追跡部は、前記試験後の前記施策条件が予め規定された前記施策条件とは異なる場合、当該施策条件を新たに規定する、請求項１に記載の施策評価システム。

【請求項3】

新たな前記施策である新規施策の結果を、前記評価値及び前記変化寄与度に基づいて予測した施策効果予測情報を出力する施策支援部をさらに有し、
前記施策支援部は、前記試験に係る施策である実施済み施策のうち、前記新規施策と施策内容及び前記施策条件の少なくとも一方が一致する類似施策の前記評価値及び前記変化寄与度の統計値を前記施策効果予測情報として予測する、請求項１に記載の施策評価システム。

【請求項4】

前記施策支援部は、前記統計値をグラフ化して表示する、請求項３に記載の施策評価システム。

【請求項5】

施策評価システムによる施策評価方法であって、
所定の施策条件を備えた施策対象への施策に関する試験を実行した実行結果に基づいて、前記試験前後の前記施策条件の変化である条件変化を判定し、
前記実行結果に基づいて、前記施策の効果を評価した評価値を算出し、
前記評価値に対する前記条件変化の寄与の度合いである変化寄与度を算出し、
前記施策条件は、前記施策対象の属性であり、
前記実行結果は、前記施策対象ごとの前記効果を表す値を含み、
前記評価値は、前記施策対象ごとの前記効果を表す値から所定の算出式に基づいて算出される値の平均値であり、
前記試験は、複数の前記施策対象を含む集合を分割した２つの群の一方に対してのみ前記施策を実施することであり、
前記評価値の算出では、前記２つの群の一方に対応する前記施策の効果を評価した前記評価値である施策評価値と、前記２つの群の他方に対応する前記施策の効果を評価した前記評価値である環境評価値とを算出し、
前記変化寄与度の算出では、前記施策評価値に対する前記変化寄与度である施策変化寄与度と、前記環境評価値に対する前記変化寄与度である環境変化寄与度とを算出し、
前記施策変化寄与度の算出では、前記条件変化ごとに、前記２つの群の他方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値から、前記環境評価値を差し引いた値を前記環境変化寄与度として算出し、
前記環境変化寄与度の算出では、前記条件変化ごとに、前記２つの群の一方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値から、前記２つの群の他方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値と前記施策評価値を差し引いた値とを前記施策変化寄与度として算出する、施策評価方法。

【請求項6】

コンピュータに
所定の施策条件を備えた施策対象への施策に関する試験を実行した実行結果に基づいて、前記試験前後の前記施策条件の変化である条件変化を判定する追跡部と、
前記実行結果に基づいて、前記施策の効果を評価した評価値を算出する検証部と、
前記評価値に対する前記条件変化の寄与の度合いである変化寄与度を算出する分配部と、を実現させ、
前記施策条件は、前記施策対象の属性であり、
前記実行結果は、前記施策対象ごとの前記効果を表す値を含み、
前記評価値は、前記施策対象ごとの前記効果を表す値から所定の算出式に基づいて算出される値の平均値であり、
前記試験は、複数の前記施策対象を含む集合を分割した２つの群の一方に対してのみ前記施策を実施することであり、
前記検証部は、前記２つの群の一方に対応する前記施策の効果を評価した前記評価値である施策評価値と、前記２つの群の他方に対応する前記施策の効果を評価した前記評価値である環境評価値とを算出し、
前記分配部は、前記施策評価値に対する前記変化寄与度である施策変化寄与度と、前記環境評価値に対する前記変化寄与度である環境変化寄与度とを算出し、
前記分配部は、前記条件変化ごとに、前記２つの群の他方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値から、前記環境評価値を差し引いた値を前記環境変化寄与度として算出し、また、前記条件変化ごとに、前記２つの群の一方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値から、前記２つの群の他方に対応する当該条件変化が生じた前記施策の効果を評価した前記評価値と前記施策評価値を差し引いた値とを前記施策変化寄与度として算出する、プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、施策評価システム、施策評価方法及びプログラムに関する。

【背景技術】

【0002】

企業などでは、業務の改善を図るために、ＫＰＩ（Key Performance Indicator：重要業績評価指標）のような評価指標に作用する施策が実施されている。また、近年では、施策を実施するだけでなく、実施した施策の効果を評価し、その評価結果を、新しい施策の立案に役立てることが求められている。

【0003】

特許文献１及び２には、施策の効果を評価するための試験としてＡＢテストを行う技術が開示されている。ＡＢテストは、複数の施策対象を２つの群に分割し、各群に対して異なる施策を実施するか、又は、一方の群にのみ施策を実施し、各群における実施結果を比較することで、施策の効果を評価する試験である。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１９－０７９１０４号公報

【文献】特開２０２０－１０２２０６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

ＡＢテストのような試験の実行結果を新しい施策の立案に役立てるためには、施策対象が備える施策条件ごとに試験を実行することが有用である。しかしながら、現実には、費用などの制約により、実施できる施策には制限があり、十分な数の施策条件について試験を実行することができない場合がある。この場合、施策の効果を精度良く評価することが難しく、試験の実行結果を、新たな施策の立案に役立てることが困難である。

【0006】

特許文献１及び２に記載の技術では、十分な数の施策条件について試験を実行することができないことについては考慮されていない。

【0007】

本発明の目的は、限られた施策条件に対する試験の実行結果に基づいてより効率の良い新たな施策の立案が可能な施策評価システム、施策評価方法及びプログラムを提供することである。

【課題を解決するための手段】

【0008】

本開示の一態様に従う施策評価システムは、所定の施策条件を備えた施策対象への施策に関する試験を実行した実行結果に基づいて、前記試験前後の前記施策条件の変化である条件変化を判定する追跡部と、前記実行結果に基づいて、前記施策の効果を評価した評価値を算出する検証部と、前記条件変化の前記評価値に対する寄与の度合いである変化寄与度を算出する分配部と、を有する。

【発明の効果】

【0009】

本発明によれば、施策の効果を評価した評価値に対する、限られた施策条件に対する試験の実行結果に基づいてより効率の良い新たな施策の立案が可能となる。

【図面の簡単な説明】

【0010】

【図1】本開示の一実施形態の立案支援システムの機能的な構成を示すブロック図である。

【図2】実行結果情報の一例を示す図である。

【図3】条件情報の一例を示す図である。

【図4】条件変化結果情報の一例を示す図である。

【図5】施策実施結果情報の一例を示す図である。

【図6】報酬分配結果情報の一例を示す図である。

【図7】施策効果予測情報の一例を示す図である。

【図8】立案支援システムの全体処理を説明するためのシーケンスチャートである。

【図9】立案支援システムの全体処理を説明するためのフローチャートである。

【図10】条件変化追跡処理の一例を説明するためのフローチャートである。

【図11】検証結果処理の一例を説明するためのフローチャートである。

【図12】報酬分配果処理の一例を説明するためのフローチャートである。

【図13】新規施策立案支援処理の一例を説明するためのフローチャートである。

【図14】環境寄与予測支援処理の一例を説明するためのフローチャートである。

【図15】条件変化環境寄与予測支援処理の一例を説明するためのフローチャートである。

【図16】新規施策立案支援画面の一例を示す図である。

【図17】予測支援画面の一例を示す図である。

【図18】予測支援画面の他の例を示す図である。

【発明を実施するための形態】

【0011】

以下、本開示の実施形態について図面を参照して説明する。

【0012】

図１は、本開示の一実施形態の立案支援システムの機能的な構成を示すブロック図である。図１に示す立案支援システム１０は、例えば、プロセッサ（コンピュータ）及びメモリ（共に図示せず）を備えたコンピュータシステムにより構成される。この場合、以下で説明する立案支援システム１０の各構成要素及び各機能は、例えば、プロセッサがコンピュータプログラムを読み取り、その読み取ったコンピュータプログラムを実行することで実現される。コンピュータプログラムは、コンピュータにて読み取り可能な記録媒体２０に記録可能である。記録媒体２０は、例えば、半導体メモリ、磁気ディスク、光ディスク、磁気テープ及び光磁気ディスクなどである。

【0013】

立案支援システム１０は、施策評価システムとも呼ばれ、評価対象の施策である評価対象施策に関する試験を実行した実行結果に基づいて評価対象施策の効果を評価し、その評価結果に基づいて新たな施策の立案を支援するシステムである。本実施形態では、評価対象施策として、施策対象である顧客に対して、所定の対象商品（例えば、おにぎり）に関するクーポン（例えば、対象商品の値段を割り引くクーポン又は、対象商品を無料とするクーポンなど）を配布する「クーポンの配布」を例にとって説明するが、評価対象施策は「クーポンの配布」に限定されない。また、試験は、複数の施策対象を分割した２つの群の一方に対して評価対象施策を実施し、他方に参考用施策を実施するＡＢテストである。参考用施策は、施策を行わない無施策でもよく、本実施形態では、参考用施策は無施策であるとする。

【0014】

立案支援システム１０は、入出力部１と、通信部２と、データベース３と、制御部４とを有する。

【0015】

入出力部１は、立案支援システム１０を利用するユーザから種々の情報を受け付ける機能と、ユーザに対して種々の情報を出力する機能とを有する。ユーザは、ＡＢテストを実行した施策実行者、及び、新たな施策を立案する施策立案者などである。施策実行者と施策立案者は同一でもよい。

【0016】

通信部２は、外部システムと通信する。図１の例では、通信部２は、ネットワーク４０を介して、業務に関する種々の処理を行う業務システム３０と通信する。

【0017】

データベース３は、制御部４にて使用及び生成される種々の情報を格納する。図１の例では、データベース３は、実行結果情報３１と、条件情報３２と、条件変化結果情報３３と、施策実施結果情報３４と、報酬分配結果情報３５と、施策効果予測情報３６とを格納する。以下、各情報は、テーブル構造を有するものとして説明するが、テーブル構造を有していなくてもよい。

【0018】

実行結果情報３１は、ＡＢテストを実行した実行結果を示す。条件情報３２は、施策対象が備える属性である施策条件を示す。条件変化結果情報３３は、ＡＢテストの実行前後での施策条件の変化である条件変化を示す。

【0019】

施策実施結果情報３４は、評価対象施策の効果を評価した評価結果である施策評価結果を示す。報酬分配結果情報３５は、条件変化ごとに、条件変化の施策評価結果に対する寄与の度合いである変化寄与度を算出した算出結果を示す。施策効果予測情報３６は、新たに実施する新規施策の候補である新規施策候補の効果を予測した予測結果を示す。

【0020】

制御部４は、データベース３に格納された実行結果情報３１及び条件情報３２に基づいて、評価対象施策の効果を評価する評価処理と、評価処理の処理結果を用いて新規施策候補の効果を予測する予測処理とを行う。なお、条件変化結果情報３３、施策実施結果情報３４及び報酬分配結果情報３５は評価処理で生成される情報であり、施策効果予測情報３６は予測処理で生成される情報である。

【0021】

図１の例では、制御部４は、条件変化追跡部４１と、結果検証部４２と、報酬分配部４３と、新規施策立案支援部４４とを有する。

【0022】

条件変化追跡部４１は、データベース３に基づいて、ＡＢテストの実行前後での施策対象の施策条件の変化である条件変化を判定し、その条件変化を示す条件変化結果情報３３を生成する追跡部である。

【0023】

結果検証部４２は、データベース３に基づいて、評価対象施策の効果を評価し、その評価結果である施策評価結果を示す施策実施結果情報３４を生成する検証部である。

【0024】

報酬分配部４３は、データベース３に基づいて、条件変化ごとに、その条件変化の施策評価値結果に対する寄与の度合いである変化寄与度を算出し、その算出結果を示す報酬分配結果情報３５を生成する分配部である。

【0025】

新規施策立案支援部４４は、データベース３に基づいて、新規施策候補の効果を予測し、その予測結果を示す施策効果予測情報３６を生成する施策支援部である。

【0026】

図２は、実行結果情報３１の一例を示す図である。図２に示す実行結果情報３１は、カラム３１１～３１６を含む。

【0027】

カラム３１１は、ＡＢテストを実行した実行期間を格納する。カラム３１２は、施策対象を識別する識別情報である対象ＩＤを格納する。カラム３１３は、施策条件を識別する条件ＩＤを格納する。カラム３１４は、ＡＢテストにより施策対象に対して実施された施策に関する施策情報を格納する。施策情報は、評価対象施策（クーポンの配布）を実施したか否か（評価対象施策を実施したか、それとも参考用施策を実施したか）を示す。図２の例では、施策情報は、評価対象施策である対象商品（おにぎり）に関するクーポンを配布したことを示す「△クーポン」と、クーポンを配布しない（施策を実施していない）ことを示す「なし」とのいずれかを示す。また、クーポンを配布した施策対象の集合をＡ群、クーポンを配布していない施策対象の集合をＢ群と呼ぶこともある。

【0028】

カラム３１５は、施策対象に対するＡＢテストによる効果を評価した評価値としてＫＰＩを格納する。カラム３１６は、施策対象に対するＡＢテストによる効果として、ＡＢテスト後の対象商品（おにぎり）の購入数（図では、「△購入数」と表記）を格納する。購入数は、例えば、クーポンを使用して対象商品を購入した数、又は、クーポンを配布後の所定期間内に対象商品を購入した数などでもよい。ＫＰＩは、対象商品の購入数に基づいて算出される値である。ＫＰＩを算出する算出式は、ここでは限定されない。

【0029】

図３は、条件情報３２の一例を示す図である。図３に示す条件情報３２は、カラム３２１～３２４を含む。

【0030】

カラム３２１は、施策条件を識別する条件ＩＤを格納する。カラム３２２は、施策条件の名前である条件名を格納する。カラム３２３及び３２４は、施策条件に含まれる変数ごとに設けられ、カラム３２３は、変数を識別する変数名を格納し、カラム３２４は、その変数の範囲を格納する。図３の例では、変数として、施策対象がＡＢテスト前の所定期間に対象商品を購入した数である△購入数である変数１と、施策対象の年齢である変数２とが示されているが、他の変数があってもよい。また、変数の範囲における「Ｘ，Ｙ）は、Ｘ以上、かつ、Ｙ未満であることを示す。ただし、Ｙが「ｉｎｆ」の場合、Ｘ以上であることを示す。なお、各施策条件は、変数１及び２の一方のみを有してもよい。また、同一の施策対象が複数の施策条件を備えてもよい。例えば、図の例では、△購入数が５以上１０未満の３０代の顧客は、条件ＩＤ「Ｃ１」及び「Ｃ４」のそれぞれの施策条件を備える。

【0031】

図４は、条件変化結果情報３３の一例を示す図である。図４に示す条件変化結果情報３３は、実行結果情報３１（カラム３１１～３１６）にカラム３３１が追加された情報である。

【0032】

カラム３３１は、ＡＢテストの実行前後での施策条件の変化である条件変化を示す条件変化情報を格納する。本実施形態では、条件変化情報として、ＡＢテストの実行後に施策対象が備える施策条件である施策後条件の条件ＩＤである施策後条件ＩＤを格納する。例えば、条件ＩＤ「Ｃ１」の施策条件を有する顧客のＡＢテストの実行後の△購入数が１２となった場合、施策後条件ＩＤは「Ｃ２」となる。なお、施策後条件ＩＤが元の条件ＩＤと同じ場合、施策条件が変化しなかったことを示す。

【0033】

図５は、施策実施結果情報３４の一例を示す図である。図５に示す施策実施結果情報３４は、カラム３４１～３４６を含む。

【0034】

カラム３４１は、評価対象施策を実施した実施期間（ＡＢテストを実行した実行期間と同じ）を格納する。カラム３４２は、評価対象施策を実施した施策対象が備える施策条件である評価対象条件の条件ＩＤを格納する。カラム３４３は、評価対象施策を示す施策情報を格納する。カラム３４４は、評価対象施策を実施した、評価対象条件を備える施策対象の数である対象数を格納する。カラム３４５及び３４６は、評価対象施策の効果を評価した評価結果である評価値を格納する。具体的には、カラム３４５は、評価対象施策の効果に対する環境による寄与の度合いを示す環境寄与度を格納し、カラム３４６は、評価対象施策の効果に対する施策自身による寄与を評価した施策寄与度を格納する。環境による寄与とは、効果のうち、施策とは別に環境の変化によって評価対象施策に与える影響である。環境の変化は、例えば、市場状況及び自然状況の変化などである。

【0035】

図６は、報酬分配結果情報３５の一例を示す図である。図６に示す報酬分配結果情報３５は、カラム３５１～３５９を含む。

【0036】

カラム３５１は、評価対象施策を実施した実施期間を格納する。カラム３５２は、評価対象条件の条件ＩＤを格納する。カラム３５３は、評価対象施策を示す施策情報を格納する。カラム３５４は、条件変化情報として施策後条件ＩＤを格納する。カラム３５５は、
評価対象施策を実施した、評価対象条件及び施策後条件を備える施策対象の数（つまり、評価対象施策により施策条件が評価対象条件から施策後条件に変わった施策対象の数）である条件変化別対象数を格納する。カラム３５６は、評価対象施策の効果に対する環境による寄与の度合いを示す環境寄与度を格納し、カラム３５７は、評価対象施策の効果に対する施策自身による寄与を評価した施策寄与度を格納する。カラム３５８及び３５９は、条件変化の施策評価結果に対する寄与の度合いである変化寄与度を格納する。具体的には、カラム３５８は、条件変化の環境寄与度に対する寄与の度合いである条件変化環境寄与度を格納し、カラム３５９は、条件変化の施策寄与度に対する寄与の度合いである条件変化施策寄与度を格納する。

【0037】

図７は、施策効果予測情報３６の一例を示す図である。図７に示す施策効果予測情報３６は、カラム３６１～３７０を含む。

【0038】

カラム３６１は、新規施策候補の効果の予測結果を識別する予測ＩＤを格納する。予測ＩＤには、新規施策候補全体の効果である全体効果の予測結果を識別するもの（「１」、「２」など）と、新規施策候補のうち条件変化ごとの効果である条件変化別効果の予測結果（「１－１」、「１－２」など）とがある。カラム３６２は、新規施策候補の施策内容を格納する。カラム３６３は、新規施策候補が実施される実施対象が備える施策条件の条件ＩＤを格納する。カラム３６４は、条件変化別効果の条件変化を示す施策後条件ＩＤを格納する。カラム３６５は、新規施策候補を実施する施策対象の数である対象数を格納する。カラム３６６は、新規施策候補全体の効果である全体効果を格納する。カラム３６７は、全体効果に対する環境の寄与の度合いである環境寄与度を格納する。カラム３６８は、全体効果に対する施策の寄与の度合いである施策寄与度を格納する。

【0039】

カラム３６９は、全体効果に対する環境による条件変化の寄与度に関する情報を格納する。具体的には、カラム３６９は、全体に対する条件変化の割合を格納するカラム３６９Ａと、当該条件変化の寄与度を格納するカラム３６９Ｂとを含む。カラム３７０は、全体効果に対する施策による条件変化の寄与度に関する情報を格納する。具体的には、カラム３６９は、全体に対する条件変化の割合を格納するカラム３７０Ａと、当該条件変化の寄与度を格納するカラム３７０Ｂとを含む。

【0040】

図８は、立案支援システム１０の全体処理を説明するためのシーケンスチャートであり、図９は、立案支援システム１０の全体処理を説明するためのフローチャートである。

【0041】

全体処理では、先ず、入出力部１は、施策実行者から実行結果情報３１を受け付け、その実行結果情報３１をデータベース３に格納する実行結果取得処理を実行する（ステップＳ１）。また、入出力部１は、施策実行者から条件情報３２を受け付け、その条件情報３２をデータベース３に格納する条件情報取得処理を実行する（ステップＳ２）。なお、実行結果情報３１及び条件情報３２の少なくとも一方が通信部２を介してデータベース３に格納されてもよい。

【0042】

その後、制御部４の条件変化追跡部４１は、データベース３に格納された実行結果情報３１及び条件情報３２に基づいて、条件変化結果情報３３を生成し、その条件変化結果情報３３をデータベース３に格納する条件変化追跡処理（図１０参照）を実行する（ステップＳ３）。

【0043】

続いて、結果検証部４２は、データベース３に格納された条件変化結果情報３３に基づいて、施策実施結果情報３４を生成し、その施策実施結果情報３４をデータベース３に格納する検証結果処理（図１１参照）を実行する（ステップＳ４）。

【0044】

次に、報酬分配部４３は、データベース３に格納された条件変化結果情報３３及び施策実施結果情報３４に基づいて、報酬分配結果情報３５を生成し、その報酬分配結果情報３５をデータベース３に格納する報酬分配果処理（図１２参照）を実行する（ステップＳ５）。そして、入出力部１は、データベース３に格納された報酬分配結果情報３５を出力する報酬分配結果出力処理を実行する（ステップＳ６）。

【0045】

また、新規施策立案支援部４４は、データベース３に格納された報酬分配結果情報３５に基づいて、施策効果予測情報３６を生成し、その施策効果予測情報３６をデータベース３に格納する新規施策立案支援処理（図１３参照）を実行する（ステップＳ７）。なお、新規施策立案支援処理では、新規施策立案支援部４４は、施策立案者から入出力部１又は通信部２を介して、新規施策候補及び効果予測値を受け付け、さらには、施策立案者に対して報酬分配結果及び各寄与の推薦値などを出力することができる。

【0046】

そして、入出力部１は、データベース３に格納された施策効果予測情報３６を出力する施策効果予測出力処理を実行し（ステップＳ８）、処理を終了する。

【0047】

図１０は、条件変化追跡部４１による条件変化追跡処理の一例を説明するためのフローチャートである。

【0048】

条件変化追跡処理では、先ず、条件変化追跡部４１は、データベース３から実行結果情報３１を取得し（ステップＳ１０１）、さらにデータベース３から条件情報３２を取得する（ステップＳ１０２）。

【0049】

条件変化追跡部４１は、実行結果情報３１に施策後条件ＩＤを格納するカラム３３１を追加して条件変化結果情報３３を生成する。条件変化追跡部４１は、条件情報３２に基づいて、実行結果情報３１のカラム３１１及び３１２に格納されている実行期間及び対象ＩＤの組ごとに、その対象ＩＤにて識別される施策対象がＡＢテストの実行後に備える施策条件を施策後条件として特定し、その施策後条件の条件ＩＤを施策後条件ＩＤとして、追加したカラム３３１に格納する（ステップＳ１０３）。なお、施策後条件が規定されていない場合（予め規定された施策条件とは異なる場合）、条件変化追跡部４１は、その施策後条件を新たに規定してもよい。

【0050】

条件変化追跡部４１は、施策後条件ＩＤを格納した条件変化結果情報３３をデータベース３に格納し（ステップＳ１０４）、条件変化追跡処理を終了する。

【0051】

図１１は、結果検証部４２による検証結果処理の一例を説明するためのフローチャートである。

【0052】

検証結果処理では、先ず、結果検証部４２は、データベース３から条件変化結果情報３３を取得する（ステップＳ２０１）。

【0053】

結果検証部４２は、条件変化結果情報３３における実行期間及び条件ＩＤの組み合わせごとに、ステップＳ２０２～Ｓ２０４の処理を繰り返すループ処理Ａを実行する。

【0054】

ループ処理Ａでは、先ず、結果検証部４２は、条件変化結果情報３３に基づいて、対象の組み合わせにおけるＡ群の対象ＩＤの数をＡ群の対象数ｎ_Ａ、Ｂ群の対象ＩＤの数をＢ群の対象数ｎ_Ｂ、Ａ群のＫＰＩの平均値をＡ群のＫＰＩ平均値ｙ_Ａ、Ｂ群のＫＰＩの平均値をＢ群のＫＰＩ平均値ｙ_Ｂとして算出する（ステップＳ２０２）。

【0055】

結果検証部４２は、Ｂ群のＫＰＩ平均値ｙ_Ｂを評価対象施策の環境寄与度として算出する（ステップＳ２０３）。

【0056】

結果検証部４２は、Ａ群のＫＰＩ平均値ｙ_ＡからＢ群のＫＰＩ平均値ｙ_Ｂを差し引いた値（ｙ_Ａ－ｙ_Ｂ）を評価対象施策の施策寄与度として算出する。そして、結果検証部４２は、対象の組み合わせの実行期間及び条件ＩＤと、評価対象施策を示す施策情報と、算出したA群の対象数ｎ_Ａ、環境寄与度及び施策寄与度とを有するレコードを施策実施結果情報３４に追加する（ステップＳ２０３）。

【0057】

そして、結果検証部４２は、全ての組み合わせに対してステップＳ２０２～Ｓ２０４の処理を終了すると、ループ処理Ａを抜けて、施策実施結果情報３４をデータベース３に格納し（ステップＳ２０５）、検証結果処理を終了する。

【0058】

図１２は、報酬分配部４３による報酬分配果処理の一例を説明するためのフローチャートである。

【0059】

報酬分配処理では、先ず、報酬分配部４３は、データベース３から条件変化結果情報３３を取得し（ステップＳ３０１）、さらにデータベース３から施策実施結果情報３４を取得する（ステップＳ３０２）。

【0060】

報酬分配部４３は、条件変化結果情報３３における実行期間、条件ＩＤ及び施策後条件ＩＤの組み合わせごとに、ステップＳ３０３～Ｓ３０６の処理を繰り返すループ処理Ｂを実行する。

【0061】

ループ処理Ｂでは、報酬分配部４３は、条件変化結果情報３３に基づいて、対象の組み合わせにおけるＡ群の対象ＩＤの数をＡ群の対象数ｎ_Ａ、対象数全体に対するＡ群の対象数の割合ｐ_Ａ、Ｂ群の対象ＩＤの数をＢ群の対象数ｎ_Ｂ、対象数全体に対するＢ群の対象数の割合ｐ_Ｂ、Ａ群のＫＰＩの平均値をＡ群のＫＰＩ平均値ｙ_Ａ、Ｂ群のＫＰＩの平均値をＢ群のＫＰＩ平均値ｙ_Ｂとして算出する（ステップＳ３０３）。

【0062】

報酬分配部４３は、施策実施結果情報３４から、対象の組み合わせの実行期間及び条件ＩＤと同じ実行期間及び条件ＩＤを有するレコードを取得し、そのレコードに含まれる環境寄与ζ及び施策寄与ξを抽出する（ステップＳ３０４）。

【0063】

報酬分配部４３は、ステップＳ３０３で算出したB群のＫＰＩ平均値ｙ_Ｂから環境寄与ζを差し引いた値（ｙ_Ｂ－ζ）を、対象の組み合わせにおける条件変化環境寄与度として算出する（ステップＳ３０５）。

【0064】

報酬分配部４３は、ステップＳ３０３で算出したＡ群のＫＰＩ平均値ｙ_ＡからB群のＫＰＩ平均値ｙ_Ｂ及び施策寄与ξを差し引いた値（ｙ_Ａ－ｙ_Ｂ－ξ）を、対象の組み合わせにおける条件変化施策寄与度として算出する。そして、報酬分配部４３は、対象の組み合わせの実行期間、条件ＩＤ及び施策後条件ＩＤと、評価対象施策を示す施策情報と、と、取得した環境寄与ζ及び施策寄与ξと、算出したＡ群の対象数ｎ_Ａ、条件件変化環境寄与度及び条件変化施策寄与度とを有するレコードを報酬分配結果情報３５に追加する（ステップＳ３０６）。なお、このとき、Ａ群の対象数ｎ_Ａは条件変化別対象数として報酬分配結果情報３５に格納される

【0065】

報酬分配部４３は、全ての組み合わせに対してステップＳ３０３～Ｓ３０６の処理を終了すると、ループ処理Ｂを抜けて、報酬分配結果情報３５をデータベース３に格納し（ステップＳ３０７）、検証結果処理を終了する。

【0066】

図１３は、新規施策立案支援部４４による新規施策立案支援処理の一例を説明するためのフローチャートである。

【0067】

新規施策立案支援処理では、新規施策立案支援部４４は、新たな施策の立案を支援するための新規施策立案支援画面（図１６参照）を表示し、施策立案者から新規施策立案支援画面を介して新規施策候補情報を受け付ける（ステップＳ４０１）。新規施策候補情報は、新規施策候補を示す施策情報と、新規施策候補を実施する施策対象が備える施策条件とを含む。

【0068】

また、新規施策立案支援部４４は、データベース３から報酬分配結果情報３５を取得する（ステップＳ４０２）。

【0069】

新規施策立案支援部４４は、新規施策候補情報にて示される施策情報及び施策条件の変数名の少なくとも一方を含むレコードのそれぞれを、新規施策候補に類似する類似候補の報酬分配結果として報酬分配結果情報３５から取得して新規施策立案支援画面に表示する（ステップＳ４０３）。

【0070】

新規施策立案支援部４４は、類似候補の報酬分配結果に基づいて、施策条件の変数名が一致する類似候補の環境寄与度の統計値である平均値、最大値及び最小値を、新規施策候補の環境寄与度の推定値、上限値及び下限値として推定して新規施策立案支援画面に表示する（ステップＳ４０４）。

【0071】

新規施策立案支援部４４は、類似候補の報酬分配結果に基づいて、施策情報が一致する類似候補の施策寄与度の統計値である平均値、最大値及び最小値を、新規施策候補の施策寄与度の推定値、上限値及び下限値として推定して新規施策立案支援画面に表示する（ステップＳ４０５）。

【0072】

新規施策立案支援部４４は、類似候補の報酬分配結果に基づいて、施策条件が一致する類似候補における条件変化ごとに、条件変化割合及び条件変化環境寄与度の統計値である平均値、最大値及び最小値を、新規施策候補の環境の条件変化割合及び条件変化環境寄与度の推定値、上限値及び下限値として推定して新規施策立案支援画面に表示する（ステップＳ４０６）。条件変化割合は、類似候補全体に対する当該条件変化を有する類似候補の割合である。

【0073】

新規施策立案支援部４４は、報酬分配結果に基づいて、施策情報が一致する類似候補における条件変化ごとに、条件変化割合の統計値である平均値、最大値及び最小値を、新規施策候補の条件変化割合の推定値、上限値及び下限値として推定して新規施策立案支援画面に表示する（ステップＳ４０７）。

【0074】

新規施策立案支援部４４は、報酬分配結果に基づいて、施策条件が一致する類似候補における条件変化ごとに、条件変化施策寄与度の統計値である平均値、最大値及び最小値を、新規施策候補の条件変化施策寄与度の推定値、上限値及び下限値として推定して新規施策立案支援画面に表示する（ステップＳ４０８）。

【0075】

新規施策立案支援部４４は、新規施策立案支援画面の環境寄与予測支援ボタンが押下されたか否かを判断する（ステップＳ４０９）。

【0076】

環境寄与予測支援ボタンが押下された場合、新規施策立案支援部４４は、環境寄与予測支援処理（図１４参照）を実行する（ステップＳ４１０）。

【0077】

環境寄与予測支援ボタンが押下されていない場合、及び、環境寄与予測支援処理が終了した場合、新規施策立案支援部４４は、新規施策立案支援画面の施策寄与予測支援ボタンが押下されたか否かを判断する（ステップＳ４１１）。

【0078】

施策寄与予測支援ボタンが押下された場合、新規施策立案支援部４４は、施策寄与予測支援処理（図１４参照）を実行する（ステップＳ４１２）。

【0079】

施策寄与予測支援ボタンが押下されていない場合、及び、施策寄与予測支援処理が終了した場合、新規施策立案支援部４４は、新規施策立案支援画面の条件変化環境寄与予測支援ボタンが押下されたか否かを判断する（ステップＳ４１３）。

【0080】

条件変化環境寄与予測支援ボタンが押下された場合、新規施策立案支援部４４は、条件変化環境寄与予測支援処理（図１５参照）を実行する（ステップＳ４１４）。

【0081】

条件変化環境寄与予測支援ボタンが押下されていない場合、及び、条件変化環境寄与予測支援処理が終了した場合、新規施策立案支援部４４は、新規施策立案支援画面の条件変化施策寄与予測支援ボタンが押下されたか否かを判断する（ステップＳ４１５）。

【0082】

条件変化施策寄与予測支援ボタンが押下された場合、新規施策立案支援部４４は、条件変化施策寄与予測支援処理（図１５参照）を実行する（ステップＳ４１６）。

【0083】

条件変化施策寄与予測支援ボタンが押下されていない場合、及び、条件変化施策寄与予測支援処理が終了した場合、新規施策立案支援部４４は、予測結果修正入力処理を実行する（ステップＳ４１７）。予測結果修正入力処理では、施策立案者は、表示された各推定値、上限値及び下限値を適宜修正することができる。

【0084】

その後、新規施策立案支援部４４は、決定ボタンが押下されたか否かを判断する（ステップＳ４１８）。決定ボタンが押下されなかった場合、新規施策立案支援部４４は、ステップＳ４０９の処理に戻る。一方、決定ボタンが押下された場合、新規施策立案支援部４４は、ステップＳ４０３～Ｓ４０８で算出された各値及びステップＳ４１７の修正結果に基づいて、施策効果予測情報３６を生成してデータベース３に格納し（ステップＳ４１９）、新規施策立案支援処理を終了する。

【0085】

図１４は、図１３のステップＳ４１０の環境寄与予測支援処理の一例を説明するためのフローチャートである。

【0086】

環境寄与予測支援処理では、新規施策立案支援部４４は、類似施策の報酬分配結果から新規施策立案候補の施策条件の変数に一致するレコードを予測対象レコードとして取得する（ステップＳ５０１）。新規施策立案支援部４４は、予測対象レコードに基づいて、施策条件の変数の範囲ごとに、その変数に対応する環境寄与度を集計した集計値を算出し、各集計値をグラフとして描画する（ステップＳ５０２）。新規施策立案支援部４４は、各集計値に対して回帰分析を行って、グラフに回帰直線を追加する（ステップＳ５０３）。

【0087】

新規施策立案支援部４４は、類似候補の環境寄与度の平均値を、新規施策の環境寄与度の推薦値（推定値）とし、その類似候補の環境寄与度の下限値から上限値までの範囲を新規施策の環境寄与度の推薦範囲として算出し、推薦値及び推薦範囲を表示する（ステップＳ５０４）。

【0088】

新規施策立案支援部４４は、ユーザから推薦値及び推薦範囲の修正指示を受け付けたか否かを判断する（ステップＳ５０５）。修正指示を受け付けた場合、新規施策立案支援部４４は、修正指示に応じて推薦値及び推薦範囲を修正する（ステップＳ５０６）。その後、新規施策立案支援部４４は、完了ボタンが押下されたか否かを判断する（ステップＳ５０７）。なお、修正指示を受け付けていない場合、新規施策立案支援部４４は、ステップＳ５０６をスキップする。

【0089】

完了ボタンが押下された場合、新規施策立案支援部４４は、完了ボタンが押下された場合、処理を終了し、完了ボタンが押下されていない場合、ステップＳ５０５の処理に戻る。

【0090】

なお、図１３のステップＳ４１２の施策寄与予測支援処理は、図１４を用いて説明した環境寄与予測支援処理と同様であり、「環境」を「施策」に読み替えればよい。

【0091】

図１５は、図１３のステップＳ４１４の条件変化環境寄与予測支援処理の一例を説明するためのフローチャートである。

【0092】

条件変化環境寄与予測支援処理では、新規施策立案支援部４４は、類似候補における条件変化ごとに、条件変化割合及び条件変化環境寄与度の統計値である平均値、下限値及び上限値を取得する（ステップＳ６０１）。新規施策立案支援部４４は、条件変化ごとに、条件変化割合及び条件変化環境寄与度の平均値を新規施策候補の条件変化割合及び条件変化環境寄与度の推薦値とし、各推薦値をグラフとして描画する（ステップＳ６０２）。

【0093】

新規施策立案支援部４４は、施策後条件ごとに、条件変化割合及び条件変化環境寄与度の下限値から上限値までの範囲を、新規施策候補の条件変化環境寄与度の推薦範囲とし、推薦値及び推薦範囲を表示する（ステップＳ６０３）。

【0094】

新規施策立案支援部４４は、ユーザから推薦値及び推薦範囲の修正指示を受け付けたか否かを判断する（ステップＳ６０４）。修正指示を受け付けた場合、新規施策立案支援部４４は、修正指示に応じて推薦値及び推薦範囲を修正する（ステップＳ６０５）。その後、新規施策立案支援部４４は、完了ボタンが押下されたか否かを判断する（ステップＳ６０６）。なお、修正指示を受け付けていない場合、新規施策立案支援部４４は、ステップＳ６０５をスキップする。

【0095】

完了ボタンが押下された場合、新規施策立案支援部４４は、完了ボタンが押下された場合、処理を終了し、完了ボタンが押下されていない場合、ステップＳ６０４の処理に戻る。

【0096】

なお、図１３のステップＳ４１６の条件変化施策寄与予測支援処理は、図１５を用いて説明した条件変化環境寄与予測支援処理と同様であり、「環境」を「施策」に読み替えればよい。

【0097】

図１６は、新規施策立案支援画面の一例を示す図である。図１６に示す新規施策立案支援画面４００は、新規施策候補情報を入力するための新規施策候補選択部４０１と、類似候補の報酬分配結果を表示するための分配表示部４０２と、新規施策候補の効果の予測結果を表示する施策効果表示部４０３と、環境寄与予測支援ボタン４０４と、施策寄与予測支援ボタン４０５と、条件変化環境寄与予測支援ボタン４０６と、条件変化施策寄与予測支援ボタン４０７と、決定ボタン４０８とを有する。

【0098】

図１７は、環境寄与予測支援画面及び施策寄与予測支援画面の一例を示す図である。

【0099】

図１７（ａ）に示す環境寄与予測支援画面５００は、新規施策の環境寄与度の集計値のグラフ５０１と、新規施策の環境寄与度の推薦値５０２と、新規施策の環境寄与度の推薦範囲５０３と、完了ボタン５０４とを有する。図１７（ｂ）に示す施策寄与予測支援画面５１０は新規施策の施策寄与度の集計値のグラフ５１１と、新規施策の施策寄与度の推薦値５１２と、新規施策の施策寄与度の推薦範囲５１３と、完了ボタン５１４とを有する。

【0100】

図１８は、条件変化環境寄与予測支援画面及び条件変化施策寄与予測支援画面の一例を示す図である。

【0101】

図１８（ａ）に示す条件変化環境寄与予測支援画面６００は、新規施策候補の条件変化割合及び条件変化環境寄与度の推薦値のグラフ６０１と、新規施策候補の条件変化割合及び条件変化環境寄与度の推薦値６０２と、新規施策候補の条件変化割合及び条件変化環境寄与度の推薦範囲６０３と、完了ボタン６０４とを有する。推薦値６０２及び推薦範囲６０３は、施策後の条件ごとに表示される。

【0102】

図１８（ｂ）に示す条件変化施策寄与予測支援画面６１０は、新規施策候補の条件変化割合及び条件変化施策寄与度の推薦値のグラフ６１１と、新規施策候補の条件変化割合及び条件変化施策寄与度の推薦値６１２と、新規施策候補の条件変化割合及び条件変化施策寄与度の推薦範囲６１３と、完了ボタン６１４とを有する。推薦値６１２及び推薦範囲６１３は、施策後の条件ごとに表示される。なお、グラフ６１１には、新規施策候補の条件変化割合及び条件変化環境寄与度の推薦値が併記されてもよい。

【0103】

以上説明したように本実施形態によれば、条件変化追跡部４１は、所定の施策条件を備えた施策対象への施策に関する試験を実行した実行結果情報３１に基づいて、試験前後の施策条件の変化である条件変化を判定する。結果検証部４２は、実行結果情報３１に基づいて、施策の効果を評価した評価値を算出する。報酬分配部４３は、条件変化の評価値に対する寄与の度合いである変化寄与度を算出する。したがって、変化寄与度に基づいて、試験が行われていない施策条件の評価結果を補間することが可能となるため、限られた施策条件に対する試験の実行結果に基づいてより効率の良い新たな施策の立案が可能になる。

【0104】

また、本実施形態では、試験は、複数の施策対象を含む集合を分割した２つのＡ群及びＢ群の一方であるＡ群に対してのみ施策を実施するＡＢテストである。結果検証部４２は、Ａ群に対応する施策評価値と、Ｂ群に対応する環境評価値とを評価値として示す施策実施結果情報３４を算出する。したがって、施策による効果をより適切に評価することが可能となる。

【0105】

また、本実施形態では、報酬分配部４３は、施策評価値に対する変化寄与度である施策変化寄与度と、環境評価値に対する変化寄与度である環境変化寄与度とを算出する。したがって、変化寄与度をより適切に評価することが可能となる。

【0106】

また、本実施形態では、条件変化追跡部４１は、試験後の施策条件が予め規定された施策条件とは異なる場合、当該施策条件を新たに規定する。このため、施策条件が想定されていない施策条件などに変化しても、施策による効果を適切に評価することが可能となる。

【0107】

また、本実施形態では、新規施策立案支援部４４は、新規施策を実施した実施結果を、評価値及び変化寄与度に基づいて予測した施策効果予測情報３６を出力する。この場合、新規施策の効果を事前に予測することが可能となるため、効率の良い新たな施策の立案が可能になる。

【0108】

また、本実施形態では、新規施策立案支援部４４は、実施済み施策のうち、新規施策と施策内容及び施策条件の少なくとも一方が一致する類似施策の評価値及び変化寄与度に基づいて施策効果予測情報を予測する。このため、新規施策の効果をより適切に予測することが可能となる。

【0109】

また、本実施形態では、新規施策立案支援部４４は、類似施策の評価値及び変化寄与度の統計値を施策効果予測情報として予測する。このため、新規施策の効果をより適切に予測することが可能となる。

【0110】

また、本実施形態では、新規施策立案支援部４４は、統計値をグラフ化して表示する。このため、新規施策を立案する施策立案者が施策効果予測情報を視覚的に捉えて新規施策の効果を適切評価することが可能となる。

【0111】

上述した本開示の実施形態は、本開示の説明のための例示であり、本開示の範囲をそれらの実施形態にのみ限定する趣旨ではない。当業者は、本開示の範囲を逸脱することなしに、他の様々な態様で本開示を実施することができる。例えば、識別情報について説明する際に、「識別情報」、「ＩＤ」、「名」及び「名前」などの表現を用いたが、これらは互いに置換が可能である。また、各情報としてテーブルを用いて説明したが、各情報はテーブル構造を有していなくてもよい。

【符号の説明】

【0112】

１：入出力部 ２：通信部 ２：変数 ３：データベース ４：制御部 １０：立案支援システム ２０：記録媒体 ３０：業務システム ４０：ネットワーク ４１：条件変化追跡部 ４２：結果検証部 ４３：報酬分配部 ４４：新規施策立案支援部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】