特許 7567295 情報処理装置、情報処理方法、及び効果推定システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-10-07

(45)【発行日】2024-10-16

(54)【発明の名称】情報処理装置、情報処理方法、及び効果推定システム

(51)【国際特許分類】

   G06Q 30/0242 20230101AFI20241008BHJP

【ＦＩ】

G06Q30/0242

【請求項の数】 9

(21)【出願番号】P 2020145150

(22)【出願日】2020-08-31

(65)【公開番号】P2022040432

(43)【公開日】2022-03-11

【審査請求日】2023-03-23

【前置審査】

(73)【特許権者】

【識別番号】000006013

【氏名又は名称】三菱電機株式会社

(74)【代理人】

【識別番号】100109612

【弁理士】

【氏名又は名称】倉谷 泰孝

(74)【代理人】

【識別番号】100116643

【弁理士】

【氏名又は名称】伊達 研郎

(74)【代理人】

【識別番号】100184022

【弁理士】

【氏名又は名称】前田 美保

(72)【発明者】

【氏名】小林 弘幸

(72)【発明者】

【氏名】堅田 康平

(72)【発明者】

【氏名】茂地 顕一郎

(72)【発明者】

【氏名】木村 深雪

【審査官】関 博文

(56)【参考文献】

【文献】特開２０１６－０７１５０１（ＪＰ，Ａ）

【文献】特開２０２０－１２６６４５（ＪＰ，Ａ）

【文献】特開２０１１－１８６６１０（ＪＰ，Ａ）

【文献】特開２０１１－１９７４７５（ＪＰ，Ａ）

【文献】特開２０１５－０１５０３１（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１８／００２４６３３（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

(57)【特許請求の範囲】

【請求項1】

コンテンツを出力する情報提供装置における当該コンテンツの視聴領域を撮影した画像から視聴者を抽出する視聴者抽出部と、
前記視聴領域を撮影した画像に基づいて、前記視聴者抽出部によって抽出された視聴者の特性であって、少なくとも当該視聴者の生理的特性を含む特性である視聴者特性を検出する視聴者特性検出部と、
前記視聴者特性検出部によって検出された視聴者特性に基づいて、前記視聴者ごとに前記コンテンツに対する注目度を推定する注目度推定部と、
を備え、
前記視聴者抽出部は、
前記視聴領域を撮影した画像から人を抽出する人抽出部と、
前記人抽出部が抽出した人の中から、前記コンテンツの視聴者を特定する視聴者特定部と、
を含み、
前記視聴者特定部は、前記人抽出部が抽出した人のうち、前記視聴領域での滞留時間が一定時間以上である人を前記コンテンツの視聴者と特定し、
前記視聴者特性に含まれる前記生理的特性は、心拍数又は開眼度であり、
前記注目度推定部は、前記視聴者ごとに、前記コンテンツの視聴開始時と視聴終了時での前記心拍数の変化量、又は前記開眼度の変化量を算出し、前記心拍数の変化量又は前記開眼度の変化量を予め設定された閾値と比較することで、前記注目度を推定する、
ことを特徴とする情報処理装置。

【請求項2】

前記注目度推定部は、推定した前記注目度についての情報を、前記注目度に対応する視聴者を特定する情報、及び前記注目度に対応するコンテンツを特定する情報と対応付けて出力する、
請求項１に記載の情報処理装置。

【請求項3】

前記視聴者特性検出部は、視聴者特性として、当該視聴者の性別又は年齢を更に検出する、
請求項１又は請求項２に記載の情報処理装置。

【請求項4】

前記コンテンツが広告である、
請求項１から３のいずれか１項に記載の情報処理装置。

【請求項5】

前記コンテンツには、前記広告に係る商品又はサービスに関するクーポンについての情報が含まれる、
請求項４に記載の情報処理装置。

【請求項6】

前記注目度推定部は、推定した前記注目度についての情報を、前記注目度に対応する視聴者を特定する情報、前記注目度に対応するコンテンツを特定する情報、及び前記クーポンの使用状況についての情報と対応付けて出力する、
請求項５に記載の情報処理装置。

【請求項7】

コンテンツを出力する情報提供装置における当該コンテンツの視聴領域を撮影した画像から人を抽出するステップと、
抽出した人のうち、前記視聴領域での滞留時間が一定時間以上である人を前記コンテンツの視聴者と特定するステップと、
前記視聴領域を撮影した画像に基づいて、抽出された視聴者の特性であって、少なくとも当該視聴者の心拍数又は開眼度を含む特性である視聴者特性を検出するステップと、
検出された視聴者特性に基づいて、前記コンテンツの視聴開始時と視聴終了時での前記心拍数の変化量、又は前記開眼度の変化量を算出し、前記心拍数の変化量又は前記開眼度の変化量を予め設定された閾値と比較することで、前記視聴者ごとに前記コンテンツに対する注目度を推定するステップと、
を備える、情報処理方法。

【請求項8】

前記情報提供装置と、
請求項１から６のいずれか１項に記載の情報処理装置と、
を備える、効果推定システム。

【請求項9】

前記注目度推定部によって推定された注目度に基づいて、前記情報提供装置から出力されるコンテンツが決定される、
請求項８に記載の効果推定システム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、情報処理装置、情報処理方法、及び効果推定システムに関する。

【背景技術】

【0002】

広告等のコンテンツを表示する際に、視聴者の特性を検出し、当該特性に基づいて、表示するコンテンツを制御したり、当該コンテンツに対する視聴者の反応を評価したりする技術が開示されている。なお、本開示において「視聴」とは、少なくとも視ることを意味する。すなわち、「視聴」とは、「視ること」並びに「視ること及び聴くこと」のいずれかを意味する。

【0003】

例えば、特許文献１には、小売店に設置される表示装置において、消費者（視聴者）の性別、身長、体重、年齢、心拍数、及び呼吸数等を各種のセンサによって検出し、その検出結果に応じて当該表示装置の表示を切り替える技術が開示されている。また、例えば、特許文献２には、パソコンやタブレットＰＣ等のデバイスを介したオンラインでのアンケート調査に関して、回答中における心拍数等の回答者（視聴者）の生体情報を検出し、その検出結果に基づいて、アンケートに対する回答の信頼度を評価する技術が開示されている。

【先行技術文献】

【特許文献】

【0004】

【文献】特表２００７－５３５７２０号公報

【文献】特開２０１４－６６３９号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

例えばデジタルサイネージのように、コンテンツを表示することで不特定多数の人に情報を提供する装置においては、当該コンテンツを表示した効果を把握するために、当該コンテンツに対する視聴者の注目度を推定したいという要望がある。かかる要望に対して、例えば、特許文献１、２に記載の技術を適用することにより、検出した視聴者の特性から、コンテンツに対する当該視聴者の注目度を推定することができる可能性がある。

【0006】

しかしながら、特許文献１に記載の技術では、カメラを含む各種のセンサを用いて視聴者の特性が検出されている。具体的には、カメラによって撮影された画像に基づいて視聴者の性別、身長、体重、年齢等が検出され、他の生理学センサを用いて視聴者の心拍数等が検出されている。特許文献１に記載の技術では、このように複数のセンサを準備する必要があるため、システムが複雑になり、設置に係るコストが増大する恐れがある。また、特許文献２に記載の技術では、パソコンやタブレットＰＣといった、１人で使用するデバイスが前提となっている。従って、不特定多数の人によって視聴される表示装置に対して当該技術を適用した場合には、検出した生体情報がどの視聴者のものか対応付けることができず、当該生体情報に基づいて推定した注目度は、確度の低いものとなる恐れがある。

【0007】

本開示は、上記の問題に鑑みてなされたものであり、より簡易な構成によって、より高い確度でコンテンツに対する視聴者の注目度を推定することが可能な、情報処理装置、情報処理方法、及び効果推定システムを提供することを目的とする。

【課題を解決するための手段】

【0008】

上記目的を達成するため、本開示によれば、コンテンツを出力する情報提供装置における当該コンテンツの視聴領域を撮影した画像から視聴者を抽出する視聴者抽出部と、視聴領域を撮影した画像に基づいて、視聴者抽出部によって抽出された視聴者の特性であって、少なくとも当該視聴者の生理的特性を含む特性である視聴者特性を検出する視聴者特性検出部と、視聴者特性検出部によって検出された視聴者特性に基づいて、視聴者ごとにコンテンツに対する注目度を推定する注目度推定部と、を備え、視聴者抽出部は、視聴領域を撮影した画像から人を抽出する人抽出部と、人抽出部が抽出した人の中から、コンテンツの視聴者を特定する視聴者特定部と、を含み、視聴者特定部は、人抽出部が抽出した人のうち、視聴領域での滞留時間が一定時間以上である人をコンテンツの視聴者と特定し、視聴者特性に含まれる生理的特性は、心拍数又は開眼度であり、注目度推定部は、視聴者ごとに、コンテンツの視聴開始時と視聴終了時での心拍数の変化量、又は開眼度の変化量を算出し、心拍数の変化量又は開眼度の変化量を予め設定された閾値と比較することで、注目度を推定する、情報処理装置が提供される。

【0009】

また、上記目的を達成するため、本開示によれば、コンテンツを出力する情報提供装置における当該コンテンツの視聴領域を撮影した画像から人を抽出するステップと、抽出した人のうち、視聴領域での滞留時間が一定時間以上である人をコンテンツの視聴者と特定するステップと、視聴領域を撮影した画像に基づいて、抽出された視聴者の特性であって、少なくとも当該視聴者の心拍数又は開眼度を含む特性である視聴者特性を検出するステップと、検出された視聴者特性に基づいて、コンテンツの視聴開始時と視聴終了時での心拍数の変化量、又は開眼度の変化量を算出し、心拍数の変化量又は開眼度の変化量を予め設定された閾値と比較することで、視聴者ごとにコンテンツに対する注目度を推定するステップと、を備える、情報処理方法が提供される。

【0010】

また、上記目的を達成するために、本開示によれば、コンテンツを出力する情報提供装置と、上記情報処理装置と、を備える効果推定システムが提供される。

【発明の効果】

【0011】

本開示によれば、不特定多数の人に対して情報を提供する情報提供装置において、コンテンツの視聴者を抽出した上で、当該視聴者ごとに視聴者特性が検出され、当該コンテンツに対する注目度が推定される。従って、より高い確度で注目度を推定することが可能となる。また、撮像部によって撮影された画像に基づいて視聴者の抽出と注目度の推定がなされる構成となっており、撮像部以外の他のセンサを要しない。従って、より簡易な構成によって注目度を推定することが可能となる。

【図面の簡単な説明】

【0012】

【図1】実施の形態１に係る効果推定システムの全体構成を示すブロック図である。

【図2】図１に示す情報提供装置の機能構成を示す機能ブロック図である。

【図3】図１に示す効果推定装置の機能構成を示す機能ブロック図である。

【図4】実施の形態１に係る効果推定方法の処理手順を示すフロー図である。

【図5】実施の形態２に係る効果推定装置の機能構成を示す機能ブロック図である。

【図6】実施の形態２に係る効果推定方法の処理手順を示すフロー図である。

【図7】実施の形態３に係る効果推定装置の機能構成を示す機能ブロック図である。

【図8】実施の形態３に係る効果推定方法の処理手順を示すフロー図である。

【図9】実施の形態４に係る効果推定装置の機能構成を示す機能ブロック図である。

【図10】実施の形態４に係る効果推定方法の処理手順を示すフロー図である。

【図11】実施の形態５に係る効果推定システムの全体構成を示すブロック図である。

【図12】実施の形態５に係るコンテンツ配信装置の機能構成を示す機能ブロック図である。

【図13】実施の形態６に係る効果推定システムの全体構成を示すブロック図である。

【図14】実施の形態６に係る効果推定装置の機能構成を示す機能ブロック図である。

【図15】実施の形態６に係る効果推定方法の処理手順を示すフロー図である。

【図16】効果推定装置から出力される情報の一例を示す図である。

【図17】効果推定装置から出力される情報の他の例を示す図である。

【図18】時間帯ごとの注目度の分布が算出される場合における、効果推定装置から出力される情報の一例を示す図である。

【図19】時間帯ごと、視聴者の性別ごと、及び視聴者の年齢層ごとの注目度の分布が算出される場合における、効果推定装置から出力される情報の一例を示す図である。

【発明を実施するための形態】

【0013】

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本開示は以下の記述に限定されるものではなく、本開示の要旨を逸脱しない範囲において適宜変更可能である。また、本明細書及び図面において、実質的に同一の機能を有する構成要素については、同一の符号を付することにより重複説明を省略する。

【0014】

実施の形態１．
（効果推定システムの全体構成）
図１を参照して、実施の形態１に係る効果推定システムの全体構成について説明する。図１は、実施の形態１に係る効果推定システムの全体構成を示すブロック図である。

【0015】

図１を参照すると、実施の形態１に係る効果推定システム１は、情報提供装置１０と、効果推定装置２０（本開示の情報処理装置に対応する）と、を備える。効果推定システム１は、情報提供装置１０と効果推定装置２０とがネットワーク５０を介して通信可能に接続されて構成される。

【0016】

情報提供装置１０は、例えば、繁華街、商業施設、駅、及びバス停等、人通りの多い場所や、列車、バス、タクシー、パーソナルモビリティ等の車内に設置される。情報提供装置１０は、表示装置を備えており、当該表示装置にコンテンツを表示することで、通行人や乗客に対して各種の情報を提供する。情報提供装置１０は、例えば、いわゆるデジタルサイネージである。コンテンツの種類は限定されず、時間帯や、情報提供装置１０が設置される場所等に応じて、表示されるコンテンツが適宜選択されてよい。例えば、コンテンツは、広告、商業施設の施設情報、並びに、電車及びバスの運行情報等を示す静止画又は動画である。なお、図１では、簡単のため１台の情報提供装置１０を図示しているが、複数の情報提供装置１０がネットワーク５０を介して効果推定装置２０と接続されてもよい。

【0017】

効果推定装置２０は、情報提供装置１０においてコンテンツを表示した効果を推定する。具体的には、効果推定装置２０は、当該コンテンツの効果を示す指標として、当該コンテンツに対する視聴者の注目度を推定する。

【0018】

以下、情報提供装置１０及び効果推定装置２０の構成について詳細に説明する。

【0019】

（情報提供装置の構成）
図２を参照して、図１に示す情報提供装置１０の構成について説明する。図２は、図１に示す情報提供装置１０の機能構成を示す機能ブロック図である。なお、説明のため、図２には、図１に示す効果推定装置２０も併せて図示している。ただし、簡単のため、図１に示すネットワーク５０については図示を省略している。

【0020】

図２を参照すると、情報提供装置１０は、その機能として、表示部１０１と、表示制御部１０３と、撮像部１０５と、通信部１０７と、を有する。なお、他の装置の通信部と区別するため、以下では、便宜的に、通信部１０７を情報提供装置通信部１０７とも記載する。

【0021】

表示部１０１は表示装置によって構成され、表示制御部１０３からの制御により、その画面にコンテンツを表示する。表示部１０１を構成する表示装置の種類は限定されず、当該表示装置は、例えば液晶ディスプレイ装置、プラズマディスプレイ装置、又は有機ＥＬディスプレイ装置等、各種の公知の表示装置であってよい。あるいは、表示部１０１は、プロジェクタによって構成されてもよく、スクリーン、路面、又は壁面等にコンテンツを表示してもよい。

【0022】

表示制御部１０３は、表示部１０１の動作を制御し、表示部１０１にコンテンツを表示させる。情報提供装置１０は図示しない記憶部を備えており、当該記憶部に、表示する対象である各種のコンテンツの画像データや、これらのコンテンツを表示するルール（例えば、時間帯及び情報提供装置１０の設置場所に応じた表示するコンテンツの種類、コンテンツを表示する時間、並びに、コンテンツを表示する順序等）等が記憶されている。表示制御部１０３は、当該記憶部を参照することにより、当該ルールに従って、表示部１０１にコンテンツを表示させる。

【0023】

また、表示制御部１０３は、表示部１０１にコンテンツを表示させた実績データ（以下、表示実績データとも記載する）を、情報提供装置通信部１０７に提供する機能を有する。表示実績データは、表示部１０１が表示したコンテンツを特定する情報（例えば、当該コンテンツを示す識別子）と、それらのコンテンツを表示した時刻についての情報と、を少なくとも含む。表示実績データは、情報提供装置通信部１０７を介して効果推定装置２０に送信される。

【0024】

なお、表示制御部１０３は、例えば、ＣＰＵ（Central Processing Unit）又はＤＳＰ（Digital Signal Processor）等のプロセッサと、メモリ等の記憶素子が搭載された制御基板によって構成される。当該記憶素子には、例えば当該プロセッサが実行するプログラム、及び当該プロセッサがプログラムを実行した結果得られた情報等が格納される。当該プロセッサが所定のプログラムに従って演算処理を実行することにより、上記の表示制御部１０３の機能が実現される。

【0025】

撮像部１０５は、動画を撮影可能なカメラによって構成され、表示部１０１によって表示されるコンテンツを視聴可能な領域（以下、視聴領域とも記載する）を撮影する。撮像部１０５によって、視聴領域に存在する人が撮影され得る。視聴領域は、表示部１０１の画面の前方の所定の広さの領域として設定される。表示部１０１の画面が大きければ、それだけ遠方からコンテンツを視聴可能となるため、視聴領域は、当該画面の大きさに応じて適宜設定されてよい。

【0026】

撮像部１０５を構成するカメラの種類は限定されず、各種の公知のカメラが用いられてよい。ただし、後述するように、本実施の形態では、効果推定装置２０の視聴者特性検出部２０５において視聴者の肌の輝度の変化が検出されるため、その目的に適うよう、撮像部１０５は、輝度を検出可能なカメラによって構成される。撮像部１０５は、視聴領域を撮影した画像のデータ（以下、単に撮影画像データとも記載する）を、情報提供装置通信部１０７に提供する。なお、撮影画像データには、その画像を撮影した時刻についての情報も含まれている。

【0027】

情報提供装置通信部１０７は、ネットワーク５０（図１を参照）を介して効果推定装置２０との間で各種の情報をやり取りする通信インタフェースである。情報提供装置通信部１０７は、通信カード又は通信チップ等によって構成される。情報提供装置通信部１０７は、表示制御部１０３から提供された表示実績データ、及び撮像部１０５から提供された撮影画像データを、ネットワーク５０を介して効果推定装置２０に送信する。なお、情報提供装置通信部１０７における通信の方式は限定されず、各種の公知の通信方式が用いられてよい。また、情報提供装置通信部１０７を構成する通信カード又は通信チップ等としては、採用された通信方式に適合するものが適宜用いられてよい。

【0028】

なお、情報提供装置１０は、以上説明した機能以外にも、一般的なデジタルサイネージが有する各種の機能を有してよい。例えば、情報提供装置１０は、その機能として、スピーカ等の音声出力装置からなる音声出力部を更に有してもよい。コンテンツが音声を含むものである場合には、情報提供装置１０は、表示部１０１によってコンテンツに係る画像を表示するとともに、当該音声出力部からコンテンツに係る音声を出力することができる。

【0029】

（効果推定装置の構成）
図３を参照して、図１に示す効果推定装置２０の構成について説明する。図３は、図１に示す効果推定装置２０の機能構成を示す機能ブロック図である。なお、説明のため、図３には、図１に示す情報提供装置１０も併せて図示している。ただし、簡単のため、図１に示すネットワーク５０については図示を省略している。

【0030】

図３を参照すると、効果推定装置２０は、その機能として、通信部２０１と、視聴者抽出部２０３と、視聴者特性検出部２０５と、注目度推定部２０７と、注目度記憶部２０９と、を有する。なお、他の装置の通信部と区別するため、以下では、便宜的に、通信部２０１を効果推定装置通信部２０１とも記載する。

【0031】

効果推定装置通信部２０１は、ネットワーク５０（図１を参照）を介して情報提供装置１０との間で各種の情報をやり取りする通信インタフェースである。効果推定装置通信部２０１は、通信カード又は通信チップ等によって構成される。効果推定装置通信部２０１は、情報提供装置１０から送信された、表示部１０１における表示実績データ、及び撮像部１０５における撮影画像データを、ネットワーク５０を介して受信する。効果推定装置通信部２０１は、受信した表示実績データを注目度推定部２０７に提供する。また、効果推定装置通信部２０１は、受信した撮影画像データを視聴者抽出部２０３及び視聴者特性検出部２０５に提供する。なお、効果推定装置通信部２０１における通信の方式は限定されず、各種の公知の通信方式が用いられてよい。また、効果推定装置通信部２０１を構成する通信カード又は通信チップ等としては、採用された通信方式に適合するものが適宜用いられてよい。

【0032】

視聴者抽出部２０３は、撮影画像データに基づいて、視聴領域を撮影した画像から視聴者を抽出する。具体的には、視聴者抽出部２０３は、その機能として、人抽出部２１１を有する。人抽出部２１１は、視聴領域を撮影した画像に含まれる人を抽出する。この際、人抽出部２１１は、画像内に複数の人が存在する場合には、これら複数の人をそれぞれ抽出する。そして、視聴者抽出部２０３は、人抽出部２１１によって抽出された人を視聴者とみなして、当該視聴者の各々を特定する情報（例えば、視聴者の各々を示す識別子等）を付した上で、当該視聴者についての情報を視聴者特性検出部２０５に提供する。

【0033】

人抽出部２１１が人を抽出する方法は限定されない。例えば、人抽出部２１１は、明度の違いに基づいて当該画像内に存在する事物の輪郭を抽出し、当該輪郭の大きさ及び形状に基づいて、人を抽出することができる。あるいは、例えば、人抽出部２１１は、画像内に存在する人の顔を検出することにより、人を抽出することができる。人の抽出方法はかかる例に限定されず、その他各種の公知の画像解析技術が用いられてよい。ただし、上記のように、人抽出部２１１は、画像内に複数の人が存在する場合にはこれら複数の人をそれぞれ抽出するため、例えば画像において人が重なっている場合であっても、それらの人を個別に認識できる技術が用いられることが好ましい。

【0034】

視聴者特性検出部２０５は、撮影画像データに基づいて（すなわち、視聴領域を撮影した画像に基づいて）、視聴者特性を検出する。視聴者特性検出部２０５は、各視聴者に付された識別子を用いて、視聴者抽出部２０３（すなわち、人抽出部２１１）によって抽出された視聴者ごとに、視聴者特性を検出する。視聴者特性検出部２０５が抽出する視聴者特性には、当該視聴者の生理的特性が含まれる。生理的特性とは、コンテンツに対する視聴者の反応を示し得る、当該視聴者の身体的な特性である。

【0035】

本実施の形態では、視聴者特性検出部２０５は、その機能として心拍数検出部２２１を有する。心拍数検出部２２１は、視聴領域を撮影した画像に基づいて、視聴者の生理的特性として心拍数を検出する。心拍数検出部２２１が心拍数を検出する方法は限定されず、各種の公知の方法が用いられてよい。一例として、心拍数検出部２２１は、国際公開第２０２０／０５４１２２号に記載の方法を用いて、人の肌を含む画像に基づいて、肌表面の輝度の変化から脈波を推定し、当該脈波から心拍数を検出することができる。心拍数検出部２２１は、各視聴者に付された識別子を用いて、視聴者ごとに心拍数を検出する。

【0036】

視聴者特性検出部２０５（すなわち、心拍数検出部２２１）は、検出した視聴者特性についての情報（すなわち、心拍数についての情報）を、その視聴者特性（すなわち、心拍数）が検出された視聴者を示す識別子、及び、撮影画像データに含まれる、その視聴者特性（すなわち、心拍数）を検出するための画像が撮像部１０５によって撮影された時刻についての情報と対応付けて、注目度推定部２０７に提供する。

【0037】

注目度推定部２０７は、視聴者特性検出部２０５によって検出された視聴者特性（すなわち、本実施の形態においては心拍数）に基づいて、情報提供装置１０の表示部１０１に表示されたコンテンツに対する注目度を推定する。注目度推定部２０７は、上記の視聴者特性（すなわち、心拍数）に対応付けられた視聴者を示す識別子を用いて、視聴者ごとに当該注目度を推定する。例えば、注目度推定部２０７は、視聴者ごとに、コンテンツの視聴開始時と視聴終了時での心拍数の変化量を算出する。当該心拍数の変化量に対して、注目度の高低を定める複数の閾値が予め設定されており、注目度推定部２０７は、算出した心拍数の変化量を当該閾値と比較することにより、例えば「注目度：低」、「注目度：中」、「注目度：高」といったカテゴリとして注目度を推定する。例えば、注目度推定部２０７は、当該心拍数の変化量が第１の閾値未満であれば「注目度：低」と推定し、当該心拍数の変化量が第１の閾値以上第２の閾値未満であれば「注目度：中」と推定し、当該心拍数の変化量が第２の閾値以上であれば「注目度：高」と判断する。ただし、注目度は、その高低を比較可能な形式で推定されればよく、注目度の具体的な形式は限定されない。例えば、注目度は、当該心拍数の変化量に応じた得点として推定されてもよい。なお、注目度推定部２０７は、心拍数の変化量ではなく、心拍数の値自体を用いて、当該心拍数の値を閾値と比較することで、同様に注目度を推定してもよい。

【0038】

注目度推定部２０７は、効果推定装置通信部２０１から提供された表示実績データに基づいて、推定した注目度に対応するコンテンツ（すなわち、注目度の推定に用いられた視聴者特性（すなわち、心拍数）を検出するための画像が撮像部１０５によって撮影された時刻に、表示部１０１によって表示されていたコンテンツ）を抽出する。そして、注目度推定部２０７は、推定した注目度についての情報を、当該注目度に対応する視聴者を特定する情報（例えば、視聴者を示す識別子）、及び、抽出した、注目度に対応するコンテンツを特定する情報（例えば、コンテンツを示す識別子）と対応付けて、注目度記憶部２０９に出力する。

【0039】

注目度記憶部２０９は、ＨＤＤ（Hard Disk Drive）又はフラッシュメモリ等の不揮発性の記憶装置から構成され、注目度推定部２０７によって推定された注目度を記憶する。具体的には、注目度記憶部２０９は、注目度推定部２０７によって推定された注目度についての情報、当該注目度に対応する視聴者を特定する情報、及び当該注目度に対応するコンテンツを特定する情報を、互いに対応付けて記憶する。

【0040】

以上、実施の形態１に係る効果推定システム１の構成について説明した。なお、効果推定装置２０の視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７は、例えば、ＣＰＵ又はＤＳＰ等のプロセッサ、並びにメモリ等の記憶素子等が搭載された制御基板によって構成される。当該記憶素子には、例えば当該プロセッサが実行するプログラム、及び当該プロセッサがプログラムを実行した結果得られた情報等が格納される。当該プロセッサが所定のプログラムに従って演算処理を実行することにより、上記の視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７の機能が実現される。

【0041】

（効果推定方法の処理手順）
図４を参照して、実施の形態１に係る効果推定方法（本開示における情報処理方法に対応）の処理手順について説明する。図４は、実施の形態１に係る効果推定方法の処理手順を示すフロー図である。図４に示す一連の処理は、図３を参照して説明した、効果推定装置２０における情報処理方法に対応する。効果推定装置２０の視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７を構成するプロセッサが所定のプログラムに従って演算処理を実行することにより、図４に示す一連の処理が実行される。各処理の詳細については、図３を参照して既に説明しているため、ここでは詳細な説明を省略する。

【0042】

図４を参照すると、実施の形態１に係る効果推定方法では、まず、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像から、人（視聴者）が抽出される（ステップＳ１０１）。ステップＳ１０１に示す処理は、図３を参照して説明した、視聴者抽出部２０３（人抽出部２１１）によって実行される処理に対応している。

【0043】

次に、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像に基づいて、ステップＳ１０１に示す処理で抽出された視聴者ごとに、心拍数が検出される（ステップＳ１０３）。ステップＳ１０３に示す処理は、図３を参照して説明した、視聴者特性検出部２０５（心拍数検出部２２１）によって実行される処理に対応している。

【0044】

次に、検出された心拍数に基づいて、情報提供装置１０の表示部１０１に表示されたコンテンツに対する注目度が、視聴者ごとに推定される（ステップＳ１０５）。そして、推定された注目度についての情報が、当該注目度に対応する視聴者を特定する情報、及び当該注目度に対応するコンテンツを特定する情報と、互いに対応付けられて出力される（ステップＳ１０７）。ステップＳ１０５及びステップＳ１０７に示す処理は、図３を参照して説明した、注目度推定部２０７によって実行される処理に対応している。

【0045】

以上、実施の形態１に係る効果推定方法の処理手順について説明した。

【0046】

以上説明したように、本実施の形態によれば、不特定多数の人に対して情報を提供する情報提供装置１０において、コンテンツの視聴者を抽出した上で、当該視聴者ごとに視聴者特性が検出され、当該コンテンツに対する注目度が推定される。従って、より高い確度で注目度を推定することが可能となる。また、撮像部１０５によって撮影された画像に基づいて視聴者の抽出と注目度の推定がなされる構成となっており、他のセンサを要しない。従って、より簡易な構成によって注目度を推定することが可能となる。このように、本実施の形態によれば、例えばデジタルサイネージのような不特定多数に対して情報を提供する装置において、コンテンツに対する視聴者の注目度を把握し、当該コンテンツの効果を推定することを、より簡易な構成によって、より高い確度で行うことが可能となる。

【0047】

ここで、デジタルサイネージの一使用態様として、例えば、広告主から提供される広告を表示する使用態様が広く普及している。広告主は、売上向上や知名度向上を目的として広告出稿を行うため、その広告の効果を把握したいという強い要望がある。例えば、広告の効果を把握するための従来の方法として、売上等の広告出稿の結果を示す数値と広告出稿量との相関を取ることで、広告の効果を推定する方法が知られている。あるいは、例えば、モニターによるアンケート結果に基づいて広告の効果を推定する方法も知られている。

【0048】

しかしながら、広告出稿の結果を示す数値と広告出稿量との相関を取る方法では、広告の出稿から一定期間が経過した後の売上等の数値の変化を考慮しないと、当該相関を取ることができないため、広告の効果を早期に見積もることができない。従って、効果の低い広告を出稿し続けることとなる恐れがある。また、アンケート結果に基づいて広告の効果を推定する方法では、モニターがアンケートに誠実に回答していない可能性があり、そのアンケート結果が広告の効果を正しく表しているとは限らない。また、アンケートの実施には多大なコストが掛かることも懸念される。このように、従来、広告出稿による効果を具体的に見積もることは難しかった。

【0049】

かかる事情に対して、本実施の形態では、上述したように、コンテンツに対する視聴者の注目度を把握し、当該コンテンツの効果を推定することを、より簡易な構成によって、より高い確度で行うことが可能となる。また、視聴領域を撮影した画像から検出される視聴者特性に基づいて効果を推定することができるため、より早期に当該効果を見積もることが可能となる。このように、本実施の形態に係る効果推定システム１によれば、コンテンツが広告である場合において、広告出稿の効果を把握したいという広告主の要望に好適に応えることが可能となる。また、広告主が広告出稿の効果をより正確に、より早期に把握できることで、広告主としては、広告出稿の費用対効果を把握した上で、効果の低い広告出稿を抑え、効果の高い広告のみを出稿することが可能となるため、広告主の広告出稿の需要を喚起することも可能となる。

【0050】

実施の形態２．
本開示の実施の形態２について説明する。実施の形態２は、実施の形態１における効果推定装置２０の視聴者特性検出部２０５及び注目度推定部２０７の機能が変更されたものに対応する。その他の事項は実施の形態１と同様であるため、以下の実施の形態２についての説明では、実施の形態１と重複する事項についてはその説明を省略し、実施の形態１と相違する事項について主に説明する。

【0051】

（効果推定装置の構成）
実施の形態２の係る効果推定システムの全体構成、及び情報提供装置１０の構成は、実施の形態１と同様であるため、その詳細な説明を省略する。実施の形態２では、効果推定装置の構成が実施の形態１とは異なる。図５を参照して、実施の形態２に係る効果推定装置の構成について説明する。図５は、実施の形態２に係る効果推定装置２０ａの機能構成を示す機能ブロック図である。なお、説明のため、図５には、図３と同様に、効果推定装置２０ａとともに効果推定システムを構成する情報提供装置１０を併せて図示している。実際には情報提供装置１０と効果推定装置２０ａとは、実施の形態１と同様、ネットワークを介して接続され得るが、簡単のため、図５では当該ネットワークについては図示を省略している。

【0052】

図５を参照すると、効果推定装置２０ａ（本開示における情報処理装置に対応する）は、その機能として、効果推定装置通信部２０１と、視聴者抽出部２０３と、視聴者特性検出部２０５ａと、注目度推定部２０７ａと、注目度記憶部２０９と、を有する。また、視聴者抽出部２０３は、その機能として、人抽出部２１１を有する。効果推定装置通信部２０１、視聴者抽出部２０３、人抽出部２１１、及び注目度記憶部２０９の機能は、実施の形態１におけるこれらの機能と同様であるため、詳細な説明を省略する。

【0053】

視聴者特性検出部２０５ａは、実施の形態１と同様に、撮影画像データに基づいて（すなわち、視聴領域を撮影した画像に基づいて）、生理的特性を含む視聴者特性を検出する。視聴者特性検出部２０５は、視聴者抽出部２０３（すなわち、人抽出部２１１）によって付された識別子を用いて、その抽出された視聴者ごとに、視聴者特性を検出する。

【0054】

本実施の形態では、視聴者特性検出部２０５ａは、その機能として開眼度検出部２２３を有する。開眼度検出部２２３は、視聴領域を撮影した画像に基づいて、視聴者の生理的特性として開眼度を検出する。開眼度検出部２２３が開眼度を検出する方法は限定されず、各種の公知の方法が用いられてよい。一例として、開眼度検出部２２３は、国際公開第２０１７／１５９２１５号に記載の方法を用いて、人の顔を含む画像に基づいて、目の輪郭を検出し、当該輪郭から開眼度を検出することができる。開眼度検出部２２３は、各視聴者に付された識別子を用いて、視聴者ごとに開眼度を検出する。

【0055】

視聴者特性検出部２０５ａ（すなわち、開眼度検出部２２３）は、検出した視聴者特性についての情報（すなわち、開眼度についての情報）を、その視聴者特性（すなわち、開眼度）が検出された視聴者を示す識別子、及び、撮影画像データに含まれる、その視聴者特性（すなわち、開眼度）を検出するための画像が撮像部１０５によって撮影された時刻についての情報と対応付けて、注目度推定部２０７ａに提供する。

【0056】

注目度推定部２０７ａは、視聴者特性検出部２０５ａによって検出された視聴者特性（すなわち、本実施の形態においては開眼度）に基づいて、情報提供装置１０の表示部１０１に表示されたコンテンツに対する注目度を推定する。注目度推定部２０７ａは、上記の視聴者特性（すなわち、開眼度）に対応付けられた視聴者を示す識別子を用いて、視聴者ごとに当該注目度を推定する。開眼度に応じて注目度を推定する方法は、実施の形態１における心拍数を用いる方法と同様であってよい。すなわち、例えば、注目度推定部２０７ａは、視聴者ごとに、コンテンツの視聴開始時と視聴終了時での開眼度の変化量を算出する。当該開眼度の変化量に対して、注目度の高低を定める複数の閾値が予め設定されており、注目度推定部２０７ａは、算出した当該開眼度の変化量を当該閾値と比較することにより、例えば「注目度：低」、「注目度：中」、「注目度：高」といったカテゴリとして注目度を推定する。例えば、注目度推定部２０７ａは、当該開眼度の変化量が第１の閾値未満であれば「注目度：低」と推定し、当該開眼度の変化量が第１の閾値以上第２の閾値未満であれば「注目度：中」と推定し、当該開眼度の変化量が第２の閾値以上であれば「注目度：高」と判断する。ただし、注目度は、その高低を比較可能な形式で推定されればよく、注目度の具体的な形式は限定されない。例えば、注目度は、当該開眼度の変化量に応じた得点として推定されてもよい。なお、注目度推定部２０７ａは、開眼度の変化量ではなく、開眼度の値自体を用いて、当該開眼度の値を閾値と比較することで、同様に注目度を推定してもよい。

【0057】

注目度推定部２０７ａは、効果推定装置通信部２０１から提供された表示実績データに基づいて、推定した注目度に対応するコンテンツ（すなわち、注目度の推定に用いられた視聴者特性（すなわち、開眼度）を検出するための画像が撮像部１０５によって撮影された時刻に、表示部１０１によって表示されていたコンテンツ）を抽出する。そして、注目度推定部２０７ａは、推定した注目度についての情報を、当該注目度に対応する視聴者を特定する情報（例えば、視聴者を示す識別子）、及び、抽出した、注目度に対応するコンテンツを特定する情報（例えば、コンテンツを示す識別子）と対応付けて、注目度記憶部２０９に出力する。注目度記憶部２０９は、これらの情報を互いに対応付けて記憶する。

【0058】

以上、実施の形態２に係る効果推定システムの構成について説明した。なお、効果推定装置２０ａの視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５ａ（開眼度検出部２２３）、及び注目度推定部２０７ａは、例えば、ＣＰＵ又はＤＳＰ等のプロセッサ、並びにメモリ等の記憶素子等が搭載された制御基板によって構成される。当該記憶素子には、例えば当該プロセッサが実行するプログラム、及び当該プロセッサがプログラムを実行した結果得られた情報等が格納される。当該プロセッサが所定のプログラムに従って演算処理を実行することにより、上記の視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５ａ（開眼度検出部２２３）、及び注目度推定部２０７ａの機能が実現される。

【0059】

（効果推定方法の処理手順）
図６を参照して、実施の形態２に係る効果推定方法（本開示における情報処理方法に対応）の処理手順について説明する。図６は、実施の形態２に係る効果推定方法の処理手順を示すフロー図である。図６に示す一連の処理は、図５を参照して説明した、効果推定装置２０ａにおける情報処理方法に対応する。効果推定装置２０ａの視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５ａ（開眼度検出部２２３）、及び注目度推定部２０７ａを構成するプロセッサが所定のプログラムに従って演算処理を実行することにより、図６に示す一連の処理が実行される。各処理の詳細については、図５を参照して既に説明しているため、ここでは詳細な説明を省略する。

【0060】

図６を参照すると、実施の形態２に係る効果推定方法では、まず、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像から、人（視聴者）が抽出される（ステップＳ２０１）。ステップＳ２０１に示す処理は、図５を参照して説明した、視聴者抽出部２０３（人抽出部２１１）によって実行される処理に対応している。ステップＳ２０１に示す処理は、実施の形態１におけるステップＳ１０１に示す処理と同様である。

【0061】

次に、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像に基づいて、ステップＳ２０１に示す処理で抽出された視聴者ごとに、開眼度が検出される（ステップＳ２０３）。ステップＳ２０３に示す処理は、図５を参照して説明した、視聴者特性検出部２０５ａ（開眼度検出部２２３）によって実行される処理に対応している。

【0062】

次に、検出された開眼度に基づいて、情報提供装置１０の表示部１０１に表示されたコンテンツに対する注目度が、視聴者ごとに推定される（ステップＳ２０５）。そして、推定された注目度についての情報が、当該注目度に対応する視聴者を特定する情報、及び当該注目度に対応するコンテンツを特定する情報と、互いに対応付けられて出力される（ステップＳ２０７）。ステップＳ２０５及びステップＳ２０７に示す処理は、図５を参照して説明した、注目度推定部２０７ａによって実行される処理に対応している。

【0063】

以上、実施の形態２に係る効果推定方法の処理手順について説明した。

【0064】

以上説明したように、本実施の形態によれば、実施の形態１における心拍数に代えて、視聴者の生理的特性として開眼度が検出され、当該開眼度に基づいて注目度が推定される。このように、心拍数に代えて開眼度を用いた場合であっても、実施の形態１と同様に、より簡易な構成によって、より高い確度で、コンテンツに対する注目度を推定し、当該コンテンツの効果を推定することが可能となる。なお、視聴者の生理的特性として、実施の形態１のように心拍数を用いるか、実施の形態２のように開眼度を用いるかは、例えば撮像部１０５によって撮影された視聴領域の画像の解像度や明度等に応じて、その生理的特性をより精度よく検出できるものが、適宜選択されてよい。

【0065】

実施の形態３．
本開示の実施の形態３について説明する。実施の形態３は、実施の形態１における効果推定装置２０の視聴者抽出部２０３の機能が変更されたものに対応する。その他の事項は実施の形態１と同様であるため、以下の実施の形態３についての説明では、実施の形態１と重複する事項についてはその説明を省略し、実施の形態１と相違する事項について主に説明する。

【0066】

（効果推定装置の構成）
実施の形態３の係る効果推定システムの全体構成、及び情報提供装置１０の構成は、実施の形態１と同様であるため、その詳細な説明を省略する。実施の形態３では、効果推定装置の構成が実施の形態１とは異なる。図７を参照して、実施の形態３に係る効果推定装置の構成について説明する。図７は、実施の形態３に係る効果推定装置２０ｂの機能構成を示す機能ブロック図である。なお、説明のため、図７には、図３と同様に、効果推定装置２０ｂとともに効果推定システムを構成する情報提供装置１０を併せて図示している。実際には情報提供装置１０と効果推定装置２０ｂとは、実施の形態１と同様、ネットワークを介して接続され得るが、簡単のため、図７では当該ネットワークについては図示を省略している。

【0067】

図７を参照すると、効果推定装置２０ｂ（本開示における情報処理装置に対応する）は、その機能として、効果推定装置通信部２０１と、視聴者抽出部２０３ｂと、視聴者特性検出部２０５と、注目度推定部２０７と、注目度記憶部２０９と、を有する。効果推定装置通信部２０１、視聴者特性検出部２０５と、注目度推定部２０７、及び注目度記憶部２０９の機能は、実施の形態１におけるこれらの機能と同様であるため、詳細な説明を省略する。

【0068】

視聴者抽出部２０３ｂは、撮影画像データに基づいて、視聴領域を撮影した画像から視聴者を抽出する。具体的には、視聴者抽出部２０３ｂは、その機能として、人抽出部２１１及び視聴者特定部２１３を有する。人抽出部２１１の機能は、実施の形態１と略同様である。人抽出部２１１は、視聴領域を撮影した画像に含まれる人を抽出する。人抽出部２１１は、抽出した人についての情報を、視聴者特定部２１３に提供する。

【0069】

視聴者特定部２１３は、撮影画像データに基づいて、人抽出部２１１によって抽出された人の中から、コンテンツの視聴者を特定する。例えば、視聴者特定部２１３は、人抽出部２１１によって抽出された人について、視聴領域での滞留時間を検出し、当該滞留時間が一定時間（例えば１分）以上である人を、コンテンツの視聴者と特定する。そして、視聴者抽出部２０３ｂは、視聴者特定部２１３によって特定された視聴者についての情報を、当該視聴者の各々を特定する情報（例えば、視聴者の各々を示す識別子等）を付した上で、視聴者特性検出部２０５に提供する。

【0070】

ここで、実施の形態１、２では、人抽出部２１１によって抽出された人、すなわち、視聴領域に存在する人を視聴者とみなしていた。しかしながら、実際には、視聴領域に存在している人の中には、コンテンツを視聴していない人（例えば、視聴せずに単に視聴領域を通過する人や、視聴せずに単に視聴領域に滞留している人等）も含まれ得る。これに対して、本実施の形態では、視聴者特定部２１３によって、視聴領域に存在する人（例えば、視聴領域を通過している人や、視聴領域に滞留している人等）の中から視聴者が特定される。従って、視聴者の注目度を、より高い確度で推定することが可能となる。

【0071】

なお、視聴者特定部２１３が視聴者を特定する方法は上記の方法に限定されず、各種の方法が用いられてよい。例えば、視聴者特定部２１３は、撮影画像データに基づいて、人抽出部２１１によって抽出された人の視線又は顔の向きを検出し、当該視線又は顔の向きが情報提供装置１０の表示部１０１に向けられている人を、視聴者と特定してもよい。

【0072】

視聴者特性検出部２０５及び注目度推定部２０７の機能は、実施の形態１と同様である。ただし、本実施の形態では、視聴者特性検出部２０５は、視聴者特定部２１３によって特定された視聴者を対象として、視聴者特性を検出する（本実施の形態においては、視聴者特性として、心拍数検出部２２１が視聴者の心拍数を検出する）。そして、注目度推定部２０７は、当該視聴者ごとに、コンテンツに対する注目度を推定し、推定した注目度についての情報を、当該注目度に対応する視聴者を特定する情報（例えば、視聴者を示す識別子）、及び、注目度に対応するコンテンツを特定する情報（例えば、コンテンツを示す識別子）と対応付けて、注目度記憶部２０９に出力する。注目度記憶部２０９は、これらの情報を互いに対応付けて記憶する。

【0073】

以上、実施の形態３に係る効果推定システムの構成について説明した。なお、効果推定装置２０ｂの視聴者抽出部２０３ｂ（人抽出部２１１及び視聴者特定部２１３）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７は、例えば、ＣＰＵ又はＤＳＰ等のプロセッサ、並びにメモリ等の記憶素子等が搭載された制御基板によって構成される。当該記憶素子には、例えば当該プロセッサが実行するプログラム、及び当該プロセッサがプログラムを実行した結果得られた情報等が格納される。当該プロセッサが所定のプログラムに従って演算処理を実行することにより、上記の視聴者抽出部２０３ｂ（人抽出部２１１及び視聴者特定部２１３）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７の機能が実現される。

【0074】

（効果推定方法の処理手順）
図８を参照して、実施の形態３に係る効果推定方法（本開示における情報処理方法に対応する）の処理手順について説明する。図８は、実施の形態３に係る効果推定方法の処理手順を示すフロー図である。図８に示す一連の処理は、図７を参照して説明した、効果推定装置２０ｂにおける情報処理方法に対応する。効果推定装置２０ｂの視聴者抽出部２０３ｂ（人抽出部２１１及び視聴者特定部２１３）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７を構成するプロセッサが所定のプログラムに従って演算処理を実行することにより、図８に示す一連の処理が実行される。各処理の詳細については、図７を参照して既に説明しているため、ここでは詳細な説明を省略する。

【0075】

図８を参照すると、実施の形態３に係る効果推定方法では、まず、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像から、人が抽出される（ステップＳ３０１）。ステップＳ３０１に示す処理は、図７に示す人抽出部２１１によって実行される処理に対応している。

【0076】

次に、ステップＳ３０１に示す処理で抽出された人の中から、コンテンツの視聴者が特定される（ステップＳ３０３）。ステップＳ３０３に示す処理は、図７を参照して説明した、視聴者特定部２１３によって実行される処理に対応している。

【0077】

次に、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像に基づいて、ステップＳ３０３に示す処理で特定された視聴者ごとに、心拍数が検出される（ステップＳ３０５）。ステップＳ３０５に示す処理は、図７を参照して説明した、視聴者特性検出部２０５（心拍数検出部２２１）によって実行される処理に対応している。ステップＳ３０５に示す処理は、実施の形態１におけるステップＳ１０３に示す処理と同様である。

【0078】

次に、検出された心拍数に基づいて、情報提供装置１０の表示部１０１に表示されたコンテンツに対する注目度が、視聴者ごとに推定される（ステップＳ３０７）。そして、推定された注目度についての情報が、当該注目度に対応する視聴者を特定する情報、及び当該注目度に対応するコンテンツを特定する情報と、互いに対応付けられて出力される（ステップＳ３０９）。ステップＳ３０７及びステップＳ３０９に示す処理は、図７を参照して説明した、注目度推定部２０７によって実行される処理に対応している。ステップＳ３０７及びステップＳ３０９に示す処理は、実施の形態１におけるステップＳ１０５及びステップＳ１０７に示す処理と同様である。

【0079】

以上、実施の形態３に係る効果推定方法の処理手順について説明した。

【0080】

以上説明したように、本実施の形態によれば、コンテンツの視聴者をより確実に特定した上で、当該視聴者を対象として注目度が推定される。従って、注目度、ひいてはコンテンツの効果を、より高い確度で推定することが可能となる。

【0081】

実施の形態４．
本開示の実施の形態４について説明する。実施の形態４は、実施の形態１における視聴者特性検出部２０５の機能が変更されたものに対応する。その他の事項は実施の形態１と同様であるため、以下の実施の形態４についての説明では、実施の形態１と重複する事項についてはその説明を省略し、実施の形態１と相違する事項について主に説明する。なお、実施の形態４は、実施の形態２における視聴者特性検出部２０５ａの機能が変更されたものとして構成されてもよい。すなわち、以下の実施の形態４の説明において、実施の形態１に係る各機能（例えば、心拍数に基づいて注目度を推定する機能）が、実施の形態２に係る各機能（例えば、開眼度に基づいて注目度を推定する機能）に置き換えられてもよい。

【0082】

（効果推定装置の構成）
実施の形態４の係る効果推定システムの全体構成、及び情報提供装置１０の構成は、実施の形態１と同様であるため、その詳細な説明を省略する。実施の形態４では、効果推定装置の構成が実施の形態１とは異なる。図９を参照して、実施の形態４に係る効果推定装置の構成について説明する。図９は、実施の形態４に係る効果推定装置２０ｃの機能構成を示す機能ブロック図である。なお、説明のため、図９には、図３と同様に、効果推定装置２０ｃとともに効果推定システムを構成する情報提供装置１０を併せて図示している。実際には情報提供装置１０と効果推定装置２０ｃとは、実施の形態１と同様、ネットワークを介して接続され得るが、簡単のため、図９では当該ネットワークについては図示を省略している。

【0083】

図９を参照すると、効果推定装置２０ｃ（本開示における情報処理装置に対応する）は、その機能として、効果推定装置通信部２０１と、視聴者抽出部２０３と、視聴者特性検出部２０５ｃと、注目度推定部２０７ｃと、注目度記憶部２０９ｃと、を有する。また、視聴者抽出部２０３は、その機能として、人抽出部２１１を有する。効果推定装置通信部２０１、視聴者抽出部２０３、及び人抽出部２１１の機能は、実施の形態１におけるこれらの機能と同様であるため、詳細な説明を省略する。

【0084】

視聴者特性検出部２０５ｃは、実施の形態１と同様に、撮影画像データに基づいて（すなわち、視聴領域を撮影した画像に基づいて）、生理的特性を含む視聴者特性を検出する。視聴者特性検出部２０５ｃは、視聴者抽出部２０３（すなわち、人抽出部２１１）によって付された識別子を用いて、その抽出された視聴者ごとに、視聴者特性を検出する。

【0085】

視聴者特性検出部２０５ｃは、その機能として、心拍数検出部２２１と、性別検出部２２５と、年齢検出部２２７と、を有する。心拍数検出部２２１は、視聴領域を撮影した画像に基づいて、視聴者の心拍数を検出する。心拍数検出部２２１の機能は実施の形態１と同様である。性別検出部２２５は、視聴領域を撮影した画像に基づいて、視聴者の性別を検出する。年齢検出部２２７は、視聴領域を撮影した画像に基づいて、視聴者の年齢を検出する。年齢は、具体的な数値として検出されてもよいし、「子ども」、「成人」、「高齢者」等の年齢層として検出されてもよい。この際、心拍数検出部２２１、性別検出部２２５、及び年齢検出部２２７は、視聴者抽出部２０３（すなわち、人抽出部２１１）によって付された識別子を用いて、その抽出された視聴者ごとに、心拍数、性別、及び年齢をそれぞれ検出する。このように、視聴者特性検出部２０５ｃは、視聴者特性として、当該視聴者ごとに、その心拍数、性別、及び年齢を検出する機能を有する。

【0086】

なお、性別検出部２２５が視聴領域を撮影した画像に基づいて視聴者の性別を検出する処理、及び年齢検出部２２７が視聴領域を撮影した画像に基づいて視聴者の年齢を検出する処理の具体的な方法は限定されず、各種の公知の画像解析技術が用いられてよい。例えば、性別検出部２２５及び年齢検出部２２７は、視聴領域を撮影した画像に含まれる視聴者の顔画像から、性別及び年齢に関係する顔の特徴量を抽出し、当該特徴量に基づいて性別及び年齢を検出することができる。

【0087】

視聴者特性検出部２０５ｃ（すなわち、心拍数検出部２２１、性別検出部２２５、及び年齢検出部２２７）は、検出した視聴者特性についての情報（すなわち、心拍数、性別、及び年齢についての情報）を、その視聴者特性（すなわち、心拍数、性別、及び年齢）が検出された視聴者を示す識別子、及び、撮影画像データに含まれる、その視聴者特性（すなわち、心拍数、性別、及び年齢）を検出するための画像が撮像部１０５によって撮影された時刻についての情報と対応付けて、注目度推定部２０７ｃに提供する。

【0088】

注目度推定部２０７ｃは、視聴者特性検出部２０５ｃによって検出された視聴者特性のうち、心拍数に基づいて、情報提供装置１０の表示部１０１に表示されたコンテンツに対する注目度を推定する。注目度推定部２０７ｃは、心拍数に対応付けられた視聴者を示す識別子を用いて、視聴者ごとに当該注目度を推定する。心拍数に基づいて注目度を推定する方法は、実施の形態１と同様であってよい。すなわち、例えば、注目度推定部２０７ｃは、実施の形態１と同様に、心拍数の変化量を算出し、当該心拍数の変化量に基づいて注目度を推定する。

【0089】

注目度推定部２０７ｃは、実施の形態１と同様に、効果推定装置通信部２０１から提供された表示実績データに基づいて、推定した注目度に対応するコンテンツ（すなわち、注目度の推定に用いられた視聴者特性（すなわち、心拍数）を検出するための画像が撮像部１０５によって撮影された時刻に、表示部１０１によって表示されていたコンテンツ）を抽出する。そして、注目度推定部２０７ｃは、推定した注目度についての情報を、当該注目度を推定した視聴者の性別についての情報、当該注目度を推定した視聴者の年齢についての情報、当該注目度に対応する視聴者を特定する情報（例えば、視聴者を示す識別子）、及び、抽出した、注目度に対応するコンテンツを特定する情報（例えば、コンテンツを示す識別子）と対応付けて、注目度記憶部２０９ｃに出力する。

【0090】

注目度記憶部２０９ｃは、ＨＤＤ又はフラッシュメモリ等の不揮発性の記憶装置から構成され、注目度推定部２０７ｃによって推定された注目度を記憶する。具体的には、注目度記憶部２０９ｃは、注目度推定部２０７ｃによって推定された注目度についての情報、当該注目度を推定した視聴者の性別についての情報、当該注目度を推定した視聴者の年齢についての情報、当該注目度に対応する視聴者を特定する情報、及び、当該注目度に対応するコンテンツを特定する情報を、互いに対応付けて記憶する。

【0091】

以上、実施の形態４に係る効果推定システムの構成について説明した。なお、効果推定装置２０ｃの視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５ｃ（心拍数検出部２２１、性別検出部２２５、及び年齢検出部２２７）、及び注目度推定部２０７ｃは、ＣＰＵ又はＤＳＰ等のプロセッサ、並びにメモリ等の記憶素子等が搭載された制御基板によって構成される。当該記憶素子には、例えば当該プロセッサが実行するプログラム、及び当該プロセッサがプログラムを実行した結果得られた情報等が格納される。当該プロセッサが所定のプログラムに従って演算処理を実行することにより、上記の視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５ｃ（心拍数検出部２２１、性別検出部２２５、及び年齢検出部２２７）、及び注目度推定部２０７ｃの機能が実現される。

【0092】

（効果推定方法の処理手順）
図１０を参照して、実施の形態４に係る効果推定方法（本開示における情報処理方法に対応する）の処理手順について説明する。図１０は、実施の形態４に係る効果推定方法の処理手順を示すフロー図である。図１０に示す一連の処理は、図９を参照して説明した、効果推定装置２０ｃにおける情報処理方法に対応する。効果推定装置２０ｃの視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５ｃ（心拍数検出部２２１、性別検出部２２５、及び年齢検出部２２７）、及び注目度推定部２０７ｃを構成するプロセッサが所定のプログラムに従って演算処理を実行することにより、図１０に示す一連の処理が実行される。各処理の詳細については、図９を参照して既に説明しているため、ここでは詳細な説明を省略する。

【0093】

図１０を参照すると、実施の形態４に係る効果推定方法では、まず、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像から、人（視聴者）が抽出される（ステップＳ４０１）。ステップＳ４０１に示す処理は、図９を参照して説明した、視聴者抽出部２０３（人抽出部２１１）によって実行される処理に対応している。ステップＳ４０１に示す処理は、実施の形態１におけるステップＳ１０１に示す処理と同様である。

【0094】

次に、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像に基づいて、ステップＳ４０１に示す処理で抽出された視聴者ごとに、心拍数、性別、及び年齢が検出される（ステップＳ４０３）。ステップＳ４０３に示す処理は、図９を参照して説明した、視聴者特性検出部２０５ｃ（心拍数検出部２２１、性別検出部２２５、及び年齢検出部２２７）によって実行される処理に対応している。

【0095】

次に、検出された心拍数に基づいて、情報提供装置１０の表示部１０１に表示されたコンテンツに対する注目度が、視聴者ごとに推定される（ステップＳ４０５）。そして、推定された注目度についての情報が、当該注目度を推定した視聴者の性別についての情報、当該注目度を推定した視聴者の年齢についての情報、当該注目度に対応する視聴者を特定する情報、及び当該注目度に対応するコンテンツを特定する情報と、互いに対応付けられて出力される（ステップＳ４０７）。ステップＳ４０５及びステップＳ４０７に示す処理は、図９を参照して説明した、注目度推定部２０７ｃによって実行される処理に対応している。

【0096】

以上、実施の形態４に係る効果推定方法の処理手順について説明した。

【0097】

以上説明したように、本実施の形態によれば、視聴者特性として、注目度の推定に用いられる生理的特性（本実施の形態においては心拍数）に加えて、視聴者の性別及び年齢が検出される。そして、推定された注目度についての情報が、これら視聴者の性別及び年齢についての情報と対応付けて出力される。従って、出力された注目度を分析する際に、視聴者の性別及び年齢との相関を分析することができ、コンテンツを表示した効果をより詳細に分析することが可能となる。

【0098】

なお、以上の説明では、視聴者特性として視聴者の性別及び年齢の両方が検出されていたが、本実施の形態はかかる例に限定されない。視聴者特性としては、視聴者の性別及び年齢のいずれか一方のみが検出され、その検出された事項のみが、注目度についての情報と対応付けて出力されてもよい。例えば、コンテンツの特性上、視聴者の性別及び年齢のうちの一方のみが当該コンテンツに対する注目度に影響を及ぼすことが予想される場合には、視聴者特性として、その影響を及ぼすことが予想されるもののみが検出され得る。

【0099】

実施の形態５．
（効果推定システムの全体構成）
本開示の実施の形態５について説明する。図１１を参照して、実施の形態５に係る効果推定システムの全体構成について説明する。図１１は、実施の形態５に係る効果推定システムの全体構成を示すブロック図である。

【0100】

図１１を参照すると、実施の形態５に係る効果推定システム５は、情報提供装置１０と、効果推定装置２０と、コンテンツ配信装置３０と、を備える。効果推定システム５は、情報提供装置１０と効果推定装置２０とコンテンツ配信装置３０とがネットワーク５０を介して通信可能に接続されて構成される。本実施の形態では、効果推定装置２０からコンテンツ配信装置３０に、注目度を推定した結果についての情報が送信される。コンテンツ配信装置３０は、当該注目度に基づいて、情報提供装置１０において表示されるコンテンツを選択し、選択したコンテンツを情報提供装置１０に対して送信する。

【0101】

ここで、図１１に示す情報提供装置１０の構成及び効果推定装置２０の構成は、実施の形態１と同様である。つまり、実施の形態５に係る効果推定システム５は、実施の形態１に係る効果推定システム１に対して、コンテンツ配信装置３０が追加的に設けられたものに対応する。コンテンツ配信装置３０以外の事項は実施の形態１と同様であるため、以下の実施の形態５についての説明では、実施の形態１と重複する事項についてはその説明を省略し、実施の形態１と相違する事項について主に説明する。なお、実施の形態５は、実施の形態２における視聴者特性検出部２０５ａの機能が変更されたものとして構成されてもよい。すなわち、以下の実施の形態５の説明において、実施の形態１に係る各機能（例えば、心拍数に基づいて注目度を推定する機能）が、実施の形態２に係る各機能（例えば、開眼度に基づいて注目度を推定する機能）に置き換えられてもよい。

【0102】

（コンテンツ配信装置の構成）
上記のように、実施の形態５に係る情報提供装置１０の構成及び効果推定装置２０の構成は、実施の形態１と同様であるため、その詳細な説明を省略する。図１２を参照して、実施の形態５に係るコンテンツ配信装置３０の構成について説明する。図１２は、実施の形態５に係るコンテンツ配信装置３０の機能構成を示す機能ブロック図である。なお、説明のため、図１２には、図１１に示す情報提供装置１０及び効果推定装置２０を併せて図示している。ただし、簡単のため、図１２ではネットワーク５０については図示を省略している。

【0103】

図１２を参照すると、コンテンツ配信装置３０は、その機能として、通信部３０１と、コンテンツ記憶部３０３と、コンテンツ選択部３０５と、を有する。なお、他の装置の通信部と区別するため、以下では、便宜的に、通信部３０１をコンテンツ配信装置通信部３０１とも記載する。

【0104】

コンテンツ配信装置通信部３０１は、ネットワーク５０（図１１を参照）を介して情報提供装置１０及び効果推定装置２０との間で各種の情報をやり取りする通信インタフェースである。コンテンツ配信装置通信部３０１は、通信カード又は通信チップ等によって構成される。コンテンツ配信装置通信部３０１は、効果推定装置２０から、注目度を推定した結果についての情報を受信する。当該注目度を推定した結果についての情報は、図３を参照して説明した、実施の形態１に係る注目度推定部２０７が出力する情報である。すなわち、当該注目度を推定した結果についての情報には、注目度推定部２０７によって推定された注目度についての情報、当該注目度に対応する視聴者を特定する情報、及び当該注目度に対応するコンテンツを特定する情報が含まれる。コンテンツ配信装置通信部３０１は、受信した注目度を推定した結果についての情報を、コンテンツ選択部３０５に提供する。また、コンテンツ配信装置通信部３０１は、コンテンツ選択部３０５によって選択されたコンテンツを、情報提供装置１０に対して送信する。

【0105】

コンテンツ記憶部３０３は、ＨＤＤ又はフラッシュメモリ等の不揮発性の記憶装置から構成され、情報提供装置１０において表示される各種のコンテンツを記憶する。例えば、コンテンツが広告である場合であれば、コンテンツ記憶部３０３は、当該広告を示す画像データを記憶する。

【0106】

コンテンツ選択部３０５は、コンテンツ配信装置通信部３０１から提供された注目度を推定した結果についての情報に基づいて、注目度に関する予め定められたルール（以下、コンテンツ選択ルールとも記載する）に従って、コンテンツ記憶部３０３に記憶されているコンテンツの中から、情報提供装置１０に配信するコンテンツを選択する。例えば、コンテンツ選択ルールは、「直近の一定期間（例えば、１週間又は１ヶ月等）で注目度の累計が最も高かったコンテンツを選択する」等である。コンテンツ選択部３０５は、選択したコンテンツを、コンテンツ配信装置通信部３０１を介して情報提供装置１０に対して送信させる。

【0107】

なお、コンテンツ選択部３０５は、ＣＰＵ又はＤＳＰ等のプロセッサ、並びにメモリ等の記憶素子等が搭載された制御基板によって構成される。当該記憶素子には、例えば当該プロセッサが実行するプログラム、及び当該プロセッサがプログラムを実行した結果得られた情報等が格納される。当該プロセッサが所定のプログラムに従って演算処理を実行することにより、上記のコンテンツ選択部３０５の機能が実現される。

【0108】

以上、実施の形態５に係る効果推定システム５の構成について説明した。本実施の形態によれば、推定された注目度を考慮して、情報提供装置１０において表示されるコンテンツが決定される。従って、例えばより注目度が高いコンテンツを優先的に表示する等、より効果的にコンテンツを表示することが可能になる。

【0109】

実施の形態６．
（効果推定システムの全体構成）
本開示の実施の形態６について説明する。図１３を参照して、実施の形態６に係る効果推定システムの全体構成について説明する。図１３は、実施の形態６に係る効果推定システムの全体構成を示すブロック図である。

【0110】

図１３を参照すると、実施の形態６に係る効果推定システム６は、情報提供装置１０と、効果推定装置２０ｄ（本開示の情報処理装置に対応する）と、決済システム４０と、を備える。効果推定システム６は、情報提供装置１０と効果推定装置２０ｄと決済システム４０とがネットワーク５０を介して通信可能に接続されて構成される。

【0111】

ここで、図１３に示す情報提供装置１０の構成は、実施の形態１と同様である。つまり、実施の形態６に係る効果推定システム６は、実施の形態１に係る効果推定システム１に対して、効果推定装置２０に代えて効果推定装置２０ｄが設けられるとともに、決済システム４０がネットワーク５０に追加的に接続されたものに対応する。これら以外の事項は実施の形態１と同様であるため、以下の実施の形態６についての説明では、実施の形態１と重複する事項についてはその説明を省略し、実施の形態１と相違する事項について主に説明する。なお、実施の形態６は、実施の形態２における視聴者特性検出部２０５ａの機能が変更されたものとして構成されてもよい。すなわち、以下の実施の形態６の説明において、実施の形態１に係る各機能（例えば、心拍数に基づいて注目度を推定する機能）が、実施の形態２に係る各機能（例えば、開眼度に基づいて注目度を推定する機能）に置き換えられてもよい。

【0112】

なお、本実施の形態では、情報提供装置１０において表示されるコンテンツは広告であり、当該広告に、当該広告に係る商品又はサービスの料金を割引するクーポンが含まれている。当該クーポンは、例えば、広告に係る画像データとともに「広告を見たことを店頭で告げると料金を割引する」旨の文字を表示することで提供されてもよいし、スマートフォン等のデバイスで読み取り可能な２次元コード、又は非接触通信手段（例えば、ＮＦＣ（Near Field Communication）や音声透かし技術等）を用いて伝送されるデータとして提供されてもよい。

【0113】

決済システム４０は、かかるクーポンが含まれる広告に係る商品又はサービスの決済システムである。決済システム４０は、当該商品又は当該サービスの売上を少なくとも管理するが、その際、当該広告に含まれるクーポンの使用状況も管理する。決済システム４０は、当該クーポンの使用状況についての情報を、効果推定装置２０ｄに送信する。

【0114】

（効果推定装置の構成）
図１４を参照して、実施の形態６に係る効果推定装置２０ｄの構成について説明する。図１４は、実施の形態６に係る効果推定装置２０ｄの機能構成を示す機能ブロック図である。なお、説明のため、図１４には、図１３に示す情報提供装置１０及び決済システム４０を併せて図示している。ただし、簡単のため、図１４ではネットワーク５０については図示を省略している。

【0115】

図１４を参照すると、効果推定装置２０ｄは、その機能として、通信部２０１ｄと、視聴者抽出部２０３と、視聴者特性検出部２０５と、注目度推定部２０７ｄと、注目度記憶部２０９ｄと、を有する。また、視聴者抽出部２０３は、その機能として、人抽出部２１１を有する。また、視聴者特性検出部２０５は、その機能として、心拍数検出部２２１を有する。視聴者抽出部２０３、人抽出部２１１、視聴者特性検出部２０５、及び心拍数検出部２２１の機能は、実施の形態１におけるこれらの機能と同様であるため、詳細な説明を省略する。なお、他の装置の通信部と区別するため、以下では、便宜的に、通信部２０１ｄを効果推定装置通信部２０１ｄとも記載する。

【0116】

効果推定装置通信部２０１ｄは、実施の形態１に係る効果推定装置通信部２０１と同様に、情報提供装置１０から表示実績データ及び撮影画像データを取得する。更に、本実施の形態では、効果推定装置通信部２０１ｄは、決済システム４０から、情報提供装置１０において表示された広告に含まれるクーポンの使用状況についての情報を受信する。効果推定装置通信部２０１ｄは、撮影画像データを視聴者抽出部２０３及び視聴者特性検出部２０５に提供する。視聴者抽出部２０３（すなわち、人抽出部２１１）及び視聴者特性検出部２０５（すなわち、心拍数検出部２２１）は、実施の形態１と同様に、撮影画像データに基づいて、視聴者の抽出処理及び視聴者特性（本実施の形態においては、心拍数）の検出処理を行い、検出した心拍数についての情報を、その視聴者特性（すなわち、心拍数）が検出された視聴者を示す識別子、及び、撮影画像データに含まれる、その視聴者特性（すなわち、心拍数）を検出するための画像が撮像部１０５によって撮影された時刻についての情報と対応付けて、注目度推定部２０７ｄに提供する。一方、効果推定装置通信部２０１ｄは、表示実績データ及びクーポンの使用状況についての情報を、注目度推定部２０７ｄに提供する。

【0117】

注目度推定部２０７ｄは、視聴者特性検出部２０５によって検出された心拍数に基づいて、情報提供装置１０の表示部１０１に表示された広告に対する注目度を、視聴者ごとに推定する。例えば、注目度推定部２０７ｃは、実施の形態１と同様に、心拍数の変化量を算出し、当該心拍数の変化量に基づいて注目度を推定する。また、注目度推定部２０７ｄは、効果推定装置通信部２０１から提供された表示実績データに基づいて、推定した注目度に対応する広告（すなわち、注目度の推定に用いられた視聴者特性（すなわち、心拍数）を検出するための画像が撮像部１０５によって撮影された時刻に、表示部１０１によって表示されていた広告）を特定する。以上の各機能は、実施の形態１に係る注目度推定部２０７の機能と同様である。

【0118】

注目度推定部２０７ｄは、実施の形態１に係る注目度推定部２０７と同様に、推定した注目度についての情報を、当該注目度に対応する視聴者を特定する情報（例えば、視聴者を示す識別子）、及び、特定した、注目度に対応する広告を示す情報（例えば、広告を示す識別子）と対応付けて、注目度記憶部２０９ｄに出力する。その際、本実施の形態では、注目度推定部２０７ｄは、当該注目度に対応する広告に含まれるクーポンの使用状況についての情報も、これらの情報に更に対応付けて出力する。

【0119】

注目度記憶部２０９ｄは、ＨＤＤ又はフラッシュメモリ等の不揮発性の記憶装置から構成され、注目度推定部２０７ｄによって推定された注目度を記憶する。具体的には、注目度記憶部２０９ｄは、注目度推定部２０７ｄによって推定された注目度についての情報、当該注目度に対応する視聴者を特定する情報、当該注目度に対応する広告を特定する情報、及び当該注目度に対応する広告に含まれるクーポンの使用状況についての情報を、互いに対応付けて記憶する。

【0120】

以上、実施の形態６に係る効果推定システム６の構成について説明した。なお、効果推定装置２０ｄの視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７ｄは、ＣＰＵ又はＤＳＰ等のプロセッサ、並びにメモリ等の記憶素子等が搭載された制御基板によって構成される。当該記憶素子には、例えば当該プロセッサが実行するプログラム、及び当該プロセッサがプログラムを実行した結果得られた情報等が格納される。当該プロセッサが所定のプログラムに従って演算処理を実行することにより、上記の視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７ｄの機能が実現される。

【0121】

（効果推定方法の処理手順）
図１５を参照して、実施の形態６に係る効果推定方法（本開示における情報処理方法に対応する）の処理手順について説明する。図１５は、実施の形態６に係る効果推定方法の処理手順を示すフロー図である。図１５に示す一連の処理は、図１４を参照して説明した、効果推定装置２０ｄにおける情報処理方法に対応する。効果推定装置２０ｄの視聴者抽出部２０３（人抽出部２１１）、視聴者特性検出部２０５（心拍数検出部２２１）、及び注目度推定部２０７ｄを構成するプロセッサが所定のプログラムに従って演算処理を実行することにより、図１５に示す一連の処理が実行される。各処理の詳細については、図１４を参照して既に説明しているため、ここでは詳細な説明を省略する。

【0122】

図１５を参照すると、実施の形態６に係る効果推定方法では、まず、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像から、人（視聴者）が抽出される（ステップＳ５０１）。ステップＳ５０１に示す処理は、図１４を参照して説明した、視聴者抽出部２０３（人抽出部２１１）によって実行される処理に対応している。ステップＳ５０１に示す処理は、実施の形態１におけるステップＳ１０１に示す処理と同様である。

【0123】

次に、情報提供装置１０の撮像部１０５によって撮影された視聴領域の画像に基づいて、ステップＳ５０１に示す処理で抽出された視聴者ごとに、心拍数が検出される（ステップＳ５０３）。ステップＳ５０３に示す処理は、図１４を参照して説明した、視聴者特性検出部２０５（心拍数検出部２２１）によって実行される処理に対応している。ステップＳ５０３に示す処理は、実施の形態１におけるステップＳ１０３に示す処理と同様である。

【0124】

次に、検出された心拍数に基づいて、情報提供装置１０の表示部１０１に表示された広告に対する注目度が、視聴者ごとに推定される（ステップＳ５０５）。そして、推定された注目度についての情報が、当該注目度に対応する視聴者を特定する情報、当該注目度に対応する広告を特定する情報、及び当該注目度に対応する広告に含まれるクーポンの使用状況についての情報と、対応付けられて出力される（ステップＳ５０７）。ステップＳ５０５及びステップＳ５０７に示す処理は、図１４を参照して説明した、注目度推定部２０７ｄによって実行される処理に対応している。なお、ステップＳ５０５に示す処理は、実施の形態１におけるステップＳ１０５に示す処理と同様である。

【0125】

以上、実施の形態６に係る効果推定方法の処理手順について説明した。

【0126】

以上説明したように、本実施の形態によれば、コンテンツである広告にクーポンが含まれる場合に、当該クーポンの使用状況についての情報が、推定した注目度と対応付けて出力される。ここで、例えば、クーポンの使用回数が多い場合には、広告に興味を示した視聴者も多いと考えられるため、クーポンの使用状況についての情報は、注目度推定部２０７ｄによって推定された注目度とは別の観点で、広告出稿の効果を示す指標となり得る。従って、注目度推定部２０７ｄによって推定された注目度と、クーポンの使用状況についての情報とを用いて、広告出稿の効果を分析することにより、当該効果をより高い確度で見積もることが可能となる。

【0127】

（変形例、補足等）
以上、添付図面を参照しながら本開示の好適な実施の形態について詳細に説明したが、本開示に係る技術はかかる例に限定されない。本開示の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変形例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。例えば、本開示に係る技術は、以上説明した実施の形態以外にも、以下のような形態を取り得る。

【0128】

例えば、上述した実施の形態１～６において効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄが推定した注目度についての情報を出力する際に、情報提供装置１０の設置場所についての情報、注目度に対応するコンテンツが表示された時間帯についての情報、及び／又は当該時間帯における情報提供装置１０の設置場所の周辺状況についての情報（例えば、気象情報、イベント開催情報、及び／又は混雑情報等）が、当該注目度についての情報と更に対応付けて出力されてもよい。これらの情報を用いることにより、推定された注目度に基づいてコンテンツを表示した効果を分析する際に、情報提供装置１０の設置場所や時間帯、周辺状況まで考慮した、より詳細な分析が可能となる。

【0129】

また、例えば、上述した実施の形態１～６に係る効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄでは、注目度推定部２０７、２０７ａ、２０７ｂ、２０７ｃ、２０７ｄによって推定された注目度についての情報が、注目度記憶部２０９、２０９ｃ、２０９ｄに出力されていたが、本開示はかかる例に限定されない。注目度推定部２０７、２０７ａ、２０７ｂ、２０７ｃ、２０７ｄは、推定した注目度についての情報を、効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄ内の他の構成、又は外部の他の装置に対して出力してもよい。例えば、注目度推定部２０７、２０７ａ、２０７ｂ、２０７ｃ、２０７ｄによって推定された注目度についての情報が、効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄに設けられる表示装置に表示されてもよい。また、例えば、注目度推定部２０７、２０７ａ、２０７ｂ、２０７ｃ、２０７ｄによって推定された注目度についての情報が、外部の記憶装置に記憶されたり、外部の表示装置に表示されたりしてもよい。

【0130】

また、例えば、上述した実施の形態１～６に係る情報提供装置１０において、撮像部１０５を構成するカメラの台数は、任意であってよい。例えば、複数台のカメラによって異なる角度から視聴領域を撮影することにより、その撮影された画像に基づく視聴者抽出部２０３、２０３ｂによる視聴者の抽出処理、及び視聴者特性検出部２０５、２０５ａ、２０５ｃによる視聴者特性の検出処理の精度を向上させることができ、結果的に注目度の推定処理の精度を向上させることが可能となる。ただし、カメラの台数を増加させた場合には設置コストの増加が懸念されるため、撮像部１０５を構成するカメラの台数は、上記の各処理の精度と設置コストとを勘案して、適宜決定されてよい。

【0131】

また、以上説明した実施の形態１～６に係る事項は、可能な範囲で互いに組み合わされてよい。例えば、実施の形態５に係る効果推定装置２０として、実施の形態４に係る効果推定装置２０ｃが用いられてもよい。この場合、推定した注目度についての情報、当該注目度を推定した視聴者の性別についての情報、当該注目度を推定した視聴者の年齢についての情報、当該注目度に対応する視聴者を特定する情報、及び、当該注目度に対応するコンテンツを特定する情報が、互いに対応付けられて、効果推定装置２０ｃからコンテンツ配信装置３０に送信される。そして、コンテンツ配信装置３０では、コンテンツ選択ルールに基づいて情報提供装置１０に配信するコンテンツを選択する際に、視聴者の性別及び／又は年齢まで考慮して、当該コンテンツが選択されてよい。かかる様態によれば、より適切なコンテンツ（例えば、より宣伝効果の高い広告）を情報提供装置１０に配信することが可能となる。

【0132】

また、例えば、実施の形態６に係る効果推定装置２０ｄに対して、実施の形態４に係る効果推定装置２０ｃの視聴者の性別及び年齢の検出機能が実装されてもよい。この場合、推定した注目度についての情報、当該注目度を推定した視聴者の性別についての情報、当該注目度を推定した視聴者の年齢についての情報、当該注目度に対応する視聴者を特定する情報、当該注目度に対応するコンテンツを特定する情報、及びクーポンの使用状況についての情報が、互いに対応付けられて効果推定装置２０ｃから出力されることとなる。かかる態様によれば、推定された注目度を分析する際に、コンテンツの種類、視聴者の性別、視聴者の年齢、及びクーポンの使用状況との相関を分析することができ、コンテンツを表示した効果をより詳細に分析することが可能となる。

【0133】

また、例えば、実施の形態１に係る効果推定装置２０に対して、実施の形態２に係る効果推定装置２０ａの開眼度の検出機能、及び当該開眼度に基づく注目度の推定機能が実装されてもよい。この場合、効果推定装置２０は、心拍数及び開眼度の両方を用いて、注目度を推定することができる。２つの指標を用いて注目度を推定することにより、その推定の精度をより向上させることが可能になる。

【0134】

ここで、以上では、効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄの注目度推定部２０７、２０７ａ、２０７ｂ、２０７ｃ、２０７ｄにおいて注目度についての情報とともに出力される情報として、視聴者を特定する情報、コンテンツを特定する情報、視聴者の性別についての情報、視聴者の年齢についての情報、情報提供装置１０の設置場所についての情報、注目度に対応するコンテンツが表示された時間帯についての情報、当該時間帯における情報提供装置１０の設置場所の周辺状況についての情報、及びクーポンの使用状況についての情報があり得る旨説明したが、これらのうちのどの情報を注目度についての情報とともに出力するかは、効果推定システム１、５、６の設計者又はユーザ等によって、任意に設定可能であってよい。例えば、図１６～図１９に示すような情報の出力が可能である。

【0135】

図１６は、効果推定装置から出力される情報の一例を示す図である。図１６に示す例では、コンテンツを特定する情報（図示する例では、コンテンツを示す識別子）、及び視聴者を特定する情報（図示する例では、視聴者を示す識別子）が、注目度についての情報と対応付けられて出力されている。図１６に示す例では、注目度は、数値ではなく、「低」、「中」、「高」といったカテゴリとして表現されている。なお、図１６に示す情報の出力方法は、実施の形態１で説明した情報の出力方法に対応している。

【0136】

図１７は、効果推定装置から出力される情報の他の例を示す図である。図１７に示す例では、コンテンツを特定する情報（図示する例では、コンテンツを示す識別子）、視聴者を特定する情報（図示する例では、視聴者を示す識別子）、視聴者の性別についての情報、及び視聴者の年齢についての情報が、注目度についての情報と対応付けられて出力されている。図１７に示す例では、注目度は、数値ではなく、「低」、「中」、「高」といったカテゴリとして表現されている。なお、図１７に示す情報の出力方法は、実施の形態４で説明した情報の出力方法に対応している。

【0137】

ここで、注目度推定部２０７、２０７ａ、２０７ｂ、２０７ｃ、２０７ｄは、一部の情報を加工して出力してもよい。どのように情報を加工して出力するかも、効果推定システム１、５、６の設計者又はユーザ等によって、任意に設定可能であってよい。例えば、注目度推定部２０７、２０７ａ、２０７ｂ、２０７ｃ、２０７ｄは、注目度を「低」、「中」、「高」といったカテゴリとして推定した場合に、視聴者を特定する情報に基づいて、注目度の各カテゴリに属する視聴者の人数を算出し、当該人数についての情報を出力してもよい。あるいは、注目度に対応するコンテンツが表示された時間帯についての情報を一緒に出力する場合には、注目度推定部２０７、２０７ａ、２０７ｂ、２０７ｃ、２０７ｄは、ある時間帯の全視聴者数に対する、注目度の各カテゴリに属する視聴者の人数の割合（すなわち、注目度の分布）を、時間帯ごと、視聴者の性別ごと、及び／又は視聴者の年齢（あるいは年齢層）ごとに算出し、当該注目度の分布についての情報を出力してもよい。

【0138】

図１８は、時間帯ごとの注目度の分布が算出される場合における、効果推定装置から出力される情報の一例を示す図である。図１８に示す例では、注目度に対応するコンテンツが表示された時間帯についての情報、コンテンツを特定する情報（図示する例では、コンテンツを示す識別子）、及び時間帯ごとの注目度の分布についての情報が、注目度についての情報と対応付けられて出力されている。図１９は、時間帯ごと、視聴者の性別ごと、及び視聴者の年齢層ごとの注目度の分布が算出される場合における、効果推定装置から出力される情報の一例を示す図である。図１９に示す例では、注目度に対応するコンテンツが表示された時間帯についての情報、コンテンツを特定する情報（図示する例では、コンテンツを示す識別子）、視聴者の性別についての情報、視聴者の年齢についての情報、並びに、時間帯ごと、視聴者の性別ごと、及び視聴者の年齢層ごとの注目度の分布についての情報が、注目度についての情報と対応付けられて出力されている。

【0139】

効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄでは、例えば、以上説明した図１６～図１９に示すような様態で、注目度についての情報が、各種の情報と対応付けられて、注目度記憶部２０９、２０９ｃ、２０９ｄに記憶されてよい。

【0140】

また、上述した実施の形態では、効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄにおいて、視聴者抽出部２０３、２０３ｂが抽出した視聴者と、視聴者特性検出部２０５、２０５ａ、２０５ｃが視聴者特性を検出する視聴者とを対応付けるために、視聴者に付された識別子を用いていたが、本開示はかかる例に限定されない。例えば、視聴者抽出部２０３、２０３ｂが撮影画像データに基づいて視聴者を抽出した後、視聴者特性検出部２０５、２０５ａ、２０５ｃが、当該撮影画像データに含まれる、抽出された視聴者に対応する画像部分に基づいて視聴者特性を検出する（すなわち、視聴者抽出部２０３、２０３ｂ及び視聴者特性検出部２０５、２０５ａ、２０５ｃが、同一の撮影画像データに基づいて連続的に処理を行う）構成としてもよい。この場合、識別子を用いなくても、視聴者特性検出部２０５、２０５ａ、２０５ｃが、視聴者抽出部２０３、２０３ｂによって抽出された視聴者ごとに視聴者特性を検出することが可能となる。また、この場合、視聴者抽出部２０３、２０３ｂから視聴者特性検出部２０５、２０５ａ、２０５ｃに、視聴者を抽出した撮影画像データを提供し、視聴者特性検出部２０５、２０５ａ、２０５ｃが提供された当該撮影画像データに基づき視聴者特性を検出する構成とすることができるので、効果推定装置通信部２０１、２０１ｄから視聴者特性検出部２０５、２０５ａ、２０５ｃに撮影画像データを提供する処理も行われなくてもよい。

【0141】

また、上述した実施の形態では、効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄにおいて、注目度推定部２０７、２０７ａ、２０７ｃ、２０７ｄが、時刻についての情報を用いて、撮影画像データから検出された視聴者特性に基づいて推定された注目度と、表示実績データから抽出されたコンテンツを特定する情報との対応付けを行っていたが、本開示はかかる例に限定されない。例えば、効果推定装置通信部２０１、２０１ｄが情報提供装置１０から撮影画像データを取得した時点で、当該撮影画像データに、その画像が撮像部１０５によって撮影された時刻に表示部１０１に表示されていたコンテンツを特定する情報が付与されていてもよい。この場合、時刻についての情報を用いて対応付けを行わなくても、撮影画像データから検出された視聴者特性に基づいて注目度を推定する際に、当該撮影画像データに付与されたコンテンツを特定する情報から、当該注目度に対応するコンテンツを特定することが可能となる。

【0142】

なお、効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄの内部の演算処理において、各種の情報の対応付けをどのように行うかは、演算処理に係る負荷等を考慮して、効果推定システム１、５、６の設計者等によって適宜設定されてよい。

【0143】

また、効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄは、上述した実施の形態における各機能を実現し得るように構成されればよく、その具体的な装置構成は限定されない。例えば、効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄは、上述した各機能に特化した専用の情報処理装置であってもよいし、ＰＣ又はサーバ等の汎用的な情報処理装置であってもよい。効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄが汎用的な情報処理装置である場合には、当該効果推定装置２０、２０ａ、２０ｂ、２０ｃ、２０ｄの各機能（具体的には、視聴者抽出部２０３、２０３ｂ、視聴者特性検出部２０５、２０５ａ、２０５ｃ、及び注目度推定部２０７、２０７ａ、２０７ｃ、２０７ｄ）を実現するためのコンピュータプログラムを作製し、ＰＣ又はサーバ等の情報処理装置に実装することにより、これらの各機能が実現され得る。当該コンピュータプログラムは、ネットワークを介して配信されてよい。あるいは、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体が提供されてもよい。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリ等である。

【符号の説明】

【0144】

１、５、６ 効果推定システム、１０ 情報提供装置、２０、２０ａ、２０ｂ、２０ｃ、２０ｄ 効果推定装置、３０ コンテンツ配信装置、４０ 決済システム、５０ ネットワーク、１０１ 表示部、１０３ 表示制御部、１０５ 撮像部、１０７ 通信部（情報提供装置通信部）、２０１、２０１ｄ 通信部（効果推定装置通信部）、２０３、２０３ｂ 視聴者抽出部、２０５、２０５ａ、２０５ｃ 視聴者特性検出部、２０７、２０７ａ、２０７ｃ、２０７ｄ 注目度推定部、２０９、２０９ｃ、２０９ｄ 注目度記憶部、２１１ 人抽出部、２１３ 視聴者特定部、２２１ 心拍数検出部、２２３ 開眼度検出部、２２５ 性別検出部、２２７ 年齢検出部、３０１ 通信部（コンテンツ配信装置通信部）、３０３ コンテンツ記憶部、３０５ コンテンツ選択部。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】