ホーム > 特許ランキング > ヴィアゲート株式会社
知財求人 - 知財ポータルサイト「IP Force」
特許7750587インサイト調査システム、インサイト調査方法、及びインサイト調査プログラム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B1)
(11)【特許番号】
(24)【登録日】2025-09-29
(45)【発行日】2025-10-07
(54)【発明の名称】インサイト調査システム、インサイト調査方法、及びインサイト調査プログラム
(51)【国際特許分類】
G06Q 30/0203 20230101AFI20250930BHJP
G06F 3/01 20060101ALI20250930BHJP
【ＦＩ】
G06Q30/0203
G06F3/01 510
【請求項の数】
8
(21)【出願番号】P 2025041958
(22)【出願日】2025-03-16
【審査請求日】2025-04-14
(31)【優先権主張番号】P 2024191244
(32)【優先日】2024-10-30
(33)【優先権主張国・地域又は機関】JP
【新規性喪失の例外の表示】特許法第３０条第２項適用 ＰＲ ＴＩＭＥＳのウェブサイト （１）令和６年３月１８日 ｈｔｔｐｓ：／／ｐｒｔｉｍｅｓ．ｊｐ／ｍａｉｎ／ｈｔｍｌ／ｒｄ／ｐ／００００００００６．０００１１６４９４．ｈｔｍｌ （２）令和６年９月１３日 ｈｔｔｐｓ：／／ｐｒｔｉｍｅｓ．ｊｐ／ｍａｉｎ／ｈｔｍｌ／ｒｄ／ｐ／０００００００１２．０００１１６４９４．ｈｔｍｌ （３）令和６年９月１３日 ｈｔｔｐｓ：／／ｐｒｔｉｍｅｓ．ｊｐ／ｍａｉｎ／ｈｔｍｌ／ｒｄ／ｐ／００００００１２６．００００７１９６３．ｈｔｍｌ （４）令和６年１１月１１日 ｈｔｔｐｓ：／／ｐｒｔｉｍｅｓ．ｊｐ／ｍａｉｎ／ｈｔｍｌ／ｒｄ／ｐ／０００００００１３．０００１１６４９４．ｈｔｍｌ （５）令和７年２月３日 ｈｔｔｐｓ：／／ｐｒｔｉｍｅｓ．ｊｐ／ｍａｉｎ／ｈｔｍｌ／ｒｄ／ｐ／０００００００１７．０００１１６４９４．ｈｔｍｌ
【早期審査対象出願】
(73)【特許権者】
【識別番号】523126630
【氏名又は名称】ヴィアゲート株式会社
(74)【代理人】
【識別番号】100205006
【弁理士】
【氏名又は名称】板東 雄二郎
(74)【代理人】
【識別番号】100222117
【弁理士】
【氏名又は名称】鬼鞍 信太郎
(72)【発明者】
【氏名】新冨 健太
(72)【発明者】
【氏名】渡辺 寛紀
(72)【発明者】
【氏名】河相 光孝
【審査官】加舎 理紅子
(56)【参考文献】
【文献】国際公開第２０２３／１１２７４５（ＷＯ，Ａ１）
【文献】特開２０１０－２２４７１５（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｑ １０／００ － ９９／００
Ｇ０６Ｆ ３／０１
(57)【特許請求の範囲】
【請求項1】
動画に対する視聴者のインサイトを調査するインサイト調査システムであって、前記動画を表示し、
前記視聴者が前記動画を見たときの顔を撮影することにより、前記視聴者が前記動画を見たときの視線情報又は表情情報を取得し、
前記視線情報又は表情情報を解析することにより、前記動画の中で前記視聴者の注目度が高かった時間に対応する注目シーンを特定し、
前記注目シーンをＡＩに入力することにより、前記注目シーンに関する質問を生成し、
前記質問を表示し、
前記質問に対する回答を前記視聴者から受付ける、
インサイト調査システム。
【請求項2】
前記質問及び前記回答は、チャット形式で行う、請求項１に記載のインサイト調査システム。
【請求項3】
前記質問とともに、前記注目シーンを示す画像を表示する、請求項１に記載のインサイト調査システム。
【請求項4】
前記注目シーンの特徴を示す言葉を生成し、前記質問は、前記特徴を示す言葉を含む、
請求項１に記載のインサイト調査システム。
【請求項5】
前記質問は、メイン質問とフォロー質問により構成される、請求項１に記載のインサイト調査システム。
【請求項6】
前記質問を生成する際に用いるべき質問モデルの選択を前記視聴者から受付け、前記質問モデルに対して前記注目シーンに対応する動画を入力することにより、前記質問を生成する、
請求項１に記載のインサイト調査システム。
【請求項7】
動画に対する視聴者のインサイトを調査するインサイト調査システムが実行するインサイト調査方法であって、前記動画を表示し、
前記視聴者が前記動画を見たときの顔を撮影することにより、前記視聴者が前記動画を見たときの視線情報又は表情情報を取得し、
前記視線情報又は表情情報を解析することにより、前記動画の中で前記視聴者の注目度が高かった時間に対応する注目シーンを特定し、
前記注目シーンをＡＩに入力することにより、前記注目シーンに関する質問を生成し、
前記質問を表示し、
前記質問に対する回答を前記視聴者から受付ける、
インサイト調査方法。
【請求項8】
請求項７に記載のインサイト調査方法を、インサイト調査システムに実行させるインサイト調査プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、インサイト調査システム、インサイト調査方法、及びインサイト調査プログラムに関する。
【背景技術】
【0002】
コロナ禍の影響によって社会生活の大部分においてオンライン化（換言すれば、デジタルトランスフォーメーション（ＤＸ）化）が加速度的に現在進んできている。特に、マーケティング分野においては、デジタルマーケティングが紙媒体等を用いた従来のマーケティングよりも主流となっている。デジタルマーケティングの分野においては、ＥＣサイトによる販売に加えて、各種ポータルサイト上に広告用コンテンツ（画像や動画等）を表示したり、ＹｏｕＴｕｂｅ（登録商標）等の動画プラットフォーム上に広告用コンテンツをアップしたりする手法が、現在主流となりつつある。
【0003】
従来、広告評価システムでは、広告用コンテンツで紹介された商品をユーザーが実際に購入したかどうかの販売実績に応じて、当該コンテンツの効果が評価されていた。このため、当該広告評価システムでは、広告対象の商品の実際の販売実績が未だない段階では、広告用コンテンツを評価することはできなかった。その一方で、商品についてのデジタルマーケティングを行う企業側では、広告用コンテンツのローンチ前に、当該コンテンツに関する詳細なインサイトを把握しておきたい、とのニーズが存在する。ここで、「インサイト」とは、顧客のデータやフィードバックを分析して洗練された形で提示される、顧客の潜在的ニーズ、感情、動機、価値観、行動パターンや傾向に関する深い理解を意味する。
【0004】
特許文献１および特許文献２には、上記企業側のニーズに対応すべく、人がコンテンツを見たときの生体情報（視線や表情等）に基づいて、当該コンテンツに対する消費者のインサイトを解析するシステムが開示されている。具体的には、特許文献１はＣＭ等の動画のコンテンツを、特許文献２はＷｅｂページ等の静止画のコンテンツを、それぞれ対象としている。
【先行技術文献】
【特許文献】
【0005】
【文献】特許第７３９８８５３号
【文献】特許第７３９８８５４号
【発明の概要】
【発明が解決しようとする課題】
【0006】
しかしながら、前記特許文献では、人がコンテンツを見たときの生体情報に基づく消費者のインサイトは分かるものの、更に深堀りした情報を得ることは難しい。例えば、当該コンテンツの中で何らかのシーンやオブジェクトに対して消費者の注目度や興味度が高いということが判明した場合に、マーケティングの視点からすると、その理由を知ることでコンテンツの改善等に役立てたいと考えるが、そこまでは至っていなかった。インサイト調査として、より有用な価値提供を行うには、消費者が何に注目し興味を持ったかのみならず、その理由や消費者の生活環境等も含むバックグラウンドを深く理解することが重要である。
【0007】
本開示は、コンテンツに対するインサイト調査において、生体情報だけでは分からない情報を明らかにすることを目的とする。
【課題を解決するための手段】
【0008】
本開示の一態様に係るインサイト調査システムは、コンテンツに対するユーザーのインサイトを調査するインサイト調査システムであって、前記コンテンツを表示し、前記ユーザーが前記コンテンツを見たときの生体情報を取得し、前記生体情報に基づいて、前記コンテンツの中で前記ユーザーが注目した注目箇所を特定し、前記注目箇所に関する質問を生成し、前記質問を表示し、前記ユーザーから前記質問に対する回答を受付け、前記回答に基づいて、前記インサイトの調査結果を出力する。
【発明の効果】
【0009】
本開示によれば、コンテンツに対するインサイト調査において、生体情報だけでは分からない情報を明らかにすることができる。
【図面の簡単な説明】
【0010】
【図1】インサイト調査システムの概要
【図2】視聴者端末のハードウェア構成
【図3】サーバのハードウェア構成
【図4】企業側端末のハードウェア構成
【図5】インサイト調査システムが実行する処理の概要
【図6】インタビューの設定画面１：ホーム
【図7】インタビューの設定画面２：ブランド情報登録
【図8】インタビューの設定画面３：ブランド情報閲覧
【図9】インタビューの設定画面４：企業情報登録
【図10】インタビューの設定画面５Ａ：インタビュー作成Ａ
【図11】インタビューの設定画面５Ｂ：インタビュー作成Ｂ
【図12】インタビューの設定画面５Ｃ：インタビュー作成Ｃ
【図13】インタビューの概要
【図14】質問モデルの一覧
【図15】インタビューの例１：メイン質問とフォロー質問
【図16】インタビューの例２：コンテンツの一部を冒頭に表示
【図17】インタビュー結果画面：ホーム（トップ）
【図18】インタビュー結果画面：クラスタリング結果
【図19】インタビュー結果画面：クラスターの特徴
【図20】インタビュー結果画面：テーブルデータのダウンロード
【図21】インタビュー結果画面：クラスターの属性分布
【図22】インタビュー結果画面：動機・シーン・アクション（樹形図）
【図23】インタビュー結果画面：動機・シーン・アクション（サンバースト図）
【図24】インタビュー結果画面：動機・シーン・アクション（属性ごとの分析結果）
【図25】インタビュー結果画面：動機・シーン・アクション（組み合わせの出現回数／ラベル別の詳細情報）
【図26】インタビュー結果画面：動機・シーン・アクション（ユーザー情報確認）
【図27】インタビュー結果画面：ユーザー一覧
【図28】インタビュー結果画面：各ユーザーの詳細情報
【図29】インタビュー結果画面：各ユーザーのインタビューの内容
【発明を実施するための形態】
【0011】
〔定義〕
本実施形態に係る用語の定義は、次の通りである。「インサイト」とは、顧客のデータやフィードバックを分析して洗練された形で提示される、顧客の潜在的ニーズ、感情、動機、価値観、行動パターンや傾向に関する深い理解を意味する。「コンテンツ」とは、人が見るために作成された画像や動画等であり、例えば、ＥＣサイト上のＷｅｂページ、各種ポータルサイト上の広告、ＹｏｕＴｕｂｅ（登録商標）等の動画プラットフォーム上における広告等を含む。「視聴者」「ユーザー」とは、コンテンツを見る人であり、コンテンツが動画の場合は視聴者、コンテンツがＷｅｂページの場合は閲覧者を意味し、インサイト調査の被験者となる一般消費者の代表を意味する。「操作者」とは、インサイト調査を発注する企業の担当者や、インサイト調査を受注して実施する企業の担当者等を意味する。「生体情報」とは、人がコンテンツを見ているときの視線や表情等を計測して得られる、視線情報や表情情報等を意味する。
本実施形態に係る用語の定義は、次の通りである。「インサイト」とは、顧客のデータやフィードバックを分析して洗練された形で提示される、顧客の潜在的ニーズ、感情、動機、価値観、行動パターンや傾向に関する深い理解を意味する。「コンテンツ」とは、人が見るために作成された画像や動画等であり、例えば、ＥＣサイト上のＷｅｂページ、各種ポータルサイト上の広告、ＹｏｕＴｕｂｅ（登録商標）等の動画プラットフォーム上における広告等を含む。「視聴者」「ユーザー」とは、コンテンツを見る人であり、コンテンツが動画の場合は視聴者、コンテンツがＷｅｂページの場合は閲覧者を意味し、インサイト調査の被験者となる一般消費者の代表を意味する。「操作者」とは、インサイト調査を発注する企業の担当者や、インサイト調査を受注して実施する企業の担当者等を意味する。「生体情報」とは、人がコンテンツを見ているときの視線や表情等を計測して得られる、視線情報や表情情報等を意味する。
【0012】
〔システムの概要〕
以下、本実施形態に係るインサイト調査システム１について図面を参照しながら説明する。図１は、本実施形態に係るインサイト調査システム１の構成の一例を示す図である。図１に示すように、インサイト調査システム１は、視聴者端末２ａ，２ｂと、サーバ３と、企業側端末４とを備える。これらは通信ネットワーク８に接続されている。視聴者端末２ａ，２ｂの各々は、通信ネットワーク８を介してサーバ３に通信可能に接続されている。企業側端末４は、通信ネットワーク８を介してサーバ３に通信可能に接続されている。通信ネットワーク８は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ(Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネット、無線コアネットワークのうちの少なくとも一つによって構成されている。
以下、本実施形態に係るインサイト調査システム１について図面を参照しながら説明する。図１は、本実施形態に係るインサイト調査システム１の構成の一例を示す図である。図１に示すように、インサイト調査システム１は、視聴者端末２ａ，２ｂと、サーバ３と、企業側端末４とを備える。これらは通信ネットワーク８に接続されている。視聴者端末２ａ，２ｂの各々は、通信ネットワーク８を介してサーバ３に通信可能に接続されている。企業側端末４は、通信ネットワーク８を介してサーバ３に通信可能に接続されている。通信ネットワーク８は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ(Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネット、無線コアネットワークのうちの少なくとも一つによって構成されている。
【0013】
視聴者端末２ａは、視聴者Ｖａに関連付けられた端末であって、視聴者Ｖａによって操作される。視聴者端末２ｂは、視聴者Ｖｂに関連付けられた端末であって、視聴者Ｖｂによって操作される。尚、本実施形態では、説明の便宜上、視聴者端末２ａ，２ｂを視聴者端末２と総称する場合がある。同様に、視聴者Ｖａ，Ｖｂを視聴者Ｖと総称する場合がある。また、本実施形態では、多数の視聴者に関連付けられた多数の視聴者端末２がインサイト調査システム１に設けられているが、説明の便宜上、多数の視聴者端末のうちの２台の視聴者端末２ａ，２ｂのみが図１では図示されている。視聴者端末２の種類は特に限定されるものではなく、視聴者端末２は、例えば、スマートフォン、パーソナルコンピュータ、タブレット又はウェアラブルデバイス（例えば、ヘッドマウントディスプレイやＡＲディスプレイ）等であってもよい。
【0014】
〔視聴者端末の構成〕
次に、図２を参照して、視聴者端末２のハードウェア構成について以下に説明する。図２は、視聴者端末２のハードウェア構成の一例を示す図である。図２に示すように、視聴者端末２は、制御部２０と、記憶装置２１と、撮像部２２と、通信部２３と、入力操作部２４と、表示部２５と、スピーカ２６と、ＲＴＣ（Ｒｅａｌ Ｔｉｍｅ Ｃｌｏｃｋ）２８とを備える。視聴者端末２を構成するこれらの要素は通信バス２９に接続されている。
次に、図２を参照して、視聴者端末２のハードウェア構成について以下に説明する。図２は、視聴者端末２のハードウェア構成の一例を示す図である。図２に示すように、視聴者端末２は、制御部２０と、記憶装置２１と、撮像部２２と、通信部２３と、入力操作部２４と、表示部２５と、スピーカ２６と、ＲＴＣ（Ｒｅａｌ Ｔｉｍｅ Ｃｌｏｃｋ）２８とを備える。視聴者端末２を構成するこれらの要素は通信バス２９に接続されている。
【0015】
制御部２０は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令（プログラム）を記憶するように構成されている。例えば、メモリは、各種プログラム等が格納されたＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やプロセッサにより実行される各種プログラム等が格納される複数ワークエリアを有するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等から構成される。プロセッサは、例えば、ＣＰＵ(Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ)、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）及びＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）のうちの少なくとも一つにより構成される。ＣＰＵは、複数のＣＰＵコアによって構成されてもよい。ＧＰＵは、複数のＧＰＵコアによって構成されてもよい。プロセッサは、記憶装置２１又はＲＯＭに組み込まれた各種プログラムから指定されたプログラムをＲＡＭ上に展開し、ＲＡＭとの協働で各種処理を実行するように構成されてもよい。
【0016】
記憶装置２１は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、フラッシュメモリ等の記憶装置（ストレージ）であって、プログラムや各種データを格納するように構成されている。撮像部２２は、撮影を通じて、視聴者端末２の周辺環境を示す映像データを取得するように構成されている。特に、撮像部２２は、撮影を通じて視聴者端末２の周辺環境を示す画像データ若しくは映像データを生成するように構成されたカメラであって、イメージセンサ（例えば、ＣＣＤセンサやＣＭＯＳセンサ等）と、イメージセンサ駆動処理回路とを備える。本実施形態では、制御部２０は、撮像部２２によって取得された映像データに基づいて、視聴者Ｖの視線の変化を検出する視線トラッキング部として機能する。さらに、制御部２０は、当該映像データに基づいて視聴者Ｖの表情の変化を検出する表情トラッキング部として機能する。
【0017】
通信部２３は、通信ネットワーク８に接続された外部装置と通信するための無線通信モジュール及び／又は有線通信モジュールを備えている。無線通信モジュールは、基地局や無線ＬＡＮルータ等の外部機器と無線通信するように構成され、送受信アンテナと、無線送受信回路とを備える。無線通信モジュールは、Ｗｉ－ＦｉやＢｌｕｅｔｏｏｔｈ等の近距離無線通信規格に対応した無線通信モジュールであってもよいし、ＳＩＭ（Ｓｕｂｓｃｒｉｂｅｒ Ｉｄｅｎｔｉｔｙ Ｍｏｄｕｌｅ）を用いた第Ｘ世代移動体通信システム（例えば、ＬＴＥ等の第４世代移動通信システム）に対応する無線通信モジュールであってもよい。
【0018】
入力操作部２４は、例えば、表示部２５の映像表示ディスプレイに重ねて配置されたタッチパネル、マウス、及び／又はキーボードであって、視聴者Ｖの入力操作を受け付けると共に、当該入力操作に応じた操作信号を生成するように構成されている。表示部２５は、例えば、映像表示ディスプレイと、当該映像表示ディスプレイを駆動制御する映像表示回路とによって構成される。表示部２５は、動画が表示される表示画面２７を有する。
【0019】
スピーカ２６は、動画に含まれる音声データに基づいて動画の音声を外部に向けて出力するように構成されている。ＲＴＣ２８は、現在時刻を示す情報を取得するように構成されている。
【0020】
図１に戻ると、サーバ３は、通信ネットワーク８を介して視聴者端末２及び企業側端末４に通信可能に接続されている。サーバ３は、通信ネットワーク８を介して複数の視聴者端末２の各々に動画データを送信すると共に、企業側端末４に注視点ヒートマップが動画に重畳された合成動画を送信する。サーバ３は、複数のサーバによって構成されてもよい。サーバ３は、ＷＥＢアプリケーションとしてインサイト調査アプリケーションを提供するように構成されたＷＥＢサーバとして機能する。この点において、サーバ３は、インサイト調査画面を企業側端末４のＷＥＢブラウザに表示するためのデータ（例えば、ＨＴＭＬファイル、ＣＳＳファイル、画像や映像ファイル、プログラムファイル等）を送信するように構成されている。このように、サーバ３は、ＳａａＳ（Ｓｙｓｔｅｍ ａｓ ａ Ｓｅｒｖｉｃｅ）を提供するためのサーバとして機能している。サーバ３は、オンプレミスで構築されてもよいし、クラウドサーバであってもよい。また、サーバ３は、複数の動画データ、各視聴者Ｖの注視点データ、及び各視聴者Ｖの表情データを管理するデータ管理サーバとして機能する。
【0021】
〔サーバの構成〕
図３を参照して、サーバ３のハードウェア構成について以下に説明する。図３は、サーバ３のハードウェア構成の一例を示す図である。図３に示すように、サーバ３は、制御部３０と、記憶装置３１と、入出力インターフェース３２と、通信部３３と、入力操作部３４と、表示部３５とを備える。サーバ３を構成するこれらの要素は通信バス３６に接続されている。
図３を参照して、サーバ３のハードウェア構成について以下に説明する。図３は、サーバ３のハードウェア構成の一例を示す図である。図３に示すように、サーバ３は、制御部３０と、記憶装置３１と、入出力インターフェース３２と、通信部３３と、入力操作部３４と、表示部３５とを備える。サーバ３を構成するこれらの要素は通信バス３６に接続されている。
【0022】
制御部３０は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令を記憶するように構成されている。特に、メモリには、サーバ３によって実行される一連の処理（インサイト調査方法）をプロセッサに実行させるためのインサイト調査プログラムが記憶されてもよい。メモリは、ＲＯＭ及びＲＡＭにより構成されている。プロセッサは、ＣＰＵ、ＭＰＵ及びＧＰＵのうちの少なくとも一つにより構成される。
【0023】
記憶装置３１は、例えば、ＨＤＤ、ＳＳＤ、フラッシュメモリ等の記憶装置（ストレージ）であって、プログラムや各種データを格納するように構成されている。記憶装置３１には、複数の動画データ、各視聴者Ｖの注視点データ、及び各視聴者Ｖの表情データが保存されている。また、記憶装置３１には、各視聴者Ｖの情報に関連する視聴者情報テーブルおよびインサイト調査アプリケーションを利用する各ユーザーＵに関連するユーザー情報テーブルが保存されている。視聴者情報テーブルは、各視聴者Ｖの属性情報を含む。例えば、視聴者情報テーブルは、各視聴者Ｖの識別情報、性別情報、年代情報、世帯人数情報、住所情報、職業情報のうちの少なくとも一つを含んでもよい。ユーザー情報テーブルは、各ユーザーＵの識別情報、属性情報、ログイン情報等を含んでもよい。
【0024】
入出力インターフェース３２は、外部装置とサーバ３との間の接続を可能とするインターフェースであって、ＵＳＢ規格やＨＤＭＩ（登録商標）規格等の所定の通信規格に応じたインターフェースを含む。通信部３３は、通信ネットワーク８上の外部端末と通信するための各種有線通信モジュールを含んでもよい。入力操作部３４は、例えば、タッチパネル、マウス、及び／又はキーボード等であって、操作者の入力操作を受け付けると共に、操作者の入力操作に応じた操作信号を生成するように構成されている。表示部３５は、例えば、映像表示ディスプレイと映像表示回路とによって構成されている。
【0025】
企業側端末４は、サーバ３によって提供されるインサイト調査アプリケーションを利用するユーザーＵによって操作される端末である。本実施形態では、複数の企業側端末４がインサイト調査システム１に設けられているが（換言すれば、本実施形態では、複数のユーザーＵがインサイト調査アプリケーションを利用しているが）、説明の便宜上、一台の企業側端末４のみが図１では図示されている。
【0026】
〔企業側端末の構成〕
図４を参照して、企業側端末４のハードウェア構成について以下に説明する。図４は、企業側端末４のハードウェア構成の一例を示す図である。図４に示すように、企業側端末４は、例えば、パーソナルコンピュータ、スマートフォン、タブレット又はユーザーＵに装着されたウェアラブルデバイスであってもよい。企業側端末４は、ＷＥＢブラウザを有する。インサイト調査アプリケーションは、企業側端末４のＷＥＢブラウザ上で動作するものとする。企業側端末４は、制御部４０と、記憶装置４１と、入出力インターフェース４２と、通信部４３と、入力操作部４４と、表示部４５とを備える。これらの要素は通信バス４６に接続されている。
図４を参照して、企業側端末４のハードウェア構成について以下に説明する。図４は、企業側端末４のハードウェア構成の一例を示す図である。図４に示すように、企業側端末４は、例えば、パーソナルコンピュータ、スマートフォン、タブレット又はユーザーＵに装着されたウェアラブルデバイスであってもよい。企業側端末４は、ＷＥＢブラウザを有する。インサイト調査アプリケーションは、企業側端末４のＷＥＢブラウザ上で動作するものとする。企業側端末４は、制御部４０と、記憶装置４１と、入出力インターフェース４２と、通信部４３と、入力操作部４４と、表示部４５とを備える。これらの要素は通信バス４６に接続されている。
【0027】
制御部４０は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令（プログラム）を記憶するように構成されている。例えば、メモリは、ＲＯＭ及びＲＡＭにより構成されている。プロセッサは、例えば、ＣＰＵ、ＭＰＵ及びＧＰＵのうちの少なくとも一つにより構成される。
【0028】
記憶装置４１は、例えば、ＨＤＤ、ＳＳＤ、フラッシュメモリ等の記憶装置であって、プログラムや各種データを格納するように構成されている。入出力インターフェース４２は、外部装置と企業側端末４との間の接続を可能とするインターフェース（例えば、ＵＳＢやＨＤＭＩ（登録商標）等）である。通信部４３は、企業側端末４を通信ネットワーク８に接続するように構成されており、無線通信モジュール及び／又は有線通信モジュールを備える。入力操作部４４は、例えば、タッチパネル、マウス、及び／又はキーボード等であって、ユーザーＵの入力操作を受け付けると共に、ユーザーＵの入力操作に応じた操作信号を生成するように構成されている。表示部４５は、例えば、映像表示ディスプレイと映像表示回路とによって構成されている。
【0029】
〔処理の概要〕
図５を参照して、インサイト調査システム１が実行する処理の概要について、以下に説明する。図５は、企業側端末４、サーバ３、視聴者端末２、の間で実行されるシーケンス図を示している。この処理は、大きく分けて、視聴者の生体情報の取得（Ｓ１０１～Ｓ１０５）、インタビューの設定（Ｓ１１１～Ｓ１１２）、インタビューの実施（S１２１～S１２８）、インタビュー結果の出力（Ｓ１３１～Ｓ１３４）、により構成される。また、実線は処理の流れ、点線は情報等の参照先、に対応する。なお、本インサイト調査では、Ｓ１０１～Ｓ１０５やＳ１２１～Ｓ１２８の調査を複数の視聴者（被験者）に対して行った後、そこで得られたデータに基づいてＳ１３１～Ｓ１３４で調査結果を出力するものとする。
図５を参照して、インサイト調査システム１が実行する処理の概要について、以下に説明する。図５は、企業側端末４、サーバ３、視聴者端末２、の間で実行されるシーケンス図を示している。この処理は、大きく分けて、視聴者の生体情報の取得（Ｓ１０１～Ｓ１０５）、インタビューの設定（Ｓ１１１～Ｓ１１２）、インタビューの実施（S１２１～S１２８）、インタビュー結果の出力（Ｓ１３１～Ｓ１３４）、により構成される。また、実線は処理の流れ、点線は情報等の参照先、に対応する。なお、本インサイト調査では、Ｓ１０１～Ｓ１０５やＳ１２１～Ｓ１２８の調査を複数の視聴者（被験者）に対して行った後、そこで得られたデータに基づいてＳ１３１～Ｓ１３４で調査結果を出力するものとする。
【0030】
＃視聴者の生体情報の取得＃
Ｓ１０１において、サーバ３は、通信部３３を用いて、コンテンツを視聴者端末２へ送信する。Ｓ１０２において、視聴者端末２は、通信部２３を用いて、コンテンツをサーバ３から受信し、表示部２５を用いて、そのコンテンツを表示する。これを受けて、視聴者は、表示されたコンテンツを視聴する。Ｓ１０３において、視聴者端末２は、撮像部２２を用いて、視聴者の生体情報（視線情報や表情情報等）を取得し、通信部２３を用いて、その生体情報をサーバ３へ送信する。ここで、生体情報の取得は、例えば特許第７３９８８５３号等に記載の技術を用いればよい。例えば、視聴者端末２の撮像部２２（カメラ）を用いて、コンテンツを視聴中の視聴者の顔を撮影し、その映像を録画（時刻ごとに画像を対応づけて記憶）する。視線情報を取得する場合は、その映像に基づいて、視聴者が時刻ごとにコンテンツのどの部分を注視していたかを解析する。表情情報を取得する場合は、その映像に基づいて、視聴者が時刻ごとにどの様な表情をしていたか（喜怒哀楽等の表情の種類／それら表情の程度）かを解析する。Ｓ１０４において、サーバ３は、通信部３３を用いて、生体情報を視聴者端末２から受信する。Ｓ１０５において、サーバ３は、制御部３０を用いて、生体情報を解析し、記憶装置３１を用いて、その解析結果（例えば、コンテンツに対する視聴者の注目度や興味度の推移や、特に注目度や興味度高かったシーンやオブジェクト等を示す情報等）を保存する。ここで、生体情報の解析は、例えば特許第７３９８８５３号等に記載の技術を用いればよい。例えば、視線情報を解析する場合には、時刻ごとの視線情報に基づいて、視聴者の視線が所定時間以上ある部分に留まったことをもって、それに対応する部分（コンテンツが動画の場合はシーンと領域／コンテンツが静止画の場合は領域）を注目度が高かったものとして、情報を記憶する。表情情報を解析する場合には、時刻ごとの表情情報に基づいて、視聴者の表情の程度（ある種類の表情において／複数種類の表情を総合して）が所定値以上となったことをもって、それに対応する部分（コンテンツが動画の場合はシーンと領域／コンテンツが静止画の場合は領域）を注目度が高かったものとして、情報を記憶する。Ｓ１０５の解析結果は、Ｓ１２２やＳ１３２等で利用される。なお、Ｓ１０１～Ｓ１０５の詳細については、例えば前述の特許文献１や特許文献２に記載の技術を用いればよいため、説明を省略する。
Ｓ１０１において、サーバ３は、通信部３３を用いて、コンテンツを視聴者端末２へ送信する。Ｓ１０２において、視聴者端末２は、通信部２３を用いて、コンテンツをサーバ３から受信し、表示部２５を用いて、そのコンテンツを表示する。これを受けて、視聴者は、表示されたコンテンツを視聴する。Ｓ１０３において、視聴者端末２は、撮像部２２を用いて、視聴者の生体情報（視線情報や表情情報等）を取得し、通信部２３を用いて、その生体情報をサーバ３へ送信する。ここで、生体情報の取得は、例えば特許第７３９８８５３号等に記載の技術を用いればよい。例えば、視聴者端末２の撮像部２２（カメラ）を用いて、コンテンツを視聴中の視聴者の顔を撮影し、その映像を録画（時刻ごとに画像を対応づけて記憶）する。視線情報を取得する場合は、その映像に基づいて、視聴者が時刻ごとにコンテンツのどの部分を注視していたかを解析する。表情情報を取得する場合は、その映像に基づいて、視聴者が時刻ごとにどの様な表情をしていたか（喜怒哀楽等の表情の種類／それら表情の程度）かを解析する。Ｓ１０４において、サーバ３は、通信部３３を用いて、生体情報を視聴者端末２から受信する。Ｓ１０５において、サーバ３は、制御部３０を用いて、生体情報を解析し、記憶装置３１を用いて、その解析結果（例えば、コンテンツに対する視聴者の注目度や興味度の推移や、特に注目度や興味度高かったシーンやオブジェクト等を示す情報等）を保存する。ここで、生体情報の解析は、例えば特許第７３９８８５３号等に記載の技術を用いればよい。例えば、視線情報を解析する場合には、時刻ごとの視線情報に基づいて、視聴者の視線が所定時間以上ある部分に留まったことをもって、それに対応する部分（コンテンツが動画の場合はシーンと領域／コンテンツが静止画の場合は領域）を注目度が高かったものとして、情報を記憶する。表情情報を解析する場合には、時刻ごとの表情情報に基づいて、視聴者の表情の程度（ある種類の表情において／複数種類の表情を総合して）が所定値以上となったことをもって、それに対応する部分（コンテンツが動画の場合はシーンと領域／コンテンツが静止画の場合は領域）を注目度が高かったものとして、情報を記憶する。Ｓ１０５の解析結果は、Ｓ１２２やＳ１３２等で利用される。なお、Ｓ１０１～Ｓ１０５の詳細については、例えば前述の特許文献１や特許文献２に記載の技術を用いればよいため、説明を省略する。
【0031】
＃インタビューの設定＃
Ｓ１１１において、企業側端末４は、入力操作部４４を用いて、インタビューに関する設定を操作者から受付け、通信部４３を用いて、その設定をサーバ３へ送信する。Ｓ１１１の詳細については、図６～図９を用いて後述する。Ｓ１１２において、サーバ３は、通信部３３を用いて、インタビューに関する設定を企業側端末４から受信し、記憶装置３１を用いて、その設定を企業ＩＤ等と対応付けて保存する。Ｓ１１２の設定は、Ｓ１２２等で利用される。
Ｓ１１１において、企業側端末４は、入力操作部４４を用いて、インタビューに関する設定を操作者から受付け、通信部４３を用いて、その設定をサーバ３へ送信する。Ｓ１１１の詳細については、図６～図９を用いて後述する。Ｓ１１２において、サーバ３は、通信部３３を用いて、インタビューに関する設定を企業側端末４から受信し、記憶装置３１を用いて、その設定を企業ＩＤ等と対応付けて保存する。Ｓ１１２の設定は、Ｓ１２２等で利用される。
【0032】
＃インタビューの実施＃
Ｓ１２１において、企業側端末４は、入力操作部４４を用いて、インタビューを実行させるための指示を操作者から受付け、通信部４３を用いて、その指示をサーバ３へ送信する。Ｓ１２１の詳細については、図１０～図１２を用いて後述する。Ｓ１２２において、サーバ３は、通信部３３を用いて、インタビューを実行させるための指示を企業側端末４から受信し、制御部３０を用いて、インタビューの質問を作成する。例えば、視聴者の注目度が高かったシーン／領域について映像を解析し、その対象（人物／動物／それらの表情／植物／物体／天気／背景等）を特定したうえで、その対象に注目したか否か、その対象に注目した理由等を確認するための質問を生成する。Ｓ１２２の詳細については、図１３～図１４を用いて後述する。Ｓ１２３において、サーバ３は、通信部３３を用いて、インタビューの質問を視聴者端末２へ送信する。Ｓ１２４において、視聴者端末２は、通信部２３を用いて、インタビューの質問をサーバ３から受信し、表示部２５を用いて、その質問を表示する。これを受けて、視聴者は、表示された質問に対して回答する。Ｓ１２５において、視聴者端末２は、入力操作部２４を用いて、インタビューの回答を受付け、通信部２３を用いて、その回答をサーバ３へ送信する。Ｓ１２４～Ｓ１２５の詳細については、図１５～図１６を用いて後述する。Ｓ１２６において、サーバ３は、通信部３３を用いて、インタビューの回答を視聴者端末２から受信する。Ｓ１２６において、サーバ３は、制御部３０を用いて、インタビューを終了させるか否か判断する。具体的には、例えば予め設定された全ての質問に対して回答が完了したと判断した場合、インタビューを終了させる。Ｓ１２６でＹＥＳとなった場合、Ｓ１２２に戻る。Ｓ１２６でＮＯとなった場合、Ｓ１２８に進む。Ｓ１２８において、サーバ３は、制御部３０を用いて、インタビューの回答を解析し、記憶装置３１を用いて、その解析結果（回答結果データ）を視聴者ＩＤ等と対応付けて保存する。当該解析を行うには、例えば生成ＡＩ等を利用する場合、予めプロンプトとして「回答に対してテキストマイニングを実行し、得られた情報を所定の基準や形式で整理したうえで出力する。」等といった主旨のものを用意しておき、当該プロンプトを用いてＡＩに回答をインプットすることにより、所望のアウトプットが得られるようにすればよい。Ｓ１２８の解析結果（回答結果データ）は、Ｓ１３２等で利用される。なお、実際のインサイト調査においては、これまでの処理（Ｓ１０１～Ｓ１２８）が複数人の視聴者（被験者／ユーザー）を対象として実行されたうえで、それら複数人の視聴者（被験者／ユーザー）に対応する解析結果（回答結果データ）が収集されるものとする。
Ｓ１２１において、企業側端末４は、入力操作部４４を用いて、インタビューを実行させるための指示を操作者から受付け、通信部４３を用いて、その指示をサーバ３へ送信する。Ｓ１２１の詳細については、図１０～図１２を用いて後述する。Ｓ１２２において、サーバ３は、通信部３３を用いて、インタビューを実行させるための指示を企業側端末４から受信し、制御部３０を用いて、インタビューの質問を作成する。例えば、視聴者の注目度が高かったシーン／領域について映像を解析し、その対象（人物／動物／それらの表情／植物／物体／天気／背景等）を特定したうえで、その対象に注目したか否か、その対象に注目した理由等を確認するための質問を生成する。Ｓ１２２の詳細については、図１３～図１４を用いて後述する。Ｓ１２３において、サーバ３は、通信部３３を用いて、インタビューの質問を視聴者端末２へ送信する。Ｓ１２４において、視聴者端末２は、通信部２３を用いて、インタビューの質問をサーバ３から受信し、表示部２５を用いて、その質問を表示する。これを受けて、視聴者は、表示された質問に対して回答する。Ｓ１２５において、視聴者端末２は、入力操作部２４を用いて、インタビューの回答を受付け、通信部２３を用いて、その回答をサーバ３へ送信する。Ｓ１２４～Ｓ１２５の詳細については、図１５～図１６を用いて後述する。Ｓ１２６において、サーバ３は、通信部３３を用いて、インタビューの回答を視聴者端末２から受信する。Ｓ１２６において、サーバ３は、制御部３０を用いて、インタビューを終了させるか否か判断する。具体的には、例えば予め設定された全ての質問に対して回答が完了したと判断した場合、インタビューを終了させる。Ｓ１２６でＹＥＳとなった場合、Ｓ１２２に戻る。Ｓ１２６でＮＯとなった場合、Ｓ１２８に進む。Ｓ１２８において、サーバ３は、制御部３０を用いて、インタビューの回答を解析し、記憶装置３１を用いて、その解析結果（回答結果データ）を視聴者ＩＤ等と対応付けて保存する。当該解析を行うには、例えば生成ＡＩ等を利用する場合、予めプロンプトとして「回答に対してテキストマイニングを実行し、得られた情報を所定の基準や形式で整理したうえで出力する。」等といった主旨のものを用意しておき、当該プロンプトを用いてＡＩに回答をインプットすることにより、所望のアウトプットが得られるようにすればよい。Ｓ１２８の解析結果（回答結果データ）は、Ｓ１３２等で利用される。なお、実際のインサイト調査においては、これまでの処理（Ｓ１０１～Ｓ１２８）が複数人の視聴者（被験者／ユーザー）を対象として実行されたうえで、それら複数人の視聴者（被験者／ユーザー）に対応する解析結果（回答結果データ）が収集されるものとする。
【0033】
＃インタビュー結果の出力＃
Ｓ１３１において、企業側端末４は、入力操作部４４を用いて、インタビュー結果を出力させるための指示を操作者から受付け、通信部４３を用いて、その指示をサーバ３へ送信する。Ｓ１３２において、サーバ３は、通信部３３を用いて、インタビュー結果を出力させるための指示を企業側端末４から受信し、制御部３０を用いて、インタビュー結果を作成する。Ｓ１３３において、サーバ３は、通信部３３を用いて、インタビュー結果を企業側端末４へ送信する。Ｓ１３４において、企業側端末４は、通信部４３を用いて、インタビュー結果をサーバ３から受信し、表示部４５を用いて、そのインタビュー結果を表示する。Ｓ１３４の詳細については、図１７～図２０を用いて後述する。
Ｓ１３１において、企業側端末４は、入力操作部４４を用いて、インタビュー結果を出力させるための指示を操作者から受付け、通信部４３を用いて、その指示をサーバ３へ送信する。Ｓ１３２において、サーバ３は、通信部３３を用いて、インタビュー結果を出力させるための指示を企業側端末４から受信し、制御部３０を用いて、インタビュー結果を作成する。Ｓ１３３において、サーバ３は、通信部３３を用いて、インタビュー結果を企業側端末４へ送信する。Ｓ１３４において、企業側端末４は、通信部４３を用いて、インタビュー結果をサーバ３から受信し、表示部４５を用いて、そのインタビュー結果を表示する。Ｓ１３４の詳細については、図１７～図２０を用いて後述する。
【0034】
【0035】
図６は、インタビュー設定画面のうち、ホーム画面（トップ画面）に対応するものである。Ｕ１００（画面の左側部分）には、ユーザーＩＤに対応する情報、メニュー等が表示される。デフォルトでは、Ｕ１００のメニューで「ホーム」が選択され、画面の右側部分にＵ１１１が表示される。Ｕ１１１には、調査の一覧が表示され、それぞれ名称やステータス等の情報が表示される。その右側には「調査結果を確認する」ボタンが設けられ、それがクリックされると当該調査結果が表示（出力）される。このクリックが、図５のＳ１３１（インタビューの出力指示）に対応する。
【0036】
図７は、インタビュー設定画面のうち、ブランド情報を登録する際の画面に対応するものである。この画面は、Ｕ１００のメニューで「ブランド情報登録」が選択された場合に表示される。Ｕ１２１には、ブランドごとに、組織名、ブランド名、ブランドメッセージ、ブランドコンセプト、ブランドターゲット、ブランドカテゴリ等の情報を設定するための入力欄が表示される。各入力欄に情報が入力（記載／選択）され、「登録する」ボタンがクリックされると、入力された情報をブランド情報として、ユーザーＩＤと対応付けて、サーバ３の記憶装置３１に記憶（登録／設定）される。なお、設定可能なブランド情報の数としては、原則として１ユーザーＩＤあたり複数を想定しているが、それは所定数／任意数の何れでもよい。
【0037】
図８は、インタビュー設定画面のうち、ブランド情報を閲覧する際の画面に対応するものである。この画面は、Ｕ１００のメニューで「ブランド情報閲覧」が選択された場合に表示される。Ｕ１３１には、登録済のブランド情報の一覧が表示され、それぞれブランド名、企業名等の情報が表示される。その右側には「詳細」ボタンが設けられ、それがクリックされると当該ブランド情報の詳細（各入力欄に入力された全ての情報）が表示される。
【0038】
図９は、インタビュー設定画面のうち、企業情報を登録する際の画面に対応するものである。この画面は、Ｕ１００のメニューで「企業情報登録」が選択された場合に表示される。Ｕ１４１には、企業ごとに、会社名、ホームページＵＲＬ、ミッション、ビジョン、バリュー等の情報を設定するための入力欄が表示される。各入力欄に情報が入力（記載／選択）され、「設定する」ボタンがクリックされると、入力された情報を企業情報として、ユーザーＩＤと対応付けて、サーバ３の記憶装置３１に記憶（登録／設定）される。なお、設定可能な企業情報の数としては、原則として１ユーザーＩＤあたり１つを想定している。
【0039】
【0040】
図１０は、インタビュー設定画面のうち、インタビューを作成する際の画面に対応するものである。この画面は、Ｕ１００のメニューで「インタビューの作成」が選択された場合に表示される。図１０のＵ１５１には、インタビューの目的（調査したいブランド、調査したいユーザー層、調査の種類、インタビューの追加情報：目的の詳細、を含む）、インタビューの設定事項（タイトル、イントロダクションンのボックス数、冒頭に入力する文言、を含む）等の情報を設定するための入力欄が表示される。この画面をスクロールすると、図１１のＵ１５２が表示される。
【0041】
図１１のＵ１５２には、インタビューの設定事項（言語、組織、ブランド、終了日、ターゲットサンプルサイズ、連携オプション、を含む）、シーケンスの設定（デフォルトの質問数、質問※複数設定可、完了ページのメッセージ、を含む）等の情報を設定するための入力欄が表示される。各「質問」をクリックすると、図１２のＵ１５３が表示される。Ｕ１５１～Ｕ１５３の各入力欄に情報が入力（記載／選択）され、「インタビューを作成」ボタンがクリックされると、入力された情報をインタビュー情報として、ユーザーＩＤと対応付けて、サーバ３の記憶装置３１に記憶（登録／設定）される。このクリックが、図５のＳ１２１（インタビューの実行指示）に対応する。
【0042】
図１２のＵ１５３には、当該質問の内容（シーケンス、質問文、回答形式、ブランド、を含む）を入力（記載／選択）することができる。「シーケンスを選択」をクリックすると、質問の種類（メイン質問／フォロー質問）と、質問を作成（生成）する際に用いる質問モデルとを、選択することができる。メイン質問が選択された場合、「質問文」に、後述するメイン質問となる文章を入力することができる。なお、質問としては、単なる定型文のみならず、例えば図５のＳ１０５（生体情報に基づくインサイト調査の解析結果）等を受けて、コンテンツに対する視聴者の注目度／興味度が高かったシーン／エリア等を示すサムネイル等の情報も併せて表示したうえで、それについて深堀りするための質問を設定することもできる。その場合、当該機能のＯＮ／ＯＦＦは、例えば前述した質問モデルの種類や、別途チェックボックスを用いて設定可能とすればよい。また、当該サムネイル等を表示する位置は、例えば当該位置を選択形式で設定可能とすればよい。また、「質問文」において、当該サムネイル等の内容を画像解析により文章化した文言を記載する場合、その位置を文章中で所定の記号等で示せばよい。メイン質問が選択された場合、「回答形式」において、質問に対する回答の形式として、選択式／自由記述式のうち何れかを選択することができる。
【0043】
【0044】
図１３は、インタビューの概要を示す概念図である。本インタビューでは、「メイン質問」と、それに続く複数の「フォロー質問」とを組み合わせて１セットの質問群とし、その質問群を複数セット繰り返すことにより、深堀りインタビューを実施する。メイン質問は、例えば図１２のＵ１５３の「シーケンス」で選択された質問モデルを用いて、「質問文」に入力された内容等に基づいて作成する。フォロー質問は、例えば図１２のＵ１５３の「シーケンス」で選択された質問モデルを用いて、メイン質問に対する回答を受けてＡＩにより生成する。フォロー質問の回数としては、例えば予め設定された回数、回答の待ち状態がタイムアウトとなるまでの回数等とすればよい。時間が実際の質問構成の例は、図に示した通りである。
【0045】
図１４は、質問モデルの一覧を示す表である。メイン質問／フォロー質問ともに、それぞれ異なる複数の質問モデルがある。各質問モデルの概要は、図に記載した通りである。なお、メイン質問の質問モデルは、質問の際に前述したサムネイル等を併せて表示するか否かといった形式等を意味するのに対して、フォロー質問の質問モデルは、ＡＩにより質問を作成する際の学習モデル等を意味する。
【0046】
【0047】
図１５は、インタビューの例１として、メイン質問とフォロー質問の関係性について示したものである。図示したように、メイン質問の後、それに対する回答を受けて、フォロー質問を繰り返している。
【0048】
図１６は、インタビューの例２として、コンテンツの一部を冒頭に表示する場合について示したものである。図示したように、インタビューの冒頭で、コンテンツの中で注目度／興味度が高かったシーンやエリア等を示すサムネイルを表示し、続いて、そのサムネイルに関連するメイン質問をしている。コンテンツがＣＭ等の映像（動画）である場合、コンテンツの中で注目度／興味度が高かったシーンについて、サムネイルを作成すればよい。その中で特に注目度／興味度が高いエリアが分かる場合、その部分を強調表示または拡大表示してもよい。コンテンツがＷｅｂサイト等の画像（静止画）である場合、コンテンツの中で注目度／興味度が高かったエリアについて、強調表示または拡大表示したサムネイルを作成すればよい。コンテンツが映像である場合、当該サムネイルをクリックすると、当該サムネイルに対応する映像（全部またはその前後等の一部）を再生可能としてもよい。メイン質問において、下線部のように、当該サムネイルに対応するコンテンツを、ＡＩ等を用いて解析することにより、当該サムネイルの特徴を示す文章を生成し、当該文言を質問の対象として記載してもよい。当該下線部は、単に「上記サムネイルで示したシーン：ＡＩ解析であなたの注目度が高かったシーン」等の定型文に置き換えてもよい。
【0049】
【0050】
＃結果の概要＃
図１７は、インタビュー結果画面のうち、ホーム（トップ）に対応するものである。この画面（Ｕ２０１）は、図６のＵ１１１で「結果を確認する」ボタンがクリックされた場合に表示される。上部のタブを切り替えることにより、後述する各調査結果が表示される。なお、インタビューの質問モデルにより、タブ内容やタブ数は異なることがある。「クラスタリングの結果を見る」ボタンをクリックすると、調査結果データに基づいてユーザーのクラスタリングを行い、その結果等を表示する。インタビュー単一選択結果表示では、AIインタビュー内で、単一選択式で質問した結果を、グラフ形式で表示する。下部の「インタビュー一覧ボタン」ボタンをクリックすると、図６のＵ１１１（インタビュー選択画面）に戻る。なお、各種ボタンやグラフ表示のうち、データがないものやデータ量が多いもの等は、表示されない場合がある。
図１７は、インタビュー結果画面のうち、ホーム（トップ）に対応するものである。この画面（Ｕ２０１）は、図６のＵ１１１で「結果を確認する」ボタンがクリックされた場合に表示される。上部のタブを切り替えることにより、後述する各調査結果が表示される。なお、インタビューの質問モデルにより、タブ内容やタブ数は異なることがある。「クラスタリングの結果を見る」ボタンをクリックすると、調査結果データに基づいてユーザーのクラスタリングを行い、その結果等を表示する。インタビュー単一選択結果表示では、AIインタビュー内で、単一選択式で質問した結果を、グラフ形式で表示する。下部の「インタビュー一覧ボタン」ボタンをクリックすると、図６のＵ１１１（インタビュー選択画面）に戻る。なお、各種ボタンやグラフ表示のうち、データがないものやデータ量が多いもの等は、表示されない場合がある。
【0051】
＃クラスタリング＃
図１８は、インタビュー結果画面のうち、クラスタリング結果に対応するものである。この画面（Ｕ２１１）は、図１７のＵ２０１で「クラスタリングの結果を見る」ボタンがクリックされた場合に表示される。クラスターとは、データの中で似た特徴を持つユーザーをグループ分けしたものである。インタビューの会話履歴のサマリーに基づき、ユーザーのクラスタリングを行う。クラスターの数は、最適な分類ができるよう、自動的に決定されてもよい。ここでは、回答結果データに基づいて、各ユーザ（視聴者／被験者）をクラスターに分類し、様々な形式で表示する。当該クラスターとは、例えば回答結果データの中で一定数以上出現した言葉や文章（同一のみならず類似のものを含んでもよい）のことであり、似た特徴を持つユーザーを分類するための基準に相当する。当該クラスタリングを行うには、例えば生成ＡＩ等を利用する場合、予めプロンプトとして「回答結果データに対してクラスタリングを実行し、所定の基準や形式で整理したうえで出力する。」等といった主旨のものを用意しておき、当該プロンプトを用いてＡＩに回答結果データをインプットすることにより、所望のアウトプットが得られるようにすればよい。Ｕ２１１Ａは、当該クラスタリング結果を散布図で示している。当該散布図は、会話履歴のサマリーのテキストをベクトル化したものを、次元圧縮により２次元にしたものである。Ｘ軸／Ｙ軸には、それぞれ当該２次元の何れかに対応するものが設定される。各ユーザーは、クラスター毎に色分けして点でプロットされる。各点をクリックすると、それに対応するユーザー情報が表示されるようにしてもよい。Ｕ２１１Ｂは、当該クラスタリング結果を出力する際の処理の状況や進捗等を示している。Ｕ２１１Ｃは、当該クラスタリング結果におけるクラスター毎のユーザーの人数と、その全体に対する割合を示している。
図１８は、インタビュー結果画面のうち、クラスタリング結果に対応するものである。この画面（Ｕ２１１）は、図１７のＵ２０１で「クラスタリングの結果を見る」ボタンがクリックされた場合に表示される。クラスターとは、データの中で似た特徴を持つユーザーをグループ分けしたものである。インタビューの会話履歴のサマリーに基づき、ユーザーのクラスタリングを行う。クラスターの数は、最適な分類ができるよう、自動的に決定されてもよい。ここでは、回答結果データに基づいて、各ユーザ（視聴者／被験者）をクラスターに分類し、様々な形式で表示する。当該クラスターとは、例えば回答結果データの中で一定数以上出現した言葉や文章（同一のみならず類似のものを含んでもよい）のことであり、似た特徴を持つユーザーを分類するための基準に相当する。当該クラスタリングを行うには、例えば生成ＡＩ等を利用する場合、予めプロンプトとして「回答結果データに対してクラスタリングを実行し、所定の基準や形式で整理したうえで出力する。」等といった主旨のものを用意しておき、当該プロンプトを用いてＡＩに回答結果データをインプットすることにより、所望のアウトプットが得られるようにすればよい。Ｕ２１１Ａは、当該クラスタリング結果を散布図で示している。当該散布図は、会話履歴のサマリーのテキストをベクトル化したものを、次元圧縮により２次元にしたものである。Ｘ軸／Ｙ軸には、それぞれ当該２次元の何れかに対応するものが設定される。各ユーザーは、クラスター毎に色分けして点でプロットされる。各点をクリックすると、それに対応するユーザー情報が表示されるようにしてもよい。Ｕ２１１Ｂは、当該クラスタリング結果を出力する際の処理の状況や進捗等を示している。Ｕ２１１Ｃは、当該クラスタリング結果におけるクラスター毎のユーザーの人数と、その全体に対する割合を示している。
【0052】
図１９は、インタビュー結果画面のうち、クラスターの特徴に対応するものである。この画面（Ｕ２１２）は、図１８のＵ２１１と併せて表示される。Ｕ２１２Ａは、各クラスターの特徴を一言で表現した名称を設定し、リスト形式で並べたものを示している。ここで何れかの名称をクリックすると、Ｕ２１２Ｂが表示される。Ｕ２１２Ｂは、選択されたクラスターについて、その詳細情報（当該クラスターに該当するユーザーの人数、分析結果、特徴的な情報等）を表示した状態を示している。
【0053】
図２０は、インタビュー結果画面のうち、テーブルデータのダウンロードに対応するものである。この画面（Ｕ２１３）は、図１８のＵ２１１と併せて表示される。Ｕ２１３は、回答結果データをＣＳＶ形式等のテーブルデータとしてダウンロードするための画面を示している。この画面では、ダウンロード対象とするテーブルデータについて、例えばクラスター／性別／年代等の条件を指定して、フィルタリング（絞り込み）することが可能である。その下には、フィルタリングされたテーブルデータの一覧が表示される。ユーザーが不図示のダウンロードボタンをクリックすると、回答結果データのうち指定された条件でフィルタリングされたものがダウンロードされる。
【0054】
図２１は、インタビュー結果画面のうち、クラスターの属性分布に対応するものである。この画面（Ｕ２１４）は、図１８のＵ２１１と併せて表示される。Ｕ２１４Ａは、性別ごとに、各クラスターの割合を示している。Ｕ２１４Ｂは、年代ごとに、各クラスターの割合を示している。
【0055】
＃動機・シーン・アクション＃
図２２は、インタビュー結果画面のうち、動機・シーン・アクション（樹形図）に対応するものである。この画面（Ｕ２２１）は、図１７のＵ２０１で上部のタブのうち「動機・シーン・アクション」がクリックされた場合に表示される。ここでは、回答結果データに基づいて、ユーザーの回答に含まれるキーワードを動機・シーン・アクションの観点で分類し、様々な形式で表示する。ここで、「動機」「シーン」「アクション」の意味としては、例えばユーザーがコンテンツの一部に対して注目等した（興味を持った／関心が高かった）場合において、インタビューでそれを深堀りした際に、回答に含まれるキーワードの属性を意味する。例えば、「動機」は「なぜ注目等したか」、「シーン」は、「どんなシーンを連想したか」、「アクション」は「どんな行動に繋がるか」といった意味である。画面上部のメニューでは、世代年代／シーン／曜日等の観点で、表示対象とする回答結果データの母集団を絞り込むことが可能である。画面下部の樹形図では、各キーワードを動機・シーン・アクションのうち何れの属性に対応するかにより整理して配置したうえで（動機：一番上の行に赤色のバブルで／シーン：真ん中の行に青色のバブルで／アクション：一番下の行に緑色のバブルで※各バブルの大きさは当該キーワードの出現回数に比例）、互いに相関性が高いキーワード同士を線分で繋いでいる。樹形図の上のメニューでは、当該キーワードに対応するユーザーの年代／性別、当該キーワードの出現頻度等の観点で、表示対象とするバブル（キーワード）を絞り込むことが可能である。
図２２は、インタビュー結果画面のうち、動機・シーン・アクション（樹形図）に対応するものである。この画面（Ｕ２２１）は、図１７のＵ２０１で上部のタブのうち「動機・シーン・アクション」がクリックされた場合に表示される。ここでは、回答結果データに基づいて、ユーザーの回答に含まれるキーワードを動機・シーン・アクションの観点で分類し、様々な形式で表示する。ここで、「動機」「シーン」「アクション」の意味としては、例えばユーザーがコンテンツの一部に対して注目等した（興味を持った／関心が高かった）場合において、インタビューでそれを深堀りした際に、回答に含まれるキーワードの属性を意味する。例えば、「動機」は「なぜ注目等したか」、「シーン」は、「どんなシーンを連想したか」、「アクション」は「どんな行動に繋がるか」といった意味である。画面上部のメニューでは、世代年代／シーン／曜日等の観点で、表示対象とする回答結果データの母集団を絞り込むことが可能である。画面下部の樹形図では、各キーワードを動機・シーン・アクションのうち何れの属性に対応するかにより整理して配置したうえで（動機：一番上の行に赤色のバブルで／シーン：真ん中の行に青色のバブルで／アクション：一番下の行に緑色のバブルで※各バブルの大きさは当該キーワードの出現回数に比例）、互いに相関性が高いキーワード同士を線分で繋いでいる。樹形図の上のメニューでは、当該キーワードに対応するユーザーの年代／性別、当該キーワードの出現頻度等の観点で、表示対象とするバブル（キーワード）を絞り込むことが可能である。
【0056】
図２３は、インタビュー結果画面のうち、動機・シーン・アクション（サンバースト図）に対応するものである。この画面（Ｕ２２２）は、図２２のＵ２２１と併せて表示される。画面上側の図は、画面上側の図は、図２２の樹形図と同様のデータを、サンバースト図で表現したものである。ここでは、円の中心から動機・シーン・アクションの順に、対応するキーワードを同心円状に分類している。この順番は、ＵＩを介した指示等に応じて任意に設定可能としてもよい。画面上側の図において、何れかのキーワードがクリックされると、画面下側の図が表示される。この図は、指定されたキーワードを円の中心に配置し、当該キーワードの下位層（同心円状の外側に位置するもの）について、詳細なサンバースト図を描き直したものである。
【0057】
図２４は、インタビュー結果画面のうち、動機・シーン・アクション（属性ごとの分析結果）に対応するものである。この画面（Ｕ２２３）は、図２２のＵ２２１と併せて表示される。この画面は、キーワードのうち動機の属性に対応するものを母集団として、各種分析結果を表示したものである。なお、同様分析をシーン・アクションの各属性に対応するキーワードについて行い結果を表示してもよい。画面上部の「クラスタリング分析結果を見る」ボタンがクリックされると、キーワードのうち動機の属性に対応するものを抽出したうえでクラスタリングを行い、例えば図１８～図２１と同様の形式で表示する。「ワードクラウド」は、キーワードのうち動機の属性に対応するものについて、その出現数に応じてビジュアル的に表示したものである（例えば、出現数が多いキーワードほど文字サイズを大きく／似た意味のキーワードは同系色で等）。「頻出語」は、当該ワードクラウドに含まれる頻出語を、グラフ形式でランキング順（出現回数が多い順）に表示したものである。「動機ラベルの選択」は、動機のラベル（その属性に対応するキーワード／そのキーワードを何らかの観点で分類したもの）の中から絞り込みたいものを選択するためのものである。「ワードカウント結果」は、当該選択された動機ラベルに対応するキーワードに母集団を絞り込んだうえで、当該ワードクラウドに含まれる頻出語を、カウント表形式でランキング順（出現回数が多い順）に表示したものである。
【0058】
図２５は、インタビュー結果画面のうち、動機・シーン・アクション（組み合わせの出現回数／ラベル別の詳細情報）に対応するものである。この画面（Ｕ２２４）は、図２２のＵ２２１と併せて表示される。「各動機、シーン、アクションの組み合わせの出現回数」は、動機、シーン、アクションの組み合わせのパターンごとに出現回数を算出し、カウント表形式でランキング順（出現回数が多い順）に表示したものである。「ラベル別の詳細情報」は、動機、シーン、アクションそれぞれについて、ラベルごとの出現回数をカウント表形式やグラフ形式でランキング順（出現回数が多い順）に表示したものである。
【0059】
図２６は、インタビュー結果画面のうち、動機・シーン・アクション（ユーザー情報確認）に対応するものである。この画面（Ｕ２２５）は、図２２のＵ２２１と併せて表示される。ここでは、ユーザー（インタビューの回答者）ごとの情報について、各種ラベルで絞り込んでリスト形式で表示している。画面上側（Ｖ１）より画面下側（Ｖ２）の方が、情報量が多く、より柔軟に絞り込みが可能である。
【0060】
＃ユーザー一覧＃
図２７は、インタビュー結果画面のうち、ユーザー一覧に対応するものである。この画面（Ｕ２３１）は、図１７のＵ２０１で上部のタブのうち「ユーザー一覧」がクリックされた場合に表示される。画面左上の「ダウンロード用のファイルを作成するボタン」がクリックされると、全ユーザーの属性情報や会話履歴をＣＳＶ形式等でダウンロードすることが可能である。画面中央部には、ユーザーごとに、各種スコアが表示される。当該スコアは、回答結果データを次に示す各種基準でスコア化したものである。トータルスコアは、各スコアの合計値であり、これが高いほど高いほどモニターとしての品質が高い／聞く価値のあるモニターであることを意味する。インタビュー時間スコアは、インタビューに参加した時間が長いほど高くなる。応答正確性スコアは、インタビュアーの質問に正確に回答できているほど高くなる。応答長スコアは、回答者の回答が長いほど高くなる。応答バリエーションスコアは、回答のバリエーションが高いほど高くなり、同じことばかり答えていると低くなる。インタビュー目的適合スコアは、インタビューの目的に合致しているほど高くなる。スコアの下にある「ユーザーの詳細情報を見る」ボタンがクリックされると、図２８の画面が表示される。同じユーザーが複数回答をした場合、画面下部のように各回答について各種スコアを折りたたんでリスト形式で表示したり、不図示の日記形式等で表示したりしてもよい。その他、動機ラベルを設け、動機クラスターの中から何れかを選択してユーザーを絞り込んで表示可能としてもよい。
図２７は、インタビュー結果画面のうち、ユーザー一覧に対応するものである。この画面（Ｕ２３１）は、図１７のＵ２０１で上部のタブのうち「ユーザー一覧」がクリックされた場合に表示される。画面左上の「ダウンロード用のファイルを作成するボタン」がクリックされると、全ユーザーの属性情報や会話履歴をＣＳＶ形式等でダウンロードすることが可能である。画面中央部には、ユーザーごとに、各種スコアが表示される。当該スコアは、回答結果データを次に示す各種基準でスコア化したものである。トータルスコアは、各スコアの合計値であり、これが高いほど高いほどモニターとしての品質が高い／聞く価値のあるモニターであることを意味する。インタビュー時間スコアは、インタビューに参加した時間が長いほど高くなる。応答正確性スコアは、インタビュアーの質問に正確に回答できているほど高くなる。応答長スコアは、回答者の回答が長いほど高くなる。応答バリエーションスコアは、回答のバリエーションが高いほど高くなり、同じことばかり答えていると低くなる。インタビュー目的適合スコアは、インタビューの目的に合致しているほど高くなる。スコアの下にある「ユーザーの詳細情報を見る」ボタンがクリックされると、図２８の画面が表示される。同じユーザーが複数回答をした場合、画面下部のように各回答について各種スコアを折りたたんでリスト形式で表示したり、不図示の日記形式等で表示したりしてもよい。その他、動機ラベルを設け、動機クラスターの中から何れかを選択してユーザーを絞り込んで表示可能としてもよい。
【0061】
図２８は、インタビュー結果画面のうち、各ユーザーの詳細情報に対応するものである。この画面（Ｕ２３２）は、図２７のＵ２３１で各ユーザーのスコアの下にある「ユーザーの詳細情報を見る」ボタンがクリックされた場合に表示される。顔写真は、ＡＩを用いて、当該ユーザーの回答結果データを基に、ペルソナ像を生成したものである。顔写真の右側にある年齢／性別等の情報は、ユーザーがモニターとして事前登録している属性情報である。その右側の「エモミルの過去回答履歴からの推定内面情報」は、ＡＩを用いて、当該ユーザーの回答結果データを基に、当該ユーザーのライフスタイル・価値観・性格等を推定したものである。その右側の「今回の回答履歴から推定された人物像／要約」は、ＡＩを用いて、当該ユーザーの回答結果データを基に、当該ユーザーの人物像を推定／やりとりの内容を要約したものである。その下の「会話の内容を見る」ボタンがクリックされると、図２９が表示される。
【0062】
図２９は、インタビュー結果画面のうち、各ユーザーのインタビューの内容に対応するものである。この画面（Ｕ２３３）は、図２８のＵ２３２で「会話の内容を見る」ボタンがクリックされた場合に表示される。この画面では、図５のＳ１２４～Ｓ１２５における実際のAIインタビューでのやりとり（回答内容全体）が表示される。
【0063】
以上、本発明の実施形態について説明をしたが、本発明の技術的範囲が本実施形態の説明によって限定的に解釈されるべきではない。本実施形態は一例であって、特許請求の範囲に記載された発明の範囲内において、様々な実施形態の変更が可能であることが当業者によって理解されるところである。本発明の技術的範囲は特許請求の範囲に記載された発明の範囲及びその均等の範囲に基づいて定められるべきである。
【符号の説明】
【0064】
１：インサイト調査システム、２，２ａ，２ｂ：視聴者端末、３：サーバ、４：企業側端末、８：通信ネットワーク、２０：制御部、２１：記憶装置、２２：撮像部、２３：通信部、２４：入力操作部、２５：表示部、２６：スピーカ、ＲＴＣ：２８、３０：制御部、３１：記憶装置、３２：入出力インターフェース、３３：通信部、３４：入力操作部、３５：表示部、４０：制御部、４１：記憶装置、４２：入出力インターフェース、４３：通信部、４４：入力操作部、４５：表示部、Ｕ：ユーザー、Ｖ，Ｖａ，Ｖｂ：視聴者
【要約】 （修正有）
【課題】コンテンツに対するインサイト調査において、生体情報だけでは分からない情報を明らかにするシステム、方法及びプログラムを提供する。
【解決手段】コンテンツに対するユーザーのインサイトを調査するインサイト調査システムにおける処理は、ユーザーの視聴者端末でコンテンツを表示し、ユーザーがコンテンツを見たときの生体情報を取得し、サーバが、生体情報に基づいて、前記コンテンツの中でユーザーが注目した注目箇所を特定し、注目箇所に関する質問を生成し、視聴者端末に質問を表示させ、視聴者端末からユーザーの質問に対する回答を受付け、回答に基づいて、インサイトの調査結果を企業側端末に出力する。
【選択図】図５
【解決手段】コンテンツに対するユーザーのインサイトを調査するインサイト調査システムにおける処理は、ユーザーの視聴者端末でコンテンツを表示し、ユーザーがコンテンツを見たときの生体情報を取得し、サーバが、生体情報に基づいて、前記コンテンツの中でユーザーが注目した注目箇所を特定し、注目箇所に関する質問を生成し、視聴者端末に質問を表示させ、視聴者端末からユーザーの質問に対する回答を受付け、回答に基づいて、インサイトの調査結果を企業側端末に出力する。
【選択図】図５
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図29】
