特開 2024-41500 情報処理装置及び情報処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024041500

(43)【公開日】2024-03-27

(54)【発明の名称】情報処理装置及び情報処理プログラム

(51)【国際特許分類】

   G06Q 50/10 20120101AFI20240319BHJP

【ＦＩ】

G06Q50/10

【審査請求】未請求

【請求項の数】5

【出願形態】ＯＬ

(21)【出願番号】P 2022146353

(22)【出願日】2022-09-14

(71)【出願人】

【識別番号】000003621

【氏名又は名称】株式会社竹中工務店

(74)【代理人】

【識別番号】110001519

【氏名又は名称】弁理士法人太陽国際特許事務所

(72)【発明者】

【氏名】向井 一洋

(72)【発明者】

【氏名】西田 恵

(72)【発明者】

【氏名】藤原 邦彦

(72)【発明者】

【氏名】佐野 祐士

(72)【発明者】

【氏名】伊藤 彰吾

(72)【発明者】

【氏名】川尻 聡

【テーマコード（参考）】

5L049

【Ｆターム（参考）】

5L049CC12

(57)【要約】

【課題】対象空間に存在する人の感情の当該対象空間における分布状況を把握することができる情報処理装置及び情報処理プログラムを得る。
【解決手段】サーバ１０は、対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定する特定部１１Ａと、特定部１１Ａによって特定された感情値が示す感情の高さを示す情報を、対応する位置情報が示す位置を特定可能に提示する提示部１１Ｂと、を備える。
【選択図】図２

【特許請求の範囲】

【請求項1】

対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定する特定部と、
前記感情値が示す感情の高さを示す情報を、対応する前記位置情報が示す位置を特定可能に提示する提示部と、
を備えた情報処理装置。

【請求項2】

前記提示部は、複数の前記人の前記感情値を用いて、当該複数の人において前記感情が同時に起きる度合いを示す共起値を更に提示する、
請求項１に記載の情報処理装置。

【請求項3】

前記提示部は、ｄＥを前記複数の人における前記感情値の合計値の所定時間経過後の変化量とし、Ｙを前記複数の人における前記感情値が所定閾値以上である人数として、次の式により共起値Ｃを算出する、
Ｃ＝ｄＥ×（Ｙ－１）
請求項２に記載の情報処理装置。

【請求項4】

前記予め定められた種類の感情は、肯定的な感情を含む、
請求項１～請求項３の何れか１項に記載の情報処理装置。

【請求項5】

対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定し、
前記感情値が示す感情の高さを示す情報を、対応する前記位置情報が示す位置を特定可能に提示する、
処理をコンピュータに実行させるための情報処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置及び情報処理プログラムに関する。

【背景技術】

【0002】

従来、建物内外の利用者の間でのコミュニケーションの向上に寄与することができる技術として、次の技術があった。

【0003】

特許文献１には、対象者が非言語メッセージを発していることをリアルタイムにユーザに知らせることができるようにすることを目的としたモニタリング装置が開示されている。

【0004】

このモニタリング装置は、対象者の挙動を表す時系列データを取得する取得部と、前記時系列データを、教師なし学習により生成された判定モデルに入力し、前記判定モデルの出力に基づき、前記時系列データが外れ値を含むか否かを判定する判定部と、を備える。また、このモニタリング装置は、前記時系列データに基づいて、前記判定モデルに含まれるパラメータを更新する更新部と、前記時系列データが外れ値を含むと判定された場合に、ユーザに通知する通知部と、を備える。

【0005】

また、特許文献２には、話者の音声から場の雰囲気を判定することを目的とした音声解析システムが開示されている。

【0006】

この音声解析システムは、第１の話者の第１の音声を集音する第１の集音装置と、第２の話者の第２の音声を集音する第２の集音装置と、を備える。また、この音声解析システムは、前記第１の話者の複数種類の定量化された感情を複数の成分とするベクトル表現である第１の感情ベクトルを前記第１の音声から演算し、前記第２の話者の複数種類の定量化された感情を複数の成分とするベクトル表現である第２の感情ベクトルを前記第２の音声から演算し、前記第１の感情ベクトルと前記第２の感情ベクトルとを用いて、前記第１の話者と前記第２の話者との間の場の雰囲気を示す複数種類の定量化された感情を複数の成分とするベクトル表現である雰囲気ベクトルを演算する演算装置を備える。そして、この音声解析システムは、前記第１の感情ベクトルの少なくとも一つの成分と、前記第２の感情ベクトルの少なくとも一つの成分と、前記雰囲気ベクトルの長さとを表示する表示装置を備える。

【0007】

更に、特許文献３には、コミュニケーションに介入することができるようにすることを目的としたコミュニケーション解析装置が開示されている。

【0008】

このコミュニケーション解析装置は、複数の参加者によるコミュニケーションを解析するコミュニケーション解析装置であって、複数の参加者の発声を音声データとして取得するマイクと、複数の参加者の画像データを取得するカメラと、を備える。また、このコミュニケーション解析装置は、前記音声データおよび前記画像データにもとづき、コミュニケーションを評価する解析評価部を備える。そして、このコミュニケーション解析装置は、前記解析評価部による評価結果またはそれにもとづくフィードバックを前記複数の参加者にリアルタイムで提供するフィードバック部を備える。

【先行技術文献】

【特許文献】

【0009】

【特許文献1】特開２０２０－９１５２７号公報

【特許文献2】特開２０１９－５６８７９号公報

【特許文献3】国際公開第２０１８／１７４０８８号

【発明の概要】

【発明が解決しようとする課題】

【0010】

ところで、対象空間に存在する複数の人について、当該対象空間における何れの位置において、どのような感情となっている人が多いのかを知ることは、当該対象空間でのコミュニケーションの向上を企図するうえで、極めて重要である。

【0011】

しかしながら、特許文献１～特許文献３の各文献に開示されている技術では、対象空間に存在する複数の人における感情の種類毎の分布状況については考慮されていない。このため、上記各文献に開示されている技術では、対象空間に存在する人の感情の当該対象空間における分布状況を把握することができない、という問題点があった。

【0012】

本開示は、以上の事情を鑑みて成されたものであり、対象空間に存在する人の感情の当該対象空間における分布状況を把握することができる情報処理装置及び情報処理プログラムを提供することを目的とする。

【課題を解決するための手段】

【0013】

請求項１に記載の本発明に係る情報処理装置は、対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定する特定部と、前記感情値が示す感情の高さを示す情報を、対応する前記位置情報が示す位置を特定可能に提示する提示部と、を備えている。

【0014】

請求項１に記載の本発明に係る情報処理装置によれば、対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定し、当該感情値が示す感情の高さを示す情報を、対応する位置情報が示す位置を特定可能に提示することで、対象空間に存在する人の感情の当該対象空間における分布状況を把握することができる。

【0015】

請求項２に記載の本発明に係る情報処理装置は、請求項１に記載の情報処理装置であって、前記提示部が、複数の前記人の前記感情値を用いて、当該複数の人において前記感情が同時に起きる度合いを示す共起値を更に提示するものである。

【0016】

請求項２に記載の本発明に係る情報処理装置によれば、複数の人の感情値を用いて、当該複数の人において感情が同時に起きる度合いを示す共起値を更に提示することで、当該共起値も把握することができる結果、より効果的にコミュニケーションの向上に寄与することができる。

【0017】

請求項３に記載の本発明に係る情報処理装置は、請求項２に記載の情報処理装置であって、前記提示部が、ｄＥを前記複数の人における前記感情値の合計値の所定時間経過後の変化量とし、Ｙを前記複数の人における前記感情値が所定閾値以上である人数として、次の式により共起値Ｃを算出するものである。

【0018】

Ｃ＝ｄＥ×（Ｙ－１）

【0019】

請求項３に記載の本発明に係る情報処理装置によれば、上記式により共起値Ｃを算出することで、比較的簡易に共起値を得ることができる。

【0020】

請求項４に記載の本発明に係る情報処理装置は、請求項１～請求項３の何れか１項に記載の情報処理装置であって、前記予め定められた種類の感情が、肯定的な感情を含むものである。

【0021】

請求項４に記載の本発明に係る情報処理装置によれば、上記予め定められた種類の感情に肯定的な感情を含むことで、上記予め定められた種類の感情を否定的な感情のみとする場合に比較して、より効果的にコミュニケーションの向上に寄与することができる。

【0022】

請求項５に記載の本発明に係る情報処理プログラムは、対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定し、前記感情値が示す感情の高さを示す情報を、対応する前記位置情報が示す位置を特定可能に提示する、処理をコンピュータに実行させる。

【0023】

請求項５に記載の本発明に係る情報処理プログラムによれば、対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定し、当該感情値が示す感情の高さを示す情報を、対応する位置情報が示す位置を特定可能に提示することで、対象空間に存在する人の感情の当該対象空間における分布状況を把握することができる。

【発明の効果】

【0024】

以上説明したように、本発明によれば、対象空間に存在する人の感情の当該対象空間における分布状況を把握することができる。

【図面の簡単な説明】

【0025】

【図1】実施形態に係る交流空間評価システムのハードウェア構成の一例を示すブロック図である。

【図2】実施形態に係るサーバの機能的な構成の一例を示すブロック図である。

【図3】実施形態に係る情報処理の一例を示すフローチャートである。

【図4】実施形態に係る提示画面の一例を示す概略図である。

【図5】実施形態に係る提示画面の他の一例を示す概略図である。

【図6】実施形態に係る提示画面の他の一例を示す概略図である。

【発明を実施するための形態】

【0026】

以下、図面を参照して、本発明を実施するための形態例を詳細に説明する。なお、本実施形態では、本発明を、本発明の対象空間として商業施設の１フロアを適用し、当該商業施設を利用する複数のユーザが各々所持する端末装置と、本発明の情報処理装置として機能するサーバと、を有する交流空間評価システムに適用した場合について説明する。

【0027】

まず、図１及び図２を参照して、本実施形態に係る交流空間評価システム９０の構成を説明する。図１は、本実施形態に係る交流空間評価システム９０のハードウェア構成の一例を示すブロック図である。

【0028】

図１に示すように、本実施形態に係る交流空間評価システム９０は、ネットワーク８０に各々アクセス可能とされた、サーバ１０と、複数の端末装置３０と、を含む。なお、サーバ１０の例としては、パーソナルコンピュータ及びサーバコンピュータ等の各種コンピュータが挙げられる。また、端末装置３０の例としては、スマートフォン、タブレット端末、ＰＤＡ（Personal Digital Assistant、携帯情報端末）等の携帯型の装置が挙げられる。

【0029】

本実施形態に係る端末装置３０は、交流空間評価システム９０が対応する対象空間への来訪者（以下、単に「ユーザ」という。）が各々所持する端末である。

【0030】

端末装置３０は、ＣＰＵ（Central Processing Unit）３１、一時記憶領域としてのメモリ３２、不揮発性の記憶部３３、タッチパネル等の入力部３４、液晶ディスプレイ等の表示部３５、媒体読み書き装置（Ｒ／Ｗ）３６、及び無線通信部３８を備えている。ＣＰＵ３１、メモリ３２、記憶部３３、入力部３４、表示部３５、媒体読み書き装置３６、及び無線通信部３８はバスＢ１を介して互いに接続されている。媒体読み書き装置３６は、記録媒体３７に書き込まれている情報の読み出し及び記録媒体３７への情報の書き込みを行う。

【0031】

記憶部３３は、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、フラッシュメモリ等によって実現される。記憶媒体としての記憶部３３には、感情分布表示プログラム３３Ａが記憶されている。感情分布表示プログラム３３Ａは、当該プログラム３３Ａが書き込まれた記録媒体３７が媒体読み書き装置３６にセットされ、媒体読み書き装置３６が記録媒体３７からの当該プログラム３３Ａの読み出しを行うことで、記憶部３３へ記憶（インストール）される。ＣＰＵ３１は、感情分布表示プログラム３３Ａを記憶部３３から読み出してメモリ３２に展開し、感情分布表示プログラム３３Ａが有するプロセスを順次実行する。

【0032】

一方、サーバ１０は、交流空間評価システム９０において中心的な役割を有する装置であり、本発明の情報処理装置として機能することは前述した通りである。サーバ１０は、ＣＰＵ１１、一時記憶領域としてのメモリ１２、不揮発性の記憶部１３、キーボードとマウス等の入力部１４、液晶ディスプレイ等の表示部１５、媒体読み書き装置１６、及び通信インタフェース（Ｉ／Ｆ）部１８を備えている。ＣＰＵ１１、メモリ１２、記憶部１３、入力部１４、表示部１５、媒体読み書き装置１６、及び通信Ｉ／Ｆ部１８はバスＢ２を介して互いに接続されている。媒体読み書き装置１６は、記録媒体１７に書き込まれている情報の読み出し及び記録媒体１７への情報の書き込みを行う。

【0033】

記憶部１３はＨＤＤ、ＳＳＤ、フラッシュメモリ等によって実現される。記憶媒体としての記憶部１３には、情報処理プログラム１３Ａが記憶されている。情報処理プログラム１３Ａは、当該プログラム１３Ａが書き込まれた記録媒体１７が媒体読み書き装置１６にセットされ、媒体読み書き装置１６が記録媒体１７からの当該プログラム１３Ａの読み出しを行うことで、記憶部１３へ記憶（インストール）される。ＣＰＵ１１は、情報処理プログラム１３Ａを記憶部１３から読み出してメモリ１２に展開し、当該情報処理プログラム１３Ａが有するプロセスを順次実行する。

【0034】

また、図１に示すように、本実施形態に係る交流空間評価システム９０は、ネットワーク８０に各々アクセス可能とされた、撮影装置５０と、表示装置６０と、を含む。

【0035】

本実施形態に係る撮影装置５０は、対象空間に設けられており、当該対象空間のほぼ全域が撮影画角内に収まるように、３６０度カメラとされているが、これに限るものではない。例えば、対象空間を複数の領域に区分し、区分領域毎に１台ずつ撮影装置５０を設ける形態としてもよい。また、本実施形態では、撮影装置５０としてカラーの動画像を撮影するものが適用されているが、これに限るものではない。モノクロの動画像を撮影するものを撮影装置５０として適用する形態としてもよいし、カラー又はモノクロの静止画像を撮影するものを撮影装置５０として適用する形態としてもよい。

【0036】

また、本実施形態に係る表示装置６０は、対象空間における比較的人目に付きやすい位置（本実施形態では、対象空間の出入口の付近）に設けられた大型で、かつ、カラーのモニター装置とされているが、これに限るものでないことは言うまでもない。

【0037】

なお、本実施形態では、ネットワーク８０として、インターネット、電話回線網等の公共の通信回線を適用しているが、この形態に限定されるものではない。例えば、ネットワーク８０として、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）等の企業内の通信回線を適用してもよく、これらの企業内の通信回線及び公共の通信回線を組み合わせて適用してもよい。

【0038】

次に、図２を参照して、本実施形態に係るサーバ１０の機能的な構成について説明する。図２は、本実施形態に係るサーバ１０の機能的な構成の一例を示すブロック図である。

【0039】

図２に示すように、本実施形態に係るサーバ１０は、特定部１１Ａ及び提示部１１Ｂを含む。サーバ１０のＣＰＵ１１が情報処理プログラム１３Ａを実行することで、特定部１１Ａ及び提示部１１Ｂとして機能する。

【0040】

本実施形態に係る特定部１１Ａは、対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定する。

【0041】

なお、本実施形態に係る特定部１１Ａでは、撮影装置５０による撮影によって得られた画像を用いて上記対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定しているが、これに限るものではない。例えば、端末装置３０が撮影装置を備えたものである場合は、当該撮影装置による撮影によって得られた画像を用いて、上記位置情報及び感情値を特定する形態としてもよい。また、本実施形態では、感情値として、感情のレベルが最も低い場合の値を０（零）とし、感情のレベルが最も高い場合の値を１００とした、０（零）から１００までの範囲の値を適用しているが、これに限るものでないことは言うまでもない。

【0042】

そして、本実施形態に係る提示部１１Ｂは、特定部１１Ａによって特定された感情値が示す感情の高さを示す情報を、対応する位置情報が示す位置を特定可能に提示する。

【0043】

なお、本実施形態では、上記感情の高さを示す情報を、対応する位置情報が示す位置を特定可能に提示する形態として、上記感情の高さを示す情報を、対象空間の平面図の対応する位置に重畳させて表示する形態を適用しているが、これに限るものではない。例えば、上記感情の高さを示す情報を、対応する位置を示す座標情報と共に表示する形態を、上記感情の高さを示す情報を、対応する位置情報が示す位置を特定可能に提示する形態として適用する形態としてもよい。

【0044】

また、本実施形態に係る提示部１１Ｂは、上記複数の人の感情値を用いて、当該複数の人において感情が同時に起きる度合いを示す共起値を更に提示する。なお、本実施形態では、ｄＥを上記複数の人における感情値の合計値の所定時間経過後の変化量とし、Ｙを上記複数の人における感情値が所定閾値以上である人数として、次の式（１）により共起値Ｃを算出する。

【0045】

Ｃ＝ｄＥ×（Ｙ－１） （１）

【0046】

また、本実施形態では、上記予め定められた種類の感情として、肯定的な感情及び否定的な感情の双方を適用している。ここでいう肯定的な感情には、喜び、驚き、敬服、共感、夢中、興奮、賞賛等が含まれる。また、否定的な感情には、怒り、悲しみ、恐れ、嫌悪等が含まれる。本実施形態では、これらの肯定的な感情及び否定的な感情として、喜び、驚き、怒り、嫌悪、及び軽蔑の５種類を適用しているが、これに限るものでないことは言うまでもない。また、これらの肯定的な感情及び否定的な感情のうち、肯定的な感情のみや、否定的な感情のみを上記予め定められた種類の感情として適用する形態としてもよい。

【0047】

また、本実施形態では、提示部１１Ｂによる各種情報の提示として、表示装置６０による表示による提示を適用しているが、これに限るものではない。例えば、プリンタ等の画像形成装置による印刷による提示や、音声生成装置による音声による提示を、提示部１１Ｂによる各種情報の提示として適用する形態としてもよい。

【0048】

次に、図３～図４を参照して、本実施形態に係る交流空間評価システム９０の作用として、情報処理を実行する場合のサーバ１０の作用を説明する。図３は、本実施形態に係る情報処理の一例を示すフローチャートである。

【0049】

本実施形態では、サーバ１０のユーザによって情報処理プログラム１３Ａの実行の開始を指示する指示入力が入力部１４を介して行われた場合に、サーバ１０のＣＰＵ１１が情報処理プログラム１３Ａを実行することで、図３に示す情報処理が実行される。

【0050】

図３のステップ１００で、ＣＰＵ１１は、撮影装置５０に対して撮影を開始するように指示する。この指示に応じて、撮影装置５０は撮影を開始し、当該撮影によって得られた画像情報をリアルタイムでサーバ１０に送信する。

【0051】

そこで、ステップ１０２で、ＣＰＵ１１は、１フレーム分の画像情報が受信されるまで待機する。ステップ１０４で、ＣＰＵ１１は、受信した画像情報が示す画像（以下、「撮影画像」という。）から人の顔の画像領域（以下、「顔画像領域」という。）を抽出する。そして、ＣＰＵ１１は、抽出した顔画像領域の位置を特定することで、対応する人の位置を示す位置情報を特定する。

【0052】

なお、本実施形態では、上記顔画像領域を抽出する手法として、生体認証技術の一つである人工知能を用いた手法を適用しているが、これに限るものではない。例えば、パターンマッチング等の従来既知の画像認識技術を適用して上記顔画像領域を抽出する形態としてもよい。また、本実施形態では、上記対応する人の位置を示す位置情報として、顔画像領域の対象空間における水平方向に対する２次元座標系の位置情報を適用しているが、これに限るものではない。例えば、上記水平方向に対する２次元座標系に対して、高さ方向も含めた３次元座標系の位置情報を、上記対応する人の位置を示す位置情報として適用する形態としてもよい。

【0053】

また、ステップ１０４で、ＣＰＵ１１は、更に、抽出した顔画像領域の画像情報を用いて、対応する人の感情値を特定する。本実施形態では、上記人の感情値を特定する方法として、Ａｆｆｅｃｔｉｖａ社製の感情認識ソフトウェアである製品名Ａｆｆｄｅｘを用いる方法を適用しているが、これに限るものではない。例えば、富士通株式会社による表情認識技術（インターネット＜ＵＲＬ：https://www.fujitsu.com/jp/about/research/article/202103-facial-expression-recognition.html＞）、株式会社ＡＣＥＳによる非言語メッセージ分析技術（インターネット＜ＵＲＬ：https://prtimes.jp/main/html/rd/p/000000024.000044470.html＞）等の他の技術を、上記人の感情値を特定する方法として適用する形態としてもよい。

【0054】

ステップ１０６で、ＣＰＵ１１は、ステップ１０４の処理によって得られた各人の感情値を用いて、以下に示すように、各感情の種類毎の共起値を導出する。

【0055】

まず、ＣＰＵ１１は、撮影画像において認識された人の数（人数）をＸとし、次の式（２）により、感情の種類毎に各人の感情値Ｅｎの合計値ＴＥを算出する。

【0056】

ＴＥ＝Ｅ１＋Ｅ２＋・・・ＥＸ （２）

【0057】

次いで、ＣＰＵ１１は、合計値ＴＥのフレーム間の差分をΔＴＥとし、フレーム間の経過時間をΔｔとして、次の式（３）により、感情の種類毎に感情値の変化量ｄＥを算出する。

【0058】

ｄＥ＝ΔＴＥ÷Δｔ （３）

【0059】

そして、ＣＰＵ１１は、フレーム内において対応する感情を発現させている人数をＹとして、次の式（４）により、感情の種類毎に共起値Ｃを算出する。ここで、本実施形態では、人数Ｙとして、対応する感情値が予め定められた閾値（本実施形態では、１０）以上である人の人数を適用しているが、これに限るものではない。例えば、感情値が０（零）ではない人の人数を人数Ｙとして適用する形態としてもよい。

【0060】

Ｃ＝ｄＥ×（Ｙ－１） （４）

【0061】

式（４）において（Ｙ－１）を乗じることで、フレーム内の対応する感情を発現させている対象者が１名のみである場合の共起値Ｃは０（零）となる。即ち、複数人の感情値が同時に変化しないと共起値Ｃは変化しない。

【0062】

例えば、Ａ、Ｂ、Ｃの３名が映像に捉えられており、顔認識されている場合を想定する。

【0063】

ここで、ある時点（ｔ＝０（零）の時点）におけるＡ、Ｂ、Ｃの同一種類の感情（以下、「同一種類感情」という。）の感情値が各々ＥＡ＝０、ＥＢ＝０、ＥＣ＝０であり、次のフレームにおけるＡ、Ｂ、Ｃの同一種類感情の感情値が各々ＥＡ＝０、ＥＢ＝５０、ＥＣ＝２５とし、フレーム間で０．５秒（＝Δｔ）が経過したとする。

【0064】

この場合、ｔ＝０（零）の時点では、フレーム内の顔認識されている人数Ｘが３人であり、フレーム内において同一種類感情を発現させている対象者の人数Ｙが０（零）となる。また、ｔ＝０．５の時点、即ち、０．５秒経過後の時点においては、フレーム内の顔認識されている人数Ｘが３人であり、フレーム内の同一種類感情を発現させている対象者の人数Ｙが２人となる。

【0065】

この場合、ｔ＝０（零）の場合の同一種類感情の合計値ＴＥは０（零）（＝ＥＡ＋ＥＢ＋ＥＣ＝０＋０＋０）になる。また、ｔ＝０．５の場合の同一種類感情の合計値ＴＥは７５（＝ＥＡ＋ＥＢ＋ＥＣ＝０＋５０＋２５）となる。

【0066】

従って、同一種類感情の変化量ｄＥは１５０（＝ΔＴＥ÷Δｔ＝７５÷０．５）となり、以上の各値を用いて、ｔ＝０．５の時点の共起値Ｃは１５０（＝ｄＥ×（Ｙ－１）＝１５０×（２－１））となる。

【0067】

このように、本実施形態に係る共起値Ｃは、フレーム間の差分を用いるため、本情報処理の実行が開始されて最初にステップ１０６を実行する場合には、共起値Ｃを導出することはできない。従って、共起値Ｃは、ステップ１０６の処理の実行が２回目以降である場合に導出されることになる。

【0068】

ステップ１０８で、ＣＰＵ１１は、以上の処理によって得られた各情報を用いて、予め定められた構成とされた提示画面を示す情報（以下、「提示画面情報」という。）を作成し、記憶部１３に記憶する。ステップ１１０で、ＣＰＵ１１は、作成した提示画面情報を用いて上記提示画面を表示するように表示装置６０を制御する。図４には、本実施形態に係る提示画面の一例が示されている。

【0069】

図４に示すように、本実施形態に係る提示画面では、対象空間の平面図が表示されると共に、予め定められた種類の感情（図４に示す例では、喜び（Ｊｏｙ））に関する、当該対象空間における分布状態が表示される。なお、図４における円状や楕円状の部分が該当する感情の分布状態を示しており、濃度が高い部分ほど、該当者が多いことを示している。なお、上述したように、この時点では共起値Ｃは表示されない。

【0070】

ステップ１１２で、ＣＰＵ１１は、本情報処理を終了するタイミングとして予め定められた終了タイミングが到来したか否かを判定し、否定判定となった場合はステップ１１４に移行する。ステップ１１４で、ＣＰＵ１１は、予め定められた期間（本実施形態では、０．５秒）が経過するまで待機し、その後にステップ１０２に戻る。

【0071】

このように、本実施形態に係る情報処理では、終了タイミングが到来するまでステップ１０２からステップ１１４までの処理を繰り返し実行する。このため、情報処理の実行が開始されてから２回目以降のステップ１０６の処理によって共起値Ｃが導出される結果、２回目以降のステップ１１０の処理によって表示装置６０に表示される提示画面には、一例として図４に示すように共起値Ｃが表示される。

【0072】

なお、本実施形態では、上記終了タイミングとして、サーバ１０のユーザによって情報処理プログラム１３Ａの実行を終了する指示入力が入力部１４を介して行われたタイミングを適用している。このように、本実施形態では、情報処理の実行期間として、ユーザによる指示に応じた期間を適用しているが、これに限るものではない。例えば、交流空間評価システム９０による評価期間として予め定められた期間（例えば、毎日の６時から２３時までの期間）を、情報処理の実行期間として適用する形態としてもよい。

【0073】

一方、ステップ１１２で肯定判定となった場合はステップ１１６に移行し、ＣＰＵ１１は、ステップ１００の処理によって開始した撮影装置５０による撮影を停止するように指示し、その後に本情報処理を終了する。

【0074】

なお、上記情報処理によって記憶部１３に記憶された提示画面情報が示す、一例として図４に示す提示画面は、各ユーザが所持する端末装置３０のＣＰＵ３１が感情分布表示プログラム３３Ａを実行することで、自身の表示部３５によって表示することができる。

【0075】

以上説明したように、本実施形態によれば、対象空間に存在する人の位置を示す位置情報、及び当該人の予め定められた種類の感情の高さを示す感情値を特定し、当該感情値が示す感情の高さを示す情報を、対応する位置情報が示す位置を特定可能に提示している。従って、対象空間に存在する人の感情の当該対象空間における分布状況を把握することができる。

【0076】

また、本実施形態によれば、複数の人の感情値を用いて、当該複数の人において感情が同時に起きる度合いを示す共起値を更に提示している。従って、当該共起値も把握することができる結果、より効果的にコミュニケーションの向上に寄与することができる。

【0077】

また、本実施形態によれば、式（４）により共起値Ｃを算出している。従って、比較的簡易に共起値を得ることができる。

【0078】

更に、本実施形態によれば、上記予め定められた種類の感情に肯定的な感情を含めている。従って、上記予め定められた種類の感情を否定的な感情のみとする場合に比較して、より効果的にコミュニケーションの向上に寄与することができる。

【0079】

なお、上記実施形態では、一例として図４に示したように、提示画面において喜びの感情の分布状態を示す画像を表示した場合について説明したが、これに限るものではない。例えば、怒り、驚き等といった他の感情の分布状態を示す画像を提示画面において表示する形態としてもよい。

【0080】

また、提示画面の構成は図４に示すものに限るものではなく、提示画面の構成として、図５や図６に示す構成を適用する形態としてもよい。図５及び図６は、本実施形態に係る提示画面の他の例を示す概略図である。

【0081】

図５に示す提示画面では、対象空間を複数の領域に区分した区分領域毎に、喜び（Ｊｏｙ）、怒り（Ａｎｇｅｒ）、嫌悪（Ｄｉｓｇｕｓｔ）、驚き（Ｓｕｒｐｒｉｓｅ）、及び軽蔑（Ｃｏｎｔｅｍｐｔ）の各感情の感情値（ここでは、対応する区分領域に存在する人の感情値の平均値）がレーダーチャートとして表示される。従って、ユーザは、当該提示画面を参照することで、区分領域毎の各種感情の傾向を把握することができる。

【0082】

また、図６に示す提示画面では、共起値Ｃが、スピードメーター型のグラフとして、リアルタイムに表示される。従って、ユーザは、当該提示画面を参照することで、共起値Ｃの変化を直感的に把握することができる。

【0083】

その他、特定対象としている感情のうちの一部の感情（例えば、「喜び」のみや、「肯定的な感情」等）の感情値の対象空間に存在する人の合計値と、他の感情の感情値の対象空間に存在する人の合計値との比率を示すグラフや、各人別の感情値の時間経過に伴う累積値を示すグラフ等を上記提示画面に表示する形態としてもよい。

【0084】

また、上記実施形態では、感情の種類毎に共起値Ｃを導出する場合について説明したが、これに限るものではない。例えば、肯定的な感情のうちの複数種類の感情を組み合わせて共起値Ｃを導出する形態としてもよいし、否定的な感情のうちの複数種類の感情を組み合わせて共起値Ｃを導出する形態としてもよい。

【0085】

また、上記実施形態では、式（４）により共起値Ｃを導出する場合について説明したが、これに限るものではない。例えば、式（４）における人数Ｙを用いることなく、共起値Ｃを導出する形態としてもよい。

【0086】

また、上記実施形態において、例えば、特定部１１Ａ及び提示部１１Ｂの各処理を実行する処理部（processing unit）のハードウェア的な構造としては、次に示す各種のプロセッサ（processor）を用いることができる。上記各種のプロセッサには、前述したように、ソフトウェア（プログラム）を実行して処理部として機能する汎用的なプロセッサであるＣＰＵに加えて、ＦＰＧＡ（Field-Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：PLD）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。

【0087】

処理部は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせや、ＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、処理部を１つのプロセッサで構成してもよい。

【0088】

処理部を１つのプロセッサで構成する例としては、第１に、クライアント及びサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが処理部として機能する形態がある。第２に、システムオンチップ（System On Chip：SoC）等に代表されるように、処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、処理部は、ハードウェア的な構造として、上記各種のプロセッサの１つ以上を用いて構成される。

【0089】

更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）を用いることができる。

【符号の説明】

【0090】

１０ サーバ
１１ ＣＰＵ
１１Ａ 特定部
１１Ｂ 提示部
１２ メモリ
１３ 記憶部
１３Ａ 情報処理プログラム
１４ 入力部
１５ 表示部
１６ 媒体読み書き装置
１７ 記録媒体
１８ 通信Ｉ／Ｆ部
３０ 端末装置
３１ ＣＰＵ
３２ メモリ
３３ 記憶部
３３Ａ 感情分布表示プログラム
３４ 入力部
３５ 表示部
３６ 媒体読み書き装置
３７ 記録媒体
３８ 無線通信部
５０ 撮影装置
６０ 表示装置
８０ ネットワーク
９０ 交流空間評価システム

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】