特許 7439461 コミュニケーション支援プログラム、コミュニケーション支援システム及びコミュニケーション支援方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-02-19

(45)【発行日】2024-02-28

(54)【発明の名称】コミュニケーション支援プログラム、コミュニケーション支援システム及びコミュニケーション支援方法

(51)【国際特許分類】

   G06F 16/90 20190101AFI20240220BHJP

   H04N 7/15 20060101ALI20240220BHJP

   H04N 21/439 20110101ALI20240220BHJP

【ＦＩ】

G06F16/90 100

H04N7/15

H04N21/439

【請求項の数】 28

(21)【出願番号】P 2019202131

(22)【出願日】2019-11-07

(65)【公開番号】P2021077002

(43)【公開日】2021-05-20

【審査請求日】2022-10-17

(73)【特許権者】

【識別番号】000001270

【氏名又は名称】コニカミノルタ株式会社

(74)【代理人】

【識別番号】110000671

【氏名又は名称】ＩＢＣ一番町弁理士法人

(72)【発明者】

【氏名】冨田 公一

【審査官】三橋 竜太郎

(56)【参考文献】

【文献】特開２００２－１９６９２８（ＪＰ，Ａ）

【文献】特開平０６－２６６７７９（ＪＰ，Ａ）

【文献】特開２００４－０７０７１０（ＪＰ，Ａ）

【文献】特開２０１５－０３５７６９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ １６／００－１６／９５８

Ｈ０４Ｎ ７／１５

Ｈ０４Ｎ ２１／４３９

(57)【特許請求の範囲】

【請求項1】

対話者間のコミュニケーションを支援する装置で動作するコミュニケーション支援プログラムであって、
前記装置の制御部に、
前記コミュニケーションを行っている前記対話者を特定する対話者特定処理、
前記コミュニケーションにおけるキーワードを取得する第１の取得処理、
各々の前記対話者の前記キーワードに関する知識として、前記キーワードに対する単語同士の繋がりを表す知識ネットワークを前記対話者ごとに取得する第２の取得処理、
各々の前記対話者の前記知識ネットワークを比較して、前記キーワードに関する知識の差異を抽出する知識差異抽出処理、
抽出された前記対話者の前記知識ネットワーク同士の差異を示すための情報を出力する出力処理、を実行させる、
ことを特徴とするコミュニケーション支援プログラム。

【請求項2】

前記第１の取得処理では、前記コミュニケーションの内容から、前記コミュニケーションのキーワードを推定する、
ことを特徴とする請求項１に記載のコミュニケーション支援プログラム。

【請求項3】

前記第１の取得処理では、予め定めた量の音声情報及び／又はテキスト情報を取得、又は、予め定めた時間が経過したら、前記キーワードを推定し直す、
ことを特徴とする請求項２に記載のコミュニケーション支援プログラム。

【請求項4】

前記装置の制御部に、更に、
前記キーワードに関する知識の差異に応じて、報知の必要性を判定する報知判定処理を実行させ、
前記出力処理では、報知の必要性があると判定された場合に、前記キーワードに関する知識に差異がある旨を報知する、
ことを特徴とする請求項１乃至３のいずれか一に記載のコミュニケーション支援プログラム。

【請求項5】

前記装置の制御部に、更に、
前記コミュニケーションが音声の場合、音声情報をテキスト情報に変換する音声認識処理を実行させる、
ことを特徴とする請求項４に記載のコミュニケーション支援プログラム。

【請求項6】

前記知識差異抽出処理では、前記知識ネットワークにおける前記キーワードに関連するノードの一致率に基づいて、前記キーワードに関する知識の差異を抽出する、
ことを特徴とする請求項１乃至５のいずれか一に記載のコミュニケーション支援プログラム。

【請求項7】

前記知識差異抽出処理では、前記知識ネットワークにおける前記キーワードに関連するノード間の距離に基づいて、前記キーワードに関する知識の差異を抽出する、
ことを特徴とする請求項１乃至５のいずれか一に記載のコミュニケーション支援プログラム。

【請求項8】

前記知識差異抽出処理では、前記知識ネットワークにおける前記キーワードに関連するノードの繋がり方に基づいて、前記キーワードに関する知識の差異を抽出する、
ことを特徴とする請求項１乃至５のいずれか一に記載のコミュニケーション支援プログラム。

【請求項9】

前記知識差異抽出処理では、前記キーワードに対して所定以上の関連の強さを有するノードを対象にして、前記キーワードに関する知識の差異を抽出する、
ことを特徴とする請求項６乃至８のいずれか一に記載のコミュニケーション支援プログラム。

【請求項10】

前記知識差異抽出処理では、抽出した前記キーワードに関する知識の差異を、前記知識ネットワークの差異として可視化する、
ことを特徴とする請求項１乃至９のいずれか一に記載のコミュニケーション支援プログラム。

【請求項11】

前記装置は、前記知識ネットワークを参照可能であり、かつ、情報端末からコミュニケーションの音声情報及び／又はテキスト情報を取得可能な装置であり、
前記装置の制御部に、更に、
前記情報端末から、個人が閲覧したテキスト情報及び／又は個人が発音した音声情報を取得し、前記テキスト情報及び／又は前記音声情報から前記個人の知識情報を抽出し、抽出した前記知識情報と前記個人の識別情報とを対応付けて前記知識ネットワークに登録する知識情報抽出処理を実行させる、
ことを特徴とする請求項１乃至１０のいずれか一に記載のコミュニケーション支援プログラム。

【請求項12】

前記知識ネットワークは、個人の知識を個人毎に蓄積した個人知識ＤＢである、
ことを特徴とする請求項１乃至１１のいずれか一に記載のコミュニケーション支援プログラム。

【請求項13】

前記キーワードは、前記コミュニケーションの話題である、
ことを特徴とする請求項１乃至１２のいずれか一に記載のコミュニケーション支援プログラム。

【請求項14】

各個人がコミュニケーションを行う複数の情報端末と、請求項１乃至１３のいずれか一に記載のコミュニケーション支援プログラムがインストールされた前記装置と、が通信ネットワークで接続されている、
ことを特徴とするコミュニケーション支援システム。

【請求項15】

各個人がコミュニケーションを行う複数の情報端末が通信ネットワークで接続され、各々の前記情報端末に、請求項１乃至１３のいずれか一に記載のコミュニケーション支援プログラムがインストールされている、
ことを特徴とするコミュニケーション支援システム。

【請求項16】

対話者間のコミュニケーションを支援する装置におけるコミュニケーション支援方法であって、
前記コミュニケーションを行っている前記対話者を特定する対話者特定処理と、
前記コミュニケーションにおけるキーワードを取得する第１の取得処理と、
各々の前記対話者の前記キーワードに関する知識として、前記キーワードに対する単語同士の繋がりを表す知識ネットワークを前記対話者ごとに取得する第２の取得処理と、
各々の前記対話者の前記知識ネットワークを比較して、前記キーワードに関する知識の差異を抽出する知識差異抽出処理と、
抽出された前記対話者の前記知識ネットワーク同士の差異を示すための情報を出力する出力処理と、を実行する、
ことを特徴とするコミュニケーション支援方法。

【請求項17】

前記第１の取得処理では、前記コミュニケーションの内容から、前記コミュニケーションのキーワードを推定する、
ことを特徴とする請求項１６に記載のコミュニケーション支援方法。

【請求項18】

前記第１の取得処理では、予め定めた量の音声情報及び／又はテキスト情報を取得、又は、予め定めた時間が経過したら、前記キーワードを推定し直す、
ことを特徴とする請求項１７に記載のコミュニケーション支援方法。

【請求項19】

前記キーワードに関する知識の差異に応じて、報知の必要性を判定する報知判定処理を更に実行し、
前記出力処理では、報知の必要性があると判定された場合に、前記キーワードに関する知識に差異がある旨を報知する、
ことを特徴とする請求項１６乃至１８のいずれか一に記載のコミュニケーション支援方法。

【請求項20】

前記コミュニケーションが音声情報の場合、前記音声情報をテキスト情報に変換する音声認識処理を更に実行する、
ことを特徴とする請求項１９に記載のコミュニケーション支援方法。

【請求項21】

前記知識差異抽出処理では、前記知識ネットワークにおける前記キーワードに関連するノードの一致率に基づいて、前記キーワードに関する知識の差異を抽出する、
ことを特徴とする請求項１６乃至２０のいずれか一に記載のコミュニケーション支援方法。

【請求項22】

前記知識差異抽出処理では、前記知識ネットワークにおける前記キーワードに関連するノード間の距離に基づいて、前記キーワードに関する知識の差異を抽出する、
ことを特徴とする請求項１６乃至２０のいずれか一に記載のコミュニケーション支援方法。

【請求項23】

前記知識差異抽出処理では、前記知識ネットワークにおける前記キーワードに関連するノードの繋がり方に基づいて、前記キーワードに関する知識の差異を抽出する、
ことを特徴とする請求項１６乃至２０のいずれか一に記載のコミュニケーション支援方法。

【請求項24】

前記知識差異抽出処理では、前記キーワードに対して所定以上の関連の強さを有するノードを対象にして、前記キーワードに関する知識の差異を抽出する、
ことを特徴とする請求項２１乃至２３のいずれか一に記載のコミュニケーション支援方法。

【請求項25】

前記知識差異抽出処理では、抽出した前記キーワードに関する知識の差異を、前記知識ネットワークの差異として可視化する、
ことを特徴とする請求項１６乃至２４のいずれか一に記載のコミュニケーション支援方法。

【請求項26】

前記装置は、前記知識ネットワークを参照可能であり、かつ、情報端末からコミュニケーションの音声情報及び／又はテキスト情報を取得可能な装置であり、
前記情報端末から、個人が閲覧したテキスト情報及び／又は個人が発音した音声情報を取得し、前記テキスト情報及び／又は前記音声情報から前記個人の知識情報を抽出し、抽出した前記知識情報と前記個人の識別情報とを対応付けて前記知識ネットワークに登録する知識情報抽出処理を更に実行する、
ことを特徴とする請求項１６乃至２５のいずれか一に記載のコミュニケーション支援方法。

【請求項27】

前記知識ネットワークは、個人の知識を個人毎に蓄積した個人知識ＤＢである、
ことを特徴とする請求項１６乃至２６のいずれか一に記載のコミュニケーション支援方法。

【請求項28】

前記キーワードは、前記コミュニケーションの話題である、
ことを特徴とする請求項１６乃至２７のいずれか一に記載のコミュニケーション支援方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、コミュニケーション支援プログラム、コミュニケーション支援システム及びコミュニケーション支援方法に関し、特に、情報端末を用いたコミュニケーションを支援するコミュニケーション支援プログラム、コミュニケーション支援システム及びコミュニケーション支援方法に関する。

【背景技術】

【0002】

近年、働き方改革などにより、情報端末を用い、通信ネットワークを介して音声や映像を送受信するリモートでのコミュニケーションが増えている。直接、顔を突き合わせたフェース・トゥー・フェイス（Ｆ２Ｆ）でのコミュニケーションであっても誤解や認識齟齬などの問題は生じるが、リモートでのコミュニケーションでは誤解や認識齟齬などの問題が生じやすくなる。

【0003】

このようなコミュニケーションにおける問題に関して、例えば、下記特許文献１には、話し手と聞き手間のコミュニケーションを仲介する対話支援装置において、前記話し手の音声を認識する音声認識部と、前記話し手と前記聞き手との間に誤解や意識のずれを発生させるような曖昧表現単語のリストを格納した曖昧表現単語リスト記憶部と、前記曖昧表現単語リストと前記音声認識結果とを比較して、前記音声認識結果から曖昧表現単語を含む曖昧表現句を検出する曖昧表現検出部と、前記曖昧表現句によって前記聞き手の解釈が曖昧となる曖昧表現対象を前記音声認識結果から検出する曖昧表現対象検出部と、前記話し手の人物情報と前記聞き手の人物情報を特定する話者特定部と、前記曖昧表現句と前記曖昧表現対象の組合せに対して、前記人物情報毎に前記曖昧な表現の認知範囲を格納する認知範囲記憶部と、前記認知範囲記憶部に格納した前記話し手の人物情報に関する前記曖昧表現句と前記曖昧表現対象に対する前記話し手の認知範囲を求め、また、前記認知範囲記憶部に格納した前記聞き手の人物情報に関する前記曖昧表現句と前記曖昧表現対象に対する前記聞き手の認知範囲を求める認知範囲推定部と、前記話し手の認知範囲と前記聞き手の認知範囲とを比較して、前記話し手と前記聞き手の認知範囲の差異を求める認知範囲相違検出部と、を具備した構成が開示されている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００８－８３７５３号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

上記特許文献１において対話者間で比較しているのは、同文献の図３にも示されるように、各対象（スケジュール、納期、範囲、等）における各対話者の曖昧表現（少し、もう少し、あまり変え、等）の認識範囲（認識レベル：時間的長さや割合など）であり、各対話者の知識の範囲、内容など（知識レベル：知識の広がりや深さ、密度等々）ではない。そのため、上記特許文献１の技術を利用しても、コミュニケーションの話題に対する各個人の知識レベルの差異により発生する誤解や認識齟齬などの問題を解決することはできない。

【0006】

本発明は、上記問題点に鑑みてなされたものであって、その主たる目的は、情報端末を用いたコミュニケーションにおける誤解や認識齟齬を回避することができるコミュニケーション支援プログラム、コミュニケーション支援システム及びコミュニケーション支援方法を提供することにある。

【課題を解決するための手段】

【0007】

本発明の一側面は、対話者間のコミュニケーションを支援する装置で動作するコミュニケーション支援プログラムであって、前記装置の制御部に、前記コミュニケーションにおけるキーワードを取得する第１の取得処理、各々の前記対話者の前記キーワードに関する知識として、前記キーワードに対する単語同士の繋がりを表す知識ネットワークを前記対話者ごとに取得する第２の取得処理、各々の前記対話者の前記知識ネットワーク同士の差異を示すための情報を出力する出力処理、を実行させることを特徴とする。

【0008】

本発明の一側面は、コミュニケーション支援システムであって、各個人がコミュニケーションを行う複数の情報端末と、前記コミュニケーション支援プログラムがインストールされた前記装置と、が通信ネットワークで接続されていることを特徴とする。

【0009】

本発明の一側面は、コミュニケーション支援システムであって、各個人がコミュニケーションを行う複数の情報端末が通信ネットワークで接続され、各々の前記情報端末に、前記コミュニケーション支援プログラムがインストールされていることを特徴とする。

【0010】

本発明の一側面は、対話者間のコミュニケーションを支援する装置におけるコミュニケーション支援方法であって、前記コミュニケーションにおけるキーワードを取得する第１の取得処理と、各々の前記対話者の前記キーワードに関する知識として、前記キーワードに対する単語同士の繋がりを表す知識ネットワークを前記対話者ごとに取得する第２の取得処理と、各々の前記対話者の前記知識ネットワーク同士の差異を示すための情報を出力する出力処理と、を実行することを特徴とする。

【発明の効果】

【0011】

本発明のコミュニケーション支援プログラム、リモートでのコミュニケーション支援システム及びコミュニケーション支援方法によれば、情報端末を用いたコミュニケーションにおける誤解や認識齟齬を回避することができる。

【0012】

その理由は、対話者間のコミュニケーションを支援する装置で、コミュニケーションにおけるキーワードを取得する第１の取得処理と、各々の対話者のキーワードに関する知識として、キーワードに対する単語同士の繋がりを表す知識ネットワークを対話者ごとに取得する第２の取得処理と、各々の対話者の知識ネットワーク同士の差異を示すための情報を出力する出力処理と、を実行するからである。

【図面の簡単な説明】

【0013】

【図1】本発明の一実施例に係るコミュニケーション支援システムの構成の一例を示す模式図である。

【図2】本発明の一実施例に係るコミュニケーション支援システムの構成の他の例を示す模式図である。

【図3】本発明の一実施例に係る情報端末の構成を示すブロック図である。

【図4】本発明の一実施例に係るコミュニケーション支援装置の構成を示すブロック図である。

【図5】本発明の一実施例に係るコミュニケーション支援方法の概略動作を示す模式図である。

【図6】本発明の一実施例に係るＩＤ管理テーブルの一例である。

【図7】キーワードに関する知識を示すイメージ図である。

【図8】キーワードに関する知識の差異を示すイメージ図である。

【図9】本発明の一実施例に係るキーワード取得方法を説明する図である。

【図10】本発明の一実施例に係るコミュニケーション支援装置の動作を示すフローチャート図である。

【図11】本発明の一実施例に係るコミュニケーション支援装置の動作を示すフローチャート図である。

【発明を実施するための形態】

【0014】

背景技術で示したように、情報端末を用い、通信ネットワークを介して音声や映像を送受信するリモートでのコミュニケーションでは、誤解や認識齟齬などの問題が生じやすくなる。このようなコミュニケーションの問題に対して、特許文献１では、曖昧な表現とその対象を検知し、それらにおける話し手／聞き手の認知範囲を認知範囲記憶部から特定し、差が一定以上あれば報知するようにしている。しかしながら、この技術は曖昧表現における誤解に特化しており、コミュニケーションの話題に対する各個人の知識レベルの差異までは考慮していない。そのため、各個人の知識レベルの差異により発生する誤解や認識齟齬などの問題を回避することはできない。

【0015】

そこで、本発明の一実施の形態では、コミュニケーションのキーワード（話題や議題、専門用語、話題に関する用語など）に対する各個人の知識レベルを推定し、知識レベルの差異に基づいて、コミュニケーションにおける誤解や認識齟齬が発生する可能性を判定して報知するようにする。

【0016】

具体的には、対話者間のコミュニケーションを支援する装置で、コミュニケーションにおけるキーワードを取得する第１の取得処理と、各々の対話者のキーワードに関する知識として、キーワードに対する単語同士の繋がりを表す知識ネットワークを対話者ごとに取得する第２の取得処理と、各々の対話者の知識ネットワーク同士の差異を示すための情報を出力する出力処理と、を実行する。更に、コミュニケーションを行っている対話者を特定する対話者特定処理と、各々の対話者の知識ネットワークを比較して、キーワードに関する知識の差異を抽出する知識差異抽出処理と、キーワードに関する知識の差異に応じて、報知の必要性を判定する報知判定処理と、を実行し、出力処理では、報知の必要性があると判定された場合に、キーワードに関する知識に差異がある旨を報知する。

【0017】

このように、コミュニケーションのキーワードに対して一定以上の知識差異がある場合は、コミュニケーションの対話者にその旨を報知することにより、互いに知識差異があることを認識した上でコミュニケーションを行うことができ、思わぬ誤解や認識齟齬によって話が噛み合わないという状況の発生を未然に防止することができる。

【実施例】

【0018】

上記した本発明の一実施の形態についてさらに詳細に説明すべく、本発明の一実施例に係るコミュニケーション支援プログラム、コミュニケーション支援システム及びコミュニケーション支援方法について、図１乃至図１１を参照して説明する。図１及び図２は、本実施例のコミュニケーション支援システムの構成を示す模式図であり、図３は、情報端末の構成を示すブロック図、図４は、コミュニケーション支援装置の構成を示すブロック図である。また、図５は、本実施例のコミュニケーション支援方法の概略を示す模式図であり、図６は、本実施例のＩＤ管理テーブルの一例である。また、図７は、キーワードに関する知識を示すイメージ図であり、図８は、キーワードに関する知識の差異を示すイメージ図である。また、図９は、本実施例のキーワード推定方法を説明する図であり、図１０及び図１１は、本実施例のコミュニケーション支援装置の動作を示すフローチャート図である。

【0019】

図１に示すように、本実施例のコミュニケーション支援システム１０は、コミュニケーションを行う個人が使用する複数台の情報端末２０とコミュニケーション支援装置３０とを含み、これらはイーサネット（登録商標）、トークンリング、ＦＤＤＩ（Fiber-Distributed Data Interface）等の規格により定められるＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）等の通信ネットワーク４０を介して接続されている。

【0020】

なお、図１では、情報端末２０とコミュニケーション支援装置３０とを別々の装置としたが、図２に示すように、コミュニケーション支援装置３０が各情報端末２０に内蔵される構成としてもよい。以下、図１のシステム構成を前提にして各装置について詳細に説明する。

【0021】

［情報端末］
情報端末２０は、音声や映像によってコミュニケーションを行うパーソナルコンピュータ、タブレット、スマートフォンなどである。この情報端末２０は、図３（ａ）に示すように、制御部２１と記憶部２２とネットワークＩ／Ｆ部２３と映像入力部２４と音声入出力部２５と表示部２６と操作部２７などで構成される。

【0022】

制御部２１は、マイクロプロセッサ等により構成されるＣＰＵ（Central Processing Unit）とＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）などのメモリとで構成され、ＣＰＵは、ＲＯＭや記憶部２２に記憶した制御プログラムをＲＡＭに展開して実行することにより、情報端末２０全体の動作を制御する。

【0023】

また、図３（ｂ）に示すように、制御部２１により、対話アプリケーション２１ａ、情報収集アプリケーション２１ｂが実行される。

【0024】

対話アプリケーション２１ａは、Ｐ２Ｐ（peer-to-peer）技術を利用して双方向通信を実現するＩＰ（Internet Protocol）電話やスカイプ（登録商標）、サーバを介してクライアント間の双方向通信を実現する電子会議システムなどのアプリケーションである。

【0025】

情報収集アプリケーション２１ｂは、情報端末２０を利用する個人の知識に関する情報を取得する。例えば、各情報端末２０に情報収集アプリケーション２１ｂをインストールする際に個人ＩＤを入力させる。そして、この情報収集アプリケーション２１ｂを常駐アプリケーションとして動作させ、表示部２６に表示した文書、電子メールやＳＮＳ（Social Networking Service）、ＩＰ電話などで送受信した情報、Ｗｅｂブラウザを用いて閲覧したＷｅｂ情報、電子会議の音声や議事録などの情報を取得する。具体的には、情報収集アプリケーション２１ｂは、画面に表示された情報を取得し、公知のＯＣＲ（Optical Character Recognition）を用いてテキスト情報を取得し、取得したテキスト情報と個人ＩＤとを対応付けて記憶部２２に記憶したりコミュニケーション支援装置３０に通知したりする。また、情報収集アプリケーション２１ｂは、音声情報を取得し、公知の音声認識技術を用いてテキスト情報に変換し、変換したテキスト情報と個人ＩＤとを対応付けて記憶部２２に記憶したりコミュニケーション支援装置３０に通知したりする。

【0026】

記憶部２２は、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）などで構成され、ＣＰＵが各部を制御するためのプログラム（対話アプリケーション２１ａ及び情報収集アプリケーション２１ｂを含む。）、自装置の処理機能に関する情報、情報収集アプリケーション２１ｂが収集した情報などを記憶する。

【0027】

ネットワークＩ／Ｆ部２３は、ＮＩＣ（Network Interface Card）やモデムなどで構成され、情報端末２０を通信ネットワーク４０に接続し、情報端末２０同士での映像及び音声の双方向通信を可能にすると共に、情報収集アプリケーション２１ｂが収集した情報を個人ＩＤに対応付けてコミュニケーション支援装置３０に送信したり、情報端末２０同士のコミュニケーション情報をコミュニケーション支援装置３０に送信したりする。

【0028】

映像入力部２４は、ＣＣＤ（Charge Coupled Devices）カメラなどで構成され、情報端末２０を操作している個人の映像を取得する。音声入出力部２５は、マイクやスピーカなどで構成され、情報端末２０を操作している個人の音声を取得すると共に、他の情報端末２０を操作している個人の音声を出力する。

【0029】

表示部２６は、液晶表示装置（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（electroluminescence）表示装置などで構成され、対話アプリケーション２１ａの画面などを表示する。操作部２７は、マウスやキーボードなどで構成され、対話アプリケーション２１ａの画面における各種操作を可能にする。

【0030】

［コミュニケーション支援装置］
コミュニケーション支援装置３０は、情報端末２０同士のコミュニケーションを支援するコンピュータ装置などである。このコミュニケーション支援装置３０は、図４（ａ）に示すように、制御部３１と記憶部３２とネットワークＩ／Ｆ部３３と報知部３４などで構成される。

【0031】

制御部３１は、マイクロプロセッサ等により構成されるＣＰＵとＲＯＭやＲＡＭなどのメモリとで構成され、ＣＰＵは、ＲＯＭや記憶部３２に記憶した制御プログラム（本実施例のコミュニケーション支援プログラムを含む。）をＲＡＭに展開して実行することにより、コミュニケーション支援装置３０全体の動作を制御する。

【0032】

また、上記制御部３１は、図４（ｂ）に示すように、知識情報抽出部３１ａ、対話者特定部３１ｂ、音声認識部３１ｃ、キーワード取得部３１ｄ、キーワード知識抽出部３１ｅ、知識差異抽出部３１ｆ、報知判定部３１ｇなどとしても機能する。

【0033】

知識情報抽出部３１ａは、情報端末２０から、個人ＩＤに対応付けられた情報を取得し、取得した情報に含まれる文章やフレーズを、意味を持つ最小限の単位である単語に分解する形態素解析を行い、分解した単語の共起度解析を行って、単語同士の繋がりを表すネットワークモデル（例えば、共起ネットワーク）を生成する。そして、生成した共起ネットワークを個人ＩＤに対応付けて知識ネットワーク（本実施例では、個人知識ＤＢと呼ぶ。）に登録する。また、知識情報抽出部３１ａは、新たな情報を取得したら、個人ＩＤに基づいて対象の個人知識ＤＢを特定し、情報のマージを行う。なお、本実施例では、個人知識ＤＢにネットワークの情報を登録するものとする。

【0034】

対話者特定部３１ｂは、情報端末２０からコミュニケーション情報を受信したら、記憶部３２に記憶されたＩＤ管理テーブルの個人特定情報を参照して、コミュニケーションを行っている対話者を特定して、その対話者の個人ＩＤを取得する。例えば、情報端末２０から音声情報を受信した場合は、ＩＤ管理テーブルの声紋情報と比較して対話者を特定して、その対話者の個人ＩＤを取得する。

【0035】

音声認識部３１ｃは、必要に応じて設けられ、コミュニケーション情報が音声情報の場合に、公知の音声認識技術を利用して、音声情報をテキスト情報に変換する。

【0036】

キーワード取得部３１ｄは、コミュニケーションにおけるキーワード（コミュニケーションの内容となる事柄であり、話題や議題、専門用語、話題に関する用語を含む。）を取得する（この処理を第１の取得処理とする。）。例えば、コミュニケーションの内容から、コミュニケーションのキーワードを推定する。具体的には、コミュニケーション情報（テキスト情報）に対して形態素解析を行い、ネットワークモデル（例えば、共起ネットワーク）を生成し、近接中心性などを用いて、共起ネットワークの中心ノードを特定し、中心として抽出されたノードを「キーワード」として推定する。なお、ここでは、ネットワークモデルとして共起ネットワークを利用し、近接中心性を用いてキーワードを推定したが、キーワードの推定方法は上記方法に限定されるものではない。また、本実施例では、共起ネットワークを生成してキーワードを推定する場合について記載するが、コミュニケーションに際してキーワードが提示された場合は、そのキーワードを取得すればよい。

【0037】

キーワード知識抽出部３１ｅは、各々の対話者のキーワードに関する知識として、キーワードに対する単語同士の繋がりを表す知識ネットワークを対話者ごとに取得する（この処理を第２の取得処理とする。）。例えば、対話者特定部３１ｂが特定した個人ＩＤと、キーワード取得部３１ｄが取得（推定）したキーワードと、を用い、記憶部３２に記憶された個人知識ＤＢを参照して、各対話者のキーワードに関する知識（キーワード知識と呼ぶ。）を、単語同士の繋がりを表すネットワークとして抽出する。このキーワード知識の抽出方法については後述する。

【0038】

知識差異抽出部３１ｆは、キーワード知識抽出部３１ｅが抽出した各対話者のネットワークを比較して、各対話者のキーワード知識の差異を抽出する。例えば、各対話者のキーワード知識に存在するノードをそれぞれ比較し、その差異率（知識差異）を抽出する。

【0039】

報知判定部３１ｇは、知識差異抽出部３１ｆが抽出した各対話者のキーワード知識の差異に応じて、報知の必要性の有無を判定する。例えば、知識差異抽出部３１ｆが抽出した差異率が予め定めた閾値を超える場合、コミュニケーション上の誤解や認識齟齬が生じやすいため、報知の必要性があると判定して、キーワードに関する知識に差異がある旨を報知部３４に報知させる。

【0040】

上記知識情報抽出部３１ａ、対話者特定部３１ｂ、音声認識部３１ｃ、キーワード取得部３１ｄ、キーワード知識抽出部３１ｅ、知識差異抽出部３１ｆ、報知判定部３１ｇはハードウェアとして構成してもよいし、制御部３１を、知識情報抽出部３１ａ、対話者特定部３１ｂ、音声認識部３１ｃ、キーワード取得部３１ｄ、キーワード知識抽出部３１ｅ、知識差異抽出部３１ｆ、報知判定部３１ｇ（特に、対話者特定部３１ｂ、キーワード取得部３１ｄ、キーワード知識抽出部３１ｅ、知識差異抽出部３１ｆ、報知判定部３１ｇ）として機能させるソフトウェア（コミュニケーション支援プログラム）として構成し、ＣＰＵに当該コミュニケーション支援プログラムを実行させるようにしてもよい。

【0041】

記憶部３２は、ＨＤＤやＳＳＤなどで構成され、ＣＰＵが各部を制御するためのプログラム、自装置の処理機能に関する情報、個人知識ＤＢ、図６に示すＩＤ管理テーブルなどを記憶する。

【0042】

ネットワークＩ／Ｆ部３３は、ＮＩＣやモデムなどで構成され、コミュニケーション支援装置３０を通信ネットワーク４０に接続し、情報端末２０から情報収集アプリケーション２１ｂが収集した情報やコミュニケーション情報を取得したり、必要に応じて、各情報端末２０に報知情報を通知したりする。

【0043】

報知部３４は、表示部や出力部などであり、各々の対話者の知識ネットワーク同士の差異を示すための情報を出力する（この処理を出力処理とする。）。例えば、報知部３４は、報知判定部３１ｇの判定結果に従って、キーワードに関する知識に差異がある旨を報知する。また、報知部３４は、キーワード知識抽出部３１ｅや知識差異抽出部３１ｆの指示に従って、図７及び図８に示す共起ネットワークのイメージ図を表示したり、知識の差異率を表示したりする。

【0044】

なお、図１乃至図５は、本実施例のコミュニケーション支援システム１０の一例であり、各装置の構成や制御は適宜変更可能である。

【0045】

例えば、本実施例では、コミュニケーション支援装置３０の記憶部３２に個人知識ＤＢを保存したが、通信ネットワーク４０を介して接続されるサーバなどに個人知識ＤＢを保存し、キーワード知識抽出部３１ｅは、上記サーバなどにアクセスして個人知識ＤＢを参照するようにしてもよい。

【0046】

また、図４では、コミュニケーション支援装置３０に報知部３４を設けて、キーワードに関する知識に差異がある旨を報知したが、報知判定部３１ｇの判定結果に従って情報端末２０に報知情報を通知し、情報端末２０の音声入出力部２５や表示部２６から、キーワードに関する知識に差異がある旨を報知するようにしてもよい。その際、全ての対話者に、キーワードに関する知識に差異がある旨を報知してもよいし、一部の対話者（例えば、キーワードに関する知識が豊富な対話者）に、キーワードに関する知識に差異がある旨を報知してもよい。

【0047】

また、図４では、コミュニケーション支援装置３０を情報端末２０とは別の装置として説明したが、図２に示すように、コミュニケーション支援装置３０は情報端末２０に含まれる構成としてもよく、その場合は、図３の情報端末２０の制御部２１を、知識情報抽出部３１ａ、対話者特定部３１ｂ、音声認識部３１ｃ、キーワード取得部３１ｄ、キーワード知識抽出部３１ｅ、知識差異抽出部３１ｆ、報知判定部３１ｇとして機能させることができる。

【0048】

以下、コミュニケーション支援システム１０にコミュニケーション情報が入力された場合の処理について、図５乃至図８を参照して説明する。ここでは、音声でのコミュニケーションを例にして説明する。なお、個人知識ＤＢ及びＩＤ管理テーブルは予め作成されて記憶部３２などに記憶されているものとする。

【0049】

（１）対話者の特定
対話者特定部３１ｂは、コミュニケーション情報として音声情報を取得する。そして、図６に示すＩＤ管理テーブルの個人特定情報（声紋情報）と比較することにより、取得した音声情報に対応する個人を特定して個人ＩＤ（ここではu0001、u0003とする。）を取得し、特定した個人ＩＤをキーワード知識抽出部３１ｅに通知する。

【0050】

（２）キーワードの推定
音声認識部３１ｃは、発話内容（音声情報）をテキスト情報に変換し、キーワード取得部３１ｄは、文字化された発話内容の共起ネットワークを生成する。そして、近接中心性を用いて共起ネットワークの中心ノードを抽出し、抽出されたノードをキーワードとして推定し、推定したキーワードをキーワード知識抽出部３１ｅに通知する。ここでは、「高血圧」がキーワードとして推定されたとして説明する。

【0051】

（３）キーワード知識の抽出
個人ＩＤとキーワードが通知されたキーワード知識抽出部３１ｅは、個人知識ＤＢを参照して、個人ＩＤ（ここではu0001,u0003）に対するキーワード知識を抽出する。各対話者のキーワード知識も単語同士の繋がりを表すネットワークの情報である。そして、キーワードである「高血圧」をルート（中心）として、それに繋がる情報（キーワード群）を抽出する。その際、キーワード知識を直感的に理解できるように可視化することが好ましく、例えば、図７に示すようなネットワークを表すイメージ図を表示することができる。

【0052】

（４）知識差異の抽出（ノードの一致率）
上記（３）の処理で抽出した各対話者のキーワード知識に存在するノードを比較する。例えば、u0001のノードが120個、u0003のノードが90個であるとし、双方で一致しているノードが60個であるとする。この時の差異率は、１－共通部分／和集合で表すことができ、
差異率＝１－60／(120＋90－60)＝0.6
となる。その際、キーワード知識の差異を直感的に理解できるようにネットワークの差異として可視化することが好ましく、例えば、図８（ａ）に示すように各対話者のキーワード知識のイメージ図を対比可能に表示すると共に差異率を表示したり、図８（ｂ）に示すように各対話者のキーワード知識のイメージをマージし、その差異をハイライト表示（図のドットのハッチング領域参照）したりすることができる。なお、その他の知識差異の抽出方法については後述する。

【0053】

（５）報知の判定、報知
報知判定部３１ｇは、知識差異抽出部３１ｆによって抽出された差異率が予め定めた閾値を超える場合、コミュニケーション上の誤解や認識齟齬が生じやすいため、報知が必要と判定する。例えば、差異率の閾値として「0.5」が設定されている場合、上記の例では閾値を超えているため、報知が必要と判定する。報知が必要と判定された場合は、報知部３４から音声情報や視覚的情報で、キーワード知識に差異がある旨の報知を行う。若しくは、情報端末２０に報知情報を送信して、情報端末２０の音声入出力部２５や表示部２６から音声情報若しくは視覚的情報で、キーワード知識に差異がある旨の報知を行う。

【0054】

なお、上記（４）では、ノードの一致率を用いて知識差異を抽出したが、ノード間の距離を用いて知識差異を抽出することもできる。具体的には、（３）の処理で抽出した各対話者のキーワード知識に存在するノードをそれぞれベクトル値に変換する。ベクトル値への変換方法は、例えばWord2Vecなどの手法を用いることができる。次に、各ノードのベクトル値の平均値を算出し、その平均値を各対話者の知識ベクトルとする。
u0001：（V1＋V2・・・＋V120)／120＝u01V
u0003：（V1＋V2・・・＋V90）／90＝u03V
そして、それぞれのベクトル値を、コサイン類似度（距離）を用いて類似度を求める。
cos（u01V,u03V）＝0.73とすると、0.73は類似度であるため、差異率は1-0.73＝0.27となり、この差異率に基づいて知識差異を抽出することができる。

【0055】

また、ノードの繋がり方を用いて知識差異を抽出することもできる。具体的には、対話者それぞれについて、ルートからのすべてのノードへの経路数を算出する。ここでは、u0001：100個、u0003：120個とし、その内の対話者間で一致する経路数を算出する。この時の差異率は、１－共通部分／和集合で表すことができ、例えば、30個の経路が一致していたとすると、
差異率＝１－30／（100＋120－30）＝0.84となり、この差異率に基づいて知識差異を抽出することができる。

【0056】

また、所定以上の関連の強さを有するノードを対象にして知識差異を抽出することもできる。具体的には、（３）の処理で抽出した各対話者のキーワード知識は、キーワードである「高血圧」をルートとしたネットワークである。キーワードから遠い知識は重要でないと判断し、例えば、ルートから5階層目までの情報（ノード）を用い、それ以降の階層は無視する。そして、5階層目までのノードに対して、ノードの一致率やノード間の距離、ノードの繋がり方に基づいて知識差異（差異率）を抽出することができる。

【0057】

また、（１）～（５）の処理は、コミュニケーションの内容の変化に合わせて動的に変化させることもできる。対話は時々刻々と進められており、新たなコミュニケーション情報が随時入力される。そこで、キーワード取得部３１ｄは、ある一定量のコミュニケーション情報を取得する度に推定を行う。例えば、図９に示すように、キーワード取得部３１ｄは、コミュニケーション情報を定期的に監視し、新規に300文字以上のコミュニケーション情報が入力されたら再度、推定を行ったり、予め定めた所定時間が経過したら再度、推定を行ったりする。また、キーワード推定に利用する情報は、最新の情報から一定量を用いることができる。例えば、1000文字を上限とした場合、遡って1000文字までのコミュニケーション情報を使用してキーワード推定を行う。そして、キーワードが変化した場合は、再度推定したキーワードに対して、（３）のキーワード知識の抽出、（４）の知識差異の抽出、（５）の報知の判定、報知を改めて行う。

【0058】

以下、コミュニケーション支援装置３０の具体的な処理について説明する。ＣＰＵは、ＲＯＭ又は記憶部３２に記憶したコミュニケーション支援プログラムをＲＡＭに展開して実行することにより、図１０及び図１１のフローチャート図に示す各ステップの処理を実行する。

【0059】

まず、制御部３１（対話者特定部３１ｂ）は、コミュニケーション情報から対話者を特定して個人ＩＤを取得する（Ｓ１０１）。対話者が特定できなかった場合は（Ｓ１０２のＮｏ）、個人知識ＤＢのある個人でないことを通知して（Ｓ１０３）、一連の処理を終了する。

【0060】

一方、対話者が特定できた場合は（Ｓ１０２のＹｅｓ）、必要に応じて、制御部３１（音声認識部３１ｃ）は、音声情報をテキスト情報に変換し、制御部３１（キーワード取得部３１ｄ）は、対話内容からキーワードを推定する（Ｓ１０４）。次に、制御部３１（キーワード知識抽出部３１ｅ）は、取得した個人ＩＤを用いて各対話者の個人知識ＤＢにアクセスし（Ｓ１０５）、推定したキーワードを用いて、各対話者の個人知識ＤＢの中からキーワード知識を抽出する（Ｓ１０６）。その際、抽出した各対話者のキーワード知識を図７に示すようなイメージ図で可視化することできる。

【0061】

そして、対話者分、Ｓ１０６の処理を実行したら、制御部３１（知識差異抽出部３１ｆ）は、対話者分のキーワード知識の差分情報（差異率）を抽出する（Ｓ１０７）。その際、抽出したキーワード知識の差分情報（差異率）を図８に示すようなイメージ図で可視化することができる。

【0062】

その後、制御部３１（報知判定部３１ｇ）は、抽出したキーワード知識の差分情報（差異率）から、報知の必要性を判定する（Ｓ１０８）。報知が不要と判断した場合は、Ｓ１０１に戻ってコミュニケーション情報を監視し、報知が必要と判断した場合は、報知部３４は、対話者間でキーワード知識に差異がある旨の報知を行って（Ｓ１０９）、一連の処理を終了する。

【0063】

図１０は、あるキーワードに関してコミュニケーションを行っている場合の処理であるが、コミュニケーションは時々刻々変化しており、それに伴ってキーワードも変化する。その場合は、図１１に示すように、制御部３１（キーワード取得部３１ｄ）は、定期的に（例えば、一定量の文字数や一定時間毎に）キーワードを推定する（Ｓ２０１）。次に、制御部３１（キーワード取得部３１ｄ）は、キーワードに変化があるかを判断し（Ｓ２０２）、変化がない場合は（Ｓ２０２のＮｏ）、Ｓ２０１に戻ってキーワードを推定し、キーワードに変化がある場合は（Ｓ２０２のＹｅｓ）、新たなキーワードに対して、図１０に示した処理を行う（Ｓ２０３）。

【0064】

このように、キーワードに対して一定以上の知識差異がある場合は、コミュニケーションの対話者にその旨を報知することにより、互いに知識差異があることを認識した上でコミュニケーションを行うことができ、思わぬ誤解や認識齟齬によって話が噛み合わないという状況の発生を未然に防止することができる。

【0065】

なお、本発明は上記実施例の記載に限定されるものではなく、本発明の趣旨を逸脱しない限りにおいて、その構成や制御は適宜変更可能である。

【0066】

例えば、上記実施例では、コミュニケーション支援装置３０の記憶部３２に個人知識ＤＢを保存する場合について記載したが、ネットワーク上のサーバなどに個人知識ＤＢが保存され、コミュニケーション支援装置３０がサーバの個人知識ＤＢにアクセスして、各対話者のキーワード知識を取得する構成としてもよい。

【産業上の利用可能性】

【0067】

本発明は、情報端末を用いたコミュニケーションを支援するコミュニケーション支援プログラム、当該コミュニケーション支援プログラムを記録した記録媒体、コミュニケーション支援システム及びコミュニケーション支援方法に利用可能である。

【符号の説明】

【0068】

１０ コミュニケーション支援システム
２０ 情報端末
２１ 制御部
２１ａ 対話アプリケーション
２１ｂ 情報収集アプリケーション
２２ 記憶部
２３ ネットワークＩ／Ｆ部
２４ 映像入力部
２５ 音声入出力部
２６ 表示部
２７ 操作部
３０ コミュニケーション支援装置
３１ 制御部
３１ａ 知識情報抽出部
３１ｂ 対話者特定部
３１ｃ 音声認識部
３１ｄ キーワード取得部
３１ｅ キーワード知識抽出部
３１ｆ 知識差異抽出部
３１ｇ 報知判定部
３２ 記憶部
３３ ネットワークＩ／Ｆ部
３４ 報知部
４０ 通信ネットワーク

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】