特許 7525222 遠隔会議システム、方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-22

(45)【発行日】2024-07-30

(54)【発明の名称】遠隔会議システム、方法及びプログラム

(51)【国際特許分類】

   H04N 7/15 20060101AFI20240723BHJP

   H04M 3/56 20060101ALI20240723BHJP

【ＦＩ】

H04N7/15 150

H04M3/56 Z

【請求項の数】 10

(21)【出願番号】P 2021130729

(22)【出願日】2021-08-10

(65)【公開番号】P2023025464

(43)【公開日】2023-02-22

【審査請求日】2023-04-07

(73)【特許権者】

【識別番号】000227205

【氏名又は名称】ＮＥＣプラットフォームズ株式会社

(74)【代理人】

【識別番号】100103894

【弁理士】

【氏名又は名称】家入 健

(72)【発明者】

【氏名】藤崎 満輝

【審査官】醍醐 一貴

(56)【参考文献】

【文献】特開２００８－１２４７０２（ＪＰ，Ａ）

【文献】特開２００５－３４１０１５（ＪＰ，Ａ）

【文献】特開２００４－２１４９３４（ＪＰ，Ａ）

【文献】特開２０１２－１７８６２１（ＪＰ，Ａ）

【文献】特開２０１１－０５３６２９（ＪＰ，Ａ）

【文献】特開２０１８－０３２９１２（ＪＰ，Ａ）

【文献】特開平０８－３３６１２２（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１４－７／１７３

Ｈ０４Ｎ ２１／００－２１／８５８

Ｈ０４Ｌ ６１／００－６５／８０

Ｈ０４Ｍ ３／３８－３／５８

(57)【特許請求の範囲】

【請求項1】

遠隔会議に参加するユーザが前記遠隔会議から離席しているか否かを判定する離席判定部と、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出するキーワード検出部と、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録し、前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出されない場合、前記遠隔会議のログを記録しないログ記録部と、を備える、
遠隔会議システム。

【請求項2】

前記キーワードが検出された場合、離席していると判定されたユーザが前記遠隔会議に用いる端末に前記ログを出力させるログ出力部をさらに備える、
請求項１に記載の遠隔会議システム。

【請求項3】

前記ユーザが前記遠隔会議から離席しているか否かの判定結果に基づいて、前記ユーザが前記遠隔会議から離席しているか否かを示すステータスを、各ユーザの端末における遠隔会議画面に出力するステータス状態出力部をさらに備える、
請求項１又は２に記載の遠隔会議システム。

【請求項4】

前記ユーザが前記遠隔会議から離席していると判定された場合、離席していると判定されたユーザの利用するマイクによって取得された音声を前記遠隔会議に参加する他のユーザの端末に出力しない設定にする音声設定部をさらに備える、
請求項１乃至３のいずれか１項に記載の遠隔会議システム。

【請求項5】

前記ユーザが前記遠隔会議から離席していると判定された場合、離席していると判定されたユーザの利用するカメラによって取得された画像を前記遠隔会議に参加する他のユーザの端末に出力しない設定にする画像設定部をさらに備える、
請求項１乃至４のいずれか１項に記載の遠隔会議システム。

【請求項6】

前記キーワードが検出された場合、前記ユーザが前記遠隔会議に用いる端末にアラームを通知する通知部をさらに備える、
請求項１乃至５のいずれか１項に記載の遠隔会議システム。

【請求項7】

前記ログは、
前記キーワードが検出された時点から所定の期間に取得された前記キーワードを発言したユーザの画像データと、
前記キーワードが検出された時点から所定の期間に取得された前記キーワードを発言したユーザの音声データと、
当該音声データを文字に変換した文字データとの少なくとも１つを含む、
請求項１乃至６のいずれか１項に記載の遠隔会議システム。

【請求項8】

前記ログは、
前記キーワードが検出された時点から所定の期間に取得された前記キーワードを発言したユーザとは異なるユーザの画像データと、
前記キーワードが検出された時点から所定の期間に取得された前記キーワードを発言したユーザとは異なるユーザの音声データと、
当該音声データを文字に変換した文字データとの少なくとも１つを含む、
請求項７に記載の遠隔会議システム。

【請求項9】

遠隔会議に参加するユーザの画像データに基づいて、前記ユーザが前記遠隔会議から離席しているか否かを判定することと、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出することと、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録し、前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出されない場合、前記遠隔会議のログを記録しないことと、を含む、
方法。

【請求項10】

遠隔会議に参加するユーザの画像データに基づいて、前記ユーザが前記遠隔会議から離席しているか否かを判定する処理と、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出する処理と、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録し、前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出されない場合、前記遠隔会議のログを記録しない処理と、を遠隔会議装置に実行させる、
プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、遠隔会議システム、方法及びプログラムに関する。

【背景技術】

【0002】

特許文献１には、テレビ会議装置や在席会議装置のように動画像の圧縮による符号化機構を含む動画像通信装置において、基本機能として内蔵している動き補償機構や測距機構の出力する情報を活用し、遠隔会議から利用者が退席（離席）している事を判定し、回線あるいは電源を確実に切断することが開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開平０８－３３６１２２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１に係る動画像通信装置では、ユーザが遠隔会議から離席している際に、会議内容を把握するためには録音・録画機能に利用するしかなく、遠隔会議における重要な会話を聞き逃す可能性があるという課題があった。

【0005】

本開示は、そのような課題を鑑みることによって、ユーザが遠隔会議から離席している際に遠隔会議における重要な会話を聞き逃す可能性を低減できる遠隔会議システム、方法及びプログラムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本開示の遠隔会議システムは、
遠隔会議に参加するユーザが前記遠隔会議から離席しているか否かを判定する離席判定部と、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出するキーワード検出部と、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録するログ記録部と、を備える。

【0007】

本開示の方法は、
遠隔会議に参加するユーザの画像データに基づいて、前記ユーザが前記遠隔会議から離席しているか否かを判定することと、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出することと、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録することと、を含む。

【0008】

本開示のプログラムは、
遠隔会議に参加するユーザの画像データに基づいて、前記ユーザが前記遠隔会議から離席しているか否かを判定する処理と、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出する処理と、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録することを決定する処理と、を遠隔会議装置に実行させる。

【発明の効果】

【0009】

本開示によって、ユーザが遠隔会議から離席している際に遠隔会議における重要な会話を聞き逃す可能性を低減できる遠隔会議システム、方法及びプログラムを提供することができる。

【図面の簡単な説明】

【0010】

【図1】第１の実施形態に係る遠隔会議システムの構成を示すブロック図である。

【図2】第２の実施形態に係る遠隔会議システムの構成を示すブロック図である。

【図3】第２の実施形態に係る遠隔会議装置の構成を示すブロック図である。

【図4】第２の実施形態に係る遠隔会議装置の動作を示すフローチャートである。

【図5】第２の実施形態に係るユーザＡの端末に出力される遠隔会議画面を示す図である。

【図6】第２の実施形態に係るユーザＢの端末に出力される遠隔会議画面を示す図である。

【図7】第２の実施形態に係るログ記録ファイルを示す図である。

【図8】第２の実施形態に係るユーザＡの端末に出力されるログ出力後の遠隔会議画面を示す図である。

【図9】本実施形態に係るコンピュータの構成を示すブロック図である。

【発明を実施するための形態】

【0011】

以下では、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。各図面において、同一要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略する。

【0012】

（第１の実施形態）
まず、図１を用いて、第１の実施形態に係る遠隔会議システム１の構成について説明する。遠隔会議システム１は、離席判定部１３、キーワード検出部１５及びログ記録部１７を備える。

【0013】

離席判定部１３は、遠隔会議に参加するユーザの画像に基づいて、ユーザが遠隔会議から離席しているか否かを判定する。キーワード検出部１５は、遠隔会議に参加する他のユーザの発言から所定のキーワードを検出する。ログ記録部１７は、ユーザが遠隔会議から離席したと判定された場合、かつキーワードが検出された場合、遠隔会議のログを記録する。

【0014】

したがって、第１の実施形態に係る遠隔会議システム１は、キーワードに基づく遠隔会議における重要な会話のログを記録できる。そうすることによって、遠隔会議システム１は、ユーザが離席している際に遠隔会議における重要な会話を聞き逃す可能性を低減できる。

【0015】

（第２の実施形態）
続いて、図２を用いて、第２の実施形態に係る遠隔会議システム２の構成について説明する。遠隔会議システム２は、遠隔会議装置１０を備え、また、遠隔会議に参加するユーザ（例えばユーザＡ、ユーザＢ、ユーザＣ及びユーザＤ）ごとに端末２０、カメラ３０及びマイク４０を備える。なお、遠隔会議に参加するユーザの数は上述した例に限られない。例えば、遠隔会議には、ユーザＡからユーザＤ以外のユーザＮが参加してもよい。

【0016】

遠隔会議装置１０は、無線方式又は有線方式によってネットワークと接続し、各ユーザによって用いられる端末２０、カメラ３０及びマイク４０と通信する。無線方式は、例えば無線ＬＡＮ（Wireless Local Area Network）やＬＴＥ（Long Term Evolution）などの通信方式である。有線方式は、例えばイーサーネットなどの通信方式である。

【0017】

遠隔会議装置１０は、遠隔会議専用の遠隔会議アプリケーションをインストールしており、各ユーザの端末２０間での遠隔会議を実現する。例えば、本図に示すように、遠隔会議装置１０は、ユーザＡからユーザＤが遠隔会議に参加する場合、ユーザＡからユーザＤのそれぞれの端末２０にインストールされた遠隔会議アプリケーションを用いて、端末２０間での遠隔会議を実現する。具体的には、遠隔会議装置１０は、遠隔会議において、カメラ３０及びマイク４０から取得された画像データや音声データが用いることによって、各ユーザの端末２０間においてユーザ間のビデオ会話や画面の共有等を実現する。

【0018】

端末２０は、ＰＣ（Personal Computer）などの固定端末又はスマートフォンやタブレットなどの移動型端末などの端末であり、遠隔会議に用いられる。端末２０は、遠隔会議装置１０、カメラ３０及びマイク４０と無線方式又は有線方式によって通信する。

【0019】

また、端末２０は、遠隔会議アプリケーションをインストールしている。端末２０は、遠隔会議アプリケーションを起動すると、遠隔会議専用の画面（以下、遠隔会議画面）をディスプレイに表示する。遠隔会議画面については後述する。
なお、端末２０は、カメラ３０及びマイク４０を備えていてもよい。また、端末２０は、音声を出力するスピーカ（不図示）を備えている。

【0020】

カメラ３０は、ユーザを撮像する機能を有し、遠隔会議に用いられる。カメラ３０は、無線方式又は有線方式によってネットワークと接続し、遠隔会議装置１０と通信する。また、カメラ３０は、無線方式又は有線方式によって端末２０と通信する。例えば、カメラ３０は、撮像されたユーザの画像データを遠隔会議装置１０及び端末２０に送信する。なお、画像データは静止画であってもよいし、動画であってもよい。

【0021】

マイク４０は、ユーザが発声した音声を取得する機能を有し、遠隔会議に用いられる。マイク４０は、無線方式又は有線方式によってネットワークと接続し、遠隔会議装置１０と通信する。マイク４０は、無線方式又は有線方式によって端末２０と通信する。例えば、マイク４０は取得されたユーザの音声データを遠隔会議装置１０及び端末２０に送信する。

【0022】

続いて、図３を用いて、第２の実施形態に係る遠隔会議装置１０の構成について説明する。遠隔会議装置１０は、画像データ取得部１１、音声データ取得部１２、離席判定部１３、会議設定部１４、キーワード検出部１５、キーワードリスト記憶部１６、ログ記録部１７、ログ出力部１８及び通知部１９を備える。

【0023】

画像データ取得部１１は、遠隔会議に参加する各ユーザ（ユーザＡ～ユーザＤ）の利用するカメラ３０からそれぞれ画像データを取得する。当該画像データは、遠隔会議において各端末２０の遠隔会議画面に出力される画像データである。

【0024】

音声データ取得部１２は、各ユーザの利用するマイク４０からそれぞれ音声データを取得する。当該音声データは、遠隔会議において各端末２０に出力される音声データである。

【0025】

離席判定部１３は、ユーザが遠隔会議から離席しているか否を判定する。例えば、離席判定部１３は、画像データ取得部１１によって取得された画像に基づいて、各ユーザが遠隔会議から離席しているか否を判定する。以下の本図の説明では、離席判定部１３は、画像データ取得部１１によって取得されたユーザＡの利用するカメラ３０の画像に基づいて、ユーザＡが遠隔会議から離席しているか否を判定するとする。離席判定部１３は、ユーザＡの利用するカメラ３０によって取得された画像からユーザＡの顔が認識できなかった場合、ユーザＡが遠隔会議から離席していると判定する。一方、離席判定部１３は、ユーザＡの利用するカメラ３０によって取得された画像からユーザＡの顔が認識できた場合、ユーザＡが遠隔会議から離席していない、つまり着席していると判定する。

【0026】

会議設定部１４は、ユーザＡが遠隔会議から離席しているか否かを示すステータスを、各ユーザの端末２０における遠隔会議画面に出力するステータス状態出力部としての機能を有する。

【0027】

また、会議設定部１４は、離席判定部１３によるユーザＡが遠隔会議から離席しているか否かの判定結果に基づいて、ユーザＡの音声を遠隔会議に参加する他のユーザ（ユーザＢ～ユーザＤ）の端末２０に出力するか否かを設定する音声設定部としての機能を有する。具体的には、会議設定部１４は、離席判定部１３によってユーザＡが遠隔会議から離席していると判定された場合、離席していると判定されたユーザＡの利用するマイク４０によって取得された音声を遠隔会議に参加する他のユーザの端末２０に出力しない設定にする。一方、会議設定部１４は、離席判定部１３によってユーザＡが遠隔会議から離席していないと判定された場合、離席していないと判定されたユーザＡの利用するマイク４０によって取得された音声を遠隔会議に参加する他のユーザの端末２０に出力する設定にする。

【0028】

また、会議設定部１４は、離席判定部１３によるユーザＡが遠隔会議から離席しているか否かの判定結果に基づいて、ユーザＡの画像を遠隔会議に参加する他のユーザの端末２０に出力するか否かを設定する画像設定部としての機能を有する。具体的には、離席判定部１３によってユーザＡが遠隔会議から離席していると判定された場合、離席していると判定されたユーザＡの利用するカメラ３０によって取得された画像を遠隔会議に参加する他のユーザの端末２０の遠隔会議画面に出力しない設定にする。一方、会議設定部１４は、離席判定部１３によってユーザＡが遠隔会議から離席していないと判定された場合、離席していないと判定されたユーザＡの利用するカメラ３０によって取得された画像を遠隔会議に参加する他のユーザの端末２０の遠隔会議画面に出力する設定にする。

【0029】

キーワード検出部１５は、離席判定部１３によってユーザＡが遠隔会議から離席したと判定された場合、遠隔会議に参加する他のユーザの音声データ取得部１２によって取得された音声データに基づく発言から所定のキーワードを検出する処理を開始する。そして、キーワード検出部１５は、遠隔会議に参加する他のユーザの発言に含まれる言葉がキーワードリスト記憶部１６に記憶されるキーワードに該当する場合にキーワードを検出したとする。

【0030】

キーワードリスト記憶部１６は、１又は複数のキーワードを含むキーワードリストを記憶している。キーワードリストは、遠隔会議の主催者、遠隔会議に参加するユーザ等によって予め登録されている。

【0031】

ログ記録部１７は、キーワード検出部１５によってキーワードが検出された場合、遠隔会議におけるログを記録することを決定する。そして、ログ記録部１７は、当該ログを記録する。ログは、「検出されたキーワード」、「キーワードを発言したユーザ名」、「キーワードが検出された日時（日付及び時刻）」の情報を含む。また、ログは、「キーワードが検出された時点から所定の期間に取得されたキーワードを発言したユーザの画像データ」と、「キーワードが検出された時点から所定の期間に取得されたキーワードを発言したユーザの音声データ」と、「当該音声データを文字に変換した文字データ」との少なくとも１つを含む。なお、ログ記録部１７は、遠隔会議におけるログを記録することを決定し、ユーザの利用する端末２０に遠隔会議におけるログを記録させてもよい。

【0032】

なお、ログは、「キーワードが検出された時点から所定の期間に取得されたキーワードを発言したユーザとは異なるユーザの画像データ」と「キーワードが検出された時点から所定の期間に取得されたキーワードを発言したユーザとは異なるユーザの音声データ」と、「当該音声データを文字に変換した文字データ」との少なくとも１つを含んでいてもよい。

【0033】

ログ出力部１８は、ログ記録部１７によって記録されたログをユーザの端末２０の遠隔会議画面に出力させる。なお、ログ出力部１８は、ログをユーザの端末２０の遠隔会議画面に出力させずに、端末２０にログを記憶させておいてもよい。この場合、ユーザは、例えば遠隔会議中でなくても端末２０に記憶されたログを確認できる。

【0034】

通知部１９は、キーワード検出部１５によってキーワードが検出された場合、ユーザが遠隔会議に用いる端末２０にアラームを通知する。アラームは、例えばメッセージ、音声、振動等である。

【0035】

続いて、図４を用いて、第２の実施形態に係る遠隔会議装置１０の動作について説明する。以下の説明では、図４を中心に用いて説明するが、適宜図５から図８を参照して説明する。また、以下の一例に示す遠隔会議には、ユーザＡからユーザＤの４人が参加するとし、ユーザＡを対象にして遠隔会議装置１０の動作を説明する。

【0036】

まず、遠隔会議装置１０は、所定のキーワードをキーワードリスト記憶部１６に登録する（ステップＳ１０１）。具体的には、遠隔会議装置１０は、ユーザＡの端末２０における操作に従って所定のキーワードをキーワードリスト記憶部１６に登録する。所定のキーワードとは、会議における議論で重要とされるキーワードであり、例えば会議における議論のテーマが「オリンピック」である場合、「ＡＩ」、「自動運転」又は「オリンピック」等である。そして、登録される少なくとも１種類のキーワードは、リスト化されキーワードリストとしてキーワードリスト記憶部１６に記憶される。

【0037】

なお、ステップＳ１０１の処理は、会議が開始される前に実行されることが望ましいが、会議の途中で実行されてもよい。また、遠隔会議装置１０は、キーワードリスト記憶部１６に記憶するキーワードをユーザＡに限られず、ユーザＢ～ユーザＤの端末２０における操作に従って登録できるようにしてもよい。

【0038】

次に、遠隔会議装置１０は、各端末２０において遠隔会議を開始する。遠隔会議が開始された場合には、ユーザＡ～ユーザＤのカメラ３０は、ユーザの画像データを撮像し、撮像された画像データを遠隔会議装置１０に逐次送信する。また、遠隔会議が開始された場合には、ユーザＡ～ユーザＤのマイク４０も同様に、ユーザの音声データを取得し、取得された音声データを遠隔会議装置１０に逐次送信している。そうすることによって、遠隔会議装置１０は、ユーザＡ～ユーザＤの間におけるビデオ会話やチャット等を含む遠隔会議をユーザＡ～ユーザＤの各端末２０において開始することができる。

【0039】

遠隔会議装置１０は、遠隔会議を開始した場合、遠隔会議専用の遠隔会議画面をユーザＡ～ユーザＤの端末２０にそれぞれ出力する。
例えば、遠隔会議装置１０は、所定の時間において、図５に示す遠隔会議画面をユーザＡの端末２０に出力する。図５に示すように、ユーザＡの遠隔会議画面には、遠隔会議に参加する他のユーザの画像Ｐが出力され、出力される画像Ｐにはユーザ名が付されている。例えば、ユーザＢの画像Ｐｂ、ユーザＣの画像Ｐｃ及びユーザＤの画像Ｐｄが出力される。画像Ｐは、ユーザのカメラ３０によって取得されものである。また、画像Ｐは、画像に限られず動画でもよい。また、遠隔会議画面には、画像Ｐが出力されなく、代わりにユーザのアイコンが出力されてもよい。
また、遠隔会議画面には、現在時刻が出力される。例えば、遠隔会議画面には、「００：００：００」、すなわち、０時０分０秒と出力される。

【0040】

次に、画像データ取得部１１は、ユーザＡの利用するカメラ３０からユーザＡの画像データを取得する（ステップＳ１０２）。ユーザＡの画像データは、ユーザＡのカメラ３０から取得されたものである。また、音声データ取得部１２は、ユーザＢ～ユーザＤの利用するマイク４０からそれぞれ音声データをそれぞれ取得する（ステップＳ１０２）。

【0041】

そして、離席判定部１３は、画像データ取得部１１によって取得された画像データを用いてユーザＡが遠隔会議から離席しているか否かを判定する（ステップＳ１０３）。具体的には、離席判定部１３は、画像データからユーザＡの顔を認識できるか否かに応じてユーザＡが遠隔会議から離席しているか否かを判定する。ユーザＡの顔の認識は、例えばユーザの顔のパーツ（目、鼻、口等）から行われる。詳細には、離席判定部１３は、画像データからユーザＡの顔を認識できない場合、ユーザＡが遠隔会議から離席していると判定する。一方で、離席判定部１３は、画像データからユーザＡの顔を認識できる場合、ユーザＡが遠隔会議から離席していないと判定する。例えば、離席判定部１３は、ユーザＡがカメラ３０とは逆側を向いている場合やユーザＡがカメラ３０の遠くにいて顔が認識できない場合、遠隔会議から離席していると判定する。

【0042】

なお、ステップＳ１０３において、離席判定部１３は、上述した一例に限られず、ユーザＡの端末２０付近に設置された赤外線センサによって検出されたセンサ情報を用いて遠隔会議から離席しているか否かを判定してもよい。詳細には、離席判定部１３は、赤外線センサの検出範囲においてユーザＡを検出できない場合、ユーザＡが遠隔会議から離席していると判定する。一方、離席判定部１３は、赤外線センサの検出範囲においてユーザＡを検出できる場合、ユーザＡが遠隔会議から離席していないと判定する。

【0043】

離席判定部１３によってユーザＡが遠隔会議から離席していると判定された場合（ステップＳ１０３のＹＥＳ）、会議設定部１４は、ユーザＡのステータスを「離席」に更新する（ステップＳ１０４）。遠隔会議装置１０が設定する各ユーザのステータスは「離席」又は「着席」のいずれかである。この際、会議設定部１４は、ユーザＡ～ユーザＤの各端末２０における遠隔会議画面に出力されるユーザＡのステータスを「離席」に更新する。

【0044】

例えば、図６は、ステップＳ１０４においてユーザＡのステータスを「離席」に更新する処理が行われた後のユーザＢの端末２０に出力される遠隔会議画面を示す。図６に示すように、遠隔会議画面には、ユーザが「離席」又は「着席」しているか判断可能であるようにユーザごとに「離席」又は「着席」のステータスＳが出力される。「離席」はユーザが遠隔会議から離席していることを示し、「着席」はユーザが遠隔会議から離席していない（着席している）ことを示す。ここで、ユーザＡのステータスＳａは、「離席」となっている。また、ユーザＣのステータスＳｃ及びユーザＤのステータスＳｄは、「着席」となっている。したがって、ユーザＢは、ユーザＡが遠隔会議から離席していることと、ユーザＣ及びユーザＤは遠隔会議から離席していないこととを判断できる。なお、ユーザが会議に参加した際のユーザのステータスは、初期設定として「着席」である。

【0045】

なお、会議設定部１４は、離席判定部１３によってユーザＡが遠隔会議から離席していると判定された場合（ステップＳ１０３のＹＥＳ）、ユーザＢ～ユーザＤの端末２０の遠隔会議画面にユーザＡの利用するマイク４０によって取得された音声を出力しない設定にしてもよい。また、会議設定部１４は、離席判定部１３によってユーザＡが遠隔会議から離席していると判定された場合（ステップＳ１０３のＹＥＳ）、ユーザＢ～ユーザＤの端末２０の遠隔会議画面にユーザＡの利用するカメラ３０によって取得された画像を出力しない設定にしてもよい。

【0046】

次に、キーワード検出部１５は、キーワード検出機能をＯＮにする（ステップＳ１０５）。キーワード検出部１５は、キーワード検出機能をＯＮにした場合、ユーザＢ～ユーザＤの音声データを用いてユーザＢ～ユーザＤがキーワードリスト記憶部１６に登録されたキーワードを発声したことを検出できる状態になる。

【0047】

その後、キーワード検出部１５によってキーワードが検出された場合（ステップＳ１０６のＹＥＳ）、ログ記録部１７は、ログを記録する（ステップＳ１０７）。ログは、「検出されたキーワード」、「キーワードを発言したユーザ名」、「キーワードが検出された日時（日付及び時刻）」の情報を含む。また、ログは、「キーワードが検出された時点から所定の期間に取得されたキーワードを発言したユーザの画像データ」と、「キーワードが検出された時点から所定の期間に取得されたキーワードを発言したユーザの音声データ」と、「当該音声データを文字に変換した文字データ」との少なくとも１つ（「キーワードを発言したユーザの画像データ等」）を含む。

【0048】

キーワード検出部１５は、キーワード検出機能をＯＮしている間、１又は複数のログを取得することができる。キーワード検出部１５は、取得されたログを図７に示すログファイルとして記録する。図７に示すように、ログファイルに含まれるログＬ１では、「検出されたキーワード」は「自動運転」である。「キーワードを発言したユーザ名」は「ユーザＣ」である。「キーワードが検出された日時」は、「２０２１．０７．０１」「００：０５：１５」、すなわち、２０２１年７月１日の０時５分１５秒である。「キーワードを発言したユーザの画像データ等」は、「Ｌｏｇ＿ｄａｔａ＿２０２１０７０１＿１．ｍｐ４」である。また、ログＬ２では、「検出されたキーワード」は「ＡＩ」である。「キーワードを発言したユーザ名」は「ユーザＢ」である。「キーワードが検出された日時」は、「２０２１．０７．０１」「００：０７：４０」、すなわち、２０２１年７月１日の０時７分４０秒である。「キーワードを発言したユーザの画像データ等」は、「Ｌｏｇ＿ｄａｔａ＿２０２１０７０１＿２．ｍｐ４」である。

【0049】

上述の一例において、ログに含まれる「キーワードを発言したユーザの画像データ等」は、キーワードが検出された時点から所定の期間に取得されたものである。例えば、ログＬ１における「Ｌｏｇ＿ｄａｔａ＿２０２１０７０１＿１．ｍｐ４」は、キーワードが検出された時刻「００：０５：１５」から１０分間、取得されたものである。

【0050】

なお、ログは、上述の一例に限られず、「キーワードが検出された時点から所定の期間に取得されたキーワードを発言したユーザとは異なるユーザの画像データ」と「キーワードが検出された時点から所定の期間に取得されたキーワードを発言したユーザとは異なるユーザの音声データ」と、「当該音声データを文字に変換した文字データ」との少なくとも１つを含んでいてもよい。例えば、ログＬ１は、キーワードを発言したユーザＣの画像データ等を含むが、ユーザＣとは異なるユーザＢ又はユーザＤの画像データ等を含んでいてもよい。ユーザＣとは異なるユーザＢ又はユーザＤの画像データ等は、キーワードが検出された時刻の「００：０５：１５」から所定の時間（例えば１０分）取得されたものである。

【0051】

次に、図４に示すように、ログ記録部１７は、記録されたログをユーザＡの端末２０に送信し、当該ログをユーザＡの端末２０に出力させる（ステップＳ１０８）。端末２０は、ログを遠隔会議装置１０から受信した後、受信したログを記憶部（不図示）に記憶し、記憶されたログを図８に示すログ出力後の遠隔会議画面に出力する。

【0052】

図８に示すように、遠隔会議画面のログ欄ＬＣには、「検出されたキーワード」、「キーワードを発言したユーザ名」、「キーワードが検出された時刻（日時）」を含むログが出力される。例えば、ログ欄ＬＣには、ログＬ１の「ユーザＣ 自動運転 ００：０５：１５」、ログＬ２の「ユーザＢ ＡＩ ００：０７：４０」、ログＬ３の「ユーザＢ オリンピック ００：０８：４５」、ログＬ４の「ユーザＤ ＡＩ ００：１８：１０」が出力される。ここで、ログ欄ＬＣに出力されるログに含まれる「キーワードを発言したユーザ名」は、当該画像Ｐ（画像Ｐｂ、画像Ｐｃ及び画像Ｐｄ）に付されるユーザ名と対応する。

【0053】

さらに、ユーザＡが遠隔会議画面のログ欄ＬＣに出力されるログを選択した場合、クリックされたログに含まれる「キーワードを発言したユーザの画像データ等」がユーザＡの利用する端末２０の画面に出力される。例えば、ユーザＡがログ欄ＬＣに出力されるログＬ１の「ユーザＣ 自動運転 ００：０５：１５」をクリックした場合、ログＬ１に含まれるユーザＣの画像データ等「Ｌｏｇ＿ｄａｔａ＿２０２１０７０１＿１．ｍｐ４」がユーザＡの利用する端末２０の画面に出力される。

【0054】

なお、上述の一例に限られず、遠隔会議画面のログ欄ＬＣに出力されるログは、「検出されたキーワード」、「キーワードを発言したユーザ名」、「キーワードが検出された時刻（日時）」の全てではなく、いずれかであってもよい。また、遠隔会議画面のログ欄ＬＣに「キーワードを発言したユーザの画像データ等」が出力されてもよい。

【0055】

次に、通知部１９は、端末２０にアラームを端末２０に通知する（ステップＳ１０９）。例えば、アラームは、会議においてキーワードが他のユーザによって発言された旨を示すメッセージ、音声又は振動等である。なお、遠隔会議装置１０は、ステップＳ１０９の処理をステップＳ１０８の処理の前に実行してもよい。そして、遠隔会議装置１０は、後述するステップＳ１１２の処理に進む。

【0056】

ステップＳ１０２の処理の説明に戻る。ステップＳ１０２の後、離席判定部１３によってユーザＡが離席していないと判定された場合（ステップＳ１０３のＮＯ）、会議設定部１４は、ユーザＡのステータスを「着席」に更新する（ステップＳ１１０）。この際、会議設定部１４は、ユーザＡ～ユーザＤの各端末２０における遠隔会議画面に出力されるユーザＡのステータスを「着席」に更新する。

【0057】

なお、会議設定部１４は、離席判定部１３によってユーザＡが離席していないと判定された場合（ステップＳ１０３のＮＯ）、ユーザＢ～ユーザＤの端末２０にユーザＡの利用するマイク４０によって取得された音声を出力する設定にしてもよい。また、会議設定部１４は、離席判定部１３によってユーザＡが離席していないと判定された場合（ステップＳ１０３のＮＯ）、ユーザＢ～ユーザＤの端末２０の遠隔会議画面にユーザＡの利用するカメラ３０によって取得された画像を出力する設定にしてもよい。

【0058】

次に、キーワード検出部１５は、キーワード検出機能をＯＦＦにする（ステップＳ１１１）。つまり、キーワード検出部１５は、キーワード検出機能をＯＦＦにした場合、ユーザＢ～ユーザＤの音声データを用いて、ユーザＢ～ユーザＤがキーワードリスト記憶部１６に登録されたキーワードを発声したかを検出しない状態になる。そして、遠隔会議装置１０は、後述するステップＳ１１２の処理に進む。

【0059】

ステップＳ１０９又はステップＳ１１１の後、遠隔会議装置１０は、ユーザの操作に基づいて会議を終了するか否かを判定する（ステップＳ１１２）。例えば、ユーザの操作とは、遠隔会議が終了した場合やユーザＡが遠隔会議から退席する場合における、遠隔会議を終了する操作を示す。遠隔会議装置１０は、会議を終了すると判定した場合（ステップＳ１１２のＹＥＳ）、遠隔会議装置１０は処理を終了する。一方、会議を終了しないと判定した場合（ステップＳ１１２のＮＯ）、遠隔会議装置１０はステップＳ１０３の処理に戻る。

【0060】

上述の実施形態より、第２の実施形態に係る遠隔会議システム２は、キーワードに基づく遠隔会議における重要な会話のログを記録する。したがって、遠隔会議システム２は、ユーザが離席している際に遠隔会議における重要な会話を聞き逃す可能性を低減できる。さらに、遠隔会議システム２は、ログとして、キーワードが検出された時点から所定の時間における画像データ等を取得できる。つまり、遠隔会議システム２は、遠隔会議で重要な場面での画像データ等を取得できる。したがって、ユーザは、遠隔会議において録音・録画機能を利用して後から重要となる部分を再生する必要がなくなる。

【0061】

遠隔会議システム２は、キーワードが検出された場合、各ユーザの端末２０における遠隔会議画面のログ欄にログを出力する。また、遠隔会議システム２は、キーワードが検出された場合、各ユーザの端末２０にアラームを通知する。したがって、ユーザは、遠隔会議から離席した状態から遠隔会議に戻った場合、遠隔会議における重要な会話が行われたか否かを把握しやすくなる。

【0062】

遠隔会議システム２は、遠隔会議中において、ユーザが遠隔会議から「離席」している場合、ユーザの音声を遠隔会議に参加する他のユーザの端末２０に出力しない。また、遠隔会議システム２は、遠隔会議中において、ユーザが遠隔会議から「離席」している場合、ユーザの画像を遠隔会議に参加する他のユーザの端末２０に出力しない。したがって、遠隔会議システム２は、ミュート忘れやカメラの切り忘れを防ぐことで、離席した後に聴覚的や視覚的なプライバシーを保護することができる。

【0063】

遠隔会議システム２は、ユーザの「離席」又は「着席」のステータスを各ユーザの端末２０の遠隔会議画面に出力する。したがって、ユーザは、他のユーザが遠隔会議において「離席」又は「着席」しているかわかるので、他のユーザに対して話しかけるタイミングが計りやすい。例えば、ユーザは、遠隔会議において他のユーザがカメラをＯＦＦにしている状態でも、他のユーザが「離席」又は「着席」しているかわかるので、他のユーザに対して話しかけるタイミングが計りやすい。

【0064】

＜ハードウェア構成＞
続いて、図９を用いて、遠隔会議装置１０又は端末２０に係るコンピュータ１０００のハードウェア構成例を説明する。図９においてコンピュータ１０００は、プロセッサ１００１と、メモリ１００２とを有している。プロセッサ１００１は、例えば、マイクロプロセッサ、MPU（Micro Processing Unit）、又はCPU（Central Processing Unit）であってもよい。プロセッサ１００１は、複数のプロセッサを含んでもよい。メモリ１００２は、揮発性メモリ及び不揮発性メモリの組み合わせによって構成される。メモリ１００２は、プロセッサ１００１から離れて配置されたストレージを含んでもよい。この場合、プロセッサ１００１は、図示されていないI/Oインターフェースを介してメモリ１００２にアクセスしてもよい。

【0065】

また、上述の実施形態における各構成は、ハードウェア又はソフトウェア、もしくはその両方によって構成され、１つのハードウェア又はソフトウェアから構成してもよいし、複数のハードウェア又はソフトウェアから構成してもよい。上述の実施形態における各構成の機能（処理）を、コンピュータにより実現してもよい。例えば、メモリ１００２に実施形態における方法を行うためのプログラムを格納し、各機能を、メモリ１００２に格納されたプログラムをプロセッサ１００１で実行することにより実現してもよい。

【0066】

これらのプログラムは、コンピュータに読み込まれた場合に、実施形態で説明された１又はそれ以上の機能をコンピュータに行わせるための命令群（又はソフトウェアコード）を含む。プログラムは、非一時的なコンピュータ可読媒体又は実体のある記憶媒体に格納されてもよい。限定ではなく例として、コンピュータ可読媒体又は実体のある記憶媒体は、random-access memory（RAM）、read-only memory（ROM）、フラッシュメモリ、solid-state drive（SSD）又はその他のメモリ技術、CD-ROM、digital versatile disc（DVD）、Blu-ray（登録商標）ディスク又はその他の光ディスクストレージ、磁気カセット、磁気テープ、磁気ディスクストレージ又はその他の磁気ストレージデバイスを含む。プログラムは、一時的なコンピュータ可読媒体又は通信媒体上で送信されてもよい。限定ではなく例として、一時的なコンピュータ可読媒体又は通信媒体は、電気的、光学的、音響的、またはその他の形式の伝搬信号を含む。

【0067】

なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。
例えば、遠隔会議装置１０の一つ又は複数の構成要素を端末２０が備えていてもよい。例えば、端末２０は、画像データ取得部１１、音声データ取得部１２、離席判定部１３、会議設定部１４、キーワード検出部１５、キーワードリスト記憶部１６、ログ記録部１７、ログ出力部１８及び通知部１９の一つ又は複数の構成要素を備えていてもよい。

【0068】

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
遠隔会議に参加するユーザが前記遠隔会議から離席しているか否かを判定する離席判定部と、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出するキーワード検出部と、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録するログ記録部と、を備える、
遠隔会議システム。
（付記２）
前記キーワードが検出された場合、離席していると判定されたユーザが前記遠隔会議に用いる端末に前記ログを出力させるログ出力部をさらに備える、
付記１に記載の遠隔会議システム。
（付記３）
前記ユーザが前記遠隔会議から離席しているか否かの判定結果に基づいて、前記ユーザが前記遠隔会議から離席しているか否かを示すステータスを、各ユーザの端末における遠隔会議画面に出力するステータス状態出力部をさらに備える、
付記１又は２に記載の遠隔会議システム。
（付記４）
前記ユーザが前記遠隔会議から離席していると判定された場合、離席していると判定されたユーザの利用するマイクによって取得された音声を前記遠隔会議に参加する他のユーザの端末に出力しない設定にする音声設定部をさらに備える、
付記１乃至３のいずれか１項に記載の遠隔会議システム。
（付記５）
前記ユーザが前記遠隔会議から離席していると判定された場合、離席していると判定されたユーザの利用するカメラによって取得された画像を前記遠隔会議に参加する他のユーザの端末に出力しない設定にする画像設定部をさらに備える、
付記１乃至４のいずれか１項に記載の遠隔会議システム。
（付記６）
前記キーワードが検出された場合、前記ユーザが前記遠隔会議に用いる端末にアラームを通知する通知部をさらに備える、
付記１乃至５のいずれか１項に記載の遠隔会議システム。
（付記７）
前記ログは、
前記キーワードが検出された時点から所定の期間に取得された前記キーワードを発言したユーザの画像データと、
前記キーワードが検出された時点から所定の期間に取得された前記キーワードを発言したユーザの音声データと、
当該音声データを文字に変換した文字データとの少なくとも１つを含む、
付記１乃至６のいずれか１項に記載の遠隔会議システム。
（付記８）
前記ログは、
前記キーワードが検出された時点から所定の期間に取得された前記キーワードを発言したユーザとは異なるユーザの画像データと、
前記キーワードが検出された時点から所定の期間に取得された前記キーワードを発言したユーザとは異なるユーザの音声データと、
当該音声データを文字に変換した文字データとの少なくとも１つを含む、
付記７に記載の遠隔会議システム。
（付記９）
前記離席判定部は、
ユーザの利用するカメラによって取得された画像から当該ユーザの顔を認識できなかった場合、顔を認識できなかったユーザが前記遠隔会議から離席していると判定し、
ユーザの利用するカメラによって取得された画像から当該ユーザの顔を認識できた場合、顔を認識できたユーザが前記遠隔会議から離席していないと判定する、
付記１乃至８のいずれか１項に記載の遠隔会議システム。
（付記１０）
遠隔会議に参加するユーザが前記遠隔会議から離席しているか否かを判定する離席判定部と、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出するキーワード検出部と、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録することを決定するログ記録部と、を備える、
遠隔会議装置。
（付記１１）
前記キーワードが検出された場合、離席していると判定されたユーザが前記遠隔会議に用いる端末に前記ログを出力させるログ出力部をさらに備える、
付記１０に記載の遠隔会議装置。
（付記１２）
遠隔会議に参加するユーザの画像データに基づいて、前記ユーザが前記遠隔会議から離席しているか否かを判定することと、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出することと、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録することと、を含む、
方法。
（付記１３）
遠隔会議に参加するユーザの画像データに基づいて、前記ユーザが前記遠隔会議から離席しているか否かを判定する処理と、
前記遠隔会議に参加する他のユーザの発言から所定のキーワードを検出する処理と、
前記ユーザが前記遠隔会議から離席していると判定された場合、かつ前記キーワードが検出された場合、前記遠隔会議のログを記録することを決定する処理と、を遠隔会議装置に実行させる、
プログラム。

【符号の説明】

【0069】

１ 遠隔会議システム
２ 遠隔会議システム
１０ 遠隔会議装置
１１ 画像データ取得部
１２ 音声データ取得部
１３ 離席判定部
１４ 会議設定部
１５ キーワード検出部
１６ キーワードリスト記憶部
１７ ログ記録部
１８ ログ出力部
１９ 通知部
２０ 端末
３０ カメラ
４０ マイク
１０００ コンピュータ
１００１ プロセッサ
１００２ メモリ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】