特開 2022-180035 会議システム、サーバー、情報処理装置及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022180035

(43)【公開日】2022-12-06

(54)【発明の名称】会議システム、サーバー、情報処理装置及びプログラム

(51)【国際特許分類】

   H04N 7/15 20060101AFI20221129BHJP

   H04M 3/56 20060101ALI20221129BHJP

   G06F 13/00 20060101ALI20221129BHJP

【ＦＩ】

H04N7/15 120

H04M3/56

G06F13/00 650A

【審査請求】未請求

【請求項の数】34

【出願形態】ＯＬ

(21)【出願番号】P 2021086926

(22)【出願日】2021-05-24

(71)【出願人】

【識別番号】000001270

【氏名又は名称】コニカミノルタ株式会社

(74)【代理人】

【識別番号】100117651

【弁理士】

【氏名又は名称】高垣 泰志

(72)【発明者】

【氏名】タダゲ アペクシャ

【テーマコード（参考）】

5B084

5C164

5K201

【Ｆターム（参考）】

5B084AA01

5B084AA16

5B084AB06

5B084AB14

5B084AB39

5B084BB04

5B084CA07

5B084CF12

5B084DC02

5B084DC03

5B084DC06

5B084EA47

5C164FA10

5C164UB88S

5C164VA04S

5C164VA06S

5C164VA07P

5C164VA35P

5C164VA51P

5K201BA15

5K201BA16

5K201BB09

5K201CA01

5K201CA06

5K201EC06

5K201ED09

(57)【要約】

【課題】リモート会議に参加している参加者が異なる拠点でリモート会議に間接的に参加している参加者を把握できるようにする。
【解決手段】ネットワーク５を介して複数の情報処理装置２ａ，２ｂ，２ｃと接続し、複数の情報処理装置２ａ，２ｂ，２ｃのそれぞれに会議用画面を提供する会議システム１であって、複数の情報処理装置２ａ，２ｂ，２ｃのそれぞれを使用してリモート会議に参加する第１の参加者に対応する第１参加者情報を取得する第１参加者情報取得部１５と、第１の参加者と共にリモート会議に間接的に参加する第２の参加者に関する第２参加者情報を取得する第２参加者情報取得部１６と、第１参加者情報を会議用画面の所定の表示領域に表示させると共に、第２参加者情報を会議用画面の所定の表示領域に表示させる表示制御部１７と、を備える。
【選択図】図３

【特許請求の範囲】

【請求項1】

ネットワークを介して複数の情報処理装置と接続し、前記複数の情報処理装置のそれぞれに会議用画面を提供する会議システムであって、
前記複数の情報処理装置のそれぞれを使用してリモート会議に参加する第１の参加者に対応する第１参加者情報を取得する第１参加者情報取得手段と、
前記第１の参加者と共に前記リモート会議に間接的に参加する第２の参加者に関する第２参加者情報を取得する第２参加者情報取得手段と、
前記第１参加者情報取得手段によって取得される前記第１参加者情報を前記会議用画面の所定の表示領域に表示させると共に、前記第２参加者情報取得手段によって取得される前記第２参加者情報を前記会議用画面の前記表示領域に表示させる表示制御手段と、
を備えることを特徴とする会議システム。

【請求項2】

前記第１参加者情報には、前記第１の参加者を表した第１参加者画像が含まれており、
前記表示制御手段は、前記第１参加者画像を前記表示領域に表示させることを特徴とする請求項１に記載の会議システム。

【請求項3】

前記第１の参加者を撮影する第１の撮影手段、
を更に備え、
前記第１参加者情報取得手段は、前記第１の撮影手段によって撮影される第１の撮影画像に基づいて前記第１参加者画像を取得することを特徴とする請求項２に記載の会議システム。

【請求項4】

前記表示制御手段は、前記第１参加者画像を前記表示領域に表示させる際に前記第１の参加者の名前を前記第１参加者画像に付加して表示させることを特徴とする請求項２又は３に記載の会議システム。

【請求項5】

前記第２参加者情報には、前記第２の参加者を表した第２参加者画像が含まれており、
前記表示制御手段は、前記第２参加者画像を前記表示領域に表示させることを特徴とする請求項１乃至４のいずれかに記載の会議システム。

【請求項6】

前記第２の参加者を撮影する第２の撮影手段、
を更に備え、
前記第２参加者情報取得手段は、前記第２の撮影手段によって撮影される第２の撮影画像に基づいて前記第２参加者画像を取得することを特徴とする請求項５に記載の会議システム。

【請求項7】

前記表示制御手段は、前記第２参加者画像を前記表示領域に表示させる際に前記第２の参加者の名前を前記第２参加者画像に付加して表示させることを特徴とする請求項５又は６に記載の会議システム。

【請求項8】

前記第２参加者情報に基づいて前記第２の参加者を特定する特定手段、
を更に備えることを特徴とする請求項１乃至７のいずれかに記載の会議システム。

【請求項9】

前記特定手段は、前記第２参加者情報に基づいて所定のデータベースを検索することにより、前記第２の参加者を特定することを特徴とする請求項８に記載の会議システム。

【請求項10】

前記特定手段は、前記第２参加者情報に含まれる、前記第２の参加者を撮影した第２の撮影画像に基づいて前記第２の参加者を特定することを特徴とする請求項８又は９に記載の会議システム。

【請求項11】

前記特定手段は、前記第２の撮影画像に基づいて前記第２の参加者の顔画像を抽出し、前記顔画像に基づいて前記第２の参加者を特定することを特徴とする請求項１０に記載の会議システム。

【請求項12】

前記特定手段によって特定される前記第２の参加者の中から発言者を検知する発言者検知手段、
を更に備えることを特徴とする請求項８乃至１１のいずれかに記載の会議システム。

【請求項13】

前記表示制御手段は、前記発言者検知手段によって発言者が検知された場合、当該発言者として検知された前記第２の参加者に対応する前記第２参加者情報を前記表示領域において強調表示させることを特徴とする請求項１２に記載の会議システム。

【請求項14】

前記発言者検知手段は、前記第２参加者情報に含まれる、前記第２の参加者を撮影した第２の撮影画像に基づいて前記第２の参加者の顔画像を解析することにより発言者を検知することを特徴とする請求項１２又は１３に記載の会議システム。

【請求項15】

前記第２の参加者の近傍に設置される音声入力手段と、
前記音声入力手段をオンオフ制御する音声切替手段と、
を更に備え、
前記音声切替手段は、前記発言者検知手段によって発言者が検知された場合、当該発言者として検知された前記第２の参加者の近傍に設置されている前記音声入力手段をオンに切り替えることを特徴とする請求項１２乃至１４のいずれかに記載の会議システム。

【請求項16】

前記特定手段によって特定される前記第２の参加者が挙手ジェスチャを行ったことを検知するジェスチャ検知手段、
を更に備えることを特徴とする請求項８乃至１５のいずれかに記載の会議システム。

【請求項17】

前記表示制御手段は、前記ジェスチャ検知手段によって挙手ジェスチャが検知された場合、当該挙手ジェスチャが検知された前記第２の参加者に対応する前記第２参加者情報を前記表示領域において強調表示させることを特徴とする請求項１６に記載の会議システム。

【請求項18】

前記表示制御手段は、前記ジェスチャ検知手段によって挙手ジェスチャが検知された場合、当該挙手ジェスチャが検知された前記第２の参加者に対応する前記第２参加者情報に対して挙手アイコンを付加して表示させることを特徴とする請求項１６又は１７に記載の会議システム。

【請求項19】

前記ジェスチャ検知手段は、前記第２参加者情報に含まれる、前記第２の参加者を撮影した第２の撮影画像に基づいて前記第２の参加者の画像を解析することにより挙手ジェスチャを検知することを特徴とする請求項１６乃至１８のいずれかに記載の会議システム。

【請求項20】

ネットワークを介して複数の情報処理装置と接続し、前記複数の情報処理装置のそれぞれに会議用画面を提供することによってリモート会議を支援するサーバーであって、
前記複数の情報処理装置のそれぞれから、前記情報処理装置を使用してリモート会議に参加する第１の参加者に対応する第１参加者情報を取得する第１参加者情報取得手段と、
前記第１の参加者と共に前記リモート会議に間接的に参加する第２の参加者に関する第２参加者情報を取得する第２参加者情報取得手段と、
前記第１参加者情報取得手段によって取得される前記第１参加者情報を前記会議用画面の所定の表示領域に表示させると共に、前記第２参加者情報取得手段によって取得される前記第２参加者情報を前記表示領域に表示させる表示制御手段と、
を備えることを特徴とするサーバー。

【請求項21】

前記第１参加者情報には、前記第１の参加者を表した第１参加者画像が含まれており、
前記表示制御手段は、前記第１参加者画像を前記表示領域に表示させることを特徴とする請求項２０に記載のサーバー。

【請求項22】

前記第２参加者情報には、前記第２の参加者を表した第２参加者画像が含まれており、
前記表示制御手段は、前記第２参加者画像を前記表示領域に表示させることを特徴とする請求項２０又は２１に記載のサーバー。

【請求項23】

前記第２参加者情報に基づいて前記第２の参加者を特定する特定手段、
を更に備えることを特徴とする請求項２０乃至２２のいずれかに記載のサーバー。

【請求項24】

前記特定手段は、前記第２参加者情報に含まれる、前記第２の参加者を撮影した撮影画像に基づいて前記第２の参加者を特定することを特徴とする請求項２３に記載のサーバー。

【請求項25】

前記特定手段によって特定される前記第２の参加者の中から発言者を検知する発言者検知手段、
を更に備え、
発言者検知手段は、前記撮影画像に含まれる前記第２の参加者の顔画像を解析することにより発言者を検知することを特徴とする請求項２４に記載のサーバー。

【請求項26】

前記表示制御手段は、前記発言者検知手段によって発言者が検知された場合、当該発言者として検知された前記第２の参加者に対応する前記第２参加者情報を前記表示領域において強調表示させることを特徴とする請求項２５に記載のサーバー。

【請求項27】

前記特定手段によって特定される前記第２の参加者が挙手ジェスチャを行ったことを検知するジェスチャ検知手段、
を更に備え、
前記ジェスチャ検知手段は、前記撮影画像に含まれる前記第２の参加者の画像を解析することにより挙手ジェスチャを検知することを特徴とする請求項２４乃至２６のいずれかに記載のサーバー。

【請求項28】

前記表示制御手段は、前記ジェスチャ検知手段によって挙手ジェスチャが検知された場合、当該挙手ジェスチャが検知された前記第２の参加者に対応する前記第２参加者情報を前記表示領域において強調表示させることを特徴とする請求項２７に記載のサーバー。

【請求項29】

前記表示制御手段は、前記ジェスチャ検知手段によって挙手ジェスチャが検知された場合、当該挙手ジェスチャが検知された前記第２の参加者に対応する前記第２参加者情報に対して挙手アイコンを付加して表示させることを特徴とする請求項２７又は２８に記載のサーバー。

【請求項30】

ネットワークを介してサーバーに接続し、前記サーバーによって提供されるリモート会議用のプラットフォームを利用してリモート会議を行う情報処理装置であって、
当該情報処理装置を使用して前記リモート会議に参加する第１の参加者に対応する第１参加者情報を生成し、当該第１参加者情報を前記サーバーへ送信する第１参加者情報生成手段と、
前記第１の参加者と共に前記リモート会議に間接的に参加する第２の参加者に対応する第２参加者情報を生成し、当該第２参加者情報を前記サーバーへ送信する第２参加者情報生成手段と、
前記第１参加者情報と前記第２参加者情報とが所定の表示領域に配置された会議用画面を前記サーバーから取得する会議用画面取得手段と、
前記会議用画面取得手段によって取得される前記会議用画面を表示する表示手段と、
を備えることを特徴とする情報処理装置。

【請求項31】

前記第１の参加者を撮影する第１の撮影手段を制御する第１撮影制御手段と、
前記第２の参加者を撮影する第２の撮影手段を制御する第２撮影制御手段と、
を更に備え、
前記第１参加者情報生成手段は、前記第１撮影制御手段が前記第１の撮影手段を制御することによって取得される第１の撮影画像に基づいて前記第１参加者情報を生成し、
前記第２参加者情報生成手段は、前記第２撮影制御手段が前記第２の撮影手段を制御することによって取得される第２の撮影画像に基づいて前記第２参加者情報を生成することを特徴とする請求項３０に記載の情報処理装置。

【請求項32】

前記第２の参加者の中から発言者を検知して前記サーバーへ通知する発言者検知手段、
を更に備え、
発言者検知手段は、前記第２の撮影画像に含まれる前記第２の参加者の顔画像を解析することにより発言者を検知することを特徴とする請求項３１に記載の情報処理装置。

【請求項33】

前記第２の参加者が挙手ジェスチャを行ったことを検知して前記サーバーへ通知するジェスチャ検知手段、
を更に備え、
前記ジェスチャ検知手段は、前記第２の撮影画像に含まれる前記第２の参加者の画像を解析することにより挙手ジェスチャを検知することを特徴とする請求項３１又は３２に記載の情報処理装置。

【請求項34】

ネットワークを介して複数の情報処理装置と接続し、前記複数の情報処理装置のそれぞれに会議用画面を提供することによってリモート会議を支援するサーバーにおいて実行されるプログラムであって、前記サーバーに、
前記複数の情報処理装置のそれぞれから、前記情報処理装置を使用してリモート会議に参加する第１の参加者に対応する第１参加者情報を取得する第１ステップと、
前記第１の参加者と共に前記リモート会議に間接的に参加する第２の参加者に関する第２参加者情報を取得する第２ステップと、
前記第１ステップによって取得される前記第１参加者情報を前記会議用画面の所定の表示領域に表示させると共に、前記第２ステップによって取得される前記第２参加者情報を前記表示領域に表示させる第３ステップと、
を実行させることを特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、会議システム、サーバー、情報処理装置及びプログラムに関し、特に複数の参加者によるリモート会議を支援するための技術に関する。

【背景技術】

【0002】

複数の拠点間をネットワーク経由で直接接続し、それら拠点同士でテレビ会議を行うテレビ会議システムが知られている。この種のテレビ会議システムは、各拠点の会議室にカメラとスクリーンを設置し、カメラで撮影した会議室内の風景画像を他の拠点に配信すると共に、他の会議室で撮影された風景画像をスクリーン上に映し出すように構成される。そのため、会議の参加者は、スクリーンに表示される画像を視認することで、他の会議室の様子を把握することができる。

【0003】

上記のようなテレビ会議システムは、他の会議室にいる参加者が発言した場合、スクリーンに表示される画像では誰が発言しているのかが分かり難いという問題があった。そのため、従来は、会議室に設置されたマイクが音声を検知すると、その音声の指向性から発言者を特定し、カメラで撮影した画像に含まれる複数の参加者のうち、発言者として特定された参加者の画像にマーキングを付与して表示させるようにした会議システムが提案されている（例えば特許文献１）。

【0004】

一方、近年は、在宅勤務やテレワークの普及に伴い、パーソナルコンピュータやタブレット端末などの複数の情報処理装置をリモート会議用のサーバー経由で相互に接続し、それら情報処理装置を使用する複数のユーザーがリモート会議を行う環境が整備されつつある。現状では、リモート会議に参加する参加者は、自身が使用する情報処理装置を用いてサーバーにログインすることにより、サーバーによって提供されるリモート会議プラットフォームに接続する。情報処理装置は、リモート会議プラットフォームに接続すると、情報処理装置に搭載されているカメラを起動し、参加者を撮影した画像をサーバーへ送信する。サーバーは、その画像を各情報処理装置へ配信することにより、サーバーにログインしてリモート会議に参加している全ての参加者の画像を各情報処理装置に表示させることができる。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２０１４－１６５５６５号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

上記のように複数の情報処理装置をリモート会議用のサーバーに接続して行われるリモート会議において、少なくとも１つの拠点において会議室が利用され、その会議室に複数の参加者が集まってリモート会議が行われることがある。この場合、会議室に集まる複数の参加者のうちの少なくとも一人が情報処理装置を会議室に持ち込むことにより、他の参加者は、その情報処理装置に表示される画面を共有して閲覧することができるため、リモート会議に参加している他の参加者を把握することができる。そのため、会議室でリモート会議に参加する複数の参加者全員が会議室に情報処理装置を持ち込む必要はない。

【0007】

しかしながら、会議室とは異なる拠点でリモート会議に参加している参加者の情報処理装置には、会議室で参加している参加者全員が表示される訳ではない。そのため、会議室とは異なる場所でリモート会議に参加している参加者にとっては、誰が会議に参加しているのかを把握することができないという課題がある。また、会議室で参加している複数の参加者のうちの一人の参加者が発言した場合、会議室とは異なる拠点でリモート会議に参加している参加者にとっては、誰が発言しているかが分からないという課題もある。

【0008】

一方、上述した従来のテレビ会議システムは、会議室で参加する複数の参加者のそれぞれを特定するものではない。更に、従来のテレビ会議システムは、サーバーによって提供されるリモート会議プラットフォームに接続することができない。それ故、上記課題は、従来のテレビ会議システムでは何ら解決されるものではない。

【0009】

そこで本発明は、上記課題を解決するためになされたものであり、会議室とは異なる場所でリモート会議に参加している参加者が会議室で参加している参加者を把握でき、リモート会議を円滑に行えるようにした会議システム、サーバー、情報処理装置及びプログラムを提供することを目的とする。

【課題を解決するための手段】

【0010】

上記目的を達成するため、請求項１に係る発明は、ネットワークを介して複数の情報処理装置と接続し、前記複数の情報処理装置のそれぞれに会議用画面を提供する会議システムであって、前記複数の情報処理装置のそれぞれを使用してリモート会議に参加する第１の参加者に対応する第１参加者情報を取得する第１参加者情報取得手段と、前記第１の参加者と共に前記リモート会議に間接的に参加する第２の参加者に関する第２参加者情報を取得する第２参加者情報取得手段と、前記第１参加者情報取得手段によって取得される前記第１参加者情報を前記会議用画面の所定の表示領域に表示させると共に、前記第２参加者情報取得手段によって取得される前記第２参加者情報を前記会議用画面の前記表示領域に表示させる表示制御手段と、を備えることを特徴とする構成である。

【0011】

請求項２に係る発明は、請求項１の会議システムにおいて、前記第１参加者情報には、前記第１の参加者を表した第１参加者画像が含まれており、前記表示制御手段は、前記第１参加者画像を前記表示領域に表示させることを特徴とする構成である。

【0012】

請求項３に係る発明は、請求項２の会議システムにおいて、前記第１の参加者を撮影する第１の撮影手段、を更に備え、前記第１参加者情報取得手段は、前記第１の撮影手段によって撮影される第１の撮影画像に基づいて前記第１参加者画像を取得することを特徴とする構成である。

【0013】

請求項４に係る発明は、請求項２又は３の会議システムにおいて、前記表示制御手段は、前記第１参加者画像を前記表示領域に表示させる際に前記第１の参加者の名前を前記第１参加者画像に付加して表示させることを特徴とする構成である。

【0014】

請求項５に係る発明は、請求項１乃至４のいずれかの会議システムにおいて、前記第２参加者情報には、前記第２の参加者を表した第２参加者画像が含まれており、前記表示制御手段は、前記第２参加者画像を前記表示領域に表示させることを特徴とする構成である。

【0015】

請求項６に係る発明は、請求項５の会議システムにおいて、前記第２の参加者を撮影する第２の撮影手段、を更に備え、前記第２参加者情報取得手段は、前記第２の撮影手段によって撮影される第２の撮影画像に基づいて前記第２参加者画像を取得することを特徴とする構成である。

【0016】

請求項７に係る発明は、請求項５又は６の会議システムにおいて、前記表示制御手段は、前記第２参加者画像を前記表示領域に表示させる際に前記第２の参加者の名前を前記第２参加者画像に付加して表示させることを特徴とする構成である。

【0017】

請求項８に係る発明は、請求項１乃至７のいずれかの会議システムにおいて、前記第２参加者情報に基づいて前記第２の参加者を特定する特定手段、を更に備えることを特徴とする構成である。

【0018】

請求項９に係る発明は、請求項８の会議システムにおいて、前記特定手段は、前記第２参加者情報に基づいて所定のデータベースを検索することにより、前記第２の参加者を特定することを特徴とする構成である。

【0019】

請求項１０に係る発明は、請求項８又は９の会議システムにおいて、前記特定手段は、前記第２参加者情報に含まれる、前記第２の参加者を撮影した第２の撮影画像に基づいて前記第２の参加者を特定することを特徴とする構成である。

【0020】

請求項１１に係る発明は、請求項１０の会議システムにおいて、前記特定手段は、前記第２の撮影画像に基づいて前記第２の参加者の顔画像を抽出し、前記顔画像に基づいて前記第２の参加者を特定することを特徴とする構成である。

【0021】

請求項１２に係る発明は、請求項８乃至１１のいずれかの会議システムにおいて、前記特定手段によって特定される前記第２の参加者の中から発言者を検知する発言者検知手段、を更に備えることを特徴とする構成である。

【0022】

請求項１３に係る発明は、請求項１２の会議システムにおいて、前記表示制御手段は、前記発言者検知手段によって発言者が検知された場合、当該発言者として検知された前記第２の参加者に対応する前記第２参加者情報を前記表示領域において強調表示させることを特徴とする構成である。

【0023】

請求項１４に係る発明は、請求項１２又は１３の会議システムにおいて、前記発言者検知手段は、前記第２参加者情報に含まれる、前記第２の参加者を撮影した第２の撮影画像に基づいて前記第２の参加者の顔画像を解析することにより発言者を検知することを特徴とする構成である。

【0024】

請求項１５に係る発明は、請求項１２乃至１４のいずれかの会議システムにおいて、前記第２の参加者の近傍に設置される音声入力手段と、前記音声入力手段をオンオフ制御する音声切替手段と、を更に備え、前記音声切替手段は、前記発言者検知手段によって発言者が検知された場合、当該発言者として検知された前記第２の参加者の近傍に設置されている前記音声入力手段をオンに切り替えることを特徴とする構成である。

【0025】

請求項１６に係る発明は、請求項８乃至１５のいずれかの会議システムにおいて、前記特定手段によって特定される前記第２の参加者が挙手ジェスチャを行ったことを検知するジェスチャ検知手段、を更に備えることを特徴とする構成である。

【0026】

請求項１７に係る発明は、請求項１６の会議システムにおいて、前記表示制御手段は、前記ジェスチャ検知手段によって挙手ジェスチャが検知された場合、当該挙手ジェスチャが検知された前記第２の参加者に対応する前記第２参加者情報を前記表示領域において強調表示させることを特徴とする構成である。

【0027】

請求項１８に係る発明は、請求項１６又は１７の会議システムにおいて、前記表示制御手段は、前記ジェスチャ検知手段によって挙手ジェスチャが検知された場合、当該挙手ジェスチャが検知された前記第２の参加者に対応する前記第２参加者情報に対して挙手アイコンを付加して表示させることを特徴とする構成である。

【0028】

請求項１９に係る発明は、請求項１６乃至１８のいずれかの会議システムにおいて、前記ジェスチャ検知手段は、前記第２参加者情報に含まれる、前記第２の参加者を撮影した第２の撮影画像に基づいて前記第２の参加者の画像を解析することにより挙手ジェスチャを検知することを特徴とする構成である。

【0029】

請求項２０に係る発明は、ネットワークを介して複数の情報処理装置と接続し、前記複数の情報処理装置のそれぞれに会議用画面を提供することによってリモート会議を支援するサーバーであって、前記複数の情報処理装置のそれぞれから、前記情報処理装置を使用してリモート会議に参加する第１の参加者に対応する第１参加者情報を取得する第１参加者情報取得手段と、前記第１の参加者と共に前記リモート会議に間接的に参加する第２の参加者に関する第２参加者情報を取得する第２参加者情報取得手段と、前記第１参加者情報取得手段によって取得される前記第１参加者情報を前記会議用画面の所定の表示領域に表示させると共に、前記第２参加者情報取得手段によって取得される前記第２参加者情報を前記表示領域に表示させる表示制御手段と、を備えることを特徴とする構成である。；

【0030】

請求項２１に係る発明は、請求項２０のサーバーにおいて、前記第１参加者情報には、前記第１の参加者を表した第１参加者画像が含まれており、前記表示制御手段は、前記第１参加者画像を前記表示領域に表示させることを特徴とする構成である。

【0031】

請求項２２に係る発明は、請求項２０又は２１のサーバーにおいて、前記第２参加者情報には、前記第２の参加者を表した第２参加者画像が含まれており、前記表示制御手段は、前記第２参加者画像を前記表示領域に表示させることを特徴とする構成である。

【0032】

請求項２３に係る発明は、請求項２０乃至２２のいずれかのサーバーにおいて、前記第２参加者情報に基づいて前記第２の参加者を特定する特定手段、を更に備えることを特徴とする構成である。

【0033】

請求項２４に係る発明は、請求項２３のサーバーにおいて、前記特定手段は、前記第２参加者情報に含まれる、前記第２の参加者を撮影した撮影画像に基づいて前記第２の参加者を特定することを特徴とする構成である。

【0034】

請求項２５に係る発明は、請求項２４のサーバーにおいて、前記特定手段によって特定される前記第２の参加者の中から発言者を検知する発言者検知手段、を更に備え、発言者検知手段は、前記撮影画像に含まれる前記第２の参加者の顔画像を解析することにより発言者を検知することを特徴とする構成である。

【0035】

請求項２６に係る発明は、請求項２５のサーバーにおいて、前記表示制御手段は、前記発言者検知手段によって発言者が検知された場合、当該発言者として検知された前記第２の参加者に対応する前記第２参加者情報を前記表示領域において強調表示させることを特徴とする構成である。

【0036】

請求項２７に係る発明は、請求項２４乃至２６のいずれかのサーバーにおいて、前記特定手段によって特定される前記第２の参加者が挙手ジェスチャを行ったことを検知するジェスチャ検知手段、を更に備え、前記ジェスチャ検知手段は、前記撮影画像に含まれる前記第２の参加者の画像を解析することにより挙手ジェスチャを検知することを特徴とする構成である。

【0037】

請求項２８に係る発明は、請求項２７のサーバーにおいて、前記表示制御手段は、前記ジェスチャ検知手段によって挙手ジェスチャが検知された場合、当該挙手ジェスチャが検知された前記第２の参加者に対応する前記第２参加者情報を前記表示領域において強調表示させることを特徴とする構成である。

【0038】

請求項２９に係る発明は、請求項２７又は２８のサーバーにおいて、前記表示制御手段は、前記ジェスチャ検知手段によって挙手ジェスチャが検知された場合、当該挙手ジェスチャが検知された前記第２の参加者に対応する前記第２参加者情報に対して挙手アイコンを付加して表示させることを特徴とする構成である。

【0039】

請求項３０に係る発明は、ネットワークを介してサーバーに接続し、前記サーバーによって提供されるリモート会議用のプラットフォームを利用してリモート会議を行う情報処理装置であって、当該情報処理装置を使用して前記リモート会議に参加する第１の参加者に対応する第１参加者情報を生成し、当該第１参加者情報を前記サーバーへ送信する第１参加者情報生成手段と、前記第１の参加者と共に前記リモート会議に間接的に参加する第２の参加者に対応する第２参加者情報を生成し、当該第２参加者情報を前記サーバーへ送信する第２参加者情報生成手段と、前記第１参加者情報と前記第２参加者情報とが所定の表示領域に配置された会議用画面を前記サーバーから取得する会議用画面取得手段と、前記会議用画面取得手段によって取得される前記会議用画面を表示する表示手段と、を備えることを特徴とする構成である。

【0040】

請求項３１に係る発明は、請求項３０の情報処理装置において、前記第１の参加者を撮影する第１の撮影手段を制御する第１撮影制御手段と、前記第２の参加者を撮影する第２の撮影手段を制御する第２撮影制御手段と、を更に備え、前記第１参加者情報生成手段は、前記第１撮影制御手段が前記第１の撮影手段を制御することによって取得される第１の撮影画像に基づいて前記第１参加者情報を生成し、前記第２参加者情報生成手段は、前記第２撮影制御手段が前記第２の撮影手段を制御することによって取得される第２の撮影画像に基づいて前記第２参加者情報を生成することを特徴とする構成である。

【0041】

請求項３２に係る発明は、請求項３１の情報処理装置において、前記第２の参加者の中から発言者を検知して前記サーバーへ通知する発言者検知手段、を更に備え、発言者検知手段は、前記第２の撮影画像に含まれる前記第２の参加者の顔画像を解析することにより発言者を検知することを特徴とする構成である。

【0042】

請求項３３に係る発明は、請求項３１又は３２の情報処理装置において、前記第２の参加者が挙手ジェスチャを行ったことを検知して前記サーバーへ通知するジェスチャ検知手段、を更に備え、前記ジェスチャ検知手段は、前記第２の撮影画像に含まれる前記第２の参加者の画像を解析することにより挙手ジェスチャを検知することを特徴とする構成である。

【0043】

請求項３４に係る発明は、ネットワークを介して複数の情報処理装置と接続し、前記複数の情報処理装置のそれぞれに会議用画面を提供することによってリモート会議を支援するサーバーにおいて実行されるプログラムであって、前記サーバーに、前記複数の情報処理装置のそれぞれから、前記情報処理装置を使用してリモート会議に参加する第１の参加者に対応する第１参加者情報を取得する第１ステップと、前記第１の参加者と共に前記リモート会議に間接的に参加する第２の参加者に関する第２参加者情報を取得する第２ステップと、前記第１ステップによって取得される前記第１参加者情報を前記会議用画面の所定の表示領域に表示させると共に、前記第２ステップによって取得される前記第２参加者情報を前記表示領域に表示させる第３ステップと、を実行させることを特徴とする構成である。

【発明の効果】

【0044】

本発明によれば、会議室とは異なる場所でリモート会議に参加している参加者にとっても、会議室で参加している参加者を把握することができるようになり、リモート会議を円滑に行うことができるようになる。

【図面の簡単な説明】

【0045】

【図1】会議システムの一構成例を示す図である。

【図2】会議システムにおいて送受信される情報の一例を示す図である。

【図3】サーバーの一構成例を示す図である。

【図4】情報処理装置の一構成例を示す図である。

【図5】会議システムの動作を示す第１のフローチャートである。

【図6】第１の参加者が表示された会議用画面の一例を示す図である。

【図7】会議システムの動作を示す第２のフローチャートである。

【図8】顔検出処理の一例を示す図である。

【図9】第２の参加者が追加表示された会議用画面の一例を示す図である。

【図10】会議システムの動作を示す第３のフローチャートである。

【図11】発言者が強調表示された会議用画面の一例を示す図である。

【図12】会議システムの動作を示す第４のフローチャートである。

【図13】挙手ジェスチャを行った第２の参加者が強調表示された会議用画面の一例を示す図である。

【図14】サーバーにおいて第２参加者画像を生成するフローチャートである。

【図15】サーバーにおいて発言者を検知するフローチャートである。

【図16】サーバーにおいて挙手ジェスチャを検知するフローチャートである。

【発明を実施するための形態】

【0046】

以下、本発明に関する好ましい実施形態について図面を参照しつつ詳細に説明する。尚、以下に説明する実施形態において互いに共通する要素には同一符号を付しており、それらについての重複する説明は省略する。

【0047】

（発明の一実施形態）
図１は、本発明の一実施形態における会議システム１の構成例を示す図である。この会議システム１は、複数の拠点Ｐａ，Ｐｂ，Ｐｃをネットワーク５で接続し、各拠点Ｐａ，Ｐｂ，Ｐｃの参加者がリモート会議を行うことを支援するシステムである。この会議システム１は、各拠点Ｐａ，Ｐｂ，Ｐｃでリモート会議に参加する参加者が使用する複数の情報処理装置２（２ａ，２ｂ，２ｃ）と、サーバー３とを備えている。サーバー３は、例えばインターネット上のクラウドに設置されるサーバーであり、各拠点Ｐａ，Ｐｂ，Ｐｃの情報処理装置２とインターネットを含むネットワーク５を介して通信可能に接続される。各拠点Ｐａ，Ｐｂ，Ｐｃの情報処理装置２は、サーバー３を介して間接的に他の情報処理装置２と接続され、他の情報処理装置２と情報の交換を行うことができるようになっている。尚、本実施形態では、サーバー３に接続される拠点数が３つである場合を例示しているが、サーバー３に接続される拠点数はこれに限られるものではなく、２つであっても良いし、４つ以上であっても良い。また、サーバー３に接続される情報処理装置２の数も３つに限られず、２つであっても良いし、４つ以上であっても良い。

【0048】

サーバー３は、ネットワーク５を介して複数の情報処理装置２のそれぞれを相互に接続し、それら複数の情報処理装置２のそれぞれに対してリモート会議のためのサービスを提供する。例えば、サーバー３は、リモート会議プラットフォームを提供するＷｅｂサーバー機能を有し、リモート会議プラットフォームに接続される複数の情報処理装置２のそれぞれに対し、会議用画面を提供したり、会議中の音声を提供したりする。会議用画面は、例えば、各拠点Ｐａ，Ｐｂ，Ｐｃでリモート会議に参加する参加者を表した画像を並べて表示する機能や、少なくとも一人の参加者によって共有指定された資料画像などを表示する機能を有している。

【0049】

また、サーバー３は、データベース４を備えている。データベース４は、リモート会議の予約情報や、リモート会議の参加者を認証するための情報などを記憶するための記憶手段である。尚、データベース４は、サーバー３とは別の拠点に設けられ、ネットワーク５を介してサーバー３に接続されるものであっても構わない。

【0050】

情報処理装置２は、リモート会議に参加する参加者によって使用される可搬型の端末装置であり、例えばパーソナルコンピュータやタブレット端末、スマートフォンなどによって構成される。この種の情報処理装置２は、一般に、表示部と、カメラと、マイクと、スピーカとを備えている。そして情報処理装置２は、ネットワーク５を介してサーバー３に接続し、サーバー３によって提供されるリモート会議プラットフォームを利用することにより、リモート会議を支援するための各種処理を行う。例えば、情報処理装置２は、サーバー３に接続して、表示部、カメラ、マイク及びスピーカを起動させることより、サーバー３から提供される会議用画面を表示したり、他の拠点の参加者と通話を行ったりすることができる。

【0051】

本実施形態では、一例として、拠点Ｐａにおいて、参加者Ａが自身の情報処理装置２ａを使用してリモート会議に参加する。また、拠点Ｐｂにおいて、参加者Ｂが自身の情報処理装置２ｂを使用してリモート会議に参加する。また、拠点Ｐｃにおいて、参加者Ｃが自身の情報処理装置２ｃを会議室に持ち込み、その情報処理装置２ｃを使用してリモート会議に参加する。更に本実施形態では、拠点Ｐｃの会議室において、参加者Ｃの他に、別の参加者Ｄ，Ｅ，Ｆがリモート会議に参加する。ただし、参加者Ｄ，Ｅ，Ｆは、会議室に情報処理装置２を持ち込まず、参加者Ｃが使用する情報処理装置２を共有してリモート会議に間接的に参加する。

【0052】

また、拠点Ｐｃの会議室には、カメラ６が設置される。このカメラ６は、拠点Ｐｃの会議室でリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆを撮影するためのカメラである。例えば、参加者Ｃが使用する情報処理装置２ｃに搭載されているカメラは、参加者Ｃを撮影するように配置されており、会議室に居る他の参加者Ｄ，Ｅ，Ｆの全員を撮影することが難しい。そのため、本実施形態では、情報処理装置２ｃとは別に会議室にカメラ６が設置され、他の参加者Ｄ，Ｅ，Ｆを撮影するようにしている。このカメラ６は、例えば情報処理装置２ｃに接続され、情報処理装置２ｃからの指示に基づいて撮影動作を開始し、情報処理装置２ｃに撮影画像を出力する。

【0053】

更に、拠点Ｐｃの会議室には、スクリーン７、及び、複数のマイク８ｄ，８ｅ，８ｆが設置される。スクリーン７は、情報処理装置２ｃに表示される会議用画面と同じ画面を表示するためのスクリーンである。例えば、スクリーン７は、情報処理装置２ｃに接続される大画面ディスプレイなどの表示装置であっても良いし、情報処理装置２ｃに接続されるプロジェクタなどの投影機から会議用画面が投影されるものであっても構わない。また、マイク８ｄ，８ｅ，８ｆは、情報処理装置２を持ち込まずにリモート会議に参加する参加者Ｄ，Ｅ，Ｆのそれぞれに個別に割り当てられ、参加者Ｄ，Ｅ，Ｆのそれぞれの近傍に設置される音声入力手段である。

【0054】

上記のような構成を有する会議システム１は、情報処理装置２ａ，２ｂ，２ｃを使用してリモート会議に直接参加する参加者Ａ，Ｂ，Ｃを第１の参加者（直接参加者）として認識し、第１の参加者がリモート会議を円滑に行えるように支援する。また、会議システム１は、情報処理装置２ａ，２ｂ，２ｃを使用することなくリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆを第２の参加者（間接参加者）として認識し、それら第２の参加者を第１の参加者と同様に取り扱うことにより、第１の参加者及び第２の参加者のそれぞれがリモート会議を円滑に行えるように支援する。

【0055】

例えば図２（ａ）に示すように、各情報処理装置２ａ，２ｂ，２ｃは、サーバー３に接続すると、リモート会議に直接参加する参加者Ａ，Ｂ，Ｃ（第１の参加者）に関する第１参加者情報Ｄ１を生成してサーバー３へ送信する。この第１参加者情報Ｄ１には、第１の参加者を識別可能な識別情報が含まれる。また、識別情報には、第１の参加者の名前が含まれている。尚、名前は、フルネームであっても良いし、イニシャルやニックネームなどであっても良い。

【0056】

また、各情報処理装置２ａ，２ｂ，２ｃは、第１参加者情報Ｄ１に、参加者Ａ，Ｂ，Ｃ（第１の参加者）を表した第１参加者画像を含めてサーバー３へ送信することができる。例えば、各情報処理装置２ａ，２ｂ，２ｃに搭載されているカメラの撮影機能がオンに設定されている場合、情報処理装置２ａ，２ｂ，２ｃは、カメラによって参加者Ａ，Ｂ，Ｃを撮影した第１の撮影画像（例えば動画像）を取得し、その第１の撮影画像から第１参加者画像を生成し、第１参加者画像を含む第１参加者情報Ｄ１をサーバー３へ送信することができる。ただし、第１参加者画像は、必ずしも第１の撮影画像から生成される画像に限られない。

【0057】

サーバー３は、各情報処理装置２ａ，２ｂ，２ｃから取得する第１参加者情報Ｄ１に基づき、各情報処理装置２ａ，２ｂ，２ｃに表示させるための会議用画面を作成し、会議用画面に関する画面情報Ｄ３を各情報処理装置２ａ，２ｂ，２ｃへ提供する。このとき、サーバー３は、各情報処理装置２ａ，２ｂ，２ｃから取得する第１参加者情報Ｄ１を会議用画面の所定の表示領域に配置する。例えば、サーバー３は、参加者Ａ，Ｂ，Ｃを表した第１参加者画像や、参加者Ａ，Ｂ，Ｃの識別情報などを所定の表示領域に配置した会議用画面を作成する。

【0058】

また、各情報処理装置２ａ，２ｂ，２ｃに搭載されているカメラの撮影機能がオンに設定されていれば、各情報処理装置２ａ，２ｂ，２ｃから取得する第１参加者情報Ｄ１には、参加者Ａ，Ｂ，Ｃを撮影した第１の撮影画像に基づく第１参加者画像が含まれる。そのため、サーバー３は、それらの第１参加者画像を配置した会議用画面を作成し、各情報処理装置２ａ，２ｂ，２ｃへ提供する。

【0059】

また、各情報処理装置２ａ，２ｂ，２ｃに搭載されているカメラの撮影機能がオフになっている場合、各情報処理装置２ａ，２ｂ，２ｃから取得する第１参加者情報Ｄ１には、参加者Ａ，Ｂ，Ｃを撮影した第１の撮影画像に基づく第１参加者画像が含まれない。この場合、サーバー３は、各参加者Ａ，Ｂ，Ｃに対して予め定められている画像（例えば静止画など）を参加者Ａ，Ｂ，Ｃを表した第１参加者画像として使用し、会議用画面に配置する。そしてサーバー３は、静止画などの第１参加者画像を配置した会議用画面を各情報処理装置２ａ，２ｂ，２ｃへ提供する。

【0060】

情報処理装置２ａ，２ｂ，２ｃは、サーバー３から会議用画面に関する画面情報Ｄ３を取得し、その画面情報Ｄ３に基づいて会議用画面を表示する。このとき表示される会議用画面には、各情報処理装置２ａ，２ｂ，２ｃを使用してリモート会議に直接参加している参加者Ａ，Ｂ，Ｃ（第１の参加者）に関する第１参加者情報Ｄ１が含まれている。そのため、自身の情報処理装置２を使用してリモート会議に直接参加している参加者Ａ，Ｂ，Ｃは、会議用画面を視認することにより、別の拠点で誰がリモート会議に直接参加しているかを把握することができる。

【0061】

また、図２（ｂ）に示すように、参加者Ｃによって会議室に持ち込まれる情報処理装置２ｃは、上記に加え、リモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆ（第２の参加者）に関する第２参加者情報Ｄ２を生成してサーバー３へ送信する。この第２参加者情報Ｄ２には、第２の参加者を識別可能な識別情報が含まれる。例えば、識別情報には、第２の参加者の名前が含まれている。この場合の名前は、フルネームであっても良いし、イニシャルやニックネームなどであっても良い。例えば、識別情報は、情報処理装置２ｃを使用している参加者Ｃが情報処理装置２ｃに対して手動入力するものであっても良い。この場合、参加者Ｃは、複数の参加者Ｄ，Ｅ，Ｆに関する識別情報を個別に手動入力する。ただし、情報処理装置２ｃに接続されているカメラ６の撮影機能がオンに設定されている場合、第２参加者情報Ｄ２には、必ずしも参加者Ｄ，Ｅ，Ｆに関する識別情報が含まれていなくても良く、参加者Ｃは、識別情報を手動操作で入力する必要がない。

【0062】

また、情報処理装置２ｃは、第２参加者情報Ｄ２に、参加者Ｄ，Ｅ，Ｆ（第２の参加者）を表した第２参加者画像を含めてサーバー３へ送信することができる。例えば、情報処理装置２ｃに接続されているカメラ６の撮影機能がオンに設定されている場合、情報処理装置２ｃは、カメラ６によって参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像（例えば動画像）を取得し、その第２の撮影画像から第２参加者画像を生成し、第２参加者画像を含む第２参加者情報Ｄ２をサーバー３へ送信することができる。ただし、第２参加者画像は、必ずしも第２の撮影画像から生成される画像に限られない。

【0063】

サーバー３は、情報処理装置２ｃから、参加者Ｄ，Ｅ，Ｆに関する第２参加者情報Ｄ２を取得すると、その第２参加者情報Ｄ２を、第１参加者情報Ｄ１と同様に所定の表示領域に配置した会議用画面を作成し、画面情報Ｄ３を更新する。そしてサーバー３は、更新した画面情報Ｄ３を各情報処理装置２ａ，２ｂ，２ｃへ提供する。このとき、サーバー３は、会議用画面に参加者Ｄ，Ｅ，Ｆ（第２の参加者）を表した第２参加者画像を追加した画面情報Ｄ３を生成し、その画面情報Ｄ３を各情報処理装置２ａ，２ｂ，２ｃへ提供する。例えば、情報処理装置２ｃに接続されているカメラ６の撮影機能がオンに設定されていれば、情報処理装置２ｃから取得する第２参加者情報Ｄ２には、参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像に基づく第２参加者画像が含まれる。そのため、サーバー３は、その第２参加者画像を配置した会議用画面を作成し、各情報処理装置２ａ，２ｂ，２ｃへ提供する。

【0064】

また、情報処理装置２ｃに搭載されているカメラの撮影機能がオフになっている場合、情報処理装置２ｃから取得する第２参加者情報Ｄ２には、参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像に基づく第２参加者画像が含まれない。この場合、サーバー３は、各参加者Ｄ，Ｅ，Ｆに対して予め定められている画像（例えば静止画など）を参加者Ｄ，Ｅ，Ｆを表した第２参加者画像として使用し、会議用画面に配置する。そしてサーバー３は、静止画などの第２参加者画像を配置した会議用画面を各情報処理装置２ａ，２ｂ，２ｃへ提供する。

【0065】

そのため、拠点Ｐｃの会議室とは異なる拠点Ｐａ，Ｐｂでリモート会議に参加している参加者Ａ，Ｂは、情報処理装置２ａ，２ｂで表示される会議用画面をみれば、拠点Ｐｃの会議室でリモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆを把握することができる。以下、このような会議システム１について更に詳しく説明する。尚、以下において、各情報処理装置２ａ，２ｂ，２ｃを区別しないときにはそれらを総称して情報処理装置２と呼ぶことがある。

【0066】

図３は、サーバー３の構成例を示す図である。サーバー３は、リモート会議プラットフォーム１０と、通信インタフェース１１とを備えている。リモート会議プラットフォーム１０は、例えばサーバー３に実装されているＣＰＵなどのハードウェアプロセッサが所定プログラムを実行することによって実現されるソフトウェア機能である。このリモート会議プラットフォーム１０は、複数の情報処理装置２ａ，２ｂ，２ｃのそれぞれと通信を行い、リモート会議を支援するための処理を行う。通信インタフェース１１は、サーバー３をネットワーク５に接続し、複数の情報処理装置２ａ，２ｂ，２ｃのそれぞれと通信を行うためのインタフェースである。

【0067】

リモート会議プラットフォーム１０は、例えばデータベース４に予め登録されているリモート会議の予約情報に基づき、リモート会議のためのアドレス（例えばＵＲＬ（Uniform Resource Locator）など）を設定し、そのアドレスを予約情報に登録された複数の情報処理装置２ａ，２ｂ，２ｃのそれぞれに予め通知しておく。そしてリモート会議プラットフォーム１０は、リモート会議の開始時刻が近づくと、各情報処理装置２ａ，２ｂ，２ｃからのアクセスを受け付け、各情報処理装置２ａ，２ｂ，２ｃとの接続状態を確立してリモート会議を支援するための処理を開始する。このリモート会議プラットフォーム１０は、会議用画面提供部１２と、音声処理部１３と、特定部１４とを備えている。

【0068】

会議用画面提供部１２は、複数の情報処理装置２のそれぞれで共有される会議用画面を生成し、その会議用画面を各情報処理装置２へ提供することにより、各拠点間における情報の共有を支援する。この会議用画面提供部１２は、第１参加者情報取得部１５と、第２参加者情報取得部１６と、表示制御部１７とを備えている。

【0069】

第１参加者情報取得部１５は、複数の情報処理装置２ａ，２ｂ，２ｃのそれぞれから送信される第１参加者情報Ｄ１を取得する。第１参加者情報取得部１５は、第１参加者情報Ｄ１を取得すると、その第１参加者情報Ｄ１を表示制御部１７へ出力する。

【0070】

情報処理装置２ａ，２ｂ，２ｃに搭載されているカメラの撮影機能がオンになっている場合、第１参加者情報取得部１５は、情報処理装置２ａ，２ｂ，２ｃから第１の撮影画像に基づいて生成される第１参加者画像を継続的に取得する。そのため、第１参加者情報取得部１５は、情報処理装置２ａ，２ｂ，２ｃから取得する第１参加者画像を、表示制御部１７に対して継続的に出力する。

【0071】

第２参加者情報取得部１６は、複数の情報処理装置２ａ，２ｂ，２ｃのうちの少なくとも１つの情報処理装置２ｃから、第１の参加者と共にリモート会議に間接的に参加する第２の参加者に対応する第２参加者情報Ｄ２を取得する。第２参加者情報取得部１６は、第２参加者情報Ｄ２を取得すると、その第２参加者情報Ｄ２を表示制御部１７へ出力する。また、第２参加者情報取得部１６は、第２参加者情報Ｄ２を特定部１４へ出力する。

【0072】

情報処理装置２ｃに接続されているカメラ６の撮影機能がオンになっている場合、第２参加者情報取得部１６は、情報処理装置２ｃから第２の撮影画像に基づいて生成される第２参加者画像を継続的に取得する。そのため、第２参加者情報取得部１６は、情報処理装置２ｃから取得する第２参加者画像を、表示制御部１７に対して継続的に出力する。

【0073】

表示制御部１７は、第１参加者情報取得部１５から出力される第１参加者情報Ｄ１を取得すると、その第１参加者情報Ｄ１を所定の表示領域に配置した会議用画面を作成する。また、表示制御部１７は、第２参加者情報取得部１６から出力される第２参加者情報Ｄ２を取得すると、その第２参加者情報Ｄ２を所定の表示領域に配置した会議用画面を作成する。そして表示制御部１７は、第１参加者情報Ｄ１及び第２参加者情報Ｄ２のそれぞれを所定の表示領域に配置した会議用画面を複数の情報処理装置２ａ，２ｂ，２ｃのそれぞれに提供して表示させる。

【0074】

例えば、図１に示す態様でリモート会議が行われる場合、表示制御部１７は、情報処理装置２ａ，２ｂ，２ｃのそれぞれから取得する第１参加者情報Ｄ１に基づき、参加者Ａ，Ｂ，Ｃのそれぞれを表した第１参加者画像を所定の表示領域に配置した会議用画面を作成して情報処理装置２ａ，２ｂ，２ｃへ送信する。その結果、情報処理装置２ａ，２ｂ，２ｃのそれぞれにおいて、参加者Ａ，Ｂ，Ｃのそれぞれを表した複数の画像を含む会議用画面が表示される。このとき、各情報処理装置２ａ，２ｂ，２ｃに搭載されているカメラの撮影機能がオンになっていれば、会議用画面には、参加者Ａ，Ｂ，Ｃを撮影したリアルタイムな画像（動画像）が表示される。

【0075】

また、表示制御部１７は、情報処理装置２ｃから参加者Ｄ，Ｅ，Ｆのそれぞれに対応する第２参加者情報Ｄ２を取得すると、その第２参加者情報Ｄ２に基づき、参加者Ｄ，Ｅ，Ｆのそれぞれを表した第２参加者画像を所定の表示領域に配置した会議用画面を作成して情報処理装置２ａ，２ｂ，２ｃへ送信する。その結果、情報処理装置２ａ，２ｂ，２ｃのそれぞれにおいて、リモート会議に直接参加する参加者Ａ，Ｂ，Ｃだけでなく、リモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆを表した複数の画像を含む会議用画面が表示されることになる。このとき、情報処理装置２ｃに接続されているカメラ６の撮影機能がオンになっていれば、会議用画面には、参加者Ｄ，Ｅ，Ｆを撮影したリアルタイムな画像（動画像）が表示されることになる。

【0076】

音声処理部１３は、会議用の音声を処理するものである。音声処理部１３は、一の拠点で収集された音声を他の拠点の情報処理装置２へ配信することにより、各拠点間で行われる通話を支援する。例えば、音声処理部１３は、複数の情報処理装置２のうちの一の情報処理装置２から音声情報を取得すると、その一の情報処理装置２を除く他の情報処理装置２へ音声情報を送信し、音声出力を行わせる。これにより、他の拠点でリモート会議に参加している参加者は、一の拠点で発せられた音声を聞くことができる。

【0077】

特定部１４は、複数の情報処理装置２ａ，２ｂ，２ｃのうちの少なくとも１つの情報処理装置２から第２の参加者に関する第２参加者情報Ｄ２を取得すると、その第２参加者情報Ｄ２に基づいてデータベース４を検索することにより、第２の参加者を特定する。例えば、特定部１４は、第２参加者情報Ｄ２に、第２の撮影画像に基づく第２参加者画像が含まれている場合、その第２参加者画像に含まれる顔画像の特徴に基づいてデータベース４を検索し、リモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆを特定する。すなわち、特定部１４は、第２参加者画像から参加者Ｄ，Ｅ，Ｆの顔画像を抽出し、データベース４に予め登録されている特徴情報と、第２の撮影画像から抽出した顔画像の特徴とを比較することにより、参加者Ｄ，Ｅ，Ｆを特定する。このとき、特定部１４は、第２の参加者としてリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆの名前を特定することもできる。そのため、第２参加者情報Ｄ２に第２の参加者を識別可能な識別情報が含まれていない場合であっても、特定部１４は、第２の参加者の名前を特定することができる。

【0078】

また、第２参加者情報Ｄ２に参加者Ｄ，Ｅ，Ｆの識別情報が含まれている場合、特定部１４は、第２参加者情報Ｄ２に含まれる識別情報に基づいて参加者Ｄ，Ｅ，Ｆの名前を特定する。そのため、特定部１４は、参加者Ｄ，Ｅ，Ｆの名前を特定するために、データベース４を検索する必要がない。

【0079】

特定部１４は、第２の参加者を特定すると、その特定結果を情報処理装置２ｃへ送信する。また、特定部１４は、第２の参加者を特定すると、その特定結果を会議用画面提供部１２にも出力する。

【0080】

次に、図４は、情報処理装置２の構成例を示す図である。尚、各拠点Ｐａ，Ｐｂ，Ｐｃで使用される情報処理装置２ａ，２ｂ，２ｃはいずれも同様の構成である。情報処理装置２は、制御部２０、カメラ２１、マイク２２、スピーカ２３、表示部２４、操作入力部２５、機器接続部２６及び通信インタフェース２７を備えている。

【0081】

制御部２０は、ＣＰＵなどのハードウェアプロセッサとメモリとを備えて構成される。この制御部２０は、ハードウェアプロセッサが所定のプログラムを実行することにより、ブラウザ３０及び連携アプリケーション４０として機能する。ブラウザ３０は、Ｗｅｂページを閲覧するためのアプリケーションであり、サーバー３にアクセスすることにより、サーバー３からＷｅｂページとして提供される会議用画面を取得して表示部２４に表示する。連携アプリケーション４０は、ブラウザ３０がサーバー３にアクセスしている状態で起動されるアプリケーションであり、サーバー３及びブラウザ３０と連携して第２の参加者をリモート会議に参加させるための処理を実行する。

【0082】

カメラ２１は、情報処理装置２の表示部２４の周囲に搭載された撮影手段（第１の撮影手段）である。例えば、カメラ２１は、表示部２４に表示される会議用画面を視認しようとする第１の参加者を撮影することができる。

【0083】

マイク２２は、情報処理装置２に搭載された音声入力手段である。例えば、マイク２２は、情報処理装置２を使用してリモート会議に直接参加する第１の参加者が発する音声を入力し、音声情報を生成する。

【0084】

スピーカ２３は、情報処理装置２に搭載された音声出力手段である。例えば、スピーカ２３は、サーバー３から提供される音声情報に基づく音声を出力する。尚、スピーカ２３は、参加者Ａ，Ｂ，Ｃが装着するヘッドフォンなどであっても構わない。

【0085】

表示部２４は、カラー液晶ディスプレイなどで構成される表示手段である。例えば、表示部２４は、サーバー３から提供される会議用画面を表示部２４に表示することができる。

【0086】

操作入力部２５は、情報処理装置２を使用する参加者による操作入力を受け付ける操作入力手段である。例えば、操作入力部２５は、キーボードやマウス、タッチパネルなどを含むものである。

【0087】

機器接続部２６は、情報処理装置２に対して外部機器を接続するためのインタフェースである。例えば、機器接続部２６は、ＵＳＢインタフェースや、ビデオ出力端子、ビデオ入力端子、音声入出力端子などによって構成される。拠点Ｐｃの会議室に持ち込まれる情報処理装置２ｃの場合、機器接続部２６には、カメラ６、マイク８ｄ，８ｅ，８ｆ、及び、表示装置９が接続される。表示装置９は、拠点Ｐｃの会議室に設置されたスクリーン７に会議用画面を表示させる装置である。

【0088】

通信インタフェース２７は、情報処理装置２をネットワーク５に接続し、サーバー３との通信を行うためのインタフェースである。

【0089】

ブラウザ３０は、サーバー３との接続状態を確立し、サーバー３から提供されるプログラムモジュールを実行することにより、カメラ制御部３１、第１参加者情報生成部３２、音声取得部３３、画面取得部３４、表示処理部３５及び音声出力部３６として機能する。

【0090】

カメラ制御部３１は、情報処理装置２に搭載されているカメラ２１の撮影動作を制御する。例えば、カメラ２１の撮影機能がオンに設定されている場合、カメラ制御部３１は、カメラ２１による撮影動作を開始させる。カメラ２１は第１の参加者を撮影可能であるため、カメラ制御部３１は、カメラ２１の撮影動作を開始させることにより、第１の参加者を撮影した第１の撮影画像を取得することができる。例えば、カメラ制御部３１は、第１の撮影画像を動画像として取得する。そして、カメラ制御部３１は、第１の撮影画像を第１参加者情報生成部３２へ出力する。尚、カメラ２１の撮影機能がオフである場合、カメラ制御部３１は、カメラ２１による撮影を行わせない。この場合、情報処理装置２において第１の撮影画像は取得されない。

【0091】

第１参加者情報生成部３２は、情報処理装置２を使用する第１の参加者に関する第１参加者情報Ｄ１を生成し、その第１参加者情報Ｄ１をサーバー３へ送信する。例えば、第１参加者情報生成部３２は、まず第１の参加者を特定する。すなわち、第１参加者情報生成部３２は、情報処理装置２に予め登録されているユーザー情報に基づいて第１の参加者を特定する。そして第１参加者情報生成部３２は、第１の参加者を識別可能な識別情報を生成する。この識別情報には、第１の参加者の名前が含まれる。そして第１参加者情報生成部３２は、第１の参加者に関する識別情報を含む第１参加者情報Ｄ１を生成する。

【0092】

また、第１参加者情報生成部３２は、情報処理装置２を使用してリモート会議に直接参加する第１の参加者を表した第１参加者画像を生成し、その第１参加者画像を含む第１参加者情報Ｄ１を生成する。例えば、カメラ２１の撮影機能がオンである場合、第１参加者情報生成部３２は、カメラ制御部３１から出力される第１の撮影画像を取得する。そのため、第１参加者情報生成部３２は、第１の参加者を撮影した第１の撮影画像に基づいて第１の参加者を表した第１参加者画像を生成する。このとき、第１参加者情報生成部３２は、カメラ２１によって撮影された第１の撮影画像をそのまま利用して第１の参加者を表した第１参加者画像を生成しても良いし、また第１の撮影画像から第１の参加者の顔画像の部分を切り出すことによって第１の参加者を表した第１参加者画像を生成しても良い。また、第１参加者情報生成部３２は、第１の参加者の背景部分を別の画像に差し替えたり、或いは暈かしたりした画像を生成しても良い。

【0093】

これに対し、カメラ２１の撮影機能がオフである場合、第１参加者情報生成部３２は、第１の参加者を撮影した第１の撮影画像を取得することができない。この場合、第１参加者情報生成部３２は、ユーザーによって予め定められている画像（例えば静止画など）を読み出し、その画像を、第１の参加者を表した第１参加者画像として利用しても構わない。

【0094】

そして第１参加者情報生成部３２は、上記のようにして生成した第１参加者情報Ｄ１をサーバー３へ送信する。このとき、第１参加者情報生成部３２は、サーバー３の会議用画面提供部１２を機能させるコマンドを付加して送信する。

【0095】

音声取得部３３は、マイク２２を介して第１の参加者が発した音声に対応する音声情報を取得する。音声取得部３３は、第１の参加者の音声情報を取得すると、その音声情報をサーバー３へ送信する。このとき、音声取得部３３は、サーバー３の音声処理部１３を機能させるコマンドを付加して送信する。このコマンドには、第１の参加者を識別可能な識別情報が含まれる。

【0096】

画面取得部３４は、ブラウザ３０へアクセスすることに伴い、サーバー３から提供される会議用画面を取得する。画面取得部３４は、会議用画面を取得すると、その会議用画面を表示処理部３５へ出力する。

【0097】

表示処理部３５は、画面取得部３４によって取得される会議用画面を表示部２４に表示させる処理部である。また、表示処理部３５は、機器接続部２６に表示装置９が接続されている場合、その表示装置９にも会議用画面を表示させる。これにより、例えば拠点Ｐｃの会議室でリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆは、表示装置９によってスクリーン７に表示される会議用画面を視認することができるようになる。

【0098】

音声出力部３６は、サーバー３から音声情報を取得した場合に、その音声情報に基づいてスピーカ２３を駆動することにより、他の拠点の参加者が発した音声を出力する。

【0099】

連携アプリケーション４０は、例えば情報処理装置２を使用している第１の参加者の指示によって起動される。この連携アプリケーション４０は、カメラ制御部４１、第２参加者情報生成部４２、画像解析部４３及び音声取得部４６として機能する。

【0100】

カメラ制御部４１は、機器接続部２６に接続されているカメラ６の撮影動作を制御する。例えば、カメラ６の撮影機能がオンに設定されている場合、カメラ制御部４１は、カメラ６による撮影動作を開始させる。カメラ６は第２の参加者を撮影可能な状態に設置されるため、カメラ制御部４１は、カメラ６の撮影動作を開始させることにより、第２の参加者を撮影した第２の撮影画像を取得することができる。例えば、拠点Ｐｃの会議室に持ち込まれた情報処理装置２ｃの場合、カメラ制御部４１は、リモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像を取得する。またカメラ制御部４１は、第２の撮影画像を動画像として取得する。そして、カメラ制御部４１は、第２の撮影画像を第２参加者情報生成部４２へ出力する。

【0101】

第２参加者情報生成部４２は、リモート会議に間接的に参加する第２の参加者に関する第２参加者情報Ｄ２を生成し、その第２参加者情報Ｄ２をサーバー３へ送信する。このとき、第２参加者情報生成部４２は、情報処理装置２を使用してリモート会議に間接的に参加する第２の参加者を表した第２参加者画像を生成し、その第２参加者画像を含む第２参加者情報Ｄ２を生成する。例えば、カメラ６の撮影機能がオンである場合、第２参加者情報生成部４２は、カメラ制御部４１から出力される第２の撮影画像を取得する。そのため、第２参加者情報生成部４２は、第２の参加者を撮影した第２の撮影画像に基づいて第２の参加者を表した第２参加者画像を生成する。このとき、第２参加者情報生成部４２は、第２の撮影画像から顔画像を抽出する処理を行い、その顔画像に基づいて参加者Ｄ，Ｅ，Ｆを特定する処理を行う。そして参加者Ｄ，Ｅ，Ｆを特定することができると、第２参加者情報生成部４２は、カメラ制御部４１によって取得される第２の撮影画像に基づいて参加者Ｄ，Ｅ，Ｆのそれぞれを表した第２参加者画像を生成する。また、第２参加者情報生成部４２は、カメラ６によって得られる第２の撮影画像をそのまま第２参加者を表した第２参加者画像として利用しても良いし、第２の撮影画像から第２の参加者の顔画像を抽出し、その顔画像を、第２の参加者を表した第２参加者画像として利用しても良い。また、第２参加者情報生成部４２は、第２の撮影画像から抽出した第２の参加者の背景部分を別の画像に差し替えたり、或いは暈かしたりした画像を生成しても良い。

【0102】

これに対し、カメラ６の撮影機能がオフである場合、第２参加者情報生成部４２は、第２の参加者を撮影した第２の撮影画像を取得することができない。この場合、第２参加者情報生成部４２は、情報処理装置２を使用するユーザー（例えば参加者Ｃ）によって指定された画像（例えば静止画など）を読み出し、その画像を、第２の参加者を表した第２参加者画像として利用しても構わない。

【0103】

また、第２参加者情報生成部４２は、例えば表示部２４に対して第２の参加者を識別可能な識別情報を入力するための画面を表示し、操作入力部２５に対して行われる識別情報の入力操作を受け付け、第２の参加者に対応する識別情報を生成することもできる。図１の例では、拠点Ｐｃの会議室で情報処理装置２ｃを使用している参加者Ｃが、他の参加者Ｄ，Ｅ，Ｆに関する識別情報を手動操作で入力する。そして第２参加者情報生成部４２は、参加者Ｃによって入力される識別情報を取得し、その識別情報を含む第２参加者情報Ｄ２を生成する。このとき、第２参加者情報生成部４２は、第２の参加者を表した第２参加者画像と、識別情報とを相互に対応付けた第２参加者情報Ｄ２を生成することが好ましい。尚、カメラ６の撮影機能がオンである場合には、上述したように第２の撮影画像から第２の参加者を特定することができるため、第２参加者情報生成部４２は、参加者Ｃによる識別情報の入力操作を省略しても構わない。

【0104】

例えば、第２参加者情報生成部４２は、第２の撮影画像に基づいて第２の参加者を特定するとき、例えば第２の撮影画像から抽出した第２の参加者の顔画像を、特定対象情報としてサーバー３へ送信する。このとき、第２参加者情報生成部４２は、サーバー３の特定部１４を機能させるコマンドを付加して送信する。このコマンドに基づき、サーバー３は、特定部１４を機能させ、顔画像に基づいてデータベース４を検索することにより、第２の撮影画像に含まれる第２の参加者を特定する。これにより、拠点Ｐｃの会議室でリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆの名前などが特定される。そしてサーバー３は、第２の参加者の特定結果を情報処理装置２へ返信する。第２参加者情報生成部４２は、サーバー３から受信する特定結果に基づき、第２の撮影画像に含まれる第２の参加者を特定する。

【0105】

その後、第２参加者情報生成部４２は、第２の参加者を表した第２参加者画像と、第２の参加者の名前を含む識別情報とを対応付けた第２参加者情報Ｄ２をサーバー３に送信する。このとき、第２参加者情報生成部４２は、サーバー３の会議用画面提供部１２を機能させるコマンドを付加して送信する。また、カメラ６の撮影機能がオンである場合、第２参加者情報生成部４２は、第２の撮影画像から生成した第２参加者画像を画像解析部４３へ出力する。

【0106】

画像解析部４３は、第２参加者情報生成部４２から出力される第２参加者画像を解析する処理部である。この画像解析部４３は、発言者検知部４４と、ジェスチャ検知部４５とを備えている。

【0107】

発言者検知部４４は、第２参加者情報生成部４２によって特定された第２の参加者の中から発言者を検知する処理部である。発言者検知部４４は、第２の撮影画像に基づいて生成された第２参加者画像から顔画像を抽出し、その顔画像を解析することにより発言者を検知する。例えば、発言者検知部４４は、第２の参加者の顔画像において口元の動きを判定し、その判定結果に基づいて発言者を検知する。第２参加者画像に複数の第２の参加者の顔画像が含まれる場合、発言者検知部４４は、それら複数の顔画像のそれぞれに対して口元の動きを判定する処理を繰り返し行う。そのため、発言者検知部４４は、複数の第２の参加者のうちの少なくとも一人の参加者が発言すれば、誰が発言しているのかをリアルタイムで検知することができる。

【0108】

発言者検知部４４は、発言者を検知すると、サーバー３に対して発言者を通知する。このとき、発言者検知部４４は、サーバー３の会議用画面提供部１２を機能させるコマンドを付加して送信する。このコマンドには、発言者として検知された第２の参加者を識別可能な識別情報が含まれる。

【0109】

ジェスチャ検知部４５は、第２参加者情報生成部４２によって特定された第２の参加者によって挙手ジェスチャが行われたことを検知する処理部である。ジェスチャ検知部４５は、第２の撮影画像から生成された第２参加者画像に基づき、第２の参加者によって行われる挙手ジェスチャを検知する。例えば、ジェスチャ検知部４５は、第２の参加者の顔画像の周辺における手の動きを検知することにより挙手ジェスチャを検知する。第２参加者画像に複数の第２の参加者の顔画像が含まれる場合、ジェスチャ検知部４５は、それら複数の顔画像のそれぞれを検知対象とし、顔画像周辺での手の動きを検知する処理を繰り返し行う。そのため、ジェスチャ検知部４５は、複数の第２の参加者のうちの少なくとも一人の参加者が挙手ジェスチャを行えば、誰が挙手ジェスチャを行っているのかをリアルタイムで検知することができる。

【0110】

ジェスチャ検知部４５は、挙手ジェスチャを検知すると、サーバー３に対して挙手ジェスチャが行われたことを通知する。このとき、ジェスチャ検知部４５は、サーバー３の会議用画面提供部１２を機能させるコマンドを付加して送信する。このコマンドには、挙手ジェスチャを行った第２の参加者を識別可能な識別情報が含まれる。

【0111】

音声取得部４６は、機器接続部２６に接続されている複数のマイク８ｄ，８ｅ，８ｆのうちの少なくとも１つを介して第２の参加者が発した音声に対応する音声情報を取得する。音声取得部４６は、第２の参加者の音声情報を取得すると、その音声情報をサーバー３へ送信する。このとき、音声取得部４６は、サーバー３の音声処理部１３を機能させるコマンドを付加して送信する。このコマンドには、発言者検知部４４によって発言者として検知された第２の参加者を識別可能な識別情報が含まれる。

【0112】

また、音声取得部４６は、音声切替部４７を備えている。音声切替部４７は、複数のマイク８ｄ，８ｅ，８ｆのオンオフ制御を行うものである。例えば、音声切替部４７は、複数のマイク８ｄ，８ｅ，８ｆのそれぞれが複数の第２の参加者のうちのいずれの参加者の近くに設置されているかを予め記憶している。これを実現するためには、例えば、連携アプリケーション４０の起動時に情報処理装置２ｃを使用するユーザー（参加者Ｃ）が、複数のマイク８ｄ，８ｅ，８ｆの設置位置を参加者Ｄ，Ｅ，Ｆに対応付けて登録しておけば良い。そして、音声切替部４７は、複数のマイク８ｄ，８ｅ，８ｆのうち、発言者検知部４４によって発言者として検知された第２の参加者の近傍に設置されているマイクの電源をオンにし、他のマイクの電源をオフに切り替える。これにより、発言者に最も近いマイクで発言者の音声を取得することが可能となり、聞き取りやすいクリアな音声を取得することができる。

【0113】

次に、上記のように構成される会議システム１の動作について説明する。図５は、本実施形態における会議システム１の動作を示す第１のフローチャートである。この第１のフローチャートでは、リモート会議に直接参加する参加者Ａ，Ｂ，Ｃが自身の情報処理装置２ａ，２ｂ，２ｃを使用してサーバー３にログインする流れを示している。まず、リモート会議の開始時刻が近づくと、拠点Ｐａ，Ｐｂでリモート会議に直接参加する参加者Ａ，Ｂが情報処理装置２ａ，２ｂを操作することによってブラウザ３０を起動し、サーバー３から予め通知されているアドレスにアクセスする（ステップＳ１）。このとき、ブラウザ３０は、参加者Ａ，Ｂを識別するための識別情報を含む第１参加者情報Ｄ１をサーバー３へ送信する。サーバー３は、情報処理装置２ａ，２ｂからのアクセスを検知すると、参加者Ａ，Ｂの識別情報に基づき予約情報に登録されている参加者であるか否かを認証する。その結果、認証に成功すると、サーバー３は、リモート会議への参加を許可し、情報処理装置２ａ，２ｂに対してプログラムモジュールを送信する（ステップＳ２）。

【0114】

情報処理装置２ａ，２ｂは、サーバー３によってリモート会議への参加が許可されることに伴い、参加者Ａ，Ｂを撮影するためのカメラ２１を起動し（ステップＳ３）、更にマイク２２を起動する（ステップＳ４）。そして情報処理装置２ａ，２ｂのブラウザ３０は、カメラ制御部３１を動作させてカメラ２１による画像撮影を開始する（ステップＳ５）。これに伴い、情報処理装置２ａ，２ｂのブラウザ３０は、第１参加者情報生成部３２を機能させ、参加者Ａ，Ｂを撮影した第１の撮影画像に基づいて参加者Ａ，Ｂを表した第１参加者画像を生成し、第１参加者画像を含む第１参加者情報Ｄ１をサーバー３へ送信する（ステップＳ６）。尚、情報処理装置２ａ，２ｂにおいてカメラ２１の撮影機能がオフである場合には、参加者Ａ，Ｂが撮影されないため、ブラウザ３０は、予め定められている画像を第１参加者画像として使用し、その画像と参加者Ａ，Ｂの識別情報とを含む第１参加者情報Ｄ１をサーバー３へ送信する。

【0115】

サーバー３は、情報処理装置２ａ，２ｂから参加者Ａ，Ｂに関する第１参加者情報Ｄ１を取得すると、表示制御部１７を機能させ、参加者Ａ，Ｂに関する第１参加者情報Ｄ１を所定の表示領域に配置した会議用画面を生成し、情報処理装置２ａ，２ｂへ送信する（ステップＳ７）。このとき、サーバー３は、第１参加者情報Ｄ１から参加者Ａ，Ｂのそれぞれを表した第１参加者画像を抽出し、それらの第１参加者画像を所定の表示領域に配置する。情報処理装置２ａ，２ｂは、サーバー３から会議用画面を取得すると、その会議用画面を表示部２４に表示させる。これにより、参加者Ａ，Ｂは、互いに同じ会議用画面を閲覧しながら会議を行える状態となる。

【0116】

一方、拠点Ｐｃにおいても、リモート会議に直接参加する参加者Ｃが自身の情報処理装置２ｃを操作することによってブラウザ３０を起動し、サーバー３から予め通知されているアドレスにアクセスする（ステップＳ９）。このとき、ブラウザ３０は、参加者Ｃを識別するための識別情報を含む第１参加者情報Ｄ１をサーバー３に送信する。サーバー３は、情報処理装置２ｃからのアクセスを検知すると、参加者Ｃの識別情報に基づき予約情報に登録されている参加者であるか否かを認証する。その結果、認証に成功すると、サーバー３は、リモート会議への参加を許可し、情報処理装置２ｃに対してプログラムモジュールを送信する（ステップＳ１０）。

【0117】

情報処理装置２ｃは、サーバー３によってリモート会議への参加が許可されることに伴い、参加者Ｃを撮影するためのカメラ２１を起動し（ステップＳ１１）、更にマイク２２を起動する（ステップＳ１２）。そして情報処理装置２ｃのブラウザ３０は、カメラ制御部３１を動作させてカメラ２１による画像撮影を開始する（ステップＳ１３）。これに伴い、情報処理装置２ｃのブラウザ３０は、第１参加者情報生成部３２を機能させ、参加者Ｃを撮影した第１の撮影画像に基づいて参加者Ｃを表した第１参加者画像を生成し、第１参加者画像を含む第１参加者情報Ｄ１をサーバー３へ送信する（ステップＳ１４）。尚、情報処理装置２ｃにおいてカメラ２１の撮影機能がオフである場合には、参加者Ｃが撮影されないため、ブラウザ３０は、予め定められている画像を第１参加者画像として使用し、その画像と参加者Ｃの識別情報とを含む第１参加者情報Ｄ１をサーバー３へ送信する。

【0118】

サーバー３は、情報処理装置２ｃから参加者Ｃに関する第１参加者情報Ｄ１を取得すると、表示制御部１７を機能させ、参加者Ｃに関する第１参加者情報Ｄ１を所定の表示領域に配置した会議用画面を生成し、情報処理装置２ａ，２ｂ，２ｃへ送信する（ステップＳ１５）。このとき、サーバー３は、第１参加者情報Ｄ１から参加者Ｃを表した第１参加者画像を抽出し、その第１参加者画像を所定の表示領域に配置する。情報処理装置２ａ，２ｂは、サーバー３において参加者Ｃに関する情報が追加された会議用画面を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ１６）。また、情報処理装置２ｃは、サーバー３から会議用画面を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ１７）。これにより、参加者Ａ，Ｂ，Ｃは、互いに同じ会議用画面を閲覧しながら会議を行える状態となる。

【0119】

図６は、上記のようにして情報処理装置２ａ，２ｂ，２ｃの表示部２４に表示される会議用画面Ｇ１の一例を示す図である。この会議用画面Ｇ１は、会議に用いる資料などを表示する資料表示領域Ｒ１と、情報処理装置２ａ，２ｂ，２ｃを使用している参加者Ａ，Ｂ，Ｃが操作可能なアイコン表示領域Ｒ２と、第１参加者情報Ｄ１及び第２参加者情報Ｄ２に基づく情報を表示する参加者表示領域Ｒ３とを有している。

【0120】

資料表示領域Ｒ１には、複数の情報処理装置２ａ，２ｂ，２ｃのうちの少なくとも１つにおいて共有閲覧することが指定された資料画像が表示される。例えば、参加者Ａが自身の情報処理装置２ａを操作して資料画像の共有を指定すると、情報処理装置２ａからサーバー３に資料画像が送信される。サーバー３は、情報処理装置２ａから資料画像を取得すると、会議用画面提供部１２を機能させ、資料画像を資料表示領域Ｒ１に配置した会議用画面Ｇ１を生成し、各情報処理装置２ａ，２ｂ，２ｃへ配信する。これにより、各情報処理装置２ａ，２ｂ，２ｃにおいて表示される会議用画面Ｇ１の資料表示領域Ｒ１には、参加者Ａが指定した資料画像が表示されるようになる。

【0121】

アイコン表示領域Ｒ２には、情報処理装置２ａ，２ｂ，２ｃを使用している参加者Ａ，Ｂ，Ｃが操作可能な複数のアイコン５１～５５が表示される。例えば、参加者Ａ，Ｂ，Ｃは、これらのアイコン５１～５５に対する操作を行うことにより、カメラ２１のオンオフ切り替えや、マイク２２のオンオフ切り替え、挙手ジェスチャなどを行うことができる。

【0122】

参加者表示領域Ｒ３には、リモート会議に参加する参加者に関する情報が一覧表示される。図６の例では、参加者表示領域Ｒ３に、リモート会議に直接参加する参加者Ａ，Ｂ，Ｃのそれぞれを表した第１参加者画像６１が表示されている。サーバー３の表示制御部１７は、情報処理装置２ａ，２ｂ，２ｃから取得した第１参加者画像を参加者表示領域Ｒ３に配置する際、参加者Ａ，Ｂ，Ｃの名前を付加する。その結果、各情報処理装置２ａ，２ｂ，２ｃにおいて表示される会議用画面Ｇ１の参加者表示領域Ｒ３には、参加者Ａ，Ｂ，Ｃのそれぞれに対応する第１参加者画像６１と共に、参加者Ａ，Ｂ，Ｃの名前が表示される。したがって、各拠点Ｐａ，Ｐｂ，Ｐｃでリモート会議に参加する参加者Ａ，Ｂ，Ｃは、誰がリモート会議に参加しているかを把握することができる。

【0123】

次に、図７は、本実施形態における会議システム１の動作を示す第２のフローチャートである。この第２のフローチャートでは、参加者Ａ，Ｂ，Ｃがサーバー３にログインしている状態でリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆを参加者として追加表示する流れを示している。拠点Ｐｃの会議室でリモート会議に直接参加する参加者Ｃは、自身の情報処理装置２ｃを操作することによって連携アプリケーション４０を起動する（ステップＳ２０）。すると、連携アプリケーション４０は、機器接続部２６に接続されているカメラ６を起動し（ステップＳ２１）、更にマイク８ｄ，８ｅ，８ｆを起動する（ステップＳ２２）。そして連携アプリケーション４０は、カメラ制御部４１を機能させ、カメラ６による画像撮影を開始する（ステップＳ２３）。これにより、情報処理装置２ｃは、リモート会議に間接的に参加しようとしている参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像を取得する。

【0124】

カメラ６による画像撮影が開始されると、連携アプリケーション４０は、第２参加者情報生成部４２を機能させる。第２参加者情報生成部４２は、カメラ６から得られる第２の撮影画像に対して顔検出処理を行い、第２の撮影画像から顔画像を抽出する（ステップＳ２４）。図８は、顔検出処理の一例を示す図である。例えば図８（ａ）に示すように、拠点Ｐｃのカメラ６によって撮影される撮影画像Ｇ２０には、参加者Ｄ，Ｅ，Ｆの三人の画像が含まれる。第２参加者情報生成部４２は、そのような撮影画像Ｇ２０に対して顔検出処理を行うことにより、図８（ｂ）に示すように撮影画像Ｇ２０から参加者Ｄ，Ｅ，Ｆそれぞれの顔画像Ｇ２１，Ｇ２２，Ｇ２３を抽出する。第２参加者情報生成部４２は、顔検出処理によって顔画像Ｇ２１，Ｇ２２，Ｇ２３を抽出すると、それらの顔画像Ｇ２１，Ｇ２２，Ｇ２３を特定対象情報としてサーバー３へ送信し、サーバー３の特定部１４に第２の参加者を特定する処理を行わせる。

【0125】

サーバー３は、情報処理装置２ｃから顔画像を取得すると、特定部１４を機能させ、データベース４を検索して第２の参加者を特定するための参加者特定処理を実行する（ステップＳ２５）。この参加者特定処理により、顔画像Ｇ２１，Ｇ２２，Ｇ２３のそれぞれが参加者Ｄ，Ｅ，Ｆに対応する画像であることが特定される。そして特定部１４によって第２の参加者が特定されると、サーバー３は、その特定結果を情報処理装置２ｃへ送信する。これにより、情報処理装置２ｃは、参加者Ｃと共に会議室に同席している参加者Ｄ，Ｅ，Ｆが誰であるかを自動的に特定することができる。この場合、情報処理装置２ｃは、参加者Ｃに、参加者Ｄ，Ｅ，Ｆに関する識別情報の入力操作を行わせる必要がない。

【0126】

尚、サーバー３は、情報処理装置２ｃから取得した顔画像に基づいて参加者Ｄ，Ｅ，Ｆを特定すると、それら参加者Ｄ，Ｅ，Ｆがリモート会議の予約情報に登録されている参加者であるか否かを認証し、その認証に成功することを条件として、特定結果を情報処理装置２ｃへ送信することが好ましい。また、認証に失敗した場合、サーバー３は、リモート会議の参加者として登録されていないことを情報処理装置２ｃへ通知することが好ましい。

【0127】

また、情報処理装置２ｃにおいてカメラ６の撮影機能がオフである場合には、参加者Ｄ，Ｅ，Ｆが撮影されないため、第２参加者情報生成部４２は、例えば参加者Ｃによって指定された画像を、参加者Ｄ，Ｅ，Ｆのそれぞれを表した第２参加者画像として使用する。例えば、第２参加者情報生成部４２は、参加者Ｃに、参加者Ｄ，Ｅ，Ｆに関する識別情報の入力操作を行わせ、第２参加者画像と参加者Ｃによって入力された識別情報とを含む第１参加者情報Ｄ１をサーバー３へ送信する。これにより、サーバー３は、参加者Ｃによって入力された識別情報に基づいて参加者Ｄ，Ｅ，Ｆを特定することができるようになる。そしてサーバー３は、参加者Ｄ，Ｅ，Ｆがリモート会議の予約情報に登録されている参加者であるか否かを認証することができる。

【0128】

カメラ６の撮影機能がオンである場合、情報処理装置２ｃは、参加者Ｄ，Ｅ，Ｆを特定することができると、続いてカメラ６によって撮影された第２の撮影画像に基づいて参加者Ｄ，Ｅ，Ｆのそれぞれを表した第２参加者画像を生成し、第２参加者画像と識別情報とを含む第２参加者情報Ｄ２をサーバー３へ送信する（ステップＳ２６）。このとき、第２参加者情報生成部４２は、例えば、第２の撮影画像Ｇ２０から抽出した参加者Ｄ，Ｅ，Ｆそれぞれの顔画像Ｇ２１，Ｇ２２，Ｇ２３を、第２参加者画像として使用する。また、第２参加者情報生成部４２は、参加者Ｄ，Ｅ，Ｆのそれぞれを表した第２参加者画像をサーバー３へ送信するとき、参加者Ｄ，Ｅ，Ｆのそれぞれの名前を付加して送信する。これにより、サーバー３は、情報処理装置２ｃから受信する第２参加者画像と参加者の名前とを対応付けることができる。

【0129】

サーバー３は、情報処理装置２ｃから参加者Ｄ，Ｅ，Ｆのそれぞれに対応する第２参加者画像を取得すると、それらの第２参加者画像を、参加者Ａ，Ｂ，Ｃに関する第１参加者画像と共に参加者表示領域Ｒ３に配置することによって会議用画面を更新し、その更新した会議用画面を情報処理装置２ａ，２ｂ，２ｃへ送信する（ステップＳ２７）。情報処理装置２ａ，２ｂは、サーバー３から更新された会議用画面を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ２８）。また、情報処理装置２ｃも、サーバー３から会議用画面を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ２９）。これにより、拠点Ｐｃとは異なる拠点Ｐａ，Ｐｂでリモート会議に参加している参加者Ａ，Ｂは、リモート会議に参加者Ｄ，Ｅ，Ｆが参加したことを把握することができるようになる。

【0130】

図９は、第２の参加者が追加表示された会議用画面Ｇ２の一例を示す図である。この会議用画面Ｇ２の参加者表示領域Ｒ３には、リモート会議に直接参加する参加者Ａ，Ｂ，Ｃのそれぞれを表した第１参加者画像６１と、リモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆのそれぞれを表した第２参加者画像６２とが表示されている。サーバー３の表示制御部１７は、情報処理装置２ｃから取得する第２参加者画像を参加者表示領域Ｒ３に配置する際、参加者Ｄ，Ｅ，Ｆの名前を付加する。その結果、各情報処理装置２ａ，２ｂ，２ｃにおいて表示される会議用画面Ｇ１の参加者表示領域Ｒ３には、参加者Ｄ，Ｅ，Ｆに対応する画像と共に、参加者Ｄ，Ｅ，Ｆの名前が表示される。したがって、拠点Ｐｃとは異なる拠点Ｐａ，Ｐｂでリモート会議に参加している参加者Ａ，Ｂは、参加者Ｄ，Ｅ，Ｆもリモート会議に参加したことを把握することができる。

【0131】

このように本実施形態の会議システム１は、リモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆのそれぞれに対応する画像を、情報処理装置２を使用してリモート会議に直接参加する参加者Ａ，Ｂ，Ｃの画像と同様に会議用画面に取り込んで各拠点Ｐａ，Ｐｂ，Ｐｃの情報処理装置２に表示させることが可能である。それ故、拠点Ｐｃの会議室とは異なる拠点Ｐａ，Ｐｂでリモート会議に直接参加する参加者Ａ，Ｂは、他の拠点Ｐｃでリモート会議に直接参加する参加者Ｃだけでなく、参加者Ｄ，Ｅ，Ｆもリモート会議に参加していることを把握できるため、参加者全員でリモート会議を円滑に行うことができるようになる。

【0132】

次に、図１０は、本実施形態における会議システム１の動作を示す第３のフローチャートである。第３のフローチャートでは、拠点Ｐｃの会議室においてリモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆを発言者として検知する流れを示している。例えば、サーバー３は、情報処理装置２ａから音声情報を取得すると、音声情報の入力元が情報処理装置２ａであることから参加者Ａが発言者であることを特定することが可能であり、また、情報処理装置２ｂから音声情報を取得すると、音声情報の入力元が情報処理装置２ｂであることから参加者Ｂが発言者であることを特定することが可能である。これに対し、情報処理装置２ｃから音声情報を取得した場合、サーバー３は、音声情報の入力元が情報処理装置２ｃであることを検出しても参加者Ｃ，Ｄ，Ｅ，Ｆのうちのいずれが発言者であるかを正確に特定することができない。そのため、本実施形態の会議システム１は、図１０に示す第３のフローチャートに基づく処理を行うことで、サーバー３が発言者を特定できるようにしている。尚、図１０に示す第３のフローチャートでは、カメラ６で得られる第２の撮影画像を解析することによって発言者を検知するため、カメラ６の撮影機能がオンであることが前提である。

【0133】

第２のフローチャートまでの流れで参加者Ａ，Ｂ，Ｃ，Ｄ，Ｅ，Ｆが参加してリモート会議が開始されると、情報処理装置２ｃは、連携アプリケーション４０の画像解析部４３を機能させる。画像解析部４３は、連携アプリケーション４０の起動時に、発言者検知部４４を動作させ、動画像として逐次生成される第２参加者画像に対する画像解析を継続的に行う（ステップＳ３０）。すなわち、参加者Ｄ，Ｅ，Ｆがリモート会議に参加することに伴い、発言者検知部４４は、第２参加者画像に基づいて参加者Ｄ，Ｅ，Ｆの口元の動きを解析する処理を継続的に行い、発言者であるか否かを常時判別する。その結果、発言者検知部４４によって発言者が検知されると、情報処理装置２ｃは、サーバー３に対して発言者を検知したことを通知する（ステップＳ３１）。このとき、情報処理装置２ｃは、参加者Ｄ，Ｅ，Ｆのうちのいずれが発言者であるかを識別可能な識別情報を付加して通知する。

【0134】

また、情報処理装置２ｃは、発言者検知部４４によって発言者が検知されると、音声取得部４６の音声切替部４７を機能させる。そして音声切替部４７は、複数のマイク８ｄ，８ｅ，８ｆのうち、発言者検知部４４によって発言者であると検知された第２の参加者の近傍に設置されているマイクの電源をオンにし、他のマイクの電源をオフに切り替える（ステップＳ３２）。このとき、情報処理装置２ｃは、装置本体のマイク２２の電源もオフに切り替えるようにしても良い。

【0135】

サーバー３は、情報処理装置２ｃから音声情報を取得しているときに、情報処理装置２ｃから参加者Ｄ，Ｅ，Ｆのいずれかが発言者であることが通知されると、その通知に基づいて発言者を特定する。そしてサーバー３は、会議用画面提供部１２の表示制御部１７を機能させ、会議用画面を更新する（ステップＳ３３）。すなわち、表示制御部１７は、第２の参加者の中から発言者が検知された場合、発言者として検知された第２の参加者に対応する第２参加者画像６２を参加者表示領域Ｒ３において強調表示させるのである。

【0136】

図１１は、発言者が強調表示された会議用画面Ｇ２の一例を示す図である。図１１では、参加者Ｄが発言者として検知された場合を例示している。例えば、情報処理装置２ｃから参加者Ｄが発言者であることが通知されると、サーバー３は、図１１に示すように、参加者表示領域Ｒ３に表示されている参加者Ｄに対応する第２参加者画像６２を強調表示する。図例では、参加者Ｄに対応する第２参加者画像６２の周縁部に所定色及び所定太さの画像枠６５を表示することにより、参加者Ｄに対応する第２参加者画像６２を強調表示している。ただし、強調表示の態様はこれに限られるものではない。このようにサーバー３は、情報処理装置２ｃから音声情報を取得した場合には、情報処理装置２ｃからの通知によって参加者Ｄ，Ｅ，Ｆのいずれが発言者であるかを特定し、発言者である第２の参加者に対応する第２参加者画像６２を強調表示する。

【0137】

尚、拠点Ｐｃの会議室において参加者Ｃが発言した場合には、発言者検知部４４は、参加者Ｄ，Ｅ，Ｆのうちから発言者を検知しない。この場合、情報処理装置２ｃからサーバー３に対して発言者を検知したことが通知されない。そのため、サーバー３は、情報処理装置２ｃから音声情報を取得した場合において情報処理装置２ｃから発言者を検知した通知を受信しないときには、発言者が参加者Ｂであることを特定することができる。したがって、この場合、サーバー３は、参加者Ｃに対応する第１参加者画像６１を強調表示させた状態に会議用画面を更新する。

【0138】

サーバー３は、情報処理装置２ｃからの通知に基づいて会議用画面Ｇ２を更新すると、その更新した会議用画面Ｇ２を情報処理装置２ａ，２ｂ，２ｃへ送信する。そして情報処理装置２ａ，２ｂは、サーバー３から更新された会議用画面Ｇ２を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ３４）。また、情報処理装置２ｃも、サーバー３から会議用画面Ｇ２を取得すると、その会議用画面Ｇ２を表示部２４に表示させる（ステップＳ３５）。これにより、拠点Ｐｃとは異なる拠点Ｐａ，Ｐｂでリモート会議に参加している参加者Ａ，Ｂは、リモート会議に間接的に参加している参加者Ｄが発言していることを把握することができる。

【0139】

次に、図１２は、本実施形態における会議システム１の動作を示す第４のフローチャートである。第４のフローチャートでは、拠点Ｐｃの会議室においてリモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆの挙手ジェスチャを検知する流れを示している。例えば、自身の情報処理装置２ａ，２ｂ，２ｃを使用してリモート会議に直接参加している参加者Ａ，Ｂ，Ｃは、発言を行おうとするとき、アイコン表示領域Ｒ２に表示されているアイコン５４を操作することによって他の参加者に挙手ジェスチャを示すことができる。すなわち、サーバー３は、情報処理装置２ａ，２ｂ，２ｃのいずれかにおいてアイコン５４が操作されたことを検知すると、参加者Ａ，Ｂ，Ｃのいずれが挙手ジェスチャを示したかを特定することができる。これに対し、リモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆは、そのようなアイコン操作を行うことができない。そのため、本実施形態の会議システム１は、図１２に示す第４のフローチャートに基づく処理を行うことで、サーバー３が参加者Ｄ，Ｅ，Ｆの挙手ジェスチャを検出できるようにしている。この第４のフローチャートも、カメラ６の撮影機能がオンであることが前提の処理となっている。

【0140】

第２のフローチャートまでの流れで参加者Ａ，Ｂ，Ｃ，Ｄ，Ｅ，Ｆが参加してリモート会議が開始されると、情報処理装置２ｃは、連携アプリケーション４０の画像解析部４３を機能させる。画像解析部４３は、連携アプリケーション４０の起動時に、ジェスチャ検知部４５を動作させ、動画像として逐次生成される第２参加者画像に対する画像解析を継続的に行う（ステップＳ４０）。すなわち、参加者Ｄ，Ｅ，Ｆがリモート会議に参加することに伴い、ジェスチャ検知部４５は、第２参加者画像に基づいて参加者Ｄ，Ｅ，Ｆの顔画像の周辺における手の動きを解析する処理を継続的に行い、挙手ジェスチャが行われたか否かを常時判別する。その結果、ジェスチャ検知部４５によって挙手ジェスチャが検知されると、情報処理装置２ｃは、サーバー３に対して挙手ジェスチャを検知したことを通知する（ステップＳ４１）。このとき、情報処理装置２ｃは、参加者Ｄ，Ｅ，Ｆのうちのいずれが挙手ジェスチャを行ったかを識別可能な識別情報を付加して通知する。

【0141】

サーバー３は、情報処理装置２ｃから参加者Ｄ，Ｅ，Ｆのいずれかによって挙手ジェスチャが行われたことが通知されると、その通知に基づいて挙手ジェスチャを行った参加者を特定する。そしてサーバー３は、会議用画面提供部１２の表示制御部１７を機能させ、会議用画面を更新する（ステップＳ４２）。すなわち、表示制御部１７は、挙手ジェスチャが検知された第２の参加者に対応する第２参加者画像６２を参加者表示領域Ｒ３において強調表示させるのである。

【0142】

図１３は、挙手ジェスチャを行った第２の参加者が強調表示された会議用画面Ｇ２の一例を示す図である。図１３では、参加者Ｄによる挙手ジェスチャが検知された場合を例示している。例えば、情報処理装置２ｃから参加者Ｄによる挙手ジェスチャが検知されたことが通知されると、サーバー３は、図１３に示すように、参加者表示領域Ｒ３に表示されている参加者Ｄに対応する第２参加者画像６２を強調表示する。図例では、参加者Ｄに対応する第２参加者画像６２に対し、挙手アイコン６６を付加して表示することにより、参加者Ｄに対応する第２参加者画像６２を強調表示している。ただし、強調表示の態様はこれに限られるものではない。このようにサーバー３は、リモート会議の進行中、情報処理装置２ｃからの通知によって参加者Ｄ，Ｅ，Ｆのいずれが挙手ジェスチャを行ったかを特定し、挙手ジェスチャを行った第２の参加者に対応する第２参加者画像６２を強調表示する。

【0143】

サーバー３は、情報処理装置２ｃからの通知に基づいて会議用画面Ｇ２を更新すると、その更新した会議用画面Ｇ２を情報処理装置２ａ，２ｂ，２ｃへ送信する。そして情報処理装置２ａ，２ｂは、サーバー３から更新された会議用画面Ｇ２を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ４３）。また、情報処理装置２ｃも、サーバー３から会議用画面Ｇ２を取得すると、その会議用画面Ｇ２を表示部２４に表示させる（ステップＳ４４）。これにより、拠点Ｐｃとは異なる拠点Ｐａ，Ｐｂでリモート会議に参加している参加者Ａ，Ｂは、リモート会議に間接的に参加している参加者Ｄが挙手ジェスチャを行っていることを把握することができる。

【0144】

以上のように本実施形態の会議システム１は、複数の情報処理装置２ａ，２ｂ，２ｃをサーバー３に接続してリモート会議を行う際、複数の情報処理装置２ａ，２ｂ，２ｃのそれぞれを使用してリモート会議に直接参加する参加者Ａ，Ｂ，Ｃに関する第１参加者情報Ｄ１を生成し、それら第１参加者情報Ｄ１を会議用画面の参加者表示領域Ｒ３に配置して各情報処理装置２ａ，２ｂ，２ｃに表示させることができる。また、この会議システム１は、情報処理装置２を使用してリモート会議に直接参加する参加者Ｃと共にリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆが存在する場合、それら参加者Ｄ，Ｅ，Ｆに関する第２参加者情報Ｄ２を生成し、それら第２参加者情報Ｄ２を第１参加者情報Ｄ１と同様に、会議用画面の参加者表示領域Ｒ３に配置して各情報処理装置２ａ，２ｂ，２ｃへ表示させることができる。

【0145】

したがって、本実施形態の会議システム１は、情報処理装置２ａ，２ｂ，２ｃを使用してリモート会議に直接参加する参加者Ａ，Ｂ，Ｃだけでなく、情報処理装置２を使用することなくリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆについても会議用画面において参加者として表示することが可能であり、それぞれ異なる拠点でリモート会議に参加する各参加者が他の参加者の全てを認識することができ、リモート会議を円滑に進めることができるようになる。つまり、本実施形態の会議システム１は、情報処理装置２ａ，２ｂ，２ｃを使用していない参加者Ｄ，Ｅ，Ｆをサーバー３のリモート会議プラットフォームに取り込むことが可能であり、情報処理装置２ａ，２ｂ，２ｃを使用してリモート会議に参加する参加者Ａ，Ｂ，Ｃと、情報処理装置２ａ，２ｂ，２ｃを使用することなくリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆとを同様に取り扱うことができる構成となっている。

【0146】

また、本実施形態の会議システム１は、リモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆが発言すると、参加者Ｄ，Ｅ，Ｆのうちのいずれが発言者であるかを自動検知し、発言者として検知された第２の参加者に対応する第２参加者画像を強調表示するようにしている。そのため、リモート会議に間接的に参加している参加者Ｄ，Ｅ、Ｆが発言した場合であっても、リモート会議に直接参加している参加者Ａ，Ｂ，Ｃは会議用画面を確認することで誰が発言しているかを把握することが可能である。

【0147】

本実施形態の会議システム１は、リモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆが挙手ジェスチャを行った場合、参加者Ｄ，Ｅ，Ｆのうちのいずれが挙手ジェスチャを行ったかを自動検知し、挙手ジェスチャを行った第２の参加者に対応する第２参加者画像を強調表示するようにしている。そのため、リモート会議に間接的に参加している参加者Ｄ，Ｅ、Ｆが挙手ジェスチャを行えば、リモート会議に直接参加している参加者Ａ，Ｂ，Ｃは、会議用画面を視認することによって誰が発言しようとしているかを把握することが可能である。

【0148】

ところで、上記においては、情報処理装置２ｃに接続されているカメラ６の撮影機能がオンである場合、情報処理装置２ｃがカメラ６から第２の撮影画像を取得し、情報処理装置２ｃにおいてリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆのそれぞれに対応する第２参加者情報Ｄ２を生成する例を説明した。しかし、第２参加者情報Ｄ２を生成する処理は、サーバー３で行うことも可能である。すなわち、情報処理装置２ｃのカメラ制御部４１は、カメラ６が撮影した第２の撮影画像をそのままサーバー３に送信し、サーバー３が第２の撮影画像に基づき、参加者Ｄ，Ｅ，Ｆのそれぞれに対応する第２参加者情報Ｄ２を生成するのである。この場合、上述した第２参加者情報生成部４２は、サーバー３に搭載されることになる。

【0149】

図１４は、サーバー３において参加者Ｄ，Ｅ，Ｆの第２参加者情報Ｄ２を生成するフローチャートである。すなわち、この図１４に示すフローチャートは、図７に示した第２のフローチャートに代わるフローチャートであり、例えば、参加者Ａ，Ｂ，Ｃがサーバー３にログインしている状態でリモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆを参加者として追加表示する流れを示している。

【0150】

まず、拠点Ｐｃの会議室でリモート会議に直接参加する参加者Ｃは、自身の情報処理装置２ｃを操作することによって連携アプリケーション４０を起動する（ステップＳ５０）。すると、連携アプリケーション４０は、機器接続部２６に接続されているカメラ６を起動し（ステップＳ５１）、更にマイク８ｄ，８ｅ，８ｆを起動する（ステップＳ５２）。そして連携アプリケーション４０は、カメラ制御部４１を機能させ、カメラ６による画像撮影を開始する（ステップＳ５３）。これにより、情報処理装置２ｃは、リモート会議に間接的に参加しようとしている参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像を取得する。そして連携アプリケーション４０は、カメラ６から得られる第２の撮影画像をサーバー３に送信する。

【0151】

サーバー３は、情報処理装置２ｃから第２の撮影画像を取得すると、その第２の撮影画像に対して顔検出処理を行い、第２の撮影画像から参加者Ｄ，Ｅ，Ｆの顔画像を抽出する（ステップＳ５４）。そしてサーバー３は、特定部１４を機能させ、データベース４を検索して第２の参加者を特定するための参加者特定処理を実行する（ステップＳ５５）。この参加者特定処理により、第２の撮影画像に写っている参加者Ｄ，Ｅ，Ｆのそれぞれを特定することができる。そして特定部１４によって第２の参加者が特定されると、サーバー３は、第２参加者情報生成部４２を機能させ、情報処理装置２ｃから得られる第２の撮影画像に基づき、参加者Ｄ，Ｅ，Ｆのそれぞれに対応する第２参加者情報Ｄ２を生成する（ステップＳ５６）。このとき、第２参加者情報生成部４２は、例えば、第２の撮影画像Ｇ２０から抽出した参加者Ｄ，Ｅ，Ｆそれぞれの顔画像を、第２参加者画像として使用する。また、第２参加者情報生成部４２は、参加者Ｄ，Ｅ，Ｆのそれぞれの顔画像に、参加者Ｄ，Ｅ，Ｆのそれぞれの名前を付加する。

【0152】

続いて、サーバー３は、会議用画面提供部１２の表示制御部１７を機能させ、参加者Ｄ，Ｅ，Ｆの第２参加者画像６２を、参加者Ａ，Ｂ，Ｃの第１参加者画像６１と共に、参加者表示領域Ｒ３に配置することによって会議用画面を更新し、その更新した会議用画面を情報処理装置２ａ，２ｂ，２ｃへ送信する（ステップＳ５７）。情報処理装置２ａ，２ｂは、サーバー３から更新された会議用画面を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ５８）。また、情報処理装置２ｃも、サーバー３から会議用画面を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ５９）。このとき、各情報処理装置２ａ，２ｂ，２ｃにおいて表示される会議用画面は、図９に示したものと同様である。したがって、拠点Ｐｃとは異なる拠点Ｐａ，Ｐｂでリモート会議に参加している参加者Ａ，Ｂは、リモート会議に参加者Ｄ，Ｅ，Ｆが参加したことを把握することができるようになる。

【0153】

また、上記においては、主として、情報処理装置２ｃにおいて参加者Ｄ，Ｅ，Ｆによる発言や挙手ジェスチャを検知する場合を例示した。しかし、上述した発言者検知部４４やジェスチャ検知部４５を含む画像解析部４３の機能は、サーバー３に搭載することも可能である。この場合、情報処理装置２ｃのカメラ制御部４１は、カメラ６で撮影した第２の撮影画像をそのままサーバー３に送信する。そしてサーバー３は、情報処理装置２から取得する第２の撮影画像に対して画像解析を行う。すなわち、サーバー３は、発言者検知部４４やジェスチャ検知部４５による画像解析を行い、リモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆのいずれかが発言しているか否か、或いは、挙手ジェスチャを行っているか否かを検知する。

【0154】

図１５は、サーバー３において参加者Ｄ，Ｅ，Ｆのうちから発言者を検知するフローチャートである。すなわち、この図１５に示すフローチャートは、図１０に示した第３のフローチャートに代わるフローチャートであり、サーバー３において参加者Ｄ，Ｅ，Ｆのうちのいずれかを発言者として検知する流れを示している。

【0155】

情報処理装置２ｃは、カメラ６を起動して画像撮影を開始すると、参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像をサーバー３へ送信する（ステップＳ６０）。サーバー３は、情報処理装置２ｃから第２の撮影画像を取得すると、画像解析部４３の発言者検知部４４を機能させ、情報処理装置２ｃから逐次取得する第２の撮影画像に対する画像解析を開始する（ステップＳ６１）。すなわち、サーバー３は、参加者Ｄ，Ｅ，Ｆがリモート会議に参加することに伴い、第２の撮影画像に基づいて参加者Ｄ，Ｅ，Ｆの口元の動きを解析する処理を継続的に行い、発言者であるか否かを常時判別する。その結果、発言者を検知すると、サーバー３は、情報処理装置２ｃに対して発言者を検知したことを通知する（ステップＳ６２）。このとき、サーバー３は、情報処理装置２ｃに対し、参加者Ｄ，Ｅ，Ｆのうちのいずれが発言者であるかを識別可能な識別情報を付加して通知する。

【0156】

情報処理装置２ｃは、サーバー３から発言者が通知されると、音声取得部４６の音声切替部４７を機能させる。そして音声切替部４７は、複数のマイク８ｄ，８ｅ，８ｆのうち、サーバー３において発言者であると検知された第２の参加者の近傍に設置されているマイクの電源をオンにし、他のマイクの電源をオフに切り替える（ステップＳ６３）。このとき、情報処理装置２ｃは、装置本体のマイク２２の電源もオフに切り替えるようにしても良い。

【0157】

また、サーバー３は、参加者Ｄ，Ｅ，Ｆのいずれかが発言者であることを検知すると、会議用画面提供部１２の表示制御部１７を機能させ、会議用画面を更新する（ステップＳ６４）。すなわち、表示制御部１７は、第２の参加者の中から発言者が検知された場合、発言者として検知された第２の参加者に対応する第２参加者画像を参加者表示領域Ｒ３において強調表示させる。そしてサーバー３は、更新した会議用画面Ｇ２を各情報処理装置２ａ，２ｂ，２ｃへ送信する。情報処理装置２ａ，２ｂは、サーバー３から更新された会議用画面Ｇ２を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ６５）。また、情報処理装置２ｃも、サーバー３から会議用画面Ｇ２を取得すると、その会議用画面Ｇ２を表示部２４に表示させる（ステップＳ６６）。これにより、拠点Ｐｃとは異なる拠点Ｐａ，Ｐｂでリモート会議に参加している参加者Ａ，Ｂは、リモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆのうちのいずれが発言しているかを把握することができる。

【0158】

次に図１６は、サーバー３において参加者Ｄ，Ｅ，Ｆのいずれかが挙手ジェスチャを行ったことを検知するフローチャートである。すなわち、この図１６に示すフローチャートは、図１２に示した第４のフローチャートに代わるフローチャートであり、サーバー３において参加者Ｄ，Ｅ，Ｆのうちのいずれかが挙手ジェスチャを行ったことを検知する流れを示している。

【0159】

情報処理装置２ｃは、カメラ６を起動して画像撮影を開始すると、参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像をサーバー３へ送信する（ステップＳ７０）。サーバー３は、情報処理装置２ｃから第２の撮影画像を取得すると、画像解析部４３の発言者検知部４４を機能させ、情報処理装置２ｃから逐次取得する第２の撮影画像に対する画像解析を開始する（ステップＳ７１）。すなわち、サーバー３は、参加者Ｄ，Ｅ，Ｆがリモート会議に参加することに伴い、第２の撮影画像に基づいて参加者Ｄ，Ｅ，Ｆの顔画像の周辺における手の動きを解析する処理を継続的に行い、挙手ジェスチャが行われたか否かを常時判別する。その結果、挙手ジェスチャを検知すると、サーバー３は、挙手ジェスチャを行った参加者を特定する（ステップＳ７２）。そしてサーバー３は、会議用画面提供部１２の表示制御部１７を機能させ、会議用画面を更新する（ステップＳ７３）。すなわち、表示制御部１７は、挙手ジェスチャが検知された第２の参加者に対応する第２参加者画像を参加者表示領域Ｒ３において強調表示させる。そしてサーバー３は、更新した会議用画面Ｇ２を各情報処理装置２ａ，２ｂ，２ｃへ送信する。情報処理装置２ａ，２ｂは、サーバー３から更新された会議用画面Ｇ２を取得すると、その会議用画面を表示部２４に表示させる（ステップＳ７４）。また、情報処理装置２ｃも、サーバー３から会議用画面Ｇ２を取得すると、その会議用画面Ｇ２を表示部２４に表示させる（ステップＳ７５）。これにより、拠点Ｐｃとは異なる拠点Ｐａ，Ｐｂでリモート会議に参加している参加者Ａ，Ｂは、リモート会議に間接的に参加している参加者Ｄ，Ｅ，Ｆのいずれかが挙手ジェスチャを行っていることを把握することができる。

【0160】

このように本実施形態の会議システム１は、サーバー３において、発言者や挙手ジェスチャを検知する構成を採用しても良い。

【0161】

（変形例）
以上、本発明の好ましい実施形態について説明したが、本発明は、上述した各実施形態に限定されるものではなく、種々の変形例を適用することができる。

【0162】

例えば、上記実施形態では、点Ｐｃの会議室に設置されるカメラ６が情報処理装置２ｃに接続されており、サーバー３は、情報処理装置２ｃを介してカメラ６で撮影された画像を取得する形態を説明した。しかし、カメラ６は、例えば会議室に設置されるネットワーク接続機器に接続され、ネットワーク５を介してサーバー３に対して撮影画像を直接送信するものであっても構わない。この場合、上述したカメラ制御部４１は、サーバー３に搭載される。そしてサーバー３は、ネットワーク５を介してカメラ６を直接制御することにより、参加者Ｄ，Ｅ，Ｆを撮影した第２の撮影画像を取得することができる。

【0163】

また、拠点Ｐｃの会議室に設置される複数のマイク８ｄ，８ｅ，８ｆもネットワーク５を介してサーバー３に直接接続されるものであっても構わない。この場合、上述した音声取得部４６は、サーバー３に搭載される。

【0164】

更に、拠点Ｐｃの会議室に設置される表示装置９もネットワーク５を介してサーバー３に直接接続されるものであっても構わない。この場合、サーバー３の会議用画面提供部１２は、ネットワーク５を介して表示装置９に会議用画面を直接送信することで会議室に設置されているスクリーン７に会議用画面を表示させることができる。

【0165】

また、上記実施形態では、カメラ２１及びカメラ６の撮影機能がオンである場合、第１の撮影画像及び第２の撮影画像のそれぞれから抽出した参加者Ａ，Ｂ，Ｃ，Ｄ，Ｅ，Ｆの顔画像に対して名前を付して会議用画面の参加者表示領域Ｒ３に表示させる例を説明した。しかし、各参加者Ａ，Ｂ，Ｃ，Ｄ，Ｅ，Ｆの顔画像が表示されるのであれば、各参加者の名前を付して表示することは必須ではない。なぜなら、名前が表示されていなくても、各参加者は、会議用画面において表示される顔画像を視認することにより、他の参加者を把握することができるからである。

【0166】

その一方、カメラ２１又はカメラ６の撮影機能がオフであり、各参加者の顔画像が参加者表示領域Ｒ３に表示されないのであれば、上述したように第１参加者画像６１及び第２参加者画像６２のそれぞれに各参加者の名前を付して表示することが好ましい。すなわち、第１参加者画像６１や第２参加者画像６２は、単に人物像を形取ったシルエット画像などである場合があり、そのような画像だけでは参加者を把握することが困難であることから、名前を付して表示することが好ましい。尚、カメラ２１又はカメラ６の撮影機能がオフである場合、第１参加者画像６１や第２参加者画像６２を参加者表示領域Ｒ３には表示せず、各参加者の名前だけを参加者表示領域Ｒ３に表示する態様であっても構わない。

【0167】

また、上記実施形態では、一例として、はじめに第１参加者画像を参加者表示領域Ｒ３に表示した会議用画面を作成し、その後に、第２参加者画像を参加者表示領域Ｒ３に表示した会議用画面を作成する例を説明した。しかし、第１参加者画像及び第２参加者画像を含む会議用画面を作成する際には、必ずしも上述した２段階の処理を行う必要はない。例えば、情報処理装置２ｃが参加者Ｃに関する第１参加者情報Ｄ１と参加者Ｄ，Ｅ，Ｆに関する第２参加者情報Ｄ２とを同時にサーバー３へ送信した場合、サーバー３は、第１の参加者と第２の参加者との双方を含む会議用画面を作成し、その会議用画面を情報処理装置２ａ，２ｂ，２ｃへ送信する。これにより、情報処理装置２ｃは、１段階の処理で第１の参加者と第２の参加者との双方を含む会議用画面を表示することができる。

【0168】

また、上記実施形態では、第１の参加者が発言した場合と第２の参加者が発言した場合とで異なる処理を行う場合を例示した。しかし、これに限られるものではなく、第１の参加者が発言した場合と第２の参加者が発言した場合とで共通の処理を行うように構成することも可能である。例えば、情報処理装置２ａ，２ｂ，２ｃがマイク２２によって第１の参加者による発言を検知した場合、情報処理装置２ａ，２ｂ，２ｃは、第１の参加者が発言したことを示す情報を第１参加者情報Ｄ１に付加してサーバー３へ送信する。サーバー３は、その第１参加者情報Ｄ１に含まれる情報に基づき、第１の参加者が発言したことを検知できる。その結果、サーバー３は、発言した第１の参加者に対応する第１参加者画像６１を強調表示することができる。

【0169】

一方、情報処理装置２ｃが第２の撮影画像を解析することによって第２の参加者が発言したことを検知した場合、情報処理装置２ｃは、第２の参加者が発言したことを示す情報を第２参加者情報Ｄ２に付加してサーバー３へ送信する。サーバー３は、その第２参加者情報Ｄ２に含まれる情報に基づき、第２の参加者が発言したことを検知できる。その結果、サーバー３は、発言した第２の参加者に対応する第２参加者画像６２を強調表示することができる。

【0170】

このように第１の参加者が発言した場合と第２の参加者が発言した場合とで共通の処理を行う構成とすれば、サーバー３は、第１の参加者と第２の参加者のいずれが発言した場合であっても共通の処理を適用して会議用画面に反映させることができるため、第１の参加者と第２の参加者に対して共通の処理プログラムを適用できるという利点がある。

【0171】

また、上記実施形態では、第１の参加者による挙手ジェスチャを行った場合と第２の参加者が挙手ジェスチャを行った場合とで異なる処理を行う場合を例示した。しかし、これに限られるものではなく、第１の参加者が挙手ジェスチャを行った場合と第２の参加者が挙手ジェスチャを行った場合とで共通の処理を行うように構成することも可能である。例えば、情報処理装置２ａ，２ｂ，２ｃが会議用画面に対する挙手操作を検知した場合、情報処理装置２ａ，２ｂ，２ｃは、第１の参加者が挙手ジェスチャを行ったことを示す情報を第１参加者情報Ｄ１に付加してサーバー３へ送信する。サーバー３は、その第１参加者情報Ｄ１に含まれる情報に基づき、第１の参加者が挙手ジェスチャを行った検知できる。その結果、サーバー３は、挙手ジェスチャを行った第１の参加者に対応する第１参加者画像６１を強調表示することができる。

【0172】

一方、情報処理装置２ｃが第２の撮影画像を解析することによって第２の参加者が挙手ジェスチャを行ったことを検知した場合、情報処理装置２ｃは、第２の参加者が挙手ジェスチャを行ったことを示す情報を第２参加者情報Ｄ２に付加してサーバー３へ送信する。サーバー３は、その第２参加者情報Ｄ２に含まれる情報に基づき、第２の参加者が挙手ジェスチャを行ったことを検知できる。その結果、サーバー３は、挙手ジェスチャを行った第２の参加者に対応する第２参加者画像６２を強調表示することができる。

【0173】

このように第２の参加者が挙手ジェスチャを行った場合と第２の参加者が挙手ジェスチャを行った場合とで共通の処理を行う構成とすれば、サーバー３は、第１の参加者と第２の参加者のいずれが挙手ジェスチャを行った場合であっても共通の処理を適用して会議用画面に反映させることができるため、第１の参加者と第２の参加者に対して共通の処理プログラムを適用できるという利点がある。

【0174】

また、上記実施形態では、第２の撮影画像に含まれる参加者Ｄ，Ｅ，Ｆの顔画像を判定することにより、発言者を検知する例を説明した。しかし、発言者を検知する手法は、必ずしも画像解析によるものに限られない。例えば、複数のマイク８ｄ，８ｅ，８ｆのうちのいずれか１つにおいて所定レベル以上の音声入力を検知した場合、その１つのマイクの近傍に位置する参加者を発言者として特定するものであっても構わない。

【0175】

また、上記実施形態では、リモート会議に間接的に参加する参加者Ｄ，Ｅ，Ｆのそれぞれに割り当てられる複数のマイク８ｄ，８ｅ，８ｆを備える会議システム１を例示した。しかし、それら複数のマイク８ｄ，８ｅ，８ｆは、本実施形態の会議システム１にとって必須のものではない。

【符号の説明】

【0176】

１ 会議システム
２（２ａ，２ｂ，２ｃ） 情報処理装置
３ サーバー
４ データベース
５ ネットワーク
６ カメラ（第２の撮影手段）
８ａ，８ｂ，８ｃ マイク（音声入力手段）
１２ 会議用画面提供部
１３ 音声処理部
１４ 特定部（特定手段）
１５ 第１参加者情報取得部（第１参加者情報取得手段）
１６ 第２参加者情報取得部（第２参加者情報取得手段）
１７ 表示制御部（表示制御手段）
２１ カメラ（第１の撮影手段）
２４ 表示部（表示手段）
３０ ブラウザ
３１ カメラ制御部（第１撮影制御手段）
４１ カメラ制御部（第２撮影制御手段）
３２ 第１参加者画像生成部（第１参加者画像生成手段）
４２ 第２参加者画像生成部（第２参加者画像生成手段）
４３ 画像解析部
４４ 発言者検知部（発言者検知手段）
４５ ジェスチャ検知部（ジェスチャ検知手段）
４６ 音声取得部
４７ 音声切替部（音声切替手段）

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】