特表 2023-544483 持続的共存グループビデオ会議システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2023-10-24

(54)【発明の名称】持続的共存グループビデオ会議システム

(51)【国際特許分類】

   H04N 7/15 20060101AFI20231017BHJP

   H04L 67/2869 20220101ALI20231017BHJP

【ＦＩ】

H04N7/15

H04L67/2869

【審査請求】未請求

【予備審査請求】未請求

(21)【出願番号】P 2023512118

(86)(22)【出願日】2021-08-26

(85)【翻訳文提出日】2023-04-13

(86)【国際出願番号】 US2021047702

(87)【国際公開番号】W WO2022055715

(87)【国際公開日】2022-03-17

(31)【優先権主張番号】63/076,307

(32)【優先日】2020-09-09

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】17/354,544

(32)【優先日】2021-06-22

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＨＤＭＩ

２．ＢＬＵＥＴＯＯＴＨ

(71)【出願人】

【識別番号】508178054

【氏名又は名称】メタ プラットフォームズ， インク．

(74)【代理人】

【識別番号】110002974

【氏名又は名称】弁理士法人Ｗｏｒｌｄ ＩＰ

(72)【発明者】

【氏名】パパヴァ， イローナ

(72)【発明者】

【氏名】セレクマン， アリエ

(72)【発明者】

【氏名】シアラー， ニコラス ジョン

(72)【発明者】

【氏名】セラギア， アンドレア

【テーマコード（参考）】

5C164

【Ｆターム（参考）】

5C164FA10

5C164UB94S

5C164VA07P

5C164VA09S

5C164VA19P

5C164VA35S

(57)【要約】

複数の人とともにオンライン会議室に接続するためのシステムが開示される。第１のユーザの第１のクライアントデバイスが、オンライン会議室への接続を開始する。接続が開始された後に、第１のクライアントデバイスは、オンライン会議室に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信し始める。オンライン会議室に接続されている間に、第１のクライアントデバイスは、オンライン会議に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示する。第１のユーザとの会話を始める要求を第２のユーザから受信すると、第１のクライアントデバイスは、第２のユーザのクライアントデバイスから受信されたオーディオデータに基づいて、オーディオストリームを再生する。
【選択図】図６

【特許請求の範囲】

【請求項1】

第１のユーザに関連付けられた第１のクライアントデバイスにおいて、
オンライン会議室への接続を開始することと、
前記オンライン会議室に同じく接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信することであって、前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスが、第２のユーザに関連付けられた第２のクライアントデバイスを含む、ビデオデータおよびオーディオデータを受信することと、
前記オンライン会議室に接続されたことに応答して、前記オンライン会議に接続された前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスからの前記受信されたビデオデータに基づいて、ビデオストリームを表示することと、
前記オンライン会議室に接続された前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスから前記ビデオデータおよびオーディオデータを受信している間に、前記１つまたは複数のクライアントデバイスのうちの前記第２のクライアントデバイスから、前記第１のユーザとの会話を始める要求を受信することと、
前記要求を受信したことに応答して、前記第２のクライアントデバイスから受信された前記オーディオデータに基づいて、オーディオストリームを再生することと、を含む、
方法。

【請求項2】

前記オンライン会議に接続された前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスからの前記受信されたビデオデータに基づいて、前記ビデオストリームを表示することは、
前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザについて、
前記他のユーザのそれぞれのクライアントデバイスから受信された前記ビデオデータ中の人物のプレゼンスを検出することと、
前記他のユーザの前記それぞれのクライアントデバイスから受信された前記ビデオデータ中の前記人物の前記プレゼンスを検出したことに応答して、前記他のユーザの前記それぞれのクライアントデバイスから受信された前記ビデオデータに基づいて、前記他のユーザに対応するビデオフィードを表示することと、を含む、請求項１に記載の方法。

【請求項3】

前記オンライン会議に接続された前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスからの前記受信されたビデオデータに基づいて、前記ビデオストリームを表示することは、
前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザについて、
前記他のユーザの前記それぞれのクライアントデバイスから受信された前記ビデオデータ中の前記人物の前記プレゼンスを検出しなかったことに応答して、前記他のユーザが離れているという指示を表示することをさらに含む、請求項２に記載の方法。

【請求項4】

前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザについて、
前記他のユーザと前記第１のユーザとの間の会話ステータスに基づいて、前記他のユーザに対応するオーディオフィードを再生すべきかどうかを決定することをさらに含む、請求項１から３のいずれか一項に記載の方法。

【請求項5】

前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザについて、
前記他のユーザと前記第１のユーザとの間の会話ステータスに基づいて、前記他のユーザに対応する減衰係数を割り当てることと、
前記割り当てられた減衰係数に基づいて、前記他のユーザに対応するオーディオフィードを減衰させることと、
前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザに対応する前記減衰されたオーディオフィードを組み合わせることと、
前記組み合わされた減衰されたオーディオフィードを再生することと、をさらに含む、請求項１から３のいずれか一項に記載の方法。

【請求項6】

前記他のユーザと前記第１のユーザとの間の会話ステータスに基づいて、前記他のユーザに対応する減衰係数を決定することは、
前記他のユーザが前記第１のユーザとのアクティブ会話中でないとき、前記減衰係数に０の値を割り当てることと、
前記他のユーザが前記第１のユーザとのアクティブ会話中であるとき、前記減衰係数に１の値を割り当てることと、を含む、請求項５に記載の方法。

【請求項7】

前記オンライン会議室への前記接続を開始することは、
予め設定された時間に前記オンライン会議室に自動的に接続することを含む、請求項１から６のいずれか一項に記載の方法。

【請求項8】

前記オンライン会議室に接続された前記１人または複数の他のユーザが、第３のユーザおよび第４のユーザを含むかどうかにかかわらず、前記方法は、
前記第３のユーザが前記第４のユーザとのアクティブ会話中であるという指示を受信したことに応答して、
前記第３のユーザが前記第４のユーザとの前記アクティブ会話中であるという前記指示を表示することと、
前記第４のユーザが前記第３のユーザとの前記アクティブ会話中であるという指示を表示することと、をさらに含み、好ましくは、
前記第１のユーザが前記第３のユーザまたは前記第４のユーザとのアクティブ会話中でないと決定したことに応答して、
前記第３のユーザおよび前記第４のユーザに対応するオーディオフィードをミュートすることをさらに含み、好ましくは、
前記第３のユーザと前記第４のユーザとの間の前記会話に参加するための指示を受信することと、
前記第３のユーザと前記第４のユーザとの間の前記会話に参加するための前記指示を受信したことに応答して、
前記第３のユーザの前記クライアントデバイスおよび前記第４のユーザの前記クライアントデバイスに、前記会話に参加する要求を送ることと、
前記第３のユーザの前記クライアントデバイスおよび前記第４のユーザの前記クライアントデバイスから受信された前記オーディオデータに基づいて、オーディオストリームを再生することと、をさらに含む、請求項１から７のいずれか一項に記載の方法。

【請求項9】

オンライン会議室に接続された複数のクライアントデバイスからデータストリームを受信することであって、（ｉ）前記複数のクライアントデバイスが複数のユーザに関連付けられ、（ｉｉ）前記データストリームがオーディオデータおよびステータスデータを含み、（ｉｉｉ）前記ステータスデータが、対応するユーザが前記オンライン会議室に接続された別のユーザとのアクティブ会話中であるかどうかを示す、データストリームを受信することと、
前記複数のクライアントデバイスの各クライアントデバイスについて、前記ユーザの前記データストリームに含まれる前記ステータスデータに基づいて、対応するユーザが前記オンライン会議室に接続された別のユーザとのアクティブ会話中であるかどうかを決定することと、
前記複数のユーザのうちの第１のユーザが、前記複数のユーザのうちの第２のユーザとのアクティブ会話中であると決定したことに応答して、
前記第１のユーザが前記第２のユーザとのアクティブ会話中であるという指示を表示することと、
前記第２のユーザが前記第１のユーザとのアクティブ会話中であるという指示を表示することと、
前記第１のユーザと前記第２のユーザとの間の前記会話に参加するための指示を受信することと、
前記第１のユーザと前記第２のユーザとの間の前記会話に参加するための前記指示を受信したことに応答して、
前記第１のユーザのクライアントデバイスおよび前記第２のユーザのクライアントデバイスに、前記会話に参加する要求を送ることと、
前記第１のユーザおよび前記第２のユーザに対応するオーディオストリームを再生することと、を含む、
方法。

【請求項10】

前記第１のユーザおよび前記第２のユーザに対応する前記オーディオストリームを再生することは、
前記オンライン会議室に接続された前記複数のユーザの各ユーザに減衰係数を割り当てることであって、前記第１のユーザおよび前記第２のユーザに割り当てられた前記減衰係数が非０値を有し、前記オンライン会議室に接続された前記複数のユーザのすべての他のユーザに割り当てられた前記減衰係数が０の値を有する、減衰係数を割り当てることと、
前記割り当てられた減衰係数に基づいて、前記オンライン会議室に接続された前記複数のユーザの各ユーザに対応するオーディオフィードを減衰させることと、
前記オンライン会議室に接続された前記複数のユーザの各ユーザに対応する前記減衰されたオーディオフィードを組み合わせることによってオーディオストリームを生成することと、
前記生成されたオーディオストリームを再生することと、を含む、請求項９に記載の方法。

【請求項11】

前記オンライン会議室に接続された前記複数のユーザの各ユーザの前記クライアントデバイスからビデオデータを受信することと、
前記オンライン会議室に接続されたことに応答して、前記オンライン会議に接続された前記複数のユーザの各ユーザの前記クライアントデバイスからの前記受信されたビデオデータに基づいて、ビデオストリームを表示することと、をさらに含み、好ましくは、
前記オンライン会議に接続された前記複数のユーザの各ユーザのクライアントデバイスからの前記受信されたビデオデータに基づいて、前記ビデオストリームを表示することは、
前記オンライン会議室に接続された前記複数のユーザの各ユーザについて、
前記ユーザの前記クライアントデバイスから受信された前記ビデオデータ中の人物のプレゼンスを検出することと、
前記ユーザの前記クライアントデバイスから受信された前記ビデオデータ中の人物の前記プレゼンスを検出したことに応答して、前記ユーザの前記クライアントデバイスから受信された前記ビデオデータに基づいて、前記ユーザに対応するビデオフィードを表示することと、を含み、好ましくは、
前記オンライン会議に接続された前記複数のユーザの各ユーザのクライアントデバイスからの前記受信されたビデオデータに基づいて、前記ビデオストリームを表示することは、
前記オンライン会議室に接続された前記複数のユーザの各ユーザについて、
前記ユーザの前記クライアントデバイスから受信された前記ビデオデータ中の人物の前記プレゼンスを検出しなかったことに応答して、前記ユーザが離れているという指示を表示することをさらに含む、請求項９または１０に記載の方法。

【請求項12】

第１のユーザに関連付けられた第１のクライアントデバイスの１つまたは複数のプロセッサによる実行のために構成された１つまたは複数のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つまたは複数のプログラムは、前記１つまたは複数のプロセッサによって実行されたとき、前記第１のクライアントデバイスに、
オンライン会議室への接続を開始することと、
前記オンライン会議室に同じく接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信することであって、前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスが、第２のユーザに関連付けられた第２のクライアントデバイスを含む、ビデオデータおよびオーディオデータを受信することと、
前記オンライン会議室に接続されたことに応答して、前記オンライン会議に接続された前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスからの前記受信されたビデオデータに基づいて、ビデオストリームを表示することと、
前記オンライン会議室に接続された前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスから前記ビデオデータおよびオーディオデータを受信している間に、前記１つまたは複数のクライアントデバイスのうちの前記第２のクライアントデバイスから、前記第１のユーザとの会話を始める要求を受信することと、
前記要求を受信したことに応答して、前記第２のクライアントデバイスから受信された前記オーディオデータに基づいて、オーディオストリームを再生することと、を行わせる、
非一時的コンピュータ可読記憶媒体。

【請求項13】

前記オンライン会議に接続された前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスからの前記受信されたビデオデータに基づいて、前記ビデオストリームを表示するようにとの命令は、前記第１のクライアントデバイスに、
前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザについて、
前記他のユーザのそれぞれのクライアントデバイスから受信された前記ビデオデータ中の人物のプレゼンスを検出することと、
前記他のユーザの前記それぞれのクライアントデバイスから受信された前記ビデオデータ中の前記人物の前記プレゼンスを検出したことに応答して、前記他のユーザの前記それぞれのクライアントデバイスから受信された前記ビデオデータに基づいて、前記他のユーザに対応するビデオフィードを表示することと、を行わせ、好ましくは、
前記オンライン会議に接続された前記１人または複数の他のユーザの前記１つまたは複数のクライアントデバイスからの前記受信されたビデオデータに基づいて、前記ビデオストリームを表示するようにとの前記命令は、前記第１のクライアントデバイスに、
前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザについて、
前記他のユーザの前記それぞれのクライアントデバイスから受信された前記ビデオデータ中の前記人物の前記プレゼンスを検出しなかったことに応答して、前記他のユーザが離れているという指示を表示することをさらに行わせる、請求項１２に記載の非一時的コンピュータ可読記憶媒体。

【請求項14】

命令は、前記第１のクライアントデバイスに、
前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザについて、
前記他のユーザと前記第１のユーザとの間の会話ステータスに基づいて、前記他のユーザに対応するオーディオフィードを再生すべきかどうかを決定することをさらに行わせる、請求項１２または１３に記載の非一時的コンピュータ可読記憶媒体。

【請求項15】

命令は、前記第１のクライアントデバイスに、
前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザについて、
前記他のユーザと前記第１のユーザとの間の会話ステータスに基づいて、前記他のユーザに対応する減衰係数を割り当てることと、
前記割り当てられた減衰係数に基づいて、前記他のユーザに対応するオーディオフィードを減衰させることと、
前記オンライン会議室に接続された前記１人または複数の他のユーザの各他のユーザに対応する前記減衰されたオーディオフィードを組み合わせることと、
前記組み合わされた減衰されたオーディオフィードを再生することと、をさらに行わせる、請求項１２または１３に記載の非一時的コンピュータ可読記憶媒体。

【発明の詳細な説明】

【背景技術】

【0001】

本開示は、一般に、オンラインビデオ会議に関し、より具体的には、オンライン会議室に接続されたユーザの仮想プレゼンスをエミュレートすることに関する。

【0002】

オンラインビデオ会議システムは、ユーザが、他の人々と遠隔で接続し、オーディオおよびビジュアル手段を使用して互いに通信することを可能にする。しかしながら、ビデオ会議システムは、現実世界の環境を効果的にエミュレートしない。例えば、ビデオ会議において、各ユーザは、キャプチャされたオーディオフィードを集中型サーバに送る。集中型サーバは、次いで、オーディオフィードを全部組み合わせて単一のオーディオストリームにし、そのオーディオストリームを、ビデオ会議に接続された各ユーザに送る。したがって、すべてのユーザが、話しているユーザ全員を聞くことができる。しかし、各ユーザは単一のオーディオストリームを受信するため、複数の人が同時に話す場合、ビデオ会議に接続されたユーザに送られるオーディオストリームは、話している両方のユーザのオーディオフィードの重ね合わせを含む。

【0003】

さらに、各ユーザに送られるオーディオストリームは、ビデオ会議に接続されたすべての他のユーザのオーディオフィードの重ね合わせを含むため、一度に１つの会話しか行うことができない。ビデオ会議に接続された２人のユーザが、それらのユーザの間で別の会話を行いたい場合、それらのユーザは、ビデオ会議から切断し、新しいセッションを始めなければならない。したがって、プロセスを非効率的にする。

【0004】

最後に、ユーザのうちの２人以上の間の会話をビデオ会議システムを介して始めることが可能になる前に、２人以上のユーザは、各々ビデオ会議システムに接続しなければならない。例えば、ユーザの各々は、合意された時間にビデオ会議システムの特定のアドレスに接続し得る。これは、会議の日時として事前計画することを必要とし、ならびに、接続を確立することが可能になる前に、ビデオ会議システムを接続するためのアドレスを各ユーザに提供しなければならない。別の例では、第１のユーザが第２のユーザを呼び出し得る。第２のユーザの通信システムは、第１のユーザが呼出しを開始したという指示を表示し、呼出しを受け付けるかどうかを第２のユーザに質問し得る。これは、第２のユーザが呼出しに応答することができるかどうかを第１のユーザが推測することを必要とする。さらに、これは、第２のユーザが、第１のユーザが呼び出しているという指示を確認し、呼出しを明示的に受け付けることを必要とする。

【0005】

これらの欠点は、人々が物理的に異なる場所に位置するときに互いに共同する場合の摩擦レベルを増加させる。したがって、物理的に異なる場所に位置するユーザが互いにより容易に共同することを可能にするために、遠隔ユーザのプレゼンスを仮想的にエミュレートするシステムを有することが有益である。

【発明の概要】

【0006】

実施形態は、複数の人とともにオンライン会議室に接続するためのシステムを含む。第１のユーザに関連付けられた第１のクライアントデバイスが、オンライン会議室への接続を開始する。接続が開始された後に、第１のクライアントデバイスは、オンライン会議室に同じく接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信し始める。１人または複数の他のユーザの１つまたは複数のクライアントデバイスは、第２のユーザに関連付けられた第２のクライアントデバイスを含む。オンライン会議室に接続されている間に、第１のクライアントデバイスは、オンライン会議に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示する。オンライン会議室に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信する間に、第２のクライアントデバイスから、第１のユーザとの会話を始める要求を受信すると、第１のクライアントデバイスは、第２のクライアントデバイスから受信されたオーディオデータに基づいて、オーディオストリームを再生する。

【0007】

いくつかの実施形態では、オンライン会議室に接続された特定のユーザに対応するビデオを表示する前に、第１のクライアントデバイスは、ユーザのそれぞれのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出する。人が検出された場合、第１のクライアントデバイスは、表示されたビデオストリームに、ユーザのそれぞれのクライアントデバイスから受信されたビデオデータを含める。逆に、人が検出されなかった場合、第１のクライアントデバイスは、ユーザが離れている状態にあるという指示を表示する。

【0008】

いくつかの実施形態では、オンライン会議室に接続された各ユーザについて、第１のクライアントデバイスは、ユーザの会話ステータスに少なくとも部分的に基づいて、ユーザに対応するオーディオフィードを再生すべきかどうかを決定する。例えば、会話ステータスが、第１のユーザが第２のユーザとのアクティブ会話中であることを示す場合、第１のクライアントデバイスは第２のユーザに対応するオーディオフィードを再生し、第２のクライアントデバイスは第１のユーザのオーディオフィードを再生する。逆に、会話ステータスが、第１のユーザが第２のユーザとのアクティブ会話中でないことを示す場合、第１のクライアントデバイスは第２のユーザに対応するオーディオフィードを再生せず、第２のクライアントデバイスは第１のユーザのオーディオフィードを再生しない。

【0009】

いくつかの実施形態では、オンライン会議室に接続された各ユーザについて、第１のクライアントデバイスは減衰係数を割り当てる。第１のクライアントデバイスは、対応するユーザの会話ステータスに基づいて減衰係数を決定する。例えば、会話ステータスが、第１のユーザが第２のユーザとのアクティブ会話中であることを示す場合、第１のクライアントデバイスは、第２のユーザの減衰係数に１（または１００％）の値を割り当てる。逆に、会話ステータスが、第１のユーザが第２のユーザとのアクティブ会話中でないことを示す場合、第１のクライアントデバイスは、第２のユーザの減衰係数に０（または０％）の値を割り当てる。第１のクライアントデバイスは、次いで、各ユーザのオーディオデータを対応する減衰係数でマルチプルし、減衰されたオーディオデータを組み合わせて出力オーディオストリームを生成する。

【0010】

本開示の第１の態様によれば、第１のユーザに関連付けられた第１のクライアントデバイスにおいて、オンライン会議室への接続を開始することと、オンライン会議室に同じく接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信することであって、１人または複数の他のユーザの１つまたは複数のクライアントデバイスが、第２のユーザに関連付けられた第２のクライアントデバイスを含む、受信することと、オンライン会議室に接続されたことに応答して、オンライン会議に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示することと、オンライン会議室に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信する間に、１つまたは複数のクライアントデバイスのうちの第２のクライアントデバイスから、第１のユーザとの会話を始める要求を受信することと、要求を受信したことに応答して、第２のクライアントデバイスから受信されたオーディオデータに基づいて、オーディオストリームを再生することとを含む、方法が提供される。

【0011】

いくつかの実施形態では、オンライン会議に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示することは、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザについて、他のユーザのそれぞれのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出することと、他のユーザのそれぞれのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出したことに応答して、他のユーザのそれぞれのクライアントデバイスから受信されたビデオデータに基づいて、他のユーザに対応するビデオフィードを表示することとを含む。

【0012】

いくつかの実施形態では、オンライン会議に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示することは、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザについて、他のユーザのそれぞれのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出しなかったことに応答して、他のユーザが離れているという指示を表示することをさらに含む。

【0013】

いくつかの実施形態では、本方法は、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザについて、他のユーザと第１のユーザとの間の会話ステータスに基づいて、他のユーザに対応するオーディオフィードを再生すべきかどうかを決定することをさらに含む。

【0014】

いくつかの実施形態では、本方法は、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザについて、他のユーザと第１のユーザとの間の会話ステータスに基づいて、他のユーザに対応する減衰係数を割り当てることと、割り当てられた減衰係数に基づいて、他のユーザに対応するオーディオフィードを減衰させることと、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザに対応する減衰されたオーディオフィードを組み合わせることと、組み合わされた減衰されたオーディオフィードを再生することとをさらに含む。

【0015】

いくつかの実施形態では、他のユーザと第１のユーザとの間の会話ステータスに基づいて、他のユーザに対応する減衰係数を決定することは、他のユーザが第１のユーザとのアクティブ会話中でないとき、減衰係数に０の値を割り当てることと、他のユーザが第１のユーザとのアクティブ会話中であるとき、減衰係数に１の値を割り当てることとを含む。

【0016】

いくつかの実施形態では、オンライン会議室への接続を開始することは、予め設定された時間にオンライン会議室に自動的に接続することを含む。

【0017】

いくつかの実施形態では、オンライン会議室に接続された１人または複数の他のユーザが、第３のユーザおよび第４のユーザを含むかどうかにかかわらず、本方法は、第３のユーザが第４のユーザとのアクティブ会話中であるという指示を受信したことに応答して、第３のユーザが第４のユーザとのアクティブ会話中であるという指示を表示することと、第４のユーザが第３のユーザとのアクティブ会話中であるという指示を表示することとをさらに含む。

【0018】

いくつかの実施形態では、本方法は、第１のユーザが第３のユーザまたは第４のユーザとのアクティブ会話中でないと決定したことに応答して、第３のユーザおよび第４のユーザに対応するオーディオフィードをミュートすることをさらに含む。

【0019】

いくつかの実施形態では、本方法は、第３のユーザと第４のユーザとの間の会話に参加するための指示を受信することと、第３のユーザと第４のユーザとの間の会話に参加するための指示を受信したことに応答して、第３のユーザのクライアントデバイスおよび第４のユーザのクライアントデバイスに、会話に参加する要求を送ることと、第３のユーザのクライアントデバイスおよび第４のユーザのクライアントデバイスから受信されたオーディオデータに基づいて、オーディオストリームを再生することとをさらに含む。

【0020】

本開示の第２の態様によれば、オンライン会議室に接続された複数のクライアントデバイスからデータストリームを受信することであって、（ｉ）複数のクライアントデバイスが複数のユーザに関連付けられ、（ｉｉ）データストリームがオーディオデータおよびステータスデータを含み、（ｉｉｉ）ステータスデータが、対応するユーザがオンライン会議室に接続された別のユーザとのアクティブ会話中であるかどうかを示す、受信することと、複数のクライアントデバイスの各クライアントデバイスについて、ユーザのデータストリームに含まれるステータスデータに基づいて、対応するユーザがオンライン会議室に接続された別のユーザとのアクティブ会話中であるかどうかを決定することと、複数のユーザのうちの第１のユーザが、複数のユーザのうちの第２のユーザとのアクティブ会話中であると決定したことに応答して、第１のユーザが第２のユーザとのアクティブ会話中であるという指示を表示することと、第２のユーザが第１のユーザとのアクティブ会話中であるという指示を表示することと、第１のユーザと第２のユーザとの間の会話に参加するための指示を受信することと、第１のユーザと第２のユーザとの間の会話に参加するための指示を受信したことに応答して、第１のユーザのクライアントデバイスおよび第２のユーザのクライアントデバイスに、会話に参加する要求を送ることと、第１のユーザおよび第２のユーザに対応するオーディオストリームを再生することとを含む、方法が提供される。

【0021】

いくつかの実施形態では、第１のユーザおよび第２のユーザに対応するオーディオストリームを再生することは、オンライン会議室に接続された複数のユーザの各ユーザに減衰係数を割り当てることであって、第１のユーザおよび第２のユーザに割り当てられた減衰係数が非０値を有し、オンライン会議室に接続された複数のユーザのすべての他のユーザに割り当てられた減衰係数が０の値を有する、割り当てることと、割り当てられた減衰係数に基づいて、オンライン会議室に接続された複数のユーザの各ユーザに対応するオーディオフィードを減衰させることと、オンライン会議室に接続された複数のユーザの各ユーザに対応する減衰されたオーディオフィードを組み合わせることによってオーディオストリームを生成することと、生成されたオーディオストリームを再生することとを含む。

【0022】

いくつかの実施形態では、本方法は、オンライン会議室に接続された複数のユーザの各ユーザのクライアントデバイスからビデオデータを受信することと、オンライン会議室に接続されたことに応答して、オンライン会議に接続された複数のユーザの各ユーザのクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示することとをさらに含む。

【0023】

いくつかの実施形態では、オンライン会議に接続された複数のユーザの各ユーザのクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示することは、オンライン会議室に接続された複数のユーザの各ユーザについて、ユーザのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出することと、ユーザのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出したことに応答して、ユーザのクライアントデバイスから受信されたビデオデータに基づいて、ユーザに対応するビデオフィードを表示することとを含む。

【0024】

いくつかの実施形態では、オンライン会議に接続された複数のユーザの各ユーザのクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示することは、オンライン会議室に接続された複数のユーザの各ユーザについて、ユーザのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出しなかったことに応答して、ユーザが離れているという指示を表示することをさらに含む。

【0025】

本開示の第３の態様によれば、第１のユーザに関連付けられた第１のクライアントデバイスの１つまたは複数のプロセッサによる実行のために構成された１つまたは複数のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、１つまたは複数のプログラムは、１つまたは複数のプロセッサによって実行されたとき、第１のクライアントデバイスに、オンライン会議室への接続を開始することと、オンライン会議室に同じく接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信することであって、１人または複数の他のユーザの１つまたは複数のクライアントデバイスが、第２のユーザに関連付けられた第２のクライアントデバイスを含む、受信することと、オンライン会議室に接続されたことに応答して、オンライン会議に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示することと、オンライン会議室に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからビデオデータおよびオーディオデータを受信する間に、１つまたは複数のクライアントデバイスのうちの第２のクライアントデバイスから、第１のユーザとの会話を始める要求を受信することと、要求を受信したことに応答して、第２のクライアントデバイスから受信されたオーディオデータに基づいて、オーディオストリームを再生することとを行わせる、非一時的コンピュータ可読記憶媒体が提供される。

【0026】

いくつかの実施形態では、オンライン会議に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示するようにとの命令は、第１のクライアントデバイスに、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザについて、他のユーザのそれぞれのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出することと、他のユーザのそれぞれのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出したことに応答して、他のユーザのそれぞれのクライアントデバイスから受信されたビデオデータに基づいて、他のユーザに対応するビデオフィードを表示することとを行わせる。

【0027】

いくつかの実施形態では、オンライン会議に接続された１人または複数の他のユーザの１つまたは複数のクライアントデバイスからの受信されたビデオデータに基づいて、ビデオストリームを表示するようにとの命令は、第１のクライアントデバイスに、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザについて、他のユーザのそれぞれのクライアントデバイスから受信されたビデオデータ中の人物のプレゼンスを検出しなかったことに応答して、他のユーザが離れているという指示を表示することをさらに行わせる。

【0028】

いくつかの実施形態では、命令は、第１のクライアントデバイスに、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザについて、他のユーザと第１のユーザとの間の会話ステータスに基づいて、他のユーザに対応するオーディオフィードを再生すべきかどうかを決定することをさらに行わせる。

【0029】

いくつかの実施形態では、命令は、第１のクライアントデバイスに、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザについて、他のユーザと第１のユーザとの間の会話ステータスに基づいて、他のユーザに対応する減衰係数を割り当てることと、割り当てられた減衰係数に基づいて、他のユーザに対応するオーディオフィードを減衰させることと、オンライン会議室に接続された１人または複数の他のユーザの各他のユーザに対応する減衰されたオーディオフィードを組み合わせることと、組み合わされた減衰されたオーディオフィードを再生することとをさらに行わせる。

【図面の簡単な説明】

【0030】

【図1A】一実施形態による、通信システム１２０のためのシステム環境１００のブロック図である。

【図1B】一実施形態による、通信システム１２０のブロック図である。

【図2A】一実施形態による、通信システムを使用する仮想プレゼンスビデオ会議の図である。

【図2B】一実施形態による、会議室に接続されたユーザのビデオフィードを表示するグラフィカル・ユーザ・インターフェースを示す図である。

【図3A】一実施形態による、会議室に接続された複数のユーザ間の会話を可能にするためのオーディオ出力の生成を示す図である。

【図3B】一実施形態による、会議室に接続されたユーザのオーディオ出力のタイミング図である。

【図4】一実施形態による、会議室に接続されたユーザのためのチャネルをオンまたはオフにする方法のフロー図である。

【図5A】一実施形態による、会議室に接続されたユーザとの会話を始める方法のフロー図である。

【図5B】一実施形態による、会議室に接続されたユーザとの会話を可能にする方法のフロー図である。

【図6】一実施形態による、会議室に接続されたユーザとのアクティブ会話に参加する方法のフロー図である。

【発明を実施するための形態】

【0031】

図面は、単に例示の目的で様々な実施形態を示す。当業者は、本明細書で説明される原理から逸脱することなく、本明細書で示される構造および方法の代替実施形態が使用され得ることを、以下の説明から容易に認識するであろう。

【0032】

システムアーキテクチャ
図１Ａは、一実施形態による、通信システム１２０のためのシステム環境１００のブロック図を示す。システム環境は、一実施形態によれば、オンライン会議室に接続された８人のユーザ１９０Ａ～１９０Ｈを含む。システム環境１００は、通信サーバ１０５と、１つまたは複数のクライアントデバイス１１５（例えば、クライアントデバイス１１５Ａ、１１５Ｂ）と、ネットワーク１１０とをさらに含む。代替構成では、異なるおよび／または追加の構成要素がシステム環境１００に含まれ得る。例えば、システム環境１００は、追加のクライアントデバイス１１５、追加の通信サーバ１０５、または追加の通信システム１２０を含み得る。

【0033】

一実施形態では、通信システム１２０は、スタンドアロンネットワーク対応デバイスとして動作する一体型コンピューティングデバイスを備える。別の実施形態では、通信システム１２０は、テレビもしくは他の外部ディスプレイなどの外部メディアデバイスおよび／またはオーディオ出力システムに結合するためのコンピューティングデバイスを備える。この実施形態では、通信システムは、無線インターフェースまたは有線インターフェース（例えば、ＨＤＭＩケーブル）を介して外部メディアデバイスに結合し得、そのディスプレイ、スピーカ、および入力デバイスなどの外部メディアデバイスの様々な機能を利用し得る。ここで、通信システム１２０は、特に通信システム１２０と対話するための専用ソフトウェア、ファームウェア、またはハードウェアを有さない汎用外部メディアデバイスと互換性があるように構成され得る。通信システム１２０は、図１Ｂに関連して以下でより詳細に説明される。

【0034】

各ユーザ１９０は、通信システム１２０を使用して会議室に接続する。いくつかの実施形態では、会議室に接続するために、通信デバイスは通信サーバ１０５に要求を送り、通信サーバ１０５は、会議室に接続されたユーザの各々の間の通信を容易にする。例えば、各ユーザの通信システム１２０は、一体型のカメラおよびマイクロフォンを使用してビデオデータおよびオーディオデータをキャプチャし、キャプチャされたビデオデータおよびオーディオデータを通信サーバ１０５に送る。通信サーバ１０５は、次いで、ビデオデータおよびオーディオデータを、会議室に接続された他のユーザに転送する。

【0035】

いくつかの実施形態では、通信システム１２０の各々は、予め設定された時間に特定の会議室に接続するように構成される。例えば、各通信システム１２０Ａ～１２０Ｈは、平日の午前１０時に会議室に接続するように構成される。さらに、通信システム１２０の各々は、予め設定された時間に会議室から切断するように構成される。

【0036】

クライアントデバイス１１５は、ユーザ入力を受信し、ならびにネットワーク１１０を介してデータを送信および／または受信することができる１つまたは複数のコンピューティングデバイスである。一実施形態では、クライアントデバイス１１５は、デスクトップまたはラップトップコンピュータなどの従来のコンピュータシステムである。代替的に、クライアントデバイス１１５は、携帯情報端末（ＰＤＡ）、携帯電話、スマートフォン、タブレット、モノのインターネット（ＩｏＴ）デバイス、ビデオ会議デバイス、通信システム１２０の別のインスタンス、または別の適切なデバイスなど、コンピュータ機能を有するデバイスであり得る。クライアントデバイス１１５は、ネットワーク１１０を介して通信するように構成される。一実施形態では、クライアントデバイス１１５は、音声通話、ビデオ通話、データ共有、または他の対話を可能にすることによって、クライアントデバイス１１５のユーザが通信システム１２０と対話することを可能にするアプリケーションを実行する。例えば、クライアントデバイス１１５は、ネットワーク１１０を介したクライアントデバイス１１５と通信システム１０５との間の対話を可能にするためにブラウザアプリケーションを実行する。別の実施形態では、クライアントデバイス１１５は、ＩＯＳ（登録商標）またはＡＮＤＲＯＩＤ（商標）などのクライアントデバイス１１５のネイティブ・オペレーティング・システム上で実行しているアプリケーションを介して通信システム１０５と対話する。

【0037】

通信サーバ１０５は、ネットワーク１１０を介したクライアントデバイス１１５および通信システム１２０の通信を容易にする。例えば、通信サーバ１０５は、音声通話またはビデオ通話が要求されたとき、通信システム１２０とクライアントデバイス１１５との間の接続を容易にし得る。さらに、通信サーバ１０５は、ネットワーク１１０を介して利用可能な様々な外部アプリケーションまたはサービスへの通信システム１２０のアクセスを制御し得る。一実施形態では、通信サーバ１０５は、ソフトウェアまたはファームウェアの新しいバージョンが利用可能になったとき、通信システム１２０に更新を提供し得る。他の実施形態では、通信システム１２０に起因するものとして以下で説明される様々な機能は、代わりに、全体的または部分的に通信サーバ１０５上で実行され得る。例えば、いくつかの実施形態では、様々な処理または記憶タスクが、通信システム１２０からオフロードされ、代わりに、通信サーバ１２０上で実行され得る。

【0038】

ネットワーク１１０は、有線および／または無線通信システムを使用して、ローカル・エリア・ネットワークおよび／またはワイド・エリア・ネットワークの任意の組合せを含み得る。一実施形態では、ネットワーク１１０は、標準通信技術および／またはプロトコルを使用する。例えば、ネットワーク１１０は、イーサネット、８０２．１１（ＷｉＦｉ）、ワールドワイド・インターオペラビリティ・フォー・マイクロウェーブ・アクセス（ＷｉＭＡＸ）、３Ｇ、４Ｇ、５Ｇ、符号分割多元接続（ＣＤＭＡ）、デジタル加入者回線（ＤＳＬ）、Ｂｌｕｅｔｏｏｔｈ、近距離無線通信（ＮＦＣ）、ユニバーサル・シリアル・バス（ＵＳＢ）、またはプロトコルの任意の組合せなどの技術を使用する通信リンクを含む。いくつかの実施形態では、ネットワーク１１０の通信リンクの全部または一部は、１つまたは複数の任意の適切な技法を使用して暗号化され得る。

【0039】

図１Ｂは、一実施形態による、通信システム１２０のブロック図である。通信システム１２０は、１つまたは複数のユーザ入力デバイス１２２と、マイクロフォンサブシステム１２４と、カメラサブシステム１２６と、ネットワークインターフェース１２８と、プロセッサ１３０と、記憶媒体１５０と、ディスプレイサブシステム１６０と、オーディオサブシステム１７０とを含む。他の実施形態では、通信システム１２０は、追加の、より少ない、または異なる構成要素を含み得る。

【0040】

ユーザ入力デバイス１２２は、ユーザが通信システム１２０と対話することを可能にするハードウェアを備える。ユーザ入力デバイス１２２は、例えば、タッチスクリーンインターフェース、ゲームコントローラ、キーボード、マウス、ジョイスティック、音声コマンドコントローラ、ジェスチャ認識コントローラ、遠隔制御受信機、または他の入力デバイスを含むことができる。一実施形態では、ユーザ入力デバイス１２２は、ユーザ入力デバイス１２２と物理的に別個の遠隔制御デバイスを含み得、通信システム１２０と一体化されているか、またはさもなければそれに接続され得る遠隔コントローラ受信機（例えば、赤外線（ＩＲ）または他の無線受信機）と対話する。いくつかの実施形態では、ディスプレイサブシステム１６０およびユーザ入力デバイス１２２は、タッチスクリーンインターフェースなどにおいて一体化されている。他の実施形態では、ユーザ入力は、クライアントデバイス１１５からネットワーク１１０を介して受信され得る。例えば、クライアントデバイス１１５上で実行しているアプリケーションは、クライアントデバイス１１５とのユーザ対話に基づいて通信システム１２０を制御するためにネットワーク１１０を介してコマンドを送り得る。他の実施形態では、ユーザ入力デバイス１２２は、テレビの入力デバイスとのユーザ対話に応答してユーザ入力がテレビから受信されることを可能にする外部テレビに接続されたポート（例えば、ＨＤＭＩポート）を含み得る。例えば、テレビは、テレビによって受信されたユーザ入力に基づいて、コンシューマ・エレクトロニクス・コントロール（ＣＥＣ）プロトコルを介して通信システム１２０にユーザ入力コマンドを送り得る。

【0041】

マイクロフォンサブシステム１２４は、通信システム１２０の他の構成要素によって記憶または処理され得る電気信号に音を変換することによって周囲オーディオ信号をキャプチャする１つまたは複数のマイクロフォン（または外部マイクロフォンへの接続）を含む。キャプチャされたオーディオ信号は、オーディオ／ビデオ通話中にまたはオーディオ／ビデオメッセージにおいて、クライアントデバイス１１５に送信され得る。さらに、キャプチャされたオーディオ信号は、通信システム１２０の機能を制御するための音声コマンドを識別するために処理され得る。一実施形態では、マイクロフォンサブシステム１２４は、１つまたは複数の一体型マイクロフォンを含む。代替的に、マイクロフォンサブシステム１２４は、通信リンク（例えば、ネットワーク１１０または他の直接通信リンク）を介して通信システム１２０に結合された外部マイクロフォンを含み得る。マイクロフォンサブシステム１２４は、単一のマイクロフォンまたはマイクロフォンのアレイを含み得る。マイクロフォンアレイの場合、マイクロフォンサブシステム１２４は、各々が特定の方向（または方向の範囲）に関連付けられた１つまたは複数のビームフォーミングされたオーディオチャネルを生成するために、複数のマイクロフォンからのオーディオ信号を処理し得る。

【0042】

カメラサブシステム１２６は、画像信号および／またはビデオ信号をキャプチャする１つまたは複数のカメラ（または１つまたは複数の外部カメラへの接続）を含む。キャプチャされた画像またはビデオは、ビデオ通話中にまたはマルチメディアメッセージにおいて、クライアントデバイス１１５に送られ得るか、あるいは、通信システム１２０の他の構成要素によって記憶または処理され得る。さらに、一実施形態では、カメラサブシステム１２６からの画像またはビデオは、顔検出、顔認識、ジェスチャ認識、または通信システム１２０の機能を制御するために利用され得る他の情報のために処理され得る。一実施形態では、カメラサブシステム１２６は、周囲環境の広視野、パノラマ視野、または球状視野をキャプチャするための１つまたは複数の広角カメラを含む。カメラサブシステム１２６は、複数のカメラからの画像をつなぎ合わせるための、あるいは、ズーム、パン、デワーピング、または他の機能などの画像処理機能を実行するための一体型処理を含み得る。一実施形態では、カメラサブシステム１２６は、立体視（例えば、三次元画像）をキャプチャするように配置された複数のカメラを含み得るか、あるいは、キャプチャされた画像またはビデオ中の画素について深度値をキャプチャするための深度カメラを含み得る。

【0043】

ネットワークインターフェース１２８は、ネットワーク１１０への通信システム１２０の接続を容易にする。例えば、ネットワークインターフェース１３０は、音声通話およびビデオ通話、または通信システム１２０上で実行している様々なアプリケーションの他の動作を可能にするために、音声、ビデオ、および／または他のデータ信号の、１つまたは複数のクライアントデバイス１１５との通信を容易にするソフトウェアおよび／またはハードウェアを含み得る。ネットワークインターフェース１２８は、それがネットワーク１１０を介して通信することを可能にする任意の従来の有線または無線通信プロトコルに従って動作し得る。

【0044】

ディスプレイサブシステム１６０は、画像またはビデオコンテンツを提示するための電子デバイスまたは電子デバイスへのインターフェースを備える。例えば、ディスプレイサブシステム１６０は、ＬＥＤディスプレイパネル、ＬＣＤディスプレイパネル、プロジェクタ、仮想現実ヘッドセット、拡張現実ヘッドセット、別のタイプのディスプレイデバイス、または上記で説明されたディスプレイデバイスのいずれかに接続するためのインターフェースを含み得る。一実施形態では、ディスプレイサブシステム１６０は、通信システム１２０の他の構成要素と一体化されているディスプレイを含む。代替的に、ディスプレイサブシステム１２０は、通信システムを外部ディスプレイデバイス（例えば、テレビ）に結合する１つまたは複数のポート（例えば、ＨＤＭＩポート）を備える。

【0045】

オーディオ出力サブシステム１７０は、１つまたは複数のスピーカ、または受信されたオーディオ信号に基づいて周囲オーディオを生成する１つまたは複数の外部スピーカに結合するためのインターフェースを備える。一実施形態では、オーディオ出力サブシステム１７０は、通信システム１２０の他の構成要素と一体化されている１つまたは複数のスピーカを含む。代替的に、オーディオ出力サブシステム１７０は、通信システム１２０を１つまたは複数の外部スピーカ（例えば、専用スピーカシステムまたはテレビ）に結合するためのインターフェース（例えば、ＨＤＭＩインターフェースまたは光インターフェース）を備える。オーディオ出力サブシステム１２０は、オーディオに関連する指向性の感覚を聞き手に与えるビームフォーミングされたオーディオ信号を生成するために、複数のチャネルにおいてオーディオを出力し得る。例えば、オーディオ出力サブシステムは、ステレオオーディオ出力、または２．１、３．１、５．１、７．１もしくは他の標準構成などのマルチチャネルオーディオ出力として、オーディオ出力を生成し得る。

【0046】

通信システム１２０がテレビなどの外部メディアデバイスに結合された実施形態では、通信システム１２０は、一体型ディスプレイおよび／または一体型スピーカがないことがあり、代わりに、外部メディアデバイスのディスプレイおよびスピーカシステムを介して出力するためのオーディオ／ビジュアルデータのみを通信し得る。

【0047】

プロセッサ１３０は、本明細書で説明される通信システム１２０に起因する様々な機能を実行するために、記憶媒体１５０（例えば、非一時的コンピュータ可読記憶媒体）と連携して動作する。例えば、記憶媒体１５０は、プロセッサ１３０によって実行可能な命令として具現化された１つまたは複数のモジュールまたはアプリケーション（例えば、ユーザインターフェース１５２、通信モジュール１５４、ユーザアプリケーション１５６）を記憶し得る。命令は、プロセッサによって実行されたとき、プロセッサ１３０に、本明細書で説明される様々なモジュールまたはアプリケーションに起因する機能を実行させる。一実施形態では、プロセッサ１３０は、単一プロセッサシステムまたはマルチプロセッサシステムを含み得る。

【0048】

一実施形態では、記憶媒体１５０は、ユーザ・インターフェース・モジュール１５２と、通信モジュール１５４と、ユーザアプリケーション１５６とを備える。代替実施形態では、記憶媒体１５０は、異なるまたは追加の構成要素を含み得る。

【0049】

ユーザ・インターフェース・モジュール１５２は、通信システム１２０とのユーザ対話を可能にするためのビジュアルおよび／またはオーディオ要素ならびに制御を備える。例えば、ユーザ・インターフェース・モジュール１５２は、ユーザが通信システム１２０の様々な機能を選択することを可能にするために、ユーザ入力デバイス１２２から入力を受信し得る。例示的な実施形態では、ユーザ・インターフェース・モジュール１５２は、通信システム１２０がネットワーク１１０を介して音声通話および／またはビデオ通話を行うかまたは受信することを可能にするための呼出しインターフェースを含む。呼出しを行うために、ユーザ・インターフェース・モジュール１５２は、ユーザが呼出しのために１つまたは複数の連絡先を選択し、呼出しを開始し、呼出し中に様々な機能を制御し、呼出しを終了することを可能にするための制御を提供し得る。呼出しを受信するために、ユーザ・インターフェース・モジュール１５２は、ユーザが着信呼を受け付け、呼出し中に様々な機能を制御し、呼出しを終了することを可能にするための制御を提供し得る。ビデオ通話の場合、ユーザ・インターフェース・モジュール１５２は、クライアント１１５からの遠隔ビデオを、ボリューム制御、呼出し終了制御、または受信されたビデオの表示方法もしくは受信されたオーディオの出力方法に関する様々な制御など、様々な制御要素とともに表示するビデオ通話インターフェースを含み得る。

【0050】

ユーザ・インターフェース・モジュール１５２は、さらに、ユーザが、ユーザアプリケーション１５６にアクセスするかまたは通信システム１２０の様々な設定を制御することを可能にし得る。一実施形態では、ユーザ・インターフェース・モジュール１５２は、ユーザの好みに従ってユーザインターフェースのカスタマイゼーションを可能にし得る。ここで、ユーザ・インターフェース・モジュール１５２は、通信システム１２０の異なるユーザの異なる好みを記憶し得、現在のユーザに応じて設定を調整し得る。

【0051】

通信モジュール１５４は、音声通話および／またはビデオ通話のための通信システム１２０とクライアント１１５との通信を容易にする。例えば、通信モジュール１５４は、連絡先のディレクトリを保守し、呼出しを開始するようにとのユーザ・インターフェース・モジュール１５２からのコマンドに応答するそれらの連絡先への接続を容易にし得る。さらに、通信モジュール１５４は、着信呼の指示を受信し、着信呼の受信を容易にするためにユーザ・インターフェース・モジュール１５２と対話し得る。通信モジュール１５４は、さらに、ロバストな接続を維持し、様々な呼出し中機能を容易にするために、呼出し中に着信および発信音声および／またはビデオ信号を処理し得る。

【0052】

通信モジュール１５４は、オーディオ混合モジュール１８２とビデオモジュール１８４とを含む。オーディオ混合モジュール１８２は、各々が通信システム１２０と接続された異なるユーザに対応する複数のオーディオフィードを受信し、それらのオーディオフィードを組み合わせて出力オーディオストリームを生成する。出力オーディオストリームは、次いで、再生のためにオーディオ出力サブシステム１７０に送られる。ビデオモジュール１８４は、各々が通信システム１２０と接続された異なるユーザに対応する複数のビデオフィードを受信し、それらのビデオフィードを組み合わせて出力ビデオストリームを生成する。出力ビデオストリームは、次いで、表示のためにディスプレイサブシステム１６０に送られる。

【0053】

ユーザアプリケーション１５６は、通信システム１２０の様々な機能を容易にするために、ユーザ・インターフェース・モジュール１５２を介してユーザによってアクセス可能であり得る１つまたは複数のアプリケーションを含む。例えば、ユーザアプリケーション１５６は、インターネット上のウェブページをブラウズするためのウェブブラウザ、画像を閲覧するためのピクチャビューア、ビデオファイルまたはオーディオファイルを再生するためのメディア再生システム、ユーザ要求に応答して様々なタスクまたはサービスを実行するためのインテリジェント仮想アシスタント、あるいは様々な機能を実行するための他のアプリケーションを含み得る。一実施形態では、ユーザアプリケーション１５６は、通信システム１２０とユーザのソーシャル・ネットワーキング・アカウントとの統合を可能にするソーシャル・ネットワーキング・アプリケーションを含む。ここで、例えば、通信システム１２０は、より個人化されたユーザ体験を容易にするために、ユーザのソーシャル・ネットワーキング・アカウントから様々な情報を取得し得る。さらに、通信システム１２０は、ユーザが、投稿を閲覧または作成すること、フィードにアクセスすること、友人と対話することなどによって、ソーシャルネットワークと直接対話することを可能にすることができる。さらに、ユーザの好みに基づいて、ソーシャル・ネットワーキング・アプリケーションは、ソーシャルネットワーク上のアクティビティに関するユーザにとって関心があり得る様々なアラートまたは通知の検索を容易にし得る。一実施形態では、ユーザは、通信システム１２０の動作をカスタマイズするためにアプリケーション１５６を追加または削除し得る。

【0054】

仮想プレゼンスビデオ会議
図２Ａは、一実施形態による、通信システムを使用する仮想プレゼンスビデオ会議の図を示す。通信システム１２０は、会議室に接続された他のユーザによってキャプチャされたオーディオビジュアルデータを受信し、会議室に接続されたユーザのビデオフィードを表示する。図２Ａの例では、８人のユーザが表示されている。しかしながら、任意の数のユーザが会議室に接続され、通信システム１２０を介して表示され得る。いくつかの実施形態では、通信システム１２０は、通信システム１２０の周囲におけるユーザのプレゼンスの時間／日付または識別情報に基づいて、会議室に自動的に接続する。例えば、通信システム１２０は、平日の午前１０時に特定の会議室に接続するように構成され得る。

【0055】

通信システム１２０が会議室に接続されると、通信システム１２０は、（例えば、一体型カメラを使用して）ビデオをキャプチャし、（例えば、一体型マイクロフォンを使用して）オーディオをキャプチャし始め、キャプチャされたビデオおよびオーディオを、会議室に接続された他のユーザの通信システム１２０に送信する。

【0056】

さらに、通信システム１２０が会議室に接続されると、通信システム１２０は、会議室に接続された他のユーザの通信システム１２０によってキャプチャされたビデオデータおよびオーディオデータを受信し始める。各ユーザからのオーディオデータおよびビデオデータは別個のフィードとして受信されるため、各オーディオフィードおよびビデオフィードは独立して操作され得る。例えば、会議室内の各ユーザに対応するオーディオフィードの各々は、独立して操作され得る。ユーザの各々からの各オーディオフィードは、異なる値で減衰させるかまたは増幅することができる。通信システムは、１人または複数のユーザに対応するオーディオフィードに減衰関数を適用して、それらのオーディオフィードを、減衰されたユーザから受信されたオーディオフィードが再生されないようにミュートすることができる。異なる例では、オーディオフィードの各々は、会議中のユーザの各々について再生される音量を等しくするために、異なる強度で増幅され得る。

【0057】

いくつかの実施形態では、通信システム１２０は、会議室に接続されたすべてのユーザの受信されたビデオデータに対応するビデオフィードを表示するが、会議室に接続されたすべてのユーザの受信されたオーディオデータに対応するオーディオフィードをミュートするように構成される。すなわち、ビデオ会議が始まると、すべてのユーザからのオーディオフィードが自動的にミュート状態に設定される。通信システム１２０は、次いで、通信システム１２０のユーザからの入力を受信したことに応答して、または会議室に接続された別のユーザの通信システム１２０からの通信システム１２０から信号を受信したことに応答して、オーディオフィードのうちの１つまたは複数を、ミュート解除状態に設定する。

【0058】

図２Ｂは、一実施形態による、会議室に接続されたユーザのビデオフィードを表示するグラフィカル・ユーザ・インターフェースを示す。ユーザインターフェース２１０は、少なくともビデオフィード２２０および会話ステータスインジケータ２３０を含む。

【0059】

ビデオフィード２２０は、会議室に接続されている対応するユーザから受信されたビデオフィードの少なくとも一部分を表示する。図２Ｂの例では、ユーザ１のビデオフィードが表示されている。いくつかの実施形態では、通信システム１２０は、ユーザインターフェース２１０においてビデオフィードを表示する前にビデオフィードを修正する。例えば、通信システム１２０は、ユーザインターフェース２１０のアスペクト比に基づいてビデオフィードをクロップし得る。いくつかの実施形態では、通信システム１２０は、顔検出を実行し、ビデオフィード内の検出された顔がユーザインターフェース１２０の中心付近にあるようにビデオフィードをクロップする。

【0060】

いくつかの実施形態では、通信システム１２０は、ビデオフィード内の人物のプレゼンスを検出し、人物のプレゼンスがビデオフィード内で検出された場合、ビデオフィードをユーザインターフェース２１０において表示する。逆に、ビデオフィード内で人物のプレゼンスが検出されなかった場合、通信システム１２０は、ユーザインターフェース２１０に対応するユーザが離れているというメッセージを表示する。いくつかの実施形態では、ユーザインターフェース２１０は、対応するユーザのビデオフィードを表示する代わりに、対応するユーザのプロフィール写真またはアバターを表示し得る。

【0061】

いくつかの実施形態では、ユーザは、「着信拒否」または「使用中」ステータスを手動で設定することができる。ユーザが着信拒否ステータスを設定したとき、他のユーザは、そのユーザとの会話を始めることを阻止される。いくつかの実施形態では、通信システム１２０は、ステータスを使用中または着信拒否に設定したユーザについて、使用中あるいは着信拒否アイコンまたはメッセージを併せて表示する。

【0062】

会話ステータスインジケータ２３０は、ユーザが、現在、会議室中の別のユーザとのアクティブ会話中であるかどうかの指示を提供する。いくつかの実施形態では、指示は、会話ステータスインジケータ２３０の色の変化として提供される。例えば、会話ステータスインジケータは、ユーザインターフェースに対応するユーザが会議室中の任意の他のユーザとアクティブ会話をしていないとき、赤色ドットであり得る。さらに、会話ステータスインジケータ２３０は異なる色に変わる。例えば、ユーザについての会話ステータスインジケータ２３０は、そのユーザが会議室中の別のユーザとの会話を始めたとき、青色に変わる。いくつかの実施形態では、ステータスインジケータの色は、ユーザが誰と会話しているかを示す。例えば、２人のユーザのステータスインジケータが青色である場合、これは、それらの２人のユーザが互いに会話していることを示し得る。第３のユーザがその会話に参加した場合、第３のユーザのステータスインジケータも、３人のユーザ全員が会話していることを示すように青色に変わる。会話が終了すると、ステータスインジケータ２３０は、ユーザがもはやアクティブ会話をしていないことを示すように非アクティブステータス（例えば、赤色ドット）に戻る。

【0063】

いくつかの実施形態では、複数の別個の会話が同時にアクティブである。例えば、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂは、第１のアクティブ会話を行うことができ、第３のユーザ１９０Ｃおよび第４のユーザ１９０Ｄは、第１のアクティブ会話とは別個の第２のアクティブ会話を行うことができる。この場合、第１のユーザ１９０Ａの通信システム１２０は、第２のユーザ１９０Ｂのオーディオストリームを再生するが、第３または第４のユーザのオーディオストリームを再生しない。同様に、第２のユーザ１９０Ｂの通信システム１２０は、第１のユーザ１９０Ａのオーディオストリームを再生するが、第３または第４のユーザのオーディオストリームを再生しない。さらに、第３のユーザ１９０Ｃの通信システム１２０は、第４のユーザ１９０Ｄのオーディオストリームを再生するが、第１または第２のユーザのオーディオストリームを再生しない。第４のユーザ１９０Ｄの通信システム１２０は、第３のユーザ１９０Ｃのオーディオストリームを再生するが、第１または第２のユーザのオーディオストリームを再生しない。他のユーザ１９０Ｅ～１９０Ｈが会議室に接続された場合、それらのユーザの通信システムは、いずれのユーザのオーディオストリームも再生しない。

【0064】

この実施形態では、第１および第２のユーザのステータスインジケータ２３０は、第１のユーザと第２のユーザとが互いに会話していることを（例えば、第１の色に変更することによって）示す。同様に、第３および第４のユーザのステータスインジケータ２３０は、第３のユーザと第４のユーザとが互いに会話していることを（例えば、第２の色に変更することによって）示す。さらに、ステータスインジケータ２３０は、２つの別個のアクティブ会話が行われていることを示し得る。ステータスインジケータの色（または任意の他の特性）は２つの会話間で異なるため、第１、第２、第３、および第４のユーザについてのステータスインジケータを見ているユーザは、どのユーザが互いに話しているかを決定することができる。

【0065】

ユーザインターフェース２１０は、通信システム１２０のユーザから受信された入力に反応する。いくつかの実施形態では、ユーザインターフェース２１０は、通信システム１２０のユーザが、会議室に接続された別のユーザとの会話を始めるか、その会話に参加するか、またはその会話を終了することを可能にする。ユーザが会話中でなく、ユーザが特定のユーザに対応するユーザインターフェースの任意の部分を押した場合、通信システム１２０は、特定のユーザとの新しい会話を始める。逆に、ユーザがすでに会話中である場合、ユーザインターフェース２１０と対話することは、アクティブ会話を終了する。ユーザが、すでにアクティブ会話中であるユーザに対応するユーザインターフェース２１０と対話する場合、通信システム１２０は、そのアクティブ会話に参加する。

【0066】

例えば、選択されたユーザ１９０に対応するユーザインターフェース２１０と対話するユーザ入力を受信すると、通信システム１２０は、選択されたユーザ１９０とのアクティブ会話を始めるように構成される。選択されたユーザ１９０との会話を始めるとき、通信システム１２０は、選択されたユーザ１９０に対応するオーディオフィードの減衰をミュート解除するかまたは減少させる。さらに、通信システム１２０は、会話の始まりを示す要求を、選択されたユーザ１９０の通信システム１２０に送る。要求を受信すると、選択されたユーザ１９０の通信システム１２０は、会話を開始するユーザに対応するオーディオフィードの減衰をミュート解除または低減する。

【0067】

すなわち、例えば、第１のユーザ１９０Ａが、第２のユーザ１９０Ｂに対応するユーザインターフェース２１０Ｂと対話する場合、第１のユーザ１９０Ａの通信システム１２０Ａは、第２のユーザ１９０Ｂの通信システム１２０Ｂから受信されたオーディオフィードをミュート解除し、第２のユーザ１９０Ｂの通信システム１２０Ｂに要求を送る。要求を受信すると、第２のユーザ１９０Ｂの通信システム１２０Ｂは、第１のユーザ１９０Ａの通信システム１２０Ａから受信されたオーディオフィードをミュート解除する。さらに、第１のユーザの通信システム１２０Ａは、第２のユーザ１９０Ｂに対応する会話ステータスインジケータ２３０Ｂを修正し、第２のユーザの通信システム１２０Ｂは、第１のユーザ１９０Ａに対応する会話ステータスインジケータ２３０Ａを修正する。

【0068】

いくつかの実施形態では、選択されたユーザ１９０に対応するユーザインターフェース２１０と対話する入力を受信すると、通信システムは、会議室に接続された他のユーザに、選択されたユーザ１９０との会話の始まりの指示を送る。すなわち、例えば、第１のユーザ１９０Ａが第２のユーザ１９０Ｂとの会話を始めた場合、第１のユーザ１９０Ａの通信システム１２０Ａは、他のユーザ１９０Ｃ～１９０Ｈの通信システム１２０に、第１のユーザ１９０Ａと第２のユーザ１９０Ｂとの間の会話の開始を識別する指示を送る。指示を受信すると、他のユーザ１９０Ｃ～１９０Ｈの通信システム１２０は、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂに対応する会話ステータスインジケータを、第１のユーザと第２のユーザとの間でアクティブ会話が始まったことを反映するように変更する。

【0069】

いくつかの実施形態では、会話を始めるかまたは会話に参加すると、通信システム１２０は、会話を制御するためのボタンを追加するようにユーザインターフェースを修正する。例えば、ボタンは、会話を終了するかまたは離れるためのボタン、会話を一時的にミュートするためのボタン、会話を記録するためのボタンなどを含み得る。

【0070】

いくつかの実施形態では、会話を始めるかまたは会話に参加すると、通信システム１２０は、会話に参加しているユーザに対応するビデオフィードを拡大するようにユーザインターフェースを修正する。一実施形態では、通信システム１２０は、アクティブ会話に現在参加しているユーザのみを表示する。会話が終了するかまたはユーザが会話を離れたとき、通信システムは、会議室にいる他のユーザのビデオフィードを復元する。

【0071】

図３Ａは、一実施形態による、会議室に接続された複数のユーザ間の会話を可能にするためのオーディオ出力の生成を示す図を示す。第１のユーザ１９０Ａの通信システム１２０は、会議室に接続された各ユーザの通信システム１２０からデータストリーム３１０を受信する。図３Ａの例では、第１のユーザ１９０Ａの通信システム１２０Ａは、ユーザ１９０Ｂ～１９０Ｅの通信システム１２０Ｂ～１２０Ｅからデータストリーム３１０を受信する。各データストリームは、通信システム１２０が会議室に接続されたユーザの各々のビデオデータまたはオーディオデータを独立して修正することができるように別個のチャネルとして受信される。

【0072】

通信システム１２０の各々から受信されたデータストリーム３１０は、ビデオデータと、オーディオデータと、ステータスデータとを含む。一実施形態では、オーディオ混合モジュール１８２は、受信されたデータストリームの各々からオーディオデータを受信し、データストリーム３１０のステータスデータに従ってオーディオデータを修正する。特定のユーザのステータスデータが、特定のユーザが通信システム１２０のユーザとのアクティブ会話中でないことを示す場合、通信システム１２０は、オーディオデータが通信システム１２０によって再生されないように特定のユーザのオーディオデータを減衰させる。

【0073】

すなわち、第１のユーザ１９０Ａの通信システム１２０Ａのオーディオ混合モジュール１８２は、第２のユーザ１９０Ｂの通信システム１２０Ｂから受信されたステータスデータが、第２のユーザ１９０Ｂが第１のユーザ１９０Ａとのアクティブ会話中であることを示すかどうかを決定する。第２のユーザ１９０Ｂが第１のユーザ１９０Ａとのアクティブ会話中でない場合、第１のユーザ１９０Ａの通信システム１２０のオーディオ混合モジュール１８２は、第２のユーザ１９０Ｂに対応するオーディオデータを減衰させるかまたはミュートする。同様に、第１のユーザ１９０Ａの通信システム１２０のオーディオ混合モジュール１８２は、他のユーザ１９０Ｃ、１９０Ｄ、および１９０Ｅのステータスデータを分析し、それに応じてそれらのユーザのオーディオストリームを修正する。

【0074】

オーディオ混合モジュール１８２は、修正されたオーディオストリームを組み合わせて、オーディオ出力サブシステム１７０による再生のための出力オーディオフィードを生成する。したがって、減衰されなかったオーディオデータのみがオーディオ出力サブシステム１７０によって再生される。すなわち、オーディオ出力サブシステム１７０は、第１のユーザ１９０Ａとのアクティブ会話に参加しているユーザのオーディオデータのみを再生する。

【0075】

他の実施形態では、オーディオデータを減衰させる代わりに、オーディオ混合は、第１のユーザ１９０Ａとアクティブ会話しているユーザを識別し、第１のユーザ１９０Ａとアクティブ会話していると識別されたユーザのオーディオデータを組み合わせる。

【0076】

図３Ｂは、一実施形態による、会議室に接続されたユーザのオーディオ出力のタイミング図を示す。図３Ｂの例では、５人のユーザ１９０Ａ～１９０Ｅが会議室に接続されている。タイミング図は、５つの時間期間Ｔ１～Ｔ５に分割される。

【0077】

第１の時間期間Ｔ１および第５の時間期間Ｔ５の間、いずれのユーザもアクティブ会話をしていない。第１の時間期間Ｔ１および第５の時間期間Ｔ５の間、すべてのユーザのチャネルはすべてオフにされる。いくつかの実施形態では、これは、会議が始まるときのデフォルト状態である。

【0078】

第２の時間期間Ｔ２の間、第１のユーザ１９０Ａと第２のユーザ１９０Ｂとがアクティブ会話を始める。第１のユーザ１９０Ａと第２のユーザ１９０Ｂとの間の会話は、第４の時間期間Ｔ４の終了時に終了する。第２の時間期間Ｔ２の間、第１のユーザ１９０Ａの通信システム１２０Ａは、第２のユーザ１９０Ｂに対応するチャネルをオンにし（例えば、減衰を停止し）、第２のユーザ１９０Ｂの通信システム１２０Ｂは、第１のユーザ１９０Ａに対応するチャネルをオンにする。したがって、第１のユーザ１９０Ａは第２のユーザ１９０Ｂからのオーディオを聞くことができ、第２のユーザ１９０Ｂは第１のユーザ１９０Ａからのオーディオを聞くことができる。さらに、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂは、第３のユーザ１９０Ｃ、第４のユーザ１９０Ｄ、および第５のユーザ１９０Ｅに対応するチャネルを保持する。

【0079】

第３の時間期間Ｔ３の間、第３のユーザ１９０Ｃは、第５のユーザ１９０Ｆとの新しい会話を始める。第３のユーザ１９０Ｃと第５のユーザ１９０Ｅとの間の会話は、第３の時間期間Ｔ３の終了時に停止する。したがって、第３の時間期間Ｔ３の間、第１のユーザ１９０Ａと第２のユーザ１９０Ｂとは第１の会話をしており、第３のユーザ１９０Ｃと第５のユーザ１９０Ｆとは、第１の会話とは別個の第２の会話をしている。第３の時間期間Ｔ３の間、第３のユーザ１９０Ｃの通信システム１２０Ｃは、第５のユーザ１９０Ｅに対応するチャネルをオンにし、第５のユーザ１９０Ｅの通信システム１２０Ｅは、第３のユーザ１９０Ｃに対応するチャネルをオンにする。したがって、第３のユーザ１９０Ｃは第５のユーザ１９０Ｅからのオーディオを聞くことができ、第５のユーザ１９０Ｅは第３のユーザ１９０Ｃからのオーディオを聞くことができる。

【0080】

さらに、第２のユーザに対応するチャネルは第１のユーザ１９０Ａの通信システム１２０Ａにおいてオンであり、第１のユーザに対応するチャネルは第２のユーザ１９０Ｂの通信システム１２０Ｂにおいてオンであるため、第１のユーザ１９０Ａと第２のユーザ１９０Ｂとは、互いに聞き取り可能である。第１のユーザ１９０Ａの通信システム１２０Ａと第２のユーザ１９０Ｂの通信システム１２０Ｂとは、第３のユーザ１９０Ｃおよび第５のユーザ１９０Ｅに対応するチャネルを保持するため、第１のユーザ１９０Ａと第２のユーザ１９０Ｂとは、第３のユーザ１９０Ｃと第５のユーザ１９０Ｅとの間の会話を聞くことができない。

【0081】

第４の期間Ｔ４の間、第４のユーザ１９０Ｄは、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂとの第１の会話に参加する。第４のユーザ１９０Ｄが、第１のユーザ１９０Ａと第２のユーザ１９０Ｂとの間の会話に参加する要求を送ったとき、第４のユーザ１９０Ｄの通信システム１２０Ｄは、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂに対応するチャネルをオンにし、第４のユーザ１９０Ｄが、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂの通信システム１２０によって送信されたオーディオを聞くことを可能にする。第４のユーザの通信システム１２０Ｄから要求を受信すると、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂの通信システム１２０は、第４のユーザ１９０Ｄに対応するチャネルをオンにする。したがって、３人のユーザが互いに聞き取り可能である。

【0082】

図４は、一実施形態による、会議室に接続されたユーザのためのチャネルをオンまたはオフにする方法のフロー図を示す。第１のユーザ１９０Ａの通信システム１２０Ａは、会議室への接続を開始する（４１０）。いくつかの実施形態では、会議室に登録された各ユーザの通信システム１２０は、所定の日時に接続を自動的に開始する。例えば、特定の会議室に登録されたすべての通信システム１２０は、平日の午前１０時に会議室との接続を開始する。

【0083】

会議室に接続されると、通信システム１２０Ａは、ビデオおよびオーディオをキャプチャし、会議室に接続された他のユーザ１９０の通信システム１２０に送信する（４２０）。さらに、通信システム１２０Ａは、会議室に接続された他のユーザ１９０の通信システム１２０から、ビデオデータ、オーディオデータ、およびステータスデータを含むデータストリーム３１０を受信する（４３０）。

【0084】

会議室に接続された各ユーザについて、通信システム１２０Ａがデータストリーム３１０を受信すると、通信システム１２０Ａは、受信されたビデオデータに対応するビデオフィードを表示する（４４０）。いくつかの実施形態では、表示されたビデオフィードは、受信されたビデオデータのクロップされたバージョンである。いくつかの実施形態では、通信システム１２０Ａは、ビデオフィードを表示すべきかどうかを決定するために、プレゼンス検出アルゴリズムを実行する。

【0085】

さらに、会議室に接続された各ユーザについて、通信システム１２０Ａがデータストリーム３１０を受信すると、通信システム１２０Ａは、第１のユーザ１９０Ａが、受信されたデータストリーム３１０に対応するユーザ１９０とのアクティブ会話中であるかどうかを決定し、その決定を考慮してオーディオデータを修正する。いくつかの実施形態では、決定は、データストリーム３１０に含まれるステータスデータに基づいて実行される。通信システム１２０Ａが、第１のユーザ１９０Ａが受信されたデータストリーム３１０に対応するユーザ１９０とのアクティブ会話中でないと決定した場合、通信システム１２０Ａは、ユーザ１９０に対応するオーディオデータに関連するオーディオフィードをミュートする（４５５）。例えば、通信システム１２０Ａは、ユーザ１９０に対応するオーディオデータに関連するオーディオフィードを減衰させる。代替的に、通信システム１２０Ａが、第１のユーザ１９０Ａが受信されたデータストリーム３１０に対応するユーザ１９０とのアクティブ会話中であると決定した場合、通信システム１２０Ａは、ユーザ１９０に対応するオーディオデータに関連するオーディオフィードを再生する（４５０）。

【0086】

図５Ａは、一実施形態による、会議室に接続されたユーザとの会話を始める方法のフロー図を示す。第１のユーザ１９０Ａの通信システム１２０Ａは、会議室への接続を開始する（５１０Ａ）。同様に、第２のユーザ１９０Ｂの通信システム１２０Ｂは、会議室への接続を開始する（５１０Ｂ）。いくつかの実施形態では、第１のユーザ１９０Ａの通信システム１２０Ａは、予め設定された時間に会議室に自動的に接続する。例えば、通信システム１２０Ａは、就業日午前１０時に会議室に自動的に接続する。さらに、いくつかの実施形態では、通信システム１２０Ａは、予め設定された時間に会議室から自動的に切断する。例えば、通信システム１２０Ａは、８時間接続された後に会議室から自動的に切断する。

【0087】

会議室に接続されると、通信システム１２０Ａは、ビデオおよびオーディオをキャプチャし、会議室に接続された他のユーザ１９０の通信システム１２０に送信する（５２０Ａ）。さらに、通信システム１２０Ａは、会議室に接続された他のユーザ１９０の通信システム１２０から、ビデオデータ、オーディオデータ、およびステータスデータを含むデータストリーム３１０を受信する（５２５Ａ）。

【0088】

第１のユーザ１９０Ａの通信システム１２０Ａは、ユーザインターフェース２１０を介して、第２のユーザ１９０Ｂとの会話を始めるための指示を受信する（５３０）。例えば、通信システム１２０Ａは、第２のユーザ１９０Ｂに対応するビデオフィード上でタッチ入力を受信する。

【0089】

第１のユーザ１９０Ａから指示を受信すると、第１のユーザ１９０Ａの通信システム１２０Ａは、第２のユーザ１９０Ｂの通信システム１２０Ｂに、会話を始める要求を送る（５４０）。ある実施形態では、要求は、第１のユーザ１９０Ａの通信システム１２０Ａによって送信されたデータストリーム３１０Ａに含まれるステータスデータの変更として送られる。さらに、通信システム１２０Ａは、第２のユーザ１９０Ｂに対応するオーディオチャネルを自動的にミュート解除する（５５０Ａ）。いくつかの実施形態では、第１のユーザ１９０Ａの通信システム１２０Ａは、第２のユーザに対応するオーディオチャネルをミュート解除する前に、第２のユーザ１９０Ｂの通信システム１２０Ｂから肯定応答を受信するまで待機する。

【0090】

第２のユーザ１９０Ｂの通信システム１２０Ｂは、第１のユーザ１９０Ａの通信システム１２０Ａから、会話を始める要求を受信する（５４５）。第２のユーザ１９０Ｂの通信システム１２０Ｂは、第１のユーザに対応するオーディオチャネルを自動的にミュート解除する（５５０Ｂ）。

【0091】

図５Ｂは、一実施形態による、会議室に接続されたユーザとの会話を可能にする方法のフロー図を示す。第１のユーザ１９０Ａと第２のユーザ１９０Ｂとの間の会話が確立された後に、第１のユーザの通信システム１２０Ａは、第２のユーザとの会話を終了するための指示を受信する（５６０）。例えば、通信システム１２０Ａは、第２のユーザ１９０Ｂに対応するビデオフィード上でタッチ入力を受信する。

【0092】

第１のユーザ１９０Ａから指示を受信すると、第１のユーザ１９０Ａの通信システム１２０Ａは、第２のユーザ１９０Ｂの通信システム１２０Ｂに、会話を終了する要求を送る（５７０）。ある実施形態では、要求は、第１のユーザ１９０Ａの通信システム１２０Ａによって送信されたデータストリーム３１０Ａに含まれるステータスデータの変更として送られる。さらに、通信システム１２０Ａは、第２のユーザ１９０Ｂに対応するオーディオチャネルを自動的にミュートする（５８０Ａ）。いくつかの実施形態では、第１のユーザ１９０Ａの通信システム１２０Ａは、第２のユーザに対応するオーディオチャネルをミュートする前に、第２のユーザ１９０Ｂの通信システム１２０Ｂから肯定応答を受信するまで待機する。

【0093】

第２のユーザ１９０Ｂの通信システム１２０Ｂは、第１のユーザ１９０Ａの通信システム１２０Ａから、会話を終了する要求を受信する（５７５）。第２のユーザ１９０Ｂの通信システム１２０Ｂは、第１のユーザに対応するオーディオチャネルを自動的にミュートする（５８０Ｂ）。

【0094】

図５Ｂの例は、第１のユーザ１９０Ａが会話を終了するための指示を提供することを示しているが、いくつかの実施形態では、会話を終了するための指示は、会話に参加している任意のユーザによって送られ得る。一実施形態では、複数のユーザが会話に参加している場合、ユーザは、その会話から離脱する要求を送る。この実施形態では、会話中の他のユーザは、会話に留まるが、会話から離脱する要求を送ったユーザに対応するオーディオチャネルをミュートする。さらに、会話から離脱する要求を送ったユーザは、会話中のすべてのユーザに対応するオーディオチャネルをミュートする。

【0095】

図６は、一実施形態による、会議室に接続されたユーザとのアクティブ会話に参加する方法のフロー図を示す。

【0096】

第１のユーザ１９０Ａから、第２のユーザ１９０Ｂとの会話を始めるための指示を受信すると、第１のユーザ１９０Ａの通信システム１２０Ａは、第２のユーザ１９０Ｂの通信システム１２０Ｂに、会話を始めるための指示を送る（６１０）。ある実施形態では、指示は、第１のユーザ１９０Ａの通信システム１２０Ａによって送信されたデータストリーム３１０Ａに含まれるステータスデータの変更として送られる。

【0097】

第３のユーザ１９０Ｃの通信システム１２０Ｃは、第１のユーザ１９０Ａと第２のユーザ１９０Ｂとの間の会話の始まりの指示を受信する（６１５）。第３のユーザ１９０Ｃの通信システム１２０Ｃは、第１のユーザ１９０Ａと第２のユーザ１９０Ｂとの間の会話の指示を表示する。指示は、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂに対応する会話ステータスインジケータ２３０の変更として表示され得る。例えば、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂに対応するステータスインジケータは、特定の色を有するように修正される。

【0098】

第３のユーザ１９０Ｃの通信システム１２０Ｃは、第１のユーザ１９０Ａと第２のユーザ１９０Ｃとの間の会話に参加するための指示を受信する（６３０）。例えば、通信システム１２０Ｃは、第１のユーザ１９０Ａまたは第２のユーザ１９０Ｂに対応するビデオフィード上でタッチ入力を受信する。

【0099】

第３のユーザ１９０Ｃから指示を受信すると、第３のユーザ１９０Ｃの通信システム１２０Ｃは、第１のユーザ１９０Ａの通信システム１２０Ａおよび第２のユーザ１９０Ｂの通信システム１２０Ｂに、会話に参加する要求を送る（６４０）。ある実施形態では、要求は、第３のユーザ１９０Ｃの通信システム１２０Ｃによって送信されたデータストリーム３１０Ｃに含まれるステータスデータの変更として送られる。さらに、通信システム１２０Ｃは、第１のユーザ１９０Ａおよび第２のユーザ１９０Ｂに対応するオーディオチャネルを自動的にミュート解除する（５５０Ｃ）。いくつかの実施形態では、第３のユーザ１９０Ｃの通信システム１２０Ｃは、第１のユーザおよび第２のユーザに対応するオーディオチャネルをミュート解除する前に、第１のユーザ１９０Ａの通信システム１２０Ａおよび第２のユーザ１９０Ｂの通信システム１２０Ｂから肯定応答を受信するまで待機する。

【0100】

第１のユーザ１９０Ａの通信システム１２０Ａは、第３のユーザ１９０Ｃの通信システム１２０Ｃから、会話に参加する要求を受信する（５４５Ａ）。第１のユーザ１９０Ａの通信システム１２０Ａは、第３のユーザに対応するオーディオチャネルを自動的にミュート解除する（５５０Ａ）。同様に、第２のユーザ１９０Ｂの通信システム１２０Ｂは、第３のユーザ１９０Ｃの通信システム１２０Ｃから、会話に参加する要求を受信する（５４５Ｂ）。第２のユーザ１９０Ｂの通信システム１２０Ｂは、第３のユーザに対応するオーディオチャネルを自動的にミュート解除する（５５０Ｂ）。

【0101】

さらなる考慮事項
実施形態の前述の説明は、例示の目的で提示されており、網羅的であること、または特許権を開示された正確な形態に限定することは意図されていない。当業者は、上記の開示に照らして多くの修正および変形が可能であることを諒解することができる。

【0102】

説明のいくつかの部分は、情報に対する操作のアルゴリズムおよび記号表現に関して実施形態を説明する。これらのアルゴリズム説明および表現は、一般的に、データ処理分野の当業者によって彼らの作業の要旨を他の当業者に効果的に伝えるために使用される。これらの動作は、機能的、計算的、または論理的に説明されたが、コンピュータプログラムまたは同等の電気回路、マイクロコードなどによって実装されると理解される。さらに、一般性を失うことなく、これらの動作の構成をモジュールと呼ぶことが、時には便利であることも証明されている。説明された動作およびそれらの関連するモジュールは、ソフトウェア、ファームウェア、ハードウェア、またはそれらの任意の組合せで具現化され得る。

【0103】

本明細書で説明されたステップ、動作、またはプロセスのいずれも、単独で、または他のデバイスと組み合わせて、１つまたは複数のハードウェアまたはソフトウェアモジュールで実行または実施され得る。一実施形態では、ソフトウェアモジュールは、説明されたステップ、動作、またはプロセスのいずれかまたはすべてを実行するためにコンピュータプロセッサによって実行され得る、コンピュータ・プログラム・コードを含むコンピュータ可読媒体を備えるコンピュータプログラム製品で実装される。

【0104】

実施形態はまた、本明細書の動作を実行するための装置に関係し得る。この装置は、必要な目的のために特別に構築され得、および／または、コンピュータに記憶されたコンピュータプログラムによって選択的に起動または再構成される汎用コンピューティングデバイスを備え得る。そのようなコンピュータプログラムは、非一時的有形コンピュータ可読記憶媒体、または、コンピュータ・システム・バスに結合され得る、電子命令を記憶するのに適した任意のタイプの媒体に記憶され得る。さらに、本明細書で言及される任意のコンピューティングシステムは、単一のプロセッサを含み得るか、または、計算能力を高めるためにマルチプルプロセッサ設計を採用するアーキテクチャであり得る。

【0105】

実施形態はまた、本明細書で説明される計算プロセスによって生産される製品に関係し得る。そのような製品は、計算プロセスから生じる情報を含み得、その情報は、非一時的有形コンピュータ可読記憶媒体に記憶され、本明細書で説明されるコンピュータプログラム製品または他のデータ組合せの任意の実施形態を含み得る。

【0106】

最後に、本明細書で使用される言語は、主に読みやすさと教育上の目的で選択されており、特許権を描写または制限するために選択されていない場合がある。したがって、特許権の範囲は、この詳細な説明によってではなく、むしろ、本明細書に基づく出願によって発行される任意の請求項によって限定されることが意図されている。したがって、実施形態の開示は、以下の特許請求の範囲に記載されている特許権の範囲の例示であるが、限定するものではないことが意図されている。

【図1A】

【図1B】

【図2A】

【図2B】

【図3A】

【図3B】

【図4】

【図5A】

【図5B】

【図6】

【国際調査報告】