知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024121239
(43)【公開日】2024-09-06
(54)【発明の名称】処理装置、プログラム及び処理方法
(51)【国際特許分類】
H04N 7/15 20060101AFI20240830BHJP
H04L 51/04 20220101ALI20240830BHJP
H04L 67/104 20220101ALI20240830BHJP
【ＦＩ】
H04N7/15 120
H04N7/15
H04L51/04
H04L67/104
【審査請求】未請求
【請求項の数】9
【出願形態】ＯＬ
(21)【出願番号】P 2023028216
(22)【出願日】2023-02-27
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＪＡＶＡＳＣＲＩＰＴ
(71)【出願人】
【識別番号】000000295
【氏名又は名称】沖電気工業株式会社
(74)【代理人】
【識別番号】100129067
【弁理士】
【氏名又は名称】町田 能章
(74)【代理人】
【識別番号】100183162
【弁理士】
【氏名又は名称】大塚 義文
(74)【代理人】
【識別番号】110001807
【氏名又は名称】弁理士法人磯野国際特許商標事務所
(72)【発明者】
【氏名】小林 将平
【テーマコード（参考）】
5C164
【Ｆターム（参考）】
5C164FA10
5C164GA03
5C164UD63S
5C164VA13P
5C164VA22P
(57)【要約】
【課題】ビデオ会議システムにおけるトラフィック量を低減させる。
【解決手段】SFU(Selective Forwarding Unit)サーバであるメディアサーバ１Ａは、送受信部１１、合成部１２を備えている。例えば、送受信部１１は、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々からメディアデータを受信する。合成部１２は、受信した各メディアデータを合成した合成済みメディアデータを生成する。送受信部１１は、合成済みメディアデータをスマートフォン１０に送信する。また、その他端末４０が、ＰＣ２０からのメディアデータを要求（希望）する場合、メディアサーバ１Ａは、その他端末４０とＰＣ２０と、それぞれの端末に対してP2P（Pier to Pier）接続を確立し、送受信部１１は、その要求（設定部１３が設定情報として保持）に基づいて、ＰＣ２０からのメディアデータをその他端末４０に送信する。
【選択図】図１
【解決手段】SFU(Selective Forwarding Unit)サーバであるメディアサーバ１Ａは、送受信部１１、合成部１２を備えている。例えば、送受信部１１は、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々からメディアデータを受信する。合成部１２は、受信した各メディアデータを合成した合成済みメディアデータを生成する。送受信部１１は、合成済みメディアデータをスマートフォン１０に送信する。また、その他端末４０が、ＰＣ２０からのメディアデータを要求（希望）する場合、メディアサーバ１Ａは、その他端末４０とＰＣ２０と、それぞれの端末に対してP2P（Pier to Pier）接続を確立し、送受信部１１は、その要求（設定部１３が設定情報として保持）に基づいて、ＰＣ２０からのメディアデータをその他端末４０に送信する。
【選択図】図１
【特許請求の範囲】
【請求項1】
複数の装置と接続される処理装置であって、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部と、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部と、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部と、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2P（Pier to Pier）にて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部と、
を備えることを特徴とする処理装置。
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部と、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部と、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部と、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2P（Pier to Pier）にて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部と、
を備えることを特徴とする処理装置。
【請求項2】
前記処理装置としての第１処理装置と、前記処理装置としての第２処理装置が前記第１メディアの情報、前記第２メディアの情報、前記第３メディアの情報、及び前記第４メディアの情報を送受信する、請求項１に記載の処理装置。
【請求項3】
前記第１処理装置で生成した前記第４メディアの情報を第５メディアの情報とし、
前記第２処理装置で生成した前記第４メディアの情報を第６メディアの情報とした場合、
前記処理装置としての第３処理装置が、前記第１処理装置から受信した前記第５メディアの情報と、前記第２処理装置から受信した前記第６メディアの情報とを合成して第７メディアの情報を生成する、請求項２に記載の処理装置。
前記第２処理装置で生成した前記第４メディアの情報を第６メディアの情報とした場合、
前記処理装置としての第３処理装置が、前記第１処理装置から受信した前記第５メディアの情報と、前記第２処理装置から受信した前記第６メディアの情報とを合成して第７メディアの情報を生成する、請求項２に記載の処理装置。
【請求項4】
前記第１の装置、前記第２の装置、及び前記第３の装置の少なくとも何れかが、WebRTC(Web Real-Time Communication)のマルチチャネル未対応の端末であり、
前記処理装置がWebRTCゲートウェイである、請求項１から請求項３の何れか１項に記載の処理装置。
前記処理装置がWebRTCゲートウェイである、請求項１から請求項３の何れか１項に記載の処理装置。
【請求項5】
複数の装置と接続される処理装置であって、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部と、
前記装置からメディアの情報を受信する第２の処理部と、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部と、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部と、
を備えることを特徴とする処理装置。
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部と、
前記装置からメディアの情報を受信する第２の処理部と、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部と、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部と、
を備えることを特徴とする処理装置。
【請求項6】
コンピュータを、複数の装置と接続される処理装置として機能させるプログラムであって、
前記コンピュータを、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2Pにて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部、
として機能させることを特徴とするプログラム。
前記コンピュータを、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2Pにて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部、
として機能させることを特徴とするプログラム。
【請求項7】
コンピュータを、複数の装置と接続される処理装置として機能させるプログラムであって、
前記コンピュータを
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部、
前記装置からメディアの情報を受信する第２の処理部、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部、
として機能させることを特徴とするプログラム。
前記コンピュータを
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部、
前記装置からメディアの情報を受信する第２の処理部、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部、
として機能させることを特徴とするプログラム。
【請求項8】
複数の装置と接続される処理装置における処理方法であって、
前記処理装置は、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１のステップと、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２のステップと、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３のステップと、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2Pにて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４のステップと、
を実行することを特徴とする処理方法。
前記処理装置は、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１のステップと、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２のステップと、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３のステップと、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2Pにて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４のステップと、
を実行することを特徴とする処理方法。
【請求項9】
複数の装置と接続される処理装置における処理方法であって、
前記処理装置は、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１のステップと、
前記装置からメディアの情報を受信する第２のステップと、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３のステップと、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４のステップと、
を実行することを特徴とする処理方法。
前記処理装置は、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１のステップと、
前記装置からメディアの情報を受信する第２のステップと、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３のステップと、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４のステップと、
を実行することを特徴とする処理方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、処理装置、プログラム及び処理方法に関する。
【背景技術】
【0002】
従来、WebRTC(Web Real-Time Communication)を用いたビデオ会議システムでは、MCU(Multi-point Control Unit)と比べてトラフィック量は増加するがサーバの負荷を低減できる、SFU(Selective Forwarding Unit)による実装が一般的となっている。WebRTCについては、非特許文献１に開示されている。
【先行技術文献】
【非特許文献】
【0003】
【非特許文献1】“VTVジャパン株式会社”、“Web会議がブラウザから参加できるしくみ：WebRTCとは？”、［online］、［令和５年２月３日検索］、インターネット＜URL：https://www.vtv.co.jp/vtvonline/know-learn/dictionary/001-webrtc.html＞
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、SFUでは、SFUサーバは、あるクライアント端末に対して、SFUサーバに接続されたクライアント端末の数だけ、P2P(Pier to Pier)を確立する必要がある。具体的には、SFUサーバに接続された全クライアント端末がメディアデータを送信し、かつ、クライアント端末が自機以外の全てのクライアント端末のメディアデータを受信する場合、クライアント端末は[サーバに接続されたクライアント端末の数]だけP2Pを確立させることとなり、SFUサーバは[接続されたクライアント端末の数]の2乗の数だけ、P2Pを確立させることとなる。
さらに、SFUでは、基本的に１つのP2Pにつき、１台のクライアント端末のメディアデータを送信、もしくは受信を行う。そのため、SFUサーバに接続されるクライアント端末の数が増えるにつれ、トラフィック量も増加してしまう。
これらのことから、トラフィック量に制限のある環境下、もしくはトラフィック量に応じてコストが変動する環境下にて、SFUによるテレビ会議を行う場合、制限を超えないように、トラフィック量に制限する必要がある。
さらに、SFUでは、基本的に１つのP2Pにつき、１台のクライアント端末のメディアデータを送信、もしくは受信を行う。そのため、SFUサーバに接続されるクライアント端末の数が増えるにつれ、トラフィック量も増加してしまう。
これらのことから、トラフィック量に制限のある環境下、もしくはトラフィック量に応じてコストが変動する環境下にて、SFUによるテレビ会議を行う場合、制限を超えないように、トラフィック量に制限する必要がある。
【0005】
上記事情に鑑みて、本発明は、ビデオ会議システムにおけるトラフィック量を低減させることを課題とする。
【課題を解決するための手段】
【0006】
前記課題を解決する本発明は、
複数の装置と接続される処理装置であって、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部と、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部と、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部と、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2P（Pier to Pier）にて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部と、
を備えることを特徴とする処理装置である。
また、本発明は、
複数の装置と接続される処理装置であって、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部と、
前記装置からメディアの情報を受信する第２の処理部と、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部と、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部と、
を備えることを特徴とする処理装置である。
複数の装置と接続される処理装置であって、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部と、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部と、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部と、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2P（Pier to Pier）にて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部と、
を備えることを特徴とする処理装置である。
また、本発明は、
複数の装置と接続される処理装置であって、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部と、
前記装置からメディアの情報を受信する第２の処理部と、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部と、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部と、
を備えることを特徴とする処理装置である。
【0007】
また、本発明は、
コンピュータを、複数の装置と接続される処理装置として機能させるプログラムであって、
コンピュータを、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2Pにて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部、
として機能させることを特徴とするプログラムである。
また、本発明は、
コンピュータを、複数の装置と接続される処理装置として機能させるプログラムであって、
前記コンピュータを
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部、
前記装置からメディアの情報を受信する第２の処理部、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部、
として機能させることを特徴とするプログラムである。
コンピュータを、複数の装置と接続される処理装置として機能させるプログラムであって、
コンピュータを、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2Pにて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部、
として機能させることを特徴とするプログラムである。
また、本発明は、
コンピュータを、複数の装置と接続される処理装置として機能させるプログラムであって、
前記コンピュータを
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部、
前記装置からメディアの情報を受信する第２の処理部、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部、
として機能させることを特徴とするプログラムである。
【0008】
また、本発明は、
複数の装置と接続される処理装置における処理方法であって、
前記処理装置は、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１のステップと、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２のステップと、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３のステップと、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2Pにて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４のステップと、
を実行することを特徴とする処理方法である。
また、本発明は、
複数の装置と接続される処理装置における処理方法であって、
前記処理装置は、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１のステップと、
前記装置からメディアの情報を受信する第２のステップと、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３のステップと、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４のステップと、
を実行することを特徴とする処理方法である。
複数の装置と接続される処理装置における処理方法であって、
前記処理装置は、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１のステップと、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２のステップと、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３のステップと、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2Pにて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４のステップと、
を実行することを特徴とする処理方法である。
また、本発明は、
複数の装置と接続される処理装置における処理方法であって、
前記処理装置は、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１のステップと、
前記装置からメディアの情報を受信する第２のステップと、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３のステップと、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４のステップと、
を実行することを特徴とする処理方法である。
【発明の効果】
【0009】
本発明によれば、ビデオ会議システムにおけるトラフィック量を低減させることができる。
【図面の簡単な説明】
【0010】
【図1】第１実施形態におけるビデオ会議システムの機能構成図である。
【図2】第１実施形態におけるメディアデータ及び合成済みメディアデータの送受信の説明図である。
【図3】第２実施形態におけるビデオ会議システムの機能構成図である。
【図4】第２実施形態におけるメディアデータ及び合成済みメディアデータの送受信の説明図である。
【図5】第３実施形態におけるビデオ会議システムの機能構成図である。
【図6】第３実施形態におけるメディアデータ及び合成済みメディアデータの送受信の説明図である。
【図7】メディアサーバが実行する処理を示すフローチャートである。
【発明を実施するための形態】
【0011】
以下、図面を参照して、本発明の実施の形態について詳細に説明する。各図は、本発明を十分に理解できる程度に、概略的に示してあるに過ぎない。よって、本発明は、図示例のみに限定されるものではない。また、参照する図面において、本発明を構成する部材の寸法は、説明を明確にするために誇張して表現されている場合がある。なお、各図において、共通する構成要素や同様な構成要素については、同一の符号を付し、それらの重複する説明を省略する。
【0012】
［第１実施形態］
第１実施形態では、SFUサーバで、受信したメディアデータの合成処理を行い、所定のクライアント端末に合成したメディアデータを送信することで、トラフィック量を削減するシステムを実現する。
第１実施形態では、SFUサーバで、受信したメディアデータの合成処理を行い、所定のクライアント端末に合成したメディアデータを送信することで、トラフィック量を削減するシステムを実現する。
【0013】
＜構成＞
図１は、第１実施形態におけるビデオ会議システムの機能構成図である。図１に示すように、ビデオ会議システム１００Ａ（１００）は、メディアサーバ１Ａ（１）と、スマートフォン１０と、ＰＣ２０と、ネットワークカメラ３０と、その他端末４０と、外部端末５０とを備えている。メディアサーバ１Ａ、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、その他端末４０、及び外部端末５０は、通信可能に接続されている。メディアサーバ１Ａ、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、およびその他端末４０は、プライベートネットワークＮＷ１上に配置されている。外部端末５０は、パブリックネットワークＮＷ２を介してメディアサーバ１Ａ、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、及びその他端末４０と通信できる。
図１は、第１実施形態におけるビデオ会議システムの機能構成図である。図１に示すように、ビデオ会議システム１００Ａ（１００）は、メディアサーバ１Ａ（１）と、スマートフォン１０と、ＰＣ２０と、ネットワークカメラ３０と、その他端末４０と、外部端末５０とを備えている。メディアサーバ１Ａ、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、その他端末４０、及び外部端末５０は、通信可能に接続されている。メディアサーバ１Ａ、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、およびその他端末４０は、プライベートネットワークＮＷ１上に配置されている。外部端末５０は、パブリックネットワークＮＷ２を介してメディアサーバ１Ａ、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、及びその他端末４０と通信できる。
【0014】
スマートフォン１０（タブレットでもよい）、ＰＣ２０、ネットワークカメラ３０、その他端末４０、及び外部端末５０は、メディアデータを処理してビデオ会議を行うクライアント端末である。説明の便宜上、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、その他端末４０、及び外部端末５０をそれぞれ、「端末」と称する場合がある。メディアデータ（実細線矢印）は、ビデオ会議用の画像データ、映像データ、音声データ等を含む。
【0015】
端末１０～５０のユーザがビデオ会議に参加する際、端末１０～５０は、ユーザ自身を撮影した映像データ等をメディアデータとしてメディアサーバ１Ａに送信できる。ビデオ会議を行う端末１０～５０はそれぞれ、メディアデータをメディアサーバ１Ａに送信するため、メディアサーバ１Ａとの間でP2P接続を確立する。ここで、メディアサーバ１Ａは、端末１０～５０それぞれから受信したメディアデータを他の端末に送信するため、他の端末との間でP2P接続を確立している。また、端末１０～５０はそれぞれ、自身のユーザ以外のユーザを撮影した映像データ等をメディアデータとして受信できる。例えば、端末１０～５０はそれぞれ、SFUの方式に従い、受信したメディアデータをレンダリングの技術を用いて再生できる。具体的には、端末１０～５０はそれぞれ、各ユーザを撮影した映像データを表示サイズや表示レイアウト等を調整してまとめて画面表示できる。
【0016】
メディアサーバ１Ａは、SFUサーバである。メディアサーバ１Ａは、SFUと同等の方法で端末１０～５０とP2Pで接続し、端末１０～５０の各々からメディアデータを受信する。図１に示すように、メディアサーバ１Ａは、送受信部１１と、合成部１２と、設定部１３とを備えている。
【0017】
送受信部１１は、端末１０～５０との間でメディアデータを送受信する。メディアサーバ１Ａは、端末１０～５０との間でP2P接続を確立している。
【0018】
合成部１２は、端末１０～５０の一部又はすべてから受信したメディアデータを合成する。例えば、合成部１２は、SFUの方式に従い、受信したメディアデータをレンダリングの技術を用いて合成できる。具体的には、合成部１２、端末１０～５０の各ユーザを撮影した映像データを表示サイズや表示レイアウト等を調整してまとめてメディアデータを合成済みメディアデータ（実太線矢印）として生成できる。送受信部１１は、合成済みメディアデータを端末１０～５０に送信できる。
【0019】
設定部１３は、メディアデータ及び合成メディアデータを端末１０～５０に送信する際のルールを示す設定情報を保持する。送受信部１１は、設定情報に基づいて、メディアデータ及び合成済みメディアデータを端末１０～５０に送信できる。設定情報は、端末１０～５０の各々に対して用意できる。よって、送受信部１１は、端末１０～５０の各々に対して、異なるメディアデータや、異なる合成メディアデータを送信できる。また、設定部１３は、端末１０～５０の各々から設定情報を受信（取得）する。
【0020】
例えば、合成部１２は、受信したすべての端末１０～５０のメディアデータを合成済みメディアデータとして合成できる。また、例えば、合成部１２は、合成済みメディアデータの送信先となる端末を除くすべての端末から受信したメディアデータを合成済みメディアデータとして合成できる。
【0021】
送受信部１１は、合成済みメディアデータを希望する（要求する）端末１０～５０に対し、１つのP2P接続で合成済みメディアデータを送信できる。このとき、端末１０～５０はそれぞれ、合成済みメディアデータの要求と併せて、特定のメディアデータをメディアサーバ１Ａに要求することができる。「特定のメディアデータ」とは、例えば、要求を行う端末以外の端末からメディアサーバ１Ａが取得するメディアデータであるが、これに限定されない。設定部１３は、端末１０～５０の各々が合成済みメディアデータ及び特定のメディアデータを要求する際の要求内容を設定情報として端末１０～５０ごとに保持できる。設定情報は、要求を満たすのに必要となるP2P接続の確立を示す情報も含む。そのため、メディアサーバ１Ａは、要求（希望）の対象となる合成済みメディアデータや、要求（希望）の対象となる特定のメディアデータを、要求（希望）をした端末１０～５０に個別に送信できる。
【0022】
図２は、第１実施形態におけるメディアデータ及び合成済みメディアデータの送受信の説明図である。メディアデータ及び合成済みメディアデータが、図２に示すように送受信されていたとする。
具体的には、スマートフォン１０は、自身のメディアデータをメディアサーバ１Ａに送信する。また、スマートフォン１０は、ＰＣ２０、ネットワークカメラ３０、及び外部端末５０の各々のメディアデータを合成部１２で合成した合成済みメディアデータをメディアサーバ１Ａから受信する（特定のメディアデータの受信は無い）。
ＰＣ２０は、自身のメディアデータをメディアサーバ１Ａに送信する。また、ＰＣ２０は、スマートフォン１０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々から各自のメディアデータを受信する（合成済みメディアデータの受信は無い）。
ネットワークカメラ３０は、自身のメディアデータをメディアサーバ１Ａに送信する（特定のメディアデータの受信も合成済みメディアデータの受信も無い）。
その他端末４０は、自身のメディアデータをメディアサーバ１Ａに送信する。また、その他端末４０は、ＰＣ２０からＰＣ２０のメディアデータを受信する（合成済みメディアデータの受信は無い）。
外部端末５０は、自身のメディアデータをメディアサーバ１Ａに送信する。また、外部端末５０は、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、及びその他端末４０の各々のメディアデータを合成部１２で合成した合成済みメディアデータをメディアサーバ１Ａから受信する（特定のメディアデータの受信は無い）。
具体的には、スマートフォン１０は、自身のメディアデータをメディアサーバ１Ａに送信する。また、スマートフォン１０は、ＰＣ２０、ネットワークカメラ３０、及び外部端末５０の各々のメディアデータを合成部１２で合成した合成済みメディアデータをメディアサーバ１Ａから受信する（特定のメディアデータの受信は無い）。
ＰＣ２０は、自身のメディアデータをメディアサーバ１Ａに送信する。また、ＰＣ２０は、スマートフォン１０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々から各自のメディアデータを受信する（合成済みメディアデータの受信は無い）。
ネットワークカメラ３０は、自身のメディアデータをメディアサーバ１Ａに送信する（特定のメディアデータの受信も合成済みメディアデータの受信も無い）。
その他端末４０は、自身のメディアデータをメディアサーバ１Ａに送信する。また、その他端末４０は、ＰＣ２０からＰＣ２０のメディアデータを受信する（合成済みメディアデータの受信は無い）。
外部端末５０は、自身のメディアデータをメディアサーバ１Ａに送信する。また、外部端末５０は、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、及びその他端末４０の各々のメディアデータを合成部１２で合成した合成済みメディアデータをメディアサーバ１Ａから受信する（特定のメディアデータの受信は無い）。
【0023】
図２の場合、設定部１３は、スマートフォン１０から設定情報を事前に取得している。スマートフォン１０からの設定情報には、ＰＣ２０、ネットワークカメラ３０、及び外部端末５０の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、スマートフォン１０からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ａを介したスマートフォン１０と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ａは、スマートフォン１０からの設定情報に基づいて、合成部１２に合成済みメディアデータを合成させ、スマートフォン１０に送信する。
また、設定部１３は、ＰＣ２０から設定情報を事前に取得している。ＰＣ２０からの設定情報には、スマートフォン１０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々のメディアデータの要求が含まれている。また、ＰＣ２０からの設定情報には、メディアサーバ１Ａを介したＰＣ２０と、スマートフォン１０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ａは、ＰＣ２０からの設定情報に基づいて、スマートフォン１０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々のメディアデータをＰＣ２０に送信する。
また、設定部１３は、ネットワークカメラ３０から設定情報を事前に取得している。ネットワークカメラ３０からの設定情報には、合成済みメディアデータの要求も他の端末に関するメディアデータの要求も無い。また、ネットワークカメラ３０からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ａを介したネットワークカメラ３０と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ａは、ネットワークカメラ３０からの設定情報に基づいて、ネットワークカメラ３０に合成済みメディアデータも他の端末に関するメディアデータも送信しない。
また、設定部１３は、その他端末４０から設定情報を事前に取得している。その他端末４０からの設定情報には、ＰＣ２０のメディアデータの要求が含まれている。また、その他端末４０からの設定情報には、メディアサーバ１Ａを介したその他端末４０と、ＰＣ２０とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ａは、その他端末４０からの設定情報に基づいて、ＰＣ２０のメディアデータをＰＣ２０に送信する。
また、設定部１３は、外部端末５０から設定情報を事前に取得している。外部端末５０からの設定情報には、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、及びその他端末４０の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、外部端末５０からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ａを介した外部端末５０と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ａは、外部端末５０からの設定情報に基づいて、合成部１２に合成済みメディアデータを合成させ、外部端末５０に送信する。
また、設定部１３は、ＰＣ２０から設定情報を事前に取得している。ＰＣ２０からの設定情報には、スマートフォン１０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々のメディアデータの要求が含まれている。また、ＰＣ２０からの設定情報には、メディアサーバ１Ａを介したＰＣ２０と、スマートフォン１０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ａは、ＰＣ２０からの設定情報に基づいて、スマートフォン１０、ネットワークカメラ３０、その他端末４０、及び外部端末５０の各々のメディアデータをＰＣ２０に送信する。
また、設定部１３は、ネットワークカメラ３０から設定情報を事前に取得している。ネットワークカメラ３０からの設定情報には、合成済みメディアデータの要求も他の端末に関するメディアデータの要求も無い。また、ネットワークカメラ３０からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ａを介したネットワークカメラ３０と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ａは、ネットワークカメラ３０からの設定情報に基づいて、ネットワークカメラ３０に合成済みメディアデータも他の端末に関するメディアデータも送信しない。
また、設定部１３は、その他端末４０から設定情報を事前に取得している。その他端末４０からの設定情報には、ＰＣ２０のメディアデータの要求が含まれている。また、その他端末４０からの設定情報には、メディアサーバ１Ａを介したその他端末４０と、ＰＣ２０とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ａは、その他端末４０からの設定情報に基づいて、ＰＣ２０のメディアデータをＰＣ２０に送信する。
また、設定部１３は、外部端末５０から設定情報を事前に取得している。外部端末５０からの設定情報には、スマートフォン１０、ＰＣ２０、ネットワークカメラ３０、及びその他端末４０の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、外部端末５０からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ａを介した外部端末５０と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ａは、外部端末５０からの設定情報に基づいて、合成部１２に合成済みメディアデータを合成させ、外部端末５０に送信する。
【0024】
＜効果＞
第１実施形態によれば、SFU機能を持つメディアサーバ１Ａに対して、合成部１２としてのメディア合成機能を取り入れることで、従来のSFUによるメディアデータの通信に加えて、P2Pの接続数やトラフィック量を抑えつつ、複数の映像や音声を含んだメディアデータの通信を行うことが可能となる。
第１実施形態によれば、SFU機能を持つメディアサーバ１Ａに対して、合成部１２としてのメディア合成機能を取り入れることで、従来のSFUによるメディアデータの通信に加えて、P2Pの接続数やトラフィック量を抑えつつ、複数の映像や音声を含んだメディアデータの通信を行うことが可能となる。
【0025】
加えて、メディアサーバ１ＡをWebRTCやSIP（Session Initiation Protocol）などといった複数の通信プロトコルに対応させることで、従来のSFUでは接続できないWebRTCのマルチチャネル未対応であるSIP端末などの端末を、メディアサーバ１Ａに収容できる。また、WebRTCのマルチチャネル未対応の端末には、合成したメディアデータを送信することで、複数の映像や音声を含んだメディアデータの通信を行うことが可能となる。具体的には、メディアサーバ１ＡにWebRTCゲートウェイを実装するとよい。また、その他端末４０をWebRTCのマルチチャネル未対応であるSIP端末とした場合、WebRTCゲートウェイとSIP端末との間で、SIP⇔JSEP（JavaScript Session Establishment Protocol）といった制御信号のプロトコル変換を行うとよい。また、RTP(Real-time Transport Protocol)⇔SRTP(Secure Real-time Transport Protocol)/RTCP-mux(RTP Control Protocol-mux)といったメディア（音声／映像／テキスト等）のプロトコル変換を行うとよい。このメディアのプロトコル変換では、RTPパケットとRTCPパケットとの分離が、RTPパケットとRTCPパケットとの多重化に置き換わったり、その逆が行われたりする。
【0026】
［第２実施形態］
第２実施形態の説明の際、第１実施形態と相違する点について主に説明し、重複する点については説明を省略する。第２実施形態では、第１実施形態で示したクライアント端末に対する合成したメディアデータの通信だけではなく、メディアサーバ１同士の通信を行うことができるものとする。
第２実施形態の説明の際、第１実施形態と相違する点について主に説明し、重複する点については説明を省略する。第２実施形態では、第１実施形態で示したクライアント端末に対する合成したメディアデータの通信だけではなく、メディアサーバ１同士の通信を行うことができるものとする。
【0027】
＜構成＞
図３は、第２実施形態におけるビデオ会議システムの機能構成図である。図３に示すように、ビデオ会議システム１００Ｂ（１００）は、メディアサーバ１Ｂ（１），１Ｃ（１）と、端末６１～６６とを備えている。メディアサーバ１Ｂ，１Ｃ、及び端末６１～６６は、通信可能に接続されている。特に、端末６１～６３がメディアサーバ１Ｂに接続しており通信可能である。また、メディアサーバ１Ｂ，１Ｃ同士が接続しており通信可能である。また、端末６４～６６がメディアサーバ１Ｃに接続しており通信可能である。
図３は、第２実施形態におけるビデオ会議システムの機能構成図である。図３に示すように、ビデオ会議システム１００Ｂ（１００）は、メディアサーバ１Ｂ（１），１Ｃ（１）と、端末６１～６６とを備えている。メディアサーバ１Ｂ，１Ｃ、及び端末６１～６６は、通信可能に接続されている。特に、端末６１～６３がメディアサーバ１Ｂに接続しており通信可能である。また、メディアサーバ１Ｂ，１Ｃ同士が接続しており通信可能である。また、端末６４～６６がメディアサーバ１Ｃに接続しており通信可能である。
【0028】
端末６１～６６は、メディアデータを処理してビデオ会議を行うクライアント端末である。端末６１～６６は、端末１０～５０と同等の機能を有する。
メディアサーバ１Ｂ，１Ｃは、SFUサーバである。メディアサーバ１Ｂ，１Ｃは、メディアサーバ１Ａと同等の機能を有する。図３に示すように、メディアサーバ１Ｂは、送受信部１１ｂと、合成部１２ｂと、設定部１３ｂとを備えている。送受信部１１ｂ、合成部１２ｂ、及び設定部１３ｂはそれぞれ、メディアサーバ１Ａの送受信部１１、合成部１２、及び設定部１３の各々と同等の機能を有する。また、メディアサーバ１Ｃは、送受信部１１ｃと、合成部１２ｃと、設定部１３ｃとを備えている。送受信部１１ｃ、合成部１２ｃ、及び設定部１３ｃはそれぞれ、メディアサーバ１Ａの送受信部１１、合成部１２、及び設定部１３の各々と同等の機能を有する。
図３に示すように、メディアサーバ１Ｂ，１Ｃが特定のメディアデータや合成済みメディアデータをやり取り可能な、冗長構成のビデオ会議システムを実装できる。ここで、設定部１３ｂ，１３ｃは、設定部１３ｂ，１３ｃの各々が保持する情報を共有することが好ましい。これにより、メディアサーバ１Ｂは、メディアサーバ１Ｃ側の設定情報を取得でき、メディアサーバ１Ｃに接続している端末６４～６６からの要求を満たすようにメディアデータ及び合成済みメディアデータを送受信できる。また、メディアサーバ１Ｃは、メディアサーバ１Ｂ側の設定情報を取得でき、メディアサーバ１Ｂに接続している端末６１～６３からの要求を満たすようにメディアデータ及び合成済みメディアデータを送受信できる。
メディアサーバ１Ｂ，１Ｃは、SFUサーバである。メディアサーバ１Ｂ，１Ｃは、メディアサーバ１Ａと同等の機能を有する。図３に示すように、メディアサーバ１Ｂは、送受信部１１ｂと、合成部１２ｂと、設定部１３ｂとを備えている。送受信部１１ｂ、合成部１２ｂ、及び設定部１３ｂはそれぞれ、メディアサーバ１Ａの送受信部１１、合成部１２、及び設定部１３の各々と同等の機能を有する。また、メディアサーバ１Ｃは、送受信部１１ｃと、合成部１２ｃと、設定部１３ｃとを備えている。送受信部１１ｃ、合成部１２ｃ、及び設定部１３ｃはそれぞれ、メディアサーバ１Ａの送受信部１１、合成部１２、及び設定部１３の各々と同等の機能を有する。
図３に示すように、メディアサーバ１Ｂ，１Ｃが特定のメディアデータや合成済みメディアデータをやり取り可能な、冗長構成のビデオ会議システムを実装できる。ここで、設定部１３ｂ，１３ｃは、設定部１３ｂ，１３ｃの各々が保持する情報を共有することが好ましい。これにより、メディアサーバ１Ｂは、メディアサーバ１Ｃ側の設定情報を取得でき、メディアサーバ１Ｃに接続している端末６４～６６からの要求を満たすようにメディアデータ及び合成済みメディアデータを送受信できる。また、メディアサーバ１Ｃは、メディアサーバ１Ｂ側の設定情報を取得でき、メディアサーバ１Ｂに接続している端末６１～６３からの要求を満たすようにメディアデータ及び合成済みメディアデータを送受信できる。
【0029】
図４は、第２実施形態におけるメディアデータ及び合成済みメディアデータの送受信の説明図である。メディアデータ及び合成済みメディアデータが、図４に示すように送受信されていたとする。なお、図示の便宜上、送受信部１１ｂ，１１ｃ、及び設定部１３ｂ，１３ｃの図示は省略する。
【0030】
具体的には、端末６１は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６１は、端末６４～６６の各々のメディアデータを合成部１２ｃで合成した合成済みメディアデータを、メディアサーバ１Ｃを介して、メディアサーバ１Ｂから受信する。また、端末６１は、端末６２，６３の各々から各自のメディアデータをメディアサーバ１Ｂから受信する。
端末６２は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６２は、端末６１，６３の各々のメディアデータを合成部１２ｂで合成した合成済みメディアデータをメディアサーバ１Ｂから受信する（特定のメディアデータの受信は無い）。
端末６３は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６３は、端末６５から自身のメディアデータを、メディアサーバ１Ｃを介して、メディアサーバ１Ｂから受信する。
端末６２は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６２は、端末６１，６３の各々のメディアデータを合成部１２ｂで合成した合成済みメディアデータをメディアサーバ１Ｂから受信する（特定のメディアデータの受信は無い）。
端末６３は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６３は、端末６５から自身のメディアデータを、メディアサーバ１Ｃを介して、メディアサーバ１Ｂから受信する。
【0031】
端末６４は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６４は、端末６１～６３の各々のメディアデータを合成部１２ｂで合成した合成済みメディアデータを、メディアサーバ１Ｂを介して、メディアサーバ１Ｃから受信する。また、端末６４は、端末６５，６６の各々から各自のメディアデータをメディアサーバ１Ｃから受信する。
端末６５は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６５は、端末６４，６６の各々のメディアデータを合成部１２ｃで合成した合成済みメディアデータをメディアサーバ１Ｃから受信する（特定のメディアデータの受信は無い）。
端末６６は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６６は、端末６２から自身のメディアデータを、メディアサーバ１Ｂを介して、メディアサーバ１Ｃから受信する。
端末６５は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６５は、端末６４，６６の各々のメディアデータを合成部１２ｃで合成した合成済みメディアデータをメディアサーバ１Ｃから受信する（特定のメディアデータの受信は無い）。
端末６６は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６６は、端末６２から自身のメディアデータを、メディアサーバ１Ｂを介して、メディアサーバ１Ｃから受信する。
【0032】
図４の場合、設定部１３ｂは、端末６１から設定情報を事前に取得している。端末６１からの設定情報には、端末６４～６６の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６１からの設定情報には、端末６２，６３の各々のメディアデータの要求が含まれている。また、端末６１からの設定情報には、メディアサーバ１Ｂを介した端末６２，６３の各々とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｂは、端末６１からの設定情報に基づいて、メディアサーバ１Ｃの合成部１２ｃに合成済みメディアデータを合成させ、メディアサーバ１Ｃから受信した合成済みメディアデータを端末６１に送信する。また、メディアサーバ１Ｂは、端末６１からの設定情報に基づいて、端末６２，６３の各々のメディアデータを端末６１に送信する。
また、設定部１３ｂは、端末６２から設定情報を事前に取得している。端末６２からの設定情報には、端末６１，６３の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６２からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ｂを介した端末６２と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ｂは、端末６２からの設定情報に基づいて、合成部１２ｂに合成済みメディアデータを合成させ、端末６２に送信する。
また、設定部１３ｂは、端末６３から設定情報を事前に取得している。端末６３からの設定情報には、端末６５のメディアデータの要求が含まれている。また、端末６３からの設定情報には、メディアサーバ１Ｂ及びメディアサーバ１Ｃを介した端末６３と、端末６５とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｂは、端末６３からの設定情報に基づいて、メディアサーバ１Ｃから受信した、端末６５のメディアデータを端末６３に送信する。
また、設定部１３ｂは、端末６２から設定情報を事前に取得している。端末６２からの設定情報には、端末６１，６３の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６２からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ｂを介した端末６２と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ｂは、端末６２からの設定情報に基づいて、合成部１２ｂに合成済みメディアデータを合成させ、端末６２に送信する。
また、設定部１３ｂは、端末６３から設定情報を事前に取得している。端末６３からの設定情報には、端末６５のメディアデータの要求が含まれている。また、端末６３からの設定情報には、メディアサーバ１Ｂ及びメディアサーバ１Ｃを介した端末６３と、端末６５とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｂは、端末６３からの設定情報に基づいて、メディアサーバ１Ｃから受信した、端末６５のメディアデータを端末６３に送信する。
【0033】
また、設定部１３ｃは、端末６４から設定情報を事前に取得している。端末６４からの設定情報には、端末６１～６３の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６４からの設定情報には、端末６５，６６の各々のメディアデータの要求が含まれている。また、端末６４からの設定情報には、メディアサーバ１Ｃを介した端末６５，６６の各々とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｃは、端末６４からの設定情報に基づいて、メディアサーバ１Ｂの合成部１２ｂに合成済みメディアデータを合成させ、メディアサーバ１Ｂから受信した合成済みメディアデータを端末６４に送信する。また、メディアサーバ１Ｃは、端末６４からの設定情報に基づいて、端末６５，６６の各々のメディアデータを端末６４に送信する。
また、設定部１３ｃは、端末６５から設定情報を事前に取得している。端末６５からの設定情報には、端末６４，６６の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６５からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ｃを介した端末６５と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ｃは、端末６５からの設定情報に基づいて、合成部１２ｃに合成済みメディアデータを合成させ、端末６５に送信する。
また、設定部１３ｃは、端末６６から設定情報を事前に取得している。端末６６からの設定情報には、端末６２のメディアデータの要求が含まれている。また、端末６６からの設定情報には、メディアサーバ１Ｃ及びメディアサーバ１Ｂを介した端末６６と、端末６２とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｃは、端末６６からの設定情報に基づいて、メディアサーバ１Ｂから受信した、端末６２のメディアデータを端末６５に送信する。
また、設定部１３ｃは、端末６５から設定情報を事前に取得している。端末６５からの設定情報には、端末６４，６６の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６５からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ｃを介した端末６５と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ｃは、端末６５からの設定情報に基づいて、合成部１２ｃに合成済みメディアデータを合成させ、端末６５に送信する。
また、設定部１３ｃは、端末６６から設定情報を事前に取得している。端末６６からの設定情報には、端末６２のメディアデータの要求が含まれている。また、端末６６からの設定情報には、メディアサーバ１Ｃ及びメディアサーバ１Ｂを介した端末６６と、端末６２とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｃは、端末６６からの設定情報に基づいて、メディアサーバ１Ｂから受信した、端末６２のメディアデータを端末６５に送信する。
【0034】
＜効果＞
第２実施形態によれば、第１実施形態と同様の効果を奏する。また、第２実施形態によれば、メディアサーバ１同士での通信を行えるようにすることで、拠点間でのテレビ会議におけて、トラフィック量を抑えつつ、複数の映像や音声を含んだメディアデータの通信を行うことが可能となる。また、複数のメディアサーバ１でビデオ会議システムを構成することにより、１つ、ないし、複数のメディアサーバ１に、特定のメディアデータを集約することが可能となる。
第２実施形態によれば、第１実施形態と同様の効果を奏する。また、第２実施形態によれば、メディアサーバ１同士での通信を行えるようにすることで、拠点間でのテレビ会議におけて、トラフィック量を抑えつつ、複数の映像や音声を含んだメディアデータの通信を行うことが可能となる。また、複数のメディアサーバ１でビデオ会議システムを構成することにより、１つ、ないし、複数のメディアサーバ１に、特定のメディアデータを集約することが可能となる。
【0035】
［第３実施形態］
第３実施形態の説明の際、第１、第２実施形態と相違する点について主に説明し、重複する点については説明を省略する。第３実施形態では、複数のメディアサーバ１で合成した合成済みメディアデータ同士をさらに合成した合成済みメディアデータをクライアント端末に送信することを特徴とする。
第３実施形態の説明の際、第１、第２実施形態と相違する点について主に説明し、重複する点については説明を省略する。第３実施形態では、複数のメディアサーバ１で合成した合成済みメディアデータ同士をさらに合成した合成済みメディアデータをクライアント端末に送信することを特徴とする。
【0036】
＜構成＞
図５は、第３実施形態におけるビデオ会議システムの機能構成図である。図５に示すように、ビデオ会議システム１００Ｃ（１００）は、第２実施形態のメディアサーバ１Ｂ（１），１Ｃ（１）と、端末６１～６６とを備えており、さらに、メディアサーバ１Ｄ（１）を備えている。メディアサーバ１Ｂ～１Ｄ、及び端末６１～６６は、通信可能に接続されている。特に、端末６１～６３がメディアサーバ１Ｂに接続しており通信可能である。また、メディアサーバ１Ｂ，１Ｄ同士が接続しており通信可能である。また、メディアサーバ１Ｃ，１Ｄ同士が接続しており通信可能である。また、端末６４～６６がメディアサーバ１Ｃに接続しており通信可能である。
図５は、第３実施形態におけるビデオ会議システムの機能構成図である。図５に示すように、ビデオ会議システム１００Ｃ（１００）は、第２実施形態のメディアサーバ１Ｂ（１），１Ｃ（１）と、端末６１～６６とを備えており、さらに、メディアサーバ１Ｄ（１）を備えている。メディアサーバ１Ｂ～１Ｄ、及び端末６１～６６は、通信可能に接続されている。特に、端末６１～６３がメディアサーバ１Ｂに接続しており通信可能である。また、メディアサーバ１Ｂ，１Ｄ同士が接続しており通信可能である。また、メディアサーバ１Ｃ，１Ｄ同士が接続しており通信可能である。また、端末６４～６６がメディアサーバ１Ｃに接続しており通信可能である。
【0037】
メディアサーバ１Ｄは、SFUサーバである。メディアサーバ１Ｄは、メディアサーバ１Ａと同等の機能を有する。図５に示すように、メディアサーバ１Ｄは、送受信部１１ｄと、合成部１２ｄと、設定部１３ｄとを備えている。送受信部１１ｄ、合成部１２ｄ、及び設定部１３ｄはそれぞれ、メディアサーバ１Ａの送受信部１１、合成部１２、及び設定部１３の各々と同等の機能を有する。
図５に示すように、メディアサーバ１Ｂ～１Ｄが特定のメディアデータや合成済みメディアデータをやり取り可能な、冗長構成のビデオ会議システムを実装できる。ここで、設定部１３ｂ～１３ｄは、設定部１３ｂ～１３ｄの各々が保持する情報を共有することが好ましい。これにより、メディアサーバ１Ｂは、メディアサーバ１Ｃ，１Ｄ側の設定情報を取得でき、メディアサーバ１Ｃに接続している端末６４～６６からの要求を満たすように特定のメディアデータ及び合成済みメディアデータを送受信できる。また、メディアサーバ１Ｃは、メディアサーバ１Ｂ，１Ｄ側の設定情報を取得でき、メディアサーバ１Ｂに接続している端末６１～６３からの要求を満たすように特定のメディアデータ及び合成済みメディアデータを送受信できる。また、メディアサーバ１Ｄは、メディアサーバ１Ｂ，１Ｃ側の設定情報を取得でき、端末６１～６６からの要求を満たすように特定のメディアデータ及び合成済みメディアデータを、メディアサーバ１Ｂ，１Ｃの各々との間で送受信できる。
図５に示すように、メディアサーバ１Ｂ～１Ｄが特定のメディアデータや合成済みメディアデータをやり取り可能な、冗長構成のビデオ会議システムを実装できる。ここで、設定部１３ｂ～１３ｄは、設定部１３ｂ～１３ｄの各々が保持する情報を共有することが好ましい。これにより、メディアサーバ１Ｂは、メディアサーバ１Ｃ，１Ｄ側の設定情報を取得でき、メディアサーバ１Ｃに接続している端末６４～６６からの要求を満たすように特定のメディアデータ及び合成済みメディアデータを送受信できる。また、メディアサーバ１Ｃは、メディアサーバ１Ｂ，１Ｄ側の設定情報を取得でき、メディアサーバ１Ｂに接続している端末６１～６３からの要求を満たすように特定のメディアデータ及び合成済みメディアデータを送受信できる。また、メディアサーバ１Ｄは、メディアサーバ１Ｂ，１Ｃ側の設定情報を取得でき、端末６１～６６からの要求を満たすように特定のメディアデータ及び合成済みメディアデータを、メディアサーバ１Ｂ，１Ｃの各々との間で送受信できる。
【0038】
図６は、第３実施形態における特定のメディアデータ及び合成済みメディアデータの送受信の説明図である。特定のメディアデータ及び合成済みメディアデータが、図６に示すように送受信されていたとする。なお、図示の便宜上、送受信部１１ｂ～１１ｄ、及び設定部１３ｂ～１３ｄの図示は省略する。
【0039】
具体的には、端末６１は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６１は、端末６４～６６の各々のメディアデータを合成部１２ｃで合成した合成済みメディアデータを、メディアサーバ１Ｃ，１Ｄを介して、メディアサーバ１Ｂから受信する。また、端末６１は、端末６２，６３の各々から各自のメディアデータをメディアサーバ１Ｂから受信する。
端末６２は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６２は、端末６１，６３の各々のメディアデータをメディアサーバ１Ｂの合成部１２ｂで合成した合成済みメディアデータ、及び端末６４～６６の各々のメディアデータをメディアサーバ１Ｃの合成部１２ｃで合成した合成済みメディアデータを、メディアサーバ１Ｄの合成部１２ｄでさらに合成した合成済みメディアデータを、メディアサーバ１Ｄを介して、メディアサーバ１Ｂから受信する（特定のメディアデータの受信は無い）。
端末６３は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６３は、端末６５から自身のメディアデータを、メディアサーバ１Ｃ，１Ｄを介して、メディアサーバ１Ｂから受信する。
端末６２は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６２は、端末６１，６３の各々のメディアデータをメディアサーバ１Ｂの合成部１２ｂで合成した合成済みメディアデータ、及び端末６４～６６の各々のメディアデータをメディアサーバ１Ｃの合成部１２ｃで合成した合成済みメディアデータを、メディアサーバ１Ｄの合成部１２ｄでさらに合成した合成済みメディアデータを、メディアサーバ１Ｄを介して、メディアサーバ１Ｂから受信する（特定のメディアデータの受信は無い）。
端末６３は、自身のメディアデータをメディアサーバ１Ｂに送信する。また、端末６３は、端末６５から自身のメディアデータを、メディアサーバ１Ｃ，１Ｄを介して、メディアサーバ１Ｂから受信する。
【0040】
端末６４は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６４は、端末６１、６３の各々のメディアデータを合成部１２ｂで合成した合成済みメディアデータを、メディアサーバ１Ｂ，１Ｄを介して、メディアサーバ１Ｃから受信する。また、端末６４は、端末６５，６６の各々から各自のメディアデータをメディアサーバ１Ｃから受信する。
端末６５は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６５は、端末６４，６６の各々のメディアデータを合成部１２ｃで合成した合成済みメディアデータをメディアサーバ１Ｃから受信する（特定のメディアデータの受信は無い）。
端末６６は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６６は、端末６２から自身のメディアデータを、メディアサーバ１Ｂ，１Ｄを介して、メディアサーバ１Ｃから受信する。
端末６５は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６５は、端末６４，６６の各々のメディアデータを合成部１２ｃで合成した合成済みメディアデータをメディアサーバ１Ｃから受信する（特定のメディアデータの受信は無い）。
端末６６は、自身のメディアデータをメディアサーバ１Ｃに送信する。また、端末６６は、端末６２から自身のメディアデータを、メディアサーバ１Ｂ，１Ｄを介して、メディアサーバ１Ｃから受信する。
【0041】
図６の場合、設定部１３ｂは、端末６１から設定情報を事前に取得している。端末６１からの設定情報には、端末６４～６６の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６１からの設定情報には、端末６２，６３の各々のメディアデータの要求が含まれている。また、端末６１からの設定情報には、メディアサーバ１Ｂを介した端末６２，６３の各々とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｂは、端末６１からの設定情報に基づいて、メディアサーバ１Ｃの合成部１２ｃに合成済みメディアデータを合成させ、メディアサーバ１Ｄを介してメディアサーバ１Ｃから受信した合成済みメディアデータを端末６１に送信する。また、メディアサーバ１Ｂは、端末６１からの設定情報に基づいて、端末６２，６３の各々のメディアデータを端末６１に送信する。
また、設定部１３ｂは、端末６２から設定情報を事前に取得している。端末６２からの設定情報には、端末６１、６３、端末６４～６６の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６２からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ｂを介した端末６２と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ｂは、端末６２からの設定情報に基づいて、メディアサーバ１Ｄの合成部１２ｄに合成済みメディアデータを合成させ、端末６２に送信する。
また、設定部１３ｂは、端末６３から設定情報を事前に取得している。端末６３からの設定情報には、端末６５のメディアデータの要求が含まれている。また、端末６３からの設定情報には、メディアサーバ１Ｂ、メディアサーバ１Ｄ及びメディアサーバ１Ｃを介した端末６３と、端末６５とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｂは、端末６３からの設定情報に基づいて、メディアサーバ１Ｄを介してメディアサーバ１Ｃから受信した、端末６５のメディアデータを端末６３に送信する。
また、設定部１３ｂは、端末６２から設定情報を事前に取得している。端末６２からの設定情報には、端末６１、６３、端末６４～６６の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６２からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ｂを介した端末６２と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ｂは、端末６２からの設定情報に基づいて、メディアサーバ１Ｄの合成部１２ｄに合成済みメディアデータを合成させ、端末６２に送信する。
また、設定部１３ｂは、端末６３から設定情報を事前に取得している。端末６３からの設定情報には、端末６５のメディアデータの要求が含まれている。また、端末６３からの設定情報には、メディアサーバ１Ｂ、メディアサーバ１Ｄ及びメディアサーバ１Ｃを介した端末６３と、端末６５とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｂは、端末６３からの設定情報に基づいて、メディアサーバ１Ｄを介してメディアサーバ１Ｃから受信した、端末６５のメディアデータを端末６３に送信する。
【0042】
また、設定部１３ｃは、端末６４から設定情報を事前に取得している。端末６４からの設定情報には、端末６１、６３の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６４からの設定情報には、端末６５，６６の各々のメディアデータの要求が含まれている。また、端末６４からの設定情報には、メディアサーバ１Ｃを介した端末６５，６６の各々とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｃは、端末６４からの設定情報に基づいて、メディアサーバ１Ｂの合成部１２ｂに合成済みメディアデータを合成させ、メディアサーバ１Ｄを介してメディアサーバ１Ｂから受信した合成済みメディアデータを端末６４に送信する。また、メディアサーバ１Ｃは、端末６４からの設定情報に基づいて、端末６５，６６の各々のメディアデータを端末６４に送信する。
また、設定部１３ｃは、端末６５から設定情報を事前に取得している。端末６５からの設定情報には、端末６４，６６の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６５からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ｃを介した端末６５と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ｃは、端末６５からの設定情報に基づいて、合成部１２ｃに合成済みメディアデータを合成させ、端末６５に送信する。
また、設定部１３ｃは、端末６６から設定情報を事前に取得している。端末６６からの設定情報には、端末６２のメディアデータの要求が含まれている。また、端末６６からの設定情報には、メディアサーバ１Ｃ、メディアサーバ１Ｄ及びメディアサーバ１Ｂを介した端末６６と、端末６２とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｃは、端末６６からの設定情報に基づいて、メディアサーバ１Ｄを介してメディアサーバ１Ｂから受信した、端末６２のメディアデータを端末６５に送信する。
また、設定部１３ｃは、端末６５から設定情報を事前に取得している。端末６５からの設定情報には、端末６４，６６の各々のメディアデータを合成した合成済みメディアデータの要求が含まれている。また、端末６５からの設定情報には、他の端末に関するメディアデータの要求は無いため、メディアサーバ１Ｃを介した端末６５と他の端末とのP2P接続の確立を示す情報は無い。メディアサーバ１Ｃは、端末６５からの設定情報に基づいて、合成部１２ｃに合成済みメディアデータを合成させ、端末６５に送信する。
また、設定部１３ｃは、端末６６から設定情報を事前に取得している。端末６６からの設定情報には、端末６２のメディアデータの要求が含まれている。また、端末６６からの設定情報には、メディアサーバ１Ｃ、メディアサーバ１Ｄ及びメディアサーバ１Ｂを介した端末６６と、端末６２とのP2P接続の確立を示す情報が含まれている。メディアサーバ１Ｃは、端末６６からの設定情報に基づいて、メディアサーバ１Ｄを介してメディアサーバ１Ｂから受信した、端末６２のメディアデータを端末６５に送信する。
【0043】
＜効果＞
第３実施形態によれば、第１，第２実施形態と同様の効果を奏する。また、第３実施形態によれば、２段階で合成した合成済みデータをクライアント端末に送信できるため、ビデオ会議システムにおけるトラフィック量をさらに減少させることができる。
第３実施形態によれば、第１，第２実施形態と同様の効果を奏する。また、第３実施形態によれば、２段階で合成した合成済みデータをクライアント端末に送信できるため、ビデオ会議システムにおけるトラフィック量をさらに減少させることができる。
【0044】
［処理］
本実施形態の処理について説明する。図７は、メディアサーバが実行する処理を示すフローチャートである。まず、送受信部１１は、クライアント端末の各々から設定情報を取得する（ステップＳ１）。設定部１３は、取得した設定情報を保持する。次に、送受信部１１は、クライアント端末の各々から各自のメディアデータを取得する（ステップＳ２）。次に、合成部１２は、設定情報に基づいて、メディアデータを合成する（ステップＳ３）。最後に、送受信部１１は、合成済みメディアデータ及び特定のメディアデータをクライアント端末の各々に送信する（ステップＳ４）。クライアント端末の各ユーザは、希望した合成済みメディアデータ及び特定のメディアデータに基づく画面を視聴しつつ、他のクライアントのユーザとやり取りできる。
本実施形態の処理について説明する。図７は、メディアサーバが実行する処理を示すフローチャートである。まず、送受信部１１は、クライアント端末の各々から設定情報を取得する（ステップＳ１）。設定部１３は、取得した設定情報を保持する。次に、送受信部１１は、クライアント端末の各々から各自のメディアデータを取得する（ステップＳ２）。次に、合成部１２は、設定情報に基づいて、メディアデータを合成する（ステップＳ３）。最後に、送受信部１１は、合成済みメディアデータ及び特定のメディアデータをクライアント端末の各々に送信する（ステップＳ４）。クライアント端末の各ユーザは、希望した合成済みメディアデータ及び特定のメディアデータに基づく画面を視聴しつつ、他のクライアントのユーザとやり取りできる。
【0045】
［特許請求の範囲との関係］
端末１０～５０，６１～６６はそれぞれ、特許請求の範囲の「複数の装置」、「第１の装置」、「第２の装置」、「第３の装置」に相当する。
メディアデータは、特許請求の範囲の「第１メディアの情報」、「第２メディアの情報」、「第３のメディア情報」に相当する。
合成済みメディアデータは、特許請求の範囲の「第４メディアの情報」、「第５メディアの情報」、「第６メディアの情報」、「第７メディアの情報」に相当する。
設定部１３，１３ｂ～１３ｄが保持する設定情報は、特許請求の範囲の「第２の設定情報」、「第３の設定情報」に相当する。
メディアサーバ１，１Ａ～１Ｄはそれぞれ、特許請求の範囲の「処理装置」に相当する。
送受信部１１，１１ｂ～１１ｄはそれぞれ、特許請求の範囲の「第１の処理部」、「第２の処理部」、「第４の処理部」に相当する。
合成部１２，１２ｂ～１２ｄはそれぞれ、特許請求の範囲の「第３の処理部」に相当する。
端末１０～５０，６１～６６はそれぞれ、特許請求の範囲の「複数の装置」、「第１の装置」、「第２の装置」、「第３の装置」に相当する。
メディアデータは、特許請求の範囲の「第１メディアの情報」、「第２メディアの情報」、「第３のメディア情報」に相当する。
合成済みメディアデータは、特許請求の範囲の「第４メディアの情報」、「第５メディアの情報」、「第６メディアの情報」、「第７メディアの情報」に相当する。
設定部１３，１３ｂ～１３ｄが保持する設定情報は、特許請求の範囲の「第２の設定情報」、「第３の設定情報」に相当する。
メディアサーバ１，１Ａ～１Ｄはそれぞれ、特許請求の範囲の「処理装置」に相当する。
送受信部１１，１１ｂ～１１ｄはそれぞれ、特許請求の範囲の「第１の処理部」、「第２の処理部」、「第４の処理部」に相当する。
合成部１２，１２ｂ～１２ｄはそれぞれ、特許請求の範囲の「第３の処理部」に相当する。
【0046】
［付記］
なお、以上の実施形態の説明に関して、更に以下の付記を開示する。
（付記１）
本発明の第１の態様は、
複数の装置と接続される処理装置であって、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部と、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部と、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部と、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2P（Pier to Pier）にて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部と、
を備えることを特徴とする処理装置である。
（付記２）
本発明の第２の態様は、
前記処理装置としての第１処理装置と、前記処理装置としての第２処理装置が前記第１メディアの情報、前記第２メディアの情報、前記第３メディアの情報、及び前記第４メディアの情報を送受信する、第１の態様の処理装置である。
（付記３）
本発明の第３の態様は、
前記第１処理装置で生成した前記第４メディアの情報を第５メディアの情報とし、
前記第２処理装置で生成した前記第４メディアの情報を第６メディアの情報とした場合、
前記処理装置としての第３処理装置が、前記第１処理装置から受信した前記第５メディアの情報と、前記第２処理装置から受信した前記第６メディアの情報とを合成して第７メディアの情報を生成する、第２の態様の処理装置である。
（付記４）
本発明の第４の態様は、
前記第１の装置、前記第２の装置、及び前記第３の装置の少なくとも何れかが、WebRTC(Web Real-Time Communication)のマルチチャネル未対応の端末であり、
前記処理装置がWebRTCゲートウェイである、第１の態様から第３の態様の何れか１つの態様の処理装置。
（付記５）
本発明の第５の態様は、
複数の装置と接続される処理装置であって、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部と、
前記装置からメディアの情報を受信する第２の処理部と、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部と、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部と、
を備えることを特徴とする処理装置である。
なお、以上の実施形態の説明に関して、更に以下の付記を開示する。
（付記１）
本発明の第１の態様は、
複数の装置と接続される処理装置であって、
第２の装置から第２設定の情報を受信し、第３の装置から第３設定の情報を受信する第１の処理部と、
第１の装置から第１メディアの情報を受信し、前記第２の装置から第２メディアの情報を受信し、前記第３の装置から第３メディアの情報を受信する第２の処理部と、
前記第１メディアの情報と前記第２メディアの情報とを合成して第４メディアの情報を生成する第３の処理部と、
前記第２の装置に対して、前記第２設定の情報に基づいて、前記第１メディアの情報をP2P（Pier to Pier）にて送信し、前記第３メディアの情報をP2Pにて送信し、前記第３の装置に対して、前記第３設定の情報に基づいて、前記第４メディアの情報をP2Pにて送信する第４の処理部と、
を備えることを特徴とする処理装置である。
（付記２）
本発明の第２の態様は、
前記処理装置としての第１処理装置と、前記処理装置としての第２処理装置が前記第１メディアの情報、前記第２メディアの情報、前記第３メディアの情報、及び前記第４メディアの情報を送受信する、第１の態様の処理装置である。
（付記３）
本発明の第３の態様は、
前記第１処理装置で生成した前記第４メディアの情報を第５メディアの情報とし、
前記第２処理装置で生成した前記第４メディアの情報を第６メディアの情報とした場合、
前記処理装置としての第３処理装置が、前記第１処理装置から受信した前記第５メディアの情報と、前記第２処理装置から受信した前記第６メディアの情報とを合成して第７メディアの情報を生成する、第２の態様の処理装置である。
（付記４）
本発明の第４の態様は、
前記第１の装置、前記第２の装置、及び前記第３の装置の少なくとも何れかが、WebRTC(Web Real-Time Communication)のマルチチャネル未対応の端末であり、
前記処理装置がWebRTCゲートウェイである、第１の態様から第３の態様の何れか１つの態様の処理装置。
（付記５）
本発明の第５の態様は、
複数の装置と接続される処理装置であって、
少なくとも一つ以上の前記装置からメディアの情報の要求を受信し、設定の情報として保持させる第１の処理部と、
前記装置からメディアの情報を受信する第２の処理部と、
複数の前記装置から受信した前記メディアの情報を合成して、合成済みのメディアの情報を生成する第３の処理部と、
前記設定の情報に基づいて、前記メディアの情報及び前記合成済みのメディアの情報の一方又は双方を、P2P（Pier to Pier）にて前記装置に送信する第４の処理部と、
を備えることを特徴とする処理装置である。
【0047】
［変形例］
（ａ）：メディアサーバ１が合成済みデータを特定のクライアント端末に送信する場合、その合成済みデータを構成する各メディアデータの少なくとも１つを、合成済みデータとともにその特定のクライアント端末に送信してもよい。特定のクライアント端末のユーザは、合成済みメディアデータに基づく画面と、メディアデータに基づく画面を同時に視聴することができる。レンダリング処理によるメディアデータの合成は、多少なりとも画質の劣化を招く可能性がある。このため、合成済みメディアデータに基づく画面が不鮮明であった場合、同時に受信したメディアデータに基づく画面を視聴することで上記の不鮮明の問題を解消することができる。なお、特定のクライアント端末は、合成済みデータを構成するメディアデータの要求（希望）を含む設定情報をメディアサーバ１に送信する。例えば、設定情報の送信は、ビデオ会議が開始する前に行ってもよいし、受信した合成済みメディアデータに基づく画面が不鮮明であるとユーザが判定した時、つまりビデオ会議の開始後に行ってもよい。
（ｂ）：第３実施形態において、メディアサーバ１Ｂ，１Ｃ間でメディアデータや合成済みメディアデータをやり取りしてもよい。
（ａ）：メディアサーバ１が合成済みデータを特定のクライアント端末に送信する場合、その合成済みデータを構成する各メディアデータの少なくとも１つを、合成済みデータとともにその特定のクライアント端末に送信してもよい。特定のクライアント端末のユーザは、合成済みメディアデータに基づく画面と、メディアデータに基づく画面を同時に視聴することができる。レンダリング処理によるメディアデータの合成は、多少なりとも画質の劣化を招く可能性がある。このため、合成済みメディアデータに基づく画面が不鮮明であった場合、同時に受信したメディアデータに基づく画面を視聴することで上記の不鮮明の問題を解消することができる。なお、特定のクライアント端末は、合成済みデータを構成するメディアデータの要求（希望）を含む設定情報をメディアサーバ１に送信する。例えば、設定情報の送信は、ビデオ会議が開始する前に行ってもよいし、受信した合成済みメディアデータに基づく画面が不鮮明であるとユーザが判定した時、つまりビデオ会議の開始後に行ってもよい。
（ｂ）：第３実施形態において、メディアサーバ１Ｂ，１Ｃ間でメディアデータや合成済みメディアデータをやり取りしてもよい。
【0048】
（ｃ）：上記した発明特定事項は、適宜組み合わせ可能である。
（ｄ）：ソフトウェアで実現可能な手段をハードウェアで実現することができ、ハードウェアで実現可能な手段をソフトウェアで実現することができる。
（ｄ）：ソフトウェアで実現可能な手段をハードウェアで実現することができ、ハードウェアで実現可能な手段をソフトウェアで実現することができる。
【符号の説明】
【0049】
１００，１００Ａ～１００Ｃ ビデオ会議システム
１，１Ａ～１Ｄ メディアサーバ
１０ スマートフォン、端末
２０ ＰＣ、端末
３０ ネットワークカメラ、端末
４０ その他端末、端末
５０ 外部端末、端末
６１～６６ 端末
１１，１１ｂ～１１ｄ 送受信部
１２，１２ｂ～１２ｄ 合成部
１３，１３ｂ～１３ｄ 設定部
１，１Ａ～１Ｄ メディアサーバ
１０ スマートフォン、端末
２０ ＰＣ、端末
３０ ネットワークカメラ、端末
４０ その他端末、端末
５０ 外部端末、端末
６１～６６ 端末
１１，１１ｂ～１１ｄ 送受信部
１２，１２ｂ～１２ｄ 合成部
１３，１３ｂ～１３ｄ 設定部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】