特許 7400301 通信管理サーバ、通信システム、送信装置、通信方法、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-12-11

(45)【発行日】2023-12-19

(54)【発明の名称】通信管理サーバ、通信システム、送信装置、通信方法、及びプログラム

(51)【国際特許分類】

   H04N 7/15 20060101AFI20231212BHJP

   H04L 67/02 20220101ALI20231212BHJP

   H04M 3/56 20060101ALI20231212BHJP

   H04N 21/258 20110101ALI20231212BHJP

   H04N 21/6547 20110101ALI20231212BHJP

【ＦＩ】

H04N7/15 120

H04L67/02

H04M3/56 C

H04N21/258

H04N21/6547

【請求項の数】 9

(21)【出願番号】P 2019176812

(22)【出願日】2019-09-27

(65)【公開番号】P2020092407

(43)【公開日】2020-06-11

【審査請求日】2022-07-21

(31)【優先権主張番号】P 2018220176

(32)【優先日】2018-11-26

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000006747

【氏名又は名称】株式会社リコー

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】加藤 喜永

(72)【発明者】

【氏名】鳥越 慎

(72)【発明者】

【氏名】戸田 善幸

(72)【発明者】

【氏名】池田朋弘

【審査官】鈴木 順三

(56)【参考文献】

【文献】特開２０１８－０６１１３１（ＪＰ，Ａ）

【文献】国際公開第２０１２／０６７２１９（ＷＯ，Ａ１）

【文献】特開２０１３－１３５２８４（ＪＰ，Ａ）

【文献】特開２０１７－１３０１９３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１４ － ７／１７３

Ｈ０４Ｎ ２１／００ － ２１／８５８

Ｈ０４Ｍ ３／３８ － ３／５８

Ｈ０４Ｌ ６７／００ － ６７／７５

(57)【特許請求の範囲】

【請求項1】

画像データを送信する送信装置及び前記画像データを受信する受信装置との通信を管理する通信管理サーバであって、
前記受信装置から、前記送信装置を識別するための送信装置識別情報、及び前記受信装置を識別するための受信装置識別情報を受信する受信手段と、
前記送信装置識別情報に係る前記送信装置が送信可能な画像データの画像種類と、前記受信装置識別情報に係る前記受信装置が再生可能な画像データの画像種類とが同じでない場合には、前記送信装置に対して、前記受信装置が再生可能な画像種類の画像データを送信する旨の要求を示す要求情報を送信する送信手段と、
所定の送信装置を識別するための所定の送信装置識別情報、及び前記所定の送信装置の送信可能な画像データの画像種類を関連付けて管理する第１の画像種類管理手段と、
所定の受信装置を識別するための所定の受信装置識別情報、及び前記所定の受信装置の再生可能な画像データの画像種類を関連付けて管理する第２の画像種類管理手段と、
を有し、
前記第１の画像種類管理手段において特定の送信装置識別情報に対応する特定の画像種類と、前記第２の画像種類管理手段において特定の受信装置識別情報に対応する特定の画像種類とが同じでない場合には、前記送信手段は、前記特定の送信装置識別情報で示される特定の送信装置に対して、前記要求情報を送信すること、
を特徴とする通信管理サーバ。

【請求項2】

前記第１の画像種類管理手段と前記第２の画像種類管理手段は、同じデータベース又は異なるデータベースによって構築されていることを特徴とする請求項１に記載の通信管理サーバ。

【請求項3】

前記送信装置識別情報に係る前記送信装置が送信可能の画像種類と、前記受信装置識別情報に係る前記受信装置が再生可能な画像種類とが同じである場合には、前記送信手段は、前記送信装置に対して、前記要求情報を送信しないことを特徴とする請求項１または２に記載の通信管理サーバ。

【請求項4】

前記画像種類は、静止画及び動画を示すことを特徴とする請求項１乃至３のいずれか一項に記載の通信管理サーバ。

【請求項5】

前記送信装置から送信された前記画像データを中継して前記受信装置に送信する中継装置と通信する請求項１に記載の通信管理サーバであって、
前記第１の画像種類管理手段において前記特定の送信装置識別情報に対応する特定の画像種類と、前記第２の画像種類管理手段において前記特定の受信装置識別情報に対応する特定の画像種類とが同じでない場合には、前記送信手段は、前記中継装置に対して、前記特定の送信装置識別情報、前記特定の受信装置識別情報、及び前記特定の受信装置が再生可能な画像種類を示す画像種類を送信することを特徴とする通信管理サーバ。

【請求項6】

請求項１乃至５のいずれか一項に記載の通信管理サーバと、
前記送信装置と、
を有することを特徴とする通信システム。

【請求項7】

前記送信装置は、前記要求情報で示される画像種類に応じて前記画像データの符号化を行うことを特徴とする請求項６に記載の通信システム。

【請求項8】

画像データを送信する送信装置及び前記画像データを受信する受信装置との通信を管理する通信管理サーバが実行する通信方法であって、
前記受信装置から、前記送信装置を識別するための送信装置識別情報、及び前記受信装置を識別するための受信装置識別情報を受信する受信ステップと、
前記送信装置識別情報に係る前記送信装置が送信可能な画像データの画像種類と、前記受信装置識別情報に係る前記受信装置が再生可能な画像データの画像種類とが同じでない場合には、前記送信装置に対して、前記受信装置が再生可能な画像種類の画像データを送信する旨の要求を示す要求情報を送信する送信ステップと、
を実行し、
前記送信ステップでは、
所定の送信装置を識別するための所定の送信装置識別情報、及び前記所定の送信装置の送信可能な画像データの画像種類を関連付けて管理する第１の画像種類管理手段において特定の送信装置識別情報に対応する特定の画像種類と、所定の受信装置を識別するための所定の受信装置識別情報、及び前記所定の受信装置の再生可能な画像データの画像種類を関連付けて管理する第２の画像種類管理手段において特定の受信装置識別情報に対応する特定の画像種類とが同じでない場合には、前記特定の送信装置識別情報で示される特定の送信装置に対して、前記要求情報を送信することを特徴とする通信方法。

【請求項9】

コンピュータに、請求項８に記載の方法を実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示内容は、画像データを送信する送信側の通信端末及び画像データを受信する受信側の通信端末との通信を管理する発明に関する。

【背景技術】

【0002】

近年、動画や静止画等の画像データを送信及び再生する方式の一つとして、ストリーミングが知られている。これにより、送信側の通信端末で撮像することによって得られた画像データを、受信側の通信端末に送信することにより、受信側の通信端末でリアルタイムに画像データを再生することができる。

【0003】

また、特許文献１には、送信側のエッジノードに顔認識のためのカメラを設置し、エッジノードはカメラから取得した静止画データを受信側のサーバ（顔認識のプリケーションサーバ）に送信し、サーバで顔の認識処理を実行するクラウドサービスプラットフォームが開示されている。この場合、送信装置（エッジノード）と受信装置（サーバ）とで通信する画像データの種類（静止画等）は予め決められているため、受信装置は受信した画像データの再生が可能である。

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来の技術では、既に使用している受信装置とは異なる画像種類の画像データを再生する他の受信装置を新たに使用する場合や、既に使用している受信装置が再生している画像データを異なる画像種類に変更する場合等には、受信装置は画像データを再生できないという課題が生じる。

【課題を解決するための手段】

【0005】

請求項１に係る発明は、画像データを送信する送信装置及び前記画像データを受信する受信装置との通信を管理する通信管理サーバであって、前記受信装置から、前記送信装置を識別するための送信装置識別情報、及び前記受信装置を識別するための受信装置識別情報を受信する受信手段と、前記送信装置識別情報に係る前記送信装置が送信可能な画像データの画像種類と、前記受信装置識別情報に係る前記受信装置が再生可能な画像データの画像種類とが同じでない場合には、前記送信装置に対して、前記受信装置が再生可能な画像種類の画像データを送信する旨の要求を示す要求情報を送信する送信手段と、所定の送信装置を識別するための所定の送信装置識別情報、及び前記所定の送信装置の送信可能な画像データの画像種類を関連付けて管理する第１の画像種類管理手段と、所定の受信装置を識別するための所定の受信装置識別情報、及び前記所定の受信装置の再生可能な画像データの画像種類を関連付けて管理する第２の画像種類管理手段と、を有し、前記第１の画像種類管理手段において特定の送信装置識別情報に対応する特定の画像種類と、前記第２の画像種類管理手段において特定の受信装置識別情報に対応する特定の画像種類とが同じでない場合には、前記送信手段は、前記特定の送信装置識別情報で示される特定の送信装置に対して、前記要求情報を送信することを特徴とする通信管理サーバである。

【発明の効果】

【0006】

以上説明したように本発明によれば、受信装置は画像データを再生することができるという効果を奏する。

【図面の簡単な説明】

【0007】

【図1】本発明の一実施形態に係る通信システムの全体構成図である。

【図2】実時間データ処理端末のハードウェア構成図である。

【図3】撮像ユニットのハードウェア構成図である。

【図4】図４（ａ）は撮像ユニット４０ｂで撮影された半球画像（前側）、図４（ｂ）は撮像ユニット４０ｂで撮影された半球画像（後側）、図４（ｃ）は正距円筒図法により表された画像を示した図である。

【図5】近端末データ処理装置のハードウェア構成図である。

【図6】ビデオ会議端末のハードウェア構成図である。

【図7】電子黒板のハードウェア構成図である。

【0008】

画像取得端末における実時間データ処理端末及び近端末データ処理装置のソフトウェア構成図である。

【図8】通信管理サーバ、及び中継装置のハードウェア構成図である。

【図9】実施形態に係る通信システムの機能ブロック図である。

【図10】（ａ）は端末通信管理テーブルの概念図、（ｂ）は送信可能画像種類管理テーブルの概念図、（ｃ）は転送画像種類管理テーブルの概念図、（ｄ）は、転送画像種類管理テーブルの概念図である。

【図11】画像データの送受信の処理を示したシーケンス図である。

【図12】画像種類の判断処理を示したフローチャートである。

【図13】再生可能な画像データの画像種類の判断処理を示したフローチャートである。

【図14】画像種類の判断処理を示したフローチャートである。

【発明を実施するための形態】

【0009】

〔通信システムの全体構成〕
以下、図面を用いて、本発明の一実施形態の全体構成について説明する。

【0010】

図1は、本実施形態に係る通信システムの概略図である。図１に示されているように、本実施形態の通信システムは、実時間データ処理端末３、近端末データ処理装置５、ビデオ会議端末７、電子黒板８、通信管理サーバ９、中継装置１０によって構築されている。

【0011】

これらのうち、実時間データ処理端末３は、撮像画像のデータを得るための実時間処理（リアルタイムの処理）を行なう端末である。実時間データ処理端末３には、ＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサやＣＣＤ(Charge Coupled Device)センサなどの被写体を撮像する画像センサを備えた撮像ユニット４０が着脱自在に接続される。これにより、実時間データ処理端末３は、撮像ユニット４０から入力された撮影画像データをデジタル化し、動画データ及び静止画データの少なくとも一方を生成して、近端末データ処理装置５に送信する。

【0012】

近端末データ処理装置５は、実時間データ処理端末３に最も近いところに配置され、例えばハードウェア的にも密接なデータバスやＵＳＢ(Universal Serial Bus)等で1対1に接続されている。近端末データ処理装置５は、実時間データ処理端末３から受信した静止画データをＪＰＥＧ(Joint Photographic Experts Group)などの汎用的な静止画のフォーマットに符号化した後、通信ネットワーク６００を介して、中継装置１０に送信する。通信ネットワーク６００は、イントラネット、インターネット等により構築されており、有線又は無線により通信可能である。
また、近端末データ処理装置５は、実時間データ処理端末３から受信した動画データをH.264などの汎用的な動画のフォーマットに符号化した後、通信ネットワーク６００を介して、中継装置１０に送信する。なお、通常、実時間データ処理端末３と近端末データ処理装置５は接続されて一体になっており、ここでは、実時間データ処理端末３と近端末データ処理装置５とで画像取得端末２を構成している。また、汎用的な動画のフォーマットとしては、H.264の他に、VP8、VP9、VP10、及びAV1等が挙げられる。

【0013】

ビデオ会議端末７は、中継装置１０から送られて来た動画データを再生して、ディスプレイ７２０に動画（映像）を表示させたり、中継装置１０から送られて来た音データを再生して、スピーカ７１５に音を出力させたりする。ディスプレイ７２０は、表示手段の一例であり、ＵＳＢ等のケーブル７３０を介してビデオ会議端末７と電気的に接続される。また、ビデオ会議端末７は、中継装置１０から送られて来た動画データを再生して、ディスプレイ７２０に動画（映像）を表示する。複数のビデオ会議端末７を使用する場合には、中継装置１０を介して、動画データ及び音データが送受信されることで、遠隔会議を行うことができる。本実施形態のビデオ会議端末７は、静止画データを再生できない。

【0014】

電子黒板８は、中継装置１０から送られて来た静止画データを再生して、電子黒板８の後述のディスプレイ８２０に静止画を表示する。電子黒板８の利用者は、後述の専用の電子ペン８５００を用いて、ディスプレイ８２０に文字等を描画することもできる。本実施形態の電子黒板８は、動画データを再生できない。

【0015】

通信管理サーバ９は、ビデオ会議端末７及び電子黒板８からのログイン認証、ビデオ会議端末７及び電子黒板８の通信状況の管理、及び中継装置３０の通信状況等を一元的に管理する。

【0016】

中継装置１０は、画像取得端末２（近端末データ処理装置５）から通信ネットワーク６００を介して送られて来た画像データを中継して、通信ネットワーク６００を介してビデオ会議端末７及び電子黒板８に送信するルータの役割を果たす。

【0017】

なお、画像取得端末２は、送信装置の一例である。また、ビデオ会議端末７及び電子黒板８は、受信装置の一例である。

【0018】

〔通信システムの各ハードウェア構成〕
次に、図２乃至図８用いて、本実施形態の通信システムの各ハードウェア構成について説明する。

【0019】

＜実時間データ処理端末のハードウェア構成＞
図２は、実時間データ処理端末のハードウェア構成図である。実時間データ処理端末３は、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、ＥＥＰＲＯＭ３０４、ＣＭＯＳセンサ３０５、加速度・方位センサ３０６、メディアＩ／Ｆ３０８、ＧＰＳ受信部３０９を備えている。

【0020】

これらのうち、ＣＰＵ３０１は、実時間データ処理端末３全体の動作を制御する。ＲＯＭ３０２は、ＣＰＵ３０１の駆動に用いられるプログラムを記憶する。ＲＡＭ３０３は、ＣＰＵ３０１のワークエリアとして使用される。ＥＥＰＲＯＭ３０４は、ＣＰＵ３０１の制御にしたがって、実時間データ処理端末用プログラム等の各種データの読み出し又は書き込みを行う。ＣＭＯＳセンサ３０５は、ＣＰＵ３０１の制御に従って被写体（主に撮像ユニット４０の死角）を撮像し画像データを得る。加速度・方位センサ３０６は、地磁気を検知する電子磁気コンパスやジャイロコンパス、加速度センサ等の各種センサである。メディアＩ／Ｆ３０８は、フラッシュメモリ等の記録メディア３０７に対するデータの読み出し又は書き込み（記憶）を制御する。ＧＰＳ受信部３０９は、ＧＰＳ衛星からＧＰＳ信号を受信する。

【0021】

また、実時間データ処理端末３は、撮像ユニットＩ／Ｆ３１３、マイク３１４、スピーカ３１５、音入出力Ｉ／Ｆ３１６、ディスプレイ３１７、外部機器接続Ｉ／Ｆ３１８、及びタッチパネル３２１を備えている。

【0022】

これらのうち、撮像ユニットＩ／Ｆ３１３は、外付けの撮像ユニット４０が接続された場合に、撮像ユニット４０の駆動を制御する回路である。マイク３１４は、音声を入力する内蔵型の集音手段の一種である。音入出力Ｉ／Ｆ３１６は、ＣＰＵ３０１の制御に従ってマイク３１４及びスピーカ３１５との間で音信号の入出力を処理する回路である。ディスプレイ３１７は、被写体の画像や各種アイコン等を表示する液晶や有機ＥＬなどの表示手段の一種である。外部機器接続Ｉ／Ｆ３１８は、各種の外部機器を接続するためのインターフェースである。タッチパネル３２１は、利用者がディスプレイ３１７を押下することで、実時間データ処理端末３を操作する入力手段の一種である。

【0023】

また、実時間データ処理端末３は、バスライン３１０を備えている。バスライン３１０は、図２に示されているＣＰＵ３０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0024】

＜撮像ユニットのハードウェア構成＞
図３は、撮像ユニットのハードウェア構成図である。特に、図３（ａ）は、撮像ユニット４０のうち、単眼の撮像ユニット４０ａのハードウェア構成図である。図３（ｂ）は、撮像ユニット４０のうち、複眼の撮像ユニット４０ｂのハードウェア構成図である。なお、撮像ユニット４０は、撮像素子の数が異なる複数種類の撮像ユニット（撮像ユニット４０ａ、４０ｂ等）の総称である。

【0025】

図３（ａ）に示されているように、撮像ユニット４０ａは、ＣＭＯＳやＣＣＤ等の撮像素子４０１ａ、レンズ４０２ａ、及び実時間データ処理端末３の撮像ユニットＩ／Ｆ３１３に電気的に接続するための接続Ｉ／Ｆ４０８ａを有している。撮像ユニット４０ａが実時間データ処理端末３の撮像ユニットＩ／Ｆ３１３に接続された場合には、撮像素子４０１ａは、撮像ユニットＩ／Ｆ３１３から接続Ｉ／Ｆ４０８ａを介して送られて来た撮像制御信号により撮像を行い、接続Ｉ／Ｆ４０８ａを介して撮像ユニットＩ／Ｆ３１３に撮像画像データを送信する。

【0026】

また、図３（ｂ）に示されているように、撮像ユニット４０ｂは、ＣＭＯＳやＣＣＤ等の撮像素子４０１ｂ１，４０１ｂ２、レンズ４０２ｂ１，４０２ｂ２、及び実時間データ処理端末３の撮像ユニットＩ／Ｆ３１３に電気的に接続するための接続Ｉ／Ｆ４０８ｂを有している。レンズ４０２ｂ１，４０２ｂ２は、例えば、魚眼レンズである。撮像ユニット４０ｂが実時間データ処理端末３の撮像ユニットＩ／Ｆ３１３に接続された場合には、撮像素子４０１ｂ１，４０１ｂ２は、撮像ユニットＩ／Ｆ３１３から接続Ｉ／Ｆ４０８ｂを介して送られて来た撮像制御信号により撮像を行い、接続Ｉ／Ｆ４０８ｂを介して撮像ユニットＩ／Ｆ３１３に、複数の撮像画像データを送信する。

【0027】

図３（ａ）に示されている撮像ユニット４０ａは、一般の平面画像を得るが、図３（ｂ）に示されている撮像ユニット４０ｂは、全天球画像を得ることができる。ここで、図４を用いて、撮像ユニット４０ｂで撮像された画像から正距円筒射影画像ＥＣが作成されるまでの処理の概略を説明する。なお、図４（ａ）は撮像ユニット４０ｂで撮影された半球画像（前側）、図４（ｂ）は撮像ユニット４０ｂで撮影された半球画像（後側）、図４（ｃ）は正距円筒図法により表された画像（以下、「正距円筒射影画像」という）を示した図である。

【0028】

図４（ａ）に示されているように、撮像素子４０１ｂ１によって得られた画像は、レンズ４０２ｂ１によって湾曲した半球画像（前側）となる。また、図４（ｂ）に示されているように、撮像素子４０３ｂによって得られた画像は、レンズ４０２ｂ２によって湾曲した半球画像（後側）となる。そして、半球画像（前側）と、１８０度反転された半球画像（後側）とは合成され、図４（ｃ）に示されているように、正距円筒射影画像ＥＣが作成される。

【0029】

＜近端末データ処理装置のハードウェア構成＞
図５は、近端末データ処理装置のハードウェア構成図である。図５に示されているように、近端末データ処理装置５は、ＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＥＥＰＲＯＭ５０４、ＣＭＯＳセンサ５０５、加速度・方位センサ５０６、メディアＩ／Ｆ５０８、ＧＰＳ受信部５０９を備えている。

【0030】

これらのうち、ＣＰＵ５０１は、近端末データ処理装置５全体の動作を制御する。ＲＯＭ５０２は、ＣＰＵ５０１の駆動に用いられるプログラムを記憶する。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される。ＥＥＰＲＯＭ５０４は、ＣＰＵ５０１の制御にしたがって、近端末データ処理装置用プログラム等の各種データの読み出し又は書き込みを行う。ＣＭＯＳセンサ５０５は、ＣＰＵ５０１の制御に従って被写体（主に近端末データ処理装置５を操作するユーザの自画像）を撮像し画像データを得る。加速度・方位センサ５０６は、地磁気を検知する電子磁気コンパスやジャイロコンパス、加速度センサ等の各種センサである。メディアＩ／Ｆ５０８は、フラッシュメモリ等の記録メディア５０７に対するデータの読み出し又は書き込み（記憶）を制御する。ＧＰＳ受信部５０９は、ＧＰＳ衛星からＧＰＳ信号を受信する。

【0031】

また、近端末データ処理装置５は、遠距離通信回路５１１、遠距離通信回路５１１のアンテナ５１１ａ、カメラ５１２、撮像素子Ｉ／Ｆ５１３、マイク５１４、スピーカ５１５、音入出力Ｉ／Ｆ５１６、ディスプレイ５１７、外部機器接続Ｉ／Ｆ５１８、近距離通信回路５１９、近距離通信回路５１９のアンテナ５１９ａ、及びタッチパネル５２１を備えている。

【0032】

これらのうち、遠距離通信回路５１１は、イントラネット２００を介して、他の機器と通信する回路である。カメラ５１２は、ＣＰＵ５０１の制御に従って被写体を撮像して画像データを得る内蔵型の撮像手段の一種である。撮像素子Ｉ／Ｆ５１３は、カメラ５１２の駆動を制御する回路である。マイク５１４は、音声を入力する内蔵型の集音手段の一種である。音入出力Ｉ／Ｆ５１６は、ＣＰＵ５０１の制御に従ってマイク５１４及びスピーカ５１５との間で音信号の入出力を処理する回路である。ディスプレイ５１７は、被写体の画像や各種アイコン等を表示する液晶や有機ＥＬなどの表示手段の一種である。外部機器接続Ｉ／Ｆ５１８は、各種の外部機器を接続するためのインターフェースである。近距離通信回路５１９は、ＮＦＣ(Near Field radio Communication)やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。タッチパネル５２１は、利用者がディスプレイ５１７を押下することで、近端末データ処理装置５を操作する入力手段の一種である。

【0033】

また、近端末データ処理装置５は、バスライン５１０を備えている。バスライン５１０は、図５に示されているＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0034】

＜ビデオ会議端末のハードウェア構成＞
図６は、ビデオ会議端末のハードウェア構成図である。図６に示されているように、ビデオ会議端末７は、ＣＰＵ７０１、ＲＯＭ７０２、ＲＡＭ７０３、フラッシュメモリ７０４、ＳＳＤ７０５、メディアＩ／Ｆ７０７、操作ボタン７０８、電源スイッチ７０９、バスライン７１０、ネットワークＩ／Ｆ７１１、カメラ７１２、撮像素子Ｉ／Ｆ７１３、マイク７１４、スピーカ７１５、音入出力Ｉ／Ｆ７１６、ディスプレイＩ／Ｆ７１７、外部機器接続Ｉ／Ｆ７１８、近距離通信回路７１９、近距離通信回路７１９のアンテナ７１９ａを備えている。これらのうち、ＣＰＵ７０１は、ビデオ会議端末７全体の動作を制御する。ＲＯＭ７０２は、ＩＰＬ等のＣＰＵ７０１の駆動に用いられるプログラムを記憶する。ＲＡＭ７０３は、ＣＰＵ７０１のワークエリアとして使用される。フラッシュメモリ７０４は、通信用プログラム、画像データ、及び音データ等の各種データを記憶する。ＳＳＤ７０５は、ＣＰＵ７０１の制御にしたがってフラッシュメモリ７０４に対する各種データの読み出し又は書き込みを制御する。なお、ＳＳＤに代えてＨＤＤを用いてもよい。メディアＩ／Ｆ７０７は、フラッシュメモリ等の記録メディア７０６に対するデータの読み出し又は書き込み（記憶）を制御する。操作ボタン７０８は、ビデオ会議端末７の宛先を選択する場合などに操作されるボタンである。電源スイッチ７０９は、ビデオ会議端末７の電源のＯＮ／ＯＦＦを切り換えるためのスイッチである。

【0035】

また、ネットワークＩ／Ｆ７１１は、インターネット６００を利用してデータ通信をするためのインターフェースである。カメラ７１２は、ＣＰＵ７０１の制御に従って被写体を撮像して画像データを得る内蔵型の撮像手段の一種である。撮像素子Ｉ／Ｆ７１３は、カメラ７１２の駆動を制御する回路である。マイク７１４は、音声を入力する内蔵型の集音手段の一種である。音入出力Ｉ／Ｆ７１６は、ＣＰＵ７０１の制御に従ってマイク７１４及びスピーカ７１５との間で音信号の入出力を処理する回路である。ディスプレイＩ／Ｆ７１７は、ＣＰＵ７０１の制御に従って外付けのディスプレイ７２０に画像データを送信する回路である。外部機器接続Ｉ／Ｆ７１８は、各種の外部機器を接続するためのインターフェースである。近距離通信回路７１９は、ＮＦＣ、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。

【0036】

また、バスライン７１０は、図６に示されているＣＰＵ７０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0037】

ディスプレイ７２０は、被写体の画像や操作用アイコン等を表示する液晶や有機ＥＬによって構成された表示手段の一種である。また、ディスプレイ７２０は、ＨＤＭＩケーブル７３２によってディスプレイＩ／Ｆ７１７に接続される。このＨＤＭＩケーブル７３２は、アナログＲＧＢ（ＶＧＡ）信号用のケーブルであってもよいし、コンポーネントビデオ用のケーブルであってもよいし、ＤＶＩ(Digital Video Interactive)信号用のケーブルであってもよい。

【0038】

なお、ディスプレイ７２０は、後述のディスプレイ７２０ａ，７２０ｂの総称である。また、ＨＤＭＩケーブル７３２は、後述のＨＤＭＩケーブル７３２ａ，７３２ｂの総称である。

【0039】

カメラ７１２は、レンズや、光を電荷に変換して被写体の画像（映像）を電子化する固体撮像素子を含み、固体撮像素子として、ＣＭＯＳ(Complementary Metal Oxide Semiconductor)や、ＣＣＤ（Charge Coupled Device）等が用いられる。外部機器接続Ｉ／Ｆ７１８には、ＵＳＢケーブル等によって、外付けカメラ、外付けマイク、及び外付けスピーカ等の外部機器がそれぞれ接続可能である。外付けカメラが接続された場合には、ＣＰＵ７０１の制御に従って、内蔵型のカメラ７１２に優先して、外付けカメラが駆動する。同じく、外付けマイクが接続された場合や、外付けスピーカが接続された場合には、ＣＰＵ７０１の制御に従って、それぞれが内蔵型のマイク７１４や内蔵型のスピーカ７１５に優先して、外付けマイクや外付けスピーカが駆動する。

【0040】

また、記録メディア７０６は、ビデオ会議端末７に対して着脱自在な構成となっている。また、ＣＰＵ７０１の制御にしたがってデータの読み出し又は書き込みを行う不揮発性メモリであれば、フラッシュメモリ７０４に限らず、ＥＥＰＲＯＭ(Electrically Erasable Programmable Read-Only Memory)等を用いてもよい。

【0041】

＜電子黒板のハードウェア構成＞
図７は、電子黒板のハードウェア構成図である。図７に示されているように、電子黒板８は、ＣＰＵ(Central Processing Unit)８０１、ＲＯＭ(Read Only Memory)８０２、ＲＡＭ(Random Access Memory)８０３、ＳＳＤ(Solid State Drive)８０４、ネットワークＩ／Ｆ８０５、及び、外部機器接続Ｉ／Ｆ(Interface)８０６を備えている。

【0042】

これらのうち、ＣＰＵ８０１は、電子黒板８全体の動作を制御する。ＲＯＭ８０２は、ＣＰＵ８０１やＩＰＬ(Initial Program Loader)等のＣＰＵ８０１の駆動に用いられるプログラムを記憶する。ＲＡＭ８０３は、ＣＰＵ８０１のワークエリアとして使用される。ＳＳＤ８０４は、電子黒板用のプログラム等の各種データを記憶する。ネットワークコントローラ８０５は、通信ネットワーク６００との通信を制御する。外部機器接続Ｉ／Ｆ８０６は、ＵＳＢ(Universal Serial Bus)メモリ８６００、外付け機器（マイク８２００、スピーカ８３００、カメラ８４００）との通信を制御する。

【0043】

また、電子黒板８は、キャプチャデバイス８１１、ＧＰＵ８１２、ディスプレイコントローラ８１３、接触センサ８１４、センサコントローラ８１５、電子ペンコントローラ８１６、近距離通信回路８１９、及び近距離通信回路８１９のアンテナ８１９ａ、電源スイッチ８２２及び選択スイッチ類８２３を備えている。

【0044】

これらのうち、キャプチャデバイス８１１は、ＰＣ８１００のディスプレイで表示されている画像を取り込んでディスプレイ８２０に表示させる。ＧＰＵ(Graphics Processing Unit)８１２は、グラフィクスを専門に扱う半導体チップである。ディスプレイコントローラ８１３は、ＧＰＵ８１２からの出力画像をディスプレイ８２０等へ出力するために画面表示の制御及び管理を行う。接触センサ８１４は、ディスプレイ８２０上に電子ペン８５００やユーザの手Ｈ等が接触したことを検知する。センサコントローラ８１５は、接触センサ８１４の処理を制御する。接触センサ８１４は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ８２０の上側両端部に設置された２つ受発光装置が、ディスプレイ８２０に平行して複数の赤外線を放射し、ディスプレイ８２０の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。接触センサ８１４は、物体によって遮断された２つの受発光装置が放射した赤外線のＩＤをセンサコントローラ８１５に出力し、センサコントローラ８１５が、物体の接触位置である座標位置を特定する。電子ペンコントローラ８１６は、電子ペン８５００と通信することで、ディスプレイ８２０へのペン先のタッチやペン尻のタッチの有無を判断する。近距離通信回路８１９は、ＮＦＣ、Ｂｌｕｅｔｏｏｔｈ等の通信回路である。電源スイッチ８２２は、電子黒板８の電源のＯＮ／ＯＦＦを切り換えるためのスイッチである。選択スイッチ類８２３は、例えば、ディスプレイ８２０の表示の明暗や色合い等を調整するためのスイッチ群である。

【0045】

更に、電子黒板８は、バスライン８１０を備えている。バスライン８１０は、図７に示されているＣＰＵ８０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0046】

なお、接触センサ８１４は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネル、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネル、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルなどの種々の検出手段を用いてもよい。また、電子ペンコントローラ８１６が、電子ペン８５００のペン先及びペン尻だけでなく、電子ペン８５００のユーザが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。

【0047】

＜通信管理サーバのハードウェア構成＞
図８は、通信管理サーバのハードウェア構成図である。通信管理サーバ９は、コンピュータによって構築されており、図８に示されているように、ＣＰＵ９０１、ＲＯＭ９０２、ＲＡＭ９０３、ＨＤ９０４、ＨＤＤ(Hard Disk Drive)ドライブ９０５、記録メディア９０６、メディアＩ／Ｆ９０７、ディスプレイ９０８、タッチパネル９０９、ネットワークＩ／Ｆ９１０、キーボード９１１、マウス９１２、ＣＤ－ＲＷドライブ９１４、及び、バスライン９２０を備えている。なお、通信管理サーバ９は、サーバとして機能するため、キーボード９１１やマウス９１２等の入力装置や、ディスプレイ９０８等の出力装置はなくてもよい。

【0048】

これらのうち、ＣＰＵ９０１は、通信管理サーバ９全体の動作を制御する。ＲＯＭ９０２は、ＣＰＵ９０１の駆動に用いられるプログラムを記憶する。ＲＡＭ９０３は、ＣＰＵ９０１のワークエリアとして使用される。ＨＤ９０４は、プログラム等の各種データを記憶する。ＨＤＤドライブ９０５は、ＣＰＵ９０１の制御にしたがってＨＤ９０４に対する各種データの読み出し又は書き込みを制御する。メディアＩ／Ｆ９０７は、フラッシュメモリ等の記録メディア９０６に対するデータの読み出し又は書き込み（記憶）を制御する。ディスプレイ９０８は、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示する。タッチパネル９０９は、ディスプレイ９０８に表示されているメニュー画面を指で直接触れることで操作できる入力手段の一例である。ネットワークＩ／Ｆ９１０は、インターネット６００を利用してデータ通信をするためのインターフェースである。キーボード９１１は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。マウス９１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。ＣＤ－ＲＷドライブは、着脱可能な記録媒体の一例としてのＣＤ－ＲＷ(Compact Disc-ReWritable)９１３に対する各種データの読み出し等を制御する。

【0049】

また、通信管理サーバ９は、バスライン９２０を備えている。バスライン９２０は、図８に示されているＣＰＵ９０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0050】

＜中継装置のハードウェア構成＞
中継装置１０は、基本的に通信管理サーバと同様の構成を備えている。即ち、中継装置１０は、コンピュータによって構築されており、図８に示されているように、ＣＰＵ１００１、ＲＯＭ１００２、ＲＡＭ１００３、ＨＤ１００４、ＨＤＤドライブ１００５、記録メディア１００６、メディアＩ／Ｆ１００７、ディスプレイ１００８、タッチパネル１００９、ネットワークＩ／Ｆ１０１０、キーボード１０１１、マウス１０１２、ＣＤ－ＲＷドライブ１０１４、及び、バスライン１０２０を備えている。なお、中継装置１０は、ルータとして機能するため、キーボード１０１１やマウス１０１２等の入力装置や、ディスプレイ１００８等の出力装置はなくてもよい。

【0051】

ＣＰＵ１００１、ＲＯＭ１００２、ＲＡＭ１００３、ＨＤ１００４、ＨＤＤドライブ１００５、記録メディア１００６、メディアＩ／Ｆ１００７、ディスプレイ１００８、タッチパネル１００９、ネットワークＩ／Ｆ１０１０、キーボード１０１１、マウス１０１２、ＣＤ－ＲＷドライブ１０１４、及び、バスライン１０２０は、それぞれ、ＣＰＵ９０１、ＲＯＭ９０２、ＲＡＭ９０３、ＨＤ９０４、ＨＤＤドライブ９０５、記録メディア９０６、メディアＩ／Ｆ９０７、ディスプレイ９０８、タッチパネル９０９、ネットワークＩ／Ｆ９１０、キーボード９１１、マウス９１２、ＣＤ－ＲＷドライブ９１４、及び、バスライン９２０と同様の構成であるため、これらの説明を省略する。

【0052】

〔通信システムの各機能構成〕
続いて、図面を用いて、通信システムの各機能構成について説明する。

【0053】

まず、図９及び図１０を用いて、本実施形態に係る通信システムを構成する端末、装置、及びサーバの各機能構成について説明する。図９は、通信システムの各機能ブロック図である。

【0054】

＜実時間データ処理端末の機能構成＞
図９に示されているように、実時間データ処理端末３は、判断部３３、画像処理部３４、接続部３８、記憶・読出部３９、及び通信部４８を有している。これら各部は、図２に示されている各構成要素のいずれかが、ＥＥＰＲＯＭ３０４からＲＡＭ３０３上に展開されたプログラムに従ったＣＰＵ３０１からの命令によって、動作することで実現される機能又は手段である。

【0055】

また、実時間データ処理端末３は、図２に示されているＲＯＭ３０２、ＲＡＭ３０３、及びＥＥＰＲＯＭ３０４によって構築される記憶部３０００を有している。

【0056】

（実時間データ処理端末の各機能構成）
次に、図９を用いて、実時間データ処理端末３の各機能構成について更に詳細に説明する。

【0057】

実時間データ処理端末３の判断部３３は、ＣＰＵ３０１の処理によって実現され、各種判断を行なう。

【0058】

画像処理部３４は、ＣＰＵ３０１の処理によって実現され、撮像ユニット４０から入力された画像データをデジタル化し、動画データ及び静止画データの少なくとも一方を生成する。画像処理部３４は、例えば、実時間（例えば、１／６０秒間隔）の動画データを生成したり、静止画データを生成したりする。

【0059】

接続部３８は、撮像ユニットＩ／Ｆ３１３、及びＣＰＵ３０１の処理によって実現され、撮像ユニット４０を実時間データ処理端末３に機械的及び電気的に接続するためのインターフェースである。

【0060】

記憶・読出部３９は、ＣＰＵ３０１の処理によって実現され、記憶部３０００に各種データ（または情報）を記憶したり、記憶部３０００から各種データ（または情報）を読み出したりする。

【0061】

通信部４８は、外部機器接続Ｉ／Ｆ３１８、及びＣＰＵ３０１の処理によって実現され、1対1の通信を介して近端末データ処理装置５の後述の通信部５８と各種データ（または情報）の送受信を行う。なお、この通信は有線だけでなく無線であってもよい。

【0062】

＜近端末データ処理装置の機能構成＞
図９に示されているように、近端末データ処理装置５は、送受信部５１、通信部５８、及び記憶・読出部５９を有している。これら各部は、図５に示されている各構成要素のいずれかが、近端末データ処理装置５において、ＥＥＰＲＯＭ５０４からＲＡＭ５０３上に展開されたプログラムに従ったＣＰＵ５０１からの命令によって、動作することで実現される機能又は手段である。

【0063】

また、近端末データ処理装置５は、図５に示されているＲＯＭ５０２、ＲＡＭ５０３、及びＥＥＰＲＯＭ５０４によって構築される記憶部５０００を有している。

【0064】

（近端末データ処理装置の各機能構成）
次に、図９を用いて、近端末データ処理装置５の各機能構成について更に詳細に説明する。

【0065】

近端末データ処理装置５の送受信部５１は、遠距離通信回路５１１、アンテナ５１１ａ、及びＣＰＵ５０１の処理によって実現され、通信ネットワーク６００を介して、他の端末、装置、及びサーバとの間で各種データ（または情報）の送受信を行う。

【0066】

通信部５８は、外部機器接続Ｉ／Ｆ５１８、及びＣＰＵ５０１の処理によって実現され、1対1の通信を介して実時間データ処理端末３の通信部４８と各種データ（または情報）の送受信を行う。なお、この通信は有線だけでなく、無線であってもよい。

【0067】

記憶・読出部５９は、ＣＰＵ５０１の処理によって実現され、記憶部５０００に各種データ（または情報）を記憶したり、記憶部５０００から各種データ（または情報）を読み出したりする。

【0068】

＜ビデオ会議端末の機能構成＞
図９に示されているように、ビデオ会議端末７は、送受信部７１、受付部７２、動画・音処理部７４、表示制御部７７、音制御部７８、及び記憶・読出部７９を有している。これら各部は、図６に示されている各構成要素のいずれかが、ビデオ会議端末７において、フラッシュメモリ７０４からＲＡＭ７０３上に展開されたプログラムに従ったＣＰＵ７０１からの命令によって、動作することで実現される機能又は手段である。

【0069】

また、ビデオ会議端末７は、図６に示されているＲＯＭ７０２、ＲＡＭ７０３、及びフラッシュメモリ７０４によって構築される記憶部７０００を有している。

【0070】

（ビデオ会議端末の各機能構成）
ビデオ会議端末７の送受信部７１は、ビデオ会議端末７における、ネットワークＩ／Ｆ７１１、及びＣＰＵ７０１の処理によって実現され、通信ネットワーク６００を介して、他の端末、装置、及びサーバと各種データ（または情報）の送受信を行う。

【0071】

受付部７２は、ビデオ会議端末７における、操作ボタン７０８、及びＣＰＵ７０１の処理によって実現され、利用者の各種操作を受け付ける。

【0072】

動画・音処理部７４は、中継装置１０から送られて来た動画データを再生して、ディスプレイ７２０に動画（映像）を表示させたり、中継装置１０から送られて来た音データを再生して、スピーカ７１５に音を出力させたりする。なお、動画・音処理部７４は、静止画データを再生することはできない。

【0073】

表示制御部７７は、ビデオ会議端末７におけるＣＰＵ７０１の処理によって実現され、表示手段の一例であるディスプレイ７２０に動画を表示させる。

【0074】

音制御部７８は、ビデオ会議端末７におけるＣＰＵ７０１の処理によって実現され、マイク７１４における集音を制御したり、スピーカ７１５における音の出力を制御したりする。

【0075】

記憶・読出部７９は、ビデオ会議端末７におけるＣＰＵ７０１の処理によって実現され、記憶部７０００に各種データ（または情報）を記憶したり、記憶部７０００から各種データ（または情報）を読み出したりする。

【0076】

＜電子黒板の機能構成＞
図９に示されているように、電子黒板８は、送受信部８１、受付部８２、静止画処理部８４、表示制御部８７、及び記憶・読出部８９を有している。これら各部は、図７に示されている各構成要素のいずれかが、電子黒板８において、ＳＳＤ８０４からＲＡＭ８０３上に展開されたプログラムに従ったＣＰＵ８０１からの命令によって、動作することで実現される機能又は手段である。

【0077】

また、電子黒板８は、図７に示されているＲＯＭ８０２、ＲＡＭ８０３、及びフラッシュメモリ８０４によって構築される記憶部８０００を有している。

【0078】

（電子黒板の各機能構成）
電子黒板８の送受信部８１は、電子黒板８における、ネットワークＩ／Ｆ８０５、及びＣＰＵ８０１の処理によって実現され、通信ネットワーク６００を介して、他の端末、装置、及びサーバと各種データ（または情報）の送受信を行う。

【0079】

受付部８２は、電子黒板８における、選択スイッチ類８２３、及びＣＰＵ８０１の処理によって実現され、利用者の各種操作を受け付ける。

【0080】

静止画処理部８４は、中継装置１０から送られて来た静止画データを再生して、ディスプレイ８２０に静止画を表示させる。なお、静止画処理部８４は、動画データを再生することはできないが、動画・音処理部７４のように、中継装置１０から送られて来た音データを再生して、スピーカ８３００に音を出力させることができるようにしてもよい。

【0081】

表示制御部８７は、電子黒板８におけるＣＰＵ８０１の処理によって実現され、表示手段の一例であるディスプレイ８２０に静止画を表示させる。

【0082】

記憶・読出部８９は、電子黒板８におけるＣＰＵ８０１の処理によって実現され、記憶部８０００に各種データ（または情報）を記憶したり、記憶部８０００から各種データ（または情報）を読み出したりする。

【0083】

＜通信管理サーバ９の機能構成＞
図９に示されているように、通信管理サーバ９は、送受信部９１、判断部９３、及び記憶・読出部９９を有している。これら各部は、図８に示されている各構成要素のいずれかが、ＨＤ９０４からＲＡＭ９０３上に展開されたプログラムに従ったＣＰＵ９０１からの命令によって、動作することで実現される機能又は手段である。

【0084】

また、通信管理サーバ９は、図８に示されているＲＯＭ９０２、ＲＡＭ９０３、及びＨＤ９０４によって構築される記憶部９０００を有している。更に、記憶部９０００には、通信管理ＤＢ（データベース）９００１、送信可能画像種類管理ＤＢ９００２、及び再生可能画像種類管理ＤＢ９００３が構築されている。通信管理ＤＢ９００１は、後述の通信管理テーブルによって構成されている。送信可能画像種類管理ＤＢ９００２は、後述の送信可能画像種類管理テーブルによって構成されている。再生可能画像種類管理ＤＢ９００３は、後述の送信可能画像種類管理テーブルによって構成されている。

【0085】

（通信管理テーブル）
図１０（ａ）は、通信管理テーブルの概念図である。この通信管理テーブルでは、送信装置を識別するための装置ＩＤ、及び受信装置を識別するための装置ＩＤが関連付けられて管理されている。

【0086】

（送信可能画像種類管理テーブル）
図１０（ｂ）は、送信可能画像種類管理テーブルの概念図である。この送信可能画像種類管理テーブルでは、送信装置を識別するための装置ＩＤ、及び送信可能な画像の画像種類が関連付けられて管理される。テーブルの「Ｎｏｎｅ」は何も設定されていない状態を示し、「Ｖ」はVideo（動画）を示し、「Ｓ」はStill image（静止画）を示している。送信装置が初期状態で、まだ画像データを送信していない場合、送信可能な画像の画像種類は管理されていない。送信可能な画像の画像種類は、受信装置（ビデオ会議端末７、電子黒板８）からの要求（後述のＳ１３参照）に応じて、動的に変更される。図１０（ｂ）では、送信装置の装置ＩＤ「０１ａａ」の場合、送信可能な画像の画像種類が、ＮｏｎｅからＳに変更され、更にＳからＳ及びＶに変更される状態を示している。なお、送信装置の装置ＩＤは、送信装置識別情報の一例である。

【0087】

（再生可能画像種類管理テーブル）
図１０（ｃ）は、再生可能画像種類管理テーブルの概念図である。この再生可能画像種類管理テーブルでは、受信装置を識別するための装置ＩＤ、及び再生可能な画像の画像種類が関連付けられて管理されている。

【0088】

（通信管理サーバの各機能構成）
次に、図１０を用いて、通信管理サーバ９の各機能構成について更に詳細に説明する。通信管理サーバ９の送受信部９１は、ネットワークＩ／Ｆ９１０、及びＣＰＵ９０１の処理によって実現され、通信ネットワーク６００を介して、他のサーバ、装置、及び端末と各種データ（または情報）の送受信を行う。

【0089】

判断部９３は、ＣＰＵ９０１の処理によって実現され、各種判断を行う。

【0090】

記憶・読出部９９は、ＣＰＵ９０１の処理によって実現され、記憶部９０００に各種データ（または情報）を記憶したり、記憶部９０００から各種データ（または情報）を読み出したりする。

【0091】

＜中継装置の機能構成＞
図９に示されているように、中継装置１０は、送受信部（転送部）１０１、判断部１０３及び記憶・読出部１０９を有している。これら各部は、図８に示されている各構成要素のいずれかが、ＨＤ９０４からＲＡＭ９０３上に展開されたプログラムに従ったＣＰＵ９０１からの命令によって、動作することで実現される機能又は手段である。

【0092】

また、中継装置１０は、図８に示されているＲＯＭ９０２、ＲＡＭ９０３、及びＨＤ９０４によって構築される記憶部１００００を有している。更に、記憶部１００００には、転送画像種類管理ＤＢ１０００１が構築されている。転送画像種類管理ＤＢ１０００１は、後述の転送画像種類管理テーブルによって構成されている。

【0093】

（転送画像種類管理テーブル）
図１０（ｄ）は、転送画像種類管理テーブルの概念図である。この転送画像種類管理テーブルでは、送信装置を識別するための装置ＩＤ、動画再生可能な受信装置の装置ＩＤ、及び静止画再生可能な受信装置の装置ＩＤが関連付けられて管理されている。ここでは、送信装置の装置ＩＤ「０１ａａ」に対して、当初は、静止画再生可能な受信装置の装置ＩＤ「０２ａｂ」が関連付けられている。その後、送信装置の装置ＩＤ「０１ａａ」に対して、動画再生可能な受信装置の装置ＩＤ［０２ａａ」が追加して関連付けられた場合が示されている。なお、受信装置の装置ＩＤは、受信装置識別情報の一例である。

【0094】

（中継装置の各機能構成）
次に、図９を用いて、中継装置１０の各機能構成について更に詳細に説明する。中継装置１０の送受信部１０１は、ネットワークＩ／Ｆ１０１０、及びＣＰＵ１００１の処理によって実現され、通信ネットワーク６００を介して、他のサーバ、装置、及び端末と各種データ（または情報）の送受信を行う。

【0095】

判断部１０３は、ＣＰＵ１００１の処理によって実現され、各種判断を行う。

【0096】

記憶・読出部１０９は、ＣＰＵ１００１の処理によって実現され、記憶部１００００に各種データ（または情報）を記憶したり、記憶部１００００から各種データ（または情報）を読み出したりする。

【0097】

〔本実施形態の処理又は動作〕
続いて、図１１乃至図１４を用いて、本実施形態の処理又は動作について説明する。図１１は、画像データの送受信の処理を示したシーケンス図である。

【0098】

図１１に示されているように、実時間データ処理端末３の通信部４８は、撮像ユニット４０から入力されて画像処理部３４でデジタル化された画像データを、近端末データ処理装置５の通信部５８に出力する（Ｓ１１）。次に、近端末データ処理装置５の送受信部５１は、通信部５８で入力された画像データを、通信ネットワーク６００を介して、中継装置１０に送信する（Ｓ１２）。これにより、中継装置１０の送受信部１０１は画像データを受信する。このように、ステップＳ１１，１２の処理が実行されるのは、既に送信すべき画像データの画像種類が決められている場合である。この場合、頻繁に使用される受信装置が分かっている場合は、実時間データ処理端末３での画像種類の変更処理（Ｓ１８参照）がほとんど実行されないため、実時間データ処理端末３の処理の負荷を軽減することができる。また、受信装置側で画像データを受信するまでの応答が早くなる。

【0099】

なお、送信すべき画像データの画像種類が決められていない場合には、ステップＳ１１，Ｓ１２の処理は実行されないようにしてもよい。即ち、最初は、画像取得端末２は、中継装置１０に対して画像データを送信していない。このように画像種類が決められていない場合、通信管理サーバ９が送信可能画像種類管理ＤＢ９００２（図１０（ｂ）参照）で管理している送信可能な画像の画像種類は、「Ｎｏｎｅ」である。この場合、受信装置の利用が少ないときや、静止画又は動画のいずれかの画像種類の画像を再生することができる受信装置が利用されることが判明していないときに、画像取得端末（送信装置）から中継装置１０まで通信をするためのネットワーク帯域を節約することができる。

【0100】

一方、電源スイッチ８２２のＯＮ等により、電子黒板８の送受信部８１は、通信管理サーバ９に対して、画像データが受信可能な状態である旨を示す受信可能情報を送信する（Ｓ１３）。この受信可能情報には、要求先（送信元）を特定するための送信装置の装置ＩＤ、及び要求元（送信先）としての自装置を特定するための受信装置の装置ＩＤが含まれている。これにより、通信管理サーバ９の送受信部９１は、受信可能情報を受信する。

【0101】

次に、通信管理サーバ９は、画像データの画像種類の判断処理を行う（Ｓ１４）。ここで、図１２を用いて画像種類の判断処理について説明する。図１２は、画像種類の判断処理を示したフローチャートである。

【0102】

図１２に示されているように、記憶・読出部９９は、通信管理ＤＢ９００１に対して、送信要求情報に含まれている受信装置の装置ＩＤを記憶する（Ｓ１４－１）。この場合、通信管理ＤＢ９００１では、新しいレコードが作成される。

【0103】

次に、記憶・読出部９９は、ステップＳ１３で受信された送信装置の装置ＩＤを検索キーとして、送信可能画像種類管理ＤＢ９００２を検索する（Ｓ１４－２）。また、記憶・読出部９９は、ステップＳ１３で受信された受信装置の装置ＩＤを検索キーとして、再生可能画像種類管理ＤＢ９００３を検索することにより、対応する再生可能な画像の画像種類を読み出す（Ｓ１４－３）。なお、ステップＳ１４－２とステップＳ１４－３の処理はどちらが先に行われてもよい。

【0104】

次に、判断部９３は、上記ステップＳ１４－２の検索により、既に何らかの画像種類が管理されているか否かを判断する（ステップＳ１４－４）。そして、画像種類が管理されていない場合には（ＮＯ）、記憶・読出部９９は、送信可能画像種類管理ＤＢ９００２において、ステップＳ１３で受信された送信装置の装置ＩＤに対応する送信可能な画像の画像種類を、「Ｎｏｎｅ」）から、再生可能画像種類管理ＤＢ９００３においてステップＳ１３で受信された受信装置の装置ＩＤに対応する再生可能な画像の画像種類と同じ画像種類に変更する（Ｓ１４－５）。ここでは、電子黒板８が特定の送信装置に対する最初の受信可能情報を送信したため、図１０（ｂ）に示されているように、送信可能な画像の画像種類が「Ｎｏｎｅ」から「Ｓ」に変更される。

【0105】

一方、上記ステップＳ１４－４において、判断部９３が、既に何からの画像種類が管理されていると判断した場合には、判断部９３は更に、ステップＳ１４－２で読み出された送信可能な画像の画像種類と、ステップＳ１４－３で読み出された再生可能な画像の画像種類とが同じであるかを判断する（Ｓ１４－６）。そして、判断部９３によって、同じであると判断された場合には（ＹＥＳ）、ステップＳ１９の処理へ進む。一方、判断部９３によって、同じでない（異なる）と判断された場合には（ＮＯ）、記憶・読出部９９は、送信可能画像種類管理ＤＢ９００２において既に管理されている画像種類に対して、再生可能画像種類管理ＤＢ９００３においてステップＳ１３で受信された受信装置の装置ＩＤに対応する再生可能な画像の画像種類と同じ画像種類を追加することで、画像種類を全体として変更する（Ｓ１４－５）。例えば、図１０（ｂ）に示されているように、送信可能な画像の画像種類「Ｓ」に対して「Ｖ」を追加することで、全体としては画像種類を「Ｓ」から「Ｓ，Ｖ」に変更される。

【0106】

続いて、ステップ１４－５の処理が実行された後について、図１１に戻り説明を続ける。

【0107】

通信管理サーバ９の送受信部９１は、通信ネットワーク６００を介し、近端末データ処理装置５に対して、再生可能な画像種類の画像データを要求する旨を示す画像種類要求情報を送信する（Ｓ１５）。これにより、近端末データ処理装置５の送受信部５１は、画像種類要求情報を受信する。

【0108】

次に、近端末データ処理装置５の通信部５８は、送受信部５１で受信された画像種類要求情報を、実時間データ処理端末３の通信部４８に出力する（Ｓ１６）。なお、ステップＳ１１において、初期状態で、実時間データ処理端末３が近端末データ処理装置５に対して画像データを出力していない場合には、ステップ１６で実時間データ処理端末３が入力する画像種類要求情報は、画像データの送信を開始する要求を示す画像送信要求情報としての役割も果たす。

【0109】

更に、近端末データ処理装置５の送受信部５１は、通信ネットワーク６００を介し、通信管理サーバ９に対して、画像種類の変更が完了した旨を示す変更完了通知を送信する（Ｓ１７）。これにより、通信管理サーバ９の送受信部９１は、変更完了通知を受信する。なお、近端末データ処理装置５は、実時間データ処理端末３に対して、変更が完了したか否かの問い合わせをして、変更が完了した旨の応答を受信してから、ステップＳ１７の処理を実行してもよい。

【0110】

次に、実時間データ処理端末３は、再生可能な画像データの画像種類の変更処理を行う（Ｓ１８）。ここで、図１３を用いて画像種類の変更処理について説明する。図１３は、再生可能な画像データの画像種類の変更処理を示したフローチャートである。

【0111】

図１３に示されているように、実時間データ処理端末３の判断部３３は、ステップＳ１６によって受信された画像種類要求情報で示される画像種類が何であるかを判断する（Ｓ１８－１）。そして、要求された画像種類が「動画」である場合には、画像処理部３４は撮像ユニット４０から入力された動画の画像データをH.264などの汎用的な動画のフォーマットに符号化する（Ｓ１８－２）。また、要求された画像種類が「静止画」である場合には、画像処理部３４は撮像ユニット４０から入力された画像データを所定時間間隔（例えば、１秒間隔）でJPEGなどの汎用的な静止画のフォーマットに符号化する（Ｓ１８－３）。

【0112】

更に、要求された画像種類が「動画」及び「静止画」である場合には、画像処理部３４は撮像ユニット４０から入力された画像データをH.264などの汎用的な動画のフォーマットに符号化すると共にJPEGなどの汎用的な静止画のフォーマットに符号化する（Ｓ１８－４）。動画及び静止画の両方の符号化を行う場合として、以下の３パターンが挙げられる。（１）最初に電子黒板８から静止画データの要求があった後にビデオ会議端末７から動画データの要求があった場合。
（２）最初にビデオ会議端末７から動画データの要求があった後に電子黒板８から静止画データの要求があった場合。
（３）動画と静止画の両方を再生可能な第三の装置から動画データと静止画データの両方の要求があった場合。

【0113】

一方、通信管理サーバ９では、ステップＳ１７の処理後、又は、ステップＳ１４－４において、判断部９３が双方の画像種類が同じであると判断した場合には、送受信部９１は、中継装置１０へ、画像データを転送する要求を示す転送要求情報を送信する（Ｓ１９）。この送信要求情報には、ステップＳ１３で受信された送信装置の装置ＩＤ及び受信装置の装置ＩＤ、並びに上記ステップＳ１４－２で読み出された画像種類が含まれている。これにより、中継装置１０の送受信部１０１は転送要求情報を受信する。

【0114】

次に、中継装置１０では、記憶・読出部１０９が、転送画像種類管理ＤＢ１０００１に、転送要求情報に含まれている送信装置の装置ＩＤ及び受信装置の装置ＩＤを記憶して管理する（Ｓ２０）。この場合、転送要求情報に含まれている画像種類が「Ｖ」の場合には、「動画再生可能な受信装置の装置ＩＤ」フィールドに、転送要求情報に含まれている受信装置の装置ＩＤが管理される。また、転送要求情報に含まれている画像種類が「Ｓ」の場合には、「静止画再生可能な受信装置の装置ＩＤ」フィールドに、転送要求情報に含まれている受信装置の装置ＩＤが管理される。ここでは、ステップＳ１３によって、静止画データを再生可能な電子黒板８が受信可能情報を送信しているため、「静止画再生可能な受信装置の装置ＩＤ」フィールドに受信装置としての電子黒板８の装置ＩＤ「０２ａｂ」が管理される。

【0115】

一方、実時間データ処理端末３では、ステップＳ１８による画像種類の変更処理により、通信部４８が近端末データ処理装置５の通信部５８に対して、静止画の画像データを出力する（Ｓ２１）。そして、近端末データ処理装置５の送受信部５１は、通信ネットワーク６００を介して、中継装置１０に、通信部５８で入力された静止画の画像データを送信する（Ｓ２２）。これにより、中継装置１０の送受信部１０１は、静止画の画像データを受信する。

【0116】

次に、中継装置１０は、転送可能な画像種類の判断処理を行う（Ｓ２３）。ここで、図１４を用いて、転送可能な画像データの画像種類の判断処理を詳細に説明する。図１４は、転送可能な画像データの画像種類の判断処理を示したフローチャートである。

【0117】

まず、記憶・読出部１０９は、送信装置の装置ＩＤを検索キーとして、転送画像種類管理ＤＢ１０００１の「動画再生可能な受信装置の装置ＩＤ」フィールドを検索する（Ｓ２３－１）。なお、この送信装置の装置ＩＤは、ステップＳ１２の前に近端末データ処理装置５と中継装置１０との間で通信セッションを確立する際に、中継装置１０が近端末データ処理装置５から取得されている。

【0118】

そして、判断部１０３は、「動画再生可能な受信装置の装置ＩＤ」フィールドに装置ＩＤが管理されているか否かにより、受信装置が動画再生可能か否かを判断する（Ｓ２３－２）。そして、判断部１０３が、装置ＩＤが管理されていると判断、即ち、受信装置が動画再生可能であると判断した場合には（ＹＥＳ）、送受信部１０１は転送部として、受信装置に動画の画像データを転送する（Ｓ２４）。これにより、受信装置は、動画の画像データを受信する。ここでは、受信装置が電子黒板８であるため、ステップＳ２４で、動画の画像データは転送されない。

【0119】

続いて、上記ステップＳ２３－２において、判断部１０３が、装置ＩＤが管理されていると判断、即ち、受信装置が動画再生可能であると判断することで（ＹＥＳ）、ステップＳ２４で動画の画像データを転送することになった後、又は、判断部１０３が、装置ＩＤが管理されていないと判断した後、即ち、受信装置が動画再生可能でないと判断（ＮＯ）した後、記憶・読出部１０９は、送信装置の装置ＩＤを検索キーとして、転送画像種類管理ＤＢ１０００１の「静止画再生可能な受信装置の装置ＩＤ」フィールドを検索する（Ｓ２３－３）。そして、判断部１０３は、「静止画再生可能な受信装置の装置ＩＤ」フィールドに装置ＩＤが管理されているか否かにより、受信装置が静止画再生可能か否かを判断する（Ｓ２３－４）。そして、判断部１０３が、装置ＩＤが管理されていると判断、即ち、受信装置が静止画再生可能であると判断した場合には（ＹＥＳ）、送受信部１０１は転送部として、電子黒板８に静止画の画像データを転送する（Ｓ２４）。これにより、受信装置は、静止画の画像データを受信する。ここでは、受信装置が電子黒板８であるため、ステップＳ２４で、静止画の画像データが転送され、電子黒板８の送受信部８１が受信する。

【0120】

一方、ステップＳ２３－４において、判断部１０３が、装置ＩＤが管理されていないと判断、即ち、受信装置が静止画再生可能でないと判断した場合には（ＮＯ）、処理が終了する。即ち、送受信部１０１は転送部として、電子黒板８に静止画の画像データを転送しない。

【0121】

次に、受信装置が画像データを再生する（Ｓ２５）。ここでは、受信装置が電子黒板８であるため、表示制御部８７がディスプレイ８２０上に静止画を再生（表示）させる。以上により、画像データの送受信の処理が終了する。

【0122】

続いて、更に、受信装置として動画の画像データを再生可能なビデオ会議端末７が、ステップＳ１３において、受信可能情報を送信する場合について説明する。この場合、ビデオ会議端末７の電源スイッチ７０９のＯＮ等により、ステップＳ１３で受信可能情報が送信される。また、送信可能画像種類管理ＤＢ９００２の「送信可能な画像の画像種類」フィールドで管理されている画像種類は「Ｓ」になっているため、画像種類「Ｖ」が追加されて、ステップＳ１４―５では、図１０（ｂ）に示されているように、画像種類「Ｓ」，「Ｖ」の２つが管理される。そして、この場合もステップＳ１５～Ｓ２５の処理が行われる。この場合、ステップＳ１８では、ステップＳ１８－４の処理が行われる。また、ステップＳ２３では、ステップＳ２３－２において、判断部１０３は受信装置が動画再生可能であると判断し（ＹＥＳ）、ステップＳ２４で、動画の画像データが転送される。これにより、電子黒板８は動画及び静止画の画像データを受信して静止画を再生することができ、ビデオ会議端末７は動画及び静止画の画像データを受信して動画を再生することができる。

【0123】

なお、上記実施形態では、既に使用している受信装置（電子黒板８）とは異なる画像種類の画像データを再生する他の受信装置（ビデオ会議端末７）を新たに使用する場合について説明したが、これに限るものではない。例えば、ビデオ会議端末７又は電子黒板８が、静止画及び動画の両方の画像種類を再生できる場合に、一方の画像種類の画像を再生しておき、その後に他方の画像種類の画像の再生に変更する場合であっても適用可能である。また、ビデオ会議端末７又は電子黒板８が、静止画及び動画の両方の画像種類を再生できる場合に、一方の画像種類の画像を再生しておき、その後に追加して他方の画像種類の画像を再生する場合であっても適用可能である。

【0124】

〔実施形態の主な効果〕
以上説明したように本実施形態によれば、送信装置（画像取得端末２等）が送信可能な画像データの画像種類と、受信装置（ビデオ会議端末７、電子黒板８）が再生可能な画像データの画像種類が同じでない場合には、通信管理サーバ９は、送信装置に対して受信装置が再生可能な画像種類の画像データを送信する要求を行う。これにより、既に使用している受信装置とは異なる画像種類の画像データを再生する他の受信装置を新たに使用する場合や、既に使用している受信装置が再生している画像データを異なる画像種類に変更する場合等であっても、受信装置は画像データを再生することができるという効果を奏する。

【0125】

〔補足〕
各ＣＰＵ３０１，５０１，７０１，９０１，１００１等の各構成要素は、単一であってもよく複数であってもよい。

【0126】

通信管理サーバ９は、単一のコンピュータによって構築されてもよく、複数のコンピュータによって構築されてもよい。

【0127】

図１０（ｂ）、（ｃ）に示されているように、送信可能画像種類管理ＤＢ９００２と再生可能画像種類管理ＤＢ９００３は異なるＤＢとして説明したが、まとめて１つの同じＤＢとしてもよい。

【0128】

更に、上述の実施形態における各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本実施形態における「処理回路」は、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上述した各機能を実行するよう設計されたASIC(Application Specific Integrated Circuit)、DSP（digital signal processor）、FPGA（field programmable gate array）、SOC(System on a chip)、GPU、及び従来の回路モジュール等のデバイスを含む。

【符号の説明】

【0129】

２ 画像取得端末
３ 実時間データ処理端末
５ 近端末データ処理装置
７ ビデオ会議端末（受信装置の一例）
８ 電子黒板（受信装置の一例）
９ 通信管理サーバ
１０ 中継装置
３４ 画像処理部（符号化手段のの一例）
５１ 送受信部（符号化後送信手段の一例）
９１ 送受信部
９３ 判断部
９９ 記憶・読出部
６００ 通信ネットワーク
９０００ 記憶部
９００１ 通信管理ＤＢ（通信管理手段の一例）
９００２ 送信可能画像種類管理ＤＢ（第１の画像種類管理手段の一例）
９００３ 再生可能画像種類管理ＤＢ（第２の画像種類管理手段の一例）
１００００ 記憶部
１０００１ 転送画像種類管理ＤＢ（転送画像種類管理手段の一例）

【先行技術文献】

【特許文献】

【0130】

【文献】特表２０１６－５１９８１２号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】