知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-08-05
(45)【発行日】2024-08-14
(54)【発明の名称】通信端末、画像通信システム、画像表示方法およびプログラム
(51)【国際特許分類】
H04N 23/63 20230101AFI20240806BHJP
H04N 23/698 20230101ALI20240806BHJP
H04N 23/60 20230101ALI20240806BHJP
H04N 21/431 20110101ALI20240806BHJP
H04N 21/4728 20110101ALI20240806BHJP
G06F 3/0484 20220101ALI20240806BHJP
【ＦＩ】
H04N23/63
H04N23/698
H04N23/60 300
H04N23/63 300
H04N21/431
H04N21/4728
G06F3/0484
【請求項の数】
8
(21)【出願番号】P 2020157198
(22)【出願日】2020-09-18
(65)【公開番号】P2022050979
(43)【公開日】2022-03-31
【審査請求日】2023-07-14
(73)【特許権者】
【識別番号】000006747
【氏名又は名称】株式会社リコー
(74)【代理人】
【識別番号】110002147
【氏名又は名称】弁理士法人酒井国際特許事務所
(72)【発明者】
【氏名】森田 健一郎
(72)【発明者】
【氏名】安中 英邦
(72)【発明者】
【氏名】相川 智慎
(72)【発明者】
【氏名】秋本 佑哉
(72)【発明者】
【氏名】神田 博之
(72)【発明者】
【氏名】上主 恭輔
【審査官】櫃本 研太郎
(56)【参考文献】
【文献】特開２０１３－２３６２１５（ＪＰ，Ａ）
【文献】特開２０１７－１０８３５６（ＪＰ，Ａ）
【文献】国際公開第９９／０３５８５０（ＷＯ，Ａ１）
【文献】特開２００５－１４２６８３（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ ５／２２２－５／２５７、２１／００－２１／８５８、
２３／００、２３／４０－２３／７６、２３／９０－２３／９５９
Ｈ０４Ｎ ７／１８
Ｇ０６Ｆ ３／０４８－３／０４８９５
(57)【特許請求の範囲】
【請求項1】
配信拠点に設置された複数の撮影装置の撮影画像を受信する通信端末であって、利用者によって指定された前記配信拠点における注目点を受け付ける受付手段と、
通信管理システムに記憶された前記複数の撮影装置の設置位置情報を受信する受信手段と、
前記受付手段で受け付けられた前記注目点の位置と複数の前記撮影装置の設置位置とに基づいて、前記複数の撮影装置のうちの特定の撮影装置を選択する選択手段と、
前記選択手段で選択された前記特定の撮影装置の撮影画像における前記注目点を含む所定領域を示す所定領域情報を生成する生成手段と、
前記生成手段で生成された前記所定領域情報を取得する取得手段と、
前記取得手段で取得された前記所定領域情報に基づいて、前記特定の撮影装置の撮影画像における前記所定領域の画像である所定領域画像を表示する表示制御手段と、
を備え、
前記選択手段は、前記注目点の位置を中心に分割された前記配信拠点の複数のエリアごとに前記注目点に最も近い撮影装置を、前記特定の撮影装置として選択する通信端末。
【請求項2】
前記表示制御手段は、前記配信拠点を示すマップ画像を表示させ、前記受付手段は、前記表示制御手段で表示された前記マップ画像に対する前記注目点を受け付ける請求項１に記載の通信端末。
【請求項3】
前記表示制御手段は、前記撮影装置によって撮影された撮影画像を表示させ、前記受付手段は、前記表示制御手段で表示された前記撮影画像に対する前記注目点を受け付ける請求項１に記載の通信端末。
【請求項4】
前記取得手段は、複数の前記撮影装置に対応する複数の前記所定領域情報を取得し、前記表示制御手段は、前記取得手段で取得された複数の前記所定領域情報のうち少なくとも一つの所定領域情報に対応する前記所定領域画像を表示する請求項１乃至３のいずれか一項に記載の通信端末。
【請求項5】
前記撮影画像は、全天球画像である請求項１乃至４のいずれか一項に記載の通信端末。
【請求項6】
配信拠点に設置された複数の撮影装置の撮影画像を受信する通信端末と、前記通信端末と通信可能な通信管理システムと、を備える画像通信システムであって、利用者によって指定された前記配信拠点における注目点を受け付ける受付手段と、
前記受付手段で受け付けられた前記注目点の位置と複数の前記撮影装置の設置位置とに基づいて、前記複数の撮影装置のうちの特定の撮影装置を選択する選択手段と、
前記選択手段で選択された前記特定の撮影装置の撮影画像における前記注目点を含む所定領域を示す所定領域情報を生成する生成手段と、
前記生成手段で生成された前記所定領域情報に示される前記所定領域の画像である所定領域画像を表示する表示制御手段と、
を備え、
前記選択手段は、前記注目点の位置を中心に分割された前記配信拠点の複数のエリアごとに前記注目点に最も近い撮影装置を、前記特定の撮影装置として選択する画像通信システム。
【請求項7】
配信拠点に設置された複数の撮影装置の撮影画像を受信する通信端末が実行する画像表示方法であって、利用者によって指定された前記配信拠点における注目点を受け付ける受付ステップと、
通信管理システムに記憶された前記複数の撮影装置の設置位置情報を受信する受信ステップと、
前記受付ステップで受け付けられた前記注目点の位置と複数の前記撮影装置の設置位置とに基づいて、前記複数の撮影装置のうちの特定の撮影装置を選択する選択ステップと、
前記選択ステップで選択された前記特定の撮影装置の撮影画像における前記注目点を含む所定領域を示す所定領域情報を生成する生成ステップと、
前記生成ステップで生成された前記所定領域情報を取得する取得ステップと、
前記取得ステップで取得された前記所定領域情報に基づいて、前記特定の撮影装置の撮影画像における前記所定領域の画像である所定領域画像を表示する表示制御ステップと、
を実行し、
前記選択ステップは、前記注目点の位置を中心に分割された前記配信拠点の複数のエリアごとに前記注目点に最も近い撮影装置を、前記特定の撮影装置として選択する画像表示方法。
【請求項8】
配信拠点に設置された複数の撮影装置の撮影画像を受信する通信端末に、利用者によって指定された前記配信拠点における注目点を受け付ける受付ステップと、
通信管理システムに記憶された前記複数の撮影装置の設置位置情報を受信する受信ステップと、
前記受付ステップで受け付けられた前記注目点の位置と複数の前記撮影装置の設置位置とに基づいて、前記複数の撮影装置のうちの特定の撮影装置を選択する選択ステップと、
前記選択ステップで選択された前記特定の撮影装置の撮影画像における前記注目点を含む所定領域を示す所定領域情報を生成する生成ステップと、
前記生成ステップで生成された前記所定領域情報を取得する取得ステップと、
前記取得ステップで取得された前記所定領域情報に基づいて、前記特定の撮影装置の撮影画像における前記所定領域の画像である所定領域画像を表示する表示制御ステップと、
を実行させ、
前記選択ステップは、前記注目点の位置を中心に分割された前記配信拠点の複数のエリアごとに前記注目点に最も近い撮影装置を、前記特定の撮影装置として選択するプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示内容は、通信端末、画像通信システム、画像表示方法およびプログラムに関する。
【背景技術】
【0002】
複数の広角レンズまたは魚眼レンズを用いて全方位を撮影可能な撮影装置が知られている。また、このような撮影装置を用いて撮影された画像データをリアルタイムに配信し、撮影装置が設置された配信拠点の状況を、別拠点においてリアルタイムに閲覧可能なシステムが知られている。
【0003】
例えば、特許文献１には、遠隔地に配置された複数のカメラが撮像した画像を端末に表示させて、ユーザが遠隔地の様子を把握することができるシステムが開示されている。
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、従来の方法では、閲覧者が配信拠点の特定の箇所（例えば、注目点）を閲覧したい場合、配信拠点に設置された複数の撮影装置に対する個別操作を行う必要であるという課題があった。
【課題を解決するための手段】
【0005】
上述した課題を解決すべく、請求項１に係る発明は、配信拠点に設置された複数の撮影装置の撮影画像を受信する通信端末であって、利用者によって指定された前記配信拠点における注目点を受け付ける受付手段と、通信管理システムに記憶された前記複数の撮影装置の設置位置情報を受信する受信手段と、前記受付手段で受け付けられた前記注目点の位置と複数の前記撮影装置の設置位置とに基づいて、前記複数の撮影装置のうちの特定の撮影装置を選択する選択手段と、前記選択手段で選択された前記特定の撮影装置の撮影画像における前記注目点を含む所定領域を示す所定領域情報を生成する生成手段と、前記生成手段で生成された前記所定領域情報を取得する取得手段と、前記取得手段で取得された前記所定領域情報に基づいて、前記特定の撮影装置の撮影画像における前記所定領域の画像である所定領域画像を表示する表示制御手段と、を備え、前記選択手段は、前記注目点の位置を中心に分割された前記配信拠点の複数のエリアごとに前記注目点に最も近い撮影装置を、前記特定の撮影装置として選択する通信端末である。
【発明の効果】
【0006】
本発明によれば、利用者によって指定された注目点に対応する配信拠点の画像を表示させることができるという効果を奏する。
【図面の簡単な説明】
【0007】
【図1】（Ａ）は撮影装置の左側面図であり、（Ｂ）は撮影装置の正面図であり、（Ｃ）は撮影装置の平面図である。
【図2】撮影装置の使用イメージ図である。
【図3】（Ａ）は撮影装置で撮影された半球画像（前）、（Ｂ）は撮影装置で撮影された半球画像（後）、（Ｃ）は正距円筒図法により表された画像を示した図である。
【図4】（Ａ）正距円筒射影画像で球を被う状態を示した概念図、（Ｂ）全天球画像を示した図である。
【図5】全天球画像を三次元の立体球とした場合の仮想カメラおよび所定領域の位置を示した図である。
【図7】所定領域情報と所定領域Ｔの画像との関係を示した図である。
【図8】球座標による三次元ユークリッド空間内の点を示した図である。
【図9】画像通信システムの全体構成の一例を示す図である。
【図10】画像通信システムにおける配信拠点の概略を説明するための図である。
【図11】撮影装置のハードウエア構成の一例を示す図である。
【図12】配信端末、通信管理システムおよび通信端末のハードウエア構成の一例を示す図である。
【図13】画像通信システムの機能構成の一例を示す図である。
【図14】画像通信システムの機能構成の一例を示す図である。
【図15】（Ａ）は、撮影装置管理テーブルの一例を示す概略図であり、（Ｂ）は、画像種類管理テーブルの一例を示す概念図である。
【図16】（Ａ）は、セッション管理テーブルの一例を示す概略図であり、（Ｂ）は、画像種類管理テーブルの一例を示す概念図である。
【図17】（Ａ）は、所定領域管理テーブルの一例を示す概略図であり、（Ｂ）は、設置情報管理テーブルの一例を示す概念図である。
【図18】配信拠点管理テーブルの一例を示す概略図である。
【図19】（Ａ）は、画像種類管理テーブルの一例を示す概略図であり、（Ｂ）は、所定領域管理テーブルの一例を示す概念図である。
【図20】画像通信システムにおける特定の通信セッションへの参加処理の一例を示すシーケンス図である。
【図21】通信セッションの選択画面の一例を示す図である。
【図22】画像通信システムにおける画像種類情報の管理処理の一例を示すシーケンス図である。
【図23】画像通信システムにおける撮影画像データおよび音データの通信処理の一例を示すシーケンス図である。
【図24】画像通信システムにおける注目点の表示処理の一例を示すシーケンス図である。
【図25】通信端末に表示される拠点表示画面の一例を示す図である。
【図26】撮影装置の選択処理の一例を示すフローチャートである。
【図27】撮影装置の選択処理の一例の概略的に説明するための図である。
【図28】所定領域画像が表示された表示画面の一例を示す図である。
【図29】画像通信システムにおける注目点の表示処理の変形例を示すシーケンス図である。
【発明を実施するための形態】
【0008】
以下、図面を参照しながら、発明を実施するための形態を説明する。なお、図面の説明において同一要素には同一符号を付し、重複する説明は省略する。
【0009】
【0010】
まず、図１を用いて、撮影装置１０の外観を説明する。撮影装置１０は、全天球（３６０°）画像の元になる撮影画像を得るためのデジタルカメラである。図１（Ａ）は撮影装置の左側面図であり、図１（Ｂ）は撮影装置の正面図であり、図１（Ｃ）は撮影装置の平面図である。
【0011】
図１（Ａ）に示されているように、撮影装置１０は、人間が片手で持つことができる大きさである。また、図１（Ａ），図１（Ｂ），図１（Ｃ）に示されているように、撮影装置１０の上部には、正面側（前側）に撮像素子１０３ａおよび背面側（後側）に撮像素子１０３ｂが設けられている。これら撮像素子（画像センサ）１０３ａ,１０３ｂは、半球画像（画角１８０°以上）の撮影が可能な光学部材（例えば、後述するレンズ１０２ａ,１０２ｂ）と併せて用いられる。また、図１（Ｂ）に示されているように、撮影装置１０の正面側と反対側の面には、シャッターボタン等の操作部１１５が設けられている。
【0012】
次に、図２を用いて、撮影装置１０の使用状況を説明する。図２は、撮影装置の使用イメージ図である。撮影装置１０は、図２に示されているように、例えば、ユーザが手に持ってユーザの周りの被写体を撮影するために用いられる。この場合、図１に示されている撮像素子１０３ａおよび撮像素子１０３ｂによって、それぞれユーザの周りの被写体が撮像されることで、二つの半球画像を得ることができる。
【0013】
次に、図３および図４を用いて、撮影装置１０で撮影された画像から全天球画像が作成されるまでの処理の概略を説明する。図３（Ａ）は撮影装置で撮影された半球画像（前側）、図３（Ｂ）は撮影装置で撮影された半球画像（後側）、図３（Ｃ）は正距円筒図法により表された画像（以下、「正距円筒射影画像」という）を示した図である。図４（Ａ）は正距円筒射影画像で球を被う状態を示した概念図、図４（Ｂ）は全天球画像を示した図である。
【0014】
図３（Ａ）に示されているように、撮像素子１０３ａによって得られた画像は、後述のレンズ１０２ａによって湾曲した半球画像（前側）となる。また、図３（Ｂ）に示されているように、撮像素子１０３ｂによって得られた画像は、後述のレンズ１０２ｂによって湾曲した半球画像（後側）となる。そして、撮影装置１０は、半球画像（前側）と１８０度反転された半球画像（後側）とを合成して、図３（Ｃ）に示されているような正距円筒射影画像ＥＣが作成する。
【0015】
そして、撮影装置１０は、OpenGL ES（Open Graphics Library for Embedded Systems）を利用することで、図４（Ａ）に示されているように、球面を覆うように正距円筒射影画像ＥＣを貼り付け、図４（Ｂ）に示されているような全天球画像（全天球パノラマ画像）ＣＥを作成する。このように、全天球画像ＣＥは、正距円筒射影画像ＥＣが球の中心を向いた画像として表される。なお、OpenGL ESは、２Ｄ(2-Dimensions)および３Ｄ(3-Dimensions)のデータを視覚化するために使用するグラフィックスライブラリである。また、全天球画像ＣＥは、静止画であっても動画であってもよい。
【0016】
以上のように、全天球画像ＣＥは、球面を覆うように貼り付けられた画像であるため、人間が見ると違和感を持ってしまう。そこで、撮影装置１０は、全天球画像ＣＥの一部の所定領域Ｔ（以下、「所定領域画像」という）を湾曲の少ない平面画像として表示することで、人間に違和感を与えない表示をすることができる。これに関して、図５乃至図８を用いて説明する。
【0017】
図５は、全天球画像を三次元の立体球とした場合の仮想カメラおよび所定領域の位置を示した図である。仮想カメラＩＣは、三次元の立体球として表示されている全天球画像ＣＥに対して、その画像を見るユーザの視点の位置に相当するものである。図６（Ａ）は、図５の立体斜視図、図６（Ｂ）は、ディスプレイに表示された場合の所定領域画像を表す図である。図６（Ａ）は、図５に示した全天球画像ＣＥを、三次元の立体球ＣＳで表している。このように生成された全天球画像ＣＥが、立体球ＣＳであるとした場合、図５に示されているように、仮想カメラＩＣは、全天球画像ＣＥの内部に位置している。全天球画像ＣＥにおける所定領域Ｔは、仮想カメラＩＣの撮影領域であり、全天球画像ＣＥを含む三次元の仮想空間における仮想カメラＩＣの撮影方向と画角を示す所定領域情報によって特定される。また、所定領域Ｔのズームは、仮想カメラＩＣを全天球画像ＣＥに近づいたり、遠ざけたりすることで表現することもできる。所定領域画像Ｑは、全天球画像ＣＥにおける所定領域Ｔの画像である。したがって、所定領域Ｔは、画角αと、仮想カメラＩＣから全天球画像ＣＥまでの距離ｆにより特定できる（図７参照）。
【0018】
そして、図６（Ａ）に示されている所定領域画像Ｑは、図６（Ｂ）に示されているように、所定のディスプレイに、仮想カメラＩＣの撮影領域の画像として表示される。図６（Ｂ）に示されている画像は、初期設定（デフォルト）された所定領域情報によって表された所定領域画像である。以下、仮想カメラＩＣの撮影方向（ｅａ，ａａ）と画角（α）を用いて説明する。なお、所定領域Ｔは、画角αと距離ｆではなく、所定領域Ｔである仮想カメラＩＣの撮像領域（Ｘ，Ｙ，Ｚ）によって示してもよい。
【0019】
次に、図７を用いて、所定領域情報と所定領域Ｔの画像の関係について説明する。図７は、所定領域情報と所定領域Ｔの画像との関係を示した図である。図７に示されているように、「ea」はelevation angle（仰角）、「aa」はazimuth angle（方位角）、「α」は画角(Angle)を示す。すなわち、仮想カメラＩＣの姿勢は、撮影方向(ea,aa)で示される仮想カメラＩＣの注視点が、仮想カメラＩＣの撮影領域である所定領域Ｔの中心点ＣＰ（x,ｙ）となるように変更される。図７に示されているように、仮想カメラＩＣの画角αによって表される所定領域Ｔの対角画角をαとした場合の中心点ＣＰ（x,ｙ）が、所定領域情報のパラメータ(（x,ｙ）)となる。所定領域画像Ｑは、全天球画像ＣＥにおける所定領域Ｔの画像である。ｆは、仮想カメラＩＣから中心点ＣＰ（x,ｙ）までの距離である。Ｌは、所定領域Ｔの任意の頂点と中心点ＣＰ（x,ｙ）との距離である（２Ｌは対角線）。そして、図７では、一般的に以下の（式１）で示される三角関数が成り立つ。
【0020】
【数1】
【0021】
なお、上記で説明した撮影装置１０は、広角画像を取得可能な撮影装置の一例であり、全天球画像は、広角画像の一例である。ここで、広角画像は、一般には広角レンズを用いて撮影された画像であり、人間の目で感じるよりも広い範囲を撮影することができるレンズで撮影されたものである。また、一般的に３５ｍｍフィルム換算で３５ｍｍ以下の焦点距離のレンズで、撮影された画像を意味する。
【0022】
図８は、球座標による三次元ユークリッド空間内の点を示した図である。ここで、中心点ＣＰを球面極座標系で表現したときの位置座標を(r,θ,φ)とする。(r,θ,φ)は、それぞれ動径、極角、方位角である。動径ｒは、全天球画像を含む三次元の仮想空間の原点から中心点ＣＰまでの距離であるため、ｆに等しい。図８は、これらの関係を表した図である。以降、仮想カメラＩＣの位置座標(r,θ,φ)を用いて説明する。
【0023】
●画像通信システムの概略
続いて、図９を用いて、第１の実施形態の画像通信システムの構成の概略について説明する。図９は、画像通信システムの全体構成の一例を示す図である。図９に示されている画像通信システム１は、複数の配信拠点から配信される映像等の撮影画像を、複数の閲覧拠点において表示させることで、配信拠点が撮影された広範囲な画像（例えば、全天球画像）を、リアルタイムに閲覧できるシステムである。
続いて、図９を用いて、第１の実施形態の画像通信システムの構成の概略について説明する。図９は、画像通信システムの全体構成の一例を示す図である。図９に示されている画像通信システム１は、複数の配信拠点から配信される映像等の撮影画像を、複数の閲覧拠点において表示させることで、配信拠点が撮影された広範囲な画像（例えば、全天球画像）を、リアルタイムに閲覧できるシステムである。
【0024】
図９に示されているように、画像通信システム１は、複数の配信拠点（配信拠点Ａ、配信拠点Ｂ）のそれぞれに位置する撮影装置１０（１０Ａ,１０Ｂ、以下区別する必要のないときは、撮影装置１０と称する。）および配信端末３０（３０Ａ,３０Ｂ、以下区別する必要のないときは、配信端末３０と称する。）、通信管理システム５０、並びに複数の閲覧拠点（閲覧拠点Ａ、閲覧拠点Ｂ）のそれぞれに位置する通信端末７０（７０Ａ,７０Ｂ、以下区別する必要のないときは、通信端末７０と称する。）を含む。
【0025】
画像通信システム１を構成する配信端末３０、通信管理システム５０および通信端末７０は、通信ネットワーク１００を介して通信することができる。通信ネットワーク１００は、インターネット、移動体通信網、ＬＡＮ(Local Area Network)等によって構築されている。なお、通信ネットワーク１００には、有線通信だけでなく、３Ｇ(3rd Generation)、４Ｇ(4th Generation)、５Ｇ（5th Generation）、Ｗｉ－Ｆｉ(Wireless Fidelity)（登録商標）、ＷｉＭＡＸ(Worldwide Interoperability for Microwave Access)またはＬＴＥ(Long Term Evolution)等の無線通信によるネットワークが含まれてもよい。
【0026】
これらのうち、撮影装置１０は、上述のように、被写体や風景等を撮影して全天球画像の元になる二つの半球画像を得るための特殊なデジタルカメラである。撮影装置１０によって得られる撮影画像は、動画であっても静止画であってもよく、動画と静止画の両方であってもよい。また、撮影画像は、画像とともに音声を含んでもよい。配信端末３０は、ＵＳＢ(Universal Serial Bus)ケーブル等の有線ケーブルを介して撮影装置１０から取得した画像を、通信管理システム５０を介して、通信端末７０に配信する。ここでは、撮影装置１０Ａおよび配信端末３０Ａは、同じ拠点である配信拠点Ａに置かれている。一方、撮影装置１０Ｂおよび配信端末３０Ｂは、同じ拠点である配信拠点Ｂに置かれている。なお、配信拠点は、二拠点に限られず、一拠点のみであってもよいし、三拠点以上であってもよい。また、撮影装置１０および配信端末３０の接続関係は、有線ケーブルを用いた有線接続ではなく、近距離無線通信等を用いた無線接続であってもよい。
【0027】
通信管理システム５０は、配信端末３０および通信端末７０の通信を管理および制御したり、送受信される画像データの種類（一般画像と特殊画像の種別）を管理したりする。ここでは、特殊画像は、全天球画像である。また、通信管理システム５０は、画像通信のサービスを行なうサービス会社等に設置されている。
【0028】
なお、通信管理システム５０は、単一のコンピュータによって構築されてもよいし、各部（機能または手段）を分割して任意に割り当てられた複数のコンピュータによって構築されてもよい。また、通信管理システム５０の機能の全てまたは一部は、クラウド環境に存在するサーバコンピュータであってもよいし、オンプレミス環境に存在するサーバコンピュータであってもよい。
【0029】
通信端末７０は、各閲覧拠点の利用者によって使用されるＰＣ等のコンピュータである。通信端末７０は、配信端末３０から配信された画像（静止画または動画）を表示させる。通信端末７０は、通信ネットワーク１００を介して、撮影装置１０によって撮影された撮影画像である全天球画像を取得する。また、通信端末７０は、OpenGL ESをインストールしており、全天球画像の一部の領域を示す所定領域情報を作成したり、配信端末３０から送られて来た全天球画像から所定領域画像を作成したりすることができる。ここでは、通信端末７０Ａは、利用者Ａ１が位置する閲覧拠点Ａに置かれており、通信端末７０Ｂは、利用者Ｂが位置する閲覧拠点Ｂに置かれている。
【0030】
なお、図９に示す各端末および装置（通信端末、撮影装置および配信端末）、並びに利用者の配置は一例であり、他の例であってもよい。また、通信端末７０は、ＰＣに限られず、例えば、タブレット端末、スマートフォン、ウェアラブル端末、、ＰＪ（Projector：プロジェクタ）、ＩＷＢ（Interactive White Board：相互通信が可能な電子式の黒板機能を有する白板）または自律走行ロボット等であってもよい。
【0031】
ここで、図１０を用いて、画像通信システム１における配信拠点について概略的に説明する。図１０は、画像通信システムにおける配信拠点の概略を説明するための図である。図１０は、配信拠点Ａに配置された撮影装置１０Ａと配信端末３０Ａを示す。なお、図１０は、配信拠点Ａの例を説明するが、配信拠点Ｂ等の他の配信拠点においても同様である。
【0032】
図１０に示されている配信拠点Ａは、例えば、オフィスフロア等の空間内に、複数の撮影装置１０Ａ（撮影装置１０Ａ－１～撮影装置１０Ａ－８）、およびそれぞれの撮影装置１０Ａと通信可能な配信端末３０Ａが設置されている。なお、配信拠点は、オフィスフロアに限られず、学校、工場、倉庫、建設現場、サーバルームまたは店舗等、閲覧拠点の利用者（閲覧者）が遠隔拠点の状況を把握したいニーズが存在する空間であればよい。撮影装置１０Ａは、例えば、オフィスフロアに配置されたデスクの上に所定の間隔で配置されている。配信拠点Ａは、複数の撮影装置１０Ａを用いて、配信拠点Ａの全体が撮影される。また、配信端末３０Ａは、撮影装置１０Ａから撮影画像データで受信し、受信した撮影画像データを、閲覧拠点の通信端末７０に配信する。なお、配信拠点Ａに設置される撮影装置１０Ａおよび配信端末３０Ａの数は、これに限られない。
【0033】
従来、遠隔地に配置された複数の撮影装置によって撮影された撮影画像を、閲覧拠点から閲覧可能なシステムにおいて、配信拠点の特定の箇所の様子を見たい場合、利用者は、どの撮影装置の撮影画像を見ればよいのかがわからなかった。また、異なる閲覧拠点の利用者が異なる箇所を閲覧したい場合、撮影装置に対する操作（例えば、ＰＴＺ(pan-tilt-zoom)操作）が競合するため、同じ配信拠点を閲覧する複数の利用者がそれぞれ異なる箇所を閲覧するような排他的な閲覧を行うことができなかった。さらに、撮影装置によって上述のような全天球画像を撮影する場合であっても、複数の全天球画像を個別に操作して目的の箇所を表示させるための処理を行わなければならず、利用者が直感的に操作することができなかった。そこで、画像通信システム１は、利用者の表示画面に対する直感的な操作によって、複数の利用者が同じ撮影装置から取得した撮影画像を用いて配信拠点の異なる箇所を注目して閲覧可能にする。
【0034】
●ハードウエア構成
続いて、図１１および図１２を用いて、実施形態に係る画像通信システムを構成する各装置または端末のハードウエア構成を説明する。なお、図１１および図１２に示されているハードウエア構成は、必要に応じて構成要素が追加または削除されてもよい。
続いて、図１１および図１２を用いて、実施形態に係る画像通信システムを構成する各装置または端末のハードウエア構成を説明する。なお、図１１および図１２に示されているハードウエア構成は、必要に応じて構成要素が追加または削除されてもよい。
【0035】
○撮影装置のハードウエア構成○
まず、図１１を用いて、撮影装置１０のハードウエア構成を説明する。図１１は、撮影装置のハードウエア構成の一例を示す図である。以下では、撮影装置１０は、二つの撮像素子を使用した全天球（全方位）撮影装置とするが、撮像素子は二つ以上いくつでもよい。また、必ずしも全方位撮影専用の装置である必要はなく、通常のデジタルカメラやスマートフォン等に後付けの全方位撮影ユニットを取り付けることで、実質的に撮影装置１０と同じ機能を有するようにしてもよい。
まず、図１１を用いて、撮影装置１０のハードウエア構成を説明する。図１１は、撮影装置のハードウエア構成の一例を示す図である。以下では、撮影装置１０は、二つの撮像素子を使用した全天球（全方位）撮影装置とするが、撮像素子は二つ以上いくつでもよい。また、必ずしも全方位撮影専用の装置である必要はなく、通常のデジタルカメラやスマートフォン等に後付けの全方位撮影ユニットを取り付けることで、実質的に撮影装置１０と同じ機能を有するようにしてもよい。
【0036】
図１１に示されているように、撮影装置１０は、撮像ユニット１０１、画像処理ユニット１０４、撮像制御ユニット１０５、マイク１０８、音処理ユニット１０９、ＣＰＵ(Central Processing Unit)１１１、ＲＯＭ(Read Only Memory)１１２、ＳＲＡＭ(Static Random Access Memory)１１３、ＤＲＡＭ(Dynamic Random Access Memory)１１４、操作部１１５、入出力Ｉ／Ｆ１１６、近距離通信回路１１７、近距離通信回路１１７のアンテナ１１７ａ、電子コンパス１１８、ジャイロセンサ１１９、加速度センサ１２０およびネットワークＩ／Ｆ１２１によって構成されている。
【0037】
このうち、撮像ユニット１０１は、各々半球画像を結像するための１８０°以上の画角を有する広角レンズ（いわゆる魚眼レンズ）１０２ａ,１０２ｂ（以下区別する必要のないときは、レンズ１０２と称する。）、および各レンズに対応させて設けられている二つの撮像素子１０３ａ,１０３ｂを備えている。撮像素子１０３ａ,１０３ｂは、レンズ１０２ａ,１０２ｂによる光学像を電気信号の画像データに変換して出力するＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサやＣＣＤ(Charge Coupled Device)センサ等の画像センサ、この画像センサの水平または垂直同期信号や画素クロック等を生成するタイミング生成回路、およびこの撮像素子の動作に必要な種々のコマンドもしくはパラメータ等が設定されるレジスタ群等を有している。
【0038】
撮像ユニット１０１の撮像素子１０３ａ,１０３ｂは、各々、画像処理ユニット１０４とパラレルＩ／Ｆバスを介して接続している。一方、撮像ユニット１０１の撮像素子１０３ａ,１０３ｂは、それぞれ撮像制御ユニット１０５とシリアルＩ／Ｆバス（Ｉ２Ｃバス等）を介して接続している。画像処理ユニット１０４、撮像制御ユニット１０５および音処理ユニット１０９は、バス１１０を介してＣＰＵ１１１と接続している。さらに、バス１１０には、ＲＯＭ１１２、ＳＲＡＭ１１３、ＤＲＡＭ１１４、操作部１１５、入出力Ｉ／Ｆ１１６、近距離通信回路１１７、電子コンパス１１８、ジャイロセンサ１１９、加速度センサ１２０およびネットワークＩ／Ｆ１２１等も接続される。
【0039】
画像処理ユニット１０４は、撮像素子１０３ａ,１０３ｂから出力される画像データをパラレルＩ／Ｆバスを通して取り込み、それぞれの画像データに対して所定の処理を施した後、これらの画像データを合成処理して、図３（Ｃ）に示されているような正距円筒射影画像のデータを作成する。
【0040】
撮像制御ユニット１０５は、一般に撮像制御ユニット１０５をマスタデバイス、撮像素子１０３ａ,１０３ｂをスレーブデバイスとして、Ｉ２Ｃバスを利用して、撮像素子１０３ａ,１０３ｂのレジスタ群にコマンド等を設定する。必要なコマンド等は、ＣＰＵ１１１から受け取る。また、撮像制御ユニット１０５は、同じくＩ２Ｃバスを利用して、撮像素子１０３ａ,１０３ｂのレジスタ群のステータスデータ等を取り込み、ＣＰＵ１１１に送る。
【0041】
また、撮像制御ユニット１０５は、操作部１１５のシャッターボタンが押下されたタイミングで、撮像素子１０３ａ,１０３ｂに画像データの出力を指示する。撮影装置１０によっては、ディスプレイ（例えば、近距離通信回路１１７を用いて撮影装置１０と近距離通信を行うスマートフォン等の外部端末のディスプレイ）によるプレビュー表示機能や動画表示に対応する機能を持つ場合もある。この場合は、撮像素子１０３ａ,１０３ｂからの画像データの出力は、所定のフレームレート（フレーム／分）によって連続して行われる。
【0042】
また、撮像制御ユニット１０５は、後述するように、ＣＰＵ１１１と協働して撮像素子１０３ａ,１０３ｂの画像データの出力タイミングの同期をとる同期制御手段としても機能する。なお、本実施形態では、撮影装置１０には表示部（ディスプレイ）が設けられていないが、表示部を設けてもよい。マイク１０８は、音を音（信号）データに変換する。音処理ユニット１０９は、マイク１０８から出力される音データをＩ／Ｆバスを通して取り込み、音データに対して所定の処理を施す。
【0043】
ＣＰＵ１１１は、撮影装置１０の全体の動作を制御すると共に必要な処理を実行する。ＲＯＭ１１２は、ＣＰＵ１１１のための種々のプログラムを記憶している。ＳＲＡＭ１１３およびＤＲＡＭ１１４はワークメモリであり、ＣＰＵ１１１で実行するプログラムや処理途中のデータ等を記憶する。特にＤＲＡＭ１１４は、画像処理ユニット１０４での処理途中の画像データや処理済みの正距円筒射影画像のデータを記憶する。
【0044】
操作部１１５は、種々の操作ボタンや電源スイッチ、シャッターボタン、および表示と操作の機能を兼ねたタッチパネル等の総称である。ユーザは、操作部１１５を操作することで、種々の撮影モードや撮影条件等を入力する。
【0045】
入出力Ｉ／Ｆ１１６は、ＳＤカード等の外付けのメディアまたはパーソナルコンピュータ等とのインターフェース回路（ＵＳＢＩ／Ｆ等）の総称である。入出力Ｉ／Ｆ１１６は、無線、有線を問わない。ＤＲＡＭ１１４に記憶された正距円筒射影画像のデータは、入出力Ｉ／Ｆ１１６を介して外付けのメディアに記録されたり、必要に応じて入出力Ｉ／Ｆ１１６を介して外部端末（装置）に送信されたりする。
【0046】
近距離通信回路１１７は、撮影装置１０に設けられたアンテナ１１７ａを介して、ＮＦＣ(Near Field Communication)、Ｂｌｕｅｔｏｏｔｈ（登録商標）またはＷｉ－Ｆｉ等の近距離無線通信技術によって、外部端末（装置）と通信を行う。近距離通信回路１１７は、正距円筒射影画像のデータを、外部端末（装置）に送信することができる。
【0047】
電子コンパス１１８は、地球の磁気から撮影装置１０の方位を算出し、方位情報を出力する。この方位情報は、Ｅｘｉｆに沿った関連情報（メタデータ）の一例であり、撮影画像の画像補正等の画像処理に利用される。なお、関連情報は、画像の撮影日時および画像データのデータ容量の各データも含む。また、ジャイロセンサ１１９は、撮影装置１０の移動に伴う角度の変化（Ｒｏｌｌ角、Ｐｉｔｃｈ角、Ｙａｗ角）を検出するセンサである。角度の変化はＥｘｉｆに沿った関連情報（メタデータ）の一例であり、撮影画像の画像補正等の画像処理に利用される。さらに、加速度センサ１２０は、三軸方向の加速度を検出するセンサである。撮影装置１０は、加速度センサ１２０が検出した加速度に基づいて、自装置（撮影装置１０）の姿勢（重力方向に対する角度）を算出する。撮影装置１０は、加速度センサ１２０を設けることによって、画像補正の精度が向上する。ネットワークＩ／Ｆ１２１は、ルータ等を介して、インターネット等の通信ネットワーク１００を利用したデータ通信を行うためのインターフェースである。
【0048】
○配信端末のハードウエア構成○
図１２は、配信端末のハードウエア構成の一例を示す図である。配信端末３０の各ハードウエア構成は、３００番台の符号で示されている。配信端末３０は、コンピュータによって構築されており、図１２に示されているように、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、ＨＤ(Hard Disk)３０４、ＨＤＤコントローラ３０５、ディスプレイ３０６、外部機器接続Ｉ／Ｆ３０８、ネットワークＩ／Ｆ３０９、バスライン３１０、キーボード３１１、ポインティングデバイス３１２、ＤＶＤ－ＲＷ(Digital Versatile Disk Rewritable)ドライブ３１４、メディアＩ／Ｆ３１６、音入出力Ｉ／Ｆ３１７、マイク３１８、スピーカ３１９および近距離通信回路３２０を備えている。
図１２は、配信端末のハードウエア構成の一例を示す図である。配信端末３０の各ハードウエア構成は、３００番台の符号で示されている。配信端末３０は、コンピュータによって構築されており、図１２に示されているように、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、ＨＤ(Hard Disk)３０４、ＨＤＤコントローラ３０５、ディスプレイ３０６、外部機器接続Ｉ／Ｆ３０８、ネットワークＩ／Ｆ３０９、バスライン３１０、キーボード３１１、ポインティングデバイス３１２、ＤＶＤ－ＲＷ(Digital Versatile Disk Rewritable)ドライブ３１４、メディアＩ／Ｆ３１６、音入出力Ｉ／Ｆ３１７、マイク３１８、スピーカ３１９および近距離通信回路３２０を備えている。
【0049】
これらのうち、ＣＰＵ３０１は、配信端末３０全体の動作を制御する。ＲＯＭ３０２は、ＩＰＬ等のＣＰＵ３０１の駆動に用いられるプログラムを記憶する。ＲＡＭ３０３は、ＣＰＵ３０１のワークエリアとして使用される。ＨＤ３０４は、プログラム等の各種データを記憶する。ＨＤＤコントローラ３０５は、ＣＰＵ３０１の制御にしたがってＨＤ３０４に対する各種データの読み出しまたは書き込みを制御する。ディスプレイ３０６は、カーソル、メニュー、ウィンドウ、文字、または画像等の各種情報を表示する。ディスプレイ３０６は、表示部の一例である。なお、ディスプレイ３０６は、入力手段を備えたタッチパネルディスプレイであってもよい。外部機器接続Ｉ／Ｆ３０８は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢメモリまたはプリンタ等である。ネットワークＩ／Ｆ３０９は、通信ネットワーク１００を利用してデータ通信をするためのインターフェースである。バスライン３１０は、図１２に示されているＣＰＵ３０１等の各構成要素を電気的に接続するためのアドレスバスまたはデータバス等である。
【0050】
また、キーボード３１１は、文字、数値、各種指示等の入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス３１２は、各種指示の選択もしくは実行、処理対象の選択、またはカーソルの移動等を行う入力手段の一種である。なお、入力手段は、キーボード３１１およびポインティングデバイス３１２のみならず、タッチパネルまたは音声入力装置等であってもよい。ＤＶＤ－ＲＷドライブ３１４は、着脱可能な記録媒体の一例としてのＤＶＤ－ＲＷ３１３に対する各種データの読み出しまたは書き込みを制御する。なお、ＤＶＤ－ＲＷに限らず、ＤＶＤ－ＲまたはＢｌｕ-ｒａｙ（登録商標） Ｄｉｓｃ（ブルーレイディスク）等であってもよい。メディアＩ／Ｆ３１６は、フラッシュメモリ等の記録メディア３１５に対するデータの読み出しまたは書き込み（記憶）を制御する。マイク３１８は、音声を入力する内蔵型の集音手段の一種である。音入出力Ｉ／Ｆ３１７は、ＣＰＵ３０１の制御に従ってマイク３１８およびスピーカ３１９との間で音信号の入出力を処理する回路である。近距離通信回路３２０は、ＮＦＣ、ＢｌｕｅｔｏｏｔｈまたはＷｉ－Ｆｉ等の近距離無線通信技術によって、外部端末（装置）と通信を行うための通信回路である。
【0051】
○通信管理システムのハードウエア構成○
図１２は、通信管理システムのハードウエア構成の一例を示す図である。通信管理システム５０の各ハードウエア構成は、括弧内の５００番台の符号で示されている。通信管理システム５０は、コンピュータによって構築されており、図１２に示されているように、配信端末３０と同様の構成を備えているため、各ハードウエア構成の説明を省略する。
図１２は、通信管理システムのハードウエア構成の一例を示す図である。通信管理システム５０の各ハードウエア構成は、括弧内の５００番台の符号で示されている。通信管理システム５０は、コンピュータによって構築されており、図１２に示されているように、配信端末３０と同様の構成を備えているため、各ハードウエア構成の説明を省略する。
【0052】
○通信端末のハードウエア構成○
図１２は、通信端末のハードウエア構成の一例を示す図である。通信端末７０の各ハードウエア構成は、括弧内の７００番台の符号で示されている。通信端末７０は、コンピュータによって構築されており、図１２に示されているように、配信端末３０と同様の構成を備えているため、各ハードウエア構成の説明を省略する。
図１２は、通信端末のハードウエア構成の一例を示す図である。通信端末７０の各ハードウエア構成は、括弧内の７００番台の符号で示されている。通信端末７０は、コンピュータによって構築されており、図１２に示されているように、配信端末３０と同様の構成を備えているため、各ハードウエア構成の説明を省略する。
【0053】
なお、上記各プログラムは、インストール可能な形式または実行可能な形式のファイルで、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。記録媒体の例として、ＣＤ－Ｒ(Compact Disc Recordable)、ＤＶＤ(Digital Versatile Disk)、Ｂｌｕ-ｒａｙ Ｄｉｓｃ、ＳＤカード、ＵＳＢメモリ等が挙げられる。また、記録媒体は、プログラム製品(Program Product)として、国内または国外へ提供されることができる。例えば、通信端末７０は、本発明に係るプログラムが実行されることで本発明に係る画像表示方法を実現する。
【0054】
●機能構成
続いて、図１３乃至図１９を用いて、実施形態に係る画像通信システムの機能構成について説明する。図１３および図１４は、画像通信システムの機能構成の一例を示す図である。なお、図１３および図１４は、図９に示されている装置または端末のうち、後述の処理または動作に関連しているものを示す。
続いて、図１３乃至図１９を用いて、実施形態に係る画像通信システムの機能構成について説明する。図１３および図１４は、画像通信システムの機能構成の一例を示す図である。なお、図１３および図１４は、図９に示されている装置または端末のうち、後述の処理または動作に関連しているものを示す。
【0055】
○撮影装置の機能構成○
まず、図１３を用いて、撮影装置１０の機能構成について説明する。撮影装置１０は、通信部１１、受付部１２、撮像部１３、集音部１４および記憶・読出部１９を有している。これら各部は、図１１に示されている各構成要素のいずれかが、ＳＲＡＭ１１３からＤＲＡＭ１１４上に展開された撮影装置用のプログラムに従ったＣＰＵ１１１からの命令によって動作することで実現される機能または手段である。また、撮影装置１０は、図１１に示されているＲＯＭ１１２、ＳＲＡＭ１１３およびＤＲＡＭ１１４によって構築される記憶部１０００を有している。記憶部１０００は、自装置のＧＵＩＤ(Globally Unique Identifier)を記憶している。
まず、図１３を用いて、撮影装置１０の機能構成について説明する。撮影装置１０は、通信部１１、受付部１２、撮像部１３、集音部１４および記憶・読出部１９を有している。これら各部は、図１１に示されている各構成要素のいずれかが、ＳＲＡＭ１１３からＤＲＡＭ１１４上に展開された撮影装置用のプログラムに従ったＣＰＵ１１１からの命令によって動作することで実現される機能または手段である。また、撮影装置１０は、図１１に示されているＲＯＭ１１２、ＳＲＡＭ１１３およびＤＲＡＭ１１４によって構築される記憶部１０００を有している。記憶部１０００は、自装置のＧＵＩＤ(Globally Unique Identifier)を記憶している。
【0056】
通信部１１は、主に、ＣＰＵ１１１の処理によって実現され、他の装置または端末と各種データまたは情報の通信を行う。通信部１１は、例えば、近距離通信回路１１７を用いて、他の装置または端末との間で、近距離無線通信技術によるデータ通信を行う。また、通信部１１は、例えば、入出力Ｉ／Ｆ１１６を用いて、他の装置または端末との間で、各種ケーブル等を介したデータ通信を行う。さらに、通信部１１は、ネットワークＩ／Ｆ１２１を用いて、他の装置または端末との間で、通信ネットワーク１００を介したデータ通信を行う。
【0057】
受付部１２は、主に、操作部１１５に対するＣＰＵ１１１の処理によって実現され、利用者から各種の選択または入力を受け付ける。撮像部１３は、主に、撮像ユニット１０１、画像処理ユニット１０４および撮像制御ユニット１０５に対するＣＰＵ１１１の処理によって実現され、風景等の被写体を撮像し、撮影画像データを取得する。集音部１４は、主に、マイク１０８および音処理ユニット１０９に対するＣＰＵ１１１の処理によって実現され、撮影装置１０の周囲の音を集音する。
【0058】
記憶・読出部１９は、主に、ＣＰＵ１１１の処理によって実現され、記憶部１０００に、各種データ（または情報）を記憶したり、記憶部１０００から各種データ（または情報）を読み出したりする。
【0059】
○配信端末の機能構成○
次に、図１３を用いて、配信端末３０の機能構成について説明する。配信端末３０は、送受信部３１、受付部３２、画像・音処理部３３、表示制御部３４、判断部３５、作成部３６、通信部３７および記憶・読出部３９を有している。これら各部は、図１２に示されている各構成要素のいずれかが、ＨＤ３０４からＲＡＭ３０３上に展開された配信端末用プログラムに従ったＣＰＵ３０１からの命令によって動作することで実現される機能または手段である。また、配信端末３０は、図１２に示されているＲＯＭ３０２、ＲＡＭ３０３およびＨＤ３０４によって構築される記憶部３０００を有している。
次に、図１３を用いて、配信端末３０の機能構成について説明する。配信端末３０は、送受信部３１、受付部３２、画像・音処理部３３、表示制御部３４、判断部３５、作成部３６、通信部３７および記憶・読出部３９を有している。これら各部は、図１２に示されている各構成要素のいずれかが、ＨＤ３０４からＲＡＭ３０３上に展開された配信端末用プログラムに従ったＣＰＵ３０１からの命令によって動作することで実現される機能または手段である。また、配信端末３０は、図１２に示されているＲＯＭ３０２、ＲＡＭ３０３およびＨＤ３０４によって構築される記憶部３０００を有している。
【0060】
送受信部３１は、主に、ネットワークＩ／Ｆ３０９に対するＣＰＵ３０１の処理によって実現され、通信ネットワーク１００を介して、他の装置または端末との間で各種データまたは情報の送受信を行う。
【0061】
受付部３２は、主に、キーボード３１１またはポインティングデバイス３１２に対するＣＰＵ３０１の処理によって実現され、利用者から各種の選択または入力を受け付ける。
【0062】
画像・音処理部３３は、主に、ＣＰＵ３０１の処理によって実現され、撮影装置１０が被写体を撮像して取得した撮影画像データに対して画像処理を行う。また、画像・音処理部３３は、マイク３１８によって利用者の音声が音声信号に変換された後、この音声信号に係る音データに対して音声処理を行う。画像・音処理部３３は、例えば、表示制御部３４がディスプレイ３０６に画像を表示させるため、ソース名等の画像種類情報に基づき、撮影装置１０から受信された撮影画像データに対して画像処理を行う。具体的には、画像種類情報が特殊画像である旨を示す場合、画像・音処理部３３は、撮影画像データ（例えば、図３（Ａ），（Ｂ）に示されているような各半球画像のデータ）に基づいて、図４（Ｂ）に示されているような全天球画像データに変換することで全天球画像データを作成する。さらに、画像・音処理部３３は、他の端末から通信管理システム５０を介して配信された音データに係る音声信号をスピーカ３１９に出力し、スピーカ３１９から音声を出力させる。
【0063】
表示制御部３４は、主に、ＣＰＵ３０１の処理によって実現され、ディスプレイ３０６に、各種画像または文字等を表示させる。判断部３５は、ＣＰＵ３０１の処理によって実現され、各種判断を行う。判断部３５は、例えば、撮影装置１０から受信された撮影画像データに係る画像種類を判断する。
【0064】
作成部３６は、主に、ＣＰＵ３０１の処理によって実現され、判断部３５によって、一般画像または特殊画像（ここでは、全天球画像）と判断された結果に基づき、命名規則に従って、画像種類情報の一例であるソース名を作成する。例えば、判断部３５が、一般画像であると判断した場合、作成部３６は、一般画像である旨を示すソース名「Video」を作成する。一方、判断部３５が、特殊画像であると判断した場合、作成部３６は、特殊画像である旨を示すソース名「Video_Theta」を作成する。
【0065】
通信部３７は、主に、近距離通信回路３２０に対するＣＰＵ３０１の処理によって実現され、撮影装置１０の通信部１１と、ＮＦＣ、ＢｌｕｅｔｏｏｔｈまたはＷｉＦｉ等の近距離無線通信技術による通信を行う。なお、通信部３７と送受信部３１とは通信ユニットを別個に有する構成で説明したが、共用構成であってもよい。
【0066】
記憶・読出部３９は、主に、ＣＰＵ３０１の処理によって実現され、記憶部３０００に、各種データ（または情報）を記憶したり、記憶部３０００から各種データ（または情報）を読み出したりする。
【0067】
○撮影装置管理テーブル
図１５（Ａ）は、撮影装置管理テーブルの一例を示す概念図である。記憶部３０００には、図１５（Ａ）に示されている撮影装置管理テーブルによって構成されている撮影装置管理ＤＢ３００１が構築されている。この撮影装置管理テーブルは、全天球画像の元になる二つの半球画像を得ることができる撮影装置のＧＵＩＤのうちのベンダＩＤとプロダクトＩＤを記憶して管理している。ＧＵＩＤとしては、例えば、ＵＳＢデバイスで利用されるベンダＩＤ(ＶＩＤ)とプロダクトＩＤ(ＰＩＤ)が利用できる。このベンダＩＤとプロダクトＩＤは、例えば、配信端末３０の工場出荷時から記憶されていてもよいし、工場出荷後に追加で記憶してもよい。
図１５（Ａ）は、撮影装置管理テーブルの一例を示す概念図である。記憶部３０００には、図１５（Ａ）に示されている撮影装置管理テーブルによって構成されている撮影装置管理ＤＢ３００１が構築されている。この撮影装置管理テーブルは、全天球画像の元になる二つの半球画像を得ることができる撮影装置のＧＵＩＤのうちのベンダＩＤとプロダクトＩＤを記憶して管理している。ＧＵＩＤとしては、例えば、ＵＳＢデバイスで利用されるベンダＩＤ(ＶＩＤ)とプロダクトＩＤ(ＰＩＤ)が利用できる。このベンダＩＤとプロダクトＩＤは、例えば、配信端末３０の工場出荷時から記憶されていてもよいし、工場出荷後に追加で記憶してもよい。
【0068】
○画像種類管理テーブル
図１５（Ｂ）は、画像種類管理テーブルの一例を示す概念図である。記憶部３０００には、図１５（Ｂ）に示されている画像種類管理テーブルによって構成されている画像種類管理ＤＢ３００２が構築されている。この画像種類管理テーブルは、画像データＩＤ、撮影装置の宛先の一例であるＩＰ(Internet Protocol)アドレス、およびソース名を関連づけて管理している。このうち、画像データＩＤは、画像配信を行う際の画像データを識別するための画像データ識別情報の一例である。撮影装置のＩＰアドレスは、関連づけられている画像データＩＤで示される画像データを撮影した撮影装置１０のＩＰアドレスを示す。ソース名は、関連づけられている画像データＩＤで示される画像データを撮影した撮影装置１０を特定するための名称であり、画像種類情報の一例である。このソース名は、所定の名称の命名規則に従って、配信端末３０によって作成された名称である。
図１５（Ｂ）は、画像種類管理テーブルの一例を示す概念図である。記憶部３０００には、図１５（Ｂ）に示されている画像種類管理テーブルによって構成されている画像種類管理ＤＢ３００２が構築されている。この画像種類管理テーブルは、画像データＩＤ、撮影装置の宛先の一例であるＩＰ(Internet Protocol)アドレス、およびソース名を関連づけて管理している。このうち、画像データＩＤは、画像配信を行う際の画像データを識別するための画像データ識別情報の一例である。撮影装置のＩＰアドレスは、関連づけられている画像データＩＤで示される画像データを撮影した撮影装置１０のＩＰアドレスを示す。ソース名は、関連づけられている画像データＩＤで示される画像データを撮影した撮影装置１０を特定するための名称であり、画像種類情報の一例である。このソース名は、所定の名称の命名規則に従って、配信端末３０によって作成された名称である。
【0069】
例えば、ＩＰアドレスがそれぞれ「２．１．２．３」、「２．１．１．５」、「２．１．５．４」、「２．１．５．６」の四つの撮影装置は、それぞれ、画像データＩＤ「ＲＳ００１」、「ＲＳ００２」、「ＲＳ００３」、「ＲＳ００４」によって示される画像データを送信していることが表されている。さらに、各撮影装置のソース名によって示される画像の種類は、「Video_Theta」、「Video_Theta」、「Video」、「Video」であり、これらは順に画像種類が「特殊画像」、「特殊画像」、「一般画像」、「一般画像」である旨を示している。本実施形態において、特殊画像は、全天球画像である。なお、ＩＰアドレスは、宛先情報の一例であって、宛先情報は、ＭＡＣ(Media Access Control)アドレスまたは端末ＩＤ(Identification)等であってもよい。また、ＩＰアドレスは、ＩＰｖ４アドレスを簡略化して表すが、ＩＰアドレスは、ＩＰｖ６であってもよい。さらに、画像データ以外のデータについても、画像データＩＤと関連づけて管理してもよい。画像データ以外のデータは、例えば、音データ、配信拠点と閲覧拠点との画面共有時の資料データ等である。
【0070】
○通信管理システムの機能構成○
次に、図１４を用いて、通信管理システム５０の機能構成について説明する。通信管理システム５０は、送受信部５１、判断部５２、選択部５３、生成部５４、配信拠点管理部５５および記憶・読出部５９を有している。これら各部は、図１２に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された通信管理システム用プログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能または手段である。また、通信管理システム５０は、図１２に示されているＲＯＭ５０２、ＲＡＭ５０３およびＨＤ５０４によって構築される記憶部５０００を有している。
次に、図１４を用いて、通信管理システム５０の機能構成について説明する。通信管理システム５０は、送受信部５１、判断部５２、選択部５３、生成部５４、配信拠点管理部５５および記憶・読出部５９を有している。これら各部は、図１２に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された通信管理システム用プログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能または手段である。また、通信管理システム５０は、図１２に示されているＲＯＭ５０２、ＲＡＭ５０３およびＨＤ５０４によって構築される記憶部５０００を有している。
【0071】
送受信部５１は、主に、ネットワークＩ／Ｆ５０９に対するＣＰＵ５０１の処理によって実現され、通信ネットワーク１００を介して、他の装置との間で各種データまたは情報の送受信を行う。
【0072】
判断部５２は、ＣＰＵ５０１の処理によって実現され、各種判断を行なう。選択部５３は、主に、ＣＰＵ５０１の処理によって実現され、通信端末７０からの要求に応じて、撮影装置１０の選択を行う。選択部５３は、例えば、通信端末７０によって受け付けられた注目点の位置と複数の撮影装置１０の設置位置とに基づいて、複数の撮影装置１０のうちの特定の撮影装置１０を選択する。
【0073】
生成部５４は、主に、ＣＰＵ５０１の処理によって実現され、画像データＩＤおよび所定領域情報を生成する。生成部５４は、例えば、選択部５３によって選択された撮影装置１０が撮影した撮影画像における所定領域（例えば、図５等に示されている所定領域Ｔ）を示す所定領域情報を生成する。なお、撮影画像の全体が表示された場合の画像（例えば、図５等に示されている全天球画像ＣＥ）は、「全体画像」ともいう。配信拠点管理部５５は、主に、ＣＰＵ５０１の処理によって実現され、配信拠点の状態を示す配信拠点情報を管理する。
【0074】
記憶・読出部５９は、主に、ＣＰＵ５０１の処理によって実現され、記憶部５０００に、各種データ（または情報）を記憶したり、記憶部５０００から各種データ（または情報）を読み出したりする。
【0075】
○セッション管理テーブル
図１６（Ａ）は、セッション管理テーブルの一例を示す概念図である。記憶部５０００には、図１６（Ａ）に示されているセッション管理テーブルによって構成されているセッション管理ＤＢ５００１が構築されている。このセッション管理テーブルは、セッションＩＤ、拠点ＩＤおよび参加した通信端末のＩＰアドレスを関連づけて管理している。このうち、セッションＩＤは、画像通信を実現する通信セッションを識別するためのセッション識別情報の一例であり、仮想のフロアごとに生成される。セッションＩＤは、各通信端末でも管理されており、各通信端末において通信セッションの選択の際に利用される。拠点ＩＤは、配信拠点を識別するための拠点識別情報の一例である。参加した通信端末のＩＰアドレスは、関連づけられているセッションＩＤで示される仮想のフロアに参加した通信端末のＩＰアドレスを示している。
図１６（Ａ）は、セッション管理テーブルの一例を示す概念図である。記憶部５０００には、図１６（Ａ）に示されているセッション管理テーブルによって構成されているセッション管理ＤＢ５００１が構築されている。このセッション管理テーブルは、セッションＩＤ、拠点ＩＤおよび参加した通信端末のＩＰアドレスを関連づけて管理している。このうち、セッションＩＤは、画像通信を実現する通信セッションを識別するためのセッション識別情報の一例であり、仮想のフロアごとに生成される。セッションＩＤは、各通信端末でも管理されており、各通信端末において通信セッションの選択の際に利用される。拠点ＩＤは、配信拠点を識別するための拠点識別情報の一例である。参加した通信端末のＩＰアドレスは、関連づけられているセッションＩＤで示される仮想のフロアに参加した通信端末のＩＰアドレスを示している。
【0076】
○画像種類管理テーブル
図１６（Ｂ）は、画像種類管理テーブルの一例を示す概念図である。記憶部５０００には、図１６（Ｂ）に示されている画像種類管理テーブルによって構成されている画像種類管理ＤＢ５００２が構築されている。この画像種類管理テーブルは、図１５（Ｂ）に示されている画像種類管理テーブルで管理されている各情報に加え、セッション管理テーブルで管理されているセッションＩＤと同じセッションＩＤを関連づけて管理している。なお、通信管理システム５において、配信端末３０および通信端末７０で管理される、画像データＩＤ、撮影装置のＩＰアドレスおよび画像種類情報と同じものを管理するのは、新たな通信端末が仮想のフロアに入る場合等に、既に画像通話中の通信端末と新たに参加した通信端末に、画像種類情報等を送信するためである。これにより、既に通話中の通信端末と新たに参加した通信端末との間で、画像種類情報等の送受信を行なう必要がない。
図１６（Ｂ）は、画像種類管理テーブルの一例を示す概念図である。記憶部５０００には、図１６（Ｂ）に示されている画像種類管理テーブルによって構成されている画像種類管理ＤＢ５００２が構築されている。この画像種類管理テーブルは、図１５（Ｂ）に示されている画像種類管理テーブルで管理されている各情報に加え、セッション管理テーブルで管理されているセッションＩＤと同じセッションＩＤを関連づけて管理している。なお、通信管理システム５において、配信端末３０および通信端末７０で管理される、画像データＩＤ、撮影装置のＩＰアドレスおよび画像種類情報と同じものを管理するのは、新たな通信端末が仮想のフロアに入る場合等に、既に画像通話中の通信端末と新たに参加した通信端末に、画像種類情報等を送信するためである。これにより、既に通話中の通信端末と新たに参加した通信端末との間で、画像種類情報等の送受信を行なう必要がない。
【0077】
○所定領域管理テーブル
図１７（Ａ）は、所定領域管理テーブルの一例を示す概念図である。記憶部５０００には、図１７（Ａ）に示されている所定領域管理テーブルによって構成されている所定領域管理ＤＢ５００３が構築されている。この所定領域管理テーブルは、撮影画像データの送信元の配信端末のＩＰアドレス、撮影画像データの送信先の通信端末のＩＰアドレス、および撮影画像データの送信先の通信端末で表示中の所定領域画像を示す所定領域情報を関連づけて管理している。なお、撮影画像データの送信先の通信端末は、所定領域情報の送信元の通信端末でもある。所定領域情報は、図６および図７に示されているように、撮影画像から、この撮影画像における所定領域Ｔの画像（所定領域画像）に変換するための変換パラメータである。
図１７（Ａ）は、所定領域管理テーブルの一例を示す概念図である。記憶部５０００には、図１７（Ａ）に示されている所定領域管理テーブルによって構成されている所定領域管理ＤＢ５００３が構築されている。この所定領域管理テーブルは、撮影画像データの送信元の配信端末のＩＰアドレス、撮影画像データの送信先の通信端末のＩＰアドレス、および撮影画像データの送信先の通信端末で表示中の所定領域画像を示す所定領域情報を関連づけて管理している。なお、撮影画像データの送信先の通信端末は、所定領域情報の送信元の通信端末でもある。所定領域情報は、図６および図７に示されているように、撮影画像から、この撮影画像における所定領域Ｔの画像（所定領域画像）に変換するための変換パラメータである。
【0078】
例えば、図１７（Ａ）の所定領域管理テーブルの１行目から４行目までは、配信端末３０のＩＰアドレスが「１．３．２．３」の場合、配信端末３０から送信された撮影画像データが、通信管理システム５を介して、ＩＰアドレスが「１．２．１．３」の通信端末７０に送信された旨を管理している。さらに、配信端末３０は、図１７（Ａ）の所定領域管理テーブルの１行目から４行目までの四つの所定領域情報の送信元の配信端末である旨を管理している。
【0079】
また、送受信部５１によって、既に管理されている撮影画像データの送信元の配信端末のＩＰアドレスおよび撮影画像データの送信先の通信端末のＩＰアドレスと同じ組のＩＰアドレスを含む所定領域情報が新たに受信された場合には、記憶・読出部５９は、既に管理している所定領域情報を新たに受信された所定領域情報に書き換える。
【0080】
○設置情報管理テーブル
図１７（Ｂ）は、設置情報管理テーブルの一例を示す概念図である。記憶部５０００には、図１７（Ｂ）に示されている設置情報管理テーブルによって構成されている設置情報管理ＤＢ５００４が構築されている。この設置情報管理テーブルは、配信拠点を識別するための拠点ＩＤ、配信拠点に設置された撮影装置１０のＩＰアドレス、撮影装置１０が設置された位置を示す座標値、および撮影装置１０の設置方向が関連づけられた設置情報を管理している。このうち、座標値は、撮影装置１０が設置された配信拠点のマップ上の位置を示す座標情報である。この座標情報は、撮影装置１０の設置位置を示す設置位置情報の一例である。なお、設置位置情報は、座標情報に限られず、撮影装置１０の設置位置を特定可能な情報であればよい。また、撮影装置１０の設置方向は、撮影装置１０の正面が向いているマップ上の方向を示す。なお、この設置情報は、配信拠点または配信端末３０の管理者によって設定される。
図１７（Ｂ）は、設置情報管理テーブルの一例を示す概念図である。記憶部５０００には、図１７（Ｂ）に示されている設置情報管理テーブルによって構成されている設置情報管理ＤＢ５００４が構築されている。この設置情報管理テーブルは、配信拠点を識別するための拠点ＩＤ、配信拠点に設置された撮影装置１０のＩＰアドレス、撮影装置１０が設置された位置を示す座標値、および撮影装置１０の設置方向が関連づけられた設置情報を管理している。このうち、座標値は、撮影装置１０が設置された配信拠点のマップ上の位置を示す座標情報である。この座標情報は、撮影装置１０の設置位置を示す設置位置情報の一例である。なお、設置位置情報は、座標情報に限られず、撮影装置１０の設置位置を特定可能な情報であればよい。また、撮影装置１０の設置方向は、撮影装置１０の正面が向いているマップ上の方向を示す。なお、この設置情報は、配信拠点または配信端末３０の管理者によって設定される。
【0081】
○配信拠点管理テーブル
図１８は、配信拠点管理テーブルの一例を示す概念図である。記憶部５０００には、図１８に示されている配信拠点管理テーブルによって構成されている配信拠点管理ＤＢ５００５が構築されている。この配信拠点管理テーブルは、配信拠点を識別するための拠点ＩＤおよび拠点名、並びに配信拠点の状態を示す配信拠点情報を関連づけて管理している。このうち、配信拠点情報は、配信拠点のマップを示すマップ画像データおよび配信拠点の座標値を示す拠点座標情報にアクセスするためのＵＲＬ(Uniform Resource Locator)を含む。通信端末７０は、通信管理システム５０から送信されたＵＲＬへアクセスすることで、配信拠点のマップ画像データおよび拠点座標情報を取得することができる。なお、ＵＲＬは、記憶先情報の一例である。記憶先情報は、ＵＲＬに限られず、ＵＲＩ(Uniform Resource Identifier)等であってもよい。
図１８は、配信拠点管理テーブルの一例を示す概念図である。記憶部５０００には、図１８に示されている配信拠点管理テーブルによって構成されている配信拠点管理ＤＢ５００５が構築されている。この配信拠点管理テーブルは、配信拠点を識別するための拠点ＩＤおよび拠点名、並びに配信拠点の状態を示す配信拠点情報を関連づけて管理している。このうち、配信拠点情報は、配信拠点のマップを示すマップ画像データおよび配信拠点の座標値を示す拠点座標情報にアクセスするためのＵＲＬ(Uniform Resource Locator)を含む。通信端末７０は、通信管理システム５０から送信されたＵＲＬへアクセスすることで、配信拠点のマップ画像データおよび拠点座標情報を取得することができる。なお、ＵＲＬは、記憶先情報の一例である。記憶先情報は、ＵＲＬに限られず、ＵＲＩ(Uniform Resource Identifier)等であってもよい。
【0082】
○通信端末の機能構成○
次に、図１４を用いて、通信端末７０の機能構成について説明する。通信端末７０は、送受信部７１、受付部７２、画像・音処理部７３、表示制御部７４、判断部７５、作成部７６、注目点特定部７７、選択部８１、生成部８２および記憶・読出部７９を有している。これら各部は、図１２に示されている各構成要素のいずれかが、ＨＤ７０４からＲＡＭ７０３上に展開された通信端末用プログラムに従ったＣＰＵ７０１からの命令によって動作することで実現される機能または手段である。また、通信端末７０は、図１２に示されているＲＯＭ７０２、ＲＡＭ７０３およびＨＤ７０４によって構築される記憶部７０００を有している。
次に、図１４を用いて、通信端末７０の機能構成について説明する。通信端末７０は、送受信部７１、受付部７２、画像・音処理部７３、表示制御部７４、判断部７５、作成部７６、注目点特定部７７、選択部８１、生成部８２および記憶・読出部７９を有している。これら各部は、図１２に示されている各構成要素のいずれかが、ＨＤ７０４からＲＡＭ７０３上に展開された通信端末用プログラムに従ったＣＰＵ７０１からの命令によって動作することで実現される機能または手段である。また、通信端末７０は、図１２に示されているＲＯＭ７０２、ＲＡＭ７０３およびＨＤ７０４によって構築される記憶部７０００を有している。
【0083】
送受信部７１は、主に、ネットワークＩ／Ｆ７０９に対するＣＰＵ７０１の処理によって実現され、通信ネットワーク１００を介して、他の装置または端末との間で各種データまたは情報の送受信を行う。送受信部７１は、例えば、配信端末３０から配信された撮影画像データを、通信管理システム５０を介して受信する。また、送受信部７１は、例えば、取得部としての機能を担い、受付部７２で受け付けられた注目点の位置と撮影装置１０の設置位置とに基づいて選択された特定の撮影装置１０の撮影画像における注目点を含む所定領域を示す所定領域情報を取得する。
【0084】
受付部７２は、主に、キーボード７１１またはポインティングデバイス７１２に対するＣＰＵ７０１の処理によって実現され、利用者から各種の選択または入力を受け付ける。受付部７２は、例えば、利用者によって指定された配信拠点における注目点を受け付ける。
【0085】
画像・音処理部７３は、主に、ＣＰＵ７０１の処理によって実現され、配信端末３０から配信された撮影画像データに対して画像処理を行う。また、画像・音処理部７３は、配信端末３０から配信された音データに対して音声処理を行う。画像・音処理部７３は、例えば、送受信部７１によって受信された所定領域情報に対応する所定領域の画像をディスプレイ７０６に表示させるため、撮影画像（全天球画像）に対する所定領域情報を用いた透視射影変換を行うことで、所定領域情報に対応する所定領域画像を生成する。さらに、画像・音処理部７３は、配信端末３０から通信管理システム５０を介して配信された音データに係る音声信号をスピーカ７１９に出力し、スピーカ７１９から音声を出力させる。
【0086】
表示制御部７４は、主に、ＣＰＵ７０１の処理によって実現され、ディスプレイ７０６に、各種画像または文字等を表示させる。表示制御部７４は、例えば、画像・音処理部７３によって生成された所定領域画像を、ディスプレイ７０６に表示させる。判断部７５は、ＣＰＵ７０１の処理によって実現され、各種判断を行う。
【0087】
作成部７６は、主に、ＣＰＵ７０１の処理によって実現され、作成部３６と同様の機能を実現する。注目点特定部７７は、主に、ＣＰＵ７０１の処理によって実現され、撮影装置１０が設置されている配信拠点における注目点を特定する。注目点特定部７７は、例えば、利用者によって指定された配信拠点のマップ画像上での注目点の位置を特定する。
【0088】
選択部８１は、主に、ＣＰＵ７０１の処理によって実現され、選択部５３と同様の機能を実現する。生成部８２は、主に、ＣＰＵ７０１の処理によって実現され、所定領域情報を生成する。生成部８２は、例えば、選択部８１によって選択された撮影装置１０が撮影した撮影画像における所定領域を示す所定領域情報を生成する。また、生成部８２は、例えば、取得部としての機能を担い、受付部７２で受け付けられた注目点の位置と撮影装置１０の設置位置とに基づいて選択された特定の撮影装置１０の撮影画像における注目点を含む所定領域を示す所定領域情報を取得する。
【0089】
記憶・読出部７９は、主に、ＣＰＵ７０１の処理によって実現され、記憶部７０００に、各種データ（または情報）を記憶したり、記憶部７０００から各種データ（または情報）を読み出したりする。
【0090】
○画像種類管理テーブル
図１９（Ａ）は、画像種類管理テーブルの一例を示す概念図である。記憶部７０００には、図１９（Ａ）に示されている画像種類管理テーブルによって構成されている画像種類管理ＤＢ７００１が構築されている。この画像種類管理テーブルは、図１５（Ｂ）に示されている画像種類管理テーブルと同じデータ構成であるため、説明を省略する。
図１９（Ａ）は、画像種類管理テーブルの一例を示す概念図である。記憶部７０００には、図１９（Ａ）に示されている画像種類管理テーブルによって構成されている画像種類管理ＤＢ７００１が構築されている。この画像種類管理テーブルは、図１５（Ｂ）に示されている画像種類管理テーブルと同じデータ構成であるため、説明を省略する。
【0091】
○所定領域管理テーブル
図１９（Ｂ）は、所定領域管理テーブルの一例を示す概念図である。記憶部７０００には、図１９（Ｂ）に示されている所定領域管理テーブルによって構成されている所定領域管理ＤＢ７００２が構築されている。この所定領域管理テーブルは、撮影画像データの送信元の配信端末のＩＰアドレス、撮影画像データを撮影した撮影装置のＩＰアドレス、および表示中の所定領域画像を示す所定領域情報を関連づけて管理している。所定領域情報は、図６および図７に示されているように、撮影画像から、この撮影画像における所定領域Ｔの画像（所定領域画像）に変換するための変換パラメータである。
図１９（Ｂ）は、所定領域管理テーブルの一例を示す概念図である。記憶部７０００には、図１９（Ｂ）に示されている所定領域管理テーブルによって構成されている所定領域管理ＤＢ７００２が構築されている。この所定領域管理テーブルは、撮影画像データの送信元の配信端末のＩＰアドレス、撮影画像データを撮影した撮影装置のＩＰアドレス、および表示中の所定領域画像を示す所定領域情報を関連づけて管理している。所定領域情報は、図６および図７に示されているように、撮影画像から、この撮影画像における所定領域Ｔの画像（所定領域画像）に変換するための変換パラメータである。
【0092】
●実施形態の処理または動作
○セッション参加処理○
続いて、図２０乃至図２８を用いて、実施形態に係る画像通信システムの処理または動作について説明する。なお、以下の説明において、配信拠点Ａの撮影画像が通信端末７０に配信される例を説明するが、配信拠点Ｂ等の他の配信拠点からの画像配信においても同様の処理が行われる。まず、図２０および図２１を用いて、特定の通信セッションへの参加処理について説明する。図２０は、画像通信システムにおける特定の通信セッションへの参加処理の一例を示すシーケンス図である。図２１は、通信セッションの選択画面の一例を示す図である。
○セッション参加処理○
続いて、図２０乃至図２８を用いて、実施形態に係る画像通信システムの処理または動作について説明する。なお、以下の説明において、配信拠点Ａの撮影画像が通信端末７０に配信される例を説明するが、配信拠点Ｂ等の他の配信拠点からの画像配信においても同様の処理が行われる。まず、図２０および図２１を用いて、特定の通信セッションへの参加処理について説明する。図２０は、画像通信システムにおける特定の通信セッションへの参加処理の一例を示すシーケンス図である。図２１は、通信セッションの選択画面の一例を示す図である。
【0093】
まず、閲覧拠点Ａの利用者（例えば、利用者Ａ１）が通信セッションの選択画面の表示を行う操作を行い、受付部７２が選択画面を表示する操作を受け付けることで、通信端末７０Ａの表示制御部７４は、ディスプレイ７０６に、図２１に示されている選択画面８００を表示させる（ステップＳ１１）。図２１に示されている選択画面８００は、選択対象である各フロアＡ１，Ｂ１，Ｂ２等を示す選択ボタン８１０ａ，８１０ｂ，８１０ｃ等を表示している。また、各選択ボタン８１０ａ等は、各セッションＩＤを関連づけている。
【0094】
ここで、利用者Ａ１が配信拠点である仮想のフロアの所望の選択ボタン（ここでは選択ボタン８１０ａ）を選択した場合、受付部７２は、通信セッションの選択を受け付ける（ステップＳ１２）。そして、送受信部７１は、通信管理システム５０に対して、配信拠点との通信セッションへの参加要求を送信する（ステップＳ１３）。この参加要求は、ステップＳ１２で選択を受け付けられた通信セッションを示すセッションＩＤ、および要求元端末である通信端末７０ＡのＩＰアドレスを含む。これにより、通信管理システム５０の送受信部５１は、参加要求を受信する。
【0095】
次に、通信管理システム５０の記憶・読出部５９は、セッション管理ＤＢ５００１（図１６（Ａ）参照）において、ステップＳ１３で受信されたセッションＩＤと同じセッションＩＤのレコードにおける参加端末ＩＰアドレスのフィールドに、ステップＳ１３で受信されたＩＰアドレスを追加することで、通信セッションへの参加処理を行なう（ステップＳ１４）。また、記憶・読出部５９は、セッション管理ＤＢ５００１において、参加処理が行われた通信セッションのセッションＩＤに関連づけられた拠点ＩＤを読み出す。次に、記憶・読出部５９は、ステップＳ１４で読み出された拠点ＩＤを検索キーとして配信拠点管理ＤＢ５００５（図１８参照）を検索することにより、読み出された拠点ＩＤと同じ拠点ＩＤに関連づけられた配信拠点情報を読み出す（ステップＳ１５）。そして、送受信部５１は、通信端末７０Ａに対して、参加要求応答を送信する（ステップＳ１６）。この参加要求応答は、ステップＳ１３によって受信されたセッションＩＤ、ステップＳ１５で読み出された配信拠点情報および参加処理結果を含む。また、この参加処理結果は、ステップＳ１４で読み出された拠点ＩＤを含む。これにより、通信端末７０Ａの送受信部７１は、参加要求応答を受信する。以降、参加処理が成功した場合について説明する。なお、図２０に示されている処理と同様の処理により、閲覧拠点Ｂの通信端末７０Ｂは、通信セッションの参加処理を行う。
【0096】
【0097】
まず、配信拠点Ａの利用者が、配信端末３０Ａに、撮影装置１０Ａを接続すると、撮影装置１０Ａの記憶・読出部１９は、記憶部１０００に記憶されている自装置（撮影装置１０Ａ）のＧＵＩＤを読み出す。そして、撮影装置１０Ａの通信部１１は、配信端末３０Ａに対して自装置のＧＵＩＤを送信する（ステップＳ３１）。これにより、配信端末３０Ａの通信部３７は、撮影装置１０ＡのＧＵＩＤを受信する。
【0098】
次に、配信端末３０Ａの判断部３５は、撮影装置管理ＤＢ３００１（図１５（Ａ）参照）において、ステップＳ３１で受信されたＧＵＩＤ中のベンダＩＤおよびプロダクトＩＤと、同じベンダＩＤおよびプロダクトＩＤが管理されているか否かを判断することで、画像種類を判断する（ステップＳ３２）。具体的には、撮影装置管理ＤＢ３００１において、同じベンダＩＤおよびプロダクトＩＤが管理されている場合、判断部３５は、撮影装置１０Ａが特殊画像（ここでは、全天球画像）を撮影する撮影装置であると判断する。これに対して、撮影装置管理ＤＢ３００１において、同じベンダＩＤおよびプロダクトＩＤが管理されていない場合には、判断部３５は、撮影装置１０Ａが一般画像を撮影する撮影装置であると判断する。
【0099】
次に、記憶・読出部３９は、画像種類管理ＤＢ３００２（図１５（Ｂ）参照）に対して、撮影装置１０ＡのＩＰアドレスと、ステップＳ３２で判断された判断結果である画像種類情報とを関連づけて記憶する（ステップＳ３３）。この状態では、画像データＩＤは関連づけられていない。画像種類情報は、例えば、所定の命名規則に従って定められたソース名または画像種類（一般画像、特殊画像）である。
【0100】
次に、送受信部３１は、通信管理システム５０に対して、画像種類情報の追加要求を送信する（ステップＳ３４）。この画像種類情報の追加要求は、ステップＳ３３で記憶した撮影装置１０ＡのＩＰアドレス、配信拠点Ａの拠点ＩＤおよび画像種類情報を含む。これにより、通信管理システム５０の送受信部５１は、画像種類情報の追加要求を受信する。
【0101】
次に、通信管理システム５０の記憶・読出部５９は、ステップＳ３４によって受信された拠点ＩＤを検索キーとして、セッション管理ＤＢ５００１（図１６（Ａ）参照）を検索することにより、対応するセッションＩＤを読み出す（ステップＳ３５）。
【0102】
次に、生成部５４は、固有の画像データＩＤを生成する（ステップＳ３６）。そして、記憶・読出部５９は、画像種類管理ＤＢ５００２（図１６（Ｂ）参照）に、新たなレコードとして、ステップＳ３５で読み出されたセッションＩＤ、ステップＳ３６で生成された画像データＩＤ、並びにステップＳ３４で受信された撮影装置１０ＡのＩＰアドレスおよび画像種類情報を関連づけて記憶する（ステップＳ３７）。そして、送受信部５１は、配信端末３０Ａに対して、ステップＳ３６で生成された画像データＩＤを送信する（ステップＳ３８）。これにより、配信端末３０Ａの送受信部３１は、画像データＩＤを受信する。
【0103】
次に、配信端末３０Ａの記憶・読出部３９は、画像種類管理ＤＢ３００２（図１５（Ｂ）参照）に、ステップＳ３３で記憶しておいた撮影装置１０ＡのＩＰアドレスおよび画像種類情報に関連づけて、ステップＳ３８で受信された画像データＩＤを記憶する（ステップＳ３９）。
【0104】
一方、通信管理システム５０の送受信部５１は、通信端末７０Ａに対して、画像種類情報の追加通知を送信する（ステップＳ４０）。この画像種類情報の追加通知は、ステップＳ３６で生成された画像データＩＤ、並びにステップＳ３７で記憶された撮影装置１０ＡのＩＰアドレスおよび画像種類情報を含む。これにより、通信端末７０Ａの送受信部７１は、画像種類情報の追加通知を受信する。
【0105】
次に、通信端末７０Ａの記憶・読出部７９は、画像種類管理ＤＢ７００１（図１９（Ａ）参照）に、新たなレコードとして、ステップＳ４０で受信された、画像データＩＤ、撮影装置１０ＡのＩＰアドレスおよび画像種類情報を関連づけて記憶する（ステップＳ４１）。以上より、配信端末３０Ａと通信端末７０Ａでは、各画像種類管理ＤＢ３００２，７００１で同じ情報を共有することができる。なお、同様に、他の通信端末である通信端末７０Ｂにも画像種類情報の追加通信が送信され、通信端末７０Ｂでも、画像種類管理ＤＢ７００１に記憶される。
【0106】
○撮影画像データの通信処理○
次に、図２３を用いて、配信拠点Ａで得られた撮影画像データおよび音データが、通信管理システム５０を介して、各通信端末（通信端末７０Ａ，７０Ｂ）へ送信される処理について説明する。図２３は、画像通信システムにおける撮影画像データおよび音データの通信処理の一例を示すシーケンス図である。なお、図２３は、一台の撮影装置１０によって取得された撮影画像データが各通信端末７０に配信される例を示すが、配信拠点に設置された他の撮影装置１０によって取得された複数の撮影画像データが配信される場合においても同様の処理が行われる。
次に、図２３を用いて、配信拠点Ａで得られた撮影画像データおよび音データが、通信管理システム５０を介して、各通信端末（通信端末７０Ａ，７０Ｂ）へ送信される処理について説明する。図２３は、画像通信システムにおける撮影画像データおよび音データの通信処理の一例を示すシーケンス図である。なお、図２３は、一台の撮影装置１０によって取得された撮影画像データが各通信端末７０に配信される例を示すが、配信拠点に設置された他の撮影装置１０によって取得された複数の撮影画像データが配信される場合においても同様の処理が行われる。
【0107】
まず、撮影装置１０Ａの通信部１１は、配信端末３０Ａに対して、被写体や風景等を撮影して取得された撮影画像データおよび集音して取得された音データを送信する（ステップＳ５１）。この場合、撮影装置１０Ａは、全天球画像の元になる二つの半球画像を得ることができる装置であるため、図３（Ａ），（Ｂ）に示されているように、撮影画像データは、二つの半球画像のデータによって構成されている。これにより、配信端末３０Ａの通信部３７は、撮影画像データおよび音データを受信する。
【0108】
次に、配信端末３０Ａの送受信部３１は、通信管理システム５０に対して、撮影装置１０Ａから送られてきた撮影画像データおよび音データを送信する（ステップＳ５２）。この送信は、送信対象である撮影画像データを識別するための画像データＩＤを含む。これにより、通信管理システム５０の送受信部５１は、撮影画像データおよび音データ、並びの画像データＩＤを受信する。
【0109】
次に、通信管理システム５０の送受信部５１は、配信端末３０Ａと同じセッションに参加している通信端末（通信端末７０Ａ,７０Ｂ）に対して、撮影画像データおよび音データを送信する（ステップＳ５３,Ｓ５４）。これら各送信は、送信対象である撮影画像データを識別するための画像データＩＤを含む。これにより、通信端末７０Ａおよび通信端末７０Ｂの送受信部７１は、それぞれ撮影画像データおよび音データ、並びに画像データＩＤを受信する。
【0110】
○注目点の表示処理○
次に、図２４乃至図２８を用いて、閲覧拠点の利用者によって指定された配信拠点の注目点の画像を表示させる処理について説明する。図２４は、画像通信システムにおける注目点の表示処理の一例を示すシーケンス図である。図２４は、閲覧拠点Ａの通信端末７０Ａが配信端末３０Ａから配信された撮影画像を表示する場合の例を説明する。なお、他の閲覧拠点である閲覧拠点Ｂの通信端末７０Ｂに撮影画像を表示させる場合も同様の処理が行われる。
次に、図２４乃至図２８を用いて、閲覧拠点の利用者によって指定された配信拠点の注目点の画像を表示させる処理について説明する。図２４は、画像通信システムにおける注目点の表示処理の一例を示すシーケンス図である。図２４は、閲覧拠点Ａの通信端末７０Ａが配信端末３０Ａから配信された撮影画像を表示する場合の例を説明する。なお、他の閲覧拠点である閲覧拠点Ｂの通信端末７０Ｂに撮影画像を表示させる場合も同様の処理が行われる。
【0111】
まず、通信端末７０Ａの表示制御部７４は、ステップＳ１６で受信された配信拠点情報を用いて、配信拠点Ａの状況を示す拠点表示画面６００を、ディスプレイ７０６に表示させる（ステップＳ７１）。図２５は、通信端末に表示される拠点表示画面の一例を示す図である。図２５に示されている拠点表示画面６００は、配信拠点の状況を示すマップ画像が表示されている。
【0112】
図２５に示されている拠点表示画面６００は、配信拠点が撮影された全天球画像を閲覧することで配信拠点を遠隔閲覧させるツアー画像６１０、ツアー画像６１０の所定の撮影地点へ視点変更するための視点変更アイコン６３０、配信拠点の模式図を示す模式画像６５０、配信拠点内の注目点を表示させる場合に押下される「注目点」ボタン６０５、および配信拠点の閲覧を終了する場合に押下される「キャンセル」ボタン６０９を含む。
【0113】
このうち、ツアー画像６１０および模式画像６５０は、ステップＳ１６で受信された配信拠点情報に含まれるマップ画像データを用いて表示される。ツアー画像６１０は、予め配信拠点を撮影装置１０によって撮影された画像であり、利用者Ａ１が視点変更アイコン６３０を操作することで、配信拠点全体の配置等を把握することができる。なお、ツアー画像６１０は、ステップＳ１６で受信された配信拠点情報に含まれるマップ画像データを用いて表示されるものとして説明するが、ツアー画像６１０は、リアルタイムに受信された配信拠点の撮影画像データを表示させる構成であってもよい。
【0114】
また、模式画像６５０は、ツアー画像６１０の現在の表示位置を示す視点位置アイコン６５５を含む。利用者Ａ１は、例えば、ツアー画像６１０および模式画像６５０を見ながら、ポインタｐ１を用いて視点変更アイコン６３０を操作することで、配信拠点内の閲覧したい箇所を閲覧することができる。
【0115】
次に、利用者Ａ１がポインタｐ１を用いて視点変更アイコン６３０を操作し、「注目点」ボタン６０５を押下することで、受付部７２は、注目点の指定を受け付ける（ステップＳ７２）。なお、受付部７２は、入力手段の一例であるマウスを用いた利用者Ａ１のクリックまたはダブルクリックの操作によって、注目点の指定を受け付けてもよい。次に、注目点特定部７７は、ステップＳ７２で指定が受け付けられた注目点の座標である注目点座標を特定する(ステップＳ７３)。ここで、注目点特定部７７によって特定される注目点座標は、ステップＳ７２で注目点の指定が受け付けられた際に表示されているツアー画像６１０の中心点の座標である。なお、注目点座標は、ツアー画像６１０中のポインタｐ１の位置を示す座標であってもよい。また、注目点座標は、注目点の位置を示す注目点位置情報の一例である。なお、注目点位置情報は、注目点座標に限られず、注目点の位置を特定可能な情報であればよい。
【0116】
送受信部７１は、通信管理システム５０に対して、撮影装置１０の選択を要求する旨を示す撮影装置選択要求を送信する（ステップＳ７４）。この撮影装置選択要求は、ステップＳ７３で特定された注目点座標およびステップＳ１６で受信された拠点ＩＤを含む。これにより、通信管理システム５０の送受信部５１は、通信端末７０から送信された撮影装置選択要求を受信する。
【0117】
次に、通信管理システム５０は、ステップＳ７４で受信された撮影装置選択要求に応じて、撮影装置１０の選択処理を実行する(ステップＳ７５)。ここで、図２６および図２７を用いて、ステップＳ７５の処理を詳細に説明する。図２６は、撮影装置の選択処理の一例を示すフローチャートである。図２７は、撮影装置の選択処理の一例の概略的に説明するための図である。
【0118】
まず、記憶・読出部５９は、ステップＳ７４で受信された拠点ＩＤを検索キーとして配信拠点管理ＤＢ５００５（図１８参照）を検索することにより、受信された拠点ＩＤと同じ拠点ＩＤに関連づけられた配信拠点情報を読み出す（ステップＳ１０１）。
【0119】
次に、選択部５３は、ステップＳ７４で受信された注目点座標を中心に、配信拠点を複数のエリアに分割する（ステップＳ１０２）。具体的には、選択部５３は、受信された注目点座標を起点として、ステップＳ１０１で読み出された配信拠点情報に含まれる拠点座標情報に基づいて、配信拠点のエリア全体を複数のエリアに分割する。図２７に示されている例では、利用者Ａ１によって指定された注目点を黒丸（●）で示しており、選択部５３は、この注目点を中心に周囲３６０°方向を、９０°ごとに４方向に均等に４等分する。これにより、選択部５３は、配信拠点をエリア１～エリア４の四つのエリアに分割する。
【0120】
なお、本実施形態では、選択部５３によって四つのエリアに分割される例を説明するが、選択部５３は、配信拠点に設置されている撮影装置１０もしくは配信端末の数、通信ネットワーク１００のネットワーク帯域、または通信端末７０に同時に受信および表示可能な画像の数等に応じて分割数を増減されてもよい。
【0121】
次に、記憶・読出部５９は、ステップＳ７４で受信された拠点ＩＤを検索キーとして設置情報管理ＤＢ５００４（図１７（Ｂ）参照）を検索することにより、受信された拠点ＩＤと同じ拠点ＩＤに関連づけられた設置情報を読み出す（ステップＳ１０３）。
【0122】
次に、選択部５３は、ステップＳ１０３で読み出された設置情報が示す座標値に基づいて、ステップＳ１０２で分割されたエリアごとの注目点座標に最も近い撮影装置１０を選択する（ステップＳ１０４）。具体的には、選択部５３は、設置情報に示されている撮影装置１０を、一つずつ順次処理を行う。
【0123】
まず、選択部５３は、例えば、読み出された設置情報が示す座標値を参照し、撮影装置１０が存在しているエリアが分割されたエリア（例えば、エリア１～エリア４）のどのエリアに属するかを判定する。その後、選択部５３は、撮影装置１０の座標値と注目点座標との距離を算出する。そして、選択部５３は、判定されたエリアにおいて初めての撮影装置１０であった場合、または判定されたエリアで「現時点も最も距離が短い」撮影装置１０よりも距離が短い場合、判定されたエリアにおける「現時点で最も距離が短い」撮影装置１０として、撮影装置１０の識別情報（例えば、撮影装置１０のＩＰアドレス）および算出された距離を保持する。
【0124】
選択部５３は、上述の処理を設置情報に示されている全ての撮影装置１０に対して行うことで、分割されたエリアのそれぞれでの「最も距離が近い」撮影装置１０を選択する。選択部５３は、分割されたエリアの数と同じ数の撮影装置１０が選択する。図２７の例において、選択部５３は、撮影装置１０Ａ－１,１０Ａ－２,１０Ａ－３,１０Ａ－４を、それぞれエリア１～エリア４における注目点座標に最も近い撮影装置１０として選択する。
【0125】
次に、生成部５４は、ステップＳ１０４で選択された撮影装置１０ごとに、ステップＳ７４で受信された注目点座標に対応する所定領域情報を生成する（ステップＳ１０５）。具体的には、生成部５４は、選択された撮影装置１０が撮影する全天球画像に対して、注目点座標が中心にくるような所定領域画像（透視射影変換画像）を表示させるための所定領域情報を生成する。ここで、動径（ｒ）と極角（θ）は、予め設定された所定の値が用いられるものとする。これは、透視射影変換画像の画角と仰角を一定として処理することを示している。方位角（φ）は、図２７に示されているように、設置情報に示されている撮影装置１０の設置方向と撮影装置１０から注目点座標の方向との相対値として算出することができる。そして、生成部５４は、算出された結果をもとに、撮影装置１０が取得する全天球画像から注目点座標を中心とした所定領域画像を表示（透視射影表示）させるための所定領域情報を生成する。生成部５４は、このような処理を、ステップＳ１０４で選択された全ての撮影装置１０に対して実行する。なお、撮影装置１０の設置位置（座標値）および設置方向（撮影装置１０の正面がどの方向を向いているか）は、予め管理者等によって設置情報管理ＤＢ５００４に設定されている。
【0126】
そして、記憶・読出部５９は、所定領域管理ＤＢ５００３（図１７（Ａ）参照）に対して、ステップＳ１０５で生成された所定領域情報を、該当する撮影装置１０のＩＰアドレスに関連づけて記憶する。
【0127】
このように、通信管理システム５０は、通信端末７０から送信された注目点座標等の注目点位置情報と、複数の撮影装置１０の設置情報とに基づいて、注目点を撮影する撮影装置１０を選択するとともに、注目点を表示するための選択された撮影装置１０の画角を算出することができる。
【0128】
図２４に戻り、通信管理システム５０の送受信部５１は、通信端末７０Ａに対して、ステップＳ７５における処理結果である選択結果通知を送信する（ステップＳ７６）。この選択結果通知は、ステップＳ１０５で生成された所定領域情報の数に応じた、生成された所定領域情報と該当する撮影装置１０のＩＰアドレスの組を含む。これにより、通信端末７０Ａの送受信部７１は、通信管理システム５０から送信された選択結果通知を受信する。このように、通信端末７０Ａの送受信部７１は、ステップＳ７２で受け付けられた注目点を含む所定領域を示す所定領域情報を取得する
【0129】
次に、通信端末７０Ａの記憶・読出部７９は、所定領域管理ＤＢ７００２（図１９（Ｂ）参照）に対して、ステップＳ７６で受信された所定領域情報を撮影装置１０のＩＰアドレスに関連づけて記憶する（ステップＳ７７）。
【0130】
次に、利用者Ａ１による所定の入力操作によって、受付部７２は、ステップＳ５３で受信された撮影画像データのうち、通信端末７０Ａに表示させる表示画像の選択を受け付ける（ステップＳ７８）。なお、通信端末７０が複数の撮影画像を同時に表示することが可能な場合、または受信された撮影画像が通信端末７０で同時に表示可能な数より少ない場合において、ステップＳ７８の処理は省略されてもよい。
【0131】
次に、画像・音処理部７３は、ステップＳ７６で選択された表示画像に対応する所定領域情報によって特定される所定領域の画像を表示させるため、ステップＳ７６で受信された所定領域情報を用いた透視射影変換を行うことで、所定領域画像を生成する（ステップＳ７９）。これにより、通信端末７０Ａは、通信管理システム５０で選択された撮影装置１０が撮影した撮影画像である全天球画像のうち、利用者が指定した注目点を含む所定領域画像を生成することができる。
【0132】
そして、表示制御部７４は、ステップＳ７９で生成された所定領域画像を、ディスプレイ７０６に表示させる（ステップＳ８０）。図２９は、ステップＳ８０で通信端末７０Ａに表示される表示画面の一例である。図２９に示されている表示画面９００は、ステップＳ７９で生成された所定領域画像Ｘを表示している。利用者Ａ１は、拠点表示画面６００を用いて指定した配信拠点の注目点の位置に対応する所定領域画像を確認することで、配信拠点における注目点の位置の現在の状況を詳細に確認することができる。
【0133】
このように、画像通信システム１は、閲覧拠点の利用者が指定した注目点を閲覧するために適切な撮影装置１０を、通信管理システム５０を用いて選択することができる。そして、画像通信システム１は、選択された撮影装置１０によって注目点が撮影された画像を表示可能な所定領域情報を、通信管理システム５０から通信端末７０へ送信することで、通信端末７０に注目点を示す画像を表示させることができる。
【0134】
●注目点の表示処理の変形例
次に、図２９を用いて、画像通信システム１における注目点の表示処理の変形例について説明する。図２９は、画像通信システムにおける注目点の表示処理の変形例を示すシーケンス図である。図２９は、上述の撮影装置１０の選択処理を、閲覧拠点の通信端末７０で実行する例を示す。なお、ステップＳ２０１～ステップＳ２０３の処理は、図２４のステップＳ７１～ステップＳ７３の処理と同様であるため説明を省略する。
次に、図２９を用いて、画像通信システム１における注目点の表示処理の変形例について説明する。図２９は、画像通信システムにおける注目点の表示処理の変形例を示すシーケンス図である。図２９は、上述の撮影装置１０の選択処理を、閲覧拠点の通信端末７０で実行する例を示す。なお、ステップＳ２０１～ステップＳ２０３の処理は、図２４のステップＳ７１～ステップＳ７３の処理と同様であるため説明を省略する。
【0135】
ステップＳ２０４において、通信端末７０Ａの送受信部７１は、通信管理システム５０に対して、撮影装置の設置位置を示す設置情報の取得を要求する旨を示す設置情報取得情報を送信する。この設置情報取得要求は、ステップＳ１６で受信された拠点ＩＤを含む。これにより、通信管理システム５０の送受信部５１は、通信端末７０Ａから送信された設置情報取得要求を受信する。
【0136】
次に、通信管理システム５０は、ステップＳ２０４で受信された拠点ＩＤを検索キーとして設置情報管理ＤＢ５００４（図１７（Ｂ）参照）を検索することにより、受信された拠点ＩＤと同じ拠点ＩＤに関連づけられた設置情報を読み出す（ステップＳ２０５）。そして、送受信部５１は、通信端末７０Ａに対して、ステップＳ２０５で読み出された設置情報を送信する（ステップＳ２０６）。これにより、通信端末７０Ａの送受信部７１は、通信管理システム５０から送信された設置情報を受信する。
【0137】
次に、通信端末７０Ａの選択部８１は、ステップＳ２０３で特定された注目点座標を中心に、配信拠点を複数のエリアに分割する（ステップＳ２０７）。具体的には、選択部８１は、特定された注目点座標を起点として、ステップＳ１６で受信された配信拠点情報に含まれる拠点座標情報に基づいて、配信拠点のエリア全体を複数のエリアに分割する。次に、選択部８１は、ステップＳ２０６で受信された設置情報が示す座標値に基づいて、ステップＳ２０７で分割されたエリアごとの注目点座標に最も近い撮影装置１０を選択する（ステップＳ２０８）。そして、生成部８２は、ステップＳ２０８で選択された撮影装置１０ごとに、ステップＳ２０３で特定された注目点座標に対応する所定領域情報を生成する（ステップＳ２０９）。このように、通信端末７０Ａの生成部８２は、ステップＳ２０２で受け付けられた注目点を含む所定領域を示す所定領域情報を取得する。なお、ステップＳ２０７、ステップＳ２０８およびステップＳ２０９の処理の詳細は、それぞれ図２４のステップＳ１０２、ステップＳ１０４およびステップＳ１０５の処理と同様である。
【0138】
次に、通信端末７０Ａの記憶・読出部７９は、所定領域管理ＤＢ７００２（図１９（Ｂ）参照）に対して、ステップＳ２０９で生成された所定領域情報を撮影装置１０のＩＰアドレスに関連づけて記憶する（ステップＳ２１０）。以降ステップＳ２１１～ステップＳ２１３の処理は、図２４のステップＳ７８～ステップＳ８０の処理と同様であるため、説明を省略する。
【0139】
このように、実施形態の変形例に係る画像通信システムは、利用者が指定した注目点を表示させる画像を撮影する撮影装置１０の選択処理を通信端末７０が行うことで、通信端末７０に注目点を示す画像を表示させることができる。これにより、画像通信システム１は、上述の実施形態と同様に、指定した注目点の画像を閲覧拠点の利用者に閲覧させることができる。
【0140】
●実施形態の効果
以上説明したように、画像通信システム１は、利用者が撮影装置１０に対する操作を行わずに、利用者によって指定された注目点に対応する配信拠点の画像を、閲覧拠点の通信端末７０に表示させることができる。
以上説明したように、画像通信システム１は、利用者が撮影装置１０に対する操作を行わずに、利用者によって指定された注目点に対応する配信拠点の画像を、閲覧拠点の通信端末７０に表示させることができる。
【0141】
また、画像通信システム１は、通信端末７０で全天球画像における注目点を写す領域のみを切り出して表示させることで、例えば、他の通信端末７０で別の領域が表示されている場合であっても、他の通信端末７０では表示変更を行わずに、全天球画像の任意の領域を表示させ続けることができる。
【0142】
上記実施形態において、所定領域Ｔは、全天球画像ＣＥを含む三次元の仮想空間における仮想カメラＩＣの撮影方向と画角を示す所定領域情報によって特定されるが、これに限るものではない。例えば、画角を一定にして利用する場合等、所定領域Ｔは、図７において、中心点ＣＰまたは矩形の所定領域Ｔの四隅の任意の点を示す所定点情報によって特定されるようにしてもよい。また、上記実施形態では、全天球画像（全天球パノラマ画像）の一例として、撮影画像（全体画像）が三次元のパノラマ画像である場合について説明したが、二次元のパノラマ画像であってもよい。
【0143】
上記実施形態において、閲覧拠点の通信端末７０は、閲覧専用の端末である必要は無く、この端末自身から撮影画像が配信されていて、配信機能と閲覧機能を同時に行える構成となっていてもよい。同様に、配信拠点の配信端末３０は、配信専用の端末である必要はなく、他の拠点から配信された撮影画像を表示し、配信機能と閲覧機能を同時に行える構成となっていてもよい。このように、画像通信システム１は、複数の拠点の間において、撮影画像の双方向の通信を行うような構成であってもよい。
【0144】
●まとめ●
以上説明したように、本発明の一実施形態に係る通信端末は、配信拠点に設置された複数の撮影装置１０の撮影画像（例えば、全天球画像）を受信する通信端末７０であって、利用者によって指定された配信拠点における注目点を受け付け、受け付けられた注目点の位置と撮影装置１０の設置位置とに基づいて選択された特定の撮影装置の撮影画像における注目点を含む所定領域を示す所定領域情報を取得する。そして、通信端末７０は、取得された所定領域情報に基づいて、特定の撮影装置の撮影画像における所定領域の画像である所定領域画像を表示する。これにより、通信端末７０は、利用者によって指定された注目点に対応する配信拠点の画像を表示させることができる。
以上説明したように、本発明の一実施形態に係る通信端末は、配信拠点に設置された複数の撮影装置１０の撮影画像（例えば、全天球画像）を受信する通信端末７０であって、利用者によって指定された配信拠点における注目点を受け付け、受け付けられた注目点の位置と撮影装置１０の設置位置とに基づいて選択された特定の撮影装置の撮影画像における注目点を含む所定領域を示す所定領域情報を取得する。そして、通信端末７０は、取得された所定領域情報に基づいて、特定の撮影装置の撮影画像における所定領域の画像である所定領域画像を表示する。これにより、通信端末７０は、利用者によって指定された注目点に対応する配信拠点の画像を表示させることができる。
【0145】
また、本発明の一実施形態に係る通信端末は、配信拠点を示すマップ画像（例えば、ツアー画像６１０）を表示させ、表示されたマップ画像に対する注目点を受け付ける。また、通信端末７０は、撮影装置１０によって撮影された撮影画像（例えば、全天球画像）を表示させ、表示された撮影画像に対する注目点を受け付ける。これにより、通信端末７０は、利用者が配信拠点の状況を閲覧しながら、配信拠点における注目点を指定することができる。
【0146】
さらに、本発明の一実施形態に係る通信端末は、複数の撮影装置１０に対応する複数の所定領域情報を取得し、取得された複数の所定領域情報のうち少なくとも一つの所定領域情報に対応する所定領域画像を表示する。これにより、通信端末７０は、複数の撮影装置１０の撮影画像のうち、所望の撮影画像に対する注目点を含む所定領域画像を表示させることができる。
【0147】
また、本発明の一実施形態に係る画像通信システムは、配信拠点に設置された複数の撮影装置１０の撮影画像を受信する通信端末７０と、通信端末７０と通信可能な通信管理システム５０と、を備える画像通信システム１である。画像通信システム１は、利用者によって指定された配信拠点における注目点を受け付け、受け付けられた注目点の位置と複数の撮影装置１０の設置位置とに基づいて、複数の撮影装置１０のうちの特定の撮影装置を選択し、選択された特定の撮影装置の撮影画像における所定領域を示す所定領域情報を生成する。そして、画像通信システム１は、生成された所定領域情報に示される所定領域の画像である所定領域画像を表示する。これにより、画像通信システム１は、利用者によって指定された注目点に対応する配信拠点の画像を表示させることができる。
【0148】
●補足●
上記で説明した実施形態の各機能は、一または複数の処理回路によって実現することが可能である。ここで、本実施形態における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウエアによって各機能を実行するようプログラミングされたプロセッサ、並びに上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）、SOC(System on a chip)、GPU(Graphics Processing Unit)および従来の回路モジュール等のデバイスを含むものとする。
上記で説明した実施形態の各機能は、一または複数の処理回路によって実現することが可能である。ここで、本実施形態における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウエアによって各機能を実行するようプログラミングされたプロセッサ、並びに上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）、SOC(System on a chip)、GPU(Graphics Processing Unit)および従来の回路モジュール等のデバイスを含むものとする。
【0149】
また、上記で説明した実施形態の各種テーブルは、機械学習の学習効果によって生成されたものでもよく、関連づけられている各項目のデータを機械学習にて分類付けすることで、テーブルを使用しなくてもよい。ここで、機械学習とは、コンピュータに人のような学習能力を獲得させるための技術であり，コンピュータが，データ識別等の判断に必要なアルゴリズムを、事前に取り込まれる学習データから自律的に生成し，新たなデータについてこれを適用して予測を行う技術のことをいう。機械学習のための学習方法は、教師あり学習、教師なし学習、半教師学習、強化学習および深層学習のいずれかの方法でもよく、さらに、これらの学習方法を組み合わせた学習方法でもよく、機械学習のための学習方法は問わない。
【0150】
これまで本発明の一実施形態に係る通信端末、画像通信システム、画像表示方法およびプログラムについて説明してきたが、本発明は、上述した実施形態に限定されるものではなく、他の実施形態の追加、変更または削除等、当業者が想到することができる範囲内で変更することができ、いずれの態様においても本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。
【符号の説明】
【0151】
１ 画像通信システム
１０ 撮影装置
３０ 配信端末
５０ 通信管理システム
５３ 選択部（選択手段の一例）
５４ 生成部（生成手段の一例）
７０ 通信端末
７１ 送受信部（取得手段の一例、受信手段の一例）
７２ 受付部（受付手段の一例）
７３ 画像・音処理部
７４ 表示制御部（表示制御手段の一例）
７７ 注目点特定部
８１ 選択部（選択手段の一例）
８２ 生成部（生成手段の一例）
１０ 撮影装置
３０ 配信端末
５０ 通信管理システム
５３ 選択部（選択手段の一例）
５４ 生成部（生成手段の一例）
７０ 通信端末
７１ 送受信部（取得手段の一例、受信手段の一例）
７２ 受付部（受付手段の一例）
７３ 画像・音処理部
７４ 表示制御部（表示制御手段の一例）
７７ 注目点特定部
８１ 選択部（選択手段の一例）
８２ 生成部（生成手段の一例）
【先行技術文献】
【特許文献】
【0152】
【文献】特開２０１７－２２５８７号公報
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図29】
