知財求人 - 知財ポータルサイト「IP Force」
特開2024-79570表示端末、通信システム、情報処理システム、表示方法、情報処理方法、通信方法、及びプログラム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024079570
(43)【公開日】2024-06-11
(54)【発明の名称】表示端末、通信システム、情報処理システム、表示方法、情報処理方法、通信方法、及びプログラム
(51)【国際特許分類】
H04N 7/15 20060101AFI20240604BHJP
H04N 21/431 20110101ALI20240604BHJP
H04N 5/765 20060101ALI20240604BHJP
H04N 5/93 20060101ALI20240604BHJP
【ＦＩ】
H04N7/15
H04N21/431
H04N5/765
H04N5/93
【審査請求】未請求
【請求項の数】16
【出願形態】ＯＬ
(21)【出願番号】P 2023161697
(22)【出願日】2023-09-25
(31)【優先権主張番号】P 2022192284
(32)【優先日】2022-11-30
(33)【優先権主張国・地域又は機関】JP
(71)【出願人】
【識別番号】000006747
【氏名又は名称】株式会社リコー
(74)【代理人】
【識別番号】100107766
【弁理士】
【氏名又は名称】伊東 忠重
(74)【代理人】
【識別番号】100070150
【弁理士】
【氏名又は名称】伊東 忠彦
(72)【発明者】
【氏名】大場 一寛
【テーマコード（参考）】
5C164
【Ｆターム（参考）】
5C164FA10
5C164UB81P
5C164VA07P
5C164VA11S
(57)【要約】
【課題】本開示は、録画された動画の再生中に、ユーザが、動画を閲覧している他のユーザにより、その動画のどの時間的な部分動画が注目されているかを把握できることを目的とする。
【解決手段】本開示は、通信端末に配信される際に録画された動画を再生表示する表示端末であって、前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモード（６２０）と、前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモード（６３０）と、を表示部に表示させる表示制御部３３を有する表示端末である。
【選択図】図５０
【解決手段】本開示は、通信端末に配信される際に録画された動画を再生表示する表示端末であって、前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモード（６２０）と、前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモード（６３０）と、を表示部に表示させる表示制御部３３を有する表示端末である。
【選択図】図５０
【特許請求の範囲】
【請求項1】
通信端末に配信される際に録画された動画を再生表示する表示端末であって、
前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモードと、
前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモードと、
を表示部に表示させる表示制御部を有する表示端末。
前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモードと、
前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモードと、
を表示部に表示させる表示制御部を有する表示端末。
【請求項2】
請求項１に記載の表示端末であって、
前記第１のモードにおいて、前記動画が広視野動画である場合に、当該広視野動画における所定領域を特定するための視点情報を、前記録画された動画を配信する情報処理システムに送信する送信部を有し、
前記第２のモードにおいて、前記表示制御部は、前記情報処理システムから受信した、前記広視野動画における前記所定領域の前記部分動画を前記表示部に表示させる、
表示端末。
前記第１のモードにおいて、前記動画が広視野動画である場合に、当該広視野動画における所定領域を特定するための視点情報を、前記録画された動画を配信する情報処理システムに送信する送信部を有し、
前記第２のモードにおいて、前記表示制御部は、前記情報処理システムから受信した、前記広視野動画における前記所定領域の前記部分動画を前記表示部に表示させる、
表示端末。
【請求項3】
前記第１のモードにおいて、前記録画された動画の再生中に、当該動画における所定の再生経過時間のフレームである静止画の共有を受け付ける受付部と、
前記第２のモードにおいて、前記表示制御部は、前記静止画を表示させる
ことを特徴とする請求項１に記載の表示端末。
前記第２のモードにおいて、前記表示制御部は、前記静止画を表示させる
ことを特徴とする請求項１に記載の表示端末。
【請求項4】
通信端末に配信される際に録画された動画を再生表示する表示端末と、前記録画された動画を配信する情報処理システムと、を有する通信システムであって、
前記表示端末は、
前記動画における時間的な部分動画の共有を受け付ける受付部と、
前記部分動画の共有に関する情報を、前記情報処理システムに送信する送信部と、
を有し、
前記情報処理システムは、
前記部分動画の共有に関する情報を受信する受信部と、
前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を、前記表示端末に送信する送信部と、
を有し、
前記表示端末は、前記各部分動画を表示部に表示させる表示制御部を有する、
通信システム。
前記表示端末は、
前記動画における時間的な部分動画の共有を受け付ける受付部と、
前記部分動画の共有に関する情報を、前記情報処理システムに送信する送信部と、
を有し、
前記情報処理システムは、
前記部分動画の共有に関する情報を受信する受信部と、
前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を、前記表示端末に送信する送信部と、
を有し、
前記表示端末は、前記各部分動画を表示部に表示させる表示制御部を有する、
通信システム。
【請求項5】
前記受付部は、前記配信された動画の再生中の第１のモードにおいて、前記部分動画の共有を受け付け、
前記表示制御部は、前記配信された動画の再生中の第２のモードにおいて、前記各部分動画を前記表示部に表示させる、
請求項４に記載の通信システム。
前記表示制御部は、前記配信された動画の再生中の第２のモードにおいて、前記各部分動画を前記表示部に表示させる、
請求項４に記載の通信システム。
【請求項6】
通信端末に配信される際に録画された動画を再生表示する表示端末が実行する表示方法であって、
前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモードと、
前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモードと、
を表示部に表示させる表示方法。
前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモードと、
前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモードと、
を表示部に表示させる表示方法。
【請求項7】
通信端末に配信される際に録画された動画を再生表示する表示端末と、前記録画された動画を配信する情報処理システムと、を有する通信システムが実行する通信方法であって、
前記表示端末は、
前記動画における時間的な部分動画の共有を受け付ける受付処理と、
前記部分動画の共有に関する情報を、前記情報処理システムに送信する送信処理と、
を実行し、
前記情報処理システムは、
前記部分動画の共有に関する情報を受信する受信処理と、
前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を、前記表示端末に送信する送信処理と、
を実行し、
前記表示端末は、前記各部分動画を表示部に表示させる表示制御処理を実行する、
通信方法。
前記表示端末は、
前記動画における時間的な部分動画の共有を受け付ける受付処理と、
前記部分動画の共有に関する情報を、前記情報処理システムに送信する送信処理と、
を実行し、
前記情報処理システムは、
前記部分動画の共有に関する情報を受信する受信処理と、
前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を、前記表示端末に送信する送信処理と、
を実行し、
前記表示端末は、前記各部分動画を表示部に表示させる表示制御処理を実行する、
通信方法。
【請求項8】
コンピュータに、通信端末に配信される際に録画された動画を再生表示させるプログラムであって、
前記コンピュータに、
前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモードと、
前記コンピュータを含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモードと、
を表示部に表示させるプログラム。
前記コンピュータに、
前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモードと、
前記コンピュータを含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモードと、
を表示部に表示させるプログラム。
【請求項9】
通信端末に配信される際に録画された動画を再生表示する表示端末であって、
他の各表示端末における前記動画の各閲覧履歴を記録させる受け付けを行う受付部と、
前記録画された動画を配信する情報処理システムに対して、前記各閲覧履歴の記録要求を送信する送信部と、
前記情報処理システムから、前記記録された前記他の各表示端末における各閲覧履歴に基づき、前記動画において前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を受信する受信部と、
前記受信された前記部分動画を表示部に表示させる表示制御部と、
を有する表示端末。
他の各表示端末における前記動画の各閲覧履歴を記録させる受け付けを行う受付部と、
前記録画された動画を配信する情報処理システムに対して、前記各閲覧履歴の記録要求を送信する送信部と、
前記情報処理システムから、前記記録された前記他の各表示端末における各閲覧履歴に基づき、前記動画において前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を受信する受信部と、
前記受信された前記部分動画を表示部に表示させる表示制御部と、
を有する表示端末。
【請求項10】
前記録画された動画の再生中の第１のモードにおいて、前記受付部及び前記送信部が実行し、
前記録画された動画の再生中の第２のモードにおいて、前記送信部及び前記表示制御部が実行する、
請求項９に記載の表示端末。
前記録画された動画の再生中の第２のモードにおいて、前記送信部及び前記表示制御部が実行する、
請求項９に記載の表示端末。
【請求項11】
通信端末に配信される際に録画された動画を表示端末に配信する情報処理システムであって、
所定の表示端末から、他の各表示端末における前記動画の各閲覧履歴を記録させる要求を受信する受信部と、
前記他の各表示端末に、当該他の各表示端末における前記動画の閲覧履歴を記録する要求を送信する送信部と、
前記他の各表示端末から取得した前記他の各表示端末における前記動画の各閲覧履歴に基づいて、前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を特定する部分動画特定部と、
を有し、
前記送信部は、前記部分動画を前記通信端末に送信する、情報処理システム。
所定の表示端末から、他の各表示端末における前記動画の各閲覧履歴を記録させる要求を受信する受信部と、
前記他の各表示端末に、当該他の各表示端末における前記動画の閲覧履歴を記録する要求を送信する送信部と、
前記他の各表示端末から取得した前記他の各表示端末における前記動画の各閲覧履歴に基づいて、前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を特定する部分動画特定部と、
を有し、
前記送信部は、前記部分動画を前記通信端末に送信する、情報処理システム。
【請求項12】
請求項９又は１０に記載の表示端末と、
請求項１１に記載の情報処理システムと、
を有する通信システム。
請求項１１に記載の情報処理システムと、
を有する通信システム。
【請求項13】
通信端末に配信される際に録画された動画を再生表示する表示端末が実行する表示方法であって、
他の各表示端末における前記動画の各閲覧履歴を記録させる受け付けを行う受付処理と、
前記録画された動画を配信する情報処理システムに対して、前記各閲覧履歴の記録要求を送信する送信処理と、
前記情報処理システムから、前記記録された前記他の各表示端末における各閲覧履歴に基づき、前記動画において前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を受信する受信処理と、
前記受信された前記部分動画を表示部に表示させる表示制御処理と、
を実行する表示方法。
他の各表示端末における前記動画の各閲覧履歴を記録させる受け付けを行う受付処理と、
前記録画された動画を配信する情報処理システムに対して、前記各閲覧履歴の記録要求を送信する送信処理と、
前記情報処理システムから、前記記録された前記他の各表示端末における各閲覧履歴に基づき、前記動画において前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を受信する受信処理と、
前記受信された前記部分動画を表示部に表示させる表示制御処理と、
を実行する表示方法。
【請求項14】
コンピュータに、通信端末に配信される際に録画された動画を再生表示させるプログラムであって、
前記コンピュータに、
他の各表示端末における前記動画の各閲覧履歴を記録させる受け付けを行う受付処理と、
前記録画された動画を配信する情報処理システムに対して、前記各閲覧履歴の記録要求を送信する送信処理と、
前記情報処理システムから、前記記録された前記他の各表示端末における各閲覧履歴に基づき、前記動画において前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を受信する受信処理と、
前記受信された前記部分動画を表示部に表示させる表示制御処理と、
を実行させるプログラム。
前記コンピュータに、
他の各表示端末における前記動画の各閲覧履歴を記録させる受け付けを行う受付処理と、
前記録画された動画を配信する情報処理システムに対して、前記各閲覧履歴の記録要求を送信する送信処理と、
前記情報処理システムから、前記記録された前記他の各表示端末における各閲覧履歴に基づき、前記動画において前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を受信する受信処理と、
前記受信された前記部分動画を表示部に表示させる表示制御処理と、
を実行させるプログラム。
【請求項15】
通信端末に配信される際に録画された動画を表示端末に配信する情報処理システムが実行する情報処理方法であって、
所定の表示端末から、他の各表示端末における前記動画の各閲覧履歴を記録させる要求を受信する受信処理と、
前記他の各表示端末に、当該他の各表示端末における前記動画の閲覧履歴を記録する要求を送信する送信処理と、
前記他の各表示端末から取得した前記他の各表示端末における前記動画の各閲覧履歴に基づいて、前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を特定する部分動画特定処理と、
を実行し、
前記送信処理は、前記部分動画を前記通信端末に送信する処理を含む、情報処理方法。
所定の表示端末から、他の各表示端末における前記動画の各閲覧履歴を記録させる要求を受信する受信処理と、
前記他の各表示端末に、当該他の各表示端末における前記動画の閲覧履歴を記録する要求を送信する送信処理と、
前記他の各表示端末から取得した前記他の各表示端末における前記動画の各閲覧履歴に基づいて、前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を特定する部分動画特定処理と、
を実行し、
前記送信処理は、前記部分動画を前記通信端末に送信する処理を含む、情報処理方法。
【請求項16】
コンピュータに、通信端末に配信される際に録画された動画を表示端末に配信させるプログラムであって、
前記コンピュータに、
所定の表示端末から、他の各表示端末における前記動画の各閲覧履歴を記録させる要求を受信する受信処理と、
前記他の各表示端末に、当該他の各表示端末における前記動画の閲覧履歴を記録する要求を送信する送信処理と、
前記他の各表示端末から取得した前記他の各表示端末における前記動画の各閲覧履歴に基づいて、前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を特定する部分動画特定処理と、
を実行させ、
前記送信処理は、前記部分動画を前記通信端末に送信する処理を含む、プログラム。
前記コンピュータに、
所定の表示端末から、他の各表示端末における前記動画の各閲覧履歴を記録させる要求を受信する受信処理と、
前記他の各表示端末に、当該他の各表示端末における前記動画の閲覧履歴を記録する要求を送信する送信処理と、
前記他の各表示端末から取得した前記他の各表示端末における前記動画の各閲覧履歴に基づいて、前記他の各表示端末で所定数よりも多く閲覧された動画における時間的な部分動画を特定する部分動画特定処理と、
を実行させ、
前記送信処理は、前記部分動画を前記通信端末に送信する処理を含む、プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、表示端末、通信システム、情報処理システム、表示方法、情報処理方法、通信方法、及びプログラムに関する。
【背景技術】
【0002】
過去に他のユーザの間で盛り上がった動画像を、後でユーザが閲覧することのできる技術が提案されている（特許文献１参照）。
【発明の概要】
【発明が解決しようとする課題】
【0003】
しかしながら、複数のユーザが同じタイミングで、既に録画された動画を閲覧する場合、複数のユーザのうちの任意のユーザは、この動画を現在閲覧している他のユーザが動画のどの時間的な部分動画に注目しているかを把握することができない。
【0004】
本開示は、上述の課題に鑑みてなされたもので、録画された動画の再生中に、ユーザが、動画を閲覧している他のユーザにより、その動画のどの時間的な部分動画が注目されているかを把握できることを目的とする。
【課題を解決するための手段】
【0005】
請求項１に係る発明は、通信端末に配信される際に録画された動画を再生表示する表示端末であって、前記録画された動画の再生中に、当該動画における時間的な部分動画の共有を受け付ける第１のモードと、前記表示端末を含めた各表示端末によって共有された各動画における時間的な各部分動画を表示させる第２のモードと、を表示部に表示させる表示制御部を有する表示端末である。
【発明の効果】
【0006】
以上説明したように本発明によれば、録画された動画の再生中に、ユーザが、動画を閲覧している他のユーザにより、その動画のどの時間的な部分動画が注目されているかを把握することができるという効果を奏する。
【図面の簡単な説明】
【0007】
【図1】広視野画像を用いた遠隔コミュニケーションの一例を説明する図である。
【図2】通信システムの構成概略図の一例である。
【図3】撮像装置のハードウエア構成図の一例である。
【図4】通信端末、情報処理システムのハードウエア構成図の一例である。
【図5】（ａ）は撮像装置の左側面図であり、（ｂ）は撮像装置の正面図であり、（ｃ）は撮像装置の平面図である。
【図6】撮像装置の使用イメージ図である。
【図7】（ａ）は撮像装置で撮像された半球画像（前）、（ｂ）は撮像装置で撮像された半球画像（後）、（ｃ）は正距円筒図法により表された画像を示した図である。
【図8】（ａ）正距円筒射影画像で球を被う状態を示した概念図、（ｂ）全天球画像を示した図である。
【図9】全天球画像を三次元の立体球とした場合の仮想カメラ及び所定領域の位置を示した図である。
【図10】（ａ）は図５の立体斜視図、（ｂ）は（ａ）の状態の所定領域画像がディスプレイに表示されている図、（ｃ）は（ａ）における仮想カメラＩＣの視点を変更後の所定領域を示した図、（ｄ）は（ｃ）の状態の所定領域画像がディスプレイに表示されている図である。
【図11】所定領域情報と所定領域Ｔの画像との関係を示した図である。
【図12】球座標による三次元ユークリッド空間内の点を示した図である。
【図13】通信システムの機能構成図の一例である。
【図14】（ａ）、（ｂ）は、画像管理情報記憶部に記憶される画像管理情報を示す概念図である。
【図15】仮想ルーム情報記憶部に記憶される仮想ルーム情報を示す概念図である。
【図16】テナント情報記憶部に記憶されているテナント情報を示す概念図である。
【図17】視点関連情報記憶部に記憶される視点関連情報を示す概念図である。
【図18】静止画共有情報記憶部５００５に記憶される静止画共有情報を示す概念図である。
【図19】部分平面動画の共有情報記憶部５００６に記憶される部分平面動画の共有情報を示す概念図である。
【図20】部分広視野動画の共有情報記憶部５００７に記憶されている部分広視野動画の共有情報を示す概念図である。
【図21】（ａ）は入室画面の一例を示す図である。（ｂ）はユーザが仮想ルームに入室したことで、通信端末が表示する画像閲覧画面の一例を示す図である。
【図22】ユーザ（又は通信端末）が仮想ルームに入室する処理を説明するシーケンス図の一例である。
【図23】通信端末が表示するデバイス登録画面の一例を示す図である。
【図24】（ａ）は、撮像装置登録ダイアログを示す図の一例である。（ｂ）は、二次元コード画面の一例を示す図である。
【図25】ＶＲゴーグル登録ボタンが押下された場合に表示されるＶＲゴーグル登録画面の一例を示す図である。
【図26】仮想ルームに撮像装置を対応付けるための仮想ルーム対応付け画面（その１）の一例を示す図である。
【図27】仮想ルーム対応付け画面（その２）の一例を示す図である。
【図28】仮想ルーム対応付け画面（その３）の一例を示す図である。
【図29】通信端末が表示する広視野画像送信開始停止ダイアログの一例を示す図である。
【図30】ユーザが仮想ルームに撮像装置を登録する手順を示すシーケンス図の一例である。
【図31】広視野画像が共有される流れを説明するシーケンス図の一例である。
【図32】広視野画像の共有時において、通信端末からユーザが撮像装置に撮像を要求する処理を説明するシーケンス図の一例である。
【図33】通信端末が表示する画像閲覧画面の一例を示す図である。
【図34】通信端末において、撮像ボタンが押下されたことでダウンロードボタンが表示された画像閲覧画面の一例を示す図である。
【図35】（ａ）は、ユーザがダウンロードボタンを押下する前に表示される画像閲覧画面を示す図の一例である。（ｂ）は、ユーザがダウンロードボタンを押下した後に表示される画像閲覧画面を示す図の一例である。
【図36】サムネイルが表示された画像閲覧画面を示す図の一例である。
【図37】３つの画像欄がある場合の画像閲覧画面の一例を示す図である。
【図38】広視野画像の共有時において、通信端末からユーザが撮像装置に撮像を要求する処理を説明するシーケンス図の変形例を示す図である。
【図39】ユーザがストレージに保存されている広視野画像を閲覧する処理を説明するシーケンスである。
【図40】仮想ルームリスト画面の一例を示す図である。
【図41】通常再生モードを示す画面例である。
【図42】所定のサムネイルを拡大表示した例である。
【図43】静止画を共有する処理を示すシーケンス図である。
【図44】部分動画を共有する処理を示すシーケンス図である。
【図45】主催者以外の各閲覧者が閲覧している履歴を記録する処理を示すシーケンス図である。
【図46】共有再生モードを示す図である。
【図47】閲覧者が共有静止画を再生する処理を示すシーケンス図である。
【図48】共有静止画を再生した画面を示す図である。
【図49】閲覧者が共有部分動画を再生する処理を示すシーケンス図である。
【図50】共有部分動画を再生した画面を示す図である。
【図51】閲覧者が高注目部分動画を再生する処理を示すシーケンス図である。
【図52】高注目部分動画を再生した図面を示す図である。
【図53】通信システムが遠隔医療に適用された遠隔コミュニケーションの一例を説明する図である。
【図54】遠隔医療の場合において仮想ルームに撮像装置を対応付けるための仮想ルーム対応付け画面の一例を示す図である。
【図55】任意のユーザが通信端末をストレージに接続させて表示した仮想ルームリスト画面の一例を示す図である。
【図56】各拠点における表示画像のサムネイルを選択するための拠点表示画像選択画面の一例を示す図である。
【発明を実施するための形態】
【0008】
以下、本発明を実施するための形態の一例として、情報処理システムと情報処理システムが行う画像送信方法について説明する。
【0009】
＜遠隔コミュニケーションの一例＞
図１は、広視野画像を用いた遠隔コミュニケーションの一例を説明する図である。図１では、３つの拠点Ａ～Ｃが情報処理システム５０を介して通信している。拠点の数は一例に過ぎず、２拠点でも、４拠点以上でもよい。
図１は、広視野画像を用いた遠隔コミュニケーションの一例を説明する図である。図１では、３つの拠点Ａ～Ｃが情報処理システム５０を介して通信している。拠点の数は一例に過ぎず、２拠点でも、４拠点以上でもよい。
【0010】
拠点Ａは一例として、工事現場である。拠点Ｂ，Ｃはどこでもよいが、例えばオフィス等、広視野画像を通信可能な場所であればよい。拠点Ａには、被写体等を撮像することで、例えば全天球画像と言われる広視野画像、上下方向又は水平方向に１８０～３６０度といった周囲の広角な広視野画像を生成可能な撮像装置１０が配置されている。以下ではこのような広角な画像を単に「広視野画像」という。拠点Ａ～Ｃには広視野画像を閲覧する各種の通信端末３０Ａ～３０Ｃが配置されている。なお、以下では、通信端末３０Ａ～３０Ｃのうち任意の通信端末を「通信端末３０」と称する。
【0011】
工事現場は、各場所で様々な工事が作業員により進められており、撮像装置が、工事現場が映された広視野画像を生成するために工事現場の全体を撮像しつつ、各拠点Ａ～Ｃのユーザが着目したい工事又は作業があれば、拠点Ａ～Ｃの各ユーザａ～ｃが仮想的な視点を任意に変えて確認できる。この場合の視点とは、広視野画像全体のうちディスプレイ等の表示画面に表示される所定領域の中心位置又は範囲である。
【0012】
撮像装置１０は三脚８６に取り付けられたり、ジンバル８７を介してアーム８５に取り付けられたりする。工事現場には中継装置（図１では通信端末３０Ａが中継装置を兼ねている）が設置されており、通信端末３０Ａが有線又は無線で撮像装置１０から受信した広視野画像を、情報処理システム５０に送信する。通信端末３０Ａは、広視野画像の閲覧用の端末にもなり得る。通信端末３０にカメラ９が接続されており（内蔵していてもよい）、カメラ９が撮像した通常の画角の画像（広視野画像を撮像できてもよい）も情報処理システム５０に送信可能である。また、ユーザａ（例えば作業員でもよい）はスマートグラス８８を装着でき、スマートグラス８８が撮像することで生成した通常の画角の画像（広視野画像を撮像できてもよい）が情報処理システム５０に送信される場合がある。スマートグラス８８とは、視野を確保しながら、インターネット経由で取得した情報をディスプレイに表示する情報端末である。スマートグラス８８は任意の拠点に配置されていてよい。
【0013】
一方、拠点Ｂには通信端末３０Ｂの一例としてＰＣ（Personal Computer）又はスマートフォン等が配置されている。また、通信端末３０Ｂは情報処理システム５０と通信できる装置であればよく、これらの他、タブレット端末、ＰＤＡ（Personal Digital Assistant）、電子黒板、プロジェクタ等でもよい。通信端末３０Ｂにカメラが内蔵又は接続されていてもよい。
【0014】
また、拠点Ｃには通信端末３０Ｃの一例としてＰＣ、スマートフォン、ＶＲ(Virtual Reality)ゴーグル８９等が配置され、図１では、通信端末３０Ｃにカメラ８が内蔵又は接続されている。ＶＲゴーグル８９とは、コンピュータ上の人工的な世界又は全天球画像を、首又は身体を動かした方向に合わせて表示する情報端末である。ＶＲゴーグル８９は、外付けのＶＲスコープ（本体にプラスチック製等のレンズが付いており、組み立ててスマートフォンをセットすることで手軽にＶＲを楽しめるＶＲスコープ）のようにスマートフォンにＶＲ用のゴーグルをセットしたものでもよい。カメラ８は広角用でも通常画角用でもよい。また、通信端末３０Ｃは情報処理システム５０と通信できる装置であればよく、タブレット端末、ＰＤＡ、電子黒板、プロジェクタ等でもよい。ＶＲゴーグル８９は任意の拠点に配置されていてよい。
【0015】
本実施形態では、撮像装置１０及び各通信端末３０は、「仮想ルーム」という通信グループで通信が管理される。撮像装置１０は仮想ルームに対応付けられており、通信端末３０（通信端末３０を操作するユーザ）は、この仮想ルームに入室して、撮像装置１０によって送信された広視野画像を受信することで、ユーザが広視野画像を閲覧できる。スマートグラス８８又はＶＲゴーグル８９も仮想ルームに対応付けることが可能である。カメラ８，９は、通信端末３０と同様に仮想ルームに入室する。
【0016】
拠点Ａ～Ｃのユーザａ～ｃは各自の通信端末３０で任意に広視野画像の視点を変更できる。このため、リアルタイムに広視野画像を閲覧する各ユーザａ～ｃはそれぞれ異なる視点を見ている可能性が生じて、意思の疎通が困難になるおそれがある。そこで、本実施形態では、任意の拠点の通信端末３０において設定されている仮想的な視点の情報を他の拠点の通信端末３０でも共有できるようにする。共有の概略を説明する。以下では、説明のため、拠点Ｂのユーザｂが指定した視点が拠点Ａ、Ｃのユーザａ，ｃと共有する場合が示されている。
【0017】
(1) 通信端末３０Ａ～３０Ｃは撮像装置１０が撮像することで生成した広視野画像（第一の広視野画像の一例）を共有している。ユーザｂが通信端末３０Ｂで任意の視点で閲覧した状態で広視野画像を要求すると、通信端末３０Ｂ（第一の通信端末の一例）が視点情報と撮像要求を情報処理システム５０に送信する。
【0018】
(2) 情報処理システム５０は撮像要求に応じて、視点情報を指定して撮像装置１０に撮像（静止画でも動画でもよい）を要求する。
【0019】
(3) 撮像装置１０は撮像要求に応じて撮像し、広視野画像（第二の広視野画像の一例）と視点情報を情報処理システム５０から通知されたＵＲＬ（保存場所情報の一例。図１では、ストレージ９０上の保存場所を示す。）に関連付けて保存する。ストレージ９０に保存された広視野画像は任意の通信端末３０がダウンロードして表示可能である。
【0020】
(4) 情報処理システム５０はＵＲＬを通信端末３０Ｂに送信する。
【0021】
(5)また、情報処理システム５０は、自動で又はユーザｂの要求に応じて、ＵＲＬを同じ仮想ルームに入室中の通信端末３０Ａ、３０Ｃ（第二の通信端末の一例）に送信する。
【0022】
(6) 通信端末３０Ａ、３０ＣはＵＲＬにアクセスして視点情報と広視野画像を受信し、視点情報で特定される広視野画像の視点を画像欄の中央に一致させるように設定して表示する。なお、視点を完全に中央に一致させる必要はなく、視点を画像欄の中央近傍の範囲に含まれるように設定して表示させてもよい。
【0023】
拠点Ａのユーザａの視点を拠点Ｂ、Ｃのユーザに共有する場合、拠点Ｃのユーザの視点を拠点Ａ、Ｂのユーザに共有する場合も同様である。
【0024】
以上のように、本実施形態の通信システム１ａは、広視野画像が配信された場合でも、各拠点で着目していた所定領域が表示されるように撮像されることで生成された広視野画像に対する視点の移動を指示しなくとも、視点情報が共有されるので、ユーザの意図疎通が容易になる。
【0025】
なお、(3)で撮像装置１０が広視野画像そのものを情報処理システム５０に送信し、(4)で情報処理システム５０が広視野画像を通信端末３０Ａ～３０Ｃに送信することもできる。
【0026】
また、図１では、工事現場に撮像装置１０が配置される例を説明したが、ＶＲ教育、イベント配信、リモート接客、遠隔医療等にも本実施形態を適用可能である。ＶＲ教育では、撮像装置１０が研究室等の現場の拠点に配置され、遠隔拠点から学生が任意に視点を変えて黒板、器具、サンプル、実験結果等を閲覧できる。イベント配信では、撮像装置１０が現場のイベントの開催場所に配置され、遠隔拠点から観客等のイベント参加者がオンラインで任意に視点を変えて開催場所の様子を閲覧できる。なお、開催場所の様子は演者、出場者、発表者、イベントで説明される製品又は展示物などの被写体の映像、イベントで説明される資料の映像、開催場所の状態の映像等を含む。なお、イベントの開催場所は屋内であっても屋外であってもよく、スポーツ、コンサート、演劇等の会場も含まれる。リモート接客では、例えば旅行代理店の接客に適用する場合には、撮像装置１０が現場の旅先に配置され、遠隔拠点から顧客が任意に視点を変えて旅程を検討できる。遠隔医療では、撮像装置１０が手術室等の医療現場に配置され、遠隔拠点から医師、学生、医療機器の関係者等が任意に視点を変えて医療現場で医療行為を行っている医師の動作、看護師の動作、器具の配置、患者の状態、バイタル等を閲覧できる。
【0027】
画像が撮像される拠点は、これらに限られず、学校、工場、倉庫、建設現場、サーバルーム又は店舗等、閲覧側の拠点のユーザ（閲覧者）が遠隔拠点の現場の状況を把握したいニーズが存在する空間であればよい。
【0028】
＜用語について＞
テナントとは、サービスの提供者（本実施形態では情報処理システム）から画像配信サービスを受けることを契約する際の契約単位に紐づくユーザのグループを示しており、契約した企業、組織、個人等である。そのため、テナントは、ユーザグループとも言い換えることができる。ユーザは一例としてテナントに所属しているが、ユーザ個人でサービスに加入してもよい。テナント（ユーザグループ）には、ユーザの他、撮像装置、仮想ルーム等が登録されている。
テナントとは、サービスの提供者（本実施形態では情報処理システム）から画像配信サービスを受けることを契約する際の契約単位に紐づくユーザのグループを示しており、契約した企業、組織、個人等である。そのため、テナントは、ユーザグループとも言い換えることができる。ユーザは一例としてテナントに所属しているが、ユーザ個人でサービスに加入してもよい。テナント（ユーザグループ）には、ユーザの他、撮像装置、仮想ルーム等が登録されている。
【0029】
拠点とは、活動のよりどころとする場所をいう。本実施形態では、拠点の例として会議室を例にする。会議室は、主に会議に使用することを目的に設置された部屋のことである。会議は、会合、ミーティング、打ち合わせ、集会、寄り合い、集まり等ともいう。
【0030】
デバイスとは、ＰＣ、スマートフォン等の汎用的な通信端末３０でない装置をいい、撮像装置、又は、広視野画像の閲覧装置である。本実施形態では、撮像装置１０、スマートグラス８８、及び、ＶＲゴーグル８９が挙げられる。
【0031】
視点情報とは、ディスプレイの表示画面に表示する広視野画像のどの所定領域をディスプレイの表示画面に表示するかを特定するパラメータ情報である。本実施形態ではディスプレイの表示画面に表示される広視野画像の中心に対応する「動径」、「極角」、「方位角」を視点情報の一例として説明するが、対角頂点の座標など他のパラメータ情報で特定されてもよい。
【0032】
広視野画像とは、所定の表示方法においてディスプレイの表示画面（広視野画像が表示される領域）に一度に表示できる表示範囲より広い広範囲の視野角を有する画像を意味する。広視野画像は、最大で上下方向３６０度（または１８０度）、左右方向３６０度の視野分の表示範囲を持つが、上下３６０度未満、左右３６０度未満であってもディスプレイに一度に表示できる表示範囲より広い広範囲の視野角を有する画像であれば広視野画像に含まれる。また、上下方向及び左右方向についてそれぞれ、１６０度以上の視野分の表示範囲を有している画像も広視野画像に含まれる。例えば、人間が一度に視認できる範囲よりも広い表示範囲を有している画像も広視野画像に含まれる。なお、表示方法によってはディスプレイの表示画面に一度に表示できる画像であっても、所定の表示方法（表示モード、又は拡大若しくは縮小等）に切り替えたり、変更したりすることによって、広範囲の視野角を有するのであれば広視野画像に含まれる。なお、本実施形態では、広視野画像の一例としてエクイレクタングラー（equirectangular）形式の全天球画像を例に説明するが、全方位画像、半球画像、３Ｄパノラマ画像、２Ｄパノラマ画像、ＶＲ画像も広視野画像に含まれる。広視野画像は、例えばキューブマッピング形式、ドームマスター形式等の画像であってもよい。また、全天球画像はエクイレクタングラー（equirectangular）形式以外の形式であってもよい。
【0033】
通常の画角で撮像された画像は、広視野画像でない画像であるが、本実施形態では、広視野画像でない画像（平面画像）として説明する。
【0034】
通信グループとは、広視野画像が共有される（配信される）ユーザの集まりである。通常の空間では、各ユーザが同じ部屋に入室した場合に各ユーザにより広視野画像が共有可能となるという意味で、通信グループを仮想的な部屋（仮想ルーム）という用語で説明する。ここでの仮想とはネットワークを介した情報処理で実現されるという意味である。
【0035】
各拠点のユーザは遠隔地同士で遠隔コミュニケーションを行う。遠隔コミュニケーションは遠隔地の拠点で行われる会合である。会合とは相談又は討議などのために人々が寄り集まることをいう。会合には接客、会議、集会、打合せ、勉強会、授業、セミナー、発表会など種々の態様がある。必ずしも双方向通信である必要はない。したがって、仮想ルームを仮想会議室と称してもよい。
【0036】
＜通信システムの構成例＞
図２は、通信システム１ａの構成概略図の一例である。図１は、図２の通信システム１ａを現場との遠隔コミュニケーションに適用した一例である。通信システム１ａは、複数の拠点間において、撮像装置１０が撮像した広視野画像又は通常画角の画像を双方向に送受信するシステムであり、ある拠点から配信される画像を、他の拠点において表示させることで、他の拠点のユーザが画像を閲覧できるシステムである。なお、広視野画像の一例として、撮像装置１０が撮像する全天球画像が配信される。通信システム１ａは、例えば、所定の一拠点で撮像された広視野画像を、遠隔地にある他の拠点において閲覧させることができる。
図２は、通信システム１ａの構成概略図の一例である。図１は、図２の通信システム１ａを現場との遠隔コミュニケーションに適用した一例である。通信システム１ａは、複数の拠点間において、撮像装置１０が撮像した広視野画像又は通常画角の画像を双方向に送受信するシステムであり、ある拠点から配信される画像を、他の拠点において表示させることで、他の拠点のユーザが画像を閲覧できるシステムである。なお、広視野画像の一例として、撮像装置１０が撮像する全天球画像が配信される。通信システム１ａは、例えば、所定の一拠点で撮像された広視野画像を、遠隔地にある他の拠点において閲覧させることができる。
【0037】
図２に示されているように、通信システム１ａでは、拠点Ａに配置された撮像装置１０、通信端末３０Ａ、情報処理システム５０、及び複数の拠点（拠点Ｂ，Ｃ，Ｄ）のそれぞれに配置された通信端末３０Ｂ,３０Ｃ，３０Ｄが通信可能に接続されている。
【0038】
撮像装置１０が直接、通信ネットワークＮに接続できる通信機能を有している場合、中継装置（例えばルーター等）としての通信端末３０Ａは不要である。この場合、通信端末３０Ａは、撮像装置１０を伴わずに通信ネットワークＮに接続される。しかし、拠点Ａに通信端末３０Ａが配置される場合、通信端末３０Ａが中継装置を兼ね、通信端末３０Ｂ，３０Ｃ，３０Ｄと同様にユーザａが広視野画像を閲覧できる。なお、拠点Ａ以外の拠点に撮像装置１０がさらに配置されていてもよいし、拠点Ａに複数の撮像装置１０が配置されていてもよい。
【0039】
各通信端末３０及び情報処理システム５０は、通信ネットワークＮを介して通信することができる。通信ネットワークＮは、インターネット、移動体通信網、ＬＡＮ(Local Area Network)等によって構築されている。なお、通信ネットワークＮには、有線通信だけでなく、３Ｇ(3rd Generation)、４Ｇ(4th Generation)、５Ｇ（5th Generation）、Ｗｉ－Ｆｉ(Wireless Fidelity)（登録商標）、ＷｉＭＡＸ(Worldwide Interoperability for Microwave Access)又はＬＴＥ(Long Term Evolution)等の無線通信によるネットワークが含まれてもよい。
【0040】
撮像装置１０は、後述するように、広視野画像を撮像可能な撮像装置の一例として、被写体又は風景等を撮像して元になる二つの半球画像を得て、一つの全天球画像を生成することが可能なデジタルカメラを例にして説明する。撮像装置１０によって得られる広視野画像は、動画であっても静止画であってもよく、動画と静止画の両方であってもよい。また、撮像画像は、画像と共に音声を含む映像であってもよい。
【0041】
通信端末３０は、各拠点のユーザによって使用されるＰＣ等のコンピュータである。通信端末３０は、自拠点で撮像することで得られた画像、他の拠点から配信された広視野画像（静止画又は動画）及び通常の画角の画像を表示する。通信端末３０は、例えば、通信ネットワークＮを介して、撮像装置１０によって撮像された広視野画像を取得する。また、通信端末３０には、OpenGL ES等の画像処理を実行するソフトウェアがインストールされており、広視野画像の一部の領域を特定する視点情報に基づく画像表示ができる。なお、OpenGL ESは画像処理を実行するソフトウェアの一例であって、他のソフトウェアであってもよい。また、画像処理を実行するソフトウェアをインストールしていなくても、外部から受信したソフトウェアによって画像処理を実行してもよいし、外部のソフトウェアによって実行される画像処理結果を受信することで画像表示を行ってもよい。すなわち、通信端末３０は、広視野画像の一部の所定領域を表示可能である。
【0042】
通信端末３０はユーザの操作に応じて広視野画像の表示範囲に対する視点を任意に変更できる。通信端末３０は、タッチパネル、方向ボタン、マウス、キーボード、タッチパッドなどに対するユーザ操作入力（キー入力、ドラッグ、スクロール等を含む）に応じて、仮想的な視点を移動させることで、移動後の視点に応じた視点情報に基づいて視野範囲（所定領域）を変更して表示できる。さらに、通信端末３０が例えばＶＲゴーグル等のユーザが装着する通信端末の場合に、装着したユーザの動きの変更に応じて変更された通信端末３０の姿勢情報を検知し、検知した姿勢情報に応じて、仮想的な視点を移動させることで、移動後の視点に応じた視点情報に基づいて視野範囲（所定領域）を変更して表示してもよい。
【0043】
通信端末３０Ａは、後述の入出力Ｉ／Ｆ１１６に接続されたＵＳＢ(Universal Serial Bus)ケーブル等の有線ケーブルを介して撮像装置１０から取得した広視野画像を、情報処理システム５０を介して、他の拠点の通信端末３０に配信する。撮像装置１０及び通信端末３０Ａの接続は、有線ケーブルを用いた有線接続ではなく、近距離無線通信等を用いた無線接続であってもよい。拠点Ａに複数の通信端末３０Ａが配置されてもよい。
【0044】
拠点Ａのユーザがスマートグラス８８を装着し、スマートグラス８８が通信ネットワークＮに接続する場合もある。この場合、スマートグラス８８が撮像した画像は通信ネットワークＮを介して情報処理システム５０に送信され、情報処理システム５０が各拠点の通信端末３０に配信することができる。
【0045】
通信端末３０Ｂは、ユーザｂが存在する拠点Ｂに配置されており、通信端末３０Ｃは、ユーザｃが存在する拠点Ｃに配置されている。拠点Ｂ，Ｃに複数の通信端末３０Ｂ，３０Ｃが配置されてもよい。なお、通信端末３０Ｂ、通信端末３０Ｃは、ユーザｂ、ユーザｃがそれぞれ持ち歩くことができてもよい。
【0046】
なお、拠点Ａ～Ｃの通信端末３０Ａ～３０Ｃは撮像部としての一例のカメラ８、９を内蔵していたり外付けしたりすることが可能であり、通信端末３０Ａ～３０Ｃは、自端末のカメラ８、９等によって自拠点が撮像された画像を他拠点に配信することができる。また、拠点Ａ～Ｃには任意のデバイスが配置されてよい。
【0047】
図２に示す各端末及び装置（通信端末３０及び撮像装置）、並びにユーザの配置は一例であり、他の例であってもよい。また、通信端末３０は、ＰＣに限られず、例えば、タブレット端末、スマートフォン、ＰＤＡ、ウェアラブル端末（スマートグラス、ＶＲゴーグルを含む）、ＰＪ（Projector：プロジェクタ）、電子黒板（相互通信が可能な電子式の黒板機能を有する白板）又は自律走行ロボット等であってもよい。通信端末３０は、Ｗｅｂブラウザ又は画像配信サービスに専用のアプリケーションが動作するコンピュータであればよい。
【0048】
さらに、撮像装置１０がディスプレイを有する場合、他の拠点から配信された画像を表示する構成であってもよい。
【0049】
情報処理システム５０は、一台以上の情報処理装置を有している。情報処理システム５０は、各拠点間の撮像装置１０、通信端末３０の通信を管理及び制御したり、送受信される広視野画像を管理したりする。情報処理システム５０は、広視野画像の配信を行う画像配信サービスを提供するために必要な機能を利用できるプラットフォームを提供する。このプラットフォームを、画像配信サービスを提供したい個人又は企業等のサービス提供者が、契約により利用できるようにしてもよい。以下、画像配信サービスを受けるテナントと区別するため、契約したプラットフォームを利用して画像配信サービスをユーザに提供するサービス提供者をプラットフォーム契約者という。
【0050】
このため、プラットフォームとして情報処理システム５０がＡＰＩ（Application Programming Interface）を公開し、プラットフォーム契約者がこのＡＰＩを使用して様々な画像配信サービスを提供できるようにしてもよい。プラットフォーム契約者は、主に通信端末３０が表示する画面、ＡＰＩの呼出しなどを行うアプリケーション等のソフトウェアを開発すればよく、画像配信等のＡＰＩによって提供される機能を一から開発する必要がない。
【0051】
情報処理システム５０は、単一のコンピュータによって構築されてもよいし、各部（機能又は手段）を分割して任意に割り当てられた複数のコンピュータによって構築されてもよい。また、情報処理システム５０の機能の全て又は一部は、クラウド環境に存在するサーバコンピュータであってもよいし、オンプレミス環境に存在するサーバコンピュータであってもよい。
【0052】
ストレージ９０は、広視野画像等のデータを記憶させる記憶装置である。ストレージ９０は、情報処理システム５０と別体となった外部ストレージ（クラウド上に配置されたストレージでもよいしオンプレミスに配置されたストレージでもよい）でもよいし、情報処理システム５０に含まれるストレージでもよい。
【0053】
＜ハードウエア構成＞
続いて、図３、図４を用いて、本実施形態に係る画像通信システムが有する各装置又は端末のハードウエア構成を説明する。なお、図３、図４に示されているハードウエア構成は、必要に応じて構成要素が追加又は削除されてもよい。
続いて、図３、図４を用いて、本実施形態に係る画像通信システムが有する各装置又は端末のハードウエア構成を説明する。なお、図３、図４に示されているハードウエア構成は、必要に応じて構成要素が追加又は削除されてもよい。
【0054】
＜＜撮像装置のハードウエア構成＞＞
まず、図３を用いて、撮像装置１０のハードウエア構成を説明する。図３は、撮像装置１０のハードウエア構成の一例を示す図である。以下では、撮像装置１０は、二つの撮像素子を使用した全天球（全方位）撮像装置とするが、撮像素子は一つであっても、二つ以上あってもよい。また、必ずしも全方位撮像専用の装置である必要はなく、通常のデジタルカメラ又はスマートフォン等に後付けの全方位撮像ユニットを取り付けることで、実質的に撮像装置１０と同じ機能を有するようにしてもよい。
まず、図３を用いて、撮像装置１０のハードウエア構成を説明する。図３は、撮像装置１０のハードウエア構成の一例を示す図である。以下では、撮像装置１０は、二つの撮像素子を使用した全天球（全方位）撮像装置とするが、撮像素子は一つであっても、二つ以上あってもよい。また、必ずしも全方位撮像専用の装置である必要はなく、通常のデジタルカメラ又はスマートフォン等に後付けの全方位撮像ユニットを取り付けることで、実質的に撮像装置１０と同じ機能を有するようにしてもよい。
【0055】
図３に示されているように、撮像装置１０は、撮像ユニット１０１、画像処理ユニット１０４、撮像制御ユニット１０５、マイク１０８、音処理ユニット１０９、ＣＰＵ(Central Processing Unit)１１１、ＲＯＭ(Read Only Memory)１１２、ＳＲＡＭ(Static Random Access Memory)１１３、ＤＲＡＭ(Dynamic Random Access Memory)１１４、操作部１１５、入出力Ｉ／Ｆ１１６、近距離通信回路１１７、近距離通信回路１１７のアンテナ１１７ａ、電子コンパス１１８、ジャイロセンサ１１９，加速度センサ１２０、及びネットワークＩ／Ｆ１２１によって構成されている。
【0056】
このうち、撮像ユニット１０１は、各々半球画像を結像するための１８０°以上の画角を有する広角レンズ（いわゆる魚眼レンズ）１０２ａ,１０２ｂ（以下区別する必要のないときは、レンズ１０２と称する。）、及び各レンズに対応させて設けられている二つの撮像素子１０３ａ,１０３ｂを備えている。撮像素子１０３ａ,１０３ｂは、レンズ１０２ａ,１０２ｂによる光学像を電気信号の画像データに変換して出力するＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサ又はＣＣＤ(Charge Coupled Device)センサ等の画像センサ、この画像センサの水平若しくは垂直同期信号又は画素クロック等を生成するタイミング生成回路、及びこの撮像素子の動作に必要な種々のコマンドもしくはパラメータ等が設定されるレジスタ群等を有している。なお、撮像ユニット１０１が広角レンズを２つ備える構成はあくまで一例であって、１つだけ備えていてもよいし、３つ以上備えていてもよい。
【0057】
撮像ユニット１０１の撮像素子１０３ａ,１０３ｂは、各々、画像処理ユニット１０４とパラレルＩ／Ｆバスを介して接続している。一方、撮像ユニット１０１の撮像素子１０３ａ,１０３ｂは、それぞれ撮像制御ユニット１０５とシリアルＩ／Ｆバス（Ｉ２Ｃバス等）を介して接続している。画像処理ユニット１０４、撮像制御ユニット１０５及び音処理ユニット１０９は、バス１１０を介してＣＰＵ１１１と接続している。さらに、バス１１０には、ＲＯＭ１１２、ＳＲＡＭ１１３、ＤＲＡＭ１１４、操作部１１５、入出力Ｉ／Ｆ１１６、近距離通信回路１１７、電子コンパス１１８、ジャイロセンサ１１９、加速度センサ１２０及びネットワークＩ／Ｆ１２１等も接続される。
【0058】
画像処理ユニット１０４は、撮像素子１０３ａ,１０３ｂから出力される画像データをパラレルＩ／Ｆバスを通して取り込み、それぞれの画像データに対して所定の処理を施した後、これらの画像データを合成処理して、後述する正距円筒射影画像（広視野画像の一例）のデータを作成する。
【0059】
撮像制御ユニット１０５は、一般に撮像制御ユニット１０５をマスタデバイス、撮像素子１０３ａ,１０３ｂをスレーブデバイスとして、Ｉ２Ｃバスを利用して、撮像素子１０３ａ,１０３ｂのレジスタ群にコマンド等を設定する。必要なコマンド等は、ＣＰＵ１１１から受け取る。また、撮像制御ユニット１０５は、同じくＩ２Ｃバスを利用して、撮像素子１０３ａ,１０３ｂのレジスタ群のステータスデータ等を取り込み、ＣＰＵ１１１に送る。
【0060】
また、撮像制御ユニット１０５は、操作部１１５のシャッターボタンが押下されたタイミングで、撮像素子１０３ａ,１０３ｂに画像データの出力を指示する。撮像装置１０によっては、ディスプレイ（例えば、近距離通信回路１１７を用いて撮像装置１０と近距離通信を行うスマートフォン等の外部端末のディスプレイ）によるプレビュー表示機能、又は動画表示に対応する機能を持つ場合もある。この場合は、撮像素子１０３ａ,１０３ｂからの画像データの出力は、所定のフレームレート（フレーム／分）によって連続して行われる。
【0061】
また、撮像制御ユニット１０５は、後述するように、ＣＰＵ１１１と協働して撮像素子１０３ａ,１０３ｂの画像データの出力タイミングの同期をとる同期制御手段としても機能する。なお、本実施形態では、撮像装置１０には表示部（ディスプレイ）が設けられていないが、表示部を設けてもよい。マイク１０８は、音を音（信号）データに変換する。音処理ユニット１０９は、マイク１０８から出力される音データをＩ／Ｆバスを通して取り込み、音データに対して所定の処理を施す。
【0062】
ＣＰＵ１１１は、撮像装置１０の全体の動作を制御すると共に必要な処理を実行する。ＲＯＭ１１２は、ＣＰＵ１１１のための種々のプログラムを記憶している。ＳＲＡＭ１１３及びＤＲＡＭ１１４はワークメモリであり、ＣＰＵ１１１で実行するプログラム及び処理途中のデータ等を記憶する。特にＤＲＡＭ１１４は、画像処理ユニット１０４での処理途中の画像データ、又は処理済みの正距円筒射影画像のデータを記憶する。
【0063】
操作部１１５は、シャッターボタン等の種々の操作ボタン、電源スイッチ、及び表示と操作の機能を兼ねたタッチパネル等の総称である。ユーザは、操作部１１５を操作することで、種々の撮像モード又は撮像条件等を入力する。
【0064】
入出力Ｉ／Ｆ１１６は、ＳＤカード等の外付けのメディア又はパーソナルコンピュータ等とのインターフェース回路（ＵＳＢＩ／Ｆ等）の総称である。入出力Ｉ／Ｆ１１６は、無線、有線を問わない。ＤＲＡＭ１１４に記憶された正距円筒射影画像のデータは、入出力Ｉ／Ｆ１１６を介して外付けのメディアに記録されたり、必要に応じて入出力Ｉ／Ｆ１１６を介して外部端末（装置）に送信されたりする。
【0065】
近距離通信回路１１７は、撮像装置１０に設けられたアンテナ１１７ａを介して、ＮＦＣ(Near Field Communication)、Ｂｌｕｅｔｏｏｔｈ（登録商標）又はＷｉ－Ｆｉ等の近距離無線通信技術によって、外部端末（装置）と通信を行う。近距離通信回路１１７は、正距円筒射影画像のデータを、外部端末（装置）に送信することができる。
【0066】
電子コンパス１１８は、地球の磁気から撮像装置１０の方位を算出し、方位情報を出力する。この方位情報は、Ｅｘｉｆに沿った関連情報（メタデータ）の一例であり、撮像画像の画像補正等の画像処理に利用される。なお、関連情報は、画像の撮像日時及び画像データのデータ容量の各データも含む。
【0067】
ジャイロセンサ１１９は、撮像装置１０の移動に伴う角度の変化（Ｒｏｌｌ角、Ｐｉｔｃｈ角、Ｙａｗ角）を検出するセンサである。角度の変化はＥｘｉｆに沿った関連情報（メタデータ）の一例であり、撮像画像の画像補正等の画像処理に利用される。
【0068】
加速度センサ１２０は、三軸方向の加速度を検出するセンサである。撮像装置１０は、加速度センサ１２０が検出した加速度に基づいて、自装置（撮像装置１０）の姿勢（重力方向に対する角度）を算出する。撮像装置１０は、加速度センサ１２０を設けることによって、画像補正の精度が向上する。
【0069】
ネットワークＩ／Ｆ１２１は、ルーター等を介して、インターネット等の通信ネットワークＮを利用したデータ通信を行うためのインターフェースである。また、撮像装置１０のハードウエア構成はここに示すものに限られず、撮像装置１０の機能的構成を実現できるものであればよい。また、上記ハードウエア構成の少なくとも一部は通信ネットワークＮ上に存在していてもよい。
【0070】
＜＜通信端末のハードウエア構成＞＞
図４は、通信端末３０及び情報処理システム５０のハードウエア構成の一例を示す図である。まず、通信端末３０について説明する。通信端末３０のハードウエア構成は、３００番台の符号で示されている。通信端末３０は、コンピュータによって構築されており、図４に示されているように、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、ＨＤＤ(Hard Disk)３０４、ＨＤＤコントローラ３０５、ディスプレイ３０６、外部機器接続Ｉ／Ｆ３０８、ネットワークＩ／Ｆ３０９、バスライン３１０、キーボード３１１、ポインティングデバイス３１２、ＤＶＤ－ＲＷ(Digital Versatile Disk Rewritable)ドライブ３１４、メディアＩ／Ｆ３１６、音入出力Ｉ／Ｆ３１７、マイク３１８、スピーカ３１９、近距離通信回路３２０及びカメラ３２１を備えている。
図４は、通信端末３０及び情報処理システム５０のハードウエア構成の一例を示す図である。まず、通信端末３０について説明する。通信端末３０のハードウエア構成は、３００番台の符号で示されている。通信端末３０は、コンピュータによって構築されており、図４に示されているように、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、ＨＤＤ(Hard Disk)３０４、ＨＤＤコントローラ３０５、ディスプレイ３０６、外部機器接続Ｉ／Ｆ３０８、ネットワークＩ／Ｆ３０９、バスライン３１０、キーボード３１１、ポインティングデバイス３１２、ＤＶＤ－ＲＷ(Digital Versatile Disk Rewritable)ドライブ３１４、メディアＩ／Ｆ３１６、音入出力Ｉ／Ｆ３１７、マイク３１８、スピーカ３１９、近距離通信回路３２０及びカメラ３２１を備えている。
【0071】
これらのうち、ＣＰＵ３０１は、通信端末３０全体の動作を制御する。ＲＯＭ３０２は、ＩＰＬ等のＣＰＵ３０１の駆動に用いられるプログラムを記憶する。ＲＡＭ３０３は、ＣＰＵ３０１のワークエリアとして使用される。ＨＤＤ３０４は、プログラム及びデータ等の各種データを記憶する。ＨＤＤコントローラ３０５は、ＣＰＵ３０１の制御にしたがってＨＤＤ３０４に対する各種データの読み出し又は書き込みを制御する。
【0072】
ディスプレイ３０６は、カーソル、メニュー、ウィンドウ、文字、又は画像等の各種情報を表示する。ディスプレイ３０６は、入力手段を備えたタッチパネルディスプレイであってもよい。なお、ディスプレイ３０６は、表示部の一例である。表示部には、通信端末３０に設けられたディスプレイだけなく、通信端末３０の外付けのディスプレイ、通信端末３０の外付けの他の通信端末のディスプレイ、又はプロジェクタで映し出されるスクリーン（プロジェクションマッピングの被表示対象も含む）が含まれる。
【0073】
外部機器接続Ｉ／Ｆ３０８は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢメモリ又はプリンタ等である。ネットワークＩ／Ｆ３０９は、通信ネットワークＮを利用してデータ通信をするためのインターフェースである。バスライン３１０は、図４に示されているＣＰＵ３０１等の各構成要素を電気的に接続するためのアドレスバス又はデータバス等である。なお、ＨＤＤ３０４及びＨＤＤコントローラ３０５は、それぞれプログラム又はデータ等を記憶するストレージの一例であって、それぞれＳＳＤ（Solid State Drive）又はＳＳＤコントローラであってもよい。
【0074】
また、キーボード３１１は、文字、数値、各種指示等の入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス３１２は、各種指示の選択もしくは実行、処理対象の選択、又はカーソルの移動等を行う入力手段の一種である。なお、入力手段は、キーボード３１１及びポインティングデバイス３１２のみならず、タッチパネル又は音声入力装置等であってもよい。ＤＶＤ－ＲＷドライブ３１４は、着脱可能な記録媒体の一例としてのＤＶＤ－ＲＷ３１３に対する各種データの読み出し又は書き込みを制御する。なお、ＤＶＤ－ＲＷ３１３は、ＤＶＤ－Ｒ又はＢｌｕ-ｒａｙ（登録商標） Ｄｉｓｃ（ブルーレイディスク）等であってもよい。メディアＩ／Ｆ３１６は、フラッシュメモリ等の記録メディア３１５に対するデータの読み出し又は書き込み（記憶）を制御する。マイク３１８は、音声を入力する内蔵型の集音手段の一種である。音入出力Ｉ／Ｆ３１７は、ＣＰＵ３０１の制御にしたがってマイク３１８及びスピーカ３１９との間で音信号の入出力を処理する回路である。近距離通信回路３２０は、ＮＦＣ、Ｂｌｕｅｔｏｏｔｈ（登録商標）又はＷｉ－Ｆｉ等の近距離無線通信技術によって、外部端末（装置）と通信を行うための通信回路である。カメラ３２１は、被写体を撮像して画像データを得る内蔵型の撮像手段の一種である。なお、マイク３１８、スピーカ３１９及びカメラ３２１は、通信端末３０の内蔵型ではなく、外付けの装置であってもよい。
【0075】
また、通信端末３０のハードウエア構成はここに示すものに限られず、通信端末３０の機能的構成を実現できるものであればよい。また、上記ハードウエア構成の少なくとも一部はネットワークＮ上に存在していてもよい。
【0076】
＜＜情報処理システムのハードウエア構成＞＞
図４に示すように、情報処理システム５０の各ハードウエア構成は、括弧内の５００番台の符号で示されている。情報処理システム５０は、コンピュータによって構築されており、図４に示されているように、通信端末３０と同様の構成を備えているため、各ハードウエア構成の説明を省略する。
図４に示すように、情報処理システム５０の各ハードウエア構成は、括弧内の５００番台の符号で示されている。情報処理システム５０は、コンピュータによって構築されており、図４に示されているように、通信端末３０と同様の構成を備えているため、各ハードウエア構成の説明を省略する。
【0077】
また、情報処理システム５０のハードウエア構成はここに示すものに限られず、情報処理システム５０の機能的構成を実現できるものであればよい。また、上記ハードウエア構成の少なくとも一部はネットワーク上に存在していてもよい。
【0078】
なお、上記各プログラムは、インストール可能な形式又は実行可能な形式のファイルで、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。記録媒体の例として、ＣＤ－Ｒ(Compact Disc Recordable)、ＤＶＤ(Digital Versatile Disk)、Ｂｌｕ-ｒａｙ Ｄｉｓｃ（登録商標）、ＳＤカード、ＵＳＢメモリ等が挙げられる。また、記録媒体は、プログラム製品(Program Product)として、国内又は国外へ提供されることができる。例えば、通信端末３０は、本発明に係るプログラムが実行されることで本発明に係る画像表示方法を実現する。
【0079】
【0080】
まず、図５を用いて、撮像装置１０の外観を説明する。撮像装置１０は、全天球（３６０°）画像の元になる撮像画像を得るためのデジタルカメラである。図５（ａ）は撮像装置の左側面図であり、図５（ｂ）は撮像装置の正面図であり、図５（ｃ）は撮像装置の平面図である。この外観図は撮像装置１０のあくまで一例であって、他の外観であってもよい。
【0081】
図５（ａ）に示されているように、撮像装置１０は、人間が片手で持つことができる大きさであるが、この形状はあくまで一例であって、他の形状であってもよい。また、図５（ａ），図５（ｂ），図５（ｃ）に示されているように、撮像装置１０の上部には、正面側（前側）に撮像素子１０３ａ及び背面側（後側）に撮像素子１０３ｂが設けられている。これら撮像素子（画像センサ）１０３ａ,１０３ｂは、半球画像（画角１８０°以上）の撮像が可能な光学部材（例えば、後述するレンズ１０２ａ,１０２ｂ）と併せて用いられる。また、図５（ｂ）に示されているように、撮像装置１０の正面側とは反対側の面には、シャッターボタン等の操作部１１５が設けられている。なお、上記したように撮像素子は１つだけであってもよいし、３つ以上備えていてもよい。
【0082】
次に、図６を用いて、撮像装置１０の使用状況を説明する。図６は、撮像装置の使用イメージ図である。撮像装置１０は、図６に示されているように、例えば、撮像装置１０の周りの被写体を撮像するために用いられる。この場合、図５に示されている撮像素子１０３ａ及び撮像素子１０３ｂによって、それぞれ撮像装置１０の周りの被写体が撮像されることで、二つの半球画像を得ることができる。
【0083】
次に、図７及び図８を用いて、撮像装置１０が撮像して得た画像から全天球画像が作成されるまでの処理の概略を説明する。図７（ａ）は撮像装置が撮像して得た半球画像（前側）、図７（ｂ）は撮像装置が撮像して得た半球画像（後側）、図７（ｃ）は正距円筒図法により表された画像（以下、「正距円筒射影画像」という）を示した図である。図８（ａ）は正距円筒射影画像で球を被う状態を示した概念図、図８（ｂ）は全天球画像を示した図である。なお、「正距円筒射影画像」は、上述の広視野画像の一例としてエクイレクタングラー（equirectangular）形式の全天球画像である。
【0084】
図７（ａ）に示されているように、撮像素子１０３ａによって得られた画像は、後述のレンズ１０２ａによって湾曲した半球画像（前側）となる。また、図７（ｂ）に示されているように、撮像素子１０３ｂによって得られた画像は、後述のレンズ１０２ｂによって湾曲した半球画像（後側）となる。そして、撮像装置１０は、半球画像（前側）と１８０度反転された半球画像（後側）とを合成して、図７（ｃ）に示されているような正距円筒射影画像ＥＣが作成する。
【0085】
そして、撮像装置１０は、OpenGL ES（Open Graphics Library for Embedded Systems）等のソフトウェアを利用することで、図８（ａ）に示されているように、球面を覆うように正距円筒射影画像ＥＣを貼り付け、図８（ｂ）に示されているような全天球画像（全天球パノラマ画像）ＣＥを作成する。このように、全天球画像ＣＥは、正距円筒射影画像ＥＣが球の中心を向いた画像として表される。なお、OpenGL ESは、２Ｄ(2－Dimensions)及び３Ｄ(3－Dimensions)のデータを視覚化するために使用するグラフィックスライブラリである。OpenGL ESはあくまで画像処理を実行するソフトウェアの一例であって、他のソフトウェアによって全天球画像ＣＥを作成してもよい。また、全天球画像ＣＥは、静止画であっても動画であってもよい。なお、ここでは撮像装置１０が全天球画像を生成する例として説明したが、同様の画像処理又は一部の画像処理の工程を情報処理システム５０又は通信端末３０が実行してもよい。
【0086】
以上のように、全天球画像ＣＥは、球面を覆うように貼り付けられた画像であるため、人間が見ると違和感を持ってしまう。そこで、撮像装置１０又は通信端末３０において、全天球画像ＣＥの一部の所定領域Ｔ（以下、「所定領域画像」という）を湾曲の少ない画像として表示することで、人間に違和感を与えない表示をすることができる。これに関して、図９乃至図１０を用いて説明する。
【0087】
図９は、全天球画像を三次元の立体球とした場合の仮想カメラ及び所定領域の位置を示した図である。仮想カメラＩＣは、三次元の立体球として表示されている全天球画像ＣＥに対して、その画像を見るユーザの仮想的な視点の位置に相当するものである。図１０において、（ａ）は図９の立体斜視図、（ｂ）は（ａ）の状態の所定領域画像がディスプレイに表示されている図、（ｃ）は（ａ）における仮想カメラＩＣの視点を変更後の所定領域を示した図、（ｄ）は（ｃ）の状態の所定領域画像がディスプレイに表示されている図である。
【0088】
このように生成された全天球画像ＣＥが、立体球ＣＳであるとした場合、図９に示されているように、仮想カメラＩＣは、全天球画像ＣＥの内部に位置している。全天球画像ＣＥにおける所定領域Ｔは、仮想カメラＩＣの撮像領域であり、全天球画像ＣＥを含む三次元の仮想空間における仮想カメラＩＣの撮像方向と画角を示す所定領域情報によって特定される。また、所定領域Ｔのズームは、仮想カメラＩＣを全天球画像ＣＥに近づいたり、遠ざけたりすることで表現することもできる。所定領域画像Ｑは、全天球画像ＣＥにおける所定領域Ｔの画像である。したがって、所定領域Ｔは、画角αと、仮想カメラＩＣから全天球画像ＣＥまでの距離ｆにより特定できる（図１１参照）。
【0089】
そして、図１０（ａ）に示されている所定領域画像Ｑは、図１０（ｂ）に示されているように、所定のディスプレイに、仮想カメラＩＣの撮像領域の画像として表示される。図１０（ｂ）に示されている画像は、初期設定（デフォルト）された所定領域情報によって表された所定領域画像である。以下、仮想カメラＩＣの撮像方向（ｅａ，ａａ）と画角（α）を用いて説明する。なお、所定領域Ｔは、画角αと距離ｆではなく、所定領域Ｔである仮想カメラＩＣの撮像領域を位置座標（Ｘ，Ｙ，Ｚ）によって示してもよい。
【0090】
また、図１０（ａ）の状態から、図１０（ｃ）に示されているように、仮想カメラＩＣの仮想的な視点が右側（図面に向かって左側）に移動（「変更」ともいう）されると、これに応じて全天球画像ＣＥにおける所定領域Ｔが所定領域Ｔ'に移動されるため、所定のディスプレイに表示される所定領域画像Ｑが所定領域画像Ｑ'に変更される。これにより、ディスプレイには、図１０（ｂ）に示されている画像が、図１０（ｄ）に示されている画像に変更表示される。
【0091】
次に、図１１を用いて、所定領域情報と所定領域Ｔの画像の関係について説明する。図１１は、所定領域情報と所定領域Ｔの画像との関係を示した図である。図１１に示されているように、「ea」はelevation angle（仰角）、「aa」はazimuth angle（方位角）、「α」は画角(Angle)を示す。すなわち、仮想カメラＩＣの姿勢は、撮像方向(ea,aa)で示される仮想カメラＩＣの注視点が、仮想カメラＩＣの撮像領域である所定領域Ｔの中心点ＣＰ（x,ｙ）となるように変更される。図１１に示されているように、仮想カメラＩＣの画角αによって表される所定領域Ｔの対角画角をαとした場合の中心点ＣＰ（x,ｙ）が、所定領域情報のパラメータ(（x,ｙ）)となる。所定領域画像Ｑは、全天球画像ＣＥにおける所定領域Ｔの画像である。ｆは、仮想カメラＩＣから中心点ＣＰ（x,ｙ）までの距離である。Ｌは、所定領域Ｔの任意の頂点と中心点ＣＰ（x,ｙ）との距離である（２Ｌは対角線）。そして、図１１では、一般的に以下の（式１）で示される三角関数が成り立つ。
【0092】
（Ｌ／ｆ）＝tan(α／２)・・・（式１）
【0093】
なお、上記で説明した撮像装置１０は、広視野画像を取得可能な撮像装置の一例であり、全天球画像は、広視野画像の一例である。ここで、広視野画像は、一般には広角レンズを用いて撮像された画像であり、人間の目で感じるよりも広い範囲を撮像することができるレンズで撮像されたものである。
【0094】
図１２は、図１１で説明した関係を球座標による三次元ユークリッド空間内の点で示した図である。ここで、図１１で示した中心点ＣＰを球面極座標系で表現したときの位置座標を(r,θ,φ)とする。(r,θ,φ)は、それぞれ動径、極角、方位角である。動径ｒは、全天球画像を含む三次元の仮想空間の原点から中心点ＣＰまでの距離であるため、図１１で示した距離ｆに等しい。図１２は、これらの関係を表した図である。以降、仮想カメラＩＣの位置座標(r,θ,φ)を視点情報の一例として用いて説明する。なお、視点情報は、上記したように図１０で示した所定のディスプレイに、仮想カメラＩＣの撮像領域の画像として表示される所定領域Ｔ（所定領域画像Ｑ）が特定できるパラメータ情報であればよく、所定領域Ｔの対角頂点の座標も含む。また、図１１で説明した仮想カメラＩＣの画角αを示す情報及び中心点ＣＰ（x,ｙ）を示す情報が視点情報であってもよい。また、図１１で説明した仮想カメラＩＣの画角αを示す情報及び方位角aaを示す情報が視点情報であってもよい。また、視点情報は球座標による位置座標情報だけでなく、直交座標による位置座標情報及び初期設定（デフォルト）された所定領域情報から座標の差分値等も含む。また、視点情報は図１１で示したように角度及び距離といった座標情報以外の情報であってもよい。また、図１１及び図１２では所定領域Ｔの中心点を基準にしているが、所定領域Ｔの頂点のいずれかを基準としたパラメータ情報により所定領域Ｔを特定してもよい。なお、上記では広視野画像が全天球画像である場合を例として視点情報を説明したが、他の広視野画像の場合には、その広視野画像における所定領域Ｔを特定する情報が視点情報となる。また、視点情報には所定領域Ｔの高さ及び幅といったパラメータ情報、又は仮想カメラＩＣのズーム等による拡大率といったパラメータ情報が含まれていてもよい。また、図７（ｃ）に示されているような正距円筒射影画像ＥＣの各画素の位置を球体の表面の座標（例えば緯度、経度の２軸とした座標）と対応付けた場合に、仮想カメラＩＣの方向と画角といったパラメータ情報を視点情報としてもよいし、緯度及び経度といった情報を視点情報に含めてもよい。このように、視点情報とは、必ずしも点を示す情報に限られない。
【0095】
＜機能について＞
続いて、図１３を用いて、本実施形態に係る通信システム１ａの機能構成について説明する。図１３は、本実施形態に係る通信システム１ａの機能構成の一例を示す図である。なお、図１３では、図１に示されている各端末、装置及びサーバのうち、後述の処理又は動作に関連しているものが示されている。
続いて、図１３を用いて、本実施形態に係る通信システム１ａの機能構成について説明する。図１３は、本実施形態に係る通信システム１ａの機能構成の一例を示す図である。なお、図１３では、図１に示されている各端末、装置及びサーバのうち、後述の処理又は動作に関連しているものが示されている。
【0096】
＜＜撮像装置の機能構成＞＞
まず、図１３を参照して、撮像装置１０の機能構成について説明する。撮像装置１０は、通信部１１、受付部１２、撮像処理部１３、解析部１４、登録要求部１５、接続部１６、保存処理部１７、画像送信制御部１８、及び、記憶・読出部１９を有している。これら各部は、図３に示されている各構成要素のいずれかが、ＳＲＡＭ１１３又はＤＲＡＭ１１４上に展開されたプログラムに従ったＣＰＵ１１１からの命令によって動作することで実現される機能、又は機能する手段である。また、撮像装置１０は、図３に示されているＲＯＭ１１２等によって構築される記憶部１０００を有している。
まず、図１３を参照して、撮像装置１０の機能構成について説明する。撮像装置１０は、通信部１１、受付部１２、撮像処理部１３、解析部１４、登録要求部１５、接続部１６、保存処理部１７、画像送信制御部１８、及び、記憶・読出部１９を有している。これら各部は、図３に示されている各構成要素のいずれかが、ＳＲＡＭ１１３又はＤＲＡＭ１１４上に展開されたプログラムに従ったＣＰＵ１１１からの命令によって動作することで実現される機能、又は機能する手段である。また、撮像装置１０は、図３に示されているＲＯＭ１１２等によって構築される記憶部１０００を有している。
【0097】
通信部１１は、主に、近距離通信回路１１７に対するＣＰＵ１０１の処理によって実現され、Ｗｉ－Ｆｉなどの無線通信手段を利用して、通信ネットワークＮに接続して、他の装置との間で各種データ又は情報の送受信を行う機能である。本実施形態では、主に、接続部１６により、撮像処理部１３によって取得された広視野画像を情報処理システム５０に送信する形態を説明するが、通信部１１が広視野画像を情報処理システム５０に送信することも可能である。
【0098】
受付部１２は、主に、操作部１１５に対するＣＰＵ１０１の処理によって実現され、撮像装置１０に対するユーザからの操作入力を受け付ける機能である。受付部１２は、電源のオン、オフ、シャッターボタンのオン、オフ（広視野画像の送信開始又は送信停止）、タッチパネル又はボタン等に対するユーザの操作入力等を受け付ける。
【0099】
撮像処理部１３は、主に、画像処理ユニット１０４に対するＣＰＵ１０１の処理によって実現され、被写体又は風景画像等を撮像し、撮像画像を取得（生成）する。撮像処理部１３によって取得される撮像画像は、動画であっても静止画であってもよく（両方でもよく）、画像と共に音声を含んでもよい。また、撮像処理部１３は、例えば、通信端末３０のディスプレイ３０６に表示された二次元コード（図２４参照）を撮像する。また、撮像処理部１３が撮像画像に対して図７及び図８で説明した画像処理を実行することによって広視野画像を生成してもよい。
【0100】
解析部１４は、主に、ＣＰＵ１０１の処理によって実現され、撮像処理部１３によって撮像されて取得された二次元コードを解析して二次元コードに含まれる情報（撮像装置をテナントに登録するためのＵＲＬ、一時的なＩＤとパスワード）を抽出する。
【0101】
登録要求部１５は、主に、ＣＰＵ１０１の処理によって実現され、解析部１４によって読み取られた二次元コードに含まれる情報を用いて、情報処理システム５０のテナントに撮像装置１０を登録する要求を、通信部１１を介して情報処理システム５０に送信する。
【0102】
接続部１６は、主に、入出力Ｉ／Ｆ１１６に対するＣＰＵ１０１の処理によって実現され、通信端末３０Ａから電源供給を受けると共に、データ通信を行う機能である。
【0103】
保存処理部１７は、主に、ＣＰＵ１０１の処理によって実現され、任意の拠点からの撮像要求に応じて撮像された広視野画像を、情報処理システム５０から通知されたＵＲＬ（例えばストレージ９０等）に保存する処理を行う。
【0104】
画像送信制御部１８は、主に、ＣＰＵ１０１の処理によって実現され、情報処理システム５０に対する広視野画像の送信を制御する機能である。画像送信制御部１８は、例えば、撮像処理部１３によって取得された撮像画像を、静止画であれば定期的又はユーザ操作に応じて、動画であれば所定のＦＰＳ（Flame Per Second）で情報処理システム５０に対して送信する。画像送信制御部１８は通信部１１と接続部１６の切り替えも行う。
【0105】
記憶・読出部１９は、主に、ＣＰＵ１０１の処理によって実現され、記憶部１０００に各種データを記憶させ、又は記憶部１０００から各種データを読み出す機能である。また、記憶部１０００は、撮像処理部１３によって取得された撮像画像データ、撮像装置ＩＤ等を記憶している。なお、記憶部１０００に記憶されている撮像画像データは、撮像処理部１３によって取得されてから所定の時間経過した場合に削除される構成であってもよいし、情報処理システム５０へ送信されたデータが削除される構成であってもよい。
【0106】
なお、撮像装置１０では、通信システム１ａに対応するためのアプリケーション（プラグインともいう）がインストールされている。このアプリケーションは、撮像装置１０を仮想ルームに対応付ける際、又は外部からの制御を受け付けたりするために使用される。図１３に示した機能の一部（例えば登録要求部１５）はこのアプリケーションによるものが含まれる。なお、通信システム１ａに対応するためのアプリケーションを通信ネットワークＮ上に配置し、撮像装置１０が有するＷｅｂブラウザ等によってアプリケーションにアクセスすることで同様の機能を実現させてもよい。
【0107】
＜＜通信端末の機能構成＞＞
続いて、図１３を用いて、通信端末３０の機能構成について説明する。通信端末３０は、通信部３１、受付部３２、表示制御部３３、撮像部３４、録画部３５、記憶・読出部３９、接続部３６、及び画面生成部３７を有している。これら各部は、図４に示されている各構成要素のいずれかが、ＲＡＭ３０３上に展開されたプログラム（Ｗｅｂブラウザでも専用のアプリケーションでもよい）に従ったＣＰＵ３０１からの命令によって動作することで実現される機能、又は機能する手段である。また、通信端末３０は、図４に示されているＲＯＭ３０２又は記録メディア３１５によって構築される記憶部３０００を有している。
続いて、図１３を用いて、通信端末３０の機能構成について説明する。通信端末３０は、通信部３１、受付部３２、表示制御部３３、撮像部３４、録画部３５、記憶・読出部３９、接続部３６、及び画面生成部３７を有している。これら各部は、図４に示されている各構成要素のいずれかが、ＲＡＭ３０３上に展開されたプログラム（Ｗｅｂブラウザでも専用のアプリケーションでもよい）に従ったＣＰＵ３０１からの命令によって動作することで実現される機能、又は機能する手段である。また、通信端末３０は、図４に示されているＲＯＭ３０２又は記録メディア３１５によって構築される記憶部３０００を有している。
【0108】
通信部３１は、主に、ネットワークＩ／Ｆ３０９に対するＣＰＵ３０１の処理によって実現され、通信ネットワークＮに接続し、他の装置との間で各種データ又は情報の送受信を行う機能である。
【0109】
受付部３２は、主に、キーボード３１１及びポインティングデバイス３１２に対するＣＰＵ３０１の処理によって実現され、通信端末３０への各種選択又は操作入力を受け付ける機能である。表示制御部３３は、通信端末３０のディスプレイ３０６に広視野画像、通常の画角の画像、及び、各種画面の少なくとも一つの画像を表示させる機能である。なお、通信端末３０はタッチパネル、又はジェスチャ若しくは音声入力のインターフェースを備えていてもよく、このような場合には、タッチ入力、ジェスチャ又は音声入力によって各種選択又は操作入力を受け付けてもよい。
【0110】
表示制御部３３は、主に、ＣＰＵ３０１の処理によって実現され、例えば、情報処理システム５０から送信された二次元コードを、ディスプレイ３０６に表示させる。二次元コードは、例えば、ＱＲコード（登録商標）、ＤａｔａＭａｔｒｉｘ（ＤａｔａＣｏｄｅ）、ＭａｘｉＣｏｄｅ又はＰＤＦ４１７等である。二次元コードは、バーコードでもよい。
【0111】
撮像部３４は、主に、カメラ３２１に対するＣＰＵ３０１の処理によって実現され、被写体及び被写体の周囲を撮像する。
【0112】
録画部３５は、ＣＰＵ３０１の処理によって実現され、情報処理システム５０から配信された動画に係る広視野画像のデータを通信部３１で受信された後に録画することで、記憶・読出部３９を介して記憶部３０００に録画データを保存する。
【0113】
接続部３６は、主に、近距離通信回路３２０に対するＣＰＵ３０１の処理によって実現され、撮像装置１０に電源を供給すると共に、データ通信を行う機能である。
【0114】
画面生成部３７は、閲覧アプリケーション（「閲覧アプリ」）により、主に、ＣＰＵ３０１の処理によって実現され、各視点情報で示された所定領域画像のサムネイルを生成（作成）する。なお、閲覧アプリを必ずしも事前にインストールしている必要はなく、画面生成部３７と同等の機能を通信端末が予め備えていてもよいし、仮想ルームに入室する際に情報処理システム又は他のサーバから画面生成部３７の機能を備える閲覧アプリと同等の機能を有するプログラムを通信端末が受信することによって、通信端末が画面生成部３７の機能を実行してもよい。また、通信端末の閲覧アプリはＷｅｂブラウザによって実現されていてもよい。
【0115】
記憶・読出部３９は、主に、ＣＰＵ３０１の処理によって実行され、記憶部３０００に各種データを記憶させ、又は記憶部３０００から各種データを読み出す機能である。記憶部３０００には、画像管理情報記憶部３００１が形成される。画像管理情報記憶部３００１については情報処理システム５０の説明において説明する。
【0116】
＜＜情報処理システムの機能構成＞＞
次に、情報処理システム５０の機能構成について説明する。情報処理システム５０は、通信部５１、画面生成部５２、関連付け処理部５３、画像配信部５４、認証部５５、通信グループ管理部５６、通信制御部５７、コネクション管理部５８、記憶・読出部５９、ＡＰＩ管理部６０、及び部分動画特定部６１を有している。これら各部は、図４に示されている各構成要素のいずれかが、ＲＡＭ５０３上に展開されたプログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能、又は機能する手段である。また、情報処理システムは、図４に示されているＲＯＭ５０２、ＨＤＤ５０４又は記録メディア５１５によって構築される記憶部５０００を有している。
次に、情報処理システム５０の機能構成について説明する。情報処理システム５０は、通信部５１、画面生成部５２、関連付け処理部５３、画像配信部５４、認証部５５、通信グループ管理部５６、通信制御部５７、コネクション管理部５８、記憶・読出部５９、ＡＰＩ管理部６０、及び部分動画特定部６１を有している。これら各部は、図４に示されている各構成要素のいずれかが、ＲＡＭ５０３上に展開されたプログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能、又は機能する手段である。また、情報処理システムは、図４に示されているＲＯＭ５０２、ＨＤＤ５０４又は記録メディア５１５によって構築される記憶部５０００を有している。
【0117】
通信部５１は、主に、ネットワークＩ／Ｆ５０９に対するＣＰＵ５０１の処理通信ネットワークＮを介して、他の装置との間で各種データ又は情報の送受信を行う機能である。
【0118】
画面生成部５２は、主に、ＣＰＵ５０１の処理によって実現され、通信端末３０が表示する画面情報の生成を行う。通信端末３０がＷｅｂアプリを実行する場合は、画面情報は、ＨＴＭＬ、ＸＭＬ、ＣＳＳ（Cascade Style Sheet）、及びJavaScript（登録商標）等により作成される。通信端末３０がネイティブアプリを実行する場合は、画面情報は通信端末３０が保持しており、表示される情報がＸＭＬ等で送信される。画面生成部５２は画像配信部５４が通信部５１を介して配信する広視野画像等が配置される画面情報を生成する。
【0119】
関連付け処理部５３は、主に、ＣＰＵ５０１の処理によって実現され、広視野画像の視点情報の関連付け及び共有に関する制御を行う。関連付け処理部５３は、通信端末３０から視点情報と撮像要求を受信した場合、撮像装置１０に撮像を要求して取得した広視野画像と視点情報を関連付ける処理を行う。さらに、関連付けた広視野画像と視点情報は、記憶・読出部５９によって画像管理情報記憶部５００１に保存される。また、関連付け処理部５３は、関連付けられた該広視野画像と視点情報が保存される保存場所を示す情報として各保存場所情報（例えばＵＲＬ）を通信端末３０に送信する。なお、情報処理システム５０は、通信端末３０から視点情報と撮像要求を同時に受信する必要はなく、別々に受信した上で関連付ける処理を行ってもよい。また、ＵＲＬは保存場所を示す保存場所情報の一例であって、ＵＲＩ等の他の形式であってもよい。
【0120】
画像配信部５４は、主に、ＣＰＵ５０１の処理によって実現され、仮想ルームに入室中のユーザが操作する通信端末３０に、同じ仮想ルームに対応付けられている撮像装置１０が送信した広視野画像等の画像を、通信部５１を介して配信する。通信端末３０が有するカメラ又は接続されたカメラ８，９が撮像した通常の画角の画像についても同様に配信される。なお、配信される画像は、ストリーミング映像、動画、静止画等を含む。
【0121】
認証部５５は、主に、ＣＰＵ５０１の処理によって実現され、通信部５１によって受信された認証要求に基づいて、要求元の認証を行う機能である。認証部５５は、例えば、通信部５１によって受信された認証要求に含まれている認証情報（ユーザＩＤ及びパスワード）が予め保持する認証情報と一致するか否かにより、ユーザを認証する。なお、認証情報は、ＩＣカードのカード番号、顔、指紋、声紋などの生体認証情報、デバイスＩＤ、パスコード、アクセストークン、セキュリティキー、チケット等でもよい。また、認証部５５は、外部の認証システム又はＯＡｕｔｈなどの認証方法で認証してもよい。また、認証部５５は、ユーザだけでなく撮像装置等のデバイスを認証してもよい。
【0122】
通信グループ管理部５６は、主に、ＣＰＵ５０１の処理によって実現され、仮想ルームへの通信端末３０(又はユーザ)ユーザの入室、デバイスの対応付け等を管理する。通信グループ管理部５６は、認証部５５による認証が成功した場合に、ユーザＩＤ及び通信端末３０のＩＰアドレスを仮想ルーム情報記憶部５００２に登録したり、仮想ルームに撮像装置１０を対応付けたりする。
【0123】
通信制御部５７は、主に、ＣＰＵ５０１の処理によって実現され、各仮想ルームに対応付けられた撮像装置１０との通信の開始、確立、終了を管理する。また、通信制御部５７は、通信端末３０が仮想ルームに入室したり退室したりすることに応じて、広視野画像及び(又は)音声を配信する通信の開始、確立、終了を管理する。
【0124】
コネクション管理部５８は、主に、ＣＰＵ５０１の処理によって実現され、通信端末３０及び撮像装置１０が情報処理システム５０と確立している通信（コネクション）を、仮想ルームに対応付けて管理をする。
【0125】
ＡＰＩ管理部６０は、主に、ＣＰＵ５０１の処理によって実現され、プラットフォーム契約者が広視野画像の画像配信サービスを提供する場合に使用するＡＰＩを管理する。ＡＰＩを利用する場合、プラットフォーム契約者は、別途、ＡＰＩを呼び出すソフトウェアを開発すればよい。開発するソフトウェアはサーバ上で動作してもよいし、通信端末等のクライアント上で動作するものであってもよい。画像配信部５４、関連付け処理部５３、通信制御部５７等のように情報処理システム５０が備える機能であれば、ＡＰＩとして提供可能である。また、後から情報処理システム５０に追加した機能をＡＰＩとして提供することも可能である。ＡＰＩとして提供するか否かはプラットフォーム提供者が操作する通信端末が情報処理システム５０にアクセスし、ＡＰＩの公開設定を受け付けることによって、ＡＰＩ管理部６０が公開設定に基づいたＡＰＩの制御ができる。また、ＡＰＩ管理部６０はＡＰＩの呼び出しを要求する要求元のソフトウェアが正当なプラットフォーム契約者によって開発されたソフトウェアか否かを確認する認証処理を行ってもよい。認証処理は記憶部５０００においてプラットフォーム契約者の情報として予め登録して記憶されている情報と、要求元のソフトウェアから送信された情報を対比させることで確認することができる。
【0126】
認証処理の具体的な処理の一例として、プラットフォーム契約者が開発するソフトウェアに対して、ＡＰＩ管理部６０によって予め発行されたアプリＩＤを要求元のソフトウェアから情報処理システム５０が受信し、ＡＰＩ管理部６０が、アプリＩＤが記憶部５０００に記憶されていると判断できれば正当なソフトウェアとしてＡＰＩを提供することを許可する制御をＡＰＩ管理部６０が行う。一方で、正当なソフトウェアとして判断できなかった場合には、ＡＰＩを提供することを許可しない制御をＡＰＩ管理部６０が行う。
【0127】
なお、アプリＩＤは正当性を判断するための認証情報の一例であって、予め情報処理システムのＡＰＩ管理部６０もしくは外部システムが発行したアクセストークン、チケット、セキュリティキー、パスワード、ＰＩＮコード等の認証情報によってＡＰＩ管理部６０が要求元の正当性を確認してもよい。本実施形態では、ＡＰＩとして情報処理システム５０が備える機能を使用する形態は説明しないが、プラットフォーム契約者の開発したアプリケーション等のソフトウェアがＡＰＩ管理部６０における判断を経由して情報処理システム５０が備える機能を利用する以外の処理の流れは同じでよい。
【0128】
部分動画特定部６１は、主に、ＣＰＵ５０１の処理によって実現され、通信部５１が所定の通信端末３０Ａから、他の各通信端末３０Ｂ，３０Ｃ，３０Ｄにおける動画の各閲覧履歴を記録させる要求を受信した場合には、他の各通信端末３０Ｂ，３０Ｃ，３０Ｄから取得した他の各通信端末３０Ｂ，３０Ｃ，３０Ｄにおける動画の各閲覧履歴に基づいて、他の各通信端末３０Ｂ，３０Ｃ，３０Ｄで所定数よりも多く閲覧された動画における時間的な部分動画を特定する。動画における時間的な部分動画は、この動画における第１の再生経過時間から第２の再生経過時間の部分動画である。なお、第２の再生経過時間は、第１の再生経過時間よりも後の時間である。
【0129】
記憶・読出部５９は、主に、ＣＰＵ５０１の処理によって実現され、記憶部５０００に各種データを記憶させ、又は記憶部５０００から各種データを読み出す機能である。
【0130】
「画像管理情報記憶部５００１」
記憶部５０００には、画像管理情報記憶部５００１が構築されている。図１４（ａ）は、画像管理情報記憶部５００１に記憶される画像管理情報を示す概念図である。画像管理情報記憶部５００１には、図１４に示されているような画像管理情報が記憶されている。画像管理情報は、撮像要求により撮像された広視野画像を管理する情報であり、ユーザが通信端末３０から撮像要求を送信すると、１レコードの画像管理情報が生成される。画像管理情報が有する各項目について説明する。
記憶部５０００には、画像管理情報記憶部５００１が構築されている。図１４（ａ）は、画像管理情報記憶部５００１に記憶される画像管理情報を示す概念図である。画像管理情報記憶部５００１には、図１４に示されているような画像管理情報が記憶されている。画像管理情報は、撮像要求により撮像された広視野画像を管理する情報であり、ユーザが通信端末３０から撮像要求を送信すると、１レコードの画像管理情報が生成される。画像管理情報が有する各項目について説明する。
【0131】
・画像データＩＤは、動画に係る画像のデータを識別するための識別情報である。画像データＩＤは、情報処理システム５０が採番する。ＩＤはIdentificationの略であり識別子又は識別情報という意味である。ＩＤは複数の対象から、ある特定の対象を一意的に区別するために用いられる名称、符号、文字列、数値又はこれらのうち１つ以上の組み合わせをいう。なお、データＩＤは広視野画像だけでなく、仮想ルームに対応付けられた撮像装置１０によって通常の画角で撮像された画像に対しても関連付けてもよい。
【0132】
・データ名称は、通信端末３０のユーザが設定した広視野画像の名称である。データ名称はユーザが設定できるが、自動で設定されてもよい。
【0133】
・撮像開始日時情報は、ユーザが通信端末３０に撮像要求を入力した日時、撮像装置１０が広視野画像等の撮像画像を撮像した日時等、広視野画像等の撮像画像の撮像開始日時を特定するための情報である。撮像開始日時情報は広視野画像等の撮像画像のタイムスタンプ情報で代用してもよい。
【0134】
・撮像者情報は、通信端末３０に撮像要求を入力したユーザの識別情報（ユーザＩＤ、又はユーザ名を含む）である。ユーザは仮想ルームに入室した状態で、通信端末３０に撮像要求を入力するので、撮像者情報に登録されるユーザは情報処理システム５０又は仮想ルームへの認証により特定されている。撮像者情報は、撮像要求と共に情報処理システム５０に送信される。なお、撮像要求と撮像者情報は必ずしも同時に情報処理システム５０に送信される必要はなく、異なるタイミングで情報処理システム５０に送信されてもよい。
【0135】
・撮像装置情報は、広視野画像を撮像した撮像装置１０の識別情報（撮像装置ＩＤ）である。撮像装置ＩＤは、情報処理システム５０が採番して撮像装置１０と共有するが、ＭＡＣアドレス又はシリアル番号など撮像装置１０に固有の情報が使用されてもよい。撮像装置ＩＤは、広視野画像と共に情報処理システム５０に送信される。なお、撮像装置ＩＤと広視野画像は必ずしも同時に情報処理システム５０に送信される必要はなく、異なるタイミングで情報処理システム５０に送信されてもよい。
【0136】
・撮像時の仮想ルームＩＤは、撮像装置１０が対応付けられている仮想ルームの識別情報である。なお、撮影時に録画を行うため、「録画時」と示すこともできる。
【0137】
・画像のデータの保存場所情報（保存場所情報）は、画像が保存されている場所を示す情報であって、ＵＲＬ又はファイルパス等である。また、保存場所情報によって特定される保存場所は所定のフォルダを示す情報であってもよい。フォルダは撮像時の仮想ルームに対応付けられたフォルダであってもよい。また、撮像日時、撮像装置、撮像者、撮像時の仮想ルーム等の分類の１つ又は２つ以上の組み合わせを示す識別情報（名称等の付加情報）に対応付けられたフォルダであってもよい。また、データの保存場所情報とデータＩＤ又はデータ名称等の情報と組み合わせてデータの保存場所を特定してもよい。
【0138】
・参加者ＩＤは、撮影時の仮想ルームＩＤで特定される仮想ルームに参加したユーザを識別するためのユーザ識別情報の一例である。
【0139】
図１４（ｂ）は、図１４（ａ）の変形例として、画像管理情報を示す概念図である。図１４（ｂ）では、撮像時の仮想ルームＩＤが同じ広視野画像が保存されている。このように、画像管理情報は仮想ルーム単位で分類されてよい。
【0140】
「仮想ルーム情報記憶部５００２」
記憶部５０００には、仮想ルーム情報記憶部５００２が構築されている。図１５は、仮想ルーム情報記憶部５００２に記憶される仮想ルーム情報を示す概念図である。仮想ルーム情報記憶部５００２には、図１５に示されているような仮想ルーム情報が記憶されている。仮想ルーム情報は、仮想ルームに関する情報であり、仮想ルームごとに保持される。仮想ルーム情報が有する各項目について説明する。なお、ここでは仮想ルームはテナントに登録されているが、テナントへの登録は必須ではなく、一時的に作成された仮想ルーム又は共有で利用できる仮想ルームの情報も仮想ルーム情報記憶部５００２に記憶される。
記憶部５０００には、仮想ルーム情報記憶部５００２が構築されている。図１５は、仮想ルーム情報記憶部５００２に記憶される仮想ルーム情報を示す概念図である。仮想ルーム情報記憶部５００２には、図１５に示されているような仮想ルーム情報が記憶されている。仮想ルーム情報は、仮想ルームに関する情報であり、仮想ルームごとに保持される。仮想ルーム情報が有する各項目について説明する。なお、ここでは仮想ルームはテナントに登録されているが、テナントへの登録は必須ではなく、一時的に作成された仮想ルーム又は共有で利用できる仮想ルームの情報も仮想ルーム情報記憶部５００２に記憶される。
【0141】
・仮想ルームＩＤは、仮想ルームを識別する識別情報である。本実施形態では、仮想ルームはユーザが任意に作成できるものとする。
【0142】
・仮想ルーム名称は、ユーザが仮想ルームを判別するための名称であり、ユーザが任意に設定できるものとする。なお、仮想ルームＩＤと仮想ルーム名称は同一の情報であってもよい。
【0143】
・デバイス情報は、仮想ルームに対応付けられている撮像装置１０を含むデバイスの識別情報（デバイスＩＤ）である。
【0144】
・入室中のユーザは、現在、仮想ルームに入室しているユーザのユーザＩＤである。このユーザは仮想ルームの入室者に対して配信される広視野画像等の画像を閲覧可能なユーザである。入室方法については後述する。また、ユーザＩＤには該ユーザが操作する通信端末３０のＩＰアドレスが対応付けられていてもよい。また、ユーザＩＤにはユーザ名が対応付けて記憶されていてもよい。
【0145】
「テナント情報記憶部５００３」
記憶部５０００には、テナント情報記憶部５００３が構築されている。図１６は、テナント情報記憶部５００３に記憶されるテナント情報を示す概念図である。テナント情報記憶部５００３には、図１６に示されているようなテナント情報が記憶されている。テナント情報は、テナント（ユーザグループ）に関する情報であり、テナントごとに保持される。テナント情報が有する各項目について説明する。なお、テナント情報にはユーザ情報など図示する以外に様々な情報が登録されており、図１６は一部に過ぎない。
・テナントＩＤは、テナントを識別する識別情報である。
・テナント名は、ユーザがテナントを判別するための名称である。なお、テナントＩＤとテナント名は同一の情報であってもよい。
・テナント登録仮想ルームＩＤは、テナントに登録された仮想ルームの識別情報である。
・テナント登録デバイスは、テナントに登録されたデバイスに関する情報である。
なお、テナント情報記憶部、テナントＩＤ、テナント名、テナント登録仮想ルームＩＤ、テナント登録デバイスは、それぞれ、ユーザグループ情報記憶部、ユーザグループＩＤ、ユーザグループ名、ユーザグループ登録仮想ルームＩＤ、ユーザグループ登録デバイスと言い換えることができる。
記憶部５０００には、テナント情報記憶部５００３が構築されている。図１６は、テナント情報記憶部５００３に記憶されるテナント情報を示す概念図である。テナント情報記憶部５００３には、図１６に示されているようなテナント情報が記憶されている。テナント情報は、テナント（ユーザグループ）に関する情報であり、テナントごとに保持される。テナント情報が有する各項目について説明する。なお、テナント情報にはユーザ情報など図示する以外に様々な情報が登録されており、図１６は一部に過ぎない。
・テナントＩＤは、テナントを識別する識別情報である。
・テナント名は、ユーザがテナントを判別するための名称である。なお、テナントＩＤとテナント名は同一の情報であってもよい。
・テナント登録仮想ルームＩＤは、テナントに登録された仮想ルームの識別情報である。
・テナント登録デバイスは、テナントに登録されたデバイスに関する情報である。
なお、テナント情報記憶部、テナントＩＤ、テナント名、テナント登録仮想ルームＩＤ、テナント登録デバイスは、それぞれ、ユーザグループ情報記憶部、ユーザグループＩＤ、ユーザグループ名、ユーザグループ登録仮想ルームＩＤ、ユーザグループ登録デバイスと言い換えることができる。
【0146】
「視点関連情報記憶部５００４」
記憶部５０００には、視点関連情報記憶部５００４が構築されている。図１７は、視点関連情報記憶部５００４に記憶される視点関連情報を示す概念図である。視点関連情報には、画像データＩＤ、参加者ＩＤ、閲覧開始日時情報、及び視点情報の保存場所情報が関連付けられている。なお、画像データＩＤ、及び参加者ＩＤは、図１４の画像管理情報における同じ名称の項目と同じ意味である。
記憶部５０００には、視点関連情報記憶部５００４が構築されている。図１７は、視点関連情報記憶部５００４に記憶される視点関連情報を示す概念図である。視点関連情報には、画像データＩＤ、参加者ＩＤ、閲覧開始日時情報、及び視点情報の保存場所情報が関連付けられている。なお、画像データＩＤ、及び参加者ＩＤは、図１４の画像管理情報における同じ名称の項目と同じ意味である。
【0147】
・閲覧開始日時情報は、録画時に配信中の広視野画像のうち、各拠点で閲覧されているデフォルトの（初期設定されている）所定領域画像から変更されることで新たな所定領域画像の閲覧が開始された日時を示す。なお、閲覧開始日時ではなく、１つの動画における再生経過時間を示す情報であってもよい。
【0148】
・視点情報の保存時間情報は、同じレコードの閲覧開始日時情報で示される日時に閲覧された所定領域を特定するための視点情報が保存されている場所を示す情報であって、ＵＲＬ又はファイルパス等である。
【0149】
図１７に示す視点関連情報により、所定の広視野画像に関して、どの拠点における通信端末３０（ユーザ）が、いつから所望の所定領域画像に変更して表示（閲覧）したかを示す記録を残すことができる。
【0150】
「静止画共有情報記憶部５００５」
記憶部５０００には、静止画共有情報記憶部５００５が構築されている。図１８は、静止画共有情報記憶部５００５に記憶される静止画共有情報を示す概念図である。静止画共有情報には、仮想ルームＩＤ、画像データＩＤ、再生経過時間、閲覧者ＩＤ、及び静止画の保存場所情報が関連付けられている。なお、仮想ルームＩＤは図１５、画像データＩＤは図１４における同じ名称の項目と同じ意味である。
記憶部５０００には、静止画共有情報記憶部５００５が構築されている。図１８は、静止画共有情報記憶部５００５に記憶される静止画共有情報を示す概念図である。静止画共有情報には、仮想ルームＩＤ、画像データＩＤ、再生経過時間、閲覧者ＩＤ、及び静止画の保存場所情報が関連付けられている。なお、仮想ルームＩＤは図１５、画像データＩＤは図１４における同じ名称の項目と同じ意味である。
【0151】
・再生経過時間は、画像データＩＤで特定される録画された動画の再生中に、動画におけるフレームである静止画が切り出された時点の再生経過時間を示す。
【0152】
・閲覧者ＩＤは、画像データＩＤで特定される録画された動画の再生中に、再生中の仮想ルームＩＤで特定される仮想ルームに参加して、録画された動画を閲覧するユーザを識別するためのユーザ識別情報の一例である。
【0153】
・静止画の保存場所情報は、動画におけるフレームである静止画が切り出された静止画が保存されている場所を示す情報であって、ＵＲＬ又はファイルパス等である。
【0154】
「部分平面動画の共有情報記憶部５００６」
記憶部５０００には、部分平面動画の共有情報記憶部５００６が構築されている。図１９は、部分平面動画の共有情報記憶部５００６に記憶される部分平面動画の共有情報を示す概念図である。
記憶部５０００には、部分平面動画の共有情報記憶部５００６が構築されている。図１９は、部分平面動画の共有情報記憶部５００６に記憶される部分平面動画の共有情報を示す概念図である。
【0155】
「部分平面動画」は、一般のカメラ８等で撮影されることで得られた平面動画における時間的な部分動画を示す。この場合の時間的な部分動画は、再生経過期間の部分動画を示す。
【0156】
部分平面動画の共有情報には、仮想ルームＩＤ、画像データＩＤ、再生経過期間、閲覧者ＩＤ、及び注目フラグが関連付けられている。なお、仮想ルームＩＤ、画像データＩＤ、及び閲覧者ＩＤは、図１８における同じ名称の項目と同じ意味である。
【0157】
・再生経過期間は、一般のカメラ８等で撮影されることで得られた平面動画において、共有される部分動画の再生経過期間を示す。
【0158】
・注目フラグは、閲覧者のうちの主催者（例えば、ユーザａ）が後述の「各閲覧履歴記録」ボタン６１９を押下した場合に、情報処理システム５０が、他の閲覧者（例えば、ユーザｂ、ｃ、ｄ）の通信端末３０Ｂ，３０Ｃ，３０Ｄから自動的に取得した閲覧履歴に付されているフラグである。なお「０」の場合は注目フラグがない、「１」の場合は注目フラグがあることを示す。
【0159】
「部分広視野動画の共有情報記憶部５００７」
記憶部５０００には、部分広視野動画の共有情報記憶部５００７が構築されている。図２０は、部分広視野動画の共有情報記憶部５００７に記憶されている部分広視野動画の共有情報を示す概念図である。
記憶部５０００には、部分広視野動画の共有情報記憶部５００７が構築されている。図２０は、部分広視野動画の共有情報記憶部５００７に記憶されている部分広視野動画の共有情報を示す概念図である。
【0160】
「広視野動画」は、全天球カメラとしての撮像装置１０で撮影されることで得られた動画である。
【0161】
「部分広視野動画」は、広視野動画における時間的な部分動画を示す。部分広視野動画の共有情報の場合、部分平面動画の共有情報とは異なり視点情報も管理されるため、結果的には、部分広視野動画のうち、視点情報で特定される所定領域Ｔ（図１０参照）を示す所定領域動画が表示される。
【0162】
部分広視野動画の共有情報には、仮想ルームＩＤ、画像データＩＤ、再生経過時間、閲覧者ＩＤ、視点情報及び注目フラグが関連付けられている。なお、仮想ルームＩＤ、画像データＩＤ、及び閲覧者ＩＤ、及び注目フラグは、図１９における同じ名称の項目と同じ意味である。
【0163】
・再生経過時間は、視点情報で特定される広視野動画の所定領域である部分広視野動画の再生経過時間を示す。ここでは、１秒毎に通信端末３０から部分広視野動画の共有情報を受信して管理する場合が示されている。なお、１秒毎ではなく、フレームレートに合わせて、１／３０秒毎、１／６０秒毎、又は現場の通信トラフィックを考慮して１０秒毎等で通信端末３０から受信した部分広視野動画の共有情報を管理してもよい。
【0164】
＜通信端末の仮想ルームへの入室＞
続いて、図２１、図２２を参照し、ユーザｂが仮想ルームに入室する処理について説明する。なお、すでに撮像装置１０が仮想ルームに対応付けられ、通信端末３０Ａが広視野画像と通常の画角の画像を情報処理システム５０に送信しているものとする（撮像装置１０の仮想ルームへの対応付け等については図２３以降で説明する）。また、以下では、ユーザｂが仮想ルームに入室することと、ユーザｂが操作する通信端末３０Ｂが仮想ルームに入室することを特に区別しないで説明する。
続いて、図２１、図２２を参照し、ユーザｂが仮想ルームに入室する処理について説明する。なお、すでに撮像装置１０が仮想ルームに対応付けられ、通信端末３０Ａが広視野画像と通常の画角の画像を情報処理システム５０に送信しているものとする（撮像装置１０の仮想ルームへの対応付け等については図２３以降で説明する）。また、以下では、ユーザｂが仮想ルームに入室することと、ユーザｂが操作する通信端末３０Ｂが仮想ルームに入室することを特に区別しないで説明する。
【0165】
図２１は、ユーザｂが仮想ルームに入室する際に通信端末３０Ｂが表示する画面例を示す。図２１（ａ）は、入室画面２００の一例である。補足すると、入室画面２００の表示に先立って、ユーザｂは情報処理システム５０にログインしている。ログインすることでユーザｂが所属するテナントが特定される。仮想ルームはテナントと関連付けられている。ユーザｂはテナントに関連付けられている仮想ルームの一覧を通信端末３０Ｂで表示し（図２６参照）、一覧から入室する仮想ルームを選択する。図２１（ａ）はこのようにユーザｂが選択した仮想ルームに対する入室画面２００である。なお、テナントに関連付けられていない一時的に作成した仮想ルーム又は共有の仮想ルームが図２１（ａ）の画面に表示されてもよい。
【0166】
あるいは、仮想ルームの作成者が仮想ルームに対応するＵＲＬの発行を情報処理システム５０に要求し、このＵＲＬをメール等でユーザｂに送信してもよい。ユーザｂが通信端末３０Ｂに表示されたＵＲＬを押下すると、通信端末３０Ｂが図２１（ａ）の入室画面２００を表示する。
【0167】
入室画面２００は、仮想ルーム名称２０１、参加者名入力欄２０２、及び入室ボタン２０３を有している。仮想ルーム名称２０１は仮想ルーム情報記憶部５００２に記憶されているものと同じである。参加者名入力欄２０２は、仮想ルーム内で表示されるユーザ名を入力する欄であって、ニックネームなどユーザｂの呼称でもよい。ユーザｂがログインすることでユーザｂのユーザＩＤに紐づくユーザ名を特定し、この特定したユーザ名が自動で表示されてもよい。入室ボタン２０３は、ユーザｂが仮想ルームへの入室を要求するボタンである。
【0168】
なお、入室時に仮想ルームの入室のための認証が、テナントへのログインとは別に要求されてもよい。
【0169】
図２１（ｂ）は、ユーザｂが仮想ルームに入室したことで、通信端末３０Ｂが表示する画像閲覧画面２１０である。図２１（ｂ）の画像閲覧画面２１０は、撮像装置１０が情報処理システム５０を介して広視野画像の配信をすでに開始しており、通信端末３０Ａが通常の画角の画像の配信をすでに開始している。このため、画像閲覧画面２１０は、第一の画像欄２１１と第二の画像欄２１２を有している。第一の画像欄２１１には広視野画像が表示され、第二の画像欄２１２には通常の画角の画像が表示されている。画像を送信する拠点が３つ以上になれば、送信元の拠点の数に応じて画像閲覧画面２１０が分割される。
【0170】
第一の画像欄２１１には、広視野画像マーク２１３が表示されている。広視野画像マーク２１３は、情報処理システム５０の画面生成部５２が、第一の画像欄２１１に表示する画像が広視野画像であると判断して設定する。通信端末３０Ｂが判断して表示してもよい。ユーザｂは広視野画像マーク２１３を見ることで、視点を変更できる広視野画像が配信されていることが分かる。また、第一の画像欄２１１にはデバイスの名称２１４（広視野画像と共に撮像装置１０から送信される）が表示される。デバイスの名称２１４は後述するようにユーザａ等によって設定された情報である（図２４参照）。
【0171】
第二の画像欄２１２には、参加者名２１５が表示される。参加者名２１５はユーザ名であって、参加者名入力欄２０２に、すでに入室済みのユーザ（ここではユーザａが入室済みなので、ユーザａが参加者名入力欄２０２に入力した「ＡＡＡ」）の参加者名が表示される。
【0172】
図２２は、ユーザｂ（又は通信端末３０Ｂ）が仮想ルームに入室する処理を説明するシーケンス図である。
【0173】
S1：まず、拠点Ｂのユーザｂが仮想ルームの一覧画面の表示を行う操作を行う。なお、通信端末３０Ｂは、ユーザｂによる操作に応じて事前に情報処理システム５０へアクセスし、仮想ルームの一覧画面を表示させるための仮想ルーム情報記憶部５００２に記憶されている仮想ルームの情報を情報処理システム５０から受信している。この際に、通信端末３０Ｂはログイン等に必要な認証情報を情報処理システム５０へ送信することによって、情報処理システム５０の認証部５５によって認証されてもよい。認証情報はユーザｂに紐づく認証情報であっても、通信端末３０Ｂに紐づく認証情報であってもよい。このような場合に、一覧画面に表示される仮想ルームはユーザｂに紐づくテナントに登録されている仮想ルーム又は通信端末３０Ｂに紐づくテナントに登録されている仮想ルームであってもよい。受付部３２が一覧画面を表示する操作を受け付けることで、通信端末３０Ｂの表示制御部３３は、ディスプレイ３０６に選択画面を表示させる。
【0174】
S2：ユーザｂがある仮想ルームの選択ボタンを選択した場合、通信端末３０Ｂの受付部３２は、仮想ルームの選択を受け付ける。通信端末３０Ｂの表示制御部３３は、ディスプレイ３０６に図２１（ａ）で示した入室画面２００を表示させる。
【0175】
S3：ユーザｂが必要事項を入力し、入室ボタン２０３を押下する。受付部３２が押下を受け付けることで、通信端末３０Ｂの通信部３１は、情報処理システム５０に対して、仮想ルームへの入室要求を送信する。この入室要求は、ステップＳ２で選択された仮想ルームを示す仮想ルームＩＤ、ログイン等によって認証されたユーザｂのユーザＩＤ、及び要求元端末である通信端末３０ＢのＩＰアドレス等の情報を含む。これにより、情報処理システム５０の通信部５１は、入室要求を受信する。
【0176】
S4：通信グループ管理部５６は、仮想ルーム情報記憶部５００２の仮想ルームＩＤで特定される仮想ルーム情報に、ログイン等によって認証されたユーザＩＤとＩＰアドレスを登録する。
【0177】
S5：そして、情報処理システム５０の通信部５１は、通信端末３０Ｂに対して、入室済みを示す応答を送信する。これにより、通信端末３０Ｂの通信部３１は、入室済みを示す応答を受信する。通信端末３０Ｂの表示制御部３３はステップＳ５に続けて、情報処理システム５０の画面生成部５２が生成した画面の情報と画像配信部５４が配信した画像の情報を受信し、受信した情報に基づいて、図２１（ｂ）に示した画像閲覧画面２１０を表示させる。
【0178】
＜撮像装置のルームへの対応付け＞
続いて、図２３～図３０を参照して、撮像装置１０の仮想ルームへの対応付けについて説明する。なお、撮像装置１０の仮想ルームへの対応付けは拠点Ａのユーザａが行うとして説明するが、システム管理者又はテナント管理者等が行ってもよい。
続いて、図２３～図３０を参照して、撮像装置１０の仮想ルームへの対応付けについて説明する。なお、撮像装置１０の仮想ルームへの対応付けは拠点Ａのユーザａが行うとして説明するが、システム管理者又はテナント管理者等が行ってもよい。
【0179】
図２３は、通信端末３０Ａが表示するデバイス登録画面２２０の一例である。ユーザａは情報処理システム５０にログイン等によって認証されている状態である。ログインすることでユーザａが所属するテナントが特定される。ユーザａはデバイス登録画面２２０の表示を情報処理システム５０に要求し、通信端末３０Ａは情報処理システム５０から受信したデバイス登録画面２２０を表示する。デバイス登録画面２２０によりまず、デバイスがテナントに登録される。
【0180】
デバイス登録画面２２０は、撮像装置登録ボタン２２１、ＶＲゴーグル登録ボタン２２２、スマートグラス登録ボタン２２３を有している。デバイスの種類ごとにボタンが用意されるのは、カメラの有無、登録に使用される情報等に違いがあるためである。また、デバイスの種類ごとにデバイスが登録されるので、情報処理システム５０ではデバイスの種類も把握できる。
【0181】
撮像装置登録ボタン２２１は、ユーザａが撮像装置１０を登録するためのボタンであり、ＶＲゴーグル登録ボタン２２２はＶＲゴーグル８９を登録するためのボタンであり、スマートグラス登録ボタン２２３はスマートグラス８８を登録するためのボタンである。
【0182】
図２４は、撮像装置登録ボタン２２１が押下された場合に表示される画面の一例である。図２４（ａ）は、撮像装置登録ダイアログ２３０を示す。撮像装置登録ダイアログ２３０は、撮像装置１０の名称欄２３１と、説明欄２３２と、次へボタン２３３を有している。ユーザａは登録する撮像装置１０であることが分かるように撮像装置１０の名称欄２３１に任意の名称を設定し、説明欄２３２に説明を設定する。
【0183】
ユーザａが次へボタン２３３を押下すると、通信端末３０Ａが二次元コードを情報処理システム５０に要求し、通信端末３０Ａが二次元コードを表示する。
【0184】
図２４（ｂ）は、通信端末３０Ａが表示した二次元コード画面２４０の一例である。二次元コード画面２４０は、「××（名称欄に入力した名称）というデバイスを登録するため、以下の二次元コードをスキャンして下さい」という旨のメッセージ２４１、及び、二次元コード２４２を有している。ユーザａは二次元コード２４２を登録したい撮像装置１０で撮像する。二次元コード２４２には、撮像装置１０が自身の登録のために接続するＵＲＬ、一時的なＩＤとパスワードといった登録に必要な認証情報が含まれている。
【0185】
ユーザａが撮像装置１０で二次元コード２４２を撮像すると、撮像装置１０がＵＲＬに接続し、一時的なＩＤとパスワードで認証を受ける。認証が成功すると、正式な撮像装置ＩＤが交換され、撮像装置１０の名称、説明、及び、撮像装置ＩＤがテナントに登録される。撮像装置１０もこの撮像装置ＩＤ、名称、及び説明を保持する。テナントに登録された撮像装置１０は、後述するユーザａの操作に応じて仮想ルームに対応付けられる。なお、二次元コード２４２はコード情報の一例であって、同様の認証情報が埋め込まれていればよく、バーコード等の他の形態のコードであってもよい。
【0186】
続いて、図２５を参照して、ＶＲゴーグル８９又はスマートグラス８８等の通信端末のテナントへの登録方法の一例を説明する。図２５は、ＶＲゴーグル登録ボタン２２２が押下された場合に表示されるＶＲゴーグル登録画面２５０の一例である。ＶＲゴーグル登録画面２５０は、一時コード入力欄２５１と、シークレット入力欄２５２を有している。
【0187】
ＶＲゴーグル８９がカメラを有さない場合には二次元コードを撮像できない。このため、ユーザａはＶＲゴーグル８９に一時コード（一時的なＩＤ）と、シークレット（パスワード）を出力させ（表示させ）、一時コード入力欄２５１と、シークレット入力欄２５２に入力してもよい。通信端末３０Ａは一時コードとシークレットを情報処理システム５０に送信することで、ＶＲゴーグル８９をテナントに登録する。ＶＲゴーグル８９が情報処理システム５０に接続し、一時コードとシークレットを送信することで、認証を受ける。認証が成功すると、正式なＶＲゴーグルＩＤが交換され、ＶＲゴーグルＩＤがテナントに登録される。ＶＲゴーグル８９もこのＶＲゴーグルＩＤを保持する。テナントに登録されたＶＲゴーグル８９は、後述するユーザａの操作に応じて仮想ルームに対応付けられる。スマートグラス８８については詳細を説明するが、ユーザａは撮像装置１０又はＶＲゴーグル８９と同様に登録できる。なお、一時コードとシークレットは認証情報の一例であって、他の情報を認証情報に用いてもよい。なお、撮像装置ＩＤ、ＶＲゴーグルＩＤ、スマートグラスＩＤはそれぞれデバイスＩＤの一例であるため、デバイスＩＤと言い換えることができる。そのため、撮像装置１０、ＶＲゴーグル、スマートグラス以外のデバイスを登録する際にも同様の手順によってデバイスＩＤを仮想ルーム又はテナントとの関連付けに利用することができる。なお、デバイスＩＤは、デバイスの所有者に紐づく識別情報であってもよい。
【0188】
図２６は、仮想ルームに撮像装置１０を対応付けるための仮想ルーム対応付け画面（その１）２６０の一例を示す。ＶＲゴーグル８９、スマートグラス８８の場合も画面構成は同じでよい。仮想ルーム対応付け画面（その１）２６０は、仮想ルームのリスト２６１を有している。仮想ルームのリスト２６１は、テナントに作成されている仮想ルームに基づいて仮想ルーム個別欄２６２～２６４を表示する。各仮想ルーム個別欄２６２～２６４は、リンク発行ボタン２６５と、入室ボタン２６６と、設定ボタン２６７と、仮想ルーム名称２６８と、を有する。リンク発行ボタン２６５は、仮想ルームへのリンク（招待するためのＵＲＬ）とパスコードを発行するためのボタンである。入室ボタン２６６は仮想ルームにユーザａが入室するためのボタンである。設定ボタン２６７は、仮想ルームに撮像装置１０を対応付けるためのボタンである。仮想ルーム名称２６８は仮想ルーム情報記憶部５００２に記憶されているものと同じである。したがって、ユーザａは設定ボタン２６７を押下する。設定ボタン２６７の押下により、通信端末３０Ａは仮想ルーム対応付け画面（その２）２７０を表示する。
【0189】
また、仮想ルームにすでにデバイスが対応付けられている場合、仮想ルーム個別欄（図では仮想ルーム個別欄２６４）にデバイスの名称２６９が表示される。
【0190】
図２７は、仮想ルーム対応付け画面（その２）２７０の一例を示す。なお、仮想ルーム対応付け画面（その２）２７０は仮想ルーム対応付け画面（その１）２６０にポップアップ表示されている。仮想ルーム対応付け画面（その１）２６０から仮想ルーム対応付け画面（その２）２７０への画面遷移は、情報処理システム５０を経由しないが、経由する画面遷移も可能である。
【0191】
仮想ルーム対応付け画面（その２）２７０は、現在（すでに）、仮想ルームに対応付けられている撮像装置１０の名称２７１（まだ登録されていないので図では未登録）と、接続ボタン２７２と、ストレージボタン２７３と、を有する。接続ボタン２７２は、仮想ルームにデバイスを対応付けるためにテナントに登録されているデバイスの一覧を対応付ける候補として表示させるボタンである。ストレージボタン２７３は当該仮想ルームに対応付けられている撮像装置１０によって撮像された広視野画像又は通常の画角の画像を保存するストレージ９０の一覧を表示させるボタンである。ストレージ９０の一覧には、仮想ルームに対応付けるストレージ９０の一覧だけでなく、ストレージ９０上のフォルダ等の特定の保存場所の一覧が含まれていてもよい。ユーザが所定のストレージ９０又はストレージ９０上のフォルダ等の特定の保存場所を選択することで、仮想ルームに対してストレージ９０を対応付けることができる。このようにして対応付けたストレージ９０の情報（ストレージ９０にアクセスするためのアドレス情報、又はストレージ９０上のフォルダ等の保存場所）は、仮想ルーム情報記憶部５００２において仮想ルームＩＤと関連付けて記憶させることができる。接続ボタン２７２の押下により、通信端末３０Ａは仮想ルーム対応付け画面（その３）を表示する。
【0192】
通信端末３０Ａは情報処理システム５０に仮想ルームＩＤを送信し、該仮想ルームが生成されているテナントに登録されているデバイスの名称（デバイスのＩＤ等も含む）、及び、仮想ルームに対応付けられているデバイスの名称（デバイスのＩＤ等も含む）を取得する。
【0193】
図２８は、仮想ルーム対応付け画面（その３）２８０の一例を示す。仮想ルーム対応付け画面（その３）２８０は、現在（すでに）、仮想ルームに対応付けられている撮像装置１０の名称２８１と、追加可能デバイス一覧２８２と、保存ボタン２８３と、を有している。ユーザａは追加可能デバイス一覧２８２から仮想ルームに追加で対応付けたいデバイスを選択し、保存ボタン２８３を押下する。これにより、仮想ルームにデバイスが対応付けられる（仮想ルーム情報記憶部５００２に撮像装置ＩＤ等のデバイスＩＤが登録される）。なお、図２８に示しているように、仮想ルームに対応付けられる撮像装置の数を制限してもよく、例えば上限が２台の場合に、仮想ルーム情報記憶部５００２に既に登録されている撮像装置ＩＤの数を参照することによって、追加で登録できるデバイスの残りの数を仮想ルーム対応付け画面（その３）に表示させてもよい。
【0194】
＜撮像装置に対する広視野画像の送信開始処理＞
以上で、撮像装置１０等のデバイスが仮想ルームに対応付けられたが、ユーザａがデバイスに対し画像の送信開始を操作する必要がある。
以上で、撮像装置１０等のデバイスが仮想ルームに対応付けられたが、ユーザａがデバイスに対し画像の送信開始を操作する必要がある。
【0195】
ＶＲゴーグル８９とスマートグラス８８については、ユーザａがデバイス本体を操作して画像の送信をオン、オフする。これは、現在、ＶＲゴーグル８９とスマートグラス８８については、通信システム１ａに専用のアプリケーションが動作していないためである。ＶＲゴーグル８９とスマートグラス８８においても通信システム１ａに専用のアプリケーションが動作する場合、ユーザａが遠隔から画像の送信をオン、オフできる。
【0196】
撮像装置１０の場合、アプリケーションが有効になっていれば、ユーザａが仮想ルームに入室してメニューから広視野画像の送信をオン、オフできる。
【0197】
図２９は、通信端末３０Ａが表示する広視野画像送信制御ダイアログ２９０の一例である。広視野画像送信制御ダイアログ２９０は画像閲覧画面２１０にポップアップ表示されている。ユーザａが通信端末３０Ａを操作して、撮像装置１０を対応付けた仮想ルームに入室したものとする。広視野画像送信制御ダイアログ２９０は、この仮想ルームに対応付けられている撮像装置１０の名称２９２を表示する。名称２９２の近くにトグルボタン２９１が表示されており、ユーザａがトグルボタン２９１を操作して、撮像装置１０による広視野画像の送信をオン（送信開始）又はオフ（送信停止）に設定できる。なお、トグルボタンによるオン又はオフの設定方法は一例であって、ユーザ操作の入力に応じて設定できればよい。例えば、ラジオボタン又は所定のアイコンの選択、メニュー操作等によって設定してもよい。また、ユーザ操作を不要として、撮像装置１０が入室してから自動で広視野画像の送信を開始してもよい。また、日時、入室したユーザの人数、特定のユーザが参加したことなどの所定の条件を予め定めておき、その条件を満たしたことを判断した場合に、広視野画像の送信を開始してもよい。
【0198】
通信端末３０Ａはトグルボタン２９１の操作による送信制御の設定情報を情報処理システム５０に送信する。情報処理システム５０は送信制御の設定情報に応じた送信開始要求又は送信停止要求を撮像装置１０に送信する。
【0199】
図２９（ａ）はトグルボタン２９１がオフの設定の状態を示す。このため、図２９（ａ）では広視野画像が表示されていない。一方、図２９（ａ）では、通信端末３０Ａが入室した時点で、通信端末３０Ａのカメラ９が撮像した通常の画角の画像がすでに共有されており、画像閲覧画面２１０に表示されている。
【0200】
図２９（ｂ）はトグルボタン２９１がオンの設定の状態を示す。トグルボタン２９１のオンにより、情報処理システム５０が送信開始要求を撮像装置１０に送信したため、撮像装置１０が広視野画像の送信を開始した。このため、１つの仮想ルームで２つの画像が共有されるので、画像閲覧画面２１０が２つに分割される。また、オンの設定からオフの設定に変更した場合には、オフの設定情報を通信端末３０Ａが送信し、情報処理システム５０がオフの設定情報の受信に応じて送信停止要求を撮像装置１０に送信し、撮像装置１０が広視野画像の送信を停止する。
【0201】
図３０で説明したように、ユーザが仮に現場にいる状況であっても、撮像装置１０によってコード情報を撮像するといった簡易な操作によって、仮想ルームに撮像装置１０を関連付けることができる。現場にいるユーザはＰＣ等を持たないこともあるため、予め発行しておいたコード情報と撮像装置１０さえあれば、その場で関連付け処理を行うことができることは現場のユーザにとって特に有用である。また、関連付け処理を予め実施しておけば、ユーザは仮想ルームの選択等しなくとも撮像装置１０を所定の仮想ルームに接続させることができ、送信の開始又は停止についても遠隔拠点から指示できるため、現場の作業に集中したいユーザの負担を軽減することができる。したがって、事前準備の工程においても現場と遠隔拠点でのコミュニケーションを効率的に行えるシステムを提供することができる。
【0202】
＜＜仮想ルームへの撮像装置の登録手順＞＞
次に、図３０を参照して、図２３～図２９の一連の画面遷移で説明した仮想ルームへの撮像装置１０の登録手順を説明する。図３０は、ユーザａが仮想ルームに撮像装置１０を登録する手順を示すシーケンス図の一例である。
次に、図３０を参照して、図２３～図２９の一連の画面遷移で説明した仮想ルームへの撮像装置１０の登録手順を説明する。図３０は、ユーザａが仮想ルームに撮像装置１０を登録する手順を示すシーケンス図の一例である。
【0203】
S11：まず、ユーザａが通信端末３０Ａを情報処理システム５０に接続させ、認証情報（ユーザＩＤ，パスワード等）を入力して、ログインを要求する。通信端末３０Ａの受付部３２が操作を受け付ける。
【0204】
S12：通信端末３０Ａの通信部３１は認証情報を指定してログイン要求を情報処理システム５０に送信する。情報処理システム５０の通信部５１は、ログイン要求を受信し、認証部５５が指定された認証情報に基づいて認証を行う。ここでは認証が成功したものとする。また、この際に情報処理システム５０はテナント情報記憶部５００３を参照することで、認証されたユーザＩＤに関連付けられたテナントＩＤを特定することができる。
【0205】
S13：ユーザ操作に応じて、情報処理システム５０の画面生成部５２はデバイス登録画面２２０を生成し、通信部５１がデバイス登録画面２２０の画面情報を通信端末３０Ａに送信する。
【0206】
S14：通信端末３０Ａの通信部３１がデバイス登録画面２２０の画面情報を受信し、表示制御部３３が図２３に示したデバイス登録画面２２０を表示する。ユーザａはデバイスの種類を選択し（ここでは撮像装置１０（例えば全天球カメラ）が選択されたものとする）、次いで、図２４で示したように撮像装置１０の名称、説明を入力する。受付部３２が入力を受け付ける。
【0207】
S15：通信端末３０Ａの通信部３１は、ユーザａが入力した名称と説明を指定して、コード情報（例えば二次元コード）の要求を情報処理システム５０に送信する。
【0208】
S16：情報処理システム５０の通信部５１は、コード情報（例えば二次元コード）の要求を受信する。通信グループ管理部５６は、名称と説明と関連付けてＵＲＬ（登録のための接続先）を生成し、ＵＲＬ、一時的なＩＤ及びパスワードを含むコード情報（例えば二次元コード）を生成する。情報処理システム５０の通信部５１はコード情報（例えば二次元コード）を通信端末３０Ａに送信する。通信端末３０Ａの通信部３１がコード情報（例えば二次元コード）を受信し、図２４で示したように表示制御部３３がコード情報（例えば二次元コード）を表示する。
【0209】
S17：次に、ユーザａは仮想ルームに対応付けたい撮像装置１０を操作して、コード情報（例えば二次元コード）を撮像する。撮像装置１０の受付部１２が操作を受け付ける。
【0210】
S18：撮像装置１０の撮像処理部１３はコード情報（例えば二次元コード）を含む撮像対象に対して撮像処理を行うことで画像データを生成し、解析部１４が画像データを解析してＵＲＬ、一時的なＩＤ及びパスワードを抽出する。これにより、登録要求部１５が接続部１６を経由してＵＲＬに接続し、一時的なＩＤ及びパスワードを指定して撮像装置１０の登録要求を情報処理システム５０に送信する。なお、図２５で説明した登録画面による登録方法を実施する場合は、コード情報を撮像しないため、撮像装置１０がＶＲゴーグル８９又はスマートグラス８８等の通信端末に置き換わり、ステップＳ１５～Ｓ１７のステップは省略することができる。
【0211】
S19：情報処理システム５０の通信部５１は、一時的なＩＤ及びパスワードを受信し、認証部５５が接続されたＵＲＬに関連付けられている一時的なＩＤ及びパスワードと一致するかどうかを判断する。ここでは一致したものとする。
【0212】
S20：情報処理システム５０の通信グループ管理部５６は、撮像装置１０の登録が要求されているので、デバイスＩＤの一例として撮像装置ＩＤを生成し、ユーザａがログインした際に特定したテナントＩＤに対応するテナントに撮像装置ＩＤを登録する。なお、撮像装置ＩＤには、名称及び(又は)説明が関連付けられている。具体的には、通信グループ管理部５６が、テナント情報記憶部５００３を参照し、特定したテナントＩＤに関連付けられるテナント登録デバイスに撮像装置ＩＤを追加して登録する。なお、ここでは通信グループ管理部５６が撮像装置ＩＤを生成して登録しているが、撮像装置１０から受信した撮像装置ＩＤを登録してもよい。なお、撮像装置１０ではなくＶＲゴーグル８９又はスマートグラス８８等の通信端末をテナントに登録する場合には、同様の手順でそれぞれに対応するデバイスＩＤをテナント情報記憶部５００３に登録することができる。
【0213】
S21：情報処理システム５０の通信部５１は、撮像装置ＩＤを撮像装置１０に送信する。撮像装置１０の接続部１６が撮像装置ＩＤを受信し、記憶部１０００に保存する。
【0214】
S22：通信端末３０Ａには、情報処理システム５０の通信部５１から登録完了が通知され、これによりユーザａが仮想ルームへの撮像装置１０の対応付けを開始することができる。ユーザａは仮想ルーム対応付け画面（その１）２６０を通信端末３０Ａに表示させ、テナントに登録した撮像装置１０を対応付けたい仮想ルームを選択する。通信端末３０Ａの受付部３２が選択を示す操作入力を受け付ける。具体的には、通信端末３０Ａの受付部３２がユーザａからの操作入力を受け付けることによって、表示制御部３３が仮想ルーム対応付け画面（その１）２６０を表示させる。この際に、通信部３１は画面の更新要求を情報処理システム５０の通信部５１へ送信してもよい。情報処理システム５０は更新要求を受信すると、テナント情報記憶部５００３を参照し、認証されたユーザＩＤに関連付けられたテナントに登録された仮想ルームＩＤを特定する。さらに続けて、仮想ルーム情報記憶部５００２を参照し、特定した仮想ルームＩＤに関連付けられた仮想ルーム名称を取得する。このようにして特定した仮想ルームＩＤ及び対応する仮想ルーム名称の情報（画面生成部５２がこれらの情報に基づいて生成した画面の情報であってもよい）を情報処理システム５０の通信部５１は通信端末３０Ａへ送信する。通信端末３０Ａの通信部３１は、仮想ルームＩＤ及び仮想ルーム名称の情報を受信し、受信した情報に基づいて表示制御部３３が仮想ルーム対応付け画面（その１）２６０を更新表示することができる。なお、このような情報はユーザＩＤに基づいて特定することができるため、認証後のステップＳ１３で受信しておいてもよい。このようにして表示した仮想ルーム対応付け画面（その１）２６０に対してユーザａからの選択を示す操作入力を受付部３２が受け付けることによって、通信端末３０Ａが選択された仮想ルームＩＤを特定することができる。
【0215】
S23：次に、ユーザａは仮想ルーム対応付け画面（その２）２７０を通信端末３０Ａに表示させ、デバイスを追加で仮想ルームに対応付けるために接続ボタン２７２を押下する。通信端末３０Ａの受付部３２が押下を示す操作入力を受け付ける。具体的には、通信端末３０Ａの表示制御部３３は、ステップＳ２２で特定した選択された仮想ルームＩＤに対応する仮想ルーム対応付け画面（その２）２７０を表示する。さらに、受付部３２は、ユーザａからデバイスを追加で仮想ルームに対応付ける指示を受け付ける（接続ボタン２７２の押下）。
【0216】
S24：ステップＳ２３における操作入力に応じて、通信端末３０Ａの通信部３１は、仮想ルームに対応付けるデバイスの候補となるテナントに登録済みのデバイスと、ステップＳ２２で選択された仮想ルームＩＤに既に対応付けられているデバイスの情報を情報処理システム５０に要求する。
【0217】
S25：情報処理システム５０の通信部５１は、テナントに登録済みのデバイスと、選択された仮想ルームＩＤに対応付けられているデバイスの情報の要求を受信し、画面生成部５２がテナントに登録済みのデバイスと、選択された仮想ルームＩＤに対応付けられているデバイスのデバイスＩＤを含む仮想ルーム対応付け画面（その３）２８０を生成する。情報処理システム５０の通信部５１は仮想ルーム対応付け画面（その３）２８０の画面情報を通信端末３０Ａに送信する。
【0218】
S26：通信端末３０Ａの通信部３１が仮想ルーム対応付け画面（その３）２８０の画面情報を受信し、表示制御部３３が仮想ルーム対応付け画面（その３）２８０を表示する。ユーザａは仮想ルームに対応付けるデバイス（ここでは撮像装置１０を例に説明する）を選択する。通信端末３０Ａの受付部３２が選択を受け付け、選択されたデバイスのデバイスＩＤとして撮像装置ＩＤが特定される。
【0219】
S27：通信端末３０Ａの通信部３１は、ステップＳ２２で選択された仮想ルームＩＤとステップＳ２６で選択されたデバイスＩＤ（例えば撮像装置ＩＤ）を指定して、対応付け要求を情報処理システム５０に送信する。
【0220】
S28：情報処理システム５０の通信部５１は、対応付け要求を受信し、通信グループ管理部５６が仮想ルームにデバイス（例えば撮像装置１０）を登録する。すなわち、通信グループ管理部５６は、仮想ルーム情報記憶部５００２を参照し、ステップＳ２７の要求で指定されている仮想ルームＩＤにデバイスＩＤ（例えば撮像装置ＩＤ）を関連付けて登録する。
【0221】
S29：仮想ルームにデバイスＩＤ（例えば撮像装置ＩＤ）が対応付けられたので、情報処理システム５０の通信部５１は、仮想ルームＩＤ，名称、説明を撮像装置１０に送信する。情報処理システム５０はプッシュ通知を利用してもよいし、撮像装置１０がポーリングすることを利用して送信してもよい。撮像装置１０の接続部１６が仮想ルームＩＤ，名称、説明を受信し、記憶部１０００に保存する。これにより、撮像装置１０が広視野画像を送信する際は、撮像装置ＩＤ、仮想ルームＩＤ、名称、説明等を付加できる。撮像装置１０以外のデバイスも同様の手順で仮想ルームに対応付けることができる。さらに続けて、情報処理システム５０の通信部５１は、通信端末３０Ａに対して対応付け完了を示す通知を送信してもよい。このステップ以降、仮想ルームに対して登録されたデバイス（撮像装置１０）は、対応付けられた仮想ルームに接続することができる。ここでは、続けて撮像装置１０が情報処理システム５０に対して、ステップＳ２９で受信した仮想ルームＩＤを指定して仮想ルームに接続要求を送信することで、仮想ルームに接続したものとして説明を続けるが、撮像装置１０が仮想ルームに接続するタイミングはユーザの操作によって変更することができる。
【0222】
S30：通信端末３０Ａ及び情報処理システム５０は、図２２で説明した入室処理を行うことで、通信端末３０Ａがデバイス（撮像装置１０）の対応付けを行った仮想ルームに入室する。
【0223】
S31：入室後、ユーザａが画像閲覧画面２１０において仮想ルームに対応付けられた撮像装置１０のトグルボタン２９１をオンする。通信端末３０Ａの受付部３２がオンを受け付ける。
【0224】
S32：通信端末３０Ａの通信部３１は、デバイスＩＤ（撮像装置ＩＤ）を指定して広視野画像の送信開始要求を情報処理システム５０に送信する。なお、ユーザａが直接、撮像装置１０のボタンを操作して、広視野画像の送信を開始してもよい。なお、ユーザａの操作により、通信端末３０Ａの通信部３１が、送信停止要求を情報処理システム５０に送信する場合もある。
【0225】
S33：情報処理システム５０の通信部５１は、送信開始要求を受信し、デバイスＩＤ（撮像装置ＩＤ）で特定される撮像装置１０に送信開始を要求する。情報処理システム５０はプッシュ通知を利用してもよいし、撮像装置１０がポーリングすることを利用してもよい。撮像装置１０の接続部１６が送信開始を受信し、撮像処理部１３が撮像を開始する。画像送信制御部１８が接続部１６を介して決まったＦＰＳ又は帯域に応じたＦＰＳで広視野画像の送信を繰り返す。したがって、仮想ルームに入室した通信端末３０は拠点Ａの状況を画像閲覧画面２１０にリアルタイムに表示できる。
【0226】
＜広視野画像等の配信＞
図３１を参照して、広視野画像及び(又は)通常の画角の画像が共有される流れを説明する。図３１は、広視野画像が共有される流れを説明するシーケンス図の一例である。図３１では、通信端末３０Ａ、３０Ｂが図２２で説明した入室処理を実行し、仮想ルームに入室ずみである。また、通信端末３０Ａは通常の画角のカメラ９を有し、通信端末３０Ｂと共有されている。通信端末３０Ａのカメラ９でなく、仮想ルームに対応付けられたスマートグラス８８が撮像した画像等が共有されてもよい。また、図３１では、図３０で説明した登録手順によって、撮像装置１０が同じ仮想ルームに接続済みである。
図３１を参照して、広視野画像及び(又は)通常の画角の画像が共有される流れを説明する。図３１は、広視野画像が共有される流れを説明するシーケンス図の一例である。図３１では、通信端末３０Ａ、３０Ｂが図２２で説明した入室処理を実行し、仮想ルームに入室ずみである。また、通信端末３０Ａは通常の画角のカメラ９を有し、通信端末３０Ｂと共有されている。通信端末３０Ａのカメラ９でなく、仮想ルームに対応付けられたスマートグラス８８が撮像した画像等が共有されてもよい。また、図３１では、図３０で説明した登録手順によって、撮像装置１０が同じ仮想ルームに接続済みである。
【0227】
S41：通信端末３０Ａの撮像部３４は周囲の撮像を行い、通信部３１は入室している仮想ルームＩＤを指定して撮像で得た画像を含む映像及び音声を情報処理システム５０に送信する。
【0228】
S42,S43：情報処理システム５０の通信部５１が画像を含む映像及び音声を受信すると、画像配信部５４が同じ仮想ルームに入室している通信端末３０Ａ，３０ＢのＩＰアドレスを仮想ルーム情報記憶部５００２から取得し、通信部５１を介して画像を含む映像及び音声を送信する。なお、図３１では、通信端末３０Ａの通信部３１が通常の画角の画像を情報処理システム５０から受信して表示しているが、撮像部３４が撮像した通常の画角の画像を受信することなく表示してもよい。
【0229】
S44：次に、撮像装置１０が送信開始の設定に基づく送信開始要求に応じて、撮像処理部１３は広視野画像の撮像を行い、画像送信制御部１８が接続部１６を介して自機が登録されている仮想ルームＩＤ、撮像装置ＩＤ、名称、説明を指定して広視野画像を含む映像及び音声を、情報処理システム５０に送信する。
【0230】
S45,S46：情報処理システム５０の通信部５１が広視野画像を含む映像及び音声を受信すると、画像配信部５４が同じ仮想ルームに入室している通信端末３０Ａ，３０ＢのＩＰアドレスを仮想ルーム情報記憶部５００２から取得し、通信部５１を介して広視野画像を含む映像及び音声を送信する。
【0231】
S47：次に、カメラ９を備えた通信端末３０Ｃが図２２で説明した入室処理を実行することで新しく仮想ルームに入室した。
【0232】
S48：通信端末３０Ｃの通信部３１は通常の画角の画像を含む映像及び音声を情報処理システム５０に送信する。
【0233】
S49～S51：情報処理システム５０の通信部５１は通信端末３０Ｃから通常の画角の画像を含む映像及び音声を受信し、同じ仮想ルームに入室している通信端末３０Ａ～３０ＣのＩＰアドレスを仮想ルーム情報記憶部５００２から取得し、画像配信部５４が通常の画角の画像を含む映像及び音声を送信する。
【0234】
S52：また、情報処理システム５０の通信部５１は同じ仮想ルームに入室した通信端末３０Ｃに対しても、広視野画像を含む映像及び音声を送信する。
【0235】
このように、同じ仮想ルームに入室したユーザａ，ｂは、仮想ルームに対応付けられた撮像装置１０が撮像する広視野画像を含む映像をリアルタイムに共有できる。なお、図３１で示した、各画像の送信順は一例であり、広視野画像が先に共有されてもよいし、通常の画角の画像が先に共有されてもよい。
【0236】
ここで、スマートグラス８８とＶＲゴーグル８９について補足する。スマートグラス８８は通常の画角のカメラと表示機能を有している。スマートグラス８８が保持するカメラが撮像により得た通常の画角の画像は、カメラ８，９と同様に配信される。スマートグラス８８が保持する表示機能は、通常のディスプレイと同様に平面なので、ユーザが指示する視点で広視野画像の一部が表示される。ＶＲゴーグル８９は表示機能を有している（通常の画角のカメラをさらに有していてもよい）。スマートグラス８８が保持する表示機能は、ユーザの頭部の向きによって決まる視点の広視野画像を投影するので、ユーザの頭部の向きに応じた視点で広視野画像における所定領域Ｔの所定領域画像Ｑが表示される。ユーザは、スマートグラス８８又はＶＲゴーグル８９で広視野画像を閲覧中に、閲覧中の視点情報を指定した撮像要求を情報処理システム５０に送信できる。
【0237】
【0238】
まず、広視野画像の共有時において、通信端末３０を操作してユーザが撮像装置１０に録画を要求する際の画面を説明する。なお、任意のユーザが録画を指示できるが、ここでは、ユーザｂが録画を指示するものとする。また、広視野画像の共有時であるので、厳密には撮像装置１０はすでに「撮像」をリアルタイムに行っている。広視野画像の共有時の録画要求とは、広視野画像を保存のために録画することをいう。単に、広視野画像がリアルタイムに配信されている状態では広視野画像は保存されていないため、後から確認することができない（ある場面が任意に保存されていない）。
【0239】
図３３は、通信端末３０Ｂが表示する画像閲覧画面４００の一例である。なお、図３３の説明では主に図２９（ｂ）との相違を説明する。通信端末３０Ａと３０Ｂがリアルタイムに配信されている広視野画像を含む映像をそれぞれ表示し、通信端末３０Ａ、３０Ｂは通信端末３０Ａが有するカメラ９が撮像した通常の画角の画像を含む映像も表示している。広視野画像の映像は、各拠点におけるユーザの操作により任意に仮想的な視点（図１１参照）を変更することで、表示される広視野画像の所定領域Ｔ（図９、図１０参照）を変更することができる。このため、通常の画角では確認できないような範囲まで現場の状況を確認することができる。
【0240】
図３３に示すように、広視野画像が表示された第一の画像欄２１１には、録画ボタン４０１が表示される。録画ボタン４０１は、現在、第一の画像欄２１１に表示されている広視野画像を含む映像の所定領域を特定するための視点情報を用いて、通信端末３０Ｂが撮像装置１０に録画要求を送信するためのボタンである。なお、図３３では録画ボタン４０１に「３６０度映像を録画」といった説明が付与されているが、これは広視野画像の一例である全天球画像の映像を録画する場合のボタンの一例であって、他の説明が付与されたボタンであってもよいし、説明が付与されていないアイコン等の画像で表現されたボタンであってもよい。また、全天球画像以外の広視野画像の録画を指示するボタンであってもよい。録画ボタン４０１は、録画を指示可能なＧＵＩの部品であればよく、図３３の例に限られない。
【0241】
図３４は、通信端末３０Ｂにおいて、録画ボタン４０１が押下されたことでダウンロードボタン４０２が表示された画像閲覧画面４００を示す。図３４では、第一の画像欄２１１の下方にダウンロードボタン４０２（表示部品の一例）が表示されている。ダウンロードボタン４０２には「撮像した映像をダウンロード」というメッセージが表示されている。ダウンロードボタン４０２には、撮像装置１０が録画ボタン４０１の押下によって送信された録画要求に応じて録画した広視野画像をアップロードした保存場所情報（例えばＵＲＬ）が埋め込まれており、ユーザｂがダウンロードボタン４０２を押下すると、通信端末３０ＢがＵＲＬに接続して、録画した広視野画像をダウンロードできる。広視野画像には視点情報が関連付けられているので、通信端末３０Ｂがダウンロードした広視野画像を表示する際は、視点情報によって特定される広視野画像の所定領域を第一の画像欄２１１の中央に一致させるように仮想的な視点を設定して表示する。ダウンロードした広視野画像に複数の拠点の視点情報が関連付けられている場合には、何れの拠点の視点情報に基づいて表示するのか選択肢を画面上に表示させ、選択肢に対する選択の入力をユーザから受け付けることによって選択された視点情報に基づいて表示させてもよい。なお、視点を完全に中央に一致させる必要はなく、視点を第一の画像欄２１１の中央近傍の範囲に含まれるように設定して表示させてもよい。なお、ここではリアルタイムに配信されている広視野画像を含む映像が表示されていた第一の画像欄２１１にダウンロードした広視野画像を表示する例を説明したが、第一の画像欄２１１には、そのままリアルタイムに配信されている広視野画像を含む映像を表示し続け、新しい画像欄を画像閲覧画面４００に追加し、新しい画像欄にダウンロードした広視野画像を表示させてもよい。このようにすることで、リアルタイムに配信されている広視野画像の映像によって現場の状況の変化を確認しつつ、現場の特定の状況を切り取った広視野画像も同時に確認することができる。
【0242】
なお、ダウンロードボタン４０２の態様は一例であって、ダウンロードボタン４０２は例えば「全天球画像ＵＲＬ」のようなメッセージを表示してもよい。また、ボタンではなく保存場所情報（例えばＵＲＬ）に対応するリンクが表示されてもよい。ユーザはリンクをクリックすることで同様にダウンロードすることができてもよい。
【0243】
また、通信端末３０Ｂはダウンロードボタン４０２を表示することなく、保存された広視野画像及び関連付けられた視点情報を自動的に受信して表示してもよい。
【0244】
また、図３４は、録画要求した通信端末３０Ｂが表示する画像閲覧画面４００であるが、リアルタイムに配信されている広視野画像を含む映像を表示している通信端末３０Ａが表示する画像閲覧画面４００でもダウンロードボタン４０２が表示され得る。一つの実施例としては、ユーザｂが録画要求によって撮像した広視野画像の共有を指示する操作を行うことに応じて、同じ仮想ルームに入室している参加者の通信端末３０Ａにダウンロードボタン４０２を表示するようにしてもよい。このようにすることによって、録画を指示した撮像者（ユーザｂ）が手元で録画した画像を確認した上で他の参加者に共有させることができるため、誤って録画した広視野画像、及び共有する必要のない広視野画像が共有されることを防ぐことができる。ただし、仮想ルームに入室している全ての通信端末３０が、広視野画像の保存に応じて自動的にダウンロードボタン４０２を表示してもよい。
【0245】
図３５を参照し、通信端末３０Ａがダウンロードボタン４０２を表示したものとして説明する。図３５（ａ）は、ユーザａがダウンロードボタン４０２を押下する前に表示される画像閲覧画面４１０の一例である。ユーザａがダウンロードボタン４０２を押下する前に、通信端末３０Ａが第一の画像欄２１１に、ユーザａが指定した任意の仮想的な視点として例えばドリルを備えた作業機械が含まれる画角での広視野画像を表示している。この状態で、ユーザａがダウンロードボタン４０２を押下した。
【0246】
図３５（ｂ）は、ユーザｂがダウンロードボタン４０２を押下した後に表示されるユーザａ側の画像閲覧画面４２０の一例である。ユーザｂが録画ボタン４０１を押下した際の視点情報が、図３３の第一の画像欄２１１なので、図３５（ｂ）に示すように、通信端末３０Ａの第一の画像欄２１１に、図３３の第一の画像欄２１１と同じ視点でダウンロードした録画された広視野画像が表示される。そのため、ドリルを備えた作業機械ではなく、建屋の屋上からクレーンで建材をつり上げるシーンが確認できる画角での録画された広視野画像を表示している。また、ユーザａは、図３５（ｂ）において第一の画像欄２１１に表示されたダウンロードした広視野画像に対して、リアルタイムに配信される広視野画像の映像と同様に、任意に仮想的な視点を変更することができる。そのため、ある特定のシーンを切り取った広視野画像に対しても、録画を要求したユーザの視点を初期値として反映できるとともに、通常の画角では確認できないような範囲まで現場の特定のシーンを確認することができる。
【0247】
このように、異なる拠点のユーザ同士がある特定のシーンに関する録画された広視野画像の仮想的な視点を後から共有できる。なお、保存要求で保存された広視野画像は図３５（ｂ）における第一の画像欄２１１でなくポップアップ表示されてもよいし、別のウィンドウで表示されてもよい。このようにすることで、経時的に変化する現場の状況をリアルタイムに配信される広視野画像の映像で確認しつつ、録画されたある特定のシーンを切り取った広視野画像を利用して相互のコミュニケーションを効率化することができる。
【0248】
なお、図３５（ｂ）に示すように、通信端末３０Ａがダウンロードした広視野画像を表示中は、録画ボタン４０１が表示されない。第一の画像欄２１１にリアルタイムの広視野画像が表示されていないからである。また、第一の画像欄２１１のデバイスの名称２１４には撮像装置１０の名称と共に共有された画像である旨が表示される。なお、デバイスの名称２１４はテナント情報記憶部５００３に記憶されているテナント登録デバイスの情報から特定することができる。また、デバイス名称２１４はデバイスＩＤであってもよい。
【0249】
また、ダウンロードボタン４０２が表示された通信端末３０Ａ，３０Ｂでは、ユーザａ，ｂが任意にダウンロードボタン４０２を削除できる。
【0250】
また、図３６に示すように、ダウンロードボタン４０２と共に（ダウンロードボタン４０２を兼ねて）、通信端末３０Ａ，３０Ｂが広視野画像のサムネイル４０４を表示してもよい。サムネイル４０４は情報処理システム５０が作成しても通信端末３０が作成してもよい。サムネイル４０４は視点情報により視点が定まっている。
【0251】
また、ユーザａ，ｂはそれぞれ、録画要求で録画された広視野画像にデータ名称（各通信端末３０の画像管理情報記憶部３００１に登録される）を設定できることが好ましい。
【0252】
図３７は、３つの画像欄がある場合の画像閲覧画面４３０の一例を示す。図３７の画像閲覧画面４３０では、例えば、撮像装置１０が撮像した広視野画像が表示される第一の画像欄２１１、通信端末３０Ａのカメラ９が撮像した通常の画角の画像が表示される第二の画像欄２１２、及び、通信端末３０Ｃのカメラ８が撮像した通常の画角の画像が表示される第三の画像欄４３１が表示されている。ユーザａ，ｂ，ｃのうち任意のユーザが録画ボタンを押下でき、各拠点のユーザａ，ｂ，ｃが広視野画像を同じ視点で共有できる。
【0253】
＜＜広視野画像の共有時における、録画要求に応じた動作又は処理＞＞
続いて、図３２を参照し、広視野画像の共有時における、通信システム１ｂの録画要求に応じた動作又は処理を説明する。図３２は、広視野画像の共有時において、通信端末３０Ｂからユーザｂが録画を要求する処理を説明するシーケンス図の一例である。図３２の説明では、図２２で説明した入室処理によって、通信端末３０Ａ、Ｂが仮想ルームに入室しているものとする。また、図３２の説明では、ユーザｂが録画ボタン４０１を押下し、ユーザａと視点情報を共有する場合を説明するが、ユーザａが録画ボタン４０１を押下し、ユーザｂと視点情報を共有することもできる。また、図３２では、図３０で説明した登録手順によって、撮像装置１０が同じ仮想ルームに接続済みである。なお、図３２では、実施形態の一例として、各通信端末３０には、所定領域画像の表示及び視点情報の送信に関する機能を有する閲覧アプリケーション（閲覧アプリ）がインストールされている例を用いて説明する。なお、閲覧アプリを必ずしも事前にインストールしている必要はなく、同等の機能を通信端末が予め備えていてもよいし、仮想ルームに入室する際に情報処理システム又は他のサーバから閲覧アプリと同等の機能を有するプログラムを通信端末が受信することによって、通信端末が図３２に記載の通信端末の処理を実行してもよい。また、通信端末の閲覧アプリはＷｅｂブラウザによって実現されていてもよい。
続いて、図３２を参照し、広視野画像の共有時における、通信システム１ｂの録画要求に応じた動作又は処理を説明する。図３２は、広視野画像の共有時において、通信端末３０Ｂからユーザｂが録画を要求する処理を説明するシーケンス図の一例である。図３２の説明では、図２２で説明した入室処理によって、通信端末３０Ａ、Ｂが仮想ルームに入室しているものとする。また、図３２の説明では、ユーザｂが録画ボタン４０１を押下し、ユーザａと視点情報を共有する場合を説明するが、ユーザａが録画ボタン４０１を押下し、ユーザｂと視点情報を共有することもできる。また、図３２では、図３０で説明した登録手順によって、撮像装置１０が同じ仮想ルームに接続済みである。なお、図３２では、実施形態の一例として、各通信端末３０には、所定領域画像の表示及び視点情報の送信に関する機能を有する閲覧アプリケーション（閲覧アプリ）がインストールされている例を用いて説明する。なお、閲覧アプリを必ずしも事前にインストールしている必要はなく、同等の機能を通信端末が予め備えていてもよいし、仮想ルームに入室する際に情報処理システム又は他のサーバから閲覧アプリと同等の機能を有するプログラムを通信端末が受信することによって、通信端末が図３２に記載の通信端末の処理を実行してもよい。また、通信端末の閲覧アプリはＷｅｂブラウザによって実現されていてもよい。
【0254】
S61：ユーザｂは、図３３において録画ボタン４０１を押下する操作を入力する。通信端末３０Ｂの受付部３２は押下する操作入力を受け付ける。録画ボタン４０１の押下は録画要求を送信するための操作入力方法の一例であって、その他のユーザインターフェースに対する入力に応じて録画要求を送信してもよい。ユーザインターフェースはＧＵＩだけでなく、音声又はジェスチャによるインターフェースも含む。
【0255】
S62：録画要求を送信するための操作入力の受け付けに応じて、通信端末３０Ｂの通信部３１が、情報処理システム５０に対して、録画要求を送信する。この録画要求には、現在利用中の仮想ルームを識別するための仮想ルームＩＤ、及び映像の配信元である撮影装置を識別するための撮影装置ＩＤが含まれている。これにより、情報処理システム５０の通信部５１は、録画要求を受信する。なお、画像の録画だけでなく、音の録音も行われているが、以降、簡略化のために画像の録画について説明する。但し、本実施形態では、画像と同様に、音に関してもデータが通信され録音も行われる。
【0256】
S63: 情報処理システム５０の通信部５１が録画要求を受信すると、関連付け処理部５３が仮想ルーム情報記憶部５００２を参照し、仮想ルームＩＤに基づいて録画された広視野画像の保存場所情報（例えばＵＲＬ）を作成し、更に、仮想ルームに入室中の通信端末３０Ａを特定して同じ仮想ルームに設定されているストレージ９０を対象とする視点情報の保存場所情報（例えばＵＲＬ）を作成する。そして、通信部５１が視点情報のアップロード開始指示を通信端末３０Ａに送信する。この開始指示には、通信端末３０Ａ専用の視点情報の保存用ＵＲＬが含まれている。これにより、通信端末３０Ａの通信部３１が開始指示を受信する。また、これに応じて、表示制御部３３がダウンロードボタン４０２を表示する。
【0257】
S64：情報処理システム５０の通信部５１は、録画要求元の通信端末３０Ｂに対して、通信端末３０Ａに対する送信と同様に、視点情報のアップロード開始指示（視点情報の保存場所情報を含む）を送信すると共に、録画要求元に対する応答として、録画開始指示を送信する。この録画開始指示には、録画した広視野画像の保存場所情報が含まれている。
【0258】
S65：通信端末３０Ｂの録画部３５は、撮像装置１０から配信された動画に係る広視野画像（Ｓ４６参照）の録画及び音声の録音を開始する。録画された録画データは、録画部３５から記憶・読出部１９を介して、一旦、記憶部３０００に保存される。なお、画像データに音データが含まれている場合には、録画部３５は音の録音も行う。
【0259】
S66：ユーザｂは、通信端末３０Ｂによって表示されているデフォルトの所定領域画像に対して、ポインティングデバイス３１２、外付けマウス等により、仮想的な視点を移動（変更）させる操作を入力する。これにより、受付部３２が視点の移動操作を受け付け、表示制御部３３が変更後の視点に応じた所定領域画像を通信端末３０Ｂのディスプレイ３０６上に表示させる。例えば、図１０において、デフォルトで表示されてる所定領域画像が図１０（ｂ）に示されている場合、ユーザｂによる操作により、図１０（ｃ）のように仮想カメラＩＣの視点が移動することで、結果的にディスプレイ３０６上には図１０（ｄ）のような所定領域画像が表示される。なお、仮想の視点の移動は、ポインティングデバイス３１２等のユーザインターフェースに対する入力に限らず、音声又はジェスチャによる入力であってもよい。
【0260】
S67：通信端末３０Ａの通信部３１は、視点移動操作に応じて、情報処理システム５０に対して、視点情報と視点関連情報をアップロードする。この視点情報は、仮想的な視点が移動された後の広視野画像の所定領域を特定するための情報である。また、視点関連情報には、図１７に示されているように、録画対象の広視野画像のデータＩＤ、参加者であるユーザｂのユーザＩＤ、仮想的な視点を移動させて新たな所定領域画像の閲覧を開始することができた日時を示す閲覧開始日時情報、及びステップＳ６４で取得した視点情報の保存場所情報が含まれている。これにより、情報処理システム５０の通信部５１は、視点関連情報を受信し、記憶・読出部５９が、視点関連情報記憶部５００４に1レコードとして視点関連情報を記憶する。
【0261】
S68：情報処理システム５０の通信部５１は、ステップＳ６７で受信した視点情報の保存場所情報に係る保存場所（ＵＲＬ等）に対して、ステップＳ６７で受信した視点情報を保存する。なお、情報処理システム５０は、ストレージ９０に視点情報を保存せずに、自システムにて、図１７の視点関連情報に、視点関連情報における「視点情報の保存場所情報」の代わりに、視点情報を保存してもよい。
【0262】
S69：ユーザａも、ステップＳ６６のユーザｂと同様に操作する。
【0263】
S70：通信端末３０Ａの通信部３１は、ステップＳ６７と同様に、情報処理システム５０に対して、視点情報と視点関連情報をアップロードする。
【0264】
S71：情報処理システム５０の通信部５１は、ステップＳ６８と同様に、ステップＳ７０で受信した視点情報の保存場所情報に係る保存場所（ＵＲＬ等）に対して、ステップＳ７０で受信した視点情報を保存する。
【0265】
S72：ユーザｂがマウス等で録画を停止する操作を入力した場合、受付部３２が録画停止操作を受け付ける。
【0266】
S73：録画停止操作の入力の受付に応じて、録画部３５が録画の動作を停止する。
【0267】
S74：通信端末３０Ｂでは、記憶・読出部３９が記憶部３０００に保存されている録画データを読み出し、通信部３１が、ステップＳ６４で取得した広視野画像の保存場所情報に係るストレージ９０の保存場所に対して、動画に係る広視野画像の録画データをアップロードして保存する。なお、ステップＳ７４は情報処理システム５０を介してストレージ９０の保存場所に対してアップロードして保存してもよい。
【0268】
S75：通信端末３０Ｂの通信部３１は、ステップＳ７４でアップロードが完了すると、情報処理システム５０に対して録画データのアップロードが完了した旨を通知する。
【0269】
S76-1,S76-2：情報処理システム５０の通信部５１は、アップロードが完了した旨の通知を受信すると、広視野画像の保存場所情報（ＵＲＬ等）を仮想ルームに入室している通信端末３０Ａ及び通信端末３０Ｂにそれぞれ通知する。これらの通知を受け取った通信端末３０Ａ及び通信端末３０Ｂの表示制御部３３は、それぞれ図３４及び図３５で説明したダウンロードボタン４０２を表示させることができる。通信端末３０Ａ及び通信端末３０Ｂの通信部３１はそれぞれ、ダウンロードボタン４０２の押下に対応する操作入力を受付部３２によって受け付けることに応じて、保存場所情報に対応するストレージ９０の保存場所に保存されている録画データをストレージ９０に要求し（なお、情報処理システム５０を介して要求してもよい）、録画データをストレージ９０からダウンロードすることによって録画データの共有を行うことができる（なお、情報処理システム５０を介してダウンロードしてもよい）。
【0270】
以上により、図３２の処理は終了する。
【0271】
なお、スマートグラス８８又はＶＲゴーグル８９が通信端末３０である場合も、同様に図３２に示される処理が実行される。
【0272】
図３８には、図３２の処理の変形例が示されている。図３８は、視点情報及び広視野画像のアップロードの処理（その２）を示すシーケンス図である。なお、この変形例においても、図３２におけるステップＳ６１～Ｓ６５と同様の処理が行われるため、これらの説明を省略し、通信端末３０Ｂで録画が開始された後の処理について、ステップＳ８６から説明する。
【0273】
S86：上記ステップＳ６６と同様に、ユーザｂは、通信端末３０Ｂによって表示されているデフォルトの所定領域画像に対して、ポインティングデバイス３１２又は外付けマウス等により、仮想的な視点を移動（変更）させる操作を入力する。これにより、通信端末３０Ｂの受付部３２が視点を移動させる操作入力を受け付け、表示制御部３３が変更後の視点に応じた所定領域画像を通信端末３０Ｂのディスプレイ３０６上に表示させる。
【0274】
S87：通信端末３０Ｂでは、記憶・読出部３９が、ステップＳ８６によって仮想的な視点が移動された後の所定領域を特定するための視点情報と、この視点情報に係る視点関連情報を記憶部３０００に保存する。
【0275】
S88：ユーザａもステップＳ８６と同様に、ユーザａは、通信端末３０Ａによって表示されているデフォルトの所定領域画像に対して、ポインティングデバイス３１２又は外付けマウス等により、仮想的な視点を移動（変更）させる操作を入力する。これにより、通信端末３０Ａの受付部３２が視点を移動させる操作入力を受け付け、表示制御部３３が変更後の視点に応じた所定領域画像を通信端末３０Ａのディスプレイ３０６上に表示させる。
【0276】
S89：通信端末３０ＢでもステップＳ８９と同様に、記憶・読出部３９が、ステップＳ８８によって仮想的な視点が移動された後の所定領域を特定するための視点情報と、この視点情報に係る視点関連情報を記憶部３０００に保存する。
【0277】
S90：ユーザｂがマウス等で録画を停止した場合、ステップＳ７２と同様に、受付部３２が録画停止を受け付ける。
【0278】
S91：録画部３５が録画の動作を停止する。
【0279】
S92：通信端末３０Ｂの通信部９２が、情報処理システム５０に対して、録画を停止した旨を示す録画停止通知を送信する。これにより、情報処理システム５０の通信部５１が、録画停止通知を受信する。
【0280】
S93：情報処理システム５０の通信部５１が、録画処理をしていない通信端末３０Ａに対して、視点情報と視点関連情報のアップロード要求を送信する。これにより、通信端末３０Ａの通信部３１は、アップロード要求を受信する。
【0281】
S94：通信端末３０Ｂでは、記憶・読出部３９が、これまで記憶部３０００に保存しておいた、広視野画像の録画データ、視点情報、及び視点関連情報を読み出し、通信部３１が、これらを情報処理システム５０にアップロードする。なお、上述のように、視点関連情報には、視点情報の保存場所情報が含まれている。これにより、情報処理システム５０の通信部５１は、広視野画像の録画データ、視点情報、及び視点関連情報を受信する。
【0282】
S95：情報処理システム５０の通信部５１は、ステップＳ９４で受信した視点情報の保存場所情報に係る保存場所（ＵＲＬ等）に対して、ステップＳ９４で受信した視点情報を保する。また、情報処理システム５０の通信部５１は、画像管理情報記憶部５００１（図１４参照）に記憶されている広視野画像のデータの保存場所情報で示されるストレージ９０の保存場所（ＵＲＬ等）に対して、ステップＳ９４で受信した広視野画像の録画データを保存する。なお、通信端末３０Ｂが保存場所を特定できていれば、情報処理システム５０を介さずに広視野画像の録画データと視点情報をストレージ９０に保存してもよい。
【0283】
S96：通信端末３０Ａでは、記憶・読出部３９が、これまで記憶部３０００に保存しておいた、視点情報及び視点関連情報を読み出し、通信部３１が、これらを情報処理システム５０に送信する。なお、上述のように、視点関連情報には、視点情報の保存場所情報が含まれてる。これにより、情報処理システム５０の通信部５１は、視点情報及び視点関連情報を受信する。
【0284】
S97：情報処理システム５０の通信部５１は、ステップＳ９６で受信した視点情報の保存場所情報に係るストレージ９０の保存場所（ＵＲＬ等）に対して、ステップＳ９６で受信した視点情報を保存する。また、情報処理システム５０の通信部５１は、画像管理情報記憶部５００１（図１４参照）に記憶されている広視野画像のデータの保存場所情報で示されるストレージ９０の保存場所（ＵＲＬ等）に対して、ステップＳ９６で受信した広視野画像の録画データを保存する。なお、通信端末３０Ａが保存場所を特定できていれば、情報処理システム５０を介さずに視点情報をストレージ９０に保存してもよい。
【0285】
S98-1,S98-2：情報処理システム５０の通信部５１は、ステップＳ９５，Ｓ９７で説明した処理を実行することによって、ストレージ９０への録画データと視点情報の保存が完了すると、広視野画像の保存場所情報（ＵＲＬ等）を仮想ルームに入室している通信端末３０Ａ及び通信端末３０Ｂにそれぞれ通知する。これらの通知を受け取った通信端末３０Ａ及び通信端末３０Ｂの表示制御部３３は、それぞれ図３４又は図３５で説明したダウンロードボタン４０２を表示させることができる。通信端末３０Ａ及び通信端末３０Ｂの通信部３１はそれぞれ、ダウンロードボタン４０２の押下に対応する操作入力を受付部３２によって受け付けることに応じて、保存場所情報に対応するストレージ９０の保存場所に保存されている録画データをストレージ９０に要求し（なお、情報処理システム５０を介して要求してもよい）、録画データをストレージ９０からダウンロードすることによって録画データの共有を行うことができる（なお、情報処理システム５０を介してダウンロードしてもよい）。
【0286】
以上により、図３８の処理は終了する。
【0287】
また、図３２、図３８の例では、通信端末３０において録画の開始と停止を行っていたが、図３１で説明したように、情報処理システム５０も通信端末３０と同様に撮像装置１０によって撮像された広視野画像を受信しているため、通信端末３０が備える録画部３５を情報処理システム５０が備え、情報処理システム５０の録画部によって広視野画像の録画の開始及び(又は)停止を実行してもよい。このような場合にはクラウド等のサーバで録画する構成となるため、ユーザが操作する通信端末３０に録画に係る処理負荷がかからないといった利点がある。このような変形例の場合には、ステップＳ７４において通信端末３０が録画データをアップロードしているが、情報処理システム５０がストレージ９０に録画データを保存する構成となる。
【0288】
また、同様に撮像装置１０が録画部３５の機能を有している場合には、撮像装置１０において広視野画像の録画を実行してもよい。このような場合には、情報処理システム５０及び通信端末３０に録画に係る処理負荷がかからないといった利点がある。このような変形例の場合には、ステップＳ６２で情報処理システム５０が録画要求を受信することに応じて、撮像装置ＩＤに対応する撮像装置１０に対して録画要求を情報処理システム５０が送信することによって、撮像装置１０が録画を開始することができる。また、ステップＳ７２の録画停止操作の入力を受け付けることに応じて、通信端末３０が録画停止要求を情報処理システム５０に送信し、情報処理システム５０がさらに撮像装置１０に対して保存場所情報を含む録画停止要求を送信することで撮像装置１０は録画を停止することができる。録画が停止された後は、ステップＳ７４と同様に通信端末３０ではなく、撮像装置１０が保存場所情報に基づいてストレージ９０（又は情報処理システム５０を介して）へ録画データをアップロードすればよい。
【0289】
また、図３２、図３８の例では、通信端末３０のうち、録画要求を送信した通信端末３０のみで録画を実行する構成となっていたが、仮想ルームに入室している全ての通信端末３０が視点情報のアップロード開始指示を受信することに応じて、録画要求を送信した通信端末３０と同様に配信されている広視野画像の録画の開始及び停止の制御を行い、広視野画像の録画データのアップロードを行ってもよい。
【0290】
また、図３２、図３８の例において、視点情報を情報処理システム５０又はストレージ９０に送信する際に、視点情報が録画データに埋め込まれているデータ形式の場合には、視点情報を含む録画データを送信することによって、視点情報を送信してもよい。
【0291】
＜ストレージに登録されている広視野画像の閲覧＞
続いて、図３９～図５２を参照して、録画された広視野画像を含むストレージ９０に保存された情報の閲覧について説明する。図３９は、ユーザがストレージ９０に保存されている広視野画像を閲覧する処理を説明するシーケンスである。
続いて、図３９～図５２を参照して、録画された広視野画像を含むストレージ９０に保存された情報の閲覧について説明する。図３９は、ユーザがストレージ９０に保存されている広視野画像を閲覧する処理を説明するシーケンスである。
【0292】
S301：ユーザが通信端末３０（表示端末の一例）を情報処理システム５０にアクセスさせた状態で、通信端末３０がユーザから認証情報（ユーザＩＤ，パスワード等）の入力を受け付け、通信端末３０が、ユーザが所属するテナントへのログインの要求の操作入力を受け付ける。通信端末３０の受付部３２がこれらの操作入力を受け付ける。
【0293】
S302：通信端末３０の通信部３１は認証情報を指定してログイン要求を情報処理システム５０に送信する。情報処理システム５０の通信部５１は、ログイン要求を受信し、認証部５５が認証情報に基づいて認証を行う。ここでは認証が成功したものとする。
【0294】
S303：情報処理システム５０の画面生成部５２は所定の分類で画像を分類した仮想ルームリスト画面６００を生成し、通信部５１が生成した仮想ルームリスト画面６００の画面情報を通信端末３０に送信する。具体的には、図１４の画像管理情報、図１５の仮想ルーム情報、テナント情報に基づいた分類の一覧を選択候補として表示する仮想ルームリスト画面６００を生成する。図４０の例では、仮想ルームの分類の一例として、ストレージ９０に保存された画像を含むデータがどの仮想ルームに対応付けられているかで分類した一覧（分類一覧６０４）を含む仮想ルームリスト画面６００が生成される。
【0295】
S304：通信端末３０の通信部３１が仮想ルームリスト画面６００の画面情報を受信し、表示制御部３３が通信端末３０のディスプレイ３０６上に仮想ルームリスト画面６００を表示する。
【0296】
ここで、仮想ルームリスト画面６００に関して詳細に説明する。
【0297】
仮想ルームリスト画面６００には、ログインユーザ名６０３、分類一覧６０４ａ～６０４ｃが表示される。ログインユーザ名６０３はテナントにログインしているユーザを識別する情報であって、ユーザの名前又はユーザＩＤが含まれる。分類一覧６０４ａ～６０４ｃは、画像管理情報記憶部５００１に記憶されている情報に基づいた分類の一覧である。ここでは、分類の一例として、ストレージ９０に保存された、録画された画像の録画データを含むデータがどの仮想ルームに対応付けられているかで分類することができる。例えば録画データに含まれる広視野画像は、それぞれがどの仮想ルームで遠隔コミュニケーション中に撮像されたかを画像管理情報記憶部５００１に記憶されている撮像時の仮想ルームＩＤによって特定することができる。なお、ここでの「撮像時」とは、並行して録画も行っているため「録画時」に言い換えることもできる。図４０の分類一覧６０４ａ～６０４ｃでは遠隔コミュニケーションが行われた仮想ルームの名称に加えて、遠隔コミュニケーションが行われた日付（画像を撮像した日時情報と対応する）が対応付けられて表示されている。図４０の例では例えば、日付"２０２１年１０月１２日"に仮想ルーム名称が"Ａ工事現場"の仮想ルームにおいて遠隔コミュニケーションが行われ、この遠隔コミュニケーション中に録画された画像が日付"２０２１年１０月１２日"の仮想ルーム名称"Ａ工事現場"の分類に保存されていることがわかる。もし仮想ルーム名称が"Ａ工事現場"の仮想ルームにおいて日付"２０２１年１０月１２日"以外の日付において撮像された画像の情報が画像管理情報記憶部５００１に記憶されている場合には、分類一覧６０４に日付"２０２１年１０月１２日"以外の日付（例えば２０２１年１０月１３日）と仮想ルーム名称が"Ａ工事現場"を組み合わせた分類の選択肢を表示させることができる。
【0298】
ユーザは通信端末３０を用いて情報処理システム５０の仮想ルーム情報記憶部５００２にアクセスすることで仮想ルーム名称を編集でき、仮想ルーム名称は仮想ルームの作成時に設定されて仮想ルーム情報記憶部５００２に記憶されている。画像管理情報記憶部５０００１に記憶されている撮像時の仮想ルームＩＤに基づいて、仮想ルーム情報記憶部５００２を参照することで、対応する仮想ルーム名称を特定することができる。日付は、画像管理情報記憶部５００１に記憶されている画像管理情報の撮像日時から特定することができる（複数ある場合は最初の日時）。なお、図４０では仮想ルームで分類されているが、その他にも日付、日時、撮像者情報、撮像装置情報又はデータ名称等の分類で分類されていてもよい。また、これらの分類を２つ以上組み合わせた分類で分類されていてもよい。
【0299】
また、仮想ルームリスト画面６００は、以下の処理によって作成される。
【0300】
まず、ステップＳ３０２において認証されたユーザＩＤが所属するテナントのテナントＩＤを図１６に示したテナント情報記憶部５００３を参照することで特定する。テナント情報記憶部５００３において、各テナントには、仮想ルームが登録されている。仮想ルームで行われた遠隔コミュニケーション中に参加者からの要求に応じて仮想ルームに対応付けられている撮像装置によって撮像され、保存された広視野画像は、遠隔コミュニケーションが行われていた仮想ルームの仮想ルームＩＤ、録画を要求した撮像者（参加者）、撮像日時、撮像装置、視点情報、保存場所等と対応付けて画像管理情報記憶部５００１に保存されている。
【0301】
なお、ここでの「撮像者」とは、撮像に並行して録画も行っているため、「録画者」と言い換えることもできる。このため、画面生成部５２は、テナント情報記憶部５００３を参照することで、ログインしたユーザが所属するテナントのテナントＩＤに関連付けられた仮想ルームＩＤ及び対応する仮想ルーム名を特定することができる。このようにして、図４０に示した分類一覧６０４ａ～６０４ｃに表示する仮想ルーム名を特定することができる。
【0302】
さらに、図４０で示しているように保存されたデータに関連付けられた仮想ルームの分類に対して、撮像された日付と組み合わせて表示する場合には、画面生成部５２は、画像管理情報記憶部５００１を参照することで、特定した仮想ルームＩＤそれぞれに関連付けられたデータＩＤを特定することができる。
【0303】
さらに、画面生成部５２は、特定したデータＩＤに関連付けられた撮像日時の情報を、画像管理情報記憶部５００１を参照することで特定できる。画面生成部５２は、このようにして特定した撮像日時の情報から日付を特定できるため、分類一覧６０４ａ～６０４ｃに表示する仮想ルームに対して、図４０で示したように特定した日付を対応付けて表示する仮想ルームリスト画面６００を生成できる。このように日付と組み合わせることで、例えば"Ａ工事現場"という名前の仮想ルームにおいて撮像された広視野画像が複数保存されていた場合に、撮像された日付が異なる場合には、異なる分類として分類一覧に表示させることができる。これは、例えば、同じ現場で撮像された広視野画像であっても日程によって異なる作業が行われる場合もあるため、作業が行われた日程で選択可能な広視野画像の候補を絞りたい場合に有用である。
【0304】
また、同様に日付ではなく仮想ルームの分類に対して、画像管理情報記憶部５００１を参照して、撮像者、撮像装置又は保存場所の情報を組み合わせて表示することもできる。このように表示することで、例えば同じ現場で撮像された広視野画像であっても、撮像者、撮像装置又は保存場所といった条件で選択可能な広視野画像の候補を絞りたい場合に有用である。また、これらの分類の条件はそれぞれ単独の条件として分類した分類一覧６０４ａ～６０４ｃを生成することもできるし、図４０に示したように２つ以上の条件を組み合わせて分類した分類一覧６０４を生成することもできる。なお、この例では仮想ルームリスト画面６００（分類一覧６０４）を画面生成部５２が生成しているが、分類一覧６０４に表示させる分類の情報（この例では、分類の条件に合致する仮想ルーム名及び日付）を画面生成部５２が通信部５１を介して通信端末３０に送信することで、通信端末３０に分類の情報に基づいた分類一覧６０４を配置した仮想ルームリスト画面６００を生成させてもよい。
【0305】
したがって、ステップＳ３０３において送信する画面情報には、画面生成部５２が生成した仮想ルームリスト画面６００が含まれていてもよいし、生成した画面の代わりに分類一覧６０４に表示させる分類の情報が含まれていてもよい。また、生成した仮想ルームリスト画面６００ に表示させる分類の情報の両方が画面情報に含まれていてもよい。
【0306】
続いて、ステップＳ３０５から説明を続ける。
【0307】
S305：通信端末３０の通信部３１は、ユーザが選択した分類を特定する識別情報（この例では選択された仮想ルームの仮想ルームＩＤ及び日付の情報）を条件として指定して、広視野画像のリスト要求を情報処理システム５０に送信する。なお、仮想ルームＩＤ及び日付等の条件の指定は必ずしも同時に指定する必要はなく、別々に指定して要求を送信してもよい。
【0308】
S306,S307：情報処理システム５０の通信部５１は、画像のリストの要求を受信する。画面生成部５２は、要求において指定された条件に含まれる仮想ルームＩＤに対応付けられている画像データＩＤを画像管理情報記憶部５００１から特定する。さらに、この例では受信した要求において日付も条件として指定されているため、特定した画像データＩＤのうち、画像管理情報記憶部５００１において指定された日付と一致する撮像日時の日付に対応付けられた画像データＩＤを特定する。このようにして指定された条件に一致する画像データＩＤについて、画像管理情報記憶部５００１において対応付けられているデータの保存場所の情報をそれぞれ取得する。画面生成部５２は、通信部５１を介して、取得した保存場所の情報を用いてストレージ９０のそれぞれの保存場所へアクセスし、ストレージ９０から広視野画像及び視点情報並びに平面画像を取得する。なお、画面生成部５２は画像管理情報記憶部５００１に記憶されている視点情報を取得して使用してもよい。
【0309】
S308：情報処理システム５０の画面生成部５２は、S306,S307において取得した広視野画像及び視点情報並びに平面画像を用いて各サムネイル６２１～６２４を含んだモード選択画面６１０を生成する。なお、この例ではモード選択画面６１０を画面生成部５２が生成しているが、サムネイル及び画像情報を画面生成部５２が通信部５１を介して通信端末３０に送信することで、通信端末３０にサムネイル及び画像情報に基づいたモード選択画面６１０を生成させてもよい。
【0310】
S309：通信部５１がモード選択画面６１０の画面情報を通信端末３０に送信する。ここでの画面情報とは、S308で生成されたモード選択画面６１０であってもよいし、モード選択画面６１０を通信端末３０が生成するために必要な情報（S306～S308で生成したサムネイル及び(又は)取得した画像情報等）であってもよい。また、画面情報には、S306,S307において特定した、作成したサムネイルそれぞれに対応するデータを特定するための識別情報（この例では画像データＩＤ）も含まれる。
【0311】
これにより、通信端末としての表示端末３０では、表示制御部３３がディスプレイ３０６上に、図４１に示すようなモード選択画面６１０を表示させる。
【0312】
モード選択画面６１０には、例えば、図４０で選択された分類一覧６０４ａで示される画像の録画（配信）日時情報６１１、通常再生モードの表示領域６２０、共有再生モードの表示領域６３０、「再生同期」ボタン６１８、及び「各閲覧履歴記録」ボタン６１９が示されている。なお、図４１に示すモード選択画面６１０は、閲覧者のうちの主催者であるユーザａの通信端末３０Ａで表示される画面である。
【0313】
通常再生モードは、第１のモードの一例であり、録画された動画の再生中に、この動画における所定の再生経過時間の静止画、又はこの動画の時間的な部分動画の共有を受け付けるモードである。
【0314】
共有再生モードは、第２のモードの一例であり、通信端末３０Ａを含めた各通信端末３０によって共有された各動画における時間的な各部分動画を表示させるモードである。
【0315】
「再生同期」ボタン６１８及び「各閲覧履歴記録」ボタン６１９は、主催者のユーザａの通信端末３０Ａのみ表示され、その他の閲覧者であるユーザｂ，ｃ，ｄの通信端末３０Ａ，３０Ｂ，３０Ｃには表示されない。
【0316】
通常再生モードの表示領域６２０には、2021年10月12日のＡ工事現場で撮影されて録画された画像（広視野動画の所定領域動画、平面動画）の各サムネイル６２１～６２４が示されている。なお、共有再生モードの表示領域６３０については後述する。
【0317】
「再生同期」ボタン６１８は、閲覧中の各通信端末３０で再生されている各動画の再生経過時間を合わせるためのボタンである。
【0318】
「各閲覧履歴記録」ボタン６１９は、主催者以外の閲覧者の通信端末３０Ｂ，３０Ｃ，３０Ｄにおける動画の各閲覧履歴を記録させる受け付けを行うボタンである。サムネイルが広視野動画の場合、閲覧者は、図６（ａ）から図６（ｂ）のように、所定領域Ｔを変更させて所望の所定領域動画を表示させて閲覧することができるため、主催者は他の閲覧者がどの所定領域動画を閲覧しているのか分からない状態になる。そのため、「各閲覧履歴記録」ボタン６１９は、主催者が、各他の閲覧者によって注目されている所定領域動画を把握したい場合に、情報処理システム５０が各所定領域動画の閲覧履歴を取得するためのボタンである。
【0319】
ここで、図６１０に示すように、ユーザａが「再生同期」ボタン６１８を押下すると、通信端末３０Ａの受付部３２が、再生同期の要求を受け付け、通信部３１が情報処理システム５０に再生同期の要求を送信し、情報処理システム５０の通信部５１が他の各通信端末３０Ｂ，３０Ｃ，３０Ｄに各サムネイル６２１～６２４の再生経過時間を合わせる命令を送り、他の各通信端末３０Ｂ，３０Ｃ，３０Ｄは再生経過時間を合わせる処理を行う。
【0320】
続いて、ユーザａが、図４１に示すように、カーソルｃ１で所望のサムネイル（ここでは、サムネイル６２３）を選択すると、受付部３２が選択を受け付け、表示制御部３３が、図４２に示すように拡大した所定領域動画６２３ｅを表示させる。この場合、他のサムネイル６２１，６２２，６２４は、右側に表示される。
【0321】
所定領域動画６２３ｅには、仮想的な視点を移動して、所定領域動画６２３ｅを変更表示（図１０参照）させることが可能である旨を示す変更表示アイコン６２３ａが表示されている。即ち、ユーザａは、カーソルｃ１等を用いて、図１０に示すように所定領域動画６２３ｅを変更表示させることができる。
【0322】
また、通常再生モードの表示領域６２０の下側には、「静止画共有」ボタン６２８及び「部分動画共有」ボタン６２９が表示されている。
【0323】
「静止画共有」ボタン６２８は、録画された動画（ここでは、所定領域動画６２３ｅ）の再生中に、この動画における所定の再生経過時間のフレームである静止画の共有を受け付けるためのボタンである。
【0324】
「部分動画共有」ボタン６２９は、録画された動画の再生中に、この動画における時間的な部分動画の共有を受け付けるためのボタンである。
【0325】
【0326】
（静止画の共有）
まずは、図４３を用いて、通常再生モードの中で、静止画を共有する処理を説明する。図４３は、静止画を共有する処理を示すシーケンス図である。なお、静止画の共有は、全ての通信端末３０で同様の処理が行われる。
まずは、図４３を用いて、通常再生モードの中で、静止画を共有する処理を説明する。図４３は、静止画を共有する処理を示すシーケンス図である。なお、静止画の共有は、全ての通信端末３０で同様の処理が行われる。
【0327】
S411：受付部３２は、閲覧者であるユーザから「静止画共有」ボタン６２８の押下を受け付ける。
【0328】
S412：表示制御部３３は、録画された動画の再生中に、この動画から「静止画共有」ボタン６２８の押下された再生経過時間におけるフレームである静止画を切り出す。
【0329】
S413：通信部３１は、情報処理システム５０に対して、静止画共有情報を送信する。この静止画共有情報には、切り出された静止画データ、「静止画共有」ボタン６２８を押下した閲覧者の閲覧者ＩＤ、切り出す元の画像を示す画像データＩＤ、及び切り出された再生経過時間が含まれている。これにより、情報処理システム５０の通信部５１は、静止画共有情報を受信する。
【0330】
S414：情報処理システム５０では、記憶・読出部５９が、静止画の保存場所のＵＲＬを作成し、通信部５１によって受信された静止画共有情報記憶部５００５（図１８参照）に、通信部５１によって受信された静止画共有情報及び作成したＵＲＬを関連付けて、１レコードとして記憶する。
【0331】
S415,S416：通信部５１は、処理S414で作成されたストレージ９０のＵＲＬに、通信端末３０から送られて来た静止画データを送信して、ストレージ９０のＵＲＬに記憶する。
【0332】
（部分動画の共有）
次に、図４４を用いて、通常再生モードの中で、部分動画を共有する処理を説明する。図４４は、部分動画を共有する処理を示すシーケンス図である。なお、部分動画の共有は、全ての通信端末３０で同様の処理が行われる。
次に、図４４を用いて、通常再生モードの中で、部分動画を共有する処理を説明する。図４４は、部分動画を共有する処理を示すシーケンス図である。なお、部分動画の共有は、全ての通信端末３０で同様の処理が行われる。
【0333】
S431：受付部３２は、閲覧者であるユーザから「部分動画共有」ボタン６２９の押下を受け付ける。
【0334】
S432：通信部３１は、情報処理システム５０に対して、部分動画共有情報を送信する。この部分動画共有情報には、「部分動画共有」ボタン６２９を押下した閲覧者の閲覧者ＩＤ、及び部分動画の元の動画を示す画像データＩＤが含まれている。更に、元の動画が広視野動画の場合には、部分動画共有情報の送信元の通信端末３０で表示されている所定領域動画を特定するための視点情報が含まれている。これにより、情報処理システム５０の通信部５１は、部分動画共有情報を受信する。
【0335】
S433：情報処理システム５０では、通信部５１によって受信された部分動画共有情報に視点情報が含まれていない場合、記憶・読出部５９が、部分平面動画の共有情報記憶部５００６（図１９参照）に、通信部５１によって受信された部分動画共有情報を１レコードとして記憶する。一方、通信部５１によって受信された部分動画共有情報に視点情報が含まれている場合、記憶・読出部５９が、部分広視野動画の共有情報記憶部５００７（図２０参照）に、通信部５１によって受信された部分動画共有情報を１レコードとして記憶する。なお、処理S431によって、一旦、「部分動画共有」ボタン６２９が押下された場合には、次に押下されるまで、処理S432による部分動画共有情報の送信が例えば１秒毎に行われる。なお、上述のように、１／３０秒毎、１／６０秒毎、又は１０秒毎等に送信されてもよい。
【0336】
S434：続いて、受付部３２は、閲覧者であるユーザから「部分動画共有」ボタン６２９の２回目の押下を受け付ける。
【0337】
S435：通信部５１は、受付部３２によって「部分動画共有」ボタン６２９の２回目の押下を受け付けることにより、処理S432で送信していた部分動画共有情報の送信を停止する。なお、情報処理システム５０では、部分動画共有情報に視点情報が含まれていない場合には、部分平面動画の共有情報記憶部５００６（図１９参照）において、「部分動画共有」ボタン６２９が１回目に押下された再生経過時間と２回目に押下された再生経過時間の間である再生経過期間が記憶される。また、部分動画共有情報に視点情報が含まれている場合には、部分広視野動画の共有情報記憶部５００７（図２０参照）において、「部分動画共有」ボタン６２９が１回目に押下された再生経過時間から２回目に押下された再生経過時間の間で所定時間（例えば１秒）毎に再生経過時間が記憶される。
【0338】
（各閲覧履歴記録）
続いて、図４５を用いて、通常再生モードの中で、主催者以外の各閲覧者が閲覧している履歴を記録する処理を説明する。図４５は、主催者以外の各閲覧者が閲覧している履歴を記録する処理を示すシーケンス図である。
続いて、図４５を用いて、通常再生モードの中で、主催者以外の各閲覧者が閲覧している履歴を記録する処理を説明する。図４５は、主催者以外の各閲覧者が閲覧している履歴を記録する処理を示すシーケンス図である。
【0339】
S451：通信端末３０Ａの受付部３２は、閲覧者のうちの主催者であるユーザａから「各閲覧履歴記録」ボタン６１９の押下を受け付ける。
【0340】
S452：通信端末３０Ａの通信部３１は、情報処理システム５０に対して、閲覧履歴記録要求を送信する。これにより、情報処理システム５０の通信部５１は、閲覧履歴記憶要求を受信する。
【0341】
S453：情報処理システム５０では、記憶・読出部５９が仮想ルーム情報記憶部５００２を検索することで、仮想ルーム（2021年10月12日 Ａ工事現場）に参加（入室）している他の全ての通信端末を検索する。
【0342】
S454：通信部５１は、通信端末３０Ａと同じ仮想ルームに参加している他の全ての通信端末３０Ｂ，３０Ｃ，３０Ｄに、閲覧履歴記録要求を送信する。これにより、各通信端末３０Ｂ，３０Ｃ，３０Ｄの通信部３１は、閲覧履歴記録要求を受信する。
【0343】
S455：各通信端末３０Ｂ，３０Ｃ，３０Ｄの記憶・読出部３９は、各ユーザｂ，ｃ，ｄが、図４２と同様に拡大した所定領域動画６２３ｅをそのまま閲覧したり、図１０に示すように変更表示したりする履歴を記憶部３０００に記録しておく。この記録処理は、後述の処理S458で通信部３１が閲覧履歴送信要求を受信するまで続けられる。
【0344】
S456：続いて、通信端末３０Ａの受付部３２は、主催者であるユーザａから「各閲覧履歴記録」ボタン６１９の２回目の押下を受け付ける。
【0345】
S457：通信端末３０Ａの通信部３１は、情報処理システム５０に対して、閲覧履歴送信要求を送信する。これにより、情報処理システム５０の通信部５１は、閲覧履歴送信要求を受信する。
【0346】
S458：通信部５１は、処理S454の送信先である各通信端末３０Ｂ，３０Ｃ，３０Ｄに、閲覧履歴送信要求を送信する。これにより、各通信端末３０Ｂ，３０Ｃ，３０Ｄの通信部３１は、閲覧履歴送信要求を受信する。
【0347】
S459：各通信端末３０Ｂ，３０Ｃ，３０Ｄの記憶・読出部３９は、処理S455により開始して続けていた閲覧履歴の記録を停止する。
【0348】
S460：各通信端末３０Ｂ，３０Ｃ，３０Ｄの記憶・読出部３９が、記憶部３０００からこれまでに記録されていた閲覧履歴の情報を読み出す。そして、各通信端末３０Ｂ，３０Ｃ，３０Ｄの通信部３１は、各閲覧履歴の情報を情報処理システム５０に送信する。この閲覧履歴の情報は、処理S432により送信された部分動画共有情報に加えて「注目フラグ」が付された情報である。これにより、情報処理システム５０の通信部５１は、各通信端末３０Ｂ，３０Ｃ，３０Ｄから各閲覧履歴の情報を受信する。
【0349】
S461：情報処理システム５０では、記憶・読出部３９が、各閲覧履歴の情報について、処理S433と同様の記録処理を行う。
【0350】
＜共有再生モードの処理＞
続いて、図４６乃至図５２を用いて、共有再生モードのうちの３つの処理について説明する。まずは、ユーザがカーソルｃ１で共有再生モードのタブを選択すると、受付部３２が共有再生モードの表示領域６３０への表示切替を受け付け、表示制御部３３が図４６に示すような共有再生モードの表示領域６３０を表示させる。この共有再生モードの表示領域６３０には、「共有静止画再生」ボタン６４０、「共有部分動画再生」ボタン６５０、及び「高注目部分動画再生」ボタン６６０が表示されている。「共有静止画再生」ボタン６４０、「共有部分動画再生」ボタン６５０、及び「高注目部分動画再生」ボタン６６０は、それぞれ通常再生モードにおいて、「静止画の共有」、「部分動画の共有」、及び「各閲覧履歴記録」によって記録された画像（静止画又は動画）を再生するためのボタンである。録画された動画を再生表示する際に、通常再生モードと共有再生モードの切り替えが可能であるため、各閲覧者は、録画された動画を閲覧中に、静止画の共有、部分動画の共有、及び各閲覧履歴記録による画像（静止画又は動画）も閲覧することができる。
続いて、図４６乃至図５２を用いて、共有再生モードのうちの３つの処理について説明する。まずは、ユーザがカーソルｃ１で共有再生モードのタブを選択すると、受付部３２が共有再生モードの表示領域６３０への表示切替を受け付け、表示制御部３３が図４６に示すような共有再生モードの表示領域６３０を表示させる。この共有再生モードの表示領域６３０には、「共有静止画再生」ボタン６４０、「共有部分動画再生」ボタン６５０、及び「高注目部分動画再生」ボタン６６０が表示されている。「共有静止画再生」ボタン６４０、「共有部分動画再生」ボタン６５０、及び「高注目部分動画再生」ボタン６６０は、それぞれ通常再生モードにおいて、「静止画の共有」、「部分動画の共有」、及び「各閲覧履歴記録」によって記録された画像（静止画又は動画）を再生するためのボタンである。録画された動画を再生表示する際に、通常再生モードと共有再生モードの切り替えが可能であるため、各閲覧者は、録画された動画を閲覧中に、静止画の共有、部分動画の共有、及び各閲覧履歴記録による画像（静止画又は動画）も閲覧することができる。
【0351】
（共有静止画再生）
図４７及び図４８を用いて、閲覧者が共有静止画を再生する処理を説明する。図４７は、閲覧者が共有静止画を再生する処理を示すシーケンス図である。図４８は、共有静止画を再生した画面を示す図である。
図４７及び図４８を用いて、閲覧者が共有静止画を再生する処理を説明する。図４７は、閲覧者が共有静止画を再生する処理を示すシーケンス図である。図４８は、共有静止画を再生した画面を示す図である。
【0352】
S511：通信端末３０の受付部３２は、任意の閲覧者から「共有静止画再生」ボタン６４０の押下を受け付ける。
【0353】
S512：通信端末３０の通信部３１は、情報処理システム５０に対して、共有静止画要求を送信する。これにより、情報処理システム５０の通信部５１は、共有静止画要求を受信する。
【0354】
S513：情報処理システム５０では、記憶・読出部５９が静止画共有情報記憶部５００５（図１８参照）を検索することで、ここでは仮想ルーム（2021年10月12日 Ａ工事現場）の仮想ルームＩＤに関連付けて記憶されている静止画共有情報を読み出す。なお、記憶・読出部５９が静止画共有情報のうちの静止画の保存場所情報としてのＵＲＬを読み出してもよい。
【0355】
S514,S515：通信部５１は、処理S513で読み出されたＵＲＬに対してアクセスし、ストレージ９０に記憶されている静止画データを取得する。
【0356】
S516：画面生成部５２は、処理S515で取得された静止画データ、及び処理S513で読み出された静止画共有情報を用いて、図４８に示すような共有再生モードの画面を作成する。この場合の画面には、図４８に示すように、静止画６４１，６４２及びこれらの各静止画６４１，６４２の下に静止画共有情報（ここでは、閲覧者ＩＤ、再生経過時間）が表示されている。ここでは、閲覧者ＩＤが示されているが、静止画共有情報記憶部５００５で、閲覧者名が管理されている等の場合には、画面生成部５２は、閲覧者ＩＤに替えて又は加えて、閲覧者名を表示させる画面を生成してもよい。また、画面生成部５２が生成する画面は、共有再生モードの表示領域６３０内全体であっても良いし、共有再生モードの表示領域６３０内の各ボタン６４０，６５０，６６０を除く表示領域であっても良いし、図４８に示す全体であってもよい。
【0357】
S517：通信部５１は、画面生成部５２によって生成された画面データを、共有静止画要求の送信元の通信端末３０に送信する。なお、通信部５１は、画面生成部５２によって生成された画面データを、共有静止画要求の送信元の通信端末３０と同じ仮想ルームに参加している他の一部又は他の全部の通信端末に送信してもよい。
【0358】
S518：通信端末３０では、表示制御部３３が、図４８に示すような画面を表示させる。なお、通信端末３０が主催者の通信端末３０Ａの場合のみ、「再生同期」ボタン６１８、及び「各閲覧履歴記録」ボタン６１９が表示される。
【0359】
（共有部分動画再生）
図４９及び図５０を用いて、閲覧者が共有部分動画を再生する処理を説明する。図４９は、閲覧者が共有部分動画を再生する処理を示すシーケンス図である。図５０は、共有部分動画を再生した画面を示す図である。
図４９及び図５０を用いて、閲覧者が共有部分動画を再生する処理を説明する。図４９は、閲覧者が共有部分動画を再生する処理を示すシーケンス図である。図５０は、共有部分動画を再生した画面を示す図である。
【0360】
S531：通信端末３０の受付部３２は、任意の閲覧者から「共有部分動画再生」ボタン６５０の押下を受け付ける。
【0361】
S532：通信端末３０の通信部３１は、情報処理システム５０に対して、部分動画要求を送信する。これにより、情報処理システム５０の通信部５１は、部分動画要求を受信する。
【0362】
S533：情報処理システム５０では、記憶・読出部５９が部分平面動画の共有情報記憶部５００６（図１９参照）を検索することで、ここでは仮想ルーム（2021年10月12日 Ａ工事現場）の仮想ルームＩＤに関連付けて記憶されている部分平面動画の共有情報を読み出す。同様に、記憶・読出部５９が部分広視野動画の共有情報記憶部５００７（図２０参照）を検索することで、ここでは仮想ルーム（2021年10月12日 Ａ工事現場）の仮想ルームＩＤに関連付けて記憶されている部分広視野動画の共有情報を読み出す。但し、記憶・読出部５９は、注目フラグ「１」が付されていない部分平面動画の共有情報及び部分広視野動画の共有情報に絞り込んで読み出す。更に、記憶・読出部５９が、読み出した「部分平面動画の共有情報」及び「部分広視野動画の共有情報」に含まれる画像データＩＤに基づいて、画像管理情報記憶部５００１（図１４参照）を検索することで、対応する画像データの保存場所情報としてのＵＲＬを読み出す。
【0363】
S534,S535：通信部５１は、処理S533で読み出されたＵＲＬに対してアクセスし、ストレージ９０に記憶されている動画データ（平面動画、広視野動画）を取得する。
【0364】
S536：画面生成部５２は、処理S535で取得された動画データ、及び処理S533で読み出された「部分平面動画の共有情報」及び「部分広視野動画の共有情報」を用いて、図５０に示すような共有再生モードの画面を作成する。この場合、画面生成部５２は、ストレージ９０から取得した平面動画のうち、処理S533で読み出された「部分平面動画の共有情報」で示される「再生経過期間」の部分動画を切り出して、共有再生モードの画面を作成する。また、画面生成部５２は、ストレージ９０から取得した広視野動画のうち、処理S533で読み出された「部分平面動画の共有情報」で示される「視点情報」で特定される所定領域（図１０参照）の所定領域であって「再生経過期間」の部分動画を切り出して、図５０に示すような共有再生モードの画面を作成する。
【0365】
この場合の画面には、動画６５１，６５２，６５３及びこれらの各動画６５１，６５２，６５３の下に部分平面動画の共有情報（ここでは、閲覧者ＩＤ、再生経過期間）又は部分広視野動画の共有情報（ここでは、閲覧者ＩＤ、再生経過時間（処理S431の時間）と再生経過時間（処理S434の時間））が表示されている。ここでは、閲覧者ＩＤが示されているが、静止画共有情報記憶部５００５で、閲覧者名が管理されている等の場合には、画面生成部５２は、閲覧者ＩＤに替えて又は加えて、閲覧者名を表示させる画面を生成してもよい。また、画面生成部５２が生成する画面は、共有再生モードの表示領域６３０内全体であっても良いし、共有再生モードの表示領域６３０内の各ボタン６４０，６５０，６６０を除く表示領域であっても良いし、図５０に示す全体であっても良い。
【0366】
S537：通信部５１は、画面生成部５２によって生成された画面データを、部分動画要求の送信元の通信端末３０に送信する。なお、通信部５１は、画面生成部５２によって生成された画面データを、部分動画要求の送信元の通信端末３０と同じ仮想ルームに参加している他の一部又は他の全部の通信端末に送信してもよい。
【0367】
S538：通信端末３０では、表示制御部３３が、図５０に示すような画面を表示させる。なお、通信端末３０が主催者の通信端末３０Ａの場合のみ、「再生同期」ボタン６１８、及び「各閲覧履歴記録」ボタン６１９が表示される。
【0368】
（高注目部分動画再生）
図５１及び図５２を用いて、主催者以外の閲覧者が閲覧している動画部分のうち、主催者以外の通信端末３０で所定数よりも多く閲覧された部分動画（高注目部分動画）を再生する処理を説明する。図５１は、閲覧者が高注目部分動画を再生する処理を示すシーケンス図である。図５２は、高注目部分動画を再生した画面を示す図である。なお、以下では、所定数よりも多く閲覧された部分動画である一例として、最も多く閲覧された部分動画について説明するが、２番目以降に多く閲覧された部分動画であってもよい。
図５１及び図５２を用いて、主催者以外の閲覧者が閲覧している動画部分のうち、主催者以外の通信端末３０で所定数よりも多く閲覧された部分動画（高注目部分動画）を再生する処理を説明する。図５１は、閲覧者が高注目部分動画を再生する処理を示すシーケンス図である。図５２は、高注目部分動画を再生した画面を示す図である。なお、以下では、所定数よりも多く閲覧された部分動画である一例として、最も多く閲覧された部分動画について説明するが、２番目以降に多く閲覧された部分動画であってもよい。
【0369】
S551：通信端末３０の受付部３２は、任意の閲覧者から「高注目部分動画再生」ボタン６６０の押下を受け付ける。
【0370】
S552：通信端末３０の通信部３１は、情報処理システム５０に対して、高注目部分動画要求を送信する。これにより、情報処理システム５０の通信部５１は、高注目部分動画要求を受信する。
【0371】
S553：情報処理システム５０では、記憶・読出部５９が部分平面動画の共有情報記憶部５００６（図１９参照）を検索することで、ここでは仮想ルーム（2021年10月12日 Ａ工事現場）の仮想ルームＩＤに関連付けて記憶されている部分平面動画の共有情報を読み出す。同様に、記憶・読出部５９が部分広視野動画の共有情報記憶部５００７（図２０参照）を検索することで、ここでは仮想ルーム（2021年10月12日 Ａ工事現場）の仮想ルームＩＤに関連付けて記憶されている部分広視野動画の共有情報を読み出す。但し、記憶・読出部５９は、注目フラグ「１」が付されている部分平面動画の共有情報及び部分広視野動画の共有情報に絞り込んで読み出す。更に、記憶・読出部５９が、読み出した「部分平面動画の共有情報」及び「部分広視野動画の共有情報」に含まれる画像データＩＤに基づいて、画像管理情報記憶部５００１（図１４参照）を検索することで、対応する画像データの保存場所情報としてのＵＲＬを読み出す。
【0372】
S554,S555：通信部５１は、処理S533で読み出されたＵＲＬに対してアクセスし、ストレージ９０に記憶されている動画データ（平面動画、広視野動画）を取得する。
【0373】
S556：部分動画特定部６１は、各閲覧履歴（注目フラグ「１」が付された部分平面動画の共有情報、注目フラグ「１」が付された部分広視野動画の共有情報）に基づいて、主催者の通信端末３０Ａ以外の他の各表示端末３０Ｂ，３０Ｃ，３０Ｄで所定数よりも多く閲覧された動画における時間的な部分動画を特定する。例えば、通信端末３０Ｂ，３０Ｃ，３０Ｄのうち、通信端末３０Ｂと通信端末３０Ｃで、図４２に示すように同じ画像を拡大して閲覧していた場合には、全体の２／３の通信端末３０で閲覧していたため、高注目部分動画と特定される。
【0374】
S557：画面生成部５２は、処理S556で特定された部分動画の動画データ、及び処理S553で読み出された「部分平面動画の共有情報」又は「部分広視野動画の共有情報」を用いて、図５２に示すような共有再生モードの画面を作成する。この場合、画面生成部５２は、ストレージ９０から取得した平面動画のうち、処理S556で特定された部分動画を切り出して、共有再生モードの画面を作成する。また、画面生成部５２は、ストレージ９０から取得した広視野動画のうち、処理S556で特定された所定領域（図１０参照）の部分動画を切り出して、図５２に示すような共有再生モードの画面を作成する。
【0375】
この場合の画面には、動画６６１及び動画６６１の下に、高い注目の部分動画である旨の表示、及び部分平面動画の共有情報（ここでは、再生経過期間）又は部分広視野動画の共有情報（ここでは、再生経過時間（処理S431の時間）と再生経過時間（処理S434の時間））が表示されている。ここでは、閲覧者ＩＤが示されているが、静止画共有情報記憶部５００５で、閲覧者名が管理されている等の場合には、画面生成部５２は、閲覧者ＩＤに替えて又は加えて、閲覧者名を表示させる画面を生成してもよい。また、画面生成部５２が生成する画面は、共有再生モードの表示領域６３０内全体であっても良いし、共有再生モードの表示領域６３０内の各ボタン６４０，６５０，６６０を除く表示領域であってもよいし、図５２に示す全体であってもよい。
【0376】
S558：通信部５１は、画面生成部５２によって生成された画面データを、高注目部分動画要求の送信元の通信端末３０に送信する。なお、通信部５１は、画面生成部５２によって生成された画面データを、高注目部分動画要求の送信元の通信端末３０と同じ仮想ルームに参加している他の一部又は他の全部の通信端末に送信してもよい。
【0377】
S559：通信端末３０では、表示制御部３３が、図５０に示すような画面を表示させる。なお、通信端末３０が主催者の通信端末３０Ａの場合のみ、「再生同期」ボタン６１８、及び「各閲覧履歴記録」ボタン６１９が表示される。
【0378】
＜遠隔医療における通信システムの適用例＞
図５３は、通信システムが遠隔医療に適用された遠隔コミュニケーションの一例を説明する図である。図５４は、遠隔医療の場合において仮想ルームに撮像装置を対応付けるための仮想ルーム対応付け画面の一例を示す図である。図５５は、任意のユーザが通信端末をストレージに接続させて表示した仮想ルームリスト画面の一例を示す図である。図５６は、各拠点における表示画像のサムネイルを選択するための拠点表示画像選択画面の一例を示す図である。
図５３は、通信システムが遠隔医療に適用された遠隔コミュニケーションの一例を説明する図である。図５４は、遠隔医療の場合において仮想ルームに撮像装置を対応付けるための仮想ルーム対応付け画面の一例を示す図である。図５５は、任意のユーザが通信端末をストレージに接続させて表示した仮想ルームリスト画面の一例を示す図である。図５６は、各拠点における表示画像のサムネイルを選択するための拠点表示画像選択画面の一例を示す図である。
【0379】
なお、この場合の通信システム１ｂの説明において、図５３と図１との相違を説明する。図５３の拠点Ａは手術室であるが、(1)～(6)の処理の流れについては図１と同様でよい。図５３において、患者は手術台３５５に乗せられ、医師等の医療従事者による手術を受ける。医療従事者（ユーザに相当する）は、鉗子、メスなど各種の術具３５４を使用して、患者を手術する。また、医療従事者はスマートグラス８８を装着でき、医療従事者の術野の画像を通信ネットワークＮに送信できる。また、手術室には、術場カメラ３５１、術野カメラ３５２、内視鏡３５３など、各種のカメラが撮像装置１０と同様の撮像装置として配置される。また、これらの撮像装置は何れも広視野画像を生成するための画像を撮像する撮像機能を有していてもよい。手術室の全ての撮像装置及びスマートグラス８８は仮想ルームと対応付けられる例として説明する。
【0380】
手術室には、患者のバイタル及び医療機器の動作状態等をモニターするメインユニット３５６が配置される。メインユニット３５６が本実施形態の通信端末３０に相当する。手術室にある通信端末３０（メインユニット３５６）は図1の機能に加えて、内視鏡３５３又は術野カメラ３５２の映像を受信する機能も備えていてもよい。通信端末３０は受信した広視野画像を含む映像をディスプレイ３０６に表示できるし、情報処理システム５０に通信端末３０の拠点の映像として送信することができる。操作パネル３５７は各種操作を受け付ける入力インターフェースであって、医療従事者が手術室にある機器を、操作パネル３５７を介して操作できるようにしてもよい。また、内視鏡３５３、術場カメラ３５１及び術野カメラ３５２は通信端末３０を介さずに直接、情報処理システム５０と通信してもよい。このように、複数の撮像装置１０を同じ仮想ルームに対応付けることができるため、遠隔拠点のユーザは拠点Ａの現場の様々なシーンを切り取った広視野画像の録画を要求することができる。例えば、患者の体内を撮像した映像を録画したい場合には内視鏡３５３に対応する撮像装置の映像に対して録画要求を送信し、手術室全体の状況を録画したい場合には術場カメラ３５１に対応する撮像装置の映像に対して録画要求を送信することができる。
【0381】
また、通信端末３０は電子カルテシステムの機能を備えていてもよいし、電子カルテシステムと通信する機能を備えていてもよい。通信端末３０はディスプレイ３０６に電子カルテの情報を表示してもよい。また、ストレージ９０が電子カルテシステムであってもよい。このような場合に、録画要求に応じて録画した広視野画像（及び関連付けられた視点情報）の録画データは、関連付け処理部５３によって患者の電子カルテと関連付けて保存されてもよい。また、ストレージ９０の保存場所が示すフォルダは、患者又は手術ごとに分類されていてもよい。また、仮想ルーム情報記憶部５００２には、患者又は手術内容を示す情報が関連付けて記憶されていてもよい。このようにすることで、通信端末３０の閲覧画面に常に患者又は手術に関する情報を表示し続けることができる。
【0382】
【0383】
遠隔医療の場合、仮想ルーム対応付け画面８６０には、例えば遠隔で行われる手術又は診察に関連付けられた仮想ルーム８６１の一覧が表示される。拠点Ａには全天球カメラである撮像装置１０を含む医療用カメラが対応付けられる。医療用カメラは、内視鏡(T111)、手術室内で術野撮像に用いる術場カメラ、顕微鏡画像を撮像するカメラ等を含む。
【0384】
このように、医療現場の場合、複数のカメラが使用されるため、図５４に示すように、複数の手術のうちのいずれかを選択するだけでなく、各手術で使用された複数のカメラ(T111,T222,T333,T444)のうちの特定のカメラを選択するためのボタンが表示されている。
【0385】
【0386】
また、図４１に対応する図５６の拠点表示画像選択画面８１０では、図４１のサムネイル６２１～６２４に対応するサムネイル８２１～８２４が表示されている。また、図４１の「再生同期」ボタン６１８及び「各閲覧履歴記録」ボタン６１９に対応する「再生同期」ボタン８１８及び「各閲覧履歴記録」ボタン８１９が表示されている。
【0387】
＜実施形態の主な効果＞
以上説明したように本実施形態によれば、複数のユーザが同じタイミングで、既に録画された動画を再生して閲覧する場合、複数のユーザのうちの任意のユーザが、同じ動画を閲覧している複数のユーザのうちの他のユーザにより、その動画のどの時間的な部分動画が注目されているかを把握することができるという効果を奏する。
以上説明したように本実施形態によれば、複数のユーザが同じタイミングで、既に録画された動画を再生して閲覧する場合、複数のユーザのうちの任意のユーザが、同じ動画を閲覧している複数のユーザのうちの他のユーザにより、その動画のどの時間的な部分動画が注目されているかを把握することができるという効果を奏する。
【0388】
＜その他の適用例＞
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
【0389】
例えば、図１３などの構成例は、情報処理システム５０、撮像装置１０、及び、通信端末３０による処理の理解を容易にするために、主な機能に応じて分割したものである。処理単位の分割の仕方又は名称によって本願発明が制限されることはない。情報処理システム５０、撮像装置１０、通信端末３０の処理は、処理内容に応じてさらに多くの処理単位に分割することもできる。また、１つの処理単位がさらに多くの処理を含むように分割することもできる。
【0390】
上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサ、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）、又は従来の回路モジュール等のデバイスを含むものとする。
【0391】
また、上述の装置群は、本明細書に開示された実施形態を実施するための複数のコンピューティング環境のうちの１つを示すものにすぎない。ある実施形態では、情報処理システム５０は、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、ネットワーク、共有メモリなどを含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。
【0392】
さらに、情報処理システム５０は、開示された処理ステップ、例えば図３０，図３１，図３２，図３８等を様々な組み合わせで共有するように構成できる。例えば、所定のユニットによって実行されるプロセスは、情報処理システム５０が有する複数の情報処理装置によって実行され得る。また、情報処理システム５０は、１つのサーバ装置にまとめられていても良いし、複数の装置に分けられていても良い。
【0393】
上記各プログラムは、（非一時的な）記録媒体に記録して提供することも、通信ネットワーク１００を介して提供することも可能である。
【符号の説明】
【0394】
１ａ、１ｂ 通信システム
１０ 撮像装置
３０ 通信端末（録画後に再生表示する場合は「表示端末」ともいう）
３１ 通信部（送信部の一例、受信部の一例）
３２ 受付部
３３ 表示制御部
５０ 情報処理システム
５１ 通信部（受信部の一例、送信部の一例）
５２ 画面生成部
６１ 部分動画特定部
３０６ ディスプレイ（表示部の一例）
１０ 撮像装置
３０ 通信端末（録画後に再生表示する場合は「表示端末」ともいう）
３１ 通信部（送信部の一例、受信部の一例）
３２ 受付部
３３ 表示制御部
５０ 情報処理システム
５１ 通信部（受信部の一例、送信部の一例）
５２ 画面生成部
６１ 部分動画特定部
３０６ ディスプレイ（表示部の一例）
【先行技術文献】
【特許文献】
【0395】
【特許文献1】特開２０２２－０３７４５９号公報
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図29】
【図30】
【図31】
【図32】
【図33】
【図34】
【図35】
【図36】
【図37】
【図38】
【図39】
【図40】
【図41】
【図42】
【図43】
【図44】
【図45】
【図46】
【図47】
【図48】
【図49】
【図50】
【図51】
【図52】
【図53】
【図54】
【図55】
【図56】