知財求人 - 知財ポータルサイト「IP Force」
特開2024-177885仮想空間システム、情報処理システム、同期方法、電子黒板
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024177885
(43)【公開日】2024-12-24
(54)【発明の名称】仮想空間システム、情報処理システム、同期方法、電子黒板
(51)【国際特許分類】
G09G 5/00 20060101AFI20241217BHJP
G06F 3/01 20060101ALI20241217BHJP
G09G 5/08 20060101ALI20241217BHJP
G09G 5/14 20060101ALI20241217BHJP
G09G 5/377 20060101ALI20241217BHJP
H04L 67/131 20220101ALI20241217BHJP
【ＦＩ】
G09G5/00 555D
G06F3/01 510
G09G5/00 510V
G09G5/00 510H
G09G5/08 D
G09G5/00 550B
G09G5/14 A
G09G5/00 530T
G09G5/377 100
H04L67/131
【審査請求】未請求
【請求項の数】16
【出願形態】ＯＬ
(21)【出願番号】P 2023096272
(22)【出願日】2023-06-12
(71)【出願人】
【識別番号】000006747
【氏名又は名称】株式会社リコー
(74)【代理人】
【識別番号】100107766
【弁理士】
【氏名又は名称】伊東 忠重
(74)【代理人】
【識別番号】100070150
【弁理士】
【氏名又は名称】伊東 忠彦
(72)【発明者】
【氏名】藤岡 進
【テーマコード（参考）】
5C182
5E555
【Ｆターム（参考）】
5C182AA03
5C182AA04
5C182AB04
5C182AB06
5C182AB08
5C182AB12
5C182AB14
5C182AB21
5C182AB31
5C182AB33
5C182AB37
5C182AC02
5C182AC12
5C182AC33
5C182AC38
5C182AC39
5C182BA03
5C182BA06
5C182BA65
5C182BB02
5C182BB03
5C182BB11
5C182BB21
5C182BB28
5C182BC25
5C182BC26
5C182CB52
5C182CB54
5C182CC11
5C182CC21
5C182DA44
5C182DA65
5C182DA68
5E555AA29
5E555AA61
5E555BA08
5E555BA13
5E555BA28
5E555BB08
5E555BB13
5E555BB28
5E555BC17
5E555BD09
5E555BE17
5E555DA08
5E555DA09
5E555DB33
5E555DB42
5E555DB43
5E555DC13
5E555FA00
(57)【要約】
【課題】仮想空間に表示されている複数の仮想電子黒板表示データからユーザが選択した仮想電子黒板表示データを現実の電子黒板と同期させること。
【解決手段】本発明は、仮想空間に表示された表示データを、現実の電子黒板に表示させる仮想空間システムであって、前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、を有する。
【選択図】図１
【解決手段】本発明は、仮想空間に表示された表示データを、現実の電子黒板に表示させる仮想空間システムであって、前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、を有する。
【選択図】図１
【特許請求の範囲】
【請求項1】
仮想空間に表示された表示データを、現実の電子黒板に表示させる仮想空間システムであって、
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、
を有する仮想空間システム。
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、
を有する仮想空間システム。
【請求項2】
前記同期制御部は、前記仮想空間に表示されている複数の前記表示データから任意の前記表示データの選択を受け付け、
選択を受け付けた前記表示データを、前記電子黒板が表示する前記画面データと同期させる請求項１に記載の仮想空間システム。
選択を受け付けた前記表示データを、前記電子黒板が表示する前記画面データと同期させる請求項１に記載の仮想空間システム。
【請求項3】
前記仮想空間システムは情報処理システムを有し、
前記情報処理システムは前記仮想空間で表示される表示データを表示するデバイスと通信し、
前記情報処理システムは前記デバイスから送信されたコマンドに基づいて、前記表示データを指し示すポインターを前記仮想空間に表示させるバーチャル表示制御部を有し、
前記ポインターが前記仮想空間にある前記表示データと重なった状態で所定の操作情報を前記デバイスから受信した場合、前記同期制御部は、前記ポインターと重なっている前記表示データを前記電子黒板が表示する前記画面データと同期させる請求項１又は２に記載の仮想空間システム。
前記情報処理システムは前記仮想空間で表示される表示データを表示するデバイスと通信し、
前記情報処理システムは前記デバイスから送信されたコマンドに基づいて、前記表示データを指し示すポインターを前記仮想空間に表示させるバーチャル表示制御部を有し、
前記ポインターが前記仮想空間にある前記表示データと重なった状態で所定の操作情報を前記デバイスから受信した場合、前記同期制御部は、前記ポインターと重なっている前記表示データを前記電子黒板が表示する前記画面データと同期させる請求項１又は２に記載の仮想空間システム。
【請求項4】
所定の前記操作情報は、前記デバイスと通信するコントローラのボタンを長押しする操作を含む、請求項３に記載の仮想空間システム。
【請求項5】
前記仮想空間システムは情報処理システムを有し、
前記情報処理システムは前記仮想空間にある任意の表示データを表示するデバイスと通信し、
前記情報処理システムは前記デバイスから送信されたコマンドに基づいて、前記表示データを指し示すポインターを前記仮想空間に表示させるバーチャル表示制御部を有し、
前記ポインターが前記仮想空間に表示されている前記表示データと重なった場合に、前記バーチャル表示制御部は該表示データを強調して表示し、
前記同期制御部は、該表示データを強調して表示している状態で、所定の操作情報を前記デバイスから受信した場合、前記ポインターと重なっている前記表示データを前記電子黒板が表示する前記画面データと同期させる請求項１又は２に記載の仮想空間システム。
前記情報処理システムは前記仮想空間にある任意の表示データを表示するデバイスと通信し、
前記情報処理システムは前記デバイスから送信されたコマンドに基づいて、前記表示データを指し示すポインターを前記仮想空間に表示させるバーチャル表示制御部を有し、
前記ポインターが前記仮想空間に表示されている前記表示データと重なった場合に、前記バーチャル表示制御部は該表示データを強調して表示し、
前記同期制御部は、該表示データを強調して表示している状態で、所定の操作情報を前記デバイスから受信した場合、前記ポインターと重なっている前記表示データを前記電子黒板が表示する前記画面データと同期させる請求項１又は２に記載の仮想空間システム。
【請求項6】
前記仮想空間に複数の前記表示データが表示されており、前記同期制御部が、第一の表示データを前記電子黒板と同期させている場合に、
第二の表示データを前記電子黒板と同期させる所定の前記操作情報を受信した場合、前記同期制御部は、前記第二の表示データを前記電子黒板と同期させる所定の前記操作情報を無効にする請求項３に記載の仮想空間システム。
第二の表示データを前記電子黒板と同期させる所定の前記操作情報を受信した場合、前記同期制御部は、前記第二の表示データを前記電子黒板と同期させる所定の前記操作情報を無効にする請求項３に記載の仮想空間システム。
【請求項7】
前記同期制御部が、前記第一の表示データを前記電子黒板と同期させている場合であっても、
前記電子黒板からペンアップを受信してから所定の時間が経過した後に、前記第二の表示データを前記電子黒板と同期させる所定の前記操作情報を受信した場合、前記同期制御部は、前記操作情報を無効にせず、前記第二の表示データを前記電子黒板が表示する前記画面データと同期させる請求項６に記載の仮想空間システム。
前記電子黒板からペンアップを受信してから所定の時間が経過した後に、前記第二の表示データを前記電子黒板と同期させる所定の前記操作情報を受信した場合、前記同期制御部は、前記操作情報を無効にせず、前記第二の表示データを前記電子黒板が表示する前記画面データと同期させる請求項６に記載の仮想空間システム。
【請求項8】
前記仮想空間に生成された仮想電子黒板のリストを前記電子黒板に送信し、
前記電子黒板において選択された前記仮想電子黒板の識別情報を受信した場合、前記同期制御部は、前記仮想電子黒板の識別情報で特定される前記表示データの選択を受け付け、
選択を受け付けた前記表示データを前記電子黒板が表示する画面データと同期させる請求項１に記載の仮想空間システム。
前記電子黒板において選択された前記仮想電子黒板の識別情報を受信した場合、前記同期制御部は、前記仮想電子黒板の識別情報で特定される前記表示データの選択を受け付け、
選択を受け付けた前記表示データを前記電子黒板が表示する画面データと同期させる請求項１に記載の仮想空間システム。
【請求項9】
前記仮想空間に表示されている１つ以上の前記表示データのサムネイル画像を前記電子黒板に送信し、
前記電子黒板において選択された前記表示データの識別情報を受信した場合、前記同期制御部は、選択された前記表示データの識別情報に対応付けられている前記表示データを前記電子黒板が表示する画面データと同期させる請求項８に記載の仮想空間システム。
前記電子黒板において選択された前記表示データの識別情報を受信した場合、前記同期制御部は、選択された前記表示データの識別情報に対応付けられている前記表示データを前記電子黒板が表示する画面データと同期させる請求項８に記載の仮想空間システム。
【請求項10】
前記同期制御部が前記第一の表示データを前記電子黒板と同期させた後に、
第二の表示データを前記電子黒板と同期させる場合、
前記同期制御部は、前記第二の表示データが前記電子黒板が表示していない表示データであっても、前記仮想空間で更新された前記表示データを前記電子黒板に送信することで同期させる請求項７に記載の仮想空間システム。
第二の表示データを前記電子黒板と同期させる場合、
前記同期制御部は、前記第二の表示データが前記電子黒板が表示していない表示データであっても、前記仮想空間で更新された前記表示データを前記電子黒板に送信することで同期させる請求項７に記載の仮想空間システム。
【請求項11】
前記電子黒板は、ユーザの操作に応じて、前記電子黒板が表示している表示データから、前記電子黒板が表示していない表示データに切り替えて表示する請求項１０に記載の仮想空間システム。
【請求項12】
前記同期制御部が、ユーザにより選択された前記表示データを、前記電子黒板が表示する前記画面データと同期させた場合、
前記電子黒板に手書きされた描画データを、ユーザにより選択された前記表示データに重ねて表示する請求項１に記載の仮想空間システム。
前記電子黒板に手書きされた描画データを、ユーザにより選択された前記表示データに重ねて表示する請求項１に記載の仮想空間システム。
【請求項13】
端末装置から受信した、前記端末装置がディスプレイに表示する画面データが前記仮想空間に表示されており、
前記表示データは、前記画面データがコピーされたものであり、
前記同期制御部は、ユーザにより前記画面データがコピーされた前記表示データが選択された場合、選択された前記表示データを前記電子黒板の画面データと同期させる請求項１に記載の仮想空間システム。
前記表示データは、前記画面データがコピーされたものであり、
前記同期制御部は、ユーザにより前記画面データがコピーされた前記表示データが選択された場合、選択された前記表示データを前記電子黒板の画面データと同期させる請求項１に記載の仮想空間システム。
【請求項14】
仮想空間に表示された表示データを、現実の電子黒板に表示させる情報処理システムであって、
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、
を有する情報処理システム。
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、
を有する情報処理システム。
【請求項15】
仮想空間に表示された表示データを、現実の電子黒板に表示させる仮想空間システムが行う同期方法であって、
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる、同期方法。
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる、同期方法。
【請求項16】
仮想空間に表示された表示データを、現実の電子黒板に表示させる仮想空間システムとネットワークを介して通信できる電子黒板であって、
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データと前記電子黒板が表示する画面データを同期させるため、前記表示データを受信するＬＡＮ通信制御部と、
前記ＬＡＮ通信制御部が受信した前記表示データをディスプレイに表示する表示制御部と、
を有する電子黒板。
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データと前記電子黒板が表示する画面データを同期させるため、前記表示データを受信するＬＡＮ通信制御部と、
前記ＬＡＮ通信制御部が受信した前記表示データをディスプレイに表示する表示制御部と、
を有する電子黒板。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、仮想空間システム、情報処理システム、同期方法、及び電子黒板に関する。
【背景技術】
【0002】
ＰＣ（Personal Computer）の画面や電子黒板の画面を仮想空間に表示させ、ユーザはＶＲ（Virtual Reality）ゴーグルを装着して仮想空間の画面を見ながら会議などの業務を可能にする技術が知られている。従来のオンライン会議などではＰＣの画面に電子黒板などの画面も表示させる必要があるが、仮想空間（ＶＲゴーグルの視界の中）ではＰＣの画面や電子黒板の画面等をそれぞれ表示させることができる。
【0003】
仮想空間に表示される電子黒板の画面を現実の電子黒板の画面と連携させる技術が知られている（例えば、特許文献１参照）。特許文献１には、現実の電子黒板への手書きによる描画データを仮想空間内の電子黒板の画面に反映させる技術が開示されている。
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、従来の技術では、仮想空間に複数の仮想電子黒板表示データが表示されている場合、現実の電子黒板への書き込みを同期させる仮想電子黒板表示データをユーザが選択できないという問題がある。現実の電子黒板が１つしかなくても、仮想空間には複数の電子黒板を生成可能なため、現実の電子黒板を仮想空間内のどの電子黒板と同期させるかをユーザが選択できないと種々の不都合が生じる。
【0005】
本発明は、上記課題に鑑み、仮想空間に表示されている複数の仮想電子黒板表示データからユーザが選択した仮想電子黒板表示データを現実の電子黒板と同期させる技術を提供する。
【課題を解決するための手段】
【0006】
上記課題に鑑み、本発明は、仮想空間に表示された表示データを、現実の電子黒板に表示させる仮想空間システムであって、前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、を有する。
【発明の効果】
【0007】
仮想空間に表示されている複数の仮想電子黒板表示データからユーザが選択した仮想電子黒板表示データを現実の電子黒板と同期させることができる。
【図面の簡単な説明】
【0008】
【図1】仮想空間システムの一例のシステム構成図である。
【図2】電子黒板の一例のハードウェア構成図である。
【図3】バーチャル会議サーバ及びノートＰＣの一例のハードウェア構成図である。
【図4】ＶＲゴーグルの一例のハードウェア構成図である。
【図5】ＶＲ用操作コントローラの一例のハードウェア構成図である。
【図6】バーチャル会議サーバ、ノートＰＣ、電子黒板、ＶＲゴーグル、及び、ＶＲ用操作コントローラの機能をブロックに分けて説明する一例の機能ブロック図である。
【図7】ユーザＡがバーチャル会議スペースにおける会議を開始するまでの処理を説明する一例のシーケンス図である。
【図8】ユーザＢがバーチャル会議スペースにおける会議に参加するまでの処理を説明する一例のシーケンス図である。
【図9】バーチャル会議スペースに表示される一例のメニュー一覧画面を示す図である。
【図10】バーチャル会議スペースに表示された一例のノートＰＣ表示データを示す図である。
【図11A】ユーザＡが仮想電子黒板表示データの画面を電子黒板に表示するために、ポインターを仮想電子黒板表示データに移動させる操作の一例のシーケンス図である（その１）。
【図11B】ユーザＡが仮想電子黒板表示データの画面を電子黒板に表示するために、ポインターを仮想電子黒板表示データに移動させる操作の一例のシーケンス図である（その２）。
【図12】ＶＲゴーグルにより閲覧可能な、バーチャル会議スペースに表示された一例の問い合わせ画面を示す図である。
【図13】手書きされた描画データが表示された電子黒板とバーチャル会議スペースの表示例を示す図である。
【図14】ユーザがポインターを仮想電子黒板に重ねることで枠が強調表示された一例の仮想電子黒板表示データを示す図である。
【図15】バーチャル会議スペースに表示された一例のメッセージを示す図である。
【図16】バーチャル会議スペースに表示された一例の同期確認画面２５０を示す図である。
【図17】バーチャル会議サーバの一例の機能構成図である。
【図18】バーチャル会議スペースに表示させている仮想電子黒板表示データのサムネイル画像を電子黒板が表示する処理を説明する一例のシーケンス図である。
【図19】電子黒板が有する一例の仮想ホワイトボード一覧表示ボタンを示す図である。
【図20】電子黒板が表示した仮想電子黒板表示データの一例のサムネイル画像を示す図である。
【図21】ユーザがディスプレイに表示させる仮想電子黒板表示データを切り替える操作を説明する図である。
【発明を実施するための形態】
【0009】
以下、本発明を実施するための形態の一例として仮想空間システムと、仮想空間システムが行う同期方法について図面を参照しながら説明する。
【0010】
＜用語について＞
電子黒板とは、タッチパネルを利用して手書きされた文字や図形などをリアルタイムにディスプレイ等に表示する機器である。電子黒板はネットワークに接続する機能を有したり、手書きされた文字をＯＣＲにてフォントデータに変換したりする機能などを有していてよい。
電子黒板とは、タッチパネルを利用して手書きされた文字や図形などをリアルタイムにディスプレイ等に表示する機器である。電子黒板はネットワークに接続する機能を有したり、手書きされた文字をＯＣＲにてフォントデータに変換したりする機能などを有していてよい。
【0011】
画面データとは、電子黒板やＰＣがディスプレイ（画面）に表示している画面を構成するデータである。画面データは画面から取り込まれた画像データでもよい。
【0012】
同期とは、２つ以上の異なる機器間で、データやファイルを同じ状態に保つことをいう。本実施形態では、同期は、仮想空間の電子黒板の表示データと現実の電子黒板の画面データを実用的な遅延（例えばリアルタイム）で同じ状態に保つことである。
【0013】
リアルタイムとは、何らかの状況変化に応じて、その変化とほぼ同時とみなせる許容時間の範囲内で、コンピュータが何らかの処理を行うことをいう。
【0014】
仮想空間とは、例えば３６０°の３次元空間をコンピュータで再現した仮想的な空間である。仮想空間は、ネットワーク上で人々が現実世界のように交流を持ったり社会的な営みを行ったりする場であることを、物理的な空間に例えた用語である。本実施形態では、主に仮想空間により会議室が再現されるが、仮想空間は任意の３次元空間を再現できる。また、本実施形態では、平面的である表示データが表示されればよいので仮想空間は２次元空間でもよい。
【0015】
仮想電子黒板表示データは、電子黒板が表示する画面データが、仮想空間で表示されたものをいう。したがって仮想電子黒板表示データは電子黒板が表示する画面データと同じものである。
【0016】
ユーザによる操作情報とは、ＶＲ用操作コントローラや電子黒板などの操作に関し、ユーザが同期させる仮想電子黒板表示データを選択する操作に関するものであればよい。
【0017】
ポインターとは、コンピュータの操作画面で入力位置を示すカーソルのひとつで、例えば矢印の形をしたアイコンのことをいう。ポインターは、通常は矢印の形をしている場合が多いが、コンピュータの状態やマウスポインタの位置に応じてカーソルの形状が変化することもある。
【0018】
仮想空間をユーザが閲覧するための表示装置は、本実施形態では、ＶＲゴーグルという用語で説明される。ＶＲゴーグルはＡＲ（Augmented Reality）ゴーグル、又は、ＭＲ（Mixed Reality）ゴーグルでもよい。
【0019】
［第一実施形態］
＜システム構成例＞
図１は、仮想空間システム３００のシステム構成図である。仮想空間システム３００には、バーチャル会議サーバ１とネットワークＮを介して、会議室１７や自宅１８のＷｉ－Ｆｉルータ３，１０、及び、電子黒板２が通信可能に接続されている。また、Ｗｉ－Ｆｉルータ３，１０にはノートＰＣ４，１１，１４が通信可能に接続できる。ネットワークＮは例えばインターネットであるが、社内ネットワークなどオンプレミスネットワークでもよい。
＜システム構成例＞
図１は、仮想空間システム３００のシステム構成図である。仮想空間システム３００には、バーチャル会議サーバ１とネットワークＮを介して、会議室１７や自宅１８のＷｉ－Ｆｉルータ３，１０、及び、電子黒板２が通信可能に接続されている。また、Ｗｉ－Ｆｉルータ３，１０にはノートＰＣ４，１１，１４が通信可能に接続できる。ネットワークＮは例えばインターネットであるが、社内ネットワークなどオンプレミスネットワークでもよい。
【0020】
バーチャル会議サーバ１は一台以上の情報処理装置を有する情報処理システムである。バーチャル会議サーバ１はメモリ上にバーチャル会議スペース８のデータを記憶してバーチャル会議アプリを実行する。以降、バーチャル会議サーバ１にて実行されるバーチャル会議アプリが提供するサービスをバーチャル会議サービスと称する。また、バーチャル会議スペース８とは、会議室を仮想空間で模倣した例えば３６０°の３次元空間である。ＶＲゴーグル５，１２，１５は仮想空間にある任意の表示データを表示するものであり、会議の参加者はＶＲゴーグル５，１２，１５によりバーチャル会議スペース８の任意の視点を閲覧できる。参加者はあたかも会議室に入室しているかのように会議室内に配置された機器の画面を見ることができる。
【0021】
バーチャル会議スペース８は、現実の電子黒板２から取得した画面であってこの画面と同期する仮想空間上の電子黒板（以降、仮想電子黒板４０と呼ぶ）の画面を有する。バーチャル会議スペース８は、ノートＰＣ４，１１，１４から取得した画面であってこの画面と同期する仮想空間上のノートＰＣ（以降、仮想ノートＰＣと呼ぶ）の画面を有する。バーチャル会議スペース８において仮想電子黒板４０の画面データを仮想電子黒板表示データ９ｃ，９ｄといい、ノートＰＣ４，１１，１４の画面データをＰＣ表示データ９ａ，９ｂという。図１では、仮想電子黒板４０と仮想電子黒板表示データ９ｃ，９ｄを同じものとして示した。なお、仮想電子黒板表示データ９ｃ，９ｄ、及び、ＰＣ表示データ９ａ，９ｂを区別しない場合、バーチャル会議スペース８に表示されるデータを表示データ９という。
【0022】
会議室１７には電子黒板２とＷｉ－Ｆｉルータ３が設置されており、ユーザＡがノートＰＣ４、ＶＲゴーグル５、及び、ＶＲ用操作コントローラ６を持参して会議室１７にいる。電子黒板２とＷｉ－Ｆｉルータ３はネットワークＮに接続されている。ノートＰＣ４とＶＲゴーグル５は、Ｗｉ－Ｆｉルータ３と無線ＬＡＮで通信する。ＶＲゴーグル５とＶＲ用操作コントローラ６は例えばBluetooth（登録商標。以下省略する）で接続されている。Bluetoothは無線ＬＡＮでもよい。ノートＰＣ４とＶＲゴーグル５もBluetooth（無線ＬＡＮでもよい）で接続されている。また、ノートＰＣ４と電子黒板２との間もBluetooth（無線ＬＡＮでもよい）で接続されている。
【0023】
ユーザＣはノートＰＣ１４、ＶＲゴーグル１５、及び、ＶＲ用操作コントローラ１６を持参して会議室にいる。ノートＰＣ１４とＶＲゴーグル１５は、Ｗｉ－Ｆｉルータ３と無線ＬＡＮで通信する。ＶＲゴーグル１５とＶＲ用操作コントローラ１６は例えばBluetooth（無線ＬＡＮでもよい）で接続されている。ノートＰＣ１４とＶＲゴーグル１５もBluetooth（無線ＬＡＮでもよい）で接続されている。また、ノートＰＣ１４と電子黒板２との間もBluetooth（無線ＬＡＮでもよい）で接続されている。
【0024】
会議室１７にある電子黒板２とノートＰＣ４，１４はそれぞれバーチャル会議アプリを実行している。バーチャル会議アプリはネイティブアプリでもＷｅｂアプリでもよい。
【0025】
一方、ユーザＢは自宅１８から会議に参加する。自宅１８にはＷｉ－Ｆｉルータ１０が設置されている。ユーザＢはノートＰＣ１１、ＶＲゴーグル１２、及び、ＶＲ用操作コントローラ１３を使用している。ユーザＢの自宅１８にあるＷｉ－Ｆｉルータ１０は、ネットワークＮと通信可能に接続されている。
【0026】
ユーザＢのノートＰＣ１１とＶＲゴーグル１２はＷｉ－Ｆｉルータ１０と無線ＬＡＮで通信する。ＶＲゴーグル１２とＶＲ用操作コントローラ１３はBluetooth（無線ＬＡＮでもよい）で接続されている。また、ノートＰＣ１１とＶＲゴーグルもBluetooth（無線ＬＡＮでもよい）で接続されている。ユーザＢのノートＰＣ１１はバーチャル会議アプリを実行している。
【0027】
なお、ノートＰＣ４，１１，１４はユーザが操作する端末装置の一例である。ノートＰＣ４，１１，１４は、単なるＰＣ、タブレット端末、スマートフォン、ＰＤＡ（Personal Digital Assistant）等、通信機能を備えバーチャル会議アプリが動作する情報処理装置であればよい。
【0028】
図１のような構成では、現実の電子黒板２が１つしかなくても、バーチャル会議スペース８には複数の仮想電子黒板をユーザが生成できる。仮に、現実の電子黒板２を仮想空間内のどの仮想電子黒板と同期させるかをユーザが選択できないと、ユーザが意図しない仮想電子黒板に、電子黒板２に手書きされた描画データが反映されるおそれがある。また、電子黒板２と同期する仮想電子黒板表示データが固定されてしまう。
【0029】
＜ハードウェア構成例＞
＜＜電子黒板＞＞
図２は、電子黒板２のハードウェア構成図である。図２に示されているように、電子黒板２は、ＣＰＵ(Central Processing Unit)４０１、ＲＯＭ(Read Only Memory)４０２、ＲＡＭ(Random Access Memory)４０３、ＳＳＤ(Solid State Drive)４０４、ネットワークＩ/Ｆ４０５、及び、外部機器接続Ｉ/Ｆ(Interface)４０６を備えている。
＜＜電子黒板＞＞
図２は、電子黒板２のハードウェア構成図である。図２に示されているように、電子黒板２は、ＣＰＵ(Central Processing Unit)４０１、ＲＯＭ(Read Only Memory)４０２、ＲＡＭ(Random Access Memory)４０３、ＳＳＤ(Solid State Drive)４０４、ネットワークＩ/Ｆ４０５、及び、外部機器接続Ｉ/Ｆ(Interface)４０６を備えている。
【0030】
これらのうち、ＣＰＵ４０１は、電子黒板２全体の動作を制御する。ＲＯＭ４０２は、ＩＰＬ(Initial Program Loader)等のＯＳの起動に用いられるプログラムを記憶する。ＲＡＭ４０３は、ＣＰＵ４０１のワークエリアとして使用される。ＳＳＤ４０４は、電子黒板２用のプログラム等の各種データを記憶する。ネットワークＩ/Ｆ４０５は、通信ネットワークとの通信を制御する。外部機器接続Ｉ/Ｆ４０６は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリ４３０、外付け機器（マイク４４０、スピーカ４５０、カメラ４６０）である。
【0031】
また、電子黒板２は、キャプチャデバイス４１１、ＧＰＵ４１２、ディスプレイコントローラ４１３、接触センサ４１４、センサコントローラ４１５、電子ペンコントローラ４１６、近距離通信回路４１９、及び近距離通信回路４１９のアンテナ４１９ａ、電源スイッチ４２２及び選択スイッチ類４２３を備えている。
【0032】
これらのうち、キャプチャデバイス４１１は、外付けのＰＣ４７０のディスプレイの表示情報を静止画又は動画として表示させる。ＧＰＵ(Graphics Processing Unit)４１２は、グラフィクスを専門に扱う半導体チップである。ディスプレイコントローラ４１３は、ＧＰＵ４１２からの出力画像をディスプレイ４８０等へ出力するために画面表示の制御及び管理を行う。接触センサ４１４は、ディスプレイ４８０上に電子ペン４９０やユーザの手Ｈ等が接触したことを検知する。センサコントローラ４１５は、接触センサ４１４の処理を制御する。接触センサ４１４は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ４８０の上側両端部に設置された２つ受発光装置が、ディスプレイ４８０に平行して複数の赤外線を放射し、ディスプレイ４８０の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。接触センサ４１４である受発光装置は、物体によって赤外線が遮断された位置（受光素子上の位置）をセンサコントローラ４１５に出力し、センサコントローラ４１５が、これらの２つの受光素子上の赤外線の遮断位置情報から物体の接触位置である座標位置を特定する。電子ペンコントローラ４１６は、電子ペン４９０とＢｌｕｅｔｏｏｔｈ通信することで、ディスプレイ４８０へのペン先のタッチやペン尻のタッチの有無を判断する。近距離通信回路４１９は、ＮＦＣ(Near Field Communication)やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。電源スイッチ４２２は、電子黒板２の電源のＯＮ／ＯＦＦを切り換えるためのスイッチである。選択スイッチ類４２３は、例えば、ディスプレイ４８０の表示の明暗や色合い等を調整するためのスイッチ群である。
【0033】
更に、電子黒板２は、バスライン４１０を備えている。バスライン４１０は、図２に示されているＣＰＵ４０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
【0034】
なお、接触センサ４１４は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネルでもよい。接触センサ４１４は、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネルでもよい。接触センサ４１４は、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルでもよい。この他、接触センサ４１４は種々の検出手段を用いてもよい。また、電子ペンコントローラ４１６が、電子ペン４９０のペン先及びペン尻だけでなく、電子ペン４９０のユーザが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。
【0035】
＜＜バーチャル会議サーバ及びノートＰＣ＞＞
図３は、バーチャル会議サーバ１及びノートＰＣ４，１１，１４の一例のハードウェア構成を示す図である。図３に示されているように、バーチャル会議サーバ１及びノートＰＣ４，１１，１４はコンピュータ５００によって構築されており、ＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ（Hard Disk）５０４、ＨＤＤ(Hard Disk Drive)コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ/Ｆ(Interface)５０８、ネットワークＩ/Ｆ５０９、バスライン５１０、キーボード５１１、ポインティングデバイス５１２、光学ドライブ５１４、メディアＩ/Ｆ５１６を備えている。
図３は、バーチャル会議サーバ１及びノートＰＣ４，１１，１４の一例のハードウェア構成を示す図である。図３に示されているように、バーチャル会議サーバ１及びノートＰＣ４，１１，１４はコンピュータ５００によって構築されており、ＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ（Hard Disk）５０４、ＨＤＤ(Hard Disk Drive)コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ/Ｆ(Interface)５０８、ネットワークＩ/Ｆ５０９、バスライン５１０、キーボード５１１、ポインティングデバイス５１２、光学ドライブ５１４、メディアＩ/Ｆ５１６を備えている。
【0036】
これらのうち、ＣＰＵ５０１は、バーチャル会議サーバ１及びノートＰＣ４，１１，１４全体の動作を制御する。ＲＯＭ５０２は、ＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶する。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される。ＨＤ５０４は、プログラム等の各種データを記憶する。ＨＤＤコントローラ５０５は、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出し又は書き込みを制御する。ディスプレイ５０６は、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示する。外部機器接続Ｉ/Ｆ５０８は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリやプリンタ等である。ネットワークＩ/Ｆ５０９は、ネットワークを利用してデータ通信をするためのインターフェースである。バスライン５１０は、図３に示されているＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
【0037】
また、キーボード５１１は、文字、数値、又は各種指示などの入力に使用される複数のキーを備えた入力手段の一種である。ポインティングデバイス５１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。光学ドライブ５１４は、着脱可能な記録媒体の一例としての光記憶媒体５１３に対する各種データの読み出し又は書き込みを制御する。なお、光記憶媒体５１３は、ＣＤ，ＤＶＤ、Ｂｌｕ－ｒａｙ（登録商標）等でよい。メディアＩ/Ｆ５１６は、フラッシュメモリ等の記録メディア５１５に対するデータの読み出し又は書き込み（記憶）を制御する。
【0038】
＜＜ＶＲゴーグル＞＞
図４は、ＶＲゴーグル５，１２，１５のハードウェア構成図である。ＶＲゴーグル５，１２，１５は、バス９４を介して接続されたＣＰＵ８０、メインメモリ８１、ＲＯＭ８２、表示コントローラ８６、無線ＬＡＮコントローラ８８、音声コーデック９０、及び動画像コーデック９３を有する。
図４は、ＶＲゴーグル５，１２，１５のハードウェア構成図である。ＶＲゴーグル５，１２，１５は、バス９４を介して接続されたＣＰＵ８０、メインメモリ８１、ＲＯＭ８２、表示コントローラ８６、無線ＬＡＮコントローラ８８、音声コーデック９０、及び動画像コーデック９３を有する。
【0039】
ＣＰＵ８０は、ＲＯＭ８２からメインメモリ８１に読み出されたＯＳや制御処理プログラムを実行し、処理する。メインメモリ８１は、ＤＲＡＭを有し、ＣＰＵ８０のワークエリア等で使用される。
【0040】
ＲＯＭ８２は、ＯＳ及び電源オン時のシステムプログラム、及び、ＶＲゴーグル５，１２，１５を制御するプログラムが予め書き込まれている。
【0041】
ＣＰＵ８０にはＵＡＲＴ８３が接続されている。ＵＡＲＴ８３は、ＣＰＵ８０とBluetoothモジュール８４との間でシリアルデータの授受を行うインターフェースであり、FIFO(First In, First Out)やシフトレジスタ等から構成される。
【0042】
Bluetoothモジュール８４は、ＲＦ部とベースバンド部から構成されており、またアンテナ８５が接続されており、Bluetooth規格に準拠した無線通信を実行する。
【0043】
表示コントローラ８６は文字データやグラフィックデータ、画像データ等をＤ/Ａ変換すると共に、これらのデータをＬＣＤ８７に表示するための制御を行う。
【0044】
無線ＬＡＮコントローラ８８は、IEEE(Institute of Electrical and Electronics Engineers)802.11ax規格に準拠した通信プロトコルを実行して、アンテナ８９を介した電波の送受信により他の機器との通信を制御する。
【0045】
マイク９１から入力された音声信号はA/D(Analog/Digital)変換回路により音声データに変換され、この音声データは音声コーデック９０によりAAC（Advanced Audio Coding）方式で符号化される。また、外部の機器から受信したAACの符号化データは音声コーデック９０により復号され、D/A変換回路によりアナログに変換された音声がスピーカ９２から出力される。動画像コーデック９３は外部の機器から受信した動画像圧縮データ（例えば、ITU－T勧告H.264に準拠した方式）を復号する。上記の各構成要素間はバス９４を介してデータの受け渡しを行う。
【0046】
＜＜ＶＲ用操作コントローラ＞＞
図５は、ＶＲ用操作コントローラ６，１３，１６のハードウェア構成図である。ＶＲ用操作コントローラ６，１３，１６は、ＣＰＵ１１０に接続された、ＵＡＲＴ１１７、メインメモリ１１１、ＲＯＭ１１２、６軸加速度・角速度センサ１１３、メニュー表示ボタン１１４、ポインター表示ボタン１１５、及び、確定ボタン１１６を有する。
図５は、ＶＲ用操作コントローラ６，１３，１６のハードウェア構成図である。ＶＲ用操作コントローラ６，１３，１６は、ＣＰＵ１１０に接続された、ＵＡＲＴ１１７、メインメモリ１１１、ＲＯＭ１１２、６軸加速度・角速度センサ１１３、メニュー表示ボタン１１４、ポインター表示ボタン１１５、及び、確定ボタン１１６を有する。
【0047】
ＣＰＵ１１０は、ＲＯＭ１１２からメインメモリ１１１に読み出された制御処理プログラムを実行し、処理する。メインメモリ１１１は、ＤＲＡＭを有し、ＣＰＵ１１０のワークエリア等として使用される。
【0048】
ＲＯＭ１１２には、電源オン時のシステムプログラム、メニュー表示ボタン１１４、ポインター表示ボタン１１５、及び、確定ボタン１１６の押下情報をBluetoothにより送信するプログラムが予め書き込まれている。
【0049】
６軸加速度・角速度センサ１１３は加速度と角速度の測定データを出力する。ＵＡＲＴ１１７は、ＣＰＵ１１０とBluetoothモジュール１１８との間でシリアルデータの授受を行うインターフェースであり、FIFOやシフトレジスタ等から構成される。Bluetoothモジュール１１８は、ＲＦ部とベースバンド部から構成されており、またアンテナ１１９が接続されており、Bluetooth規格に準拠した無線通信を実行する。
【0050】
＜機能について＞
次に、図６を参照して、仮想空間システム３００が有する機能構成について説明する。図６は、仮想空間システム３００におけるバーチャル会議サーバ１、ノートＰＣ４，１１，１４、電子黒板２、ＶＲゴーグル５，１２，１５、及び、ＶＲ用操作コントローラ６，１３，１６の機能をブロックに分けて説明する機能ブロック図の一例である。
次に、図６を参照して、仮想空間システム３００が有する機能構成について説明する。図６は、仮想空間システム３００におけるバーチャル会議サーバ１、ノートＰＣ４，１１，１４、電子黒板２、ＶＲゴーグル５，１２，１５、及び、ＶＲ用操作コントローラ６，１３，１６の機能をブロックに分けて説明する機能ブロック図の一例である。
【0051】
＜＜バーチャル会議サーバ＞＞
バーチャル会議サーバ１は、バーチャル会議制御部２０、ホワイトボード生成・管理部２１、同期制御部２２、通信制御部２３、会議データ記憶部２４、表示データ生成部２５、バーチャル表示制御部２６、ポインター位置算出部２７、ユーザ認証部２８、及び、ユーザ情報記憶部２９を有する。バーチャル会議サーバ１が有するこれら各部は、図３に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３に展開されたプログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能、又は機能する手段である。
バーチャル会議サーバ１は、バーチャル会議制御部２０、ホワイトボード生成・管理部２１、同期制御部２２、通信制御部２３、会議データ記憶部２４、表示データ生成部２５、バーチャル表示制御部２６、ポインター位置算出部２７、ユーザ認証部２８、及び、ユーザ情報記憶部２９を有する。バーチャル会議サーバ１が有するこれら各部は、図３に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３に展開されたプログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能、又は機能する手段である。
【0052】
バーチャル会議制御部２０は、会議の参加者と会議に接続する機器（ノートＰＣ４，１１，１４、電子黒板２、ＶＲゴーグル５，１２，１５）を会議の識別情報（会議ＩＤ）と対応付けて会議データ記憶部２４に記憶させる。バーチャル会議制御部２０は、会議ＩＤごとに、各機器との間でリモート会議を実行する。また、バーチャル会議制御部２０は、仮想電子黒板の画面データやバーチャル会議に接続する機器から受信する音声データ等を会議データ記憶部２４に記憶させる。
【0053】
ホワイトボード生成・管理部２１は、バーチャル会議スペース８内に仮想電子黒板を生成したり、仮想電子黒板表示データ９ｃ，９ｄ、ＰＣ表示データ９ａ，９ｂを管理したりする。
【0054】
同期制御部２２は、電子黒板２の画面データと仮想電子黒板表示データ９ｃ，９ｄが同じになるように、両者の同期をさせる手段である。同期制御部２２は、具体的には、電子黒板２の画面データ及び仮想電子黒板表示データ９ｃ，９ｄの更新を検知する機能、更新された電子黒板２の画面データを仮想電子黒板表示データ９ｃ，９ｄに反映させる機能、及び、更新された仮想電子黒板表示データ９ｃ，９ｄを電子黒板２の画面データに反映させる機能を含む。また、同期制御部２２は、バーチャル会議スペース８に表示されている複数の仮想電子黒板表示データから任意の仮想電子黒板表示データの選択を受け付ける。また、同期制御部２２は、電子黒板２に表示されユーザにより選択された仮想電子黒板表示データの選択を受け付ける。
【0055】
通信制御部２３は、ノートＰＣ４，１１，１４、ＶＲゴーグル５，１２，１５、及び電子黒板２との間でデータの送受信を実行する。
【0056】
会議データ記憶部２４は、仮想電子黒板表示データ９ｃ，９ｄ、ＰＣ表示データ９ａ，９ｂ、及び、バーチャル会議に接続する機器から受信する音声データ等を記憶する。
【0057】
表示データ生成部２５は、バーチャル会議スペース８に表示されるメニューやＶＲ用操作コントローラ６，１３，１６によって表示指示されたポインター１７０等を生成する。
【0058】
バーチャル表示制御部２６は、ＶＲゴーグル５，１２，１５から送信された操作情報に基づいて、仮想電子黒板表示データを指し示すポインター１７０をバーチャル会議スペース８に表示させる手段である。バーチャル表示制御部２６は、具体的には、バーチャル会議スペース８に種々の表示データを表示させる。バーチャル表示制御部２６は、表示データ生成部２５によって生成されたメニュー、ポインター１７０、ホワイトボード生成・管理部２１によって生成された仮想電子黒板に関する仮想電子黒板表示データ９ｃ，９ｄ、及び、ノートＰＣ４，１１，１４に関するＰＣ表示データ９ａ，９ｂ等をバーチャル会議スペース８に表示させる。バーチャル表示制御部２６はバーチャル会議スペース８の表示データをＶＲゴーグル５，１２，１５に通信制御部２３を介して送信して、ＶＲゴーグル５，１２，１５にバーチャル会議スペース８が表示される。
【0059】
ポインター位置算出部２７は、ＶＲ用操作コントローラ６，１３，１６の向きと動きによって指し示されたポインター１７０の位置（バーチャル会議スペース８における）を算出する。
【0060】
ユーザ認証部２８は、通信制御部２３を介して受信するユーザ名・パスワードと、ユーザ情報記憶部２９に記憶されたユーザ名・パスワードとを照合して、バーチャル会議に参加するユーザを認証する。
【0061】
ユーザ情報記憶部２９はバーチャル会議に参加するユーザのユーザ名及びパスワードを記憶している。
【0062】
＜＜ノートＰＣ＞＞
ノートＰＣ４，１１，１４は、バーチャル会議接続部３０、リモートデスクトップ制御部３１、無線ＬＡＮ通信制御部３２、Bluetooth通信制御部３３、表示制御部３４、及び、データ記憶部３５を有している。ノートＰＣ４，１１，１４が有するこれら各部は、図３に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３に展開されたプログラム（バーチャル会議アプリ）に従ったＣＰＵ５０１からの命令によって動作することで実現される機能、又は機能する手段である。
ノートＰＣ４，１１，１４は、バーチャル会議接続部３０、リモートデスクトップ制御部３１、無線ＬＡＮ通信制御部３２、Bluetooth通信制御部３３、表示制御部３４、及び、データ記憶部３５を有している。ノートＰＣ４，１１，１４が有するこれら各部は、図３に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３に展開されたプログラム（バーチャル会議アプリ）に従ったＣＰＵ５０１からの命令によって動作することで実現される機能、又は機能する手段である。
【0063】
バーチャル会議接続部３０は、バーチャル会議サーバ１のバーチャル会議サービスに接続して、認証用データであるユーザ名とパスワードを送信する。また、バーチャル会議接続部３０は、バーチャル会議サービスから受信するバーチャル会議スペース８のＵＲＬと会議ＩＤを管理すると共に、バーチャル会議スペース８のＵＲＬに接続して、バーチャル会議に参加する処理を行う。更に、バーチャル会議接続部３０は、バーチャル会議スペース８のＵＲＬと会議ＩＤをＶＲゴーグル５，１２，１５と電子黒板２へBluetooth通信制御部３３を介して送信する。
【0064】
リモートデスクトップ制御部３１は、ノートＰＣ４，１１，１４の画面データをバーチャル会議スペース８に表示させるためにバーチャル会議サービスに送信する。
【0065】
無線ＬＡＮ通信制御部３２は、Ｗｉ－Ｆｉルータ３，１０を介したバーチャル会議サーバ１との通信を実行する。
【0066】
Bluetooth通信制御部３３は、ＶＲゴーグル５，１２，１５及び電子黒板２とBluetooth規格に準拠した通信を実行する。表示制御部３４は画面データをディスプレイ（LCD）に表示するための制御を行う。
【0067】
データ記憶部３５は、バーチャル会議サーバ１にて提供されるバーチャル会議サービスのアドレス（ＵＲＬ）や、バーチャル会議サービスから受信するバーチャル会議スペース８のＵＲＬ、会議ＩＤ、ノートＰＣ４，１１，１４を使用するユーザのユーザ名、及び、パスワード等を記憶する。
【0068】
＜＜電子黒板＞＞
電子黒板２は、接触位置検出部７０、表示制御部７１、ＬＡＮ通信制御部７２、Bluetooth通信制御部７３、描画データ生成部７４、バーチャル会議接続部７５、及び、データ記憶部７６を有している。電子黒板２が有するこれら各部は、図２に示されている各構成要素のいずれかが、ＳＳＤ４０４からＲＡＭ４０３に展開されたプログラム（バーチャル会議アプリ）に従ったＣＰＵ４０１からの命令によって動作することで実現される機能、又は機能する手段である。
電子黒板２は、接触位置検出部７０、表示制御部７１、ＬＡＮ通信制御部７２、Bluetooth通信制御部７３、描画データ生成部７４、バーチャル会議接続部７５、及び、データ記憶部７６を有している。電子黒板２が有するこれら各部は、図２に示されている各構成要素のいずれかが、ＳＳＤ４０４からＲＡＭ４０３に展開されたプログラム（バーチャル会議アプリ）に従ったＣＰＵ４０１からの命令によって動作することで実現される機能、又は機能する手段である。
【0069】
接触位置検出部７０は、指や電子ペン４９０等がディスプレイ４８０に接することで、接触センサ４１４が検出した部分（光が遮断された部分）の座標データを検出する。
【0070】
表示制御部７１は、ＬＡＮ通信制御部７２が受信した仮想電子黒板表示データをディスプレイ４８０に表示する手段である。表示制御部７１は、具体的には、電子黒板２の画面データをディスプレイ４８０に表示するための制御を行う。
【0071】
ＬＡＮ通信制御部７２は、バーチャル会議スペース８に複数の仮想電子黒板表示データが表示されている場合、ユーザにより選択された仮想電子黒板表示データと電子黒板が表示する前記画面データを同期させるため、仮想電子黒板表示データを受信する手段である。 ＬＡＮ通信制御部７２は、具体的には、Ｗｉ－Ｆｉルータ３やイーサネット（登録商標）等のネットワークに接続して、他の機器とネットワークＮを介したデータの送受信を行う。
【0072】
Bluetooth通信制御部７３は、ノートＰＣ４，１１，１４とBluetooth規格に準拠した通信を実行する。描画データ生成部７４は、ユーザが手書きした際に接触位置検出部７０から入力した座標列から描画データを生成したり、円や矩形等の図形を生成したりする。
【0073】
バーチャル会議接続部７５は、ノートＰＣ４から送信されるバーチャル会議サービスのＵＲＬと会議ＩＤを使用して、バーチャル会議サーバ１にて実行されるバーチャル会議サービスに接続するための制御を行う。
【0074】
データ記憶部７６は、バーチャル会議サーバ１にて提供されるバーチャル会議サービスのアドレス（ＵＲＬ）や会議ＩＤ、及び、ディスプレイ４８０に表示された画面データ等を記憶する。
【0075】
＜＜ＶＲゴーグル＞＞
ＶＲゴーグル５，１２，１５は、表示制御部１００、無線ＬＡＮ通信制御部１０１、Bluetooth通信制御部１０２、バーチャル会議接続部１０３、ボタン情報転送部１０４、及び、データ記憶部１０５を有している。ＶＲゴーグル５，１２，１５が有するこれら各部は、図４に示されている各構成要素のいずれかが、ＲＯＭ８２からメインメモリ８１に展開されたプログラム（バーチャル会議アプリ）に従ったＣＰＵ８０からの命令によって動作することで実現される機能、又は機能する手段である。
ＶＲゴーグル５，１２，１５は、表示制御部１００、無線ＬＡＮ通信制御部１０１、Bluetooth通信制御部１０２、バーチャル会議接続部１０３、ボタン情報転送部１０４、及び、データ記憶部１０５を有している。ＶＲゴーグル５，１２，１５が有するこれら各部は、図４に示されている各構成要素のいずれかが、ＲＯＭ８２からメインメモリ８１に展開されたプログラム（バーチャル会議アプリ）に従ったＣＰＵ８０からの命令によって動作することで実現される機能、又は機能する手段である。
【0076】
表示制御部１００は、バーチャル会議サービスから送信される表示データをＬＣＤ８７に表示させるための制御を行う。無線ＬＡＮ通信制御部１０１は、Ｗｉ－Ｆｉルータ３，１０を介したバーチャル会議サーバ１との通信を実行する。
【0077】
Bluetooth通信制御部１０２は、ＶＲ用操作コントローラ６，１３，１６とBluetooth規格に準拠した通信を実行する。バーチャル会議接続部１０３はノートＰＣ４から送信されるバーチャル会議サービスのＵＲＬと会議ＩＤを使用して、バーチャル会議サーバ１にて実行されるバーチャル会議サービスに接続するための制御を行う。
【0078】
ボタン情報転送部１０４は、ＶＲ用操作コントローラ６，１３，１６からボタン押下情報を受信して、押下されたボタンに関する情報を、無線ＬＡＮ通信制御部１０１を介して、バーチャル会議サーバ１へ送信する。
【0079】
データ記憶部１０５はバーチャル会議サーバ１にて提供されるバーチャル会議サービスのアドレス（ＵＲＬ）や会議ＩＤ、ＶＲゴーグル５，１２を使用するユーザのユーザ名、及び、パスワード等を記憶する。
【0080】
＜＜ＶＲ用操作コントローラ＞＞
ＶＲ用操作コントローラ６，１３，１６は、Bluetooth通信制御部１２０、ボタン情報送信部１２１、及び、向き・動き検出部１２２を有している。ＶＲ用操作コントローラ６，１３，１６が有するこれらの機能は、図５に示したＲＯＭ１１２からメインメモリ１１１に展開されたプログラムに従ったＣＰＵ１１０からの命令によって動作することで実現される機能、又は機能する手段である。
ＶＲ用操作コントローラ６，１３，１６は、Bluetooth通信制御部１２０、ボタン情報送信部１２１、及び、向き・動き検出部１２２を有している。ＶＲ用操作コントローラ６，１３，１６が有するこれらの機能は、図５に示したＲＯＭ１１２からメインメモリ１１１に展開されたプログラムに従ったＣＰＵ１１０からの命令によって動作することで実現される機能、又は機能する手段である。
【0081】
Bluetooth通信制御部１２０は、ＶＲゴーグル５，１２，１５とBluetooth規格に準拠した通信を実行する。ボタン情報送信部１２１は、メニュー表示ボタン１１４、ポインター表示ボタン１１５、確定ボタン１１６の押下情報をBluetooth通信制御部１２０へ渡す。
【0082】
向き・動き検出部１２２は、６軸加速度・角速度センサ１１３から得られた加速度と角速度のデータからＶＲ用操作コントローラ６，１３，１６の向き（３次元空間の姿勢）と動きを検出して、これらの情報をBluetooth通信制御部１２０へ渡す。
【0083】
＜動作又は処理＞
続いて、図７を参照して、ユーザＡとユーザＢがノートＰＣ４，１１とＶＲゴーグル５，１２を使用してバーチャル会議サーバ１にあるバーチャル会議スペース８に参加して、仮想空間における会議を開始するまでの手順について説明する。
続いて、図７を参照して、ユーザＡとユーザＢがノートＰＣ４，１１とＶＲゴーグル５，１２を使用してバーチャル会議サーバ１にあるバーチャル会議スペース８に参加して、仮想空間における会議を開始するまでの手順について説明する。
【0084】
まず、ユーザＡがノートＰＣ４、ＶＲゴーグル５、及びＶＲ用操作コントローラ６を持参して会議室１７に入ると、ノートＰＣ４はBluetoothにより電子黒板２があることを検出する。Bluetoothデバイスは定期的に周辺に（Bluetoothの電波が届く範囲に）Bluetoothデバイスが存在しているか否かをチェックしている。ノートＰＣ４は、Bluetoothデバイスを検出すると、デバイス識別プロファイル（Device Identification Profile）に含まれる製品ＩＤにより、そのデバイスが電子黒板２であることを検出する。
【0085】
会議主催者であるユーザＡはノートＰＣ４のバーチャル会議アプリを起動すると、バーチャル会議接続部３０はバーチャル会議サーバ１のバーチャル会議サービスに接続して、ユーザ名とパスワードの入力画面を表示する。以下では、バーチャル会議サーバ１とバーチャル会議サービスを特に区別せず、主にバーチャル会議サービスを用いて説明する。なお、バーチャル会議サービスのＵＲＬはバーチャル会議アプリの設定データとしてノートＰＣ４に予め登録されている。
【0086】
ユーザＡがユーザ名とパスワードを入力すると、バーチャル会議接続部３０は、無線ＬＡＮ通信制御部３２を介して、ユーザ名とパスワードをバーチャル会議サービスへ送信する。バーチャル会議サービスはこのユーザを認証して認証ＯＫのレスポンスをノートＰＣ４に送信する。
【0087】
図７は、ユーザＡがバーチャル会議スペース８における会議を開始するまでの処理を説明するシーケンス図である。
【0088】
S1：バーチャル会議接続部３０が無線ＬＡＮ通信制御部３２を介して、認証ＯＫのレスポンスを受信すると、ノートＰＣ４で動作するバーチャル会議アプリの表示制御部３４はバーチャル会議の開始ボタンと参加ボタンを表示する。ユーザＡは主催者なので開始ボタンを選択する。
【0089】
S2：バーチャル会議接続部３０は無線ＬＡＮ通信制御部３２を介して、バーチャル会議の開始コマンドをバーチャル会議サービスへ送信する。この送信は例えばHTTPが使用される。
【0090】
S3：バーチャル会議サービスのバーチャル会議制御部２０は通信制御部２３を介してこの開始コマンドを受信すると、バーチャル会議スペース８と会議ＩＤを生成する。
【0091】
S4：通信制御部２３は、バーチャル会議スペース８のＵＲＬと会議ＩＤをノートＰＣ４へ送信する。
【0092】
S5：ノートＰＣ４の無線ＬＡＮ通信制御部３２がこれらのデータを受信すると、バーチャル会議接続部３０は、無線ＬＡＮ通信制御部３２を介してバーチャル会議スペース８のＵＲＬに接続して、受信した会議ＩＤを含めた会議参加コマンドを送信する。
【0093】
S6：バーチャル会議サービスのバーチャル会議制御部２０は、この会議ＩＤをステップS3で生成した会議ＩＤと照合して一致を確認すると、ノートＰＣ４とバーチャル会議スペース８との接続（会議ＩＤに対応したバーチャル会議への参加）を許可する。
【0094】
S7：バーチャル会議制御部２０は通信制御部２３を介して、レスポンスＯＫをノートＰＣ４に送信する。
【0095】
S8：ノートＰＣ４の無線ＬＡＮ通信制御部３２がレスポンスＯＫを受信すると、バーチャル会議接続部３０は、Bluetooth通信制御部３３を介して、バーチャル会議スペース８のＵＲＬと会議ＩＤをユーザＡのＶＲゴーグル５へBluetoothで送信する。
【0096】
S9：ＶＲゴーグル５のBluetooth通信制御部１０２がこれらのデータを受信すると、バーチャル会議接続部１０３は無線ＬＡＮ通信制御部１０１を介して、バーチャル会議スペース８のＵＲＬに接続して、受信した会議ＩＤを含めた会議参加コマンドを送信する。
【0097】
S10：バーチャル会議サービスのバーチャル会議制御部２０は、この会議ＩＤをステップS3で生成した会議ＩＤと照合して一致を確認すると、ＶＲゴーグル５とバーチャル会議スペース８との接続（会議ＩＤに対応したバーチャル会議への参加）を許可する。
【0098】
S11：バーチャル会議制御部２０は通信制御部２３を介してレスポンスＯＫをＶＲゴーグル５に送信する。
【0099】
S11－2：バーチャル会議サービスのバーチャル表示制御部２６はバーチャル会議スペース８の表示データをＶＲゴーグル５に通信制御部２３を介して送信する。
【0100】
S11－3：ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１がこのデータを受信すると、表示制御部１００が受信したバーチャル会議スペース８の表示データをＬＣＤ８７に表示する。
【0101】
S12：ノートＰＣ４はバーチャル会議スペース８のＵＲＬと会議ＩＤをＶＲゴーグル５へ送信した後、バーチャル会議接続部３０は、Bluetooth通信制御部３３を介して、バーチャル会議スペース８のＵＲＬと会議ＩＤを電子黒板２へBluetoothで送信する。
【0102】
S13：電子黒板２のBluetooth通信制御部７３がこれらのデータを受信すると、バーチャル会議接続部７５がＬＡＮ通信制御部７２を介して、バーチャル会議スペース８のＵＲＬに接続して、受信した会議ＩＤを含めた会議参加コマンドを送信する。
【0103】
S14：バーチャル会議サービスのバーチャル会議制御部２０は、この会議ＩＤをステップS3で生成した会議ＩＤと照合して一致を確認すると、電子黒板２とバーチャル会議スペース８との接続（会議ＩＤに対応したバーチャル会議への参加）を許可する。
【0104】
S15：バーチャル会議制御部２０は通信制御部２３を介してレスポンスＯＫを電子黒板２に送信する。
【0105】
S16：ノートＰＣ４はバーチャル会議スペース８のＵＲＬと会議ＩＤを電子黒板２へ送信した後、バーチャル会議アプリの表示制御部３４は、リモートデスクトップの選択ボタンを表示する。
【0106】
S17：ユーザＡがリモートデスクトップの選択ボタンを押下する。
【0107】
S18：リモートデスクトップ制御部３１は、無線ＬＡＮ通信制御部３２を介して、ノートＰＣ４の画面データをバーチャル会議サービスに送信する。
【0108】
S19：バーチャル会議サービスのバーチャル表示制御部２６は通信制御部２３が受信したこの画面データをバーチャル会議スペース８に表示する（ＰＣ表示データ９ａ）。
【0109】
S20－1：バーチャル会議サービスのバーチャル表示制御部２６は通信制御部２３を介して受信したＰＣ表示データ９ａをＶＲゴーグル５へ送信する。
【0110】
S20－2：ＶＲゴーグル５の表示制御部１００は、このＰＣ表示データ９ａをＬＣＤ８７に表示させる。
【0111】
以上で、ユーザＡがバーチャル会議に参加し、ノートＰＣ４の画面データがＶＲゴーグル５に表示された。なお、バーチャル会議スペース８に表示されるノートＰＣ４の画面データはユーザＡのＶＲゴーグル５にしか表示させないように、バーチャル会議サービスのバーチャル表示制御部２６が制御する。
【0112】
＜＜ユーザＢのバーチャル会議への参加＞＞
続いて、ユーザＡはノートＰＣ４からバーチャル会議スペース８のＵＲＬと会議ＩＤを会議の他の参加者のノートＰＣにメールやインスタントメッセージで送信する。会議の参加者であるユーザＢはノートＰＣ１１のバーチャル会議アプリを起動すると、バーチャル会議接続部３０はバーチャル会議サービスに接続して、ユーザ名とパスワードの入力画面を表示する。なお、バーチャル会議サービスのＵＲＬはバーチャル会議アプリの設定データとしてノートＰＣ１１に予め登録されている。
続いて、ユーザＡはノートＰＣ４からバーチャル会議スペース８のＵＲＬと会議ＩＤを会議の他の参加者のノートＰＣにメールやインスタントメッセージで送信する。会議の参加者であるユーザＢはノートＰＣ１１のバーチャル会議アプリを起動すると、バーチャル会議接続部３０はバーチャル会議サービスに接続して、ユーザ名とパスワードの入力画面を表示する。なお、バーチャル会議サービスのＵＲＬはバーチャル会議アプリの設定データとしてノートＰＣ１１に予め登録されている。
【0113】
ユーザＢがユーザ名とパスワードを入力すると、バーチャル会議接続部３０はこれらのデータをバーチャル会議サービスへ送信する。バーチャル会議サービスはこのユーザを認証して認証ＯＫのレスポンスをノートＰＣ１１に送信する。ノートＰＣ１１のバーチャル会議アプリはバーチャル会議の開始ボタンと参加ボタンを表示する。
【0114】
図８は、ユーザＢがバーチャル会議スペース８における会議に参加するまでの処理を説明するシーケンス図である。
【0115】
S21：ユーザＢは参加者なので参加ボタンを選択する。
【0116】
S22：ノートＰＣ１１の表示制御部３４は、バーチャル会議スペース８のＵＲＬと会議ＩＤの入力画面を表示する。
【0117】
S23：ユーザＢはユーザＡから通知されたバーチャル会議スペース８のＵＲＬと会議ＩＤを入力してＯＫボタンを押下する。
【0118】
S24：バーチャル会議接続部３０は無線ＬＡＮ通信制御部３２を介して、この会議ＩＤを含めた接続コマンドをバーチャル会議スペース８のＵＲＬに送信する。
【0119】
S25：バーチャル会議サービスのバーチャル会議制御部２０は、この会議ＩＤをステップS3で生成した会議ＩＤと照合して一致を確認すると、ノートＰＣ１１とバーチャル会議スペース８との接続を許可する。
【0120】
S26：バーチャル会議制御部２０は通信制御部２３を介して、レスポンスＯＫをノートＰＣ１１に送信する。
【0121】
S27：続いて、ノートＰＣ１１のBluetooth通信制御部３３は、バーチャル会議スペース８のＵＲＬと会議ＩＤをユーザＢのＶＲゴーグル１２へBluetoothで送信する。
【0122】
S28：ＶＲゴーグル１２のBluetooth通信制御部１０２がこれらのデータを受信すると、バーチャル会議接続部１０３が無線ＬＡＮ通信制御部１０１を介して、この会議ＩＤを含めた接続コマンドをバーチャル会議スペース８のＵＲＬに送信する。
【0123】
S29：バーチャル会議サービスのバーチャル会議制御部２０は、この会議ＩＤをステップS3で生成した会議ＩＤと照合して一致を確認すると、ＶＲゴーグル１２とバーチャル会議スペース８との接続を許可する。
【0124】
S30：バーチャル会議制御部２０は通信制御部２３を介して、レスポンスＯＫをＶＲゴーグル１２に送信する。
【0125】
S30－2：バーチャル会議サービスのバーチャル表示制御部２６はバーチャル会議スペース８の表示データをＶＲゴーグル１２に通信制御部２３を介して送信する。
【0126】
S30－3：ＶＲゴーグル１２の無線ＬＡＮ通信制御部１０１がこのデータを受信すると、表示制御部１００が受信したバーチャル会議スペース８の表示データをＬＣＤ８７に表示する。
【0127】
S31：ノートＰＣ１１で動作するバーチャル会議アプリのバーチャル会議接続部３０は、バーチャル会議スペース８に接続すると、表示制御部３４がリモートデスクトップの選択ボタンを表示する。
【0128】
S32：ユーザＢがリモートデスクトップの選択ボタンを選択する。
【0129】
S33：ノートＰＣ１１のリモートデスクトップ制御部３１が無線ＬＡＮ通信制御部３２を介して、ノートＰＣ１１の画面データをバーチャル会議サービスに送信する。
【0130】
S34：バーチャル会議サービスのバーチャル表示制御部２６は、ノートＰＣ１１の画面データをバーチャル会議スペース８に表示する（ＰＣ表示データ９ｂ）。
【0131】
S35：バーチャル会議サービスのバーチャル表示制御部２６は、ＰＣ表示データ９ｂをＶＲゴーグル１２へ送信する。
【0132】
S36：ＶＲゴーグル１２の表示制御部１００は、ＰＣ表示データ９ｂをＬＣＤ８７に表示させる。
【0133】
なお、バーチャル会議スペース８に表示されるノートＰＣ１１の画面データはユーザＢのＶＲゴーグル１２にしか表示させないように、バーチャル会議サービスのバーチャル表示制御部２６が制御する。
【0134】
会議の他の参加者も上記のユーザＢと同様な操作を行い、各参加者のノートＰＣとＶＲゴーグルをバーチャル会議スペース８に接続させる。
【0135】
＜ＶＲ用操作コントローラの操作＞
ユーザＡ又はユーザＢがＶＲ用操作コントローラ６，１３にあるメニュー表示ボタン１１４を押すと、ＶＲ用操作コントローラ６，１３のBluetooth通信制御部１２０はメニュー表示コマンドをＶＲゴーグル５，１２へBluetoothで送信する。
ユーザＡ又はユーザＢがＶＲ用操作コントローラ６，１３にあるメニュー表示ボタン１１４を押すと、ＶＲ用操作コントローラ６，１３のBluetooth通信制御部１２０はメニュー表示コマンドをＶＲゴーグル５，１２へBluetoothで送信する。
【0136】
ＶＲゴーグル５，１２の無線ＬＡＮ通信制御部１０１はこのコマンドをバーチャル会議サービスへ送信する。バーチャル会議サービスはこのコマンドを受信すると、表示データ生成部２５がバーチャル会議に関するメニュー一覧を生成し、バーチャル会議スペース８に表示させる。このメニュー一覧の例を図９に示す。
【0137】
図９は、バーチャル会議スペース８に表示されるメニュー一覧画面２００を示す。メニュー一覧画面２００は、参加者一覧ボタン２０１、ホワイトボード生成ボタン２０２、及び、設定ボタン２０３を有する。参加者一覧ボタン２０１は、現在、会議ＩＤで特定される会議に参加している参加者の一覧を表示させるボタンである。ホワイトボード生成ボタン２０２は、バーチャル会議スペース８に仮想電子黒板を作成するためのボタンである。設定ボタン２０３は言語や文字サイズなど各種の設定画面を表示させるボタンである。
【0138】
また、ユーザＡ又はユーザＢがＶＲ用操作コントローラ６，１３にあるポインター表示ボタン１１５を押下すると、ＶＲ用操作コントローラ６，１３のBluetooth通信制御部１２０は、自デバイスの向きと動きの情報を含めたポインター表示コマンドをＶＲゴーグル５，１２へBluetoothで送信する。ＶＲゴーグル５，１２の無線ＬＡＮ通信制御部１０１は、このコマンドをバーチャル会議サービスへ送信する。バーチャル会議サービスはこのコマンドを受信すると、ポインター位置算出部２７がＶＲ用操作コントローラ６，１３の向きと動きの情報を基にポインター１７０の表示位置を算出する。バーチャル表示制御部２６は、バーチャル会議スペース８の算出された表示位置にポインター１７０を表示させる。
【0139】
なお、ユーザがポインター表示ボタン１１５を押している間、ＶＲ用操作コントローラ６，１３のBluetooth通信制御部１２０は自デバイスの向きと動きの情報を含めたポインター表示コマンドを定期的に（例えば100ミリ秒毎）ＶＲゴーグル５，１２へ送信する。ＶＲゴーグル５，１２の無線ＬＡＮ通信制御部１０１はこのコマンドをバーチャル会議サービスへ送信する。ポインター位置算出部２７がＶＲ用操作コントローラ６，１３の向きと動きの情報を基にポインター１７０の表示位置を算出する。バーチャル会議サービスのバーチャル表示制御部２６は、ポインター１７０が移動してバーチャル会議スペース８の表示に変化があると、バーチャル会議スペース８の表示データをＶＲゴーグル５，１２に送信する。したがって、バーチャル会議スペース８をポインター１７０が移動するように制御される。
【0140】
ユーザＡ又はユーザＢがＶＲ用操作コントローラ６，１３にある確定ボタン１１６を押すと、ＶＲ用操作コントローラ６，１３のBluetooth通信制御部１２０は確定コマンドをＶＲゴーグル５，１２へBluetoothで送信する。ＶＲゴーグル５，１２の無線ＬＡＮ通信制御部１０１はこのコマンドをバーチャル会議サービスへ送信する。バーチャル会議サービスはこのコマンドを受信すると、ポインター１７０の表示位置に該当するメニューが選択（押下）されたと判断して、そのメニューに従った動作を行う。
【0141】
ユーザＡ（又はユーザＢ）が図９に示されたホワイトボード生成ボタン２０２にポインター１７０を移動して確定ボタン１１６を押下すると、ＶＲ用操作コントローラ６，１３は確定コマンドをＶＲゴーグル５，１２を介して、バーチャル会議サービスに送信する。バーチャル会議サービスはこのコマンドを受信するとホワイトボード生成・管理部２１が仮想電子黒板を生成し、バーチャル表示制御部２６がバーチャル会議スペース８に表示する。なお、仮想電子黒板の生成時の画面は白紙である。つまり、白紙の仮想電子黒板表示データがバーチャル会議スペース８に表示される。
【0142】
＜仮想電子黒板表示データの生成＞
この仮想電子黒板にユーザは、ノートＰＣ４，１１の画面データを表示させたり、任意の表示コンテンツ（写真や図形等）を表示させたりすることができる。図１では２つの仮想電子黒板（仮想電子黒板表示データ９ｃ、仮想電子黒板表示データ９ｄ）の画面が表示されている。仮想電子黒板表示データ９ｃには、バーチャル会議に参加しているユーザＣが操作するノートＰＣ１４の画面データが表示されている。
この仮想電子黒板にユーザは、ノートＰＣ４，１１の画面データを表示させたり、任意の表示コンテンツ（写真や図形等）を表示させたりすることができる。図１では２つの仮想電子黒板（仮想電子黒板表示データ９ｃ、仮想電子黒板表示データ９ｄ）の画面が表示されている。仮想電子黒板表示データ９ｃには、バーチャル会議に参加しているユーザＣが操作するノートＰＣ１４の画面データが表示されている。
【0143】
ユーザＣのノートＰＣ１４の画面データを仮想電子黒板に表示させる処理及び動作について説明する。ユーザＣがノートＰＣ１４のバーチャル会議アプリを起動して、上記のユーザＢと同様な操作を行うと、ノートＰＣ１４とＶＲゴーグル１５がバーチャル会議スペース８に接続する。そして、ユーザＣがノートＰＣ１４に表示されたリモートデスクトップの選択ボタンを選択すると、ノートＰＣ１４の画面データがバーチャル会議サービスに送信され、バーチャル会議スペース８にノートＰＣ１４の画面データ（仮想電子黒板表示データ９ｃ）が表示される。
【0144】
図１０は、バーチャル会議スペース８に表示されたノートＰＣ１４のノートＰＣ表示データ２１０を示す。ノートＰＣ表示データ２１０は、バーチャル会議スペース８のノートＰＣ１４の画面データが表示される画面表示領域２１２に移動用バー２１１が付加されている。画面表示領域２１２に仮想電子黒板表示データ９ｃが表示されている。ユーザＣがＶＲ用操作コントローラ１６にあるポインター表示ボタン１１５を押してポインター１７０をこの移動用バー２１１に重ねて長押しすると、ノートＰＣ１４の画面表示領域２１２を移動できる状態となる。ユーザＣがポインター表示ボタン１１５を押下しながらポインター１７０を移動させると、ノートＰＣ１４の画面表示領域２１２もそれに追従して移動する。
【0145】
ユーザＣがこの操作によりノートＰＣ１４の画面表示領域２１２を仮想電子黒板（白紙の仮想電子黒板表示データ）に重ねると、バーチャル会議サービスのバーチャル表示制御部２６はノートＰＣ１４の画面データを仮想電子黒板の画面にコピーして、仮想電子黒板４０にノートＰＣ１４の画面データ（仮想電子黒板表示データ９ｃ）が表示される。また、バーチャル表示制御部２６は、ノートＰＣ１４の画面データが表示されていた画面表示領域２１２及び移動用バー２１１を削除する。
【0146】
【0147】
S41：ユーザＡがＶＲ用操作コントローラ６にあるポインター表示ボタン１１５を押下する。
【0148】
S42：ＶＲ用操作コントローラ６のBluetooth通信制御部１２０は、自デバイスの向きと動きの情報を含めたポインター表示コマンドをＶＲゴーグル５へBluetoothで送信する。
【0149】
S43：ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１は、このコマンドをバーチャル会議サービスへ送信する。
【0150】
S44：バーチャル会議サービスの通信制御部２３がコマンドを受信すると、ポインター位置算出部２７がＶＲ用操作コントローラ６の位置と動きの情報を基にポインター１７０の表示位置を算出する。バーチャル表示制御部２６は、バーチャル会議スペース８におけるポインター１７０のアイコンと位置を決定する（ポインター表示処理）。
【0151】
S45：バーチャル会議サービスのバーチャル表示制御部２６は、通信制御部２３を介して、ポインター１７０を含むバーチャル会議スペース８の更新された表示データをＶＲゴーグル５に送信する。
【0152】
S46：ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１が表示データを受信し、表示制御部１００が更新された表示データを表示する。
【0153】
S47～S58：ユーザがポインター表示ボタン１１５を押している間、ＶＲ用操作コントローラ６のBluetooth通信制御部１２０は自デバイスの向きと動きの情報を含めたポインター表示コマンドを定期的に（例えば100ミリ秒毎）ＶＲゴーグル５へ送信する。ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１はこのコマンドをバーチャル会議サービスへ送信する。バーチャル会議サービスのポインター位置算出部２７がＶＲ用操作コントローラ６の向きと動きの情報を基にポインター１７０の表示位置を算出する。バーチャル会議サービスのバーチャル表示制御部２６は、ポインター１７０が移動してバーチャル会議スペース８の表示に変化があると、通信制御部２３を介して、バーチャル会議スペース８の表示データをＶＲゴーグル５に送信する。ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１が表示データを受信し、表示制御部１００が更新された表示データを表示する。
【0154】
S59：次に、ユーザＡはポインター表示ボタン１１５を押しながらポインター１７０を仮想電子黒板表示データ９ｃの表示領域に移動させる。そして、ユーザＡがポインター１７０を仮想電子黒板表示データ９ｃに重ねた状態でＶＲ用操作コントローラ６にあるポインター表示ボタン１１５を所定の時間、長押しする。
【0155】
S60：ＶＲ用操作コントローラ６のBluetooth通信制御部１２０は、自デバイスの向きと動きの情報を含めたポインター表示コマンドを所定の時間間隔毎にＶＲゴーグル５へBluetoothで送信する。
【0156】
S61：ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１はこのコマンドをバーチャル会議サービスへ送信する。ここではＶＲ用操作コントローラ６の向きと動きに変化がなかったとする。
【0157】
S62：バーチャル会議サービスの通信制御部２３がこのコマンドを受信すると、ポインター位置算出部２７がＶＲ用操作コントローラ６の向きと動きの情報を基にポインター１７０の表示位置を算出する。ここではＶＲ用操作コントローラ６の向きと動きに変化がなかったとする。
【0158】
S63～S65：ユーザＡがポインター１７０を仮想電子黒板表示データ９ｃに重ねた状態でＶＲ用操作コントローラ６にあるポインター表示ボタン１１５を所定の時間、長押ししている間、ステップS63～S65が繰り返し実行される。
【0159】
S66：ポインター１７０の表示位置の変化量が所定の値以下の場合が所定の回数（すなわち、所定時間）続くと、同期制御部２２はポインター１７０が同じ位置にある状態でポインター表示ボタン１１５が長押しされたこと（操作情報の一例）を検出し、ポインター１７０の表示位置にある仮想電子黒板表示データ９ｃの選択を受け付ける。ユーザが同期させる意図がないのに、単にポインター１７０を仮想電子黒板表示データ９ｃに所定時間、重ねただけかもしれないので、同期制御部２２は同期させて良いかをユーザに問い合わせる。
【0160】
同期制御部２２はポインター１７０の表示位置に対応したアクションをユーザに選択させる情報をバーチャル表示制御部２６へ渡す。バーチャル表示制御部２６はこの情報を受けると、「この画面を電子黒板に表示しますか？」というメッセージの表示データを生成して、バーチャル会議スペース８に表示する。
【0161】
S67：バーチャル会議サービスのバーチャル表示制御部２６は、通信制御部２３を介して、上記のメッセージの表示を含むバーチャル会議スペース８の更新された表示データをＶＲゴーグル５に送信する。
【0162】
S68：ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１は表示データを受信し、表示制御部１００が更新された表示データを表示する。
【0163】
図１２は、ＶＲゴーグル５により閲覧可能な、バーチャル会議スペース８に表示された問い合わせ画面２３０を示す。問い合わせ画面２３０は、メッセージ２３１、YESボタン２３２、及びNOボタン２３３を表示する。ここでは、ユーザＡがYESボタン２３２を押下する場合を説明する。
【0164】
S69～80：ユーザＡはポインター表示ボタン１１５を押しながらポインター１７０をYESボタン２３２の表示領域に移動させる。ユーザがポインター表示ボタン１１５を押している間、ＶＲ用操作コントローラ６のBluetooth通信制御部１２０は自デバイスの向きと動きの情報を含めたポインター表示コマンドを定期的に（例えば100ミリ秒毎）ＶＲゴーグル５へ送信する。ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１はこのコマンドをバーチャル会議サービスへ送信する。バーチャル会議サービスのポインター位置算出部２７がＶＲ用操作コントローラ６の向きと動きの情報を基にポインター１７０の表示位置を算出する。バーチャル会議サービスのバーチャル表示制御部２６は、ポインター１７０が移動してバーチャル会議スペース８の表示に変化があると、通信制御部２３を介して、バーチャル会議スペース８の表示データをＶＲゴーグル５に送信する。ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１は表示データを受信し、表示制御部１００が更新された表示データを表示する。これにより、バーチャル会議スペース８のポインター１７０がYESボタン２３２に移動する。
【0165】
S81：ユーザＡが、ポインター１７０がYESボタン２３２に重なった状態で確定ボタン１１６を押下する。
【0166】
S82：ＶＲ用操作コントローラ６のBluetooth通信制御部１２０は確定コマンドをＶＲゴーグル５へBluetoothで送信する。
【0167】
S83：ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１はこのコマンドをバーチャル会議サービスへ送信する。
【0168】
S84：バーチャル会議サービスの通信制御部２３がこのコマンドを受信すると、同期制御部２２がポインター１７０の位置に基づいてYESボタン２３２の押下を検出し、ステップS66のポインター表示ボタン１１５の長押しで特定されている仮想電子黒板表示データ９ｃが選択されたことを確定する。同期制御部２２は通信制御部２３を介して、仮想電子黒板表示データ９ｃを会議室にある電子黒板２に送信する。
【0169】
S85：電子黒板２のＬＡＮ通信制御部７２は仮想電子黒板表示データ９ｃを受信し、表示制御部７１は、仮想電子黒板表示データ９ｃを画面データとしてディスプレイ４８０に表示する。なお、元々、仮想電子黒板表示データ９ｃは、ユーザＣが操作するノートＰＣ１４のＰＣ表示データがコピーされたものなので、ノートＰＣ１４の画面データが更新されると、これに同期してバーチャル会議スペース８の仮想電子黒板表示データ９ｃも更新され、更に電子黒板２が表示した仮想電子黒板表示データ９ｃも更新される。
【0170】
S86：ユーザＡはこの表示画面に対して文字等を手書きするため、ＶＲゴーグル５を外して、電子黒板２に手書きを行う。
【0171】
S87：電子黒板２の接触位置検出部７０は電子ペン４９０のペン先などの接触位置を検出し、描画データ生成部７４が描画データを生成する。表示制御部７１はこの手書きされた描画データをディスプレイ４８０に表示する。
【0172】
S88：電子黒板２のＬＡＮ通信制御部７２は、この手書きされた描画データをリアルタイムにバーチャル会議サービスへ送信する。
【0173】
S89：バーチャル会議サービスの通信制御部２３は描画データ受信し、同期制御部２２は描画データをバーチャル表示制御部２６へ渡す。バーチャル表示制御部２６はこの手書きの描画データを仮想電子黒板表示データ９ｃの画面データに合成することで仮想電子黒板表示データ９ｃを更新する。
【0174】
S90－1：バーチャル会議サービスの通信制御部２３は、更新後の仮想電子黒板表示データ９ｃをＶＲゴーグル５に送信する。
【0175】
S90－2：ＶＲゴーグル５の無線ＬＡＮ通信制御部１０１が仮想電子黒板表示データ９ｃを受信し、表示制御部１００が仮想電子黒板表示データ９ｃを更新する。
【0176】
図１３は、描画データが表示された電子黒板２とバーチャル会議スペース８の表示例を示す。図１３では、電子黒板２が、ユーザＣのノートＰＣ１４の画面データを表示している。電子黒板２の画面データに手書きされた描画データ１５０が表示されている。そして、バーチャル会議スペース８においても仮想電子黒板表示データ９ｃに同じ描画データ１５０が表示されている。
【0177】
このように、ユーザがバーチャル会議スペース８で複数の仮想電子黒板から任意の１つをポインター１７０等で選択すると、仮想電子黒板の画面データを現実の電子黒板２と同期させることができる。また、現実の電子黒板２への描画データは、リアルタイムに、ユーザが選択した、仮想電子黒板の表示データに反映できる。
【0178】
なお、本実施形態では、ノートＰＣ１４のノートＰＣ表示データ２１０が仮想電子黒板表示データ９ｃとして表示され、仮想電子黒板表示データ９ｃが電子黒板２の画面データに反映（同期）された。この流れと逆に、バーチャル会議サービスが電子黒板２の画面データ（仮想電子黒板表示データ）をバーチャル会議スペース８に表示させてもよい。この場合、電子黒板２がリモートデスクトップ制御部を有していればよい。リモートデスクトップ制御部が電子黒板２の画面データをバーチャル会議サービスに送信すれば、バーチャル会議サービスは仮想電子黒板を生成し、生成した直後に電子黒板２の画面データを仮想電子黒板表示データとしてバーチャル会議スペース８に表示できる。
【0179】
仮想電子黒板表示データ９ｃと重なったポインター表示ボタン１１５の長押しで、仮想電子黒板表示データ９ｃの選択の受け付けを確定してもよい。
また、本実施形態では、バーチャル会議スペース８に２つの仮想電子黒板が表示されている場合について説明したが、仮想電子黒板の数は１つでも３つ以上でもよい。
また、本実施形態では、バーチャル会議スペース８に２つの仮想電子黒板が表示されている場合について説明したが、仮想電子黒板の数は１つでも３つ以上でもよい。
【0180】
また、本実施形態では、バーチャル会議スペース８に表示された複数の仮想電子黒板の中から電子黒板２に表示させる仮想電子黒板の画面データを選択する方法として、ポインター１７０を仮想電子黒板に重ねた状態でＶＲ用操作コントローラ６にあるポインター表示ボタン１１５を長押しする場合について示した。しかし、ユーザがポインター１７０を仮想電子黒板に重ねると、その仮想電子黒板の枠が強調表示され、この状態で確定ボタン１１６を押すことにより仮想電子黒板表示データを選択してもよい。
【0181】
図１４は、ユーザがポインター１７０を仮想電子黒板に重ねることで枠１６０が強調表示された仮想電子黒板表示データ９ｃを示す。ユーザは枠１６０が表示された状態で確定ボタン１１６を押す。この操作情報がＶＲ用操作コントローラ６からＶＲゴーグル５へ、ＶＲゴーグル５からバーチャル会議サービスに送信され、同期制御部２２が仮想電子黒板表示データ９ｃの選択を受け付ける。ユーザがポインター表示ボタン１１５を長押ししなくても、仮想電子黒板表示データを選択できる。
【0182】
＜主な効果＞
本実施形態の仮想空間システム３００は、バーチャル会議スペース８に表示された複数の仮想電子黒板の任意の仮想電子黒板に対して、現実の電子黒板２を用いて手書きすることが可能となり、ユーザの利便性が向上する。現実の電子黒板２を用いてバーチャル会議スペース８上の任意の仮想電子黒板を、手書き対象の電子黒板２として、ユーザがＶＲ用操作コントローラ６を使用して簡単に選択できるため、ユーザの利便性が向上する。
本実施形態の仮想空間システム３００は、バーチャル会議スペース８に表示された複数の仮想電子黒板の任意の仮想電子黒板に対して、現実の電子黒板２を用いて手書きすることが可能となり、ユーザの利便性が向上する。現実の電子黒板２を用いてバーチャル会議スペース８上の任意の仮想電子黒板を、手書き対象の電子黒板２として、ユーザがＶＲ用操作コントローラ６を使用して簡単に選択できるため、ユーザの利便性が向上する。
【0183】
［第二実施形態］
バーチャル会議スペース８に複数の仮想電子黒板が生成されており、現実には１つ電子黒板２がある場合、１つの電子黒板２が複数の仮想電子黒板により共有される。しかし、あるユーザが第一の仮想電子黒板表示データ（第一の表示データの一例）を電子黒板２と同期させている状態で、別のユーザが第二の仮想電子黒板表示データ（第二の表示データの一例）を電子黒板２と同期させると、あるユーザが電子黒板２において第一の仮想電子黒板表示データに対し手書きしているのに、突然、電子黒板２の画面が第二の仮想電子黒板表示データに切り替わるおそれがある。
バーチャル会議スペース８に複数の仮想電子黒板が生成されており、現実には１つ電子黒板２がある場合、１つの電子黒板２が複数の仮想電子黒板により共有される。しかし、あるユーザが第一の仮想電子黒板表示データ（第一の表示データの一例）を電子黒板２と同期させている状態で、別のユーザが第二の仮想電子黒板表示データ（第二の表示データの一例）を電子黒板２と同期させると、あるユーザが電子黒板２において第一の仮想電子黒板表示データに対し手書きしているのに、突然、電子黒板２の画面が第二の仮想電子黒板表示データに切り替わるおそれがある。
【0184】
そこで、本実施形態では、別のユーザが第２の仮想電子黒板と電子黒板２を同期させた場合に、所定の条件の下、同期させる操作を無効にする仮想空間システム３００について説明する。
【0185】
なお、本実施形態では、上記の実施形態にて説明した図６の機能ブロック図を援用できるものとして説明する。
【0186】
＜仮想電子黒板と電子黒板を同期させる操作を無効＞
電子黒板２はディスプレイ４８０に電子ペン４９０が接触している状態（ペンダウン状態）からペンがタッチパネルを離れた（ペンアップ状態）後、所定の時間が経過するまで「手書き入力状態」であるとする。手書き入力状態は、現在、ユーザが電子黒板２に手書きしていることを示す。
電子黒板２はディスプレイ４８０に電子ペン４９０が接触している状態（ペンダウン状態）からペンがタッチパネルを離れた（ペンアップ状態）後、所定の時間が経過するまで「手書き入力状態」であるとする。手書き入力状態は、現在、ユーザが電子黒板２に手書きしていることを示す。
【0187】
会議室１７にはユーザＣも存在し、ユーザＡと同様にノートＰＣ１４、ＶＲゴーグル１５、ＶＲ用操作コントローラ１６を使用して会議に参加している。第一実施形態で説明したように、電子黒板２と仮想電子黒板表示データ９ｃの画面データが同期しており、ユーザＡが電子黒板２に手書き入力している間（手書き入力状態の時）に、ユーザＣが仮想電子黒板表示データ９ｄの画面に手書きをしたいと考えた。ユーザＣが、ＶＲ用操作コントローラ１６にあるポインター表示ボタン１１５を押してポインター１７０を表示させて、このポインター１７０を仮想電子黒板表示データ９ｄに重ねた状態でポインター表示ボタン１１５を長押しした。同期制御部２２は電子黒板２が手書き入力状態であると判断し、「他のユーザが使用中のため、この画面は電子黒板に表示できません」というメッセージを、バーチャル表示制御部２６を介してバーチャル会議スペース８に表示させる。
【0188】
図１５は、バーチャル会議スペース８に表示されたメッセージ２４１の一例を示す。このメッセージ２４１は、例えば仮想電子黒板表示データ９ｄに重ねて表示される。ユーザＣはメッセージ２４１を確認して、仮想電子黒板表示データ９ｄを電子黒板２と同期できないと判断できる。
【0189】
なお、図１４のように仮想電子黒板表示データに枠１６０が表示される場合のメッセージ２４１の表示について説明する。ユーザＣが、ポインター１７０を仮想電子黒板表示データ９ｄに重ねた状態でポインター確定ボタン１１６を押下する。同期制御部２２は電子黒板２が手書き入力状態であると判断し、メッセージ２４１をバーチャル表示制御部２６を介してバーチャル会議スペース８に表示させる。
【0190】
その後、ユーザＡが電子黒板２への手書き入力を終了して手書き入力状態が解除された。すなわち、ペンアップ後、所定の時間が経過した。電子黒板２は手書きされた描画データをリアルタイムにバーチャル会議サービスに送信するので、バーチャル会議サービスはペンアップ及びペンアップ後、所定の時間が経過したことを検出できる。
【0191】
ペンアップ後、所定の時間が経過した後に、ユーザＣがポインター１７０を仮想電子黒板表示データ９ｄに重ねた状態でポインター表示ボタン１１５を長押しした。同期制御部２２は、電子黒板２が手書き入力状態でないと判断する。同期制御部２２は、すでに仮想電子黒板表示データ９ｃが電子黒板２と同期していたので、バーチャル表示制御部２６を介して、確認のため「この画面を電子黒板に表示しますか？」というメッセージをバーチャル会議スペース８に表示させる。
【0192】
図１６は、バーチャル会議スペース８に表示された同期確認画面２５０の一例である。同期確認画面２５０には、メッセージ２５１と共に、YESボタン２５２とNOボタン２５３が表示されている。YESボタン２５２が押下されると、バーチャル会議サービスの同期制御部２２は通信制御部２３を介して、仮想電子黒板表示データ９ｄの表示データを会議室にある電子黒板２に送信する。電子黒板２は受信したこの画面データを表示する。
【0193】
図１４のように仮想電子黒板表示データに枠１６０が表示される場合も同様であり、ユーザＣが、ポインター１７０を仮想電子黒板表示データ９ｄに重ねた状態でポインター確定ボタン１１６を押下する。同期制御部２２は、電子黒板２が手書き入力状態でないと判断する。同期制御部２２は、すでに仮想電子黒板表示データ９ｃが電子黒板２と同期していたので、バーチャル表示制御部２６を介して、メッセージ２５１をバーチャル会議スペース８に表示させる。
【0194】
＜主な効果＞
会議室に複数の参加者がいる場合で、ある参加者がバーチャル会議スペース８に表示された仮想電子黒板に、電子黒板２への手書き描画を表示させている間は、バーチャル会議スペース８に表示された他の仮想電子黒板の画面を電子黒板２に表示させないようにできる。ユーザが手書きしている状態で意図しない表示に切り替わることを防止でき、ユーザの利便性が向上する。
会議室に複数の参加者がいる場合で、ある参加者がバーチャル会議スペース８に表示された仮想電子黒板に、電子黒板２への手書き描画を表示させている間は、バーチャル会議スペース８に表示された他の仮想電子黒板の画面を電子黒板２に表示させないようにできる。ユーザが手書きしている状態で意図しない表示に切り替わることを防止でき、ユーザの利便性が向上する。
【0195】
［第三実施形態］
第一実施形態では、電子黒板２に表示させるバーチャル会議スペース８内の仮想電子黒板を、ユーザがＶＲ用操作コントローラ６にあるポインター表示ボタン１１５の長押しで指定した。本実施形態では、バーチャル会議スペース８内に複数の仮想電子黒板がある場合に、ユーザは仮想電子黒板表示データのサムネイル画像の一覧を電子黒板２に表示して、電子黒板２にて電子黒板２と同期させる仮想電子黒板表示データを指定する。
第一実施形態では、電子黒板２に表示させるバーチャル会議スペース８内の仮想電子黒板を、ユーザがＶＲ用操作コントローラ６にあるポインター表示ボタン１１５の長押しで指定した。本実施形態では、バーチャル会議スペース８内に複数の仮想電子黒板がある場合に、ユーザは仮想電子黒板表示データのサムネイル画像の一覧を電子黒板２に表示して、電子黒板２にて電子黒板２と同期させる仮想電子黒板表示データを指定する。
【0196】
＜機能について＞
図１７は、本実施形態のバーチャル会議サーバ１の機能構成図を示す。図１７ではバーチャル会議サーバ１の機能のみを示す。図１７において、図６と同一の符号を付した構成要素は同様の機能を果たすので、主に本実施例の主要な構成要素についてのみ説明する場合がある。図１７には、サムネイル生成部１３０が追加されている。サムネイル生成部１３０は、バーチャル会議スペース８に表示されている仮想電子黒板表示データのサムネイル画像を生成する。
図１７は、本実施形態のバーチャル会議サーバ１の機能構成図を示す。図１７ではバーチャル会議サーバ１の機能のみを示す。図１７において、図６と同一の符号を付した構成要素は同様の機能を果たすので、主に本実施例の主要な構成要素についてのみ説明する場合がある。図１７には、サムネイル生成部１３０が追加されている。サムネイル生成部１３０は、バーチャル会議スペース８に表示されている仮想電子黒板表示データのサムネイル画像を生成する。
【0197】
【0198】
図１８は、バーチャル会議スペース８に表示させている仮想電子黒板表示データのサムネイル画像を電子黒板２が表示する処理を説明するシーケンス図である。図１９は、電子黒板２が有する仮想ホワイトボード一覧表示ボタン２６０の一例を示す。仮想ホワイトボード一覧表示ボタン２６０はメニュー一覧の一部のボタン（ソフトキー）でもよいし、ハードキーでもよい。仮想ホワイトボード一覧表示ボタン２６０は、バーチャル会議スペース８に複数の仮想電子黒板が生成された場合に、バーチャル会議サービスが電子黒板２にその旨を通知して、電子黒板２が自動的に表示してよい。
【0199】
こうすることで、バーチャル会議スペース８に仮想電子黒板が１つしかないのに、仮想ホワイトボード一覧表示ボタン２６０が表示され、ユーザが押下する手間を低減できる。すなわち、バーチャル会議スペース８に仮想電子黒板が１つしかない場合には、第一実施形態や本実施形態のようにユーザが仮想電子黒板表示データを選択しなくても、バーチャル会議サービスの同期制御部２２が仮想電子黒板表示データを電子黒板２と自動的に同期させてよい。
【0200】
S91：電子黒板２で実行されているバーチャル会議アプリは、バーチャル会議スペース８内の仮想電子黒板表示データのサムネイル画像を一覧表示させるための仮想ホワイトボード一覧表示ボタン２６０（図１９参照）を有する。まず、ユーザＡがこの仮想ホワイトボード一覧表示ボタン２６０を選択する。
【0201】
S92：仮想ホワイトボード一覧表示ボタン２６０の押下に応じて、電子黒板２のＬＡＮ通信制御部７２は仮想ホワイトボード一覧取得コマンドをバーチャル会議サービスへ送信する。
【0202】
S93：バーチャル会議サービスの通信制御部２３がこのコマンドを受信すると、サムネイル生成部１３０がバーチャル会議スペース８に表示させている仮想電子黒板表示データのサムネイル画像を生成する。図１のように２つの仮想電子黒板がある場合、サムネイル生成部１３０は、仮想電子黒板表示データ９ｃのサムネイル画像と仮想電子黒板表示データ９ｄのサムネイル画像を生成する。
【0203】
S94：バーチャル会議サービスの通信制御部２３は、これらのサムネイル画像と各サムネイル画像に対応した仮想電子黒板の識別情報を、仮想ホワイトボード一覧取得コマンドに対するレスポンスメッセージに含めて電子黒板２へ送信する。
【0204】
S95：電子黒板２のＬＡＮ通信制御部７２はこれらのデータを受信し、表示制御部７１は、受信したサムネイル画像をディスプレイ４８０に表示させる。この電子黒板２におけるサムネイル画像の表示例を図２０（ａ）に示す。
【0205】
図２０（ａ）は電子黒板２が表示した仮想電子黒板表示データのサムネイル画像２６１，２６２を示す。図２０に示すように、仮想ホワイトボード一覧表示ボタン２６０の押下時にバーチャル会議スペース８に存在する仮想電子黒板表示データのサムネイル画像２６１，２６２が一覧で表示される。ユーザは手Ｈや電子ペン４９０でサムネイル画像２６１，２６２を選択する。選択されたサムネイル画像２６１，２６２の識別情報がバーチャル会議サービスに送信される。
【0206】
なお、電子黒板２は、同期させる仮想電子黒板を選択可能に表示すればよく、仮想電子黒板表示データのサムネイル画像以外に、仮想電子黒板の識別情報リストを表示してもよい。
【0207】
図２０（ｂ）は電子黒板２が表示した仮想電子黒板のユーザ名リスト４６を示す。ユーザは手Ｈや電子ペン４９０でユーザ名を選択する。選択されたユーザ名がバーチャル会議サービスに送信される。ユーザ名は仮想電子黒板にコピーされたノートＰＣのオーナーであり、仮想電子黒板の識別情報である。ユーザ名リスト４６として表示される仮想電子黒板の識別情報は、例えば、バーチャル会議スペース８に生成されている仮想電子黒板の作成番号（例えば連番）、ユーザの場所、顔写真、アバター等でもよい。
【0208】
S96：ユーザが例えば仮想電子黒板表示データ９ｃのサムネイル画像をダブルクリックする。
【0209】
S97：電子黒板２のＬＡＮ通信制御部７２は仮想電子黒板表示データ９ｃのサムネイル画像に対応付けられた仮想電子黒板の識別情報を仮想ホワイトボード画面取得コマンドに含めてバーチャル会議サービスへ送信する。
【0210】
S98：バーチャル会議サービスの通信制御部２３がこのコマンドを受信すると、同期制御部２２は、仮想電子黒板の識別情報で特定される仮想電子黒板表示データの選択を受け付ける。同期制御部２２はバーチャル会議スペース８から選択を受け付けた仮想電子黒板表示データ９ｃを取得する。同期制御部２２は通信制御部２３を介して、電子黒板２に仮想電子黒板表示データ９ｃを送信する。
【0211】
S99：電子黒板２のＬＡＮ通信制御部７２が仮想電子黒板表示データ９ｃを受信し、表示制御部７１は仮想電子黒板表示データ９ｃを画面データとしてディスプレイ４８０に表示させる。
【0212】
S100：次に、ユーザが、仮想電子黒板表示データ９ｃを表示した電子黒板２に手書きを行った。
【0213】
S101：電子黒板２の接触位置検出部７０は電子ペン４９０のペン先などの接触位置を検出し、描画データ生成部７４が描画データを生成する。表示制御部７１はこの手書きされた描画データをディスプレイ４８０の画面に重畳させて表示する。
【0214】
S102：電子黒板２のＬＡＮ通信制御部７２は、この描画データをリアルタイムにバーチャル会議サービスへ送信する。
【0215】
S103：バーチャル会議サービスの通信制御部２３がこの描画データを受信すると、バーチャル表示制御部２６が仮想電子黒板表示データ９ｃに描画データを合成（重畳）することで、仮想電子黒板表示データ９ｃを更新する。描画データが同期した電子黒板２とバーチャル会議スペース８の表示例は図１３と同様である。
【0216】
＜同期後の画面データの切り替え＞
複数の仮想電子黒板表示データと電子黒板２が同期した後、電子黒板２は、１画面分、ディスプレイ４８０の画面データをスライドさせて、バーチャル会議スペース８に表示されている複数の仮想電子黒板表示データ９ｃ，９ｄを１画面ずつ切り替えて表示してもよい。
複数の仮想電子黒板表示データと電子黒板２が同期した後、電子黒板２は、１画面分、ディスプレイ４８０の画面データをスライドさせて、バーチャル会議スペース８に表示されている複数の仮想電子黒板表示データ９ｃ，９ｄを１画面ずつ切り替えて表示してもよい。
【0217】
図２１は、ユーザがディスプレイ４８０に表示させる仮想電子黒板表示データを切り替える操作を説明する図である。すでに、バーチャル会議スペース８の仮想電子黒板表示データ９ｃ，９ｄが選択された後であり、電子黒板２の画面データ４１，４２と仮想電子黒板表示データ９ｃ，９ｄが同期したことがある。電子黒板２は画面データ４１，４２がどの仮想電子黒板表示データ９ｃ，９ｄと対応付けられているかを保持しておく。
【0218】
例えばユーザが、仮想電子黒板表示データ９ｃが表示されている状態で左方向にフリックすると、電子黒板２は仮想電子黒板表示データ９ｄを画面データ４２として表示する。仮想電子黒板表示データ９ｄが表示されている状態でユーザが右方向にフリックすると、電子黒板２は仮想電子黒板表示データ９ｃを画面データ４１として表示する。電子黒板２が表示していない仮想電子黒板表示データがバーチャル会議スペース８で更新された場合、バーチャル会議サービスの同期制御部２２が、通信制御部２３を介して、更新後の仮想電子黒板表示データを電子黒板２に送信する。電子黒板２が表示していない仮想電子黒板表示データとは、ユーザが同期させるために最後に選択した仮想電子黒板表示データでない全ての仮想電子黒板表示データである。
【0219】
したがって、仮想電子黒板表示データといったん電子黒板２が同期した後は、ユーザは簡単な操作で画面データ４１、４２を切り替えることができる。ユーザが画面をスライドさせた直後から、画面データ４１、４２を仮想電子黒板表示データ９ｃ，９ｄと同期した状態で表示させることができる。
【0220】
＜主な効果＞
本実施形態によれば、電子黒板２に表示させるバーチャル会議スペース８の複数の仮想電子黒板を、ユーザが電子黒板２を操作して選択できるため、ユーザの利便性が向上する。１台の電子黒板２しかなくても、バーチャル会議スペース８に複数の仮想電子黒板表示データを保存しておけるので、ユーザは仮想電子黒板表示データを切り替えて、手書きすることができる。
本実施形態によれば、電子黒板２に表示させるバーチャル会議スペース８の複数の仮想電子黒板を、ユーザが電子黒板２を操作して選択できるため、ユーザの利便性が向上する。１台の電子黒板２しかなくても、バーチャル会議スペース８に複数の仮想電子黒板表示データを保存しておけるので、ユーザは仮想電子黒板表示データを切り替えて、手書きすることができる。
【0221】
＜その他の適用例＞
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
【0222】
例えば、本実施形態では、ユーザがＶＲ用操作コントローラを操作して仮想電子黒板表示データを選択したが、音声操作が利用されてよい。
【0223】
また、本実施形態では電子黒板の画面データをバーチャル会議スペース８に表示したが、プロジェクター、ＨＵＤ（Head Up Display）装置、テレビ受像機、デジタルカメラ、医療機器、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、ウェアラブルＰＣ等の画面データが表示されてもよい。２次元又は３次元で表示できる情報はバーチャル会議スペース８にて表示できる。
【0224】
また、電子黒板は、電子ホワイトボード、電子情報ボード、などと呼ばれてよい。また、本実施形態は、電子黒板に限らずタッチパネルを有する情報処理装置であれば好適に適用できる。タッチパネルを搭載した情報処理装置としては、タッチパネルを有するＰＣ、タブレット端末、スマートフォンなどがある。これらは、普段は汎用的な情報処理装置であるが、表示装置として機能するアプリケーションを実行した場合に、ユーザが表示装置として操作可能となる。
【0225】
また、本実施形態では、バーチャル会議スペース８に表示データが表示されているが、参加者のアバターがバーチャル会議スペース８に表示されてもよい。アバターとは、コンピューターグラフィックスで作成した参加者の分身をいう。参加者はＶＲゴーグル５，１２，１５を装着することで、バーチャル会議スペース８に存在する各参加者のアバターが現実の空間に存在するかのように把握できる。
【0226】
電子黒板２に手書きされている間、バーチャル表示制御部２６は同期されている仮想電子黒板表示データに手書きしている参加者のアバターを表示してもよい。この場合、電子黒板２は顔認証やログイン情報を使用して、手書きしている参加者を特定し、参加者の識別情報をバーチャル会議サービスに送信する。バーチャル表示制御部２６は、識別情報で特定した参加者のアバターを同期されている仮想電子黒板表示データの近くに表示させる。更に、バーチャル表示制御部２６は、アバターにペンのアイコンを持たせ、仮想電子黒板表示データにリアルタイムに表示される描画データの先端にアイコンのペン先を追従して表示するとよい。なお、アイコンが描画データや仮想電子黒板表示データを隠さないように半透明で表示されるとよい。
【0227】
また、バーチャル会議スペース８に複数の仮想電子黒板表示データが表示されており、任意の１つが現実の電子黒板２と同期されている場合、バーチャル表示制御部２６は電子黒板２と同期されている仮想電子黒板表示データを強調してもよい。強調とは、例えば仮想電子黒板表示データの枠を点滅させたり、やや大きく表示したりすることをいう。
【0228】
また、図６などの構成例は、仮想空間システム３００による処理の理解を容易にするために、主な機能に応じて分割したものである。処理単位の分割の仕方や名称によって本願発明が制限されることはない。仮想空間システム３００の処理は、処理内容に応じて更に多くの処理単位に分割することもできる。また、１つの処理単位が更に多くの処理を含むように分割することもできる。
【0229】
また、上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC(Application Specific Integrated Circuit)、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。
【0230】
本発明の実施形態は、コンピュータの能力及び機能性に大きな改善をもたらす。これらの改善により、ユーザは、情報処理装置において情報を格納し提示する方法であるテーブルとの、より効率的で堅牢な対話を提供するコンピュータを利用することができる。更に、本発明の実施形態は、より効率的で強力かつ堅牢なユーザーインターフェイスの使用を通じて、より良いユーザ体験を提供する。このようなユーザーインターフェイスは、人間と機械との間のより良い相互作用を提供する。
【0231】
＜付記＞
[付記１]
仮想空間に表示された表示データを、現実の電子黒板に表示させる仮想空間システムであって、
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、
を有する仮想空間システム。
[付記２]
前記同期制御部は、前記仮想空間に表示されている複数の前記表示データから任意の前記表示データの選択を受け付け、
選択を受け付けた前記表示データを、前記電子黒板が表示する前記画面データと同期させる付記１に記載の仮想空間システム。
[付記３]
前記仮想空間システムは情報処理システムを有し、
前記情報処理システムは前記仮想空間で表示される表示データを表示するデバイスと通信し、
前記情報処理システムは前記デバイスから送信されたコマンドに基づいて、前記表示データを指し示すポインターを前記仮想空間に表示させるバーチャル表示制御部を有し、
前記ポインターが前記仮想空間にある前記表示データと重なった状態で所定の操作情報を前記デバイスから受信した場合、前記同期制御部は、前記ポインターと重なっている前記表示データを前記電子黒板が表示する前記画面データと同期させる付記１又は２に記載の仮想空間システム。
[付記４]
所定の前記操作情報は、前記デバイスと通信するコントローラのボタンを長押しする操作を含む、付記３に記載の仮想空間システム。
[付記５]
前記仮想空間システムは情報処理システムを有し、
前記情報処理システムは前記仮想空間にある任意の表示データを表示するデバイスと通信し、
前記情報処理システムは前記デバイスから送信されたコマンドに基づいて、前記表示データを指し示すポインターを前記仮想空間に表示させるバーチャル表示制御部を有し、
前記ポインターが前記仮想空間に表示されている前記表示データと重なった場合に、前記バーチャル表示制御部は該表示データを強調して表示し、
前記同期制御部は、該表示データを強調して表示している状態で、所定の操作情報を前記デバイスから受信した場合、前記ポインターと重なっている前記表示データを前記電子黒板が表示する前記画面データと同期させる付記１又は２に記載の仮想空間システム。
[付記６]
前記仮想空間に複数の前記表示データが表示されており、前記同期制御部が、第一の表示データを前記電子黒板と同期させている場合に、
第二の表示データを前記電子黒板と同期させる所定の前記操作情報を受信した場合、前記同期制御部は、前記第二の表示データを前記電子黒板と同期させる所定の前記操作情報を無効にする付記３又は４に記載の仮想空間システム。
[付記７]
前記同期制御部が、前記第一の表示データを前記電子黒板と同期させている場合であっても、
前記電子黒板からペンアップを受信してから所定の時間が経過した後に、前記第二の表示データを前記電子黒板と同期させる所定の前記操作情報を受信した場合、前記同期制御部は、前記操作情報を無効にせず、前記第二の表示データを前記電子黒板が表示する前記画面データと同期させる付記６に記載の仮想空間システム。
[付記８]
前記仮想空間に生成された仮想電子黒板のリストを前記電子黒板に送信し、
前記電子黒板において選択された前記仮想電子黒板の識別情報を受信した場合、前記同期制御部は、前記仮想電子黒板の識別情報で特定される前記表示データの選択を受け付け、
選択を受け付けた前記表示データを前記電子黒板が表示する画面データと同期させる付記１に記載の仮想空間システム。
[付記９]
前記仮想空間に表示されている１つ以上の前記表示データのサムネイル画像を前記電子黒板に送信し、
前記電子黒板において選択された前記表示データの識別情報を受信した場合、前記同期制御部は、選択された前記表示データの識別情報に対応付けられている前記表示データを前記電子黒板が表示する画面データと同期させる付記８に記載の仮想空間システム。
[付記１０]
前記同期制御部が前記第一の表示データを前記電子黒板と同期させた後に、
第二の表示データを前記電子黒板と同期させる場合、
前記同期制御部は、前記第二の表示データが前記電子黒板が表示していない表示データであっても、前記仮想空間で更新された前記表示データを前記電子黒板に送信することで同期させる付記７に記載の仮想空間システム。
[付記１１]
前記電子黒板は、ユーザの操作に応じて、前記電子黒板が表示している表示データから、前記電子黒板が表示していない表示データに切り替えて表示する付記１０に記載の仮想空間システム。
[付記１２]
前記同期制御部が、ユーザにより選択された前記表示データを、前記電子黒板が表示する前記画面データと同期させた場合、
前記電子黒板に手書きされた描画データを、ユーザにより選択された前記表示データに重ねて表示する付記１～１０のいずれか１項に記載の仮想空間システム。
[付記１３]
端末装置から受信した、前記端末装置がディスプレイに表示する画面データが前記仮想空間に表示されており、
前記表示データは、前記画面データがコピーされたものであり、
前記同期制御部は、ユーザにより前記画面データがコピーされた前記表示データが選択された場合、選択された前記表示データを前記電子黒板の画面データと同期させる付記１～１２のいずれか１項に記載の仮想空間システム。
[付記１]
仮想空間に表示された表示データを、現実の電子黒板に表示させる仮想空間システムであって、
前記仮想空間に複数の前記表示データが表示されている場合、ユーザにより選択された前記表示データを、前記電子黒板が表示する画面データと同期させる同期制御部、
を有する仮想空間システム。
[付記２]
前記同期制御部は、前記仮想空間に表示されている複数の前記表示データから任意の前記表示データの選択を受け付け、
選択を受け付けた前記表示データを、前記電子黒板が表示する前記画面データと同期させる付記１に記載の仮想空間システム。
[付記３]
前記仮想空間システムは情報処理システムを有し、
前記情報処理システムは前記仮想空間で表示される表示データを表示するデバイスと通信し、
前記情報処理システムは前記デバイスから送信されたコマンドに基づいて、前記表示データを指し示すポインターを前記仮想空間に表示させるバーチャル表示制御部を有し、
前記ポインターが前記仮想空間にある前記表示データと重なった状態で所定の操作情報を前記デバイスから受信した場合、前記同期制御部は、前記ポインターと重なっている前記表示データを前記電子黒板が表示する前記画面データと同期させる付記１又は２に記載の仮想空間システム。
[付記４]
所定の前記操作情報は、前記デバイスと通信するコントローラのボタンを長押しする操作を含む、付記３に記載の仮想空間システム。
[付記５]
前記仮想空間システムは情報処理システムを有し、
前記情報処理システムは前記仮想空間にある任意の表示データを表示するデバイスと通信し、
前記情報処理システムは前記デバイスから送信されたコマンドに基づいて、前記表示データを指し示すポインターを前記仮想空間に表示させるバーチャル表示制御部を有し、
前記ポインターが前記仮想空間に表示されている前記表示データと重なった場合に、前記バーチャル表示制御部は該表示データを強調して表示し、
前記同期制御部は、該表示データを強調して表示している状態で、所定の操作情報を前記デバイスから受信した場合、前記ポインターと重なっている前記表示データを前記電子黒板が表示する前記画面データと同期させる付記１又は２に記載の仮想空間システム。
[付記６]
前記仮想空間に複数の前記表示データが表示されており、前記同期制御部が、第一の表示データを前記電子黒板と同期させている場合に、
第二の表示データを前記電子黒板と同期させる所定の前記操作情報を受信した場合、前記同期制御部は、前記第二の表示データを前記電子黒板と同期させる所定の前記操作情報を無効にする付記３又は４に記載の仮想空間システム。
[付記７]
前記同期制御部が、前記第一の表示データを前記電子黒板と同期させている場合であっても、
前記電子黒板からペンアップを受信してから所定の時間が経過した後に、前記第二の表示データを前記電子黒板と同期させる所定の前記操作情報を受信した場合、前記同期制御部は、前記操作情報を無効にせず、前記第二の表示データを前記電子黒板が表示する前記画面データと同期させる付記６に記載の仮想空間システム。
[付記８]
前記仮想空間に生成された仮想電子黒板のリストを前記電子黒板に送信し、
前記電子黒板において選択された前記仮想電子黒板の識別情報を受信した場合、前記同期制御部は、前記仮想電子黒板の識別情報で特定される前記表示データの選択を受け付け、
選択を受け付けた前記表示データを前記電子黒板が表示する画面データと同期させる付記１に記載の仮想空間システム。
[付記９]
前記仮想空間に表示されている１つ以上の前記表示データのサムネイル画像を前記電子黒板に送信し、
前記電子黒板において選択された前記表示データの識別情報を受信した場合、前記同期制御部は、選択された前記表示データの識別情報に対応付けられている前記表示データを前記電子黒板が表示する画面データと同期させる付記８に記載の仮想空間システム。
[付記１０]
前記同期制御部が前記第一の表示データを前記電子黒板と同期させた後に、
第二の表示データを前記電子黒板と同期させる場合、
前記同期制御部は、前記第二の表示データが前記電子黒板が表示していない表示データであっても、前記仮想空間で更新された前記表示データを前記電子黒板に送信することで同期させる付記７に記載の仮想空間システム。
[付記１１]
前記電子黒板は、ユーザの操作に応じて、前記電子黒板が表示している表示データから、前記電子黒板が表示していない表示データに切り替えて表示する付記１０に記載の仮想空間システム。
[付記１２]
前記同期制御部が、ユーザにより選択された前記表示データを、前記電子黒板が表示する前記画面データと同期させた場合、
前記電子黒板に手書きされた描画データを、ユーザにより選択された前記表示データに重ねて表示する付記１～１０のいずれか１項に記載の仮想空間システム。
[付記１３]
端末装置から受信した、前記端末装置がディスプレイに表示する画面データが前記仮想空間に表示されており、
前記表示データは、前記画面データがコピーされたものであり、
前記同期制御部は、ユーザにより前記画面データがコピーされた前記表示データが選択された場合、選択された前記表示データを前記電子黒板の画面データと同期させる付記１～１２のいずれか１項に記載の仮想空間システム。
【符号の説明】
【0232】
１ バーチャル会議サーバ
２ 電子黒板
４，１１，１４ ノートＰＣ
５，１２，１５ ＶＲゴーグル
６，１３，１６ ＶＲ用操作コントローラ
８ バーチャル会議スペース
９ 表示データ
２ 電子黒板
４，１１，１４ ノートＰＣ
５，１２，１５ ＶＲゴーグル
６，１３，１６ ＶＲ用操作コントローラ
８ バーチャル会議スペース
９ 表示データ
【先行技術文献】
【特許文献】
【0233】
【特許文献1】特表２０２２－５２１１１７号公報
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11A】
【図11B】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】