知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024142254
(43)【公開日】2024-10-10
(54)【発明の名称】処理装置、プログラム及び処理方法
(51)【国際特許分類】
G06T 13/40 20110101AFI20241003BHJP
G06F 3/01 20060101ALI20241003BHJP
H04L 67/131 20220101ALI20241003BHJP
H04N 7/14 20060101ALI20241003BHJP
【ＦＩ】
G06T13/40
G06F3/01 510
H04L67/131
H04N7/14 170
【審査請求】未請求
【請求項の数】7
【出願形態】ＯＬ
(21)【出願番号】P 2023054370
(22)【出願日】2023-03-29
(71)【出願人】
【識別番号】000000295
【氏名又は名称】沖電気工業株式会社
(74)【代理人】
【識別番号】100129067
【弁理士】
【氏名又は名称】町田 能章
(74)【代理人】
【識別番号】100183162
【弁理士】
【氏名又は名称】大塚 義文
(74)【代理人】
【識別番号】110001807
【氏名又は名称】弁理士法人磯野国際特許商標事務所
(72)【発明者】
【氏名】北口 太郎
【テーマコード（参考）】
5B050
5C164
5E555
【Ｆターム（参考）】
5B050BA09
5B050BA12
5B050CA07
5B050DA04
5B050EA07
5B050EA19
5B050FA05
5B050FA10
5C164FA10
5C164MA03S
5C164VA13P
5E555AA27
5E555AA61
5E555BA02
5E555BA76
5E555BB02
5E555BC08
5E555BD09
5E555BE17
5E555CA42
5E555CB65
5E555CB66
5E555CC05
5E555DB03
5E555DB32
5E555DC19
5E555DC21
5E555DD09
5E555EA08
5E555EA22
5E555FA00
(57)【要約】
【課題】同じ空間にいる感覚が得られるものであるとともに、仮想空間を手軽に利用できる、処理装置、プログラム及び処理方法を提供する。
【解決手段】第１の仮想空間を生成する第１処理部としての仮想オフィス空間処理部２３と、撮像部であるカメラ１１によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理部としてのアバター処理部２２と、前記アバターを前記第１の仮想空間に重畳した第２の仮想空間を生成する第３処理部としての重畳処理部２４と、を備え、前記第２処理部は、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成する。
【選択図】図１
【解決手段】第１の仮想空間を生成する第１処理部としての仮想オフィス空間処理部２３と、撮像部であるカメラ１１によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理部としてのアバター処理部２２と、前記アバターを前記第１の仮想空間に重畳した第２の仮想空間を生成する第３処理部としての重畳処理部２４と、を備え、前記第２処理部は、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成する。
【選択図】図１
【特許請求の範囲】
【請求項1】
第１の仮想空間を生成する第１処理部と、
撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理部と、
前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理部と、を備え、
前記第２処理部は、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成する、
ことを特徴とする処理装置。
撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理部と、
前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理部と、を備え、
前記第２処理部は、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成する、
ことを特徴とする処理装置。
【請求項2】
前記第３処理部は、前記アバターの視点で前記第２の仮想空間を見た場合のアバター視点画像を生成し、前記ユーザが使用する端末に当該アバター視点画像を表示させる、
ことを特徴とする請求項１に記載の処理装置。
ことを特徴とする請求項１に記載の処理装置。
【請求項3】
前記第３処理部は、入力部を介して視線及び視野の少なくとも何れか一方に関する操作情報を取得し、当該操作情報に基づいて前記アバター視点画像を生成する、
ことを特徴とする請求項２に記載の処理装置。
ことを特徴とする請求項２に記載の処理装置。
【請求項4】
前記第３処理部は、第１ユーザと第２ユーザとがコミュニケーション中である場合、前記第１ユーザのアバターと前記第２ユーザのアバターとの関連付けを行い、当該関連付けを反映した前記第２の仮想空間を生成する、
ことを特徴とする請求項１に記載の処理装置。
ことを特徴とする請求項１に記載の処理装置。
【請求項5】
前記第３処理部は、前記ユーザの座席位置を示す座席位置情報に基づいて前記第２の仮想空間に前記アバターを配置するものであり、
前記第１ユーザと前記第２ユーザとのコミュニケーションの開始を検知した場合に、前記第１ユーザのアバターの座席位置と、前記第２ユーザの隣の座席に配置される第３ユーザのアバターの座席位置とを変更する、
ことを特徴とする請求項４に記載の処理装置。
前記第１ユーザと前記第２ユーザとのコミュニケーションの開始を検知した場合に、前記第１ユーザのアバターの座席位置と、前記第２ユーザの隣の座席に配置される第３ユーザのアバターの座席位置とを変更する、
ことを特徴とする請求項４に記載の処理装置。
【請求項6】
コンピュータを、
第１の仮想空間を生成する第１処理部、
撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理部、
前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理部、として機能させ、
前記第２処理部は、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成するものである、
ことを特徴とするプログラム。
第１の仮想空間を生成する第１処理部、
撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理部、
前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理部、として機能させ、
前記第２処理部は、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成するものである、
ことを特徴とするプログラム。
【請求項7】
処理装置の処理方法であって、
前記処理装置は、
第１の仮想空間を生成する第１処理ステップと、
撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理ステップと、
前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理ステップと、を有し、
前記第２処理ステップでは、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成する、
ことを特徴とする処理方法。
前記処理装置は、
第１の仮想空間を生成する第１処理ステップと、
撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理ステップと、
前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理ステップと、を有し、
前記第２処理ステップでは、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成する、
ことを特徴とする処理方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、処理装置、プログラム及び処理方法に関する。
【背景技術】
【0002】
従来のＷｅｂ会議のコミュニケーションの装置（システム）では、画面上における所定の区切られた領域に各ユーザの表示領域が割り当てられており、当該各ユーザの表示領域に、各ユーザの映像が表示されるものであった（例えば、特許文献１参照）。
また、従来のＶＲ（Virtual Reality）ゴーグルを利用したコミュニケーションの装置（システム）では、ＶＲゴーグルの装着やコントローラを用いる必要があった（例えば、非特許文献１参照）。
また、従来のＶＲ（Virtual Reality）ゴーグルを利用したコミュニケーションの装置（システム）では、ＶＲゴーグルの装着やコントローラを用いる必要があった（例えば、非特許文献１参照）。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０２２－１２２１７９号公報
【非特許文献】
【0004】
【非特許文献1】“3Dアバターで会議に参加 ドコモが「XRテレプレゼンスミーティング」の実証実験”、[online]、アイティメディア株式会社、[令和５年３月１日検索]、インターネット＜https://www.itmedia.co.jp/mobile/articles/2101/14/news128.html＞
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかし、特許文献１に記載される従来のＷｅｂ会議のコミュニケーションの装置（システム）では、装置（システム）を利用するユーザにとって、同じ空間にいる感覚が得られない問題がある。
また、従来のＶＲゴーグルを利用したコミュニケーションの装置（システム）では、装置（システム）を利用するユーザにとって、同じ空間にいる感覚が得られるが、常にＶＲゴーグルの装着やコントローラを用いる必要がある。そのため、装置（システム）を利用するユーザにとって手間であり、また、専用機器の操作の習得が必要であるので、仮想オフィスの空間を手軽に利用できるものではなかった。
また、従来のＶＲゴーグルを利用したコミュニケーションの装置（システム）では、装置（システム）を利用するユーザにとって、同じ空間にいる感覚が得られるが、常にＶＲゴーグルの装着やコントローラを用いる必要がある。そのため、装置（システム）を利用するユーザにとって手間であり、また、専用機器の操作の習得が必要であるので、仮想オフィスの空間を手軽に利用できるものではなかった。
【0006】
本発明は、前記課題に鑑みてなされたものであり、同じ空間にいる感覚が得られるものであるとともに、仮想空間を手軽に利用できる、処理装置、プログラム及び処理方法を提供するものである。
【課題を解決するための手段】
【0007】
前記課題を解決するため、本発明に係る処理装置は、第１の仮想空間を生成する第１処理部と、撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理部と、前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理部と、を備え、前記第２処理部は、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成する、ことを特徴とする。
【0008】
また、本発明に係るプログラムは、コンピュータを、第１の仮想空間を生成する第１処理部、撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理部、前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理部、として機能させ、前記第２処理部は、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成するものである、ことを特徴とする。
【0009】
また、本発明に係る方法は、処理装置の処理方法であって、前記処理装置は、第１の仮想空間を生成する第１処理ステップと、撮像部によってユーザを撮影した映像に基づいて、当該ユーザのアバターを生成する第２処理ステップと、前記第１の仮想空間に前記アバターを配置した第２の仮想空間を生成する第３処理ステップと、を有し、前記第２処理ステップでは、前記映像から前記ユーザの動きに関する動き情報を生成し、当該動き情報を反映した前記アバターを生成する、ことを特徴とする。
【発明の効果】
【0010】
本発明によれば、同じ空間にいる感覚が得られるものであるとともに、仮想空間を手軽に利用することができる。
【図面の簡単な説明】
【0011】
【図1】本発明の第１実施形態に係る処理システムの概略構成図である。
【図2】本発明の第１実施形態に係る処理システムによって実現される仮想空間の例示であり、（ａ）は仮想空間を俯瞰で見た場合の図であり、（ｂ）及び（ｃ）はアバターにおける視野の例示である。
【図3】端末が有するカメラで参加者を撮影する様子を示した図である。
【図4】仮想物体（アバター）を生成する処理のイメージ図である。
【図5】端末を使用するユーザの動き情報の生成に係るシーケンス図の例示である。
【図6】本発明の第２実施形態に係る処理システムの概略構成図である。
【図7】座席位置情報記憶部のデータ構成例である。
【図8】プレゼンス情報記憶部のデータ構成例である。
【図9】本発明の第２実施形態に係る処理システムの動作例を示すシーケンス図である。
【図10】プレゼンス情報記憶部のデータ構成例である。
【図11】本発明の第２実施形態に係る処理システムによって実現される仮想空間の例示であり、（ａ）は仮想空間を俯瞰で見た場合の図であり、（ｂ）及び（ｃ）はアバターにおける視野の例示である。
【発明を実施するための形態】
【0012】
以下、本発明を実施するための形態を、適宜図面を参照しながら詳細に説明する。各図は、本発明を十分に理解できる程度に、概略的に示してあるに過ぎない。よって、本発明は、図示例のみに限定されるものではない。また、本実施形態では、本発明と直接的に関連しない構成や周知な構成については、説明を省略する場合がある。なお、各図において、共通する構成要素や同様な構成要素については、同一の符号を付し、それらの重複する説明を省略する。
【0013】
≪第１実施形態に係る処理システムの構成≫
図１を参照して、第１実施形態に係る処理システムの構成について説明する。図１は、処理システム１の概略構成図である。処理システム１は、仮想空間上のオフィス空間として利用できるものである。処理システム１は、インターネットを通じてビデオ通話（映像・音声のやり取り）、音声通話（音声のやり取り）、チャット通信などを行うことができるシステムである。処理システム１を用いることで、仮想空間上のオフィス空間において、例えば遠隔地にいる相手とリアルタイムで会議を行うことができる。
なお、以下の処理システム１に関わる説明は、仮想空間（仮想空間上のオフィス空間）に関わる映像の処理を中心に記載される。また、処理システム１における音声の処理は、従来の音声処理に関わる処理部にて構成されるので、以下の処理システム１に関わる説明は、省略される。
図１を参照して、第１実施形態に係る処理システムの構成について説明する。図１は、処理システム１の概略構成図である。処理システム１は、仮想空間上のオフィス空間として利用できるものである。処理システム１は、インターネットを通じてビデオ通話（映像・音声のやり取り）、音声通話（音声のやり取り）、チャット通信などを行うことができるシステムである。処理システム１を用いることで、仮想空間上のオフィス空間において、例えば遠隔地にいる相手とリアルタイムで会議を行うことができる。
なお、以下の処理システム１に関わる説明は、仮想空間（仮想空間上のオフィス空間）に関わる映像の処理を中心に記載される。また、処理システム１における音声の処理は、従来の音声処理に関わる処理部にて構成されるので、以下の処理システム１に関わる説明は、省略される。
【0014】
図１に示すように、処理システム１は、処理サーバ２と、複数の端末３と、を備える。図１では、処理システム１が有する端末３の数が６つであるが、端末３の数は特に限定されず、その他の数であってもよい。各々の端末３は、同様の機能構成であってよい。図１に示すように、処理サーバ２は、端末３とネットワーク（図示せず）を介して通信可能である。
なお、図１に示した処理システム１の構成はあくまで一例である。例えば、処理サーバ２は、「処理装置」の一例であり、「処理装置」の一例は、処理サーバ２に限るものではない。
なお、図１に示した処理システム１の構成はあくまで一例である。例えば、処理サーバ２は、「処理装置」の一例であり、「処理装置」の一例は、処理サーバ２に限るものではない。
【0015】
処理システム１では、仮想空間上のオフィス空間（「仮想オフィス空間」と称する）をコンピュータ内に作成し、人間（「ユーザ」と呼ぶ場合がある）の分身であるバーチャルキャラクタ（「アバター」と称する）が仮想オフィス空間内に描画（配置）される。処理システム１では、仮想空間上のオフィス空間において、遠隔地にいる相手とリアルタイムで会議を行うことができるので、会議に参加する人間（ユーザ）は、アバターを操作して会議に参加し、仮想オフィス空間内に同じく描画（配置）される他の参加者（他のユーザ）とコミュニケーションを取りながら会議を行うことが可能である。
【0016】
図２に、処理システム１によって実現される仮想空間の一例を示す。図２（ａ）は、コミュニケーションの場となる仮想空間を俯瞰で見た（上方から下方に見た）場合の図であり、図２（ａ）内に括弧書きで示した数字は座席位置を示している。図２（ａ）に示すように、自身のアバターが座席ＩＤ「１」の場所に座っており、自身のアバターの左隣（座席ＩＤ「２」）にユーザＡのアバターが座っており、さらにその左隣（座席ＩＤ「３」）にユーザＢのアバターが座っている。また、机を挟んで自身のアバターの向かい側（座席ＩＤ「６」）にユーザＥのアバターが座っており、その右隣（座席ＩＤ「５」）にユーザＤのアバターが座っており、さらにその右隣（座席ＩＤ「４」）にユーザＣのアバターが座っている。図２（ｂ）は自身のアバターが左方向（ユーザＣのアバターが居る方向）を向いた場合の視野であり、（ｃ）は自身のアバターが前方向（ユーザＥのアバターが居る方向）を向いた場合の視野である。詳細は後述するが、アバターが向く方向は、例えばマウス操作によって変更することが可能である。以下では各装置の機能について説明する。
【0017】
図１に示す端末３は、ユーザによって使用される。端末３は、カメラ１１と、表示部１２と、入力部１３と、を含んで構成される。端末３は、カメラ１１、表示部１２及び入力部１３の他に、処理サーバ２とデータなどをやり取りする通信部（図示せず）、カメラ１１、表示部１２、入力部１３及び通信部を制御する制御部（図示せず）などを有する。
【0018】
カメラ１１は、端末３を使用するユーザを撮影する。図３に、カメラ１１でユーザを撮影する様子を示す。カメラ１１は、例えば、ユーザの上半身を撮影できる位置や方向に設定されており、ユーザの顔の表情や口の動き、両手の動きを撮影することができる。カメラ１１によって撮影されたユーザの映像情報は、処理サーバ２に送信される。ユーザの映像情報は、アバターの作成に使用される。なお、カメラ１１は、「撮像部」の一例であり、「撮像部」の一例は、カメラ１１に限るものではない。
【0019】
図１に示す表示部１２は、処理サーバ２から受信した画像を表示する。処理サーバ２から受信した画像には、仮想オフィス空間や当該仮想オフィス空間内にいるアバターが含まれている。
入力部１３は、ユーザによって操作され、アバターの視線及び視野の少なくとも何れか一方に関する操作情報が入力される。入力部１３によって入力された操作情報は、処理サーバ２に送信される。
入力部１３は、ユーザによって操作され、アバターの視線及び視野の少なくとも何れか一方に関する操作情報が入力される。入力部１３によって入力された操作情報は、処理サーバ２に送信される。
【0020】
図１に示す処理サーバ２は、映像処理部２１を含んで構成される。映像処理部２１は、仮想空間上のオフィス空間を実現する機能である。それなので、映像処理部２１は、アバターによるユーザ同士のコミュニケーションを実現する。処理サーバ２は、映像処理部２１の他に、端末３とデータなどをやり取りする通信部（図示せず）、映像処理部２１と通信部を制御する制御部（図示せず）などを有する。
【0021】
映像処理部２１は、アバター処理部２２と、仮想オフィス空間処理部２３と、重畳処理部２４と、を有する。映像処理部２１は、例えば、ＣＰＵがＲＯＭ又はストレージに記憶された処理プログラムを読み出し、ＲＡＭに展開して実行することにより実現される。
【0022】
なお、仮想オフィス空間処理部２３は、「第１処理部」の一例であり、「第１処理部」の一例は、仮想オフィス空間処理部２３に限るものではない。
また、アバター処理部２２は、「第２処理部」の一例であり、「第２処理部」の一例は、アバター処理部２２に限るものではない。
また、重畳処理部２４は、「第３処理部」の一例であり、「第３処理部」の一例は、重畳処理部２４に限るものではない。
また、アバター処理部２２は、「第２処理部」の一例であり、「第２処理部」の一例は、アバター処理部２２に限るものではない。
また、重畳処理部２４は、「第３処理部」の一例であり、「第３処理部」の一例は、重畳処理部２４に限るものではない。
【0023】
＜アバター処理部について＞
図１に示すアバター処理部２２は、端末３から撮像画像（映像）を逐次取得する。アバター処理部２２は、撮像画像毎に、撮像画像に映り込んだ物体（ここでは、端末３を使用するユーザ）に関する情報を画像認識により得る。
また、アバター処理部２２は、物体（ここでは、端末３を使用するユーザ）の動きを判別し、この動きに関する動き情報を生成する。動き情報は、端末３を使用するユーザの体の少なくとも一部分（例えば顔、目、口、腕、手、胸部など）の動きを示す情報を含んでよい。
図１に示すアバター処理部２２は、端末３から撮像画像（映像）を逐次取得する。アバター処理部２２は、撮像画像毎に、撮像画像に映り込んだ物体（ここでは、端末３を使用するユーザ）に関する情報を画像認識により得る。
また、アバター処理部２２は、物体（ここでは、端末３を使用するユーザ）の動きを判別し、この動きに関する動き情報を生成する。動き情報は、端末３を使用するユーザの体の少なくとも一部分（例えば顔、目、口、腕、手、胸部など）の動きを示す情報を含んでよい。
【0024】
また、アバター処理部２２は、物体（ここでは、端末３を使用するユーザ）に関する情報、及び、当該物体の動き情報に基づいて、物体（ここでは、端末３を使用するユーザ）の動きを反映した仮想物体（アバター）を生成する。図４に、仮想物体（アバター）の生成する処理のイメージを示す。仮想物体（アバター）は、２Ｄモデル、３Ｄモデルの何れでもあってよい。
【0025】
＜仮想オフィス空間処理部について＞
図１に示す仮想オフィス空間処理部２３は、仮想空間領域の一例として、仮想オフィス空間を生成する。仮想オフィス空間は、２Ｄモデル又は３Ｄモデルとして生成される。仮想オフィス空間は、予め撮像された画像に基づいて生成されてもよい。
図１に示す仮想オフィス空間処理部２３は、仮想空間領域の一例として、仮想オフィス空間を生成する。仮想オフィス空間は、２Ｄモデル又は３Ｄモデルとして生成される。仮想オフィス空間は、予め撮像された画像に基づいて生成されてもよい。
【0026】
＜重畳処理部について＞
重畳処理部２４は、アバター処理部２２で生成されたアバターを仮想オフィス空間処理部２３で生成された仮想オフィス空間に重畳した仮想空間（２Ｄモデル又は３Ｄモデル）を生成する。仮想空間には、ユーザが操作するアバターが含まれている。
また、重畳処理部２４は、アバターの視点で仮想空間を見た場合のアバター視点画像を生成し、ユーザが使用する端末３に当該アバター視点画像を表示させる。アバター視点画像の一例は、図２（ｂ）及び図２（ｃ）に示す通りである。
重畳処理部２４は、アバター処理部２２で生成されたアバターを仮想オフィス空間処理部２３で生成された仮想オフィス空間に重畳した仮想空間（２Ｄモデル又は３Ｄモデル）を生成する。仮想空間には、ユーザが操作するアバターが含まれている。
また、重畳処理部２４は、アバターの視点で仮想空間を見た場合のアバター視点画像を生成し、ユーザが使用する端末３に当該アバター視点画像を表示させる。アバター視点画像の一例は、図２（ｂ）及び図２（ｃ）に示す通りである。
【0027】
≪第１実施形態に係る処理システムの動作≫
図５を参照して（適宜、図１ないし図４を参照）、アバター処理部２２の動作を説明する。図５は、端末３を使用するユーザの動き情報の生成に係るシーケンス図の例示である。
図５を参照して（適宜、図１ないし図４を参照）、アバター処理部２２の動作を説明する。図５は、端末３を使用するユーザの動き情報の生成に係るシーケンス図の例示である。
【0028】
図５に示すように、端末３のカメラ１１は、カメラ１１の撮像範囲に所在する端末３を使用するユーザを逐次撮像する（ステップＳ１１）。
端末３は、撮像された端末３を使用するユーザの画像を、処理サーバ２へ逐次送信する（ステップＳ１２）。
ステップＳ１１，Ｓ１２の処理は、端末３毎に行われる。
端末３は、撮像された端末３を使用するユーザの画像を、処理サーバ２へ逐次送信する（ステップＳ１２）。
ステップＳ１１，Ｓ１２の処理は、端末３毎に行われる。
【0029】
処理サーバ２では、通信部が、各端末３から当該端末３を使用するユーザの画像を逐次受信する（ステップＳ２１）。
アバター処理部２２は、各端末３を使用する各ユーザの画像を基に、各ユーザの動きを解析し、動き情報を生成する（ステップＳ２２）。アバター処理部２２は、物体（ここでは、端末３を使用するユーザ）の動き情報に基づいて、物体の動きを反映した仮想物体であるアバター（２Ｄモデル又は３Ｄモデル）を生成する。
アバター処理部２２は、各端末３を使用する各ユーザの画像を基に、各ユーザの動きを解析し、動き情報を生成する（ステップＳ２２）。アバター処理部２２は、物体（ここでは、端末３を使用するユーザ）の動き情報に基づいて、物体の動きを反映した仮想物体であるアバター（２Ｄモデル又は３Ｄモデル）を生成する。
【0030】
次に、重畳処理部２４は、アバター処理部２２で生成されたアバターを仮想オフィス空間処理部２３で生成された仮想オフィス空間に重畳した仮想空間（２Ｄモデル又は３Ｄモデル）を生成し、アバターの視点で仮想空間を見た場合のアバター視点画像（図２（ｂ）など）を端末３に逐次送信する（ステップＳ２３）。
ここで、仮想オフィス空間（２Ｄモデル又は３Ｄモデル）は、仮想オフィス空間処理部２３によって予め生成される。仮想オフィス空間は、例えば、予め撮像された画像に基づいて、２Ｄモデル又は３Ｄモデルとして生成される。
ここで、仮想オフィス空間（２Ｄモデル又は３Ｄモデル）は、仮想オフィス空間処理部２３によって予め生成される。仮想オフィス空間は、例えば、予め撮像された画像に基づいて、２Ｄモデル又は３Ｄモデルとして生成される。
【0031】
なお、アバター（３Ｄモデル）は、例えば、１枚の写真（画像データ）から生成されてもよい。例えば、身長や体重などの情報を入力し、入力したこれらの情報と写真（画像データ）に基づいてアバターを生成する。写真（画像データ）から３Ｄモデルを生成する技術は、例えば「特表２００５－５２３４８８号公報」などに記載されている。
【0032】
端末３は、アバター視点画像を逐次受信し、受信したアバター画像を有する仮想空間画像を表示部１２に表示する（ステップＳ１３）。
ここで、端末３のユーザは、端末３に接続される入力部１３（例えば、マウスなど）を操作して、アバター視点画像の視線及び視野の少なくとも何れか一方に関する操作情報を入力することで、アバター視点画像における視線や視野を変更することができる。例えば、所定の位置（ここでは、アバターの目の位置）からカメラで撮影したと仮定したときにおける、チルト角度の量、パーン角度の量、ズームの量に基づいて、視線や視野を変更することができる。チルト角度の量、パーン角度の量、ズームの量は、端末３に接続される入力部１３（例えば、マウスなど）で操作された操作量や選択ボタン等に基づくものであってよい。また、アバター視点画像の一点にフォーカスすることによって、視線や視野を変更してもよい。重畳処理部２４は、入力部１３を介して入力された操作情報を取得し、当該操作情報に基づいてアバター視点画像を生成する。
これにより、例えば、図２（ｂ）のように自身のアバターが左方向（ユーザＣのアバターが居る方向）を向いた場合の視野から、図２（ｃ）のように自身のアバターが前方向（ユーザＥのアバターが居る方向）を向いた場合の視野に変更できる。
ここで、端末３のユーザは、端末３に接続される入力部１３（例えば、マウスなど）を操作して、アバター視点画像の視線及び視野の少なくとも何れか一方に関する操作情報を入力することで、アバター視点画像における視線や視野を変更することができる。例えば、所定の位置（ここでは、アバターの目の位置）からカメラで撮影したと仮定したときにおける、チルト角度の量、パーン角度の量、ズームの量に基づいて、視線や視野を変更することができる。チルト角度の量、パーン角度の量、ズームの量は、端末３に接続される入力部１３（例えば、マウスなど）で操作された操作量や選択ボタン等に基づくものであってよい。また、アバター視点画像の一点にフォーカスすることによって、視線や視野を変更してもよい。重畳処理部２４は、入力部１３を介して入力された操作情報を取得し、当該操作情報に基づいてアバター視点画像を生成する。
これにより、例えば、図２（ｂ）のように自身のアバターが左方向（ユーザＣのアバターが居る方向）を向いた場合の視野から、図２（ｃ）のように自身のアバターが前方向（ユーザＥのアバターが居る方向）を向いた場合の視野に変更できる。
【0033】
以上のように、第１実施形態に係る処理システム１は、ユーザが特殊な機器（例えば、ＶＲゴーグルやコントローラ）を用いることなく、端末３の前に居るだけで端末３を操作するユーザの分身であるアバターが仮想オフィス空間内に描画される。そのため、第１実施形態に係る処理システム１では、処理システム１を利用するユーザにおいて、同じ空間にいる感覚が得られるものであるとともに、仮想空間のツールを手軽に利用することができる。
そして、ユーザは、アバターによって会議に参加し、仮想オフィス空間内に同じく描画される他のユーザとコミュニケーションを取りながら会議を行うことが可能である。他のユーザとのコミュニケーションでは、身振りや手振り（体を使ったジェスチャー）を用いることも可能である。そのため、同じ空間にいる感覚が得られるものであるとともに、仮想空間でのコミュニケーションを手軽に利用することができる。
そして、ユーザは、アバターによって会議に参加し、仮想オフィス空間内に同じく描画される他のユーザとコミュニケーションを取りながら会議を行うことが可能である。他のユーザとのコミュニケーションでは、身振りや手振り（体を使ったジェスチャー）を用いることも可能である。そのため、同じ空間にいる感覚が得られるものであるとともに、仮想空間でのコミュニケーションを手軽に利用することができる。
【0034】
≪第２実施形態に係る処理システムの構成≫
図６を参照して、第２実施形態に係る処理システム１０１の構成について説明する。図６は、処理システム１０１の概略構成図である。処理システム１０１は、仮想空間上のオフィス空間として利用できるものである。処理システム１０１は、インターネットを通じてビデオ通話（映像・音声のやり取り）、音声通話（音声のやり取り）、チャット通信などを行うことができるシステムである。処理システム１０１では、仮想空間上のオフィス空間（仮想オフィス空間）をコンピュータ内に作成し、人間（ユーザ）の分身であるバーチャルキャラクタ（アバター）が仮想オフィス空間内に描画される。
なお、以下の処理システム１０１に関わる説明は、第１実施形態と同様に、仮想空間（仮想空間上のオフィス空間）に関わる映像の処理を中心に記載される。また、処理システム１０１における音声の処理は、第１実施形態と同様に、従来の音声処理に関わる処理部にて構成されるので、以下の処理システム１０１に関わる説明は、省略される。
図６を参照して、第２実施形態に係る処理システム１０１の構成について説明する。図６は、処理システム１０１の概略構成図である。処理システム１０１は、仮想空間上のオフィス空間として利用できるものである。処理システム１０１は、インターネットを通じてビデオ通話（映像・音声のやり取り）、音声通話（音声のやり取り）、チャット通信などを行うことができるシステムである。処理システム１０１では、仮想空間上のオフィス空間（仮想オフィス空間）をコンピュータ内に作成し、人間（ユーザ）の分身であるバーチャルキャラクタ（アバター）が仮想オフィス空間内に描画される。
なお、以下の処理システム１０１に関わる説明は、第１実施形態と同様に、仮想空間（仮想空間上のオフィス空間）に関わる映像の処理を中心に記載される。また、処理システム１０１における音声の処理は、第１実施形態と同様に、従来の音声処理に関わる処理部にて構成されるので、以下の処理システム１０１に関わる説明は、省略される。
【0035】
図６に示すように、処理システム１０１は、処理サーバ２と、複数の端末３と、座席管理装置４と、呼制御装置５と、を備える。第１実施形態と同様に端末３の数は特に限定されない（なお、図６では、６つの端末３が記載される）。第２実施形態に係る処理システム１０１は、第１実施形態に係る処理システム１（図１参照）と比較して、座席管理装置４及び呼制御装置５が追加され、また、処理サーバ２が備える機能が異なる。図６に示すように、処理サーバ２は、端末３、座席管理装置４及び呼制御装置５とネットワーク（図示せず）を介して通信可能である。
【0036】
図６に示す端末３は、ユーザによって使用される。端末３は、カメラ１１と、表示部１２と、入力部１３と、を含んで構成される。端末３は、カメラ１１、表示部１２及び入力部１３の他に、処理サーバ２とデータなどをやり取りする通信部（図示せず）、カメラ１１、表示部１２、入力部１３及び通信部を制御する制御部（図示せず）などを有する。各々の端末３は、同様の機能構成であってよい。なお、端末３としては、例えばＰＣ、タブレット、スマートフォン等が使用できる。
【0037】
座席管理装置４は、各ユーザの所持する端末３の座席位置を管理する。座席管理装置４は、例えば、予め各ユーザの所持する端末３（又は管理者の所持する端末）から、要求されたオフィスの居室などにおける座席位置情報を受信し、当該座席位置情報を管理する。処理サーバ２は、座席管理装置４から、各ユーザの所持する端末３（図６では、６つの端末３）の座席位置情報を予め取得する。座席位置情報の取得方法は特に限定されない。
【0038】
呼制御装置５は、端末３，・・・端末３（図６では、６つの端末３）に対して呼制御を行い、端末３間の通信（一例は通話）の制御を行う。呼制御装置５としては、例えばＳＩＰ（Session Initiation Protocol）サーバが使用できる。処理サーバ２は、呼制御装置５から、各端末３の各ユーザにおける通信の状態を示す通話状態情報を予め取得する。通話状態情報は、例えば、「通話可」や「通話中」などのステータスであってよい。また、処理サーバ２は、呼制御装置５において各端末３の各ユーザにおける通話状態情報の変更（例えば、通話可→通話中、通話中→通話可）があると、呼制御装置５から変更された通話状態情報を受信する。
【0039】
図６に示すように、処理サーバ２は、記憶部３１と、映像処理部２１と、プレゼンス情報管理部２５と、プレゼンス情報監視部２６と、を備える。つまり、第１実施形態での構成（図１参照）と比較した場合、処理サーバ２は、映像処理部２１に加えて、記憶部３１と、プレゼンス情報管理部２５と、プレゼンス情報監視部２６とを有する構成である。
【0040】
映像処理部２１は、第１実施形態と同様であり、仮想空間上のオフィス空間を実現する機能である。それなので、映像処理部２１は、仮想空間上のオフィス空間におけるアバターを用いて、ユーザ同士がコミュニケーションを取っている状況を実現する。映像処理部２１は、アバター処理部２２と、仮想オフィス空間処理部２３と、重畳処理部２４と、を有する。
記憶部３１は、プレゼンス情報記憶部３２と、座席位置情報記憶部３３と、を有する構成である。
記憶部３１は、プレゼンス情報記憶部３２と、座席位置情報記憶部３３と、を有する構成である。
【0041】
図６に示す座席位置情報記憶部３３は、座席管理装置４から通知された座席位置情報を記憶する。座席位置情報記憶部３３のデータ構成例を図７に示す。図７に示すように、座席位置情報記憶部３３は、ユーザＩＤごとに（ユーザＩＤに対応付けて）座席位置情報を記憶する。図７に示す例においては、ユーザＩＤが“自分のＩＤ”と、座席位置情報が“座席ＩＤ「１」”とが対応づけられている。また、ユーザＩＤが“ユーザＡのＩＤ”と、座席位置情報が“座席ＩＤ「２」”とが対応づけられている。他のユーザについても同様である。
【0042】
図６に示すように、プレゼンス情報管理部２５は、座席位置情報記憶部３３に記憶された座席位置情報を、ユーザＩＤ毎にプレゼンス情報記憶部３２に格納する。また、プレゼンス情報管理部２５は、呼制御装置５から通知された通話状態情報を、ユーザＩＤ毎にプレゼンス情報記憶部３２に格納する。
【0043】
この結果、プレゼンス情報記憶部３２は、図８に示すように、ユーザＩＤと、座席位置情報と、通話状態情報と、通話状態情報が「通話中」の場合における通話に関連する通話関連情報と、を対応づけて記憶する。通話関連情報は、例えば、通話の発信元情報と、発信先情報と、通話中の座席位置情報とを有する。ユーザＩＤと、座席位置情報と、通話状態情報とが少なくとも紐づけられた情報を「プレゼンス情報」と称する。本実施形態でのプレゼンス情報は、ユーザＩＤと、座席位置情報と、通話状態情報と、通話関連情報とを組み合わせた情報を想定する。
【0044】
図８に示す例においては、ユーザＩＤが“自分のＩＤ”と、座席位置情報が“座席ＩＤ「１」”と、通話状態情報が“通話可”と、発信元情報“－”と、発信先情報“－”と、通話中の座席位置情報“－”とが対応づけられている。“自分のＩＤ”のユーザは、通話状態情報が“通話可”であり通話を行っていないので、通話関連情報には情報が格納されていない状態（初期値でもよい）である。
また、ユーザＩＤが“ユーザＡのＩＤ”と、座席位置情報が“座席ＩＤ「２」”と、通話状態情報が“通話可”と、発信元情報“－”と、発信先情報“－”と、通話中の座席位置情報“－”とが対応づけられている。他のユーザについても同様である。
また、ユーザＩＤが“ユーザＡのＩＤ”と、座席位置情報が“座席ＩＤ「２」”と、通話状態情報が“通話可”と、発信元情報“－”と、発信先情報“－”と、通話中の座席位置情報“－”とが対応づけられている。他のユーザについても同様である。
【0045】
図６に示すプレゼンス情報監視部２６は、プレゼンス情報記憶部３２に記憶されたプレゼンス情報が変更されたか否かを判断する。プレゼンス情報監視部２６は、例えば、プレゼンス情報記憶部３２に記憶されたプレゼンス情報を常時監視する。
また、プレゼンス情報監視部２６は、プレゼンス情報記憶部３２に記憶されたプレゼンス情報が変更されると、変更されたユーザのプレゼンス情報を映像処理部２１に送信する。プレゼンス情報監視部２６は、変更されたユーザのプレゼンス情報に加えて、変更された以外のユーザのプレゼンス情報を映像処理部２１に送信してもよい。
また、プレゼンス情報監視部２６は、プレゼンス情報記憶部３２に記憶されたプレゼンス情報が変更されると、変更されたユーザのプレゼンス情報を映像処理部２１に送信する。プレゼンス情報監視部２６は、変更されたユーザのプレゼンス情報に加えて、変更された以外のユーザのプレゼンス情報を映像処理部２１に送信してもよい。
【0046】
映像処理部２１は、プレゼンス情報監視部２６からプレゼンス情報を受信する。プレゼンス情報を受信すると、映像処理部２１（特に、重畳処理部２４）は、受信したプレゼンス情報に基づいて、仮想空間（２Ｄモデル又は３Ｄモデル）を生成する。仮想空間には、ユーザが操作するアバターが含まれている。
【0047】
≪第２実施形態に係る処理システムの動作≫
図９を参照して（適宜、図６ないし図８を参照）、第２実施形態に係る処理システム１０１全体の動作概要について説明する。図９は、処理システム１０１の動作例を示すシーケンス図である。
図９を参照して（適宜、図６ないし図８を参照）、第２実施形態に係る処理システム１０１全体の動作概要について説明する。図９は、処理システム１０１の動作例を示すシーケンス図である。
【0048】
図９に示すように、処理サーバ２は、座席管理装置４から座席位置情報を取得し、呼制御装置５から通話状態情報を取得する（ステップＳ３１）。なお、ステップＳ３１の処理は、予め実行される。
次に、処理サーバ２は、ステップＳ３１で通知された座席位置情報及び通話状態情報を、ユーザＩＤ毎にプレゼンス情報として、プレゼンス情報記憶部３２に格納する（ステップＳ３２）。ここで、プレゼンス情報記憶部３２に格納されるプレゼンス情報は、図８に示す通りである（ここでは、６人のユーザが座席に着席したとする）。
次に、処理サーバ２は、ステップＳ３１で通知された座席位置情報及び通話状態情報を、ユーザＩＤ毎にプレゼンス情報として、プレゼンス情報記憶部３２に格納する（ステップＳ３２）。ここで、プレゼンス情報記憶部３２に格納されるプレゼンス情報は、図８に示す通りである（ここでは、６人のユーザが座席に着席したとする）。
【0049】
次に、処理サーバ２（映像処理部２１）は、プレゼンス情報やユーザを撮影した映像（物体に関する情報や当該物体の動き情報）に基づいて、仮想オフィス空間にアバターを重畳した仮想空間（２Ｄモデル又は３Ｄモデル）を生成する（ステップＳ３３）。
続いて、処理サーバ２は、端末３に対し、ステップＳ３３で作成された仮想空間をアバターの視点で見たアバター視点画像を送信する（ステップＳ３４）。
端末３は、処理サーバ２からアバター視点画像を受信して、受信したアバター視点画像を表示する（ステップＳ３５）。
続いて、処理サーバ２は、端末３に対し、ステップＳ３３で作成された仮想空間をアバターの視点で見たアバター視点画像を送信する（ステップＳ３４）。
端末３は、処理サーバ２からアバター視点画像を受信して、受信したアバター視点画像を表示する（ステップＳ３５）。
【0050】
呼制御装置５において各端末３の各ユーザにおける通話状態情報において変更（通話可→通話中、通話中→通話可など）があると、呼制御装置５は、処理サーバ２に、変更された通話状態情報を通知する（ステップＳ４１）。ここでは、通話状態情報は、発信元情報と発信先情報とが含まれているものとする。
【0051】
処理サーバ２（プレゼンス情報管理部２５）は、ステップＳ４１で通知された通話状態情報をプレゼンス情報記憶部３２に格納することで、プレゼンス情報を更新する（ステップＳ４２）。
また、処理サーバ２（プレゼンス情報管理部２５）は、ユーザＩＤと通話状態情報と発信元情報と発信先情報とを用いて、“通話中の座席位置情報”を生成し、生成した“通話中の座席位置情報”をプレゼンス情報記憶部３２に格納することで、プレゼンス情報を更新する（ステップＳ４２）。
また、処理サーバ２（プレゼンス情報管理部２５）は、ユーザＩＤと通話状態情報と発信元情報と発信先情報とを用いて、“通話中の座席位置情報”を生成し、生成した“通話中の座席位置情報”をプレゼンス情報記憶部３２に格納することで、プレゼンス情報を更新する（ステップＳ４２）。
【0052】
処理サーバ２（映像処理部２１）は、更新されたプレゼンス情報に基づいて、仮想オフィス空間にアバターを重畳した仮想空間を変更する（ステップＳ４３）。具体的には、通話を開始したユーザのアバターの位置を変更する。当該処理の詳細は後述する。
続いて、処理サーバ２は、端末３に対し、ステップＳ４３で変更された仮想空間をアバターの視点で見たアバター視点画像を送信する（ステップＳ４４）。
端末３は、処理サーバ２からアバター視点画像を受信して、受信したアバター視点画像を表示する（ステップＳ４５）。
続いて、処理サーバ２は、端末３に対し、ステップＳ４３で変更された仮想空間をアバターの視点で見たアバター視点画像を送信する（ステップＳ４４）。
端末３は、処理サーバ２からアバター視点画像を受信して、受信したアバター視点画像を表示する（ステップＳ４５）。
【0053】
＜ステップＳ３３の処理の一例＞
図９に示すステップＳ３３において、処理サーバ２（映像処理部２１）は、プレゼンス情報に基づいて、例えば次のようにして、仮想オフィス空間にアバターを重畳した仮想空間を生成する。ここで、プレゼンス情報記憶部３２に格納されるプレゼンス情報（図８参照）は、図２に示す例に対応した内容である（ここでは、６人のユーザが座席に着席したとする）。
図９に示すステップＳ３３において、処理サーバ２（映像処理部２１）は、プレゼンス情報に基づいて、例えば次のようにして、仮想オフィス空間にアバターを重畳した仮想空間を生成する。ここで、プレゼンス情報記憶部３２に格納されるプレゼンス情報（図８参照）は、図２に示す例に対応した内容である（ここでは、６人のユーザが座席に着席したとする）。
【0054】
処理サーバ２（映像処理部２１）は、プレゼンス情報（ユーザＩＤと座席位置情報とが紐づけられた情報）を用いて、仮想オフィス空間における座席位置と、当該座席位置に配置されるユーザのアバターを決定する。
ここでは、図２（ａ）に示すように、仮想オフィス空間における座席位置は、縦長の長方形の机に対して、左側に３人、右側に３人が着席する構成であるとき、左側の下側から、自分（座席ＩＤ「１」）、ユーザＡ（座席ＩＤ「２」）、ユーザＢ（座席ＩＤ「３」）とし、右側の上側から、ユーザＣ（座席ＩＤ「４」）、ユーザＤ（座席ＩＤ「５」）、ユーザＥ（座席ＩＤ「６」）とする。
この場合、自分のユーザのアバター視点画像は、例えば図２（ｂ）のようになる。
ここでは、図２（ａ）に示すように、仮想オフィス空間における座席位置は、縦長の長方形の机に対して、左側に３人、右側に３人が着席する構成であるとき、左側の下側から、自分（座席ＩＤ「１」）、ユーザＡ（座席ＩＤ「２」）、ユーザＢ（座席ＩＤ「３」）とし、右側の上側から、ユーザＣ（座席ＩＤ「４」）、ユーザＤ（座席ＩＤ「５」）、ユーザＥ（座席ＩＤ「６」）とする。
この場合、自分のユーザのアバター視点画像は、例えば図２（ｂ）のようになる。
【0055】
＜ステップＳ４２の処理の一例＞
図９に示すステップＳ４２において、処理サーバ２（プレゼンス情報管理部２５）は、ステップＳ４１で通知された通話状態情報をプレゼンス情報記憶部３２に格納することで、プレゼンス情報を変更する。
また、処理サーバ２（プレゼンス情報管理部２５）は、“通話状態情報”と“発信元情報”と“発信先情報”とを用いて、“通話中の座席位置情報”を生成し、生成した“通話中の座席位置情報”をプレゼンス情報記憶部３２に格納することで、プレゼンス情報を変更する。
図９に示すステップＳ４２において、処理サーバ２（プレゼンス情報管理部２５）は、ステップＳ４１で通知された通話状態情報をプレゼンス情報記憶部３２に格納することで、プレゼンス情報を変更する。
また、処理サーバ２（プレゼンス情報管理部２５）は、“通話状態情報”と“発信元情報”と“発信先情報”とを用いて、“通話中の座席位置情報”を生成し、生成した“通話中の座席位置情報”をプレゼンス情報記憶部３２に格納することで、プレゼンス情報を変更する。
【0056】
ここでは、変更されたプレゼンス情報は、ユーザＥのＩＤに紐づけられた“通話状態情報”と“発信元情報”と“発信先情報”、及び、ユーザＣのＩＤに紐づけられた“通話状態情報”と“発信元情報”と“発信先情報”であり、各情報の変更は、次の通りであるものとする。
“通話状態情報”は、“通話可”から“通話中”に変更。
“発信元情報”は、“－”から“ユーザＥのＩＤ”に変更。
“発信先情報”は、“－”から“ユーザＣのＩＤ”に変更。
“通話状態情報”は、“通話可”から“通話中”に変更。
“発信元情報”は、“－”から“ユーザＥのＩＤ”に変更。
“発信先情報”は、“－”から“ユーザＣのＩＤ”に変更。
【0057】
また、処理サーバ２（プレゼンス情報管理部２５）は、変更されたプレゼンス情報である、ユーザＩＤがユーザＥ，ユーザＣに紐づけられた、“通話状態情報（＝通話中）”と“発信元情報（＝ユーザＥのＩＤ）”と“発信先情報（＝ユーザＣのＩＤ）”とに基づいて、“通話中の座席位置情報”を生成し、生成した“通話中の座席位置情報”をプレゼンス情報記憶部３２に格納することで、プレゼンス情報を変更する。
【0058】
当初（通話開始前）の“座席位置情報”から“通話中の座席位置情報”への変更は、次の通りであるものとする。ここでは、“発信元情報”ではなく“発信先情報”に対応するユーザの座席を変更することにし、“発信先情報”に対応するユーザの“座席位置情報”と、関連するユーザ（例えば“発信元情報”の隣に座るユーザ）の“座席位置情報”とを変更する。変更後の“座席位置情報”は、“通話中の座席位置情報”として格納される。“座席位置情報”の変更は、次の通りである。
ユーザＣのＩＤに紐づけられた“座席位置情報”は、“座席ＩＤ「４」”から“座席ＩＤ「５」”に変更。
ユーザＤのＩＤに紐づけられた“座席位置情報”は、“座席ＩＤ「５」”から“座席ＩＤ「４」”に変更。
上記のように変更されたプレゼンス情報は、図１０のようになる。
ユーザＣのＩＤに紐づけられた“座席位置情報”は、“座席ＩＤ「４」”から“座席ＩＤ「５」”に変更。
ユーザＤのＩＤに紐づけられた“座席位置情報”は、“座席ＩＤ「５」”から“座席ＩＤ「４」”に変更。
上記のように変更されたプレゼンス情報は、図１０のようになる。
【0059】
＜ステップＳ４３の処理の一例＞
図９に示すステップＳ４３において、処理サーバ２（映像処理部２１）は、変更されたプレゼンス情報に基づいて、次のようにして仮想空間を生成する。ここで、プレゼンス情報記憶部３２に格納されるプレゼンス情報は、図１０に示す例の通りである（ここでは、ユーザＥとユーザＣとが通話中になったとする）。
図９に示すステップＳ４３において、処理サーバ２（映像処理部２１）は、変更されたプレゼンス情報に基づいて、次のようにして仮想空間を生成する。ここで、プレゼンス情報記憶部３２に格納されるプレゼンス情報は、図１０に示す例の通りである（ここでは、ユーザＥとユーザＣとが通話中になったとする）。
【0060】
処理サーバ２（映像処理部２１）は、プレゼンス情報（図１０のプレゼンス情報記憶部３２におけるユーザＩＤと通話中の座席位置情報とが紐づけられた情報）を用いて、仮想空間画像における座席位置と、当該座席位置に配置されるユーザのアバターを決定する。
図１１（ａ）に示すように、変更後の座席位置は、左側の下側から、自分（座席ＩＤ「１」）、ユーザＡ（座席ＩＤ「２」）、ユーザＢ（座席ＩＤ「３」）となり、右側の上側から、ユーザＣから変更されたユーザＤ（座席ＩＤ「４」）、ユーザＤから変更されたユーザＣ（座席ＩＤ「５」）、ユーザＥ（座席ＩＤ「６」）となる。
この結果、自分のユーザのアバター視点画像は、図１１（ｂ）や図１１（ｃ）のようになる。
図１１（ａ）に示すように、変更後の座席位置は、左側の下側から、自分（座席ＩＤ「１」）、ユーザＡ（座席ＩＤ「２」）、ユーザＢ（座席ＩＤ「３」）となり、右側の上側から、ユーザＣから変更されたユーザＤ（座席ＩＤ「４」）、ユーザＤから変更されたユーザＣ（座席ＩＤ「５」）、ユーザＥ（座席ＩＤ「６」）となる。
この結果、自分のユーザのアバター視点画像は、図１１（ｂ）や図１１（ｃ）のようになる。
【0061】
以上説明した第２実施形態に係る処理システム１０１によっても、第１実施形態と同等の効果を奏することができる。つまり、処理システム１０１によれば、同じ空間にいる感覚が得られるものであるとともに、仮想空間でのコミュニケーションを手軽に利用することができる。
また、第２実施形態では、通話者のアバターを隣同士に配置するので、コミュニケーションを行っている者を視覚によって直感的に把握することが可能である。
また、第２実施形態では、通話者のアバターを隣同士に配置するので、コミュニケーションを行っている者を視覚によって直感的に把握することが可能である。
【0062】
以上、本発明の実施形態について説明したが、本発明はこれに限定されるものではなく、特許請求の範囲の趣旨を変えない範囲で実施することができる。
例えば、各実施形態では、仮想空間として仮想のオフィス空間を例示して説明したが、仮想空間はオフィス空間に限定されない。例えば、仮想空間は、学校の教室、展示や販売会場などであってもよい。
例えば、各実施形態では、仮想空間として仮想のオフィス空間を例示して説明したが、仮想空間はオフィス空間に限定されない。例えば、仮想空間は、学校の教室、展示や販売会場などであってもよい。
【0063】
また、各実施形態では、各端末３の各ユーザにおける通話の状態（通話状態情報）として、“通話可”“通話中”の二つを例示して説明したが、通話の状態はこれらに限るものではない。例えば、２者のユーザ間における通話に関わる状態に“繋がった”“終了して切った”などを含めてもよい。
【0064】
また、第２実施形態では、コミュニケーションの一例として通話を想定し、通話を行っているユーザのアバターを仮想空間上で隣同士に配置していた。しかしながら、コミュニケーションは通話に限られず、例えば、チャットなどであってもよい。その場合、例えばチャットを行っているユーザのアバターを仮想空間上で隣同士に配置する。
【0065】
また、第２実施形態では、コミュニケーションを行っている人を関連付ける方法として、コミュニケーションを行っているユーザのアバターを仮想空間上で隣同士に配置していた。しかしながら、コミュニケーションを行っている人の関連付けはこれに限定されず、例えば、隣同士に配置すると共に／またはそれに代えて、コミュニケーションを行う者同士が向き合うように、アバターの向きを変更してもよい。また、正対するまではいかずとも向き合う方向に所定角度（例えば、１５～３０°）だけ互いのアバターを傾けて配置してもよい。また、それ以外にも、例えば、該当するアバターを同じ色で発光させたり、同じ動作を行わせたり、吹き出しを付与するなどしてもよい。
【符号の説明】
【0066】
１，１０１ 処理システム
２ 処理サーバ
３ 端末
４ 座席管理装置
５ 呼制御装置
１１ カメラ
１２ 表示部
１３ 入力部
２１ 映像処理部
２２ アバター処理部
２３ 仮想オフィス空間処理部
２４ 重畳処理部
２５ プレゼンス情報管理部
２６ プレゼンス情報監視部
３１ 記憶部
３２ プレゼンス情報記憶部
３３ 座席位置情報記憶部
２ 処理サーバ
３ 端末
４ 座席管理装置
５ 呼制御装置
１１ カメラ
１２ 表示部
１３ 入力部
２１ 映像処理部
２２ アバター処理部
２３ 仮想オフィス空間処理部
２４ 重畳処理部
２５ プレゼンス情報管理部
２６ プレゼンス情報監視部
３１ 記憶部
３２ プレゼンス情報記憶部
３３ 座席位置情報記憶部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】