特開 2022-177677 仮想空間ビデオ通話システムおよび方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022177677

(43)【公開日】2022-12-01

(54)【発明の名称】仮想空間ビデオ通話システムおよび方法

(51)【国際特許分類】

   G06T 19/00 20110101AFI20221124BHJP

   G06Q 10/10 20120101ALI20221124BHJP

   G06F 13/00 20060101ALI20221124BHJP

   H04N 7/14 20060101ALI20221124BHJP

   H04N 21/431 20110101ALI20221124BHJP

【ＦＩ】

G06T19/00 300A

G06Q10/10

G06F13/00 650R

G06F13/00 650A

H04N7/14 170

H04N21/431

【審査請求】未請求

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2021084100

(22)【出願日】2021-05-18

(71)【出願人】

【識別番号】593059773

【氏名又は名称】富士ソフト株式会社

(74)【代理人】

【識別番号】110000279

【氏名又は名称】弁理士法人ウィルフォート国際特許事務所

(72)【発明者】

【氏名】松浦 直樹

(72)【発明者】

【氏名】佐伯 知則

(72)【発明者】

【氏名】信原 昌弘

(72)【発明者】

【氏名】石田 卓也

(72)【発明者】

【氏名】秋田 仁

【テーマコード（参考）】

5B050

5B084

5C164

5L049

【Ｆターム（参考）】

5B050AA10

5B050BA09

5B050BA11

5B050CA07

5B050CA08

5B050EA09

5B050EA27

5B050FA02

5B050FA05

5B084AA01

5B084AA16

5B084AA18

5B084AA30

5B084AB07

5B084AB11

5B084AB13

5B084AB31

5B084AB39

5B084BA07

5B084BB01

5B084CA07

5B084CB06

5B084CB12

5B084CB23

5B084CE02

5B084CE12

5B084CF03

5B084CF12

5B084DB02

5B084DB08

5B084DC02

5B084DC03

5B084DC06

5B084EA17

5B084EA47

5C164FA10

5C164SC11S

5C164UB90P

5C164VA16P

5C164YA21

5L049AA12

(57)【要約】

【課題】ユーザにとっての使い勝手を向上できるようにした仮想空間ビデオ通話システムおよび方法を提供すること。
【解決手段】仮想空間ビデオ通話システム１は、複数のクライアント端末３へ提供される仮想空間４を制御する仮想空間制御部２１と、仮想空間でのビデオ通話を制御するビデオ通話制御部２２とを備え、仮想空間制御部は、複数のクライアント端末のうち第１クライアント端末に対応する第１アバターが、複数のクライアント端末のうち第２クライアント端末に対応する第２アバターに仮想空間で接触したか判定し、ビデオ通話制御部は、仮想空間制御部により第１アバターと第２アバターとが仮想空間で接触したと判定されると、第１クライアント端末と第２クライアント端末との間でビデオ通話を開始させる。
【選択図】 図１

【特許請求の範囲】

【請求項1】

複数のクライアント端末が仮想空間を介してビデオ通話を行う仮想空間ビデオ通話システムであって、
前記複数のクライアント端末へ提供される仮想空間を制御する仮想空間制御部と、
前記仮想空間でのビデオ通話を制御するビデオ通話制御部とを備え、
前記仮想空間制御部は、前記複数のクライアント端末のうち第１クライアント端末に対応する第１アバターが、前記複数のクライアント端末のうち第２クライアント端末に対応する第２アバターに前記仮想空間で接触したか判定し、
前記ビデオ通話制御部は、前記仮想空間制御部により前記第１アバターと前記第２アバターとが前記仮想空間で接触したと判定されると、前記第１クライアント端末と前記第２クライアント端末との間でビデオ通話を開始させる
仮想空間ビデオ通話システム。

【請求項2】

前記ビデオ通話制御部は、前記仮想空間制御部により前記第１アバターと前記第２アバターとが前記仮想空間で接触したと判定されると、前記第１アバター内に前記第１クライアント端末からの画像を表示させると共に、前記第２アバター内に前記第２クライアント端末からの画像を表示させることにより、前記第１クライアント端末と前記第２クライアント端末との間でビデオ通話を開始させる
請求項１に記載の仮想空間ビデオ通話システム。

【請求項3】

前記ビデオ通話制御部は、前記仮想空間制御部により前記第１アバターと前記第２アバターとが離れたと判定されると、前記第１クライアント端末と前記第２クライアント端末との間のビデオ通話を終了させる
請求項２に記載の仮想空間ビデオ通話システム。

【請求項4】

前記仮想空間制御部は、前記ビデオ通話制御部により前記第１クライアント端末と前記第２クライアント端末との間でビデオ通話が開始される際に、前記第１アバターおよび前記第２アバターの少なくとも一部を拡大させる
請求項２に記載の仮想空間ビデオ通話システム。

【請求項5】

前記仮想空間制御部は、前記ビデオ通話制御部による前記第１クライアント端末と前記第２クライアント端末との間のビデオ通話の準備中に、前記第１アバターおよび前記第２アバターにビデオ通話を準備中であることを示す所定のエフェクトを設定する
請求項１に記載の仮想空間ビデオ通話システム。

【請求項6】

前記仮想空間制御部は、前記第１アバターが前記仮想空間を移動することにより前記第２アバターに接触したかを判定する
請求項１に記載の仮想空間ビデオ通話システム。

【請求項7】

前記仮想空間制御部は、前記第１クライアント端末により前記第１アバターの目的位置が指定されると、前記第１アバターの現在位置から前記目的位置までの所定の経路を算出し、前記算出された所定の経路に沿って前記第１アバターを移動させる
請求項６に記載の仮想空間ビデオ通話システム。

【請求項8】

前記所定の経路を決定する複数の経路モードがあらかじめ用意されており、
前記仮想空間制御部は、前記複数の経路モードのうち前記第１クライアント端末により選択された経路モードにしたがって前記所定の経路を算出する
請求項７に記載の仮想空間ビデオ通話システム。

【請求項9】

ビデオ通話制御部は、前記第１クライアント端末と前記第２クライアント端末との間のビデオ通話からキーワードを抽出し、
前記仮想空間制御部は、前記ビデオ通話制御部により抽出されたキーワードの少なくとも一部を、前記第１クライアントまたは前記第２クライアント端末以外の他のクライアント端末から確認できるように前記仮想空間に表示させる
請求項１に記載の仮想空間ビデオ通話システム。

【請求項10】

複数のクライアント端末が仮想空間を介してビデオ通話を行う方法であって、
前記複数のクライアント端末と双方向通信可能に接続される計算機は、
前記複数のクライアント端末のうち第１クライアント端末に対応する第１アバターが、前記複数のクライアント端末のうち第２クライアント端末に対応する第２アバターに前記仮想空間で接触したか判定し、
前記仮想空間制御部により前記第１アバターと前記第２アバターとが前記仮想空間で接触したと判定されると、前記第１クライアント端末と前記第２クライアント端末との間でビデオ通話を開始させる
ビデオ通話方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、仮想空間ビデオ通話システムおよび方法に関する。

【背景技術】

【0002】

複数のユーザがネットワーク上のサーバに設けられた仮想空間に集い、チャットやゲームなどを通じて交流する技術は知られている（特許文献１，２）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特許５９６９４７６号公報

【特許文献2】特開２００３－０５８４８４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

ところで近年は、在宅で仕事をするテレワークの普及に伴い、コミュニケーションの機会が不足しており、職場の仲間意識の維持や情報共有などに問題が生じている。

【0005】

そこで、仮想的なオフィスに社員のアバターを集め、ビデオ通話することが考えられるが、一般的なビデオ通話システムでは、仮想オフィス内のアバター位置に関係なく、通話相手をリストから選択して通話開始ボタンを操作する。したがって、仮想オフィスにビデオ通話を導入した場合であっても、それはスマートフォンなどでビデオ通話するのと大差なく、現実のオフィスで頻繁に行われているような、話したい人の傍に行って話しかけるという気軽さや便利さに欠ける。

【0006】

ところで音声通話の場合はデータ量が少ないため、例えばアバターに設定された円形の通話範囲内の他のアバターを音声チャネルへ自動的に招待し、音声通話を開始することも考えられる。

【0007】

しかし、ビデオ通話の場合は、音声通話よりもデータ量が大きい。したがって、仮に、通話範囲内の他のアバターとビデオ通話を自動的に開始する方法の場合、コンピュータリソースおよび通信帯域を多量に消費する。一方、ビデオ通話を開始するためのボタンを画面に用意し、そのボタンを押したときにビデオ通話を始めることも考えられるが、その場合は、通話開始のために特別な操作が必要となり、現実のオフィスで会話を始める場合とは乖離しており、ユーザにとっての使い勝手が低く、気軽なコミュニケーションを促進することができない。

【0008】

そこで、本発明の目的は、ユーザにとっての使い勝手を向上できるようにした仮想空間ビデオ通話システムおよび方法を提供することにある。

【課題を解決するための手段】

【0009】

本発明の一つの観点に係る仮想空間ビデオ通話システムは、複数のクライアント端末が仮想空間を介してビデオ通話を行う仮想空間ビデオ通話システムであって、複数のクライアント端末へ提供される仮想空間を制御する仮想空間制御部と、仮想空間でのビデオ通話を制御するビデオ通話制御部とを備え、仮想空間制御部は、複数のクライアント端末のうち第１クライアント端末に対応する第１アバターが、複数のクライアント端末のうち第２クライアント端末に対応する第２アバターに仮想空間で接触したか判定し、ビデオ通話制御部は、仮想空間制御部により第１アバターと第２アバターとが仮想空間で接触したと判定されると、第１クライアント端末と第２クライアント端末との間でビデオ通話を開始させる。

【0010】

ビデオ通話制御部は、仮想空間制御部により第１アバターと第２アバターとが仮想空間で接触したと判定されると、第１アバター内に第１クライアント端末からの画像を表示させると共に、第２アバター内に第２クライアント端末からの画像を表示させることにより、第１クライアント端末と第２クライアント端末との間でビデオ通話を開始させることができる。

【0011】

ビデオ通話制御部は、仮想空間制御部により第１アバターと第２アバターとが離れたと判定されると、第１クライアント端末と第２クライアント端末との間のビデオ通話を終了させてもよい。

【0012】

仮想空間制御部は、ビデオ通話制御部により第１クライアント端末と第２クライアント端末との間でビデオ通話が開始される際に、第１アバターおよび第２アバターの少なくとも一部を拡大させることができる。

【0013】

仮想空間制御部は、ビデオ通話制御部による第１クライアント端末と第２クライアント端末との間のビデオ通話の準備中に、第１アバターおよび第２アバターにビデオ通話を準備中であることを示す所定のエフェクトを設定することもできる。

【0014】

仮想空間制御部は、第１アバターが仮想空間を移動することにより第２アバターに接触したかを判定してもよい。

【0015】

仮想空間制御部は、第１クライアント端末により第１アバターの目的位置が指定されると、第１アバターの現在位置から目的位置までの所定の経路を算出し、算出された所定の経路に沿って第１アバターを移動させてもよい。

【0016】

所定の経路を決定する複数の経路モードがあらかじめ用意されており、仮想空間制御部は、複数の経路モードのうち第１クライアント端末により選択された経路モードにしたがって所定の経路を算出してもよい。

【0017】

ビデオ通話制御部は、第１クライアント端末と第２クライアント端末との間のビデオ通話からキーワードを抽出し、仮想空間制御部は、ビデオ通話制御部により抽出されたキーワードの少なくとも一部を、第１クライアントまたは第２クライアント端末以外の他のクライアント端末から確認できるように仮想空間に表示させてもよい。

【図面の簡単な説明】

【0018】

【図1】本実施形態の仮想空間ビデオ通話システムの全体概要図。

【図2】仮想空間ビデオ通話システムの機能構成図。

【図3】仮想オフィスの説明図。

【図4】ビデオ通話の準備中であるアバターの様子を示す説明図。

【図5】ビデオ通話中の様子を示す説明図。

【図6】アバターの位置およびサイズを調整した様子を示す説明図。

【図7】全体処理のフローチャート。

【図8】ビデオ通話処理のフローチャート。

【図9】ビデオ通話に他のアバターが加わる様子を示す説明図。

【図10】３人でビデオ通話する様子を示す説明図。

【図11】移動中のアバターに他のアバターが接触することによりビデオ通話が開始される様子を示す説明図。

【図12】ビデオ通話中の様子を示す説明図。

【図13】第２実施例に係り、ビデオ通話中のキーワードを仮想オフィスに表示させる処理を示すフローチャート。

【図14】ビデオ通話中のアバターのキーワードを表示する様子を示す説明図。

【図15】第３実施例に係る全体処理のフローチャート。

【図16】第４実施例に係る全体処理のフローチャート。

【図17】移動モードに応じて経路を決定するテーブル。

【図18】第５実施例に係る全体処理のフローチャート。

【図19】第６実施例に係る仮想空間ビデオ通話システムの機能構成図。

【図20】第７実施例に係る全体処理のフローチャート。

【発明を実施するための形態】

【0019】

本実施形態では、自分のアバターを話したい相手のアバターに向けて移動させて接触させるだけという直感的操作により、現実のオフィスでの会話と同様に、手軽に他のユーザとビデオ通話できるようにした仮想空間ビデオ通話システムを提供する。

【0020】

図１は、本実施形態の仮想空間ビデオ通話システム１の全体概要を示す。仮想空間ビデオ通話システム１は、例えば、仮想オフィス提供サーバ２と、複数のクライアント端末３とを備えている。

【0021】

仮想オフィス提供サーバ２は、「仮想空間」としての仮想オフィス４を各クライアント端末３へ提供する。仮想オフィス提供サーバ２は、仮想オフィス４を制御する「仮想空間制御部」としての仮想オフィス制御部２１と、仮想オフィスで行われるビデオ通話を制御するビデオ通話制御部２２を備える。以下の説明では、仮想空間ビデオ通話システム１をビデオ通話システム１と、仮想オフィス提供サーバ２をサーバ２と、それぞれ略記する場合がある。

【0022】

ユーザは、クライアント端末３を用いてサーバ２へアクセスし、仮想オフィスサービスへログインすることにより、自分のアバターＧＰ１を仮想オフィス４に出現させる。クライアント端末３は、後述のように、そのユーザインターフェース部３２に画像取得部としてのカメラを有する。

【0023】

仮想オフィス４は、ユーザの属する企業が使用する仮想空間である。仮想オフィス４のレイアウトは現実のオフィスのレイアウトに似せることもできるし、現実のオフィスとは異ならせることもできる。

【0024】

仮想オフィス４では、例えば、机ＧＰ２や椅子ＧＰ３などの什器備品、机上ネームプレートＧＰ４、会議室ＧＰ５、集中室ＧＰ６（いずれも図３参照）などが描画される。アバターＧＰ１があらかじめ定められた座席から離れている間、その座席には、ゴーストアバターＧＰ１２が表示される。ゴーストアバターＧＰ１２は、ユーザはログインしているがその座席には居ないことを示す。他のユーザがゴーストアバターＧＰ１２に接触すると、当該他のユーザはゴーストアバターＧＰ１２に対応するアバターＧＰ１の場所へ移動させられる。

【0025】

例えば、仮想オフィス４が第１フロアと第２フロアのように複数フロアを持つ場合を説明する。第１フロアにいる第１アバターＧＰ１が第２フロアへ移動しているときに、第１フロアにいる第２アバターＧＰ１が第１アバターＧＰ１のゴーストアバターＧＰ１２に接触すると、第２アバターＧＰ１は第２フロアの第１アバターＧＰ１の隣に移動する。

【0026】

アバターＧＰ１には、そのアバターの情報を示す情報表示部ＧＰ１１が対応付けられて表示される。情報表示部ＧＰ１１は、例えば、アバターＧＰ１を操作するユーザの氏名を含む。情報表示部ＧＰ１１は、氏名に加えて、ユーザの所属部署名、ユーザの行動の活発さを示す数値、ユーザの状態を示す情報などを表示することもできる。

【0027】

ユーザの状態には、例えば、体調、睡眠時間、体温、心拍数、疲労度、幸福度などの生体情報やメンタル情報を含めてもよい。ユーザが、生体情報を測定する機能を持つウェアラブル端末を装着している場合、情報表示部ＧＰ１１に表示される生体情報は随時更新される。生体情報から疲労度や幸福度などのメンタル情報を算出する機械学習モデルをサーバ２が持つ場合、ユーザのメンタル情報も情報表示部ＧＰ１１に随時表示させることができる。

【0028】

ユーザの自己申告した生体情報またはメンタル情報を情報表示部ＧＰ１１に表示させることもできる。例えば、ユーザがクライアント端末３を介してサーバ２へ入力した体調、体温、疲労度などの値を情報表示部ＧＰ１１に表示させてもよい。

【0029】

情報表示部ＧＰ１１は、生体情報またはメンタル情報などを数値またはテキストとして表示させることもできるし、情報表示部ＧＰ１１またはアバターＧＰ１の色や形状として表現することもできる。例えば、体調の悪い場合は、アバターＧＰ１を赤く表示したり、心拍数に応じて情報表示部ＧＰ１１を点滅させたりしてもよい。なお、生体情報またはメンタル情報は情報表示部ＧＰ１１に常時表示させる必要はなく、ポインタを情報表示部ＧＰ１１に合わせたときに、いわゆるポップアップウインドウを開かせて表示させることもできる。

【0030】

仮想オフィス４内でビデオ通話をする場合を説明する。例えば、図１中央の仮想オフィス４内の右下側に示すように、ユーザＵ３がユーザＵ１０とのビデオ通話を希望する場合を説明する。以下、例えば、ユーザＵ１の使用するアバターＧＰ１をアバターＧＰ１（Ｕ１）と、ユーザＵ１の使用するゴーストアバターＧＰ１２をゴーストアバターＧＰ１２（Ｕ１）と表記する。

【0031】

ユーザＵ３のアバターＧＰ１（Ｕ３）は、ユーザＵ１０のアバターＧＰ１（Ｕ１０）とのビデオ通話を希望する場合、現実のオフィスでもそうするように、自席からアバターＧＰ１（Ｕ１０）の居る場所へ移動する。このとき、ユーザＵ３は、アバターＧＰ１（Ｕ１０）をポインタＰＴなどで選択してクリックするだけでよい。仮想オフィス制御部２１は、アバターＧＰ１（Ｕ１０）が選択されると、アバターＧＰ１（Ｕ３）の現在位置からアバターＧＰ１（Ｕ１０）までの経路ＲＴを算出し、その経路ＲＴに沿ってアバターＧＰ１（Ｕ３）を所定速度で移動させる。

【0032】

所定速度は、現実のオフィスでユーザが歩く速度に似せた速度である。移動経路ＲＴは、現実のオフィスでの移動に似せて、アバターＧＰ１（Ｕ３）が他のアバター（例えばＧＰ１（Ｕ９））に接触しないように算出される。

【0033】

もしも、アバターＧＰ１（Ｕ９）が、アバターＧＰ１（Ｕ１０）に向けて移動中のアバターＧＰ１（Ｕ３）と接触した場合は、後述するように、その時点でアバターＧＰ１（Ｕ３）とアバターＧＰ１（Ｕ９）とのビデオ通話が開始される。ユーザＵ３が話し相手として最初に決めたユーザＵ１０とのビデオ通話を優先する場合は、後述のように、他ユーザＵ９からのビデオ通話を拒否するモードを選択することもできる。

【0034】

さて、アバターＧＰ１（Ｕ３）は、経路ＲＴを移動してアバターＧＰ１（Ｕ１０）の場所に到着する。アバターＧＰ１（Ｕ３）は、その外縁がアバターＧＰ１（Ｕ１０）の外縁に接触する位置で停止する。

【0035】

アバターＧＰ１（Ｕ３）とアバターＧＰ１（Ｕ１０）が接触すると、ビデオ通話制御部２２はビデオ通話の準備を開始する。ビデオ通話の準備が整うまでの間、仮想オフィス制御部２１は、ビデオ通話の対象であるアバターＧＰ１（Ｕ３），ＧＰ１（Ｕ１０）のそれぞれにビデオ通話準備中を示す所定のエフェクトＧＰ１３を表示させる。所定のエフェクトＧＰ１３は、例えば、アバターＧＰ１の色を変えたり、明滅させたり、サイズを拡縮させたり、アニメーションを表示させたりすることにより、ビデオ通話の対象者Ｕ３，Ｕ１０だけでなく、周囲の他のユーザにもビデオ通話の開始を通知する。

【0036】

図１の下側に示すように、ビデオ通話が開始される場合、ビデオ通話に参加する各アバターＧＰ１（Ｕ３），ＧＰ１（Ｕ１０）は、そのサイズが所定量だけ拡大する。そして、拡大されたアバターの中にユーザのビデオＶＤが表示される。すなわち、拡大されたアバターＧＰ１（Ｕ３）の中には、ユーザＵ３の顔画像を含むビデオＶＤ（Ｕ３）が表示される。同様に、拡大されたアバターＧＰ１（Ｕ１０）の中には、ユーザＵ１０のビデオＶＤ（Ｕ１０）が表示される。

【0037】

詳しくは、アバターＧＰ１の中にユーザの顔画像が表示されるか否かは、クライアント端末３のカメラの向き、就業規則などに依存する。ユーザがいわゆる顔出しを希望しない場合、ユーザはカメラをオフにしたり、ユーザの居ない方向にカメラを向けたり、静止画像またはアニメーションを顔画像に代えて表示させたりすることもできる。

【0038】

ビデオ通話に参加していない他のユーザには、ビデオ通話中のアバターは通常サイズで表示される。ビデオ通話中であることを他のユーザへ明確に知らせるために、ビデオ通話中のアバターの色や形または大きさを変化させてもよい。

【0039】

このように構成される本実施形態の仮想空間ビデオ通話システム１によれば、ユーザは、自分を象徴するアバターを話したい相手のアバターに接触させるだけでビデオ通話を開始することができるため、直感的操作で手軽にビデオ通話を利用することができ、現実のオフィスでの会話と同様のコミュニケーションを簡単に取ることができる。

【0040】

さらに、本実施形態では、アバターの内部にユーザの顔画像を表示させるため、その顔画像を通じて話し相手の様子を知ることができる上に、アバター以外の画面を顔画像で隠さないため、ビデオ通話の当事者は、仮想オフィス４内の状況を確認しながらビデオ通話を行うことができ、利便性が向上する。

【0041】

通常のビデオ通話システムの場合、ビデオ通話そのものが目的であるため、ビデオ通話に参加する各ユーザの顔画像をできるだけ大きく写しだそうとする。これに対し、本実施形態の仮想空間ビデオ通話システム１は、仮想オフィス４内での総合的コミュニケーションの推進が目的であり、ビデオ通話はそのための一つの手段に過ぎない。仮想オフィス４でのコミュニケーションには、ユーザが着席しているか、出かけているかといった着席状態の確認、他のアバターによるビデオ通話の有無、他のアバターが移動する様子、多忙であることを示すマークの有無、といった非言語コミュニケーションも含まれる。このため、本実施形態の仮想空間ビデオ通話システム１は、非言語コミュニケーションも十分に利用できるように、ビデオ通話中の顔画像をアバター内に留める。顔画像は小さくても、ユーザの様子はわかるため、ビデオ通話でのコミュニケーションに支障はない。

【0042】

本実施例では、ユーザは、話したい相手のアバターを選択するだけで、そのユーザのアバターから話し相手のアバターまでの経路が算出され、ユーザのアバターは経路上を通常の歩行速度で移動する。したがって、仮想オフィス４であるがゆえの操作の利便性を享受しつつ、現実のオフィスを模した仮想オフィス４を得ることができる。

【実施例0043】

図２～図１２を用いて第１実施例を説明する。図２は、仮想空間ビデオ通話システム１の機能構成を示す。

【0044】

仮想空間ビデオ通話システム１は、図１でも述べたように、仮想オフィス提供サーバ２と、複数のクライアント端末３とを備えており、サーバ２と各クライアント端末３とは通信ネットワークＣＮを介して双方向通信可能に接続されている。

【0045】

サーバ２は、プロセッサ２００およびメモリ２０１を備えたコンピュータであり、メモリ２０１に格納されたコンピュータプログラムを実行することにより、仮想オフィス提供サーバ２としての機能が実現される。

【0046】

サーバ２は、例えば、仮想オフィス制御部２１と、ビデオ通話制御部２２と、データベース（図中、ＤＢ）２３および通信部２４を備える。仮想オフィス制御部２１およびビデオ通話制御部２２の詳細は後述する。

【0047】

データベース２３には、例えば、仮想オフィスサービスを利用する各ユーザの認証情報を管理するテーブル、各ユーザの仮想オフィスの利用履歴を管理するテーブル、仮想オフィス４に配置される各種オブジェクトの位置および表示形態などを管理するテーブル（いずれも不図示）などが含まれる。

【0048】

通信部２４は、通信ネットワークＣＮを介して各クライアント端末３と双方向通信する機能である。

【0049】

記憶媒体ＭＭは、例えば、フラッシュメモリまたはハードディスクドライブなどの比較的長時間データを保持可能な記憶媒体である。記憶媒体ＭＭをサーバ２に接続することにより、記憶媒体ＭＭとメモリ２０１の間でコンピュータプログラムの少なくとも一部を転送することができる。

【0050】

クライアント端末３は、ユーザにより使用されるコンピュータである。クライアント端末３は、例えば、ラップトップ型パーソナルコンピュータ、デスクトップ型パーソナルコンピュータ、タブレット型パーソナルコンピュータ、携帯情報端末（いわゆるスマートフォンを含む）、ウェアラブル端末などのように構成される。

【0051】

クライアント端末３は、例えば、仮想オフィスアプリケーション３１と、ユーザインターフェース（図中、ＵＩ）部３２と、通信部３３を備える。

【0052】

仮想オフィスアプリケーション３１は、仮想オフィス４でアバターＧＰ１を操作するためのコンピュータプログラムである。ユーザインターフェース部３２は、ユーザとクライアント端末３とが情報入出力装置（不図示）を介して情報を入出力する機能である。情報入出力装置としては、例えば、キーボード、ポインティングデバイス、マイクロフォン、カメラ、モニタディスプレイ、プリンタ、スピーカなどがある。通信部３３は、通信ネットワークＣＮを介してサーバ２と双方向通信する機能を持つ。

【0053】

図３は、仮想オフィス４の例を示す。仮想オフィス４は、仮想的な２次元空間または仮想的な三次元空間として構成される。仮想オフィス４は、いわゆる仮想的な２．５次元空間として構成されてもよい。

【0054】

上述の通り、仮想オフィス４には、各ユーザに対応するアバターＧＰ１と、現実のオフィスに配置されるような什器備品ＧＰ２，ＧＰ３と、机上ネームプレートＧＰ４と、会議室ＧＰ５と、集中室ＧＰ６などが設けられる。

【0055】

会議室ＧＰ５は、ユーザ同士がアバターを介して会議する領域である。会議室ＧＰ５に誰が入室しているかは、会議室ＧＰ５以外の領域から目視で確認できる。アバターＧＰ１が会議室ＧＰ５に入室すると、自動的にビデオ通話の参加者となる。例えば、アバターＧＰ１（Ｕ８）の居る会議室ＧＰ５へアバターＧＰ１（Ｕ１２）が入室すると、アバター同士のビデオ通話が開始される。アバター同士が接触する必要はない。会議室ＧＰ５は、会議のための領域であるから、入室時点でそのアバターがビデオ通話を希望していることは明らかなためである。

【0056】

集中室ＧＰ６は、作業や思考に専念したいユーザの使用する領域である。集中室ＧＰ６には、一人のアバターのみ入ることができる。他のアバターは、集中室ＧＰ６内のアバターに接触できないため、集中室ＧＰ６に入室しているアバターとビデオ通話をすることはできない。例えば、集中室ＧＰ６に入室しているアバターの机上ネームプレートＧＰ４にメッセージを表示することにより、連絡することができる。

【0057】

アバターＧＰ１は、全ユーザに共通のデザインを適用してもよいし、髪型やアクセサリーなどのパーツ毎に選択可能としてもよい。アバターＧＰ１は、人間を模したデザインである必要はなく、動植物などでもよい。アバターには、通常のアバターＧＰ１、ゴーストアバターＧＰ１２、多忙アバターＧＰ１Ｎなどの複数種類が用意されてもよい。多忙アバターＧＰ１Ｎは、多忙であり、他ユーザからのビデオ通話を受け付けないことを周囲に知らせるためのアバターである。したがって、多忙アバターＧＰ１Ｎに他ユーザのアバターＧＰ１が接触しても、ビデオ通話は開始されない。

【0058】

上述のアバター以外に、例えば、ビデオ通話を歓迎することを周囲に知らせるための雑談アバターなどを用意してもよい。ユーザは、所望のアバターを自由に選択できる。

【0059】

図４は、ユーザＵ１がユーザＵ１６とビデオ通話する様子を示す。ユーザＵ１が、話したい相手のアバターＧＰ１（Ｕ１６）を画面上で選択すると、アバターＧＰ１（Ｕ１）からアバターＧＰ１（Ｕ１６）までの経路ＲＴが算出され、アバターＧＰ１（Ｕ１）はその経路ＲＴ上を所定速度（現実のオフィスでの歩行に対応する速度）で移動する。

【0060】

そして、アバターＧＰ１（Ｕ１）が目的位置であるアバターＧＰ１（Ｕ１６）の場所へ到達すると、アバターＧＰ１（Ｕ１）は、その外縁がアバターＧＰ１（Ｕ１６）の外縁に接する位置で停止する。アバター同士は実質的に重ならない。重なってしまうとビデオ通話でビデオＶＤが表示される面積が小さくなるためである。ビデオＶＤの表示領域に影響を与えない範囲で、アバター同士が重なってもよい。アバター同士が接触すると、ビデオ通話の準備を開始していることを示すエフェクトＧＰ１３が各アバターＧＰ１（Ｕ１），ＧＰ１（Ｕ１６）に表示される。

【0061】

図５は、ビデオ通話が開始された様子を示す。ビデオ通話する各アバターＧＰ１（Ｕ１），ＧＰ１（Ｕ１６）は、そのサイズが所定量（所定割合）だけ拡大する。アバターの全体が大きくなってもよいし、アバターの一部（例えば上半身または頭部に相当する部分）だけが大きくなってもよい。

【0062】

拡大されたアバターの中に、ユーザの使用するクライアント端末３で撮影されたビデオＶＤが表示される。ビデオＶＤは、クライアント端末３のカメラで撮影したライブ映像に限らず、ユーザの選択したアニメーションまたは静止画像でもよい。

【0063】

アバター同士が接触した位置において、アバター内でビデオＶＤが表示されるため、アバターを操作するユーザは、ビデオ通話するアバター以外の仮想オフィス４の様子を容易に確認することができる。

【0064】

図６は、ビデオ通話時におけるアバター表示の変形例を示す。図５では、アバター同士が仮想オフィス４で接触した位置でビデオ通話を開始させた。本変形例では、互いに接触するアバター同士（ビデオ通話する一組のアバター）の位置を、最初の接触位置とは異なる位置に変更させて、ビデオ通話を開始させる。図６では、アバターＧＰ１（Ｕ１），ＧＰ１（Ｕ１６）は、仮想オフィス４の中央部に再配置されている。仮想オフィス４の中央部に限らず、例えば、仮想オフィスの四隅の領域などにアバター同士を移動させてビデオ通話させてもよい。

【0065】

図７は、仮想空間ビデオ通話システム１の全体処理を示すフローチャートである。以下に述べるフローは一例であって、図示する以外の方法でも本実施例の仮想空間ビデオ通話システム１を実現することができる。

【0066】

サーバ２の仮想オフィス制御部２１は、図示せぬ初期化処理およびユーザのログイン処理を終えた後で、クライアント端末３からユーザの操作を受け付けると（Ｓ１１）、そのユーザ操作に応じて仮想オフィス４の表示を制御する（Ｓ１２）。

【0067】

仮想オフィス制御部２１は、ユーザがアバターの移動を指示したか監視しており（Ｓ１３）、アバターの移動操作が指示された場合（Ｓ１３：ＹＥＳ）、移動元（現在位置）と移動先（目標位置）との間を結ぶ経路ＲＴを算出する（Ｓ１４）。経路ＲＴは、他ユーザのアバターおよび机などのオブジェクトに接触しないように算出される。

【0068】

仮想オフィス制御部２１は、移動対象のアバターを経路ＲＴに沿って移動先まで所定速度で移動させる（Ｓ１５）。仮想オフィス制御部２１は、移動対象のアバターが他のアバターと接触したか判定する（Ｓ１６）。移動対象のアバターが他のアバターと接触すると（Ｓ１６：ＹＥＳ）、仮想オフィス制御部２１は、アバターの移動を停止させ（Ｓ１７）、ビデオ通話制御部２２に対してビデオ通話の開始を指示する（Ｓ１８）。

【0069】

移動対象のアバターが、話し相手として選択したアバターの場所まで移動した場合は、各アバターの外縁同士が接触するため（Ｓ１６：ＹＥＳ）、各アバターを操作するユーザ間で、アバター内でのビデオ通話が開始される（Ｓ１８）。

【0070】

移動対象のアバターが経路ＲＴを移動中に、話し相手として選択していない他のアバターと接触した場合（Ｓ１６：ＹＥＳ）、その予定外のアバターを操作するユーザとのビデオ通話がアバター内で開始される（Ｓ１８）。

【0071】

移動対象のアバターが経路ＲＴを移動中に、既にビデオ通話中のアバターのいずれか一方と接触した場合（Ｓ１６：ＹＥＳ）、移動対象のアバターを操作するユーザは、既に始まっているビデオ通話に参加する（Ｓ１８）。

【0072】

仮想オフィス制御部２１は、仮想オフィスサービスの停止が指示されるまで（Ｓ１９）、本処理を実行する。

【0073】

図８は、図７中のビデオ通話処理Ｓ１８の詳細を示すフローチャートである。ビデオ通話制御部２２は、アバター同士が接触してビデオ通話の開始が指示されると、ビデオおよび音声の共有などのビデオ通話の準備を開始する（Ｓ３１）。

【0074】

ビデオ通話制御部２２は、ビデオ通話の準備を開始すると、仮想オフィス制御部２１に準備中エフェクトＧＰ１３の表示を要求する（Ｓ３２）。

【0075】

ビデオ通話制御部２２は、ビデオ通話の準備が完了すると（Ｓ３３：ＹＥＳ）、準備中エフェクトＧＰ１３の表示の停止とアバター２１のサイズ拡大とを、仮想オフィス制御部２１に要求する（Ｓ３４）。

【0076】

仮想オフィス制御部２１は、ビデオ通話を行うアバターの仮想オフィス４内での位置を調整するか判定する（Ｓ３５）。アバターの位置を調整する場合（Ｓ３５：ＹＥＳ）、仮想オフィス制御部２１は、ビデオ通話を行うアバター同士を所定のビデオ通話領域に移動させる（Ｓ３６）。

【0077】

所定のビデオ通話領域とは、ビデオ通話をするアバターの置かれる領域である。所定のビデオ通話領域は、例えば、仮想オフィス４の中央部でもよいし、四隅でもよい。仮想オフィス４内でビデオ通話するユーザ数に応じて、所定のビデオ通話領域にアバターを移動させるか否かを決定してもよい。例えば、ビデオ通話するユーザが多い場合、アバターの接触位置でそのままビデオ通話させ、ビデオ通話するユーザが少ない場合、仮想オフィス４の中央部や四隅にアバターを移動させることができる。

【0078】

アバターの位置を調整せずに現在位置のままでビデオ通話させる場合（Ｓ３５：ＮＯ）、ステップＳ３６をスキップしてステップＳ３７へ進む。

【0079】

ビデオ通話制御部２２は、アバター内にクライアント端末３のカメラで撮影したビデオＶＤを表示させると共に（Ｓ３７）、音声通話を開始させる（Ｓ３８）。

【0080】

仮想オフィス制御部２１は、アバター同士の接触が解消したか否か、すなわちビデオ通話中のアバター同士が離れたか判定する（Ｓ３９）。アバター同士が接触し続けている間（Ｓ３９：ＮＯ）、ビデオ通話は維持される（Ｓ３７，Ｓ３８）。アバター同士が離れると（Ｓ３９：ＹＥＳ）、ビデオ通話は終了する（Ｓ４０）。

【0081】

仮想オフィス制御部２１は、ビデオ通話の終了を知ると、アバターの位置およびサイズを、ステップＳ３４およびステップＳ３６の実施前の状態へ戻す（Ｓ４１）。

【0082】

なお、アバター同士の接触が解消した場合であっても、ただちにビデオ通話を終了させるのではなく、所定の短時間だけビデオ通話を継続させることもできる。例えば、ユーザが誤操作によりアバターを動かしてしまったような場合に備えるためである。

【0083】

図９，図１０は、既に行われているビデオ通話に他のアバターが加わる例を示す。ここでは、アバターＧＰ１（Ｕ１）とアバターＧＰ１（Ｕ１６）とが接触して、ユーザＵ１とユーザＵ１６の間でビデオ通話が行われているものとする。

【0084】

第３のユーザＵ５がアバターＧＰ１（Ｕ５）を移動させて、アバターＧＰ１（Ｕ１）またはアバターＧＰ１（Ｕ１６）のいずれかに接触した場合、図１０に示すように、アバターＧＰ１（Ｕ５）もビデオ通話に加わる。

【0085】

図１１，図１２は、話したい相手のアバターへ向けて移動中のアバターに、他のアバターが接触して予定外のビデオ通話が開始される様子を示す。

【0086】

ユーザＵ１がユーザＵ１６とビデオ通話するために、アバターＧＰ１（Ｕ１）をアバターＧＰ１（Ｕ１６）に向けて経路ＲＴ１を移動させている場合において、ユーザＵ５がユーザＵ１とのビデオ通話を希望すると、ユーザＵ５は、アバターＧＰ１（Ｕ５）を移動中のアバターＧＰ１（Ｕ１）へ接触させる。

【0087】

ユーザＵ５が移動中のアバターＧＰ１（Ｕ１）を選択すると、アバターＧＰ１（Ｕ５）からアバターＧＰ１（Ｕ１）までの経路ＲＴ２が設定される。アバターＧＰ１（Ｕ５）は、その経路ＲＴ２に沿って移動し、移動中のアバターＧＰ１（Ｕ１）に接触する。

【0088】

移動中のアバターを追いかける場合の速度Ｖ２は、現実のオフィスでの早足に似せて、所定の速度Ｖ１よりも大きく設定することができる。これにより、図１２に示すように、ユーザＵ５は、ユーザＵ１がユーザＵ１６とビデオ通話する前に、ビデオ通話をすることができる。

【0089】

このように構成される本実施例によれば、ユーザは、自分の操作するアバターを話したい相手のアバターに接触させるだけでビデオ通話を開始することができ、ビデオ通話を開始させるためのボタン操作や音声指示などは不要である。したがって、仮想空間ビデオ通話システム１のユーザは、直感的操作で手軽にビデオ通話を利用することができ、現実のオフィスでの会話と同様のコミュニケーションを簡単に取ることができる。

【0090】

本実施例では、アバターの内部にユーザの顔画像を含むビデオＶＤを表示させるため、顔画像を通じて話し相手の様子を知ることができる上に、アバター以外の画面を顔画像で隠さないため、ビデオ通話の当事者は、仮想オフィス４内の状況を確認しながらビデオ通話を行うことができ、利便性が向上する。すなわち、本実施例によれば、仮想オフィス４の観察と、話し相手の状況確認とを一つの画面内で両立させることができる。

【0091】

本実施例では、ユーザは、話したい相手のアバターを選択するだけで、そのユーザのアバターから話し相手のアバターまでの経路が算出され、ユーザのアバターは経路上を通常の歩行速度で移動する。したがって、仮想オフィス４であるがゆえの操作の利便性を享受しつつ、現実のオフィスを模した仮想オフィス４を得ることができる。

【0092】

本実施例では、ユーザは、ビデオ通話中のアバターのいずれかに自分のアバターを接触させるだけで、そのビデオ通話に加わることができる。これにより、雑談をさらに促進することができる。

【0093】

本実施例では、ユーザは、ビデオ通話を行おうとして移動中のアバターに自分のアバターを接触させるだけで、予定外のビデオ通話を開催することもできる。これにより、現実のオフィスでよく見られるように、近くを通りがかったユーザを呼び止めて会話するといった使い方もでき、利便性が向上する。

【実施例0094】

図１３および図１４を用いて第２実施例を説明する。本実施例を含む以下の各実施例では、第１実施例との差異を中心に述べる。本実施例では、ビデオ通話中のキーワードを仮想オフィス４内の他のユーザから見えるように表示させる。

【0095】

図１３は、本実施例の仮想空間ビデオ通話システムの全体処理である。本処理は、図８で述べた処理と比べると、ステップＳ３８とステップＳ３９の間に新規なステップＳ５０が追加されている。

【0096】

新規ステップＳ５０では、仮想オフィス制御部２１は、ビデオ通話制御部２２から渡されたキーワードを仮想オフィス４内に表示させる。ビデオ通話制御部２２は、音声通話チャネルを流れる音声を認識してテキストデータに変換し、変換されたテキストデータを解析することにより、キーワードを抽出する。ビデオ通話制御部２２は、抽出されたキーワードの一部または全部を仮想オフィス制御部２１へ送る。仮想オフィス制御部２１は、ビデオ通話制御部２２から入力されたキーワードの一部または全部を、吹き出しＧＰ１４に表示させる。仮想オフィス４内の他のユーザは、吹き出しＧＰ１４に表示されるキーワードを見ることができる。

【0097】

図１４では、各ユーザの発言を分離して吹き出しＧＰ１４に表示させるかのように示しているが、キーワードと発言者を明確に区別しなくてもよい。誰の発言かを区別せずに、複数の吹き出しＧＰ１４を順番に使用してキーワードを表示させることができる。あるいは、アバター同士の接触箇所に一つだけ吹き出しＧＰ１４を表示させてもよい。

【0098】

このように構成される本実施例も第１実施例と同様の作用効果を奏する。さらに本実施例では、ビデオ通話中のキーワードの少なくとも一部を仮想オフィス内に表示させることができるため、周囲のユーザに雑談内容などを推測させることができる。これにより、興味を刺激された他のユーザは、自分のアバターを雑談中のアバターに接触させて、その雑談に気軽に加わることができる。

【0099】

キーワードは、ユーザ属性に応じて抽出してもよいし、ユーザ属性を問わずにランダムに抽出してもよい。例えば、ユーザの所属する部署に対応付けられた辞書データベースに登録済みキーワードがビデオ通話の音声チャネルから検出された場合に、そのキーワードを仮想オフィス４に表示させることができる。

【0100】

さらに、会話内容を評価し、その得点をユーザ毎に管理してもよい。例えば、所属部署の業務または会社の事業に関連する所定のキーワードがビデオ通話から検出された場合は、通話中のユーザに高得点を与え、それら以外の一般的キーワードの場合は、通話中のユーザに低得点を与えてもよい。これにより、テレワーク中のユーザの業務貢献度を間接的に測定することもできる。