特許 7521074 仮想空間コンテンツ配信システム、仮想空間コンテンツ配信プログラム、および仮想空間コンテンツ配信方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2024-07-12

(45)【発行日】2024-07-23

(54)【発明の名称】仮想空間コンテンツ配信システム、仮想空間コンテンツ配信プログラム、および仮想空間コンテンツ配信方法

(51)【国際特許分類】

   H04N 21/239 20110101AFI20240716BHJP

   H04N 21/258 20110101ALI20240716BHJP

   G06T 13/40 20110101ALI20240716BHJP

   G06T 19/00 20110101ALI20240716BHJP

【ＦＩ】

H04N21/239

H04N21/258

G06T13/40

G06T19/00 300B

【請求項の数】 13

(21)【出願番号】P 2023102735

(22)【出願日】2023-06-22

【審査請求日】2024-04-11

【早期審査対象出願】

(73)【特許権者】

【識別番号】519120525

【氏名又は名称】カバー株式会社

(74)【代理人】

【識別番号】100098729

【弁理士】

【氏名又は名称】重信 和男

(74)【代理人】

【識別番号】100206656

【弁理士】

【氏名又は名称】林 修身

(74)【代理人】

【識別番号】100206911

【弁理士】

【氏名又は名称】大久保 岳彦

(74)【代理人】

【識別番号】100204467

【弁理士】

【氏名又は名称】石川 好文

(74)【代理人】

【識別番号】100148161

【弁理士】

【氏名又は名称】秋庭 英樹

(74)【代理人】

【識別番号】100195833

【弁理士】

【氏名又は名称】林 道広

(72)【発明者】

【氏名】下江 航

【審査官】醍醐 一貴

(56)【参考文献】

【文献】国際公開第２０２２／２０１３７１（ＷＯ，Ａ１）

【文献】特開２０２０－１２２８５７（ＪＰ，Ａ）

【文献】特開２０２０－１０２２３６（ＪＰ，Ａ）

【文献】特表２０２２－５３３７３４（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２１／００－２１／８５８

Ｇ０６Ｔ １／００

Ｇ０６Ｔ １１／００－１３／８０

Ｇ０６Ｔ １５／００－１９／２０

(57)【特許請求の範囲】

【請求項1】

仮想空間における仮想空間コンテンツを配信可能な仮想空間コンテンツ配信システムであって、
前記仮想空間コンテンツの映像を表示可能な端末であって、前記仮想空間コンテンツの対象となる仮想空間に参加可能な視聴者アバターを該仮想空間において動作させる操作を行う視聴者ユーザーが利用可能な視聴者ユーザー端末と、
前記視聴者ユーザー端末に通信ネットワークを介して接続され、少なくとも前記仮想空間に関する処理と前記仮想空間コンテンツの配信に関する処理とを実行可能なサーバコンピュータと、
を含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内における前記視聴者アバターの移動を制限する一方、前記第２コンテンツが配信されている期間においては前記仮想空間内における前記視聴者アバターの移動を制限しない動作制限手段を備える
ことを特徴とする仮想空間コンテンツ配信システム。

【請求項2】

仮想空間における仮想空間コンテンツを配信可能な仮想空間コンテンツ配信システムであって、
前記仮想空間コンテンツの映像を表示可能な端末であって、前記仮想空間コンテンツの対象となる仮想空間に参加可能な視聴者アバターを該仮想空間において動作させる操作を行う視聴者ユーザーが利用可能な視聴者ユーザー端末と、
前記視聴者ユーザー端末に通信ネットワークを介して接続され、少なくとも前記仮想空間に関する処理と前記仮想空間コンテンツの配信に関する処理とを実行可能なサーバコンピュータと、
を含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限する一方、前記第２コンテンツが配信されている期間においては前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限しない動作制限手段を備える
ことを特徴とする仮想空間コンテンツ配信システム。

【請求項3】

前記仮想空間内には、前記視聴者アバターに対応する特定領域が設けられており、
前記動作制限手段は、前記特定領域の外への移動を制限する一方、前記特定領域内での移動は制限しない
ことを特徴とする請求項１に記載の仮想空間コンテンツ配信システム。

【請求項4】

前記視聴者アバターは、前記視聴者ユーザー端末における特定操作によって特定動作を行うことが可能であって、
前記動作制限手段は、前記第１コンテンツが配信されている期間と前記第２コンテンツが配信されている期間のいずれの期間おいても前記特定動作を制限しない
ことを特徴とする請求項１または２に記載の仮想空間コンテンツ配信システム。

【請求項5】

前記特定動作は、前記視聴者ユーザー端末における操作によって前記視聴者アバターが行うことが可能な動作のうち、前記第１コンテンツが配信されている期間と前記第２コンテンツが配信されている期間のいずれの期間おいても、仮想空間に参加している他のアバターに違和感を与えることがない動作として事前に許容されている動作である
ことを特徴とする請求項４に記載の仮想空間コンテンツ配信システム。

【請求項6】

前記動作制限手段は、前記第１コンテンツが配信される前の所定期間についても、前記第１コンテンツの配信期間とみなすことで前記仮想空間内における前記視聴者アバターの移動を制限する
ことを特徴とする請求項１に記載の仮想空間コンテンツ配信システム。

【請求項7】

前記動作制限手段は、前記第１コンテンツが配信される前の所定期間についても、前記第１コンテンツの配信期間とみなすことで前記前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限する
ことを特徴とする請求項２に記載の仮想空間コンテンツ配信システム。

【請求項8】

前記視聴者アバターは、前記第１コンテンツが配信されている期間においては該第１コンテンツに対応した対応動作を実行可能である
ことを特徴とする請求項１または２に記載の仮想空間コンテンツ配信システム。

【請求項9】

前記第１コンテンツは、前記仮想空間に参加可能な演者アバターにより上演される上演コンテンツを含む
ことを特徴とする請求項１または２に記載の仮想空間コンテンツ配信システム。

【請求項10】

仮想空間における仮想空間コンテンツを、少なくともサーバコンピュータを用いてネットワークを介して配信するための仮想空間コンテンツ配信プログラムであって、
前記仮想空間コンテンツの対象となる仮想空間に参加可能なアバターは、視聴者ユーザーが利用可能な端末であって前記ネットワークを介して前記サーバコンピュータに接続された視聴者ユーザー端末における操作によって前記仮想空間において動作する視聴者アバターを含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内における前記視聴者アバターの移動を制限する一方、前記第２コンテンツが配信されている期間において前記仮想空間内における前記視聴者アバターの移動を制限しない動作制限ステップを含む
ことを特徴とする仮想空間コンテンツ配信プログラム。

【請求項11】

仮想空間における仮想空間コンテンツを、少なくともサーバコンピュータを用いてネットワークを介して配信するための仮想空間コンテンツ配信プログラムであって、
前記仮想空間コンテンツの対象となる仮想空間に参加可能なアバターは、視聴者ユーザーが利用可能な端末であって前記ネットワークを介して前記サーバコンピュータに接続された視聴者ユーザー端末における操作によって前記仮想空間において動作する視聴者アバターを含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限する一方、前記第２コンテンツが配信されている期間において前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限しない動作制限ステップを含む
ことを特徴とする仮想空間コンテンツ配信プログラム。

【請求項12】

仮想空間における仮想空間コンテンツを、少なくともサーバコンピュータを用いてネットワークを介して配信するための仮想空間コンテンツ配信方法であって、
前記仮想空間コンテンツの対象となる仮想空間に参加可能なアバターは、視聴者ユーザーが利用可能な端末であって前記ネットワークを介して前記サーバコンピュータに接続された視聴者ユーザー端末における操作によって前記仮想空間において動作する視聴者アバターを含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内における前記視聴者アバターの移動を制限する一方、前記第２コンテンツが配信されている期間において前記仮想空間内における前記視聴者アバターの移動を制限しない動作制限手順を含む
ことを特徴とする仮想空間コンテンツ配信方法。

【請求項13】

仮想空間における仮想空間コンテンツを、少なくともサーバコンピュータを用いてネットワークを介して配信するための仮想空間コンテンツ配信方法であって、
前記仮想空間コンテンツの対象となる仮想空間に参加可能なアバターは、視聴者ユーザーが利用可能な端末であって前記ネットワークを介して前記サーバコンピュータに接続された視聴者ユーザー端末における操作によって前記仮想空間において動作する視聴者アバターを含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限する一方、前記第２コンテンツが配信されている期間において前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限しない動作制限手順を含む
ことを特徴とする仮想空間コンテンツ配信方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、仮想空間における仮想空間コンテンツを配信可能な仮想空間コンテンツ配信システム、仮想空間コンテンツ配信プログラム、および仮想空間コンテンツ配信方法に関する。

【背景技術】

【0002】

従来、配信ユーザ（演者）の動きに連動して仮想空間において動作する該配信ユーザ（演者）のキャラクタオブジェクト（アバター）のアニメーションを含む動画コンテンツを、視聴者ユーザーの端末とコンピュータネットワークを介して接続されたサーバコンピュータからライブ配信するとともに、視聴する視聴者ユーザーについても、視聴者ユーザーからの要求に応じて、配信ユーザ（演者）のアバターが参加している仮想空間に観客として参加することが可能な配信システムが知られている（例えば、特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１２－１２００９８号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１にあっては、仮想空間における視聴者ユーザーのアバター動作に関し、配信ユーザ（演者）のアバターによってパフォーマンス（ダンス）や歌唱等が上演されている期間においては規制等がされておらず、視聴者ユーザーのアバター（視聴者アバター）による動作によって、配信される仮想空間コンテンツの興趣が著しく低下してしまう畏れがあるという問題がある。

【0005】

本発明は、このような問題点に着目してなされたもので、視聴者アバターによる動作によって仮想空間コンテンツの興趣が低下してしまうことを防ぐことのできる仮想空間コンテンツ配信システム、仮想空間コンテンツ配信プログラム、および仮想空間コンテンツ配信方法を提供することを目的とする。

【課題を解決するための手段】

【0006】

請求項１の仮想空間コンテンツ配信システムは、
仮想空間（例えば、仮想ライブ会場）における仮想空間コンテンツ（例えば、仮想ライブ）を配信可能な仮想空間コンテンツ配信システムであって、
前記仮想空間コンテンツの映像を表示可能な端末（例えば、スマートフォンＰ、コンピュータＰＣ）であって、前記仮想空間コンテンツの対象となる仮想空間に参加可能な視聴者アバターを該仮想空間において動作させる操作を行う視聴者ユーザーが利用可能な視聴者ユーザー端末（例えば、視聴者端末３００）と、
前記視聴者ユーザー端末に通信ネットワーク（例えば、インターネット）を介して接続され、少なくとも前記仮想空間に関する処理（例えば、仮想空間更新処理、仮想空間更新データ生成処理等）と前記仮想空間コンテンツの配信に関する処理（例えば、仮想空間更新データ配信処理、生成音声配信処理等）とを実行可能なサーバコンピュータ（例えば、配信用サーバコンピュータ）と、
を含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツ（例えば、楽曲のコンテンツ）と、前記第１コンテンツとは異なる第２コンテンツ（例えば、ＭＣ（トーク）のコンテンツ）とを含み、
前記第１コンテンツが配信されている期間（例えば、各演目期間）において前記視聴者アバターの動作のうち前記仮想空間内における前記視聴者アバターの移動を制限する一方、前記第２コンテンツが配信されている期間（例えば、各ＭＣ期間）においては前記仮想空間内における前記視聴者アバターの移動を制限しない動作制限手段（例えば、演目期間中は、図４１に示すように、視聴者端末３００において移動のメニュー項目が非アクティブとされることで視聴者アバターの移動が制限（禁止）される一方、ＭＣ期間中においては、図４０に示すように、移動のメニュー項目がアクティブとされることで視聴者アバターの移動が可能とされている部分）
ことを特徴としている。
この特徴によれば、第１コンテンツが配信されている期間においては視聴者アバターの移動が制限されるので、移動によって第１コンテンツの興趣が低下してしまうことを防ぐことができる。また、これら移動は、第２コンテンツの配信期間においては制限されないので、視聴者アバターの移動が過度に制限されてしまうことも防ぐことができる。

【0007】

請求項２の仮想空間コンテンツ配信システムは、
仮想空間における仮想空間コンテンツを配信可能な仮想空間コンテンツ配信システムであって、
前記仮想空間コンテンツの映像を表示可能な端末であって、前記仮想空間コンテンツの対象となる仮想空間に参加可能な視聴者アバターを該仮想空間において動作させる操作を行う視聴者ユーザーが利用可能な視聴者ユーザー端末と、
前記視聴者ユーザー端末に通信ネットワークを介して接続され、少なくとも前記仮想空間に関する処理と前記仮想空間コンテンツの配信に関する処理とを実行可能なサーバコンピュータと、
を含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限する一方、前記第２コンテンツが配信されている期間においては前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限しない動作制限手段を備える
ことを特徴としている。
この特徴によれば、第１コンテンツが配信されている期間においては仮想空間内に参加している他のアバターに対して作用を及ぼす動作が制限されるので、該動作によって第１コンテンツの興趣が低下してしまうことを防ぐことができる。また、これら仮想空間内に参加している他のアバターに対して作用を及ぼす動作は、第２コンテンツの配信期間においては制限されないので、視聴者アバターの他のアバターに対して作用を及ぼす動作が過度に制限されてしまうことも防ぐことができる。

【0008】

請求項３の仮想空間コンテンツ配信システムは、請求項１に記載の仮想空間コンテンツ配信システムであって、
前記仮想空間内には、前記視聴者アバターに対応する特定領域（例えば、変形例３－１におけるＨ５の領域）が設けられており、
前記動作制限手段は、前記特定領域の外（例えば、Ｇ４～Ｇ６、Ｈ４、Ｈ６、Ｉ４～６の領域）への移動を制限する一方、前記特定領域内での移動は制限しない（例えば、変形例３－１では、Ｈ５の領域内の移動は可能とされている部分）
ことを特徴としている。
この特徴によれば、特定領域内での移動は制限されないようにすることで、視聴者アバターの移動が過度に制限されてしまうことを防ぐことができる。

【0010】

仮想空間コンテンツ配信システムは、
前記動作制限手段は、前記仮想空間内における前記視聴者アバターの跳躍を制限可能である（例えば、変形例３－４におけるジャンプ）
ことを特徴としている。
この特徴によれば、視聴者アバターの跳躍によって第１コンテンツの興趣が低下してしまうことを防ぐことができる。

【0011】

請求項４の仮想空間コンテンツ配信システムは、請求項１または２に記載の仮想空間コンテンツ配信システムであって、
前記視聴者アバターは、前記視聴者ユーザー端末における特定操作（例えば、図４０（Ｂ）の画面においてケミライトメニューを選択する操作）によって特定動作（例えば、実施例３のケミライト動作）を行うことが可能であって、
前記動作制限手段は、前記第１コンテンツが配信されている期間（例えば、各演目期間）と前記第２コンテンツが配信されている期間（例えば、各ＭＣ期間）のいずれの期間おいても前記特定動作を制限しない（例えば、ケミライト動作）は、各演目期間と各ＭＣ期間のいずれにおいても実行可能とされている部分）
ことを特徴としている。
この特徴によれば、視聴者は、第１コンテンツと第２コンテンツのいずれの配信期間においても特定操作によって視聴者アバターに特定動作を行わせることができる。

【0012】

請求項５の仮想空間コンテンツ配信システムは、請求項４に記載の仮想空間コンテンツ配信システムであって、
前記特定動作は、前記視聴者ユーザー端末における操作によって前記視聴者アバターが行うことが可能な動作のうち、前記第１コンテンツが配信されている期間（例えば、各演目期間）と前記第２コンテンツが配信されている期間のいずれの期間（例えば、各ＭＣ期間）おいても、仮想空間に参加している他のアバターに違和感を与えることがない動作として事前に許容されている動作（例えば、変形例３－４における、ケミライトＫを前後に振る動作やウエーブ動作）である
ことを特徴としている。
この特徴によれば、視聴者アバターは、仮想空間に参加している他のアバターに違和感を与えることがない動作として事前に許容されている特定動作を、第１コンテンツと第２コンテンツのいずれの配信期間においても行うことができる。

【0013】

請求項６の仮想空間コンテンツ配信システムは、請求項１に記載の仮想空間コンテンツ配信システムであって、
前記動作制限手段は、前記第１コンテンツが配信される前の所定期間についても、前記第１コンテンツの配信期間とみなすことで前記仮想空間内における前記視聴者アバターの移動を制限する（例えば、図３１、図３５に示すように、各演目開始タイミング前の所定期間において視聴者アバターの移動が制限（禁止）されている部分）
ことを特徴としている。
この特徴によれば、第１コンテンツが配信される前の所定期間から視聴者アバターの移動が制限されるので、視聴者アバターの移動によって第１コンテンツの興趣が低下してしまうことをより的確に防ぐことができる。
請求項７の仮想空間コンテンツ配信システムは、請求項２に記載の仮想空間コンテンツ配信システムであって、
前記動作制限手段は、前記第１コンテンツが配信される前の所定期間についても、前記第１コンテンツの配信期間とみなすことで前記前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限する
ことを特徴としている。
この特徴によれば、第１コンテンツが配信される前の所定期間から他のアバターに対して作用を及ぼす動作が制限されるので、他のアバターに対して作用を及ぼす動作によって第１コンテンツの興趣が低下してしまうことをより的確に防ぐことができる。

【0014】

請求項８の仮想空間コンテンツ配信システムは、請求項１または２に記載の仮想空間コンテンツ配信システムであって、
前記視聴者アバターは、前記第１コンテンツ（例えば、楽曲コンテンツ）が配信されている期間においては該第１コンテンツに対応（同調）した対応動作（例えば、ケミライト動作）を実行可能である
ことを特徴としている。
この特徴によれば、視聴者アバターが第１コンテンツに対応した対応動作を行うことができるので、仮想空間に参加している視聴者ユーザーの興趣を高めることができる。

【0015】

請求項９の仮想空間コンテンツ配信システムは、請求項１または２に記載の仮想空間コンテンツ配信システムであって、
前記第１コンテンツは、前記仮想空間に参加可能な演者アバターにより上演される上演コンテンツ（例えば、歌唱やダンス）を含む
ことを特徴としている。
この特徴によれば、演者アバターの上演による上演コンテンツが含まれるとともに、これら上演コンテンツの配信中は視聴者アバターの移動や他の視聴者アバターに対して作用を及ぼす動作が制限されるので、これらの移動や他の視聴者アバターに対して作用を及ぼす動作によって上演コンテンツの興趣が低下してしまうことを防ぐことができる。

【0016】

請求項１０の仮想空間コンテンツ配信プログラムは、
仮想空間（例えば、仮想ライブ会場）における仮想空間コンテンツ（例えば、仮想ライブ）を、少なくともサーバコンピュータ（例えば、配信用サーバコンピュータ１００）を用いてネットワーク（例えば、インターネット）を介して配信するための仮想空間コンテンツ配信プログラム（例えば、配信用サーバコンピュータ１００において仮想空間更新データの送信に関して動作するプログラム、および視聴者端末３００において視聴者アバター視点映像を生成に関して動作するプログラム）であって、
前記仮想空間コンテンツの対象となる仮想空間に参加可能なアバター（例えば、視聴者アバター）は、視聴者ユーザーが利用可能な端末であって前記ネットワークを介して前記サーバコンピュータに接続された視聴者ユーザー端末（例えば、視聴者端末３００）における操作によって前記仮想空間において動作する視聴者アバターを含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツ（例えば、楽曲のコンテンツ）と、前記第１コンテンツとは異なる第２コンテンツ（例えば、ＭＣ（トーク）のコンテンツ）とを含み、
前記第１コンテンツが配信されている期間（例えば、各演目期間）において前記視聴者アバターの動作のうち前記仮想空間内における前記視聴者アバターの移動を制限する一方、前記第２コンテンツが配信されている期間（例えば、各ＭＣ期間）において前記仮想空間内における前記視聴者アバターの移動を制限しない動作制限ステップ（例えば、視聴者端末３００において視聴者アバターに実行させる操作を受付けるアバター動作操作処理を実行するステップ）を含む
ことを特徴としている。
この特徴によれば、第１コンテンツが配信されている期間においては視聴者アバターの移動が制限されるので、視聴者アバターの移動によって第１コンテンツの興趣が低下してしまうことを防ぐことができる。また、これら視聴者アバターの移動は、第２コンテンツの配信期間においては制限されないので、視聴者アバターの移動が過度に制限されてしまうことも防ぐことができる。
請求項１１の仮想空間コンテンツ配信プログラムは、
仮想空間における仮想空間コンテンツを、少なくともサーバコンピュータを用いてネットワークを介して配信するための仮想空間コンテンツ配信プログラムであって、
前記仮想空間コンテンツの対象となる仮想空間に参加可能なアバターは、視聴者ユーザーが利用可能な端末であって前記ネットワークを介して前記サーバコンピュータに接続された視聴者ユーザー端末における操作によって前記仮想空間において動作する視聴者アバターを含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限する一方、前記第２コンテンツが配信されている期間において前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限しない動作制限ステップを含む
ことを特徴としている。
この特徴によれば、第１コンテンツが配信されている期間においては視聴者アバターの仮想空間内に参加している他のアバターに対して作用を及ぼす動作が制限されるので、他のアバターに対して作用を及ぼす動作によって第１コンテンツの興趣が低下してしまうことを防ぐことができる。また、これら他のアバターに対して作用を及ぼす動作は、第２コンテンツの配信期間においては制限されないので、他のアバターに対して作用を及ぼす動作が過度に制限されてしまうことも防ぐことができる。

【0017】

請求項１２の仮想空間コンテンツ配信方法は、
仮想空間（例えば、仮想ライブ会場）における仮想空間コンテンツ（例えば、仮想ライブ）を、少なくともサーバコンピュータ（例えば、配信用サーバコンピュータ１００）を用いてネットワーク（例えば、インターネット）を介して配信するための仮想空間コンテンツ配信方法であって、
前記仮想空間コンテンツの対象となる仮想空間に参加可能なアバター（例えば、視聴者アバター）は、視聴者ユーザーが利用可能な端末であって前記ネットワークを介して前記サーバコンピュータに接続された視聴者ユーザー端末（例えば、視聴者端末３００）における操作によって前記仮想空間において動作する視聴者アバターを含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツ（例えば、楽曲のコンテンツ）と、前記第１コンテンツとは異なる第２コンテンツ（例えば、ＭＣ（トーク）のコンテンツ）とを含み、
前記第１コンテンツが配信されている期間（例えば、各演目期間）において前記視聴者アバターの動作のうち前記仮想空間内における前記視聴者アバターの移動を制限（例えば、移動）する一方、前記第２コンテンツが配信されている期間（例えば、各ＭＣ期間）において前記仮想空間内における前記視聴者アバターの移動を制限しない動作制限手順（例えば、視聴者端末３００において視聴者アバターに実行させる操作を受付けるアバター動作操作処理を実行する手順）を含む
ことを特徴としている。
この特徴によれば、第１コンテンツが配信されている期間においては視聴者アバターの移動が制限されるので、視聴者アバターの移動によって第１コンテンツの興趣が低下してしまうことを防ぐことができる。また、これら視聴者アバターの移動は、第２コンテンツの配信期間においては制限されないので、視聴者アバターの移動が過度に制限されてしまうことも防ぐことができる。
請求項１３の仮想空間コンテンツ配信方法は、
仮想空間における仮想空間コンテンツを、少なくともサーバコンピュータを用いてネットワークを介して配信するための仮想空間コンテンツ配信方法であって、
前記仮想空間コンテンツの対象となる仮想空間に参加可能なアバターは、視聴者ユーザーが利用可能な端末であって前記ネットワークを介して前記サーバコンピュータに接続された視聴者ユーザー端末における操作によって前記仮想空間において動作する視聴者アバターを含み、
前記仮想空間コンテンツは、該仮想空間コンテンツの主コンテンツである第１コンテンツと、前記第１コンテンツとは異なる第２コンテンツとを含み、
前記第１コンテンツが配信されている期間において前記視聴者アバターの動作のうち前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限する一方、前記第２コンテンツが配信されている期間において前記仮想空間内に参加している他のアバターに対して作用を及ぼす動作を制限しない動作制限手順を含む
ことを特徴としている。
この特徴によれば、第１コンテンツが配信されている期間においては視聴者アバターの他のアバターに対して作用を及ぼす動作が制限されるので、他のアバターに対して作用を及ぼす動作によって第１コンテンツの興趣が低下してしまうことを防ぐことができる。また、これら視聴者アバターの他のアバターに対して作用を及ぼす動作は、第２コンテンツの配信期間においては制限されないので、視聴者アバターの他のアバターに対して作用を及ぼす動作が過度に制限されてしまうことも防ぐことができる。

【0018】

尚、本発明は、本発明の請求項に記載された発明特定事項のみを有するものであって良いし、本発明の請求項に記載された発明特定事項とともに該発明特定事項以外の構成を有するものであっても良い。

【図面の簡単な説明】

【0019】

【図1】本発明の実施例１における仮想空間コンテンツ配信システムのシステム構成例を示すブロック図である。

【図2】本発明の実施例１の仮想空間コンテンツ配信システムにおける配信用サーバコンピュータの構成例を示す図である。

【図3】本発明の実施例１の配信用サーバコンピュータが有するストレージに記憶されている各種データを示す図である。

【図4】本発明の実施例１の仮想空間コンテンツ配信システムにおける演者端末の構成例を示す図である。

【図5】本発明の実施例１の仮想空間コンテンツ配信システムにおける視聴者端末の構成例を示す図である。

【図6】本発明の実施例１の仮想空間コンテンツ配信システムにおける管理者端末の構成例を示す図である。

【図7】本発明の実施例１の仮想空間コンテンツ配信システムにおけるイベントデータの構成例を示す図である。

【図8】本発明の実施例１の仮想空間コンテンツ配信システムにおける演者ユーザーデータの構成例を示す図である。

【図9】本発明の実施例１の仮想空間コンテンツ配信システムにおける視聴者ユーザーデータの構成例を示す図である。

【図10】本発明の実施例１の仮想空間コンテンツ配信システムを構成する各端末とサーバコンピュータとの間において送受されるデータを示す説明図である。

【図11】本発明の実施例１の仮想空間コンテンツ配信システムにおいて、演者ユーザーが利用するスタジオの設備を示す模式図である。

【図12】本発明の実施例１の仮想空間コンテンツ配信システムにおいて使用される仮想空間である仮想ライブ会場を示す図である。

【図13】本発明の実施例１の仮想空間コンテンツ配信システムを構成する視聴者端末における表示例を示す図である。

【図14】本発明の実施例１の仮想空間コンテンツ配信システムを構成する視聴者端末における表示例を示す図である。

【図15】本発明の実施例１の仮想空間コンテンツ配信システムを構成する演者端末における表示例を示す図である。

【図16】本発明の実施例１の仮想空間コンテンツ配信システムを構成する視聴者端末におけるズーム操作による表示例を示す図である。

【図17】本発明の実施例１の仮想空間コンテンツ配信システムを構成する視聴者端末におけるズーム操作による表示例を示す図である。

【図18】本発明の実施例１の仮想空間コンテンツ配信システムを構成する視聴者端末における表示例を示す図である。

【図19】本発明の実施例１の仮想空間コンテンツ配信システムを構成する視聴者端末におけるフライング演出期間の表示例を示す図である。

【図20】本発明の実施例１の仮想空間コンテンツ配信システムを構成する視聴者端末において実行される視聴者用視点映像制御処理の一例を示すフロー図である。

【図21】本発明の実施例２の仮想空間コンテンツ配信システムにて配信される仮想ライブの内容を示す説明図である。

【図22】本発明の実施例２の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータと視聴者端末との間において送受されるデータを示す説明図である。

【図23】本発明の実施例２の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータにおいて使用される参加者ユーザーテーブルを示す図である。

【図24】本発明の実施例２の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータと視聴者端末との間において送受されるデータを示す説明図である。

【図25】本発明の実施例２の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータと視聴者端末との間において送受されるデータを示す説明図である。

【図26】本発明の実施例２の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータと視聴者端末との間において送受されるデータを示す説明図である。

【図27】本発明の実施例２の仮想空間コンテンツ配信システムにおいて仮想ライブの期間種別と仮想カメラ視点映像の生成主体との関係を示す説明図である。

【図28】本発明の実施例２の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータと視聴者端末とにおける仮想カメラ視点映像並びに視聴者視点映像の生成状況を示す説明図である。

【図29】本発明の実施例２の変形例における視聴者視点映像生成処理を示すフロー図である。

【図30】本発明の実施例２の変形例において配信用サーバコンピュータから送信される仮想空間更新データの内容を示す図である。

【図31】本発明の実施例３の仮想空間コンテンツ配信システムにて配信される仮想ライブの内容を示す説明図である。

【図32】（Ａ）、（Ｂ）は、本発明の実施例３の仮想ライブにおける視聴者ユーザーの動作態様を示す図である。

【図33】（Ａ）は、本発明の実施例３の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータから視聴者端末に送受されるデータを示す説明図であり、（Ｂ）は、仮想ライブにおける各視聴者ユーザーの動作タイミングの違いを示す説明図である。

【図34】（Ａ）は、本発明の実施例３の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータにおいて使用される参加者ユーザーテーブルを示す図であり、（Ｂ）は、配信用サーバコンピュータに記憶されている楽曲リストデータを示す図である。

【図35】本発明の実施例３の仮想ライブの各期間において配信用サーバコンピュータによる各情報の送信状況を示す説明図である。

【図36】本発明の実施例３の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータと視聴者端末との間において送受されるデータを示す説明図である。

【図37】本発明の実施例３の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータにおいて実行される遅延動作者決定処理の内容を示すフロー図である。

【図38】本発明の実施例３の仮想空間コンテンツ配信システムを構成する配信用サーバコンピュータと視聴者端末との間において送受されるデータを示す説明図である。

【図39】（Ａ）は、本発明の実施例３の仮想空間コンテンツ配信システムを構成する視聴者端末において実行される視聴者視点映像生成処理１の内容を示すフロー図であり、（Ｂ）は、視聴者視点映像生成処理２の内容を示すフロー図である。

【図40】（Ａ）、（Ｂ）は、本発明の実施例３の仮想空間コンテンツ配信システムを構成する視聴者端末における仮想ライブの視聴者視点映像の表示例である。

【図41】（Ａ）、（Ｂ）は、本発明の実施例３の仮想空間コンテンツ配信システムを構成する視聴者端末における仮想ライブの視聴者視点映像の表示例である。

【図42】本発明の変形例における仮想ライブ会場を示す図である。

【図43】本発明の変形例における仮想ライブ会場への参加位置選択画面を示す図である。

【図44】（Ａ）、本発明の変形例における視聴者ユーザーの移動可能範囲を示す図であり、（Ｂ）は、該変形例において視聴者端末に表示される表示例を示す図である。

【図45】本発明の変形例において、視聴者アバターの動作が調整される状況を示す説明図である。

【図46】本発明の変形例において、仮想ライブの期間と上演コンテンツと非上演コンテンツが行われる期間との関係を示す図である。

【図47】本発明の変形例において、仮想ライブの期間と視聴者アバターが可能な動作との関係を示す図である。

【図48】本発明の変形例において、配信用サーバコンピュータと視聴者端末との間において送受されるデータを示す説明図である。

【発明を実施するための形態】

【0020】

本発明の仮想空間コンテンツ配信システムを実施するための形態について、実施例にもとづいて図面を用いて以下に説明する。尚、複数の図面において同一の又は類似する構成要素には同じ参照符号を付することで、重複する説明は省くものとする。また、本発明に係わる仮想空間コンテンツ配信プログラムは、仮想空間コンテンツ配信システムを構成する後述するサーバコンピュータや各端末から成るシステム全体で使用されるプログラムであってもよいし、仮想空間コンテンツ配信システムを構成する一部の装置である、例えば、サーバコンピュータや各端末だけで動作するものであってもよく、以下において説明する各処理については、いずれも、処理が行われる機器に記憶されているプログラムによって実行される。

【0021】

【実施例1】

【0022】

図１は、本発明の１実施形態である実施例１における仮想空間コンテンツ配信システムのシステム構成例を示すブロック図であり、図１に示す本実施例１のシステムでは、演者ユーザーに対応した演者アバター１が、図１２に示す仮想ライブ会場においてライブイベントを行う仮想ライブが仮想空間コンテンツとして配信される。尚、以下において配信とは、複数に対する送信であり、送信と同義である。

【0023】

本実施例１の仮想空間コンテンツ配信システムは、図１に示すように、主に、仮想空間である図１１に示す仮想ライブ会場に関する各種処理や仮想ライブの配信に関する各種処理を実行可能な配信用サーバコンピュータ１００と、仮想ライブイベントを運営・管理するイベント運営機関のイベント管理者Ｍが、仮想ライブイベントの配信を管理するために使用する管理者端末１５０と、演者ユーザーが使用する演者端末２００と、仮想ライブに仮想参加して仮想ライブを視聴する視聴者ユーザーが使用可能な視聴者端末３００とから構成されており、配信用サーバコンピュータ１００、管理者端末１５０、演者端末２００、視聴者端末３００は、オープンコンピュータネットワークであるインターネット網Ｎを介して、相互にデータ通信可能に接続されている。

【0024】

尚、本実施例１では、管理者端末１５０や演者端末２００についてもインターネット網Ｎを介して配信用サーバコンピュータ１００に接続させた形態を例示しているが、本発明はこれに限定されるものではなく、例えば、図１１に示すスタジオが、イベント運営機関が運営するスタジオであって、イベント運営機関が演者ユーザーにスタジオを提供している等の場合であって、これらスタジオに配信用サーバコンピュータ１００が設置されている場合にあっては、管理者端末１５０や演者端末２００を配信用サーバコンピュータ１００にローカルにデータ通信接続した形態としたり、スタジオ施設内のローカルエリアネットワークＬＡＮを介して通信接続するようにしてもよい。

【0025】

また、図１に示すように、視聴者ユーザーＡ、視聴者ユーザーＢ、視聴者ユーザーＣ…のように、視聴者ユーザーは複数であって、視聴者端末３００としては、個々の視聴者ユーザーＡ、視聴者ユーザーＢ、視聴者ユーザーＣ…が使用可能な視聴者端末３００ａ、視聴者端末３００ｂ、視聴者端末３００ｃ…を含む。尚、視聴者ユーザーは、通常、複数であるが、１人でもよいし、４人以上であってもよく、その数は仮想空間である仮想ライブ会場等に応じて適宜に決定すればよい。以下、視聴者ユーザーＡ、視聴者ユーザーＢ、視聴者ユーザーＣ…を総称して視聴者ユーザーと表記する場合があるとともに、視聴者端末３００ａ、視聴者端末３００ｂ、視聴者端末３００ｃ…を総称して視聴者端末３００と表記する場合がある。

【0026】

また、本実施例１では、演者ユーザーを１人とした形態を例示しているが、本発明はこれに限定されるものではなく、仮想ライブは、単独で活動している複数の演者ユーザーが仮想参加する共演イベントであってもよいし、共同で活動している複数人のグループが仮想参加するグループイベントであってもよく、このように、複数の演者が出演する場合には、各演者ユーザー毎に演者端末２００ａ、演者端末２００ｂ、演者端末２００ｃ…を設けるようにしてもよいし、複数人のグループで出演する場合であれば、１つの演者端末２００を複数人で使用するようにしてもよい。

【0027】

また、図１においては、配信用サーバコンピュータ１００を単体として図示しているが、本発明はこれに限定されるものではなく、これら配信用サーバコンピュータ１００を、仮想空間処理を主に行う第１サーバコンピュータと配信処理を主に行う第２サーバコンピュータ等の複数のサーバコンピュータで構成したり、あるいは、クラウドサーバ等にて構成して、イベントの規模や参加する聴者ユーザーの数等に応じてサーバコンピュータの数を適宜に変更可能としてもよい。

【0028】

同様に、管理者端末１５０についても、図１においては単体として図示しているが、本発明はこれに限定されるものではなく、これら管理者端末１５０を、ライブに仮想参加する演者ユーザーや視聴者ユーザーの数等に応じて複数としてもよいことはいうまでもない。

【0029】

＜配信用サーバコンピュータ＞
図２は、本実施例１に用いた配信用サーバコンピュータ１００の構成を示す図である。本実施例１で用いた配信用サーバコンピュータ１００は、上記のように、イベント運営機関が運営するスタジオに設置された比較的処理能力に優れた通常のサーバコンピュータであって、図２に示すように、データバス１０８に接続されたプロセッサ（ＣＰＵ）１０１、メモリ（ＲＡＭ）１０２、ハードディスク等のストレージ１０３、オープンコンピュータネットワークであるインターネットを介したＴＣＰ／ＩＰプロトコルによる双方向に通信が可能な通信インターフェイス（Ｉ／Ｆ）１０４と、キーボード等の入力装置等を接続可能な入出力インターフェイス（Ｉ／Ｆ）１０５を有している。

【0030】

尚、本実施例１では、ローカル操作を可能とするために、入出力インターフェイス（Ｉ／Ｆ）１０５を設けているが、通信インターフェイス（Ｉ／Ｆ）１０４を介してのリモート操作が可能である場合には、入出力インターフェイス（Ｉ／Ｆ）１０５を設けない形態としてもよい。

【0031】

配信用サーバコンピュータ１００のストレージ１０３には、図示しないサーバ機能を提供するためのオペレーションシステム（サーバＯＳ）に加えて、図３に示すように、各種のデータやプログラムが記憶されている。具体的には、主に、ライブイベントを管理するイベント管理機能を提供するためのイベント管理プログラム１１０、仮想空間である仮想ライブ会場の仮想空間を提供するための仮想空間生成プログラム１２０、演者ユーザーを管理する演者ユーザー管理機能を提供するための演者ユーザー管理プログラム１３０と、視聴者ユーザーを管理する視聴者ユーザー管理機能を提供するための視聴者ユーザー管理プログラム１３２と、が記憶されている。

【0032】

イベント管理プログラム１１０は、管理者端末１５０と協同して仮想ライブ会場（図１２参照）で開催されるイベントである仮想ライブを管理するためのプログラムであって、該イベント管理プログラム１１０とともにストレージ１０３に記憶されているイベントデータ１１１（図７参照）、タイムスケジュールデータ（ＴＳデータ）１１２、楽曲データ１１３を使用して仮想ライブイベントの進行を管理可能とされている。

【0033】

本実施例１に用いたイベントデータ１１１を、図７に例示する。イベントデータ１１１は、イベントに固有に付与されたイベントＩＤに対応付けて、イベント名、タイムスケジュール（ＴＳ）データのファイル名、出演者である演者ユーザーに固有に付与された演者ＩＤ、楽曲リストのファイル名、後述する仮想観客領域の第３領域に仮想参加が許可された特別な視聴者ユーザーの情報が登録されている参加視聴者リストのファイル名と、後述する仮想観客領域の第４領域に仮想参加を予約した視聴者ユーザーの情報が登録されている参加視聴者リストのファイル名等の情報が記憶されている。

【0034】

尚、タイムスケジュールデータ（ＴＳデータ）１１２は、開催される仮想ライブイベントの進行順序や楽曲等の演目が時系列に記述されたデータとされており、該タイムスケジュールデータ（ＴＳデータ）１１２に記述されたタイムスケジュールにもとづいて仮想ライブイベントが進行するように管理される。また、これらタイムスケジュールデータ（ＴＳデータ）１１２やイベントデータ１１１等は、管理者端末１５０をイベント管理者Ｍが操作することによって変更、更新、追加することができる。

【0035】

また、楽曲データ１１３は、演者ユーザーが歌唱する各楽曲の演奏パート（所謂カラオケ）のデータであって、イベント管理プログラム１１０によってタイムスケジュールデータ（ＴＳデータ）１１２にもとづいて、後述する音声制御プログラム１２４によって再生されて、演者端末２００や視聴者端末３００に送信される（図１１参照）。

【0036】

仮想空間生成プログラム１２０は、図１２に示す仮想空間である仮想ライブ会場を提供するためのプログラムであって、該仮想空間生成プログラム１２０とともにストレージ１０３に記憶されている仮想ライブ会場の構造等が記述された仮想空間データ１２１、仮想ライブ会場に配置される種々の物体（ステージ上の星の装飾物である仮想配置オブジェクト４３や上空の星のオブジェである仮想空中オブジェクト５０～５２を含む）等を仮想空間内に配置するためのオブジェクトデータ１２２、並びに後述する演者ユーザーデータ１３１に含まれている演者アバターデータおよび視聴者ユーザーデータ１３３に含まれている視聴者アバターデータとを用いて、演者アバターや視聴者アバターが仮想参加している仮想ライブ会場を提供する機能を有する。

【0037】

視点映像制御プログラム１２３は、図１２に示すように、仮想ライブ会場に仮想的に設定された仮想カメラＣ１～Ｃ４並びに空中移動仮想カメラ（図示略）からの視点映像を生成する機能を提供するとともに、視聴者端末３００と協同して仮想ライブ会場の第３領域にて仮想参加している視聴者アバター１１～１４、第４領域にて仮想参加している視聴者アバター２１～３２の各視点からの映像を視聴者端末３００に表示する機能を提供するためのプログラムである。尚、仮想カメラＣ２は、仮想ライブ会場のステージ上にいる演者アバター１の視点からの映像とするために設定された仮想カメラであり、該仮想カメラＣ２からの視点映像が、演者端末２００と協同して該演者端末２００に接続された後述するプロジェクタ２１１によって、スタジオにもうけられているスクリーンＳに投影されるようになっている。

【0038】

音声制御プログラム１２４は、仮想ライブイベントにおいて配信される音声（楽曲を含む）に関する制御を行うためのプログラムであり、具体的には、楽曲データ１１３の再生機能や演者ユーザーが発した音声を再生した楽曲と合成して管理者端末１５０や視聴者端末３００に配信する機能を提供する。

【0039】

コメント制御プログラム１２５は、後述する視聴者端末３００に記憶されている視聴者用コメント制御プログラムと協同して、仮想ライブイベントにおいて各視聴者ユーザーが視聴者端末３００において入力した種々のコメントを、時系列に演者端末２００並びに視聴者端末３００に表示させる機能を提供する。

【0040】

ギフト制御プログラム１２６は、後述する視聴者端末３００に記憶されている視聴者用プログラムと協同して、視聴者ユーザーから演者ユーザーに贈られるギフトに関する制御を行うためのプログラムであり、具体的には、ギフトデータ１３４に記憶されている各種ギフトに設定された購入単価の情報にもとづいて視聴者ユーザーがギフトの購入を行う機能や、ギフトデータ１３４に含まれているギフトのオブジェクトデータを用いて購入したギフトを視聴者ユーザーが演者ユーザーに贈るための処理機能（贈るときの演出等の処理を含む）や、贈られたギフトの所有者を視聴者ユーザーから演者ユーザーに変更するための処理機能等を提供する。

【0041】

演者ユーザー管理プログラム１３０は、該演者ユーザー管理プログラム１３０とともにストレージ１０３に記憶されている図８に示す演者ユーザーデータ１３１にもとづいて、演者ユーザーに関する情報の管理機能並びに認証機能等を提供する。

【0042】

本実施例１で用いた演者ユーザーデータ１３１を、図８に例示する。演者ユーザーデータ１３１は、演者ユーザーに固有に付与された演者ユーザーＩＤに対応付けて、当該演者ユーザーのアカウント（電子メールアドレス）、名称、認証情報、仮想空間において使用するアバターのアバターデータのファイル名、所有しているアイテムが登録されているアイテムリストのファイル名、等の各種情報が記憶されている。尚、図８には図示していないが、各演者ユーザーが所有しているポイント等の仮想価値の情報を演者ユーザーデータ１３１として記憶するようにしてもよい。

【0043】

演者ユーザーは、演者ユーザーＩＤ、アカウント、認証情報とを照合する等によって認証できるようになっているとともに、各演者ユーザーが視聴者から贈られることで所有することになったアイテム（ギフト）を、アイテムリストから特定できるようになっている。

【0044】

視聴者ユーザー管理プログラム１３２は、該プログラムとともにストレージ１０３に記憶されている図９に示す視聴者ユーザーデータ１３３にもとづいて、視聴者ユーザーに関する情報の管理機能並びに認証機能等を提供する。

【0045】

本実施例１に用いた視聴者ユーザーデータ１３３を、図９に例示する。視聴者ユーザーデータ１３３は、視聴者ユーザーに固有に付与された視聴者ユーザーＩＤに対応付けて、当該視聴者ユーザーのアカウント（電子メールアドレス）、認証情報、仮想空間において使用するアバターのアバターデータのファイル名、仮想空間において使用可能なポイントの所有数である所有ポイント、ポイントを使用して購入したアイテム（ギフト）が登録されているアイテムリストのファイル名、氏名、生年月日、電話番号等の個人情報等の各種情報が記憶されている。尚、図９には示していないが、コメントとともに表示されるニックネーム（コメントネーム）についても視聴者ユーザーデータ１３３に登録されていて、該ニックネーム（コメントネーム）がコメントとともに表示される。また、ポイントは、例えば、所定の運営会社から購入することで増やすことができる。

【0046】

＜演者端末＞
図４は、本実施例１の仮想空間コンテンツ配信システムにおける演者端末２００の構成例を示す図である。演者端末２００は、本実施例１では、図１１に示すように、演者ユーザーが演技動作を行うスタジオに隣接する調整室内に設けられていて、比較的処理能力に優れた通常のコンピュータを使用しており、図４に示すように、データバス２０８に接続されたプロセッサ（ＣＰＵ）２０１、メモリ（ＲＡＭ）２０２、ハードディスク等のストレージ２０３、オープンコンピュータネットワークであるインターネットを介したＴＣＰ／ＩＰプロトコルによる双方向に通信が可能な通信インターフェイス（Ｉ／Ｆ）２０４、表示装置Ａ２１０～表示装置Ｃ２１２が接続されたグラフィックスプロセッシングユニット（ＧＰＵ）を含む画像処理部２０６、各種の入出力デバイスが接続された入出力インターフェイス（Ｉ／Ｆ）２０５を有している。

【0047】

入出力インターフェイス（Ｉ／Ｆ）２０５には、入力デバイスとして、演者ユーザーが左右の手足及び腰に装着している複数の装着センサ２２０Ｃ１～２２０Ｃ５（図１１参照）を含むモーションセンサ２２０、演者の顔の表情を入力するための撮像カメラで構成される表情入力装置２２１、演者ユーザーの頭部に装着されている集音マイクにより構成される音声入力装置２２２、演者ユーザーを補助する補助オペレータＯが操作可能に設けられたキーボードやタッチパネル等の操作入力装置２２４等が接続される。尚、これら入力デバイスとして、演者ユーザーが把持することで種々の操作を行うことが可能なコントローラを設けることで、補助オペレータＯによることなく、演者自身が種々の操作を行うことができるようにしてもよい。

【0048】

尚、本実施例１では、演者ユーザーが楽曲に合わせた上演動作（歌唱やダンス等の楽曲動作を含む）を行うため、上演中における操作を補助オペレータＯが補助する形態としているが、これら補助オペレータＯを複数人としたり、或いは、操作内容を予め演者端末２００において、例えば、シーケンスプログラム等に設定しておくことで、補助オペレータＯを設けない形態としてもよい。

【0049】

入出力インターフェイス（Ｉ／Ｆ）２０５には、出力デバイスとして演者ユーザーが装着している高機能イヤホン（イヤモニ）や調整室に配置されたスピーカー等を含む音声出力装置２２３が接続されることで、配信用サーバコンピュータ１００から送信される再生楽曲の音が高機能イヤホン（イヤモニ）を介して演者ユーザーに対して出力されるとともに、スピーカーからは、演者の音声とともに楽曲音声が出力されることで、演者ユーザーが発した音声を含む楽曲の状況を、補助オペレータＯ等が調整室において確認することができるようになっている。

【0050】

本実施例１では、演者ユーザーが装着している集音マイクから、再生された楽曲音声が入力されることによる不都合を回避するために高機能イヤホン（イヤモニ）を使用しているが、本発明はこれに限定されるものではなく、楽曲音声が入力されることによる不都合を回避できるのであれば、スタジオ内のスピーカー等から、楽曲音声を出力するようにしてもよい。

【0051】

尚、本実施例１では、集音マイクを演者ユーザーが装着する形態を例示しているが、これら集音マイクを、スタジオの床、壁、又は天井に設置される設置型のものとしてもよい。

【0052】

ここで、本実施例１の演者端末２００で使用したモーションセンサ２２０について説明する。モーションセンサ２２０は、演者ユーザーの体の動き（動作）を適切に検出（計測）できるものであれば、任意のものを使用することができる。本実施例１では、演者の動作をより正確且つ短周期で検出可能とするために、演者ユーザーが体に装着する複数の装着センサ２２０Ｃ１～２２０Ｃ５を使用している。尚、モーションセンサ２２０を、レーザー光等を用いたＬｉＤＥＲ等の演者が機器を装着しないタイプのものを使用してもよい。

【0053】

尚、本実施例１では、演者ユーザーが上演動作をする際のセンサ等の装着による動作負担、特には、頭部の動作負担を軽減するために、演者ユーザーの頭部の動作を、後述するように、表情入力装置２２１を構成する撮像カメラにて撮像された画像を用いた画像認識によって検出し、頭部以外の動作を５つの装着センサ２２０Ｃ１～２２０Ｃ５を使用した形態を例示しているが、例えば、演者ユーザーの頭部等にも装着センサを設けたり、更に、より詳細な動作を検出するために、より多く（７以上）の装着センサを装着するようにしてもよい。

【0054】

装着センサ２２０Ｃ１～２２０Ｃ５は、図１１に示すように、隣接する調整室とガラス窓を隔てたスタジオルーム内に設置されているベースステーション２２０ａ及びベースステーション２２０ｂと協働して、自らの位置及び向きを検出する。

【0055】

これらベースステーション２２０ａ及びベースステーション２２０ｂは、一例として、多軸レーザーエミッターを使用できる。ベースステーション２２０ａは、同期用の点滅光を発した後に、例えば鉛直軸の周りでレーザー光を走査する。ベースステーション２２０ｂは、例えば水平軸の周りでレーザー光を走査する。

【0056】

装着センサ２２０Ｃ１～２２０Ｃ５はそれぞれ、ベースステーション２２０ａ及びベースステーション２２０ｂからの点滅光及びレーザー光の入射を検知する光センサを複数備えていてもよい。

【0057】

装着センサ２２０Ｃ１～２２０Ｃ５はそれぞれ、点滅光の入射タイミングとレーザー光の入射タイミングとの時間差、各光センサでの受光時間、各光センサが検知したレーザー光の入射角度、及び必要に応じてこれら以外の情報に基づいて、自らの位置及び向きを検出可能とされており、例えば、ＨＴＣ ＣＯＲＰＯＲＡＴＩＯＮから提供されているＶｉｖｅＴｒａｃｋｅｒや、ベースステーションを好適に使用することができる。

【0058】

ベースステーション２２０ａ及びベースステーション２２０ｂは、一定のインターバルで点滅光の発光及びレーザー光の走査を行うので、各装着センサ２２０Ｃ１～２２０Ｃ５の検出情報は、当該インターバルごとに更新される。そして、これら装着センサ２２０Ｃ１～２２０Ｃ５の各々において算出された各モーションセンサの位置及び向きを示す検出情報は、近距離無線通信によって演者端末２００に入力され、フェイスモーションの情報とともに、演者アバター情報として配信用サーバコンピュータ１００に送信される（図１０参照）。

【0059】

尚、本実施例１では、ベースステーション２２０ａ及びベースステーション２２０ｂの２つのベースステーションを使用した形態を例示しているが、本発明はこれに限定されるものではなく、これらベースステーションを３つ以上としてもよい。

【0060】

また、モーションセンサ２２０を、演者ユーザーに装着される複数のモーションセンサの各々に多数の赤外ＬＥＤ或いは可視光ＬＥＤを搭載し、これらのＬＥＤからの光を、スタジオの床や壁に設けられた赤外線カメラで検知することで、当該モーションセンサの各々の位置及び向きを検出してもよい。

【0061】

また、モーションセンサ２２０を、演者ユーザーの負担を軽減するために、装着センサ２２０Ｃ１～２２０Ｃ５に代えて、より軽量な反射マーカーを用いたモーションセンサを使用してもよい。つまり、演者ユーザーの身体の各部に粘着テープなどにより貼着された反射マーカーを撮影して撮影データを生成し、この撮影データを画像処理することにより、反射マーカーの位置及び向きを検出することで、演者ユーザーの動作を検出するものであってもよく、この場合にあっては、スタジオ内に演者ユーザーを撮影するカメラマンを配置して、該カメラマンが演者ユーザーを撮影することで、演者ユーザーの動作を、検出に適した方向から撮影することで、良好に検出できるようにしてもよい。

【0062】

また、モーションセンサ２２０として、慣性センサが内蔵されたスーツ、例えば、Ｘｓｅｎｓ.ｃｏｍ社が上市しているＭＶＮモーションキャプチャシステム用の慣性センサ内蔵スーツを使用し、慣性センサから出力されるセンサ信号を解析することにより、演者ユーザーの動作を検出するものであってもよい。

【0063】

表情入力装置２２１は、演者ユーザーの顔を含む頭部の動作を適切に検出できるものであれば、任意のものを使用することができる。本実施例１では、具体的には、演者ユーザーの顔を含む頭部画像を連続的に撮像可能に配置された撮像カメラ（デジタルカメラ）にて構成されており、該撮像カメラにて撮像された演者ユーザーの頭の動きと顔の動き（表情）を、画像認識にて検知し、該検知した頭の動きと顔の動き（表情）であるフェイスモーションの情報が、図１０に示すように、ボディモーションの情報とともに演者アバター情報として配信用サーバコンピュータ１００に送信される。

【0064】

尚、表情入力装置２２１は、本実施例１で使用した撮像カメラ（デジタルカメラ）に限定されるものではなく、例えば、表情入力装置２２１は、人物の顔の奥行きを検出可能な３Ｄカメラであってもよいし、例えば、ＬｉＤＥＲデバイスが搭載されたスマートフォン等の携帯端末を使用することもできる。この場合、これらの携帯端末を演者ユーザーが装着するようにしてもよい。

【0065】

本実施例１の演者端末２００では、上記のように、３つの表示装置Ａ２１０～表示装置Ｃ２１２を有しており、表示装置Ａ２１０は、図１１示すように、調整室に設けられている液晶モニター等であり、表示装置Ｂ２１１は、スタジオ内に設けられたスクリーンＳに映像を投影するプロジェクタであり、表示装置Ｃ２１２は、スタジオ内にスクリーンＳに隣接して設けられた縦型の大型ディスプレイである。

【0066】

スタジオの調整室内に配置されている表示装置Ａ２１０には、仮想カメラＣ１～Ｃ４の各視点からの映像や後述するフライング演出期間における空中移動仮想カメラからの視点映像と、コメントの内容と、補助オペレータＯが演者ユーザーに伝達したいメッセージを入力するメッセージ入力ウインドウ等が表示される。

【0067】

一方、スタジオ内に設けられた表示装置Ｂ２１１であるプロジェクタから投影されるスクリーンＳには、演者の視点である仮想カメラＣ２(図１２参照)の視点映像である、例えば、図１５に示すように、第３領域や第４領域においてライブに仮想参加している視聴者のアバターを含む映像が表示されることで、演者ユーザーが、仮想ライブに仮想参加している視聴者ユーザーの状況を、映像によって確認できるようになっている。

【0068】

また、スタジオ内に設けられた表示装置Ｃ２１２には、視聴者ユーザーのコメントや、補助オペレータＯが入力したコメントやメッセージ等が表示されることで、演者ユーザーが、上演中においても視聴者ユーザーのコメントを確認したり、補助オペレータＯからのメッセージを確認することができる。

【0069】

ストレージ２０３には、演者端末２００であるコンピュータを動作させるためのオペレーションシステム（ＯＳ）に加えて、プロセッサ（ＣＰＵ）２０１等が実行することで仮想空間コンテンツである仮想ライブにおける演者ユーザーによる演者アバター１の動作制御機能を初めとする各種機能を、配信用サーバコンピュータ１００と協働して提供するための演者用プログラムが記憶されている。

【0070】

演者用プログラムは、図４に示すように、演者アバター制御プログラム、演者用視点映像制御プログラム、演者用視点映像制御プログラム、演者用音声制御プログラム、演者用コメント制御プログラム、演者認証用データ等を含む。

【0071】

演者アバター制御プログラムは、主に、モーションセンサ２２０を用いて演者ユーザーのボディモーションをスキャンするとともに、表情入力装置２２１を用いて演者ユーザーのフェイスモーション（表情）をスキャンして、演者アバターを動作させるための演者アバター情報を生成して配信用サーバコンピュータ１００に送信する機能を提供するプログラムである。

【0072】

演者用視点映像制御プログラムは、配信用サーバコンピュータ１００から配信される仮想空間更新データにもとづいて演者視点である仮想カメラＣ２の視点映像を生成、出力する機能を提供するプログラムである。

【0073】

演者用音声制御プログラムは、配信用サーバコンピュータ１００から配信される再生楽曲データにもとづく楽曲の再生音を、音声出力装置２２３を介して出力するとともに、音声入力装置２２２から入力される音声をデータ化して演者音声データとして配信用サーバコンピュータ１００に送信し、楽曲の再生音と演者音声とからなるモニター音声を生成、出力する機能を提供するプログラムである。

【0074】

演者用コメント制御プログラムは、配信用サーバコンピュータ１００から配信される視聴者ユーザーによる各コメント等を表示する機能を提供するプログラムである。

【0075】

演者認証用データは、配信用サーバコンピュータ１００との通信接続において演者ユーザーが本人であることを認証するためのデータである。

【0076】

尚、演者アバター制御プログラムには、演者アバターデータに含まれる演者アバターの骨格を示すリグデータ（スケルトンデータ」と呼ばれることもある。）を構成する骨（ ボーン） の位置及び回転角度のパラメータ情報を生成可能なモーションパラメータ生成プログラム等が含まれているとともに、撮像カメラによって撮像された画像から演者ユーザーの頭部の位置と表情とを画像認識するための画像認識処理プログラム等が含まれている。

【0077】

また、本実施例１では、演者端末２００は、イベント運営機関が運営するスタジオに設置された演者端末２００となるコンピュータを、複数の演者ユーザーが共同で利用し、ライブイベントを開催するときにおいて、個々の演者ユーザーが、演者認証用データを入力することで当該演者ユーザーの演者端末２００として利用できるようにした形態を例示しているが、本発明はこれに限定されるものではなく、例えば、演者ユーザーが自宅等から仮想ライブに出演する場合であって、演者端末２００が、演者ユーザーが自宅に設置している自分専用のコンピュータである場合のように、所有する演者ユーザーのみが利用する形態であってもよく、このような場合には、演者認証用データの記憶は必ずしも必要ない。

【0078】

このように、本実施例１の仮想空間コンテンツ配信システムを構成する演者端末２００を演者ユーザー等が使用することで、演者ユーザーは、仮想ライブ会場における仮想ステージＧ上に配置された演者アバター１を、自身の動作に連動して動作させることができるとともに、演者アバター１の表情に自身の表情を反映させることができる。また、自分の声を演者アバター１の声として、配信用サーバコンピュータ１００を通じて視聴者に配信することができる。

【0079】

＜視聴者端末＞
図５は、本実施例１の仮想空間コンテンツ配信システムにおける視聴者端末３００の構成例を示す図である。視聴者端末３００は、本実施例１では、視聴者ユーザーが携行するスマートフォンＰや視聴者ユーザーが自宅等に設置している据え置き型の通常のコンピュータ（ＰＣ）とされており、図５に示すように、データバス３０８に接続されたプロセッサ（ＣＰＵ）３０１、メモリ（ＲＡＭ）３０２、ハードディスクや不揮発性メモリ等のストレージ３０３、オープンコンピュータネットワークであるインターネットを介したＴＣＰ／ＩＰプロトコルによる双方向に通信が可能な通信インターフェイス（Ｉ／Ｆ）３０４、表示装置３１０が接続されたグラフィックスプロセッシングユニット（ＧＰＵ）を含む画像処理部３０６、各種の入出力デバイスが接続された入出力インターフェイス（Ｉ／Ｆ）３０５を有している。

【0080】

表示装置３１０は、後述するように、ストレージ３０３に記憶されている視聴者用プログラムに含まれる視聴者用視点映像制御プログラムによって、配信用サーバコンピュータ１００から配信される仮想空間更新データ（図１０参照）によって更新される仮想空間である仮想ライブ会場の仮想空間データにもとづいて生成される各視点映像や、後述するフライング演出期間において配信用サーバコンピュータ１００から配信されるフライング視点映像を表示可能なものであればよく、視聴者端末３００がスマートフォンＰである場合は、該スマートフォンＰが有するディスプレイが該当し、視聴者端末３００が通常のコンピュータ（ＰＣ）であれば、コンピュータ（ＰＣ）を構成する据え置き型のディスプレイが該当する。尚、これらディスプレイは、平面視画像（２Ｄ画像）を表示するものに限らず、例えば、視聴者が装着可能なヘッドマウントディスプレイ（ＨＭＤ）のように、右目画像と左目画像とを表示することで、立体視画像（３Ｄ画像）を表示可能なものであってもよい。

【0081】

入出力インターフェイス（Ｉ／Ｆ）３０５には、入力デバイスとして、視聴者が各種の操作が可能とされた１または複数のデバイスからなる操作入力装置３２１と、配信用サーバコンピュータ１００から配信されるライブ音声等を出力可能なイヤホンやスピーカー等の音声出力装置３２２が接続される。

【0082】

尚、音声出力装置３２２は単独のデバイスではなく、上記したヘッドマウントディスプレイ（ＨＭＤ）のように表示装置３１０と一体とされたものであってもよいことはいうまでもない。

【0083】

操作入力装置３２１は、視聴者が視聴者アバターの移動等を含む動作操作、ズーム操作、コメントに関する操作、ギフト等に関する操作等、の各種操作を実行可能なものであれば任意のものを使用することができ、例えば、スマートフォンのディスプレイ表面に形成された透明タッチパネル、コンピュータを構成するキーボード、ゲームコントローラ等の少なくとも１つ以上で構成される。

【0084】

尚、本実施例１では、視聴者として、後述するように、仮想ライブ会場における仮想観客領域が、図１２に示すように、演者ユーザーによって特別に許可された視聴者ユーザーだけが仮想参加できる仮想ステージＧ近傍の第３領域と、一般の視聴者ユーザーが仮想参加できる第３領域周囲の第４領域とに区分けされており、第４領域に仮想参加する視聴者ユーザーは、上記したように、タッチパネル、キーボード、ゲームコントローラ等の操作入力装置３２１であればよいが、第３領域に仮想参加する視聴者ユーザーは、操作入力装置３２１として、例えば、上述した慣性センサが内蔵されたＭＶＮモーションキャプチャスーツを所有していることで、演者ユーザーと同様に、視聴者アバターを自身の動作によって細かく動作させることのできる視聴者ユーザーである。

【0085】

但し、第３領域に仮想参加が許可された視聴者ユーザーであっても、視聴者アバターの表情を変更することまではできないが、本発明はこれに限定されるものではなく、これら視聴者アバターの表情を、例えば、上記したように、視聴者ユーザーがスマートフォンのカメラ機能やコンピュータに接続したカメラを使用して視聴者ユーザーの顔の表情を認識させることで、演者ユーザーの変更レベルとは異なるレベルであっても、変更できるようにしてもよい。

【0086】

尚、これら入出力インターフェイス（Ｉ／Ｆ）３０５に接続される各種の入出力デバイスは、内蔵のものであっても外付けのものあってもよく、外付けのデバイスの場合には、有線、無線のいずれの接続形態であってもよい。

【0087】

ストレージ３０３には、視聴者端末３００であるスマートフォンやコンピュータを動作させるためのオペレーションシステム（ＯＳ）に加えて、プロセッサ（ＣＰＵ）３０１等が実行することで仮想空間コンテンツである仮想ライブにおける視聴者ユーザーに関するライブ視聴機能を初めとする各種機能を、配信用サーバコンピュータ１００と協働して提供するための視聴者用プログラムが視聴アプリとして記憶されている。

【0088】

視聴者用プログラムは、図５に示すように、表示装置３１０に表示する仮想ライブの各視点映像を生成する機能を提供する視聴者用視点映像制御プログラム、配信用サーバコンピュータ１００から配信される仮想ライブのライブ音声（データ）に基づくライブ音声を音声出力装置３２２から出力する機能を提供する視聴者用音声制御プログラム、配信用サーバコンピュータ１００から配信されるコメントデータにもとづくコメントを表示するとともに、視聴者が入力するコメントと配信用サーバコンピュータ１００に送信する等のコメントに関する機能を提供する視聴者用コメント制御プログラム、配信用サーバコンピュータ１００との通信接続において視聴者ユーザーが本人であることを認証するための視聴者認証用データ等を含む。

【0089】

尚、図５には図示していないが、上記したプログラム以外に、ギフトに関する制御等を行うギフト制御プログラムや、後述する変形例３－１（図４２，図４３参照）に示すように、ライブイベントの開始前において事前に仮想ライブ会場において視聴者アバターが仮想参加する領域（位置）を予約するための領域指定プログラム等が含まれているが、これら以外の他のプログラムが含まれていてもよい。

【0090】

視聴者が入力するコメントは、本実施例１では、テキスト形式の短文メッセージとされているが、これらテキスト形式の短文メッセージに限定されるものではなく、例えば、静止画形式のメッセージ、動画形式のメッセージ、及びこれら以外の任意の形式の電子的なメッセージであってもよい。尚、コメントは、表示装置３１０において各視点映像に重ねて表示される。

【0091】

このように、本実施例１の仮想空間コンテンツ配信システムを構成する視聴者端末３００視聴者ユーザーが使用することで、仮想ライブ会場に仮想参加している視聴者アバターを移動や動作させて、視聴者アバターによる視点を変更することで表示装置３１０に表示される視点映像を変更することができるとともに、ズーム状態（視点の状態）についても変更することができ、視聴者アバターを動作させて演者アバター１を応援することができる。

【0092】

尚、第３領域に仮想参加した視聴者アバターの場合は、第３領域内においてだけ移動が可能とされていて、第４領域には移動することはできない。一方、第４領域に仮想参加した視聴者アバターの場合は、第４領域内においてだけ移動が可能とされていて、第３領域には移動することはできない。但し、本発明はこれに限定されるものではなく、３領域に仮想参加した視聴者アバターの場合は第４領域に移動できるようにしてもよい。尚、視聴者アバターは、当然、仮想ステージＧ等には移動することができないので、演者アバター１の視認が仮想ステージＧ上に視聴者アバターが移動することによって阻害されてしまうことはない。

【0093】

また、これら表示装置３１０に視点映像が表示されるともに、ライブ音声が出力されることで、自分が仮想ライブ会場に立ち会っているような感覚で、仮想ライブを楽しむことができる。

【0094】

また、詳しい説明は省略するが、視聴者用コメント制御プログラムにより提供されるコメント機能によって、自分や他の視聴者ユーザーが入力したコメントを確認しながら仮想ライブを楽しむことができるとともに、ギフト制御プログラムによるギフト機能によって、自分が所有しているアイテムを演者アバター１に贈ることで、仮想ライブを盛り上げることもできる。

【0095】

＜管理者端末＞
図６は、本実施例１の仮想空間コンテンツ配信システムにおける管理者端末１５０の構成例を示す図である。管理者端末１５０は、本実施例１では、演者端末２００とともに、スタジオに隣接している調整室内に設けられた通常のコンピュータを使用しており、図６に示すように、データバス１５８に接続されたプロセッサ（ＣＰＵ）１５１、メモリ（ＲＡＭ）１５２、ハードディスク等のストレージ１５３、オープンコンピュータネットワークであるインターネットを介したＴＣＰ／ＩＰプロトコルによる双方向に通信が可能な通信インターフェイス（Ｉ／Ｆ）１５４、表示装置１６０が接続されたグラフィックスプロセッシングユニット（ＧＰＵ）を含む画像処理部１５６、各種の入出力デバイスが接続された入出力インターフェイス（Ｉ／Ｆ）１５５、を有している。

【0096】

表示装置１６０は、後述するように、ストレージ１５３に記憶されている管理者用プログラムに含まれる管理者用視点映像制御プログラムによって、配信用サーバコンピュータ１００から配信される仮想空間更新データ（図１０参照）によって更新される仮想空間である仮想ライブ会場の仮想空間データにもとづいて生成される、後述する各仮想カメラＣ１～Ｃ４並びにフライング演出期間における空中移動仮想カメラの各視点映像を個別に表示可能であるとともに、配信用サーバコンピュータ１００から配信されるコメントデータにもとづくコメントを表示可能なものであればよく、１または複数の据え置き型のディスプレイによって構成されている。

【0097】

入出力インターフェイス（Ｉ／Ｆ）１５５には、入力デバイスとして、イベント管理者Ｍが各種の操作が可能とされた１または複数のデバイスからなる操作入力装置１６１と、配信用サーバコンピュータ１００から配信されるライブ音声等を出力可能なイヤホンやヘッドホンやスピーカー等の音声出力装置１６２が接続される。

【0098】

操作入力装置１６１は、イベント管理者Ｍが、仮想ライブのイベントに関する入力や設定等の各種操作を実行可能なものであれば任意のものを使用することができ、例えば、コンピュータを構成するキーボードや、ディスプレイ表面に形成された透明タッチパネルや視点切替コントローラ等の少なくとも１つ以上で構成される。

【0099】

尚、これら入出力インターフェイス（Ｉ／Ｆ）１５５に接続される各種の入出力デバイスは、有線、無線のいずれの接続形態であってもよい。

【0100】

ストレージ１５３には、管理者端末１５０であるコンピュータを動作させるためのオペレーションシステム（ＯＳ）に加えて、プロセッサ（ＣＰＵ）１５１等が実行することで仮想空間コンテンツである仮想ライブの配信に関する配信管理機能を初めとする各種機能を、配信用サーバコンピュータ１００と協働して提供するための管理者用プログラムが記憶されている。

【0101】

管理者用プログラムは、図６に示すように、管理者用視点映像制御プログラム、管理者用音声制御プログラム、管理者用コメント制御プログラム、視聴者管理プログラム、演者管理プログラム等を含む。

【0102】

管理者用視点映像制御プログラムは、表示装置１６０に表示する各仮想カメラからの視点映像を生成する機能並びに各視点の変更や切替機能を提供するプログラムである。

【0103】

管理者用音声制御プログラムは、配信用サーバコンピュータ１００から配信される仮想ライブの音声データに基づくライブ音声を音声出力装置１６２から出力する機能を提供するプログラムである。

【0104】

管理者用コメント制御プログラムは、配信用サーバコンピュータ１００から配信されるコメントデータにもとづくコメントを表示するとともに、配信を禁止するコメントや視聴者を選択して配信されないようにする等のコメントに関する機能を提供するプログラムである。

【0105】

視聴者管理プログラムは、仮想ライブに仮想参加する視聴者ユーザーを管理するためのプログラムであり、演者管理プログラムは、仮想ライブに仮想参加する演者ユーザーを管理するためのプログラムである。

【0106】

尚、図６には図示していないが、操作者である管理者が本人であるか否かを認証するための認証用プログラムや、仮想ライブのタイムスケジュールや楽曲順等を編集するためのスケジュール用プログラム等が含まれているが、これら以外のプログラムが含まれていてもよい。

【0107】

このように、本実施例１の仮想空間コンテンツ配信システムを構成する管理者端末１５０をイベント管理者Ｍが操作することによって、イベントを実行するための種々の設定、例えば、演目や楽曲順、演出に関する設定や、タイムスケジュール、フライング演出期間において空中移動仮想カメラが移動する軌道等の各種設定を実施できるようになっており、このようにして設定された内容にもとづいて仮想ライブが管理されるようになっている。

【0108】

＜仮想ライブ会場＞
本実施例１で使用した仮想空間である仮想ライブ会場を図１２に示す。仮想ライブ会場は、図１２に示すように、現実空間におけるライブ会場と同様に、演者ユーザーが演者アバター１として登壇する仮想ステージＧと、観客となる視聴者ユーザーが視聴者アバターとして仮想参加する仮想観客領域とを有する仮想空間とされている。

【0109】

仮想ステージＧは、図１２に示すように、比較的広い面積の台形状の床面を有しており、現実空間のライブ会場と同様に、演者アバター１が仮想ステージＧ上を移動できる。仮想ステージＧの仮想客席方向とは逆方向側には、図１２に示すように、中央部と右側部と左側部とに３分割された仮想ステージ壁が形成されており、これら仮想ステージ壁の前面に、仮想ディスプレイ４０、４１、４２が設けられていて、該仮想ディスプレイ４０、４１、４２に、演出用の画像や映像が仮想表示されるようになっている。

【0110】

尚、仮想ディスプレイ４０、４１、４２の間には、演者ユーザーに関係する星の仮想配置オブジェクト４３が配置されているとともに、仮想ステージＧ上の領域であって仮想ステージ壁に囲まれた第１領域よりも上方の領域である第２領域には、図１２に示すように、大きな星の仮想空中オブジェクト５０～５２が配置されている。尚、仮想空中オブジェクト５０～５２は、第２領域内を移動できるようになっている。

【0111】

仮想ステージＧの前側には、視聴者ユーザーが視聴者アバターとして仮想ライブ会場に仮想参加できる仮想観客領域が設けられている。この仮想観客領域は、図１２に示すように、演者アバター１が登壇する仮想ステージＧの中央に近い特別領域である第３領域と、第３領域を囲むように形成された領域であって仮想ステージＧの中央からの距離が第３領域よりも大きい第４領域とが設けられている。

【0112】

これら第３領域には、所定の上限数の範囲内で、仮想参加が許可された特別な視聴者ユーザーが仮想参加可能とされていて、本実施例１では、図１２に示すように、例えば、所定の仮想参加実績を満たすとともに演者ユーザーによって仮想参加が許可された４人の視聴者ユーザーの視聴者アバター１１～１４が配置されている。

【0113】

また、第４領域には、仮想ライブの開始前において仮想参加を予約した一般の視聴者ユーザーの視聴者アバター２１～３２が配置されている。尚、図１２において、視聴者アバター２１～３２は、便宜上、簡素化して表示しているが、視聴者アバター１１～１４と同様のアバターである。

【0114】

尚、第３領域に配置された各視聴者アバター１１～１４は、視聴者ユーザーが視聴者端末を操作することで、該第３領域内を移動することが可能とされているとともに、第４領域に配置された各視聴者アバター２１～３２も、視聴者ユーザーが視聴者端末を操作することで、該第４領域内を移動することが可能とされている。

【0115】

仮想ライブ会場には、図１２に示すように、４つの仮想カメラＣ１～Ｃ４が仮想配置（設定）されている。仮想カメラＣ１は、演者アバター１の正面位置に、演者アバター１に対面するように仮想配置された仮想カメラであり、仮想カメラＣ１による視点映像は、図１３（ａ）に示すように、演者アバター１を正面近傍位置から見た視点映像となる。

【0116】

仮想カメラＣ２は、演者アバター１の頭上に仮想配置（設定）されたカメラであり、該仮想カメラＣ２による視点映像は、図１５に示すように、演者アバター１から仮想観客領域を見た演者視点映像となる。

【0117】

仮想カメラＣ３は、演者アバター１の斜め後方の仮想ディスプレイ４１上に仮想配置された仮想カメラであり、仮想カメラＣ３による視点映像は、図１３（ｃ）に示すように、演者アバター１の斜め後方から仮想観客領域を見た視点映像となる。

【0118】

仮想カメラＣ４は、演者アバター１の斜め後方の仮想ディスプレイ４２上に仮想配置された仮想カメラであり、仮想カメラＣ４による視点映像は、図１３（ｂ）に示すように、演者アバター１の斜め後方から仮想観客領域を見た視点映像となる。

【0119】

また、本実施例１では、固定配置（設定）された仮想カメラＣ１～Ｃ４に加えて、仮想空間である仮想ライブ会場の空間内を空中移動可能に設定された空中移動仮想カメラ（図示略）が仮想配置されている。これら空中移動仮想カメラが移動する空中軌道並びに空中軌道上の個々の位置における視点方向（アングル）等は、管理者端末１５０によって予め設定されていて、後述するフライング演出期間において、演者アバター１が空中移動仮想カメラの空中軌道を追随するように仮想飛翔することで、仮想飛翔する演者アバター１を空中移動仮想カメラで捉えた視点映像が生成されるようになっている。

【0120】

尚、本実施例１では、図１２に示すように、固定配置（設定）された仮想カメラとして４つの仮想カメラＣ１～Ｃ４を仮想配置した形態を例示しているが、本発明はこれに限定されるものではなく、これら固定配置（設定）された仮想カメラを５以上としてもよいし、逆に、固定配置（設定）された仮想カメラを設けることなく、仮想ライブ会場に仮想参加した各アバターに対応した視点から見た視点映像だけが、演者端末２００や視聴者端末３００に表示されるようにしてもよい。

【0121】

また、本実施例１では、空中移動仮想カメラを１つとした形態を例示しているが、本発明はこれに限定されるものではなく、これら空中移動仮想カメラを複数とした形態としてもよいし、逆に、空中移動仮想カメラを仮想配置しない形態としてもよい。

【0122】

＜スタジオ＞
図１１は、本実施例１において使用したスタジオを示す図であり、スタジオには、前述したようにガラス窓を隔てた調整室が隣接して設けられており、演者ユーザーがスタジオ内で歌唱に対応した各動作を行うとともに、補助オペレータＯが調整室に設置されている演者端末２００の操作等を補助する。装着センサ２２０Ｃ１～２２０Ｃ５を装着した演者ユーザーの周囲には、ベースステーション２２０ａとベースステーション２２０ｂとがスタンドに搭載配置されているとともに、演者ユーザーのほほ正面位置には、表情入力装置２２１を構成する撮像カメラがスタンドに搭載配置されている。

【0123】

演者ユーザーがスタジオ内で対峙する壁面にはスクリーンＳが設けられており、スタジオの天井に配置されたプロジェクタ（表示装置Ｂ２１１）から、仮想カメラＣ２の視点映像がスクリーンＳに投影されることで、図１５に示すように、演者アバター１から仮想観客領域を見た視点映像がスクリーンＳに表示されるようになっており、演者ユーザーが、仮想観客領域において仮想参加している視聴者アバターの様子（ライブに対する視聴者の反応）を逐次、把握しながらライブを進めることができるようになっている。

【0124】

また、スクリーンＳの側方位置には、表示装置Ｃ２１２としての縦型の大型ディスプレイが配置されていて、該大型ディスプレイに視聴者のコメントや補助オペレータＯが演者ユーザーに伝達したいメッセージ等が表示されるようになっている。尚、表示装置Ｃ２１２には、ライブにおいて演者が歌唱する楽曲の歌詞や、セリフ等の情報（演者支援情報）が表示されるようにしてもよい。

【0125】

＜仮想空間コンテンツ配信システムの動作＞
図１０は、本実施例１の仮想空間コンテンツ配信システムの動作、具体的には、仮想ライブの映像や音声が配信される流れを説明する説明図である。

【0126】

まず、映像系について説明する。配信用サーバコンピュータ１００は、前述したように、仮想空間生成プログラム１２０および演者ユーザーや視聴者ユーザーのアバターデータ等にもとづいて仮想ライブ会場の仮想空間を提供可能とされており、これら演者ユーザーや視聴者ユーザーの各アバターの動作等が、演者端末２００から送信される演者アバター情報や、視聴者端末３００から送信される視聴者アバター情報によって仮想空間の状態が記述された仮想空間データが更新されることで、演者ユーザーの動作が演者アバター１の動作に反映されるとともに、視聴者ユーザーの動作（操作）が視聴者アバターの動作に反映される。

【0127】

尚、図１０には示していないが、演者端末２００並びに視聴者端末３００には、仮想ライブに仮想参加するために配信用サーバコンピュータ１００と通信接続することに伴って、配信用サーバコンピュータ１００から仮想ライブ会場の仮想空間データが事前に配信されて記憶されており、このようにして事前に記憶されている仮想空間データが、後述するように、配信用サーバコンピュータ１００から逐次配信される仮想空間更新データによって順次更新されることで、仮想ライブ会場の最新の状態を、演者端末２００並びに視聴者端末３００にて特定できるようになっている。

【0128】

具体的には、前述したスタジオにおける演者ユーザーの動作や表情は、前述した演者アバター制御プログラムによるボディモーションスキャン並びにフェイスモーションスキャンの各機能によって所定時間間隔にてスキャンされて演者アバター情報が生成されて配信用サーバコンピュータ１００に送信される。

【0129】

一方、第３領域に仮想参加が許可された視聴者ユーザーは、演者と同様に、モーションセンサを使用しているため、ボディモーションスキャン並びにフェイスモーションスキャンの各機能によって所定時間間隔にてスキャンされて視聴者アバター情報が生成されて配信用サーバコンピュータ１００に送信される。

【0130】

また、第４領域に仮想参加が許可された視聴者ユーザーは、視聴者端末３００のタッチパネルやキーボードやコントローラを使用して、移動操作、視点方向の変更操作、視点状況（ズーム）の変更操作、手を挙げる操作、手をたたく操作、跳ねる操作等の各種の操作を行うことで、視聴者アバターに対応する動作をさせることができる。そして、これら各操作のうち、視聴者アバターの動作に関係する操作にもとづいて視聴者アバター情報が生成されて配信用サーバコンピュータ１００に送信される。

【0131】

尚、第３領域に仮想参加している視聴者ユーザーも、移動や視点状況（ズーム）の変更操作、手を挙げる操作、手をたたく操作、跳ねる操作等の各種の操作を、コントローラ等を使用して実行することができ、この場合、各動作に対応したメニュー項目が表示され、該各動作に対応したメニュー項目をコントローラ等を使用して選択することができる。

【0132】

このように、視聴者端末３００においては、視聴者アバターに行わせる各動作に対応した操作を受付けるアバター動作操作処理が実行される。尚、アバター動作操作処理においては、上記した各動作に対応したメニュー項目の表示や消去等の処理も含まれている。

【0133】

このようにして演者端末２００から送信される演者アバター情報や視聴者端末３００から送信される視聴者アバター情報にもとづいて、配信用サーバコンピュータ１００は、仮想空間データを更新する仮想空間更新処理を実行することで、仮想ライブ会場に仮想参加している各アバターに演者ユーザーの動作や視聴者ユーザーの動作（操作）を反映させる。

【0134】

そして、更新前の仮想空間データと更新後の仮想空間データとにもとづいて仮想空間更新データを生成する仮想空間更新データ生成処理を実行した後、該生成した仮想空間更新データを演者端末２００と視聴者端末３００とに配信する。

【0135】

仮想空間更新データが配信された演者端末２００と視聴者端末３００においては、図１０に示すように、配信されてきた仮想空間更新データにもとづいて、事前記憶されている仮想空間データが更新されるとともに、該更新された仮想空間データを使用した演者視点映像生成処理や視聴者視点映像生成処理が実行されることで、更新された仮想空間データにもとづく演者視点映像や視聴者視点映像が生成されて、該生成された演者視点映像や視聴者視点映像が演者端末２００と視聴者端末３００において表示される（視聴者視点映像出力処理）。

【0136】

このように、本実施例１では、視聴者アバターにより仮想ライブ会場に仮想参加している各視聴者ユーザーの視点映像は、各視聴者ユーザーの視聴者端末３００側で生成されて表示されることで、これら各視聴者ユーザーの視聴者アバター視点映像を配信用サーバコンピュータ１００で生成することにより配信用サーバコンピュータ１００の処理負荷が著しく大きくなって、多くの視聴者ユーザーが仮想ライブに参加できなくなってしまうことを回避できるとともに、処理負荷が増大することによって配信が困難となってしまうことを回避できるようになっている。

【0137】

本実施例１では、仮想ステージＧ上の演者アバター１に近い第３領域にて仮想参加している視聴者アバター１３の視聴者ユーザーの視聴者端末３００の表示装置３１０には、図１３（ｄ）に示すように、演者アバター１に近い視聴者アバター１３から見た視点映像である演者アバター１のほぼ正面が大きく表示される視点映像が生成されて表示される一方、仮想ステージＧ上の演者アバター１から遠い第４領域であって、例えば、視聴者アバター１３の後方位置において仮想参加している視聴者アバター２８の視聴者ユーザーの視聴者端末３００の表示装置３１０には、図１３（ｅ）に示すように、演者アバター１から遠い視聴者アバター２８から見た視点映像である、第３領域にて仮想参加している視聴者アバター１３や視聴者アバター１４越しに、演者アバター１のほぼ正面が相対的に小さく見える視点映像が表示される。

【0138】

また、上面視コ字状に設定されている第４領域の仮想ステージＧの端側位置において仮想参加している視聴者アバター３２の視聴者ユーザーの視聴者端末３００の表示装置３１０には、図１３（ｆ）に示すように、演者アバター１の斜め前方位置の視聴者アバター３２から見た視点映像である、第３領域にて仮想参加している視聴者アバター１４越しに、演者アバター１が相対的に小さく見える視点映像が表示される。

【0139】

尚、図１３に示す表示例は、いずれも、視聴者端末３００が据置型のコンピュータ（ＰＣ）であって表示装置３１０が、据置型のディスプレイである場合を例示しているが、例えば、視聴者端末３００がスマートフォンＰやタブレット等である場合には、仮想カメラＣ１の視点映像の場合には、図１４（ａ）に示すように表示されるとともに、該視聴者端末３００が視聴者アバター１３の視聴者端末３００である場合には、図１４（ｂ）に示すように表示される。

【0140】

次に、音声系について説明すると、配信用サーバコンピュータ１００においてタイムスケジュールデータ（ＴＳデータ）１１２にもとづいて楽曲データ１１３が音声制御プログラム１２４によって再生され、再生楽曲（データ）として演者端末２００に送信される（楽曲再生処理）。

【0141】

演者端末２００においては、配信用サーバコンピュータ１００から送信された再生楽曲（データ）による楽曲音声が、演者ユーザーが装着している高機能イヤホン（イヤモニ）を通じて該演者ユーザーに対して出力されるとともに（再生楽曲出力処理）、該出力された再生楽曲に合わせて演者ユーザーが歌唱することで、集音マイク（音声入力装置２２２）から入力される演者音声がデータ化されて演者音声（データ）として配信用サーバコンピュータ１００に送信される。

【0142】

配信用サーバコンピュータ１００は、演者端末２００から受信した演者音声（データ）による演者音声と前述した楽曲再生処理にて再生した再生楽曲とから配信音声（データ）を生成し（配信音声生成処理）、該生成した配信音声（データ）を視聴者端末３００に配信する（生成音声配信処理）。

【0143】

視聴者端末３００では、配信用サーバコンピュータ１００から配信された配信音声（データ）により配信音声が、イヤホンやスピーカー等の音声出力装置３２２から出力されることで、視聴者は、あたかも仮想ライブ会場において演者アバター１が歌唱しているようにライブ音声を聞くことができる。

【0144】

尚、演者端末２００においては、上記したように、演者音声（データ）が配信用サーバコンピュータ１００に送信されるとともに、図１０に示すように、モニター音声生成処理とモニター音声出力処理とが実行されることにより、調整室に配置されているスピーカーから再生楽曲の楽曲音声と演者音声とが出力されることで、演者ユーザーの歌唱の状況等を補助オペレータＯ等が調整室において確認することができるようになっている。

【0145】

＜視聴者用視点映像制御処理＞
次に、視聴者端末３００において、視聴者用プログラムに含まれる視聴者用視点映像制御プログラムにもとづいて実行される視聴者用視点映像制御処理について、図２０を用いて説明する。

【0146】

視聴者用視点映像制御処理においては、先ず、演者アバター１が図１９に示すように、仮想飛翔するフライング演出期間中であるか否かを判定する（ステップＳ１）。フライング演出期間中であるか否かは、配信用サーバコンピュータ１００から、フライング演出期間中であることを示す演出状態データによって特定することができる。尚、配信用サーバコンピュータ１００は、タイムスケジュールデータにもとづいてフライング演出期間となるときに、視聴者端末３００に対してフライング演出期間中であることを示す演出状態データを送信する。

【0147】

フライング演出期間中である場合（ステップＳ１でＹ）は、ステップＳ２１に進む一方、フライング演出期間中でない場合（ステップＳ１でＮ）は、視点の移動操作（アバターの移動操作や動作操作による視点の変更を含む）やズーム操作を含む視点関係操作が無効とされているか否かを判定する（ステップＳ２）。

【0148】

視点関係操作が無効とされている場合（ステップＳ２でＹ）は、ステップＳ７に進む。視点関係操作が無効とされていない場合（ステップＳ２でＮ）は、アバターの移動操作や動作操作等の視点が変化する操作が有るか否かを判定し（ステップＳ３）、操作がある場合（ステップＳ３でＹ）は操作に応じて視聴者視点を変更し、操作がない場合（ステップＳ３でＮ）は、ステップＳ５に進んで、ズーム操作があるか否かを判定する（ステップＳ５）。

【0149】

ズーム操作がある場合（ステップＳ５でＹ）は、表示装置３１０に表示されている映像領域を操作に応じた映像領域に変更し、ズーム操作がない場合（ステップＳ５でＮ）は、動作追随設定の有無を判定する（ステップＳ７）。

【0150】

この動作追随設定は、視聴者ユーザーが、自身が操作に使用するデバイスの種類や、操作についての習熟度に応じて、視聴者端末３００において、例えば、ライブ開始前やライブ中に、任意に設定することができる。具体的には、例えば、使用するタッチパネル、キーボード、ゲームコントローラ等の操作入力装置３２１の操作に慣れていない場合や、アバターの移動操作や動作操作による視点の変更に慣れていない場合、後述するように、自身の視聴者アバターの仮想参加位置が演者アバター１から遠く、ズームアップで拡大表示していることで、演者アバター１の少しの動作でも演者アバター１が適切に表示されなくなってしまう等、演者アバター１の移動や動作に対応して視点を上手く変更できない場合等に設定される。

【0151】

動作追随設定がない場合（ステップＳ７でＮ）は、ステップＳ１１に進む一方、動作追随設定がある場合（ステップＳ７でＹ）は、更に、動作追随条件が成立したか否かを判定する（ステップＳ８）。

【0152】

動作追随条件とは、本実施例１においては、表示装置３１０において演者アバター１が良好に表示されなくなることがほぼ確実である条件としており、具体的には、演者アバター１の頭部（顔でもよい）が、表示装置３１０の表示領域の周辺における所定範囲内に入っている場合には、演者アバター１の移動や動作によって表示領域外に頭部（顔）が移動して良好に表示されなくなってしまう可能性が著しく高いことから、動作追随条件が成立したものと判断するようにしている。

【0153】

このように、本実施例１では、演者アバター１の頭部（顔）が表示領域に表示されなくなる前に動作追随条件が成立したと判断することで、演者アバター１の頭部（顔）が表示領域に表示されなくなってしまうことを大幅に低減できるようにしているが、本発明はこれに限定されるものではなく、これら動作追随条件を、表示領域外に頭部（顔）が移動したことを条件としてもよいし、これら以外の条件を動作追随条件としてもよい。つまり、これら動作追随条件としては、演者アバター１が表示領域に良好に表示されなくなってしまうことを防ぐことができる条件であれば、任意の条件を使用することができる。

【0154】

動作追随条件が成立した場合（ステップＳ８でＹ）は、視点関係操作を無効化した後（ステップＳ１２）、表示装置３１０の表示領域に表示される視点映像として、演者アバター１の頭部（顔）が表示領域の周辺における所定範囲に囲まれた非成立範囲内となる動作追随視点に視点が自動的に変更されて、該動作追随視点から見た視点映像が表示装置３１０の表示領域に表示される（ステップＳ１３）。

【0155】

一方、動作追随条件が成立していない場合（ステップＳ８でＮ）は、更に、視点関係操作が無効化されているか否かを判定し（ステップＳ９）、視点関係操作が無効化されている場合（ステップＳ９でＹ）は、無効化されている視点関係操作を有効化して（ステップＳ１０）からステップＳ１１に進み、視点関係操作が無効化されていない場合（ステップＳ９でＮ）はステップＳ１０を経由することなくステップＳ１１に進む。

【0156】

ステップ１１では、動作追随設定が設定されていないこと、若しくは、動作追随条件が成立していないことにより、視聴者アバターの視点映像が表示装置３１０の表示領域に継続表示される（ステップＳ１１）。

【0157】

また、前述したように、ライブにおいて演者アバター１が仮想飛翔するフライング演出期間となった場合は、ステップＳ１でＹと判定されてステップＳ２１に進み、フライング演出期間の開始タイミングであるか否かを判定する（ステップＳ２１）。

【0158】

フライング演出期間の開始タイミングである場合（ステップＳ２１でＹ）は、フライング演出期間の開始前において表示装置３１０の表示領域に表示されていた視聴者アバターの視点映像または動作追随視点映像に代えて、配信用サーバコンピュータ１００から配信されるフライング視点映像を表示し（ステップＳ２２）、その後、視点関係操作を無効化して（ステップＳ２３）、ステップＳ１に戻る。

【0159】

尚、本実施例１では、フライング演出期間においては、全ての視聴者ユーザーの視聴者端末３００に同一のフライング視点映像を表示することから、個々の視聴者ユーザーで異なる視聴者アバター視点映像のように、各視聴者端末３００側でフライング視点映像を生成するのではなく、配信用サーバコンピュータ１００側で生成して視聴者端末３００に配信することで、視点の空中移動を伴うことで、視点映像の描画負荷が大きいフライング視点映像を、処理能力が低い視聴者端末３００であっても、良好に表示できるようにしているが、本発明はこれに限定されるものではなく、これらフライング視点映像を、視聴者アバター視点映像と同様に、個々の視聴者端末３００側で生成するようにしてもよい。

【0160】

一方、フライング演出期間の開始タイミングでない場合（ステップＳ２１でＮ）は、更に、フライング演出期間の終了タイミングであるか否かを判定する（ステップＳ２４）。

【0161】

フライング演出期間の終了タイミングであるか否かは、配信用サーバコンピュータ１００から送信されるフライング視点映像のデータ中に含まれる終了を示すデータにもとづいて特定してもよいし、フライング視点映像とは異なる前述した演出状態データによって特定してもよい。

【0162】

フライング演出期間の終了タイミングでない場合（ステップＳ２４でＮ）、つまり、フライング演出期間中である場合には、ステップＳ２６に進んで、フライング視点映像を更新した後、ステップ１に戻る一方、フライング演出期間の終了タイミングである場合（ステップＳ２４でＹ）は、視点関係操作を有効化した後（ステップＳ２５）、ステップＳ１１に進んで、フライング演出期間中に表示装置３１０の表示領域に表示していたフライング視点映像に代えて、視聴者アバターの視点映像を表示装置３１０の表示領域に表示した後、ステップＳ1に戻る。

【0163】

このように、本実施例１の視聴者端末３００において図２０に示す視聴者用視点映像制御処理が実行されることによって視聴者端末３００に表示される各視点映像を、図１６～図１９を用いて説明する。

【0164】

図１６は、本実施例１の視聴者端末３００においてズーム操作をした場合の表示装置３１０の表示内容を示す図であり、ズーム操作を何もしていないデフォルトの状態では、図１６（ａ）に示すように、演者アバター１の上半身を中心とした映像領域の視点映像が表示されている。このデフォルト状態において、視聴者ユーザーがズームアップ操作、例えば、視聴者端末３００がスマートフォンＰである場合であれば、「＋」の表示（図示略）に触れる操作を行い、視聴者端末３００がコンピュータ（ＰＣ）である場合であれば、キーボードの「＋」キーを操作した場合は、例えば、図１６（ｂ）に示すように、演者アバター１の頭部（顔）を中心とした映像領域の視点映像が表示される。

【0165】

一方、視聴者ユーザーがズームダウン操作、例えば、視聴者端末３００がスマートフォンＰである場合であれば、「－」の表示（図示略）に触れる操作を行い、視聴者端末３００がコンピュータ（ＰＣ）である場合であれば、キーボードの「－」キーを操作した場合は、例えば、図１６（ｃ）に示すように、演者アバター１の全身が含まれる映像領域の視点映像が表示される。

【0166】

尚、図１６では、ズームの機能を解り易くするために、視聴者アバターの視点ではなく、仮想カメラＣ１の視点映像を使用して説明したが、図１７に示すように、視聴者アバターの視点についても同様にズームアップ、ズームダウンを行うことができる。

【0167】

また、図２０の視聴者用視点映像制御処理においては、詳述していないが、例えば、ライブが開始されるときに、演者アバター１が仮想ステージＧに初めて登場する場合は、視聴者アバターの視点が演者アバター１に向いていないことから、登場する演者アバター１が視聴者端末３００に表示されない期間が長くなってしまう可能性があるので、このように、演者アバター１が最初に登場する期間等を登場演出期間等とし、これらの演出期間において、視聴者端末３００に表示される視点映像を、聴者アバターの視点映像ではなく、仮想カメラＣ１の視点映像等に自動的に切り替えて表示するとともに、これら仮想カメラＣ１の視点映像においてもズームアップ等を、個々の視聴者ユーザーが実行できるようにしてもよい。

【0168】

図１７は、視聴者アバターの視点映像の例として、第４領域に仮想参加している視聴者アバター２８の視点映像を示している。図１７に示すように、視聴者アバター２８の視点映像には、第３領域に仮想参加している視聴者アバター１３と視聴者アバター１４の頭部が含まれており、これら視聴者アバター１３と視聴者アバター１４の頭部越しに演者アバター１を見る映像となる。

【0169】

このため、視聴者アバター２８の視聴者ユーザーは、例えば、ズームアップ操作を行って、図１７（ｂ）に示すように、演者アバター１の上半身が中心的に表示される映像領域に変更することで、視聴者アバター１３と視聴者アバター１４が表示されないようにして、ライブを楽しむことができる。

【0170】

但し、図１７（ｂ）に示すようにズームアップした状態においては、例えば、ライブが進行して演者アバター１が移動したり大きく動作するようになると、これら演者アバター１の動作に合わせて視聴者アバター２８の視点を視聴者ユーザーが上手く変更することができないと、図１８（ｄ）～（ｆ）に示すように、演者アバター１が良好に表示されない状態となる場合があるため、視点の操作に注意を払うことによって、ライブに集中することが難しくなってしまい、ライブを良好に楽しむことができなくなる場合がある。

【0171】

しかし、本実施例１では、上記のように、視聴者ユーザーが動作追随設定を行った場合には、図１８（ａ）～（ｃ）に示すように、演者アバター１の頭部が表示領域の周辺所定領域内に入ることで動作追随条件が成立して視点が自動的に動作追随視点に変更され、該動作追随視点の視点映像が表示されるようになるため、視聴者ユーザーは、視点の操作に注意を払う必要がなくなるので、ライブに集中できることで良好にライブを楽しむことができるようになる。

【0172】

そして、ライブが進行してフライング演出期間となると、図１９に示すように、個々の視聴者アバターの視点映像から空中移動仮想カメラから見たフライング視点映像に、視聴者ユーザーが操作しなくても自動的に変更される。

【0173】

具体的には、演者アバター１が仮想飛翔をする前に、羽根のオブジェクトが演者アバター１の背中において大きくなる映像が表示される。そして、演者アバター１が仮想ライブ会場の第２領域に仮想配置されている星の仮想空中オブジェクト５０を見あげるようにすることで視聴者アバターの視点も同様に移動する。このとき、演者アバター１の周囲には、光のエフェクト６１が出現する。

【0174】

その後、演者アバター１が仮想飛翔に移ると、表示装置３１０に表示される視点映像は、図１９（ｂ）までの視聴者アバターの視点映像から、図１９（ｃ）に示すように、空中移動仮想カメラから見たフライング視点映像に自動的に切り替わる。

【0175】

そして、フライング演出期間において空中移動仮想カメラは、前述したように、予め設定された空中軌道にもとづいて第２領域内を空中移動し、これら空中移動する空中移動仮想カメラから見たフライング視点映像が、図１９（ｄ）に示すように表示装置３１０に表示される。

【0176】

＜実施例１の変形例＞
上記した実施例１では、一般動作（第１動作）を、演者アバター１が仮想ステージＧに移動せずに立っている動作とし、特別動作（第２動作）を、演者アバター１が仮想飛翔を行っている動作とし、特定動作（第３動作）を、演者アバター１が横方向に急移動する動作とした形態を例示しているが、本発明はこれに限定されるものではなく、配信するコネテンツに応じた動作であってよく、例えば、一般動作（第１動作）は、配信されるコンテンツにおいて、演者アバターが最も多くの期間に亘って実行している動作（通常動作）としてもよく、特別動作（第２動作）を、配信されるコンテンツにおいて、最も短い期間である特別期間において実行している動作や最も頻度が少ない動作とし、特定動作（第３動作）を、一般動作（第１動作）よりも実行される期間が短いが特別動作よりも実行されている期間が長い動作や一般動作（第１動作）よりも実行される頻度が少ないが特別動作よりも実行される頻度が多い操作としてもよい。尚、特別動作（第２動作）が、特定動作（第３動作）を含む場合があってもよい。

【0177】

また、上記した実施例１では、特別動作（第２動作）に対応した視点への切替機能と、特定動作（第３動作）に追随する追随機能と、の双方の機能を有している形態を例示したが、本発明はこれに限定されるものではなく、これらのいずれか一方の機能のみを有する仮想空間コンテンツ配信システムであってもよい。

【0178】

上記した実施例１では、視聴者ユーザーの視点を、演者アバターの動作に応じて変更、追随させる形態を例示したが、本発明はこれに限定されるものではなく、例えば、これら視点の変更、追随を、仮想ステージＧにおける演出物であるスモークや花火（火柱）の仕掛け、特殊なライティング、仮想ステージＧの変形等の特定の演出に応じて実行するようにしてもよい。

【0179】

【実施例2】

【0180】

次に、実施例２の仮想空間コンテンツ配信システムについて、図２１～図２８を用いて以下に説明する。尚、実施例１と同一の構成については、同一の符号を付して説明を省略する。

【0181】

実施例２の仮想空間コンテンツ配信システムの構成は、図１に示す実施例１の構成と同一であるが、仮想ライブの進行内容が異なることで、仮想カメラＣ１～Ｃ４や空中移動仮想カメラからの視点映像（以下、仮想カメラ視点映像と総称する）が配信される期間や、これら仮想カメラ視点映像を生成する主体が、実施例１とは異なる点が本実施例２の特徴部分である。

【0182】

図２１は、実施例２の仮想空間コンテンツ配信システムにおいて配信される仮想ライブの進行内容を示す図である。実施例２の仮想ライブは、まず、仮想ライブの開始前の期間として、「ライブ仮想空間参加可能期間」と「開演前説」の期間とが設けられていて、視聴者ユーザーは、該ライブ仮想空間参加可能期間において仮想ライブの対象の仮想空間である仮想ライブ会場に仮想参加することができる。

【0183】

尚、「開演前説」の期間の終了間際に設定されている事前データＤＬ完了チェックタイミングまでの期間は、事前データダウンロード（ＤＬ）期間とされていて、ライブ仮想空間参加可能期間中に仮想参加した視聴者ユーザーの視聴者端末３００に対して、仮想ライブ会場の仮想空間データ（基本データ）、演者アバター１のアバターデータ、並びに仮想参加した他の視聴者ユーザーのアバターデータ等が、事前データとして配信用サーバコンピュータ１００からダウンロード（ＤＬ）されるようになっている。

【0184】

また、事前データダウンロード（ＤＬ）期間の終了タイミングである事前データＤＬ完了チェックタイミングにおいては、事前データのダウンロード（ＤＬ）が、各視聴者端末３００において完了しているか否かがチェックされる。

【0185】

尚、「開演前説」の期間においては、当該仮想ライブについての説明等がビデオ映像等によって紹介される。よって、これら「開演前説」の期間中においても事前データをダウンロード（ＤＬ）可能な期間とすることで、ライブ仮想空間参加可能期間において終了間際に仮想参加した視聴者アバターのアバターデータについても、各視聴者端末３００が配信用サーバコンピュータ１００からダウンロード（ＤＬ）することができるようになっている。

【0186】

また、実施例２の仮想ライブは、図２１に示すように、「開演演出」→「第１ＭＣ」→「第１演目」→「第２ＭＣ」→「第２演目」…のように進行していく。「開演演出」は、仮想ステージＧに演者アバター１が登場する演出である。「第１ＭＣ」は、仮想ステージＧに登場した演者アバター１が、トークによって視聴者に対して挨拶を行うとともに、最初に上演する第１演目についての紹介を行う。「第１演目」は、演者アバター１（演者）の歌唱とダンスとを含むとともに、途中に、仮想ライブ会場を仮想飛翔する演者アバター１を空中移動仮想カメラから仮想撮像した映像によるフライング演出を含む演目である。「第２ＭＣ」は、演者アバター１（演者）がトークによって、主に、第２演目についての紹介を行う。「第２演目」は、演者アバター１（演者）の歌唱とダンスとを含むとともに、途中に、演者アバター１が衣装を交換する状況を仮想カメラＣ１によって仮想撮像した映像による衣装チェンジ演出と、演者アバター１が複数人に分身する状況を仮想カメラＣ１によって仮想撮像した映像による分身演出とを含む演目である。

【0187】

これら各演出や演目等が実行される各期間における配信用サーバコンピュータ１００の処理負荷としては、ライブ仮想空間参加可能期間が最も低い「低」である一方、特別演出である「フライング演出」、「衣装チェンジ演出」、「分身演出」が実行される期間が最も高い「高」である。「開演前説」、「開演演出」、「第１ＭＣ」、「フライング演出」までの「第１演目」の期間は、配信用サーバコンピュータ１００の処理負荷は「中」であり、「フライング演出」後の「第１演目」の期間、「第２ＭＣ」、「衣装チェンジ演出」までの「第２演目」の期間も処理負荷は「中」であり、「衣装チェンジ演出」から「分身演出」までの「第２演目」の期間も「中」であり、「分身演出」後の「第２演目」の期間も「中」である。

【0188】

次に、実施例２の仮想ライブにおける各期間について、視聴者端末３００において視聴可能な視点映像について説明すると、仮想参加してから「開演前説」が開始されるまでのライブ仮想空間参加可能期間においては、視聴者アバター視点映像だけが表示可能とされている。

【0189】

そして、「開演前説」が開始されるタイミングで、仮想カメラ視点映像、具体的には、仮想カメラＣ１の視点映像だけが表示可能とされている。このように、仮想ライブの開始前であるにも係わらず「開演前説」において視点映像を、仮想カメラ視点映像のみとするのは、これら開演前説には、仮想ライブに関する注意点等の説明も含まれているため、視聴者端末３００において視聴者アバター視点映像を表示していることによって、仮想ステージＧにて行われている開演前説を視聴しない視聴者ユーザーが発生してしまうことを防ぐことを目的としている。

【0190】

尚、これら「開演前説」の仮想カメラ視点映像は、後述するように、配信用サーバコンピュータ１００にて生成されて各視聴者端末３００に配信されるので、事前データのダウンロードが未完了の視聴者端末３００においても表示することができる。

【0191】

上記した事前データＤＬ完了チェックタイミングにおいて事前データのダウンロードが完了している視聴者端末３００については、「第１ＭＣ」と「フライング演出」までの「第１演目」の期間、並びに「フライング演出」後の期間においては、仮想カメラ視点映像に加えて視聴者アバター視点映像を表示可能とされている。

【0192】

一方、上記した事前データＤＬ完了チェックタイミングにおいて事前データのダウンロードが完了していない視聴者端末３００については、視聴者アバター視点映像を正確に生成することができないので、配信用サーバコンピュータ１００において生成された仮想カメラ視点映像が配信されることによって、仮想ライブの全ての期間において仮想カメラ視点映像のみが表示可能とされ、視聴者アバター視点映像を表示させることはできないようになっている。

【0193】

また、配信用サーバコンピュータ１００の処理負荷が「高」である「フライング演出」、「衣装チェンジ演出」、「分身演出」の各映像のうち、「衣装チェンジ演出」、「分身演出」の仮想カメラＣ１の仮想カメラ視点映像は、これら「衣装チェンジ演出」、「分身演出」以外の第２演目期間中の仮想カメラ視点映像と同様に、配信用サーバコンピュータ１００ではなく各視聴者端末３００において生成することで、これら「衣装チェンジ演出」、「分身演出」の仮想カメラＣ１の仮想カメラ視点映像の生成するための配信用サーバコンピュータ１００の処理負荷を低減できるようにしている。

【0194】

尚、「フライング演出」の期間についても、配信用サーバコンピュータ１００における処理負荷が高い期間であることから「衣装チェンジ演出」、「分身演出」と同様に、視聴者端末３００において生成することが考えられるが、この場合、仮想ライブ会場内を移動する空中移動仮想カメラの移動軌跡の詳細な軌道データ等を各視聴者端末３００に事前に配信して映像を生成する必要があることから、実施例２では配信用サーバコンピュータ１００側で「フライング演出」の映像を生成、配信しているが、本発明はこれに限定されるものではなく、「フライング演出」の映像についても、配信用サーバコンピュータ１００の処理負荷の低減を目的として、各視聴者端末３００において生成するようにしてもよい。

【0195】

ここで、実施例２の配信用サーバコンピュータ１００において使用される参加者ユーザーテーブルについて、図２３を用いて簡潔に説明する。

【0196】

参加者ユーザーテーブルは、図７に示すイベントデータに登録されている個々の仮想ライブイベントにおいて、仮想ライブへの視聴者ユーザーの参加状況や事前データのダウンロード状況等を特定できるようにするために使用されるデータテーブルであって、図２３に示すように、参加者ＩＤ（視聴者ユーザーＩＤ）に対応付けて、当該参加者（視聴者ユーザー）の参加状態を特定可能な参加識別データ（参加識別フラグ）と、当該参加者（視聴者ユーザー）の参加エリアと、事前データのダウンロード状態を特定可能な事前データＤＬ識別データ（事前データＤＬ識別フラグ）等のデータが記憶可能なテーブルである。

【0197】

尚、参加者ＩＤの項目には、イベントデータにおいて、当該仮想ライブに対応して記憶されている各参加者グループのファイルに記述されている参加予定者の視聴者ユーザーＩＤが全て登録されて使用される。

【0198】

参加識別データ（参加識別フラグ）は、参加者ＩＤ（視聴者ユーザーＩＤ）の登録時において、非参加状態に対応する「０」が登録されており、各参加者（視聴者ユーザー）の参加が認証によって許可されたときに、参加を示す「１」に更新される。よって、該参加識別データ（参加識別フラグ）によって、参加予定視聴者ユーザーのうち、参加している視聴者ユーザーと、何らかの理由で参加できなかった視聴者ユーザーとを特定することができる。

【0199】

参加エリアのデータは、各参加者（視聴者ユーザー）の参加エリアが、第３領域であるのか、第４領域であるのかを特定可能なデータとされており、各参加者（視聴者ユーザー）の参加が認証によって許可されたときに、登録されるデータである。

【0200】

事前データＤＬ識別データ（事前データＤＬ識別フラグ）は、前述した事前データＤＬ完了チェックタイミングにおいて事前データのダウンロード（ＤＬ）が完了しているか否かのチェックにもとづいて、完了している場合は、未完了を示す「０」から完了を示す「１」に更新される。よって、これら事前データＤＬ識別データ（事前データＤＬ識別フラグ）によって、仮想参加している各参加者（視聴者ユーザー）のうち、事前データのダウンロード（ＤＬ）が完了していない全ての参加者（視聴者ユーザー）を容易に特定することができる。

【0201】

次に、実施例２において視聴者ユーザーが仮想ライブ会場に仮想参加することで事前データがダウンロードされる流れについて、図２２を用いて説明する。

【0202】

まず、視聴者ユーザーは、視聴者端末３００にて実行している視聴者用プログラム（視聴アプリ）において、自分が仮想参加を予定している仮想ライブへの参加操作、例えば、参加メニューの選択やキーボードにおいて参加操作が割り当てられている特定キーの操作を実行する。

【0203】

この参加操作の実行によって、視聴者端末３００から配信用サーバコンピュータ１００に対して、視聴者ユーザーＩＤや当該視聴者ユーザーを認証するための認証用データを含む参加要求が送信される。

【0204】

参加要求を受信した配信用サーバコンピュータ１００においては、ライブ仮想空間参加可能期間であることを条件に、参加者認証処理を実行する。参加者認証処理では、受信した参加要求に含まれる視聴者ユーザーＩＤが、参加対象の仮想ライブに対応している参加者ユーザーデータベースに、参加者ＩＤとして登録されているか否かによって、当該視聴者ユーザーが該当する仮想ライブの参加予定者であるのか否かを判定するとともに、図９に示す視聴者ユーザーデータにおいて、当該視聴者ユーザーＩＤに対応付けて記憶されている認証情報ファイルデータから特定される認証情報ファイルに記述された認証用データと、参加要求に含まれる認証用データとを照合することで視聴者ユーザーの認証を行う。

【0205】

視聴者ユーザーが参加予定者であって、認証用データによる認証が完了した場合には、参加者ユーザーテーブルの参加識別データ（参加識別フラグ）を、「参加」に対応する「１」に更新する。

【0206】

そして、配信用サーバコンピュータ１００は、参加要求の送信元の視聴者端末３００に対して、参加対象の仮想ライブに対応する事前データをダウンロードさせるために事前データＤＬ指示情報を送信（返信）する。視聴者端末３００は、該事前データＤＬ指示情報の受信によって、参加が許可されたことを確認することができる。

【0207】

事前データＤＬ指示情報の受信に応じて視聴者端末３００は、ダウンロードする事前データを特定し、特定した事前データのダウンロードを要求する事前データＤＬ要求を配信用サーバコンピュータ１００に送信する。

【0208】

この事前データＤＬ要求の受信に応じて配信用サーバコンピュータ１００は、事前データ送信処理を実行する。

【0209】

この事前データ送信処理においては、事前データＤＬ要求の送信元の視聴者端末３００に対して要求された事前データを送信する。尚、事前データには、前述したように、仮想ライブ会場の仮想空間データ（基本データ）、演者アバター１のアバターデータ、並びに、既に仮想参加している他の視聴者ユーザーのアバターデータ等が含まれている。

【0210】

尚、事前データ送信処理においては、事前データＤＬ要求の送信元以外の視聴者端末３００であって、参加者データテーブルによって既に参加が確認されている視聴者ユーザーの視聴者端末３００に対して、事前データＤＬ要求の送信元の視聴者ユーザーのアバターデータを、事前データとして追加配信する。これによって、仮想ライブに仮想参加している各視聴者ユーザーの視聴者端末３００には、仮想空間データ（基本データ）と演者アバターのアバターデータとともに、仮想ライブに仮想参加している全ての視聴者ユーザーのアバターデータが事前に配信されて記憶されることになる。

【0211】

そして、このようにして視聴者端末３００に記憶された事前データは、前述した事前データＤＬ完了チェックタイミング（図２１参照）において全ての事前データのダウンロードが完了しているか否かが確認され、事前データのダウンロードが完了している場合に、参加者ユーザーテーブルの事前データＤＬ識別データ（事前データＤＬ識別フラグ）が、未完了を示す「０」から完了を示す「１」に更新される。

【0212】

尚、事前データのダウンロードが完了していないことで、事前データＤＬ識別データ（事前データＤＬ識別フラグ）が、未完了を示す「０」のままである参加者（視聴者ユーザー）に対しては、前述したように、仮想カメラ視点映像のみが表示可能とされる。

【0213】

次に、視聴者端末３００に表示される各種視点映像が生成される主体が、仮想ライブの各期間において変化する状況について、図２４～図２７を用いて説明する。

【0214】

まず、視聴者端末３００において視聴者アバター視点映像だけが表示可能とされるライブ仮想空間参加可能期間中については、図２４に示すように、配信用サーバコンピュータ１００から送信される、演者ユーザーの動作に連動した動作を行う演者アバター１の動作を生成するための演者アバター用動作データを含む仮想空間更新データにもとづいて、事前データの受信によって既に視聴者端末３００において記憶されている仮想空間データが逐次更新され、該更新された仮想空間データにもとづいて視聴者視点映像生成処理が視聴者端末３００にて実行されて視聴者アバター視点映像が生成されて、映像出力処理によって出力（表示）される。尚、図２４では、演者端末２００を省略しているが、仮想空間更新データは、実施例１において図１０に示されるように、演者端末２００に対しても送信される。

【0215】

また、視聴者端末３００において仮想カメラ視点映像のみが表示可能とされる「開演前説」、「開演演出」、「フライング演出」の各期間については、図２５に示すように、配信用サーバコンピュータ１００において、仮想空間更新データ配信処理においては仮想空間更新データが演者端末２００に対してだけ送信される。そして、仮想空間更新データ配信処理に次いで仮想カメラ視点映像が生成される仮想カメラ視点映像生成処理と、該仮想カメラ視点映像生成処理にて生成された仮想カメラ視点映像の映像データを、仮想ライブに参加している全ての視聴者端末３００に配信する仮想カメラ視点映像データ配信処理が実行される。

【0216】

これら仮想カメラ視点映像データ配信処理にて配信用サーバコンピュータ１００から配信された仮想カメラ視点映像データは、該仮想カメラ視点映像データを受信した視聴者端末３００において映像出力処理が実行されることによって表示される。

【0217】

つまり、図２７に示すように、仮想カメラ視点映像のみが表示可能とされる「開演前説」、「開演演出」、「フライング演出」の各期間については、仮想カメラ視点映像は、配信用サーバコンピュータ１００において生成される。

【0218】

また、視聴者端末３００において視聴者アバター視点映像と仮想カメラ視点映像のいずれかを選択して表示可能な期間であるＭＣ期間中及びフライング演出期間中を除く演目期間中においては、図２６に示すように、配信用サーバコンピュータ１００において仮想空間更新データ配信処理が実行されることによって、仮想ライブに参加している各視聴者ユーザーの視聴者端末３００に対して仮想空間更新データが配信されることによって、視聴者端末３００において仮想空間更新処理が実行される。

【0219】

そして、視聴者端末３００においては、表示対象の映像として視聴者アバター視点映像が選択されているか否かが判定され、視聴者アバター視点映像が選択されている場合には、図２４に示す流れと同様に、視聴者視点映像生成処理が実行されることで視聴者アバター視点映像が生成されて、該生成された視聴者アバター視点映像が映像出力処理によって表示される。

【0220】

一方、表示対象の映像として視聴者アバター視点映像が選択されていない場合、すなわち、表示対象の映像として仮想カメラ視点映像が選択されている場合には、視聴者端末３００において仮想カメラ視点映像生成処理が実行されることで、仮想カメラ視点映像が生成され、該生成された仮想カメラ視点映像が映像出力処理によって表示される。

【0221】

尚、この仮想カメラ視点映像において生成される仮想カメラ視点映像は、仮想カメラＣ１、Ｃ３、Ｃ４のいずれの視点映像とするかを、視聴者ユーザーが選択できるようにしてもよいし、配信用サーバコンピュータ１００が全ての視聴者端末３００に対して指示するようにしてもよい。

【0222】

つまり、図２７に示すように、視聴者端末３００において仮想カメラ視点映像と視聴者アバター視点映像のいずれかが表示可能とされるＭＣ期間中及びフライング演出期間中を除く演目期間中については、仮想カメラ視点映像は、視聴者端末３００において生成される。このように、仮想カメラ視点映像と視聴者アバター視点映像とのいずれかを選択して視聴者端末３００に表示可能な期間については、視聴者ユーザーの選択によって仮想カメラ視点映像と視聴者アバター視点映像との相互の切り替えが実行されるため、仮想カメラ視点映像データを配信用サーバコンピュータ１００からの配信によって表示する場合に比較して、これら映像の切り替えを映像が途切れてしまう等の不具合を生じることなく、且つ、これら映像の切り替えに伴う配信用サーバコンピュータ１００の処理負荷の増大を防ぎつつ実行することができる。

【0223】

一方、視聴者端末３００において仮想カメラ視点映像のみが表示可能な期間である、「開演前説」、「開演演出」、「フライング演出」の各期間については、仮想カメラ視点映像は、配信用サーバコンピュータ１００においてのみ生成されて、各視聴者端末３００に配信される。このように、視聴者端末３００において仮想カメラ視点映像のみが表示可能な期間においては、仮想カメラ視点映像が配信用サーバコンピュータ１００においてのみ生成されるため、仮想カメラ視点映像を生成する処理が視聴者端末３００において重複して実行されることによって、システム全体の処理負荷が無駄に増大してしまうことを防ぐことができる。

【0224】

ここで、視聴者端末３００において視点映像が切り替わる際の状況について、仮想カメラ視点映像のみが表示可能な期間である、「フライング演出」の期間を例に、図２８を用いて説明する。

【0225】

例えば、図２８に示すように、「第１ＭＣ」の期間および「フライング演出」までの第１演目の期間中において視聴者アバター視点映像が表示されている視聴者端末３００において、仮想カメラ視点映像（空中移動仮想カメラからの視点映像）のみが表示可能な「フライング演出」の期間が開始されたときから、配信用サーバコンピュータ１００が仮想カメラ視点映像（空中移動仮想カメラからの視点映像）の配信を開始すると、これら配信が開始してから仮想カメラ視点映像が表示されるまでの期間において視聴者端末３００において仮想カメラ視点映像（空中移動仮想カメラからの視点映像）が表示されない状態となってしまい、「フライング演出」の最初の映像を視聴者が視聴できなくなってしまう不具合が生じる畏れがある。

【0226】

このため、実施例２の配信用サーバコンピュータ１００は、図２８に示すように、視聴者アバター視点映像から仮想カメラ視点映像（空中移動仮想カメラからの視点映像）に強制的に視点映像が変更される「フライング演出」の開始時において、該「フライング演出」の開始タイミングよりも前の特定タイミングにおいて、ＢＦ事前通知を視聴者端末３００に送信することで、フライング演出期間の開始前において仮想カメラ視点映像（空中移動仮想カメラからの視点映像）の事前配信を開始する配信開始（バッファリング開始）タイミングを視聴者端末３００に通知する。

【0227】

視聴者端末３００は、ＢＦ事前通知の受信に応じて、配信用サーバコンピュータ１００から仮想カメラ視点映像（空中移動仮想カメラからの視点映像）の配信が開始されるタイミングを特定し、該タイミングになったときから受信した仮想カメラ視点映像（空中移動仮想カメラからの視点映像）のバッファリングを開始する。

【0228】

これら仮想カメラ視点映像（空中移動仮想カメラからの視点映像）の配信が開始されるタイミング、つまり、バッファリングを開始するタイミングは、視聴者端末３００の映像記憶機能の違いを考慮して適宜に決定すればよいが、例えば、映像のフレーム数として数十フレームに該当する期間とすればよい。

【0229】

このように、実施例２の配信用サーバコンピュータ１００は、フライング演出期間の開始前から、フライング演出の仮想カメラ視点映像（空中移動仮想カメラからの視点映像）の生成、配信を開始し、視聴者端末３００は、該配信された仮想カメラ視点映像をバッファリングしているので、フライング演出期間が開始されたときに、該フライング演出期間の開始前に表示していた視聴者アバター視点映像から仮想カメラ視点映像に瞬時に映像を変更することができるので、「フライング演出」の最初の映像を視聴者が視聴できなくなってしまう不具合が生じることを防ぐことができる。

【0230】

また、「フライング演出」の期間が終了するときにおいては、「フライング演出」の開始前において視聴者アバター視点映像が選択されていたことから、該「フライング演出」の期間の終了に応じて、フライング演出の仮想カメラ視点映像（空中移動仮想カメラからの視点映像）から視聴者アバター視点映像に視点映像が切り替わるが、この場合においても、「フライング演出」の期間が終了したときから視聴者アバター視点映像を生成して表示すると、「フライング演出」の開始時と同様に、視聴者アバター視点映像が生成されて表示されるまでの期間において視聴者端末３００において視聴者アバター視点映像が表示されない状態となってしまう不具合が生じる畏れがある。

【0231】

このため、実施例２の配信用サーバコンピュータ１００は、これら「フライング演出」の期間が終了するときにおいても、図２８に示すように、終了ＴＭ（タイミング）事前通知を視聴者端末３００に送信することで、仮想カメラ視点映像（空中移動仮想カメラからの視点映像）の配信が終了する「フライング演出」の期間終了タイミングを事前に視聴者端末３００に通知する。

【0232】

視聴者端末３００は、終了ＴＭ（タイミング）事前通知の受信に応じて、配信用サーバコンピュータ１００から仮想カメラ視点映像（空中移動仮想カメラからの視点映像）の配信が停止されるタイミングを事前に特定し、該タイミングよりも前の所定タイミングとなったときから視聴者視点映像生成処理を開始して、視聴者アバター視点映像を事前生成する。

【0233】

尚、配信用サーバコンピュータ１００は、終了ＴＭ（タイミング）事前通知の送信時から、仮想空間更新データの配信を実行することで、視聴者端末３００は、受信した仮想空間更新データによって仮想空間データを更新する仮想空間処理を実行しているので、上記した所定タイミングにおいて、その時点の仮想ライブ会場の状況を反映した視聴者アバター視点映像を生成することができる。

【0234】

このように、実施例２の配信用サーバコンピュータ１００は、フライング演出期間の終了前に終了ＴＭ（タイミング）事前通知を視聴者端末３００に送信して、フライング演出期間の終了前に事前に視聴者アバター視点映像を視聴者端末３００が生成できるようにしているので、視聴者端末３００において視聴者アバター視点映像が表示されない状態となってしまう不具合が生じることを防ぐことができる。

【0235】

尚、図２８においては、「フライング演出」を例に説明したが、視聴者アバター視点映像から仮想カメラ視点映像に強制的に視点映像が変更される「開演前説」と「開演演出」の期間についても、同様の制御が行われる。

【0236】

以上、実施例２の仮想空間コンテンツ配信システムでは、視聴者ユーザーが複数であって、各視聴者ユーザー毎に視聴者端末３００が割り当てられており、視聴者端末３００が、視聴者アバターに対応した仮想ライブ会場（仮想空間）の視点映像である視聴者アバター視点映像を表示するときには、該視聴者アバター視点映像を配信用サーバコンピュータ１００から送信されてくる仮想空間更新データ（仮想空間データ）にもとづいて生成しており、これら処理負荷が大きな視聴者アバター視点映像の生成が視聴者端末３００で行われるので、より多くの視聴者ユーザーを仮想ライブに参加させることができる。

【0237】

また、実施例２の仮想空間コンテンツは、演者ユーザーが演者アバター１として仮想ライブ会場に参加可能なコンテンツであるとともに、演者アバター１が仮想ライブ会場において、歌唱やダンス等の楽曲動作（パフォーマンス）を行うコンテンツであるので、仮想空間コンテンツの興趣を向上できる。

【0238】

また、実施例２の仮想空間更新データ（仮想空間データ）には、演者アバター１の動作を生成するための演者アバター用動作データを含まれているため、視聴者端末３００において生成される視聴者アバター視点映像においても演者アバター１の動作を正確に反映させることができる。

【0239】

また、実施例２の各視聴者端末３００において共通して表示される共通視点映像、例えば、「開演前説」、「開演演出」、「フライング演出」の映像については、配信用サーバコンピュータ１００において生成されて各視聴者端末３００に配信されるので、重複した処理が各視聴者端末３００において実行されることによって、システム全体の処理負荷が無駄に増大してしまうことを防ぐことができる。

【0240】

また、実施例２の視聴者端末３００において、視聴者アバター視点映像と仮想カメラ視点映像とのいずれかの視点映像を選択して表示可能な期間である、「ＭＣ期間」と「フライング演出」の期間以外の演目期間（特定期間）中においては、仮想カメラ視点映像が視聴者端末３００において生成されて表示されるので、視点映像が切り替わるときに、映像が途切れる等の不具合が生じることを防ぐことができる。

【0241】

また、実施例２の配信用サーバコンピュータ１００における処理負荷が大きい特別期間となる、「衣装チェンジ演出」や「分身演出」の期間においては、仮想カメラ視点映像（共通視点映像）についても各視聴者端末３００が生成して表示するため、配信用サーバコンピュータ１００における処理負荷が一時的に極端に大きくなってしまうことを防ぐことができる。

【0242】

また、実施例２の配信用サーバコンピュータ１００は、仮想ライブ会場（仮想空間）の基本データ並びに仮想ライブ会場に仮想参加する演者アバター１および視聴者アバターの基本データを含む事前データを、仮想ライブが開始する前に各視聴者端末３００に対して事前送信しているので、仮想ライブの開始時において視聴者アバター視点映像が良好に表示されない不具合の発生を防ぐことができる。

【0243】

また、実施例２の配信用サーバコンピュータ１００は、事前データの受信完了が確認できない視聴者端末３００に対しては、仮想カメラ視点映像（共通視点映像）を送信しており、このようにすることで、仮想ライブの開始後において基本データ等の送信によって配信用サーバコンピュータ１００における処理負荷が過度に増大してしまうことを防ぎつつ、視聴者ユーザーが仮想ライブを視聴できなくなってしまうことも防ぐことができる。

【0244】

＜実施例２の変形例＞
図２９は、実施例２についての変形例２－１における視聴者視点映像生成処理の処理内容を示すフロー図である。

【0245】

上記した実施例２では、演者アバター１の動作を含む視聴者アバター視点映像を、常に一律に生成する形態を示したが、本発明はこれに限定されるものではなく、これら視聴者アバター視点映像を、視聴者端末３００における視聴者ユーザーの選択によって、映像生成における処理負荷の異なる複数の態様で生成するようにしてもよい。

【0246】

つまり、視聴者ユーザーが使用する視聴者端末３００としては、実施例１において例示しているように、処理能力の高い据え置き型のパーソナルコンピュータ（ＰＣ）である場合もあれば、パーソナルコンピュータ（ＰＣ）よりも処理能力が相対的に低いスマ－トフォン端末やタブレット端末等である場合もあるように、処理能力の異なる端末が使用されることが想定されるが、このように処理能力の異なる端末において、視聴者アバター視点映像を、常に一律に生成してしまうと、低処理能力の端末においては、視聴者アバター視点映像を適切に生成することができず、視聴者アバター視点映像と音声とにズレが生じたり、或いは、視聴者アバター視点映像が不連続の不自然な映像になってしまう畏れがあるため、例えば、演者動作を含む視聴者アバター視点映像を生成する場合に、映像の生成に係わる処理負荷が高い高精細な演者動作を含む視聴者アバター視点映像を生成するのか、映像の生成に係わる処理負荷が低い低精細な演者動作を含む視聴者アバター視点映像を生成するのかを、視聴者が、使用する端末の処理能力に応じて適宜、選択できるようにしてもよい。

【0247】

具体的には、視聴者端末３００において実行される視聴者視点映像生成処理を、図２９のフロー図に示す内容とすればよく、該視聴者視点映像生成処理においては、まず、視聴者端末３００において視聴者ユーザーによって選択されている演者動作生成態様を特定する（ステップＳ１０１）。そして、特定した演者動作生成態様が、高処理負荷態様であるか否かを判定し（ステップＳ１０２）、高処理負荷態様が選択されている場合（ステップＳ１０２でＹ）は、高精細な演者動作を含む視聴者アバター視点映像を生成する（ステップＳ１０３）。一方、高処理負荷態様が選択されていない場合（ステップＳ１０２でＮ）は、低精細な演者動作を含む視聴者アバター視点映像を生成する（ステップＳ１０４）。

【0248】

尚、図２９においては、高処理負荷態様と低処理負荷態様の２態様とした形態を例示しているが、本発明はこれに限定されるものではなく、これら処理負荷態様を３態様以上としてもよい。

【0249】

また、上記した実施例２（実施例１も同様）においては、視聴者ユーザーの視聴者アバターの移動を含む全ての動作を、仮想空間更新データの配信によって各視聴者アバターに反映させる形態を例示しているが、本発明はこれに限定されるものではなく、例えば、これら視聴者アバターの動作として、通常では実行不能な動作であって、特別な費用を支払った場合において可能となる動作、例えば、演者アバター１に対して自身の視聴者アバターをアピールすることが可能な特別動作を行う操作を視聴者端末３００において可能とする場合にあっては、該特別動作は、演者ユーザーに向ける動作であって、他の視聴者ユーザーに向けるものではないので、これら特別動作を含む仮想空間更新データを、他の視聴者ユーザーの視聴者端末３００に配信しないようにして、これら特別動作を実行可能とすることによって配信用サーバコンピュータ１００の処理負荷が過大に増加してしまうことを防ぐことができるようにしてもよい。

【0250】

このように、特別動作を含む仮想空間更新データを、他の視聴者ユーザーの視聴者端末３００に配信しない場合には、図３０の変形例２－２に示すように、視聴者ユーザーＡが特別動作に対応する操作を実行することで視聴者ユーザーＡの視聴者アバターが特別動作を行った場合は、配信用サーバコンピュータ１００から視聴者ユーザーＡの視聴者端末３００には、視聴者ユーザーＡの視聴者アバターが特別動作を実行していることに対応する仮想空間更新データＡが送信されるが、視聴者ユーザーＡとは異なる視聴者ユーザーＢの視聴者端末３００には、視聴者ユーザーＡの視聴者アバターが特別動作を実行していない仮想空間更新データＢが配信される。

【0251】

よって、視聴者ユーザーＡの視聴者端末３００と、視聴者ユーザーＢの視聴者端末３００とには、異なる仮想空間更新データが配信用サーバコンピュータ１００から配信されることになるので、仮想空間更新データの自由度を高めることができるとともに、視聴者ユーザーＡの視聴者端末３００と、視聴者ユーザーＢの視聴者端末３００とにおいて異なる視聴者アバター視点映像を生成させることができるようになる。

【0252】

また、視聴者ユーザーＡの視聴者端末３００は、視聴者ユーザーＢの視聴者端末３００に配信される仮想空間更新データＢとは異なる仮想空間更新データＡにもとづいて、視聴者ユーザーＢの視聴者アバターが可能な動作とは異なる特別動作を行う視聴者ユーザーＡの視聴者アバターの映像を生成して表示することができるので、仮想空間コンテンツである仮想ライブに対する視聴者ユーザーＡの興趣を向上できる。

【0253】

また、上記した実施例２（実施例１も同様）においては、第４領域に仮想参加している視聴者ユーザーの視聴者アバターについても、アバターの態様が個々の視聴者ユーザーで異なる通常のアバターとした形態を例示しているが、本発明はこれに限定されるものではなく、例えば、仮想ライブにおける各種の視点映像を生成する際の処理負荷を低減することを目的として、第４領域に仮想参加している視聴者ユーザーの視聴者アバターを、アバターの態様が簡素化された簡易アバターとするようにしてもよい。

【0254】

尚、図３０においては、特別な費用を支払った場合において可能となる特別動作を実行する場合について例示しているが、例えば、上述したように、簡易アバターを使用するような場合にあっては、簡易アバターの移動以外の通常動作、例えば、手を振る動作、手を叩く動作、視聴者アバターの向きを変える動作等について、特別動作と同様に、他の視聴者ユーザーに配信される仮想空間更新データには、含まれないようにすることで、より一層、配信用サーバコンピュータ１００の処理負荷を低減できるようにしてもよい。

【0255】

【実施例3】

【0256】

次に、実施例３の仮想空間コンテンツ配信システムについて図３１～図４１を用いて以下に説明する。尚、実施例１や実施例２と同一の構成については、同一の符号を付して説明を省略する。

【0257】

実施例３の仮想空間コンテンツ配信システムの構成は、図１に示す実施例１、２の構成と同一であるが、仮想ライブの進行内容が実施例１、２とは異なるとともに、実施例１、２においては視聴者アバターの動作として実行可能とされていないコンテンツ対応動作である、充填された薬剤を混合させることで発光する棒状のケミカルライトＫ（以下ケミライトＫと略記する）を左右に振るケミライト動作（図３３参照）を実行可能であって、これらケミライト動作に関係する制御が実施例１、２とは異なる点が本実施例３の特徴部分である。

【0258】

図３１は、実施例３の仮想空間コンテンツ配信システムにおいて配信される仮想ライブの進行内容を示す図である。実施例３の仮想ライブは、まず、仮想ライブの開始前の期間として、「ライブ仮想空間参加可能期間」と「開演前説」の期間とが設けられていて、視聴者ユーザーは、該ライブ仮想空間参加可能期間において仮想ライブの対象の仮想空間に仮想参加することができる。

【0259】

尚、ライブ仮想空間参加可能期間と「開演前説」の期間の終了間際に設定されている事前データダウンロード終了タイミング（図示略）までの期間は、実施例２と同じく事前データダウンロード（ＤＬ）期間とされていて、ライブ仮想空間参加可能期間中に仮想参加した視聴者ユーザーの視聴者端末３００に対して、仮想ライブ会場の仮想空間データ（基本データ）、演者アバター１のアバターデータ、並びに仮想参加した他の視聴者ユーザーのアバターデータ等が、事前データとして配信用サーバコンピュータ１００からダウンロード（ＤＬ）されるようになっている。

【0260】

また、「開演前説」の期間においては、実施例２と同様に、開始予定の仮想ライブについての説明等がビデオ映像等によって紹介される。

【0261】

実施例３の仮想ライブは、図３１に示すように、「開演演出」→「第１ＭＣ」→「第１演目」→「第２ＭＣ」→「第２演目」→「第３ＭＣ」→「第３演目」…のように進行していく。「開演演出」と「第１ＭＣ」、「第２（３）ＭＣ」は、実施例２の内容と同様である。「第１演目」、「第２演目」、「第３演目」…は、演者アバター１（演者）の歌唱とダンスとを含む。

【0262】

「第１ＭＣ」、「第２ＭＣ」、「第３ＭＣ」の各期間の終了直前には、ケミライト動作において遅延動作を行う参加者（視聴者ユーザー）を決定するための遅延動作者決定処理（図３７参照）の実行タイミングが設定されていることで、「第１演目」、「第２演目」、「第３演目」…の各演目において異なる参加者（視聴者ユーザー）が遅延動作を行う参加者（視聴者ユーザー）として決定されるようになっている。

【0263】

実施例３の仮想ライブにおける各演出や演目等が実行される各期間において演者アバター１が実行可能な動作は、図３１に示すように、手や足や頭等のアバターの一部を動かす通常動作以外に、演者アバター１が登場する開演演出においては、仮想ステージＧ上を移動する動作とトークに関する動作を実行可能とされている。尚、図３１においては、演者アバター１や視聴者アバターが可能な動作である通常動作については記載スペースの都合上、記載を省略している。

【0264】

また、「第１ＭＣ」、「第２ＭＣ」、「第３ＭＣ」…のＭＣ期間中においては、「開演演出」と同様に、通常動作以外に、仮想ステージＧ上を移動する動作とトークに関する動作を実行可能とされており、「第１演出」、「第２演出」、「第３演出」…の演目期間中においては、通常動作以外に、歌唱の動作とダンスの動作が可能とされている。尚、ダンスの動作においては、仮想ステージＧ上を移動する動作が含まれる場合がある。

【0265】

実施例３の仮想ライブにおける各期間において仮想ライブ会場に仮想参加した参加者（視聴者ユーザー）の視聴者アバターが実行可能な動作は、手や足や頭等のアバターの一部を動かす通常動作以外に、ライブ開始前期間（ライブ仮想空間参加可能期間および開演前説期間）、開演演出期間、各ＭＣ期間中においては、図３２における視聴者アバター１２や視聴者アバター１３が実行しているように、個々の参加者（視聴者ユーザー）がケミライトＫを振るタイミングや早さが同調していない非同調のケミライト動作が可能とされているとともに、図３２（Ａ）における視聴者アバター１１や視聴者アバター１４が実行しているように、仮想ライブ会場内を移動する動作が可能とされている。尚、図３２においては、第４領域に参加している視聴者アバターについては、便宜的に簡略表示しているが、視聴者アバター１１～１４と同様のアバターとされているとともに、視聴者アバター１１～１４と同様の動作が可能とされている。

【0266】

尚、非同調のケミライト動作は、後述するように、各視聴者端末３００において視聴者ユーザーによってデフォルトとして個別に選択された速度１～速度５のいずれかの早さ（調子）にてケミライトＫを左右に振る動作である。

【0267】

また、「第１演目」、「第２演目」、「第３演目」…の各演目期間において仮想参加している参加者（視聴者ユーザー）の視聴者アバターが実行可能な動作は、通常動作以外に、図３２（Ｂ）に示すように、視聴者アバター１１～１４の動作のように、個々の参加者（視聴者ユーザー）の視聴者アバターがケミライトＫを振るタイミングや早さが、配信用サーバコンピュータ１００から送信される各種情報（図３３参照）によって同調している同調のケミライト動作が可能とされている。つまり、実施例３においては、演者アバターが演目を上演している各演目期間においては、視聴者アバターの移動が禁止されることで、これら視聴者アバターが各演目期間において移動することによって、仮想ライブに悪影響が生じてしまうこと、例えば、他の視聴者アバター等の衝突等によって、他の視聴者アバターの視聴に支障が出たり、該移動によって演者の集中力が低下してしまう等の支障が出てしまうことを防ぐことができる。

【0268】

尚、ケミライト動作は、仮想ライブに仮想参加した全ての参加者（視聴者ユーザー）の視聴者アバターが実行可能な動作ではなく、ケミライトＫの仮想アイテムを事前に購入した参加者（視聴者ユーザー）の視聴者アバターだけが可能な動作であるので、仮想ライブに仮想参加している視聴者アバターであっても、ケミライトＫを所持していない視聴者アバターはケミライト動作を行うことができないため、各演目期間においてケミライト動作を行っていない視聴者アバターが存在することになる。

【0269】

これら視聴者アバターの動作である移動が、視聴者ユーザーが視聴者端末３００として使用しているパーソナルコンピュータ（ＰＣ）において禁止される状況について、図４０、図４１を用いて説明すると、演者アバター１が上演を行っていないライブ開始前期間や各ＭＣ期間において視聴者ユーザーが動作メニューを表示させる操作を実行した場合には、視聴者端末３００においてアバター動作操作処理が実行されることで、図４０（Ｂ）に示すように、「移動」および「ケミライト」の動作メニューがアクティブ（有効）状態にて表示されることで、「移動」および「ケミライト」のいずれの動作も実行可能であることが報知され、視聴者ユーザーは、「移動」および「ケミライト」のいずれの動作も、選択入力によって視聴者アバターに実行させることができる。

【0270】

尚、図４０、４１においては、説明を容易化とするために、「移動」および「ケミライト」の動作以外の通常動作等の項目については省略しているとともに、これら移動」および「ケミライト」の項目以外の項目が含まれていてもよいことはいうまでもない。

【0271】

一方、演者アバター１が上演を行っている演目期間中において、視聴者ユーザーが動作メニューを表示させる操作を実行した場合には、上述したように、移動が禁止されていることにより、アバター動作操作処理によって、図４１に示すように、「ケミライト」の動作メニューのみがアクティブ（有効）状態にて表示され、「移動」の動作メニューが非アクティブ（無効）状態にて表示されることで、視聴者ユーザーは、「ケミライト」の動作を選択入力によって視聴者アバターに実行させることができるが、「移動」の動作を実行させることはできない。

【0272】

尚、これら動作メニューの表示制御による視聴者アバターの動作制限については、視聴者端末３００側においてアバター動作操作処理が実行されることで、その時点が、演目期間中であるのか否かをＢＰＭ情報や振り始め情報にもとづいて判定することで行うようにしてもよいし、仮想ライブ中の各時点において、視聴者アバターの各動作について、実行の可能・不可能を特定可能な動作制限情報を配信用サーバコンピュータ１００が逐次生成して各視聴者端末３００に配信することで、該動作制限情報にもとづいて視聴者端末３００が動作制限を実行するようにしてもよいし、これら動作制限情報を送信せずに、視聴者端末３００において動作に応じた操作を一旦受付けておき、配信用サーバコンピュータ１００において、該受付けた動作の有効・無効を判断するようにしてもよい。

【0273】

次に、上記のように、同調したケミライト動作を行うために、配信用サーバコンピュータ１００から各視聴者端末３００に送信される情報を図３１と図３３（Ａ）に示す。具体的には、配信用サーバコンピュータ１００からは、実施例１において説明した仮想空間更新データとともに、図３３（Ａ）に示すように、ＢＰＭ（ビートパーミニッツ）情報、ケミライト動作情報、遅延動作情報が送信される。

【0274】

また、これらＢＰＭ情報、ケミライト動作情報、遅延動作情報に加えて、図３１並びに図３５に示すように、ケミライト動作を行っている各視聴者アバターが、各演目の開始時においてケミライトＫを振り始めるタイミングを特定可能な振り始め情報が、各演目の開始から所定期間（視聴者アバターの動作を停止する期間）前のタイミングにおいて配信用サーバコンピュータ１００から各視聴者端末３００に送信されるようになっており、該振り始め情報によって特定されるタイミング（実施例３では演目の開始タイミングとほぼ同じタイミング）にもとづいてケミライト動作を行っている各視聴者アバターがケミライトＫを振り始めることで、各視聴者アバターのケミライト動作が同調するようになる。

【0275】

実施例３の振り始め情報は、該振り始め情報の受信タイミングから所定期間後のタイミングを指定する情報、つまり、所定期間の大きさを特定可能な情報とされており、該振り始め情報を受信した各視聴者端末３００は、その受信タイミングからタイマカウントを開始してタイマアップしたタイミングによって所定期間後のタイミングであるケミライトＫの振り始めのタイミング（演目の開始タイミング）を特定することができる。

【0276】

尚、実施例３においては、図３１に示すように、演目の開始から所定期間前に振り始め情報が送信される以前の期間においては、視聴者Ｃアバターが実行している視聴者アバターの移動や、視聴者Ａアバターや視聴者Ｂアバターが実行しているデフォルトの振り速度による非同調のケミライト動作が可能とされているが、振り始め情報の送信タイミングから該振り始め情報によって指定されたタイミングである同調したケミライト動作の開始タイミングである演目の開始タイミングまでの所定期間においては、視聴者アバターの動作が全て停止（禁止）されるようになっており、このようにすることで、各視聴者アバターが同調したケミライト動作を適切に開始できるようになるとともに、非同調のケミライト動作から、いきなり振り速度等が異なる同調したケミライト動作に移行することによる違和感が視聴者に生じてしまうことを回避できる。また、実施例３では、後述するＢＰＭ（ビートパーミニッツ）情報の配信が、楽曲に同調したケミライト動作が最初から適切に開始できるようにするために、演目の開始タイミングよりも所定期間前の振り始め情報の送信タイミングから事前に配信されるようになっているので、これらＢＰＭ情報が非同調のケミライト動作に誤って反映されてしまうことも防ぐことができる。

【0277】

ＢＰＭ（ビートパーミニッツ）情報は、一分の間に含まれる楽曲のビート数を表したもので、テンポが速い楽曲の場合にはＢＰＭの数値が多くなり、テンポが遅い楽曲の場合にはＢＰＭの数値が少なくなる。ＢＰＭ（ビートパーミニッツ）情報は、これらＢＰＭの数値に対応してビートとビートとの間隔とビートのタイミングを特定可能なデータとして記述されており、ビートのタイミングをＢＰＭ基準タイミング（図３３参照）として該ＢＰＭ情報から特定するとともに、これらビートとビートとの間隔においてケミライトＫを左右に振る１サイクルの動作が完了するように動作することにより、ケミライト動作の早さを各演目において上演されている楽曲の早さ（テンポ）に一致せることができるとともに、各視聴者アバターのケミライト動作の早さを同じ早さに合わせることができる。

【0278】

実施例３では、ＢＰＭ情報は、上記したように、演目の開始タイミングよりも所定期間前の振り始め情報が送信タイミングから事前に配信されるが、これら所定期間において配信されるＢＰＭ情報は、視聴者アバターの非同期のケミライト動作には反映されず、これら事前に送信されるＢＰＭ情報から特定されるビートやビート間の期間から、視聴者端末３００は、演目の開始タイミングよりも前において、事前に、同調したケミライト動作の態様を特定することができるので、このように、同調したケミライト動作の態様を視聴者端末３００が事前に特定するために使用されることで、これら同調したケミライト動作が、演目の開始タイミングから的確に実行されるようになる。

【0279】

ケミライト動作情報は、仮想ライブに仮想参加している視聴者アバターのうち、ケミライト動作を行っている視聴者アバターを特定するための情報である。つまり、上記したように、ケミライトＫを事前購入していない視聴者アバターはケミライト動作が可能とされていないとともに、ケミライトＫを事前購入していてもケミライト動作をしていない視聴者アバターも存在するため、仮想ライブに仮想参加している全ての視聴者アバターについて、ケミライト動作をしているか否かが記述されたデータをケミライト動作情報として各視聴者端末３００に送信することで、各視聴者端末３００において視聴者アバター視点映像や仮想カメラ視点映像を生成する際に、該ケミライト動作情報にもとづいてケミライト動作の実行の有無が各視聴者アバターについて特定されて視聴者アバターの動作に反映されるようになっている。

【0280】

遅延動作情報は、ケミライト動作をしている視聴者アバターについて、図３３（Ｂ）に示す遅延Ａ、遅延Ｂの動作を行う視聴者アバターを特定可能とするための情報であって、ケミライト動作をしている全ての視聴者アバター（視聴者ユーザー）について、遅延なしのグループに属するか、遅延Ａのグループに属するか、遅延Ｂのグループに属するかが記述されたデータとされている。

【0281】

つまり、遅延動作情報によって「遅延なし」のグループに属することが特定される視聴者アバター（視聴者ユーザー）については、例えば、図３３（Ｂ）において視聴者アバター１３が行うケミライト動作のように、ＢＰＭ情報によって特定されるビートタイミングに対応したＢＰＭ基準タイミングから遅れ（ズレ）ることなく１サイクル（ケミライトＫを左右に１回振る動作サイクル）のケミライト動作を開始する。

【0282】

また、遅延動作情報によって「遅延Ａ」のグループに属することが特定される視聴者アバター（視聴者ユーザー）については、例えば、図３３（Ｂ）において視聴者アバター１２が行うケミライト動作のように、ＢＰＭ情報によって特定されるビートタイミングに対応したＢＰＭ基準タイミングから０．１秒だけ遅れたタイミングで１サイクル（左右に振る動作サイクル）のケミライト動作を開始する。

【0283】

また、遅延動作情報によって「遅延Ｂ」のグループに属することが特定される視聴者アバター（視聴者ユーザー）については、例えば、図３３（Ｂ）において視聴者アバター１１が行うケミライト動作のように、ＢＰＭ情報によって特定されるビートタイミングに対応したＢＰＭ基準タイミングから０．２秒だけ遅れたタイミングで１サイクル（左右に振る動作サイクル）のケミライト動作を開始する。

【0284】

このような遅延動作情報を送信して、ＢＰＭ基準タイミングから０．１秒、０．２秒だけ遅れ（ズレ）たケミライト動作を視聴者アバター１２、視聴者アバター１１に行わせるようにする理由としては、例えば、振り始め情報とＢＰＭ情報とにもとづいて、視聴者アバターが行う全てのケミライト動作が完全に一致（同期）してしまうと、ケミライト動作が現実離れした動作となってしまうことで、仮想ライブの現実性が大きく低下してしまう畏れがあるため、視聴者アバターが行うケミライト動作の現実性を高めるために、一部の視聴者アバターについては、敢えてケミライト動作のタイミングを、同調を外れない所定範囲の秒数である０.２秒の範囲でずらすようにしている。

【0285】

尚、実施例３では、ズレを生成する形態として、ズレのタイミングを視聴者端末３００においてＢＰＭ情報から特定し易いことからＢＰＭ基準タイミングから遅延させた形態を例示しているが、本発明はこれに限定されるものではなく、例えば、遅延Ｂのグループのタイミングを、遅延ではなく、ＢＰＭ基準タイミングの０．１秒前のタイミングとして、ＢＰＭ基準タイミングからの差をより小さくするようにしてもよい。

【0286】

また、実施例３では、ズレの最大値を、同調を外れない所定範囲である０.２秒とした形態を例示しているが、本発明はこれに限定されるものではなく、これらズレの最大値は、視聴者が同調していないと感じることがない適宜な期間とすればよく、一定の秒数に限られない。つまり、早いテンポの楽曲であれば、ズレの最大値は少ない秒数となり、遅いテンポの楽曲であれば、ズレの最大値は大きな秒数となるように、可変の秒数であってもよく、このような場合には、例えば、楽曲のテンポ（ＢＰＭ）の逆数に所定の割合（例えば１０％）を乗じて得られる数値に対応した秒数としてもよい。

【0287】

また、実施例３では、ケミライト動作情報と遅延動作情報を個別の情報（データ）とした形態を例示しているが、本発明はこれに限定されるものではなく、これらを１つのデータとしてもよい。

【0288】

また、実施例３では、ズレのタイミングを０．１秒後と０．２秒後の２つとすることで、よりケミライト動作の現実性を向上できるようにしているが、本発明はこれに限定されるものではなく、これらズレのタイミングを１つだけに簡素化してもよいし、逆に、３以上として更に現実性を向上できるようにしてしてもよい。

【0289】

また、実施例３では、各演目においてズレのタイミング数を同一としているが、本発明はこれに限定されるものではなく、例えば、テンポが非常に速い楽曲の演目については、ズレのタイミング数を少なくまたは「無し」とし、テンポが遅い楽曲の演目については、ズレのタイミング数を多くする等のように、演目に応じてズレのタイミング数を変更するようにしてもよい。

【0290】

次に、実施例３の配信用サーバコンピュータ１００において使用される参加者ユーザーテーブルを図３４（Ａ）に示す。実施例３の参加者ユーザーテーブルは、実施例２の参加者ユーザーテーブルと同様に、参加者ＩＤ（視聴者ユーザーＩＤ）に対応付けて、当該参加者（視聴者ユーザー）の参加状態を特定可能な参加識別データ（参加識別フラグ）と、当該参加者（視聴者ユーザー）の参加エリアと、参加者（視聴者ユーザー）の視聴者アバターがその時点において存在している仮想ライブ会場における位置を特定可能な参加者座標と、仮想アイテムであるケミライトＫの購入の有無を特定可能なケミライトアイテム購入のデータと、ケミライト動作中であるか否かを特定可能なケミライト動作ステータスのデータと、ケミライト動作のデフォルト速度の種類を特定可能なデフォルト速度のデータと、上述した「遅延なし」、「遅延Ａ」、「遅延Ｂ」のいずれのグループに属しているのかを特定可能な遅延種別のデータ等が記憶可能なテーブルである。

【0291】

参加者ＩＤの項目には、イベントデータにおいて、当該仮想ライブに対応して記憶されている各参加者グループのファイルに記述されている参加予定者の視聴者ユーザーＩＤが全て登録される。また、参加識別データ（参加識別フラグ）は、参加者ＩＤ（視聴者ユーザーＩＤ）の登録時において、非参加状態に対応する「０」が登録されており、各参加者（視聴者ユーザー）の参加が認証によって許可されたときに、参加を示す「１」に更新される。よって、図３４（Ａ）に示す例において、参加識別データ（参加識別フラグ）が「０」となっている「ＭＩＤ－００００７」の視聴者ユーザーは、何らかの理由で仮想ライブに参加していないことを特定することができる。

【0292】

参加エリアのデータは、各参加者（視聴者ユーザー）の参加エリアが、第３領域であるのか、第４領域であるのかを特定可能なデータとされており、各参加者（視聴者ユーザー）の参加が認証によって許可されたときに、登録されるデータである。参加者座標のデータは、仮想空間更新処理において逐次更新されるデータであって、個々の参加者（視聴者ユーザー）の視聴者アバターが仮想ライブ会場内において位置している場所の座標データである。よって、該座標データから、個々の視聴者アバターがその時点において存在している仮想ライブ会場内の位置を簡便に特定することができる。

【0293】

ケミライトアイテム購入のデータは、購入に応じて購入済みであることを示す「１」に、未購入を示す「０」からデータが更新される。よって、上述したように、ケミライトアイテム購入のデータが「１」の視聴者ユーザーの視聴者アバターだけが、ケミライト動作を行うことができ、これらケミライト動作の実行に対応した操作が実行されることに応じて、該操作の有効・無効が、ケミライトアイテム購入のデータにもとづいて配信用サーバコンピュータ１００において判定される。

【0294】

ケミライト動作ステータスのデータは、各参加者（視聴者ユーザー）の視聴者アバターがケミライト動作を実行しているか否かを特定可能なデータであって、ケミライト動作の実行に対応する操作が視聴者端末３００において実行され、該操作が有効と判断されたときに、非実効を示す「０」から「１」に更新されるとともに、ケミライト動作の非実行（終了）に対応する操作が視聴者端末３００において実行されたことに応じて、実行を示す「１」から非実効を示す「０」に更新される。

【0295】

デフォルト振り速度のデータは、非同調のケミライト動作を行う場合においてケミライトＫを振る速度を特定可能なデータであって、例えば、第１演目の開始前等の期間においてケミライト動作の実行操作をした場合において、視聴者ユーザーが選択した速度に対応したデータである。具体的には、実施例３においては、これらデフォルト速度として、低速である速度１（Ｐ１）から高速である速度５（Ｐ５）までの５段階の速度を視聴者ユーザーが選択することができ、これら視聴者ユーザーによって視聴者端末３００において選択されたデフォルト速度の情報が、配信用サーバコンピュータ１００に通知されて登録される。

【0296】

よって、非同調のケミライト動作が可能な期間において視聴者アバターがケミライトＫを振る場合の速度は、該視聴者アバターが対応する視聴者ユーザーの視聴者ユーザーＩＤに対応付けられているデフォルト速度のデータにもとづいた速度とされる。

【0297】

遅延種別のデータは、各視聴者ユーザーの視聴者アバターが、上述した「遅延なし」、「遅延Ａ」、「遅延Ｂ」のいずれのグループに属しているのかを特定可能なデータであって、「遅延なし」に属する場合には「Ｎ」が登録され、「遅延Ａ」に属する場合には「Ａ」が登録され、「遅延Ｂ」に属する場合には「Ｂ」が登録される。

【0298】

ここで、視聴者アバターが「遅延なし」、「遅延Ａ」、「遅延Ｂ」のいずれのグループに決定される流れについて、図３１、図３７を用いて説明する。

【0299】

これら「遅延なし」、「遅延Ａ」、「遅延Ｂ」のグループ割は、図３７（Ａ）に示す遅延動作者決定処理が配信用サーバコンピュータ１００において実行されることにより行われる。

【0300】

尚、配信用サーバコンピュータ１００において遅延動作者決定処理が実行されるタイミングは、１回だけではなく、図３１に示すように、各演目が開始される直前の複数のタイミングにおいて実行される。よって、実施例３では、各演目ことに「遅延なし」、「遅延Ａ」、「遅延Ｂ」に属する視聴者アバターが変化する。

【0301】

このように、各演目が開始される直前のタイミングで実行される遅延動作者決定処理においては、まず、図３７（Ａ）に示すように、ケミライト動作を実行している視聴者アバターを全て特定する（ステップＳ２０１）。具体的には、図３４（Ａ）に示す参加者ユーザーテーブルにおいて、その時点においてケミライト動作ステータスのデータとして「１」が登録されている参加者ＩＤ（視聴者ユーザーＩＤ）を全て特定すればよい。

【0302】

そして、特定したケミライト動作を実行している視聴者アバターから、「遅延Ａ」のケミライト動作を行う視聴者アバターと、「遅延Ｂ」のケミライト動作を行う視聴者アバターとを、図３７（Ｂ）示す決定用テーブルの決定割合にて選出する（ステップＳ２０２）。

【0303】

実施例３における決定割合は、図３７（Ｂ）に示されるように、「遅延Ａ」のケミライト動作を行う視聴者アバターを、ケミライト動作を行う視聴者アバター全体の２０％、「遅延Ｂ」のケミライト動作を行う視聴者アバターを、ケミライト動作を行う視聴者アバター全体の１０％とする形態を例示している。このように、ズレが大きくなる程、決定割合を少なくすることで、ズレの状態がより現実に違いズレとなることから好ましいが、これらの決定割合は、適宜に決定すればよい。但し、「遅延Ａ」と「遅延Ｂ」とを合計した割合は、５０％を超えないようにすることが好ましい。

【0304】

尚、実施例３では、これら決定割合を１つとした形態を例示しているが、本発明はこれに限定されるものではなく、例えば、決定割合が異なる決定用テーブルを複数設けておき、演目の楽曲に応じて、使用する決定用テーブルを変更することで、決定割合を変えるようにしてもよい。

【0305】

これら選出の具体的な方法は限定されないが、例えば、ステップＳ２０１において特定したケミライト動作を実行している視聴者アバターの総数Ｍに、「遅延Ｂ」に対応する決定割合である１０％を乗じた決定数１と、「遅延Ｂ」に対応する決定割合である２０％を乗じた決定数２とを算出し、ステップＳ２０１において特定したケミライト動作を実行している視聴者アバターから、決定数１に達するまで抽選を実施して「遅延Ｂ」のケミライト動作を行う視聴者アバターを決定し、未決定の視聴者アバターから決定数２に達するまで抽選を実施して「遅延Ａ」のケミライト動作を行う視聴者アバターを決定し、残りの視聴者アバターを「遅延なし」のケミライト動作を行う視聴者アバターとして決定すればよい。

【0306】

そして、参加者ユーザーテーブルの遅延動作種別のデータを、上記した決定結果にもとづいて更新する（ステップＳ２０３）。

【0307】

そして、更新後の遅延動作種別のデータにもとづいて新たな遅延動作情報を生成して各視聴者端末３００に配信する（ステップＳ２０４）。

【0308】

次に、実施例３の配信用サーバコンピュータ１００において使用される楽曲リストデータを図３４（Ｂ）に示す。尚、楽曲リストデータは１つのファイルデータとして配信用サーバコンピュータ１００に記憶されている。

【0309】

楽曲リストデータは、図３４（Ｂ）に示すように、演目種別に対応付けて「楽曲名」、「楽曲ＩＤ」、「ＢＰＭ」等の情報が記憶されており、演目種別の情報にもとづいて、各演目においてどの楽曲が使用されるのかを特定可能とされている。

【0310】

つまり、図３４（Ｂ）に示す例においては、第１演目においては、楽曲ＩＤ「ＧＫ－ＸＸＸＸ」の楽曲が上演され、第２演目においては、楽曲ＩＤ「ＧＫ－ＹＹＹＹ」の楽曲が上演され、第３演目においては、楽曲ＩＤ「ＧＫ－ＺＺＺＺ」の楽曲が上演されることが特定できる。

【0311】

また、ＢＰＭのデータから、第１演目において上演される楽曲は、１分間に８２ビートと、比較的テンポが遅い楽曲であり、第２目において上演される楽曲は、１分間に１２３ビートと比較的テンポが早い楽曲であり、第３目において上演される楽曲は、１分間に１３６ビートと、更に早いテンポの楽曲であることが解る。尚、図３４（Ｂ）では、ＢＰＭのデータを整数の数値としているが、本発明はこれに限定されるものではなく、これらの値を小数点以下の値を含む数値としてもよい。

【0312】

よって、図３５に示すように、第１演目においては、楽曲ＩＤ「ＧＫ－ＸＸＸＸ」のＢＰＭである１分間に８２ビートに対応したＢＰＭ情報が第１演目対応ＢＰＭ情報として各視聴者端末３００に配信され、第２演目においては、楽曲ＩＤ「ＧＫ－ＹＹＹＹ」のＢＰＭである１分間に１２３ビートに対応したＢＰＭ情報が第２演目対応ＢＰＭ情報として各視聴者端末３００に配信され、第３演目においては、楽曲ＩＤ「ＧＫ－ＺＺＺＺ」のＢＰＭである１分間に１３６ビートに対応したＢＰＭ情報が第３演目対応ＢＰＭ情報として各視聴者端末３００に配信される。つまり、各演目においては、上演される楽曲に対応した異なるＢＰＭ情報が配信される。

【0313】

尚、これら第１演目対応ＢＰＭ情報、第２演目対応ＢＰＭ情報、第３演目対応ＢＰＭ情報は、いずれも、図３５に示すように、第１演目、第２演目、第３演目の開始タイミングの所定期間前の振り始め情報の送信タイミングから配信が開始されるが、該所定期間は、視聴者アバターの動作が停止される視聴者アバター動作停止期間Ｔとされることによって視聴者アバターの動作であるケミライト動作に反映されることはない。

【0314】

ここで、実施例３において視聴者ユーザーが仮想ライブ会場に仮想参加する際の流れについて、図３６を用いて説明する。

【0315】

まず、視聴者ユーザーは、視聴者端末３００にて実行している視聴者用プログラム（視聴アプリ）において、自分が仮想参加を予定している仮想ライブへの参加操作、例えば、参加メニューの選択やキーボードにおいて参加操作が割り当てられている特定キーの操作を実行する。

【0316】

この参加操作の実行によって、視聴者端末３００から配信用サーバコンピュータ１００に対して、視聴者ユーザーＩＤや当該視聴者ユーザーを認証するための認証用データを含む参加要求が送信される。

【0317】

参加要求を受信した配信用サーバコンピュータ１００においては、ライブ仮想空間参加可能期間であることを条件に、参加者認証処理を実行する。参加者認証処理では、受信した参加要求に含まれる視聴者ユーザーＩＤが、参加対象の仮想ライブに対応している参加者ユーザーデータベースに、参加者ＩＤとして登録されているか否かによって、当該視聴者ユーザーが該当する仮想ライブの参加予定者であるのか否かを判定するとともに、図９に示す視聴者ユーザーデータにおいて、当該視聴者ユーザーＩＤに対応付けて記憶されている認証情報ファイルデータから特定される認証情報ファイルに記述された認証用データと、参加要求に含まれる認証用データとを照合することで視聴者ユーザーの認証を行う。

【0318】

視聴者ユーザーが参加予定者であって、認証用データによる認証が完了した場合には、参加者ユーザーテーブルの参加識別データ（参加識別フラグ）を、「参加」に対応する「１」に更新したのち、配信用サーバコンピュータ１００は、参加要求の送信元の視聴者端末３００に対して、参加完了情報を返信する。このようにして返信された参加完了情報の受信に応じて視聴者端末３００においては、仮想参加が完了したことを示すメッセージが表示されることで、仮想参加が完了したことが報知される。これにより、視聴者ユーザーは、例えば、仮想参加が完了した仮想ライブにおいて購入可能な仮想アイテム（ケミライトＫを含む）の購入等が可能となる。

【0319】

配信用サーバコンピュータ１００は、参加完了通知処理に次いで、事前データ送信処理を実行することで、事前データを新たに仮想参加した視聴者ユーザーの視聴者端末３００に送信する。このようにして送信された事前データを受信した視聴者端末３００は、受信した事前データを記憶し、その後、該記憶した事前データにもとづいて視聴者視点映像を生成して表示（出力）を開始する。これにより、視聴者ユーザーは、仮想参加した自身の視聴者アバターから見た仮想ライブ会場の映像を見ることがきる。

【0320】

次に、仮想参加後における配信用サーバコンピュータ１００と視聴者端末３００との間の情報の流れについて、図３８を用いて説明する。

【0321】

尚、図３８において、配信用サーバコンピュータ１００における仮想空間更新処理までの流れについては、実施例１と同様であるので、ここでの説明を省略する。但し、視聴者端末３００におけるアバター動作操作処理における操作には、ケミライト動作に係わる操作が含まれる。

【0322】

配信用サーバコンピュータ１００においては、仮想空間更新処理の後に参加者ユーザーテーブル更新処理が実行されることで、参加者ユーザーテーブル、具体的には、例えば、参加者座標のデータ、ケミライト動作ステータスのデータ、デフォルト振り速度のデータ等が更新される場合がある。

【0323】

そして、配信用サーバコンピュータ１００においては、ＢＰＭ情報の送信期間中であるか否かが判定される。尚、ＢＰＭ情報は後述するように、各演目期間の開始前においても配信（送信）される（図３５参照）。

【0324】

ＢＰＭ情報の送信期間中である場合には、ケミライト動作情報、ＢＰＭ情報、遅延動作情報を、演者端末２００並びに各視聴者端末３００に対して配信（送信）する。このようにして配信されたケミライト動作情報、ＢＰＭ情報、遅延動作情報は、演者端末２００並びに各視聴者端末３００において更新記憶される。

【0325】

尚、実施例３では、各演目期間中においても、視聴者端末３００において新たにケミライト動作を視聴者アバターに実行させる操作が可能とされているが、これら各演目期間においては、図３１に示すように、遅延操作者決定処理が実行されないため、該演目期間において新たにケミライト動作の実行操作を行った視聴者ユーザーに対しては、「遅延なし」が一義的に割り当てられ、これら新たにケミライト動作を行った視聴者ユーザーの情報が反映されたケミライト動作情報とともに、該視聴者ユーザーが「遅延なし」のグループに属していることを特定可能な遅延動作情報が、演者端末２００および各視聴者端末３００に対して送信される。但し、各演目期間中は、図３１に示すように、配信用サーバコンピュータ１００の処理負荷が相対的に高い状態であるので、上記したような処理を行うことに伴う処理負荷の増加によって配信用サーバコンピュータ１００の処理負荷の更なる増大を防ぐために、視聴者端末３００において新たにケミライト動作を視聴者アバターに実行させる操作を不能としてもよい。

【0326】

次いで、配信用サーバコンピュータ１００においては、実施例１と同様に、仮想空間更新データ生成処理並びに仮想空間更新データ配信処理が実行されることで、仮想空間更新データが、演者端末２００並びに各視聴者端末３００に対して配信（送信）される。

【0327】

このようにして配信（送信）された仮想空間更新データの受信に応じて各視聴者端末３００においては、仮想空間更新処理が実行されることで、受信した仮想空間更新データの更新内容が各視聴者端末３００において記憶されている仮想空間データに反映された後、図３９（Ａ）に示す視聴者視点映像生成処理１が実行される。

【0328】

図３９（Ａ）は、実施例３の視聴者端末３００において実行される視聴者視点映像生成処理１の処理内容を示すフロー図であり、この視聴者視点映像生成処理１においては、まず、更新後の仮想空間データにもとづいて通常の視聴者視点映像を生成する処理を行う（ステップＳ３００）。

【0329】

次ぎに、配信用サーバコンピュータ１００から受信して更新記憶したケミライト動作情報と遅延動作情報とにもとづいて、ケミライト動作を実行中の視聴者アバターとその遅延種別とを全て特定する（ステップＳ３０１）。

【0330】

そして、ステップＳ３０１において特定した遅延種別と、受信したＢＰＭ情報とにもとづいた動作態様を、ケミライト動作を実行中の各視聴者アバターのケミライト動作に反映する（ステップＳ３０２）。

【0331】

このようにステップＳ３０２における反映によって、ＢＰＭ情報にもとづいた同調したケミライト動作を行っている視聴者アバターを含む視聴者アバター視点映像を生成する（ステップＳ３０３）。

【0332】

これら視聴者視点映像生成処理１にて生成された、各視聴者アバターのケミライト動作が同調している視聴者アバター視点映像は、視聴者視点映像出力処理によって各視聴者端末３００において出力（表示）される。

【0333】

尚、ＢＰＭ情報の配信期間中であっても、視聴者アバターの動作の停止期間である場合には、そもそも、振り始めタイミング前の期間であって視聴者アバターの動作が停止されることによって視聴者アバターがＢＰＭ情報の反映対象であるケミライト動作を行っていないので、視聴者視点映像は、動作を停止している視聴者アバターを含む視聴者アバター視点映像が生成されて表示されることになる。

【0334】

一方、ＢＰＭ情報の送信期間中でない場合には、ケミライト動作情報、デフォルト振り速度情報を演者端末２００並びに各視聴者端末３００に対して配信（送信）する。このようにして配信されたケミライト動作情報、デフォルト振り速度情報は、演者端末２００並びに各視聴者端末３００において更新記憶される。

【0335】

尚、デフォルト振り速度情報は、参加者ユーザーテーブルにおけるデフォルト振り速度のデータにもとづく情報であって、ケミライト動作を実行している各視聴者アバターについてデフォルト速度を特定可能なデータが含まれていることで、該デフォルト振り速度情報を受信した各視聴者端末３００において、ケミライト動作を実行している全ての視聴者アバターについて、各々の視聴者アバターがケミライト動作においてケミライトＫを振る速度（速度１～速度５）を特定できるようになっている。

【0336】

また、デフォルト振り速度は、例えば各ＭＣ期間において視聴者ユーザーによって変更される場合があるが、これらの変更は、デフォルト振り速度情報が逐次配信されることによって他の視聴者ユーザーの視聴者端末において更新される。

【0337】

次いで、配信用サーバコンピュータ１００においては、実施例１と同様に、仮想空間更新データ生成処理並びに仮想空間更新データ配信処理が実行されることで、仮想空間更新データが、演者端末２００並びに各視聴者端末３００に対して配信（送信）される。

【0338】

このようにして配信（送信）された仮想空間更新データの受信に応じて各視聴者端末３００においては、仮想空間更新処理が実行されることで、受信した仮想空間更新データの更新内容が各視聴者端末３００において記憶されている仮想空間データに反映された後、図３９（Ｂ）に示す視聴者視点映像生成処理２が実行される。

【0339】

図３９（Ｂ）は、実施例３の視聴者端末３００において実行される視聴者視点映像生成処理２の処理内容を示すフロー図であり、この視聴者視点映像生成処理２においては、まず、更新後の仮想空間データにもとづいて通常の視聴者視点映像を生成する処理を行う（ステップＳ４００）。

【0340】

次ぎに、配信用サーバコンピュータ１００から受信して更新記憶したケミライト動作情報とデフォルト振り速度情報とにもとづいて、ケミライト動作を実行中の視聴者アバターとそのデフォルト振り速度を全て特定する（ステップＳ４０１）。

【0341】

そして、ステップＳ４０１において特定したデフォルト振り速度にもとづいた動作態様を、ケミライト動作を実行中の各視聴者アバターのケミライト動作に反映する（ステップＳ４０２）。

【0342】

このようにステップＳ４０２における反映によって、デフォルト振り速度情報により特定される各視聴者ユーザーによって固有に選択された振り速度によってケミライトＫが振られる非同調のケミライト動作を行っている視聴者アバターを含む視聴者アバター視点映像を生成する（ステップＳ４０３）。

【0343】

これら視聴者視点映像生成処理２にて生成された、各視聴者アバターのケミライト動作が同調していない視聴者アバター視点映像は、視聴者視点映像出力処理によって各視聴者端末３００において出力（表示）される。

【0344】

以上、実施例３の仮想空間コンテンツ配信システムでは、視聴者アバターは、コンテンツ関連動作であるケミライト動作を実行可能であり、複数の視聴者アバターがケミライト動作を実行するときに、各視聴者アバターのケミライト動作のタイミングを同調させるためのコンテンツ関連動作調整手段となる、配信用サーバコンピュータ１００がケミライト動作情報、ＢＰＭ情報、遅延動作情報を配信する処理や、視聴者端末３００が、これらケミライト動作情報、ＢＰＭ情報、遅延動作情報を受信して更新記憶して、該記憶した情報にもとづいて視聴者視点映像生成処理１を実行することにより、各視聴者アバターによるケミライト動作が同調するようになるので、仮想空間に参加している個々の視聴者ユーザーの興趣を高めることができる。

【0345】

また、実施例３の仮想空間コンテンツ配信システムでは、ケミライト動作を実行する複数の視聴者アバターのうちの一部の視聴者アバターの動作タイミングを、同調させた同調タイミングから０．２秒の範囲内において異なっている非同調タイミングとなる「遅延Ａ」や「遅延Ｂ」の動作態様に調整することが可能であるので、仮想ライブ空間でのケミライト動作の現実性が向上して、視聴者ユーザーの興趣をより一層高めることができる。

【0346】

また、実施例３の仮想空間コンテンツ配信システムでは、実施例１と同様に、視聴者端末３００において、同調したケミライト動作を行う視聴者アバターの映像を含む視聴者アバター視点映像を生成して表示することができるので、より多くの視聴者ユーザーを仮想ライブに参加させることができるとともに、このような視聴者ユーザーをより多く参加させた場合にあっても、仮想ライブ空間に参加している個々の視聴者ユーザーの興趣を高めることができる。

【0347】

また、実施例３の仮想空間コンテンツ配信システムでは、仮想空間コンテンツとして仮想ライブ空間に仮想参加可能な演者アバターにより上演される楽曲の歌唱やダンス等の上演コンテンツを含み、ケミライト動作を同調させるための情報であるＢＰＭ情報は、上演コンテンツである楽曲のテンポに対応した情報であるので、演者アバターにより上演される楽曲にケミライト動作を同調させることができるので、仮想空間コンテンツの興趣をより一層向上できる。

【0348】

また、実施例３の仮想空間コンテンツ配信システムでは、配信用サーバコンピュータ１００から、動作同調情報として楽曲のテンポに対応したＢＰＭ情報と、ケミライト動作の開始時期を特定可能な開始情報となる振り始め情報とを含むので、ケミライト動作を楽曲のテンポに対応させることができる。

【0349】

また、実施例３の仮想空間コンテンツ配信システムでは、図３５に示すように、第１上演コンテンツである第１演目の楽曲が進行しているときには、第１演目の楽曲のテンポ（ＢＰＭ）に対応した第１演目対応ＢＰＭ情報が配信用サーバコンピュータ１００から配信され、第２上演コンテンツである第２演目の楽曲が進行しているときには、第２演目の楽曲のテンポ（ＢＰＭ）に対応した第２演目対応ＢＰＭ情報が配信用サーバコンピュータ１００から配信されるので、上演コンテンツである楽曲のテンポの違いに対応した異なる振り早さのケミライト動作を行うことができる。

【0350】

また、実施例３の仮想空間コンテンツ配信システムでは、ＢＰＭ情報や振り始め情報が、各演目期間において楽曲が開始される所定期間前に配信用サーバコンピュータ１００から事前に配信されるので、楽曲の開始時において、ケミライト動作が同調しない状態が発生してしまうことを防ぐことができる。

【0351】

また、実施例３の仮想空間コンテンツ配信システムでは、視聴者端末３００は、楽曲が開始される前に送信されるＢＰＭ情報については、視聴者アバターのケミライト動作に反映しないので、楽曲開始前のケミライト動作が不自然となってしまうことによる仮想空間コンテンツの興趣低下を防ぐことができる。

【0352】

また、実施例３の仮想空間コンテンツ配信システムでは、ケミライト動作を行っている視聴者アバターのうち、２０％の割合の視聴者アバターについては、ケミライト動作の開始タイミングを、ＢＰＭ基準タイミングから０.１秒だけ遅れた第１非同調タイミングとする「遅延Ａ」のグループに決定可能であるとともに、１０％の割合の視聴者アバターについては、ケミライト動作の開始タイミングを、ＢＰＭ基準タイミングから０.２秒だけ遅れた第２非同調タイミングとする「遅延Ｂ」のグループに決定可能であり、このように、遅延の態様が複数となることで、より一層、ケミライト動作の現実性を向上できる。

【0353】

また、実施例３の仮想空間コンテンツ配信システムでは、仮想空間コンテンツである仮想ライブの主コンテンツ（第１コンテンツ）である歌唱とダンスとを伴う楽曲が上演される上演コンテンツと、上演コンテンツとは異なる非上演コンテンツであるＭＣ（トーク）のコンテンツとを含み、視聴者アバターは、上演コンテンツが配信されている各演目期間においては上演コンテンツにおいて上演される楽曲に対応したケミライト動作を実行可能である一方、ＭＣ（トーク）が配信されているＭＣ期間においては、ＭＣ期間におけるトークに対応しない移動動作を実行可能であり、このようにすることで、視聴者アバターによる動作が、上演コンテンツの配信時においては楽曲に同調したケミライト動作に調整される一方、各ＭＣ期間におけるトークのコンテンツの配信時においてはトークに対応しない移動動作が可能とされるので、仮想ライブ空間に参加している個々の視聴者ユーザーの興趣を高めることができる。

【0354】

また、実施例３の仮想空間コンテンツ配信システムでは、主コンテンツ（第１コンテンツ）が、仮想ライブ空間に仮想参加可能な演者アバター１により上演される上演コンテンツであって、演者アバター１により上演される楽曲の歌唱やダンスが含まれているので、視聴者アバターのケミライト動作が上演コンテンツである楽曲やダンスに対応した動作に調整されるので、仮想空間コンテンツの興趣をより一層向上できる。

【0355】

また、実施例３の仮想空間コンテンツ配信システムでは、ＭＣ（トーク）が配信されている各ＭＣ期間において配信されるコンテンツは、演者アバター１によって楽曲が上演される上演コンテンツを含まれていないので、上演コンテンツに対応しない移動動作が上演コンテンツの配信中である演目期間中に実行されてしまうことを適切に防ぐことができる。

【0356】

また、実施例３の仮想空間コンテンツ配信システムでは、上演コンテンツは、第１期間となる第１演目期間において配信される楽曲ＩＤ「ＧＫ－ＸＸＸＸ」の楽曲（第１期間コンテンツ）と、第１期間とは異なる第２期間となる第２演目期間において配信される楽曲ＩＤ「ＧＫ－ＹＹＹＹ」の楽曲（第２期間コンテンツ）と、を含み、視聴者アバターのケミライト動作を同調させるための動作情報となるＢＰＭ情報としては、第１期間においては第１演目対応ＢＰＭ情報が送信され、第２期間においては、第１演目対応ＢＰＭ情報とは異なるテンポを特定可能な第２演目対応ＢＰＭ情報が送信されるので、異なる期間に配信される各上演コンテンツである楽曲のテンポの違いに対応したケミライト動作に調整することができる。

【0357】

また、実施例３の仮想空間コンテンツ配信システムは、仮想空間コンテンツとして、仮想ライブ空間に仮想参加する演者アバター１が楽曲を上演することで主コンテンツとなる上演コンテンツ（第１コンテンツと）と、演者アバター１が楽曲を上演せずにＭＣ（トーク）を行うことで主コンテンツとならない非上演コンテンツ（第２コンテンツ）とを含み、上演コンテンツが配信されている各演目期間において視聴者アバターの動作のうち所定動作である移動を制限する一方、非上演コンテンツ（ＭＣ）が配信されている各ＭＣ期間においては移動を制限しない動作制限機能を備えているので、上演コンテンツが配信されている期間においては視聴者アバターの移動が制限されるので、これら移動によって上演コンテンツの興趣が低下してしまうことを防ぐことができる。一方、非上演コンテンツであるＭＣ（トーク）が配信されている各ＭＣ期間においては、移動が制限されないので、視聴者アバターの動作が過度に制限されてしまうことも防ぐことができる。

【0358】

また、実施例３の仮想空間コンテンツ配信システムでは、上演コンテンツが配信されている各演目期間と、上演コンテンツが配信されていない各ＭＣ期間においても、図４０、図４１に示すように、視聴者アバターの特定動作となるケミライト動作に対応した操作である「ケミライト」の項目を選択する操作が可能とされており、該操作が実行されたときには、各演目期間においては同調したケミライト動作が制限（禁止）されることなく可能とされ、各ＭＣ期間においては非同調のケミライト動作が制限（禁止）されることなく可能とされており、このようにすることで、視聴者ユーザーは、上演コンテンツの配信期間である各演目期間と、非上演コンテンツの配信期間である各ＭＣ期間のいずれにおいても、特定操作となる「ケミライト」の項目を選択する操作によって視聴者アバターにケミライト動作を行わせることができる。

【0359】

また、実施例３の仮想空間コンテンツ配信システムでは、上演コンテンツが配信される各演目期間が開始される前の所定期間、つまり、振り始め情報が送信されてから各演目期間が開始されるまでの所定期間についても、演目期間とみなして該演目期間と同様に、移動を含む視聴者アバターの動作を全て制限（禁止）しており、このようにすることで、視聴者アバターの移動等の動作が、演目期間が開始される前の所定期間においても制限（禁止）されるので、これら移動等の動作が、演目期間が開始される時点まで行われることによって上演コンテンツの興趣が低下してしまうことをより的確に防ぐことができる。

【0360】

尚、上記した実施例３では、演目期間が開始される前の所定期間においては、移動以外の視聴者アバターの動作を全て制限（禁止）した形態を例示しているが、これら制限（禁止）する動作を移動だけとしてもよい。

【0361】

また、実施例３の仮想空間コンテンツ配信システムでは、上演コンテンツが配信される各演目期間においては、上演コンテンツである楽曲のテンポに対応したケミライト動作が可能とされているので、仮想ライブ空間に参加している視聴者ユーザーの興趣を高めることができる。

【0362】

＜実施例３の変形例＞
上記実施例３では、実施例１，２と同じく、視聴者アバターは、仮想参加している第３領域内または第４領域内を自由に移動できる形態を例示したが、このようにすると、例えば、第４領域に参加している異なる視聴者アバター同志が仮想衝突したり同一仮想位置に重複することによって仮想空間データにエラー等が生じてしまう等の問題が生じる可能性がある。

【0363】

このような問題を解消するために、例えば、図４２、図４３、図４４に示す変形例３－１に示すようにしてもよい。具体的には、第３領域や第４領域を図４２に示すように細かな領域に区切るとともに、これらの領域のうちのどの領域にて仮想ライブに仮想参加するのかを、図４２に示すように、仮想ライブの事前参加受付け時（仮想参加予約時）や仮想ライブの仮想参加時等において視聴者ユーザーから受付けて、視聴者ユーザーが視聴者アバターで仮想参加する場合には、事前に選択した領域においてだけ参加が可能となるともに、該選択した領域内だけで移動できるように制限（禁止）することで、視聴者アバター同志が仮想衝突したり同一仮想位置に重複することによって仮想空間データにエラー等が生じてしまうことを防ぎつつ、視聴者アバターの移動が過度に制限されてしまうことも防ぐことができる。

【0364】

これら移動の制限（禁止）としては、具体的には、例えば、図４３の「Ｈ５」の領域を仮想参加位置として選択した視聴者ユーザーの場合には、図４４に示すように、「Ｈ５」の周囲の領域である「Ｇ４～Ｇ６」や「Ｈ４」、「Ｈ６」、「Ｉ４～Ｉ６」の各領域への移動する操作を行った場合に、視聴者端末３００において該移動が移動禁止領域への移動と判定されることで、例えば、図４４（Ｂ）に示すように、「移動可能範囲を超えているため指示位置へは移動できません。」の警告表示が、視聴者端末３００において表示されることによって該移動が制限（禁止）される一方、「Ｈ５」の領域内における移動に関しては、該警告表示が表示されずに移動が許可されることで、視聴者ユーザーは、仮想参加した「Ｈ５」の領域内において視聴者アバターを移動できるようにすればよい。

【0365】

尚、これら移動を禁止する範囲については、上記した仮想参加した範囲に限定されるものではなく、例えば、仮想ライブに複数の人数のグループで仮想参加していて、仮想参加している位置が隣接しているような状況については、グループであることを示す情報にもとづいて、これらグループで参加している視聴者アバターが仮想参加している範囲については、移動可能範囲とするようにしてもよい。

【0366】

また、上記した変形例３－１は、実施例３の変形例として記載しているが、実施例３だけではなく、実施例１、２にも適用可能である。

【0367】

また、上記した実施例３では、振り始め情報の送信タイミングから演目開始タイミングまでの所定期間を視聴者アバター動作停止期間Ｔとして視聴者アバターの動作を禁止した形態を例示しているが、本発明はこれに限定されるものではなく、例えば、図４５に示す変形例３－２に示すように、これら振り始め情報の送信タイミングから演目開始タイミングまでの所定期間において、非同調のケミライト動作を実行している視聴者アバターについて、振り始め情報の送信タイミングの時点の動作状態を、同調したケミライト動作の開始時の動作状態に移行させる調整動作を実行させる調整動作期間としてもよい。

【0368】

尚、これら調整動作については、振り始め情報の送信タイミングの時点の視聴者アバターの姿勢と、ケミライト動作の開始時の姿勢とを比較して、その姿勢差を補う動作を、例えば公知のモーションモーフィングプログラム等を使用して生成することができる。
また、上記変形例３－２では、同調のケミライト動作が開始される演目開始タイミングを例に説明したが、これら調整動作期間を同調のケミライト動作が終了する演目終了タイミングにおいて実施するようにしてもよい。つまり、同調のケミライト動作が終了するときの視聴者アバターの姿勢と、非同調のケミライト動作を開始するときの視聴者アバターの姿勢との姿勢差を補う調整動作を、調整動作期間を設けて実行するようにしてもよい。

【0369】

つまり、変形例３－２に示すように、同調したケミライト動作を開始または終了するときに、開始前の視聴者アバターの姿勢と同調したケミライト動作の開始時の姿勢との差、同調したケミライト動作の終了時の姿勢と終了後の視聴者アバターの姿勢との差、を調整するための調整動作を生成することで、視聴者アバターの動作が連続しない動作となって不自然となってしまうことを防ぐことができる。

【0370】

また、上記実施例３では、図３１に示すように、各ＭＣ期間を演目期間に含めない形態としているが、本発明はこれに限定されるものではなく、図４６の変形例３－３に示すように、これらＭＣ（トーク）についても、演者ユーザーによっては演目に含めるようにしてもよく、この場合には、これらＭＣの期間においても、演目期間として移動等の動作を禁止するようにしてもよい。尚、このようにＭＣ（トーク）を演者の演目に含める場合にあっては、これらＭＣ（トーク）の期間も演目期間に含まれることから、楽曲の場合と同様にＢＰＭ情報としてＭＣ（トーク）に対応したＭＣ用ＢＰＭ情報が送信されることで、ケミライト動作がＭＣ（トーク）に対応したテンポの動作に調整されることになる。

【0371】

つまり、仮想空間コンテンツに含まれる第１コンテンツに、演者アバター１による喋り（トーク）のコンテンツが含まれることになるので、視聴者アバターのケミライト動作を喋り（トーク）に対応した動作に調整することができる。

【0372】

尚、上記の変形例３－３のようにＭＣ（トーク）を演者の演目に含める場合には、視聴者アバターの移動等の動作が常に禁止されてしまうことから、例えば、図４６に示すように、ライブ開始前において視聴者が仮想参加してから仮想ライブが開始されるまでの待機期間や、ＭＣ期間のうちの特定のＭＣ期間や、仮想ライブ中において演者が休息するための休息期間等において、過去の仮想ライブ等のアーカイブ動画コンテンツ等が、仮想ディスプレイ４０、４１、４２に表示される期間を演目期間に含まれない期間として移動等の動作が可能とされるようにすればよく、この場合には、演者のＭＣ（トーク）のコンテンツも、歌唱やダンスとともに上演コンテンツに含まれ、アーカイブ動画コンテンツ等、仮想ディスプレイ４０、４１、４２に表示されるコンテンツ等が非上演コンテンツとなる。

【0373】

また、上記実施例３では、各演目期間において視聴者アバターが制限（禁止）される動作として移動を例示しているが、本発明はこれに限定されるものではなく、これら移動だけはなく、図４７の変形例３－４に示すように、ジャンプ（跳躍）や、他の視聴者アバターに作用する動作となる他の視聴者アバターとのハイタッチの動作を各演目期間において制限（禁止）するようにしてもよい。

【0374】

つまり、上演コンテンツが配信される期間である各演目期間において制限（禁止）される視聴者アバターの動作には、仮想ライブ空間内に仮想参加している他の視聴者アバターに対して作用を及ぼす動作やジャンプ（跳躍）が含まれ、このようにすることで、他の視聴者アバターに対して作用を及ぼす動作やジャンプ（跳躍）によって上演コンテンツの興趣が低下してしまうことを防ぐことができる。尚、作用を及ぼす対象は、視聴者アバター以外に演者アバターが含まれていてもよい。

【0375】

尚、これら演目中において制限（禁止）される視聴者アバターの動作としては、図４７に示す動作に限らず、各演目期間おいて視聴者アバターに違和感を与えると考えられる動作を含めるようにすればよい。

【0376】

同様に、上記実施例３では、各演目期間において視聴者アバターが実行可能なコンテンツ関連動作を、ケミライトＫを左右に振るケミライト動作である１の動作のみとした形態を例示しているが、本発明はこれに限定されるものではなく、例えば、これらの動作が複数の動作、例えば、図４７に示すように、ケミライトＫを左右に振るケミライト動作に加えて、ケミライトＫを前後に振るケミライト動作や、視聴者アバターが上方に挙げた両手を左右に揺らすウエーブ動作を含むようにして、これら３つの各コンテンツ関連動作を各コンテンツ関連動作が対応する演目において実行できるようにしてもよい。

【0377】

これら演目中に実行可能とされるコンテンツ関連動作は、図４７に示す３つの動作に限らず、各演目期間おいて全視聴者アバターに違和感を与えることがない動作として事前に許容されている動作であれば、コンテンツ関連動作に加えることができる。

【0378】

尚、ケミライトＫを前後に振るケミライト動作やウエーブ動作についても、ケミライトＫを左右に振るケミライト動作と同様に、ＢＰＭ情報と振り始め情報とにもとづいて、これらの動作を行う複数の視聴者アバター同士が、上演される楽曲に対応したテンポにて同調した動作を行うことができる。

【0379】

つまり、ケミライト動作は、左右に振る動作と、前後に振る動作との動作態様が異なる複数のケミライト動作を含み、変形例３－４の仮想空間コンテンツ配信システムは、いずれのケミライト動作についても、複数の視聴者アバターのケミライト動作を同調させることが可能である。このように、ケミライト動作が複数の動作態様となるとともに、これら複数の動作態様のケミライト動作について同調させることが可能となるので、仮想ライブ空間に参加している個々の視聴者ユーザーの興趣を、より一層高めることができる。

【0380】

また、これら複数のコンテンツ関連動作を実行可能とする場合にあっては、演目期間以外のライブ開始前の期間やＭＣ期間中においては、例えば、図４７に示すように、全ての種類のコンテンツ関連動作を実行できるようにしてよいとともに、１の演目において実行可能なコンテンツ関連動作についても、１種類ではなく、例えば、ウエーブ動作に対応する演目期間において、ケミライトＫを左右に振るケミライト動作も可能とする等のように、複数のコンテンツ関連動作を実行可能としてもよい。

【0381】

また、上記した実施例３では、遅延動作者決定処理を配信用サーバコンピュータ１００において実行することで、同調したケミライト動作において遅延動作を行う視聴者アバターを配信用サーバコンピュータ１００が決定する形態を例示しているが、本発明はこれに限定されるものではなく、例えば、図４８の変形例３－５に示すように、これら遅延動作者決定処理を視聴者端末３００において実行することで、遅延動作を行う視聴者アバターを視聴者端末３００において決定するようにしてもよい。

【0382】

つまり、変形例３－５においては、視聴者端末３００において、各視聴者アバターのケミライト動作のタイミングが同調した視聴者アバター視点映像を生成可能であって、配信用サーバコンピュータ１００は、ケミライト動作を実行している視聴者アバターを特定可能な関連動作実行情報としてケミライト動作情報を各視聴者端末３００に配信可能であり、視聴者端末３００は、ケミライト動作情報から特定されるケミライト動作を実行している視聴者アバターの一部について、ケミライト動作を非同調タイミングである「遅延Ａ」や「遅延Ｂ」に調整可能であり、このようにすることで、配信用サーバコンピュータ１００が遅延動作情報を配信する必要がなくなるので、これら遅延動作情報を配信するための配信用サーバコンピュータ１００における処理負荷を低減することができる。

【0383】

尚、変形例３－５において視聴者端末３００が実行する遅延動作者決定処理の実行タイミングと処理内容は、図３７に示す配信用サーバコンピュータ１００が実行するタイミングと処理内容と同様とすればよく、この場合、決定用テーブルを事前データとして配信用サーバコンピュータ１００から受信して記憶しておけばよいとともに、処理の実行時においてケミライト動作を実行している視聴者アバターについては、配信用サーバコンピュータ１００から配信されるケミライト動作情報から特定すればよいとともに、決定結果については、参加者ユーザーテーブルではなく、ケミライト動作情報に含まれる全参加者の視聴者ユーザーＩＤに対応付けて、決定結果を記憶、更新するための遅延動作者テーブルに反映するようにし、これら遅延動作者テーブルから特定される決定結果にもとづいて、視聴者視点映像生成処理１を実行すればよい。

【0384】

また、変形例３－５においては、遅延動作者決定処理が個々の視聴者端末３００において個別に実行されるため、視聴者ユーザーＡの視聴者端末３００において、例えば「遅延Ａ」の遅延動作者として決定される視聴者アバターが、視聴者ユーザーＢの視聴者端末３００においては、「遅延Ｂ」の遅延動作者として決定される場合となるように、個々の視聴者端末３００において生成される同調したケミライト動作を含む視聴者ユーザー視点映像が、視聴者端末３００毎に異なる映像となる。

【0385】

また、実施例３においては、振り始め情報によってケミライト動作を開始するタイミングを、上演コンテンツである楽曲の開始タイミング（演目期間の開始タイミング）とした形態を例示しているが、本発明はこれに限定されるものではなく、これら振り始め情報によってケミライト動作を開始するタイミングを、演目期間の開始タイミングや楽曲の開始タイミングとは異なるタイミング、例えば、演目期間の開始タイミングから一定期間が経過したタイミングや、楽曲の開始タイミングからイントロ等の部分が経過して歌唱が開始されるタイミング等のタイミングとしてもよい。

【0386】

以上、本発明を各実施例及び変形例にもとづいて説明したが、具体的な構成は上記した各実施例及び変形例に限定されるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。

【0387】

例えば、変形例３－１で示したように、視聴者アバターの仮想参加位置を各視聴者ユーザーに事前に選択させるようにする場合にあっては、例えば、第４領域において仮想ステージＧに向かって右側となるＡ１～Ｃ６の領域を選択した視聴者ユーザーについては、フライング演出期間における視点映像として、仮想飛翔する演者アバター１の右側前方位置からの視点映像が生成されて表示され、第４領域において仮想ステージＧに向かって中央となるＤ４～Ｈ６の領域を選択した視聴者ユーザーについては、フライング演出期間における視点映像として、仮想飛翔する演者アバター１の中央前方位置からの視点映像が生成されて表示され、第４領域において仮想ステージＧに向かって左側となるＩ１～Ｋ６の領域を選択した視聴者ユーザーについては、フライング演出期間における視点映像として、仮想飛翔する演者アバター１の左側前方位置からの視点映像が生成されて表示されるように、視聴者ユーザーが選択した位置に応じて、特別動作である仮想飛翔における視点映像が、各視聴者ユーザーが選択した位置（領域）に対応した視点映像となるようにしてもよい。

【0388】

また、上記各実施例及び変形例では、視聴者アバター視点映像を視聴者端末３００側で生成して表示する形態を例示したが、本発明はこれに限定されるものではなく、例えば、仮想参加者が少ないライブイベント等の場合には、視聴者アバターからの視点映像についても配信用サーバコンピュータ１００側で生成して配信するようにしてもよい。また、視聴者ユーザーが、自分が所有する端末の処理能力や利用可能なデータ通信環境に応じて、視聴者アバター視点映像を視聴者端末３００側で生成するか配信用サーバコンピュータ１００側で生成するかを選択できるようにしてもよいし、配信用サーバコンピュータ１００が、通信接続している視聴者端末３００の処理能力を特定して、該特定した処理能力にもとづいて、視聴者端末３００側で生成するか配信用サーバコンピュータ１００側で生成するかを決定するようにしてもよい。

【0389】

また、上記各実施例及び変形例では、配信用サーバコンピュータ１００を、仮想ライブを主催するイベント運営機関が運営するスタジオに設置した形態を例示しているが、本発明はこれに限定されるものではなく、これら配信用サーバコンピュータ１００としては、サーバコンピュータを貸し出す企業がデータセンタ等において所有するサーバコンピュータを使用したり、上述したように、クラウドサービスによるサーバコンピュータを使用してもよく、これらサーバコンピュータの設置形態は、配信用サーバコンピュータ１００の機能を得られる形態であれば、任意の形態とすることができる。

【0390】

また、上記各実施例及び変形例では、演者ユーザーが一人で歌唱やダンス等の上演動作を行う形態を例示しているが、本発明はこれに限定されるものではなく、これら演者ユーザーが、複数人からなるグループであってもよく、これら複数人からなるグループで仮想ライブを行う場合には、複数人で1台の演者端末２００を共有してもよいし、グループの各メンバー毎に演者端末２００を設ける形態としてもよい。尚、演者ユーザーが、複数人のメンバーからなるグループである場合に、例えば、視点追随対象者指定処理を配信用サーバコンピュータ１００や視聴者端末３００の少なくとも一方で実行することで、視点を追随する対象とするメンバーを、視聴者ユーザーが選択できるようにしてもよい。

【0391】

また、上記各実施例及び変形例では、演者ユーザーが一人で歌唱やダンス等の上演動作を行う形態を例示しているが、本発明はこれに限定されるものではなく、歌唱を行う歌唱者とダンス動作を行うアクターとが個別の人物とされていてもよく、この場合、歌唱者の演者端末とアクターの演者端末を個別として、歌唱者はアクターが上演動作を行うスタジオ以外の場所で歌唱するようにしてもよい。

【0392】

また、上記各実施例及び変形例では、配信用サーバコンピュータ１００、管理者端末１５０、演者端末２００、視聴者端末３００を接続するコンピュータ通信ネットワークとして、インターネット網を例示しているが、本発明はこれに限定されるものではなく、これら通信ネットワークは、特定のエリア内だけでデータ通信可能なローカルエリアネットワークで構成されていてもよいし、その一部にローカルエリアネットワークやローカルデータ通信が含まれていてもよい。

【0393】

また、上記各実施例及び変形例では、視聴者端末３００としてスマートフォンＰやコンピュータ（ＰＣ）とした形態を例示しているが、本発明はこれに限定されるものではなく、これらコンピュータは、持ち運び可能なノートパソコンであってもよいし、タブレット端末、電子書籍リーダー、ウェアラブルコンピュータ、ゲーム用コンソール、及びこれら以外の、少なくとも２Ｄ映像と音声とを出力可能な各種情報処理装置であってもよい。

【0394】

また、上記各実施例及び変形例では、演者ユーザーが、スタジオで歌唱を含む上演を行う形態を例示したが、本発明はこれに限定されるものではなく、例えば、演者ユーザーが自宅等に設置されている演者端末２００を使用して、自宅等から仮想ライブに出演するようにしてもよい。

【0395】

また、上記各実施例及び変形例では、仮想空間コンテンツとして仮想ライブを例示したが、本発明はこれに限定されるものではなく、これら仮想空間コンテンツとしては、例えば、演者ユーザーが自分のファンと集うファンミーティングや、トークセッション等、視聴者ユーザーにとって有益なコンテンツであって、演者アバター１と視聴者アバターとが仮想参加する仮想空間に関するコンテンツであれば、どのようなコンテンツであってもよい。

【0396】

また、上記各実施例及び変形例では、固定配置（設定）された仮想カメラとして４つの仮想カメラＣ１～Ｃ４や空中移動仮想カメラの視点切替を、管理者端末１５０における設定や操作によって事前に行える形態を例示しているが、本発明はこれに限定されるものではなく、例えば、これら視点切替を、管理者端末１５０においてイベント管理者Ｍが、操作入力装置１６１を構成する視点切替コントローラ等を使用して、リアルタイムに行うようにしてもよい。

【0397】

また、上記各実施例及び変形例では、仮想カメラとして仮想空間内に固定配置（設定）された仮想カメラＣ１～Ｃ４を使用する形態を例示しているが、本発明はこれに限定されるものではなく、例えば、仮想カメラＣ１～Ｃ４に、加えるか若しくは代えて、移動可能な仮想移動カメラを仮想ライブ会場内に配置して、該仮想移動カメラの仮想空間内の位置や撮像方向等を、管理者端末１５０においてイベント管理者Ｍやカメラマン等が操作により制御して、仮想移動カメラの視点映像とするようにしてもよい。

【0398】

また、上記各実施例及び変形例では、演者アバターの表情に反映させるために、演者ユーザーの顔の表情を検出可能とするために、スクリーンＳに仮想カメラＣ２の視点映像を表示する形態を例示しているが、本発明はこれに限定されるものではなく、例えば、演者ユーザーの顔の表情を検出するセンサ機能を有する高機能ヘッドマウントディスプレイであれば、これら高機能ヘッドマウントディスプレイを装着して上演を行うようにしてもよく、このようにすることで、演者ユーザーの仮想ライブへの没入感を向上することができるようにしてもよい。また、演者アバターの表情に演者ユーザーの顔の表情を詳細に反映しなくてもよい場合は、通常のヘッドマウントディスプレイを演者ユーザーが装着して上演を行うようにしてもよい。

【0399】

また、上記実施例３では、ケミライト動作のタイミングとして、ＢＰＭ基準タイミングから０.１秒遅れた遅延Ａや０.２秒遅れた遅延Ｂのタイミングを設ける形態を例示しているが、本発明はこれに限定されるものではなく、これら遅延Ａや遅延Ｂのタイミングを設けることなく、ケミライト動作を行っている全ての視聴者アバターが、同一のＢＰＭ基準タイミングのみで同期してケミライト動作を行うようにしてもよい。つまり、本発明において同調とは、基準タイミングのみでの同期だけではなく、一部の視聴者アバターのケミライト動作のタイミングが、ほぼ同じタイミングとして認識できる所定範囲として０.２秒の範囲内において異なっている動作態様を含むものであり、よって、同調タイミングには、ＢＰＭ基準タイミングである同期タイミングだけではなく、擬同期タイミングである遅延Ａや遅延Ｂのタイミングが含まれる。

【0400】

また、上記実施例３では、図３１や図３５に示すように、振り始め情報が送信されてから各演目期間の開始タイミングよりまでの期間を視聴者アバター動作停止期間Ｔとした形態を例示していが、本発明はこれに限定されるものではなく、これら視聴者アバター動作停止期間Ｔを設けない形態として、各ＭＣ期間中は、全期間において視聴者アバターは、ケミライト動作が可能とされていてもよい。

【0401】

また、上記各実施例及び変形例では、仮想ライブの配信時においてリアルタイムに演者ユーザーが歌唱や歌唱動作（上演動作）を実行する形態とすることで、演者ユーザーが、仮想ライブに仮想参加している視聴者ユーザーの反応等を確認しながらライブを進行できるようにしているが、本発明はこれに限定されるものではなく、演者ユーザーの歌唱や歌唱動作（上演動作）は、リアルタイムではなく、予め、歌唱や歌唱動作（上演動作）を実行しておき、これら歌唱の音声や歌唱動作（上演動作）を演者アバター情報として配信用サーバコンピュータ１００に記録しておき、該記録した歌唱の音声や歌唱動作（上演動作）をライブの進行に応じて再生することによって仮想ライブを開催するようにしてもよい。

【0402】

また、演者ユーザーの歌唱や歌唱動作（上演）に替えて、コンピュータグラフィック等で作成した仮想の演者による歌唱や歌唱動作（上演動作）を演者アバター情報として配信用サーバコンピュータに記録しておき、該記録した歌唱の音声や歌唱動作（上演動作）をライブの進行に応じて再生することによって仮想ライブを開催するようにしてもよい。

【0403】

このように、予め、歌唱や歌唱動作（上演動作）を実行して演者アバター情報を配信用サーバコンピュータ１００に記録、再生して仮想ライブを配信する場合にあっては、該配信時における仮想空間コンテンツ配信システムの構成は、配信用サーバコンピュータ１００、管理者端末１５０、視聴者端末３００とで構成されることになり、仮想空間において演者アバター１を動作させる操作を行う演者ユーザーが利用可能な演者ユーザー端末である演者端末２００を含まない構成となる。

【符号の説明】

【0404】

１ 演者アバター
１００ 配信用サーバコンピュータ
１５０ 管理者端末
２００ 演者端末
３００ 視聴者端末

【要約】

【課題】視聴者アバターの動作による仮想空間コンテンツの興趣低下を防ぐこと。
【解決手段】仮想空間コンテンツを配信可能なサーバコンピュータと、仮想空間に参加可能な視聴者アバターを動作させる操作が可能な視聴者ユーザー端末と、を含む仮想空間コンテンツ配信システムであって、仮想空間コンテンツの主コンテンツである第１コンテンツが配信されている期間において視聴者アバターの動作のうち所定動作を制限する一方、仮想空間コンテンツの第２コンテンツが配信されている期間においては所定動作を制限しない動作制限手段を備える。
【選択図】図３１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】

【図25】

【図26】

【図27】

【図28】

【図29】

【図30】

【図31】

【図32】

【図33】

【図34】

【図35】

【図36】

【図37】

【図38】

【図39】

【図40】

【図41】

【図42】

【図43】

【図44】

【図45】

【図46】

【図47】

【図48】