特許 7588286 アニメーション制作システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-11-14

(45)【発行日】2024-11-22

(54)【発明の名称】アニメーション制作システム

(51)【国際特許分類】

   G06T 13/40 20110101AFI20241115BHJP

   G06T 19/00 20110101ALI20241115BHJP

   G06F 3/0346 20130101ALI20241115BHJP

   G06F 3/038 20130101ALI20241115BHJP

   G06F 3/01 20060101ALI20241115BHJP

   G06F 3/04815 20220101ALI20241115BHJP

   G09G 5/00 20060101ALI20241115BHJP

   G09G 5/36 20060101ALI20241115BHJP

   A63F 13/61 20140101ALI20241115BHJP

   A63F 13/55 20140101ALI20241115BHJP

【ＦＩ】

G06T13/40

G06T19/00 A

G06F3/0346 421

G06F3/038 310A

G06F3/01 510

G06F3/04815

G09G5/00 510G

G09G5/00 550C

G09G5/00 510B

G09G5/36 400

G09G5/36 500

A63F13/61

A63F13/55

【請求項の数】 4

(21)【出願番号】P 2020128305

(22)【出願日】2020-07-29

(65)【公開番号】P2022025472

(43)【公開日】2022-02-10

【審査請求日】2023-03-31

(73)【特許権者】

【識別番号】724006285

【氏名又は名称】エイベックス・エンタテインメント株式会社

(72)【発明者】

【氏名】近藤 義仁

(72)【発明者】

【氏名】室橋 雅人

【審査官】鈴木 明

(56)【参考文献】

【文献】特開２０１８－１８５７３８（ＪＰ，Ａ）

【文献】特許第６７０９３１７（ＪＰ，Ｂ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ １３／４０

Ｇ０６Ｔ １９／００

Ｇ０６Ｆ ３／０３４６

Ｇ０６Ｆ ３／０３８

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／０４８１５

Ｇ０９Ｇ ５／００

Ｇ０９Ｇ ５／３６

Ａ６３Ｆ １３／６１

Ａ６３Ｆ １３／５５

(57)【特許請求の範囲】

【請求項1】

広告動画のためのアニメーションを制作するシステムであって、
仮想空間内に配置されたキャラクタを撮影する仮想的なカメラと、
ユーザが装着したヘッドマウントディスプレイおよびコントローラの少なくともいずれかから前記ユーザの入力を検出するユーザ入力検出部と、
前記入力に応じて前記キャラクタの動作を制御するキャラクタ制御部と、
前記カメラにより撮影した前記キャラクタの動作を含むアクションデータを記録する画像データ格納部と、
前記アクションデータに基づき、視聴者に応じて前記仮想空間内のオブジェクトを置換しながら前記広告動画を生成する画像生成部と、
を備えることを特徴とするアニメーション制作システム。

【請求項2】

請求項１に記載のアニメーション制作システムであって、
前記画像生成部は、前記視聴者に応じて、前記キャラクタを変更すること、
を特徴とするアニメーション制作システム。

【請求項3】

請求項１に記載のアニメーション制作システムであって、
前記画像生成部は、前記視聴者に応じて、前記キャラクタのモデルデータを変更すること、
を特徴とするアニメーション制作システム。

【請求項4】

請求項１に記載のアニメーション制作システムであって、
前記画像生成部は、前記視聴者に応じて、前記仮想空間内に配置されている前記キャラクタ以外のオブジェクトを変更すること、
を特徴とするアニメーション制作システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、アニメーション制作システムに関する。

【背景技術】

【0002】

仮想空間内に仮想カメラを配置することが行われている（特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１７－１４６６５１号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

仮想空間内でアニメーションを撮影しようとする取り組みが行われてこなかった。

【0005】

本発明はこのような背景を鑑みてなされたものであり、仮想空間内でアニメーションを撮影することのできる技術を提供することを目的とする。

【課題を解決するための手段】

【0006】

上記課題を解決するための本発明の主たる発明は、広告動画のためのアニメーションを制作するシステムであって、仮想空間内に配置されたキャラクタを撮影する仮想的なカメラと、ユーザが装着したヘッドマウントディスプレイおよびコントローラの少なくともいずれかから前記ユーザの入力を検出するユーザ入力検出部と、前記入力に応じて前記キャラクタの動作を制御するキャラクタ制御部と、前記カメラにより撮影した前記キャラクタの動作を含むアクションデータを記録する画像データ格納部と、前記アクションデータに基づき、視聴者に応じて前記仮想空間内のオブジェクトを置換しながら前記広告動画を生成する画像生成部と、を備えることを特徴とする。

【0007】

その他本願が開示する課題やその解決方法については、発明の実施形態の欄及び図面により明らかにされる。

【発明の効果】

【0008】

本発明によれば、仮想空間内でアニメーションを撮影することができる。

【図面の簡単な説明】

【0009】

【図1】本実施形態のアニメーション制作システム３００においてユーザが装着するヘッドマウントディスプレイ（ＨＭＤ）に表示される仮想空間の一例を示す図である。

【図2】本発明の一実施形態に係るアニメーション制作システム３００の全体構成例を示す図である。

【図3】本実施形態に係るＨＭＤ１１０の外観を模式的に示す図である。

【図4】本実施形態に係るＨＭＤ１１０の機能構成例を示す図である。

【図5】本実施形態に係るコントローラ２１０の外観を模式的に示す図である。

【図6】本実施形態に係るコントローラ２１０の機能構成例を示す図である。

【図7】本実施形態にかかる画像生成装置３１０の機能構成図を示す図である。

【図8】本実施形態のアニメーション制作システムよる動画の配信処理の流れを説明する図である。

【発明を実施するための形態】

【0010】

本発明の実施形態の内容を列記して説明する。本発明は、たとえば以下のような構成を備える。

【0011】

［項目１］
広告動画のためのアニメーションを制作するシステムであって、
仮想空間内に配置されたキャラクタを撮影する仮想的なカメラと、
ユーザが装着したヘッドマウントディスプレイおよびコントローラの少なくともいずれかから前記ユーザの入力を検出するユーザ入力検出部と、
前記入力に応じて前記キャラクタの動作を制御するキャラクタ制御部と、
前記カメラにより撮影した前記キャラクタの動作を含むアクションデータを記録する画像データ格納部と、
前記アクションデータに基づき、視聴者に応じて前記仮想空間内のオブジェクトを置換しながら前記広告動画を生成する画像生成部と、
を備えることを特徴とするアニメーション制作システム。
［項目２］
項目１に記載のアニメーション制作システムであって、
前記画像生成部は、前記視聴者に応じて、前記キャラクタを変更すること、
を特徴とするアニメーション制作システム。
［項目３］
項目１に記載のアニメーション制作システムであって、
前記画像生成部は、前記視聴者に応じて、前記キャラクタのモデルデータを変更すること、
を特徴とするアニメーション制作システム。
［項目４］
項目１に記載のアニメーション制作システムであって、
前記画像生成部は、前記視聴者に応じて、前記仮想空間内に配置されている前記キャラクタ以外のオブジェクトを変更すること、
を特徴とするアニメーション制作システム。

【0012】

本発明の一実施形態に係るアニメーション制作システム３００の具体例を、以下に図面を参照しつつ説明する。なお、本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。以下の説明では、図面の説明において同一の要素には同一の符号を付し、重複する説明を省略する。

【0013】

＜概要＞
図１は、本実施形態のアニメーション制作システム３００においてユーザが装着するヘッドマウントディスプレイ（ＨＭＤ）に表示される仮想空間の一例を示す図である。本実施形態のアニメーション制作システム３００では、仮想空間１に仮想的なキャラクタ４と仮想的なカメラ３とを配置し、カメラ３を用いてキャラクタ４を撮影する。また、仮想空間１にはカメラマン２（撮影者キャラクタ）が配置され、カメラマン２によりカメラ３が仮想的に操作される。本実施形態のアニメーション制作システム３００では、ユーザは、図１に示すように仮想空間１をＴＰＶ（Third Person View；三人称視点）で俯瞰しながらキャラクタ４やカメラ３を配置したり、カメラマン２としてＦＰＶ（First Person View；一人称視点）でキャラクタ４を撮影したり、ＦＰＶでキャラクタ４の演技を行ったりしながら、アニメーションを制作していく。また、仮想空間１内には複数のキャラクタ４（図１の例では、キャラクタ４－１およびキャラクタ４－２）を配置することができ、ユーザは、キャラクタ４に憑依しながら演技を行うことができる。複数のキャラクタ４が配置されている場合には、ユーザは、各キャラクタ４（たとえば、キャラクタ４－１および４－２）に憑依する対象を切り替えることもできる。すなわち、本実施形態のアニメーション制作システム３００では、一人が何役もの役割（ロール）を果たすことができる。また、カメラマン２としてカメラ２を仮想的に操作しながら撮影を行うことができるので、自然なカメラワークを実現することが可能となり、撮影される動画の表現を豊かにすることができる。

【0014】

＜全体構成＞
図２は、本発明の一実施形態に係るアニメーション制作システム３００の全体構成例を示す図である。アニメーション制作システム３００は、例えば、ＨＭＤ１１０、コントローラ２１０及びホストコンピュータとして機能する画像生成装置３１０を含んで構成することができる。sアニメーション制作システム３００には、ＨＭＤ１１０やコントローラ２１０の位置、向き及び傾き等を検出するための赤外線カメラ（図示せず）等を追加することもできる。これらの装置は、相互に、有線又は無線手段により接続することができる。例えば、各々の装置にＵＳＢポートを備え、ケーブルで接続することで通信を確立することもできるし、他に、ＨＤＭＩ、有線ＬＡＮ、赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＷｉＦｉ（登録商標）等の有線又は無線により通信を確立することもできる。画像生成装置３１０は、ＰＣ、ゲーム機、携帯通信端末等、計算処理機能を有する装置であればよい。画像生成装置３１０は、広告配信装置３１１と通信可能に接続される。広告配信装置３１１は、例えば、広告枠を含むＷｅｂページなどのコンテンツとともに広告を提供するサーバであってもよいし、Ｗｅｂページやアプリなどに対して広告を提供する広告配信サーバであってもよい。本実施形態では、画像生成装置３１０で生成した動画像を動画広告として広告配信装置３１１に提供されることを想定する。

【0015】

＜ＨＭＤ１１０＞
図３は、本実施形態に係るＨＭＤ１１０の外観を模式的に示す図である。図４は、本実施形態に係るＨＭＤ１１０の機能構成例を示す図である。

【0016】

ＨＭＤ１１０はユーザの頭部に装着され、ユーザの左右の眼前に配置されるよう表示パネル１２０を備える。表示パネル１２０としては、光学透過型と非透過型のディスプレイが考えられるが、本実施形態では、より没入感を提供可能な非透過型の表示パネルを例示する。表示パネル１２０には、左目用画像と右目用画像とが表示され、両目の視差を利用することにより立体感のある画像をユーザに提供することができる。左目用画像と右目用画像とを表示することができれば、左目用ディスプレイと右目用ディスプレイとを個別に備えることも可能であるし、左目用及び右目用の一体型のディスプレイを備えることも可能である。

【0017】

ＨＭＤ１１０の筐体部１３０は、センサ１４０を備える。センサ１４０は、ユーザの頭部の向きや傾きといった動きを検出するために、図示しないが、例えば、磁気センサ、加速度センサ、もしくはジャイロセンサのいずれか、またはこれらの組み合わせを備えることができる。ユーザの頭部の垂直方向をＹ軸とし、Ｙ軸と直交する軸のうち、表示パネル１２０の中心とユーザとを結ぶ、ユーザの前後方向に相当する軸をＺ軸とし、Ｙ軸及びＺ軸と直交し、ユーザの左右方向に相当する軸をＸ軸とするとき、センサ１４０は、Ｘ軸まわりの回転角（いわゆる、ピッチ角）、Ｙ軸まわりの回転角（いわゆる、ヨー角）、Ｚ軸まわりの回転角（いわゆる、ロール角）を検出することができる。

【0018】

センサ１４０に代えて、またはセンサ１４０に加えて、ＨＭＤ１１０の筐体部１３０は、複数の光源１５０（例えば、赤外光ＬＥＤ、可視光ＬＥＤ）を備えることもできる。ＨＭＤ１１０の外部（例えば、室内等）に設置されたカメラ（例えば、赤外光カメラ、可視光カメラ）がこれらの光源を検出することで、特定の空間におけるＨＭＤ１１０の位置、向き、傾きを検出することができる。または、同じ目的で、ＨＭＤ１１０に、ＨＭＤ１１０の筐体部１３０に設置された光源を検出するためのカメラを備えることもできる。

【0019】

ＨＭＤ１１０の筐体部１３０は、アイトラッキング・センサを備えることもできる。アイトラッキング・センサは、ユーザの左目及び右目の視線方向及び注視点を検出するために用いられる。アイトラッキング・センサとしては様々な方式が考えられるが、例えば、左目および右目に弱い赤外光を照射してできる角膜上の反射光の位置を基準点とし、反射光の位置に対する瞳孔の位置により視線方向を検出し、左目及び右目の視線方向の交点を注視点として検出する方法などが考えられる。

【0020】

＜コントローラ２１０＞
図５は、本実施形態に係るコントローラ２１０の外観を模式的に示す図である。図６は、本実施形態に係るコントローラ２１０の機能構成例を示す図である。

【0021】

コントローラ２１０により、仮想空間内において、ユーザが所定の入力を行うことをサポートすることができる。コントローラ２１０は、左手用２２０及び右手用２３０のコントローラのセットとして構成することができる。左手用コントローラ２２０及び右手用コントローラ２３０は、各々操作用トリガーボタン２４０、赤外線ＬＥＤ２５０、センサ２６０、ジョイスティック２７０、メニューボタン２８０を有することができる。

【0022】

操作用トリガーボタン２４０は、コントローラ２１０のグリップ２３５を把持したときに、中指及び人差し指でトリガーを引くような操作を行うことを想定した位置に２４０ａ、２４０ｂとして配置される。コントローラ２１０の両側面から下方にリング状に形成されるフレーム２４５には、複数の赤外線ＬＥＤ２５０が備えられ、コントローラ外部に備えられるカメラ（図示せず）により、これらの赤外線ＬＥＤの位置を検出することで、特定の空間におけるコントローラ２１０の位置、向き及び傾きを検出することができる。

【0023】

また、コントローラ２１０は、コントローラ２１０の向きや傾きといった動きを検出するために、センサ２６０を内蔵することができる。センサ２６０として、図示しないが、例えば、磁気センサ、加速度センサ、もしくはジャイロセンサのいずれか、またはこれらの組み合わせを備えることができる。さらに、コントローラ２１０の上面には、ジョイスティック２７０及びメニューボタン２８０を備えることができる。ジョイスティック２７０は、基準点を中心に３６０度方向に動かすことができ、コントローラ２１０のグリップ２３５を把持したときに、親指で操作されることが想定される。メニューボタン２８０もまた同様に、親指で操作されることが想定される。さらに、コントローラ２１０は、コントローラ２１０を操作するユーザの手に振動を与えるためのバイブレータ（図示せず）を内蔵することもできる。ボタンやジョイスティックを介したユーザの入力内容やセンサ等を介したコントローラ２１０の位置、向き及び傾きといった情報を出力するため、また、ホストコンピュータからの情報を受信するために、コントローラ２１０は、入出力部及び通信部を有する。

【0024】

ユーザがコントローラ２１０を把持し、各種ボタンやジョイスティックを操作することの有無、及び赤外線ＬＥＤやセンサにより検出される情報によって、システムはユーザの手の動きや姿勢を決定し、仮想空間内において擬似的にユーザの手を表示させ、動作させることができる。

【0025】

＜画像生成装置３１０＞
図７は、本実施形態にかかる画像生成装置３１０の機能構成図を示す図である。画像生成装置３１０としては、ＨＭＤ１１０やコントローラ２１０から送信された、ユーザ入力情報やセンサ等により取得されたユーザの頭部の動きやコントローラの動きや操作に関する情報を記憶し、所定の計算処理を行い、画像を生成するための機能を有する、ＰＣ、ゲーム機及び携帯通信端末等といった装置を使用することができる。画像生成装置３１０は、例えば、ＨＭＤ１１０やコントローラ２１０等の周辺装置との有線による接続を確立するための入出力部３２０を備えることができ、赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＷｉＦｉ（登録商標）等無線による接続を確立するための通信部３３０を備えることができる。入出力部３２０及び／又は通信部３３０を介して、ＨＭＤ１１０及び／又はコントローラ２１０から受信された、ユーザの頭部の動きやコントローラ２１０の動きや操作に関する情報は、制御部３４０において、ユーザの位置、視線、姿勢等の動作、発話、操作等を含めた入力内容として検出され、ユーザの入力内容に応じて、記憶部３５０に格納された制御プログラムを実行することで、キャラクタ４の制御を行い、画像を生成するといった処理がなされる。制御部３４０は、ＣＰＵで構成することもできるが、画像処理に特化したＧＰＵをさらに設けることで、情報処理と画像処理を分散化し、全体の処理の効率化を図ることもできる。画像生成装置３１０はまた、他の計算処理装置と通信を行い、他の計算処理装置に情報処理や画像処理を分担させることもできる。

【0026】

制御部３４０は、ＨＭＤ１１０及び／又はコントローラ２１０から受信された、ユーザの頭部の動きやユーザの発話、また、コントローラの動きや操作に関する情報を検出するユーザ入力検出部４１０と、予め記憶部３５０のキャラクタデータ格納部４５０に格納されたキャラクタ４に対して、制御プログラム格納部４６０に格納された制御プログラムを実行するキャラクタ制御部４２０と、キャラクタ制御に応じて、仮想空間１に配置された仮想的なカメラ３の制御を行うカメラ制御部４４０と、キャラクタ制御に基づいてカメラ３が仮想空間１を撮影した画像を生成する画像生成部４３０と、を有する。ここでキャラクタ４の動きの制御については、ＨＭＤ１１０やコントローラ２１０を介して検出されたユーザ頭部の向きや傾き、手の動きといった情報を、人間の身体の関節の動きや制約に則って作成されたボーン構造の各部の動きに変換し、予め格納されたキャラクタデータに対して、ボーン構造を関連付けることで、ボーン構造の動きを適用させることで実現される。カメラ３の制御は、たとえば、キャラクタ４の手の動きに応じて、カメラ３についての各種設定（たとえば、カメラ３の仮想空間１内での位置、カメラ３の視線方向、焦点位置、ズームなど）を変更することにより行われる。画像生成部４３０は、キャラクタ制御部４２０により制御されたキャラクタ４の動きと、カメラ制御部４４０により制御されたカメラ３の動き（操作）とを表すアクションデータを画像データ格納部４７０に登録するとともに、仮想的にキャラクタ４の動きをカメラ３により撮影した画像を生成することができる。

【0027】

記憶部３５０は、上述のキャラクタデータ格納部４５０に、キャラクタ４のイメージデータのほか、キャラクタ４の属性等キャラクタ４に関連する情報を格納する。キャラクタデータ格納部４５０には、キャラクタ４の表面に貼付するテクスチャ画像も格納される。キャラクタデータ格納部４５０には、キャラクタ４の骨格を変形するための変形データを格納するようにすることもできる。キャラクタデータ格納部４５０には、同一のキャラクタに対応付けて、いくつかのバージョンのモデルデータを格納することもできる。例えば、同じキャラクタでも、人種ごとに異なるスキン及びボーンのモデルデータを格納することができる。キャラクタデータ格納部４５０には、キャラクタ４以外にも仮想空間１内に配置される各種オブジェクト（例えば、机や椅子、コップ、飲料など）に関するモデルデータを格納することもできる。また、制御プログラム格納部４６０は、仮想空間におけるキャラクタ４の動作や表情を制御し、カメラ３などのオブジェクトを制御するためのプログラムを格納する。画像データ格納部４７０は、画像生成部４３０で生成された画像を格納する。本実施形態では、画像データ格納部４７０に格納される画像は、動画像を生成するためのアクションデータとすることができる。アクションデータには、たとえば、キャラクタ４を仮想空間１に表示するための３Ｄデータや、３Ｄデータのボーン構造の状態を特定するためのポーズデータ、ボーン構造の動きを特定するモーションデータなどが含まれ得る。また、画像生成部４３０は、アクションデータに基づいて動画像を作成（レンダリング）し、レンダリングした結果の動画データを画像データ格納部４７０に登録することもできる。置換情報格納部４８０は、画像データ格納部４７０に記憶されているアクションデータの一部を置換するための情報（置換情報）を格納する。置換情報格納部４８０は、広告対象に対応付けて置換情報を格納することができる。広告対象は、視聴者を特定する情報であり、視聴者のセグメントを示す情報であってよい。視聴者のセグメントは、ターゲティング広告の対象となる各種のセグメント（例えば、視聴者のデモグラフィック属性、ジオグラフィック属性、サイコグラフィック属性及びビヘイビオラル属性、ならびに特定のキャラクタのファンであることなどの興味対象などに対する条件）とすることができる。置換情報には、例えば、視聴者を示す視聴者情報（視聴者の属性や興味対象など）に対応付けて、置換元のオブジェクトと、置換先のオブジェクトとを含めることができる。

【0028】

画像生成部４３０は、広告配信装置３１１に対して送信する画像を生成するにあたり、視聴者を示す情報を取得し、取得した視聴者に対応する置換情報を読み出して、読み出した置換情報に基づいてアクションデータに含まれるモデルデータを置換しながらレンダリングを行い、レンダリングされた動画像を広告動画として広告配信装置３１１に送信することができる。例えば、画像生成部４３０は、Ｗｅｂサーバである広告配信装置３１１が提供しているコンテンツを閲覧している視聴者に関する視聴者情報を公知の手法により取得することができる。また、画像生成部４３０は、画像生成装置３１０のユーザから視聴者情報の指定を受け付けるようにしてもよい。

【0029】

置換情報には、例えば、ある特定キャラクタのファンである視聴者を示す情報に対応付けて、置換元として仮想空間１内のキャラクタ４を示す情報と、置換先として当該特定キャラクタのモデルデータを示す情報とを含めることができる。これにより、画像生成部４３０は、アクションデータに基づくレンダリングを行うにあたり、特定の視聴者に向けて、メインのキャラクタ４を当該視聴者がファンであるキャラクタのモデルデータに置換してレンダリングを行うことができる。

【0030】

また、置換情報には、例えば、特定の国を示す情報に対応付けて、置換元として仮想空間１内のキャラクタ４を示す情報と、置換先として当該国に対応する人種のモデルデータを示す情報とを含めることができる。これにより、画像生成部４３０は、アクションデータに基づくレンダリングを行うにあたり、特定の国に居住する視聴者に向けて、メインのキャラクタ４を当該視聴者が居住する国に代表的な人種のモデルデータに置換してレンダリングを行うことができる。

【0031】

また、置換情報には、視聴者を示す情報に対応付けて、置換元として仮想空間１内に配置された飲料のオブジェクトを特定する情報と、置換先として、当該視聴者をターゲットとする特定商品のオブジェクトを表すモデルデータを示す情報とを含めることができる。これにより、視聴者に応じて配置するオブジェクトを広告商品のものに代えるリプレースメント広告を行うことができる。

【0032】

＜動画の送信処理＞
図８は、本実施形態のアニメーション制作システムよる動画の配信処理の流れを説明する図である。

【0033】

ユーザはＨＭＤ１１０やコントローラ２１０を操作することで仮想空間１内のキャラクタ４を操作して演技を行うことができ（Ｓ１０１）、またカメラマン２を操作してカメラ３を制御し、キャラクタ４の演技を撮影することができる（Ｓ１０２）。キャラクタ４の演技とカメラ３の撮影は同時に行ってもよいし、まずキャラクタ４の演技を行い、アクションデータを記録しておいて、当該アクションデータを再生させたものを後からカメラ３で撮影するようにすることもできる。カメラ３で撮影したキャラクタ４（及び仮想空間１内の全てのオブジェクト）の動作はアクションデータとして格納される（Ｓ１０３）。

【0034】

画像生成部４３０は、動画の配信対象となる視聴者を特定する視聴者情報を取得し（Ｓ１０４）、取得した視聴者情報に対応する置換情報を読み出し（Ｓ１０５）、読み出した置換情報に基づいて、アクションデータに含まれるオブジェクトを置換しながらレンダリングを行い（Ｓ１０６）、レンダリングされた動画像を広告配信装置３１１に送信することができる（Ｓ１０７）。

【0035】

以上説明したように、本実施形態のアニメーション制作システム３００によれば、仮想空間１内においてユーザがカメラマン２としてカメラ３を操作して、動画を撮影することができる。したがって、現実世界と同様にカメラ３を操作して撮影を行うことができるので、自然なカメラワークを実現することが可能となり、アニメーション動画により豊かな表現を与えることができる。

【0036】

以上、本実施形態について説明したが、上記実施形態は本発明の理解を容易にするためのものであり、本発明を限定して解釈するためのものではない。本発明は、その趣旨を逸脱することなく、変更、改良され得ると共に、本発明にはその等価物も含まれる。

【0037】

また、本実施形態では、仮想現実（ＶＲ；Virtual Reality）による仮想空間を想定していたが、これに限らず、拡張現実（ＡＲ；Augumented Reality）空間あるいは複合現実（ＭＲ；Mixed Reality）空間であっても本実施形態のアニメーション制作システム３００はそのまま適用可能である。

【0038】

また、本実施形態では、画像生成装置３１０は、広告配信装置３１１に動画像を送信するものとしたが、画像生成装置３１０自身が広告配信を行う広告配信部を備えるようにした広告配信システムとすることもできる。

【0039】

また、置換情報に基づいて仮想空間内のオブジェクトを置換するに際して、オブジェクト（キャラクタ４）の動作を補正するようにしてもよい。例えば、画像生成部４３０は、身長や体格の異なるキャラクタに置換した場合に、腕や足などのボーンの長さに応じて、動作スピードや角度、移動距離などを補正することができる。また、画像生成部４３０は、キャラクタ４ごとに可動範囲に制限を設定しておき、可動範囲内でのみ動作するように補正を行うことができる。これにより、例えば、身体の硬いキャラクタと身体の柔らかいキャラクタとの表現の違いを表現することができる。

【符号の説明】

【0040】

１ 仮想空間
２ カメラマン
３ カメラ
４ キャラクタ
６ 制御パネル
７ 画面
３１ グリッド
３２ 分割線
６１ 表示部
７１ 表示部
７２ 再生ボタン
１１０ ＨＭＤ
１２０ 表示パネル
１３０ 筐体部
１４０ センサ
１５０ 光源
２１０ コントローラ
２２０ 左手用コントローラ
２３０ 右手用コントローラ
２３５ グリップ
２４０ トリガーボタン
２５０ 赤外線ＬＥＤ
２６０ センサ
２７０ ジョイスティック
２８０ メニューボタン
３００ アニメーション制作システム
３１０ 画像生成装置
３１１ 広告配信装置
３２０ 入出力部
３３０ 通信部
３４０ 制御部
３５０ 記憶部
４１０ ユーザ入力検出部
４２０ キャラクタ制御部
４３０ 画像生成部
４４０ カメラ制御部
４５０ キャラクタデータ格納部
４６０ 制御プログラム格納部
４７０ 画像データ格納部
４８０ 置換情報格納部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】