特許 7514962 データ処理装置、プログラム、及びデータ処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-03

(45)【発行日】2024-07-11

(54)【発明の名称】データ処理装置、プログラム、及びデータ処理方法

(51)【国際特許分類】

   G06T 13/20 20110101AFI20240704BHJP

【ＦＩ】

G06T13/20 500

【請求項の数】 21

(21)【出願番号】P 2022577897

(86)(22)【出願日】2021-01-27

(86)【国際出願番号】 JP2021002926

(87)【国際公開番号】W WO2022162808

(87)【国際公開日】2022-08-04

【審査請求日】2023-06-06

(73)【特許権者】

【識別番号】501440684

【氏名又は名称】ソフトバンク株式会社

(74)【代理人】

【識別番号】110000877

【氏名又は名称】弁理士法人ＲＹＵＫＡ国際特許事務所

(72)【発明者】

【氏名】石若 裕子

【審査官】橋爪 正樹

(56)【参考文献】

【文献】特開２０１９－１０３７２９（ＪＰ，Ａ）

【文献】特開平０９－０９１４６５（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ １３／００－１３／８０

(57)【特許請求の範囲】

【請求項1】

オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得部と、
前記アニメーションデータとともに再生される音楽の音楽データを取得する音楽データ取得部と、
前記音楽データに含まれる第１の音高及び第２の音高のそれぞれに対して、前記オブジェクトの第１の形状及び第２の形状を登録する登録部と、
前記音楽データに基づいて、前記アニメーションデータにおける前記オブジェクトの動きを更新するデータ更新部であって、前記第１の音高及び前記第１の形状と、前記第２の音高及び前記第２の形状とに基づいて、前記オブジェクトの動きを更新する、データ更新部と
を備えるデータ処理装置。

【請求項2】

前記登録部は、前記第１の音高と前記第２の音高の間の音高のそれぞれに対応する前記オブジェクトの形状を、前記第１の形状及び前記第２の形状を用いて補完することによって生成する、請求項１に記載のデータ処理装置。

【請求項3】

前記第２の音高は、前記第１の音高よりも高く、
前記登録部は、前記第１の音高よりも低い音高と、前記第２の音高よりも高い音高のそれぞれに対応する前記オブジェクトの形状を、前記第１の形状及び前記第２の形状を用いて補完することによって生成する、請求項２に記載のデータ処理装置。

【請求項4】

前記データ更新部は、前記アニメーションデータにおける前記オブジェクトが動く部分に対応する音楽の音高に対応付けて登録されている前記オブジェクトの形状に基づいて、前記オブジェクトの動きを更新する、請求項１から３のいずれか一項に記載のデータ処理装置。

【請求項5】

オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得部と、
前記アニメーションデータとともに再生される音楽の音楽データを取得する音楽データ取得部と、
前記音楽データに基づいて、前記アニメーションデータにおける前記オブジェクトの動きを更新するデータ更新部と
を備え、
前記オブジェクトは、人物又はキャラクタの動きに合わせて前記人物又は前記キャラクタが身に着ける物が動くアニメーションデータにおける前記物である、データ処理装置。

【請求項6】

前記オブジェクトは、衣服を装着した装着体の動きに合わせて前記衣服が動くアニメーションデータにおける前記衣服である、請求項５に記載のデータ処理装置。

【請求項7】

オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得部と、
前記アニメーションデータとともに再生される音楽の音楽データを取得する音楽データ取得部と、
前記音楽データに基づいて、前記アニメーションデータにおける前記オブジェクトの動きを更新するデータ更新部と
を備え、
前記オブジェクトは、人物又はキャラクタの動きに合わせて前記人物又は前記キャラクタの一部が動くアニメーションデータにおける前記一部である、データ処理装置。

【請求項8】

前記オブジェクトは、人物の動きに合わせて毛髪が動くアニメーションデータにおける前記毛髪である、請求項７に記載のデータ処理装置。

【請求項9】

前記音楽データ取得部は、前記音楽データとして前記アニメーションデータのＢＧＭデータを取得する、請求項１から８のいずれか一項に記載のデータ処理装置。

【請求項10】

前記データ更新部は、前記オブジェクトの物理法則に従った動きに対して、前記音楽データに基づく動きの大きさを反映することによって、前記オブジェクトの動きを更新する、請求項１から９のいずれか一項に記載のデータ処理装置。

【請求項11】

前記データ更新部は、前記物理法則に対する前記音楽データの反映割合に従って、前記オブジェクトの物理法則に従った動きに対して、前記音楽データに基づく動きの大きさを反映することによって、前記オブジェクトの動きを更新する、請求項１０に記載のデータ処理装置。

【請求項12】

前記データ更新部は、前記アニメーションデータにおける前記オブジェクトが動く部分に対応する音楽の音高が高いほど前記オブジェクトの動きを大きくする、請求項１から１１のいずれか一項に記載のデータ処理装置。

【請求項13】

前記データ更新部は、前記アニメーションデータにおける前記オブジェクトが動く部分に対応する音楽の音高が高いほど前記オブジェクトの動きを小さくする、請求項１から１１のいずれか一項に記載のデータ処理装置。

【請求項14】

前記音楽は複数のパートによって構成され、
前記データ更新部は、前記複数のパートのうちの第１のパートに基づいて、前記オブジェクトの第１の部分の動きを更新し、前記複数のパートのうちの第２のパートに基づいて、前記オブジェクトの第２の部分の動きを更新する、請求項１から１３のいずれか一項に記載のデータ処理装置。

【請求項15】

前記音楽は複数のパートによって構成され、
前記アニメーションデータは複数の前記オブジェクトを含み、
前記データ更新部は、前記複数のパートのうちの第１のパートに基づいて、前記複数のオブジェクトのうちの第１のオブジェクトの動きを更新し、前記複数のパートのうちの第２のパートに基づいて、前記複数のオブジェクトのうちの第２のオブジェクトの動きを更新する、請求項１から１３のいずれか一項に記載のデータ処理装置。

【請求項16】

前記データ更新部は、前記音楽データに基づいて、前記アニメーションデータにおける前記オブジェクトのマテリアルの要素、エフェクトの要素、及び前記オブジェクトが位置する空間の環境の要素の少なくともいずれかをさらに更新する、請求項１から１５のいずれか一項に記載のデータ処理装置。

【請求項17】

前記アニメーションデータ取得部が取得した前記アニメーションデータにおける前記オブジェクトの動きに基づいて、前記アニメーションデータとともに再生する音楽の音楽データを生成する音楽データ生成部と、
前記アニメーションデータとともに前記音楽データを再生するよう制御する再生制御部と
を備える、請求項１から１６のいずれか一項に記載のデータ処理装置。

【請求項18】

コンピュータを、請求項１から１７のいずれか一項に記載のデータ処理装置として機能させるためのプログラム。

【請求項19】

コンピュータによって実行されるデータ処理方法であって、
オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得段階と、
前記アニメーションデータとともに再生される音楽の音楽データを取得する音楽データ取得段階と、
前記音楽データに含まれる第１の音高及び第２の音高のそれぞれに対して、前記オブジェクトの第１の形状及び第２の形状を登録する登録段階と、
前記音楽データに基づいて、前記アニメーションデータにおける前記オブジェクトの動きを更新するデータ更新段階であって、前記第１の音高及び前記第１の形状と、前記第２の音高及び前記第２の形状とに基づいて、前記オブジェクトの動きを更新する、データ更新段階と
を備えるデータ処理方法。

【請求項20】

コンピュータによって実行されるデータ処理方法であって、
オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得段階と、
前記アニメーションデータとともに再生される音楽の音楽データを取得する音楽データ取得段階と、
前記音楽データに基づいて、前記アニメーションデータにおける前記オブジェクトの動きを更新するデータ更新段階と
を備え、
前記オブジェクトは、人物又はキャラクタの動きに合わせて前記人物又は前記キャラクタが身に着ける物が動くアニメーションデータにおける前記物である、データ処理方法。

【請求項21】

コンピュータによって実行されるデータ処理方法であって、
オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得段階と、
前記アニメーションデータとともに再生される音楽の音楽データを取得する音楽データ取得段階と、
前記音楽データに基づいて、前記アニメーションデータにおける前記オブジェクトの動きを更新するデータ更新段階と
を備え、
前記オブジェクトは、人物又はキャラクタの動きに合わせて前記人物又は前記キャラクタの一部が動くアニメーションデータにおける前記一部である、データ処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、データ処理装置、プログラム、及びデータ処理方法に関する。

【背景技術】

【0002】

特許文献１には、試着者の姿勢をリアルタイムに推定し、推定した時系列の姿勢に合わせて衣服の動きをシミュレートする技術が記載されている。非特許文献１及び非特許文献２には、衣服モデルを生成するためのツール等が記載されている。
［先行技術文献］
［特許文献］
［特許文献１］特開２００６－２４９６１８号公報
［非特許文献］
［非特許文献１］UMETANI N., KAUFMAN D. M., IGARASHI T., GRINSPUN E.: Sensitive couture for interactive garment editing and modeling. ACM Transactions on Graphics (SIGGRAPH 2011) 30, 4 (2011).
［非特許文献２］BERTHOUZOZ F., GARG A., KAUFMAN D. M., GRINSPUN E., AGRAWALA M.: Parsing sewing patterns into 3d garments. ACM Trans. Graph. 32, 4 (July 2013), 85:1-85:12.

【一般的開示】

【0003】

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得部を備えてよい。データ処理装置は、アニメーションデータとともに再生される音楽の音楽データを取得する音楽データ取得部を備えてよい。データ処理装置は、音楽データに基づいて、アニメーションデータにおけるオブジェクトの動きを更新するデータ更新部を備えてよい。

【0004】

上記音楽データ取得部は、上記音楽データとして上記アニメーションデータのＢＧＭデータを取得してよい。上記データ更新部は、上記オブジェクトの物理法則に従った動きに対して、上記音楽データに基づく動きの大きさを反映することによって、上記オブジェクトの動きを更新してよい。上記データ更新部は、上記物理法則に対する上記音楽データの反映割合に従って、上記オブジェクトの物理法則に従った動きに対して、上記音楽データに基づく動きの大きさを反映することによって、上記オブジェクトの動きを更新してよい。上記反映割合は、任意に設定可能あってよく、変更可能であってよい。上記データ更新部は、上記アニメーションデータにおける上記オブジェクトが動く部分に対応する音楽の音高が高いほど上記オブジェクトの動きを大きくしてよい。上記データ更新部は、上記アニメーションデータにおける上記オブジェクトが動く部分に対応する音楽の音高が高いほど上記オブジェクトの動きを小さくしてよい。

【0005】

上記データ処理装置は、上記音楽データに含まれる第１の音高及び第２の音高のそれぞれに対して、上記オブジェクトの第１の形状及び第２の形状を登録する登録部を備えてよく、上記データ更新部は、上記第１の音高及び上記第１の形状と、上記第２の音高及び上記第２の音高とに基づいて、上記オブジェクトの動きを更新してよい。上記第２の形状は、上記第１の形状よりも動きの大きな形状であってよい。上記第２の形状は、上記第１の毛状よりも動きの小さな形状であってよい。上記登録部は、上記第１の音高と上記第２の音高の間の音高のそれぞれに対応する上記オブジェクトの形状を、上記第１の形状及び上記第２の形状を用いて補完することによって生成してよい。する、請求項７に記載のデータ処理装置。上記第２の音高は、上記第１の音高よりも高くてよく、上記登録部は、上記第１の音高よりも低い音高と、上記第２の音高よりも高い音高のそれぞれに対応する上記オブジェクトの形状を、上記第１の形状及び上記第２の形状を用いて補完することによって生成してよい。上記データ更新部は、上記アニメーションデータにおける上記オブジェクトが動く部分に対応する音楽の音高に対応付けて登録されている上記オブジェクトの形状に基づいて、上記オブジェクトの動きを更新してよい。上記データ更新部は、あるタイミングにおける物理法則に従って生成されたオブジェクトの形状である基準形状と、当該タイミングにおける音楽の音高に対応するオブジェクトの形状である対応形状との差分に従って、上記オブジェクトの形状を更新してよい。上記データ更新部は、上記基準形状よりも上記対応形状の動きが大きい場合には、設定されている反映割合に従って、上記基準形状の動きを大きくしてよい。上記データ更新部は、上記基準形状よりも上記対応形状の動きが小さい場合には、設定されている反映割合に従って、上記基準形状の動きを小さくしてよい。

【0006】

上記音楽は複数のパートによって構成されてよく、上記データ更新部は、上記複数のパートのうちの第１のパートに基づいて、上記オブジェクトの第１の部分の動きを更新し、上記複数のパートのうちの第２のパートに基づいて、上記オブジェクトの第２の部分の動きを更新してよい。上記音楽は複数のパートによって構成されてよく、上記アニメーションデータは複数の上記オブジェクトを含んでよく、上記データ更新部は、上記複数のパートのうちの第１のパートに基づいて、上記複数のオブジェクトのうちの第１のオブジェクトの動きを更新し、上記複数のパートのうちの第２のパートに基づいて、上記複数のオブジェクトのうちの第２のオブジェクトの動きを更新してよい。

【0007】

上記データ更新部は、上記音楽データに基づいて、上記アニメーションデータにおける上記オブジェクトのマテリアルの要素、エフェクトの要素、及び上記オブジェクトが位置する空間の環境の要素の少なくともいずれかをさらに更新してよい。上記データ更新部は、上記音楽データに基づいて、上記アニメーションデータにおけるライティングの表現を更新してよい。上記データ更新部は、より高い音高に対して、ライティングの度合をより弱め、より低い音高に対して、ライティングの度合をより強めてよい。上記データ更新部は、上記音楽データに基づいて、上記オブジェクトの材質を変化させてよい。上記データ更新部は、音高がより高い場合、上記オブジェクトの材質をより軽い材質に変化させ、音高がより低い場合、上記オブジェクトの材質をより重い材質に変化させてよい。上記データ更新部は、音高がより高い場合、上記オブジェクトの素材をより反射性の高い素材に変化させ、音高がより低い場合、上記オブジェクトの素材をより反射性の低い素材に変化させてよい。上記データ更新部は、上記音楽データに基づいて、上記オブジェクトに重畳する重畳オブジェクトの度合を変化させてよい。上記データ更新部は、音高がより低い場合に、雨だれのような暗いイメージの重畳オブジェクトの度合を強めてよい。

【0008】

上記データ処理装置は、上記アニメーションデータ取得部が取得した上記アニメーションデータにおける上記オブジェクトの動きに基づいて、上記アニメーションデータとともに再生する音楽の音楽データを生成する音楽データ生成部と、上記アニメーションデータとともに上記音楽データを再生するよう制御する再生制御部とを備えてよい。上記データ処理装置は、上記オブジェクトの形状と音高とを対応付けて登録する登録部を備えてよい。上記登録部は、上記オブジェクトの第１の形状と、上記第１の形状よりも動きの大きな第２の形状のそれぞれに対して、第１の音高及び第２の音高のそれぞれを登録してよい。上記登録部は、上記第１の形状及び上記第２の形状以外の形状に対応する音高を、上記第１の形状及び上記第１の音高と、上記第２の形状及び上記第２の音高とに基づいて登録してよい。上記登録部は、上記第１の形状と上記第２の形状の間の形状のそれぞれに対して、上記第１の音高と上記第２の音高との間の音高を割り当ててよい。上記登録部は、上記第２の音高が上記第１の音高よりも高い場合において、上記第１の形状よりも動きの小さな形状に対して、上記第１の音高よりも低い音高を割り当て、上記第２の形状よりも動きの大きな形状に対して、上記第２の音高よりも高い音高を割り当ててよい。上記登録部は、上記第２の音高が上記第１の音高よりも低い場合においては、上記第１の形状よりも動きの小さな形状に対して、上記第１の音高よりも高い音高を割り当て、上記第２の形状よりも動きの大きな形状に対して、上記第２の音高よりも低い音高を割り当ててよい。

【0009】

上記オブジェクトは、衣服を装着した装着体の動きに合わせて上記衣服が動くアニメーションデータにおける上記衣服であってよい。上記オブジェクトは、人物の動きに合わせて毛髪が動くアニメーションデータにおける上記毛髪であってよい。

【0010】

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得部を備えてよい。データ処理装置は、アニメーションデータにおけるオブジェクトの動きに基づいて、アニメーションデータとともに再生する音楽の音楽データを生成する音楽データ生成部を備えてよい。データ処理装置は、アニメーションデータとともに音楽データを再生する再生部を備えてよい。

【0011】

本発明の一実施態様によれば、コンピュータを、上記データ処理装置として機能させるためのプログラムが提供される。

【0012】

本発明の一実施態様によれば、コンピュータによって実行されるデータ処理方法が提供される。データ処理方法は、オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得段階を備えてよい。データ処理方法は、アニメーションデータとともに再生される音楽の音楽データを取得する音楽データ取得段階を備えてよい。データ処理方法音楽データに基づいて、アニメーションデータにおけるオブジェクトの動きを更新するデータ更新段階を備えてよい。

【0013】

本発明の一実施態様によれば、コンピュータによって実行されるデータ処理方法が提供される。データ処理方法は、オブジェクトが動くアニメーションデータを取得するアニメーションデータ取得段階を備えてよい。データ処理方法は、アニメーションデータにおけるオブジェクトの動きに基づいて、アニメーションデータとともに再生する音楽の音楽データを生成する音楽データ生成段階を備えてよい。データ処理方法アニメーションデータとともに音楽データを再生する再生段階を備えてよい。

【0014】

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

【図面の簡単な説明】

【0015】

【図1】データ処理装置１００の一例を概略的に示す。

【図2】データ処理装置１００の機能構成の一例を概略的に示す。

【図3】音楽データについて説明するための説明図である。

【図4】音楽データについて説明するための説明図である。

【図5】登録部１３２による登録データ１５２の一例を概略的に示す。

【図6】音高とオブジェクトの形状の対応関係の一例を概略的に示す。

【図7】音高とオブジェクトの形状の対応関係の一例を概略的に示す。

【図8】登録部１３２による登録データ１５４の一例を概略的に示す。

【図9】衣服３００の部分の一例を概略的に示す。

【図10】データ処理装置１００として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。

【発明を実施するための形態】

【0016】

アニメーションを制作する時には、ＢＧＭ（Ｂａｃｋ Ｇｒｏｕｎｄ Ｍｕｓｉｃ）に合わせて身体の動きを作るだけはなく、動きによって変化する服の動きも音楽に合わせることが望ましい。また、表現を見ている人に伝えるために、物理現象をそのまま表現するのでは不十分であるため、大げさに動きを作ることが望ましかった。これまでは、これらが、アーティストのセンスと手間暇とによってなされていた。本実施形態に係るデータ処理装置１００は、例えば、オブジェクトが動くアニメーションデータと、当該アニメーションデータとともに再生される音楽の音楽データを取得して、音楽データに基づいてアニメーションデータにおけるオブジェクトの動きを更新することによって、オブジェクトが音楽に合わせて動くようなアニメーションデータを自動的に生成し、アニメーション制作の工程を削減することに貢献するとともに、予想していない動きの生成をも可能とし得る。

【0017】

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

【0018】

図１は、データ処理装置１００の一例を概略的に示す。データ処理装置１００は、オブジェクトが動くアニメーションデータにおけるオブジェクトの動きを、アニメーションデータとともに再生される音楽の音楽データに基づいて更新する処理を実行する。

【0019】

オブジェクトは、どのようなものであってもよい。例えば、オブジェクトは、衣服を装着した装着体の動きに合わせて衣服が動くアニメーションデータにおける衣服である。例えば、オブジェクトは、人物の動きに合わせて毛髪が動くアニメーションデータにおける毛髪である。オブジェクトの例として、人物、キャラクタ、人物やキャラクタが身に着ける物（衣服及び装飾品等）、人物やキャラクタの一部（身体の一部及び毛髪等）、及び草木等が挙げられるが、これらに限られない。本実施形態では、オブジェクトが衣服である場合を主に例に挙げて説明する。

【0020】

データ処理装置１００は、例えば、オブジェクトが動くアニメーションデータ（基準データと記載する場合がある。）を取得し、当該アニメーションデータとともに再生される音楽データに基づいて、オブジェクトの動きを更新することによって、例えば、音楽の盛り上がりに合わせてオブジェクトの動きが大きくなるようなアニメーションデータ（更新データと記載する場合がある。）を生成する。

【0021】

具体例として、データ処理装置１００は、物理法則に従って装着体の動きに合わせて衣服が動く基準データを取得し、当該アニメーションデータのＢＧＭデータに基づいて、衣服の動きを更新することによって、ＢＧＭの盛り上がりに合わせて衣服の動きが大きくなるような更新データを生成する。データ処理装置１００は、例えば、装着体データと、衣服データとを含む基準データを取得する。装着体データは、装着体が動くアニメーションのデータであってよい。衣服データは、物理法則に従って装着体の動きに合わせて動く衣服のアニメーションのデータであってよい。データ処理装置１００は、ＢＧＭデータに基づいて、衣服の動きを変更した衣服データを生成することにより、更新データを生成してよい。

【0022】

データ処理装置１００は、例えば、外部から受信したり、記憶媒体から読み出したりすることによって、基準データを取得する。データ処理装置１００は、基準データを生成してもよい。

【0023】

データ処理装置１００は、実際の人物等の動きに合わせて基準データを生成してよい。例えば、データ処理装置１００は、カメラ１５０によって撮像した人物の３次元形状をポリゴンメッシュによって表す装着体データと、当該人物が装着する衣服の３次元形状をポリゴンメッシュによって表す衣服データとを生成する。また、データ処理装置１００は、実際の人物の動きとは無関係に、ＣＧキャラクタのような基準データを生成してもよい。

【0024】

データ処理装置１００は、例えば、生成した更新データを、データ処理装置１００が備えるディスプレイ及びスピーカに出力させる。また、データ処理装置１００は、例えば、生成した更新データを、ネットワーク２０を介して通信端末４００に送信することによって、通信端末４００に出力させてもよい。

【0025】

通信端末４００は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、タブレット端末、及びスマートフォン等であってよい。データ処理装置１００と通信端末４００とは、ネットワーク２０を介して通信してよい。ネットワーク２０は、インターネットを含んでよい。ネットワーク２０は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）を含んでよい。ネットワーク２０は、移動体通信ネットワークを含んでよい。移動体通信ネットワークは、３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）通信方式、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）通信方式、５Ｇ（５ｔｈ Ｇｅｎｅｒａｔｉｏｎ）通信方式、及び６Ｇ（６ｔｈ Ｇｅｎｅｒａｔｉｏｎ）通信方式以降の通信方式のいずれに準拠していてもよい。

【0026】

データ処理装置１００は、通信端末４００から基準データを受信してもよい。通信端末４００は、例えば、カメラ４５０によって撮像した人物の装着体データと、当該人物が装着する衣服の衣服データと含む基準データを生成して、データ処理装置１００に送信する。カメラ４５０は、通信端末４００に内蔵されていてよく、また、通信端末４００に対して外付けであってもよい。

【0027】

図２は、データ処理装置１００の機能構成の一例を概略的に示す。データ処理装置１００は、データ受信部１０２、アニメーションデータ取得部１１０、音楽データ取得部１２０、登録部１３２、データ更新部１３４、再生制御部１３６、登録部１４２、及び音楽データ生成部１４４を備える。なお、データ処理装置１００がこれらの全てを備えることは必須とは限らない。

【0028】

データ受信部１０２は、各種データを受信する。データ受信部１０２は、ネットワーク２０を介して各種データを受信してよい。データ受信部１０２は、例えば、通信端末４００から各種データを受信する。

【0029】

データ受信部１０２は、例えば、基準データを受信する。データ受信部１０２は、例えば、装着体データを受信する。データ受信部１０２は、例えば、人物等を撮像した撮像データを受信する。

【0030】

データ受信部１０２は、例えば、基準データとともに再生される音楽の音楽データを受信する。データ受信部１０２は、基準データとともに、音楽データを受信してよい。データ受信部１０２は、音楽データとして、基準データのＢＧＭデータを受信してよい。

【0031】

アニメーションデータ取得部１１０は、基準データを取得する。アニメーションデータ取得部１１０は、データ受信部１０２が受信した基準データを取得してよい。アニメーションデータ取得部１１０は、データ処理装置１００を用いてデータ処理装置１００の利用者等によって生成された基準データ取得してもよい。アニメーションデータ取得部１１０は、可搬型のコンピュータ可読記憶媒体から基準データを取得してもよい。

【0032】

アニメーションデータ取得部１１０は、基準データを生成することによって、基準データを取得してもよい。アニメーションデータ取得部１１０は、アニメーションデータ生成部１１２を有する。

【0033】

アニメーションデータ生成部１１２は、例えば、データ受信部１０２が受信した撮像データを解析することによって、物理法則に従ってオブジェクトが動く基準データを生成する。例えば、アニメーションデータ生成部１１２は、撮像データを解析することによって、物理法則に従って、衣服を装着した装着体の動きに合わせて衣服が動く基準データを生成する。

【0034】

また、アニメーションデータ生成部１１２は、データ受信部１０２が受信した装着体データを解析することによって、当該装着体データに含まれる装着体に装着され、物理法則に従って装着体の動きに合わせて動く衣服データを生成することによって、基準データを生成してもよい。アニメーションデータ生成部１１２は、公知の任意の技術を用いることによって、基準データを生成してよい。

【0035】

音楽データ取得部１２０は、アニメーションデータ取得部１１０が取得した基準データとともに再生される音楽の音楽データを取得する。音楽データ取得部１２０は、データ受信部１０２が受信した音楽データを取得してよい。音楽データ取得部１２０は、音楽データとして、基準データのＢＧＭデータを取得してよい。音楽データ取得部１２０は、データ受信部１０２が受信したＢＧＭデータを取得してよい。音楽データは、効果音を含んでもよい。

【0036】

登録部１３２は、アニメーションデータ取得部１１０が取得した基準データにおけるオブジェクトの動きを更新するために用いるデータを登録する。登録部１３２は、データ処理装置１００の利用者及び通信端末４００の利用者等による指示に従って、データを登録してよい。

【0037】

登録部１３２は、例えば、オブジェクトの複数の形状を登録する。登録部１３２は、音高とオブジェクトの形状とを対応付けて登録してよい。例えば、登録部１３２は、第１の音高と、第１の音高よりも高い第２の音高のそれぞれに対して、オブジェクトの第１の形状及び第２の形状を登録する。第２の形状は、第１の形状よりも動きの大きな形状であってよい。第２の形状は、第１の形状よりも動きの小さな形状であってもよい。登録部１３２は、第１の音高及び第２の音高以外の音高に対応するオブジェクトの形状を、第１の形状及び第２の形状に基づいて生成してもよい。

【0038】

登録部１３２は、例えば、第１の音高と第２の音高の間の音高のそれぞれに対応するオブジェクトの形状を、第１の形状及び第２の形状を用いて補完することによって生成する。登録部１３２は、第１の音高よりも低い音高と、第２の音高よりも高い音高のそれぞれに対応するオブジェクトの形状を、第１の形状及び第２の形状を用いて補完することによって生成してよい。

【0039】

データ更新部１３４は、音楽データ取得部１２０が取得した音楽データに基づいて、アニメーションデータ取得部１１０が取得した基準データにおけるオブジェクトの動きを更新する。データ更新部１３４は、例えば、オブジェクトの物理法則に従った動きに対して、音楽データに基づく動きの大きさを反映することによって、オブジェクトの動きを更新する。

【0040】

具体例として、データ更新部１３４は、基準データにおけるオブジェクトが動く部分に対応する音楽の音高が高いほど、オブジェクトの動きを大きくする。これにより、基準データとともに再生される音楽の音高が高いときに、オブジェクトの動きが大きくなるような更新データを生成することができる。

【0041】

データ更新部１３４は、物理法則に対する音楽データの反映割合に従って、オブジェクトの物理法則に従った動きに対して、音楽データに基づく動きの大きさを反映することによって、オブジェクトの動きを更新してもよい。反映割合は、任意に設定可能であってよく、変更可能であってよい。データ更新部１３４は、例えば、データ処理装置１００の利用者及び通信端末４００の利用者等の指示に従って、反映割合を設定する。これらにより、物理法則に対する音楽データの反映割合を低くすることによって、オブジェクトの自然な動きを保ちつつ、音楽に合わせたオブジェクトの動きの反映を行うことができ、反映割合を高くすることによって、音楽の盛り上がりを重視した、異質な動きを実現することができる。

【0042】

データ更新部１３４は、基準データにおけるオブジェクトが動く部分に対応する音楽の音高が高いほど、オブジェクトの動きを小さくしてもよい。これにより、基準データとともに再生される音楽の音高が高いときに、オブジェクトの動きが小さくなるような更新データを生成することができる。

【0043】

データ更新部１３４は、登録部１３２に登録されているデータを用いて、オブジェクトの動きを更新してよい。例えば、データ更新部１３４は、第１の音高及び第２の音高のそれぞれに対して登録されたオブジェクトの第１の形状及び第２の形状に基づいて、オブジェクトの動きを更新する。

【0044】

データ更新部１３４は、基準データにおけるオブジェクトが動く部分に対応する音楽の音高に対応付けて登録されているオブジェクトの形状に基づいて、オブジェクトの動きを更新してよい。データ更新部１３４は、例えば、あるタイミングにおける物理法則に従って生成されたオブジェクトの形状（基準形状と記載する場合がある。）と、そのタイミングにおける音楽の音高に対応するオブジェクトの形状（対応形状と記載する場合がある。）との差分に従って、オブジェクトの形状を更新する。例えば、データ更新部１３４は、基準形状よりも対応形状の動きが大きい場合には、設定されている反映割合に従って、基準形状の動きを大きくする。また、例えば、データ更新部１３４は、基準形状よりも対応形状の動きが小さい場合には、設定されている反映割合に従って、基準形状の動きを小さくする。

【0045】

データ更新部１３４は、音楽データに基づいて、基準データにおけるオブジェクトのマテリアルの要素、エフェクトの要素、及びオブジェクトが位置する空間の環境の要素の少なくともいずれかをさらに更新してもよい。データ更新部１３４は、音楽データに基づいて、基準データにおけるオブジェクトの動きは更新せずに、オブジェクトのマテリアルの要素、エフェクトの要素、及びオブジェクトが位置する空間の環境の要素の少なくともいずれかを更新してもよい。

【0046】

装着体が位置する空間の環境の要素の例として、ライティングの要素が挙げられる。データ更新部１３４は、音楽データに基づいて、ライティングの表現を更新してよい。ライティングの表現は、例えば、ライティングの度合、ライティングの角度、及びライティングの色等を変化させることによって、変化し得る。なお、度合、角度、色は例示であり、ライティングの表現は、他の要素を変化させることによっても変化し得る。例えば、データ更新部１３４は、より高い音高に対して、ライティングの度合をより弱め、より低い音高に対して、ライティングの度合をより強める。これにより、音高がより低い場合に、ライティングの度合を強めて、影の要素を強めることによって、暗さの表現を加えることができ得る。

【0047】

オブジェクトのマテリアルの要素の例として、オブジェクトの材質の要素が挙げられる。データ更新部１３４は、音楽データに基づいて、オブジェクトの材質を変化させてよい。例えば、データ更新部１３４は、音高がより高い場合、オブジェクトの材質をより軽い材質に変化させ、音高がより低い場合、オブジェクトの材質をより重い材質に変化させる。これにより、音高が高い時はオブジェクトが軽やかに動き、音高が低い時はオブジェクトが重く動くようなアニメーションとすることができる。また、例えば、データ更新部１３４は、音高がより高い場合、オブジェクトの素材をより反射性の高い素材に変化させ、音高がより低い場合、オブジェクトの素材をより反射性の低い素材に変化させる。これにより、音高が高い場合に、反射性の高い素材に変化させることによって、オブジェクトの明るさを向上させ、明るさの表現を加えることができ得る。

【0048】

オブジェクトに対するエフェクトの要素の例として、オブジェクトに重畳する重畳オブジェクトの度合が挙げられる。データ更新部１３４は、音楽データに基づいて、重畳オブジェクトの度合を変化させてよい。例えば、データ更新部１３４は、音高がより低い場合に、雨だれのような暗いイメージの重畳オブジェクトの度合を強める。これにより、音高がより低い場合に、オブジェクトに対して、暗いイメージの重畳オブジェクトをより強い度合で加えることによって、暗さ表現を加えることができる。

【0049】

再生制御部１３６は、データ更新部１３４によって更新されたアニメーションデータ（すなわち、更新データ）を再生させるよう制御する。再生制御部１３６は、例えば、データ処理装置１００が備えるディスプレイ及びスピーカに更新データを出力させる。再生制御部１３６は、更新データを通信端末４００に送信することによって、通信端末４００が備えるディスプレイ及びスピーカに更新データを出力させるよう制御してもよい。

【0050】

登録部１４２は、アニメーションデータ取得部１１０が取得した基準データにおけるオブジェクトの動きに基づいて、基準データとともに再生する音楽の音楽データを生成するためのデータを登録する。登録部１４２は、データ処理装置１００の利用者及び通信端末４００の利用者等による指示に従って、データを登録してよい。

【0051】

登録部１４２は、オブジェクトの形状と音高とを対応付けて登録する。例えば、登録部１４２は、オブジェクトの第１の形状と、第１の形状よりも動きの大きな第２の形状のそれぞれに対して、第１の音高及び第２の音高のそれぞれを登録する。登録部１４２は、第１の形状及び第２の形状以外の形状に対応する音高を、第１の形状及び第１の音高と、第２の形状及び第２の音高とに基づいて登録してもよい。

【0052】

登録部１４２は、例えば、第１の形状と第２の形状の間の形状のそれぞれに対して、第１の音高と第２の音高との間の音高を割り当てる。また、登録部１４２は、第２の音高が第１の音高よりも高い場合において、例えば、第１の形状よりも動きの小さな形状に対して、第１の音高よりも低い音高を割り当て、第２の形状よりも動きの大きな形状に対して、第２の音高よりも高い音高を割り当てる。登録部１４２は、第２の音高が第１の音高よりも低い場合においては、例えば、第１の形状よりも動きの小さな形状に対して、第１の音高よりも高い音高を割り当て、第２の形状よりも動きの大きな形状に対して、第２の音高よりも低い音高を割り当てる。

【0053】

音楽データ生成部１４４は、アニメーションデータ取得部１１０が取得した基準データにおけるオブジェクトの動きに基づいて、基準データとともに再生する音楽の音楽データを生成する。音楽データ生成部１４４は、登録部１４２によって登録されたデータを用いて、音楽データを生成してよい。音楽データ生成部１４４は、例えば、各タイミングにおけるオブジェクトの形状を特定し、オブジェクトの形状に対応する音高を特定することによって、音楽データを生成する。

【0054】

再生制御部１３６は、音楽データ生成部１４４によって生成された音楽データを再生するよう制御してよい。再生制御部１３６は、音楽データのみを再生するよう制御してよい。再生制御部１３６は、例えば、データ処理装置１００が備えるスピーカに音楽データを出力させる。再生制御部１３６は、音楽データを通信端末４００に送信することによって、通信端末４００が備えるスピーカに音楽データを出力させるよう制御してもよい。再生制御部１３６は、アニメーションデータとともに音楽データを再生するよう制御してもよい。再生制御部１３６は、例えば、データ処理装置１００が備えるディスプレイ及びスピーカに音楽データ及びアニメーションデータを出力させる。再生制御部１３６は、更新データを通信端末４００に送信することによって、通信端末４００が備えるディスプレイ及びスピーカに音楽データ及びアニメーションデータを出力させるよう制御してもよい。

【0055】

これらにより、例えば、アニメーションデータにおけるオブジェクトの動きを、聴覚的に確認することができる。例えば、音楽がスムーズに進んでいる中、急に音程が外れたような場合に、その部分に対応するオブジェクトの動きが異常な動きになっている可能性があるが、そのような状態を音楽データを聞くことによって確認することができ得る。

【0056】

図３は、音楽データについて説明するための説明図である。音楽データは、音そのもののデータであってよく、音をあらわす楽譜のデータであってもよい。

【0057】

図３に示す楽譜２００において、平均速度２０２は、音楽の平均速度を示し、拍子２０４は、音楽の拍子を示し、音符によって、音高及び音長が示される。データ更新部１３４は、音符の間隔によって、オブジェクトの動きの速さを調整し、音高によって、オブジェクトの動きの大きさを調整し得る。

【0058】

例えば、データ更新部１３４が、１６分音符の割合が多い音楽データに基づいてオブジェクトの動き更新した場合、オブジェクトの動きが速めになり、全音符の割合が多い音楽データに基づいてオブジェクトの動きを更新した場合、オブジェクトの動きは遅めになり得る。また、例えば、データ更新部１３４が、低い音高に基づいてオブジェクトの動きを更新した場合、オブジェクトの動きが小さめになり、高い音高に基づいてオブジェクトの動きを更新した場合、オブジェクトの動きが大きめになり得る。

【0059】

図４は、音楽データについて説明するための説明図である。音楽データは、ＭＩＤＩデータ２１０であってもよい。ＭＩＤＩデータ２１０は、全体のＡｖｅｒａｇｅ Ｓｐｅｅｄ及びＲｈｙｔｈｍ、メロディや各パートの音程（音高）や音長の情報を含む。

【0060】

図５は、登録部１３２による登録データ１５２の一例を概略的に示す。登録データ１５２は、あるオブジェクト（図３に示す例では、スカート）について、動きの大きさの異なる形状を含む。図３に示す例では、Ｓ１、Ｓ２、Ｓ３、Ｓ４の順で動きが大きくなっている。

【0061】

図６及び図７は、音高とオブジェクトの形状の対応関係の一例を概略的に示す。図６の対応付けデータ１６０では、「音高：４４」に対して「形状：Ｓ１」が対応付けられ、「音高：４９」に対して「形状：Ｓ２」が対応付けられている。図７の対応付けデータ１７０では、「音高：４４」に対して「形状：Ｓ１」が対応付けられ、「音高：４９」に対して「形状：Ｓ４」が対応付けられている。

【0062】

図６に示す例において、「音高：４５、４６、４７、４８」や、「音高：４４」より低い音高や、「音高：４９」より高い音高に対しては、「形状：Ｓ１」及び「形状：Ｓ２」から補完した形状が登録され得る。

【0063】

図７に示す例において、「音高：４５、４６、４７、４８」や、「音高：４４」より低い音高や、「音高：４９」より高い音高に対しては、「形状：Ｓ１」及び「形状：Ｓ４」から補完した形状が登録され得る。

【0064】

データ処理装置１００の利用者及び通信端末４００の利用者等は、オブジェクトの動きの大げさ度合を小にしたい場合、図６に例示するように、２つの音高に対して、動きの差の小さい形状を登録し得る。また、データ処理装置１００の利用者及び通信端末４００の利用者等は、オブジェクトの動きの大げさ度合を大にしたい場合、図７に例示するように、２つの音高に対して、動きの差の大きい形状を登録し得る。

【0065】

図８は、登録部１３２による登録データ１５４の一例を概略的に示す。登録データ１５４は、あるオブジェクト（図９に示す例では、コート）について、オリジナルの形状１５６（Ｏｒｉｇｉｎａｌ）と、変形された形状１５８（Ｄｅｆｏｒｍｅｄ）とを含む。

【0066】

形状１５６は、例えば、動きの大きさが最小の形状であってよく、形状１５８は、動きの大きさが最大の形状であってよい。形状１５８は、形状１５６におけるメッシュの頂点間隔の移動の最大値を設定することによって生成され得る。

【0067】

例えば、形状１５６における頂点ｖ１とｖ２の間の距離ｄ＝１の時、形状１５８のとり得る最大距離ｄ＝１０とすると、コートが伸びたように見える。これにより、任意オン大げさな表現が可能となる。

【0068】

図９は、衣服３００の各部に対して、音楽を構成する複数のパートのそれぞれを割り当てる割り当てについて説明するための説明図である。いわゆるバンドやオーケストラ等のように、音楽が複数のパートによって構成される場合、データ更新部１３４は、オブジェクトの各部の動きを、それぞれに対応するパートに基づいて更新してもよい。データ更新部１３４は、例えば、複数のパートのうちの第１のパートに基づいて、オブジェクトの第１の部分の動きを更新し、複数のパートのうちの第２のパートに基づいて、オブジェクトの第２の部分の動きを更新する。

【0069】

例えば、データ処理装置１００の利用者及び通信端末４００の利用者等は、あまり大きな動きはさせたくないが、音楽に合わせて少し動いてほしい部分３０２に対して、音高の変化が少ないパートを割り当て得る。また、例えば、データ処理装置１００の利用者及び通信端末４００の利用者等は、音楽に合わせて激しく動いてほしい部分３０４及び部分３０６に対して、音高の変化が多いパートを割り当て得る。このように、本実施形態に係るデータ処理装置１００によれば、オブジェクトの各部の動きが、それぞれ別のパートに合わせて変化するアニメーションデータを生成することができる。

【0070】

データ更新部１３４は、音楽データの音楽が複数のパートによって構成され、アニメーションデータが複数のオブジェクトを含む場合に、複数のオブジェクトのそれぞれの動きを、それぞれに対応するパートに基づいて更新してもよい。データ更新部１３４は、例えば、複数のパートのうちの第１のパートに基づいて、複数のオブジェクトのうちの第１のオブジェクトの動きを更新し、複数のパートのうちの第２のパートに基づいて、複数のオブジェクトのうちの第２のオブジェクトの動きを更新する。これにより、アニメーションデータに含まれる複数のオブジェクトが、音楽データの音楽を構成する複数のパートのそれぞれに応じて動くようなアニメーションデータを生成することができる。

【0071】

図１０は、データ処理装置１００として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。コンピュータ１２００にインストールされたプログラムは、コンピュータ１２００を、本実施形態に係る装置の１又は複数の「部」として機能させ、又はコンピュータ１２００に、本実施形態に係る装置に関連付けられるオペレーション又は当該１又は複数の「部」を実行させることができ、及び／又はコンピュータ１２００に、本実施形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ１２００に、本明細書に記載のフローチャート及びブロック図のブロックのうちのいくつか又はすべてに関連付けられた特定のオペレーションを実行させるべく、ＣＰＵ１２１２によって実行されてよい。

【0072】

本実施形態によるコンピュータ１２００は、ＣＰＵ１２１２、ＲＡＭ１２１４、及びグラフィックコントローラ１２１６を含み、それらはホストコントローラ１２１０によって相互に接続されている。コンピュータ１２００はまた、ＧＰＵ１２５０を含む。コンピュータ１２００はまた、通信インタフェース１２２２、記憶装置１２２４、ＤＶＤドライブ、及びＩＣカードドライブのような入出力ユニットを含み、それらは入出力コントローラ１２２０を介してホストコントローラ１２１０に接続されている。ＤＶＤドライブは、ＤＶＤ－ＲＯＭドライブ及びＤＶＤ－ＲＡＭドライブ等であってよい。記憶装置１２２４は、ハードディスクドライブ及びソリッドステートドライブ等であってよい。コンピュータ１２００はまた、ＲＯＭ１２３０及びキーボードのようなレガシの入出力ユニットを含み、それらは入出力チップ１２４０を介して入出力コントローラ１２２０に接続されている。

【0073】

ＣＰＵ１２１２は、ＲＯＭ１２３０及びＲＡＭ１２１４内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ１２１６は、ＲＡＭ１２１４内に提供されるフレームバッファ等又はそれ自体の中に、ＣＰＵ１２１２によって生成されるイメージデータを取得し、イメージデータがディスプレイデバイス１２１８上に表示されるようにする。

【0074】

通信インタフェース１２２２は、ネットワークを介して他の電子デバイスと通信する。記憶装置１２２４は、コンピュータ１２００内のＣＰＵ１２１２によって使用されるプログラム及びデータを格納する。ＤＶＤドライブは、プログラム又はデータをＤＶＤ－ＲＯＭ等から読み取り、記憶装置１２２４に提供する。ＩＣカードドライブは、プログラム及びデータをＩＣカードから読み取り、及び／又はプログラム及びデータをＩＣカードに書き込む。

【0075】

ＲＯＭ１２３０はその中に、アクティブ化時にコンピュータ１２００によって実行されるブートプログラム等、及び／又はコンピュータ１２００のハードウェアに依存するプログラムを格納する。入出力チップ１２４０はまた、様々な入出力ユニットをＵＳＢポート、パラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入出力コントローラ１２２０に接続してよい。

【0076】

プログラムは、ＤＶＤ－ＲＯＭ又はＩＣカードのようなコンピュータ可読記憶媒体によって提供される。プログラムは、コンピュータ可読記憶媒体から読み取られ、コンピュータ可読記憶媒体の例でもある記憶装置１２２４、ＲＡＭ１２１４、又はＲＯＭ１２３０にインストールされ、ＣＰＵ１２１２によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ１２００に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ１２００の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。

【0077】

例えば、通信がコンピュータ１２００及び外部デバイス間で実行される場合、ＣＰＵ１２１２は、ＲＡＭ１２１４にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース１２２２に対し、通信処理を命令してよい。通信インタフェース１２２２は、ＣＰＵ１２１２の制御の下、ＲＡＭ１２１４、記憶装置１２２４、ＤＶＤ－ＲＯＭ、又はＩＣカードのような記録媒体内に提供される送信バッファ領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、又はネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。

【0078】

また、ＣＰＵ１２１２は、記憶装置１２２４、ＤＶＤドライブ（ＤＶＤ－ＲＯＭ）、ＩＣカード等のような外部記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がＲＡＭ１２１４に読み取られるようにし、ＲＡＭ１２１４上のデータに対し様々なタイプの処理を実行してよい。ＣＰＵ１２１２は次に、処理されたデータを外部記録媒体にライトバックしてよい。

【0079】

様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。ＣＰＵ１２１２は、ＲＡＭ１２１４から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索／置換等を含む、様々なタイプの処理を実行してよく、結果をＲＡＭ１２１４に対しライトバックする。また、ＣＰＵ１２１２は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第２の属性の属性値に関連付けられた第１の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、ＣＰＵ１２１２は、当該複数のエントリの中から、第１の属性の属性値が指定されている条件に一致するエントリを検索し、当該エントリ内に格納された第２の属性の属性値を読み取り、それにより予め定められた条件を満たす第１の属性に関連付けられた第２の属性の属性値を取得してよい。

【0080】

上で説明したプログラム又はソフトウエアモジュールは、コンピュータ１２００上又はコンピュータ１２００近傍のコンピュータ可読記憶媒体に格納されてよい。また、専用通信ネットワーク又はインターネットに接続されたサーバシステム内に提供されるハードディスク又はＲＡＭのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ１２００に提供する。

【0081】

本実施形態におけるフローチャート及びブロック図におけるブロックは、オペレーションが実行されるプロセスの段階又はオペレーションを実行する役割を持つ装置の「部」を表わしてよい。特定の段階及び「部」が、専用回路、コンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び／又はコンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び／又はアナログハードウェア回路を含んでよく、集積回路（ＩＣ）及び／又はディスクリート回路を含んでよい。プログラマブル回路は、例えば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、及びプログラマブルロジックアレイ（ＰＬＡ）等のような、論理積、論理和、排他的論理和、否定論理積、否定論理和、及び他の論理演算、フリップフロップ、レジスタ、並びにメモリエレメントを含む、再構成可能なハードウェア回路を含んでよい。

【0082】

コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読記憶媒体は、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピー（登録商標）ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリメモリ（ＲＯＭ）、消去可能プログラマブルリードオンリメモリ（ＥＰＲＯＭ又はフラッシュメモリ）、電気的消去可能プログラマブルリードオンリメモリ（ＥＥＰＲＯＭ）、静的ランダムアクセスメモリ（ＳＲＡＭ）、コンパクトディスクリードオンリメモリ（ＣＤ－ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、ブルーレイ（登録商標）ディスク、メモリスティック、集積回路カード等が含まれてよい。

【0083】

コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ（ＩＳＡ）命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はＳｍａｌｌｔａｌｋ（登録商標）、ＪＡＶＡ（登録商標）、Ｃ＋＋等のようなオブジェクト指向プログラミング言語、及び「Ｃ」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、１又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。

【0084】

コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路が、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を生成するために当該コンピュータ可読命令を実行すべく、ローカルに又はローカルエリアネットワーク（ＬＡＮ）、インターネット等のようなワイドエリアネットワーク（ＷＡＮ）を介して、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路に提供されてよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。

【0085】

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。その様な変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、請求の範囲の記載から明らかである。

【0086】

請求の範囲、明細書、及び図面中において示した装置、システム、プログラム、及び方法における動作、手順、ステップ、及び段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。請求の範囲、明細書、及び図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。

【符号の説明】

【0087】

２０ ネットワーク、１００ データ処理装置、１０２ データ受信部、１１０ アニメーションデータ取得部、１１２ アニメーションデータ生成部、１２０ 音楽データ取得部、１３２ 登録部、１３４ データ更新部、１３６ 再生制御部、１４２ 登録部、１４４ 音楽データ生成部、１５０ カメラ、１５２ 登録データ、１５４ 登録データ、１６０ 対応付けデータ、１７０ 対応付けデータ、２００ 楽譜、２０２ 平均速度、２０４ 拍子、２１０ ＭＩＤＩデータ、３００ 衣服、３０２ 部分、３０４ 部分、３０６ 部分、４００ 通信端末、４５０ カメラ、１２００ コンピュータ、１２１０ ホストコントローラ、１２１２ ＣＰＵ、１２１４ ＲＡＭ、１２１６ グラフィックコントローラ、１２１８ ディスプレイデバイス、１２２０ 入出力コントローラ、１２２２ 通信インタフェース、１２２４ 記憶装置、１２３０ ＲＯＭ、１２４０ 入出力チップ、１２５０ ＧＰＵ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】