知財求人 - 知財ポータルサイト「IP Force」
▶ 株式会社ワコールの特許一覧 ▶ 株式会社ＯｒｂｉｓＢｒａｉｎの特許一覧
特開2023-90566スキンモデルから肉付きに基づく体形を統計的に分析するプログラム、装置及び方法
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023090566
(43)【公開日】2023-06-29
(54)【発明の名称】スキンモデルから肉付きに基づく体形を統計的に分析するプログラム、装置及び方法
(51)【国際特許分類】
G06T 7/00 20170101AFI20230622BHJP
【ＦＩ】
G06T7/00 660B
G06T7/00 C
G06T7/00 350B
【審査請求】有
【請求項の数】14
【出願形態】ＯＬ
(21)【出願番号】P 2021205593
(22)【出願日】2021-12-17
(11)【特許番号】
(45)【特許公報発行日】2022-08-17
(71)【出願人】
【識別番号】306033379
【氏名又は名称】株式会社ワコール
(71)【出願人】
【識別番号】320001411
【氏名又は名称】株式会社ＯｒｂｉｓＢｒａｉｎ
(74)【代理人】
【識別番号】100135068
【弁理士】
【氏名又は名称】早原 茂樹
(72)【発明者】
【氏名】有光 裕樹
(72)【発明者】
【氏名】松井 孝明
【テーマコード（参考）】
5L096
【Ｆターム（参考）】
5L096AA09
5L096DA01
5L096EA27
5L096FA09
5L096FA46
5L096FA69
5L096HA11
5L096KA04
5L096KA15
(57)【要約】
【課題】複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析するプログラム等を提供する。
【解決手段】関節点毎に、関節座標系が設定されており、スキンモデル（人体モデル）における頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンとして機能させる。関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成する。スケルトンは、人体の骨格であり、ボーンは、関節点間の骨であり、円筒中心点からの半径ｒは、骨格に対する肉付きとなる。
【選択図】図２
【解決手段】関節点毎に、関節座標系が設定されており、スキンモデル（人体モデル）における頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンとして機能させる。関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成する。スケルトンは、人体の骨格であり、ボーンは、関節点間の骨であり、円筒中心点からの半径ｒは、骨格に対する肉付きとなる。
【選択図】図２
【特許請求の範囲】
【請求項1】
複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置に搭載されたコンピュータを機能させるプログラムであって、
関節点毎に、関節座標系が設定されており、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
してコンピュータを機能させることを特徴とするプログラム。
関節点毎に、関節座標系が設定されており、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
してコンピュータを機能させることを特徴とするプログラム。
【請求項2】
頂点位置ベクトル抽出手段は、各関節点の回転行列Ｒと位置ｔとからなる同次座標変換行列Ａを算出し、全ての頂点ｖの位置からなる頂点行列Ｖを、同次座標変換行列Ａ-1によって関節座標系に変換した頂点行列Ｖ'を、各関節点に対する頂点位置ベクトルとして抽出する
ようにコンピュータを機能させることを特徴とする請求項１に記載のプログラム。
ようにコンピュータを機能させることを特徴とする請求項１に記載のプログラム。
【請求項3】
１体のポリゴンメッシュから、関節点の位置を推定する関節点推定手段と
して更にコンピュータを機能させることを特徴とする請求項１又は２に記載のプログラム。
して更にコンピュータを機能させることを特徴とする請求項１又は２に記載のプログラム。
【請求項4】
関節点推定手段は、関節点学習エンジンであり、
訓練段階として、教師データ群の複数体のポリゴンメッシュをそれぞれ入力し、関節点の位置を出力するように関節点学習モデルを構築し、
推定段階として、推定対象となるポリゴンメッシュを入力し、関節点の位置を出力する
ようにコンピュータを機能させることを特徴とする請求項３に記載のプログラム。
訓練段階として、教師データ群の複数体のポリゴンメッシュをそれぞれ入力し、関節点の位置を出力するように関節点学習モデルを構築し、
推定段階として、推定対象となるポリゴンメッシュを入力し、関節点の位置を出力する
ようにコンピュータを機能させることを特徴とする請求項３に記載のプログラム。
【請求項5】
エンコーダとしての推定段階として、
統計学習エンジンは、推定対象となる１体のポリゴンメッシュにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力する
ようにコンピュータを機能させることを特徴とする請求項１から４のいずれか１項に記載のプログラム。
統計学習エンジンは、推定対象となる１体のポリゴンメッシュにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力する
ようにコンピュータを機能させることを特徴とする請求項１から４のいずれか１項に記載のプログラム。
【請求項6】
デコーダとしての推定段階として、
統計学習エンジンは、推定対象となる成分変数を入力し、１体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを出力し、
当該頂点毎の各関節点の頂点位置ベクトルから、１体のスキンモデルを再生するスキニング手段と
してコンピュータを機能させることを特徴とする請求項１から４のいずれか１項に記載のプログラム。
統計学習エンジンは、推定対象となる成分変数を入力し、１体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを出力し、
当該頂点毎の各関節点の頂点位置ベクトルから、１体のスキンモデルを再生するスキニング手段と
してコンピュータを機能させることを特徴とする請求項１から４のいずれか１項に記載のプログラム。
【請求項7】
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
関節点毎の関節座標系は、当該関節点を親として子関節点へ向かう方向をｚ軸とし、当該関節点の屈曲する方向をｘ軸とし、ｘ軸及びｚ軸と直交する方向をｙ軸として設定される
ようにコンピュータを機能させることを特徴とする請求項１から６のいずれか１項に記載のプログラム。
関節点毎の関節座標系は、当該関節点を親として子関節点へ向かう方向をｚ軸とし、当該関節点の屈曲する方向をｘ軸とし、ｘ軸及びｚ軸と直交する方向をｙ軸として設定される
ようにコンピュータを機能させることを特徴とする請求項１から６のいずれか１項に記載のプログラム。
【請求項8】
頂点毎の各関節点に対する頂点位置ベクトルを、当該関節点から子関節点へ向かう方向の距離ｚと、円筒中心点からの半径ｒと、円筒中心点の径方向の角度θとした円筒座標で表現する
ようにコンピュータを機能させることを特徴とする請求項７に記載のプログラム。
ようにコンピュータを機能させることを特徴とする請求項７に記載のプログラム。
【請求項9】
スキンモデルは、人体モデルであり、
スケルトンは、人体の骨格であり、
ボーンは、関節点間の骨であり、
円筒中心点からの半径ｒは、骨格に対する肉付きとなる
ようにコンピュータを機能させることを特徴とする請求項８に記載のプログラム。
スケルトンは、人体の骨格であり、
ボーンは、関節点間の骨であり、
円筒中心点からの半径ｒは、骨格に対する肉付きとなる
ようにコンピュータを機能させることを特徴とする請求項８に記載のプログラム。
【請求項10】
スキンモデルについて、頂点毎に、影響を及ぼす１つ以上の関節点が予め設定されており、
頂点位置ベクトル抽出手段は、頂点毎に、予め設定された各関節点に対する頂点位置ベクトルを抽出する
ようにコンピュータを機能させることを特徴とする請求項１から９のいずれか１項に記載のプログラム。
頂点位置ベクトル抽出手段は、頂点毎に、予め設定された各関節点に対する頂点位置ベクトルを抽出する
ようにコンピュータを機能させることを特徴とする請求項１から９のいずれか１項に記載のプログラム。
【請求項11】
統計学習エンジンは、主成分分析(Principal Component Analysis)又はオートエンコーダ(AutoEncoder)に基づくものである
ようにコンピュータを機能させることを特徴とする請求項１から１０のいずれか１項に記載のプログラム。
ようにコンピュータを機能させることを特徴とする請求項１から１０のいずれか１項に記載のプログラム。
【請求項12】
教師データ群として、スキンモデル毎に、複数の周径採寸箇所に対応する次元数ｎの周径採寸値が対応付けられており、
スキンモデル毎に、次元数ｎの周径採寸値と、統計学習エンジンによって出力された次元数ｍの成分変数とを対応付けて学習した相関学習モデルを構築する相関学習エンジンと
して機能させ、
相関学習エンジンを用いて、対象データとしての１体の次元数ｎの周径採寸値から、次元数ｍの成分変数へエンコードし、
相関学習エンジンを用いて、統計学習エンジンから出力された当該次元数ｍの成分変数から、１体の次元数ｎの周径採寸値へデコードする
ようにコンピュータを機能させることを特徴とする請求項１から１１のいずれか１項に記載のプログラム。
スキンモデル毎に、次元数ｎの周径採寸値と、統計学習エンジンによって出力された次元数ｍの成分変数とを対応付けて学習した相関学習モデルを構築する相関学習エンジンと
して機能させ、
相関学習エンジンを用いて、対象データとしての１体の次元数ｎの周径採寸値から、次元数ｍの成分変数へエンコードし、
相関学習エンジンを用いて、統計学習エンジンから出力された当該次元数ｍの成分変数から、１体の次元数ｎの周径採寸値へデコードする
ようにコンピュータを機能させることを特徴とする請求項１から１１のいずれか１項に記載のプログラム。
【請求項13】
複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置分析装置であって、
関節点毎に、関節座標系が設定されており、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
を有することを特徴とする分析装置。
関節点毎に、関節座標系が設定されており、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
を有することを特徴とする分析装置。
【請求項14】
複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置の分析方法であって、
関節点毎に、関節座標系が設定されており、
装置は、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する第１のステップと、
訓練段階として、統計学習エンジンによって、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する第２のステップと
を実行することを特徴とする分析方法。
関節点毎に、関節座標系が設定されており、
装置は、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する第１のステップと、
訓練段階として、統計学習エンジンによって、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する第２のステップと
を実行することを特徴とする分析方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、スキンモデルを統計的に分析する技術に関する。特にスキンモデルとして、３次元の人体モデルに適する。
【背景技術】
【0002】
人体の形状データを取得するために、３次元ボディスキャナの技術がある（例えば非特許文献１参照）。この技術によれば、非接触の光学測量によって３次元の人体モデルを計測する。この人体モデルは、複数の頂点からなるポリゴンをメッシュ状に構成した「スキン」として表現される。頂点数は、例えば約150万点と超高密度で計測することもできる。
【0003】
従来、採寸値のみから３次元モデルを簡易に生成すると共に、次元圧縮によってデータ容量を小さくする技術がある（例えば特許文献１参照）。この技術によれば、３次元モデル毎に、複数の採寸箇所に対応する次元数ｎの採寸値が対応付けられている教師データ群を用いて、１体の次元数ｎの採寸値から、３次元モデルを生成することができる。具体的には、教師データ群の複数体の３次元モデルから、次元圧縮された次元数ｍの成分変数を出力すると共に、統計学習モデルを構築する統計学習エンジンと、次元数ｎの採寸値と、次元数ｍの成分変数との相関学習モデルを構築する相関学習エンジンとを有する。また、相関学習エンジンを用いて、対象データとしての１体の次元数ｎの採寸値から次元数ｍの成分変数を生成するエンコード部と、統計学習エンジンを用いて、当該次元数ｍの成分変数から３次元モデルを生成するデコード部とを有する。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特許６４２４３０９号公報
【非特許文献】
【0005】
【非特許文献1】「smart&try」、株式会社ワコール、[online]、［令和３年１１月２０日検索］、インターネット＜URL:https://www.wacoal.jp/smart_try/＞
【非特許文献2】「人間工学」、[online]、［令和３年１１月２０日検索］、インターネット＜URL:https://www.cc.miyazaki-u.ac.jp/mitarai/room707/ergo002.html＞
【非特許文献3】向井智彦、川地克明、三宅陽一郎、「キャラクタアニメーションの数理とシステム、－３次元ゲームにおける身体運動生成と人工知能－」、[online]、［令和３年１１月２０日検索］、インターネット＜URL:https://www.coronasha.co.jp/np/isbn/9784339029093/＞
【発明の概要】
【発明が解決しようとする課題】
【0006】
特許文献１に記載の技術によれば、３次元モデルは、各頂点を、世界座標系(World coordinate system, Global coordinate system)の３次元(x,y,z)で表現する。例えば１体毎に頂点数がN=150万である場合、１体の３次元モデルは、3N（＝450万）次元のベクトルで表現される。そして、例えば6000体ほどの３次元モデルを、統計学習エンジンに入力し、成分変数を得ることができる。統計学習エンジンは、具体的には、主成分分析(Principal Component Analysis)に基づくものである。
【0007】
３次元の人体モデルを取得するためには、人物が実際に３次元ボディスキャナ内に入って撮影しなければならないが、このとき、人物毎に姿勢のばらつきが生じる。世界座標系である場合、同一人物であっても、その人物の姿勢の影響を受けて、異なる３次元モデルが取得されることとなる。
姿勢は、関節点の位置に応じて異なる。例えば全く同一の人物であっても、両足を開いた場合と、両足を閉じた場合とでは、特に足の部分で大きく異なる人体モデルとして取得されることとなる。また、３次元スキャナによって計測する場合、生身の人物である全員に、同一姿勢を強要することは非常に難しい。
即ち、３次元スキャナによって人体を計測した場合、人体の長さや周径に基づく「体形」と、人体の関節の位置に基づく「姿勢」とが混在したデータとなってしまう。
姿勢は、関節点の位置に応じて異なる。例えば全く同一の人物であっても、両足を開いた場合と、両足を閉じた場合とでは、特に足の部分で大きく異なる人体モデルとして取得されることとなる。また、３次元スキャナによって計測する場合、生身の人物である全員に、同一姿勢を強要することは非常に難しい。
即ち、３次元スキャナによって人体を計測した場合、人体の長さや周径に基づく「体形」と、人体の関節の位置に基づく「姿勢」とが混在したデータとなってしまう。
【0008】
これに対し、本願の発明者らは、３次元スキャナによって計測された人体の３次元モデルから、「姿勢」を分離した「体形」のみを抽出することができないか、と考えた。これによって、同一人物が、異なる「姿勢」を取ったとしても、比較的同一の「体形」のみを得ることができるのではないか、と考えた。
【0009】
例えば「体形」に基づく採寸値としては、身長や股下長のような「長さ」と、腹囲や太もも径のような「周径」とがある。ここで、長さは、人体の骨格長に基づくものであり、周径は、骨の周りの肉付きに基づくものである。本来、このような人体の「体形」に基づく長さや周径は、「姿勢」の影響を受けないものである。一方で、人の体形における「肥満」「痩身」などの判定は、本来、骨格に基づくものではなく、骨の周りの肉付きが基準となるものである。
【0010】
これに対し、本願の発明者らは、複数体の３次元モデルについて、「姿勢」を分離した「肉付きに基づく体形」のみのデータから、次元圧縮した成分変数を得ることは、統計的な体形の分析に役立つと考えた。特に、人体の部位毎の肉付きの違いは外観的印象を分析するための要素となる、と考えた。
【0011】
そこで、本発明によれば、スキンモデルから肉付きに基づく体形を分析可能な統計形状空間を生成するプログラム、装置及び方法を提供することを目的とする。
【課題を解決するための手段】
【0012】
本発明によれば、複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置に搭載されたコンピュータを機能させるプログラムであって、
関節点毎に、関節座標系が設定されており、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
してコンピュータを機能させることを特徴とする。
関節点毎に、関節座標系が設定されており、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
してコンピュータを機能させることを特徴とする。
【0013】
本発明のプログラムにおける他の実施形態によれば、
頂点位置ベクトル抽出手段は、各関節点の回転行列Ｒと位置ｔとからなる同次座標変換行列Ａを算出し、全ての頂点ｖの位置からなる頂点行列Ｖを、同次座標変換行列Ａ-1によって関節座標系に変換した頂点行列Ｖ'を、各関節点に対する頂点位置ベクトルとして抽出する
ようにコンピュータを機能させることも好ましい。
頂点位置ベクトル抽出手段は、各関節点の回転行列Ｒと位置ｔとからなる同次座標変換行列Ａを算出し、全ての頂点ｖの位置からなる頂点行列Ｖを、同次座標変換行列Ａ-1によって関節座標系に変換した頂点行列Ｖ'を、各関節点に対する頂点位置ベクトルとして抽出する
ようにコンピュータを機能させることも好ましい。
【0014】
本発明のプログラムにおける他の実施形態によれば、
１体のポリゴンメッシュから、関節点の位置を推定する関節点推定手段と
して更にコンピュータを機能させることも好ましい。
１体のポリゴンメッシュから、関節点の位置を推定する関節点推定手段と
して更にコンピュータを機能させることも好ましい。
【0015】
本発明のプログラムにおける他の実施形態によれば、
関節点推定手段は、関節点学習エンジンであり、
訓練段階として、教師データ群の複数体のポリゴンメッシュをそれぞれ入力し、関節点の位置を出力するように関節点学習モデルを構築し、
推定段階として、推定対象となるポリゴンメッシュを入力し、関節点の位置を出力する
ようにコンピュータを機能させることも好ましい。
関節点推定手段は、関節点学習エンジンであり、
訓練段階として、教師データ群の複数体のポリゴンメッシュをそれぞれ入力し、関節点の位置を出力するように関節点学習モデルを構築し、
推定段階として、推定対象となるポリゴンメッシュを入力し、関節点の位置を出力する
ようにコンピュータを機能させることも好ましい。
【0016】
本発明のプログラムにおける他の実施形態によれば、
エンコーダとしての推定段階として、
統計学習エンジンは、推定対象となる１体のポリゴンメッシュにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力する
ようにコンピュータを機能させることも好ましい。
エンコーダとしての推定段階として、
統計学習エンジンは、推定対象となる１体のポリゴンメッシュにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力する
ようにコンピュータを機能させることも好ましい。
【0017】
本発明のプログラムにおける他の実施形態によれば、
デコーダとしての推定段階として、
統計学習エンジンは、推定対象となる成分変数を入力し、１体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを出力し、
当該頂点毎の各関節点の頂点位置ベクトルから、１体のスキンモデルを再生するスキニング手段と
してコンピュータを機能させることも好ましい。
デコーダとしての推定段階として、
統計学習エンジンは、推定対象となる成分変数を入力し、１体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを出力し、
当該頂点毎の各関節点の頂点位置ベクトルから、１体のスキンモデルを再生するスキニング手段と
してコンピュータを機能させることも好ましい。
【0018】
本発明のプログラムにおける他の実施形態によれば、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
関節点毎の関節座標系は、当該関節点を親として子関節点へ向かう方向をｚ軸とし、当該関節点の屈曲する方向をｘ軸とし、ｘ軸及びｚ軸と直交する方向をｙ軸として設定される
ようにコンピュータを機能させることも好ましい。
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
関節点毎の関節座標系は、当該関節点を親として子関節点へ向かう方向をｚ軸とし、当該関節点の屈曲する方向をｘ軸とし、ｘ軸及びｚ軸と直交する方向をｙ軸として設定される
ようにコンピュータを機能させることも好ましい。
【0019】
本発明のプログラムにおける他の実施形態によれば、
頂点毎の各関節点に対する頂点位置ベクトルを、当該関節点から子関節点へ向かう方向の距離ｚと、円筒中心点からの半径ｒと、円筒中心点の径方向の角度θとした円筒座標で表現する
ようにコンピュータを機能させることも好ましい。
頂点毎の各関節点に対する頂点位置ベクトルを、当該関節点から子関節点へ向かう方向の距離ｚと、円筒中心点からの半径ｒと、円筒中心点の径方向の角度θとした円筒座標で表現する
ようにコンピュータを機能させることも好ましい。
【0020】
本発明のプログラムにおける他の実施形態によれば、
スキンモデルは、人体モデルであり、
スケルトンは、人体の骨格であり、
ボーンは、関節点間の骨であり、
円筒中心点からの半径ｒは、骨格に対する肉付きとなる
ようにコンピュータを機能させることも好ましい。
スキンモデルは、人体モデルであり、
スケルトンは、人体の骨格であり、
ボーンは、関節点間の骨であり、
円筒中心点からの半径ｒは、骨格に対する肉付きとなる
ようにコンピュータを機能させることも好ましい。
【0021】
本発明のプログラムにおける他の実施形態によれば、
スキンモデルについて、頂点毎に、影響を及ぼす１つ以上の関節点が予め設定されており、
頂点位置ベクトル抽出手段は、頂点毎に、予め設定された各関節点に対する頂点位置ベクトルを抽出する
ようにコンピュータを機能させることも好ましい。
スキンモデルについて、頂点毎に、影響を及ぼす１つ以上の関節点が予め設定されており、
頂点位置ベクトル抽出手段は、頂点毎に、予め設定された各関節点に対する頂点位置ベクトルを抽出する
ようにコンピュータを機能させることも好ましい。
【0022】
本発明のプログラムにおける他の実施形態によれば、
統計学習エンジンは、主成分分析(Principal Component Analysis)又はオートエンコーダ(AutoEncoder)に基づくものである
ようにコンピュータを機能させることも好ましい。
統計学習エンジンは、主成分分析(Principal Component Analysis)又はオートエンコーダ(AutoEncoder)に基づくものである
ようにコンピュータを機能させることも好ましい。
【0023】
本発明のプログラムにおける他の実施形態によれば、
教師データ群として、スキンモデル毎に、複数の周径採寸箇所に対応する次元数ｎの周径採寸値が対応付けられており、
スキンモデル毎に、次元数ｎの周径採寸値と、統計学習エンジンによって出力された次元数ｍの成分変数とを対応付けて学習した相関学習モデルを構築する相関学習エンジンと
して機能させ、
相関学習エンジンを用いて、対象データとしての１体の次元数ｎの周径採寸値から、次元数ｍの成分変数へエンコードし、
相関学習エンジンを用いて、統計学習エンジンから出力された当該次元数ｍの成分変数から、１体の次元数ｎの周径採寸値へデコードする
ようにコンピュータを機能させることも好ましい。
教師データ群として、スキンモデル毎に、複数の周径採寸箇所に対応する次元数ｎの周径採寸値が対応付けられており、
スキンモデル毎に、次元数ｎの周径採寸値と、統計学習エンジンによって出力された次元数ｍの成分変数とを対応付けて学習した相関学習モデルを構築する相関学習エンジンと
して機能させ、
相関学習エンジンを用いて、対象データとしての１体の次元数ｎの周径採寸値から、次元数ｍの成分変数へエンコードし、
相関学習エンジンを用いて、統計学習エンジンから出力された当該次元数ｍの成分変数から、１体の次元数ｎの周径採寸値へデコードする
ようにコンピュータを機能させることも好ましい。
【0024】
本発明によれば、複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する分析装置であって、
関節点毎に、関節座標系が設定されており、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
を有することを特徴とする。
関節点毎に、関節座標系が設定されており、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
を有することを特徴とする。
【0025】
本発明によれば、複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置の分析方法であって、
関節点毎に、関節座標系が設定されており、
装置は、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する第１のステップと、
訓練段階として、統計学習エンジンによって、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する第２のステップと
を実行することを特徴とする。
関節点毎に、関節座標系が設定されており、
装置は、
スキンモデルにおける頂点毎に各関節点に対する頂点位置ベクトルを抽出する第１のステップと、
訓練段階として、統計学習エンジンによって、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する第２のステップと
を実行することを特徴とする。
【発明の効果】
【0026】
本発明のプログラム、装置及び方法によれば、スキンモデルから肉付きに基づく体形を分析可能な統計形状空間を生成することができる。
【図面の簡単な説明】
【0027】
【図1】関節点と頂点との関係を表す説明図である。
【図2】本発明における分析装置の基本的な機能構成図である。
【図3】本発明における関節点の関節座標系とポリゴンメッシュの頂点とを表す説明図である。
【図4】関節点と頂点との関係を円筒座標系で表す説明図である。
【図5】統計学習エンジンにおける３次元モデルのベクトル空間を表す説明図である。
【図6】統計学習エンジンにおける統計形状空間を表す説明図である。
【図7】統計学習エンジンにおける主成分分析を表す簡易なコードである。
【図8】関節点推定部及びスキニング部を更に有する分析装置の機能構成図である。
【図9】統計学習エンジンを用いた相関学習エンジンの訓練段階の構成図である。
【図10】計測値から導出した計測値空間を表す説明図である。
【図11】統計形状空間と計測値空間との線形変換を表す説明図である。
【図12】相関学習エンジンの第１の推定段階の構成図である。
【図13】相関学習エンジンの第２の推定段階の構成図である。
【発明を実施するための形態】
【0028】
以下では、本発明の実施の形態について、図面を用いて詳細に説明する。
【0029】
図１は、関節点と頂点との関係を表す説明図である。
【0030】
本発明の実施形態によれば、用語を、以下のように定義する。
「スキン」 ：複数の頂点からなるポリゴンメッシュ
（例えば人体を３次元スキャナで撮影した人体のポリゴンメッシュ）
「スキンモデル」 ：スキンに複数の関節点を内在するモデル
「関節点」 ：スキンを変形させるジョイント（例えば人体の関節）
「ボーン」 ：関節点を結ぶ線分（例えば人体の骨）
「スケルトン」 ：関節点同士を親子関係によってボーンで結んだ構成
（例えば人体の骨格）
「スキンウェイト」：関節点がスキンの各頂点に及ぼす影響度
「スキン」 ：複数の頂点からなるポリゴンメッシュ
（例えば人体を３次元スキャナで撮影した人体のポリゴンメッシュ）
「スキンモデル」 ：スキンに複数の関節点を内在するモデル
「関節点」 ：スキンを変形させるジョイント（例えば人体の関節）
「ボーン」 ：関節点を結ぶ線分（例えば人体の骨）
「スケルトン」 ：関節点同士を親子関係によってボーンで結んだ構成
（例えば人体の骨格）
「スキンウェイト」：関節点がスキンの各頂点に及ぼす影響度
【0031】
図１によれば、人体は、例えば頂点数150万頂点のポリゴンメッシュで表現されている。また、関節点は、例えば以下の１５箇所とする。
「頚椎」
「中央胸」
「左肩」「左肘」「左手首」
「右肩」「右肘」「右手首」
「中央腰」
「左腰」「左膝」「左足首」
「右腰」「右膝」「右足首」
「頚椎」
「中央胸」
「左肩」「左肘」「左手首」
「右肩」「右肘」「右手首」
「中央腰」
「左腰」「左膝」「左足首」
「右腰」「右膝」「右足首」
【0032】
図２は、本発明における分析装置の基本的な機能構成図である。
【0033】
分析装置１は、複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する。スキンモデルを成分変数に次元圧縮し、「肉付きに基づく体形」を分析可能とする統計形状空間を生成する。
図２によれば、分析装置１は、頂点位置ベクトル抽出部１１と、統計学習エンジン１２とを有する。これら機能構成部は、分析装置に搭載されたコンピュータを機能させるプログラムを実行させることによって実現される。また、これら機能構成部の処理の流れは、分析方法としても理解できる。
図２によれば、分析装置１は、頂点位置ベクトル抽出部１１と、統計学習エンジン１２とを有する。これら機能構成部は、分析装置に搭載されたコンピュータを機能させるプログラムを実行させることによって実現される。また、これら機能構成部の処理の流れは、分析方法としても理解できる。
【0034】
分析装置１は、統計学習のための教師データとして、多数のスキンモデルを準備する。前述したように、スキンモデルは、スキンに複数の関節点を内在したものである。関節点は、ボーンによって親子関係で結ばれている。スキンモデルが人体である場合、人体のポリゴンメッシュに、関節点を結んだ骨格を内在したものである。即ち、不特定多数の人物から取得した人体のスキンモデルを準備する。
尚、本発明が想定する関節点や骨格とは、人体の解剖学的なものではなく、あくまで動き（モーション）の際の基軸となるものに過ぎない。
尚、本発明が想定する関節点や骨格とは、人体の解剖学的なものではなく、あくまで動き（モーション）の際の基軸となるものに過ぎない。
【0035】
［頂点位置ベクトル抽出部１１］
頂点位置ベクトル抽出部１１は、スキンモデルにおける頂点毎に各関節点に対する「頂点位置ベクトル」を抽出する。
頂点位置ベクトル抽出部１１は、スキンモデルにおける頂点毎に各関節点に対する「頂点位置ベクトル」を抽出する。
【0036】
図３は、本発明における関節点の関節座標系とポリゴンメッシュの頂点とを表す説明図である。
【0037】
＜位置ベクトル＞
ポリゴンメッシュの各頂点は、以下のように３次元の世界座標系を基準として表現される。世界座標系では基本的に、ｙ軸正方向を鉛直上向き方向、ｘ－ｚ平面を水平面とした座標系とする。
そして、頂点の位置ベクトルと、関節点の位置ベクトルとを、以下のように表す。
ポリゴンメッシュの各頂点は、以下のように３次元の世界座標系を基準として表現される。世界座標系では基本的に、ｙ軸正方向を鉛直上向き方向、ｘ－ｚ平面を水平面とした座標系とする。
そして、頂点の位置ベクトルと、関節点の位置ベクトルとを、以下のように表す。
【数1】
【0038】
＜関節座標系＞
関節点毎に、関節座標系を、以下のように設定する。
ｚ軸：当該関節点を親として子関節点へ向かう方向
ｘ軸：当該関節点の屈曲する方向
ｙ軸：ｘ軸及びｚ軸と直交する方向
尚、人体の骨格は、関節点を結ぶツリー構造として表現される。
関節点毎に、関節座標系を、以下のように設定する。
ｚ軸：当該関節点を親として子関節点へ向かう方向
ｘ軸：当該関節点の屈曲する方向
ｙ軸：ｘ軸及びｚ軸と直交する方向
尚、人体の骨格は、関節点を結ぶツリー構造として表現される。
【0039】
図３によれば、肩関節点の関節座標系と、ヒジ関節点の関節座標系とが表されている。肩関節点の関節座標系のｚ軸は、肩関節点の子関節点となるヒジ関節点へ向かう方向へ設定される。また、肩関節点の関節座標系のｘ軸は、肩関節点の屈曲する方向へ設定される。そして、肩関節点の関節座標系のｙ軸は、ｘ軸及びｚ軸と直交する方向に設定される。
【0040】
＜頂点位置ベクトル（同次座標変換行列）＞
頂点位置ベクトル抽出部１１は、各関節点の回転行列Ｒと位置ｔとからなる同次座標変換行列Ａを算出する。
同次座標系(homogeneous coordinate system)は、平行移動を含む全ての座標変換を行列演算とした記法である（例えば非特許文献３参照）。これは、３次元空間の位置や方向を表すベクトルを、同次座標の成分を加えた４次元ベクトルとして表現する。
各関節点の関節座標系の基底ベクトル： ｒx，ｒy，ｒz
（単位ベクトルで互いに直交（正規直交基底））
尚、この表記は、行ベクトルで、行列が右から作用する場合の表現である。列ベクトルで、行列が左から作用する場合は、回転行列や同次変換行列を転置する。
頂点位置ベクトル抽出部１１は、各関節点の回転行列Ｒと位置ｔとからなる同次座標変換行列Ａを算出する。
同次座標系(homogeneous coordinate system)は、平行移動を含む全ての座標変換を行列演算とした記法である（例えば非特許文献３参照）。これは、３次元空間の位置や方向を表すベクトルを、同次座標の成分を加えた４次元ベクトルとして表現する。
各関節点の関節座標系の基底ベクトル： ｒx，ｒy，ｒz
（単位ベクトルで互いに直交（正規直交基底））
【数2】
【0041】
そして、頂点位置ベクトル抽出部１１は、全ての頂点ｖの位置からなる頂点行列Ｖを、同次座標変換行列Ａ-1によって関節座標系に変換した頂点行列Ｖ'を、各関節点に対する「頂点位置ベクトル」として抽出する。
各関節点に対する頂点位置ベクトル ：Ｖ'＝ＶＡ-1
各関節点に対する頂点位置ベクトル ：Ｖ'＝ＶＡ-1
【0042】
＜頂点から見た関節点に対する重み＞
次に、スキンモデルについて、頂点毎に、影響を及ぼす１つ以上の関節点が予め設定されている。
図３によれば、ポリゴンメッシュの頂点１は、肩関節点から重み1の影響を受けているとする。ポリゴンメッシュの頂点２は、肩関節点から重み0.5の影響を受け、ヒジ関節点から重み0.5の影響を受けているとする。ポリゴンメッシュの頂点３は、ヒジ関節点から重み1の影響を受けているとする。
そして、頂点位置ベクトル抽出部１１は、頂点毎に、予め設定された各関節点に対する頂点位置ベクトルを抽出する。
次に、スキンモデルについて、頂点毎に、影響を及ぼす１つ以上の関節点が予め設定されている。
図３によれば、ポリゴンメッシュの頂点１は、肩関節点から重み1の影響を受けているとする。ポリゴンメッシュの頂点２は、肩関節点から重み0.5の影響を受け、ヒジ関節点から重み0.5の影響を受けているとする。ポリゴンメッシュの頂点３は、ヒジ関節点から重み1の影響を受けているとする。
そして、頂点位置ベクトル抽出部１１は、頂点毎に、予め設定された各関節点に対する頂点位置ベクトルを抽出する。
【0043】
＜関節点と頂点との関係（円筒座標系）＞
図４は、関節点と頂点との関係を円筒座標系で表す説明図である。
図４は、関節点と頂点との関係を円筒座標系で表す説明図である。
【0044】
図４によれば、頂点毎の各関節点に対する頂点位置ベクトルを、以下のように円筒座標系で表現する。
当該関節点から子関節点へ向かう方向（ボーン）の距離ｚ
円筒中心点からの半径ｒ
円筒中心点の径方向の角度θ
このとき、円筒中心点からの半径ｒは、人体モデルにおける骨格に対する「肉付き」として表現できる。
当該関節点から子関節点へ向かう方向（ボーン）の距離ｚ
円筒中心点からの半径ｒ
円筒中心点の径方向の角度θ
このとき、円筒中心点からの半径ｒは、人体モデルにおける骨格に対する「肉付き」として表現できる。
【0045】
円筒座標系と直交座標系との間の変換は、円筒座標系の基準面をｘｙ直交座標平面（ｚ＝０の表す平面）とし、且つ、円筒軸をｚ直交座標軸とする。これによって、両座標系でｚ座標は共通になり、円筒座標（ｒ，θ，ｚ)と直交座標（ｘ，ｙ，ｚ）との間の変換則は、２次元の極座標系の場合と同様に、以下のように対応付けられる。
（直交座標基準）
ｘ＝ｒcosθ
ｙ＝ｒsinθ
ｚ＝ｚ
（円筒座標基準）
ｒ＝√(ｘ2＋ｙ2)
ｘ＝０及びｙ＝０ ： θ＝０
ｘ≧０ ： arcsin(ｙ／ｒ)
ｘ＞０ ： arctan(ｙ／ｘ)
ｘ＜０ ： -arcsin(ｙ／ｒ)＋π
（直交座標基準）
ｘ＝ｒcosθ
ｙ＝ｒsinθ
ｚ＝ｚ
（円筒座標基準）
ｒ＝√(ｘ2＋ｙ2)
ｘ＝０及びｙ＝０ ： θ＝０
ｘ≧０ ： arcsin(ｙ／ｒ)
ｘ＞０ ： arctan(ｙ／ｘ)
ｘ＜０ ： -arcsin(ｙ／ｒ)＋π
【0046】
［統計学習エンジン１２］
統計学習エンジン１２は、訓練段階として、以下のように機能する。
＜訓練段階＞
統計学習エンジン１２は、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する。
統計学習エンジン１２は、訓練段階として、以下のように機能する。
＜訓練段階＞
統計学習エンジン１２は、教師データ群となる複数体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する。
【0047】
図５は、統計学習エンジンにおける３次元モデルのベクトル空間を表す説明図である。
【0048】
図５によれば、教師データとしては、様々な体形を持つ例えば6000体の人体を想定している。３次元モデルは、人体（生体）の形状データであって、同一頂点数で表現される。
図５（ａ）によれば、人体の３次元モデルは、人体毎に頂点数がN=150万あり、各頂点は３次元(x,y,z)で表現される。また、人体の３次元モデルは、関節点数D=15を有する。１体の３次元モデルは、N=150万の各頂点について、D=15の各関節点に対する頂点位置ベクトルとなる3ND（例えば3×150万×15＝6750万）次元のベクトルで表現される。
図５（ｂ）によれば、３次元モデルの人体毎に、3ND次元空間における１点で表される。
図５（ａ）によれば、人体の３次元モデルは、人体毎に頂点数がN=150万あり、各頂点は３次元(x,y,z)で表現される。また、人体の３次元モデルは、関節点数D=15を有する。１体の３次元モデルは、N=150万の各頂点について、D=15の各関節点に対する頂点位置ベクトルとなる3ND（例えば3×150万×15＝6750万）次元のベクトルで表現される。
図５（ｂ）によれば、３次元モデルの人体毎に、3ND次元空間における１点で表される。
【0049】
尚、一般的な機械学習エンジンによれば、膨大な数の教師データを必要とするのに対し、本発明によれば、教師データ群の複数体数は、３次元モデルの頂点数よりも少なくてもよい。即ち、教師データの人体数6,000は、３次元モデルのベクトル次元数6750万よりも少ない。本発明によれば、教師データの複数体数は、３次元モデルのベクトル次元数以上に用意する必要がなく、そうであっても十分に精度を維持することができる。
【0050】
【0051】
統計学習エンジン１２は、具体的には、主成分分析(Principal Component Analysis)に基づくものであってもよい。
「主成分分析」によって、相関のある3ND次元空間の6000点から、互いに無相関で全体のばらつきを最もよく表す少数（例えば30次元）の主成分（成分変数）を導出する。第１主成分の分散を最大化し、続く主成分はそれまでに決定した主成分と無相関という拘束条件の下で、分散を最大化するようにして選択される。主成分の分散を最大化することによって、観測値の変化に対する説明能力を可能な限り主成分に持たせる。主成分を与える主軸は3ND次空間における6000点の群の直交基底となっている。主軸の直交性は、主軸が共分散行列の固有ベクトルになっており、共分散行列が実対称行列であることから導かれる。
「主成分分析」によって、相関のある3ND次元空間の6000点から、互いに無相関で全体のばらつきを最もよく表す少数（例えば30次元）の主成分（成分変数）を導出する。第１主成分の分散を最大化し、続く主成分はそれまでに決定した主成分と無相関という拘束条件の下で、分散を最大化するようにして選択される。主成分の分散を最大化することによって、観測値の変化に対する説明能力を可能な限り主成分に持たせる。主成分を与える主軸は3ND次空間における6000点の群の直交基底となっている。主軸の直交性は、主軸が共分散行列の固有ベクトルになっており、共分散行列が実対称行列であることから導かれる。
【0052】
統計学習エンジン１２は、3ND次元空間に対して、主成分分析に基づく成分変数を次元数とする統計形状空間（例えば30次元）に射影させる統計学習モデルを構築する。
本発明によれば、3ND(＝5400万)次元空間における各３次元モデルを、例えば30次元（成分変数）空間に射影する。主成分を与える変換は、観測値の集合からなる行列の特異値分解で表され、3ND次元空間の6000点の群からなる矩形行列Ｘの特異値分解は、以下の式で表される。
Ｘ＝Ｕ*Σ*ＶT
Ｘ：3ND次元空間の6000点からなる行列（6000行×3ND列）
Ｕ：n(6000)×n(6000)の正方行列（n次元単位ベクトルの直交行列）
Σ：n(6000)×p(3ND)の矩形対角行列（対角成分は、Ｘの特異値）
Ｖ：p(3ND)×p(3ND)の正方行列（p次元単位ベクトルの直交行列）
ここで、Ｖの最初の30列からなる行列をＶと改める。そして、その行列Ｖによる線形変換はＸの主成分を与える。
Ｖ：3ND次元空間->統計形状(30次元)空間への変換を表す行列
Ｖ-1：統計形状(30次元)空間->3N次元空間への変換を表す行列
尚、行列の上付き添え字-1は逆行列を示す記号ではなく、行列が定めるベクトルの変換に対して、その逆変換を意味する抽象的な記号として用いている。ここでは、Ｖ-1は、Ｖの転置ＶTと等しい。
本発明によれば、3ND(＝5400万)次元空間における各３次元モデルを、例えば30次元（成分変数）空間に射影する。主成分を与える変換は、観測値の集合からなる行列の特異値分解で表され、3ND次元空間の6000点の群からなる矩形行列Ｘの特異値分解は、以下の式で表される。
Ｘ＝Ｕ*Σ*ＶT
Ｘ：3ND次元空間の6000点からなる行列（6000行×3ND列）
Ｕ：n(6000)×n(6000)の正方行列（n次元単位ベクトルの直交行列）
Σ：n(6000)×p(3ND)の矩形対角行列（対角成分は、Ｘの特異値）
Ｖ：p(3ND)×p(3ND)の正方行列（p次元単位ベクトルの直交行列）
ここで、Ｖの最初の30列からなる行列をＶと改める。そして、その行列Ｖによる線形変換はＸの主成分を与える。
Ｖ：3ND次元空間->統計形状(30次元)空間への変換を表す行列
Ｖ-1：統計形状(30次元)空間->3N次元空間への変換を表す行列
尚、行列の上付き添え字-1は逆行列を示す記号ではなく、行列が定めるベクトルの変換に対して、その逆変換を意味する抽象的な記号として用いている。ここでは、Ｖ-1は、Ｖの転置ＶTと等しい。
【0053】
図７からも明らかなとおり、行列Ｖ又はＶ-1による線形変換によって、3ND次元空間と統計形状空間との間で、３次元モデルの人体毎に対応付けることができる。
ｓ＝ｘ*Ｖ
ｘ＝ｓ*Ｖ-1
ｓ：統計形状空間のベクトル
ｘ：3ND次元空間のベクトル
Ｖ：統計学習モデル
統計形状空間における原点は、教師データとして訓練した全ての人体モデルの肉付きに基づく体形の平均となる。即ち、平均となる原点から離れるほど、その点における肉付きに基づく体形は、特徴的であることを意味する。
ｓ＝ｘ*Ｖ
ｘ＝ｓ*Ｖ-1
ｓ：統計形状空間のベクトル
ｘ：3ND次元空間のベクトル
Ｖ：統計学習モデル
統計形状空間における原点は、教師データとして訓練した全ての人体モデルの肉付きに基づく体形の平均となる。即ち、平均となる原点から離れるほど、その点における肉付きに基づく体形は、特徴的であることを意味する。
【0054】
また、統計学習エンジン１２は、オートエンコーダ(AutoEncoder)に基づくものであってもよい。
オートエンコーダは、ニューラルネットワークの一種で、情報量を小さくした特徴表現を実現する。具体的には、入力データの次元数よりも、隠れ層の次元を圧縮したものである。入力データを、ニューラルネットワークを通して圧縮し、出力時には元のサイズに戻す。このとき、ニューラルネットワークは、入力データの抽象的概念（特徴量）を抽出する。
オートエンコーダも、主成分分析と同様に、相関のある3ND次元空間の6000点から、互いに無相関で全体のばらつきを最もよく表す30次元の成分変数を導出する。
オートエンコーダは、ニューラルネットワークの一種で、情報量を小さくした特徴表現を実現する。具体的には、入力データの次元数よりも、隠れ層の次元を圧縮したものである。入力データを、ニューラルネットワークを通して圧縮し、出力時には元のサイズに戻す。このとき、ニューラルネットワークは、入力データの抽象的概念（特徴量）を抽出する。
オートエンコーダも、主成分分析と同様に、相関のある3ND次元空間の6000点から、互いに無相関で全体のばらつきを最もよく表す30次元の成分変数を導出する。
【0055】
前述した図２によれば、統計学習エンジン１２は、２つの推定段階として、以下のように機能する。
＜エンコーダとしての推定段階＞
統計学習エンジン１２は、推定対象となる１体のポリゴンメッシュにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力する。
成分変数は、例えば30次元ベクトルであって、推定対象となるスキンモデル（ポリゴンメッシュ＋スケルトン）の「肉付きに基づく体形」の主成分となる。
＜デコーダとしての推定段階＞
統計学習エンジン１２は、推定対象となる成分変数を入力し、１体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを出力する。
例えば推定対象となる30次元ベクトルの成分変数を入力することによって、１体の頂点位置ベクトル群を出力することができる。
＜エンコーダとしての推定段階＞
統計学習エンジン１２は、推定対象となる１体のポリゴンメッシュにおける頂点毎の各関節点の頂点位置ベクトルを入力し、成分変数を出力する。
成分変数は、例えば30次元ベクトルであって、推定対象となるスキンモデル（ポリゴンメッシュ＋スケルトン）の「肉付きに基づく体形」の主成分となる。
＜デコーダとしての推定段階＞
統計学習エンジン１２は、推定対象となる成分変数を入力し、１体のスキンモデルにおける頂点毎の各関節点の頂点位置ベクトルを出力する。
例えば推定対象となる30次元ベクトルの成分変数を入力することによって、１体の頂点位置ベクトル群を出力することができる。
【0056】
ここで、本発明の特徴を改めて詳述する。
従来技術によれば、スキニングでは一般に、３次元のポリゴンメッシュに合わせて骨格を作成し、その骨格を変位させることによって、ポリゴンメッシュを変形させる。即ち、３Ｄポリゴンメッシュ -> 骨格＋重み -> ３Ｄポリゴンメッシュの変形、の手順をとる。また、一般的なアニメーションの用途によれば、骨格の作成と重みの設定は、作業者が手動で操作するものである。
これに対し、本発明は、関節点との関係から頂点位置ベクトルのみを抽出し、３Ｄポリゴンメッシュを変形させることなく、統計的に分析するものである。このような技術は、既存技術として存在しない。本発明によれば、スキニングに基づく肉付きの分解は、スキニングアルゴリズムを最後まで計算せずに、中間データとなる頂点位置ベクトルを抽出し、統計学習エンジンで訓練させたことにある。
従来技術によれば、スキニングでは一般に、３次元のポリゴンメッシュに合わせて骨格を作成し、その骨格を変位させることによって、ポリゴンメッシュを変形させる。即ち、３Ｄポリゴンメッシュ -> 骨格＋重み -> ３Ｄポリゴンメッシュの変形、の手順をとる。また、一般的なアニメーションの用途によれば、骨格の作成と重みの設定は、作業者が手動で操作するものである。
これに対し、本発明は、関節点との関係から頂点位置ベクトルのみを抽出し、３Ｄポリゴンメッシュを変形させることなく、統計的に分析するものである。このような技術は、既存技術として存在しない。本発明によれば、スキニングに基づく肉付きの分解は、スキニングアルゴリズムを最後まで計算せずに、中間データとなる頂点位置ベクトルを抽出し、統計学習エンジンで訓練させたことにある。
【0057】
また、従来技術によれば、スキニングの目的はポリゴンメッシュの変形であるために、ポリゴンメッシュを関節点毎の座標系に変換し、変換した座標をブレンドする、という手順を一度に実行する。
これに対し、本発明によれば、骨格の部分空間の変換を線形にブレンドして変形する際に、骨格の部分空間に座標変換した中間データとなる頂点位置ベクトル群を「肉付き」として抽出している。これを統計的に分析することができる。統計的に推定された頂点位置ベクトル群を線形にブレンドすることによって、普通のスキニングとすることができる。
これに対し、本発明によれば、骨格の部分空間の変換を線形にブレンドして変形する際に、骨格の部分空間に座標変換した中間データとなる頂点位置ベクトル群を「肉付き」として抽出している。これを統計的に分析することができる。統計的に推定された頂点位置ベクトル群を線形にブレンドすることによって、普通のスキニングとすることができる。
【0058】
＜肉付き判定アプリケーション＞
例えば衣服の場合、人のサイズ（骨格の長さ）や周径に基づいて設計されているが、その衣服が似合うような人の肉付きの体形までも考慮されたものではない。一方で、衣服を購入するユーザも、自らのサイズや周径は考慮するが、各部位の肉付きまでも考慮することは全くない。ユーザ自らの肉付きが、平均的な肉付き又は理想的な肉付きからどの程度離れたものであるか、も考慮することはない。
肉付き判定アプリケーションとして、様々な用途が想定されるが、異なる人体における肉付きに基づく体形の相違を数値的に取得することができる。肉付きに基づく体形の相違は、例えば主成分分析に基づく統計形状空間では、点間の距離として認識することができる。
例えば衣服の場合、人のサイズ（骨格の長さ）や周径に基づいて設計されているが、その衣服が似合うような人の肉付きの体形までも考慮されたものではない。一方で、衣服を購入するユーザも、自らのサイズや周径は考慮するが、各部位の肉付きまでも考慮することは全くない。ユーザ自らの肉付きが、平均的な肉付き又は理想的な肉付きからどの程度離れたものであるか、も考慮することはない。
肉付き判定アプリケーションとして、様々な用途が想定されるが、異なる人体における肉付きに基づく体形の相違を数値的に取得することができる。肉付きに基づく体形の相違は、例えば主成分分析に基づく統計形状空間では、点間の距離として認識することができる。
【0059】
図８は、関節点推定部及びスキニング部を更に有する分析装置の機能構成図である。
【0060】
図８によれば、図２と比較して、関節点推定部１３と、スキニング部１４とを更に有する。これら機能構成部も、分析装置に搭載されたコンピュータを機能させるプログラムを実行させることによって実現される。また、これら機能構成部の処理の流れは、分析方法としても理解できる。
【0061】
人体を光学スキャナによって撮影した場合、３次元の人体モデルは、スキン（ポリゴンメッシュ）となる。即ち、スキンは、スキンモデルのようにスケルトン（骨格）を含むものではない。そのために、図８によれば、頂点位置ベクトル抽出部１１の前段で、スキンから関節点を抽出し、関節点同士を親子関係によってボーンで結んだスケルトンを推定する。
【0062】
［関節点推定部１３］
関節点推定部１３は、１体のポリゴンメッシュから、関節点の位置を推定する。
関節点推定部１３は、関節点学習エンジンであってもよく、以下のように機能する。
（訓練段階）教師データ群の複数体のポリゴンメッシュ（説明変数）をそれぞれ入力し、関節点の位置（目的変数）を出力するように関節点学習モデルを構築する。
（推定段階）推定対象となるポリゴンメッシュ（説明変数）を入力し、関節点の位置（目的変数）を出力する。
関節点推定部１３は、１体のポリゴンメッシュから、関節点の位置を推定する。
関節点推定部１３は、関節点学習エンジンであってもよく、以下のように機能する。
（訓練段階）教師データ群の複数体のポリゴンメッシュ（説明変数）をそれぞれ入力し、関節点の位置（目的変数）を出力するように関節点学習モデルを構築する。
（推定段階）推定対象となるポリゴンメッシュ（説明変数）を入力し、関節点の位置（目的変数）を出力する。
【0063】
関節点学習エンジンとしては、関節点の推定に、ポリゴンメッシュの頂点位置から、モーションキャプチャの関節点を予測する回帰モデルを用いることもできる。回帰モデルの訓練としては、「人体形状は関節の周囲でほぼ凸形状」と仮定する。凸形状とは、任意の２点間を結ぶ線分が、その多角形の外に出ることがないものをいう（内角は180°以下）。
勿論、回帰モデルのような機械学習ではなく、モーションキャプチャに基づくフレーム画像に映るマーク点に対応するメッシュ頂点を指定して、メッシュから直接に関節位置を計算したものであってもよい。
勿論、回帰モデルのような機械学習ではなく、モーションキャプチャに基づくフレーム画像に映るマーク点に対応するメッシュ頂点を指定して、メッシュから直接に関節位置を計算したものであってもよい。
【0064】
また、関節位置を、モーションキャプチャデータから推定するものであってもよい。例えばＶＩＣＯＮ（登録商標）のように、モーションキャプチャの各フレームから、関節位置を推定するものであってもよい。例えば多数の人の歩行動作を撮影したモーションキャプチャの各フレームから、歩行動作に基づく関節位置の変位を推定することができる。
【0065】
尚、本願発明の特徴として、スケルトンを含まないスキン（ポリゴンメッシュ）のみから、肉付きに基づく体形を分析することができる。これは、市販されている様々な３次元スキャナの機種や撮影環境を問わないこと可能にする。即ち、様々な３次元スキャナによって撮影されたポリゴンメッシュであっても、相同モデル化されている限り、関節位置を推定し、統計形状空間に対応付けることができる。このように、人体のスキンから、肉付きに基づく体形のみを分離することによって、３次元スキャナの異なる機種や撮影環境を統一的に扱うことが可能となる。
【0066】
［スキニング部１４］
スキニング部１４は、当該頂点毎の各関節点の頂点位置ベクトルから、１体のスキンモデルを再生する。
統計学習エンジン１２から出力された頂点位置ベクトルを用いて、ポリゴンメッシュを変形（頂点の移動）させる。このスキニングアルゴリズム（skeleton subspace deformation、又は、linear blend skinning）は、一般なものである。そもそも、スキニングアルゴリズムは、主にアニメーションの用途に基づくものである。
このように、スキニング部１４によって、人体のスキンを視覚的に認識することができる。
スキニング部１４は、当該頂点毎の各関節点の頂点位置ベクトルから、１体のスキンモデルを再生する。
統計学習エンジン１２から出力された頂点位置ベクトルを用いて、ポリゴンメッシュを変形（頂点の移動）させる。このスキニングアルゴリズム（skeleton subspace deformation、又は、linear blend skinning）は、一般なものである。そもそも、スキニングアルゴリズムは、主にアニメーションの用途に基づくものである。
このように、スキニング部１４によって、人体のスキンを視覚的に認識することができる。
【0067】
図９は、統計学習エンジンを用いた相関学習エンジンの訓練段階の構成図である。
【0068】
図９によれば、図８と比較して、相関学習エンジン１５を更に有する。図９に基づく機能構成は、本願の出願人によって特許が取得された、人体の採寸値のみから３次元モデルを簡易に生成する技術に基づくものである（例えば特許文献１参照）。
【0069】
ここで、分析装置１は、相関学習のための教師データとして、スキン（ポリゴンメッシュ）毎に、次元数ｎの採寸値とを対応付けたものを準備する。
採寸値としては、外観から計測可能な寸法を意味する。幾何的な採寸箇所は、複数箇所であることが好ましい。人体の場合、周径（特定部位の肉付き）として、例えばトップバスト（胸囲）、アンダーバスト、ウエスト（腹囲）、ヒップ（尻囲）などがある。本発明は、頂点位置ベクトルを「肉付き」として抽出するものであるので、スキンに周径が対応付けられたものであることが好ましい。
勿論、人体の場合、長さとして、採寸値には、例えば身長、座高、股下長なども含まれる。ここで、採寸値は、例えばマルチン式人体計測法に基づくものであってもよい。
採寸値としては、外観から計測可能な寸法を意味する。幾何的な採寸箇所は、複数箇所であることが好ましい。人体の場合、周径（特定部位の肉付き）として、例えばトップバスト（胸囲）、アンダーバスト、ウエスト（腹囲）、ヒップ（尻囲）などがある。本発明は、頂点位置ベクトルを「肉付き」として抽出するものであるので、スキンに周径が対応付けられたものであることが好ましい。
勿論、人体の場合、長さとして、採寸値には、例えば身長、座高、股下長なども含まれる。ここで、採寸値は、例えばマルチン式人体計測法に基づくものであってもよい。
【0070】
尚、人体の場合、採寸値には、体組成値が含まるものであってもよい。体組成値としては、人体の場合、体組成計（又は血液検査）などの機器から計測可能な値を意味する。人体の体形は、その体組成値によっても大きく変化するであろう。複数のユーザで、例えば同じ身長、腹囲及び胸囲であっても、体組成値によってはその外観の体形が異なる場合もある、と考えられる。
体組成値としては、例えば生体情報のような、体重、体脂肪率、内臓脂肪レベル、皮下脂肪率、基礎代謝、骨格筋率、筋肉率、ＢＭＩ、活動量、歩数、血圧値、心拍（脈拍）数、体温、呼吸数、血液に関する指標値（血糖値、中性脂肪量、コレステロール量など）、消費カロリ、食事量、水分摂取量、排泄量、発汗量、肺活量、睡眠量などであってもよい。
体組成値としては、例えば生体情報のような、体重、体脂肪率、内臓脂肪レベル、皮下脂肪率、基礎代謝、骨格筋率、筋肉率、ＢＭＩ、活動量、歩数、血圧値、心拍（脈拍）数、体温、呼吸数、血液に関する指標値（血糖値、中性脂肪量、コレステロール量など）、消費カロリ、食事量、水分摂取量、排泄量、発汗量、肺活量、睡眠量などであってもよい。
【0071】
［相関学習エンジン１５］
相関学習エンジン１５は、各３次元モデルについて、次元数ｎの計測値（説明変数）と、次元数ｍの成分変数（目的変数）と関係を相互に学習するように、相関学習モデルを構築する。
相関学習エンジン１５は、各３次元モデルについて、次元数ｎの計測値（説明変数）と、次元数ｍの成分変数（目的変数）と関係を相互に学習するように、相関学習モデルを構築する。
【0072】
【0073】
図１１は、統計形状空間と計測値空間との線形変換を表す説明図である。
【0074】
＜最小二乗法＞
相関学習エンジン１５は、最小二乗法に基づくものであってもよい。
「最小二乗法(least squares method)」とは、複数の多次元ベクトル（データの組）から線形モデルで近似する際に、残差の二乗和が最小となる最も確からしい線形モデルを決定することをいう。
相関学習エンジン１５は、最小二乗法に基づくものであってもよい。
「最小二乗法(least squares method)」とは、複数の多次元ベクトル（データの組）から線形モデルで近似する際に、残差の二乗和が最小となる最も確からしい線形モデルを決定することをいう。
【0075】
図１１からも明らかなとおり、行列Ａ又はＡ-1による線形変換によって、統計形状空間と計測値空間との間で、３次元モデルの人体毎に対応付けることができる。
ｓ＝ｄ*Ａ
ｄ＝ｓ*Ａ-1
Ａ＝(ＤT*Ｄ)-1*ＤT*Ｓ （||Ｄ*Ａ－Ｓ||を最小化するＡを導出する）
ｓ：統計形状空間のベクトル
ｄ：計測値空間のベクトル
Ｓ：統計形状空間のベクトルの組
Ｄ：計測値空間のベクトルの組
Ａ：相関学習モデル
ｓ＝ｄ*Ａ
ｄ＝ｓ*Ａ-1
Ａ＝(ＤT*Ｄ)-1*ＤT*Ｓ （||Ｄ*Ａ－Ｓ||を最小化するＡを導出する）
ｓ：統計形状空間のベクトル
ｄ：計測値空間のベクトル
Ｓ：統計形状空間のベクトルの組
Ｄ：計測値空間のベクトルの組
Ａ：相関学習モデル
【0076】
相関学習エンジン１５は、多層パーセプトロンに基づくものであってもよい。これは、線形パーセプトロンにおける最小二乗法アルゴリズムの一般化である。
【0077】
図１２は、相関学習エンジンの第１の推定段階の構成図である。
【0078】
第１の推定段階として、対象人体のポリゴンメッシュ（３次元モデル）から、対象人体の次元数ｎの計測値を推定することができる。
（Ｓ１１）対象人体のポリゴンメッシュから、関節点推定部１３によって関節点を推定し、スキンモデル（ポリゴンメッシュ＋スケルトン（骨格））を生成する。
（Ｓ１２）スキンモデルから、頂点位置ベクトル抽出部１１によって頂点位置ベクトルを抽出する。
（Ｓ１３）頂点位置ベクトルから、統計学習エンジン１２によって次元数ｍの成分変数を推定する。
（Ｓ１４）次元数ｍの成分変数から、相関学習エンジン１５によって次元数ｎの計測値を推定する。
（Ｓ１１）対象人体のポリゴンメッシュから、関節点推定部１３によって関節点を推定し、スキンモデル（ポリゴンメッシュ＋スケルトン（骨格））を生成する。
（Ｓ１２）スキンモデルから、頂点位置ベクトル抽出部１１によって頂点位置ベクトルを抽出する。
（Ｓ１３）頂点位置ベクトルから、統計学習エンジン１２によって次元数ｍの成分変数を推定する。
（Ｓ１４）次元数ｍの成分変数から、相関学習エンジン１５によって次元数ｎの計測値を推定する。
【0079】
図１３は、相関学習エンジンの第２の推定段階の構成図である。
【0080】
第２の推定段階として、対象人体の次元数ｎの計測値から、対象人体のポリゴンメッシュ（３次元モデル）を推定することができる。
（Ｓ２１）次元数ｎの計測値から、相関学習エンジン１５によって次元数ｍの成分変数を推定する。
（Ｓ２２）次元数ｍの成分変数から、統計学習エンジン１２によって頂点位置ベクトルを推定する。
（Ｓ２３）頂点位置ベクトルから、スキニング部１４によって、所定のスケルトンに応じて変形させたスキンモデルを生成する。
（Ｓ２１）次元数ｎの計測値から、相関学習エンジン１５によって次元数ｍの成分変数を推定する。
（Ｓ２２）次元数ｍの成分変数から、統計学習エンジン１２によって頂点位置ベクトルを推定する。
（Ｓ２３）頂点位置ベクトルから、スキニング部１４によって、所定のスケルトンに応じて変形させたスキンモデルを生成する。
【0081】
以上、詳細に説明したように、本発明のプログラム、装置及び方法によれば、スキンモデルから肉付きに基づく体形を分析可能な統計形状空間を生成することができる。
【0082】
前述した本発明の種々の実施形態について、本発明の技術思想及び見地の範囲の種々の変更、修正及び省略は、当業者によれば容易に行うことができる。前述の説明はあくまで例であって、何ら制約しようとするものではない。本発明は、特許請求の範囲及びその均等物として限定するものにのみ制約される。
【符号の説明】
【0083】
１ 分析装置
１１ 頂点位置ベクトル抽出部
１２ 統計学習エンジン
１３ 関節点推定部
１４ スキニング部
１５ 相関学習エンジン
１１ 頂点位置ベクトル抽出部
１２ 統計学習エンジン
１３ 関節点推定部
１４ スキニング部
１５ 相関学習エンジン
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【手続補正書】
【提出日】2022-06-15
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置に搭載されたコンピュータを機能させるプログラムであって、
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
してコンピュータを機能させることを特徴とするプログラム。
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
してコンピュータを機能させることを特徴とするプログラム。
【請求項2】
頂点位置ベクトル抽出手段は、各関節点の回転行列Ｒと位置ｔとからなる同次座標変換行列Ａを算出し、全ての頂点ｖの位置からなる頂点行列Ｖを、同次座標変換行列Ａ-1によって関節座標系に変換した頂点行列Ｖ'を、各関節点に対する頂点位置ベクトルとして抽出する
ようにコンピュータを機能させることを特徴とする請求項１に記載のプログラム。
ようにコンピュータを機能させることを特徴とする請求項１に記載のプログラム。
【請求項3】
１体のポリゴンメッシュから、関節点の位置を推定する関節点推定手段と
して更にコンピュータを機能させることを特徴とする請求項１又は２に記載のプログラム。
して更にコンピュータを機能させることを特徴とする請求項１又は２に記載のプログラム。
【請求項4】
関節点推定手段は、関節点学習エンジンであり、
訓練段階として、教師データ群の複数体のポリゴンメッシュをそれぞれ入力し、関節点の位置を出力するように関節点学習モデルを構築し、
推定段階として、推定対象となるポリゴンメッシュを入力し、関節点の位置を出力する
ようにコンピュータを機能させることを特徴とする請求項３に記載のプログラム。
訓練段階として、教師データ群の複数体のポリゴンメッシュをそれぞれ入力し、関節点の位置を出力するように関節点学習モデルを構築し、
推定段階として、推定対象となるポリゴンメッシュを入力し、関節点の位置を出力する
ようにコンピュータを機能させることを特徴とする請求項３に記載のプログラム。
【請求項5】
エンコーダとしての推定段階として、
統計学習エンジンは、推定対象となる１体のポリゴンメッシュにおける頂点毎における各関節点に対する頂点位置ベクトルを入力し、成分変数を出力する
ようにコンピュータを機能させることを特徴とする請求項１から４のいずれか１項に記載のプログラム。
統計学習エンジンは、推定対象となる１体のポリゴンメッシュにおける頂点毎における各関節点に対する頂点位置ベクトルを入力し、成分変数を出力する
ようにコンピュータを機能させることを特徴とする請求項１から４のいずれか１項に記載のプログラム。
【請求項6】
デコーダとしての推定段階として、
統計学習エンジンは、推定対象となる成分変数を入力し、１体のスキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを出力し、
当該頂点毎における各関節点に対する頂点位置ベクトルから、１体のスキンモデルを再生するスキニング手段と
してコンピュータを機能させることを特徴とする請求項１から４のいずれか１項に記載のプログラム。
統計学習エンジンは、推定対象となる成分変数を入力し、１体のスキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを出力し、
当該頂点毎における各関節点に対する頂点位置ベクトルから、１体のスキンモデルを再生するスキニング手段と
してコンピュータを機能させることを特徴とする請求項１から４のいずれか１項に記載のプログラム。
【請求項7】
関節点毎の関節座標系は、当該関節点を親として子関節点へ向かう方向をｚ軸とし、当該関節点の屈曲する方向をｘ軸とし、ｘ軸及びｚ軸と直交する方向をｙ軸として設定される
ようにコンピュータを機能させることを特徴とする請求項１から６のいずれか１項に記載のプログラム。
ようにコンピュータを機能させることを特徴とする請求項１から６のいずれか１項に記載のプログラム。
【請求項8】
頂点毎における各関節点に対する頂点位置ベクトルを、当該関節点から子関節点へ向かう方向の距離ｚと、円筒中心点からの半径ｒと、円筒中心点の径方向の角度θとした円筒座標で表現する
ようにコンピュータを機能させることを特徴とする請求項７に記載のプログラム。
ようにコンピュータを機能させることを特徴とする請求項７に記載のプログラム。
【請求項9】
スキンモデルは、人体モデルであり、
スケルトンは、人体の骨格であり、
ボーンは、関節点間の骨である
ようにコンピュータを機能させることを特徴とする請求項１から７のいずれか１項に記載のプログラム。
スケルトンは、人体の骨格であり、
ボーンは、関節点間の骨である
ようにコンピュータを機能させることを特徴とする請求項１から７のいずれか１項に記載のプログラム。
【請求項10】
スキンモデルについて、頂点毎に、影響を及ぼす１つ以上の関節点が予め設定されており、
頂点位置ベクトル抽出手段は、頂点毎に、予め設定された各関節点に対する頂点位置ベクトルを抽出する
ようにコンピュータを機能させることを特徴とする請求項１から９のいずれか１項に記載のプログラム。
頂点位置ベクトル抽出手段は、頂点毎に、予め設定された各関節点に対する頂点位置ベクトルを抽出する
ようにコンピュータを機能させることを特徴とする請求項１から９のいずれか１項に記載のプログラム。
【請求項11】
統計学習エンジンは、主成分分析(Principal Component Analysis)又はオートエンコーダ(AutoEncoder)に基づくものである
ようにコンピュータを機能させることを特徴とする請求項１から１０のいずれか１項に記載のプログラム。
ようにコンピュータを機能させることを特徴とする請求項１から１０のいずれか１項に記載のプログラム。
【請求項12】
教師データ群として、スキンモデル毎に、複数の周径採寸箇所に対応する次元数ｎの周径採寸値が対応付けられており、
スキンモデル毎に、次元数ｎの周径採寸値と、統計学習エンジンによって出力された次元数ｍの成分変数とを対応付けて学習した相関学習モデルを構築する相関学習エンジンと
して機能させ、
相関学習エンジンを用いて、対象データとしての１体の次元数ｎの周径採寸値から、次元数ｍの成分変数へエンコードし、
相関学習エンジンを用いて、統計学習エンジンから出力された当該次元数ｍの成分変数から、１体の次元数ｎの周径採寸値へデコードする
ようにコンピュータを機能させることを特徴とする請求項１から１１のいずれか１項に記載のプログラム。
スキンモデル毎に、次元数ｎの周径採寸値と、統計学習エンジンによって出力された次元数ｍの成分変数とを対応付けて学習した相関学習モデルを構築する相関学習エンジンと
して機能させ、
相関学習エンジンを用いて、対象データとしての１体の次元数ｎの周径採寸値から、次元数ｍの成分変数へエンコードし、
相関学習エンジンを用いて、統計学習エンジンから出力された当該次元数ｍの成分変数から、１体の次元数ｎの周径採寸値へデコードする
ようにコンピュータを機能させることを特徴とする請求項１から１１のいずれか１項に記載のプログラム。
【請求項13】
複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置分析装置であって、
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルの頂点毎における各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
を有することを特徴とする分析装置。
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルの頂点毎における各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
を有することを特徴とする分析装置。
【請求項14】
複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置の分析方法であって、
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
装置は、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する第１のステップと、
訓練段階として、統計学習エンジンによって、教師データ群となる複数体のスキンモデルの頂点毎における各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する第２のステップと
を実行することを特徴とする分析方法。
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
装置は、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する第１のステップと、
訓練段階として、統計学習エンジンによって、教師データ群となる複数体のスキンモデルの頂点毎における各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する第２のステップと
を実行することを特徴とする分析方法。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【0012】
本発明によれば、複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置に搭載されたコンピュータを機能させるプログラムであって、
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
してコンピュータを機能させることを特徴とする。
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
してコンピュータを機能させることを特徴とする。
【手続補正3】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【0016】
本発明のプログラムにおける他の実施形態によれば、
エンコーダとしての推定段階として、
統計学習エンジンは、推定対象となる１体のポリゴンメッシュにおける頂点毎における各関節点に対する頂点位置ベクトルを入力し、成分変数を出力する
ようにコンピュータを機能させることも好ましい。
エンコーダとしての推定段階として、
統計学習エンジンは、推定対象となる１体のポリゴンメッシュにおける頂点毎における各関節点に対する頂点位置ベクトルを入力し、成分変数を出力する
ようにコンピュータを機能させることも好ましい。
【手続補正4】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【0017】
本発明のプログラムにおける他の実施形態によれば、
デコーダとしての推定段階として、
統計学習エンジンは、推定対象となる成分変数を入力し、１体のスキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを出力し、
当該頂点毎における各関節点に対する頂点位置ベクトルから、１体のスキンモデルを再生するスキニング手段と
してコンピュータを機能させることも好ましい。
デコーダとしての推定段階として、
統計学習エンジンは、推定対象となる成分変数を入力し、１体のスキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを出力し、
当該頂点毎における各関節点に対する頂点位置ベクトルから、１体のスキンモデルを再生するスキニング手段と
してコンピュータを機能させることも好ましい。
【手続補正5】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【0018】
本発明のプログラムにおける他の実施形態によれば、
関節点毎の関節座標系は、当該関節点を親として子関節点へ向かう方向をｚ軸とし、当該関節点の屈曲する方向をｘ軸とし、ｘ軸及びｚ軸と直交する方向をｙ軸として設定される
ようにコンピュータを機能させることも好ましい。
関節点毎の関節座標系は、当該関節点を親として子関節点へ向かう方向をｚ軸とし、当該関節点の屈曲する方向をｘ軸とし、ｘ軸及びｚ軸と直交する方向をｙ軸として設定される
ようにコンピュータを機能させることも好ましい。
【手続補正6】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【0020】
本発明のプログラムにおける他の実施形態によれば、
スキンモデルは、人体モデルであり、
スケルトンは、人体の骨格であり、
ボーンは、関節点間の骨である
ようにコンピュータを機能させることも好ましい。
スキンモデルは、人体モデルであり、
スケルトンは、人体の骨格であり、
ボーンは、関節点間の骨である
ようにコンピュータを機能させることも好ましい。
【手続補正7】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】変更
【補正の内容】
【0024】
本発明によれば、複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する分析装置であって、
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルの頂点毎における各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
を有することを特徴とする。
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する頂点位置ベクトル抽出手段と、
訓練段階として、教師データ群となる複数体のスキンモデルの頂点毎における各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する統計学習エンジンと
を有することを特徴とする。
【手続補正8】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【0025】
本発明によれば、複数の頂点からなるポリゴンメッシュに複数の関節点を内在するスキンモデルを統計的に分析する装置の分析方法であって、
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
装置は、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する第１のステップと、
訓練段階として、統計学習エンジンによって、教師データ群となる複数体のスキンモデルの頂点毎における各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する第２のステップと
を実行することを特徴とする。
関節点毎に、関節座標系が設定されており、
関節点同士を親子関係によってボーンで結ぶことによってスケルトンを構成し、
当該関節点から子関節点へ向かう方向のボーンの円筒中心点から頂点への半径ｒを、ボーンに対する肉付きとして表し、頂点毎における各関節点に対する頂点位置ベクトルとして少なくとも半径ｒを含め、
装置は、
スキンモデルの頂点毎における各関節点に対する頂点位置ベクトルを抽出する第１のステップと、
訓練段階として、統計学習エンジンによって、教師データ群となる複数体のスキンモデルの頂点毎における各関節点の頂点位置ベクトルを入力し、成分変数を出力するように統計学習モデルを構築する第２のステップと
を実行することを特徴とする。