(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022186345
(43)【公開日】2022-12-15
(54)【発明の名称】演技指導装置、演技指導方法および演技指導プログラム
(51)【国際特許分類】
A63B 71/06 20060101AFI20221208BHJP
A63B 69/00 20060101ALI20221208BHJP
【ＦＩ】
A63B71/06 T
A63B69/00 B
【審査請求】未請求
【請求項の数】21
【出願形態】ＯＬ
(21)【出願番号】P 2021094512
(22)【出願日】2021-06-04
(71)【出願人】
【識別番号】000004112
【氏名又は名称】株式会社ニコン
(74)【代理人】
【識別番号】100161207
【弁理士】
【氏名又は名称】西澤 和純
(74)【代理人】
【識別番号】100140774
【弁理士】
【氏名又は名称】大浪 一徳
(74)【代理人】
【識別番号】100175824
【弁理士】
【氏名又は名称】小林 淳一
(72)【発明者】
【氏名】佐藤 健
(72)【発明者】
【氏名】宮川 嘉明
(72)【発明者】
【氏名】栗山 孝司
(72)【発明者】
【氏名】井田 恭輔
(57)【要約】
【課題】演技者に対して適切な指導情報を生成する。
【解決手段】演技指導装置は、演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較する比較部と、前記比較部で比較した結果に基づいて、前記演技者の演技に対する指導情報を生成する生成部と、を備える。
【選択図】図４
【解決手段】演技指導装置は、演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較する比較部と、前記比較部で比較した結果に基づいて、前記演技者の演技に対する指導情報を生成する生成部と、を備える。
【選択図】図４
【特許請求の範囲】
【請求項1】
演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較する比較部と、
前記比較部で比較した結果に基づいて、前記演技者の演技に対する指導情報を生成する生成部と、
を備える演技指導装置。
前記比較部で比較した結果に基づいて、前記演技者の演技に対する指導情報を生成する生成部と、
を備える演技指導装置。
【請求項2】
請求項１に記載の演技指導装置において、
前記生成部は、前記演技者の演技と前記比較対象の演技との相違点を示す情報を、前記指導情報として生成する、演技指導装置。
前記生成部は、前記演技者の演技と前記比較対象の演技との相違点を示す情報を、前記指導情報として生成する、演技指導装置。
【請求項3】
請求項１または２に記載の演技指導装置において、
前記比較部は、前記演技者の演技と前記比較対象の演技とのタイミングの相違、姿勢の相違、動き方の相違、跳躍の高さの相違、顔の表情の相違、演技中の立ち位置の相違、および、前記演技者と前記比較対象との身体的特徴の相違の少なくとも１つを検出する、演技指導装置。
前記比較部は、前記演技者の演技と前記比較対象の演技とのタイミングの相違、姿勢の相違、動き方の相違、跳躍の高さの相違、顔の表情の相違、演技中の立ち位置の相違、および、前記演技者と前記比較対象との身体的特徴の相違の少なくとも１つを検出する、演技指導装置。
【請求項4】
請求項３に記載の演技指導装置において、
前記比較部は、前記演技者の身体的特徴に基づいて前記相違するか否かの検出基準を異ならせる、演技指導装置。
前記比較部は、前記演技者の身体的特徴に基づいて前記相違するか否かの検出基準を異ならせる、演技指導装置。
【請求項5】
請求項１から４までのいずれか一項に記載の演技指導装置において、
前記比較部は、前記第１の動画像が再生される時間軸と、前記参照動画情報が再生される時間軸とを同期させて前記第１の動画像と前記参照動画情報とを比較する、演技指導装置。
前記比較部は、前記第１の動画像が再生される時間軸と、前記参照動画情報が再生される時間軸とを同期させて前記第１の動画像と前記参照動画情報とを比較する、演技指導装置。
【請求項6】
請求項１から５までのいずれか一項に記載の演技指導装置において、
前記生成部は、前記演技者の演技と前記比較対象の演技との相違点を示す第２の動画像を、前記指導情報として生成する、演技指導装置。
前記生成部は、前記演技者の演技と前記比較対象の演技との相違点を示す第２の動画像を、前記指導情報として生成する、演技指導装置。
【請求項7】
請求項６に記載の演技指導装置において、
前記生成部は、前記第２の動画像において前記演技者の演技と前記比較対象の演技との差が予め定めた基準値よりも大きい部分を他の部分と異なる態様で示す、演技指導装置。
前記生成部は、前記第２の動画像において前記演技者の演技と前記比較対象の演技との差が予め定めた基準値よりも大きい部分を他の部分と異なる態様で示す、演技指導装置。
【請求項8】
請求項６または７に記載の演技指導装置において、
前記生成部は、前記第１の動画像が再生される時間軸に同期して前記第２の動画像を生成する、演技指導装置。
前記生成部は、前記第１の動画像が再生される時間軸に同期して前記第２の動画像を生成する、演技指導装置。
【請求項9】
請求項１から８までのいずれか一項に記載の演技指導装置において、
前記比較対象の演技は、手本の演技または第２の演技者の演技を含む、演技指導装置。
前記比較対象の演技は、手本の演技または第２の演技者の演技を含む、演技指導装置。
【請求項10】
請求項９に記載の演技指導装置において、
前記生成部は、前記比較部で前記演技者の演技と前記第２の演技者の演技とが比較された場合に、前記演技者および前記第２の演技者が一緒に演技する場合の情報を、前記指導情報として生成する、演技指導装置。
前記生成部は、前記比較部で前記演技者の演技と前記第２の演技者の演技とが比較された場合に、前記演技者および前記第２の演技者が一緒に演技する場合の情報を、前記指導情報として生成する、演技指導装置。
【請求項11】
請求項１０に記載の演技指導装置において、
前記生成部は、前記比較部で比較した結果に基づいて前記演技者および前記第２の演技者の演技の習熟度を算出し、前記演技者の第１の習熟度および前記第２の演技者の第２の習熟度に基づいて前記一緒に演技する場合の情報を生成する、演技指導装置。
前記生成部は、前記比較部で比較した結果に基づいて前記演技者および前記第２の演技者の演技の習熟度を算出し、前記演技者の第１の習熟度および前記第２の演技者の第２の習熟度に基づいて前記一緒に演技する場合の情報を生成する、演技指導装置。
【請求項12】
請求項９から１１のいずれか一項に記載の演技指導装置において、
前記生成部は、前記比較部で比較した結果に基づいて、前記演技者および前記第２の演技者に対する演技の内容見直し情報を、前記指導情報として生成する、演技指導装置。
前記生成部は、前記比較部で比較した結果に基づいて、前記演技者および前記第２の演技者に対する演技の内容見直し情報を、前記指導情報として生成する、演技指導装置。
【請求項13】
請求項９から１１のいずれか一項に記載の演技指導装置において、
前記生成部は、前記比較部で比較した結果に基づいて、前記演技者または前記第２の演技者に対する演技の内容見直し情報を、前記指導情報として生成する、演技指導装置。
前記生成部は、前記比較部で比較した結果に基づいて、前記演技者または前記第２の演技者に対する演技の内容見直し情報を、前記指導情報として生成する、演技指導装置。
【請求項14】
請求項９から１３のいずれか一項に記載の演技指導装置において、
前記生成部は、前記比較部で比較した結果に基づいて、前記演技者および前記第２の演技者の配置情報を、前記指導情報として生成する、演技指導装置。
前記生成部は、前記比較部で比較した結果に基づいて、前記演技者および前記第２の演技者の配置情報を、前記指導情報として生成する、演技指導装置。
【請求項15】
第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価する評価部と、
前記評価部の評価結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する決定部と、
を備える演技指導装置。
前記評価部の評価結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する決定部と、
を備える演技指導装置。
【請求項16】
請求項１５に記載の演技指導装置において、
前記決定した前記第１および前記第２の演技者の位置を示すマップ情報を生成する生成部を備える、演技指導装置。
前記決定した前記第１および前記第２の演技者の位置を示すマップ情報を生成する生成部を備える、演技指導装置。
【請求項17】
第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価し、
前記評価の結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する、演技指導方法。
前記評価の結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する、演技指導方法。
【請求項18】
請求項１７に記載の演技指導方法において、
前記決定した前記第１および前記第２の演技者の位置を示すマップ情報を生成し、
前記マップ情報を表示部に表示させる、演技指導方法。
前記決定した前記第１および前記第２の演技者の位置を示すマップ情報を生成し、
前記マップ情報を表示部に表示させる、演技指導方法。
【請求項19】
演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較し、
前記比較の結果に基づいて、前記演技者の演技に対する指導情報を生成する、演技指導方法。
前記比較の結果に基づいて、前記演技者の演技に対する指導情報を生成する、演技指導方法。
【請求項20】
演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較する処理と、
前記比較の結果に基づいて、前記演技者の演技に対する指導情報を生成する生成処理と、
をコンピュータに実行させる演技指導プログラム。
前記比較の結果に基づいて、前記演技者の演技に対する指導情報を生成する生成処理と、
をコンピュータに実行させる演技指導プログラム。
【請求項21】
第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価する処理と、
前記評価の結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する決定処理と、
をコンピュータに実行させる演技指導プログラム。
前記評価の結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する決定処理と、
をコンピュータに実行させる演技指導プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、演技指導装置、演技指導方法および演技指導プログラムに関する。
【背景技術】
【0002】
ダンスの採点を行う技術が知られている（特許文献１参照）。従来の技術では、演技に対するスコアが算出されるものの、どうしたらスコアが良くなるのかがわからない。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１５－９７６３９号公報
【発明の概要】
【0004】
本発明の第１の態様による演技指導装置は、演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較する比較部と、前記比較部で比較した結果に基づいて、前記演技者の演技に対する指導情報を生成する生成部と、を備える。
本発明の第２の態様による演技指導装置は、第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価する評価部と、前記評価部の評価結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する決定部と、を備える。
本発明の第３の態様による演技指導方法は、第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価し、前記評価の結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する。
本発明の第４の態様による演技指導方法は、演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較し、前記比較の結果に基づいて、前記演技者の演技に対する指導情報を生成する。
本発明の第５の態様による演技指導プログラムは、演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較する処理と、前記比較の結果に基づいて、前記演技者の演技に対する指導情報を生成する生成処理と、をコンピュータに実行させる。
本発明の第６の態様による演技指導プログラムは、第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価する処理と、前記評価の結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する決定処理と、をコンピュータに実行させる。
本発明の第２の態様による演技指導装置は、第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価する評価部と、前記評価部の評価結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する決定部と、を備える。
本発明の第３の態様による演技指導方法は、第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価し、前記評価の結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する。
本発明の第４の態様による演技指導方法は、演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較し、前記比較の結果に基づいて、前記演技者の演技に対する指導情報を生成する。
本発明の第５の態様による演技指導プログラムは、演技者の演技が記録された第１の動画像を比較対象の演技が記録された参照動画情報と比較する処理と、前記比較の結果に基づいて、前記演技者の演技に対する指導情報を生成する生成処理と、をコンピュータに実行させる。
本発明の第６の態様による演技指導プログラムは、第１の演技者の演技が記録された第１の動画像、および、第２の演技者の演技が記録された第３の動画像を所定の基準に基づいて評価する処理と、前記評価の結果に基づいて、前記第１および前記第２の演技者が一緒に演技する場合の前記第１および前記第２の演技者の位置および演技内容の少なくとも一方を決定する決定処理と、をコンピュータに実行させる。
【図面の簡単な説明】
【0005】
【図1】複数人が集まって集合演技を行う場面を説明する模式図である。
【図2】実施の形態による演技指導システムを例示する模式図である。
【図3】指導者端末の表示部に表示された指導情報を例示する模式図である。
【図4】指導者端末および生徒端末を例示する図である。
【図6】図６（ａ）は、演技中の生徒が写る画像データに基づいて取得される骨格情報を説明する模式図、図６（ｂ）は、演技中のインストラクターが写る画像データに基づいて取得される骨格情報を説明する模式図、図６（ｃ）は、図６（ａ）および図６（ｂ）の骨格情報の差分を示す骨格ずれ情報を示す模式図である。
【図8】指導者端末および生徒端末で実行される処理の一例を説明するフローチャートである。
【図9】生徒端末の表示・操作入力部に表示された指導情報を例示する模式図である。
【図10】プログラムの供給を説明する図である。
【図11】変形例３による演技中の生徒の立ち位置の表示を説明する図である。
【図12】変形例４による演技中の生徒の立ち位置の表示を説明する図である。
【図13】変形例６による指導者端末の表示部に表示された指導情報を例示する模式図である。
【発明を実施するための形態】
【0006】
以下、図面を参照して発明の実施の形態について説明する。
＜複数人で行う演技＞
図１は、複数人が集まって集合演技を行う場面を説明する模式図である。演技者（以降、生徒と呼ぶ）は、体育館またはホール等に集まって演技を練習する。集合演技は、例えばダンス、器械体操、新体操、空手形、シンクロナイズドスイミング、および集団行動等が挙げられる。
＜複数人で行う演技＞
図１は、複数人が集まって集合演技を行う場面を説明する模式図である。演技者（以降、生徒と呼ぶ）は、体育館またはホール等に集まって演技を練習する。集合演技は、例えばダンス、器械体操、新体操、空手形、シンクロナイズドスイミング、および集団行動等が挙げられる。
【0007】
一般に、集合演技は、複数人による演技のタイミングが一致する、複数人による演技の形態が一致する、複数人による演技の動きに連続性がある、複数人による演技の動きが調和する等、演技全体としての統一性が見られる場合に美しいとされる。そのため指導者１０は、生徒２０、３０および４０を含む複数の生徒を集めて集合練習を行いながら、個々の生徒の演技および生徒全体の演技の統一性等をチェックして生徒たちに演技を指導する。
【0008】
個々の生徒は、例えば、個々に担当する演技を覚えた上で、複数人が集まって集合演技を練習する。しかしながら、生徒全員のスケジュールおよび練習場の制約等により、複数の生徒を集めて行う集合演技の練習が困難な場合がある。
【0009】
実施の形態では、演技指導システム１を用いることにより、指導者１０が複数の生徒を招集することなしに個々の生徒の演技を確認および指導し、集合演技する場合の生徒の立ち位置を決定し、生徒全体の演技の統一性の確認および指導等を行う。
＜システムの概要＞
図２は、実施の形態による演技指導システム１を例示する模式図である。演技指導システム１は、例えば、指導者１０が使用する指導者端末１００と、複数の生徒２０、３０、および４０がそれぞれ使用する生徒端末２００、３００および４００とを含む。指導者端末１００、生徒端末２００、３００および４００は、有線または無線のネットワーク通信網５００等を介して接続される。
実施の形態では、後に詳述する比較部および生成部を備える指導者端末１００が、演技指導装置に対応する。また、比較部および生成部を生徒端末２００等に備えてもよく、その場合は、比較部および生成部を備えた生徒端末２００等は、演技指導装置に対応する。
なお、図２において便宜上３人の生徒を図示したが、生徒の数は３人に限らず、図１の３９人より多くても少なくてもよい。
＜システムの概要＞
図２は、実施の形態による演技指導システム１を例示する模式図である。演技指導システム１は、例えば、指導者１０が使用する指導者端末１００と、複数の生徒２０、３０、および４０がそれぞれ使用する生徒端末２００、３００および４００とを含む。指導者端末１００、生徒端末２００、３００および４００は、有線または無線のネットワーク通信網５００等を介して接続される。
実施の形態では、後に詳述する比較部および生成部を備える指導者端末１００が、演技指導装置に対応する。また、比較部および生成部を生徒端末２００等に備えてもよく、その場合は、比較部および生成部を備えた生徒端末２００等は、演技指導装置に対応する。
なお、図２において便宜上３人の生徒を図示したが、生徒の数は３人に限らず、図１の３９人より多くても少なくてもよい。
【0010】
指導者端末１００は、例えばパーソナルコンピュータまたはタブレット型端末等で構成されており、少なくとも動画再生機能を備える。また、生徒端末２００、３００および４００は、例えばスマートフォン２００またはタブレット型端末等で構成されており、少なくとも動画再生機能および動画記録機能を備えている。
【0011】
なお、指導者端末１００、生徒端末２００、３００および４００を、ネットワーク通信網５００を介して接続するのは一例であって、例えばインターネットに接続しないローカルネットワーク等による接続としてもよい。
【0012】
演技指導システム１を用いた演技指導の流れを説明すると、以下の１から８の手順で行う。
１．演技指導装置から個々の生徒に対して手本の演技が記録された参照動画像（参照動画情報と呼んでもよい）を提供する。
指導者１０の指導者端末１００は、生徒端末２００、３００および４００へネットワーク通信網５００等を介して参照動画像を送信する。
参照動画像は、例えばインストラクターの演技、または、手本としてのアニメーションによる演技が記録された動画像である。演技指導装置は、インストラクターの代わりに演技が上手な生徒の演技を記録した動画像を、参照動画像として提供してもよい。
１．演技指導装置から個々の生徒に対して手本の演技が記録された参照動画像（参照動画情報と呼んでもよい）を提供する。
指導者１０の指導者端末１００は、生徒端末２００、３００および４００へネットワーク通信網５００等を介して参照動画像を送信する。
参照動画像は、例えばインストラクターの演技、または、手本としてのアニメーションによる演技が記録された動画像である。演技指導装置は、インストラクターの代わりに演技が上手な生徒の演技を記録した動画像を、参照動画像として提供してもよい。
【0013】
２．各生徒は、参照動画像に記録されている手本の演技を参考にして自己の演技を練習する。
生徒２０、３０および４０は、図２に例示するように、それぞれ生徒端末２００、３００および４００で参照動画像を再生させながら、再生中に流れる楽曲等のリズムに合わせて演技を行うことにより個別に練習する。生徒２０、３０および４０は、各自の都合がよい時間帯に、各自の好きな場所（貸しスタジオ、自宅等）で練習を行うことができる。
生徒２０、３０および４０は、図２に例示するように、それぞれ生徒端末２００、３００および４００で参照動画像を再生させながら、再生中に流れる楽曲等のリズムに合わせて演技を行うことにより個別に練習する。生徒２０、３０および４０は、各自の都合がよい時間帯に、各自の好きな場所（貸しスタジオ、自宅等）で練習を行うことができる。
【0014】
３．各生徒は、自身の演技を撮影して第１の動画像を作成する。
生徒２０、３０および４０は、図２に例示するように、それぞれ生徒端末２００、３００および４００で参照動画像を再生させながら、再生中に流れる楽曲等のリズムに合わせて演じた演技を、それぞれ生徒端末２００、３００および４００で自撮りする。生徒端末２００、３００および４００は、自撮りした演技の動画像を第１の動画像として記録する。なお、参照動画像のフレームレートと、第１の動画像のフレームレートは、例えば１秒間に３０フレーム（３０ｆｐｓ）とする。
生徒２０、３０および４０は、図２に例示するように、それぞれ生徒端末２００、３００および４００で参照動画像を再生させながら、再生中に流れる楽曲等のリズムに合わせて演じた演技を、それぞれ生徒端末２００、３００および４００で自撮りする。生徒端末２００、３００および４００は、自撮りした演技の動画像を第１の動画像として記録する。なお、参照動画像のフレームレートと、第１の動画像のフレームレートは、例えば１秒間に３０フレーム（３０ｆｐｓ）とする。
【0015】
４．各生徒は、第１の動画像を演技指導装置へ提出する。
生徒２０、３０および４０の生徒端末２００、３００および４００は、それぞれの第１の動画像を、ネットワーク通信網５００等を介して指導者端末１００へ送信する。
生徒２０、３０および４０の生徒端末２００、３００および４００は、それぞれの第１の動画像を、ネットワーク通信網５００等を介して指導者端末１００へ送信する。
【0016】
５．演技指導装置は、第１の動画像に記録されている生徒の演技を確認する。
指導者端末１００は、各生徒から送信された第１の動画像の演技を同じ時間軸で再生する。各生徒から送信された第１の動画像の演技を同じ時間軸で同期させて再生することにより、各生徒の演技の相違点および演技全体の統一性について、指導者端末１００の画面で指導者１０に対して視覚的に示すことができる。
また、指導者端末１００は、各生徒に提供した参照動画像の演技と、各生徒から送信された第１の動画像の演技とを同じ時間軸で再生して比較し、タイミングの相違、姿勢の相違、動き方の相違、跳躍の高さの相違、顔の表情の相違、演技中の立ち位置の相違、および、身長などの身体的特徴の相違の少なくとも１つを検出する。
指導者端末１００は、各生徒から送信された第１の動画像の演技を同じ時間軸で再生する。各生徒から送信された第１の動画像の演技を同じ時間軸で同期させて再生することにより、各生徒の演技の相違点および演技全体の統一性について、指導者端末１００の画面で指導者１０に対して視覚的に示すことができる。
また、指導者端末１００は、各生徒に提供した参照動画像の演技と、各生徒から送信された第１の動画像の演技とを同じ時間軸で再生して比較し、タイミングの相違、姿勢の相違、動き方の相違、跳躍の高さの相違、顔の表情の相違、演技中の立ち位置の相違、および、身長などの身体的特徴の相違の少なくとも１つを検出する。
【0017】
６．演技指導装置は、確認結果に基づいて生徒に対する指導情報を作成する。
指導者端末１００は、生徒２０、３０および４０による演技全体の統一性を高めるために必要な情報を、指導情報として生成する。
指導者端末１００は、生徒２０、３０および４０による演技全体の統一性を高めるために必要な情報を、指導情報として生成する。
【0018】
図３は、指導者端末１００の表示部１１０に表示された指導情報を例示する模式図である。指導者端末１００は、少なくとも、集合演技時（換言すると、共演時）の生徒の立ち位置と生徒の演技の習熟度とを示す二次元情報（以後マップ情報と呼ぶ）１０１と、演技中の生徒の全身を示す全身情報１０２と、演技中の生徒とインストラクターとの間の骨格情報の差分を示す骨格ずれ情報１０３と、演技の進行（時間軸）と演技の差異の大きさ（ずれ量と呼ぶ）との関係を示すグラフ情報１０４とを、指導情報として作成する。これらの各情報１０１～１０４の詳細な説明については後述する。
指導者端末１００は、個々の生徒に対する上記指導情報のうち少なくとも全身情報１０２、骨格ずれ情報１０３およびグラフ情報１０４を含む動画像を、第２の動画像として生徒ごとに記録してもよい。第２の動画像のフレームレートは、参照動画像および第１の動画像のフレームレートと同じ３０ｆｐｓとする。
指導者端末１００は、個々の生徒に対する上記指導情報のうち少なくとも全身情報１０２、骨格ずれ情報１０３およびグラフ情報１０４を含む動画像を、第２の動画像として生徒ごとに記録してもよい。第２の動画像のフレームレートは、参照動画像および第１の動画像のフレームレートと同じ３０ｆｐｓとする。
【0019】
７．演技指導装置は、個々の生徒に対して指導情報を提供する。
指導者１０の指導者端末１００は、各生徒に対する指導情報を、ネットワーク通信網５００等を介して生徒端末２００、３００および４００へ送信する。
指導者１０の指導者端末１００は、各生徒に対する指導情報を、ネットワーク通信網５００等を介して生徒端末２００、３００および４００へ送信する。
【0020】
８．各生徒は、指導情報に基づいて演技をさらに練習する。
指導者端末１００、生徒端末２００、３００および４００は、それぞれ上記３から７を繰り返す。
このような演技指導システム１の詳細について、さらに詳しく説明する。
指導者端末１００、生徒端末２００、３００および４００は、それぞれ上記３から７を繰り返す。
このような演技指導システム１の詳細について、さらに詳しく説明する。
【0021】
図４は、指導者端末１００および生徒端末２００の構成を例示する図である。
＜指導者端末の概要＞
指導者端末１００は、表示部１１０と、操作部１２０と、制御部１３０と、情報記憶部１４０と、通信部１５０と、スピーカ１６０とを含む。制御部１３０には、比較部１３１と、生成部１３２が含まれている。
＜指導者端末の概要＞
指導者端末１００は、表示部１１０と、操作部１２０と、制御部１３０と、情報記憶部１４０と、通信部１５０と、スピーカ１６０とを含む。制御部１３０には、比較部１３１と、生成部１３２が含まれている。
【0022】
表示部１１０は、有機ＥＬ表示パネルや液晶表示パネル等によって構成される。表示部１１０は、生成部１３２で生成された指導情報（マップ情報１０１、全身情報１０２、骨格ずれ情報１０３、グラフ情報１０４等）およびアイコン等を表示する。
操作部１２０は、キーボードおよびポインティングデバイス等によって構成される。なお、表示部１１０の表示面に備えられた不図示のタッチパネル部材を操作部１２０として用いてもよい。
操作部１２０は、キーボードおよびポインティングデバイス等によって構成される。なお、表示部１１０の表示面に備えられた不図示のタッチパネル部材を操作部１２０として用いてもよい。
【0023】
制御部１３０は、ＣＰＵ、ＲＯＭ、ＲＡＭ等により構成され、制御プログラムに基づいて指導者端末１００の各部の動作を制御する。制御部１３０は、例えば、表示部１１０に対する表示制御を行う他に、表示部１１０に表示されたアイコン等に対応づけられているアプリ（application program）を実行する。例えば、演技指導プログラムに対応づけられているアイコンが選択操作された場合には、演技指導プログラムを起動させて指導者端末１００を演技指導装置として機能させる。
【0024】
情報記憶部１４０は、不揮発性メモリ等で構成される。情報記憶部１４０には、例えば、生徒へ送信する参照動画像、生徒から送信された第１の動画像、および生成部１３２で生成された指導情報のデータ等が記録される。情報記憶部１４０に対するデータの記録（保存）および読み出しは、制御部１３０によって制御される。
【0025】
通信部１５０は、生徒端末２００、３００および４００との間で情報を送受信するためのデータ通信を行う。また、通信部１５０は、外部スピーカまたはヘッドフォン等の近距離無線通信機器を用いる場合には、これらの機器とも無線通信を行う。
【0026】
スピーカ１６０は、例えば参照動画像、第１の動画像に関連付けられた音声データに基づく音声を再生する。なお、音声再生は、スピーカ１６０で再生させる代わりに無線通信機能を備えた不図示の外部スピーカまたはヘッドフォン等から再生させることも可能である。外部スピーカまたはヘッドフォンを用いる場合、例えば、通信部１５０を介して外部スピーカまたはヘッドフォンへ向けて音声データを無線送信する。
【0027】
＜生徒端末の概要＞
生徒端末２００は、表示・操作入力部２１０と、制御部２２０と、情報記憶部２３０と、通信部２４０と、スピーカ２５０と、撮影部２６０とを含む。制御部２２０には、再生制御部２２１と、撮影制御部２２２と、記録制御部２２３とが含まれている。
生徒端末２００は、表示・操作入力部２１０と、制御部２２０と、情報記憶部２３０と、通信部２４０と、スピーカ２５０と、撮影部２６０とを含む。制御部２２０には、再生制御部２２１と、撮影制御部２２２と、記録制御部２２３とが含まれている。
【0028】
表示・操作入力部２１０は、画像およびアイコン等を表示するディスプレイ機能と、表示面に対するタッチ操作を受け付ける操作部機能とを兼ね備えたタッチパネルディスプレイによって構成される。
表示・操作入力部２１０は、アプリ等に対応付けられたアイコン、および指導者端末１００から送信された参照動画像、第２の動画像等の表示を行うとともに、生徒端末２００に対するユーザからの操作を受け付ける。
表示・操作入力部２１０は、アプリ等に対応付けられたアイコン、および指導者端末１００から送信された参照動画像、第２の動画像等の表示を行うとともに、生徒端末２００に対するユーザからの操作を受け付ける。
【0029】
制御部２２０は、ＣＰＵ、ＲＯＭ、ＲＡＭ等により構成され、制御プログラムに基づいて生徒端末２００の動作を制御する。制御部２２０は、タッチ操作されたアイコン等に対応付けられているアプリを実行する。例えば、タッチ操作されたアイコン等に演技指導プログラムが対応づけられている場合には、演技指導プログラムを起動させる。
【0030】
情報記憶部２３０は、不揮発性メモリ等で構成される。情報記憶部２３０には、例えば、撮影部２６０で撮影された第１の動画像、指導者から送信された参照動画像、および指導者から送信された指導情報のデータ等が記録される。情報記憶部２３０に対するデータの記録（保存）および読み出しは、記録制御部２２３によって制御される。
【0031】
通信部２４０は、生徒端末２００をスマートフォンや携帯電話等として機能させる音声データ通信と、指導者端末１００との間で情報を送受信するデータ通信とを行う。また、通信部２４０は、外部スピーカまたはヘッドフォン等の近距離無線通信機器を用いる場合には、これらの機器とも無線通信を行う。
【0032】
スピーカ２５０は、例えば参照動画像に関連付けられた音声データに基づく音声を再生する。なお、音声再生は、スピーカ２５０で再生させる代わりに無線通信機能を備えた不図示の外部スピーカまたはヘッドフォン等から再生させることも可能である。外部スピーカまたはヘッドフォンを用いる場合、例えば、通信部２４０を介して外部スピーカまたはヘッドフォンへ向けて音声データを無線送信する。
【0033】
撮影部２６０は、撮影レンズと撮像センサとを有し、例えば、生徒２０が練習する演技を撮影して第１の動画像を取得する。撮影部２６０で取得した第１の動画像は、情報記憶部２３０に記録される。
なお、情報記憶部２３０に記録された第１の動画像は、通信部２４０を介して指導者端末１００へ送信することが可能である。
生徒端末３００および４００は、生徒端末２００の構成と同様であるので説明を省略する。
なお、情報記憶部２３０に記録された第１の動画像は、通信部２４０を介して指導者端末１００へ送信することが可能である。
生徒端末３００および４００は、生徒端末２００の構成と同様であるので説明を省略する。
【0034】
＜指導情報の詳細な説明＞
生成部１３２で生成される指導情報について、さらに説明する。指導情報は、図３に例示したように、生徒の演技に関する情報を視覚的に示す情報である。
１．マップ情報
生成部１３２は、例えば、集合演技時の生徒の立ち位置案（配置案）に基づき、生徒の人数分のスペースを二次元状に配置したマップ情報を生成する。図１に例示した配置案の場合、生成部１３２は、生徒１人当たりのスペースを六角形で表すとともに、六角形のスペースをハニカム状に配置する。なお、スペースの形状は六角形に限らず、円形、四角形、または八角形で表してもよく、複数の形状を組み合わせた形状で表してもよい。
生成部１３２で生成される指導情報について、さらに説明する。指導情報は、図３に例示したように、生徒の演技に関する情報を視覚的に示す情報である。
１．マップ情報
生成部１３２は、例えば、集合演技時の生徒の立ち位置案（配置案）に基づき、生徒の人数分のスペースを二次元状に配置したマップ情報を生成する。図１に例示した配置案の場合、生成部１３２は、生徒１人当たりのスペースを六角形で表すとともに、六角形のスペースをハニカム状に配置する。なお、スペースの形状は六角形に限らず、円形、四角形、または八角形で表してもよく、複数の形状を組み合わせた形状で表してもよい。
【0035】
図３におけるスペース内の塗りつぶしパターンについて説明する。実施の形態では、制御部１３０が生徒の演技の習熟度を、例えば３段階に分類する。例えば、参照動画像に記録された手本の演技と第１の動画像に記録された生徒の演技との間のずれ量が所定の閾値以下に収まる時間比率が、演技開始から演技終了までの１００パーセントの場合を、その生徒の演技の習熟度が高いと判定する。また、演技のずれ量が所定の閾値以下に収まる時間比率が、演技開始から演技終了までの７０パーセント以上の場合を、その生徒の演技の習熟度が普通と判定する。さらに、演技のずれ量が所定の閾値以下に収まる時間比率が演技開始から演技終了までの７０パーセント未満の場合を、その生徒の演技の習熟度が低いと判定する。
なお、所定の閾値は、例えば生徒の身長の高低、生徒の立ち位置等によって適宜調節して構わない。
なお、所定の閾値は、例えば生徒の身長の高低、生徒の立ち位置等によって適宜調節して構わない。
【0036】
制御部１３０は、マップ情報１０１におけるスペース内の塗りつぶしパターンを、上述した演技の習熟度に基づいて制御する。一例をあげると、制御部１３０は、マップ情報１０１のうち演技の習熟度が高いと判定した生徒に対応するスペースについて、白く塗りつぶす。
【0037】
また、制御部１３０は、マップ情報１０１のうち演技の習熟度が普通と判定した生徒に対応するスペースについて、ドットパターンで塗りつぶす。さらに、制御部１３０は、マップ情報１０１のうち演技の習熟度が低いと判定した生徒に対応するスペースについて、斜線パターンで塗りつぶす。
このように、制御部１３０は、各生徒に対応するスペースに対する塗りつぶしパターンを、各生徒の演技の習熟度に基づいてそれぞれ決定し、対応するスペースを塗りつぶす。
このようなマップ情報１０１におけるスペース内の塗りつぶしパターンの制御の詳細については、グラフ情報１０４の説明とともに後述する。
このように、制御部１３０は、各生徒に対応するスペースに対する塗りつぶしパターンを、各生徒の演技の習熟度に基づいてそれぞれ決定し、対応するスペースを塗りつぶす。
このようなマップ情報１０１におけるスペース内の塗りつぶしパターンの制御の詳細については、グラフ情報１０４の説明とともに後述する。
【0038】
表示部１１０に表示されたマップ情報１０１は、生徒の立ち位置を示すとともに、タッチ操作のターゲットとしても機能する。制御部１３０は、表示部１１０に表示中のマップ情報１０１のうちスペースＰがタッチ操作されると、スペースＰに対応する位置に配置される生徒（例えば生徒２０）を選択する。
【0039】
また、制御部１３０は、スペースＰに対してピンチアウト（pinch out）操作が行われると、マップ情報１０１のうちスペースＰを中心とする領域を拡大して表示部１１０に表示させる。図５（ａ）～図５（ｃ）は、スペースＰを中心とする領域をマップ情報１０１から抜き出した抜粋情報１０８を例示する図である。生徒２０に対応するスペースＰの中央に位置する丸印Ｓは、演技中の生徒２０の立ち位置を示す。生徒２０から見て左が図５（ａ）の右、生徒２０から見て右が図５（ａ）の左に対応する。また、生徒２０から見て前が図５（ａ）の下、生徒２０から見て後ろが図５（ａ）の上に対応する。
【0040】
制御部１３０は、生徒２０が演技を開始した初期位置をスペースＰの中心に対応させて、演技中の生徒が移動すると丸印Ｓを移動させる。スペースＰの対角線の長さは、例えば２ｍに相当するものとする。図５（ａ）は、演技中の生徒２０の立ち位置にずれがない、換言すると、予定通りの立ち位置で演技を行っている状態を表す。図５（ｂ）は、演技中の生徒２０の立ち位置が生徒２０から見て右方にずれた、換言すると、初期位置から右へ移動した状態を表す。図５（ｃ）は、演技中の生徒２０の立ち位置が生徒２０から見て後方にずれた、換言すると、初期位置から後ろへ移動した状態を表す。このように、生成部１３２で生成される指導情報に基づき、指導者１０は、演技中の生徒の立ち位置のずれを知ることが可能である。
なお、演技中の生徒２０の立ち位置の移動の検出方法については次項で説明する。
なお、演技中の生徒２０の立ち位置の移動の検出方法については次項で説明する。
【0041】
２．全身情報
生成部１３２は、複数の生徒から送信された複数の第１の動画像のそれぞれに基づいて、写っている生徒の全身部分を切り抜くクロップ(crop)処理をするなどして、全身情報１０２としてのクロップ動画像を生成する。
また、生成部１３２は、各クロップ動画像のタイムコードの開始値を参照動画像のタイムコードの開始値と一致させる。インストラクターの演技が記録された参照動画像と、生徒の演技が記録されたクロップ動画像とでタイムコードの開始値を一致させておくことにより、両動画像を同時に再生する場合に両者の演技が同期して進行し、対応するコマ（以後フレームと呼ぶ）同士の比較を容易に行うことが可能になる。
生成部１３２は、複数の生徒から送信された複数の第１の動画像のそれぞれに基づいて、写っている生徒の全身部分を切り抜くクロップ(crop)処理をするなどして、全身情報１０２としてのクロップ動画像を生成する。
また、生成部１３２は、各クロップ動画像のタイムコードの開始値を参照動画像のタイムコードの開始値と一致させる。インストラクターの演技が記録された参照動画像と、生徒の演技が記録されたクロップ動画像とでタイムコードの開始値を一致させておくことにより、両動画像を同時に再生する場合に両者の演技が同期して進行し、対応するコマ（以後フレームと呼ぶ）同士の比較を容易に行うことが可能になる。
【0042】
制御部１３０は、表示部１１０に表示中のマップ情報１０１のうち、指導者１０によりスペースＰがタッチ操作されると、スペースＰに対応する位置に配置される生徒（例えば生徒２０）を選択する。そして、選択した生徒２０が写るクロップ動画像を先頭フレームから再生させる。
【0043】
図３には、全身情報１０２の一例として、再生中のクロップ動画像の１フレームが例示されている。生成部１３２は、全身情報１０２に基づいて、生徒２０の足元に映る床材の継ぎ目と生徒２０との位置関係に着目して演技中の生徒２０の立ち位置の移動（移動方向と概略の移動距離）を検出する。床材に継ぎ目がない場合は、あらかじめ生徒２０が目印になるマークを床に付しておくことにより、生徒２０の足元に映るマークと生徒２０との位置関係に基づき、演技中の生徒２０の立ち位置の移動を検出する。なお、生成部１３２は、先頭フレームにおける生徒２０の位置を、立ち位置の基準位置として自動的に設定してもよい。
【0044】
３．骨格ずれ情報
生成部１３２は、選択されている生徒２０が写るクロップ動画像の画像データと、生徒２０に提供した参照動画像の画像データとに基づいて、生徒２０とインストラクターとの間の骨格情報の差分を示す骨格ずれ情報１０３を生成する。
生成部１３２は、選択されている生徒２０が写るクロップ動画像の画像データと、生徒２０に提供した参照動画像の画像データとに基づいて、生徒２０とインストラクターとの間の骨格情報の差分を示す骨格ずれ情報１０３を生成する。
【0045】
生成部１３２が画像データに基づいて骨格情報を取得する手順を例示すると、以下の通りである。
（１）生成部１３２は、演技中の生徒２０が写るクロップ動画像に対して二値化やラベリングなどの画像処理を施し、画像に写る生徒２０の輪郭を検出する。図６（ａ）は、演技中の生徒２０が写る画像データに基づいて取得される骨格情報を説明する模式図である。図６（ａ）において薄く示す線は、検出された輪郭を示す。
（２）生成部１３２は、（１）で検出した輪郭に対してパターン認識を行い、画像における生徒２０のジョイントを検出する。これにより、生徒２０の各ジョイントに対応する二次元の座標（ｘ，ｙ）が取得される。図６（ａ）において斜線で塗りつぶした複数の丸印は、検出されたジョイントを示す。
（３）生成部１３２は、（２）で取得した二次元の座標を、連結しているジョイントごとに対応付ける。このような手順により、演技中の生徒２０の各ジョイントの位置を示す二次元の座標の集合（骨格情報と呼ぶ）が取得される。
（１）生成部１３２は、演技中の生徒２０が写るクロップ動画像に対して二値化やラベリングなどの画像処理を施し、画像に写る生徒２０の輪郭を検出する。図６（ａ）は、演技中の生徒２０が写る画像データに基づいて取得される骨格情報を説明する模式図である。図６（ａ）において薄く示す線は、検出された輪郭を示す。
（２）生成部１３２は、（１）で検出した輪郭に対してパターン認識を行い、画像における生徒２０のジョイントを検出する。これにより、生徒２０の各ジョイントに対応する二次元の座標（ｘ，ｙ）が取得される。図６（ａ）において斜線で塗りつぶした複数の丸印は、検出されたジョイントを示す。
（３）生成部１３２は、（２）で取得した二次元の座標を、連結しているジョイントごとに対応付ける。このような手順により、演技中の生徒２０の各ジョイントの位置を示す二次元の座標の集合（骨格情報と呼ぶ）が取得される。
【0046】
また、生成部１３２は、取得した各ジョイントの座標に対して、各ジョイントを識別するジョイント識別情報を対応付ける。例えば、左肘の座標を取得した場合、左肘の座標に、識別情報として「左肘」を対応付ける。
【0047】
生成部１３２はさらに、演技中のインストラクターが写る参照動画像に対して同様の処理を行い、演技中のインストラクターの各ジョイントの位置を示す骨格情報を取得する。図６（ｂ）は、演技中のインストラクターが写る画像データに基づいて取得される骨格情報を説明する模式図である。図６（ｂ）において複数の白丸印は、検出されたジョイントを示す。なお、画像データに基づいて骨格情報を取得する技術は公知であるので、骨格情報の取得に関する詳細な説明については省略する。また、骨格情報の取得は、ＡＩ（artificial intelligence）を用いて取得する手法を採用してもよい。
【0048】
図６（ｃ）は、図６（ａ）および図６（ｂ）の骨格情報の差分を示す骨格ずれ情報１０３を示す模式図である。生成部１３２は、表示部１１０に表示されている全身情報１０２のうち、生徒２０とインストラクターとの間の骨格情報の差分が所定値を超えている部位をハイライト表示する。ハイライト表示の代わりに、他の部位の表示と色を変えて表示態様を異ならせてもよい。
指導者１０が、表示部１１０の表示面をタッチ操作するなどして、全身情報１０２のうちハイライト表示されている領域Ｒを指定すると、生成部１３２は、クロップ動画像および参照動画像の対応するフレームの図６（ａ）および図６（ｂ）の破線で囲む領域Ｒについて、演技中の生徒２０とインストラクターとの間の骨格情報の差分を示す骨格ずれ情報１０３を表示する。
指導者１０が、表示部１１０の表示面をタッチ操作するなどして、全身情報１０２のうちハイライト表示されている領域Ｒを指定すると、生成部１３２は、クロップ動画像および参照動画像の対応するフレームの図６（ａ）および図６（ｂ）の破線で囲む領域Ｒについて、演技中の生徒２０とインストラクターとの間の骨格情報の差分を示す骨格ずれ情報１０３を表示する。
【0049】
骨格ずれ情報１０３は、例えば、指定された領域Ｒを拡大した上で、演技中の生徒２０とインストラクターのジョイントを重ね合わせることにより、生徒２０とインストラクターのジョイントの位置の差分を視覚的に表わすように生成される。このように構成したので、例えば、演技する生徒２０の左腕がインストラクターの左腕より下がっている等を、骨格ずれ情報１０３を観察する指導者１０が気づきやすくなる。
制御部１３０は、クロップ動画像の再生に同期して、指定された領域Ｒについての骨格ずれ情報１０３を表示させる。換言すると、クロップ動画像の動きに合わせて骨格ずれ情報１０３が動く。
制御部１３０は、クロップ動画像の再生に同期して、指定された領域Ｒについての骨格ずれ情報１０３を表示させる。換言すると、クロップ動画像の動きに合わせて骨格ずれ情報１０３が動く。
【0050】
４．グラフ情報
グラフ情報１０４は、横軸が再生するクロップ動画像の再生時間（換言すると、生徒２０による演技の進行時間）を示し、縦軸が生徒２０とインストラクターとの演技のずれ量を示す。縦軸は、例えば、ずれ量なしが０（ゼロ）、生徒２０の演技のタイミングがインストラクターの演技に対して進む場合をプラス（＋）、遅れる場合をマイナス（－）で表す。演技の進行時間は、動画データのタイムコードに基づいて表され、横軸の左端が先頭フレーム、横軸の右端が末尾フレームに対応する。例えば演技時間が２分の場合、横軸全体が３０（ｆｐｓ）×２×６０（ｓｅｃ）＝３６００フレームに相当する。
グラフ情報１０４は、横軸が再生するクロップ動画像の再生時間（換言すると、生徒２０による演技の進行時間）を示し、縦軸が生徒２０とインストラクターとの演技のずれ量を示す。縦軸は、例えば、ずれ量なしが０（ゼロ）、生徒２０の演技のタイミングがインストラクターの演技に対して進む場合をプラス（＋）、遅れる場合をマイナス（－）で表す。演技の進行時間は、動画データのタイムコードに基づいて表され、横軸の左端が先頭フレーム、横軸の右端が末尾フレームに対応する。例えば演技時間が２分の場合、横軸全体が３０（ｆｐｓ）×２×６０（ｓｅｃ）＝３６００フレームに相当する。
【0051】
生成部１３２は、クロップ動画像と参照動画像とに基づいて、対応するフレームごとに演技中の生徒２０のジョイントと手本の演技を行うインストラクターのジョイントとのずれ量を積算し、積算値をそのフレームにおける演技のずれ量とする。演技のずれ量に基づく演技の習熟度の判定について、一例を説明する。
上述したように、演技時間が２分の場合は演技開始から演技終了までの時間が３６００フレームに相当する。そのため、個々のフレームにおいて算出された演技のずれ量が３６００フレーム全てで所定の閾値以下である場合、時間比率が３６００／３６００＝１００パーセントとなるので、制御部１３０は演技の習熟度が高いと判定する。
上述したように、演技時間が２分の場合は演技開始から演技終了までの時間が３６００フレームに相当する。そのため、個々のフレームにおいて算出された演技のずれ量が３６００フレーム全てで所定の閾値以下である場合、時間比率が３６００／３６００＝１００パーセントとなるので、制御部１３０は演技の習熟度が高いと判定する。
【0052】
また、個々のフレームにおいて算出された演技のずれ量が、全３６００フレームの７０パーセントである２５２０フレーム以上で所定の閾値以下である場合、時間比率が７０パーセント以上となるので、制御部１３０は演技の習熟度が普通と判定する。
さらに、個々のフレームにおいて算出された演技のずれ量が所定の閾値以下となるフレーム数が２５２０フレームよりも少ない場合、時間比率が７０パーセント未満となるので、制御部１３０は演技の習熟度が低いと判定する。
さらに、個々のフレームにおいて算出された演技のずれ量が所定の閾値以下となるフレーム数が２５２０フレームよりも少ない場合、時間比率が７０パーセント未満となるので、制御部１３０は演技の習熟度が低いと判定する。
【0053】
グラフ情報１０４において一点鎖線で示す曲線Ｌ３は、制御部１３０で演技の習熟度が高いと判定された生徒について、演技の開始から終了までの演技のずれ量の平均の変化を示す。
グラフ情報１０４において実線で示す曲線Ｌ１は、選択されている生徒２０について、演技の開始から終了までの演技のずれ量の変化を示す。
グラフ情報１０４において破線で示す曲線Ｌ２は、生徒全員について、演技の開始から終了までの演技のずれ量の平均の変化を示す。
グラフ情報１０４において実線で示す曲線Ｌ１は、選択されている生徒２０について、演技の開始から終了までの演技のずれ量の変化を示す。
グラフ情報１０４において破線で示す曲線Ｌ２は、生徒全員について、演技の開始から終了までの演技のずれ量の平均の変化を示す。
【0054】
制御部１３０はさらに、クロップ動画像の再生に同期して、グラフ情報１０４において縦線Ｑを左から右へ移動させる。縦線Ｑの横軸方向の位置は、全身情報１０２として表示されているクロップ動画像のフレーム（換言すると、再生開始時からの経過時間）、および骨格ずれ情報１０３のフレームに対応する。例えば、２分の演技が記録されたクロップ動画像を３０秒再生した時点では、グラフ情報の左端から１／４付近を縦線Ｑが移動する。
【0055】
制御部１３０は、早戻しボタン１０５と、一時停止ボタン１０７と、早送りボタン１０６とを表示部１１０に表示させる。指導者１０が早戻しボタン１０５をタッチ操作すると、制御部１３０は、再生中のクロップ動画像の再生位置を、現在の再生位置（再生開始時からの経過時間が３０秒）よりも後ろ側（先頭側）へ１０秒分（換言すると３００フレーム）早戻しする。また、制御部１３０は、指導者１０が早送りボタン１０６をタッチ操作すると、再生中のクロップ動画像の再生位置を、現在の再生位置よりも前側（末尾側）へ１０秒分（換言すると３００フレーム）早送りする。
【0056】
指導者１０が一時停止ボタン１０７をタッチ操作すると、制御部１３０は、クロップ動画像の再生を一時停止するとともに、一時停止ボタン１０７の表示に代えて不図示の再生ボタンを表示部１１０に表示させる。指導者１０が再生ボタンをタッチ操作すると、制御部１３０は、一時停止中の再生位置からクロップ動画像の再生を再開するとともに、再生ボタンの表示に代えて一時停止ボタン１０７を表示させる。
【0057】
制御部１３０は、上述した早戻しボタン１０５、早送りボタン１０６、および一時停止ボタン１０７が所定時間操作されない場合は、早戻しボタン１０５、早送りボタン１０６、および一時停止ボタン１０７（または再生ボタン）の表示を非表示にする。
制御部１３０は、上記ボタンの表示を非表示にした状態で指導者１０によって表示部１１０の表示面がタッチ操作されると、非表示にしたボタンを再び表示させる。
制御部１３０は、上記ボタンの表示を非表示にした状態で指導者１０によって表示部１１０の表示面がタッチ操作されると、非表示にしたボタンを再び表示させる。
【0058】
制御部１３０はさらに、指導者１０が縦線Ｑに対して指などで左右方向に移動させるドラッグ操作を行うと、再生中（または一時停止中）のクロップ動画像の再生位置を、縦線Ｑの移動方向に合わせて、現在の再生位置よりも後ろ側（先頭側）または前側（末尾側）に変更する。
このようなシーク操作を行う構成にしたので、指導者１０は、例えば縦線Ｑを曲線Ｌ１のずれ量が大きい区間へ移動させることにより、その再生位置に対応する全身情報１０２および骨格ずれ情報１０３を表示させることができる。指導者１０は、骨格ずれ情報１０３を観察して、生徒２０の身体のどの部位の動きがインストラクターの動きと相違しているかについて、確認することができる。
このようなシーク操作を行う構成にしたので、指導者１０は、例えば縦線Ｑを曲線Ｌ１のずれ量が大きい区間へ移動させることにより、その再生位置に対応する全身情報１０２および骨格ずれ情報１０３を表示させることができる。指導者１０は、骨格ずれ情報１０３を観察して、生徒２０の身体のどの部位の動きがインストラクターの動きと相違しているかについて、確認することができる。
【0059】
クロップ動画像を再生している（再生中）場合におけるマップ情報１０１のスペース内の塗りつぶしパターンの制御について説明する。制御部１３０は、クロップ動画像の再生を開始すると、クロップ動画像の再生を終了するまでの間、マップ情報１０１におけるスペース内の塗りつぶしパターンを、クロップ動画像の再生中に移動する縦線Ｑの位置に対応するフレームの各生徒の演技のずれ量に基づいて制御する。
例えば、縦線Ｑの位置に対応し、全身情報１０２として表示されているクロップ動画像のフレームが先頭フレームから９０１フレーム目（再生開始時からの経過時間が３０秒）である場合を例に説明する。
例えば、縦線Ｑの位置に対応し、全身情報１０２として表示されているクロップ動画像のフレームが先頭フレームから９０１フレーム目（再生開始時からの経過時間が３０秒）である場合を例に説明する。
【0060】
制御部１３０は、マップ情報１０１において各生徒に対応するスペースに対する塗りつぶしパターンを、各生徒のクロップ動画像の９０１フレーム目と、対応する参照動画像の９０１フレーム目とを用いて算出された演技のずれ量に基づいて決定する。
例えば、参照動画像に記録された手本の演技とクロップ動画像に記録された生徒の演技との間のずれ量が所定の閾値以下に収まっている場合、その生徒に対応するスペースを白く塗りつぶす。また、演技のずれ量が所定の閾値の１．３倍以下に収まっている場合、その生徒に対応するスペースをドットパターンで塗りつぶす。さらに、演技のずれ量が所定の閾値の１．３倍を超える場合、その生徒に対応するスペースを斜線パターンで塗りつぶす。
例えば、参照動画像に記録された手本の演技とクロップ動画像に記録された生徒の演技との間のずれ量が所定の閾値以下に収まっている場合、その生徒に対応するスペースを白く塗りつぶす。また、演技のずれ量が所定の閾値の１．３倍以下に収まっている場合、その生徒に対応するスペースをドットパターンで塗りつぶす。さらに、演技のずれ量が所定の閾値の１．３倍を超える場合、その生徒に対応するスペースを斜線パターンで塗りつぶす。
【0061】
このように構成したので、再生するクロップ動画像における演技の進行に伴い、各スペースの塗りつぶしパターンがリアルタイムに変化する。そのため、マップ情報１０１を観察する指導者１０は、演技のずれ量が小さい（または大きい）生徒の分布状態を、容易に確認することができる。
なお、実施の形態では、マップ情報１０１における各スペースに対する塗りつぶしパターンを変えて生徒の演技の習熟度を示したが、各スペースに対する塗りつぶし色を変えて生徒の演技の習熟度を示してもよい。また、上述したリアルタイムの変化に加えて、演技終了後に演技全体での演技のずれ量の平均値を算出し、この平均値を演技全体の評価結果としてマップ情報１０１にパターン表示してもよい。さらに、演技の特定区間における演技のずれ量の平均値を算出し、この平均値を演技の特定区間の評価結果としてマップ情報１０１にパターン表示してもよい。
なお、実施の形態では、マップ情報１０１における各スペースに対する塗りつぶしパターンを変えて生徒の演技の習熟度を示したが、各スペースに対する塗りつぶし色を変えて生徒の演技の習熟度を示してもよい。また、上述したリアルタイムの変化に加えて、演技終了後に演技全体での演技のずれ量の平均値を算出し、この平均値を演技全体の評価結果としてマップ情報１０１にパターン表示してもよい。さらに、演技の特定区間における演技のずれ量の平均値を算出し、この平均値を演技の特定区間の評価結果としてマップ情報１０１にパターン表示してもよい。
【0062】
＜生徒の配置案を提示＞
指導者１０が、例えば表示部１１０に表示された不図示のリクエストボタンをタッチ操作するなどして生徒の配置案をリクエストすると、生成部１３２は、集合演技時の生徒の立ち位置の再配置案を生成する。図７（ａ）は、リクエスト前の配置案（初期配置と呼ぶ）に基づくマップ情報１０１を例示する図であり、図７（ｂ）は、生成部１３２で生成された再配置案に基づくマップ情報１０１を例示する図である。
指導者１０が、例えば表示部１１０に表示された不図示のリクエストボタンをタッチ操作するなどして生徒の配置案をリクエストすると、生成部１３２は、集合演技時の生徒の立ち位置の再配置案を生成する。図７（ａ）は、リクエスト前の配置案（初期配置と呼ぶ）に基づくマップ情報１０１を例示する図であり、図７（ｂ）は、生成部１３２で生成された再配置案に基づくマップ情報１０１を例示する図である。
【0063】
生成部１３２は、例えば、図７（ａ）の白い塗りつぶしパターンに対応する生徒（換言すると、習熟度が高い生徒）の立ち位置を、前列寄りかつ中央寄りの位置に集めるように配置し直す。また、生成部１３２は、図７（ａ）において斜線による塗りつぶしパターンに対応する生徒（換言すると、習熟度が低い生徒）の立ち位置を、後列寄りまたは中央から離れた左右端の近傍に集めるように配置し直す。さらにまた、生成部１３２は、図７（ａ）においてドットパターンに対応する生徒（換言すると、習熟度が普通の生徒）の立ち位置を、習熟度が高い生徒と習熟度が低い生徒との間の位置するように配置し直す。このように生成された再配置案は、図７（ｂ）に例示したように、習熟度が高い生徒を目立ちやすい位置に集め、習熟度が低い生徒を目立ちにくい位置に集めることにより、集合演技を鑑賞する者へ好印象を与えることができる。
なお、再配置案は、指導者１０が操作部１２０を操作することにより手動で微調整することができる。
なお、再配置案は、指導者１０が操作部１２０を操作することにより手動で微調整することができる。
【0064】
また、生成部１３２は、演技の習熟度が同等の生徒に対して、身長がより低い生徒を前寄りに、身長がより高い生徒を後寄りに立ち位置を配置し直す。さらにまた、生成部１３２は、演技の習熟度が同等の生徒に対して、表情が明るい（例えば笑顔）生徒を前列寄りかつ中央寄りの位置に立ち位置を配置し直す。さらに、生成部１３２は、演技の習熟度が同等の生徒に対して、演技の見栄えが良い（例えば、動作が綺麗、動きの切れがよい等）生徒を前列寄りかつ中央寄りの位置に立ち位置を配置し直す。男女のグループを均等に配置する、または、男女でグループ分けをしないように配置し直す。なお、再配置案は、指導者１０が操作部１２０を操作することにより手動で微調整することができる。
このように生成された再配置案は、集合演技を鑑賞する者へ好印象を与えることができる。
このように生成された再配置案は、集合演技を鑑賞する者へ好印象を与えることができる。
【0065】
＜生徒へのアドバイスを提示＞
指導者１０が、例えば表示部１１０に表示された不図示のリクエストボタンをタッチ操作するなどして生徒へのアドバイス案をリクエストすると、生成部１３２は、生徒に対するメッセージを生成する。例えば、図３に例示した骨格ずれ情報１０３が得られている場合には、生徒の演技をインストラクターの演技に近づけるためのメッセージ「もっと腕を高く上げよう！」を生成する。
指導者１０が、例えば表示部１１０に表示された不図示のリクエストボタンをタッチ操作するなどして生徒へのアドバイス案をリクエストすると、生成部１３２は、生徒に対するメッセージを生成する。例えば、図３に例示した骨格ずれ情報１０３が得られている場合には、生徒の演技をインストラクターの演技に近づけるためのメッセージ「もっと腕を高く上げよう！」を生成する。
【0066】
また、演技中の生徒の立ち位置について、図５（ｂ）に例示した立ち位置のずれが検出されている場合には、生成部１３２は、その生徒に対して右側のスペースへはみ出さないように意識させるためのメッセージ「右側へずれないように！」を生成する。さらに、演技中の生徒の立ち位置について、図５（ｃ）に例示した立ち位置のずれが検出されている場合には、その生徒に対して後ろ側のスペースへはみ出さないように意識させるためのメッセージ「後ろに寄りすぎないで！」を生成する。
【0067】
指導者１０は、生成部１３２で生成されたメッセージに対して、操作部１２０を介してメッセージを追加する操作およびメッセージを編集する操作を行うことができる。例えば、生徒の自主練習方法をメッセージに含めることができる。
また、指導者１０は、生徒に提供した参照動画像に記録した演技内容が難しすぎると判断した場合には、演技構成の難易度を易しく変更した（換言すると、生徒の一部または生徒全員の演技構成を易しい振り付けに変更した）新たな参照動画像を生徒に提供することができる。指導者１０はさらに、生徒に提供した参照動画像に記録した演技内容が易しすぎると判断した場合には、演技構成の難易度を難しく変更した（換言すると、生徒の少なくとも１人または生徒全員の演技構成を難しい振り付けに変更した）新たな参照動画像を生徒に提供することができる。
また、指導者１０は、生徒に提供した参照動画像に記録した演技内容が難しすぎると判断した場合には、演技構成の難易度を易しく変更した（換言すると、生徒の一部または生徒全員の演技構成を易しい振り付けに変更した）新たな参照動画像を生徒に提供することができる。指導者１０はさらに、生徒に提供した参照動画像に記録した演技内容が易しすぎると判断した場合には、演技構成の難易度を難しく変更した（換言すると、生徒の少なくとも１人または生徒全員の演技構成を難しい振り付けに変更した）新たな参照動画像を生徒に提供することができる。
【0068】
＜フローチャートの説明＞
上述した演技指導システム１を構成する指導者端末１００および生徒端末２００でそれぞれ実行される処理の一例について、図８に例示するフローチャートを参照して説明する。
（指導者端末）
制御部１３０は、指導者１０によって演技指導プログラムに対応付けられているアイコンが選択操作された場合には、演技指導プログラムを起動させて図８による処理（指導者端末）を実行する。なお、生徒端末２００と指導者端末１００との間は、後述するステップＳ１０２、Ｓ１０４、およびＳ１１０等、必要時において適宜通信を行うものとする。
上述した演技指導システム１を構成する指導者端末１００および生徒端末２００でそれぞれ実行される処理の一例について、図８に例示するフローチャートを参照して説明する。
（指導者端末）
制御部１３０は、指導者１０によって演技指導プログラムに対応付けられているアイコンが選択操作された場合には、演技指導プログラムを起動させて図８による処理（指導者端末）を実行する。なお、生徒端末２００と指導者端末１００との間は、後述するステップＳ１０２、Ｓ１０４、およびＳ１１０等、必要時において適宜通信を行うものとする。
【0069】
ステップＳ１０２において、制御部１３０は、あらかじめ登録されている生徒（生徒端末２００－４００）に、個々の生徒の手本の演技が記録された参照動画像を送信してステップＳ１０４へ進む。
【0070】
ステップＳ１０４において、制御部１３０は、生徒（生徒端末２００－４００）から、各生徒の演技が記録された第１の動画像を受信してステップＳ１０６へ進む。
ステップＳ１０６において、制御部１３０は、各生徒に提供した参照動画像の演技と、各生徒から送信された第１の動画像の演技とを比較部１３１で比較してステップＳ１０８へ進む。比較部１３１で行う比較処理により、制御部１３０は、生徒ごとに演技のタイミングの相違、姿勢の相違、動き方の相違、跳躍の高さの相違、顔の表情の相違、演技中の立ち位置の相違、および、身長などの身体的特徴の相違の少なくとも１つを検出する。
ステップＳ１０６において、制御部１３０は、各生徒に提供した参照動画像の演技と、各生徒から送信された第１の動画像の演技とを比較部１３１で比較してステップＳ１０８へ進む。比較部１３１で行う比較処理により、制御部１３０は、生徒ごとに演技のタイミングの相違、姿勢の相違、動き方の相違、跳躍の高さの相違、顔の表情の相違、演技中の立ち位置の相違、および、身長などの身体的特徴の相違の少なくとも１つを検出する。
【0071】
ステップＳ１０８において、制御部１３０は、各生徒に対して、図３を参照して説明した指導情報を生成してステップＳ１１０へ進む。指導情報は、生徒２０、３０および４０による演技全体の統一性を高めるための情報である。
【0072】
ステップＳ１１０において、制御部１３０は、生徒（生徒端末２００－４００）に、各生徒に対する指導情報を送信してステップＳ１１２へ進む。送信する指導情報は、上述した全身情報１０２、骨格ずれ情報１０３およびグラフ情報１０４と、図５（ａ）～図５（ｃ）に例示した、生徒を中心とする領域をマップ情報１０１から抜き出した抜粋情報１０８とを含む。
なお、全身情報１０２、骨格ずれ情報１０３、グラフ情報１０４および抜粋情報１０８を、第２の動画像として生成し、第２の動画像を生徒（生徒端末２００－４００）に送信してもよい。
なお、全身情報１０２、骨格ずれ情報１０３、グラフ情報１０４および抜粋情報１０８を、第２の動画像として生成し、第２の動画像を生徒（生徒端末２００－４００）に送信してもよい。
【0073】
ステップＳ１１２において、制御部１３０は終了するか否かを判定する。制御部１３０は、指導者１０によって終了操作が行われた場合には、ステップＳ１１２を肯定判定して指導者端末１００による処理を終了する。制御部１３０は、指導者１０によって終了操作が行われない場合には、ステップＳ１１２を否定判定してステップＳ１０２へ戻り、上述した処理を繰り返す。
【0074】
（生徒端末）
生徒端末を代表して生徒２０の生徒端末２００を例に説明する。
制御部２２０は、生徒２０によって演技指導プログラムに対応付けられているアイコンが選択操作された場合には、演技指導プログラムを起動させて図８による処理（生徒端末）を実行する。
生徒端末を代表して生徒２０の生徒端末２００を例に説明する。
制御部２２０は、生徒２０によって演技指導プログラムに対応付けられているアイコンが選択操作された場合には、演技指導プログラムを起動させて図８による処理（生徒端末）を実行する。
【0075】
ステップＳ２０２において、制御部２２０は、指導者１０（指導者端末１００）から送信された情報を受信してステップＳ２０４へ進む。ステップＳ２０４において、制御部２２０は、指導者端末１００からの情報が参照動画像であるか、指導情報であるかを判定する。制御部２２０は、参照動画像を受信した場合にステップＳ２０６へ進み、指導情報を受信した場合にステップＳ２２０へ進む。
【0076】
ステップＳ２０６へ進むのは、生徒端末２００で参照動画像を再生する、または、生徒端末２００で生徒２０の演技を撮影（記録）する場合である。そのため制御部２２０は、先ずステップＳ２０６において参照動画像を再生するか否かを判定する。制御部２２０は、表示・操作入力部２１０に再生指示が入力された場合にステップＳ２０６を肯定判定してステップＳ２０８へ進み、表示・操作入力部２１０に再生指示が入力されない場合にはステップＳ２０６を否定判定してステップＳ２１２へ進む。
【0077】
ステップＳ２０８において、制御部２２０は、再生制御部２２１で参照動画像を再生させてステップＳ２１０へ進む。この再生により、参照動画像として記録されている楽曲が再生され、楽曲のリズムに合わせて手本の演技が再生される。生徒２０は、手本の演技を参考に、楽曲のリズムに合わせて自己の演技を練習する。
【0078】
ステップＳ２１０において、制御部２２０は、参照動画像をもう一度再生するか否かを判定する。制御部２２０は、表示・操作入力部２１０に再生指示が入力された場合にステップＳ２１０を肯定判定してステップＳ２０８へ戻り、再生処理を繰り返す。また、表示・操作入力部２１０に再生指示が入力されない場合には、ステップＳ２１０を否定判定してステップＳ２１２へ進む。
【0079】
制御部２２０は、ステップＳ２１２において生徒２０の演技を記録するか否かを判定する。制御部２２０は、表示・操作入力部２１０に記録指示が入力された場合にステップＳ２１２を肯定判定してステップＳ２１４へ進み、表示・操作入力部２１０に記録指示が入力されない場合にはステップＳ２１２を否定判定してステップＳ２１８へ進む。
【0080】
ステップＳ２１４において、制御部２２０は、再生制御部２２１で参照動画像を再生させながら、撮影制御部２２２で生徒２０の演技の撮影を制御するとともに、撮影した演技を記録制御部２２３で第１の動画像として情報記憶部２３０に記録し、ステップＳ２１６へ進む。この記録により、参照動画像を再生した楽曲のリズムに合わせた生徒２０の演技と、再生した楽曲とが第１の動画像として記録される。
【0081】
ステップＳ２１６において、制御部２２０は、指導者１０（指導者端末１００）に、生徒２０の演技が記録された第１の動画像を送信してステップＳ２１８へ進む。
なお、生徒２０が第１の動画像に記録された自身の演技に満足できない場合も想定され得るため、ステップＳ２１４とステップＳ２１６との間に、第１の動画像を記録し直すか否かを判定する処理を挿入してもよい。このような処理を加えることにより、生徒２０は、自己の演技を適宜撮り直しすることが可能になる。
ステップＳ２１８において、制御部２２０は終了するか否かを判定する。制御部２２０は、生徒２０によって終了操作が行われた場合には、ステップＳ２１８を肯定判定して生徒端末２００による処理を終了する。制御部２２０は、生徒２０によって終了操作が行われない場合には、ステップＳ２１８を否定判定してステップＳ２０２へ戻り、上述した処理を繰り返す。
なお、生徒２０が第１の動画像に記録された自身の演技に満足できない場合も想定され得るため、ステップＳ２１４とステップＳ２１６との間に、第１の動画像を記録し直すか否かを判定する処理を挿入してもよい。このような処理を加えることにより、生徒２０は、自己の演技を適宜撮り直しすることが可能になる。
ステップＳ２１８において、制御部２２０は終了するか否かを判定する。制御部２２０は、生徒２０によって終了操作が行われた場合には、ステップＳ２１８を肯定判定して生徒端末２００による処理を終了する。制御部２２０は、生徒２０によって終了操作が行われない場合には、ステップＳ２１８を否定判定してステップＳ２０２へ戻り、上述した処理を繰り返す。
【0082】
ステップＳ２２０へ進むのは、生徒端末２００で指導情報を表示する、または、指導情報として新たに受信した参照動画像を生徒端末２００で再生する場合である。指導情報として送信される参照動画像には、例えば、当初の参照動画像に記録されていた手本とは演技内容が異なる、指導者１０により変更された手本の演技が記録される。そのため制御部２２０は、先ずステップＳ２２０において演技内容に変更があるか否かを判定する。制御部２２０は、指導情報として新たな参照動画像を受信した場合にステップＳ２２０を肯定判定してステップＳ２２２へ進み、新たな参照動画像を受信していない場合にステップＳ２２０を否定判定してステップＳ２２８へ進む。
【0083】
ステップＳ２２２において、制御部２２０は、参照動画像を再生するか否かを判定する。制御部２２０は、表示・操作入力部２１０に再生指示が入力された場合にステップＳ２２２を肯定判定してステップＳ２２４へ進み、表示・操作入力部２１０に再生指示が入力されない場合にはステップＳ２２２を否定判定してステップＳ２２８へ進む。
【0084】
ステップＳ２２４において、制御部２２０は、再生制御部２２１で参照動画像を再生させてステップＳ２２６へ進む。この再生により、参照動画像として記録されている楽曲が再生され、楽曲のリズムに合わせて手本の演技が再生される。生徒２０は、手本の演技を参考に、楽曲のリズムに合わせて自己の演技を練習する。
【0085】
ステップＳ２２６において、制御部２２０は、参照動画像をもう一度再生するか否かを判定する。制御部２２０は、表示・操作入力部２１０に再生指示が入力された場合にステップＳ２２６を肯定判定してステップＳ２２４へ戻り、再生処理を繰り返す。また、表示・操作入力部２１０に再生指示が入力されない場合には、ステップＳ２２６を否定判定してステップＳ２２８へ進む。
【0086】
制御部２２０は、ステップＳ２２８において、生徒２０に対する指導情報を表示・操作入力部２１０に表示するか否かを判定する。制御部２２０は、表示・操作入力部２１０に表示指示が入力された場合にステップＳ２２８を肯定判定してステップＳ２３０へ進み、表示・操作入力部２１０に表示指示が入力されない場合にはステップＳ２２８を否定判定してステップＳ２１２へ進む。
【0087】
ステップＳ２３０において、制御部２２０は、表示・操作入力部２１０に指導情報を表示させる。図９は、生徒端末２００の表示・操作入力部２１０に表示された指導情報を例示する模式図である。指導者端末１００に表示される場合と同様に、全身情報１０２、骨格ずれ情報１０３、グラフ情報１０４および抜粋情報１０８が表示されている。
生徒２０は、表示・操作入力部２１０に表示される指導情報により自己の演技の改善点を学習することができる。
なお、全身情報１０２、骨格ずれ情報１０３、グラフ情報１０４および抜粋情報１０８を含む第２の動画像を指導情報として指導者１０（指導者端末１００）から受信した場合は、ステップＳ２３０において、指導情報としての第２の動画像に記録されている楽曲が再生され、楽曲のリズムに合わせて生徒の演技（全身情報１０２）が再生されるとともに、楽曲のリズムに同期して骨格ずれ情報１０３、グラフ情報１０４および抜粋情報１０８がそれぞれ表示される。このように構成したので、生徒２０は、例えば楽曲のリズムのどのタイミングで自己の演技がずれているのか等を、表示・操作入力部２１０に表示された画面で確認しながら学習することができる。
生徒２０は、表示・操作入力部２１０に表示される指導情報により自己の演技の改善点を学習することができる。
なお、全身情報１０２、骨格ずれ情報１０３、グラフ情報１０４および抜粋情報１０８を含む第２の動画像を指導情報として指導者１０（指導者端末１００）から受信した場合は、ステップＳ２３０において、指導情報としての第２の動画像に記録されている楽曲が再生され、楽曲のリズムに合わせて生徒の演技（全身情報１０２）が再生されるとともに、楽曲のリズムに同期して骨格ずれ情報１０３、グラフ情報１０４および抜粋情報１０８がそれぞれ表示される。このように構成したので、生徒２０は、例えば楽曲のリズムのどのタイミングで自己の演技がずれているのか等を、表示・操作入力部２１０に表示された画面で確認しながら学習することができる。
【0088】
ステップＳ２３２において、制御部２２０は、指導情報の表示を終了するか否かを判定する。制御部２２０は、生徒２０によって終了操作が行われた場合には、ステップＳ２３２を肯定判定してステップＳ２１２へ戻る。制御部２２０は、生徒２０によって終了操作が行われない場合には、ステップＳ２２２を否定判定してステップＳ２３０へ戻り、指導情報の表示を継続する。
【0089】
＜プログラム＞
上記演技指導システム１を構成する指導者端末１００の制御部１３０、および生徒端末２００の制御部２２０がそれぞれ実行する処理、すなわち図８に例示した処理を実行させるプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムを、指導者端末１００または生徒端末２００へ供給してもよい。「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、光ディスク、メモリカード等の可搬型記録媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。コンピュータシステムとは、例示した指導者端末１００または生徒端末２００のように、ＯＳ（Operating System）や周辺機器のハードウェアを含むものとする。
上記演技指導システム１を構成する指導者端末１００の制御部１３０、および生徒端末２００の制御部２２０がそれぞれ実行する処理、すなわち図８に例示した処理を実行させるプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムを、指導者端末１００または生徒端末２００へ供給してもよい。「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、光ディスク、メモリカード等の可搬型記録媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。コンピュータシステムとは、例示した指導者端末１００または生徒端末２００のように、ＯＳ（Operating System）や周辺機器のハードウェアを含むものとする。
【0090】
また、「コンピュータ読み取り可能な記録媒体」には、インターネット等のネットワーク通信網や電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持するものを含んでもよい。また上記のプログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせにより実現するものであってもよい。
【0091】
図１０は、指導者端末１００または生徒端末２００に対するプログラムの供給を説明する図である。指導者端末１００または生徒端末２００は、例えばＣＤ－ＲＯＭ９５３に記録されたプログラムの提供を受けることができる。また、指導者端末１００または生徒端末２００は、通信回線９００を介してプログラムの提供を受けることもできる。
コンピュータ９５２は、上記プログラムを提供するサーバコンピュータであり、ハードディスク等の記録媒体９５４にプログラムを格納している。通信回線９００は、インターネット、パソコン通信などの通信回線、あるいは専用通信回線などである。コンピュータ９５２は、記録媒体９５４からプログラムを読み出し、通信回線９００を介してプログラムを指導者端末１００または生徒端末２００に送信する。すなわち、プログラムをデータ信号として搬送波により搬送して、通信回線９００を介して送信する。指導者端末１００または生徒端末２００は、送信されたプログラムを受信する。
このように、プログラムは、記録媒体や搬送波などの種々の形態のコンピュータ読み込み可能なコンピュータプログラム製品として供給できる。
コンピュータ９５２は、上記プログラムを提供するサーバコンピュータであり、ハードディスク等の記録媒体９５４にプログラムを格納している。通信回線９００は、インターネット、パソコン通信などの通信回線、あるいは専用通信回線などである。コンピュータ９５２は、記録媒体９５４からプログラムを読み出し、通信回線９００を介してプログラムを指導者端末１００または生徒端末２００に送信する。すなわち、プログラムをデータ信号として搬送波により搬送して、通信回線９００を介して送信する。指導者端末１００または生徒端末２００は、送信されたプログラムを受信する。
このように、プログラムは、記録媒体や搬送波などの種々の形態のコンピュータ読み込み可能なコンピュータプログラム製品として供給できる。
【0092】
上述した実施の形態によれば、次の作用効果が得られる。
（１）演技指導装置としての指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）は、演技者としての生徒２０（３０、４０）の演技が記録された第１の動画像を、比較対象としてのインストラクターの演技が記録された参照動画情報と比較する比較部１３１と、比較部１３１で比較した結果に基づいて、生徒２０（３０、４０）の演技に対する指導情報を生成する生成部１３２とを備える。
このように構成したので、例えば、練習する生徒２０（３０、４０）の演技と、インストラクターによる手本の演技との動きの違い等を比較し、動きの違い等を知らせるための指導情報を生成することができるため、生徒２０（３０、４０）に対して演技を適切に指導することができる。
（１）演技指導装置としての指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）は、演技者としての生徒２０（３０、４０）の演技が記録された第１の動画像を、比較対象としてのインストラクターの演技が記録された参照動画情報と比較する比較部１３１と、比較部１３１で比較した結果に基づいて、生徒２０（３０、４０）の演技に対する指導情報を生成する生成部１３２とを備える。
このように構成したので、例えば、練習する生徒２０（３０、４０）の演技と、インストラクターによる手本の演技との動きの違い等を比較し、動きの違い等を知らせるための指導情報を生成することができるため、生徒２０（３０、４０）に対して演技を適切に指導することができる。
【0093】
（２）上記指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）において、生成部１３２は、生徒２０（３０、４０）の演技と比較対象のインストラクターの演技との相違点を示す情報を、上記指導情報として生成する。
このように構成したので、例えば相違点を減らすための指導情報を生成する等、生徒２０（３０、４０）に対して演技を適切に指導することができる。
このように構成したので、例えば相違点を減らすための指導情報を生成する等、生徒２０（３０、４０）に対して演技を適切に指導することができる。
【0094】
（３）上記指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）において、比較部１３１は、生徒２０（３０、４０）の演技と比較対象のインストラクターの演技とのタイミングの相違、姿勢の相違、動き方の相違、跳躍の高さの相違、顔の表情の相違、演技中の立ち位置の相違、および、生徒２０（３０、４０）とインストラクターとの身体的特徴の相違の少なくとも１つを検出する。
このように構成したので、相違する箇所、相違する内容等を知らせて具体的な指導情報を生成することができるため、生徒２０（３０、４０）に対して演技を適切に指導することができる。
このように構成したので、相違する箇所、相違する内容等を知らせて具体的な指導情報を生成することができるため、生徒２０（３０、４０）に対して演技を適切に指導することができる。
【0095】
（４）上記指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）において、比較部１３１は、生徒２０（３０、４０）の身体的特徴に基づいて、相違するか否かの検出基準を異ならせる。
このように構成したので、例えば、体格の違い等を考慮して、生徒２０（３０、４０）に対して演技を適切に指導することができる。
このように構成したので、例えば、体格の違い等を考慮して、生徒２０（３０、４０）に対して演技を適切に指導することができる。
【0096】
（５）上記指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）において、比較部１３１は、第１の動画像が再生される時間軸と、参照動画情報が再生される時間軸とを同期させて第１の動画像と参照動画情報とを比較する。
このように構成したので、生徒２０（３０、４０）の演技の相違点について、適切に検出することができる。
このように構成したので、生徒２０（３０、４０）の演技の相違点について、適切に検出することができる。
【0097】
（６）上記指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）において、生成部１３２は、生徒２０（３０、４０）の演技と比較対象のインストラクターの演技との相違点を示す第２の動画像を、指導情報として生成する。
このように構成したので、生徒２０（３０、４０）の演技の相違点について、動画像のフレームごとに適切に記録した指導情報を得ることができる。
このように構成したので、生徒２０（３０、４０）の演技の相違点について、動画像のフレームごとに適切に記録した指導情報を得ることができる。
【0098】
（７）上記指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）において、生成部１３２は、第２の動画像において生徒２０（３０、４０）の演技とインストラクターの演技との差が予め定めた基準値よりも大きい部分を他の部分と異なる態様で示す。
このように構成したので、第２の動画像において生徒２０（３０、４０）の演技とインストラクターの演技との差が基準値よりも大きい部分をわかりやすく示すことができる。
このように構成したので、第２の動画像において生徒２０（３０、４０）の演技とインストラクターの演技との差が基準値よりも大きい部分をわかりやすく示すことができる。
【0099】
（８）上記指導者端末１００（または、比較部および生成部を備える場合の生徒端末２００等）において、生成部１３２は、第１の動画像が再生される時間軸に同期して第２の動画像を生成する。
このように構成したので、例えば第１の動画像および第２の動画像を同期して再生することにより、生徒２０（３０、４０）の演技の相違点について、動画像のフレームごとに適切に提示することができる。
このように構成したので、例えば第１の動画像および第２の動画像を同期して再生することにより、生徒２０（３０、４０）の演技の相違点について、動画像のフレームごとに適切に提示することができる。
【0100】
（９）上記指導者端末１００において、参照動画像に記録されている比較対象の演技は、手本の演技または第２の演技者の演技を含む。
このように構成したので、例えば、練習する生徒２０（３０、４０）の演技とインストラクターによる手本の演技との相違点に基づいて個々の生徒２０（３０、４０）の演技の向上を図ることに加えて、例えば生徒２０の演技と生徒３０の演技との相違点に基づいて演技の統一性を得るための指導情報を生成することができる。これにより、生徒２０、３０、４０を集合させなくても、複数の生徒２０、３０、４０で行う集合演技について適切に指導することができる。
このように構成したので、例えば、練習する生徒２０（３０、４０）の演技とインストラクターによる手本の演技との相違点に基づいて個々の生徒２０（３０、４０）の演技の向上を図ることに加えて、例えば生徒２０の演技と生徒３０の演技との相違点に基づいて演技の統一性を得るための指導情報を生成することができる。これにより、生徒２０、３０、４０を集合させなくても、複数の生徒２０、３０、４０で行う集合演技について適切に指導することができる。
【0101】
（１０）上記指導者端末１００において、生成部１３２は、比較部１３１で生徒２０の演技と第２の演技者としての他の生徒３０の演技者の演技とを比較する場合には、生徒２０および生徒３０が一緒に演技する場合の情報を、指導情報として生成する。
このように構成したので、生徒２０および生徒３０を集合させなくても、複数の生徒２０、３０による演技の統一性を高めるために必要な情報を、適切に生成することができる。
このように構成したので、生徒２０および生徒３０を集合させなくても、複数の生徒２０、３０による演技の統一性を高めるために必要な情報を、適切に生成することができる。
【0102】
（１１）上記指導者端末１００において、生成部１３２は、比較部１３１で比較した結果に基づいて生徒２０および生徒３０の演技の習熟度を算出し、生徒２０の第１の習熟度および生徒３０の第２の習熟度に基づいて生徒２０および生徒３０が一緒に演技する場合の情報を、指導情報として生成する。
このように構成したので、例えば、習熟度が高い生徒を目立たせ、習熟度が低い生徒を目立たせない等、集合演技の鑑賞者の印象がよくなるような指導情報を生成することができる。
このように構成したので、例えば、習熟度が高い生徒を目立たせ、習熟度が低い生徒を目立たせない等、集合演技の鑑賞者の印象がよくなるような指導情報を生成することができる。
【0103】
（１２）上記指導者端末１００において、生成部１３２は、比較部１３１で比較した結果に基づいて、生徒２０および生徒３０に対する演技の内容を見直した（換言すると、例えば生徒全員の振り付け等を変更する）新たな参照動画像を、指導情報として生成する。
このように構成したので、例えば、生徒全員が難易度の高い演技構成を避けて、集合演技の鑑賞者の印象がよくなるような指導情報を生成することができる。
このように構成したので、例えば、生徒全員が難易度の高い演技構成を避けて、集合演技の鑑賞者の印象がよくなるような指導情報を生成することができる。
【0104】
（１３）上記指導者端末１００において、生成部１３２は、比較部１３１で比較した結果に基づいて、生徒２０または生徒３０に対する演技の内容を見直した（換言すると、例えば一部の生徒に対して振り付け等を変更する）新たな参照動画像を、指導情報として生成する。
このように構成したので、例えば、一部の生徒のみ難易度が高い演技構成を避けて、集合演技の鑑賞者の印象がよくなるような指導情報を生成することができる。
このように構成したので、例えば、一部の生徒のみ難易度が高い演技構成を避けて、集合演技の鑑賞者の印象がよくなるような指導情報を生成することができる。
【0105】
（１４）上記指導者端末１００において、生成部１３２は、比較部１３１で比較した結果に基づいて、生徒２０および生徒３０の配置情報としての再配置案を、指導情報として生成する。
このように構成したので、例えば、習熟度が高い生徒の立ち位置を、前列寄りかつ中央寄りの位置に集めるように再配置したり、習熟度が低い生徒の立ち位置を、後列寄りまたは中央から離れた左右端の近傍に集めるように再配置したりするように、集合演技の鑑賞者の印象がよくなるような指導情報を生成することができる。
このように構成したので、例えば、習熟度が高い生徒の立ち位置を、前列寄りかつ中央寄りの位置に集めるように再配置したり、習熟度が低い生徒の立ち位置を、後列寄りまたは中央から離れた左右端の近傍に集めるように再配置したりするように、集合演技の鑑賞者の印象がよくなるような指導情報を生成することができる。
【0106】
（１５）演技指導装置としての指導者端末１００は、第１の演技者としての生徒２０の演技が記録された第１の動画像、および、第２の演技者としての生徒３０の演技が記録された第１の動画像を、所定の基準に基づいて評価する評価部としての制御部１３０と、制御部１３０の評価結果に基づいて、生徒２０および生徒３０が一緒に演技する場合の生徒２０および生徒３０の位置および演技内容の少なくとも一方を決定する決定部としての制御部１３０とを備える。
このように構成したので、生徒２０および生徒３０を集合させなくても、生徒２０および生徒３０が集合演技を行う場合における演技の統一性がよくなるように、生徒２０および生徒３０に対する立ち位置、演技内容を適切に生成することができる。
このように構成したので、生徒２０および生徒３０を集合させなくても、生徒２０および生徒３０が集合演技を行う場合における演技の統一性がよくなるように、生徒２０および生徒３０に対する立ち位置、演技内容を適切に生成することができる。
【0107】
（１６）上記指導者端末１００において、決定した生徒２０および生徒３０の立ち位置を示すマップ情報１０１を生成する生成部１３２を備える。
このように構成したので、生徒２０および生徒３０に対する立ち位置を、視覚的にわかりやすく示すことができる。
このように構成したので、生徒２０および生徒３０に対する立ち位置を、視覚的にわかりやすく示すことができる。
【0108】
次のような変形も本発明の範囲内であり、変形例の一つ、もしくは複数を上述の実施形態と組み合わせることも可能である。
（変形例１）
上述した実施の形態では、指導者端末１００としてパーソナルコンピュータまたはタブレット型端末を例示したが、通信回線等を介して接続可能なサーバ等で構成してもよい。また、生徒端末２００－４００としてスマートフォンまたはタブレット型端末を例示したが、通信回線等を介して接続可能なパーソナルコンピュータまたはテレビ等で構成してもよい。
（変形例１）
上述した実施の形態では、指導者端末１００としてパーソナルコンピュータまたはタブレット型端末を例示したが、通信回線等を介して接続可能なサーバ等で構成してもよい。また、生徒端末２００－４００としてスマートフォンまたはタブレット型端末を例示したが、通信回線等を介して接続可能なパーソナルコンピュータまたはテレビ等で構成してもよい。
【0109】
（変形例２）
上述した比較部１３１および生成部１３２を備えるサーバを、ネットワーク通信網５００に接続し、指導者端末１００と生徒端末２００－４００とが、サーバにアクセスする構成にしてもよい。変形例２による演技指導の流れは、以下の１から８の手順で行う。
上述した比較部１３１および生成部１３２を備えるサーバを、ネットワーク通信網５００に接続し、指導者端末１００と生徒端末２００－４００とが、サーバにアクセスする構成にしてもよい。変形例２による演技指導の流れは、以下の１から８の手順で行う。
【0110】
１．指導者端末１００は、個々の生徒２０等に対する手本の演技が記録された参照動画像（参照動画情報と呼んでもよい）を、サーバの所定の領域に格納する。
２．生徒２０等は、サーバに格納された参照動画像に記録されている手本の演技を参考にして自己の演技を練習する。参照動画像を生徒端末２００等で視聴する場合、ダウンロード再生でもストリーミング再生でもよい。
２．生徒２０等は、サーバに格納された参照動画像に記録されている手本の演技を参考にして自己の演技を練習する。参照動画像を生徒端末２００等で視聴する場合、ダウンロード再生でもストリーミング再生でもよい。
【0111】
３．生徒端末２００等は、生徒２０等の演技を撮影して第１の動画像を作成する。
４．生徒端末２００等は、第１の動画像を生徒端末２００等からサーバの所定領域へ格納する。
５．サーバは、第１の動画像に記録されている生徒２０等の演技を確認する。
指導者１０は、再生される第１の動画像を指導者端末１００で視聴することができる。
４．生徒端末２００等は、第１の動画像を生徒端末２００等からサーバの所定領域へ格納する。
５．サーバは、第１の動画像に記録されている生徒２０等の演技を確認する。
指導者１０は、再生される第１の動画像を指導者端末１００で視聴することができる。
【0112】
６．サーバは、確認結果に基づいて生徒２０等に対する指導情報を作成する。
７．サーバは、個々の生徒２０等に対する指導情報をサーバの所定領域へ格納する。
指導者１０は、サーバに格納されている指導情報を指導者端末１００で視聴することができる。また、生徒２０等は、サーバに格納されている指導情報を生徒端末２００等で視聴することができる。
８．生徒２０等は、サーバに格納された指導情報に基づいて、演技をさらに練習する。
７．サーバは、個々の生徒２０等に対する指導情報をサーバの所定領域へ格納する。
指導者１０は、サーバに格納されている指導情報を指導者端末１００で視聴することができる。また、生徒２０等は、サーバに格納されている指導情報を生徒端末２００等で視聴することができる。
８．生徒２０等は、サーバに格納された指導情報に基づいて、演技をさらに練習する。
【0113】
（変形例３）
上述した実施の形態では、図５（ａ）～図５（ｃ）を参照して説明したように、生徒２０が演技を開始した初期位置をスペースＰの中心に対応させて、演技中の生徒２０の立ち位置が移動するとスペースＰ内の丸印Ｓを移動させる例を説明した。演技中の生徒２０の立ち位置の移動を、図１１に例示する表示によって表してもよい。図１１は、変形例３による演技中の生徒２０の立ち位置の表示を説明する図であり、生徒２０の立ち位置が後方に移動した図５（ｃ）の状態に対応する。
上述した実施の形態では、図５（ａ）～図５（ｃ）を参照して説明したように、生徒２０が演技を開始した初期位置をスペースＰの中心に対応させて、演技中の生徒２０の立ち位置が移動するとスペースＰ内の丸印Ｓを移動させる例を説明した。演技中の生徒２０の立ち位置の移動を、図１１に例示する表示によって表してもよい。図１１は、変形例３による演技中の生徒２０の立ち位置の表示を説明する図であり、生徒２０の立ち位置が後方に移動した図５（ｃ）の状態に対応する。
【0114】
変形例３において、制御部１３０は、演技中の生徒２０の立ち位置が後方に移動すると、生徒２０に対応するスペースＰを後方に移動させる。このように構成したので、変形例３の表示においても、演技中の生徒２０の立ち位置の移動を適切に表すことができる。
【0115】
（変形例４）
演技中の生徒２０の立ち位置の移動を、図１２に例示する表示によって表してもよい。図１２は、変形例４による演技中の生徒２０の立ち位置の表示を説明する図であり、生徒２０の立ち位置が後方に移動した図５（ｃ）の状態に対応する。
演技中の生徒２０の立ち位置の移動を、図１２に例示する表示によって表してもよい。図１２は、変形例４による演技中の生徒２０の立ち位置の表示を説明する図であり、生徒２０の立ち位置が後方に移動した図５（ｃ）の状態に対応する。
【0116】
変形例４において、制御部１３０は、演技中の生徒２０の立ち位置が後方に移動すると、生徒２０に対応するスペースＰと他の生徒に対応するスペースとの間隔を、例えば色の濃淡により表す。例えば、スぺ―ス間隔が狭いほど濃い色で表し、スペース間隔が広いほど薄い色で表す。図１２では、後方に移動した生徒２０に対応するスペースＰと、後方の生徒に対応するスペースＴとの間の色が濃く、生徒の間隔が狭まっていることを示す。このように構成したので、変形例４の表示においても、演技中の生徒２０の立ち位置を適切に表することができる。
【0117】
（変形例５）
上述した実施の形態では、生成部１３２が集合演技時の生徒の立ち位置の再配置案を生成する例を説明した。再配置する前の初期配置は、指導者１０が、あらかじめ生徒の仮の立ち位置として定めてもよいし、生成部１３２がランダムに定めてもよい。生成部１３２が初期位置をランダムに定める場合、例えば、生徒から第１の動画像が送付された順に、前列から順番に配置する。初期配置は、再配置によって適宜変更可能であるため、どのように定めても構わない。
上述した実施の形態では、生成部１３２が集合演技時の生徒の立ち位置の再配置案を生成する例を説明した。再配置する前の初期配置は、指導者１０が、あらかじめ生徒の仮の立ち位置として定めてもよいし、生成部１３２がランダムに定めてもよい。生成部１３２が初期位置をランダムに定める場合、例えば、生徒から第１の動画像が送付された順に、前列から順番に配置する。初期配置は、再配置によって適宜変更可能であるため、どのように定めても構わない。
【0118】
（変形例６）
図１３は、上述した実施の形態とは異なる態様で、指導者端末１００の表示部１１０に表示された指導情報を例示する模式図である。変形例６では、例えば生徒２０と生徒３０についての全身情報１０２と、手本の演技を行うインストラクターの全身情報１０２とを並べて表示する。また、実施の形態の折れ線グラフのグラフ情報１０４の代わりに、生徒２０と生徒３０について、それぞれの身体の部位（例えば、左腕、左脚）ごとの演技のずれ量を示す、例えば帯状のグラフ情報１０９ａ～１０９ｄを表示する。グラフ情報１０９ａ～１０９ｄで表示する身体の部位の数は、適宜変更して構わない。
図１３は、上述した実施の形態とは異なる態様で、指導者端末１００の表示部１１０に表示された指導情報を例示する模式図である。変形例６では、例えば生徒２０と生徒３０についての全身情報１０２と、手本の演技を行うインストラクターの全身情報１０２とを並べて表示する。また、実施の形態の折れ線グラフのグラフ情報１０４の代わりに、生徒２０と生徒３０について、それぞれの身体の部位（例えば、左腕、左脚）ごとの演技のずれ量を示す、例えば帯状のグラフ情報１０９ａ～１０９ｄを表示する。グラフ情報１０９ａ～１０９ｄで表示する身体の部位の数は、適宜変更して構わない。
【0119】
グラフ情報１０９ａ～１０９ｄは、横方向の長さが全身情報１０２として再生するクロップ動画像の再生時間（換言すると、生徒２０、３０による演技の進行時間）に対応し、帯の塗りつぶしパターンが生徒２０、３０とインストラクターとの演技のずれ量を示す。演技の進行時間は、動画データのタイムコードに基づいて表され、帯の左端が先頭フレーム、帯の右端が末尾フレームに対応する。例えば演技時間が２分の場合、帯全体が３０（ｆｐｓ）×２×６０（ｓｅｃ）＝３６００フレームに相当する。
【0120】
生成部１３２は、クロップ動画像と参照動画像とに基づいて、対応するフレームごとに演技中の生徒２０、３０のジョイントと手本の演技を行うインストラクターのジョイントとのずれ量を身体の部位ごとに積算し、部位ごとの積算値をそのフレームのその部位における演技のずれ量とする。
【0121】
グラフ情報１０９ａ～１０９ｄの塗りつぶしパターンの制御について説明する。制御部１３０は、グラフ情報１０９ａ～１０９ｄの塗りつぶしパターンを、クロップ動画像の再生中に移動する縦線Ｑの位置に対応するフレームの、各生徒の身体の部位における演技のずれ量に基づいて制御する。
例えば、縦線Ｑの位置に対応し、全身情報１０２として表示されているクロップ動画像のフレームが先頭フレームから９０１フレーム目（再生開始時からの経過時間が３０秒）である場合を例に説明する。
例えば、縦線Ｑの位置に対応し、全身情報１０２として表示されているクロップ動画像のフレームが先頭フレームから９０１フレーム目（再生開始時からの経過時間が３０秒）である場合を例に説明する。
【0122】
制御部１３０は、グラフ情報１０９ａ～１０９ｄにおいて９０１フレーム目に対応する位置の塗りつぶしパターンを、生徒のクロップ動画像の９０１フレーム目と、対応する参照動画像の９０１フレーム目とを用いて算出された、身体の部位（例えば、左腕、左脚）における演技のずれ量に基づいて決定する。
例えば、演技のずれ量が所定の閾値以下に収まっている場合、対応するグラフ情報１０９ａ～１０９ｄを白く塗りつぶす。また、演技のずれ量が所定の閾値の１．３倍以下に収まっている場合、対応するグラフ情報１０９ａ～１０９ｄをドットパターンで塗りつぶす。さらに、演技のずれ量が所定の閾値の１．３倍を超える場合、対応するグラフ情報１０９ａ～１０９ｄを斜線パターンで塗りつぶす。
例えば、演技のずれ量が所定の閾値以下に収まっている場合、対応するグラフ情報１０９ａ～１０９ｄを白く塗りつぶす。また、演技のずれ量が所定の閾値の１．３倍以下に収まっている場合、対応するグラフ情報１０９ａ～１０９ｄをドットパターンで塗りつぶす。さらに、演技のずれ量が所定の閾値の１．３倍を超える場合、対応するグラフ情報１０９ａ～１０９ｄを斜線パターンで塗りつぶす。
【0123】
このように構成したので、グラフ情報１０９ａ～１０９ｄを観察する指導者１０は、身体の部位別に、生徒の演技のずれ量が小さい（または大きい）ところを、タイムライン上で容易に確認することができる。
【0124】
（変形例７）
上述した説明では、例えば、手本の演技を記録した参照動画像を指導者端末１００から生徒端末２００へ送り、生徒２０の演技を記録した第１の動画像を生徒端末２００から指導者端末１００へ送り、生徒２０に対する指導情報を含む第２の動画像を指導者端末１００から生徒者端末２００へ送るというように、記録された動画像を生徒端末２０および指導者端末１００間でやり取りする実施の形態を例示した。例示した実施の形態に限らず、生徒端末２０および指導者端末１００間で、リアルタイムに情報をやり取りしてもよい。
上述した説明では、例えば、手本の演技を記録した参照動画像を指導者端末１００から生徒端末２００へ送り、生徒２０の演技を記録した第１の動画像を生徒端末２００から指導者端末１００へ送り、生徒２０に対する指導情報を含む第２の動画像を指導者端末１００から生徒者端末２００へ送るというように、記録された動画像を生徒端末２０および指導者端末１００間でやり取りする実施の形態を例示した。例示した実施の形態に限らず、生徒端末２０および指導者端末１００間で、リアルタイムに情報をやり取りしてもよい。
【0125】
例えば、変形例７において生徒２０は、指導者端末１００で再生される参照動画像（手本の動画像）を生徒端末２００でリアルタイムに視聴するとともに、参照動画像を見ながらリアルタイムに演技を行う。生徒端末２００は、生徒２０の演技を撮影し、撮影した演技の映像（第１の動画像）を生徒端末２００から指導者端末１００へリアルタイムに送信する。指導者端末１００は、手本の動画像と第１の動画像とをリアルタイムに比較しながら生徒２０に対する指導情報を含む第２の動画像を生成する。指導者端末１００は、生徒２０の演技が終了すると、生成した第２の動画像を指導者端末１００で再生可能な状態におく。このように構成することにより、生徒２０は、自己の演技を終了すると生徒端末２００から指導者端末１００へ第２の動画像の再生を要求し、指導者端末１００で再生される第２の動画像を生徒端末２００で視聴することができる。
変形例７によれば、生徒２０は、演技を終えてすぐに指導情報の内容を確認することが可能になり、指導内容を取り入れた練習をすぐに行うことができる。
変形例７によれば、生徒２０は、演技を終えてすぐに指導情報の内容を確認することが可能になり、指導内容を取り入れた練習をすぐに行うことができる。
【0126】
上記では、種々の実施形態および変形例を説明したが、本発明はこれらの内容に限定されるものではない。実施形態および変形例で示された各構成を組み合わせて用いる態様も本発明の範囲内に含まれる。本発明の技術的思想の範囲内で考えられるその他の態様も本発明の範囲内に含まれる。
【符号の説明】
【0127】
１…演技指導システム、１０…指導者、２０，３０，４０…生徒、１００…指導者端末、１１０…表示部、１３０…制御部、１３１…比較部、１３２…生成部、２００，３００，４００…生徒端末、２１０…表示・入力部、２２０…制御部、２６０…撮影部、９００…通信回線、９５２…コンピュータ、９５３…ＣＤ－ＲＯＭ
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】