(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2023-09-21
(45)【発行日】2023-09-29
(54)【発明の名称】動画像判定方法
(51)【国際特許分類】
A61B 5/11 20060101AFI20230922BHJP
G06T 7/00 20170101ALI20230922BHJP
G06V 10/70 20220101ALI20230922BHJP
【ＦＩ】
A61B5/11 120
A61B5/11 230
G06T7/00 660B
G06T7/00 350B
G06V10/70
【請求項の数】
11
(21)【出願番号】P 2022124096
(22)【出願日】2022-08-03
(65)【公開番号】P2023027012
(43)【公開日】2023-03-01
【審査請求日】2023-05-16
(31)【優先権主張番号】P 2021132296
(32)【優先日】2021-08-16
(33)【優先権主張国・地域又は機関】JP
【早期審査対象出願】
(73)【特許権者】
【識別番号】000000918
【氏名又は名称】花王株式会社
(74)【代理人】
【識別番号】100137589
【弁理士】
【氏名又は名称】右田 俊介
(72)【発明者】
【氏名】湊崎 真行
(72)【発明者】
【氏名】平賀 春菜
(72)【発明者】
【氏名】瀬尾 加奈子
(72)【発明者】
【氏名】須藤 元喜
(72)【発明者】
【氏名】福田 優子
【審査官】山田 辰美
(56)【参考文献】
【文献】国際公開第２０２０／１７０２９９（ＷＯ，Ａ１）
【文献】特開２０１３－２１８４７６（ＪＰ，Ａ）
【文献】特開２０１２－０６８９６５（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ａ６１Ｂ ５／１１
Ｇ０６Ｔ ７／００－７／９０
Ｇ０６Ｖ １０／７０
(57)【特許請求の範囲】
【請求項1】
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能な動画像であることを判定するための歩行解析条件を満たすかを判定する動画像判定方法であって、前記動画像を取得する動画取得工程と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定工程と、
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、
前記被験者の歩数を判定する歩数判定工程と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定工程は、前記動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行い、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含み、
前記所定の歩行条件は、前記判定した歩数が所定歩数以上であることを含むことを特徴とする動画像判定方法。
【請求項2】
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能な動画像であることを判定するための歩行解析条件を満たすかを判定する動画像判定方法であって、前記動画像を取得する動画取得工程と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定工程と、
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、
前記被験者の重心を判定する重心判定工程と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定工程は、前記動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行い、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含み、
前記所定の歩行条件は、前記判定した重心が左右方向に所定範囲内であることを含むことを特徴とする動画像判定方法。
【請求項3】
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能な動画像であることを判定するための歩行解析条件を満たすかを判定する動画像判定方法であって、前記動画像を取得する動画取得工程と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定工程と、
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、
前記被験者が走っていることを示唆する歩行指標を判定する歩行判定工程と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定工程は、前記動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行い、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含み、
前記所定の歩行条件は、走っていないと判定されたフレームがあることを含むことを特徴とする動画像判定方法。
【請求項4】
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能な動画像であることを判定するための歩行解析条件を満たすかを判定する動画像判定方法であって、前記動画像を取得する動画取得工程と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定工程と、
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、
前記被験者の顔を判定する顔判定工程と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定工程は、前記動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行い、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含み、
前記所定の歩行条件は、前記判定した前記顔の向きが左右方向に所定範囲内であることを含むことを特徴とする動画像判定方法。
【請求項5】
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能な動画像であることを判定するための歩行解析条件を満たすかを判定する動画像判定方法であって、前記動画像を取得する動画取得工程と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定工程と、
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、
前記被験者の両手を判定する両手判定工程と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定工程は、前記動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行い、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含み、
前記所定の歩行条件は、前記判定した前記両手が所定位置以下の高さであること含むことを特徴とする動画像判定方法。
【請求項6】
前記歩行動画判定工程は、前記動画像に対応付けて判定結果に基づく得点を記憶させ、
前記歩行解析条件を満たさないと判定されたフレームに対しては、当該歩行動画判定工程を終了する、または当該フレームに対しては前記得点に判定結果に基づく得点を加算しない、のいずれかを行うことを特徴とする請求項１から５何れか一項に記載の動画像判定方法。
【請求項7】
前記歩行動画判定工程は、骨格点抽出工程と、該骨格点抽出工程後に実行される骨格点判定工程を含み、前記骨格点抽出工程は、機械学習により得られた骨格点学習モデルを用いて前記動画像から前記被験者の骨格点を抽出し、
前記骨格点判定工程は、
前記骨格点抽出工程によって抽出された前記骨格点を用いて前記歩行解析条件を満たすかを判定し、
前記歩行動画判定工程は、
前記骨格点判定工程によって前記歩行解析条件を満たさないと判定された場合は、当該歩行動画判定工程を終了することを特徴とする請求項１から５何れか一項に記載の動画像判定方法。
【請求項8】
前記歩行動画判定工程は、骨格点抽出工程と、該骨格点抽出工程後に実行される骨格点判定工程と、全身判定工程とを含み、前記骨格点抽出工程は、機械学習により得られた骨格点学習モデルを用いて前記動画像から前記被験者の骨格点を抽出し、
前記全身判定工程は、前記骨格点抽出工程で抽出された前記被験者の骨格点同士が予め決められた位置関係にあるかを判定し、
前記歩行動画判定工程は、前記全身判定工程の判定結果に基づき前記歩行解析条件を満たすかを判定する請求項１から５何れか一項に記載の動画像判定方法。
【請求項9】
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能な動画像であることを判定するための歩行解析条件を満たすかを判定する動画像判定プログラムであって、前記動画像を取得する動画取得処理と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定処理と、
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定処理と、
前記被験者の歩数を判定する歩数判定処理と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定処理は、前記動画取得処理によって全フレームを取得した後、または、取得したフレーム毎に判定を行い、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含み、
前記所定の歩行条件は、前記判定した歩数が所定歩数以上であることを含むことを特徴とする動画像判定プログラム。
【請求項10】
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能な動画像であることを判定するための歩行解析条件を満たすかを判定する動画像判定装置であって、前記動画像を取得する動画取得手段と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定手段と、
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定手段と、
前記被験者の歩数を判定する歩数判定手段と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定手段は、前記動画取得手段によって全フレームを取得した後、または、取得したフレーム毎に判定を行い、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含み、
前記所定の歩行条件は、前記判定した歩数が所定歩数以上であることを含むことを特徴とする動画像判定装置。
【請求項11】
前記動画像判定装置は、表示手段をさらに備え、前記歩行動画判定手段は、前記動画取得手段によって取得したフレーム毎に判定を行う場合、各判定結果に応じて撮影者に撮影に関するアドバイスを前記表示手段に表示制御することを特徴とする請求項１０に記載の動画像判定装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、歩行する被験者が撮影された動画像が歩行解析条件を満たすかを判定する動画像判定方法に関する。
【背景技術】
【0002】
事前に撮影された動画像内の動作者の動画像と、撮影した利用者の動画像とを比較し、動作内容にどの程度の差があるかを評価する技術がある（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２０１０－２５８６１３号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献１の場合、撮影した利用者の動画像が撮影された条件については判定していないため、例えば、利用者の動画像自体の撮影条件が悪く、比較評価に値しないデータについても動作者の動画像との比較を行うこととなっていた。
【0005】
本発明は上記の課題に鑑みてなされたものであり、動画像を取得し、取得した動画像が歩行解析条件を満たすかを判定する技術に関する。
【課題を解決するための手段】
【0006】
本発明は、歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定する動画像判定方法であって、前記動画像を取得する動画取得工程と、取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定工程と、を含み、前記動画像は複数フレームで構成され、前記歩行動画判定工程は、前記動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行うことを特徴とする動画像判定方法に関する。
【発明の効果】
【0007】
本発明により提供される方法によれば、取得した歩行する被験者が撮影された動画像が歩行解析条件を満たすかを判定することで、歩行解析条件を満たした動画像のみを歩行解析の対象とすることもできるため、処理を軽減できる。
【図面の簡単な説明】
【0008】
【図1】動画像判定方法を示すフローチャートである。
【図2-1】判定工程の詳細を示すフローチャートである。
【図2-2】判定工程の詳細を示すフローチャートである。
【図3】抽出する骨格点および重心を示す図である。
【図4】被験者の顔の位置を推定する説明図である。
【図5】（ａ）は、歩行解析結果を示すグラフに動画像の判定結果に基づく総合得点を含めた画面イメージ図、（ｂ）は動画像の判定条件毎の判定結果を示す画面イメージ図である。
【図6】携帯端末１００の概念図である。
【図7】（a）は携帯端末１００の表示装置の画面イメージ図、（ｂ）は携帯端末１００の表示装置の画面イメージ図（他の例）である。
【図8】動画取得工程に歩行路ガイド工程および被験者マスク工程を付加したフローチャートである。
【図9】（ａ）は歩行路ガイド表示の画面イメージ図（撮影範囲に被験者がいない場合）、（ｂ）は歩行路ガイド表示の画面イメージ図（撮影範囲に被験者がいる場合）、（ｃ）は歩行路ガイド表示の画面イメージ図（撮影中の場合）、（ｄ）は歩行路ガイド表示の画面イメージ図（被験者と撮影装置との位置が適切でない場合）である。
【図10】（ａ）は被験者マスク表示の画面イメージ図（被験者が所定範囲内にいない場合）、（ｂ）は被験者マスク表示の画面イメージ図（被験者が所定範囲内にいる場合）である。
【発明を実施するための形態】
【0009】
以下、本発明の実施形態について説明する。
はじめに、本実施形態の概要について説明する。
本実施形態の動画像判定方法（以下、本方法と表示する場合がある）は、歩行する被験者が撮影された動画像が歩行解析条件を満たすか判定する方法である。本方法は、歩行する被験者が撮影された動画像を解析し、当該被験者の歩行態様などを解析する際に、動画像が歩行解析条件を満たすか否かを判定することで、歩行解析条件を満たす動画像のみ被験者の歩行態様などを解析対象とすることにもできるため、歩行解析条件を満たさない動画像に対する解析を行う必要がなくなり、処理負荷を軽減することが可能となる。
本方法は、動画取得工程および歩行動画判定工程を含む。動画取得工程は、歩行する被験者が撮影された動画像データを取得する工程である。歩行動画判定工程は、取得した動画像データは、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすか判定する工程である。本方法で判定する動画像は、複数フレームで構成され、歩行動画判定工程は、動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行う。
はじめに、本実施形態の概要について説明する。
本実施形態の動画像判定方法（以下、本方法と表示する場合がある）は、歩行する被験者が撮影された動画像が歩行解析条件を満たすか判定する方法である。本方法は、歩行する被験者が撮影された動画像を解析し、当該被験者の歩行態様などを解析する際に、動画像が歩行解析条件を満たすか否かを判定することで、歩行解析条件を満たす動画像のみ被験者の歩行態様などを解析対象とすることにもできるため、歩行解析条件を満たさない動画像に対する解析を行う必要がなくなり、処理負荷を軽減することが可能となる。
本方法は、動画取得工程および歩行動画判定工程を含む。動画取得工程は、歩行する被験者が撮影された動画像データを取得する工程である。歩行動画判定工程は、取得した動画像データは、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすか判定する工程である。本方法で判定する動画像は、複数フレームで構成され、歩行動画判定工程は、動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行う。
【0010】
以下、本方法について詳細に説明する。
歩行する被験者とは、乳幼児、幼児、児童などいわゆる子供から成人に至るまで年齢は問わない。ただし、歩行していることを解析条件としているため、自立して歩行が行えない乳幼児や高齢者は該当しない。
撮影された動画像とは、どのような場所で撮影されたものでもよく、歩行測定を行う実験室に限らず、日常生活において撮影された動画像も該当する。どのような撮影装置で撮影されたものでもよく、デジタルカメラ、ビデオカメラの他、一般的に移動端末と称される携帯電話、タブレット端末、ＰＤＡ、モバイルパーソナルコンピュータが備える撮影装置やパーソナルコンピュータが備える撮影装置で撮影された動画像が対象となる。どのような撮影者が撮影したものでもよい。動画像データは複数フレームで構成されたデータである。
歩行解析条件とは、取得した動画像データに撮影されている歩行する被験者の歩行態様を解析する際に必要な所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための条件である。所定の歩行条件には、被験者が所定歩数以上歩行しているか、被験者の歩行速度、所定の範囲内を歩行しているか（左右の揺れが所定範囲を超えていないか）、被験者の顔は正面を向いているか、被験者の両手の位置は所定範囲内かなどが含まれる。所定の撮影条件には、骨格データを取得可能に撮影されているか、全身が撮影されているか、撮影装置と被験者との距離は所定範囲内、所定歩数以上撮影されているかなどが含まれる。
歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定するとは、歩行解析条件を満たさなければ所定の歩行解析が可能でないこと（行えないこと）に限らず、所定の歩行解析は行えるが（所定の歩行解析の処理は実行できるが）、所定の歩行解析結果（所定精度の歩行解析結果）が得られないかを判定することも含む。詳細は後述するが、具体的には本方法によって判定する所定の歩行条件または所定の撮影条件には、条件を満たさなかった動画像データでは所定の歩行解析を行えない条件もあれば、条件を満たさなかった動画像データでも、例えば精度を犠牲にすることで、所定の歩行解析を行える条件もある。言い方を変えると、歩行解析が可能であると判定されなかった動画像データには、所定の歩行解析結果（所定精度の歩行解析結果）は得られない可能性が高いが、所定の歩行解析は行えるものが含まれている。所定の歩行解析を行うのに必要な条件を満たさなかった動画像データは所定の歩行解析には用いることはできないが、所定の歩行条件または所定の撮影条件を満たさなくても所定の歩行解析を行える動画像データについては所定の歩行解析を行い、歩行解析結果にどのような所定の歩行条件または所定の撮影条件を満たしたもしくは満たさなかった動画像データであるかの情報を含めるようにしてもよい。また、歩行解析条件を判定する際には、所定の歩行条件または所定の撮影条件が複数ある場合は、条件の判定順に優先順位をつけて行っても良い。優先順位をつけることで、処理負荷を抑えることが可能となる。
動画像を取得するとは、撮影装置で撮影されたデータを逐次入手するものや過去に撮影されたデータをネットワーク経由または所定の媒体を経由して入手するものや所定のサーバに記憶されている動画像データにアクセスすることで取得するものなどが含まれる。
歩行動画判定工程は、動画取得工程によって撮影装置で撮影されたデータを逐次入手し、取得したフレーム毎に判定を行ってもよいし、過去に撮影されたデータについて全フレーム取得した後に判定してもよい。
歩行する被験者とは、乳幼児、幼児、児童などいわゆる子供から成人に至るまで年齢は問わない。ただし、歩行していることを解析条件としているため、自立して歩行が行えない乳幼児や高齢者は該当しない。
撮影された動画像とは、どのような場所で撮影されたものでもよく、歩行測定を行う実験室に限らず、日常生活において撮影された動画像も該当する。どのような撮影装置で撮影されたものでもよく、デジタルカメラ、ビデオカメラの他、一般的に移動端末と称される携帯電話、タブレット端末、ＰＤＡ、モバイルパーソナルコンピュータが備える撮影装置やパーソナルコンピュータが備える撮影装置で撮影された動画像が対象となる。どのような撮影者が撮影したものでもよい。動画像データは複数フレームで構成されたデータである。
歩行解析条件とは、取得した動画像データに撮影されている歩行する被験者の歩行態様を解析する際に必要な所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための条件である。所定の歩行条件には、被験者が所定歩数以上歩行しているか、被験者の歩行速度、所定の範囲内を歩行しているか（左右の揺れが所定範囲を超えていないか）、被験者の顔は正面を向いているか、被験者の両手の位置は所定範囲内かなどが含まれる。所定の撮影条件には、骨格データを取得可能に撮影されているか、全身が撮影されているか、撮影装置と被験者との距離は所定範囲内、所定歩数以上撮影されているかなどが含まれる。
歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定するとは、歩行解析条件を満たさなければ所定の歩行解析が可能でないこと（行えないこと）に限らず、所定の歩行解析は行えるが（所定の歩行解析の処理は実行できるが）、所定の歩行解析結果（所定精度の歩行解析結果）が得られないかを判定することも含む。詳細は後述するが、具体的には本方法によって判定する所定の歩行条件または所定の撮影条件には、条件を満たさなかった動画像データでは所定の歩行解析を行えない条件もあれば、条件を満たさなかった動画像データでも、例えば精度を犠牲にすることで、所定の歩行解析を行える条件もある。言い方を変えると、歩行解析が可能であると判定されなかった動画像データには、所定の歩行解析結果（所定精度の歩行解析結果）は得られない可能性が高いが、所定の歩行解析は行えるものが含まれている。所定の歩行解析を行うのに必要な条件を満たさなかった動画像データは所定の歩行解析には用いることはできないが、所定の歩行条件または所定の撮影条件を満たさなくても所定の歩行解析を行える動画像データについては所定の歩行解析を行い、歩行解析結果にどのような所定の歩行条件または所定の撮影条件を満たしたもしくは満たさなかった動画像データであるかの情報を含めるようにしてもよい。また、歩行解析条件を判定する際には、所定の歩行条件または所定の撮影条件が複数ある場合は、条件の判定順に優先順位をつけて行っても良い。優先順位をつけることで、処理負荷を抑えることが可能となる。
動画像を取得するとは、撮影装置で撮影されたデータを逐次入手するものや過去に撮影されたデータをネットワーク経由または所定の媒体を経由して入手するものや所定のサーバに記憶されている動画像データにアクセスすることで取得するものなどが含まれる。
歩行動画判定工程は、動画取得工程によって撮影装置で撮影されたデータを逐次入手し、取得したフレーム毎に判定を行ってもよいし、過去に撮影されたデータについて全フレーム取得した後に判定してもよい。
【0011】
本方法の処理の流れを図１に用いて説明する。図１に示すフローチャートは、本方法によって処理される動画像判定アプリケーションソフトのフローチャートでもある。
工程（ステップＳ１００）は、歩行する被験者が撮影された動画像を取得する動画取得工程である。
工程（ステップＳ１００）は、歩行する被験者が撮影された動画像を取得する動画取得工程である。
【0012】
工程（ステップＳ１１０）は、取得した動画像が所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすか判定する歩行動画判定工程である。歩行動画判定工程の詳細を図２－１、図２－２に示す。歩行動画判定工程は１フレーム単位で判定を行う。１フレーム単位で判定を行うとは、本実施形態では、動画像を構成するフレーム数がｎ個の場合、１個のフレームに対し図２－１、図２－２に示すステップＳ１１１～ステップＳ１３０まで行い、その処理をｎ個分繰り返すこととするが、図２－１、図２－２に示す１ステップをｎ個分行った後、次のステップへ進むようにしてもよい。
【0013】
本実施形態では、機械学習により得られた骨格点学習モデルを用いて、取得した動画像から被験者の骨格点を抽出することで被験者を特定し、当該被験者の歩行解析を行うことする。本実施形態では、公知の骨格点抽出技術、例えば、OpenPose(URL=https://github.com/CMU-Perceptual-Computing-Lab/openpose)やVisionPose(URL=https://www.next-system.com/visionpose)などを用いて抽出する。
工程（ステップＳ１１１）は、取得した動画像から３次元骨格点の抽出を行う。動画像に複数の被験者が含まれる場合は、被験者単位に３次元骨格点の抽出を行う。動画像から抽出する３次元骨格点について図３に示す。
本実施形態では、図３に示した１６箇所の骨格点および重心を抽出する。重心は歩行解析で用いるため、骨格点の抽出と合わせて行うが同時に行わなくてもよい。重心は抽出された骨格点から算出してもよい。本実施形態では１６箇所の骨格点を抽出したが、抽出する骨格点の数はこれに限らない。
なお、工程（ステップＳ１１１）は、骨格点抽出工程に相当する。
工程（ステップＳ１１１）は、取得した動画像から３次元骨格点の抽出を行う。動画像に複数の被験者が含まれる場合は、被験者単位に３次元骨格点の抽出を行う。動画像から抽出する３次元骨格点について図３に示す。
本実施形態では、図３に示した１６箇所の骨格点および重心を抽出する。重心は歩行解析で用いるため、骨格点の抽出と合わせて行うが同時に行わなくてもよい。重心は抽出された骨格点から算出してもよい。本実施形態では１６箇所の骨格点を抽出したが、抽出する骨格点の数はこれに限らない。
なお、工程（ステップＳ１１１）は、骨格点抽出工程に相当する。
【0014】
工程（ステップＳ１１２）は、ステップＳ１１１で抽出した骨格点および重心が１被験者に対し歩行解析条件を満たすか判定する。ステップＳ１１２での歩行解析条件は所定の撮影条件の１つであり、本実施形態では１被験者に対し所定個数（本実施形態では１６箇所）の骨格点および重心を抽出できたフレームがあることである。歩行解析条件を満たすと判定された場合はステップＳ１１３へ進み、歩行解析条件を満たさないと判定された場合は本処理を終了する。１被験者に対し所定数の骨格点および重心が抽出されない場合は、歩行解析に適した動画像の明瞭度や画素数を持っていないと考えられ、歩行解析を行えない、または、行ったとしても正確な解析が行えないため、この後に続く処理は行わない。
なお、工程（ステップＳ１１２）は、骨格点判定工程に相当する。
なお、工程（ステップＳ１１２）は、骨格点判定工程に相当する。
【0015】
工程（ステップＳ１１３）は、被験者の全身が撮影されているかを判定する。本実施形態では、骨格点同士が予め決められた位置関係にある場合に被験者の全身が撮影されていると判定する。ステップＳ１１２で抽出された骨格点同士が予め決められた位置関係にあるかを判定し、予め決められた位置関係にあると判定された場合はステップＳ１１４へ進み、予め決められた位置関係にあると判定されなかった場合は本処理を終了する。骨格点同士が予め決められた位置関係にあるとは、例えば、頭頂を示す骨格点は抽出された骨格点の中で、図３に示すＸ座標の最も大きい値にある、左右肩峰（肩）を示す骨格点は足首を示す骨格点よりＸ座標の大きい値にあるなど予め決められた骨格点同士の位置関係に各骨格点が位置することである。抽出された骨格点が予め決められた位置関係にない場合、動画像は歩行解析を行えない、または、行ったとしても正確な解析が行えないため、この後に続く処理は行わない。抽出された骨格点が予め決められた位置関係にあるフレームのみこの後に続く処理を行う。
なお、工程（ステップＳ１１３）は、全身判定工程に相当する。
なお、工程（ステップＳ１１３）は、全身判定工程に相当する。
【0016】
工程（ステップＳ１１４）は、撮影装置に対して被験者が所定範囲内で撮影されたフレームがあるかを判定する工程である。撮影装置と被験者との距離が近いほど、骨格点抽出の精度がよくなるため、撮影装置と被験者とが所定範囲以上の位置で撮影された動画像の場合、歩行解析に適した動画像ではない可能性が高いため本判定を行う。本判定は必須の判定条件である。
本工程では、被験者の人体寸法を取得し、取得した人体寸法に対応する部位の動画像における長さ（例えば、動画像におけるピクセル数）と動画像の撮影位置と被験者の位置との奥行き方向の距離（図３のＹ軸方向の距離）との比率を計算し、この比率と被験者から取得した人体寸法の実際の長さとを用いて奥行寸法の実際の長さを推定し、推定結果が歩行解析条件を満たすか判定する。人体寸法とは、人体各部位の寸法のことをいい、具体的には、身長、眼高、肩峰高、前方腕長、肩幅、重心高、膝関節高などがある。人体寸法は、上記に例示されるもののうち一つまたは複数を選択してもよい。複数の人体寸法を選択した場合、上記の比率を人体寸法ごとにそれぞれ計算したうえで、上記の奥行き寸法の実際の長さの推定値の平均値を算出して推定結果としてもよい。また、人体寸法は動画像に写り込んでいる被験者の身体に応じて選択してもよい。例えば、被験者の足元が動画像に十分に写り込んでいない場合は、足元位置を用いずに人体寸法（動画像におけるピクセル数）を求めることが可能な前方腕長や肩幅を選択するとよい。人体寸法を用いることに代えて、後述するように光の反射を活用し、光学的に動画像の撮影位置と被験者の位置との奥行き方向の距離（図３のＹ軸方向の距離）を推定し、推定結果が歩行解析条件を満たすか判定してもよい。ステップＳ１１４での歩行解析条件は所定の撮影条件の１つであり、動画像の撮影位置と被験者の位置との距離が１～７ｍで撮影された動画像のフレームであることである。歩行解析条件を満たすと判定された場合はステップＳ１１６へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１１５へ進む。
なお、工程（ステップＳ１１４）は、骨格点判定工程、人体寸法工程および距離推定工程に相当する。
本工程では、被験者の人体寸法を取得し、取得した人体寸法に対応する部位の動画像における長さ（例えば、動画像におけるピクセル数）と動画像の撮影位置と被験者の位置との奥行き方向の距離（図３のＹ軸方向の距離）との比率を計算し、この比率と被験者から取得した人体寸法の実際の長さとを用いて奥行寸法の実際の長さを推定し、推定結果が歩行解析条件を満たすか判定する。人体寸法とは、人体各部位の寸法のことをいい、具体的には、身長、眼高、肩峰高、前方腕長、肩幅、重心高、膝関節高などがある。人体寸法は、上記に例示されるもののうち一つまたは複数を選択してもよい。複数の人体寸法を選択した場合、上記の比率を人体寸法ごとにそれぞれ計算したうえで、上記の奥行き寸法の実際の長さの推定値の平均値を算出して推定結果としてもよい。また、人体寸法は動画像に写り込んでいる被験者の身体に応じて選択してもよい。例えば、被験者の足元が動画像に十分に写り込んでいない場合は、足元位置を用いずに人体寸法（動画像におけるピクセル数）を求めることが可能な前方腕長や肩幅を選択するとよい。人体寸法を用いることに代えて、後述するように光の反射を活用し、光学的に動画像の撮影位置と被験者の位置との奥行き方向の距離（図３のＹ軸方向の距離）を推定し、推定結果が歩行解析条件を満たすか判定してもよい。ステップＳ１１４での歩行解析条件は所定の撮影条件の１つであり、動画像の撮影位置と被験者の位置との距離が１～７ｍで撮影された動画像のフレームであることである。歩行解析条件を満たすと判定された場合はステップＳ１１６へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１１５へ進む。
なお、工程（ステップＳ１１４）は、骨格点判定工程、人体寸法工程および距離推定工程に相当する。
【0017】
工程（ステップＳ１１５）は、ステップＳ１１４で、歩行解析条件を満たさないと判定された場合に行う工程である。本工程では、ステップＳ１１４での判定結果として、動画像の撮影位置と被験者の位置との距離が１～７ｍで撮影された動画像のフレームではない旨の結果を登録し、ステップＳ１１６へ進む。
【0018】
工程（ステップＳ１１６）は、被験者が４歩以上歩行する動画像があるか判定する工程である。歩行解析には、左右１歩行周期で計測を行うために、４歩以上連続で歩行した動画像を用いることが望ましく、例えば、左足踵が接地→右足踵が接地→左足踵が接地→右足踵が接地の歩行を含む動画像が必要であるため本判定を行う。本判定は必須の判定条件である。
本工程では、ステップＳ１１４で歩行解析条件を満たすと判定された動画像フレームに対し行う。したがって、ステップＳ１１４で歩行解析条件を満たすと判定されず、ステップＳ１１５でその旨の判定結果の登録がされた動画像フレームに対しては行わない。本工程では、ステップＳ１１１で抽出した左右足首の骨格点および重心から、左右踵が接地する位置を推定する。具体的には、重心位置が最も低いとき（図３のＸ方向の値が最も小さいとき）踵が接地しているときと推定でき、また、左足首の骨格点に対し重心位置が最も前方向に位置したとき（図３のＹ方向の値が最も大きいとき）左踵が接地したと推定でき、右足首の骨格点に対し重心位置が最も前方向に位置したときに右踵が接地したと推定できる。このようにして、踵が交互に各２回接地した動画像があるかを判定する。ステップＳ１１６での歩行解析条件は所定の歩行条件の１つであり、踵が交互に各２回接地した動画像があるか（４歩以上歩行した動画があるか）である。歩行解析条件を満たすと判定された場合はステップＳ１１８へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１１７へ進む。
なお、工程（ステップＳ１１６）は、骨格点判定工程および歩数判定工程に相当する。
本工程では、ステップＳ１１４で歩行解析条件を満たすと判定された動画像フレームに対し行う。したがって、ステップＳ１１４で歩行解析条件を満たすと判定されず、ステップＳ１１５でその旨の判定結果の登録がされた動画像フレームに対しては行わない。本工程では、ステップＳ１１１で抽出した左右足首の骨格点および重心から、左右踵が接地する位置を推定する。具体的には、重心位置が最も低いとき（図３のＸ方向の値が最も小さいとき）踵が接地しているときと推定でき、また、左足首の骨格点に対し重心位置が最も前方向に位置したとき（図３のＹ方向の値が最も大きいとき）左踵が接地したと推定でき、右足首の骨格点に対し重心位置が最も前方向に位置したときに右踵が接地したと推定できる。このようにして、踵が交互に各２回接地した動画像があるかを判定する。ステップＳ１１６での歩行解析条件は所定の歩行条件の１つであり、踵が交互に各２回接地した動画像があるか（４歩以上歩行した動画があるか）である。歩行解析条件を満たすと判定された場合はステップＳ１１８へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１１７へ進む。
なお、工程（ステップＳ１１６）は、骨格点判定工程および歩数判定工程に相当する。
【0019】
工程（ステップＳ１１７）は、ステップＳ１１６で、歩行解析条件を満たさないと判定された場合に行う工程である。本工程では、ステップＳ１１６での判定結果として、４歩以上歩行した動画がなかった旨の結果を登録し、ステップＳ１１８へ進む。
【0020】
工程（ステップＳ１１８）は、ステップＳ１１４およびステップＳ１１６で各々歩行解析条件を満たすと判定された場合に行う工程である。本工程では、ステップＳ１１４およびステップＳ１１６で各々歩行解析条件を満たすと判定されたことにより、すなわち、動画像の撮影位置と被験者の位置との距離が１～７ｍで撮影された動画像のフレームで４歩以上歩行している場合に総合得点に１点を加点し、ステップＳ１１９へ進む。
ここで、総合得点について説明する。総合得点とは、歩行動画判定工程で行う各判定結果に基づき、判定した動画像が歩行解析条件をどの程度満たしているか、どの程度歩行解析に適した動画像であるかを数値化するために用いるものである。
ここで、総合得点について説明する。総合得点とは、歩行動画判定工程で行う各判定結果に基づき、判定した動画像が歩行解析条件をどの程度満たしているか、どの程度歩行解析に適した動画像であるかを数値化するために用いるものである。
【0021】
工程（ステップＳ１１９）は、被験者が直線歩行する動画像があるか判定する工程である。一般的な歩行解析では、目的地に向かって直線的に自然歩行した際の動画像を解析するため、被験者が左右に蛇行して歩行するような動画像は歩行解析には適していない。そこで、被験者が一定の左右方向の範囲で歩行しているか判定を行う。本判定は必須の判定条件である。
本工程では、被験者の重心を判定し、当該重心が撮影装置に対し左右方向（図３のＺ軸方向）の移動範囲が所定範囲であるかを判定する。本実施形態では、ステップＳ１１１で抽出した重心を被験者の重心として用いる。ステップＳ１１９での歩行解析条件は所定の歩行条件の１つであり、被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内であることである。歩行解析条件を満たすと判定された場合はステップＳ１２１へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１２０へ進む。
なお、工程（ステップＳ１１９）は、骨格点判定工程および重心判定工程に相当する。
本工程では、被験者の重心を判定し、当該重心が撮影装置に対し左右方向（図３のＺ軸方向）の移動範囲が所定範囲であるかを判定する。本実施形態では、ステップＳ１１１で抽出した重心を被験者の重心として用いる。ステップＳ１１９での歩行解析条件は所定の歩行条件の１つであり、被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内であることである。歩行解析条件を満たすと判定された場合はステップＳ１２１へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１２０へ進む。
なお、工程（ステップＳ１１９）は、骨格点判定工程および重心判定工程に相当する。
【0022】
工程（ステップＳ１２０）は、ステップＳ１１９で、歩行解析条件を満たさないと判定された場合に行う工程である。本工程では、ステップＳ１１９での判定結果として、被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内の動画像ではない（直線歩行していない）旨の結果を登録し、ステップＳ１２２へ進む。
【0023】
工程（ステップＳ１２１）は、ステップＳ１１９で歩行解析条件を満たすと判定された場合に行う工程である。本工程では、ステップＳ１１９で歩行解析条件を満たすと判定されたことにより、総合得点に１点を加点し、ステップＳ１２２へ進む。
【0024】
工程（ステップＳ１２２）は、被験者が走っていない動画像があるか判定する工程である。歩行解析では、走行データを解析しないようにするため、被験者が走っている動画像は歩行解析には適していない。そこで、被験者が走っていない動画像があるか判定する。本判定は必須の判定条件である。
本工程での判定は、被験者が走っていることを示唆する歩行指標を判定することで行う。
被験者が走っていることを示唆する歩行指標について説明する。
被験者が走っていることを示唆する歩行指標としては、歩行速度、右足左足の接地時間、足位置の変化などがある。
歩行速度の場合、被験者の重心位置に基づき所定距離（例えば５ｍ）移動した際に要した時間を計測し、速度を算出する。このときに用いる被験者の重心位置は、ステップＳ１１１で抽出した重心位置を用いればよい。
右足左足の接地時間の場合、右足踵と左足踵とのどちらも接地していない時間の有無によって判定する。右足踵と左足踵とのどちらも接地していない時間が有れば走っていると判定するようにする。右足踵および左足踵が接地しているか否かは、ステップＳ１１６の歩数判定工程と同様の方法で推定する。
足位置の変化の場合、ステップＳ１１１で抽出した左右足首の骨格点の上下（図３のＸ軸方向）の移動範囲が所定範囲以上の場合は、走っていると判定するようにする。
ステップＳ１２２での歩行解析条件は所定の歩行条件の１つであり、上記何れかの歩行指標に基づき、走っていないと判定されたフレームがあることである。歩行解析条件を満たすと判定された場合はステップＳ１２４へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１２３へ進む。
なお、工程（ステップＳ１２２）は、骨格点判定工程および歩行判定工程に相当する。
本工程での判定は、被験者が走っていることを示唆する歩行指標を判定することで行う。
被験者が走っていることを示唆する歩行指標について説明する。
被験者が走っていることを示唆する歩行指標としては、歩行速度、右足左足の接地時間、足位置の変化などがある。
歩行速度の場合、被験者の重心位置に基づき所定距離（例えば５ｍ）移動した際に要した時間を計測し、速度を算出する。このときに用いる被験者の重心位置は、ステップＳ１１１で抽出した重心位置を用いればよい。
右足左足の接地時間の場合、右足踵と左足踵とのどちらも接地していない時間の有無によって判定する。右足踵と左足踵とのどちらも接地していない時間が有れば走っていると判定するようにする。右足踵および左足踵が接地しているか否かは、ステップＳ１１６の歩数判定工程と同様の方法で推定する。
足位置の変化の場合、ステップＳ１１１で抽出した左右足首の骨格点の上下（図３のＸ軸方向）の移動範囲が所定範囲以上の場合は、走っていると判定するようにする。
ステップＳ１２２での歩行解析条件は所定の歩行条件の１つであり、上記何れかの歩行指標に基づき、走っていないと判定されたフレームがあることである。歩行解析条件を満たすと判定された場合はステップＳ１２４へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１２３へ進む。
なお、工程（ステップＳ１２２）は、骨格点判定工程および歩行判定工程に相当する。
【0025】
工程（ステップＳ１２３）は、ステップＳ１２２で、歩行解析条件を満たさないと判定された場合に行う工程である。本工程では、ステップＳ１２２での判定結果として、動画像には被験者が走ってないと判定された動画像はない旨の結果を登録し、ステップＳ１２５へ進む。
【0026】
工程（ステップＳ１２４）は、ステップＳ１２２で歩行解析条件を満たすと判定された場合に行う工程である。本工程では、ステップＳ１２２で歩行解析条件を満たすと判定されたことにより、総合得点に１点を加点し、ステップＳ１２５へ進む。
【0027】
工程（ステップＳ１２５）は、動画像の被験者の顔の向きが上下左右方向に所定範囲内であるかを判定する工程である。被験者の顔の向きが上下左右方向に所定範囲を超えているような場合は、よそ見をして歩行している可能性が高く歩行解析に適した動画ではない。そこで、被験者が一定の上下左右方向の範囲内に顔を向けて歩行しているか判定を行う。本判定はあった方が好ましい判定条件である。
本工程では、ステップＳ１１１で抽出した頭頂（頭）、眉間、首、左右肩峰、および重心位置を用いて判定する。図４を用いて、本工程での判定方法について説明する。
頭頂、眉間、首、左右肩峰、および重心位置から、頭部座標系および身体座標系を作成する。頭部座標系は、頭頂と首を通るＸ軸（上下方向軸）・眉間を通りＸ軸と直交するＹ軸（前後方向軸）・Ｘ軸とＹ軸に直交するＺ軸（左右方向軸）から成り立つ。身体座標系は、重心と左右肩峰の中点を通るＸ軸（上下方向軸）・左右肩峰を通る直線と平行なＺ軸（左右方向軸）・Ｘ軸とＺ軸に直交するＹ軸（前後方向軸）から成り立つ。身体座標系のＺ軸およびＹ軸の高さ（Ｘ軸切片）は任意であるが、左右肩峰および重心を３頂点とする三角形の重心高さとすることができる。身体座標系に対して頭部座標系が上下左右に所定角度（例えば±３０度）以内である場合に、被験者の顔の向きが上下左右方向に所定範囲内と判定する。より具体的には、頭部座標系のＸ軸と身体座標系のＸ軸との為す角が３０度以下である場合に頭の倒れが小さいと判定する。また、頭部座標系のＹ軸と身体座標系のＹ軸との為す角が３０度以下である場合に顔の左右の向き（よそ見）が小さいと判定する。Ｙ軸に代えてＺ軸を用い、頭部座標系のＺ軸と身体座標系のＺ軸との為す角が３０度以下である場合に顔の左右の向き（よそ見）が小さいと判定してもよい。ステップＳ１２５での歩行解析条件は所定の歩行条件の１つであり、被験者の顔の上下および左右方向の移動範囲がそれぞれ±３０度以内であることである。上記の例では頭の上下方向の許容角度と頭の左右方向の許容角度をどちらも±３０度で共通としたが、本発明はこれに限られない。上下方向に頭を傾けて、すなわち足下を見ながら俯いて歩行することは、左右方向によそ見をしながら歩行することに比べて正常な歩容をとりやすいことから、頭の上下方向の許容角度を、頭の左右方向の許容角度よりも大きく設定してもよい。
動画像のうち被験者の顔の向きが僅かな時間（フレーム数）のみで±３０度を超えた場合、歩行全体としては歩行解析に適した動画と判断することが好ましい。そこでステップＳ１２５の条件判定には顔の向きが上下または左右にぶれることを許容する「閾値割合」を予め設定しておくとよい。そして被験者の顔の上下方向または左右方向の少なくとも一方の向きが±３０度を超えている時間またはフレーム数が、歩行全体の時間またはフレーム数に対してこの閾値割合以上となった場合に、当該歩行を不適すなわち歩行解析条件を満たさないと判定するとよい。この閾値割合は１０％以上３０％以下とすることが好ましい。そして所定条件を満たすと判定された場合はステップＳ１２７へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１２６へ進む。
なお、工程（ステップＳ１２５）は、骨格点判定工程および顔判定工程に相当する。
本工程では、ステップＳ１１１で抽出した頭頂（頭）、眉間、首、左右肩峰、および重心位置を用いて判定する。図４を用いて、本工程での判定方法について説明する。
頭頂、眉間、首、左右肩峰、および重心位置から、頭部座標系および身体座標系を作成する。頭部座標系は、頭頂と首を通るＸ軸（上下方向軸）・眉間を通りＸ軸と直交するＹ軸（前後方向軸）・Ｘ軸とＹ軸に直交するＺ軸（左右方向軸）から成り立つ。身体座標系は、重心と左右肩峰の中点を通るＸ軸（上下方向軸）・左右肩峰を通る直線と平行なＺ軸（左右方向軸）・Ｘ軸とＺ軸に直交するＹ軸（前後方向軸）から成り立つ。身体座標系のＺ軸およびＹ軸の高さ（Ｘ軸切片）は任意であるが、左右肩峰および重心を３頂点とする三角形の重心高さとすることができる。身体座標系に対して頭部座標系が上下左右に所定角度（例えば±３０度）以内である場合に、被験者の顔の向きが上下左右方向に所定範囲内と判定する。より具体的には、頭部座標系のＸ軸と身体座標系のＸ軸との為す角が３０度以下である場合に頭の倒れが小さいと判定する。また、頭部座標系のＹ軸と身体座標系のＹ軸との為す角が３０度以下である場合に顔の左右の向き（よそ見）が小さいと判定する。Ｙ軸に代えてＺ軸を用い、頭部座標系のＺ軸と身体座標系のＺ軸との為す角が３０度以下である場合に顔の左右の向き（よそ見）が小さいと判定してもよい。ステップＳ１２５での歩行解析条件は所定の歩行条件の１つであり、被験者の顔の上下および左右方向の移動範囲がそれぞれ±３０度以内であることである。上記の例では頭の上下方向の許容角度と頭の左右方向の許容角度をどちらも±３０度で共通としたが、本発明はこれに限られない。上下方向に頭を傾けて、すなわち足下を見ながら俯いて歩行することは、左右方向によそ見をしながら歩行することに比べて正常な歩容をとりやすいことから、頭の上下方向の許容角度を、頭の左右方向の許容角度よりも大きく設定してもよい。
動画像のうち被験者の顔の向きが僅かな時間（フレーム数）のみで±３０度を超えた場合、歩行全体としては歩行解析に適した動画と判断することが好ましい。そこでステップＳ１２５の条件判定には顔の向きが上下または左右にぶれることを許容する「閾値割合」を予め設定しておくとよい。そして被験者の顔の上下方向または左右方向の少なくとも一方の向きが±３０度を超えている時間またはフレーム数が、歩行全体の時間またはフレーム数に対してこの閾値割合以上となった場合に、当該歩行を不適すなわち歩行解析条件を満たさないと判定するとよい。この閾値割合は１０％以上３０％以下とすることが好ましい。そして所定条件を満たすと判定された場合はステップＳ１２７へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１２６へ進む。
なお、工程（ステップＳ１２５）は、骨格点判定工程および顔判定工程に相当する。
【0028】
工程（ステップＳ１２６）は、ステップＳ１２５で、歩行解析条件を満たさないと判定された場合に行う工程である。本工程では、ステップＳ１２５での判定結果として、被験者の顔の向きが上下左右方向に所定範囲内の動画像ではない旨の結果を登録し、ステップＳ１２８へ進む。
【0029】
工程（ステップＳ１２７）は、ステップＳ１２５で歩行解析条件を満たすと判定された場合に行う工程である。本工程では、ステップＳ１２５で歩行解析条件を満たすと判定されたことにより、総合得点に１点を加点し、ステップＳ１２８へ進む。
【0030】
工程（ステップＳ１２８）は、動画像の被験者の両手の位置が所定位置以下であるかを判定する工程である。自然な歩行状態では、両手首が所定位置（肘）より低い位置となるので、被験者の両手の位置が所定位置より高い場合、手に物を持っている可能性が高く歩行解析に適した動画ではない。そこで、被験者の両手が所定位置以下であるか判定を行う。本判定はあった方が好ましい判定条件である。
本工程では、被験者の両手を判定し、両手の位置が所定位置以下であるかを判定する。本実施形態では所定位置を両肘の位置とする。本実施形態では、ステップＳ１１１で抽出した被験者の両手首の骨格点の位置と両肘の骨格点の位置を比較し、両肘の骨格点の位置より両手首の骨格点の位置が低いか（図３のＸ軸の値が小さいか）を判定する。ステップＳ１２８での歩行解析条件は所定の歩行条件の１つであり、被験者の両手の位置が両肘の位置より低いことである。歩行解析条件を満たすと判定された場合はステップＳ１３０へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１２９へ進む。
なお、工程（ステップＳ１２８）は、骨格点判定工程および両手判定工程に相当する。
本工程では、被験者の両手を判定し、両手の位置が所定位置以下であるかを判定する。本実施形態では所定位置を両肘の位置とする。本実施形態では、ステップＳ１１１で抽出した被験者の両手首の骨格点の位置と両肘の骨格点の位置を比較し、両肘の骨格点の位置より両手首の骨格点の位置が低いか（図３のＸ軸の値が小さいか）を判定する。ステップＳ１２８での歩行解析条件は所定の歩行条件の１つであり、被験者の両手の位置が両肘の位置より低いことである。歩行解析条件を満たすと判定された場合はステップＳ１３０へ進み、歩行解析条件を満たさないと判定された場合はステップＳ１２９へ進む。
なお、工程（ステップＳ１２８）は、骨格点判定工程および両手判定工程に相当する。
【0031】
工程（ステップＳ１２９）は、ステップＳ１２８で、歩行解析条件を満たさないと判定された場合に行う工程である。本工程では、ステップＳ１２８での判定結果として、被験者の両手位置が所定位置以下ではない動画像である旨の結果を登録し、本処理を終了する。
【0032】
工程（ステップＳ１３０）は、ステップＳ１２８で歩行解析条件を満たすと判定された場合に行う工程である。本工程では、ステップＳ１２８で歩行解析条件を満たすと判定されたことにより、総合得点に１点を加点し、本処理を終了する。
【0033】
次に、総合得点を用いた評価内容について説明する。
上述したように、ステップＳ１１４、ステップＳ１１６、ステップＳ１１９、ステップＳ１２２、ステップＳ１２５、およびステップＳ１２８の判定結果に応じて、総合得点に所定点の加点を行う。この総合得点によって、動画像が歩行解析に適した動画像であるか評価することができる。また、総合得点によって、当該動画像を用いた歩行解析結果の精度を評価することも可能である。本実施形態では、歩行解析条件に関わらず、歩行解析条件を満たしていれば所定点として１点加点するようにしたが、歩行解析条件によって加点する得点を異ならせても良い。例えば、必須の判定条件と、あった方が好ましい判定条件とで、加点する得点を異ならせてもよい。総合得点は紙媒体、電子媒体に関わらず、結果を出力することを可能とする。また、判定された動画像を用いた歩行解析処理を行った結果に総合得点を含めてもよい。このようにすることで、どのような動画像を用いた歩行解析処理結果であるかがわかるため、歩行解析処理の結果精度の参考にすることができる。
上述したように、ステップＳ１１４、ステップＳ１１６、ステップＳ１１９、ステップＳ１２２、ステップＳ１２５、およびステップＳ１２８の判定結果に応じて、総合得点に所定点の加点を行う。この総合得点によって、動画像が歩行解析に適した動画像であるか評価することができる。また、総合得点によって、当該動画像を用いた歩行解析結果の精度を評価することも可能である。本実施形態では、歩行解析条件に関わらず、歩行解析条件を満たしていれば所定点として１点加点するようにしたが、歩行解析条件によって加点する得点を異ならせても良い。例えば、必須の判定条件と、あった方が好ましい判定条件とで、加点する得点を異ならせてもよい。総合得点は紙媒体、電子媒体に関わらず、結果を出力することを可能とする。また、判定された動画像を用いた歩行解析処理を行った結果に総合得点を含めてもよい。このようにすることで、どのような動画像を用いた歩行解析処理結果であるかがわかるため、歩行解析処理の結果精度の参考にすることができる。
【0034】
図５（ａ）、（ｂ）に、判定結果および総合得点の出力例を示す。本実施形態では、乳幼児の歩行発達を解析するために用いる動画像が、歩行解析に適した動画像であるか判定した結果を移動端末が備える表示装置に出力した場合を示す。
図５（ａ）の横軸は、動画像を撮影した日付を示し、縦軸は、発達日数を示す。ここでの発達日数とは、歩行解析に適した動画像であるか否かの判定を行った動画像を用いて、所定の歩行解析を行うことにより算出した被験者（乳幼児）の歩行発達日数である。算出した歩行発達日数の精度は、歩行解析に用いた動画像の判定結果および総合得点が影響する。図５（ａ）では、総合得点に応じてプロットの色を変えることにより、歩行解析に用いた動画像がどのような判定結果の動画像であるかを把握することが可能である。例えば、総合得点が高い順に、緑色（図５（ａ）では白塗り）→黄色（図５（ａ）では小ドットの網掛け）→橙色（図５（ａ）では大ドットの網掛け）でプロットする。プロットの色は、総合得点が満点の場合に緑色とし、満点に対し例えば－１～－３点の場合は黄色、それ以下の場合は橙色とする。プロットの色および対応する得点は、評価内容を考慮し設定することが好ましい。
図５（ｂ）は、所定の撮影日の動画像の判定条件毎の判定結果を示している。図５（ｂ）は、例えば、撮影日を指定（クリックやタッチ）することにより、該当の判定結果が表示されてもよいし、撮影日に対応したプロットを指定（クリックやタッチ）することにより、該当の判定結果が表示されてもよい。判定条件毎の判定結果によって、判定条件（例えば、図５（ｂ）の歩数）の並びに表示されるボックスの色を変える。図５（ｂ）では、ステップＳ１１６で判定された歩数については歩行解析条件である４歩を満たしていたため、よい判定結果を示す緑色（図５（ｂ）では白塗り）が表示され、ステップＳ１１９で判定された直線歩行については、斜め歩行であったため、悪い判定結果を示す橙色（図５（ｂ）では大ドットによる網掛け）が表示されている。このように、どのような条件の判定により、総合得点が高得点であった／低得点であったかを把握することができ、その後の撮影時に反映することが可能となる。
図５（ａ）の横軸は、動画像を撮影した日付を示し、縦軸は、発達日数を示す。ここでの発達日数とは、歩行解析に適した動画像であるか否かの判定を行った動画像を用いて、所定の歩行解析を行うことにより算出した被験者（乳幼児）の歩行発達日数である。算出した歩行発達日数の精度は、歩行解析に用いた動画像の判定結果および総合得点が影響する。図５（ａ）では、総合得点に応じてプロットの色を変えることにより、歩行解析に用いた動画像がどのような判定結果の動画像であるかを把握することが可能である。例えば、総合得点が高い順に、緑色（図５（ａ）では白塗り）→黄色（図５（ａ）では小ドットの網掛け）→橙色（図５（ａ）では大ドットの網掛け）でプロットする。プロットの色は、総合得点が満点の場合に緑色とし、満点に対し例えば－１～－３点の場合は黄色、それ以下の場合は橙色とする。プロットの色および対応する得点は、評価内容を考慮し設定することが好ましい。
図５（ｂ）は、所定の撮影日の動画像の判定条件毎の判定結果を示している。図５（ｂ）は、例えば、撮影日を指定（クリックやタッチ）することにより、該当の判定結果が表示されてもよいし、撮影日に対応したプロットを指定（クリックやタッチ）することにより、該当の判定結果が表示されてもよい。判定条件毎の判定結果によって、判定条件（例えば、図５（ｂ）の歩数）の並びに表示されるボックスの色を変える。図５（ｂ）では、ステップＳ１１６で判定された歩数については歩行解析条件である４歩を満たしていたため、よい判定結果を示す緑色（図５（ｂ）では白塗り）が表示され、ステップＳ１１９で判定された直線歩行については、斜め歩行であったため、悪い判定結果を示す橙色（図５（ｂ）では大ドットによる網掛け）が表示されている。このように、どのような条件の判定により、総合得点が高得点であった／低得点であったかを把握することができ、その後の撮影時に反映することが可能となる。
【0035】
このように、様々な所定条件で動画像を判定することで、歩行解析に適した動画像か否か評価することができる。また、歩行解析を行えない動画像については、歩行解析を行う前に解析対象外とすることができるため、処理効率の向上が可能となる。また、判定結果を視覚的に把握することが可能となる。さらに、動画像を用いた歩行解析結果に、当該動画像の判定結果を反映するため、どのような判定結果の動画像を用いた歩行解析結果であるか把握しやすくなる。
【0036】
＜情報処理端末＞
次に、上述した動画像判定方法を実行する撮影装置を備えた情報処理端末（携帯端末）１００について説明する。情報処理端末（携帯端末）１００の概念図を図６に示す。
情報処理端末（携帯端末）１００は、撮影装置（カメラ）１１０を備えていれば、一般的に携帯端末と称される携帯電話、タブレット端末、ＰＤＡ、モバイルパーソナルコンピュータやウェアラブルデバイス、パーソナルコンピュータなどの何れでもよい。携帯端末１００には、撮影手段である撮影装置１１０、判定手段である判定部１２０、記憶部１３０、および姿勢センサ１４０を備える。また、図示はしていないが、キーボード（タッチキーボードを含む）、ポインティングデバイスなどの入力装置、演算処理装置、表示装置などを備えている。
撮影装置１１０は、動画像を撮影する手段であり、携帯端末１００が備えるカメラが相当する。
判定部１２０は、上述した動画像判定方法を実行する手段あり、演算処理装置に含まれる。
記憶部１３０は、撮影した動画像を記憶する手段である。また、判定部１２０による判定結果や評価結果（総合得点）なども記憶する手段であり、さらに、上述した動画像判定方法を実行するコンピュータプログラムも記憶する手段である。
姿勢センサ１４０は、携帯端末１００の姿勢を計測するセンサで、携帯端末１００が備える加速度センサ・角速度センサなどである。
次に、上述した動画像判定方法を実行する撮影装置を備えた情報処理端末（携帯端末）１００について説明する。情報処理端末（携帯端末）１００の概念図を図６に示す。
情報処理端末（携帯端末）１００は、撮影装置（カメラ）１１０を備えていれば、一般的に携帯端末と称される携帯電話、タブレット端末、ＰＤＡ、モバイルパーソナルコンピュータやウェアラブルデバイス、パーソナルコンピュータなどの何れでもよい。携帯端末１００には、撮影手段である撮影装置１１０、判定手段である判定部１２０、記憶部１３０、および姿勢センサ１４０を備える。また、図示はしていないが、キーボード（タッチキーボードを含む）、ポインティングデバイスなどの入力装置、演算処理装置、表示装置などを備えている。
撮影装置１１０は、動画像を撮影する手段であり、携帯端末１００が備えるカメラが相当する。
判定部１２０は、上述した動画像判定方法を実行する手段あり、演算処理装置に含まれる。
記憶部１３０は、撮影した動画像を記憶する手段である。また、判定部１２０による判定結果や評価結果（総合得点）なども記憶する手段であり、さらに、上述した動画像判定方法を実行するコンピュータプログラムも記憶する手段である。
姿勢センサ１４０は、携帯端末１００の姿勢を計測するセンサで、携帯端末１００が備える加速度センサ・角速度センサなどである。
【0037】
携帯端末１００には撮影装置１１０を備えているため、当該撮影装置１１０は、上述した動画像判定方法の動画取得工程に相当する。
携帯端末１００には姿勢センサ１４０が設けられているため、撮影装置１１０の姿勢を判定することができる。図１のステップＳ１１０に、撮影装置の姿勢を判定する処理を含め、当該処理では、姿勢センサ１４０から姿勢データを取得し、演算処理装置は、取得した姿勢データに基づき、撮影時の撮影装置１１０の姿勢を判定し、所定範囲以内の姿勢であれば携帯端末１００に備えられている表示装置にアドバイスを表示しない、または、「正常」を表示し、それ以外の姿勢となると「撮影装置１１０が傾いています」などのアドバイスを表示するようにしてもよい。本実施形態では、所定範囲としては、左右前後方向に±２５度とする。このように構成することで、歩行解析に適した動画像を撮影できるようにでき、撮影（取得）した動画像を用いた歩行解析の精度を高めることができる。
携帯端末１００には姿勢センサ１４０が設けられているため、撮影装置１１０の姿勢を判定することができる。図１のステップＳ１１０に、撮影装置の姿勢を判定する処理を含め、当該処理では、姿勢センサ１４０から姿勢データを取得し、演算処理装置は、取得した姿勢データに基づき、撮影時の撮影装置１１０の姿勢を判定し、所定範囲以内の姿勢であれば携帯端末１００に備えられている表示装置にアドバイスを表示しない、または、「正常」を表示し、それ以外の姿勢となると「撮影装置１１０が傾いています」などのアドバイスを表示するようにしてもよい。本実施形態では、所定範囲としては、左右前後方向に±２５度とする。このように構成することで、歩行解析に適した動画像を撮影できるようにでき、撮影（取得）した動画像を用いた歩行解析の精度を高めることができる。
【0038】
携帯端末１００では、撮影装置１１０で撮影した動画像を判定部１２０によって、上述した動画像判定方法により逐次、撮影（取得）した動画像の判定を行う。このとき、演算処理装置は、図２－１および図２－２に示したステップ１１４、ステップＳ１１６、ステップＳ１１９、ステップＳ１２２、ステップＳ１２５、およびステップＳ１２８の判定結果に基づき表示装置にアドバイスを表示してもよい。図７（a）、（ｂ）に携帯端末１００の表示装置の画面イメージを示す。例えば、ステップＳ１２８の判定で、被験者の両手位置が両肘位置より低いと判定されなかった場合、演算処理装置が表示手段に対し図７（a）に示すように「両手を下げていません」とアドバイスを表示するようにする。同様に、ステップＳ１１４の判定で撮影装置１１０と被験者の位置との距離が１～７ｍで撮影されていないと判定された場合は、演算処理装置が表示手段に対し図７（ｂ）に示すように「カメラ距離１～７ｍではありません」とアドバイスを表示するようにする。このように構成することで、歩行解析に適した動画像を撮影できるようにでき、撮影（取得）した動画像を用いた歩行解析の精度を高めることができる。
【0039】
＜コンピュータプログラム＞
携帯端末１００には、取得処理および判定処理を携帯端末１００に実行させるためのコンピュータプログラム（以下、本プログラム）がインストールされている。本実施形態ではコンピュータプログラムは、上述した動画像判定アプリケーションソフトである。
取得処理は、歩行する被験者の動画像を取得する処理である。所定の媒体から取得する、ネットワーク経由で取得する、撮影装置から取得するなど動画像の取得元は問わない。判定処理は、歩行条件または撮影条件が所定条件を満たすか否かを判定する処理である。本プログラムにより、図１、図２－１、図２－１のフローチャートに示された処理が実行される。
携帯端末１００には、取得処理および判定処理を携帯端末１００に実行させるためのコンピュータプログラム（以下、本プログラム）がインストールされている。本実施形態ではコンピュータプログラムは、上述した動画像判定アプリケーションソフトである。
取得処理は、歩行する被験者の動画像を取得する処理である。所定の媒体から取得する、ネットワーク経由で取得する、撮影装置から取得するなど動画像の取得元は問わない。判定処理は、歩行条件または撮影条件が所定条件を満たすか否かを判定する処理である。本プログラムにより、図１、図２－１、図２－１のフローチャートに示された処理が実行される。
【0040】
＜変形例＞
本実施形態では、機械学習により得られた骨格点学習モデルを用いて、取得した動画像から被験者の骨格点を抽出することで被験者を特定し、当該被験者の歩行解析を行うようにしたがこれに限らない。例えば、他の画像解析により被験者を特定し、被験者の動きを抽出し歩行解析を行ってもよい。この場合、判定する歩行解析条件に当該画像解析に適した条件を設定することで、同様の効果を得ることが可能となる。
本実施形態では、機械学習により得られた骨格点学習モデルを用いて、取得した動画像から被験者の骨格点を抽出することで被験者を特定し、当該被験者の歩行解析を行うようにしたがこれに限らない。例えば、他の画像解析により被験者を特定し、被験者の動きを抽出し歩行解析を行ってもよい。この場合、判定する歩行解析条件に当該画像解析に適した条件を設定することで、同様の効果を得ることが可能となる。
【0041】
本実施形態では、ステップＳ１１４の判定処理を行う際に、被験者の人体寸法データを取得し、当該データと被験者の重心位置に基づき撮影装置と被験者の位置との距離を推定し、判定したがこれに限らない。撮影位置にスケールや基準点を設け、スケールや基準点と共に撮影されるように歩行した動画像を取得するようにし、スケールや基準点も抽出することで、撮影装置と被験者の位置との距離を推定することが可能となる。例えば、所定の施設（保育園、高齢者施設）の利用者が撮影された動画像の動画像を判定するなど、撮影場所を固定できる場合には有効である。また、近赤外光や可視光、紫外線を使って被験者に光を照射し、その反射光を撮影装置に設けた光センサでとらえることで、被験者から撮影装置までの距離を測定するリモートセンシング技術を活用してもよい。光センサは撮影装置自体に設けるほか、撮影装置の近傍に設置してもよい。このように、光学的に動画像の撮影位置と被験者の位置との奥行き方向の距離（図３のＹ軸方向の距離）を推定し、推定結果が歩行解析条件を満たすか判定してもよい。
【0042】
本実施形態では、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される歩行解析条件を満たすか否かを判定するようにした。これに加え、撮影装置の姿勢が所定の範囲内であるかを歩行解析条件に含めても良い。
例えば、携帯端末１００に備えられた撮影装置を用いて動画像を撮影する場合、動画像に撮影時の携帯端末１００の姿勢情報を付加して記憶し、判定工程で姿勢情報を取得し、当該姿勢情報が所定範囲内であれば歩行解析条件を満たし、当該姿勢情報が所定範囲内でなければ歩行解析条件を満たさないと判定するようにしてもよい。例えば、図２－２に示したステップＳ１３０の処理の後に、撮影装置の姿勢情報を取得する姿勢取得工程と判定工程として、取得した姿勢情報が左右前後方向に±２５度以内であるか判定する処理を設ければよい。この処理での歩行解析条件は所定の撮影条件の１つであり、具体的には、撮影装置の姿勢情報が左右前後方向に±２５度以内であるかである。そして、歩行解析条件を満たすと判定された場合は、総合得点に１点加点するようにすることが好ましい。このように構成することで、動画像が歩行解析に適しているかさらに評価を行うことが可能となる。
例えば、携帯端末１００に備えられた撮影装置を用いて動画像を撮影する場合、動画像に撮影時の携帯端末１００の姿勢情報を付加して記憶し、判定工程で姿勢情報を取得し、当該姿勢情報が所定範囲内であれば歩行解析条件を満たし、当該姿勢情報が所定範囲内でなければ歩行解析条件を満たさないと判定するようにしてもよい。例えば、図２－２に示したステップＳ１３０の処理の後に、撮影装置の姿勢情報を取得する姿勢取得工程と判定工程として、取得した姿勢情報が左右前後方向に±２５度以内であるか判定する処理を設ければよい。この処理での歩行解析条件は所定の撮影条件の１つであり、具体的には、撮影装置の姿勢情報が左右前後方向に±２５度以内であるかである。そして、歩行解析条件を満たすと判定された場合は、総合得点に１点加点するようにすることが好ましい。このように構成することで、動画像が歩行解析に適しているかさらに評価を行うことが可能となる。
【0043】
本実施形態では、携帯端末１００は、撮影装置１１０の姿勢を判定し、判定結果に基づき、表示装置に「正常」、「撮影装置１１０が傾いています」などのアドバイスを表示するようにした。これに加えて、判定部１２０で動画像の撮影時の姿勢情報を取得し、当該姿勢情報が所定範囲内であれば歩行解析条件を満たし、当該姿勢情報が所定範囲内でなければ歩行解析条件を満たさない動画像であると判定するようにしてもよい。このように、携帯端末１００の姿勢センサ１４０の姿勢情報に基づき、撮影時の撮影装置１１０の撮影姿勢に関するアドバイスを表示することに加え、撮影された動画像の評価も行うことが可能となる。
【0044】
動画像取得工程で取得する動画像は、被験者が歩行すべき範囲や撮影装置の姿勢を撮影者にガイドする歩行路ガイド工程および撮影した動画像の被験者が特定できないように処理を行う被験者マスク工程を行った動画像データとしてもよい。図８に基づき、歩行路ガイド工程および被験者マスク工程について説明する。
【0045】
工程（ステップＳ１０１）は、撮影準備状態か否かを判定する工程である。「撮影準備状態」とは、撮影装置１１０が撮影可能な状態であり、撮影画面に被写体が表示される状態のことである。撮影準備状態でなければステップＳ１０３へ移行し、撮影準備状態であればステップＳ１０２へ移行する。
【0046】
工程（ステップＳ１０２）は、歩行路ガイド及び水平ガイド表示を行う工程である。
「歩行路ガイド」とは、歩行動画を撮影する撮影者が精度のよい歩行解析を行える動画像を撮影できているかを撮影時に確認するための表示の１つである。撮影画面に被験者が歩行開始位置として最適な位置を表示し、また、歩行方向として最適な位置を表示する。図９に歩行路ガイドの表示例を示す。図９（ａ）は撮影範囲に被験者がいないため、撮影画面には被験者が表示されていない。図９（ａ）の撮影画面に表示された歩行路ガイド５００は、被験者が歩行開始位置として最適な位置を示している。歩行路ガイド５００の表示位置は、撮影装置１１０との距離および歩行解析に必要な歩数（４歩以上）分の距離を考慮して設定されている。具体的には、撮影装置１１０から６から８メートル程度、好ましくは７メートル程度の位置に歩行路ガイド５００を表示する。図９（ａ）の歩行路ガイド５００は人の形を模した図としているが、表示態様はこれに限らず、例えば、歩行開始位置として最適な位置に足跡マークを表示するようにしてもよい。図９（ａ）の歩行路ガイド５１０は、被験者の歩行方向および歩行範囲として最適な位置を示している。歩行路ガイド５１０の表示位置は、撮影装置１１０の位置（向き）に基づき、撮影装置１１０に対して垂直となるように設定されている。また、被験者が撮影装置１１０へ向かって歩行する際に左右方向に蛇行しながら歩行すると精度のよい歩行解析を行える動画像を撮影することができない。そこで、歩行路ガイド５１０は被験者と撮影装置１１０との方向、被験者と撮影装置１１０との距離、および、左右方向の歩行範囲（歩行幅）を考慮して設定されている。具体的には、撮影装置１１０から６から８メートル程度、好ましくは７メートル程度の距離で、被験者が撮影装置１１０に向かって垂直方向で、歩行範囲は２メートル程度、好ましくは１メートル程度となるように歩行路ガイド５１０を表示する。図９（ａ）の歩行路ガイド５１０は点線としているが、表示態様はこれに限らず、例えば、ブロックを模した図やロープを模した図を表示するようにしてもよい。
「水平ガイド」とは、歩行路ガイドと同様に、歩行動画を撮影する撮影者が精度のよい歩行解析を行える動画像を撮影できているかを撮影時に確認するための表示の１つである。水平ガイドは、撮影装置１１０の姿勢に関する情報である。撮影装置１１０の姿勢は携帯端末１００に設けられている姿勢センサ（例えば、ジャイロセンサ）を用いて重力方向に対する携帯端末１００の姿勢を検出し、検出結果に基づき現在の撮影方向を示す記号である姿勢表示マーカ「●」を水平ガイド５２０に表示する。図９に水平ガイド５２０の表示例を示す。水平ガイド５２０は十文字の中心に姿勢表示マーカ「●」が重なっていると、撮影装置１１０の姿勢が撮影者の接地面に対し水平であることを示し、十文字の中心から姿勢表示マーカ「●」がずれていると、撮影装置１１０の姿勢が撮影者の接地面に対し水平でないことを示している。図９（ａ）は撮影範囲に被験者がいないため、撮影画面には被験者が表示されていない。図９（ｂ）は撮影範囲に被験者がおり、歩行路ガイド５００の表示位置と被験者が重なって撮影画面に表示されるように撮影装置１１０を移動させる、または、被験者に移動を促す。このとき、被験者の顔の高さ、好ましくは目の高さと撮影装置１１０のレンズの高さが同程度であると精度のよい歩行解析を行える動画像を撮影することができる。図９（ｃ）は、撮影装置１１０のレンズの高さと被験者の顔の高さが同程度であり、撮影装置１１０の姿勢が撮影者の接地面に対し水平であるため、水平ガイド５２０は撮影装置１１０の姿勢が水平であることを示している。図９（ｄ）は、歩行路ガイド５００の表示位置に被験者はいるが、撮影装置１１０のレンズの高さが被験者の顔より高い位置にあるため、被験者を見下ろすような角度に撮影装置１１０が設けられている。そこで、図９（ｄ）の水平ガイド５２０は十文字の中心から姿勢表示マーカ「●」がずれて表示されている。水平ガイド５２０を確認することで、撮影者は撮影装置１１０の姿勢が傾いているか把握でき、また、水平ガイド５２０を確認しながら撮影装置１１０を正しい姿勢に調整することが可能となる。なお、水平ガイド５２０は図９に示した表示態様に限らず、数値によるもの、撮影画面上にグリッド線を表示するものなど、どのような表示態様でもよい。なお、図９では、歩行路ガイド５００、歩行路ガイド５１０および水平ガイド５２０を撮影画面上に表示したが、音声によるガイドでもよく、表示と音声を併用してもよい。
「歩行路ガイド」とは、歩行動画を撮影する撮影者が精度のよい歩行解析を行える動画像を撮影できているかを撮影時に確認するための表示の１つである。撮影画面に被験者が歩行開始位置として最適な位置を表示し、また、歩行方向として最適な位置を表示する。図９に歩行路ガイドの表示例を示す。図９（ａ）は撮影範囲に被験者がいないため、撮影画面には被験者が表示されていない。図９（ａ）の撮影画面に表示された歩行路ガイド５００は、被験者が歩行開始位置として最適な位置を示している。歩行路ガイド５００の表示位置は、撮影装置１１０との距離および歩行解析に必要な歩数（４歩以上）分の距離を考慮して設定されている。具体的には、撮影装置１１０から６から８メートル程度、好ましくは７メートル程度の位置に歩行路ガイド５００を表示する。図９（ａ）の歩行路ガイド５００は人の形を模した図としているが、表示態様はこれに限らず、例えば、歩行開始位置として最適な位置に足跡マークを表示するようにしてもよい。図９（ａ）の歩行路ガイド５１０は、被験者の歩行方向および歩行範囲として最適な位置を示している。歩行路ガイド５１０の表示位置は、撮影装置１１０の位置（向き）に基づき、撮影装置１１０に対して垂直となるように設定されている。また、被験者が撮影装置１１０へ向かって歩行する際に左右方向に蛇行しながら歩行すると精度のよい歩行解析を行える動画像を撮影することができない。そこで、歩行路ガイド５１０は被験者と撮影装置１１０との方向、被験者と撮影装置１１０との距離、および、左右方向の歩行範囲（歩行幅）を考慮して設定されている。具体的には、撮影装置１１０から６から８メートル程度、好ましくは７メートル程度の距離で、被験者が撮影装置１１０に向かって垂直方向で、歩行範囲は２メートル程度、好ましくは１メートル程度となるように歩行路ガイド５１０を表示する。図９（ａ）の歩行路ガイド５１０は点線としているが、表示態様はこれに限らず、例えば、ブロックを模した図やロープを模した図を表示するようにしてもよい。
「水平ガイド」とは、歩行路ガイドと同様に、歩行動画を撮影する撮影者が精度のよい歩行解析を行える動画像を撮影できているかを撮影時に確認するための表示の１つである。水平ガイドは、撮影装置１１０の姿勢に関する情報である。撮影装置１１０の姿勢は携帯端末１００に設けられている姿勢センサ（例えば、ジャイロセンサ）を用いて重力方向に対する携帯端末１００の姿勢を検出し、検出結果に基づき現在の撮影方向を示す記号である姿勢表示マーカ「●」を水平ガイド５２０に表示する。図９に水平ガイド５２０の表示例を示す。水平ガイド５２０は十文字の中心に姿勢表示マーカ「●」が重なっていると、撮影装置１１０の姿勢が撮影者の接地面に対し水平であることを示し、十文字の中心から姿勢表示マーカ「●」がずれていると、撮影装置１１０の姿勢が撮影者の接地面に対し水平でないことを示している。図９（ａ）は撮影範囲に被験者がいないため、撮影画面には被験者が表示されていない。図９（ｂ）は撮影範囲に被験者がおり、歩行路ガイド５００の表示位置と被験者が重なって撮影画面に表示されるように撮影装置１１０を移動させる、または、被験者に移動を促す。このとき、被験者の顔の高さ、好ましくは目の高さと撮影装置１１０のレンズの高さが同程度であると精度のよい歩行解析を行える動画像を撮影することができる。図９（ｃ）は、撮影装置１１０のレンズの高さと被験者の顔の高さが同程度であり、撮影装置１１０の姿勢が撮影者の接地面に対し水平であるため、水平ガイド５２０は撮影装置１１０の姿勢が水平であることを示している。図９（ｄ）は、歩行路ガイド５００の表示位置に被験者はいるが、撮影装置１１０のレンズの高さが被験者の顔より高い位置にあるため、被験者を見下ろすような角度に撮影装置１１０が設けられている。そこで、図９（ｄ）の水平ガイド５２０は十文字の中心から姿勢表示マーカ「●」がずれて表示されている。水平ガイド５２０を確認することで、撮影者は撮影装置１１０の姿勢が傾いているか把握でき、また、水平ガイド５２０を確認しながら撮影装置１１０を正しい姿勢に調整することが可能となる。なお、水平ガイド５２０は図９に示した表示態様に限らず、数値によるもの、撮影画面上にグリッド線を表示するものなど、どのような表示態様でもよい。なお、図９では、歩行路ガイド５００、歩行路ガイド５１０および水平ガイド５２０を撮影画面上に表示したが、音声によるガイドでもよく、表示と音声を併用してもよい。
【0047】
工程（ステップＳ１０３）は、撮影装置１１０が撮影中か否かを判定する工程である。ここでの「撮影中」とは、例えば、撮影ボタンが押下されていることを示す。撮影中でないと判定した場合は本処理を終了する。撮影中であると判定した場合は、ステップＳ１０４へ移行する。
【0048】
工程（ステップＳ１０４）は、被写体である被験者が所定の撮影範囲に存在するか否かを判定する工程である。上述したように、本実施形態では上述したように機械学習モデルで被験者の骨格点を抽出して処理を行う。そこで、所定の撮影範囲は、機械学習モデルにより被験者の顔、好ましくは目を抽出するのに適した被験者と撮影装置１１０との距離（例えば８メートル以内か否か）を判定してもよいし、機械学習モデルにより被験者の顔、好ましくは目を抽出できた場合、所定範囲内であると判定してもよい。所定範囲内であると判定した場合はステップＳ１０５へ移行し、所定範囲内でないと判定した場合はステップＳ１０６へ移行する。
【0049】
工程（ステップＳ１０５）は、ステップＳ１０４で被験者が所定の撮影範囲内に存在すると判定されたため、被験者が特定できないように被験者の目付近にモザイク処理を施す。モザイク処理を施す目付近は、機械学習モデルで被験者の骨格点を抽出し、抽出した骨格点から目の位置を推定し決定する。図１０（ｂ）に被験者の目付近にモザイク処理（図１０（ｂ）の５５０が相当）をすることで、歩行解析に用いた動画像によって被験者個人を特定することが困難となるため、安心して歩行解析を行うこと（歩行解析のために動画像を送付すること）が可能となる。なお、図１０（ｂ）では被験者の目付近にサングラスを模した画像を重ねて表示することにより、被験者個人の特定を困難としたが、他の画像やいわゆるモザイク（ぼかし）を入れる処理でもよい。被験者個人の特定を困難とするには、顔全体にモザイク処理を施すことが好ましいが、歩行解析を行う際に顔の骨格点を用いるため、歩行解析に必要な骨格点の抽出を行えてかつ被験者個人の特定を困難とする範囲にモザイク処理をすることとする。
【0050】
工程（ステップＳ１０６）は、ステップＳ１０４で被験者が所定の撮影範囲内に存在しないと判定されたため、撮影範囲全体にモザイク処理を施すことにより被験者が特定できないように処理を行う。図１０（ａ）に撮影範囲全体にモザイク処理（図１０（ａ）の５６０が相当）を施した例を示す。ステップＳ１０６は、被験者が所定の範囲内に存在しないと判定されたときに移行される処理であり、被験者の顔、好ましくは目の位置を正確に特定できない可能性が高いため、撮影範囲全体にモザイク処理を施すことで被験者個人を特定することが困難となるようにする。なお、撮影範囲全体に所定画像、例えば、雨粒画像を重ね合わせるようにしてもよいし、いわゆるモザイク（ぼかし）を入れる処理を行うようにしてもよい。
【0051】
工程（ステップＳ１０７）は、撮影装置１１０による撮影が終了したか否かを判定する工程である。「撮影終了」とは、例えば、撮影ボタンの押下が解除されたか否かによって判定する。撮影終了と判定した場合は、本処理を終了する。撮影終了と判定されない場合は、ステップＳ１０４へ移行する。
【0052】
図９および図１０を用いて、歩行路ガイド工程および被験者マスク工程が行われる場合の画面イメージを説明する。
図９（ａ）は、撮影装置１１０が撮影準備状態であるときの撮影画面のイメージ図である。撮影位置に被験者が存在するか否かに関わらず、歩行路ガイド５００、歩行路ガイド５１０および水平ガイド５２０が表示される。撮影準備状態であるときに歩行路ガイド５００、歩行路ガイド５１０および水平ガイド５２０が表示されると、撮影者は被験者の位置や撮影装置１１０を調整しやすくなる。
図９（ｂ）は、撮影装置１１０が撮影準備状態であるときに被験者が撮影位置に存在する状態の撮影画面のイメージ図である。図９（ｂ）に示すように、撮影者は被験者の位置や撮影装置１１０の姿勢を表示されている歩行路ガイド５００、歩行路ガイド５１０および水平ガイド５２０に基づき調整を行うことが可能となる。
図９（ｃ）は、被験者の位置および撮影装置１１０の姿勢を調整し、撮影中の撮影画面イメージ図である。撮影中であることを５３０は撮影中であるときに表示される。このとき、歩行路ガイド５００を表示してもよいが、図９（ｃ）に示すように、歩行路ガイド５００は表示せず、歩行路ガイド５１０および水平ガイド５２０を表示するようにしてもよい。このように撮影中も歩行路ガイド５１０および水平ガイド５２０が表示されていることにより、撮影者は被験者の歩行の位置や撮影装置１１０の姿勢を調整しながら撮影可能となる。
図９（ｄ）は、図９（ｂ）の状態で、被験者の目の高さより高い位置に撮影装置１１０があることにより、水平ガイド５２０は撮影装置１１０の姿勢が水平でないことを示している。また、「カメラが傾いています」とアドバイス表示をしてもよい。このような表示がされた場合、撮影者は撮影装置１１０の姿勢が水平になるように調整するようにすればよい。
図９は歩行路ガイド工程が行われる際の画面イメージである。図１０に歩行路ガイド工程に加えて被験者マスク工程が行われる場合の画面イメージを示す。
図１０（ａ）は、撮影中であり、かつ、被験者が所定範囲内に存在しない場合の撮影画面のイメージ図である。図１０（ａ）に示すように、被験者が所定範囲内に存在しないため、撮影画面全体にマスク処理を施している。
図１０（ｂ）は、撮影中であり、かつ、被験者が所定範囲内に存在する場合の撮影画面イメージである。図１０（ｂ）に示すように、被験者が所定範囲内に存在するため、被験者の目にマスク処理を施している。
図９（ａ）は、撮影装置１１０が撮影準備状態であるときの撮影画面のイメージ図である。撮影位置に被験者が存在するか否かに関わらず、歩行路ガイド５００、歩行路ガイド５１０および水平ガイド５２０が表示される。撮影準備状態であるときに歩行路ガイド５００、歩行路ガイド５１０および水平ガイド５２０が表示されると、撮影者は被験者の位置や撮影装置１１０を調整しやすくなる。
図９（ｂ）は、撮影装置１１０が撮影準備状態であるときに被験者が撮影位置に存在する状態の撮影画面のイメージ図である。図９（ｂ）に示すように、撮影者は被験者の位置や撮影装置１１０の姿勢を表示されている歩行路ガイド５００、歩行路ガイド５１０および水平ガイド５２０に基づき調整を行うことが可能となる。
図９（ｃ）は、被験者の位置および撮影装置１１０の姿勢を調整し、撮影中の撮影画面イメージ図である。撮影中であることを５３０は撮影中であるときに表示される。このとき、歩行路ガイド５００を表示してもよいが、図９（ｃ）に示すように、歩行路ガイド５００は表示せず、歩行路ガイド５１０および水平ガイド５２０を表示するようにしてもよい。このように撮影中も歩行路ガイド５１０および水平ガイド５２０が表示されていることにより、撮影者は被験者の歩行の位置や撮影装置１１０の姿勢を調整しながら撮影可能となる。
図９（ｄ）は、図９（ｂ）の状態で、被験者の目の高さより高い位置に撮影装置１１０があることにより、水平ガイド５２０は撮影装置１１０の姿勢が水平でないことを示している。また、「カメラが傾いています」とアドバイス表示をしてもよい。このような表示がされた場合、撮影者は撮影装置１１０の姿勢が水平になるように調整するようにすればよい。
図９は歩行路ガイド工程が行われる際の画面イメージである。図１０に歩行路ガイド工程に加えて被験者マスク工程が行われる場合の画面イメージを示す。
図１０（ａ）は、撮影中であり、かつ、被験者が所定範囲内に存在しない場合の撮影画面のイメージ図である。図１０（ａ）に示すように、被験者が所定範囲内に存在しないため、撮影画面全体にマスク処理を施している。
図１０（ｂ）は、撮影中であり、かつ、被験者が所定範囲内に存在する場合の撮影画面イメージである。図１０（ｂ）に示すように、被験者が所定範囲内に存在するため、被験者の目にマスク処理を施している。
【0053】
図９および図１０に示したように、本実施形態では撮影状態のときにマスク処理を施すようにしている。これは撮影準備状態ではマスク処理を行っていない方が撮影者が被験者の位置および撮影装置１１０の姿勢を調整しやすいためである。撮影画像にどのようなマスク処理が施されるのか撮影前に確認したい場合もあるため、撮影準備状態でもマスク処理を施してもよい。また、図９（ｃ）に示すように、撮影状態では歩行路ガイド５００は表示しないようにしたが、表示してもよい。撮影者が被験者の位置および撮影装置１１０の姿勢を調整しやすい表示態様となるように適宜決定すればよい。
【0054】
図８のフローチャートは、撮影装置１１０で撮影が行われるときに、撮影した動画像に逐次マスク処理を行う場合について説明したが、既存の動画像に対しマスク処理を行ってもよい。この場合、既存の動画像を用いて歩行解析を行う際に、ステップＳ１０４～ステップＳ１０７の処理を実行し、マスク処理を行った動画像を記憶するようにすればよい。このようにすることで、歩行解析用に撮影した動画像以外のデータを用いて歩行解析する場合でも記憶・保存するデータでは被験者を特定することが困難であるため、安心して歩行解析を行うこと（歩行解析のために動画像を送付すること）が可能となる。
【0055】
本実施形態では、被験者の情報は撮影された動画像のみ（動画像から取得・推定可能な情報のみ）であるが、撮影された動画像に加え、被験者情報、特に、歩行に関連する項目を入力できるようにしてもよい。歩行に関連する項目は、歩行解析結果を用いて解析する事項によって決定してもよい。例えば、乳幼児の歩行発達レベルを解析する場合は、日齢（月齢、年齢、または、生年月日）、性別、身長および足の大きさなどの人体寸法、体重、つかまり立ちした日（日齢）、靴の有無および種類、おむつの有無および種類などを入力するようにすればよい。また、高齢者の健康レベルを解析する場合には、年齢（生年月日）、性別、身長などの人体寸法、体重、足の既往歴、生活スタイル、血圧などを入力するようにすればよい。
【0056】
上述した歩行動画判定工程に、所定の撮影条件として、撮影時の光量を判定する光量判定工程を含めてもよい。これは、撮影時の光量によって撮影された動画像を歩行解析する際の精度に影響があるためである。判定条件は、所定範囲の照度であれば総合得点に１点加点し、所定範囲の照度でなければその旨を判定結果として登録し、その後の工程に進むようにすればよい。光量は多すぎても（明るすぎても）少なすぎても（暗すぎても）歩行解析の際の精度に影響があるため、上限値および下限値を設けることが好ましい。また、撮影場所が外と室内では光の種類が異なるため、所定範囲を複数設定し、撮影場所に応じて判定に用いる所定範囲を決定するようにしてもよい。所定範囲は光の量を表す「ルーメン」または照らされている面の明るさを表す「ルクス」で設定すればよい。また、光量は撮影装置１１０が備えている露出計や露出計アプリケーションを用いて計測してもよいし、撮影装置１１０とは別に設けた露出計を用いて計測した値を用いて判定すればよい。
【0057】
上述した歩行動画判定工程に、所定の撮影条件として、撮影時の撮影者の揺れ、手振れを判定する撮影装置揺れ判定工程を含めてもよい。これは、撮影時に撮影者が揺れた状態で撮影装置１１０を用いて撮影すると、撮影された動画像にぶれが生じ、ぶれの生じた動画像を歩行解析する際の精度に影響があるためである。判定条件は、撮影装置１１０に設けられているジャイロセンサ（角速度センサ）によって計測された値が所定範囲のもの（所定値以下のもの）であれば総合得点に１点加点し、所定範囲でなければその旨を判定結果として登録し、その後の工程に進むようにすればよい。
【0058】
上記実施形態は、以下の技術思想を包含する。
＜１＞
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定する動画像判定方法であって、
前記動画像を取得する動画取得工程と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定工程と、を含むことを特徴とする動画像判定方法。
さらに、前記動画像は複数フレームで構成され、前記歩行動画判定工程は、前記動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行うことを特徴とする上記の動画像判定方法。
＜２＞
前記歩行動画判定工程は、骨格点抽出工程と、該骨格点抽出工程後に実行される骨格点判定工程を含み、
前記骨格点抽出工程は、機械学習により得られた骨格点学習モデルを用いて前記動画像から前記被験者の骨格点を抽出し、
前記骨格点判定工程は、
前記骨格点抽出工程によって抽出された前記骨格点を用いて前記歩行解析条件を満たすかを判定することを特徴とする＜１＞に記載の動画像判定方法。
＜３＞
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、をさらに含み、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含むことを特徴とする＜１＞または＜２＞に記載の動画像判定方法。
＜４＞
前記被験者の歩数を判定する歩数判定工程をさらに含み、
前記所定の歩行条件は、前記判定した歩数が所定歩数以上であることを含むことを特徴とする＜１＞から＜３＞何れか１に記載の動画像判定方法。
＜５＞
前記被験者の重心を判定する重心判定工程をさらに含み、
前記所定の歩行条件は、前記判定した重心が左右方向に所定範囲内であることを含むことを特徴とする＜１＞から＜４＞何れか１に記載の動画像判定方法。
＜６＞
前記被験者が走っていることを示唆する歩行指標を判定する歩行判定工程をさらに含み、
前記所定の歩行条件は、走っていないと判定されたフレームがあることを含むことを特徴とする＜１＞から＜５＞何れか１に記載の動画像判定方法。
＜７＞
前記被験者の顔を判定する顔判定工程をさらに含み、
前記所定の歩行条件は、前記判定した前記顔の向きが左右方向に所定範囲内であることを含むことを特徴とする＜１＞から＜６＞何れか１に記載の動画像判定方法。
＜８＞
前記被験者の両手を判定する両手判定工程をさらに含み、
前記所定の歩行条件は、前記判定した前記両手が所定位置以下の高さであることを含むことを特徴とする＜１＞から＜７＞何れか１に記載の動画像判定方法。
＜９＞
前記動画像に複数の被験者が含まれる場合は、被験者単位に前記骨格点抽出を行うことを特徴とする＜１＞から＜８＞何れか１に記載の動画像判定方法。
＜１０＞
前記骨格点抽出工程は、前記骨格点学習モデルを用いて前記動画像から前記被験者の骨格点を１６箇所以上抽出することを特徴とする＜２＞から＜９＞何れか１に記載の動画像判定方法。
＜１１＞
前記歩行動画判定工程は、前記被験者の骨格点を抽出できなかったフレームに対しては当該工程を終了することを特徴とする＜２＞から＜１０＞何れか１に記載の動画像判定方法。
＜１２＞
前記歩行動画判定工程は、前記骨格点抽出工程によって１被験者に対し所定数の骨格点を抽出できなかった場合および／または前記抽出した骨格点に基づき前記被験者の重心が算出されない場合は、当該工程を終了することを特徴とする＜２＞から＜１１＞何れか１に記載の動画像判定方法。
＜１３＞
前記所定の歩行条件は、前記骨格点抽出工程によって１被験者に対し所定数の骨格点の抽出および前記被験者の重心が算出されることを含む＜２＞から＜１２＞何れか１に記載の動画像判定方法。
＜１４＞
前記被験者の全身が撮影されているかを判定する全身判定工程をさらに含み、
前記全身判定工程は、前記骨格点抽出工程で抽出された前記被験者の骨格点同士が予め決められた位置関係にあるか判定し、
前記所定の撮影条件には、前記被験者の骨格点同士が予め決められた位置関係にあることを含む＜２＞から＜１３＞何れか１に記載の動画像判定方法。
＜１５＞
前記所定の撮影条件には、前記骨格点抽出工程で抽出された前記被験者の骨格点同士が予め決められた位置関係にあることであり、
前記歩行動画判定工程は、前記骨格点抽出工程で抽出された前記被験者の骨格点同士が予め決められた位置関係にない場合は、当該工程を終了することを含む＜１４＞に記載の動画判定方法。
＜１６＞
前記所定の撮影条件には、前記距離推定工程によって前記動画像の撮影位置と前記被験者の位置との距離が１～７ｍと推定された動画像があることを含むことを特徴とする＜３＞から＜１５＞何れか１に記載の動画像判定方法。
＜１７＞
前記歩行動画判定工程は、前記距離推定工程によって、前記動画像の撮影位置と前記被験者の位置との距離が所定範囲内ではないと推定された動画像に対応付けて当該推定結果を記憶することを特徴とする＜３＞から＜１６＞何れか１に記載の動画像判定方法。
＜１８＞
前記歩数判定工程は、前記骨格点抽出工程で抽出した左右足首の骨格点および重心から推定する左右踵が交互に各２回接地した動画像がある場合、前記所定歩数以上であると判定することを含む＜４＞から＜１７＞何れか１に記載の動画像判定方法。
＜１９＞
前記歩行動画判定工程は、前記歩数判定工程によって、前記判定した歩数が前記所定歩数以上でないと判定された動画像に対応付けて当該判定結果を記憶することを特徴とする＜４＞から＜１８＞何れか１に記載の動画像判定方法。
＜２０＞
前記歩行動画判定工程は、前記距離推定工程によって、前記動画像の撮影位置と前記被験者の位置との距離が所定範囲内であると推定されかつ前記歩数判定工程によって、前記判定した歩数が前記所定歩数以上であると判定されると推定および判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜４＞から＜１９＞何れか１に記載の動画像判定方法。
＜２１＞
前記所定の歩行条件には、前記重心判定工程によって、前記骨格点抽出工程で抽出した被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内であると判定されることを含む＜５＞から＜２０＞何れか１に記載の動画像判定方法。
＜２２＞
前記歩行動画判定工程は、前記重心判定工程によって、前記被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内であると判定されない場合は動画像に対応付けて当該判定結果を記憶することを特徴とする＜５＞から＜２１＞何れか１に記載の動画像判定方法。
＜２３＞
前記歩行動画判定工程は、前記重心判定工程によって、前記被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内であると判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜５＞から＜２２＞何れか１に記載の動画像判定方法。
＜２４＞
前記歩行判定工程が判定する前記歩行指標は、歩行速度、右足左足の接地時間または足位置の変化の少なくとも何れかであり、
前記歩行速度の場合、前記骨格点抽出工程で抽出した骨格点を用いて算出した前記被験者の重心に基づき所定距離移動した際に要した時間を計測し、算出した速度が所定範囲以上の場合は、走っていると判定し、
前記右足左足の接地時間の場合、前記歩数判定工程で抽出した左右踵が接地する位置に基づき右足踵と左足踵とのどちらも接地していない時間が有れば走っていると判定し、
前記足位置の変化の場合、前記骨格点抽出工程で抽出した左右足首の骨格点の上下の移動範囲が所定範囲以上の場合は、走っていると判定することを特徴とする＜６＞から＜２３＞何れか１に記載の動画像判定方法。
＜２５＞
前記歩行動画判定工程は、前記歩行判定工程によって、走っている旨の判定がされた動画像データに対応付けて当該判定結果を記憶することを特徴とする＜６＞から＜２４＞何れか１に記載の動画像判定方法。
＜２６＞
前記歩行動画判定工程は、前記歩行判定工程によって、走っている旨の判定がされなかった動画像データに対応付けて記憶される得点に加点することを特徴とする＜６＞から＜２５＞何れか１に記載の動画像判定方法。
＜２７＞
前記所定の歩行条件には、前記顔判定工程によって、前記顔の向きの上下および左右方向の移動範囲が±３０度以内であると判定されることを含む＜７＞から＜２６＞何れか１に記載の動画像判定方法。
＜２８＞
前記歩行動画判定工程は、前記顔判定工程によって、前記顔の向きの上下または左右方向の少なくとも一方の向きの移動範囲が±３０度を超えている時間またはフレーム数、歩行全体の時間またはフレーム数に対して前記閾値割合以上となった場合に、前記所定の歩行条件を満たさないと判定し、前記閾値割合は１０％以上３０％以下であることを特徴とする＜２７＞に記載の動画像判定方法。
＜２９＞
前記歩行動画判定工程は、前記顔判定工程によって、前記顔の向きの上下および左右方向の移動範囲が±３０度以内であると判定されなかった動画像に対応付けて当該判定結果を記憶することを特徴とする＜７＞から＜２８＞何れか１に記載の動画像判定方法。
＜３０＞
前記歩行動画判定工程は、前記顔判定工程によって、前記顔の向きの上下および左右方向の移動範囲が±３０度以内であると判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜７＞から＜２９＞何れか１に記載の動画像判定方法。
＜３１＞
前記所定の歩行条件には、前記両手判定工程によって、前記骨格点抽出工程で抽出した被験者の両手首の骨格点の位置と両肘の骨格点の位置を比較し、被験者の両手の位置が両肘の位置より低いと判定されることを含む＜８＞から＜３０＞何れか１に記載の動画像判定方法。
＜３２＞
前記歩行動画判定工程は、前記両手判定工程によって、前記被験者の両手の位置が両肘の位置より低いと判定されなかった動画像に対応付けて当該判定結果を記憶することを特徴とする＜８＞から＜３１＞何れか１に記載の動画像判定方法。
＜３３＞
前記歩行動画判定工程は、前記両手判定工程によって、前記被験者の両手の位置が両肘の位置より低いと判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜８＞から＜３２＞何れか１に記載の動画像判定方法。
＜３４＞
前記撮影時の光量を判定する光量判定工程をさらに含み、
前記所定の撮影条件は、前記光量が所定範囲内であることを含むことを特徴とする＜１＞から＜３３＞何れか１に記載の動画像判定方法。
＜３５＞
前記歩行動画判定工程は、前記光量判定工程によって、前記光量が前記所定範囲内であると判定されなかった動画像に対応付けて当該判定結果を記憶することを特徴とする＜３４＞に記載の動画像判定方法。
＜３６＞
前記歩行動画判定工程は、前記光量判定工程によって、前記光量が前記所定範囲内であると判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜３４＞または＜３５＞に記載の動画像判定方法。
＜３７＞
前記撮影時の光量を判定する撮影装置揺れ判定工程をさらに含み、
前記所定の撮影条件は、前記撮影装置の揺れが所定範囲内であることを含むことを特徴とする＜１＞から＜３６＞何れか１に記載の動画像判定方法。
＜３８＞
前記歩行動画判定工程は、前記撮影装置揺れ判定工程によって、前記撮影装置の揺れが前記所定範囲内であると判定されなかった動画像に対応付けて当該判定結果を記憶することを特徴とする＜３７＞に記載の動画像判定方法。
＜３９＞
前記歩行動画判定工程は、前記撮影装置揺れ判定工程によって、前記撮影装置の揺れが前記所定範囲内であると判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜３７＞または＜３８＞に記載の動画像判定方法。
＜４０＞
前記歩行動画判定工程は、前記重心判定工程、前記歩行判定工程、前記顔判定工程、前記両手判定工程、前記光量判定工程および前記撮影装置揺れ判定工程の判定結果によって加点された得点によって、前記動画像が歩行解析に適した動画像であるかを評価する、または、前記動画像を用いた前記歩行解析結果の精度を評価することを特徴とする＜２３＞、＜２６＞、＜３０＞、＜３３＞、＜３６＞および＜３９＞いずれか１に記載の動画像判定方法。
＜４１＞
前記被験者の人体の一部または全部の部位に関する寸法データを取得する人体寸法取得工程と、
前記動画像の前記被験者の画像における、前記部位の長さおよび前記被験者までの奥行き距離と、前記人体寸法データと、に基づき、前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、をさらに含むこと特徴とする＜３＞から＜４０＞何れか１に記載の動画像判定方法。
＜４２＞
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定する動画像判定プログラムであって、
前記動画像を取得する動画取得処理と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定処理と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定処理は、前記動画取得処理によって全フレームを取得した後、または、取得したフレーム毎に判定を行うことを特徴とする動画像判定プログラム。
＜４３＞
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定する動画像判定装置であって、
前記動画像を取得する動画取得手段と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定手段と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定手段は、前記動画取得手段によって全フレームを取得した後、または、取得したフレーム毎に判定を行うことを特徴とする動画像判定装置。
＜４４＞
前記動画像判定装置は、携帯端末であって、撮影手段、姿勢センサおよび表示手段をさらに備え、
前記歩行動画判定手段は、前記撮影手段の撮影時の姿勢を前記姿勢センサの検出結果に基づき左右前後方向に±２５度以内であるか判定し、前記判定結果が前記左右前後方向に±２５度以内であれば前記表示手段に正常である旨の情報を前記表示手段に表示制御し、または、前記判定結果に伴う情報を前記表示手段に表示制御しない一方、前記判定結果が前記左右前後方向に±２５度以内でなければその旨の情報を前記表示手段に表示制御することを特徴とする＜４３＞に記載の動画像判定装置。
＜４５＞
前記動画像判定装置は、表示手段をさらに備え、
前記歩行動画判定手段は、前記動画取得手段によって取得したフレーム毎に判定を行う場合、各判定結果に応じて撮影者に撮影に関するアドバイスを前記表示手段に表示制御することを特徴とする＜４３＞または＜４４＞に記載の動画像判定装置。
＜４６＞
前記動画像判定装置は、＜４２＞に記載の動画像判定プログラムを記憶していることを特徴とする＜４３＞から＜４５＞何れか１に記載の動画像判定装置。
＜４７＞
前記被験者が歩行すべき範囲および前記動画像を撮影する撮影装置の姿勢を撮影者にガイドする歩行路ガイド工程をさらに含むことを特徴とする＜１＞から＜４１＞何れか１に記載の動画像判定方法。
＜４８＞
前記被験者が特定できないように前記動画像にマスク処理を行う被験者マスク工程をさらに含むことを特徴とする＜１＞から＜４１＞、＜４７＞何れか１に記載の動画像判定方法。
＜１＞
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定する動画像判定方法であって、
前記動画像を取得する動画取得工程と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定工程と、を含むことを特徴とする動画像判定方法。
さらに、前記動画像は複数フレームで構成され、前記歩行動画判定工程は、前記動画取得工程によって全フレームを取得した後、または、取得したフレーム毎に判定を行うことを特徴とする上記の動画像判定方法。
＜２＞
前記歩行動画判定工程は、骨格点抽出工程と、該骨格点抽出工程後に実行される骨格点判定工程を含み、
前記骨格点抽出工程は、機械学習により得られた骨格点学習モデルを用いて前記動画像から前記被験者の骨格点を抽出し、
前記骨格点判定工程は、
前記骨格点抽出工程によって抽出された前記骨格点を用いて前記歩行解析条件を満たすかを判定することを特徴とする＜１＞に記載の動画像判定方法。
＜３＞
前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、をさらに含み、
前記所定の撮影条件には、前記推定した前記距離が所定範囲内であるフレームがあることを含むことを特徴とする＜１＞または＜２＞に記載の動画像判定方法。
＜４＞
前記被験者の歩数を判定する歩数判定工程をさらに含み、
前記所定の歩行条件は、前記判定した歩数が所定歩数以上であることを含むことを特徴とする＜１＞から＜３＞何れか１に記載の動画像判定方法。
＜５＞
前記被験者の重心を判定する重心判定工程をさらに含み、
前記所定の歩行条件は、前記判定した重心が左右方向に所定範囲内であることを含むことを特徴とする＜１＞から＜４＞何れか１に記載の動画像判定方法。
＜６＞
前記被験者が走っていることを示唆する歩行指標を判定する歩行判定工程をさらに含み、
前記所定の歩行条件は、走っていないと判定されたフレームがあることを含むことを特徴とする＜１＞から＜５＞何れか１に記載の動画像判定方法。
＜７＞
前記被験者の顔を判定する顔判定工程をさらに含み、
前記所定の歩行条件は、前記判定した前記顔の向きが左右方向に所定範囲内であることを含むことを特徴とする＜１＞から＜６＞何れか１に記載の動画像判定方法。
＜８＞
前記被験者の両手を判定する両手判定工程をさらに含み、
前記所定の歩行条件は、前記判定した前記両手が所定位置以下の高さであることを含むことを特徴とする＜１＞から＜７＞何れか１に記載の動画像判定方法。
＜９＞
前記動画像に複数の被験者が含まれる場合は、被験者単位に前記骨格点抽出を行うことを特徴とする＜１＞から＜８＞何れか１に記載の動画像判定方法。
＜１０＞
前記骨格点抽出工程は、前記骨格点学習モデルを用いて前記動画像から前記被験者の骨格点を１６箇所以上抽出することを特徴とする＜２＞から＜９＞何れか１に記載の動画像判定方法。
＜１１＞
前記歩行動画判定工程は、前記被験者の骨格点を抽出できなかったフレームに対しては当該工程を終了することを特徴とする＜２＞から＜１０＞何れか１に記載の動画像判定方法。
＜１２＞
前記歩行動画判定工程は、前記骨格点抽出工程によって１被験者に対し所定数の骨格点を抽出できなかった場合および／または前記抽出した骨格点に基づき前記被験者の重心が算出されない場合は、当該工程を終了することを特徴とする＜２＞から＜１１＞何れか１に記載の動画像判定方法。
＜１３＞
前記所定の歩行条件は、前記骨格点抽出工程によって１被験者に対し所定数の骨格点の抽出および前記被験者の重心が算出されることを含む＜２＞から＜１２＞何れか１に記載の動画像判定方法。
＜１４＞
前記被験者の全身が撮影されているかを判定する全身判定工程をさらに含み、
前記全身判定工程は、前記骨格点抽出工程で抽出された前記被験者の骨格点同士が予め決められた位置関係にあるか判定し、
前記所定の撮影条件には、前記被験者の骨格点同士が予め決められた位置関係にあることを含む＜２＞から＜１３＞何れか１に記載の動画像判定方法。
＜１５＞
前記所定の撮影条件には、前記骨格点抽出工程で抽出された前記被験者の骨格点同士が予め決められた位置関係にあることであり、
前記歩行動画判定工程は、前記骨格点抽出工程で抽出された前記被験者の骨格点同士が予め決められた位置関係にない場合は、当該工程を終了することを含む＜１４＞に記載の動画判定方法。
＜１６＞
前記所定の撮影条件には、前記距離推定工程によって前記動画像の撮影位置と前記被験者の位置との距離が１～７ｍと推定された動画像があることを含むことを特徴とする＜３＞から＜１５＞何れか１に記載の動画像判定方法。
＜１７＞
前記歩行動画判定工程は、前記距離推定工程によって、前記動画像の撮影位置と前記被験者の位置との距離が所定範囲内ではないと推定された動画像に対応付けて当該推定結果を記憶することを特徴とする＜３＞から＜１６＞何れか１に記載の動画像判定方法。
＜１８＞
前記歩数判定工程は、前記骨格点抽出工程で抽出した左右足首の骨格点および重心から推定する左右踵が交互に各２回接地した動画像がある場合、前記所定歩数以上であると判定することを含む＜４＞から＜１７＞何れか１に記載の動画像判定方法。
＜１９＞
前記歩行動画判定工程は、前記歩数判定工程によって、前記判定した歩数が前記所定歩数以上でないと判定された動画像に対応付けて当該判定結果を記憶することを特徴とする＜４＞から＜１８＞何れか１に記載の動画像判定方法。
＜２０＞
前記歩行動画判定工程は、前記距離推定工程によって、前記動画像の撮影位置と前記被験者の位置との距離が所定範囲内であると推定されかつ前記歩数判定工程によって、前記判定した歩数が前記所定歩数以上であると判定されると推定および判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜４＞から＜１９＞何れか１に記載の動画像判定方法。
＜２１＞
前記所定の歩行条件には、前記重心判定工程によって、前記骨格点抽出工程で抽出した被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内であると判定されることを含む＜５＞から＜２０＞何れか１に記載の動画像判定方法。
＜２２＞
前記歩行動画判定工程は、前記重心判定工程によって、前記被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内であると判定されない場合は動画像に対応付けて当該判定結果を記憶することを特徴とする＜５＞から＜２１＞何れか１に記載の動画像判定方法。
＜２３＞
前記歩行動画判定工程は、前記重心判定工程によって、前記被験者の重心が撮影装置に対し左右方向の移動範囲が１メートル以内であると判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜５＞から＜２２＞何れか１に記載の動画像判定方法。
＜２４＞
前記歩行判定工程が判定する前記歩行指標は、歩行速度、右足左足の接地時間または足位置の変化の少なくとも何れかであり、
前記歩行速度の場合、前記骨格点抽出工程で抽出した骨格点を用いて算出した前記被験者の重心に基づき所定距離移動した際に要した時間を計測し、算出した速度が所定範囲以上の場合は、走っていると判定し、
前記右足左足の接地時間の場合、前記歩数判定工程で抽出した左右踵が接地する位置に基づき右足踵と左足踵とのどちらも接地していない時間が有れば走っていると判定し、
前記足位置の変化の場合、前記骨格点抽出工程で抽出した左右足首の骨格点の上下の移動範囲が所定範囲以上の場合は、走っていると判定することを特徴とする＜６＞から＜２３＞何れか１に記載の動画像判定方法。
＜２５＞
前記歩行動画判定工程は、前記歩行判定工程によって、走っている旨の判定がされた動画像データに対応付けて当該判定結果を記憶することを特徴とする＜６＞から＜２４＞何れか１に記載の動画像判定方法。
＜２６＞
前記歩行動画判定工程は、前記歩行判定工程によって、走っている旨の判定がされなかった動画像データに対応付けて記憶される得点に加点することを特徴とする＜６＞から＜２５＞何れか１に記載の動画像判定方法。
＜２７＞
前記所定の歩行条件には、前記顔判定工程によって、前記顔の向きの上下および左右方向の移動範囲が±３０度以内であると判定されることを含む＜７＞から＜２６＞何れか１に記載の動画像判定方法。
＜２８＞
前記歩行動画判定工程は、前記顔判定工程によって、前記顔の向きの上下または左右方向の少なくとも一方の向きの移動範囲が±３０度を超えている時間またはフレーム数、歩行全体の時間またはフレーム数に対して前記閾値割合以上となった場合に、前記所定の歩行条件を満たさないと判定し、前記閾値割合は１０％以上３０％以下であることを特徴とする＜２７＞に記載の動画像判定方法。
＜２９＞
前記歩行動画判定工程は、前記顔判定工程によって、前記顔の向きの上下および左右方向の移動範囲が±３０度以内であると判定されなかった動画像に対応付けて当該判定結果を記憶することを特徴とする＜７＞から＜２８＞何れか１に記載の動画像判定方法。
＜３０＞
前記歩行動画判定工程は、前記顔判定工程によって、前記顔の向きの上下および左右方向の移動範囲が±３０度以内であると判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜７＞から＜２９＞何れか１に記載の動画像判定方法。
＜３１＞
前記所定の歩行条件には、前記両手判定工程によって、前記骨格点抽出工程で抽出した被験者の両手首の骨格点の位置と両肘の骨格点の位置を比較し、被験者の両手の位置が両肘の位置より低いと判定されることを含む＜８＞から＜３０＞何れか１に記載の動画像判定方法。
＜３２＞
前記歩行動画判定工程は、前記両手判定工程によって、前記被験者の両手の位置が両肘の位置より低いと判定されなかった動画像に対応付けて当該判定結果を記憶することを特徴とする＜８＞から＜３１＞何れか１に記載の動画像判定方法。
＜３３＞
前記歩行動画判定工程は、前記両手判定工程によって、前記被験者の両手の位置が両肘の位置より低いと判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜８＞から＜３２＞何れか１に記載の動画像判定方法。
＜３４＞
前記撮影時の光量を判定する光量判定工程をさらに含み、
前記所定の撮影条件は、前記光量が所定範囲内であることを含むことを特徴とする＜１＞から＜３３＞何れか１に記載の動画像判定方法。
＜３５＞
前記歩行動画判定工程は、前記光量判定工程によって、前記光量が前記所定範囲内であると判定されなかった動画像に対応付けて当該判定結果を記憶することを特徴とする＜３４＞に記載の動画像判定方法。
＜３６＞
前記歩行動画判定工程は、前記光量判定工程によって、前記光量が前記所定範囲内であると判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜３４＞または＜３５＞に記載の動画像判定方法。
＜３７＞
前記撮影時の光量を判定する撮影装置揺れ判定工程をさらに含み、
前記所定の撮影条件は、前記撮影装置の揺れが所定範囲内であることを含むことを特徴とする＜１＞から＜３６＞何れか１に記載の動画像判定方法。
＜３８＞
前記歩行動画判定工程は、前記撮影装置揺れ判定工程によって、前記撮影装置の揺れが前記所定範囲内であると判定されなかった動画像に対応付けて当該判定結果を記憶することを特徴とする＜３７＞に記載の動画像判定方法。
＜３９＞
前記歩行動画判定工程は、前記撮影装置揺れ判定工程によって、前記撮影装置の揺れが前記所定範囲内であると判定された動画像に対応付けて記憶される得点に加点することを特徴とする＜３７＞または＜３８＞に記載の動画像判定方法。
＜４０＞
前記歩行動画判定工程は、前記重心判定工程、前記歩行判定工程、前記顔判定工程、前記両手判定工程、前記光量判定工程および前記撮影装置揺れ判定工程の判定結果によって加点された得点によって、前記動画像が歩行解析に適した動画像であるかを評価する、または、前記動画像を用いた前記歩行解析結果の精度を評価することを特徴とする＜２３＞、＜２６＞、＜３０＞、＜３３＞、＜３６＞および＜３９＞いずれか１に記載の動画像判定方法。
＜４１＞
前記被験者の人体の一部または全部の部位に関する寸法データを取得する人体寸法取得工程と、
前記動画像の前記被験者の画像における、前記部位の長さおよび前記被験者までの奥行き距離と、前記人体寸法データと、に基づき、前記動画像の撮影位置と前記被験者の位置との距離を推定する距離推定工程と、をさらに含むこと特徴とする＜３＞から＜４０＞何れか１に記載の動画像判定方法。
＜４２＞
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定する動画像判定プログラムであって、
前記動画像を取得する動画取得処理と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定処理と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定処理は、前記動画取得処理によって全フレームを取得した後、または、取得したフレーム毎に判定を行うことを特徴とする動画像判定プログラム。
＜４３＞
歩行する被験者が撮影された動画像が、所定の歩行条件または所定の撮影条件の少なくとも一つから構成される、歩行解析が可能であることを判定するための歩行解析条件を満たすかを判定する動画像判定装置であって、
前記動画像を取得する動画取得手段と、
取得した前記動画像が前記歩行解析条件を満たすかを判定する歩行動画判定手段と、を含み、
前記動画像は複数フレームで構成され、
前記歩行動画判定手段は、前記動画取得手段によって全フレームを取得した後、または、取得したフレーム毎に判定を行うことを特徴とする動画像判定装置。
＜４４＞
前記動画像判定装置は、携帯端末であって、撮影手段、姿勢センサおよび表示手段をさらに備え、
前記歩行動画判定手段は、前記撮影手段の撮影時の姿勢を前記姿勢センサの検出結果に基づき左右前後方向に±２５度以内であるか判定し、前記判定結果が前記左右前後方向に±２５度以内であれば前記表示手段に正常である旨の情報を前記表示手段に表示制御し、または、前記判定結果に伴う情報を前記表示手段に表示制御しない一方、前記判定結果が前記左右前後方向に±２５度以内でなければその旨の情報を前記表示手段に表示制御することを特徴とする＜４３＞に記載の動画像判定装置。
＜４５＞
前記動画像判定装置は、表示手段をさらに備え、
前記歩行動画判定手段は、前記動画取得手段によって取得したフレーム毎に判定を行う場合、各判定結果に応じて撮影者に撮影に関するアドバイスを前記表示手段に表示制御することを特徴とする＜４３＞または＜４４＞に記載の動画像判定装置。
＜４６＞
前記動画像判定装置は、＜４２＞に記載の動画像判定プログラムを記憶していることを特徴とする＜４３＞から＜４５＞何れか１に記載の動画像判定装置。
＜４７＞
前記被験者が歩行すべき範囲および前記動画像を撮影する撮影装置の姿勢を撮影者にガイドする歩行路ガイド工程をさらに含むことを特徴とする＜１＞から＜４１＞何れか１に記載の動画像判定方法。
＜４８＞
前記被験者が特定できないように前記動画像にマスク処理を行う被験者マスク工程をさらに含むことを特徴とする＜１＞から＜４１＞、＜４７＞何れか１に記載の動画像判定方法。
【符号の説明】
【0059】
１００ 情報処理端末（携帯端末）
１１０ 撮影装置
１２０ 判定部
１３０ 記憶部
１４０ 姿勢センサ
５００ 歩行路ガイド
５１０ 歩行路ガイド
５２０ 水平ガイド
５３０ 撮影中の表示
５５０ 目付近のモザイク態様
５６０ 全体のモザイク態様
１１０ 撮影装置
１２０ 判定部
１３０ 記憶部
１４０ 姿勢センサ
５００ 歩行路ガイド
５１０ 歩行路ガイド
５２０ 水平ガイド
５３０ 撮影中の表示
５５０ 目付近のモザイク態様
５６０ 全体のモザイク態様
【図1】
【図2-1】
【図2-2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】