知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B1)
(11)【特許番号】
(24)【登録日】2024-05-23
(45)【発行日】2024-05-31
(54)【発明の名称】顔面運動評価システム、及び、リハビリテーション支援システム
(51)【国際特許分類】
A61B 5/11 20060101AFI20240524BHJP
A61B 5/107 20060101ALI20240524BHJP
【ＦＩ】
A61B5/11 120
A61B5/107 110
【請求項の数】
15
(21)【出願番号】P 2023166282
(22)【出願日】2023-09-27
【審査請求日】2023-09-27
【早期審査対象出願】
(73)【特許権者】
【識別番号】523370211
【氏名又は名称】長谷部 孝毅
(73)【特許権者】
【識別番号】523370222
【氏名又は名称】児嶋 剛
(74)【代理人】
【識別番号】100145403
【弁理士】
【氏名又は名称】山尾 憲人
(74)【代理人】
【識別番号】100135703
【弁理士】
【氏名又は名称】岡部 英隆
(74)【代理人】
【識別番号】100189544
【弁理士】
【氏名又は名称】柏原 啓伸
(72)【発明者】
【氏名】長谷部 孝毅
(72)【発明者】
【氏名】児嶋 剛
【審査官】▲高▼ 芳徳
(56)【参考文献】
【文献】特開２０２０－０８１０８８（ＪＰ，Ａ）
【文献】特開２００８－２０４２００（ＪＰ，Ａ）
【文献】特開２０２１－０５１４００（ＪＰ，Ａ）
【文献】韓国公開特許第１０－２０１５－０１０６１５１（ＫＲ，Ａ）
【文献】児嶋 剛 他，3次元顔認証システムによるリアルタイム顔面神経麻痺評価，Facial Nerve Research Japan，2022年05月25日，Vol.41，p.10-12
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ａ６１Ｂ ５／０６ － ５／２２
Ａ６１Ｈ １／００ － １／０２
Ａ６３Ｂ ７１／０６
(57)【特許請求の範囲】
【請求項1】
顔面運動評価システムであって、インタフェース装置と、処理回路とを含み、
前記処理回路は、前記インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させており、
更に、前記処理回路は、
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の特定の部位における前記複数の変動値の全てについての平均左右比率を算出するステップ（２）と
を実行するものである、
顔面運動評価システム。
【請求項2】
前記顔面の特定の部位が、眉であり、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値が、
眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大になった時の、合計距離と、
眉の近傍の所定の複数点についての最大移動速度と
を含む、
請求項１に記載の顔面運動評価システム。
【請求項3】
前記顔面の特定の部位が、頬であり、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値が、
頬の近傍の所定の複数点の、合計の移動距離の最大値と、
頬の近傍の所定の複数点の、平均移動速度の最大値と、
正中線上の眉間の点及び鼻頭の点と、頬の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異と
を含む、
請求項１に記載の顔面運動評価システム。
【請求項4】
前記顔面の特定の部位が、口角であり、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値が、
口角の近傍の所定の複数点の、合計の移動距離の最大値と、
口角の近傍の所定の複数点の、平均移動速度の最大値と、
正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異と、
正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異と
を含む、
請求項１に記載の顔面運動評価システム。
【請求項5】
前記顔面の特定の部位が、鼻翼であり、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値が、
鼻翼の近傍の所定の複数点の、合計の移動距離の最大値と、
鼻翼の近傍の所定の複数点の、平均移動速度の最大値と
を含む、
請求項１に記載の顔面運動評価システム。
【請求項6】
顔面運動評価システムであって、インタフェース装置と、処理回路とを含み、
前記処理回路は、前記インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させており、
更に、前記処理回路は、
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）
を実行するものであり、
前記顔面の特定の部位は、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、及び、下顎を含み、
前記顔面の特定の部位に関する一つ以上の点を用いて測定される前記変動値は、
・顔面の特定の部位に関する所定の複数点の平均移動速度
を含む、顔面運動評価システム。
【請求項7】
リハビリテーション支援システムであって、インタフェース装置と、処理回路とを含み、
前記処理回路は、前記インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させており、
更に、前記処理回路は、顔面の特定の部位の、患側の動作を指示するメッセージを前記インタフェース装置を介して示しており、
更に、前記処理回路は、
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての、前記動作を指示された患側とは反対側の、非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の特定の部位における前記複数の変動値の全てについての平均左右比率を算出するステップ（２）と、
（３）算出した平均左右比率が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（３）と
を実行するものである、
リハビリテーション支援システム。
【請求項8】
前記顔面の特定の部位が、口角であり、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値が、
口角の近傍の所定の複数点の、合計の移動距離の最大値と、
口角の近傍の所定の複数点の、平均移動速度の最大値と、
正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異と、
正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異と
を含む、
請求項７に記載のリハビリテーション支援システム。
【請求項9】
リハビリテーション支援システムであって、インタフェース装置と、処理回路とを含み、
前記処理回路は、前記インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させており、
更に、前記処理回路は、顔面の第１の特定の部位の、患側の動作を指示するメッセージを前記インタフェース装置を介して示しており、
更に、前記処理回路は、
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位について、前記顔面の第２の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記第２の特定の部位についての、前記動作を指示された患側とは反対側の、非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の第２の特定の部位における変動値の全てについての平均左右比率を算出するステップ（２）と、
（４）算出した平均左右比率が所与の非静止閾値より大きければ、前記第２の特定の部位が非静止であることを示す第２の通知を発するステップ（４）と
を実行するものである、
リハビリテーション支援システム。
【請求項10】
前記顔面の第１の特定の部位が、目であり、前記顔面の第２の特定の部位が、口角であり、
前記顔面の第２の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値が、
口角の近傍の所定の複数点の、合計の移動距離の最大値と、
口角の近傍の所定の複数点の、平均移動速度の最大値と、
正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異と、
正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異と
を含む、
請求項９に記載のリハビリテーション支援システム。
【請求項11】
前記顔面の第１の特定の部位が、目であり、前記顔面の第２の特定の部位が、眉であり、
前記顔面の第２の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値が、
眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大になった時の、合計距離と、
眉の近傍の所定の複数点についての最大移動速度と
を含む、
請求項９に記載のリハビリテーション支援システム。
【請求項12】
前記顔面の第１の特定の部位が、口角であり、前記顔面の第２の特定の部位が、眉であり、
前記顔面の第２の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値が、
眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大になった時の、合計距離と、
眉の近傍の所定の複数点についての最大移動速度と
を含む、
請求項９に記載のリハビリテーション支援システム。
【請求項13】
リハビリテーション支援システムであって、インタフェース装置と、処理回路とを含み、
前記処理回路は、前記インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させており、
更に、前記処理回路は、顔面の特定の部位の動作を指示するメッセージを前記インタフェース装置を介して示しており、
更に、前記処理回路は、
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（２）と
を実行するものであり、
前記顔面の特定の部位は、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、及び、下顎を含み、
前記顔面の特定の部位に関する一つ以上の点を用いて測定される前記変動値は、
・顔面の特定の部位に関する所定の複数点の平均移動速度
を含む、リハビリテーション支援システム。
【請求項14】
リハビリテーション支援システムであって、インタフェース装置と、処理回路とを含み、
前記処理回路は、前記インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させており、
更に、前記処理回路は、顔面の第１の特定の部位の動作を指示するメッセージを前記インタフェース装置を介して示しており、
更に、前記処理回路は、
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の非静止閾値より大きければ、前記第２の特定の部位が非静止であることを示す第２の通知を発するステップ（２）と
を実行するものである、
リハビリテーション支援システム。
【請求項15】
前記顔面の特定の部位は、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、及び、下顎を含み、前記顔面の特定の部位に関する一つ以上の点を用いて測定される前記変動値は、
・顔面の特定の部位に関する所定の複数点の平均移動距離、
・顔面の特定の部位に関する所定の複数点の平均移動速度、
・顔面の特定の部位に関する所定の複数点により形成される面積の変動、及び、
・顔面の特定の部位に関する所定の３点により形成される角度の変動
を含む、請求項１４に記載のリハビリテーション支援システム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、顔の各器官の動作を評価する顔面運動評価システム、及び、顔の各器官の動作のリハビリテーションを支援するリハビリテーション支援システムに関する
【背景技術】
【0002】
顔面運動に変化が起こる疾患は多数ある。代表的なものとして、顔面神経麻痺は、通常片側の顔面神経の障害により、片方の顔の表情が弱くなったり、失われたりする病気である。麻痺の程度の評価については、長年、評価者の経験に基づく主観的な評価方法が用いられてきた。ここで、主観的な評価方法として、例えば、４０点法（柳原法）などが挙げられる。
【0003】
また、顔面神経麻痺の他にも仮面用顔貌として知られるように、パーキンソン病やうつ病では顔全体の表情に乏しくなる。
【0004】
疾患の有無に関わらず顔面の運動は個人毎に異なるため、顔面運動の評価は機械に委ね難いものとされていた。一方で、顔面運動の定量的かつ信頼性の高い評価手段は、常に、患者及び臨床医の双方にとって必要とされてきた。これらを踏まえて、近年、スマートフォンやタブレット端末を含むハードウエアや画像処理を含むソフトウエアの発展により、コンピュータを用いた顔面運動の評価システムが様々に提案されている。
【先行技術文献】
【特許文献】
【0005】
【文献】特開２０１８－３６７３４号公報
【文献】特表２０２２－５３３４６４号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
但し、現在までに提案されている顔面運動評価システムは、例えば、鼻、目、頬、口などの各器官の相対的な距離・位置を示す等、顔面の静的な様子を評価するものが多い。これに対し、顔面神経の診断においては、短時間（例えば、数秒間）、更には瞬間における、各器官の動作の評価を為し得る手段が求められている。また、短時間における各器官の具体的な動作の評価を為し得る手段は、顔面神経麻痺のためのリハビリテーション支援システムにて非常に有用である。
【0007】
本開示は、顔の各器官の短時間における動作を適切に評価する顔面運動評価システム、及び、顔の各器官の短時間における動作を適切に評価する機能を利用して顔面の器官や部位のリハビリテーションを実効的に行うリハビリテーション支援システムを提示する。
【課題を解決するための手段】
【0008】
本発明は上記の課題を解決する顔面運動評価システムである。本開示の顔面運動評価システムは、インタフェース装置と、処理回路とを含む。処理回路は、インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路は、
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップ（１－３）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の特定の部位における前記複数の変動値の全てについての平均左右比率を算出するステップ（２）と
を実行するものである。
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップ（１－３）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の特定の部位における前記複数の変動値の全てについての平均左右比率を算出するステップ（２）と
を実行するものである。
【0009】
また、本開示の顔面運動評価システムは、インタフェース装置と、処理回路とを含む。処理回路は、インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路は、
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）
を実行するものである。
前記顔面の特定の部位は、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、及び、下顎を含み、
前記顔面の特定の部位に関する一つ以上の点を用いて測定される前記変動値は、
・顔面の特定の部位に関する所定の複数点の平均移動速度
を含む。
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）
を実行するものである。
前記顔面の特定の部位は、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、及び、下顎を含み、
前記顔面の特定の部位に関する一つ以上の点を用いて測定される前記変動値は、
・顔面の特定の部位に関する所定の複数点の平均移動速度
を含む。
【0010】
また、本開示のリハビリテーション支援システムは、インタフェース装置と、処理回路とを、含む。処理回路は、インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路は、顔面の特定の部位の、患側の動作を指示するメッセージを前記インタフェース装置を介して示している。 更に、処理回路は、
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての、前記動作を指示された患側とは反対側の、非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の特定の部位における前記複数の変動値の全てについての平均左右比率を算出するステップ（２）と、
（３）算出した平均左右比率が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（３）と
を実行するものである。
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての、前記動作を指示された患側とは反対側の、非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の特定の部位における前記複数の変動値の全てについての平均左右比率を算出するステップ（２）と、
（３）算出した平均左右比率が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（３）と
を実行するものである。
【0011】
また、本開示のリハビリテーション支援システムは、インタフェース装置と、処理回路とを含む。処理回路は、インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路は、顔面の第１の特定の部位の、患側の動作を指示するメッセージを前記インタフェース装置を介して示している。 更に、処理回路は、
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位について、前記顔面の第２の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記第２の特定の部位についての、前記動作を指示された患側とは反対側の、非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の第２の特定の部位における前記複数の変動値の全てについての平均左右比率を算出するステップ（２）と、
（４）算出した平均左右比率が所与の非静止閾値より大きければ、前記第２の特定の部位が非静止であることを示す第２の通知を発するステップ（４）と
を実行するものである。
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位について、前記顔面の第２の特定の部位に関する一つ以上の点を用いて測定され得る複数の変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記第２の特定の部位についての、前記動作を指示された患側とは反対側の、非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率について、前記顔面の第２の特定の部位における前記複数の変動値の全てについての平均左右比率を算出するステップ（２）と、
（４）算出した平均左右比率が所与の非静止閾値より大きければ、前記第２の特定の部位が非静止であることを示す第２の通知を発するステップ（４）と
を実行するものである。
【0012】
また、本開示のリハビリテーション支援システムは、インタフェース装置と、処理回路とを含む。処理回路は、インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、前記処理回路は、顔面の特定の部位の動作を指示するメッセージを前記インタフェース装置を介して示している。 更に、処理回路は、
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（２）と
を実行するものである。
前記顔面の特定の部位は、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、及び、下顎を含み、
前記顔面の特定の部位に関する一つ以上の点を用いて測定される前記変動値は、
・顔面の特定の部位に関する所定の複数点の平均移動速度
を含む。
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（２）と
を実行するものである。
前記顔面の特定の部位は、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、及び、下顎を含み、
前記顔面の特定の部位に関する一つ以上の点を用いて測定される前記変動値は、
・顔面の特定の部位に関する所定の複数点の平均移動速度
を含む。
【0013】
更に、本開示のリハビリテーション支援システムは、インタフェース装置と、処理回路とを含む。処理回路は、インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路は、顔面の第１の特定の部位の動作を指示するメッセージを前記インタフェース装置を介して示している。 更に、処理回路は、
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の非静止閾値より大きければ、前記第２の特定の部位が非静止であることを示す第２の通知を発するステップ（２）と
を実行するものである。
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の非静止閾値より大きければ、前記第２の特定の部位が非静止であることを示す第２の通知を発するステップ（２）と
を実行するものである。
【発明の効果】
【0014】
本開示の顔面運動評価システムを利用することにより、顔の各器官や部位の短時間における動作を、左右比という観点から適切に評価することができ、変動量という観点から適切に把握することができる。更に、本開示のリハビリテーション支援システムは、顔の各器官や部位の短時間における動作を、左右比という観点から適切に評価する機能及び変動量という観点から適切に把握する機能を利用して、顔面の器官や部位のリハビリテーションを実効的に行うことができる。
【図面の簡単な説明】
【0015】
【図2】図２は、本開示にて利用する３次元顔認識システムが設定する、顔面を基準として構成される３次元相対座標系における、複数（例えば、１２２０個）の所定の点群（以下、「顔認識システムによる点群」という。）を示す図である。
【図4】図４（ａ－１）及び図４（ａ－２）は、顔認識システムによる点群における、眉の近傍の所定の二組の２点間距離を示す図である。図４（ａ－３）及び図４（ａ－４）は、顔認識システムによる点群における、眉の近傍の所定の点を示す図である。
【図6B】図６Ｂ（ｂ－１）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、頬の近傍の所定の点とによる、安静時の角度を示す図である。図６Ｂ（ｂ－２）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、頬の近傍の所定の点とによる、口角挙上運動中の角度を示す図である。
【図7B】図７Ｂ（ｂ－１）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、安静時の角度を示す図である。図７Ｂ（ｂ－２）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、口角挙上運動中の角度を示す図である。
【発明を実施するための形態】
【0016】
以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
【0017】
なお、発明者は、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって特許請求の範囲に記載の主題を限定することを意図するものではない。
【0018】
１．［第１の実施形態］
以下、添付の図面を参照して、本開示の好ましい第１の実施形態を説明する。第１の実施形態に係る顔面運動評価システムは、顔面神経麻痺における顔面運動の評価のために有用である。
以下、添付の図面を参照して、本開示の好ましい第１の実施形態を説明する。第１の実施形態に係る顔面運動評価システムは、顔面神経麻痺における顔面運動の評価のために有用である。
【0019】
１．１．［システム構成］
図１は、第１の実施形態に係る顔面運動評価システム２の全体システム構成図である。第１の実施形態に係る顔面運動評価システム２は、携帯端末６にて稼働する。
図１は、第１の実施形態に係る顔面運動評価システム２の全体システム構成図である。第１の実施形態に係る顔面運動評価システム２は、携帯端末６にて稼働する。
【0020】
なお、図９に示すように、本開示の第２の実施形態に係るリハビリテーション支援システム２’も、第１の実施形態に係る顔面運動評価システム２が稼働する携帯端末６にて、動作し得る。
【0021】
携帯端末６は、例えば、タブレット端末やスマートフォン等の、携帯式の計算機デバイスである。携帯端末６は、撮像素子と、撮像素子を制御する撮像制御手段を含む。即ち、例えば、図３に示すように、携帯端末６は、赤外線センサ２０、前面カメラ２２、及び赤外線照射部２４を備える。携帯端末６は、外部ネットワーク８に繋がる。なお、携帯端末６は、タブレット端末やスマートフォンの携帯式の計算機デバイスに限定されるものではなく、例えば、ＰＣ（パーソナルコンピュータ）やワークステーションコンピュータであってもよい。
【0022】
外部ネットワーク８は、例えば、インターネットであり、（以下で説明する）インタフェース装置１０を介して携帯端末６と接続する。顔面運動評価システム２は、携帯端末６で稼働する（例えば、）ネイティブアプリに依るものであり、よって、携帯端末６は、外部ネットワーク８に接続するアプリストアサーバ４から顔面運動評価システムに係るアプリケーションプログラムをダウンロードすることにより、携帯端末６において顔面運動評価システム２を構築する。なお、顔面運動評価システム２はネイティブアプリに依るもので無くてもよく、ウェブアプリやハイブリッドアプリに依るものであってもよい。
【0023】
図１に示すように、携帯端末６は、インタフェース装置１０、処理回路１２、及びメモリ１４を備える。
【0024】
インタフェース装置１０は、ネットワーク端子、映像入出力端子、ＵＳＢ端子、カメラ、ポインティングデバイス、キーボード、マウス等を含む、外部とデータを遣り取り可能なインタフェースユニットである。ここでのデータは、例えば、顔面に係る画像データである。取得後、これらのデータは、携帯端末６内部のメモリ１４等の記憶部に記録され得る。
【0025】
処理回路１２は、プロセッサにより構成される。ここでのプロセッサは、ＣＰＵ(Central Processing Unit;中央処理ユニット)やＧＰＵ(Graphics Processing Unit；画像処理ユニット)を包括するものである。第１の実施形態に係る顔面運動評価システム２の各種処理は、各種プログラムを処理回路１２が実行することによって実現される。
【0026】
メモリ１４は、携帯端末６内部のデータ書き換えが可能な記憶部であり、例えば、多数の半導体記憶素子を含むＲＡＭ（Random Access Memory）により構成される。メモリ１４は、処理回路１２が様々な処理を実行する際の、具体的なコンピュータプログラムや、変数値や、パラメータ値等を一時的に格納する。なおメモリ１４は、いわゆるＲＯＭ（Read Only Memory）を含んでもよい。ＲＯＭには、以下で説明する顔面運動評価システム２の各種処理を実現するアプリケーションプログラムが予め格納されている。処理回路１２がＲＯＭからアプリケーションプログラムを読み出し、ＲＡＭに展開することにより、処理回路１２が当該アプリケーションプログラムを実行することが可能になる。
【0027】
第１の実施形態に係る顔面運動評価システム２は、Ｓｗｉｆｔ等のコンピュータ言語を用いて構築されている。顔面運動評価システム２の構築のために用いられ得るコンピュータ言語はこれらに限定されるものでは無く、勿論、他のコンピュータ言語が用いられてもよい。
【0028】
更に、第１の実施形態に係る携帯端末６の処理回路１２は、インタフェース装置１０を介して取得される顔面に係る画像データに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて多数の所定の点を設定する顔認識システムを稼働させている。ここでの顔認識システムは、例えば、Ａｐｐｌｅ社の提供する３次元顔認証システムであるＦａｃｅＩＤで使用されている（Ｃｌａｓｓ名）「ＡＲＦａｃｅｇｅｏｍｅｔｒｙ」に依るシステムであり、（図３に示すような）前面カメラ２２を用いて顔面の画像処理を行うことに加えて、赤外線照射部２４により赤外線照射を行い、これにより赤外線センサ２０を用いて顔面を立体的に把握することにより、リアルタイムの３次元トラッキングを行う。なお「ＡＲＦａｃｅｇｅｏｍｅｔｒｙ」はＡｐｐｌｅ社提供の開発キットである。ここでの顔認識システムは、顔面上に配置された１２２０点の３次元座標を取得することが可能である。更に、当該顔認識システムでは、顔自体を基準とする相対座標系によって座標が決定されるので、顔の位置や向きが変化しても顔表面に配置された点の３次元座標は変化しないものである。よって、本開示の顔認識システムは、顔表面にて顔自体を基準として構成される３次元相対座標系にて１２２０個の所定の点を設定するものとしている。
【0029】
図２は、本開示にて利用される顔認識システムが設定する、顔面を基準として構成される３次元相対座標系における、複数（例えば、１２２０個）の所定の点群（以下、「顔認識システムによる点群」という。）を示す図である。１２２０個の点群は、携帯端末６のディスプレイ面にて、携帯端末６のディスプレイ面と正対する操作者の顔面の鏡像として、表示される。なお、図２では示していないが、１２２０個の所定の点の各々には、全て固定的に番号が付されている（図４～図８参照）。
【0030】
本開示にて利用するべき顔認識システムは、Ａｐｐｌｅ社の提供する３次元顔認証システムであるＦａｃｅＩＤで利用されているＡＲＦａｃｅｇｅｏｍｅｔｒｙに依るシステムに限定されるものではなく、顔表面にて顔自体を基準として構成される相対座標系にて多数の点を設定し得る、顔認識のためのシステムであればよい。
【0031】
１．２．［システムの動作］
顔面運動評価システム２の操作者、即ち、被評価者による、顔面運動評価システム２の操作、及び、それに対する顔面運動評価システム２の動作を、以下説明する。
顔面運動評価システム２の操作者、即ち、被評価者による、顔面運動評価システム２の操作、及び、それに対する顔面運動評価システム２の動作を、以下説明する。
【0032】
顔面運動評価システム２の操作者は、先ず、携帯端末６にて顔面運動評価システム２の稼働を開始させる。ここで、顔面運動評価システム２にて、操作者（被評価者）の健側（及び患側）が自動により若しくは手動により設定され得る。
【0033】
操作者（被評価者）は、携帯端末６のディスプレイ面を眺めつつ、両目を閉じる、片目ずつ目を閉じる、眉を挙上する、口角を挙げてほほ笑む、等の、顔面の運動を行う。その際、顔面運動評価システム２は、前面カメラ２２や赤外線センサ２０などのインタフェース装置１０を介して取得するリアルタイムの顔面に係るデータ、更には、それら顔面に係るデータから生成される顔認識システムによる点群に基づいて、以下の評価値算出処理を行う。図１１Ａは、以下の評価値算出処理を表すフローチャートを示す図である。
【0034】
［評価値算出処理］
［１］顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）。
［１－１］顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）。
［１－２］測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップ（１－２）。
［２］前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）。
［１］顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）。
［１－１］顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）。
［１－２］測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップ（１－２）。
［２］前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）。
【0035】
上記［２］で算出された平均左右比率が、その特定の部位の、運動の評価値である。つまり、部位の健側を基準として患側がどの程度運動し得るかを示す、部位についての平均左右比率が「評価値」とされる。
【0036】
第１の実施形態に係る顔面運動評価システム２における、上述の評価値算出処理にて、顔面の特定の部位は、例えば、眉、目、頬、口角、鼻翼などである。また、「所定の短時間」は、簡易な顔面運動を行うのに十分な時間であり、例えば、３秒や、５秒などである。
【0037】
更に、顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値の例は、以下の（１－１）、（１－２）、（２－１）、（３－１）、（３－２）、（３－３）、（４－１）、（４－２）、（４－３）、（４－４）、（５－１）、（５－２）、（５－３）の通りである。
（（１）特定の部位が「眉」である場合）
（１－１）眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大となった時の、合計距離。
（１－２）眉の近傍の所定の複数点についての最大移動速度。
（（２）特定の部位が「目」である場合）
（２－１）眼瞼内部の面積の、閉眼時である最縮小時と、開眼時である安静時との差異。
（（３）特定の部位が「頬」である場合）
（３－１）頬の近傍の所定の複数点の、合計の移動距離の最大値。
（３－２）頬の近傍の所定の複数点の、平均移動速度の最大値。
（３－３）正中線上の眉間の点及び鼻頭の点と、頬の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異。
（（４）特定の部位が「口角」である場合）
（４－１）口角の近傍の所定の複数点の、合計の移動距離の最大値。
（４－２）口角の近傍の所定の複数点の、平均移動速度の最大値。
（４－３）正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異。
（４－４）正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異
（（５）特定の部位が「鼻翼」である場合）
（５－１）鼻翼の近傍の所定の複数点の、合計の移動距離の最大値。
（５－２）鼻翼の近傍の所定の複数点の、平均移動速度の最大値。
（（１）特定の部位が「眉」である場合）
（１－１）眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大となった時の、合計距離。
（１－２）眉の近傍の所定の複数点についての最大移動速度。
（（２）特定の部位が「目」である場合）
（２－１）眼瞼内部の面積の、閉眼時である最縮小時と、開眼時である安静時との差異。
（（３）特定の部位が「頬」である場合）
（３－１）頬の近傍の所定の複数点の、合計の移動距離の最大値。
（３－２）頬の近傍の所定の複数点の、平均移動速度の最大値。
（３－３）正中線上の眉間の点及び鼻頭の点と、頬の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異。
（（４）特定の部位が「口角」である場合）
（４－１）口角の近傍の所定の複数点の、合計の移動距離の最大値。
（４－２）口角の近傍の所定の複数点の、平均移動速度の最大値。
（４－３）正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異。
（４－４）正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異
（（５）特定の部位が「鼻翼」である場合）
（５－１）鼻翼の近傍の所定の複数点の、合計の移動距離の最大値。
（５－２）鼻翼の近傍の所定の複数点の、平均移動速度の最大値。
【0038】
【0039】
［変動値の最大値の例に関する説明］
【0040】
（１）特定の部位が「眉」である場合について
図４（ａ－１）及び図４（ａ－２）は、顔認識システムによる点群における、眉の近傍の所定の複数組の２点間距離を示す図である。図４（ａ－１）は、安静時のものであり、図４（ａ－２）は、眉挙上時のものである。例えば、左側の眉の近傍では、複数組の２点として、(329-1150),(328-1151),(327-1152),(335-1153),(197-1154),(198-1155)の五組を想定している。右側の眉については、これら五組の点に対応する点が想定される。図４（ａ－１）及び図４（ａ－２）では、(329-1150),(328-1151)の二組のみ線分で結んでいる。図４（ａ－２）が、「眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大となった時の、合計距離」を、示し得る、顔認識システムによる点群の図である。
図４（ａ－１）及び図４（ａ－２）は、顔認識システムによる点群における、眉の近傍の所定の複数組の２点間距離を示す図である。図４（ａ－１）は、安静時のものであり、図４（ａ－２）は、眉挙上時のものである。例えば、左側の眉の近傍では、複数組の２点として、(329-1150),(328-1151),(327-1152),(335-1153),(197-1154),(198-1155)の五組を想定している。右側の眉については、これら五組の点に対応する点が想定される。図４（ａ－１）及び図４（ａ－２）では、(329-1150),(328-1151)の二組のみ線分で結んでいる。図４（ａ－２）が、「眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大となった時の、合計距離」を、示し得る、顔認識システムによる点群の図である。
【0041】
図４（ａ－３）及び図４（ａ－４）は、顔認識システムによる点群における、眉の近傍の所定の複数点を示す図である。図４（ａ－３）は、安静時のものであり、図４（ａ－３）は、眉挙上時のものである。例えば、左側の眉の近傍では、複数点として、329,328,327,335,197,198の五点を想定している。右側の眉については、これら五点に対応する点が想定される。図４（ａ－３）及び図４（ａ－４）では、329のみ円で囲んでいる。図４（ａ－４）が、「眉の近傍の所定の複数点についての最大移動速度」を、示し得る、顔認識システムによる点群の図である。
【0042】
（２）特定の部位が「目」である場合について
図５は、顔認識システムによる点群における、眼瞼内部を示す図である。つまり、左目縁の周囲の、1085-(連番)-1108の２４点を結ぶことにより、左目の眼瞼内部及びその面積を示している。右目については、これら２４点に対応する点が眼瞼内部を示す点として想定される。この面積が最も縮小した時（即ち、閉眼時）と、安静時（即ち、開眼時）との差異が、「眼瞼内部の面積の、閉眼時である最縮小時と、開眼時である安静時との差異」となる。
図５は、顔認識システムによる点群における、眼瞼内部を示す図である。つまり、左目縁の周囲の、1085-(連番)-1108の２４点を結ぶことにより、左目の眼瞼内部及びその面積を示している。右目については、これら２４点に対応する点が眼瞼内部を示す点として想定される。この面積が最も縮小した時（即ち、閉眼時）と、安静時（即ち、開眼時）との差異が、「眼瞼内部の面積の、閉眼時である最縮小時と、開眼時である安静時との差異」となる。
【0043】
（３）特定の部位が「頬」である場合について
図６Ａは、顔認識システムによる点群における、頬の近傍の所定の複数点を示す図である。例えば、図６Ａに示す、右側の頬の近傍では、複数点として、600,601,785,821の四点を想定している。左側の頬については、これら四点の点に対応する点が想定される。図６Ａでは、600,601,785,821の夫々が円で囲まれている。これらの、夫々の四点についての合計移動距離の最大値が「頬の近傍の所定の複数点の、合計の移動距離の最大値」となる。更に、これらの、夫々の四点についての、平均移動速度の最大値が、「頬の近傍の所定の複数点の、平均移動速度の最大値」となる。
図６Ａは、顔認識システムによる点群における、頬の近傍の所定の複数点を示す図である。例えば、図６Ａに示す、右側の頬の近傍では、複数点として、600,601,785,821の四点を想定している。左側の頬については、これら四点の点に対応する点が想定される。図６Ａでは、600,601,785,821の夫々が円で囲まれている。これらの、夫々の四点についての合計移動距離の最大値が「頬の近傍の所定の複数点の、合計の移動距離の最大値」となる。更に、これらの、夫々の四点についての、平均移動速度の最大値が、「頬の近傍の所定の複数点の、平均移動速度の最大値」となる。
【0044】
図６Ｂ（ｂ－１）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、頬の近傍の所定の点とによる、安静時の角度を示す図である。図６Ｂ（ｂ－２）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、頬の近傍の所定の点とによる、口角挙上運動中の角度を示す図である。正中線上の眉間の点及び鼻頭の点は、15,7の点である。右側の頬では、頬の近傍の所定の点は、600の点である。左側の頬については、この点(600)に対応する点が想定される。これらの、各頬についての、三点により為す角度の、安静時と口角挙上運動中との差異が、「正中線上の眉間の点及び鼻頭の点と、頬の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異」となる。
【0045】
（４）特定の部位が「口角」である場合について
図７Ａ（ａ－１）は、顔認識システムによる点群における、口角の近傍の所定の複数点を示す図である。図７Ａ（ａ－２）は、図７Ａ（ａ－１）の、口角の近傍の所定の複数点付近の拡大図である。図７Ａ（ａ－１）及び図７Ａ（ａ－２）に示す、右側の口角の近傍では、複数点として、823,824,825,826,684,638,678,639,834,835,836,837の１２点を想定している。左側の口角については、これら１２点に対応する点群が想定される。図７Ａ（ａ－１）及び図７Ａ（ａ－２）では、823,824,825,826,684,638,678,639,834,835,836,837の点群が、円などの線で囲まれている。これらの、夫々の１２点についての合計移動距離の最大値が「口角の近傍の所定の複数点の、合計の移動距離の最大値」となる。更に、これらの、夫々の１２点についての、平均移動速度の最大値が、「口角の近傍の所定の複数点の、平均移動速度の最大値」となる。
図７Ａ（ａ－１）は、顔認識システムによる点群における、口角の近傍の所定の複数点を示す図である。図７Ａ（ａ－２）は、図７Ａ（ａ－１）の、口角の近傍の所定の複数点付近の拡大図である。図７Ａ（ａ－１）及び図７Ａ（ａ－２）に示す、右側の口角の近傍では、複数点として、823,824,825,826,684,638,678,639,834,835,836,837の１２点を想定している。左側の口角については、これら１２点に対応する点群が想定される。図７Ａ（ａ－１）及び図７Ａ（ａ－２）では、823,824,825,826,684,638,678,639,834,835,836,837の点群が、円などの線で囲まれている。これらの、夫々の１２点についての合計移動距離の最大値が「口角の近傍の所定の複数点の、合計の移動距離の最大値」となる。更に、これらの、夫々の１２点についての、平均移動速度の最大値が、「口角の近傍の所定の複数点の、平均移動速度の最大値」となる。
【0046】
図７Ｂ（ｂ－１）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、安静時の角度を示す図である。図７Ｂ（ｂ－２）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、口角挙上運動中の角度を示す図である。正中線上の眉間の点及び鼻頭の点は、15,7の点である。右側の口角では、口角の近傍の所定の点は、825の点である。左側の口角については、この点(825)に対応する点が想定される。これらの、各口角についての、三点により為す角度の、安静時と口角挙上運動中との差異が、「正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異」となる。
【0047】
図７Ｃ（ｃ－１）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、安静時の角度を示す図である。図７Ｃ（ｃ－２）は、顔認識システムによる点群における、正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、口角挙上運動中の、特に右の口角の挙上運動中の、角度を示す図である。これらの、各口角についての、三点により為す角度の、安静時と口角挙上運動中との差異が、特に、右の口角についての、「正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異」となる。なお、左の口角については、左の口角の挙上運動中の、角度が用いられなければならない。
【0048】
（５）特定の部位が「鼻翼」である場合について
図８は、顔認識システムによる点群における、鼻翼の近傍の所定の複数点を示す図である。例えば、図８に示す、右側の鼻翼の近傍では、複数点として、652,655,732,743,729,651,653,747,760,727,748の１１点を想定している。左側の鼻翼については、これら１１点の点に対応する点が想定される。図８では、652,655,732,743の点群と、729,651,653,747の点群と、760,727,748の点群との、各々が、線で囲まれている。これらの、右側左側夫々の１１点についての、合計移動距離の最大値が「鼻翼の近傍の所定の複数点の、合計の移動距離の最大値」となる。更に、これらの、右側左側夫々の１１点についての、平均移動速度の最大値が、「鼻翼の近傍の所定の複数点の平均移動速度の最大値」となる。
図８は、顔認識システムによる点群における、鼻翼の近傍の所定の複数点を示す図である。例えば、図８に示す、右側の鼻翼の近傍では、複数点として、652,655,732,743,729,651,653,747,760,727,748の１１点を想定している。左側の鼻翼については、これら１１点の点に対応する点が想定される。図８では、652,655,732,743の点群と、729,651,653,747の点群と、760,727,748の点群との、各々が、線で囲まれている。これらの、右側左側夫々の１１点についての、合計移動距離の最大値が「鼻翼の近傍の所定の複数点の、合計の移動距離の最大値」となる。更に、これらの、右側左側夫々の１１点についての、平均移動速度の最大値が、「鼻翼の近傍の所定の複数点の平均移動速度の最大値」となる。
【0049】
［変動値の最大値の例に関する説明・終了］
【0050】
［評価値の出力・表示について］
第１の実施形態に係る顔面運動評価システム２は、各々の、顔面の特定の部位についての「評価値」を、運動評価の結果として、例えば以下のように、携帯端末６のディスプレイ面に表示することができる。
第１の実施形態に係る顔面運動評価システム２は、各々の、顔面の特定の部位についての「評価値」を、運動評価の結果として、例えば以下のように、携帯端末６のディスプレイ面に表示することができる。
【0051】
【表1】
ここでは、患側の口角及び鼻翼が、他の部位に比べて動きにくいことが示されている。
【0052】
顔面運動評価システム２は、顔面の特定の部位の全て（例えば、眉、目、頬、口角、鼻翼）について「評価値」を加算平均して、顔面全体の評価値として算出することもできる。よって、顔面運動評価システム２は、顔面全体の評価値を運動評価の結果として携帯端末６のディスプレイ面に表示することができる。表１の例では、運動評価の結果は「（９０＋９０＋９０＋６０＋６０）／５＝７８％」となる。
【0053】
更に、顔面運動評価システム２は、評価値の大小に応じて、想定される顔面麻痺の程度を表示することもできる。例えば、顔面全体の評価値が略１００％に近ければ、「顔面運動に問題は見られません。」と表示し、顔面全体の評価値が所定の閾値（例えば、９０％）より小さければ、「顔面運動に左右差があります。」と表示する、等を行うことができる。
【0054】
１．３．［まとめ］
第１の実施形態に係る顔面運動評価システム２は、インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に処理回路１２は、
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）と、
を実行するものである。
第１の実施形態に係る顔面運動評価システム２は、インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に処理回路１２は、
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）と、
を実行するものである。
【0055】
第１の実施形態に係る顔面運動評価システム２を利用することにより、顔の各器官や部位の短時間における動作を、左右比という観点から適切に評価することができる。
【0056】
２．［第２の実施形態］
第１の実施形態に続いて、本開示の好ましい第２の実施形態を開示する。なお、第２の実施形態に係る顔面運動評価システムは、第１の実施形態に係る顔面運動評価システムと略同様のものである。従って、両者の差異を中心に以下説明する。
第１の実施形態に続いて、本開示の好ましい第２の実施形態を開示する。なお、第２の実施形態に係る顔面運動評価システムは、第１の実施形態に係る顔面運動評価システムと略同様のものである。従って、両者の差異を中心に以下説明する。
【0057】
２．１．［システム構成］
第２の実施形態に係る顔面運動評価システム２は、図１に示す第１の実施形態に係る顔面運動評価システムと同様のシステム構成を備える。
第２の実施形態に係る顔面運動評価システム２は、図１に示す第１の実施形態に係る顔面運動評価システムと同様のシステム構成を備える。
【0058】
２．２．［システムの動作］
【0059】
第２の実施形態に係る顔面運動評価システム２の操作者、即ち、被評価者による、顔面運動評価システム２の操作、及び、それに対する顔面運動評価システム２の動作を、第１の実施形態と第２の実施形態との差異を中心に、以下説明する。
【0060】
顔面運動評価システム２の操作者は、先ず、携帯端末６にて顔面運動評価システム２の稼働を開始させる。
【0061】
操作者（被評価者）は、携帯端末６のディスプレイ面を眺めつつ、両目を閉じる、片目ずつ目を閉じる、眉を挙上する、口角を挙げてほほ笑む、口を開ける、顎を下げる等の、顔面の運動を行う。その際、顔面運動評価システム２は、前面カメラ２２や赤外線センサ２０などのインタフェース装置１０を介して取得するリアルタイムの顔面に係るデータ、更には、それら顔面に係るデータから生成される顔認識システムによる点群に基づいて、以下の変動値測定処理を行う。図１１Ｂは、以下の変動値測定処理を表すフローチャートを示す図である。
【0062】
［変動値測定処理］
［１］顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）。
［１］顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）。
【0063】
第２の実施形態に係る顔面運動評価システム２における、上述の変動値測定処理にて、顔面の特定の部位は、例えば、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、頸部、下顎などである。また、「所定の短時間」は、簡易な顔面運動を行うのに十分な時間であり、例えば、４秒や、６秒などである。
【0064】
更に、顔面の特定の部位に関する一つ以上の点を用いて測定される変動値は、例えば、・顔面の特定の部位に関する所定の複数点の平均移動距離、
・顔面の特定の部位に関する所定の複数点の平均移動速度、
・顔面の特定の部位に関する所定の複数点により形成される面積の変動、
・顔面の特定の部位に関する所定の３点により形成される角度の変動、
等である。
・顔面の特定の部位に関する所定の複数点の平均移動速度、
・顔面の特定の部位に関する所定の複数点により形成される面積の変動、
・顔面の特定の部位に関する所定の３点により形成される角度の変動、
等である。
【0065】
【0066】
第２の実施形態に係る顔面運動評価システム２は、複数の、顔面の特定の部位について、同時に並行して［変動値測定処理］を行うことができる。更に、第２の実施形態に係る顔面運動評価システム２は、或る顔面の特定の部位に関して、複数の変動値（例えば、「顔面の特定の部位に関する所定の複数点の平均移動距離」と、「顔面の特定の部位に関する所定の複数点の平均移動速度」）を同時に測定するように並行して［変動値測定処理］を行うことができる。
【0067】
［変動値の出力・表示について］
第２の実施形態に係る顔面運動評価システム２は、各々の、顔面の特定の部位についての「変動値」を、運動測定の結果として、携帯端末６のディスプレイ面に表示することができる。
第２の実施形態に係る顔面運動評価システム２は、各々の、顔面の特定の部位についての「変動値」を、運動測定の結果として、携帯端末６のディスプレイ面に表示することができる。
【0068】
更に、例えば、顔面運動評価システム２は、顔面の特定の部位の全て（例えば、右眉、左眉、右目、左目、右頬、左頬、口角、鼻翼、口唇、頸部、下顎、など）について「所定の複数点の平均移動距離」を加算平均して、顔面全体の運動の値として算出し、携帯端末６のディスプレイ面に表示することができる。
【0069】
２．３．［まとめ］
第２の実施形態に係る顔面運動評価システム２は、インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させており、
更に、処理回路１２は、
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）
を実行するものである。
第２の実施形態に係る顔面運動評価システム２は、インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させており、
更に、処理回路１２は、
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）
を実行するものである。
【0070】
第２の実施形態に係る顔面運動評価システム２を利用することにより、顔の各器官や部位の短時間における動作を、変動値（変動量）という観点から適切に把握することができる。
【0071】
３．［第３の実施形態］
第１及び第２の実施形態に続いて、本開示の好ましい第３の実施形態を開示する。なお、第３の実施形態に係るリハビリテーション支援システムは、第１及び第２の実施形態に係る顔面運動評価システムと類似するものである。従って、両者の差異を中心に以下説明する。第３の実施形態に係るリハビリテーション支援システムは、顔面神経麻痺に対するリハビリテーションの支援のために有用である。
第１及び第２の実施形態に続いて、本開示の好ましい第３の実施形態を開示する。なお、第３の実施形態に係るリハビリテーション支援システムは、第１及び第２の実施形態に係る顔面運動評価システムと類似するものである。従って、両者の差異を中心に以下説明する。第３の実施形態に係るリハビリテーション支援システムは、顔面神経麻痺に対するリハビリテーションの支援のために有用である。
【0072】
３．１．［システム構成］
図９は、第３の実施形態に係るリハビリテーション支援システム２’の全体システム構成図である。３２の実施形態に係るリハビリテーション支援システム２’は、第１及び第２の実施形態に係る顔面運動評価システム２と同様に、携帯端末６にて稼働する。
図９は、第３の実施形態に係るリハビリテーション支援システム２’の全体システム構成図である。３２の実施形態に係るリハビリテーション支援システム２’は、第１及び第２の実施形態に係る顔面運動評価システム２と同様に、携帯端末６にて稼働する。
【0073】
第１及び第２の実施形態と同様に、携帯端末６は、例えば、タブレット端末やスマートフォン等の、携帯式の計算機デバイスである。携帯端末６は、撮像素子と、撮像素子を制御する撮像制御手段を含む。即ち、例えば、図３に示すように、携帯端末６は、赤外線センサ２０、前面カメラ２２、及び赤外線照射部２４を備える。携帯端末６は、外部ネットワーク８に繋がる。
【0074】
外部ネットワーク８は、例えば、インターネットであり、インタフェース装置１０を介して携帯端末６と接続する。リハビリテーション支援システム２’も、携帯端末６で稼働するネイティブアプリであってよく、よって、携帯端末６は、外部ネットワーク８に接続するアプリストアサーバ４からリハビリテーション支援システム２’に係るアプリケーションプログラムをダウンロードすることにより、携帯端末６においてリハビリテーション支援システム２’を構築し得る。
【0075】
図９に示す携帯端末６も、インタフェース装置１０、処理回路１２、及びメモリ１４を備える。これらのインタフェース装置１０、処理回路１２、及びメモリ１４は、いずれも、第１及び第２の実施形態における携帯端末６と同様のものである。
【0076】
更に、第３の実施形態に係る携帯端末６の処理回路１２も、第１及び第２の実施形態と同様に、インタフェース装置１０を介して取得される顔面に係る画像データに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて多数の所定の点を設定する顔認識システムを稼働させている。ここでの顔認識システムも、例えば、Ａｐｐｌｅ社の提供する３次元顔認証システムであるＦａｃｅＩＤで使用されている（Ｃｌａｓｓ名）「ＡＲＦａｃｅｇｅｏｍｅｔｒｙ」に依るシステムであり、前面カメラ２２、赤外線照射部２４、及び赤外線センサ２０等を用いて、リアルタイムの３次元トラッキングを行う。よって、ここでの顔認識システムも、顔表面にて顔自体を基準として構成される３次元相対座標系にて１２２０個の所定の点を設定するものである（図２参照）。ここでの顔認識システムも、「ＡＲＦａｃｅｇｅｏｍｅｔｒｙ」に依るものに限定されるのではなく、顔表面にて顔自体を基準として構成される３次元相対座標系にて多数の点を設定し得る、顔認識のためのシステムであればよい。
【0077】
３．２．［システムの動作］
リハビリテーション支援システム２’の操作者による、リハビリテーション支援システム２’の操作、及び、それに対するリハビリテーション支援システム２’の動作を、以下説明する。
リハビリテーション支援システム２’の操作者による、リハビリテーション支援システム２’の操作、及び、それに対するリハビリテーション支援システム２’の動作を、以下説明する。
【0078】
リハビリテーション支援システム２’の操作者は、先ず、携帯端末６にてリハビリテーション支援システム２’の稼働を開始する。
【0079】
続いて、リハビリテーション支援システム２’にて、操作者の顔面の健側（及び患側）が、自動により若しくは手動により設定され得る。リハビリテーション支援システム２’によるリハビリテーションでは、顔面の部位の、患側のもののみを運動させることが中心となる。つまり、患側が動作側となり、健側が非動作側となる。
【0080】
リハビリテーションを行う顔面の部位は、目（閉眼、開眼）、口角が中心となる。以下で示すリハビリテーションも、例として、目（閉眼、開眼）、口角に対して行われるものとしている。
【0081】
３．２．１．［リハビリテーション支援システムにおける動作判定］
例えば、患側が右側であるとき、リハビリテーション支援システム２’は、携帯端末６のディスプレイ面に（図１０に示すように）「右目だけを閉じて下さい」と表示する。表示に合わせるように、リハビリテーション支援システム２’の操作者は動作を行おうとする。ここで、リハビリテーション支援システム２’により右目が十分に動作していると判定されれば、リハビリテーション支援システム２’のディスプレイ面に、例えば「適切に閉眼できています」と表示される（図１０（１）参照。）。このように、特定の部位の動作が十分・適切であるような場合、リハビリテーション支援システム２’における携帯端末６の処理回路１２は、以下の評価値算出及び動作判定処理を行う。以下の「評価値算出」の処理は、第１の実施形態に係る顔面運動評価システム２における携帯端末６の処理回路１２が実行する［評価値算出処理］と同じものである。よって、下記［２］で算出される平均左右比率は、その特定の部位の運動の評価値である（但し、部位の健側ではなく、部位の非運動側が基準となる）。特定の部位の動作が十分・適切であるということは、算出された平均左右比率が所与の動作閾値より大きい（ステップ（３））ということである。また、図１０に示す例では、特定の部位は「目」である。処理回路１２は、ステップ［３］にて発する第１の通知に従って、インタフェース装置１０を介して動作が適切である旨（例えば、「適切に閉眼できています」）を表示する。図１１Ｃは、以下の評価値算出及び動作判定処理を表すフローチャートを示す図である。
例えば、患側が右側であるとき、リハビリテーション支援システム２’は、携帯端末６のディスプレイ面に（図１０に示すように）「右目だけを閉じて下さい」と表示する。表示に合わせるように、リハビリテーション支援システム２’の操作者は動作を行おうとする。ここで、リハビリテーション支援システム２’により右目が十分に動作していると判定されれば、リハビリテーション支援システム２’のディスプレイ面に、例えば「適切に閉眼できています」と表示される（図１０（１）参照。）。このように、特定の部位の動作が十分・適切であるような場合、リハビリテーション支援システム２’における携帯端末６の処理回路１２は、以下の評価値算出及び動作判定処理を行う。以下の「評価値算出」の処理は、第１の実施形態に係る顔面運動評価システム２における携帯端末６の処理回路１２が実行する［評価値算出処理］と同じものである。よって、下記［２］で算出される平均左右比率は、その特定の部位の運動の評価値である（但し、部位の健側ではなく、部位の非運動側が基準となる）。特定の部位の動作が十分・適切であるということは、算出された平均左右比率が所与の動作閾値より大きい（ステップ（３））ということである。また、図１０に示す例では、特定の部位は「目」である。処理回路１２は、ステップ［３］にて発する第１の通知に従って、インタフェース装置１０を介して動作が適切である旨（例えば、「適切に閉眼できています」）を表示する。図１１Ｃは、以下の評価値算出及び動作判定処理を表すフローチャートを示す図である。
【0082】
［評価値算出及び動作判定処理］
［１］顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）。
［１－１］顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）。
［１－２］測定した変動値の最大値の、前記特定の部位についての非運動側を基準とする左右比率を算出するサブステップ（１－２）。
［２］前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）。
［３］算出した平均左右比率が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（３）。
［１］顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）。
［１－１］顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）。
［１－２］測定した変動値の最大値の、前記特定の部位についての非運動側を基準とする左右比率を算出するサブステップ（１－２）。
［２］前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）。
［３］算出した平均左右比率が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（３）。
【0083】
上述の評価値算出及び動作判定処理にて、顔面の特定の部位は、前述のように、目、口角などである。また、「所定の短時間」は、簡易な顔面運動を行うのに十分な時間であり、例えば、３秒や、５秒などである。
【0084】
更に、顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値の例は、第１の実施形態においても説明したように、以下の（２－１）、（４－１）、（４－２）、（４－３）、（４－４）の通りである。
（（２）特定の部位が「目」である場合）
（２－１）眼瞼内部の面積の、閉眼時である最縮小時と、開眼時である安静時との差異。
（（４）特定の部位が「口角」である場合）
（４－１）口角の近傍の所定の複数点の、合計の移動距離の最大値。
（４－２）口角の近傍の所定の複数点の、平均移動速度の最大値。
（４－３）正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異。
（４－４）正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異
（（２）特定の部位が「目」である場合）
（２－１）眼瞼内部の面積の、閉眼時である最縮小時と、開眼時である安静時との差異。
（（４）特定の部位が「口角」である場合）
（４－１）口角の近傍の所定の複数点の、合計の移動距離の最大値。
（４－２）口角の近傍の所定の複数点の、平均移動速度の最大値。
（４－３）正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異。
（４－４）正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異
【0085】
上述（２－１）、（４－１）～（４－４）の、顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値（の最大値）の例については、［第１の実施形態］の［変動値の最大値の例に関する説明］～［変動値の最大値の例に関する説明・終了］にて説明している。
【0086】
３．２．２．［リハビリテーション支援システムにおける注意通知］
また、「右目だけを閉じて下さい」との表示に合わせるようにリハビリテーション支援システム２’の操作者が動作を行おうとする際、リハビリテーション支援システム２’により右の口角が動作してしまっている（連動している）と判定されれば、リハビリテーション支援システム２’のディスプレイ面に、例えば「口も同時に動いてしまっています」と表示される（図１０（２）参照。）。このように、リハビリテーションの対象である第１の特定の部位とは異なる、第２の特定の部位が連動してしまっているような場合、リハビリテーション支援システム２’における携帯端末６の処理回路１２は、以下の評価値算出及び注意通知処理を行う。以下の「評価値算出」の処理は、上述の、本実施形態（第３の実施形態）に係るリハビリテーション支援システム２’における携帯端末６の処理回路１２が実行する［評価値算出及び動作判定処理］の評価値算出と同じものである。よって、下記［２］で算出される平均左右比率は、その第２の特定の部位の運動の評価値である。第２の特定の部位が連動してしまっている、即ち、相応の連動が生じている、ということは、算出された平均左右比率が所与の非静止閾値より大きい（ステップ（４））ということである。また、図１０（２）に示す例では、第２の特定の部位は「口角」である。処理回路１２は、ステップ［４］にて発する第２の通知に従って、インタフェース装置１０を介して他の部位の連動が発生しているという注意通知（例えば、「口も同時に動いてしまっています」）を表示する。図１１Ｄは、以下の評価値算出及び注意通知処理を表すフローチャートを示す図である。
また、「右目だけを閉じて下さい」との表示に合わせるようにリハビリテーション支援システム２’の操作者が動作を行おうとする際、リハビリテーション支援システム２’により右の口角が動作してしまっている（連動している）と判定されれば、リハビリテーション支援システム２’のディスプレイ面に、例えば「口も同時に動いてしまっています」と表示される（図１０（２）参照。）。このように、リハビリテーションの対象である第１の特定の部位とは異なる、第２の特定の部位が連動してしまっているような場合、リハビリテーション支援システム２’における携帯端末６の処理回路１２は、以下の評価値算出及び注意通知処理を行う。以下の「評価値算出」の処理は、上述の、本実施形態（第３の実施形態）に係るリハビリテーション支援システム２’における携帯端末６の処理回路１２が実行する［評価値算出及び動作判定処理］の評価値算出と同じものである。よって、下記［２］で算出される平均左右比率は、その第２の特定の部位の運動の評価値である。第２の特定の部位が連動してしまっている、即ち、相応の連動が生じている、ということは、算出された平均左右比率が所与の非静止閾値より大きい（ステップ（４））ということである。また、図１０（２）に示す例では、第２の特定の部位は「口角」である。処理回路１２は、ステップ［４］にて発する第２の通知に従って、インタフェース装置１０を介して他の部位の連動が発生しているという注意通知（例えば、「口も同時に動いてしまっています」）を表示する。図１１Ｄは、以下の評価値算出及び注意通知処理を表すフローチャートを示す図である。
【0087】
［評価値算出及び注意通知処理］
［１］第１の特定の部位とは異なる、顔面の第２の特定の部位について、前記顔面の第２の特定の部位に関する、一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）。
［１－１］顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）。
［１－２］測定した変動値の最大値の、前記第２の特定の部位についての非運動側を基準とする左右比率を算出するサブステップ（１－２）。
［２］前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）。
［４］算出した平均左右比率が所与の非静止閾値より大きければ、非静止であることを示す第２の通知を発するステップ（４）。
［１］第１の特定の部位とは異なる、顔面の第２の特定の部位について、前記顔面の第２の特定の部位に関する、一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）。
［１－１］顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）。
［１－２］測定した変動値の最大値の、前記第２の特定の部位についての非運動側を基準とする左右比率を算出するサブステップ（１－２）。
［２］前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）。
［４］算出した平均左右比率が所与の非静止閾値より大きければ、非静止であることを示す第２の通知を発するステップ（４）。
【0088】
上述の評価値算出及び注意通知処理にて、顔面の第１の特定の部位が目であるとき、顔面の第２の部位、即ち、連動しやすい部位は、口角、眉などである。顔面の第１の特定の部位が口角であるとき、顔面の第２の部位、即ち、連動しやすい部位は、目、眉などである。また、「所定の短時間」は、簡易な顔面運動を行うのに十分な時間であり、例えば、３秒や、５秒などである。
【0089】
更に、顔面の第２の特定の部位に関する一つ以上の点を用いて測定され得る変動値の最大値の例は、第１の実施形態においても説明したように、以下の（１－１）、（１－２）、（２－１）、（４－１）、（４－２）、（４－３）、（４－４）の通りである。
（（１）第２の特定の部位が「眉」である場合）
（１－１）眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大となった時の、合計距離。
（１－２）眉の近傍の所定の複数点についての最大移動速度。
（（２）第２の特定の部位が「目」である場合）
（２－１）眼瞼内部の面積の、閉眼時である最縮小時と、開眼時である安静時との差異。
（（４）第２の特定の部位が「口角」である場合）
（４－１）口角の近傍の所定の複数点の、合計の移動距離の最大値。
（４－２）口角の近傍の所定の複数点の、平均移動速度の最大値。
（４－３）正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異。
（４－４）正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異
（（１）第２の特定の部位が「眉」である場合）
（１－１）眉の近傍の所定の複数組の２点についての、２点間距離の合計値が最大となった時の、合計距離。
（１－２）眉の近傍の所定の複数点についての最大移動速度。
（（２）第２の特定の部位が「目」である場合）
（２－１）眼瞼内部の面積の、閉眼時である最縮小時と、開眼時である安静時との差異。
（（４）第２の特定の部位が「口角」である場合）
（４－１）口角の近傍の所定の複数点の、合計の移動距離の最大値。
（４－２）口角の近傍の所定の複数点の、平均移動速度の最大値。
（４－３）正中線上の眉間の点及び鼻頭の点と、口角の近傍の所定の点とによる、角度の、安静時と口角挙上運動中との差異。
（４－４）正中線上の眉間の点及び鼻頭の点と、正中線上の口唇の点とによる、角度の、安静時と口角挙上運動中との差異
【0090】
上述（１－１）～（１－２）、（２－１）、（４－１）～（４－４）の、顔面の（第２の）特定の部位に関する一つ以上の点を用いて測定され得る変動値（の最大値）の例については、［第１の実施形態］の［変動値の最大値の例に関する説明］～［変動値の最大値の例に関する説明・終了］にて説明している。
【0091】
［結果のメッセージの出力・表示について］
第３の実施形態に係るリハビリテーション支援システム２’は、動作判定処理の結果の評価メッセージ、及び、注意通知処理の結果の注意メッセージをディスプレイ面に表示することができる。
第３の実施形態に係るリハビリテーション支援システム２’は、動作判定処理の結果の評価メッセージ、及び、注意通知処理の結果の注意メッセージをディスプレイ面に表示することができる。
【0092】
図１０（１）に示すように、顔面の特定の部位である右目の動作が十分・適切である場合、ディスプレイ面に「適切に閉眼できています」と表示される。このとき同時に、適切な動作をしている右目全体に円を付して表示することもできる。
【0093】
また、図１０（２）に示すように、顔面の特定の部位とは異なる、第２の特定の部位である右の口角にて連動が生じている場合、ディスプレイ面に「口も同時に動いてしまっています」と表示される。このとき同時に、連動が生じている右の口角全体に円領域を付して表示することもできる。
【0094】
３．３．［まとめ］
第３の実施形態に係るリハビリテーション支援システム２’は、
インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、前記処理回路は、顔面の特定の部位の、患側の動作を指示するメッセージをインタフェース装置１０を介して示している。
更に、処理回路１２は、
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）と、
（３）算出した平均左右比率が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（３）と
を実行するものである。
第３の実施形態に係るリハビリテーション支援システム２’は、
インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、前記処理回路は、顔面の特定の部位の、患側の動作を指示するメッセージをインタフェース装置１０を介して示している。
更に、処理回路１２は、
（１）顔面の特定の部位について、前記顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記特定の部位についての非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）と、
（３）算出した平均左右比率が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（３）と
を実行するものである。
【0095】
また、第３の実施形態に係るリハビリテーション支援システム２’は、
インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路１２は、顔面の第１の特定の部位の、患側の動作を指示するメッセージをインタフェース装置を介して示している。
更に、処理回路１２は、
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位について、前記顔面の第２の特定の部位に関する、一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記第２の特定の部位についての非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）と、
（４）算出した平均左右比率が所与の非静止閾値より大きければ、非静止であることを示す第２の通知を発するステップ（４）と
を実行するものである。
インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路１２は、顔面の第１の特定の部位の、患側の動作を指示するメッセージをインタフェース装置を介して示している。
更に、処理回路１２は、
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位について、前記顔面の第２の特定の部位に関する、一つ以上の点を用いて測定され得る変動値の全てに亘って、以下のサブステップ（１－１）とサブステップ（１－２）を実行するステップ（１）と、
（１－１）顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ（１－１）、
（１－２）測定した変動値の最大値の、前記第２の特定の部位についての非運動側を基準とする左右比率を算出するサブステップ（１－２）、
（２）前記ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップ（２）と、
（４）算出した平均左右比率が所与の非静止閾値より大きければ、非静止であることを示す第２の通知を発するステップ（４）と
を実行するものである。
【0096】
第３の実施形態に係るリハビリテーション支援システム２’は、顔の各器官や部位の短時間における動作を左右比という観点から適切に評価する機能を利用して、顔面の器官のリハビリテーションを実効的に行うことができる。
【0097】
４．［第４の実施形態］
第３の実施形態に続いて、本開示の好ましい第４の実施形態を開示する。第４の実施形態に係るリハビリテーション支援システムは、第３の実施形態に係るリハビリテーション支援システムと略同様のものである。従って、両者の差異を中心に以下説明する。
第３の実施形態に続いて、本開示の好ましい第４の実施形態を開示する。第４の実施形態に係るリハビリテーション支援システムは、第３の実施形態に係るリハビリテーション支援システムと略同様のものである。従って、両者の差異を中心に以下説明する。
【0098】
４．１．［システム構成］
第４の実施形態に係るリハビリテーション支援システム２’は、図９に示す第３の実施形態に係るリハビリテーション支援システムと同様のシステム構成を備える。
第４の実施形態に係るリハビリテーション支援システム２’は、図９に示す第３の実施形態に係るリハビリテーション支援システムと同様のシステム構成を備える。
【0099】
４．２．［システムの動作］
第４の実施形態に係るリハビリテーション支援システム２’の操作者による、リハビリテーション支援システム２’の操作、及び、それに対するリハビリテーション支援システム２’の動作を、第３の実施形態と第４の実施形態との差異を中心に、以下説明する。
第４の実施形態に係るリハビリテーション支援システム２’の操作者による、リハビリテーション支援システム２’の操作、及び、それに対するリハビリテーション支援システム２’の動作を、第３の実施形態と第４の実施形態との差異を中心に、以下説明する。
【0100】
リハビリテーション支援システム２’の操作者は、先ず、携帯端末６にてリハビリテーション支援システム２’の稼働を開始させる。
【0101】
４．２．１．［リハビリテーション支援システムにおける動作判定］
リハビリテーション支援システム２’は、携帯端末６のディスプレイ面に『顔面の特定の部位を動作せよ』という旨を表示する。表示に合わせるように、リハビリテーション支援システム２’の操作者は動作を行おうとする。ここで、リハビリテーション支援システム２’により特定の部位が十分に動作していると判定されれば、リハビリテーション支援システム２’のディスプレイ面に、例えば『顔面の特定の部位が十分に動いている』という旨が表示される。このように、特定の部位の動作が十分・適切であるような場合、リハビリテーション支援システム２’における携帯端末６の処理回路１２は、以下の［変動値測定及び動作判定処理］を行う。図１１Ｅは、以下の変動値測定及び動作判定処理を表すフローチャートを示す図である。以下の「変動値測定」の処理は、第２の実施形態に係る顔面運動評価システム２における携帯端末６の処理回路１２が実行する［変動値測定処理］と同じものである。特定の部位の動作が十分・適切であるということは、測定された測定値が所与の動作閾値より大きい（ステップ（２））ということである。処理回路１２は、ステップ（２）にて発する第１の通知に従って、インタフェース装置１０を介して動作が適切である旨（例えば、『顔面の特定の部位が十分に動いている』という旨）を表示する。
リハビリテーション支援システム２’は、携帯端末６のディスプレイ面に『顔面の特定の部位を動作せよ』という旨を表示する。表示に合わせるように、リハビリテーション支援システム２’の操作者は動作を行おうとする。ここで、リハビリテーション支援システム２’により特定の部位が十分に動作していると判定されれば、リハビリテーション支援システム２’のディスプレイ面に、例えば『顔面の特定の部位が十分に動いている』という旨が表示される。このように、特定の部位の動作が十分・適切であるような場合、リハビリテーション支援システム２’における携帯端末６の処理回路１２は、以下の［変動値測定及び動作判定処理］を行う。図１１Ｅは、以下の変動値測定及び動作判定処理を表すフローチャートを示す図である。以下の「変動値測定」の処理は、第２の実施形態に係る顔面運動評価システム２における携帯端末６の処理回路１２が実行する［変動値測定処理］と同じものである。特定の部位の動作が十分・適切であるということは、測定された測定値が所与の動作閾値より大きい（ステップ（２））ということである。処理回路１２は、ステップ（２）にて発する第１の通知に従って、インタフェース装置１０を介して動作が適切である旨（例えば、『顔面の特定の部位が十分に動いている』という旨）を表示する。
【0102】
［変動値測定及び動作判定処理］
［１］顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）。
［２］測定した変動値が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（２）。
［１］顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）。
［２］測定した変動値が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（２）。
【0103】
第４の実施形態に係るリハビリテーション支援システム２’における、上述の変動値測定処理にて、顔面の特定の部位は、例えば、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、頸部、下顎などである。また、「所定の短時間」は、簡易な顔面運動を行うのに十分な時間であり、例えば、４秒や、６秒などである。
【0104】
更に、顔面の特定の部位に関する一つ以上の点を用いて測定される変動値は、例えば、・顔面の特定の部位に関する所定の複数点の平均移動距離、
・顔面の特定の部位に関する所定の複数点の平均移動速度、
・顔面の特定の部位に関する所定の複数点により形成される面積の変動、
・顔面の特定の部位に関する所定の３点により形成される角度の変動、
等である。
・顔面の特定の部位に関する所定の複数点の平均移動速度、
・顔面の特定の部位に関する所定の複数点により形成される面積の変動、
・顔面の特定の部位に関する所定の３点により形成される角度の変動、
等である。
【0105】
【0106】
第４の実施形態に係るリハビリテーション支援システム２’は、複数の、顔面の特定の部位について、同時に［変動値測定処理］を行うことができる。更に、第４の実施形態に係るリハビリテーション支援システム２’は、或る顔面の特定の部位に関して、複数の変動値（例えば、「顔面の特定の部位に関する所定の複数点の平均移動距離」と、「顔面の特定の部位に関する所定の複数点の平均移動速度」）を同時に測定するように並行して［変動値測定処理］を行うことができる。
【0107】
４．２．２．［リハビリテーション支援システムにおける注意通知］
また、『顔面の特定の部位を動作せよ』という旨の表示に合わせるようにリハビリテーション支援システム２’の操作者が動作を行おうとする際、リハビリテーション支援システム２’により、別の特定の部位が動作してしまっている（連動している）と判定されれば、リハビリテーション支援システム２’のディスプレイ面に、例えば『顔面の別の特定の部位も動いてしまっている』という旨が表示される。リハビリテーションの対象である第１の特定の部位とは異なる、第２の特定の部位が連動してしまっている場合、リハビリテーション支援システム２’における携帯端末６の処理回路１２は、以下の［変動値測定及び注意通知処理］を行う。図１１Ｆは、以下の変動値測定及び注意通知処理を表すフローチャートを示す図である。以下の「変動値測定」の処理は、上述の、本実施形態（第４の実施形態）に係るリハビリテーション支援システム２’における携帯端末６の処理回路１２が実行する［変動値測定及び動作判定処理］の変動値測定と同様のものである。第２の特定の部位が連動してしまっている、即ち、相応の連動が生じている、ということは、測定された変動値が所与の非静止閾値より大きい（ステップ（２））ということである。処理回路１２は、ステップ（２）にて発する第２の通知に従って、インタフェース装置１０を介して他の部位の連動が発生しているという注意通知（例えば、『顔面の別の特定の部位も動いてしまっている』という旨）を表示する。
また、『顔面の特定の部位を動作せよ』という旨の表示に合わせるようにリハビリテーション支援システム２’の操作者が動作を行おうとする際、リハビリテーション支援システム２’により、別の特定の部位が動作してしまっている（連動している）と判定されれば、リハビリテーション支援システム２’のディスプレイ面に、例えば『顔面の別の特定の部位も動いてしまっている』という旨が表示される。リハビリテーションの対象である第１の特定の部位とは異なる、第２の特定の部位が連動してしまっている場合、リハビリテーション支援システム２’における携帯端末６の処理回路１２は、以下の［変動値測定及び注意通知処理］を行う。図１１Ｆは、以下の変動値測定及び注意通知処理を表すフローチャートを示す図である。以下の「変動値測定」の処理は、上述の、本実施形態（第４の実施形態）に係るリハビリテーション支援システム２’における携帯端末６の処理回路１２が実行する［変動値測定及び動作判定処理］の変動値測定と同様のものである。第２の特定の部位が連動してしまっている、即ち、相応の連動が生じている、ということは、測定された変動値が所与の非静止閾値より大きい（ステップ（２））ということである。処理回路１２は、ステップ（２）にて発する第２の通知に従って、インタフェース装置１０を介して他の部位の連動が発生しているという注意通知（例えば、『顔面の別の特定の部位も動いてしまっている』という旨）を表示する。
【0108】
［変動値測定及び注意通知処理］
［１］第１の特定の部位とは異なる、顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）。
［２］測定した変動値が所与の非静止閾値より大きければ、非静止であることを示す第２の通知を発するステップ（２）。
［１］第１の特定の部位とは異なる、顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）。
［２］測定した変動値が所与の非静止閾値より大きければ、非静止であることを示す第２の通知を発するステップ（２）。
【0109】
第４の実施形態に係るリハビリテーション支援システム２’における、上述の変動値測定及び注意通知処理にて、顔面の第２の特定の部位は、リハビリテーションの対象である第１の特定の部位とは異なる部位であり、且つ、例えば、右眉、左眉、右目、左目、右頬、左頬、右口角、左口角、右鼻翼、左鼻翼、口唇、頸部、下顎などである。また、「所定の短時間」は、簡易な顔面運動を行うのに十分な時間であり、例えば、４秒や、６秒などである。
【0110】
更に、顔面の第２の特定の部位に関する一つ以上の点を用いて測定される変動値は、例えば、
・顔面の第２の特定の部位に関する所定の複数点の平均移動距離、
・顔面の第２の特定の部位に関する所定の複数点の平均移動速度、
・顔面の第２の特定の部位に関する所定の複数点により形成される面積の変動、
・顔面の第２の特定の部位に関する所定の３点により形成される角度の変動、
等である。
・顔面の第２の特定の部位に関する所定の複数点の平均移動距離、
・顔面の第２の特定の部位に関する所定の複数点の平均移動速度、
・顔面の第２の特定の部位に関する所定の複数点により形成される面積の変動、
・顔面の第２の特定の部位に関する所定の３点により形成される角度の変動、
等である。
【0111】
【0112】
第４の実施形態に係るリハビリテーション支援システム２’は、複数の、顔面の特定の部位について、同時に［変動値測定及び注意通知処理］を行うことができる。更に、第４の実施形態に係るリハビリテーション支援システム２’は、或る顔面の第２の特定の部位に関して、複数の変動値（例えば、「顔面の第２の特定の部位に関する所定の複数点の平均移動距離」と、「顔面の第２の特定の部位に関する所定の複数点の平均移動速度」）を同時に測定するように並行して［変動値測定及び注意通知処理］を行うことができる。
【0113】
［結果のメッセージの出力・表示について］
第４の実施形態に係るリハビリテーション支援システム２’は、動作判定処理の結果の評価メッセージ、及び、注意通知処理の結果の注意メッセージをディスプレイ面に表示することができる。まず、例えば、顔面の特定の部位（「部位Ａ」とする。）の動作が十分・適切である場合、ディスプレイ面に「部位Ａが適切に動作しています」と表示される。また、顔面の特定の部位（部位Ａ）とは異なる、第２の特定の部位（「部位Ｂ」とする。）にて連動が生じている場合、ディスプレイ面に「部位Ｂも同時に動いてしまっています」と表示される。
第４の実施形態に係るリハビリテーション支援システム２’は、動作判定処理の結果の評価メッセージ、及び、注意通知処理の結果の注意メッセージをディスプレイ面に表示することができる。まず、例えば、顔面の特定の部位（「部位Ａ」とする。）の動作が十分・適切である場合、ディスプレイ面に「部位Ａが適切に動作しています」と表示される。また、顔面の特定の部位（部位Ａ）とは異なる、第２の特定の部位（「部位Ｂ」とする。）にて連動が生じている場合、ディスプレイ面に「部位Ｂも同時に動いてしまっています」と表示される。
【0114】
４．３．［まとめ］
第４の実施形態に係るリハビリテーション支援システム２’は、インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路１２は、顔面の特定の部位の動作を指示するメッセージをインタフェース装置１０を介して示している。更に、処理回路１２は、
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（２）と
を実行するものである。
第４の実施形態に係るリハビリテーション支援システム２’は、インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路１２は、顔面の特定の部位の動作を指示するメッセージをインタフェース装置１０を介して示している。更に、処理回路１２は、
（１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の動作閾値より大きければ、動作していることを示す第１の通知を発するステップ（２）と
を実行するものである。
【0115】
また、第４の実施形態に係るリハビリテーション支援システム２’は、インタフェース装置１０と、処理回路１２とを含む。処理回路１２は、インタフェース装置１０を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。更に、処理回路は、顔面の第１の特定の部位の動作を指示するメッセージをインタフェース装置１０を介して示している。更に、処理回路１２は、
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の非静止閾値より大きければ、非静止であることを示す第２の通知を発するステップ（２）と
を実行するものである。
（１）第１の特定の部位とは異なる、顔面の第２の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するステップ（１）と、
（２）測定した変動値が所与の非静止閾値より大きければ、非静止であることを示す第２の通知を発するステップ（２）と
を実行するものである。
【0116】
第４の実施形態に係るリハビリテーション支援システム２’は、顔の各器官や部位の短時間における動作を変動値（変動量）という観点から適切に把握する機能を利用して、顔面の器官のリハビリテーションを実効的に行うことができる。
【0117】
５．［他の実施形態］
以上のように、本出願において開示する技術の例示として、第１の実施形態と第２の実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施形態にも適用可能である。
以上のように、本出願において開示する技術の例示として、第１の実施形態と第２の実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施形態にも適用可能である。
【0118】
第２の実施形態に係る顔面運動評価システム２は、顔面の全点（例えば、本開示では１２２点）の個々について、所定の短時間内での、移動距離、及び、平均移動速度を計測することもできる。顔面の全点について移動距離を加算する、若しくは、加算平均を採ることにより、顔面全体での運動の値を算出することができる。
【0119】
第１及び第２の実施形態に係る顔面運動評価システム２、及び、第３及び第４の実施形態に係るリハビリテーション支援システム２’は、いずれも、顔面の部位の動作に係るデータを、経時的に保存することができる。それら経時的に保存されるデータを用いて、第１の実施形態に係る顔面運動評価システム２は、顔面の動作の経時的変化の評価を行うことができる。また、第２の実施形態に係るリハビリテーション支援システム２’は、それら経時的に保存されるデータを用いて、リハビリテーションの経時的な効果の有無を判断することができる。
【0120】
また、実施形態を説明するために、添付図面および詳細な説明を提供した。したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
【0121】
また、上述の実施形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
【符号の説明】
【0122】
２・・・顔面運動評価システム、２’・・・リハビリテーション支援システム、４・・・アプリストアサーバ、６・・・携帯端末、８・・・外部ネットワーク、１０・・・インタフェース装置、１２・・・処理回路、１４・・・メモリ。
【要約】
【課題】顔の器官の短時間の動作を適切に評価する顔面運動評価システムを開示する。
【解決手段】システムはインタフェース装置と処理回路とを含む。処理回路は、インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。処理回路は、（１）顔面の特定の部位について、顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ及び（１－２）測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップを、実行するステップと、（２）ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップと、を実行する。
【選択図】図１
【解決手段】システムはインタフェース装置と処理回路とを含む。処理回路は、インタフェース装置を介して取得される顔面に係るデータに基づき、顔表面にて顔自体を基準として構成される３次元相対座標系にて複数の所定の点を設定する顔認識システムを稼働させている。処理回路は、（１）顔面の特定の部位について、顔面の特定の部位に関する一つ以上の点を用いて測定され得る変動値の全てに亘って、（１－１）顔面の特定の部位に関する一つ以上の点についての所定の短時間内での変動値を測定するサブステップ及び（１－２）測定した変動値の最大値の、前記特定の部位についての健側を基準とする左右比率を算出するサブステップを、実行するステップと、（２）ステップ（１）にて算出された、左右比率についての平均左右比率を算出するステップと、を実行する。
【選択図】図１
【図1】
【図2】
【図3】
【図4】
【図5】
【図6A】
【図6B】
【図7A】
【図7B】
【図7C】
【図8】
【図9】
【図10】
【図11A】
【図11B】
【図11C】
【図11D】
【図11E】
【図11F】