特開 2025-11478 バイタル情報管理装置、バイタル情報管理システム及びバイタル情報管理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2025011478

(43)【公開日】2025-01-24

(54)【発明の名称】バイタル情報管理装置、バイタル情報管理システム及びバイタル情報管理方法

(51)【国際特許分類】

   G16H 10/00 20180101AFI20250117BHJP

【ＦＩ】

G16H10/00

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2023113618

(22)【出願日】2023-07-11

(71)【出願人】

【識別番号】304037175

【氏名又は名称】メディカル・ケア・プランニング株式会社

(71)【出願人】

【識別番号】521122094

【氏名又は名称】株式会社バイタルＤＸ

(74)【代理人】

【識別番号】100114306

【弁理士】

【氏名又は名称】中辻 史郎

(72)【発明者】

【氏名】久保 貴史

(72)【発明者】

【氏名】朴 元浩

【テーマコード（参考）】

5L099

【Ｆターム（参考）】

5L099AA21

(57)【要約】

【課題】バイタル情報の推定値と利用者の紐づけを効率良く行うとともに、対象者のバイタル情報を医療機器で測定すべきか否かを推奨することを課題とする。
【解決手段】内蔵するカメラで使用者の顔動画を撮影したならば（Ｓ１）、ＲＰＰＧにより使用者のバイタルデータを推定する（Ｓ２）。例えば、心拍が７０回／分であり、血圧が１６３／９８ｍｍＨｇであると推定する。推定したバイタルデータが標準値から外れていた場合は、医療機器による測定を促す（Ｓ３）。例えば、「血圧が標準値から外れています。医療機器で再測定しますか。」と表示する。
【選択図】図１

【特許請求の範囲】

【請求項1】

利用者の顔画像を撮像する撮像部と、バイタル情報を取得する所定の操作を受け付ける操作受付部とを有するバイタル情報管理装置であって、
前記撮像部により撮像された顔画像に基づいてバイタル情報を推定する推定手段と、
前記撮像部により撮像された顔画像の顔認証を行う顔認証手段と、
前記操作受付部により前記所定の操作を受け付けた場合に、前記推定手段により推定されたバイタル情報を前記顔認証手段で認証された利用者の識別情報に対応付けて記憶する記憶手段と
を備えたことを特徴とするバイタル情報管理装置。

【請求項2】

前記推定手段は、
前記顔画像にリモートフォトプレチスモグラフィーを適用して得られる心拍数から脈拍、血中酸素濃度、血圧及び／又は体温を含むバイタル情報を推定することを特徴とする請求項１に記載のバイタル情報管理装置。

【請求項3】

前記推定手段は、
複数の顔画像にリモートフォトプレチスモグラフィーを適用した心拍数及び正解データを訓練データとして訓練したバイタル情報推定モデルを用いて、前記バイタル情報を推定することを特徴とする請求項２に記載のバイタル情報管理装置。

【請求項4】

前記推定手段により推定されたバイタル情報に基づいて、所定の医療機器を用いた前記利用者のバイタル情報の測定を推奨する推奨情報を所定の表示部に表示制御する第１の表示制御手段をさらに備えたことを特徴とする請求項１～３のいずれか一つに記載のバイタル情報管理装置。

【請求項5】

複数の顔画像及び正解データを訓練データとして訓練した健康状態推定モデルを用いて健康度を推定する健康度推定手段をさらに備え、
前記推定手段により推定されたバイタル情報及び前記健康度推定手段により推定された健康度に基づいて、所定の医療機器を用いた前記利用者のバイタル情報の測定を推奨する推奨情報を所定の表示部に表示制御する第２の表示制御手段をさらに備えたことを特徴とする請求項１～３のいずれか一つに記載のバイタル情報管理装置。

【請求項6】

複数の顔画像、音声データ及び正解データを訓練データとして訓練した健康状態推定モデルを用いて健康度を推定する健康度推定手段と、
前記利用者の音声情報を収集する音声収集手段と
をさらに備え、
前記推定手段により推定されたバイタル情報及び前記健康度推定手段により推定された健康度に基づいて、所定の医療機器を用いた前記利用者のバイタル情報の測定を推奨する推奨情報を所定の表示部に表示制御する第３の表示制御手段をさらに備えたことを特徴とする請求項１～３のいずれか一つに記載のバイタル情報管理装置。

【請求項7】

利用者の顔画像を撮像する撮像部及びバイタル情報を取得する所定の操作を受け付ける操作受付部を備えた端末装置と、前記端末装置と通信可能なサーバ装置とを有するバイタル情報管理システムであって、
前記サーバ装置は、
前記撮像部により撮像された顔画像に基づいてバイタル情報を推定する推定手段と、
前記撮像部により撮像された顔画像の顔認証を行う顔認証手段と、
前記端末装置から前記所定の操作を受け付けた旨の通知を受けた場合に、前記推定手段により推定されたバイタル情報を前記顔認証手段で認証された利用者の識別情報に対応付けて記憶する記憶手段と
を備えたことを特徴とするバイタル情報管理システム。

【請求項8】

利用者の顔画像を撮像する撮像部と、バイタル情報を取得する所定の操作を受け付ける操作受付部とを有するバイタル情報管理装置で実行されるバイタル情報管理方法であって、
前記撮像部により撮像された顔画像に基づいてバイタル情報を推定する推定工程と、
前記撮像部により撮像された顔画像の顔認証を行う顔認証工程と、
前記操作受付部により前記所定の操作を受け付けた場合に、前記推定工程により推定されたバイタル情報を前記顔認証工程で認証された利用者の識別情報に対応付けて所定の記憶部に記憶する記憶工程と
を含むことを特徴とするバイタル情報管理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、バイタル情報の推定値と利用者の紐づけを効率良く行うとともに、対象者のバイタル情報を医療機器で測定すべきか否かを推奨することができるバイタル情報管理装置、バイタル情報管理システム及びバイタル情報管理方法に関する。

【背景技術】

【0002】

従来、血流による肌の色の変化を解析することで心拍数を推定するリモートフォトプレチスモグラフィー（以下、「ＲＰＰＧ」と言う）と呼ばれる技術が知られている。例えば、特許文献１には、人の皮膚の種々の領域の輝度の測定値のシーケンスを受信したならば、測定された輝度に対応するフォトプレチスモグラフィ波形の周波数係数を求める技術が開示されている。

【0003】

かかるＲＰＰＧ技術を用いることにより、人の顔画像を用いて脈拍、血中酸素濃度（以下、「ＳｐＯ２」と言う）、血圧及び体温などのバイタル情報を推定することができる。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特表２０２０－５２７０８８号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、例えば多数の要介護者が存在する介護現場では、ＲＰＰＧを用いてバイタル情報を取得した場合に、このバイタル情報と要介護者との紐づけを人手で行わねばないとすると、要介護者に対して他人のバイタル情報を紐付けてしまうおそれがある。

【0006】

また、ＲＰＰＧにより得られる血圧は、医療機器で実測したものではないため、医療機器でバイタル情報を測定すべき場合があるが、介護現場において医療機器でバイタル情報を測定すべきか否かを判断するのは難しい。

【0007】

本発明は、上記従来技術の課題を解決するためになされたものであって、バイタル情報の推定値と利用者の紐づけを効率良く行うとともに、対象者のバイタル情報を医療機器で測定すべきか否かを推奨することができるバイタル情報管理装置、バイタル情報管理システム及びバイタル情報管理方法を提供することを目的とする。

【課題を解決するための手段】

【0008】

上記課題を解決するため、本発明は、利用者の顔画像を撮像する撮像部と、バイタル情報を取得する所定の操作を受け付ける操作受付部とを有するバイタル情報管理装置であって、前記撮像部により撮像された顔画像に基づいてバイタル情報を推定する推定手段と、前記撮像部により撮像された顔画像の顔認証を行う顔認証手段と、前記操作受付部により前記所定の操作を受け付けた場合に、前記推定手段により推定されたバイタル情報を前記顔認証手段で認証された利用者の識別情報に対応付けて記憶する記憶手段とを備えたことを特徴とする。

【0009】

また、本発明は、上記発明において、前記推定手段は、前記顔画像にリモートフォトプレチスモグラフィーを適用して得られる心拍数から脈拍、血中酸素濃度、血圧及び／又は体温を含むバイタル情報を推定することを特徴とする。

【0010】

また、本発明は、上記発明において、前記推定手段は、複数の顔画像にリモートフォトプレチスモグラフィーを適用した心拍数及び正解データを訓練データとして訓練したバイタル情報推定モデルを用いて、前記バイタル情報を推定することを特徴とする。

【0011】

また、本発明は、上記発明において、前記推定手段により推定されたバイタル情報に基づいて、所定の医療機器を用いた前記利用者のバイタル情報の測定を推奨する推奨情報を所定の表示部に表示制御する第１の表示制御手段をさらに備えたことを特徴とする。

【0012】

また、本発明は、上記発明において、複数の顔画像及び正解データを訓練データとして訓練した健康状態推定モデルを用いて健康度を推定する健康度推定手段をさらに備え、前記推定手段により推定されたバイタル情報及び前記健康度推定手段により推定された健康度に基づいて、所定の医療機器を用いた前記利用者のバイタル情報の測定を推奨する推奨情報を所定の表示部に表示制御する第２の表示制御手段をさらに備えたことを特徴とする。

【0013】

また、本発明は、上記発明において、複数の顔画像、音声データ及び正解データを訓練データとして訓練した健康状態推定モデルを用いて健康度を推定する健康度推定手段と、前記利用者の音声情報を収集する音声収集手段とをさらに備え、前記推定手段により推定されたバイタル情報及び前記健康度推定手段により推定された健康度に基づいて、所定の医療機器を用いた前記利用者のバイタル情報の測定を推奨する推奨情報を所定の表示部に表示制御する第３の表示制御手段をさらに備えたことを特徴とする。

【0014】

また、本発明は、利用者の顔画像を撮像する撮像部及びバイタル情報を取得する所定の操作を受け付ける操作受付部を備えた端末装置と、前記端末装置と通信可能なサーバ装置とを有するバイタル情報管理システムであって、前記サーバ装置は、前記撮像部により撮像された顔画像に基づいてバイタル情報を推定する推定手段と、前記撮像部により撮像された顔画像の顔認証を行う顔認証手段と、前記端末装置から前記所定の操作を受け付けた旨の通知を受けた場合に、前記推定手段により推定されたバイタル情報を前記顔認証手段で認証された利用者の識別情報に対応付けて記憶する記憶手段とを備えたことを特徴とする。

【0015】

また、本発明は、利用者の顔画像を撮像する撮像部と、バイタル情報を取得する所定の操作を受け付ける操作受付部とを有するバイタル情報管理装置で実行されるバイタル情報管理方法であって、前記撮像部により撮像された顔画像に基づいてバイタル情報を推定する推定工程と、前記撮像部により撮像された顔画像の顔認証を行う顔認証工程と、前記操作受付部により前記所定の操作を受け付けた場合に、前記推定工程により推定されたバイタル情報を前記顔認証工程で認証された利用者の識別情報に対応付けて所定の記憶部に記憶する記憶工程とを含むことを特徴とする。

【発明の効果】

【0016】

本発明によれば、バイタル情報の推定値と利用者の紐づけを効率良く行うとともに、対象者のバイタル情報を医療機器で測定すべきか否かを推奨することができる。

【図面の簡単な説明】

【0017】

【図1】図１は、実施形態１に係るバイタル情報管理装置の概要の説明図である。

【図2】図２は、図１に示したバイタル情報管理装置の構成を示す機能ブロック図である。

【図3】図３は、図２に示した認証データ、標準データ及びバイタルデータの一例を示す図である。

【図4】図４は、実施形態１に係る光電脈波法の概要の説明図である。

【図5】図５は、実施形態１に係るバイタル情報管理装置における表示の一例を示す図（その１）である。

【図6】図６は、実施形態１に係るバイタル情報管理装置における表示の一例を示す図（その２）である。

【図7】図７は、実施形態１に係るバイタル情報管理装置おける処理手順を示すフローチャートである。

【図8】図８は、実施形態２に係るバイタル情報管理装置の概要の説明図である。

【図9】図９は、図８に示したバイタル情報管理装置の構成を示す機能ブロック図である。

【図10】図１０は、実施形態２に係る健康状態推定モデル生成の処理手順を示すフローチャートである。

【図11】図１１は、実施形態３に係るバイタル情報管理システムの概要の説明図である。

【図12】図１２は、実施形態４に係るバイタル情報管理システムの概要の説明図である。

【発明を実施するための形態】

【0018】

［実施形態１］
以下に、本実施形態１に係るバイタル情報管理装置、バイタル情報管理システム及びバイタル情報管理方法を図面に基づいて詳細に説明する。

【0019】

＜実施形態１に係るバイタル情報管理装置１０の概要＞
まず、本実施形態１に係るバイタル情報管理装置１０の概要について説明する。図１は、本実施形態１に係るバイタル情報管理装置１０の概要を説明するための説明図である。本実施形態１に係るバイタル情報管理装置１０は、内蔵するカメラで使用者の顔動画を撮影したならば（Ｓ１）、ＲＰＰＧにより使用者のバイタルデータを推定する（Ｓ２）。例えば、心拍が７０回／分であり、血圧が１６３／９８ｍｍＨｇであると推定する。

【0020】

推定したバイタルデータが標準値から外れていた場合は、医療機器による測定を促す（Ｓ３）。例えば、「血圧が標準値から外れています。医療機器で再測定しますか。」と表示する。

【0021】

このように、本実施形態１に係るバイタル情報管理装置では、撮影した顔の動画を用いて推定したバイタルデータが標準値から外れていた場合、医療機器での測定を促すよう構成したので、バイタル情報の推定値と利用者の紐づけを効率良く行うとともに、対象者のバイタル情報を医療機器で測定すべきか否かを推奨することができる。

【0022】

＜バイタル情報管理装置１０の構成＞
次に、バイタル情報管理装置１０の構成について説明する。図２は、図１に示したバイタル情報管理装置１０の構成を示す機能ブロック図である。図２に示すように、バイタル情報管理装置１０は、表示操作部１１、カメラ１２、スピーカ１３、通信部１４、記憶部１５及び制御部１６を有する。

【0023】

表示操作部１１は、タッチパネルディスプレイ等の入出力デバイスである。カメラ１２は、使用者の顔の動画を撮影するための入力デバイスである。スピーカ１３は、使用者に注意喚起するための音声を発生する出力デバイスである。通信部１４は、インターネットとデータ通信するためのインタフェース部である。

【0024】

記憶部１５は、不揮発性メモリ等からなる記憶デバイスであり、認証データ１５ａ、標準データ１５ｂ、顔動画データ１５ｃ及びバイタルデータ１５ｄを記憶する。

【0025】

認証データ１５ａは、使用者の認証に使用するデータである。標準データ１５ｂは、バイタルデータの標準値を示すデータである。顔動画データ１５ｃは、使用者の顔を撮影した動画データである。バイタルデータ１５ｄは、顔動画データ１５ｃを用いて推定したバイタルデータを示すデータである。

【0026】

制御部１６は、バイタル情報管理装置１０の全体制御を行う制御部であり、認証登録部１６ａ、設定部１６ｂ、認証部１６ｃ、顔動画取得部１６ｄ、バイタルデータ推定部１６ｅ、判定部１６ｆ及びバイタルデータ取得部１６ｇを有する。実際には、これらのプログラムをＣＰＵ（Central Processing Unit）にロードして実行することにより、認証登録部１６ａ、設定部１６ｂ、認証部１６ｃ、顔動画取得部１６ｄ、バイタルデータ推定部１６ｅ、判定部１６ｆ及びバイタルデータ取得部１６ｇにそれぞれ対応するプロセスを実行させることになる。

【0027】

認証登録部１６ａは、認証データ１５ａを管理する処理部である。認証登録部１６ａは、カメラ１２から認証データである顔画像を受け付け、続けて表示操作部１１から氏名データを受け付けたならば、一意の識別ＩＤを生成し、この識別ＩＤと受け付けた各データを対応付けて認証データ１５ａに記憶する。

【0028】

設定部１６ｂは、標準データ１５ｂを管理する処理部である。設定部１６ｂは、表示操作部１１からバイタルデータの標準値データを受け付けたならば、受け付けたデータを標準データ１５ｂに記憶する。

【0029】

認証部１６ｃは、認証処理を行う処理部である。認証部１６ｃは、表示操作部１１から認証操作を受け付けたならば、カメラ１２により使用者の顔画像の撮影を行い、撮影した画像データ及び認証データ１５ａを用いて認証を行う。そして、認証が成功したならば、認証データ１５ａから認証した画像データに対応する識別ＩＤを特定するとともに、表示操作部１１にＲＰＰＧ受付画面を表示する。

【0030】

顔動画取得部１６ｄは、顔動画を取得し、顔動画データ１５ｃを管理する処理部である。顔動画取得部１６ｄは、表示操作部１１に表示したＲＰＰＧ受付画面においてＲＰＰＧ計測操作を受け付けたならば、カメラ１２により使用者の顔の動画撮影を行い、この動画を顔動画データ１５ｃに記憶する。なお、顔動画を撮影中は、表示操作部１１に顔動画撮影中画面を表示する。

【0031】

バイタルデータ推定部１６ｅは、バイタルデータを推定し、バイタルデータ１５ｄを管理する処理部である。バイタルデータ推定部１６ｅは、顔動画取得部１６ｄにより顔動画データ１５ｃが生成されたならば、この顔動画データ１５ｃを用いてＲＰＰＧによりバイタルデータを推定する。そして、推定したデータをバイタルデータ表示画面に表示するとともに、認証部１６ｃにおいて特定した識別ＩＤに対応付けてバイタルデータ１５ｄに記憶する。この際、計測区分を「ＲＰＰＧ」として記憶する。なお、使用者の認証を行う機能部は、クラウド上に構成してもよい。

【0032】

判定部１６ｆは、バイタルデータ１５ｄが標準値に含まれるか否かを判定する処理部である。判定部１６ｆは、バイタルデータ推定部１６ｅによりバイタルデータ１５ｄが生成されたならば、この生成データと標準データ１５ｂとを比較する。そして、生成データが標準データ１５ｂに含まれない場合には、医療機器での測定を促す内容をバイタルデータ表示画面に表示する。

【0033】

バイタルデータ取得部１６ｇは、バイタルデータの入力を受け付ける処理部である。バイタルデータ取得部１６ｇは、表示操作部１１に表示したバイタルデータ表示画面において医療機器での計測を受け付けたならば、バイタルデータ入力画面を表示する。そして、このバイタルデータ入力画面においてバイタルデータの入力を受け付けたならば、受け付けたデータを認証部１６ｃにおいて特定した識別ＩＤに対応付けてバイタルデータ１５ｄに記憶する。この際、計測区分を「医療機器」として記憶する。

【0034】

次に、図２に示したバイタル情報管理装置１０の記憶部１５が記憶するデータの具体例について説明する。図３は、図２に示した認証データ１５ａ、標準データ１５ｂ及びバイタルデータ１５ｄの一例を示す図である。

【0035】

図３（ａ）に示す認証データ１５ａは、識別ＩＤ「ＳＤ０００１」に対して、氏名が「特許太郎」であり、登録画像が「ＳＤ０００１００３．ｊｐｇ」である状態を対応付け、識別ＩＤ「ＳＤ００１５」に対して、氏名が「発明花子」であり、登録画像が「ＳＤ００１５００２．ｊｐｇ」である状態を対応付けている。

【0036】

図３（ｂ）に示す標準データ１５ｂは、心拍が「６５～７５回／分」であり、ＳｐＯ２が「９６～９９％」であり、血圧が「１３９ｍｍＨｇ以下／８９ｍｍＨｇ以下」であり、体温が「３６．９度以下」である状態を示している。

【0037】

図３（ｃ）に示すバイタルデータ１５ｄは、日時「２０２３／０８／０６ ８：１０」に対して、識別ＩＤが「ＳＤ００１５」であり、測定区分が「ＲＰＰＧ」であり、心拍が「７５」回／分であり、ＳｐＯ２が「９６」％であり、血圧が「１３０／８０」ｍｍＨｇであり、体温が「３６．２」度である状態を対応付けている。

【0038】

また、バイタルデータ１５ｄは、日時「２０２３／０８／０６ ８：１５」に対して、識別ＩＤが「ＳＤ０００１」であり、測定区分が「ＲＰＰＧ」であり、心拍が「７０」回／分であり、ＳｐＯ２が「９８」％であり、血圧が「１４５／９５」ｍｍＨｇであり、体温が「３６．６」度である状態を対応付けている。

【0039】

また、バイタルデータ１５ｄは、日時「２０２３／０８／０６ ８：３０」に対して、識別ＩＤが「ＳＤ０００１」であり、測定区分が「医療機器」であり、心拍が「－」であり、ＳｐＯ２が「－」であり、血圧が「１３８／８９」ｍｍＨｇであり、体温が「－」である状態を対応付けている。

【0040】

＜実施形態１に係る光電脈波法の概要＞
次に、本実施形態１においてバイタルデータを推定する際に使用する光電脈波法の概要について説明する。図４は、本実施形態１に係る光電脈波法の概要の説明図である。

【0041】

図４に示すように、光電脈波法（ＰＰＧ）は、光を使って心拍数や血流量など生体内の情報を得る手法であり、光源からの光が皮膚の表面により鏡面反射し、これをカメラが捉える。また、皮膚の中に入った光がさまざまに反射して皮膚の外に出てくる光が拡散反射であり、これを同様にカメラが捉える。カメラが捉えた皮膚からの鏡面反射及び拡散反射の光の変化及び明暗差等を測定することにより、バイタルデータを推定する。

【0042】

本実施形態１においては、光源及びカメラが撮影対象（皮膚）から数１０ｃｍ離れた非接触式の光電脈波法（ＲＰＰＧ）を用いているが、光源及びカメラが撮影対象（皮膚）に近接する接触式の光電脈波法（ＰＰＧ）と、原理的には同様の手法である。

【0043】

＜実施形態１に係るバイタル情報管理装置１０における表示の一例＞
次に、本実施形態１に係るバイタル情報管理装置１０における表示の一例について説明する。図５及び図６は、本実施形態１に係るバイタル情報管理装置１０における表示の一例を示す図である。

【0044】

図５に示すように、バイタルデータを推定するために顔の動画を撮影する際には顔動画撮影中画面を表示し、この中でカメラからの距離などの注意事項を表示する。具体的には、「マスクを外して、端末から２０～５ｃｍの間隔をとり、顔全体が測定枠に収まるように撮影してください。撮影中は１０秒間程度、できるだけ動かないようにしてください。」と表示する。

【0045】

なお、撮影中には、音声を用いた注意喚起を合わせて行う。具体的には、「あと〇秒」、「もう少しで終わりです」、「動かないようお願いします」と、スピーカ１３から音声で報知する。

【0046】

また、図６に示すように、バイタルデータ表示画面において、バイタルデータの推定結果として、心拍、ＳｐＯ２、血圧及び体温を表示する。例えば、「心拍 ７０回／分」、「ＳｐＯ２ ９８％」、「血圧 １６３／９８ｍｍＨｇ」、「体温 ３６．２度」と表示する。

【0047】

この際、推定したバイタルデータが標準値から外れていた場合には、医療機器での測定を促す表示を行う。例えば、「血圧が標準値から外れています。医療機器で再測定しますか。」と表示する。

【0048】

＜実施形態１に係るバイタル情報管理装置１０おける処理手順＞
次に、本実施形態１に係るバイタル情報管理装置１０おける処理手順について説明する。図７は、本実施形態１に係るバイタル情報管理装置１０おける処理手順を示すフローチャートである。

【0049】

バイタル情報管理装置１０は、顔認証の処理が成功したならば（ステップＳ１０１；Ｙｅｓ）、顔の動画撮影を行う。カメラ１２から、顔動画を取得したならば（ステップＳ１０２；Ｙｅｓ）、取得した顔動画を用いてバイタルデータを推定する（ステップＳ１０３）。

【0050】

推定したバイタルデータが標準値内であるならば（ステップＳ１０４；Ｙｅｓ）、そのまま処理を終了する。推定したバイタルデータが標準値から外れているならば（ステップＳ１０４；Ｎｏ）、医療機器による測定を促す表示を行う（ステップＳ１０５）。

【0051】

医療機器による測定を行わないならば（ステップＳ１０６；Ｎｏ）、そのまま処理を終了する。医療機器による測定を行うならば（ステップＳ１０６；Ｙｅｓ）、測定結果を受け付けて記憶し（ステップＳ１０７）、処理を終了する。

【0052】

上述してきたように、本実施形態１に係るバイタル情報管理装置では、撮影した顔の動画を用いて推定したバイタルデータが標準値から外れていた場合、医療機器での測定を促すよう構成したので、バイタル情報の推定値と利用者の紐づけを効率良く行うとともに、対象者のバイタル情報を医療機器で測定すべきか否かを推奨することができる。

【0053】

なお、上記の実施形態１では、医療機器によって計測したバイタルデータを手入力によってバイタル情報管理装置に入力する構成について説明したが、本発明はこれに限定されるものではない。医療機器とバイタル情報管理装置をＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線通信によって通信可能に接続することにより、医療機器で計測したバイタルデータを自動的にバイタル情報管理装置に送信するよう構成することもできる。

【0054】

また、上記の実施形態１では、撮影した顔の動画を用いてバイタルデータを推定する構成について説明したが、本発明はこれに限定されるものではない。撮影した顔の動画を用いて推定したバイタルデータを蓄積し、この蓄積したバイタルデータを訓練データとして訓練したバイタル情報推定モデルを用いて、バイタル情報を推定するよう構成することもできる。

【0055】

［実施形態２］
ところで、上記の実施形態１では、撮影した顔の動画を用いてバイタルデータを推定する構成について説明したが、本発明はこれに限定されるものではない。撮影した顔の動画を蓄積し、この蓄積した動画データを訓練データとして訓練した健康状態推定モデルを用いて健康状態を推定し、この推定結果を用いて対象者のバイタル情報を医療機器で測定すべきか否かを推奨することもできる。本実施形態２では、撮影した顔の動画を蓄積し、この蓄積した動画データを訓練データとして訓練した健康状態推定モデルを用いて健康状態を推定し、この推定結果を用いて対象者のバイタル情報を医療機器で測定すべきか否かを推奨するバイタル情報管理装置について説明する。

【0056】

＜実施形態２に係るバイタル情報管理装置２０の概要＞
本実施形態２に係るバイタル情報管理装置２０の概要について説明する。図８は、本実施形態２に係るバイタル情報管理装置２０の概要の説明図である。

【0057】

図８に示すように、本実施形態２に係るバイタル情報管理装置２０では、使用者の顔動画を撮影する（Ｓ１１）。そして、撮影した顔動画及び健康状態推定モデルを用いて、使用者の健康状態を推定する（Ｓ１２）。健康状態推定モデルは、事前に撮影した使用者の顔動画を蓄積し、この蓄積した動画データを訓練データとして訓練することにより生成する。

【0058】

推定した健康状態が所定の健康状態から外れていた場合には、医療機器による測定を促す（Ｓ１３）。例えば、「健康状態が優れていないようです。医療機器で再測定しますか。」と表示する。

【0059】

このように、本実施形態２に係るバイタル情報管理装置２０では、撮影した顔の動画を蓄積し、この蓄積した動画データを訓練データとして訓練した健康状態推定モデルを用いて健康状態を推定し、この推定結果を用いて対象者のバイタル情報を医療機器で測定すべきか否かを推奨することができる。

【0060】

＜バイタル情報管理装置２０の構成＞
次に、バイタル情報管理装置２０の構成について説明する。図９は、図８に示したバイタル情報管理装置２０の構成を示す機能ブロック図である。図９に示すように、バイタル情報管理装置２０は、表示操作部１１、カメラ１２、スピーカ１３、通信部１４、記憶部２５及び制御部２６を有する。
なお、図２に示したバイタル情報管理装置１０と同様の機能部についての説明は省略する。

【0061】

記憶部２５は、不揮発性メモリ等からなる記憶デバイスであり、認証データ１５ａ、標準データ１５ｂ、顔動画データ１５ｃ、バイタルデータ１５ｄ及び訓練データ２５ａを記憶する。訓練データ２５ａは、顔動画データ１５ｃを蓄積したデータであり、健康状態推定モデルの訓練のために使用する。

【0062】

制御部２６は、バイタル情報管理装置２０の全体制御を行う制御部であり、認証登録部１６ａ、設定部１６ｂ、認証部１６ｃ、顔動画取得部１６ｄ、バイタルデータ推定部１６ｅ、訓練データ収集部２６ａ、モデル訓練部２６ｂ、健康状態推定部２６ｃ、判定部２６ｄ及びバイタルデータ取得部１６ｇを有する。実際には、これらのプログラムをＣＰＵにロードして実行することにより、認証登録部１６ａ、設定部１６ｂ、認証部１６ｃ、顔動画取得部１６ｄ、バイタルデータ推定部１６ｅ、訓練データ収集部２６ａ、モデル訓練部２６ｂ、健康状態推定部２６ｃ、判定部２６ｄ及びバイタルデータ取得部１６ｇにそれぞれ対応するプロセスを実行させることになる。

【0063】

訓練データ収集部２６ａは、訓練データ２５ａを管理する処理部である。訓練データ収集部２６ａは、顔動画データ１５ｃが更新されたならば、この顔動画データ１５ｃを訓練データ２５ａに追加して更新する。

【0064】

モデル訓練部２６ｂは、健康状態推定モデルを生成する処理部である。モデル訓練部２６ｂは、表示操作部１１から訓練開始操作を受け付けたならば、訓練データ２５ａを用いて訓練を行い、健康状態推定モデルを生成する。

【0065】

健康状態推定部２６ｃは、健康状態推定モデルを用いて健康状態を推定する処理部である。健康状態推定部２６ｃは、顔動画データ１５ｃが更新されたならば、この顔動画データ１５ｃ及び健康状態推定モデルを用いて、健康状態を推定する。そして、推定した健康状態を示すアイコンを表示操作部１１に表示する。健康状態推定モデルでは、例えば、健康、やや健康、やや不健康、不健康の区分で健康状態を推定する。

【0066】

判定部２６ｄは、推定したバイタルデータ及び健康状態が所定の範囲に含まれるか否かを判定する処理部である。判定部２６ｄは、バイタルデータ推定部１６ｅによりバイタルデータ１５ｄが生成されたならば、この生成データと標準データ１５ｂとを比較する。そして、生成データが標準データ１５ｂに含まれない場合には、医療機器での測定を促す内容をバイタルデータ表示画面に表示する。また、健康状態推定モデルにより推定した健康状態が所定の健康状態（例えば、健康又はやや健康）でなかった場合には、医療機器での測定を促す内容をバイタルデータ表示画面に表示する。

【0067】

＜実施形態２に係る健康状態推定モデル生成の処理手順＞
次に、本実施形態２に係る健康状態推定モデル生成の処理手順について説明する。図１０は、本実施形態２に係る健康状態推定モデル生成の処理手順を示すフローチャートである。

【0068】

バイタル情報管理装置２０は、顔動画データを取得したならば（ステップＳ２０１）、取得した顔動画データを訓練データ２５ａに追加して更新する（ステップＳ２０２）。

【0069】

訓練を行わない場合は（ステップＳ２０３；Ｎｏ）、ステップＳ２０１に移行する。訓練を行う場合は（ステップＳ２０３；Ｙｅｓ）、訓練データ２５ａを用いて訓練を行い、健康状態推定モデルを生成し（ステップＳ２０４）、処理を終了する。

【0070】

上述してきたように、本実施形態２に係るバイタル情報管理装置では、撮影した顔の動画を蓄積し、この蓄積した動画データを訓練データとして訓練した健康状態推定モデルを用いて健康状態を推定し、この推定結果を用いて対象者のバイタル情報を医療機器で測定すべきか否かを推奨することができる。

【0071】

なお、上記の実施形態２では、撮影した顔動画を蓄積して訓練データとし、この訓練データを用いて健康状態推定モデルを生成する構成について説明したが、本発明はこれに限定されるものではない。撮影した顔動画及び音声データを蓄積して訓練データとし、この訓練データを用いて健康状態推定モデルを生成するよう構成することもできる。

【0072】

［実施形態３］
ところで、上記の実施形態１では、携帯端末等のバイタル情報管理装置において、撮影した顔の動画を用いたバイタルデータの推定を行う構成について説明したが、本発明はこれに限定されるものではない。クラウドやネットワーク上のサーバにおいて、撮影した顔の動画を用いたバイタルデータの推定を行い、このバイタルデータをバイタル情報管理装置において表示するよう構成することもできる。本実施形態３では、クラウドやネットワーク上のサーバにおいて、撮影した顔の動画を用いたバイタルデータの推定を行い、このバイタルデータをバイタル情報管理装置において表示するバイタル情報管理システムについて説明する。

【0073】

＜実施形態３に係るバイタル情報管理システムの概要＞
本実施形態３に係るバイタル情報管理システムの概要について説明する。図１１は、本実施形態３に係るバイタル情報管理システムの概要の説明図である。

【0074】

図１１に示すように、本実施形態３に係るバイタル情報管理システムでは、バイタル情報管理装置１００で使用者の顔動画を撮影する（Ｓ２１）。そして、撮影した顔動画をサーバ２００に送信する（Ｓ２２）。

【0075】

サーバ２００は、受信した顔動画を用いてバイタルデータを推定し（Ｓ２３）、このバイタルデータをバイタル情報管理装置１００に送信する（Ｓ２４）。バイタル情報管理装置１００は、受信したバイタルデータを表示する（Ｓ２５）。この際、バイタルデータが標準値から外れていた場合は、医療機器による測定を促す。

【0076】

医療機器による測定を行ったならば、測定結果をバイタル情報管理装置１００に入力する。この際、計測者や被験者のコメント等を記録するため、テキスト、写真、音声（計測者、被験者の肉声）等をバイタル情報管理装置１００に保存蓄積できるようしてもよい。

【0077】

このように、本実施形態３に係るバイタル情報管理システムでは、クラウドやネットワーク上のサーバにおいて、撮影した顔の動画を用いたバイタルデータの推定を行い、このバイタルデータをバイタル情報管理装置において表示することができる。

【0078】

ここでは、バイタル情報の推定を中心に説明したが、サーバ２００は、顔動画に基づいてバイタル情報を推定するとともに、顔動画に含まれる顔画像の顔認証を行い、バイタル情報管理装置１００から所定の操作を受け付けた旨の通知を受けた場合に、推定されたバイタル情報を顔認証された利用者の識別情報に対応付けて記憶部に記憶するよう構成することもできる。

【0079】

［実施形態４］
ところで、上記の実施形態２では、携帯端末等のバイタル情報管理装置において、撮影した顔の動画を蓄積し、この蓄積した動画データを訓練データとして訓練した健康状態推定モデルを用いて健康状態の推定を行う構成について説明したが、本発明はこれに限定されるものではない。クラウドやネットワーク上のサーバにおいて、蓄積した顔の動画データを訓練データとして訓練した健康状態推定モデルを用いて健康状態の推定を行い、この推定した健康状態情報をバイタル情報管理装置において表示するよう構成することもできる。本実施形態４では、クラウドやネットワーク上のサーバにおいて、蓄積した顔の動画データを訓練データとして訓練した健康状態推定モデルを用いて健康状態の推定を行い、この推定した健康状態情報をバイタル情報管理装置において表示するバイタル情報管理システムについて説明する。

【0080】

＜実施形態４に係るバイタル情報管理システムの概要＞
本実施形態４に係るバイタル情報管理システムの概要について説明する。図１２は、本実施形態４に係るバイタル情報管理システムの概要の説明図である。

【0081】

図１２に示すように、本実施形態４に係るバイタル情報管理システムでは、バイタル情報管理装置３００で使用者の顔動画を撮影する（Ｓ３１）。そして、撮影した顔動画をサーバ４００に送信する（Ｓ３２）。

【0082】

サーバ４００は、受信した顔動画を用いて健康状態を推定し（Ｓ３３）、この健康状態情報をバイタル情報管理装置３００に送信する（Ｓ３４）。バイタル情報管理装置３００は、受信した健康状態情報を表示する（Ｓ３５）。この際、推定した健康状態が所定の健康状態から外れていた場合には、医療機器による測定を促す。

【0083】

医療機器による測定を行ったならば、測定結果をバイタル情報管理装置３００に入力する。この際、計測者や被験者のコメント等を記録するため、テキスト、写真、音声（計測者、被験者の肉声）等をバイタル情報管理装置３００又はサーバ４００に保存蓄積できるようしてもよい。

【0084】

このように、本実施形態４に係るバイタル情報管理システムでは、クラウドやネットワーク上のサーバにおいて、蓄積した顔の動画データを訓練データとして訓練した健康状態推定モデルを用いて健康状態の推定を行い、この推定した健康状態情報をバイタル情報管理装置において表示することができる。

【0085】

ここでは、健康状態情報の推定を中心に説明したが、サーバ４００は、顔動画に基づいて健康状態情報を推定するとともに、顔動画に含まれる顔画像の顔認証を行い、バイタル情報管理装置３００から所定の操作を受け付けた旨の通知を受けた場合に、推定された健康状態情報を顔認証された利用者の識別情報に対応付けて記憶部に記憶するよう構成することもできる。

【0086】

なお、上記の各実施形態で図示した各構成は機能概略的なものであり、必ずしも物理的に図示の構成をされていることを要しない。すなわち、各装置の分散・統合の形態は図示のものに限られず、その全部又は一部を各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。

【産業上の利用可能性】

【0087】

本発明に係るバイタル情報管理装置、バイタル情報管理システム及びバイタル情報管理方法は、バイタル情報の推定値と利用者の紐づけを効率良く行うとともに、対象者のバイタル情報を医療機器で測定すべきか否かを推奨する場合に適している。

【符号の説明】

【0088】

１０ バイタル情報管理装置
１１ 表示操作部
１２ カメラ
１３ スピーカ
１４ 通信部
１５ 記憶部
１５ａ 認証データ
１５ｂ 標準データ
１５ｃ 顔動画データ
１５ｄ バイタルデータ
１６ 制御部
１６ａ 認証登録部
１６ｂ 設定部
１６ｃ 認証部
１６ｄ 顔動画取得部
１６ｅ バイタルデータ推定部
１６ｆ 判定部
１６ｇ バイタルデータ取得部
２０ バイタル情報管理装置
２５ 記憶部
２５ａ 訓練データ
２６ 制御部
２６ａ 訓練データ収集部
２６ｂ モデル訓練部
２６ｃ 健康状態推定部
２６ｄ 判定部
１００ バイタル情報管理装置
２００ サーバ
３００ バイタル情報管理装置
４００ サーバ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】