特開 2024-92725 管理装置、ウェアラブル端末、および管理方法、並びにプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024092725

(43)【公開日】2024-07-08

(54)【発明の名称】管理装置、ウェアラブル端末、および管理方法、並びにプログラム

(51)【国際特許分類】

   G16H 20/60 20180101AFI20240701BHJP

【ＦＩ】

G16H20/60

【審査請求】未請求

【請求項の数】5

【出願形態】ＯＬ

(21)【出願番号】P 2022208858

(22)【出願日】2022-12-26

(71)【出願人】

【識別番号】308036402

【氏名又は名称】株式会社ＪＶＣケンウッド

(74)【代理人】

【識別番号】110000121

【氏名又は名称】ＩＡＴ弁理士法人

(72)【発明者】

【氏名】池田 航

【テーマコード（参考）】

5L099

【Ｆターム（参考）】

5L099AA15

(57)【要約】

【課題】単位時間における摂取カロリーを管理する。
【解決手段】ＡＲグラス１は、ユーザの飲食を撮影した映像に基づいて、所定の単位時間（例えば、１分間）当たりのユーザが摂取した飲食物のカロリーを算出するカロリー算出部２２と、カロリー算出部により算出された単位時間当たりのユーザが摂取した飲食物のカロリーが閾値を超えた場合、ユーザに警告を出力し、飲食が終了したか否かを判定する管理部２３とを有し、カロリー算出部と管理部は、その処理を飲食が終了したと判定されるまで繰り返す。
【選択図】図２

【特許請求の範囲】

【請求項1】

ユーザの飲食を撮影した映像に基づいて、所定の単位時間当たりの前記ユーザが摂取した飲食物のカロリーを算出するカロリー算出部と、
前記カロリー算出部により算出された前記単位時間当たりの前記ユーザが摂取した飲食物のカロリーが閾値を超えた場合、前記ユーザに警告を出力し、前記飲食が終了したか否かを判定する管理部と
を有し、
前記カロリー算出部と前記管理部は、その処理を前記飲食が終了したと判定されるまで繰り返す
ことを特徴とする管理装置。

【請求項2】

請求項１に記載の管理装置であって、
前記管理部は、前記飲食の時間経過に基づいて、前記閾値を減少させる
ことを特徴とする管理装置。

【請求項3】

請求項１または２に記載の管理装置であって、
前記管理部は、前記飲食の進んでいる度合いを進行度として算出し、前記進行度に基づいて前記閾値を減少させる
ことを特徴とする管理装置。

【請求項4】

請求項１または２に記載の管理装置を備えたウェアラブル端末であって、
前記ユーザに前記ウェアラブル端末が装着された状態で、前記ユーザの両眼または一方の眼の前方に配置される表示部を有し、
前記管理部により出力された前記警告を、前記表示部に表示する
ことを特徴とするウェアラブル端末。

【請求項5】

食事を管理する管理装置が実行する管理方法であって、
ユーザの飲食を撮影した映像に基づいて、所定の単位時間当たりの前記ユーザが摂取した飲食物のカロリーを算出するカロリー算出ステップと、
前記カロリー算出ステップの処理により算出された前記単位時間当たりの前記ユーザが摂取した前記飲食物のカロリーが閾値を超えた場合、前記ユーザに警告を出力する出力ステップと、
前記飲食が終了したか否かを判定する判定ステップと
を含み、
前記カロリー算出ステップと前記出力ステップの処理は、前記判定ステップにより前記飲食が終了したと判定されるまで繰り返される
ことを特徴とする管理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、管理装置、ウェアラブル端末、および管理方法、並びにプログラムに関する。

【背景技術】

【0002】

従来、端末に搭載されているカメラ等を用いて料理等の静止画像を撮影し、料理の摂取カロリーや栄養価などを計算する技術がある（例えば、特許文献１）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００４－１１８５６２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

ところで、一般に、食事のスピードを遅くすることで、膵臓からインスリンが適切に分泌され、血糖値の上がり方が緩やかになる。

【0005】

上述した特許文献１の技術を用いることにより、食事の総カロリーを得ることが可能である。しかしながら、これらの技術を利用した場合においても、食事のスピードに関して管理することはできない。

【0006】

本発明は、かかる問題に鑑みてなされたものであり、単位時間における摂取カロリーを管理することを可能とする、管理装置、ウェアラブル端末、および管理方法、並びにプログラムを提供するものである。

【課題を解決するための手段】

【0007】

本発明の一側面の管理装置は、ユーザの飲食を撮影した映像に基づいて、所定の単位時間当たりのユーザが摂取した飲食物のカロリーを算出するカロリー算出部と、カロリー算出部により算出された単位時間当たりのユーザが摂取した飲食物のカロリーが閾値を超えた場合、ユーザに警告を出力し、飲食が終了したか否かを判定する管理部とを有し、カロリー算出部と管理部は、その処理を飲食が終了したと判定されるまで繰り返すことを特徴とする。

【0008】

本発明の一側面の管理装置方法は、食事を管理する管理装置が実行する管理方法であって、ユーザの飲食を撮影した映像に基づいて、所定の単位時間当たりのユーザが摂取した飲食物のカロリーを算出するカロリー算出ステップと、カロリー算出ステップの処理により算出された単位時間当たりのユーザが摂取した飲食物のカロリーが閾値を超えた場合、ユーザに警告を出力する出力ステップと、飲食が終了したか否かを判定する判定ステップとを含み、カロリー算出ステップと出力ステップの処理は、判定ステップにより飲食が終了したと判定されるまで繰り返されることを特徴とする。

【発明の効果】

【0009】

本発明によると、単位時間における摂取カロリーを管理することができる。

【図面の簡単な説明】

【0010】

【図1】図１は、ＡＲグラス１の外観構成および利用例を示す図である。

【図2】図２は、ＡＲグラス１の内部構成を示すブロック図である。

【図3】図３は、ＡＲグラス１の動作を説明するためのフローチャートである。

【図4】図４は、ＡＲグラス１の動作を説明するためのフローチャートである。

【図5】図５は、適切な順番で食事をするために用いられる閾値の変更について説明するための図である。

【図6】図６は、摂取カロリースピードに関する閾値の変更について説明するための図である。

【図7】図７は、今回の食事の取り方に関する情報の例を示す図である。

【図8】図８は、今回の食事の取り方に関する情報の他の例を示す図である。

【発明を実施するための形態】

【0011】

［一実施の形態］
図１は、本発明の一実施の形態に係るＡＲ（Augmented Reality）グラス１の外観構成および利用例を示す図である。

【0012】

ＡＲグラス１は、図１に示すように両耳殻にかけられることでユーザに装着される。

【0013】

ＡＲグラス１は、装着状態において、ユーザの両眼の前方に、左眼用と右眼用の一対の表示部１１が配置される構成となっている。表示部１１には、例えば撮影部１２で撮像された現実空間の撮影画像が表示される。また、表示部１１は透過型であってもよい。

【0014】

ＡＲグラス１には、図１に示すように、ユーザに装着された状態で、ユーザが視認する方向を被写体方向として撮像するように、前方に向けて撮影部１２が配置されている。

【0015】

ＡＲグラス１には、装着状態でユーザの右耳孔および左耳孔に挿入できるスピーカからなる音声出力部１３が設けられる。

【0016】

なお、図１に示すＡＲグラス１の外観は一例であり、ＡＲグラス１をユーザが装着するための構造は多様に考えられる。

【0017】

ＡＲグラス１は、例えば、テーブルに配膳された料理の飲食物がユーザの口元に運ばれる様子を撮影し、得られた映像に基づいて、ユーザが摂取した飲食物に含まれる栄養素を測定する。そしてＡＲグラス１は、その測定結果に基づいて、所定の第１の栄養素が所定の閾値よりも多い飲食物から摂取を開始し、第１の栄養素を所定量摂取したのちに、第２の栄養素が所定の閾値よりも多い飲食物を食べ始めるように、飲食物の摂取の順番を決定し、その順番を、表示部１１または音声出力部１３を介してユーザに案内する。

【0018】

ＡＲグラス１は、例えば、テーブルに配膳された料理の飲食物がユーザの口元に運ばれる様子を撮影し、得られた映像に基づいて、食事中に複数回測定可能な所定の単位時間当たりのユーザが摂取した飲食物のカロリーを算出する。そしてＡＲグラス１は、算出した単位時間当たりのユーザが摂取した飲食物のカロリーが閾値を超えた場合、表示部１１または音声出力部１３を介してユーザに警告する。

【0019】

［ＡＲグラス１の内部構成］
図２は、ＡＲグラス１の内部構成を示すブロック図である。ＡＲグラス１は、表示部１１、撮影部１２、音声出力部１３、制御部１４、および記憶部１５を含んで構成されている。

【0020】

表示部１１は、制御部１４による制御に基づいて、撮影部１２により撮影された映像や、制御部１４から出力された警告情報および飲食物の摂取の順番を案内する案内情報を表示する。なお表示部１１には、撮影画像をリアルタイムで表示し、さらに警告情報や案内情報を、表示した撮影映像中の各飲食物の位置に対応するよう重畳表示することもできる。また、表示部１１は、表示部１１をスルー状態にした上で（撮影した映像の表示は行わず）、実空間に存在する飲食物の位置に対応するよう、警告情報や案内情報を表示することができる。

【0021】

撮影部１２は、例えばビデオカメラであり、ユーザが飲食する料理やユーザが飲食する動作などの、ユーザの飲食を撮影し、撮影した映像を制御部１４に出力する。

【0022】

音声出力部１３は、例えばイヤホンスピーカを有し、制御部１４による制御に基づいて、音声信号データを出力（再生）する。

【0023】

管理装置としての制御部１４は、図示は省略するが、制御部１４は、ＣＰＵ（Central Processing Unit）、記憶部位（ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、不揮発メモリ等）、ハードウェアを含む、その他の要素から構成される。

【0024】

記憶部１５は、記憶部位（ＲＯＭ、ＲＡＭ、不揮発メモリ等）から構成される。制御部１４は、記憶部１５に記憶された図示せぬ制御用アプリケーションプログラムを実行することで、ＡＲグラス１全体を制御するとともに、栄養素測定部２１、カロリー算出部２２、および管理部２３として機能する。

【0025】

栄養素測定部２１は、撮影部１２により撮影されたユーザの飲食の映像に基づいて、配膳された料理一品ごと、および全体のたんぱく質(P:Protein)、脂質(F:Fat)、炭水化物(C:Carbohydrate)、並びに食物繊維の含有量を測定する。

【0026】

また、栄養素測定部２１は、撮影部１２により撮影されたユーザの飲食の映像に基づいて、ユーザが摂取した飲食物に含まれる栄養素を測定する。栄養素の測定方法は、いずれの方法であってもよいが、例えば、機械学習による画像解析などを用いることができる。

【0027】

カロリー算出部２２は、撮影部１２により撮影されたユーザの飲食の映像に基づいて、配膳された料理一品ごと、および全体のカロリーを算出する。

【0028】

また、カロリー算出部２２は、撮影部１２により撮影されたユーザの飲食の映像に基づいて、所定の単位時間当たりにユーザが摂取した飲食物のカロリーを算出する。所定時間内にユーザが摂取した飲食物のカロリーは、食事のスピードを示すパラメータとしても用いられる。また、カロリーの算出は、いずれの方法であってもよいが、例えば、機械学習による画像解析などを用いることができる。

【0029】

管理部２３は、栄養素測定部２１による測定結果に基づいて、所定の第１の栄養素が所定の閾値よりも多い飲食物から摂取を開始し、第１の栄養素を所定量摂取したのちに、第２の栄養素が所定の閾値よりも多い飲食物を食べるように、飲食物の摂取の順番を決定し、その順番を、表示部１１または音声出力部１３を介してユーザに案内する。

【0030】

管理部２３は、カロリー算出部２２により算出された単位時間当たりのユーザが摂取した飲食物のカロリーが閾値を超えた場合、表示部１１または音声出力部１３を介してユーザに警告する。

【0031】

管理部２３は、食事の終了後に、ユーザの食事の取り方に関する情報を生成し、表示部１１または音声出力部１３を介して提示する。

【0032】

記憶部１５は、上述した制御用アプリケーションプログラムと、その実行のために必要なユーザ情報１５ａを含む各種データ、これらの処理により生成された情報を記憶する。

【0033】

［ＡＲグラス１の動作］
次に、図３および図４のフローチャートを参照して、ＡＲグラス１の動作について説明する。図１に示したように、テーブルに料理が配膳されており、ＡＲグラス１を装着したユーザは、これらの料理をこれから摂取する状態とする（食事を開始する状態）。その状態において、ステップＳ１において、撮影部１２は、撮影を開始する。撮影部１２はテーブルに配膳された料理を撮影するとともに、飲食物がユーザの口元に運ばれる様子、すなわちユーザの飲食を撮影する。

【0034】

ステップＳ２において、栄養素測定部２１は、撮影部１２により撮影された映像に基づいて、配膳された料理一品ごと、並びに全体のたんぱく質（Ｐ）、脂質（Ｆ）、炭水化物（Ｃ）、および食物繊維の含有量を測定する。また、カロリー算出部２２は、撮影部１２により撮影された映像に基づいて、配膳された料理一品ごと、および全体の総カロリーを算出する。

【0035】

ステップＳ３において、管理部２３は、栄養素測定部２１の測定結果および記憶部１５に記憶されているユーザ情報１５ａに基づいて、配膳された料理のＰＦＣバランスとカロリーが適切であるか否かを判定する。

【0036】

具体的には、管理部２３は、例えば、理想的なＰＦＣバランスを、たんぱく質（Ｐ）：脂質（Ｆ）：炭水化物（Ｃ）＝１．３～２：２～２．５：５～６とし、ステップＳ２で栄養素測定部２１により測定された配膳された料理全体のＰＦＣバランスが理想のＰＦＣバランスの範囲内になっているか否かを判定する。

【0037】

管理部２３はまた、ステップＳ２でカロリー算出部２２により算出された配膳された料理全体の総カロリーが、ユーザ情報１５ａとして記憶されているユーザの推定エネルギー必要量を超えているか否かを判定する。

【0038】

なお推定エネルギー必要量は、基礎代謝量(kcal/日)と身体活動レベルの乗算で算出される。基礎代謝量(kcal/日)は、基礎代謝基準値(kcal/kg/日)と参照体重(kg)の乗算で算出される。身体活動レベルは総エネルギー消費量(kcal/日)を1日あたりの基礎代謝量(kcal/日)で除算することで算出される。すなわち推定エネルギー必要量に代えて、それを算出するためのこれらのパラメータがユーザ情報１５ａとして記憶されるようにし、そのパラメータに基づいて管理部２３がユーザの推定エネルギー必要量を算出してもよい。

【0039】

ステップＳ３で、配膳された料理全体のＰＦＣバランスと総カロリーが適切ではないと判定した場合、ステップＳ４において、管理部２３は、警告のための情報を表示部１１または音声出力部１３を介してユーザに通知する。例えば、「ＰＦＣバランスもカロリーも適正ではありません。脂質を○○％削減するとよいでしょう」、「総カロリー量は問題ありませんが、ＰＦＣバランスが適正ではありません。炭水化物を○○％削減するとよいでしょう」などのメッセージが、表示部１１に表示され、または音声で音声出力部１３から出力される。

【0040】

ステップＳ３で、食事全体のＰＦＣバランスと総カロリーは適切であると判定された場合、または、ステップＳ４で警告がユーザに通知されると、ステップＳ５において、管理部２３は、配膳された料理の摂取の順番を決定し、ユーザに案内する。

【0041】

例えば、最初にたんぱく質（Ｐ）の割合が高い飲食物または食物繊維が多い飲食物を最初に摂取することとする。管理部２３は、図５に示すように、最初に摂取の順番を案内する際、すなわちユーザが飲食物を摂取する前のタイミングにおいては、食物繊維についての閾値Ｅの値を、値ｅ０とし、食物繊維が閾値Ｅ（＝値ｅ０）以上であるサラダを、最初に摂取すべき料理として選択し、それを案内する。なお食物繊維の他、たんぱく質（Ｐ）、脂質（Ｆ）、炭水化物（Ｃ）、および食物繊維についてもそれぞれ閾値Ｅが設けられている。

【0042】

そしてたんぱく質（Ｐ）の割合が高いまたは食物繊維が多い飲食物が食べ始めから所定の量(例えば、半分)以下まで低下したタイミングで、脂質（Ｆ）または炭水化物（Ｃ）の割合が所定の閾値より多い飲食物を摂取することとする。各栄養素の閾値Ｅは、後述するように、ステップＳ１２の処理で、食事が進むにつれて更新されて、次のステップＳ５の処理で、管理部２３は、更新された閾値Ｅに基づいて、摂取する料理を選択し、それを案内する。

【0043】

このようにして決定された、配膳された料理の順番がユーザに案内される。

【0044】

ユーザへの案内の具体例は、決定した食事の順番を、例えば、テキストや音声のメッセージによってユーザに通知される。なお、決定された飲食物の摂取の順番に変更がなければ、新たなテキストや音声のメッセージの通知を省略するものとしてもよい。また、食べてもよい飲食物の個所に対してマーカー等を重畳して表示させたり、まだ食べてはいけない飲食物の個所に対してバツ印等を表示部１１に重畳して表示させたりモザイク処理を施して見難くするなどの処理を施すことにより、ユーザが直感的にわかりやすい方法で、正しい飲食物の順番を提示することも可能である。

【0045】

閾値Ｅの初期値は、実験的経験的に定められるものであっても、ユーザにより適宜設定可能であってもよい。

【0046】

次に、ステップＳ６において、栄養素測定部２１は、撮影部１２により撮影されたユーザの飲食の映像に基づいて、ユーザが摂取した飲食物に含まれるたんぱく質、脂質、炭水化物、および食物繊維の含有量の測定を開始する。具体的には、撮影部１２により撮影されたユーザの飲食の映像のうち、箸やスプーンにより口元に運ばれる飲食物の映像、またはお椀やコップから直接口元に運ばれる飲食物の映像から、その飲食物に含まれる栄養素の含有量が測定される。

【0047】

また、カロリー算出部２２は、撮影部１２により撮影されたユーザの飲食の映像に基づいて、ユーザが飲食物を摂取するごとに、食事中に複数回測定可能な所定の単位時間（例えば、１分間）当たりのユーザが摂取したカロリーの算出を開始する。具体的には、撮影部１２により撮影されたユーザの飲食の映像のうち、箸やスプーンより口元に運ばれる飲食物の映像、またはお椀やコップから直接口元に運ばれる飲食物の映像から、その飲食物のカロリーが算出される。

【0048】

ステップＳ７において、管理部２３は、ステップＳ６で測定されたユーザが摂取した飲食物のＰＦＣバランスが、ステップＳ５で案内した飲食物の摂取順番の場合のＰＦＣバランスに対応しているか否かを比較し、飲食物の摂取の順番が適切であるか否かを判定する。

【0049】

ステップＳ７で、飲食物の摂取の順番が適切ではないと判定した場合、ステップＳ８において、管理部２３は、適切な順番で飲食物を摂取するための情報を、表示部１１または音声出力部１３を介して案内する。例えば、管理部２３は、警告メッセージや警告音などで注意喚起を行うためのデータを生成し、表示部１１または音声出力部１３を介して出力する。具体的には、表示部１１に、食べてもよい料理の個所に対してマーカー等を重畳して表示させたり、まだ食べてはいけない料理の個所に対してバツ印等を重畳して表示させたりモザイク処理を施して見難くするなどの処理を施すことにより、ユーザが直感的にわかりやすい方法で、正しい食事の順番を提示することも可能である。

【0050】

ステップＳ７で、食事の順番は適切であると判定された場合、または、ステップＳ８で適切な順番で飲食物を摂取するための情報が案内された後、ステップＳ９において、管理部２３は、ステップＳ６でカロリー算出部２２により算出された単位時間当たりのユーザが摂取した飲食物のカロリー（以下、適宜、カロリー摂取スピードと称する）が所定の閾値より大きいか否かを判定する。

【0051】

一般的に、１分間に30kcal以下のカロリー摂取スピードが推奨されているが、例えば、空腹時においては、食事の最初の方では、食事スピードが速くなり、カロリー摂取スピードも推奨スピードより速くなることが予想される。そこで、図６に示すように、食事開始の際にはカロリー摂取スピードの閾値Ｓの値（＝値ｓ０）を大きなものとする。そしてカロリー摂取スピードの閾値Ｓは、後述するように、ステップＳ１２の処理で、食事が進むにつれて理想値に近づくように変更される（値ｓ１，・・・）。

【0052】

ステップＳ９において、カロリー摂取スピードが適切でないと判定した場合、ステップＳ１０において、管理部２３は、カロリー摂取スピードを適切なものにするための情報を、表示部１１または音声出力部１３を介して案内する。例えば、警告メッセージが表示部１１に表示され、警告音が音声出力部１３から出力される。

【0053】

ステップＳ９で、カロリー摂取スピードは適切であると判定された場合、または、ステップＳ１０で、カロリー摂取スピードを適切なものにするための情報が案内された後、ステップＳ１１において、管理部２３は、食事が終了したか否かを判定する。例えば、撮影部１２により撮影された映像に飲食物の映像が含まれなくなった場合、管理部２３は食事が終了したと判定する。管理部２３は、所定の時間以上、ユーザの口元に運ばれる飲食物の映像が撮影部１２により撮影されなかった場合、食事が終了したと判定してもよい。

【0054】

ステップＳ１１で、食事が終了していないと判定された場合、ステップＳ１２において、管理部２３は、飲食物の摂取の順番を決める基準となるたんぱく質（Ｐ）、脂質（Ｆ）、炭水化物（Ｃ）、および食物繊維についても閾値Ｅの値が変更される。例えば図５の例では、食物繊維の閾値Ｅの値が、値ｅ０から値ｅ１（ｅ０＞ｅ１）に変更される。

【0055】

また摂取カロリースピードの閾値Ｓが、図６に示すように、値ｓ０から値ｓ１（ｓ０＞ｓ１）に変更される。

【0056】

管理部２３は、閾値Ｅと閾値Ｓの一方を更新してもよいし、閾値Ｅと閾値Ｓの両方を更新してもよい。管理部２３は、閾値Ｅと閾値Ｓの両方について、同じタイミングで更新してもよいし、異なるタイミングで更新してもよい。

【0057】

管理部２３は、食事が終了していないと判定した場合、すぐに閾値Ｅ，Ｓを更新してもよいし、一定時間の後に閾値Ｅ，Ｓを更新してもよい。管理部２３は、食事が終了していないと判定した場合のうち、数回に1回の割合で閾値Ｅ，Ｓを更新してもよい。

【0058】

管理部２３は、食事が終了したか否かを判定しなくてもよい。管理部２３は、所定の時間が経過したら閾値Ｅ，Ｓを更新してもよい。所定の時間は１分でもよいし、一定の時間でもよいし、ランダムでもよい。つまり、管理部２３は、食事の時間経過に基づいて、閾値Ｅ，Ｓを更新してもよい。

【0059】

管理部２３は、食事が進んでいるか否かを判定し、食事が進んでいたら閾値Ｅ，Ｓを更新してもよい。管理部２３は、食事の進んでいる度合いを進行度として算出し、進行度に基づいて閾値Ｅ，Ｓを更新してもよい。管理部２３は、進行度が所定値を超えたら、閾値Ｅ，Ｓを更新してもよい。つまり、管理部２３は、進行度に基づいて、閾値Ｅ，Ｓを更新してもよい。

【0060】

管理部２３は、栄養素測定部２１が測定した料理全体の栄養素とその時点までにユーザが摂取した栄養素との割合に基づいて、進行度を算出してもよい。管理部２３は、カロリー算出部２２が算出した料理全体のカロリーとその時点までにユーザが摂取したカロリーとの割合に基づいて、進行度を算出してもよい。管理部２３は、栄養素測定部２１が測定した料理全体の栄養素とその時点までにユーザが摂取した栄養素、およびカロリー算出部２２が算出した料理全体のカロリーとその時点までにユーザが摂取したカロリーに基づいて、進行度を算出してもよい。

【0061】

その後、処理は、ステップＳ５に戻り、それ以降の処理が実行される。つまり、管理部２３は、食事が終了したと判定されるまで、ステップＳ５からステップＳ１２の処理を繰り返す。すなわち更新された栄養素の閾値Ｅで料理の摂取順番が決定される。このように閾値Ｅを更新するようにしたので、図５の例では、次に、食物繊維の含有量が値ｅ０より少ないが、値ｅ１以上有するレバニラが次に摂取可能な料理として案内される。このようにすることで、ユーザに対して、サラダなどの一品のみを食べ続けさせることなく、時間の経過に伴って、他の料理を食べても良いと通知することができる。これにより、食物繊維の含有量の高い飲食物を優先しつつ、ユーザの食事の質を向上させることができる。

【0062】

また上述したように、摂取カロリースピードの閾値Ｓも食事が進むにつれて理想値に近づくように変更されるので、無理なくユーザの食事の質を向上させることができる。一般的に、快適な食事のスピードは一定ではなく、空腹感の高い食事開始時には早く食べたいが、食事が進むにつれてゆっくりとしたスピードで食べることに苦痛を感じにくくなる。例えば、閾値Ｓをはじめから理想値に設定してしまうと、食事開始時からしばらくの間、頻繁に警告が発生する可能性が高くなり、ユーザの快適な食事環境を阻害してしまう恐れがあるが、そのようなことを防止することができる。

【0063】

閾値の初期値、および、閾値の減少の割合は、実験的経験的に定められるものであっても、ユーザにより適宜設定可能であってもよい。

【0064】

ステップＳ１１において、食事が終了したと判定された場合、ステップＳ１３において、撮影部１２は、ユーザの飲食の撮影を終了する。

【0065】

ステップＳ１４において、管理部２３は、今回の食事の取り方に関する情報を生成し、表示部１１または音声出力部１３を介して提示する。

【0066】

図７は、今回の食事の取り方に関する情報の一例を示す。この情報には、食事の取り方が良かったのか悪かったのかなどのコメントとともに、食事中のＰＦＣバランスの推移、食事中の摂取カロリースピード、今回の食事全体のＰＦＣバランス、理想的な食事のＰＦＣバランスが示される。

【0067】

図７の例では、食事開始において、たんぱく質（Ｐ）が多めに摂取され、その後徐々に脂質（Ｆ）や炭水化物（Ｃ）が摂取されていることが示されている。食事中の摂取カロリースピードも、一定の速度であることが示されている。今回の食事全体のＰＦＣバランスも、理想的な食事のＰＦＣバランスと同等のものとなっている。このように、図７を参照することで、ユーザは、今回の食事のとり方は適切であったことを把握することができる。

【0068】

図８は、今回の食事の取り方に関する情報の他の例を示す。図８の例では、食事開始において、炭水化物（Ｃ）が多めに摂取されていることが示されている。食事中の摂取カロリースピードも、一定でない（食事中の総カロリーの遷移の傾きが一定でない）ことが示されている。グラフ中黒丸で示されている部分は、早食い傾向であることが示されている。今回の食事全体のＰＦＣバランスも、理想的な食事のＰＦＣバランスと比べ、たんぱく質（Ｐ）が不足していることが示されている。図８を参照することで、ユーザは、今回の食事のとり方は不適切であったことを把握することができる。

【0069】

ステップＳ１４において、今回の食事の取り方に関する情報がユーザに提示されると、処理は終了する。

【0070】

＜栄養管理に用いる情報の他の例＞
上述した例では、栄養管理に用いる情報として、食事の動画像を用いるものとして説明したが、これ以外の情報も併せて栄養管理に利用すると好適である。

【0071】

例えば、血糖値センサからユーザの血糖値情報を取得可能な場合、食事終了から６０～１２０分経過後の血糖値上昇幅をユーザに通知することができる。特に、食後高血糖（140mg/dL）が確認された場合、食事の総カロリーやＰＦＣバランス、および、摂食の順番やスピードの問題点とともに、ユーザに通知することができる。また、スマートウォッチから、１日の消費カロリーデータと自律神経活性度を取得可能な場合、消費カロリーに基づいて、推定エネルギー必要量の導出にあたって必要な身体活動レベルを食事の都度決定したり、自律神経活性度に基づいて、胃腸に負担がかかっていない食事であるかをモニタリングすることができる。

【0072】

＜摂取カロリーの計測方法の他の例＞
上述した実施の形態では、ＡＲグラス１は、撮影部１２により撮影された飲食物の映像から、飲食物の栄養素を測定し、またカロリーを算出したが、近赤外線栄養計測デバイスを利用することもできる。従来実施されていた摂取カロリーの測定方法と上述した方法を併用することで、摂取カロリーの測定精度を向上させることも可能である。

【0073】

＜振動による情報伝達＞
上述した実施の形態では、ＡＲグラス１は、表示部１１および音声出力部１３を介して情報を出力したが、例えば振動で情報をユーザに伝達することができる。例えば、摂取カロリースピードが速いことが検知された場合（ステップＳ９）、摂取カロリースピードを適切にするための支援として、適切な咀嚼のタイミングを振動で案内することもできる。

【0074】

＜他の構成＞
ＡＲグラス１は、表示部１１が一方の眼の前方に配置されていてもよい。つまり、ＡＲグラス１は、左眼用の表示部１１が配置され、右眼用の表示部は配置されなくてもよい。または、ＡＲグラス１は、右眼用の表示部１１が配置され、左眼用の表示部は配置されなくてもよい。

【0075】

上述した実施の形態では、１つのＡＲグラス１が、表示部１１～記憶部１５を有するようにしたが、これらの機能は、複数の装置で構成されていてもよい。例えば、制御部１４は、管理装置として別途設け、ネットワークを介してＡＲグラス１と接続し、撮影部１２からの映像を取得して上述した処理を実行し、適宜情報をＡＲグラス１の表示部１１に表示するようにもできる。また、表示部１１～記憶部１５の機能の一部またはすべてを、スマートフォンによって実現することも可能である。また、ＡＲグラス１に代わって、例えば、ＨＭＤ（ＨｅａｄＭｏｕｎｔｅｄＤｉｓｐｌａｙ）など、ユーザの視野角全体の画像を取得可能であって、かつ、ユーザの視野に対して所定の情報を重畳可能なウェアラブル端末を用いることも可能である。

【0076】

管理部２３は、栄養素測定部２１による測定結果に基づいて、第１の栄養素が第1の閾値よりも多い飲食物を選択し、第１の栄養素を所定量摂取したのちに、第２の栄養素が第2の閾値よりも多い飲食物を選択してもよい。管理部２３は、選択された飲食物を表示部１１に表示するか、または音声出力部１３から音声を出力してもよい。また、管理部２３は、栄養素の量が多い順に飲食物に対して順位を付けて、その順位をユーザに案内してもよい。

【0077】

管理部２３は、ユーザの年齢や性別の入力を受け付け、ユーザ情報１５ａとして記憶してもよい。また、管理部２３は、ユーザの撮影画像の入力を受け付け、画像に基づいてユーザの年齢や性別を推定し、ユーザ情報１５ａとして記憶してもよい。そして、管理部２３は、ユーザの年令や性別に基づいて栄養素やカロリーを管理してもよい。管理部２３は、ユーザの年令や性別に基づいて閾値Ｅ，Ｓを変更してもよい。
ステップＳ３では、配膳された料理全体のＰＦＣバランスと総カロリーが適切か否かが判定される。ただし、ユーザが配膳された料理全体を全て摂取するとは限らない。そこで、撮影部１２は、ユーザの周辺の様子を撮影してもよい。また、管理部２３は、撮影された映像に基づいて、テーブルに配膳された料理を摂取する人数、年齢や性別を判定してもよい。管理部２３は、栄養素測定部２１によって測定された栄養素の量や、カロリー算出部２２によって算出されたカロリーを、ユーザが摂取すると見込まれる推定量に換算してもよい。管理部２３は、栄養素の量やカロリーを判定した人数で除算することにより推定量を換算してもよいし、年齢や性別に基づいて配分してもよい。なお、ステップＳ６では、撮影部１２は飲食物がユーザの口元に運ばれる様子を撮影するので、上記推定量に換算する必要はない。

【0078】

また上述した図３，図４のフローチャートでは、例えば、ステップＳ５での飲食物の摂取順番の案内、ステップＳ７での飲食物の摂取の順番が適切であるか否かの判定、ステップＳ９での摂取カロリースピードが適切であるか否かの判定などは、図３，４に示す順番に限らず実行することができ、一部の処理が省略されてもよい。

【0079】

［実施形態の補足説明］
上述した実施の形態は、いずれも本発明の好ましい一具体例を示すものである。以下の実施の形態で示される数値、構成要素、構成要素の配置位置および接続形態の順序、フローチャートにおける処理の順序等は、一例であり、本発明を限定する主旨ではない。また、各図は、必ずしも厳密に図示されたものではない。

【0080】

上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。

【0081】

なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。

【0082】

［効果のまとめ］
上述した管理装置としての制御部１４は、
ユーザの飲食を撮影した映像に基づいて、所定の単位時間（例えば、１分間）当たりのユーザが摂取した飲食物のカロリーを算出するカロリー算出部２２と、
カロリー算出部により算出された単位時間当たりのユーザが摂取した飲食物のカロリーが閾値を超えた場合、ユーザに警告を出力し、飲食が終了したか否かを判定する管理部２３と
を有し、
カロリー算出部と管理部は、その処理を飲食が終了したと判定されるまで繰り返す
ことを特徴とする。

【0083】

このような構成を有するようにしたので、単位時間における摂取カロリーを管理することができる。

【0084】

また、管理部２３が、飲食の時間経過に基づいて、閾値を減少させる。
また、管理部２３が、飲食の進んでいる度合いを進行度として算出し、進行度に基づいて閾値を減少させる。

【0085】

このような構成を有するようにしたので、ユーザの快適な食事環境を阻害することなく、食事のスピードを適正に管理することが可能となる。

【0086】

また、ＡＲグラス１は、
ユーザにＡＲグラス１が装着された状態で、ユーザの両眼または一方の眼の前方に配置される表示部１１を有し、
制御部１４の管理部２３により出力された警告を、表示部１１に表示する。

【0087】

このような構成を有するようにしたので、直感的にわかりやすい方法でユーザに通知を行うことができる。

【0088】

本開示は、SDGs（Sustainable Development Goals）の「すべての人に健康と福祉を」の実現に貢献し、ヘルスケア製品・サービスによる価値創出に寄与する事項を含む。

【符号の説明】

【0089】

１…ＡＲグラス、 １１…表示部、 １２…撮影部、 １３…音声出力部、 １４…制御部、 １５…記憶部、 ２１…栄養素測定部、 ２２…カロリー算出部、 ２３…管理部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】