特開 2025-21888 食事監視システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2025021888

(43)【公開日】2025-02-14

(54)【発明の名称】食事監視システム

(51)【国際特許分類】

   G16H 20/60 20180101AFI20250206BHJP

【ＦＩ】

G16H20/60

【審査請求】未請求

【請求項の数】7

【出願形態】ＯＬ

(21)【出願番号】P 2023125970

(22)【出願日】2023-08-02

(71)【出願人】

【識別番号】000237271

【氏名又は名称】株式会社ＦＵＪＩ

(74)【代理人】

【識別番号】110000017

【氏名又は名称】弁理士法人アイテック国際特許事務所

(72)【発明者】

【氏名】清水 聡志

【テーマコード（参考）】

5L099

【Ｆターム（参考）】

5L099AA15

(57)【要約】      （修正有）

【課題】対象者の食事の摂取状況をより詳細に取得する食事監視システムを提供する。
【解決手段】テーブルに設置された撮像ユニットと、監視装置２０とを備え、管理サーバ４０と通信可能食事監視システム１０は、見守りや監視の対象者の食事を撮像可能な撮像部（カメラ３６）と、食事中に画像を時系列に撮像するように、撮像部を制御する撮像制御部（制御部２２）と、画像を処理して食事量を検出し、食事量の変化に基づいて食事の摂取状況を取得する取得処理部（制御部２２）と、を備え、対象者の管理者Ｋは、自身の携帯端末ＭやパーソナルコンピュータなどからネットワークＮＷを介して管理サーバ４０にアクセスする。
【選択図】図２

【特許請求の範囲】

【請求項1】

対象者の食事を撮像可能な撮像部と、
食事中に画像を時系列に撮像するように、前記撮像部を制御する撮像制御部と、
前記画像を処理して食事量を検出し、前記食事量の変化に基づいて食事の摂取状況を取得する取得処理部と、
を備える食事監視システム。

【請求項2】

前記取得処理部は、食事の開始時の画像を処理して開始時の食事量を検出し、前記摂取状況として、前記食事量の変化の量を前記開始時の食事量で除することにより摂取ペースを取得する、
請求項１に記載の食事監視システム。

【請求項3】

前記取得処理部は、食器毎に前記食事量を検出し、食器毎の前記食事量の変化に基づいて食器毎に前記摂取状況を取得する、
請求項１または２に記載の食事監視システム。

【請求項4】

前記取得処理部は、前記画像内の食事の領域の面積に基づいて前記食事量を検出する、
請求項１または２に記載の食事監視システム。

【請求項5】

前記取得処理部は、食事の開始時の画像を処理して開始時の食事量を検出すると共に、食事の終了時の画像を処理して終了時の食事量を検出し、前記開始時の食事量と前記終了時の食事量との差分に基づいて摂取割合を取得する、
請求項１または２に記載の食事監視システム。

【請求項6】

食物を保管または調理する電化製品に取り付けられ、食物の取り出しまたは調理に関する動作を検知可能なセンサを備え、
前記撮像制御部は、前記センサにより前記動作が検知された後に、前記撮像部に撮像させた画像を処理して食事を検出すると、食事中として所定時間毎に画像を撮像するように前記撮像部を制御する、
請求項１または２に記載の食事監視システム。

【請求項7】

前記撮像制御部は、前記撮像部に撮像させた画像を処理して、食事と、人の手の動きまたは食事器具の動きとを検出すると、食事中として所定時間毎に画像を撮像するように前記撮像部を制御する、
請求項１または２に記載の食事監視システム。

【発明の詳細な説明】

【技術分野】

【0001】

本明細書は、食事監視システムについて開示する。

【背景技術】

【0002】

従来、対象者の食生活の管理などを目的として、食事の状況を監視するものが提案されている。例えば、特許文献１には、食事の開始時と終了時の画像を処理して、食べ残し量を数値化し、摂取カロリーや食べ残しにより不足した成分量を算出することが記載されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００４－１５４２６１号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

上述した特許文献１では、食事の開始時と終了時の画像から、食事全体の摂取結果を取得することは可能である。しかし、例えば食事中の摂取ペースの変化など、食事の詳細な摂取状況を取得するには不十分である。

【0005】

本開示は、対象者の食事の摂取状況をより詳細に取得することを主目的とする。

【課題を解決するための手段】

【0006】

本開示は、上述の主目的を達成するために以下の手段を採った。

【0007】

本開示の食事監視システムは、
対象者の食事を撮像可能な撮像部と、
食事中に画像を時系列に撮像するように、前記撮像部を制御する撮像制御部と、
前記画像を処理して食事量を検出し、前記食事量の変化に基づいて食事の摂取状況を取得する取得処理部と、
を備えることを要旨とする。

【0008】

本開示の食事監視システムでは、食事中の画像を時系列に撮像し、画像を処理して食事量を検出し、食事量の変化に基づいて対象者の食事の摂取状況を取得する。これにより、対象者の食事中の摂取状況をより詳細に取得することができる。

【図面の簡単な説明】

【0009】

【図1】食事監視システム１０を備える住居１の構成の概略を示す構成図。

【図2】食事監視システム１０の構成の概略を示すブロック図。

【図3】食事監視処理の一例を示すフローチャート。

【図4】摂取状況取得処理の一例を示すフローチャート。

【図5】摂取状況の一例を示す説明図。

【図6】摂取状況報知処理の一例を示すフローチャート。

【図7】報知内容の一例を示す説明図。

【発明を実施するための形態】

【0010】

本開示の実施形態について図面を用いて説明する。図１は、食事監視システム１０を備える住居１の構成の概略を示す構成図である。図２は、食事監視システム１０の構成の概略を示すブロック図である。

【0011】

住居１は、見守りや監視の対象者Ｔの住居であり、対象者Ｔの食事の摂取状況を監視（取得）するための食事監視システム１０を備える。対象者Ｔは、例えば一人暮らしの高齢者とするが、療養者などでもよい。住居１は、ワンルームタイプの住居でもよいし、リビングやダイニング、キッチンが区画された住居でもよい。また、住居１には、テーブル（食卓）２や椅子４、冷蔵庫６や電子レンジ８、照明９などが配置されている。例えば対象者Ｔは、椅子４に座ってテーブル２で食事を摂取する。

【0012】

食事監視システム１０は、テーブル２に設置された撮像ユニット３０と、監視装置２０とを備え、管理サーバ４０と通信可能に構成されている。撮像ユニット３０は、テーブル２に設置されたベース３２と、ベース３２に支持されたアーム３４と、アーム３４の上端に取り付けられたカメラ３６とを備える。カメラ３６は、少なくともテーブル２上の撮像範囲Ａ（図１に点線で図示）を撮像可能である。撮像範囲Ａは、食事（食器）が配膳される範囲である。このため、カメラ３６は、撮像範囲Ａ内に配膳された食事（食器，盆）の画像を撮像可能である。なお、撮像ユニット３０は、カメラ３６が撮像範囲Ａを撮像可能な構成であればよく、例えばカメラ３６が照明９内に配置されていてもよい。

【0013】

監視装置２０は、制御部２２と、記憶部２４と、通信部２６とを備える。制御部２２は、ＣＰＵを中心としたマイクロプロセッサとして構成され、ＣＰＵの他にＲＯＭやＲＡＭ等を備える。制御部２２は、撮像ユニット３０のカメラ３６に撮像指示を出力し、カメラ３６により撮像された画像や各種センサからの検知信号などを入力し、入力した画像の画像処理を含む各種処理を実行する。各種センサとしては、例えば、テーブル２の下面などに設けられ対象者Ｔを検知する人感センサ２ａや、冷蔵庫６の扉の開閉動作を検知する開閉センサ６ａ、電子レンジ８の扉の開閉動作を検知する開閉センサ８ａなどが挙げられる。なお、人感センサ２ａは、例えば赤外線式のセンサとして構成されている。また、各開閉センサ６ａ，８ａは、例えば磁気検知式のセンサとして構成されている。記憶部２４は、ＨＤＤやＳＳＤなどで構成され、カメラ３６により撮像された画像や制御部２２の処理結果などの各種情報を記憶する。通信部２６は、制御部２２の処理結果などの各種情報を、インターネットなどのネットワークＮＷを介して管理サーバ４０に送信する。

【0014】

管理サーバ４０は、制御部４２と、記憶部４４と、通信部４６とを備える。制御部４２は、ＣＰＵを中心としたマイクロプロセッサとして構成され、ＣＰＵの他にＲＯＭやＲＡＭ等を備える。記憶部４４は、ＨＤＤやＳＳＤなどで構成され、監視装置２０から送信された対象者Ｔの情報を受信して記憶する。通信部４６は、ネットワークＮＷを介して１以上の監視装置２０の通信部２６と接続され、監視装置２０の通信部２６と互いに情報をやり取りする。また、対象者Ｔの管理者Ｋは、自身の携帯端末ＭやパーソナルコンピュータなどからネットワークＮＷを介して管理サーバ４０にアクセス可能となっている。

【0015】

以下は、監視装置２０が、対象者Ｔの食事の摂取状況を監視（取得）する際の動作の説明である。図３は、食事監視処理の一例を示すフローチャートである。この処理は、監視装置２０の制御部２２により実行される。

【0016】

食事監視処理では、制御部２２は、まず、食事の摂取状況の監視開始タイミングになったか否かを判定する（Ｓ１００）。本実施形態では、制御部２２は、人感センサ２ａからの検知信号に基づいてテーブル２の周辺の対象者Ｔ（椅子４に座った対象者Ｔ）を検出したか、開閉センサ６ａからの検知信号に基づいて冷蔵庫６の扉の開閉動作を検出したか、開閉センサ８ａからの検知信号に基づいて電子レンジ８の扉の開閉動作を検出したかのいずれかが成立した場合に、監視開始タイミングになったと判定する。制御部２２は、監視開始タイミングになったと判定すると、カメラ３６に撮像範囲Ａを撮像させて画像を処理する（Ｓ１１０）。次に、制御部２２は、Ｓ１１０の画像処理の結果、画像から食事（料理）を検出したか否か（Ｓ１２０）、対象者Ｔの手の動きおよび食事器具の動きの少なくともいずれかを検出したか否か（Ｓ１３０）、をそれぞれ判定する。Ｓ１１０の画像処理では、画像内の食器（皿）や食事（料理）の有無、対象者Ｔの手、箸やスプーン、フォークなどの食事器具の有無やその動きを、食器や食事、手、食事器具の形状や面積、色（画素値）などの特徴量に基づいて判別する処理が行われる。なお、各特徴量は、食器や食事、手、食事器具の有無や、食事の内容（料理の種類）が予め判別している画像を用いた周知の機械学習により取得されて、例えば記憶部２４内の判別モデル（図示せず）に記憶されたものが用いられる。

【0017】

制御部２２は、画像から食事を検出していないと判定するか、食事を検出しても手の動きや食事器具の動きを検出していないと判定すると、Ｓ１００の判定から所定時間が経過したか否かを判定する（Ｓ１４０）。制御部２２は、所定時間が経過していないと判定すると、Ｓ１１０に戻る。一方、制御部２２は、画像から食事と、手の動きや食事器具の動きを検出することなく所定時間が経過したと判定すると、食事は開始されないと判断してＳ１００に戻る。また、制御部２２は、画像から食事を検出し、手の動きまたは食事器具の動きを検出したと判定すると、当該画像（開始時画像）をさらに処理して、食器毎の食事の面積に基づいて開始時の食事量Ｓ（０）（初期食事量，最大食事量）を検出し（Ｓ１５０）、摂取状況取得処理を実行する（Ｓ１６０）。Ｓ１５０では、制御部２２は、画像から食器毎に食事の領域を検出して、その領域の面積を算出することで、食器毎に食事量Ｓ（０）を算出する。また、制御部２２は、上述した判別モデルの特徴量に基づいて、検出した食事の内容も判別する。なお、対象者Ｔの食事が、管理者Ｋが手配や調理したり配食業者などから配送されたりしたものであるなど、食事の内容の情報を適宜取得可能な場合、制御部２２は、それらの情報に基づいて食事の内容や食事量Ｓ（０）などを取得してもよい。

【0018】

図４は、摂取状況取得処理の一例を示すフローチャートである。また、図５は、取得した摂取状況の一例を示す説明図である。Ｓ１５０では、例えば図５に示すように、開始時画像から４つの食器ａ～ｄおよびそれらの食事内容、食事量Ｓ（０）が検出される。一例として、食器ａが「米飯」（主食）で食事量Ｓａ（０）、食器ｂが「ハンバーグ」（主菜）で食事量Ｓｂ（０）、食器ｃが「野菜サラダ」（副菜）で食事量Ｓｃ（０）、食器ｄが「みそ汁」（汁物）で食事量Ｓｄ（０）とする。

【0019】

図４の摂取状況取得処理では、制御部２２は、撮像タイミングになるのを待ち（Ｓ２００）、撮像タイミングになったと判定すると、画像（食事中画像）をカメラ３６に撮像させる（Ｓ２１０）。撮像タイミングは、例えば数十秒毎や数分毎（例えば１分毎）など、所定時間毎に到来するタイミングとする。次に、制御部２２は、撮像した食事中画像を処理して食器毎に食事の面積に基づく食事量Ｓ（ｎ）を検出する（Ｓ２２０）。なお、食事量Ｓ（ｎ）のｎは、摂取状況取得処理におけるｎ回目の撮像タイミングの画像から検出された食事量を示し、値１から順に付与される。

【0020】

続いて、制御部２２は、前回検出した食事量Ｓ（ｎ－１）と今回の食事量Ｓ（ｎ）との差分ΔＳ、即ち時系列で前後する２つの画像から検出された食事量Ｓ（ｎ）の差分ΔＳ（変化量）を食器毎に算出し、それを開始時の食事量Ｓ（０）で除して食器毎に摂取ペース（減少率）Ｐを算出する（Ｓ２３０）。そして、制御部２２は、食事の摂取が完了したか食器が全て下膳されたか否かを判定する（Ｓ２４０）。制御部２２は、Ｓ２２０で画像処理した食事中画像において各食器の食事量Ｓ（ｎ）がいずれも値０の場合に、食事の摂取が完了したと判定する。また、制御部２２は、Ｓ２２０で画像処理した食事中画像から食器が検出されなかった場合に、下膳されたと判定する。制御部２２は、いずれかの食器に食事が残っていれば（いずれかの食事量Ｓ（ｎ）が値０でなければ）、Ｓ２４０で否定的に判定し、Ｓ２００に戻って処理を繰り返す。即ち、制御部２２は、撮像タイミングになる度に、食事中画像をカメラ３６に撮像させて食器毎に食事量Ｓ（ｎ）を検出し、前回との差分ΔＳを食事開始時の食事量Ｓ（０）で除して摂取ペースＰを算出する処理を繰り返す。このため、食事中の摂取ペースＰを時系列で取得することができる。

【0021】

図５に示すように、１回目の撮像タイミングｔ１で撮像された画像から、各食器ａ～ｄの食事量Ｓａ（１），Ｓｂ（１），Ｓｃ（１），Ｓｄ（１）が検出される。また、これらの食事量と開始時の食事量Ｓａ（０），Ｓｂ（０），Ｓｃ（０），Ｓｄ（０）との差分ΔＳをそれぞれ算出し、それぞれ開始時の食事量Ｓａ（０），Ｓｂ（０），Ｓｃ（０），Ｓｄ（０）で除して摂取ペースＰａ，Ｐｂ，Ｐｃ，Ｐｄが算出される。例えば、食器ａの１回目の差分ΔＳは、Ｓａ（０）－Ｓａ（１）となり、摂取ペースＰａは、ΔＳ／Ｓａ（０）となる。また、撮像タイミングｔ１では、例えば食器ｃの「野菜サラダ」の摂取ペースＰｃが最も高く（例えば１１％）、次に食器ｄの「みそ汁」の摂取ペースＰｄが高く（例えば６％）、「米飯」や「ハンバーグ」は摂取されておらず摂取ペースＰａ，Ｐｂが０％となっている。また、２回目の撮像タイミングｔ２や３回目の撮像タイミングｔ３でも同様に処理が行われ、食事量Ｓ（ｎ）や摂取ペースＰが算出される。このような摂取状況から、例えば対象者Ｔが食事開始時（例えばｔ１～ｔ３）に、主に「野菜サラダ」や「みそ汁」を摂取している傾向を把握可能となる。

【0022】

また、制御部２２は、Ｓ２００～Ｓ２４０の処理を繰り返す内に、食事の摂取が完了したか食器が全て下膳されたと判定すると、食器毎に最後に算出された食事量Ｓ（ｎ）を終了時の食事量Ｓ（Ｅ）に設定する（Ｓ２５０）。次に、制御部２２は、開始時の食事量Ｓ（０）と終了時の食事量Ｓ（Ｅ）との差分を、食事量Ｓ（０）で除することにより摂取割合Ｒを食器毎に算出する（Ｓ２６０）。即ち、摂取割合Ｒ（％）は、（Ｓ（０）－Ｓ（Ｅ））／Ｓ（０）として算出される。そして、制御部２２は、摂取ペースＰと摂取割合Ｒとを含む摂取状況を管理サーバ４０に送信して（Ｓ２７０）、摂取状況取得処理を終了する。なお、摂取ペースＰは、時系列のデータを全て送信してもよいし、その平均値である平均摂取ペースＰａｖｅなどを算出して送信してもよい。

【0023】

Ｓ２５０では、摂取状況取得処理中のいずれかのタイミングで食事量Ｓ（ｎ）に値０が検出されていた食事（食器）であれば、終了時の食事量Ｓ（Ｅ）を値０に設定する。図５の例では、食器ｃの「野菜サラダ」は撮像タイミングｔ＊１で食事量Ｓｃ（＊１）が値０となり、食器ｄの「みそ汁」は撮像タイミングｔ＊２で食事量Ｓｄ（＊２）が値０となっている。このため、食事量Ｓｃ（Ｅ）および食事量Ｓｄ（Ｅ）は、いずれも値０となる。また、摂取割合Ｒｃ，Ｒｄは、いずれも１００％となる。また、食事が残ったまま食器が下膳された場合、制御部２２は、その直前に撮像された食事中画像から検出された食事量Ｓ（ｎ）を、終了時の食事量Ｓ（Ｅ）に設定する。例えば、図５の撮像タイミングｔ＊３で撮像された画像を最後に食器が下膳された場合、撮像タイミングｔ＊３で検出された食事量Ｓａ（＊３），Ｓｂ（＊３）が、それぞれ食器ａ，ｂの食事量Ｓａ（Ｅ），Ｓｂ（Ｅ）となる。なお、例えば、食事量Ｓａ（Ｅ）を食事量Ｓａ（０）の６０％の量として摂取割合Ｒａを４０％とし、食事量Ｓｂ（Ｅ）を食事量Ｓｂ（０）の１５％の量として摂取割合Ｒｂを８５％とする。

【0024】

なお、本実施形態では、食事量Ｓ（ｎ）が値０となった以降は、摂取ペースＰを算出しないものとする。このため、例えば撮像タイミングｔ＊１以降は、摂取ペースＰｃを算出せず、撮像タイミングｔ＊２以降は、摂取ペースＰｄを算出しないものとなる。これにより、平均摂取ペースＰａｖｅを算出する場合、例えば別の食事に時間が掛かったなど全体の食事時間が長くなっても、各食器の食事を食べ終わるまでの個々の食事時間に基づいて適切に算出することができる。なお、同様の理由で、摂取ペースＰが０％の時間を除いて平均摂取ペースＰａｖｅを算出してもよい。

【0025】

続いて、管理サーバ４０の動作を説明する。図６は、摂取状況報知処理の一例を示すフローチャートである。この処理は、管理サーバ４０の制御部４２により実行される。

【0026】

摂取状況報知処理では、制御部４２は、まず摂取状況の報知タイミングであるか否かを判定する（Ｓ３００）。摂取状況の報知タイミングは、例えば所定時間毎などの定期的なタイミングや、Ｓ２７０で送信された摂取状況を受信して記憶部４４に記憶したタイミング（食事が終了したタイミング）、管理者Ｋから報知の要求があったタイミングなどである。制御部４２は、報知タイミングでないと判定すると、摂取状況報知処理を終了する。

【0027】

また、制御部４２は、Ｓ３００で報知タイミングであると判定すると、該当する対象者Ｔの摂取状況を記憶部４４から取得する（Ｓ３１０）。次に、制御部４２は、取得した摂取状況から、平均摂取ペースＰａｖｅと摂取割合Ｒとに基づいて報知内容（摂取状況の説明）を設定する（Ｓ３２０）。続いて、制御部４２は、管理者Ｋの携帯端末Ｍなどに摂取状況と報知内容とをメールなどにより送信して（Ｓ３３０）、摂取状況報知処理を終了する。なお、摂取状況としては、図５に示すように全体の状況が送信されてもよいし、食事内容毎の摂取割合Ｒや平均摂取ペースＰａｖｅなどの一部の状況が送信されてもよい。

【0028】

図７は、報知内容の一例を示す説明図である。制御部４２は、例えば食事内容（食器）毎の平均摂取ペースＰａｖｅを閾値Ｐｒｅｆ（所定摂取ペース）とそれぞれ比較すると共に、食事内容毎の摂取割合Ｒを閾値Ｒｒｅｆ（所定摂取割合）とそれぞれ比較して、報知内容を設定する。制御部４２は、いずれの平均摂取ペースＰａｖｅも閾値Ｐｒｅｆ以上であれば、摂取ペースに遅れの目立つ食事はなかった旨を設定し、いずれかの平均摂取ペースＰａｖｅが閾値Ｐｒｅｆ未満であれば、摂取ペースに遅れの目立つ食事があった旨をその食事内容（料理名）を含めて設定する。また、制御部４２は、いずれの摂取割合Ｒも閾値Ｒｒｅｆ以上であれば、食べ残しはほとんどなかった旨を設定し、いずれかの摂取割合Ｒが閾値Ｒｒｅｆ未満であれば、食べ残しの多い食事があった旨をその食事内容を含めて設定する。こうして設定された報知内容が摂取状況と共に送信されることにより、管理者Ｋは摂取状況の概要を容易に把握することができる。

【0029】

ここで、本実施形態の構成要素と本開示の構成要素との対応関係を明らかにする。本実施形態の撮像ユニット３０（カメラ３６）が撮像部に相当し、摂取状況取得処理のＳ２００，Ｓ２１０を実行する制御部２２が撮像制御部に相当し、摂取状況取得処理のＳ２２０，Ｓ２３０（Ｓ２５０，Ｓ２６０）を実行する制御部２２が取得処理部に相当する。

【0030】

以上説明したように、食事監視システム１０では、食事中の画像を時系列に撮像し、画像を処理して食事量Ｓ（ｎ）を検出し、食事量Ｓ（ｎ）の変化（差分ΔＳ）に基づいて対象者Ｔの食事の摂取状況を取得するから、対象者の食事中の摂取状況をより詳細に取得することができる。

【0031】

また、食事監視システム１０では、開始時画像を処理して開始時の食事量Ｓ（０）を検出し、食事量Ｓ（ｎ）の差分ΔＳを食事量Ｓ（０）で除することにより摂取ペースＰを取得する。このため、対象者Ｔの食事中の摂取状況をさらに詳細に取得することができる。また、例えば食事の開始から終了までの食事時間で食事量Ｓ（０）を除して摂取ペースＰを取得するものに比して、摂取ペースＰを適切に取得することができる。また、管理者Ｋは、摂取ペースＰに基づいて、例えば食事内容の適否や食事内容の改善の検討などを行うことができる。食事内容の改善では、例えば「ハンバーグ」などの肉系の主菜の摂取ペースＰに遅れが目立つ場合、食べ易くするために小さなサイズのものに変更したり、魚系などの別の主菜に変更したりするなどの改善を検討することができる。

【0032】

また、食事監視システム１０では、食器毎に食事量Ｓ（ｎ）を検出し、食器毎の食事量Ｓ（ｎ）の変化に基づいて食器毎に摂取状況を取得するから、対象者Ｔの食事中の摂取状況をさらに詳細に取得することができる。例えば、食事内容毎の摂取順（食事を開始した順番や食事を完了した順）などの情報を容易に取得することができる。

【0033】

また、食事監視システム１０では、画像を処理して食事の領域の面積に基づいて食事量Ｓ（ｎ）を検出するから、簡易な処理で食事中の摂取状況を取得することができる。

【0034】

また、食事監視システム１０では、食事の開始時の画像を処理して開始時の食事量Ｓ（０）を検出すると共に、食事の終了時の画像を処理して終了時の食事量Ｓ（Ｅ）を検出し、食事量Ｓ（０）と食事量Ｓ（Ｅ）との差分に基づいて摂取割合Ｒを取得する。このため、対象者Ｔの食事中の摂取状況をさらに詳細に取得することができる。また、管理者Ｋは、摂取割合Ｒに基づいて、例えば食事内容の適否や食事内容の改善の検討などを行うことができる。食事内容の改善では、例えば「米飯」の食べ残しが目立つ（摂取割合Ｒが低い）場合、食事量の見直しを提案したり、「おかゆ」や麺類などの他の主食に変更したりするなどの改善を検討することができる。

【0035】

また、食事監視システム１０では、冷蔵庫６や電子レンジ８に取り付けられた開閉センサ６ａ，８ａにより開閉動作が検知された後に、画像から食事を検出すると共に対象者Ｔの手の動きまたは食事器具の動きを検出すると、対象者Ｔが食事を開始して食事中になると判断して所定時間毎に画像を撮像するようにカメラ３６を制御する。このように、開閉動作の検知と、画像からの食事および手や食事器具の動きの検出とを用いることで、食事中（食事開始）の判定を精度よく行って、摂取状況を適切に取得することができる。

【0036】

なお、本開示は上述した実施形態に何ら限定されることはなく、本開示の技術的範囲に属する限り種々の態様で実施し得ることはいうまでもない。

【0037】

上述した実施形態では、冷蔵庫６の開閉センサ６ａや電子レンジ８の開閉センサ８ａにより開閉動作を検知したが、これに限られない。例えば、電子レンジ８の加熱ボタンの操作を検知するセンサなどにより、調理に関する動作を検知してもよい。また、センサは、冷蔵庫６や電子レンジ８に取り付けられるもの限られず、食物を保管または調理する電化製品に取り付けられ、食物の取り出しまたは調理に関する動作を検知可能であればよい。

【0038】

実施形態では、制御部２２は、テーブル２の周辺の対象者Ｔの検出と、冷蔵庫６の扉の開閉動作の検出と、電子レンジ８の扉の開閉動作の検出とのうちいずれかが成立した場合に監視開始タイミングになったと判定したが、これに限られない。例えば、制御部２２は、冷蔵庫６の扉と電子レンジ８の扉とのうち少なくともいずれかの開閉動作の検出と、テーブル２の周辺の対象者Ｔの検出との両方が所定時間内に成立した場合に、監視開始タイミングになったと判定してもよい。また、制御部２２は、冷蔵庫６の扉と電子レンジ８の扉とのうち少なくともいずれかの開閉動作の検出と、テーブル２の周辺の対象者Ｔの検出とのうち一方のみに基づいて監視開始タイミングを判定してもよく、判定に用いないセンサ（人感センサ２ａと開閉センサ６ａ，８ａのうち一方）を備えなくてもよい。また、冷蔵庫６の扉と電子レンジ８の扉の開閉動作をいずれも検出可能としたが、いずれか一方のみを検出可能として開閉センサ６ａ，８ａのうち一方を備えなくてもよい。さらに、人感センサ２ａや開閉センサ６ａ，８ａは一例であり、制御部２２は、これら以外のセンサからの検知信号や他の条件の成立などに基づいて、監視開始タイミングを判定してもよい。

【0039】

実施形態では、制御部２２は、監視開始タイミングになったと判定した後に、カメラ３６に撮像させた画像を処理して食事を検出すると共に対象者Ｔの手や食事器具の動きを検出すると、食事中としたが、これに限られない。制御部２２は、監視開始タイミングになったと判定した後に、カメラ３６に撮像させた画像を処理して食事を検出すると、対象者Ｔの手や食事器具の動きを検出しなくても、食事中としてもよい。即ちＳ１３０の処理を省略してもよい。あるいは、制御部２２は、監視開始タイミングになったか否かの判定を行わずに、画像を処理して食事を検出すると共に対象者Ｔの手や食事器具の動きを検出すると、食事中としてもよい。即ちＳ１００の処理を省略して例えば所定時間毎にＳ１１０の処理を行うものとし、人感センサ２ａと開閉センサ６ａ，８ａとを備えなくてもよい。また、所定時間毎に画像を撮像して食事量Ｓ（ｎ）を検出するものに限られず、対象者Ｔの手の動きや食事器具の動きを画像から検出する度に食事量Ｓ（ｎ）を検出してもよい。また、画像（静止画像）を撮像するものに限られず、動画像を撮像し、その動画データから静止画像を生成して処理してもよい。

【0040】

実施形態では、開始時の食事量Ｓ（０）と終了時の食事量Ｓ（Ｅ）との差分に基づいて摂取割合Ｒを取得したが、これに限られず、摂取割合Ｒを取得しなくてもよい。また、実施形態では、食事量Ｓ（ｎ）の差分ΔＳを食事量Ｓ（０）で除すことにより摂取ペースＰを取得したが、これに限られず、摂取ペースＰを取得しなくてもよい。例えば、上述した食事内容毎の摂取順など、食事中の摂取状況を取得するものであればよい。

【0041】

実施形態では、食事の領域の面積に基づいて食事量Ｓ（ｎ）を検出したが、これに限られない。即ち、平面的な情報（面積）から食事量Ｓ（ｎ）を検出するものに限られず、高さ方向の情報を加えた立体的な情報（体積）から食事量Ｓ（ｎ）を検出してもよい。そのようにする場合、カメラ３６を斜め上方から食器を撮像可能に配置しておき、画像から食事の高さを検出してもよい。また、画像だけでなく、例えばＬｉｄａｒ（Light Detection and Ranging）などのセンサの検出値に基づいて、食事量Ｓ（ｎ）を検出してもよい。

【0042】

実施形態では、食器毎に食事量Ｓ（ｎ）を検出して食器毎に摂取状況を取得したが、これに限られない。例えば、食器毎の食事の面積を合計した食事量Ｓ（ｎ）に基づいて、食器毎ではなく食事全体の摂取ペースなどを摂取状況として取得してもよい。また、食事量Ｓ（ｎ）として、面積に基づく値を用いるものに限られず、食事のカロリーなどを用いてもよい。

【0043】

本明細書では、出願当初の請求項４の「請求項１または２に記載の食事監視システム」を「請求項１ないし３のいずれか１項に記載の食事監視システム」に変更した技術思想や、出願当初の請求項５の「請求項１または２に記載の食事監視システム」を「請求項１ないし４のいずれか１項に記載の食事監視システム」に変更した技術思想、出願当初の請求項６の「請求項１または２に記載の食事監視システム」を「請求項１ないし５のいずれか１項に記載の食事監視システム」に変更した技術思想、出願当初の請求項７の「請求項１または２に記載の食事監視システム」を「請求項１ないし６のいずれか１項に記載の食事監視システム」に変更した技術思想も開示されている。

【産業上の利用可能性】

【0044】

本開示は、食事の摂取状況を監視する技術分野に利用可能である。

【符号の説明】

【0045】

１ 住居、２ テーブル、２ａ 人感センサ、４ 椅子、６ 冷蔵庫、６ａ，８ａ 開閉センサ、８ 電子レンジ、９ 照明、１０ 食事監視システム、２０ 監視装置、２２ 制御部、２４ 記憶部、２６ 通信部、３０ 撮像ユニット、３２ ベース、３４ アーム、３６ カメラ、４０ 管理サーバ、４２ 制御部、４４ 記憶部、４６ 通信部、Ａ 撮像範囲、Ｍ 携帯端末、Ｋ 管理者、ＮＷ ネットワーク、Ｔ 対象者。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】