特開 2024-93173 画像処理装置、画像処理システム、画像処理プログラム、および画像処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024093173

(43)【公開日】2024-07-09

(54)【発明の名称】画像処理装置、画像処理システム、画像処理プログラム、および画像処理方法

(51)【国際特許分類】

   G06Q 50/10 20120101AFI20240702BHJP

   G06T 7/00 20170101ALI20240702BHJP

   G06V 10/62 20220101ALI20240702BHJP

   H04N 7/18 20060101ALI20240702BHJP

【ＦＩ】

G06Q50/10

G06T7/00 660B

G06V10/62

H04N7/18 D

【審査請求】未請求

【請求項の数】14

【出願形態】ＯＬ

(21)【出願番号】P 2022209372

(22)【出願日】2022-12-27

(71)【出願人】

【識別番号】000001270

【氏名又は名称】コニカミノルタ株式会社

(74)【代理人】

【識別番号】110000671

【氏名又は名称】ＩＢＣ一番町弁理士法人

(72)【発明者】

【氏名】一谷 修司

(72)【発明者】

【氏名】新田 和馬

【テーマコード（参考）】

5C054

5L049

5L050

5L096

【Ｆターム（参考）】

5C054CA04

5C054CA05

5C054FC00

5C054GA01

5C054GA04

5C054GB01

5C054HA18

5L049CC11

5L050CC11

5L096BA02

5L096DA02

5L096HA02

(57)【要約】

【課題】看介護施設での物品の破壊時の状況確認を容易にする画像処理装置、画像処理システム、画像処理プログラム、および画像処理方法を提供する。
【解決手段】画像処理装置は、看介護施設に設置された撮像部によって撮像された画像に関する画像情報を取得する取得部と、取得された前記画像情報に基づいて、前記看介護施設内の物品の破壊を検出する破壊検出部と、取得された前記画像情報から、前記物品の破壊に対応する前記画像情報を抽出する抽出部とを含む。
【選択図】図５

【特許請求の範囲】

【請求項1】

看介護施設に設置された撮像部によって撮像された画像に関する画像情報を取得する取得部と、
取得された前記画像情報に基づいて、前記看介護施設内の物品の破壊を検出する破壊検出部と、
取得された前記画像情報から、前記物品の破壊に対応する前記画像情報を抽出する抽出部と
を備える画像処理装置。

【請求項2】

前記抽出部は、前記物品の破壊時およびその前後に対応する前記画像情報を抽出する請求項１に記載の画像処理装置。

【請求項3】

前記看介護施設内の物品の指定を受け付ける第１受付部をさらに有し、
前記破壊検出部は、指定された前記物品の破壊を検出する請求項１に記載の画像処理装置。

【請求項4】

前記第１受付部は、予め前記物品の指定を受け付ける請求項３に記載の画像処理装置。

【請求項5】

前記第１受付部は、破壊された前記物品の指定を事後的に受け付け、
前記破壊検出部は、記憶部に記憶された所定期間の前記画像情報に基づいて、指定された前記物品の破壊を検出する請求項３に記載の画像処理装置。

【請求項6】

取得された前記画像情報に基づいて、前記画像に含まれる物品および人物各々に関する物品情報および人物情報の少なくとも一方を検出する情報検出部をさらに有し、
前記破壊検出部は、検出された前記物品情報および前記人物情報の少なくとも一方に基づいて、前記物品の破壊を検出する請求項１に記載の画像処理装置。

【請求項7】

前記破壊検出部は、前記物品の形状に関する情報に基づいて、前記物品の破壊を検出する請求項１に記載の画像処理装置。

【請求項8】

前記看介護施設内のエリアの指定を受け付ける第２受付部をさらに有し、
前記破壊検出部は、指定された前記エリアにおける前記物品の破壊を検出する請求項１に記載の画像処理装置。

【請求項9】

前記物品の破壊の検出レベルの設定を受け付ける第３受付部をさらに有し、
前記破壊検出部は、設定された前記検出レベルに基づいて、前記物品の破壊を検出する請求項１に記載の画像処理装置。

【請求項10】

前記第３受付部は、前記画像の撮像時間帯毎に、異なる検出レベルの設定を受け付け可能に構成されている請求項９に記載の画像処理装置。

【請求項11】

抽出された前記画像情報を保存部に保存する保存制御部をさらに有する請求項１に記載の画像処理装置。

【請求項12】

請求項１～１１のいずれかに記載の画像処理装置と、
前記撮像部とを備える、画像処理システム。

【請求項13】

看介護施設に設置された撮像部によって撮像された画像に関する画像情報を取得することと、
取得された前記画像情報に基づいて、前記看介護施設内の物品の破壊を検出することと、
取得された前記画像情報から、前記物品の破壊に対応する前記画像情報を抽出することと
を含む処理をコンピューターに実行させるための画像処理プログラム。

【請求項14】

画像処理システムに実行させる方法であって、
看介護施設に設置された撮像部によって撮像された画像に関する画像情報を取得することと、
取得された前記画像情報に基づいて、前記看介護施設内の物品の破壊を検出することと、
取得された前記画像情報から、前記物品の破壊に対応する前記画像情報を抽出することと
を含む画像処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像処理装置、画像処理システム、画像処理プログラム、および画像処理方法に関する。

【背景技術】

【0002】

我が国は、戦後の高度経済成長に伴う生活水準の向上、衛生環境の改善、および医療水準の向上等により、長寿命化が顕著となっている。このため、出生率の低下と相まって、高齢化率が高い高齢化社会になっている。このような高齢化社会では、病気、怪我、および加齢などにより、介護等の対応を必要とする要介護者の増加が想定される。

【0003】

要介護者は、病院や老人福祉施設などの看介護施設において、歩行中に転倒したり、ベッドから転落して怪我をするおそれがある。そのため、要介護者がこのような状態になったときに介護士や看護師等のスタッフがすぐに駆けつけられるようにするためのシステムの開発が進められている（たとえば、特許文献１）。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１０－４００１７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

このような看介護施設で物品の破壊が生じるとき、スタッフおよび要介護者の家族等が、物品の破壊時の状況を容易に確認できることが望ましい。物品破壊時の状況から、要介護者の状態をより詳細に把握できるためである。

【0006】

本発明は、このような事情に鑑みてなされたものであり、看介護施設での物品の破壊時の状況確認を容易にする画像処理装置、画像処理システム、画像処理プログラム、および画像処理方法を提供することを目的とする。

【課題を解決するための手段】

【0007】

本発明の上記課題は、以下の手段によって解決される。

【0008】

（１）看介護施設に設置された撮像部によって撮像された画像に関する画像情報を取得する取得部と、取得された前記画像情報に基づいて、前記看介護施設内の物品の破壊を検出する破壊検出部と、取得された前記画像情報から、前記物品の破壊に対応する前記画像情報を抽出する抽出部とを備える画像処理装置。

【0009】

（２）前記抽出部は、前記物品の破壊時およびその前後に対応する前記画像情報を抽出する上記（１）に記載の画像処理装置。

【0010】

（３）前記看介護施設内の物品の指定を受け付ける第１受付部をさらに有し、前記破壊検出部は、指定された前記物品の破壊を検出する上記（１）に記載の画像処理装置。

【0011】

（４）前記第１受付部は、予め前記物品の指定を受け付ける上記（３）に記載の画像処理装置。

【0012】

（５）前記第１受付部は、破壊された前記物品の指定を事後的に受け付け、前記破壊検出部は、記憶部に記憶された所定期間の前記画像情報に基づいて、指定された前記物品の破壊を検出する上記（３）に記載の画像処理装置。

【0013】

（６）取得された前記画像情報に基づいて、前記画像に含まれる物品および人物各々に関する物品情報および人物情報の少なくとも一方を検出する情報検出部をさらに有し、前記破壊検出部は、検出された前記物品情報および前記人物情報の少なくとも一方に基づいて、前記物品の破壊を検出する上記（１）に記載の画像処理装置。

【0014】

（７）前記破壊検出部は、前記物品の形状に関する情報に基づいて、前記物品の破壊を検出する上記（１）に記載の画像処理装置。

【0015】

（８）前記看介護施設内のエリアの指定を受け付ける第２受付部をさらに有し、前記破壊検出部は、指定された前記エリアにおける前記物品の破壊を検出する上記（１）に記載の画像処理装置。

【0016】

（９）前記物品の破壊の検出レベルの設定を受け付ける第３受付部をさらに有し、前記破壊検出部は、設定された前記検出レベルに基づいて、前記物品の破壊を検出する上記（１）に記載の画像処理装置。

【0017】

（１０）前記第３受付部は、前記画像の撮像時間帯毎に、異なる検出レベルの設定を受け付け可能に構成されている上記（９）に記載の画像処理装置。

【0018】

（１１）抽出された前記画像情報を保存部に保存する保存制御部をさらに有する上記（１）に記載の画像処理装置。

【0019】

（１２）上記（１）～（１１）のいずれかに記載の画像処理装置と、前記撮像部とを備える、画像処理システム。

【0020】

（１３）看介護施設に設置された撮像部によって撮像された画像に関する画像情報を取得することと、取得された前記画像情報に基づいて、前記看介護施設内の物品の破壊を検出することと、取得された前記画像情報から、前記物品の破壊に対応する前記画像情報を抽出することとを含む処理をコンピューターに実行させるための画像処理プログラム。

【0021】

（１４）画像処理システムに実行させる方法であって、看介護施設に設置された撮像部によって撮像された画像に関する画像情報を取得することと、取得された前記画像情報に基づいて、前記看介護施設内の物品の破壊を検出することと、取得された前記画像情報から、前記物品の破壊に対応する前記画像情報を抽出することとを含む画像処理方法。

【発明の効果】

【0022】

本願発明に係る画像処理装置、画像処理システム、画像処理プログラム、および画像処理方法では、看介護施設内での物品の破壊が検出され、この物品の破壊に対応する画像情報が抽出される。よって、スタッフ等は、看介護施設での物品の破壊時の状況確認が容易となる。

【図面の簡単な説明】

【0023】

【図1】一実施形態に係る画像処理システムの概略構成を示す図である。

【図2】図１に示した検知部の構成を示すブロック図である。

【図3】図１に示した画像処理装置の構成を示すブロック図である。

【図4】図１に示したカメラによって撮像された画像において検出された物品矩形および人物矩形の一例を示す図である。

【図5】図１に示した画像処理装置の機能ブロック図である。

【図6】図１に示した携帯端末の構成を示すブロック図である。

【図7】図１に示した画像処理システムによる処理の一例を示すフローチャートである。

【図8】変形例１に係る画像処理装置の機能ブロック図である。

【図9】図８に示した画像処理装置による処理の一例を示すフローチャートである。

【図10】変形例２に係る画像処理装置の機能ブロック図である。

【図11】図１０に示した画像処理装置による処理の一例を示すフローチャートである。

【図12】変形例３に係る画像処理装置による処理の一例を示すフローチャートである。

【発明を実施するための形態】

【0024】

以下、図面を参照して、本発明の実施形態に係る、画像処理システム、画像処理プログラム、および画像処理方法について説明する。なお、図面において、同一の要素には同一の符号を付し、重複する説明を省略する。図面の寸法比率は、説明の都合上誇張されており、実際の比率とは異なる場合がある。

【0025】

＜実施形態＞
［画像処理システム１０の構成］
図１は、一実施形態に係る画像処理システム１０の概略構成を示す図である。画像処理システム１０は、たとえば、病院および老人福祉施設などの看介護施設で用いられる。画像処理システム１０は、検知部１００、画像処理装置２００、通信ネットワーク３００、および携帯端末４００を有する。検知部１００は、通信ネットワーク３００により画像処理装置２００および携帯端末４００と相互に通信可能に接続される。携帯端末４００はアクセスポイント３１０を介して通信ネットワーク３００と接続され得る。

【0026】

（検知部１００）
図２は、検知部１００の構成を示すブロック図である。図２の例に示すように、検知部１００は、制御部１１０、通信部１２０、カメラ１３０、および体動センサー１４０を備え、これらはバスによって相互に接続されている。ここでは、カメラ１３０が本発明の撮像部の一具体例に対応する。検知部１００は、１つの一体化された装置でも、分離配置される複数の装置でもあり得る。

【0027】

制御部１１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、およびＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等のメモリにより構成され、プログラムに従って検知部１００の各部の制御および演算処理を行う。

【0028】

通信部１２０は、通信ネットワーク３００を介して、画像処理装置２００および携帯端末４００等と通信するためのインターフェース回路（例えばＬＡＮカード等）である。

【0029】

カメラ１３０は、例えば広角カメラである。カメラ１３０は、看介護施設内に設置されている。カメラ１３０は、たとえば、要介護者５００の居室の天井等の、所定の領域を俯瞰する位置に設置される。カメラ１３０は、当該所定の領域を含む画像（たとえば、後述の図４の画像６００）を撮像する。要介護者５００は、例えばスタッフ等により介護または看護を必要とする者である。所定の領域は、たとえば、要介護者５００の居室の床面全体を含む３次元の領域であり得る。カメラ１３０は、広角カメラより画角が狭い標準カメラであってもよい。以下、説明を簡単にするために、カメラ１３０は、広角カメラであるものとして説明する。画像６００には、たとえば、要介護者５００が画像として含まれ得る。画像６００には、静止画および動画が含まれる。カメラ１３０は近赤外線カメラであり、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｅｖｉｃｅ）により近赤外線を撮像領域に向けて照射し、撮像領域内の物体により反射される近赤外線の反射光をＣＭＯＳ（Ｃｏｍｐｌｅｍｅｍｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサーにより受光することで所定の領域を撮像し得る。画像６００は近赤外線の反射率を各画素とするモノクロ画像であり得る。カメラ１３０は、近赤外線カメラに代替して可視光カメラを用いてもよく、これらを併用してもよい。カメラ１３０は、マイク付きのカメラであってもよい。

【0030】

体動センサー１４０は、ベッド７００に対してマイクロ波を送受信して要介護者５００の体動（例えば呼吸動）によって生じたマイクロ波のドップラシフトを検出するドップラシフト方式のセンサーである。

【0031】

検知部１００は、カメラ１３０によって撮像した画像に関する画像情報を、通信ネットワーク３００を介して、画像処理装置２００に送信する。検知部１００は、体動センサー１４０によって検出された要介護者５００のドップラシフトを、通信ネットワーク３００を介して、携帯端末４００またはサーバー（図示せず）等に送信してもよい。

【0032】

（画像処理装置２００）
図３は、画像処理装置２００の構成を示すブロック図である。画像処理装置２００は、たとえばサーバーまたはＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等のコンピューターである。画像処理装置２００は、複数の装置から構成されてもよく、たとえば多数のサーバーによってクラウドサーバーとして仮想的に構成されてもよい。画像処理装置２００は、制御部２１０、通信部２２０、記憶部２３０、表示部２４０および入力部２５０を有している。各構成要素は、バスによって、相互に接続されている。

【0033】

制御部２１０および通信部２２０の基本構成は、上記検知部１００の制御部１１０および通信部１２０と同様であるため、重複する説明は省略する。制御部２１０の具体的な機能については、後述する。

【0034】

記憶部２３０は、たとえば、ＲＡＭ、ＲＯＭ、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）等により構成される。記憶部２３０には、たとえば、オペレーティングシステムを含む各種プログラムおよび各種データが格納されている。記憶部２３０には、たとえば、検知部１００から送信された画像情報が記憶される。記憶部２３０には、他の装置との間で各種情報を送受信したり、他の装置から取得する各種情報に基づいて出力する結果を決定したりするためのアプリケーションがインストールされている。また、記憶部２３０には、後述の物品の破壊に対応する画像情報を抽出するために必要となる情報が記憶されている。

【0035】

表示部２４０および入力部２５０は、タッチパネルであり、液晶などで構成される表示部２４０の表示面に、入力部２５０としてのタッチセンサーが設けられる。表示部２４０は、たとえば、検知部１００から受信した動画像を表示する。

【0036】

次に、図４および図５を用いて画像処理装置２００、具体的には制御部２１０の機能について説明する。制御部２１０は、カメラ１３０によって撮像された動画に関する画像情報に基づいて、看介護施設内での物品の破壊を検出し、この物品の破壊に対応する画像情報を抽出する。ここで、物品の破壊は、物品の形状が不可逆的に変化することをいう。

【0037】

図４は、カメラ１３０により撮像された要介護者５００の居室の画像６００の一例を表している。この画像６００は、たとえば、居室に設けられたベッド７００およびカーテン８００を含む物品と、ベッド７００に腰かける要介護者５００とを含んでいる。

【0038】

図５は、制御部２１０の機能ブロック図である。制御部２１０は、たとえば、第１受付部２１１、取得部２１２、情報検出部２１３、破壊検出部２１４、抽出部２１５および保存制御部２１６として機能する。

【0039】

第１受付部２１１は、看介護施設内の物品の指定を受け付ける。たとえば、看介護施設のスタッフ等が入力部２５０を介して、カーテン８００等の看介護施設内の物品を指定する。これにより、第１受付部２１１は、看介護施設内の物品の指定を受け付ける。スタッフ等は、たとえば、破壊されやすい物品を予め指定する。スタッフ等は、破壊により危険または損害が大きくなる物品を予め指定しておいてもよい。

【0040】

取得部２１２は、カメラ１３０によって撮像された画像（たとえば、画像６００）に関する画像情報を取得する。取得部２１２は、たとえば、検知部１００から画像情報を取得する。取得部２１２は、さらに、マイク付きのカメラ等によって集音された音声に関する音声情報を取得してもよい。

【0041】

情報検出部２１３は、取得部２１２により取得された画像情報に基づいて、各画像に含まれる物品に関する物品情報を検出する。物品情報は、たとえば、カーテン８００の位置、カーテン８００の大きさ、カーテン８００の種類およびカーテン８００の形状等に関する情報を含む。カーテン８００の位置は、たとえば、画像６００における物品矩形６２０の座標を用いて表すことができる。

【0042】

情報検出部２１３は、取得部２１２により取得された画像情報に基づいて、さらに、各画像に含まれる人物に関する人物情報を検出する。人物情報は、たとえば、要介護者５００の位置、要介護者５００の大きさおよび要介護者５００の種類等に関する情報を含む。要介護者５００の位置は、たとえば、画像６００における人物矩形６１０の座標を用いて表すことができる。人物情報は、たとえば、立位および座位等の人物の姿勢に関する情報を含んでいてもよい。情報検出部２１３は、たとえば、人物情報および物品情報の少なくとも一方を検出する。情報検出部２１３は、人物情報および物品情報を検出することが好ましい。

【0043】

人物矩形６１０は、画像６００における要介護者５００を含む領域であり、物品矩形６２０は、画像６００におけるカーテン８００を含む領域である。人物矩形６１０および物品矩形６２０は、たとえば、それぞれ要介護者５００およびカーテン８００の大きさを反映する。人物矩形６１０は、画像６００における要介護者５００の姿勢を反映してもよい。物品矩形６２０は画像６００におけるカーテン８００の形状を反映してもよい。情報検出部２１３は、たとえば、ディープラーニング等のニューラルネットワークを用いて人物矩形６１０および物品矩形６２０を検出する。ニューラルネットワークによる人物矩形６１０の検出方法としては、例えば、Ｆａｓｔｅｒ Ｒ－ＣＮＮ、Ｆａｓｔ Ｒ－ＣＮＮ、およびＲ－ＣＮＮといった公知の方法が挙げられる。情報検出部２１３は、要介護者５００の関節点を検出してもよい。

【0044】

破壊検出部２１４は、取得部２１２により取得された画像情報に基づいて、看介護施設内の物品の破壊を検出する。具体的には、破壊検出部２１４は、情報検出部２１３により検出された物品情報および人物情報を用いて、第１受付部２１１により指定された物品（たとえば、カーテン８００）の破壊を検出する。

【0045】

破壊検出部２１４は、たとえば、物品矩形６２０が動いたとき、カーテン８００の破壊を検出する。物品矩形６２０の移動は、たとえば、各フレームにおける物品矩形６２０の座標を用いて検出することができる。破壊検出部２１４は、所定の速度以上の速さで、物品矩形６２０が動いたとき、カーテン８００の破壊を検出してもよい。あるいは、破壊検出部２１４は、要介護者５００の腕と物品矩形６２０とが同時に、かつ、所定の速度以上の速さで動いたとき、カーテン８００の破壊を検出してもよい。要介護者５００の腕の位置は、たとえば、情報検出部２１３により検出された要介護者５００の関節点を用いて推定することができる。

【0046】

破壊検出部２１４は、人物矩形６１０および物品矩形６２０が重なっている時間が所定の時間を超えるとき、カーテン８００の破壊を検出してもよい。あるいは、破壊検出部２１４は、要介護者５００の手と物品矩形６２０とが重なっている時間が所定の時間を超えるとき、カーテン８００の破壊を検出してもよい。要介護者５００の手の位置は、たとえば、情報検出部２１３により検出された要介護者５００の関節点を用いて推定することができる。破壊検出部２１４は、画像情報および音声情報に基づいて、物品の破壊を検出してもよい。

【0047】

抽出部２１５は、取得部２１２により取得された画像情報から、破壊検出部２１４により検出された物品の破壊に対応する画像情報を抽出する。抽出部２１５は、たとえば、物品の破壊時およびその前後に対応する画像情報を抽出する。抽出部２１５は、たとえば、物品破壊の発生時刻に対応する画像情報と、この時刻の前後１分間の画像情報とを抽出する。

【0048】

保存制御部２１６は、抽出部２１５により抽出された画像情報を保存部に保存する。保存制御部２１６は、たとえば、この物品の破壊に関連する人物に関連付けて、画像情報を保存する。保存制御部２１６は、たとえば、カーテン８００を要介護者５００が破壊したとき、要介護者５００に関連付けて、カーテン８００の破壊に対応する画像情報を保存する。保存部は、たとえば、記憶部２３０に設けられている。保存部は、外部のサーバー等に設けられていてもよい。たとえば、スタッフ等が入力部２５０に指示を入力することにより、保存部に保存された画像情報が表示部２４０に出力され、表示部２４０に動画が表示される。

【0049】

上記制御部２１０の機能の一部または全部は、検知部１００により実行されてもよい。

【0050】

（携帯端末４００）
図６は、携帯端末４００の構成を示すブロック図である。携帯端末４００は、たとえば、看介護施設内でスタッフ等に携帯される。携帯端末４００は、制御部４１０、無線通信部４２０、表示部４３０、入力部４４０、および音声入出力部４５０を備える。各構成要素は、バスにより相互に接続されている。携帯端末４００は、例えば、タブレット型コンピューター、スマートフォン、または携帯電話等の通信端末機器によって構成され得る。

【0051】

制御部４１０は、検知部１００の制御部１１０の構成と同様に、ＣＰＵ、ＲＡＭ、ＲＯＭなどの基本構成を備える。

【0052】

無線通信部４２０は、Ｗｉ－Ｆｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの規格による無線通信を行う機能を有し、アクセスポイント３１０を経由して、または直接に各装置と無線通信する。無線通信部４２０は、イベント通知を画像処理装置２００から受信する。

【0053】

表示部４３０および入力部４４０は、画像処理装置２００の表示部２４０および入力部２５０と同様に、たとえば、タッチパネルにより構成されている。表示部４３０および入力部４４０は、たとえば、スタッフ等に要介護者５００に関するイベント通知を表示する。そして、表示部４３０および入力部４４０は、イベント通知に関する要介護者５００への対応を促す入力画面を表示するとともに、当該入力画面に入力された、スタッフによるイベント通知への対応の意思を受け付ける。

【0054】

音声入出力部４５０は、例えばスピーカーとマイクであり、無線通信部４２０を介して他の携帯端末４００との間でスタッフ相互間の音声通話を可能にする。また、音声入出力部４５０は、無線通信部４２０を介して検知部１００との間で音声通話を可能にする機能を備え得る。

【0055】

［画像処理システム１０の処理］
次に、図７を用いて画像処理システム１０により実行される処理、即ち、本発明の画像処理方法の一具体例について説明する。図７は、制御部２１０により実行される処理を示すフローチャートである。なお、図７に示す機能の一部または全部が検知部１００により実行される場合は、本フローチャートは、プログラムに従い、検知部１００の制御部１１０により実行されてもよい。

【0056】

制御部２１０は、まず、看介護施設内の物品の指定を受け付ける（Ｓ１０１）。物品は、たとえば、入力部２５０を介して、スタッフ等により指定される。看介護施設内の物品に関する情報は、たとえば、記憶部２３０等に記憶されている。制御部２１０は、たとえば、要介護者５００の居室に設けられたカーテン８００の指定を受け付ける。

【0057】

次に、制御部２１０は、カメラ１３０により撮像された画像（たとえば、画像６００）に関する画像情報を取得する（Ｓ１０２）。制御部２１０は、たとえば、カメラ１３０によって撮像された動画に関する画像情報をリアルタイムで取得する。

【0058】

次に、制御部２１０は、ステップＳ１０２で取得した画像情報に基づいて、各画像の物品情報および人物情報を検出する（Ｓ１０３）。たとえば、制御部２１０は、画像６００から人物矩形６１０および物品矩形６２０を検出する。

【0059】

続いて、制御部２１０は、ステップＳ１０３で検出した物品情報に基づいて、ステップＳ１０１で指定を受け付けた物品（たとえば、カーテン８００）の破壊を検出する（Ｓ１０４）。制御部２１０は、ステップＳ１０３で検出した物品情報および人物情報に基づいて、物品の破壊を検出してもよい。

【0060】

次に、制御部２１０は、ステップＳ１０１で取得した画像情報から、ステップＳ１０４で検出した物品の破壊時およびその前後に対応する画像情報を抽出する（Ｓ１０５）。

【0061】

この後、制御部２１０はステップＳ１０５で抽出した画像情報を保存部に保存して（Ｓ１０６）処理を終了する。

【0062】

［画像処理システム１０の作用効果］
本実施形態に係る画像処理システム１０では、看介護施設内での物品の破壊が検出され、この物品の破壊に対応する画像情報が抽出される。よって、スタッフ等は、看介護施設での物品の破壊時の状況確認が容易となる。以下、この作用効果について説明する。

【0063】

看介護施設では、要介護者の転倒等に伴って物品の破壊が生じることがある。たとえば、カメラにより撮像された画像から要介護者の転倒を検出する技術を用いると、スタッフ等は要介護者の転倒時の状況を画像で確認することが可能となる。要介護者の転倒時に物品が破壊されている画像が撮像されている場合には、スタッフ等は、この物品の破壊が要介護者の転倒に起因するものであることを確認することができる。

【0064】

一方、要介護者の転倒が検出されていないにも関わらず、物品の破壊が生じた場合、スタッフ等は、この物品の破壊の状況を確認することが困難となる。たとえば、実際には要介護者が転倒して物品が破損したものの、システムが要介護者の転倒を検出できなかった、要介護者が意図的に物品を破壊した、あるいは、他の原因で物品破壊が発生した等の様々な状況が考え得る。

【0065】

これに対し、画像処理装置２００および画像処理システム１０では、看介護施設内での物品の破壊が検出され、この物品の破壊に対応する画像情報が抽出される。これにより、スタッフ等は、物品の破壊時の画像を容易に確認することができる。したがって、スタッフ等は、物品の破壊時の状況を確認し、要介護者の状態をより詳細に把握することが可能となる。さらに、抽出された画像は保存部に保存されるので、エビデンスとして、要介護者の家族への説明時など、様々な場面で使用することができる。

【0066】

また、画像処理装置２００では、予め指定された物品の破壊が検出されるので、誤検知の発生が抑えられる。たとえば、この画像処理装置２００は、要介護者がぬいぐるみを握ったときのぬいぐるみの形状変化および要介護者が衣服を丸めたときの衣服の形状変化等は検出せず、予め指定した物品の破壊のみを検出する。さらに、予め物品を指定しておくことにより、リアルタイムで物品破壊の発生を検出することが可能となる。これにより、この画像処理装置２００では、長時間にわたって記録された膨大な画像情報の読み込みが不要となる。

【0067】

以下、上記第１実施形態で説明した制御部２１０の変形例および他の実施形態を説明する。なお、以下では、説明の重複を避けるため、上記第１実施形態で説明した制御部２１０の各構成と同様の構成については詳細な説明を省略する。

【0068】

＜変形例１＞
図８は、変形例１に係る制御部２１０を示す機能ブロック図である。この制御部２１０は、第２受付部２１７、取得部２１２、情報検出部２１３、破壊検出部２１４、抽出部２１５および保存制御部２１６として機能する。この制御部２１０は、第１受付部２１１に変えて、第２受付部２１７の機能を有している点において、上記第１実施形態で説明した制御部２１０と異なる。制御部２１０は、第１受付部２１１および第２受付部２１７の両方の機能を有していてもよい。

【0069】

第２受付部２１７は、看介護施設内のエリアの指定を受け付ける。たとえば、看介護施設のスタッフ等が、入力部２５０を介して、看介護施設内の選択的なエリアを指定する。これにより、第２受付部２１７は、看介護施設内のエリアの指定を受け付ける。スタッフ等は、たとえば、物品の破壊が生じやすいエリアを予め指定する。

【0070】

破壊検出部２１４は、第２受付部２１７により指定されたエリアにおける物品の破壊を検出する。破壊検出部２１４は、たとえば、人物矩形（たとえば、人物矩形６１０）と指定されたエリアとが重なっているとき、物品の破壊を検出する。破壊検出部２１４は、たとえば、人物矩形の所定の割合以上の部分と、指定されたエリアとが重なっているとき、人物矩形と指定されたエリアとが重なっていると判断する。所定の割合は、たとえば、５０％である。破壊検出部２１４は、人物矩形と指定されたエリアとが重なっている時間が所定の時間を超えるとき、物品の破壊を検出してもよい。

【0071】

図９は、この制御部２１０により実行される処理を示すフローチャートである。この制御部２１０は、まず、看介護施設内のエリアの指定を受け付ける（Ｓ２０１）。エリアは、たとえば、入力部２５０を介して、スタッフ等により指定される。看介護施設内のエリアに関する情報は、たとえば、記憶部２３０等に記憶されている。

【0072】

この後、制御部２１０は、上記第１実施形態で説明したステップＳ１０２～Ｓ１０６と同様の処理を行って（Ｓ２０２～Ｓ２０６）、処理を終了する。

【0073】

変形例１に係る制御部２１０を有する画像処理システム１０も、上記第１実施形態の画像処理システム１０と同様に、看介護施設内での物品の破壊が検出され、この物品の破壊に対応する画像情報が抽出される。よって、看介護施設での物品の破壊時の状況確認が容易となる。また、予め指定されたエリア、たとえば、物品の破壊が発生しやすいエリアでの物品の破壊が検出されるので、誤検知の発生が抑えられる。

【0074】

＜変形例２＞
図１０は、変形例２に係る制御部２１０を示す機能ブロック図である。この制御部２１０は、第１受付部２１１、取得部２１２、情報検出部２１３、破壊検出部２１４、抽出部２１５、保存制御部２１６および第２受付部２１７に加えて、第３受付部２１８として機能する。この制御部２１０は、第２受付部２１７および第３受付部２１８の機能を有している点において、上記第１実施形態で説明した制御部２１０と異なる。

【0075】

第３受付部２１８は、物品の破壊の検出レベルの設定を受け付ける。第３受付部２１８は、たとえば、カメラ１３０の撮像時間帯毎に、異なる検出レベルの設定を受け付け可能に構成されている。第３受付部２１８は、たとえば、低レベル、中レベルおよび高レベルの３つの検出レベルの設定を受け付け可能に構成されている。たとえば、看介護施設のスタッフ等が、入力部２５０を介して、検出レベルを設定する。これにより、第３受付部２１８は、検出レベルの設定を受け付ける。スタッフ等は、たとえば、撮像時間が朝６時～８時および夜２０時～２２時の検出レベルを高レベル、撮像時間が夜２２時～朝６時までの検出レベルを中レベル、撮像時間が朝８時～夜２０時までの検出レベルを低レベルに設定する。第３受付部２１８は、看介護施設内のエリア毎に、異なる検出レベルの設定を受け付け可能に構成されていてもよい。第３受付部２１８は、２つの検出レベル、あるいは、４つ以上の検出レベルの設定を受け付け可能に構成されていてもよい。

【0076】

破壊検出部２１４は、第３受付部２１８により設定された検出レベルに基づいて、物品の破壊を検出する。たとえば、高レベルでは、人物矩形（たとえば、人物矩形６１０）と第２受付部２１７により指定されたエリアとが重なっているとき、破壊検出部２１４が物品の破壊を検出する。破壊検出部２１４は、中レベルおよび低レベルの設定よりも閾値を低くして、人物矩形および指定されたエリアとの重なりを判断してもよい。あるいは、第１受付部２１１により指定された物品の物品矩形（たとえば、物品矩形６２０）が動いたとき、破壊検出部２１４が物品の破壊を検出する。

【0077】

たとえば、中レベルでは、人物矩形と第２受付部２１７により指定されたエリアとが重なっている時間が所定の時間を超えるとき、破壊検出部２１４が物品の破壊を検出する。あるいは、要介護者（たとえば、要介護者５００）の腕と物品矩形とが同時に、かつ、所定の速度以上の速さで動いたとき、破壊検出部２１４が物品の破壊を検出する。

【0078】

たとえば、低レベルでは、人物矩形と第２受付部２１７により指定されたエリアとが重なっている時間が所定の時間を超えた場合にも、破壊検出部２１４は物品破壊の発生を検出しない。破壊検出部２１４は、第１受付部２１１により指定された物品に関する情報に基づいて、物品の破壊を検出する。

【0079】

図１１は、この制御部２１０により実行される処理を示すフローチャートである。この制御部２１０は、まず、物品破壊の発生の検出レベルの設定を受け付ける（Ｓ３０１）。検出レベルの設定は、たとえば、入力部２５０を介して、スタッフ等により指定される。各検出レベルに関する情報は、たとえば、記憶部２３０等に記憶されている。

【0080】

次に、制御部２１０は、看介護施設内のエリアの指定を受け付ける（Ｓ３０２）。この後、制御部２１０は、上記第１実施形態で説明したステップＳ１０１～Ｓ１０６と同様の処理を行って（Ｓ３０３～Ｓ３０８）、処理を終了する。

【0081】

変形例２に係る制御部２１０を有する画像処理システム１０も、上記第１実施形態の画像処理システム１０と同様に、看介護施設内での物品の破壊が検出され、この物品の破壊に対応する画像情報が抽出される。よって、看介護施設での物品の破壊時の状況確認が容易となる。また、予め物品の破壊の検出レベルが設定されるので、誤検知および検知漏れの発生が抑えられる。

【0082】

＜変形例３＞
図１２は、変形例３に係る制御部２１０により実行される処理を示すフローチャートである。この制御部２１０は、取得された画像情報が記憶された後、第１受付部２１１により事後的に物品の指定が受け付けられる。この点において、変形例３に係る制御部２１０は、上記第１実施形態で説明した制御部２１０と異なる。

【0083】

この制御部２１０は、まず、上記第１実施形態で説明したステップＳ１０２と同様にして、画像情報を取得する（Ｓ４０１）。次いで、制御部２１０は、ステップＳ４０１で取得した画像情報を、たとえば、記憶部２３０に記憶する（Ｓ４０２）。

【0084】

次に、制御部２１０は、看介護施設内の物品の指定を受け付ける（Ｓ４０３）。スタッフ等は、たとえば、既に破壊されている物品を指定する。この後、制御部２１０は、上記第１実施形態で説明したステップＳ１０３と同様にして、物品情報および人物情報を検出する（Ｓ４０４）。

【0085】

次に、制御部２１０は、上記第１実施形態で説明したステップＳ１０４と同様にして、ステップＳ４０３で指定された物品の破壊を検出する（Ｓ４０５）。このとき、制御部２１０は、たとえば、指定された物品の形状に関する情報に基づいて、物品の破壊を検出する。具体的には、パターンマッチングを用いて物品の破壊を検出する。たとえば、制御部２１０は、破壊された物品が撮像された画像と、パターン一致率が所定の値以下となる画像を、過去に遡って検出する。これにより、この物品の破壊を検出することができる。制御部２１０は、上記第１実施形態で説明したのと同様の方法で、物品破壊の発生を検出してもよい。

【0086】

この後、制御部２１０は、上記第１実施形態で説明したＳ１０５およびＳ１０６と同様の処理を行って（Ｓ４０６、Ｓ４０７）、処理を終了する。

【0087】

変形例３に係る制御部２１０を有する画像処理システム１０も、上記第１実施形態の画像処理システム１０と同様に、看介護施設内での物品の破壊が検出され、この物品の破壊に対応する画像情報が抽出される。よって、看介護施設での物品の破壊時の状況確認が容易となる。また、事後的に物品を指定することができるので、スタッフ等は、既に破壊された物品の破壊時の状況を遡って確認することができる。

【0088】

以上に説明した画像処理システム１０の構成は、上述の実施形態の特徴を説明するにあたって主要構成を説明したのであって、上述の構成に限られず、特許請求の範囲内において、種々改変することができる。また、一般的な画像処理システムが備える構成を排除するものではない。

【0089】

たとえば、上記第１実施形態では、制御部２１０が第１受付部２１１、取得部２１２、情報検出部２１３、破壊検出部２１４、抽出部２１５および保存制御部２１６として機能する例を説明したが、制御部２１０は、第１受付部２１１の機能を有していなくてもよい。この制御部２１０は、たとえば、カメラ１３０により撮像された全ての物品における物品破壊の発生を検出する。

【0090】

また、検知部１００、画像処理装置２００、および携帯端末４００は、それぞれ複数の装置により構成されてもよく、いずれか複数の装置が単一の装置として構成されてもよい。

【0091】

また、上述したフローチャートは、一部のステップを省略してもよく、他のステップが追加されてもよい。また各ステップの一部は同時に実行されてもよく、一つのステップが複数のステップに分割されて実行されてもよい。各ステップの順序は、一例であり、適宜変更されてもよい。

【0092】

また、上述した画像処理システム１０における各種処理を行う手段および方法は、専用のハードウェア回路、またはプログラムされたコンピューターのいずれによっても実現することが可能である。上記プログラムは、例えば、ＵＳＢメモリやＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）－ＲＯＭ等のコンピューター読み取り可能な記録媒体によって提供されてもよいし、インターネット等のネットワークを介してオンラインで提供されてもよい。この場合、コンピューター読み取り可能な記録媒体に記録されたプログラムは、通常、ハードディスク等の記憶部に転送され記憶される。また、上記プログラムは、単独のアプリケーションソフトとして提供されてもよいし、一機能としてその検出部等の装置のソフトウエアに組み込まれてもよい。

【符号の説明】

【0093】

１０ 画像処理システム、
１００ 検出部、
１１０ 制御部、
１２０ 通信部、
１３０ カメラ、
１４０ 体動センサー、
２００ 画像処理装置、
２１０ 制御部、
２１１ 第１受付部、
２１２ 取得部、
２１３ 情報検出部、
２１４ 破壊検出部、
２１５ 抽出部、
２１６ 保存制御部、
２１７ 第２受付部、
２１８ 第３受付部、
２２０ 通信部、
２３０ 記憶部、
２４０ 表示部、
２５０ 入力部、
３００ 通信ネットワーク、
３１０ アクセスポイント、
４００ 携帯端末、
５００ 対象者、
６００ 画像、
６１０ 人物矩形、
６２０ 物品矩形。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】