特開 2019-185724 情報管理システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】特開2019-185724(P2019-185724A)

(43)【公開日】2019年10月24日

(54)【発明の名称】情報管理システム

(51)【国際特許分類】

   G06T 7/73 20170101AFI20190927BHJP

   G06Q 10/10 20120101ALI20190927BHJP

   G07C 9/00 20060101ALI20190927BHJP

【ＦＩ】

   G06T7/73

   G06Q10/10 320

   G07C9/00 Z

【審査請求】有

【請求項の数】15

【出願形態】ＯＬ

【全頁数】28

(21)【出願番号】特願2018-200345(P2018-200345)

(22)【出願日】2018年10月24日

(31)【優先権主張番号】特願2018-70182(P2018-70182)

(32)【優先日】2018年3月30日

(33)【優先権主張国】JP

(71)【出願人】

【識別番号】000002853

【氏名又は名称】ダイキン工業株式会社

(74)【代理人】

【識別番号】110000202

【氏名又は名称】新樹グローバル・アイピー特許業務法人

(72)【発明者】

【氏名】北川 慧太

(72)【発明者】

【氏名】半田 陽一

【テーマコード（参考）】

3E138

5L049

5L096

【Ｆターム（参考）】

3E138AA01

3E138JA03

3E138JB03

3E138JB16

3E138JC24

5L049AA11

5L096AA06

5L096BA02

5L096BA08

5L096CA02

5L096DA02

5L096GA51

5L096GA53

5L096HA09

5L096HA11

5L096JA03

5L096JA11

5L096KA04

(57)【要約】      （修正有）

【課題】対象空間に存在する人を管理可能なシステムを提供する。
【解決手段】管理システム１００は、撮影ユニット４０と、データ生成部６３、記憶部６１及び管理部６４を備える管理装置を有する。データ生成部６３は、撮影データ（撮影ユニット４０が撮影した画像）に含まれる人物の特徴に基づいて、対象空間内の人物を抽出する。データ生成部６３は、抽出データを生成する。抽出データは、抽出した人物に関連付けられたデータである。記憶部６１は、データ生成部６３が生成した抽出データを記憶する。管理部６４は、抽出データに基づき、対象空間に存在する人物の情報を管理する。
【選択図】図１

【特許請求の範囲】

【請求項1】

対象空間（ＳＰ）に設置される撮影機器（４０）と、
前記撮影機器が撮影した画像（Ｄ１）に含まれる人（ＰＳ）の特徴に基づいて前記対象空間内の前記人を抽出し、抽出した前記人に関連付けた人物データ（Ｄ２）を生成するデータ生成部（６３）と、
前記データ生成部が生成した前記人物データを記憶する記憶部（６１）と、
前記人物データに基づき、前記対象空間に存在する前記人の情報を管理する管理部（６４）と、
を備える、
情報管理システム（１００）。

【請求項2】

前記データ生成部は、前記撮影機器が撮影した前記画像に含まれている前記人に関して所在位置を抽出し、
前記人物データは、前記人の所在位置に関する情報を含む、
請求項１に記載の情報管理システム（１００）。

【請求項3】

前記データ生成部は、前記撮影機器が撮影した前記画像に含まれている前記人に関して、所在時刻を抽出し、
前記人物データは、抽出した前記人に関して所在時刻に関する情報を含む、
請求項１又は２に記載の情報管理システム（１００）。

【請求項4】

前記データ生成部は、前記撮影機器が撮影した前記画像に含まれている前記人に関して、行動内容を抽出し、
前記人物データは、抽出した前記人に関して行動内容に関する情報を含む、
請求項１から３のいずれか１項に記載の情報管理システム（１００）。

【請求項5】

前記データ生成部は、前記撮影機器が撮影した前記画像に含まれている前記人に関して、所在時刻及び行動内容を抽出し、
前記人物データは、抽出した前記人に関して所在時刻及び行動内容に関する情報を含む、
請求項１又は２に記載の情報管理システム（１００）。

【請求項6】

前記データ生成部は、前記撮影機器が撮影した前記画像に含まれている前記人に関して、会話の相手を、前記行動内容として抽出する、
請求項４又は５に記載の情報管理システム（１００）。

【請求項7】

前記人物データは、抽出した前記人に関して前記行動内容の履歴に関する情報を含む、
請求項４から６のいずれか１項に記載の情報管理システム（１００）。

【請求項8】

前記データ生成部は、情報処理機器を用いて作業を行っている前記人に関して前記情報処理機器における作業内容を抽出し、
前記人物データは、前記撮影機器が撮影した前記画像に含まれている前記人に関して、前記情報処理機器における作業内容に関する情報を含む、
請求項１から７のいずれか１項に記載の情報管理システム（１００）。

【請求項9】

前記人物データを出力する出力部（６７／９０）をさらに備える、
請求項１から８のいずれか１項に記載の情報管理システム（１００）。

【請求項10】

前記データ生成部は、前記対象空間内の前記人の動作に基づき前記人を抽出する、
請求項１から９のいずれか１項に記載の情報管理システム（１００）。

【請求項11】

前記データ生成部は、前記画像から各要素間の距離を推定し、推定した距離に基づき前記人を抽出する、
請求項１から１０のいずれか１項に記載の情報管理システム（１００）。

【請求項12】

前記データ生成部は、前記撮影機器が撮影した前記画像に基づき前記人の特徴を学習する学習部（６３２）を含む、
請求項１から１１のいずれか１項に記載の情報管理システム（１００）。

【請求項13】

前記管理部は、前記記憶部に記憶されている前記人物データに基づき、前記対象空間に存在する前記人に関して、所在履歴又は行動履歴に関する人物履歴データ（Ｄ３）を個別に生成する、
請求項１から１２のいずれか１項に記載の情報管理システム（１００）。

【請求項14】

前記撮影機器を複数備え、
前記データ生成部は、複数の前記撮影機器が撮影した前記画像に基づき、前記人の特徴を識別する、
請求項１から１３のいずれか１項に記載の情報管理システム（１００）。

【請求項15】

前記撮影機器は、前記対象空間に設置される空気調和機（２０）に配置される、
請求項１から１４のいずれか１項に記載の情報管理システム（１００）。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、情報管理システムに関する。

【背景技術】

【0002】

従来、例えば特許文献１（特開２０１７−４５３７３号公報）に開示されるように、対象空間（例えば会社内や学校内等）において、複数の撮影機器の画像を用いて人の所在を管理するシステムが知られている。特許文献１では、人が装着する帽子に貼付されたコードを撮影機器の画像から取得することで人物を識別している。

【発明の開示】

【発明が解決しようとする課題】

【0003】

特許文献１では、コードを貼付された帽子を装着していない人に関しては抽出することができない。このため、対象空間に存在する特定の人以外の情報を管理できない。

【0004】

対象空間に存在する人の情報を管理可能なシステムを提供する。

【課題を解決するための手段】

【0005】

第１観点の情報管理システムは、撮影機器と、データ生成部と、記憶部と、管理部と、を備える。撮影機器は、対象空間に設置される。データ生成部は、撮影機器が撮影した画像に含まれる人の特徴に基づいて、対象空間内の人を抽出する。データ生成部は、人物データを生成する。人物データは、抽出した人に関連付けられたデータである。記憶部は、データ生成部が生成した人物データを記憶する。管理部は、人物データに基づき、対象空間に存在する人の情報を管理する。

【0006】

これにより、対象空間に設置される撮影機器の撮影画像に含まれる人の特徴が識別され、抽出・特定された人に関連して生成された人物データに基づき、対象空間に存在する人の情報が管理される。その結果、対象空間において人の情報（例えば所在情報や所在履歴等の情報）を管理することが容易に可能となる。すなわち、対象空間に存在する人を管理可能となる。

【0007】

なお、ここでの「画像」については、静止画像及び／又は動画が含まれる。

【0008】

また、ここでの「記憶部」には、人物データを一時的に記憶する主記憶部、及び／又は物品データを蓄積する大容量の補助記憶部が含まれる。

【0009】

また、ここでの「抽出」は、画像に含まれる人に関して、人と物の識別、個人の特定、又は動作内容の判別を含む。

【0010】

第２観点の情報管理システムは、第１観点の情報管理システムであって、データ生成部は、撮影機器が撮影した画像に含まれている人に関して所在位置を抽出する。人物データは、人の所在位置に関する情報を含む。

【0011】

第３観点の情報管理システムは、第１観点又は第２観点の情報管理システムであって、データ生成部は、撮影機器が撮影した画像に含まれている人に関して、所在時刻を抽出する。人物データは、抽出した人に関して所在時刻に関する情報を含む。人の所在時刻を把握することで、特定の人の所在履歴を把握することが可能となる。

【0012】

第４観点の情報管理システムは、第１観点から第３観点のいずれかの情報管理システムであって、データ生成部は、撮影機器が撮影した画像に含まれている人に関して、行動内容を抽出する。人物データは、抽出した人に関して行動内容に関する情報を含む。これにより、抽出した人の具体的な行動内容を把握することが可能となる。

【0013】

第５観点の情報管理システムは、第１観点又は第２観点の情報管理システムであって、データ生成部は、撮影機器が撮影した画像に含まれている人に関して、所在時刻及び行動内容を抽出する。人物データは、抽出した人に関して所在時刻及び行動内容に関する情報を含む。これにより、抽出した人の所在時刻及び具体的な行動内容の双方を把握することが可能となる。

【0014】

なお、第４観点又は第５観点の情報管理システムにおいて、「行動内容」には、対象空間における人の在・不在のみならず、対象空間における人の具体的な行為や作業内容についても含む。例えば、「行動内容」には、「読書」、「筆記作業」、「ＰＣを用いた作業」、「ＰＣにおいて最もアクティブな状態のアプリケーション（すなわち主に使用中のアプリケーション）」、「電話機を用いた通話」、「会話」、「会話の相手」、「会議」、「食事」、「水分摂取」、「摂取された飲食物の内容（品目、摂取量又は残存量等）」、「印刷機を用いた作業」、「清掃作業」「製造ラインにおける作業」、「歩行」、又は「体操」等、人の行動の詳細が含まれる。

【0015】

第６観点の情報管理システムは、第４観点又は第５観点の情報管理システムであって、データ生成部は、撮影機器が撮影した画像に含まれている人に関して、会話の相手を行動内容として抽出する。これにより、特定の人に関して会話の相手を把握することが可能となる。

【0016】

第７観点の情報管理システムは、第４観点から第６観点のいずれかの情報管理システムであって、人物データは、抽出した人に関して行動内容の履歴に関する情報を含む。これにより、特定の人の行動内容の履歴を把握することが可能となる。

【0017】

第８観点の情報管理システムは、第１観点から第７観点のいずれかの情報管理システムであって、データ生成部は、情報処理機器を用いて作業を行っている人に関して情報処理機器における作業内容を抽出する。人物データは、撮影機器が撮影した画像に含まれている人に関して、情報処理機器における作業内容に関する情報を含む。これにより、特定の人の情報処理機器における作業内容を把握することが可能となる。

【0018】

第９観点の情報管理システムは、第１観点から第８観点のいずれかの情報管理システムであって、人物データを出力する出力部をさらに備える。

【0019】

第１０観点の情報管理システムは、第１観点から第９観点のいずれかの情報管理システムであって、データ生成部は、対象空間内の人の動作に基づき、人を抽出する。これにより人の抽出及び個人の特定を高精度に行うことが可能となる。

【0020】

歩いている動作、作業している動作、デスクワーク、飲食など、人特有の動作を認識した際にその動作を行っている対象を人と認識してもよい。

【0021】

第１１観点の情報管理システムは、第１観点から第１０観点のいずれかの情報管理システムであって、データ生成部は、画像から各要素間の距離を推定する。データ生成部は、推定した距離に基づき、人を抽出する。これにより、人の抽出及び個人の特定を高精度に行うことが可能となる。

【0022】

第１２観点の情報管理システムは、第１観点から第１１観点のいずれかの情報管理システムであって、データ生成部は、学習部を含む。学習部は、撮影機器が撮影した画像に基づき、人の特徴を学習する。これにより、人の抽出及び個人の特定を高精度に行うことが可能となる。

【0023】

第１３観点の情報管理システムは、第１観点から第１２観点のいずれかの情報管理システムであって、管理部は、記憶部に記憶されている人物データに基づき、対象空間に存在する人に関して、人物履歴データを個別に生成する。人物履歴データは、人の所在履歴又は行動履歴に関するデータである。これにより、各人の所在履歴又は行動履歴が自動生成される。

【0024】

第１４観点の情報管理システムは、第１観点から第１３観点のいずれかの情報管理システムであって、撮影機器を複数備える。データ生成部は、複数の撮影機器が撮影した画像に基づき、人の特徴を識別する。複数の撮影機器を備えることにより、広範囲において人を抽出することが出来る。

【0025】

第１５観点の情報管理システムは、第１観点から第１４観点のいずれかの情報管理システムであって、撮影機器は、空気調和機に配置される。空気調和機は、対象空間に設置される。空気調和機に撮影機器が配置されることにより、対象空間内で広範囲において人を抽出することが出来る。

【0026】

なお、ここでの「空気調和機」は、例えば、天井に設置される天井埋込型や天井吊下型の室内ユニットや、天井付近の側壁に設置される壁掛型の室内ユニット等である。

【図面の簡単な説明】

【0027】

【図1】管理システムの概略構成図。

【図2】対象施設における各機器の設置態様の一例を示した模式図。

【図3】対象空間の一例を示した模式図。

【図4】対象空間における室内ユニット、リモコン及び撮影ユニットの設置態様の一例を示した模式図。

【図5】管理装置の構成態様を概略的に表わした模式図。

【図6】記憶部に含まれる記憶領域を概略的に表わした模式図。

【図7】撮影ユニット情報テーブル（撮影ユニット情報）の模式図。

【図8】人物情報テーブル（人物情報）の模式図。

【図9】抽出データの模式図。

【図10】人物履歴データの模式図。

【図11】抽出部による抽出処理の一例を概略的に示した模式図。

【図12】表示データの模式図。

【図13】管理装置の処理の流れの一例を示したフローチャート。

【図14】変形例１に係る抽出データの模式図。

【図15】変形例１に係る人物履歴データの模式図。

【図16】変形例１に係る表示データの模式図。

【図17】変形例１に係る表示データの表示態様の一例を示した模式図。

【発明を実施するための形態】

【0028】

［第１実施形態］
以下、本開示の一実施形態に係る管理システム１００（情報管理システム）について説明する。なお、以下の実施形態は、具体例であって、技術的範囲を限定するものではなく、趣旨を逸脱しない範囲で適宜変更可能である。

【0029】

（１）管理システム１００
図１は、管理システム１００の概略構成図である。図２は、対象施設１における各機器の設置態様の一例を示した模式図である。管理システム１００は、特定の空間（対象空間ＳＰ）において存在する人物ＰＳに関して個別にデータ（後述の人物履歴データＤ３）を生成し、生成したデータに基づいて各人物ＰＳの情報管理（例えば在室管理、所在管理、及び所在検索等）を行うためのシステムである。管理システム１００は、例えば労働者の勤怠管理や行動管理、学校における生徒の出欠管理や行動管理、また施設におけるセキュリティ管理等に適用される。

【0030】

本実施形態において、管理システム１００は、対象施設１に適用されている。対象施設１は、対象空間ＳＰを含む。本実施形態において、対象施設１は、複数の対象空間ＳＰ（ＳＰ１、ＳＰ２、ＳＰ３、ＳＰ４、ＳＰ５、ＳＰ６・・・）を含んでいる。対象空間ＳＰは、例えば図３に示されるように人物ＰＳが活動する空間であり、例えばオフィスとして使用される空間である。ただし、これに限定されるものではなく、対象空間ＳＰは、例えばデパート等の商業施設、学校、工場、病院又は住居等として用いられてもよい。ここでの人物ＰＳは、対象施設１で勤務・学習・生活する人や、対象施設１を訪問した来訪者等である。

【0031】

管理システム１００は、主として、空気調和装置１０と、複数の撮影ユニット４０と、管理装置６０と、を有している。

【0032】

（１−１）空気調和装置１０
空気調和装置１０は、対象空間ＳＰにおいて冷房や暖房等の空気調和を実現する装置である。空気調和装置１０は、冷媒回路において蒸気圧縮方式の冷凍サイクルを行うことにより、対象空間ＳＰの冷房又は暖房を行う。

【0033】

空気調和装置１０は、主として、熱源ユニットとしての室外ユニット１５と、利用ユニットとしての複数台（ここでは６台以上）の室内ユニット２０（２０ａ、２０ｂ、２０ｃ、２０ｄ、２０ｅ、２０ｆ、・・・）と、複数（ここでは室内ユニット２０と同数）のリモコン３０（３０ａ、３０ｂ、３０ｃ、３０ｄ、３０ｅ、３０ｆ、・・・）と、を備えている。

【0034】

本実施形態において、室内ユニット２０ａは対象空間ＳＰ１に設置され、室内ユニット２０ｂは対象空間ＳＰ２に設置され、室内ユニット２０ｃは対象空間ＳＰ３に設置され、室内ユニット２０ｄは対象空間ＳＰ４に設置され、室内ユニット２０ｅは対象空間ＳＰ５に設置され、室内ユニット２０ｆは対象空間ＳＰ６に設置されている。空気調和装置１０では、室外ユニット１５と各室内ユニット２０とがガス連絡配管ＧＰ及び液連絡配管ＬＰで接続されることで冷媒回路が構成されている。

【0035】

（１−１−１）室外ユニット１５
室外ユニット１５は、対象空間ＳＰの外部に設置される。室外ユニット１５は、主として、冷媒回路を構成する要素として、複数の冷媒配管、圧縮機、室外熱交換器、膨張弁等を有している（図示省略）。また、温度センサ及び圧力センサ等の各種センサや、送風機等の機器を有している。

【0036】

また、室外ユニット１５は、室外ユニット１５内の各種アクチュエータの動作を制御する室外ユニット制御部１８を有している。室外ユニット制御部１８は、ＲＡＭやＲＯＭ等のメモリやＣＰＵを含むマイクロコンピュータ、通信モジュール、各種電子部品及び電気部品を有する。室外ユニット制御部１８は、各種アクチュエータや各種センサと、配線を介して電気的に接続されている。

【0037】

室外ユニット制御部１８は、各室内ユニット２０の室内ユニット制御部２５（後述）と、通信線ｃｂ１を介して接続されており、互いに信号の送受信を行う。また、室外ユニット制御部１８は、インターネット等のＷＡＮ（Wide Area Network）を含む広域ネットワークＮＷ１に通信線ｃｂ２を介して接続されており、広域ネットワークＮＷ１に接続される機器（例えばサーバ５０）と互いに信号の送受信を行う。

【0038】

（１−１−２）室内ユニット２０
室内ユニット２０は、対象空間ＳＰの天井ＣＩに設置される天井埋込型、又は天井ＣＩ付近に設置される天井吊下型の空調室内機である。図４は、対象空間ＳＰにおける室内ユニット２０、リモコン３０及び撮影ユニット４０の設置態様の一例を示した模式図である。図４では、対象空間ＳＰにおいて、各室内ユニット２０はその本体部分の一部（吸気口及び排気口）が天井ＣＩから露出するように設置されている。室内ユニット２０は、冷媒回路を構成する要素として室内熱交換器や室内膨張弁等を有している。また、室内ユニット２０は、対象空間ＳＰ内の温度や、冷媒の温度を検出する温度センサや圧力センサ等の各種センサを有している。

【0039】

また、室内ユニット２０は、室内ユニット２０内の各種アクチュエータ（送風機や膨張弁等）の動作を制御する室内ユニット制御部２５を有している。室内ユニット制御部２５は、ＲＡＭやＲＯＭ等のメモリやＣＰＵを含むマイクロコンピュータ、通信モジュール、各種電子部品及び電気部品を有する。室内ユニット制御部２５は、各種アクチュエータ及び各種センサと、配線を介して電気的に接続されており、互いに信号の送受信を行う。室内ユニット制御部２５は、室外ユニット制御部１８又は他の室内ユニット制御部２５と、通信線ｃｂ１を介して接続されており、互いに信号の送受信を行う。また、室内ユニット制御部２５は、通信線ｃｂ３を介して、対応するリモコン３０のリモコン制御部３５（後述）と接続されており、互いに信号の送受信を行う。また、室内ユニット制御部２５は、通信線ｃｂ４を介して、対応する撮影ユニット４０と接続されており、互いに信号の送受信を行う。

【0040】

（１−１−３）リモコン３０
リモコン３０は、いずれかの室内ユニット２０と対応付けられており、対応する室内ユニット２０と同一の対象空間ＳＰの側壁ＳＷに設置されている。具体的に、リモコン３０ａは、室内ユニット２０ａと対応付けられている。また、リモコン３０ｂは室内ユニット２０ｂと対応付けられ、リモコン３０ｃは室内ユニット２０ｃと対応付けられ、リモコン３０ｄは室内ユニット２０ｄと対応付けられ、リモコン３０ｅは室内ユニット２０ｅと対応付けられ、リモコン３０ｆは室内ユニット２０ｆと対応付けられている。 各リモコン３０は、いわゆる有線式のリモートコントロール装置であって、通信線ｃｂ３を介して、対応する室内ユニット２０（室内ユニット制御部２５）と接続されている。

【0041】

各リモコン３０は、各種設定に係るコマンドを、空気調和装置１０に入力するための入力装置として機能する。また、リモコン３０は、空気調和装置１０の運転状態や設定項目を表示する表示装置としても機能する。

【0042】

各リモコン３０は、リモコン３０の動作を制御するリモコン制御部３５を有している。

【0043】

（１−２）撮影ユニット４０（撮影機器）
管理システム１００は、複数（ここでは６以上）の撮影ユニット４０（４０ａ、４０ｂ、４０ｃ、４０ｄ、４０ｅ、４０ｆ・・・）を有している。撮影ユニット４０は、対応する対象空間ＳＰ内を撮影し、撮影結果を含むデータ（撮影データＤ１）を生成し出力するユニットである。撮影ユニット４０は、対応する対象空間ＳＰに配置される。本実施形態において、撮影ユニット４０は、対応する対象空間ＳＰの天井ＣＩ（又は天井付近）に設置される室内ユニット２０に配置されている。撮影ユニット４０は、天井ＣＩ又は天井付近（床面よりも天井ＣＩに近い部分）に設置されているので、対象空間ＳＰの広い範囲を撮影することが可能となっている。よって、対象空間ＳＰにおいて人物ＰＳの所在を高精度に検出することが可能となっている。

【0044】

本実施形態において、撮影ユニット４０ａは対象空間ＳＰ１（室内ユニット２０ａ）に配置され、撮影ユニット４０ｂは対象空間ＳＰ２（室内ユニット２０ｂ）に配置され、撮影ユニット４０ｃは対象空間ＳＰ３（室内ユニット２０ｃ）に配置され、撮影ユニット４０ｄは対象空間ＳＰ４（室内ユニット２０ｄ）に配置され、撮影ユニット４０ｅは対象空間ＳＰ５（室内ユニット２０ｅ）に配置され、撮影ユニット４０ｆは対象空間ＳＰ６（室内ユニット２０ｆ）に配置されている。

【0045】

撮影ユニット４０は、撮影部４１と、撮影データ生成部４２と、撮影データ出力部４３と、を有している。撮影部４１は、対応する対象空間ＳＰの所定範囲を撮影するためのレンズ（特に限定されないが例えば魚眼レンズや固定焦点レンズ等）及び撮像素子を含む。撮影データ生成部４２は、撮影部４１の撮像素子によって出力された電気信号をＡ／Ｄ変換し、所定のフォーマットに沿った撮影データＤ１を生成する。撮影データＤ１は、対象空間ＳＰの所定範囲を所定のピクセルで表わした画像データ（動画データ）を含む。撮影データ出力部４３は、生成された撮影データＤ１を圧縮して管理装置６０（直接的には室内ユニット制御部２５）に出力する。

【0046】

（１−３）管理装置６０
管理装置６０は、管理システム１００の動作を統括的に管理するコンピュータである。本実施形態において、管理装置６０は、図５に示されるように、室外ユニット制御部１８、室内ユニット制御部２５、リモコン制御部３５及びサーバ５０が通信ネットワークを介して接続されることで構成される。

【0047】

サーバ５０は、管理システム１００において、室外ユニット制御部１８、室内ユニット制御部２５及びリモコン制御部３５とともに管理装置６０を構成するコンピュータである。サーバ５０は、対象空間ＳＰから離れた遠隔地に配置されている。サーバ５０は、通信線によって広域ネットワークＮＷ１に接続されており、広域ネットワークＮＷ１を介して室外ユニット制御部１８、室内ユニット制御部２５及びリモコン制御部３５と通信可能に構成されている。

【0048】

管理装置６０は、撮影ユニット４０及び端末９０と、互いにデータの送受信を行う。管理装置６０は、撮影データＤ１に基づいて処理を行う。より具体的に、管理装置６０は、撮影データＤ１に含まれる人物ＰＳを個別に抽出して、当該人物ＰＳに対応するデータ（人物履歴データＤ３）を生成して蓄積する。ここでの「抽出」は、撮影データＤ１に含まれる人物ＰＳに関して、人と物の識別、個人の特定、又は動作内容の判別を含む。人物履歴データＤ３は、抽出された一の人物ＰＳの対象施設１における所在履歴のデータである。人物履歴データＤ３の詳細については後述する。

【0049】

また、管理装置６０は、ユーザによって入力されたコマンドに応じて処理を行い、処理結果を出力する。例えば、管理装置６０は、特定の人物ＰＳの所在履歴を出力することを要求するコマンド（出力要求コマンド）を入力された場合には、当該コマンドにおいて指定された人物ＰＳに関して、人物履歴データＤ３に基づき、所在に関する情報のデータ（後述の表示データＤ４）を生成して出力する。

【0050】

（１−４）端末９０
ここで、管理装置６０がデータの送受信を行う端末９０について説明する。端末９０は、管理者や利用者が保持する情報端末である。端末９０は、スマートフォンやタブレットＰＣ等の携帯端末や、ラップトップパソコン等のパーソナルコンピュータが想定されるが、他の情報処理機器であってもよい。

【0051】

端末９０は、通信モジュールを有しており、広域ネットワークＮＷ１を介して、他のユニット（室外ユニット制御部１８、室内ユニット制御部２５、リモコン制御部３５、サーバ５０）と通信可能に構成されている。端末９０は、無線通信及び有線通信のいずれか又は双方によって広域ネットワークＮＷ１に接続される。

【0052】

端末９０は、コマンドを入力するための入力部を有している。管理システム１００においては、端末９０を、コマンドを入力するための「コマンド入力部」として機能させることが可能である。ユーザは、端末９０を用いてコマンドを入力することで、撮影ユニット４０や管理装置６０の動作を適宜制御可能である。

【0053】

また、端末９０は、情報を表示（出力）する表示部を有している。管理システム１００においては、端末９０を、情報を表示する「出力部」として機能させることが可能である。ユーザは、端末９０によって、管理システム１００の動作状況や処理結果を把握可能である。

【0054】

端末９０は、所定のアプリケーションプログラムをインストールすることで、管理装置６０に対してコマンドを入力し、管理装置６０の応答結果を表示することが可能となる。

【0055】

（２）管理装置６０の詳細
図１に示されるように、管理装置６０は、主として、記憶部６１、取得部６２、データ生成部６３、管理部６４、受付部６５、情報検索部６６及び出力制御部６７等の機能部を含んでいる。各機能部は、管理装置６０の構成機器（ここでは、室外ユニット制御部１８、各室内ユニット制御部２５、各リモコン制御部３５及びサーバ５０）のいずれか又は全てが動作することによって実現される。管理装置６０は、独自に或いは他の装置から時刻をリアルタイムに取得可能に構成される。

【0056】

（２−１）記憶部６１
記憶部６１は、管理装置６０の構成機器のいずれか又は全てに含まれるＲＯＭ、ＲＡＭ、フラッシュメモリ、及びハードディスク等のメモリによって構成される。記憶部６１は、複数の記憶領域を含み、情報を一時的に記憶する揮発性の記憶領域や、各種情報を蓄積する不揮発性の記憶領域を有している。具体的に、記憶部６１には、図６に示されるように、プログラム情報記憶領域Ｍ１、環境情報記憶領域Ｍ２、システム情報記憶領域Ｍ３、人物情報記憶領域Ｍ４、撮影データ記憶領域Ｍ５、抽出データ記憶領域Ｍ６、人物履歴データ記憶領域Ｍ７、入力情報記憶領域Ｍ８、出力情報記憶領域Ｍ９及び特徴データ記憶領域Ｍ１０等の記憶領域が含まれている。各記憶領域に記憶されている各種情報は、適宜更新が可能である。

【0057】

プログラム情報記憶領域Ｍ１には、管理装置６０の各部において実行される各種処理を定義した制御プログラムや、各ユニット間における通信に使用される通信プロトコル等が記憶されている。

【0058】

環境情報記憶領域Ｍ２には、対象施設１に関する情報（環境情報）が記憶されている。環境情報には、例えば対象施設１に含まれる各対象空間ＳＰの数、位置、大きさ等に関する情報が含まれる。

【0059】

システム情報記憶領域Ｍ３には、管理システム１００に含まれる各機器に関する情報が記憶されている。例えば、システム情報記憶領域Ｍ３には、対象施設１に配置される撮影ユニット４０に関する情報（撮影ユニット情報）が記憶されている。撮影ユニット情報には、対象施設１に配置される撮影ユニット４０のＩＤ、通信アドレス、配置位置及び配置態様等に関する情報が含まれる。撮影ユニット情報は、例えば図７に示されるような撮影ユニット情報テーブルＴＢ１として記憶される。図７の撮影ユニット情報テーブルＴＢ１では、ＩＤが「０１２０」の撮影ユニット４０の通信アドレスが「172.16.**.01」であり、配置位置が「（対象空間）ＳＰ１」であり、配置態様として「室内ユニット２０ａに内蔵」されること等が特定されている。

【0060】

人物情報記憶領域Ｍ４には、対象施設１において予め登録されている人物ＰＳ及び過去に検出された人物ＰＳに関する情報（人物情報）が記憶されている。人物情報には、各人物ＰＳのＩＤ（任意又は自動的に付与されるＩＤ）、氏名、及び所属グループ等に関する情報が含まれる。人物情報は、例えば図８に示されるような人物情報テーブルＴＢ２として記憶される。図８の人物情報テーブルＴＢ２では、例えばＩＤが「０１１３９」の人物ＰＳに関して、氏名が「田中○○」であり、所属グループが「Ｇ３」であり、最新（直近）の所在位置が「（対象空間）ＳＰ２」であり、最新の所在時刻が「2018/03/05/17:55」であること等が特定されている。

【0061】

撮影データ記憶領域Ｍ５には、各撮影ユニット４０から出力された撮影データＤ１が記憶されている。撮影データ記憶領域Ｍ５においては、撮影ユニット４０毎に撮影データＤ１が蓄積される。

【0062】

抽出データ記憶領域Ｍ６には、撮影ユニット４０から出力された撮影データＤ１から抽出された人物ＰＳに関連付けられたデータ（抽出データＤ２）が記憶されている。抽出データＤ２（特許請求の範囲記載の「人物データ」に相当）は、撮影データＤ１の送信元である撮影ユニット４０毎に生成される。より詳細には、抽出データＤ２は、受信した撮影データＤ１毎に生成される。抽出データＤ２は、抽出した人物ＰＳの所在位置に関する情報、及び抽出した人物ＰＳに関して所在時刻に関する情報を含んでいる。抽出データＤ２は、例えば図９に示されるように、送信元撮影ユニット４０のＩＤとその撮影場所、撮影データＤ１の受信日時、及び受信した撮影データＤ１において抽出された人物ＰＳのＩＤ等に関する情報である。図９では、例えば、ＩＤが「０１２１」の撮影ユニット４０から送信され撮影された場所が「（対象空間）ＳＰ２」であり撮影された日時が「2018/03/06/17:55」である撮影データＤ１に関して、抽出された人物ＰＳのＩＤが「０１１３９」、「０１５６４」、「００９９８」、「０１３２１」であること等が特定されている。

【0063】

人物履歴データ記憶領域Ｍ７には、対象施設１における人物ＰＳに関する所在履歴のデータ（人物履歴データＤ３）が個別に記憶されている。人物履歴データＤ３は、人物ＰＳの対象施設１における所在履歴の情報である。人物履歴データＤ３は、人物ＰＳ毎に生成される。人物履歴データＤ３は、例えば図１０に示されるように、人物ＰＳのＩＤ、撮影した撮影ユニット４０のＩＤ、所在場所（撮影された場所）及び所在日時（撮影された日時）等を含む情報である。図１０に示される人物履歴データＤ３では、例えば、ＩＤが「０１１３９」の人物ＰＳに関する５分毎の所在履歴が特定されている。なお、人物履歴データＤ３において特定される所在履歴は、必ずしも５分毎である必要はなく、所在履歴に係る日時については適宜変更が可能である。

【0064】

入力情報記憶領域Ｍ８には、管理装置６０に入力された情報が記憶されている。例えば、入力情報記憶領域Ｍ８には、端末９０を介して入力されたコマンドが記憶されている。

【0065】

出力情報記憶領域Ｍ９には、管理装置６０から他の装置へ出力される情報が記憶されている。例えば、出力情報記憶領域Ｍ９には、端末９０に表示させる表示データＤ４（図１２）が記憶されている。

【0066】

特徴データ記憶領域Ｍ１０は、人物ＰＳの一般的な特徴、並びに対象空間ＳＰで抽出された人物ＰＳの固有の特徴が個別に特定された特徴データＤ５が記憶されている。特徴データＤ５は、人物ＰＳ毎に作成される。ここでの「特徴」は、人物ＰＳを一意に特定するのに利用される情報である。「特徴」は、様々であり、例えば人物ＰＳの部位（例えば頭、つむじ、顔、肩、腕、脚等）の形状、寸法、色、又は動作（動作速度、動作範囲、動作角度）等である。

【0067】

（２−２）取得部６２
取得部６２は、各撮影ユニット４０から出力される撮影データＤ１を取得して撮影データ記憶領域Ｍ５に適宜格納する。

【0068】

（２−３）データ生成部６３
データ生成部６３は、撮影データ記憶領域Ｍ５に記憶されている撮影データＤ１に含まれる人物ＰＳを抽出して抽出データＤ２を生成する。データ生成部６３は、抽出部６３１と、抽出データ生成部６３３と、を有している。

【0069】

抽出部６３１は、撮影データ記憶領域Ｍ５に記憶されている撮影データＤ１を取得して、取得した撮影データＤ１に含まれている人物ＰＳを個別に抽出する処理（抽出処理）を行う。抽出部６３１は、毎時、抽出処理を行う。抽出処理は、撮影データＤ１毎に（すなわち撮影データＤ１の送信元の撮影ユニット４０毎に）行われる。

【0070】

抽出部６３１は、学習部６３２を有しており、機械学習を行えるように構成されている。ここでの学習部６３２は、「ニューラルネットワーク」や「ディープラーニング」等の手段を用いて機械学習を行う。係る学習はいわゆる教師あり学習及び教師なし学習のいずれであってもよい。

【0071】

抽出部６３１による抽出処理は、所定の手段（公知技術を含む）を用いて行われる。例えば、抽出部６３１は、人物ＰＳが持つ特徴を予め定義される特徴データＤ５に基づいて人物ＰＳを抽出する（検出して特定する）。例えば、抽出部６３１は、撮影データＤ１において、人物ＰＳが持つ特徴を識別することで人物ＰＳを検出し、識別される特徴と特徴データＤ５に定義される特徴とを比較することで人物ＰＳを一意に特定する。

【0072】

抽出部６３１による抽出処理の一例を、図１１に示す。図１１では、抽出部６３１が、複数のニューラルネットワーク（Ｎ１、Ｎ２、Ｎ３、Ｎ４）を用いて、対象空間ＳＰにおける人物ＰＳを抽出する例が示されている。

【0073】

図１１では、まず、撮影データＤ１が第１ニューラルネットワークＮ１に入力される。第１ニューラルネットワークＮ１は、撮影データＤ１に含まれる各要素間の距離をそれぞれ検出（推定）する処理Ｐ１を実行する。

【0074】

また、第２ニューラルネットワークＮ２には、撮影データＤ１とともに処理Ｐ１の結果が入力される。第２ニューラルネットワークＮ２は、処理Ｐ１の結果に基づき、撮影データＤ１に含まれる人物ＰＳの範囲を検出（推定）する処理Ｐ２を実行する。人物ＰＳの範囲の検出が可能な場合、人物ＰＳの移動を検出可能であり、後述の処理Ｐ３において当該人物ＰＳが有する特徴を取得可能である。

【0075】

さらに、第３ニューラルネットワークＮ３には、処理Ｐ１の結果とともに処理Ｐ２の結果が入力される。第３ニューラルネットワークＮ３は、処理Ｐ１及び処理Ｐ２の結果に基づき、撮影データＤ１に含まれる人物ＰＳの特徴を検出し特定する処理Ｐ３を実行する。処理Ｐ３では、検出される人物ＰＳの特徴と、特徴データ記憶領域Ｍ１０に記憶される特徴データＤ５と、に基づいて人物ＰＳが一意に特定される。例えば、処理Ｐ３では、検出される人物ＰＳの各特徴と、特徴データ記憶領域Ｍ１０に記憶されている各特徴データＤ５と、の類似度が算出され、算出された類似度が所定の閾値以上となる特徴データＤ５の対象人物ＰＳが検出された特徴に一致する人物ＰＳとして抽出され、人物ＰＳが一意に特定される。また、検出される人物ＰＳの特徴と、類似度が所定の閾値以上である特徴データＤ５が特徴データ記憶領域Ｍ１０に記憶されていない場合には、当該特徴を有する人物ＰＳに関して新たに特徴データＤ５を生成して新規に検出された人物ＰＳとして記憶する。処理Ｐ３の結果、生成される特徴データＤ５は、例えば１００次元のベクトルデータである。

【0076】

さらに、第４ニューラルネットワークＮ４には、処理Ｐ１の結果とともに処理Ｐ２の結果が入力される。第４ニューラルネットワークＮ４は、処理Ｐ１及び処理Ｐ２の結果に基づき、撮影データＤ１に含まれる人物ＰＳの対象空間ＳＰにおける位置（座標）を検出する処理Ｐ４を実行する。

【0077】

このような態様で抽出処理が行われる場合、データ生成部６３は、抽出処理において撮影データＤ１から各要素間の距離を推定し、推定した距離に基づき人物ＰＳを抽出しているといえる。

【0078】

学習部６３２は、各種情報（例えば撮影データＤ１や広域ネットワークＮＷ１を介して取得可能な情報）を用いて、各人物ＰＳの特徴を適宜学習する。例えば、学習部６３２は、撮影データＤ１に含まれる人物ＰＳの特徴を個別具体的に学習し、対応する特徴データＤ５を適宜更新する。これにより、人物ＰＳの特徴の変動（例えば服装や髪型の変化等）に因る検出結果のゆらぎが抑制される。

【0079】

抽出データ生成部６３３は、抽出部６３１による抽出処理の結果に基づき、抽出データＤ２（図９）を生成する。抽出データ生成部６３３は、抽出データＤ２において、抽出された人物ＰＳのＩＤ、検出された場所（所在場所）、及び検出された時刻（所在時刻）の情報を組み入れる。抽出データ生成部６３３は、撮影データＤ１の送信元の撮影ユニット４０毎に抽出データＤ２を生成する。

【0080】

このような抽出部６３１及び抽出データ生成部６３３を含むデータ生成部６３は、撮影データＤ１（撮影ユニット４０が撮影した画像）に含まれている人物ＰＳに関して所在位置及びその所在時刻を抽出する機能部といえる。

【0081】

（２−４）管理部６４
管理部６４は、抽出データＤ２に基づき、対象空間ＳＰに存在する人物ＰＳの情報を管理する。管理部６４は、定期的に（例えば５分周期で）処理を行う。例えば、管理部６４は、抽出データ記憶領域Ｍ６に記憶されている各抽出データＤ２に基づき、抽出された人物ＰＳ毎に人物履歴データＤ３（図１０）を個別に生成して人物履歴データ記憶領域Ｍ７に格納する。また、例えば、管理部６４は、人物情報テーブルＴＢ２を作成・更新して人物情報記憶領域Ｍ４に格納する。

【0082】

（２−５）受付部６５
受付部６５は、管理装置に入力される情報を取得して入力情報記憶領域Ｍ８に格納する。例えば、受付部６５は、端末９０を介して入力されるコマンドを取得して、入力情報記憶領域Ｍ８に格納する。管理装置６０に対して入力されるコマンドは、例えば、特定の人物ＰＳの所在に関する情報（所在場所、所在位置、又は所定期間における所在履歴等に関する情報）の出力を指示する出力要求コマンドである。出力要求コマンドにおいては、人物ＰＳのＩＤ、氏名又は所属グループ等の情報を用いて対象となる人物ＰＳが指定される。

【0083】

（２−６）情報検索部６６
情報検索部６６は、入力情報記憶領域Ｍ８に格納された出力要求コマンド（検索要求）に基づき、処理を実行する。情報検索部６６は、出力要求コマンドにおいて指定される人物ＰＳに関し、記憶部６１に記憶されている各データ（人物履歴データＤ３又は人物情報等）を参照して検索し、当該人物ＰＳの所在に関する情報（例えば最新の所在空間、所在位置又は所在履歴等）を示す表示データＤ４を検索結果として生成する。

【0084】

表示データＤ４は、例えば図１２のような態様で生成される。図１２に示される表示データＤ４では、出力要求コマンドにおいて指定される人物ＰＳのＩＤが「０１１３９」であり氏名が「田中○○」であり所属グループ「Ｇ３」であって、「2018/03/05/18:00」から「2018/03/06/18:00」までの期間（指定期間）における所在履歴が特定されている。情報検索部６６は、生成した表示データＤ４を出力情報記憶領域Ｍ９に格納する。

【0085】

（２−７）出力制御部６７
出力制御部６７は、出力情報記憶領域Ｍ９に記憶されているデータを宛先となっている機器へ送信（出力）する。例えば、出力制御部６７は、出力情報記憶領域Ｍ９に格納された表示データＤ４を、出力要求コマンドの送信元の端末９０へ送信する。これにより、情報検索部６６によって生成された表示データＤ４（検索結果）が、出力要求コマンドの送信元の端末９０へ送信され、当該端末９０において表示される。

【0086】

（３）管理装置６０による処理の流れ
以下、図１３を参照して、管理装置６０の処理の流れの一例を説明する。図１３は、管理装置６０の処理の流れの一例を示したフローチャートである。

【0087】

管理装置６０は、図１３のステップＳ１０１からステップＳ１０６に示すような流れで処理を実行する。なお、図１３に示す処理の流れは、適宜変更が可能であり、処理が適正に行われる限り、いずれかのステップの順序を入れ換えてもよいし、いずれかのステップが同時に実行されてもよいし、図示しない他のステップが追加されてもよい。

【0088】

ステップＳ１０１において、管理装置６０が撮影データＤ１を受信していない場合（つまり記憶部６１に新たな撮影データＤ１が記憶されない場合、すなわちＮＯの場合）には、処理の流れはステップＳ１０５へ進む。一方、管理装置６０が撮影データＤ１を受信している場合（つまり記憶部６１に新たな撮影データＤ１が記憶されている場合、すなわちＹＥＳの場合）には、処理の流れはステップＳ１０２へ進む。

【0089】

ステップＳ１０２において、管理装置６０は、記憶部６１から撮影データＤ１を取得し、取得した撮影データＤ１に含まれる人物ＰＳを抽出する抽出処理を実行して、抽出データＤ２を生成する。その後、処理の流れはステップＳ１０３へ進む。

【0090】

ステップＳ１０３において、抽出処理の結果、人物ＰＳが抽出可能でない場合（撮影データＤ１において人物ＰＳが検出されない場合）、すなわちＮＯの場合には、処理の流れはステップＳ１０５へ進む。一方、抽出処理の結果、人物ＰＳが抽出可能である場合（撮影データＤ１において人物ＰＳが検出された場合）、すなわちＹＥＳの場合には、処理の流れはステップＳ１０４へ進む。

【0091】

ステップＳ１０４において、管理装置６０は、抽出処理において抽出された人物ＰＳに関して、所定処理を実行する。例えば、管理装置６０は、抽出処理において抽出された人物ＰＳに関して、人物履歴データＤ３を生成又は更新する。また、例えば、管理装置６０は、抽出処理において抽出された人物ＰＳに関して、人物情報テーブルＴＢ２を生成又は更新する。また、例えば、管理装置６０は、抽出処理において抽出された人物ＰＳに関して、特徴を学習する。また、例えば、管理装置６０は、抽出処理において抽出された人物ＰＳに関して、特徴データＤ５を生成又は更新する。その後、処理の流れはステップＳ１０５へ進む。

【0092】

ステップＳ１０５において、管理装置６０が出力要求コマンドを受信していない場合（すなわちＮＯの場合）には、処理の流れはステップＳ１０１に戻る。一方、管理装置６０が出力要求コマンドを受信している場合（すなわちＹＥＳの場合）には、処理の流れはステップＳ１０６へ進む。

【0093】

ステップＳ１０６において、管理装置６０は、出力要求コマンドにおいて指定される人物ＰＳに関して指定される期間の所在履歴を示す表示データＤ４を生成する。管理装置６０は、生成した表示データＤ４を、出力要求コマンドの送信元の端末９０に出力する。これにより、生成された表示データＤ４が、出力要求コマンドの送信元の端末９０において表示される。

【0094】

（４）特徴
（４−１）
上記実施形態に係る管理システム１００は、対象空間ＳＰに設置される撮影ユニット４０と、撮影データＤ１（撮影ユニット４０が撮影した画像）に含まれる人物ＰＳの特徴に基づいて対象空間ＳＰ内の人物ＰＳを抽出して抽出データＤ２（抽出した人物ＰＳに関連付けられたデータ）を生成するデータ生成部６３と、データ生成部６３が生成した抽出データＤ２を記憶する記憶部６１と、抽出データＤ２に基づき対象空間ＳＰに存在する人物ＰＳの情報を管理する管理部６４と、を有している。

【0095】

これにより、撮影ユニット４０の撮影データＤ１（撮影画像）に含まれる人物ＰＳの特徴が識別され、抽出・特定された人物ＰＳに関連して生成された抽出データＤ２に基づき、対象空間ＳＰに存在する人物ＰＳの情報が管理されるようになっている。その結果、対象空間ＳＰにおいて人物ＰＳの情報（例えば所在情報や所在履歴等の情報）を管理することが容易に可能となっている。例えば、ＩＤ情報を含むチップを埋め込まれた帽子等を着用する人物など、あらかじめ管理対象として認識されている人物以外の人の情報を管理することが可能となる。また、このような管理システム１００は、例えば会社における労働者の勤怠管理や、学校における生徒の出欠管理、施設におけるセキュリティ管理等に利用可能に構成されている。

【0096】

また、撮影ユニット４０が対象空間ＳＰの天井ＣＩ（又は天井付近）に設置されることにより、対象空間ＳＰの広い範囲を撮影することが可能となっている。よって、対象空間ＳＰにおいて人物ＰＳの所在を高精度に検出することが可能となっている。

【0097】

（４−２）
上記実施形態において、データ生成部６３は、撮影データＤ１（撮影ユニット４０が撮影した画像）に含まれている人物ＰＳに関して所在位置を抽出するように構成されている。抽出データＤ２は、人物ＰＳの所在位置に関する情報を含んでいる。これにより、対象空間ＳＰにおいて人物ＰＳの所在を管理することが容易に可能となっている。

【0098】

（４−３）
上記実施形態において、データ生成部６３は、撮影データＤ１（撮影ユニット４０が撮影した画像）に含まれている人物ＰＳに関して、所在時刻を抽出する。抽出データＤ２は、抽出した人物ＰＳに関して所在時刻に関する情報を含む。これにより、対象空間ＳＰにおいて人物ＰＳの所在履歴を管理することが容易に可能となっている。

【0099】

（４−４）
上記実施形態において、データ生成部６３は対象空間ＳＰ内の人物ＰＳの特徴（動作等）に基づき人物ＰＳを抽出している。例えば、歩いている動作、作業している動作、デスクワーク、飲食など、人特有の動作を認識した際にその動作を行っている対象に関して、人物ＰＳと認識され又は個人の特定がなされる。これにより人物ＰＳの抽出及び個人の特定を高精度に行うことが可能となっている。

【0100】

（４−５）
上記実施形態において、データ生成部６３は、抽出処理において撮影データＤ１から各要素間の距離を推定し、推定した距離に基づき人物ＰＳを抽出している。これにより、人物ＰＳの抽出及び個人の特定を高精度に行うことが可能となっている。

【0101】

（４−６）
上記実施形態において、データ生成部６３は、撮影ユニット４０が撮影した画像に基づき人物ＰＳの特徴を学習する学習部６３２を含んでいる。これにより、人物ＰＳの抽出及び個人の特定を高精度に行うことが可能となっている。

【0102】

（４−７）
上記実施形態において、管理部６４は、記憶部６１に記憶されている抽出データＤ２に基づき、対象空間ＳＰに存在する人物ＰＳに関して、所在履歴に関する人物履歴データＤ３を個別に生成している。これにより、人の所在履歴が自動生成されるようになっている。

【0103】

（４−８）
上記実施形態に係る管理システム１００は、撮影ユニット４０を複数有しており、データ生成部６３は、複数の撮影ユニット４０が撮影した画像に基づき、人物ＰＳの特徴を識別するように構成されている。これにより、広範囲において人物ＰＳを抽出することが出来るようになっている。

【0104】

（４−９）
上記実施形態において、撮影ユニット４０は、対象空間ＳＰに設置される空気調和機（室内ユニット２０）に配置されている。撮影ユニット４０が係る態様で配置されることにより、対象空間ＳＰ内で広範囲において人物ＰＳを抽出することが出来るようになっている。

【0105】

（５）変形例
上記実施形態は、以下の変形例に示すように適宜変形が可能である。なお、各変形例は、矛盾が生じない範囲で他の変形例と組み合わせて適用されてもよい。

【0106】

（５−１）変形例１
管理システム１００は、特定の空間（対象空間ＳＰ）において存在する人物ＰＳに関して個別に生成した人物履歴データＤ３に基づいて各人物ＰＳの行動内容又は行動履歴を管理するシステムとして構成されてもよい。係る場合について、上記実施形態との相違点を以下に説明する。

【0107】

具体的に、係る場合、データ生成部６３は、撮影データＤ１に含まれている人物ＰＳに関して、所在位置及び所在時刻のみならず、行動内容を抽出する。データ生成部６３は、撮影データ記憶領域Ｍ５に記憶されている撮影データＤ１に含まれる人物ＰＳ、及び人物ＰＳの行動内容を抽出して抽出データＤ２を生成する。

【0108】

より詳細には、データ生成部６３の抽出部６３１が、抽出処理において、撮影データ記憶領域Ｍ５に記憶されている撮影データＤ１を取得して、取得した撮影データＤ１に含まれている人物ＰＳを抽出するとともに、その人物の行動内容を個別に抽出する。抽出部６３１は、人物ＰＳに関して、所在位置、周囲に存在する人若しくは物、動作範囲、又は動作角度等に基づき、人物ＰＳの行動内容を抽出する。ここでの「行動内容」には、対象空間ＳＰにおける人物ＰＳの在・不在のみならず、対象空間ＳＰにおける人物ＰＳの具体的な行為や作業内容についても含まれる。例えば、「行動内容」には、「読書」、「筆記作業」、「ＰＣを用いた作業」、「ＰＣにおいて最もアクティブな状態のアプリケーション（すなわち主に使用中のアプリケーション）」、「電話機を用いた通話」、「会話」、「会話の相手」、「会議」、「食事」、「水分摂取」、「摂取された飲食物の内容（品目、摂取量又は残存量等）」、「印刷機を用いた作業」、「清掃作業」「製造ラインにおける作業」、「歩行」、又は「体操」等、人物ＰＳの行動の詳細が含まれる。

【0109】

データ生成部６３の抽出データ生成部６３３は、抽出部６３１による抽出処理の結果に基づき、抽出データＤ２を生成する。抽出データ生成部６３３は、抽出データＤ２において、抽出された人物ＰＳのＩＤ、検出された場所（所在場所）、検出された時刻（所在時刻）、行動内容に関する情報を組み入れる。係る場合の抽出データＤ２は、抽出した人物ＰＳの所在位置及び所在時刻に関する情報、及び抽出した人物ＰＳに関して行動内容に関する情報を含んでいる。

【0110】

抽出データＤ２は、例えば図１４に示されるように、送信元撮影ユニット４０のＩＤとその撮影場所、撮影データＤ１の受信日時、受信した撮影データＤ１において抽出された人物ＰＳのＩＤ及び行動内容に関する情報である。なお、抽出データＤ２は、必ずしも図１４の態様で生成される必要はなく、抽出データＤ２の生成態様については適宜変更が可能である。例えば、抽出データＤ２は、図１４に含まれる情報のいずれかに代えて他の情報を含んでいてもよい。

【0111】

図１４では、抽出された人物ＰＳの行動内容として、活動状態（主たる活動）、活動内容（具体的な活動内容）、及び活動詳細（活動内容の詳細）等が特定されている。より具体的に、図１４では、例えば、ＩＤが「０１２１」の撮影ユニット４０から送信され撮影された場所が「（対象空間）ＳＰ２」であり撮影された日時が「2018/03/06/17:45」である撮影データＤ１に関して、抽出されたＩＤが「０１１３９」の人物ＰＳの行動内容として、「デスクワーク」を行っている状態にあること（活動状態）、「ＰＣを用いた作業」を行っていること（活動内容）、及び「表計算ソフトを主として使用」していること（活動詳細）等が特定されている。すなわち、図１４では、抽出された人物ＰＳに関して、情報処理機器における作業内容に関する情報が特定されている。

【0112】

また、図１４では、撮影された日時が「2018/03/06/17:50」である撮影データＤ１に関して、抽出されたＩＤが「０１１３９」の人物ＰＳの行動内容として、「デスクワーク」を行っている状態にあること（活動状態）、「飲料摂取」を行っていること（活動内容）、及び「ペットボトル飲料（水）を摂取」していること（活動詳細）等が特定されている。

【0113】

また、図１４では、撮影された日時が「2018/03/06/17:55」である撮影データＤ１に関して、抽出されたＩＤが「０１１３９」の人物ＰＳの行動内容として、「離席」をしている状態にあること（活動状態）、「立ち話」をしていること（活動内容）、及び「話し相手の人物ＩＤが００９９８」であること（活動詳細）等が特定されている。すなわち、図１４に示される抽出データＤ２においては、抽出された人物ＰＳに関して会話の相手が特定されている。

【0114】

このような抽出データＤ２に基づき、人物履歴データＤ３が、人物ＰＳの対象施設１における行動内容の履歴（行動履歴）に関する情報として生成される。人物履歴データＤ３は、例えば図１５に示されるように、人物ＰＳのＩＤ、撮影した撮影ユニット４０のＩＤ、所在場所（撮影された場所）、所在日時（撮影された日時）及び行動履歴等を含む情報である。図１５に示される人物履歴データＤ３では、ＩＤが「０１１３９」の人物ＰＳに関する５分毎の行動履歴が特定されている。なお、人物履歴データＤ３において定義される行動履歴は、必ずしも５分毎である必要はない。また、人物履歴データＤ３は、必ずしも図１５の態様で生成される必要はなく、人物履歴データＤ３の生成態様については適宜変更が可能である。例えば、人物履歴データＤ３は、図１５に含まれる情報のいずれかに代えて他の情報を含んでいてもよい。例えば、人物履歴データＤ３は、「摂取された飲食物の摂取量又は残存量」に関する情報を含んでいてもよい。また例えば、人物履歴データＤ３は、「使用中のＰＣにおいて表示されているインターネット上のホームページ」に関する情報を含んでいてもよい。

【0115】

このような態様で生成される人物履歴データＤ３は、日々の行動の分析若しくは最適化、計画の作成若しくは評価、人物ＰＳの評価若しくは健康管理等、様々な用途に用いることが可能である。

【0116】

なお、「ＰＣにおいて最もアクティブな状態のアプリケーション」に係る情報に関しては、管理装置６０は、撮影ユニット４０における撮影結果に基づいて取得してよいことはもちろんであるが、抽出された人物ＰＳが使用中のパーソナルコンピュータ等の情報処理機器から通信ネットワークを介して当該情報を取得してもよい。係る場合、管理装置は、人物ＰＳが使用する情報処理機器と通信ネットワーク（無線ネットワーク又は／及び有線ネットワーク）で通信可能に接続される。また、当該情報は、例えば取得部６２によって取得される。

【0117】

係る管理装置６０は、特定の人物ＰＳの行動履歴を出力することを要求する出力要求コマンドを入力された場合には、当該コマンドにおいて指定された人物ＰＳに関して、人物履歴データＤ３に基づき、行動履歴に関する情報を示す表示データＤ４を生成して出力するように構成されてもよい。すなわち、図１３のフローのステップＳ１０６において、管理装置６０は、出力要求コマンドにおいて指定される人物ＰＳに関して指定される期間の行動内容の履歴（行動履歴）を示す表示データＤ４を生成するように構成されてもよい。

【0118】

例えば、情報検索部６６が、出力要求コマンドにおいて指定される人物ＰＳに関し、記憶部６１に記憶されている各データ（人物履歴データＤ３又は人物情報等）を参照して検索し、当該人物ＰＳの行動履歴に関する情報を示す表示データＤ４を検索結果として生成するようにしてもよい。

【0119】

係る場合、表示データＤ４は、例えば図１６のような態様で生成される。なお、表示データＤ４は、必ずしも図１６の態様で生成される必要はなく、表示データＤ４の生成態様については適宜変更が可能である。例えば、表示データＤ４は、図１６に含まれる情報のいずれかに代えて他の情報を含んでいてもよい。

【0120】

図１６に示される表示データＤ４では、出力要求コマンドにおいて指定される人物ＰＳのＩＤが「０１１３９」であり氏名が「田中○○」であり所属グループ「Ｇ３」であって、「2018/03/06/09:00」から「2018/03/06/18:00」までの期間（指定期間）における行動履歴が特定されている。図１６に示される人物履歴データＤ３では、例えば、「2018/03/06/13:50」の行動履歴として、「ミーティング」に参加している状態にあること（活動状態）、「プレゼンテーション」を行っていること（活動内容）、及び「他の参加者のＩＤが０１６４、００９９８、９１３２１」であること（活動詳細）等が特定されている。

【0121】

また、管理装置６０は、生成した表示データＤ４を、出力要求コマンドの送信元の端末９０に出力する。これにより、生成された表示データＤ４が、出力要求コマンドの送信元の端末９０において表示されることとなる。

【0122】

なお、表示データＤ４は、例えば、図１７に示されるような態様で生成されてもよい。図１７は、端末９０のディスプレイにおいて行動履歴が表示される場合の、表示データＤ４の一例が示されている。図１７では、指定された期間における対象人物ＰＳの行動履歴が、詳細に示されている。なお、表示データＤ４の生成態様については適宜変更が可能である。

【0123】

本変形例に係る態様で管理装置６０が構成されることで、人物ＰＳの具体的な行動内容を把握することが可能となる。特に各人物ＰＳの詳細な行動履歴を、労力を抑制しつつ管理できるようになる。

【0124】

（５−２）変形例２
上記実施形態では、撮影ユニット４０は、対象空間ＳＰの天井ＣＩに埋めこまれる天井埋込型の室内ユニット２０内に配置されている。しかし、撮影ユニット４０の配置態様は、必ずしもこれに限定されず、適宜変更が可能である。例えば、いずれか／全ての撮影ユニット４０は、対象空間ＳＰの天井から吊り下げられる天井吊下型の室内ユニット２０内に配置されてもよいし、対象空間ＳＰの側壁ＳＷに設置される壁掛型の室内ユニット２０内に配置されてもよい。また、例えば、いずれか／全ての撮影ユニット４０は、必ずしも室内ユニット２０内に配置される必要はなく、他の機器内に配置されてもよいし、独立して設置されてもよい。

【0125】

また、撮影ユニット４０は、対象空間ＳＰの撮影を行ううえで支障がない場合には、必ずしも対象空間ＳＰの天井又は天井付近に配置される必要はない。例えば、撮影ユニット４０は、天井よりも床面に近い位置に設置されてもよい。

【0126】

（５−３）変形例３
上記実施形態では、抽出処理が図１１に示すような態様で行われる例について説明した。しかし、抽出処理は、他の態様によって行われてもよいことはもちろんである。例えば、抽出処理は、ニューラルネットワーク以外の手段を用いて実行されてもよい。例えば、管理者等によって予め登録されている人物ＰＳの特徴を定義したデータに基づいて、係る特徴が撮影データＤ１から抽出されることで人物ＰＳが抽出・特定されてもよい。また、抽出処理においては、必ずしも人物ＰＳの動作に基づいて人物ＰＳが抽出される必要はない。すなわち、抽出処理において用いられる人物ＰＳの特徴については適宜変更が可能である。

【0127】

また、抽出処理は、必ずしも毎時行われる必要はなく、所定のタイミングで行われてもよい。例えば、抽出処理は、定期的に（例えば５分周期で）行われてもよい。

【0128】

また、抽出処理は、必ずしも動画（撮影データＤ１）に基づいて行われる必要はない。例えば、抽出処理は、複数の静止画（撮影データＤ１）に基づいて行われてもよい。

【0129】

（５−４）変形例４
上記実施形態では、撮影データＤ１は、対象空間ＳＰの所定範囲を所定のピクセルで表わした画像データ（動画データ）を含んでいた。しかし、撮影データＤ１の形式については設置環境や設計仕様等に応じて適宜変更が可能である。例えば、撮影データＤ１は、対象空間ＳＰの所定範囲を所定のピクセルで表わした画像データ（静止画）であってもよい。

【0130】

（５−５）変形例５
上記実施形態では、一の対象空間ＳＰに１台の撮影ユニット４０が配置されている。しかし、撮影ユニット４０の配置態様については、必ずしもこれに限定されず、適宜変更が可能である。例えば、一の対象空間ＳＰに複数台の撮影ユニット４０が配置されてもよい。係る場合、複数の撮影ユニット４０が撮影した各撮影データＤ１に基づき人物ＰＳの特徴が識別される。すなわち、一の対象空間ＳＰにおいて異なる撮影角度で撮影された撮影データＤ１に基づいて抽出処理が行われることから、人物ＰＳの抽出及び個人の特定を高精度に行うことが可能である。

【0131】

（５−６）変形例６
上記実施形態では、撮影ユニット情報が図７に示されるような撮影ユニット情報テーブルＴＢ１として生成されている。撮影ユニット情報は、必ずしも係る態様で生成される必要はなく、撮影ユニット情報の生成態様については適宜変更が可能である。

【0132】

（５−７）変形例７
上記実施形態では、人物情報は、例えば図８に示されるような人物情報テーブルＴＢ２として生成されている。人物情報は、必ずしも係る態様で生成される必要はなく、人物情報の生成態様については適宜変更が可能である。すなわち、人物情報テーブルＴＢ２は、図８に含まれる情報のいずれかに代えて他の情報（例えば人物ＰＳの寸法、人物ＰＳの状態、及び人物ＰＳ間の関係性等の情報）を含んでいてもよい。

【0133】

（５−８）変形例８
上記実施形態では、抽出データＤ２が図９に示されるような態様で生成されている。しかし、抽出データＤ２は、必ずしも係る態様で生成される必要はなく、抽出データＤ２の生成態様については適宜変更が可能である。例えば、抽出データＤ２は、図９に含まれる情報のいずれかに代えて他の情報を含んでいてもよい。

【0134】

（５−９）変形例９
上記実施形態では、人物履歴データＤ３が図１０に示されるような態様で生成されている。しかし、人物履歴データＤ３は、必ずしも係る態様で生成される必要はなく、人物履歴データＤ３の生成態様については適宜変更が可能である。例えば、人物履歴データＤ３は、図１０に含まれる情報のいずれかに代えて他の情報を含んでいてもよい。

【0135】

（５−１０）変形例１０
上記実施形態では、表示データＤ４が図１２に示されるような態様で生成されている。しかし、表示データＤ４は、必ずしも係る態様で生成される必要はなく、表示データＤ４の生成態様については適宜変更が可能である。例えば、表示データＤ４は、図１２に含まれる情報のいずれかに代えて他の情報を含んでいてもよい。また、例えば、出力要求コマンドが人物ＰＳの所在位置を要求するものである場合には、表示データＤ４は、当該人物ＰＳの最新の所在空間と所在位置のみを示すものであってもよい。また、例えば、出力要求コマンドが人物ＰＳの所在位置を要求するものである場合には、指定された人物ＰＳが存在する対象空間ＳＰを撮影する撮影ユニット４０の撮影データＤ１を表示データＤ４として出力させてもよい。

【0136】

（５−１１）変形例１１
上記実施形態では、管理装置６０は、撮影データＤ１において人物ＰＳを抽出した後、抽出された人物ＰＳに関して、所定処理を実行している（図１３のステップＳ１０４）。ここで、図１３のステップＳ１０４の処理のいずれかについては適宜省略されてもよい。例えば、管理装置６０は、必ずしも抽出処理において抽出された人物ＰＳに関して特徴を学習する必要はない。また、例えば、管理装置６０は、必ずしも抽出処理において抽出された人物ＰＳに関して特徴データＤ５を生成又は更新する必要はない。

【0137】

（５−１２）変形例１２
上記実施形態では、管理装置６０は、撮影データＤ１に基づいて生成された抽出データＤ２に基づいて人物履歴データＤ３を生成し、人物履歴データＤ３に基づいて出力要求コマンド（検索要求）に対する処理結果（表示データＤ４）を生成していた。しかし、管理装置６０は、人物履歴データＤ３に代えて抽出データＤ２に基づいて出力要求コマンド（検索要求）に対する処理結果（表示データＤ４）を生成してもよい。

【0138】

（５−１３）変形例１３
上記実施形態では、データ生成部６３は、撮影データＤ１に基づき人物ＰＳの特徴を学習する学習部６３２を有している。しかし、データ生成部６３は、必ずしも学習部６３２を有している必要はない。

【0139】

（５−１４）変形例１４
上記実施形態では、管理システム１００が、複数（６つ）の対象空間ＳＰを含む対象施設１において適用されている。しかし、管理システム１００が適用される対象施設１における対象空間ＳＰの数については適宜変更が可能である。例えば、管理システム１００は、７以上又は５以下の対象空間ＳＰを含む対象施設に適用されてもよい。また、例えば、管理システム１００は、単一の対象空間ＳＰを含む対象施設に適用されてもよい。

【0140】

（５−１５）変形例１５
上記実施形態では、端末９０が管理装置６０に対して出力要求コマンドを入力する「入力部」として機能している。しかし、必ずしもこれに限定されず、端末９０以外の装置を係る「入力部」として機能させてもよい。例えばリモコン３０、サーバ５０又は他の装置を係る「入力部」として機能させてもよい。

【0141】

また、上記実施形態では、端末９０が出力要求コマンドに対する処理結果（表示データＤ４）を出力する「出力部」として機能している。しかし、必ずしもこれに限定されず、端末９０以外の装置を係る「出力部」として機能させてもよい。例えばリモコン３０、サーバ５０又は他の装置を係る「出力部」として機能させてもよい。

【0142】

また、「出力部」における情報の出力態様としては、必ずしもデータの表示には限定されない。例えば、「出力部」が音声を出力可能なスピーカを有している場合には、音声データを出力させることで出力要求コマンドに対する処理結果が出力されてもよい。

【0143】

（５−１６）変形例１６
上記実施形態では、各ユニット間（例えば、室外ユニット制御部１８―室内ユニット制御部２５間、室内ユニット制御部２５―室内ユニット制御部２５間、室内ユニット制御部２５―リモコン制御部３５間、及び室内ユニット制御部２５―撮影ユニット４０間）において、通信線を用いて通信ネットワークが構成されていた。しかし、各ユニット間においては、通信線に加えて／通信線に代えて、電波や赤外線を用いた無線通信によって通信ネットワークが構成されてもよいことはもちろんである。また、室外ユニット制御部１８又はサーバ５０は、通信線に加えて／通信線に代えて、無線通信によって広域ネットワークＮＷ１に接続されてもよい。

【0144】

（５−１７）変形例１７
上記実施形態では、サーバ５０は、広域ネットワークＮＷ１を介して室外ユニット制御部１８、室内ユニット制御部２５及びリモコン制御部３５と通信可能に構成されていたが、ＬＡＮ（ローカル・エリア・ネットワーク）を介してこれらのユニットと通信可能に構成されてもよい。

【0145】

（５−１８）変形例１８
上記実施形態では、管理装置６０は、室外ユニット制御部１８、室内ユニット制御部２５、リモコン制御部３５及びサーバ５０が通信ネットワークを介して接続されることで構成されている。しかし、管理装置６０の構成態様は、必ずしもこれに限定されず、他の態様で構成されてもよい。例えば、管理装置６０の構成機器として、室外ユニット制御部１８、室内ユニット制御部２５、リモコン制御部３５及びサーバ５０のいずれかが省略されてもよい。また、例えば、室外ユニット制御部１８、室内ユニット制御部２５、リモコン制御部３５及びサーバ５０、のいずれかに代えて／とともに、別の機器が通信ネットワークを介して接続されることで管理装置６０が構成されてもよい。また、管理装置６０は、必ずしも広域ネットワークＮＷ１に跨って構成される必要はなく、ＬＡＮに接続される機器のみで構成されてもよい。

【0146】

（５−１９）変形例１９
上記実施形態における「人物」は、生物と読み替え可能である。換言すると、管理システム１００は、対象空間ＳＰにおいて存在する生物に関して個別に生成した生物履歴データＤ３に基づいて各生物の、所在履歴、行動内容又は行動履歴を管理するシステムとして構成されてもよい。ここでの生物は、撮影データＤ１から抽出可能である限り、特に限定されないが、例えばペット、家畜、又は野生動物等である。すなわち、本開示に係る思想は、人以外の生物にも適用可能である。

【0147】

（６）
以上、実施形態を説明したが、特許請求の範囲に記載の趣旨及び範囲から逸脱することなく、形態や詳細の多様な変更が可能なことが理解されるであろう。

【産業上の利用可能性】

【0148】

本開示は、情報管理システムに利用可能である。

【符号の説明】

【0149】

１ ：対象施設
１０ ：空気調和装置
１５ ：室外ユニット
１８ ：室外ユニット制御部
２０、（２０ａ―２０ｆ）：室内ユニット（空気調和機）
２５ ：室内ユニット制御部
３０、（３０ａ―３０ｆ）：リモコン
３５ ：リモコン制御部
４０、（４０ａ―４０ｆ）：撮影ユニット（撮影機器）
４１ ：撮影部
４２ ：撮影データ生成部
４３ ：撮影データ出力部
５０ ：サーバ
６０ ：管理装置
６１ ：記憶部
６２ ：取得部
６３ ：データ生成部
６４ ：管理部
６５ ：受付部
６６ ：情報検索部
６７ ：出力制御部（出力部）
９０ ：端末（出力部）
１００ ：管理システム（情報管理システム）
６３１ ：抽出部
６３２ ：学習部
６３３ ：抽出データ生成部
ＣＩ ：天井
Ｄ１ ：撮影データ
Ｄ２ ：抽出データ（人物データ）
Ｄ３ ：人物履歴データ
Ｄ４ ：表示データ
Ｄ５ ：特徴データ
ＧＰ ：ガス連絡配管
ＬＰ ：液連絡配管
Ｍ１ ：プログラム情報記憶領域
Ｍ２ ：環境情報記憶領域
Ｍ３ ：システム情報記憶領域
Ｍ４ ：人物情報記憶領域
Ｍ５ ：撮影データ記憶領域
Ｍ６ ：抽出データ記憶領域
Ｍ７ ：人物履歴データ記憶領域
Ｍ８ ：入力情報記憶領域
Ｍ９ ：出力情報記憶領域
Ｍ１０ ：特徴データ記憶領域
Ｎ１ ：第１ニューラルネットワーク
Ｎ２ ：第２ニューラルネットワーク
Ｎ３ ：第３ニューラルネットワーク
Ｎ４ ：第４ニューラルネットワーク
ＮＷ１ ：広域ネットワーク
ＰＳ ：人物
ＳＰ、（ＳＰ１―ＳＰ６）：対象空間
ＳＷ ：側壁
ＴＢ１ ：撮影ユニット情報テーブル
ＴＢ２ ：人物情報テーブル
ｃｂ１―ｃｂ４ ：通信線

【先行技術文献】

【特許文献】

【0150】

【特許文献1】特開２０１７−４５３７３号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】