特許 7521590 撮像状況監視システム、撮像状況監視方法、及び記録媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-16

(45)【発行日】2024-07-24

(54)【発明の名称】撮像状況監視システム、撮像状況監視方法、及び記録媒体

(51)【国際特許分類】

   H04N 7/18 20060101AFI20240717BHJP

   H04N 23/63 20230101ALI20240717BHJP

   H04N 23/66 20230101ALI20240717BHJP

   H04N 23/60 20230101ALI20240717BHJP

   G06T 7/33 20170101ALI20240717BHJP

【ＦＩ】

H04N7/18 E

H04N23/63 310

H04N23/66

H04N23/60 300

G06T7/33

【請求項の数】 9

(21)【出願番号】P 2022558615

(86)(22)【出願日】2020-10-26

(86)【国際出願番号】 JP2020040119

(87)【国際公開番号】W WO2022091182

(87)【国際公開日】2022-05-05

【審査請求日】2023-04-03

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100104765

【弁理士】

【氏名又は名称】江上 達夫

(74)【代理人】

【識別番号】100107331

【弁理士】

【氏名又は名称】中村 聡延

(74)【代理人】

【識別番号】100131015

【弁理士】

【氏名又は名称】三輪 浩誉

(72)【発明者】

【氏名】田原 裕司

【審査官】鈴木 隆夫

(56)【参考文献】

【文献】国際公開第２０１４／０１０１７４（ＷＯ，Ａ１）

【文献】特開２００２－１５７６７６（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１８

Ｈ０４Ｎ ２３／６３

Ｈ０４Ｎ ２３／６６

Ｈ０４Ｎ ２３／６０

Ｇ０６Ｔ ７／３３

(57)【特許請求の範囲】

【請求項1】

所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成する基準画像生成部と、
前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得する画像取得部と、
前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別する撮像状況監視部と
を備え、
前記基準画像生成部は、前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、生成後の前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置に更新する
撮像状況監視システム。

【請求項2】

前記基準画像情報は、撮像環境に関する情報を有し、
前記撮像状況監視部は、前記基準部分の位置と前記対応部分の位置との差分と所定の閾値とに基づいて、前記撮像状況を判別し、
前記所定の閾値は、前記撮像環境に基づいて設定される、請求項１に記載の撮像状況監視システム。

【請求項3】

前記基準部分の位置と前記対応部分の位置との差分に基づいて、前記撮像状況に関する出力をユーザに対して行う出力に関する処理を行う出力部を、更に備える、請求項１又は２に記載の撮像状況監視システム。

【請求項4】

前記撮像対象の形状情報を含み、
前記基準画像生成部は、前記第１撮像画像において、前記形状情報に対応する部分を前記基準部分とする、請求項１～３のいずれか一項に記載の撮像状況監視システム。

【請求項5】

前記第２撮像画像から前記対応部分が抽出されない場合は、撮像装置に前記撮像対象を再撮像させ、前記第２撮像画像を再取得する画像再取得部を、更に備える、
請求項１～４のいずれか一項に記載の撮像状況監視システム。

【請求項6】

前記基準画像生成部は、前記所定期間中に前記撮像対象を撮像した複数の前記第１撮像画像に基づいて、前記複数の第１撮像画像のうち変化がない部分を前記基準部分として、前記基準画像に関する前記基準画像情報を生成する、請求項１～５のいずれか一項に記載の撮像状況監視システム。

【請求項7】

前記基準部分は前記撮像対象の少なくとも一つの特徴点を不動点として含み、
前記基準画像情報は、前記基準部分に含まれる前記不動点に関する不動点情報を含み、
前記撮像状況監視部は、前記基準画像における前記不動点の位置と、前記対応部分の位置との関係に基づいて、前記撮像状況を判別し、
前記基準画像生成部は、前記基準画像における前記不動点の位置が、前記対応部分の位置と異なる場合、生成後の前記基準画像情報に含まれる前記基準部分の位置を前記第２撮像画像における前記対応部分の位置に更新する、請求項１～６のいずれか一項に記載の撮像状況監視システム。

【請求項8】

所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成し、
前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得し、
前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別し、
前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、生成後の前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置に更新する、撮像状況監視方法。

【請求項9】

コンピュータを、
所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成する基準画像生成部、
前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得する画像取得部、及び、
前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別する撮像状況監視部として機能させ、
前記基準画像生成部は、前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、生成後の前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置に更新するように構成されたコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、撮像画像の撮像状況を監視する撮像状況監視システム、撮像状況監視方法、及び記録媒体に関する。

【背景技術】

【0002】

この種のシステムとして、撮像装置の画角から特定される不動点の位置とその不動点の特徴を示す特徴量とを含む不動点情報に基づいて、撮像装置が撮像した画像から撮像装置の画角変動を検出するように構成されたシステムが知られている（例えば、特許文献１参照。）。

【先行技術文献】

【特許文献】

【0003】

【文献】国際公開第２０１４／０１０１７４号

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１に開示されているシステムにおいては、撮像装置の画角変動が検出されると、画角が手動、又は自動で変動前の状態に戻されるだけである。従って、画角が変化した後の状態で、撮像状況を監視し続けることができるように構成されていないという技術的問題点がある。

【0005】

本発明は、撮像装置の画角の変化等、撮像対象の撮像状況が変化しても、変化後の状態で撮像状況を監視し続けることが可能な撮像状況監視システム、撮像状況監視方法、及び記録媒体を提供することを課題とする。

【課題を解決するための手段】

【0006】

本発明に係る撮像状況監視システムの一の態様は、所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成する基準画像生成部と、前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得する画像取得部と、前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別する撮像状況監視部とを備え、前記基準画像生成部は、前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置とする。

【0007】

本発明に係る撮像状況監視方法の一の態様は、所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成し、前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得し、前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別し、前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置とする。

【0008】

本発明に係るコンピュータプログラムの一の態様は、コンピュータを、所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成する基準画像生成部、前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得する画像取得部、及び、前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別する撮像状況監視部として機能させ、前記基準画像生成部は、前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置とするように構成されたコンピュータプログラムが記録されている。

【0009】

上述した撮像状況監視システム、撮像状況監視方法、及び記録媒体のそれぞれの一の態様によれば、撮像対象の撮像状況が変化しても、変化後の状態で撮像状況を監視し続けることが可能である。

【図面の簡単な説明】

【0010】

【図1】撮像状況監視システム１に係る全体構造の一例を示す図。

【図2】基準画像の一例を示す図。

【図3】比較画像の一例を示す図。

【図4】サーバの構成の一例を示すブロック図。

【図5】基準画像の生成に関する処理の流れの一例を示すフローチャート。

【図6】複数の第１撮像画像から基準部分が検出されるようすを示す図。

【図7】撮像状況の監視に関する処理の流れの一例を示すフローチャート。

【発明を実施するための形態】

【0011】

１．撮像状況監視システム
まず、本形態に係る撮像状況監視システム１（以下、“システム１”という。）に係る全体構成について、図１を参照しながら説明する。図１は、システム１に係る全体構成の一例を示す。

【0012】

システム１は、撮像装置としてのカメラ２０によって撮像される撮像対象５０の撮像画像における撮像状況を監視する。そして、システム１は、撮像状況が変化しても、変化後の状態で撮像対象５０の撮像状況を監視し続けることが可能なように構成されている。このようなシステム１を実現すべく、システム１は、カメラ２０によって撮像された撮像画像を取得可能なサーバ１０を含む。サーバ１０とカメラ２０との接続態様は問わない。例えば、当該接続態様は、インターネット３０等の通信ネットワークを経由したネットワーク接続型でもよいし、直接接続型でもよい。また、当該接続態様は、有線無線を問わない。サーバ１０は物理的に１つのサーバ装置として形成されてもよいし、物理的に複数のサーバ装置によってクラウド上に形成されるクラウドサーバとして形成されてもよい。

【0013】

カメラ２０は、例えば、建物４０の屋内Ｉｄｒ又は屋外Ｏｄｒのいずれかの所定位置に設置されてよい。図１の例では、カメラ２０は、屋内Ｉｄｒの所定位置であるカメラ位置ＣＰに設置されている。カメラ２０は、撮像対象５０を撮像するように撮像対象５０側を向いている。図１の例では、カメラ２０のカメラ位置ＣＰは、カメラ２０を設置するための部材の店舗４０に対する接着部２０ａとしているが、これに限らない。カメラ位置ＣＰは、カメラ２０が設置される店舗内Ｉｄｒの位置として特定可能な位置であればよい。カメラ２０は、例えば、撮像対象５０を定期的（例えば、１時間に１回～数回）に撮像するように構成されてよい。なお、撮像対象５０が屋外Ｏｄｒの所定位置に配置されているときは、カメラ２０は屋外Ｏｄｒのカメラ位置に設置されて屋外Ｏｄｒに配置された撮像対象５０を撮像してもよい。本形態では、建物４０を、一例として、食品を販売する店舗４０（スーパーマーケットやデパート等の食品フロア、食品専門店、食品を販売する売店や販売コーナー等を含む）とする。

【0014】

撮像対象５０は、屋内Ｉｄｒの所定位置である配置位置ＡＰに配置された個体である。或いは、撮像対象５０は、屋内Ｉｄｒの不動体の所定位置にある一部であってもよい。撮像対象５０は、所定の形状を有している。撮像対象５０は、例えば、配置位置ＡＰに固定されていてもよいし、何らかの条件が満たされると(例えば、何らかの力が加わると)可動であってもよい。本形態では、撮像対象５０を、一例として、店舗４０内で食品が陳列される什器５０とする。なお、図１において、什器５０の配置位置ＡＰは、什器５０の脚部の端部５０ａの位置で特定されているが、これに限らない。配置位置ＡＰは、什器５０が配置される店舗内Ｉｄｒの位置として特定可能な位置であればよい。

【0015】

サーバ１０は、カメラ２０によって撮像対象５０が撮像された（即ち、写り込んだ）撮像画像に基づいて、撮像対象５０の撮像状況を監視する。即ち、本形態では、サーバ１０は、什器５０がカメラ２０によって撮像された撮像画像に基づいて、什器５０の撮像状況を監視して当該撮像状況が変化したか否かを判別する。撮像状況には、例えば、カメラ２０の画角、撮像環境（天候、照度等）等が含まれる。本形態において、「画角」とは、撮像対象５０とカメラ２０との相対的位置関係をいう。「画角の変化」は、撮像対象５０とカメラ２０との相対的位置関係の変化をいう。「画角の変化」には、例えば、什器５０の位置の変化、カメラ２０の向きの変化、カメラ２０の位置の変化等が含まれてよい。
２． 撮像状況の監視のために使用される画像
サーバ１０は、撮像状況の変化があったか否かを、基準画像と比較画像とを参照して比較することにより判別する。基準画像と比較画像について図２及び図３を参照しながら説明する。

【0016】

２．１ 基準画像
図２は、サーバ１０が参照する基準画像Ｉｍｒの一例である。基準画像Ｉｍｒは、配置位置ＡＰに配置された什器５０の撮像画像である。基準画像Ｉｍｒは、サーバ１０が撮像状況の変化があったか否かを判別する際に、基準として参照される。基準画像Ｉｍｒは、例えば、所定期間中にカメラ２０によって什器５０が経時的に撮像された複数の第１撮像画像Ｉｍ１に基づいて生成されてよい。基準画像Ｉｍｒの生成方法については後述する。
図２の例では、基準画像Ｉｍｒは、カメラ２０の視野範囲に撮像対象である什器５０と什器５０に隣接する什器５１とが写り込んだ状態を示している。図２に示すように、基準画像Ｉｍｒにおいて、什器５０の各棚には複数の商品６０が陳列され、什器５１の各棚には複数の商品６１が陳列されていてよい。以下、什器５０、什器５１、複数の商品６０及び複数の商品６１のそれぞれが基準画像Ｉｍｒに写り込んだ画像部分にも同じ参照符号を付して説明する。

【0017】

以下、基準画像Ｉｍｒにおいて、什器５０に対応する部分を“基準部分ＲＰ”（点線部分）という。基準画像Ｉｍｒにおいて、基準部分ＲＰの位置は、写り込んだ什器５０の１つの脚部の端部５０ａの位置として特定されてよい。基準画像Ｉｍｒにおいて、基準部分ＲＰの位置（以下“基準位置Ｐｒ”という。）は、店舗４０における什器５０の配置位置ＡＰに対応する。基準部分ＲＰは、複数の不動点を含んでいる。不動点とは、複数の第１撮像画像間で、位置が不変の、或いは位置が不変と見做され得る点である。複数の不動点のそれぞれは、什器５０の複数の特徴点のそれぞれに対応してよい。什器５０の各特徴点は、典型的には、什器５０の形状の特徴となる箇所であり、例えば、什器５０の各端点、各角部の頂点等である。什器５０の複数の特徴点は、例えば、特徴点の集合体によって什器５０の形状が特定であるように設定されてよい。各特徴点は、例えば、位置と特徴量（画像勾配等）によって特定される。図２に示す基準画像Ｉｍｒにおいて、例えば、写り込んだ什器５０の１つの脚部の端部５０ａは、不動点であってもよい。

【0018】

基準画像Ｉｍｒは、例えば、サーバ１０によって生成されてよい。また、基準画像Ｉｍｒは、例えば、サーバ１０によって適宜更新されてよい。基準画像Ｉｍｒに関する情報である基準画像情報は、例えば、サーバ１０によって保持されてよい。基準画像情報には、基準部分ＲＰに含まれる複数の不動点のそれぞれを特定できる不動点情報（例えば、位置及び特徴量）が含まれる。

【0019】

２．２ 比較画像
図３は、サーバ１０が参照する比較画像Ｉｍｃの一例を示す。比較画像Ｉｍｃは、例えば、第１撮像画像Ｉｍ１を撮像するための所定期間後（例えば、基準画像Ｉｍｒの基準画像情報の生成後）に、カメラ２０によって撮像された第２撮像画像Ｉｍ２でよい。比較画像Ｉｍｃにおいて、基準部分ＲＰに対応する基準部分ＲＰ´（一点鎖線部分）は、位置Ｐｒ´に位置している。即ち、図３の例においては、比較画像Ｉｍｃは、基準部分ＲＰが基準位置Ｐｒから位置Ｐｒ´に移動した（即ち、変化した）状態を示している。基準部分ＲＰに含まれる不動点としての端部５０ａの位置に注目した場合、基準位置Ｐｒにあるべき端部（不動点）５０ａが、比較画像Ｉｍｃ（図３）では、基準位置Ｐｒとは異なる位置Ｐｒ´にある。
３． サーバの構成
サーバ１０の構成について、図４を参照しながら説明する。図４は、サーバ１０の構成の一例を示すブロック図である。図４に示すように、サーバ１０は、記憶装置１１と、演算装置１２と、入力装置１３とを備えている。更に、サーバ１０は、出力装置１４を備えていてもよい。記憶装置１１と、演算装置１２と、入力装置１３と、出力装置１４とは、データバス１５を介して接続されていてもよい。

【0020】

記憶装置１１は、所望のデータを記憶可能である。例えば、記憶装置１１は、演算装置１２が実行するコンピュータプログラムを一時的に記憶していてもよい。記憶装置１１は、演算装置１２がコンピュータプログラムを実行している際に演算装置１２が一時的に使用するデータを一時的に記憶してもよい。記憶装置１１は、例えば、基準画像Ｉｍｒに関する基準画像情報等、サーバ１０が長期的に保存するデータを記憶してもよい。なお、記憶装置１１は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ハードディスク装置、光磁気ディスク装置、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）及びディスクアレイ装置のうちの少なくとも一つを含んでいてもよい。つまり、記憶装置１１は、揮発性記録媒体及び不揮発性記録媒体を含んでいてもよい。

【0021】

演算装置１２は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｅｃｓｓｉｎｇ Ｕｎｉｔ）を含む。演算装置１２は、例えば、ＣＰＵ及びＣＰＵの動作に必要な各種情報を記録するＲＡＭ及びＲＯＭ等の記録媒体を含むコンピュータユニットであってもよい。演算装置１２は、コンピュータプログラムを読み込む。例えば、演算装置１２は、記憶装置１１が記憶しているコンピュータプログラムを読み込んでもよい。例えば、演算装置１２は、コンピュータで読み取り可能であって且つ不揮発性記録媒体が記憶しているコンピュータプログラムを、不図示の記録媒体読み取り装置を用いて読み込んでもよい。演算装置１２は、入力装置１３を介して、サーバ１０の外部に配置される不図示の装置からコンピュータプログラムを取得してもよい（つまり、ダウンロードしてもよい又は読み込んでもよい）。演算装置１２は、読み込んだコンピュータプログラムを実行する。その結果、演算装置１２内には、サーバ１０が行うべき動作を実行するための論理的な機能ブロックが実現される。つまり、演算装置１２は、サーバ１０が行うべき動作を実行するための論理的な機能ブロックを実現するためのコントローラとして機能可能である。

【0022】

図４には、システム１における各処理を行うために、演算装置１２内に実現される論理的な機能ブロックの一例が示されている。図４に示すように、演算装置１２内には、基準画像生成部１２１と、画像取得部１２２と、撮像状況監視部１２３と、出力部１２４と、画像再取得部１２５とが実現される。各部１２１～１２５の動作の詳細については後述する。

【0023】

入力装置１３は、サーバ１０の外部からのサーバ１０に対する情報の入力を受け付ける装置である。入力装置１３は、通信による情報の入力（即ち、受信）を受け付けてもよい。例えば、入力装置１３は、カメラ２０によって撮像された撮像画像等の各種情報を、カメラ２０から直接的に、或いは間接的に取得（即ち、受信）してもよい。

【0024】

出力装置１４は、サーバ１０の外部に対して情報を出力する装置である。例えば、出力装置１４は、サーバ１０が行う各処理に関する情報をユーザの認知可能な出力態様で出力してもよい。更に、出力装置１４は、各種情報を、他のサーバやシステムに対して出力（即ち、送信）してもよい。ユーザの認知可能な出力態様には、例えば、出力装置１４としての画面等による表示出力、出力装置１４としてのスピーカ等による音声出力、出力装置１４としてのプリンタ等による印刷出力等が含まれる。

【0025】

４． サーバに形成される各機能ブロックの動作
サーバ１０の演算装置１２に形成される各機能ブロック１２１～１２５の動作について説明する。

【0026】

基準画像生成部１２１は、例えば、店舗内Ｉｄｒの配置位置ＡＰに配置された什器５０が所定期間中に撮像された複数の第１撮像画像Ｉｍ１に基づいて、基準部分ＲＰを検出して基準画像Ｉｍｒに関する基準画像情報を生成する。更に、基準画像生成部１２１は、例えば、カメラ２０の画角が変化した場合（例えば、什器５０が移動した場合）、変化後の什器５０の状態に基づいて新基準画像Ｉｍｒを生成してもよい。

【0027】

画像取得部１２２は、例えば、第１撮像画像Ｉｍ１が撮像される所定期間後（例えば、基準画像情報の生成後）、什器５０がカメラ２０によって撮像された比較画像Ｉｍｃ（即ち、第２撮像画像Ｉｍ２）を、入力装置１３を介して取得する。画像取得部１２２は、比較画像Ｉｍｃを所定時間毎（例えば、３０分に１回又は１時間に１回）に定期的に取得してもよい。更に、画像取得部１２２は、基準画像Ｉｍｒを生成するための複数の第１撮像画像Ｉｍ１を、入力装置１３を介して取得してもよい。

【0028】

撮像状況監視部１２３は、基準画像Ｉｍｒと比較画像Ｉｍｃ（第２撮像画像Ｉｍ２）とに基づいて、什器５０の撮像画像における撮像状況を監視する。撮像状況監視部１２３は、例えば、基準画像Ｉｍｒにおける基準部分ＲＰの基準位置Ｐｒと比較画像Ｉｍｃ（第２撮像画像Ｉｍ２）における基準部分ＲＰ´の位置Ｐｒ´との関係に基づいて、什器５０が撮像できているか否かの撮像状況を判別する。撮像状況監視部１２３は、例えば、比較画像Ｉｍｃにおいて、基準部分ＲＰ´が基準位置Ｐｒの近くで検出されない場合（例えば、基準位置Ｐｒと位置Ｐｒ´との差分が所定の第１閾値を超える場合）、什器５０を撮像できていないと判別してよい。

【0029】

出力部１２４は、例えば、基準部分ＲＰの基準位置Ｐｒと基準部分ＲＰ´の位置Ｐｒ´との差分に応じて、比較画像Ｉｍｃの撮像状況に関する情報を出力装置１４から出力させる。例えば、当該差分に関して複数のレベルが設定されているときは、出力部１２４は、各レベルに応じた通知（例えば、警告や確認勧告）を出力装置１４から出力させてよい。或いは、例えば、当該差分に関して所定の第２閾値（＞第１閾値）が設定されているときは、出力部１２４は、当該差分が第２閾値を超える場合に、所定の通知（例えば、警告や確認勧告）を出力装置１４から出力させてもよい。「通知」には、例えば、撮像画像の異常発生警告、カメラ２０の状態確認勧告、什器５０の状態確認勧告等がある。

【0030】

画像再取得部１２５は、第１撮像画像Ｉｍ１又は第２撮像画像Ｉｍ２に関して什器５０が撮像されていない場合に、カメラ２０に什器５０を再撮像させて、画像取得部１２２に、再撮像された第１撮像画像Ｉｍ１又は再撮像された第２撮像画像Ｉｍ２を再取得させる。カメラ２０が撮像画像を記憶する機能を有しているときは、カメラ２０が記憶する第１撮像画像Ｉｍ１又は第２撮像画像Ｉｍ２を、画像取得部１２２に再取得させてもよい。

【0031】

５． サーバによる処理
サーバ１０は、基準画像Ｉｍｒを生成し、基準画像Ｉｍｒと比較画像Ｉｍｃとに基づいて、什器５０の撮像状況を監視する。そして、サーバ１０は、例えば、カメラ２０の画角が変化すると、基準画像Ｉｍｒを更新する。サーバ１０が行う処理の流れについて、図５～図７を参照して説明する。まず、基準画像Ｉｍｒの生成に関する処理の流れの一例について、図５を参照しながら説明する。図５に示す処理ルーチンは、サーバ１０の基準画像生成部１２１によって行われる。

【0032】

サーバ１０は、まず、第１撮像画像取得処理を行う（ステップＳ１００）。第１撮像画像取得処理では、サーバ１０は、所定時間内に撮像された複数の第１撮像画像Ｉｍ１を、例えば画像取得部１２２に取得させる。「所定時間」は、例えば、基準画像Ｉｍｒを生成するための複数の第１撮像画像Ｉｍ１を撮像する時間として予め設定された時間である。「所定時間」は、例えば、数秒間程度でよい。撮像される第１撮像画像Ｉｍ１の数は、所定時間内に撮像可能な数であればよい。

【0033】

続いて、サーバ１０は、基準部分検出処理を行う（ステップＳ１０１）。基準部分検出処理では、サーバ１０は、まず、複数の第１撮像画像Ｉｍ１のそれぞれから複数の特徴点を抽出する。特徴点は、上述したように、例えば、位置及び特徴量によって特定される。従って、サーバ１０は、例えば、各特徴点に関して、位置及び特徴量を含む特徴点情報を生成して記憶装置１１に記憶してよい。サーバ１０は、図６に示すように、複数の第１撮像画像Ｉｍ１間で位置が不変の、或いは位置が不変と見做され得る特徴点を不動点として特定する。不動点も特徴点と同様に、例えば、位置及び特徴量によって特定される。従って、サーバ１０は、例えば、特定された各不動点に関して、位置及び特徴量を含む不動点情報を生成して記憶装置１１に記憶してよい。サーバ１０は、例えば、対応する特徴点の特徴点情報を不動点情報として記憶装置１１に記憶してよい。特定された不動点の集合体は、基準部分ＲＰに対応する。これにより、基準部分ＲＰが検出される。

【0034】

サーバ１０は、特徴点を抽出する際に、什器５０がカメラ２０の撮像画像に写り込んだ形状（即ち、二次元形状）に関する形状情報を使用してもよい。この場合、サーバ１０は、形状情報を使用して、各第１撮像画像Ｉｍ１から什器５０が写り込んだ画像部分を抽出し、その抽出した画像部分に的を絞って特徴点を抽出してもよい。これにより、什器５０に商品６０が陳列されたままの状態が撮像された第１撮像画像Ｉｍ１であっても、商品６０の特徴点が抽出されることを回避することができる。什器５０の形状情報は、例えば、記憶装置１１に長期的に記憶されていてもよい。或いは、什器５０の形状情報は、使用する度に入力装置１３を介して入力され、記憶装置１１に一時的に記憶されてもよい。

【0035】

図５に戻って、サーバ１０は、基準部分検出処理（ステップＳ１０１）に続いて基準画像生成処理を行う（ステップＳ１０２）。基準画像生成処理では、特定された不動点の集合体である基準部分ＲＰを含む基準画像Ｉｍｒを生成する。サーバ１０は、生成された基準画像Ｉｍｒに関する基準画像情報を生成して、例えば、記憶装置１１に記憶する。基準画像情報には、基準部分ＲＰに含まれる複数の不動点に関する不動点情報が含まれる。サーバ１０は、例えば、基準画像Ｉｍｒに関する処理の際に基準画像情報を適宜参照してよい。

【0036】

サーバ１０は、撮像環境に応じた基準画像Ｉｍｒを生成してもよい。サーバ１０は、例えば、店舗内Ｉｄｒの照度レベル（即ち、明るさレベル）に応じた基準画像Ｉｍｒを生成してもよい。この場合、サーバ１０は、例えば、基準画像Ｉｍｒを生成した際の店舗内Ｉｄｒの照度レベルを特定し、生成した基準画像Ｉｍｒを特定された照度レベル用の基準画像Ｉｍｒとして設定してよい。例えば、サーバ１０は、撮像時の天候情報を所定の天候情報提供サイトから取得し、取得した天候情報から撮像時の照度レベルを特定してよい。かつ／或いは、例えば、サーバ１０は、撮像日時から撮像時の照度レベルを特定してよい。
サーバ１０は、例えば、異なる照度レベル毎に、上述した生成方法によって基準画像Ｉｍｒを生成してもよい。或いは、サーバ１０は、生成した基準画像Ｉｍｒに対応する照度レベルに基づいて、他の照度レベル用の基準画像Ｉｍｒを所定の式や所定の演算モデル等により得てもよい。各照度レベルは、実際の撮像現場の撮像環境に応じて、適宜設定されればよい。サーバ１０は、撮像環境に関する撮像環境情報（例えば、照度レベル）と基準画像Ｉｍｒとを対応付けて、例えば、記憶装置１１に記憶してよい。

【0037】

なお、サーバ１０は、１つの第１撮像画像Ｉｍ１から什器５０に関する複数の特徴点を複数の不動点として抽出することにより、基準部分ＲＰを検出し、基準画像Ｉｍｒを生成してもよい。また、ステップＳ１０１において、例えば、少なくとも１つの第１撮像画像Ｉｍ１の不具合等により基準部分ＲＰが検出できない場合は、サーバ１０は画像再取得部１２５によって、少なくとも１つの第１撮像画像Ｉｍ１を再取得してもよい。

【0038】

サーバ１０によって行われる什器５０の撮像状況の監視に関する処理の流れの一例について、図７を参照しながら説明する。図７に示される処理ルーチンは、例えば、最初の基準画像Ｉｍｒに関する基準画像情報の生成後に行われる。図７に示される処理ルーチンは、サーバ１０の演算装置１２によって実行される。

【0039】

サーバ１０は、まず、画像取得部１２２が比較画像Ｉｍｃをカメラ２０から取得したか否かを判別する（ステップＳ２００）。サーバ１０は、カメラ２０から比較画像Ｉｍｃが取得されるまでステップＳ２００を繰り返す。画像取得部１２２が比較画像Ｉｍｃを取得した場合は（ステップＳ２００：Ｙｅｓ）、サーバ１０は、特徴点抽出処理を行う（ステップＳ２０１）。特徴点抽出処理では、サーバ１０は取得した比較画像Ｉｍｃから複数の特徴点を抽出し、各特徴点の特徴点情報（位置及び特徴量）を取得する。サーバ１０は、特徴点の抽出の際に、上述した形状情報を使用してもよい。

【0040】

続いて、サーバ１０は、撮像状況に変化があったか否かを判別する（ステップＳ２０２）。ステップＳ２０１において、例えば、比較画像Ｉｍｃにおいて、基準部分ＲＰに含まれる各不動点の位置（或いは、各不動点の位置として見做され得る位置）に特徴点を抽出できた場合、サーバ１０は、撮像状況に変化なしと判別してよい。例えば、サーバ１０は、基準部分ＲＰに含まれる不動点の位置Ｐｒと、比較画像Ｉｍｃにおいて不動点に対応する特徴点の位置Ｐｒ´との差分が第１閾値内である場合、不動点の位置（或いは、不動点の位置として見做され得る位置）に特徴点を抽出できたと判断してよい。また、サーバ１０は、不動点の位置Ｐｒと特徴点の位置Ｐｒ´との差分が第１閾値を超えている場合、不動点の位置（或いは、不動点の位置として見做され得る位置）に特徴点を抽出できなかったと判断してよい。即ち、サーバ１０は、基準部分ＲＰの基準位置Ｐｒと、比較画像Ｉｍｃにおいて基準部分ＲＰに対応する基準部分ＲＰ´の位置Ｐｒ´との差分が第１閾値内である場合、不動点の位置（或いは、不動点の位置として見做され得る位置）に特徴点を抽出できたと判断してよい。また、サーバ１０は、基準部分ＲＰの基準位置Ｐｒと基準部分ＲＰ´の位置Ｐｒ´との差分が第１閾値を超えている場合、不動点の位置（或いは、不動点の位置として見做され得る位置）に特徴点を抽出できなかったと判断してよい。なお、例えば、不動点の位置Ｐｒの近くに複数の特徴点が抽出された場合、サーバ１０は、不動点の位置Ｐｒに最も近い特徴点を、不動点に対応する特徴点として特定してよい。

【0041】

撮像状況に変化なしと判別した場合（ステップＳ２０２：Ｎｏ）、サーバ１０はステップＳ２００に戻る。一方、ステップＳ２０１において、例えば、比較画像Ｉｍｃにおいて、いずれかの不動点の位置（或いは、不動点の位置として見做され得る位置）に特徴点が抽出できなかった場合、サーバ１０は撮像状況に変化ありと判別する。撮像状況に変化ありと判別した場合（ステップＳ２０２：Ｙｅｓ）、サーバ１０は、カメラ２０の画角が変化したか否かを判別する（ステップＳ２０３）。

【0042】

サーバ１０は、例えば、基準部分ＲＰに含まれる不動点の位置Ｐｒと、比較画像Ｉｍｃにおいて不動点に対応する特徴点の位置Ｐｒ´との差分が第２閾値内である場合、（例えば、什器５０の位置が移動して）カメラ２０の画角が変化したと判別してよい。即ち、サーバ１０は、例えば、基準部分ＲＰの基準位置Ｐｒと、比較画像Ｉｍｃにおいて基準部分ＲＰに対応する基準部分ＲＰ´の位置Ｐｒ´との差分が第２閾値内である場合、カメラ２０の画角が変化したと判別してよい。サーバ１０は、カメラ２０の画角が変化したと判別した場合（ステップＳ２０３：Ｙｅｓ）、カメラ２０の画角が変化した際の処理のため、ステップＳ２０４へ進む。一方、例えば、基準部分ＲＰの基準位置Ｐｒと、基準部分ＲＰ´の位置Ｐｒ´との差分が第２閾値を超えている場合、或いは、比較画像Ｉｍｃから不動点に対応する特徴点が抽出できなかった場合、サーバ１０は、撮像状況に異常が発生したと判別してよい。サーバ１０は、撮像状況に異常が発生したと判別した場合（ステップＳ２０３：Ｎｏ）、ステップＳ２０５へ進む。

【0043】

ステップＳ２０２及びステップＳ２０３のそれぞれにおいて使用される差分の閾値（第１閾値及び第２閾値の少なくとも一方）は、撮像環境に応じて設けられてもよい。例えば、店舗内Ｉｄｒの照度レベルに応じて差分の閾値が設けられてもよい。サーバ１０は、例えば、店舗内Ｉｄｒの照度レベルに合った差分の閾値を使用することにより、天候や日時に基づく店舗内Ｉｄｒの照度の違いを考慮して撮像状況を判別することができる。例えば、サーバ１０は、撮像時の天候情報を所定の天候情報提供サイトから取得し、取得した天候情報から撮像時の照度レベルを特定してよい。かつ／或いは、例えば、サーバ１０は、撮像日時から撮像時の照度レベルを特定してよい。

【0044】

ステップＳ２０４では、サーバ１０は基準部分更新処理を行う。基準部分更新処理は、上述したように、カメラ２０の画角が変化したと判別された際に行われる。基準部分更新処理では、サーバ１０は、基準部分ＲＰが移動した状態（即ち、比較画像Ｉｍｃ）に基づいて、新基準画像Ｉｍｒを生成し、新基準画像Ｉｍｒに基づいて基準画像情報を更新する。サーバ１０は、例えば、比較画像Ｉｍｃを新基準画像Ｉｍｒとして設定してよい。従って、サーバ１０は、比較画像Ｉｍｃにおける基準部分ＲＰ´を新基準画像Ｉｍｒにおける新基準部分ＲＰとしてよい。即ち、サーバ１０は、例えば、比較画像Ｉｍｃにおける位置Ｐｒ´にある特徴点を、新基準画像Ｉｍｒにおける新基準位置Ｐｒにある新不動点として設定してよい。比較画像Ｉｍｃにおける基準部分ＲＰ´の複数の特徴点が、新基準画像Ｉｍｒにおける複数の不動点として設定されことにより、新基準画像Ｉｍｒにおける新基準部分ＲＰが特定される。サーバ１０は、基準画像情報が新基準画像Ｉｍｒに関する情報になるように、新基準部分ＲＰに含まれる複数の新不動点によって、基準画像情報を更新する。サーバ１０は、更新された基準画像情報に基づいて監視処理を継続するように、ステップＳ２００に戻る。

【0045】

なお、サーバ１０は、新基準画像Ｉｍｒを、図６で示した処理ルーチンにより生成してもよい。即ち、サーバ１０は、新基準画像Ｉｍｒを、所定期間に経時的に撮像された複数の第１撮像画像Ｉｍ１に基づいて生成してもよい。また、新基準画像Ｉｍｒは、撮像環境に応じて生成されてもよい。例えば、サーバ１０は、上述したように、店舗内Ｉｄｒの照度レベルに応じた新基準画像Ｉｍｒを生成してもよい。

【0046】

ステップＳ２０５では、サーバ１０は、比較画像Ｉｍｃが再取得したものか否か判別する。比較画像Ｉｍｃが再取得したものではない場合（ステップＳ２０５：Ｎｏ）、比較画像Ｉｍｃを再取得するためにステップＳ２００へ戻る。比較画像Ｉｍｃが再取得したものである場合（ステップＳ２０５：Ｙｅｓ）、異常状況処理を行う（ステップＳ２０６）。なお、サーバ１０は比較画像Ｉｍｃを２回以上取得してもよい。この場合、サーバ１０は比較画像Ｉｍｃを再取得する回数を管理してもよい。

【0047】

ステップＳ２０６の異常状況処理では、サーバ１０は、例えば、比較画像Ｉｍｃが撮像された撮像状況を判別し、判別された撮像状況に応じたユーザへの通知を、出力装置１４を介して出力してもよい。ユーザへの通知には、例えば、警告及び確認勧告等が含まれる。例えば、比較画像Ｉｍｃにおける基準部分ＲＰ´の位置Ｐｒ´と基準位置Ｐｒとの差分が第２閾値を超える場合、カメラ２０の画角が想定範囲を超えて変化した状況と判別し、ユーザに対して現場確認を勧告してもよい。例えば、比較画像Ｉｍｃから基準部分ＲＰ´が検出されない場合、サーバ１０は、何等かの異常が発生したと判別し、ユーザに対して現場確認を勧告してもよい。例えば、サーバ１０は、比較画像Ｉｍｃが悪天候と判断され得る状態（例えば、積雪又は雨粒の影響を受けたと判断され得る状態）を比較画像Ｉｍｃが示すと判断した場合、悪天候のため比較画像Ｉｍｃが得られないことを、ユーザに通知してもよい。これにより、悪天候による比較画像Ｉｍｃの異常を、撮像状況の異常とすることを回避することができる。例えば、サーバ１０は、悪天天候と判断され得る状態を示す画像に関する情報を、記憶装置１１に有していてもよい。サーバ１０は、ステップＳ２０６の後、図７の処理ルーチンを終了する。

【0048】

異常状況処理では、悪天候と判断され得る状態を比較画像Ｉｍｃが示す場合、サーバ１０はユーザへの通知をしなくてもよい。この場合、サーバ１０は、例えば、比較画像Ｉｍｃが得られる天候になったと判断した場合、図７の処理ルーチンを再開してもよい。或いは、サーバ１０は、例えば、図７の処理ルーチンの終了から所定時間経過後、図７の処理ルーチンを再開してもよい。図７の処理ルーチンの再開のため、サーバ１０は、例えば、ユーザによる入力装置１３を介した入力を受け付けてもよい。或いは、図７の処理ルーチンの再開のため、サーバ１０は、天候情報を提供する天候情報提供サイトにより、店舗４０付近の天候に関する情報を取得してもよい。

【0049】

図７に示される処理ルーチンにおいて、サーバ１０は、撮像環境に適合する基準画像Ｉｍｒを適宜特定して使用してもよい。例えば、サーバ１０は、撮像時の日時（或いは、店舗４０内に設けられた照度センサ）から撮像時の照度レベルを特定し、特定された照度レベルに対応する基準画像Ｉｍｒを使用してよい。例えば、サーバ１０は、撮像時の天候情報を所定の天候情報提供サイトから取得し、取得した天候情報から撮像時の照度レベルを特定し、特定された照度レベルに対応する基準画像Ｉｍｒを使用してよい。或いは、サーバ１０は、撮像日時から撮像時の照度レベルを特定してもよい。

【0050】

図７に示す処理ルーチンにおいて、ステップＳ２００は、サーバ１０の画像取得部１２２によって行われる。ステップＳ２０１～ステップＳ２０３は、サーバ１０の撮像状況監視部１２３によって行われる。ステップＳ２０４は、サーバ１０の基準画像生成部１２１によって行われる。ステップＳ２０５は、サーバ１０の画像再取得部１２５によって行われる。ステップＳ２０６は、サーバ１０の出力部１２４によって行われる。

【0051】

＜付記＞
以上説明した実施形態に関して、更に以下の付記を開示する。

【0052】

（付記１）
付記１に記載の撮像状況監視システムは、所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成する基準画像生成部と、前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得する画像取得部と、前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別する撮像状況監視部とを備え、前記基準画像生成部は、前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置とする、撮像状況監視システムである。

【0053】

付記１に記載の撮像状況監視システムによれば、撮像対象の撮像状況の監視下において、撮像対象の位置の基準となる基準部分の位置が変化したと判別された場合、基準画像情報の基準部分の位置が変化後の位置に更新される。これにより、撮像対象の位置が変化しても、自動的に更新された基準画像によって撮像状況を監視し続けることが可能となる。

【0054】

（付記２）
付記２に記載の撮像状況監視システムは、前記基準画像情報は、撮像環境に関する情報を有し、前記撮像状況監視部は、前記基準部分の位置と前記対応部分の位置との差分と所定の閾値とに基づいて、前記撮像状況を判別し、前記所定の閾値は、前記撮像環境に基づいて設定される、付記１に記載の撮像状況監視システムである。

【0055】

付記２に記載された撮像状況監視システムによれば、撮像環境に応じた閾値で基準部分の位置と対応部分の位置との差分に基づいて、撮像状況を判別することができる。これにより、例えば、第２画像が取得された照度レベルを撮像環境として考慮でき、より的確な判別をすることが可能となる。

【0056】

（付記３）
付記３に記載の撮像状況監視システムは、前記基準部分の位置と前記対応部分の位置との差分に基づいて、前記撮像状況に関する出力をユーザに対して行う出力に関する処理を行う出力部を、更に備える、付記１又は付記２に記載の撮像状況監視システムである。

【0057】

付記３に記載された撮像状況監視システムによれば、例えば、基準部分の位置と対応部分の位置との差分が想定範囲を超える大きさである場合、ユーザに警告や確認勧告の通知をすることが可能となる。或いは、差分の大きさのレベルに応じて、ユーザに必要な通知をしてもよい。

【0058】

（付記４）
付記４に記載の撮像状況監視システムは、前記撮像対象の形状情報を含み、前記基準画像生成部は、前記第１撮像画像において、前記形状情報に対応する部分を前記基準部分とする、付記１～３のいずれか一項に記載の撮像状況監視システムである。

【0059】

付記４に記載された撮像状況監視システムによれば、第１撮像画像における特徴点の抽出の際に、基準画像生成部は、形状情報をテンプレートのように使用することができる。これにより、基準画像生成部は、この形状情報を使用することにより、第１撮像画像から撮像対象が写り込んだ画像部分を抽出し、その抽出した画像部分に的を絞って特徴点を抽出できる。従って、撮像対象ではない他の物体が写り込んだ画像部分の特徴点まで抽出することを回避することができる。例えば、撮像対象以外の他の物体が存在する場合において、他の物体が存在したままの状態で撮像対象を撮像した撮像画像を第１撮像画像として使用することを可能にする。

【0060】

（付記５）
付記５に記載の撮像状況監視システムは、前記第２撮像画像から前記対応部分が抽出されない場合は、撮像装置に前記撮像対象を再撮像させ、前記第２撮像画像を再取得する画像再取得部を、更に備える、付記１～４のいずれか一項に記載の撮像状況監視システムである。

【0061】

付記５に記載された撮像状況監視システムによれば、例えば、一時的な要因（例えば、物体や人が撮像対象とカメラとの間を通り過ぎた瞬間が撮像された場合）のため特徴点が抽出されない場合、第２撮像画像が再取得される。これにより、撮像状況監視部が、一時的な要因のために撮像状況が変化したと判断することを回避することが可能となる。
基準画像生成手段は、撮像環境に応じた基準画像を生成してもよい。従って、前記基準画像生成手段は、（ｉ）前記撮像対象が第１の撮像環境にある前記撮像装置によって撮像されることで生成される前記複数の第１撮像画像に基づいて、第１の基準画像情報を生成し、（ｉｉ）前記撮像対象が前記第１の撮像環境とは異なる第２の撮像環境にある前記撮像装置によって撮像されることで生成される前記複数の第１撮像画像に基づいて、前記第１の基準画像情報とは異なる第２の基準画像情報を生成してもよい。

【0062】

（付記６）
付記６に記載の撮像状況監視システムは、前記基準画像生成部は、前記所定期間中に前記撮像対象を撮像した複数の前記第１撮像画像に基づいて、前記複数の第１撮像画像のうち変化がない部分を前記基準部分として、前記基準画像に関する前記基準画像情報を生成する、付記１～５のいずれか一項に記載の撮像状況監視システムである。

【0063】

付記６に記載された撮像状況監視システムによれば、基準画像生成部は、複数の第１撮像画像によって基準画像を生成する。例えば、一時的な要因（例えば、物体や人が撮像対象とカメラとの間を通り過ぎた瞬間が撮像された場合）により正常でない状態の第１撮像画像が取得された場合でも、基準画像生成部は、他の正常な状態の第１撮像画像に基づいて変化しない部分を基準部分として基準画像を生成することが可能となる。

【0064】

（付記７）
付記７に記載の撮像状況監視システムは、前記基準部分は前記撮像対象の少なくとも一つの特徴点を不動点として含み、前記基準画像情報は、前記基準部分に含まれる前記不動点に関する不動点情報を含み、前記撮像状況監視部は、前記基準画像における前記不動点の位置と、前記対応部分の位置との関係に基づいて、前記撮像状況を判別し、前記基準画像生成部は、前記基準画像における前記不動点の位置が、前記対応部分の位置と異なる場合、前記基準画像情報に含まれる前記基準部分の位置を前記第２撮像画像における前記対応部分の位置とする、付記１～６のいずれか一項に記載の撮像状況監視システムである。

【0065】

付記７に記載された撮像状況監視システムによれば、基準画像の基準部分を複数の不動点の集合体として扱うことができる。従って、例えば、基準部分の位置を不動点の位置として特定することができる。

【0066】

（付記８）
付記８に記載の撮像状況監視方法は、所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成し、前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得し、前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別し、前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置とする、撮像状況監視方法である。

【0067】

付記８に記載された撮像状況監視方法によれば、付記１に記載された撮像状況監視システムと同様に、撮像対象の撮像状況の監視下において、撮像対象の位置の基準となる基準部分の位置が変化したと判別された場合、基準画像情報の基準部分の位置が変化後の位置に更新される。これにより、撮像対象の位置が変化しても、自動的に更新された基準画像によって撮像状況を監視し続けることが可能となる。

【0068】

（付記９）
付記９に記載の記録媒体は、コンピュータを、所定期間中に撮像対象を撮像した第１撮像画像に基づいて、基準部分を含む基準画像に関する基準画像情報を生成する基準画像生成部、前記所定期間後に前記撮像対象を撮像した第２撮像画像を取得する画像取得部、及び、前記基準画像における前記基準部分の位置と、前記第２撮像画像における前記基準部分に対応する対応部分の位置との関係に基づいて、前記撮像対象を撮像できているか否かの撮像状況を判別する撮像状況監視部として機能させ、前記基準画像生成部は、前記基準画像における前記基準部分の位置と、前記対応部分の位置とが異なる場合、前記基準画像情報に含まれる前記基準部分の位置を、前記対応部分の位置とするように構成されたコンピュータプログラムが記録された記録媒体である。

【0069】

付記９に記載された記録媒体に記憶されたコンピュータプログラムによれば、付記１に記載された撮像状況監視システムを実現することができる。

【0070】

本発明は、請求の範囲及び明細書全体から読み取るこのできる発明の要旨又は思想に反しない範囲で適宜変更可能であり、そのような変更を伴う撮像状況監視システム、撮像状況監視方法、及び記録媒体もまた本発明の技術思想に含まれる。

【符号の説明】

【0071】

１ 撮像状況監視システム
１０ サーバ
２０ カメラ（撮像装置）
５０ 什器（撮像対象）
ＲＰ、ＲＰ´ 基準部分
Ｉｍｒ 基準画像
Ｉｍ１ 第１撮像画像
Ｉｍ２ 第２撮像画像
１２１ 基準画像生成部
１２２ 画像取得部
１２３ 撮像状況監視部
１２４ 出力部
１２５ 画像再取得部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】