(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B1)
(11)【特許番号】
(24)【登録日】2023-01-20
(45)【発行日】2023-01-30
(54)【発明の名称】情報処理システム、情報処理方法及びプログラム
(51)【国際特許分類】
G06Q 10/087 20230101AFI20230123BHJP
【ＦＩ】
G06Q10/087
【請求項の数】
16
(21)【出願番号】P 2022130300
(22)【出願日】2022-08-17
【審査請求日】2022-08-18
【早期審査対象出願】
(73)【特許権者】
【識別番号】515029558
【氏名又は名称】セーフィー株式会社
(74)【代理人】
【識別番号】110002789
【氏名又は名称】弁理士法人ＩＰＸ
(72)【発明者】
【氏名】木場 要子
(72)【発明者】
【氏名】齋藤 諒子
【審査官】山内 裕史
(56)【参考文献】
【文献】特開２００１－０８８９１２（ＪＰ，Ａ）
【文献】特開２０１６－０９１２８７（ＪＰ，Ａ）
【文献】特開２０２１－１０５９１６（ＪＰ，Ａ）
【文献】特開２０２１－０５１４９４（ＪＰ，Ａ）
【文献】特開２０２２－０３９０７３（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｑ １０／００ － ９９／００
(57)【特許請求の範囲】
【請求項1】
情報処理システムであって、撮像装置によって撮像された撮像画像を画面に表示し、
前記画面を介したユーザー操作に基づいて少なくとも１つ以上の領域を設定し、
前記領域は、商品が入った物体が置かれる領域であり、
前記撮像画像に基づいて、設定された領域に置かれている物体の数をカウントし、
カウントした前記物体の数と、前記物体に含まれる商品の数と、に基づき、前記領域に置かれている物体に含まれる商品の数を出力する、
情報処理システム。
【請求項2】
請求項１に記載の情報処理システムにおいて、前記物体に入る商品の数を設定する、
情報処理システム。
【請求項3】
請求項２に記載の情報処理システムにおいて、商品の種類ごとに、前記物体に入る商品の数を設定する、
情報処理システム。
【請求項4】
請求項１に記載の情報処理システムにおいて、前記商品の名称、色、サイズのうち少なくとも１つ以上を設定する、
情報処理システム。
【請求項5】
請求項４に記載の情報処理システムにおいて、前記商品の名称、色、サイズのうち少なくとも１つ以上について複数の候補を出力し、
出力された前記複数の候補を選択する選択操作に基づいて、前記商品の名称、色、サイズのうち少なくとも１つ以上を設定する、
情報処理システム。
【請求項6】
請求項１に記載の情報処理システムにおいて、前記物体の数に基づいて、前記商品の在庫を管理するシステムに情報を送信する、
情報処理システム。
【請求項7】
請求項１に記載の情報処理システムにおいて、時系列に沿って前記物体の数の推移を出力する、
情報処理システム。
【請求項8】
請求項６に記載の情報処理システムにおいて、前記物体の数が閾値以下となった場合、前記物体の数に基づいて、前記商品の在庫を管理するシステムに前記商品の発注に関する情報を送信する、
情報処理システム。
【請求項9】
請求項８に記載の情報処理システムにおいて、前記物体の数が閾値以下となったか否かを判定し、前記物体の数が閾値以下となったと判定した場合、前記物体の数に基づいて、前記商品の在庫を管理するシステムに前記商品の発注に関する情報を送信する、
情報処理システム。
【請求項10】
請求項８に記載の情報処理システムにおいて、前記画面を介したユーザー操作に基づいて前記閾値を設定する、
情報処理システム。
【請求項11】
請求項１に記載の情報処理システムにおいて、前記撮像画像に基づいて、設定された領域に置かれている物体の種類を識別する、
情報処理システム。
【請求項12】
請求項１に記載の情報処理システムにおいて、前記１つ以上の領域とは複数の領域であり、
前記複数の領域それぞれに置かれている物体の数をカウントし、
カウントした前記複数の領域それぞれに置かれている物体の数を出力する、
情報処理システム。
【請求項13】
請求項１に記載の情報処理システムにおいて、前記撮像装置は、監視カメラである、
情報処理システム。
【請求項14】
請求項１に記載の情報処理システムにおいて、前記物体は、前記商品が入ったコンテナ又はダンボールである、
情報処理システム。
【請求項15】
情報処理方法であって、撮像装置によって撮像された撮像画像を画面に表示し、
前記画面を介したユーザー操作に基づいて少なくとも１つ以上の領域を設定し、
前記領域は、商品が入った物体が置かれる領域であり、
前記撮像画像に基づいて、設定された領域に置かれている物体の数をカウントし、
カウントした前記物体の数と、前記物体に含まれる商品の数と、に基づき、前記領域に置かれている物体に含まれる商品の数を出力する、
情報処理方法。
【請求項16】
プログラムであって、コンピュータを、請求項１から１４までの何れか１項に記載の情報処理システムとして動作させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報処理システム、情報処理方法及びプログラムに関する。
【背景技術】
【0002】
商品の在庫を管理する在庫管理システムがある。
特許文献１では、商品に関連付けられているＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｅｒ）タグを用いた商品の在庫管理のシステムが開示されている。
特許文献１では、商品に関連付けられているＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｅｒ）タグを用いた商品の在庫管理のシステムが開示されている。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２０２０－１７５９７０号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
導入コスト等の面ですべての商品にＲＦＩＤタグを付すことができない現場もある。また、例えば、野菜、果物等、ＲＦＩＤタグを付して在庫を管理することが適切ではない商品もある。また、すべての商品にＲＦＩＤタグが付されている場合でも、例えばコンテナ又はダンボール等の容器に商品が入っている場合、商品の数を適切に把握することができないこともある。
また、例えば衣料品等を販売する店舗におけるオペレーションとしては、バックヤードにおいて商品をコンテナ又はダンボール等の容器に入ったままの状態（この状態で工場や倉庫から店舗まで運ばれる）で置いておき、店舗管理者が所定の時間に目視で容器の数を確認し（必要に応じて写真を撮り）、それを本社の在庫管理担当者に知らせることにより、全体の在庫を把握し調整している。しかしながら、このやり方ではリアルタイムに状況を把握することが難しいため、余剰在庫ができてしまい、それを置くために店舗のスペースを無駄に使っているという現状がある。
また、例えば衣料品等を販売する店舗におけるオペレーションとしては、バックヤードにおいて商品をコンテナ又はダンボール等の容器に入ったままの状態（この状態で工場や倉庫から店舗まで運ばれる）で置いておき、店舗管理者が所定の時間に目視で容器の数を確認し（必要に応じて写真を撮り）、それを本社の在庫管理担当者に知らせることにより、全体の在庫を把握し調整している。しかしながら、このやり方ではリアルタイムに状況を把握することが難しいため、余剰在庫ができてしまい、それを置くために店舗のスペースを無駄に使っているという現状がある。
【課題を解決するための手段】
【0005】
本発明の一態様によれば、情報処理システムが提供される。この情報処理システムは、撮像装置によって撮像された撮像画像を画面に表示する。画面を介したユーザー操作に基づいて少なくとも１つ以上の領域を設定する。領域は、商品が入った物体が置かれる領域である。撮像画像に基づいて、設定された領域に置かれている物体の数をカウントする。
【図面の簡単な説明】
【0006】
【発明を実施するための形態】
【0007】
以下、図面を用いて本発明の実施形態について説明する。以下に示す実施形態中で示した各種特徴事項は、互いに組み合わせ可能である。
【0008】
特に、本明細書において「部」とは、例えば、広義の回路によって実施されるハードウェア資源と、これらのハードウェア資源によって具体的に実現されうるソフトウェアの情報処理とを合わせたものも含みうる。また、実施形態１においては様々な情報を取り扱うが、これら情報は、０又は１で構成される２進数のビット集合体として信号値の高低によって表されるか、信号値の物理的な数値によって表されるか、又は量子的な重ね合わせによって表されるかによらず、広義の回路上で通信・演算が実行されうる。
【0009】
また、広義の回路とは、回路（Ｃｉｒｃｕｉｔ）、回路類（Ｃｉｒｃｕｉｔｒｙ）、プロセッサ（Ｐｒｏｃｅｓｓｏｒ）、及びメモリ（Ｍｅｍｏｒｙ）等を少なくとも適当に組み合わせることによって実現される回路である。すなわち、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ：ＡＳＩＣ）、プログラマブル論理デバイス（例えば、単純プログラマブル論理デバイス（Ｓｉｍｐｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＳＰＬＤ）、複合プログラマブル論理デバイス（Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＣＰＬＤ）、及びフィールドプログラマブルゲートアレイ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ：ＦＰＧＡ））等を含むものである。
【0010】
また、実施形態中に登場するソフトウェアを実現するためのプログラムは、サーバーからダウンロード可能な態様で実施してもよいし、クラウドコンピュータ上でプログラムの実行がなされてもよいし、不揮発性又は揮発性の非一時的な記憶媒体に記憶させて頒布されてもよい。
【0011】
１．システム構成
図１は、情報処理システム１０００のシステム構成の一例を示す図である。図１に示されるように、情報処理システム１０００は、システム構成として、サーバー装置１００と、クライアント装置１１０と、撮像装置１２０と、を含む。サーバー装置１００と、クライアント装置１１０と、撮像装置１２０と、はネットワーク１９０を介して通信可能に接続されている。
サーバー装置１００は、撮像装置１２０で撮像された撮像画像を記憶し、撮像画像を解析等し、解析等の結果をクライアント装置１１０等に送信する。クライアント装置１１０は、サーバー装置１００から受け取った撮像画像を表示したり、サーバー装置１００から受け取った解析結果等を表示したりする。クライアント装置１１０は、店舗等において商品の在庫管理等を行う担当者が操作する装置である。撮像装置１２０は、店舗に設置されているカメラである。より好適には、撮像装置１２０は、店舗に設置されている監視カメラである。監視カメラを流用することによって安価に情報処理システム１０００を構築することができる。実施形態１において、撮像装置１２０は、店舗の物置等、店舗の商品が入ったコンテナ１４０又はダンボール等が置かれる領域１３０を撮像するよう設置される。ここで、コンテナ１４０又はダンボールは、物体の一例である。なお、コンテナとは、店舗の商品等を入れて輸送するための入れ物である。実施形態１では、物体の例としてコンテナ１４０を例に説明を行う。
図１は、情報処理システム１０００のシステム構成の一例を示す図である。図１に示されるように、情報処理システム１０００は、システム構成として、サーバー装置１００と、クライアント装置１１０と、撮像装置１２０と、を含む。サーバー装置１００と、クライアント装置１１０と、撮像装置１２０と、はネットワーク１９０を介して通信可能に接続されている。
サーバー装置１００は、撮像装置１２０で撮像された撮像画像を記憶し、撮像画像を解析等し、解析等の結果をクライアント装置１１０等に送信する。クライアント装置１１０は、サーバー装置１００から受け取った撮像画像を表示したり、サーバー装置１００から受け取った解析結果等を表示したりする。クライアント装置１１０は、店舗等において商品の在庫管理等を行う担当者が操作する装置である。撮像装置１２０は、店舗に設置されているカメラである。より好適には、撮像装置１２０は、店舗に設置されている監視カメラである。監視カメラを流用することによって安価に情報処理システム１０００を構築することができる。実施形態１において、撮像装置１２０は、店舗の物置等、店舗の商品が入ったコンテナ１４０又はダンボール等が置かれる領域１３０を撮像するよう設置される。ここで、コンテナ１４０又はダンボールは、物体の一例である。なお、コンテナとは、店舗の商品等を入れて輸送するための入れ物である。実施形態１では、物体の例としてコンテナ１４０を例に説明を行う。
【0012】
図１では、説明の簡略化のため、情報処理システム１０００において、クライアント装置１１０は１台しか図示していないが、情報処理システム１０００には複数のクライアント装置１１０が含まれていてもよい。また、図１では、クライアント装置１１０の例としてＰＣを示しているが、ＰＣに限定されるものではなく、タブレット型コンピュータ、スマートフォン等、後述する画面等を表示できるものであればどのようなものであってもよい。
ここで、特許請求の範囲に記載の情報処理システムは、複数の装置で構成されてもよいし、一つの装置で構成されてもよい。特許請求の範囲に記載の情報処理システムが一つの装置で構成される場合、その装置の一例はサーバー装置１００である。
ここで、特許請求の範囲に記載の情報処理システムは、複数の装置で構成されてもよいし、一つの装置で構成されてもよい。特許請求の範囲に記載の情報処理システムが一つの装置で構成される場合、その装置の一例はサーバー装置１００である。
【0013】
２．ハードウェア構成
（サーバー装置１００のハードウェア構成）
図２は、サーバー装置１００のハードウェア構成の一例を示す図である。サーバー装置１００は、ハードウェア構成として、制御部２１０と、記憶部２２０と、通信部２３０と、を含む。
（サーバー装置１００のハードウェア構成）
図２は、サーバー装置１００のハードウェア構成の一例を示す図である。サーバー装置１００は、ハードウェア構成として、制御部２１０と、記憶部２２０と、通信部２３０と、を含む。
【0014】
制御部２１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等であって、サーバー装置１００の全体を制御する。制御部２１０が、記憶部２２０に記憶されているプログラムに基づき、処理を実行することによって、サーバー装置１００の機能等が実現される。
記憶部２２０は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）の何れか、又はこれらの任意の組み合わせであって、プログラム及び制御部２１０がプログラムに基づき処理を実行する際に利用するデータ等を記憶する。
通信部２３０は、ＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）等であって、サーバー装置１００をネットワーク１９０に接続し、他の装置との通信を司る。
実施形態１では、説明の簡略化のため、サーバー装置１００に含まれる制御部２１０は１つとして示しているが、複数であってもよい。また、制御部２１０がプログラムに基づき処理を実行する際に利用するデータは、記憶部２２０に限られず、サーバー装置１００と通信可能な他の装置の記憶部等に記憶されていてもよい。
記憶部２２０は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）の何れか、又はこれらの任意の組み合わせであって、プログラム及び制御部２１０がプログラムに基づき処理を実行する際に利用するデータ等を記憶する。
通信部２３０は、ＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）等であって、サーバー装置１００をネットワーク１９０に接続し、他の装置との通信を司る。
実施形態１では、説明の簡略化のため、サーバー装置１００に含まれる制御部２１０は１つとして示しているが、複数であってもよい。また、制御部２１０がプログラムに基づき処理を実行する際に利用するデータは、記憶部２２０に限られず、サーバー装置１００と通信可能な他の装置の記憶部等に記憶されていてもよい。
【0015】
（クライアント装置１１０のハードウェア構成）
図３は、クライアント装置１１０のハードウェア構成の一例を示す図である。クライアント装置１１０は、ハードウェア構成として、制御部３１０と、記憶部３２０と、入力部３３０と、出力部３４０と、通信部３５０と、を含む。
図３は、クライアント装置１１０のハードウェア構成の一例を示す図である。クライアント装置１１０は、ハードウェア構成として、制御部３１０と、記憶部３２０と、入力部３３０と、出力部３４０と、通信部３５０と、を含む。
【0016】
制御部３１０は、ＣＰＵ等であって、クライアント装置１１０の全体を制御する。
記憶部３２０は、ＨＤＤ、ＲＯＭ、ＲＡＭ、ＳＳＤの何れか、又はこれらの任意の組み合わせであって、プログラム、制御部３１０がプログラムに基づき処理を実行する際に利用するデータ等を記憶させる。制御部３１０が、記憶部３２０に記憶されているプログラムに基づき、処理を実行することによって、クライアント装置１１０の機能が実現される。
入力部３３０は、キーボード及び／又はマウス等であって、ユーザー操作に基づいて情報をクライアント装置１１０に入力する。出力部３４０は、ディスプレイ等であって、制御部３１０の制御に基づいて、画面等を表示する。通信部３５０は、ＮＩＣ等であって、クライアント装置１１０をネットワーク１９０に接続し、他の装置との通信を司る。
記憶部３２０は、ＨＤＤ、ＲＯＭ、ＲＡＭ、ＳＳＤの何れか、又はこれらの任意の組み合わせであって、プログラム、制御部３１０がプログラムに基づき処理を実行する際に利用するデータ等を記憶させる。制御部３１０が、記憶部３２０に記憶されているプログラムに基づき、処理を実行することによって、クライアント装置１１０の機能が実現される。
入力部３３０は、キーボード及び／又はマウス等であって、ユーザー操作に基づいて情報をクライアント装置１１０に入力する。出力部３４０は、ディスプレイ等であって、制御部３１０の制御に基づいて、画面等を表示する。通信部３５０は、ＮＩＣ等であって、クライアント装置１１０をネットワーク１９０に接続し、他の装置との通信を司る。
【0017】
３．情報処理
以下、実施形態１に係る情報処理を説明する。
図４は、情報処理システム１０００における情報処理の一例を示すシーケンス図である。
シーケンスＳＱ４０１において、撮像装置１２０は、所定の領域、実施形態１の例では領域１３０を少なくとも含む領域を撮像し、撮像画像（動画）をサーバー装置１００に送信する。なお、撮像画像には、属性情報として、撮像日時の情報等が含まれる。
撮像装置１２０から撮像画像を受信すると、シーケンスＳＱ４０２において、サーバー装置１００の制御部２１０は、受信した撮像画像を２０２等の所定の記憶領域に一時的に記憶する。なお、撮像画像の送信及び記憶の処理は情報処理システム１０００が起動中は繰り返し実行される。
以下、実施形態１に係る情報処理を説明する。
図４は、情報処理システム１０００における情報処理の一例を示すシーケンス図である。
シーケンスＳＱ４０１において、撮像装置１２０は、所定の領域、実施形態１の例では領域１３０を少なくとも含む領域を撮像し、撮像画像（動画）をサーバー装置１００に送信する。なお、撮像画像には、属性情報として、撮像日時の情報等が含まれる。
撮像装置１２０から撮像画像を受信すると、シーケンスＳＱ４０２において、サーバー装置１００の制御部２１０は、受信した撮像画像を２０２等の所定の記憶領域に一時的に記憶する。なお、撮像画像の送信及び記憶の処理は情報処理システム１０００が起動中は繰り返し実行される。
【0018】
シーケンスＳＱ４０３において、制御部２１０は、クライアント装置１１０より領域を設定する画面の表示要求を受信する。
領域を設定する画面の表示要求を受け取ると、シーケンスＳＱ４０４において、制御部２１０は、撮像画像に基づいて、領域を設定する画面を生成する。
そして、シーケンスＳＱ４０５において、制御部２１０は、生成した画面を要求元のクライアント装置１１０に画面を送信する。画面を生成し、表示要求元に画面を送信する処理は、表示制御の一例である。なお、実施形態１では、サーバー装置１００が画面を生成し、表示要求元のクライアント装置１１０に送信するものとして説明を行う。以下においても同様である。但し、表示要求に基づいて、サーバー装置１００が画面の生成に関するデータをクライアント装置１１０に送信する。クライアント装置１１０は、受信したデータに基づき画面を生成し、表示するようにしてもよい。このように画面の生成等に用いられるデータを表示要求元の装置に送信する処理も表示制御の一例である。
領域を設定する画面の表示要求を受け取ると、シーケンスＳＱ４０４において、制御部２１０は、撮像画像に基づいて、領域を設定する画面を生成する。
そして、シーケンスＳＱ４０５において、制御部２１０は、生成した画面を要求元のクライアント装置１１０に画面を送信する。画面を生成し、表示要求元に画面を送信する処理は、表示制御の一例である。なお、実施形態１では、サーバー装置１００が画面を生成し、表示要求元のクライアント装置１１０に送信するものとして説明を行う。以下においても同様である。但し、表示要求に基づいて、サーバー装置１００が画面の生成に関するデータをクライアント装置１１０に送信する。クライアント装置１１０は、受信したデータに基づき画面を生成し、表示するようにしてもよい。このように画面の生成等に用いられるデータを表示要求元の装置に送信する処理も表示制御の一例である。
【0019】
シーケンスＳＱ４０６において、制御部３１０は、サーバー装置１００から受信した、領域を設定する画面（後述する図５に示す画面）を出力部３４０に表示する。図５は、クライアント装置１１０に表示されている領域を設定する画面５００の一例を示す図である。画面５００には、店舗の物置等、撮像装置１２０によって撮像されたコンテナ１４０が置かれる場所が含まれる。
クライアント装置１１０の操作者は、図５の画面において、置かれたコンテナ１４０をカウントしたい領域を設定する操作を行う。領域を設定する操作とは、例えば出力部３４０においてクリック及び／又はドラッグにより四角形等の領域を描く操作等である。図５の例では、操作者は、領域５１０と領域５２０とを設定する操作を行っている。領域５１０及び領域５２０は、それぞれコンテナが置かれる領域である。シーケンスＳＱ４０７において、制御部３１０は、操作者の操作に関する情報を操作情報として受け付ける。操作情報としては、例えば、撮像画像上においてどこに領域が設定されたかの情報等がある。制御部３１０は、撮像画像上の設定された領域の位置情報等を、設定された領域ごとに記憶部２２０等に記憶する。
シーケンスＳＱ４０８において、制御部３１０は、サーバー装置１００に操作情報を送信する。
シーケンスＳＱ４０９において、制御部２１０は、受信した操作情報等に基づいて、撮像画像上に１つ以上の領域を設定する。上述したように領域は、商品が入ったコンテナ１４０が置かれる領域である。
クライアント装置１１０の操作者は、図５の画面において、置かれたコンテナ１４０をカウントしたい領域を設定する操作を行う。領域を設定する操作とは、例えば出力部３４０においてクリック及び／又はドラッグにより四角形等の領域を描く操作等である。図５の例では、操作者は、領域５１０と領域５２０とを設定する操作を行っている。領域５１０及び領域５２０は、それぞれコンテナが置かれる領域である。シーケンスＳＱ４０７において、制御部３１０は、操作者の操作に関する情報を操作情報として受け付ける。操作情報としては、例えば、撮像画像上においてどこに領域が設定されたかの情報等がある。制御部３１０は、撮像画像上の設定された領域の位置情報等を、設定された領域ごとに記憶部２２０等に記憶する。
シーケンスＳＱ４０８において、制御部３１０は、サーバー装置１００に操作情報を送信する。
シーケンスＳＱ４０９において、制御部２１０は、受信した操作情報等に基づいて、撮像画像上に１つ以上の領域を設定する。上述したように領域は、商品が入ったコンテナ１４０が置かれる領域である。
【0020】
なお、画面上において、複数の領域（図５の例では、領域５１０及び領域５２０）が設定されたことを検知した場合、制御部２１０は、複数の領域それぞれが異なる態様で表示されるよう制御する。図５の例では、複数の領域それぞれを囲う線を異なるよう表示するよう制御することによって領域が異なることを示している。但し、このことに限定されるものではない。制御部２１０は、複数の領域がそれぞれ異なる領域であることを示さればよい。例えば、制御部２１０は、異なる領域を囲う線を異なる色で表示するようにしてもよいし、領域自体に異なる背景色を付けるようにしてもよい。
【0021】
また、クライアント装置１１０の操作者は、図５の画面において領域を設定した後、設定した領域に名前を付ける操作を行うようにしてもよい。領域に名前を付ける操作を検知した場合、制御部２１０は、名前を入力するための入力領域を領域に関連付けて表示するよう制御する。図５の例では、領域５１０に関連付けて入力領域５３０が表示され、「エリアＡ」の名前が入力されている。また、領域５２０に関連付けて入力領域５４０が表示され、「エリアＢ」の名前が入力されている。入力された名前の情報は制御部２１０に送信され、サーバー装置１００において、該当する領域と関連付けて管理される。
シーケンスＳＱ４０９までの処理は、領域を設定する処理である。
シーケンスＳＱ４０９までの処理は、領域を設定する処理である。
【0022】
領域が設定されると、シーケンスＳＱ４１０において、制御部２１０は、撮像画像に基づいて、設定された領域に置かれているコンテナ１４０の数をカウントする。図５に示されるように、複数の領域が設定された場合、制御部２１０は、複数の領域それぞれに置かれているコンテナ１４０の数をカウントする。このカウントは、例えばＡＩ（Ａｒｔｉｆｉｃｉａｌ Ｉｎｔｅｌｌｉｇｅｎｃｅ）による物体検知等の手法を用いて行う。例えば、制御部２１０は、撮像画像と、撮像画像の領域の位置情報と、を学習済みモデルに入力する。ここで、学習済みモデルは、撮像画像と、撮像画像に該当する領域の位置情報と、を入力データ、領域の位置情報で示される、撮像画像に含まれる領域に置かれているコンテナの数を出力データ、として学習された学習済みモデルである。制御部２１０は、学習済みモデルより、位置情報で示される位置の領域に置かれているコンテナの数を取得することで、カウントする。
シーケンスＳＱ４１１において、制御部２１０は、カウントしたコンテナ１４０の数を記憶部２２０等の所定の記憶領域に記憶する。上述したように、複数の領域が設定された場合、制御部２１０は、カウントした複数の領域それぞれに置かれているコンテナ１４０の数をそれぞれの領域に関連付けて出力する。カウントしたコンテナ１４０の数を所定の記憶領域に記憶する処理は、カウントしたコンテナ１４０の数を出力する処理の一例である。シーケンスＳＱ４１１の処理によって、例えば、図６に示すようなデータ（以下、領域データともいう）が記憶される。図６は、領域データの一例を示す図である。図６に示されるように、領域データには、ユーザーＩＤと、デバイスＩＤと、地域ＩＤと、店舗ＩＤと、部屋ＩＤと、領域ＩＤと、領域名と、日時と、カウントされたコンテナ数と、が含まれる。この他、例えば各ＩＤに対応する名称として、ユーザー名、デバイス名、地域名、店舗名、部屋名等が設定されてもよい。なお、ここでいうユーザーとは、主に撮像装置１２０の所有者、又は管理者、又は利用者等を意味するが、これ以外であってもよいし、これらを分けて別々のＩＤや名称として設定されるようにしてもよい。ユーザーＩＤは、撮像装置のユーザーを識別する識別情報である。デバイスＩＤは、撮像装置を識別するＩＤである。地域ＩＤは、店舗が所属する地域を識別する識別情報である。店舗ＩＤは、撮像装置１２０が設置されている店舗を識別する識別情報である。部屋ＩＤは、店舗の中の部屋を識別する識別情報である。領域ＩＤは、図５に示されるような画面において設定された領域を識別する識別情報である。領域名は、領域ＩＤに対応し、図５に示されるような画面において設定された領域の名前である。日時は、コンテナ数がカウントされる際に用いられた撮像画像が撮像された日時を示す情報である。コンテナ数は、カウントされたコンテナの数を示す情報である。撮像画像に基づく、コンテナ１４０の数のカウント等の処理は、定期的に（例えば、２時間に１回）実行される。なお、図６の例では領域データにはレコード６１０～レコード６４０のみが示されているがこれは例示である。
シーケンスＳＱ４１１において、制御部２１０は、カウントしたコンテナ１４０の数を記憶部２２０等の所定の記憶領域に記憶する。上述したように、複数の領域が設定された場合、制御部２１０は、カウントした複数の領域それぞれに置かれているコンテナ１４０の数をそれぞれの領域に関連付けて出力する。カウントしたコンテナ１４０の数を所定の記憶領域に記憶する処理は、カウントしたコンテナ１４０の数を出力する処理の一例である。シーケンスＳＱ４１１の処理によって、例えば、図６に示すようなデータ（以下、領域データともいう）が記憶される。図６は、領域データの一例を示す図である。図６に示されるように、領域データには、ユーザーＩＤと、デバイスＩＤと、地域ＩＤと、店舗ＩＤと、部屋ＩＤと、領域ＩＤと、領域名と、日時と、カウントされたコンテナ数と、が含まれる。この他、例えば各ＩＤに対応する名称として、ユーザー名、デバイス名、地域名、店舗名、部屋名等が設定されてもよい。なお、ここでいうユーザーとは、主に撮像装置１２０の所有者、又は管理者、又は利用者等を意味するが、これ以外であってもよいし、これらを分けて別々のＩＤや名称として設定されるようにしてもよい。ユーザーＩＤは、撮像装置のユーザーを識別する識別情報である。デバイスＩＤは、撮像装置を識別するＩＤである。地域ＩＤは、店舗が所属する地域を識別する識別情報である。店舗ＩＤは、撮像装置１２０が設置されている店舗を識別する識別情報である。部屋ＩＤは、店舗の中の部屋を識別する識別情報である。領域ＩＤは、図５に示されるような画面において設定された領域を識別する識別情報である。領域名は、領域ＩＤに対応し、図５に示されるような画面において設定された領域の名前である。日時は、コンテナ数がカウントされる際に用いられた撮像画像が撮像された日時を示す情報である。コンテナ数は、カウントされたコンテナの数を示す情報である。撮像画像に基づく、コンテナ１４０の数のカウント等の処理は、定期的に（例えば、２時間に１回）実行される。なお、図６の例では領域データにはレコード６１０～レコード６４０のみが示されているがこれは例示である。
【0023】
シーケンスＳＱ４１２において、制御部２１０は、クライアント装置１１０よりカウント数の情報を含む画面の表示要求を受信する。
クライアント装置１１０よりカウント数の情報を含む画面の表示要求を受け取ると、シーケンスＳＱ４１３において、制御部２１０は、図６に示されるようなデータ及びコンテナ１４０の数のカウントに係る撮像画像等に基づき、カウント数の情報を含む画面を生成する。
そして、シーケンスＳＱ４１４において、制御部２１０は、生成した画面を要求元のクライアント装置１１０に画面を送信する。
クライアント装置１１０よりカウント数の情報を含む画面の表示要求を受け取ると、シーケンスＳＱ４１３において、制御部２１０は、図６に示されるようなデータ及びコンテナ１４０の数のカウントに係る撮像画像等に基づき、カウント数の情報を含む画面を生成する。
そして、シーケンスＳＱ４１４において、制御部２１０は、生成した画面を要求元のクライアント装置１１０に画面を送信する。
【0024】
シーケンスＳＱ４１５において、制御部３１０は、サーバー装置１００から受信した画面（後述する図７に示す画面）を出力部３４０に表示する。図７は、コンテナ１４０のカウント数の情報を含む画面７００の一例を示す図である。なお、図７はあるユーザーのある撮像装置に関する情報を表示しているが、複数のユーザー又は複数の撮像装置に関する情報を一緒に表示してもよいし、それらを選択的に表示可能としてもよい。また、例えば複数地域に跨って多店舗展開している会社において、複数の管理者（ユーザー）ごとに幾つかの店舗／地域を分けて担当させるような場合、ユーザーＩＤに地域ＩＤ／店舗ＩＤを対応付けておき、デフォルトでは各ユーザーが担当する地域／店舗における直近の時刻のデータを優先して表示し、更にユーザーの指示に応じて地域名／店舗名／部屋名／領域名／日時／コンテナ数等の各種情報ごとにソート又は絞り込み表示可能としてもよい。また、各ユーザーが担当する地域／店舗におけるコンテナ数（又は商品数）を合算して表示可能としてもよい。画面７００は、表示領域７１０と、表示領域７９０と、を含む。表示領域７１０には、カウントされたコンテナ１４０の個数、コンテナ１４０をカウントした撮像画像等が表示される。その他、ユーザー名、デバイス名、地域名、店舗名、部屋名等を一緒に表示してもよい。画像７２０は、撮像画像であり、例えば図５の画面５００で対応する時刻のものをサムネイル化し、更に好ましくは対応する領域を識別可能に示したものである。領域７３０は、カウントしたコンテナ１４０が置かれている領域（エリア）の情報であり、図６の領域名に対応する。日時７４０は、画像７２０に表示されている撮像画像が撮像された日時の情報であり、図６の日時に対応する。個数７５０は、該当する撮像画像の該当する領域に置かれているコンテナ１４０の数であり、図６のコンテナ数に対応する。画像７２０、領域７３０、日時７４０、個数７５０を１つのレコードとして、表示領域７１０には複数のレコードが含まれる。表示領域７９０には、複数の領域それぞれに置かれているコンテナ１４０の数の時系列に沿った推移が含まれる。表示領域７９０に含まれるグラフのＸ軸は時間である。Ｙ軸はコンテナ１４０の数である。図７に示されるように、制御部２１０は、時系列に沿ってコンテナ１４０の数の推移を出力するよう制御する。カウントしたコンテナ１４０の数を画面に表示するよう制御する処理は、カウントしたコンテナ１４０の数を出力する処理の一例である。
【0025】
シーケンスＳＱ４１６において、制御部２１０は、シーケンスＳＱ４１０でカウントしたコンテナ１４０の数が領域ごとに予め定められた閾値以下か否かを判定する。
コンテナ１４０の数が予め定められた閾値以下であると判定した場合、シーケンスＳＱ４１７において、制御部２１０は、コンテナ１４０の数に基づいて、商品の在庫を管理するシステムに情報を送信する。例えば、制御部２１０は、領域に置かれているコンテナ１４０の数に応じて予め定められた数の商品の発注に関する情報を、商品の在庫を管理するシステムに送信する。なお、発注情報を送信した後は、重複した発注を防止するため、制御部２１０は、同じ領域で新たな時刻のレコードにおいてコンテナ数が閾値以下の状態が継続した場合であっても更なる発注はしないようにし、コンテナ数が増加又は再び閾値を超える状態となった場合にこれを解除すればよい。
コンテナ１４０の数が予め定められた閾値以下であると判定した場合、シーケンスＳＱ４１７において、制御部２１０は、コンテナ１４０の数に基づいて、商品の在庫を管理するシステムに情報を送信する。例えば、制御部２１０は、領域に置かれているコンテナ１４０の数に応じて予め定められた数の商品の発注に関する情報を、商品の在庫を管理するシステムに送信する。なお、発注情報を送信した後は、重複した発注を防止するため、制御部２１０は、同じ領域で新たな時刻のレコードにおいてコンテナ数が閾値以下の状態が継続した場合であっても更なる発注はしないようにし、コンテナ数が増加又は再び閾値を超える状態となった場合にこれを解除すればよい。
【0026】
実施形態１の処理によれば、設定された領域に置かれたコンテナ１４０の数が自動的にカウントされるため、担当者は商品の在庫等を適切に把握することができる。そのため、余剰在庫を抑制することができ、店舗のスペースの無駄な使用を防ぐことができる。
【0027】
（変形例１）
実施形態１の変形例１を説明する。
変形例１のクライアント装置１１０の操作者は、図５の画面において領域を設定した後、設定した領域にコンテナ１４０の数の閾値を設定する操作を行うようにしてもよい。コンテナ１４０の数の閾値を設定する操作を検知した場合、変形例１の制御部２１０は、画面に閾値を設定するための入力領域８１０を表示させるように制御する。図８は、入力領域８１０を含む画面５００の一例を示す図である。クライアント装置１１０の操作者は、入力領域８１０に該当する領域（図８の例では領域５２０）のコンテナ１４０の数の閾値を設定する。この閾値は、この値以下になった場合に、コンテナに含まれる商品の発注を行うための閾値である。入力領域８１０に閾値が入力されたことを検知した場合、制御部２１０は、該当する領域の領域ＩＤ等と関連付けて閾値を記憶する。すなわち、制御部２１０は、画面を介したユーザー操作に基づいて領域と領域に関するコンテナ１４０の数に係る閾値とを設定する。図９は、変形例１の領域データの一例を示す図である。図９の領域データでは、図６に示した領域データに比べて、閾値の情報が更に項目に含まれている。閾値は、図８等の画面で設定されたコンテナ１４０の数の閾値である。
図９に示されるような画面において閾値が設定されている場合、シーケンスＳＱ４１３において、制御部２１０は、シーケンスＳＱ４０８でカウントしたコンテナ１４０の数が閾値以下か否かを判定する。
コンテナ１４０の数が閾値以下となったと判定した場合、シーケンスＳＱ４１４において、制御部２１０は、カウントしたコンテナ１４０の数に基づいて、商品の在庫を管理するシステムに、コンテナ１４０に格納されている商品の発注に関する情報を送信する。例えば、制御部２１０は、領域に置かれているコンテナ１４０の数に応じて予め定められた数の商品の発注に関する情報を、商品の在庫を管理するシステムに送信する。
実施形態１の変形例１を説明する。
変形例１のクライアント装置１１０の操作者は、図５の画面において領域を設定した後、設定した領域にコンテナ１４０の数の閾値を設定する操作を行うようにしてもよい。コンテナ１４０の数の閾値を設定する操作を検知した場合、変形例１の制御部２１０は、画面に閾値を設定するための入力領域８１０を表示させるように制御する。図８は、入力領域８１０を含む画面５００の一例を示す図である。クライアント装置１１０の操作者は、入力領域８１０に該当する領域（図８の例では領域５２０）のコンテナ１４０の数の閾値を設定する。この閾値は、この値以下になった場合に、コンテナに含まれる商品の発注を行うための閾値である。入力領域８１０に閾値が入力されたことを検知した場合、制御部２１０は、該当する領域の領域ＩＤ等と関連付けて閾値を記憶する。すなわち、制御部２１０は、画面を介したユーザー操作に基づいて領域と領域に関するコンテナ１４０の数に係る閾値とを設定する。図９は、変形例１の領域データの一例を示す図である。図９の領域データでは、図６に示した領域データに比べて、閾値の情報が更に項目に含まれている。閾値は、図８等の画面で設定されたコンテナ１４０の数の閾値である。
図９に示されるような画面において閾値が設定されている場合、シーケンスＳＱ４１３において、制御部２１０は、シーケンスＳＱ４０８でカウントしたコンテナ１４０の数が閾値以下か否かを判定する。
コンテナ１４０の数が閾値以下となったと判定した場合、シーケンスＳＱ４１４において、制御部２１０は、カウントしたコンテナ１４０の数に基づいて、商品の在庫を管理するシステムに、コンテナ１４０に格納されている商品の発注に関する情報を送信する。例えば、制御部２１０は、領域に置かれているコンテナ１４０の数に応じて予め定められた数の商品の発注に関する情報を、商品の在庫を管理するシステムに送信する。
【0028】
変形例１によれば、コンテナ１４０の数の閾値を設定することができる。適切な閾値を設定することによって、コンテナ１４０の数が閾値以下になった場合、自動的に発注がなされるため、商品の販売機会の損失を防ぐことができる。なお、重複した発注を防止するための仕組みについては、実施形態１と同様にすればよい。
【0029】
（変形例２）
実施形態１の変形例２を説明する。
変形例２の制御部２１０は、カウントしたコンテナ１４０の数と、コンテナ１４０に含まれる商品の数と、に基づき、領域に置かれているコンテナ１４０に含まれる商品の数を出力する。なお、変形例２ではコンテナ１４０に含まれる商品の数は予め定められているものとする。図１０は、変形例２の領域データの一例を示す図である。図１０の領域データでは、図６に示した領域データに比べて、商品数の情報が更に項目に含まれている。商品数は、該当する領域に置かれているすべてのコンテナに含まれる商品の合計数である。より具体的には、「コンテナ数」×「コンテナ毎の商品数」＝「商品数」として算出される。
実施形態１の変形例２を説明する。
変形例２の制御部２１０は、カウントしたコンテナ１４０の数と、コンテナ１４０に含まれる商品の数と、に基づき、領域に置かれているコンテナ１４０に含まれる商品の数を出力する。なお、変形例２ではコンテナ１４０に含まれる商品の数は予め定められているものとする。図１０は、変形例２の領域データの一例を示す図である。図１０の領域データでは、図６に示した領域データに比べて、商品数の情報が更に項目に含まれている。商品数は、該当する領域に置かれているすべてのコンテナに含まれる商品の合計数である。より具体的には、「コンテナ数」×「コンテナ毎の商品数」＝「商品数」として算出される。
【0030】
また、クライアント装置１１０より商品数の情報を含む画面の表示要求を受け取ると、制御部２１０は、図１０に示されるようなデータ及びコンテナ１４０の数のカウントに係る撮像画像等に基づき、領域に置かれているすべてのコンテナ１４０に含まれる商品の合計数の情報を含む画面を生成する。制御部２１０は、生成した画面を要求元のクライアント装置１１０に画面を送信する。制御部３１０は、サーバー装置１００から受信した画面（後述する図１１に示す画面）を出力部３４０に表示する。図１１は、領域に置かれているコンテナ数の情報と、領域に置かれているすべてのコンテナ１４０に含まれる商品の数の情報と、を含む画面７００の一例を示す図である。図１１の表示領域７１０は、図７の表示領域７１０に比べて、商品数１１１０が更に含まれている。商品数１１１０は、該当する領域に置かれているすべてのコンテナ１４０に含まれる商品の数である。また、制御部２１０は、画面７００を介した操作等に応じて、図１１の表示領域７９０のグラフのＹ軸を、コンテナ１４０の数から領域に置かれているすべてのコンテナ１４０に含まれる商品の数に相互に切り替えるようにしてもよい。
【0031】
変形例２によれば、領域に置かれているすべてのコンテナ１４０に含まれる商品の数を出力することができる。なお、前述した実施例における自動発注と同様に、商品数についても閾値を設け、出力された商品数が閾値以下となった場合に自動発注がかかるようにしてもよい。
【0032】
（変形例３）
実施形態１の変形例３を説明する。
変形例３のクライアント装置１１０の操作者は、図５の画面において領域を設定した後、設定した領域のコンテナ１４０に含まれる商品の数を設定する操作を行うようにしてもよい。コンテナ１４０に含まれる商品の数を設定する操作を検知した場合、変形例３の制御部２１０は、画面に商品の数を設定するための入力領域１２１０を表示させるように制御する。図１２は、入力領域１２１０を含む画面５００の一例を示す図である。クライアント装置１１０の操作者は、入力領域１２１０に該当する領域に置かれるコンテナ１４０に含まれる商品の数を設定する。入力領域１２１０に商品の数が入力されたことを検知した場合、制御部２１０は、該当する領域の領域ＩＤ等と関連付けてコンテナ１４０に含まれる商品の数を記憶する。すなわち、制御部２１０は、入力領域１２１０に入力された値に基づいて、１つのコンテナ１４０に入る商品の数を設定する。
実施形態１の変形例３を説明する。
変形例３のクライアント装置１１０の操作者は、図５の画面において領域を設定した後、設定した領域のコンテナ１４０に含まれる商品の数を設定する操作を行うようにしてもよい。コンテナ１４０に含まれる商品の数を設定する操作を検知した場合、変形例３の制御部２１０は、画面に商品の数を設定するための入力領域１２１０を表示させるように制御する。図１２は、入力領域１２１０を含む画面５００の一例を示す図である。クライアント装置１１０の操作者は、入力領域１２１０に該当する領域に置かれるコンテナ１４０に含まれる商品の数を設定する。入力領域１２１０に商品の数が入力されたことを検知した場合、制御部２１０は、該当する領域の領域ＩＤ等と関連付けてコンテナ１４０に含まれる商品の数を記憶する。すなわち、制御部２１０は、入力領域１２１０に入力された値に基づいて、１つのコンテナ１４０に入る商品の数を設定する。
【0033】
変形例３によれば、コンテナ１４０ごとにコンテナに含まれる商品の数を設定することができる。
【0034】
（変形例４）
実施形態１の変形例４を説明する。
変形例４のクライアント装置１１０の操作者は、図５の画面において領域を設定した後、設定した領域のコンテナ１４０に含まれる商品の名称、色、サイズのうち少なくとも１つ以上を設定するようにしてもよい。コンテナ１４０に含まれる商品の情報を入力する操作を検知した場合、変形例４の制御部２１０は、画面に商品の情報を入力する入力領域１３１０、入力領域１３２０、入力領域１３３０を表示させるように制御する。図１３は、商品の情報を入力する入力領域を含む画面５００の一例を示す図である。入力領域１３１０は商品の名称を入力する領域である。入力領域１３２０は商品の色を入力する領域である。入力領域１３３０は商品のサイズを入力する領域である。クライアント装置１１０の操作者は、入力領域１３１０で商品の名称を、入力領域１３２０で商品の色を、入力領域１３３０で商品のサイズを入力する。入力領域１３１０、入力領域１３２０及び入力領域１３３０で情報が入力されたことを検知した場合、制御部２１０は、該当する領域の領域ＩＤ等と関連付けてコンテナ１４０に含まれる商品の名称、色、サイズを記憶する。この処理は、制御部２１０が、コンテナ１４０に含まれる商品の名称、色、サイズのうち少なくとも１つ以上を設定する処理の一例である。
実施形態１の変形例４を説明する。
変形例４のクライアント装置１１０の操作者は、図５の画面において領域を設定した後、設定した領域のコンテナ１４０に含まれる商品の名称、色、サイズのうち少なくとも１つ以上を設定するようにしてもよい。コンテナ１４０に含まれる商品の情報を入力する操作を検知した場合、変形例４の制御部２１０は、画面に商品の情報を入力する入力領域１３１０、入力領域１３２０、入力領域１３３０を表示させるように制御する。図１３は、商品の情報を入力する入力領域を含む画面５００の一例を示す図である。入力領域１３１０は商品の名称を入力する領域である。入力領域１３２０は商品の色を入力する領域である。入力領域１３３０は商品のサイズを入力する領域である。クライアント装置１１０の操作者は、入力領域１３１０で商品の名称を、入力領域１３２０で商品の色を、入力領域１３３０で商品のサイズを入力する。入力領域１３１０、入力領域１３２０及び入力領域１３３０で情報が入力されたことを検知した場合、制御部２１０は、該当する領域の領域ＩＤ等と関連付けてコンテナ１４０に含まれる商品の名称、色、サイズを記憶する。この処理は、制御部２１０が、コンテナ１４０に含まれる商品の名称、色、サイズのうち少なくとも１つ以上を設定する処理の一例である。
【0035】
変形例４によれば、領域に置かれるコンテナに含まれる商品の名称、色、サイズのうち少なくとも１つ以上を設定することができる。
【0036】
（変形例５）
実施形態１の変形例５を説明する。
コンテナ１４０に含まれる商品の情報を選択する操作を検知した場合、変形例５の制御部２１０は、画面に商品の情報を入力する選択領域１４１０、選択領域１４２０、選択領域１４３０を表示させるように制御する。図１４は、商品の情報を選択する選択領域を含む画面５００の一例を示す図である。選択領域１４１０は商品の名称を選択する領域である。選択領域１４２０は商品の色を選択する領域である。選択領域１４３０は商品のサイズを選択する領域である。例えば、操作者が選択領域１４１０を選択すると、制御部２１０は、図１５に示されるような商品の名称を選択するための選択メニュー１５１０を表示する。１５は、選択メニュー１５１０が表示されている、画面５００の一例を示す図である。操作者は選択メニュー１５１０から商品の名称を選択すると、選択された商品の名称が選択領域１４１０において選択された状態となる。選択領域１４２０及び選択領域１４３０が選択された場合も同様である。選択領域１４１０、選択領域１４２０及び選択領域１４３０で情報が選択されたことを検知した場合、制御部２１０は、該当する領域の領域ＩＤ等と関連付けてコンテナ１４０に含まれる商品の名称、色、サイズを記憶する。この処理は、制御部２１０が、商品の名称、色、サイズのうち少なくとも１つ以上について複数の候補を出力する。そして、制御部２１０が、出力された複数の候補を選択する選択操作に基づいて、商品の名称、色、サイズのうち少なくとも１つ以上を設定する処理の一例である。
実施形態１の変形例５を説明する。
コンテナ１４０に含まれる商品の情報を選択する操作を検知した場合、変形例５の制御部２１０は、画面に商品の情報を入力する選択領域１４１０、選択領域１４２０、選択領域１４３０を表示させるように制御する。図１４は、商品の情報を選択する選択領域を含む画面５００の一例を示す図である。選択領域１４１０は商品の名称を選択する領域である。選択領域１４２０は商品の色を選択する領域である。選択領域１４３０は商品のサイズを選択する領域である。例えば、操作者が選択領域１４１０を選択すると、制御部２１０は、図１５に示されるような商品の名称を選択するための選択メニュー１５１０を表示する。１５は、選択メニュー１５１０が表示されている、画面５００の一例を示す図である。操作者は選択メニュー１５１０から商品の名称を選択すると、選択された商品の名称が選択領域１４１０において選択された状態となる。選択領域１４２０及び選択領域１４３０が選択された場合も同様である。選択領域１４１０、選択領域１４２０及び選択領域１４３０で情報が選択されたことを検知した場合、制御部２１０は、該当する領域の領域ＩＤ等と関連付けてコンテナ１４０に含まれる商品の名称、色、サイズを記憶する。この処理は、制御部２１０が、商品の名称、色、サイズのうち少なくとも１つ以上について複数の候補を出力する。そして、制御部２１０が、出力された複数の候補を選択する選択操作に基づいて、商品の名称、色、サイズのうち少なくとも１つ以上を設定する処理の一例である。
【0037】
変形例５によれば、領域に置かれるコンテナに含まれる商品の名称、色、サイズのうち少なくとも１つ以上を設定することができるとともに、予め設定されている名称、色、サイズから選択するため誤った情報で設定することを防止することができる。
【0038】
（変形例６）
実施形態１の変形例６を説明する。
変形例６のクライアント装置１１０の操作者は、図１４又は図１５の画面において商品の名称又は色又はサイズ等を設定した後、商品の種類（ここでは名称、色及びサイズ等のうち何れか１つ以上が同じものを同一の種類とする）ごとにコンテナに含まれる商品の数を設定する操作を行うようにしてもよい。変形例６の制御部２１０は、設定した情報に基づいて、各領域に含まれる商品数を算出し、出力してもよい。より具体的には、制御部２１０は、各領域に対応する「商品の種類」から、その種類に対応する「商品の種類ごとのコンテナに含まれる商品の数」を特定し、例えば「コンテナ数」×「商品の種類ごとのコンテナに含まれる商品の数」＝「商品数」として、その領域に含まれる「商品数」を算出する。
実施形態１の変形例６を説明する。
変形例６のクライアント装置１１０の操作者は、図１４又は図１５の画面において商品の名称又は色又はサイズ等を設定した後、商品の種類（ここでは名称、色及びサイズ等のうち何れか１つ以上が同じものを同一の種類とする）ごとにコンテナに含まれる商品の数を設定する操作を行うようにしてもよい。変形例６の制御部２１０は、設定した情報に基づいて、各領域に含まれる商品数を算出し、出力してもよい。より具体的には、制御部２１０は、各領域に対応する「商品の種類」から、その種類に対応する「商品の種類ごとのコンテナに含まれる商品の数」を特定し、例えば「コンテナ数」×「商品の種類ごとのコンテナに含まれる商品の数」＝「商品数」として、その領域に含まれる「商品数」を算出する。
【0039】
変形例６によれば、商品の種類ごとにコンテナに含まれる商品の数を設定することができ、その情報に基づいて各領域に含まれる商品数を出力することができる。
【0040】
（変形例７）
実施形態１の変形例７を説明する。
変形例７の制御部２１０は、撮像画像に基づいて、設定された領域に置かれているコンテナ１４０の種類を識別するとともに、識別したコンテナ１４０の種類ごとのコンテナの数をカウントする。コンテナの種類は、例えば、制御部２１０は、ＡＩによる画像解析によって識別する。例えば、制御部２１０は、撮像画像を学習済みモデルに入力する。ここで、学習済みモデルは、撮像画像を入力データ、撮像画像に含まれるコンテナの種類ごとのコンテナ数を出力データ、として学習された学習済みモデルである。制御部２１０は、学習済みモデルより、種類ごとのコンテナ数を取得することで、カウントする。
実施形態１の変形例７を説明する。
変形例７の制御部２１０は、撮像画像に基づいて、設定された領域に置かれているコンテナ１４０の種類を識別するとともに、識別したコンテナ１４０の種類ごとのコンテナの数をカウントする。コンテナの種類は、例えば、制御部２１０は、ＡＩによる画像解析によって識別する。例えば、制御部２１０は、撮像画像を学習済みモデルに入力する。ここで、学習済みモデルは、撮像画像を入力データ、撮像画像に含まれるコンテナの種類ごとのコンテナ数を出力データ、として学習された学習済みモデルである。制御部２１０は、学習済みモデルより、種類ごとのコンテナ数を取得することで、カウントする。
【0041】
変形例７によれば、撮像画像に基づいてコンテナの種類を識別し、どの種類のコンテナがいくつ領域に置かれているのかカウントすることができる。
【0042】
（その他の変形例）
上述した実施形態等では、設定した領域に置かれたコンテナの数（又は商品数）が閾値以下になった場合、制御部２１０は、在庫を管理するシステム等に発注に関する情報を送信するよう説明を行った。しかし、制御部２１０は、設定した領域に置かれたコンテナの数（又は商品数）が設定された数以上になった場合、在庫過多であるとしてコンテナの数（又は商品数）が設定された数以上あることを示す情報を出力するようにしてもよい。出力としては、所定のシステム、又は装置に対して、情報を送信してもよいし、ディスプレイ等に表示するようにしてもよい。
上述した実施形態等では、設定した領域に置かれたコンテナの数（又は商品数）が閾値以下になった場合、制御部２１０は、在庫を管理するシステム等に発注に関する情報を送信するよう説明を行った。しかし、制御部２１０は、設定した領域に置かれたコンテナの数（又は商品数）が設定された数以上になった場合、在庫過多であるとしてコンテナの数（又は商品数）が設定された数以上あることを示す情報を出力するようにしてもよい。出力としては、所定のシステム、又は装置に対して、情報を送信してもよいし、ディスプレイ等に表示するようにしてもよい。
【0043】
さらに、次に記載の各態様で提供されてもよい。
【0044】
（１）情報処理システムであって、撮像装置によって撮像された撮像画像を画面に表示し、前記画面を介したユーザー操作に基づいて少なくとも１つ以上の領域を設定し、前記領域は、商品が入った物体が置かれる領域であり、前記撮像画像に基づいて、設定された領域に置かれている物体の数をカウントする、情報処理システム。
【0045】
（２）上記（１）に記載の情報処理システムにおいて、カウントした前記物体の数を出力する、情報処理システム。
【0046】
（３）上記（２）に記載の情報処理システムにおいて、カウントした前記物体の数と、前記物体に含まれる商品の数と、に基づき、前記領域に置かれている物体に含まれる商品の数を出力する、情報処理システム。
【0047】
（４）上記（１）から（３）までの何れか１つに記載の情報処理システムにおいて、前記物体に入る商品の数を設定する、情報処理システム。
【0048】
（５）上記（４）に記載の情報処理システムにおいて、商品の種類ごとに、前記物体に入る商品の数を設定する、情報処理システム。
【0049】
（６）上記（１）から（５）までの何れか１つに記載の情報処理システムにおいて、前記商品の名称、色、サイズのうち少なくとも１つ以上を設定する、情報処理システム。
【0050】
（７）上記（６）に記載の情報処理システムにおいて、前記商品の名称、色、サイズのうち少なくとも１つ以上について複数の候補を出力し、出力された前記複数の候補を選択する選択操作に基づいて、前記商品の名称、色、サイズのうち少なくとも１つ以上を設定する、情報処理システム。
【0051】
（８）上記（１）から（７）までの何れか１つに記載の情報処理システムにおいて、前記物体の数に基づいて、前記商品の在庫を管理するシステムに情報を送信する、情報処理システム。
【0052】
（９）上記（１）から（８）までの何れか１つに記載の情報処理システムにおいて、時系列に沿って前記物体の数の推移を出力する、情報処理システム。
【0053】
（１０）上記（９）に記載の情報処理システムにおいて、前記物体の数が閾値以下となった場合、前記物体の数に基づいて、前記商品の在庫を管理するシステムに前記商品の発注に関する情報を送信する、情報処理システム。
【0054】
（１１）上記（１０）に記載の情報処理システムにおいて、前記物体の数が閾値以下となったか否かを判定し、前記物体の数が閾値以下となったと判定した場合、前記物体の数に基づいて、前記商品の在庫を管理するシステムに前記商品の発注に関する情報を送信する、情報処理システム。
【0055】
（１２）上記（１０）又は（１１）に記載の情報処理システムにおいて、前記画面を介したユーザー操作に基づいて領域と前記領域に関する前記閾値とを設定する、情報処理システム。
【0056】
（１３）上記（１）から（１２）までの何れか１つに記載の情報処理システムにおいて、前記撮像画像に基づいて、設定された領域に置かれている物体の種類を識別するとともに、前記物体の数をカウントする、情報処理システム。
【0057】
（１４）上記（１）から（１３）までの何れか１つに記載の情報処理システムにおいて、前記１つ以上の領域とは複数の領域であり、前記複数の領域それぞれに置かれている物体の数をカウントし、カウントした前記複数の領域それぞれに置かれている物体の数を出力する、情報処理システム。
【0058】
（１５）上記（１）から（１４）までの何れか１つに記載の情報処理システムにおいて、前記撮像装置は、監視カメラである、情報処理システム。
【0059】
（１６）上記（１）から（１５）までの何れか１つに記載の情報処理システムにおいて、前記物体は、前記商品が入ったコンテナ又はダンボールである、情報処理システム。
【0060】
（１７）情報処理方法であって、撮像装置によって撮像された撮像画像を画面に表示し、前記画面を介したユーザー操作に基づいて少なくとも１つ以上の領域を設定し、前記領域は、商品が入った物体が置かれる領域であり、前記撮像画像に基づいて、設定された領域に置かれている物体の数をカウントする、情報処理方法。
【0061】
（１８）プログラムであって、コンピュータを、上記（１）から（１６）までの何れか１つに記載の情報処理システムとして動作させるためのプログラム。
もちろん、この限りではない。
もちろん、この限りではない。
【0062】
変形例は任意に組み合わせて実施してもよい。
サーバー装置１００が行う処理は複数の装置で構成されるシステムが行ってもよい。
サーバー装置１００が行う処理は複数の装置で構成されるシステムが行ってもよい。
【0063】
最後に、本発明に係る種々の実施形態を説明したが、これらは、例として提示したものであり、発明の範囲を限定することは意図していない。新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。実施形態やその変形は、発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【0064】
１００ ：サーバー装置
１１０ ：クライアント装置
１２０ ：撮像装置
１３０ ：領域
１４０ ：コンテナ
１９０ ：ネットワーク
２１０ ：制御部
２２０ ：記憶部
２３０ ：通信部
３１０ ：制御部
３２０ ：記憶部
３３０ ：入力部
３４０ ：出力部
３５０ ：通信部
５００ ：画面
５１０ ：領域
５２０ ：領域
５３０ ：入力領域
５４０ ：入力領域
６１０ ：レコード
６４０ ：レコード
７００ ：画面
７１０ ：表示領域
７２０ ：画像
７３０ ：領域
７４０ ：日時
７５０ ：個数
７９０ ：表示領域
８１０ ：入力領域
１０００ ：情報処理システム
１１１０ ：商品数
１２１０ ：入力領域
１３１０ ：入力領域
１３２０ ：入力領域
１３３０ ：入力領域
１４１０ ：選択領域
１４２０ ：選択領域
１４３０ ：選択領域
１５１０ ：選択メニュー
１１０ ：クライアント装置
１２０ ：撮像装置
１３０ ：領域
１４０ ：コンテナ
１９０ ：ネットワーク
２１０ ：制御部
２２０ ：記憶部
２３０ ：通信部
３１０ ：制御部
３２０ ：記憶部
３３０ ：入力部
３４０ ：出力部
３５０ ：通信部
５００ ：画面
５１０ ：領域
５２０ ：領域
５３０ ：入力領域
５４０ ：入力領域
６１０ ：レコード
６４０ ：レコード
７００ ：画面
７１０ ：表示領域
７２０ ：画像
７３０ ：領域
７４０ ：日時
７５０ ：個数
７９０ ：表示領域
８１０ ：入力領域
１０００ ：情報処理システム
１１１０ ：商品数
１２１０ ：入力領域
１３１０ ：入力領域
１３２０ ：入力領域
１３３０ ：入力領域
１４１０ ：選択領域
１４２０ ：選択領域
１４３０ ：選択領域
１５１０ ：選択メニュー
【要約】 （修正有）
【課題】リアルタイムに状況を把握することができる商品の在庫を管理する情報処理システム、情報処理方法及びプログラムを提供する。
【解決手段】情報処理システム１０００において、サーバー装置１００は、撮像装置１２０によって撮像された撮像画像を記憶し、撮像画像を解析等し、解析等の結果をクライアント装置１１０等に送信し、その画面に表示させ、画面を介したユーザー操作に基づいて少なくとも１つ以上の領域を設定する。領域は、商品が入った物体（コンテナ１４０）が置かれる領域である。そして、撮像画像に基づいて、設定された領域に置かれている物体の数をカウントする。
【選択図】図１
【解決手段】情報処理システム１０００において、サーバー装置１００は、撮像装置１２０によって撮像された撮像画像を記憶し、撮像画像を解析等し、解析等の結果をクライアント装置１１０等に送信し、その画面に表示させ、画面を介したユーザー操作に基づいて少なくとも１つ以上の領域を設定する。領域は、商品が入った物体（コンテナ１４０）が置かれる領域である。そして、撮像画像に基づいて、設定された領域に置かれている物体の数をカウントする。
【選択図】図１
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
