特開 2024-47349 監視装置及びそのプログラム、会計システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024047349

(43)【公開日】2024-04-05

(54)【発明の名称】監視装置及びそのプログラム、会計システム

(51)【国際特許分類】

   G07G 1/00 20060101AFI20240329BHJP

   G07G 1/01 20060101ALI20240329BHJP

【ＦＩ】

G07G1/00 331B

G07G1/01 301E

【審査請求】未請求

【請求項の数】7

【出願形態】ＯＬ

(21)【出願番号】P 2022152917

(22)【出願日】2022-09-26

(71)【出願人】

【識別番号】000003562

【氏名又は名称】東芝テック株式会社

(74)【代理人】

【識別番号】110003708

【氏名又は名称】弁理士法人鈴榮特許綜合事務所

(74)【代理人】

【識別番号】100108855

【弁理士】

【氏名又は名称】蔵田 昌俊

(74)【代理人】

【識別番号】100179062

【弁理士】

【氏名又は名称】井上 正

(74)【代理人】

【識別番号】100075672

【弁理士】

【氏名又は名称】峰 隆司

(74)【代理人】

【識別番号】100153051

【弁理士】

【氏名又は名称】河野 直樹

(74)【代理人】

【識別番号】100162570

【弁理士】

【氏名又は名称】金子 早苗

(72)【発明者】

【氏名】鈴木 航太

【テーマコード（参考）】

3E142

【Ｆターム（参考）】

3E142AA01

3E142BA16

3E142DA07

3E142FA32

3E142GA32

3E142GA41

3E142JA01

(57)【要約】

【課題】フルセルフ対応の決済装置において遺失物の発生状況を監視できる監視装置を提供する。
【解決手段】監視装置は、取得手段と、検出手段と、計時手段と、報知手段とを備える。取得手段は、買上商品を載置する載置部を有した決済装置の少なくとも載置部を含む撮影領域を撮影した画像を取得する。検出手段は、取得手段により取得した画像に基づいて、載置部に置かれている物品を検出する。計時手段は、検出手段により検出された物品が同じ場所に置かれている時間を計時する。報知手段は、計時手段により計時された時間がしきい値を超えると、遺失物があることを報知する。
【選択図】 図３

【特許請求の範囲】

【請求項1】

買上商品を載置する載置部を有した決済装置の少なくとも前記載置部を含む撮影領域を撮影した画像を取得する取得手段と、
前記取得手段により取得した前記画像に基づいて、前記載置部に置かれている物品を検出する検出手段と、
前記検出手段により検出された物品が同じ場所に置かれている時間を計時する計時手段と、
前記計時手段により計時された時間がしきい値を超えると、遺失物があることを報知する報知手段と、
を具備する監視装置。

【請求項2】

前記決済装置から前記買上商品の決済終了を通知する決済終了信号を受信する受信手段、
をさらに具備し、
前記検出手段は、前記決済終了信号をトリガとして前記物品の検出動作を開始する、請求項１記載の監視装置。

【請求項3】

前記受信手段は、前記決済装置から前記買上商品の決済開始を通知する決済開始信号をさらに受信し、
前記検出手段は、前記決済開始信号を受信した時点で前記物品を検出していない場合には検出動作を停止する、請求項２記載の監視装置。

【請求項4】

前記検出手段は、前記決済開始信号を受信した時点で前記物品を検出していた場合には検出動作を継続し、
前記計時手段は、前記決済開始信号を受信する直前に検出されていた物品について、その物品が同じ場所に置かれている時間を計時し、前記決済開始信号を受信した後に検出された物品については計時しない、請求項３記載の監視装置。

【請求項5】

客自身の操作により買上商品の決済を行う決済装置と、
前記決済装置の前記買上商品を載置する載置部を含む撮影領域を撮影するカメラと、
前記載置部に放置された遺失物の有無を監視する監視装置と、
を備え、
前記監視装置は、
前記カメラで撮影された画像を取得する取得手段と、
前記取得手段により取得した前記画像に基づいて、前記載置部に置かれている物品を検出する検出手段と、
前記検出手段により検出された物品が同じ場所に置かれている時間を計時する計時手段と、
前記計時手段により計時された時間がしきい値時間を超えると、遺失物があることを報知する報知手段と、
を具備する会計システム。

【請求項6】

前記監視装置は、
前記カメラで撮影された画像に基づいて、前記決済装置を操作する客の不正な行動を監視する不正行動監視手段、
をさらに具備する請求項５記載の会計システム。

【請求項7】

監視装置のコンピュータを、
買上商品を載置する載置部を有した決済装置の少なくとも前記載置部を含む撮影領域を撮影した画像を取得する取得手段、
前記取得手段により取得した前記画像に基づいて、前記載置部に置かれている物品を検出する検出手段、
前記検出手段により検出された物品が同じ場所に置かれている時間を計時する計時手段、及び、
前記計時手段により計時された時間がしきい値時間を超えると、遺失物があることを報知する報知手段、
として機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、監視装置及びそのプログラム、並びに、監視装置を含む会計システムに関する。

【背景技術】

【0002】

近年、スーパーマーケット等の小売店では、人件費の削減、感染症の感染予防対策等の観点から、セルフＰＯＳ（Point Of Sales）端末が注目されている。セルフＰＯＳ端末は、買上商品の登録から決済までの操作を客が自ら行うようにしたフルセルフ対応の決済装置である。このようなフルセルフ対応の決済装置では、客の不正行為を抑止できる技術が開発されている。

【0003】

一方で、フルセルフ対応の決済装置では、客が自ら決済装置の操作を行うようにしたことで、新たな問題も発生してきている。その一つに、遺失物問題が有る。客が決済装置の操作を行う際に、決済装置上の任意の位置に私物（傘、カバン、財布等）や登録済み商品を一時的に置き、それらをそのまま置き忘れてしまう事態が発生する。このような遺失物が決済装置に存在した場合、従業員（アテンダント）が速やかに回収しなくてはならないが、遺失物に気付かないことも多い。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開平７－１４１５６９号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明の実施形態が解決しようとする課題は、フルセルフ対応の決済装置において遺失物の発生状況を監視できる監視装置及びこの監視装置を含む会計システムを提供しようとするものである。

【課題を解決するための手段】

【0006】

一実施形態において、監視装置は、取得手段と、検出手段と、計時手段と、報知手段とを備える。取得手段は、買上商品を載置する載置部を有した決済装置の少なくとも載置部を含む撮影領域を撮影した画像を取得する。検出手段は、取得手段により取得した画像に基づいて、載置部に置かれている物品を検出する。計時手段は、検出手段により検出された物品が同じ場所に置かれている時間を計時する。報知手段は、計時手段により計時された時間がしきい値を超えると、遺失物があることを報知する。

【図面の簡単な説明】

【0007】

【図1】図１は、一実施形態に係る会計システムを示す概略構成図である。

【図2】図２は、セルフＰＯＳ端末の外観構成を示す模式図である。

【図3】図３は、監視装置の要部回路構成を示すブロック図である。

【図4】図４は、第１テーブル及び第２テーブルのデータ構造を示す模式図である。

【図5】図５は、カメラで撮影された画像の一例を示す模式図である。

【図6】図６は、不正行動監視機能を実現するのに必要な手段構成を示す模式図である。

【図7】図７は、遺失物監視機能を実現するのに必要な手段構成を示す模式図である。

【図8】図８は、プロセッサが不正行動監視プログラムにしたがって実行する情報処理の要部手順を示す流れ図である。

【図9】図９は、プロセッサが遺失物監視プログラムにしたがって実行する情報処理の要部手順を示す流れ図である。

【図10】図１０は、プロセッサが遺失物監視プログラムにしたがって実行する情報処理の要部手順を示す流れ図である。

【図11】図１１は、プロセッサが遺失物監視プログラムにしたがって実行する情報処理の要部手順を示す流れ図である。

【図12】図１２は、アテンダント端末の表示デバイスに表示される画面の一例を示す模式図である。

【発明を実施するための形態】

【0008】

以下、フルセルフ対応の決済装置において遺失物の発生状況を監視できる監視装置を含む会計システムの実施形態について、図面を用いて説明する。

【0009】

［会計システムの説明］
図１は、本実施形態に係る会計システム１００を示す概略構成図である。会計システム１００は、複数台のセルフＰＯＳ端末１０と、アテンダント端末２０と、店舗サーバ３０とを含む。会計システム１００は、各セルフＰＯＳ端末１０とアテンダント端末２０と店舗サーバ３０とをＬＡＮ（Local Area Network）等の通信ネットワーク４０で接続する。

【0010】

複数台のセルフＰＯＳ端末１０は、それぞれ店舗の会計場に設置されており、買物を終えた客が操作者となる。商品が陳列された売場において買上商品を買物籠等に入れたりショッピングカートに積んだりして会計場へと移動した客は、セルフＰＯＳ端末１０を操作して、買上商品の会計、つまりは商品の登録から支払いまでの取引に係る決済をセルフで行う。セルフＰＯＳ端末１０は、フルセルフ対応の決済装置の一例である。決済装置は、決済端末、会計装置、会計端末、商品登録装置、商品登録端末等と言い換えることができる。

【0011】

アテンダント端末２０は、会計場の出口近傍に設けられた監視場に設置されている。アテンダント端末２０は、セルフＰＯＳ端末１０毎に登録された買上商品のリスト等を表示デバイスに表示する。またアテンダント端末２０は、セルフＰＯＳ端末１０でエラーが発生した場合にはそのエラー情報を報知する。監視場にいる従業員、いわゆるアテンダントは、アテンダント端末２０において表示され、また報知された情報を基に会計場の監視を行う。なお、図１では、アテンダント端末２０の台数を１台としているが、複数台のアテンダント端末２０が通信ネットワーク４０に接続されていてもよい。また、そのうちの少なくとも一台は、上記の監視場とは異なる場所、例えば、バックオフィスのような同店舗の別フロアやヘルプデスク等に設置してもよい。そのようなセルフＰＯＳ端末１０から遠く離れた場所のアテンダント端末２０も、通信ネットワーク４０経由によりセルフＰＯＳ端末１０からのエラー情報を報知できる。よって、直接セルフＰＯＳ端末１０を確認できない場所に居る従業員であっても、セルフＰＯＳ端末１０を監視することが可能となる。

【0012】

店舗サーバ３０は、通信ネットワーク４０で接続された各セルフＰＯＳ端末１０及びアテンダント端末２０に対し、本会計システム１００に係る様々なサービスを提供する。例えば店舗サーバ３０は、商品データベースを管理する。商品データベースは、店舗で販売される商品毎に作成される商品レコードの集合体である。商品レコードは、例えば、商品コード、商品名、価格、等のデータを含む。商品コードは、各商品を個々に識別するために商品毎に設定された一意のコードである。各商品には、当該商品の商品コードを表すバーコードが付されている。商品名及び価格は、商品コードで識別される商品の固有名称及び１点当たりの販売金額である。店舗サーバ３０は、セルフＰＯＳ端末１０において商品コードが入力されると、商品データベースを検索してその商品コードを含む商品レコードの商品名、価格等のデータをセルフＰＯＳ端末１０に提供する。

【0013】

各セルフＰＯＳ端末１０は、それぞれ監視装置５０を備える。監視装置５０は、セルフＰＯＳ端末１０の外部に有ってもよいし、内部に有ってもよい。各監視装置５０は、通信ネットワーク４０を介してアテンダント端末２０に接続している。各監視装置５０は、通信ネットワーク４０を介さずにアテンダント端末２０と接続してもよい。

【0014】

監視装置５０は、セルフＰＯＳ端末１０を操作する客、いわゆる決済者の不正な行動と、忘れ物つまり遺失物の発生とを監視する機能を有する装置である。監視装置５０は、セルフＰＯＳ端末１０の近傍に設けられたカメラ６０と接続している。監視装置５０は、カメラ６０で撮影される画像等の情報に基づき、セルフＰＯＳ端末１０に対する決済者の不正な行動を監視し、かつ、遺失物の発生を監視する。そして、決済者の不正な行動を検出した場合には、監視装置５０は、警告を発する。不正な行動とは、例えば買上商品をセルフＰＯＳ端末１０に登録せずに袋詰めする行動である。不正な行動とは、例えば買上商品の代金を支払わずに会計場から退出する行動である。警告は、セルフＰＯＳ端末１０とアテンダント端末２０の両方または一方に対して発せられる。遺失物を検出した場合には、監視装置５０は、遺失物があることを報知する。報知は、アテンダント端末に対して行う。報知は、セルフＰＯＳ端末１０とアテンダント端末２０の両方に対して行ってもよい。

【0015】

［セルフＰＯＳ端末の説明］
図２は、セルフＰＯＳ端末１０の外観構成を示す模式図である。セルフＰＯＳ端末１０は、本体１０１と、該本体１０１の左右に配置された第１の商品載置台１０２及び第２の商品載置台１０３とを備える。本体１０１に向かって右側に配置される第１の商品載置台１０２は、決済者である客が登録前の買上商品を載置するための台である。登録前の買上商品は、通常、買物籠に入れられて第１の商品載置台１０２に載置される。登録前の買上商品は、ショッピングカートに積まれた状態で第１の商品載置台１０２の前方又は上方に配置されてもよい。

【0016】

本体１０１に向かって左側に配置される第２の商品載置台１０３は、決済者が登録後の買上商品を載置するための台である。登録後の買上商品は、第２の商品載置台１０３に置かれた収容体、例えば買物籠、レジ袋またはマイバッグ等に入れられる。登録後の買上商品は、第２の商品載置台１０３に直接置かれてもよい。図２において、第２の商品載置台１０３は、その上部に支柱を介して一時置き台１０４を設けている。一時置き台１０４は、例えば、商品をレジ袋等に入れる前に一時的に載置するための台である。一時置き台１０４には、左右に離間させて２本の保持アーム１０５が設けられている。決済者は、これらの保持アーム１０５を用いて、レジ袋、マイバッグ等を開口した状態で第２の商品載置台１０３の上に置くことが可能である。

【0017】

このように、第１の商品載置台１０２及び第２の商品載置台１０３は、買上商品を載置する載置部として機能する。なお、第１の商品載置台１０２及び第２の商品載置台１０３の取り付け位置は、左右が逆であってもよい。

【0018】

本体１０１は、入出力デバイスとしてのタッチパネル１１、カードリーダ１２、プリンタ１３、スキャナ１４、ハンドスキャナ１５、現金処理機１６、パトランプ１７、発光部１８、スピーカ１９、等を備える。

【0019】

タッチパネル１１は、表示デバイスとしてのディスプレイと、入力デバイスとしてのタッチセンサとを含む。ディスプレイは、決済開始画面、商品登録画面、支払い方法選択画面、決済終了画面等の種々の画面情報を表示する。決済開始画面は、取引の決済開始を受け付ける画面である。決済開始画面には、取引の決済開始を指令するためのスタートキーが配置される。買上商品の登録を始める決済者は、スタートキーにタッチする。スタートキーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、ディスプレイの画面を決済開始画面から商品登録画面へと切り替える。

【0020】

商品登録画面は、登録された買上商品の商品名、価格、合計金額等の明細情報を表示する画面である。商品登録画面には、登録を終えた買上商品の代金支払いへの移行を指令するための支払いキーが配置される。買上商品の登録を終えた決済者は、支払いキーにタッチする。支払いキーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、ディスプレイの画面を商品登録画面から支払い方法選択画面へと切り替える。

【0021】

支払い方法選択画面は、現金支払い、クレジットカード支払い、電子マネー支払い、コード決済支払い等の支払い方法の選択入力を受け付ける画面である。支払い方法選択画面には、現金支払いを指令するための現金キー、クレジットカード支払いを指令するためのクレジットキー、電子マネー支払いを指令するための電子マネーキー、コード決済支払いを指令するためのコード決済キー等が配置される。決済者は、希望する支払い方法のキーにタッチする。例えば、現金キーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、現金による決済処理を実行し、ディスプレイの画面を支払い方法選択画面から現金による決済終了画面へと切り替える。クレジットキーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、クレジットカードによる決済処理を実行し、ディスプレイの画面を支払い方法選択画面からクレジットカードによる決済終了画面へと切り替える。電子マネーキーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、電子マネーカードによる決済処理を実行し、ディスプレイの画面を支払い方法選択画面から電子マネーカードによる決済終了画面へと切り替える。コード決済キーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、コード決済用のコードによる決済処理を実行し、ディスプレイの画面を支払い方法選択画面からコード決済による決済終了画面へと切り替える。

【0022】

例えば現金による決済終了画面は、取引の合計金額、現金の預かり金額、及び、釣銭額等を表示する画面である。例えば現金による決済処理は、預かり金額から取引の合計金額を減額して釣銭額を算出し、レシートを発行して取引を終了させる処理である。このような現金による決済処理は周知の処理であるので、詳細な説明は省略する。また、クレジットカード、電子マネーカードまたはコード決済による決済処理も周知の処理であるので、ここでの説明は省略する。

【0023】

カードリーダ１２は、クレジットカード、電子マネーカード、ポイントカード等のカード媒体に記録されたデータを読み取るデバイスである。カード媒体が磁気カードの場合、カードリーダ１２は磁気カードリーダである。カード媒体がＩＣカードの場合、カードリーダ１２は、ＩＣカードリーダである。セルフＰＯＳ端末１０は、カードリーダ１２として磁気カードリーダまたはＩＣカードリーダのいずれか一方を備えていてもよいし、両方を備えていてもよい。カードリーダ１２は、カードへのデータ書込み機能を有したカードリーダ・ライタであってもよい。

【0024】

プリンタ１３は、レシート用紙に買上レシート、クレジットカード伝票等に係るデータを印刷するデバイスである。プリンタ１３によって種々のデータが印刷されたレシート用紙は、カッタによりカットされて、レシート発行口から発行される。プリンタ１３は、例えばサーマルプリンタまたはドットインパクトプリンタ等によって実現される。

【0025】

スキャナ１４及びハンドスキャナ１５は、商品を識別する情報を読み取るものである。本実施形態において、スキャナ１４及びハンドスキャナ１５は、商品を識別する情報として商品に付されたバーコードを読み取るものとする。スキャナ１４は、商品に付されたバーコードが相対するように読取窓（ガラス窓）に翳された商品のバーコードを光学的に読み取る。ハンドスキャナ１５は、決済者によって手持ちで操作されるもので、商品に付されたバーコードに近接されることによりバーコードを光学的に読み取る。なお、スキャナ１４及びハンドスキャナ１５は、商品を認識する情報を読み取るものであればよく、例えば二次元コード等、バーコード以外の情報を読み取るものであってもよい。

【0026】

現金処理機１６は、現金を処理するものである。現金処理機１６は、紙幣投入口１６１、紙幣排出口１６２、硬貨投入口１６３及び硬貨排出口１６４を有する。現金処理機１６は、紙幣投入口１６１に投入された紙幣を処理する。現金処理機１６は、釣銭としての紙幣を紙幣排出口１６２から排出する。現金処理機１６は、硬貨投入口１６３に投入された硬貨を受け入れて処理する。現金処理機１６は、釣銭としての硬貨を硬貨排出口１６４から排出する。

【0027】

パトランプ１７は、遠くからでも見えるように、鉛直方向に延びたポールの先端に取り付けられている。パトランプ１７は、発光部材と円筒とを含む。発光部材は、円筒の内部に、円筒と同軸に回転可能に取り付けられている。パトランプ１７は、動作すると、発光部材を発光させながら回転させることができる。パトランプ１７は、アラートを表示するためのものである。例えば、パトランプ１７は、商品登録時に発光部材を点灯させることで、決済者やアテンダント端末２０に居る従業員が、商品スキャンが適切に行われているか否かを目視確認できるようにする。

【0028】

発光部１８は、ポールのパトランプ１７の下段に配置されている。発光部１８も、パトランプ１７と同様に発光部材と円筒を含む。発光部材は、複数の色で選択的に発光可能となっている。あるいは、発光部１８は、互いに異なる発光色の複数の発光部材を備える。発光部１８もパトランプ１７と同様に、アラートを表示するためのものである。発光部１８は、発光部材の発光色によってもしくは発光色とその点滅状態によって、エラー中、決済者の不正な行動の検出、等のアラートを表示することができる。

【0029】

スピーカ１９は、アラートとしての警告音、あるいは、メッセージとしての音声等の音を出力する。

【0030】

本体１０１の上方部には、撮像装置としてのカメラ６０が取り付けられている。カメラ６０は、セルフＰＯＳ端末１０とそれを操作する決済者とを撮影するものである。図２に示すように、タッチパネル１１のディスプレイ、カードリーダ１２のカード挿入口、プリンタ１３のレシート発行口、スキャナ１４の読取窓及び現金処理機１６の紙幣投入口１６１、紙幣排出口１６２、硬貨投入口１６３及び硬貨排出口１６４は、本体１０１の１つの面（以下、正面とする）に配置されている。このため決済者は、本体１０１の正面と対峙するように立って、セルフＰＯＳ端末１０を操作する。カメラ６０は、セルフＰＯＳ端末１０とその正面に立つ決済者とを上方から撮影する。したがって、決済者の頭部、顔面、両肩、両腕、胸部、腹部等がカメラ６０によって撮影される。また、本体１０１を挟んで左右に配置された第１の商品載置台１０２及び第２の商品載置台１０３を含むセルフＰＯＳ端末１０の上面もカメラ６０によって撮影される。

【0031】

［監視装置の構成説明］
図３は、監視装置５０の要部回路構成を示すブロック図である。監視装置５０は、プロセッサ５１、メインメモリ５２、補助記憶デバイス５３、タイマ５４、カメラインターフェース５５、端末インターフェース５６、ネットワークインターフェース５７及びシステム伝送路５８等を備える。システム伝送路５８は、アドレスバス、データバス、制御信号線等を含む。システム伝送路５８は、プロセッサ５１と他の各部とを接続し、相互間で授受されるデータ信号を伝送する。

【0032】

監視装置５０は、プロセッサ５１と、メインメモリ５２、補助記憶デバイス５３、タイマ５４、カメラインターフェース５５、端末インターフェース５６及びネットワークインターフェース５７とをシステム伝送路５８で接続することにより、コンピュータを構成する。

【0033】

プロセッサ５１は、上記コンピュータの中枢部分に相当する。プロセッサ５１は、オペレーティングシステムまたはアプリケーションプログラムに従って、監視装置５０としての各種の機能を実現するべく各部を制御する。プロセッサ５１は、例えばＣＰＵ（Central Processing Unit）である。プロセッサ５１は、複数の処理を並行して実行することが可能なマルチコア又はマルチスレッドによるものであることが望ましい。

【0034】

メインメモリ５２は、上記コンピュータの主記憶部分に相当する。メインメモリ５２は、不揮発性のメモリ領域と揮発性のメモリ領域とを含む。メインメモリ５２は、不揮発性のメモリ領域ではオペレーティングシステムまたはアプリケーションプログラムを記憶する。メインメモリ５２は、プロセッサ５１が各部を制御するための処理を実行する上で必要なデータを不揮発性または揮発性のメモリ領域で記憶する場合もある。メインメモリ５２は、揮発性のメモリ領域を、プロセッサ５１によってデータが適宜書き換えられるワークエリアとして使用する。不揮発性のメモリ領域は、例えばＲＯＭ（Read Only Memory）である。揮発性のメモリ領域は、例えばＲＡＭ（Random Access Memory）である。

【0035】

補助記憶デバイス５３は、上記コンピュータの補助記憶部分に相当する。例えばＥＥＰＲＯＭ（Electric Erasable Programmable Read-Only Memory）、ＨＤＤ（Hard Disk Drive）、あるいはＳＳＤ（Solid State Drive）等が補助記憶デバイス５３となり得る。補助記憶デバイス５３は、プロセッサ５１が各種の処理を行う上で使用するデータ、プロセッサ５１での処理によって作成されたデータ等を保存する。補助記憶デバイス５３は、上記のアプリケーションプログラムを記憶する場合もある。

【0036】

タイマ５４は、周期的にタイマ割込み信号を出力する回路である。タイマ割込み信号は、システム伝送路５８を通じてプロセッサ５１に与えられる。本実施形態では、タイマ５４は、１秒間隔でタイマ割込み信号を出力するものとする。

【0037】

カメラインターフェース５５は、カメラ６０を接続する。カメラインターフェース５５は、カメラ６０の駆動を制御する制御信号をカメラ６０に対して出力する。カメラ６０は、この制御信号に従って撮影動作を行う。カメラインターフェース５５は、カメラ６０によって撮影された画像データを取り込む。

【0038】

端末インターフェース５６は、セルフＰＯＳ端末１０を接続する。端末インターフェース５６は、セルフＰＯＳ端末１０との間でデータ通信を行う。端末インターフェース５６は、決済者によるセルフＰＯＳ端末１０への操作入力データ等を取り込む。操作入力データには、決済開始に係る操作入力データ、商品登録に係る操作入力データ、支払宣言に係る操作入力データ、決済終了に係る操作入力データ等がある。決済開始に係る操作入力データは、決済者が決済開始画面のスタートキーを操作したことに応じて出力されるデータである。商品登録に係る操作入力データは、決済者が商品のバーコードをスキャナ１４の読取窓に翳す操作、あるいはハンドスキャナ１５の読取部をバーコードに翳す操作をしたことに応じて出力されるデータである。データには、スキャナ１４またはハンドスキャナ１５がスキャニングしたバーコードで表された商品コードを含む商品レコードのデータが含まれる。支払宣言に係る操作入力データは、決済者が商品登録画面の支払いキーを入力したことに応じて出力されるデータである。決済終了に係る操作入力データは、支払い方法選択画面から選択された支払い方法による決済処理が終了して決済終了画面が表示された後に出力されるデータである。決済終了に係る操作入力データは、決済を終えた客がセルフＰＯＳ端末１０の前から立ち去るのに十分な時間を経過した後に出力される。セルフＰＯＳ端末１０の正面側の感知範囲内に決済者が存在する間、感知信号を出力する人感センサをセルフＰＯＳ端末１０に設け、感知信号が途絶えたことに応じて決済終了に係る操作入力データが出力されてもよい。

【0039】

ネットワークインターフェース５７は、通信ネットワーク４０を介してアテンダント端末２０を接続する。ネットワークインターフェース５７は、アテンダント端末２０との間でデータ通信を行う。

【0040】

かかる構成の監視装置５０は、メインメモリ５２における揮発性メモリ領域の一部を画像メモリ５２１、第１テーブル５２２及び第２テーブル５２３の領域としている。画像メモリ５２１は、カメラインターフェース５５を介して取り込んだフレーム単位の画像データを時系列に記憶するための領域である。第１テーブル５２２及び第２テーブル５２３は、カメラ６０で撮影された画像から検出された物品に関するデータを記憶するための領域である。

【0041】

図４は、第１テーブル５２２及び第２テーブル５２３のデータ構造を示す模式図である。第１テーブル５２２及び第２テーブル５２３は、いずれもレコード番号のカラムと、物品ＩＤのカラムと、位置情報のカラムと、放置時間のカラムとを有する。すなわち第１テーブル５２２及び第２テーブル５２３は、いずれもレコード番号と物品ＩＤと位置情報と放置時間とを含むレコードを複数記憶可能な領域である。レコード番号のカラムには、“１”から始まる一連の番号がレコード番号として記述されている。その他のカラムに記述される物品ＩＤ、位置情報及び放置時間については、後述する遺失物監視機能５１２の説明の中で明らかにする。

【0042】

また監視装置５０は、プロセッサ５１が不正行動監視機能５１１及び遺失物監視機能５１２を有するように、不正行動監視プログラム及び遺失物監視プログラムを記憶している。不正行動監視プログラム及び遺失物監視プログラムは、メインメモリ５２または補助記憶デバイス５３に記憶されるアプリケーションプログラムの一種である。不正行動監視プログラム及び遺失物監視プログラムをメインメモリ５２または補助記憶デバイス５３にインストールする方法は特に限定されるものではない。リムーバブルな記録媒体に不正行動監視プログラム及び遺失物監視プログラムを記録して、あるいはネットワークを介した通信により不正行動監視プログラム及び遺失物監視プログラムを配信して、メインメモリ５２または補助記憶デバイス５３にインストールすることができる。記録媒体は、ＣＤ－ＲＯＭ，メモリカード等のようにプログラムを記憶でき、かつ装置が読み取り可能であれば、その形態は問わない。

【0043】

［監視装置の機能説明］
図６は、不正行動監視機能５１１を実現するのに必要な手段構成を示す模式図である。図示するように、不正行動監視機能５１１は、取得手段７１と、行動検知手段７２と、判定手段７３と、警告手段７４とによって実現される。取得手段７１は、画像メモリ５２１に時系列に記憶されるフレーム単位の画像を順次取得する手段である。行動検知手段７２は、取得手段７１により取得した画像から決済者の行動を検知する手段である。判定手段７３は、行動検知手段７２により検知されている行動が不正な行動であるか否かを判定する手段である。警告手段７４は、判定手段７３により不正な行動であると判定された場合に警告を発する手段である。

【0044】

図７は、遺失物監視機能５１２を実現するのに必要な手段構成を示す模式図である。図示するように、遺失物監視機能５１２は、受信手段８１と、取得手段８２と、検出手段８３と、計時手段８４と、報知手段８５とによって実現される。受信手段８１は、セルフＰＯＳ端末１０から買上商品の決済終了を通知する決済終了信号を受信する手段である。セルフＰＯＳ端末１０から端末インターフェース５６へと入力される決済終了に係る操作入力データが決済終了信号となり得る。また受信手段８１は、セルフＰＯＳ端末１０から買上商品の決済開始を通知する決済開始信号を受信する手段でもある。セルフＰＯＳ端末１０から端末インターフェース５６へと入力される決済開始に係る操作入力データが決済開始信号となり得る。

【0045】

取得手段８２は、画像メモリ５２１に時系列に記憶されるフレーム単位の画像を順次取得する手段である。つまり取得手段８２は、買上商品を載置する載置部（第１の商品載置台１０２、第２の商品載置台１０３）を有した決済装置（セルフＰＯＳ端末１０）の少なくとも載置部を含む撮影領域を撮影した画像を取得する。

【0046】

検出手段８３は、取得手段８２により取得した画像に基づいて、載置部に置かれている物品を検出する手段である。物品は、典型的には商品である。物品は、決済者の私物（傘、カバン、財布等）であったり、買物籠であったりする場合もある。検出手段８３は、決済終了信号をトリガとして物品の検出動作を開始する。検出手段８３は、決済開始信号を受信した時点で物品を検出していない場合には検出動作を停止する。検出手段８３は、決済開始信号を受信した時点で物品を検出していた場合には検出動作を継続する。

【0047】

計時手段８４は、検出手段８３により検出された物品が同じ場所に置かれている時間を計時する手段である。なお、既述したように検出手段８３は、決済開始信号を受信した時点で物品を検出していた場合には検出動作を継続する。このとき計時手段８４は、決済開始信号を受信する直前に検出されていた物品について、その物品が同じ場所に置かれている時間を計時する。計時手段８４は、決済開始信号を受信した後に検出された物品については計時しない。

【0048】

報知手段８５は、計時手段８４により計時された時間がしきい値を超えると、遺失物があることを報知する手段である。しきい値は、同じ場所に置かれている物品を遺失物として特定するのに十分な任意の時間である。報知手段８５は、アテンダント端末２０に報知信号を出力することによって、アテンダントに遺失物があることを報知する。報知手段８５は、セルフＰＯＳ端末１０に報知信号を出力することによって、セルフＰＯＳ端末１０の操作者、通常は客に遺失物があることを報知してもよい。

【0049】

次に、不正行動監視機能５１１の詳細について、図８の流れ図を用いて説明する。
図８は、プロセッサ５１が不正行動監視プログラムにしたがって実行する情報処理の要部手順を示す流れ図である。なお、以下に説明する情報処理の手順及び内容は一例である。同様な作用効果を奏し得るのであれば、その手順及び内容は適宜変更することができる。

【0050】

アイドル状態にあるプロセッサ５１は、ＡＣＴ１として決済開始信号を待ち受けている。端末インターフェース５６を介してセルフＰＯＳ端末１０から決済開始に係る操作入力データを受信すると、プロセッサ５１は、ＡＣＴ１においてＹＥＳと判定し、ＡＣＴ２へと進む。プロセッサ５１は、ＡＣＴ２として、画像メモリ５２１から画像データを取得する。画像メモリ５２１には、カメラ６０によって撮影されたフレーム単位の画像データが時系列に記憶されているので、プロセッサ５１は、決済開始に係る操作入力データを受信した後に撮影された画像データを取得する。

【0051】

画像データを取得したプロセッサ５１は、ＡＣＴ３として、その画像データを基にセルフＰＯＳ端末１０に対する決済者の行動を検知する。そしてプロセッサ５１は、ＡＣＴ４として、その行動が不正な行動であるか否かを判定する。不正な行動でない場合、プロセッサ５１は、ＡＣＴ４においてＮＯと判定し、ＡＣＴ５へと進む。プロセッサ５１は、ＡＣＴ５として決済終了信号を受信したか確認する。

【0052】

決済終了信号を受信していない場合、プロセッサ５１は、ＡＣＴ５においてＮＯと判定し、ＡＣＴ２へと戻る。すなわちプロセッサ５１は、ＡＣＴ２において画像メモリ５２１から次の画像データを取得し、ＡＣＴ３において決済者の行動を検知し、ＡＣＴ４においてその行動が不正な行動であるか否かを判定する。

【0053】

例えば決済者の行動が、買上商品をセルフＰＯＳ端末１０に登録せずに袋詰めする行動、あるいは買上商品の代金を支払わずに会計場から退出する行動であった場合、プロセッサ５１は、ＡＣＴ４においてＹＥＳと判定し、ＡＣＴ６へと進む。プロセッサ５１は、ＡＣＴ６として、警告を発する。プロセッサ５１は、端末インターフェース５６を介してセルフＰＯＳ端末１０に警告信号を出力する。あるいはプロセッサ５１は、ネットワークインターフェース５７を介してアテンダント端末２０に警告信号を出力する。あるいはプロセッサ５１は、セルフＰＯＳ端末１０とアテンダント端末２０の双方に警告信号を出力してもよい。

【0054】

警告を発したプロセッサ５１は、ＡＣＴ５へと進む。そして決済終了信号を受信していない場合、プロセッサ５１は、ＡＣＴ２へと戻る。プロセッサ５１は、ＡＣＴ２において画像メモリ５２１から次の画像データを取得し、ＡＣＴ３において決済者の行動を検知し、ＡＣＴ４においてその行動が不正な行動であるか否かを判定する、という処理を繰り返す。

【0055】

端末インターフェース５６を介してセルフＰＯＳ端末１０から決済終了に係る操作入力データを受信すると、プロセッサ５１は、ＡＣＴ５においてＹＥＳと判定する。プロセッサ５１は、図８の流れ図に示す手順の情報処理を終了し、アイドル状態に戻る。

【0056】

ここに、プロセッサ５１は、ＡＣＴ２の処理により取得手段７１を構成し、ＡＣＴ３の処理により行動検知手段７２を構成し、ＡＣＴ４の処理により判定手段７３を構成し、ＡＣＴ６の処理により警告手段７４を構成する。かくして、セルフＰＯＳ端末１０を操作する決済者の不正な行動が認識された場合には、セルフＰＯＳ端末１０又はアテンダント端末２０に警告信号が与えられる。この警告信号により、セルフＰＯＳ端末１０においては、発光部１８が発光し、スピーカ１９から警告音が発せられる。アテンダント端末２０においては、セルフＰＯＳ端末１０を操作する決済者の不正な行動が認識されたことがアテンダントに報知される。その結果、決済者の不正な行動に対してリアルタイムに警告が発せられるので、不正の抑止効果を奏し得る。

【0057】

次に、遺失物監視機能５１２の詳細について、図９乃至図１１の流れ図と、図１２の画面例とを用いて説明する。
図９乃至図１１は、プロセッサ５１が遺失物監視プログラムにしたがって実行する情報処理の要部手順を示す流れ図である。図１２は、アテンダント端末２０の表示デバイスに表示される画面を示す模式図である。なお、以下に説明する情報処理の手順及び内容は一例である。同様な作用効果を奏し得るのであれば、その手順及び内容は適宜変更することができる。また、図１２の画面も一例である。画面に対する表示要素の配置又はテキストの内容等を適宜変更可能であることは言うまでもないことである。

【0058】

アイドル状態にあるプロセッサ５１は、ＡＣＴ１１として決済開始信号を待ち受けている。端末インターフェース５６を介してセルフＰＯＳ端末１０から決済開始に係る操作入力データを受信すると、プロセッサ５１は、ＡＣＴ１１においてＹＥＳと判定し、ＡＣＴ１２へと進む。プロセッサ５１は、ＡＣＴ１２として、第１テーブル５２２及び第２テーブル５２３をクリアする。

【0059】

その後、プロセッサ５１は、ＡＣＴ１３として決済終了信号を待ち受ける。端末インターフェース５６を介してセルフＰＯＳ端末１０から決済終了に係る操作入力データを受信すると、プロセッサ５１は、ＡＣＴ１３においてＹＥＳと判定し、ＡＣＴ１４へと進む。プロセッサ５１は、ＡＣＴ１４として、画像メモリ５２１から画像データを取得する。画像メモリ５２１には、カメラ６０によって撮影されたフレーム単位の画像データが時系列に記憶されているので、プロセッサ５１は、決済終了に係る操作入力データを受信した後に撮影された画像データを取得する。

【0060】

画像データを取得したプロセッサ５１は、ＡＣＴ１５として、その画像データを解析して、第１の商品載置台１０２又は第２の商品載置台１０３に置かれている物品を検索する。例えばプロセッサ５１は、パターンマッチング又はディープラーニングによる既知の物体認識技術を利用して、画像から第１の商品載置台１０２及び第２の商品載置台１０３を認識し、さらにその第１の商品載置台１０２又は第２の商品載置台１０３に置かれていると推定される商品、私有物、買物籠等の物品を認識する。

【0061】

プロセッサ５１は、ＡＣＴ１６として物品を検出したか否かを判定する。物品を検出していない場合、プロセッサ５１は、ＡＣＴ１６においてＮＯと判定し、ＡＣＴ１７へと進む。プロセッサ５１は、ＡＣＴ１７として決済開始信号を受信したか確認する。決済開始信号を受信していない場合、プロセッサ５１は、ＡＣＴ１７においてＮＯと判定し、ＡＣＴ１４へと戻る。すなわちプロセッサ５１は、ＡＣＴ１４において画像メモリ５２１から次の画像データを取得し、ＡＣＴ１５において物品を検索し、ＡＣＴ１６において物品を検出し得たか否かを判定する。

【0062】

このように、セルフＰＯＳ端末１０から決済終了に係る操作入力データを受信したプロセッサ５１は、同セルフＰＯＳ端末１０から決済開始に係る操作入力データを受信するまでの間、ＡＣＴ１４、ＡＣＴ１５及びＡＣＴ１６の処理を繰り返し実行する。そして、物品が検出されることなく決済開始に係る操作入力データを受信すると、プロセッサ５１は、ＡＣＴ１７においてＹＥＳと判定し、ＡＣＴ１２へと戻る。すなわちプロセッサ５１は、第１テーブル５２２及び第２テーブル５２３をクリアして、決済終了信号の待ち受け状態となる。

【0063】

これに対し、カメラ６０で撮影された画像から第１の商品載置台１０２又は第２の商品載置台１０３に置かれている物品が検出された場合には、プロセッサ５１は、ＡＣＴ１６においてＹＥＳと判定し、図１０のＡＣＴ２１へと進む。因みに、物品が検出される事象としては次の２通りがある。１つは、決済終了に係る操作入力データを受信した時点で、既に第１の商品載置台１０２又は第２の商品載置台１０３に置かれていた場合である。決済者が商品又は私物を第１の商品載置台１０２又は第２の商品載置台１０３に置き忘れたり、空になった買物籠を第１の商品載置台１０２から片付けなかったりした場合が該当する。もう１つは、決済終了に係る操作入力データを受信した後に第１の商品載置台１０２又は第２の商品載置台１０３に物品が置かれた場合である。例えば子供が玩具等を第１の商品載置台１０２又は第２の商品載置台１０３に置いて放置した場合等が該当する。いずれの場合も、プロセッサ５１は、ＡＣＴ２１へと進む。

【0064】

プロセッサ５１は、ＡＣＴ２１として物品数Ｎを記憶する。物品数Ｎは、画像から第１の商品載置台１０２又は第２の商品載置台１０３に置かれているとして検出された物品の総数である。プロセッサ５１は、ＡＣＴ２２としてその物品数Ｎ個分の物品に対し、それぞれ固有の物品ＩＤを割り当てる。またプロセッサ５１は、ＡＣＴ２３としてその物品数Ｎ個分の物品について、それぞれ中心となる位置座標を検出する。ここで、ＡＣＴ２２及びＡＣＴ２３の処理について、図５を用いて具体的に説明する。

【0065】

図５は、カメラ６０で撮影された画像ＡＲの一例を示す模式図である。なお、説明に不要な表示要素は全て省略されている。画像ＡＲには、第１の商品載置台１０２と第２の商品載置台１０３とが映し出されている。そして、第１の商品載置台１０２には、第１の物品Ａが置かれている。第２の商品載置台１０３には、第２の物品Ｂが置かれている。第１の物品Ａは、空の買物籠である。第２の物品Ｂは、登録済の商品である。すなわち、決済者が第１の商品載置台１０２に置いた買物籠を片付けず、また、第２の商品載置台１０３に買上商品を１つ置き忘れた場合を想定している。

【0066】

図５に示す画像ＡＲを取得した場合、プロセッサ５１は、ＡＣＴ２２において第１の物品Ａに対して物品ＩＤａを割り当て、第２の物品Ｂに対して物品ＩＤｂを割り当てる。またプロセッサ５１は、ＡＣＴ２３において例えば画像ＡＲの左下角を原点（Ｘｏ，Ｙｏ）とする二次元平面座標系で第１の物品Ａの中心位置の座標（Ｘａ，Ｙａ）と、第２の物品Ｂの中心位置の座標（Ｘｂ，Ｙｂ）とを検出する。

【0067】

ＡＣＴ２２及びＡＣＴ２３の処理を終えると、プロセッサ５１は、ＡＣＴ２４へと進む。プロセッサ５１は、ＡＣＴ２４として第１テーブル５２２を作成する。すなわちプロセッサ５１は、第１テーブル５２２の物品ＩＤのカラムと位置座標のカラムとに対し、レコード番号の小さい順に、検出された物品（物品Ａ、物品Ｂ）の物品ＩＤと位置座標とを記述する。またプロセッサ５１は、放置時間のカラムに、それぞれ放置時間Ｔｐとして０秒を記述する。

【0068】

第１テーブル５２２を作成し終えたプロセッサ５１は、ＡＣＴ２５へと進む。プロセッサ５１は、ＡＣＴ２５として加算カウンタｎを“０”にリセットする。加算カウンタｎは、プロセッサ５１が内蔵している。その後、プロセッサ５１は、ＡＣＴ２６として加算カウンタｎを“１”だけカウントアップする。そしてプロセッサ５１は、ＡＣＴ２７として第１テーブル５２２からレコード番号ｎのレコードを取得する。レコード番号ｎの“ｎ”は、加算カウンタｎのカウント値である。レコードは、物品ＩＤと位置情報と放置時間Ｔｐとを含む。以下では、ＡＣＴ２７において取得したレコードを第１レコードＲｘと称する。

【0069】

第１レコードＲｘを取得したプロセッサ５１は、ＡＣＴ２８として第２テーブル５２３を検索する。プロセッサ５１は、ＡＣＴ２９として第１レコードＲｘの位置座標と略一致する位置座標を含むレコードが第２テーブル５２３に記憶されているか確認する。ここで、略一致とは、例えば一方の位置座標で特定される第１の点と他方の位置座標で特定される第２の点とを結ぶ線分の長さが、所定の距離以下である場合である。所定の距離は例えば１ｃｍ以下の任意の値である。以下では、第１レコードＲｘの位置座標と略一致する位置座標を含むレコードを第２レコードＲｙと称する。

【0070】

第２テーブル５２３に第２レコードＲｙが記憶されていない場合、プロセッサ５１は、ＡＣＴ２９においてＮＯと判定し、ＡＣＴ３０へと進む。プロセッサ５１は、ＡＣＴ３０としてカウンタｎが物品数Ｎを超えたか否かを判定する。カウンタｎが物品数Ｎを超えていない場合、プロセッサ５１は、ＡＣＴ３０においてＮＯと判定し、ＡＣＴ２６へと戻る。

【0071】

すなわちプロセッサ５１は、ＡＣＴ２６において加算カウンタｎを“１”だけカウントアップし、ＡＣＴ２７において第１テーブル５２２から第１レコードＲｘを取得し、ＡＣＴ２８において第２テーブル５２３を検索する。

【0072】

当初、第２テーブル５２３はクリアされている。したがって、ＡＣＴ２９において第１レコードＲｘの位置座標と略一致する位置座標を含むレコード、すなわち第２レコードＲｙが第２テーブル５２３に記憶されていることはない。したがってプロセッサ５１は、カウンタｎが物品数Ｎを超えるまで、ＡＣＴ２６乃至ＡＣＴ３０の処理を繰り返すこととなる。

【0073】

カウンタｎが物品数Ｎを超えると、プロセッサ５１は、ＡＣＴ３０においてＹＥＳと判定し、ＡＣＴ３３へと進む。プロセッサ５１は、ＡＣＴ３３として第１テーブル５２２に放置時間Ｔｐがしきい値Ｔｍａｘを超えたレコードが記憶されているか確認する。しきい値Ｔｍａｘは、例えば“５”以上の任意の値である。

【0074】

放置時間Ｔｐがしきい値Ｔｍａｘを超えたレコードが第１テーブル５２２に１つも記憶されていない場合、プロセッサ５１は、ＡＣＴ３３においてＮＯと判定し、ＡＣＴ３４へと進む。プロセッサ５１は、ＡＣＴ３４として第１テーブル５２２の全てのレコードを、第２テーブル５２３に複写する。そして複写を終えたならば、プロセッサ５１は、ＡＣＴ３５として第１テーブル５２２をクリアする。その後、プロセッサ５１は、図１１のＡＣＴ４１へと進む。

【0075】

プロセッサ５１は、ＡＣＴ４１として決済開始信号を受信したか否かを確認する。決済開始信号を受信していない場合、プロセッサ５１は、ＡＣＴ４１においてＮＯと判定し、ＡＣＴ４２へと進む。プロセッサ５１は、ＡＣＴ４２としてタイマ割込み信号を受信したか否かを確認する。タイマ割込み信号を受信していない場合、プロセッサ５１は、ＡＣＴ４２においてＮＯと判定し、ＡＣＴ４１へと戻る。このようにプロセッサ５１は、ＡＣＴ４１及びＡＣＴ４２において、決済開始信号を受信するかタイマ割込み信号を受信するのを待ち受ける。

【0076】

ＡＣＴ４１及びＡＣＴ４２の待ち受け状態において、タイマ割込み信号を受信すると、プロセッサ５１は、ＡＣＴ４２においてＹＥＳと判定し、ＡＣＴ４３へと進む。プロセッサ５１は、ＡＣＴ４３乃至ＡＣＴ４５として図９に示すＡＣＴ１４乃至ＡＣＴ１６と同一の処理を実行する。すなわちプロセッサ５１は、ＡＣＴ４３として画像メモリ５２１から次の画像データを取得する。プロセッサ５１は、ＡＣＴ４４としてその画像データを解析して、第１の商品載置台１０２又は第２の商品載置台１０３に置かれている物品を検索する。プロセッサ５１は、ＡＣＴ４５として物品を検出したか否かを判定する。

【0077】

物品を検出していない場合、例えば図５に示される物品Ａ及び物品Ｂが第１の商品載置台１０２及び第２の商品載置台１０３から取り除かれた場合には、プロセッサ５１は、ＡＣＴ４５においてＮＯと判定する。プロセッサ５１は、図９乃至図１１の流れ図に示す手順の情報処理を終了して、アイドル状態に戻る。

【0078】

これに対し、物品を検出している場合、例えば物品Ａ及び物品Ｂが第１の商品載置台１０２及び第２の商品載置台１０３に依然として置かれている場合には、プロセッサ５１は、ＡＣＴ４５においてＹＥＳと判定する。プロセッサ５１は、図１０のＡＣＴ２１へと戻る。プロセッサ５１は、ＡＣＴ２１以降の処理を前述したのと同様に実行する。すなわちプロセッサ５１は、ＡＣＴ２１において物品数Ｎを記憶する。またプロセッサ５１は、ＡＣＴ２２においてその物品数Ｎ個分の物品に対してそれぞれ固有の物品ＩＤを割り当て、ＡＣＴ２３において中心となる位置座標を検出する。そしてプロセッサ５１は、ＡＣＴ２４において第１テーブル５２２を作成する。

【0079】

プロセッサ５１は、ＡＣＴ２５において加算カウンタｎを“０”にリセットした後、ＡＣＴ２６において加算カウンタｎを“１”だけカウントアップする。そしてプロセッサ５１は、ＡＣＴ２７において第１テーブル５２２から第１レコードＲｘを取得し、ＡＣＴ２８において第２テーブル５２３を検索する。

【0080】

今度は、ＡＣＴ３４の処理において第１テーブル５２２のレコードが第２テーブル５２３に複写されているので、前回取得した画像と今回取得した画像とで同じ位置に物品が検出された場合には、第１レコードＲｘの位置座標と略一致する位置座標を含むレコード、すなわち第２レコードＲｙが第２テーブル５２３に記憶されていることとなる。

【0081】

第２テーブル５２３に第２レコードＲｙが記憶されていた場合、プロセッサ５１は、ＡＣＴ２９においてＹＥＳと判定し、ＡＣＴ３１へと進む。プロセッサ５１は、ＡＣＴ３１としてその第２レコードＲｙの放置時間Ｔｑを検出する。そしてプロセッサ５１は、ＡＣＴ３２として第２レコードＲｙの放置時間Ｔｑに“１”を加算した時間を、第１レコードＲｘの放置時間Ｔｑに加算する。その結果、例えば放置時間Ｔｐ及び放置時間Ｔｑがいずれも“０”であった場合には、放置時間Ｔｐは“１”となる。その後、プロセッサ５１は、ＡＣＴ３０へと進み、カウンタｎが物品数Ｎを超えたか否かを判定する。

【0082】

一方、第２テーブル５２３に第２レコードＲｙが記憶されていない場合には、プロセッサ５１は、ＡＣＴ２９においてＮＯと判定し、ＡＣＴ３０に進んで、カウンタｎが物品数Ｎを超えたか否かを判定する。

【0083】

カウンタｎが物品数Ｎを超えていない場合、プロセッサ５１は、ＡＣＴ２６へと戻る。プロセッサ５１は、カウンタｎが物品数Ｎを超えるまでＡＣＴ２６乃至ＡＣＴ３２の処理を繰り返し実行する。

【0084】

かくして、位置座標が略一致する第２レコードＲｙが第２テーブル５２３に記憶されている第１レコードＲｘの放置時間Ｔｐは、“１”ずつ加算される。位置座標が略一致する第２レコードＲｙが第２テーブル５２３に記憶されていない第１レコードＲｘの放置時間Ｔｐは、“０”のままとなる。

【0085】

カウンタｎが物品数Ｎを超えたならば、プロセッサ５１は、ＡＣＴ３３において第１テーブル５２２に放置時間Ｔｐがしきい値Ｔｍａｘを超えたレコードが記憶されているか確認する。放置時間Ｔｐがしきい値Ｔｍａｘを超えたレコードが第１テーブル５２２に１つも記憶されていない場合、プロセッサ５１は、ＡＣＴ３４において第１テーブル５２２の全てのレコードを、第２テーブル５２３に複写する。またプロセッサ５１は、ＡＣＴ３５において第１テーブル５２２をクリアする。その後、プロセッサ５１は、ＡＣＴ４１及びＡＣＴ４２の待ち受け状態、つまりは決済開始信号を受信するかタイマ割込み信号を受信するのを待ち受ける。そして、再度、タイマ割込み信号を受信したならば、プロセッサ５１は、ＡＣＴ４３乃至ＡＣＴ４５の処理を実行し、物品が検出されたならば、ＡＣＴ２１乃至ＡＣＴ３５の処理を前述したのと同様に実行する。

【0086】

こうして、決済開始信号を入力することなくＡＣＴ２１乃至ＡＣＴ３５及びＡＣＴ４１乃至ＡＣＴ４５の処理を繰り返し実行すると、放置時間Ｔｐがしきい値Ｔｍａｘを超えたレコードが第１テーブル５２２から検出される可能性がある。

【0087】

放置時間Ｔｐがしきい値Ｔｍａｘを超えたレコードが第１テーブル５２２から検出されると、プロセッサ５１は、ＡＣＴ３３においてＹＥＳと判定し、ＡＣＴ３６へと進む。プロセッサ５１は、ＡＣＴ３６として報知動作を行う。例えばプロセッサ５１は、ネットワークインターフェース５７を介してアテンダント端末２０に報知信号を出力する。

【0088】

報知信号を受信したアテンダント端末２０は、図１２に示すように、報知信号出力元の監視装置５０が接続されたセルフＰＯＳ端末１０で登録された買上商品のリスト上に、遺失物があることをアテンダントに報知するための画像９１を表示する。画像９１を確認したアテンダントは、会計場へ移動し、放置されている物品Ａ及び物品Ｂを回収する。その後アテンダントは、監視場に戻り、［確認］ボタンを入力操作する。［確認］ボタンを入力操作されると、アテンダント端末２０から監視装置５０に対して確認信号が出力される。なお、アテンダントは、［確認］ボタンを入力操作してから物品を回収してもよい。

【0089】

Ａｃｔ３６において報知信号を出力した監視装置５０のプロセッサ５１は、ＡＣＴ３７として確認信号を待ち受ける。アテンダント端末２０から確認信号を受信すると、プロセッサ５１は、ＡＣＴ３７においてＹＥＳと判定する。プロセッサ５１は、図９乃至図１１の流れ図に示す手順の情報処理を終了し、アイドル状態に戻る。

【0090】

ここに、プロセッサ５１は、ＡＣＴ１３の処理により受信手段８１を構成し、ＡＣＴ１４及びＡＣＴ４３の処理により取得手段８２を構成し、ＡＣＴ１５，ＡＣＴ１６の処理、及びＡＣＴ４４，ＡＣＴ４５の処理により検出手段８３を構成し、ＡＣＴ２７乃至ＡＣＴ３２の処理により計時手段８４を構成し、ＡＣＴ３３，ＡＣＴ３６の処理により報知手段８５を構成する。

【0091】

かくして、セルフＰＯＳ端末１０での決済を終えた決済者が、第１の商品載置台１０２又は第２の商品載置台１０３に物品を放置したままその場を離れると、アテンダントに対して遺失物があることが報知される。したがってアテンダントは、セルフＰＯＳ端末１０に放置された遺失物の発生状況を監視場で監視することができる。そして、遺失物を確認した場合、アテンダントは速やかに遺失物を回収できるので、遺失物があるために次の客がセルフＰＯＳ端末１０を操作できない、という状況を極力なくすことができる。

【0092】

ところで、前の客が決済を終えたセルフＰＯＳ端末１０においては、物品が放置されているか否かに拘らず、決済開始画面が表示されている。したがって、物品をアテンダントが回収する前に次の客が決済を開始する場合もあり得る。次の客が決済開始画面のスタートキーにタッチすると、セルフＰＯＳ端末１０から端末インターフェース５６へと決済開始に係る操作入力データ、つまりは決済開始信号が入力される。このとき、監視装置５０のプロセッサ５１は、図１１におけるＡＣＴ４１及びＡＣＴ４２の待ち受け状態にある。

【0093】

ＡＣＴ４１及びＡＣＴ４２の待ち受け状態において、決済開始信号を受信すると、プロセッサ５１は、ＡＣＴ４１からＡＣＴ４６へと進む。プロセッサ５１は、ＡＣＴ４６として第２テーブル５２３に放置時間Ｔｑが“１”以上のレコードが記憶されているか確認する。放置時間Ｔｑが“１”以上のレコードとは、次の客が決済を開始する前に第１の商品載置台１０２又は第２の商品載置台１０３に放置されていた物品に係るレコードである。以下では、放置時間Ｔｑが“１”以上のレコードを第３レコードＲｚと称する。

【0094】

第２テーブル５２３に第３レコードＲｚが記憶されていない場合、プロセッサ５１は、ＡＣＴ４６においてＮＯと判定し、図９のＡＣＴ１２へと戻る。プロセッサ５１は、ＡＣＴ１２以降の処理を前述したのと同様に実行する。

【0095】

これに対し、第２テーブル５２３に第３レコードＲｚが記憶されている場合には、プロセッサ５１は、ＡＣＴ４６においてＹＥＳと判定し、ＡＣＴ４７へと進む。プロセッサ５１は、ＡＣＴ４７としてその第３レコードＲｚの位置座標（Ｘ，Ｙ）を取得する。因みに、第３レコードＲｚが複数記憶されている場合には、プロセッサ５１は、各々の位置座標（Ｘ，Ｙ）を取得する。

【0096】

プロセッサ５１は、ＡＣＴ４８としてタイマ割込み信号を待ち受ける。タイマ割込み信号を受信すると、プロセッサ５１は、ＡＣＴ４８においてＹＥＳと判定し、ＡＣＴ４９へと進む。プロセッサ５１は、ＡＣＴ４９乃至ＡＣＴ５１として図９に示すＡＣＴ１４乃至ＡＣＴ１６と同一の処理を実行する。すなわちプロセッサ５１は、ＡＣＴ４９として画像メモリ５２１から次の画像データを取得する。プロセッサ５１は、ＡＣＴ５０としてその画像データを解析して、第１の商品載置台１０２又は第２の商品載置台１０３に置かれている物品を検索する。プロセッサ５１は、ＡＣＴ５１として物品を検出したか否かを判定する。物品を検出していない場合、プロセッサ５１は、ＡＣＴ５１においてＮＯと判定し、図９のＡＣＴ１２へと戻る。プロセッサ５１は、ＡＣＴ１２以降の処理を前述したのと同様に実行する。

【0097】

物品を検出した場合には、プロセッサ５１は、ＡＣＴ５１においてＹＥＳと判定し、ＡＣＴ５２へと進む。プロセッサ５１は、ＡＣＴ５２として、図１０のＡＣＴ２３の処理と同様に、検出された物品の中心となる位置座標を検出する。このときもプロセッサ５１は、複数の物品を検出していた場合には、それぞれ中心となる位置座標を検出する。

【0098】

プロセッサ５１は、ＡＣＴ５３として第３レコードＲｚの位置座標（Ｘ，Ｙ）と略一致する位置座標がＡＣＴ５２の処理において検出されたか否かを確認する。この場合も、図１０のＡＣＴ２９の処理と同様に、一方の位置座標で特定される第１の点と他方の位置座標で特定される第２の点とを結ぶ線分の長さが、所定の距離以下である場合を略一致とみなす。

【0099】

第３レコードＲｚの位置座標（Ｘ，Ｙ）と略一致する位置座標がＡＣＴ５２の処理において検出されなかった場合、プロセッサ５１は、ＡＣＴ５３においてＮＯと判定し、図９のＡＣＴ１２へと戻る。プロセッサ５１は、ＡＣＴ１２以降の処理を前述したのと同様に実行する。

【0100】

第３レコードＲｚの位置座標（Ｘ，Ｙ）と略一致する位置座標がＡＣＴ５２の処理において検出された場合には、プロセッサ５１は、ＡＣＴ５３においてＹＥＳと判定し、ＡＣＴ５４へと進む。プロセッサ５１は、ＡＣＴ５４として、略一致する位置座標が検出された全ての第３レコードＲｚの放置時間Ｔｑに“１”を加算する。

【0101】

プロセッサ５１は、ＡＣＴ５５として放置時間Ｔｑがしきい値Ｔｍａｘを超えたか否かを確認する。放置時間Ｔｑがしきい値Ｔｍａｘを超えていない場合、プロセッサ５１は、ＡＣＴ４８へと戻る。プロセッサ５１は、ＡＣＴ４８以降の処理を前述したのと同様に実行する。すなわちプロセッサ５１は、タイマ割込み信号を受信すると、ＡＣＴ４９において画像メモリ５２１から次の画像データを取得し、ＡＣＴ５０においてその画像データを解析して、第１の商品載置台１０２又は第２の商品載置台１０３に置かれている物品を検索する。その結果、物品を検出すると、プロセッサ５１は、ＡＣＴ５２において検出された物品の中心となる位置座標を検出し、ＡＣＴ５３において第３レコードＲｚの位置座標（Ｘ，Ｙ）と略一致する位置座標が検出されたか否かを確認する。第３レコードＲｚの位置座標（Ｘ，Ｙ）と略一致する位置座標が検出された場合、プロセッサ５１は、ＡＣＴ５４において、略一致する位置座標が検出された全ての第３レコードＲｚの放置時間Ｔｑに“１”を加算する。

【0102】

かくして、放置時間Ｔｑがしきい値Ｔｍａｘを超えた場合、プロセッサ５１は、ＡＣＴ５５においてＹＥＳと判定し、ＡＣＴ５６へと進む。プロセッサ５１は、ＡＣＴ５６として、図９のＡＣＴ３６の処理と同様に報知動作を行う。そして、アテンダント端末２０から確認信号を受信すると、プロセッサ５１は、ＡＣＴ５６においてＹＥＳと判定する。プロセッサ５１は、図９乃至図１１の流れ図に示す手順の情報処理を終了し、アイドル状態に戻る。

【0103】

ここに、プロセッサ５１は、ＡＣＴ４１の処理により受信手段８１を構成し、ＡＣＴ４９の処理により取得手段８２を構成し、ＡＣＴ５０乃至ＡＣＴ５１の処理により検出手段８３を構成し、ＡＣＴ４７、ＡＣＴ５２乃至ＡＣＴ５４の処理により計時手段８４を構成し、ＡＣＴ５５、ＡＣＴ５６の処理により報知手段８５を構成する。

【0104】

かくして、第１の商品載置台１０２又は第２の商品載置台１０３に放置されていた物品をアテンダントが回収する前に次の客が決済を開始した場合においても、その物品の放置時間Ｔｑがしきい値Ｔｍａｘを超えると、アテンダントに対して遺失物があることが報知される。したがって、アテンダントが放置された物品を回収するので、次の客がセルフＰＯＳ端末１０を操作して決済を開始しても問題はない。

【0105】

［変形例］
前記実施形態では、各セルフＰＯＳ端末１０がそれぞれ監視装置５０を備える場合を例示した。他の実施形態としては、１つの監視装置５０が２台以上のセルフＰＯＳ端末１０と、そのセルフＰＯＳ端末１０の近傍に設置されたカメラ６０とを接続して、その２台以上のセルフＰＯＳ端末１０において遺失物の発生状況を監視することも可能である。

【0106】

前記実施形態では、監視装置５０は、決済者の不正行動と遺失物の発生とを監視する機能を有する装置として説明した。監視装置５０は、遺失物の発生を監視する機能に特化したものであってもよい。ただし、決済者の不正な行動と遺失物の発生とを監視する機能を有することで、監視装置５０は、１つのカメラ６０で撮影された画像を、決済中は不正行動の監視に利用し、決済後は遺失物の監視に利用することとなる。したがって、資源を有効に活用することができる。

【0107】

前記実施形態では、プロセッサ５１が不正行動監視機能５１１を実現するためのアプリケーションプログラムとして不正行動監視プログラムを例示し、遺失物監視機能５１２を実現するためのアプリケーションプログラムとして遺失物監視プログラムを例示した。この点に関しては、共通のアプリケーションプログラムによって、プロセッサ５１が不正行動監視機能５１１と遺失物監視機能５１２とを実現するようにしてもよい。

【0108】

前記実施形態では、セルフＰＯＳ端末１０の第１の商品載置台１０２と第２の商品載置台１０３とを載置部とした。載置部は、これらに限定されない。例えば本体１０１に物品を置くスペースがある場合には、その場所も載置部に含めればよい。

【0109】

前記実施形態では、図１０のＡＣＴ２３及び図１１のＡＣＴ５２の処理において、物品の中心となる位置座標を検出した。この点に関しては、物品の中心以外の位置座標を検出してもよい。要は、物品が移動しているか否かを特定できればよい。

【0110】

前記実施形態では、図１０のＡＣＴ３３及び図１１のＡＣＴ５５の処理において、放置時間Ｔｐ又は放置時間Ｔｑと比較するしきい値Ｔｍａｘを共通とした。この点に関しては、例えば図１１のＡＣＴ５５において放置時間Ｔｑと比較する第１のしきい値Ｔｍａｘを、図１０のＡＣＴ３３において放置時間Ｔｐと比較する第２のしきい値Ｔｍａｘよりも小さい値としてもよい。次の客が会計を開始した際に第１の商品載置台１０２又は第２の商品載置台１０３に置かれていた物品は放置された物品である可能性が高い。このため、第１のしきい値Ｔｍａｘを第２のしきい値Ｔｍａｘよりも小さい値とすることで、遺失物として放置されるタイミングを早く設定できる。なお、第１のしきい値Ｔｍａｘを第２のしきい値Ｔｍａｘよりも大きい値としてもよいことは言うまでもないことである。

【0111】

前記実施形態では、報知信号を受信したアテンダント端末２０において、買上商品のリスト上に遺失物があることをアテンダントに報知するための画像９１を表示する場合を例示した。他の実施形態としては、遺失物が第１の商品載置台１０２に置かれているのか、第２の商品載置台１０３に置かれているのかを特定する情報を併せて表示するようにしてもよい。また、検出手段８３が、放置されている物品が商品であるのか買物籠であるのかを特定することは既存の技術で可能である。そこで、放置されている物品の種類を併せて表示するようにしてもよい。また、放置されている物品の画像が画像メモリ５２１に記憶されているので、その画像も表示してもよい。画像を表示することによって、アテンダントは、より確実に遺失物を見つけることができる。

【0112】

以上、フルセルフ対応のセルフＰＯＳ端末１０において遺失物の発生状況を監視できる監視装置５０を含む会計システム１００の実施形態についていくつか説明したが、かかる実施形態はこれに限定されるものではない。これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態及びその変形は、発明の範囲に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0113】

１０…セルフＰＯＳ端末、２０…アテンダント端末、３０…店舗サーバ、４０…通信ネットワーク、５０…監視装置、５１…プロセッサ、５２…メインメモリ、５３…補助記憶デバイス、５４…タイマ、５５…カメラインターフェース、５６…端末インターフェース、５７…ネットワークインターフェース、５８…システム伝送路、６０…カメラ、７１…取得手段、７２…行動検知手段、７３…判定手段、７４…警告手段、８１…受信手段、８２…取得手段、８３…検出手段、８４…計時手段、８５…報知手段、１００…会計システム、１０１…本体、１０２…第１の商品載置台、１０３…第２の商品載置台、５１１…不正行動監視機能、５１２…遺失物監視機能、５２１…画像メモリ、５２２…第１テーブル、５２３…第２テーブル。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】