知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023118460
(43)【公開日】2023-08-25
(54)【発明の名称】監視装置及びプログラム
(51)【国際特許分類】
G08B 21/24 20060101AFI20230818BHJP
G07G 1/00 20060101ALI20230818BHJP
G07G 1/01 20060101ALI20230818BHJP
G07G 1/12 20060101ALI20230818BHJP
G08B 25/00 20060101ALI20230818BHJP
【ＦＩ】
G08B21/24
G07G1/00 331Z
G07G1/01 301D
G07G1/12 331B
G08B25/00 510M
【審査請求】未請求
【請求項の数】6
【出願形態】ＯＬ
(21)【出願番号】P 2022021421
(22)【出願日】2022-02-15
(71)【出願人】
【識別番号】000003562
【氏名又は名称】東芝テック株式会社
(74)【代理人】
【識別番号】110003708
【氏名又は名称】弁理士法人鈴榮特許綜合事務所
(74)【代理人】
【識別番号】100108855
【弁理士】
【氏名又は名称】蔵田 昌俊
(74)【代理人】
【識別番号】100179062
【弁理士】
【氏名又は名称】井上 正
(74)【代理人】
【識別番号】100075672
【弁理士】
【氏名又は名称】峰 隆司
(74)【代理人】
【識別番号】100153051
【弁理士】
【氏名又は名称】河野 直樹
(74)【代理人】
【識別番号】100162570
【弁理士】
【氏名又は名称】金子 早苗
(72)【発明者】
【氏名】五反田 剛
(72)【発明者】
【氏名】杉山 智則
(72)【発明者】
【氏名】武田 拓樹
(72)【発明者】
【氏名】大谷 優奈
(72)【発明者】
【氏名】菊竹 紗
【テーマコード（参考）】
3E142
5C086
5C087
【Ｆターム（参考）】
3E142AA01
3E142CA20
3E142DA04
3E142DA08
3E142FA03
3E142FA08
3E142FA50
3E142GA02
3E142GA03
3E142GA05
3E142GA06
3E142GA24
3E142GA35
3E142GA36
3E142GA41
3E142KA02
3E142KA20
5C086AA21
5C086CA28
5C086CB36
5C086DA33
5C086EA40
5C086EA45
5C086FA02
5C086FA06
5C086FA12
5C086FA15
5C086FA18
5C087AA12
5C087AA16
5C087AA19
5C087AA32
5C087AA37
5C087DD31
5C087EE14
5C087FF01
5C087FF02
5C087FF04
5C087GG02
5C087GG08
5C087GG09
5C087GG10
5C087GG52
5C087GG66
5C087GG70
5C087GG83
5C087GG84
(57)【要約】
【課題】フルセルフ対応の決済装置における遺失物の発生状況を監視可能とする。
【解決手段】監視装置は、記憶手段と、発見手段と、報知手段とを備える。記憶手段は、客が登録前の買上商品を載置するための第１の商品載置台及び客が登録後の買上商品を載置するための場所である第２の商品載置台を備える決済装置がアイドル状態にあるときに、決済装置の少なくとも第１及び第２の商品載置台を含む基準エリアを撮影した基準画像を記憶する。発見は、決済装置で決済終了後に客が決済装置から離れた時点に基準エリアを撮影した画像を比較画像として、基準画像と比較することで、決済装置の第１及び第２の商品載置台に残された遺失物を発見する。報知手段は、決済装置に残された遺失物が発見されたとき、そのことを報知する。
【選択図】 図３
【解決手段】監視装置は、記憶手段と、発見手段と、報知手段とを備える。記憶手段は、客が登録前の買上商品を載置するための第１の商品載置台及び客が登録後の買上商品を載置するための場所である第２の商品載置台を備える決済装置がアイドル状態にあるときに、決済装置の少なくとも第１及び第２の商品載置台を含む基準エリアを撮影した基準画像を記憶する。発見は、決済装置で決済終了後に客が決済装置から離れた時点に基準エリアを撮影した画像を比較画像として、基準画像と比較することで、決済装置の第１及び第２の商品載置台に残された遺失物を発見する。報知手段は、決済装置に残された遺失物が発見されたとき、そのことを報知する。
【選択図】 図３
【特許請求の範囲】
【請求項1】
客が登録前の買上商品を載置するための第１の商品載置台及び前記客が登録後の買上商品を載置するための第２の商品載置台を備える決済装置がアイドル状態にあるときに、前記決済装置の少なくとも前記第１及び第２の商品載置台を含む基準エリアを撮影した基準画像を記憶する記憶手段と、
前記決済装置で決済終了後に前記客が前記決済装置から離れた時点に前記基準エリアを撮影した画像を比較画像として、前記基準画像と比較することで、前記決済装置の前記第１及び第２の商品載置台に残された遺失物を発見する発見手段と、
前記決済装置に残された前記遺失物が発見されたとき、そのことを報知する報知手段と、
を具備する監視装置。
前記決済装置で決済終了後に前記客が前記決済装置から離れた時点に前記基準エリアを撮影した画像を比較画像として、前記基準画像と比較することで、前記決済装置の前記第１及び第２の商品載置台に残された遺失物を発見する発見手段と、
前記決済装置に残された前記遺失物が発見されたとき、そのことを報知する報知手段と、
を具備する監視装置。
【請求項2】
前記発見手段は、前記比較画像に基づいて、前記遺失物が、前記登録前の買上商品を収容するための買物籠が空の状態で残されたものであるか否かを判断し、
前記報知手段は、前記遺失物が空の買物籠であるかに応じて報知する、請求項１記載の監視装置。
前記報知手段は、前記遺失物が空の買物籠であるかに応じて報知する、請求項１記載の監視装置。
【請求項3】
前記遺失物が前記空の買物籠以外の物品であるとき、前記決済装置に、次の客による買上商品の登録操作を禁止させる禁止手段をさらに具備する、請求項２記載の監視装置。
【請求項4】
前記発見手段は、
前記決済装置での前記客による前記買上商品の登録が完了し会計を行うことを指示する会計開始操作がなされた時点に前記基準エリアを撮影した画像中の、前記決済装置の少なくとも前記第１の商品載置台を含み且つ前記第２の商品載置台を含まない比較エリアにおける画像を前記比較画像として、前記基準画像と比較することで、前記第２の商品載置台を除き且つ前記少なくとも前記第１の商品載置台を含む前記決済装置の部分に残された物品を発見し、
前記比較画像に基づいて、前記物品が、前記登録前の買上商品を収容するための買物籠が空の状態で残されたものであるか否かを判断し、
前記報知手段は、前記物品が空の買物籠であるか否かにより、報知内容を決定して報知する、請求項１記載の監視装置。
前記決済装置での前記客による前記買上商品の登録が完了し会計を行うことを指示する会計開始操作がなされた時点に前記基準エリアを撮影した画像中の、前記決済装置の少なくとも前記第１の商品載置台を含み且つ前記第２の商品載置台を含まない比較エリアにおける画像を前記比較画像として、前記基準画像と比較することで、前記第２の商品載置台を除き且つ前記少なくとも前記第１の商品載置台を含む前記決済装置の部分に残された物品を発見し、
前記比較画像に基づいて、前記物品が、前記登録前の買上商品を収容するための買物籠が空の状態で残されたものであるか否かを判断し、
前記報知手段は、前記物品が空の買物籠であるか否かにより、報知内容を決定して報知する、請求項１記載の監視装置。
【請求項5】
前記報知手段は、
前記物品が空の買物籠であれば、報知せず、
前記物品が空の買物籠以外の物品である場合には、前記客に注意を喚起する報知を行う、請求項４記載の監視装置。
前記物品が空の買物籠であれば、報知せず、
前記物品が空の買物籠以外の物品である場合には、前記客に注意を喚起する報知を行う、請求項４記載の監視装置。
【請求項6】
決済装置と通信するコンピュータを、
客が登録前の買上商品を載置するための第１の商品載置台及び前記客が登録後の買上商品を載置するための場所である第２の商品載置台を備える決済装置がアイドル状態にあるときに、前記決済装置の少なくとも前記第１及び第２の商品載置台を含む基準エリアを撮影した基準画像を記憶する記憶手段、
前記決済装置で決済終了後に前記客が前記決済装置から離れた時点に前記基準エリアを撮影した画像を比較画像として、前記基準画像と比較することで、前記決済装置の前記第１及び第２の商品載置台に残された遺失物を発見する発見手段、
前記決済装置に残された前記遺失物が発見されたとき、そのことを報知する報知手段、
として機能させるためのプログラム。
客が登録前の買上商品を載置するための第１の商品載置台及び前記客が登録後の買上商品を載置するための場所である第２の商品載置台を備える決済装置がアイドル状態にあるときに、前記決済装置の少なくとも前記第１及び第２の商品載置台を含む基準エリアを撮影した基準画像を記憶する記憶手段、
前記決済装置で決済終了後に前記客が前記決済装置から離れた時点に前記基準エリアを撮影した画像を比較画像として、前記基準画像と比較することで、前記決済装置の前記第１及び第２の商品載置台に残された遺失物を発見する発見手段、
前記決済装置に残された前記遺失物が発見されたとき、そのことを報知する報知手段、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明の実施形態は、監視装置及びプログラムに関する。
【背景技術】
【0002】
近年、スーパーマーケット等の小売店では、人件費の削減、感染症の感染予防対策等の観点から、セルフＰＯＳ（Point Of Sales）端末が注目されている。セルフＰＯＳ端末は、買上商品の登録から決済までの操作を客が自ら行うようにしたフルセルフ対応の決済装置である。このようなフルセルフ対応の決済装置では、客の不正行為を抑止できる技術が開発されている。
【0003】
一方で、フルセルフ対応の決済装置では、客が自らＰＯＳ端末の操作を行うようにしたことで、新たな問題も発生してきている。その一つに、遺失物問題が有る。客がセルフＰＯＳ端末の操作を行う際に、自身の操作を妨げないセルフＰＯＳ端末上の任意の位置に、私物（傘、カバン、財布等）や登録済み商品を一時的に置き、それらをそのまま置き忘れてしまう事態が発生する。このような遺失物がセルフＰＯＳ端末に存在した場合、従業員（アテンダント）が速やかに確保処理しなくてはならないが、遺失物に気付かないことも多い。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開平７－１４１５６９号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
本発明の実施形態が解決しようとする課題は、フルセルフ対応の決済装置において遺失物の発生状況を監視できる監視装置を提供しようとするものである。
【課題を解決するための手段】
【0006】
一実施形態において、監視装置は、記憶手段と、発見手段と、報知手段とを備える。記憶手段は、客が登録前の買上商品を載置するための第１の商品載置台及び客が登録後の買上商品を載置するための場所である第２の商品載置台を備える決済装置がアイドル状態にあるときに、決済装置の少なくとも第１及び第２の商品載置台を含む基準エリアを撮影した基準画像を記憶する。発見は、決済装置で決済終了後に客が決済装置から離れた時点に基準エリアを撮影した画像を比較画像として、基準画像と比較することで、決済装置の第１及び第２の商品載置台に残された遺失物を発見する。報知手段は、決済装置に残された遺失物が発見されたとき、そのことを報知する。
【図面の簡単な説明】
【0007】
【発明を実施するための形態】
【0008】
以下、実施形態について、図面を用いて説明する。
【0009】
［チェックアウトシステムの説明］
図１は、フルセルフ方式のチェックアウトシステム１００を示す概略構成図である。チェックアウトシステム１００は、複数台のセルフＰＯＳ端末１０とアテンダント端末２０と店舗サーバ３０とを含む。チェックアウトシステム１００は、各セルフＰＯＳ端末１０とアテンダント端末２０と店舗サーバ３０とをＬＡＮ（Local Area Network）等の通信ネットワーク４０で接続する。店舗サーバ３０は、通信ネットワーク４０で接続された各セルフＰＯＳ端末１０及びアテンダント端末２０に対し、本チェックアウトシステム１００に係る様々なサービスを提供する。
図１は、フルセルフ方式のチェックアウトシステム１００を示す概略構成図である。チェックアウトシステム１００は、複数台のセルフＰＯＳ端末１０とアテンダント端末２０と店舗サーバ３０とを含む。チェックアウトシステム１００は、各セルフＰＯＳ端末１０とアテンダント端末２０と店舗サーバ３０とをＬＡＮ（Local Area Network）等の通信ネットワーク４０で接続する。店舗サーバ３０は、通信ネットワーク４０で接続された各セルフＰＯＳ端末１０及びアテンダント端末２０に対し、本チェックアウトシステム１００に係る様々なサービスを提供する。
【0010】
複数台のセルフＰＯＳ端末１０は、それぞれ店舗の会計場に設置されており、買物を終えた客が操作者となる。商品が陳列された売場において買上商品を買物籠等に入れたりショッピングカートに積んだりして会計場へと移動した客は、セルフＰＯＳ端末１０を操作して、買上商品の会計、つまりは商品の登録から支払いまでの取引に係る決済をセルフで行う。セルフＰＯＳ端末１０は、フルセルフ対応の決済装置の一例である。決済装置は、決済端末、会計装置、会計端末、商品登録装置、商品登録端末等と言い換えることができる。
【0011】
アテンダント端末２０は、会計場の出口近傍に設けられた監視場に設置されている。アテンダント端末２０は、セルフＰＯＳ端末１０毎に登録された買上商品のリスト等を表示デバイスに表示する。またアテンダント端末２０は、セルフＰＯＳ端末１０でエラーが発生した場合にはそのエラー情報を報知する。監視場にいる従業員、いわゆるアテンダントは、アテンダント端末２０において表示され、また報知された情報を基に会計場の監視を行う。なお、図１では、アテンダント端末２０の台数を１台としているが、複数台のアテンダント端末２０が通信ネットワーク４０に接続されていてもよい。また、その内の少なくとも一台は、上記の監視場とは異なる場所、例えば、バックオフィスのような同店舗の別フロアやヘルプデスク等に設置してもよい。そのようなセルフＰＯＳ端末１０から遠く離れた場所のアテンダント端末２０も、通信ネットワーク４０経由によりセルフＰＯＳ端末１０からのエラー情報を報知できる。よって、直接セルフＰＯＳ端末１０を確認できない場所に居る従業員であっても、セルフＰＯＳ端末１０を監視することが可能となる。
【0012】
各セルフＰＯＳ端末１０は、それぞれ監視装置５０を備える。監視装置５０は、セルフＰＯＳ端末１０の外部に有ってもよいし、内部に有ってもよい。監視装置５０は、セルフＰＯＳ端末１０を操作する客、いわゆる決済者の忘れ物つまり遺失物の発生を監視する機能を有する装置である。監視装置５０は、セルフＰＯＳ端末１０の近傍に設けられたカメラ６０及び人感センサ７０と接続している。人感センサ７０は、セルフＰＯＳ端末１０に設けられ、監視装置５０は、そのセルフＰＯＳ端末１０の人感センサ７０から感知出力を受信するよう構成してもよい。監視装置５０は、人感センサ７０による決済者の感知に応じてカメラ６０を起動して、セルフＰＯＳ端末１０を撮影させる。そして、監視装置５０は、そのカメラ６０で撮影される画像等の情報に基づき、セルフＰＯＳ端末１０での遺失物の発生を監視し、遺失物が発生したとき、アラートを通知する。また、監視装置５０は、遺失物が発生しそうな場合にも、アラートを通知してもよい。アラートの通知先は、セルフＰＯＳ端末１０とアテンダント端末２０の両方または一方である。各監視装置５０は、通信ネットワーク４０を介してアテンダント端末２０に接続しており、アラート信号をアテンダント端末２０へと出力可能である。各監視装置５０は、通信ネットワーク４０を介さずにアテンダント端末２０と接続してもよい。
【0013】
なお、監視装置５０は、決済者の不正な行動を監視する機能を備えていてもよい。具体的には監視装置５０は、セルフＰＯＳ端末１０の近傍に設けられたカメラ６０で撮影される画像等の情報に基づき、セルフＰＯＳ端末１０を操作して取引の決済を行っている決済者を監視し、その決済者が不正な行動をとった場合にアラートを通知する。不正な行動とは、例えば買上商品をセルフＰＯＳ端末１０に登録せずに袋詰めする行動である。不正な行動とは、例えば買上商品の代金を支払わずに会計場から退出する行動である。
【0014】
店舗サーバ３０は、商品データベースを管理する。商品データベースは、店舗で販売される商品毎に作成される商品レコードの集合体である。商品レコードは、例えば、商品コード、商品名、価格、等のデータを含む。商品コードは、各商品を個々に識別するために商品毎に設定された一意のコードである。各商品には、当該商品の商品コードを表すバーコードが付されている。商品名及び価格は、商品コードで識別される商品の固有名称及び１点当たりの販売金額である。
【0015】
［セルフＰＯＳ端末の説明］
図２は、セルフＰＯＳ端末１０の外観構成を示す図である。セルフＰＯＳ端末１０は、本体１０１と、該本体１０１の左右に配置された第１の商品載置台１０２及び第２の商品載置台１０３とを備える。本体１０１に向かって右側に配置される第１の商品載置台１０２は、決済者である客が登録前の買上商品を載置するための台である。登録前の買上商品は、通常、買物籠に入れられて第１の商品載置台１０２に載置される。登録前の買上商品は、ショッピングカートに積まれた状態で第１の商品載置台１０２の前方に配置されてもよい。なお、第１の商品載置台１０２及び第２の商品載置台１０３の取り付け位置は、左右が逆であってもよい。
図２は、セルフＰＯＳ端末１０の外観構成を示す図である。セルフＰＯＳ端末１０は、本体１０１と、該本体１０１の左右に配置された第１の商品載置台１０２及び第２の商品載置台１０３とを備える。本体１０１に向かって右側に配置される第１の商品載置台１０２は、決済者である客が登録前の買上商品を載置するための台である。登録前の買上商品は、通常、買物籠に入れられて第１の商品載置台１０２に載置される。登録前の買上商品は、ショッピングカートに積まれた状態で第１の商品載置台１０２の前方に配置されてもよい。なお、第１の商品載置台１０２及び第２の商品載置台１０３の取り付け位置は、左右が逆であってもよい。
【0016】
本体１０１に向かって左側に配置される第２の商品載置台１０３は、決済者が登録後の買上商品を載置するための台である。登録後の買上商品は、第２の商品載置台１０３に置かれた収容体、例えば買物籠、レジ袋またはマイバッグ等に入れられる。登録後の買上商品は、第２の商品載置台１０３に直接置かれてもよい。図２において、第２の商品載置台１０３は、その上部に支柱を介して一時置き台１０４を設けている。一時置き台１０４は、例えば、商品をレジ袋等に入れる前に一時的に載置するための台である。一時置き台１０４には、左右に離間させて２本の保持アーム１０５が設けられている。決済者は、これらの保持アーム１０５を用いて、レジ袋、マイバッグ等を開口した状態で第２の商品載置台１０３の上に置くことが可能である。
【0017】
本体１０１は、入出力デバイスとしてのタッチパネル１１、カードリーダ１２、プリンタ１３、スキャナ１４、ハンドスキャナ１５、現金処理機１６、パトランプ１７、発光部１８、スピーカ１９、等を備える。
【0018】
タッチパネル１１は、表示デバイスとしてのディスプレイと、入力デバイスとしてのタッチセンサとを含む。ディスプレイは、会計開始画面、商品登録画面、支払い方法選択画面、会計終了画面等の種々の画面情報を表示する。会計開始画面は、取引の決済開始を受け付ける画面である。会計開始画面には、取引の決済開始を指令するためのスタートキーが配置される。買上商品の登録を始める決済者は、スタートキーにタッチする。スタートキーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、ディスプレイの画面を会計開始画面から商品登録画面へと切り替える。
【0019】
商品登録画面は、登録された買上商品の商品名、価格、合計金額等の明細情報を表示する画面である。商品登録画面には、登録を終えた買上商品の代金支払いへの移行を指令するための会計キーが配置される。買上商品の登録を終えた決済者は、支払いキーにタッチする。会計キーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、ディスプレイの画面を商品登録画面から支払い方法選択画面へと切り替える。
【0020】
支払い方法選択画面は、現金支払い、クレジットカード支払い、電子マネー支払い、コード決済支払い等の支払い方法の選択入力を受け付ける画面である。支払い方法選択画面には、現金支払いを指令するための現金キー、クレジットカード支払いを指令するためのクレジットキー、電子マネー支払いを指令するための電子マネーキー、コード決済支払いを指令するためのコード決済キー等が配置される。決済者は、希望する支払い方法のキーにタッチする。例えば、現金キーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、現金による決済処理を実行し、ディスプレイの画面を支払い方法選択画面から現金による会計終了画面へと切り替える。クレジットキーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、クレジットカードによる決済処理を実行し、ディスプレイの画面を支払い方法選択画面からクレジットカードによる会計終了画面へと切り替える。電子マネーキーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、電子マネーカードによる決済処理を実行し、ディスプレイの画面を支払い方法選択画面から電子マネーカードによる会計終了画面へと切り替える。コード決済キーがタッチ操作されたことをタッチセンサが検知すると、セルフＰＯＳ端末１０のコントローラは、コード決済用のコードによる決済処理を実行し、ディスプレイの画面を支払い方法選択画面からコード決済による会計終了画面へと切り替える。
【0021】
例えば現金による会計終了画面は、取引の合計金額、現金の預かり金額、及び、釣銭額等を表示する画面である。例えば現金による決済処理は、預かり金額から取引の合計金額を減額して釣銭額を算出し、レシートを発行して取引を終了させる処理である。このような現金による決済処理は周知の処理であるので、詳細な説明は省略する。また、クレジットカード、電子マネーカードまたはコード決済による決済処理も周知の処理であるので、ここでの説明は省略する。
【0022】
カードリーダ１２は、クレジットカード、電子マネーカード、ポイントカード等のカード媒体に記録されたデータを読み取るデバイスである。カード媒体が磁気カードの場合、カードリーダ１２は磁気カードリーダである。カード媒体がＩＣカードの場合、カードリーダ１２は、ＩＣカードリーダである。セルフＰＯＳ端末１０は、カードリーダ１２として磁気カードリーダまたはＩＣカードリーダのいずれか一方を備えていてもよいし、両方を備えていてもよい。カードリーダ１２は、カードへのデータ書込み機能を有したカードリーダ・ライタであってもよい。
【0023】
プリンタ１３は、レシート用紙に買上レシート、クレジットカード伝票等に係るデータを印刷するデバイスである。プリンタ１３によって種々のデータが印刷されたレシート用紙は、カッタによりカットされて、レシート発行口から発行される。プリンタ１３は、例えばサーマルプリンタまたはドットインパクトプリンタ等によって実現される。
【0024】
スキャナ１４及びハンドスキャナ１５は、商品を識別する情報を読み取るものである。本実施形態において、スキャナ１４及びハンドスキャナ１５は、商品を識別する情報として商品に付されたバーコードを読み取るものとする。スキャナ１４は、商品に付されたバーコードが相対するように読取窓（ガラス窓）に翳された商品のバーコードを光学的に読み取る。ハンドスキャナ１５は、決済者によって手持ちで操作されるもので、商品に付されたバーコードに近接されることによりバーコードを光学的に読み取る。なお、スキャナ１４及びハンドスキャナ１５は、商品を認識する情報を読み取るものであればよく、例えば二次元コード等、バーコード以外の情報を読み取るものであってもよい。
【0025】
現金処理機１６は、現金を処理するものである。現金処理機１６は、紙幣投入口１６１、紙幣排出口１６２、硬貨投入口１６３及び硬貨排出口１６４を有する。現金処理機１６は、紙幣投入口１６１に投入された紙幣を処理する。現金処理機１６は、釣銭としての紙幣を紙幣排出口１６２から排出する。現金処理機１６は、硬貨投入口１６３に投入された硬貨を受け入れて処理する。現金処理機１６は、釣銭としての硬貨を硬貨排出口１６４から排出する。
【0026】
パトランプ１７は、遠くからでも見えるように、鉛直方向に延びたポールの先端に取り付けられている。パトランプ１７は、発光部材と円筒とを含む。発光部材は、円筒の内部に、円筒と同軸に回転可能に取り付けられている。パトランプ１７は、動作すると、発光部材を発光させながら回転させることができる。パトランプ１７は、アラートを表示するためのものである。例えば、パトランプ１７は、商品登録時に発光部材を点灯させることで、決済者やアテンダント端末２０に居る従業員が、商品スキャンが適切に行われているか否かを目視確認できるようにする。
【0027】
発光部１８は、ポールのパトランプ１７の下段に配置されている。発光部１８も、パトランプ１７と同様に発光部材と円筒を含む。発光部材は、複数の色で選択的に発光可能となっている。あるいは、発光部１８は、互いに異なる発光色の複数の発光部材を備える。発光部１８もパトランプ１７と同様に、アラートを表示するためのものである。発光部１８は、発光部材の発光色によってもしくは発光色とその点滅状態によって、エラー中、決済者の不正な行動の検出、等のアラートを表示することができる。
【0028】
スピーカ１９は、アラートとしての警告音、あるいは、メッセージとしての音声等の音を出力する。
【0029】
本体１０１の上方部には、撮像装置としてのカメラ６０が取り付けられている。カメラ６０は、セルフＰＯＳ端末１０とそれを操作する決済者を撮影するものである。図２に示すように、タッチパネル１１のディスプレイ、カードリーダ１２のカード挿入口、プリンタ１３のレシート発行口、スキャナ１４の読取窓及び現金処理機１６の紙幣投入口１６１、紙幣排出口１６２、硬貨投入口１６３及び硬貨排出口１６４は、本体１０１の１つの面（以下、正面とする）に配置されている。このため決済者は、本体１０１の正面と対峙するように立って、セルフＰＯＳ端末１０を操作する。カメラ６０は、その決済者のほぼ全身を上方から撮影する。したがって、決済者の頭部、顔面、両肩、両腕、胸部、腹部等がカメラ６０によって撮影される。
【0030】
また、セルフＰＯＳ端末１０の本体１０１の正面に、人感センサ７０が取り付けられている。人感センサ７０は、セルフＰＯＳ端末１０の正面側の感知範囲内に決済者が存在する間、感知出力を監視装置５０に送信する。また、人感センサ７０は、感知出力をセルフＰＯＳ端末１０にも送信するよう構成することで、セルフＰＯＳ端末１０は、その感知出力に基づいて、決済者が存在しない間はアイドル状態に移行する。アイドル状態とは、タッチパネル１１のディスプレイを消灯する等して省電力化を測る待機状態のことである。また、セルフＰＯＳ端末１０は、人感センサ７０の感知出力に基づいて決済者の存在を認識すると、スピーカ１９により音声ガイダンスを流し、最初の操作を促すことができる。
【0031】
［監視装置の構成説明］
図３は、監視装置５０の要部回路構成を示すブロック図である。監視装置５０は、プロセッサ５１、メインメモリ５２、補助記憶デバイス５３、カメラインターフェース５４、センサインタフェース５５、端末インターフェース５６、ネットワークインターフェース５７及びシステム伝送路５８等を備える。システム伝送路５８は、アドレスバス、データバス、制御信号線等を含む。システム伝送路５８は、プロセッサ５１と他の各部とを接続し、相互間で授受されるデータ信号を伝送する。
図３は、監視装置５０の要部回路構成を示すブロック図である。監視装置５０は、プロセッサ５１、メインメモリ５２、補助記憶デバイス５３、カメラインターフェース５４、センサインタフェース５５、端末インターフェース５６、ネットワークインターフェース５７及びシステム伝送路５８等を備える。システム伝送路５８は、アドレスバス、データバス、制御信号線等を含む。システム伝送路５８は、プロセッサ５１と他の各部とを接続し、相互間で授受されるデータ信号を伝送する。
【0032】
監視装置５０は、プロセッサ５１と、メインメモリ５２、補助記憶デバイス５３、カメラインターフェース５４、センサインタフェース５５、端末インターフェース５６及びネットワークインターフェース５７とをシステム伝送路５８で接続することにより、コンピュータを構成する。
【0033】
プロセッサ５１は、上記コンピュータの中枢部分に相当する。プロセッサ５１は、オペレーティングシステムまたはアプリケーションプログラムに従って、監視装置５０としての各種の機能を実現するべく各部を制御する。プロセッサ５１は、例えばＣＰＵ（Central Processing Unit）である。プロセッサ５１は、マルチコア／マルチスレッドのものであって良く、複数の処理を並行して実行することができる。
【0034】
メインメモリ５２は、上記コンピュータの主記憶部分に相当する。メインメモリ５２は、不揮発性のメモリ領域と揮発性のメモリ領域とを含む。メインメモリ５２は、不揮発性のメモリ領域ではオペレーティングシステムまたはアプリケーションプログラムを記憶する。メインメモリ５２は、プロセッサ５１が各部を制御するための処理を実行する上で必要なデータを不揮発性または揮発性のメモリ領域で記憶する場合もある。メインメモリ５２は、揮発性のメモリ領域を、プロセッサ５１によってデータが適宜書き換えられるワークエリアとして使用する。不揮発性のメモリ領域は、例えばＲＯＭ（Read Only Memory）である。揮発性のメモリ領域は、例えばＲＡＭ（Random Access Memory）である。
【0035】
補助記憶デバイス５３は、上記コンピュータの補助記憶部分に相当する。例えばＥＥＰＲＯＭ（Electric Erasable Programmable Read-Only Memory）、ＨＤＤ（Hard Disk Drive）、あるいはＳＳＤ（Solid State Drive）等が補助記憶デバイス５３となり得る。補助記憶デバイス５３は、プロセッサ５１が各種の処理を行う上で使用するデータ、プロセッサ５１での処理によって作成されたデータ等を保存する。補助記憶デバイス５３は、上記のアプリケーションプログラムを記憶する場合もある。
【0036】
カメラインターフェース５４は、カメラ６０を接続する。カメラインターフェース５４は、カメラ６０の駆動を制御する制御信号をカメラ６０に対して出力する。カメラ６０は、この制御信号に従って撮影動作を行う。カメラインターフェース５４は、カメラ６０によって撮影された画像データを取り込む。
【0037】
センサインタフェース５５は、人感センサ７０を接続する。センサインタフェース５５は、人感センサ７０からの感知出力を取り込む。
【0038】
端末インターフェース５６は、セルフＰＯＳ端末１０を接続する。端末インターフェース５６は、セルフＰＯＳ端末１０との間でデータ通信を行う。端末インターフェース５６は、決済者によるセルフＰＯＳ端末１０への操作入力データ等を取り込む。操作入力データには、利用開始に係る操作入力データ、商品登録に係る操作入力データ、会計宣言に係る操作入力データ等がある。利用開始に係る操作入力データは、決済者が会計開始画面のスタートキーを操作したことに応じて出力されるデータである。商品登録に係る操作入力データは、決済者が商品のバーコードをスキャナ１４の読取窓に翳す操作、あるいはハンドスキャナ１５の読取部をバーコードに翳す操作をしたことに応じて出力されるデータである。データには、スキャナ１４またはハンドスキャナ１５がスキャニングしたバーコードで表された商品コードを含む商品レコードのデータが含まれる。会計宣言に係る操作入力データは、決済者が商品登録画面の会計キーを入力したことに応じて出力されるデータである。
【0039】
また、端末インターフェース５６は、従業員によるセルフＰＯＳ端末１０への制御操作入力データ等を取り込む。制御操作入力データには、セルフＰＯＳ端末１０の動作開始に係る操作入力データ、ロック解除に係る操作入力データ等がある。ロック解除に係る操作入力データは、エラーの発生や不正な行動の検出等により掛かったセルフＰＯＳ端末１０のロックを解除するための所定の操作を従業員がしたことに応じて出力されるデータである。
【0040】
ネットワークインターフェース５７は、通信ネットワーク４０を介してアテンダント端末２０を接続する。ネットワークインターフェース５７は、アテンダント端末２０との間でデータ通信を行う。
【0041】
かかる構成の監視装置５０は、メインメモリ５２における揮発性メモリ領域の一部をアイドル画像メモリ５２１及び動作中画像メモリ５２２の領域とする。アイドル画像メモリ５２１及び動作中画像メモリ５２２の用途については、後述する作用説明の中で明らかにする。
【0042】
プロセッサ５１は、行動検知部５１１、発見部５１２、報知部５１３及び禁止部５１４としての機能を少なくとも備える。行動検知部５１１は、カメラ６０が撮影した画像等に基づいて決済者の行動を解析し、決済者による監視対象とする不正な行動を検知する機能である。発見部５１２は、カメラ６０が撮影した画像等に基づいて決済者の遺失物を発見する機能である。発見部５１２は、発見手段と言い換えることができる。発見部５１２の詳細な機能については、後述する作用説明の中で明らかにする。報知部５１３は、遺失物が発見された際に報知する機能である。報知部５１３は、報知手段と言い換えることができる。報知部５１３の詳細な機能についても、後述する作用説明の中で明らかにする。禁止部５１４は、発見された遺失物が空の買物籠以外の物品であるとき、セルフＰＯＳ端末１０に、次の客による買上商品の登録操作を禁止させる機能である。禁止部５１４は、禁止手段と言い換えることができる。禁止部５１４の詳細な機能についても、後述する作用説明の中で明らかにする。
【0043】
行動検知部５１１、発見部５１２、報知部５１３及び禁止部５１４としての機能は、プロセッサ５１が監視プログラムに従って実行する情報処理によって実現される。
【0044】
監視プログラムは、メインメモリ５２または補助記憶デバイス５３に記憶されるアプリケーションプログラムの一種である。監視プログラムをメインメモリ５２または補助記憶デバイス５３にインストールする方法は特に限定されるものではない。リムーバブルな記録媒体に決済者監視プログラムを記録して、あるいはネットワークを介した通信により監視プログラムを配信して、メインメモリ５２または補助記憶デバイス５３にインストールすることができる。記録媒体は、ＣＤ－ＲＯＭ，メモリカード等のようにプログラムを記憶でき、かつ装置が読み取り可能であれば、その形態は問わない。
【0045】
また、行動検知部５１１、発見部５１２、報知部５１３及び禁止部５１４としての機能の一部は、ＡＳＩＣ（Application Specific Integrated Circuit）、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（field-programmable gate array）、ＤＳＰ（Digital Signal processor）、等の集積回路を含む、他の多様な形式で実現されても良い。
【0046】
［監視装置の作用説明］
次に、監視装置５０のプロセッサ５１が有する行動検知部５１１、発見部５１２、報知部５１３及び禁止部５１４としての各機能について、図４乃至図６の流れ図を用いて説明する。図４乃至図６は、監視装置５０のプロセッサ５１が監視プログラムに従って実行する主要な情報処理の手順を示す流れ図である。
次に、監視装置５０のプロセッサ５１が有する行動検知部５１１、発見部５１２、報知部５１３及び禁止部５１４としての各機能について、図４乃至図６の流れ図を用いて説明する。図４乃至図６は、監視装置５０のプロセッサ５１が監視プログラムに従って実行する主要な情報処理の手順を示す流れ図である。
【0047】
プロセッサ５１は、ＡＣＴ１として人感センサ７０の感知出力が有るか否か判断する。これは、人感センサ７０の感知出力が無いこと、つまり、セルフＰＯＳ端末１０の正面に従業員及び決済者が対峙していないことを確認する動作である。プロセッサ５１は、人感センサ７０からの感知出力が無いことを確認すると、ＡＣＴ２へと進む。
【0048】
プロセッサ５１は、ＡＣＴ２としてカメラ６０に起動信号を出力する。カメラ６０は、起動信号を受けて撮影を開始する。プロセッサ５１は、ＡＣＴ３としてカメラ６０によって撮影されたアイドル画像を取り込み、メインメモリ５２のアイドル画像メモリ５２１に記憶させる。そして、プロセッサ５１は、ＡＣＴ４としてカメラ６０に停止信号を出力する。カメラ６０は、停止信号を受けて撮影を終了する。
【0049】
図７は、アイドル画像に含まれる基準エリアＡＲを示す模式図である。基準エリアＡＲは、セルフＰＯＳ端末１０の第１の商品載置台１０２及び第２の商品載置台１０３を含むセルフＰＯＳ端末１０の全体及びこの時点では存在していない決済者を含む領域である。決済者不在時に基準エリアＡＲを撮影した画像であるアイドル画像は、遺失物を検出する際の基準画像となる。
【0050】
その後、プロセッサ５１は、ＡＣＴ５として人感センサ７０から感知出力が送信されてくるのを待つ。すなわち、セルフＰＯＳ端末１０に決済者が近づいてくるのを待つ。人感センサ７０の感知出力が有ると、プロセッサ５１は、ＡＣＴ６へと進む。
【0051】
プロセッサ５１は、ＡＣＴ６としてカメラ６０に起動信号を出力する。カメラ６０は、起動信号を受けて撮影を開始する。プロセッサ５１は、ＡＣＴ７としてカメラ６０によって撮影された動作中画像を取り込み、メインメモリ５２の動作中画像メモリ５２２に記憶させる。
【0052】
図８は、動作中画像に含まれる行動検知エリアＡＤを示す模式図である。行動検知エリアＡＤは、基準エリアＡＲに対応し、セルフＰＯＳ端末１０の第１の商品載置台１０２及び第２の商品載置台１０３を含むセルフＰＯＳ端末１０の全体と、セルフＰＯＳ端末１０の正面に対峙した図示しない決済者とを含む領域である。
【0053】
そして、プロセッサ５１は、ＡＣＴ８として動作中画像メモリ５２２に記憶された動作中画像等に基づいて決済者の行動を検知し、ＡＣＴ９として監視対象行動が有ったか否か判断する。監視対象行動が無ければ、プロセッサ５１は、ＡＣＴ１０へと進む。プロセッサ５１は、ＡＣＴ１０としてセルフＰＯＳ端末１０から取得した操作入力データが会計宣言に係る操作入力データであるか否かを確認することで、会計を開始するか否か判断する。会計を開始しない場合には、プロセッサ５１は、ＡＣＴ７へと戻り、上記の動作を繰り返す。
【0054】
ＡＣＴ８の行動検知では、プロセッサ５１は、動作中画像を基にセルフＰＯＳ端末１０の正面に対峙する決済者の行動を認識する。具体的にはプロセッサ５１は、動作中画像から決済者の骨格を推定する。骨格推定は、ディープラーニング等のＡＩ技術を用いて行う。プロセッサ５１は、連続する動作中画像から例えば骨格推定によって手の動き等を得る。このように複数の動作中画像を使用するため。メインメモリ５２には、動作中画像メモリ５２２として、複数の画像を記憶できる領域が確保される。そして、プロセッサ５１は、この得られた手の動き等から、取り出し行動、登録行動、袋詰め行動または退出行動を認識する。なお、プロセッサ５１は、操作者の動作を検知するモーション検知等により決済者の行動を認識するようにしてもよい。
【0055】
取り出し行動とは、決済者が第１の商品載置台１０２に載置された買物籠やショッピングカートから商品を取り出す行動である。例えば、商品登録前の第１の商品載置台１０２から商品を取り出して袋詰めすることなく、客のポケットなどに詰める行動も取出行動の１つである。登録行動とは、決済者が商品をスキャナ１４の読取窓に翳して商品に付されたバーコードをスキャナ１４で読み取らせる行動である。袋詰め行動とは、決済者が商品を第２の商品載置台１０３に用意した収容体に収容する行動である。なお、収容体に収容せずに商品を第２の商品載置台１０３または一時置き台１０４に載置する行動も袋詰め行動の一種である。退出行動は、決済者がセルフＰＯＳ端末１０の前から離れて会計場から退出する行動である。
【0056】
ＡＣＴ９では、これら検知された行動とセルフＰＯＳ端末１０からの操作入力データとに基づいて、プロセッサ５１は、決済者が不正な行動を行ったかどうか判断する。不正な行動とは、例えば買上商品をセルフＰＯＳ端末１０に登録せずに袋詰めする行動、買上商品の代金を支払わずに会計場から退出する行動、等である。
【0057】
ＡＣＴ９において監視対象の行動が有ったと判断した場合、プロセッサ５１は、ＡＣＴ１１としてアテンダント端末２０に警告信号を出力する。警告信号は、セルフＰＯＳ端末１０を特定する識別情報と監視対象の行動を示す情報を含む。この警告信号を受信したアテンダント端末２０では、例えば「レーンＮｏ．Ｘで登録漏れが有ります」、「レーンＮｏ．Ｘに未会計のまま退出しようとする決済者がいます」等の従業員に注意を喚起する警告メッセージを表示出力または音声出力する。また、特に図示はしていないが、このとき、プロセッサ５１は、セルフＰＯＳ端末１０にも警告信号を出力し、セルフＰＯＳ端末１０でも警告が表示されるようにしてもよい。これにより、例えばスキャンミスにより商品登録が行われなかった場合に、決済者が当該商品の再スキャン等を行うことが可能となる。ＡＣＴ１１において警告信号を出力した後、プロセッサ５１は、ＡＣＴ７へと戻り、上記の動作を繰り返す。
【0058】
セルフＰＯＳ端末１０での決済者による買上商品の登録が完了し会計を行うことを指示する会計開始操作がなされると、会計宣言に係る操作入力データがセルフＰＯＳ端末１０から監視装置５０に送信される。この会計宣言に係る操作入力データを受信すると、プロセッサ５１は、ＡＣＴ１０において会計を開始すると判断し、ＡＣＴ１２へと進む。
【0059】
プロセッサ５１は、ＡＣＴ１２としてカメラ６０によって撮影された動作中画像を取り込み、メインメモリ５２の動作中画像メモリ５２２に記憶させる。
【0060】
そして、プロセッサ５１は、ＡＣＴ１３として第１比較の処理を実行する。この第１比較の処理は、プロセッサ５１は、動作中画像の内の物品検出エリアにおける画像を比較画像として、アイドル画像メモリ５２１に記憶されている基準画像であるアイドル画像との比較を行う処理である。以降、第１比較の処理を便宜上、第１比較ともいう。
【0061】
図９は、動作中画像に含まれる物品検出エリアＡＯを示す模式図である。物品検出エリアＡＯは、セルフＰＯＳ端末１０の第２の商品載置台１０３は含まないが、それ以外の少なくとも第１の商品載置台１０２を含む比較エリアである。
【0062】
プロセッサ５１は、ＡＣＴ１４として第１比較の結果、空の買物籠以外の物品が物品検出エリアＡＯに有ったか否か判断する。具体的にはプロセッサ５１は、第１比較により画像が一致しない部分は何らかの物品が存在するとし、その物品の画像をさらに分析して、その物品が空の買物籠であるか否かを確認する。空の買物籠の外観形状は一定である。そこでプロセッサ５１は、空の買物籠の外観形状データを用いたパターン認識の技術を利用して、物品が空の買物籠であるか否かを確認する。物品が空の買物籠以外の物品であると認定した場合、つまり、第２の商品載置台１０３を除いた少なくとも第１の商品載置台１０２を含むセルフＰＯＳ端末１０の部分に残された物品を発見した場合には、プロセッサ５１は、ＡＣＴ１５へと進む。
【0063】
プロセッサ５１は、ＡＣＴ１５としてセルフＰＯＳ端末１０へ注意喚起指令を出力する。この注意喚起指令を受信したセルフＰＯＳ端末１０では、タッチパネル１１のディスプレイに注意喚起画面を表示する。またこのとき、スピーカ１９から警告音が発せられてもよい。
【0064】
図１０は、注意喚起画面Ｓａ１の一例である。注意喚起画面Ｓａ１には、注意喚起メッセージＭａ１と『確認』キーＫａが表示される。この注意喚起メッセージＭａ１としては、例えば「お忘れ物がないようお気をつけください」等の、軟らかい表現のメッセージとする。
【0065】
プロセッサ５１は、ＡＣＴ１６として決済者による確認の操作が有ったかどうか確認する。確認の操作が無ければ、プロセッサ５１は、ＡＣＴ１２へ戻り、ＡＣＴ１２からＡＣＴ１６の動作を繰り返す。また、決済者による確認の操作が有った場合には、プロセッサ５１は、ＡＣＴ１７へと進む。
【0066】
注意喚起画面Ｓａ１の注意喚起メッセージＭａ１に応じて、決済者は、セルフＰＯＳ端末１０上に残っている物品を確認し、『確認』キーＫａにタッチする。『確認』キーＫａのタッチに応じて、セルフＰＯＳ端末１０は、『確認』キーＫａの操作に係る操作入力データを監視装置５０に送信するとともにディスプレイの注意喚起画面Ｓａ１を消去。プロセッサ５１は、ＡＣＴ１６においてセルフＰＯＳ端末１０から操作入力データにより確認操作が有ったことを確認し、ＡＣＴ１７へと進む。
【0067】
あるいは、決済者は、注意喚起画面Ｓａ１の注意喚起メッセージＭａ１に応じて、その物品をセルフＰＯＳ端末１０から取り除く。これにより、プロセッサ５１は、ＡＣＴ１４において第１比較の結果、物品検出エリアＡＯに何も無いか、空の買物籠しか無いと判断することとなる。この判断により、プロセッサ５１は、ＡＣＴ１７へと進む。なおこの場合、特に図示はしていないが、プロセッサ５１は、注意喚起出力解除指令を送信して、セルフＰＯＳ端末１０の注意喚起画面Ｓａ１を消去するようにする。
【0068】
プロセッサ５１は、ＡＣＴ１７としてカメラ６０によって撮影された動作中画像を取り込み、メインメモリ５２の動作中画像メモリ５２２に記憶させる。そして、プロセッサ５１は、ＡＣＴ１８として動作中画像メモリ５２２に記憶された動作中画像等に基づいて決済者の行動を検知し、ＡＣＴ１９として監視対象行動が有ったか否か判断する。監視対象行動が無ければ、プロセッサ５１は、ＡＣＴ２０としてセルフＰＯＳ端末１０からの状態データにより決済が終了したか否か判断する。決済が終了していない場合には、プロセッサ５１は、ＡＣＴ１７へと戻り、上記の動作を繰り返す。なお、ＡＣＴ１８の行動検知及びＡＣＴ１９の監視対象行動の判断は、前述したＡＣＴ８及びＡＣＴ９と同様である。
【0069】
ＡＣＴ１９において監視対象の行動が有ったと判断した場合、プロセッサ５１は、ＡＣＴ２１としてアテンダント端末２０に警告信号を出力する。ＡＣＴ２１において警告信号を出力した後、プロセッサ５１は、ＡＣＴ１７へと戻り、上記の動作を繰り返す。
【0070】
ＡＣＴ２０において決済が終了した判断した場合、プロセッサ５１は、ＡＣＴ２２へと進む。プロセッサ５１は、ＡＣＴ２２として人感センサ７０の感知出力が有るか否か判断する。これは、人感センサ７０の感知出力が無いこと、つまり、セルフＰＯＳ端末１０の正面から決済者が離れたことを確認する動作である。プロセッサ５１は、人感センサ７０からの感知出力が無いことを確認すると、ＡＣＴ２３へと進む。
【0071】
プロセッサ５１は、ＡＣＴ２３としてカメラ６０によって撮影された動作中画像を取り込み、メインメモリ５２の動作中画像メモリ５２２に記憶させる。つまり、動作中画像メモリ５２２に記憶される動作中画像は、人感センサ７０の感知出力が無くなった時点である、決済者がセルフＰＯＳ端末１０から離れた時点に撮影された画像である。
【0072】
そして、プロセッサ５１は、ＡＣＴ２４として第２比較の処理を実行する。この第２比較の処理は、プロセッサ５１は、動作中画像の内の遺失物検出エリアにおける画像を比較画像として、アイドル画像メモリ５２１に記憶されている基準画像であるアイドル画像との比較を行う処理である。以降、第２比較の処理を便宜上、第２比較ともいう。
【0073】
図１１は、動作中画像に含まれる遺失物検出エリアＡＬを示す模式図である。遺失物検出エリアＡＬは、基準エリアＡＲに対応し、セルフＰＯＳ端末１０の第１の商品載置台１０２及び第２の商品載置台１０３を含むセルフＰＯＳ端末１０の全体を含む比較エリアである。
【0074】
プロセッサ５１は、ＡＣＴ２５として第２比較の結果、何らかの物品が遺失物検出エリアＡＬに有ったか否か判断する。具体的にはプロセッサ５１は、第２比較により画像が一致しない部分は何らかの物品が存在するとする。どの様な物品も発見しない場合には、プロセッサ５１は、ＡＣＴ５へと戻り、新たな決済者に対する動作に移行する。
【0075】
これに対して、何らかの物品が発見された場合には、プロセッサ５１は、ＡＣＴ２６へと移行する。プロセッサ５１は、ＡＣＴ２６として発見された物品は空の買物籠以外の物品であるか否か判断する。プロセッサ５１は、前述したように、空の買物籠の外観形状データを用いたパターン認識の技術を利用して、空の買物籠であるかどうかを判断することかできる。空の買物籠である場合、プロセッサ５１は、ＡＣＴ２７へと進む。
【0076】
プロセッサ５１は、ＡＣＴ２７としてアテンダント端末２０に報告信号を出力する。報告信号は、セルフＰＯＳ端末１０を特定する識別情報と空の買物籠が残されていることを示す情報を含む。なおこの場合、セルフＰＯＳ端末１０の正面から離れたが未だセルフＰＯＳ端末１０からそれ程遠くに行っていない決済者に、空の買物籠の片付けをお願いするメッセージを、タッチパネル１１のディスプレイに表示したり、スピーカ１９から発声したりするようにしてもよい。その後、プロセッサ５１は、ＡＣＴ５へと戻り、新たな決済者に対する動作に移行する。
【0077】
報告信号を受信したアテンダント端末２０では、報告画面を表示する。図１２は、報告画面Ｓｂ１の一例である。報告画面Ｓｂ１には、報告メッセージＭｂ１と『確認』キーＫｂが表示される。空の買物籠は、決済者が戻ってきて片付けたり、次の決済者が片付けるあるいは買物籠を重ねたりする場合が有る。よって、この報告メッセージＭｂ１としては、例えば「レーンＮｏ．Ｘに空の買物籠が残されています」等の、必ずしも従業員に空の買物籠を片付けるよう指示するものではなくて、従業員に注意を喚起するメッセージであってよい。この報告メッセージＭｂ１を受けた従業員は、『確認』キーＫｂを操作して、報知内容を確認した旨を入力することができる。また、空の買物籠を片付けに行くことができる状況にあれば、該当のセルフＰＯＳ端末１０に向かい、空の買物籠を片付けることができる。
【0078】
また、ＡＣＴ２６において空の買物籠以外の物品が発見された、あるいは、空の買物籠とその他の物品の両方が発見されたと判断した場合、プロセッサ５１は、ＡＣＴ２８へと進む。プロセッサ５１は、ＡＣＴ２８としてセルフＰＯＳ端末１０へ発報指令を出力する。さらに、プロセッサ５１は、ＡＣＴ２９としてセルフＰＯＳ端末１０へ動作禁止指令を出力する。
【0079】
セルフＰＯＳ端末１０では、発報指令の受信に応答して、タッチパネル１１のディスプレイに警告画面を表示する。またこのとき、スピーカ１９から警告音が発せられてもよい。さらに、セルフＰＯＳ端末１０では、動作禁止指令の受信に応答して、決済者の操作を受け付けないロック状態に移行する。このように、監視装置５０は、次の客による買上商品の登録操作を禁止させることができる。
【0080】
図１３は、警告画面Ｓａ２の一例である。警告画面Ｓａ２には、警告メッセージＭａ２が表示される。この警告メッセージＭａ２は、セルフＰＯＳ端末１０の正面から離れたが未だセルフＰＯＳ端末１０からそれ程遠くに行っていない決済者に対するメッセージと、当該セルフＰＯＳ端末１０を使用しようとしていた次の決済者に対するメッセージとの両方を含むことができる。前者は、例えば「お忘れ物です」等であり、後者は、例えば「ただ今従業員がまいります。恐れ入りますがしばらくお待ち下さい」等である。
【0081】
また、プロセッサ５１は、ＡＣＴ３０としてアテンダント端末２０に警告信号を出力する。警告信号は、セルフＰＯＳ端末１０を特定する識別情報と遺失物が有ったことを示す情報を含む。
【0082】
その後プロセッサ５１は、ＡＣＴ３１としてカメラ６０に停止信号を出力する。カメラ６０は、この停止信号を受けて撮影を終了する。
【0083】
そしてプロセッサ５１は、ＡＣＴ３２としてセルフＰＯＳ端末１０から解除信号が送信されてくるのを待つ。
【0084】
警告信号を受信したアテンダント端末２０では、警告画面を表示するとともに警告音を発報する。図１４は、警告画面Ｓｂ２の一例である。警告画面Ｓｂ２には、警告メッセージＭｂ２と『確認』キーＫｂが表示される。警告メッセージＭｂ２としては、例えば「レーンＮｏ．Ｘにお客様のお忘れ物が有ります。お忘れ物を至急回収し、ＰＯＳ端末のロックを解除して下さい」等の、従業員に遺失物の回収とセルフＰＯＳ端末１０のロック解除操作を行うことを指示するものとする。この警告メッセージＭｂ２を受けた従業員は、『確認』キーＫｂを操作して、該当のセルフＰＯＳ端末１０に向かい、遺失物を回収することができる。
【0085】
従業員がセルフＰＯＳ端末１０のロック解除操作を行うと、セルフＰＯＳ端末１０から監視装置５０に解除信号が送信される。ＡＣＴ３２においてこの解除信号の受信を確認すると、プロセッサ５１は、ＡＣＴ５へと戻り、新たな決済者に対する動作に移行する。
【0086】
ここに、プロセッサ５１は、図４のＡＣＴ７乃至ＡＣＴ９の処理、さらには図５のＡＣＴ１７乃至ＡＣＴ１９の処理により、行動検知部５１１としての機能を実現する。プロセッサ５１は、図５のＡＣＴ１２乃至ＡＣＴ１４の処理、さらには図６のＡＣＴ２３乃至２６の処理により発見部５１２としての機能を実現する。プロセッサ５１は、図５のＡＣＴ１５の処理、さらには図６のＡＣＴ２７、ＡＣＴ２８及びＡＣＴ３０の処理により報知部５１３としての機能を実現する。プロセッサ５１は、図６のＡＣＴ２９の処理により禁止部５１４としての機能を実現する。
【0087】
［監視装置の効果］
以上詳述したように、発見部５１２の機能を有した監視装置５０によれば、決済者がフルセルフ対応の決済装置であるセルフＰＯＳ端末１０を利用する前後にセルフＰＯＳ端末１０を撮影した画像を比較することで、決済者による遺失物の発生状況を監視できるようになる。例えば、決済者が傘、カバン、財布等の私物や買上商品を第１の商品載置台１０２や第２の商品載置台１０３に置き忘れて、セルフＰＯＳ端末１０から離れてしまっても、監視装置５０においては直ちに遺失物を発見ことができる。
以上詳述したように、発見部５１２の機能を有した監視装置５０によれば、決済者がフルセルフ対応の決済装置であるセルフＰＯＳ端末１０を利用する前後にセルフＰＯＳ端末１０を撮影した画像を比較することで、決済者による遺失物の発生状況を監視できるようになる。例えば、決済者が傘、カバン、財布等の私物や買上商品を第１の商品載置台１０２や第２の商品載置台１０３に置き忘れて、セルフＰＯＳ端末１０から離れてしまっても、監視装置５０においては直ちに遺失物を発見ことができる。
【0088】
そして、報知部５１３としての機能を有した監視装置５０によれば、遺失物を発見すると、アテンダント端末２０に警告信号を出力することで、アテンダント端末２０において遺失物が有ることを報知する警告メッセージＭｂ２を表示させることができる。これにより、従業員に速やかに遺失物を回収させることが可能となる。
【0089】
またこのアテンダント端末２０への警告出力の送信と共に、監視装置５０は、セルフＰＯＳ端末１０に対して発報指令を出力することで、セルフＰＯＳ端末１０においてタッチパネル１１のディスプレイに警告メッセージＭａ２を表示させたり、スピーカ１９から警告音を発せさせたりすることができる。これにより、セルフＰＯＳ端末１０の正面から離れたが未だセルフＰＯＳ端末１０からそれ程遠くに行っていない決済者に対して、忘れ物が有ることを知らせることが可能となる。
【0090】
さらに監視装置５０は、遺失物を発見した際、セルフＰＯＳ端末１０へ動作禁止指令を出力することで、セルフＰＯＳ端末１０を、決済者の操作を受け付けないロック状態に移行させることができる。これにより、遺失物の回収が済むまで、次の客による買上商品の登録操作を禁止させることが可能となる。例えば、商品が残されていた場合、その場所が第２の商品載置台１０３上であれば、会計済みの商品である可能性が高く、第１の商品載置台１０２上であれば、買上を取りやめた商品である可能性が高い。従業員は、会計済みの商品については決済者が引き取りに来るのを待つため保管することが必要であり、買上を取りやめた商品であれば商品陳列棚に戻さなければならない。セルフＰＯＳ端末１０は、登録操作禁止状態となって、次の客による操作が行われていないため、従業員はその場で、残されていた商品が何れであるのかの確認作業を行うことができる。
【0091】
なお、決済者の私物ではなくて空の買物籠を発見した場合には、監視装置５０は、アテンダント端末２０に報告信号を出力することで、アテンダント端末２０において空の買物籠が残されていることを報知させることができる。これにより、従業員に、空の買物籠を片付けに行くことができる状況にあれば、それを行わせることが可能となる。
【0092】
また例えば、決済者が買物籠内の買上商品の登録操作を終えて会計宣言した際には、監視装置５０は、決済者がセルフＰＯＳ端末１０を利用する前の画像と、少なくとも第１の商品載置台１０２を含み且つ第２の商品載置台１０３を含まない画像とを比較することで、第２の商品載置台１０３を除き且つ少なくとも第１の商品載置台１０２を含むセルフＰＯＳ端末１０の部分に残された物品を発見することができる。
【0093】
そして、監視装置５０によれば、発見した物品が空の買物籠以外の物品であれば、セルフＰＯＳ端末１０に注意喚起指令を出力することで、セルフＰＯＳ端末１０において注意喚起メッセージＭａ１を表示させることができる。これにより、決済者に忘れ物をしないように注意喚起することが可能となる。また、買物籠内に未登録の買上商品が残っている場合にもこの注意喚起メッセージＭａ１が表示されるので、決済者への登録忘れの注意喚起ともなり得る。
【0094】
なお、第２の商品載置台１０３を除き且つ少なくとも第１の商品載置台１０２を含むセルフＰＯＳ端末１０の部分に残された物品が空の買物籠である場合には、特に注意喚起は行わない。例えばこのとき、空の買物籠の片付けを決済者に依頼するようにしても構わない。
【0095】
［変形例］
前記実施形態では、遺失物が発見されてセルフＰＯＳ端末１０がロックされた際、監視装置５０は、従業員のロック解除操作を待って、次の決済者に対する動作に移行するようにしている。図６のＡＣＴ２８で出力された発報指令に応じたセルフＰＯＳ端末１０でのディスプレイの警告画面やスピーカ１９から警告音により忘れ物に気付いた決済者が戻ってきて、遺失物を回収する場面が想定される。このような場合、従業員によるセルフＰＯＳ端末１０のロック解除操作を待たずに、次の決済者に対する動作へ移行できるようにした方が、ロック解除を待っている次の決済者の不満を減少させることができる。
前記実施形態では、遺失物が発見されてセルフＰＯＳ端末１０がロックされた際、監視装置５０は、従業員のロック解除操作を待って、次の決済者に対する動作に移行するようにしている。図６のＡＣＴ２８で出力された発報指令に応じたセルフＰＯＳ端末１０でのディスプレイの警告画面やスピーカ１９から警告音により忘れ物に気付いた決済者が戻ってきて、遺失物を回収する場面が想定される。このような場合、従業員によるセルフＰＯＳ端末１０のロック解除操作を待たずに、次の決済者に対する動作へ移行できるようにした方が、ロック解除を待っている次の決済者の不満を減少させることができる。
【0096】
図１５は、そのような動作を可能とするための、変形例に係る監視装置５０のプロセッサ５１が監視プログラムに従って実行する主要な情報処理の手順の一例を示す流れ図である。プロセッサ５１は、ＡＣＴ３０としてアテンダント端末２０に警告信号を出力した後、ＡＣＴ４１としてカメラ６０によって撮影された動作中画像を取り込み、メインメモリ５２の動作中画像メモリ５２２に記憶させる。
【0097】
そして、プロセッサ５１は、ＡＣＴ４２として、ＡＣＴ２４と同様の第２比較を実行する。すなわち、プロセッサ５１は、動作中画像の内の遺失物検出エリアＡＬにおける画像を比較画像として、アイドル画像メモリ５２１に記憶されている基準画像であるアイドル画像との比較を行う。
【0098】
プロセッサ５１は、ＡＣＴ４３として第２比較の結果、何らかの物品が遺失物検出エリアＡＬに有ったか否か判断する。つまり、ＡＣＴ２５において発見した遺失物が未だ有るか否か判断する。物品が遺失物検出エリアＡＬに有るならば、プロセッサ５１は、ＡＣＴ４１へと戻る。
【0099】
忘れ物をした決済者または従業員によって遺失物が回収されると、プロセッサ５１は、ＡＣＴ４３からＡＣＴ４４へと進む。プロセッサ５１は、ＡＣＴ４４としてセルフＰＯＳ端末１０へアイドル移行指令を出力する。セルフＰＯＳ端末１０では、アイドル移行指令の受信に応答して、ロックを解除して、アイドル状態に移行する。
【0100】
なおこのとき、プロセッサ５１は、遺失物を回収した人物が、忘れ物をした決済者または従業員であるかを確認し、それ以外の人物が遺失物を回収した場合には、セルフＰＯＳ端末１０及びアテンダント端末２０に警報を発報させるように構成しても良い。忘れ物をした決済者であるかどうかは、例えば、ＡＣＴ４１にて取得した遺失物を回収した人物の画像と、動作中画像メモリ５２２に記憶されている忘れ物をした決済者の画像とを比較することで判定可能である。また、従業員であるかどうかは、例えば、ＡＣＴ４１にて取得した画像中の遺失物を回収した人物の服装を、予め登録されている従業員の服装の画像と比較することで判定可能である。
【0101】
ＡＣＴ４４においてセルフＰＯＳ端末１０へアイドル移行指令を出力した後、プロセッサ５１は、ＡＣＴ４５へと進む。プロセッサ５１は、ＡＣＴ４５としてカメラ６０に停止信号を出力する。カメラ６０は、この停止信号を受けて撮影を終了する。その後、プロセッサ５１は、ＡＣＴ５へと戻り、新たな決済者に対する動作に移行する。
【0102】
以上のようにして、監視装置５０は、遺失物が回収されたことをトリガにして、次の決済者に対する動作へ移行することができる。
【0103】
なお、実施形態及び変形例に示した流れ図の手順及びその内容は一例である。同様な効果を奏し得るのであればその手順及び内容は適宜変更することができる。また、実施形態で示した画面例も一例である。同様な効果を奏し得るのであればそのレイアウト、表示項目等は適宜変更することができる。
【0104】
前記実施形態では、セルフＰＯＳ端末１０がそれぞれ監視装置５０を備える場合を例示した。２台以上のセルフＰＯＳ端末１０に対して１台の監視装置５０を接続し、当該監視装置５０のプロセッサ５１が、２台以上のセルフＰＯＳ端末１０毎に、行動検知部５１１、発見部５１２及び報知部５１３としての機能を有するようにしてもよい。
【0105】
なお、前記実施形態では、遺失物として、決済者である客の私物を例に説明したが、遺失物はそれに限らない。例えば、セルフＰＯＳ端末１０のプリンタ１３からは、取引のためのレシートや領収書以外に、ポイント券やクーポン券も発行されるケースがある。監視装置５０は、これらの券類がプリンタ１３に残されていることを検知した場合には、それらも遺失物として扱って、警告表示を行うようにしてもよい。また、セルフＰＯＳ端末１０の現金処理機１６の出力部である紙幣排出口１６２及び硬貨排出口１６４からは、お釣りや認識できない貨幣が返却される。よって、監視装置５０は、紙幣排出口１６２及び硬貨排出口１６４に貨幣等が残されていることを検知した場合にも、それらを遺失物として扱って、警告表示を行うことができる。
【0106】
前記実施形態では、監視装置５０は、セルフＰＯＳ端末１０の外部にあってもよいし、内部にあってもよいと説明した。他の実施形態としては、セルフＰＯＳ端末１０が、監視装置５０としての機能を組み入れて実現させることも可能である。
【0107】
また、前記実施形態では、フルセルフ対応の決済装置であるセルフＰＯＳ端末１０に言及していたが、セミセルフ対応の決済装置であるセミセルフＰＯＳ端末も、決済者の買物籠移動後の操作はセルフＰＯＳ端末１０と同様である。よって、監視装置５０における決済処理以降の動作を適用することで、セミセルフ対応の決済装置に対しても、同様の効果が期待できる。
【0108】
この他、本発明の実施形態及びいくつかの変形例を説明したが、この実施形態及び変形例は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態及び変形例は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態及びその変形は、発明の範囲に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【0109】
１０…セルフＰＯＳ端末、 １１…タッチパネル、 １２…カードリーダ、 １３…プリンタ、 １４…スキャナ、 １５…ハンドスキャナ、 １６…現金処理機、 １７…パトランプ、 １８…発光部、 １９…スピーカ、 ２０…アテンダント端末、 ３０…店舗サーバ、 ４０…通信ネットワーク、 ５０…監視装置、 ５１…プロセッサ、 ５２…メインメモリ、 ５３…補助記憶デバイス、 ５４…カメラインターフェース、 ５５…センサインタフェース、 ５６…端末インターフェース、 ５７…ネットワークインターフェース、 ５８…システム伝送路、 ６０…カメラ、 ７０…人感センサ、 １００…チェックアウトシステム、 １０１…本体、 １０２…第１の商品載置台、 １０３…第２の商品載置台、 １０４…一時置き台、 １０５…保持アーム、 １６１…紙幣投入口、 １６２…紙幣排出口、 １６３…硬貨投入口、 １６４…硬貨排出口、 ５１１…行動検知部、 ５１２…発見部、 ５１３…報知部、 ５１４…禁止部、 ５２１…アイドル画像メモリ、 ５２２…動作中画像メモリ、 ＡＤ…行動検知エリア、 ＡＬ…遺失物検出エリア、 ＡＯ…物品検出エリア、 ＡＲ…基準エリア、 Ｋａ，Ｋｂ…『確認』キー、 Ｍａ１…注意喚起メッセージ、 Ｍａ２，Ｍｂ２…警告メッセージ、 Ｍｂ１…報告メッセージ、 Ｓａ１…注意喚起画面、 Ｓａ２，Ｓｂ２…警告画面、 Ｓｂ１…報告画面
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
