特許 5784170 店舗会計システム及び店舗会計プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5784170

(24)【登録日】2015年7月31日

(45)【発行日】2015年9月24日

(54)【発明の名称】店舗会計システム及び店舗会計プログラム

(51)【国際特許分類】

   G07G 1/00 20060101AFI20150907BHJP

   G07G 1/01 20060101ALI20150907BHJP

   G07G 1/12 20060101ALI20150907BHJP

【ＦＩ】

   G07G1/00 311D

   G07G1/01 301E

   G07G1/12 331A

【請求項の数】5

【全頁数】13

(21)【出願番号】特願2014-61635(P2014-61635)

(22)【出願日】2014年3月25日

(62)【分割の表示】特願2012-25174(P2012-25174)の分割

【原出願日】2012年2月8日

(65)【公開番号】特開2014-130637(P2014-130637A)

(43)【公開日】2014年7月10日

【審査請求日】2014年3月25日

(73)【特許権者】

【識別番号】000003562

【氏名又は名称】東芝テック株式会社

(74)【代理人】

【識別番号】100108855

【弁理士】

【氏名又は名称】蔵田 昌俊

(74)【代理人】

【識別番号】100109830

【弁理士】

【氏名又は名称】福原 淑弘

(74)【代理人】

【識別番号】100103034

【弁理士】

【氏名又は名称】野河 信久

(74)【代理人】

【識別番号】100075672

【弁理士】

【氏名又は名称】峰 隆司

(74)【代理人】

【識別番号】100153051

【弁理士】

【氏名又は名称】河野 直樹

(74)【代理人】

【識別番号】100140176

【弁理士】

【氏名又は名称】砂川 克

(74)【代理人】

【識別番号】100158805

【弁理士】

【氏名又は名称】井関 守三

(74)【代理人】

【識別番号】100179062

【弁理士】

【氏名又は名称】井上 正

(74)【代理人】

【識別番号】100124394

【弁理士】

【氏名又は名称】佐藤 立志

(74)【代理人】

【識別番号】100112807

【弁理士】

【氏名又は名称】岡田 貴志

(74)【代理人】

【識別番号】100111073

【弁理士】

【氏名又は名称】堀内 美保子

(72)【発明者】

【氏名】菅澤 広志

(72)【発明者】

【氏名】飯坂 仁志

(72)【発明者】

【氏名】内藤 英浩

【審査官】 永安 真

(56)【参考文献】

【文献】 特開２００２−０７４５１１（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０７Ｇ １／００ − １／１４

(57)【特許請求の範囲】

【請求項1】

読取部と、
表示部と、
売上処理される商品の外観を表わすデータを記憶する第１の記憶手段と、
手の外観を表わすデータを記憶する第２の記憶手段と、
前記第１及び第２の記憶手段で記憶されるデータに基づいて、前記読取部にかざされた物体を認識する認識手段と、
前記物体が前記売上処理される商品であると認識すると、当該商品の情報を前記表示部に表示する表示手段と、
前記読取部に手がかざされたことを認識すると、前記売上処理される商品の情報を前記表示部に表示することなく商品が認識されていないことを報知する報知手段と、
を具備したことを特徴とする店舗会計システム。

【請求項2】

前記報知手段は、前記表示部に手を認識したことを表す画像を表示させることで商品が認識されていないことを報知することを特徴とする請求項１記載の店舗会計システム。

【請求項3】

前記報知手段は、前記表示部に表示された画像のなかの手を示すことで商品が認識されていないことを報知することを特徴とする請求項２に記載の店舗会計システム。

【請求項4】

音声ガイダンスを出力する音声出力手段、
をさらに具備し、
前記報知手段は、前記表示部に手を認識したことを表す画像を表示させた後、一定時間が経過すると、前記音声出力手段により所定の音声ガイダンスを出力することで商品が認識されていないことを報知することを特徴とする請求項２に記載の店舗会計システム。

【請求項5】

コンピュータに、
売上処理される商品の外観を表わすデータを記憶する第１の記憶手段、及び、手の外観を表わすデータを記憶する第２の記憶手段で記憶されるデータに基づいて、読取部にかざされた物体を認識させる機能と、
前記物体が前記売上処理される商品であると認識すると、当該商品の情報を表示部に表示させる機能と、
前記読取部に手がかざされたことを認識すると、前記売上処理される商品の情報を前記表示部に表示することなく商品が認識されていないことを報知させる機能と、
を実現させるための店舗会計プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、撮像手段を用いた店舗会計システム及びコンピュータを前記店舗会計システムとして機能させるための店舗会計プログラムに関する。

【背景技術】

【0002】

ＣＣＤカメラ等の撮像手段によって撮影された画像から商品を認識する商品読取装置がある。このような商品読取装置は、装置内に撮像手段を備えるとともに、装置のハウジングに読取窓を備える。そして撮像手段は、読取窓から撮像レンズを通して結像するエリアを撮像領域とする。このため、例えばこのような商品読取装置を使用して商品を認識させる場合、オペレータは、撮像手段によって商品の外観全体が撮像されるように、装置の読取窓に商品をかざすことになる。

【0003】

商品読取装置の操作に手馴れたオペレータは、撮像手段によって商品の外観全体が撮像されるように商品を読取窓にかざすことはそれほど負担ではない。しかし、不慣れなオペレータのなかには、商品を手で隠してかざしてしまい、商品が認識されない場合がある。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１１−１６５１３９号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明が解決しようとする課題は、商品が例えば手で隠されているために認識できない状態にあることをユーザに報知できる店舗会計システム及び店舗会計プログラムを提供しようとするものである。

【課題を解決するための手段】

【0006】

一実施形態において、店舗会計システムは、読取部と、表示部と、第１の記憶手段と、第２の記憶手段と、認識手段と、表示手段と、報知手段とを備える。第１の記憶手段は、売上処理される商品の外観を表わすデータを記憶する。第２の記憶手段は、手の外観を表わすデータを記憶する。認識手段は、前記第１及び第２の記憶手段で記憶されるデータに基づいて、前記読取部にかざされた物体を認識する。表示手段は、前記物体が前記売上処理される商品であると認識すると、当該商品の情報を前記表示部に表示する。報知手段は、前記読取部に手がかざされたことを認識すると、前記売上処理される商品の情報を前記表示部に表示することなく商品が認識されていないことを報知する。

【図面の簡単な説明】

【0007】

【図1】一実施形態に係る店舗会計システムの外観図。

【図2】同システムに組み込まれる商品読取装置とＰＯＳ端末とのハードウェア構成を示すブロック図。

【図3】同システムで用いられる商品データファイルのデータ構造を示す模式図。

【図4】同システムで用いられる異物認識辞書ファイルのデータ構造を示す模式図。

【図5】同システムの商品読取装置において、ＣＰＵが実現する機能構成を示す模式図。

【図6】同システムの商品読取装置において、ＣＰＵが商品読取プログラムにしたがって実行する情報処理の要部手順を示す流れ図。

【図7】同システムの商品読取装置において、タッチパネルに表示される画像認識画面の一例を示す平面図。

【図8】同システムの商品読取装置において、商品を手で隠してかざしているときの画像認識画面の表示例を示す図。

【図9】図８に示す状態で、手を異物として認識したときの表示例を示す図。

【発明を実施するための形態】

【0008】

以下、店舗会計システムの実施形態について、図面を用いて説明する。この実施形態は、スーパーマーケット等の店舗に設けられた会計カウンタに立設される縦型の商品読取装置を含む店舗会計システムに適用した場合である。

【0009】

図１は、一実施形態に係る店舗会計システムの外観図である。このシステムは、登録部としての商品読取装置１と、決済部としてのＰＯＳ（Point Of Sales）端末２とを含む。商品読取装置１は、会計カウンタ３の上に取り付けられる。ＰＯＳ端末２は、レジ台４の上にドロワ５を介して設置される。商品読取装置１とＰＯＳ端末２とは、図示しない通信ケーブルにより電気的に接続される。

【0010】

商品読取装置１は、商品の登録に必要なデバイスとしてキーボード１１、タッチパネル１２及び客用ディスプレイ１３を備える。これらの表示・操作デバイス（キーボード１１、タッチパネル１２、客用ディスプレイ１３）は、商品読取装置１の本体を構成する薄型矩形形状のハウジング１Ａに取り付けられる。

【0011】

ハウジング１Ａには、撮像部１４が内蔵される。また、矩形状の読取窓１Ｂが、ハウジング１Ａの正面に形成される。撮像部１４は、エリアイメージセンサであるＣＣＤ（Charge Coupled Device）撮像素子及びその駆動回路と、撮像領域の画像をＣＣＤ撮像素子に結像させるための撮像レンズとを備える。撮像領域とは、読取窓１Ｂから撮像レンズを通してＣＣＤ撮像素子のエリアに結像するフレーム画像の領域を指す。撮像部１４は、撮像レンズを通ってＣＣＤ撮像素子に結像した撮像領域の画像を出力する。ここに、撮像部１４は、読取窓１Ｂにかざされた商品を含む画像を撮像する撮像手段として機能する。

【0012】

ＰＯＳ端末２は、決済に必要なデバイスとしてキーボード２１、オペレータ用ディスプレイ２２、客用ディスプレイ２３及びレシートプリンタ２４を備える。

【0013】

会計カウンタ３は、その奥側の顧客通路に沿って細長い形状である。レジ台４は、会計カウンタ３に沿って移動する顧客の移動方向に対して下流側の会計カウンタ３の端部手前側に、会計カウンタ３に対して略垂直に置かれる。そして、この会計カウンタ３の手前側とレジ台４の手前側が、会計担当の店員いわゆるキャッシャのスペースとなる。

【0014】

会計カウンタ３の略中央には、商品読取装置１のハウジング１Ａが、キーボード１１、タッチパネル１２及び読取窓１Ｂをそれぞれ手前側のキャッシャ側に向けて立設される。商品読取装置１の客用ディスプレイ１３は、顧客通路側を向いてハウジング１Ａに取り付けられる。

【0015】

会計カウンタ３の商品読取装置１を挟んで顧客移動方向上流側の荷受面は、買物客が購入する未登録の商品Ｍが入れられた買物カゴ６を置くためのスペースとなる。また、下流側の荷受面は、商品読取装置１により登録された商品Ｍを入れる買物カゴ７を置くためのスペースとなる。

【0016】

図２は、商品読取装置１とＰＯＳ端末２とのハードウェア構成を示すブロック図である。商品読取装置１は、制御部本体としてＣＰＵ（Central Processing Unit）１０１を搭載する。そして商品読取装置１は、前記ＣＰＵ１０１に、アドレスバス，データバス等のバスライン１０２を介して、ＲＯＭ１０３及びＲＡＭ１０４を接続する。ＲＯＭ１０３は、ＣＰＵ１０１によって実行されるプログラムを記憶する。ＲＡＭ１０４は、後述する異物認識辞書ファイル９を記憶する。

【0017】

また商品読取装置１は、前記撮像部１４と音声出力部１０５とを搭載する。これら撮像部１４及び音声出力部１０５も、それぞれバスライン１０２を介してＣＰＵ１０１に接続される。音声出力部１０５は、音声ガイダンスを出力する音声出力手段として機能する。

【0018】

バスライン１０２にはさらに、接続インターフェース１０６及び接続インターフェース１０７を介して、表示・操作デバイスであるキーボード１１、タッチパネル１２及び客用ディスプレイ１３が接続される。タッチパネル１２は、例えば液晶ディスプレイを用いたパネル表示部１２１と、このパネル表示部１２１の画面上に重ねて配置されたタッチパネルセンサ１２２とを備える。

【0019】

ＰＯＳ端末２も、制御部本体としてＣＰＵ２０１を搭載する。そしてＰＯＳ端末２は、前記ＣＰＵ２０１に、バスライン２０２を介して、ＲＯＭ２０３、ＲＡＭ２０４、ＨＤＤ（Hard Disk Drive）装置２０５、通信インターフェース２０６及び接続インターフェース２０７を接続する。また、前記キーボード２１、オペレータ用ディスプレイ２２、客用ディスプレイ２３、プリンタ２４及びドロワ５の各部も、それぞれバスライン２０２を介してＣＰＵ２０１に接続される。

【0020】

通信インターフェース２０６は、ＬＡＮ（Local Area Network）等のネットワークを介して、店舗の中枢を担うストアコンピュータＳＣと接続される。この接続により、ＰＯＳ端末２は、ストアコンピュータＳＣとデータの送受信が可能となる。例えばＰＯＳ端末２は、ストアコンピュータＳＣから商品データファイル８を受信する。受信した商品データファイル８は、ＨＤＤ装置２０５に保存される。

【0021】

接続インターフェース２０７は、通信ケーブルを介して、商品読取装置１の両接続インターフェース１０６，１０７と接続される。この接続により、ＰＯＳ端末２は、商品読取装置１とデータの送受信が可能となる。例えばＰＯＳ端末２は、商品読取装置１で読み取られた商品情報を受信する。またＰＯＳ端末２は、前記商品データファイル８のデータを商品読取装置１に送信する。

【0022】

図３は、商品データファイル８のデータ構造を示す模式図である。図３に示すように、商品データファイル８には、各商品を識別する商品コードに関連付けて、その商品の属性（商品分類）、名称（商品名）、単価、外観特徴パラメータ等が記憶される。外観特徴パラメータは、商品の形状、表面の色合い、模様、凹凸状況等のような商品の標準的な外観の特徴量を商品毎に数値化したものである。

【0023】

図４は、異物認識辞書ファイル９のデータ構造を示す模式図である。図４に示すように、異物認識辞書ファイル９には、種々の異物の外観特徴パラメータと、それぞれの異物に対応するガイダンスデータとが記憶される。ここで、異物とは、読取部である前記読取窓１Ｂにかざされ、撮像手段である撮像部１４によって撮像された場合であっても決済部であるＰＯＳ端末２にて売上処理がされない商品以外の物体であり、代表的な物としては、商品を読取窓１Ｂにかざす際のオペレータの手や、商品を包装するトレイ，ネットなどの包装容器である。一方、ガイダンスデータは、対応する異物を認識したときに音声出力されるデータであり、例えば異物である手に対しては、「手を認識しています。」というようなガイダンスデータが設定される。

【0024】

本実施形態では、商品読取装置１のオペレータとなり得る各キャッシャの左右の手の甲や指の形、色合い、凹凸状況等のような外観の特徴量をそれぞれ数値化して、異物外観特徴データとして異物認識辞書ファイル９に保存している。上記異物認識辞書ファイル９は、予めストアコンピュータＳＣで作成され、ＰＯＳ端末２を介して商品読取装置１のＲＡＭ１０４に格納される。ここに、異物認識辞書ファイル９は、読取窓１Ｂ（読取部）にかざされ、撮像部１４（撮像手段）によって撮像された場合であってもＰＯＳ端末２（決済部）にて売上処理がされない商品以外の物体の外観を表わすデータを記憶する記憶手段として機能する。

【0025】

しかして、商品読取装置１のＣＰＵ１０１は、図５に示すように、撮像部１４により撮像された画像から読取窓１Ｂにかざされた物体を認識する認識手段３１と、この認識手段３１により認識された物体がＰＯＳ端末２（決済部）で売上処理される商品であると、当該商品の情報をＰＯＳ端末２に出力する出力手段３２と、認識手段３１により認識された物体がＰＯＳ端末２で売上処理されない商品以外の物体であると報知する報知手段３３とを備える。またＣＰＵ１０１は、認識手段３１により認識された物体がＰＯＳ端末２で売上処理される商品であるのか売上処理されない商品以外の物体であるのか否かを判定する判定手段３４を備え、報知手段３３は、判定手段３４により商品以外の物体が認識されたと判定されると報知する。さらにＣＰＵ１０１は、撮像手段により撮像される画像をタッチパネル１２に表示させる表示手段３５を備え、報知手段３３は、タッチパネル１２に表示された画像のなかの認識手段３１により認識した商品以外の物体を示すことで報知する。また、報知手段３３は、タッチパネル１２に表示された画像のなかの認識手段３１により認識した商品以外の物体（異物）を示した後、一定時間が経過すると、音声出力部１０５から前記異物認識辞書ファイル９において当該異物に対応して設定されているガイダンスデータの音声ガイダンスを出力する。

【0026】

図６の流れ図を用いて上記ＣＰＵ１０１の各機能について説明する。この流れ図は、前記商品読取プログラムにしたがってＣＰＵ１０１が実行する情報処理の要部手順を示すものである。

【0027】

この処理は、例えばＰＯＳ端末２から接続インターフェース１０６を介して商品登録の開始を指令するコマンドが入力されると開始される。先ず、ＣＰＵ１０１は、タッチパネル１２のパネル表示部１２１に画像認識画面５０を表示させる（ＳＴ１）。

【0028】

画像認識画面５０の一例を、図７に示す。図示するように画像認識画面５０は、画像表示領域Ｒを含み、登録画面６０の上に重ねてポップアップ表示される。登録画面６０は、カレントエリア６１と明細エリア６２とを有する。カレントエリア６１は、最新の登録商品の商品名、単価、数量、金額等を表示するための領域である。明細エリア６２は、１商取引で登録された各商品の商品名、単価、数量、金額等を表示するための領域である。

【0029】

次に、ＣＰＵ１０１は、撮像部１４に対して撮像オン信号を出力する（ＳＴ２）。この撮像オン信号により、撮像部１４は撮像領域の撮像を開始する。撮像部１４で撮像された撮像領域のフレーム画像は、ＲＡＭ１０４に順次保存される。

【0030】

ＣＰＵ１０１は、ＲＡＭ１０４に保存されたフレーム画像を取り込む（ＳＴ３）。そしてＣＰＵ１０１は、このフレーム画像を画像認識画面５０の画像表示領域Ｒに表示させる（ＳＴ４）。

【0031】

次に、ＣＰＵ１０１は、画像表示領域Ｒに表示されたフレーム画像から、その画像に含まれる物体を認識する（ＳＴ５）。具体的には、ＣＰＵ１０１は先ず、フレーム画像を二値化した画像から輪郭線等を抽出する。これにより、ＣＰＵ１０１は、フレーム画像に映し出されている物体の輪郭抽出を試みる。物体の輪郭が抽出されると、ＣＰＵ１０１は、その輪郭内の画像から、物体の形状、表面の色合い、模様、凹凸状況等の特徴量を読み取る。そしてＣＰＵ１０１は、読み取った特徴量データを、異物認識辞書ファイル９に保存されている各外観特徴パラメータと照合して、特徴量データに類似した外観特徴パラメータが検出されるか否かを判定する（ＳＴ６）。

【0032】

その結果、異物認識辞書ファイル９に保存されている特徴量データに類似した外観特徴パラメータが検出されない場合には、ＣＰＵ１０１は商品Ｍを検知したと認識する（ＳＴ６にてＹＥＳ）。これに対し、異物認識辞書ファイル９に保存されている特徴量データに類似した外観特徴パラメータが検出された場合には、ＣＰＵ１０１は商品以外の異物Ｎを検知したと認識する（ＳＴ６にてＮＯ）。

【0033】

このような画像中に含まれる物体を認識する技術は、一般物体認識（generic object recognition）と呼ばれる。この一般物体認識の技術については、下記の文献において各種認識技術が解説されている。
柳井 啓司，“一般物体認識の現状と今後”，情報処理学会論文誌，Ｖｏｌ．４８，Ｎｏ．ＳＩＧ１６［平成２２年８月１０日検索］，インターネット＜ URL: http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf ＞
また、画像をオブジェクト毎に領域分割することによって、一般物体認識を行う技術が、下記の文献において解説されている。
Jamie Shottonら，“Semantic Texton Forests for Image Categorization and Segmentation”，［平成２２年８月１０日検索］，インターネット＜ URL: http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=repl&type=pdf ＞
ＣＰＵ１０１は、商品Ｍまたは商品以外の異物Ｎを認識するまで、画像認識画面５０に表示されるフレーム画像の認識処理を繰り返す。

【0034】

例えば図７に示すように、オペレータが商品Ｍの輪郭が抽出されるように商品Ｍを読取窓１Ｂにかざすと、フレーム画像から商品Ｍの輪郭が抽出されて商品Ｍが認識される。商品Ｍが認識されると（ＳＴ６にてＹＥＳ）、ＣＰＵ１０１は、認識された商品Ｍの特徴量データをＰＯＳ端末２に出力する（ＳＴ７）。このとき、ＣＰＵ１０１は、フレーム画像から認識した物体（商品Ｍ）を囲うように枠を画像表示領域Ｒ内に表示させる。

【0035】

ＰＯＳ端末２のＣＰＵ２０１は、商品読取装置１から商品Ｍの特徴量データを入力すると、その特徴量データを、商品データファイル８に記憶されている各商品の商品別外観特徴パラメータと照合する。そして、商品Ｍの特徴量に最も類似した外観特徴パラメータを有する商品を、商品Ｍとして確定する。

【0036】

商品Ｍが確定されると、ＣＰＵ２０１は、商品データファイル８からこの商品Ｍの商品コード、商品名、単価等を読出す。また、販売点数を“１”として販売金額を算出する。そしてこの商品コード、商品名、単価、販売点数、販売金額等を含む商品販売データを、ＲＡＭ２０４に売上処理する。また、この商品販売データを確定商品情報として、接続インターフェース２０７を介して商品読取装置１に出力する。

【0037】

ステップＳＴ７にて商品Ｍの特徴量データをＰＯＳ端末２に出力したＣＰＵ１０１は、確定商品情報を待機する（ＳＴ８）。そして、接続インターフェース１０６を介してＰＯＳ端末２から確定商品情報を受信したならば（ＳＴ８にてＹＥＳ）、ＣＰＵ１０１は、登録画面６０のカレントエリアに、確定商品情報の商品コード、商品名、単価、販売点数、販売金額等を表示させる（ＳＴ９）。

【0038】

しかる後、ＣＰＵ１０１は、商品登録の終了を指令するコマンドが入力されたか否かを判断する（ＳＴ１０）。終了指令コマンドが入力されていない場合（ＳＴ１０にてＮＯ）、ＣＰＵ１０１は、ＲＡＭ１０４から次のフレーム画像を取り込む（ＳＴ３）。

【0039】

前記終了指令コマンドは、例えばキーボード１１に配置された［合計］キーが入力操作されたことに応じて、ＰＯＳ端末２から商品読取装置１に出力される。すなわち、ＰＯＳ端末２のＣＰＵ２０１は、商品読取装置１から［合計］キーのキー信号が入力されると、終了指令コマンドを商品読取装置１に出力する。また、ＲＡＭ２０４に登録された商品販売データに基づいて、１商取引の登録締め処理を実行する。

【0040】

接続インターフェース１０６を介して終了指令コマンドが入力されると（ＳＴ１０にてＹＥＳ）、ＣＰＵ１０１は、撮像部１４に対して撮像オフ信号を出力する（ＳＴ１１）。また、ＣＰＵ１０１は、パネル表示部１２１から画像認識画面５０を消去する（ＳＴ１２）。前記撮像オフ信号により、撮像部１４は撮像領域の撮像を終了する。

【0041】

一方、例えば図８に示すように、オペレータが商品Ｍを手の甲と指で隠して読取窓１Ｂにかざすと、商品Ｍの輪郭は抽出されず、手の輪郭が抽出される。このため、商品Ｍは認識されず、オペレータの手が商品以外の異物Ｎとして認識される。商品以外の異物Ｎが認されると（ＳＴ６にてＮＯ）、ＣＰＵ１０１は、図９に示すように、異物Ｎとして認識している手を囲うように、矩形状の枠５１を画像表示領域Ｒ内に表示させる（ＳＴ１３）。このときの枠５１は、認識した商品Ｍを囲うときの枠とは例えば色や形状などが異なるようにする。

【0042】

また、ＣＰＵ１０１は、画像認識画面５０に確認ボタン５２の画像を表示させる。そして、この確認ボタン５２の画像がタッチ操作されるのを待機する（ＳＴ１４）。この待機期間中、ＣＰＵ１０１は、所定時間（例えば５秒）が経過したか否かを判断する（ＳＴ１５）。確認ボタン５２の画像がタッチ操作されることなく（ＳＴ１４にてＮＯ）、所定時間が経過した場合（ＳＴ１５にてＹＥＳ）、ＣＰＵ１０１は、所定の音声ガイダンス、例えば「商品をかざしてください」を音声出力部１０５から出力させる（ＳＴ１６）。しかる後、ＣＰＵ１０１は、再び確認ボタン５２の画像がタッチ操作されるのを待機する（ＳＴ１４）。

【0043】

タッチパネルセンサ１２２からの信号により、確認ボタン５２の画像がタッチ操作されたことを検知すると（ＳＴ１４のＹＥＳ）、ＣＰＵ１０１は、ＲＡＭ１０４から次のフレーム画像を取り込む（ＳＴ３）。そしてＣＰＵ１０１は、ステップＳＴ３以降の処理を再度実行する。

【0044】

このように、商品読取装置１においては、商品読取プログラムにしたがってＣＰＵ１０１が実行する情報処理手順のステップＳＴ１の処理により表示手段３５が構成され、ステップＳＴ５の処理により認識手段３１が構成され、ステップＳＴ６の処理により判定手段３４が構成され、ステップＳＴ７の処理により出力手段３２が構成され、ステップＳＴ１３〜ＳＴ１６の処理により報知手段３３が構成される。すなわち報知手段３３は、撮像画像から商品以外の物体が異物Ｎとして認識されると、タッチパネル１２に表示される撮像画像に表示される異物Ｎを枠５１で囲うことにより報知し、その後、確認ボタン５２の画像がタッチ操作されることなく一定時間が経過すると、音声出力部１０５から音声ガイダンスを出力することで報知する。

【0045】

本実施形態の店舗会計システムが導入された店舗のキャッシャは、買物カゴ６から未登録の商品Ｍを取り出したならば、その商品Ｍを商品読取装置１の読取窓１Ｂにかざす。そうすると、タッチパネル１２に表示されている画像認識画面５０の画像表示領域Ｒ内に、撮像部１４で撮像されている画像が表示される。

【0046】

このとき、図７に示すように、キャッシャが商品Ｍの外観がわかるように商品Ｍを読取窓１Ｂにかざした場合は、商品読取装置１において商品Ｍが認識される。その結果，ＰＯＳ端末２では、商品Ｍの販売データが売上処理される。

【0047】

ところが、図８に示すように、キャッシャが商品Ｍを手で隠した状態で読取窓１Ｂにかざしてしまうと、商品Ｍは認識されない。商品読取装置１においては、キャッシャの手が異物Ｎとして認識される。このとき、図９に示すように、画像認識画面５０では、ＣＰＵ１０１の認識手段３１が現在認識する物体としてキャッシャの手を囲うように矩形状の枠５１が表示される。したがってキャッシャは、手の画像に枠５１が表示されたことにより、商品Ｍでなく手が認識されてしまったと容易に確認することができる。

【0048】

また、枠５１が表示された後、確認ボタン５２の画像がタッチ操作されることなく一定時間が経過すると、音声ガイダンスによって商品Ｍが認識されていないことが報知される。したがって、枠５１の表示に気づかなくても、直ぐにキャッシャは商品Ｍが認識されていないことに気がつくので、迅速な対応をとることができる。

【0049】

なお、本発明は、前記実施形態に限定されるものではない。
例えば前記実施形態では、商品以外の物体を認識すると、タッチパネル１２に表示されている撮像画像のなかの認識した物体を囲うように枠５１を表示し、さらに一定時間が経過すると、所定の音声ガイダンスを出力して商品Ｍを認識していないことを報知したが、音声出力を省略し、枠５１の表示だけで報知してもよい。あるいは、逆に音声出力だけで報知してもよい。また、報知の内容は、枠５１の表示やガイダンスの音声出力に限定されるものではなく、要は、オペレータに商品が認識されていないことを通知できればよい。

【0050】

また、前記実施形態では、異物認識辞書ファイル９の格納場所を商品読取装置１のＲＡＭ１０４としたが、格納場所はこれに限定されるものではない。例えば、ＰＯＳ端末２のＨＤＤ装置２０５に格納してもよい。また、前記実施形態では、先に認識物が商品以外の異物か否かを判定し、異物でなければ商品Ｍを特定したが、先に認識物が商品であるか否かを判定し、商品であると特定できない場合に認識物が異物であると判定してもよい。この場合、必ずしも異物認識辞書ファイル９は必要としない。

【0051】

また、前記実施形態は、キャッシャが対応する会計カウンタの商品読取装置１に適用したが、適用事例はこれに限定されるものではない。例えば、客自身が自ら会計を行うセルフチェックアウトシステムの商品読取装置に適用することも可能である。また、商品読取装置１がＰＯＳ端末２に組み込まれて一体として構成されていてもよい。要は、商品読取装置１とＰＯＳ端末２とからなるチェックアウトシステムに適用可能である。

【0052】

また、前記実施形態は、装置内部のプログラム記憶部であるＲＯＭ１０３に発明の機能を実現させる商品読取プログラムが予め記録されているものとした。しかしこれに限らず、同様のプログラムがネットワークから装置にダウンロードされてもよい。あるいは、記録媒体に記録された同様のプログラムが、装置にインストールされてもよい。記録媒体は、ＣＤ−ＲＯＭ，メモリカード等のようにプログラムを記憶でき、かつ装置が読み取り可能であれば、その形態は問わない。また、プログラムのインストールやダウンロードにより得る機能は、装置内部のＯＳ（オペレーティング・システム）等と協働してその機能を実現させるものであってもよい。

【0053】

この他、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
［１］撮像手段により撮像された画像から読取部にかざされた物体を認識する認識手段と、前記認識手段により認識された物体が決済部で売上処理される商品であると、当該商品の情報を前記決済部へ出力する出力手段と、前記認識手段により認識された物体が前記決済部で売上処理されない商品以外の物体であると報知する報知手段と、を具備したことを特徴とする商品読取装置。
［２］前記認識手段により認識された物体が前記決済部で売上処理される商品であるのか売上処理されない商品以外の物体であるのかを判定する判定手段、をさらに具備したことを特徴とする付記［１］記載の商品読取装置。
［３］前記読取部にかざされ、前記撮像手段で撮像された場合であっても前記決済部で売上処理がされない商品以外の物体の外観を表わすデータを記憶する記憶手段、をさらに具備し、前記判定手段は、前記記憶手段に記憶されるデータに基づいて判定することを特徴とする付記［２］記載の商品読取装置。
［４］前記撮像手段により撮像される画像を表示する表示手段、をさらに具備し、前記報知手段は、前記表示手段により表示された画像のなかの前記認識手段により認識した前記商品以外の物体を示すことで報知することを特徴とする付記［１］乃至［３］のうちいずれか１に記載の商品読取装置。
［５］音声ガイダンスを出力する音声出力手段、をさらに具備し、前記報知手段は、前記表示手段により表示された画像のなかの前記認識手段により認識した前記商品以外の物体を示した後、一定時間が経過すると、前記音声出力手段により所定の音声ガイダンスを出力することで報知することを特徴とする付記［４］に記載の商品読取装置。
［６］コンピュータに、撮像手段により撮像された画像から読取部にかざされた物体を認識させる認識機能と、この認識機能により認識された物体が決済部で売上処理される商品であると、当該商品の情報を前記決済部へ出力させる出力機能と、前記認識機能により認識された物体が前記決済部で売上処理されない商品以外の物体であると報知させる報知機能と、を実現させるための商品読取プログラム。

【符号の説明】

【0054】

１…商品読取装置、２…ＰＯＳ端末、８…商品データファイル、９…異物認識辞書ファイル、１２…タッチパネル、１４…撮像部、５０…画像認識画面、５１…枠、１０１，２０１…ＣＰＵ、１０５…音声出力部、Ｒ…画像表示領域。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図8】

【図9】

【図7】