2024-61108 商品識別システム、商品識別装置、プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024061108

(43)【公開日】2024-05-07

(54)【発明の名称】商品識別システム、商品識別装置、プログラム

(51)【国際特許分類】

   G07G 1/00 20060101AFI20240425BHJP

   G07G 1/01 20060101ALI20240425BHJP

【ＦＩ】

G07G1/00 311E

G07G1/01 301E

【審査請求】未請求

【請求項の数】7

【出願形態】ＯＬ

(21)【出願番号】P 2022168834

(22)【出願日】2022-10-21

(71)【出願人】

【識別番号】000005267

【氏名又は名称】ブラザー工業株式会社

(74)【代理人】

【識別番号】100104178

【弁理士】

【氏名又は名称】山本 尚

(72)【発明者】

【氏名】伴野 貴昭

(72)【発明者】

【氏名】吉村 千里

【テーマコード（参考）】

3E142

【Ｆターム（参考）】

3E142CA12

3E142DA04

3E142DA08

3E142EA02

3E142FA42

3E142GA03

3E142GA32

3E142GA35

(57)【要約】

【課題】撮影画像から抽出した商品の識別子との対応付けが完了し次第、順に、商品情報をレジスター装置に送信することができる商品識別システム、商品識別装置、プログラムを提供する。
【解決手段】撮影画像から抽出された商品のコードに識別番号を割り当てて記憶するコードリストは常時更新される。ＣＰＵはコードリストが更新される度に、コードリストの識別番号が商品リストにあるか判断し、なければコード識別処理を行って、識別した商品情報を商品リストに追加する。ＣＰＵは、商品情報が商品リストに追加され次第（Ｓ７１）、レジスター装置に送信する（Ｓ７３）。商品情報をまとめてレジスター装置に送信する場合と比べ、会計処理の全体にかかる時間を短縮できる。
【選択図】図１０

【特許請求の範囲】

【請求項1】

商品に関する商品情報の入力を受け付けて、前記商品情報に基づく販売額を合計するレジスター装置に接続する商品識別システムであって、
所定の撮影範囲を撮影する撮影装置と、
情報を表示する表示装置と、
操作の入力を受け付ける入力装置と、
前記表示装置および前記撮影装置に対する制御指令を出力する制御装置と、
個々の商品の前記商品情報を、前記商品情報を示す識別子と対応付けて記憶する記憶装置と
を有し、
前記識別子はＡＲマーカであり、
前記撮影装置の前記撮影範囲内には、前記識別子が予め設けられた複数の商品が配置され、
前記制御装置は、
前記入力装置を介した操作の入力を受け付ける入力処理と、
前記撮影装置に撮影指令を出力し、前記撮影範囲を撮影した撮影画像を随時取得する撮影処理と、
前記撮影画像から前記識別子を抽出する抽出処理と、
前記抽出処理において抽出された前記識別子のうち、前記商品情報が未取得の前記識別子に対応する前記商品情報を前記記憶装置から取得する取得処理と、
前記取得処理において取得された前記商品情報を前記識別子と対応付けて一時記憶部に記憶する一時記憶処理と、
前記表示装置に表示指令を出力し、前記一時記憶部に記憶された全ての前記商品情報を前記撮影画像に重ねて表示する表示処理と、
前記入力処理によって所定の操作の入力を受け付けた場合に処理を開始し、前記取得処理によって取得した前記商品情報を前記一時記憶処理によって前記一時記憶部に記憶し次第、記憶順に、前記レジスター装置に送信する送信処理と
を実行すること
を特徴とする商品識別システム。

【請求項2】

前記入力処理において受け付ける前記所定の操作は、前記抽出処理の開始を指示する操作、前記送信処理の開始を指示する操作、または前記商品情報の一部を修正するパラメータの入力完了を指示する操作のいずれかを含むこと
を特徴とする請求項１に記載の商品識別システム。

【請求項3】

前記制御装置は、
前記入力処理において前記所定の操作の入力を受け付ける前、または受け付け時に、前記パラメータの入力を受け付けるパラメータ入力処理を実行すること
を特徴とする請求項２に記載の商品識別システム。

【請求項4】

前記制御装置は、
前記送信処理によって前記レジスター装置への前記商品情報の送信がなされた商品の前記撮影画像における商品画像を他の画像で覆い、且つその商品の前記商品情報を非表示する隠蔽処理を実行すること
を特徴とする請求項１～３のいずれかに記載の商品識別システム。

【請求項5】

前記制御装置は、
前記表示処理の実行前に前記送信処理を実行し、
前記送信処理によって前記レジスター装置への前記商品情報の送信がなされた商品から順に、その商品の前記商品情報を、前記表示処理において前記撮影画像に重ねて表示すること
を特徴とする請求項１～３のいずれかに記載の商品識別システム。

【請求項6】

商品に関する商品情報の入力を受け付けて、前記商品情報に基づく販売額を合計するレジスター装置と、所定の撮影範囲を撮影する撮影装置とに接続する商品識別装置であって、
情報を表示する表示部と、
操作の入力を受け付ける入力部と、
前記撮影装置に対する制御指令を出力する制御部と、
個々の商品の前記商品情報を、前記商品情報を示す識別子と対応付けて記憶する記憶部と
を備え、
前記識別子はＡＲマーカであり、
前記撮影装置の前記撮影範囲内には、前記識別子が予め設けられた複数の商品が配置され、
前記制御部は、
前記入力部によって操作の入力を受け付ける入力処理部と、
前記撮影装置に撮影指令を出力し、前記撮影範囲を撮影した撮影画像を随時取得する撮影処理部と、
前記撮影画像から前記識別子を抽出する抽出処理部と、
前記抽出処理部によって抽出した前記識別子のうち、前記商品情報が未取得の前記識別子に対応する前記商品情報を前記記憶部から取得する取得処理部と、
前記取得処理部によって取得した前記商品情報を前記識別子と対応付けて一時記憶部に記憶する一時記憶処理部と、
前記表示部に、前記一時記憶部に記憶された全ての前記商品情報を前記撮影画像に重ねて表示する表示処理部と、
前記入力処理部によって所定の操作の入力を受け付けた場合に処理を開始し、前記取得処理部によって取得した前記商品情報を前記一時記憶処理部によって前記一時記憶部に記憶し次第、記憶順に、前記レジスター装置に送信する送信処理部と
を備えたこと
を特徴とする商品識別装置。

【請求項7】

商品に関する商品情報の入力を受け付けて、前記商品情報に基づく販売額を合計するレジスター装置と、所定の撮影範囲を撮影する撮影装置とに接続し、前記撮影装置に対する制御指令を出力する商品識別装置のコンピュータが実行するプログラムであって、
前記商品識別装置は、
情報を表示する表示部と、
操作の入力を受け付ける入力部と、
個々の商品の前記商品情報を、前記商品情報を示す識別子と対応付けて記憶する記憶部と
を備え、
前記識別子はＡＲマーカであり、
前記撮影装置の前記撮影範囲内には、前記識別子が予め設けられた複数の商品が配置され、
前記プログラムは、
前記入力部によって操作の入力を受け付ける入力処理と、
前記撮影装置に撮影指令を出力し、前記撮影範囲を撮影した撮影画像を随時取得する撮影処理と、
前記撮影画像から前記識別子を抽出する抽出処理と、
前記抽出処理において抽出した前記識別子のうち、前記商品情報が未取得の前記識別子に対応する前記商品情報を前記記憶部から取得する取得処理と、
前記取得処理において取得した前記商品情報を前記識別子と対応付けて一時記憶部に記憶する一時記憶処理と、
前記表示部に、前記一時記憶部に記憶された全ての前記商品情報を前記撮影画像に重ねて表示する表示処理と、
前記入力処理において所定の操作の入力を受け付けた場合に処理を開始し、前記取得処理において取得した前記商品情報を前記一時記憶処理において前記一時記憶部に記憶し次第、記憶順に、前記レジスター装置に送信する送信処理と
を前記コンピュータに実行させること
を特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、複数の商品の情報を一括で識別する商品識別システム、商品識別装置、プログラムに関する。

【背景技術】

【0002】

複数の商品の情報を一括で認識できる装置が知られている。特許文献１に記載の商品登録装置は、トレー上の複数の商品を撮影し、撮影画像中の商品のバーコードを一括で読み取ることで、複数の商品をまとめて認識する。認識した商品のバーコードはデータベースに照会され、対応する商品の情報が取得される。商品情報はレジスター装置に送られ、販売金額が合計されて、精算が行われる。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１６－１７７４３３号広報

【発明の概要】

【発明が解決しようとする課題】

【0004】

商品登録装置は、認識した全ての商品の商品情報を一度にまとめてレジスター装置に送信するため、商品点数が多いほど送信を開始してから終了するまでの待ち時間が増え、商品の会計処理に時間がかかるという問題があった。

【0005】

本発明の目的は、撮影画像から抽出した商品の識別子との対応付けが完了し次第、順に、商品情報をレジスター装置に送信することができる商品識別システム、商品識別装置、プログラムを提供することである。

【課題を解決するための手段】

【0006】

本発明の第一態様によれば、商品に関する商品情報の入力を受け付けて、前記商品情報に基づく販売額を合計するレジスター装置に接続する商品識別システムであって、所定の撮影範囲を撮影する撮影装置と、情報を表示する表示装置と、操作の入力を受け付ける入力装置と、前記表示装置および前記撮影装置に対する制御指令を出力する制御装置と、個々の商品の前記商品情報を、前記商品情報を示す識別子と対応付けて記憶する記憶装置とを有し、前記識別子はＡＲマーカであり、前記撮影装置の前記撮影範囲内には、前記識別子が予め設けられた複数の商品が配置され、前記制御装置は、前記入力装置を介した操作の入力を受け付ける入力処理と、前記撮影装置に撮影指令を出力し、前記撮影範囲を撮影した撮影画像を随時取得する撮影処理と、前記撮影画像から前記識別子を抽出する抽出処理と、前記抽出処理において抽出された前記識別子のうち、前記商品情報が未取得の前記識別子に対応する前記商品情報を前記記憶装置から取得する取得処理と、前記取得処理において取得された前記商品情報を前記識別子と対応付けて一時記憶部に記憶する一時記憶処理と、前記表示装置に表示指令を出力し、前記一時記憶部に記憶された全ての前記商品情報を前記撮影画像に重ねて表示する表示処理と、前記入力処理によって所定の操作の入力を受け付けた場合に処理を開始し、前記取得処理によって取得した前記商品情報を前記一時記憶処理によって前記一時記憶部に記憶し次第、記憶順に、前記レジスター装置に送信する送信処理とを実行することを特徴とする商品識別システムが提供される。

【0007】

商品識別システムは、撮影画像から商品の識別子を抽出し、商品情報との対応付けを行い、商品情報を表示装置に表示する。撮影画像から識別子を抽出し、商品情報に対応付ける処理は随時実行することができる。所定の操作が入力されると、商品識別システムは、識別子に対応する商品情報をレジスター装置に送信する処理を開始することができる。この場合に商品識別システムは、識別子との対応付けが完了した商品情報を一時記憶部に記憶し次第、順に、商品情報をレジスター装置に送信する。故に商品識別システムは、全ての商品情報をまとめてレジスター装置に送信する場合と比べ、会計処理の全体にかかる時間を短縮することができる。

【0008】

第一態様の前記入力処理において受け付ける前記所定の操作は、前記抽出処理の開始を指示する操作、前記送信処理の開始を指示する操作、または前記商品情報の一部を修正するパラメータの入力完了を指示する操作のいずれかを含んでもよい。商品識別システムは、識別子の抽出開始指示、レジスター装置への送信開始指示、またはパラメータの入力完了指示を切っ掛けに、識別子に対応する商品情報をレジスター装置に送信する処理を開始することができる。故に商品識別システムは、レジスター装置における精算の処理に必要な処理が完了する前に、レジスター装置への商品情報の送信が開始されてしまうことを防止できる。

【0009】

第一態様の前記制御装置は、前記入力処理において前記所定の操作の入力を受け付ける前、または受け付け時に、前記パラメータの入力を受け付けるパラメータ入力処理を実行してもよい。商品識別システムは、レジスター装置における精算の処理に必要なパラメータの入力が完了する前に、レジスター装置への商品情報の送信が開始されてしまうことを防止できる。

【0010】

第一態様の前記制御装置は、前記送信処理によって前記レジスター装置への前記商品情報の送信がなされた商品の前記撮影画像における商品画像を他の画像で覆い、且つその商品の前記商品情報を非表示する隠蔽処理を実行してもよい。商品識別システムは、レジスター装置への商品情報の送信が完了した商品の画像を、例えば撮影範囲内で商品を配置する部位の画像等で覆い、その商品情報を非表示とすることができる。故にオペレータは、識別されていない商品がどれかを把握しやすい。

【0011】

第一態様の前記制御装置は、前記表示処理の実行前に前記送信処理を実行し、前記送信処理によって前記レジスター装置への前記商品情報の送信がなされた商品から順に、その商品の前記商品情報を、前記表示処理において前記撮影画像に重ねて表示してもよい。商品識別システムは、レジスター装置への商品情報の送信が完了した商品から順に、その商品情報を撮影画像に重ねて表示することができる。故にオペレータは、識別されていない商品がどれかを把握しやすい。

【0012】

本発明の第二態様によれば、商品に関する商品情報の入力を受け付けて、前記商品情報に基づく販売額を合計するレジスター装置と、所定の撮影範囲を撮影する撮影装置とに接続する商品識別装置であって、情報を表示する表示部と、操作の入力を受け付ける入力部と、前記撮影装置に対する制御指令を出力する制御部と、個々の商品の前記商品情報を、前記商品情報を示す識別子と対応付けて記憶する記憶部とを備え、前記識別子はＡＲマーカであり、前記撮影装置の前記撮影範囲内には、前記識別子が予め設けられた複数の商品が配置され、前記制御部は、前記入力部によって操作の入力を受け付ける入力処理部と、前記撮影装置に撮影指令を出力し、前記撮影範囲を撮影した撮影画像を随時取得する撮影処理部と、前記撮影画像から前記識別子を抽出する抽出処理部と、前記抽出処理部によって抽出した前記識別子のうち、前記商品情報が未取得の前記識別子に対応する前記商品情報を前記記憶部から取得する取得処理部と、前記取得処理部によって取得した前記商品情報を前記識別子と対応付けて一時記憶部に記憶する一時記憶処理部と、前記表示部に、前記一時記憶部に記憶された全ての前記商品情報を前記撮影画像に重ねて表示する表示処理部と、前記入力処理部によって所定の操作の入力を受け付けた場合に処理を開始し、前記取得処理部によって取得した前記商品情報を前記一時記憶処理部によって前記一時記憶部に記憶し次第、記憶順に、前記レジスター装置に送信する送信処理部とを備えたことを特徴とする商品識別装置が提供される。故に商品識別装置は、第一態様と同様の効果を奏する。

【0013】

本発明の第三態様によれば、商品に関する商品情報の入力を受け付けて、前記商品情報に基づく販売額を合計するレジスター装置と、所定の撮影範囲を撮影する撮影装置とに接続し、前記撮影装置に対する制御指令を出力する商品識別装置のコンピュータが実行するプログラムであって、前記商品識別装置は、情報を表示する表示部と、操作の入力を受け付ける入力部と、個々の商品の前記商品情報を、前記商品情報を示す識別子と対応付けて記憶する記憶部とを備え、前記識別子はＡＲマーカであり、前記撮影装置の前記撮影範囲内には、前記識別子が予め設けられた複数の商品が配置され、前記プログラムは、前記入力部によって操作の入力を受け付ける入力処理と、前記撮影装置に撮影指令を出力し、前記撮影範囲を撮影した撮影画像を随時取得する撮影処理と、前記撮影画像から前記識別子を抽出する抽出処理と、前記抽出処理において抽出した前記識別子のうち、前記商品情報が未取得の前記識別子に対応する前記商品情報を前記記憶部から取得する取得処理と、前記取得処理において取得した前記商品情報を前記識別子と対応付けて一時記憶部に記憶する一時記憶処理と、前記表示部に、前記一時記憶部に記憶された全ての前記商品情報を前記撮影画像に重ねて表示する表示処理と、前記入力処理において所定の操作の入力を受け付けた場合に処理を開始し、前記取得処理において取得した前記商品情報を前記一時記憶処理において前記一時記憶部に記憶し次第、記憶順に、前記レジスター装置に送信する送信処理とを前記コンピュータに実行させることを特徴とするプログラムが提供される。故にプログラムは、第一態様と同様の効果を奏する。

【図面の簡単な説明】

【0014】

【図1】商品識別システム１の外観を示す斜視図である。

【図2】商品識別システム１の電気的構成を示すブロック図である。

【図3】商品識別画面８０の表示例である。

【図4】記憶部４４の商品情報データベース１００の概念図である。

【図5】ＲＡＭ４３のコードリスト１１０および商品リスト１２０の概念図である。

【図6】ラベル発行処理のフローチャートである。

【図7】商品識別処理のフローチャートである。

【図8】図７の商品識別処理のフローチャートの続きである。

【図9】図８の商品識別処理のフローチャートの続きである。

【図10】図９の商品識別処理のフローチャートの続きである。

【図11】撮影画像表示領域８２の表示例である。

【図12】撮影画像表示領域８２の表示例の続きである。

【図13】図９における商品識別処理のフローチャートの変形例である。

【図14】図１０における商品識別処理のフローチャートの変形例である。

【発明を実施するための形態】

【0015】

図面を参照し、本発明の一実施形態に係る商品識別システム１を説明する。商品識別システム１は、識別用のコードがそれぞれに設けられた複数の商品を撮影し、撮影画像から抽出したコードの数を提示して、商品の点数に間違いがないかを容易に確認できるようにするシステムである。商品識別システム１は、例えば商品を販売する店舗において、精算時に複数の商品を一括して識別するシステムとして用いられる。

【0016】

図１に示すように、商品識別システム１は、撮影台２、撮影装置３、識別端末４、印刷装置６を備える。撮影台２は、撮影対象の複数の商品を配置する位置を示す台である。本実施形態では、複数の商品を載せるトレー２５を用意し、撮影台２上にトレー２５を配置することで、トレー２５上のすべての商品が撮影範囲Ｐ内に配置される。それぞれの商品は個別に透明な袋に包装され、予め、商品名と、商品の種類毎に異なるコードとが印刷されたラベルシール２６が貼り付けられている。コードは、例えばＡＲマーカである。

【0017】

撮影装置３は、撮影台２上に予め設定された撮影範囲Ｐを撮影台２の上方から撮影する装置である。撮影装置３は、撮影台２の側方に固定されて上方へ延びる柱状部分と、柱状部分の上部において撮影台２の中央上方へ向けて延びる腕状部分と、腕状部分の下部に設けられ、下方に位置する撮影台２に撮影方向を向ける撮影部３１を有する。撮影部３１は、撮影台２の撮影範囲Ｐを撮影するように、予め撮影方向および画角が調整されて、撮影装置３に組み付けられる。

【0018】

識別端末４は、例えば周知のタブレット端末である。識別端末４は公知のＵＳＢケーブル３５を用いて撮影装置３と接続し、撮影装置３が撮影する撮影範囲Ｐの撮影画像あるいは撮影映像を取得する。なお、静止画である撮影画像と動画である撮影映像を特に区別しない場合、以下説明では、撮影画像という。識別端末４はオペレータによる操作の入力を受け付け、撮影装置３が撮影した撮影画像、撮影画像から抽出したコードの数、コードに対応する商品情報のリスト等を画面に表示する。識別端末４は、公知のレジスター装置７に設けられたハンディスキャナ用のシリアルポートに接続したシリアルケーブル７７と、識別端末４に接続するＵＳＢケーブル７５とをＵＳＢシリアル変換器７６を介して接続することで、レジスター装置７にデータを送信することができる。また、識別端末４は、ＵＳＢケーブル６５を用いて印刷装置６と接続する。印刷装置６は、例えば公知の感熱ラベル用の印刷装置である。識別端末４から受信する印刷データに基づいて、商品名およびＡＲマーカをラベルシール２６に印刷する。なお、ラベルシール２６には、商品名、ＡＲマーカ以外にも、商品の消費期限、商品の販売額、商品の型番、商品の製造場所（製造工場）、アレルギー情報等、その他の情報が印刷されてもよい。

【0019】

商品識別システム１が識別対象とする商品は、店頭で販売される商品であり、例えばパンである。撮影台２、撮影装置３、識別端末４およびレジスター装置７は、商品を販売する売り場に配置される。また、印刷装置６は、商品を製造するバックヤードに配置される。

【0020】

図２を参照し、商品識別システム１の電気的構成について説明する。撮影装置３は、撮影部３１と制御部３２を有する。撮影部３１は、公知のＣＣＤイメージセンサあるいはＣＭＯＳイメージセンサである。制御部３２は、撮影部３１から出力されるデータを処理して撮影画像の画像データを生成し、識別端末４に出力する。撮影映像を出力する場合、制御部３２は、フレームレートに従って画像データを連続して生成し、映像データとして識別端末４に出力する。

【0021】

識別端末４は、制御部４０、記憶部４４、タッチパネル４６、ＵＳＢインターフェース４５を有する。制御部４０は、ＣＰＵ４１、ＲＯＭ４２、ＲＡＭ４３を備える。ＣＰＵ４１は識別端末４の制御を司る。ＲＯＭ４２には、ＯＳや初期設定情報が記憶される。ＲＡＭ４３には、ＣＰＵ４１が処理を実行する過程でデータが一時的に記憶される。記憶部４４は、例えばフラッシュメモリである。記憶部４４には、ＣＰＵ４１が実行するための制御プログラム、後述の商品識別プログラムおよびラベル発行プログラム、コードと商品の情報を関連付ける商品情報データベース１００等が記憶される。

【0022】

タッチパネル４６は、表示部４８と入力部４７を備える。表示部４８は液晶ディスプレイである。入力部４７は、表示部４８の表面に設けられたタッチパネルである。ＵＳＢインターフェース４５は、ＵＳＢ規格により、撮影装置３および印刷装置６と接続し、レジスター装置７にはＵＳＢシリアル変換器７６を介してシリアル変換して接続し、データ通信を行う。印刷装置６は、印刷部６１と制御部６２を備える。印刷部６１は、台紙に貼付されたラベルシール２６に商品名およびＡＲマーカを印刷する。制御部６２は、印刷装置６の制御を司る。

【0023】

図３を参照し、識別端末４の表示部４８に表示される画面を説明する。後述する商品識別処理において、識別端末４の表示部４８には、商品識別画面８０が表示される。図３（Ａ）に示すように、商品識別画面８０には、点数入力領域８１、撮影画像表示領域８２、税率設定領域８３およびメッセージ表示領域８４が設定され、スタートボタン８５が設けられる。

【0024】

点数入力領域８１には、オペレータのタッチ操作により、撮影台２上に配置される商品の点数の入力を受け付けるための操作項目が表示される。一例として、オペレータがタッチ操作で選択可能な商品点数を示す１～１０の数値と、１１以上の数値を入力する場合にスワイプ操作で操作項目を表示可能であることを示す三角印が表示される。オペレータによる商品点数の入力が行われた場合、入力された点数を囲って示す丸印が表示される。

【0025】

撮影画像表示領域８２には、撮影装置３が撮影した撮影範囲Ｐの撮影画像が表示される。撮影画像には、撮影台２に配置される複数の商品と、それぞれの商品に設けられた識別用のコードも写って表示される。税率設定領域８３には、オペレータが商品の税率を設定するためのボタンが表示される。カスタマーが商品のテイクアウトを所望する場合の税率である８％を設定する８％ボタンと、イートインを所望する場合の税率である１０％を設定する１０％ボタンが設けられる。メッセージ表示領域８４には、後述する商品識別処理においてオペレータに対して報知される警告メッセージ等の各種メッセージが表示される。スタートボタン８５は、オペレータが商品の識別の開始を指示する場合に操作するボタンである。

【0026】

また、商品識別処理が進行すると、商品識別画面８０の表示内容が変化する。図３（Ｂ）に示すように、商品識別画面８０には、点数入力領域８１および撮影画像表示領域８２、メッセージ表示領域８４に加え、商品リスト表示領域８６および合計額表示領域８７が設定される。なお、この場合に撮影画像表示領域８２に表示される撮影画像には、複数の商品それぞれのコードに表示される目印２８と、各商品の商品名２９（図１２（Ｂ）参照）とが重ねて表示される。目印２８は、例えば、コード（ＡＲマーカ）の輪郭部を縁取る枠体（例えば緑色）であり、商品名２９は、商品情報から取得される商品の名称である。

【0027】

商品リスト表示領域８６は、後述する商品識別処理において撮影画像から識別されたコードに対応する商品情報が一覧表示される。商品情報は商品名と単価を含み、後述する商品情報データベース１００において、コードと対応付けられている。商品情報は、後述する商品識別処理においてＲＡＭ４３に設けられる商品リスト１２０に追加される。商品リスト表示領域８６には、商品リスト１２０に基づく商品情報の一覧が表示される。なお、同一商品は個数が演算されて、一つの商品として、個数をまとめて表示される。合計額表示領域８７には、商品リスト表示領域８６に一覧表示される商品の全体での個数と、全ての商品の単価を足し合わせた小計額と、小計額にオペレータが設定した税率を掛け合わせた消費税額と、小計額と消費税額とを足し合わせた税込合計額とが表示される。個数は、撮影画像から抽出されたコードの点数と一致する。

【0028】

図４を参照し、記憶部４４に記憶される商品情報データベース１００を説明する。商品情報データベース１００は、単品販売される商品（パン）を、その種類が異なるごとに１つのコード番号を割り当てて、商品情報を紐付けたデータベースである。商品情報データベース１００には、商品情報として、コード番号、コード（ＡＲマーカ）、商品名、単価、その他の情報が対応付けて記憶される。コード番号は、商品の種類ごとに割り振られた番号である。コードには、例えば１００～９００番台のコード番号が割り当てられる。コード番号は、データベース上で商品情報を管理するため商品情報に紐付けられるＩＤである。

【0029】

コードにはコード番号が割り当てられ、ＡＲマーカとしての特徴部を有する画像（図４では便宜上、ＡＲマーカの外観図を示す）が登録される。識別端末４には、コード番号に基づいてＡＲマーカを生成することができるアプリケーションが、予めインストールされている。本実施形態では、例えば７×７セルのＡＲマーカが用いられる。商品名は、販売する商品の名称である。単価は、その商品の販売価格である。その他の情報は、例えば、商品の製造年月日、商品の消費期限、商品の製造場所、アレルギー情報等である。商品情報データベース１００は、識別端末４への商品識別プログラムのインストール時に、記憶部４４に記憶される。

【0030】

図５を参照し、商品識別処理においてＲＡＭ４３に作成されるコードリスト１１０および商品リスト１２０を説明する。図５（Ａ）に示すように、コードリスト１１０は、識別番号と、撮影画像から抽出したコードの位置を示すコード座標と、商品画像から抽出した商品の外観を表す輪郭線を示す輪郭座標とをＡＲマーカに対応付けて一時的に記憶する記憶領域である。識別番号は、撮影画像から抽出したＡＲマーカのそれぞれに割り当てる識別用の固有の番号である。コード座標は、ＡＲマーカの四隅の位置座標である。コード座標は、例えば、ＡＲマーカの四つ角のうちの一つの角の位置座標であってもよいし、ＡＲマーカの中央の位置座標であってもよい。輪郭座標は、撮影画像を画像解析することによってＡＲマーカを含む商品の輪郭線を特定した輪郭線の位置座標である。商品はラベルシール２６が貼られた透明な袋に包装されているので、特定される輪郭線は、商品およびラベルシール２６の輪郭線である。輪郭座標は、商品識別処理において、レジスター装置７に商品情報を送信し終えた商品の画像を撮影画像において背景画像で重ねて見えなくすることで送信完了を示す処理に用いられる。商品識別処理において、コードリスト１１０は常時更新される。

【0031】

図５（Ｂ）に示すように、商品リスト１２０は、識別番号と、商品情報と、コード座標と、輪郭座標と、確定フラグと、送信フラグと、単価税額とを、コード番号に対応付けて一時的に記憶する記憶領域である。確定フラグは、商品識別処理において使用され、コードと商品情報との対応付けがなされ、識別結果が確定し、撮影画像に商品名が表示された商品に対して立てられるフラグである。送信フラグは、商品識別処理において、識別が完了した商品の商品情報をレジスター装置７に送信した場合に立てられるフラグである。単価税額は、商品の単価にオペレータが設定した税率を掛け合わせた金額である。商品識別処理において、商品リスト１２０は、商品情報が追加された後、トレー２５から商品が取り除かれたり、トレー２５内での配置位置が大きく変更されない限り、更新されない。

【0032】

図６を参照し、ラベル発行処理について説明する。識別端末４において、オペレータによってラベル発行処理のアプリケーションを起動するための操作が入力部４７を介して行われた場合、記憶部４４に記憶されたラベル発行プログラムを制御部４０のＣＰＵ４１が読み出して実行することにより、ラベル発行処理が開始される。

【0033】

制御部４０のＣＰＵ４１は、表示部４８に商品情報の編集またはラベルの発行を行う選択画面（図示略）を表示する。ＣＰＵ４１は、オペレータによる操作がなければ待機する（Ｓ１：ＮＯ、Ｓ１１：ＮＯ）。

【0034】

オペレータによって商品情報の編集を行う操作が行われた場合（Ｓ１：ＹＥＳ）、ＣＰＵ４１は、記憶部４４から商品情報データベース１００をＲＡＭ４３に読み込む（Ｓ２）。ＣＰＵ４１は、商品情報データベース１００に登録された商品の商品情報を一覧表示し、オペレータによるデータベースの編集を受け付ける（Ｓ３、Ｓ５：ＮＯ）。オペレータは、商品情報データベース１００に登録されたコード、商品名、単価、その他の情報を適宜編集することができる。オペレータがデータベースの編集を終了する操作を行うと（Ｓ５：ＹＥＳ）、ＣＰＵ４１は、編集によって商品情報データベース１００においてデータが変更された部分を更新する（Ｓ６）。ＣＰＵ４１は処理をＳ１１に進め、待機状態に移行する。

【0035】

オペレータによって商品（パン）用のラベルを発行する操作が行われた場合（Ｓ１１：ＹＥＳ）、ＣＰＵ４１は、記憶部４４から商品情報データベース１００をＲＡＭ４３に読み込む（Ｓ１２）。ＣＰＵ４１は、商品情報データベース１００に登録された商品の商品情報を表示部４８に一覧表示し、商品の選択と、ラベルの発行枚数の入力を受け付ける（Ｓ１３）。オペレータは、店頭に並べるために用意した商品（例えば焼き上がったパン）をデータベースから選択し、用意した商品の個数をラベルの発行枚数として入力する。ＣＰＵ４１は、選択された商品の商品情報に基づき、商品名およびＡＲマーカを、発行枚数分、ラベルシール２６に印刷する印刷指令を印刷装置６に出力する印刷処理を行う（Ｓ１５）。ＣＰＵ４１は処理をＳ１に戻し、待機状態に移行する。オペレータは、印刷されたラベルシール２６を商品に貼り付け、売り場に運び、店頭に陳列する。

【0036】

図３、図７～図１２を参照し、商品識別処理について説明する。識別端末４において、オペレータによって商品識別処理のアプリケーションを起動するための操作が入力部４７を介して行われた場合、記憶部４４に記憶された商品識別プログラムを制御部４０のＣＰＵ４１が読み出して実行することにより、商品識別処理が開始される。

【0037】

制御部４０のＣＰＵ４１は、表示部４８に初期状態の商品識別画面８０を表示する（Ｓ２１）。図３（Ａ）に示す商品識別画面８０では、初期状態において、撮影画像表示領域８２には何も表示されず、点数入力領域８１と税率設定領域８３がアクティブの状態となる。なお、スタートボタン８５は非アクティブの状態である。

【0038】

図７に示すように、ＣＰＵ４１は、商品点数と税率の入力を受け付ける（Ｓ２２）。すなわち点数入力領域８１においてタッチ操作による商品点数の入力（選択）が可能な状態となる。商品点数は、オペレータが目視で数えた撮影台２上の商品の数である。また、税率設定領域８３においてタッチ操作による税率の入力（設定）が可能な状態となる。商品点数の入力を受け付けた場合、ＣＰＵ４１は、入力された商品点数をＲＡＭ４３に記憶し、点数入力領域８１において、入力された商品点数を示す数値を囲む位置に、丸印を表示する処理を行う。また、税率が設定された場合、ＣＰＵ４１は、設定された税率をＲＡＭ４３に記憶し、例えば設定されたボタンの画像をボタンが押された状態の画像にして、設定状態がわかるように表示する。スタートボタン８５は、商品点数の入力と税率の設定がなされるまで、非アクティブな状態に維持される（Ｓ２３：ＮＯおよびＳ２３：ＹＥＳ，Ｓ２５：ＮＯ）。ＣＰＵ４１は、メッセージ表示領域８４に警告メッセージＡを表示する（Ｓ２７）。警告メッセージＡは、例えば「商品点数と税率を入力し、スタートボタンを押してください。」というメッセージである。

【0039】

商品点数の入力と税率の設定がなされると、ＣＰＵ４１はスタートボタン８５をアクティブ化し、オペレータのタッチ操作によるスタートボタン８５の操作の入力待ちを行う（Ｓ２３：ＹＥＳ，Ｓ２５：ＹＥＳ，Ｓ２６：ＮＯ，Ｓ２７）。スタートボタン８５が操作されると（Ｓ２６：ＹＥＳ）、ＣＰＵ４１は撮影装置３に撮影指令を出し、撮影部３１による撮影範囲Ｐの撮影を開始する（Ｓ３１）。撮影範囲Ｐの撮影は映像により行われる。ＣＰＵ４１は撮影装置３の制御部３２から映像データを受信し、表示部４８の撮影画像表示領域８２への表示を開始する。図１１（Ａ）に示すように、３つのカレーパン、２つのあんパン、および１つのメロンパンが入れられたトレー２５が撮影台２に載置された場合を例に説明する。撮影画像には、トレー２５と、ラベルシール２６が貼られた袋に包装された上記複数のパンが写る。各ラベルシール２６にはコードが印刷されており、撮影画像にもコードが写る。なお、パンの１つ（画面右上）は、ラベルシール２６を下向きにしてトレー２５に配置されており、撮影画像にコードが写らないものとする。

【0040】

図７に示すように、ＣＰＵ４１はＲＡＭ４３に商品リスト１２０を作成し、確定フラグおよび送信フラグを初期状態にする（Ｓ３２）。

【0041】

Ｓ３３～Ｓ４３では、撮影画像に写る商品のコードを抽出し、コードリスト１１０に記憶する処理が行われる。ＣＰＵ４１は、ＲＡＭ４３にコードリスト１１０を作成し（Ｓ３３）、映像データから撮影画像を取得する（Ｓ３５）。また、撮影画像に後述する目印２８が重ねて表示されている場合は消去する（Ｓ３６）。ＣＰＵ４１は、取得した撮影画像に対するコード抽出処理を行う（Ｓ３７）。コード抽出処理では、画像認識により、撮影画像においてＡＲマーカが抽出される。なお、商品の包装が他の商品のコードと重なって配置される場合があるが、包装が透明であれば、ＡＲマーカを抽出する処理への影響は生じにくい。

【0042】

ＣＰＵ４１は、抽出したＡＲマーカの四隅の位置座標をコード座標として取得する（Ｓ３８）。さらに図８に示すように、ＣＰＵ４１は、画像認識により、Ｓ３１で抽出した個々のＡＲマーカを含む個々の商品の画像を抽出し、その輪郭線の位置座標を輪郭座標として取得する（Ｓ４１）。ＣＰＵ４１は、コード座標と輪郭座標とを、ＡＲマーカに対応付けて、コードリスト１１０に記憶する（Ｓ４２）。コードリスト１１０には、ＡＲマーカの抽出順に識別番号が割り当てられる。ＣＰＵ４１は、コード座標に基づいて、ＡＲマーカのそれぞれに対し、識別対象として抽出したことを示す目印の表示を撮影画像に行う（Ｓ４３）。

【0043】

図１１（Ｂ）に示すように、抽出したＡＲマーカを示す目印２８が、撮影画像に重ねて表示される。目印２８は、コード座標に基づいて作成される。故にオペレータは、撮影画像において、コードが正しく識別されているか確認することができる。

【0044】

図８に示すように、ＣＰＵ４１は、撮影画像においてコードが１つも識別されなかった場合（Ｓ４５：ＮＯ）、メッセージ表示領域８４に警告メッセージＢを表示する（Ｓ４６）。警告メッセージＢは、例えば「撮影台に商品を置いてください。」というメッセージである。ＣＰＵ４１は処理をＳ３３に戻し、Ｓ３３～Ｓ４６の処理を繰り返して行う。すなわちコードリスト１１０は常時更新される。この場合にＣＰＵ４１は、コードリスト１１０を作成し直し（Ｓ３３）、すでに目印２８が表示されている場合は消去してから（Ｓ３６）、コードの抽出を行う。よってオペレータは、トレー２５上で商品が重なって配置され、コードが識別できない場合に、撮影画像に表示される目印２８を確認しながら商品の重なり状態を解消することができる。

【0045】

Ｓ５１～Ｓ５７では、撮影画像から抽出したコードを識別し、商品リスト１２０に商品情報を記憶する処理が行われる。ＣＰＵ４１は、コードリスト１１０に記憶された識別番号を、コードリスト１１０への記憶順に１つ選択する（Ｓ５１）。ＣＰＵ４１は、選択した識別番号が商品リスト１２０に記憶されていれば（Ｓ５２：ＹＥＳ）、処理をＳ５７に進める。選択した識別番号が商品リスト１２０に記憶されていない場合（Ｓ５２：ＮＯ）、ＣＰＵ４１はコード識別処理を行う（Ｓ５３）。ＣＰＵ４１は、記憶部４４の商品情報データベース１００に照会し、コード抽出処理で抽出したＡＲマーカが示すコード番号に対応する商品情報を検索する。コード識別処理は、商品情報データベース１００に登録された全ての商品情報に対して行われる。抽出したＡＲマーカに対応する商品情報が見つかると、ＣＰＵ４１は商品情報データベース１００から商品情報を読み込み、コードリスト１１０において選択した識別番号に対応するコード座標および輪郭座標と対応付けて、商品リスト１２０に記憶する（Ｓ５５）。またＣＰＵ４１は、設定済みの税率を商品の単価に掛け合わせて単価税額を演算し、商品リスト１２０に記憶する（Ｓ５６）。ＣＰＵ４１は、コードリスト１１０において未選択の識別番号があれば（Ｓ５７：ＹＥＳ）、処理をＳ５１に戻し、抽出したすべてのＡＲマーカに対するコード照会処理が行われる。コードリスト１１０のすべての識別番号が選択済みであれば（Ｓ５７：ＮＯ）、ＣＰＵ４１は処理をＳ６１に進める。

【0046】

Ｓ６１～Ｓ６７では、商品リスト１２０に記憶する商品情報の商品名を、撮影画像に写るコードの近傍に表示する処理が行われる。図９に示すように、ＣＰＵ４１は、商品リスト１２０に記憶された識別番号を、商品リスト１２０への記憶順に１つ選択する（Ｓ６１）。ＣＰＵ４１は、選択した識別番号に対応する確定フラグが１であり、撮影画像に商品名を表示させる処理が完了している場合には（Ｓ６２：ＹＥＳ）、処理をＳ７１に進める。選択した識別番号に対応する確定フラグが０の場合（Ｓ６２：ＮＯ）、ＣＰＵ４１は、識別番号に対応する商品の商品名を撮影画像において表示する位置を、コード座標に基づいて決定し（Ｓ６３）、撮影画像に写るコードの近傍に商品名を表示する（Ｓ６５）。ＣＰＵ４１は、確定フラグによって、撮影画像に同じ商品の商品名が二重に表示されるのを防止する。図１１（Ｃ）に示すように、コード抽出処理において抽出されたＡＲマーカの位置の近傍に、ＡＲマーカが示すコードに対応する商品情報から取得された有効な商品の商品名２９が、撮影画像に重ねて表示される。図９に示すように、ＣＰＵ４１は確定フラグを１にして（Ｓ６６）、処理をＳ６７に進める。ＣＰＵ４１は、商品リスト１２０において未選択の識別番号があれば（Ｓ６７：ＹＥＳ）、処理をＳ６１に戻し、未選択の識別番号に対応する商品名２９の表示を行う。商品リスト１２０のすべての識別番号が選択済みであれば（Ｓ６７：ＮＯ）、ＣＰＵ４１は処理をＳ６８に進める。

【0047】

例えば、図１２（Ａ）に示すように、オペレータが、トレー２５の右上角部において裏返しに配置されたパンを、コードが写るように表向きに直そうとして撮影範囲Ｐの左下方から腕を延ばすと、一部のコードが腕に隠れて撮影画像に写らなくなる。この場合、オペレータがパンの向きを直し撮影範囲Ｐから腕をどけると、撮影画像に写らなくなったコードは、再び撮影画像に写るようになる。ここで、Ｓ６１～Ｓ６７の処理を含むＳ３３～Ｓ８２の処理は、トレー２５に配置された全ての商品が識別されるまで、繰り返し実行される。その処理の過程において、コードリスト１１０が常時更新されるのに対し、商品リスト１２０は更新されない。故に、一部のコードが一時的に撮影画像に写らなくなっても、それらのコードに対応する商品名は、継続して、撮影画像に重ねて表示される。オペレータが、トレー２５の右上角部において裏返しに配置されたパンを表向きに直し、撮影範囲Ｐ内から腕を外すと、図１２（Ｂ）に示すように、撮影画像に写らなくなっていたコードは、再び撮影画像に写るようになる。この場合、コードリスト１１０には、商品リスト１２０に記憶されている識別番号が、再び記憶されるようになる。また、新たに識別されたコードに対応する商品名も、撮影画像に重ねて表示されるようになる。

【0048】

図９に示すように、ＣＰＵ４１は、商品リスト表示領域８６に、撮影画像から識別されたコードに対応する商品情報として、商品名と単価を一覧表示する（図３（Ｂ）参照）。商品名が同じ商品は１つにまとめて表示され、個数が表示される（Ｓ６８）。また、ＣＰＵ４１は、合計額表示領域８７に、全商品の個数と、個々の商品の単価を足し合わせた小計額と、個々の商品の単価税額を足し合わせた消費税額と、小計額と消費税額とを足し合わせた税込合計額とを表示する。

【0049】

Ｓ７１～Ｓ７８では、商品リスト１２０に記憶する商品情報をレジスター装置７に送信し、商品画像を撮影画像において非表示とする処理が行われる。図１０に示すように、ＣＰＵ４１は、商品リスト１２０に記憶された識別番号を、商品リスト１２０への記憶順に１つ選択する（Ｓ７１）。ＣＰＵ４１は、選択した識別番号に対応する送信フラグが１であり、対応する商品の商品情報をレジスター装置７へ送信する処理が完了している場合には（Ｓ７２：ＹＥＳ）、処理をＳ７８に進める。選択した識別番号に対応する送信フラグが０の場合（Ｓ７２：ＮＯ）、ＣＰＵ４１は、選択した識別番号に対応する商品の商品名、単価および税率を、レジスター装置７に送信する（Ｓ７３）。ＣＰＵ４１は、識別番号の商品に対応し、撮影画像に重ねて表示する目印２８と商品名２９を削除する（Ｓ７５）。ＣＰＵ４１は、撮影画像において、輪郭座標に基づく商品の輪郭線の内部領域に、予め作成した背景画像を表示する（Ｓ７６）。背景画像は、例えば、撮影台２に載置したトレー２５を、商品を配置しない状態で撮影した画像である。図１２（Ｃ）に示すように、輪郭線３０の内部領域に背景画像を表示することで、オペレータは、撮影画像において、識別番号の商品が、あたかもトレー２５から取り除かれたように見える。図１０に示すように、ＣＰＵ４１は、送信フラグを１にして（Ｓ７７）、処理をＳ７８に進める。ＣＰＵ４１は、商品リスト１２０において未選択の識別番号があれば（Ｓ７８：ＹＥＳ）、処理をＳ７１に戻し、レジスター装置への商品情報の送信と、輪郭線３０内への背景画像の表示とを行う。そして商品リスト１２０のすべての識別番号が選択済みであれば（Ｓ７８：ＮＯ）、ＣＰＵ４１は処理をＳ８１に進める。

【0050】

ＣＰＵ４１は、商品点数とコード点数を比較する。商品点数は、点数入力領域８１において入力された数である。コード点数は、商品リスト１２０に記憶される商品の数、すなわち識別番号の数である。商品点数がコード点数より多い場合（Ｓ８１：ＹＥＳ）、ＣＰＵ４１は、メッセージ表示領域８４に警告メッセージＣを表示する（Ｓ８２）。警告メッセージＣは、例えば「識別されていない商品があります。」というメッセージである。この場合、ＣＰＵ４１は、処理をＳ３３に戻す。

【0051】

商品点数がコード点数より多いうちは、Ｓ３３～Ｓ４６のコード抽出処理と、Ｓ５１～Ｓ５７のコード識別処理と、Ｓ６１～Ｓ６７の商品名２９を表示する処理と、Ｓ７１～ＳＳ７８の商品情報を送信する処理とが繰り返し実行される。商品名２９の表示は、二重に行われないように確定フラグによって管理される。また、商品情報の送信は、二重に行われないように送信フラグによって管理される。オペレータがパンの向きを正すことでコードが正しく抽出され、その結果、商品点数とコード点数とが一致する場合（Ｓ９１：ＮＯ）、ＣＰＵ４１は、メッセージ表示領域８４に識別完了メッセージを表示する（Ｓ９３）。識別完了メッセージは、例えば「全商品が識別されました。」というメッセージである。ＣＰＵ４１は、商品識別画面８０の表示状態を初期状態に戻して商品識別処理を最初から実行し直す。

【0052】

一方、コード点数が商品点数より多い場合（Ｓ９１：ＹＥＳ）、オペレータが商品点数を数え間違えた可能性がある。ＣＰＵ４１は、メッセージ表示領域８４に警告メッセージＤを表示する（Ｓ９２）。警告メッセージＤは、例えば「商品点数を入力し直してください。」というメッセージである。ＣＰＵ４１は、処理をＳ２１に戻し、商品識別画面８０の表示状態を初期状態に戻して商品識別処理を最初から実行し直す。

【0053】

レジスター装置７は、予め商品情報のデータベースを記憶する。商品リスト１２０に含まれる商品情報に基づき、販売された商品の商品名をデータベースから読み込む。レジスター装置７は商品ごとの個数を求め、単価と掛け合わせた金額を合計して小計額を算出する。さらに、小計額に税率を掛け合わせた消費税額と、小計額と消費税額とを足し合わせた税込合計額とを算出し、レジスター装置７の表示部に表示する。オペレータはカスタマーから商品の代金を受け取り、販売された商品の商品名、販売数、単価、合計金額等が印刷されたレシートを発行する。

【0054】

以上説明したように、商品識別システム１は、撮影画像から商品のコードを抽出し、商品情報との対応付けを行い、商品情報を表示部４８に表示する。撮影画像からコードを抽出し、商品情報に対応付ける処理は随時実行することができる。所定の操作が入力されると、商品識別システム１は、コードに対応する商品情報をレジスター装置７に送信する処理を開始することができる。この場合に商品識別システム１は、コードとの対応付けが完了した商品情報をＲＡＭ４３の商品リスト１２０に記憶し次第、順に、商品情報をレジスター装置７に送信する。故に商品識別システム１は、全ての商品情報をまとめてレジスター装置７に送信する場合と比べ、会計処理の全体にかかる時間を短縮することができる。

【0055】

商品識別システム１は、コードの抽出開始指示、レジスター装置７への送信開始指示、または税率等パラメータの入力完了指示を切っ掛けに、コードに対応する商品情報をレジスター装置７に送信する処理を開始することができる。故に商品識別システム１は、レジスター装置７における精算の処理に必要な処理が完了する前に、レジスター装置７への商品情報の送信が開始されてしまうことを防止できる。

【0056】

商品識別システム１は、レジスター装置７における精算の処理に必要なパラメータ（税率等）の入力が完了する前に、レジスター装置７への商品情報の送信が開始されてしまうことを防止できる。

【0057】

商品識別システム１は、レジスター装置７への商品情報の送信が完了した商品の画像を、例えば撮影範囲Ｐ内で商品を配置する部位の画像等（背景画像）で覆い、その商品情報を非表示とすることができる。故にオペレータは、識別されていない商品がどれかを把握しやすい。

【0058】

上記実施形態において、表示部４８は、本発明の「表示装置」に相当する。入力部４７は、本発明の「入力装置」に相当する。制御部４０は、本発明の「制御装置」に相当する。記憶部４４は、本発明の「記憶装置」に相当する。ＣＰＵ４１が実行するＳ２２の処理は、本発明の「入力処理」および請求項３における「パラメータ入力処理」に相当する。ＣＰＵ４１が実行するＳ３１、Ｓ３５の処理は、本発明の「撮影処理」に相当する。ＣＰＵ４１が実行するＳ３７の処理は、本発明の「抽出処理」に相当する。ＣＰＵ４１が実行するＳ５３の処理は、本発明の「取得処理」に相当する。ＲＡＭ４３の商品リスト１２０は、本発明の「一時記憶部」に相当する。ＣＰＵ４１が実行するＳ５５の処理は、本発明の「一時記憶処理」に相当する。ＣＰＵ４１が実行するＳ６５の処理は、本発明の「表示処理」に相当する。ＣＰＵ４１が実行するＳ７３の処理は、本発明の「送信処理」に相当する。ＣＰＵ４１が実行するＳ７６の処理は、本発明の「隠蔽処理」に相当する。

【0059】

本発明は上記実施形態から変更できる。コードはＡＲマーカを例に説明したが、公知のバーコード、ＱＲコード（登録商標）等をコードとして用いてもよいし、独自に開発したマーカをコードとして用いてもよい。商品情報は商品名と単価の他に、原材料、製造年月日、製造工場、アレルギー情報など、その他の情報を含んでもよい。

【0060】

識別端末４はタブレット端末としたが、パーソナルコンピュータ、スマートフォン等、他のデバイスを用いてもよい。パーソナルコンピュータを使用する場合、タッチパネル機能を搭載したディスプレイを用いてオペレータによる操作の入力を行うとよい。また、タブレット端末に搭載するカメラ機能を、撮影装置３として使用してもよい。この場合、カメラ機能を有するタブレット端末は、商品識別装置として動作し、本実施形態の商品識別システム１として単体で機能することができる。

【0061】

本発明におけるパラメータの一例として税率を挙げたが、他にも、割引率、値引き額、有料レジ袋の有無等、合計金額を算出する上で必要となる要素を設定してもよい。コード認識処理は、商品識別処理の実行が開始されたら常時行われるようにしてもよい。また、Ｓ７６で商品の画像に背景画像を重ねて表示する処理は行わなくてもよい。あるいはＣＰＵ４１は、輪郭座標の取得を行わず、Ｓ７６でコード座標に基づきＡＲマーカ、またはＡＲマーカを中心とする周辺の領域に背景画像を表示してもよい。もしくは、ラベルシール２６が商品の包装の所定位置に貼り付けられるものとして、ＣＰＵ４１は、輪郭座標の取得を行わず、Ｓ７６でコード座標に基づきＡＲマーカの位置および傾きを算出し、算出した情報に基づき商品およびラベルシール２６を覆う大きさの四角い背景画像をラベルが表示されている部分に貼り付けてもよい。背景画像は、必ずしもトレー２５の撮影画像でなくてもよく、単に単色のベタ塗り画像や、例えばチェックマークや花などを描いた所定の画像等であってもよい。または、ＡＲマーカに設けた目印２８である枠体の色を、例えば赤に変更したり、商品名２９の文字色や背景色を、例えば赤に変更したりすることで、オペレータが商品のデータを送信済みであることを認識しやすくしてもよい。

【0062】

本実施形態において、ＣＰＵ４１は、スタートボタン８５の操作を契機に、コード抽出処理の実行を開始し、さらにコード識別処理を実行した後、商品情報をレジスター装置７に送信する。スタートボタン８５の操作は、コード抽出処理の開始を指示する操作に限らず、例えば商品情報をレジスター装置７に送信する指示の操作としてもよい。この場合、例えば、図１３に示すように、Ｓ２２１～Ｓ２５１，Ｓ２７１の処理をＳ６８の前に実行し、Ｓ２６１，Ｓ２７１の処理をＳ６８の後に実行するようにするとよい。なお、Ｓ２２１～Ｓ２７１の処理は、図７のＳ２２～Ｓ２７と同等の処理である。また、図７のＳ２１の処理の後はＳ３１に移行すればよい。これによりＣＰＵ４１は、オペレータによるスタートボタン８５の操作を契機に、商品情報をレジスター装置７に送信することができる。

【0063】

スタートボタン８５を廃し、図７もしくは図１３において、Ｓ２６の処理を削除して、Ｓ２５：ＹＥＳの場合にＳ３１に移行するようにしてもよい。すなわちＣＰＵ４１は、商品点数の入力および税率の設定がなされ次第、コード抽出処理の実行を開始し、さらにコード識別処理を実行した後、商品情報をレジスター装置７に送信してもよい。レジスター装置７への商品情報の送信と同時もしくはそれより前に税率の設定がなされることで、レジスター装置７への税率の送信漏れを防止できる。また、スタートボタン８５の操作の手間を省くことができる。

【0064】

図１４に示すように、Ｓ６８とＳ７１の間に、Ｓ７５の処理と同様な、撮影画像から商品名を消去するＳ７５１の処理を行い、Ｓ７３とＳ７７の処理の間に、Ｓ６３と同様な、商品名の表示位置を決定するＳ６３１の処理と、Ｓ６５と同様な、コードの近傍に商品名を表示するＳ６５１の処理とを実行してもよい。すなわちＣＰＵ４１は、商品情報をレジスター装置７に送信する場合に、撮影画像に重なる商品名をいったん消去し、商品情報の送信を行い次第、その商品の商品名を、撮影画像に重ねて表示してもよい。このような処理を行うことで、商品識別システム１は、レジスター装置７への商品情報の送信が完了した商品から順に、その商品情報を撮影画像に重ねて表示することができる。故にオペレータは、識別されていない商品がどれかを把握しやすい。

【0065】

また、ＣＰＵ４１は、図１４の変形例において、予めＳ４１で輪郭座標を抽出する際に、輪郭線内の商品画像を切り抜いて保存しておき、Ｓ７５１で商品名を消去する際に、撮影画像を背景画像と置き換えてもよい。そしてＣＰＵ４１は、Ｓ６５１でレジスター装置７への送信が完了した商品の商品名を表示する際に、保存した商品画像を背景画像に重ねて表示するようにしてもよい。

【0066】

上記実施形態では、識別子としてＡＲマーカを使用したが、ＡＲマーカに代えて、ＱＲコード（登録商標）、カメレオンコード（登録商標）等の２次元コード、バーコード、ＲＦＩＤタグ等を使用してもよい。

【符号の説明】

【0067】

１ 商品識別システム
３ 撮影装置
７ レジスター装置
４０ 制御部
４１ ＣＰＵ
４３ ＲＡＭ
４４ 記憶部
４７ 入力部
４８ 表示部
１２０ 商品リスト

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】