特開 2022-164939 販売システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022164939

(43)【公開日】2022-10-28

(54)【発明の名称】販売システム

(51)【国際特許分類】

   G07G 1/00 20060101AFI20221021BHJP

   G06Q 30/06 20120101ALI20221021BHJP

【ＦＩ】

G07G1/00 311Z

G06Q30/06

【審査請求】未請求

【請求項の数】2

【出願形態】ＯＬ

(21)【出願番号】P 2021070056

(22)【出願日】2021-04-18

(71)【出願人】

【識別番号】506359288

【氏名又は名称】株式会社アスタリスク

(74)【代理人】

【識別番号】100191189

【弁理士】

【氏名又は名称】浅野 哲平

(74)【代理人】

【識別番号】100199761

【弁理士】

【氏名又は名称】福屋 好泰

(72)【発明者】

【氏名】鈴木 規之

【テーマコード（参考）】

3E142

5L049

【Ｆターム（参考）】

3E142AA10

3E142CA20

3E142EA04

3E142FA28

3E142JA01

5L049BB72

(57)【要約】

【課題】ＲＦタグを付すことができない商品であっても効率的に会計処理を行うことができる販売システムを提供する。
【解決手段】本発明の販売システム１００は、カメラ１０によって生成された画像に基づいて顧客を認識する認識部と、前記顧客によってピックアップされた商品Ｇを特定する特定部と、前記認識された顧客に対して、前記特定された商品の会計情報を提示するレジ装置４０と、を備えることを特徴とする。
【選択図】図２

【特許請求の範囲】

【請求項1】

カメラによって生成された画像に基づいて顧客を認識する認識部と、
前記顧客によってピックアップされた商品を特定する特定部と、
前記認識された顧客に対して、前記特定された商品の会計情報を提示する会計処理装置と、
を備えることを特徴とする販売システム。

【請求項2】

前記認識部は複数の顧客を認識し、
前記会計処理装置は、一の前記顧客の会計情報と、当該一の顧客に連続する他の顧客の会計情報を提示することを特徴とする、
請求項１に記載の販売システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、店鋪における商品販売に用いられる販売システムに関するものである。

【背景技術】

【0002】

商品販売における会計処理の効率化を図るために、例えば特許文献１に記載の技術が提案されている。特許文献１に記載された技術は、イベント会場等での商品販売を、ＲＦＩＤ技術を用いて効率化する販売システムであって、イベント会場の出入り口に配置されるゲートを備えている。ゲートは、商品の各々に付されたＲＦタグやユーザが有するＩＤカードから商品ＩＤやユーザＩＤを読み取る読取部と、読み取った商品ＩＤおよびユーザＩＤをサーバに送信する送信部と、を備えている。サーバは、ゲートから受信した商品ＩＤおよびユーザＩＤを購入情報としてメモリに記憶するとともに、当該購入情報に基づいて生成した決済情報をレジ装置へと送信する。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０２０－１９１０４２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、上記特許文献の販売システムでは、販売されている商品の全てにＲＦタグを付す必要があり、ＲＦタグを付すことができない商品を取り扱っている店鋪、例えば、店舗において調理された食品をそのままピックアップして会計する店鋪では上記の販売システムを用いることが困難である。

【0005】

本発明は、ＲＦタグなどの識別媒体を付すことができない商品であっても効率的に会計処理を行うことができる販売システムを提供することを目的とする。

【課題を解決するための手段】

【0006】

上記目的を達成するため、本発明の販売システムは、カメラによって生成された画像に基づいて顧客を認識する認識部と、前記顧客によってピックアップされた商品を特定する特定部と、前記認識された顧客に対して、前記特定された商品の会計情報を提示する会計処理装置と、を備えることを特徴とする。

【0007】

また、前記認識部は複数の顧客を認識し、前記会計処理装置は、一の前記顧客の会計情報と、当該一の顧客に連続する他の顧客の会計情報を提示することを特徴とする。

【発明の効果】

【0008】

本発明の販売システムは、ＲＦタグを付すことができない商品であっても効率的に会計処理を行うことができる。

【図面の簡単な説明】

【0009】

【図1】本発明の第１実施形態に係る販売システムが用いられる店鋪の概略図

【図2】（ａ）上記販売システムが有するハードウェア構成図、（ｂ）当該販売システムが有するカメラのハードウェア構成図、（ｃ）当該販売システムが有するＧＰＵのハードウェア構成図、（ｄ）当該販売システムが有するサーバのハードウェア構成図、（ｅ）当該販売システムのレジ装置のハードウェア構成図

【図3】（ａ）本発明の第２実施形態に係る販売システムが有する陳列装置の正面図、（ｂ）当該陳列装置の側面断面図

【図4】上記陳列装置のハードウェアの構成を示す図

【発明を実施するための形態】

【0010】

以下、図面に基づいて本発明の実施形態にかかる販売システムを説明する。

【0011】

［第１実施形態］

【0012】

図１に示すように、本発明の第１実施形態にかかる販売システム１００（図２）を備える店鋪は、多数の未使用トレイＴが置かれるトレイ台１、商品Ｇが陳列されている陳列エリアＥ１、及び会計を行う会計エリアＥ２を含む販売エリアを備えている。これらトレイ台１、陳列エリアＥ１、及び会計エリアＥ２は直線的に配置されており、陳列エリアＥ１および会計エリアＥ２に沿ってトレイＴを乗せるレーン３及び顧客の移動経路Ｒが設けられている。陳列エリアＥ１は複数の商品群を陳列する陳列装置である陳列台２を備えている。陳列台２は、移動経路Ｒに沿って水平に延在する載置面２ａを有しており、当該載置面２ａに商品Ｇが載置されている。当該載置面２ａから移動経路Ｒに向かって、トレイＴを載せるレーン３が水平に設けられている。会計エリアＥ２には２つのレジ装置４０（会計処理装置）が移動経路Ｒに沿って併設されている。なお、当該店鋪は、例えば、商品Ｇであるドーナツを販売する店鋪や、天ぷらなどのトッピングを商品Ｇとして販売するうどんの飲食店などが挙げられる。

【0013】

図２に示すように、上記の店鋪において用いられる販売システム１００は、上記２つのレジ装置４０に加えて、カメラ１０と、画像処理装置（以下、ＧＰＵ２０という。）と、サーバ３０と、を備えている。当該カメラ１０はＧＰＵ２０と通信可能に有線接続または無線接続されている。また、当該店鋪にはネットワークＮが形成されており、ＧＰＵ２０および各レジ装置４０が当該ネットワークＮを介してサーバ３０と通信可能に接続されている。

【0014】

カメラ１０は、図１に示すように、販売エリアの天井に設置されており、所定のフレームレートで販売エリアを撮像し、販売エリアの画像を生成する。このようなカメラ１０は、図２に示すように、販売エリアを撮像する撮像部として機能するイメージセンサ１１と、イメージセンサ１１を制御し、画像を生成する生成部として機能するＣＰＵ１２と、生成された画像を一時的に記憶する記憶部として機能するメモリ１３と、ＧＰＵ２０に対して画像を送信する送信部として機能する通信モジュール１４と、を備えている。

【0015】

ＧＰＵ２０は、カメラ１０から画像を受信する受信部として機能する通信モジュール２１と、受信した画像を処理する処理部として機能するＣＰＵ２２と、当該画像処理のプログラムと画像を記憶する記憶部として機能するメモリ２３と、画像処理によって取得された情報をサーバ３０へと送信する送信部として機能するネットワークモジュール２４と、を備えている。当該処理部であるＣＰＵ２２は、カメラ１０から画像を受信する度に、当該画像に含まれる顧客及び商品Ｇを認識する。顧客及び商品Ｇの認識方法は、特に限定されないが、例えば、顧客や商品Ｇの外観特徴に基づいて認識することができる。具体的には、顧客や商品Ｇを上方から観察した場合の外観特徴（形状、色、大きさ）を予め定めておき、当該外観特徴に一致又は近似する画素パターンが顧客や商品Ｇとして認識される。また、他の認識方法としては、機械学習を用いても構わない。具体的には、予め人物や商品Ｇの画像を教師データとして用いて学習済みモデルを生成する。そして、当該学習済みモデルに対して、カメラ１０から受信した画像を入力することで、当該画像に含まれる顧客および商品Ｇを認識する。

【0016】

ここで、処理部であるＣＰＵ２２は、画像中の商品Ｇを認識すると、当該認識した商品Ｇの外観特徴や学習済みモデルに基づいて商品ＩＤを特定する。商品ＩＤが特定されると、送信部として機能するネットワークモジュール２４が、認定した商品Ｇの位置情報（画像における商品Ｇの座標）に商品ＩＤを対応付けてサーバ３０へと送信する。また、ＣＰＵ２２は、顧客を認識すると、当該認識した顧客に対して顧客ＩＤを付与し、ネットワークモジュール２４を介して、当該顧客ＩＤに顧客の位置情報（画像における顧客の座標）を対応づけてサーバ３０へと送信する。

【0017】

サーバ３０は、ＧＰＵ２０から情報を受信する受信部およびレジ装置４０に対して情報を送信する送信部として機能するネットワークモジュール３４と、特定処理、判定処理、及び生成処理などの処理を実行するＣＰＵ３２と、これらの処理をＣＰＵ３２に実行させるプログラムおよびＧＰＵ２０から受信した情報を記憶する記憶部として機能するメモリ３３と、と備えている。

【0018】

上記ＣＰＵ３２が実行する特定処理は、ＧＰＵ２０から受信した情報に基づいて、ピックアップされた商品Ｇと当該商品Ｇをピックアップした顧客を対応づけて特定する処理である。ピックアップされた商品Ｇの特定は、例えば、レーン３（図１）上の位置情報（座標値）を有する商品Ｇがピックアップされた商品Ｇであると特定する。また、商品Ｇをピックアップした顧客の特定は、例えば、当該特定された商品Ｇの位置情報に近似する位置情報の顧客が当該商品Ｇをピックアップした顧客であると特定される。そして、特定された商品Ｇの商品ＩＤと、特定された顧客の顧客ＩＤが対応づけられる。このようにサーバ３０のＣＰＵ３２は、ピックアップされた商品Ｇと当該商品Ｇをピックアップした顧客を対応づけて特定する特定部として機能する。また、記憶部として機能するメモリ３３は、ピックアップされた商品Ｇ（商品ＩＤ）と当該商品Ｇをピックアップした顧客（顧客ＩＤ）を対応づけて記憶する。

【0019】

上記ＣＰＵ３２が実行する判定処理は、ＧＰＵ２０から受信した顧客の位置情報が会計エリアＥ２に含まれるか否かを判定する第１判定処理と、第１判定処理において顧客の位置情報が会計エリアＥ２に含まれると判定された場合に、当該顧客の位置情報に基づいて、顧客に近いレジ装置４０を判定する第２判定処理と、を含む。このようにサーバ３０のＣＰＵ３２は、顧客に近いレジ装置４０を判定する判定部として機能する。また、記憶部として機能するメモリ３３は、第１判定処理および第２判定処理の判定結果を記憶する。

【0020】

上記ＣＰＵ３２が実行する生成処理は、会計情報を生成する処理である。当該会計情報は、ピックアップされた商品Ｇの名称や、当該商品Ｇの価格を含み、上記特定処理において特定された商品ＩＤに基づいて生成される。具体的には、サーバ３０のメモリ３３（記憶部）には、各商品Ｇの名称や各商品Ｇの価格と商品ＩＤの対応関係を定めた商品テーブルが予め記憶されており、特定された商品ＩＤを検索キーとして商品Ｇの名称や価格が抽出されることで会計情報が生成される。生成処理によって生成された会計情報は、記憶部として機能するメモリ３３に記憶され、ネットワークモジュール３４を介して、判定処理において判定されたレジ装置４０に送信される。

【0021】

レジ装置４０は、サーバ３０から会計情報を受信する受信部として機能するネットワークモジュール４４と、受信した会計情報を記憶する記憶部として機能するメモリ４３と、受信した会計情報を顧客に対して表示する表示部として機能するディスプレイ４５と、会計情報に基づいて会計処理を行う会計部として機能するＣＰＵ４２と、キャッシャー４６と、を備えている。レジ装置４０のネットワークモジュール４４は、会計処理が実施されると、会計が完了した旨をサーバ３０へと送信する送信部としても機能する。

【0022】

上記のように構成される販売システム１００は、所定のフレームレートで販売エリアを撮像するカメラ１０によって販売エリアの画像が生成され、当該画像を処理するＧＰＵ２０によって、販売エリアにおける商品Ｇおよび顧客の存在が認識される。そして、サーバ３０によって、当該顧客によってピックアップされた商品Ｇが特定され、特定された商品Ｇの会計情報がレジ装置４０に送信されて、レジ装置４０によって会計処理が実施される。このように、本実施形態の販売システム１００によれば、従来のように商品ＧにＲＦタグ等の識別媒体を付すことなく、顧客によってピックアップされた商品Ｇが特定されて会計処理を実施することができる。そして、会計処理において、ピックアップされた商品Ｇの情報を入力する必要がないので効率的に会計処理を実施することができる。

【0023】

また、上記実施形態において、ＧＰＵ２０が複数の顧客を認識した場合には、当該複数の顧客の顧客ＩＤとその位置情報を送信するとともに、認識した商品Ｇの商品ＩＤとその位置情報をサーバ３０に送信する。これらの情報を受信したサーバ３０は、特定処理において、顧客の位置情報と商品Ｇの位置情報に基づいて顧客がピックアップした商品Ｇを特定する。具体的には、顧客の位置情報と各商品Ｇの位置情報の差分値を求め、当該差分値が一定値以内にある商品Ｇをピックアップした商品Ｇであると特定し、当該商品Ｇの商品ＩＤを顧客ＩＤに対応付ける。また、サーバ３０のＣＰＵは、上記判定処理の第２判定処理において、複数の顧客の位置情報に近いレジ装置４０が共通する場合には、複数の顧客がグループであると認定し、当該レジ装置４０に対して複数の顧客の会計情報を送信する。レジ装置４０は、サーバ３０から複数の会計情報を受信すると、これらの会計を個々に行うか、又はこれらの会計を一括で行うかの選択画面をディスプレイに提示させる。このような態様によれば、グループで来店した顧客の会計を一括で処理することも可能となる。

【0024】

［第２実施形態］

【0025】

上記の第１実施形態では、カメラ１０によって生成された画像に基づいて顧客および商品Ｇを認識しているが、第２実施形態は、カメラ１０によって生成された画像に基づいて顧客を認識し、荷重センサの出力に基づいて商品Ｇを認識する点で第１実施形態と異なっている。以下、第１実施形態と異なる点を中心に説明する。

【0026】

第２実施形態の陳列エリアＥ１には、図３に示すように、商品Ｇを陳列する陳列装置５０が設けられている。陳列装置５０は、商品Ｇを陳列する陳列棚５１と、陳列された商品Ｇを検出するセンサ５５と、を備えている。陳列棚５１は、上下に設けられた複数の棚板５２と、棚板５２を支持する側壁５３と、を備えている。棚板５２の各々には、複数のトレイＴが載置されており、トレイＴの各々には同種の商品Ｇが複数載せられている。各トレイＴと棚板５２の間に上記センサ５５であるロードセル５５（荷重センサ）が設けられている。ロードセル５５は、トレイＴ上に載せられた複数の商品Ｇの重さを検出するセンサであって、図４に示すように、その出力信号がアナログ－デジタル変換器（以下、ＡＤＣ５６）を介してマイコン（以下、ＭＣＵ５７）へと入力される。ＭＣＵ５７は、ＣＰＵとメモリを備えており、メモリに予め記憶された認識処理および送信処理を含むプログラムがＣＰＵによって実行される。

【0027】

認識処理は、ロードセル５５の出力に基づいてトレイＴに置かれた商品Ｇがピックアップされたことを認識する処理であって、取得処理、差分処理、比較処理、及び判定処理を含む。取得処理は、ＡＤＣ５６を介してロードセル５５の出力値を所定の周期で取得する処理であり、取得した出力値はメモリに記憶される。差分処理は、取得処理において取得した出力値と、その前回の取得処理において取得した出力値の差分を求める処理である。比較処理は、差分処理において得た差分値と閾値とを比較する処理である。この閾値は、トレイＴに載せられている商品Ｇの１つあたりの重さに対応する値であり、予め、実験的にトレイＴに１つの商品Ｇを載せた状態でロードセル５５の出力値を取得することで定められる。判定処理は、商品Ｇがピックアップされたか否かを判定する処理であって、比較処理の結果、差分値が閾値に満たない場合には、トレイＴから商品Ｇがピックアップされていないと判定し、差分値が閾値を超えた場合には、トレイＴから商品Ｇがピックアップされたものと判定する。ＣＰＵは、上記の取得処理から判定処理を各トレイＴのロードセル５５の出力に対して実行する。このようにＣＰＵが認識処理を実行した結果、商品Ｇがピックアップされたと判定されると、ＣＰＵは、そのロードセル５５に対応するトレイＴのトレイＩＤを特定し、ネットワークモジュール５８を介してトレイＩＤをサーバ３０に送信する（送信処理）。

【0028】

本実施形態のサーバ３０は、第１実施形態と同様にＧＰＵ２０から顧客の位置情報と顧客ＩＤを受信するとともに、陳列装置５０からトレイＩＤを受信する。サーバ３０のＣＰＵ３２は、特定処理において、受信したトレイＩＤと顧客の位置情報に基づいて、ピックアップされた商品Ｇと、当該商品Ｇをピックアップした顧客を対応づけて特定する。具体的には、本実施形態のサーバ３０のメモリ３３には、第１実施形態の商品テーブルに加えて、トレイテーブルと、商品－トレイ対応テーブルと、が予め記憶されている。トレイテーブルは、トレイＩＤとトレイＴの位置情報が対応付けられている。商品－トレイ対応テーブルは、トレイＩＤと商品ＩＤが対応付けられている。そして、サーバ３０のＣＰＵ３２は、受信したトレイＩＤに対応するトレイＴの位置情報をトレイテーブルから抽出し、また、当該トレイＩＤに対応する商品ＩＤを商品－トレイ対応テーブルから抽出する。そして、サーバ３０のＣＰＵ３２は、抽出したトレイＴの位置情報に近い顧客の位置情報を検索し、当該顧客の顧客ＩＤに対して抽出した商品ＩＤを対応付ける。

【0029】

そして、サーバ３０のＣＰＵ３２は、第１実施形態と同様に、判定処理および生成処理を実行し、該当するレジ装置４０に対して会計情報を送信し、レジ装置４０において会計処理が実行される。

【0030】

第１実施形態および第２実施形態に基づいて本発明の販売システムを説明したが、上記各実施形態は下記のように変形した態様であっても構わない。

【0031】

＜変形例１＞
陳列エリアＥ１を撮像するカメラによって生成された画像、及び陳列エリアＥ１に設けられた荷重センサの出力に基づいて、商品Ｇがピックアップされたことを認識しても構わない。例えば、第２実施形態において、陳列棚に複数のカメラを設けても構わない。具体的には、各トレイＴの上方に位置する棚板の下面にカメラを設け、各カメラがトレイＴに置かれた商品Ｇを撮像する態様であっても構わない。各カメラによって個別に生成されたトレイＴ上の商品Ｇの画像はＧＰＵ２０に送信されて、ＧＰＵ２０によってトレイＴからピックアップされた商品Ｇが認識される。

【0032】

＜変形例２＞
上記第１実施形態では販売エリアを撮像する単一のカメラ１０を用いているが、複数のカメラ１０を用いても構わない。複数のカメラ１０によって販売エリアを撮像する場合には、各カメラ１０は生成した画像をＧＰＵへと送信する。ＧＰＵは、複数のカメラ１０から受信した画像を組み合わせて販売エリアのエリア画像を生成し、当該エリア画像に対して第１実施形態の画像処理を行う。

【0033】

また、複数のカメラの各々に対応させてＧＰＵを設けても構わない。この場合には、各ＧＰＵは、上記第１実施形態の画像処理を行い、認定した商品Ｇの位置情報に商品ＩＤを対応付けてサーバ３０へと送信する。また、各ＧＰＵは、認定した顧客の位置情報に顧客ＩＤを対応付けてサーバ３０へと送信する。サーバ３０は、各ＧＰＵから受信した商品Ｇおよび顧客の位置情報に基づいて、販売エリア全体における商品Ｇおよび顧客の位置情報を特定したうえで、上記の特定処理、判定処理、生成処理を実行する。

【0034】

＜変形例３＞
上記第１実施形態および第２実施形態で用いるカメラ１０はＴＯＦカメラであっても構わない。ＴＯＦカメラは、各ピクセルの色情報と各ピクセルの距離情報を出力し、当該色情報及び距離情報をＧＰＵへと送信する。ＧＰＵはＴＯＦカメラから受信した色情報に基づいて画像を生成するとともに、生成された画像に基づいて認識した商品や顧客の位置情報を距離情報に基づいて正確に検出することができる。また、ＧＰＵは、距離情報に基づいて認識した顧客の腕を検出し、フレーム毎に受信する距離情報に基づいて腕のモーションを検出することができ、当該モーションに基づいてピックアップした商品を特定することができる。

【0035】

＜変形例４＞
上記実施形態では、商品ＧをトレイＴにピックアップする態様であったが、顧客が持参したバッグ（袋）や箱や、商品Ｇを持ち帰るために店鋪に予め準備されたバッグ（袋）や箱であっても構わない。当該態様においては、顧客が商品をピックアップすると同時に持参したバッグ（袋）や箱に商品Ｇを入れることができる。

【0036】

＜変形例５＞
上記陳列エリアＥ１と会計エリアＥ２の間に手渡しエリアを設けても構わない。当該手渡しエリアには手渡しされる商品が載せられる台が設けられており、当該商品がカメラ１０によって認識される。このような態様によれば、顧客によって特別にオーダされた商品、例えば「氷少なめ」などの商品にも対応することができる。

【0037】

＜変形例６＞
会計処理装置は、現金支払だけでなく、電子マネーやクレジットカードを用いた会計処理を実施するものであっても構わない。また、電子マネーやクレジットカードでのみ会計処理を実施するものであっても構わない。また、クレジットカードを用いた会計処理を実施する場合には、会計処理装置は、トレイ台１よりも上流に配置されたクレジットカードの読取装置を更に備えても構わない。クレジットカードの読取装置は、顧客が有するクレジットカードを読み取り、読み取ったクレジットカードの情報をサーバに送信する。サーバは、クレジットカードの情報を受信すると、当該クレジットカードの情報をクレジット会社のシステムに問い合わせして、当該クレジットカードが使用可能であるか否かを取得する。サーバは、上記特定処理、判定処理、及び生成処理を実行し、生成処理において生成された会計情報にクレジットカードの情報を対応付けて会計処理装置に送信する。会計処理装置では、サーバから受信した会計情報およびクレジットカードの情報を用いて会計処理を実行する。

【符号の説明】

【0038】

１０ カメラ
２０ ＧＰＵ
３０ サーバ
４０ レジ装置
５０ 陳列装置
１００ 販売システム

【図1】

【図2】

【図3】

【図4】