特許 6557702 顧客分析システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6557702

(24)【登録日】2019年7月19日

(45)【発行日】2019年8月7日

(54)【発明の名称】顧客分析システム

(51)【国際特許分類】

   G06Q 30/02 20120101AFI20190729BHJP

【ＦＩ】

   G06Q30/02 300

【請求項の数】1

【全頁数】9

(21)【出願番号】特願2017-95754(P2017-95754)

(22)【出願日】2017年5月12日

(65)【公開番号】特開2018-194901(P2018-194901A)

(43)【公開日】2018年12月6日

【審査請求日】2017年5月18日

(73)【特許権者】

【識別番号】511034491

【氏名又は名称】株式会社データフォース

(74)【代理人】

【識別番号】100133802

【弁理士】

【氏名又は名称】富樫 竜一

(74)【代理人】

【識別番号】100197181

【弁理士】

【氏名又は名称】森下 泰子

(72)【発明者】

【氏名】北川政知

【審査官】 塩田 徳彦

(56)【参考文献】

【文献】 特開２００４−３２６２０８（ＪＰ，Ａ）

【文献】 特開２０１６−１４６０２６（ＪＰ，Ａ）

【文献】 特開２００８−１５８８１９（ＪＰ，Ａ）

【文献】 特開２００３−０９９５８２（ＪＰ，Ａ）

【文献】 特開平０９−１６０９９３（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｑ １０／００ − ９９／００

(57)【特許請求の範囲】

【請求項1】

撮影時刻および画像データを取得することができる店舗の入り口若しくはゲートから入店する来店者の撮影を行う第１の撮像手段および購入する商品の代金を支払う来店者を撮影する第２の撮像手段と、
前記撮像手段によって取得した画像データに含まれる来店者の顔画像を解析することによって当該来店者に固有の顔識別情報を取得する顔認識手段と、
前記来店者が購入した商品、価格および販売時刻を含む販売履歴情報を前記店舗に設置したキャッシュレジスタを介して取得し管理する商品管理手段と、
前記顔識別情報に関連づけられた販売履歴情報を抽出可能に構成した顧客データベースと、
前記撮像手段によって取得した画像から来店者の顔識別情報を取得するとともに、当該顔識別情報を取得した来店者の画像を選択可能に一覧表示する表示手段を有し、
前記一覧表示された来店者の画像から任意の来店者を選択した場合に、前記顔識別情報に基づいて前記顧客データベースに記録されている前記顔識別情報に関連づけられた販売履歴情報を検索し、記録がある場合には当該顔識別情報に関連づけられた販売履歴情報を表示するように構成し、
前記商品管理手段から当該来店者画像を撮影した時刻若しくは当該時刻を基準として一定時間経過後にキャッシュレジスタを介して取得し記録された販売履歴情報と店舗の棚割りデータを取得して表示するように構成し、
顔認識手段によって特定した同一の来店者における入店から退店に至る店内滞在時間を前記第１の撮像手段による撮影時刻および第２の撮像手段による撮影時刻に基づいて取得して前記顧客データベースに記録する構成したことを特徴とする顧客分析システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、店舗に来店した客に関して購入商品等を分析し管理する顧客分析システムに関するものである。

【背景技術】

【0002】

従来、物品販売を行う店舗のマーケティング分析を行う特許文献１記載のシステムが知られている。当該システムは、店舗内の商品陳列台の上にＩＣタグ情報読取器を設置してＩＣタグを取り付けた陳列商品を置き、これにより商品陳列台から陳列商品を取り出したり戻したりする動作を検知可能に構成したものであり、顧客が陳列台から商品を取上げたタイミングをＩＣタグ情報読取器によって検知して店舗内撮影カメラ５０３を用いて撮影することで顧客の顔認証を行って顧客の特定を行い、顧客固有の商品販売履歴から顧客趣味を分析し、顧客推奨商品リストを瞬時出力する等のインストアプロモーション支援を行うものである。

【0003】

商品を販売する店舗に於いて、売り上げを向上させるためにその店舗に来店する顧客の嗜好や動向を把握することは重要である。顧客は商品を購入するために来店するわけであるが、購入する商品を決めた上で来店したり、来店してから商品を選択したり、購入する商品を決めた上で来店したけれども他の商品を購入したり、予定していなかった商品をついでに購入する等その動向は様々である。また、その店舗の常連客の嗜好や動向を推測し、その常連客に応じた品揃えを行うことは売り上げの向上に欠かすことができないものである。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００８−２５７４８８号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

常連客やその店舗に来店する客層に応じて、どのような品揃えをすべきかという分析を行うことは売り上げの向上に欠かすことができないものである。すなわち、どのような商品を仕入れて陳列するのか、どのような商品と組み合わせて品揃えをしたときに売り上げが向上するのか等を客観的な情報として取得できることが好ましい。

【0006】

本発明は当該事情に鑑み発明したものであって、来店者に対する過去の販売履歴をデータベースとして蓄積し分析することにより、所謂常連客の嗜好に沿った品揃えによる売り上げの向上を図ることができる顧客分析システムを提供することを目的とするものである。
また、商品の品揃えや配置（棚割データ）と販売履歴の関係を把握することにより売り上げの向上を図ることが出来る顧客分析システムを提供することを目的とするものである。

【課題を解決するための手段】

【0007】

上記課題を解決するために本発明は以下の構成を有する。すなわち、
店舗に設置した少なくとも一つの撮像手段と、
前記撮像手段によって取得した画像データに含まれる来店者の顔画像を解析することによって当該来店者に固有の顔識別情報を取得する顔認識手段と、
前記来店者が購入した商品、価格および時刻を含む販売履歴情報を前記店舗に設置したキャッシュレジスタを介して取得し管理する商品管理手段と、
前記顔識別情報に関連づけられた販売履歴情報を抽出可能に構成した顧客データベースと、
前記撮像手段によって取得した画像から来店者の顔識別情報を取得するとともに、当該顔識別情報を取得した来店者の画像を選択可能に一覧表示する表示手段を有し、
前記一覧表示された来店者の画像から任意の来店者を選択した場合に、前記顔識別情報に基づいて前記顧客データベースに記録されている販売履歴情報を検索し、記録がある場合には当該販売履歴情報を表示するように構成したことを特徴とする顧客分析システム。

【発明の効果】

【0008】

本発明に係る顧客分析システムは、データベースとして蓄積する来店者の販売履歴を、顔識別情報を取得した画像の撮影時刻を基準とした一定の時間帯における複数のＰＯＳレジの情報（販売履歴データ）の中から選択して得ることが可能になっている。このため、来店者と販売履歴の関連づけが行いやすいという効果を有している。
また、来店者の販売履歴データに販売時の棚割りデータを含めるようになっているので、どのような品揃えの時にどのような商品を購入したのかという来店者の購買分析に使用することができ、品揃えを行う上で貴重な情報を取得できるという効果を有している。

【図面の簡単な説明】

【0009】

【図1】本発明に係る顧客分析システムの概要を表した構成図である。

【図2】本システムを適用する店舗の概要図である。

【図3】本システムにおける情報処理の概要を表したフローチャートである。

【図4】他の実施例に係る顧客分析システムの概要を表した構成図である。

【発明を実施するための形態】

【0010】

以下、本発明を実施するための形態を図を用いて説明する。
図１は、本発明を実施するための一形態である顧客分析システム（以下「本システム」という）１の概要を表した構成図である。
顧客分析システム（本システム）１は、コンビニエンスストア等の店舗Ｔに設置される店舗設置機器Ａと、インターネットＩを介して接続された本部に設置される本部設置機器Ｂによって構成されている。なお、本実施例では一例として本システム１を店舗設置機器Ａと本部設置機器Ｂに分けて設けているが、両機器に相当する手段を同一店舗に全て配置したスタンドアローン型として構成しても差し支えないものである。

【0011】

店舗設置機器Ａには、インターネットへの接続機能を有したモデム等の接続装置２が設けられている。本実施の形態に用いる接続装置２は、ルーター機能を備えたハブとして形成されたおり、接続装置２に接続した他の機器を有線若しくは無線によって接続する機能を有している。
接続装置２には、撮像手段として機能する動画撮影カメラ３、顔認識手段として機能する顔認識サーバー４、顧客データ等を処理および記憶する機能を有したＷＥＢ／ＤＢサーバー５、ＰＯＳレジ１２に接続された商品管理システム（商品管理手段）６が接続されている。
なお、動画撮影カメラ３および顔認識サーバー４をはじめとした各機器は、接続装置２を中継せずに直接接続するように構成してもよい。また、動画撮影カメラ３は一台に限らず、２台の動画撮影カメラ（３ａ、３ｂ）若しくは２台以上設けてもよい。

【0012】

本部設置機器Ｂには、モデム等のインターネットへの接続機能を有した接続装置１０が設けられており、接続装置１０には情報の表示手段および情報の付加や編集等の操作手段を構成する操作端末１１が接続されている。
店舗設置機器Ａと本部設置機器ＢはインターネットＩを介して接続されており、両者間でデータの送受信が行われるようになっている。

【0013】

以下、改めて各手段の詳細を説明する。
［撮像手段］
撮像手段として設けた動画撮影カメラ３は、一例として店舗Ｔ内に設置した監視カメラを用いることができる。監視カメラには、動画若しくは連続した静止画（以下これらを単に「画像」という）を撮影時刻とともに記録するものを用いている。本実施の形態では、一例として図２に示すように、出入り口から入店する来店者を撮影する入り口カメラ３ａ、レジカウンターで商品の購入代金を支払う来店者を撮影するレジカメラ３ｂを有している。その他、店舗Ｔ内を撮影する複数のカメラを加えても良い。

【0014】

［画像記録手段］
撮影した画像は、動画撮影カメラ３に接続された画像記録手段に記録されるようになっている。画像記録手段は、一例として画像データを記録するハードディスクや半導体メモリ等の記録デバイスおよびこれらの制御手段等によって構成される。画像記録手段は画像記録専用の独立した装置として構成する場合の他、コンピュータや所謂クラウドとしてインターネット上に設けられた記憶ドライブを用いることができる。本実施の形態では、顔認識サーバー４若しくはＷＥＢ／ＤＢサーバー５が有するデータ記憶手段を画像記録手段として用いている。画像記録手段は、動画撮影カメラ３による撮影中の画像、撮影完了後の画像を、各装置による処理内容に応じて適宜出力・記録可能に構成されている。

【0015】

［顔認識手段］
顔認識手段として機能する顔認識サーバー４は、画像記録手段から画像データを取得し、画像データに含まれる人物の顔画像を解析することによって、その解析した人物固有の特徴を顔識別情報として取得するようになっている。
また、顔識別情報は目、口、鼻の配置といった個人を識別することができる個人固有の情報であり、このような個人毎に異なる顔識別情報を、来店者を特定するための情報としてＷＥＢ／ＤＢサーバー５に構築した顧客データベースＤＢに記録するようになっている。

【0016】

［顔識別情報］
画像データの解析による顔識別情報の取得は、解析する画像ファイルを指定した後は、自動的な処理によって行われるようになっている。画像中に複数の来店者が含まれている場合には、来店者個々に顔識別情報の取得が行われる。なお、このような自動モードによる処理の他、手動操作によって顔認識サーバー４を操作することで特定の人物画像を選定し顔識別情報を取得する手動モードも設けられている。
このような方法で取得した顔識別情報は、顔登録データとして顔画像とともにＷＥＢ／ＤＢサーバー５上に構築された顧客データベースＤＢに記録される。また、顔識別情報は、他の顔識別情報との比較が可能となるように、所定の検索可能な所定のフォーマットで記録されている。

【0017】

［ＷＥＢ／ＤＢサーバー］
ＷＥＢ／ＤＢサーバー５は、前述した顔識別情報を検索および抽出可能に構成した顧客データベースＤＢを構築する手段（顧客データベース構築手段）であり、自装置若しくは他装置からの命令に基づいてデータを検索した結果の一覧を生成し所定のフォーマットで出力する装置であり、その他データの追加、編集等を行う装置ともなっている。また、顧客データベースＤＢには、顔識別情報に加え販売履歴情報を含む来店者に関する情報が含まれている。この販売履歴情報は、後述する方法によって顧客データベースＤＢに加えられるようになっている。

【0018】

［顧客データ］
顧客データは、前述した各顧客の顔識別情報と分析対象となる店舗Ｔでの商品等販売履歴を対応させて記録した情報であり、これらの情報に加えて常連客であるか否かの判定基準となる店舗Ｔの利用頻度、利用金額に関する情報、主な利用時間等、推定性別、推定年齢等の個人に関連づけられる各種の情報が含まれている。
［顔識別情報］
顔識別情報は、顔認識手段によって生成された情報であり、目、口、鼻等の配置といった個人を識別することができる個人固有の情報である。所定の検索アルゴリズムを利用して、同一若しくは近似する顔識別情報を検索および抽出可能となるように形成された情報である。

【0019】

［商品管理システム］
商品管理システム６は、店舗Ｔにおける販売履歴情報、棚割りデータ、商品マスタデータ等の商品の管理に関する情報を記憶および処理するものである。また、ＰＯＳレジ１２と接続しており、ジャーナル情報として販売時における商品コード、商品名、代金等に関する各種のデータを取得し記憶、管理するものである。
［棚割りデータ］
棚割りデータは、店舗Ｔ内に配置されている複数の棚什器に展示されている商品等に関する情報である。店内に設置された棚什器を特定する番号や記号等の棚情報と、棚情報によって特定される棚什器に陳列されていた商品を日時とともに記録した情報である。
［商品マスタデータ］
商品マスタは、ＰＯＳレジ１２と連動した管理システムによって、バーコード等の識別情報によって商品を特定可能な商品コード、この使用品に関する原価、販売価格、仕入れ、在庫等の総合的な商品の情報である。

【0020】

［販売履歴情報］
販売履歴情報は、店舗Ｔに設置されているＰＯＳレジ１２によって入力された商品、サービスの販売履歴を記憶した情報である。販売履歴情報は、商品等の販売金額、販売時刻、現金による支払い若しくは非現金（クレジットカード、プリペイドカード等）による支払いであるか等の支払い方法の種別、レジ担当者氏名、その他販売に関わる情報がジャーナルデータとして記録されるものである。

【0021】

図２は、上記各手段を有するシステム１を適用する店舗Ｔの概要図である。店舗Ｔの形態は様々であるが、入り口若しくはゲートから入店する来店者を撮影する入り口カメラ３ａと、ＰＯＳレジ１２の後方から来店者側を撮影するレジカメラ３ｂを設置している。入り口カメラ３ａは店舗Ｔに入店する来店客の画像を取得し、レジカメラ３ｂは購入する商品の代金を支払う来店者の画像を取得するものである。
入り口カメラ３ａとレジカメラ３ｂは、一例として店舗Ｔのバックヤードに設置された動画のストレージを兼ねた顔認識サーバー４に接続されており、店舗内の撮影画像を記録し所定の処理を行うようになっている。また、ＰＯＳレジ１２も同様に店舗Ｔのバックヤードに設置された商品管理システム（商品管理手段）６を構成するサーバー装置に接続され、顔認識サーバー４および商品管理システム６はＷＥＢ／ＤＢサーバー５に接続されることで店舗設置機器Ａを構成している。

【0022】

以下、図３に示したフローチャートを用いて、本システム１に係る情報処理の概要を説明する。図３に示した処理は、予め動画撮影カメラ３による撮影によって来店者の画像が画像記録手段（顔認識サーバー４若しくはＷＥＢ／ＤＢサーバー５）に記録され、顧客データベースＤＢが構築されている状態からの説明である。
本部設置機器Ｂの操作端末１１を起動（Ｓ１）すると、表示手段である操作端末１１のディスプレイ上に、来店者の個々の画像を一覧表示する（Ｓ２）。この来店者の一覧表示は、動画撮影カメラ３が撮影し画像記録手段に記録した情報を顔認識サーバー４が自動処理することによって生成したものである。この一覧表示は、顔認識が行われ顔識別情報が取得された個々の来店者を、撮影した画像とともに表示するものである。

【0023】

一覧表示された各来店者に関する情報は、来店者を認識した時刻と関連付けられている。例えば入り口カメラ３ａの画像によって来店者を認識した場合には、この画像の撮影時刻を入店時刻と看做して、この来店者に関する撮影画像の基準時刻とすることができる。
また、来店者の一覧表示とともに、来店者の店舗Ｔ滞在時間を特定し、当該特定時間における撮影画像を見られるようにしてもよい。例えばレジカメラ３ｂの画像によって来店者を認識した場合には、この画像の撮影時刻を退店時刻と看做すことができる。
上記のように、入店時刻と退店時刻を取得しておくと、来店者の一覧表示において来店者を選択すると、店舗Ｔ内における来店者の滞在時間が取得できるので、来店者の行動予測などのマーケティングに有用な情報として使用することができるようになる。
また、レジカメラ３ｂや別途設けたカメラの撮影画像を指定した時間帯を特定して閲覧可能に構成しておくことができる。このように構成すると、一覧表から来店者を特定することによって、店内滞在時間における来店者の様子を閲覧することができ、例えば来店者の店舗内における動線や、関心を示した棚什器、滞在時間が長い棚什器といった来店者の動向を知ることが出来るようになる。

【0024】

操作端末１１では、顔認識サーバー４によって顔識別情報を取得した来店者の画像が時系列的に並べられた状態で一覧表示されるようになっている。この一覧表示されるデータは、店舗Ｔにおける任意の時間帯で撮影した画像データに基づいて顔認識サーバー４によって自動生成されたものである。
また、操作端末１１上に一覧表示する情報が生成されると、表示された一覧から任意の来店者の選択が可能になる。一覧から来店者を選択（Ｓ３）すると、この選択された来店者についてＷＥＢ／ＤＢサーバー５上に構築された顧客データベースＤＢに登録されているか否かの判定（登録判定）が行われる（Ｓ４）。

【0025】

上記登録判定（Ｓ４）において顧客データベースＤＢに顔識別情報（顔登録データ２０）を含む顧客情報が登録されている場合、この顧客データベースＤＢから顔履歴取得処理（Ｓ５）および販売履歴取得処理（Ｓ６）として、顔登録データ２０および販売履歴データ２１の取得が行われる。
次いで、これら顔履歴（顔登録データ２０）および販売履歴（販売履歴データ２１）の有無が判定され（Ｓ７）、顔履歴および販売履歴が無ければ来店者の一覧表示（Ｓ２）に戻る。

【0026】

また、顔履歴および販売履歴の有無の判定（Ｓ７）において、来店者の顔履歴および販売履歴が有る場合には、この来店者の顔識別情報が取得された時刻（例えば前述した入店時刻）を基準として、約１０分程度後の時刻を中心時間帯として販売履歴データ２１を一覧表示する（Ｓ８）。
この一覧表示された販売履歴データ２１の中から、該当する販売履歴を選択（Ｓ９）すると、商品管理システム６から棚割りデータ２２、商品マスタデータ２３等の商品の管理に関する情報が取得され表示される（Ｓ１０）。

【0027】

上記登録判定（Ｓ４）において顧客データベースＤＢに顔識別情報（顔登録データ）が登録されていない場合、操作端末１１の操作者によって顔識別情報の登録を行うか否かが判断される（Ｓ１１）。
顔識別情報の登録（顔登録）を行わない場合には、顧客データベースＤＢから顔履歴取得（Ｓ５）、および販売履歴取得（Ｓ６）が行われ、次いで前述した履歴確認Ｓ７以降の処理が実行される。

【0028】

顔識別情報の登録（顔登録）を行うか否かの判断（Ｓ１１）において顔識別情報の登録を行うと判断した場合には、操作者によって顔識別情報登録（Ｓ１２）が行われる。この処理が実行されると顔識別情報（顔登録データ）２０として登録が行われる（Ｓ１３）。

【0029】

図４は、本発明を実施するための他の形態である顧客分析システム（以下「システム」という）１００の概要を表した構成図である。
システム１００の基本的な事項は前述した本システム１と同様であり、主要な構成要素についても同一である。本システム１と異なる点は、店舗設置機器Ａとして配置していたＷＥＢ／ＤＢサーバー５を、クラウド設置機器Ｃとして所謂クラウドと称されるインターネット上に配置されたストレージやサーバー出構成されるシステム上に配置した点である。このように所謂クラウド上にＷＥＢ／ＤＢサーバー５を設置すると、チェーン店のような複数の店舗を管理するような場合、同一のデータベースを使用して情報の共有・集約をすることができ、効率的なマーケティングを行うことが可能になっている。

【0030】

以上説明した顧客分析システムは、データベースとして蓄積する来店者の販売履歴を、顔識別情報を取得した画像の撮影時刻を基準とした一定の時間帯における複数のＰＯＳレジの情報（販売履歴データ）の中から選択して得ることが可能になっている。このため、来店者と販売履歴の関連づけが行いやすくなっている。
また、来店者の販売履歴データに販売時の棚割りデータを含めるようになっている。これは、どのような品揃えの時にどのような商品を購入したのかという来店者の購買分析に使用することができ、品揃えを行う上で貴重な情報を取得できるものとなっている。

【産業上の利用可能性】

【0031】

本発明は、店舗等における顧客の分析システムに利用可能である。

【符号の説明】

【0032】

１ 顧客分析システム
２ 接続装置
３（３ａ、３ｂ） 動画撮影カメラ（撮像手段）
４ 顔認識サーバー（顔認識手段）
５ ＷＥＢ／ＤＢサーバー（顧客データベース構築手段）
６ 商品管理システム（商品管理手段）
１０ 接続装置
１１ 操作端末
１２ ＰＯＳレジ（キャッシュレジスタ）
Ａ 店舗設置機器
Ｂ 店舗設置機器
Ｃ クラウド設置機器
Ｉ インターネット

【図1】

【図2】

【図3】

【図4】