特開 2024-68574 商品評価装置及び商品評価方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024068574

(43)【公開日】2024-05-20

(54)【発明の名称】商品評価装置及び商品評価方法

(51)【国際特許分類】

   G06Q 30/06 20230101AFI20240513BHJP

   G06Q 30/0201 20230101ALI20240513BHJP

   G06T 7/00 20170101ALI20240513BHJP

【ＦＩ】

G06Q30/06

G06Q30/02 300

G06T7/00 660A

【審査請求】未請求

【請求項の数】7

【出願形態】ＯＬ

(21)【出願番号】P 2022179122

(22)【出願日】2022-11-08

(71)【出願人】

【識別番号】000227009

【氏名又は名称】日清オイリオグループ株式会社

(74)【代理人】

【識別番号】110002583

【氏名又は名称】弁理士法人平田国際特許事務所

(72)【発明者】

【氏名】生稲 淳一

(72)【発明者】

【氏名】本多 数充

【テーマコード（参考）】

5L030

5L049

5L096

【Ｆターム（参考）】

5L030BB04

5L030BB72

5L049BB04

5L049BB72

5L096AA06

5L096BA02

5L096CA02

5L096DA02

5L096FA67

5L096FA69

5L096JA11

(57)【要約】

【課題】顧客の注目度合いが高くかつ売れ行きが悪い商品を精度良くピックアップすることができる商品評価装置及び商品評価方法を提供する。
【解決手段】複数の陳列商品Ｐから問題商品をピックアップする商品管理装置１であって、陳列商品Ｐを見る顧客Ｃを撮像する撮像カメラ１１と、撮像カメラ１１による撮像画像を解析して、顧客Ｃの各陳列商品Ｐに対する視線情報を判定する視線情報判定部４３と、視線情報判定部４３によって判定した顧客Ｃの各陳列商品Ｐに対する視線情報と、各陳列商品Ｐの購買情報と、に基づいて、複数の陳列商品Ｐから問題商品をピックアップするピックアップ部４４と、を備えた。
【選択図】図１

【特許請求の範囲】

【請求項1】

複数の陳列商品から問題商品をピックアップする商品評価装置であって、
陳列商品を見る顧客を撮像する撮像部と、
前記撮像部による撮像画像を解析して、前記顧客の前記各陳列商品に対する視線情報を判定する視線情報判定部と、
前記視線情報判定部によって判定した前記顧客の前記各陳列商品に対する前記視線情報と、前記各陳列商品の購買情報と、に基づいて、前記複数の陳列商品から問題商品をピックアップするピックアップ部と、を備えたことを特徴とする商品評価装置。

【請求項2】

前記ピックアップ部は、前記顧客毎の前記各陳列商品に対する視線情報と、前記顧客毎の前記各陳列商品の購買情報と、に基づいて、前記顧客毎に、前記複数の陳列商品から問題商品をピックアップすることを特徴とする請求項１に記載の商品評価装置。

【請求項3】

前記ピックアップ部は、前記視線情報における視線指数から前記購買情報における購買指数を除算又は減算した値、あるいは前記購買情報における購買指数から前記視線情報における視線指数を除算又は減算した値が、所定の第１閾値以上である陳列商品を、前記問題商品としてピックアップすることを特徴とする請求項１又は２に記載の商品評価装置。

【請求項4】

前記ピックアップ部は、前記視線情報における視線指数から前記購買情報における購買指数を除算又は減算した値の大きさ順に前記複数の陳列商品を順位付けし、又は前記購買情報における購買指数から前記視線情報における視線指数を除算又は減算した値の大きさ順に前記複数の陳列商品を順位付けし、順位付けした順位の順番で複数の陳列商品を並べたリストを作成することで、前記リストの上位又は下位に問題商品をピックアップすることを特徴とする請求項１又は２に記載の商品評価装置。

【請求項5】

前記ピックアップ部は、前記視線情報における視線指数が所定の第２閾値以上である前記陳列商品から、前記購買情報における購買指数が所定の第３閾値未満である前記陳列商品を除外したものを、前記問題商品としてピックアップすることを特徴とする請求項１又は２に記載の商品評価装置。

【請求項6】

前記顧客が前記陳列商品を注目したときの前記顧客の表情変化の有無を判定する表情変化判定部を、更に備え、
前記ピックアップ部は、前記視線情報判定部によって判定した前記顧客の前記各陳列商品に対する前記視線情報と、前記表情変化判定部によって判定した前記表情変化の有無と、前記各陳列商品の購買情報と、に基づいて、前記複数の陳列商品から問題商品をピックアップすることを特徴とする請求項１に記載の商品評価装置。

【請求項7】

複数の陳列商品から問題商品をピックアップする商品評価方法であって、
陳列商品を見る顧客を撮像する撮像工程と、
前記撮像工程による撮像画像を解析して、前記顧客の前記各陳列商品に対する視線情報を判定する視線情報判定工程と、
前記視線情報判定工程によって判定した前記顧客の前記各陳列商品に対する前記視線情報と、前記各陳列商品の購買情報と、に基づいて、前記複数の陳列商品から問題商品をピックアップするピックアップ工程と、を実行することを特徴とする商品評価方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、商品評価装置及び商品評価方法に関するものである。

【背景技術】

【0002】

顧客が注目する商品は、売れる可能性がある一方、売れない商品は、商品の価格設定、商品内容、パッケージの変更、商品の棚割り変更などの改良を施すことで、売れる可能性が高まる。顧客が注目する商品でありながら、売れない商品を改良することで、売れる商品となる可能性がより高まる。従来、商品の情報分析を行うデータ処理装置として、各商品の売上情報及び商品陳列情報に基づき、売筋外レリストを作成するものがある（特許文献１参照）。このデータ処理装置は、顧客から、各商品の売上情報及び商品陳列情報を取得し、陳列位置がゴールデンゾーンでありかつ売上げが低い商品を、売筋外レリストに登録する。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００２－１０９１７７号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかし、従来の装置では、商品がゴールデンゾーンに陳列されているか否かによって、顧客の注目度合いを判定するため、顧客が実際に注目しているか不明であり、顧客の注目度合いが高くかつ売れ行きが悪い商品（以下、「問題商品」）を精度良くピックアップすることができないという問題があった。

【0005】

そこで、本発明は、顧客の注目度合いが高くかつ売れ行きが悪い商品を、精度良くピックアップすることができる商品評価装置及び商品評価方法を提供することを目的としている。

【課題を解決するための手段】

【0006】

本発明は、上記目的を達成するため、複数の陳列商品から問題商品をピックアップする商品評価装置であって、陳列商品を見る顧客を撮像する撮像部と、前記撮像部による撮像画像を解析して、前記顧客の前記各陳列商品に対する視線情報を判定する視線情報判定部と、前記視線情報判定部によって判定した前記顧客の前記各陳列商品に対する前記視線情報と、前記各陳列商品の購買情報と、に基づいて、前記複数の陳列商品から問題商品をピックアップするピックアップ部と、を備えたことを特徴とする商品評価装置を提供する。

【0007】

また、本発明は、上記目的を達成するため、複数の陳列商品から問題商品をピックアップする商品評価方法であって、陳列商品を見る顧客を撮像する撮像工程と、前記撮像工程による撮像画像を解析して、前記顧客の前記各陳列商品に対する視線情報を判定する視線情報判定工程と、前記視線情報判定工程によって判定した前記顧客の前記各陳列商品に対する前記視線情報と、前記各陳列商品の購買情報と、に基づいて、前記複数の陳列商品から問題商品をピックアップするピックアップ工程と、を実行することを特徴とする商品評価方法を提供する。

【発明の効果】

【0008】

本発明に係る商品評価装置及び商品評価方法は、顧客の注目度合いが高くかつ売れ行きが悪い商品を精度良くピックアップすることができる。

【図面の簡単な説明】

【0009】

【図1】本発明の一実施形態に係る商品管理装置の構成例を示した構成図である。

【図2】視線情報取得動作を示したフローチャートである。

【図3】問題商品ピックアップ動作を示したフローチャートである。

【発明を実施するための形態】

【0010】

以下、添付の図面を参照しながら、本発明の一実施形態に係る商品評価装置及び商品評価方法を適用した商品管理装置について説明する。この商品管理装置は、いわゆるＰＯＳ装置の機能の全部又は一部を包含し、商品の販売管理を行う装置である。特に、本商品管理装置は、顧客の視線情報及び購買情報に基づいて、問題商品をピックアップする機能を備えたものである。なお、本実施形態では、商品管理装置として、スーパーやコンビニ等の店舗に設置されるものを想定している。なお、商品管理装置は、複数の陳列商品から問題商品をピックアップする商品評価装置の一例である。

【0011】

（商品管理装置の構成）
図１に示すように、商品管理装置１は、商品陳列棚１０に陳列された陳列商品Ｐを見る顧客Ｃを撮像する撮像カメラ１１と、撮像カメラ１１を接続した商品管理端末１２と、を備えている。撮像カメラ１１と商品管理端末１２との接続は、有線接続であってもよいし、無線接続であってもよい。なお、撮像カメラ１１は、撮像部の一例である。

【0012】

撮像カメラ１１は、例えば、ＣＣＤカメラやＣＭＯＳカメラ等で構成され、商品陳列棚１０に陳列された陳列商品Ｐを見る顧客Ｃに対面するように配設されている。そして、撮像カメラ１１は、商品陳列棚１０側から商品陳列棚１０の前方を撮像することで、陳列商品Ｐを見る顧客Ｃを撮像する。詳細には、撮像カメラ１１は、陳列商品Ｐを見る顧客Ｃの視線の情報（以下、視線情報）を取得すべく、陳列商品Ｐを見る顧客Ｃの顔を撮像する。撮像カメラ１１は、陳列商品Ｐを見る顧客Ｃを連続的に撮像し、撮像画像として、顧客Ｃの映像（動画像）を得る。以下、撮像カメラ１１による撮像画像は、この映像を指すものである。なお、撮像カメラ１１は、店舗の営業中、撮像し続ける構成であってもよいし、顧客Ｃが商品陳列棚１０の前にいる間のみ、撮像をする構成であってもよい。また、図１の例では、撮像カメラ１１を、商品陳列棚１０の上方に設置し、斜め上方向から顧客Ｃの顔を撮像する構成であるが、一般に商品陳列棚１０の大半は、顧客Ｃの目より下方にあるため、斜め下方向から顧客Ｃの顔を撮像する構成であってもよい。さらに、顧客Ｃの視線の判定精度を高めるべく、撮像カメラ１１を商品陳列棚１０に設置し、顧客Ｃの顔を正面から撮像することが好ましい。

【0013】

商品管理端末１２は、商品コードリーダー１３及び決済手段１４等が接続されると共に、陳列商品Ｐの購買処理を実行可能な構成を有している。なお、商品コードリーダー１３は、バーコードリーダー、ＱＲコード（登録商標）リーダー、文字列リーダー、ＲＦＩＤリーダー等であり、商品を特定するコードや商品名、ＩＣタグ等を読み取るものである。また、決済手段１４は、クレジットカードリーダー、コードリーダー、ＲＦＩＤリーダー、スマートフォン等の電子送金、現金決済装置等であり、顧客Ｃが購入時に決済する入力手段又は支払い手段である。また、商品管理端末１２は、各種情報を表示するディスプレイ２１と、各種データベースを記憶する記憶部２２と、各種制御を行う制御部２３と、を備えている。

【0014】

ディスプレイ２１は、液晶パネル等で構成されている。本実施形態では、後述のピックアップ部４４で作成した問題商品リストを表示するのに用いられる。

【0015】

記憶部２２は、例えば、フラッシュＲＯＭ等で構成されている。また、記憶部２２は、問題商品のピックアップに用いられるデータベースとして、商品位置データベース３２、購買情報データベース３３及び視線情報データベース３４を有している。

【0016】

商品位置データベース３２は、商品陳列棚１０における各陳列商品Ｐの位置を記憶するデータベースである。商品位置データベース３２に記憶された各陳列商品Ｐの位置は、予め入力する構成であってもよいし、商品陳列棚１０を撮像して画像認識で取得する構成であってもよい。各陳列商品Ｐの位置を画像認識する場合、商品陳列棚１０を撮像するカメラを設置する構成であってもよいし、商品管理装置１のユーザー（店舗のスタッフ）が、定期的に商品陳列棚１０を撮像する構成であってもよい。

【0017】

購買情報データベース３３は、各陳列商品Ｐの購買情報を記憶するデータベースである。例えば、購買情報データベース３３は、各陳列商品Ｐの購買情報として、各陳列商品Ｐの購買数と、購入した顧客Ｃの数と、を記憶する。なお、購買数は、購買指数の一例である。

【0018】

視線情報データベース３４は、各陳列商品Ｐの視線情報を記憶するデータベースである。例えば、視線情報データベース３４は、各陳列商品Ｐの視線情報として、各陳列商品Ｐの注目回数を記憶する。なお、注目回数は、視線指数の一例である。

【0019】

制御部２３は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等で構成されている。また、制御部２３は、所定のプログラムを実行することで、販売管理部４１、視線情報判定部４３、ピックアップ部４４及び問題商品リスト表示部４５として機能する。

【0020】

販売管理部４１は、商品コードリーダー１３や決済手段１４から受け付けた情報に基づき、各顧客Ｃの陳列商品Ｐの購買処理を行い、各陳列商品Ｐの購買数及び／又は購入した顧客Ｃの数の情報を購買情報データベース３３に記憶する。すなわち、各顧客Ｃの購買処理の都度、購買情報データベース３３に記憶された各陳列商品Ｐの購買数及び／又は購入した顧客Ｃの数に対し、今回の購買処理で購買された陳列商品Ｐの購買数及び／又は購入した顧客Ｃの数を加えて、購買情報データベース３３上の各陳列商品Ｐの購買数及び／又は購入した顧客Ｃの数を更新する。

【0021】

視線情報判定部４３は、撮像カメラ１１による撮像画像を解析して、撮像画像に映っている顧客Ｃの各陳列商品Ｐに対する視線情報を判定する。例えば、視線情報判定部４３は、各陳列商品Ｐに対する視線情報として、各陳列商品Ｐに対する注目回数を判定する。すなわち、視線情報判定部４３は、撮像画像を解析して、撮像画像に映っている各顧客Ｃの視線を判定し、商品位置データベース３２に記憶された各陳列商品Ｐの位置と照合して、顧客Ｃが各陳列商品Ｐを注目した注目回数を取得する。そして、各陳列商品Ｐに対する注目回数を視線情報データベース３４に記憶する。すなわち、視線情報判定部４３で判定する各陳列商品Ｐに対する注目回数は、顧客Ｃ全体の注目回数である。

【0022】

ピックアップ部４４は、各陳列商品Ｐの購買情報と、各陳列商品Ｐに対する視線情報と、に基づいて、複数の陳列商品Ｐから問題商品をピックアップして、問題商品リストを作成する。具体的には、各陳列商品Ｐについて、購買情報データベース３３から購買数を抽出すると共に、視線情報データベース３４から注目回数を抽出し、抽出した注目回数（視線指数）を、抽出した購買数（購買指数）で除算した除算値を算出する。そして、当該除算値が所定の第１閾値以上である陳列商品Ｐを、問題商品としてピックアップする。その後、ピックアップした１以上の問題商品から成る問題商品リストを作成する。

【0023】

なお、本実施形態では、各陳列商品Ｐの注目回数及び購買数をそのまま用いて、除算値を算出する構成であるが、各陳列商品Ｐの注目回数の偏差値（視線指数）から各陳列商品Ｐの購買数の偏差値（購買指数）を除算した除算値を算出する構成であってもよい。

【0024】

問題商品リスト表示部４５は、ピックアップ部４４によって作成された問題商品リストをディスプレイ２１に表示する。問題商品リストをディスプレイ２１に表示することで、商品管理装置１のユーザー（店舗のスタッフ等）に、問題商品を報知することができる。

【0025】

次に図２及び図３を参照して、制御部２３による商品評価動作について説明する。商品評価動作は、例えば所定期間（例えば、１カ月間）に行う視線情報取得動作と、所定期間経過後に行う問題商品ピックアップ動作とによって実行する。また、例えば、所定期間（例えば、１カ月）の間、時間帯毎又は曜日毎に視線情報取得動作と問題商品ピックアップ動作を行うことで、時間帯毎あるいは曜日毎の問題商品をピックアップすることができる。なお、商品評価動作は、複数の陳列商品Ｐから問題商品をピックアップする商品評価方法の一例である。

【0026】

図２に示すように、視線情報取得動作では、まず、制御部２３は、撮像カメラ１１によって、商品陳列棚１０の陳列商品Ｐを見る顧客Ｃを撮像する（Ｓ１）（撮像工程）。撮像カメラ１１による撮像は、店舗の営業時間中、撮像し続ける構成であっても良いし、顧客Ｃが商品陳列棚１０の前にいるときのみ、撮像を行う構成であってもよい。本実施形態では、所定期間（例えば、１カ月間）の間、撮像カメラ１１による撮像を行い、所定期間分の撮像画像を取得する。

【0027】

商品陳列棚１０の陳列商品Ｐを見る顧客Ｃを撮像したら、視線情報判定部４３によって、撮像カメラ１１による撮像画像を解析して、顧客Ｃの各陳列商品Ｐに対する注目回数を判定する（Ｓ２）（視線情報判定工程）。すなわち、撮像画像を解析して、撮像画像に映っている各顧客Ｃの視線を判定し、商品位置データベース３２に記憶された各陳列商品Ｐの位置と照合して、各陳列商品Ｐを注目した注目回数を取得する。その後、判定した各陳列商品Ｐに対する注目回数を、視線情報データベース３４に記憶する（Ｓ３）。

【0028】

問題商品ピックアップ動作は、視線情報取得動作によって取得した所定期間（例えば１カ月分）の視線情報と、当該所定期間の購買情報に基づいて、商品陳列棚１０に陳列された複数の陳列商品Ｐから問題商品をピックアップする動作である。図３に示すように、問題商品ピックアップ動作では、まず、制御部２３は、ピックアップ部４４によって、問題商品のピックアップ処理（Ｓ１１～Ｓ１４）を行う（ピックアップ工程）。すなわち、購買情報データベース３３から各陳列商品Ｐの購買数を抽出し（Ｓ１１）、視線情報データベース３４から各陳列商品Ｐの注目回数を抽出する（Ｓ１２）。その後、各陳列商品Ｐについて、抽出した注目回数（視線指数）から、抽出した購買数（購買指数）を除算した除算値を算出し（Ｓ１３）、当該除算値が所定の第１閾値以上である陳列商品Ｐを、問題商品としてピックアップする（Ｓ１４）。問題商品をピックアップしたら、ピックアップした１以上の問題商品から成る問題商品リストを作成する（Ｓ１５）。

【0029】

問題商品リストを作成したら、問題商品リスト表示部４５によって、作成した問題商品リストをディスプレイ２１に表示する（Ｓ１６）。これによって、商品管理装置１のユーザーに、問題商品リストを報知する。

【0030】

（実施形態の作用及び効果）
以上、上記実施形態の構成によれば、各陳列商品Ｐに対する顧客Ｃの視線情報と、各陳列商品Ｐの購買情報と、に基づいて、問題商品をピックアップする構成であるため、注目度合いが高くかつ売れ行きが悪い商品を精度良くピックアップすることができる。

【0031】

また、注目度合いが高くかつ売れ行きが悪い商品をピックアップすることができるため、注目度合い及び売れ行きの両方を加味した陳列商品Ｐの価格変更や内容変更等を行うことができる。

【0032】

（その他の実施形態について）
以上、本発明の実施形態を説明したが、上記した実施形態は特許請求の範囲に係る発明を限定するものではない。また、実施形態の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない点に留意すべきである。本発明は、その趣旨を逸脱しない範囲で適宜変形して実施することが可能である。

【0033】

例えば、上記実施形態においては、視線情報及び購入情報を収集する所定期間として、１カ月間を例示したが、当該所定期間は、任意に決める期間であってよく、１時間から１年間から選ばれる任意の期間が好ましい。当該所定期間は、問題商品をピックアップする毎に、１時間から１年間の一定期間又は可変期間を所定期間としてもよく、複数の一定期間あるいは可変期間を合計したものを所定期間としてもよい。

【0034】

また、上記実施形態においては、各陳列商品Ｐに対する視線情報として、各陳列商品Ｐに対する注目回数を用いる構成であったが、これに限るものではない。例えば、各陳列商品Ｐに対する視線情報として、各陳列商品Ｐを注目した注目時間を用いる構成であってもよいし、商品陳列棚１０の前に来た各顧客Ｃが最初にその陳列商品Ｐを見た回数を用いる構成であってもよい。また、視線情報として、所定時間注目された回数を用いる構成であってもよい。かかる場合、これら注目時間や最初にその陳列商品Ｐを見た回数、所定時間注目された回数に応じた値を、視線指数として用いる。すなわち、注目時間や最初にその陳列商品Ｐを見た回数、所定時間注目された回数に応じた値（視線指数）を、購買数（購買指数）で除算した除算値によって、問題商品をピックアップする。

【0035】

また、上記実施形態においては、視線指数から購買指数を除算した除算値に基づいて、問題商品のピックアップを行う構成であったが、購買指数から視線指数を除算した除算値（視線指数から購買指数を除算した除算値の逆数）に基づいて、問題商品のピックアップを行う構成であってもよい。また、視線指数と購買指数の差（例えば、視線指数から購買指数を減算した減算値、又は購買指数から視線指数を減算した減算値）に基づいて、問題商品のピックアップを行う構成であってもよい。視線指数と購買指数の差に基づく場合、視線指数と購買指数の数値範囲がなるべく重なるように（例えば、５割以上、好ましくは８割以上）、購買数や注目回数などに係数をかける、又は、購買数の偏差値や注目回数、注目時間等の偏差値を各指数として用いることが好ましい。

【0036】

また、上記実施形態においては、ピックアップ部４４が、視線指数（注目回数等）から購買数を除算した除算値が所定の第１閾値以上である陳列商品Ｐを、問題商品としてピックアップする構成であったが、これに限るものではない。例えば、ピックアップ部４４が、当該除算値の高い順に各陳列商品Ｐを順位付けし、除算値の順位が所定の順位以上である陳列商品Ｐを、問題商品としてピックアップする構成であってもよい。

【0037】

また、上記実施形態においては、視線指数から購買指数を除算又は減算した除算値又は減算値（あるいは、購買指数から視線指数を除算又は減算した除算値又は減算値）に基づいて、問題商品をピックアップする構成であったが、当該除算値又は減算値（問題商品の程度）に基づいて、複数の陳列商品Ｐを順位付けする構成であってもよい。例えば、ピックアップ部４４は、視線情報における視線指数から購買情報における購買指数を除算又は減算した値の大きさ順に複数の陳列商品Ｐを順位付けし、又は購買情報における購買指数から前記視線情報における視線指数を除算又は減算した値の大きさ順に複数の陳列商品Ｐを順位付けし、順位付けした順位の順番で複数の陳列商品Ｐを並べたリストを作成し、当該リストをディスプレイ２１に表示する。この場合、問題商品は、当該リストの上位又は下位にピックアップされる。すなわち、上記リストを作成することで、当該リストの上位又は下位に問題商品をピックアップする。なお、リストは陳列商品Ｐの全部又は一部を含む構成であってもよい。

【0038】

また、例えば、ピックアップ部４４が、視線指数が所定の第２閾値以上である陳列商品Ｐから、購買数が所定の第３閾値未満である陳列商品Ｐを除外したものを、問題商品としてピックアップする構成であってもよい。また、ピックアップ部４４が、視線指数の高い順に各陳列商品Ｐを順位付けすると共に、購入数の高い順で各陳列商品Ｐを順位付けし、視線指数の順位が所定の順位以上である陳列商品Ｐから、購買数の順位が所定の順位以上である陳列商品Ｐを除外したものを、問題商品としてピックアップする構成であってもよい。

【0039】

また、上記実施形態においては、顧客Ｃの各陳列商品Ｐに対する視線情報と、各陳列商品Ｐの購買情報（購買数）とに基づいて、問題商品をピックアップする構成であったが、商品管理装置１が、顧客Ｃが陳列商品Ｐを注目したときの顧客Ｃの表情変化の有無を判定する表情変化判定部を、更に備え、ピックアップ部４４が、視線情報判定部４３によって判定した顧客Ｃの各陳列商品Ｐに対する視線情報と、表情変化判定部によって判定した表情変化の有無と、各陳列商品Ｐの購買情報と、に基づいて、複数の陳列商品Ｐから問題商品をピックアップする構成であってもよい。例えば、各陳列商品Ｐの視線指数に、表情変化の有無に基づく値を加えた数値と、各陳列商品Ｐの購買数と、に基づいて、問題商品をピックアップする。

【0040】

上記実施形態においては、顧客Ｃ全体の各陳列商品Ｐに対する視線情報を判定し、顧客Ｃ全体の各陳列商品Ｐに対する視線情報と、顧客Ｃ全体の各陳列商品Ｐの購入情報と、に基づいて、顧客Ｃ全体の問題商品をピックアップする構成であったが、これに限るものではない。例えば、撮像画像に映っている各顧客Ｃを特定して、顧客Ｃ毎の各陳列商品Ｐに対する視線指数（注目回数等）を判定し、各陳列商品Ｐに対する視線指数が一定数以上の顧客Ｃの数と、顧客Ｃ毎の各陳列商品Ｐの購買情報と、に基づいて、顧客Ｃ全体の問題商品をピックアップする構成であってもよい。また、撮像画像に映っている各顧客Ｃを特定して、顧客毎の各陳列商品Ｐに対する視線情報を判定し、顧客Ｃ毎の各陳列商品Ｐに対する視線情報と、顧客Ｃ毎の各陳列商品Ｐの購買情報と、に基づいて、顧客Ｃ毎の問題商品をピックアップする構成であってもよい。

【0041】

かかる構成では、記憶部２２が、顔情報データベースを更に有する。顔情報データベースは、顔情報データベースは、各顧客Ｃの顔情報を記憶するデータベースである。例えば、顔情報データベースは、各顧客Ｃの顔情報として、各顧客Ｃの顔の特徴量を記憶する。この顔情報データベースは、撮像カメラ１１の撮像画像における顧客Ｃの特定に用いられる。なお、顔情報データベースに記憶された各顧客Ｃの顔情報は、例えば、店頭カメラ（不図示）の撮像画像から取得する。

【0042】

また、かかる構成では、購買情報データベース３３が、顧客Ｃ毎の各陳列商品Ｐの購買情報を記憶し、視線情報データベース３４が、顧客Ｃ毎の各陳列商品Ｐの視線情報を記憶する。

【0043】

また、かかる構成では、制御部２３が、更に顧客特定部として機能する。顧客特定部は、撮像カメラ１１による撮像画像を解析して、当該撮像画像に映っている各顧客Ｃを特定する。例えば、顧客特定部は、撮像画像に映っている各顧客Ｃの顔情報（顔の特徴量）と、顔情報データベースに記憶された各顧客Ｃの顔情報とを照合することで、撮像画像に映っている顧客Ｃを特定する。なお、経時的に撮像される撮像画像に映っている各顧客Ｃの輪郭、顔情報（顔の特徴量）等をトレースして、撮像画像に移っている各顧客Ｃを特定する構成であってもよい。

【0044】

また、かかる構成では、販売管理部４１は、各陳列商品Ｐの購買数（購入情報）を顧客Ｃ毎に購買情報データベース３３に記憶し、視線情報判定部４３は、顧客特定部で特定した顧客Ｃ毎に、各陳列商品Ｐに対する注目回数（視線情報）を視線情報データベース３４に記憶する。なお、同一顧客Ｃが、同日内に複数回、撮像カメラ１１で撮像された場合は、当該複数回の注目回数を積算して視線情報データベース３４に記憶する構成であってもよいし、視線情報データベース３４の注目回数を、最新の回の注目回数で上書きして、最新の回の注目回数のみ視線情報データベース３４に記憶する構成であってもよい。

【0045】

また、かかる構成では、ピックアップ部４４は、顧客Ｃ毎の各陳列商品Ｐの購買情報と、顧客Ｃ毎の各陳列商品Ｐに対する視線情報と、に基づいて、複数の陳列商品Ｐから顧客Ｃ毎の問題商品をピックアップして、顧客Ｃ毎の問題商品リストを作成し、問題商品リスト表示部４５は、顧客Ｃ毎の問題商品リストを表示する。顧客Ｃ毎の問題商品リストを表示することで、商品管理装置１のユーザー（店舗のスタッフ等）に、顧客Ｃ毎に問題商品を報知することができる。

【0046】

なお、顧客Ｃ毎の購買情報を取得し顧客Ｃ毎の視線情報を判定する構成を採用する場合、顧客Ｃの属性（男女や年齢等）毎に問題商品をピックアップする構成であってもよい。例えば、各陳列商品Ｐに対する視線指数（注目回数等）及び各陳列商品Ｐの購買数を、同じ属性の顧客Ｃ間で集計し、集計した視線指数及び購買数に基づいて、顧客Ｃの属性毎の問題商品をピックアップする構成であってもよい。かかる場合、顧客Ｃの属性毎の問題商品リストを作成し表示することができるので、商品管理装置１のユーザー（店舗のスタッフ等）に、顧客Ｃの属性毎に問題商品を報知することができる。

【0047】

また、撮像カメラ１１による撮像画像から顧客Ｃを特定する構成を採用する場合、視線情報判定部４３が、特定した顧客Ｃ毎の、注目回数の多い陳列商品Ｐを判定する構成であってもよい。また、視線情報判定部４３が、陳列商品Ｐ毎の、注目回数が多かった顧客Ｃ、又は、注目回数が多かった顧客Ｃの数を判定する構成であってもよい。かかる場合、これらの情報をデータベースに記憶しておくことで、これらの情報を用いて、陳列商品Ｐをより精度良く解析することができる。

【0048】

また、上記実施形態においては、各陳列商品Ｐの購買情報として、各陳列商品Ｐの購買数を用いる構成であったが、各陳列商品Ｐの購買数に代えて、各陳列商品Ｐの購買率を用いる構成であってもよい。例えば、同一カテゴリーの陳列商品Ｐ全体の購買数に対する各陳列商品Ｐの購買数の割合を、各陳列商品Ｐの購買情報として用いる構成であってもよい。

【0049】

また、撮像カメラによって、顧客Ｃが、陳列商品Ｐを手に取った撮像画像、又は、顧客Ｃが、陳列商品Ｐの清算している撮像画像を撮像し、当該撮像画像を基にカウントした数値を購買情報として用いる構成であってもよい。なお、この撮像カメラは、前述の陳列商品Ｐを見る顧客Ｃを撮像する撮像カメラ１１とは、別であってもよい。

【0050】

また、上記実施形態においては、所定期間の視線情報及び購買情報を集計し、これに基づいて問題商品をピックアップする構成であったが、視線情報及び購買情報を集計する期間は、異なってもよい。

【0051】

また、上記実施形態においては、商品管理端末１２が、記憶部２２、顧客特定部、視線情報判定部４３、ピックアップ部４４及び問題商品リスト表示部４５を備える構成であったが、これに限るものではない。すなわち、商品管理端末１２とは別の情報端末が、記憶部２２、顧客特定部、視線情報判定部４３、ピックアップ部４４及び問題商品リスト表示部４５の一部又は全部を備える構成であってもよい。

【符号の説明】

【0052】

１：商品管理装置、 １１：撮像カメラ、 ４３：視線情報判定部、 ４４：ピックアップ部、 Ｃ：顧客、 Ｐ：陳列商品

【図1】

【図2】

【図3】