特許 6773102 情報処理装置及び情報処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6773102

(24)【登録日】2020年10月5日

(45)【発行日】2020年10月21日

(54)【発明の名称】情報処理装置及び情報処理プログラム

(51)【国際特許分類】

   G06Q 30/02 20120101AFI20201012BHJP

【ＦＩ】

   G06Q30/02 312

【請求項の数】2

【全頁数】22

(21)【出願番号】特願2018-224319(P2018-224319)

(22)【出願日】2018年11月30日

(62)【分割の表示】特願2014-192715(P2014-192715)の分割

【原出願日】2014年9月22日

(65)【公開番号】特開2019-61704(P2019-61704A)

(43)【公開日】2019年4月18日

【審査請求日】2018年11月30日

(73)【特許権者】

【識別番号】000005496

【氏名又は名称】富士ゼロックス株式会社

(74)【代理人】

【識別番号】100115129

【弁理士】

【氏名又は名称】清水 昇

(74)【代理人】

【識別番号】100102716

【弁理士】

【氏名又は名称】在原 元司

(74)【代理人】

【識別番号】100122275

【弁理士】

【氏名又は名称】竹居 信利

(72)【発明者】

【氏名】村口 公亮

(72)【発明者】

【氏名】外池 昌嗣

(72)【発明者】

【氏名】宇野 祐介

(72)【発明者】

【氏名】福井 基文

(72)【発明者】

【氏名】新宮 淳

【審査官】 岸 健司

(56)【参考文献】

【文献】 特開平０９−３２５９９３（ＪＰ，Ａ）

【文献】 特開２００５−３０９６０１（ＪＰ，Ａ）

【文献】 特開２００６−３１８１９１（ＪＰ，Ａ）

【文献】 特開平１１−２５８９９１（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｑ １０／００−９９／００

(57)【特許請求の範囲】

【請求項1】

商品にタグが吊り下げられており、該タグと予め定められた位置との間の距離が、予め定められた距離未満又は以下となった場合に、顧客による該商品の該タグを見るための行動であるとして判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
を具備し、
前記タグには、動きを検知する２つの検知部が取り付けられており、
前記判定手段は、一方の検知部が検知した動きと、他方の検知部が検知した動きが逆方向である場合に、前記顧客による前記商品の前記タグを見るための行動であると判定する
ことを特徴とする情報処理装置。

【請求項2】

コンピュータを、
商品にタグが吊り下げられており、該タグと予め定められた位置との間の距離が、予め定められた距離未満又は以下となった場合に、顧客による該商品の該タグを見るための行動であるとして判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
として機能させ、
前記タグには、動きを検知する２つの検知部が取り付けられており、
前記判定手段は、一方の検知部が検知した動きと、他方の検知部が検知した動きが逆方向である場合に、前記顧客による前記商品の前記タグを見るための行動であると判定する
情報処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置及び情報処理プログラムに関する。

【背景技術】

【0002】

特許文献１には、商品に興味を抱いた顧客の人数を正確に把握することを課題とし、操作部での所定の操作（押下操作）に応じて、記憶装置の不揮発性メモリに記憶されている操作回数をインクリメントし、操作部での所定の操作（押下操作）に応じて、記憶装置の不揮発性メモリに記憶されている価格のデータを読み出してこの読み出した価格のデータに基づく価格表示を表示部に一定時間表示させるようにしたことが開示されている。

【0003】

特許文献２には、棚やショースペース等に陳列されている商品に手を伸ばした客に対してその商品に関する当該客に特化した情報を提供できるようにすることを課題とし、情報端末装置は、対応する商品に手を伸ばしたユーザから当該ユーザを識別するユーザ識別情報を非接触により取得し、取得したユーザ識別情報を当該情報端末装置に対応する商品識別情報とともにサーバ装置に伝送し、サーバ装置は、各ユーザのユーザ識別情報と関連付けてそのユーザに関する属性情報を記憶し、各情報端末装置からユーザ識別情報及び商品識別情報を受信する毎に、そのユーザ識別情報と関連付けられて記憶されているユーザ属性情報を読み出し、このユーザ属性情報と商品群識別情報とを関連付けて処理することが開示されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００９−０９２７９４号公報

【特許文献2】特開２００７−１１４９５７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明は、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定するようにした情報処理装置及び情報処理プログラムを提供することを目的としている。

【課題を解決するための手段】

【0006】

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項１の発明は、商品にタグが吊り下げられており、該タグと予め定められた位置との間の距離が、予め定められた距離未満又は以下となった場合に、顧客による該商品の該タグを見るための行動であるとして判定する判定手段と、前記判定手段によって判定された行動毎に計数する計数手段を具備し、前記タグには、動きを検知する２つの検知部が取り付けられており、前記判定手段は、一方の検知部が検知した動きと、他方の検知部が検知した動きが逆方向である場合に、前記顧客による前記商品の前記タグを見るための行動であると判定することを特徴とする情報処理装置である。

【0008】

請求項２の発明は、コンピュータを、商品にタグが吊り下げられており、該タグと予め定められた位置との間の距離が、予め定められた距離未満又は以下となった場合に、顧客による該商品の該タグを見るための行動であるとして判定する判定手段と、前記判定手段によって判定された行動毎に計数する計数手段として機能させ、前記タグには、動きを検知する２つの検知部が取り付けられており、前記判定手段は、一方の検知部が検知した動きと、他方の検知部が検知した動きが逆方向である場合に、前記顧客による前記商品の前記タグを見るための行動であると判定する情報処理プログラムである。

【発明の効果】

【0009】

請求項１の情報処理装置によれば、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定することができる。また、タグに取り付けられた検知部が検知した動きによって、顧客による商品の前記タグを見るための行動であると判定することができる。

【0011】

請求項２の情報処理プログラムによれば、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定することができる。また、タグに取り付けられた検知部が検知した動きによって、顧客による商品の前記タグを見るための行動であると判定することができる。

【図面の簡単な説明】

【0012】

【図1】第１の実施の形態の構成例についての概念的なモジュール構成図である。

【図2】第１の実施の形態を実現する場合のシステム構成例を示す説明図である。

【図3】第１の実施の形態による処理例（１）を示すフローチャートである。

【図4】第１の実施の形態による処理例（１）を示す説明図である。

【図5】第１の実施の形態による処理例（２）を示すフローチャートである。

【図6】第１の実施の形態による処理例（２）を示す説明図である。

【図7】第１の実施の形態による処理例（３）を示すフローチャートである。

【図8】第１の実施の形態による処理例（３）を示す説明図である。

【図9】第２の実施の形態の構成例についての概念的なモジュール構成図である。

【図10】第２の実施の形態を実現する場合のシステム構成例を示す説明図である。

【図11】第２の実施の形態による処理例を示すフローチャートである。

【図12】第２の実施の形態による処理例（１）を示す説明図である。

【図13】第２の実施の形態で用いるタグの例を示す説明図である。

【図14】第２の実施の形態による処理例（２）を示す説明図である。

【図15】動作・カウントテーブルのデータ構造例を示す説明図である。

【図16】本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。

【発明を実施するための形態】

【0013】

以下、図面に基づき本発明を実現するにあたっての好適な各種の実施の形態の例を説明する。
図１は、第１の実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（コンピュータ・プログラム）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム（コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム）、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能に１対１に対応していてもよいが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（データの授受、指示、データ間の参照関係等）の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態に応じて、又はそれまでの状況・状態に応じて定まることの意を含めて用いる。「予め定められた値」が複数ある場合は、それぞれ異なった値であってもよいし、２以上の値（もちろんのことながら、全ての値も含む）が同じであってもよい。また、「Ａである場合、Ｂをする」という意味を有する記載は、「Ａであるか否かを判断し、Ａであると判断した場合はＢをする」の意味で用いる。ただし、Ａであるか否かの判断が不要である場合を除く。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（１対１対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」（社会システム）にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスク、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、外部記憶媒体、通信回線を介した記憶装置、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）内のレジスタ等を含んでいてもよい。

【0014】

第１の実施の形態である情報処理装置１００は、顧客の行動を判定（特定）するものであって、図１の例に示すように、画像受付モジュール１２０、画像処理モジュール１３０、情報処理モジュール１４０、情報記録モジュール１５０を有している。
販売促進のための対策を立てるために、店内等で商品に対する顧客の行動（動作）を判定して、その行動を計数することが必要である。本実施の形態は、そのために利用されるものである。特に、商品に付されているタグに対する行動を判定する。なお、タグとは、その商品の属性が記載された札である。商品の属性として、例えば、値段、製造元、原材料等がある。具体的には、値札等が該当する。

【0015】

撮影モジュール１１０は、情報処理装置１００の画像受付モジュール１２０と接続されている。撮影モジュール１１０は、商品とその商品の周辺（商品エリアともいわれる）を撮影する。その商品エリアには、その商品を購入するため、その商品を確かめる等のために、顧客が入り込む。そのため、撮影モジュール１１０が撮影した画像には、商品とともに顧客が含まれていることがある。
具体的には、撮影モジュール１１０は、静止画又は動画を撮影するための２Ｄカメラ、３Ｄカメラ、サーモカメラ、全方位カメラ等である。また、撮影モジュール１１０は、固定されたものであってもよいし、角度、位置等を変更することができるものであってもよい。また、商品と撮影モジュール１１０との関係は、１対１であってもよいし、１対Ｎであってもよいし、Ｎ対１であってもよいし、Ｎ対Ｎであってもよい。本実施の形態では、１対１の場合を例として説明する。なお、Ｎ対１の場合は、後述するように商品を認識し、その商品毎に顧客の行動を判定すればよいし、１対Ｎの場合は、複数の画像から１つの商品又はその商品のタグに対する行動を判定し、多数決等を用いて、複数の判定結果から最終的な判定結果を得るようにすればよい。

【0016】

画像受付モジュール１２０は、撮影モジュール１１０、画像処理モジュール１３０と接続されている。画像受付モジュール１２０は、撮影モジュール１１０によって撮影された画像を受け付け、その画像を画像処理モジュール１３０に渡す。
画像処理モジュール１３０は、画像受付モジュール１２０、情報処理モジュール１４０と接続されている。画像処理モジュール１３０は、顧客特徴抽出モジュール１３２、タグ認識モジュール１３４を有している。
顧客特徴抽出モジュール１３２は、画像受付モジュール１２０によって受け付けられた画像から、顧客の特徴を抽出する。例えば、商品の位置、顧客の体、顧客の頭部の位置、手（腕を含む）の位置、視線の方向、顔の位置、目等を特徴として抽出する。例えば、撮影モジュール１１０によって撮影される商品は予め定められたものであり、その予め定められた商品の特徴（色、形状、大きさ等）を予め抽出しておき、辞書として記憶させておくことによって、画像内からその商品を認識することができる。また、人の認識、人の部位（手、頭等）の認識、視線の方向等は、既存の技術を用いて認識する。なお、位置としては、画像内の座標系における位置であってもよいし、商品との相対位置であってもよい。
タグ認識モジュール１３４は、画像受付モジュール１２０によって受け付けられた画像から、商品のタグを認識する。例えば、撮影モジュール１１０によって撮影されるタグは予め定められたものであり、その予め定められたタグの特徴（色、形状、大きさ等）を予め抽出しておき、辞書として記憶させておくことによって、画像内からそのタグを認識することができる。また、タグには、商品毎又は商品の種類毎に異なるマーク、情報画像（例えば、二次元コード等）等が記載されていてもよいし、特定波長に反応する塗料が塗られていてもよいし、特定波長（音）を発する装置が付与等されていてもよい。タグ認識モジュール１３４は、これらを認識する。なお、特定波長に反応等するタグの場合は、撮影モジュール１１０は、その特定波長に反応するセンサを備えていてもよい。

【0017】

情報処理モジュール１４０は、画像処理モジュール１３０、情報記録モジュール１５０と接続されている。情報処理モジュール１４０は、行動特定モジュール１４２、視線検知モジュール１４４、計数モジュール１４６を有している。
行動特定モジュール１４２は、顧客が撮影されている画像から、その顧客による商品のタグを見るための行動を判定する。
行動特定モジュール１４２が、判定する行動として、商品エリアに顧客が入った行動、商品に触った行動、タグに触った行動、タグを取り出した行動、タグを元に戻した行動、商品を見た行動、タグを見た行動等がある。
例えば、タグを見るためには商品に触れることが必要な位置に、そのタグを取り付けられている場合、行動特定モジュール１４２は、商品に触れた後に、タグを画像内で検知した場合は、顧客による、その商品のそのタグを見るための行動であると判定する。この場合、タグは商品内にあり、そのタグを見るためには、その商品に触れることが必要な位置に取り付けられている。この判定処理については、図３、４を用いて後述する。
また、撮影モジュール１１０とタグは隣り合った位置にあり、行動特定モジュール１４２は、画像内で顧客の視線が撮影モジュール１１０に向かっている場合は、その顧客による商品のタグを見るための行動であると判定する。視線検知のために、視線検知モジュール１４４の処理結果を用いる。この判定処理については、図５、６を用いて後述する。
また、タグは、商品の下部に吊り下げられており、行動特定モジュール１４２は、タグに触れたことを画像内で検知した場合は、顧客による商品のそのタグを見るための行動であると判定する。この判定処理については、図７、８を用いて後述する。

【0018】

視線検知モジュール１４４は、顧客特徴抽出モジュール１３２による処理結果を用いて、顧客の視線を検知する。例えば、撮影モジュール１１０への視線である、撮影モジュール１１０以外のものへの視線である等を検知する。
計数モジュール１４６は、行動特定モジュール１４２によって判定された行動毎に計数する。つまり、その行動が行われた回数を計測する。前述の行動毎に計数してもよいし、予め定められた行動の回数を計数するようにしてもよい。
情報記録モジュール１５０は、情報処理モジュール１４０と接続されている。情報記録モジュール１５０は、計数モジュール１４６による計数結果を記憶する。また、顧客の行動を顧客の特徴と関連付けて記憶するようにしてもよい。

【0019】

図２は、第１の実施の形態を実現する場合のシステム構成例を示す説明図である。
情報処理装置１００、撮影モジュール１１０Ａ、撮影モジュール１１０Ｂ、撮影モジュール１１０Ｃ、撮影モジュール１１０Ｄ、商品管理装置２１０は、通信回線２９０を介してそれぞれ接続されている。通信回線２９０は、無線、有線、これらの組み合わせであってもよく、例えば、通信インフラとしてのイントラネット、インターネット等であってもよい。撮影モジュール１１０は、１つの店舗内に商品毎に複数設置されていてもよいし、複数の店舗に設置されていてもよい。
商品管理装置２１０は、情報処理装置１００による処理結果（情報記録モジュール１５０に記憶されている情報）を得て、ユーザにその情報等を提示する。また、ＰＯＳ（Ｐｏｉｎｔ Ｏｆ Ｓａｌｅ ｓｙｓｔｅｍ）等と連携して、購入された商品に対する顧客の行動と、購入には至らなかったが、商品エリアに入った顧客の行動を比較できるように提示するようにしてもよい。

【0020】

図３は、第１の実施の形態による処理例（１）を示すフローチャートである。
ステップＳ３０２では、撮影モジュール１１０が、商品エリア内を撮影する。
ステップＳ３０４では、画像受付モジュール１２０が、画像を受け付ける。
ステップＳ３０６では、顧客特徴抽出モジュール１３２が、その画像から顧客の特徴を抽出する。
ステップＳ３０８では、タグ認識モジュール１３４が、その画像からタグを認識する。
ステップＳ３１０では、行動特定モジュール１４２が、顧客の行動を特定する。
ステップＳ３１２では、行動特定モジュール１４２が、特定された行動を判断する。その行動が、商品エリアに顧客が入った行動であればステップＳ３１４へ進み、商品又はタグに触った行動であればステップＳ３１６へ進み、タグを取り出した行動であればステップＳ３１８へ進み、タグを元に戻した行動であればステップＳ３２０へ進む。
ステップＳ３１４では、計数モジュール１４６が、商品エリアに顧客が入った行動をカウントする。
ステップＳ３１６では、計数モジュール１４６が、商品又はタグに触った行動をカウントする。
ステップＳ３１８では、計数モジュール１４６が、タグを取り出した行動をカウントする。
ステップＳ３２０では、計数モジュール１４６が、タグを元に戻した行動をカウントする。
ステップＳ３２２では、計数モジュール１４６が、情報記録モジュール１５０にカウント結果を記録する。

【0021】

図４は、第１の実施の形態による処理例（１）を示す説明図である。特に、ステップＳ３１０での、行動特定モジュール１４２が、顧客の行動を特定する処理例について説明する。以下、店舗としてアパレル店、商品としてシャツを例にして説明する。
この例では、撮影モジュール１１０は、店舗の天井に取り付けられており、商品エリアを撮影する。したがって、その撮影画像は、図４内の画像欄の例のように、顧客の頭４３０、手４４０、シャツ４１０を上から撮影したものである。
また、タグ４２０を見るためにはシャツ４１０に触れることが必要な位置に、タグ４２０が取り付けられている。例えば、シャツ４１０の内側に取り付けられていてもよいし、シャツ４１０のボタンの間にタグ４２０が裏返って入っているようにしてもよい。なお、図４内の画像欄の例では、タグ４２０も記載したが、図４（Ｃ）以外の場合は、シャツ４１０内にあり、画像内では撮影されていない。

【0022】

図４の例では、時間軸４００の矢印の方向に進むとする。
図４（Ａ）の例では、顧客が商品エリアに入った行動を検知した例を示している。これは、顧客（顧客の頭４３０、手４４０等）が撮影されていない状態から、顧客の頭４３０等が予め定められた時間以上とどまっていることを検知した場合に、顧客が商品エリアに入った行動として判定すればよい。
図４（Ｂ）の例では、シャツ４１０のタグ４２０を手に取った場合を示している。顧客の手４４０がシャツ４１０内の領域に入り、予め定められた時間以上とどまったことを検知することによって、「商品に触った行動」であると判定する。
図４（Ｃ）の例では、シャツ４１０のタグ４２０を読むためにタグ４２０を取り出した場合を示している。図４（Ｂ）の例の状態から、手４４０（又はタグ４２０）がシャツ４１０の領域から予め定められた距離だけ離れ、予め定められた時間以上とどまったことを検知することによって、「タグを取り出した行動」であると判定する。なお、ここでの「予め定められた距離」として、タグ４２０をシャツ４１０に取り付けるためのひも４２５の長さとしてもよい。なお、この「タグを取り出した行動」を「タグを見るための行動」としてもよい。
図４（Ｄ）の例では、シャツ４１０のタグ４２０を見終わり、戻した場合を示している。図４（Ｃ）の例の状態から、顧客の手４４０がシャツ４１０から離れたことを検知することによって、「タグを元に戻した行動」であると判定する。

【0023】

図５は、第１の実施の形態による処理例（２）を示すフローチャートである。
ステップＳ５０２では、撮影モジュール１１０が、商品エリア内を撮影する。
ステップＳ５０４では、画像受付モジュール１２０が、画像を受け付ける。
ステップＳ５０６では、顧客特徴抽出モジュール１３２が、その画像から顧客の特徴を抽出する。
ステップＳ５０８では、行動特定モジュール１４２が、行動を特定する。
ステップＳ５１０では、行動特定モジュール１４２が、特定された行動を判断する。その行動が、商品エリアに顧客が入った行動であればステップＳ５１２へ進み、商品を見た行動であればステップＳ５１４へ進み、商品を触った行動であればステップＳ５１６へ進み、タグを見た行動であればステップＳ５１８へ進む。
ステップＳ５１２では、計数モジュール１４６が、商品エリアに顧客が入った行動をカウントする。
ステップＳ５１４では、計数モジュール１４６が、商品を見た行動をカウントする。
ステップＳ５１６では、計数モジュール１４６が、商品を触った行動をカウントする。
ステップＳ５１８では、計数モジュール１４６が、タグを見た行動をカウントする。
ステップＳ５２０では、計数モジュール１４６が、情報記録モジュール１５０にカウント結果を記録する。

【0024】

図６は、第１の実施の形態による処理例（２）を示す説明図である。特に、ステップＳ５０８での、行動特定モジュール１４２が、顧客の行動を特定する処理例について説明する。
この例では、撮影モジュール１１０（図ではカメラ６９０）は、タグ６２０と隣り合った位置に設置されている。また、シャツ６１０も撮影するために、シャツ６１０と離れた位置に設置するようにしてもよい。具体的には、図６の例では、商品の下側（床）にタグ６２０がついており、その横にカメラ６９０を設置しており、斜め上前方を撮影している。

【0025】

図６（Ａ）の例では、顧客が左手でシャツ６１０に触った場合を示している。
顧客６３０が撮影されていない状態から、顧客６３０等が予め定められた時間以上とどまっていることを検知した場合に、顧客が商品エリアに入った行動として判定すればよい。
そして、視線検知モジュール１４４がシャツ６１０への視線であることを検知し、その視線が予め定められた時間以上ある場合に、「商品を見た行動」であると判定する。なお、視線検知モジュール１４４は、眼球６５０内の瞳孔６５１の位置がシャツ６１０の方向であることを検知することによって、シャツ６１０への視線であると検知してもよい。さらに、眼球６５０内の白目６５２の位置がシャツ６１０とは逆方向であることを検知することによって、シャツ６１０への視線であると検知してもよい、
また、顧客の左手６４０がシャツ６１０内の領域に入り、予め定められた時間以上とどまったことを検知することによって、「商品に触った行動」であると判定する。
図６（Ｂ）の例では、顧客がタグ６２０を見ている場合を示している。
視線検知モジュール１４４がカメラ６９０への視線であることを検知し、その視線が予め定められた時間以上ある場合、「タグを見た行動」であると判定する。なお、タグ６２０とカメラ６９０は隣り合っているので、カメラ６９０への視線とはタグ６２０への視線であるとしてよい。視線検知モジュール１４４は、眼球６５４内の瞳孔６５５の位置が眼球６５４内の中央であることを検知することによって、カメラ６９０への視線であると検知してもよい。また、眼球６５４内の瞳孔６５５が白目６５６に囲まれているという位置関係、眼球６５４内の瞳孔６５５の面積割合が予め定められた閾値以上である場合等にカメラ６９０への視線であると検知するようにしてもよい。なお、左手６４０は、シャツ６１０に触っている状態である左手６４４の位置であってもよいし、シャツ６１０から離れた状態である左手６４２の位置であってもよい。なお、この「タグを見た行動」を「タグを見るための行動」としてもよい。

【0026】

図７は、第１の実施の形態による処理例（３）を示すフローチャートである。
ステップＳ７０２では、撮影モジュール１１０が、商品エリア内を撮影する。
ステップＳ７０４では、画像受付モジュール１２０が、画像を受け付ける。
ステップＳ７０６では、顧客特徴抽出モジュール１３２が、その画像から顧客の特徴を抽出する。
ステップＳ７０８では、タグ認識モジュール１３４が、その画像からタグを認識する。
ステップＳ７１０では、行動特定モジュール１４２が、行動を特定する。
ステップＳ７１２では、行動特定モジュール１４２が、特定された行動を判断する。その行動が、商品エリアに顧客が入った行動であればステップＳ７１４へ進み、商品を触った行動であればステップＳ７１６へ進み、タグを触った行動であればステップＳ７１８へ進む。
ステップＳ７１４では、計数モジュール１４６が、商品エリアに顧客が入った行動をカウントする。
ステップＳ７１６では、計数モジュール１４６が、商品を触った行動をカウントする。
ステップＳ７１８では、計数モジュール１４６が、タグを触った行動をカウントする。
ステップＳ７２０では、計数モジュール１４６が、情報記録モジュール１５０にカウント結果を記録する。

【0027】

図８は、第１の実施の形態による処理例（３）を示す説明図である。特に、ステップＳ７１０での、行動特定モジュール１４２が、顧客の行動を特定する処理例について説明する。
この例では、撮影モジュール１１０は、商品エリアを横から撮影するように取り付けられている。つまり、シャツ８１０、顧客８３０を側面から撮影する位置である。
また、タグ８２０は、シャツ８１０の下部に吊り下げられている状態で取り付けられている。したがって、顧客が撮影されていない状態の画像では、シャツ８１０とタグ８２０が重なった位置にはないこととなる。つまり、シャツ８１０は上部の領域にあり、それより下の領域にタグ８２０が撮影されていることになる。また、タグ８２０は、吊り下げられている状態で上下が逆になっていてもよい。この場合、顧客が、タグ８２０の内容を見るためには、タグ８２０を手に取る可能性が高まるためである。

【0028】

図８（Ａ）の例では、顧客が手８４０でシャツ８１０に触った場合を示している。
顧客８３０が撮影されていない状態から、顧客８３０等が予め定められた時間以上とどまっていることを検知した場合に、顧客が商品エリアに入った行動として判定すればよい。
そして、手８４０がシャツ８１０内の領域に入り、予め定められた時間以上とどまったことを検知することによって、「商品に触った行動」であると判定する。
図８（Ｂ）の例では、顧客がタグ８２０に触った場合を示している。
手８４２がタグ８２０内の領域に入り、予め定められた時間以上とどまったことを検知することによって、「タグに触った行動」であると判定する。なお、この「タグに触った行動」を「タグを見るための行動」としてもよい。

【0029】

図９は、第２の実施の形態の構成例についての概念的なモジュール構成図である。
第２の実施の形態である情報処理装置９００は、顧客の行動を判定するものであって、図９の例に示すように、検出情報受付モジュール９２０、情報処理モジュール９４０、情報記録モジュール９５０を有している。
本実施の形態では、商品にタグが吊り下げられている。そして、そのタグには、距離を計測するための機器が取り付けられている。例えば、電波の強弱によって距離を測定することが可能なＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ＩＤｅｎｔｉｆｉｅｒ）等であってもよい。そして、そのタグに取り付けられた機器と無線通信を行う機器が商品の近辺に設置されている。例えば、商品が服である場合は、ハンガー等にその機器を埋め込んでいてもよい。この場合、タグが顧客によって触られた状態でのタグとハンガー間の距離は、タグが吊り下げられた状態でのタグとハンガー間の距離とは異なる。タグを手に取った状態での距離を異ならせる確実性を高めるために、商品の下部にタグを吊り下げるようにしてもよい。

【0030】

検出モジュール９１０は、情報処理装置９００の検出情報受付モジュール９２０と接続されている。検出モジュール９１０は、前述のように、タグに取り付けられた機器と予め定められた位置との間の距離を検出する。
検出情報受付モジュール９２０は、検出モジュール９１０、情報処理モジュール９４０と接続されている。検出情報受付モジュール９２０は、検出モジュール９１０によって検出された距離を受け付け、情報処理モジュール９４０に渡す。
情報処理モジュール９４０は、検出情報受付モジュール９２０、情報記録モジュール９５０と接続されている。情報処理モジュール９４０は、行動特定モジュール９４２、計数モジュール９４６を有している。
行動特定モジュール９４２は、タグと予め定められた位置との間の距離が、予め定められた距離未満又は以下となった場合に、顧客によるその商品のそのタグを見るための行動であるとして判定する。ここで「予め定められた位置」として、例えば、タグに取り付けられた機器と対応する機器が備え付けられている機器（例えば、前述のハンガー）の位置がある。また、「予め定められた距離」とは、タグが吊り下げられた状態（つまり、顧客がタグに触っていない状態）における、タグと予め定められた位置との間の距離である。顧客がタグに触った場合（手に取った場合）は、タグと予め定められた位置とは近くなる。したがって、前述の条件（タグと予め定められた位置との間の距離が、予め定められた距離未満又は以下となった場合）を満たす場合は、顧客によるその商品のそのタグを見るための行動であるとして判定する。
計数モジュール９４６は、計数モジュール１４６と同等の機能を有する。
情報記録モジュール９５０は、情報処理モジュール９４０と接続されている。情報記録モジュール９５０は、情報記録モジュール１５０と同等の機能を有する。

【0031】

図１０は、第２の実施の形態を実現する場合のシステム構成例を示す説明図である。
情報処理装置９００、検出モジュール９１０Ａ、検出モジュール９１０Ｂ、検出モジュール９１０Ｃ、検出モジュール９１０Ｄ、商品管理装置２１０は、通信回線２９０を介してそれぞれ接続されている。図２の例に示したシステム構成例と同等のものであり、撮影モジュール１１０を検出モジュール９１０に、情報処理装置１００を情報処理装置９００に変更したものである。

【0032】

図１１は、第２の実施の形態による処理例を示すフローチャートである。
ステップＳ１１０２では、検出モジュール９１０が、センサ・電波送信モジュール１２２５の状態を検出する。
ステップＳ１１０４では、検出情報受付モジュール９２０が、状態情報を受け付ける。
ステップＳ１１０６では、行動特定モジュール９４２が、行動を特定する。
ステップＳ１１０８では、行動特定モジュール９４２が、特定された行動を判断する。その行動が、商品を触った行動であればステップＳ１１１０へ進み、タグを触った行動であればステップＳ１１１２へ進む。
ステップＳ１１１０では、計数モジュール９４６が、商品を触った行動をカウントする。
ステップＳ１１１２では、計数モジュール９４６が、タグを触った行動をカウントする。
ステップＳ１１１４では、計数モジュール９４６が、情報記録モジュール９５０にカウント結果を記録する。

【0033】

図１２は、第２の実施の形態による処理例（１）を示す説明図である。特に、ステップＳ１１０６での、行動特定モジュール９４２が、顧客の行動を特定する処理例について説明する。
図１２（Ａ）の例に示すように、センサ・電波送信モジュール１２２５は、シャツ１２１０の下部に吊り下げられている。タグ１２２０にセンサ・電波送信モジュール１２２５が取り付けられている。そして、ハンガー１２５５には電波送受信モジュール１２５０が取り付けられている。センサ・電波送信モジュール１２２５は電波送受信モジュール１２５０との通信を行い、電波送受信モジュール１２５０は、センサ・電波送信モジュール１２２５までの距離を計測する。そして、計測した距離を検出情報受付モジュール９２０に送信する。また、センサ・電波送信モジュール１２２５には加速度センサ等が取り付けられており、タグ１２２０（センサ・電波送信モジュール１２２５）の動きを検知し、その動きを示す情報を電波送受信モジュール１２５０に送信し、電波送受信モジュール１２５０はその動きを示す情報を検出情報受付モジュール９２０に送信する。具体的には、上下左右の動きを検出し、電波でその動きの情報を発信する。
顧客１２３０が手１２４０でシャツ１２１０を触った場合は、タグ１２２０が揺れる可能性が高い。したがって、センサ・電波送信モジュール１２２５の加速度センサ等によって動きが検知された場合であって、センサ・電波送信モジュール１２２５と電波送受信モジュール１２５０間の距離が予め定められた距離であるとき（又は動きの前後で距離の変化が予め定められた範囲に収まっているとき）は、「商品を触った行動」であると判定する。
図１２（Ｂ）に示す例のように、顧客１２３０が手１２４２でタグ１２２０を触った場合は、センサ・電波送信モジュール１２２５と電波送受信モジュール１２５０との距離が、図１２（Ａ）に示す例の場合よりも短くなる。したがって、センサ・電波送信モジュール１２２５の加速度センサ等によって動きが検知された場合であって、センサ・電波送信モジュール１２２５と電波送受信モジュール１２５０間の距離が予め定められた距離未満又は以下である場合は、「タグを触った行動」であると判定する。さらに、この判定のための条件として、センサ・電波送信モジュール１２２５の加速度センサ等によって動きが検知されたことを付加してもよい。なお、この「タグに触った行動」を「タグを見るための行動」としてもよい。

【0034】

図１３は、第２の実施の形態で用いるタグ１３００の例を示す説明図である。図１２の例で示したタグ１２２０は、タグ１２２０の一方を糸で吊り下げる一般的なものであるが、図１３の例に示すタグ１３００であってもよい。
タグ１３００には、４つの糸１３９０（糸１３９０Ａ、糸１３９０Ｂ、糸１３９０Ｃ、糸１３９０Ｄ）が４角に取り付けられ、タグ１３００を床と平行に保つようにしている。なお、タグ１３００を床と平行に保つようになるのであれば、糸１３９０は４本でなくてもよいし（例えば、３本、５本等）、また他の装置（治具）を用いて吊り下げるようにしてもよい。
そして、タグ１３００には、動きを検知するセンサ・電波送信モジュール１３１０が２つ（センサ・電波送信モジュール１３１０Ａ、センサ・電波送信モジュール１３１０Ｂ）取り付けられている。センサ・電波送信モジュール１３１０は、タグ１３００に記載されている文字等（図形等も含む）が読める向きの上下に１つずつが望ましい。つまり、文字等を読むために、タグ１３００を傾ける必要があるが、その際に、一方のセンサ・電波送信モジュール１３１０は上方向に移動し、他方のセンサ・電波送信モジュール１３１０は下方向に移動することになる。また、タグ１３００内の文字等は、裏側（通常の状態では見られない側）に記載されているのが望ましい。文字等を読むためには、タグ１３００を手に取らざるを得ないからである。センサ・電波送信モジュール１３１０は、１つのタグ１３００に対して、３つ以上取り付けるようにしてもよい。

【0035】

図１４は、第２の実施の形態によるタグ１３００を用いた処理例（２）を示す説明図である。
（１）あるアパレル店において、顧客が商品１４１０を手に取ると、商品１４１０についているタグ１３００に取り付けられている２つのセンサ・電波送信モジュール１３１０Ａ、センサ・電波送信モジュール１３１０Ｂが信号を発信し、電波受信モジュール１４５０がその信号を受信する。なお、電波受信モジュール１４５０は、センサ・電波送信モジュール１３１０Ａ、１３１０Ｂから発信された電波情報を受信する。商品種類毎に取り付けられている。また、電波情報が発信された加速度センサが取り付けられている商品情報を有している。
電波受信モジュール１４５０に予め記録されている商品１４１０の情報と、センサ・電波送信モジュール１３１０Ａ、センサ・電波送信モジュール１３１０Ｂの動作情報を併せて情報処理装置１４６０に送信する。センサ・電波送信モジュール１３１０Ａ、センサ・電波送信モジュール１３１０Ｂの動作情報は、共に「ｚ軸正方向（上方向）」である場合、情報処理装置９００としての機能を有する情報処理装置１４６０（行動特定モジュール９４２）によって「商品が手に取られた」と判定され、情報記録モジュール９５０としての機能を有する情報記録モジュール１４７０に記録される。このように、両方のセンサ・電波送信モジュール１３１０が検知した動きが同じ方向への動きである場合は、「商品が手に取られた」と判定する。

【0036】

（２）その後、顧客がタグ１３００を手に取った（又は裏返した）とすると、（１）の場合と同様にセンサ・電波送信モジュール１３１０Ａ、センサ・電波送信モジュール１３１０Ｂから発信された信号を電波受信モジュール１４５０が受信し、商品１４１０の情報と共に情報処理装置１４６０へ情報を送信する。センサ・電波送信モジュール１３１０Ａ、センサ・電波送信モジュール１３１０Ｂの動作情報は、それぞれ「ｚ軸正方向（上方向）」と「ｚ軸負方向（下方向）」であり、情報処理装置１４６０（行動特定モジュール９４２）によって「タグに触った行動」（又は「タグを裏返した行動」）と判定され、情報記録モジュール１４７０に記録される。なお、この「タグに触った行動」（又は「タグを裏返した行動」）を「タグを見るための行動」としてもよい。つまり、一方のセンサ・電波送信モジュール１３１０が検知した動きと、他方のセンサ・電波送信モジュール１３１０が検知した動きが逆方向である場合に、顧客による商品のタグを見るための行動であると判定する。

【0037】

図１５は、動作・カウントテーブル１５００のデータ構造例を示す説明図である。動作・カウントテーブル１５００は、第１の実施の形態、第２の実施の形態における情報記録モジュール１５０、情報記録モジュール９５０（情報記録モジュール１４７０）に記録される処理結果である。
動作・カウントテーブル１５００は、動作欄１５１０、カウント欄１５２０を有している。動作欄１５１０は、行動を記憶している。カウント欄１５２０は、その行動が行われた回数を記憶している。
また処理結果として、行動が行われた日時（年、月、日、時、分、秒、秒以下、又はこれらの組み合わせであってもよい）等を含めてもよい。
これらの処理結果を用いて、例えば、「商品が手に取られている行動」は「その商品に興味あり」と判断してもよいし、「タグを見るための行動」は「その商品の値段に興味あり」と判断してもよいし、予め定められた時間内に行動が複数回検出されている場合は、１人（同じ顧客）による行動であると判断してもよい。これらの判断結果をリアルタイムで店員に通知するようにしてもよい。

【0038】

図１６を参照して、本実施の形態の情報処理装置（情報処理装置１００、情報処理装置９００）のハードウェア構成例について説明する。図１６に示す構成は、例えばパーソナルコンピュータ（ＰＣ）等によって構成されるものであり、スキャナ等のデータ読み取り部１６１７と、プリンタ等のデータ出力部１６１８を備えたハードウェア構成例を示している。

【0039】

ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１６０１は、前述の実施の形態において説明した各種のモジュール、すなわち、画像受付モジュール１２０、画像処理モジュール１３０、顧客特徴抽出モジュール１３２、タグ認識モジュール１３４、情報処理モジュール１４０、行動特定モジュール１４２、視線検知モジュール１４４、計数モジュール１４６、検出情報受付モジュール９２０、情報処理モジュール９４０、行動特定モジュール９４２、計数モジュール９４６等の各モジュールの実行シーケンスを記述したコンピュータ・プログラムにしたがった処理を実行する制御部である。

【0040】

ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１６０２は、ＣＰＵ１６０１が使用するプログラムや演算パラメータ等を格納する。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１６０３は、ＣＰＵ１６０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を格納する。これらはＣＰＵバス等から構成されるホストバス１６０４により相互に接続されている。

【0041】

ホストバス１６０４は、ブリッジ１６０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バス等の外部バス１６０６に接続されている。

【0042】

キーボード１６０８、マウス等のポインティングデバイス１６０９は、操作者により操作される入力デバイスである。ディスプレイ１６１０は、液晶表示装置又はＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）等があり、各種情報をテキストやイメージ情報として表示する。

【0043】

ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）１６１１は、ハードディスクを内蔵し、ハードディスクを駆動し、ＣＰＵ１６０１によって実行するプログラムや情報を記録又は再生させる。ハードディスクには、画像、検出情報、計数結果等が格納される。さらに、その他の各種のデータ処理プログラム等、各種コンピュータ・プログラムが格納される。

【0044】

ドライブ１６１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体１６１３に記録されているデータ又はプログラムを読み出して、そのデータ又はプログラムを、インタフェース１６０７、外部バス１６０６、ブリッジ１６０５、及びホストバス１６０４を介して接続されているＲＡＭ１６０３に供給する。リムーバブル記録媒体１６１３も、ハードディスクと同様のデータ記録領域として利用可能である。

【0045】

接続ポート１６１４は、外部接続機器１６１５を接続するポートであり、ＵＳＢ、ＩＥＥＥ１３９４等の接続部を持つ。接続ポート１６１４は、インタフェース１６０７、及び外部バス１６０６、ブリッジ１６０５、ホストバス１６０４等を介してＣＰＵ１６０１等に接続されている。通信部１６１６は、通信回線に接続され、外部とのデータ通信処理を実行する。データ読み取り部１６１７は、例えばスキャナであり、ドキュメントの読み取り処理を実行する。データ出力部１６１８は、例えばプリンタであり、ドキュメントデータの出力処理を実行する。

【0046】

なお、図１６に示す情報処理装置のハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図１６に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア（例えば特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ：ＡＳＩＣ）等）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図１６に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、複写機、ファックス、スキャナ、プリンタ、複合機（スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）等に組み込まれていてもよい。

【0047】

また、前述の実施の形態の説明において、予め定められた値との比較において、「以上」、「以下」、「より大きい」、「より小さい（未満）」としたものは、その組み合わせに矛盾が生じない限り、それぞれ「より大きい」、「より小さい（未満）」、「以上」、「以下」としてもよい。

【0048】

なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通等のために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、ブルーレイ・ディスク（Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ）、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ（登録商標））、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）、ＳＤ（Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌ）メモリーカード等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、又は無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、又は別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して記録されていてもよい。また、圧縮や暗号化等、復元可能であればどのような態様で記録されていてもよい。

【0049】

前述の実施の形態は以下のように把握してもよい。
例えば、課題として以下のものがある。
本実施の形態は、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定するようにした情報処理装置及び情報処理プログラムを提供することを目的としている。
［Ａ１］顧客が撮影されている画像から、該顧客による商品のタグを見るための行動を判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
を具備することを特徴とする情報処理装置。

【0050】

［Ａ２］前記タグを見るためには前記商品に触れることが必要な位置に、該タグが取り付けられており、
前記判定手段は、前記商品に触れた後に、前記タグを前記画像内で検知した場合は、前記顧客による該商品の該タグを見るための行動であると判定する
ことを特徴とする［Ａ１］に記載の情報処理装置。

【0051】

［Ａ３］前記画像を撮影する撮影手段と前記タグは隣り合った位置にあり、
前記判定手段は、前記画像内で前記顧客の視線が前記撮影手段に向かっている場合は、該顧客による前記商品の前記タグを見るための行動であると判定する
ことを特徴とする［Ａ１］に記載の情報処理装置。

【0052】

［Ａ４］前記タグは、前記商品の下部に吊り下げられており、
前記判定手段は、前記タグに触れたことを前記画像内で検知した場合は、前記顧客による前記商品の該タグを見るための行動であると判定する
ことを特徴とする［Ａ１］に記載の情報処理装置。

【0053】

［Ａ５］商品にタグが吊り下げられており、該タグと予め定められた位置との間の距離が、予め定められた距離未満又は以下となった場合に、顧客による該商品の該タグを見るための行動であるとして判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
を具備することを特徴とする情報処理装置。

【0054】

［Ａ６］前記タグには、動きを検知する２つ以上の検知部が取り付けられており、
前記判定手段は、一方の検知部が検知した動きと、他方の検知部が検知した動きが逆方向である場合に、前記顧客による前記商品の前記タグを見るための行動であると判定する
ことを特徴とする［Ａ５］に記載の情報処理装置。

【0055】

［Ａ７］コンピュータを、
顧客が撮影されている画像から、該顧客による商品のタグを見るための行動を判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
として機能させるための情報処理プログラム。

【0056】

［Ａ８］コンピュータを、
商品にタグが吊り下げられており、該タグと予め定められた位置との間の距離が、予め定められた距離未満又は以下となった場合に、顧客による該商品の該タグを見るための行動であるとして判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
として機能させるための情報処理プログラム。

【0057】

そして、前述の発明は、以下の効果を有する。
［Ａ１］の情報処理装置によれば、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定することができる。

【0058】

［Ａ２］の情報処理装置によれば、タグを見るためには商品に触れることが必要な位置に、そのタグが取り付けられている場合に、タグを見るための行動を判定することができる。

【0059】

［Ａ３］の情報処理装置によれば、画像を撮影する撮影手段と前記タグは隣り合った位置にある場合に、タグを見るための行動を判定することができる。

【0060】

［Ａ４］の情報処理装置によれば、タグが商品の下部に吊り下げられている場合に、タグを見るための行動を判定することができる。

【0061】

［Ａ５］の情報処理装置によれば、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定することができる。

【0062】

［Ａ６］の情報処理装置によれば、タグに取り付けられた検知部が検知した動きによって、顧客による商品の前記タグを見るための行動であると判定することができる。

【0063】

［Ａ７］の情報処理プログラムによれば、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定することができる。

【0064】

［Ａ８］の情報処理プログラムによれば、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定することができる。

【0065】

また、前述の実施の形態は以下のように把握してもよい。
［Ｂ１］撮影手段と、
顧客が撮影されている画像から、該顧客による商品のタグを見るための行動を判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
を具備し、
前記タグを見るためには前記商品に触れることが必要な位置に、該タグが取り付けられており、
前記判定手段は、前記商品に触れた後に、前記タグを前記画像内で検知した場合は、前記顧客による該商品の該タグを見るための行動であると判定し、
前記タグには、特定波長に反応する塗料が塗られている、又は、該タグには、特定波長を発する装置が付与されており、
前記撮影手段は、前記特定波長に反応するセンサを備えており、
前記判定手段は、前記特定波長に基づいてタグを認識する、
ことを特徴とする情報処理装置。

【0066】

［Ｂ２］撮影手段と、
顧客が撮影されている画像から、該顧客による商品のタグを見るための行動を判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
を具備し、
前記画像を撮影する撮影手段と前記タグは隣り合った位置にあり、
前記判定手段は、前記画像内で前記顧客の視線が前記撮影手段に向かっている場合は、該顧客による前記商品の前記タグを見るための行動であると判定し、
前記タグには、特定波長に反応する塗料が塗られている、又は、該タグには、特定波長を発する装置が付与されており、
前記撮影手段は、前記特定波長に反応するセンサを備えており、
前記判定手段は、前記特定波長に基づいてタグを認識する、
ことを特徴とする情報処理装置。

【0067】

［Ｂ３］撮影手段と、
顧客が撮影されている画像から、該顧客による商品のタグを見るための行動を判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
を具備し、
前記タグは、前記商品の下部に吊り下げられており、
前記判定手段は、前記タグに触れたことを前記画像内で検知した場合は、前記顧客による前記商品の該タグを見るための行動であると判定し、
前記タグには、特定波長に反応する塗料が塗られている、又は、該タグには、特定波長を発する装置が付与されており、
前記撮影手段は、前記特定波長に反応するセンサを備えており、
前記判定手段は、前記特定波長に基づいてタグを認識する、
ことを特徴とする情報処理装置。

【0068】

［Ｂ４］コンピュータを、
撮影手段と、
顧客が撮影されている画像から、該顧客による商品のタグを見るための行動を判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
として機能させ、
前記タグを見るためには前記商品に触れることが必要な位置に、該タグが取り付けられており、
前記判定手段は、前記商品に触れた後に、前記タグを前記画像内で検知した場合は、前記顧客による該商品の該タグを見るための行動であると判定し、
前記タグには、特定波長に反応する塗料が塗られている、又は、該タグには、特定波長を発する装置が付与されており、
前記撮影手段は、前記特定波長に反応するセンサを備えており、
前記判定手段は、前記特定波長に基づいてタグを認識する、
情報処理プログラム。

【0069】

［Ｂ５］コンピュータを、
撮影手段と、
顧客が撮影されている画像から、該顧客による商品のタグを見るための行動を判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
として機能させ、
前記画像を撮影する撮影手段と前記タグは隣り合った位置にあり、
前記判定手段は、前記画像内で前記顧客の視線が前記撮影手段に向かっている場合は、該顧客による前記商品の前記タグを見るための行動であると判定し、
前記タグには、特定波長に反応する塗料が塗られている、又は、該タグには、特定波長を発する装置が付与されており、
前記撮影手段は、前記特定波長に反応するセンサを備えており、
前記判定手段は、前記特定波長に基づいてタグを認識する、
情報処理プログラム。

【0070】

［Ｂ６］コンピュータを、
撮影手段と、
顧客が撮影されている画像から、該顧客による商品のタグを見るための行動を判定する判定手段と、
前記判定手段によって判定された行動毎に計数する計数手段
として機能させ、
前記タグは、前記商品の下部に吊り下げられており、
前記判定手段は、前記タグに触れたことを前記画像内で検知した場合は、前記顧客による前記商品の該タグを見るための行動であると判定し、
前記タグには、特定波長に反応する塗料が塗られている、又は、該タグには、特定波長を発する装置が付与されており、
前記撮影手段は、前記特定波長に反応するセンサを備えており、
前記判定手段は、前記特定波長に基づいてタグを認識する、
情報処理プログラム。

【0071】

そして、前述の発明は、以下の効果を有する。
［Ｂ１］の情報処理装置によれば、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定することができる。

【0072】

［Ｂ２］の情報処理装置によれば、画像を撮影する撮影手段と前記タグは隣り合った位置にある場合に、タグを見るための行動を判定することができる。

【0073】

［Ｂ３］の情報処理装置によれば、タグが商品の下部に吊り下げられている場合に、タグを見るための行動を判定することができる。

【0074】

［Ｂ４］の情報処理プログラムによれば、顧客の行動をその行動毎に計数する場合にあって、顧客による商品のタグを見るための行動を判定することができる。

【0075】

［Ｂ５］の情報処理プログラムによれば、画像を撮影する撮影手段と前記タグは隣り合った位置にある場合に、タグを見るための行動を判定することができる。

【0076】

［Ｂ６］の情報処理プログラムによれば、タグが商品の下部に吊り下げられている場合に、タグを見るための行動を判定することができる。

【符号の説明】

【0077】

１００…情報処理装置
１１０…撮影モジュール
１２０…画像受付モジュール
１３０…画像処理モジュール
１３２…顧客特徴抽出モジュール
１３４…タグ認識モジュール
１４０…情報処理モジュール
１４２…行動特定モジュール
１４４…視線検知モジュール
１４６…計数モジュール
１５０…情報記録モジュール
２１０…商品管理装置
２９０…通信回線
９００…情報処理装置
９１０…検出モジュール
９２０…検出情報受付モジュール
９４０…情報処理モジュール
９４２…行動特定モジュール
９４６…計数モジュール
９５０…情報記録モジュール
１４５０…電波受信モジュール
１４６０…情報処理装置
１４７０…情報記録モジュール

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】