特開 2024-175143 表示制御装置、制御方法、プログラム及び記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024175143

(43)【公開日】2024-12-17

(54)【発明の名称】表示制御装置、制御方法、プログラム及び記憶媒体

(51)【国際特許分類】

   G06Q 30/0601 20230101AFI20241210BHJP

【ＦＩ】

G06Q30/0601 338

【審査請求】有

【請求項の数】1

【出願形態】ＯＬ

(21)【出願番号】P 2024168475

(22)【出願日】2024-09-27

(62)【分割の表示】P 2023001437の分割

【原出願日】2014-04-28

(71)【出願人】

【識別番号】000005016

【氏名又は名称】パイオニア株式会社

(74)【代理人】

【識別番号】100107331

【弁理士】

【氏名又は名称】中村 聡延

(72)【発明者】

【氏名】加来 文伸

(57)【要約】

【課題】顧客などの利用者から指定された商品の配置場所や当該商品の詳細情報を好適に表示する。
【解決手段】表示制御装置は、商品を取り扱う販売者によって視認される表示部の表示を制御し、商品情報取得部と、商品位置取得部と、表示制御部とを備える。商品位置取得部は、利用者により選択された商品の位置に関する位置情報を取得する。表示制御部は、商品情報取得部が取得した商品に関する情報を、商品位置情報取得部が取得した位置情報に基づいて、見かけ上商品に対応付けて表示部に表示させる。
【選択図】図８

【特許請求の範囲】

【請求項1】

利用者端末を使用する利用者に選択された商品に関する情報を、前記選択された商品に関する位置情報に基づいて、表示部に、前記選択された商品と見かけ上対応付けて前記利用者以外の者に視認される表示部に表示させる制御部と、
画像を撮影する撮影部と、を備え、
前記制御部は、前記画像内に人物が映っている場合、前記人物の特定ができない画像に加工し、該加工した画像を、前記利用者端末へ通信部により送信させることを特徴とする表示制御装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報を表示する技術に関する。

【背景技術】

【0002】

従来から、インターネットショッピングなどにおいて、店内を撮影した画像を顧客が使用する顧客端末に表示させる技術が存在する。例えば、特許文献１には、電子商取引において、店内に設置された複数のカメラから撮影される画像を同時又は選択的に顧客端末に表示させることで、顧客が購入したい商品を選択させるバーチャル店舗システムが開示されている。また、特許文献２には、電子商取引において、文字又は音声チャットにより、店員の映像を表示した状態で顧客が指定した商品について店員が説明を行う通信システムが開示されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００９－２２３７６０号公報

【特許文献2】特開２００５－０７１３０４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

電子商取引システムにおいて、顧客が商品の一覧画面などで任意の商品を指定した場合に、店員からその説明を即時に受けることができると便宜である。この場合、店員は、顧客が指定した商品の配置場所や商品情報を即時かつ的確に認識して説明する必要がある。特許文献１及び２は、この点について何ら開示していない。

【0005】

本発明は、上記のような課題を解決するためになされたものであり、顧客などの利用者から指定された商品の配置場所や当該商品の詳細情報を好適に表示することが可能な表示制御装置を提供することを主な目的とする。

【課題を解決するための手段】

【0006】

請求項に記載の発明は、表示制御装置であって、利用者端末を使用する利用者に選択された商品に関する情報を、前記選択された商品に関する位置情報に基づいて、表示部に、前記選択された商品と見かけ上対応付けて前記利用者以外の者に視認される表示部に表示させる制御部と、画像を撮影する撮影部と、を備え、前記制御部は、前記画像内に人物が映っている場合、前記人物の特定ができない画像に加工し、該加工した画像を、前記利用者端末へ通信部により送信させることを特徴とする。

【0007】

また、請求項に記載の発明は、画像を撮影する撮影部を備える表示制御装置が実行する制御方法であって、利用者端末を使用する利用者に選択された商品に関する情報を、前記選択された商品に関する位置情報に基づいて、表示部に、前記選択された商品と見かけ上対応付けて前記利用者以外の者に視認される表示部に表示させる第１工程と、前記画像内に人物が映っている場合、前記人物の特定ができない画像に加工し、該加工した画像を、前記利用者端末へ通信部により送信させる第２工程と、を備えることを特徴とする。

【0008】

また、請求項に記載の発明は、画像を撮影する撮影部を備える表示制御装置のコンピュータが実行するプログラムであって、利用者端末を使用する利用者に選択された商品に関する情報を、前記選択された商品に関する位置情報に基づいて、表示部に、前記選択された商品と見かけ上対応付けて前記利用者以外の者に視認される表示部に表示させる制御部として前記コンピュータを機能させ、前記制御部は、前記画像内に人物が映っている場合、前記人物の特定ができない画像に加工し、該加工した画像を、前記利用者端末へ通信部により送信させることを特徴とする。

【図面の簡単な説明】

【0009】

【図1】表示システムの概略構成図である。

【図2】商品が配置される棚を拡大した図である。

【図3】店員端末の概略構成図である。

【図4】顧客端末の概略構成図である。

【図5】サーバ装置の概略構成図である。

【図6】顧客情報ＤＢのデータ構造を示す。

【図7】表示システムの処理の概要を示すフローチャートである

【図8】商品説明要求処理の手順を示すフローチャートである。

【図9】説明商品強調処理の手順を示すフローチャートである。

【図10】購入関連処理の手順を示すフローチャートである。

【図11】接客対象の顧客を選択する際の店員端末のハーフミラーの表示例である。

【図12】接客問合せ信号を受信した直後の顧客端末の画面表示例である。

【図13】接客モードへの移行後の顧客端末の画面表示例である。

【図14】顧客端末の画面上で説明要求商品を指定する操作を行う様子を示す。

【図15】説明要求商品が指定された場合の店員端末のハーフミラーの表示例である。

【図16】店員端末が店員から外された際の顧客端末の画面表示例である。

【図17】変形例に係る店員端末のハーフミラーの表示例である。

【発明を実施するための形態】

【0010】

本発明の好適な実施形態によれば、表示制御装置は、商品を取り扱う販売者によって視認される表示部の表示を制御する表示制御装置であって、利用者によって選択された商品に関する情報を取得する商品情報取得部と、前記選択された商品に関する位置情報を取得する商品位置取得部と、前記商品情報取得部が取得した前記商品に関する情報を、前記商品位置情報取得部が取得した位置情報に基づいて、見かけ上前記選択された商品に対応付けて前記表示部に表示させる表示制御部と、を備える。

【0011】

上記表示制御装置は、商品を取り扱う販売者によって視認される表示部の表示を制御し、商品情報取得部と、商品位置取得部と、表示制御部とを備える。「販売者」は、販売等を目的として商品を取り扱う者であって、例えば、商品の説明を行うことが可能な販売員又は店員などが該当する。商品位置取得部は、利用者により選択された商品に関する位置情報を取得する。ここで、「利用者」とは、ネットワーク等を介して販売者とコミュニケーションがとれる者であって、商品の説明やその商品の店舗での位置情報を要求する者を指す。具体的には、利用者は、商品を購入する顧客であってもよく、販売者から離れた遠隔地に存在する店員であってもよい。また、「商品に関する位置情報」とは、商品の位置情報の他、商品棚などの商品に近接する物の位置情報であってもよい。表示制御部は、商品情報取得部が取得した商品に関する情報を、商品位置情報取得部が取得した位置情報に基づいて、見かけ上商品に対応付けて表示部に表示させる。この態様により、表示制御装置は、商品の配置場所及び商品情報を好適に販売者に認識させることができる。

【0012】

上記表示制御装置の一態様では、表示制御装置は、前記利用者に関する情報を取得する利用者情報取得部をさらに備え、前記表示制御部は、前記利用者情報取得部が取得した前記利用者に関する情報を前記表示部に表示させる。この態様により、表示制御装置は、販売者に利用者情報を認識させ、好適に接客を実行させることができる。

【0013】

上記表示制御装置の他の一態様では、前記表示制御部は、見かけ上前記選択された商品を囲む枠を前記表示部に表示させ、かつ、前記商品に関する情報を、前記枠に対応付けて前記表示部に表示させる。この態様により、表示制御装置は、商品の配置場所及び商品情報を好適に販売者に認識させることができる。

【0014】

上記表示制御装置の他の一態様では、表示制御装置は、前記販売者に装着された撮影部が生成した画像又は前記販売者に装着された音声入力部が生成した音声データの少なくとも一方を、前記利用者が使用する利用者端末へ通信部により送信する通信制御部をさらに有する。表示制御装置は、この態様により、映像又は音声により利用者端末を介して利用者の接客を好適に実行することができる。

【0015】

上記表示制御装置の他の一態様では、前記表示部は装着自在であり、前記通信制御部は、前記表示部が装着状態である場合に限り、前記画像又は前記音声データの少なくとも一方を前記利用者端末へ送信させる。この態様により、来店中の接客を開始したときなどに、来店中の客の映像や音声が利用者端末に流れたりすることを好適に防ぐことができる。

【0016】

上記表示制御装置の他の一態様では、前記通信部は、前記利用者端末が表示する前記画像の表示画面が最前面に表示されているか否かを示す情報を前記利用者端末から受信し、前記表示制御部は、前記画像の表示画面が最前面に表示されていない場合に、所定の情報を前記表示部に表示させる。この態様により、表示制御装置は、利用者が接客用の表示画面以外の画面を閲覧又は操作対象としている場合に、販売者が不要な応対をするのを好適に抑制することができる。

【0017】

上記表示制御装置の他の一態様では、前記販売者が把持する商品を認識する商品認識手段と、前記商品認識手段が認識した商品の識別情報を前記利用者が使用する利用者端末へ通信部により送信する通信制御部と、を有する。この態様により、表示制御装置は、販売者が説明中の商品を利用者に好適に通知することができる。

【0018】

上記表示制御装置の他の一態様では、前記表示制御部は、前記利用者端末から前記商品認識手段が認識する商品とは異なる商品の説明要求を前記通信部が受信した場合、見かけ上前記説明要求があった商品に対応付けて当該商品に関する情報を前記表示部に表示させる。このようにすることで、販売者は、説明が求められた商品の説明を好適に実行することができる。

【0019】

上記表示制御装置の他の一態様では、前記商品位置取得部は、前記利用者によって選択された商品に関連する関連商品に関する位置情報を取得し、前記表示制御手段は、前記関連商品に関する情報を、前記商品位置情報取得部が取得した位置情報に基づいて、見かけ上前記関連商品に対応付けて前記表示部に表示させる。この態様により、表示制御装置は、ユーザが選択した商品に関連した商品の存在を販売者に認識させ、利用者への販売を促進させることができる。

【0020】

上記表示制御装置の他の一態様では、前記商品位置取得部は、前記商品に付されたタグの情報を読み取ったタグリーダの位置を示す位置情報を、前記商品に関する位置情報として取得する。この態様により、表示制御装置は、商品の位置を好適に認識し、当該商品に関する情報を商品に対応付けて表示させることができる。

【0021】

本発明の好適な他の実施形態によれば、表示制御装置は、商品を取り扱う販売者によって視認される表示部の表示を制御する表示制御装置が実行する制御方法であって、利用者によって選択された商品に関する情報を取得する商品情報取得工程と、前記選択された商品に関する位置情報を取得する商品位置取得工程と、前記商品情報取得工程で取得した前記商品に関する情報を、前記商品位置情報取得工程で取得した位置情報に基づいて、見かけ上前記選択された商品に対応付けて前記表示部に表示させる表示制御工程と、を有する。表示制御装置は、この制御方法を実行することで、商品の配置場所及び商品情報を好適に販売者に認識させることができる。

【0022】

本発明のさらに別の実施形態によれば、商品を取り扱う販売者によって視認される表示部の表示を制御するコンピュータが実行するプログラムであって、利用者によって選択された商品に関する情報を取得する商品情報取得部と、前記選択された商品に関する位置情報を取得する商品位置取得部と、前記商品情報取得部が取得した前記商品に関する情報を、前記商品位置情報取得部が取得した位置情報に基づいて、見かけ上前記選択された商品に対応付けて前記表示部に表示させる表示制御部として前記コンピュータを機能させる。コンピュータは、このプログラムを実行することで、商品の配置場所及び商品情報を好適に販売者に認識させることができる。好適には、上記プログラムは、記憶媒体に記憶される。

【実施例0023】

以下、図面を参照して本発明の好適な実施例について説明する。以下では、ヘッドマウントディスプレイを適宜「ＨＭＤ」と表記する。

【0024】

［表示システムの構成］
図１は、本実施例に係る表示システムの概略構成図である。図１に示すように、表示システムは、電子商取引（ＥＣ：Ｅｌｅｃｔｒｏｎｉｃ Ｃｏｍｍｅｒｃｅ）に関するシステムであって、主に、電子商取引で扱われる商品が配置された店舗５内の店員９が装着する店員端末１と、電子商取引の顧客が使用する顧客端末２と、Ｗｅｂサーバ等として機能するサーバ装置３とを備える。そして、表示システムは、店員端末１が撮影する画像等を顧客端末２に送信することで、顧客端末２の画面上で店員９が顧客に対して商品説明などの応対を行う。本実施例では、一例として、店舗５は、衣服を取り扱う店であるものとする。

【0025】

店員端末１は、眼鏡型に構成されたシースルー型ＨＭＤであり、店員９の頭部に装着可能に構成される。また、店員端末１は、サーバ装置３と通信を行い、サーバ装置３から受信した情報に基づき、風景に重ねた画像（「ＡＲ画像」とも呼ぶ。）を表示する。本実施例では、店員端末１は、サーバ装置３が表示情報を提供する電子商取引用の画面（単に「ＥＣ画面」とも呼ぶ。）を閲覧する顧客の情報（「訪問者情報」とも呼ぶ。）をサーバ装置３から受信し、接客すべき顧客を店員９に選択させる。その後、店員端末１は、接客の開始時に、顧客端末２と通信を確立し、撮影した画像を顧客端末２へ送信したり、顧客が説明を要求する商品（「説明要求商品」とも呼ぶ。）の情報を受信して当該商品の配置場所や商品情報を表示したりする。以後では、店員端末１と顧客端末２とが通信を確立して接客用の映像や音声データのやり取りを行う動作モードを、「接客モード」とも呼ぶ。

【0026】

顧客端末２は、例えば顧客が自宅で使用するパーソナルコンピュータやスマートフォンなどの携帯端末であり、サーバ装置３が提供する表示情報に基づくＥＣ画面を表示する。また、顧客端末２は、ＥＣ画面の表示中に、サーバ装置３を介して店員端末１から応対が必要か問い合わせる信号（「接客問合せ信号」とも呼ぶ。）を受信し、ユーザ入力に基づきその応答信号を店員端末１へ送信する。そして、接客モードへの移行後では、顧客端末２は、映像や音声データを店員端末１から受信して出力したり、生成した音声データを店員端末１に送信したりする。顧客端末２は、本発明における「利用者端末」の一例である。

【0027】

サーバ装置３は、店員端末１及び顧客端末２とネットワークを介して通信を行う。サーバ装置３は、顧客端末２のＷｅｂページに関する要求信号に基づき、ＥＣ画面の表示情報を店員端末１に送信する。また、サーバ装置３は、訪問者情報や商品に関する情報を顧客端末２に送信したり、接客問合せ信号の転送処理等を行ったりする。

【0028】

また、店舗５内には、ＲＦＩＤ（Ｒａｄｉｏ ＦｒｅｑｕｅｎｃｙＩｄｅｎｔｉｆｉｅｒ）などのタグ７が付された商品が棚などに配置されており、商品が載置される棚にはタグ７との無線通信を行うタグリーダ６が配置されている。図２は、商品が配置される棚を拡大した図である。図２に示すように、タグリーダ６は、それぞれ破線で示される通信範囲を有し、通信範囲内に存在するタグ７から、対応する商品の識別情報（即ち商品番号）を示す信号を無線通信により受信する。図２の例では、タグリーダ６は、上段の棚、中段の棚、下段の棚のそれぞれに３個ずつ略等間隔に配置され、互いの通信範囲が重ならない程度に近接している。そして、タグリーダ６は、タグ７から受信した商品番号と、タグリーダ６の識別情報とを示す信号（「タグ検出信号」とも呼ぶ。）を、サーバ装置３へ送信する。このようにすることで、後述するように、サーバ装置３は、商品が移動した場合であっても、移動後の商品が存在する場所を、タグリーダ６から受信するタグ検出信号に基づき好適に特定することができる。なお、商品が配置される場所は、商品棚に限らず、ショーケース内などの任意の場所であってもよい。この場合、商品の設置場所ごとにタグリーダ６が設けられてもよく、サーバ装置３が商品の設置場所の情報を予め記憶しておいてもよい。

【0029】

［店員端末の構成］
図３は、店員端末１の概略構成を示す。図２に示すように、店員端末１は、光源ユニット１０と、ハーフミラー１１と、通信部１２と、入力部１３と、記憶部１４と、カメラ１５と、タグリーダ１６と、制御部１７と、スピーカ１８と、計測部１９とを有する。

【0030】

光源ユニット１０は、レーザ光源やＬＣＤ光源などを有しており、このような光源から光を出射する。ハーフミラー１１は、光源ユニット１０からの光を、ユーザの眼球に向けて反射する。これにより、店員端末１によって形成された画像に対応する虚像が、ユーザに視認されることとなる。なお、ハーフミラー１１は透過率と反射率とが概ね等しいが、このようなハーフミラー１１を用いる代わりに、透過率と反射率とが等しくないようなミラー（所謂ビームスプリッタ）を用いても良い。店員端末１又はハーフミラー１１は、本発明における「表示部」の一例である。

【0031】

通信部１２は、制御部１７の制御に基づき、顧客端末２やサーバ装置３とのデータ通信を行う。入力部１３は、ユーザの操作に基づく入力信号を生成して制御部１７に送信する。入力部１３は、例えばユーザが操作するためのボタンや十字キー及びボタンなどを有するリモートコントローラである。また、入力部１３は、マイク１３０を有し、マイク１３０が生成した音声データを制御部１７に送信する。マイク１３０は、接客モード時に入力された音声から音声データを生成する。記憶部１４は、制御部１７が実行するプログラムなどを記憶する。カメラ１５は、制御部１７の制御に基づき、店員端末１の前方を撮影した画像（「撮影画像Ｉｍ」とも呼ぶ。）を生成し、生成した撮影画像Ｉｍを制御部１７に供給する。

【0032】

タグリーダ１６は、商品に付されたタグ７から商品番号を読み取り、読み取った商品番号の情報を制御部１７に供給する。タグリーダ１６は、店員９が商品を手に取って説明する際に、当該商品に付されたタグ７が通信可能範囲に入ることにより、当該タグ７から商品番号を読み取る。

【0033】

スピーカ１８は、制御部１７の制御に基づき、顧客端末２から受信した音声データを出力する。計測部１９は、店員端末１の状態を検出するセンサ等であり、現在位置を示す位置情報を生成するＧＰＳ受信機、方位を検知する地磁気センサ、店員端末１の傾きを検知する加速度センサなどを有する。

【0034】

制御部１７は、図示しないＣＰＵなどのプロセッサやＲＡＭやＲＯＭなどのメモリを有しており、店員端末１の全体的な制御を行う。例えば、制御部１７は、接客モードでは、カメラ１５が生成した撮影画像Ｉｍやマイク１３０が生成した音声データを顧客端末２へ送信したり、顧客端末２から受信した音声データを再生したりする。また、制御部１７は、サーバ装置３から送信される情報に基づき、接客中の顧客の顧客情報や商品情報を表すＡＲ画像を表示したり、計測部１９により計測した現在位置及び店員端末１の向きを検出することで、指定された説明要求商品の配置場所を示すＡＲ画像を表示したりする。なお、ハーフミラー１１を本発明における「表示部」とみなした場合、制御部１７は、本発明における「表示制御装置」及びプログラムを実行するコンピュータの一例である。

【0035】

［顧客端末の構成］
図４は、顧客端末２の概略構成である。顧客端末２は、通信部２２と、入力部２３と、記憶部２４と、制御部２７と、ディスプレイなどの表示部２９とを有する。

【0036】

通信部２２は、制御部２７の制御に基づき、店員端末１やサーバ装置３とのデータ通信を行う。入力部２３は、マイク２３０を有する。マイク２３０は、接客モード時に入力された音声から音声データを生成する。また、入力部２３は、マイク２３０の他、マウス、キーボード、タッチパネルなどの入力デバイスを有する。記憶部２４は、制御部２７が実行するプログラムを記憶する。

【0037】

制御部２７は、図示しないＣＰＵなどのプロセッサやＲＡＭやＲＯＭなどのメモリを有しており、顧客端末２の全体的な制御を行う。例えば、制御部２７は、サーバ装置３から受信した表示情報に基づき、ＥＣ画面を表示部２９に表示させる。また、制御部２７は、接客モードでは、店員端末１から受信した撮影画像Ｉｍや音声データを出力すると共に、マイク２３０により入力された音声データを店員端末１に送信する。

【0038】

［サーバ装置の構成］
図５は、サーバ装置３の概略構成である。サーバ装置３は、通信部３２と、記憶部３４と、制御部３７とを有する。通信部３２は、制御部３７の制御に基づき、店員端末１や顧客端末２とのデータ通信を行う。

【0039】

記憶部３４は、制御部３７が実行するプログラムを記憶する。また、記憶部３４は、顧客情報ＤＢ３４１と、商品情報ＤＢ３４２と、タグリーダ配置情報３４３と、説明済リスト情報３４４とを有する。

【0040】

顧客情報ＤＢ３４１は、顧客端末２の通信アドレスやＥＣ画面へのアクセス履歴などの情報を顧客ごとに記憶する。顧客情報ＤＢ３４１については図６を参照して後述する。商品情報ＤＢ３４２は、ＥＣ画面に表示させる各商品の情報を記憶する。商品情報ＤＢ３４２に登録される商品情報には、商品画像や、商品のサイズ、色、商品名称、製造番号（ＳＮ：Ｓｅｒｉａｌ Ｎｕｍｂｅｒ）などが含まれる。タグリーダ配置情報３４３は、店舗５内に設置された各タグリーダ６の識別情報と配置場所とを関連付けた情報である。説明済リスト情報３４４は、接客時に店員９が顧客に説明した商品を、顧客ごとにリスト化した情報である。

【0041】

制御部３７は、図示しないＣＰＵなどのプロセッサやＲＡＭやＲＯＭなどのメモリを有しており、サーバ装置３の全体的な制御を行う。例えば、制御部３７は、顧客が顧客端末２によりＥＣ画面を表示している時間（単に「訪問時間」とも呼ぶ。）を監視し、訪問時間が所定の閾値を超えた顧客の情報を訪問者情報として店員端末１に送信する。この場合、訪問時間は、Ｗｅｂページ（サイト）ごとの表示時間であってもよく、サーバ装置３が管理する全サイトに対する合計表示時間であってもよい。また、制御部３７は、店員端末１から特定の顧客を指定した接客問合せ信号を受信した場合、該当する顧客端末２に接客問合せ信号を転送する。そして、制御部３７は、接客モードの開始時には、店員端末１と顧客端末２とが直接通信するのに必要な情報を店員端末１又は／及び顧客端末２に送信する。なお、店員端末１を本発明における「表示部」とみなした場合、制御部３７は、本発明における「表示制御装置」及びプログラムを実行するコンピュータの一例である。

【0042】

ここで、顧客情報ＤＢ３４１について補足説明する。図６は、顧客情報ＤＢ３４１のデータ構造を示す。図６に示す顧客情報ＤＢ３４１は、顧客端末２ごとのサーバ装置３との接続状態を示す「Ｓｔａｔｕｓ」、顧客端末２が使用するＩＰアドレスを示す「ＩＰ Ａｄｄｒｅｓｓ」、アクセス日時を示す「Ｄａｔｅ Ｔｉｍｅ」、訪問時間を示す「Ｖｉｓｉｔ Ｄｕｒａｔｉｏｎ」、アクセスしたＥＣ画面のアドレス情報を示す「Ｒｅｑｕｅｓｔ」、顧客端末２が使用するブラウザ等のプログラム情報を示す「Ｕｓｅｒ－ａｇｅｎｔ」、及びＩＰアドレスより特定される国を示す「Ｃｏｕｎｔｒｙ」の各項目を有する。図６の例では、制御部３７は、「ＩＰ Ａｄｄｒｅｓｓ」及び「Ｕｓｅｒ－ａｇｅｎｔ」の項目を顧客の識別情報とし、ＥＣ画面への顧客端末２によるアクセスをリアルタイムに解析することで、顧客情報ＤＢ３４１を更新する。例えば、制御部３７は、顧客端末２との接続状態の有無に基づき、「Ｓｔａｔｕｓ」を更新する。また、制御部３７は、顧客端末２がＥＣ画面へアクセスする度に、顧客端末２との接続日時や訪問時間を計測することで、「Ｄａｔｅ Ｔｉｍｅ」や「Ｖｉｓｉｔ Ｄｕｒａｔｉｏｎ」等の各項目を追加又は更新する。

【0043】

［処理フロー］
次に、本実施例に係る表示システムが実行する処理フローについて、図７～図１０を参照して説明する。

【0044】

（１）処理概要
図７は、本実施例に係る表示システムの処理の概要を示すフローチャートの一例である。表示システムは、図７に示すフローチャートの処理を、ＥＣ画面を表示するために顧客端末２がサーバ装置３にアクセスする度に繰り返し実行する。なお、サーバ装置３は、複数の顧客端末２がＥＣ画面を表示するためにサーバ装置３へアクセスしているときは、各顧客端末２に対して図７の処理をそれぞれ実行する。

【0045】

まず、顧客端末２は、ＵＲＬなどを指定するユーザ操作等に基づき、Ｗｅｂブラウザに表示させるＥＣ画面の表示情報の要求信号をサーバ装置３へ送信する（ステップＳ１０１）。そして、サーバ装置３は、受信した要求信号に基づき、対応するＥＣ画面の表示情報を顧客端末２へ送信する（ステップＳ１０２）。そして、顧客端末２は、受信した表示情報に基づき、ＥＣ画面を表示する（ステップＳ１０３）。

【0046】

次に、サーバ装置３は、アクセス履歴に関する顧客情報ＤＢ３４１を更新する（ステップＳ１０４）。具体的には、サーバ装置３は、顧客端末２がアクセスした日時や訪問時間を計測し、顧客端末２との通信により認識した顧客端末２のＩＰアドレスやプログラム情報に対応付けて顧客情報ＤＢ３４１として記憶する。そして、サーバ装置３は、計測中の訪問時間が所定の閾値を超えたか否か判定する（ステップＳ１０５）。上述の閾値は、例えば、顧客がＥＣ画面上で商品購入を迷っているか否かを判断するための閾値であり、例えば実験等に基づき予め定められた適合値に設定される。

【0047】

そして、サーバ装置３は、訪問時間が閾値を超えたと判断した場合（ステップＳ１０５；Ｙｅｓ）、訪問者情報を店員端末１へ送信する（ステップＳ１０６）。ここで、サーバ装置３は、例えば、訪問者情報として、顧客端末２のＩＰアドレスの他、顧客情報ＤＢ３４１から抽出した国の情報及び訪問時間の情報等や、顧客端末２がＥＣ画面で表示中の商品の情報などを店員端末１へ送信する。一方、サーバ装置３は、訪問時間が閾値を超えていない場合（ステップＳ１０５；Ｎｏ）、訪問時間が閾値を超えないか引き続き監視する。

【0048】

次に、店員端末１は、訪問者情報を示すＡＲ画像を表示する（ステップＳ１０７）。訪問者情報の具体的な表示例については、図１１を参照して後述する。そして、店員端末１は、店員９から接客する旨のユーザ入力を検知したか否か判定する（ステップＳ１０８）。そして、店員端末１は、接客する旨のユーザ入力を検知した場合（ステップＳ１０８；Ｙｅｓ）、接客対象の顧客のＩＰアドレス等を指定した接客問合せ信号をサーバ装置３へ送信する（ステップＳ１０９）。この場合、サーバ装置３は、受信した接客問合せ信号を、対応する顧客の顧客端末２へ転送する（ステップＳ１１０）。

【0049】

接客問合せ信号を受信した顧客端末２は、店員９が接客をする意思がある旨を表示し、接客を受けるか否かユーザに選択させる入力を受け付ける（ステップＳ１１１）。そして、顧客端末２は、接客を受けるか否かを示す応答信号をサーバ装置３へ送信し（ステップＳ１１２）、サーバ装置３は、当該応答信号を店員端末１へ転送する（ステップＳ１１３）。そして、店員端末１は、受信した応答信号が接客要求であるか否か判定する（ステップＳ１１４）。そして、店員端末１は、受信した応答信号が接客要求である場合（ステップＳ１１４；Ｙｅｓ）、顧客端末２との通信を確立し、カメラ１５が生成した撮影画像Ｉｍ及びマイク１３０が生成した音声データを顧客端末２へ送信したり（ステップＳ１１６）、顧客端末２が生成した音声データを受信してスピーカ１８により再生したりする（ステップＳ１１７）。

【0050】

同様に、顧客端末２は、接客を受ける旨の応答を行った場合（ステップＳ１１５；Ｙｅｓ）、店員端末１が生成した撮影画像Ｉｍ及び音声データを受信して再生したり（ステップＳ１１６）、マイク２３０が生成した音声データを店員端末１へ送信したりする（ステップＳ１１７）。

【0051】

一方、店員端末１は、受信した応答信号が接客要求を示すものでない場合（ステップＳ１１４；Ｎｏ）、又は、接客問合せ信号の送信から所定時間以上経過しても応答信号を受信できない場合、フローチャートの処理を終了する。同様に、顧客端末２は、接客を受ける旨の応答を行わなかった場合（ステップＳ１１５；Ｎｏ）、フローチャートの処理を終了する。そして、店員端末１は、店員９からの所定の操作があった場合、又は顧客端末２から接客を終了する旨の通知があった場合、接客を終了すべきと判断し（ステップＳ１１８；Ｙｅｓ）、フローチャートの処理を終了する。同様に、顧客端末２は、接客を終了すべき旨の所定のユーザ操作があった場合、又は店員端末１から接客を終了する旨の通知があった場合、店員９による接客が終了したと判断し（ステップＳ１１９；Ｙｅｓ）、フローチャートの処理を終了する。

【0052】

（２）商品説明要求処理
図８は、図７のステップＳ１１６及びステップＳ１１７の実行時である接客モード時に実行される商品説明要求処理の手順を示すフローチャートである。商品説明要求処理は、接客中に顧客がＥＣ画面上の任意の商品を説明要求商品として指定する操作を行った場合に、指定された説明要求商品の位置及び詳細情報を店員端末１が表示する処理である。表示システムは、図８に示すフローチャートの処理を接客モード時に繰り返し実行する。なお、商品説明要求処理の実行時では、ＥＣ画面は、後述する図１３及び図１４等に示すように、店員端末１が生成した撮影画像Ｉｍの表示領域と、商品の一覧を表示する領域とを有するものとする。

【0053】

まず、顧客端末２は、ＥＣ画面に表示された商品の一覧から一つの商品を説明要求商品として指定するユーザ入力があったか否か判定する（ステップＳ２０１）。この具体的なユーザ入力の受付方法については、図１４を参照して後述説明する。そして、ＥＣ画面上に表示された商品の一覧から一つの商品を説明要求商品として指定するユーザ入力があった場合（ステップＳ２０１；Ｙｅｓ）、顧客端末２は、指定された説明要求商品の商品番号を含む説明要求信号をサーバ装置３へ送信する（ステップＳ２０２）。一方、顧客端末２は、ＥＣ画面上に表示された商品の一覧から一つの商品を説明要求商品として指定するユーザ入力がない場合（ステップＳ２０１；Ｎｏ）、上述のユーザ入力の有無を引き続き監視する。

【0054】

次に、サーバ装置３は、説明要求商品の商品番号を含む信号を受信した場合、受信した商品番号に対応する商品情報を商品情報ＤＢ３４２から抽出し、かつ、受信した商品番号と同一の商品番号を含むタグ検出信号を送信するタグリーダ６の位置をタグリーダ配置情報３４３により特定することで、説明要求商品の配置場所を認識する（ステップＳ２０３）。そして、サーバ装置３は、抽出又は認識した説明要求商品の商品情報及び配置場所の情報を店員端末１へ送信する（ステップＳ２０４）。この場合、店員端末１は、受信した説明要求商品の配置場所を強調表示するＡＲ画像を表示すると共に、受信した商品情報を示すＡＲ画像を表示する（ステップＳ２０５）。この場合、例えば、店員端末１は、計測部１９による計測結果に基づき、店員端末１の位置や向きを認識することで、ハーフミラー１１を介した店員９の視界の範囲を認識し、認識した視界の範囲内に説明要求商品の配置場所がある場合に、当該配置場所を囲むＡＲ画像を表示する。これにより、店員９は、顧客が指定した説明要求商品の場所や商品情報を好適に認識することができ、説明要求商品の説明を好適に実行することができる。

【0055】

（３）説明商品強調処理
図９は、接客モード中に実行される説明商品強調処理の手順を示すフローチャートである。説明商品強調処理は、店員９が手にとって説明している商品を顧客端末２が表示するEＣ画面上で強調表示する処理である。表示システムは、図９に示すフローチャートの処理を接客モード時に繰り返し実行する。なお、説明商品強調処理の実行時では、商品説明要求処理の場合と同様、ＥＣ画面は、店員端末１が生成した撮影画像Ｉｍの表示領域と、商品の一覧を表示する領域とを有するものとする。

【0056】

まず、店員端末１は、タグリーダ１６がタグ７から商品番号を読み取ったか否か判定する（ステップＳ２０６）。そして、店員端末１は、タグリーダ１６がタグ７から商品番号を読み取った場合（ステップＳ２０６；Ｙｅｓ）、読み取った商品番号を顧客端末２へ送信する（ステップＳ２０７）。一方、店員端末１は、タグリーダ１６がタグ７から商品番号を読み取っていない場合（ステップＳ２０６；Ｎｏ）、引き続き、タグリーダ１６がタグ７から商品番号を読み取ったか否か監視する。

【0057】

そして、顧客端末２は、商品番号の受信後、受信した商品番号が示す商品を強調表示する（ステップＳ２０８）。これにより、顧客端末２は、店員９が手にとって説明している商品を、顧客に容易に認識させることができる。

【0058】

（４）購入関連処理
図１０は、接客モードの開始後に実行される購入関連処理の手順を示すフローチャートである。購入関連処理では、表示システムは、説明済リスト情報３４４の生成・更新処理を行うと共に、説明済リスト情報３４４が示す説明済みの商品リストを顧客端末２に表示させることで、顧客による購入商品の指定を円滑に受け付ける。表示システムは、図１０に示すフローチャートの処理を繰り返し実行する。

【0059】

まず、店員端末１は、店員９が商品への説明を実施したか否か判定する（ステップＳ３０１）。例えば、店員端末１は、タグリーダ１６が所定時間以上連続してタグ７から同一の商品番号を読み取った場合、又は、タグリーダ１６による商品番号の読取り中に所定の入力があった場合、当該商品番号が示す商品の説明を店員９が実施したと判断する。そして、店員端末１は、店員９が商品への説明を実施したと判断した場合（ステップＳ３０１；Ｙｅｓ）、説明済リスト情報３４４の更新の要求信号をサーバ装置３へ送信する（ステップＳ３０２）。この場合、店員端末１は、タグリーダ１６が読み取った商品番号や顧客端末２を識別するためのＩＰアドレス等を上述の要求信号に含めて送信する。

【0060】

そして、サーバ装置３は、説明済リスト情報３４４の更新を行う（ステップＳ３０３）。具体的には、ステップＳ３０２の要求信号で指定された商品番号が示す商品を、顧客端末２の顧客に対して店員９が説明済みの商品であるとみなし、説明済リスト情報３４４に追加する。そして、店員端末１及びサーバ装置３は、ステップＳ３０１～Ｓ３０３の処理を、接客が終了するまで繰り返し実行する。

【0061】

そして、顧客端末２は、接客が終了したか否か判定する（ステップＳ３０４）。そして、顧客端末２は、接客が終了したと判断した場合（ステップＳ３０４；Ｙｅｓ）、説明済リスト情報３４４の要求信号をサーバ装置３へ送信する（ステップＳ３０５）。そして、この場合、サーバ装置３は、説明済リスト情報３４４を顧客端末２へ送信する（ステップＳ３０６）。

【0062】

その後、顧客端末２は、説明済リスト情報３４４に基づき、説明済リストをＥＣ画面上に表示させ、当該リストから顧客が購入したい商品を指定する入力を受け付ける（ステップＳ３０７）。その後、顧客端末２は、説明済リストから任意の商品が指定されたことを検知した場合、サーバ装置３等と通信を行い、指定された商品の購入に必要な決済処理等を実行する。

【0063】

なお、好適には、店員端末１は、店員９のユーザ操作等に基づき、商品のクーポン情報を任意のタイミングで顧客端末２に送信するとよい。例えば、店員端末１は、接客モード中又は接客モードの終了時に、商品購入を促進するため、説明済みの商品に関するクーポン情報の送信指示を、ユーザ入力に基づくタイミングによりサーバ装置３へ送信する。この場合、サーバ装置３は、指定されたクーポン情報を顧客端末２に送信する。そして、顧客端末２は、受信したクーポン情報を表示し、顧客による入力に基づき、クーポン情報の利用の有無を決定する。

【0064】

［表示例］
次に、本実施例に基づく表示例について、図１１～図１５を参照して説明する。

【0065】

図１１（Ａ）は、図７のステップＳ１０６において店員端末１に５人分の顧客に対応する訪問者情報が送信された場合のハーフミラー１１の表示例を示す。図１１（Ａ）の例では、店員端末１は、各顧客が関心あると推定される商品の位置を囲んだ破線枠４０Ａ、４０Ｂと、当該破線枠内の商品に関心がある顧客の数及び商品画像や価格などの商品情報を示したウィンドウ４１Ａ、４１Ｂとを、ＡＲ画像としてハーフミラー１１上で風景に重ねて表示させている。なお、図１１（Ａ）に示すウィンドウ４１Ａ、４１Ｂ等のＡＲ画像は、便宜上透過性を０％にして描かれているが、実際には所定の透過性を有する。

【0066】

この場合、店員端末１は、訪問者情報として、各顧客がＥＣ画面で表示中又はカーソル等で選択中の商品の商品番号（ＳＮ番号）や商品名などの商品情報と、当該商品の配置場所の情報とをサーバ装置３から受信している。そして、店員端末１は、２人の顧客に対する訪問者情報に含まれる商品番号（ここではＳＮ：５１８０－１５－３００）が一致すると判断し、当該商品の配置場所の情報に基づき、破線枠４０Ａを表示すると共に、ウィンドウ４１Ａを表示している。また、店員端末１は、３人の顧客に対する訪問者情報に含まれる商品番号（ここではＳＮ：４３８０－１２－３００）が一致すると判断し、破線枠４０Ｂ及びウィンドウ４１Ｂを表示している。

【0067】

そして、店員９は、接客の対象となる顧客を選択する場合、ウィンドウ４１Ａ、４１Ｂのいずれかを選択することで、顧客の詳細情報を示すリスト（「顧客リスト」とも呼ぶ。）を店員端末１に表示させる。

【0068】

図１１（Ｂ）は、ウィンドウ４１Ｂが店員９により選択された後のハーフミラー１１の表示例を示す。図１１（Ｂ）では、店員端末１は、入力部１３への入力に基づき、ウィンドウ４１Ｂが選択されたことを検知し、ウィンドウ４１Ｂに対応する３人分の顧客リストを示すウィンドウ４２Ｂを表示している。なお、店員端末１は、入力部１３への入力に代えて、店員９の手の位置を撮影画像Ｉｍにより画像認識し、ウィンドウ４１Ｂに重なったと判断した場合に、ウィンドウ４１Ｂが選択されたと判断してもよい。

【0069】

図１１（Ｂ）のウィンドウ４２Ｂが示す顧客リストは、ＩＰアドレス、訪問時間（ＶＩＳＩＴ ＤＵＲＡＴＩＯＮ）、及び国名（ＣＯＵＮＴＲＹ）等の各項目を有する。そして、店員９は、ウィンドウ４２Ｂが示す３人分の顧客リストから、国名等を参照し、対応可能な顧客のリストを選択する。この場合、店員９は、訪問時間をさらに考慮し、接客が必要であると判断される顧客のリストを選択するとよい。なお、この場合、店員端末１は、ウィンドウ４１Ｂの選択方法と同様に、ウィンドウ４２Ｂが示す顧客リストから１つのリストの選択を受け付ける。そして、店員端末１は、選択されたリストに対応する顧客に対する接客問合せ信号を生成してサーバ装置３に送信する。そして、サーバ装置３は、店員端末１が指定した顧客の顧客端末２に対し、受信した接客問合せ信号を送信する。なお、ウィンドウ４２Ｂが示す顧客リストは、訪問時間や国名の項目の他に、前回のアクセス日時、購入履歴、顧客の住所（所在地域）などのサーバ装置３が顧客情報ＤＢ３４１として保有する任意の情報を含んでもよい。

【0070】

図１２は、接客問合せ信号を受信した直後の顧客端末２の表示部２９が表示するＥＣ画面の表示例である。図１２の例では、顧客端末２は、サーバ装置３から受信した表示情報に基づき、商品表示領域７０と、商品表示領域７０の上方に設けられたメッセージ領域７１とを含むＥＣ画面を表示している。ここで、顧客端末２は、商品表示領域７０上に、各商品を表す商品画像４５Ａ～４５Ｆ、購入選択ボタン４９Ａ～４９Ｆ、及び各商品を説明する文字などを表示する。また、顧客端末２は、メッセージ領域７１上には、接客の意思がある旨のメッセージを表示するメッセージ欄４３と、店員端末１に対して接客を受ける旨の応答をするための受諾ボタン４４Ａと、店員端末１に対して接客を受けない旨の応答をするための拒否ボタン４４Ｂと、店員９の状態を表すアイコン４６とを表示する。

【0071】

そして、顧客端末２は、受諾ボタン４４Ａ又は拒否ボタン４４Ｂのいずれかがマウス操作などにより選択されたことを検知した場合、選択されたボタンに対応する応答信号をサーバ装置３へ送信する。図１２の例では、顧客端末２は、受諾ボタン４４Ａが選択されたことを検知し、接客を受ける旨の応答信号をサーバ装置３へ送信する。そして、サーバ装置３は、当該応答信号を店員端末１へ送信する。その後、顧客端末２と店員端末１とは、サーバ装置３から双方の通信アドレス等の通知を受けることにより、通信を確立し、接客モードに移行する。

【0072】

図１３は、店員端末１と顧客端末２とが接客モードに移行した後の表示部２９が表示するＥＣ画面の表示例である。図１３では、店員端末１と顧客端末２とが通信を確立後、顧客端末２は、店員端末１から受信した撮影画像Ｉｍを表示するための映像表示領域７２を上部に配置し、商品表示領域７０を下部に配置したＥＣ画面を表示している。

【0073】

そして、顧客端末２は、映像表示領域７２に撮影画像Ｉｍを表示すると共に、店員端末１から受信した音声データをスピーカ２８により出力する。また、顧客端末２は、マイク２３０により生成した音声データを店員端末１へ送信する。これにより、顧客端末２を使用する顧客は、店員９と映像や音声を介して商品に対する説明を受けたり、質問をしたりすることができる。

【0074】

また、図１３の例では、店員９は、商品４８を手に取って説明を行っている。この場合、店員端末１は、タグリーダ１６により商品４８に付されているタグ７から商品番号を読み取り、サーバ装置３を介して顧客端末２に当該商品番号を通知する。従って、顧客端末２は、通知された商品番号に対応する商品画像４５Ｄを縁取り効果により強調表示している。これにより、顧客は、店員９が手に取って説明を行っている商品を好適に認識することができる。

【0075】

図１４は、図１３に示すＥＣ画面上で説明要求商品を指定する操作を行う様子を示す。図１４の例では、顧客は、現在説明を受けている商品４８とは異なる商品画像４５Ｅが示す商品の説明を受けたいと考え、商品画像４５Ｅをクリック操作等により選択している。この場合、顧客端末２は、強調表示している商品画像４５Ｄとは異なる商品画像４５Ｅが選択されたことを検知し、説明を受けるか否かを促すウィンドウ４５Ｅを表示する。そして、顧客端末２は、ウィンドウ４５Ｅ中のＹＥＳボタンが選択されたことを検知した場合、商品画像４５Ｅに対応する商品番号を店員端末１へ送信する。

【0076】

図１５（Ａ）は、図１４においてＥＣ画面上で説明要求商品が指定された場合のハーフミラー１１の表示例を示す。図１５（Ａ）では、店員端末１は、ＡＲ画像として、接客中の顧客の情報を示すウィンドウ５１と、説明要求商品の場所を示す破線枠５２と、説明要求商品の情報を示すウィンドウ５３とを表示する。

【0077】

店員端末１は、接客モードへの移行後、接客対象の顧客の情報をサーバ装置３から受信し、ウィンドウ５１上に表示させる。図１５（Ａ）では、店員端末１は、顧客情報ＤＢ３４１に登録されている顧客の国名や購入履歴を、サーバ装置３から受信することで、ウィンドウ５１上に表示させている。なお、会員登録等によりサーバ装置３が顧客の詳細な登録情報を顧客情報ＤＢ３４１等に記録している場合、店員端末１は、当該登録情報を受信してウィンドウ５１上に表示させてもよい。ここで、登録情報は、例えば、名前、年齢若しくは年代、性別、職業などが該当する。

【0078】

また、店員端末１は、図８の商品説明要求処理に従い、サーバ装置３から取得した説明要求商品の配置場所と計測部１９により認識した店員端末１の位置及び傾き等とに基づき、破線枠５２により説明要求商品を囲む。また、店員端末１は、サーバ装置３から取得した説明要求商品の商品情報を表示したウィンドウ５３を、破線枠５２に対応付けて表示する。この場合、店員端末１は、商品情報として、商品名、商品番号、価格、カラー、サイズ、商品在庫数、可能な割引率の上限などをウィンドウ５３上に表示する。これにより、店員９は、顧客がＥＣ画面上で指定した説明要求商品の配置場所及び商品内容を把握し、顧客に好適に商品説明を行うことができる。

【0079】

図１５（Ｂ）は、説明要求商品が存在せず、説明要求商品に類似した代替商品をおすすめ商品として提示したハーフミラー１１の表示例である。図１５（Ｂ）の例では、店員端末１は、代替商品の配置場所を囲む破線枠５２Ａに対応付けて、代替商品の商品情報を示すウィンドウ５３Ａを表示させている。

【0080】

この場合、サーバ装置３は、タグリーダ６から送信される信号等に基づき、顧客端末２が指定した説明要求商品が店舗５内に存在しないことを認識し、説明要求商品の代替商品を検索し、当該商品の配置場所及び商品情報を店員端末１へ送信する。なお、この場合、サーバ装置３は、例えば、類似する商品同士を対応付けるテーブルまたはマップ等を予め記憶しておき、当該テーブル等を参照して代替商品を決定する。

【0081】

なお、店員端末１は、説明要求商品の代替商品をおすすめ商品として表示する代わりに、説明要求商品と共に着用するのが好ましい商品や店舗５が積極的に販売したい商品をおすすめ商品として表示してもよい。この場合、サーバ装置３は、例えば、同時に着用することが推奨される商品を対応付けるテーブルまたはマップ等を予め記憶しておき、当該テーブル等を参照しておすすめ商品を決定し、当該商品の情報を店員端末１へ送信する。そして、この場合、店員端末１は、説明要求商品の情報と共におすすめ商品の情報をＡＲ画像として表示する。

【0082】

図１６は、接客モード時に店員９が来店客への応対のために店員端末１を外した場合のＥＣ画面の表示例である。図１６の例では、店員端末１は、計測部１６により店員端末１が水平面よりも上方へ所定角度以上傾けられたことを検知し、又は図示しない脱着センサにより店員端末１が店員９の目の位置から外されたことを検知し、撮影画像Ｉｍ及び音声データの送信を停止する。そして、店員端末１は、顧客端末２に対し、対応ができない旨の通知を行う。そして、顧客端末２は、この場合、撮影画像Ｉｍに代えて、映像表示領域７２に「ＳＯＲＲＹ．」と表示し、撮影画像Ｉｍを表示できない旨を顧客に通知する。これにより、来客した顧客がＥＣ画面上で表示されるのを好適に抑制することができる。

【0083】

また、図１６では、顧客端末２は、アイコン４６の表示を、図１３の場合と背景色を変えることで異なる表示にしている。このように、顧客端末２は、店員端末１を装着する店員９の店員端末１の脱着状態等に応じてアイコン４６の表示態様を変えることで、顧客端末２を利用する顧客に店員９の状態を好適に認識させることができる。

【0084】

なお、店員端末１は、撮影画像Ｉｍ中の人物の表示部分を当該人物が特定できないように加工して顧客端末２に送信し、顧客端末２に加工後の撮影画像Ｉｍを表示させてもよい。この場合、店員端末１は、撮影画像Ｉｍ中に任意の人の顔が映っていること及びその表示領域を公知の画像認識技術により認識する。これによっても、来店した顧客がＥＣ画面上で表示されるのを好適に抑制することができる。

【0085】

［変形例］
以下、上述の実施例に好適な変形例について説明する。以下の変形例は、任意に組み合わせて上述の実施例に適用してもよい。

【0086】

（変形例１）
図１５（Ａ）において、店員端末１は、説明要求商品の位置及び商品情報を表示するのに代えて、又はこれに加えて、ＥＣ画面上の商品画像にカーソル位置が重なった場合に、当該商品画像が示す商品（「カーソル重畳商品」とも呼ぶ。）の位置及び商品情報を表示してもよい。

【0087】

図１７（Ａ）は、本変形例に係るハーフミラー１１の表示例を示す。図１７（Ａ）の例では、店員端末１は、ＡＲ画像として、カーソル重畳商品の配置場所を示す破線枠５２Ｂと、カーソル重畳商品の商品情報を示すウィンドウ５３Ｂとを対応付けて表示している。

【0088】

この場合、顧客端末２は、ＥＣ画面上に表示した商品画像の表示位置にカーソル位置が重なったことを検知し、当該商品画像が示す商品の商品番号をカーソル重畳商品の商品番号としてサーバ装置３へ通知する。この場合、顧客端末２は、所定時間以上カーソル位置が重なった商品画像が示す商品をカーソル重畳商品として認識してもよい。そして、サーバ装置３は、通知されたカーソル重畳商品の配置場所及び商品情報を、商品情報ＤＢ３４２やタグリーダ配置情報３４３を参照することで取得し、店員端末１へ通知する。そして、店員端末１は、図８の商品説明要求処理のステップＳ２０５と同様に、対象商品の配置場所を示す破線枠５２Ｂと、対象商品の商品情報を示すウィンドウ５３Ｂとを表示する。

【0089】

このようにすることで、店員端末１は、顧客が関心あると推定される商品の配置場所及び商品情報を店員９に好適に認識させ、接客を円滑に実行させることができる。

【0090】

（変形例２）
店員端末１は、顧客端末２のＥＣ画面がアクティブでなくなった場合（即ち他の画面の背面に存在する場合）、顧客が接客を受ける状態でないと判断し、その旨を店員９に通知してもよい。

【0091】

図１７（Ｂ）は、本変形例におけるハーフミラー１１の表示例を示す。図１７（Ｂ）の例では、店員端末１は、顧客端末２のＥＣ画面がアクティブでない旨を示すウィンドウ５４をＡＲ画像として表示している。この場合、顧客端末２は、接客モードを開始後、ＥＣ画面がアクティブであるか否かを監視し、ＥＣ画面がアクティブでなくなった場合、その旨を示す信号を店員端末１に送信する。なお、店員端末１は、ウィンドウ５４を表示する代わりに、音声によりＥＣ画面がアクティブでない旨を店員９に通知してもよい。

【0092】

この態様により、店員端末１は、顧客がＥＣ画面以外の画面を閲覧中の場合に、店員９が不要に商品説明を継続するのを好適に防ぐことができる。

【0093】

（変形例３）
サーバ装置３は、タグリーダ配置情報３４３の代わりに、店舗５内にある各商品の位置情報のデータベースを記憶部３４に記憶してもよい。この場合、図８の商品説明要求処理のステップＳ２０３では、サーバ装置３は、記憶部３４に記憶した上述のデータベースを参照し、説明要求商品の配置場所を取得する。

【0094】

（変形例４）
実施例の処理概要を示す図７のフローチャートにおいて、サーバ装置３は、店員端末１からの問い合わせの有無によらずステップＳ１０６で訪問者情報を店員端末１に送信した。これに代えて、サーバ装置３は、店員端末１から訪問者情報の問い合わせがあった場合に限り、生成した訪問者情報を店員端末１へ送信してもよい。例えば、この場合、店員端末１は、店員９からの所定の操作を検知した場合、又は店員９が店員端末１を装着したことを認識した場合等に、訪問者情報の問い合わせを行い、訪問者情報を受信する。

【0095】

（変形例５）
サーバ装置３は、店員９が接客可能状態であるか否かを監視し、店員９が接客可能状態である場合にＥＣ画面の取得要求があったときには、図１２に示すＥＣ画面の表示情報を顧客端末２へ送信してもよい。

【0096】

この場合、店員端末１は、計測部１６又は図示しない着脱センサ等に基づき、店員端末１の着脱状態を認識し、その認識結果を所定間隔ごとにサーバ装置３へ送信する。そして、サーバ装置３は、上述の認識結果に基づき、店員９が店員端末１を装着している場合に、店員９が接客可能状態であると判断する。そして、サーバ装置３は、店員９が接客可能状態のときにＥＣ画面の取得要求があったときには、図１２に示すＥＣ画面の表示情報を顧客端末２へ送信し、ＥＣ画面上にメッセージ欄４３や受諾ボタン４４Ａ等を表示させる。

【0097】

（変形例６）
図７のステップＳ１０５において、サーバ装置３は、訪問時間が閾値を超えた顧客に対応する訪問者情報を店員端末１へ送信した。これに代えて、又はこれに加えて、サーバ装置３は、訪問時間以外の情報に基づき、訪問者情報を店員端末１へ送信すべきか否か判定してもよい。

【0098】

例えば、サーバ装置３は、顧客情報ＤＢ３４１に基づき認識されるＥＣ画面へのアクセス回数や前回のアクセス日時などが所定の条件に該当する場合に、顧客が常連客又は購入を迷っている客であると判断し、訪問者情報を店員端末１へ送信してもよい。

【0099】

（変形例７）
図７のステップＳ１０６において、サーバ装置３は、店舗５と同一系列の店舗に存在する店員端末１に対し、訪問者情報を一斉送信してもよい。そして、サーバ装置３は、送信した訪問者情報に対する応答として接客問合せ信号を送信した店員端末１に対して、顧客端末２との直接接続を開始させ、接客モードへ移行させる。なお、変形例５と同様に、サーバ装置３は、各店舗５の店員９が接客可能状態であるか否か監視している場合には、接客可能状態の店員９の店員端末１のみに対し、訪問者情報を送信してもよい。

【0100】

（変形例８）
店員端末１は、実施例で説明したサーバ装置２の一部の機能を有してもよい。例えば、店員端末１は、商品情報ＤＢ３４２やタグリーダ配置情報３４３などの各種情報を記憶し、図８の商品説明要求処理をサーバ装置２と通信することなく実行してもよい。この場合、店員端末１は、顧客端末２から説明要求商品の商品番号を直接受信し、図１５に示す商品説明要求処理に係る表示処理などをサーバ装置２と通信することなく行う。また、この場合、店員端末１は、サーバ装置３に代えてタグリーダ６から信号を受信し、タグリーダ配置情報３４３に基づき、店舗５内の各商品の配置場所を認識する。

【0101】

（変形例９）
表示システムは、店員端末１に代えて、カメラを有するスマートフォンなどの携帯端末を有してもよい。この場合、携帯端末は、カメラが撮影した画像をディスプレイに表示すると共に、表示した画像中に、図１１や図１５等に示したＡＲ画像を重畳表示させる。そして、本変形例では、携帯端末又は携帯端末のディスプレイは、本発明における「表示部」の一例である。

【0102】

（変形例１０）
顧客が店員９と店舗５内で対面して接客を受ける場合であっても、店員端末１は、顧客が指定した説明要求商品の配置場所及び商品情報をＡＲ画像により表示してもよい。

【0103】

この場合、例えば、店員端末１は、マイク１３０により入力された顧客の音声データをサーバ装置３へ送信し、サーバ装置３は、音声データから商品名などの商品を特定するフレーズを抽出する。そして、サーバ装置３は、抽出したフレーズに関連する商品を説明要求商品であると認識し、当該商品の配置場所及び商品情報を店員端末１に送信することで、店員端末１に当該商品の配置場所及び商品情報を表示させる。この場合、サーバ装置３は、抽出され得るフレーズと商品との対応関係を示すマップ等を予め記憶してもよい。なお、上述のフレーズの抽出などの音声認識処理は、サーバ装置３に代えて店員端末１が実行してもよい。

【0104】

（変形例１１）
接客モードでは、店員端末１と顧客端末２とがサーバ装置３を介さずに通信を行った。これに代えて、店員端末１と顧客端末２とは、接客モードであっても、サーバ装置３を介してデータの授受を行ってもよい。

【0105】

（変形例１２）
店員端末１は、店舗５の本部が使用する端末（「本部端末」とも呼ぶ。）から各商品の配置場所の情報（「商品配置情報」とも呼ぶ。）を受信し、各商品の配置場所を示すＡＲ画像を表示してもよい。

【0106】

この場合、本部端末は、商品番号ごとに各商品の配置（陳列）場所を示した商品配置情報を予め生成し、当該情報を店員端末１に送信する。そして、店員端末１は、タグリーダ１６によりタグ７から商品番号を読み取った場合、本部端末から受信した商品配置情報を参照し、対応する商品の配置場所を認識する。そして、店員端末１は、図１５（Ａ）等の例と同様に、認識した配置場所を囲むＡＲ画像を表示する。これにより、店員は、本部の指示に従い、商品を適切に陳列させることができる。本変形例では、本部端末の使用人は、本発明における「利用者」の一例である。

【0107】

なお、本部端末に代えて、店舗５において店長などが使用する端末が商品配置情報を店員端末１に送信してもよい。

【符号の説明】

【0108】

１ 店員端末
２ 顧客端末
３ サーバ装置
５ 店舗
６ タグリーダ
７ タグ
９ 店員

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】