特許 7440627 実店舗で客のショッピングセッションの映像に基づき仮想ショッピングカートをポピュレートするシステム及び方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-02-19

(45)【発行日】2024-02-28

(54)【発明の名称】実店舗で客のショッピングセッションの映像に基づき仮想ショッピングカートをポピュレートするシステム及び方法

(51)【国際特許分類】

   G06Q 30/0601 20230101AFI20240220BHJP

【ＦＩ】

G06Q30/0601 332

【請求項の数】 20

(21)【出願番号】P 2022523938

(86)(22)【出願日】2020-10-23

(65)【公表番号】

(43)【公表日】2022-12-23

(86)【国際出願番号】 US2020057048

(87)【国際公開番号】W WO2021081319

(87)【国際公開日】2021-04-29

【審査請求日】2023-10-23

(31)【優先権主張番号】16/664,490

(32)【優先日】2019-10-25

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/664,529

(32)【優先日】2019-10-25

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/664,470

(32)【優先日】2019-10-25

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/663,564

(32)【優先日】2019-10-25

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/663,589

(32)【優先日】2019-10-25

(33)【優先権主張国・地域又は機関】US

【早期審査対象出願】

(73)【特許権者】

【識別番号】520068870

【氏名又は名称】セブン－イレブン インコーポレイテッド

【氏名又は名称原語表記】７－Ｅｌｅｖｅｎ， Ｉｎｃ．

【住所又は居所原語表記】３２００ Ｈａｃｋｂｅｒｒｙ Ｒｏａｄ， Ｉｒｖｉｎｇ ＴＸ ７５０６３ ＵＳ

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】ミルザ，シャーメール アリ

(72)【発明者】

【氏名】クリシュナムルティ，サイレシュ バーラスワージ

(72)【発明者】

【氏名】グエン，トロン ギア

(72)【発明者】

【氏名】ヴァカチャーラ，サラス

(72)【発明者】

【氏名】マギー，マシュー，レイモンド

(72)【発明者】

【氏名】ベリー，ジョシュア，イー．

(72)【発明者】

【氏名】クルヴァ，ラヴィ，クマール

(72)【発明者】

【氏名】モハン，ランガナサン

(72)【発明者】

【氏名】スリ，マニンデール，シン

(72)【発明者】

【氏名】ホッジ，ジョナサン，クリストファー

(72)【発明者】

【氏名】フィリップス，フランクリン

【審査官】関 博文

(56)【参考文献】

【文献】米国特許第１０３７３３２２（ＵＳ，Ｂ１）

【文献】米国特許出願公開第２０１９／０１１４４８８（ＵＳ，Ａ１）

【文献】国際公開第２０１９／１８１４９９（ＷＯ，Ａ１）

【文献】国際公開第２０１６／０５９８１７（ＷＯ，Ａ１）

【文献】国際公開第２０１５／１６３４６０（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

(57)【特許請求の範囲】

【請求項1】

ディスプレイと、
実店舗に置かれているラックカメラからラック映像を受信するよう構成されるインターフェースであり、前記ラックカメラは、前記実店舗に置かれている物理ラックの組の中の第１物理ラックに向けられており、前記ラックカメラは、前記実店舗における人のショッピングセッション中に前記第１物理ラックの映像を捕捉するよう構成される、前記インターフェースと、
前記ディスプレイへ通信可能に結合されるハードウェアプロセッサと
を有し、
前記ハードウェアプロセッサは、
前記ディスプレイの第１領域で、前記第１物理ラックをエミュレートするよう構成される第１仮想ラックを表示し、前記第１仮想ラックは第１仮想シェルフ及び第２仮想シェルフを有し、前記第１仮想シェルフは第１仮想アイテムを有し、前記第２仮想シェルフは第２仮想アイテムを有し、前記第１仮想アイテムは、前記第１物理ラックの第１物理シェルフに置かれている第１物理アイテムのグラフィカル表現を有し、前記第２仮想アイテムは、前記第１物理ラックの第２物理シェルフに置かれている第２物理アイテムのグラフィカル表現を有し、
前記ディスプレイの第２領域で、前記ラック映像を表示し、前記ラック映像は、前記人が前記第１物理ラックと関係を持つことを含むイベントを表し、
前記ディスプレイの第３領域で、仮想ショッピングカートを表示し、
前記イベントに関連した情報を受信し、該情報は前記第１仮想アイテムを特定し、前記ラック映像は、前記人が前記第１物理ラックと関係を持っているときに前記第１物理アイテムを選択したことを表し、
前記イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第１仮想アイテムを格納し、
前記ショッピングセッションが終了したとの決定に応答して、前記仮想ショッピングカートを、前記ショッピングセッション中に選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較し、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力の組に基づき決定され、前記センサは重みセンサの組を有し、前記ショッピングセッション中に選択されたと前記アルゴリズムによって決定された前記アイテムのうちの各アイテムは、対応する重みセンサが置かれている前記物理ラックの物理シェルフのゾーンに位置している
よう更に構成される、
よう構成される、装置。

【請求項2】

前記インターフェースは、前記実店舗に置かれている第２ラックカメラから第２ラック映像を受信するよう更に構成され、
前記第２ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第２物理ラックに向けられており、前記第２ラックカメラは、前記実店舗における前記人の前記ショッピングセッション中に前記第２物理ラックの映像を捕捉するよう構成され、
前記ハードウェアプロセッサは、
前記ディスプレイの前記第１領域で、前記第２物理ラックをエミュレートするよう構成される第２仮想ラックを表示し、前記第２仮想ラックは第３仮想シェルフ及び第４仮想シェルフを有し、前記第３仮想シェルフは第３仮想アイテムを有し、前記第４仮想シェルフは第４仮想アイテムを有し、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフに置かれている第３物理アイテムのグラフィカル表現を有し、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフに置かれている第４物理アイテムのグラフィカル表現を有し、
前記ディスプレイの前記第２領域で、前記第２ラック映像を表示し、前記第２ラック映像は、前記人が前記第２物理ラックと関係を持つことを含む第２イベントを表し、
前記第２イベントに関連した情報を受信し、該情報は前記第３仮想アイテムを特定し、前記第２ラック映像は、前記人が前記第２物理ラックと関係を持っているときに前記第３物理アイテムを選択したことを表し、
前記第２イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第３仮想アイテムを格納する
よう更に構成される、
請求項１に記載の装置。

【請求項3】

前記ハードウェアプロセッサは、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致することを決定し、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致するとの決定に応答して、
前記第１仮想アイテムに割り当てられている第１価格と、前記第３仮想アイテムに割り当てられている第２価格とを含む領収書を生成し、
前記領収書を前記人へ送る
よう更に構成される、
請求項２に記載の装置。

【請求項4】

前記センサは、
前記ラックカメラとは異なるアルゴリズムカメラのアレイを有する、
請求項３に記載の装置。

【請求項5】

前記アルゴリズム的ショッピングカートがエラーを有するとの決定に応答して、前記ハードウェアプロセッサは、
前記入力の組の中から前記エラーに関連したサブセットを決定し、該サブセットは、前記アルゴリズムカメラのアレイから受信された入力を含み、
不一致を説明するメタデータを前記サブセットに付加し、
前記サブセットを使用して前記アルゴリズムを訓練する
よう更に構成される、
請求項４に記載の装置。

【請求項6】

前記ハードウェアプロセッサは、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないことを決定し、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないとの決定に応答して、
前記アルゴリズム的ショッピングカートがエラーを有することを決定し、
前記アルゴリズム的ショッピングカートがエラーを有するとの決定に応答して、
前記仮想ショッピングカートに基づいて、前記第１仮想アイテムに割り当てられている第１価格と、前記第３仮想アイテムに割り当てられている第２価格とを含む領収書を生成し、
前記領収書を前記人へ送る
よう更に構成される、
請求項２に記載の装置。

【請求項7】

前記ハードウェアプロセッサは、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないことを決定し、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないとの決定に応答して、
前記仮想ショッピングカートがエラーを有することを決定し、
前記仮想ショッピングカートがエラーを有するとの決定に応答して、
前記アルゴリズム的ショッピングカートに基づいて、前記ショッピングセッション中に前記人によって選択されたと前記アルゴリズムによって決定された前記アイテムの価格を含む領収書を生成し、
前記領収書を前記人へ送る
よう更に構成される、
請求項１に記載の装置。

【請求項8】

前記イベントに関連した前記情報は、前記第１仮想ラックから前記仮想ショッピングカートへ前記第１仮想アイテムをドラッグ・アンド・ドロップすることに関連した情報を含む、
請求項１に記載の装置。

【請求項9】

実店舗に置かれているラックカメラからラック映像を受信するステップであり、前記ラックカメラは、前記実店舗に置かれている物理ラックの組の中の第１物理ラックに向けられており、前記ラックカメラは、前記実店舗における人のショッピングセッション中に前記第１物理ラックの映像を捕捉するよう構成される、ステップと、
ディスプレイの第１領域で、前記第１物理ラックをエミュレートするよう構成される第１仮想ラックを表示するステップであり、前記第１仮想ラックは第１仮想シェルフ及び第２仮想シェルフを有し、前記第１仮想シェルフは第１仮想アイテムを有し、前記第２仮想シェルフは第２仮想アイテムを有し、前記第１仮想アイテムは、前記第１物理ラックの第１物理シェルフに置かれている第１物理アイテムのグラフィカル表現を有し、前記第２仮想アイテムは、前記第１物理ラックの第２物理シェルフに置かれている第２物理アイテムのグラフィカル表現を有する、ステップと、
前記ディスプレイの第２領域で、前記ラック映像を表示するステップであり、前記ラック映像は、前記人が前記第１物理ラックと関係を持つことを含むイベントを表す、ステップと、
前記ディスプレイの第３領域で、仮想ショッピングカートを表示するステップと、
前記イベントに関連した情報を受信するステップであり、該情報は前記第１仮想アイテムを特定し、前記ラック映像は、前記人が前記第１物理ラックと関係を持っているときに前記第１物理アイテムを選択したことを表す、ステップと、
前記イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第１仮想アイテムを格納するステップと、
前記ショッピングセッションが終了したとの決定に応答して、前記仮想ショッピングカートを、前記ショッピングセッション中に選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較するステップであり、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力の組に基づき決定され、前記センサは重みセンサの組を有し、前記ショッピングセッション中に選択されたと前記アルゴリズムによって決定された前記アイテムのうちの各アイテムは、対応する重みセンサが置かれている前記物理ラックの物理シェルフのゾーンに位置している、ステップと
を有する方法。

【請求項10】

前記実店舗に置かれている第２ラックカメラから第２ラック映像を受信するステップであり、前記第２ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第２物理ラックに向けられており、前記第２ラックカメラは、前記実店舗における前記人の前記ショッピングセッション中に前記第２物理ラックの映像を捕捉するよう構成される、ステップと、
前記ディスプレイの前記第１領域で、前記第２物理ラックをエミュレートするよう構成される第２仮想ラックを表示するステップであり、前記第２仮想ラックは第３仮想シェルフ及び第４仮想シェルフを有し、前記第３仮想シェルフは第３仮想アイテムを有し、前記第４仮想シェルフは第４仮想アイテムを有し、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフに置かれている第３物理アイテムのグラフィカル表現を有し、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフに置かれている第４物理アイテムのグラフィカル表現を有する、ステップと、
前記ディスプレイの前記第２領域で、前記第２ラック映像を表示するステップであり、前記第２ラック映像は、前記人が前記第２物理ラックと関係を持つことを含む第２イベントを表す、ステップと、
前記第２イベントに関連した情報を受信するステップであり、該情報は前記第３仮想アイテムを特定し、前記第２ラック映像は、前記人が前記第２物理ラックと関係を持っているときに前記第３物理アイテムを選択したことを表す、ステップと、
前記第２イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第３仮想アイテムを格納するステップと
を更に有する、請求項９に記載の方法。

【請求項11】

前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致することを決定するステップと、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致するとの決定に応答して、
前記第１仮想アイテムに割り当てられている第１価格と、前記第３仮想アイテムに割り当てられている第２価格とを含む領収書を生成するステップと、
前記領収書を前記人へ送るステップと
を更に有する、請求項１０に記載の方法。

【請求項12】

前記センサは、
前記ラックカメラとは異なるアルゴリズムカメラのアレイを有する、
請求項１１に記載の方法。

【請求項13】

前記アルゴリズム的ショッピングカートがエラーを有するとの決定に応答して、
前記入力の組の中から前記エラーに関連したサブセットを決定するステップであり、該サブセットは、前記アルゴリズムカメラのアレイから受信された入力を含む、ステップと、
不一致を説明するメタデータを前記サブセットに付加するステップと、
前記サブセットを使用して前記アルゴリズムを訓練するステップと
を更に有する、請求項１２に記載の方法。

【請求項14】

前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないことを決定するステップと、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないとの決定に応答して、
前記アルゴリズム的ショッピングカートがエラーを有することを決定するステップと、
前記アルゴリズム的ショッピングカートがエラーを有するとの決定に応答して、
前記仮想ショッピングカートに基づいて、前記第１仮想アイテムに割り当てられている第１価格と、前記第３仮想アイテムに割り当てられている第２価格とを含む領収書を生成するステップと、
前記領収書を前記人へ送るステップと
を更に有する、請求項１０に記載の方法。

【請求項15】

前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないことを決定するステップと、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないとの決定に応答して、
前記仮想ショッピングカートがエラーを有することを決定するステップと、
前記仮想ショッピングカートがエラーを有するとの決定に応答して、
前記アルゴリズム的ショッピングカートに基づいて、前記ショッピングセッション中に前記人によって選択されたと前記アルゴリズムによって決定された前記アイテムの価格を含む領収書を生成するステップと、
前記領収書を前記人へ送るステップと
を更に有する、請求項９に記載の方法。

【請求項16】

前記イベントに関連した前記情報は、前記第１仮想ラックから前記仮想ショッピングカートへ前記第１仮想アイテムをドラッグ・アンド・ドロップすることに関連した情報を含む、
請求項９に記載の方法。

【請求項17】

表示要素と、
実店舗に置かれているラックカメラからラック映像を受信し、前記ラックカメラは、前記実店舗に置かれている物理ラックの組の中の第１物理ラックに向けられており、前記ラックカメラは、前記実店舗における人のショッピングセッション中に前記第１物理ラックの映像を捕捉するよう構成され、
前記実店舗に置かれている第２ラックカメラから第２ラック映像を受信し、前記第２ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第２物理ラックに向けられており、前記第２ラックカメラは、前記実店舗における前記人の前記ショッピングセッション中に前記第２物理ラックの映像を捕捉するよう構成される、よう動作するインターフェースと、
前記表示要素へ通信可能に結合される処理要素と
を有し、
前記処理要素は、
前記表示要素の第１領域で、前記第１物理ラックをエミュレートするよう構成される第１仮想ラックを表示し、前記第１仮想ラックは第１仮想シェルフ及び第２仮想シェルフを有し、前記第１仮想シェルフは第１仮想アイテムを有し、前記第２仮想シェルフは第２仮想アイテムを有し、前記第１仮想アイテムは、前記第１物理ラックの第１物理シェルフに置かれている第１物理アイテムのグラフィカル表現を有し、前記第２仮想アイテムは、前記第１物理ラックの第２物理シェルフに置かれている第２物理アイテムのグラフィカル表現を有し、
前記表示要素の第２領域で、前記ラック映像を表示し、前記ラック映像は、前記人が前記第１物理ラックと関係を持つことを含むイベントを表し、
前記表示要素の第３領域で、仮想ショッピングカートを表示し、
前記イベントに関連した情報を受信し、該情報は前記第１仮想アイテムを特定し、前記ラック映像は、前記人が前記第１物理ラックと関係を持っているときに前記第１物理アイテムを選択したことを表し、
前記イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第１仮想アイテムを格納し、
前記表示要素の前記第１領域で、前記第２物理ラックをエミュレートするよう構成される第２仮想ラックを表示し、前記第２仮想ラックは第３仮想シェルフ及び第４仮想シェルフを有し、前記第３仮想シェルフは第３仮想アイテムを有し、前記第４仮想シェルフは第４仮想アイテムを有し、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフに置かれている第３物理アイテムのグラフィカル表現を有し、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフに置かれている第４物理アイテムのグラフィカル表現を有し、
前記表示要素の前記第２領域で、前記第２ラック映像を表示し、前記第２ラック映像は、前記人が前記第２物理ラックと関係を持つことを含む第２イベントを表し、
前記第２イベントに関連した情報を受信し、該情報は前記第３仮想アイテムを特定し、前記第２ラック映像は、前記人が前記第２物理ラックと関係を持っているときに前記第３物理アイテムを選択したことを表し、
前記第２イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第３仮想アイテムを格納し、
前記ショッピングセッションが終了したことを決定し、
前記ショッピングセッションが終了したとの決定に応答して、
前記仮想ショッピングカートを、前記ショッピングセッション中に選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較し、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力の組に基づき決定され、前記センサは、前記ラックカメラとは異なるアルゴリズムカメラのアレイと、重みセンサの組とを有し、前記ショッピングセッション中に選択されたと前記アルゴリズムによって決定された前記アイテムのうちの各アイテムは、前記重みセンサの組の中の対応する重みセンサが置かれている前記第１物理シェルフ又は前記第２物理シェルフのゾーンに位置しており、
前記仮想ショッピングカートを前記アルゴリズム的ショッピングカートと比較することに応答して、
前記ショッピングセッションの領収書を生成し、
前記領収書を前記人へ送る
よう動作する、システム。

【請求項18】

前記領収書は、前記第１仮想アイテムに割り当てられている第１価格と、前記第３仮想アイテムに割り当てられている第２価格とを含む、
請求項１７に記載のシステム。

【請求項19】

前記仮想ショッピングカートを前記アルゴリズム的ショッピングカートと比較することに応答して、前記処理要素は、
前記アルゴリズム的ショッピングカートがエラーを有することを決定し、
前記入力の組の中から前記エラーに関連したサブセットを決定し、該サブセットは、前記アルゴリズムカメラのアレイから受信された入力を含み、
不一致を説明するメタデータを前記サブセットに付加し、
前記サブセットを使用して前記アルゴリズムを訓練する
よう更に動作する、
請求項１７に記載のシステム。

【請求項20】

前記イベントに関連した前記情報は、前記第１仮想ラックから前記仮想ショッピングカートへ前記第１仮想アイテムをドラッグ・アンド・ドロップすることに関連した情報を含む、
請求項１７に記載のシステム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、遠隔監視技術に概して関係があり、より具体的には、実店舗で客のショッピングセッションの映像に基づき仮想ショッピングカートをポピュレートするシステム及び方法に関係がある。

【背景技術】

【0002】

実店舗での従来のショッピングセッション中に、客は、店舗内にある棚からアイテムを選択し、それから、それらのアイテムをレジ係に提示する。レジ係は、アイテムの勘定書を出し、客から支払いを受け取る。店舗内にあるいずれのカメラも、通常は、セキュリティ目的のために存在する。

【発明の概要】

【0003】

従来の店舗でのショッピングセッションには、客及び店舗オーナーの両方にとってのいくつかの効率の悪さがつきまとう場合がある。例えば、店舗内の忙しい時間帯に、客は、彼／彼女が選択したアイテムの代金をレジ係に支払うために、相当の時間を列で待つことに費やす場合がある。待つことに費やされた時間は、顧客がアイテムを選択するのに費やした総時間量を超えることさえある。これは、客のフラストレーションを生じさせる可能性があり、潜在的には、リピート客ビジネスの喪失に繋がりかねない。他の例として、従来の店舗は、通常、店舗内のレジ係の役を務める１人以上の従業員の存在に依存する。店舗にさもなければ誰もいない場合でさえ、万が一にも顧客が買い物をするために店舗に入ることが起こることに備えて、そのような従業員はそれでもなお存在する。結果として、ピークのビジネス時間外では、店舗内のレジ係の時間の大部分が無駄に過ごされている可能性がある。

【0004】

本開示は、上記の技術的課題の１つ以上に対処する仮想店舗ツールを企図している。ツールは、実店舗をエミュレートするよう構成される仮想店舗を生成する。ツールはまた、実店舗でショッピングセッション中の客を追跡するために、実店舗内にあるカメラから受け取ったカメラフィードから映像の組を生成する。特定の実施形態では、ツールは、次いで、実店舗において客によって選択されたアイテムをエミュレートするよう構成されるアイテムの組を格納する仮想ショッピングカートを生成するために、仮想店舗と、実店舗でのショッピングセッションの映像とを使用する。それに応じて、ツールは、仮想ショッピングカートを使用して、客に彼／彼女の購入品の料金を請求することができる。いくつかの実施形態で、ツールはまた、実店舗にあるセンサから受け取られた入力に基づき、実店舗においてショッピングセッション中に客によって選択されたアイテムを決定するよう訓練されたアルゴリズムとともに使用されてもよい。そのような実施形態では、ツールは、アルゴリズムによってなされた決定を検証するために、仮想店舗と、実店舗でのショッピングセッションの映像とを使用する。ツールの特定の実施形態については後述する。

【0005】

一実施形態に従って、装置は、インターフェースと、ディスプレイと、メモリと、メモリ及びディスプレイへ通信可能に結合されるハードウェアプロセッサとを含む。インターフェースは、第１ビデオフィードを受け取る。第１ビデオフィードは、実店舗に置かれている第１カメラに対応する第１カメラフィードと、実店舗にある第２カメラに対応する第２カメラフィードとを含む。第１カメラは、実店舗内の第１位置に向けられている。第２カメラは、実店舗内の第２位置に向けられている。ハードウェアプロセッサは、第１ビデオセグメントをメモリに保存する。第１ビデオセグメントは、第１人物に割り当てられ、開始タイムスタンプと終了タイムスタンプとの間の時間インターバル中に起こる実店舗における第１人物のショッピングセッションの部分を捕捉する。第１ビデオセグメントは、開始タイムスタンプから終了タイムスタンプまでの第１カメラフィードの記録に対応する第１カメラフィードセグメントと、開始タイムスタンプから終了タイムスタンプまでの第２カメラフィードの記録に対応する第２カメラフィードセグメントとを含む。プロセッサはまた、第１スライダバーを第１ビデオセグメントに割り当てる。

【0006】

第１カメラフィードセグメント及び第２カメラフィードセグメントの再生は同期し、第１スライダバーは、第１カメラフィードセグメント及び第２カメラフィードセグメントの再生進行を制御する。プロセッサは更に、ディスプレイの第１領域において第１カメラフィードセグメント及び第１スライダの第１コピーを表示する。プロセッサは更に、ディスプレイの第２領域において第２カメラフィードセグメント及び第１スライダの第２コピーを表示する。プロセッサはまた、第１カメラフィードセグメント及び第２カメラフィードセグメントの再生進行を調整ために、第１スライダの第１コピー及び第１スライダの第２コピーのうちの少なくとも一方から命令を受け取る。命令を受け取ることに応答して、プロセッサは、第１カメラフィードセグメント及び第２カメラフィードセグメントの再生進行を調整する。

【0007】

他の実施形態に従って、装置は、ディスプレイと、インターフェースと、ディスプレイへ通信可能に結合されるハードウェアプロセッサとを含む。インターフェースは、実店舗に置かれているラックカメラからラックカメラフィードを受け取る。ラックカメラは、実店舗に置かれている物理ラックの組の中の第１物理ラックに向けられている。ハードウェアプロセッサは、ディスプレイの第１領域において、仮想店舗の仮想レイアウトを表示する。仮想レイアウトは、実店舗の物理レイアウトをエミュレートするよう構成される。仮想レイアウトは、第１物理ラックに割り当てられている第１仮想ラックと、第２物理ラックに割り当てられている第２仮想ラックとを含む。ここで、仮想レイアウトにおける第１仮想ラック及び第２仮想ラックの配置は、実店舗における第１物理ラック及び第２物理ラックの配置をエミュレートするよう構成される。

【0008】

プロセッサはまた、第１物理ラックに関連したイベントの指示を受け取る。イベントは、実店舗にいる人が第１物理ラックと関係を持っていることを含む。第１物理ラックに関連したイベントの指示を受け取ることに応答して、プロセッサは、ディスプレイの第２領域において、第１仮想ラックを表示する。第１仮想ラックは、第１仮想シェルフ及び第２仮想シェルフを含む。第１仮想シェルフは、第１仮想アイテムを含み、第２仮想シェルフは、第２仮想アイテムを含む。第１仮想アイテムは、第１物理ラックの第１物理シェルフにある第１物理アイテムのグラフィカル表現を含み、第２仮想アイテムは、第１物理ラックの第２物理シェルフにある第２物理アイテムのグラフィカル表現を含む。プロセッサは更に、ディスプレイの第３領域において、開始タイムスタンプから終了タイムスタンプまでのラックカメラフィードの記録に対応するラックビデオセグメントを表示する。ラックビデオセグメントは、第１物理ラックに関連したイベントを表す。

【0009】

他の実施形態に従って、装置は、ディスプレイと、インターフェースと、ディスプレイへ通信可能に結合されるハードウェアプロセッサとを含む。インターフェースは、実店舗に置かれているラックカメラからラックビデオを受け取る。ラックカメラは、実店舗に置かれている物理ラックの組の中の第１物理ラックに向けられている。ラックカメラは、実店舗における人のショッピングセッション中に第１物理ラックの映像を捕捉する。プロセッサは、ディスプレイの第１領域において、第１物理ラックをエミュレートする第１仮想ラックを表示する。第１仮想ラックは、第１仮想シェルフ及び第２仮想シェルフを含む。第１仮想シェルフは、第１仮想アイテムを含み、第２仮想シェルフは、第２仮想アイテムを含む。第１仮想アイテムは、第１物理ラックの第１物理シェルフにある第１物理アイテムのグラフィカル表現を含み、第２仮想アイテムは、第１物理ラックの第２物理シェルフにある第２物理アイテムのグラフィカル表現を含む。

【0010】

プロセッサはまた、ディスプレイの第２領域において、ラック映像を表示する。ラック映像は、人が第１物理ラックと関係を持っていることを含むイベントを表す。プロセッサは、更に、ディスプレイの第３領域において、仮想ショッピングカートを表示する。プロセッサは、更に、イベントに関連した情報を受け取る。情報は、第１仮想アイテムを特定し、ラック映像は、人が第１物理ラックと関係を持っているときに第１物理アイテムを選択したことを表す。イベントに関連した情報を受け取ることに応答して、プロセッサは、第１仮想アイテムを仮想ショッピングカートに格納する。

【0011】

他の実施形態に従って、実店舗の物理レイアウトをエミュレートするように仮想店舗の仮想レイアウトを生成するよう構成される装置は、メモリと、メモリへ通信可能に結合されるハードウェアプロセッサとを含む。ハードウェアプロセッサは、実店舗に置かれている第１物理ラックに関連した第１物理位置及び第１物理方向を受け取る。第１物理位置及び第１物理方向を受け取ることに応答して、プロセッサは、第１仮想位置において第１仮想方向により第１仮想ラックを仮想レイアウトに置く。仮想レイアウトでの第１仮想ラックの第１仮想位置は、物理レイアウトでの第１物理ラックの第１物理位置に相当し、仮想レイアウトでの第１仮想ラックの第１仮想方向は、物理レイアウトでの第１物理ラックの第１物理方向に相当する。プロセッサはまた、第１物理ラックの第１物理シェルフにある第１物理アイテムに関連した第１仮想アイテムを受け取る。第１仮想アイテムを受け取ることに応答して、プロセッサは、第１仮想アイテムを第１仮想ラックの第１仮想シェルフに置く。第１仮想ラックの第１仮想シェルフは、第１物理ラックの第１物理シェルフに相当する。

【0012】

プロセッサは、更に、第１物理ラックの第２物理シェルフにある第２物理アイテムに関連した第２仮想アイテムを受け取る。第２仮想アイテムを受け取ることに応答して、プロセッサは、第２仮想アイテムを第１仮想ラックの第２仮想シェルフに置く。第１仮想ラックの第２仮想シェルフは、第１物理ラックの第２物理シェルフに相当する。プロセッサは、更に、実店舗に置かれている第１ラックカメラを第１仮想ラックに割り当てる。第１ラックカメラは、第１物理ラックを含む映像を捕捉する。プロセッサはまた、仮想レイアウトをメモリに保存する。

【0013】

他の実施形態に従って、装置は、ハードウェアプロセッサを含む。プロセッサは、第１のアイテムの組を含むアルゴリズム的ショッピングカートを受け取る。第１のアイテムの組は、実店舗内に設置されているセンサから受け取られた入力の組に基づいて、実店舗においてショッピングセッション中に第１人物によって選択されたとアルゴリズムによって決定される。プロセッサはまた、ショッピングセッションに関連した第２のアイテムの組を含む仮想ショッピングカートを受け取る。ショッピングセッションの映像は、実店舗に置かれているカメラの組によって捕捉されたものである。映像は、人が第２のアイテムの組を選択することを表す。プロセッサは、更に、アルゴリズム的ショッピングカートを仮想ショッピングカートと比較する。アルゴリズム的ショッピングカートを仮想ショッピングカートと比較することに応答して、プロセッサは、アルゴリズム的ショッピングカートと仮想ショッピングカートとの間に不一致が存在することを決定する。プロセッサは、更に、入力の組の中から不一致に関連したサブセットを決定する。プロセッサはまた、メタデータをサブセットに付加する。メタデータは不一致を説明するものである。プロセッサは、更に、サブセットを使用して、アルゴリズムを訓練する。

【0014】

特定の実施形態は、１つ以上の技術的利点をもたらす。例えば、実施形態は、互いに同期されており、客のショッピングセッションを捕捉するよう構成されている店舗の複数のカメラビューを一度に提示することによって、店舗内の客の監視映像を確認するときに費やされる処理リソースを削減する。他の例として、実施形態は、自動化技術及び遠隔監視技術の使用を通じて、ショッピングセッションの効率を向上させる。更なる例として、実施形態は、実店舗において客を追跡するよう構成されている機械学習追跡アルゴリズムの独立した検証を提供する。本開示で記載されるシステムは、店に設置されているセンサからの入力が店内で起きるイベントを監視及び追跡するために使用され得る店などの物理的な場所のための遠隔監視システムの実際の適用に特に組み込まれ得る。

【0015】

特定の実施形態は、上記の技術的利点のどれも含まなくても、あるいは、その一部又は全部を含んでもよい。１つ以上の他の技術的利点は、本願に含まれている図面、明細書、及び特許請求の範囲から当業者に容易に明らかだろう。

【0016】

本開示のより完全な理解のために、これより、添付の図面とともに、以下の説明が参照される。

【図面の簡単な説明】

【0017】

【図1A】実店舗と仮想店舗との間の比較を示す。

【図1B】実店舗と仮想店舗との間の比較を示す。

【図2A】実店舗の物理レイアウトと仮想店舗の仮想レイアウトとの間の比較を示す。

【図2B】実店舗の物理レイアウトと仮想店舗の仮想レイアウトとの間の比較を示す。

【図3A】実店舗における物理ラックと仮想店舗における仮想ラックとの間の比較を示す。

【図3B】実店舗における物理ラックと仮想店舗における仮想ラックとの間の比較を示す。

【図4】本開示に従うシステムの例を表す。

【図5A】図４に表されているシステムで使用される店舗の領域を捕捉するよう構成されるカメラの実店舗での位置の例を表す。

【図5B】図４に表されているシステムのレイアウトカメラによって捕捉される実店舗の領域の例を表す。

【図6】図４に表されているシステムの仮想店舗ツールのビデオプロセッサコンポーネントを表す。

【図7A】図４に表されているシステムの仮想店舗ツールが、図４に表されているシステムのレイアウトカメラ及びラックカメラに関連したカメラフィードセグメントを表示する様態を表す例を示す。

【図7B】図４に表されているシステムの仮想店舗ツールが、図４に表されているシステムのレイアウトカメラ及びラックカメラに関連したカメラフィードセグメントを表示する様態を表す例を示す。

【図7C】図４に表されているシステムの仮想店舗ツールが、図４に表されているシステムのレイアウトカメラ及びラックカメラに関連したカメラフィードセグメントを表示する様態を表す例を示す。

【図8】図４に表されているシステムの仮想店舗ツールが、図４に表されているシステムのレイアウトカメラ及びラックカメラに関連したカメラフィードセグメントを生成及び表示するプロセスを表すフローチャートを示す。

【図9A】図４に表されているシステムの仮想店舗ツールが、実店舗で起こるショッピングセッションを仮想的にエミュレートし得る様態を表す例を示す。

【図9B】図４に表されているシステムの仮想店舗ツールが、実店舗で起こるショッピングセッションを仮想的にエミュレートし得る様態を表す例を示す。

【図9C】図４に表されているシステムの仮想店舗ツールが、実店舗で起こるショッピングセッションを仮想的にエミュレートし得る様態を表す例を示す。

【図9D】図４に表されているシステムの仮想店舗ツールが、実店舗で起こるショッピングセッションを仮想的にエミュレートし得る様態を表す例を示す。

【図10】図４に表されているシステムの仮想店舗ツールが、実店舗で起こるショッピングセッションを仮想的にエミュレートし得る様態を表すフローチャートを示す。

【図11A】図４に表されているシステムの仮想店舗ツールによって生成されるグラフィカルユーザインターフェースが、実店舗の物理レイアウトをエミュレートするよう構成される仮想レイアウトを生成するために使用され得る実施形態の例を表す。

【図11B】図４に表されているシステムの仮想店舗ツールによって生成されるグラフィカルユーザインターフェースが、実店舗の物理レイアウトをエミュレートするよう構成される仮想レイアウトを生成するために使用され得る実施形態の例を表す。

【図12】図４に表されているシステムの仮想店舗ツールが、実店舗の物理レイアウトをエミュレートするよう構成される仮想レイアウトを生成し得る様態を表すフローチャートを示す。

【図13A】実店舗においてショッピングセッション中に客によって選択されたアイテムを決定するよう構成されるアルゴリズムへ入力を供給するために使用され得るセンサの例を示す。

【図13B】実店舗においてショッピングセッション中に客によって選択されたアイテムを決定するよう構成されるアルゴリズムへ入力を供給するために使用され得るセンサの例を示す。

【図13C】物理シェルフ及びその対応する仮想シェルフのゾーンを画定するための実店舗の物理シェルフへ結合されたセンサの使用の例を表す。

【図13D】物理シェルフ及びその対応する仮想シェルフのゾーンを画定するための実店舗の物理シェルフへ結合されたセンサの使用の例を表す。

【図14】図４に表されているシステムの仮想店舗ツールの解消コンポーネントを表す。

【図15】図４に表されているシステムの仮想店舗ツールの機械学習コンポーネントを表す。

【図16】図４に表されているシステムの仮想店舗ツールが、実店舗においてショッピングセッション中に客によって選択されたアイテムを決定するよう構成されるアルゴリズムへフィードバックを供給し得る様態を表すフローチャートを示す。

【発明を実施するための形態】

【0018】

本開示の実施形態及びその利点は、図面の図１から１６を参照することによって理解され得る。同じ番号は、図面の同じ又は対応する部分に対して使用される。追加情報は、発明の名称が「Scalable Position Tracking System For Tracking Position In Large Spaces」である米国特許出願（代理人整理番号090278.0176）及び発明の名称が「Topview Object Tracking Using a Sensor Array」である米国特許出願（代理人整理番号090278.0180）で開示されている。これらの米国特許出願は、あたかも完全に複製されたかのように、参照により本願に援用される。

【0019】

［Ｉ．仮想エミュレーションの概論］
本開示は、実店舗をエミュレートするよう構成される仮想店舗を生成し、実店舗内で行われるショッピングセッションの映像とともに、仮想店舗を使用して、物理ショッピングセッションを仮想的にエミュレートすることを概して対象とする。本開示は、実店舗の仮想エミュレーションについて記載するが、本開示は、如何なるタイプの物理空間（例えば、倉庫、保管センター、アミューズメントパーク、空港、オフィス建物、など）も、本開示で記載されるツールを用いて、仮想的にエミュレートされ得ると考えている。例えば、実店舗は、コンビニエンスストア又はグローサリーストアであってよい。本開示はまた、実店舗が物理的な建物ではなく、買い物客が買い物をし得る物理空間又は環境であってよいと考えている。例えば、実店舗は、空港のグラブ・アンド・ゴー（grab and go）パントリ、オフィス建物のキオスク、又は公園の屋外マーケット、などであってもよい。

【0020】

図１Ａに表されるように、実店舗（physical store）１００は、ブリック・アンド・モルタル（brick and mortar）店舗、つまり、物理建物にある店舗である。客１０５（モバイル機器を持ち運んでいる可能性がある）は、アイテムを購入するために実店舗１００に入る。他方で、仮想店舗１１０は、図１Ｂに表されているように、ユーザ１２０に属するコンピュータ又は他のデバイス１１５に表示されている、実店舗のコンピュータ化された表現である。本開示は、ユーザ１２０が仮想店舗１１０を使用して、実店舗１００での客１０５のショッピングセッションをエミュレートし得ることを企図する。仮想店舗１１０は、デバイス１１５においてローカルで生成されても、あるいは、遠隔で生成されて、ネットワークを介してデバイス１１５へ伝送されてもよい。

【0021】

仮想店舗１１０は、いくつかの異なる方法で実店舗１００をエミュレートするよう構成されてよい。例えば、特定の実施形態では、図２Ａ及び２Ｂに表されているように、仮想店舗１１０の仮想レイアウト２０５は、実店舗１００の物理レイアウト２００をエミュレートするよう構成される。特に、仮想陳列ラック２３０ａ、２３０ｂ、２３０ｃ、及び２３０ｄの形状、位置、及び向きは、物理陳列ラック２１０ａ、２１０ｂ、２１０ｃ、及び２１０ｄの形状、位置、及び向きをエミュレートするよう構成される。例えば、図２Ａに表されている例では、物理陳列ラック２１０ａ及び２１０ｂは、実店舗１００の物理レイアウト２００の後壁２３５ａに沿って置かれている。それに応じて、仮想陳列ラック２３０ａ及び２３０ｂは、物理陳列ラック２１０ａ及び２１０ｂの位置及び向きをエミュレートするように、仮想店舗１１０の仮想レイアウト２０５の後壁２４０ａに沿って置かれている。同様に、仮想陳列ラック２３０ｄは、側壁２３５ｂに沿った物理陳列ラック２１０ｄの位置及び向きをエミュレートするように、仮想レイアウト２０５の側壁２４０ｂに沿って置かれ、仮想陳列ラック２３０ｃは、物理陳列ラック２１０ｃの位置及び向きをエミュレートするように、仮想レイアウト２０５の中央に置かれている。

【0022】

他の例として、いくつかの実施形態で、仮想陳列ラック２３０ａ、２３０ｂ、２３０ｃ、及び２３０ｄの中身は、物理陳列ラック２１０ａ、２１０ｂ、２１０ｃ、及び２１０ｄの中身をエミュレートするよう構成される。例えば、特定の実施形態では、仮想陳列ラック２３０ａ、２３０ｂ、２３０ｃ、及び２３０ｄは、夫々、アイテムのリストを割り当てられ、アイテムのリストは、物理ラック２１０ａ、２１０ｂ、２１０ｃ、及び２１０ｄに夫々保管されているアイテムを含む。他の実施形態では、各仮想陳列ラックは、仮想シェルフの組を割り当てられ、仮想陳列ラックでの仮想シェルフの数及び配置は、対応する物理陳列ラックでの物理シェルフの数及び配置をエミュレートするよう構成される。次いで、仮想シェルフの組の中の各仮想シェルフは、対応する物理シェルフに保管されている物理アイテムの組をエミュレートするよう構成される仮想アイテムの組を保持する。ここで、仮想アイテムは、仮想シェルフでの外観及び／又は位置付けに関して物理アイテムをエミュレートするよう構成されてもよい。

【0023】

具体例として、図３Ａ及び３Ｂは、一実施形態における、物理陳列ラック２１０ａと仮想陳列ラック２３０ａとの間の比較を示す。図３Ａから分かるように、物理陳列ラック２１０ａは２つの物理シェルフ、第１物理シェルフ３０５ａ及び第２物理シェルフ３０５ｂを含む。それに応じて、物理陳列ラック２１０ａをエミュレートするように、仮想陳列ラック２３０ａも２つの棚、第１仮想シェルフ３０１ａ及び第２仮想シェルフ３０１ｂを含む。それに応じて、仮想シェルフ３１０ａ及び３１０ｂの夫々は、物理シェルフ３０５ａ及び３０５ｂのうちの対応する物理シェルフに保管されている物理アイテムをエミュレートするよう構成される仮想アイテムの組を含む。例えば、仮想シェルフ３１０ａは、物理シェルフ３０５ａの第１物理ゾーン３２５ａにおける第１物理アイテム３１５ａ、物理シェルフ３０５ａの第２物理ゾーン３２５ｂにおける第２物理アイテム３１５ｂ、及び物理シェルフ３０５ａの第３物理ゾーン３２５ｃにおける第３物理アイテム３１５ｃの位置付けをエミュレートするように位置付けられている、仮想シェルフ３１０ａの第１仮想ゾーン３３０ａにある第１仮想アイテム３２０ａと、仮想シェルフ３１０ａの第２仮想ゾーン３３０ｂにある第２仮想アイテム３２０ｂと、仮想シェルフ３１０ａの第３仮想ゾーン３３０ｃにある第３仮想アイテム３２０ｃとを含む。同様に、仮想シェルフ３１０ｂは、物理シェルフ３０５ａの第４物理ゾーン３２５ｄ、第５物理ゾーン３２５ｅ、及び第６物理ゾーン３２５ｆにおける第４物理アイテム３１５ｄ、第５物理アイテム３１５ｅ、及び第６物理アイテム３１５ｆの位置付けをエミュレートするように、仮想シェルフ３１０ａの第４仮想ゾーン３３０ｄ、第５仮想ゾーン３３０ｅ、及び第６仮想ゾーン３３０ｆにおいて夫々位置付けられている第４仮想アイテム３２０ｄ、第５仮想アイテム３２０ｅ、及び第６仮想アイテム３２０ｆを含む。更に、仮想アイテム３２０ａないし３２０ｆの夫々は、対応する物理アイテム３１５ａ、３１５ｂ、３１５ｃ、３１５ｄ、３１５ｅ、又は３１５ｆの外観をエミュレートするよう構成される。例えば、各仮想アイテムは、対応する物理アイテムの２次元のグラフィカル表現に対応してよい。このようにして、仮想アイテムは、その現実世界の物理的対照物の外観に基づいて容易に特定され得る。

【0024】

［ＩＩ．システム概要］
図４は、仮想店舗ツール４０５、デバイス１１５、ディスプレイ４１０、ネットワーク４３０ａ、ネットワーク４３０ｂ、レイアウトカメラ４９０、及びラックカメラ４９５を含む例示的なシステム４００を表す。特定の実施形態では、システム４００は、更に、外部システム４８５及びセンサ４９８を含む。一般に、仮想店舗ツール４０５は、実店舗１００をエミュレートする仮想店舗１１０を生成するよう構成される。特定の実施形態では、仮想店舗ツール４０５は、実店舗１００に置かれているレイアウトカメラ４９０及び／又はラックカメラ４９５から受け取られた、ショッピングセッションを追跡する映像に部分的に基づいて、実店舗１００において人１０５によって行われるショッピングセッションの領収書を生成するために、仮想店舗１１０を使用する。いくつかの実施形態で、仮想店舗ツール４０５は、仮想店舗１１０と、レイアウトカメラ４９０及びラックカメラ４９５から受け取られた映像とを使用して、実店舗１００においてショッピングセッション中に人１０５によって選択されたアイテムについてアルゴリズム４８８によってなされた決定を妥当性確認する。

【0025】

デバイス１１５は、ネットワーク４３０ａを介してシステム４００のコンポーネントと通信する任意の適切なデバイスを含む。例えば、デバイス１１５は、数ある中でもとりわけ、電話機、モバイル電話機、コンピュータ、ラップトップ、ワイヤレス若しくはセルラー電話機、タブレット、サーバ、ＩｏＴデバイス、及び／又は自動アシスタントであってよい。本開示は、ネットワーク４３０ａを介して通信を送信及び受信する任意の適切なデバイスであるデバイス１１５を考えている。デバイス１１５はまた、ユーザ１２０が使用可能なマイク、キーパッド、又は他の適切な端末装置のようなユーザインターフェースを含んでもよい。いくつかの実施形態で、デバイス１１５のプロセッサによって実行されるアプリケーションが、本明細書で記載される機能を実行してもよい。

【0026】

デバイス１１５は、ディスプレイ４１０を含むか、又はそれへ結合されてよい。ディスプレイ４１０は、仮想店舗ツール４０５から受け取られた情報を表示するためにデバイス１１５によって使用されるスクリーンである。特定の実施形態では、ディスプレイ４１０は、ラップトップコンピュータで使用される標準のディスプレイである。特定の他の実施形態では、ディスプレイ４１０は、ラップトップ又はデスクトップコンピュータへ接続される外付けのディスプレイデバイスである。更なる実施形態では、ディスプレイ４１０は、典型的なスマートフォン又はタブレットで見受けられる標準のタッチスクリーン液晶ディスプレイである。

【0027】

図4に表されるように、特定の実施形態では、ディスプレイ４１０は、カメラフィードセグメント４１５ａないし４１５ｆ、仮想レイアウト２０５、仮想ラック２３０、仮想ショッピングカート４２０、及び／又はラックカメラフィードセグメント４２５を提示し得る。カメラフィードセグメント４１５ａないし４１５ｆは、実店舗１００に置かれているレイアウトカメラ４９０から仮想店舗ツール４０５によって受け取られたカメラフィードの映像記録であり、実店舗１００においてショッピングセッションを行う人１０５に割り当てられている。仮想店舗ツール４０５がカメラフィードセグメント４１５ａないし４１５ｆを生成し、カメラフィードセグメント４１５ａないし４１５ｆをディスプレイ４１０で表示する方法は、図５～８の説明において、以下で更に詳細に記載される。

【0028】

仮想レイアウト２０５は、仮想店舗ツール４０５がカメラフィードセグメント４１５ａないし４１５ｆに関連したカメラフィードを受け取った特定の実店舗１００に割り当てられ、実店舗の物理レイアウト２００をエミュレートするよう構成される。仮想店舗ツール４０５が仮想レイアウト２０５を生成する方法は、図１１及び１２の説明において、以下で更に詳細に記載される。

【0029】

仮想ラック２３０は、仮想レイアウト２０５に含まれる仮想ラックのうちの１つに対応し、実店舗１００の物理ラック２１０をエミュレートするよう構成される。それに応じて、仮想ラック２３０は、仮想アイテム３２０の組を表示し、各仮想アイテム３２０は、対応する物理ラック２１０に保管されている物理アイテム３１５を表す。仮想ショッピングカート４２０は、仮想アイテム３２０を保持するために使用され、それらの仮想アイテム３２０の夫々は、実店舗１００においてショッピングセッション中に人１０５によって選択された物理アイテム３１５を表す。ラックカメラフィードセグメント４２５は、ラックカメラ４９５から仮想店舗ツール４０５によって受け取られたカメラフィードの記録である。ラックカメラ４９５は、仮想ラック２３０が割り当てられている実店舗１００の物理ラック２１０に向けられている。仮想ショッピングカート４２０は、ラックカメラフィードセグメント４２５に部分的に基づいて、仮想ラック２３０で保管されている仮想アイテム３２０によってポピュレートされ得る。仮想店舗ツール４０５がディスプレイ４１０で表示する仮想ラック２３０を決定し、次いで、その仮想ラック２３０を使用して仮想ショッピングカート４２０をポピュレートする方法は、図９及び１０の説明において、以下で更に詳細に記載される。

【0030】

いくつかの実施形態で、図１１Ａ及び１１Ｂに関して、以下で更に詳細に記載されるように、ディスプレイ４１０は、グラフィカルユーザインターフェースを表示し、グラフィカルユーザインターフェースを通じて、ユーザ１２０は、実店舗１００の物理レイアウト２００をエミュレートするよう構成される仮想レイアウト２０５を生成し得る。

【0031】

ネットワーク４３０ａは、レイアウトカメラ４９０、ラックカメラ４９５、及び外部システム４８５を仮想店舗ツール４０５へ接続するネットワーク４３０ｂの外にあるシステム４００の様々なコンポーネントの間の通信を助ける。本開示は、システム４００のそのようなコンポーネント間の通信を助ける任意の適切なネットワークであるネットワーク４３０ａを考えている。ネットワーク４３０ａは、音声、映像、信号、データ、メッセージ、又はそれらの任意の組み合わせを伝送することができる任意の相互接続システムを含んでよい。ネットワーク４３０ａは、公衆交換電話網（public switched telephone network，ＰＳＴＮ）、公衆若しくはプライベートデータ網、ローカルエリアネットワーク（local area network，ＬＡＮ）、メトロポリタンエリアネットワーク（metropolitan area network，ＭＡＮ）、ワイドエリアネットワーク（wide area network，ＷＡＮ）、局所、地域若しくは全世界通信若しくはコンピュータ網（例えば、インターネット）、有線若しくは無線ネットワーク、企業イントラネット、又はコンポーネント間の通信を助けるよう動作する、それらの組み合わせを含む任意の他の適切な通信リンクの全部又は一部を含んでもよい。

【0032】

ネットワーク４３０ｂは、仮想店舗ツール４０５並びにレイアウトカメラ４９０、ラックカメラ４９５、及び外部システム４８５の様々なコンポーネントの間の通信を助ける。本開示は、仮想店舗ツール４０５のコンポーネントと、レイアウトカメラ４９０、ラックカメラ４９５、及び外部システム４８５との間の通信を助ける任意の適切なネットワークであるネットワーク４３０ｂを考えている。ネットワーク４３０ｂは、音声、映像、信号、データ、メッセージ、又はそれらの任意の組み合わせを伝送することができる任意の相互接続システムを含んでよい。ネットワーク４３０ｂは、公衆交換電話網（ＰＳＴＮ）、公衆若しくはプライベートデータ網、ローカルエリアネットワーク（ＬＡＮ）、メトロポリタンエリアネットワーク（ＭＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、局所、地域若しくは全世界通信若しくはコンピュータ網（例えば、インターネット）、有線若しくは無線ネットワーク、企業イントラネット、又はコンポーネント間の通信を助けるよう動作する、それらの組み合わせを含む任意の他の適切な通信リンクの全部又は一部を含んでもよい。本開示は、ネットワーク４３０ａと同じネットワーク、又はネットワーク４３０ａとは別のネットワークであってよい。

【0033】

図４から分かるように、仮想店舗ツール４０５は、プロセッサ４３５、メモリ４４０、及びインターフェース４４５を含む。本開示は、本明細書で記載される仮想店舗ツール４０５の機能のいずれかを実行するよう構成されているプロセッサ４３５、メモリ４４０、及びインターフェース４４５を考えている。一般に、仮想店舗ツール４０５は、レイアウト生成部４６０、映像処理部４６５、表示制御部４７０、解消コンポーネント４７５、及び機械学習モジュール４８０を実装する。仮想店舗ツール４０５は、レイアウト生成部４６０を使用して、実店舗１００の物理レイアウト２００をエミュレートするよう構成される仮想レイアウト２０５を生成し得る。仮想店舗ツール４０５のこの機能は、図１１及び１２の説明において、以下で更に詳細に記載される。仮想店舗ツール４０５は、映像処理部４６５を使用して、レイアウトカメラ４９０及びラックカメラ４９５から受け取られたカメラフィードに夫々基づいて、実店舗１００においてショッピングセッションを行う人１０５に割り当てられているカメラフィードセグメント４１５及びラックカメラフィードセグメント４２５を生成し得る。仮想店舗ツール４０５のこの機能は、図５～８の説明において、以下で更に詳細に記載される。仮想店舗ツール４０５は、表示制御部４７０を使用して、デバイス１１５から受け取られた入力に基づいて、ディスプレイ４１０で表示される情報を調整し得る。仮想店舗ツール４０５のこの機能は、図７ないし１２の説明において、以下で更に詳細に記載される。仮想店舗ツール４０５は、解消コンポーネント４７５を使用して、仮想ショッピングカート４２０の中身を、実店舗１００においてショッピングセッション中に客１０５によって選択されたアイテムを含むとアルゴリズム４８８によって決定されたアルゴリズム的ショッピングカートの中身と比較し得る。解消コンポーネント４７５は、仮想ショッピングカート４２０とアルゴリズム的ショッピングカートとの間の如何なる不一致も特定し、そのような不一致を解消し、客１０５へ送るための領収書を生成し得る。解消コンポーネント４７５は、図１４の説明において、以下で更に詳細に記載される。最後に、仮想店舗ツール４０５は、機械学習モジュール４８０を使用して、仮想ショッピングカート４２０とアルゴリズム的ショッピングカートとの間の不一致を特定し、不一致に関連したメタデータをアルゴリズム入力に割り当て得る。このメタデータは、次いで、アルゴリズムを再訓練するために使用され得る。機械学習モジュール４８０は、図１５及び１６の説明において、以下で更に詳細に記載される。

【0034】

プロセッサ４３５は、マイクロプロセッサ、特定用途向け集積回路（application specific integrated circuits，ＡＳＩＣ）、特定用途向け命令セットプロセッサ（application specific instruction set processor，ＡＳＩＰ）、及び／又は状態機械を含むがこれらに限られない任意の電子回路であり、メモリ４４０へ通信可能に結合し、仮想店舗ツール４０５の動作を制御する。プロセッサ４３５は、８ビット、１６ビット、３２ビット、６４ビット、又は任意の他の適切なアーキテクチャであってよい。プロセッサ４３５は、算術論理演算を実行する算術論理ユニット（arithmetic logic unit，ＡＬＵ）と、ＡＬＵへオペランドを供給し、ＡＬＵ演算の結果を記憶するプロセッサレジスタと、メモリから命令をフェッチし、ＡＬＵ、レジスタ、及び他のコンポーネントの協調した動作を指示することによって命令を実行する制御ユニットとを含んでもよい。プロセッサ４３５は、情報を制御及び処理するよう動作する他のハードウェア及びソフトウェアを含んでもよい。プロセッサ４３５は、本明細書で記載される機能のいずれかを実行するよう、メモリに記憶されているソフトウェアを実行する。プロセッサ４３５は、ネットワーク４３０ａ、ネットワーク４３０ｂ、メモリ４４０、デバイス１１５、レイアウトカメラ４９０、ラックカメラ４９５、及び外部システム４８５から受け取られた情報を処理することによって、仮想店舗ツール４０５の動作及び管理を制御する。プロセッサ４３５は、プログラム可能ロジックデバイス、マイクロコントローラ、マイクロプロセッサ、任意の適切な処理デバイス、又はそれらの任意の適切な組み合わせであってよい。プロセッサ４３５は、単一の処理デバイスに限られず、複数の処理デバイスを含んでもよい。

【0035】

メモリ４４０は、データ、オペレーショナルソフトウェア、又はプロセッサ４３５のための他の情報を恒久的に又は一時的に記憶し得る。メモリ４４０は、情報を記憶するのに適した揮発性又は不揮発性のローカル又はリモートデバイスのうちのいずれか１つ又は組み合わせを含んでよい。例えば、メモリ４４０は、ランダムアクセスメモリ（random access memory，ＲＡＭ）、リードオンリーメモリ（read only memory，ＲＯＭ）、磁気記憶デバイス、光学記憶デバイス、若しくは任意の他の適切な情報記憶デバイス、又はそれらのデバイスの組み合わせを含んでよい。ソフトウェアは、コンピュータ可読記憶媒体で具現化される命令、ロジック、又はコードの任意の適切な組を表す。例えば、ソフトウェアは、メモリ４４０、ディスク、ＣＤ、又はフラッシュドライブにおいて具現化されてもよい。具体的な実施形態では、ソフトウェアは、本明細書で記載される機能のうちの１つ以上を実行するようプロセッサ４３５によって実行可能なアプリケーションを含んでもよい。

【0036】

更に、特定の実施形態では、メモリ４４０は、仮想レイアウト２０５及び映像４５０の組を記憶してよい。仮想レイアウト２０５ａないし２０５ｎの夫々は、異なる実店舗１００に対応し、実店舗１００の物理レイアウト２００をエミュレートするよう構成される。仮想レイアウト２０５は、店舗識別番号に従ってメモリ４４０に記憶されてよい。このようにして、所与の仮想レイアウト２０５ａは、店舗識別番号を用いてメモリ４４０から読み出され得る。本開示は、映像４５０の組が、例えば、識別番号４５５を通じて、所与の人１０５に割り当てられているカメラフィードセグメント４２５及びラックカメラフィードセグメント４２５を含むと考えている。そのようなセグメントは、レイアウトカメラ４９０及びラックカメラ４９５から夫々仮想店舗ツール４０５によって受け取られたカメラフィードの映像記録である。例えば、映像４５０の組は、人１０５に割り当てられているカメラフィードセグメント４１５ａないし４１５ｆ及びラックカメラフィードセグメント４２５を含んでよい。仮想店舗ツール４０５が映像４５０の組を生成する様態は、図６の説明において、以下で更に詳細に記載される。

【0037】

インターフェース４４５は、ネットワーク４３０ａ及び４３０ｂから情報を受信すること、ネットワーク４３０ａ及び４３０ｂを通じて情報を送信すること、情報の適切な処理を実行すること、他のデバイスと通信すること、又はそれらの任意の組み合わせのために動作する任意の適切なデバイスを表す。例えば、インターフェース４４５は、レイアウトカメラ４９０及びラックカメラ４９５からカメラフィードを受け取る。他の例として、インターフェース４４５は、デバイス１１５から入力を受け取る。インターフェース４４５は、仮想店舗ツール４０５がネットワーク４３０ａ及び４３０ｂを介してデバイス１１５、レイアウトカメラ４９０、ラックカメラ４９５、及び／又はシステム４００の他のコンポーネントと情報を交換することを可能にするＬＡＮ、ＷＡＮ、又は他の通信システムを通じて通信するために、プロトコル変換機能及びデータ処理機能を含む任意の適切なハードウェア及び／又はソフトウェアを含む現実又は仮想の任意のポート又は接続を表す。

【0038】

外部システム４８５は、実店舗１００に設置されているセンサ４９８から入力を受け取り、この入力にアルゴリズム４８８を適用して、実店舗１００において客１０５を追跡するよう、かつ／あるいは、実店舗１００においてショッピングセッション中にそのような客によって選択された物理アイテム３１５を決定するよう動作可能な任意のシステムを表す。外部システム４８５の実施形態は、発明の名称が「Topview Object Tracking Using a Sensor Array」である米国特許出願（代理人整理番号090278.0180）で記載されている。なお、この米国特許出願の内容は、参照により本願に援用される。本開示は、センサ４９８が、実店舗１００に設置されており、実店舗１００において客１０５を検出するよう動作可能である任意のタイプの適切なセンサを含んでよい。例えば、実店舗１００は、実店舗１００において客１０５を追跡し、実店舗１００から１つ以上のアイテム３１５を選択する客１０５に関連した情報を検出するよう動作するカメラ、光検出及び測距センサ、ミリメートル波センサ、重量センサ、及び／又は任意の他の適切なセンサを含んでよい。本開示はまた、アルゴリズム４８８が、実店舗１００において客１０５を追跡し、客１０５によって選択されたアイテム３１５を決定する任意の適切なアルゴリズムであってよい。例えば、特定の実施形態では、アルゴリズム４８８は、機械学習アルゴリズムであってよい。

【0039】

レイアウトカメラ４９０及びラックカメラ４９５は、実店舗１００に設置されている。レイアウトカメラ４９０ａないし４９０ｆの夫々は、実店舗１００内のある位置に受けられており、その位置の周りの空間内の領域の映像及び／又は画像を捕捉する。ラックカメラ４９５の夫々は、実店舗１００に置かれている物理陳列ラック２１０に向けられており、物理陳列ラック２１０及び物理陳列ラック２１０の周りの空間内の領域の映像及び／又は画像を捕捉する。本開示は、任意の数のレイアウトカメラ４９０が実店舗１００に設置され、仮想店舗ツール４０５へネットワーク４３０ｂを通じて接続され得ると考えている。同様に、任意の数のラックカメラ４９５が、実店舗１００に設置され、仮想店舗ツール４０５へネットワーク４３０ｂを通じて接続されてよい。例えば、いくつかの実施形態で、実店舗１００は、物理ラック２１０と同数のラックカメラ４９５を含む。他の実施形態では、実店舗１００は、物理ラック２１０よりも多いラックカメラ４９５を含む。特定の実施形態では、ラックカメラ４９５は、レイアウトカメラ４９０と同じである。他の実施形態では、ラックカメラ４９５は、レイアウトカメラ４９０とは別個である。レイアウトカメラ４９０及びラックカメラ４９５の動作は、図５及び６の説明において、以下で更に詳細に記載される。

【0040】

本発明の範囲から外れずに、本明細書で記載されるシステムに対して、変更、追加、又は削除が行われてもよい。例えば、システム４００は、任意の数のユーザ１２０，デバイス１１５、ディスプレイ４１０、ネットワーク４３０ａ及び４３０ｂ、レイアウトカメラ４９０、ラックカメラ４９５、並びに外部システム４８５を含んでよい。コンポーネントは、一体化されても、又は別々であってもよい。更に、動作は、より多い、より少ない、又は他のコンポーネントによって実行されてもよい。更に、動作は、ソフトウェア、ハードウェア、及び／又は他のロジックを含む任意の適切なロジックを用いて実行されてよい。

【0041】

［ＩＩＩ．客に基づいた映像追跡］
上述されたように、仮想店舗ツール４０５は、仮想レイアウト２０５を使用して、カメラフィードセグメント４１５及び／又は４２５によって捕捉された実店舗１００での客１０５のショッピングセッションをエミュレートし得る。図５～８は、仮想店舗ツール４０５がカメラフィードセグメント４１５及び／又は４２５を生成及び表示する方法について記載するために使用される。

【0042】

［ａ．客に基づいた映像追跡のために使用されるカメラ］
図５Ａは、実店舗１００におけるレイアウトカメラ４９０及びラックカメラ４９５の位置の例を表す。実店舗１００のために選択されたレイアウトカメラ４９０及びラックカメラ４９５の数は、実店舗１００のサイズ及び／又はレイアウトに依存し得る。図５Ａの例で分かるように、実店舗１００は、５台のレイアウトカメラ４９０ａないし４９０ｅを含み得る。実店舗１００の天井に設置されるものとして表されているが、本開示は、レイアウトカメラ４９０が実店舗１００内のどこにでも取り付けられてよいと考えている。更に、図５Ａの例では、実店舗１００は、４台のラックカメラ４９５ａないし４９５ｄを含み得る。実店舗１００の天井及び側壁の両方に設置されるものとして表されているが、本開示は、ラックカメラ４９５が実店舗１００内のどこにでも取り付けられてよいと考えている。ラックカメラ４９５は、レイアウトカメラ４９０とは別であっても、又はレイアウトカメラ４９０と同じであってもよい。

【0043】

ラックカメラ４９５の夫々は、実店舗１００に置かれているラック２１０に向けられている。例えば、図５Ａに表されているように、ラックカメラ４９５ａは、物理陳列ラック２１０ａに向けられており、ラックカメラ４９５ｂは、物理陳列ラック２１０ｂに向けられており、ラックカメラ４９５ｃは、物理陳列ラック２１０ｃに向けられており、ラックカメラ４９５ｄは、物理陳列ラック２１０ｄに向けられている。図５Ａは、実店舗１００における５台のレイアウトカメラ４９０の組及び４台のラックカメラ４９５の組を表すが、本開示は、実店舗１００のサイズ及び／又はレイアウトに応じて、任意の適切な数のレイアウトカメラ４９０及びラックカメラ４９５が実店舗１００で使用されて得ると考えている。図５Ａは、更に、実店舗１００に置かれている回転ドア５１０の組を表す。回転ドア５１０の組は、図５の説明において、以下で更に詳細に記載されるように、実店舗１００への客１０５の出入りを制御するために使用され得る。

【0044】

図５Ｂに表されているように、レイアウトカメラ４９０の夫々は、実店舗１００の特定の位置に向けられており、その位置を囲む、実店舗１００のレイアウト２００の領域５０５を捕捉する。例えば、第１レイアウトカメラ４９０ａは、第１位置に向けられており、実店舗１００の第１領域５０５ａの映像及び／又は画像を捕捉し、第２レイアウトカメラ４９０ｂは、第２位置に向けられており、実店舗１００の第２領域５０５ｂの映像及び／又は画像を捕捉し、第３レイアウトカメラ４９０ｃは、第３位置に向けられており、実店舗１００の第３領域５０５ｃの映像及び／又は画像を捕捉し、第４レイアウトカメラ４９０ｄは、第４位置に向けられており、実店舗１００の第４領域５０５ｄの映像及び／又は画像を捕捉し、第５レイアウトカメラ４９０ｅは、第５位置に向けられており、実店舗１００の第５領域５０５ｅの映像及び／又は画像を捕捉する。特定の実施形態では、レイアウトカメラ４９０は、実店舗１００の重なり合った領域を捕捉してもよい。例えば、図５Ｂに表されているように、第３領域５０５ｃの全部は、第１領域５０５ａ、第２領域５０５ｂ、第４領域５０５ｄ、及び第５領域５０５ｅの部分と重なっている。実店舗１００の重なり合った領域は、レイアウトカメラ４９０の互いの近さの結果であり得る。一般に、実店舗１００の重なり合った領域を捕捉することによって、物理レイアウト２００の特定の部分は、複数台のレイアウトカメラ４９０によって捕捉可能である。これは、レイアウトカメラ４９０のどれかが正常に機能しないか又はオフラインになる場合に物理レイアウト２００の十分なカメラカバレッジを提供するために、好ましい場合がある。

【0045】

図５Ｂでは長方形形状で表されているが、本開示は、領域５０５が如何なる形状又はサイズであってもよいと考えている。例えば、特定の実施形態では、領域５０５は楕円形状である。いくつかの実施形態で、領域５０５は、一様なサイズ及び形状である。例えば、図５Ｂに表されているように、領域５０５ａないし５０５ｅは、全てが同じ形状及びサイズである。他の実施形態では、領域５０５は、異なるサイズ及び形状の領域５０５を含んでもよい。

【0046】

［ｂ．カメラフィード処理］
レイアウトカメラ４９０及び／又はラックカメラ４９５によって捕捉された実店舗１００の映像及び／又は画像は、カメラフィードの形で仮想店舗ツール４０５へ送信される。仮想店舗ツール４０５は、次いで、映像処理部４６５を使用して、それらのカメラフィードに基づいて、実店舗１００においてショッピングセッションを行う人１０５に割り当てられるカメラフィードセグメント４１５及びラックカメラフィードセグメント４２５を生成する。図６は、仮想店舗ツール４０５の映像処理部４６５の動作を表す。

【0047】

図６は、第１レイアウトカメラ４９０ａ、第２レイアウトカメラ４９０ｂ、及びラックカメラ４９５ａを含む実施形態において、仮想店舗ツール４０５の映像処理部４６５の動作の例を示す。図６に表されているように、映像処理部４６５は、第１レイアウトカメラ４９０ａから第１カメラフィード６０５ａを、第２レイアウトカメラ４９０ｂから第２カメラフィード６０５ｂを、及びラックカメラ４９５ａからラックカメラフィード６２０ａを受け取る。特定の実施形態では、映像処理部４６５は、第１カメラフィード６０５ａ、第２カメラフィード６０５ｂ、及びラックカメラフィード６２０ａをレイアウトカメラ４９０ａ、４９０ｂ及びラックカメラ４９５ａから直接に受け取る。いくつかの実施形態で、映像処理部４６５は、第１カメラフィード６０５ａ、第２カメラフィード６０５ｂ、及びラックカメラフィード６２０ａをインターフェース４４５から受け取る。

【0048】

カメラフィード６０５ａ、６０５ｂ、及び６２０ａを処理する前に、映像処理部４６５は、最初に、識別番号４５５と関連付けられている人１０５が実店舗１００に入ったことを決定する。本開示は、人１０５が実店舗１００に入ったことを映像処理部４６５が任意の適切な方法で決定し得ると考えている。例えば、特定の実施形態では、実店舗１００は、人１０５の入店を制御する回転ドア５１０を含む。回転ドア５１０は、回転ドア５１０に取り付けられているスキャナ５１５を用いて、人１０５に属している物理カード又はモバイル機器１２５にあるＱＲコード（登録商標）を人１０５がスキャンすると、開くことができる。それに応じて、ＱＲコードのスキャンは、人１０５が実店舗１００に入ったことを示す、仮想店舗ツール４０５へ送られる通知を生成し得る。他の例として、いくつかの実施形態で、アルゴリズム４８８は、実店舗１００に設置されているセンサ４９８から受け取られた情報に基づいて、人１０５が実店舗１００に入ったことを決定するために使用されてもよい。そのようなアルゴリズム４８８の例は、図１３～１６の説明において、以下で更に詳細に記載される。

【0049】

本開示は、カメラフィード６０５及び６２０がタイムスタンプに関して同期すると考えており、それにより、カメラフィード６０５ａ、６０５ｂ、及び６２０ａの夫々からの所与のタイムスタンプに関連した映像は、実店舗１００内の同じ実時間に対応する。そのような同期化は、如何なる適切な方法でも達成されてよい。例えば、特定の実施形態では、レイアウトカメラ４９０及びラックカメラ４９５は、同じイーサネット（登録商標）スイッチにプラグ接続される。人１０５が実店舗１００に入ったことを決定することは、次いで、人１０５が実店舗１００に入ったタイムスタンプに対応する開始タイムスタンプ６１０を受け取ることを含んでもよい。

【0050】

もし第１カメラフィード６０５ａ、第２カメラフィード６０５ｂ、及びラックカメラフィード６２０ａに関連したデータパケットが異なる時間にネットワーク４３０ｂを介して仮想店舗ツール４０５に届き得るならば、本開示は、仮想店舗ツール４０５が第１カメラフィード６０５ａ、第２カメラフィード６０５ｂ、及びラックカメラフィード６２０ａを開始タイムスタンプ６１０以降にストリーミングするのではなく、仮想レイアウトツール４０５の映像処理部４６５が、予め定義された時間続く第１カメラフィード６０５ａ、第２カメラフィード６０５ｂ、及びラックカメラフィード６２０ａの記録をメモリ４４０に記憶することを企図している。そのような記録は、次いで、タイムスタンプに従って他と夫々同期して再生され得る。それに応じて、映像処理部４６５が、人１０５が実店舗１００に入ったタイムスタンプに対応する開始タイムスタンプ６１０を決定すると、映像処理部４６５は、次に、開始タイムスタンプ６１０で開始し、終了タイムスタンプ６１５で終了する各カメラフィードのセグメントを準備する。映像処理部４６５は、次いで、これらのセグメントをメモリ４４０に記憶する。例えば、映像処理部４６５は、開始タイムスタンプ６１０から終了タイムスタンプ６１５までの第１カメラフィード６０５ａの記録に対応する第１カメラフィードセグメント４１５ａと、開始タイムスタンプ６１０から終了タイムスタンプ６１５までの第２カメラフィード６０５ｂの記録に対応する第２カメラフィードセグメント４１５ｂと、開始タイムスタンプ６１０から終了タイムスタンプ６１５までのラックカメラフィード６２０ａの記録に対応するラックカメラフィードセグメント４２５ａとを準備する。映像処理部４６５は、次いで、セグメント４１５ａ、４１５ｂ、及び４２５ａの夫々をメモリ４４０に記憶する。

【0051】

本開示は、開始タイムスタンプ６１０と終了タイムスタンプ６１５との間の時間インターバルが如何なる所定量の時間であってもよいと考えている。例えば、特定の実施形態では、時間インターバルは５分である。この所定量の時間よりも長く続くショッピングセッションの映像を捕捉するために、カメラフィード６０５ａ、６０５ｂ、及び６２０ａが終了タイムスタンプ６１５に到達すると、映像処理部４６５は、終了タイムスタンプ６１５から開始し、新しい終了タイムスタンプで終わるカメラフィード６０５ａ、６０５ｂ、及び６２０ａの更なる記録を記憶してよく、新しい終了タイムスタンプは、終了タイムスタンプ６１５の所定量の時間後に起こる。映像処理部４６５は、追加の所定時間インターバルに夫々対応している任意の数の更なるカメラフィードセグメントをメモリ４４０に記憶してよい。特定の実施形態では、映像処理部４６５は、人１０５が実店舗１００から去ったとの指示を受け取るまで、そのような更なるカメラフィードセグメントを記録し続ける。

【0052】

映像処理部４６５は、何人の人１０５についてもカメラフィードセグメント４１５及び４２５を記憶してよい。それに応じて、映像処理部４６５は、人１０５に割り当てられているカメラフィードセグメント４１５及び４２５の集合を映像４５０の組として記憶してよく、映像４５０の組は、人１０５と関連付けられている識別番号４５５を割り当てられる。例として、第１人物１０５ａは、第１開始タイムスタンプ６１０ａで実店舗１００に入ってよく、第２人物１０５ｂは、第１開始タイムスタンプ６１０ａの後の第２開始タイムスタンプ６１０ｂで実店舗１００に入ってよく、第２開始タイムスタンプ６１０ｂは、第１開始タイムスタンプ６１０ａの後の予め定義された時間インターバル内にあり、それにより、第１人物１０５ａについて記録されたカメラフィードセグメントは、第２人物１０５ｂについて記録されたカメラフィードセグメントと重なり合う映像を含むことになる。それに応じて、映像処理部４６５は、第１人物１０５ａについて記録されたカメラフィードセグメントを、第１人物１０５ａに割り当てられている識別番号４５５ａとともに、映像４０５ａの組としてメモリ４４０に記憶し得る。同様に、映像処理部４６５は、第２人物１０５ｂについて記録されたカメラフィードセグメントを、第２人物１０５ｂに割り当てられている識別番号４５５ｂとともに、映像４０５ｂの組としてメモリ４４０に記憶し得る。仮想店舗ツール４０５は、次いで、所与の人物１０５に関連したカメラフィードセグメントを、その人物に割り当てられている識別番号４５５を用いて、メモリ４４０から読み出し得る。

【0053】

映像処理部４６５は、メモリ４４０に記憶されてプロセッサ４３５によって実行されるソフトウェアモジュールであってよい。映像処理部４６５の動作の例は、次の通りである：（１）カメラ４９０及び４９５から夫々カメラフィード６０５及び６２０を受け取る；（２）人１０５が実店舗１００に入ったことを決定する；（３）人１０５が実店舗１００に入った時間に対応するタイムスタンプ６１０を決定する；（４）カメラフィード６０５及び６２０から夫々カメラフィードセグメント４１５及び４２５を記録し、カメラフィードセグメントは、人１０５が実店舗１００に入った時間に対応するタイムスタンプ６１０から終了タイムスタンプ６１５まで所定量の時間続くカメラフィード６０５及び６２０の記録に対応する；（５）人１０５の識別番号４５５に従ってメモリ４４０に映像４５０の組としてカメラフィードセグメント４１５及び４２５を記憶する。

【0054】

［ｃ．カメラフィードセグメントの表示］
映像処理部４６５がカメラフィード６０５及び６２０から映像４５０の組を記録すると、仮想店舗ツール４０５は、次いで、デバイス１１５のディスプレイ４１０で映像４５０の組を表示するために表示制御部４７０を使用し得る。特定の実施形態では、仮想店舗ツール４０５は、グラフィカルユーザインターフェース７００の形でデバイス１１５のディスプレイ４１０で映像４５０の組を表示し得る。図７Ａ～７Ｃは、仮想店舗ツール４０５がディスプレイ４１０で映像４５０の組を表示する様態を表す例を示す。

【0055】

図７Ａは、４つのカメラフィードセグメント４１５ａないし４１５ｄを表示するように仮想店舗ツール４０５がディスプレイ４１０に指示する実施形態を表す。仮想店舗ツール４０５は、ディスプレイ４１０の第１領域７５０で第１カメラフィードセグメント４１５ａを、ディスプレイ４１０の第２領域７５５で第２カメラフィードセグメント４１５ｂを、ディスプレイ４１０の第３領域７６０で第３カメラフィードセグメント４１５ｃを、及びディスプレイ４１０の第４領域７６５で第４カメラフィードセグメント４１５ｄを表示する。仮想店舗ツール４０５は、任意の数のカメラフィードセグメント４１５を表示するようにディスプレイ４１０に指示し得る。例えば、特定の実施形態では、仮想表示ツール４０５は、映像４５０の組に保存されているのと同数のカメラフィードセグメント４１５を表示するようにディスプレイ４１０に指示してもよい。いくつかの実施形態で、仮想表示ツール４０５は、映像４５０の組に保存されているよりも少ないカメラフィードセグメント４１５を表示するようにディスプレイ４１０に指示してもよい。これは、実店舗１００が多数のレイアウトカメラ４９０を含む大規模店舗である実施形態で好ましい場合がある。そのような実施形態では、ディスプレイ４１０で全てのカメラフィードセグメント４１５を表示することは、表示されているカメラフィードセグメント４１５のうちのいずれか１つにおける実店舗１００の具体的な特徴をユーザが見ることを困難にする可能性がある。従って、仮想店舗ツール４０５は、ディスプレイ４１０でカメラフィードセグメント４１５のサブセットを表示してもよい。仮想店舗ツール４０５は、任意の適切な方法で、ディスプレイ４１０で表示するカメラフィードセグメント４１５のサブセットを選択し得る。例として、特定の実施形態では、仮想店舗ツール４０５は、映像４５０の組が割り当てられている人１０５の位置に最も近い実店舗１００の領域を捕捉しているカメラフィードセグメント４１５をいずれかの所与の時点で含むカメラフィードセグメント４１５のサブセットを表示してもよい。そのような実施形態では、映像４５０の組が実店舗１００において新たな位置へ移動する人１０５を表すとき、仮想店舗ツール４０５は、ディスプレイ４１０で現在表示されているカメラフィードセグメント４１５のサブセットを、人１０５の新たな位置に最も近い実店舗１００の領域を捕捉するカメラフィードセグメント４１５を含む新しいカメラフィードセグメント４１５のサブセットで置換し得る。仮想店舗ツール４０５は、任意の適切な方法で、その位置又は人１０５に最も近い実店舗１００の領域を捕捉するカメラフィードセグメント４１５のサブセットを決定し得る。例えば、特定の実施形態では、仮想店舗ツール４０５は、実店舗１００に設置されているセンサ４９８の組から受け取られた入力に基づいて、実店舗１００における人１０５の位置を追跡するよう構成される機械学習アルゴリズム４８８から人１０５の位置の指示を受け取ってもよい。

【0056】

図７Ａに表されているように、カメラフィードセグメント４１５を表示することに加えて、仮想店舗ツール４０５はまた、スライダバー７０５を映像４５０の組に割り当て、スライダバー７０５のコピーを、各カメラフィードのセグメント４１５とともに表示する。例えば、仮想店舗ツール４０５は、第１カメラフィードセグメント４１５ａとともにスライダバー７０５の第１コピー７０５ａを、第２カメラフィードセグメント４１５ｂとともにスライダバー７０５の第２コピー７０５ｂを、第３カメラフィードセグメント４１５ｃとともにスライダバー７０５の第３コピー７０５ｃを、及び第４カメラフィードセグメント４１５ｄとともにスライダバー７０５の第４コピー７０５ｄを表示する。スライダバー７０５の各コピーは、関連するカメラフィードセグメント４１５の再生進行を制御するよう構成されるスライダ７１０を含んでよい。例えば、スライダバー７０５上のスライダ７１０の位置は、関連するカメラフィードセグメント４１５の現在の再生進行を示す。スライダ７１０の位置は、新しい再生時間に対応する新しい位置へ（例えば、ユーザ１２０によって）手動で調整されてよい。そのような調整は、新しい再生時間にへの関連するカメラフィードセグメントの再生の調整を生じさせ得る。

【0057】

特定の実施形態では、各カメラフィードセグメント４１５の再生は、他のカメラフィードセグメント４１５のそれと同期し、それにより、スライダバー７０５のコピーのいずれかでのスライダ７１０の調整は、表示されているカメラフィードセグメント４１５の全ての再生進行の対応する調整をもたらす。例えば、スライダ７１０がスライダバー７０５の第１コピー７０５ａで第１再生時間から第２再生時間に調整される場合に、スライダバー７０５の第２コピー７０５ｂ上のスライダ７１０、スライダバー７０５の第３コピー７０５ｃ上のスライダ７１０、及びスライダバー７０５の第４コピー７０５ｄ上のスライダ７１０は、全て同様に第１再生時間から第２再生時間に調整することになる。これは、カメラフィードセグメント４１５を使用して実店舗１００における客１０５のショッピングセッションを観察するユーザ１２０にとって好ましい場合がある。ユーザ１２０は、カメラフィードセグメント４１５の全体の中断なし再生を見るのではなく、カメラフィードセグメント４１５がユーザ１２０にとって関心のある時点に到達したとユーザ１２０が決定するまで、カメラフィードセグメント４１５の再生進行を調整し得る。

【0058】

特定の実施形態では、スライダバー７０５は、１つ以上のマーカ７１５を含んでよい。例えば、図７Ａに表されているようにスライダバー７０５は、スライダバー７０５上の第１マーカ位置に位置し、第１マーカ再生時間に対応する第１マーカ７１５ａと、スライダバー７０５上の第２マーカ位置に位置し、第２マーカ再生時間に対応する第２マーカ７１５ｂとを含んでよい。第１マーカ７１５ａは、第１マーカ再生時間で起こる第１イベントに関連し、第２マーカ７１５ｂは、第２マーカ再生時間で起こる第２イベントに関連する。第１イベント及び第２イベントは、実店舗１００内で起こる如何なるタイプのイベントも含んでよい。例えば、第１イベントは、人１０５ａが実店舗１００において物理ラック２１０ａにある物理シェルフ３０５ａから物理アイテム３１５ａを選択することに関連してよい。同様に、第２イベントは、人１０５ａが実店舗１００において物理ラック２１０ｂにある第２物理シェルフ３０５ｂから第２物理アイテム３１５ｂを選択することに関連してよい。

【0059】

スライダバー７０５での第１マーカ７１５ａ及び第２マーカ７１５ｂの位置は、任意の適切な方法で決定されてよい。例として、特定の実施形態では、第１マーカ７１５ａに関連した第１イベント、及び第２マーカ７１５ｂに関連した第２イベントは、実店舗１００内に設置されているセンサ４９８から受け取られた入力の組に基づいて、アルゴリズム４８８によって決定されてよい。例えば、アルゴリズム４８８は、第１タイムスタンプに対応する第１時点で第１イベントが起こり、第２タイムスタンプに対する第２時点で第２イベントが起きると決定し得る。仮想店舗ツール４０５は、次いで、第１及び第２タイムスタンプを使用して、スライダバー７０５上の第１マーカ７１５ａ及び第２マーカ７１５ｂを、それらのタイムスタンプに対応する位置に置いてよい。第１及び第２イベントのタイミングを決定するために使用される、例となるアルゴリズム４８８は、図１３～１６の説明において、以下で更に詳細に記載される。マーカ７１５の使用は、カメラフィードセグメント４１５を使用して実店舗１００における客１０５のショッピングセッションを観察するユーザ１２０にとって好ましい場合がある。カメラフィードセグメント４１５の全体の中断なし再生を見るのではなく、ユーザ１２０は、例えば、実店舗１００において物理ラック２１０から物理アイテム３１５を選択する客１０５を観察するために、スライダ７１０が第１マーカ７１５ａ又は第２マーカ７１５ｂに関連したイベントの１つに到達するまで、カメラフィードセグメント４１５の全体の再生進行を調整し得る。

【0060】

上述されたように、図６の説明において、カメラフィードセグメント４１５の夫々は、開始タイムスタンプ６１０から終了タイムスタンプ６１５まで続く所定の時間インターバルのセグメントである。従って、客１０５が所定の時間インターバルよりも長く実店舗１００内にとどまる特定の実施形態では、複数のカメラフィードセグメントがレイアウトカメラ４９０の夫々から存在してもよい。例えば、仮想店舗ツール４０５は、第１時間インターバル、第２時間インターバル、第３時間インターバル、及び第４時間インターバルのカメラフィードセグメント４１５をメモリ４４０に記憶してよい。メモリ４４０は、任意の数の時間インターバルについての任意の数のカメラフィードセグメント４１５を記憶する。そのような実施形態では、スライダ７１０がスライダバー７０５の終わりに到達するとき、仮想店舗ツール４０５は、ディスプレイ４１０で現在表示されているカメラフィードセグメント４１５を、現在表示されているカメラフィードセグメント４１５の組によって捕捉された時間インターバルの直後の時間インターバルに対応する新しいカメラフィードセグメント４１５の組で置換し得る。現在表示されているカメラフィードセグメント４１５を、現在表示されているカメラフィードセグメント４１５の組によって捕捉された時間インターバルの直後の時間インターバルに対応する新しいカメラフィードセグメント４１５の組で置換するこのプロセスは、客１０５が実店舗１００から去ったと仮想店舗ツール４０５が決定するまで続き得る。

【0061】

仮想店舗ツール４０５は、任意の適切な方法で、客１０５が実店舗１００から去ったことを決定してよい。例として、特定の実施形態では、仮想店舗ツール４０５は、ユーザ１２０から受け取られた入力に基づいて、客１０５が実店舗１００から去ったことを決定してよい。例えば、グラフィカルユーザインターフェース７００の形で映像４５０の組がディスプレイ４１０で表示される実施形態では、図７Ｂに表されているように、グラフィカルユーザインターフェース７００はインタラクティブボタン７３０（例えば、退店ボタン）を含んでよく、それを通じて、ユーザ１２０は、カメラフィードセグメント４１５において、客１０５が実店舗１００から出たことを彼／彼女が観察したことを示し得る。他の例として、仮想店舗ツール４０５は、実店舗１００内で客１０５を追跡するよう構成されるアルゴリズム４８８から受け取られた情報に基づいて、客１０５が実店舗１００から去ったことを決定してよい。そのようなアルゴリズム４８８は、図１３～１６の説明において、以下で更に詳細に記載される。更なる例として、仮想店舗ツール４０５は、実店舗１００から受け取られた情報に基づいて、客１０５が実店舗１００から去ったことを決定してよい。例えば、実店舗１００は、実店舗１００の出口の近くに回転ドア５１０の組を含んでよい。回転ドア５１０を開き、実店舗１００から去るために、客１０５は、彼／彼女が実店舗１００に入るために使用した同じＱＲコードをスキャンするよう求められ得る。ＱＲコードのスキャンは、次いで、客１０５が実店舗１００を出たことを示す信号を仮想店舗ツール４０５へ送信し得る。

【0062】

特定の実施形態では、どのカメラフィードセグメント４１５が関心のある情報を含み得るかをユーザ１２０が決定するのを支援するために、仮想店舗ツール４０５は、特定の時点で特定のカメラフィードセグメント４１５を、それらの特定の時点でそれらのカメラフィードセグメント４１５において表されているイベントに基づいて強調表示するよう構成される。例えば、図７Ｂに表されているように、仮想店舗ツール４０５は、所与のカメラフィードセグメント４１５ａが第１時点で客１０５を表すことを決定するよう構成されてよい。それに応じて、仮想店舗ツール４０５は、スライダバー７０５上のスライダ７１０がその第１時点に到達したとの決定に応答して、カメラフィードセグメント４１５ａを強調表示し得る。ここで、カメラフィードセグメント４１５ａの強調表示は、仮想店舗ツール４０５がカメラフィードセグメント４１５ａに注意を引くことができる如何なる方法も含んでよい。例えば、図７Ｂに表されているように、カメラフィードセグメント４１５ａの強調表示は、カメラフィードセグメント４１５ａの周りにフレーム７２０を置くことを含んでよい。他の例として、カメラフィードセグメント４１５ａの強調表示は、ディスプレイ４１０で表されているカメラフィードセグメント４１５ａのサイズを他のカメラフィードセグメント４１５と比べて大きくすることを含んでもよい。

【0063】

特定の実施形態では、ディスプレイ４１０で表示されるグラフィカルユーザインターフェース７００は、実店舗１００における客１０５ａのショッピングセッションを監視するためにユーザ１２０によって使用されてよい。そのようなユーザ１２０が数人の他の客１０５を含む実店舗において特定の客１０５ａを監視するのを支援するために、仮想店舗ツール４０５は、更に、客１０５ａが実店舗１００に入ったときに捕捉された客１０５ａの画像７２５を表示してもよい。例えば、実店舗１００が店舗への人１０５の入店を制御する回転ドア５１０を含む特定の実施形態では、実店舗１００は、客１０５ａが回転ドア５１０を通過するときに客１０５ａの画像７２５を撮影するよう構成されるカメラを含んでもよい。

【0064】

スライダバー７０５が１つ以上のマーカ７１５を含む特定の実施形態では、各マーカ７１５は、マーカ７１５に関連したイベントを記述するメタデータ７４０を含んでよい。１つのそのような実施形態の例は、図７Ｃに表されている。上述されたように、図７Ａの説明において、各マーカ７１５ａ及び７１５ｂは、客１０５ａが実店舗１００にある物理ラック２１０の物理シェルフ３０５から物理アイテム３１５を選択することから成るイベントに関連してよい。従って、各マーカは、客１０５ａによって選択された物理アイテム３１５に割り当てられている識別番号７４５、客１０５ａが物理アイテム３１５を選択した物理シェルフ３０５に割り当てられている識別番号７５０、及び／又は客１０５ａが物理アイテム３１５を選択した物理シェルフ３０５を含む物理ラック２１０に割り当てられている識別番号７５５を示すメタデータ７４０を含んでよい。特定の実施形態では、アイテム識別番号７４５は、客１０５ａが物理アイテム３１５を選択した物理シェルフ３０５のゾーンを識別するゾーン識別番号７４５に対応してよい。シェルフゾーンの使用は、図１３Ｃ及び１３Ｄの説明において、以下で更に詳細に記載される。

【0065】

仮想店舗ツール４０５は、任意の適切な方法でメタデータ７４０を使用してもよい。例えば、特定の実施形態では、スライダバー７０５上のスライダ７１０が第１マーカ７１５ａに到達するとき、仮想店舗ツール４０５は、メタデータ７４０を使用して、客１０５が物理ラック２１０から物理アイテム３１５を選択したことを決定し得る。それに応じて、仮想店舗ツール４０５は，ディスプレイ４１０でラックカメラフィードセグメント４２５ａを表示してよく、ラックカメラフィードセグメント４２５ａは物理ラック２１０の映像を表す。ラックカメラフィードセグメント４２５ａは、カメラフィードセグメント４１５ａないし４１５ｄと同期してもよく、それにより、スライダバー７０５のコピーのいずれかでのスライダ７１０の調整は、ラックカメラフィードセグメント４２５ａの再生進行の対応する調整をもたらす。スライダ７１０がスライダバー７０５でマーカ７１５に到達することに応答して自動的にラックカメラフィードセグメント４２５ａを表示することは、物理ラック２１０から物理アイテム３１５を選択する客１０５をユーザ１２０が観察することができる物理ラック２１０のビューをユーザ１２０に提供するために、好ましい場合がある。特定の実施形態では、ユーザ１２０は、第２グラフィカルユーザインターフェースを使用して、物理ラック２１０に割り当てるラックカメラ４９５を複数台の可能性があるラックカメラ４９５から選択し、ユーザ１２０によって決定される物理ラック２１０の最良のビューを表示するラックカメラフィードセグメント４２５ａをユーザ１２０に提供することが可能であってもよい。仮想店舗ツール４０５のこの態様は、図１１及び１２の説明において、以下で更に詳細に記載される。

【0066】

図８は、仮想店舗ツール４０５がカメラフィードセグメント４１５及び４２５を生成し、そのようなセグメントをディスプレイ４１０で表示するプロセスを表すフローチャートを示す。ステップ８０５で、仮想店舗ツール４０５は、実店舗１００に置かれているレイアウトカメラ４９０の組及びラックカメラ４９５の組から夫々レイアウトカメラフィード６０５の組及びラックカメラフィード６２０の組を受け取る。ステップ８１０で、仮想店舗ツール４０５は、人１０５が実店舗１００に入ったかどうかを決定する。本開示は、仮想店舗ツール４０５が、如何なる適切な方法でも、人１０５が実店舗１００に入ったことを決定してよいと考えている。例えば、特定の実施形態では、実店舗１００は、店舗への人１０５の入店を制御する回転ドア５１０を含む。回転ドア５１０は、人１０５に属する物理カード又はモバイル機器１２５にあるＱＲコードを人１０５がスキャンすると、開くことができる。それに応じて、ＱＲコードのスキャンは、人１０５が実店舗１００に入ったことを示す、仮想店舗ツール４０５へ送信される通知を生成し得る。他の例として、いくつかの実施形態で、アルゴリズム４８８が、実店舗１００に設置されているセンサ４９８から受け取られた情報に基づいて、人１０５が実店舗１００に入ったことを決定するために使用されてもよい。

【0067】

人１０５が実店舗１００に入ったことをステップ８１０で仮想店舗ツール４０５が決定する場合に、ステップ８１５で、仮想店舗ツール４０５は、カメラフィードセグメント４１５及び４２５の組をメモリ４４０に記憶する。カメラフィードセグメント４１５の各カメラフィードセグメントは、開始タイムスタンプ６１０から終了タイムスタンプ６１５までのカメラフィード６０５の１つの記録に対応する。同様に、ラックカメラフィードセグメント４２５の各ラックカメラフィードセグメントは、開始タイムスタンプ６１０から終了タイムスタンプ６１５までのラックカメラフィード６２０の１つの記録に対応する。開始タイムスタンプ６１０は、人１０５が実店舗１００に入った時間に対応する。終了タイムスタンプ６１５は、開始タイムスタンプ６１０の後の所定の時間インターバルに対応する。

【0068】

ステップ８２０で、仮想店舗ツール４０５は、スライダバー７０５のコピーを各カメラフィードセグメント４１５及び４２５に割り当てる。スライダバー７０５のコピー上のスライダ７１０は、対応するカメラフィードセグメント４１５及び／又は４２５が進行すると前進する。特定の実施形態では、スライダバー７０５のコピーは互いに同期し、それにより、全てのカメラフィードセグメント４１５及び４２５は同じペースで一緒に進む。更に、そのような実施形態では、スライダバー７０５のコピーのいずれかでのスライダ７１０の調整は、全てのカメラフィードセグメント４１５及び４２５の再生進行の対応する調整をもたらす。これは、カメラフィードセグメント４１５を使用して実店舗１００における客１０５のショッピングセッションを観察するユーザ１２０にとって好ましい場合がある。ユーザ１２０は、カメラフィードセグメント４１５の全体の中断なし再生を見るのではなく、ユーザ１２０にとって関心のある時点にカメラフィードセグメント４１５が到達したことをユーザ１２０が決定するまで、カメラフィードセグメント４１５の再生進行を調整し得る。

【0069】

ステップ８２５で、仮想店舗ツール４０５は、ディスプレイ４１０で１つ以上のカメラフィードセグメント４１５及び４２５を、スライダバー７０５の対応するコピーとともに提示する。例えば、仮想店舗ツール４０５は、ディスプレイ４１０の第１領域でスライダバー７０５の第１コピー７５０ａとともに第１カメラフィードセグメント４１５ａを、ディスプレイ４１０の第２領域でスライダバー７０５の第２コピー７０５ｂとともに第２カメラフィードセグメント４１５ｂを、ディスプレイ４１０の第３領域でスライダバー７０５の第３コピー７０５ｃとともに第３カメラフィードセグメント４１５ｃを、及びディスプレイ４１０の第４領域でスライダバー７０５の第４コピー７０５ｄとともに第４カメラフィードセグメント４１５ｄを表示してよい。仮想店舗ツール４０５は、更に、スライダバー７０５の各コピー上のスライダ７１０が進むように、カメラフィードセグメント４１５及び／又は４２５を再生する。

【0070】

ステップ８３０で、仮想店舗ツール４０５は、次に、スライダバー７０５の第１位置からスライダバー７０５の第２位置まで、スライダバー７０５のコピーにおけるいずれかのスライダ７１０に対して調整が行われたかどうかを決定し、第１位置は第１再生時間に対応し、第２位置は第２再生時間に対応する。調整が行われたことをステップ８３０で仮想店舗ツール４０５が決定する場合に、仮想店舗ツール４０５は、次に、カメラフィードセグメント４１５及び４２５の夫々の再生進行を第１再生時間から第２再生時間まで調整する。

【0071】

ステップ８４０で、仮想店舗ツール４０５は、人１０５が実店舗１００から去ったかどうかを決定する。仮想店舗ツール４０５は、如何なる適切な方法でも、客１０５が実店舗１００から去ったことを決定してもよい。例として、特定の実施形態では、仮想店舗ツール４０５は、ユーザ１２０から受け取られた入力に基づいて、客１０５が実店舗１００から去ったことを決定してよい。例えば、グラフィカルユーザインターフェース７００の形でカメラフィードセグメント４１５及び４２５がディスプレイ４１０で表示される実施形態では、グラフィカルユーザインターフェース７００はインタラクティブボタン７３０（例えば、退店ボタン）を含んでよく、それを通じて、ユーザ１２０は、１つ以上のカメラフィードセグメント４１５において、客１０５が実店舗１００から出たことを彼／彼女が観察したことを示し得る。他の例として、仮想店舗ツール４０５は、実店舗１００内で客１０５を追跡するよう構成されるアルゴリズム４８８から受け取られた情報に基づいて、客１０５が実店舗１００から去ったことを決定してよい。そのようなアルゴリズム４８８は、図１３～１６の説明において、以下で更に詳細に記載される。更なる例として、仮想店舗ツール４０５は、実店舗１００から受け取られた情報に基づいて、客１０５が実店舗１００から去ったことを決定してよい。例えば、実店舗１００は、実店舗１００の出口の近くに回転ドア５１０の組を含んでよい。回転ドア５１０を開き、実店舗１００から去るために、客１０５は、彼／彼女が実店舗１００に入るために使用した同じＱＲコードをスキャンするよう求められ得る。ＱＲコードのスキャンは、次いで、客１０５が実店舗１００を出たことを示す信号を仮想店舗ツール４０５へ送信し得る。

【0072】

人１０５が実店舗１００から去っていないとステップ８４０で仮想店舗ツール４０５が決定する場合に、ステップ８４５で、仮想店舗ツール４０５は、カメラフィードセグメント４１５及び４２５が終了タイムスタンプ６１５に到達しているかどうかを決定する。カメラフィードセグメント４１５及び４２５が終了タイムスタンプ６１５に到達していないとステップ８４５で仮想店舗ツール４０５が決定する場合に、仮想店舗ツール４０５はステップ８３０に戻り、スライダバー７０５の第１位置からスライダバー７０５の第２位置まで、スライダバー７０５のコピーにおけるいずれかのスライダ７１０に対して調整が行われたかどうかを決定する。他方で、カメラフィードセグメント４１５及び４２５が終了タイムスタンプ６１５に到達しているとステップ８４５で仮想店舗ツール４０５が決定する場合には、仮想店舗ツール４０５はステップ８２５に戻り、新しいカメラフィードセグメント４１５及び／又は４２５の組をディスプレイ４１０で表示し、新しいカメラフィードセグメントの組は、前のカメラフィードセグメント４１５及び／又は４２５の組に関連した前の時間インターバルの直後の時間インターバルにわたるカメラフィード６０５及び／又は６２０の記録に対応する。

【0073】

図８に表されている方法８００に対しては、変更、追加、又は削除が行われてもよい。方法８００は、より多い、より少ない、又は他のステップを含んでもよい。例えば、ステップは、並行して又は任意の適切な方法で実行されてよい。仮想店舗ツール４０５（又はそのコンポーネント）がステップを実行するものとして説明されているが、例えば、デバイス１１５のような、システム４００のいずれかの適切なコンポーネントが、方法の１つ以上のステップを実行してもよい。

【0074】

［ＩＶ．ショッピングセッションの仮想エミュレーション］
上述されたように、カメラフィードセグメント４１５及び４２５は、実店舗１００で行われて、カメラフィードセグメント４１５及び／又は４２５によって捕捉されるショッピングセッションを仮想的にエミュレートするために、仮想レイアウト２０５とともに使用されてよい。例えば、特定の実施形態では、カメラフィードセグメント４１５及び４２５は、仮想レイアウト２０５とともに、グラフィカルユーザインターフェース７００の形で、ユーザ１２０に提示されてよい。ここで、カメラフィードセグメント４１５及び４２５は、客１０５に割り当てられ、実店舗１００における客１０５のショッピングセッションを捕捉し得る。ユーザ１２０は、カメラフィードセグメント４１５及び４２５を監視して、物理ラック２１０から物理アイテム３１５を選択する客１０５を見ることができる。それに応じて、ユーザ１２０は、客１０５によって選択された物理アイテム３１５を表す仮想アイテムで仮想ショッピングカート４２０をポピュレートし得る。それにより、客１０５のショッピングセッションの終わりに、仮想ショッピングカート４２０は、客１０５によって選択された物理アイテム３１５ごとに仮想アイテム３２０を含み得る。

【0075】

図９Ａ～９Ｄは、実店舗１００で行われて、カメラフィードセグメント４１５及び４２５によって捕捉されるショッピングを仮想的にエミュレートするために使用され得る、ディスプレイ４１０で表示されるグラフィカルユーザインターフェース７００の更なる例を示す。図９Ａに表されているように、仮想店舗ツール４０５は、図７Ａ～７Ｃの説明において上述されたように、ディスプレイ４１０の第１領域９５５においてカメラフィードセグメント４１５を表示し得る。仮想店舗ツール４０５は、更に、ディスプレイ４１０の第２領域９６０において仮想レイアウト２０５を表示し得る。仮想レイアウト２０５は、実店舗１００の物理レイアウト２００をエミュレートするよう構成される。図９Ａに表されているように、仮想レイアウト２０５は、仮想ラック２３０の組を含む。本開示は、仮想レイアウト２０５が任意の数の仮想ラック２３０を含んでよいと考えており、仮想レイアウト２０５で表示される仮想ラック２３０の数は、実店舗１００における物理ラック２１０の数に対応する。仮想レイアウト２０５における仮想ラック２３０のレイアウトは、実店舗１００における対応する物理ラック２１０の配置をエミュレートするよう構成される。

【0076】

［ａ．イベントの指示の受信］
図９Ｂに表されているように仮想店舗ツール４０５は、実店舗１００に置かれている物理ラック２１０ａに関連したイベントの指示を受け取ってよい。特定の実施形態では、物理ラック２１０ａに関連したイベントは、客１０５が物理ラック２１０ａと関係を持つことを含む。例えば、物理ラック２１０ａに関連したイベントは、客１０５ａが物理ラック２１０ａに近づくこと、及び／又は物理ラック２１０ａから物理アイテム３１５ｆを選択することを含んでよい。イベントの指示は、仮想店舗ツール４０５によって受け取られる如何なる適切な指示も含んでよい。例えば、特定の実施形態では、イベントの指示は、客１０５が物理ラック２１０ａに近づくこと及び／又は物理ラック２１０ａと関係を持つことを見ることに応答して、ユーザ１２０が仮想レイアウト２０５において仮想ラック２３０ａを選択することを含んでよい。他の例として、イベントの指示は、スライダバー７０５上のスライダ７１０がマーカ７１５に到達することを含んでよく、マーカ７１５は、メタデータ７４０により、イベントに関連した物理ラック２１０を示す。更なる例として、特定の実施形態では、イベントの指示は、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、客１０５が物理ラック２１０ａに近づいたこと及び／又は物理ラック２１０ａからアイテム３１５を選択したことを決定するよう構成されるアルゴリズム４８８から情報を受け取ることを含んでよい。

【0077】

ディスプレイ４１０で表示されるグラフィカルユーザインターフェース７００が実店舗１００における客１０５のショッピングセッションを監視するためにユーザ１２０によって使用され得る特定の実施形態では、仮想店舗ツール４０５は、カメラフィードセグメント４１５及び／又は４２５の現在の再生進行に基づいて、客１０５の予測位置９５０を仮想レイアウト２０５で表示してもよい。予測位置９５０は、カメラフィードセグメント４１５及び／又は４２５の現在の再生進行に対応する物理的時間で、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、実店舗１００において客１０５を追跡するよう構成されるアルゴリズム４８８によって決定される物理レイアウト２００における客１０５の可能性のある位置に対応してよい。これは、ユーザ１２０が、複数人の他の客１０５を含む実店舗１００において特定の客１０５ａを監視するのを助け得る。図９Ｂでは仮想レイアウト２０５で点９５０として表されているが、客１０５の予測位置９５０は、如何なる適切な方法でも仮想レイアウト２０５に提示されてもよい。例えば、予測位置は、客１０５の予測経路を含む線であってもよい。そのような実施形態では、イベントの指示は、客１０５が物理ラック２１０ａに近づくこと及び／又はそれと関係を持つことを見ること、及び／又は仮想レイアウト２０５での客１０５の予測位置９５０が物理ラック２１０ａの客１０５の接近を示すことを見ることに応答して、ユーザ１２０が仮想レイアウト２０５において仮想ラック２３０ａを選択することを含んでよい。

【0078】

イベントの指示を受け取ることに応答して、仮想店舗ツール４０５は、ディスプレイ４１０の第３領域９０５において、イベントに関連した物理ラック２１０ａに対応する仮想ラック２３０ａを表示してよく、仮想ラック２３０ａは、物理ラック２１０ａをエミュレートするよう構成される。特定の実施形態では、ディスプレイ４１０の第３領域９０５は、仮想レイアウト２０５の右に配置されてよい。特定の実施形態では、仮想店舗ツール４０５は、更に、物理ラック２１０ａに関連したイベントの指示を受け取ることに応答して、仮想レイアウト２０５において、仮想ラック２３０ａを強調表示してもよい。仮想ラック２３０ａの強調表示は、仮想ラック２３０ａを他の仮想ラック２３０ｂないし２３０ｋと区別する如何なる方法も含んでよい。例えば、図９Ｂに表されているように、仮想ラック２３０ａの強調表示は、仮想ラック２３０ａの周りにフレームを置くことを含んでよい。仮想ラック２３０ａの強調表示は、更に、仮想ラック２３０ａに色を適用すること、及び／又は仮想ラック２３０ａを残りの仮想ラック２３０ｂないし２３０ｋから区別する任意の他の適切な方法を含んでもよい。

【0079】

図９Ｂに表されているように、ディスプレイ４１０の第３領域９０５に表示される仮想ラック２３０ａは、仮想アイテム３２０ａないし３２０ｈの組を含む。仮想アイテム３２０ａないし３２０ｈは、物理ラック２１０ａに保管されている物理アイテムをエミュレートするよう構成される。特定の実施形態では、仮想アイテム３２０ａないし３２０ｈは、アイテムのリストとして第３領域９０５に表示され、リスト内のアイテムの名称は、物理ラック２１０ａに保管されている物理アイテム３１５ａないし３１５ｈの名称に対応する。他の実施形態では、第３領域９０５に表示される仮想ラック２３０ａの外観は、物理ラック２１０ａの外観をエミュレートするよう構成される。例えば、第１仮想シェルフ３１０ａは、第１物理シェルフ３０５ａをエミュレートするよう構成され、第２仮想シェルフ３１０ｂは、第２物理シェルフ３０５ｂをエミュレートするよう構成され、第３仮想シェルフ３１０ｃは、第３物理シェルフ３０５ｃをエミュレートするよう構成される。特に、第１仮想アイテム３２０ａは、第１物理シェルフ３０５ａの第１ゾーン３２５ａにおける第１物理アイテム３１５ａの位置をエミュレートするよう、第１仮想シェルフ３１０ａの第１ゾーン３３０ａに置かれる。同様に、第２仮想アイテム３２０ｂは、第１物理シェルフ３０５ａの第２ゾーン３２５ｂにおける第２物理アイテム３１５ｂの位置をエミュレートするよう、第１仮想アイテム３２０ａの右側に、第１仮想シェルフ３１０ａの第２ゾーン３３０ｂに置かれ、第３仮想アイテム３２０ｃは、第１物理シェルフ３０５ａの第３ゾーン３２５ｃにおける第３物理アイテム３１５ｃの位置をエミュレートするよう、第２仮想アイテム３２０ｂの右側に、第１仮想シェルフ３１０ａの第３ゾーン３３０ｃに置かれる。仮想アイテム３２０ｄないし３２０ｆは、同様に、第２物理シェルフ３０５ｂに置かれている物理アイテム３１５ｄないし３１５ｆの位置をエミュレートするよう第２仮想シェルフ３１０ｂに置かれ、仮想アイテム３２０ｇないし３２０ｈは、第３物理シェルフ３０５ｃに置かれている物理アイテム３１５ｇないし３１５ｈの位置をエミュレートするよう第３仮想シェルフ３１０ｃに置かれる。物理アイテム３１５を更にエミュレートするために、仮想アイテム３２０の夫々は、対応する物理アイテム３１５のグラフィカル表現を含んでよい。

【0080】

ディスプレイ４１０の第３領域９０５で仮想ラック２３０ａを表示することに加えて、物理ラック２１０ａに関連したイベントの指示を受け取ることに応答して、仮想店舗ツール４０５はまた、図９Ｃに表されているように、ディスプレイ４１０の第４領域９７０においてラックカメラフィードセグメント４２５ａを表示してもよい。特定の実施形態では、ディスプレイ４１０の第４領域９７０は、第３領域９０５の右側にある。ラックカメラフィードセグメント４２５ａは、イベントが起こる時間インターバル中に、物理ラック２１０ａを表す。例えば、イベントが、客１０５が物理ラック２１０ａに近づくことを含む実施形態では、ラックカメラフィードセグメント４２５ａは、物理ラック２１０ａに近づく客１０５を表す。他の例として、イベントが、客１０５が物理ラック２１０ａからアイテム３１５ｆを選択することを含む実施形態では、ラックカメラフィードセグメント４２５ａは、物理ラック２１０ａからアイテム３１５ｆを選択する客１０５を表す。

【0081】

ラックカメラフィードセグメント４２５ａは、カメラフィードセグメント４１５ａないし４１５ｆと同期してよく、それにより、スライダバー７０５のコピーのいずれかでのスライダ７１０の調整は、ラックカメラフィードセグメント４２５ａの再生進行の対応する調整をもたらす。イベントの指示を受け取ることに応答してラックカメラフィードセグメント４２５ａを表示することは、客１０５が物理ラック２１０ａに近づくこと及び／又はそれと関係を持つことをユーザ１２０が観察することができる物理ラック２１０ａのビューをユーザ１２０に提供するために、好ましい場合がある。例えば、ラックカメラフィードセグメント４２５ａは、客１０５が物理ラック２１０ａからアイテム３１５を選択したかどうかをユーザ１２０が確認するのを助け得る。ユーザ１２０は、次いで、この情報を使用して、図９Ｄの説明において、以下で更に詳細に記載されるように、仮想ショッピングカート４２０をポピュレートし得る。特定の実施形態では、ユーザ１２０は、ユーザ１２０によって決定される物理ラック２１０ａの最良のビューを表示するラックカメラフィードセグメント４２５ａをユーザ１２０に提供するために、物理ラック２１０を割り当てるラックカメラ４９５を選択してもよい。仮想店舗ツール４０５のこの態様は、図１１及び１２の説明において、以下で更に詳細に記載される。

【0082】

［ｂ．選択されたアイテムを特定する情報の受信］
イベントが、人１０５が物理ラック２１０ａからアイテム３１５を選択することを含む特定の実施形態では、イベントの指示は、人１０５によって選択されたアイテムを特定する情報を含んでよい。例えば、イベントが、人１０５が物理ラック２１０ａからアイテム３１５ｆを選択することを含む場合に、仮想店舗ツール４０５によって受け取られるイベントの指示は、物理アイテム３１５ｆ及び／又は仮想アイテム３２０ｆを特定する情報を含んでよい。例として、特定の実施形態では、物理ラック２１０ａの各物理シェルフ３０５は、図１３Ｂ～１３Ｄの説明において、以下で記載されるように、物理シェルフ３０５のゾーン３２５へ結合されている重量センサ１３００の組を含む。人１０５が物理シェルフ３０５からアイテム３１５を持ち去るとき、アイテム３１５が置かれていた物理シェルフ３０５のゾーンに結合されている重量センサ１３００は、アイテム３１５が物理ラック２１０ａの物理シェルフ３０５から選択されたことを示す情報を（直接に、又は外部システム４８５のような、システム４００の他のコンポーネントを通じて）仮想店舗ツール４０５へ送信し得る。仮想店舗ツール４０５は、この情報を使用して、ディスプレイ４１０の第３領域９０５に表示される仮想ラック２３０ａ上の対応する仮想アイテム３２０を強調表示し得る。例えば、物理ラック２１０ａの第２物理シェルフ３０５ｂの第３ゾーンへ結合されている重量センサは、物理ラック２１０ａの第２物理シェルフ３０５ｂの第３ゾーンからアイテム３１５ｆが持ち去られたことを示す情報を仮想店舗ツール４０５へ送信し得る。

【0083】

他の例として、特定の実施形態では、イベントの指示は、スライダバー７０５上のスライダ７１０がマーカ７１５に到達することを含んでよい。マーカ７１５は、図７Ｃの説明において、上述されたように、メタデータ７４０を含んでよい。メタデータ７４０は、客１０５によって選択された物理アイテム３１５に割り当てられている識別番号７４５、客１０５が物理アイテム３１５を選択した物理シェルフ３０５に割り当てられている識別番号７５０、及び／又は客１０５が物理アイテム３１５を選択した物理シェルフ３０５を含む物理ラック２１０に割り当てられている識別番号７５５を示す情報を含んでよい。例えば、スライダバー７０５上のスライダ７１０がマーカ７１５ａに到達するとき、仮想店舗ツール４０５は、マーカ７１５ａに割り当てられている識別番号７４０を読み出して、人１０５が物理ラック２１０ａの第２物理シェルフ３０５ｂから物理アイテム３１５ｆを選択したことを特定し得る。マーカ７１５は、如何なる適切な方法でもスライダバー７０５に加えられてよい。例えば、特定の実施形態では、仮想表示ツール４０５は、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、実店舗１００において客１０５を追跡するよう、かつ、夫々の客１０５によって選択された物理アイテムを決定するよう、構成されるアルゴリズム４８８から受け取られた情報に基づいて、マーカ７１５をスライダバー７０５に加える。

【0084】

物理ラック２１０ａから人１０５によって選択された物理アイテムであるとして物理アイテム３１５ｆを特定する情報を受け取ることに応答して、仮想店舗ツール４０５は、仮想ラック２３０ａの第２仮想シェルフ３１０ｂに置かれている第６仮想アイテム３２０ｆを強調表示してよい。第６仮想アイテム３２０ｆを強調表示することは、第６仮想アイテム３２０ｆを残りの仮想アイテム３２０から区別する如何なる方法も含んでよい。例えば、第６仮想アイテム３２０ｆを強調表示することは、図９Ｃに表されているように、第６仮想アイテム３２０ｆの周りにフレームを置くこと、他の仮想アイテム３２０と比較して第６仮想アイテム３２０ｆを拡大すること、及び／又は第６仮想アイテム３２０ｆを残りの仮想アイテム３２０から区別する任意の他の適切な方法を含んでもよい。

【0085】

［ｃ．仮想ショッピングカートのポピュレート］
特定の実施形態では、ディスプレイ４１０で仮想店舗ツール４０５によって表示されるグラフィカルユーザインターフェース７００は、更に、図９Ｄに表されているように、仮想ショッピングカート４２０を含んでよい。仮想ショッピングカート４２０は、人１０５によって彼／彼女のショッピングセッション中に選択された物理アイテム３１５に対応する仮想アイテム３２０を格納することによって、実店舗１００における客１０５のショッピングセッションを更にエミュレートするために使用されてよい。仮想店舗ツール４０５は、ディスプレイ４１０の第５領域９６５において仮想ショッピングカート４２０を表示してよい。特定の実施形態では、ディスプレイ４１０の第５領域９６５は、ディスプレイ４１０の第３領域９０５に表示される仮想ラック２３０ａと、ラックカメラフィードセグメント４２５ａとの間に位置している。

【0086】

そのような特定の実施形態では、物理ラック２１０ａから人１０５によって選択された物理アイテムであるとして物理アイテム３１５ｆを特定する情報を受け取ることは、物理アイテム３１５ｆに対応する仮想アイテム３２０ｆを、領域９０５に表示されている仮想ラック２３０ａから仮想ショッピングカート４２０へドラッグ・アンド・ドロップすることに関連した情報を受け取ることを含んでよい。例えば、ユーザ１２０は、カメラフィードセグメント４１５ａないし４１５ｆ及び／又はラックカメラフィードセグメント４２５ａにおいて、客１０５が物理アイテム３１５ｆを選択することを観察し得る。それに応じて、ユーザ１２０は、仮想ラック２３０ａから仮想アイテム３２０ｆを選択してよく、仮想アイテム３２０ｆは、物理アイテム３１５ｆに対応し、物理アイテム３１５ｆをエミュレートするよう構成される。ユーザ１２０は、次いで、仮想アイテム３２０ｆを仮想ショッピングカート４２０へドラッグし、そして、仮想アイテム３２０ｆを仮想ショッピングカート４２０にドロップし得る。ユーザ１２０が、カメラフィードセグメント４１５ａないし４１５ｆ及び／又はラックカメラフィードセグメント４２５ａにおいて、客１０５が物理アイテム３１５ｆを選択することを観察するのを助けるために、特定の実施形態では、ユーザ１２０は、カメラフィードセグメント４１５ａないし４１５ｆ及び／又はラックカメラフィードセグメント４２５ａを選択することによって、表示されているカメラフィードセグメント４１５ａないし４１５ｆ及び／又はラックカメラフィードセグメント４２５ａのいずれかを他よりも大きくすることができる。例えば、ユーザ１２０は、ディスプレイ４１０で提示されているセグメントのサイズを大きくするように仮想店舗ツール４０５に指示するために、所与のカメラフィードセグメント４１５又は４２５をクリックすることができる。

【0087】

メタデータ７４０、物理シェルフ３０５ｆへ結合されている重量センサ１３００、仮想ショッピングカート４２０への仮想アイテム３２０ｆのドラッグ・アンド・ドロップ、及び／又は物理アイテム３１５ｆを特定する情報を受け取る任意の他の適切な方法のどれかから、物理アイテム３１５ｆを、物理ラック２１０ａから人１０５によって選択された物理アイテムとして特定する情報を受け取ることに応答して、仮想店舗ツール４０５は、物理アイテム３１５ｆに対応する仮想アイテム３２０ｆを仮想ショッピングカート４２０に格納してよい。仮想ショッピングカート４２０は、仮想アイテム３２０をいくつでも格納してよい。例えば、カメラフィードセグメント４１５及び４２５の再生が進むにつれて、仮想店舗ツール４０５は、追加の、異なった物理アイテム３１５を、物理ラック２１０から人１０５によって選択されたものとして特定する更なる情報を受け取ってよい。物理ラック２１０は、物理ラック２１０ａと同じであっても、又は物理ラック２１０ａとは異なってもよい。追加の物理アイテム３１５を特定する情報を受け取ることに応答して、仮想店舗ツール４０５は、追加の物理アイテム３１５に対応する追加の仮想アイテム３２０を仮想ショッピングカート４２０に格納してよい。このプロセスは、人１０５が物理ラック２１０から物理アイテム３１５を選択したことをカメラフィードセグメント４１５及び４２５が示す回数に対応する回数のように、何回でも繰り返してよい。

【0088】

図９Ｄに表されているように、特定の実施形態では、仮想ショッピングカート４２０は、各仮想アイテム３２０を、対応する物理アイテム３１５のグラフィカル表現及び／又は対応する物理アイテム３１５のテキスト記述９１０として表示してよい。仮想ショッピングカート４２０はまた、仮想ショッピングカート４２０に含まれる各仮想アイテム３２０ｆの個数９１５を示してもよい。例えば、仮想ショッピングカート４２０は、客１０５が物理ラック２１０ａから２つの物理アイテム３１５ｆを選択したという事実をエミュレートするために、２つの仮想アイテム３２０ｆの個数９１５を示してよい。各仮想アイテム３２０の個数９１５は、如何なる適切な方法でも増やされてよい。例えば、特定の実施形態では、仮想アイテム３２０ｆの個数９１５は、物理アイテム３１５ｆに対応する仮想アイテム３２０ｆを、領域９０５に表示されている仮想ラック２３０ａから仮想ショッピングカート４２０へ複数回ドラッグ・アンド・ドロップすることによって、増える可能性がある。他の例として、いくつかの実施形態で、仮想アイテム３２０ｆの個数９１５は、ユーザ１２０が追加ボタン９２５を通じてグラフィカルユーザインターフェース７００と関係を持つことによって、増える可能性がある。同様に、仮想アイテム３２０ｆの個数９１５は、ユーザ１２０が減少ボタン９２５を通じてグラフィカルユーザインターフェース７００と関係を持つことによって、減る可能性がある。ユーザ１２０はまた、ゴミ箱ボタン９３０を通じてグラフィカルユーザインターフェース７００と関係を持つことによって、仮想アイテム３２０ｆを仮想ショッピングカート４２０から削除してもよい。

【0089】

実店舗１００での客１０５のショッピングセッションの終わりに（つまり、客１０５が実店舗１００から出たことを仮想店舗ツール４０５が決定する場合に）、仮想ショッピングカート４２０は、客１０５によって彼／彼女のショッピングセッション中に選択された物理アイテム３１５の料金を客１０５に請求し、領収書を客１０５へ送るために、使用されてよい。更に、仮想ショッピングカート４２０は、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、アルゴリズム４８８によって行われた決定を妥当性確認するために、使用されてもよい。仮想店舗ツール４０５のこれらの態様は、図１３～１６の説明において、以下で更に詳細に記載される。

【0090】

［ｄ．物理ショッピングセッションを仮想的にエミュレートする方法］
図１０は、仮想店舗ツール４０５が、仮想レイアウトと、実店舗１００から受け取られ、ショッピングセッションを捕捉するカメラフィードセグメント４１５及び／又は４２５とを用いて、実店舗１００における客１０５のショッピングセッションをエミュレートする様態を説明するフローチャートを表す。ステップ１００５で、仮想店舗ツール４０５は、仮想店舗１１０の仮想レイアウト２０５を表示する。仮想レイアウト２０５は、実店舗１００の物理レイアウト２００をエミュレートするよう構成される。特に、仮想レイアウト２０５での仮想ラック２３０の配置は、実店舗１００における物理ラック２１０の物理レイアウト２００をエミュレートするよう構成される。

【0091】

ステップ１０１０で、仮想店舗ツール４０５は、人１０５が、実店舗１００でのショッピングセッション中に、実店舗１００の物理ラック２１０と関係を持つことに関連したイベントの指示を、ツールが受け取っているかどうかを決定する。このイベントは、客１０５が物理ラック２１０に近づくこと及び／又は物理ラック２１０から物理アイテム３１５を選択することを含んでよい。イベントの指示は、客１０５が物理ラック２１０と関係を持ったことを示す如何なる適切な情報も含んでよい。例えば、特定の実施形態では、イベントの指示は、実店舗１００に置かれており、客１０５のショッピングセッションを捕捉するレイアウトカメラ４９０から受け取られたカメラフィード６０５から生成されるカメラフィードセグメント４１５の組において、客１０５が物理ラック２１０に近づくこと及び／又は物理ラック２１０から物理アイテム３１５を選択することを見ることに応答して、ユーザ１２０が仮想レイアウト２０５において仮想ラック２３０を選択することを含んでよい。他の例として、特定の実施形態では、イベントの指示は、カメラフィードセグメント４１５に割り当てられているスライダバー７０５上のスライダ７１０がマーカ７１５に到達することを含んでよい。マーカ７１５は、イベントに関連した物理ラック２１０を示すメタデータ７４０を含んでよい。更なる例として、イベントの指示は、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、客１０５が物理ラック２１０に近づいたこと及び／又は物理ラック２１０から物理アイテム３１５を選択したことを決定するよう構成されるアルゴリズム４８８から、情報を受け取ることを含んでよい。

【0092】

人１０５が物理ラック２１０と関係を持つことに関連したイベントの指示をステップ１０１０で仮想店舗ツール４０５が受け取る場合に、ステップ１０１５で、仮想店舗ツール４０５は、ディスプレイ４１０の領域９０５において、物理ラック２１０に対応する（つまり、物理ラック２１０をエミュレートするよう構成される）仮想ラック２３０を表示する。更に、ステップ１０１５で、仮想店舗ツール４０５は、物理ラック２１０に割り当てられているラックカメラ４９５から受け取られたラックカメラフィード６２０から生成されたラックカメラフィードセグメント４２５を表示する。ラックカメラフィードセグメント４２５は、イベントが起こる時間インターバル中の物理ラック２１０を表す。

【0093】

ステップ１０２０で、仮想店舗ツール４０５は、第１仮想アイテム３２０を特定する情報をツールが受け取っているかどうかを決定する。例として、特定の実施形態では、物理ラック２１０の各物理シェルフ３０５は、図１３Ｂ～１３Ｄの説明において、以下で記載されるように、物理シェルフ３０５のゾーンに結合されている重量センサ１３００の組を含む。人１０５が物理シェルフ３０５からアイテム３１５を持ち去るとき、アイテム３１５が置かれていた物理シェルフ３０５のゾーンに結合されている重量センサ１３００は、アイテム３１５が物理ラック２１０ａの物理シェルフ３０５から選択されたことを示す情報を（直接に、又は外部システム４８５のような、システム４００の他のコンポーネントを通じて）仮想店舗ツール４０５へ送信し得る。他の例として、特定の実施形態では、イベントの指示は、スライダバー７０５上のスライダ７１０がマーカ７１５ａ又は７１５ｂに到達することを含んでよい。マーカ７１５ａ及び７１５ｂは、図７Ｃの説明において、上述されたように、メタデータ７４０を含んでよい。メタデータ７４０は、客１０５によって選択された物理アイテム３１５に割り当てられている識別番号７４５、客１０５が物理アイテム３１５を選択した物理シェルフ３０５に割り当てられている識別番号７５０、及び／又は客１０５が物理アイテム３１５を選択した物理シェルフ３０５を含む物理ラック２１０に割り当てられている識別番号７５５を示す情報を含んでよい。それに応じて、スライダバー７０５上のスライダ７１０がマーカ７１５に到達するとき、仮想店舗ツール４０５は、マーカ７１５に割り当てられている識別番号７４０を読み出して、人１０５が物理ラック２１０の物理シェルフ３０５から物理アイテム３１５を選択したことを特定することによって、物理アイテム３１５を特定する情報を受け取り得る。マーカ７１５は、如何なる適切な方法でもスライダバー７０５に加えられてよい。例えば、特定の実施形態では、仮想表示ツール４０５は、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、実店舗１００において客１０５を追跡するよう、かつ、夫々の客１０５によって選択された物理アイテム３１５を決定するよう、構成されるアルゴリズム４８８から受け取られた情報に基づいて、マーカ７１５をスライダバー７０５に加える。更なる例として、物理アイテム３１５／仮想アイテム３２０を特定する情報を受け取ることは、物理アイテム３１５をエミュレートするよう構成される仮想アイテム３２０を、ディスプレイ４１０の領域９０５に表示されている仮想ラック２３０から仮想ショッピングカート４２０へドラッグ・アンド・ドロップすることに関連した情報を受け取ることを含んでよい。

【0094】

第１仮想アイテム３２０／物理アイテム３１５を特定する情報をツールが受け取っているとステップ１０２５で仮想店舗ツール４０５が決定する場合に、ステップ１０３０で仮想店舗ツール４０５は、第１仮想アイテム３２０を仮想ショッピングカート４２０に格納する。ステップ１０３５で、仮想店舗ツール４０５は、客１０５のショッピングセッションが終了したかどうか（つまり、客１０５が実店舗１００から去ったかどうか）を決定する。仮想店舗ツール４０５は、如何なる適切な方法でも、客１０５が実店舗１００から去ったことを決定してよい。例として、特定の実施形態では、仮想店舗ツール４０５は、ユーザ１２０から受け取られた入力に基づいて、客１０５が実店舗１００から去ったことを決定してよい。例えば、グラフィカルユーザインターフェース７００の形でカメラフィードセグメント４１５及び／又は４２５がディスプレイ４１０上のグラフィカルユーザインターフェース７００で表示される実施形態では、グラフィカルユーザインターフェース７００は、更に、インタラクティブボタン７３０（例えば、退店ボタン）を含んでよく、それを通じて、ユーザ１２０は、１つ以上のカメラフィードセグメント４１５及び／又は４２５において、客１０５が実店舗１００から出たことを彼／彼女が観察したことを示し得る。他の例として、仮想店舗ツール４０５は、実店舗１００内で客１０５を追跡するよう構成されるアルゴリズム４８８から受け取られた情報に基づいて、客１０５が実店舗１００から去ったことを決定してよい。更なる例として、仮想店舗ツール４０５は、実店舗１００から受け取られた情報に基づいて、客１０５が実店舗１００から去ったことを決定してよい。例えば、実店舗１００は、実店舗１００の出口の近くに置かれた回転ドア５１０の組を含んでよい。回転ドア５１０を開き、実店舗１００から去るために、客１０５は、彼／彼女が実店舗１００に入るために使用した同じＱＲコードをスキャンするよう求められ得る。ＱＲコードのスキャンは、次いで、客１０５が実店舗１００を出たことを示す信号を仮想店舗ツール４０５へ送信し得る。特定の実施形態では、客１０５が実店舗１００から去ったことを決定することに応答して、仮想店舗ツール４０５は、客１０５が、セットされた期間内に、実店舗１００での彼／彼女のショッピングセッションの領収書を受け取ることを期待すべきである、ことを示す通知を客１０５のデバイスへ送る。

【0095】

実店舗１００での客１０５のショッピングセッションが終了していないとステップ１０３５で仮想店舗ツール４０５が決定する場合に、仮想店舗ツール４０５はステップ１０１０へ戻り、客１０５が物理ラック２１０から何らかの追加のアイテム３１５を選択しているかどうかを決定する。具体的に、仮想店舗ツール４０５は、客１０５が他の物理ラック２１０と関係を持つことに関連したイベントの指示をツールが受け取っているかどうかを決定する。物理ラック２１０は、客１０５が関係を持っていると仮想店舗ツール４０５が以前に決定した物理ラックと同じものであっても、又は異なる物理ラックであってもよい。このようにして、仮想店舗ツール４０５は、任意の数の仮想アイテム３２０で仮想ショッピングカート４２０をポピュレートし得る。

【0096】

他方で、実店舗１００での客１０５のショッピングセッションが終了したとステップ１０３５で仮想店舗ツール４０５が決定する場合に、仮想店舗ツール４０５は、仮想ショッピングカート４２０に格納されている仮想アイテム３２０に基づいて、ショッピングセッション中に客１０５によって選択されたアイテム３１５の料金を客１０５に請求し、領収書を生成する。仮想店舗ツール４０５が領収書を生成する様態は、図１４の説明において、以下で更に詳細に記載される。客１０５に料金を請求するために、本開示は、仮想店舗ツール４０５が、客１０５に割り当てられている識別番号４５５に従って、客１０５の支払い情報をメモリ４４０に記憶してもよいことを企図している。次に、ステップ１０４５で、仮想店舗ツール４０５は、領収書を客１０５へ送る。

【0097】

図１０に表されている方法１０００に対しては、変更、追加、又は削除が行われてもよい。方法１０００は、より多い、より少ない、又は他のステップを含んでもよい。例えば、ステップは、並行して又は任意の適切な方法で実行されてよい。仮想店舗ツール４０５（又はそのコンポーネント）がステップを実行するものとして説明されているが、例えば、デバイス１１５のような、システム４００のいずれかの適切なコンポーネントが、方法の１つ以上のステップを実行してもよい。

【0098】

［Ｖ．仮想レイアウトの生成］
特定の実施形態では、仮想店舗ツール４０５のレイアウト生成部４６０は、第２グラフィカルユーザインターフェース１１００を表示するよう構成され、これを通じて、ユーザ１２０は、実店舗１００の物理レイアウト２００をエミュレートするよう構成される仮想レイアウト２０５を生成し得る。図１１Ａ及び１１Ｂは、そのようなグラフィカルユーザインターフェース１１００の例示的な実施形態を表す。

【0099】

［ａ．物理ラックの物理レイアウトをエミュレートするための仮想レイアウトでの仮想ラックの配置］
仮想店舗ツール４０５のレイアウト生成部４６０は、実店舗１００に置かれている物理ラック２１０に関連した位置及び向きの組を受け取ることに応答して、実店舗１００の物理レイアウト２００をエミュレートするよう構成される仮想レイアウト２０５を生成し得る。レイアウト生成部４６０は、如何なる適切な方法でも位置及び向きの組を受け取ってよい。例えば、仮想店舗ツール４０５は、ユーザがグラフィカルユーザインターフェース１１００で仮想ラック２３０を作成し、それから、仮想ラック２３０を仮想レイアウト２０５上の所与の位置にドラッグ・アンド・ドロップすること及び／又は仮想ラック２３０を仮想レイアウト２０５上の所与の向きに回転させることによって、グラフィカルユーザインターフェース１１００を通じて、ユーザ１２０から位置及び向きを受け取り得る。他の例として、レイアウト生成部４６０は、仮想店舗ツール４０５にアップロードされたファイルから位置及び向きを受け取ってもよい。例えば、ユーザ１２０は、グラフィカルユーザインターフェース１１００上の「ファイルをここにドロップしてください」（“drop your file here”）ボタン１１５０を用いて、位置及び向きを含むファイルをアップロードし得る。ファイルは、位置及び角度の対を含むリストを含み得る。特定の実施形態では、各位置は、実店舗１００での物理ラック２１０の質量位置を指定し得る。いくつかの実施形態で、各位置は、実店舗１００での物理ラック２１０の所与の角の位置を指定し得る。位置は、物理レイアウト２００に重ね合わされている任意の座標系に関して指定されてもよい。例えば、各位置は、原点が実店舗１００の真ん中に位置している直交座標系の（ｘ，ｙ）座標として指定されてよい。特定の実施形態では、各向きは、所与の方向に対する物理ラック２１０の角度を指定し得る。例えば、各向きは、上記の例の直交座標系のｘ軸に対する物理ラック２１０の角度を指定し得る。特定の実施形態では、各物理ラック２１０について、ファイルは、物理ラック２１０の長さ及び幅を更に含んでもよい。

【0100】

位置及び向きを受け取ることに応答して、レイアウト生成部４６０は、各仮想ラック２３０を仮想レイアウト２０５上で仮想的な位置において仮想的な向きで置く。ここで、仮想レイアウト２０５上の所与の仮想ラック２３０の仮想的な位置及び仮想的な向きは、物理レイアウト２００における対応する物理ラック２１０の物理的な位置及び物理的な向きを表す。図１１Ａは１１個の仮想ラック２３０を含む例を表すが、本開示は、仮想レイアウト２０５が仮想ラック２３０をいくつでも含んでよいと考えている。特定の実施形態では、仮想店舗ツール４０５は、識別番号１１０５に従って、結果として得られた仮想レイアウト２０５をメモリ４４０に記憶する。更に、レイアウト生成部４６０は、仮想レイアウト２０５の各仮想ラック２３０を、ラック識別番号７５５に従って、メモリ４４０に記憶してもよい。

【0101】

仮想レイアウトツール４０５はまた、仮想レイアウト２０５上の仮想ラック２３０のいずれかについて新しい位置及び／又は向きを受け取ることに応答して、所与の仮想レイアウト２０５を変更してもよい。仮想レイアウト２０５の変更は、仮想レイアウト２０５によってエミュレートされている物理レイアウト２００が変化した状況で好ましい場合がある。レイアウト生成部４６０は、如何なる適切な方法でも、仮想ラック２３０の新しい位置及び／又は新しい向きを受け取ってよい。例えば、レイアウト生成部４６０は、ファイルから新しい位置及び／又は向きを読み出してよい。ファイルは、仮想ラック２３０ａに割り当てられている識別番号７５５ａを用いて、仮想ラック２３０ａの新しい位置及び／又は向きを指定し得る。例えば、各仮想ラック２３０について、ファイルは、その仮想ラック２０３に割り当てられている識別番号７５５と、ラックの新しい位置の直交座標（ｘ，ｙ）と、ラックの新しい向きを指定する、ｘ軸に対して測定された角度とを含み得る。他の例として、レイアウト生成部４６０は、グラフィカルユーザインターフェース１１００から受け取られた入力に基づいて、仮想ラック２３０の新しい位置及び／又は向きを受け取ってもよい。例えば、図１１Ａに表されているように、レイアウト生成部４６０は、仮想レイアウト２０５上の第１位置から仮想レイアウト２０５上の新しい位置１１３０への仮想ラック２３０ｋのドラッグを表す入力を受け取り得る。そのような入力を受け取ることに応答して、レイアウト生成部４６０は、図１１Ｂに表されているように、新しい仮想位置１１３０に仮想ラック２３０ｋを置き得る。他の例として、仮想店舗ツール４０５は、第１向きから新しい向きへの仮想ラック２３０の回転を表す入力を受け取ってもよい。そのような入力を受け取ることに応答して、レイアウト生成部４６０は、この新しい向きにより仮想レイアウト２０５上で仮想ラック２３０を置き得る。

【0102】

［ｂ．物理ラックに置かれている物理アイテムをエミュレートする仮想ラックでの仮想ラックアイテムの配置］
仮想レイアウト２０５に仮想ラック２３０を置くことに加えて、レイアウト生成部４６０は、仮想アイテム３２０で仮想ラック２３０をポピュレートするよう動作する。例えば、レイアウト生成部４６０は、実店舗１００で各ラック２１０に置かれる物理アイテム３１５を指定するプラノグラム（planogram）を受け取ってよい。例えば、各物理ラック２１０について、プラノグラムは、物理ラック２１０に置かれる物理アイテム３１５のリストを含み得る。各物理アイテム３１５について、リストは、その物理アイテム３１５が置かれるべきである物理ラック２１０のシェルフ３０５と、その物理アイテム３１５が置かれるべきである各シェルフ３０５のゾーン３２５とを指定し得る。プラノグラムを受け取ることに応答して、レイアウト生成部４６０は、対応する仮想アイテム３２０を仮想ラック２３０に置き得る。他の例として、レイアウト生成部４６０は、仮想ラック２３０ごとの仮想アイテム３２０のリストを受け取ってもよく、リスト内の各仮想アイテム３２０は物理アイテム３１５と関連付けられている。そのようなリストは、物理アイテム３１５をエミュレートする仮想アイテム３２０ごとに、店舗識別番号１１０５、ラック識別番号７５５、シェルフ識別番号７５０、及び／又はゾーン識別番号７４５を指定し得る。ここで、店舗識別番号１１０５は、物理アイテム３１５を保管する実店舗１００を識別し、ラック識別番号７５５は、物理アイテム３１５を保持している実店舗１００内の物理ラック２１０を識別し、シェルフ識別番号７５０は、物理アイテム３１５が置かれている物理ラック２１０の物理シェルフ３０５を識別し、ゾーン識別番号７４５は、物理アイテム３１５を収容している物理シェルフ３０５のゾーンを識別する。特定の実施形態では、ゾーン識別番号７４５は、物理アイテム３１５を収容している物理シェルフ３０５のゾーンに結合されているセンサ４９８のセンサ識別番号に対応し得る。レイアウト生成部４６０は、それから、店舗識別番号１１０５、ラック識別番号７５５、シェルフ識別番号７５０、及びゾーン識別番号７４５に従って、仮想アイテム３２０をメモリ４４０に記憶し得る。このとき、レイアウト生成部４６０は、店舗識別番号１１０５を仮想レイアウト２０５に、ラック識別番号７５５を仮想ラック２３０に、シェルフ識別番号７５０を仮想シェルフ３１０に、及びゾーン識別番号７４５を、物理アイテム３１５を収容している物理シェルフ３０５の物理ゾーンをエミュレートするよう構成される仮想シェルフ３１０の仮想ゾーンに割り当てている。ゾーンへの物理シェルフ３０５及び仮想シェルフ３１０の分割は、図１３Ｃ及び１３Ｄの説明において、以下で更に詳細に記載される。

【0103】

他の例として、レイアウト生成部４６０は、アイテムのスクロール可能なリストを含むドロップ・ダウン・メニューから、所与の仮想ラック２３０に保管する仮想アイテム３２０を受け取ってよい。そのようなドロップ・ダウン・メニュー１１３５の例は、図１１Ｂに表されている。図１１Ａ及び１１Ｂに表されているように、ユーザ１２０は、所与の仮想シェルフ３１０のドロップ・ダウン・メニュー１１３５から物理アイテム名１１３０ａ、ｂを選択し得る。これに応えて、レイアウト生成部４６０は、物理アイテム名１１３０ａ、ｂを有している物理アイテム３１５に関連した仮想アイテム３２０を仮想シェルフ３１０に格納する。

【0104】

第２グラフィカルユーザインターフェース１１００はまた、ラックカメラ４９５を仮想レイアウト２０５内の仮想ラック２３０の夫々に割り当てるために使用されてもよい。図１１Ａ及び１１Ｂに表されているように、レイアウト生成部４６０は、第２グラフィカルユーザインターフェース１１００を通じて、ラックカメラフィードセグメント４２５ａないし４２５ｆの組をユーザ１２０に提示し得る。各ラックカメラフィードセグメント４２５は、実店舗１００に置かれているラックカメラ４９５から受け取られたラックカメラフィード６２０から生成される。特定の実施形態では、ユーザ１２０は、仮想ラック２３０に割り当てるラックカメラ４９５を選択し得る。ユーザ１２０は、ラックカメラフィードセグメント４２５ａないし４２５ｆのうちのどれが、ユーザ１２０によって決定される物理ラック２１０（仮想ラック２３０によってエミュレートされる）の最良のビューを、ユーザ１２０に提供するかに基づいて、所与のラックカメラ４９５を選択してよい。ユーザ１２０は、如何なる適切な方法でもラックカメラ４９５を選択してよい。例として、特定の実施形態では、ユーザ１２０は、ラックカメラ４９５によって生成されて第２グラフィカルユーザインターフェース１１００に表示されたラックカメラフィードセグメント４２５をクリックすることによって、所与のラックカメラ４９５を仮想ラック２３０に割り当ててよい。例えば、ユーザ１２０は、ラックカメラフィードセグメント４２５ａを生成したラックカメラ４９５ａを仮想ラック２３０ａに割り当てるために、ラックカメラフィードセグメント４２５ａをクリックしてよい。ユーザ１２０がラックカメラフィードセグメント４２５ａをクリックすることに応答して、レイアウト生成部４６０は、ラックカメラ４９５ａに割り当てられているラックカメラ識別番号１１２５ａを仮想ラック２３０ａと関連付け得る。

【0105】

第２グラフィカルユーザインターフェース１１００は、レイアウト生成部４６０が店舗識別番号１１０５に従ってメモリ４４０に記憶し得る任意の数の仮想レイアウト２０５を生成するために使用されてよい。仮想店舗ツール４０５は、関連する店舗識別番号１１０５を用いて所与の仮想レイアウト２０５を後に読み出し、仮想レイアウト２０５をディスプレイ４１０に表示し得る。

【0106】

レイアウト生成部４６０は、メモリ４４０に記憶されており、プロセッサ４３５によって実行されるソフトウェアモジュールであってよい。レイアウト生成部４６０の動作の例は次の通りである：（１）実店舗１００に置かれている物理ラック２１０に関連した位置及び向きの組を受け取る；（２）夫々の受け取られた位置及び向きについて、物理レイアウト２００内の対応する物理ラック２１０の物理的な位置及び物理的な向きを表す仮想的な位置及び仮想的な向きにより仮想レイアウト２０５に仮想ラック２３０を置く；（３）仮想ラック２３０の新しい位置に関連した入力が受け取られる場合に、仮想ラック２３０を仮想レイアウト２０５上で新しい位置に置く；（４）仮想ラック２３０の新しい向きに関連した入力が受け取られる場合に、仮想ラック２３０を新しい向きにより仮想レイアウト２０５上に置く；（５）各仮想ラック２３０について、仮想アイテム３２０の組を受け取り、仮想アイテム３２０の組を仮想ラック２３０に置く；（６）各仮想ラック２３０について、ラックカメラ４９５をその仮想ラックに割り当てる。

【0107】

［ｃ．仮想レイアウトの生成方法］
図１２は、仮想店舗ツール４０５が、実店舗１００の物理レイアウト２００をエミュレートするよう構成される仮想レイアウト２０５を生成し得る様態を説明するフローチャートを表す。ステップ１２０５で、仮想店舗ツール４０５は、仮想レイアウト２０５上で仮想的な位置に仮想的な向きで仮想ラック２３０の組を置く。仮想ラック２３０の仮想的な位置及び仮想的な向きは、実店舗１００内の物理ラック２１０の物理的な位置及び物理的な向きをエミュレートするよう選択される。仮想店舗ツール４０５は、如何なる適切な方法でも仮想的な位置及び仮想的な向きを受け取ってよい。例えば、仮想店舗ツール４０５は、グラフィカルユーザインターフェース１１００を通じてユーザ１２０から位置及び向きを受け取ってよい。他の例として、仮想店舗ツール４０５は、仮想店舗ツール４０５にアップロードされたファイルから位置及び向きを受け取ってもよい。

【0108】

ステップ１２１０で、仮想店舗ツール４０５は、新しい仮想的な位置への仮想ラック２３０のドラッグを表す入力が受け取られたかどうかを決定する。新しい仮想的な位置への仮想ラック２３０のドラッグを表す入力が受け取られたとステップ１２１０で仮想店舗ツール４０５が決定する場合には、ステップ１２１５で、仮想店舗ツール４０５は、仮想ラック２３０を新しい仮想的な位置に置き、ステップ１２２０へ進む。他方で、新しい仮想的な位置への仮想ラック２３０のドラッグを表す入力が受け取られたとステップ１２１０で仮想店舗ツール４０５が決定しない場合には、仮想店舗ツール４０５は、単に、ステップ１２２０へ進む。

【0109】

ステップ１２２０で、仮想店舗ツール４０５は、初期の向きから新しい向きへの仮想ラック２３０の回転を表す入力が受け取られたかどうかを決定する。初期の向きから新しい向きへの仮想ラック２３０の回転を表す入力が受け取られたとステップ１２２０で仮想店舗ツール４０５が決定する場合には、ステップ１２２５で、仮想店舗ツール４０５は、仮想ラック２３０の向きを初期の向きから新しい向きへ調整し、ステップ１２３０へ進む。他方で、初期の向きから新しい向きへの仮想ラック２３０の回転を表す入力が受け取られなかったとステップ１２２０で仮想店舗ツール４０５が決定する場合には、仮想店舗ツール４０５はステップ１２３０へ進む。

【0110】

ステップ１２３０で、仮想店舗ツール４０５は、各仮想ラック２３０について、その仮想ラック２０３に割り当てられている仮想アイテム３２０の組を受け取る。仮想店舗ツール４０５は、如何なる適切な方法でも仮想アイテム３２０の組を受け取ってよい。例えば、仮想店舗ツール４０５は、実店舗１００内の各物理ラック２１０に置かれる物理アイテム３１５を指定するプラノグラムを受け取ってよい。例えば、各物理ラック２１０について、プラノグラムは、物理ラック２１０に置かれる物理アイテム３１５のリストを含んでよい。各物理アイテム３１５について、リストは、その物理アイテム３１５が置かれるべきである物理ラック２１０のシェルフ３０５と、その物理アイテム３１５が置かれるべきである各シェルフ３０５のゾーン３２５とを指定し得る。他の例として、仮想店舗ツール４０５は、ディスプレイ４１０に表示されているドロップ・ダウン・メニュー１１３５から仮想アイテム３２０を受け取ってもよい。ドロップ・ダウン・メニュー１１３５は、ユーザ１２０が各仮想ラック２３０に置かれる１つ以上のアイテムを選択し得る物理アイテム３１５のリストを含んでよい。ドロップ・ダウン・メニュー１１３５は、任意の数の物理アイテム３１４のスクロール可能なリストを含んでよい。ドロップ・ダウン・メニュー１１３５からの物理アイテム３１５の選択を受け取ることに応答して、仮想店舗ツール４０５は、対応する仮想アイテム３２０を識別し得る。仮想店舗ツール４０５が仮想アイテム３２０の組を受け取った後、ステップ１２３５で、仮想店舗ツール４０５は、対応する仮想ラック２３０に仮想アイテム３２０の各組を置く。

【0111】

ステップ１２４０で、仮想店舗ツール４０５は、ラックカメラ４９５を各仮想ラック２３０に割り当てる。仮想店舗ツール４０５は、如何なる適切な方法でもラックカメラ４９５を各仮想ラック２３０に割り当ててよい。例えば、特定の実施形態では、ユーザ１２０が、仮想ラック２３０に割り当てるラックカメラ４９５を選択してもよい。ユーザ１２０は、ラックカメラフィードセグメント４２５ａないし４２５ｆのうちのどれが、ユーザ１２０によって決定される対応する物理ラック２１０の最良のビューを、ユーザ１２０に提供するかに基づいて、仮想ラック２３０のための所与のラックカメラ４９５を選択し得る。ステップ１２４５で、仮想店舗ツール４０５は、仮想レイアウト２０５をメモリ４４０に記憶する。特定の実施形態では、仮想店舗ツール４０５は、店舗識別番号１１０５に従って仮想レイアウト２０５をメモリ４４０に記憶し得る。

【0112】

図１２に表されている方法１２００に対しては、変更、追加、又は削除が行われてもよい。方法１２００は、より多い、より少ない、又は他のステップを含んでもよい。例えば、ステップは、並行して又は任意の適切な方法で実行されてよい。仮想店舗ツール４０５（又はそのコンポーネント）がステップを実行するものとして説明されているが、例えば、デバイス１１５のような、システム４００のいずれかの適切なコンポーネントが、方法の１つ以上のステップを実行してもよい。

【0113】

［ＶＩ．実店舗において客を追跡するよう構成される外部アルゴリズムと組み合わせた使用］
仮想店舗ツール４０５は、外部システム４８５によって生成されるアルゴリズム４８８と組み合わされて使用されてよい。アルゴリズム４８８は、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、客１０５を追跡し、実店舗１００での客１０５ａのショッピングセッション中に所与の客１０５ａによって選択されたアイテム３１５を決定するよう構成される。例えば、仮想店舗ツール４０５は、アルゴリズム４８８によってなされた決定を妥当性確認するために、及び／又はアルゴリズム４８８の精度を改善するのを助けるために、使用されてよい。図１３～１６は、仮想店舗ツール４０５のこの態様について記載するために使用される。

【0114】

［ａ．アルゴリズム入力センサ］
上述されたように、外部アルゴリズム４８８は、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、客１０５を追跡し、実店舗１００でのショッピングセッション中に所与の客１０５によって選択されたアイテムを決定するよう構成される。本開示は、実店舗１００が如何なるタイプの適切なセンサ４９８も含んでもよいと考えている。例えば、実店舗１００は、カメラ、光検出及び測距センサ、ミリメートル波センサ、重量センサ、及び／又は実店舗１００において客１０５を追跡しかつ実店舗１００から１つ以上のアイテムを選択する客１０５に関連した情報を検出するよう動作可能な任意の他の適切なセンサを含んでよい。

【0115】

図１３Ａ～１３Ｄは、実店舗１００がセンサ４９８のためにカメラ１３０５及び重量センサ１３００の両方を含む実施形態の例を示す。本開示は、外部システム４８５が、どの客１０５が実店舗１００にある物理陳列ラック２１０からどのアイテムを持ち去ったかを決定するために、アルゴリズム４８８を用いて、カメラ１３０５から受け取られた位置情報と、重量センサ１３００から受け取られた重さ情報とを処理し得ることを企図している。このようにして、外部システム４８５は、実店舗１００でのショッピングセッション中に、客１０５によって選択されたとアルゴリズム４８８によって決定されたアイテムのアルゴリズム的ショッピングカートを生成し得る。

【0116】

図１３Ａから分かるように、実店舗１００の内部は、実店舗１００の天井に位置付けられているカメラ１３０５のアレイを含み得る。特定の実施形態では、このカメラ１３０５のアレイは、レイアウトカメラ４９０及び／又はラックカメラ４９５を含んでよい。他の実施形態では、カメラ１３０５のアレイは、レイアウトカメラ及びラックカメラ４９５とは別である。一般に、カメラ１３０５のアレイは、実店舗１００の内部の部分の映像を生成する。これらの映像は、空間内の客１０５のフレーム又は画像を含み得る。外部システム４８５は、フレーム内の客１０５を検出するために、カメラ１３０５のアレイからのこれらのフレームを処理する。

【0117】

図１３Ａに表されているように、カメラ１３０５のアレイは、実店舗１００の天井にわたって格子パターンで配置されているカメラ１３０５を含み得る。本開示は、５０台のカメラ１３０５を含むカメラ１３０５のアレイを示すが、カメラ１３０５のアレイは、任意の適切な数のカメラ１３０５を含んでよい。一般に、カメラ１３０５のアレイ内のカメラ１３０５は、長方形アレイを形成するよう配置される。図１３Ａの例では、カメラ１３０５のアレイは、５×１０のカメラ１３０５のアレイ（５行１０列のカメラ１３０５）である。カメラ１３０５のアレイは、如何なる適切な寸歩のアレイでも配置されてよい。

【0118】

各カメラ１３０５は、外部システム４８５へ通信可能に結合され、捕捉された映像を外部システム４８５へ送る。カメラ１３０５は、如何なる適切な方法でも外部システム４８５へ通信可能に結合される。例えば、カメラ１３０５は、外部システム４８５のコンポーネントへハードワイヤードされてよい。他の例として、カメラ１３０５は、如何なる適切な無線プロトコル（例えば、ＷｉＦｉ）を用いても外部システム４８５へ無線により結合してよい。

【0119】

カメラ１３０５は、実店舗１００の内部空間の映像を捕捉するための如何なる適切なデバイスであってもよい。例えば、カメラ１３０５は、空間の２次元映像（例えば、ｘ－ｙ平面）を捕捉し、また、映像内の人々及び／又は対照物の高さを検出することができる３次元カメラであってよい。他の例として、カメラ１３０５は、空間の２次元映像を捕捉する２次元カメラであってもよい。カメラ１３０５のアレイは、異なるタイプのカメラ１３０５の混合を含んでもよい。

【0120】

図１３Ｂは、実店舗１００の物理ラック２１０のシェルフ３０５に置かれているアイテム３１５の重さを検出するようシェルフ３０５へ結合され得る例示的な重量センサ１３００を表す。重量センサ１３００は、次いで、この情報を外部システム４８５へ送ってよい。外部システム４８５は、アイテム３１５が物理ラック２１０から持ち去られるかどうか及びそのような場合を決定するために、重量センサ１３００によって検出された重さを追跡する。

【0121】

図１３Ｂから分かるように、重量センサ１３００は、プレート１３１５ａ及び１３１５ｂと、ロードセル１３１０ａ、１３１０ｂ、１３１０ｃ、及び１３１０ｄと、ワイヤ１３２０ａ、１３２０ｂ、１３２０ｃ、１３２０ｄ、及び１３２５とを含む。一般に、重量センサ１３００のコンポーネントは、重量センサ１３００が重量センサ１３００の上又はその近くに置かれているアイテム３１５の重さを検出することができるように組み立てられる。

【0122】

プレート１３１５は、表面にわたってアイテム３１５の重さを分散させる表面を形成する。プレート１３１５は、例えば、金属及び／又はプラスチックなどの如何なる適切な材料から作られてもよい。アイテム３１５は、プレート１３１５の上又はその近くに位置付けられてよく、これらのアイテム３１５の重さは、プレート１３１５にわたって分散され得る。

【0123】

ロードセル１３１０は、プレート１３１５ａ及び１３１５ｂの間に位置する。ロードセル１３１０は、ロードセル１３１０が受けた重さに基づいて電気信号を生成する。例えば、ロードセル１３１０は、入力された機械的な力（例えば、重さ、張力、圧縮、圧力、又はトルク）を、出力される電気信号（例えば、電流又は電圧）に変換するトランスデューサであってよい。入力される力が増大するにつれて、出力される電気信号は比例して増大する。ロードセル１３１０は、如何なる適切なタイプのロードセルであってもよい（例えば、油圧（hydraulic）、空気圧（pneumatic）、及びひずみゲージ）。ロードセル１３１０は形状が円筒形であるものとして表されているが、それらは、考えられている特定の実施にとって適切である任意の適切なサイズ及び形状であってよい。

【0124】

ロードセル１３１０からの信号は、重量センサ１３００の上又はその近くに位置付けられたアイテム３１５の全重量を決定するよう解析され得る。ロードセル１３１０は、重量センサ１３００の上又はその近くに位置付けられたアイテム３１５の重さが欠くロードセル１３１０に等しく分散するように位置付けられ得る。図１３Ｂの例では、ロードセル１３１０は、プレート１３１５ａ及び１３１５ｂの角から実質的に等距離で位置付けられている。例えば、ロードセル１３１０ａは、プレート１３１５ａ及び１３１５ｂの角から距離ｄ１に位置付けられている。ロードセル１３１０ｂは、プレート１３１５ａ及び１３１５ｂの角から距離ｄ２に位置付けられている。ロードセル１３１０ｃは、プレート１３１５ａ及び１３１５ｂの角から距離ｄ３に位置付けられている。ロードセル１３１０ｄは、プレート１３１５ａ及び１３１５ｂの角から距離ｄ４に位置付けられている。距離ｄ１、ｄ２、ｄ３及びｄ４は、互いに実質的に等しくてよい。本開示は、５ないし１０ミリメートルだけ異なるが、依然として互いに実質的に等しいと見なされる距離を考えている。プレート１３１５ａ及び１３１５ｂの角から実質的に等しい距離にロードセル１３１０を位置付けることによって、重量センサ１３００の上又はその近くに位置付けられたアイテムの重さは、ロードセル１３１０にわたって等しく分散する。結果として、重量センサ１３００の上又は近くに位置付けられたアイテムの全重量は、個々のロードセル１３１０にかかる重さを合計することによって、決定され得る。

【0125】

ロードセル１３１０は、ロードセル１３１０にかかる重さを示す電気信号を送る。例えば、ロードセル１３１０は、ロードセル１３１０にかかっている重さ又は力に応じて変化する電流を生成し得る。各ロードセル１３１０は、電気信号を運ぶワイヤ１３２０へ結合されている。図１３Ｂの例では、ロードセル１３１０ａはワイヤ１３２０ａへ結合されており、ロードセル１３１０ｂはワイヤ１３２０ｂへ結合されており、ロードセル１３１０ｃはワイヤ１３２０ｃへ結合されており、ロードセル１３１０ｄはワイヤ１３２０ｄへ結合されている。ワイヤ１３２０は、重量センサ１３００から離れて延在するワイヤ１３２５を形成するようまとめられる。ワイヤ１３２５は、信号を外部システム４８５へ送る回路基板へ、ロードセル１３１０によって生成された電気信号を運ぶ。

【0126】

特定の実施形態では、図１３Ｃに表されているように、複数の重量センサ１３００が、物理ラック２１０の所与の物理シェルフ３０５へ結合され得る。例えば、図１３Ｃに表されている例では、物理シェルフ３０５は４つの重量センサ１３００を含む。物理シェルフ３０５での重量センサ１３００の位置は、物理シェルフ３０５のゾーンの組を画定し得る。例えば、第１重量センサ１３００ａは第１ゾーン３２５ａを画定してよく、第２重量センサ１３００ｂは第２ゾーン３２５ｂを画定してよく、第３重量センサ１３００ｃは第３ゾーン３２５ｃを画定してよく、第４重量センサ１３００ｄは第４ゾーン３２５ｃを画定してよい。特定の実施形態では、各ゾーン３２５は、異なる物理アイテム３１５と関連付けられてよく、それにより、各重量センサ１３００は、物理シェルフ３０５から特定のアイテム３１５を持ち去ることに関連した重さ変化を検出するよう構成される。物理シェルフ３０５のゾーン３２５ａないし３２５ｄをエミュレートするように、仮想シェルフ３１０は、同様に、ゾーン３３０ａないし３３０ｄに分けられてよく、各仮想ゾーン３３０は、所与の仮想アイテム３２０と関連付けられる。このようにして、物理シェルフ３０５の第１物理ゾーン３２５ａに保管されている物理アイテム３１５ａの持ち去りを示す信号が重量センサ１３００ａから受け取られる場合に、信号は、第１物理ゾーン３２５ａと第１仮想ゾーン３３０ａとの間の対応に基づいて、第１仮想ゾーン３３０ａに保管されている仮想アイテム３２０ａを識別するために使用されてよい。

【0127】

［ｂ．仮想ショッピングカートとアルゴリズム的ショッピングカートとの間の比較］
特定の実施形態では、仮想店舗ツール４０５は、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、実店舗１００内の客１０５を追跡し、実店舗１００でのショッピングセッション中に客１０５によって選択された物理アイテム３１５を決定するよう訓練されたアルゴリズムとともに、使用されてよい。上述されたように、図１３Ａ～１３Ｄの説明において、センサ４９８は、カメラ１３０５及び重量センサ１３００を含み得る。

【0128】

アルゴリズム４８８は、如何なる適切な方法でも、実店舗１００において客１０５によって選択されたアイテム３１５を決定するようプログラムされてよい。例えば、アルゴリズム４８８は、カメラ１３０５のアレイから外部システム４８５によって受け取られた映像フレームを処理して、フレーム内で検出された客１０５の座標を決定し得る。アルゴリズム４８８は、次いで、いつフレームが受け取られたかに基づいて、これらの座標にタイムスタンプを付してよい。座標及びタイムスタンプに基づいて、アルゴリズム４８８は、実店舗１００での客１０５の位置を決定し得る。アルゴリズム４８８はまた、いつアイテム３１５が物理シェルフ３０５から持ち去られたかを決定するために、重量センサ１３００から外部システム４８５によって受け取られた信号を処理してもよい。実店舗１００での客１０５の位置と、いつアイテム３１５が物理シェルフ３０５から持ち去られたかの決定とを用いて、アルゴリズム４８８は、どの客１０５がどのアイテム３１５を取ったかを決定し得る。

【0129】

アルゴリズム４８８と組み合わせた仮想店舗ツール４０５の使用の例として、仮想店舗ツール４０５は、実店舗１００でのショッピングセッション中に客１０５によって選択されたとアルゴリズム４８８によって決定された物理アイテム３１５と、ショッピングセッション中に客１０５によって選択されたと仮想店舗ツール４０５によって決定された仮想アイテム３２０との間の不一致を解消するために使用されてよい。客１０５によって選択されたとアルゴリズム４８８によって決定された物理アイテム３１５と、客１０５によって選択されたと仮想店舗ツール４０５によって決定された仮想アイテム３２０との間に、不一致が存在する場合に、仮想店舗ツール４０５によってなされた決定はまた、アルゴリズム４８８の将来の精度を改善するために使用されてもよい。図１４～１６は、仮想店舗ツール４０５のこれらの態様について記載するために使用される。

【0130】

図１４は、仮想店舗ツール４０５の解消コンポーネント４７５を表す。解消コンポーネント４７５は、仮想ショッピングカート４２０をアルゴリズム的ショッピングカート１４２０と比較するよう構成される。本開示は、仮想店舗ツール４０５が外部システム４８５からアルゴリズム的ショッピングカート１４２０を受け取ってよいと考えている。アルゴリズム的ショッピングカート１４２０は、実店舗１００に設置されているセンサ４９８（カメラ１３０５及び重量センサ１３００を含む）から受け取られた入力に基づいて、客１０５によって選択されたとアルゴリズム４８８によって決定された物理アイテム３１５を含み得る。例えば、アルゴリズム的ショッピングカートは、第１物理アイテム３１５ｌ、第２物理アイテム３１５ｍ、及び第３物理アイテム３１５ｎを含んでよい。物理アイテム３１５ｌないし３１５ｎの夫々は、所与の購入価格と関連付けられる。例えば、第１物理アイテム３１５ｌは第１物理価格１４４０と関連付けられ、第２物理アイテム３１５ｍは第２物理価格１４５０と関連付けられ、第３物理アイテム３１５ｎは第３物理価格１４６０と関連付けられる。図１４では、３つの物理アイテム３１５を含むものとして表されているが、本開示は、アルゴリズム的ショッピングカート１４２０が物理アイテム３１５をいくつでも含んでよいと考えている。仮想ショッピングカート４２０は、実店舗１００でのショッピングセッション中に客１０５によって選択されたと仮想店舗ツール４０５によって夫々決定された第１仮想アイテム３２０ｉ、第２仮想アイテム３２０ｊ、及び第３仮想アイテム３２０ｋを含む。仮想アイテム３２０ｉないし３２０ｋの夫々は、所与の購入価格と関連付けられる。図１４では、３つの仮想アイテム３２０を含むものとして表されているが、本開示は、仮想ショッピングカート４２０が仮想アイテム３２０をいくつでも含んでよいと考えている。更に、仮想ショッピングカート４２０は、アルゴリズム的ショッピングカート１４２０と同数のアイテムを含む必要はない。

【0131】

解消コンポーネント４７５は、仮想ショッピングカート４２０とアルゴリズム的ショッピングカート１４２０との間に何らかの不一致１４３５が存在するかどうかを決定するために、仮想ショッピングカート４２０の中身とアルゴリズム的ショッピングカート１４２０の中身との間の比較１４３０を実行するよう構成される。解消コンポーネント４７５は、（１）２つのカートが互いに一致すること、又は（２）２つのカートが互いに一致しないこと、のどちらかを決定し得る。特定の実施形態では、２つのカートが互いに一致しないことを決定することに応答して、解消コンポーネント４７５は、（１）仮想ショッピングカート４２０がエラーを含むために、２つのカートが互いに一致しないこと、又は（２）アルゴリズム的ショッピングカート１４２０がエラーを含むために、２つのカートが互いに一致しないこと、を決定し得る。

【0132】

２つのカートが互いに一致することを決定することは、仮想ショッピングカート４２０に存在する第１仮想アイテム３２０ｉが、アルゴリズム的ショッピングカート１４２０に存在する第１物理アイテム３１５ｌをエミュレートするよう構成され、仮想ショッピングカート４２０に存在する第２仮想アイテム３２０ｊが、アルゴリズム的ショッピングカート１４２０に存在する第２物理アイテム３１５ｍをエミュレートするよう構成され、仮想ショッピングカート４２０に存在する第３仮想アイテム３２０ｋが、アルゴリズム的ショッピングカート１４２０に存在する第３物理アイテム３１５ｎをエミュレートするよう構成されることを決定することを含み得る。他方で、２つのカートが互いに一致しないことを決定することは、（１）仮想ショッピングカート４２０が、アルゴリズム的ショッピングカート１４２０が物理アイテム３１５よりも多い仮想アイテム３２０を含むことを決定すること、（２）仮想ショッピングカート４２０が、アルゴリズム的ショッピングカート１４２０が物理アイテム３１５を含むよりも少ない仮想アイテム３２０を含むことを決定すること、（３）仮想ショッピングカート４２０に存在する仮想アイテムが、アルゴリズム的ショッピングカート１４２０に存在しない物理アイテム３１５をエミュレートするよう構成されることを決定すること、又は（４）仮想ショッピングカート４２０に存在する仮想アイテム３２０が、アルゴリズム的ショッピングカート１４２０に存在する物理アイテム３１５をエミュレートするよう構成されないことを決定すること、を含み得る。

【0133】

本開示は、２つのカートのうちの一方がエラーを含むために２つのカートが互いに一致しないことを解消コンポーネント４７５が決定し得る実施形態において、２つのカートのうちの一方がエラーを含むことを解消コンポーネント４７５が如何なる適切な方法でも決定し得ると考えている。例として、特定の実施形態では、解消コンポーネント４７５は、仮想ショッピングカート４２０とアルゴリズム的ショッピングカート１４２０との間に不一致が存在するときはいつでも、アルゴリズム的ショッピングカート１４２０がエラーを含むと常に決定してよい。他の例として、解消コンポーネント４７５は、仮想ショッピングカート４２０とアルゴリズム的ショッピングカート１４２０との間に存在する不一致のタイプに基づいて、２つのカートのうちの一方がエラーを含むことを決定してもよい。例えば、解消コンポーネント４７５は、２つのカートの間の不一致１４３５が２つのカートの間の特定のアイテムの数量の違いの結果である場合に、仮想ショッピングカート４２０がエラーを含むと決定するよう構成されてよい。例えば、仮想ショッピングカート４２０は、第１物理アイテム３１５ｌをエミュレートするよう構成される第１仮想アイテム３２０ｉの１つのインスタンスを含んでよく、一方、アルゴリズム的ショッピングカート１４２０は、第１物理アイテム３１５ｌの２つのインスタンスを含んでよい。そのような状況で、客１０５が所与の物理シェルフ３０５から１よりも多い物理アイテム３１５ｌを選択したことをカメラフィードセグメント４１５及び／又は４２５から判断することは困難であり得るから、アルゴリズム的ショッピングカート１４２０が第１物理アイテム３１５ｌの誤った数量を含むよりも、仮想ショッピングカート４２０が第１仮想アイテム３２０ｉの誤った数量を含む方が、可能性が高い。他方で、実店舗１００内の重量センサ１３００から受け取られた情報は、１よりも多い物理アイテム３１５ｌが物理シェルフ３０５から選択されたことをより正確に示し得る。２つのカートの間の特定のアイテムの異なる数量を含まない不一致１４３５については、解消コンポーネント４７５は、デフォルトとして、アルゴリズム的ショッピングカート１４２０がエラーを含むと決定するよう構成されてよい。

【0134】

他の例として、解消コンポーネント４７５は、ユーザ１２０から受け取られた入力に基づいて、仮想ショッピングカート４２０又はアルゴリズム的ショッピングカート１４２０のどちらか一方がエラーを含むことを決定するよう構成されてよい。例えば、仮想ショッピングカート４２０とアルゴリズム的ショッピングカート１４２０との間に不一致１４３５が存在することを決定することに応答して、解消コンポーネント４７５は、不一致１４３５をユーザ１２０に忠告するメッセージをデバイス１１５へ送ってもよい。ユーザ１２０は、次いで、仮想ショッピングカート４２０がエラーを含むこと、又はアルゴリズム的ショッピングカート１４２０がエラーを含むことのどちらか一方を示す応答を、仮想店舗ツール４０５へ送り得る。ユーザ１２０は、如何なる適切な方法でも、仮想ショッピングカート４２０及びアルゴリズム的ショッピングカート１４２０のうちの一方がエラーを含むことを決定してよい。例として、ユーザ１２０は、仮想ショッピングカート４２０の中身を確認すること、又は仮想ショッピングカート４２０がエラーを含むことを決定すること、のどちらか一方のために、カメラフィードセグメント４１５及び／又４２５をレビューし得る。例えば、対応する仮想アイテム３２０が仮想ショッピングカート４２０に存在する場合に、不一致がアルゴリズム的ショッピングカート１４２０における物理アイテム３１５の不存在を含むならば、ユーザ１２０は、物理ラック２１０から物理アイテム３１５を選択する客１０５をカメラフィードセグメントが捕捉することを確かめるために、カメラフィードセグメント４１５及び／又は４２５をレビューし得る。他の例として、対応する仮想アイテム３２０が仮想ショッピングカート４２０に不在である場合に、不一致がアルゴリズム的ショッピングカート１４２０における物理アイテム３１５の存在を含むならば、ユーザ１２０は、（１）ユーザ１２０が、物理ラック２１０から物理アイテム３１５を選択する客１０５を決して観察しないことを確かめるか、あるいは、（２）ユーザ１２０が、カメラフィードセグメント４１５及び／又は４２５において、物理ラック２１０から物理アイテム３１５を選択する客１０５を見る一方で、ユーザ１２０が、その後に、物理アイテム３１５を置いて、実店舗１００にアイテム３１５に残す客１０５を見ることを確かめるかのどちらかのために、カメラフィードセグメント４１５及び／又は４２５をレビューし得る。

【0135】

解消コンポーネント４７５はまた、客１０５のための領収書１４６５を生成するよう構成される。特定の実施形態では、解消コンポーネント４７５は、仮想ショッピングカート４２０の中身に基づいて領収書１４６５を生成する。例えば、解消コンポーネント４７５は、比較１４３０を実行する前に、仮想ショッピングカート４２０の中身に基づいて領収書１４６５を生成してよい。他の実施形態では、解消コンポーネント４７５は、比較１４３０に基づいて領収書１４６５を生成してもよい。例えば、仮想ショッピングカート４２０がアルゴリズム的ショッピングカート１４２０と一致することを解消コンポーネント４７５が決定する場合に、解消コンポーネント４７５は、客１０５のための領収書１４６５ａを生成し得る。領収書１４６５ａは、第１仮想価格１４１０、第２仮想価格１４２０、及び第３仮想価格１４２５から決定された、第１仮想アイテム３２０ｉ、第２仮想アイテム３２０ｊ、及び第３仮想アイテム３２０ｋの総費用を含み得る。ここで、仮想ショッピングカート４２０はアルゴリズム的ショッピングカート１４２０と一致するから、第１仮想アイテム３２０ｉ、第２仮想アイテム３２０ｊ、及び第３仮想アイテム３２０ｋの総費用１４７５を決定することは、第１物理アイテム３１５ｌ、第２物理アイテム３１５ｍ、及び第３物理アイテム３１５ｎの総費用を決定することと等価である。他の例として、仮想ショッピングカート４２０がエラーを含むと解消コンポーネント４７５が決定する場合に解消コンポーネント４７５は、客１０５のための領収書１４６５ｂを生成し得る。領収書１４６５ｂは、第１物理価格１４４０、第２物理価格１４５０、及び第３物理価格１４６０から決定された、第１物理アイテム３１５ｌ、第２物理アイテム３１５ｍ、及び第３物理アイテム３１５ｎの総費用１４８０を含み得る。更なる例として、アルゴリズム的ショッピングカート１４２０がエラーを含むと解消コンポーネント４７５が決定する場合に、解消コンポーネント４７５は、客１０５のための領収書１４６５ｃを生成し得る。領収書１４６５ｃは、第１仮想価格１４１０、第２仮想価格１４２０、及び第３仮想価格１４２５から決定された、第１仮想アイテム３２０ｉ、第２仮想アイテム３２０ｊ、及び第３仮想アイテム３２０ｋの総費用１４７５を含み得る。解消コンポーネント４７５が客１０５のための領収書１４６５を生成すると、解消コンポーネント４７５は、領収書１４６５に基づいて客１０５に料金を請求し、かつ／あるいは、客１０５に属するデバイス１２５へ領収書１４６５を送信してよい。

【0136】

解消コンポーネント４７５は、メモリ４４０に記憶されて、プロセッサ４３５によって実行されるソフトウェアモジュールであってよい。解消コンポーネント４７５の動作の例は次の通りである：（１）仮想ショッピングカート４２０及びアルゴリズム的ショッピングカート１４２０を受け取る；（２）仮想ショッピングカート４２０内の仮想アイテム３２０の数がアルゴリズム的ショッピングカート１４２０内の物理アイテム３１５の数と同じであるかどうかを決定する；（３）仮想ショッピングカート４２０内の仮想アイテム３２０の数がアルゴリズム的ショッピングカート１４２０内の物理アイテム３１５の数とは異なる場合に、２つのカートを不一致とラベル付けする；（４）仮想ショッピングカート４２０内の仮想アイテム３２０の数がアルゴリズム物理アイテム３１５の数と同じである場合に、アルゴリズム的ショッピングカート１４２０が対応する物理アイテム３１５を含んでいない何らかの仮想アイテム３２０を仮想ショッピングカート４２０が含んでいるかどうかを決定する；（５）アルゴリズム的ショッピングカート１４２０が対応する物理アイテム３１５を含んでいない何らかの仮想アイテム３２０を仮想ショッピングカート４２０が含んでいる場合に、２つのカートを不一致とラベル付けする；（６）アルゴリズム的ショッピングカート１４２０が対応する物理アイテム３１５を含んでいない如何なる仮想アイテム３２０も仮想ショッピングカート４２０が含んでいない場合に、２つのカートを一致とラベル付けする；（７）２つのカートを一致とラベル付けされる場合に、領収書１４６５ａを生成する；（８）２つのカートが不一致とラベル付けされる場合に、仮想ショッピングカート４２０がエラーを含むかどうかを決定する；（９）仮想ショッピングカート４２０がエラーを含む場合に、領収書１４６５ｂを生成する；（１０）仮想ショッピングカート４２０がエラーを含まない場合に、領収書１４６５ｃを生成する。

【0137】

［ｃ．アルゴリズムフィードバック］
特定の実施形態では、仮想店舗ツール４０５は、アルゴリズム４８８によってなされた決定の正確さを改善するために、アルゴリズム４８８とともに使用されてよい。具体的に、機械学習モジュール４８０は、仮想ショッピングカート４２０の中身とアルゴリズム的ショッピングカート１４２０の中身との比較に基づいて、フィードバックをアルゴリズム４８８へ供給してよい。図１５は、機械学習モジュール４８０の動作を表す。

【0138】

図１５に表されているように、特定の実施形態では、機械学習モジュール４８０は、アルゴリズム的ショッピングカート１４２０及び仮想ショッピングカート４２０を受け取る。機械学習モジュール４８０は、次いで、仮想ショッピングカート４２０とアルゴリズム的ショッピングカート１４２０との間に不一致が存在するかどうかを決定するために、仮想ショッピングカート４２０の中身とアルゴリズム的ショッピングカート１４２０の中身との比較１４３０を実行し得る。特定の他の実施形態では、機械学習モジュール４８０は、解消コンポーネント４７５から直接に、仮想ショッピングカート４２０とアルゴリズム的ショッピングカート１４２０との間に不一致１４３５が存在するとの指示を受け取ってもよい。

【0139】

不一致１４３５は、仮想ショッピングカート４２０とアルゴリズム的ショッピングカート１４２０との間の如何なる不一致も含んでよい。例えば、不一致１４３５は、対応する仮想アイテム３２０ａが仮想ショッピングカート４２０に存在する場合に、アルゴリズム的ショッピングカート１４２０における物理アイテム３１５ａの不存在を含んでよい。そのような不一致は、物理アイテム３１５ａが置かれている物理シェルフ３０５へ結合されている重量センサ１３００が、物理シェルフ３０５からの物理アイテム３１５ａの選択を検出することができなかった場合に、起こる可能性がある。他の例として、不一致１４３５は、対応する仮想アイテム３２０ｂが仮想ショッピングカート４２０に不在である場合に、アルゴリズム的ショッピングカート１４２０における物理アイテム３１５ｂの存在を含んでよい。そのような不一致は、当初は物理ラック２１０から物理アイテム３１５ｂを選択していた客１０５が、アイテム３１５ｂを置き、アイテム３１５ｂとともに実店舗１００から去らなかったことをアルゴリズム４８８が検出しないことで生じる可能性がある。更なる例として、不一致１４３５は、第１客１０５ａによって選択された第１アイテム３１５ａが、第１客１０５ａに割り当てられているアルゴリズム的ショッピングカート１４２０に存在せず、第２客１０５ｂに割り当てられているアルゴリズム的ショッピングカート１４２０に存在するように、第１客１０５ａと第２客１０５ｂとの間の識別入れ替えを含んでよい。そのような識別入れ替えは、アルゴリズム４８８の客追跡コンポーネントで起こる可能性がある。

【0140】

アルゴリズム的ショッピングカート１４２０と仮想ショッピングカート４２０との間に不一致が存在することを決定することに応答して、機械学習モジュール４８０は、センサ４９８（カメラ１３０５及び重量センサ１３００を含む）によって受け取られた入力の中から不一致に関連したサブセット１５００を決定してよい。例として、機械学習モジュール４８０は、不一致１４３５が起こったカメラフィードセグメント４１５及び／又は４２５のタイムスタンプ範囲を決定してよい。例えば、機械学習モジュール４８０は、カメラフィードセグメント４１５及び／又は４２５の第１タイムスタンプから第２タイムスタンプの間に捕捉された客１０５のショッピングセッションの部分に基づいて、仮想アイテム３２０ａが仮想ショッピングカート４２０に加えられたが、対応する物理アイテム３１５ａはアルゴリズム的ショッピングカート１４２０に加えられなかったことを決定し得る。結果して、機械学習モジュール４８０は、同じ時間インターバル（つまり、第１タイムスタンプから第２タイムスタンプの間に起こる時間インターバル）中にセンサ４９８から受け取られた入力のサブセット１５００を決定し得る。サブセット１５００は、カメラ１３０５から受け取られた入力のサブセット１５０５、及び／又は重量センサ１３００から受け取られた入力のサブセット１５１０を含んでよい。

【0141】

不一致１４３５に関連したサブセット１５００を識別することに応答して、機械学習モジュール４８０は、メタデータ１５４０をサブセット１５００に付加してよい。本開示は、メタデータ１５４０が、不一致１４３５を説明する及び／又は不一致１４３５に対処する如何なる情報も含んでよいと考えている。例えば、メタデータ１５４０をサブセット１５００に付加することは、フレームが、アルゴリズム４８８によってそもそも決定された、客１０５ｂがアイテム３１５を選択することではなく、客１０５ａがアイテム３１５を選択することを表すことを示すラベルを、カメラ１３０５から受け取られた１つ以上のフレームに付加することを含んでよい。メタデータ１５４０をサブセット１５００に付加することに応答して、外部システム４８５は、アルゴリズム４８８を再訓練するためにサブセット１５００を使用してよい。特定の実施形態では、アルゴリズム４８８を再訓練することは、アルゴリズム４８８の改善された精度をもたらし得る。

【0142】

機械学習モジュール４８０は、メモリ４４０に記憶されており、プロセッサ４３５によって実行されるソフトウェアモジュールであってよい。機械学習モジュール４８０の動作の例は次の通りである：（１）アルゴリズム的ショッピングカート１４２０を受け取る；（２）仮想ショッピングカート４２０を受け取る；（３）仮想ショッピングカート４２０の中身をアルゴリズム的ショッピングカート１４２０の中身と比較する；（４）仮想ショッピングカート４２０とアルゴリズム的ショッピングカート１４２０との間に不一致１４３５が存在することを決定する；（５）センサ４９８（カメラ１３０５及び重量センサ１３００を含む）から受け取られた入力からサブセット１５００を決定する；（６）外部システム４８５がサブセット１５００を用いてアルゴリズム４８８を再訓練し得るように、メタデータ１５４０をサブセット１５００に付加する。

【0143】

図１６は、仮想店舗ツール４０５が仮想ショッピングカート４２０を使用してフィードバックをアルゴリズム４８８に供給し得る様態について説明するフローチャートを示す。ステップ１６０５で、解消コンポーネント４７５は、アルゴリズム的ショッピングカート１４２０を受け取る。アルゴリズム的ショッピングカート１４２０は、アルゴリズム４８８によって、実店舗１００に設置されているセンサ４９８から受け取られた入力に基づいて、実店舗１００でのショッピングセッション中に客１０５によって選択されたと決定された物理アイテム３１５の組を含む。ステップ１６１０で、解消コンポーネント４７５は、仮想ショッピングカート４２０を受け取る。仮想ショッピングカート４２０は、仮想アイテム３２０の組を含む。特定の実施形態では、仮想アイテム３２０は、ユーザ１２０によって、実店舗１００における客１０５のショッピングセッションを捕捉するカメラフィードセグメント４１５及び／又は４２５に基づいて、実店舗１００でのショッピングセッション中に客１０５によって選択されたと決定された。

【0144】

ステップ１６１５で、解消コンポーネント４７５は、アルゴリズム的ショッピングカート１４２０の中身を仮想ショッピングカート４２０の中身と比較する。ステップ１６２０で、解消コンポーネント４７５は、アルゴリズム的ショッピングカート１４２０と仮想ショッピングカート４２０との間に不一致１４３５が存在するかどうかを決定する。アルゴリズム的ショッピングカート１４２０と仮想ショッピングカート４２０との間に不一致１４３５が存在しないとステップ１６２０で解消コンポーネント４７５が決定する場合に、次いで、ステップ１６４０で、解消コンポーネント４７５は、仮想ショッピングカート４２０の中身に基づいて、ショッピングセッションの領収書１４６５を生成し、領収書１４６５を客１０５のデバイス１２５へ送信する。アルゴリズム的ショッピングカート１４２０と仮想ショッピングカート４２０との間に不一致１４３５が存在するとステップ１６２０で解消コンポーネント４７５が決定する場合に、次いで、ステップ１６２５で、機械学習モジュール４８０は、センサ４９８から受け取られた入力の組の中から不一致に関連したサブセット１５００を決定する。ステップ１６３０で、機械学習モジュール４８０は、メタデータ１５４０をサブセット１５００に付加する。メタデータ１５４０は、不一致１４３５について説明し得る。ステップ１６３５で、外部システム４８５は、サブセット１５００を使用して、アルゴリズム４８８を再訓練し得る。更に、ステップ１６４０で、解消コンポーネント４７５は、仮想ショッピングカート４２０の中身に基づいて、ショッピングセッションの領収書１４６５を生成し、領収書１４６５を客１０５のデバイス１２５へ送信する。

【0145】

図１６に表されている方法１６００に対しては、変更、追加、又は削除が行われてもよい。方法１６００は、より多い、より少ない、又は他のステップを含んでもよい。例えば、ステップは、並行して又は任意の適切な方法で実行されてよい。仮想店舗ツール４０５（又はそのコンポーネント）がステップを実行するものとして説明されているが、例えば、デバイス１１５のような、システム４００のいずれかの適切なコンポーネントが、方法の１つ以上のステップを実行してもよい。

【0146】

本開示にはいくつかの実施形態が開示されているが、無数の変更、変異、代替、変形、及び修正を当業者に提案することができ、本開示は、そのような変更、変異、代替、変形、及び修正を、添付の特許請求の範囲の範囲内にあるものとして包含することが意図される。

【0147】

上記の実施形態に加えて、以下の付記を開示する。

【0148】

（付記１）
第１のアイテムの組を含むアルゴリズム的ショッピングカートを受け取り、前記第１のアイテムの組は、アルゴリズムによって、実店舗内の設置されているセンサから受け取られた入力の組に基づいて、第１人物によって前記実店舗でのショッピングセッション中に選択されたと決定され、
前記ショッピングセッションに関連した第２のアイテムの組を含む仮想ショッピングカートを受け取り、前記ショッピングセッションの映像は、前記実店舗に置かれているカメラの組によって捕捉されたものであり、前記映像は、前記第２のアイテムの組を選択する前記人物を表し、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較し、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較することに応答して、
前記アルゴリズム的ショッピングカートと前記仮想ショッピングカートとの間に不一致が存在することを決定し、
前記入力の組の中から前記不一致に関連したサブセットを決定し、
前記不一致を説明するメタデータを前記サブセットに付加し、
前記サブセットを使用して前記アルゴリズムを訓練する
よう構成されるハードウェアプロセッサを有する装置。

【0149】

（付記２）
前記プロセッサは、
第３のアイテムの組を含む第２アルゴリズム的ショッピングカートを受け取り、前記第３のアイテムの組は、前記アルゴリズムによって、前記実店舗内に設置されている前記センサから受け取られた第２の入力の組に基づいて、第２人物によって前記実店舗での第２ショッピングセッション中に選択されたと決定され、
第４のアイテムの組を含む第２仮想ショッピングカートを受け取り、前記第４のアイテムの組は、前記第２ショッピングセッションの映像に基づいて、前記実店舗での前記第２ショッピングセッション中に前記人物によって選択されたと決定され、
前記第２アルゴリズム的ショッピングカートを前記第２仮想ショッピングカートと比較し、
前記第２アルゴリズム的ショッピングカートを前記第２仮想ショッピングカートと比較することに応答して、前記第２アルゴリズム的ショッピングカートが前記第２仮想ショッピングカートと一致することを決定する
よう更に構成される、
付記１に記載の装置。

【0150】

（付記３）
前記不一致は、前記アルゴリズム的ショッピングカートにおける第１アイテムの不存在を含み、前記第１のアイテムは、前記仮想ショッピングカートには存在する、
付記１に記載の装置。

【0151】

（付記４）
前記センサは、前記第１アイテムの選択を検出することができなかった、
付記３に記載の装置。

【0152】

（付記５）
前記不一致は、前記アルゴリズム的ショッピングカートにおける第１アイテムの存在を含み、前記第１アイテムは、前記仮想ショッピングカートには存在しない、
付記１に記載の装置。

【0153】

（付記６）
前記不一致は、前記第１人物によって選択された第１アイテムが前記アルゴリズム的ショッピングカートに存在せず、第２人物に関連した第２アルゴリズム的ショッピングカートに存在するような、前記第１人物と前記第２人物との間の識別入れ替えを含む、
付記１に記載の装置。

【0154】

（付記７）
前記センサは、
前記カメラの組とは異なるアルゴリズムカメラのアレイと、
重量センサの組と
を有し、
前記第１のアイテムの組の中の各アイテムは、前記重量センサの組の中の重量センサへ結合される、
付記１に記載の装置。

【0155】

（付記８）
第１のアイテムの組を含むアルゴリズム的ショッピングカートを受け取ることであり、前記第１のアイテムの組は、アルゴリズムによって、実店舗内の設置されているセンサから受け取られた入力の組に基づいて、第１人物によって前記実店舗でのショッピングセッション中に選択されたと決定される、ことと、
前記ショッピングセッションに関連した第２のアイテムの組を含む仮想ショッピングカートを受け取ることであり、前記ショッピングセッションの映像は、前記実店舗に置かれているカメラの組によって捕捉されたものであり、前記映像は、前記第２のアイテムの組を選択する前記人物を表す、ことと、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較することと、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較することに応答して、
前記アルゴリズム的ショッピングカートと前記仮想ショッピングカートとの間に不一致が存在することを決定することと、
前記入力の組の中から前記不一致に関連したサブセットを決定することと、
前記不一致を説明するメタデータを前記サブセットに付加することと、
前記サブセットを使用して前記アルゴリズムを訓練することと
を有する方法。

【0156】

（付記９）
第３のアイテムの組を含む第２アルゴリズム的ショッピングカートを受け取ることであり、前記第３のアイテムの組は、前記アルゴリズムによって、前記実店舗内に設置されている前記センサから受け取られた第２の入力の組に基づいて、第２人物によって前記実店舗での第２ショッピングセッション中に選択されたと決定される、ことと、
第４のアイテムの組を含む第２仮想ショッピングカートを受け取ることであり、前記第４のアイテムの組は、前記第２ショッピングセッションの映像に基づいて、前記実店舗での前記第２ショッピングセッション中に前記人物によって選択されたと決定される、ことと、
前記第２アルゴリズム的ショッピングカートを前記第２仮想ショッピングカートと比較することと、
前記第２アルゴリズム的ショッピングカートを前記第２仮想ショッピングカートと比較することに応答して、前記第２アルゴリズム的ショッピングカートが前記第２仮想ショッピングカートと一致することを決定することと
を更に有する、付記８に記載の方法。

【0157】

（付記１０）
前記不一致は、前記アルゴリズム的ショッピングカートにおける第１アイテムの不存在を含み、前記第１のアイテムは、前記仮想ショッピングカートには存在する、
付記８に記載の方法。

【0158】

（付記１１）
前記センサは、前記第１アイテムの選択を検出することができなかった、
付記１０に記載の方法。

【0159】

（付記１２）
前記不一致は、前記アルゴリズム的ショッピングカートにおける第１アイテムの存在を含み、前記第１アイテムは、前記仮想ショッピングカートには存在しない、
付記８に記載の方法。

【0160】

（付記１３）
前記不一致は、前記第１人物によって選択された第１アイテムが前記アルゴリズム的ショッピングカートに存在せず、第２人物に関連した第２アルゴリズム的ショッピングカートに存在するような、前記第１人物と前記第２人物との間の識別入れ替えを含む、
付記８に記載の方法。

【0161】

（付記１４）
前記センサは、
前記カメラの組とは異なるアルゴリズムカメラのアレイと、
重量センサの組と
を有し、
前記第１のアイテムの組の中の各アイテムは、前記重量センサの組の中の重量センサへ結合される、
付記８に記載の装置。

【0162】

（付記１５）
実店舗内に設置され、アルゴリズムカメラのアレイ及び重量センサの組を含むセンサの組と、
プロセッサ
とを有し、前記プロセッサは、
第１のアイテムの組を含むアルゴリズム的ショッピングカートを受け取り、前記第１のアイテムの組は、アルゴリズムによって、前記センサの組から受け取られた入力の組に基づいて、第１人物によって前記実店舗でのショッピングセッション中に選択されたと決定され、
前記ショッピングセッションに関連した第２のアイテムの組を含む仮想ショッピングカートを受け取り、前記ショッピングセッションの映像は、前記実店舗に置かれているカメラの組によって捕捉されたものであり、前記映像は、前記第２のアイテムの組を選択する前記人物を表し、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較し、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較することに応答して、
前記アルゴリズム的ショッピングカートと前記仮想ショッピングカートとの間に不一致が存在することを決定し、
前記入力の組の中から前記不一致に関連したサブセットを決定し、
前記不一致を説明するメタデータを前記サブセットに付加し、
前記サブセットを使用して前記アルゴリズムを訓練する
よう構成される、
システム。

【0163】

（付記１６）
前記プロセッサは、
第３のアイテムの組を含む第２アルゴリズム的ショッピングカートを受け取り、前記第３のアイテムの組は、前記アルゴリズムによって、前記センサの組から受け取られた第２の入力の組に基づいて、第２人物によって前記実店舗での第２ショッピングセッション中に選択されたと決定され、
第４のアイテムの組を含む第２仮想ショッピングカートを受け取り、前記第４のアイテムの組は、前記第２ショッピングセッションの映像に基づいて、前記実店舗での前記第２ショッピングセッション中に前記人物によって選択されたと決定され、
前記第２アルゴリズム的ショッピングカートを前記第２仮想ショッピングカートと比較し、
前記第２アルゴリズム的ショッピングカートを前記第２仮想ショッピングカートと比較することに応答して、前記第２アルゴリズム的ショッピングカートが前記第２仮想ショッピングカートと一致することを決定する
よう更に構成される、
付記１５に記載のシステム。

【0164】

（付記１７）
前記不一致は、前記アルゴリズム的ショッピングカートにおける第１アイテムの不存在を含み、前記第１のアイテムは、前記仮想ショッピングカートには存在する、
付記１５に記載のシステム。

【0165】

（付記１８）
前記センサは、前記第１アイテムの選択を検出することができなかった、
付記１７に記載のシステム。

【0166】

（付記１９）
前記不一致は、前記アルゴリズム的ショッピングカートにおける第１アイテムの存在を含み、前記第１アイテムは、前記仮想ショッピングカートには存在しない、
付記１５に記載のシステム。

【0167】

（付記２０）
前記不一致は、前記第１人物によって選択された第１アイテムが前記アルゴリズム的ショッピングカートに存在せず、第２人物に関連した第２アルゴリズム的ショッピングカートに存在するような、前記第１人物と前記第２人物との間の識別入れ替えを含む、
付記１５に記載のシステム。

【0168】

（付記２１）
実店舗の物理レイアウトをエミュレートするように仮想店舗の仮想レイアウトを生成するよう構成される装置であって、
メモリと、
前記メモリへ通信可能に結合されるハードウェアプロセッサと
を有し、前記ハードウェアプロセッサは、
前記実店舗に置かれている第１物理ラックに関連した第１物理位置及び第１物理方向を受け取り、
前記第１物理位置及び前記第１物理方向を受け取ることに応答して、第１仮想位置において第１仮想方向により第１仮想ラックを前記仮想レイアウトに置き、前記仮想レイアウトでの前記第１仮想ラックの前記第１仮想位置は、前記物理レイアウトでの前記第１物理ラックの前記第１物理位置に相当し、前記仮想レイアウトでの前記第１仮想ラックの前記第１仮想方向は、前記物理レイアウトでの前記第１物理ラックの前記第１物理方向に相当し、
前記第１物理ラックの第１物理シェルフにある第１物理アイテムに関連した第１仮想アイテムを受け取り、
前記第１仮想アイテムを受け取ることに応答して、前記第１仮想アイテムを前記第１仮想ラックの第１仮想シェルフに置き、前記第１仮想ラックの前記第１仮想シェルフは、前記第１物理ラックの前記第１物理シェルフに相当し、
前記第１物理ラックの第２物理シェルフにある第２物理アイテムに関連した第２仮想アイテムを受け取り、
前記第２仮想アイテムを受け取ることに応答して、前記第２仮想アイテムを前記第１仮想ラックの第２仮想シェルフに置き、前記第１仮想ラックの前記第２仮想シェルフは、前記第１物理ラックの前記第２物理シェルフに相当し、
前記実店舗に置かれている第１ラックカメラを前記第１仮想ラックに割り当て、前記第１ラックカメラは、前記第１物理ラックを含む映像を捕捉するよう構成され、
前記仮想レイアウトを前記メモリに保存する
よう構成される、
装置。

【0169】

（付記２２）
前記プロセッサは、
前記実店舗に置かれている第２物理ラックに関連した第２物理位置及び第２物理方向を受け取り、
前記第２物理位置及び前記第２物理方向を受け取ることに応答して、第２仮想位置において第２仮想方向により第２仮想ラックを前記仮想レイアウトに置き、前記仮想レイアウトでの前記第２仮想ラックの前記第２仮想位置は、前記物理レイアウトでの前記第２物理ラックの前記第２物理位置に相当し、前記仮想レイアウトでの前記第２仮想ラックの前記第２仮想方向は、前記物理レイアウトでの前記第２物理ラックの前記第２物理方向に相当し、
前記第２物理ラックの第３物理シェルフにある第３物理アイテムに関連した第３仮想アイテムを受け取り、
前記第３仮想アイテムを受け取ることに応答して、前記第３仮想アイテムを前記第２仮想ラックの第３仮想シェルフに置き、前記第２仮想ラックの前記第３仮想シェルフは、前記第２物理ラックの前記第３物理シェルフに相当し、
前記第２物理ラックの第４物理シェルフにある第４物理アイテムに関連した第４仮想アイテムを受け取り、
前記第４仮想アイテムを受け取ることに応答して、前記第４仮想アイテムを前記第２仮想ラックの第４仮想シェルフに置き、前記第２仮想ラックの前記第４仮想シェルフは、前記第２物理ラックの前記第４物理シェルフに相当し、
前記実店舗に置かれている第２ラックカメラを前記第２仮想ラックに割り当て、前記第２ラックカメラは、前記第２物理ラックを含む映像を捕捉するよう構成される、
よう更に構成される、
付記２１に記載の装置。

【0170】

（付記２３）
店舗識別番号が、前記実店舗に割り当てられ、
前記仮想レイアウトは、前記店舗識別番号に従って前記メモリに記憶される、
付記２１に記載の装置。

【0171】

（付記２４）
ディスプレイを更に有し、
前記プロセッサは、
前記店舗識別番号を受け取り、
前記店舗識別番号を受け取ることに応答して、前記ディスプレイの第１領域で前記仮想レイアウトを表示し、
前記第１物理ラックに関連したイベントの指示を受け取ることに応答して、
前記ディスプレイの第２領域で前記第１仮想ラックを表示し、
前記ディスプレイの第３領域で前記第１ラックカメラからの映像を表示する
よう更に構成される、
付記２３に記載の装置。

【0172】

（付記２５）
前記第１仮想アイテムは、前記第１物理ラックの前記第１物理シェルフの第１物理ゾーンと更に関連付けられ、
前記第２仮想アイテムは、前記第１物理ラックの前記第２物理シェルフの第２物理ゾーンと更に関連付けられ、
前記第１仮想アイテムを前記第１仮想ラックの前記第１仮想シェルフに置くことは、前記第１仮想アイテムを前記第１仮想ラックの前記第１仮想シェルフの第１仮想ゾーンに置くことを更に含み、前記第１仮想シェルフの前記第１仮想ゾーンは、前記第１物理シェルフの前記第１物理ゾーンを表し、
前記第２仮想アイテムを前記第１仮想ラックの前記第２仮想シェルフに置くことは、前記第２仮想アイテムを前記第１仮想ラックの前記第２仮想シェルフの第２仮想ゾーンに置くことを更に含み、前記第２仮想シェルフの前記第２仮想ゾーンは、前記第２物理シェルフの前記第２物理ゾーンを表す、
付記２１に記載の装置。

【0173】

（付記２６）
第１センサ識別番号に関連した第１センサは、前記第１物理シェルフの前記第１物理ゾーンに割り当てられ、
第２センサ識別番号に関連した第２センサは、前記第２物理シェルフの前記第２物理ゾーンに割り当てられ、
前記プロセッサは、
前記第１センサ識別番号を前記第１仮想シェルフの前記第１仮想ゾーンに割り当て、
前記第２センサ識別番号を前記第２仮想シェルフの前記第２仮想ゾーンに割り当てる
よう更に構成される、
付記２５に記載の装置。

【0174】

（付記２７）
前記第１仮想アイテム及び前記第２仮想アイテムを受け取ることは、プラノグラムを含むファイルを受け取ることを有する、
付記２１に記載の装置。

【0175】

（付記２８）
前記第１仮想アイテム及び前記第２仮想アイテムを受け取ることは、
前記第１仮想アイテム及び前記第２仮想アイテムを含むアイテムのスクロール可能なリストを表示することと、
前記スクロール可能なリストからの前記第１仮想アイテムを前記第１仮想ラックの前記第１仮想シェルフに加える第１命令を受け取ることと、
前記スクロール可能なリストからの前記第２仮想アイテムを前記第１仮想ラックの前記第２仮想シェルフに加える第２命令を受け取ることと
を有する、
付記２１に記載の装置。

【0176】

（付記２９）
前記プロセッサは、
第１入力を受け取り、
前記第１入力が前記第１仮想位置から新しい仮想位置への前記第１仮想ラックのドラッグを表すことを決定し、
前記第１入力が前記第１仮想位置から前記新しい仮想位置への前記第１仮想ラックのドラッグを表すとの決定に応答して、前記第１仮想ラックを前記新しい仮想位置に置き、
第２入力を受け取り、
前記第２入力が前記第１仮想方向から新しい仮想方向への前記第１仮想ラックの回転を表すことを決定し、
前記第２入力が前記第１仮想方向から前記新しい仮想方向への前記第１仮想ラックの回転を表すとの決定に応答して、前記第１仮想ラックを前記新しい仮想方向で置く
よう更に構成される、
付記２１に記載の装置。

【0177】

（付記３０）
ディスプレイを更に有し、
前記プロセッサは、
前記仮想レイアウトを含む第１グラフィカルユーザインターフェースを前記ディスプレイに表示し、前記第１入力及び前記第２入力は、前記第１グラフィカルユーザインターフェースから受け取られ、
前記第１グラフィカルユーザインターフェースとは別に表示され、前記仮想レイアウト及び前記第１ラックカメラから受け取られた映像を含む第２グラフィカルユーザインターフェースを前記ディスプレイに表示し、
前記第２グラフィカルユーザインターフェースから第３入力を受け取り、
前記第３入力が前記仮想レイアウトからの前記第１仮想ラックの選択を表すことを決定し、
前記第３入力が前記仮想レイアウトからの前記第１仮想ラックの選択を表すとの決定に応答して、前記ディスプレイで前記第２グラフィカルユーザインターフェースに前記第１仮想ラックを表示する
よう更に構成される、
付記２９に記載の装置。

【0178】

（付記３１）
実店舗の物理レイアウトをエミュレートするように仮想店舗の仮想レイアウトを生成する方法であって、
前記実店舗に置かれている第１物理ラックに関連した第１物理位置及び第１物理方向を受け取ることと、
前記第１物理位置及び前記第１物理方向を受け取ることに応答して、第１仮想位置において第１仮想方向により第１仮想ラックを前記仮想レイアウトに置くことであり、前記仮想レイアウトでの前記第１仮想ラックの前記第１仮想位置は、前記物理レイアウトでの前記第１物理ラックの前記第１物理位置に相当し、前記仮想レイアウトでの前記第１仮想ラックの前記第１仮想方向は、前記物理レイアウトでの前記第１物理ラックの前記第１物理方向に相当する、ことと、
前記第１物理ラックの第１物理シェルフにある第１物理アイテムに関連した第１仮想アイテムを受け取ることと、
前記第１仮想アイテムを受け取ることに応答して、前記第１仮想アイテムを前記第１仮想ラックの第１仮想シェルフに置くことであり、前記第１仮想ラックの前記第１仮想シェルフは、前記第１物理ラックの前記第１物理シェルフに相当する、ことと、
前記第１物理ラックの第２物理シェルフにある第２物理アイテムに関連した第２仮想アイテムを受け取ることと、
前記第２仮想アイテムを受け取ることに応答して、前記第２仮想アイテムを前記第１仮想ラックの第２仮想シェルフに置くことであり、前記第１仮想ラックの前記第２仮想シェルフは、前記第１物理ラックの前記第２物理シェルフに相当する、ことと、
前記実店舗に置かれている第１ラックカメラを前記第１仮想ラックに割り当てることであり、前記第１ラックカメラは、前記第１物理ラックを含む映像を捕捉するよう構成される、ことと、
前記仮想レイアウトをメモリに保存することと
を有する方法。

【0179】

（付記３２）
前記実店舗に置かれている第２物理ラックに関連した第２物理位置及び第２物理方向を受け取ることと、
前記第２物理位置及び前記第２物理方向を受け取ることに応答して、第２仮想位置において第２仮想方向により第２仮想ラックを前記仮想レイアウトに置くことであり、前記仮想レイアウトでの前記第２仮想ラックの前記第２仮想位置は、前記物理レイアウトでの前記第２物理ラックの前記第２物理位置に相当し、前記仮想レイアウトでの前記第２仮想ラックの前記第２仮想方向は、前記物理レイアウトでの前記第２物理ラックの前記第２物理方向に相当する、ことと、
前記第２物理ラックの第３物理シェルフにある第３物理アイテムに関連した第３仮想アイテムを受け取ることと、
前記第３仮想アイテムを受け取ることに応答して、前記第３仮想アイテムを前記第２仮想ラックの第３仮想シェルフに置くことであり、前記第２仮想ラックの前記第３仮想シェルフは、前記第２物理ラックの前記第３物理シェルフに相当する、ことと、
前記第２物理ラックの第４物理シェルフにある第４物理アイテムに関連した第４仮想アイテムを受け取ることと、
前記第４仮想アイテムを受け取ることに応答して、前記第４仮想アイテムを前記第２仮想ラックの第４仮想シェルフに置くことであり、前記第２仮想ラックの前記第４仮想シェルフは、前記第２物理ラックの前記第４物理シェルフに相当する、ことと、
前記実店舗に置かれている第２ラックカメラを前記第２仮想ラックに割り当てることであり、前記第２ラックカメラは、前記第２物理ラックを含む映像を捕捉するよう構成される、ことと
を更に有する、付記３１に記載の方法。

【0180】

（付記３３）
店舗識別番号が、前記実店舗に割り当てられ、
前記仮想レイアウトは、前記店舗識別番号に従って前記メモリに記憶される、
付記３１に記載の方法。

【0181】

（付記３４）
前記店舗識別番号を受け取ることと、
前記店舗識別番号を受け取ることに応答して、ディスプレイの第１領域で前記仮想レイアウトを表示することと、
前記第１物理ラックに関連したイベントの指示を受け取ることに応答して、
前記ディスプレイの第２領域で前記第１仮想ラックを表示することと、
前記ディスプレイの第３領域で前記第１ラックカメラからの映像を表示することと
を更に有する、付記３３に記載の方法。

【0182】

（付記３５）
前記第１仮想アイテムは、前記第１物理ラックの前記第１物理シェルフの第１物理ゾーンと更に関連付けられ、
前記第２仮想アイテムは、前記第１物理ラックの前記第２物理シェルフの第２物理ゾーンと更に関連付けられ、
前記第１仮想アイテムを前記第１仮想ラックの前記第１仮想シェルフに置くことは、前記第１仮想アイテムを前記第１仮想ラックの前記第１仮想シェルフの第１仮想ゾーンに置くことを更に含み、前記第１仮想シェルフの前記第１仮想ゾーンは、前記第１物理シェルフの前記第１物理ゾーンを表し、
前記第２仮想アイテムを前記第１仮想ラックの前記第２仮想シェルフに置くことは、前記第２仮想アイテムを前記第１仮想ラックの前記第２仮想シェルフの第２仮想ゾーンに置くことを更に含み、前記第２仮想シェルフの前記第２仮想ゾーンは、前記第２物理シェルフの前記第２物理ゾーンを表す、
付記３１に記載の方法。

【0183】

（付記３６）
第１センサ識別番号を前記第１仮想シェルフの前記第１仮想ゾーンに割り当てることであり、前記第１センサ識別番号に関連した第１センサが、前記第１物理シェルフの前記第１物理ゾーンに割り当てられる、ことと、
第２センサ識別番号を前記第２仮想シェルフの前記第２仮想ゾーンに割り当てることであり、前記第２センサ識別番号に関連した第２センサが、前記第２物理シェルフの前記第２物理ゾーンに割り当てられる、ことと
を更に有する、付記３５に記載の方法。

【0184】

（付記３７）
前記第１仮想アイテム及び前記第２仮想アイテムを受け取ることは、プラノグラムを含むファイルを受け取ることを有する、
付記３１に記載の方法。

【0185】

（付記３８）
前記第１仮想アイテム及び前記第２仮想アイテムを受け取ることは、
前記第１仮想アイテム及び前記第２仮想アイテムを含むアイテムのスクロール可能なリストを表示することと、
前記スクロール可能なリストからの前記第１仮想アイテムを前記第１仮想ラックの前記第１仮想シェルフに加える第１命令を受け取ることと、
前記スクロール可能なリストからの前記第２仮想アイテムを前記第１仮想ラックの前記第２仮想シェルフに加える第２命令を受け取ることと
を有する、
付記３１に記載の方法。

【0186】

（付記３９）
第１入力を受け取ることと、
前記第１入力が前記第１仮想位置から新しい仮想位置への前記第１仮想ラックのドラッグを表すことを決定することと、
前記第１入力が前記第１仮想位置から前記新しい仮想位置への前記第１仮想ラックのドラッグを表すとの決定に応答して、前記第１仮想ラックを前記新しい仮想位置に置くことと、
第２入力を受け取ることと、
前記第２入力が前記第１仮想方向から新しい仮想方向への前記第１仮想ラックの回転を表すことを決定することと、
前記第２入力が前記第１仮想方向から前記新しい仮想方向への前記第１仮想ラックの回転を表すとの決定に応答して、前記第１仮想ラックを前記新しい仮想方向で置くことと
を更に有する、付記３１に記載の方法。

【0187】

（付記４０）
前記仮想レイアウトを含む第１グラフィカルユーザインターフェースをディスプレイに表示することであり、前記第１入力及び前記第２入力は、前記第１グラフィカルユーザインターフェースから受け取られる、ことと、
前記第１グラフィカルユーザインターフェースとは別に表示され、前記仮想レイアウト及び前記第１ラックカメラから受け取られた映像を含む第２グラフィカルユーザインターフェースを前記ディスプレイに表示することと、
前記第２グラフィカルユーザインターフェースから第３入力を受け取ることと、
前記第３入力が前記仮想レイアウトからの前記第１仮想ラックの選択を表すことを決定することと、
前記第３入力が前記仮想レイアウトからの前記第１仮想ラックの選択を表すとの決定に応答して、前記ディスプレイで前記第２グラフィカルユーザインターフェースに前記第１仮想ラックを表示することと
を更に有する、付記３９に記載の方法。

【0188】

（付記４１）
実店舗に置かれており、前記実店舗内の第１位置に向けられている第１カメラに対応する第１カメラフィードと、前記実店舗に置かれており、前記実店舗内の第２位置に向けられている第２カメラに対応する第２カメラフィードと含む第１ビデオフィードを受け取るよう構成されるインターフェースと、
ディスプレイと、
メモリと、
前記メモリ及び前記ディスプレイへ通信可能に結合されるハードウェアプロセッサと
を有し、
前記ハードウェアプロセッサは、
第１人物に割り当てられ、開始タイムスタンプと終了タイムスタンプとの間の時間インターバル中に起こる前記実店舗における前記第１人物のショッピングセッションの部分を捕捉する第１ビデオセグメントを前記メモリに保存し、前記第１ビデオセグメントは、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第１カメラフィードの記録に対応する第１カメラフィードセグメントと、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第２カメラフィードの記録に対応する第２カメラフィードセグメントと
を含み、
第１スライダバーを前記第１ビデオセグメントに割り当て、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生は同期し、前記第１スライダバーは、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を制御し、
前記ディスプレイの第１領域において前記第１カメラフィードセグメント及び前記第１スライダの第１コピーを表示し、
前記ディスプレイの第２領域において前記第２カメラフィードセグメント及び前記第１スライダの第２コピーを表示し、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を調整ために、前記第１スライダの前記第１コピー及び前記第１スライダの前記第２コピーのうちの少なくとも一方から命令を受け取り、
前記命令を受け取ることに応答して、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を調整する
よう構成される、
装置。

【0189】

（付記４２）
前記プロセッサは、
第２人物に割り当てられ、第２開始タイムスタンプと第２終了タイムスタンプとの間の第２時間インターバル中に起こる前記実店舗における前記第２人物のショッピングセッションの部分を捕捉する第２ビデオセグメントを前記メモリに保存し、前記第２開始タイムスタンプは前記開始スタンプよりも遅く、前記終了タイムスタンプよりも早く、前記第２ビデオセグメントは、
前記第２開始タイムスタンプから前記第２終了タイムスタンプまでの前記第１カメラフィードの記録に対応する第３カメラフィードセグメントと、
前記第２開始タイムスタンプから前記第２終了タイムスタンプまでの前記第２カメラフィードの記録に対応する第４カメラフィードセグメントと
を含み、
前記第１スライダバーから独立している第２スライダバーを前記第２ビデオセグメントに割り当て、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生は同期し、前記第２スライダバーは、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を制御し、
前記ディスプレイの第３領域において前記第３カメラフィードセグメント及び前記第２スライダの第１コピーを表示し、
前記ディスプレイの第４領域において前記第４カメラフィードセグメント及び前記第２スライダの第２コピーを表示し、
前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を調整ために、前記第２スライダの前記第１コピー及び前記第２スライダの前記第２コピーのうちの少なくとも一方から第２命令を受け取り、
前記第２命令を受け取ることに応答して、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を調整する
よう更に構成される、
付記４１に記載の装置。

【0190】

（付記４３）
前記プロセッサは、
前記第１カメラフィードセグメントが第１時点での前記第１人物を表すことを決定し、
前記第１カメラフィードセグメントが前記第１時点での前記第１人物を表すとの決定に応答して、
共通するスライダバーが前記第１時点に到達したことを決定し、
前記共通スライダバーが前記第１時点に到達したとの決定に応答して、前記第１カメラフィードセグメントを強調表示する
よう更に構成される、
付記４１に記載の装置。

【0191】

（付記４４）
共通するスライダバーは、該共通するスライダバー上で第１時点に位置しているマーカを有し、該マーカは、前記第１時点で起こるイベントに関連し、該イベントは、前記第１人物が前記実店舗内のラックにあるシェルフからアイテムを選択することに関連する、
付記４１に記載の装置。

【0192】

（付記４５）
前記アイテムは、アイテム識別番号を割り当てられ、
前記シェルフは、シェルフ識別番号を割り当てられ、
前記ラックは、ラック識別番号を割り当てられ、
前記マーカは、前記アイテム識別番号、前記シェルフ識別番号、及び前記ラック識別番号を含むメタデータを有する、
付記４４に記載の装置。

【0193】

（付記４６）
前記第１ビデオフィードは、前記実店舗に置かれており、前記ラックに向けられている第３カメラに対応する第３カメラフィードを更に有し、
前記第１ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記第３カメラフィードの記録に対応する第３カメラフィードセグメントを更に有し、
前記プロセッサは、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記マーカに到達したことを決定し、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記マーカに到達したとの決定に応答して、
前記マーカの前記メタデータに基づいて、前記第１人物が前記実店舗内の前記ラックにある前記シェルフから前記アイテムを選択することに関連した前記イベントが起きたことを決定し、
前記イベントが起きたとの決定に応答して、前記ディスプレイの第３領域において前記第３カメラフィードセグメントを表示する
よう更に構成される、
請求項４５に記載の装置。

【0194】

（付記４７）
前記開始タイムスタンプと前記終了タイムスタンプとの間の前記時間インターバルは、所定の長さを有し、
前記プロセッサは、
前記第１人物に割り当てられ、前記終了タイムスタンプと新しい終了タイムスタンプとの間の第２時間インターバル中に起こる前記実店舗における前記第１人物の前記ショッピングセッションの部分を捕捉する第２ビデオセグメントを前記メモリに保存し、前記第２ビデオセグメントは、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第１カメラフィードの記録に対応する新しい第１カメラフィードセグメントと、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第２カメラフィードの記録に対応する新しい第２カメラフィードセグメントと
を含み、
第２スライダバーを前記第２ビデオセグメントに割り当て、前記新しい第１カメラフィードセグメント及び前記新しい第２カメラフィードセグメントの再生は同期し、前記第２スライダバーは、前記新しい第１カメラフィードセグメント及び前記新しい第２カメラフィードセグメントの再生進行を制御し、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したことを決定し、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したとの決定に応答して、
前記ディスプレイの前記第１領域において前記新しい第１カメラフィードセグメント及び前記第２スライダの第１コピーを表示し、
前記ディスプレイの前記第２領域において前記新しい第２カメラフィードセグメント及び前記第２スライダの第２コピーを表示する
よう更に構成される、
付記４１に記載の装置。

【0195】

（付記４８）
実店舗に置かれており、前記実店舗内の第１位置に向けられている第１カメラに対応する第１カメラフィードと、前記実店舗に置かれており、前記実店舗内の第２位置に向けられている第２カメラに対応する第２カメラフィードと含む第１ビデオフィードを受け取ることと、
第１人物に割り当てられ、開始タイムスタンプと終了タイムスタンプとの間の時間インターバル中に起こる前記実店舗における前記第１人物のショッピングセッションの部分を捕捉する第１ビデオセグメントを前記メモリに保存することであり、前記第１ビデオセグメントは、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第１カメラフィードの記録に対応する第１カメラフィードセグメントと、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第２カメラフィードの記録に対応する第２カメラフィードセグメントと
を含む、ことと、
第１スライダバーを前記第１ビデオセグメントに割り当てることであり、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生は同期し、前記第１スライダバーは、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を制御する、ことと、
前記ディスプレイの第１領域において前記第１カメラフィードセグメント及び前記第１スライダの第１コピーを表示することと、
前記ディスプレイの第２領域において前記第２カメラフィードセグメント及び前記第１スライダの第２コピーを表示することと、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を調整ために、前記第１スライダの前記第１コピー及び前記第１スライダの前記第２コピーのうちの少なくとも一方から命令を受け取ることと、
前記命令を受け取ることに応答して、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を調整することと
を有する方法。

【0196】

（付記４９）
第２人物に割り当てられ、第２開始タイムスタンプと第２終了タイムスタンプとの間の第２時間インターバル中に起こる前記実店舗における前記第２人物のショッピングセッションの部分を捕捉する第２ビデオセグメントを前記メモリに保存することであり、前記第２開始タイムスタンプは前記開始スタンプよりも遅く、前記終了タイムスタンプよりも早く、前記第２ビデオセグメントは、
前記第２開始タイムスタンプから前記第２終了タイムスタンプまでの前記第１カメラフィードの記録に対応する第３カメラフィードセグメントと、
前記第２開始タイムスタンプから前記第２終了タイムスタンプまでの前記第２カメラフィードの記録に対応する第４カメラフィードセグメントと
を含む、ことと、
前記第１スライダバーから独立している第２スライダバーを前記第２ビデオセグメントに割り当てることであり、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生は同期し、前記第２スライダバーは、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を制御する、ことと、
前記ディスプレイの第３領域において前記第３カメラフィードセグメント及び前記第２スライダの第１コピーを表示することと、
前記ディスプレイの第４領域において前記第４カメラフィードセグメント及び前記第２スライダの第２コピーを表示することと、
前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を調整ために、前記第２スライダの前記第１コピー及び前記第２スライダの前記第２コピーのうちの少なくとも一方から第２命令を受け取ることと、
前記第２命令を受け取ることに応答して、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を調整することと
を更に有する、付記４８に記載の方法。

【0197】

（付記５０）
前記第１カメラフィードセグメントが第１時点での前記第１人物を表すことを決定することと、
前記第１カメラフィードセグメントが前記第１時点での前記第１人物を表すとの決定に応答して、
共通するスライダバーが前記第１時点に到達したことを決定することと、
前記共通スライダバーが前記第１時点に到達したとの決定に応答して、前記第１カメラフィードセグメントを強調表示することと
を更に有する、請求項４８に記載の方法。

【0198】

（付記５１）
共通するスライダバーは、該共通するスライダバー上で第１時点に位置しているマーカを有し、該マーカは、前記第１時点で起こるイベントに関連し、該イベントは、前記第１人物が前記実店舗内のラックにあるシェルフからアイテムを選択することに関連する、
付記４８に記載の方法。

【0199】

（付記５２）
前記アイテムは、アイテム識別番号を割り当てられ、
前記シェルフは、シェルフ識別番号を割り当てられ、
前記ラックは、ラック識別番号を割り当てられ、
前記マーカは、前記アイテム識別番号、前記シェルフ識別番号、及び前記ラック識別番号を含むメタデータを有する、
付記５１に記載の方法。

【0200】

（付記５３）
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記マーカに到達したことを決定することと、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記マーカに到達したとの決定に応答して、
前記マーカの前記メタデータに基づいて、前記第１人物が前記実店舗内の前記ラックにある前記シェルフから前記アイテムを選択することに関連した前記イベントが起きたことを決定することと、
前記イベントが起きたとの決定に応答して、前記ディスプレイの第３領域において第３カメラフィードセグメントを表示することと
を更に有し、
前記第１ビデオフィードは、前記実店舗に置かれており、前記ラックに向けられている第３カメラに対応する第３カメラフィードを更に有し、
前記第１ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記第３カメラフィードの記録に対応する前記第３カメラフィードセグメントを更に有する、
請求項５２に記載の方法。

【0201】

（付記５４）
前記第１人物に割り当てられ、前記終了タイムスタンプと新しい終了タイムスタンプとの間の第２時間インターバル中に起こる前記実店舗における前記第１人物の前記ショッピングセッションの部分を捕捉する第２ビデオセグメントを前記メモリに保存することであり、前記第２ビデオセグメントは、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第１カメラフィードの記録に対応する新しい第１カメラフィードセグメントと、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第２カメラフィードの記録に対応する新しい第２カメラフィードセグメントと
を含む、ことと、
第２スライダバーを前記第２ビデオセグメントに割り当てることであり、前記新しい第１カメラフィードセグメント及び前記新しい第２カメラフィードセグメントの再生は同期し、前記第２スライダバーは、前記新しい第１カメラフィードセグメント及び前記新しい第２カメラフィードセグメントの再生進行を制御する、ことと、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したことを決定することと、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したとの決定に応答して、
前記ディスプレイの前記第１領域において前記新しい第１カメラフィードセグメント及び前記第２スライダの第１コピーを表示することと、
前記ディスプレイの前記第２領域において前記新しい第２カメラフィードセグメント及び前記第２スライダの第２コピーを表示することと
を更に有する、付記４８に記載の方法。

【0202】

（付記５５）
実店舗に置かれており、前記実店舗内の第１位置に向けられている第１カメラに対応する第１カメラフィードと、前記実店舗に置かれており、前記実店舗内の第２位置に向けられている第２カメラに対応する第２カメラフィードと含む第１ビデオフィードを受け取るよう動作するインターフェースと、
表示要素と、
記憶要素と、
前記記憶要素及び前記表示要素へ通信可能に結合される処理要素と
を有し、
前記処理要素は、
第１人物に割り当てられ、開始タイムスタンプと終了タイムスタンプとの間の時間インターバル中に起こる前記実店舗における前記第１人物のショッピングセッションの部分を捕捉する第１ビデオセグメントを前記記憶要素に保存し、前記第１ビデオセグメントは、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第１カメラフィードの記録に対応する第１カメラフィードセグメントと、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第２カメラフィードの記録に対応する第２カメラフィードセグメントと
を含み、
第１スライダバーを前記第１ビデオセグメントに割り当て、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生は同期し、前記第１スライダバーは、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を制御し、
前記表示要素の第１領域において前記第１カメラフィードセグメント及び前記第１スライダの第１コピーを表示し、
前記表示要素の第２領域において前記第２カメラフィードセグメント及び前記第１スライダの第２コピーを表示し、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を調整ために、前記第１スライダの前記第１コピー及び前記第１スライダの前記第２コピーのうちの少なくとも一方から命令を受け取り、
前記命令を受け取ることに応答して、前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行を調整し、
前記第１人物に割り当てられ、前記終了タイムスタンプと新しい終了タイムスタンプとの間の第２時間インターバル中に起こる前記実店舗における前記第１人物の前記ショッピングセッションの部分を捕捉する第２ビデオセグメントを前記記憶要素に保存し、前記第２ビデオセグメントは、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第１カメラフィードの記録に対応する新しい第１カメラフィードセグメントと、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第２カメラフィードの記録に対応する新しい第２カメラフィードセグメントと
を含み、
第２スライダバーを前記第２ビデオセグメントに割り当て、前記新しい第１カメラフィードセグメント及び前記新しい第２カメラフィードセグメントの再生は同期し、前記第２スライダバーは、前記新しい第１カメラフィードセグメント及び前記新しい第２カメラフィードセグメントの再生進行を制御し、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したことを決定し、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したとの決定に応答して、
前記表示要素の前記第１領域において前記新しい第１カメラフィードセグメント及び前記第２スライダの第１コピーを表示し、
前記表示要素の前記第２領域において前記新しい第２カメラフィードセグメント及び前記第２スライダの第２コピーを表示する
よう動作する、
システム。

【0203】

（付記５６）
前記処理要素は、
第２人物に割り当てられ、第２開始タイムスタンプと第２終了タイムスタンプとの間の第２時間インターバル中に起こる前記実店舗における前記第２人物のショッピングセッションの部分を捕捉する第２ビデオセグメントを前記記憶要素に保存し、前記第２開始タイムスタンプは前記開始スタンプよりも遅く、前記終了タイムスタンプよりも早く、前記第２ビデオセグメントは、
前記第２開始タイムスタンプから前記第２終了タイムスタンプまでの前記第１カメラフィードの記録に対応する第３カメラフィードセグメントと、
前記第２開始タイムスタンプから前記第２終了タイムスタンプまでの前記第２カメラフィードの記録に対応する第４カメラフィードセグメントと
を含み、
前記第１スライダバーから独立している第２スライダバーを前記第２ビデオセグメントに割り当て、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生は同期し、前記第２スライダバーは、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を制御し、
前記表示要素の第３領域において前記第３カメラフィードセグメント及び前記第２スライダの第１コピーを表示し、
前記表示要素の第４領域において前記第４カメラフィードセグメント及び前記第２スライダの第２コピーを表示し、
前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を調整ために、前記第２スライダの前記第１コピー及び前記第２スライダの前記第２コピーのうちの少なくとも一方から第２命令を受け取り、
前記第２命令を受け取ることに応答して、前記第３カメラフィードセグメント及び前記第４カメラフィードセグメントの再生進行を調整する
よう更に動作する、
付記５５に記載のシステム。

【0204】

（付記５７）
前記処理要素は、
前記第１カメラフィードセグメントが第１時点での前記第１人物を表すことを決定し、
前記第１カメラフィードセグメントが前記第１時点での前記第１人物を表すとの決定に応答して、
共通するスライダバーが前記第１時点に到達したことを決定し、
前記共通スライダバーが前記第１時点に到達したとの決定に応答して、前記第１カメラフィードセグメントを強調表示する
よう更に動作する、
付記５５に記載のシステム。

【0205】

（付記５８）
共通するスライダバーは、該共通するスライダバー上で第１時点に位置しているマーカを有し、該マーカは、前記第１時点で起こるイベントに関連し、該イベントは、前記第１人物が前記実店舗内のラックにあるシェルフからアイテムを選択することに関連する、
付記５５に記載のシステム。

【0206】

（付記５９）
前記アイテムは、アイテム識別番号を割り当てられ、
前記シェルフは、シェルフ識別番号を割り当てられ、
前記ラックは、ラック識別番号を割り当てられ、
前記マーカは、前記アイテム識別番号、前記シェルフ識別番号、及び前記ラック識別番号を含むメタデータを有する、
付記５８に記載のシステム。

【0207】

（付記６０）
前記第１ビデオフィードは、前記実店舗に置かれており、前記ラックに向けられている第３カメラに対応する第３カメラフィードを更に有し、
前記第１ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記第３カメラフィードの記録に対応する第３カメラフィードセグメントを更に有し、
前記処理要素は、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記マーカに到達したことを決定し、
前記第１カメラフィードセグメント及び前記第２カメラフィードセグメントの再生進行が前記マーカに到達したとの決定に応答して、
前記マーカの前記メタデータに基づいて、前記第１人物が前記実店舗内の前記ラックにある前記シェルフから前記アイテムを選択することに関連した前記イベントが起きたことを決定し、
前記イベントが起きたとの決定に応答して、前記表示要素の第３領域において前記第３カメラフィードセグメントを表示する
よう更に動作する、
請求項５９に記載のシステム。

【0208】

（付記６１）
ディスプレイと、
実店舗に置かれており、前記実店舗に置かれている物理ラックの組の中の第１物理ラックに向けられているラックカメラからラックカメラフィードを受け取るよう構成されるインターフェースと、
前記ディスプレイへ通信可能に結合されるハードウェアプロセッサと
を有し、前記ハードウェアプロセッサは、
前記ディスプレイの第１領域において、仮想店舗の仮想レイアウトを表示し、前記仮想レイアウトは、前記実店舗の物理レイアウトをエミュレートするよう構成され、前記仮想レイアウトは、前記第１物理ラックに割り当てられている第１仮想ラックと、第２物理ラックに割り当てられている第２仮想ラックとを含み、前記仮想レイアウトにおける前記第１仮想ラック及び前記第２仮想ラックの配置は、前記実店舗における前記第１物理ラック及び前記第２物理ラックの配置をエミュレートするよう構成され、
前記第１物理ラックに関連したイベントの指示を受け取り、前記イベントは、前記実店舗にいる人が前記第１物理ラックと関係を持っていることを含み、
前記第１物理ラックに関連した前記イベントの前記指示を受け取ることに応答して、
前記ディスプレイの第２領域において、前記第１仮想ラックを表示し、前記第１仮想ラックは、第１仮想シェルフ及び第２仮想シェルフを含み、前記第１仮想シェルフは第１仮想アイテムを含み、前記第２仮想シェルフは第２仮想アイテムを含み、前記第１仮想アイテムは、前記第１物理ラックの第１物理シェルフにある第１物理アイテムのグラフィカル表現を含み、前記第２仮想アイテムは、前記第１物理ラックの第２物理シェルフにある第２物理アイテムのグラフィカル表現を含み、
前記ディスプレイの第３領域において、開始タイムスタンプから終了タイムスタンプまでの前記ラックカメラフィードの記録に対応するラックビデオセグメントを表示し、前記ラックビデオセグメントは、前記第１物理ラックに関連した前記イベントを表す
よう構成される、
装置。

【0209】

（付記６２）
前記インターフェースは、前記実店舗に置かれている第２ラックカメラから第２ラックカメラフィードを受信するよう更に構成され、前記第２ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第２物理ラックに向けられており、
前記プロセッサは、
前記第２物理ラックに関連した第２イベントの指示を受け取り、前記第２イベントは、前記人が前記第２物理ラックと関係を持っていることを有し、
前記第２物理ラックに関連した前記第２イベントの前記指示を受け取ることに応答して、
前記ディスプレイの前記第２領域において、前記第２仮想ラックを表示し、前記第２仮想ラックは、第３仮想シェルフ及び第４仮想シェルフを含み、前記第３仮想シェルフは第３仮想アイテムを含み、前記第４仮想シェルフは第４仮想アイテムを含み、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフにある第３物理アイテムのグラフィカル表現を含み、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフにある第４物理アイテムのグラフィカル表現を含み、
前記ディスプレイの前記第３領域において、第２開始タイムスタンプから第２終了タイムスタンプまでの前記第２ラックカメラフィードの記録に対応する第２ラックビデオセグメントを表示し、前記第２ラックビデオセグメントは、前記第２物理ラックに関連した前記第２イベントを表す
よう更に構成される、
付記６１に記載の装置。

【0210】

（付記６３）
前記第１物理ラックに関連した前記イベントは、前記第１物理アイテムが前記第１物理ラックの前記第１物理シェルフの第１ゾーンから選択されることを有し、前記第１物理シェルフの前記第１ゾーンへ結合されている重量センサは、前記第１物理アイテムが前記第１物理シェルフから選択されることを検出するよう構成され、
前記イベントの前記指示は、前記重量センサから受け取られた情報を含む、
付記６１に記載の装置。

【0211】

（付記６４）
前記第１仮想ラックを表示することに応答して、前記プロセッサは、前記第１仮想シェルフ上の前記第１仮想アイテムを強調表示するよう更に構成される、
付記６３に記載の装置。

【0212】

（付記６５）
前記インターフェースは、前記実店舗に置かれている第１カメラに対応するビデオフィードを受け取るよう更に構成され、
前記プロセッサは、
第１人物に割り当てられ、前記実店舗における前記第１人物のショッピングセッションの部分を捕捉する第１ビデオセグメントをメモリに記憶し、前記第１ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記ビデオフィードの記録に対応し、
スライダバーを前記第１ビデオセグメントに割り当て、前記スライダバーは、前記第１ビデオセグメントの再生進行を制御し、前記イベントは第１時点で起こり、前記スライダバーは、該スライダバー上で前記第１時点に位置しているマーカを有し、該マーカは、前記第１時点で起こる前記イベントに関連し、前記マーカは、前記第１仮想アイテムに割り当てられているアイテム識別番号と、前記第１仮想ラックに割り当てられているラック識別番号と、前記第１仮想ラックのゾーンに割り当てられているゾーン識別番号とを有し、前記イベントの前記指示は、前記第１ビデオセグメントの再生進行が前記マーカに到達したことを含み、
前記第１仮想ラックを表示することに応答して、前記メタデータに基づいて、前記第１仮想ラック上の前記第１仮想アイテムを強調表示する
よう更に構成される、
付記６１に記載の装置。

【0213】

（付記６６）
前記スライダバーは、該スライダバー上で第２時点に位置している第２マーカを有し、前記第２マーカは、前記第２時点で起こる第２イベントに関連し、前記第２イベントは、前記第２物理ラックに関連し、前記第２マーカは、第３仮想アイテムに割り当てられている第２アイテム識別番号と、前記第２仮想ラックに割り当てられている第２ラック識別番号と、前記第２仮想ラックの第２ゾーンに割り当てられている第２ゾーン識別番号とを含む第２メタデータを有し、
前記プロセッサは、
前記第１ビデオセグメントの再生進行が前記第２マーカに到達したことを決定し、
前記第１ビデオセグメントの再生進行が前記第２マーカに到達したとの決定に応答して、
前記ディスプレイの前記第２領域において、前記第２仮想ラックを表示し、前記第２仮想ラックは、第３仮想シェルフ及び第４仮想シェルフを有し、前記第３仮想シェルフは第３仮想アイテムを有し、前記第４仮想シェルフは第４仮想アイテムを有し、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフに置かれている第３物理アイテムのグラフィカル表現を有し、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフに置かれている第４物理アイテムのグラフィカル表現を有し、
前記第２メタデータに基づいて、前記第２仮想ラック上の前記第３仮想アイテムを強調表示する
よう更に構成される、
付記６５に記載の装置。

【0214】

（付記６７）
前記第１物理ラックに関連した前記イベントの前記指示は、前記実店舗内に設置されているセンサから受け取られた入力の組に基づいて、前記イベントの検出に応答してアルゴリズムによって生成された情報を含む、
付記６１に記載の装置。

【0215】

（付記６８）
実店舗に置かれており、前記実店舗に置かれている物理ラックの組の中の第１物理ラックに向けられているラックカメラからラックカメラフィードを受け取ることと、
前記ディスプレイの第１領域において、仮想店舗の仮想レイアウトを表示することであり、前記仮想レイアウトは、前記実店舗の物理レイアウトをエミュレートするよう構成され、前記仮想レイアウトは、前記第１物理ラックに割り当てられている第１仮想ラックと、第２物理ラックに割り当てられている第２仮想ラックとを含み、前記仮想レイアウトにおける前記第１仮想ラック及び前記第２仮想ラックの配置は、前記実店舗における前記第１物理ラック及び前記第２物理ラックの配置をエミュレートするよう構成される、ことと、
前記第１物理ラックに関連したイベントの指示を受け取ることであり、前記イベントは、前記実店舗にいる人が前記第１物理ラックと関係を持っていることを含む、ことと、
前記第１物理ラックに関連した前記イベントの前記指示を受け取ることに応答して、
前記ディスプレイの第２領域において、前記第１仮想ラックを表示することであり、前記第１仮想ラックは、第１仮想シェルフ及び第２仮想シェルフを含み、前記第１仮想シェルフは第１仮想アイテムを含み、前記第２仮想シェルフは第２仮想アイテムを含み、前記第１仮想アイテムは、前記第１物理ラックの第１物理シェルフにある第１物理アイテムのグラフィカル表現を含み、前記第２仮想アイテムは、前記第１物理ラックの第２物理シェルフにある第２物理アイテムのグラフィカル表現を含む、ことと、
前記ディスプレイの第３領域において、開始タイムスタンプから終了タイムスタンプまでの前記ラックカメラフィードの記録に対応するラックビデオセグメントを表示することであり、前記ラックビデオセグメントは、前記第１物理ラックに関連した前記イベントを表す、ことと
を有する方法。

【0216】

（付記６９）
前記実店舗に置かれている第２ラックカメラから第２ラックカメラフィードを受信することであり、前記第２ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第２物理ラックに向けられている、ことと、
前記第２物理ラックに関連した第２イベントの指示を受け取ることであり、前記第２イベントは、前記人が前記第２物理ラックと関係を持っていることを有する、ことと、
前記第２物理ラックに関連した前記第２イベントの前記指示を受け取ることに応答して、
前記ディスプレイの前記第２領域において、前記第２仮想ラックを表示することであり、前記第２仮想ラックは、第３仮想シェルフ及び第４仮想シェルフを含み、前記第３仮想シェルフは第３仮想アイテムを含み、前記第４仮想シェルフは第４仮想アイテムを含み、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフにある第３物理アイテムのグラフィカル表現を含み、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフにある第４物理アイテムのグラフィカル表現を含む、ことと、
前記ディスプレイの前記第３領域において、第２開始タイムスタンプから第２終了タイムスタンプまでの前記第２ラックカメラフィードの記録に対応する第２ラックビデオセグメントを表示することであり、前記第２ラックビデオセグメントは、前記第２物理ラックに関連した前記第２イベントを表す、ことと
を更に有する、付記６８に記載の方法。

【0217】

（付記７０）
前記第１物理ラックに関連した前記イベントは、前記第１物理アイテムが前記第１物理ラックの前記第１物理シェルフの第１ゾーンから選択されることを有し、前記第１物理シェルフの前記第１ゾーンへ結合されている重量センサは、前記第１物理アイテムが前記第１物理シェルフから選択されることを検出するよう構成され、
前記イベントの前記指示は、前記重量センサから受け取られた情報を含む、
付記６８に記載の方法。

【0218】

（付記７１）
前記第１仮想ラックを表示することに応答して、前記第１仮想シェルフ上の前記第１仮想アイテムを強調表示することを更に有する、
付記７０に記載の方法。

【0219】

（付記７２）
前記実店舗に置かれている第１カメラに対応するビデオフィードを受け取ることと、
第１人物に割り当てられ、前記実店舗における前記第１人物のショッピングセッションの部分を捕捉する第１ビデオセグメントを記憶することであり、前記第１ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記ビデオフィードの記録に対応する、ことと、
スライダバーを前記第１ビデオセグメントに割り当てることであり、前記スライダバーは、前記第１ビデオセグメントの再生進行を制御し、前記イベントは第１時点で起こり、前記スライダバーは、該スライダバー上で前記第１時点に位置しているマーカを有し、該マーカは、前記第１時点で起こる前記イベントに関連し、前記マーカは、前記第１仮想アイテムに割り当てられているアイテム識別番号と、前記第１仮想ラックに割り当てられているラック識別番号と、前記第１仮想ラックのゾーンに割り当てられているゾーン識別番号とを有し、前記イベントの前記指示は、前記第１ビデオセグメントの再生進行が前記マーカに到達したことを含む、ことと、
前記第１仮想ラックを表示することに応答して、前記メタデータに基づいて、前記第１仮想ラック上の前記第１仮想アイテムを強調表示することと
を更に有する、付記６８に記載の方法。

【0220】

（付記７３）
前記第１ビデオセグメントの再生進行が第２マーカに到達したことを決定することであり、前記スライダバーは、該スライダバー上で第２時点に位置している前記第２マーカを有し、前記第２マーカは、前記第２時点で起こる第２イベントに関連し、前記第２イベントは、前記第２物理ラックに関連し、前記第２マーカは、第３仮想アイテムに割り当てられている第２アイテム識別番号と、前記第２仮想ラックに割り当てられている第２ラック識別番号と、前記第２仮想ラックの第２ゾーンに割り当てられている第２ゾーン識別番号とを含む第２メタデータを有する、ことと、
前記第１ビデオセグメントの再生進行が前記第２マーカに到達したとの決定に応答して、
前記ディスプレイの前記第２領域において、前記第２仮想ラックを表示することであり、前記第２仮想ラックは、第３仮想シェルフ及び第４仮想シェルフを有し、前記第３仮想シェルフは第３仮想アイテムを有し、前記第４仮想シェルフは第４仮想アイテムを有し、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフに置かれている第３物理アイテムのグラフィカル表現を有し、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフに置かれている第４物理アイテムのグラフィカル表現を有する、ことと、
前記第２メタデータに基づいて、前記第２仮想ラック上の前記第３仮想アイテムを強調表示することと
を更に有する、付記７２に記載の方法。

【0221】

（付記７４）
前記第１物理ラックに関連した前記イベントの前記指示は、前記実店舗内に設置されているセンサから受け取られた入力の組に基づいて、前記イベントの検出に応答してアルゴリズムによって生成された情報を含む、
付記６８に記載の方法。

【0222】

（付記７５）
表示要素と、
実店舗に置かれており、前記実店舗に置かれている物理ラックの組の中の第１物理ラックに向けられているラックカメラからラックカメラフィードを受け取るよう、かつ、前記実店舗に置かれており、前記実店舗に置かれている前記物理ラックの組の中の第２物理ラックに向けられている第２ラックカメラから第２ラックカメラフィードを受け取るよう動作するインターフェースと、
前記表示要素へ通信可能に結合される処理要素と
を有し、前記処理要素は、
前記表示要素の第１領域において、仮想店舗の仮想レイアウトを表示し、前記仮想レイアウトは、前記実店舗の物理レイアウトをエミュレートするよう構成され、前記仮想レイアウトは、前記第１物理ラックに割り当てられている第１仮想ラックと、第２物理ラックに割り当てられている第２仮想ラックとを含み、前記仮想レイアウトにおける前記第１仮想ラック及び前記第２仮想ラックの配置は、前記実店舗における前記第１物理ラック及び前記第２物理ラックの配置をエミュレートするよう構成され、
前記第１物理ラックに関連したイベントの指示を受け取り、前記イベントは、前記実店舗にいる人が前記第１物理ラックと関係を持っていることを含み、
前記第１物理ラックに関連した前記イベントの前記指示を受け取ることに応答して、
前記表示要素の第２領域において、前記第１仮想ラックを表示し、前記第１仮想ラックは、第１仮想シェルフ及び第２仮想シェルフを含み、前記第１仮想シェルフは第１仮想アイテムを含み、前記第２仮想シェルフは第２仮想アイテムを含み、前記第１仮想アイテムは、前記第１物理ラックの第１物理シェルフにある第１物理アイテムのグラフィカル表現を含み、前記第２仮想アイテムは、前記第１物理ラックの第２物理シェルフにある第２物理アイテムのグラフィカル表現を含み、
前記表示要素の第３領域において、開始タイムスタンプから終了タイムスタンプまでの前記ラックカメラフィードの記録に対応するラックビデオセグメントを表示し、前記ラックビデオセグメントは、前記第１物理ラックに関連した前記イベントを表し、
前記第２物理ラックに関連した第２イベントの指示を受け取り、前記第２イベントは、前記人が前記第２物理ラックと関係を持っていることを有し、
前記第２物理ラックに関連した前記第２イベントの前記指示を受け取ることに応答して、
前記表示要素の前記第２領域において、前記第２仮想ラックを表示し、前記第２仮想ラックは、第３仮想シェルフ及び第４仮想シェルフを含み、前記第３仮想シェルフは第３仮想アイテムを含み、前記第４仮想シェルフは第４仮想アイテムを含み、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフにある第３物理アイテムのグラフィカル表現を含み、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフにある第４物理アイテムのグラフィカル表現を含み、
前記表示要素の前記第３領域において、第２開始タイムスタンプから第２終了タイムスタンプまでの前記第２ラックカメラフィードの記録に対応する第２ラックビデオセグメントを表示し、前記第２ラックビデオセグメントは、前記第２物理ラックに関連した前記第２イベントを表す
よう動作する、
システム。

【0223】

（付記７６）
前記第１物理ラックに関連した前記イベントは、前記第１物理アイテムが前記第１物理ラックの前記第１物理シェルフの第１ゾーンから選択されることを有し、前記第１物理シェルフの前記第１ゾーンへ結合されている重量センサは、前記第１物理アイテムが前記第１物理シェルフから選択されることを検出するよう構成され、
前記イベントの前記指示は、前記重量センサから受け取られた情報を含む、
付記７５に記載のシステム。

【0224】

（付記７７）
前記第１仮想ラックを表示することに応答して、前記処理要素は、前記第１仮想シェルフ上の前記第１仮想アイテムを強調表示するよう更に動作する、
付記７６に記載のシステム。

【0225】

（付記７８）
前記インターフェースは、前記実店舗に置かれている第１カメラに対応するビデオフィードを受け取るよう更に動作し、
前記処理要素は、
第１人物に割り当てられ、前記実店舗における前記第１人物のショッピングセッションの部分を捕捉する第１ビデオセグメントを記憶要素に記憶し、前記第１ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記ビデオフィードの記録に対応し、
スライダバーを前記第１ビデオセグメントに割り当て、前記スライダバーは、前記第１ビデオセグメントの再生進行を制御し、前記イベントは第１時点で起こり、前記スライダバーは、該スライダバー上で前記第１時点に位置しているマーカを有し、該マーカは、前記第１時点で起こる前記イベントに関連し、前記マーカは、前記第１仮想アイテムに割り当てられているアイテム識別番号と、前記第１仮想ラックに割り当てられているラック識別番号と、前記第１仮想ラックのゾーンに割り当てられているゾーン識別番号とを有し、前記イベントの前記指示は、前記第１ビデオセグメントの再生進行が前記マーカに到達したことを含み、
前記第１仮想ラックを表示することに応答して、前記メタデータに基づいて、前記第１仮想ラック上の前記第１仮想アイテムを強調表示する
よう更に動作する、
付記７５に記載のシステム。

【0226】

（付記７９）
前記スライダバーは、該スライダバー上で第２時点に位置している第２マーカを有し、前記第２マーカは、前記第２時点で起こる第２イベントに関連し、前記第２イベントは、前記第２物理ラックに関連し、前記第２マーカは、第３仮想アイテムに割り当てられている第２アイテム識別番号と、前記第２仮想ラックに割り当てられている第２ラック識別番号と、前記第２仮想ラックの第２ゾーンに割り当てられている第２ゾーン識別番号とを含む第２メタデータを有し、
前記処理要素は、
前記第１ビデオセグメントの再生進行が前記第２マーカに到達したことを決定し、
前記第１ビデオセグメントの再生進行が前記第２マーカに到達したとの決定に応答して、
前記表示要素の前記第２領域において、前記第２仮想ラックを表示し、前記第２仮想ラックは、第３仮想シェルフ及び第４仮想シェルフを有し、前記第３仮想シェルフは第３仮想アイテムを有し、前記第４仮想シェルフは第４仮想アイテムを有し、前記第３仮想アイテムは、前記第２物理ラックの第３物理シェルフに置かれている第３物理アイテムのグラフィカル表現を有し、前記第４仮想アイテムは、前記第２物理ラックの第４物理シェルフに置かれている第４物理アイテムのグラフィカル表現を有し、
前記第２メタデータに基づいて、前記第２仮想ラック上の前記第３仮想アイテムを強調表示する
よう更に動作する、
付記７８に記載のシステム。

【0227】

（付記８０）
前記第１物理ラックに関連した前記イベントの前記指示は、前記実店舗内に設置されているセンサから受け取られた入力の組に基づいて、前記イベントの検出に応答してアルゴリズムによって生成された情報を含む、
付記７５に記載のシステム。

【図1A】

【図1B】

【図2A】

【図2B】

【図3A】

【図3B】

【図4】

【図5A】

【図5B】

【図6】

【図7A】

【図7B】

【図7C】

【図8】

【図9A】

【図9B】

【図9C】

【図9D】

【図10】

【図11A】

【図11B】

【図12】

【図13A】

【図13B】

【図13C】

【図13D】

【図14】

【図15】

【図16】