知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-06-07
(45)【発行日】2024-06-17
(54)【発明の名称】キャッシュレス決済システムおよび情報端末
(51)【国際特許分類】
G06Q 20/32 20120101AFI20240610BHJP
【ＦＩ】
G06Q20/32 300
【請求項の数】
32
(21)【出願番号】P 2021558056
(86)(22)【出願日】2019-11-18
(86)【国際出願番号】 JP2019045134
(87)【国際公開番号】W WO2021100096
(87)【国際公開日】2021-05-27
【審査請求日】2022-04-26
(73)【特許権者】
【識別番号】000005810
【氏名又は名称】マクセル株式会社
(74)【代理人】
【識別番号】110002066
【氏名又は名称】弁理士法人筒井国際特許事務所
(72)【発明者】
【氏名】橋本 康宣
(72)【発明者】
【氏名】高見澤 尚久
(72)【発明者】
【氏名】奥 万寿男
【審査官】松野 広一
(56)【参考文献】
【文献】特許第６５４２４５５（ＪＰ，Ｂ１）
【文献】韓国公開特許第１０－２０１７－００３１７２２（ＫＲ，Ａ）
【文献】米国特許出願公開第２０１６／０３５０７２９（ＵＳ，Ａ１）
【文献】特表２０１８－５０４６８８（ＪＰ，Ａ）
【文献】国際公開第２０１６／０５２３７９（ＷＯ，Ａ１）
【文献】米国特許出願公開第２０１６／０３７１６７４（ＵＳ，Ａ１）
【文献】特開２０１９－１９７３３２（ＪＰ，Ａ）
【文献】特許第６５２８１６０（ＪＰ，Ｂ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｑ １０／００－９９／００
(57)【特許請求の範囲】
【請求項1】
カメラおよびキャッシュレス決済機能を持つ情報端末と、キャッシュレス決済処理を実行するサーバとが、通信で接続されたキャッシュレス決済システムであって、前記情報端末は、店舗が掲示する決済先情報のコードと、商品やサービスの購入金額に対応する決済金額とが含まれる画像を前記カメラで取得し、
前記画像に基づいて、前記決済先情報と前記決済金額との両方を認識した場合、
前記決済先情報と前記決済金額とを含む決済命令を前記サーバに送信し、
さらに、前記情報端末は、
前記画像から前記決済金額を認識する際、前記画像から抽出された文字列が示す第一の認識金額と、マイクから取得された音声データに含まれる第二の認識金額とが一致する場合に、前記認識金額を前記決済金額として認識することを特徴とする、
キャッシュレス決済システム。
【請求項2】
請求項１記載のキャッシュレス決済システムにおいて、前記サーバは、前記キャッシュレス決済処理の完了後、決済処理完了確認情報を前記情報端末に送信し、
前記情報端末は、前記決済処理完了確認情報をユーザに対して出力する、
キャッシュレス決済システム。
【請求項3】
請求項１記載のキャッシュレス決済システムにおいて、前記情報端末は、前記決済先情報と前記決済金額との両方を認識した時点から、設定された長さの決済時間のタイマのカウントを開始させ、前記決済時間の画像を表示画面に表示し、前記決済時間のタイマの満了後、前記決済命令を発行する、
キャッシュレス決済システム。
【請求項4】
請求項１記載のキャッシュレス決済システムにおいて、前記情報端末は、前記コードと前記決済金額とが同時に写っている前記画像に基づいて、前記決済先情報と前記決済金額との両方を認識する、
キャッシュレス決済システム。
【請求項5】
請求項１記載のキャッシュレス決済システムにおいて、前記情報端末は、前記コードが写っている第１画像から前記決済先情報を認識し、次に、前記決済金額が写っている第２画像から前記決済金額を認識する、
キャッシュレス決済システム。
【請求項6】
請求項１記載のキャッシュレス決済システムにおいて、前記情報端末は、前記決済金額が写っている第１画像から前記決済金額を認識し、次に、前記コードが写っている第２画像から前記決済先情報を認識する、
キャッシュレス決済システム。
【請求項7】
請求項１記載のキャッシュレス決済システムにおいて、前記情報端末は、複数の商品やサービスの購入に関する１回のキャッシュレス決済の際、前記画像から個別の商品やサービスの購入金額を認識し、合計としての前記決済金額を表示する毎に、設定された長さの決済時間のタイマのカウントを開始させ、前記決済時間の画像を表示画面に表示し、前記決済時間のタイマの満了後、前記決済命令を発行する、
キャッシュレス決済システム。
【請求項8】
請求項３記載のキャッシュレス決済システムにおいて、前記情報端末は、前記決済時間の途中に、所定のキャンセル操作を検出した場合、前記決済命令を発行しない、
キャッシュレス決済システム。
【請求項9】
請求項２記載のキャッシュレス決済システムにおいて、前記情報端末は、ヘッドマウントディスプレイである、
キャッシュレス決済システム。
【請求項10】
請求項２記載のキャッシュレス決済システムにおいて、前記情報端末として、ヘッドマウントディスプレイと、ウェアラブル端末とを有し、
前記ヘッドマウントディスプレイは、前記決済命令を前記サーバに送信し、
前記ウェアラブル端末は、前記決済処理完了確認情報を表示する、
キャッシュレス決済システム。
【請求項11】
請求項９記載のキャッシュレス決済システムにおいて、前記ヘッドマウントディスプレイは、前記決済先情報と前記決済金額との両方を認識した後、第１ジェスチャを検出した場合、前記決済命令を送信し、第２ジェスチャを検出した場合、前記決済命令を発行しない、
キャッシュレス決済システム。
【請求項12】
請求項１記載のキャッシュレス決済システムにおいて、前記情報端末は、前記画像から前記決済金額を認識する際、前記画像内から抽出された候補文字列毎に、前記決済金額であるかどうかに関する複数の評価項目における評価項目毎の評価点を算出し、複数の評価点から総合的評価点を算出し、前記候補文字列毎の前記総合的評価点のうち閾値以上で最高となる候補文字列を、前記第一の認識金額として選択し、
前記閾値以上となる候補文字列が無い場合には、前記決済金額が認識できなかったという結果とする、
キャッシュレス決済システム。
【請求項13】
請求項１記載のキャッシュレス決済システムにおいて、前記情報端末は、前記画像から前記決済金額を認識する際、前記画像内から抽出された候補文字列を表す画像を表示画面に表示し、ユーザの操作に基づいて、前記候補文字列から選択された候補文字列を、前記第一の認識金額として選択する、
キャッシュレス決済システム。
【請求項14】
請求項１記載のキャッシュレス決済システムにおいて、前記店舗内に、決済機能を持つストア端末を有し、
前記情報端末は、前記ストア端末と無線通信し、前記ストア端末から前記決済金額に関する決済金額情報を取得し、前記画像から認識した前記決済金額と、前記決済金額情報の決済金額との一致を確認し、前記決済先情報と前記決済金額との両方を認識した場合、前記決済命令を発行する、
キャッシュレス決済システム。
【請求項15】
請求項２記載のキャッシュレス決済システムにおいて、前記店舗内に、決済機能を持つストア端末を有し、
前記情報端末は、前記ストア端末と無線通信し、前記決済処理完了確認情報のうちの決済完了ＩＤを含むデータを前記ストア端末へ送信する、
キャッシュレス決済システム。
【請求項16】
請求項１記載のキャッシュレス決済システムにおいて、予め前記店舗内における前記コードの掲示の第１位置と前記決済金額の掲示の第２位置との配置関係が規定されており、
前記情報端末は、前記配置関係の規定に基づいて、前記画像から前記決済先情報と前記決済金額との両方を認識する、
キャッシュレス決済システム。
【請求項17】
カメラおよびキャッシュレス決済機能を持つ情報端末と、キャッシュレス決済処理を実行するサーバとが通信で接続されたキャッシュレス決済を行うキャッシュレス決済システムにおける前記情報端末であって、通信部と、
制御部と、を備え、
前記情報端末は、店舗が掲示する決済先情報のコードと、商品やサービスの購入金額に対応する決済金額とが含まれる画像を前記カメラで取得し、
前記画像に基づいて、前記決済先情報と前記決済金額との両方を認識した場合、
前記通信部は、前記決済先情報と前記決済金額とを含む決済命令を前記サーバに送信し、
さらに、前記制御部は、
前記画像から前記決済金額を認識する際、前記画像から抽出された文字列が示す第一の認識金額と、マイクから取得された音声データに含まれる第二の認識金額とが一致する場合に、前記認識金額を前記決済金額として認識するように制御する、
ことを特徴とする、
情報端末。
【請求項18】
請求項１７記載の情報端末において、前記サーバは、前記キャッシュレス決済処理の完了後、決済処理完了確認情報を前記情報端末に送信し、
前記情報端末は、前記決済処理完了確認情報をユーザに対して出力する、
情報端末。
【請求項19】
請求項１７記載の情報端末において、前記情報端末は、前記決済先情報と前記決済金額との両方を認識した時点から、設定された長さの決済時間のタイマのカウントを開始させ、前記決済時間の画像を表示画面に表示し、前記決済時間のタイマの満了後、前記決済命令を発行する、
情報端末。
【請求項20】
請求項１７記載の情報端末において、前記情報端末は、前記コードと前記決済金額とが同時に写っている前記画像に基づいて、前記決済先情報と前記決済金額との両方を認識する、
情報端末。
【請求項21】
請求項１７記載の情報端末において、前記情報端末は、前記コードが写っている第１画像から前記決済先情報を認識し、次に、前記決済金額が写っている第２画像から前記決済金額を認識する、
情報端末。
【請求項22】
請求項１７記載の情報端末において、前記情報端末は、前記決済金額が写っている第１画像から前記決済金額を認識し、次に、前記コードが写っている第２画像から前記決済先情報を認識する、
情報端末。
【請求項23】
請求項１７記載の情報端末において、前記情報端末は、複数の商品やサービスの購入に関する１回のキャッシュレス決済の際、前記画像から個別の商品やサービスの購入金額を認識し、合計としての前記決済金額を表示する毎に、設定された長さの決済時間のタイマのカウントを開始させ、前記決済時間の画像を表示画面に表示し、前記決済時間のタイマの満了後、前記決済命令を発行する、
情報端末。
【請求項24】
請求項１９記載の情報端末において、前記情報端末は、前記決済時間の途中に、所定のキャンセル操作を検出した場合、前記決済命令を発行しない、
情報端末。
【請求項25】
請求項１８記載の情報端末において、前記情報端末は、ヘッドマウントディスプレイである、
情報端末。
【請求項26】
請求項１８記載の情報端末において、前記情報端末として、ヘッドマウントディスプレイと、ウェアラブル端末とを有し、
前記ヘッドマウントディスプレイは、前記決済命令を前記サーバに送信し、
前記ウェアラブル端末は、前記決済処理完了確認情報を表示する、
情報端末。
【請求項27】
請求項２５記載の情報端末において、前記ヘッドマウントディスプレイは、前記決済先情報と前記決済金額との両方を認識した後、第１ジェスチャを検出した場合、前記決済命令を送信し、第２ジェスチャを検出した場合、前記決済命令を発行しない、
情報端末。
【請求項28】
請求項１７記載の情報端末において、前記情報端末は、前記画像から前記決済金額を認識する際、前記画像内から抽出された候補文字列毎に、前記決済金額であるかどうかに関する複数の評価項目における評価項目毎の評価点を算出し、複数の評価点から総合的評価点を算出し、前記候補文字列毎の前記総合的評価点のうち閾値以上で最高となる候補文字列を、前記第一の認識金額として選択し、
前記閾値以上となる候補文字列が無い場合には、前記決済金額が認識できなかったという結果とする、
情報端末。
【請求項29】
請求項１７記載の情報端末において、前記情報端末は、前記画像から前記決済金額を認識する際、前記画像内から抽出された候補文字列を表す画像を表示画面に表示し、ユーザの操作に基づいて、前記候補文字列から選択された候補文字列を、前記第一の認識金額として選択する、
情報端末。
【請求項30】
請求項１７記載の情報端末において、前記店舗内に、決済機能を持つストア端末を有し、
前記情報端末は、前記ストア端末と無線通信し、前記ストア端末から前記決済金額に関する決済金額情報を取得し、前記画像から認識した前記決済金額と、前記決済金額情報の決済金額との一致を確認し、前記決済先情報と前記決済金額との両方を認識した場合、前記決済命令を発行する、
情報端末。
【請求項31】
請求項１８記載の情報端末において、前記店舗内に、決済機能を持つストア端末を有し、
前記情報端末は、前記ストア端末と無線通信し、前記決済処理完了確認情報のうちの決済完了ＩＤを含むデータを前記ストア端末へ送信する、
情報端末。
【請求項32】
請求項１７記載の情報端末において、予め前記店舗内における前記コードの掲示の第１位置と前記決済金額の掲示の第２位置との配置関係が規定されており、
前記情報端末は、前記配置関係の規定に基づいて、前記画像から前記決済先情報と前記決済金額との両方を認識する、
情報端末。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、キャッシュレス決済システムおよび情報端末の技術に関する。
【背景技術】
【0002】
近年では、店舗において購入者であるユーザが商品やサービス等の購入に伴う決済、言い換えると購入金額の支払いを行う際に、スマートフォン等の情報端末を用いて現金を不要とする決済（キャッシュレス決済と記載する場合がある）を行う場合が増えている。キャッシュレス決済は、ＮＦＣ（Near Field Communication）等の非接触・近距離通信機能を持つＩＣチップを搭載したデバイスを用いる方式や、情報端末のカメラでＱＲ（Quick Response）コード（登録商標）等のコードを読み取る方式がある。後者の方式は、ストアスキャン方式やユーザスキャン方式があり、既に販売済みのスマートフォンにも機能を後付けできる等の利点がある。
【0003】
ストアスキャン方式は、購入者のスマートフォンの表示画面にＱＲコードを表示し、店舗側の設備がそのＱＲコードを読み取る方式である。ユーザスキャン方式は、店舗側がＱＲコードを掲示し、購入者であるユーザのスマートフォンに備えるカメラでそのＱＲコードを読み取る方式である。ストアスキャン方式は、店舗側の設備の導入コストが比較的多くなりがちである。一方、ユーザスキャン方式では、固定的なＱＲコードとする場合には、キャッシュレスレス決済の導入コストが低くなる。固定的なＱＲコードは、コード化される情報として、商品の金額情報を含めず、店舗に関する情報、言い換えると決済先、売主に関する情報のみを含めるものである。
【0004】
上記キャッシュレス決済に関する先行技術例として、特開２０１８－１１６４９９号（特許文献１）が挙げられる。特許文献１には、商品購入のために必要なユーザの操作を簡易化できる無人販売方式等の技術として、端末装置は、第１識別情報を読み取り、商品の購入金額の決定操作を受け付ける旨が記載されている。
【先行技術文献】
【特許文献】
【0005】
【文献】特開２０１８－１１６４９９号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
特許文献１の技術は、固定的なＱＲコードを表示させるユーザスキャン方式のキャッシュレス決済システムの一例と言える。この技術は、ＱＲコードから読み取った売主情報、言い換えると店舗情報と、サーバより取得する基本金額情報とから、購入者は、スマートフォンで購入金額と基本金額との補正の操作を行い、決済を行う。特許文献１を含む従来技術では、ユーザが、キャッシュレス決済の際に、金額に関する入力操作あるいは補正操作を行う必要があり、ユーザはそのような操作に手間を感じる。キャッシュレス決済の際には、利便性や効率性、普及のしやすさ等の観点から、ユーザによる操作の手間が少ないことが好ましい。従来技術では操作の手間に関して検討や改善の余地があり、操作をさらに低減できるキャッシュレス決済方式の提供が望ましい。
【0007】
また、特許文献１の技術は、商品金額のバリエーションが少ない無人店舗での決済方式を示しており、商品金額のバリエーションが大きい有人店舗での決済方式については示していない。操作の手間の観点と共に、有人店舗や無人店舗等の店舗属性に係らずに好適に適用可能であるキャッシュレス決済方式の提供が望ましい。
【0008】
本発明の目的は、キャッシュレス決済技術に関して、購入者であるユーザによる操作の手間が少なく好適にキャッシュレス決済が可能である技術を提供することである。
【課題を解決するための手段】
【0009】
本発明のうち代表的な実施の形態は、以下に示す構成を有する。実施の形態のキャッシュレス決済システムは、購入者であるユーザが使用するカメラおよびキャッシュレス決済機能を持つ情報端末と、キャッシュレス決済処理を実行するサーバとが通信で接続され、店舗での前記ユーザによる商品やサービスの購入に伴うキャッシュレス決済を行うキャッシュレス決済システムであって、前記情報端末は、前記ユーザの操作に基づいて、前記店舗が掲示する決済先情報のコードと、前記商品やサービスの購入金額に対応する決済金額とを、前記カメラで撮影し、撮影画像に基づいて、前記決済先情報と前記決済金額との両方を認識した場合、前記決済先情報と前記決済金額とを含む決済命令を発行し前記サーバに送信して前記キャッシュレス決済処理を実行させる。
【発明の効果】
【0010】
本発明のうち代表的な実施の形態によれば、キャッシュレス決済技術に関して、購入者であるユーザによる操作の手間が少なく好適なキャッシュレス決済が可能である。
【図面の簡単な説明】
【0011】
【図1】本発明の実施の形態１のキャッシュレス決済システムの構成を示す。
【図2】実施の形態１で、情報端末の表示画面例を示す。
【図3】実施の形態１で、情報端末の構成例を示す。
【図4】実施の形態１で、情報端末のアプリによる処理フローを示す。
【図5】本発明の実施の形態２のキャッシュレス決済システムにおける、情報端末の表示画面例を示す。
【図6】実施の形態２で、情報端末のアプリによる処理フローを示す。
【図7】本発明の実施の形態３のキャッシュレス決済システムの構成を示す。
【図8】実施の形態３で、情報端末の表示画面例を示す。
【図9】実施の形態３で、情報端末のアプリによる処理フローを示す。
【図10】本発明の実施の形態４のキャッシュレス決済システムの構成を示す。
【図11】実施の形態４で、ＨＭＤおよびウェアラブル端末の表示画面例を示す。
【図12】実施の形態４で、ＨＭＤの外観構成例を示す。
【図13】実施の形態４で、ＨＭＤの構成例を示す。
【図14】実施の形態４で、ＨＭＤのアプリによる処理フローを示す。
【図15】本発明の実施の形態５のキャッシュレス決済システムの構成を示す。
【図16】本発明の実施の形態６のキャッシュレス決済システムにおける、ＨＭＤの表示画面例を示す。
【図17】実施の形態６で、ＨＭＤのアプリによる処理フローを示す。
【図18】本発明の実施の形態７のキャッシュレス決済システムにおける、表示画面例を示す。
【図19】本発明の実施の形態８のキャッシュレス決済システムにおける、情報端末のアプリによる処理フローを示す。
【図20】実施の形態１，８の変形例のキャッシュレス決済システムにおける、情報端末のアプリによる処理フローを示す。
【図21】本発明の実施の形態９のキャッシュレス決済システムにおける、情報端末のアプリによる処理フローを示す。
【図22】実施の形態９で、情報端末の表示画面例を示す。
【図23】実施の形態９の変形例における情報端末の表示画面例を示す。
【図24】本発明の実施の形態１０のキャッシュレス決済システムの構成を示す。
【図25】実施の形態１０で、情報端末のアプリによる処理フローを示す。
【図26】実施の形態１０で、情報端末の表示画面例を示す。
【図27】本発明の実施の形態１１のキャッシュレス決済システムの構成を示す。
【発明を実施するための形態】
【0012】
以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において同一部には原則として同一符号を付し、繰り返しの説明は省略する。
【0013】
【0014】
［概要］
従来技術例のキャッシュレス決済方式において、例えばユーザスキャン方式の場合、店舗内のストア端末の近傍にはＱＲコードが掲示され、ストア端末の表示装置には商品等の購入金額（対応する決済金額）が表示される。購入者であるユーザは、スマートフォン等の情報端末のキャッシュレス決済アプリおよびカメラによってＱＲコードを読み取り、決済金額の入力操作を行って、キャッシュレス決済を行う。
従来技術例のキャッシュレス決済方式において、例えばユーザスキャン方式の場合、店舗内のストア端末の近傍にはＱＲコードが掲示され、ストア端末の表示装置には商品等の購入金額（対応する決済金額）が表示される。購入者であるユーザは、スマートフォン等の情報端末のキャッシュレス決済アプリおよびカメラによってＱＲコードを読み取り、決済金額の入力操作を行って、キャッシュレス決済を行う。
【0015】
一方、実施の形態１のキャッシュレス決済システムでは、店舗側は、例えばストア端末の近傍において、決済先情報を含む情報をコード化したＱＲコードを掲示し、商品等の購入金額に対応する決済金額をストア端末の表示装置に表示する。購入者であるユーザは、情報端末のカメラによってＱＲコードと決済金額との２つを撮影する。情報端末のキャッシュレス決済アプリは、撮影画像からＱＲコードの決済先情報と決済金額との２つの情報を認識した場合、所定の決済時間の画像を表示画面に表示し、決済時間の満了後、自動的に決済命令を発行して、サーバにキャッシュレス決済処理を行わせる。情報端末は、サーバから受けた決済処理完了確認情報を表示画面に表示する。また、店舗が有人店舗の場合、ストア端末は、サーバから受けた同様の決済処理完了確認情報を表示画面に表示する。有人店舗の場合、購入者と店員との両者が決済処理完了確認情報を確認する。無人店舗の場合、購入者のみが決済処理完了確認情報を確認する。これにより、実施の形態１のキャッシュレス決済システムは、ユーザスキャン方式の場合におけるユーザの操作の手間、特に金額の入力や補正の手間を不要とし、使い易く好適なキャッシュレス決済が実現できる。
【0016】
［１－１：キャッシュレス決済システム］
図１は、実施の形態１のキャッシュレス決済システムの構成、およびキャッシュレス決済の手続きの概要を示す。図１で、キャッシュレス決済システムは、店舗１内における購入者２であるユーザが操作する情報端末３と、会計机１３でレジ係である店員５が操作するストア端末７と、基地局１０と、インターネット等を含む通信網であるネットワーク１１と、決済アプリサーバであるサーバ１２とを有し、これらは適宜に通信で接続される。店舗１は、商品６を販売する有人店舗である場合を示す。店舗１内において、購入者２、情報端末３、会計机１３、店員５、ストア端末７、および商品６等を有する。なお、情報端末３やストア端末７は、同様の機能を持つ複数台が存在してもよい。
図１は、実施の形態１のキャッシュレス決済システムの構成、およびキャッシュレス決済の手続きの概要を示す。図１で、キャッシュレス決済システムは、店舗１内における購入者２であるユーザが操作する情報端末３と、会計机１３でレジ係である店員５が操作するストア端末７と、基地局１０と、インターネット等を含む通信網であるネットワーク１１と、決済アプリサーバであるサーバ１２とを有し、これらは適宜に通信で接続される。店舗１は、商品６を販売する有人店舗である場合を示す。店舗１内において、購入者２、情報端末３、会計机１３、店員５、ストア端末７、および商品６等を有する。なお、情報端末３やストア端末７は、同様の機能を持つ複数台が存在してもよい。
【0017】
購入者２は、店舗１内で商品６あるいはサービス等を購入し、その商品６の購入金額の支払いのために、情報端末３を用いてキャッシュレス決済を行うユーザである。情報端末３は、ユーザが携帯するキャッシュレス決済機能を持つキャッシュレス決済端末であり、例えばスマートフォンであるが、他の種類のデバイスとしてもよい。アプリ４１は、キャッシュレス決済機能を持つキャッシュレス決済アプリであり、サーバ１２と通信で連携しながら特有の処理を行うアプリケーションプログラムである。ユーザは、予め、情報端末３にアプリ４１をインストールする。アプリ４１はサーバ１２から提供されてもよい。
【0018】
基地局１０は、ネットワーク１１に接続されるモバイル通信基地局であり、無線ＬＡＮのアクセスポイント等であってもよい。情報端末３やストア端末７は、基地局１０を通じてネットワーク１１に接続可能であり、サーバ１２と通信可能である。サーバ１２は、ネットワーク１１に接続され、情報端末３のアプリ４１からの決済命令に応じてキャッシュレス決済処理を行う機能を有する決済アプリサーバである。サーバ１２は、キャッシュレス決済処理の完了後、決済処理完了確認情報を、情報端末３およびストア端末７に送信する。なお、情報端末３のアプリ４１およびストア端末７は、それぞれ、サーバ１２との通信のためのアドレス情報を知っている。ＱＲコード８内にそのアドレス情報が記述されていてもよい。
【0019】
信号４ａ，４ｂは、情報端末３と基地局１０との間の無線通信に伴う通信信号の例である。信号４ｃは、ストア端末７と基地局１０との間の無線通信に伴う通信信号の例である。例えば、信号４ａは、情報端末３からサーバ１２へ送信される決済命令である。信号４ｂは、サーバ１２から情報端末３へ送信される決済処理完了確認情報である。信号４ｃは、サーバ１２からストア端末７へ送信される決済処理完了確認情報である。信号４ｂの決済処理完了確認情報と、信号４ｃの決済処理完了確認情報とは、同じ後述のキーコード（決済完了ＩＤに相当する）を含む。本構成例では、キャッシュレス決済の必要に応じて、サーバ１２と情報端末３とが通信接続し、サーバ１２とストア端末７とが通信接続する。通常時にはそれらの通信接続は不要である。なお、変形例として、ストア端末７とサーバ１２との間では通信を行わない形態も可能である。この場合、サーバ１２からストア端末７への決済処理完了確認情報の信号４ｃの送信は行われない。
【0020】
店員５は、会計机１３において、ストア端末７を操作しながら、購入者２に対し、商品６の会計に伴うキャッシュレス決済の受け付け等の作業を行う。会計机１３にはストア端末７が設置されている。商品６には、管理用のタグ６ｂ等が付いていてもよく、タグ６ｂには商品ＩＤや金額等の情報がバーコード等の形式で記載されている。
【0021】
ストア端末７は、キャッシュレス決済機能を含む決済機能を持つ端末、言い換えると店舗側決済機器であり、例えばキャッシュレジスタやＰＯＳレジ端末で構成されるが、これに限らず、決済機能を持つスマートフォンやタブレット端末等で構成されてもよい。ストア端末７の決済機能は、情報端末３からのキャッシュレス決済を受け付ける機能である。ストア端末７は、購入者２側に向いて情報・画像を見せるための表示部（表示画面）を持つ表示装置７ｂを備える。図示しないが、ストア端末７は、店員５側に向いて情報・画像を見せるための表示部（表示画面）も持つ。表示装置７ｂの表示画面には、商品６の購入金額９等の情報が表示される。購入金額９は、購入者２が購入する１個以上の商品６に関する合計金額、すなわち１回のキャッシュレス決済に伴う決済金額に相当する。購入金額９は、人から見て理解できる数字列等の画像情報である。
【0022】
ＱＲコード８は、店舗１内の少なくともいずれかの位置に掲示されている２次元コードである。本例では、ストア端末７の筐体における購入者２に向く側の面の一部に、ＱＲコード８が、シールのような印刷物としての貼り付けの態様で掲示されている。ＱＲコード８は、この店舗１の店舗情報、言い換えると決済先情報、を含む情報がコード化されたものである。決済先情報は、より詳細には、振込先の口座の情報でもよい。ＱＲコード８に限らず、他の方式のコードを適用してもよい。ＱＲコード８は、他の態様として表示画面に表示される画像としてもよい。例えば、ある程度大きいサイズを持つ表示装置７ｂの表示画面に、購入金額９と共に並列でＱＲコード８の画像が表示されてもよい。ストア端末７とは別に、タブレット端末等の電子的表示装置を持つデバイスが設けられ、そのデバイスの表示画面にＱＲコード８の画像が表示されてもよい。ＱＲコード８の掲示の態様は、情報端末３のカメラ３０からＱＲコード８に対応する像を撮影できる態様であればよい。
【0023】
実施の形態１の例では、ＱＲコード８と購入金額９との２つの要素について、カメラ３０による１枚以上の静止画として撮影する方式を用いる。購入者２は、最低限の操作として、適宜にカメラ３０の撮影ボタンを押す。また、撮影の際、第１方式として、１つの画像内にＱＲコード８と購入金額９との両方が同時に含まれるようにしてもよい。あるいは、第２方式として、まず第１画像内にＱＲコード８が含まれるように撮影し、次に、第２画像内に購入金額９が含まれるように撮影してもよい。実施の形態１では、ユーザが上記の第１方式と第２の方式のいずれを採用してもよい。静止画の場合、ＱＲコード８や購入金額９がうまく撮影できなかった場合や認識できなかった場合には、購入者２は適宜に撮影操作をやり直しできる。
【0024】
［１－２：キャッシュレス決済手続き］
図１で、実施の形態１でのキャッシュレス決済の手続きの概要は以下の通りである。（１）まず、店舗１内において、購入者２は、購入する商品６を会計机１３の所まで持って行き、店員５との間で、商品６の購入に伴うキャシュレス決済の手続きを開始する。店舗１側の店員５は、ＱＲコード８および購入金額９を購入者２に対して提示する。具体例は以下の通りである。ＱＲコード８については予めストア端末７に掲示されている。店員５は、例えばストア端末７に接続されているバーコードリーダ等によって商品６のタグ６ｂをスキャンする動作を行う。これにより、タグ６ｂの情報が読み取られ、ストア端末７に、商品６のＩＤや金額等の情報が入力される。あるいは、タグ６ｂが無い商品６の場合、店員５がストア端末７に金額を入力する操作を行ってもよい。ストア端末７は、入力された金額等の情報に基づいて、表示装置７ｂの表示画面に購入金額９を表示する。本例では購入金額９は“￥12,765”と表示されている。なお、購入者２が複数の商品６をまとめて購入する場合、店員５は、商品６毎に同様に動作を繰り返し、ストア端末７は、複数の商品６の合計金額を、決済金額に対応する購入金額９として表示装置７ｂに表示する。
図１で、実施の形態１でのキャッシュレス決済の手続きの概要は以下の通りである。（１）まず、店舗１内において、購入者２は、購入する商品６を会計机１３の所まで持って行き、店員５との間で、商品６の購入に伴うキャシュレス決済の手続きを開始する。店舗１側の店員５は、ＱＲコード８および購入金額９を購入者２に対して提示する。具体例は以下の通りである。ＱＲコード８については予めストア端末７に掲示されている。店員５は、例えばストア端末７に接続されているバーコードリーダ等によって商品６のタグ６ｂをスキャンする動作を行う。これにより、タグ６ｂの情報が読み取られ、ストア端末７に、商品６のＩＤや金額等の情報が入力される。あるいは、タグ６ｂが無い商品６の場合、店員５がストア端末７に金額を入力する操作を行ってもよい。ストア端末７は、入力された金額等の情報に基づいて、表示装置７ｂの表示画面に購入金額９を表示する。本例では購入金額９は“￥12,765”と表示されている。なお、購入者２が複数の商品６をまとめて購入する場合、店員５は、商品６毎に同様に動作を繰り返し、ストア端末７は、複数の商品６の合計金額を、決済金額に対応する購入金額９として表示装置７ｂに表示する。
【0025】
（２）購入者２は、情報端末３のアプリ４１を起動した状態で、カメラ３０によって、提示されているＱＲコード８と購入金額９との２つを撮影する。これにより、情報端末３のアプリ４１は、撮影画像からＱＲコード８と購入金額９との２つの情報を読み取って認識する。これにより、情報端末３は、少なくとも、ＱＲコード８からの決済先情報と、決済金額との２つの情報を把握する。この際、詳細としては、購入者２は、カメラ３０によって、ＱＲコード８と購入金額９との両方が写るように１枚の静止画を撮影してもよいし、あるいは、ＱＲコード８が写った静止画である第１画像と、購入金額９が写った静止画である第２画像との各静止画を撮影してもよい。情報端末３は、１枚以上の撮影画像の中から、画像処理に基づいて、ＱＲコード８と購入金額９との２つの情報を抽出し、ＱＲコード８からは復号化によって決済先情報を含む情報を得る。
【0026】
（３）情報端末３は、上記２つの情報の認識後、表示画面３００に、後述する所定の決済時間２０（図２）を表示する。情報端末３は、決済時間２０の経過後、購入者２の操作を必要とせずに、自動的に、決済命令（信号４ａ）を発行し、サーバ１２へ送信する。この決済命令は、サーバ１２にキャッシュレス決済処理を実行させるための命令あるいは要求である。この決済命令には、購入者２および情報端末３の情報と、決済先情報と、決済金額情報とを伴う。
【0027】
（４）サーバ１２は、情報端末３から受け取った決済命令の情報に基づいて、キャッシュレス決済処理を実行する。キャッシュレス決済処理は、具体的には、購入者２の口座から店舗１の口座へ決済金額を振り込ませる処理が挙げられる。サーバ１２は、キャッシュレス決済処理の完了に伴い、情報端末３に、情報端末３用の決済処理完了確認情報を信号４ｂとして送信することで決済完了通知を行う。それと共に、サーバ１２は、ストア端末７に、ストア端末７用の決済処理完了確認情報を信号４ｃとして送信することで決済完了通知を行う。決済処理完了確認情報は、決済処理完了確認メッセージや、決済完了ＩＤである後述のキーコード２５（図２）を含む。
【0028】
（５）情報端末３は、サーバ１２からの決済処理完了確認情報を購入者２に対し出力、例えば表示画面３００に表示し、購入者２は、その決済処理完了確認情報を確認する。また、ストア端末７は、サーバ１２からの決済処理完了確認情報を店員５に対し出力、例えば店員５側の表示画面に表示し、店員５は、その決済処理完了確認情報を確認する。これにより、キャッシュレス決済の手続きが完了する。
【0029】
なお、本例では、ストア端末７は、サーバ１２からの決済処理完了確認情報を受信して表示画面に表示する機能を持つ構成とした。変形例として、ストア端末７は、そのような機能を持たない構成としてもよい。この場合、サーバ１２はストア端末７へ決済処理完了確認情報を送信せず、店舗１の店員５はその決済処理完了確認情報の確認を行わない。
【0030】
［１－３：表示画面］
図２は、図１の構成に基づいたキャッシュレス決済の手続きの際の情報端末３の表示画面３００の例を示す。なお、購入者２の操作に基づいたカメラ３０による撮影の際には、情報端末３は、表示画面３００に、カメラ３０が捉えたストア端末７等が写ったモニタ画像を表示する。このモニタ画像は、カメラ３０の動きに応じて内容が変化する画像である。情報端末３は、購入者２が撮像ボタンを押す操作に応じて、その時点での静止画をキャプチャする。
図２は、図１の構成に基づいたキャッシュレス決済の手続きの際の情報端末３の表示画面３００の例を示す。なお、購入者２の操作に基づいたカメラ３０による撮影の際には、情報端末３は、表示画面３００に、カメラ３０が捉えたストア端末７等が写ったモニタ画像を表示する。このモニタ画像は、カメラ３０の動きに応じて内容が変化する画像である。情報端末３は、購入者２が撮像ボタンを押す操作に応じて、その時点での静止画をキャプチャする。
【0031】
図２の（Ａ）は、表示画面３００の一例を示し、カメラ３０の撮影画像である静止画の一例と、その上に重畳や合成で表示される画像情報の一例とを含む。情報端末３は、撮影画像の中から、スキャンによって、図１のＱＲコード８に対応する領域２０１と、購入金額９に対応する領域２０２とを検出し、それらの領域から決済先情報および決済金額を認識する。またこの際、情報端末３は、認識したＱＲコード８の領域２０１や購入金額９の領域２０２に、それぞれ枠取りや色付け等の画像を表示してもよい。本例では、破線枠のような画像ｇ１，ｇ２を重畳や合成で表示する場合を示す。これにより、ＱＲコード８や購入金額９が認識できた状態を、購入者２にわかりやすく伝えることができる。
【0032】
さらに、情報端末３は、上記２つの情報の認識後、表示画面３００内に、決済時間２０を表示する。決済時間２０は、上記２つの情報の認識の直後から決済の実行までの時間とその経過状態を、購入者２に対し伝えるための、グラフィカル・ユーザ・インタフェース（ＧＵＩ）としての画像情報である。言い換えると、決済時間２０は、決済命令の発行までの時間的な猶予を表す画像情報である。本例では、表示画面３００内の上側の領域に、決済時間２０の画像が、重畳や合成によって表示されている。本例では、この決済時間２０は、決済時間を表すメッセージ（“Time to Payment”）と、決済時間の全体の長さおよび経過状態を表すバー２０ｂとを含む画像である。決済時間２０は、上記２つの情報の認識を開始時点とし、決済命令の発行を終了時点とする時間であり、予め所定の長さとして設定されている。決済時間２０の長さの設定は、一例として５秒である。なお、表示画面３００内に決済時間２０の長さが例えば「５秒」等と画像で表示されてもよい。バー２０ｂは、例えば、決済時間の長さに対応する５本のブロックで表現されており、１秒経過毎に１ブロックの表示が更新される。経過状態が例えば２秒経過である場合には、図示のように例えば左側を起点として２本のブロックまでの色が第１色（例えば白）から第２色（例えば黒）へ更新されている。情報端末３は、２つの情報の認識時点から、決済時間２０に対応するタイマのカウントを開始し、時間経過に応じて、バー２０ｂの表示状態を更新する。例えば開始時点ではバー２０ｂの全ブロックが第１色であるが、終了時点ではバー２０ｂの全ブロックが第２色となる。
【0033】
購入者２は、決済時間２０を見ることで、キャッシュレス決済の自動的な実行までの経過状態を把握でき、本当に決済を実行するかどうかを判断でき、この経過時間２０中に必要に応じてキャンセル動作も可能である。決済時間２０の提示の態様は、図示の例に限らず可能であり、時間の大きさや経過状態が購入者２にわかりやすく伝わるような表現の画像情報とすればよい。また、決済時間２０は、画像表示のみに限らず、効果音（例えばタイマカウント効果音）等の音声出力を併用してもよい。
【0034】
情報端末３は、決済時間２０が満了した時点で、自動的に決済命令を発行してサーバ１２に送信する。この決済時間２０を含む制御の際、購入者２が購入金額９に関する何らかの入力操作、例えばハードウェアまたはソフトウェアによるボタンの入力操作等を行うことは不要である。すなわち、購入者２は、カメラ３０によって上記２つの情報を撮影する操作さえすれば、後は決済時間２０を待機するだけで、キャッシュレス決済を行わせることができる。
【0035】
また、上記決済時間２０の経過途中では、キャッシュレス決済に関する所定のキャンセル操作を受け付ける。所定のキャンセル操作は、例えばユーザが情報端末３を振るシェイク動作である。他の例では、キャンセル操作は、情報端末３をある程度以上に傾ける動作としてもよいし、所定のハードウェアまたはソフトウェアによるボタンを押す操作等としてもよい。他の例では、キャンセル操作としては、ユーザがカメラ３０を対象のＱＲコード８や購入金額９が写らない方向に向ける動作、例えば所定時間以上ＱＲコード８等が写らない状態を維持する動作としてもよい。いずれのキャンセル動作でも、後述のセンサ群３１（図３）を用いて検出できるようにする。
【0036】
図２の（Ｂ）は、サーバ１２でのキャッシュレス決済処理が完了し、決済処理完了確認情報を表示する時の表示画面３００の例を示す。情報端末３は、サーバ１２からの決済処理完了確認情報を受けると、その情報に基づいて生成したメッセージ２１とキーコード２５を、表示画面３００内に表示する。メッセージ２１は、キャッシュレス決済処理が完了したことを表す決済処理完了確認メッセージ（例えば“Payment Completed”）の画像である。本例では、（Ａ）と同様のストア端末７等の画像上に、決済時間２０の表示を消去した上で、メッセージ２１が重畳や合成で表示されている。キーコード２５は、決済完了ＩＤに相当し、キャッシュレス決済処理の完了後にその決済毎に発行されるＩＤ（識別情報）である。本例では、キーコード２５は、４個の４桁の文字列（英数字）を１セットとして構成されている。本例では、キーコード２５は、表示画面３００内の下側の領域に重畳や合成で表示されている。サーバ１２からは、同じ値を持つキーコードが、情報端末３とストア端末７との両方に送信される。
【0037】
購入者２は、（Ｂ）の表示画面３００で、決済処理完了確認情報、具体的にはメッセージ２１およびキーコード２５を確認することで、キャッシュレス決済の完了を確認できる。また、アプリ４１は、キーコード２５を含む情報をログとしてメモリ上に保存し、購入者２は後でアプリ４１の画面でそのログからキーコード２５等を含む決済履歴を参照し確認することもできる。同様に、店員５は、ストア端末７の店員５側の表示画面に表示される決済処理完了確認情報のキーコード等を確認することで、目の前の購入者２に関するキャッシュレス決済の完了を確認できる。より詳しい手順の例としては、購入者２は、（Ｂ）のような画面のキーコード２５を店員５に見せ、店員５は、情報端末３側の画面のキーコード２５と、ストア端末７側の画面のキーコードとが一致するかを確認する。例えば、店員５は、両者のキーコードのうちの下４桁の文字列同士が一致するかを確認する。これにより、購入者２および店員５は、キャッシュレス決済の完了を確認できる。なお、（Ｂ）のような画面で決済処理完了確認情報を出力する際にも、所定の音声出力を併用してもよい。
【0038】
図２の（Ｃ）は、変形例として、決済時間２０に関する他の表示例を示す。本例は、表示画面３００内で、一定の背景上に、決済時間２０を、時計２０ｃのような表現の画像として大きく表示する場合を示す。本例では、決済時間２０の長さが１２秒であり、経過時間が３秒である状態を示す。
【0039】
図２の（Ｄ）は、変形例として、キーコード２５に関する他の表示例を示す。（Ｄ）の表示画面３００では、キーコード２５は、キーコード２５ｂとして、ＱＲコードの画像の態様で表示されている。このＱＲコードは、キーコード２５がコード化されたものである。このように、決済処理完了確認情報は、コード等の態様で提供されてもよい。この場合、購入者２は、このキーコード２５ｂを含む画面を店員５に見せる。店員５は、例えばストア端末７に接続されているＱＲコードリーダ（またはカメラ）を用いて、このキーコード２５ｂを読み取る。ストア端末７は、キーコード２５ｂの認識によって、対応するキーコードを得て、店員５側の表示画面に表示する。これにより、店員５は、そのキーコードからキャッシュレス決済の完了を確認できる。
【0040】
なお、実施の形態１におけるキャッシュレス決済方式を、無人店舗に適用する場合、ストア端末７としては、購入者２によるセルフ決済用の決済機能を備えるストア端末を用いる。この場合、キャッシュレス決済の手続きは、購入者２が情報端末３の図２の（Ｂ）のような表示画面３００の決済処理完了確認情報を確認するまでの手続きとすればよい。またこの場合、店員５による確認は無いので、図２の（Ｂ）のような表示画面３００でのキーコード２５の表示や、対応するストア端末７側でのキーコードの表示を省略してもよい。情報端末３やストア端末７は、サーバ１２から受信した決済処理完了確認情報（特にキーコード）を、表示画面に表示せずとも、ログとしてメモリに保存しておく。これにより、購入者２や店員５は、後でそのキーコードを参照して確認を行うことができる。
【0041】
なお、情報端末３は、アプリ４１を用いたキャッシュレス決済の手続きの際に、購入者２に対するユーザ・インタフェースとして、所定のガイダンス等を、表示や音声によって提供してもよい。ガイダンスは、例えば、「ＱＲコードを撮影してください」、「金額を撮影してください」といったメッセージを表示や音声で出力することが挙げられる。一例としては、情報端末３は、まず「ＱＲコードを撮影してください」と出力し、ユーザがカメラ３０でＱＲコード８を中心にして撮影する。その際、撮影画像内にＱＲコード８の近傍の購入金額９が一緒に写ってもよい。情報端末３は、その撮影画像からＱＲコード８のみしか認識できない場合、次に、「金額を撮影してください」と出力し、ユーザがカメラ３０で購入金額９を中心にして撮影する。１つの画像からＱＲコード８と購入金額９との両方が同時に認識できた場合、金額に関するメッセージの出力を省略できる。
【0042】
［１－４：情報端末］
図３は、情報端末３の機能ブロック構成例を示す。本例では、情報端末３はスマートフォンである。情報端末３は、カメラ３０、センサ群３１、グラフィックプロセッサ３２、タッチパネル（表示画面３００を含む表示装置）、マイク３４Ａ、スピーカ３４Ｂ、外部インタフェース３５、通信部３６、ＣＰＵ３７、ＲＡＭ３８、フラッシュＲＯＭ３９、および内部バス４２等を有する。センサ群３１は、例えば加速度センサ、ジャイロセンサ、地磁気センサ、およびＧＰＳ受信器を含む。ＣＰＵ３７は、情報端末３の全体を制御するプロセッサまたはコントローラを構成する。フラッシュＲＯＭ３９には、基本動作プログラム４０およびアプリ（キャッシュレス決済アプリ）４１等のプログラムが格納されている。プロセッサであるＣＰＵ３７によって、これらのプログラムがＲＡＭ３８に展開されてそのプログラムに従った処理が実行されることにより、情報端末３の各機能が実現される。フラッシュＲＯＭ３９には、プログラム処理が実行される過程や結果として発生するデータも格納される。
図３は、情報端末３の機能ブロック構成例を示す。本例では、情報端末３はスマートフォンである。情報端末３は、カメラ３０、センサ群３１、グラフィックプロセッサ３２、タッチパネル（表示画面３００を含む表示装置）、マイク３４Ａ、スピーカ３４Ｂ、外部インタフェース３５、通信部３６、ＣＰＵ３７、ＲＡＭ３８、フラッシュＲＯＭ３９、および内部バス４２等を有する。センサ群３１は、例えば加速度センサ、ジャイロセンサ、地磁気センサ、およびＧＰＳ受信器を含む。ＣＰＵ３７は、情報端末３の全体を制御するプロセッサまたはコントローラを構成する。フラッシュＲＯＭ３９には、基本動作プログラム４０およびアプリ（キャッシュレス決済アプリ）４１等のプログラムが格納されている。プロセッサであるＣＰＵ３７によって、これらのプログラムがＲＡＭ３８に展開されてそのプログラムに従った処理が実行されることにより、情報端末３の各機能が実現される。フラッシュＲＯＭ３９には、プログラム処理が実行される過程や結果として発生するデータも格納される。
【0043】
通信部３６は、モバイル通信、無線ＬＡＮ通信、近距離通信等の各種の通信インタフェースに対応する通信機能を有する。近距離通信インタフェースの例としては、ＢｌｕｅＴｏｏｔｈ（登録商標）等を用いることができる。また、外部インタフェース３５は、例えば給電機能を有するＵＳＢ（登録商標）インタフェースを有する。タッチパネル３３は、タッチ検出機能を持つ表示装置であり、グラフィックスプロセッサ３２によって描画される画像を表示画面に３００表示する。タッチパネル３３は、ユーザによる表示画面３００に対するタッチ操作等の入力操作を受け付けて、内蔵するセンサによって検出する。
【0044】
［１－５：処理フロー］
図４は、情報端末３のアプリ４１による処理フローを示す。図４のフローは、ステップＳ１０，Ｓ１１，……，Ｓ２２を有する。まず、ステップＳ１０で、情報端末３は、購入者２の操作に基づいて、アプリ４１を起動し、サーバ１２に対するログインを行い、キャッシュレス決済の手続きを開始する。
図４は、情報端末３のアプリ４１による処理フローを示す。図４のフローは、ステップＳ１０，Ｓ１１，……，Ｓ２２を有する。まず、ステップＳ１０で、情報端末３は、購入者２の操作に基づいて、アプリ４１を起動し、サーバ１２に対するログインを行い、キャッシュレス決済の手続きを開始する。
【0045】
このログインは、サーバ１２へのキャッシュレス決済の手続き用のログインであり、決済時のセキュリティを高めるための認証を含む。なお、情報端末３自体に備える認証（例えば顔認証や指紋認証）が成功してアプリ４１が起動されたことを、認証済み、すなわち正規ユーザであることが確認された状態とみなして、このログインを省略する形態としてもよい。また、変形例としては、決済金額９の大きさに応じてセキュリティレベルが規定され、そのセキュリティレベルに応じてログインの要否等を含む決済ルールが規定されてもよい。例えば、予め設定に基づいて、決済金額の値が、規定された閾値以上である場合、ステップＳ１０のログインが必須とされ、閾値未満である場合、そのログインが省略されてもよい。
【0046】
ステップＳ１１で、購入者２は、前述のようにカメラ３０の操作によってＱＲコード８と購入金額９を撮影する。情報端末３は、購入者２の操作に基づいて、カメラ３０による撮影、特に１枚以上の静止画のキャプチャを行い、撮影画像データを取得してＲＡＭ３８に記憶する。
【0047】
ステップＳ１２で、情報端末３は、撮影画像をスキャンしてＱＲコード８の領域を抽出し、ＱＲコード８を復号化して決済先情報等を認識する。ステップＳ１３では、ＱＲコード８内の決済先情報の認識の有無に応じて分岐する。ＱＲコード８の決済先情報の認識が有る場合（YES）にはステップS１４へ進み、無い場合（NO）にはステップＳ１１へ戻って同様に繰り返す。認識が無い場合（NO）とは、撮影画像にＱＲコード８が含まれていない場合や、含まれていても情報が抽出や認識できなかった場合が該当する。ＱＲコード８の決済先情報等の認識結果は、ＲＡＭ３８に保持される。
【0048】
ステップＳ１４で、情報端末３は、撮影画像のスキャンによって購入金額９の領域を抽出し、対応する決済金額を認識する。この際の処理は、ＯＣＲ（光学文字認識）技術と同様に画像から文字を認識する技術が適用できる。決済金額の認識結果は、ＲＡＭ３８に保持される。ステップＳ１５では、決済金額の認識の有無に応じて分岐する。決済金額の認識が有る場合（YES）にはステップＳ１６へ進み、無い場合（NO）にはステップＳ１１へ戻って同様に繰り返す。
【0049】
ステップＳ１６では、上記２種類の情報である決済先情報と決済金額とが揃った状態であるので、情報端末２は、図２の（Ａ）のような決済時間２０のためのタイマを起動させると共に、表示画面３００内に決済時間２０の画像を表示する。決済時間２０は、アプリ４１において予め任意の時間に設定できる。例えば、決済時間２０はデフォルトでは５秒に設定されており、ユーザ設定によって増減の調整もできる。ユーザは、より慎重に判断したい場合には、決済時間２０の長さを例えば１０秒等に設定でき、より素早く決済したい場合には、例えば３秒等に設定できる。
【0050】
ステップＳ１７後のステップＳ１８では、情報端末３は、上記タイマによって決済時間２０が満了したかどうかを確認し、満了（YES）の場合にはステップＳ１９へ進み、満了ではない場合（NO）にはステップＳ１７へ戻る。ステップＳ１７では、情報端末３は、決済時間２０の途中に、所定のキャンセル動作の有無を検出、確認する。このキャンセル動作は、キャッシュレス決済、より詳しくは決済命令の送信を、キャンセルするための動作である。本例では、このキャンセル動作は、購入者２が手に持っている情報端末３を振るようなシェイク動作として予め規定されている。情報端末３は、そのシェイク動作を、図３のセンサ群３１を用いて検出する。情報端末３は、決済時間２０の途中でシェイク動作を検出した場合（YES）にはステップＳ１１に戻り、キャッシュレス決済の手続きを例えば撮影からやり直しさせる。
【0051】
ステップＳ１９で、情報端末３は、上記２つの情報に基づいて、購入者２および情報端末３の情報と決済先情報と決済金額とを伴う決済命令を発行し、図１の信号４ａとしてサーバ１２へ送信する。ステップＳ２０で、情報端末３は、サーバ１２からの決済処理完了確認情報を待ち受けて受信し、表示画面３００内に決済処理完了確認情報である図２の（Ｂ）のキーコード２５等を表示する。
【0052】
ステップＳ２０までで、１回のキャッシュレス決済の手続きは完了している。ステップＳ２１は、アプリ４１を起動したままで別の商品６の購入に関する２回目以降のキャッシュレス決済の手続きを同様に繰り返して継続するかどうかの確認である。ステップＳ２１では、例えば情報端末３は、表示画面３００にガイダンスとして決済の手続きを継続するか否かの確認のメッセージやボタンを表示し、購入者２による操作を受け付けてもよい。継続する場合（YES）にはステップＳ１１に戻って同様に繰り返し、終了する場合（NO）にはステップＳ２２に進む。ステップＳ２２では、情報端末３は、サーバ１２に対しログアウトを行い、アプリ４１を終了させる。
【0053】
なお、変形例としては、最初にステップＳ１０でログインを行う構成ではなく、ステップＳ１９の決済命令の送信の前の時点でログインを行う構成としてもよい。
【0054】
［１－６：効果等］
以上のように、実施の形態１によれば、購入者２による商品６の購入金額９に関する入力操作や補正操作、決済実行操作等の操作を必要とせず、少ない手間で好適にキャッシュレス決済を行うことができる。また、実施の形態１によれば、ＱＲコードを用いたユーザスキャン方式の場合に、有人店舗や無人店舗等の店舗属性に係らずに概ね同一方式でキャッシュレス決済を行うことができる。
以上のように、実施の形態１によれば、購入者２による商品６の購入金額９に関する入力操作や補正操作、決済実行操作等の操作を必要とせず、少ない手間で好適にキャッシュレス決済を行うことができる。また、実施の形態１によれば、ＱＲコードを用いたユーザスキャン方式の場合に、有人店舗や無人店舗等の店舗属性に係らずに概ね同一方式でキャッシュレス決済を行うことができる。
【0055】
実施の形態１等の変形例として以下も可能である。変形例では、所定の決済時間２０の経過を待たずとも即時に決済命令に移行できるように、所定の操作として決済指示操作を利用できるようにしてもよい。例えば、情報端末３は、上記２つの情報の認識後、表示画面３００に決済時間２０を表示し（図２の（Ａ）、図４のステップＳ１６）、その決済時間２０の途中で、キャンセル動作だけでなく、決済指示操作を受け付ける。決済指示操作は、例えば、情報端末３の表示画面３００等の所定の部位を叩く動作、例えば２回連続で叩く動作や、所定の部位をある程度以上に強く押圧する動作、等が挙げられる。情報端末３は、決済指示操作を検出した場合、その時点で決済時間２０を終了させて即時に決済命令をサーバ１２に送信する。このような機能は、購入者２が素早く決済したい場合等に有用である。
【0056】
変形例として、上記キャンセル動作とは別に規定された所定の動作として、決済時間２０の経過の一時停止のための動作を設けてもよい。例えば、情報端末３は、決済時間２０の途中に、所定の一時停止動作を検出した場合、決済時間２０の経過を一時停止させる。一時停止動作は、例えば表示画面３００内の部位に対するタッチ状態を維持する動作が挙げられる。情報端末３は、その一時停止動作が検出されなくなった場合、決済時間２０の経過を再開させる。この機能は、購入者２が判断を迷う場合等に有用である。
【0057】
また、変形例として、情報端末３は、図４のステップＳ１４で認識される決済金額９の大きさ、あるいは対応する商品６毎の種別等に応じて、決済時間２０の長さを決定してもよい。例えば、ある回のキャッシュレス決済の手続きの際に、情報端末３は、認識した決済金額９の値が大きいほど、その回のための決済時間２０を長くするように設定する。例えば、決済金額９の値が、閾値未満の場合には５秒と設定され、閾値以上の場合には１０秒と設定されてもよい。あるいは、認識した決済金額の値に対し、乗算等の演算によって、その回の決済時間２０の長さが算出されてもよい。これにより、例えば決済金額９が大きいほど、購入者２による慎重な判断が可能となる。また、情報端末３は、ステップＳ１４で認識した決済金額９の大きさに応じて、その後のログインの要否を決定してもよい。
【0058】
変形例として、決済時間２０の長さが、店舗１毎に規定されてもよい。例えば、ＱＲコード８内に、決済先情報だけでなく、その店舗１での決済時間２０に関する設定を含む決済ルール情報が記述されていてもよい。決済ルール情報は例えば図４のようなフローの規定を含んでもよい。情報端末３は、ＱＲコード８からその決済ルール情報における決済時間２０の設定値等を把握し、それに従って手続きの処理を行う。また、ＱＲコード８内に直接的に決済ルール情報が記述される形態に限らず、ＱＲコード８内のリンク情報やアドレス情報等からサーバ１２等の外部装置に持つ決済ルール情報を参照する形態としてもよい。
【0059】
変形例として、ＱＲコード８には、店舗情報の一部として、有人店舗／無人店舗等の店舗属性が記述されていてもよい。情報端末３は、ＱＲコード８の認識から店舗属性を把握し、その店舗属性に応じて手続きの処理を行うように制御する。例えば、店舗１が有人店舗か無人店舗かに応じて、前述の決済処理完了確認情報の表示の有無等を自動的に制御できる。また、ＱＲコード８内に、店舗１に備える設備や機能の情報が記述されていてもよい。例えば、店舗１が有人店舗の場合で、ストア端末７における種類や付属設備（例えばＱＲコードリーダ等）や機能等の情報が、ＱＲコード８から得られる。情報端末３は、得た情報に従って手続きの処理を制御する。
【0060】
＜実施の形態２＞
図５，図６を用いて、本発明の実施の形態２のキャッシュレス決済システム等について説明する。以下では、実施の形態２等における実施の形態１とは異なる構成部分について説明する。実施の形態２等において、図１のシステムや図３の情報端末における多くの部分は共通に適用できる。
図５，図６を用いて、本発明の実施の形態２のキャッシュレス決済システム等について説明する。以下では、実施の形態２等における実施の形態１とは異なる構成部分について説明する。実施の形態２等において、図１のシステムや図３の情報端末における多くの部分は共通に適用できる。
【0061】
［２－１：表示画面］
図５は、実施の形態２でのキャッシュレス決済の過程における情報端末３の表示画面３００の例を示す。実施の形態２の例では、ＱＲコード８と購入金額９との２つの要素について、カメラ３０による動画として撮影する方式を用いる。購入者２は、最低限の操作として、適宜にカメラ３０の撮影ボタンを押す。情報端末３は、購入者２の操作に基づいて、カメラ３０において動画モードあるいは連続コマ撮りモードを用いて動画または連続する複数の静止画を撮影する。この際、動画を構成する複数の画像の中に、図１のＱＲコード８と購入金額９とが捉えられるようにすればよい。同一画像内にＱＲコード８と購入金額９とが同時に捉えられてもよいし、別々の画像内に捉えられてもよい。動画内において、例えば、時間的に先の第１画像にＱＲコード８が捉えられ、後の第２画像に購入金額９が捉えられてもよい。そして、情報端末３は、動画の画像から前述の２つの情報である決済先情報と決済金額とを認識する。
図５は、実施の形態２でのキャッシュレス決済の過程における情報端末３の表示画面３００の例を示す。実施の形態２の例では、ＱＲコード８と購入金額９との２つの要素について、カメラ３０による動画として撮影する方式を用いる。購入者２は、最低限の操作として、適宜にカメラ３０の撮影ボタンを押す。情報端末３は、購入者２の操作に基づいて、カメラ３０において動画モードあるいは連続コマ撮りモードを用いて動画または連続する複数の静止画を撮影する。この際、動画を構成する複数の画像の中に、図１のＱＲコード８と購入金額９とが捉えられるようにすればよい。同一画像内にＱＲコード８と購入金額９とが同時に捉えられてもよいし、別々の画像内に捉えられてもよい。動画内において、例えば、時間的に先の第１画像にＱＲコード８が捉えられ、後の第２画像に購入金額９が捉えられてもよい。そして、情報端末３は、動画の画像から前述の２つの情報である決済先情報と決済金額とを認識する。
【0062】
図５の（Ａ）は、情報端末３の表示画面３００において、カメラ３０による動画の画像から、特に第１画像から、ＱＲコード８に対応する領域５０１が捉えられ、認識された状態を示す。第１画像は、表示画面３００でのモニタ画像としての画像Ｐ１と対応する。また、この表示画面３００の例では、認識されたことを表す枠付けの画像ｇ１が表示されている。
【0063】
実施の形態２で、ＱＲコード８は、店舗１内でストア端末７とは異なる場所・位置に掲示されていてもよい。例えば、店舗１内で購入者２に関心を持ってもらいたい任意の位置に掲示されていてもよい。その位置は、例えば、新商品やセールス商品の隣でもよいし、（Ａ）で例示しているように、購入者２の安全に係るＡＥＤ５００が配置されている位置の近くの位置でもよい。
【0064】
また、（Ａ）の表示画面３００内では、撮影モード５０３の画像も重畳表示されている。これは、カメラ３０の撮影モードの１つとしての動画モードまたは連続コマ撮りモードを表す画像である。また、この表示画面３００内では、ＱＲコード８から認識によって得られた店舗情報５０４（例えば店舗名）の画像も重畳表示されている。店舗情報５０４の画像によって、このＱＲコード８に対応する決済先を、購入者２に伝えることができる。
【0065】
（Ｂ）の表示画面３００は、カメラ３０による動画の画像から、特に第２画像から、購入金額９に対応する領域５０２が捉えられ、認識されている状態を示す。第２画像は、表示画面３００でのモニタ画像としての画像Ｐ２と対応する。また、この表示画面３００の例では、購入金額９が認識できたことを表す枠付けの画像ｇ２も重畳表示されている。
【0066】
（Ｃ）の表示画面３００は、（Ａ）のＱＲコード８と（Ｂ）の購入金額９との２つの情報が認識された後、一定の背景画像上に、決済時間２０の画像が表示された状態を示す。実施の形態１と同様に、２つの情報の認識の直後に、決済時間２０のタイマのカウントが開始される。また、この表示画面３００の例では、店舗情報５０４の画像や、購入金額９の認識に応じた決済金額２４の画像も表示されている。表示画面３００での各種情報の画像表示は、実撮影画像上の重畳や合成による表示でもよいし、（Ｃ）のように一定の背景画像上の独立した表示としてもよい。実施の形態１と同様に、決済時間２０の満了によって決済命令が発行される。
【0067】
（Ｄ）の表示画面３００は、サーバ１２でのキャッシュレス決済処理の完了に応じた決済処理完了確認情報を表示する例を示す。情報端末３は、サーバ１２からの決済処理完了確認情報の通知を受けると、表示画面３００内に、メッセージ２１とキーコード２５を表示する。この表示画面３００の例では、一定の背景上にメッセージ２１とキーコード２５が表示されている。また、本例では、（Ｃ）から、店舗情報５０４および決済金額２４の画像の表示がそのまま維持されている。これにより、購入者２は、キャッシュレス決済の内容および完了を確認できる。購入者２は、この画面を店員５に見せ、これにより、店員５側もキャッシュレス決済の完了を確認できる。
【0068】
［２－２：処理フロー］
図６は、実施の形態２における情報端末３のアプリ４１による処理フローを示す。図６のフローは、図４のフローに対し主に異なる部分として、ステップＳ１１の代わりにステップＳ１１Ｂを有する。ステップＳ１１Ｂで、情報端末３は、カメラ３０を動画モードとして動画の撮影を開始する。動画の撮影画像データは、図３のＲＡＭ３８に格納されるが、容量を考慮して一定周期で上書きされる。ステップＳ１２で、情報端末３は、その時点の動画の画像をスキャンしてＱＲコード８から決済先情報を認識する。ステップＳ１３で、情報端末３は、ＱＲコード８が認識できるまで（YES）、ステップＳ１２のスキャンを繰り返す。画像中にＱＲコード８が写っていない場合や、写っていても認識できなかった場合（Ｓ１３－NO）にはステップＳ１２に戻る。決済先情報の認識結果は、ＲＡＭ３８に保持される。
図６は、実施の形態２における情報端末３のアプリ４１による処理フローを示す。図６のフローは、図４のフローに対し主に異なる部分として、ステップＳ１１の代わりにステップＳ１１Ｂを有する。ステップＳ１１Ｂで、情報端末３は、カメラ３０を動画モードとして動画の撮影を開始する。動画の撮影画像データは、図３のＲＡＭ３８に格納されるが、容量を考慮して一定周期で上書きされる。ステップＳ１２で、情報端末３は、その時点の動画の画像をスキャンしてＱＲコード８から決済先情報を認識する。ステップＳ１３で、情報端末３は、ＱＲコード８が認識できるまで（YES）、ステップＳ１２のスキャンを繰り返す。画像中にＱＲコード８が写っていない場合や、写っていても認識できなかった場合（Ｓ１３－NO）にはステップＳ１２に戻る。決済先情報の認識結果は、ＲＡＭ３８に保持される。
【0069】
ステップＳ１４で、情報端末３は、その時点の画像から、購入金額９に対応する決済金額を認識する。ステップＳ１５で、情報端末３は、決済金額が認識できるまで（YES）、ステップＳ１４のスキャンを繰り返す。画像中に購入金額９が写っていない場合や写っていても認識できなかった場合（Ｓ１５－NO）にはステップＳ１４に戻る。決済金額の認識結果は、ＲＡＭ３８に保持される。
【0070】
情報端末３は、決済先情報と決済金額との２つの情報が認識できた時点で、ステップＳ１６で、決済時間２０を表示画面３００に表示し、タイマのカウントを開始させる。以降のステップは、実施の形態１と同様である。
【0071】
［２－３：効果等］
以上のように、実施の形態２によれば、実施の形態１と同様の効果に加え、動画撮影とすることで、複数回の静止画の撮像の操作を簡略化できる。また、動画内に２つの情報を捉えることができればよいので、店舗１内でのＱＲコード８と購入金額９との掲示の場所・位置に対する自由度も向上できる。
以上のように、実施の形態２によれば、実施の形態１と同様の効果に加え、動画撮影とすることで、複数回の静止画の撮像の操作を簡略化できる。また、動画内に２つの情報を捉えることができればよいので、店舗１内でのＱＲコード８と購入金額９との掲示の場所・位置に対する自由度も向上できる。
【0072】
実施の形態２の変形例として以下も可能である。変形例では、情報端末３は、機能として、実施の形態１のように静止画を用いて決済を行うモードと、実施の形態２のように動画を用いて決済を行うモードとの２つが用意され、ユーザが設定等によってそれらからモードを選択して利用できる。
【0073】
変形例として、カメラ３０による動画の撮影の際に、例えば図５の（Ａ）のようにＱＲコード８が認識され画像ｇ１が表示された状態が一定時間以上維持されること、あるいは図５の（Ｂ）のように購入金額９が認識されて画像ｇ２が表示された状態が一定時間以上維持されること、の少なくとも一方を、キャッシュレス決済の継続または実行のための条件の１つとして規定してもよい。例えば、情報端末３は、ＱＲコード８が認識された状態が一定時間以上維持できた場合に、次の購入金額９の認識の手順に移行させる。また、情報端末３は、購入金額９が認識された状態が一定時間以上維持できた場合に、決済時間２０の表示に移行させる。また、情報端末３は、例えば購入金額９の認識後、その購入金額９が写っている画像上に決済時間２０の画像を重畳表示し（例えば図２の（Ａ）と概略同様）、決済時間２０の待ちの際に、その購入金額９が写っている状態を維持させてもよい。その決済時間２０の待ちの途中で、購入者２が情報端末３を動かして、カメラ３０の画像内に購入金額９が写らない状態になった場合、情報端末３は、その状態をキャンセル動作として扱ってもよい。
【0074】
【0075】
［３－１：キャッシュレス決済システム］
図７は、実施の形態３のキャッシュレス決済システムの構成を示す。実施の形態３では、店舗１は、小規模な店舗や、例えば商品特売所等の無人店舗であり、ストア端末７等の設備は不要であり設けられていない。実施の形態３では、そのような店舗１で購入者２がセルフ決済を行う。購入者２は、店舗１で所望の複数の商品６の情報をカメラ３０の操作によって読み取る。それによる購入金額９の合計が、１回のキャッシュレス決済における決済金額となる。
図７は、実施の形態３のキャッシュレス決済システムの構成を示す。実施の形態３では、店舗１は、小規模な店舗や、例えば商品特売所等の無人店舗であり、ストア端末７等の設備は不要であり設けられていない。実施の形態３では、そのような店舗１で購入者２がセルフ決済を行う。購入者２は、店舗１で所望の複数の商品６の情報をカメラ３０の操作によって読み取る。それによる購入金額９の合計が、１回のキャッシュレス決済における決済金額となる。
【0076】
店舗１の商品棚５０には、商品６（例えば商品６１～６４）が並んでいる。商品６１～６４には、購入金額９に対応する金額等の情報が記載された値札６ｂ（６ｂ１～６ｂ４）が、シールの貼り付け等の態様で設けられている。商品棚５０の一部、例えば購入者２に向く側の前面の一部には、ＱＲコード８が掲示されている。ＱＲコード８の掲示の位置はこれに限らず可能である。
【0077】
購入者２は、掲示されているＱＲコード８を、情報端末３のカメラ３０によって撮影する。情報端末３は、撮影画像からのＱＲコード８の認識によって決済先情報を得る。次に、購入者２は、商品棚５０の商品６のうち、購入する所望の１つ以上の商品６の値札６ｂを撮影する。この撮影は、実施の形態１と同様に複数回の静止画の撮影としてもよいし、実施の形態２と同様に動画の撮影としてもよい。購入する商品６が複数ある場合、購入者２は、その商品６に対応する値札６ｂの撮影を複数回繰り返してもよいし、１つの画像内に複数の値札６ｂが捉えられる場合にはそれでもよい。情報端末３は、撮影画像内から各値札６ｂをスキャンして各商品６の購入金額９を認識する。情報端末３は、認識した１つ以上の購入金額９の合計を、決済金額として算出する。
【0078】
なお、変形例として、情報端末３は、撮影画像から、色や形状等の解析によって、個別の商品６を認識し、その認識した商品６に基づいて、自動的に購入金額９を割り出してもよい。例えば、情報端末３は、情報端末３内またはネットワーク１１上のサーバ等にある商品ＤＢを参照し、認識した商品６とその金額を含む情報を取得してもよい。
【0079】
情報端末３は、上記のようにＱＲコード８の決済先情報と購入する商品６の決済金額との２つの情報を認識した後、表示画面３００に決済時間２０を表示し、決済時間２０の満了後、決済命令を発行する。
【0080】
［３－２：表示画面］
図８は、実施の形態３でのキャッシュレス決済の過程における情報端末３の表示画面３００の例を示す。本例では、複数回の静止画の撮影の場合を示すが、動画撮影の場合でも同様に実現できる。図８の（Ａ）の表示画面３００は、携帯端末３のカメラ３０によって図７のＱＲコード８が捉えられて認識されている状態を示す。この表示画面３００では、第１時点で撮影された第１画像において、商品棚５０のＱＲコード８に対応する領域８０１が認識され、また、ＱＲコード８が認識されたことを表す画像ｇ１や、ＱＲコード８から得られた店舗情報８０４の画像も表示されている。
図８は、実施の形態３でのキャッシュレス決済の過程における情報端末３の表示画面３００の例を示す。本例では、複数回の静止画の撮影の場合を示すが、動画撮影の場合でも同様に実現できる。図８の（Ａ）の表示画面３００は、携帯端末３のカメラ３０によって図７のＱＲコード８が捉えられて認識されている状態を示す。この表示画面３００では、第１時点で撮影された第１画像において、商品棚５０のＱＲコード８に対応する領域８０１が認識され、また、ＱＲコード８が認識されたことを表す画像ｇ１や、ＱＲコード８から得られた店舗情報８０４の画像も表示されている。
【0081】
図８の（Ｂ）の表示画面３００は、携帯端末３のカメラ３０によって、購入対象である第１商品、例えば図７の商品６１とその値札６ｂ１が捉えられて認識されている状態を示す。この表示画面３００では、第２時点で撮影された第２画像において、商品６１の値札６ｂ１の購入金額９の領域８０２が認識されて、画像ｇ２が表示されている。また、この表示画面３００では、値札６ｂ１から認識された１個の商品６１の購入金額９（例えば￥220）を表す画像情報８０５と、その時点までの購入金額９の合計金額である決済金額（例えば￥220）の画像情報８０６とが、例えば表示画面３００内の上側の領域に重畳表示されている。また、表示画面３００の例えば下側の領域には、決済時間２０の画像８２１が表示されている。この画像８２１は、第１商品までのキャッシュレス決済を行う場合の決済時間２０の画像であり、後述するが、この決済時間２０の満了前に次の第２商品の購入金額９の認識がされた場合には、決済実行にはならず、（Ｃ）のような表示に更新される。
【0082】
図８の（Ｃ）の表示画面３００は、携帯端末３のカメラ３０によって、第２商品、例えば商品６４とその値札６ｂ４が認識されている状態を示す。この表示画面３００には、第３時点で撮影された第３画像において、商品６４の購入金額９（例えば￥64）の画像情報８０５とその時点の合計の決済金額（例えば￥284）の画像情報８０６とが重畳表示されている。また、この表示画面３００では、第２商品の購入金額９の認識に応じて、決済時間２０の表示が更新されて画像８２２となっている。（Ｂ）の決済時間２０のタイマのカウントは、第２商品の購入金額９の認識に応じてリセットされ、（Ｃ）の決済時間２０のタイマのカウントが開始される。本例では、決済時間２０は、購入者２による金額等の確認のための時間的余裕を考慮して、例えば１０秒として設定されている。決済時間２０が満了した時点で、自動的に決済命令が発行される。
【0083】
図８の（Ｄ）の表示画面３００は、決済処理完了確認時の表示例を示す。この表示画面３００では、一定の背景上に、店舗情報８０４、決済金額の画像情報８０６、決済処理完了確認のためのメッセージ２１、およびキーコード２５が表示されている。これにより、購入者２は、キャッシュレス決済の内容と完了を確認できる。無人店舗の場合、これでキャッシュレス決済の手続きが完了する。有人店舗の場合、購入者２は（Ｄ）の表示画面３００を店員５に見せて、店員５が確認を行えばよい。
【0084】
［３－３：処理フロー］
図９は、実施の形態３でのアプリ４１による処理フローを示す。図９のフローは、前述のフローに対し異なる構成点としては、ステップＳ３１，Ｓ３２，Ｓ３３を有する。ステップＳ１０の後、ステップＳ３１で、携帯端末３は、カメラ３０による撮影として、例えば第１画像をキャプチャする。ステップＳ１２で、携帯端末３は、第１画像からＱＲコード８の内容である決済先情報を認識する。ＱＲコード８が認識された場合（YES）、ステップＳ３２で、携帯端末２は、カメラ３０による撮影として、第２画像をキャプチャする。ステップＳ１４で、携帯端末３は、第２画像から商品６の値札６ｂに基づいて購入金額９を認識する。携帯端末３は、購入金額９が認識された場合（Ｓ１５－YES）、ステップＳ１６で、その時点までの各商品６の購入金額９の合計による決済金額を算出して表示するとともに、決済時間２０を表示してタイマを起動させる。
図９は、実施の形態３でのアプリ４１による処理フローを示す。図９のフローは、前述のフローに対し異なる構成点としては、ステップＳ３１，Ｓ３２，Ｓ３３を有する。ステップＳ１０の後、ステップＳ３１で、携帯端末３は、カメラ３０による撮影として、例えば第１画像をキャプチャする。ステップＳ１２で、携帯端末３は、第１画像からＱＲコード８の内容である決済先情報を認識する。ＱＲコード８が認識された場合（YES）、ステップＳ３２で、携帯端末２は、カメラ３０による撮影として、第２画像をキャプチャする。ステップＳ１４で、携帯端末３は、第２画像から商品６の値札６ｂに基づいて購入金額９を認識する。携帯端末３は、購入金額９が認識された場合（Ｓ１５－YES）、ステップＳ１６で、その時点までの各商品６の購入金額９の合計による決済金額を算出して表示するとともに、決済時間２０を表示してタイマを起動させる。
【0085】
ステップＳ１７で、携帯端末３は、所定のキャンセル動作（例えばシェイク動作）を検出した場合（YES）にはステップＳ３１へ戻る。ステップＳ１８で、携帯端末３は、決済時間２０のタイマが満了したかを確認し、満了前の場合（NO）、ステップＳ３３で、カメラ３０による新たな撮像の動作が有るかどうかを確認する。これは、前述のように購入者２が連続的に次の商品６を購入する場合に対応する確認である。撮像の動作が有る場合（YES）にはステップＳ３２に戻り、無い場合（NO）にはステップＳ１７に戻る。ステップＳ３２に戻った場合、携帯端末３は、新たな画像（例えば第３画像）をキャプチャし、ステップＳ１４以下の処理を同様に繰り返す。その場合、ステップＳ１６での決済時間２０の表示の更新の際には、タイマのカウントがリセットされる。決済時間２０のタイマが満了した場合（YES）、ステップＳ１９で、携帯端末３は、決済命令を発行する。以降の処理は前述と同様である。
【0086】
［３－４：効果等］
以上のように、実施の形態３によれば、実施の形態１，２と同様の効果に加え、無人店舗等の場合でも有人店舗の場合とほぼ同様の方式でキャッシュレス決済が可能である。実施の形態３では、店舗１側の設備としては、キャッシュレジスタ等のストア端末７の設備を必要とせず、よって、設備投資の少ない店舗１への適用に好適である。
以上のように、実施の形態３によれば、実施の形態１，２と同様の効果に加え、無人店舗等の場合でも有人店舗の場合とほぼ同様の方式でキャッシュレス決済が可能である。実施の形態３では、店舗１側の設備としては、キャッシュレジスタ等のストア端末７の設備を必要とせず、よって、設備投資の少ない店舗１への適用に好適である。
【0087】
実施の形態３の変形例として以下も可能である。まず、図７で、店舗１内の商品６に値札６ｂとして商品管理用のバーコード等が記載されたタグが設けられている場合、以下のように対応できる。携帯端末３は、カメラ３０の画像に基づいて、ＱＲコード８から決済先情報を認識した後、購入する商品６の値札６ｂからバーコードを認識して、購入金額等の情報を得る。携帯端末３は、表示画面３００にその購入金額や、合計による決済金額等の情報を表示する。そして、携帯端末３は、決済時間２０を表示し、前述と同様に処理を行う。
【0088】
実施の形態３では、図８のように購入する商品６毎の購入金額９の認識に応じて決済時間２０を更新する構成を示したが、これに限らず可能である。変形例では、情報端末３は、表示画面３００内に、合計金額すなわち決済金額を算出および表示させるためのボタン等のＧＵＩ部品を設ける。このボタンは、言い換えれば、決済実行へ移行させる指示のためのボタンである。情報端末３は、購入者２がそれらのボタン等を操作した場合、表示画面３００にはじめて決済時間２０を表示し、タイマのカウントを開始し、満了後に決済命令を発行する。他の変形例としては、携帯端末３は、決済時間２０の経過後に、表示画面３００に、最終確認用の決済命令発行のためのボタン等を表示し、そのボタン等の操作に応じて決済命令を発行してもよい。
【0089】
＜実施の形態４＞
図１０を用いて、本発明の実施の形態４について説明する。実施の形態４では、情報端末３としてＨＭＤ（ヘッドマウントディスプレイ）やウェアラブル端末を用いる場合を示す。
図１０を用いて、本発明の実施の形態４について説明する。実施の形態４では、情報端末３としてＨＭＤ（ヘッドマウントディスプレイ）やウェアラブル端末を用いる場合を示す。
【0090】
［４－１：キャッシュレス決済システム］
図１０は、実施の形態４のキャッシュレス決済システムの構成を示す。このキャッシュレス決済システムは、購入者２の情報端末３（キャッシュレス決済端末）を構成する２台のデバイスを有し、それらのうち第１情報端末としてのＨＭＤ３Ａと、第２情報端末としてのウェアラブル端末３Ｂとを有する。ＨＭＤ３Ａは、購入者２が頭部に装着し、購入者２の視界に対応させた表示画面３００Ａ（例えばシースルー型の表示面）に、拡張現実（ＡＲ）等に対応する画像を表示可能な機能を持つデバイスである。ウェアラブル端末３Ｂは、例えば購入者２が腕部に装着するスマートウォッチであり、表示画面３００Ｂに画像を表示可能である表示機能を有する。ウェアラブル端末３Ｂは、表示機能を用いて、店員５に対し前述の決済処理完了確認情報を見せることができる。
図１０は、実施の形態４のキャッシュレス決済システムの構成を示す。このキャッシュレス決済システムは、購入者２の情報端末３（キャッシュレス決済端末）を構成する２台のデバイスを有し、それらのうち第１情報端末としてのＨＭＤ３Ａと、第２情報端末としてのウェアラブル端末３Ｂとを有する。ＨＭＤ３Ａは、購入者２が頭部に装着し、購入者２の視界に対応させた表示画面３００Ａ（例えばシースルー型の表示面）に、拡張現実（ＡＲ）等に対応する画像を表示可能な機能を持つデバイスである。ウェアラブル端末３Ｂは、例えば購入者２が腕部に装着するスマートウォッチであり、表示画面３００Ｂに画像を表示可能である表示機能を有する。ウェアラブル端末３Ｂは、表示機能を用いて、店員５に対し前述の決済処理完了確認情報を見せることができる。
【0091】
ＨＭＤ３Ａとウェアラブル端末３Ｂは、例えばＢｌｕｅｔｏｏｔｈ（登録商標）等の通信インタフェースによる低電力通信・近距離通信で接続され、両者が連携して機能する。ＨＭＤ３Ａは、アプリ（キャッシュレス決済アプリ）４１Ａおよびカメラ７０等を備える。ウェアラブル端末３Ｂは、アプリ４１Ａと連携するアプリを備えてもよい。ウェアラブル端末３Ｂは、表示機能を持つデバイスであればよく、他にはスマートフォン等でもよい。
【0092】
購入者２は、キャッシュレス決済の際には、ＨＭＤ３Ａのカメラ７０によって、ＱＲコード８と購入金額９を撮影する。ＨＭＤ３Ａは、カメラ７０の撮影画像から、ＱＲコード８の認識によって決済先情報を取得し、購入金額９の認識によって決済金額を取得する。ＨＭＤ３Ａは、２つの情報を認識すると、表示画面３００Ａに決済時間２０を表示し、決済時間２０の満了に応じて決済命令をサーバ１２に送信する（信号４ａ）。サーバ１２は、受信した決済命令における、購入者２および情報端末３（ＨＭＤ３Ａ）の情報と、決済先情報と、決済金額情報とを用いて、キャッシュレス決済処理を実行する。サーバ１２は、決済処理完了確認情報をＨＭＤ３Ａに送信する（信号４ｂ）。サーバ１２は、情報端末３側と対応させた決済処理完了確認情報をストア端末７に送信してもよい（信号４ｃ）。
【0093】
ＨＭＤ３Ａは、サーバ１２から受信した決済処理完了確認情報に基づいて、キーコード等の情報を信号４ｄとしてウェアラブル端末３Ｂに転送する。ウェアラブル端末３Ｂは、そのキーコード等の情報を表示画面３００Ｂに表示する。購入者２は、ウェアラブル端末３Ｂの表示画面３００Ｂに表示されたキーコード等の情報を店員５に見せる。これにより、購入者２と店員５は、キャッシュレス決済処理の完了が確認できる。
【0094】
［４－２：表示画面］
図１１は、実施の形態４でのキャッシュレス決済の過程におけるＨＭＤ３Ａおよびウェアラブル端末３Ｂの表示画面例を示す。図１１の（Ａ）は、ＨＭＤ３Ａでの表示画面３００Ａの例を示す。この表示画面３００Ａでは、カメラ７０の撮影画像の中から、ＱＲコード８の領域１１０１が認識されて、枠等の画像ｇ１が表示され、また、購入金額９の領域１１０２が認識されて、枠等の画像ｇ２が表示されている。さらに、この表示画面３００Ａでは、それらの２つの情報の認識に応じて、例えば上側の領域に、決済時間２０の画像が重畳表示されている。ＨＭＤ３Ａは、決済時間２０が満了した時、決済命令を発行してサーバ１２に送信する。
図１１は、実施の形態４でのキャッシュレス決済の過程におけるＨＭＤ３Ａおよびウェアラブル端末３Ｂの表示画面例を示す。図１１の（Ａ）は、ＨＭＤ３Ａでの表示画面３００Ａの例を示す。この表示画面３００Ａでは、カメラ７０の撮影画像の中から、ＱＲコード８の領域１１０１が認識されて、枠等の画像ｇ１が表示され、また、購入金額９の領域１１０２が認識されて、枠等の画像ｇ２が表示されている。さらに、この表示画面３００Ａでは、それらの２つの情報の認識に応じて、例えば上側の領域に、決済時間２０の画像が重畳表示されている。ＨＭＤ３Ａは、決済時間２０が満了した時、決済命令を発行してサーバ１２に送信する。
【0095】
図１１の（Ｂ）は、ＨＭＤ３Ａでの決済処理完了確認情報を表示する表示画面３００Ａの例を示す。この表示画面３００Ａでは、サーバ１２から受け取った決済処理完了確認情報に基づいて、メッセージ２１およびキーコード２５が重畳表示されている。これにより、購入者２は、キャッシュレス決済処理の完了を確認できる。ＨＭＤ３Ａは、決済処理完了確認情報のうちのキーコードと決済金額とを含む情報をウェアラブル端末３Ｂに転送する（信号４ｄ）。
【0096】
図１１の（Ｃ）は、ウェアラブル端末３Ｂの表示画面３００Ｂの例を示す。ウェアラブル端末３Ｂは、ＨＭＤ３Ａから受信した情報に基づいて、表示画面３００Ｂに、キーコード２５と決済金額２４とを表示する。購入者２は、この表示画面３００Ｂを店員５に見せる。これにより、店員５もキャッシュレス決済処理の完了を確認できる。ストア端末７の店員５側の表示装置にサーバ１２からの決済処理完了確認情報のキーコード等が表示されている場合、店員５は、そのキーコードと、購入者２側の表示画面３００Ｂのキーコード２５とを比較して確認ができる。なお、実施の形態４を無人店舗に適用する場合、ウェアラブル端末３Ｂの表示画面３００Ｂを店舗１側の店員５に見せる手順については省略される。
【0097】
［４－３：ＨＭＤ］
図１２は、ＨＭＤ３Ａの外観構成例を示す。ＨＭＤ３Ａは、カメラ７０、測距デバイス７１、投影光学系７２（７２ａ，７２ｂ）、レンズやスクリーン等の表示光学系７３、ノーズパッド７４、コントローラ７５、スピーカ７６、マイク７７、フレーム筐体７８（７８ａ，７８ｂ，７８ｃ）等を有する。フレーム筐体７８（７８ａ，７８ｂ，７８ｃ）には、コントローラ７５、カメラ７０、測距デバイス７１、スピーカ７６、およびマイク７７等が配置されている。配置は図１２の通りでなくてもよい。ユーザは、フレーム筐体７８とノーズパッド７４によってＨＭＤ３Ａを顔部に装着する。
図１２は、ＨＭＤ３Ａの外観構成例を示す。ＨＭＤ３Ａは、カメラ７０、測距デバイス７１、投影光学系７２（７２ａ，７２ｂ）、レンズやスクリーン等の表示光学系７３、ノーズパッド７４、コントローラ７５、スピーカ７６、マイク７７、フレーム筐体７８（７８ａ，７８ｂ，７８ｃ）等を有する。フレーム筐体７８（７８ａ，７８ｂ，７８ｃ）には、コントローラ７５、カメラ７０、測距デバイス７１、スピーカ７６、およびマイク７７等が配置されている。配置は図１２の通りでなくてもよい。ユーザは、フレーム筐体７８とノーズパッド７４によってＨＭＤ３Ａを顔部に装着する。
【0098】
カメラ７０は、ユーザの視線前方を撮影するように取り付けられている。測距デバイス７１は、カメラ７０の撮影画像が捉える現実空間の現実物体との距離を測定する。測距デバイス７１は、現実物体の輪郭等の特徴点に対してステレオカメラのような方式で距離を算出するものでもよいし、ＴＯＦ（Time Of Flight）方式のように２次元的に光線を照射して距離を計測するものでもよい。測距デバイス７１は、ＨＭＤ３Ａと撮影される現実物体との距離を測定できるものであればよい。
【0099】
ＨＭＤ３Ａの表示部（表示画面３００Ａ）は、投影光学系７２と表示光学系７３によって構成されている。投影光学系７２（７２ａ，７２ｂ）は、コンピュータグラフィックス等で作成した仮想物体の画面（対応する仮想画像）を、左目で確認する画像と右目で確認する画像として、表示光学系７３に投影して表示する。購入者２は、前方の風景や現実物体を、表示光学系７３を透過して見ることができ、投影光学系７２から投影する仮想物体の画面は、表示光学系７３を介して、現実空間の現実物体と区別しやすい任意の位置に表示させることができる。ＨＭＤ３Ａは、測距デバイス７１による測拒情報を用いて、選択した位置に仮想物体の画面を表示してもよい。なお、測距デバイス７１が無い構成でもよい。この場合、仮想物体の画面は、現実空間内のプリセットした位置に表示される。
【0100】
コントローラ７５は、カメラ７０で撮影した現実空間の画像、測距デバイス７１で取得した現実物体等の現実空間内の位置データを取り込み、内部のメモリやＣＰＵに供給する。さらに、コントローラ７５は、投影光学系７２で投影する画像や、スピーカ７６に出力する音を作成する。
【0101】
図１３は、ＨＭＤ３Ａの機能ブロック構成例を示す。ＨＭＤ３Ａのコントローラ７５は、通信部８３、ＣＰＵ８４、ＲＡＭ８５、画像ＲＡＭ８６、フラッシュＲＯＭ８７、距離算出処理部８１、センサ群８２等を有し、これらが内部バス８０に接続されている。また、内部バス８０には、カメラ７０、測距デバイス７１、投影光学系７２、表示光学系７３、スピーカ７６、マイク７７等が接続されている。ＨＭＤ３Ａは、ジャイロセンサ、加速度センサ、地磁気センサ、位置センサ（ＧＰＳ受信器）、視線検出センサ等を含むセンサ群８２を内蔵している。コントローラ７５は、センサ群８２の検出情報を用いながら制御を行う。
【0102】
投影光学系７２は、左側の投影光学系７２ａによる左目の画像と右側の投影光学系７２ｂによる右目の画像とを独立に表示光学系７３に投影させる。投影光学系７２は、他に、１つのプロジェクタでインタリーブした左目の画像と右目の画像を投影し、シャッタ光学系で、左目の画像と右目の画像をそれぞれの目に透過させるものであってもよい。さらには、投影光学系７２は、ホログラフィックレンズを用いた光学系としもよい。
【0103】
通信部８３は、モバイル通信、無線ＬＡＮ、近距離通信等の複数の通信インタフェースに対応する複数の通信機能を有する。近距離通信は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）等を適用できる。通信部８３は、ＨＭＤ３Ａを、図１の基地局１０を介してネットワーク１１に接続する。また、通信部８３は、ＢｌｕｅＴｏｏｔｈ通信等によって、ウェラブル端末３Ｂとの間で一対一通信を行う。
【0104】
フラッシュＲＯＭ８７には、格納されている処理プログラムとして、基本動作プログラム８８や、アプリ（キャッシュレス決済アプリ）４１Ａが含まれる。ＣＰＵ８４によってこれらのプログラムがＲＡＭ８５に展開されてそのプログラムに従った処理が実行されることで、ＨＭＤ３Ａの各機能が実現される。また、フラッシュＲＯＭ８７には、プログラム処理の過程および結果で発生するデータを格納できる。また、投影光学系７２に送出する画像データは、画像ＲＡＭ８６に格納され、画像ＲＡＭ８６から読み出される。
【0105】
［４－４：処理フロー］
図１４は、実施の形態４でのアプリ４１Ａの処理フローを示す。ＨＭＤ３Ａは、ステップＳ５０で、アプリ４１Ａを起動し、サーバ１２にログインする。ステップＳ５１で、ＨＭＤ３Ａは、カメラ７０による撮影（なお静止画でも動画でもよい）を行い、撮影画像をＲＡＭ８５にキャプチャする。ステップＳ５２で、ＨＭＤ３Ａは、撮影画像をスキャンしてＱＲコード８を認識して決済先情報を取得する。ＱＲコード８の認識ができない場合（Ｓ５３－NO）にはステップＳ５１に戻る。ＱＲコード８の認識ができた場合（Ｓ５３－YES）、ステップＳ５４で、ＨＭＤ３Ａは、撮影画像をスキャンして購入金額９に対応する決済金額を認識する。購入金額が認識できない場合（Ｓ５５－NO）にはステップＳ５１に戻る。
図１４は、実施の形態４でのアプリ４１Ａの処理フローを示す。ＨＭＤ３Ａは、ステップＳ５０で、アプリ４１Ａを起動し、サーバ１２にログインする。ステップＳ５１で、ＨＭＤ３Ａは、カメラ７０による撮影（なお静止画でも動画でもよい）を行い、撮影画像をＲＡＭ８５にキャプチャする。ステップＳ５２で、ＨＭＤ３Ａは、撮影画像をスキャンしてＱＲコード８を認識して決済先情報を取得する。ＱＲコード８の認識ができない場合（Ｓ５３－NO）にはステップＳ５１に戻る。ＱＲコード８の認識ができた場合（Ｓ５３－YES）、ステップＳ５４で、ＨＭＤ３Ａは、撮影画像をスキャンして購入金額９に対応する決済金額を認識する。購入金額が認識できない場合（Ｓ５５－NO）にはステップＳ５１に戻る。
【0106】
ステップＳ５６で、ＨＭＤ３Ａは、表示画面３００Ａに決済時間２０を表示し、タイマを起動させる。ステップＳ５７で、ＨＭＤ３Ａは、決済時間２０の途中にキャンセル動作を検出した場合（YES）にはステップＳ５１に戻る。実施の形態４では、このキャンセル動作は、例えば、購入者２が頭部（対応するＨＭＤ３Ａ）を振るシェイク動作である。アプリ４１Ａには、予め、そのシェイク動作がキャンセル動作として設定されている。ＨＭＤ３Ａは、センサ群８２によってシェイク動作を検出できる。
【0107】
ステップＳ５８で、決済時間２０のタイマが満了した場合（YES）、ステップＳ５９で、ＨＭＤ３Ａは、決済命令を発行してサーバ１２へ送信する。ステップＳ６０で、ＨＭＤ３Ａは、サーバ１２からの決済処理完了確認情報を受けると、表示画面３００Ａに、図１１の（Ｂ）の例のように、決済処理完了確認情報を表示する。ステップＳ６１では、ＨＭＤ３Ａは、決済処理完了確認情報におけるキーコードと決済金額とを含む情報をウェアラブル端末３Ｂへ転送する。ウェアラブル端末３Ｂは、ＨＭＤ３Ａから受信した情報に基づいて、表示画面３００Ｂに、決済処理完了確認情報におけるキーコードと決済金額とを表示する。ステップＳ６２で、手続きを継続する場合（YES）にはステップＳ５１に戻り、終了する場合（NO）には、ステップＳ６２で、ＨＭＤ３Ａは、サーバ１２からログアウトして、アプリ４１Ａを終了させる。
【0108】
［４－５：効果等］
以上のように、実施の形態４によれば、実施の形態１等と同様の効果に加え、購入者２は、図１０のような２つのデバイスを用いることで、商品６の購入に伴うキャッシュレス決済をハンズフリーで行うことができる。
以上のように、実施の形態４によれば、実施の形態１等と同様の効果に加え、購入者２は、図１０のような２つのデバイスを用いることで、商品６の購入に伴うキャッシュレス決済をハンズフリーで行うことができる。
【0109】
＜実施の形態５＞
図１５を用いて、本発明の実施の形態５について説明する。実施の形態５では、音声信号を用いる場合を示す。
図１５を用いて、本発明の実施の形態５について説明する。実施の形態５では、音声信号を用いる場合を示す。
【0110】
［５－１：キャッシュレス決済システム］
図１５は、実施の形態５のキャッシュレス決済システムの構成を示す。図１５の構成は、図１０の構成と主に異なる点として、購入者２は、ＨＭＤ３Ａを装着しているがウェアラブル端末３Ｂを装着していない点がある。また、購入者２（またはＨＭＤ３Ａ）から、音声信号１５０１によって、決済処理完了確認情報（例えばキーコード）を店員５に伝える点がある。
図１５は、実施の形態５のキャッシュレス決済システムの構成を示す。図１５の構成は、図１０の構成と主に異なる点として、購入者２は、ＨＭＤ３Ａを装着しているがウェアラブル端末３Ｂを装着していない点がある。また、購入者２（またはＨＭＤ３Ａ）から、音声信号１５０１によって、決済処理完了確認情報（例えばキーコード）を店員５に伝える点がある。
【0111】
［５－２：表示画面］
実施の形態５でのキャッシュレス決済の過程におけるＨＭＤ３Ａの表示画面３００Ａの例は、前述の図１１の（Ａ），（Ｂ）と同様である。実施の形態５では、購入者２は、サーバ１２からＨＭＤ３Ａに得て表示画面３００Ａに表示された決済処理完了確認情報におけるキーコード２５（例えば図１１の（Ｂ））を、購入者２による発声によって、音声信号１５０１として、店員５に伝える。
実施の形態５でのキャッシュレス決済の過程におけるＨＭＤ３Ａの表示画面３００Ａの例は、前述の図１１の（Ａ），（Ｂ）と同様である。実施の形態５では、購入者２は、サーバ１２からＨＭＤ３Ａに得て表示画面３００Ａに表示された決済処理完了確認情報におけるキーコード２５（例えば図１１の（Ｂ））を、購入者２による発声によって、音声信号１５０１として、店員５に伝える。
【0112】
本例では、キーコード２５は、図１１の（Ｂ）のように、複数（例えば４個）の英数字列から構成されている。購入者２は、キーコード２５の複数の英数字列の中から、任意の１つを選び、あるいは、予め定められた箇所（例えば最も下の４桁）の英数字列を選び、選んだ英数字列を、音声信号１５０１によって店員５に伝える。店員５は、音声信号１５０１によって伝えられた英数字列と、ストア端末７の店員５側の表示装置に表示された決済処理完了確認情報のキーコードとから、キャッシュレス決済の完了を確認する。
【0113】
［５－３：処理フロー］
実施の形態５でのＨＭＤ３Ａのアプリ４１Ａによる処理フローは、図４の実施の形態１のフローや図１４の実施の形態４のフローと概略同様であるが、異なる点としては以下がある。図１４のフローのステップＳ６０の後、ステップＳ６１の代わりに、購入者２は、ＨＭＤ３Ａの表示画面３００Ａに表示された決済処理完了確認情報におけるキーコード２５（例えば図１１の（Ｂ））を、音声信号１５０１によって店員５に伝える。
実施の形態５でのＨＭＤ３Ａのアプリ４１Ａによる処理フローは、図４の実施の形態１のフローや図１４の実施の形態４のフローと概略同様であるが、異なる点としては以下がある。図１４のフローのステップＳ６０の後、ステップＳ６１の代わりに、購入者２は、ＨＭＤ３Ａの表示画面３００Ａに表示された決済処理完了確認情報におけるキーコード２５（例えば図１１の（Ｂ））を、音声信号１５０１によって店員５に伝える。
【0114】
［５－４：効果等］
以上のように、実施の形態５によれば、購入者２は、ウェアラブル端末３Ｂを必要とせず、ＨＭＤ３Ａによって、商品の購入に伴うキャッシュレス決済をハンズフリーで行うことができ、店舗属性に係らずにほぼ同一の方式でキャッシュレス決済を行うことができる。
以上のように、実施の形態５によれば、購入者２は、ウェアラブル端末３Ｂを必要とせず、ＨＭＤ３Ａによって、商品の購入に伴うキャッシュレス決済をハンズフリーで行うことができ、店舗属性に係らずにほぼ同一の方式でキャッシュレス決済を行うことができる。
【0115】
実施の形態５の変形例として以下も可能である。ＨＭＤ３Ａが音声合成および音声出力機能を持つ場合、ＨＭＤ３Ａがその機能を用いて、決済処理完了確認情報におけるキーコード２５を音声信号１５０１に変換して出力してもよい。この場合、購入者２による発声を省略できる。
【0116】
【0117】
［６－１：表示画面］
図１６は、実施の形態６でのキャッシュレス決済の過程における情報端末３の表示画面３００の例を示す。情報端末３のカメラ３０は、撮像の際、図１のようなストア端末７を捉えて、表示画面３００に映し出す。図１６の表示画面３００では、撮影画像の中からＱＲコード８の領域１６０１と購入金額９の領域１６０２が認識されており、枠等の画像ｇ１，ｇ２も表示されている。さらに、情報端末３は、この表示画面３００に、ＧＵＩ部品として、決済取消ボタン１６１１と決済実行ボタン１６１２とを表示し、購入者２に操作を促している。情報端末３は、購入者２による決済取消ボタン１６１１の押下操作を受けた場合、決済の手続きをキャンセルするように制御する。情報端末３は、購入者２による決済実行ボタン１６１２の押下操作を受けた場合、決済命令を発行しサーバ１２に送信する。サーバ１２での決済処理の完了後、情報端末３で決済処理完了確認情報を表示する表示画面３００の例は、前述の図２の（Ｂ）と同様となる。このように、実施の形態６では、情報端末３は、２つの情報の認識後、前述の決済時間２０の表示を省略し、決済実行ボタン１６１２等を表示する。
図１６は、実施の形態６でのキャッシュレス決済の過程における情報端末３の表示画面３００の例を示す。情報端末３のカメラ３０は、撮像の際、図１のようなストア端末７を捉えて、表示画面３００に映し出す。図１６の表示画面３００では、撮影画像の中からＱＲコード８の領域１６０１と購入金額９の領域１６０２が認識されており、枠等の画像ｇ１，ｇ２も表示されている。さらに、情報端末３は、この表示画面３００に、ＧＵＩ部品として、決済取消ボタン１６１１と決済実行ボタン１６１２とを表示し、購入者２に操作を促している。情報端末３は、購入者２による決済取消ボタン１６１１の押下操作を受けた場合、決済の手続きをキャンセルするように制御する。情報端末３は、購入者２による決済実行ボタン１６１２の押下操作を受けた場合、決済命令を発行しサーバ１２に送信する。サーバ１２での決済処理の完了後、情報端末３で決済処理完了確認情報を表示する表示画面３００の例は、前述の図２の（Ｂ）と同様となる。このように、実施の形態６では、情報端末３は、２つの情報の認識後、前述の決済時間２０の表示を省略し、決済実行ボタン１６１２等を表示する。
【0118】
［６－２：フロー］
図１７は、実施の形態６での情報端末３のアプリ４１による処理フローを示す。図１７のフローは、図４の実施の形態１のフローと異なる点として、前述のステップＳ１６～Ｓ１８の代わりに、ステップＳ６０１～Ｓ６０３を有する。情報端末３は、ＱＲコード８と購入金額９との２つが認識された後（Ｓ１５－YES）、ステップＳ６０１で、図１６の表示画面３００のような決済前画面を表示する。ステップＳ６０２では、情報端末３は、決済前画面での決済取消ボタン１６１１の操作が有る場合（YES）、ステップＳ１１に戻る。ステップＳ６０３では、情報端末３は、決済実行ボタン１６１２の操作が有る場合（YES）にはステップＳ１９に進み、無い場合（NO）にはステップＳ６０２に戻る。ステップＳ１９で、情報端末３は、決済命令を発行する。
図１７は、実施の形態６での情報端末３のアプリ４１による処理フローを示す。図１７のフローは、図４の実施の形態１のフローと異なる点として、前述のステップＳ１６～Ｓ１８の代わりに、ステップＳ６０１～Ｓ６０３を有する。情報端末３は、ＱＲコード８と購入金額９との２つが認識された後（Ｓ１５－YES）、ステップＳ６０１で、図１６の表示画面３００のような決済前画面を表示する。ステップＳ６０２では、情報端末３は、決済前画面での決済取消ボタン１６１１の操作が有る場合（YES）、ステップＳ１１に戻る。ステップＳ６０３では、情報端末３は、決済実行ボタン１６１２の操作が有る場合（YES）にはステップＳ１９に進み、無い場合（NO）にはステップＳ６０２に戻る。ステップＳ１９で、情報端末３は、決済命令を発行する。
【0119】
［６－３：効果等］
以上のように、実施の形態６では、決済時間２０を待つことの代わりに、購入者２による決済実行ボタン１６１２等の入力操作となり、実施の形態１と同様の効果が得られる。なお、実施の形態６の変形例として、情報端末３の表示画面３００に、実施の形態１のように決済時間２０を表示すると共に、図１６のように決済実行ボタン１６１２等を表示してもよい。この場合、購入者２は、決済時間２０の途中でボタンを操作する場合には決済のキャンセルまたは実行が可能であると共に、決済時間２０の満了時には自動的に決済の実行が可能である。
以上のように、実施の形態６では、決済時間２０を待つことの代わりに、購入者２による決済実行ボタン１６１２等の入力操作となり、実施の形態１と同様の効果が得られる。なお、実施の形態６の変形例として、情報端末３の表示画面３００に、実施の形態１のように決済時間２０を表示すると共に、図１６のように決済実行ボタン１６１２等を表示してもよい。この場合、購入者２は、決済時間２０の途中でボタンを操作する場合には決済のキャンセルまたは実行が可能であると共に、決済時間２０の満了時には自動的に決済の実行が可能である。
【0120】
【0121】
［７－１：表示画面］
図１８は、実施の形態７でのキャッシュレス決済の過程におけるＨＭＤ３Ａの表示画面３００Ａの例を示す。図１８の表示画面３００Ａは、カメラ７０の撮影画像の中からＱＲコード８の領域１８０１と購入金額９の領域１８０２が認識されており、枠等の画像ｇ１，ｇ２も表示されている。さらに、ＨＭＤ３Ａは、表示画面３００Ａに、ＧＵＩ部品として、「ジェスチャ１で決済取消」ボタン１８１１と、「ジェスチャ２で決済実行」ボタン１８１２とを表示し、購入者２に操作を促す。予め、ＨＭＤ３Ａのカメラ７０やセンサ群８２（図１３）によって検出可能である所定のジェスチャが規定されている。例えば、第１ジェスチャ（「ジェスチャ１」）は、ＨＭＤ３Ａの表示画面３００Ａの前にユーザが指を置き、その指を左方向に動かす動作であり、第２ジェスチャ（「ジェスチャ２」）は、指を右方向に動かす動作である。これらのジェスチャの詳細については限定せず、カメラ７０等を用いて区別して検出できるジェスチャであればよい。
図１８は、実施の形態７でのキャッシュレス決済の過程におけるＨＭＤ３Ａの表示画面３００Ａの例を示す。図１８の表示画面３００Ａは、カメラ７０の撮影画像の中からＱＲコード８の領域１８０１と購入金額９の領域１８０２が認識されており、枠等の画像ｇ１，ｇ２も表示されている。さらに、ＨＭＤ３Ａは、表示画面３００Ａに、ＧＵＩ部品として、「ジェスチャ１で決済取消」ボタン１８１１と、「ジェスチャ２で決済実行」ボタン１８１２とを表示し、購入者２に操作を促す。予め、ＨＭＤ３Ａのカメラ７０やセンサ群８２（図１３）によって検出可能である所定のジェスチャが規定されている。例えば、第１ジェスチャ（「ジェスチャ１」）は、ＨＭＤ３Ａの表示画面３００Ａの前にユーザが指を置き、その指を左方向に動かす動作であり、第２ジェスチャ（「ジェスチャ２」）は、指を右方向に動かす動作である。これらのジェスチャの詳細については限定せず、カメラ７０等を用いて区別して検出できるジェスチャであればよい。
【0122】
購入者２は、表示画面３００Ａを見て、所定のジェスチャによって、決済に係わる操作を行う。購入者２は、決済を取り消す場合には「ジェスチャ１」を行い、実行する場合には「ジェスチャ２」を行う。ＨＭＤ３Ａは、購入者２による「ジェスチャ１」を認識した場合には、「ジェスチャ１で決済取消」ボタン１８１１を押すように表示状態を更新し、決済をキャンセルする。ＨＭＤ３Ａは、「ジェスチャ２」を認識した場合には、「ジェスチャ２で決済実行」ボタン１８１２を押すように表示状態を更新し、決済命令を発行する。決済完了確認時の表示画面３００Ａは、例えば図１１の（Ｂ）と同様となる。
【0123】
変形例として、ＨＭＤ３Ａが視線センサを備える場合には、視線センサによって購入者２の視線を検出し、予め規定された視線操作を検出した場合に、上記のような決済取り消しまたは決済実行と対応付けて制御してもよい。視線操作は、例えば、視線が左を向く操作や右を向く操作が挙げられる。あるいは、他の視線操作は、「ジェスチャ１で決済取消」ボタン１８１１等を注視する操作としてもよい。
【0124】
［７－２：フロー］
実施の形態７でのＨＭＤ３Ａのアプリ４１Ａによる処理フローは、実施の形態６の図１７のフローと概略同様であるが、異なる点として、ステップＳ６０１～Ｓ６０３は、以下のようなステップとなる。ステップＳ６０１で、ＨＭＤ３Ａは、図１８の表示画面３００Ａのような決済前画面を表示する。ステップＳ６０２で、ＨＭＤ３Ａは、「ジェスチャ１で決済取消」ボタン１８１１に対応する「ジェスチャ１」を検出した場合（YES）にはステップＳ１１に戻る。ステップＳ６３で、ＨＭＤ３Ａは、「ジェスチャ２で決済実行」ボタン１８１２に対応する「ジェスチャ２」を検出した場合（YES）にはステップＳ１９へ進み、検出しない場合（NO）にはステップＳ６０２に戻る。
実施の形態７でのＨＭＤ３Ａのアプリ４１Ａによる処理フローは、実施の形態６の図１７のフローと概略同様であるが、異なる点として、ステップＳ６０１～Ｓ６０３は、以下のようなステップとなる。ステップＳ６０１で、ＨＭＤ３Ａは、図１８の表示画面３００Ａのような決済前画面を表示する。ステップＳ６０２で、ＨＭＤ３Ａは、「ジェスチャ１で決済取消」ボタン１８１１に対応する「ジェスチャ１」を検出した場合（YES）にはステップＳ１１に戻る。ステップＳ６３で、ＨＭＤ３Ａは、「ジェスチャ２で決済実行」ボタン１８１２に対応する「ジェスチャ２」を検出した場合（YES）にはステップＳ１９へ進み、検出しない場合（NO）にはステップＳ６０２に戻る。
【0125】
［７－３：効果等］
以上のように、実施の形態７によれば、ＨＭＤでのジェスチャを用いて、実施の形態６と同様の効果が得られる。
以上のように、実施の形態７によれば、ＨＭＤでのジェスチャを用いて、実施の形態６と同様の効果が得られる。
【0126】
＜実施の形態８＞
図１９を用いて、本発明の実施の形態８のキャッシュレス決済システム等について説明する。実施の形態１等では、時間的な順序として、先にＱＲコードの決済先情報を認識し、後に決済金額を認識する方式を示した。それに対し、実施の形態８では、時間的な順序として、先に決済金額を認識し、後にＱＲコードの決済先情報を認識する方式を示す。実施の形態８でも、実施の形態１の図１のような環境を同様に適用できる。
図１９を用いて、本発明の実施の形態８のキャッシュレス決済システム等について説明する。実施の形態１等では、時間的な順序として、先にＱＲコードの決済先情報を認識し、後に決済金額を認識する方式を示した。それに対し、実施の形態８では、時間的な順序として、先に決済金額を認識し、後にＱＲコードの決済先情報を認識する方式を示す。実施の形態８でも、実施の形態１の図１のような環境を同様に適用できる。
【0127】
［８－１：処理フロー］
図１９は、実施の形態８での情報端末３のアプリ４１による処理フローを示す。本例では、カメラ３０による撮影画像として動画を用いる場合を示すが、複数の静止画を用いる場合も同様に可能である。図１９のフローは、図６の実施の形態２でのフローに対し、異なる点として、ステップＳ１２～Ｓ１５の代わりに、ステップＳ８１～Ｓ８４を有し、図示の通り、２つの情報の認識の順序が逆となっている。情報端末３は、ステップＳ１１Ｂで、カメラ３０による動画の撮影を開始する。情報端末３は、ステップＳ８１で、動画のうちの第１画像からのスキャンによって購入金額９に対応する決済金額を認識する。購入金額９の認識が有る場合（YES）、ステップＳ８２で、情報端末３は、動画のうちの第２画像からのスキャンによってＱＲコード８の決済先情報を認識する。なお、第２画像が第１画像と同じでもよい。すなわち１枚の画像から購入金額９とＱＲコード８との両方が認識できる場合にも、同様の判断が成立する。情報端末３は、上記２つの情報の認識後（Ｓ８４－YES）、ステップＳ１６以降の処理を前述の形態と同様に行う。
図１９は、実施の形態８での情報端末３のアプリ４１による処理フローを示す。本例では、カメラ３０による撮影画像として動画を用いる場合を示すが、複数の静止画を用いる場合も同様に可能である。図１９のフローは、図６の実施の形態２でのフローに対し、異なる点として、ステップＳ１２～Ｓ１５の代わりに、ステップＳ８１～Ｓ８４を有し、図示の通り、２つの情報の認識の順序が逆となっている。情報端末３は、ステップＳ１１Ｂで、カメラ３０による動画の撮影を開始する。情報端末３は、ステップＳ８１で、動画のうちの第１画像からのスキャンによって購入金額９に対応する決済金額を認識する。購入金額９の認識が有る場合（YES）、ステップＳ８２で、情報端末３は、動画のうちの第２画像からのスキャンによってＱＲコード８の決済先情報を認識する。なお、第２画像が第１画像と同じでもよい。すなわち１枚の画像から購入金額９とＱＲコード８との両方が認識できる場合にも、同様の判断が成立する。情報端末３は、上記２つの情報の認識後（Ｓ８４－YES）、ステップＳ１６以降の処理を前述の形態と同様に行う。
【0128】
［８－２：効果等］
以上のように、実施の形態８でも、実施の形態１と同様の効果が得られる。実施の形態８の場合、１つ以上の購入金額９を認識した後、１つのＱＲコード８を認識すれば、決済時間２０の表示へ遷移できる。
以上のように、実施の形態８でも、実施の形態１と同様の効果が得られる。実施の形態８の場合、１つ以上の購入金額９を認識した後、１つのＱＲコード８を認識すれば、決済時間２０の表示へ遷移できる。
【0129】
［８－３：変形例］
図２０は、実施の形態１や実施の形態８に関する変形例における情報端末３の処理フローを示す。この変形例は、実施の形態１と実施の形態８を１つに併合した形態と捉えることができる。すなわち、この変形例は、カメラ撮影画像から図１のようなＱＲコード８と１つ以上の購入金額９との２種類の情報を認識する際に、それらの認識の順序がいずれであっても構わず、任意の順序で対応できるという構成を示す。
図２０は、実施の形態１や実施の形態８に関する変形例における情報端末３の処理フローを示す。この変形例は、実施の形態１と実施の形態８を１つに併合した形態と捉えることができる。すなわち、この変形例は、カメラ撮影画像から図１のようなＱＲコード８と１つ以上の購入金額９との２種類の情報を認識する際に、それらの認識の順序がいずれであっても構わず、任意の順序で対応できるという構成を示す。
【0130】
図２０のフローは、前述のフローの構成に対し、異なる点として、ステップＳ８５，Ｓ８６を有する。ステップＳ１１Ｂで、情報端末３は、カメラ３０による動画の撮影を開始する。ステップＳ８５で、情報端末３は、動画のうちの任意の画像からのスキャンによって、ＱＲコード８と購入金額９との２つの情報を、任意の順序で認識する。情報端末３は、ステップＳ８６で、それらの両方の情報が認識できたか確認し、認識できるまで（Ｓ８６－NO）、ステップＳ８５に戻って繰り返す。２つの情報の認識後（Ｓ８６－YES）、ステップＳ１６以降の処理が、前述と同様に行われる。
【0131】
【0132】
［９－１：処理フロー］
図２１は、実施の形態９での情報端末３のアプリ４１による処理フロー例を示す。このフローは、特に、実施の形態１の図４のフロー中のステップＳ１４の購入金額の認識処理に関する詳細構成例を示す。この構成例は、各実施の形態のフローにおける同様のステップにも適用できる。この構成例は、店舗１の環境等に応じて、カメラ撮像画像内に真の購入金額９の文字列（数字列等）以外の文字列が含まれてしまう場合等に有効である。
図２１は、実施の形態９での情報端末３のアプリ４１による処理フロー例を示す。このフローは、特に、実施の形態１の図４のフロー中のステップＳ１４の購入金額の認識処理に関する詳細構成例を示す。この構成例は、各実施の形態のフローにおける同様のステップにも適用できる。この構成例は、店舗１の環境等に応じて、カメラ撮像画像内に真の購入金額９の文字列（数字列等）以外の文字列が含まれてしまう場合等に有効である。
【0133】
図２２の情報端末３の表示画面３００は、店舗１内のストア端末７の付近をカメラ３０で撮影した場合の画像の一例を示す。本例では、ストア端末７に掲示されているＱＲコード８や購入金額９の近くに、広告物２２００がある。この画像には、ＱＲコード８の領域２２０１や購入金額９の領域２２０２だけでなく、広告物２２００に記載の文字列２２０３（例えばセールス商品の金額）が写っている。このような場合に、画像内の複数の文字列から、正しい購入金額９を認識する必要がある。
【0134】
図２１で、決済金額の認識のステップＳ１４は、ステップＳ９１，Ｓ９２，Ｓ９３，Ｓ９４を有する。ステップＳ９１では、情報端末３は、カメラ撮像画像から、文字列をスキャンして検出する。この際、図２２の画像例では、購入金額９の領域２２０２の文字列と、広告物２２００の文字列２２０３とが、候補として検出されることになる。ステップＳ９１の際、情報端末３は、例えば、カメラ撮影画像内の領域において、それよりも小さいサイズの矩形領域を動かしながら探索して、その矩形領域に含まれる数字列を、候補文字列として検出する。
【0135】
なお、情報端末３は、撮影画像から数字列が認識できない場合には、例外的な処理として、音声認識機能を用いることで、店員５または購入者２が音声で読み上げた数字列を、購入金額９の候補文字列としてもよい。例えば、情報端末３は、画像から認識できない場合に、音声で読み上げるように、ガイダンスを購入者２等に出力してもよい。このように、画像認識とは別途に音声認識を利用する形態も可能である。また、それに限らず、カメラ撮影画像からの購入金額９の認識と並列に、最初から音声入力による音声認識を行う形態としてもよい。店舗１が有人店舗である場合で、店員５による音声情報が利用できる場合には、それを補助的に利用できる。
【0136】
ステップＳ９２は、ステップＳ９１で検出した候補文字列に関して、真の購入金額９に相当するかどうかを評価する処理のステップである。ステップＳ９２は、詳細には、例えば、項目Ａ～項目Ｅに対応して、ステップＳ９２Ａ～Ｓ９２Ｅを有する。これらの各ステップは、評価項目毎の評価処理のステップである。情報端末３は、候補文字列毎に、評価項目毎の評価処理を行い、それぞれ評価値であるスコアを算出する。評価項目数やその処理内容は、これに限らず、より多くても少なくてもよい。また、評価処理を試みた結果、評価ができなかった項目が生じても構わない。
【0137】
ステップＳ９２Ａの項目Ａの評価処理は、評価対象の数字列（候補文字列）を含むカメラ撮影画像において、背景に、ストア端末７（または表示装置７ｂ）らしきものがあるかどうかに関する評価処理である。あるいは、その候補文字列とその近傍のストア端末７等の部分との距離の近さに関する評価処理である。情報端末３は、この評価処理の際、ストア端末７（または表示装置７ｂ等）の形状や色のデータを用いてもよい。例えば、候補文字列の背景にストア端末７が写っている場合には、この項目Ａのスコアが高くされる。
【0138】
ステップＳ９２Ｂの項目Ｂの評価処理は、画像内で、候補文字列に対し、前後のいずれかに、特定の記号、例えば通貨記号（例えば“￥”や“円”等）があるかどうかに関する評価処理である。情報端末３は、この評価処理の際、予め設定された特定の記号を含む認識対象フォーマット情報に基づいて評価処理を行う。
【0139】
ステップＳ９２Ｃの項目Ｃの評価処理は、画像内の候補文字列に対し、店員５または購入者２が音声で読み上げて音声認識結果として入力された数字列がある場合に、それらが等しいかまたは類似かどうかに関する評価処理である。
【0140】
ステップＳ９２Ｄの項目Ｄの評価処理は、画像内の候補文字列の位置が、認識されたＱＲコード８の位置に対して近いかどうかに関する評価処理である。図２２のように、店舗１内で購入金額９とＱＲコード８とがある程度近い位置に配置されている構成の場合、この項目Ｄの評価処理が行われる。例えば、検出された候補文字列の位置が、認識されたＱＲコード８の位置に対して近いほど、この項目Ｄのスコアが高くされる。
【0141】
ステップＳ９２Ｅの項目Ｅの評価処理は、カメラ３０の画像内における候補文字列の位置が、カメラ３０の画像の中心位置に対し近いかどうかに関する評価処理である。中心に近いほど、この項目Ｅのスコアが高くされる。
【0142】
ステップＳ９３は、ステップＳ９２の評価の結果である候補文字列毎の評価項目毎のスコアに基づいて、総合的スコア、言い換えると総合的評価値を計算し、その総合的スコアから、最も購入金額９に相当すると推定される文字列を判断し選択する処理のステップである。ステップＳ９３では、情報端末３は、例えば、候補文字列毎に、評価項目毎のスコアを重み付け加算したスコアを総合的スコアとして算出する。情報端末３は、得られた候補文字列毎の総合的スコアのうち、予め設定された最低限の総合的スコア閾値以上となるものの中から最大値のものを選択し、それに対応する候補文字列を、真の購入金額９と推定されるものとして決定する。なお、上記算出された総合的スコアにおいて、総合的スコア閾値未満のものしか無い場合、その画像には真の購入金額９が無いと判断され、他の画像からの評価処理を行うように制御される。
【0143】
ステップＳ９４は、ステップＳ９３の選択結果の候補文字列に従って、購入金額９に対応する決済金額を認識する処理のステップである。図２２の例では、ステップＳ９４までの結果、領域２２０２の数字列が、購入金額９として認識されることになる。
【0144】
［９－２：効果等］
上記のように、実施の形態９によれば、カメラ画像内に複数の文字列が写るような場合でも、自動的に真の購入金額９を認識して、キャッシュレス決済を行うことができる。
上記のように、実施の形態９によれば、カメラ画像内に複数の文字列が写るような場合でも、自動的に真の購入金額９を認識して、キャッシュレス決済を行うことができる。
【0145】
図２３は、実施の形態９の変形例における情報端末３の表示画面３００の例を示す。情報端末３は、図２１の評価処理の結果に基づいて、この表示画面３００で、総合的スコアの順序で、上位のいくつかの候補文字列（例えば総合的スコア閾値以上のもの）を、購入金額候補リスト２３００として表示する。本例では、カメラ撮影画像上の下側領域に購入金額候補リスト２３００の画像が重畳表示されている。本例では、購入金額候補リスト２３００において、総合的スコア順に上位の３個の候補文字列が表示されている。１番上にある、総合的スコアが最も高かった候補文字列「￥12,765」は、例えば、仮選択状態とされて、それを表す枠等の画像ｇ２３を付けて強調表示されている。２番目の文字列「￥777」や３番目の文字列「36,958」は、評価対象画像に写っていた他の文字列である。購入者２は、この購入金額候補リスト２３００中から、タッチ操作等の操作によって、１つの文字列（例えば「￥12,765」）を購入金額９として選択し設定できる。
【0146】
また、変形例として、情報端末３は、図示のように、表示画面３００内に、ＧＵＩ部品として、「次候補」ボタン２３０１や「選択」ボタン２３０２等を表示してもよい。「次候補」ボタン２３０１は、購入金額候補リスト２３００中の複数の候補のうちの仮選択状態の１つの候補を、次（例えば１つ下）の候補に変更するためのボタンである。なお１番下の候補からは１番上の候補に巡回するように戻る。「選択」ボタン２３０２は、その時の購入金額候補リスト２３００中の仮選択状態の候補を購入金額９として選択・決定するためのボタンである。
【0147】
他の変形例として、情報端末３は、図２２の表示画面３００の例で、カメラ画像から認識した各候補文字列の領域２２０１，２２０２を、例えば枠の画像を付ける等して強調表示する。そして、購入者２は、その表示画面３００の画像から、自身が購入金額９として選択したい候補文字列の部分を、タッチ操作あるいは注視等の操作によって選択する。情報端末３は、購入者２が操作によって選択した候補文字列を、購入金額９として決定する。なお、上記のように表示画面３００内のカメラ撮影画像から購入金額９を認識しようとする際に、一旦認識済みのＱＲコード８の部分については、その画像内に写っていない状態でもよい。
【0148】
【0149】
［１０－１：キャッシュレス決済システム］
図２４は、実施の形態１０でのキャッシュレス決済システムの構成を示す。この構成は、図１と多くの部分は同様であるが、異なる構成点として、情報端末３とストア端末７との間で一部の情報に関する通信を行う点がある。本例では、情報端末３は、ストア端末７から、例えば近距離無線通信によって決済金額情報を取得する。この決済金額情報は、購入金額９（対応する決済金額）に関する情報である。信号４ｅおよび信号４ｆは、その通信の際の信号例である。信号４ｅは、情報端末３からストア端末７へ決済金額情報の要求を送信する場合の信号や、キーコード情報を送信する場合の信号である。信号４ｆは、ストア端末７から情報端末７へ応答として決済金額情報を送信する場合の信号である。
図２４は、実施の形態１０でのキャッシュレス決済システムの構成を示す。この構成は、図１と多くの部分は同様であるが、異なる構成点として、情報端末３とストア端末７との間で一部の情報に関する通信を行う点がある。本例では、情報端末３は、ストア端末７から、例えば近距離無線通信によって決済金額情報を取得する。この決済金額情報は、購入金額９（対応する決済金額）に関する情報である。信号４ｅおよび信号４ｆは、その通信の際の信号例である。信号４ｅは、情報端末３からストア端末７へ決済金額情報の要求を送信する場合の信号や、キーコード情報を送信する場合の信号である。信号４ｆは、ストア端末７から情報端末７へ応答として決済金額情報を送信する場合の信号である。
【0150】
また、実施の形態１０では、情報端末３のカメラ３０による撮影画像としては、少なくともＱＲコード８を捉えればよく、表示装置７ｄに表示された購入金額９の撮影は必須ではない。例えば、情報端末３は、カメラ３０の画像からＱＲコード８のみを認識して決済先情報を得る。なお、ＱＲコード８内に、情報端末３からストア端末７へ通信でアクセスするための情報（例えばストア端末７の通信ＩＤ等）が記述されていてもよい。
【0151】
また、実施の形態１０では、情報端末３での決済処理完了確認情報の表示の際、前述のキーコード（例えば図２の（Ｂ）のキーコード２５）の情報を、上記近距離無線通信によって、ストア端末７に送信してもよい。ストア端末７は、受信したキーコードを、店員５５側の表示画面に表示する。
【0152】
［１０－２：処理フロー］
図２５は、実施の形態１０での情報端末３の処理フローを示す。図２５のフローは、図６のフローに対し異なる点としては、ステップＳ１０１，Ｓ１０２，Ｓ１０３を有する。例えば、ステップＳ１１Ｂで、情報端末３は、カメラ３０による動画の撮影を開始する。ステップＳ１２で、情報端末３は、カメラ撮影画像からＱＲコード８を認識し、決済先情報等を得る。ＱＲコード８が認識できた場合（Ｓ１３－YES）、ステップＳ１０１で、情報端末３は、自動的に、ストア端末７の通信ＩＤ等を用いて、ストア端末７との間での近距離無線通信による無線接続を要求する。この際の通信は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）を用いることができる。この無線接続要求に基づいて、情報端末３とストア端末７との間での無線接続が確立される。確立に基づいて、情報端末３は、ストア端末７に、決済金額情報の要求を信号４ｅとして送信する。ストア端末７は、要求に対し、ストア端末７で読み取った１つ以上の購入金額９の合計による決済金額を含む決済金額情報を、応答の信号４ｆとして情報端末３へ送信する。情報端末３は、その決済金額情報を受信して取得し、決済金額として把握する。情報端末３は、表示画面３００に、ストア端末７から得た決済金額の情報を表示してもよい。
図２５は、実施の形態１０での情報端末３の処理フローを示す。図２５のフローは、図６のフローに対し異なる点としては、ステップＳ１０１，Ｓ１０２，Ｓ１０３を有する。例えば、ステップＳ１１Ｂで、情報端末３は、カメラ３０による動画の撮影を開始する。ステップＳ１２で、情報端末３は、カメラ撮影画像からＱＲコード８を認識し、決済先情報等を得る。ＱＲコード８が認識できた場合（Ｓ１３－YES）、ステップＳ１０１で、情報端末３は、自動的に、ストア端末７の通信ＩＤ等を用いて、ストア端末７との間での近距離無線通信による無線接続を要求する。この際の通信は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）を用いることができる。この無線接続要求に基づいて、情報端末３とストア端末７との間での無線接続が確立される。確立に基づいて、情報端末３は、ストア端末７に、決済金額情報の要求を信号４ｅとして送信する。ストア端末７は、要求に対し、ストア端末７で読み取った１つ以上の購入金額９の合計による決済金額を含む決済金額情報を、応答の信号４ｆとして情報端末３へ送信する。情報端末３は、その決済金額情報を受信して取得し、決済金額として把握する。情報端末３は、表示画面３００に、ストア端末７から得た決済金額の情報を表示してもよい。
【0153】
また、次のステップＳ１０２では、情報端末３は、カメラ３０の撮影画像から、ストア端末７の表示装置７ｂに表示されている購入金額９の文字列が認識できた場合には、その購入金額９の文字列も取得して表示画面３００内に画像情報を表示してもよい。このステップＳ１０２を省略する形態としてもよい。
【0154】
その後、ステップＳ１５で、情報端末３は、キャッシュレス決済処理に使用するための決済金額が認識・取得できたかを確認し、認識・取得できた場合（YES）にはステップＳ１６へ進み、認識・取得できない場合（NO）にはステップＳ１０２へ戻る。特に、情報端末３は、ステップＳ１０１でストア端末７から取得した決済金額と、ステップＳ１０２でカメラ画像から取得した決済金額とを比較して一致するか確認してもよい。それらが一致しない場合、一方の情報が誤っている可能性があるので、情報端末３は、ステップＳ１０２またはステップＳ１０１、あるいは最初の方のステップに戻って、プロセスをやり直してもよい。
【0155】
ステップＳ１６では、情報端末３は、決済時間２０を表示画面３００に表示する。ステップＳ１７，Ｓ１８は前述と同様の処理である。その後、ステップＳ１０３で、情報端末３は、決済命令を発行し、サーバ１２からの決済処理完了確認情報を受信して表示画面３００に表示する。また、情報端末３は、決済処理完了確認情報のうちのキーコードを含む情報を、信号４ｅとして、ストア端末７へ送信する。この際、ストア端末７へ送信されるキーコード情報は、文字情報としてもよいし、画像情報としてもよい。ストア端末７は、情報端末３から得たキーコードを店員５側の表示画面に表示する。これにより、店員５は、そのキーコードを見て決済処理完了を確認できる。
【0156】
［１０－３：表示画面］
図２６は、情報端末３の表示画面３００の例を示す。（Ａ）の表示画面３００の例は、ステップＳ１０１の際にストア端末７から取得した決済金額情報を表示する場合の例である。本例では、ＱＲコード８や表示装置７ｄの購入金額９が写っているカメラ撮影画像上の例えば下側領域に、ストア端末７から取得した決済金額情報による決済金額の画像２６０１が重畳表示されている。同様に、情報端末３は、ステップＳ１０２で購入金額９を認識した場合には、その認識した文字列を表示画面３００に表示してもよい。
図２６は、情報端末３の表示画面３００の例を示す。（Ａ）の表示画面３００の例は、ステップＳ１０１の際にストア端末７から取得した決済金額情報を表示する場合の例である。本例では、ＱＲコード８や表示装置７ｄの購入金額９が写っているカメラ撮影画像上の例えば下側領域に、ストア端末７から取得した決済金額情報による決済金額の画像２６０１が重畳表示されている。同様に、情報端末３は、ステップＳ１０２で購入金額９を認識した場合には、その認識した文字列を表示画面３００に表示してもよい。
【0157】
（Ｂ）の表示画面３００の例は、サーバ１２から得た決済処理完了確認情報のうちのキーコード２５を表示する例であり、このキーコード２５が、情報端末３からストア端末７へ送信するキーコードに相当する。本例では、情報端末３のカメラ３０から見える店舗１内の様子、特にストア端末７および表示装置７ｂの購入金額９を含む様子が撮影された画像上に、キーコード２５の画像が重畳表示されている。
【0158】
（Ｃ）の表示画面３００の例は、キーコード２５に関する他の表示例を示す。この表示画像３００の画像例は、購入者２による自分撮影によって購入者２自身の顔２６０３を含む様子が撮影された画像であり、その画像上に、キーコード２５の画像が重畳表示されている。
【0159】
情報端末３は、例えば（Ｂ）と（Ｃ）とのいずれかの画像を含むキーコード情報をストア端末７へ送信する。なお、上記で、情報端末３からストア端末７に送信する情報は、キーコード２５の文字情報または画像情報のみとしてもよいし、カメラ撮影画像にキーコード２５の画像を重畳したものとしてもよいし、それらのセットの情報としてもよい。
【0160】
店員５側から（Ｂ）または（Ｃ）のようなキーコード画像情報を見た場合、（Ｃ）のように購入者２の顔２６０３が映っている場合の方が、最も人違いの可能性が少なく、確実な確認が可能である。しかし、自分の顔画像を店舗１側に提供することを嫌がるユーザや、ＨＭＤのように自分の顔画像を撮影できないデバイスの場合には、（Ｂ）のようなキーコード画像を送信すればよい。（Ｂ）の画像は、購入者２が立っている位置からストア端末７または店員５の方を見た位置関係での像である。そのため、店員５は、確認時に、この画像から分かる位置関係から、目の前のユーザ（購入者２）からの通信であること、すなわち正しい決済対象者であることを確認できる。
【0161】
＜実施の形態１１＞
図２７を用いて、本発明の実施の形態１１について説明する。実施の形態１１は、実施の形態１等の変形例であり、ＱＲコード８と購入金額９との配置関係を利用する場合を示す。図２７は、実施の形態１１における店舗１の例を示す。本例では、会計机１３上、ストア端末７にはＱＲコード８が掲示されておらず、ストア端末７の近くに設置された媒体８ｂにＱＲコード８が掲示されている。
図２７を用いて、本発明の実施の形態１１について説明する。実施の形態１１は、実施の形態１等の変形例であり、ＱＲコード８と購入金額９との配置関係を利用する場合を示す。図２７は、実施の形態１１における店舗１の例を示す。本例では、会計机１３上、ストア端末７にはＱＲコード８が掲示されておらず、ストア端末７の近くに設置された媒体８ｂにＱＲコード８が掲示されている。
【0162】
実施の形態１１では、キャッシュレス決済の際に使用する、ＱＲコード８と購入金額（対応する決済金額）９との２つの要素について、情報端末３のカメラ３０で画像を撮影して認識する際に、予め、空間内での２つの要素の配置関係２７００が規定されている。この配置関係２７００は、購入者２の情報端末３側からストア端末７や店員５の方を見た方向での配置関係である。実施の形態１１では、このような配置関係２７００を条件として設ける。これに関して、詳しくは例えば以下のような各方式が適用できる。
【0163】
［１１－１：第１方式］
キャッシュレス決済の第１方式におけるルールの１つとして、予め、ＱＲコード８と決済金額との２つの要素の配置関係２７００が固定的に設定される。すなわち、この方式の適用対象となる全ての店舗１においては、この配置関係２７００を含むルールが同様に適用される。購入者２の情報端末３の特にカメラ３０からストア端末７を見る方向での平面視、例えば図２７のような平面視を考える。この平面で、ＱＲコード８の位置Ｌ１と、購入金額９が表示される位置Ｌ２とにおける配置関係２７００が規定されている。この配置関係２７００は、例えばＱＲコード８内に記述される決済ルール情報２７０２のうちの１つの項目である配置関係情報２７０３として記述される。このように、ＱＲコード８内に、決済先情報（店舗情報）２７０１と決済ルール情報２７０２が記述されてもよい。すなわち、情報端末３は、ＱＲコード８からの認識によって、それらの情報が得られる。あるいは、決済ルール情報２７０２は、決済先情報２７０１との関連付けと共に、図１のサーバ１２に保持されていてもよい。決済ルール情報２７０２は、情報端末３およびストア端末７がこのキャッシュレス決済方式で手続きを行う際のルールとして参照される。
キャッシュレス決済の第１方式におけるルールの１つとして、予め、ＱＲコード８と決済金額との２つの要素の配置関係２７００が固定的に設定される。すなわち、この方式の適用対象となる全ての店舗１においては、この配置関係２７００を含むルールが同様に適用される。購入者２の情報端末３の特にカメラ３０からストア端末７を見る方向での平面視、例えば図２７のような平面視を考える。この平面で、ＱＲコード８の位置Ｌ１と、購入金額９が表示される位置Ｌ２とにおける配置関係２７００が規定されている。この配置関係２７００は、例えばＱＲコード８内に記述される決済ルール情報２７０２のうちの１つの項目である配置関係情報２７０３として記述される。このように、ＱＲコード８内に、決済先情報（店舗情報）２７０１と決済ルール情報２７０２が記述されてもよい。すなわち、情報端末３は、ＱＲコード８からの認識によって、それらの情報が得られる。あるいは、決済ルール情報２７０２は、決済先情報２７０１との関連付けと共に、図１のサーバ１２に保持されていてもよい。決済ルール情報２７０２は、情報端末３およびストア端末７がこのキャッシュレス決済方式で手続きを行う際のルールとして参照される。
【0164】
配置関係情報２７０３では、ＱＲコード８の位置Ｌ１と購入金額９の位置Ｌ２との配置関係が記述されている。図２７の例では、ＱＲコード８の位置Ｌ１（すなわち画像内で認識された位置）を基準とした場合に、購入金額９の位置Ｌ２は、概略的に左斜め上の方向にあることが規定されている。さらに、位置Ｌ１から位置Ｌ２までの距離についても、条件の１つとして規定されてもよい。例えば、配置関係情報２７０３において、位置Ｌ１から所定の距離の範囲２７０５内に位置Ｌ２があるという条件が記述される。
【0165】
情報端末３は、例えば実施の形態１と同様に、カメラ３０の撮影画像から、まずＱＲコード８を認識して決済先情報２７０１等を得る。次に、情報端末３は、撮影画像から、購入金額９を認識する際に、決済ルール情報２７０２の配置関係情報２７０３を参照し、その規定に従って、購入金額９の認識処理を行う。例えば、情報端末３は、撮影画像内におけるＱＲコード８が認識された位置Ｌ１から、配置関係２７００に従って、左斜め上方向を探索して、購入金額９に対応する候補文字列を発見する。情報端末３は、撮影画像内から複数の文字列が発見された場合には、配置関係２７００の条件と照らして、最も可能性が高いものを購入金額９であると推定して選択してもよい。
【0166】
他の例として、実施の形態８のように、先に購入金額９を認識する場合、配置関係２７００の規定としては、購入金額９の位置Ｌ２を基準としたＱＲコード８の位置Ｌ１に関する条件としてもよい。また、他の条件の例としては、ＱＲコード８の位置Ｌ１に対して位置Ｌ２が上側にあることや、ＱＲコード８の位置Ｌ１に対して位置Ｌ２が右側にあること等としてもよい。また、他の条件の例としては、範囲２７０５内で位置Ｌ１から最も近い文字列を選択することや、ｉ番目に近い文字列を選択すること等としてもよい。
【0167】
［１１－２：第２方式］
第２方式として、店舗１毎に、配置関係２７００を含む決済ルールが設定されてもよい。例えば、店舗１内のＱＲコード８から、決済先情報（店舗情報）２７０１と、その店舗１に設定されている決済ルール情報２７０２とが取得される。情報端末３は、その決済ルール情報２７０２のうちの配置関係情報２７０３を参照する。あるいは、情報端末３は、ＱＲコード８から得た決済先情報２７０１等に基づいて、サーバ１２またはストア端末７から通信によって、その店舗１用の決済ルール情報２７０２を取得してもよい。第２方式の場合、店舗１毎に好適なルールを設定できる。
第２方式として、店舗１毎に、配置関係２７００を含む決済ルールが設定されてもよい。例えば、店舗１内のＱＲコード８から、決済先情報（店舗情報）２７０１と、その店舗１に設定されている決済ルール情報２７０２とが取得される。情報端末３は、その決済ルール情報２７０２のうちの配置関係情報２７０３を参照する。あるいは、情報端末３は、ＱＲコード８から得た決済先情報２７０１等に基づいて、サーバ１２またはストア端末７から通信によって、その店舗１用の決済ルール情報２７０２を取得してもよい。第２方式の場合、店舗１毎に好適なルールを設定できる。
【0168】
変形例としては、商品６毎に異なる決済ルール情報２７０２を設定することもできる。例えば、商品６の種別毎や購入金額９の高低毎に異なる決済ルール情報２７０２を設定することもできる。決済ルール情報２７０２は、前述のように、処理フローに関する規定とすることもでき、必要なセキュリティレベルに応じたログイン要否等の設定や決済時間２０の長さの設定等も可能である。
【0169】
［１１－３：効果等］
上記のように、実施の形態１１では、認識処理に係わる配置関係２７００の条件があるので、情報端末３は、撮影画像からより効率的に購入金額９等を認識できる可能性がある。例えば、候補文字列の数が低減できるので、認識処理の高速化、ひいてはキャッシュレス決済の短時間化、等の効果が期待できる。
上記のように、実施の形態１１では、認識処理に係わる配置関係２７００の条件があるので、情報端末３は、撮影画像からより効率的に購入金額９等を認識できる可能性がある。例えば、候補文字列の数が低減できるので、認識処理の高速化、ひいてはキャッシュレス決済の短時間化、等の効果が期待できる。
【0170】
以上、本発明を実施の形態に基づいて具体的に説明したが、本発明は前述の実施の形態に限定されず、要旨を逸脱しない範囲で種々変更可能である。実施の形態の構成要素の追加や削除や置換、各種の組合せによる構成が可能である。前述した機能等は、一部または全部をハードウェアで実装してもよいし、ソフトウェアプログラム処理で実装してもよい。機能等を構成するプログラムやデータは、コンピュータ読取可能な記憶媒体に格納されてもよいし、通信網上の装置に格納されてもよい。実施の形態では、キャッシュレス決済を、店舗での商品の購入金額の支払いに利用する場合を説明したが、これに限らず、例えば交通違反時の支払い、自動販売機での支払い、個人間売買時の支払い等、各種の場面での適用が可能である。
【符号の説明】
【0171】
１…店舗、２…購入者（ユーザ）、３…情報端末（キャッシュレス決済端末）、５…店員、６…商品、７…ストア端末、７ｂ…表示装置、８…ＱＲコード、９…購入金額、１０…基地局、１１…ネットワーク、１２…サーバ（決済アプリサーバ）、１３…会計机、３０…カメラ、４１…アプリ（キャッシュレス決済アプリ）。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】