(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2023-12-11
(45)【発行日】2023-12-19
(54)【発明の名称】推薦制御装置、システム、方法及びプログラム
(51)【国際特許分類】
G06F 16/9035 20190101AFI20231212BHJP
【ＦＩ】
G06F16/9035
【請求項の数】
17
(21)【出願番号】P 2022507929
(86)(22)【出願日】2020-03-18
(86)【国際出願番号】 JP2020012101
(87)【国際公開番号】W WO2021186638
(87)【国際公開日】2021-09-23
【審査請求日】2022-08-19
(73)【特許権者】
【識別番号】000004237
【氏名又は名称】日本電気株式会社
(74)【代理人】
【識別番号】100103894
【弁理士】
【氏名又は名称】家入 健
(72)【発明者】
【氏名】大谷 美樹
【審査官】原 秀人
(56)【参考文献】
【文献】特開２０１８－１８４１９６（ＪＰ，Ａ）
【文献】国際公開第２０１６／１９４６２１（ＷＯ，Ａ１）
【文献】特開２０１８－１２８７９７（ＪＰ，Ａ）
【文献】国際公開第２０１３／１４５３９４（ＷＯ，Ａ１）
【文献】特開２００９－１３３６６２（ＪＰ，Ａ）
【文献】大草 孝介 外，個人の商品購買特性と購買周期推定による最適レコメンデーションシステムの設計，計算機統計学，日本，日本計算機統計学会，2016年06月17日，第29巻第1号，pp. 49-56
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｆ １６／００－１６／９５８
(57)【特許請求の範囲】
【請求項1】
所定の撮影装置により撮影された撮影画像を取得する取得手段と、前記撮影画像から抽出した顔領域又は顔特徴情報を用いた顔認証の結果を取得する認証制御手段と、
前記顔認証に成功したユーザにおける行動履歴から前記顔認証が行われた日時又は前記撮影画像に含まれる情報に基づいて選択された所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出手段と、
前記行動履歴抽出手段が抽出した行動履歴に基づいて推薦情報を特定する特定手段と、
所定の表示端末に前記特定手段が特定した推薦情報を送信する出力手段と、
を備える推薦制御装置。
【請求項2】
さらに、複数のユーザの行動履歴を記憶する履歴記憶手段と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶手段に登録する履歴登録手段と、
を備え、
前記行動履歴抽出手段は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶手段から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
請求項１に記載の推薦制御装置。
【請求項3】
前記行動履歴は、前記ユーザにおける複数の決済履歴を含み、前記所定の抽出条件は、特定の決済履歴を含み、
前記行動履歴抽出手段は、前記複数の決済履歴の中から前記特定の決済履歴を抽出する、
請求項１又は２に記載の推薦制御装置。
【請求項4】
前記所定の抽出条件は、決済が行われた所定の時間帯をさらに含み、前記行動履歴抽出手段は、前記複数の決済履歴の中から前記ユーザが前記所定の時間帯に決済を行った決済履歴を抽出する、
請求項３に記載の推薦制御装置。
【請求項5】
前記所定の抽出条件は、決済が行われた所定期間をさらに含み、前記行動履歴抽出手段は、前記複数の決済履歴の中から前記ユーザが前記所定期間内に決済を行った決済履歴を抽出する、
請求項３又は４に記載の推薦制御装置。
【請求項6】
前記所定の抽出条件は、所定期間内に基準回数以上決済が行われたことを条件としてさらに含み、前記行動履歴抽出手段は、前記複数の決済履歴の中から前記ユーザが所定期間内に基準回数以上行った決済履歴を抽出する、
請求項３～５のいずれか一項に記載の推薦制御装置。
【請求項7】
前記行動履歴抽出手段は、前記ユーザから特定の行動履歴を除外する指定を受け付けた場合、前記指定された特定の行動履歴を除外する条件を前記所定の抽出条件に追加する、
請求項１～６のいずれか一項に記載の推薦制御装置。
【請求項8】
前記ユーザからの指定に基づき、前記行動履歴に含まれる所定の履歴を複数のグループのいずれかに分類する分類手段をさらに備え、前記行動履歴抽出手段は、前記ユーザから前記複数のグループのうち所定のグループの指定を受け付けた場合、当該所定のグループに分類されていることを前記所定の抽出条件とする、
請求項１～７のいずれか一項に記載の推薦制御装置。
【請求項9】
前記行動履歴は、前記ユーザにおける、決済履歴、入退履歴及び参加履歴のうち少なくとも１つを含む、請求項１～８のいずれか一項に記載の推薦制御装置。
【請求項10】
ユーザの顔領域を含む画像を撮影する所定の撮影装置と、前記所定の撮影装置と通信可能な推薦制御装置と、を備え、
前記推薦制御装置は、
所定の撮影装置により撮影された撮影画像を取得する取得手段と、
前記撮影画像から抽出した顔領域又は顔特徴情報を用いた顔認証の結果を取得する認証制御手段と、
前記顔認証に成功したユーザにおける行動履歴から前記顔認証が行われた日時又は前記撮影画像に含まれる情報に基づいて選択された所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出手段と、
前記行動履歴抽出手段が抽出した行動履歴に基づいて推薦情報を特定する特定手段と、
所定の表示端末に前記特定手段が特定した推薦情報を送信する出力手段と、
を備える推薦制御システム。
【請求項11】
前記推薦制御装置は、さらに、複数のユーザの行動履歴を記憶する履歴記憶手段と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶手段に登録する履歴登録手段と、
を備え、
前記行動履歴抽出手段は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶手段から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
請求項１０に記載の推薦制御システム。
【請求項12】
コンピュータが、所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から抽出した顔領域又は顔特徴情報を用いた顔認証の結果を取得する工程と、
前記顔認証に成功したユーザにおける行動履歴から前記顔認証が行われた日時又は前記撮影画像に含まれる情報に基づいて選択された所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
を備える推薦制御方法。
【請求項13】
所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
前記顔認証に成功したユーザにおける行動履歴から前記顔認証が行われた日時又は前記撮影画像に含まれる情報に基づいて選択された所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
をコンピュータに実行させる推薦制御プログラム。
【請求項14】
所定の撮影装置により撮影された撮影画像を取得する取得手段と、前記撮影画像から顔領域又は顔特徴情報を抽出する顔特徴抽出手段と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う顔認証手段と、
前記顔認証に成功したユーザにおける行動履歴から前記顔認証が行われた日時又は前記撮影画像に含まれる情報に基づいて選択された所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出手段と、
前記行動履歴抽出手段が抽出した行動履歴に基づいて推薦情報を特定する特定手段と、
所定の表示端末に前記特定手段が特定した推薦情報を送信する出力手段と、
を備える推薦制御装置。
【請求項15】
さらに、複数のユーザの行動履歴を記憶する履歴記憶手段と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶手段に登録する履歴登録手段と、
を備え、
前記行動履歴抽出手段は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶手段から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
請求項１４に記載の推薦制御装置。
【請求項16】
コンピュータが、所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
前記顔認証に成功したユーザにおける行動履歴から前記顔認証が行われた日時又は前記撮影画像に含まれる情報に基づいて選択された所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
を備える推薦制御方法。
【請求項17】
所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
前記顔認証に成功したユーザにおける行動履歴から前記顔認証が行われた日時又は前記撮影画像に含まれる情報に基づいて選択された所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
をコンピュータに実行させる推薦制御プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、推薦制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体に関し、特に、ユーザに対して推薦情報を提供するための推薦制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体に関する。
【背景技術】
【0002】
特許文献１には、グループに属する１または２人以上の人物の顔画像を取得し、この顔画像から人物の属性（例えば男女の区別や年代）を推定するのに必要な特徴量を取得し、人物毎の属性を推定する技術が開示されている。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２００４－２２７１５８号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献１に開示された技術のように、個人の行動履歴の全てを用いて推薦情報を生成すると、推薦精度が低下する場合があるという問題点がある。その理由は、行動履歴にはノイズや時間帯によって状況が異なる場合があるためである。
【0005】
本開示は、このような問題点を解決するためになされたものであり、個人の嗜好に沿った推薦情報を提供するための推薦制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体を提供することを目的とする。
【課題を解決するための手段】
【0006】
本開示に係る推薦制御装置は、所定の撮影装置により撮影された撮影画像を取得する取得部と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、所定の表示端末に前記特定手段が特定した推薦情報を送信する出力部と、を備える。
【0007】
本開示に係る推薦制御システムは、ユーザの顔領域を含む画像を撮影する所定の撮影装置と、前記所定の撮影装置と通信可能な推薦制御装置と、前記ユーザの顔特徴情報を記憶し、前記推薦制御装置と通信可能な認証装置と、を備え、前記推薦制御装置は、所定の撮影装置により撮影された撮影画像を取得する取得部と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、を備える。
【0008】
本開示に係る推薦制御方法は、コンピュータが、所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、前記抽出された行動履歴に基づいて推薦情報を特定する工程と、所定の表示端末に前記特定された推薦情報を送信する工程と、を備える。
【0009】
本開示に係る非一時的なコンピュータ可読媒体は、所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、前記抽出された行動履歴に基づいて推薦情報を特定する工程と、所定の表示端末に前記特定された推薦情報を送信する工程と、を実行させるプログラムが記録される。
【0010】
本開示に係る推薦制御装置は、所定の撮影装置により撮影された撮影画像を取得する取得部と、前記撮影画像から顔領域又は顔特徴情報を抽出する顔特徴抽出部と、前記顔領域又は前記顔特徴情報に基づいて顔認証を行う顔認証部と、前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、を備える。
【0011】
本開示に係る推薦制御方法は、コンピュータが、所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、前記抽出された行動履歴に基づいて推薦情報を特定する工程と、所定の表示端末に前記特定された推薦情報を送信する工程と、を備える。
【0012】
本開示に係る非一時的なコンピュータ可読媒体は、所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、前記抽出された行動履歴に基づいて推薦情報を特定する工程と、所定の表示端末に前記特定された推薦情報を送信する工程と、を実行させるプログラムが記録される。
【発明の効果】
【0013】
本開示により、個人の嗜好に沿った推薦情報を提供するための推薦制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体を提供することができる。
【図面の簡単な説明】
【0014】
【図1】実施形態１に係る推薦制御装置の構成を示すブロック図である。
【図2】実施形態１に係る推薦制御方法の流れを示すフローチャートである。
【図3】実施形態２に係る推薦制御システムの構成を示すブロック図である。
【図4】認証装置の構成を示すブロック図である。
【図5】顔認証端末の構成を示すブロック図である。
【図6】ユーザ端末の構成を示すブロック図である。
【図7】顔特徴情報登録処理の流れを示すフローチャートである。
【図8】顔認証処理の流れを示すフローチャートである。
【図9】履歴登録処理の流れを示すフローチャートである。
【図10】履歴登録処理の流れを示すフローチャートである。
【図11】推薦制御処理の流れを示すフローチャートである。
【図12】推薦要求処理の流れを示すフローチャートである。
【図13】操作端末上に表示される推薦要求開始画面を例示する図である。
【図14】表示端末上に表示される推薦情報画面を例示する図である。
【図15】表示端末上に表示されるマップを例示する図である。
【図16】表示端末上に表示される行動履歴を例示する図である。
【図17】表示端末上に表示される履歴除外条件設定画面を例示する図である。
【図18】決済時に操作端末上に表示される履歴登録画面を例示する図である。
【図19】実施形態３に係る推薦制御装置の構成を示すブロック図である。
【図20】操作端末上に表示される履歴設定画面を例示する図である。
【図21】操作端末上に表示される履歴分類画面を例示する図である。
【図22】実施形態４に係る推薦制御装置の構成を示すブロック図である。
【図23】実施形態４に係る推薦制御システムの構成を示すブロック図である。
【発明を実施するための形態】
【0015】
以下では、本開示の実施形態について、図面を参照しながら詳細に説明する。各図面において、同一又は対応する要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。
【0016】
＜実施形態１＞
図１は、実施形態１に係る推薦制御装置１００の構成を示すブロック図である。推薦制御装置１００は、取得部１３０、認証制御部１４０、行動履歴抽出部１５０、特定部１６０及び出力部１７０を備える。推薦制御装置１００は、ネットワーク５００（不図示）に接続される。ネットワーク５００は、有線であっても無線であってもよい。ネットワーク５００には、図示しない認証装置２００及び顔認証端末３００が接続される。
図１は、実施形態１に係る推薦制御装置１００の構成を示すブロック図である。推薦制御装置１００は、取得部１３０、認証制御部１４０、行動履歴抽出部１５０、特定部１６０及び出力部１７０を備える。推薦制御装置１００は、ネットワーク５００（不図示）に接続される。ネットワーク５００は、有線であっても無線であってもよい。ネットワーク５００には、図示しない認証装置２００及び顔認証端末３００が接続される。
【0017】
取得部１３０は、所定の撮影装置により撮影された撮影画像を取得する。撮影画像は、ユーザが撮影された画像である。所定の撮影装置は、例えば、顔認証端末３００が備えるカメラ、及びユーザが所持するスマートフォン等のユーザ端末のカメラである。認証制御部１４０は、撮影画像から顔領域又は顔特徴情報を抽出して認証装置２００に顔認証を行わせる。認証装置２００は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて予め記憶している。
【0018】
行動履歴抽出部１５０は、顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する。行動履歴は、ユーザが行った行動の内容である。行動履歴は、当該行動が行われた日時及び場所等を含んでいてもよい。行動履歴は、例えば、ユーザにおける決済履歴を含む。所定の抽出条件は、ユーザの行動履歴から所定の行動履歴を抽出するための条件である。所定の抽出条件は、例えば、特定の決済履歴を含む。所定の抽出条件は、具体的には、時間帯、所定期間、及び行動の頻度等が挙げられるが、これらに限定されない。
【0019】
特定部１６０は、顔認証に成功したユーザにおけるユーザＩＤ又は推薦要求に含まれるユーザＩＤと対応付けられた行動履歴に基づいて、ユーザに推薦する推薦情報を特定する。推薦要求は、推薦情報の提示要求である。出力部１７０は、所定の表示端末に特定部１６０が特定した推薦情報を送信する。所定の表示端末は、例えば、顔認証端末３００、ユーザ端末、店舗端末又は街頭のサイネージである。ユーザ端末は、ユーザが所持するスマートフォン等の通信端末である。店舗端末は、各店舗に設置される端末であり、例えば、ユーザが来店した際に、おすすめ商品を表示したり、ユーザが店舗を出る際に「次は〇〇へ行くのはいかがですか」等と表示したりする。
【0020】
所定の表示端末は、上述の所定の撮影装置であってもよいし、異なる端末であってもよい。例えば、ユーザ端末で撮影画像を撮影した場合、出力部１７０は、当該ユーザ端末に推薦情報を送信してもよいし、顔認証端末３００等に推薦情報を送信してもよい。顔認証端末３００で撮影画像を撮影した場合、出力部１７０は、当該顔認証端末３００に推薦情報を送信してもよいし、ユーザ端末等に推薦情報を送信してもよい。
【0021】
図２は、実施形態１に係る推薦制御方法の流れを示すフローチャートである。まず、取得部１３０は、所定の撮影装置により撮影された撮影画像を取得する（ステップＳ１０１）。次に、認証制御部１４０は、取得部１３０が取得した撮影画像から顔領域又は顔特徴情報を抽出して認証装置２００に顔認証を行わせる（ステップＳ１０２）。認証装置２００は、認証制御部１４０から受け取った顔領域又は顔特徴情報と、認証装置２００内に登録されている顔特徴情報と、を照合し、一致の有無により認証の成否を判定し、判定結果を返信する。尚、認証装置２００は、ユーザＩＤと顔特徴情報とを対応付けて記憶しているものとする。そして、認証装置２００は、顔認証に成功した場合、成功したユーザＩＤを判定結果に含めて返信する。
【0022】
次に、行動履歴抽出部１５０は、所定の抽出条件を満たす行動履歴を抽出する（ステップＳ１０３）。次に、特定部１６０は、顔認証に成功したユーザＩＤ又は推薦要求に含まれるユーザＩＤと対応付けられた行動履歴に基づいて、ユーザに推薦する推薦情報を特定する（ステップＳ１０４）。次に、出力部１７０は、所定の表示端末に特定部１６０が特定した推薦情報を送信する（ステップＳ１０５）。このように、本実施形態に係る推薦制御方法は、個人の嗜好に沿った推薦情報を提供することができる。
【0023】
推薦制御装置１００は、図１に示した構成に加えて、履歴記憶部及び履歴登録部等の各構成を備えていてもよい。
【0024】
履歴記憶部は、ユーザの行動履歴を記憶する。行動履歴は、ユーザが顔認証に成功した時に行った行動内容の履歴であり、例えば、商品等の購入履歴、施設の入退履歴、イベントの参加履歴等である。行動履歴は、ユーザが行動した時刻の情報を含んでいてもよい。履歴登録部は、ユーザＩＤと行動履歴とを対応付けて履歴記憶部に登録する。履歴登録部は、図２に示すステップＳ１０１に先んじて、ユーザＩＤと行動履歴とを対応付けて履歴記憶部に登録する。
【0025】
尚、推薦制御装置１００は、図示しない構成としてプロセッサ、メモリ及び記憶装置を備えるものである。また、当該記憶装置には、本実施形態に係る推薦制御方法の処理が実装されたコンピュータプログラムが記憶されている。そして、当該プロセッサは、記憶装置からコンピュータプログラムを前記メモリへ読み込ませ、当該コンピュータプログラムを実行する。これにより、前記プロセッサは、履歴登録部、取得部１３０、認証制御部１４０、行動履歴抽出部１５０、特定部１６０及び出力部１７０の機能を実現する。
【0026】
または、履歴登録部、取得部１３０、認証制御部１４０、行動履歴抽出部１５０、特定部１６０及び出力部１７０は、それぞれが専用のハードウェアで実現されていてもよい。また、各装置の各構成要素の一部又は全部は、汎用または専用の回路（circuitry）、プロセッサ等やこれらの組合せによって実現されもよい。これらは、単一のチップによって構成されてもよいし、バスを介して接続される複数のチップによって構成されてもよい。各装置の各構成要素の一部又は全部は、上述した回路等とプログラムとの組合せによって実現されてもよい。また、プロセッサとして、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（field-programmable gate array）等を用いることができる。
【0027】
また、推薦制御装置１００の各構成要素の一部又は全部が複数の情報処理装置や回路等により実現される場合には、複数の情報処理装置や回路等は、集中配置されてもよいし、分散配置されてもよい。例えば、情報処理装置や回路等は、クライアントサーバシステム、クラウドコンピューティングシステム等、各々が通信ネットワークを介して接続される形態として実現されてもよい。また、推薦制御装置１００の機能がＳａａＳ（Software as a Service）形式で提供されてもよい。
【0028】
＜実施形態２＞
実施形態２は、上述した実施形態１の具体例である。図３は、実施形態２に係る推薦制御システム６００の構成を示すブロック図である。推薦制御システム６００は、少なくとも、推薦制御装置１００ａ及び認証装置２００を備え、さらに顔認証端末３００及びユーザ端末４００のうち少なくとも一方を備える。推薦制御装置１００ａ、認証装置２００、顔認証端末３００（３００Ｘ、３００Ｙ、３００Ｚ及び３００Ｗ）及びユーザ端末４００のそれぞれは、ネットワーク５００を介して接続されている。なお、実施形態１と重複する説明については適宜省略する。
実施形態２は、上述した実施形態１の具体例である。図３は、実施形態２に係る推薦制御システム６００の構成を示すブロック図である。推薦制御システム６００は、少なくとも、推薦制御装置１００ａ及び認証装置２００を備え、さらに顔認証端末３００及びユーザ端末４００のうち少なくとも一方を備える。推薦制御装置１００ａ、認証装置２００、顔認証端末３００（３００Ｘ、３００Ｙ、３００Ｚ及び３００Ｗ）及びユーザ端末４００のそれぞれは、ネットワーク５００を介して接続されている。なお、実施形態１と重複する説明については適宜省略する。
【0029】
推薦制御装置１００ａは、履歴ＤＢ（DataBase）１１０ａ、履歴登録部１２０、取得部１３０、認証制御部１４０、行動履歴抽出部１５０、特定部１６０及び出力部１７０を備える。推薦制御装置１００ａは、行動履歴の蓄積、撮影画像からの提示情報の特定及び提示を行う情報処理装置であり、例えば、コンピュータにより実現されるサーバ装置である。
【0030】
履歴ＤＢ１１０ａは、ユーザの行動履歴を蓄積するためのデータベースである。履歴ＤＢ１１０ａは、ユーザＩＤと、当該ユーザの行動履歴と、を対応付けて記憶している。行動履歴は、例えば、ユーザの決済履歴を含む。履歴登録部１２０は、顔認証端末３００又はユーザ端末４００からネットワーク５００を介して履歴登録要求を受信し、当該履歴登録要求に含まれるユーザＩＤと、行動履歴と、を対応付けて履歴ＤＢ１１０ａに登録する。
【0031】
取得部１３０は、顔認証端末３００又はユーザ端末４００からネットワーク５００を介して、顔認証要求、履歴登録要求及び推薦要求を受信する。言い換えると、取得部１３０は、顔認証端末３００又はユーザ端末４００からカメラ３１０又は４１０による撮影画像、及び、カメラ３１０又は４１０の設置位置情報（以下、単に「設置位置」と呼ぶ。）等を取得する。
【0032】
認証制御部１４０は、顔認証要求に含まれる認証用画像から顔領域又は顔特徴情報を抽出し、当該顔領域又は当該顔特徴情報を認証装置２００へ送信して顔認証を行わせる。また、認証制御部１４０は、認証装置２００から顔認証の成否を受信し、顔認証結果を要求元の端末へ返信する。尚、顔認証に成功した場合、顔認証結果には、ユーザＩＤが含まれる。
【0033】
行動履歴抽出部１５０は、顔認証に成功したユーザＩＤ又は推薦要求に含まれるユーザＩＤと対応付けられた行動履歴を履歴ＤＢ１１０ａから取得する。行動履歴抽出部１５０は、履歴ＤＢ１１０ａから取得した行動履歴の中から、所定の抽出条件を満たす行動履歴を抽出する。行動履歴抽出部１５０が所定の抽出条件を満たす行動履歴を抽出することによって、行動履歴のノイズを除くことができる。尚、所定の抽出条件は、例えば推薦要求に含まれていてもよく、予め設定されたものでもよい。また、所定の抽出条件は、ユーザが手動で変更可能であってもよい。
【0034】
所定の抽出条件は、例えば予め設定された複数の抽出条件の中から、適宜選択されてもよい。例えば、所定の抽出条件は、顔認証が行われた日時又は撮影画像に含まれる情報等に基づいて選択されてもよい。具体的には、顔認証に成功した日時が平日の昼間である場合、平日昼間に行われた行動履歴を抽出する抽出条件を選択すること等が考えられる。また、撮影画像にユーザの家族が写っている場合、家族と共に行動していた行動履歴を抽出する抽出条件を選択すること等が考えられる。
【0035】
行動履歴が決済履歴を含む場合、所定の抽出条件は、決済が行われた所定の時間帯をさらに含んでいてもよい。所定の時間帯は、例えば、休日、平日、昼食時及び夕食時等である。この場合、行動履歴抽出部１５０は、行動履歴に含まれる複数の決済履歴の中から当該ユーザが所定の時間帯に決済を行った決済履歴を抽出する。
【0036】
行動履歴が決済履歴を含む場合、所定の抽出条件は、決済が行われた所定期間をさらに含んでいてもよい。所定期間は、例えば、特定の日時よりも後、特定の日時よりも前、及び特定の期間等である。この場合、行動履歴抽出部１５０は、行動履歴に含まれる複数の決済履歴の中から当該ユーザが所定期間内に決済を行った決済履歴を抽出する。
【0037】
行動履歴が決済履歴を含む場合、所定の抽出条件は、所定期間内に基準回数以上決済が行われたことを条件としてさらに含んでいてもよい。例えば、直近２か月以内に３回以上決済が行われたことを条件としてもよい。この場合、行動履歴抽出部１５０は、行動履歴に含まれる複数の決済履歴の中から当該ユーザが所定期間内に基準回数以上行った決済履歴を抽出する。
【0038】
また、行動履歴抽出部１５０は、ユーザと属性及び行動履歴のうち少なくとも一方が類似する他人の行動履歴を履歴ＤＢ１１０ａから取得してもよい。この場合、行動履歴抽出部１５０は、履歴ＤＢ１１０ａから取得した当該他人の行動履歴の中から、所定の抽出条件を満たす行動履歴を抽出する。属性は、例えば、性別、年代、家族構成等であり、ＳＮＳ（Social Networking Service）上の友人等であってもよい。行動履歴が類似する他人は、例えば、ユーザの行動履歴に含まれる所定の行動と同じ文字列を行動履歴に含んでいる他人である。
【0039】
特定部１６０は、行動履歴抽出部１５０が抽出した行動履歴に基づいて推薦情報を特定する。推薦情報は、ユーザに対して推薦する情報である。推薦情報は、例えば、行動履歴抽出部１５０が抽出した行動履歴そのものであってもよい。推薦情報は、例えば抽出された行動履歴が含む場所及び内容のうちいずれか一方を含むものであってもよい。また、推薦情報は、抽出された行動履歴に含まれる場所の割引クーポン等であってもよい。出力部１７０は、特定部１６０が特定した提示情報をネットワーク５００を介して顔認証に成功した端末又は提示要求を行った端末に送信する。出力部１７０は、顔認証及び推薦要求を行った端末以外の端末に当該推薦情報を送信してもよい。例えば、店舗端末から顔認証を行った場合に、出力部１７０は、当該店舗端末に推薦情報を送信してもよいし、顔認証に成功したユーザが所有するユーザ端末に推薦情報を送信してもよい。
【0040】
認証装置２００は、ユーザの顔認証を行う装置である。認証装置２００は、顔特徴ＤＢ２１０を備える。顔特徴ＤＢ２１０は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて記憶する顔特徴データベースである。尚、顔特徴ＤＢ２１０は、顔特徴情報記憶部の一例である。顔認証端末３００は、顔認証に使用する画像を撮影する端末である。顔認証端末３００は、撮影画像を推薦制御装置１００ａに送信し、顔認証要求を行う端末である。顔認証端末３００は、各地点Ｘ、Ｙ、Ｚ及びＷ（以下、「地点Ｘ～Ｗ」と称す。）に設置されている。具体的には、地点Ｘには顔認証端末３００Ｘ、地点Ｙには顔認証端末３００Ｙ、地点Ｚには顔認証端末３００Ｚ、地点Ｗには顔認証端末３００Ｗが設置されている。ユーザは、各地点Ｘ～Ｗを訪問する際に、設置された顔認証端末３００Ｘ～３００Ｗのカメラに対して顔を向けて撮影を行い、当該地点における商品購入等を行う。
【0041】
ユーザ端末４００は、ユーザが所持する端末である。ユーザ端末４００は、例えば、スマートフォン、タブレット、ＰＣ等の通信端末である。ユーザは、顔認証端末３００又はユーザ端末４００を利用してユーザの顔が含まれる画像を撮影する。顔認証端末３００又はユーザ端末４００は、撮影画像を推薦制御装置１００ａに送信する。
【0042】
次に、図４を参照して、認証装置２００の構成について詳細に説明する。図４は、認証装置２００の構成を示すブロック図である。認証装置２００は、顔特徴ＤＢ２１０、顔検出部２２０、特徴点抽出部２３０、登録部２４０及び認証部２５０を備える。
【0043】
顔特徴ＤＢ２１０は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて記憶する顔特徴データベースである。顔検出部２２０は、撮影画像が含む顔領域を検出し、特徴点抽出部２３０に出力する。特徴点抽出部２３０は、顔検出部２２０が検出した顔領域から特徴点を抽出し、登録部２４０に顔特徴情報を出力する。顔特徴情報は、抽出した特徴点の集合である。
【0044】
登録部２４０は、顔特徴情報の登録に際して、ユーザＩＤを新規に発行する。登録部２４０は、発行したユーザＩＤと、登録画像から抽出した顔特徴情報と、を対応付けて顔特徴ＤＢ２１０に登録する。認証部２５０は、顔画像から抽出された顔特徴情報と、顔特徴ＤＢ２１０内の顔特徴情報と、の照合を行う。認証部２５０は、顔特徴情報が一致している場合、顔認証が成功したと判断し、顔特徴情報が不一致の場合、顔認証が失敗したと判断する。認証部２５０は、顔認証の成否を推薦制御装置１００ａに返信する。顔特徴情報の一致の有無は、認証の成否に対応する。また、認証部２５０は、顔認証に成功した場合、当該成功した顔特徴情報に対応付けられたユーザＩＤを特定し、特定されたユーザＩＤと認証成功の旨とを含めた認証結果を推薦制御装置１００ａに返信する。
【0045】
図７を参照して、顔特徴ＤＢ２１０にユーザＩＤ及び顔特徴情報を登録する際における認証装置２００の動作を説明する。図７は、顔特徴情報登録処理の流れを示すフローチャートである。図７では、顔認証端末３００が画像を撮影して顔特徴情報を登録する場合について説明を行うが、ユーザ端末４００が画像を撮影する場合も同様の手順で顔特徴情報を登録することができる。
【0046】
顔特徴情報を登録する際には、顔認証端末３００は、ユーザの顔を含む画像を登録用画像として撮影し、認証装置２００に対してネットワーク５００を介して顔特徴情報登録要求を行う。顔特徴情報登録要求は、登録用画像を含む。まず、認証装置２００は、顔認証端末３００又はユーザ端末４００からネットワーク５００を介して登録用画像を取得する（ステップＳ２０１）。
【0047】
次に、顔検出部２２０は、登録用画像が含む顔領域を検出し（ステップＳ２０２）、検出した顔領域を特徴点抽出部２３０に出力する。次に、特徴点抽出部２３０は、顔領域から特徴点を抽出し、登録部２４０に顔特徴情報を出力する（ステップＳ２０３）。次に、登録部２４０は、出力された顔特徴情報に対応するユーザＩＤを発行し、当該ユーザＩＤと顔特徴情報とを対応付けて顔特徴ＤＢ２１０に登録する（ステップＳ２０４）。
【0048】
図８を参照して、顔認証を行う際における認証装置２００の動作を説明する。図８は、顔認証処理の流れを示すフローチャートである。図８では、顔認証端末３００が顔認証要求する場合について説明を行うが、ユーザ端末４００が顔認証要求する場合も同様の手順で顔認証を行うことができる。
【0049】
顔認証を行う際には、顔認証端末３００は、ユーザの顔を含む画像を認証用画像として撮影し、推薦制御装置１００ａに対してネットワーク５００を介して顔認証要求を行う。顔認証要求は、認証用画像を含む。まず、推薦制御装置１００ａは、認証用画像から抽出した顔領域又は顔特徴情報を認証装置２００に送信する。特徴点抽出部２３０は、受信した顔領域から顔特徴情報抽出し、又は顔特徴情報を受信することによって、顔特徴情報を取得する（ステップＳ３０１）。
【0050】
次に、認証部２５０は、取得部１３０が取得した顔特徴情報を顔特徴ＤＢ２１０と照合する（ステップＳ３０２）。顔特徴情報が一致した場合（ステップＳ３０３Ｙｅｓ）、認証部２５０は、顔特徴情報が一致したユーザのユーザＩＤを特定し（ステップＳ３０４）、顔認証に成功した旨と特定したユーザＩＤとを推薦制御装置１００ａに返信する（ステップＳ３０５）。一致する顔特徴情報がなかった場合（ステップＳ３０３Ｎｏ）、認証部２５０は、顔認証に失敗した旨を推薦制御装置１００ａに返信する（ステップＳ３０６）。
【0051】
次に、図５を参照して、顔認証端末３００の構成について詳細に説明する。顔認証端末３００は、ハードウェア構成として、カメラ等の撮影装置と、表示装置と、コンピュータとを備える。顔認証端末３００は、顔特徴情報登録要求及び顔認証要求を行う装置である。顔認証端末３００は、例えば、顔認証による決済を行う端末、顔認証による入場制御を行う端末、顔認証に応じて情報を提示するデジタルサイネージ等が挙げられるが、これらに限定されない。
【0052】
図５は、顔認証端末３００の構成を示すブロック図である。顔認証端末３００は、カメラ３１０、制御部３２０、記憶部３３０、通信部３４０及び表示部３５０を備える。カメラ３１０は、画像を撮影する撮影装置である。制御部３２０は、顔認証端末３００が備えるハードウェアの制御を行う。制御部３２０は、撮影要求部３２２、顔特徴情報登録要求部３２３、認証要求部３２４、決済処理部３２５、履歴登録要求部３２６及び推薦要求部４２７を備える。
【0053】
撮影要求部３２２は、カメラ３１０に対して撮影要求を行う。カメラ３１０は、ユーザの顔を含む画像を撮影する。カメラ３１０が撮影した画像は、登録用画像及び認証用画像として使用される。顔特徴情報登録要求部３２３は、顔特徴情報登録要求を、ネットワーク５００を介して認証装置２００に送信する。顔特徴情報登録要求は、カメラ３１０が撮影した登録用画像を含む。認証要求部３２４は、顔認証要求を、ネットワーク５００を介して推薦制御装置１００ａに送信する。顔認証要求は、カメラ３１０が撮影した認証用画像を含む。認証要求部３２４は、推薦制御装置１００ａから顔認証の成否を受信し、その結果を表示部３５０に表示させる。
【0054】
決済処理部３２５は、顔認証成功時に決済処理を実行する。なお、制御部３２０は、決済処理部３２５に代えて図示しない記録部を備えていてもよい。記録部は、顔認証成功時に顔認証端末３００が設置されている施設へのユーザの入退場を記録する。履歴登録要求部３２６は、履歴登録要求を、ネットワーク５００を介して推薦制御装置１００ａに送信する。尚、履歴登録要求は、決済処理の結果である決済履歴を含む。決済履歴は、例えば、決済した日時、金額、物品及びユーザＩＤ等を含む情報である。推薦要求部３２７は、推薦情報要求を、ネットワーク５００を介して推薦制御装置１００ａに送信する。
【0055】
記憶部３３０は、顔認証端末３００の各機能を実現するためのプログラムが格納される記憶装置である。通信部３４０は、ネットワーク５００との通信インタフェースである。表示部３５０は、ユーザに対して顔認証結果及び提示情報等を表示する表示装置である。
【0056】
次に、図６を参照して、ユーザ端末４００の構成について詳細に説明する。図６は、ユーザ端末４００の構成を示すブロック図である。ユーザ端末４００は、カメラ４１０、制御部４２０、記憶部４３０、通信部４４０及び表示部４５０を備える。制御部４２０は、撮影要求部４２２、顔特徴情報登録要求部４２３、認証要求部４２４、決済処理部４２５、履歴登録要求部４２６及び推薦要求部４２７を備える。ユーザ端末４００が備える各構成の機能は、顔認証端末３００が備える各構成と同様であるから、説明を省略する。
【0057】
顔認証端末３００及びユーザ端末４００は、顔認証が成功した場合、決済処理等を行い、その履歴を推薦制御装置１００ａに登録させる履歴登録要求を行う。以下、図９を参照して、履歴登録要求する際における顔認証端末３００の動作を説明する。図９は、履歴登録処理の流れを示すフローチャートである。図９では、顔認証端末３００が履歴登録要求する場合について説明を行うが、ユーザ端末４００も同様の手順で履歴登録要求を行うことができる。
【0058】
まず、撮影要求部３２２は、カメラ３１０に対して撮影要求を行い、カメラ３１０は、ユーザの顔を含む認証用画像を撮影する（ステップＳ４０１）。次に、認証要求部３２４は、顔認証要求をネットワーク５００を介して認証装置２００に送信し（ステップＳ４０２）、その成否を認証装置２００から受信する（ステップＳ４０３）。顔認証が成功であった場合（ステップＳ４０４Ｙｅｓ）、決済処理部３２５は、決済処理を実行し（ステップＳ４０５）、履歴登録要求部３２６は、推薦制御装置１００ａに対してネットワーク５００を介して履歴登録要求を行う（ステップＳ４０６）。顔認証が失敗であった場合（ステップＳ４０５Ｎｏ）、履歴登録要求部３２６は、表示部３５０に顔認証が失敗した旨を表示させる。
【0059】
尚、図９では、顔認証成功時に決済処理を行う場合について説明したが、顔認証成功時には、入退履歴の記録及び参加履歴の記録等の処理を行ってもよい。顔認証端末３００及びユーザ端末４００は、入退履歴及び参加履歴等の行動履歴を、決済履歴と同様に推薦制御装置１００ａに登録要求する。また、顔認証成功時には、決済の前後等にカメラを備えるサイネージの前にユーザが立ち、顔を含む撮影画像を撮影してもよい。
【0060】
図１０は、履歴登録処理の流れを示すフローチャートである。上述のステップＳ４０５において送信される履歴登録要求には、行動履歴が含まれている。推薦制御装置１００ａは、履歴登録要求を受信する（ステップＳ５０１）と、履歴ＤＢ１１０ａに当該行動履歴を登録する（ステップＳ５０２）。
【0061】
推薦制御装置１００ａは、顔認証に成功した場合又は推薦情報要求を受信した場合に、推薦情報を提示する。顔認証に成功して推薦情報を提示する例としては、決済の前後等にカメラを備えるサイネージの前にユーザが立ち、顔を含む撮影画像を撮影した場合、及び入退履歴の記録及び参加履歴の記録等の処理を行った場合が挙げられる。推薦情報は、サイネージ及びユーザ端末４００等に表示される。以下、図１１～１２を参照して、推薦情報を提示する際における推薦制御装置１００ａ等の動作を説明する。図１１は、推薦制御処理の流れを示すフローチャートである。図１２は、推薦要求処理の流れを示すフローチャートである。
【0062】
まず、図１１を参照して、顔認証成功時に推薦情報を提示する場合について説明する。まず、取得部１３０は、顔認証端末３００及びユーザ端末４００等の所定の撮影装置が撮影した認証用画像を取得する（ステップＳ６０１）。尚、このとき認証用画像と共に、取得部１３０は、所定の撮影装置の設置位置を取得するものとする。次に、認証制御部１４０は、顔領域又は顔特徴情報を抽出し、当該顔領域又は当該顔特徴情報を認証装置２００へ送信して顔認証を要求する（ステップＳ６０２）。次に、認証制御部１４０は、認証装置２００から顔認証の成否を受信する（ステップＳ６０３）。
【0063】
顔認証に成功した場合（ステップＳ６０４Ｙｅｓ）、特定部１６０は、ステップＳ６０３において受信した顔認証の成否に含まれるユーザＩＤを抽出することによって、顔認証に成功したユーザＩＤを特定する（ステップＳ６０５）。次に、行動履歴抽出部１５０は、ステップＳ６０５において特定したユーザＩＤと対応付けられた行動履歴を履歴ＤＢ１１０ａから取得することによって、当該ユーザの行動履歴を特定する（ステップＳ６０６）。
【0064】
次に、行動履歴抽出部１５０は、ユーザの行動履歴から所定の抽出条件を満たす行動履歴を抽出する（ステップＳ６０７）。所定の抽出条件は、例えば、予め設定されており、時間帯を含んでいる。具体的には、所定の抽出条件は、例えばユーザが平日に訪れたお店の履歴である。ユーザは、平日すなわち勤務日には職場近辺の飲食店を訪れることが多く、休日には自宅近辺の飲食店を訪れることが多い。そこで、ユーザが平日に訪れたことを所定の抽出条件とすると、当該ユーザが職場近辺においてよく訪れる飲食店を抽出することができる。
【0065】
次に、特定部１６０は、行動履歴抽出部１５０が抽出した行動履歴に基づいて推薦情報を特定する（ステップＳ６０８）。次に、出力部１７０は、特定部１６０が特定した推薦情報をネットワーク５００を介して、顔認証端末３００及びユーザ端末４００等の所定の表示端末に送信する（ステップＳ６０９）。顔認証に失敗した場合（ステップＳ６０４Ｎｏ）、出力部１７０は、顔認証に失敗した旨をネットワーク５００を介して所定の表示端末に送信する（ステップＳ６１０）。
【0066】
次に、図１２を参照して、推薦要求に応じて推薦情報を提示する場合について説明する。顔認証端末３００及びユーザ端末４００は、顔認証が成功した場合（ステップＳ４０４Ｙｅｓ）、推薦要求処理（ステップＳ７０１～７０３）を行うことができる。推薦要求処理（ステップＳ７０１～７０３）は、決済処理（ステップＳ４０５）及び履歴登録要求（ステップＳ４０６）と並行して行われてもよいし、履歴登録要求（ステップＳ４０６）の後に行われてもよい。図１２では、顔認証端末３００が推薦要求処理する場合について説明を行うが、ユーザ端末４００も同様の手順で推薦要求処理を行うことができる。
【0067】
まず、推薦要求部３２７は、推薦要求をネットワーク５００を介して推薦制御装置１００ａに送信する（ステップＳ７０１）。推薦制御装置１００ａは、推薦要求を受信すると、ステップＳ６０５～６０９と同様の手順によって推薦情報を特定して返信する。推薦要求部３２７は、推薦制御装置１００ａから推薦情報を受信すると（ステップＳ７０２）、表示部３５０に当該推薦情報を表示する（ステップＳ７０３）。
【0068】
ステップＳ７０１では、ユーザが顔認証端末３００及びユーザ端末４００等の操作端末を操作して推薦要求を推薦制御装置１００ａに送信する。操作端末は、推薦情報が送信される表示端末と同じ端末であってもよいし、異なる端末であってもよい。図１３は、操作端末上に表示される推薦要求開始画面を例示する図である。図１３では、ユーザ端末４００を操作して推薦要求を行う場合を示している。図１３に示すように、ユーザ端末４００は、推薦要求（レコメンド）開始画面を表示することができる。
【0069】
ユーザは、ユーザ端末４００を操作して推薦要求を開始する際に、モードを選択することによって、抽出条件を手動で設定してもよい。例えば、図１３に示すように、推薦要求開始画面に「休日モード」及び「平日モード」を選択するボタンが表示されている場合、ユーザは、いずれかのボタンを押して推薦要求を開始する。例えば、ユーザが「休日モード」ボタンを押した場合、ユーザ端末４００は、所定の抽出条件を「ユーザが休日に行った行動履歴」とし、当該所定の抽出条件を含む推薦要求を推薦制御装置１００ａに送信する。このように、ユーザは、推薦要求時にモードを選択することによって、所定の抽出条件を手動で設定することができる。
【0070】
図１４は、表示端末上に表示される推薦情報を例示する図である。図１４では、ユーザ端末４００に推薦情報を表示する場合を示している。図１４に示すように、ユーザ端末４００は、ステップＳ６０９において受信した推薦情報を画面上に表示する。尚、例えば推薦情報に店舗情報が含まれる場合、図１４に示した画面上には、店舗の詳細情報や地図情報、当該店舗までの経路情報等を表示することができる。また、ステップＳ６０９において、出力部１７０は、推薦情報に加えて、ユーザの行動履歴をユーザ端末４００に送信してもよい。
【0071】
図１５は、行動履歴として表示端末上に表示されるマップを例示する図である。図１５に示すように、ユーザ端末４００は、ステップＳ６０９において受信したユーザの行動履歴をマップ上に表示してもよい。また、図１６は、表示端末上に表示される行動履歴を例示する図である。図１６に示すように、ユーザ端末４００は、ステップＳ６０９において受信した行動履歴を時系列で表示してもよい。
【0072】
図１５及び図１６では、第１のユーザの行動履歴のみを表示端末上に表示する場合を示しているが、表示端末上には、当該行動履歴に加えて、推薦情報を表示してもよい。推薦情報は、店舗情報、店舗の住所、及びユーザの現在位置から店舗までのルート案内等を含んでいてもよい。ルート案内は、ユーザの現在位置から店舗までの距離及び所要時間等を含んでいてもよい。また、表示端末上には、複数の推薦情報を表示してもよい。複数の推薦情報を表示する場合、各推薦情報の詳細及びルート案内等を同時に表示してもよい。ユーザは、各推薦情報の詳細及びルート案内等を検討し、推薦情報同士を比較することができる。
【0073】
ユーザは、自らの行動履歴から特定の行動履歴を手動で除外してもよい。ユーザは、ユーザ端末４００等の操作端末を操作することによって、特定の行動履歴を除外する。特定の行動履歴は、例えば、特定の文字列を含む決済情報である。図１７は、表示端末上に表示される履歴除外条件設定画面を例示する図である。ユーザは、操作端末上に表示される履歴除外条件設定画面から特定の行動履歴の除外を指定することができる。図１７に示すように、ユーザは、例えば、文字列「カレー」を入力し、文字列「カレー」を含む行動履歴の除外を指定することができる。操作端末は、ユーザから受け付けた特定の行動履歴を除外する指定を、ネットワーク５００を介して推薦制御装置１００ａに送信する。行動履歴抽出部１５０は、当該指定を受信すると、指定された特定の行動履歴を除外する条件を所定の抽出条件に追加する。
【0074】
また、履歴ＤＢ１１０ａには、ユーザが登録を希望した行動履歴のみを登録してもよい。例えば、履歴ＤＢ１１０ａには、決済時にユーザが登録を希望した決済履歴のみが登録されてもよい。図１８は、決済時に操作端末上に表示される履歴登録画面を例示する図である。ユーザは、ユーザ端末等の操作端末を操作して、登録の希望を指定する。図１８に示すように、決済時に当該決済履歴を登録するか否かをユーザに選択させる。
【0075】
以下、ユーザに提示する推薦情報の具体例を説明する。例えば、所定の抽出条件を「ユーザが平日に行った決済履歴」とする。ユーザの決済履歴を以下の表１に示す。
【表1】
【0076】
表１に示すように、ユーザは、平日にパスタの注文を２回行っている。つまり、当該ユーザは、平日にパスタを好んで食べていると考えられる。そこで、パスタに関する推薦情報として、パスタ屋のクーポン券をユーザに提示する。このように、ユーザの好みに合った推薦情報を提示することによって、推薦情報の利用率を高めることができる。
【0077】
＜実施形態３＞
実施形態３は、上述した実施形態１の変形例である。実施形態１に係る推薦制御装置１００は、履歴ＤＢ１１０ａに登録された行動履歴に含まれる決済情報及び日時情報等に基づいて所定の抽出条件を満たす行動履歴を抽出していた。一方、実施形態３では、ユーザ自身が行動履歴を分類する。
実施形態３は、上述した実施形態１の変形例である。実施形態１に係る推薦制御装置１００は、履歴ＤＢ１１０ａに登録された行動履歴に含まれる決済情報及び日時情報等に基づいて所定の抽出条件を満たす行動履歴を抽出していた。一方、実施形態３では、ユーザ自身が行動履歴を分類する。
【0078】
図１９は、実施形態３に係る推薦制御装置７００の構成を示すブロック図である。推薦制御装置７００は、図３に示した推薦制御装置１００ａの構成に加えて、分類部１８０を備える。推薦制御装置７００が備える各構成について、実施形態２と重複する説明は適宜省略する。
【0079】
分類部１８０は、ユーザからの指定に基づいて行動履歴に含まれる所定の履歴を複数のグループのいずれかに分類する。複数のグループは、例えば、「平日」及び「休日」、「昼食」及び「夕食」、「一人で来店」、「同僚と来店」及び「家族と来店」等である。ユーザは、ユーザ端末等の操作端末から所定の履歴の分類を指定する。操作端末は、ネットワーク５００を介して、当該分類の指定を推薦制御装置７００に送信する。分類部１８０は、当該分類の指定を受信すると、指定内容に従って、当該所定の履歴を複数のグループのいずれかに分類する。
【0080】
本実施形態において行動履歴抽出部１５０は、複数のグループのうち所定のグループに分類されていることを所定の抽出条件としてもよい。例えば、ユーザから所定のグループの指定を受け付けた場合、行動履歴抽出部１５０は、当該所定のグループに分類されていることを所定の抽出条件とする。
【0081】
ユーザは、操作端末上に表示された決済履歴画面から各決済履歴の分類を行う。図２０は、操作端末上に表示される履歴設定画面を例示する図である。図２０に示すように、履歴設定画面には、例えば、各決済履歴と各決済履歴に対する処理を行うためのボタンが表示されている。各決済履歴に対する処理は、例えば、「分類」、「削除」及び「除外」である。ユーザは、各決済履歴に対して処理を行うためのボタンを選択することができる。尚、履歴設定画面には、各決済履歴のみを表示し、ユーザがいずれかの決済履歴を選択した場合に、当該決済履歴に対する処理を行うためのボタンを表示させてもよい。尚、図１８に示した履歴登録画面において、ユーザの分類の希望を受け付けてもよい。
【0082】
ユーザが除外ボタンを選択した場合、操作端末は、当該支払履歴を除外する指定をネットワーク５００を介して推薦制御装置７００に送信する。支払履歴を除外する指定を受信すると、行動履歴抽出部１５０は、当該支払履歴を除外する条件を所定の抽出条件に追加する。ユーザが削除ボタンを選択した場合、操作端末は、当該支払履歴を削除する指定をネットワーク５００を介して推薦制御装置７００に送信する。支払履歴を削除する指定を受信すると、履歴登録部（不図示）は、履歴記憶部（不図示）から当該支払履歴を削除する。
【0083】
ユーザが分類ボタンを選択した場合、操作端末は、履歴分類画面を表示する。図２１は、操作端末上に表示される履歴分類画面を例示する図である。履歴分類画面には、行動履歴を各グループに分類するためのボタンが表示されている。分類するためのボタンは、例えば、図２１に示すように、「平日モード」及び「休日モード」である。ユーザは、行動履歴を各グループに分類するためのボタンを選択することができる。
【0084】
ユーザが平日ボタンを選択した場合、操作端末は、当該行動履歴を平日グループに分類する指定をネットワーク５００を介して推薦制御装置７００に送信する。ユーザが休日ボタンを選択した場合、操作端末は、当該行動履歴を休日グループに分類する指定をネットワーク５００を介して推薦制御装置７００に送信する。行動履歴を分類する指定を受信すると、分類部１８０は、当該行動履歴を指定されたグループに分類する。
【0085】
本実施形態に係る推薦制御装置７００は、ユーザ自身が行動履歴のグループを分類することができるため、より精度良く行動履歴のノイズを除くことができる。さらに、本実施形態に係る推薦制御装置は、実施形態１及び２において説明した効果と同様の効果を奏することができる。
【0086】
＜実施形態４＞
実施形態４は、上述した実施形態１～３の変形例である。実施形態１～３に係る推薦制御装置１００，１００ａ及び７００は、外部の認証装置２００を用いて顔認証を行っていた。一方、本実施形態に係る推薦制御装置８００は、装置内部で顔認証を行う。
実施形態４は、上述した実施形態１～３の変形例である。実施形態１～３に係る推薦制御装置１００，１００ａ及び７００は、外部の認証装置２００を用いて顔認証を行っていた。一方、本実施形態に係る推薦制御装置８００は、装置内部で顔認証を行う。
【0087】
図２２は、実施形態４に係る推薦制御装置８００の構成を示すブロック図である。推薦制御装置８００は、図１に示した推薦制御装置１００の構成と比べて、認証制御部１４０が顔特徴抽出部１４０ａ及び顔認証部１９０に置き換わり、顔特徴ＤＢ１９１（不図示）が追加されたものである。尚、顔特徴ＤＢ１９１は、顔特徴情報記憶部の一例である。推薦制御装置８００が備える各構成について、実施形態２と重複する説明は適宜省略する。図２３は、実施形態４に係る推薦制御システム９００の構成を示すブロック図である。推薦制御システム９００は、認証装置２００を備えていない点及び推薦制御装置８００を備える点で推薦制御システム６００と異なる。その他の構成については同様であるため、説明を適宜省略する。
【0088】
顔特徴抽出部１４０ａは、撮影画像から顔領域又は顔特徴情報を抽出する。顔認証部１９０は、抽出された顔領域又は顔特徴情報に基づいて顔認証を行う。顔特徴ＤＢ１９１は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて記憶する顔特徴データベースである。推薦制御装置８００は、推薦制御装置１００と同様に図２に示す流れで推薦情報の提示を制御する。但し、ステップＳ１０３において、顔特徴抽出部１４０ａは、取得部１３０が取得した撮影画像から顔領域又は顔特徴情報を抽出し、顔認証部１９０は、抽出された顔領域又は顔特徴情報に基づいて顔認証を行う。さらに、本実施形態に係る推薦制御装置は、実施形態１～３において説明した効果と同様の効果を奏することができる。
【0089】
尚、上述の実施形態では、ハードウェアの構成として説明したが、これに限定されるものではない。本開示は、任意の処理を、ＣＰＵにコンピュータプログラムを実行させることにより実現することも可能である。
【0090】
上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、ＤＶＤ（Digital Versatile Disc）、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【0091】
なお、本開示は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。また、本開示は、それぞれの実施形態を適宜組み合わせて実施されてもよい。
【0092】
上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。
【0093】
（付記Ａ１）
所定の撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、
前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定手段が特定した推薦情報を送信する出力部と、
を備える推薦制御装置。
所定の撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、
前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定手段が特定した推薦情報を送信する出力部と、
を備える推薦制御装置。
【0094】
（付記Ａ２）
さらに、
複数のユーザの行動履歴を記憶する履歴記憶部と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶部に登録する履歴登録部と、
を備え、
前記行動履歴抽出部は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶部から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
付記Ａ１に記載の推薦制御装置。
さらに、
複数のユーザの行動履歴を記憶する履歴記憶部と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶部に登録する履歴登録部と、
を備え、
前記行動履歴抽出部は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶部から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
付記Ａ１に記載の推薦制御装置。
【0095】
（付記Ａ３）
前記行動履歴は、前記ユーザにおける複数の決済履歴を含み、
前記所定の抽出条件は、特定の決済履歴を含み、
前記行動履歴抽出部は、前記複数の決済履歴の中から前記特定の決済履歴を抽出する、
付記Ａ１又はＡ２に記載の推薦制御装置。
前記行動履歴は、前記ユーザにおける複数の決済履歴を含み、
前記所定の抽出条件は、特定の決済履歴を含み、
前記行動履歴抽出部は、前記複数の決済履歴の中から前記特定の決済履歴を抽出する、
付記Ａ１又はＡ２に記載の推薦制御装置。
【0096】
（付記Ａ４）
前記所定の抽出条件は、決済が行われた所定の時間帯をさらに含み、
前記行動履歴抽出部は、前記複数の決済履歴の中から前記ユーザが前記所定の時間帯に決済を行った決済履歴を抽出する、
付記Ａ３に記載の推薦制御装置。
前記所定の抽出条件は、決済が行われた所定の時間帯をさらに含み、
前記行動履歴抽出部は、前記複数の決済履歴の中から前記ユーザが前記所定の時間帯に決済を行った決済履歴を抽出する、
付記Ａ３に記載の推薦制御装置。
【0097】
（付記Ａ５）
前記所定の抽出条件は、決済が行われた所定期間をさらに含み、
前記行動履歴抽出部は、前記複数の決済履歴の中から前記ユーザが前記所定期間内に決済を行った決済履歴を抽出する、
付記Ａ３又はＡ４に記載の推薦制御装置。
前記所定の抽出条件は、決済が行われた所定期間をさらに含み、
前記行動履歴抽出部は、前記複数の決済履歴の中から前記ユーザが前記所定期間内に決済を行った決済履歴を抽出する、
付記Ａ３又はＡ４に記載の推薦制御装置。
【0098】
（付記Ａ６）
前記所定の抽出条件は、所定期間内に基準回数以上決済が行われたことを条件としてさらに含み、
前記行動履歴抽出部は、前記複数の決済履歴の中から前記ユーザが所定期間内に前記基準回数以上行った決済履歴を抽出する、
付記Ａ３～Ａ５のいずれか一項に記載の推薦制御装置。
前記所定の抽出条件は、所定期間内に基準回数以上決済が行われたことを条件としてさらに含み、
前記行動履歴抽出部は、前記複数の決済履歴の中から前記ユーザが所定期間内に前記基準回数以上行った決済履歴を抽出する、
付記Ａ３～Ａ５のいずれか一項に記載の推薦制御装置。
【0099】
（付記Ａ７）
前記行動履歴抽出部は、
前記ユーザから特定の行動履歴を除外する指定を受け付けた場合、前記指定された特定の行動履歴を除外する条件を前記所定の抽出条件に追加する、
付記Ａ１～Ａ６のいずれか一項に記載の推薦制御装置。
前記行動履歴抽出部は、
前記ユーザから特定の行動履歴を除外する指定を受け付けた場合、前記指定された特定の行動履歴を除外する条件を前記所定の抽出条件に追加する、
付記Ａ１～Ａ６のいずれか一項に記載の推薦制御装置。
【0100】
（付記Ａ８）
前記ユーザからの指定に基づき、前記行動履歴に含まれる所定の履歴を複数のグループのいずれかに分類する分類部をさらに備え、
前記行動履歴抽出部は、前記ユーザから前記複数のグループのうち所定のグループの指定を受け付けた場合、当該所定のグループに分類されていることを前記所定の抽出条件とする、
付記Ａ１～Ａ７のいずれか一項に記載の推薦制御装置。
前記ユーザからの指定に基づき、前記行動履歴に含まれる所定の履歴を複数のグループのいずれかに分類する分類部をさらに備え、
前記行動履歴抽出部は、前記ユーザから前記複数のグループのうち所定のグループの指定を受け付けた場合、当該所定のグループに分類されていることを前記所定の抽出条件とする、
付記Ａ１～Ａ７のいずれか一項に記載の推薦制御装置。
【0101】
（付記Ａ９）
前記行動履歴は、前記ユーザにおける、決済履歴、入退履歴及び参加履歴のうち少なくとも１つを含む、
付記Ａ１～Ａ８のいずれか一項に記載の推薦制御装置。
前記行動履歴は、前記ユーザにおける、決済履歴、入退履歴及び参加履歴のうち少なくとも１つを含む、
付記Ａ１～Ａ８のいずれか一項に記載の推薦制御装置。
【0102】
（付記Ｂ１）
ユーザの顔領域を含む画像を撮影する所定の撮影装置と、
前記所定の撮影装置と通信可能な推薦制御装置と、
前記ユーザの顔特徴情報を記憶し、前記推薦制御装置と通信可能な認証装置と、を備え、
前記推薦制御装置は、
所定の撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、
前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、
を備える推薦制御システム。
ユーザの顔領域を含む画像を撮影する所定の撮影装置と、
前記所定の撮影装置と通信可能な推薦制御装置と、
前記ユーザの顔特徴情報を記憶し、前記推薦制御装置と通信可能な認証装置と、を備え、
前記推薦制御装置は、
所定の撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、
前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、
を備える推薦制御システム。
【0103】
（付記Ｂ２）
前記推薦制御装置は、さらに、
複数のユーザの行動履歴を記憶する履歴記憶部と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶部に登録する履歴登録部と、
を備え、
前記行動履歴抽出部は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶手段から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
付記Ｂ１に記載の推薦制御システム。
前記推薦制御装置は、さらに、
複数のユーザの行動履歴を記憶する履歴記憶部と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶部に登録する履歴登録部と、
を備え、
前記行動履歴抽出部は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶手段から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
付記Ｂ１に記載の推薦制御システム。
【0104】
（付記Ｃ１）
コンピュータが、
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
を備える推薦制御方法。
コンピュータが、
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
を備える推薦制御方法。
【0105】
（付記Ｄ１）
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
をコンピュータに実行させる推薦制御プログラムが格納された非一時的なコンピュータ可読媒体。
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
をコンピュータに実行させる推薦制御プログラムが格納された非一時的なコンピュータ可読媒体。
【0106】
（付記Ｅ１）
所定の撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出する顔特徴抽出部と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う顔認証部と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、
前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、
を備える推薦制御装置。
所定の撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出する顔特徴抽出部と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う顔認証部と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する行動履歴抽出部と、
前記行動履歴抽出部が抽出した行動履歴に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、
を備える推薦制御装置。
【0107】
（付記Ｅ２）
さらに、
複数のユーザの行動履歴を記憶する履歴記憶部と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶手段に登録する履歴登録部と、
を備え、
前記行動履歴抽出部は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶部から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
付記Ｅ１に記載の推薦制御装置。
さらに、
複数のユーザの行動履歴を記憶する履歴記憶部と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶手段に登録する履歴登録部と、
を備え、
前記行動履歴抽出部は、前記顔認証に成功したユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶部から取得し、当該行動履歴から所定の抽出条件を満たす行動履歴を抽出する、
付記Ｅ１に記載の推薦制御装置。
【0108】
（付記Ｆ１）
コンピュータが、
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
を備える推薦制御方法。
コンピュータが、
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
を備える推薦制御方法。
【0109】
（付記Ｇ１）
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
をコンピュータに実行させる推薦制御プログラムが格納された非一時的なコンピュータ可読媒体。
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
前記顔認証に成功したユーザにおける行動履歴から所定の抽出条件を満たす行動履歴を抽出する工程と、
前記抽出された行動履歴に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
をコンピュータに実行させる推薦制御プログラムが格納された非一時的なコンピュータ可読媒体。
【0110】
以上、実施形態（及び実施例）を参照して本願発明を説明したが、本願発明は上記実施形態（及び実施例）に限定されものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
【符号の説明】
【0111】
１００、１００ａ、７００、８００ 推薦制御装置
６００、９００ 推薦制御システム
１１０ａ 履歴ＤＢ
１２０ 履歴登録部
１３０ 取得部
１４０ 認証制御部
１４０ａ 顔特徴抽出部
１５０ 行動履歴抽出部
１６０ 特定部
１７０ 出力部
１８０ 分類部
１９０ 顔認証部
１９１ 顔特徴ＤＢ
２００ 認証装置
２１０ 顔特徴ＤＢ
２２０ 顔検出部
２３０ 特徴点抽出部
２４０ 登録部
２５０ 認証部
３００（３００Ｘ～３００Ｗ） 顔認証端末
３１０ カメラ
３２０ 制御部
３２２ 撮影要求部
３２３ 顔特徴情報登録要求部
３２４ 認証要求部
３２５ 決済処理部
３２６ 履歴登録要求部
３２７ 推薦要求部
３３０ 記憶部
３４０ 通信部
３５０ 表示部
４００ ユーザ端末
４１０ カメラ
４２０ 制御部
４２２ 撮影要求部
４２３ 顔特徴情報登録要求部
４２４ 認証要求部
４２５ 決済処理部
４２６ 履歴登録要求部
４２７ 推薦要求部
４３０ 記憶部
４４０ 通信部
４５０ 表示部
５００ ネットワーク
６００、９００ 推薦制御システム
１１０ａ 履歴ＤＢ
１２０ 履歴登録部
１３０ 取得部
１４０ 認証制御部
１４０ａ 顔特徴抽出部
１５０ 行動履歴抽出部
１６０ 特定部
１７０ 出力部
１８０ 分類部
１９０ 顔認証部
１９１ 顔特徴ＤＢ
２００ 認証装置
２１０ 顔特徴ＤＢ
２２０ 顔検出部
２３０ 特徴点抽出部
２４０ 登録部
２５０ 認証部
３００（３００Ｘ～３００Ｗ） 顔認証端末
３１０ カメラ
３２０ 制御部
３２２ 撮影要求部
３２３ 顔特徴情報登録要求部
３２４ 認証要求部
３２５ 決済処理部
３２６ 履歴登録要求部
３２７ 推薦要求部
３３０ 記憶部
３４０ 通信部
３５０ 表示部
４００ ユーザ端末
４１０ カメラ
４２０ 制御部
４２２ 撮影要求部
４２３ 顔特徴情報登録要求部
４２４ 認証要求部
４２５ 決済処理部
４２６ 履歴登録要求部
４２７ 推薦要求部
４３０ 記憶部
４４０ 通信部
４５０ 表示部
５００ ネットワーク
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】