特許 7196683 情報処理システム、プログラム、及び制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-12-19

(45)【発行日】2022-12-27

(54)【発明の名称】情報処理システム、プログラム、及び制御方法

(51)【国際特許分類】

   G06Q 30/02 20120101AFI20221220BHJP

   G06V 20/59 20220101ALI20221220BHJP

   G01C 21/26 20060101ALI20221220BHJP

【ＦＩ】

G06Q30/02 398

G06V20/59

G01C21/26 C

【請求項の数】 7

(21)【出願番号】P 2019032034

(22)【出願日】2019-02-25

(65)【公開番号】P2020135761

(43)【公開日】2020-08-31

【審査請求日】2021-06-24

(73)【特許権者】

【識別番号】000003207

【氏名又は名称】トヨタ自動車株式会社

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】230118913

【弁護士】

【氏名又は名称】杉村 光嗣

(74)【代理人】

【識別番号】100164471

【弁理士】

【氏名又は名称】岡野 大和

(74)【代理人】

【識別番号】100202326

【弁理士】

【氏名又は名称】橋本 大佑

(72)【発明者】

【氏名】浜上 佳奈

(72)【発明者】

【氏名】前川 卓也

(72)【発明者】

【氏名】中山 陽介

(72)【発明者】

【氏名】軸丸 晃年

(72)【発明者】

【氏名】杉村 多恵

(72)【発明者】

【氏名】菱川 隆夫

(72)【発明者】

【氏名】足立 真一

【審査官】永野 一郎

(56)【参考文献】

【文献】特開２０１７－１７３２０１（ＪＰ，Ａ）

【文献】特表２０１８－５２６７４９（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１７／０２８９５９６（ＵＳ，Ａ１）

【文献】特開２０１４－０５２５１８（ＪＰ，Ａ）

【文献】国際公開第２０１７／１７９２８２（ＷＯ，Ａ１）

【文献】特開２０１９－０２３８７９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

Ｇ０６Ｖ ２０／５９

Ｇ０１Ｃ ２１／２６

(57)【特許請求の範囲】

【請求項1】

車両と、前記車両によって取得される情報を前記車両から取得する情報処理装置と、を備える情報処理システムであって、
前記車両は、
サービス提供者により提供されるコンテンツと関連付けられる識別記号を車外カメラにより撮像し、
撮像された前記識別記号に関連付けられた前記コンテンツを、前記車両の車室内の乗員に対して出力し、
出力された前記コンテンツに関連する前記乗員の操作情報を取得し、
前記車室内で前記乗員が前記コンテンツに関連する操作を行うときの乗員に関する情報を取得し、
前記情報処理装置は、
前記乗員の操作情報に基づいて、出力された前記コンテンツが前記乗員によって選択されなかったと判定すると、前記乗員に関する情報に基づいて算出される情報又は選択されなかった前記コンテンツに対する前記乗員に関する情報を用いて、選択されなかった前記コンテンツを更新するか否かを決定する、
情報処理システム。

【請求項2】

前記車両は、前記車両の前記車室内で乗員の属性を取得し、
前記情報処理装置は、
前記乗員に関する情報に基づいて、選択されなかった前記コンテンツに対する前記乗員の好感度を算出し、
前記乗員の好感度が閾値よりも小さいと、選択されなかった前記コンテンツを前記乗員の属性に適合するように更新する、
請求項１に記載の情報処理システム。

【請求項3】

前記車両は、前記車両の車室内を撮像する車室内カメラを含み、前記車室内カメラによって撮像された画像から前記乗員に関する情報及び前記乗員の属性を取得する、
請求項２に記載の情報処理システム。

【請求項4】

前記コンテンツは、前記サービス提供者が顧客に対して提供する商品内容を含み、
前記乗員の操作情報は、出力された前記商品内容から前記乗員が所定の商品を選択するときの入力情報を含む、
請求項１乃至３のいずれか１項に記載の情報処理システム。

【請求項5】

前記識別記号は、ＱＲコード（登録商標）を含む、
請求項１乃至４のいずれか１項に記載の情報処理システム。

【請求項6】

車両と、前記車両によって取得される情報を前記車両から取得する情報処理装置と、を備える情報処理システムにおいて動作するプログラムであって、
前記車両に、
サービス提供者により提供されるコンテンツと関連付けられる識別記号を車外カメラにより撮像するステップと、
撮像された前記識別記号に関連付けられた前記コンテンツを、前記車両の車室内の乗員に対して出力するステップと、
出力された前記コンテンツに関連する前記乗員の操作情報を取得するステップと、
前記車室内で前記乗員が前記コンテンツに関連する操作を行うときの乗員に関する情報を取得するステップと、
を実行させ、
前記情報処理装置に、
前記乗員の操作情報に基づいて、出力された前記コンテンツが前記乗員によって選択されなかったと判定すると、前記乗員に関する情報に基づいて算出される情報又は選択されなかった前記コンテンツに対する前記乗員に関する情報を用いて、選択されなかった前記コンテンツを更新するか否かを決定するステップと、
を実行させる、
プログラム。

【請求項7】

車両と、前記車両によって取得される情報を前記車両から取得する情報処理装置と、を備える情報処理システムにおける制御方法であって、
前記車両において、
サービス提供者により提供されるコンテンツと関連付けられる識別記号を車外カメラにより撮像するステップと、
撮像された前記識別記号に関連付けられた前記コンテンツを、前記車両の車室内の乗員に対して出力するステップと、
出力された前記コンテンツに関連する前記乗員の操作情報を取得するステップと、
前記車室内で前記乗員が前記コンテンツに関連する操作を行うときの乗員に関する情報を取得するステップと、
を含み、
前記情報処理装置において、
前記乗員の操作情報に基づいて、出力された前記コンテンツが前記乗員によって選択されなかったと判定すると、前記乗員に関する情報に基づいて算出される情報又は選択されなかった前記コンテンツに対する前記乗員に関する情報を用いて、選択されなかった前記コンテンツを更新するか否かを決定するステップと、
を含む、
制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理システム、プログラム、及び制御方法に関する。

【背景技術】

【0002】

従来、車両に搭載された車外カメラにより識別記号を撮像して、識別記号に関連付けられているコンテンツを車両が取得する技術が知られている。例えば、特許文献１には、屋内施設内の路面に描かれ、位置情報を含むバーコード又はＱＲコード（登録商標）を車載カメラで撮像し、撮像されたバーコード又はＱＲコードに含まれる位置情報に基づいて、車両の位置を検出する車両位置検出装置が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特許第５０１５７４９号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

位置情報のような固定のコンテンツと関連付けられた固定の識別記号を用いるのではなく、商品内容等を含むコンテンツと関連付けられる識別記号を有効に活用して、サービス提供者が車両の乗員に対してコンテンツを提供したいという要求があった。このとき、サービス提供者は、車両の乗員に対して最適なコンテンツを提供したいと望む。

【0005】

かかる事情に鑑みてなされた本発明の目的は、識別記号を有効に活用した車両の乗員へのコンテンツ提供の最適化に寄与できる情報処理システム、プログラム、及び制御方法を提供することにある。

【課題を解決するための手段】

【0006】

本発明の一実施形態に係る情報処理システムは、
車両と、前記車両によって取得される情報を前記車両から取得する情報処理装置と、を備える情報処理システムであって、
前記車両は、
サービス提供者により提供されるコンテンツと関連付けられる識別記号を車外カメラにより撮像し、
撮像された前記識別記号に関連付けられた前記コンテンツを、前記車両の車室内の乗員に対して出力し、
出力された前記コンテンツに関連する前記乗員の操作情報を取得し、
前記車室内で前記乗員が前記コンテンツに関連する操作を行うときの乗員に関する情報を取得し、
前記情報処理装置は、
前記乗員の操作情報に基づいて、出力された前記コンテンツが前記乗員によって選択されなかったと判定すると、前記乗員に関する情報に基づいて、選択されなかった前記コンテンツを更新するか否かを決定する。

【0007】

本発明の一実施形態に係るプログラムは、
車両と、前記車両によって取得される情報を前記車両から取得する情報処理装置と、を備える情報処理システムにおいて動作するプログラムであって、
前記車両に、
サービス提供者により提供されるコンテンツと関連付けられる識別記号を車外カメラにより撮像するステップと、
撮像された前記識別記号に関連付けられた前記コンテンツを、前記車両の車室内の乗員に対して出力するステップと、
出力された前記コンテンツに関連する前記乗員の操作情報を取得するステップと、
前記車室内で前記乗員が前記コンテンツに関連する操作を行うときの乗員に関する情報を取得するステップと、
を実行させ、
前記情報処理装置に、
前記乗員の操作情報に基づいて、出力された前記コンテンツが前記乗員によって選択されなかったと判定すると、前記乗員に関する情報に基づいて、選択されなかった前記コンテンツを更新するか否かを決定するステップと、
を実行させる。

【0008】

本発明の一実施形態に係る制御方法は、
車両と、前記車両によって取得される情報を前記車両から取得する情報処理装置と、を備える情報処理システムにおける制御方法であって、
前記車両において、
サービス提供者により提供されるコンテンツと関連付けられる識別記号を車外カメラにより撮像するステップと、
撮像された前記識別記号に関連付けられた前記コンテンツを、前記車両の車室内の乗員に対して出力するステップと、
出力された前記コンテンツに関連する前記乗員の操作情報を取得するステップと、
前記車室内で前記乗員が前記コンテンツに関連する操作を行うときの乗員に関する情報を取得するステップと、
を含み、
前記情報処理装置において、
前記乗員の操作情報に基づいて、出力された前記コンテンツが前記乗員によって選択されなかったと判定すると、前記乗員に関する情報に基づいて、選択されなかった前記コンテンツを更新するか否かを決定するステップと、
を含む。

【発明の効果】

【0009】

本発明の一実施形態に係る情報処理システム、プログラム、及び制御方法によれば、識別記号を有効に活用した車両の乗員へのコンテンツ提供の最適化に寄与できる。

【図面の簡単な説明】

【0010】

【図1】本発明の一実施形態に係る情報処理システムの概略構成を示す図である。

【図2】本発明の一実施形態に係る車両の概略構成を示すブロック図である。

【図3】図１の第１情報処理装置の概略構成を示すブロック図である。

【図4】図３の第１情報処理装置の制御部によって処理される情報の第１例を示す図である。

【図5】図３の第１情報処理装置の制御部によって処理される情報の第２例を示す図である。

【図6】図１の第２情報処理装置の概略構成を示すブロック図である。

【図7】図１の情報処理システムの動作のフローの第１例を示すシーケンス図である。

【図8】図１の情報処理システムの動作のフローの第２例を示すシーケンス図である。

【図9】図１の第１情報処理装置の動作のフローの例を示すフローチャートである。

【図10】図１の情報処理システムの動作のフローの第３例を示すシーケンス図である。

【発明を実施するための形態】

【0011】

以下、添付図面を参照しながら本発明の一実施形態について説明する。

【0012】

図１は、本発明の一実施形態に係る情報処理システム１の概略構成を示す図である。図１を参照して、本発明の一実施形態に係る情報処理システム１の構成及び機能について主に説明する。

【0013】

情報処理システム１は、車両１０と、第１情報処理装置２０と、第２情報処理装置３０と、を有する。車両１０、第１情報処理装置２０、及び第２情報処理装置３０のそれぞれは、例えば移動体通信網及びインターネット等を含むネットワーク４０と通信可能に接続されている。

【0014】

車両１０は、例えば自動車であるが、これに限定されず、人間が搭乗可能な任意の車両であってもよい。車両１０は、運転者によって運転される車両であるが、これに限定されず、例えば、自動運転を行う車両であってもよい。自動運転は、例えば、ＳＡＥ（Society of Automotive Engineers）において定義されるレベル１乃至５を含むが、これらに限定されず、任意に定義されてもよい。図１では説明の簡便のため、車両１０について１台のみを図示しているが、情報処理システム１が有する車両１０の数は１台以上であればよい。

【0015】

第１情報処理装置２０は、例えば車両１０の乗員を含む顧客に対して任意のサービスを提供するサービス提供者が所有する、１つ又は互いに通信可能な複数のサーバ装置である。第１情報処理装置２０は、これに限定されず、ＰＣ（Personal Computer）又はスマートフォン等の任意の汎用の電子機器であってもよいし、情報処理システム１に専用の他の電子機器であってもよい。サービス提供者は、例えば店舗及び商業施設等を運営する。

【0016】

第２情報処理装置３０は、例えばクレジットカード会社等の決済サービスを提供する会社が所有する、１つ又は互いに通信可能な複数のサーバ装置である。第２情報処理装置３０は、これに限定されず、ＰＣ又はスマートフォン等の任意の汎用の電子機器であってもよいし、情報処理システム１に専用の他の電子機器であってもよい。図１では説明の簡便のため、第２情報処理装置３０を構成するサーバ装置を１つだけ例示的に図示している。

【0017】

図２は、本発明の一実施形態に係る車両１０の概略構成を示すブロック図である。

【0018】

車両１０は、制御部１１と、通信部１２と、記憶部１３と、撮像部１４と、入力部１５と、出力部１６と、乗員情報取得部１７と、を有する。車両１０を構成するこれらの構成部は、例えばＣＡＮ（Controller Area Network）等の車載ネットワーク又は専用線を介して、互いに通信可能に接続されている。

【0019】

一実施形態の概要として、車両１０の撮像部１４は、サービス提供者により提供されるコンテンツと関連付けられる識別記号を車外カメラにより撮像する。コンテンツは、例えば、サービス提供者が顧客に対して提供する商品内容、顧客が注文した商品に関連付けられた決済情報、店舗又は商業施設における混雑状況、商業施設内の施設情報、店舗又は商業施設の駐車場の空き状況、及び店舗又は商業施設で利用可能なクーポン情報等を含む。制御部１１は、撮像部１４が識別記号を撮像したか否かを判定してもよい。制御部１１は、例えば撮像部１４が識別記号を撮像したと判定すると、撮像された識別記号に関連付けられたコンテンツを取得する。制御部１１は、取得されたコンテンツを、車両１０の車室内の乗員に対して出力部１６により出力する。車両１０の乗員は、車両１０の運転者及び同乗者を含む。車両１０の乗員の数は、１人であってもよいし、複数であってもよい。

【0020】

車両１０の制御部１１は、出力部１６により出力されたコンテンツに関連する乗員の操作情報を入力部１５から取得する。制御部１１は、車両１０の車室内で乗員がコンテンツに関連する操作を行うときの乗員に関する情報を乗員情報取得部１７により取得する。第１情報処理装置２０は、乗員の操作情報及び乗員に関する情報を車両１０から取得する。第１情報処理装置２０は、乗員の操作情報に基づいて、出力部１６により出力されたコンテンツが乗員によって選択されなかったと判定すると、乗員に関する情報に基づいて、選択されなかったコンテンツを更新するか否かを決定する。

【0021】

次に、車両１０の各構成について、詳細に説明する。

【0022】

制御部１１は、１つ以上のプロセッサを有する。一実施形態において「プロセッサ」は、汎用のプロセッサ、又は特定の処理に特化した専用のプロセッサであるが、これらに限定されない。車両１０に搭載されたＥＣＵ（Electronic Control Unit）が、制御部１１として機能してもよい。制御部１１は、車両１０を構成する各構成部と例えば通信可能に接続され、車両１０全体の動作を制御する。一実施形態では、例えば、制御部１１は、撮像部１４、入力部１５、及び乗員情報取得部１７を制御して各種情報を取得する。

【0023】

通信部１２は、車載ネットワーク又は専用線を介して通信する通信モジュールを含む。通信部１２は、ネットワーク４０に接続する通信モジュールを含む。例えば、通信部１２は、４Ｇ（4th Generation）及び５Ｇ（5th Generation）等の移動体通信規格に対応する通信モジュールを含んでもよい。例えばＤＣＭ（Data Communication Module）等の車載通信機が通信部１２として機能してもよい。一実施形態において、車両１０は、通信部１２を介してネットワーク４０に接続されている。

【0024】

記憶部１３は、１つ以上のメモリを含む。一実施形態において「メモリ」は、例えば半導体メモリ、磁気メモリ、又は光メモリ等であるが、これらに限定されない。記憶部１３に含まれる各メモリは、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部１３は、車両１０の動作に用いられる任意の情報を記憶する。例えば、記憶部１３は、システムプログラム、アプリケーションプログラム、及び車両１０によって取得された各種情報等を記憶してもよい。記憶部１３に記憶された情報は、例えば通信部１２を介してネットワーク４０から取得される情報で更新可能であってもよい。

【0025】

撮像部１４は、車両１０の外部を撮像する車外カメラを含む。撮像部１４は、サービス提供者側で随時更新されるコンテンツと関連付けられコンテンツごとに変化する識別記号を撮像する。識別記号は、ＱＲコードを含む。これに限定されず、識別記号は、バーコード等の任意の記号を含んでもよい。撮像部１４は、例えば車両１０の外部を常時撮像しながらこのような識別記号を撮像してもよいし、入力部１５を用いた車両１０の乗員の操作に基づいて、このような識別記号を撮像してもよい。

【0026】

撮像部１４又は制御部１１は、任意の画像認識技術を用いて、車外カメラによって撮像された画像から識別記号を認識してもよい。

【0027】

入力部１５は、車両１０の乗員による入力操作を受け付ける。一実施形態では、入力部１５は、例えばカーナビゲーション装置が有する入力インタフェースを含む。入力部１５は、車両１０の乗員による入力操作を受け付ける。例えば、入力部１５は、出力部１６によって出力されたコンテンツに関連する車両１０の乗員の操作情報を取得する。例えば、サービス提供者が顧客に対して提供する商品内容をコンテンツが含む場合、乗員の操作情報は、出力部１６によって出力された商品内容から車両１０の乗員が所定の商品を選択するときの入力情報を含む。入力部１５は、取得した車両１０の乗員による入力情報を制御部１１に出力する。

【0028】

出力部１６は、撮像部１４によって取得された情報を、車両１０の車室内で乗員に対して出力する。一実施形態では、出力部１６は、カーナビゲーション装置を含む。例えば、出力部１６は、カーナビゲーション装置を構成する液晶モニタ等の出力デバイスを含む。出力部１６を構成するカーナビゲーション装置は、例えば、コンテンツを画像及び音声の少なくとも一方により出力する。

【0029】

出力部１６は、これに限定されず、車両１０の乗員の視覚及び聴覚の少なくとも一方に影響を及ぼす任意の出力デバイスを含んでもよい。出力部１６は、例えば、車両１０の乗員の聴覚に主に影響を及ぼす、カーナビゲーション装置以外の他の任意の音声出力デバイスを含んでもよい。出力部１６は、例えば、車両１０の乗員の視覚に主に影響を及ぼす、カーナビゲーション装置以外の他の任意の画像出力デバイスを含んでもよい。

【0030】

乗員情報取得部１７は、車両１０の車室内で乗員に関する情報及び乗員の属性を取得する。一実施形態では、乗員情報取得部１７は、車両１０の車室内を撮像する車室内カメラを含む。乗員情報取得部１７は、例えば、車室内カメラによって撮像された画像から乗員に関する情報及び乗員の属性を取得する。このとき、乗員に関する情報は、車両１０の乗員の表情、顔向き、視線、瞬き状態、仕草、言動、所持品、並びに運転（乗車）継続時間の少なくとも１つを含む。乗員の属性は、車両１０の乗員の年齢、性別、国籍、人種、人数、及び顔の少なくとも１つを含む。乗員情報取得部１７は、乗員に関する情報及び乗員の属性を常時取得してもよいし、適宜なタイミングで取得してもよい。

【0031】

乗員情報取得部１７は、例えば顔認識技術を用いて、車室内カメラによって撮像された画像から、乗員の顔、表情、顔向き、視線、及び瞬き状態等の情報を取得してもよい。その他にも、乗員情報取得部１７は、任意の画像認識技術を用いて、車室内カメラによって撮像された画像から乗員に関する情報及び乗員の属性を取得してもよい。

【0032】

乗員情報取得部１７の構成は、上記の内容に限定されない。乗員情報取得部１７は、車室内カメラとは異なる、任意の他の画像センサを含んでもよい。乗員情報取得部１７は、ＣＡＮに接続されている任意の他のセンサを含んでもよい。

【0033】

例えば、乗員情報取得部１７は、車両１０の車室内に設置され、ＣＡＮに接続されている任意の音センサを含んでもよい。乗員情報取得部１７は、例えば、音センサによって出力された出力情報から乗員に関する情報を取得してもよい。このとき、乗員に関する情報は、例えば乗員の会話内容、その他の音声言語を表出する乗員の行動により生じた音声、及びその他の音を表出する乗員の行動により生じた音等を含む乗員に起因する音情報を含んでもよい。

【0034】

乗員情報取得部１７は、例えば音声認識技術及び他の任意の認識技術を用いて、音センサによって出力された出力情報から乗員に関する情報を取得してもよい。

【0035】

例えば、乗員情報取得部１７は、車両１０の車室内に設置され、ＣＡＮに接続されている任意の生体センサを含んでもよい。乗員情報取得部１７は、例えば、生体センサによって出力された出力情報から乗員に関する情報を取得してもよい。このとき、乗員に関する情報は、例えば脳波、脳血流、血圧、血糖値、血中アミノ酸、心拍、脈拍、体温、体感温度、空腹感、及び疲れ等を含む乗員の生体状態を含んでもよい。

【0036】

図３は、図１の第１情報処理装置２０の概略構成を示すブロック図である。図３に示すように、第１情報処理装置２０は、制御部２１と、通信部２２と、記憶部２３と、表示部２４と、を有する。

【0037】

制御部２１は、１つ以上のプロセッサを有する。制御部２１は、第１情報処理装置２０を構成する各構成部と接続され、第１情報処理装置２０全体の動作を制御する。例えば、制御部２１は、通信部２２を制御して、ネットワーク４０を介して車両１０の乗員情報取得部１７から乗員に関する情報及び乗員の属性を取得する。例えば、制御部２１は、記憶部２３を制御して、第１情報処理装置２０の動作に必要な情報を記憶部２３に格納する。

【0038】

通信部２２は、ネットワーク４０に接続する通信モジュールを含む。例えば、通信部２２は、有線ＬＡＮ（Local Area Network）規格に対応する通信モジュールを含んでもよい。一実施形態において、第１情報処理装置２０は、通信部２２を介してネットワーク４０に接続されている。

【0039】

記憶部２３は、１つ以上のメモリを含む。記憶部２３に含まれる各メモリは、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部２３は、第１情報処理装置２０の動作に用いられる任意の情報を記憶する。記憶部２３に記憶された情報は、例えば通信部２２を介してネットワーク４０から取得される情報で更新可能であってもよい。例えば、記憶部２３は、システムプログラム及びアプリケーションプログラムを記憶してもよい。

【0040】

例えば、記憶部２３は、車両１０の乗員情報取得部１７により取得された乗員に関する情報及び乗員の属性を記憶してもよい。例えば、記憶部２３は、第１情報処理装置２０を所有するサービス提供者が顧客への提供を所望するコンテンツ、及び車両１０の乗員の属性に対応したコンテンツと関連付けられる識別記号に関する情報を記憶してもよい。その他にも、記憶部２３は、例えばサービス提供者によって提供されたサービスに対する顧客の購買データを顧客ごとにビッグデータとして記憶していてもよい。このような購買データは、例えば、複数の車両１０に搭載された車両１０の乗員情報取得部１７により過去に取得された複数の乗員の属性ごとに、そのときの顧客の購買内容を関連付けて、制御部２１により構築されてもよい。

【0041】

表示部２４は、車両１０の撮像部１４が撮像する識別記号を表示する任意の表示デバイスを含む。例えば、表示部２４は、液晶モニタを含む。表示部２４は、例えば、サービス提供者が運営する店舗及び商業施設等における任意の箇所に設置されてもよい。表示部２４は、例えば、第１情報処理装置２０を所有するサービス提供者の店舗におけるドライブスルーの入り口付近及び店舗における公道に面した箇所等に設置されてもよい。表示部２４は、例えば、第１情報処理装置２０を所有するサービス提供者の商業施設の駐車場の入り口付近等に設置されてもよい。

【0042】

制御部２１は、車両１０の乗員情報取得部１７により取得された乗員の属性に対応したコンテンツと関連付けて識別記号を生成してもよい。制御部２１は、車両１０の乗員情報取得部１７により取得された乗員の属性に基づいて、記憶部２３により記憶されたコンテンツのうち当該乗員の属性に対応したコンテンツを、例えば機械学習により選択してもよい。制御部２１は、このような選択処理を実行するために任意の学習処理の構成を有してもよい。制御部２１は、機械学習による最適なコンテンツの選択にあたり、例えば、記憶部２３にビッグデータとして記憶されている顧客の購買データを参照してもよい。制御部２１は、選択されたコンテンツと関連付けられた識別記号を表示部２４に表示する。

【0043】

図４は、図３の第１情報処理装置２０の制御部２１によって処理される情報の第１例を示す図である。図４を参照しながら、第１情報処理装置２０の制御部２１によって選択されるコンテンツについてより具体的に説明する。

【0044】

例えば、制御部２１は、車両１０の乗員情報取得部１７により取得された乗員の属性として、車両１０の乗員の人数が３人であり、性別がそれぞれ男性、女性、及び男の子であり、年齢がそれぞれ４０歳、３５歳、及び０歳であることを車両１０より取得する。このとき、制御部２１は、当該乗員の属性に対応させて、記憶部２３が記憶するコンテンツのうち、商業施設内の施設情報としてベビー用品店に関する情報を、及びクーポン情報としてベビー用品の割引クーポンに関する情報を選択する。制御部２１は、当該乗員の属性に対応したこれらのコンテンツと関連付けて識別記号Ｓ１を生成し、表示部２４に表示する。

【0045】

例えば、制御部２１は、車両１０の乗員情報取得部１７により取得された乗員の属性として、車両１０の乗員の顔を車両１０より取得する。このとき、制御部２１は、記憶部２３が記憶する顧客の購買データも参照して、乗員の属性に基づき車両１０の乗員の来店回数及び過去の購買内容等を取得する。制御部２１は、記憶部２３が記憶するコンテンツのうち、サービス提供者が顧客に対して提供する商品内容として、車両１０の乗員が直近で注文した商品に関する情報を、当該乗員の属性に対応させて選択する。制御部２１は、当該乗員の属性に対応したこのようなコンテンツと関連付けて識別記号Ｓ２を生成し、表示部２４に表示する。

【0046】

車両１０の撮像部１４は、サービス提供者により提供されるコンテンツと関連付けられる上記のような識別記号を車外カメラにより撮像する。車両１０の出力部１６は、撮像部１４により撮像された識別記号に関連付けられたコンテンツを、車両１０の車室内の乗員に対して出力する。車両１０の入力部１５は、出力部１６によって出力されたコンテンツに関連する車両１０の乗員の操作情報を取得する。同様に、車両１０の乗員情報取得部１７は、車両１０の車室内で乗員がコンテンツに関連する操作を行うときの乗員に関する情報を取得する。その後、車両１０の通信部１２は、入力部１５によって取得された乗員の操作情報と、乗員情報取得部１７によって取得された乗員に関する情報と、をネットワーク４０を介して第１情報処理装置２０に送信する。

【0047】

第１情報処理装置２０の制御部２１は、車両１０から取得した乗員の操作情報に基づいて、車両１０の出力部１６により出力されたコンテンツが車両１０の乗員によって選択されたか否かを判定する。例えば、出力部１６に表示されたコンテンツ画面においてホーム画面に戻すような操作を車両１０の乗員が行い、出力されたコンテンツが車両１０の乗員によって選択されなかったと制御部２１が判定すると、車両１０から取得した乗員に関する情報に基づいて、選択されなかったコンテンツを更新するか否かを決定する。

【0048】

例えば、制御部２１は、車両１０から取得した乗員に関する情報に基づいて、選択されなかったコンテンツに対する乗員の好感度を、機械学習により算出してもよい。制御部２１は、このような算出処理を実行するために任意の学習処理の構成を有してもよい。乗員の好感度は、任意の指標に基づいて算出されてもよい。例えば、乗員の好感度は、０から１００までの数値により表されてもよい。このように、乗員の好感度は、任意の数値範囲内の数値によって表わされてもよい。このとき、乗員の好感度の値が大きいほど、車両１０の乗員がコンテンツに対して好印象を抱いていることを示す。逆に、乗員の好感度の値が小さいほど、車両１０の乗員がコンテンツに対して悪印象を抱いていることを示す。乗員の好感度は、乗員ごとに算出されてもよいし、乗員が複数いる場合、各乗員の好感度の平均として算出されてもよい。

【0049】

制御部２１は、乗員の好感度が閾値よりも小さいと、選択されなかったコンテンツを乗員の属性に適合するように更新してもよい。このとき、制御部２１は、車両１０の乗員情報取得部１７により取得された乗員の属性に基づいて、記憶部２３により記憶されたコンテンツのうち当該乗員の属性に適合したコンテンツを、上記と同様に例えば機械学習により選択してもよい。

【0050】

制御部２１は、例えば、更新されたコンテンツと関連付けられる識別記号を続けて表示部２４に表示して、同一の車両１０の乗員に対してリアルタイムに更新されたコンテンツを提供してもよい。これに限定されず、制御部２１は、更新されたコンテンツと関連付けられる識別記号に関する情報を記憶部２３に格納して、後日同一又は類似の乗員の属性を有する車両１０の乗員に対して、更新されたコンテンツを提供してもよい。

【0051】

図５は、図３の第１情報処理装置２０の制御部２１によって処理される情報の第２例を示す図である。図５を参照しながら、第１情報処理装置２０の制御部２１によって更新の要否が決定されるコンテンツについてより具体的に説明する。

【0052】

例えば、制御部２１は、車両１０の乗員情報取得部１７により取得された乗員に関する情報として、笑顔の乗員の表情を取得する。このとき、制御部２１は、このような乗員の表情に基づいて乗員の好感度を１００と算出する。例えば、乗員の好感度の閾値が５０であるとすると乗員の好感度は閾値よりも大きいので、制御部２１は、識別記号Ｓ１に関連付けるコンテンツを更新しない。すなわち、識別記号Ｓ１に関連付けられているコンテンツは車両１０の乗員によって選択されなかったが、車両１０の乗員が好印象を抱くものであるので、制御部２１は、識別記号Ｓ１に関連付けられているコンテンツを維持する。

【0053】

例えば、制御部２１は、車両１０の乗員情報取得部１７により取得された乗員に関する情報として、乗員の悩む仕草を取得する。このとき、制御部２１は、このような乗員の仕草に基づいて乗員の好感度を１０と算出する。例えば、乗員の好感度の閾値が５０であるとすると乗員の好感度は閾値よりも小さいので、制御部２１は、識別記号Ｓ２に関連付けるコンテンツを乗員の属性に適合するように更新する。例えば、制御部２１は、識別記号Ｓ２に関連付けられているコンテンツを、車両１０の乗員が直近で注文した商品に関する情報から、車両１０の乗員が過去に最も多く注文した商品に関する情報へと更新する。このとき、制御部２１は、記憶部２３が記憶する顧客の購買データも参照して、乗員の属性に基づき車両１０の乗員の来店回数及び過去の購買内容等を取得する。

【0054】

図６は、図１の第２情報処理装置３０の概略構成を示すブロック図である。図６に示すように、第２情報処理装置３０は、制御部３１と、通信部３２と、記憶部３３と、を有する。

【0055】

制御部３１は、１つ以上のプロセッサを有する。制御部３１は、第２情報処理装置３０を構成する各構成部と接続され、第２情報処理装置３０全体の動作を制御する。例えば、制御部３１は、通信部３２を制御して、ネットワーク４０を介して車両１０から後述する決済情報を取得する。例えば、制御部３１は、記憶部３３を制御して、第２情報処理装置３０の動作に必要な情報を記憶部３３に格納する。

【0056】

通信部３２は、ネットワーク４０に接続する通信モジュールを含む。例えば、通信部３２は、有線ＬＡＮ（Local Area Network）規格に対応する通信モジュールを含んでもよい。一実施形態において、第２情報処理装置３０は、通信部３２を介してネットワーク４０に接続されている。

【0057】

記憶部３３は、１つ以上のメモリを含む。記憶部３３に含まれる各メモリは、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部３３は、第２情報処理装置３０の動作に用いられる任意の情報を記憶する。記憶部３３に記憶された情報は、例えば通信部３２を介してネットワーク４０から取得される情報で更新可能であってもよい。例えば、記憶部３３は、システムプログラム、アプリケーションプログラム、及び車両１０の乗員の決済手段に関する情報を当該乗員ごとに記憶してもよい。

【0058】

例えば、サービス提供者が顧客に対して提供する商品内容をコンテンツが含む場合、車両１０の制御部１１は、出力部１６により出力された商品内容の中から所定の商品を車両１０の乗員が選択するときの入力情報を入力部１５から取得する。このとき、制御部１１は、車両１０の乗員の決済手段に関する情報が登録された外部の第２情報処理装置３０に対して、選択された商品に関連付けられた決済情報を通信部１２により送信する。加えて、制御部１１は、外部の第２情報処理装置３０に対して、車両１０の乗員の識別情報を通信部１２により送信する。

【0059】

第２情報処理装置３０の制御部３１は、車両１０から取得した車両１０の乗員の識別情報と、記憶部３３に記憶されている決済手段に関する情報と、を照合して、選択された商品に関連付けられた決済情報に対して決済処理を実行する。制御部３１は、例えば決済処理の結果を、ネットワーク４０を介して車両１０及び第１情報処理装置２０に送信する。以上により、第２情報処理装置３０を介した決済処理が完了する。

【0060】

図７は、図１の情報処理システム１の動作のフローの第１例を示すシーケンス図である。図７は、車両１０と第１情報処理装置２０との間で実行される、車両１０の乗員に対してコンテンツを提供するまでのフローの一例を示す。図７を参照して、情報処理システム１の動作フローの一例について説明する。

【0061】

ステップＳ１００：車両１０の制御部１１は、乗員情報取得部１７により、車両１０の車室内で乗員の属性を取得する。

【0062】

ステップＳ１０１：車両１０の制御部１１は、ステップＳ１００において取得された乗員の属性を通信部１２により第１情報処理装置２０に送信する。

【0063】

ステップＳ１０２：第１情報処理装置２０の制御部２１は、ステップＳ１０１において車両１０から取得した乗員の属性に基づいて、当該乗員の属性に対応したコンテンツと関連付けて識別記号を生成する。このとき、制御部２１は、必要に応じて、記憶部２３にビッグデータとして記憶されている顧客の購買データを参照してもよい。

【0064】

ステップＳ１０３：第１情報処理装置２０の制御部２１は、ステップＳ１０２において生成された識別記号を表示部２４に表示する。

【0065】

ステップＳ１０４：車両１０の制御部１１は、ステップＳ１０３において第１情報処理装置２０の表示部２４に表示された識別記号を、撮像部１４により撮像する。

【0066】

ステップＳ１０５：車両１０の制御部１１は、ステップＳ１０４において撮像部１４により撮像された識別記号に関連付けられたコンテンツを取得する。

【0067】

ステップＳ１０６：車両１０の制御部１１は、ステップＳ１０５において取得されたコンテンツを、車両１０の車室内の乗員に対して出力部１６により出力する。

【0068】

図８は、図１の情報処理システム１の動作のフローの第２例を示すシーケンス図である。図８は、車両１０と第１情報処理装置２０との間で実行される、車両１０の乗員に対してコンテンツが提供された後のフローの一例を示す。図８を参照して、情報処理システム１の動作フローの一例について説明する。

【0069】

ステップＳ２００：車両１０の制御部１１は、出力部１６により出力されたコンテンツに関連する車両１０の乗員の操作情報を入力部１５から取得する。同様に、車両１０の制御部１１は、車両１０の車室内で乗員がコンテンツに関連する操作を行うときの乗員に関する情報を乗員情報取得部１７により取得する。

【0070】

ステップＳ２０１：車両１０の制御部１１は、ステップＳ２００において取得された乗員の操作情報及び乗員に関する情報を通信部１２により第１情報処理装置２０に送信する。

【0071】

ステップＳ２０２：第１情報処理装置２０の制御部２１は、ステップＳ２０１において車両１０から取得した乗員の操作情報に基づいて、出力部１６により出力されたコンテンツが車両１０の乗員によって選択されたか否かを判定する。

【0072】

ステップＳ２０３：第１情報処理装置２０の制御部２１は、出力部１６により出力されたコンテンツが車両１０の乗員によって選択されなかったと判定する。

【0073】

ステップＳ２０４：第１情報処理装置２０の制御部２１は、ステップＳ２０１において車両１０から取得した乗員に関する情報に基づいて、選択されなかったコンテンツを更新するか否かを決定する。

【0074】

図９は、図１の第１情報処理装置２０の動作のフローの例を示すフローチャートである。図９に示すフローは、図８のステップＳ２０４を具体化したものである。図９を参照して、第１情報処理装置２０の動作フローの一例について説明する。

【0075】

ステップＳ３００：第１情報処理装置２０の制御部２１は、車両１０から取得した乗員に関する情報に基づいて、選択されなかったコンテンツに対する乗員の好感度を算出する。

【0076】

ステップＳ３０１：第１情報処理装置２０の制御部２１は、算出された乗員の好感度が閾値よりも小さいか否かを判定する。制御部２１は、算出された乗員の好感度が閾値よりも小さいと判定すると、ステップＳ３０２の処理を実行する。制御部２１は、算出された乗員の好感度が閾値以上であると判定すると、ステップＳ３０３の処理を実行する。

【0077】

ステップＳ３０２：第１情報処理装置２０の制御部２１は、算出された乗員の好感度が閾値よりも小さいと判定すると、車両１０の乗員によって選択されなかったコンテンツを乗員の属性に適合するように更新する。

【0078】

ステップＳ３０３：第１情報処理装置２０の制御部２１は、算出された乗員の好感度が閾値以上であると判定すると、車両１０の乗員によって選択されなかったコンテンツを維持する。

【0079】

図１０は、図１の情報処理システム１の動作のフローの第３例を示すシーケンス図である。図１０は、主に車両１０と第２情報処理装置３０との間で実行されるフローの一例を示す。より具体的には、図１０は、提供されたコンテンツに対して車両１０の乗員が選択操作を行ってから決済処理が完了するまでのフローの一例を示す。図１０を参照して、情報処理システム１の動作フローの一例について説明する。

【0080】

ステップＳ４００：車両１０の制御部１１は、例えば、出力部１６により出力された商品内容の中から所定の商品を車両１０の乗員が選択するときの入力情報を入力部１５から取得する。

【0081】

ステップＳ４０１：車両１０の制御部１１は、ステップＳ４００において選択された商品に関連付けられた決済情報を通信部１２により第２情報処理装置３０に送信する。加えて、制御部１１は、車両１０の乗員の識別情報を通信部１２により第２情報処理装置３０に送信する。

【0082】

ステップＳ４０２：第２情報処理装置３０の制御部３１は、ステップＳ４０１において車両１０から取得した車両１０の乗員の識別情報と、記憶部３３に記憶されている決済手段に関する情報と、を照合する。

【0083】

ステップＳ４０３：第２情報処理装置３０の制御部３１は、ステップＳ４０１において車両１０から取得した決済情報に対して決済処理を実行する。

【0084】

ステップＳ４０４：第２情報処理装置３０の制御部３１は、ステップＳ４０３における決済処理の結果を、ネットワーク４０を介して車両１０及び第１情報処理装置２０に送信する。

【0085】

以上述べたように、一実施形態に係る車両１０によれば、識別記号を有効に活用した車両１０の乗員へのコンテンツ提供に寄与できる。より具体的には、撮像部１４が撮像する識別記号が、サービス提供者側で随時更新されるコンテンツと関連付けられコンテンツごとに変化することで、サービス提供者が車両１０の乗員に対してその都度提供したいと所望するコンテンツを適切に提供可能である。例えば、サービス提供者が顧客に対して提供する商品内容をコンテンツが含む場合、サービス提供者は、商品の入れ替え及び変更等に応じて現行化された最新の商品内容を車両１０の乗員に適切に提供可能である。このように、車両１０の乗員は、上述した様々なコンテンツを、最新の状態で確認することができる。

【0086】

例えば、サービス提供者が所定期間提供したいと所望するコンテンツと関連付けられた識別記号を、第１情報処理装置２０の表示部２４が対応する期間中常時表示することで、第１情報処理装置２０は、車両１０を個別に認識するような処理を実行する必要がない。仮に、表示部２４に識別記号が表示されないと、サービス提供者が車両１０の乗員にコンテンツを提供するためには、何かしらの方法で、店舗及び商業施設等に車両１０が到着したことを第１情報処理装置２０が検知する必要がある。一実施形態に係る情報処理システム１では、表示部２４に識別記号を常時表示させて、店舗及び商業施設等に到着した車両１０の車両１０がコンテンツを自動的に取得することで、このような第１情報処理装置２０による車両１０の個別認識に関する処理が不要となる。

【0087】

加えて、車両１０の乗員は、車両１０から降りることなく車室内にとどまった状態で様々なコンテンツを容易に確認することができる。例えば、車両１０が店舗における公道に面した箇所で表示された識別記号に基づいてコンテンツを取得するような場合、車両１０の乗員は、店舗にわざわざ入らなくても、店舗の前を通過するだけで、当該店舗に関連するコンテンツを容易に入手可能である。例えば、車両１０が店舗におけるドライブスルーの入り口付近で表示された識別記号に基づいてコンテンツを取得するような場合、車両１０の乗員は、ドライブスルー内に設置された看板を遠目に見るようなことをする必要もなく、出力部１６によりコンテンツを容易に確認することができる。

【0088】

例えば、顧客が注文した商品に関連付けられた決済情報をコンテンツが含む場合、車両１０の乗員は、出力部１６により出力された決済情報を車両１０の車室内で確認して、入力部１５を操作しながら車両１０の車室内で決済処理を完了させることも可能となる。このとき、例えば、図１０を用いて説明した動作フローと同様のフローに基づいて、決済処理が実行されてもよい。以上により、車両１０の乗員は、決済処理を完了させるにあたって、車両１０の車室内で入力部１５を操作するだけでよく、例えばドライブスルー等で財布を出して店舗の窓口に立っている従業員にお金を支払う等の手間を省くことができる。したがって、ドライブスルー等での注文及び決済の流れが円滑化する。

【0089】

一実施形態に係る情報処理システム１によれば、識別記号を有効に活用した車両１０の乗員へのコンテンツ提供の最適化に寄与できる。より具体的には、第１情報処理装置２０の制御部２１は、乗員に関する情報に基づいて、選択されなかったコンテンツを更新するか否かを決定することで、車両１０の乗員がコンテンツに関連する操作を行うときの乗員の反応に合わせて、提供するコンテンツを適切に変更できる。すなわち、コンテンツに対する乗員の反応が良好でないときは、制御部２１は、選択されなかった当該コンテンツを更新して他のコンテンツを車両１０の乗員に提供することができる。一方で、コンテンツに対する乗員の反応が良好であるときは、車両１０の乗員が例えコンテンツを選択しなかったとしても積極的に当該コンテンツを変更する理由がないので、制御部２１はこのような状況に適切に対応して、当該コンテンツを維持することができる。

【0090】

乗員に関する情報に基づいて、選択されなかったコンテンツに対する乗員の好感度を制御部２１が算出することで、情報処理システム１は、選択されなかったコンテンツを更新するか否かの決定を、より客観的な情報に基づいて実行可能である。これにより、情報処理システム１は、コンテンツの更新の決定をより精度良く実行することができる。加えて、選択されなかったコンテンツを乗員の属性に適合するように更新することで、情報処理システム１は、乗員の属性に応じた最適なコンテンツを車両１０の乗員に対して提供できる。サービス提供者は、提供したコンテンツが選択されなかった理由を仮に把握できなかったとしても、情報処理システム１による機械学習に基づいて車両１０の乗員に適切なコンテンツを提供可能である。

【0091】

車両１０は、車室内カメラによって撮像された画像から乗員に関する情報及び乗員の属性を取得することで、乗員に関する情報及び乗員の属性を視覚情報として取得することができる。これにより、第１情報処理装置２０は、視覚情報に基づいて正確に乗員の好感度を算出することができる。第１情報処理装置２０は、乗員の属性に適合したコンテンツを、視覚情報に基づいて正確に選択することができる。

【0092】

車両１０は、乗員に関する情報を取得可能な任意のセンサによって出力された出力情報から車両１０の乗員に関する情報を取得することで、視覚情報によっては取得できない種々の乗員に関する情報を取得することができる。例えば、車両１０は、視覚情報によっては取得できない乗員に起因する音情報を、音センサによって出力された出力情報から取得することができる。例えば、車両１０は、視覚情報によっては取得できない微妙な感情の変化を乗員の生体状態として、生体センサによって出力された出力情報から取得することができる。

【0093】

乗員が商品を選択するときの入力情報に基づいて、車両１０が第２情報処理装置３０に対して決済情報を送信することで、車両１０の乗員は、入力部１５を操作しながら車両１０の車室内で決済処理を完了させることも可能となる。これにより、注文及び決済の流れが円滑化し、車両１０の乗員の利便性が向上する。

【0094】

本発明を諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び修正を行うことが容易であることに注意されたい。したがって、これらの変形及び修正は本発明の範囲に含まれることに留意されたい。例えば、各手段又は各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段又はステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。

【0095】

例えば、上述した実施形態において、車両１０の各構成部は、車両１０に搭載されるとして説明した。しかしながら、車両１０の各構成部が実行する一部又は全部の処理動作を、例えばスマートフォン又はコンピュータ等の任意の電子機器が実行する構成も可能である。

【0096】

例えば、スマートフォン及びコンピュータ等の汎用の電子機器を、上述した実施形態に係る車両１０の各構成部、第１情報処理装置２０、及び第２情報処理装置３０の少なくとも１つとして機能させる構成も可能である。例えば、実施形態に係る通信部１２等の各機能を実現する処理内容を記述したプログラムを、電子機器のメモリに格納し、電子機器のプロセッサによって当該プログラムを読み出して実行させる。したがって、一実施形態に係る発明は、プロセッサが実行可能なプログラムとしても実現可能である。

【0097】

上述した実施形態において、車両１０と第１情報処理装置２０とは、ネットワーク４０を介して通信接続されているとして説明した。しかしながら、車両１０と第１情報処理装置２０とは、ネットワーク４０を介さずに、任意の通信方式を用いて直接的に通信接続されてもよい。

【0098】

上述した実施形態において、乗員の好感度は、任意の数値範囲内の数値によって表わされるとして説明した。乗員の好感度は、これに限定されず、例えば「低」、「中」、及び「高」の３つのレベルのいずれかで表わされてもよい。

【0099】

上述した実施形態において、制御部２１は、乗員の好感度に基づいて、選択されなかったコンテンツを更新するか否かを決定するとして説明した。しかしながら、これに限定されず、制御部２１は、乗員の好感度を算出せずに、所定の乗員に関する情報が得られたときに、選択されなかったコンテンツを更新してもよい。所定の乗員に関する情報は、例えば、選択されなかったコンテンツに対して首をかしげる等の所定の仕草、乗員が発声した「希望の商品ではない」等の所定の会話内容、及び特定の脳波パターン等の所定の生体状態を含んでもよい。

【0100】

上述した実施形態において、情報処理システム１は、乗員に関する情報に基づいて乗員の好感度を算出するとして説明した。しかしながら、乗員に関する情報に基づいて算出される情報は、選択されなかったコンテンツに対する乗員の好感度に限定されない。乗員に関する情報に基づいて算出される情報は、選択されなかったコンテンツに対する乗員の好感度、感動度、及び興奮度等を含む、乗員の反応に対応付けられる任意の指標であってもよい。

【符号の説明】

【0101】

１ 情報処理システム
１０ 車両
１１ 制御部
１２ 通信部
１３ 記憶部
１４ 撮像部
１５ 入力部
１６ 出力部
１７ 乗員情報取得部
２０ 第１情報処理装置
２１ 制御部
２２ 通信部
２３ 記憶部
２４ 表示部
３０ 第２情報処理装置
３１ 制御部
３２ 通信部
３３ 記憶部
４０ ネットワーク
Ｓ１、Ｓ２ 識別記号

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】