特開 2024-66557 情報提供制御装置、提供装置、情報提供制御方法、及び、情報提供制御プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024066557

(43)【公開日】2024-05-16

(54)【発明の名称】情報提供制御装置、提供装置、情報提供制御方法、及び、情報提供制御プログラム

(51)【国際特許分類】

   G06Q 30/0241 20230101AFI20240509BHJP

   G06Q 50/10 20120101ALI20240509BHJP

   G06T 7/00 20170101ALI20240509BHJP

   G06F 3/01 20060101ALI20240509BHJP

【ＦＩ】

G06Q30/02 380

G06Q50/10

G06T7/00 660A

G06F3/01 510

【審査請求】未請求

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2022175960

(22)【出願日】2022-11-02

(71)【出願人】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100109313

【弁理士】

【氏名又は名称】机 昌彦

(74)【代理人】

【識別番号】100149618

【弁理士】

【氏名又は名称】北嶋 啓至

(72)【発明者】

【氏名】江川 千聖

【テーマコード（参考）】

5E555

5L030

5L049

5L050

5L096

【Ｆターム（参考）】

5E555AA17

5E555AA59

5E555BA23

5E555BB23

5E555BC17

5E555BD01

5E555CA42

5E555CB65

5E555DA03

5E555DB41

5E555DB53

5E555EA05

5E555EA22

5E555FA00

5L030BB08

5L049BB08

5L049CC11

5L050CC11

5L096BA04

5L096FA67

5L096FA69

5L096GA51

5L096HA07

(57)【要約】

【課題】移動体の中の人物が移動体から見える対象物に興味を示した場合に、当該人物に対して当該対象物に関する情報を適切かつ迅速に提供する。
【解決手段】情報提供制御装置４０は、移動体の中の人物の人物画像４１１、その人物の座席の位置情報４１２、当該移動体の外の対象物の位置情報４１３、人物画像４１１の撮像方向４１４を受け付ける受付部４１と、人物画像４１１に含まれる、撮像方向４１４に対する当該人物の視線の相対方向４２０を検出する検出部４２と、撮像方向４１４と視線の相対方向４２０とに基づく視線の方向４３０を算出する算出部４３と、座席の位置情報４１２と対象物の位置情報４１３とによって示される人物から視認される対象物の方向と、視線の方向４３０とから、視線の先に存在する特定の対象物を特定する特定部４４と、提供装置５０に、特定の対象物に関する情報４５０を出力する出力部４５と、を備える。
【選択図】 図７

【特許請求の範囲】

【請求項1】

移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付ける受付手段と、
前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出する検出手段と、
前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出する算出手段と、
前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定する特定手段と、
前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する出力手段と、
を備える情報提供制御装置。

【請求項2】

前記検出手段は、前記視線の前記相対方向を追跡し、
前記出力手段は、前記視線の方向から特定される前記特定の対象物が所定の時間以上同一である場合に、前記特定の対象物に関する情報を出力する、
請求項１に記載の情報提供制御装置。

【請求項3】

前記受付手段は、前記人物に関する属性情報を、前記座席の位置情報と関連付けて取得し、
前記出力手段は、前記属性情報に関連する、前記特定の対象物に関する情報を前記提供装置に出力する、
請求項１または請求項２に記載の情報提供制御装置。

【請求項4】

前記属性情報は、前記人物の国籍及び年齢の少なくともいずれかを表し、
前記出力手段は、前記人物の国籍に応じて前記特定の対象物に関する情報を表す言語を変更し、前記人物の年齢が児童あるいは生徒に該当する場合、前記特定の対象物に関して学習するための情報を前記提供装置に出力する、
請求項３に記載の情報提供制御装置。

【請求項5】

前記受付手段は、前記人物により入力装置を介して入力された情報を受け付け、
前記出力手段は、前記特定の対象物に関する複数の情報のうちの少なくともいずれかを選択することを前記人物に促す情報を前記提供装置に出力したのち、前記受付手段によって受け付けられた、前記人物によって入力された情報が示す、前記特定の対象物に関して選択された情報を前記提供装置に出力する、
請求項１または請求項２に記載の情報提供制御装置。

【請求項6】

前記出力手段は、前記特定の対象物に関する情報が記憶された外部装置のアドレスを表す情報を、前記提供装置に出力する、
請求項１または請求項２に記載の情報提供制御装置。

【請求項7】

前記人物画像と事前に登録された前記人物の顔画像とを用いて、前記人物に関する顔認証を行う認証手段をさらに備え、
前記受付手段は、前記認証手段による顔認証が成功した場合、前記人物と関連付けられている前記属性情報を、前記座席の位置情報と関連付けて受け付ける、
請求項３に記載の情報提供制御装置。

【請求項8】

請求項１または請求項２に記載の情報提供制御装置から前記特定の対象物に関する情報を出力される前記提供装置であって、
前記視線が通過する前記移動体の窓に、前記特定の対象物に関する情報を投影する、
提供装置。

【請求項9】

情報処理装置によって、
移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付け、
前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出し、
前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出し、
前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定し、
前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する、
情報提供制御方法。

【請求項10】

移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付ける受付処理と、
前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出する検出処理と、
前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出する算出処理と、
前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定する特定処理と、
前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する出力処理と、
をコンピュータに実行させるための情報提供制御プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報提供制御装置、提供装置、情報提供制御方法、及び、情報提供制御プログラムに関する。

【背景技術】

【0002】

鉄道あるいはバス等の交通機関の乗客に対して、広告などの情報を効果的に提供することを実現する技術が期待されている。

【0003】

上述の技術に関連して、特許文献１には、車両の搭乗者の振舞いを検知し、その搭乗者が直接あるいは潜在的に興味を持つものに関する情報を提供し、搭乗者の興味を喚起してプロモーションの促進を支援する装置が開示されている。この装置は、バスとの間で通信可能に接続され、顧客興味データベースに登録された、バスに搭乗予定の顧客の属性情報を、受け取る。この装置は、バスへの搭乗中に、バスに搭載された車内カメラ等により検知された顧客の行動の検知結果と、顧客の属性情報とに基づいて、顧客が直接あるいは潜在的に興味を有する興味事項を推測する。そしてこの装置は、推測した興味事項に関する情報を、バスに搭載された車内端末に閲覧可能に表示する。

【0004】

また、特許文献２には、不特定多数の乗客にとって必要とされる広告情報を配信するシステムが開示されている。このシステムは、不特定多数の利用者が乗車している車両に表示させる広告情報を決定し、広告情報と不特定多数の利用者との間の関連性を特定する。このシステムは、不特定多数の利用者全体としての関連性が所定の条件に該当するときには、広告情報を車両に提供する。このシステムは、不特定多数の利用者全体としての関連性が所定の条件に該当しないときには、不特定多数の利用者の中の、広告情報との間の関連性が高い第１利用者の第１端末に対して第１端末を振動させる振動情報とともに広告情報をプッシュ型配信で提供する。そしてこの場合、このシステムは、広告情報との間の関連性が低い第２利用者の第２端末に対して、第２端末への操作の検出を契機として広告情報をプル型配信で提供する。

【0005】

また、特許文献３には、任意に取得された写真や映像といった情報を、関連するユーザそれぞれに対して共通的に提供するシステムが開示されている。このシステムは、所定に配置された各センサ装置出力された情報を収集し、ユーザに対して識別するためのユーザＩＤ（Identification）を付与する。このシステムは、ユーザによる自身と他のユーザとを関連付けるための情報の登録を受け付けると共に、本人を識別可能な本人識別情報を管理する。このシステムは、各センサ装置の出力から本人識別情報に対応する情報が検出された場合、当該本人識別情報に対応するユーザＩＤに基づき、センサ装置の出力から当該本人識別情報が検出された情報を、当該ユーザＩＤに関連付けられたユーザに配信する。

【0006】

また、特許文献４には、ユーザの体調に関する複数のオブジェクトを含む画面を所定の表示部に表示するシステムが開示されている。このシステムは、表示した複数のオブジェクトの中からの、ユーザによって選択された少なくとも一のオブジェクトに関する選択情報を受け付ける。このシステムは、受け付けた選択情報、および、当該選択情報が受け付けられた時刻に関する時刻情報を含む体調情報を送信する対象である報告先を決定する。そしてこの装置は、決定した報告先に対して、体調情報を送信する。

【先行技術文献】

【特許文献】

【0007】

【特許文献1】特開２０２０－０５７０６６号公報

【特許文献2】特開２０２０－０６４３６９号公報

【特許文献3】特開２００８－１９８１３５号公報

【特許文献4】国際公開第２０２２／０５９３８３号

【発明の概要】

【発明が解決しようとする課題】

【0008】

鉄道あるいはバス等の交通機関（移動体）の中の人物（乗客）が、例えば窓から見えるある対象物（景色、建物等）に興味を示したときに、当該対象物に関する情報を、その人物に適切かつ迅速に提供することによって、その人物の満足度を向上させることができる。特許文献１乃至４において開示された技術では、このような課題を解決するのに十分であるとは言えない。

【0009】

本発明の主たる目的は、移動体の中の人物が移動体から見える対象物に興味を示した場合に、当該人物に対して当該対象物に関する情報を適切かつ迅速に提供できるようにすることである。

【課題を解決するための手段】

【0010】

本発明の一態様に係る情報提供制御装置は、移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付ける受付手段と、前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出する検出手段と、前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出する算出手段と、前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定する特定手段と、前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する出力手段と、を備える。

【0011】

上記目的を達成する他の見地において、本発明の一態様に係る情報提供制御方法は、情報処理装置によって、移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付け、前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出し、前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出し、前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定し、前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する。

【0012】

また、上記目的を達成する更なる見地において、本発明の一態様に係る情報提供制御プログラムは、移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付ける受付処理と、前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出する検出処理と、前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出する算出処理と、前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定する特定処理と、前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する出力処理と、をコンピュータに実行させる。

【0013】

更に、本発明は、係る情報提供制御プログラム（コンピュータプログラム）が格納された、コンピュータ読み取り可能な、不揮発性の記録媒体によっても実現可能である。

【発明の効果】

【0014】

本発明は、移動体の中の人物が移動体から見える対象物に興味を示した場合に、当該人物に対して当該対象物に関する情報を適切かつ迅速に提供できるようにする。

【図面の簡単な説明】

【0015】

【図1】本発明の第１の実施形態に係る情報提供制御システム１の構成を示すブロック図である。

【図2】本発明の第１の実施形態に係る情報提供制御装置１０が、列車の窓から外を見る乗客の視線の方向から、その視線の先に存在する対象物を特定することを例示する図である。

【図3A】本発明の第１の実施形態に係る情報提供制御装置１０が、列車の窓から外を見る乗客の視線の方向を算出する第１の例を示す図である。

【図3B】本発明の第１の実施形態に係る情報提供制御装置１０が、列車の窓から外を見る乗客の視線の方向を算出する第２の例を示す図である。

【図4】本発明の第１の実施形態に係る情報提供制御装置１０が、特定した乗客の視線の先に存在する対象物に関する対象物を説明する情報１７７を、プロジェクタ２２を用いて窓に投影する態様を例示する図である。

【図5】本発明の第１の実施形態に係る情報提供制御装置１０が乗客に関する属性情報１７８を取得する動作を示すフローチャートである。

【図6A】本発明の第１の実施形態に係る情報提供制御装置１０が乗客の視線の先に存在する対象物を特定し、特定した対象物に関する対象物を説明する情報１７７を乗客に提供する動作を示すフローチャート（１／２）である。

【図6B】本発明の第１の実施形態に係る情報提供制御装置１０が乗客の視線の先に存在する対象物を特定し、特定した対象物に関する対象物を説明する情報１７７を乗客に提供する動作を示すフローチャート（２／２）である。

【図7】本発明の第２の実施形態に係る情報提供制御装置４０の構成を示すブロック図である。

【図8】本発明の第２の実施形態に係る情報提供制御装置４０の動作を示すフローチャートである。

【図9】本発明の各実施形態に係る情報提供制御装置を実現可能な情報処理装置９００の構成を示すブロック図である。

【発明を実施するための形態】

【0016】

以下、本発明の実施の形態について図面を参照して詳細に説明する。

【0017】

＜第１の実施形態＞
図１は、本発明の第１の実施の形態に係る情報提供制御システム１の構成を示すブロック図である。情報提供制御システム１は、例えば、列車（鉄道）あるいはバス等の交通機関（移動体）の中の乗客（人物）が、移動体から見える対象物（景色、建物等）に興味を示した場合に、当該乗客に対して当該対象物に関する情報を適切かつ迅速に提供するシステムである。情報提供制御システム１は、乗客の視線の方向を検出することによって、乗客が注視している対象物を、乗客が興味を示している対象物として特定する。

【0018】

情報提供制御システム１は、大別して、情報提供制御装置１０、車内カメラ２１、プロジェクタ２２、車内端末２３、乗客の端末２４、外部装置２５、外部装置２６を有する。情報提供制御装置１０、車内カメラ２１、プロジェクタ２２、車内端末２３、乗客の端末２４、外部装置２５、外部装置２６は、通信ネットワーク３０を介して通信可能に接続されている。通信ネットワーク３０は、例えばインターネットである。

【0019】

図２は、本実施形態に係る情報提供制御装置１０が、列車（移動体）の窓から外を見る乗客の視線の方向から、その視線の先にある対象物を特定することを例示する図である。尚、本実施形態の説明では、列車の進行方向をＸ軸とし、Ｙ軸及びＺ軸を図２に例示する通り付与することとする。以下、図１及び図２を参照して、情報提供制御システム１の動作について説明する。尚、本実施形態では、移動体が列車である場合について説明するが、情報提供制御システム１が対象とする移動体は、列車に限定されず、例えばバスでもよいし、列車あるいはバスと同様の座席を備える船舶などでもよい。

【0020】

図１に示す車内カメラ２１（撮像装置の一例）は、図２に例示する通り、列車の座席にいる乗客の顔画像を撮像できるように、例えば各座席の前方の天井付近に設置されている。図２に示す例では、車内カメラ２１―Ａは、乗客Ａの顔画像を撮像し、車内カメラ２１－Ｂは、乗客Ｂの顔画像を撮像する。尚、本実施形態では、必要に応じて、車内カメラ２１を、車内カメラ２１－Ａあるいは２１－Ｂというように区別して記載する場合がある。

【0021】

図１に示すプロジェクタ２２（提供装置の一例）は、後述する情報提供制御装置１０から出力された情報を、列車の座席の窓に投影することによって、その座席にいる乗客に対して当該情報を提供する。プロジェクタ２２は、図２に例示する通り、情報を座席の窓に投影できるように、例えば各座席の前方の天井付近に設置されている。図２に示す例では、プロジェクタ２２―Ａは、乗客Ａに提供する情報を乗客Ａの座席の窓Ａ１に投影し、プロジェクタ２２―Ｂは、乗客Ｂに提供する情報を乗客Ｂの座席の窓Ｂ１に投影する。尚、本実施形態では、必要に応じて、プロジェクタ２２を、プロジェクタ２２－Ａあるいは２２－Ｂというように区別して記載する場合がある。プロジェクタ２２は、例えば自動車の運転席の窓ガラスに情報を投影する既存技術を用いることができる。

【0022】

図１に示す車内端末２３（提供装置の一例）は、後述する情報提供制御装置１０から出力された情報を、具備する表示画面に出力するとともに、当該表示画面が備えるタッチパネル機能を介して乗客による入力操作により入力された情報を受け付ける。車内端末２３は、図２に例示する通り、例えば、各座席において、前の座席の背面に設置されている。図２に示す例では、車内端末２３―Ａは、乗客Ａに情報を提供するとともに乗客Ａによる入力操作を受け付け、車内端末２３―Ｂは、乗客Ｂに情報を提供するとともに乗客Ｂによる入力操作を受け付ける。尚、本実施形態では、必要に応じて、車内端末２３を、車内端末２３－Ａあるいは２３－Ｂというように区別して記載する場合がある。

【0023】

図１に示す乗客の端末２４は、各乗客が所持する、例えばスマートフォンあるいはタブレット端末等の情報処理装置である。乗客の端末２４は、例えば、情報提供制御装置１０との間の情報の送受信を制御するアプリケーションを実行することによって、情報提供制御装置１０から出力された情報を具備する表示画面に表示するとともに、乗客による入力操作により入力された情報を情報提供制御装置１０へ入力する。

【0024】

図１に示す外部装置２５は、例えばサーバ等の情報処理装置であり、列車の沿線付近に存在する（即ち、列車の乗客が窓から視認可能である）対象物に関する詳細情報２５０を含むデータベースを備える。当該対象物は、例えば観光資源であり、景色（山、川、海、湖等）、建物（歴史的な建造物、イベント施設等）などを含む。対象物に関する詳細情報２５０は、各対象物に関する、その存在場所を表す位置情報、及び、対象物を説明する情報を含んでいる。当該位置情報は、例えば、ＧＮＳＳ（Global Navigation Satellite System）等によって表される緯度及び経度を表す情報である。外部装置２５は、複数の情報処理装置によって構成されてもよい。

【0025】

図１に示す外部装置２６は、例えばサーバ装置等の情報処理装置であり、乗客に関する属性情報２６１及び顔認証情報２６２を含むデータベースを備える。属性情報２６１及び顔認証情報２６２は、乗客を識別可能な情報と関連付けられた情報である。乗客を識別可能な情報としては、例えば、乗客の氏名と住所あるいは電話番号との組み合わせ等が使用可能である。外部装置２６は、複数の情報処理装置によって構成されてもよい。外部装置２６は、また、上述した外部装置２５と同じ情報処理装置であってもよい。

【0026】

属性情報２６１は、乗客の属性を表し、より具体的には、乗客の国籍、年齢、性別等を表す。属性情報２６１は、乗客自身によって登録された情報であり、例えば、ポイントサービスを提供する事業者、クレジットカードの事業者、あるいは旅行代理店の事業者等が管理する会員データベースに含まれる情報であってもよい。属性情報２６１は、また、例えば上述した事業者によるアンケート調査によって事前に収集された乗客の趣向（歴史好き、地理好き等）を表す情報を含んでもよい。

【0027】

顔認証情報２６２は、乗客の顔認証を行う際に照合される、乗客自身によって事前に登録された乗客の顔画像を表す情報であり、例えば、サービス提供時に顔認証による認証を行うサービス事業者が管理する会員データベースに含まれる情報であってもよい。

【0028】

図１に示す情報提供制御装置１０は、受付部１１、検出部１２、算出部１３、特定部１４、出力部１５、認証部１６、記憶部１７を備える。受付部１１、検出部１２、算出部１３、特定部１４、出力部１５、認証部１６は、順に、受付手段、検出手段、算出手段、特定手段、出力手段、認証手段の一例である。

【0029】

記憶部１７は、例えば、図９を参照して後述するＲＡＭ（Random Access Memory）９０３あるいはハードディスク９０４のような記憶デバイスである。記憶部１７は、人物画像１７１、座席の位置情報１７２、対象物の位置情報１７３、撮像方向１７４、視線の相対方向１７５、視線の方向１７６、対象物を説明する情報１７７、属性情報１７８、端末管理情報１７９を記憶している。記憶部１７に記憶されたこれらの情報に関しては後述する。

【0030】

次に、情報提供制御装置１０が乗客に関する属性情報１７８を取得する動作、及び、窓の外を見る乗客の視線の先に存在する対象物を特定し、特定した対象物に関する対象物を説明する情報１７７を属性情報１７８に応じて乗客に提供する動作について、順番に説明する。

【0031】

＜情報提供制御装置１０が乗客に関する属性情報１７８を取得する動作＞
受付部１１は、乗客が列車の指定席を購入したときの指定席に関する情報を、例えば、鉄道事業者のシステム等（不図示）から取得する。受付部１１が取得するこの指定席に関する情報は、指定席を識別可能な情報とその指定席を使用する乗客を識別可能な情報とを関連付ける情報である。指定席を識別可能な情報は、例えば列車番号（のぞみ００１号等）及び座席番号（１号車２列目Ｃ席等）を表す。乗客を識別可能な情報は、例えば氏名と住所あるいは電話番号との組み合わせ等を表す。尚、上述した顔認証情報２６２は、乗客を識別可能な情報を介して、指定席を識別可能な情報と関連付けられている。

【0032】

受付部１１は、取得した指定席に関する情報に含まれる乗客を識別可能な情報と紐づけられた乗客に関する属性情報２６１を、外部装置２６から取得する。但し、受付部１１が属性情報２６１を取得できるのは、属性情報２６１が事前に外部装置２６に登録されている乗客に関してのみである。

【0033】

受付部１１は、車内カメラ２１が乗客の顔を撮像した人物画像１７１を、撮像対象である乗客の座席を識別可能な情報とともに、車内カメラ２１から受け付ける。例えば、人物画像１７１は、撮像対象である乗客の座席を識別可能な情報を、撮像した日時等が含まれる付加情報として含んでもよい。

【0034】

認証部１６は、受付部１１によって取得された人物画像１７１を、外部装置２６に登録されている顔認証情報２６２と照合することによって顔認証を行う。但し、認証部１６による顔認証によって特定される乗客は、顔認証情報２６２が事前に外部装置２６に登録されている乗客のみである。

【0035】

受付部１１は、認証部１６による顔認証によって特定された乗客に関する属性情報２６１を、外部装置２６から取得する。

【0036】

受付部１１は、上述の通りに外部装置２６から取得した乗客に関する属性情報２６１を、指定席に関する情報あるいは人物画像１７１に含まれる、乗客の座席を識別可能な情報と関連付けた属性情報１７８を、記憶部１７に格納する。

【0037】

受付部１１は、また、属性情報２６１に乗客の端末２４を識別可能な情報が含まれる場合、乗客の端末２４を識別可能な情報と乗客の座席を識別可能な情報とを関連付けた端末管理情報１７９を、記憶部１７に格納する。乗客の端末２４を識別可能な情報としては、例えば、電話番号あるいはメールアドレス等が使用可能である。

【0038】

次に図５のフローチャートを参照して、本実施形態に係る情報提供制御装置１０が乗客に関する属性情報１７８を取得する動作（処理）について詳細に説明する。

【0039】

受付部１１は、乗客が指定席を購入したときの指定席に関する情報を、鉄道事業者のシステム等から取得する（ステップＳ１０１）。受付部１１は、外部装置２６から、指定席に関する情報に含まれる乗客を識別可能な情報と紐づけられた属性情報２６１を取得する（ステップＳ１０２）。受付部１１は、車内カメラ２１から、撮像対象である乗客の座席を識別可能な情報を含む乗客の人物画像１７１を受け付ける（ステップＳ１０３）。

【0040】

認証部１６は、受付部１１によって取得された乗客の人物画像１７１を、外部装置２６に登録されている顔認証情報２６２と照合することによって、乗客に対する顔認証を行う（ステップＳ１０４）。顔認証が成功しなかった（失敗した）場合（ステップＳ１０５でＮｏ）、処理はステップＳ１０７へ進む。顔認証が成功した場合（ステップＳ１０５でＹｅｓ）、受付部１１は、外部装置２６から、顔認証によって特定された乗客に関する属性情報２６１を取得する（ステップＳ１０６）。

【0041】

受付部１１は、取得した乗客に関する属性情報２６１を乗客の座席を識別可能な情報と関連付けた属性情報１７８を、記憶部１７に格納し（ステップＳ１０７）、全体の処理は終了する。

【0042】

＜情報提供制御装置１０が、窓の外を見る乗客の視線の先に存在する対象物を特定し、特定した対象物に関する対象物を説明する情報１７７を属性情報１７８に応じて乗客に提供する動作＞
次に、情報提供制御装置１０が、窓の外を見る乗客の視線の先に存在する対象物を特定し、特定した対象物に関する対象物を説明する情報１７７を属性情報１７８に応じて乗客に提供する動作について説明する。

【0043】

受付部１１は、外部装置２５から、列車の外の対象物に関する詳細情報２５０を受け付ける。そして受付部１１は、受け付けた対象物に関する詳細情報２５０に含まれる対象物の位置情報１７３及び対象物を説明する情報１７７を、記憶部１７に格納する。対象物の位置情報１７３は、例えば上述した通り、ＧＮＳＳ等によって表される緯度及び経度を表す情報である。

【0044】

受付部１１は、車内カメラ２１から乗客の人物画像１７１を随時受け付ける。但し、上述した通り、人物画像１７１は、撮像対象である乗客の座席を識別可能な情報を含むこととする。受付部１１は、取得した人物画像１７１を記憶部１７に格納する。

【0045】

受付部１１は、列車内に設置されたＧＮＳＳ受信機によって取得された列車の位置情報と、当該ＧＮＳＳ受信機の設置場所と乗客の座席との位置関係から、乗客の座席の位置情報１７２を取得する。例えば、東向きに移動（走行）している列車において、ＧＮＳＳ受信機の設置場所から進行方向側に１００メートル離れた乗客の座席の位置は、ＧＮＳＳ受信機によって示される緯度及び経度に対して１００メートル東側の位置として得られる。受付部１１は、受け付けた座席の位置情報１７２を、乗客の座席を識別可能な情報と関連付けて、記憶部１７に格納する。

【0046】

受付部１１は、車内カメラ２１が乗客の人物画像１７１を撮像した撮像方向１７４を受け付ける。撮像方向１７４について、図３Ａ及び図３Ｂを参照して説明する。

【0047】

図３Ａ及び図３Ｂは、本実施形態に係る情報提供制御装置１０が、列車の窓から外を見る乗客の視線の方向１７６を算出する第１及び第２の例を示す図である。但し、図３Ａ及び図３ＢにおけるＸ軸、Ｙ軸、Ｚ軸は、図２におけるＸ軸、Ｙ軸、Ｚ軸に対応する。したがって、図３Ａ及び図３Ｂは、図２をＹ軸の正方向側から負方向側に（即ち、列車の天井側から床側に）俯瞰した図である。

【0048】

図３Ａに示す例では、Ｘ軸の正方向に進行する列車において、乗客はＸ軸の正方向（即ち列車の進行方向）を向いている。この場合、車内カメラ２１は、乗客を撮像できるように乗客よりもＸ方向の正方向側から乗客を撮像する。図３Ｂに示す例では、Ｘ軸の正方向に進行する列車において、乗客はＸ軸の負方向（即ち列車の進行方向とは反対の方向）を向いている。この場合、車内カメラ２１は、乗客を撮像できるように乗客よりもＸ方向の負方向側から乗客を撮像する。尚、本実施形態では、乗客から見た車内カメラ２１の方向を撮像方向１７４とする。

【0049】

撮像方向１７４は、例えば、列車の進行方向と座席の向き（進行方向側、進行方向とは反対方向側のいずれに向いているのか）によって表される。したがって、受付部１１は、例えば、ある２つの時刻における列車の位置情報が示す値の差分（２つの時刻における列車の移動状況）と、座席の向きを検出するセンサからの情報を用いて、撮像方向１７４を得ることができる。また、車内カメラ２１が方位センサを備える場合、受付部１１は、当該方位センサが示す情報から、撮像方向１７４を得ることができる。検出部１２は、受付部１１によって受け付けられた乗客の人物画像１７１に含まれる、撮像方向１７４に対する乗客の視線の相対方向１７５を検出する。検出部１２は、例えば、人物画像１７１によって示される乗客の顔の向き、及び、乗客の虹彩あるいは瞳孔の位置等から、既存の視線検出技術を用いて視線の相対方向１７５を検出することができる。図３Ａ及び図３Ｂに示す例において、検出部１２は、Ｙ軸正方向側から見たＸＺ平面において、撮像方向１７４から反時計回りに回転した方向を視線の相対方向１７５として検出する。即ちこの場合、図３Ａ及び図３Ｂに示す両方の例とも、受付部１１によって受け付けられた人物画像１７１において、乗客の虹彩あるいは瞳孔は、向かって右側を向いている。検出部１２は、検出した視線の相対方向１７５を記憶部１７に格納する。

【0050】

算出部１３は、受付部１１によって受け付けられた撮像方向１７４と、検出部１２によって検出された視線の相対方向１７５とに基づいて、乗客の視線の方向１７６を算出する。即ち、算出部１３は、撮像方向１７４に視線の相対方向１７５を加える、あるいは、撮像方向１７４から視線の相対方向１７５を引くことによって、乗客の視線の方向１７６を算出する。尚、視線の相対方向１７５は、例えば、正面（即ち撮像方向１７４）を０度として、向かって右側の方向を正の値、向かって左側の方向を負の値として定義されてもよい。算出部１３は、図３Ａに示す例では、Ｙ軸正方向側から見たＸＺ平面において、右上方向（Ｘ軸正方向かつＺ軸正方向）を視線の方向１７６として算出する。算出部１３は、図３Ｂに示す例では、Ｙ軸正方向側から見たＸＺ平面において、左下方向（Ｘ軸負方向かつＺ軸負方向）を視線の方向１７６として算出する。算出部１３は、算出した視線の方向１７６を記憶部１７に格納する。

【0051】

特定部１４は、座席の位置情報１７２が示す位置にいる乗客から、対象物の位置情報１７３によって示される視認可能な対象物のうち、視線の方向１７６によって示される乗客の視線の先に存在する対象物を特定する。

【0052】

図２に示す例において、乗客Ａが窓Ａ１から視認可能な対象物は、対象物Ｃ及び対象物Ｄである。乗客Ｂが窓Ｂ１から視認可能な対象物は、対象物Ｃ及び対象物Ｅである。山である対象物Ｃは列車からの距離が遠いことから、乗客Ａ及び乗客Ｂの両方から視認可能である。これに対して、建物である対象物Ｄ及び対象物Ｅは列車からの距離が近いことから、乗客Ａ及び乗客Ｂのいずれかから視認可能である。

【0053】

特定部１４は、座席の位置情報１７２及び対象物の位置情報１７３によって示される、座席と対象物との位置関係から、乗客の座席から視認される対象物の方向（対象物が乗客からどの方向に見えるか）を求めることができる。特定部１４は、例えば図２に例示する通り、窓Ａ１あるいは窓Ｂ１からの視界をＸ軸及びＹ軸を用いた２次元平面で表したときの、当該２次元平面における各対象物が視認される座標を算出する。

【0054】

特定部１４は、算出部１３によって算出された乗客の視線の方向１７６が示す、上述した２次元平面における座標を算出する。特定部１４は、図２に示す例において、乗客Ａに関する視線の方向１７６－Ａが示す２次元平面における座標（Ｘａ，Ｙａ）を求め、乗客Ｂに関する視線の方向１７６－Ｂが示す２次元平面における座標（Ｘｂ，Ｙｂ）を求める。尚、本実施形態では、必要に応じて、視線の方向１７６を、視線の方向１７６－Ａあるいは１７６－Ｂというように区別して記載する場合がある。

【0055】

特定部１４は、乗客の視線の方向１７６が示す２次元平面における座標と、当該２次元平面における各対象物が視認される座標とを照合することによって、乗客の視線の先にある対象物を特定する。図２に示す例では、乗客Ａに関する視線の方向１７６－Ａが示す座標（Ｘａ，Ｙａ）において視認されるのは対象物Ｃであり、乗客Ｂに関する視線の方向１７６－Ｂが示す座標（Ｘｂ，Ｙｂ）において視認されるのは対象物Ｅである。したがって特定部１４は、乗客Ａの視線の先にある対象物が対象物Ｃであり、乗客Ｂの視線の先にある対象物が対象物Ｅであると特定する。

【0056】

図１に示す出力部１５は、特定部１４によって特定された、乗客の視線の先にある対象物に関して、対象物を説明する情報１７７をプロジェクタ２２に出力する。

【0057】

図４は、本実施形態に係る情報提供制御装置１０が、特定した乗客の視線の先に存在する対象物に関して、対象物を説明する情報１７７を、プロジェクタ２２を用いて窓に投影する態様を例示する図である。図４に示す例では、出力部１５は、図２に示すプロジェクタ２２－Ａを介して、対象物Ｃに関する対象物を説明する情報１７７である「富士山 日本一高い山 標高：３７７６メートル 活火山であり前回の噴火は１７０７年（宝永噴火） 世界文化遺産に登録済み」を、乗客Ａに提供する。出力部１５は、また、図４に例示するように、対象物Ｃに関する対象物を説明する情報１７７に含まれる、外部装置２５に格納されている対象物に関する詳細情報２５０のアドレスを示すＱＲ（Quick Response）コード（登録商標）を乗客Ａに提供してもよい。この場合乗客Ａは、提供されたＱＲコードから、乗客の端末２４を用いて、対象物Ｃに関して、対象物に関する詳細情報２５０を参照することができる。尚、出力部１５は、ＱＲコードとは異なる対象物に関する詳細情報２５０のアドレスを示す情報を、乗客Ａに提供してもよい。

【0058】

尚、図２に示す例の場合、出力部１５は、プロジェクタ２２－Ｂを介して、対象物Ｅに関する対象物を説明する情報１７７を、上述と同様の態様で乗客Ｂに提供する。

【0059】

出力部１５は、また、対象物を説明する情報１７７を、車内端末２３に出力するようにしてもよい。出力部１５は、あるいは、端末管理情報１７９によって特定される乗客の端末２４に、対象物を説明する情報１７７を出力するようにしてもよい。但しこの場合、乗客の端末２４は、例えば、情報提供制御装置１０との間の情報の送受信を制御するアプリケーションを実行することとする。このように、出力部１５は、対象物を説明する情報１７７を、プロジェクタ２２、車内端末２３、及び乗客の端末２４の少なくともいずれかに出力してもよい。この場合、乗客は、プロジェクタ２２による座席の窓への投影画面、車内端末２３の表示画面、及び乗客の端末２４の表示画面の少なくともいずれかを介して、自分が窓から見ていた対象物に関する対象物を説明する情報１７７を提供される。

【0060】

検出部１２は、上述した情報提供制御装置１０の動作において、乗客の視線の相対方向１７５を継続して追跡し、特定部１４は、算出部１３によって継続して算出された乗客の視線の方向１７６によって示される視線の先にある対象物を継続して特定してもよい。そしてこの場合、出力部１５は、例えば、乗客の視線の方向１７６から特定される対象物が、所定の時間（例えば３秒）以上同一である（即ち、乗客が所定の時間以上継続して同一の対象物を見ている）場合に、特定した対象物に関して、対象物を説明する情報１７７をプロジェクタ２２等に出力するようにしてもよい。

【0061】

出力部１５は、また、乗客の属性情報１７８に関連する、特定部１４によって特定された対象物に関する対象物を説明する情報１７７を出力してもよい。即ち出力部１５は、乗客の属性情報１７８に応じて、出力する対象物を説明する情報１７７の提供内容を変更してもよい。

【0062】

より具体的には、出力部１５は、例えば、乗客の属性情報１７８によって示される乗客の国籍に応じて、対象物を説明する情報１７７を表す言語を変更する。出力部１５は、例えば、乗客が米国人である場合は英語で、乗客が中国人である場合は中国語で、対象物を説明する情報１７７を出力する。但し、出力部１５は、既存の自動翻訳技術を使用可能であることとする。

【0063】

出力部１５は、例えば、乗客の属性情報１７８によって示される乗客の年齢に応じて、対象物を説明する情報１７７を表す内容を変更する。出力部１５は、例えば、乗客の年齢が児童（小学生）あるいは生徒（中学生、高校生）に該当する場合、対象物を説明する情報１７７に含まれる、当該対象物に関して学習するための情報（例えば対象物に関する歴史など）を出力する。

【0064】

出力部１５は、また、特定部１４により特定された対象物に関する対象物を説明する情報１７７に含まれる複数の情報のうちの少なくともいずれかを選択することを乗客に促すメニュー画面を、車内端末２３あるいは乗客の端末２４に出力してもよい。例えば、図２及び図４に例示するように、特定部１４により特定された対象物が富士山である場合、出力部１５は、富士山の登山ルートを表す情報、富士山周辺の観光地に関する案内情報、富士山の噴火の歴史を表す情報等の少なくともいずれかを選択することを乗客に促すメニュー画面を出力する。この場合、車内端末２３あるいは乗客の端末２４の表示画面に表示された当該メニュー画面において、対象物を説明する情報１７７に含まれる少なくともいずれかの情報を選択する乗客による入力操作が行われる。

【0065】

受付部１１は、乗客によって上述の通りに行われた入力操作を表す情報を、車内端末２３あるいは乗客の端末２４から受け付ける。

【0066】

出力部１５は、受付部１１によって受け付けられた情報に応じて、乗客によって選択された（即ち乗客が所望する）対象物を説明する情報１７７に含まれる情報を、プロジェクタ２２、車内端末２３、及び乗客の端末２４の少なくともいずれかに出力する。

【0067】

出力部１５は、また、乗客の属性情報１７８に応じて、上述したメニュー画面及び乗客によって選択された対象物を説明する情報１７７に含まれる情報を変更してもよい。出力部１５は、例えば、上述したメニュー画面及び乗客によって選択された情報を、属性情報１７８によって示される乗客の国籍に応じた言語で出力してもよい。

【0068】

受付部１１は、また、車内端末２３あるいは乗客の端末２４において行われた、乗客に提供された対象物を説明する情報１７７を継続して表示する（ピン止めする）ことを指示する操作入力を表す情報を受け付けてもよい。この場合、出力部１５は、受付部１１が受け付けた情報にしたがって、対象物を説明する情報１７７を継続して表示することを指示する情報を、プロジェクタ２２、車内端末２３、及び乗客の端末２４の少なくともいずれかに出力する。

【0069】

次に図６Ａ及び６Ｂのフローチャートを参照して、本実施形態に係る情報提供制御装置１０が乗客の視線の先に存在する対象物を特定し、特定した対象物に関する対象物を説明する情報１７７を乗客に提供する動作の動作（処理）について詳細に説明する。

【0070】

受付部１１は、外部装置２５から、列車の外の対象物に関する詳細情報２５０を受け付け、対象物に関する詳細情報２５０に含まれる対象物の位置情報１７３及び対象物を説明する情報１７７を、記憶部１７に格納する（ステップＳ２０１）。受付部１１は、車内カメラ２１から、乗客の人物画像１７１を、撮像した乗客の座席を識別可能な情報とともに受け付けて、受け付けた人物画像１７１を乗客の座席を識別可能な情報と関連付けて記憶部１７に格納する（ステップＳ２０２）。受付部１１は、車内カメラ２１が乗客の人物画像１７１を撮像した撮像方向１７４を受け付け、受け付けた撮像方向１７４を記憶部１７に格納する（ステップＳ２０３）。検出部１２は、人物画像１７１に含まれる、撮像方向１７４に対する乗客の視線の相対方向１７５を既存の視線検出技術を用いて検出し、検出した視線の相対方向１７５を、乗客の座席を識別可能な情報と関連付けて記憶部１７に格納する（ステップＳ２０４）。算出部１３は、撮像方向１７４と視線の相対方向１７５とに基づいて、乗客の視線の方向１７６を算出し、算出した視線の方向１７６を、乗客の座席を識別可能な情報と関連付けて記憶部１７に格納する（ステップＳ２０５）。

【0071】

受付部１１は、列車内におけるＧＮＳＳ受信機によって取得された列車の位置情報と、当該ＧＮＳＳ受信機の設置場所と乗客の座席との位置関係から、乗客の座席の位置情報１７２を受け付け、座席の位置情報１７２を乗客の座席を識別可能な情報と関連付けて記憶部１７に格納する（ステップＳ２０６）。特定部１４は、座席の位置情報１７２と対象物の位置情報１７３とによって示される、乗客から視認可能な対象物のうち、乗客から視認される対象物の方向と視線の方向１７６とを照合することによって、乗客の視線の先に存在する対象物を特定する（ステップＳ２０７）。出力部１５は、特定部１４によって特定された対象物が、所定の時間以上同一であるか否かを判定する（ステップＳ２０８）。

【0072】

特定部１４によって特定された対象物が、所定の時間以上同一ではない場合（ステップＳ２０９でＮｏ）、処理はステップＳ２０２へ戻る。特定部１４によって特定された対象物が、所定の時間以上同一である場合（ステップＳ２０９でＹｅｓ）、出力部１５は、特定部１４によって特定された対象物に関する対象物を説明する情報１７７に含まれる情報の中から所望する情報を乗客に選択させるためのメニュー画面を、乗客の属性情報１７８に応じて、車内端末２３及び乗客の端末２４の少なくともいずれかの表示画面に表示する（ステップＳ２１０）。

【0073】

受付部１１は、車内端末２３あるいは乗客の端末２４から、乗客による選択結果を表す情報を受け付ける（ステップＳ２１１）。出力部１５は、乗客による選択結果に基づいて、特定された対象物を説明する情報１７７を、プロジェクタ２２を介して、乗客の座席の窓に、属性情報１７８に応じて投影するとともに、車内端末２３及び乗客の端末２４の少なくともいずれかの表示画面に、属性情報１７８に応じて表示し（ステップＳ２１２）、処理はステップＳ２０２へ戻る。

【0074】

本実施形態に係る情報提供制御装置１０は、移動体の中の人物が移動体から見える対象物に興味を示した場合に、当該人物に対して当該対象物に関する情報を適切かつ迅速に提供することができる。その理由は、情報提供制御装置１０は、列車（移動体）の中の乗客（人物）の視線の方向１７６を算出して視線の先にある対象物を特定し、特定した対象物に関する対象物を説明する情報１７７を乗客に提供するからである。

【0075】

以下に、本実施形態に係る情報提供制御装置１０によって実現される効果について、詳細に説明する。

【0076】

鉄道あるいはバス等の移動体の中の人物乗客が、例えば窓から見えるある対象物（景色、建物等）に興味を示したときに、当該対象物に関する情報を、その人物に適切かつ迅速に提供することによって、その人物の満足度を向上させることが課題である。

【0077】

このような問題に対して、本実施形態に係る情報提供制御装置１０は、列車に乗っている乗客を撮像した人物画像１７１、乗客の座席の位置情報１７２、列車の外にある対象物の位置情報１７３、及び、人物画像１７１を撮像した撮像方向１７４を受け付ける。情報提供制御装置１０は、人物画像１７１に含まれる、撮像方向１７４に対する乗客の視線の相対方向１７５を検出する。情報提供制御装置１０は、撮像方向１７４と視線の相対方向１７５とに基づいて、乗客の視線の方向１７６を算出する。情報提供制御装置１０は、座席の位置情報１７２と対象物の位置情報１７３とによって示される乗客から視認される対象物の方向と、視線の方向１７６とを照合することによって、当該視線の先に存在する特定の対象物を特定する。そして、情報提供制御装置１０は、乗客に情報を提供する提供装置（プロジェクタ２２、車内端末２３、乗客の端末２４の少なくともいずれか）に、特定した対象物を説明する情報１７７を出力する。これにより、情報提供制御装置１０は、移動体の中の人物が移動体から見える対象物に興味を示した場合に、当該人物に対して当該対象物に関する情報を適切かつ迅速に提供することができる。

【0078】

また、本実施形態に係る情報提供制御装置１０は、乗客の視線の相対方向１７５を例えば継続して追跡し、継続して求められた乗客の視線の方向１７６から特定される特定の対象物が所定の時間以上同一である場合に、その特定の対象物に関する対象物を説明する情報１７７を出力する。即ち情報提供制御装置１０は、乗客の視線がある対象物に所定の時間以上固定されていることをもって、当該乗客が当該対象物に興味を示していると見做し、当該対象物に関する対象物を説明する情報１７７を当該乗客に提供する。これにより、情報提供制御装置１０は、乗客が興味を示した対象物に関する情報の提供をより適切に行うことができる。

【0079】

また、本実施形態に係る情報提供制御装置１０は、乗客に関する属性情報１７８を、座席の位置情報１７２と関連付けて取得し、属性情報１７８に関連する、特定された対象物に関する対象物を説明する情報１７７を乗客に提供する。これにより、情報提供制御装置１０は、乗客が興味を示した対象物に関する情報の提供を、乗客の属性をふまえてより適切に行うことができる。

【0080】

また、本実施形態に係る情報提供制御装置１０は、特定された対象物に関する対象物を説明する情報１７７に含まれる複数の情報のうちの少なくともいずれかを選択することを乗客に促す情報を、車内端末２３及び乗客の端末２４の少なくともいずれかに出力する。そして情報提供制御装置１０は、乗客による入力操作によって選択された対象物を説明する情報１７７に含まれる情報を、プロジェクタ２２、車内端末２３、及び乗客の端末２４の少なくともいずれかに出力する。これにより、情報提供制御装置１０は、乗客が興味を示した対象物に関して乗客が所望する情報を、適切に提供することができる。

【0081】

また、本実施形態に係る情報提供制御装置１０は、特定された対象物に関する詳細情報２５０が記憶された外部装置２５のアドレスを表す、例えばＱＲコード等の情報を、乗客に提供する。これにより、情報提供制御装置１０は、乗客が興味を示した対象物に関して乗客が詳細な情報を取得できるように支援することができる。

【0082】

また、本実施形態に係る情報提供制御装置１０は、人物画像１７１と事前に登録された乗客の顔画像とを用いて、乗客に関する顔認証を行い、顔認証が成功した場合、その乗客に関する属性情報２６１を外部装置２６から取得して、取得した属性情報２６１を乗客の座席と関連付けた属性情報１７８を生成する。これにより、情報提供制御装置１０は、各座席にいる乗客に関する属性情報１７８を効率的に取得することができる。

【0083】

また、本実施形態に係る情報提供制御装置１０は、乗客が列車の指定席を購入する際に開示したその乗客を識別可能な情報と関連付けられている属性情報２６１を外部装置２６から取得して、取得した属性情報２６１を、当該指定席によって示される乗客の座席と関連付けた属性情報１７８を生成する。これにより、情報提供制御装置１０は、各座席にいる乗客に関する属性情報１７８を効率的に取得することができる。

【0084】

また、本実施形態に係るプロジェクタ２２は、乗客の視線が通過する列車の窓に、特定された対象物に関する対象物を説明する情報１７７を投影する。これにより、プロジェクタ２２は、対象物を説明する情報１７７を、乗客が窓から見る対象物に重畳して表示するので、乗客が興味を示した対象物に関する情報を、乗客にわかりやすく提供することができる。

【0085】

＜第２の実施形態＞
図７は、本発明の第２の実施形態に係る情報提供制御装置４０の構成を示すブロック図である。本実施形態は、本発明の最小構成を表す。

【0086】

本実施形態に係る情報提供制御装置４０は、受付部４１、検出部４２、算出部４３、特定部４４、出力部４５を備えている。受付部４１、検出部４２、算出部４３、特定部４４、出力部４５は、順に、受付手段、検出手段、算出手段、特定手段、出力手段の一例である。

【0087】

受付部４１は、移動体に乗っている人物を撮像した人物画像４１１、その人物の座席の位置情報４１２、当該移動体の外にある対象物の位置情報４１３、及び、人物画像４１１を撮像した撮像方向４１４を表す情報を受け付ける。人物画像４１１は、例えば、第１の実施形態に係る人物画像１７１と同様な画像である。座席の位置情報４１２は、例えば、第１の実施形態に係る座席の位置情報１７２と同様な情報である。対象物の位置情報４１３は、例えば、第１の実施形態に係る対象物の位置情報１７３と同様な情報である。撮像方向４１４は、例えば、第１の実施形態に係る撮像方向１７４と同様な情報である。受付部４１は、例えば、第１の実施形態に係る受付部１１と同様に動作する。

【0088】

検出部４２は、人物画像４１１に含まれる、撮像方向４１４に対する当該人物の視線の相対方向４２０を検出する。視線の相対方向４２０は、例えば、第１の実施形態に係る視線の相対方向１７５と同様な情報である。検出部４２は、例えば、第１の実施形態に係る検出部１２と同様に動作する。

【0089】

算出部４３は、撮像方向４１４と視線の相対方向４２０とに基づいて、人物の視線の方向４３０を算出する。視線の方向４３０は、例えば、第１の実施形態に係る視線の方向１７６と同様な情報である。算出部４３は、例えば、第１の実施形態に係る算出部１３と同様に動作する。

【0090】

特定部４４は、座席の位置情報４１２と対象物の位置情報４１３とによって示される当該人物から視認される対象物の方向と、視線の方向４３０とを照合することによって、当該視線の先に存在する特定の対象物を特定する。特定部４４は、例えば、第１の実施形態に係る特定部１４と同様に動作する。

【0091】

出力部４５は、当該人物に情報を提供する提供装置５０に、特定の対象物に関する情報４５０を出力する。提供装置５０は、例えば、第１の実施形態に係るプロジェクタ２２、車内端末２３、あるいは乗客の端末２４と同様な装置である。特定の対象物に関する情報４５０は、例えば、第１の実施形態に係る対象物を説明する情報１７７と同様な情報である。出力部４５は、例えば、第１の実施形態に係る出力部１５と同様に動作する。

【0092】

次に図８のフローチャートを参照して、本実施形態に係る情報提供制御装置４０の動作（処理）について詳細に説明する。

【0093】

受付部４１は、人物画像４１１、座席の位置情報４１２、対象物の位置情報４１３、撮像方向４１４を受け付ける（ステップＳ３０１）。検出部４２は、人物画像４１１に含まれる、撮像方向４１４に対する人物の視線の相対方向４２０を検出する（ステップＳ３０２）。算出部４３は、撮像方向４１４と視線の相対方向４２０とに基づいて、視線の方向４３０を算出する（ステップＳ３０３）。

【0094】

特定部４４は、座席の位置情報４１２と対象物の位置情報４１３とによって示される人物から視認される対象物の方向と、視線の方向４３０とを照合することによって、視線の先に存在する特定の対象物を特定する（ステップＳ３０４）。出力部４５は、提供装置５０に、特定の対象物に関する情報４５０を出力し（ステップＳ３０５）、全体の処理は終了する。

【0095】

本実施形態に係る情報提供制御装置４０は、移動体の中の人物が移動体から見える対象物に興味を示した場合に、当該人物に対して当該対象物に関する情報を適切かつ迅速に提供することができる。その理由は、情報提供制御装置４０は、移動体の中の人物の視線の方向４３０を算出して視線の先にある対象物を特定し、特定した特定の対象物に関する情報４５０を乗客に提供するからである。

【0096】

＜ハードウェア構成例＞
上述した各実施形態において図１、及び、図７に示した情報提供制御装置における各部は、専用のＨＷ（ＨａｒｄＷａｒｅ）（電子回路）によって実現することができる。また、図１、及び、図７において、少なくとも、下記構成は、プロセッサによって実行される命令を含むソフトウェアプログラムの機能（処理）単位（ソフトウェアモジュール）と捉えることができる。
・受付部１１及び４１、
・検出部１２及び４２、
・算出部１３及び４３、
・特定部１４及び４４、
・出力部１５及び４５、
・認証部１６、
・記憶部１７における記憶制御機能。

【0097】

但し、これらの図面に示した各部の区分けは、説明の便宜上の構成であり、実装に際しては、様々な構成が想定され得る。この場合のハードウェア環境の一例を、図９を参照して説明する。

【0098】

図９は、本発明の各実施形態に係る情報提供制御装置を実現可能な情報処理装置９００（コンピュータ）の構成を例示的に説明する図である。即ち、図９は、図１及び図７に示した情報提供制御装置を実現可能なコンピュータ（情報処理装置）の構成であって、上述した実施形態における各機能を実現可能なハードウェア環境を表す。

【0099】

図９に示した情報処理装置９００は、構成要素として下記を備えている。
・ＣＰＵ（Ｃｅｎｔｒａｌ＿Ｐｒｏｃｅｓｓｉｎｇ＿Ｕｎｉｔ）９０１、
・ＲＯＭ（Ｒｅａｄ＿Ｏｎｌｙ＿Ｍｅｍｏｒｙ）９０２、
・ＲＡＭ（Ｒａｎｄｏｍ＿Ａｃｃｅｓｓ＿Ｍｅｍｏｒｙ）９０３、
・ハードディスク（記憶装置）９０４、
・通信インタフェース９０５、
・バス９０６（通信線）、
・ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ＿Ｄｉｓｃ＿Ｒｅａｄ＿Ｏｎｌｙ＿Ｍｅｍｏｒｙ）等の記録媒体９０７に格納されたデータを読み書き可能なリーダライタ９０８、
・モニタやスピーカ、キーボード等の入出力インタフェース９０９。

【0100】

即ち、上記構成要素を備える情報処理装置９００は、これらの構成がバス９０６を介して接続された一般的なコンピュータである。情報処理装置９００は、ＣＰＵ９０１を複数備える場合もあれば、マルチコアにより構成されたＣＰＵ９０１を備える場合もある。

【0101】

そして、上述した実施形態を例に説明した本発明は、図９に示した情報処理装置９００に対して、次の機能を実現可能なコンピュータプログラムを供給する。その機能とは、その実施形態の説明において参照したブロック構成図（図１及び図７）における上述した構成、或いはフローチャート（図５、図６Ａ、図６Ｂ、及び図８）の機能である。本発明は、その後、そのコンピュータプログラムを、当該ハードウェアのＣＰＵ９０１に読み出して解釈し実行することによって達成される。また、当該装置内に供給されたコンピュータプログラムは、読み書き可能な揮発性のメモリ（ＲＡＭ９０３）、または、ＲＯＭ９０２やハードディスク９０４等の不揮発性の記憶デバイスに格納すれば良い。

【0102】

また、前記の場合において、当該ハードウェア内へのコンピュータプログラムの供給方法は、現在では一般的な手順を採用することができる。その手順としては、例えば、ＣＤ－ＲＯＭ等の各種記録媒体９０７を介して当該装置内にインストールする方法や、インターネット等の通信回線を介して外部よりダウンロードする方法等がある。そして、このような場合において、本発明は、係るコンピュータプログラムを構成するコード或いは、そのコードが格納された記録媒体９０７によって構成されると捉えることができる。

【0103】

以上、上述した実施形態を模範的な例として本発明を説明した。しかしながら、本発明は、上述した実施形態には限定されない。即ち、本発明は、本発明のスコープ内において、当業者が理解し得る様々な態様を適用することができる。

【0104】

尚、上述した各実施形態の一部又は全部は、以下の付記のようにも記載されうる。しかしながら、上述した各実施形態により例示的に説明した本発明は、以下には限られない。

【0105】

（付記１）
移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付ける受付手段と、
前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出する検出手段と、
前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出する算出手段と、
前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定する特定手段と、
前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する出力手段と、
を備える情報提供制御装置。

【0106】

（付記２）
前記検出手段は、前記視線の前記相対方向を追跡し、
前記出力手段は、前記視線の方向から特定される前記特定の対象物が所定の時間以上同一である場合に、前記特定の対象物に関する情報を出力する、
付記１に記載の情報提供制御装置。

【0107】

（付記３）
前記受付手段は、前記人物に関する属性情報を、前記座席の位置情報と関連付けて取得し、
前記出力手段は、前記属性情報に関連する、前記特定の対象物に関する情報を前記提供装置に出力する、
付記１または付記２に記載の情報提供制御装置。

【0108】

（付記４）
前記属性情報は、前記人物の国籍及び年齢の少なくともいずれかを表し、
前記出力手段は、前記人物の国籍に応じて前記特定の対象物に関する情報を表す言語を変更し、前記人物の年齢が児童あるいは生徒に該当する場合、前記特定の対象物に関して学習するための情報を前記提供装置に出力する、
付記３に記載の情報提供制御装置。

【0109】

（付記５）
前記受付手段は、前記人物により入力装置を介して入力された情報を受け付け、
前記出力手段は、前記特定の対象物に関する複数の情報のうちの少なくともいずれかを選択することを前記人物に促す情報を前記提供装置に出力したのち、前記受付手段によって受け付けられた、前記人物によって入力された情報が示す、前記特定の対象物に関して選択された情報を前記提供装置に出力する、
付記１または付記２に記載の情報提供制御装置。

【0110】

（付記６）
前記出力手段は、前記特定の対象物に関する情報が記憶された外部装置のアドレスを表す情報を、前記提供装置に出力する、
付記１または付記２に記載の情報提供制御装置。

【0111】

（付記７）
前記人物画像と事前に登録された前記人物の顔画像とを用いて、前記人物に関する顔認証を行う認証手段をさらに備え、
前記受付手段は、前記認証手段による顔認証が成功した場合、前記人物と関連付けられている前記属性情報を、前記座席の位置情報と関連付けて取得する、
付記３に記載の情報提供制御装置。

【0112】

（付記８）
付記１または付記２に記載の情報提供制御装置から前記特定の対象物に関する情報を出力される前記提供装置であって、
前記視線が通過する前記移動体の窓に、前記特定の対象物に関する情報を投影する、
提供装置。

【0113】

（付記９）
前記受付手段は、前記人物画像を撮像する撮像装置の位置情報を、前記座席の位置情報として受け付ける、
付記１または付記２に記載の情報提供制御装置。

【0114】

（付記１０）
前記人物画像と事前に登録された前記人物の顔画像とを用いて、前記人物に関する顔認証を行う認証手段をさらに備え、
前記出力手段は、前記認証手段による顔認証が成功した場合、前記人物と関連付けられている前記提供装置に前記特定の対象物に関する情報を出力する、
付記１または付記２に記載の情報提供制御装置。

【0115】

（付記１１）
前記受付手段は、前記人物が前記移動体の指定席を購入する際に開示した前記人物を識別可能な情報と関連付けられている前記属性情報を、前記指定席を表す前記座席の位置情報と関連付けて取得する、
付記３に記載の情報提供制御装置。

【0116】

（付記１２）
情報処理装置によって、
移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付け、
前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出し、
前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出し、
前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定し、
前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する、
情報提供制御方法。

【0117】

（付記１３）
移動体に乗っている人物を撮像した人物画像、前記人物の座席の位置情報、前記移動体の外にある対象物の位置情報、及び、前記人物画像を撮像した撮像方向を表す情報の入力を受け付ける受付処理と、
前記人物画像に含まれる、前記撮像方向に対する前記人物の視線の相対方向を検出する検出処理と、
前記撮像方向と前記相対方向とに基づいて、前記人物の視線の方向を算出する算出処理と、
前記座席の位置情報と対象物の位置情報とによって示される前記人物から視認される対象物の方向と、前記視線の方向とを照合することによって、前記視線の先に存在する特定の対象物を特定する特定処理と、
前記人物に情報を提供する提供装置に、前記特定の対象物に関する情報を出力する出力処理と、
をコンピュータに実行させるための情報提供制御プログラム。

【符号の説明】

【0118】

１ 情報提供制御システム
１０ 情報提供制御装置
１１ 受付部
１２ 検出部
１３ 算出部
１４ 特定部
１５ 出力部
１６ 認証部
１７ 記憶部
１７１ 人物画像
１７２ 座席の位置情報
１７３ 対象物の位置情報
１７４ 撮像方向
１７５ 視線の相対方向
１７６ 視線の方向
１７７ 対象物を説明する情報
１７８ 属性情報
１７９ 端末管理情報
２１ 車内カメラ
２２ プロジェクタ
２３ 車内端末
２４ 乗客の端末
２５ 外部装置
２５０ 対象物に関する詳細情報
２６ 外部装置
２６１ 属性情報
２６２ 顔認証情報
３０ 通信ネットワーク
４０ 情報提供制御装置
４１ 受付部
４１１ 人物画像
４１２ 座席の位置情報
４１３ 対象物の位置情報
４１４ 撮像方向
４２ 検出部
４２０ 視線の相対方向
４３ 算出部
４３０ 視線の方向
４４ 特定部
４５ 出力部
４５０ 特定の対象物に関する情報
５０ 提供装置
９００ 情報処理装置
９０１ ＣＰＵ
９０２ ＲＯＭ
９０３ ＲＡＭ
９０４ ハードディスク（記憶装置）
９０５ 通信インタフェース
９０６ バス
９０７ 記録媒体
９０８ リーダライタ
９０９ 入出力インタフェース

【図1】

【図2】

【図3A】

【図3B】

【図4】

【図5】

【図6A】

【図6B】

【図7】

【図8】

【図9】