特許 6549269 情報提供システム、情報取得端末、情報提供サーバ、情報提供方法、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】6549269

(24)【登録日】2019年7月5日

(45)【発行日】2019年7月24日

(54)【発明の名称】情報提供システム、情報取得端末、情報提供サーバ、情報提供方法、及びプログラム

(51)【国際特許分類】

   G06F 16/29 20190101AFI20190711BHJP

   G06F 16/532 20190101ALI20190711BHJP

   G06F 16/587 20190101ALI20190711BHJP

【ＦＩ】

   G06F16/29

   G06F16/532

   G06F16/587

【請求項の数】6

【全頁数】18

(21)【出願番号】特願2018-39884(P2018-39884)

(22)【出願日】2018年3月6日

【審査請求日】2018年3月6日

(73)【特許権者】

【識別番号】399041158

【氏名又は名称】西日本電信電話株式会社

(74)【代理人】

【識別番号】100130513

【弁理士】

【氏名又は名称】鎌田 直也

(74)【代理人】

【識別番号】100074206

【弁理士】

【氏名又は名称】鎌田 文二

(74)【代理人】

【識別番号】100130177

【弁理士】

【氏名又は名称】中谷 弥一郎

(74)【代理人】

【識別番号】100161746

【弁理士】

【氏名又は名称】地代 信幸

(72)【発明者】

【氏名】瀬川 正之

【審査官】 早川 学

(56)【参考文献】

【文献】 特開２０１６−１９２７６７（ＪＰ，Ａ）

【文献】 特開２０１３−２０５９９５（ＪＰ，Ａ）

【文献】 特開２０１４−２３５６５６（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１１／０２５２０７１（ＵＳ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ １６／００−１６／９５８

(57)【特許請求の範囲】

【請求項1】

情報取得端末と、前記情報取得端末と通信する情報提供サーバとを有する情報提供システムであって、
前記情報取得端末は、
ユーザを識別するアカウント情報と、
静止画又は動画である映像情報を撮影するカメラ機能と、
前記映像情報を画面表示する表示機能と、
を有し、
近距離無線通信機能、ＧＰＳ機能、又はその両方である周囲確認機能により存在位置判別情報を取得する存在位置判別手段と、
前記情報提供サーバに、前記アカウント情報とともに、前記映像情報と前記存在位置判別情報とを送信し、前記情報提供サーバからの返信を受信する周囲情報問合手段と、
前記カメラ機能で撮影した前記映像情報に含まれる対象の属性情報を合成した映像を、前記表示機能で表示させる合成表示手段と、
を実行可能であり、
前記情報提供サーバは、
前記対象が存在する位置情報と前記対象の属性を示し前記映像情報に重ねて表示されるＡＲ情報を含む属性情報とを含む対象情報データベース、
を有し、
取得した前記映像情報から、前記対象情報データベースを参照して前記映像情報に含まれる対象を特定する対象特定手段と、
前記特定された対象の前記属性情報を前記情報取得端末に返信する属性情報返信手段と、
を実行可能であり、
前記情報取得端末は、
前記合成表示手段が前記映像情報に前記ＡＲ情報を合成した映像を表示させるものであり、
なおかつ、
一の前記情報取得端末は、
前記情報提供サーバに対して、他の情報取得端末に対してマルチキャストを行う指示を送信するマルチキャスト依頼手段を実行可能であり、
前記情報提供サーバは、
当該一の情報取得端末のユーザが登録した前記属性情報について送信する情報と送信するユーザとを抽出するマルチキャスト抽出手段と、
前記の抽出されたユーザに対して前記の送信する情報をマルチキャストするマルチキャスト通知手段と、
を実行可能である、
情報提供システム。

【請求項2】

上記対象情報データベースが、ユーザごとの位置情報を含む情報を登録するユーザＩＤデータベースを有し、
前記ユーザＩＤデータベースが、前記ユーザ自身の写真を含む
請求項１に記載の情報提供システム。

【請求項3】

ユーザを識別するアカウント情報と、
静止画又は動画である映像情報を撮影するカメラ機能と、
前記映像情報を画面表示する表示機能と、
を有し、
近距離無線通信機能、ＧＰＳ機能、又はその両方である周囲確認機能により存在位置判別情報を取得する存在位置判別手段と、
情報提供サーバに、前記アカウント情報とともに、前記映像情報と前記存在位置判別情報とを送信し、前記情報提供サーバが前記映像情報を解析して特定した対象に対応するＡＲ情報を受信する周囲情報問合手段と、
前記カメラ機能で撮影した前記映像情報に、前記ＡＲ情報による付加情報を合成した映像を、前記表示機能で表示させる合成表示手段と、
を実行可能である情報取得端末であって、
前記情報提供サーバに、前記ユーザが登録した送信したい他のユーザの前記情報取得端末に対してマルチキャストを行う指示を送信するマルチキャスト依頼手段を実行可能であり、
前記情報提供サーバから抽出されたユーザとしてマルチキャストされた、前記情報取得端末のユーザが登録した属性情報について送信する情報を表示する、
情報取得端末。

【請求項4】

対象が存在する位置情報と映像情報に重ねて表示されるＡＲ情報を含むその対象の属性を示す属性情報とを含む対象情報データベース、
を有し、
情報取得端末から送信された前記映像情報から、前記対象情報データベースを参照して前記映像情報に含まれる対象を特定する対象特定手段と、
特定された対象の前記属性情報を、前記映像情報を送信した情報取得端末に返信する属性情報返信手段と、
他の情報取得端末に対してマルチキャストを行う指示を送信する一の情報取得端末のユーザが登録した前記属性情報について送信する情報と送信するユーザとを抽出するマルチキャスト抽出手段と、
前記の抽出されたユーザに対して前記の送信する情報をマルチキャストするマルチキャスト通知手段と、
を実行可能である、
情報提供サーバ。

【請求項5】

ユーザを識別するアカウント情報と、
静止画又は動画である映像情報を撮影するカメラ機能と、
前記映像情報を画面表示する表示機能と、
を有する情報取得端末により、
対象を含む映像情報を前記カメラ機能によって撮影するステップと、
近距離無線通信機能、ＧＰＳ機能、又はその両方である周囲確認機能により存在位置判別情報を取得する存在位置判別手段を実行するステップと、を
順不同に実行し、
対象が存在する位置情報とその対象の属性を示す属性情報とを含む対象情報データベースを備えた情報提供サーバへ、前記アカウント情報とともに、前記映像情報と前記存在位置判別情報とを送信する周囲情報送信手段を実行するステップと、
前記情報提供サーバが前記映像情報を解析して特定した対象に対応するＡＲ情報を受信する周囲情報受信手段を実行するステップと、
前記カメラ機能で撮影した前記映像情報に、前記ＡＲ情報による付加情報を合成した映像を、前記表示機能で表示させる合成表示手段を実行するステップと、
を実行し、
また、
一の前記情報取得端末が、前記情報提供サーバに対して、他の情報取得端末に対してマルチキャストを行う指示を送信するマルチキャスト依頼手段を実行するステップと、
前記情報提供サーバが当該一の情報取得端末のユーザが登録した前記属性情報について送信する情報と送信するユーザとを抽出するマルチキャスト抽出手段を実行するステップと、
前記情報提供サーバが、前記の抽出されたユーザに対して前記の送信する情報をマルチキャストするマルチキャスト通知手段を実行するステップと、
を行う情報取得方法。

【請求項6】

請求項３に記載の情報取得端末又は請求項４に記載の情報提供サーバとしてコンピュータを機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、個人用携帯通信端末を用いた映像情報から属性情報を提供するサービスに関する。

【背景技術】

【0002】

現在、IT技術を利用して、物理的に近くにある端末との間で情報交換したり、実際に存在する場所と紐付けて情報を得たりする新しい情報交換技術が多数提案され、実用化が検討されている。

【0003】

その情報交換技術の一つとして、ＡＲ（Augmented Reality：拡張現実）が挙げられる。人が知覚する現実環境をコンピュータ等により拡張する技術のことである。例えば、スマートフォンやタブレットに搭載されたカメラで撮影した映像に表示される現実世界の映像に、位置情報などのデータや、実際にはその場に存在しない映像やＣＧを重畳させてモニタに表示させるものが一般的に知られている。

【0004】

また、携帯用ゲーム機での利用も行われている。携帯用ゲーム機がＧＰＳ情報をサーバに送り、同じくＧＰＳ情報を送信したことで周囲にいると判断される同じ携帯用ゲーム機の利用者の情報をサーバから取得することで、近くにいるユーザがどのようにゲームを遊んでいるかのプロフィールを集めたり、他のユーザとの間でゲーム上のアイテムデータ等を共有したりすることが行われている（非特許文献１）。

【0005】

携帯用ゲーム機を用いた例としては、携帯用ゲーム機同士が直接に無線通信することで、互いの携帯用ゲーム機に登録された情報を交換し合う仕組みも提案されている（非特許文献２）。

【先行技術文献】

【非特許文献】

【0006】

【非特許文献1】""near"について Playstation(R)Vitaユーザーズガイド"、[online]、2014年、Sony Computer Entertainment Inc.、[2018年02月19日検索]、インターネット<URL: http://manuals.playstation.net/document/jp/psvita/near/screen.html>

【非特許文献2】"すれちがい通信といつの間に通信 | ニンテンドー3DS｜Nintendo - 任天堂"、[online]、2017年、Nintendo、[2018年02月19日検索]、インターネット<URL: https://www.nintendo.co.jp/hardware/3dsseries/features/network.html>

【発明の概要】

【発明が解決しようとする課題】

【0007】

しかしながら、ユーザが目の前に存在する対象物として、携帯用ゲーム機やスマートフォン等の携帯通信端末以外の物について情報を収集しようとするとき、いずれも制限がかかる。ＡＲ技術を用いようとする場合、カメラで撮影する対象物にＱＲコードなどの特異性のあるＡＲマーカを設置する必要がある。

【0008】

携帯用ゲーム機による場合、ＧＰＳ情報を用いる場合は現在実用されているＧＰＳの精度の問題から対象物を特定することが難しかった。また、直接に無線通信する場合は、それぞれの携帯用ゲーム機は、周囲の携帯用ゲーム機を無線通信可能な範囲で同心円上のどこかに存在するという形でしか認識できず、対象物を特定できないという問題があった。

【0009】

そこでこの発明は、特異性のあるＡＲマーカを取り付けていない対象の画像しか得られない状況において、スマートフォンやタブレット等のカメラ付き情報取得端末から得られる情報を付加して対象を特定可能にし、当該対象の付加的情報を取得できるようにすることを目的とする。

【課題を解決するための手段】

【0010】

情報取得端末と、前記情報取得端末と通信する情報提供サーバとを有する情報提供システムであって、
前記情報取得端末は、
ユーザを識別するアカウント情報と、
静止画又は動画である映像情報を撮影するカメラ機能と、
前記映像情報を画面表示する表示機能と、
を有し、
近距離無線通信機能、ＧＰＳ機能、又はその両方である周囲確認機能により存在位置判別情報を取得する存在位置判別手段と、
前記情報提供サーバに、前記アカウント情報とともに、前記映像情報と前記存在位置判別情報とを送信し、前記情報提供サーバからの返信を受信する周囲情報問合手段と、
前記カメラ機能で撮影した前記映像情報に含まれる対象の属性情報を合成した映像を、前記表示機能で表示させる合成表示手段と、
を実行可能であり、
前記情報提供サーバは、
前記対象が存在する位置情報と前記対象の属性を示す属性情報とを含む対象情報データベース、
を有し、
取得した前記映像情報から、前記対象情報データベースを参照して前記映像情報に含まれる対象を特定する対象特定手段と、
前記特定された対象の前記属性情報を前記情報取得端末に返信する属性情報返信手段と、
を実行可能である情報提供システムにより上記の課題を解決したのである。

【0011】

前記対象情報データベースとしては、動的対象と静的対象とのどちらを対象としていてもよく、両方を対象としていてもよい。また、それらは単一のデータベースであってもよく、複数のデータベースからなる構成でもよい。動的対象としては例えば人間が挙げられる他、犬や猫などの愛玩動物、ナンバープレートなどの識別が可能な自動車や二輪車、IDが登録されている船舶や航空機など、撮影可能で識別できるものであれば特に限定されない。静的対象としては建築物や地形、道路上の模様や設置物、看板などが挙げられる。

【0012】

また、前記対象情報データベースの一部又は全部として、前記動的対象としてユーザごとの情報を登録するユーザＩＤデータベースを有する構成としてもよい。前記情報取得端末は、このユーザＩＤデータベースに対して、ユーザがユーザ自身の自撮り写真をアップロードしたり、ＧＰＳ情報や自身のその他のパーソナルデータをアップロードする個人情報報告手段を有していてよい。情報提供サーバはこのアップロードされた情報をユーザＩＤデータベースに登録する個人情報登録手段を有していてよい。

【0013】

前記属性情報が前記映像情報に重ねて表示されるＡＲ情報を含み、前記合成表示手段が前記映像情報に前記ＡＲ情報を合成した映像を表示させる構成としてもよい。

【0014】

前記対象情報データベースに登録される前記映像情報は、撮影された地点の位置情報を含む構成でもよい。この構成では前記対象特定手段が位置情報を含めて対象物を特定することができ、正確性が向上する。そのようなデータの収集としては、前記映像情報を撮影する情報取得端末のＧＰＳ機能によって測定される位置情報が前記映像情報に付加されたものが情報提供サーバにアップロードされることで実現できる。

【発明の効果】

【0015】

この発明により、ユーザが情報取得端末で撮影した映像情報について、情報提供サーバ側で画像認識して画像から得られる特徴を抽出するとともに、映像情報とともに送られる存在位置判別情報によって対象を絞り込むことで、画像認識とＧＰＳやBluetooth（登録商標）などの情報とを組み合わせ、映った対象を高い精度で認識することができる。これにより、従来は必要とされていたＱＲコード（登録商標）のような専用のＡＲマーカを設置する必要がなく、撮影された対象を認識することができ、ＡＲ情報として端末に表示させることができる。

【0016】

また、ユーザＩＤデータベースに、個人情報とともに情報取得端末によるＧＰＳ情報やその他の個人を識別可能な情報を登録しておくことで、個々のユーザをＡＲマーカとして用いてＡＲ画像合成を行うことができる。

【0017】

また、市街地で行われるイベントの運営者が、街中にある看板その他の設置物を予めＧＰＳ情報、画像情報、特徴量を前記対象情報データベースに登録しておき、映像情報から認識可能にしておくことで、その看板等に変更を加えることなくそのままＡＲマーカとして活用することができる。

【0018】

さらに、ユーザがこの発明を利用することで、自身のデータをマルチキャストすることで自己アピールツールとして用いることもできる。ユーザＩＤデータベースに登録された情報を、個々に公開の程度を設定することで、必要な範囲でのアピールが可能となる。

【図面の簡単な説明】

【0019】

【図1】この発明にかかるサービス提供システムの構成例を示す概念図

【図2】ユーザＩＤデータベースの例を示すテーブル

【図3】この発明の実施形態例を示すシーケンス図

【図4】Bluetooth通信により特定しようとするユーザとの関係を示す概念図

【図5】この発明にかかるサービス提供方法の全体像の例を示すフローチャート

【図6】対象の特定段階の処理例を示すフローチャート

【図7】対象の特定段階の別の処理例を示すフローチャート

【図8】ユーザ告知手段を実行する際の処理の例を示す概念図

【図9】ユーザ告知手段を実行する際の処理の例を示すシーケンス図

【発明を実施するための形態】

【0020】

以下、この発明について具体的な実施形態とともに詳細に説明する。この発明は、情報取得端末１１と、その情報取得端末１１と通信する情報提供サーバ１２からなり、前記情報取得端末を持つユーザにＡＲ情報サービスを提供するシステムである。

【0021】

このシステムの概要を図１に示す。情報取得端末１１と情報提供サーバ１２とは、ネットワーク１３を介して接続される。情報取得端末１１は、基本的に電池を有して持ち運びできる端末である。情報取得端末１１は通信機能を有し、情報提供サーバ１２との間で応答できることが必要である。この通信機能としては、無線ＬＡＮ機能だけでも利用可能だが、持ち運びの自由度の点から、移動体通信網に接続できる携帯電話機能を有することが好ましい。無線ＬＡＮ機能のみの場合は、別途移動体通信網に接続できる無線ＬＡＮルータなどを併用して利用することが好ましい。

【0022】

また、情報取得端末１１は、静止画又は動画である映像情報を撮影するカメラ機能２２を有する。後述する映像情報の送信の際には静止画が扱いやすく、後述する合成表示手段に用いる場合にはリアルタイムで撮影された動画が扱いやすいが、いずれでも利用可能である。また、後述するＧＰＳ機能２６により、前記映像情報を撮影した地点の情報を前記映像情報に埋め込むか、または連携できる情報として保持して、前記映像情報とともに送信可能な状態にできることが望ましい。さらに、焦点距離やホワイトバランス、露出などの撮影時の状況を含んでいてもよい。焦点距離はと画像中の大きさと比較解析することで対象の実際の大きさを算出することができる。ホワイトバランス等を含むことで撮影された対象の実際に近い色彩を算出することができる。いずれも解析、抽出の際に有用な情報となる。特にインカメラにおける情報はユーザ本人が映るケースが多く、ユーザの情報を解析する際に有益となる。

【0023】

さらに、情報取得端末１１は、前記映像情報を含む映像を画面表示する表示機能２３を有する。具体的には、液晶や有機ＥＬなどのカラー表示できるディスプレイを有するとよい。また、メガネ型端末などで用いる透過型ディスプレイでもよい。

【0024】

さらにまた、情報取得端末１１は、存在位置に基づく情報を取得する周囲確認機能２４を有する。この周囲確認機能２４としては、近距離無線通信機能２５と、ＧＰＳ機能２６とがあり、両方備えていることが望ましい。ここで存在位置に基づく情報とは、存在位置そのものを示す数的データだけでなく、周囲に存在する物品や静物、景色の映像情報や周囲に存在する他の端末その他の機器による情報など、存在位置の周囲にある情報も含む。

【0025】

上記の近距離無線通信機能２５は、近くにある別の情報取得端末１１やその他の無線通信機器との間で情報のやり取りができる機能である。具体的には、電力消費や到達距離の点からBluetooth通信を用いると好ましい。また、IEEE802.11xによる無線ＬＡＮ通信機能を用いてもよい。これらの近距離無線通信機能２５により、通信可能範囲に存在するトークンや他の情報取得端末１１、その他の機器からの情報を受け取り、周囲に存在する機器の情報や、それらの機器が有する位置情報などを取得することができる。また、無線ＬＡＮ機能により接続するアクセスポイントから、当該アクセスポイントが存在する位置に従った位置情報を取得してもよい。

【0026】

上記のＧＰＳ機能２６は、一般的なＧＰＳ（Global Positioning System）又はそれに類する衛星測位システムによって当該情報取得端末１１が存在する位置情報を取得する機能である。

【0027】

このような機能を有する情報取得端末１１としては、スマートフォン、タブレット、スマートグラスなどを用いることができる。ただしこれらに限定されるものではなく、上記の機能を有するものであれば上記以外の種類の端末でも利用可能である。情報取得端末１１は、図示しないが演算部と記憶部と操作部を有し、さらに上記の機能についてのハードウェアを有する。スマートフォンやタブレットの場合、操作部は表示機能２３と一体化していてよい。これらの端末に、情報取得端末用アプリケーションを導入することで、情報取得端末１１として実行させる。

【0028】

この情報取得端末用アプリケーションによって情報取得端末１１は次のような機能を有する。まず、後述する情報提供サーバ１２によって発行されたアカウント情報を有する。アカウント情報を情報提供サーバ１２に発行させるため、ユーザは操作部からプロフィール情報を入力可能であり、このプロフィール情報を送信可能であるとよい。ただし、アカウント情報の登録は情報取得端末１１から行ったものである必要はなく、別途発行済みのアカウントを流用するものでもよい。いずれにせよ発行されたアカウント情報はユーザを識別可能なＩＤを含む。これらの情報は情報提供サーバ１２にも登録されるとよい。情報取得端末１１は、情報提供サーバ１２に問い合わせるにあたり、このアカウント情報による認証を一度は行い、アカウント情報に基づいてサービスを受ける。

【0029】

情報取得端末１１は、周囲確認機能２４により、存在位置判別情報を取得する存在位置判別手段を実行可能である。ここで存在位置判別情報としては、ＧＰＳ機能２６によって得られる緯度経度情報や、近距離無線通信機能２５によって得られる周囲に存在する端末等の情報などが挙げられ、用途によって使い分けるとよく、両方を含んでいてもよいし、その他の情報を含んでいてもよい。ただし、ＡＲの精度の点から、ＧＰＳ機能２６による緯度経度情報を含むことが望ましい。

【0030】

情報取得端末１１は、上記のＧＰＳ機能２６によって取得された緯度経度情報とそれを取得したタイムスタンプを、所定の時間間隔で情報提供サーバ１２に自動的にアップロードする位置情報報告手段を備えていると望ましい。その情報取得端末１１が存在する位置、すなわち情報取得端末１１を有しその情報取得端末１１にアカウント情報を登録したユーザが存在する最新の位置情報を情報提供サーバ１２に伝えることで、当該ユーザ自身をマーカとして利用することができる。この位置情報報告手段は常駐する機能として動作され、ユーザが操作していなくても所定の時間間隔で送信されるようにしておくことが望ましい。

【0031】

情報取得端末１１は、上記のカメラ機能で撮影した前記映像情報を情報提供サーバ１２にアップロードする映像アップロード手段を有すると好ましい。この映像情報が位置情報とともに情報提供サーバ１２に登録されることで、その位置情報が示す地点の特徴を抽出する材料とすることができる。

【0032】

情報取得端末１１は、情報提供サーバ１２に、前記アカウント情報とともに、前記映像情報と前記存在位置判別情報とを送信する周囲情報送信手段と、情報提供サーバ１２からの返信であるＡＲ情報を受信する周囲情報受信手段とを実行可能である。なお、以降の説明で周囲情報送信手段と周囲情報受信手段とをまとめて周囲情報問合手段と説明することがある。

【0033】

情報取得端末１１は、前記カメラ機能で撮影した前記映像情報に、前記ＡＲ情報による付加情報を合成した映像を前記表示機能で表示させる合成表示手段を実行可能である。合成処理を情報取得端末１１で行うと通信量を低減でき、情報提供サーバ１２の負荷を抑制できる。一方、合成処理を情報提供サーバ１２で行って合成された映像を情報取得端末１１に送って表示すると情報取得端末１１の処理量を抑制できる。合成する方法としては、写真や動画である周囲の映像に送られた画像をスプライト表示したり、文字情報やウインドウ、メーターなどのオブジェクトを描画したり、背景となる映像情報にフィルタを掛けたりといった、目に見える変化を加えることが挙げられる。具体的な使い方としては、例えばカメラで撮影した範囲に存在する対象が何であるか、又は誰であるかといったことが文字情報やアイコンなどの形で表示される実施形態が挙げられ、それらが有する属性情報も表示されると好ましい。また、一旦表示された画面のオブジェクト等に対して前記操作部から操作を加えることで、合成表示される内容を書き換えてもよい。例えばウインドウを拡大して表示される記載文章を詳細表示させたり、スクロールさせたり、対象となる人物との間のチャット情報等の入力パネルを表示させたりすることができる。

【0034】

このような情報取得端末１１が、ネットワーク１３を介して通じて情報提供サーバ１２に多数接続される。情報提供サーバ１２は、対象が存在する位置情報とその対象の属性を示す属性情報とを含む対象情報データベース４５を有する。個々の対象には識別可能なＩＤが割り当てられていることが必要となる。前記位置情報には上記のＧＰＳ機能２６と同様の緯度経度情報を用いると相互参照し易いため好ましい。前記属性情報としては、その対象を撮影した映像情報を含んでいてもよく、映像情報から抽出した特徴情報を含んでいてもよい。また前記属性情報としては、個々に入力又は一括入力された大きさや色、形状等に関する情報といった外観に関する情報だけでなく、対象の設立年月日や製作者などの来歴に関する情報などを含んでいてもよく、現実空間と重ね合わせる仮想空間上で出現させるオブジェクトの情報を含んでいてもよく、特に限定されない。ただしその中でも、ＡＲ情報として合成しやすい名称や略称、内容の要約が含まれていると本発明で扱いやすく好ましい。

【0035】

対象情報データベース４５としては、ユーザのアカウント情報又はそれと紐付けできる情報を含み、ユーザ自身に関する情報であるユーザＩＤデータベース４６を含んでいると好ましい。ユーザＩＤデータベースの例を図２のテーブルに示す。ユーザＩＤは対象を識別するＩＤである。人物以外のＩＤとは区別されていてもよい。ＧＰＳ情報及びタイムスタンプは上記のＧＰＳ機能２６によって取得された緯度経度情報とその情報を取得した年月日時分秒とである。これらの位置に関する情報は情報取得端末１１の存在する最新の位置を示す。身長、体重、性、メガネの有無や種類、肌の色、髪の色やスタイルなどは、ユーザが自発的に入力する情報を用いてもよいし、ユーザがアップロードした所謂自撮り写真となる自身が映った写真を解析して得られた情報を用いてもよい。身長や体型は上記映像情報に含まれる焦点距離と写真内における長さから概算値を求めることができる。また、横幅と身長から体重の概算値を求めることもできる。さらに、導入可能な顔認証技術によって個々のユーザの顔の特徴量を抽出してデータとして登録するものでもよい。その他、ユーザがプロフィールとして登録する情報や、ゲームサービスやＳＮＳサービスにおけるアカウントと紐付けられた情報を含んでも良い。また、それらの情報を総合した重み付けを行って加算可能なニューラルネットワーク等の技術による判定手段に結びつけてもよい。

【0036】

また、対象情報データベース４５としては、ユーザＩＤデータベース４６の他に、人間以外の移動する対象について記録した動的対象データベースを有していてもよい。動的対象データベースの対象としては、自動車や電車などの車両、船舶、航空機、野生動物などが挙げられる。ただし、外観から対象をある程度特定できるか、搭載した無線通信端末等からの通信で対象のＩＤを含む属性情報を取得できるものであると好ましい。車両や船舶、航空機であれば型番は機種と形状の特徴等を記録する。野生動物であればその生物の外観的特徴を記録する。

【0037】

さらに、対象情報データベース４５としては、基本的に移動しない対象の情報を記録した静的対象データベース４７を有していてもよい。このような移動しない対象としては、看板、モニュメント、銅像、石碑、建築物、壁画、地上絵、標識、構造物などが挙げられるが特に限定されない。これらの情報は基本的に移動しないため、位置情報として固定の緯度経度情報を有しているとよい。また、外観等についての判別に用いることができる特徴量の情報や、来歴等を示すテキスト情報などを含む対象の属性を示す属性情報を有していてもよい。この属性情報の一部又はそれを補強する情報として、その対象を撮影した写真や設計図、３Ｄデータなどを有していてもよい。さらに、ＡＲ情報として情報取得端末１１の表示機能で表示させるための描画用３Ｄデータを有していてもよい。対象の映像に重ねて描画することで、上記合成表示手段によって実際とは異なる姿として表示させることが可能となる。このような静的対象データベース４７の情報はサービス開始時点で地図情報とともに予め登録しておくと望ましい。また、サービス開始後には随時更新できるようにしておくとよい。

【0038】

また、情報提供サーバ１２（以下、サーバ１２と称する場合もある。）は、情報取得端末１１から送信されて取得した前記映像情報から、対象情報データベース４５を参照して前記映像情報に含まれる対象を特定する対象特定手段を実行する。前記映像情報に映っているのが人物であれば、顔認証技術やその他の認識方法により特徴量を抽出する。その特徴量に基づき、ユーザＩＤデータベース４６において重み付けをした判定手段を実行して、最も評価値の高いユーザを算出し、そのユーザを特定した人物の候補として扱う。一方で、前記判定手段を実行して最も評価値の高いユーザでも閾値を超えなかったときは、判定しきれず該当者無しとして扱うとよい。前記映像情報に映っているのが人間以外の移動する対象であれば、前記動的対象データベースを参照して対象を判別する。前記映像情報に映っているのが移動しない対象であれば、静的対象データベース４７を参照して対象を判別する。判別の結果、その対象が判定されたものであるとの信頼性についてのパラメータが閾値を超えていれば、その対象は判定されたものであると特定する。

【0039】

その上でサーバ１２は、特定された対象の前記属性情報をＡＲ情報として、前記映像情報を送信してきた該当する情報取得端末１１に返信する属性情報返信手段を実行する。前記映像情報に複数の対象が映っている場合は、どの座標のどの対象が特定されたものであるかの情報を含んでいると好ましい。また、サーバ１２側でＡＲ情報を元の前記映像情報に重ね合わせた映像をＡＲ情報として返信してもよい。返信に含まれるＡＲ情報としては、名称その他のテキストデータや重ねて表示する３Ｄデータ、アイコン、ゲームとして取得できるアイテムやゲームとして戦闘できる相手の情報など、特に限定されない。

【0040】

この発明にかかるシステムを実行する手順例を図３のシーケンス図及び図４〜図７のフローチャートとともに説明する。まず（Ｓ１０１）、情報取得端末１１にアプリケーションをインストールする。このアプリケーションはサーバ１２から配布されたものでもよいし、アプリケーション配布サイトからダウンロードしたものでもよいし、サーバ１２が提供するｗｅｂページ上のｗｅｂアプリでもよい。アプリケーションを実行し、操作部からの入力により前記アカウント情報となる希望するユーザＩＤとパスワード、及び申請してもよい個人の特徴として属性情報を記録する。図示しないが、カメラ機能により自撮り写真を属性情報に追加してもよい。また、当該ユーザが他のユーザによって把握されたとき、ＡＲ情報として取得させてもよい情報をＡＲ表示情報として属性情報に含める。さらに、ＧＰＳ機能２６により位置情報を取得する。この位置情報により所属国などを判断することができる。これらの情報をまとめてサーバ１２に送信してアカウントの作成を求める個人情報報告手段を実行する（Ｓ１０２）。

【0041】

このアカウント作成の申請を受けたサーバは、内容を確認の上でアカウントを作成し、送信された前記属性情報を前記位置情報とともにユーザＩＤデータベース４６に登録する個人情報登録手段を実行し、認証したユーザＩＤを払い出し返送する（Ｓ１０３）。情報取得端末１１は、返送されたユーザＩＤ（Ｓ１０４）をアカウント情報として設定し（Ｓ１０５）、以降の応答ではこのユーザＩＤとともに通信を行う。

【0042】

設定後は、アプリケーションが情報取得端末１１で常駐し、上記の位置情報報告手段を定期的に実行して、ユーザＩＤとともに位置情報を定期的にサーバ１２へ報告する（Ｓ１１１）。これを受信したサーバ１２は、ユーザＩＤデータベース４６に登録された当該ユーザＩＤの位置情報とタイムスタンプを更新する位置情報更新手段を実行する（Ｓ１１２）。また、このときにＡＲ表示情報などその他のユーザに関する情報を併せて送信して、適宜更新されるような構成でもよい。

【0043】

また、他の情報取得端末１１の近距離無線通信機能２５による問い合わせを受けた場合、送信可能なプロフィール情報としてユーザＩＤを含み公開可能なＡＲ表示情報を、他の情報取得端末１１に送信する自己情報通知手段を実行する（Ｓ１１３）。

【0044】

次に、ＡＲ合成時の手順例を示す。情報取得端末１１のアプリケーションを起動して、周囲確認機能２４により、存在位置判別情報を取得する（Ｓ１２１）。ここでは近距離無線通信機能２５であるBluetooth通信により、通信可能な範囲に存在する同じアプリケーションが常駐している他の情報取得端末１１が上記の自己情報通知手段により通知する情報として、周囲に存在する同一サービスの利用者のユーザＩＤ（群）を取得する。また、ＧＰＳ機能により取得する位置情報を取得する。また、カメラ機能によりＡＲ情報を得ようとする対象物（人物）にレンズを向けて撮影する（Ｓ１２２）。このときの概念図を図４に示す。中心にいるのが情報取得端末１１を持ち撮影しようとするユーザであり、同心円はBluetooth通信が可能な範囲である。この範囲にいる人物であれば、カメラ機能２２で撮影することで人物の特定が可能な程度の距離にいることになる。その上で、撮影した映像情報に、周囲にいるユーザＩＤ（群）と位置情報とを付して送信する周囲情報送信手段を実行する（Ｓ１２３）。

【0045】

情報取得端末１１からの映像情報を取得したサーバ１２は、映像情報に映っている対象を特定する対象特定手段を実行する（Ｓ１２４）。具体的内容としては複数の手段を併用する。まず、映像自体の内容から、映っている人物について顔認証を行ったり、身長、性別、肌や髪の色、メガネの有無などの特徴量を判定し、ユーザＩＤデータベース４６に登録されたユーザの情報との一致性が高いユーザを抽出する。また、近距離無線通信機能２５で取得された周囲にいるユーザＩＤ（群）と、ＧＰＳ機能による位置情報から絞り込まれるユーザＩＤを抽出する。位置情報による抽出とは、Ｓ１２３で送られたその情報取得端末１１の位置情報と、Ｓ１１３の自己情報通知手段によって定期的に更新される各々のユーザの存在位置である位置情報との物理的距離が所定の距離よりも小さいものを選び出すことで、近くにいるユーザを絞り込むことが挙げられる。絞り込んだユーザの中から、一致性を示す評価値が閾値以上であるものを当該ユーザであると特定する対象特定手段を実行し、当該ユーザＩＤのＡＲ情報を抽出する。このＡＲ情報を情報取得端末１１に返信する属性情報返信手段を実行する（Ｓ１２５）。

【0046】

情報取得端末１１は、このサーバ１２からの返信であるＡＲ情報を受信する周囲情報受信手段を実行し、カメラ機能２２で撮影した前記映像情報に、受信したＡＲ情報による付加情報を合成した映像を表示機能２３で表示させる合成表示手段を実行する（Ｓ１２６）。この映し出す映像は、情報取得端末１１の向きをジャイロセンサなどで検知して映し出される映像内における特定した対象の位置の変化を演算して重ね続けてもよい。

【0047】

このように撮影した映像情報に含まれる対象を特定する手順の実施形態例を図５〜図７のフローチャートとともに説明する。図５は全体の概要である。Ｓ２０１は情報取得端末１１でアプリケーションを起動して行う工程である。カメラ機能２２により対象を含む映像情報を撮影する（Ｓ１２２）とともに、近距離無線通信機能２５とＧＰＳ機能２６とによる周囲確認機能２４で周囲のユーザＩＤと位置情報とを取得する（Ｓ１２１）。情報取得端末１１はそれらの情報を纏めてサーバ１２に送信する（Ｓ２０２，Ｓ１２３）。サーバ１２では、受信した情報から映像情報に含まれる対象であるユーザを、ユーザＩＤデータベース等により抽出し、該当するユーザのＡＲ情報を情報取得端末１１に返信する（Ｓ２０３、Ｓ１２４，Ｓ１２５）。情報取得端末１１では受信したＡＲ情報を映像情報に合成して表示機能２３で表示する（Ｓ２０４、Ｓ１２６）。

【0048】

このうち、サーバ１２での処理例を図６とともに説明する。この例は、映像情報からだけでは対象を特定出来ない場合に、BluetoothによるユーザＩＤやＧＰＳ情報を併用することで、ＡＲマーカとして機能できるようにする例である。まず（Ｓ２１１）、情報取得端末１１から情報を取得する（Ｓ２１２）。この得られた情報のうち、まず映像情報のみで映っている人物について顔認証を行い、該当する可能性のあるユーザを抽出する（Ｓ２１３）。この抽出の際に、重み付けに基づいた評価値を求め、予め設定しておいた閾値を超えたか否かを判定する（Ｓ２１４）。この閾値を超えていれば（Ｓ２１４→Ｙｅｓ）、映っている人物が該当するユーザであると特定できるので、そのユーザのＡＲ情報を情報取得端末１１に送信する（Ｓ２１５）。

【0049】

一方、顔認証だけでは特定出来ない場合（Ｓ２１４→Ｎｏ）、次に、ユーザＩＤデータベース４６のその他の情報を参照し、身長や肌の色などのその他の情報を映像情報から取得して、それらの特徴量について評価値を求めてポイントを加算し（Ｓ２２１）、予め設定しておいた閾値を超えたか否かを判定する（Ｓ２２２）。ここで、閾値を超えていれば（Ｓ２２２→Ｙｅｓ）、特定したユーザのＡＲ情報を情報取得端末１１に送信する（Ｓ２１５）。一方、なおも閾値を超えていなければ（Ｓ２２２→Ｎｏ）、さらに、情報取得端末１１の位置情報と、抽出されたがなお特定されていないユーザの最新の位置情報とを比較してポイントを加算し（Ｓ２２３）、予め設定しておいた閾値を超えたか否かを判定する（Ｓ２２４）。これで閾値を超えれば（Ｓ２２４→Ｙｅｓ）、特定したユーザのＡＲ情報を情報取得端末１１に送信する（Ｓ２１５）。なおも閾値を超えていなければ（Ｓ２２４→Ｎｏ）、近距離無線通信機能２５（Bluetooth機能）による相互通信が可能か否かを問い合わせてユーザＩＤが取得できるようならば、当該ユーザＩＤのその他の情報を参照してポイントを加算し（Ｓ２２５）、予め設定しておいた閾値を超えたか否かを判定する（Ｓ２２６）。なお、これがBluetooth通信の場合、有効通信距離は概ね１０ｍ以内であり、しかも間に障害物があると通信に失敗する可能性が高いため、相互通信が可能であればほぼ確実に映像の撮影が可能な位置関係にある。これで閾値を超えれば（Ｓ２２６→Ｙｅｓ）、特定したユーザのＡＲ情報を情報取得端末１１に送信する（Ｓ２１５）。それでもなお閾値を超えていなければ（Ｓ２２６→Ｎｏ）、映像情報に映った人物に該当するユーザが存在しないと情報取得端末１１に送信する（Ｓ２２７）。

【0050】

この発明を利用するユーザは、プライバシーの管理上、アプリケーションの設定によりBluetooth機能やGPS機能を任意でオンオフできることが望ましい。このため、一のユーザが他のユーザを撮影してＡＲ情報を取得しようとしたとしても、当該他のユーザではそれらのBluetooth機能やGPS機能をオフにして、ユーザＩＤデータベース４６にそれらの情報が登録されていない場合がある。このため他のユーザのユーザＩＤの取得や位置情報は参考情報として扱い、主要な絞り込みは顔認証及び体型等の外観からわかる情報を優先して行うと好ましい。

【0051】

なお、サーバ１２による判定回数を抑制する場合、図７のようなフローで行っても図６に近い結果を得ることができる。このフローではまず（Ｓ２５１）、ユーザＩＤから該当ユーザを抽出してポイントを加算する（Ｓ２５２）。これはＳ２２５に対応する処理である。次に、ユーザＩＤデータベース４６のＧＰＳ情報からポイントを加算する（Ｓ２５３）。これはＳ２２３に対応する処理である。さらに、画像認証からユーザを抽出する（Ｓ２５４）。これはＳ２１３に対応する処理であるが、Ｓ２１３では候補となるユーザが多数いる状況で比較を行うのに対して、ある程度対象者を絞り込んだ上で画像認証を行うため、演算の対象となる母数を減らすことができ、負荷を低減することができる。さらにまた、画像データから得られる特徴量からポイントを加算する（Ｓ２５５）。これはＳ２２１に対応する処理である。以上のポイント加算を行った上で、ユーザ特定の閾値を超えたか否かを判定する（Ｓ２５６）。閾値を超えれば（Ｓ２５６→Ｙｅｓ）、特定したユーザのＡＲ情報を情報取得端末１１に送信する（Ｓ２５７）。閾値を超えていない場合（Ｓ２５６→Ｎｏ）、一度目はＳ２５３に戻り、二度目はＳ２５４に戻り、ポイントを加算する処理を行う。三度目でも閾値を超えなかったら（Ｓ２５６→Ｎｏ）、該当するユーザが存在しない旨の情報を情報取得端末１１に送信する（Ｓ２５８）。

【0052】

この発明の実施形態として、人物ではなく静的対象について特定を行う例を示す。情報取得端末１１でサービスを受けられるように、静的対象データベース４７について予め準備を行う。提供するサービスとしては、宝探しゲームや謎解きゲームなどが挙げられる。サービス提供を行う実行者は、当該サービスの実施場所である現地に赴き、ＡＲマーカとして利用する対象物の写真を撮影して映像情報を取得する。このとき映像情報とともに、ＧＰＳ機能を利用して位置情報も取得する。さらに、撮影時に分かる範囲で画像から得られる特徴量やその他の情報を、撮影を行う端末に入力する。例えば存在する場所の周囲のヒントや対象の色、形状についての記述が挙げられる。これらの映像情報、位置情報、特徴量、その他の情報をまとめて、静的対象としてのＩＤを付して静的対象データベース４７に登録する。サービス実行時には、ユーザが情報取得端末１１で撮影した映像情報に含まれる対象と、静的対象データベース４７に登録した情報とを対比して、目標物が設定通りに撮影されるクリア条件を満たすか否かを判別する。

【0053】

このように静的対象の位置情報をＡＲマーカとして利用する場合、ＧＰＳ機能の仕様による誤差をある程度許容しなければならないのが従来の問題点であった。しかし、上記のように、映像情報を含む静的対象データベース４７を構築することで、その場の状況や光景を踏まえて解析ができるため、ＡＲマーカとしての位置精度は大きく向上する。

【0054】

一方、コンビニエンスストアやファミリーレストランなどの大規模展開されたチェーン店の看板は、それぞれはほぼ同一の規格で製造されており、それらを撮影した映像情報だけでは特異性のあるデータとならない。しかし、それらの映像情報にＧＰＳ機能による位置情報を付加することで、ＡＲマーカとして利用することができるようになる。

【0055】

さらに、撮影した映像情報には方向（方角）の情報が含まれることになる。これにより、単純にその場に近づくだけの条件でＡＲ情報を表示するのではなく、特定の方角から情報取得端末１１で撮影した映像情報との間で情景がある程度の評価値以上に一致していない限りＡＲ情報を表示させない、といった設定が可能になる。例えば、西側から目標を撮影した映像情報にのみ、ＡＲ情報が表示される、といったことができる。このような設定をする場合の処理としては、図３のシーケンス図のフローにおいてユーザＩＤデータベース４６の代わりに静的対象データベース４７を用いるものとし、Ｓ１２４のような対象を特定してＡＲ情報を抽出する条件の際に、ＡＲ情報を送ってよいか否かの判断として方角を条件として追加することで実現できる。

【0056】

さらに他の実施形態について説明する。ユーザＩＤデータベース４６に登録するユーザ情報として、ユーザが自己アピールとして積極的に公開したい情報を属性情報として登録する。この属性情報をＡＲ情報として積極的に開示することで、マッチングイベント、人材交流イベント、転職イベント、アイドルやモデル等の審査イベントなど多種多様な交流型イベントにおいて、名刺を交換するまでもなく自分の情報を他社の情報取得端末１１に送り込んで表示させることができる。

【0057】

この場合、上記と同様のシステムに加えて、周囲にいる他のユーザに対して、ユーザＩＤなどの属性情報の一部を送信するユーザ告知手段を実行可能であるとよい。その一連の処理の概念図を図８に示す。また、シーケンス図を図９に示す。この手順は、基本的にはＳ１１１までの登録手続や常駐機能の起動が終わっている状態で、Ｓ１２１のＡＲ合成が行われる前段階に対応する。プロフィール入力の段階（Ｓ１０１）で、又はその後の情報提供サーバ１２に対してユーザ認証を踏まえた修正（図示しないがＳ１１１に前後する）によって、そのイベントで公開したい属性情報をユーザＩＤデータベース４６に登録しておく（Ｓ３０１）。具体的には、属性情報として登録した情報の中から、その場で公開してもよい情報にチェックを入れて選択したり、その場で公開してもよいように内容を修正したりする。また、その場の状況に合わせたアピール文などのメッセージを登録してあってもよい。さらに、その場で撮影した上記映像情報をアップロードしたり、その前記した他の実施形態で実行しているＡＲ情報を合成したその場の情報を含む合成した映像をアップロードして、その場に自分がいることをアピールできるようにしてもよい。なお、そのイベント専用で設定するサービスとして実行する場合、プロフィールの入力の際に（Ｓ１０１）、公開したい属性情報まで指定しておいてもよい。

【0058】

また、属性情報とともに、告知しようとするユーザの条件である送信対象制限情報を指定できると好ましい（Ｓ３０２）。例えば、マッチングアプリとして用いるときに、年収や身長、性格その他の好みとする相手の基準を指定したりすることができる。また、遠すぎる相手に告知する無駄をはぶくため、距離を指定できるようにしてもよい。これらの条件はユーザＩＤデータベース４６の主要テーブルと一体のテーブルでもよいし、連携させた別のテーブルであってもよい。

【0059】

その上で、自己アピールしようとするユーザは端末によって情報提供サーバ１２に対して、近くにいる他のユーザに自己を告知するためのマルチキャストを行う指示であるマルチキャスト依頼を送信するマルチキャスト依頼手段を実行する（Ｓ３１１）。ここで用いる端末は、情報提供サーバ１２に所定のパケットを送る機能さえあれば実行可能であるため情報取得端末１１でなくてもよい。ただし、この発明にかかる情報提供システムを利用するため、ほぼ必然的にユーザは情報取得端末１１を利用することになり、実際の利用では情報取得端末１１がこの役目を担っていてよい。その場合、ユーザＩＤとともに、属性情報のうちＡＲ機能で他のユーザの情報取得端末１１に表示させようとする一部の情報を指定したり、追加で通知したい属性情報自体を含んでいてもよい。また、送信したいユーザを絞り込む条件を指定してあってもよい。例えば読者モデルとしての選抜アピールをしたい場合は、他の読者モデルであるユーザにマルチキャストしても意味がなく、スカウトマンであるユーザを限定してマルチキャスト対象とすることになる。

【0060】

上記のマルチキャスト依頼を受信した情報提供サーバ１２は、マルチキャスト依頼を送信したユーザが登録した情報について、ユーザＩＤデータベース４６において予め公開するように指定された属性情報を抽出するとともに、送信する対象となるユーザを絞り込むマルチキャスト抽出手段を実行する（Ｓ３２１）。全ユーザへの送信は基本的に無駄となりやすく、基本的にはユーザＩＤデータベース４６に登録されている位置情報と、マルチキャスト依頼を送信した端末（情報取得端末１１）の位置情報とを比較して、所定の距離の範囲にいるユーザをリストアップする。ただし、例えば推理探偵作品のイベントのように犯人役となるユーザを捜索させようとするために、撮影される範囲外にいる他のユーザに対してもマルチキャストするようにする実施形態でもよく、距離の条件はサービスの内容によって適宜決定されてよい。

【0061】

また、属性情報を抽出する際に、マルチキャストの際に表示される要約となる情報と、カメラ機能で捕捉された後にＡＲ情報として開示する情報とをそれぞれ別に決定しておくとよい。マルチキャストの際に全情報を開示したのではカメラ機能で探す意味がなくなるからである。

【0062】

上記の抽出を踏まえて、対象となる他のユーザの情報取得端末１１に対して、抽出した要約となる情報をマルチキャストするマルチキャスト通知手段を実行する（Ｓ３２２）。図８では依頼主であるユーザの至近距離にいることがユーザＩＤデータベース４６における最新の位置情報で確認できるユーザの情報取得端末１１に送るケースを示す。マルチキャストを受信した情報取得端末１１はその旨を通知として表示機能２３に表示し、ユーザの選択操作によって表示されるべき要約を表示する（Ｓ３２３）。これによって、マルチキャスト依頼を送信したユーザの概要が示され、このような人物が周囲にいる、と他のユーザに告知し、カメラ機能２２で撮影すべく捜索を促すことができる。

【0063】

マルチキャストを通知された情報取得端末１１のユーザは、カメラ機能２２を起動して周囲を撮影し、ＡＲ情報を取得する（Ｓ３３１）。この際の処理はＳ１２１以降の手順と同様である。ただし、マルチキャスト依頼を出した情報取得端末１１のユーザを撮影した際に表示される内容は、あらかじめマルチキャスト依頼をしたユーザが属性情報について設定、選択したように表示される。

【符号の説明】

【0064】

１１ 情報取得端末
１２ 情報提供サーバ
１３ ネットワーク
２１ 通信機能
２２ カメラ機能
２３ 表示機能
２４ 周囲確認機能
２５ 近距離無線通信機能
２６ ＧＰＳ機能
４５ 対象情報データベース
４６ ユーザＩＤデータベース
４７ 静的対象データベース

【要約】

【課題】特異性のあるＡＲマーカを取り付けていない対象の画像しか得られない状況において、スマートフォンやタブレット等のカメラ付き情報取得端末から得られる情報を付加して対象を特定可能にし、当該対象の付加情報を取得できるようにする。
【解決手段】対象が存在する位置情報とその対象の属性を示す属性情報とを含む対象情報データベース４５を備え、情報取得端末１１が撮影した映像情報から、対象情報データベース４５を参照して前記映像情報に含まれる対象を特定し、特定された対象の前記属性情報をＡＲ情報として情報取得端末１１に送信して、情報取得端末１１は撮影した映像情報に当該ＡＲ情報を合成して表示させる。
【選択図】図１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】