特許 5684178 情報処理システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5684178

(24)【登録日】2015年1月23日

(45)【発行日】2015年3月11日

(54)【発明の名称】情報処理システム

(51)【国際特許分類】

   G06Q 30/02 20120101AFI20150219BHJP

【ＦＩ】

   G06Q30/02 150

【請求項の数】16

【全頁数】34

(21)【出願番号】特願2012-67551(P2012-67551)

(22)【出願日】2012年3月23日

(65)【公開番号】特開2013-200633(P2013-200633A)

(43)【公開日】2013年10月3日

【審査請求日】2013年7月11日

(73)【特許権者】

【識別番号】306029774

【氏名又は名称】ビッグローブ株式会社

(74)【代理人】

【識別番号】100084250

【弁理士】

【氏名又は名称】丸山 隆夫

(72)【発明者】

【氏名】宮田 美知太郎

【審査官】 青柳 光代

(56)【参考文献】

【文献】 特開２００４−２５１７５２（ＪＰ，Ａ）

【文献】 特開２００９−２４５３９０（ＪＰ，Ａ）

【文献】 特開２０１２−０１４６０６（ＪＰ，Ａ）

【文献】 特開２０００−２３０８０６（ＪＰ，Ａ）

【文献】 特開２００９−２８８８２５（ＪＰ，Ａ）

【文献】 特開２００９−２７７２２４（ＪＰ，Ａ）

【文献】 特開２００８−１９３６４０（ＪＰ，Ａ）

【文献】 特表２００８−５０１１８４（ＪＰ，Ａ）

【文献】 佐藤 祐一 他，ＲＦＩＤを用いた成長型戦略型カードゲームの開発，第７２回（平成２２年）全国大会講演論文集（４） インタフェース コンピュータと人間社会，２０１０年 ３月 ８日， ｐ．４−８７３〜４−８７４

【文献】 瀬戸原 弘通 他，拡張現実感におけるインタラクションツール Interaction Tools in Augmented Reality，電子情報通信学会技術研究報告 ，日本，社団法人電子情報通信学会 ，２００４年 ９月２９日，第103巻第351号，ｐ．１−４

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｑ １０／００−５０／３４

(57)【特許請求の範囲】

【請求項1】

タグ識別情報が書き込まれた情報記憶媒体が１つの面に配置され、該面に所定の識別画像が表示された情報提供媒体と、
前記情報提供媒体の前記情報記憶媒体が配置された面の少なくとも一部を撮影する撮影表示装置と、
前記撮影表示装置が撮影した第１の画像の中で、前記識別画像を識別し、該第１の画像の中の該識別画像の相対位置に基づいて空間座標系を生成し、該生成した前記空間座標系上の座標範囲を送信する通信端末と、
前記通信端末から送信されてきた座標範囲に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信するサーバとを有し、
前記通信端末は、前記サーバから送信されてきた前記第２の画像を前記撮影表示装置の前記表示座標に基づいた位置に表示させ、前記情報記憶媒体から前記タグ識別情報を読み取り、該読み取ったタグ識別情報を前記サーバへ送信し、
前記サーバは、前記通信端末から送信されてきた前記タグ識別情報に基づいて、所定の処理を行う情報処理システム。

【請求項2】

請求項１に記載の情報処理システムにおいて、
前記通信端末は、座標範囲を送信する際、当該通信端末または利用者を識別するための利用者識別情報を前記サーバへ送信し、
前記サーバは、前記座標範囲と前記利用者識別情報とに応じた第２の画像を前記通信端末へ送信することを特徴とする情報処理システム。

【請求項3】

請求項１または請求項２に記載の情報処理システムにおいて、
前記サーバは、前記空間座標系上の座標と前記第２の画像とをあらかじめ対応付けて記憶しておくことを特徴とする情報処理システム。

【請求項4】

タグ識別情報が書き込まれた情報記憶媒体が１つの面に配置され、該面に所定の識別画像が表示された情報提供媒体と、
前記情報提供媒体の前記情報記憶媒体が配置された面の少なくとも一部を撮影する撮影表示装置と、
前記撮影表示装置が撮影した第１の画像を取得し、該取得した第１の画像を送信する通信端末と、
前記通信端末から送信されてきた前記第１の画像に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信するサーバとを有し、
前記通信端末は、前記サーバから送信されてきた前記第２の画像を前記撮影表示装置の前記表示座標に基づいた位置に表示させ、前記情報記憶媒体から前記タグ識別情報を読み取り、該読み取ったタグ識別情報を前記サーバへ送信し、
前記サーバは、前記通信端末から送信されてきた前記タグ識別情報に基づいて、所定の処理を行う情報処理システム。

【請求項5】

請求項４に記載の情報処理システムにおいて、
前記サーバは、前記第１の画像の中で、前記識別画像を識別し、該第１の画像の中の該識別画像の相対位置に基づいて、前記第１の画像内で空間座標系を生成し、該生成した空間座標系に応じた第２の画像を前記通信端末へ送信することを特徴とする情報処理システム。

【請求項6】

請求項５に記載の情報処理システムにおいて、
前記通信端末は、前記第１の画像を送信する際、当該通信端末または利用者を識別するための利用者識別情報を前記サーバへ送信し、
前記サーバは、前記空間座標系上の座標と前記利用者識別情報とに応じた第２の画像を前記通信端末へ送信することを特徴とする情報処理システム。

【請求項7】

請求項５または請求項６に記載の情報処理システムにおいて、
前記サーバは、前記空間座標系上の座標と前記第２の画像とをあらかじめ対応付けて記憶しておくことを特徴とする情報処理システム。

【請求項8】

請求項１から７のいずれか１項に記載の情報処理システムにおいて、
前記撮影表示装置は、前記第１の画像と前記第２の画像とを重ね合わせて表示することを特徴とする情報処理システム。

【請求項9】

通信端末であって、
当該通信端末と接続された撮影表示装置が撮影した第１の画像を取得する取得部と、
前記取得部が取得した第１の画像の中で、所定の識別画像を識別し、該第１の画像の中の該識別画像の相対位置に基づいて空間座標系を生成する空間座標系生成部と、
前記空間座標系生成部が生成した空間座標系上の座標範囲を、当該通信端末と接続されたサーバへ送信する通信部と、
前記サーバから第２の画像と表示座標とが送信されてきた場合、該第２の画像を前記撮影表示装置の該表示座標に基づいた位置に表示させる表示制御部と、
外部に設けられた情報記憶媒体からタグ識別情報を読み取る情報読み取り部とを有し、
前記通信部は、前記情報読み取り部が読み取ったタグ識別情報を前記サーバへ送信する通信端末。

【請求項10】

サーバであって、
タグ識別情報と座標とを対応付けて記憶し、前記タグ識別情報と商品またはサービス、処理機能を示す対象識別情報とを対応付けて記憶し、前記対象識別情報と対象画像とを対応付けて記憶するデータベースと、
前記データベースを用いて、当該サーバと接続された通信端末から送信されてきた座標範囲に基づいて、前記タグ識別情報を検索し、該検索したタグ識別情報に基づいて、前記対象識別情報を検索し、該検索した対象識別情報に基づいて、前記対象画像を検索する検索部と、
前記検索部が検索した対象画像と該対象画像を表示するための表示座標とを前記通信端末へ送信する通信部と、
前記通信端末から送信されてきたタグ識別情報に基づいて、所定の処理を行う制御部とを有するサーバ。

【請求項11】

サーバであって、
当該サーバと接続された通信端末から送信されてきた第１の画像の中で、所定の識別画像を識別し、該第１の画像の中の該識別画像の相対位置に基づいて、前記第１の画像内で空間座標系を生成する空間座標系生成部と、
前記空間座標系生成部が生成した空間座標系に応じた第２の画像と表示座標とを前記通信端末へ送信する通信部と、
前記通信端末から送信されてきたタグ識別情報に基づいて、所定の処理を行う制御部とを有するサーバ。

【請求項12】

タグ識別情報が書き込まれた情報記憶媒体が１つの面に配置され、該面に所定の識別画像が表示された情報提供媒体と、撮影表示装置と、通信端末と、サーバとを有する情報処理システムにおける情報処理方法であって、
前記撮影表示装置が、前記情報提供媒体の前記情報記憶媒体が配置された面の少なくとも一部を撮影する処理と、
前記通信端末が、前記撮影表示装置が撮影した第１の画像の中で、前記識別画像を識別する処理と、
前記通信端末が、前記第１の画像の中の前記識別画像の相対位置に基づいて空間座標系を生成する処理と、
前記通信端末が、前記生成した前記空間座標系上の座標範囲を前記サーバへ送信する処理と、
前記サーバが、前記通信端末から送信されてきた座標範囲に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信する処理と、
前記通信端末が、前記サーバから送信されてきた前記第２の画像を前記撮影表示装置の前記表示座標に基づいた位置に表示させる処理と、
前記通信端末が、前記情報記憶媒体から前記タグ識別情報を読み取る処理と、
前記通信端末が、前記読み取ったタグ識別情報を前記サーバへ送信する処理と、
前記サーバが、前記通信端末から送信されてきた前記タグ識別情報に基づいた所定の処理とを行う情報処理方法。

【請求項13】

タグ識別情報が書き込まれた情報記憶媒体が１つの面に配置され、該面に所定の識別画像が表示された情報提供媒体と、撮影表示装置と、通信端末と、サーバとを有する情報処理システムにおける情報処理方法であって、
前記撮影表示装置が、前記情報提供媒体の前記情報記憶媒体が配置された面の少なくとも一部を撮影する処理と、
前記通信端末が、前記撮影表示装置が撮影した第１の画像を取得する処理と、
前記通信端末が、前記取得した第１の画像を前記サーバへ送信する処理と、
前記サーバが、前記通信端末から送信されてきた前記第１の画像に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信する処理と、
前記通信端末が、前記サーバから送信されてきた前記第２の画像を前記撮影表示装置の前記表示座標に基づいた位置に表示させる処理と、
前記通信端末が、前記情報記憶媒体から前記タグ識別情報を読み取る処理と、
前記通信端末が、前記読み取ったタグ識別情報を前記サーバへ送信する処理と、
前記サーバが、前記通信端末から送信されてきた前記タグ識別情報に基づいた所定の処理とを行う情報処理方法。

【請求項14】

通信端末に、
当該通信端末と接続された撮影表示装置から第１の画像を取得する手順と、
前記取得した第１の画像の中で、所定の識別画像を識別する手順と、
前記第１の画像の中の該識別画像の相対位置に基づいて空間座標系を生成する手順と、
前記生成した空間座標系上の座標範囲を、当該通信端末と接続されたサーバへ送信する手順と、
前記サーバから第２の画像と表示座標とが送信されてきた場合、該第２の画像を前記撮影表示装置の該表示座標に基づいた位置に表示させる手順と、
外部に設けられた情報記憶媒体からタグ識別情報を読み取る手順と、
前記読み取ったタグ識別情報を前記サーバへ送信する手順とを実行させるためのプログラム。

【請求項15】

コンピュータに、
当該コンピュータと接続された通信端末から送信されてきた座標範囲に基づいて、タグ識別情報を、前記タグ識別情報と座標とを対応付けて記憶するタグ位置データベースから検索する手順と、
前記検索したタグ識別情報に基づいて、商品識別情報を、前記タグ識別情報と前記商品識別情報とを対応付けて記憶する対応商品データベースから検索する手順と、
前記検索した商品識別情報に基づいて、商品画像を、前記商品識別情報と商品情報と前記商品画像とを対応付けて記憶する商品情報データベースから検索する手順と、
前記検索した商品画像と該商品画像を表示するための表示座標とを前記通信端末へ送信する手順と、
前記通信端末から送信されてきたタグ識別情報に基づいて、所定の処理を行う手順とを実行させるためのプログラム。

【請求項16】

コンピュータに、
当該コンピュータと接続された通信端末から送信されてきた第１の画像の中で、所定の識別画像を識別する手順と、
前記第１の画像の中の前記識別した識別画像の該識別画像の相対位置に基づいて、前記第１の画像内で空間座標系を生成する手順と、
前記生成した空間座標系に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信する手順と、
前記通信端末から送信されてきたタグ識別情報に基づいて、所定の処理を行う手順とを実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、電子情報の授受を行う情報処理システム、撮影表示装置、通信端末、サーバ、情報処理方法およびプログラムに関する。

【背景技術】

【0002】

近年、広告媒体に添付されたＩＣタグに書き込まれている情報を、タグリーダー機能を具備した携帯端末で読み取り、読み取った情報をサーバへ送信し、サーバにて当該情報に基づいて、画像情報を生成して携帯端末へ送信し、携帯端末にて画像情報を表示する技術が考えられている（例えば、特許文献１参照。）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００９−２８８８２５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、上述した技術においては、広告媒体には常に同じ画像が示されており、柔軟な情報提供を行うことができないという問題点がある。

【0005】

本発明の目的は、上述した課題を解決する情報処理システム、撮影表示装置、通信端末、サーバ、情報処理方法およびプログラムを提供することである。

【課題を解決するための手段】

【0006】

本発明の情報処理システムは、
タグ識別情報が書き込まれた情報記憶媒体が１つの面に配置され、該面に所定の識別画像が表示された情報提供媒体と、
前記情報提供媒体の前記情報記憶媒体が配置された面の少なくとも一部を撮影する撮影表示装置と、
前記撮影表示装置が撮影した第１の画像の中で、前記識別画像を識別し、該第１の画像の中の該識別画像の相対位置に基づいて空間座標系を生成し、該生成した前記空間座標系上の座標範囲を送信する通信端末と、
前記通信端末から送信されてきた座標範囲に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信するサーバとを有し、
前記通信端末は、前記サーバから送信されてきた前記第２の画像を前記撮影表示装置の前記表示座標に基づいた位置に表示させ、前記情報記憶媒体から前記タグ識別情報を読み取り、該読み取ったタグ識別情報を前記サーバへ送信し、
前記サーバは、前記通信端末から送信されてきた前記タグ識別情報に基づいて、所定の処理を行う。

【0007】

また、タグ識別情報が書き込まれた情報記憶媒体が１つの面に配置され、該面に所定の識別画像が表示された情報提供媒体と、
前記情報提供媒体の前記情報記憶媒体が配置された面の少なくとも一部を撮影する撮影表示装置と、
前記撮影表示装置が撮影した第１の画像を取得し、該取得した第１の画像を送信する通信端末と、
前記通信端末から送信されてきた前記第１の画像に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信するサーバとを有し、
前記通信端末は、前記サーバから送信されてきた前記第２の画像を前記撮影表示装置の前記表示座標に基づいた位置に表示させ、前記情報記憶媒体から前記タグ識別情報を読み取り、該読み取ったタグ識別情報を前記サーバへ送信し、
前記サーバは、前記通信端末から送信されてきた前記タグ識別情報に基づいて、所定の処理を行う。

【0008】

また、本発明の撮影表示装置は、
撮影部と、
前記撮影部が撮影した第１の画像を通信端末へ送信する通信部と、
前記通信端末から送信されてきた第２の画像を表示する表示部とを有する。

【0009】

また、本発明の通信端末は、
当該通信端末と接続された撮影表示装置が撮影した第１の画像を取得する取得部と、
前記取得部が取得した第１の画像の中で、所定の識別画像を識別し、該第１の画像の中の該識別画像の相対位置に基づいて空間座標系を生成する空間座標系生成部と、
前記空間座標系生成部が生成した空間座標系上の座標範囲を、当該通信端末と接続されたサーバへ送信する通信部と、
前記サーバから第２の画像と表示座標とが送信されてきた場合、該第２の画像を前記撮影表示装置の該表示座標に基づいた位置に表示させる表示制御部と、
外部に設けられた情報記憶媒体からタグ識別情報を読み取る情報読み取り部とを有し、
前記通信部は、前記情報読み取り部が読み取ったタグ識別情報を前記サーバへ送信する。

【0010】

また、本発明のサーバは、
タグ識別情報と座標とを対応付けて記憶し、前記タグ識別情報と商品またはサービス、処理機能を示す対象識別情報とを対応付けて記憶し、前記対象識別情報と対象画像とを対応付けて記憶するデータベースと、
前記データベースを用いて、当該サーバと接続された通信端末から送信されてきた座標範囲に基づいて、前記タグ識別情報を検索し、該検索したタグ識別情報に基づいて、前記対象識別情報を検索し、該検索した対象識別情報に基づいて、前記対象画像を検索する検索部と、
前記検索部が検索した対象画像と該対象画像を表示するための表示座標とを前記通信端末へ送信する通信部と、
前記通信端末から送信されてきたタグ識別情報に基づいて、所定の処理を行う制御部とを有する。

【0011】

また、当該サーバと接続された通信端末から送信されてきた第１の画像の中で、所定の識別画像を識別し、該第１の画像の中の該識別画像の相対位置に基づいて、前記第１の画像内で空間座標系を生成する空間座標系生成部と、
前記空間座標系生成部が生成した空間座標系に応じた第２の画像と表示座標とを前記通信端末へ送信する通信部と、
前記通信端末から送信されてきたタグ識別情報に基づいて、所定の処理を行う制御部とを有する。

【0013】

また、本発明の情報処理方法は、
タグ識別情報が書き込まれた情報記憶媒体が１つの面に配置され、該面に所定の識別画像が表示された情報提供媒体と、撮影表示装置と、通信端末と、サーバとを有する情報処理システムにおける情報処理方法であって、
前記撮影表示装置が、前記情報提供媒体の前記情報記憶媒体が配置された面の少なくとも一部を撮影する処理と、
前記通信端末が、前記撮影表示装置が撮影した第１の画像の中で、前記識別画像を識別する処理と、
前記通信端末が、前記第１の画像の中の前記識別画像の相対位置に基づいて空間座標系を生成する処理と、
前記通信端末が、前記生成した前記空間座標系上の座標範囲を前記サーバへ送信する処理と、
前記サーバが、前記通信端末から送信されてきた座標範囲に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信する処理と、
前記通信端末が、前記サーバから送信されてきた前記第２の画像を前記撮影表示装置の前記表示座標に基づいた位置に表示させる処理と、
前記通信端末が、前記情報記憶媒体から前記タグ識別情報を読み取る処理と、
前記通信端末が、前記読み取ったタグ識別情報を前記サーバへ送信する処理と、
前記サーバが、前記通信端末から送信されてきた前記タグ識別情報に基づいた所定の処理とを行う。

【0014】

また、タグ識別情報が書き込まれた情報記憶媒体が１つの面に配置され、該面に所定の識別画像が表示された情報提供媒体と、撮影表示装置と、通信端末と、サーバとを有する情報処理システムにおける情報処理方法であって、
前記撮影表示装置が、前記情報提供媒体の前記情報記憶媒体が配置された面の少なくとも一部を撮影する処理と、
前記通信端末が、前記撮影表示装置が撮影した第１の画像を取得する処理と、
前記通信端末が、前記取得した第１の画像を前記サーバへ送信する処理と、
前記サーバが、前記通信端末から送信されてきた前記第１の画像に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信する処理と、
前記通信端末が、前記サーバから送信されてきた前記第２の画像を前記撮影表示装置の前記表示座標に基づいた位置に表示させる処理と、
前記通信端末が、前記情報記憶媒体から前記タグ識別情報を読み取る処理と、
前記通信端末が、前記読み取ったタグ識別情報を前記サーバへ送信する処理と、
前記サーバが、前記通信端末から送信されてきた前記タグ識別情報に基づいた所定の処理とを行う。

【0015】

また、本発明のプログラムは、
通信端末に実行させるためのプログラムであって、
当該通信端末と接続された撮影表示装置から第１の画像を取得する手順と、
前記取得した第１の画像の中で、所定の識別画像を識別する手順と、
前記第１の画像の中の該識別画像の相対位置に基づいて空間座標系を生成する手順と、
前記生成した空間座標系上の座標範囲を、当該通信端末と接続されたサーバへ送信する手順と、
前記サーバから第２の画像と表示座標とが送信されてきた場合、該第２の画像を前記撮影表示装置の該表示座標に基づいた位置に表示させる手順と、
外部に設けられた情報記憶媒体からタグ識別情報を読み取る手順と、
前記読み取ったタグ識別情報を前記サーバへ送信する手順とを実行させる。

【0016】

また、コンピュータに実行させるためのプログラムであって、
当該コンピュータと接続された通信端末から送信されてきた座標範囲に基づいて、タグ識別情報を、前記タグ識別情報と座標とを対応付けて記憶するタグ位置データベースから検索する手順と、
前記検索したタグ識別情報に基づいて、商品識別情報を、前記タグ識別情報と前記商品識別情報とを対応付けて記憶する対応商品データベースから検索する手順と、
前記検索した商品識別情報に基づいて、商品画像を、前記商品識別情報と商品情報と前記商品画像とを対応付けて記憶する商品情報データベースから検索する手順と、
前記検索した商品画像と該商品画像を表示するための表示座標とを前記通信端末へ送信する手順と、
前記通信端末から送信されてきたタグ識別情報に基づいて、所定の処理を行う手順とを実行させる。

【0017】

また、コンピュータに実行させるためのプログラムであって、
当該コンピュータと接続された通信端末から送信されてきた第１の画像の中で、所定の識別画像を識別する手順と、
前記第１の画像の中の前記識別した識別画像の該識別画像の相対位置に基づいて、前記第１の画像内で空間座標系を生成する手順と、
前記生成した空間座標系に応じた第２の画像と該第２の画像を表示するための表示座標とを前記通信端末へ送信する手順と、
前記通信端末から送信されてきたタグ識別情報に基づいて、所定の処理を行う手順とを実行させる。

【発明の効果】

【0018】

以上説明したように、本発明においては、柔軟な情報提供を行うことができる。

【図面の簡単な説明】

【0019】

【図1】本発明の情報処理システムの第１の実施の形態を示す図である。

【図2】図１に示したタグアレイボードの外観の一例を示す図である。

【図3】図１に示したカメラ付きメガネの内部構成の一例を示す図である。

【図4】図１に示した通信端末の内部構成の一例を示す図である。

【図5】図４に示した空間座標系生成部が生成した空間座標系の一例を示す図である。

【図6】図１に示した商品管理サーバの内部構成の一例を示す図である。

【図7】図６に示したタグ位置データベースに記憶されている対応付けの一例を示す図である。

【図8】図６に示した対応商品データベースに記憶されている対応付けの一例を示す図である。

【図9】図６に示した商品情報データベースに記憶されている対応付けの一例を示す図である。

【図10】図１に示した第１の実施の形態における情報処理方法を説明するためのシーケンス図である。

【図11】得られた撮影画像の一例を示す図である。

【図12】得られた撮影画像の他の例を示す図である。

【図13】カメラ付きメガネをかけている利用者が見ている商品画像の一例を示す図である。

【図14】利用者が見える画像にしたがって、所望の商品画像が表示されているタグアレイボード上の位置に通信端末を近づけたときの当該利用者が見える画面の一例を示す図である。

【図15】タグアレイボード上のＩＣタグが配置されている位置と、商品画像を表示させる（カメラ付きメガネをかけている利用者に商品画像が見える）位置とが、互いに異なる場合のＩＣタグの配置の一例を示す図である。

【図16】図１５に示すようにＩＣタグが配置された場合に、商品画像を表示したときのカメラ付きメガネをかけている利用者から見える画像の一例を示す図である。

【図17】図４に示した空間座標系生成部３０２が生成する座標系が３次元である場合の、撮影画像（第１の画像）の座標と仮想空間の座標との変換の一例を示す図である。

【図18】マーカーの互いの間の距離や相対位置（角度を含む）に基づいて仮想空間の座標を生成する一例を示す図である。

【図19】マーカーの形状に基づいて仮想空間の座標を生成する一例を示す図である。

【図20】商品画像に基づいて、仮想空間の座標を生成する一例を示す図である。

【図21】本発明の情報処理システムの第２の実施の形態を示す図である。

【図22】図２１に示した通信端末の内部構成の一例を示す図である。

【図23】図２１に示した商品管理サーバの内部構成の一例を示す図である。

【図24】図２１に示した第２の実施の形態における情報処理方法を説明するためのシーケンス図である。

【図25】メガネ会議の会議室を予約した利用者がカメラ付きメガネをかけてタグアレイボードを見たときに見える画像の一例である。

【図26】メガネ会議の会議室を予約した利用者以外の利用者がカメラ付きメガネをかけてタグアレイボードを見たときに見える画像の一例である。

【発明を実施するための形態】

【0020】

以下に、本発明の実施の形態について図面を参照して説明する。
（第１の実施の形態）
図１は、本発明の情報処理システムの第１の実施の形態を示す図である。

【0021】

本形態における情報処理システムには図１に示すように、タグアレイボード１００と、カメラ付きメガネ２００と、通信端末３００と、無線基地局４００と、商品管理サーバ５００と、購入管理サーバ６００とが設けられている。また、無線基地局４００と、商品管理サーバ５００と、購入管理サーバ６００とは、通信ネットワーク７００を介して互いに接続されている。

【0022】

タグアレイボード１００は、タグ識別情報が書き込まれた情報記憶媒体が１つの面に所定の配列で配置され、その面には、所定の識別画像が表示された情報提供媒体である。なお、タグアレイボード１００は、板状の媒体であっても良いし、紙状の媒体であっても良く、また、その材質は特に規定しない。

【0023】

図２は、図１に示したタグアレイボード１００の外観の一例を示す図である。

【0024】

図１に示したタグアレイボード１００は図２に示すように、複数の識別画像であるマーカー１０１が表示されており、また、タグ識別情報が書き込まれた情報記憶媒体であるＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）タグ１０２が配置されている。図２では、マーカー１０１が６つ、ＩＣタグ１０２が６つである場合を例に挙げて示しているが、それらの数は限定しない。このマーカー１０１は、あらかじめ決められた形状をしており、通信端末３００または商品管理サーバ５００にて空間座標系を生成するために識別可能なものである。また、ＩＣタグ１０２それぞれには、それぞれを互いに識別可能なタグ識別情報があらかじめ書き込まれている。また、ＩＣタグ１０２は、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）等の技術を用いて、近距離無線通信が可能なタグである。

【0025】

また、カメラ付きメガネ２００は、タグアレイボード１００のＩＣタグ１０２が配置された面の少なくとも一部を撮影する撮影表示装置である。また、カメラ付きメガネ２００は、通信端末３００の制御で、指定された座標が示す位置に画像等の情報を表示する。このカメラ付きメガネ２００は、透過型のディスプレイを用いて、実際に見ている実風景と表示された情報とを重ね合わせた状態で見ることができる光学シースルー方式であってもよい。また、カメラ付きメガネ２００は、現実の視界を遮断し、実風景を撮影した画像（第１の画像）を表示し、第１の画像と通信端末３００の制御で表示する情報（第２の画像）とを重ね合わせて表示するものであっても良い。

【0026】

図３は、図１に示したカメラ付きメガネ２００の内部構成の一例を示す図である。

【0027】

図１に示したカメラ付きメガネ２００には図３に示すように、撮影部２０１と、通信部２０２と、表示部２０３とが設けられている。

【0028】

撮影部２０１は、被写体であるタグアレイボード１００を撮影するカメラである。

【0029】

通信部２０２は、撮影部２０１が撮影した第１の画像を通信端末３００へ送信する。

【0030】

表示部２０３は、通信端末３００から送信されてきた第２の画像を、通信端末３００からの指示（表示位置等）に基づいて表示する。

【0031】

通信端末３００は、カメラ付きメガネ２００が撮影した第１の画像の中で、マーカー１０１を識別し、第１の画像の中のマーカー１０１の相対位置に基づいて空間座標系を生成する。また、通信端末３００は、生成した空間座標系を無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５００へ送信する。また、通信端末３００は、商品管理サーバ５００から送信されてきた第２の画像をカメラ付きメガネ２００の表示座標に基づいた位置に表示させる。また、通信端末３００はタグリーダー機能を有し、タグアレイボード１００に配置されたＩＣタグ１０２からタグ識別情報を読み取る。また、通信端末３００は、読み取ったタグ識別情報を無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５００へ送信する。

【0032】

図４は、図１に示した通信端末３００の内部構成の一例を示す図である。

【0033】

図１に示した通信端末３００には図４に示すように、取得部３０１と、空間座標系生成部３０２と、座標範囲確定部３０３と、通信部３０４と、表示制御部３０５と、情報読み取り部３０６とが設けられている。

【0034】

取得部３０１は、カメラ付きメガネ２００が撮影した第１の画像を取得する。この取得方法は、例えば、取得部３０１とカメラ付きメガネ２００の通信部２０２との間で、Ｂｌｕｅｔｏｏｔｈ（登録商標）や無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）などの無線通信や有線通信を用いて取得するものであっても良いし、特に規定しない。また、取得部３０１は、取得した第１の画像を空間座標系生成部３０２へ出力する。

【0035】

空間座標系生成部３０２は、取得部３０１から出力されてきた第１の画像の中で、所定の識別画像であるマーカー１０１を識別する。また、空間座標系生成部３０２は、第１の画像の中のマーカー１０１の相対位置に基づいて、仮想空間でのタグアレイボード１００の座標系である空間座標系を生成する。

【0036】

図５は、図４に示した空間座標系生成部３０２が生成した空間座標系の一例を示す図である。

【0037】

図５に示すように、空間座標系生成部３０２は、６つのマーカー１０１を識別し、識別した６つのマーカー１０１の位置や形状、互いの間の距離や相対位置（角度を含む）に基づいて、ｘ座標軸およびｙ座標軸を決定し、それぞれの座標軸から空間座標系を生成する。なお、空間座標系生成部３０２は、６つのマーカー１０１が空間座標系を生成するための識別画像であることをあらかじめ認識している。

【0038】

また、空間座標系生成部３０２は、生成した空間座標系と撮影画像（第１の画像）の座標の対応関係を求めて、対応関係を表す変換式を座標範囲確定部３０３へ出力する。

【0039】

座標範囲確定部３０３は、空間座標系生成部３０２から出力されてきた変換式を用いて、撮影画像（第１の画像）に含まれる空間座標系の座標範囲を確定する。つまり、タグアレイボード１００全体で生成できる空間座標系のうち、カメラ付きメガネ２００が撮影した第１の画像の範囲を確定する。これは、カメラ付きメガネ２００がタグアレイボード１００の一部を撮影した場合に、撮影した第１の画像の中のマーカー１０１に基づいて、タグアレイボード１００のどの部分を撮影したかを判別するものである。また、座標範囲確定部３０３は、第１の画像に含まれる空間座標系の座標範囲を通信部３０４へ出力する。

【0040】

通信部３０４は、座標範囲確定部３０３から出力されてきた第１の画像に含まれる空間座標系の座標範囲、つまり、撮影されている仮想空間でのタグアレイボード１００の座標範囲を無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５００へ送信する。また、通信部３０４は、商品管理サーバ５００から送信されてきた第２の画像と表示座標とを受信し、受信した第２の画像と表示座標とを表示制御部３０５へ出力する。また、通信部３０４は、情報読み取り部３０６から出力されてきたタグ識別情報を無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５００へ送信する。なお、通信部３０４が上述した座標範囲を送信する際、通信端末３００に付与された通信端末識別情報をこれらとともに送信するものであっても良い。

【0041】

表示制御部３０５は、通信部３０４から出力されてきた第２の画像をカメラ付きメガネ２００の表示座標（通信部３０４から出力されてきたもの）に基づいた位置に表示させる。

【0042】

情報読み取り部３０６は、外部に設けられた情報記憶媒体であるＩＣタグ１０２からタグ識別情報を読み取るリーダーである。また、情報読み取り部３０６は、読み取ったタグ識別情報を通信部３０４へ出力する。

【0043】

無線基地局４００は、一般的な無線基地局であり、通信端末３００との間で無線通信を行い、通信ネットワーク７００との間で有線または無線通信を行う。

【0044】

商品管理サーバ５００は、通信端末３００から送信されてきた座標範囲に応じた第２の画像を検索し、検索した第２の画像とその第２の画像を表示するための表示座標とを通信端末３００へ送信するサーバである。このとき、商品管理サーバ５００は、通信端末３００から座標範囲とともに、通信端末識別情報が送信されてきた場合、その座標範囲と通信端末識別情報とに応じた第２の画像を検索するものであっても良い。また、商品管理サーバ５００は、検索の時刻に応じて、第２の画像を検索するものであっても良い。また、商品管理サーバ５００は、通信端末３００から送信されてきたタグ識別情報に基づいて、所定の処理を行う。

【0045】

図６は、図１に示した商品管理サーバ５００の内部構成の一例を示す図である。

【0046】

図１に示した商品管理サーバ５００には図６に示すように、タグ位置データベース５０１と、対応商品データベース５０２と、商品情報データベース５０３と、検索部５０４と、通信部５０５と、制御部５０６とが設けられている。

【0047】

タグ位置データベース５０１は、タグ識別情報と空間座標系での位置座標とを対応付けて記憶する。

【0048】

図７は、図６に示したタグ位置データベース５０１に記憶されている対応付けの一例を示す図である。

【0049】

図６に示したタグ位置データベース５０１は図７に示すように、タグ識別情報であるタグＩＤとｘ座標とｙ座標とが対応付けられて記憶されている。例えば、図７に示すように、タグＩＤ「Ｔ０００１」とｘ座標「ｘ１」とｙ座標「ｙ１」とが対応付けて記憶されている。これは、タグアレイボード１００上の（ｘ１，ｙ１）の座標が示す位置には「Ｔ０００１」のタグＩＤが書き込まれたＩＣタグ１０２が配置されていることを示している。また、タグＩＤ「Ｔ０００２」とｘ座標「ｘ２」とｙ座標「ｙ２」とが対応付けて記憶されている。これは、タグアレイボード１００上の（ｘ２，ｙ２）の座標が示す位置には「Ｔ０００２」のタグＩＤが書き込まれたＩＣタグ１０２が配置されていることを示している。また、タグＩＤ「Ｔ０００３」とｘ座標「ｘ３」とｙ座標「ｙ３」とが対応付けて記憶されている。これは、タグアレイボード１００上の（ｘ３，ｙ３）の座標が示す位置には「Ｔ０００３」のタグＩＤが書き込まれたＩＣタグ１０２が配置されていることを示している。

【0050】

対応商品データベース５０２は、タグ識別情報と商品識別情報とを対応付けて記憶する。

【0051】

図８は、図６に示した対応商品データベース５０２に記憶されている対応付けの一例を示す図である。

【0052】

図６に示した対応商品データベース５０２には図８に示すように、タグ識別情報であるタグＩＤと商品識別情報である商品ＩＤとが対応付けられて記憶されている。例えば、図８に示すように、タグＩＤ「Ｔ０００１」と商品ＩＤ「Ｓ０００１」とが対応付けて記憶されている。これは、タグＩＤが「Ｔ０００１」であるＩＣタグ１０２が配置されている位置に表示する商品画像の商品ＩＤが「Ｓ０００１」であることを示している。また、タグＩＤ「Ｔ０００２」と商品ＩＤ「Ｓ０００２」とが対応付けて記憶されている。これは、タグＩＤが「Ｔ０００２」であるＩＣタグ１０２が配置されている位置に表示する商品画像の商品ＩＤが「Ｓ０００２」であることを示している。また、タグＩＤ「Ｔ０００３」と商品ＩＤ「Ｓ０００３」とが対応付けて記憶されている。これは、タグＩＤが「Ｔ０００３」であるＩＣタグ１０２が配置されている位置に表示する商品画像の商品ＩＤが「Ｓ０００３」であることを示している。

【0053】

商品情報データベース５０３は、商品識別情報と商品情報と商品画像とを対応付けて記憶する。

【0054】

図９は、図６に示した商品情報データベース５０３に記憶されている対応付けの一例を示す図である。

【0055】

図６に示した商品情報データベース５０３には図９に示すように、商品ＩＤと商品を示す商品情報（例えば、商品名）とその商品の画像である商品画像とが対応付けられて記憶されている。例えば、図９に示すように、商品ＩＤ「Ｓ０００１」と商品情報「椅子」とその椅子の画像とが対応付けて記憶されている。これは、商品ＩＤが「Ｓ０００１」である商品は「椅子」であり、その椅子を示すために表示する画像は図９に示す商品画像であることを示している。また、商品ＩＤ「Ｓ０００２」と商品情報「電卓」とその電卓の画像とが対応付けて記憶されている。これは、商品ＩＤが「Ｓ０００２」である商品は「電卓」であり、その電卓を示すために表示する画像は図９に示す商品画像であることを示している。また、商品ＩＤ「Ｓ０００３」と商品情報「時計」とその時計の画像とが対応付けて記憶されている。これは、商品ＩＤが「Ｓ０００３」である商品は「時計」であり、その時計を示すために表示する画像は図９に示す商品画像であることを示している。

【0056】

検索部５０４は、通信端末３００から送信されてきた空間座標系の座標範囲に含まれる座標に基づいて、タグ識別情報であるタグＩＤをタグ位置データベース５０１から検索する。また、検索部５０４は、検索したタグＩＤに基づいて、商品識別情報である商品ＩＤを対応商品データベース５０２から検索する。また、検索部５０４は、検索した商品ＩＤに基づいて、商品画像を商品情報データベース５０３から検索する。また、検索部５０４は、検索した商品画像を通信部５０５へ出力する。このとき、検索部５０４は、この検索に用いた座標を表示座標として通信部５０５へ出力する。

【0057】

また、検索部５０４は、通信端末３００から送信されてきたタグＩＤに基づいて、商品ＩＤを対応商品データベース５０２から検索し、検索した商品ＩＤを通信部５０５へ出力する。

【0058】

通信部５０５は、通信ネットワーク７００とのインタフェース機能を具備し、検索部５０４から出力されてきて商品画像と表示座標とを通信端末３００へ送信する。また、通信部５０５は、検索部５０４から出力されてきた商品ＩＤを通信端末３００へ送信する。

【0059】

制御部５０６は、商品管理サーバ５００を制御する。制御部５０６は、検索部５０４の検索結果に基づいて、所定の処理（例えば、商品購入処理や、そのためのサーバ（図１に示した形態においては、購入管理サーバ６００）へ必要な情報の送信処理等）を行う。

【0060】

なお、タグ位置データベース５０１、対応商品データベース５０２および商品情報データベース５０３には、通信端末３００（利用者）ごとに別個の対応付け情報が記憶されているものであっても良い。つまり、上述したそれぞれの対応付けに通信端末識別情報も対応付けて記憶しておき、通信端末３００から通信端末識別情報が送信されてきた場合、当該通信端末識別情報も用いて、それぞれの情報を検索部５０４が検索するものであっても良い。これにより、利用者ごとに異なる商品等の表示が可能となる。また、タグ位置データベース５０１、対応商品データベース５０２および商品情報データベース５０３には、日時や時間帯、曜日、季節等（以下、時期等と称する）ごとに別個の対応付け情報が記憶されているものであっても良い。つまり、上述したそれぞれの対応付けに時期等の情報も対応付けて記憶しておき、検索する時期等も用いて、それぞれの情報を検索部５０４が検索するものであっても良い。これにより、時期等ごとに異なる商品等の表示が可能となる。

【0061】

以下に、図１に示した第１の実施の形態における情報処理方法について説明する。

【0062】

図１０は、図１に示した第１の実施の形態における情報処理方法を説明するためのシーケンス図である。

【0063】

まず、通信端末３００にて所定のアプリケーションを起動し、カメラ付きメガネ２００の撮影部２０１がタグアレイボード１００の撮影を開始すると（ステップＳ１）、撮影部２０１が撮影している画像（第１の画像）を通信部２０２が無線通信等を用いて通信端末３００へ送信する（ステップＳ２）。

【0064】

すると、送信されてきた第１の画像を、通信端末３００の取得部３０１が取得する。続いて、空間座標系生成部３０２が、第１の画像の中でマーカー１０１を識別し、第１の画像の中でのマーカー１０１の相対位置に基づいて、空間座標系を生成する。

【0065】

以下に、具体的な数値を例に挙げて、空間座標系の生成方法について説明する。

【0066】

例えば、空間座標系である仮想空間でのタグアレイボード１００の仮想空間の座標を（ｘｐ、ｙｐ）とすると、図７では、ＩＣタグと仮想空間でのタグアレイボードの座標上でのタグの位置座標との対応を示している。また、図５では、ＩＣタグ１０２の１つがｘｐ＝２１０、ｙｐ＝１２４の位置に配置されている。

【0067】

また、仮想空間でのタグアレイボード１００の大きさを３００×２００とする。また、
撮影部２０１は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）などの解像度に応じて、撮影画像（第１の画像）の座標（ｘｑ、ｙｑ）を持つ。例えば、撮影画像（第１の画像）の大きさを６００×４００とする。また、表示部２０３（表示画像）は、液晶などの解像度に応じて、表示部の座標（ｘｒ、ｙｒ）を持つ。例えば、表示画像の大きさを６００×４００とする。なお、撮影画像（第１の画像）の大きさと表示画像の大きさとは、同じとは限らない。

【0068】

これらの仮想空間の座標、撮影画像（第１の画像）の座標、表示部の座標の対応付け（例えば、互いの変換式）は通信端末３００の記憶部（不図示）に記憶する。ここで、撮影画像（第１の画像）の座標と仮想空間の座標との対応付けは、画像を撮影する毎に行う。また、撮影画像（第１の画像）の座標と表示部の座標との対応付け（例えば、変換式）はあらかじめ記憶しておく。上述した光学シースルー方式のカメラ付きメガネ２００を用いる場合、現実の風景とその風景を撮影した撮影画像（第１の画像）が重なり合うような関係なるように大きさの対応付けを行う。なお、大きさだけでなく、回転やＸ，Ｙ方向のオフセットや台形補正などを含めても良い。ここでは、撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と仮想空間の座標（ｘｐ，ｙｐ）の変換式をｘｐ＝ａ×ｘｑ＋ｂ、ｙｐ＝ｃ×ｙｑ＋ｄ（ａ，ｂ，ｃ，ｄは画像を撮影する毎に求める変数）で表す場合について説明する。

【0069】

空間座標系生成部３０２は、パターンマッチング等により撮影画像（第１の画像）中に含まれるマーカー１０１の位置や形状を認識する。撮影画像（第１の画像）として、図１１が得られた場合を例に説明する。原点（ｘｐ＝０，ｙｐ＝０）を表すマーカー１０１ａが（ｘｑ＝１０，ｙｑ＝１０）、（ｘｐ＝３００、ｙｐ＝０）でありｘｐの最大値を意味するマーカー１０１ｂが（ｘｑ＝３１０，ｙｑ＝１０）、（ｘｐ＝０、ｙｐ＝２００）でありｙｐの最大値を意味するマーカー１０１ｃが（ｘｑ＝１０，ｙｑ＝２１０）に有ると認識する。各マーカー１０１の持つ意味はあらかじめマーカー１０１画像形状と対応付けておいてもよいし、マーカー１０１の画像形状にデコード可能なパターンを設けるようにしてもよい。このとき、変換式における変数ａ，ｂ，ｃ，ｄは連立方程式によりａ＝１、ｂ＝−１０，ｃ＝１，ｄ＝−１０と算出される。すなわちこの場合、撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と仮想空間の座標（ｘｐ，ｙｐ）との関係はｘｐ＝ｘｑ−１０、ｙｐ＝ｙｑ−１０（あるいは、ｘｑ＝ｘｐ＋１０、ｙｑ＝ｙｐ＋１０）という変換式で表される（例１）。

【0070】

また、他の例として、撮影画像（第１の画像）として、図１２が得られた場合を説明する。原点（ｘｐ＝０，ｙｐ＝０）を表すマーカー１０１ａが（ｘｑ＝２０，ｙｑ＝４０）、（ｘｐ＝１５０、ｙｐ＝０）を意味するマーカー１０１ｄが（ｘｑ＝３２０，ｙｑ＝４０）、（ｘｐ＝０、ｙｐ＝２００）でありｙｐの最大値を意味するマーカー１０１ｃが（ｘｑ＝２０，ｙｑ＝２９０）に有ると認識する。このとき、変換式における変数ａ，ｂ，ｃ，ｄは連立方程式によりａ＝０．５、ｂ＝−１０，ｃ＝０．８，ｄ＝−３２と算出される。すなわちこの場合、撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と仮想空間の座標（ｘｐ，ｙｐ）との関係はｘｐ＝０．５ｘｑ−１０、ｙｐ＝０．８ｙｑ−３２という変換式で表される（例２）。

【0071】

次に、空間座標系生成部３０２は座標範囲確定部３０３に変換式を送信し、座標範囲確定部３０３が、撮影画像（第１の画像）の座標範囲を確定する（ステップＳ３）。

【0072】

具体的には、座標範囲確定部３０３は、変換式および撮影画像（第１の画像）の座標範囲およびタグアレイボード１００の座標範囲に基づいて、撮影画像（第１の画像）中のタグアレイボード１００の範囲（タグアレイボード１００のどの部分がどれだけ撮影されたか）を認識し、仮想空間でのタグアレイボード１００の座標での範囲に変換する。上述した例１の場合、タグアレイボード１００全体が撮影されていると認識できるため、座標範囲確定部３０３は、ｘｐ＝０〜３００、ｙｐ＝０〜２００が撮影されていると変換する。また、上述した例２の場合、タグアレイボード１００はｘｐ方向にはｘｑ＝６００に対応する場所まで映っていないため、ｘｐ＝０〜２９０（＝０．５×６００−１０）、ｙｐ＝０〜２００が撮影されていると変換する。

【0073】

その後、通信部３０４が、確定した範囲の空間座標系、つまり、撮影されている仮想空間での座標範囲を無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５００へ送信する（ステップＳ４）。

【0074】

通信端末３００から送信されてきた座標範囲を商品管理サーバ５００の通信部５０５が受信すると、検索部５０４が、その座標範囲に含まれる座標に基づいて、その範囲に含まれるタグＩＤをタグ位置データベース５０１から検索する。そして、検索部５０４が、検索したタグＩＤに基づいて、商品ＩＤを対応商品データベース５０２から検索する。そして、検索部５０４が、検索した商品ＩＤに基づいて、商品画像を商品情報データベース５０３から検索する（ステップＳ５）。

【0075】

商品画像を検索した後、検索した商品画像と、上述した検索に用いた座標（表示座標）とを通信部５０５が通信ネットワーク７００および無線基地局４００を介して通信端末３００へ送信する（ステップＳ６）。

【0076】

商品管理サーバ５００から送信されてきた商品画像および表示座標を通信端末３００の通信部３０４が受信すると、受信した商品画像をカメラ付きメガネ２００の表示部２０３に表示する制御を表示制御部３０５が行う（ステップＳ７）。なお、このとき、同じ表示座標であっても撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と仮想空間の座標（ｘｐ，ｙｐ）との関係や撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と表示部の座標（ｘｒ、ｙｒ）の関係が異なれば、カメラ付きメガネ２００の表示部２０３上における表示位置は異なる。そのため、表示制御部３０５は、受信した商品の仮想空間での表示座標を、撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と仮想空間の座標（ｘｐ，ｙｐ）との関係や撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と表示部の座標（ｘｒ、ｙｒ）の関係に応じて表示座標に変換し、表示画像を表示部２０３に表示する制御を行う。例えば、表示制御部３０５は、表示座標としてｘｐ＝２１０、ｙｐ＝１２４を受信すると、上述した例１の変換式により、ｘｑ＝２１０＋１０＝２２０、ｙｑ＝１２４＋１０＝１３４を算出する。撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と表示部の座標（ｘｒ、ｙｒ）の関係がｘｒ＝ｘｑ、ｙｒ＝ｙｑであるとすると、次にｘｑ＝２２０，ｙｑ＝１３４を表示画像上の座標での位置、６００×４００の中のｘｒ＝２２０、ｙｒ＝１３４へ変換してから、表示の制御を行う。なお、空間座標系生成部３０２が、撮影画像（第１の画像）からマーカー１０１を識別する時点で、撮影画像（第１の画像）を表示画像の大きさへ変換してから表示画像中のタグアレイボード１００の位置や大きさを認識して処理をするものであっても良い。

【0077】

この変換後の位置は、カメラ付きメガネ２００をかけている利用者が見ている画像上で、タグアレイボード１００のＩＣタグ１０２が配置されている位置となる。この制御により、カメラ付きメガネ２００の表示部２０３は、表示制御部３０５によって指定された位置に商品画像を表示する（ステップＳ８）。

【0078】

図１３は、カメラ付きメガネ２００をかけている利用者が見ている商品画像の一例を示す図である。

【0079】

図１３に示すように、椅子、電卓、財布、時計、野菜および魚の商品画像が表示部２０３の指定された位置に表示され、それぞれの商品画像がタグアレイボード１００と重ね合わせた画像として見える。このとき、各商品画像は、カメラ付きメガネ２００をかけている利用者が見ている画像上、タグアレイボード１００のＩＣタグ１０２が配置されている位置に表示される。

【0080】

また、上述したように、通信端末識別情報を用いることで、利用者ごとに異なる画像を表示させることができる。例えば、別の利用者の通信端末識別情報には、全て食べ物の商品を対応付けてもよい。

【0081】

なお、ステップＳ８の処理が行われた後、さらにステップＳ２にて、撮影部２０１が撮影している画像を通信端末３００へ送信する処理が行われる。つまり、画像撮影から画像表示までの処理が、所定の時間間隔で繰り返し行われる。

【0082】

また、この画像表示が行われた後、利用者が、自身が見える画像にしたがって、所望の商品画像が表示されているタグアレイボード１００上の位置に通信端末３００を近づけることで、その位置に配置されているＩＣタグ１０２に書き込まれたタグＩＤを通信端末３００の情報読み取り部３０６が読み取る（ステップＳ９）。すると、読み取られたタグＩＤは、通信部３０４から無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５００へ送信される（ステップＳ１０）。

【0083】

図１４は、利用者が見える画像にしたがって、所望の商品画像が表示されているタグアレイボード１００上の位置に通信端末３００を近づけたときの当該利用者が見える画面の一例を示す図である。

【0084】

図１４に示すように、利用者が見える画像にしたがって、所望の商品画像が表示されているタグアレイボード１００上の位置（図１４の場合、時計が表示されている位置）に通信端末３００を近づけると、通信端末３００の情報読み取り部３０６がその位置に配置されているＩＣタグ１０２に書き込まれたタグＩＤを読み取る。

【0085】

通信端末３００から送信されたタグＩＤを商品管理サーバ５００の通信部５０５が受信すると、検索部５０４が、そのタグＩＤに基づいて、商品ＩＤを対応商品データベース５０２から検索する（ステップＳ１１）。検索された商品ＩＤは、通信部５０５から通信ネットワーク７００および無線基地局４００を介して通信端末３００へ送信される（ステップＳ１２）。ここで、検索された商品ＩＤを用いて、対応する商品情報データベース５０３に記憶された商品情報（商品名称だけでなく、値段やサイズなどの商品説明情報を加えても良い）を含む購入操作画面を送信しても良い。そして、商品管理サーバ５００から送信された商品ＩＤを受信した通信端末３００にて、利用者によってこの商品ＩＤの商品ついての購入操作が行われると、当該商品ＩＤが通信部３０４から無線基地局４００および通信ネットワーク７００を介して購入管理サーバ６００へ送信される（ステップＳ１３）。

【0086】

商品ＩＤを受信した購入管理サーバ６００は、当該商品ＩＤの商品について購入処理を行い（ステップＳ１４）、処理が完了した後、購入処理が完了した旨を示す購入処理完了通知を通信ネットワーク７００および無線基地局４００を介して通信端末３００へ送信する（ステップＳ１５）。その後、この通知を受信した通信端末３００は、当該通知を表示する。

【0087】

上述した例では、タグアレイボード１００上のＩＣタグ１０２が配置されている位置と、商品画像を表示させる（カメラ付きメガネ２００をかけている利用者に商品画像が見える）位置とが、同じ位置である場合を例に挙げて説明したが、これらが互いに異なる位置であるものであっても良い。

【0088】

図１５は、タグアレイボード１００上のＩＣタグ１０２が配置されている位置と、商品画像を表示させる（カメラ付きメガネ２００をかけている利用者に商品画像が見える）位置とが、互いに異なる場合のＩＣタグ１０２の配置の一例を示す図である。また、図１６は、図１５に示すようにＩＣタグが配置された場合に、商品画像を表示したときのカメラ付きメガネ２００をかけている利用者から見える画像の一例を示す図である。

【0089】

図１５に示すように、タグアレイボード１００の下方にＩＣタグ１０２が並べて配置されており、それぞれの位置に数字が表示されている。また、その上方に数字が表示されている位置には、ＩＣタグ１０２は配置されていない。このとき、商品管理サーバ５００のタグ位置データベース５０１にてタグＩＤと対応付けられた座標は、ＩＣタグ１０２が配置されている座標ではなく、タグＩＤと対応する商品画像を表示する位置の座標となる。これにより、商品画像を表示させると、図１６に示すように、商品画像は、ＩＣタグ１０２が配置されている位置ではなく、ＩＣタグ１０２が配置されている位置に表示されている数字と同じ数字が表示されている上方の位置に表示される。

【0090】

以上、空間座標系生成部３０２が生成する座標系が２次元の座標系である場合を例に挙げて説明したが、３次元の座標系であっても良い。３次元にすることで、タグアレイボード１００を斜めから撮影した場合であっても、自然に表示できるため、真正面から撮影する必要性がなくなる。また、表示する商品画像も、２次元画像でなく、３次元オブジェクト画像を用いても良い。空間座標系生成部３０２が生成する座標系が３次元である場合について、その座標系について以下に説明する。

【0091】

図１７は、図４に示した空間座標系生成部３０２が生成する座標系が３次元である場合の、撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と空間座標系である仮想空間の座標（ｘｐ，ｙｐ，ｚｐ）との変換の一例を示す図である。

【0092】

図１７に示すように、撮影画像（第１の画像）の座標（ｘｑ，ｙｑ）と３次元座標系である仮想空間の座標（ｘｐ，ｙｐ，ｚｐ）との関係は（式１）および（式２）に示すような関係となる。

【0093】

ｘｑ＝ｆ（ｘｐ，ｙｐ，ｚｐ）・・・（式１）
ｙｑ＝ｆ（ｘｐ，ｙｐ，ｚｐ）・・・（式２）
ここで、ｆおよびｇは、マーカー１０１を画像認識することにより生成される変換関数であり、時間とともに変化可能なものである。これにより、ＩＣタグ１０２が配置された仮想空間の座標における位置を撮影画像（第１の画像）の座標および表示座標に対応付けることができる。

【0094】

また、２次元の座標系である場合と同様に、識別したマーカー１０１の位置や形状、互いの間の距離や相対位置（角度を含む）に基づいて、ｘ座標軸、ｙ座標軸およびｚ座標軸を決定し、それぞれの座標軸から３次元のＡＲ表示空間座標系を生成するものであっても良い。

【0095】

図１８は、マーカー１０１の互いの間の距離や相対位置（角度を含む）に基づいて仮想空間の座標を生成する一例を示す図である。

【0096】

図１８に示すように、互いに隣接するマーカー１０１の距離や相対位置（角度を含む）に基づいて、ｘ座標軸、ｙ座標軸およびｚ座標軸を生成するものであっても良い。ここでは、ｚｐ座標軸は、ｘｐ座標軸とｙｐ座標軸の互いの角度と長さ（単位座標）とに基づいて生成される。

【0097】

図１９は、マーカー１０１の形状に基づいて仮想空間の座標を生成する一例を示す図である。

【0098】

図１９に示すように、座標軸の原点を表す特別なマーカーを設定しておき、そのマーカーの１つの辺の長さや２つの辺を挟む角度および他の補完用マーカーの相対位置に基づいて、ｘｐ座標軸およびｙｐ座標軸を生成し、ｘｐ座標軸とｙｐ座標軸の互いの角度と長さ（単位座標）とに基づいて、ｚｐ座標軸を生成するものであっても良い。

【0099】

また、商品画像の特徴量を抽出して、その物体認識を行い、あらかじめ決めておいた情報に基づいて仮想空間の座標を生成するものであっても良い。

【0100】

図２０は、商品画像に基づいて、仮想空間の座標を生成する一例を示す図である。

【0101】

図２０に示すように、チョコレートの商品画像に対して特徴量抽出を行い、物体を認識し、その形状を認識する。そして、認識した形状である向き（角度）や長さ等と所定の情報とに基づいて、仮想空間の座標を生成するものであっても良い。
（第２の実施の形態）
第１の実施の形態では、カメラ付きメガネ２００で撮影した画像から空間座標系を生成する主体が通信端末３００である場合を例に挙げて説明したが、この処理を商品管理サーバが行うものであっても良い。

【0102】

図２１は、本発明の情報処理システムの第２の実施の形態を示す図である。

【0103】

本形態における情報処理システムには図２１に示すように、タグアレイボード１００と、カメラ付きメガネ２００と、通信端末３１０と、無線基地局４００と、商品管理サーバ５１０と、購入管理サーバ６００とが設けられている。また、無線基地局４００と、商品管理サーバ５１０と、購入管理サーバ６００とは、通信ネットワーク７００を介して互いに接続されている。ここで、各構成要素に付与した符号が、図１に示した第１の実施の形態におけるものと同じであるものは、その機能も同じであるため、ここでは説明しない。

【0104】

通信端末３１０は、カメラ付きメガネ２００が撮影した第１の画像を取得し、その取得した第１の画像を無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５１０へ送信する。また、通信端末３１０は、商品管理サーバ５１０から送信されてきた第２の画像をカメラ付きメガネ２００の表示座標に基づいた位置に表示させる。また、通信端末３１０はタグリーダー機能を有し、タグアレイボード１００に配置されたＩＣタグ１０２からタグ識別情報を読み取る。また、通信端末３１０は、読み取ったタグ識別情報を無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５１０へ送信する。

【0105】

図２２は、図２１に示した通信端末３１０の内部構成の一例を示す図である。

【0106】

図２１に示した通信端末３１０には図２２に示すように、取得部３０１と、通信部３０４と、表示制御部３０５と、情報読み取り部３０６とが設けられている。図２１に示すように、通信端末３１０には、図４に示した空間座標系生成部３０２および座標範囲確定部３０３が設けられていない。つまり、取得部３０１がカメラ付きメガネ２００から取得した第１の画像は、そのまま通信部３０４から無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５１０へ送信される。他の機能については、図４に示したものと同じである。

【0107】

商品管理サーバ５１０は、通信端末３１０から送信されてきた第１の画像に応じた第２の画像と、その第２の画像を表示するための表示座標とを通信端末３１０へ送信するサーバである。このとき、商品管理サーバ５１０は、通信端末３１０から第１の画像とともに、通信端末識別情報が送信されてきた場合、第１の画像と通信端末識別情報とに応じた第２の画像を検索するものであっても良い。また、商品管理サーバ５１０は、通信端末３１０から送信されてきたタグ識別情報に基づいて、所定の処理を行う。

【0108】

図２３は、図２１に示した商品管理サーバ５１０の内部構成の一例を示す図である。

【0109】

図２１に示した商品管理サーバ５１０には図２３に示すように、タグ位置データベース５０１と、対応商品データベース５０２と、商品情報データベース５０３と、検索部５０４と、通信部５０５と、制御部５０６と、空間座標系生成部５１１と、座標範囲確定部５１２とが設けられている。図２３に示すように、商品管理サーバ５１０には、図６に示した商品管理サーバ５００に設けられた構成要素に、空間座標系生成部５１１と、座標範囲確定部５１２とが追加されている。他の機能については、図６に示したものと同じである。

【0110】

空間座標系生成部５１１は、通信端末３１０から送信されてきた第１の画像の中で、所定の識別画像であるマーカー１０１を識別する。また、空間座標系生成部５１１は、第１の画像の中のマーカー１０１の相対位置に基づいて、仮想空間でのタグアレイボード１００の座標系である空間座標系を生成する。この空間座標系の生成方法は、図４に示した空間座標系生成部３０２における生成方法と同じで良い。また、空間座標系生成部５１１は、生成した空間座標系を座標範囲確定部５１２へ出力する。

【0111】

座標範囲確定部５１２は、空間座標系生成部５１１から出力されてきた空間座標系の座標範囲を確定する。つまり、タグアレイボード１００全体で生成できる空間座標系のうち、通信端末３１０から送信されてきた（カメラ付きメガネ２００が撮影した）第１の画像の範囲を確定する。この座標範囲の確定方法は、図４に示した座標範囲確定部３０３における確定方法と同じで良い。また、座標範囲確定部５１２は、空間座標系と座標範囲とを検索部５０４へ出力する。

【0112】

以下に、図２１に示した第２の実施の形態における情報処理方法について説明する。

【0113】

図２４は、図２１に示した第２の実施の形態における情報処理方法を説明するためのシーケンス図である。

【0114】

まず、通信端末３１０にて所定のアプリケーションを起動し、カメラ付きメガネ２００の撮影部２０１がタグアレイボード１００の撮影を開始すると（ステップＳ２１）、撮影部２０１が撮影している画像（第１の画像）を通信部２０２が無線通信等を用いて通信端末３１０へ送信する（ステップＳ２２）。

【0115】

すると、送信されてきた第１の画像を、通信端末３１０の取得部３０１が取得する。続いて、通信部３０４が、第１の画像を無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５１０へ送信する（ステップＳ２３）。

【0116】

通信端末３１０から送信されてきた第１の画像を商品管理サーバ５１０の通信部５０５が受信すると、空間座標系生成部５１１が、第１の画像の中でマーカー１０１を識別し、第１の画像の中でのマーカー１０１の相対位置に基づいて、空間座標系を生成する。また、座標範囲確定部５１２が、第１の画像の座標範囲を確定する（ステップＳ２４）。

【0117】

すると、検索部５０４が、空間座標系の座標範囲に含まれる座標に基づいて、タグＩＤをタグ位置データベース５０１から検索する。そして、検索部５０４が、検索したタグＩＤに基づいて、商品ＩＤを対応商品データベース５０２から検索する。そして、検索部５０４が、検索した商品ＩＤに基づいて、商品画像を商品情報データベース５０３から検索する（ステップＳ２５）。

【0118】

また、上述した検索に用いた座標（表示座標）を、確定した座標範囲に基づいて、カメラ付きメガネ２００にて表示する画面上の表示座標へ変換する。この変換処理の主体は、検索部５０４であっても良いし、座標範囲確定部５１２であっても良いし、通信部５０５であっても良い。この変換の理由は、第１の実施の形態において通信端末３００が座標を変換したときの理由と同じである。

【0119】

商品画像を検索した後、検索した商品画像と、変換した表示座標とを通信部５０５が通信ネットワーク７００および無線基地局４００を介して通信端末３１０へ送信する（ステップＳ２６）。

【0120】

商品管理サーバ５１０から送信されてきた商品画像および表示座標を通信端末３１０の通信部３０４が受信すると、受信した商品画像をカメラ付きメガネ２００の表示座標上に表示する制御を表示制御部３０５が行う（ステップＳ２７）。この制御により、カメラ付きメガネ２００の表示部２０３は、表示制御部３０５によって指定された位置に商品画像を表示する（ステップＳ２８）。

【0121】

なお、ステップＳ２８の処理が行われた後、さらにステップＳ２２にて、撮影部２０１が撮影している画像を通信端末３１０へ送信する処理が行われる。つまり、画像撮影から画像表示までの処理が、所定の時間間隔で繰り返し行われる。

【0122】

また、第１の実施の形態と同様に、通信端末識別情報を用いることで、利用者ごとに異なる画像を表示させることができる。

【0123】

この表示が行われた後、利用者が、自身が見える画像にしたがって、所望の商品画像が表示されているタグアレイボード１００上の位置に通信端末３１０を近づけることで、その位置に配置されているＩＣタグ１０２に書き込まれたタグＩＤを通信端末３１０の情報読み取り部３０６が読み取る（ステップＳ２９）。すると、読み取られたタグＩＤは、通信部３０４から無線基地局４００および通信ネットワーク７００を介して商品管理サーバ５１０へ送信される（ステップＳ３０）。

【0124】

通信端末３１０から送信されたタグＩＤを商品管理サーバ５１０の通信部５０５が受信すると、検索部５０４が、そのタグＩＤに基づいて、商品ＩＤを対応商品データベース５０２から検索する（ステップＳ３１）。検索された商品ＩＤは、通信部５０５から通信ネットワーク７００および無線基地局４００を介して通信端末３１０へ送信される（ステップＳ３２）。そして、商品管理サーバ５１０から送信された商品ＩＤを受信した通信端末３１０にて、利用者によってこの商品ＩＤの商品ついての購入操作が行われると、当該商品ＩＤが通信部３０４から無線基地局４００および通信ネットワーク７００を介して購入管理サーバ６００へ送信される（ステップＳ３３）。

【0125】

商品ＩＤを受信した購入管理サーバ６００は、当該商品ＩＤの商品について購入処理を行い（ステップＳ３４）、処理が完了した後、購入処理が完了した旨を示す購入処理完了通知を通信ネットワーク７００および無線基地局４００を介して通信端末３１０へ送信する（ステップＳ３５）。その後、この通知を受信した通信端末３１０は、当該通知を表示する。

【0126】

なお、第２の実施の形態における表示や座標、データベースの構造については、第１の実施の形態において説明したものと同様である。また、これらのデータベースは、物理的に別個のものであっても良いし、１つまたは所定の組み合わせで構成されるものであっても良い。つまり、これらのデータベースにおいて、タグ識別情報と座標とが対応付けられ、タグ識別情報と商品またはサービス、処理機能を示す対象識別情報とが対応付けられ、対象識別情報と対象画像（例えば、図９に示した商品画像等）とが対応付けられているものであれば、そのデータベースの構成が１つであっても複数からなるものであっても構わない。

【0127】

なお、上述したような、利用者ごとに異なる画像を表示ということだけでなく、対応付けや表示するのは、商品だけでなく、サービスや処理機能であっても構わない。その１つの例を以下に説明する。

【0128】

図２５は、メガネ会議の会議室を予約した利用者がカメラ付きメガネ２００をかけてタグアレイボード１００を見たときに見える画像の一例である。また、図２６は、メガネ会議の会議室を予約した利用者以外の利用者がカメラ付きメガネ２００をかけてタグアレイボード１００を見たときに見える画像の一例である。

【0129】

商品管理サーバ５００に、通信端末識別情報があらかじめ登録（記憶）されている利用者が使用する通信端末３００を用いた場合と、それ以外の利用者が使用する通信端末３００を用いた場合とで、互いに異なる画像を表示することで、それらの利用者に応じて、カメラ付きメガネ２００をかけて見える画像が異なってくる。また、利用者に応じてタグＩＤに異なる処理を対応づけることで、利用者に応じてタグＩＤ読み取りを行った時に異なる処理を行うことができる。図２５に示すように、メガネ会議の会議室を予約した利用者が、カメラ付きメガネ２００をかけて自分所有の通信端末３００を用いて画像を表示させた場合、「入室」または「キャンセル」を選択するための表示がされるが、図２６に示すように、メガネ会議の会議室を予約した利用者以外の利用者が、カメラ付きメガネ２００をかけて自分所有の通信端末３００を用いて画像を表示させた場合、「入室」または「キャンセル」を選択するための表示はされない。このような表示を行い、メガネ会議の会議室を予約した利用者がタグＩＤの読み取りを行った場合のみに「入室」または「キャンセル」の処理を実行するようにすることで、メガネ会議の会議室を予約した利用者だけが、「入室」または「キャンセル」を選択することが可能となる。

【0130】

このように、通信端末識別情報が商品管理サーバ５００に登録されているか否かに応じて異なる画像を表示させたり、通信端末識別情報に応じた対応付けが商品管理サーバ５００に登録されることで、当該通信端末識別情報が付与された通信端末の利用者ごとに異なる画像を表示させたりすることができる。

【0131】

また、上述した通信端末識別情報は、通信端末毎に固有の識別情報でなく、利用者毎に割り当てられている利用者毎に固有の利用者識別情報であっても良い。

【0132】

また、タグアレイボードごとに、表示する画像を異なるものとしても良い。この場合、タグアレイボードを識別するためのタグアレイボード識別情報に対応付けて記憶や処理を行う。このとき、タグアレイボード識別情報は、マーカーに含まれている。

【0133】

上述した構成および処理により、電源が不要な情報提供媒体を用いて、例えば、時期等や利用者に応じたような、柔軟な情報提供を行うことができる。

【0134】

上述した通信端末３００，３１０および商品管理サーバ５００，５１０それぞれに設けられた各構成要素が行う処理は、目的に応じてそれぞれ作製された論理回路で行うようにしても良い。また、処理内容を手順として記述したコンピュータプログラム（以下、プログラムと称する）を通信端末３００，３１０および商品管理サーバ５００，５１０それぞれにて読取可能な記録媒体に記録し、この記録媒体に記録されたプログラムを通信端末３００，３１０および商品管理サーバ５００，５１０それぞれに読み込ませ、実行するものであっても良い。通信端末３００，３１０および商品管理サーバ５００，５１０それぞれにて読取可能な記録媒体とは、フロッピー（登録商標）ディスク、光磁気ディスク、ＤＶＤ、ＣＤなどの移設可能な記録媒体の他、通信端末３００，３１０および商品管理サーバ５００，５１０それぞれに内蔵されたＲＯＭ、ＲＡＭ等のメモリやＨＤＤ等を指す。この記録媒体に記録されたプログラムは、通信端末３００，３１０および商品管理サーバ５００，５１０それぞれに設けられたＣＰＵ（不図示）にて読み込まれ、ＣＰＵの制御によって、上述したものと同様の処理が行われる。ここで、ＣＰＵは、プログラムが記録された記録媒体から読み込まれたプログラムを実行するコンピュータとして動作するものである。

【符号の説明】

【0135】

１００ タグアレイボード
１０１，１０１ａ，１０１ｂ，１０１ｃ マーカー
１０２ ＩＣタグ
２００ カメラ付きメガネ
２０１ 撮影部
２０２，３０４，５０５ 通信部
２０３ 表示部
３００，３１０ 通信端末
３０１ 取得部
３０２，５１１ 空間座標系生成部
３０３，５１２ 座標範囲確定部
３０５ 表示制御部
３０６ 情報読み取り部
４００ 無線基地局
５００，５１０ 商品管理サーバ
５０１ タグ位置データベース
５０２ 対応商品データベース
５０３ 商品情報データベース
５０４ 検索部
５０６ 制御部
６００ 購入管理サーバ
７００ 通信ネットワーク

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図10】

【図11】

【図12】

【図15】

【図17】

【図18】

【図19】

【図20】

【図22】

【図23】

【図24】

【図25】

【図26】

【図1】

【図9】

【図13】

【図14】

【図16】

【図21】