(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023006483
(43)【公開日】2023-01-18
(54)【発明の名称】情報紐付装置、画像処理装置、情報紐付方法、画像処理方法、及びプログラム
(51)【国際特許分類】
G06Q 30/06 20230101AFI20230111BHJP
【FI】
G06Q30/06
【審査請求】未請求
【請求項の数】10
【出願形態】OL
(21)【出願番号】P 2021109102
(22)【出願日】2021-06-30
(71)【出願人】
【識別番号】000232092
【氏名又は名称】NECソリューションイノベータ株式会社
(74)【代理人】
【識別番号】100115255
【弁理士】
【氏名又は名称】辻丸 光一郎
(74)【代理人】
【識別番号】100201732
【弁理士】
【氏名又は名称】松縄 正登
(74)【代理人】
【識別番号】100154081
【弁理士】
【氏名又は名称】伊佐治 創
(72)【発明者】
【氏名】岡田 浩臣
(72)【発明者】
【氏名】金澤 浩平
【テーマコード(参考)】
5L049
【Fターム(参考)】
5L049BB72
(57)【要約】 (修正有)
【課題】検索対象物の識別情報と位置情報とを容易に紐づけることが可能な、検索対象物の情報紐付装置及び方法等を提供する。
【解決手段】情報紐付装置10は、第1起点位置情報を取得する起点位置情報取得部と、第1ユーザ移動情報を取得する移動情報取得部と、検索対象物の画像情報を取得する画像情報取得部と、検索対象物の画像情報から、検索対象物の識別情報を抽出する識別情報抽出部と、第1起点位置情報と、第1ユーザ移動情報とに基づき、検索対象物の画像情報を取得した際の第1ユーザの位置情報を抽出する位置情報抽出部と、検索対象物の識別情報と、検索対象物の画像情報を取得した際の第1ユーザの位置情報とを紐づけて、検索対象物の位置情報として出力する出力部と、を備える。第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、第1ユーザ移動情報は、第1起点位置からの第1のユーザの移動量の情報を含む。
【選択図】
図1
【特許請求の範囲】
【請求項1】
起点位置情報取得部、移動情報取得部、画像情報取得部、識別情報抽出部、位置情報抽出部、及び、出力部を含み、
前記起点位置情報取得部は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得部は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得部は、検索対象物の画像情報を取得し、
前記識別情報抽出部は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出部は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力部は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する、ことを特徴とする検索対象物の情報紐付装置。
【請求項2】
前記画像情報取得部は、起点マーカ画像を取得し、
前記起点位置情報取得部は、前記起点マーカ画像から前記第1起点位置情報を取得する、請求項1記載の情報紐付装置。
【請求項3】
属性情報取得部を含み、
前記属性情報取得部は、前記検索対象物の識別情報に基づき、前記検索対象物の属性情報を取得し、
前記出力部は、前記検索対象物の位置情報に、前記検索対象物の属性情報を紐づけて出力する、請求項1又は2記載の情報紐付装置。
【請求項4】
検索対象物の情報紐付部、撮像情報取得部、対象物位置情報取得部、仮想情報生成部、マップ情報管理部、端末情報取得部、特定部、及び画像情報出力部を含み、
前記検索対象物の情報紐付部は、請求項1から3のいずれか一項に記載の検索対象物の情報紐付装置であり、
前記撮像情報取得部は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得部は、前記検索対象物の情報紐付部により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成部は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理部は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得部は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力部は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成部において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力部は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、画像処理装置。
【請求項5】
前記検索対象物毎の仮想画像は、さらに、前記検索対象物の詳細情報画像を含み、前記位置画像及び前記詳細情報画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力部は、前記撮像画像内にウインドウ部を設け、前記ウインドウ部に前記撮像画像内に存在する前記検索対象物の位置画像と紐づけられている前記詳細情報画像を重畳する、請求項4記載の画像処理装置。
【請求項6】
選別情報取得部を備え、
前記選別情報取得部は、前記検索対象物の選別を行う選別情報を取得し、
前記画像情報出力部は、前記選別情報に基づいて、前記撮像画像内に存在する前記検索対象物を選別し、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、請求項4又は5記載の画像処理装置。
【請求項7】
起点位置情報取得工程、移動情報取得工程、画像情報取得工程、識別情報抽出工程、位置情報抽出工程、及び、出力工程を含み、
前記起点位置情報取得工程は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得工程は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得工程は、検索対象物の画像情報を取得し、
前記識別情報抽出工程は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出工程は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力工程は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する、ことを特徴とする検索対象物の情報紐付方法。
【請求項8】
検索対象物の情報紐付工程、撮像情報取得工程、対象物位置情報取得工程、仮想情報生成工程、マップ情報管理工程、端末情報取得工程、特定工程、及び画像情報出力工程を含み、
前記検索対象物の情報紐付工程は、請求項7記載の検索対象物の情報紐付方法であり、
前記撮像情報取得工程は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得工程は、前記検索対象物の情報紐付工程により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成工程は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理工程は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得工程は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力工程は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成工程において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力工程は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、画像処理方法。
【請求項9】
コンピュータに、起点位置情報取得手順、移動情報取得手順、画像情報取得手順、識別情報抽出手順、位置情報抽出手順、及び、出力手順を実行させるためのプログラムであって、
前記起点位置情報取得手順は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得手順は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得手順は、検索対象物の画像情報を取得し、
前記識別情報抽出手順は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出手順は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力手順は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する、ことを特徴とするプログラム。
【請求項10】
コンピュータに、検索対象物の情報紐付手順、撮像情報取得手順、対象物位置情報取得手順、仮想情報生成手順、マップ情報管理手順、端末情報取得手順、特定手順、及び画像情報出力手順を実行させるためのプログラムであって、
前記検索対象物の情報紐付手順は、請求項9記載のプログラムにより実行され、
前記撮像情報取得手順は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得手順は、前記検索対象物の情報紐付手順により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成手順は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理手順は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得手順は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力手順は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成手順において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力手順は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報紐付装置、画像処理装置、情報紐付方法、画像処理方法、及びプログラムに関する。
【背景技術】
【0002】
スーパーマーケット等の店舗において、AR(Augmented Reality:拡張現実感)技術を用いて、ユーザが所望する商品の情報を提供する技術が報告されている(例えば、特許文献1)。
【先行技術文献】
【特許文献】
【0003】
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、店舗の陳列棚の商品は、例えば、位置情報の更新サイクルが早い、商品の種類が膨大である等の理由により、商品の情報と陳列位置の対応を登録するのに手間がかかるという課題がある。また、このような課題は、スーパーマーケット、家電量販店、コンビニエンスストア等の小売店の商品に限らず、例えば、倉庫内の物品、運送会社のターミナルの荷物、オフィスの書類等においても同様である。
【0005】
そこで、本発明は、検索対象物の識別情報と、検索対象物の位置情報とを容易に紐づけることが可能な、検索対象物の情報紐付装置を提供することを目的とする。
【課題を解決するための手段】
【0006】
前記目的を達成するために、本発明の検索対象物の情報紐付装置は、起点位置情報取得部、移動情報取得部、画像情報取得部、識別情報抽出部、位置情報抽出部、及び、出力部を含み、
前記起点位置情報取得部は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得部は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得部は、検索対象物の画像情報を取得し、
前記識別情報抽出部は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出部は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力部は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する、装置である。
【0007】
本発明の画像処理装置は、検索対象物の情報紐付部、撮像情報取得部、対象物位置情報取得部、仮想情報生成部、マップ情報管理部、端末情報取得部、特定部、及び画像情報出力部を含み、
前記検索対象物の情報紐付部は、前記本発明の検索対象物の情報紐付装置であり、
前記撮像情報取得部は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得部は、前記検索対象物の情報紐付部により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成部は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理部は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得部は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力部は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成部において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力部は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、装置である。
【0008】
本発明の検索対象物の情報紐付方法は、起点位置情報取得工程、移動情報取得工程、画像情報取得工程、識別情報抽出工程、位置情報抽出工程、及び、出力工程を含み、
前記起点位置情報取得工程は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得工程は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得工程は、検索対象物の画像情報を取得し、
前記識別情報抽出工程は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出工程は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力工程は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する、方法である。
【0009】
本発明の画像処理方法は、検索対象物の情報紐付工程、撮像情報取得工程、対象物位置情報取得工程、仮想情報生成工程、マップ情報管理工程、端末情報取得工程、特定工程、及び画像情報出力工程を含み、
前記検索対象物の情報紐付工程は、前記本発明の検索対象物の情報紐付方法であり、
前記撮像情報取得工程は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得工程は、前記検索対象物の情報紐付工程により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成工程は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理工程は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得工程は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力工程は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成工程において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力工程は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、方法である。
【0010】
本発明の第1のプログラムは、コンピュータに、起点位置情報取得手順、移動情報取得手順、画像情報取得手順、識別情報抽出手順、位置情報抽出手順、及び、出力手順を実行させるためのプログラムであって、
前記起点位置情報取得手順は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得手順は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得手順は、検索対象物の画像情報を取得し、
前記識別情報抽出手順は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出手順は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力手順は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する。
【0011】
本発明の第2のプログラムは、コンピュータに、検索対象物の情報紐付手順、撮像情報取得手順、対象物位置情報取得手順、仮想情報生成手順、マップ情報管理手順、端末情報取得手順、特定手順、及び画像情報出力手順を実行させるためのプログラムであって、
前記検索対象物の情報紐付手順は、前記本発明の第1のプログラムにより実行され、
前記撮像情報取得手順は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得手順は、前記検索対象物の情報紐付手順により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成手順は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理手順は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得手順は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力手順は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成手順において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力手順は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する。
【発明の効果】
【0012】
本発明によれば、検索対象物の識別情報と、検索対象物の位置情報とを容易に紐づけることができる。
【図面の簡単な説明】
【0013】
【
図1】
図1は、実施形態1の情報紐付装置の一例の構成を示すブロック図である。
【
図2】
図2は、実施形態1の情報紐付装置のハードウェア構成の一例を示すブロック図である。
【
図3】
図3は、実施形態1の情報紐付装置における処理の一例を示すフローチャートである。
【
図4】
図4は、実施形態2の情報紐付装置の一例の構成を示すブロック図である。
【
図5】
図5は、実施形態2の情報紐付装置における処理の一例を示すフローチャートである。
【
図6】
図6は、実施形態3の画像処理装置を含む画像処理システムの一例の構成を示すブロック図である。
【
図7】
図7は、実施形態3の画像処理装置のハードウェア構成の一例を示すブロック図である。
【
図8】
図8は、実施形態3の画像表示端末のハードウェア構成の一例を示すブロック図である。
【
図9】
図9は、実施形態3の画像処理装置における処理の一例を示すフローチャートである。
【
図10】
図10は、実施形態4の画像処理装置を含む画像処理システムの一例の構成を示すブロック図である。
【
図11】
図11は、実施形態4の画像処理装置における処理の一例を示すフローチャートである。
【
図12】
図12は、実施形態4の画像処理装置からユーザ端末に出力された画像が、前記ユーザ端末のディスプレイ上に表示されている一例を示す模式図である。
【発明を実施するための形態】
【0014】
本発明において、「検索対象物」とは、例えば、位置情報と識別情報との紐付が可能なものであれば特に制限されない。前記検索対象物の具体例としては、例えば、小売店の商品;倉庫の物品;運送会社が輸送する物品;オフィス内の書類;サーバールームのサーバ;図書館の資料;等があげられる。
【0015】
本発明において、「第1のユーザ」とは、例えば、本発明の情報紐付装置により検索対象物の位置情報と識別情報の紐づけを行うユーザである。前記第1のユーザの具体例としては、小売店、倉庫、又は運送会社の従業員;サーバールームの管理者;図書館の職員;等の検索対象物の管理を行う者があげられる。
【0016】
本発明において、「第2のユーザ」とは、例えば、本発明の画像処理装置により処理された画像を端末に表示させるユーザである。前記第2のユーザの具体例としては、小売店に来店した顧客;倉庫又は運送会社の従業員;サーバールームの管理者;図書館に来館した利用者;等の情報が紐づけられた検索対象物にアクセスする者があげられる。
【0017】
次に、本発明の実施形態について図を用いて説明する。本発明は、以下の実施形態には限定されない。以下の各図において、同一部分には、同一符号を付している。また、各実施形態の説明は、特に言及がない限り、互いの説明を援用でき、各実施形態の構成は、特に言及がない限り、組合せ可能である。
【0018】
[実施形態1]
図1は、本実施形態の情報紐付装置10の一例の構成を示すブロック図である。
図1に示すように、本装置10は、起点位置情報取得部11、移動情報取得部12、画像情報取得部13、識別情報抽出部14、位置情報抽出部15、及び出力部16を含む。また、本装置10は、図示していないが、記憶部を含んでもよい。
【0019】
本装置10は、例えば、前記各部を含む1つの装置でもよいし、前記各部が、通信回線網を介して接続可能な装置でもよい。また、本装置10は、前記通信回線網を介して、後述する外部装置と接続可能である。前記通信回線網は、特に制限されず、公知のネットワークを使用でき、例えば、有線でも無線でもよい。前記通信回線網は、例えば、インターネット回線、WWW(World Wide Web)、電話回線、LAN(Local Area Network)、SAN(Storage Area Network)、DTN(Delay Tolerant Networking)、LPWA(Low Power Wide Area)、L5G(ローカル5G)、等があげられる。無線通信としては、例えば、Wi-Fi(登録商標)、Bluetooth(登録商標)、ローカル5G、LPWA等が挙げられる。前記無線通信としては、各装置が直接通信する形態(Ad Hoc通信)、インフラストラクチャ(infrastructure通信)、アクセスポイントを介した間接通信等であってもよい。本装置10は、例えば、システムとしてサーバに組み込まれていてもよい。また、本装置10は、例えば、本発明のプログラムがインストールされたパーソナルコンピュータ(PC、例えば、デスクトップ型、ノート型)、スマートフォン、タブレット端末等であってもよい。本装置10は、例えば、前記第1のユーザが所持する端末内で、すべての処理を行う端末型の装置であってもよいし、前記第1のユーザが所持する端末が取得した情報を取得して処理を行うサーバ型の装置であってもよい。さらに、本装置10は、例えば、前記各部のうち少なくとも一つがサーバ上にあり、その他の前記各部が端末上にあるような、クラウドコンピューティングやエッジコンピューティング等の形態であってもよい。
【0020】
図2に、本装置10のハードウェア構成のブロック図を例示する。本装置10は、例えば、中央処理装置(CPU、GPU等)101、メモリ102、バス103、記憶装置104、入力装置105、表示装置106、通信デバイス107等を含む。本装置10の各部は、それぞれのインタフェース(I/F)により、バス103を介して相互に接続されている。
【0021】
中央処理装置101は、本装置10の全体の制御を担う。本装置10において、中央処理装置101により、例えば、本発明のプログラムやその他のプログラムが実行され、また、各種情報の読み込みや書き込みが行われる。具体的には、例えば、中央処理装置101が、起点位置情報取得部11、移動情報取得部12、画像情報取得部13、識別情報抽出部14、位置情報抽出部15、及び出力部16として機能する。
【0022】
バス103は、例えば、外部装置とも接続できる。前記外部装置は、例えば、外部記憶装置(外部データベース等)、プリンター、外部入力装置、外部表示装置、外部撮像装置等があげられる。本装置10は、例えば、バス103に接続された通信デバイス107により、外部ネットワーク(前記通信回線網)に接続でき、外部ネットワークを介して、他の装置と接続することもできる。
【0023】
メモリ102は、例えば、メインメモリ(主記憶装置)が挙げられる。中央処理装置101が処理を行う際には、例えば、後述する記憶装置104に記憶されている本発明のプログラム等の種々の動作プログラムを、メモリ102が読み込み、中央処理装置101は、メモリ102からデータを受け取って、プログラムを実行する。前記メインメモリは、例えば、RAM(ランダムアクセスメモリ)である。また、メモリ102は、例えば、ROM(読み出し専用メモリ)であってもよい。
【0024】
記憶装置104は、例えば、前記メインメモリ(主記憶装置)に対して、いわゆる補助記憶装置ともいう。前述のように、記憶装置104には、本発明のプログラムを含む動作プログラムが格納されている。記憶装置104は、例えば、記録媒体と、記録媒体に読み書きするドライブとの組合せであってもよい。前記記録媒体は、特に制限されず、例えば、内蔵型でも外付け型でもよく、HD(ハードディスク)、CD-ROM、CD-R、CD-RW、MO、DVD、フラッシュメモリー、メモリーカード等が挙げられる。記憶装置104は、例えば、記録媒体とドライブとが一体化されたハードディスクドライブ(HDD)、及びソリッドステートドライブ(SSD)であってもよい。本装置10が前記記憶部を含む場合、例えば、記憶装置104は、前記記憶部として機能する。
【0025】
本装置10において、メモリ102及び記憶装置104は、ログ情報、外部データベース(図示せず)や外部の装置から取得した情報、本装置10によって生成した情報、本装置10が処理を実行する際に用いる情報等の種々の情報を記憶することも可能である。なお、少なくとも一部の情報は、例えば、メモリ102及び記憶装置104以外の外部サーバに記憶されていてもよいし、複数の端末にブロックチェーン技術等を用いて分散して記憶されていてもよい。
【0026】
本装置10は、例えば、さらに、入力装置105、ディスプレイ106を備える。入力装置105は、例えば、タッチパネル、トラックパッド、マウス等のポインティングデバイス;キーボード;カメラ、スキャナ等の撮像手段;ICカードリーダ、磁気カードリーダ等のカードリーダ;マイク等の音声入力手段;等があげられる。ディスプレイ106は、例えば、LEDディスプレイ、液晶ディスプレイ等の表示装置があげられる。本実施形態1において、入力装置105とディスプレイ106とは、別個に構成されているが、入力装置105とディスプレイ106とは、タッチパネルディスプレイのように、一体として構成されてもよい。また、本装置10は、例えば、入力装置105として、カメラ等の撮像装置を備え、中央処理装置101が前記撮像装置を制御して画像を取得してもよい。この場合、例えば、前記撮像装置が画像取得部13として機能する。
【0027】
つぎに、本実施形態の画像処理方法の一例を、
図3のフローチャートに基づき説明する。本実施形態の画像処理方法は、例えば、
図1又は
図2の情報紐付装置10を用いて、次のように実施する。なお、本実施形態の画像処理方法は、
図1又は
図2の情報紐付装置10の使用には限定されない。また、以下の例示においては、本装置10が、通信回線網を介して第1ユーザが所持する端末から情報を取得し、取得した各種情報に基づいて処理を行う場合を例に挙げて説明するが、本発明はこれには制限されず、例えば、前記第1ユーザが所持する端末が本装置10であり、前記端末(本装置10)が、直接取得した情報を処理してもよい。前記端末は、前記第1ユーザの端末であり、特に制限されず、例えば、パーソナルコンピュータ、スマートフォン、携帯電話、眼鏡型及び腕時計型等のウェアラブル端末等である。
【0028】
まず、起点位置情報取得部11により、第1起点位置情報を取得する(S1、起点位置情報取得工程)。前記第1起点位置情報は、前記第1のユーザ位置情報の起点となる第1起点位置の情報を含む。前記第1起点位置の情報は、例えば、特定のエリア内に配置された位置コードや方向マークによって、前記第1ユーザの端末の位置や向き(方向)を特定した情報である。前記位置コードは、例えば、前記方向マークを兼ねていてもよく、前記位置コード及び前記方向マークは、例えば、起点マーカ画像ともいう。前記起点マーカ画像は、例えば、起点となる位置が特定できるシンボル画像であり、具体例としては、QRコード(登録商標)、ARマーカー、バーコード、カメレオンコード(登録商標)等があげられる。この場合、例えば、前記第1ユーザが所持する端末の画像取得手段により、起点マーカ画像を撮像し、画像情報取得部13が、前記端末から前記起点マーカ画像を取得し、起点位置情報取得部11は、前記起点マーカ画像から前記第1起点位置情報を取得する。
【0029】
つぎに、移動情報取得部12により、第1ユーザ移動情報を取得する(S2、移動情報取得工程)。前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含む。前記第1のユーザの移動量の情報は、例えば、第1ユーザの端末におけるジャイロセンサ、加速度センサ、地磁気センサ等の位置センサにより取得した情報を用いて算出できる。
【0030】
つぎに、画像情報取得部13により、検索対象物の画像情報を取得する(S3、画像情報取得工程)。具体的には、前記第1ユーザの端末の画像取得手段により、前記検索対象物の画像を撮像し、画像情報取得部13は、前記撮像した検索対象物の画像を取得する。
【0031】
つぎに、識別情報抽出部14により、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出する(S4、識別情報抽出工程)。前記識別情報は、前記検索対象物を特定可能な情報であれば特に制限されず、例えば、JANコード、EANコード、UPCコード、ITF (Interleaved Two of Five)、CODE39、Code128、NW-7等の商品の識別コード;商品のパッケージの画像情報;等があげられる。
【0032】
つぎに、位置情報抽出部15により、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出する(S5、位置情報抽出工程)。具体的に、例えば、位置情報抽出部15は、前記第1ユーザ移動情報に基づき、前記端末が前記第1起点位置画像を取得した際の位置、すなわち、前記第1起点位置から、前記検索対象物の画像情報を取得した際までの移動量を算出することにより、前記第1ユーザの位置情報を抽出できる。
【0033】
そして、出力部16により、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力し(S6、出力工程)、処理を終了する。前記検索対象物の位置情報は、例えば、本装置10が前記記憶部を含む場合、前記記憶部に記憶できる。また、例えば、出力部16により、前記通信回線網を介して、外部のデータベースに前記検索対象物の位置情報を出力し、前記外部のデータベースが、前記検索対象物の位置情報を記憶してもよい。
【0034】
なお、本実施形態の情報紐付方法において、前記S4及びS5をこの順序で実施しているが、本発明の情報紐付方法はこの順序に制限されず、前記S4及びS5を、例えば、S5及びS4の順序で実施してもよいし、S4及びS5を並行して実施してもよい。
【0035】
本実施形態の情報紐付装置10によれば、例えば、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を、前記検索対象物の識別情報と紐付け、前記検索対象物の位置情報を出力できる。このため、本実施形態の情報紐付装置10によれば、例えば、検索対象物の識別情報と、検索対象物の位置情報とを容易に紐づけることができる。
【0036】
[実施形態2]
本実施形態は、実施形態1の情報紐付装置10の構成に加えて、さらに属性情報取得部を含む以外は、実施形態1の情報紐付装置10と同様であり、その説明を援用できる。本実施形態の情報紐付装置は、例えば、さらに、属性情報取得部を含み、前記属性情報取得部は、前記検索対象物の識別情報に基づき、前記検索対象物の属性情報を取得し、前記出力部は、前記検索対象物の位置情報に、前記検索対象物の属性情報を紐づけて出力する。このため、本実施形態によれば、前記検索対象物の識別情報に加えて、前記検索対象物の属性情報を紐づけることできる。このため、本実施形態の情報紐付装置によれば、検索対象物の位置情報に、前記検索対象物のより詳細な情報を紐づけることができる。
【0037】
図4は、本実施形態の情報紐付装置10Aの一例の構成を示すブロック図である。
図4に示すように、情報紐付装置10Aは、実施形態1の報紐付装置10の構成に加えて、さらに、属性情報取得部17を備える。情報紐付装置10Aのハードウェア構成は、
図2の報紐付装置10のハードウェア構成において、中央処理装置101が、
図1の報紐付装置10の構成に代えて、
図4の情報紐付装置10Aの構成を備える以外は同様である。
【0038】
本実施形態の情報紐付装置10A、および支援端末2を含む支援システムにおける処理の一例を、
図5のフローチャートに基づいて説明する。
図5は、情報紐付装置10Aの処理(S1~S5、S11、S12)の一例を示すフローチャートである。
【0039】
まず、実施形態1の情報紐付装置10の処理におけるS1~S5と同様にして、S1~S5を実施する。
【0040】
つぎに、属性情報取得部17は、前記検索対象物の識別情報に基づき、前記検索対象物の属性情報を取得する(S17、属性情報取得工程)。前記属性情報は、特に制限されず、例えば、前記検索対象物が属する物品の詳細な情報があげられる。前記属性情報の具体例として、例えば、前記検索対象物がスーパーマーケットの商品であれば、生産年月日、消費期限、賞味期限、原材料、価格等の情報があげられる。
【0041】
そして、出力部16により、前記検索対象物の位置情報に、さらに、前記属性情報を紐づけて出力し(S12、出力工程)、処理を終了する。
【0042】
なお、本実施形態の情報紐付方法において、前記S11をS5の後に実施しているが、本発明の情報紐付方法はこの順序に制限されず、前記S11は、例えば、S4の下流且つS12の上流の工程で実施されていればよい。このため、本実施形態の情報紐付方法は、S11及びS5を、例えば、S5及びS11の順序で実施してもよいし、S11及びS5を並行して実施してもよい。
【0043】
[実施形態3]
本実施形態は、本発明の画像処理装置と、画像表示端末を含む画像処理システム装置の例である。
【0044】
本実施形態の画像処理システム装置について、
図6を用いて説明する。
図6は、本実施形態の画像処理装置20、画像表示端末30を含む画像処理システム装置200の一例の構成を示すブロック図である。図示していないが、画像処理システム装置200は、例えば、複数の画像表示端末30を含んでもよい。
図6に示すように、画像処理装置20は、通信回線網40を介して、画像表示端末30と接続可能である。また、画像処理システム装置200は、例えば、前記第1ユーザの端末を含んでもよく、この場合、画像処理装置20は、例えば、通信回線網40を介して、前記第1ユーザの端末と接続可能である。また、図示していないが、画像処理装置20は、例えば、通信回線網40を介して、システム管理者の外部端末とも接続可能であり、システム管理者は、前記外部端末から画像処理装置20の管理を実施してもよい。
【0045】
本実施形態の画像処理装置について、
図6を用いて説明する。
図6に示すように、本装置20は、検索対象物の情報紐付部10、撮像情報取得部21、対象物位置情報取得部22、仮想情報生成部23、マップ情報管理部24、端末情報取得部25、及び画像情報出力部26を含む。図示していないが、本装置20は、例えば、記憶部を含んでもよい。
【0046】
本装置20は、例えば、前記各部を含む1つの装置でもよいし、前記各部が、通信回線網を介して接続可能な装置でもよい。また、本装置20は、通信回線網40を介して、後述する外部装置と接続可能である。通信回線網40は、特に制限されず、公知のネットワークを使用でき、例えば、有線でも無線でもよい。通信回線網40は、例えば、インターネット回線、WWW(World Wide Web)、電話回線、LAN(Local Area Network)、SAN(Storage Area Network)、DTN(Delay Tolerant Networking)、LPWA(Low Power Wide Area)、L5G(ローカル5G)、等があげられる。無線通信としては、例えば、Wi-Fi(登録商標)、Bluetooth(登録商標)、ローカル5G、LPWA等が挙げられる。前記無線通信としては、各装置が直接通信する形態(Ad Hoc通信)、インフラストラクチャ(infrastructure通信)、アクセスポイントを介した間接通信等であってもよい。本装置20は、例えば、システムとしてサーバに組み込まれていてもよい。また、本装置20は、例えば、本発明のプログラムがインストールされたパーソナルコンピュータ(PC、例えば、デスクトップ型、ノート型)、スマートフォン、タブレット端末等であってもよい。さらに、本装置20は、例えば、前記各部のうち少なくとも一つがサーバ上にあり、その他の前記各部が端末上にあるような、クラウドコンピューティングやエッジコンピューティング等の形態であってもよい。
【0047】
画像表示端末30は、例えば、PC;携帯電話、スマートフォン、タブレット端末等の携帯端末;スマートウォッチ、スマートグラス、ウェアラブル端末等があげられる。画像表示端末30は、例えば、カメラ、スキャナ等の撮像手段、IC(integrated circuit)カードリーダ、マイク等の音声入力手段等を備えてもよい。画像表示端末30は、例えば、第2ユーザの端末である。
【0048】
図7に、本装置20のハードウェア構成のブロック図を例示する。本装置20は、例えば、中央処理装置(CPU、GPU等)201、メモリ202、バス203、記憶装置204、入力装置205、表示装置206、通信デバイス207等を含む。本装置20の各部は、それぞれのインタフェース(I/F)により、バス203を介して相互に接続されている。
【0049】
中央処理装置201は、本装置20の全体の制御を担う。本装置20において、中央処理装置201により、例えば、本発明のプログラムやその他のプログラムが実行され、また、各種情報の読み込みや書き込みが行われる。具体的には、例えば、中央処理装置201が、検索対象物の情報紐付部10、撮像情報取得部21、対象物位置情報取得部22、仮想情報生成部23、マップ情報管理部24、端末情報取得部25、及び画像情報出力部26として機能する。
【0050】
バス203は、例えば、外部装置とも接続できる。前記外部装置は、例えば、外部記憶装置(外部データベース等)、プリンター、外部入力装置、外部表示装置、外部撮像装置等があげられる。本装置20は、例えば、バス203に接続された通信デバイス207により、外部ネットワーク(前記通信回線網)に接続でき、外部ネットワークを介して、他の装置と接続することもできる。
【0051】
メモリ202は、例えば、メインメモリ(主記憶装置)が挙げられる。中央処理装置201が処理を行う際には、例えば、後述する記憶装置204に記憶されている本発明のプログラム等の種々の動作プログラムを、メモリ202が読み込み、中央処理装置201は、メモリ202からデータを受け取って、プログラムを実行する。前記メインメモリは、例えば、RAM(ランダムアクセスメモリ)である。また、メモリ202は、例えば、ROM(読み出し専用メモリ)であってもよい。
【0052】
記憶装置204は、例えば、前記メインメモリ(主記憶装置)に対して、いわゆる補助記憶装置ともいう。前述のように、記憶装置204には、本発明のプログラムを含む動作プログラムが格納されている。記憶装置204は、例えば、記録媒体と、記録媒体に読み書きするドライブとの組合せであってもよい。前記記録媒体は、特に制限されず、例えば、内蔵型でも外付け型でもよく、HD(ハードディスク)、CD-ROM、CD-R、CD-RW、MO、DVD、フラッシュメモリー、メモリーカード等が挙げられる。記憶装置204は、例えば、記録媒体とドライブとが一体化されたハードディスクドライブ(HDD)、及びソリッドステートドライブ(SSD)であってもよい。本装置20が、例えば、前記記憶部を含む場合、記憶装置204が前記記憶部として機能する。
【0053】
本装置20において、メモリ202及び記憶装置204は、ログ情報、外部データベース(図示せず)や外部の装置から取得した情報、本装置20によって生成した情報、本装置20が処理を実行する際に用いる情報等の種々の情報を記憶することも可能である。なお、少なくとも一部の情報は、例えば、メモリ202及び記憶装置204以外の外部サーバに記憶されていてもよいし、複数の端末にブロックチェーン技術等を用いて分散して記憶されていてもよい。
【0054】
本装置20は、例えば、さらに、入力装置205、ディスプレイ206を備える。入力装置205は、例えば、タッチパネル、トラックパッド、マウス等のポインティングデバイス;キーボード;カメラ、スキャナ等の撮像手段;ICカードリーダ、磁気カードリーダ等のカードリーダ;マイク等の音声入力手段;等があげられる。ディスプレイ206は、例えば、LEDディスプレイ、液晶ディスプレイ等の表示装置があげられる。本実施形態1において、入力装置205とディスプレイ206とは、別個に構成されているが、入力装置205とディスプレイ206とは、タッチパネルディスプレイのように、一体として構成されてもよい。
【0055】
図8に、画像表示端末30のハードウェア構成のブロック図を例示する。
図8に示すように、画像表示端末30は、例えば、CPU301、メモリ302、バス303、記憶装置304、入力装置(入力部)305、撮像部31、通信デバイス(通信部)32、ディスプレイ(表示部)33等を備える。画像表示端末30の各部は、それぞれのインタフェース(I/F)により、バス303を介して接続されている。画像表示端末30の各構成の説明は、画像処理装置20の各構成の説明を援用できる。
【0056】
つぎに、本実施形態の画像処理方法の一例を、
図9のフローチャートに基づき説明する。本実施形態の画像処理方法は、例えば、
図6の画像処理システム装置200を用いて、次のように実施する。なお、本実施形態の画像処理方法は、
図6の画像処理システム装置200の使用には限定されない。
図9は、画像処理システム装置200の処理(S21~S27)の一例を示すフローチャートである。
【0057】
まず、検索対象物の情報紐付部10により、検索対象物の識別情報と、検索対象物の位置情報とを紐づける(S21、検索対象物の情報紐付工程)。S21は、例えば、前記実施形態1のS1~S6、又は実施形態2のS1~S5、S11及びS12と同様にして、S1~S6、又はS1~S5、S11及びS12を実施することにより実施できる。
【0058】
つぎに、撮像情報取得部21により、特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得する(S22、撮像情報取得工程)。前記特定エリアは、特に制限されず、屋内でもよいし、屋外でもよい。前記屋内としては、例えば、スーパーマーケット、家電量販店等の小売店の店舗;倉庫;運送会社のターミナル;サーバールーム;オフィス;図書館;等があげられる。前記撮像画像は、例えば、静止画でもよいし、動画でもよい。前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含む。前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報であること以外は、例えば、前記第1起点位置情報と同様であり、その記載を援用できる。前記撮像画像の取得は、例えば、前記第2ユーザの端末(画像表示端末30)の撮像部31により撮像された前記撮像画像を、通信回線網40を介して取得することにより実行できる。
【0059】
つぎに、対象物位置情報取得部22により、検索対象物の情報紐付部10により出力された前記検索対象物の位置情報を取得する(S23、対象物位置情報取得工程)。
【0060】
つぎに、仮想情報生成部23により、前記特定エリアに関する仮想画像を生成する(S24、仮想情報生成工程)。前記生成する仮想画像は、例えば、前記特定エリアにおける前記検索対象物の仮想画像を含む。前記検索対象物の仮想画像は、例えば、前記検索対象物の位置情報と、前記検索対象物の位置画像とが互いに紐づけられている。前記仮想画像の生成とは、例えば、予め、メモリ202や記憶装置204に記憶されている前記仮想画像を読み出すことを意味してもよいし、外部のデータベースから前記通信回線網を介して前記仮想画像を取得することを意味してもよい。また、仮想情報生成部23は、例えば、前記特定エリアに関する情報(特定エリア情報ともいう)を取得し、前記特定エリア情報に基づき、前記仮想画像を生成してもよい。前記検索対象物の仮想画像は、例えば、前記検索対象物の「ピン」、「ピン画像」等ともいう。
【0061】
つぎに、マップ情報管理部24により、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理する(S25、マップ情報管理工程)。前記マップは、例えば、前記特定エリアを二次元的に表現したマップであってもよいし、三次元的に表現したマップであってもよい。
【0062】
つぎに、端末情報取得部25により、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得する(S26、端末情報取得工程)。端末情報取得部26は、例えば、前記撮像画像と紐づけて、前記端末の位置情報及び向き情報を取得してもよい。前記向き情報とは、例えば、前記端末の撮像装置による撮像方向ともいえる。
【0063】
そして、画像情報出力部26により、前記撮像画像に前記仮想画像を重畳した合成画像を出力し(S27、画像情報出力工程)、終了する(END)。前記出力は、例えば、前記通信回線網を介して、実行されてもよい。具体的には、画像情報出力部26により、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳する。
【0064】
また、仮想情報生成部23により生成される前記対象物毎の仮想画像は、さらに、前記検索対象物の詳細情報画像を含んでもよい。前記詳細情報画像は、例えば、前記検索対象物の属性情報を含む。この場合、前記検索対象物の位置画像及び前記詳細情報画像は前記検索対象物毎に互いに紐づけられている。そして、画像情報出力部26は、例えば、前記工程(S27)において、さらに、前記撮像画像内にウインドウ部を設け、前記ウインドウ部に前記撮像画像内に存在する前記検索対象物の位置画像と紐づけられている前記詳細情報画像を重畳する。前記ウインドウ部は、例えば、複数の前記詳細情報画像を遷移可能な画面で表示可能である。前記詳細情報画像は、例えば、1層又は2層以上の階層構造の画像である。前記詳細情報画像が1層又は2層以上の階層構造の画像である場合、前記ウインドウ部は、例えば、前記詳細情報画像を階層毎の画像を遷移可能な画面で表示可能である。具体的に、前記詳細情報画像は、例えば、前記検索対象物の詳細情報(例えば、前記検索対象物の属性情報)に基づく画像であり、1つの前記対象物の位置画像に対し、1つの前記詳細情報画像が紐づけられていてもよいし、2つの前記詳細情報画像が紐づけられていてもよい。
【0065】
本実施形態によれば、前記本発明の情報紐付装置により紐づけられた検索対象物の位置情報を用いて、検索対象物の仮想画像を表示できる。
【0066】
[実施形態4]
本実施形態は、実施形態3の画像表示システム装置200において、画像処理装置20が、さらに選別情報取得部を含み、画像表示端末30が、さらに入力部を含む以外は、実施形態3の画像表示システム装置200と同様であり、その説明を援用できる。本実施形態の画像処理装置は、例えば、選別情報取得部を備え、前記選別情報取得部は、前記検索対象物の選別を行う選別情報を取得し、前記画像情報出力部は、前記選別情報に基づいて、前記撮像画像内に存在する前記検索対象物を選別し、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する。また、本実施形態の画像表示端末は、例えば、入力部を含み、前記入力部は、前記選別情報を入力可能であり、前記通信部は、前記本発明の画像処理装置に前記選別情報を送信可能であり、且つ、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を受信可能であり、前記表示部は、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を表示する。このため、本実施形態によれば、選別情報に基づき検索対象物を選別し、選別後の検索対象物に対応する位置に前記位置画像を重畳した画像を出力できる。したがって、本実施形態によれば、例えば、前記第2ユーザは、仮想画像上で任意の検索対象物のみをできるため、容易に所望の検索対象物を発見できる。本実施形態の画像処理システム装置は、例えば、対象物の検索システム装置ともいうことができる。
【0067】
図10は、本実施形態の画像処理装置20A、画像表示端末30Aを含む画像処理システム装置200Aの一例の構成を示すブロック図である。
図10に示すように、画像処理装置20Aは、実施形態3の画像処理装置20の構成に加えて、さらに、選別情報取得部27を備える。画像処理装置20Aのハードウェア構成は、
図7の画像処理装置20のハードウェア構成において、中央処理装置201が、
図6の画像処理装置20の構成に代えて、
図10の画像処理装置20Aの構成を備える以外は同様である。また、
図10に示すように、画像表示端末30Aは、実施形態3の画像表示端末30の構成に加えて、さらに、入力部34を備える。画像表示端末30Aのハードウェア構成は、
図8の画像表示端末30のハードウェア構成において、入力装置305が、入力部34として機能する以外は同様である。
【0068】
つぎに、本実施形態の画像処理方法の一例を、
図11のフローチャートに基づき説明する。本実施形態の画像処理方法は、例えば、
図10の画像処理システム装置200Aを用いて、次のように実施する。なお、本実施形態の画像処理方法は、
図10の画像処理システム装置200Aの使用には限定されない。
図11は、画像処理システム装置200Aの処理(S21~S27、S31)の一例を示すフローチャートである。
【0069】
まず、実施形態3の画像処理システム装置200の処理におけるS21~S26と同様にして、S21~S26を実施する。
【0070】
つぎに、例えば、前記第2ユーザが、画像表示端末30Aの入力部34により、選別情報を入力し、画像表示端末30Aの通信部32により、通信回線網40を介して、前記選別情報を画像処理システム装置200Aに送信する。前記選別情報は、例えば、前記検索対象物の選別を行うための情報であり、任意の情報が設定できる。前記選別情報の具体例としては、例えば、前記検索対象物の属性情報があげられる。具体的には、例えば、前記検索対象物がスーパーマーケットの商品であれば、生産年月日、消費期限、賞味期限、原材料、価格等の情報を、前記選別情報として入力できる。前記選別情報の具体例としては、例えば、前記検索対象物の食材情報(例えば、ピーナッツ、小麦、そば、ダイズ、ごま、大麦等の穀物類及びごま;卵、乳、牛肉、豚肉、鶏肉、鮭、鯖、エビ、カニ、イカ、タコ、魚卵、アワビ、いくら、ゼラチン等の肉、卵、及び魚介類;)、価格情報(例えば、¥0~100、¥101~500、¥500~等)の情報を入力できる。前記選別情報は、例えば、前記属性情報を含む検索対象物について、表示から除外するための情報でもよいし、前記属性情報を含む検索対象物について表示するための情報でもよい。また、前記選別情報は、複数の情報を入力してもよい。この場合、例えば、特定のアレルゲンを含む食品を除外する、ハラール対応、ビーガン対応の商品のみを選択する、特定の価格帯の商品のみを選択する等、複数の属性情報をひとまとめにした選別情報を画像表示端末30Aの表示部33に表示し、第2ユーザにこれらを選択させることにより、前記選別情報を入力させてもよい。
【0071】
そして、選別情報取得部27は、前記選別情報を取得する(S31、選別情報取得工程)。
【0072】
つぎに、画像情報出力部26は、前記選別情報に基づいて、前記撮像画像内に存在する前記検索対象物を選別し、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力し(S27、画像情報出力工程)、画像処理装置200Aによる処理を終了する(END)。
【0073】
その後、画像表示端末30Aの通信部32により、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を受信し、表示部33により、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を表示する。
図12に、画像表示端末30Aに表示される画像の一例を示す。
【0074】
図12に示すように、画像表示端末30Aの表示部33には、特定エリアとして、スーパーマーケットの店内を撮像した撮像画像中に含まれる検索対象物(スーパーマーケットの商品)に対応する位置に、位置画像331を重畳した仮想画像が表示される。また、位置画像331を選択すると、表示部33に表示されたウインドウ部332に、選択した商品に関する詳細情報画像が重畳して表示される。前記第2ユーザは、前記選別情報を入力することにより、所望の属性を備える検索対象物に対応する位置画像331のみを表示部33に表示することができるため、容易に所望の属性を備える検索対象物を発見することができる。
【0075】
[実施形態5]
本実施形態の第1のプログラムは、前述の情報紐付方法の各工程を、コンピュータに実行させるためのプログラムである。具体的に、本実施形態のプログラムは、コンピュータに、起点位置情報取得手順、移動情報取得手順、画像情報取得手順、識別情報抽出手順、位置情報抽出手順、及び、出力手順を実行させるためのプログラムである。
【0076】
前記起点位置情報取得手順は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得手順は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得手順は、検索対象物の画像情報を取得し、
前記識別情報抽出手順は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出手順は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力手順は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する。
【0077】
また、本実施形態のプログラムは、コンピュータを、起点位置情報取得手順、移動情報取得手順、画像情報取得手順、識別情報抽出手順、位置情報抽出手順、及び、出力手順として機能させるプログラムということもできる。
【0078】
本実施形態のプログラムは、前記本発明の情報紐付装置および情報紐付方法における記載を援用できる。前記各手順は、例えば、「手順」を「処理」と読み替え可能である。また、本実施形態のプログラムは、例えば、コンピュータ読み取り可能な記録媒体に記録されてもよい。前記記録媒体は、例えば、非一時的なコンピュータ可読記録媒体(non-transitory computer-readable storage medium)である。前記記録媒体は、特に制限されず、例えば、ランダムアクセスメモリ(RAM)、読み出し専用メモリ(ROM)、ハードディスク(HD)、光ディスク、フロッピー(登録商標)ディスク(FD)等があげられる。
【0079】
[実施形態6]
本実施形態の第2のプログラムは、前述の画像処理方法の各工程を、コンピュータに実行させるためのプログラムである。具体的に、本実施形態のプログラムは、コンピュータに、検索対象物の情報紐付手順、撮像情報取得手順、対象物位置情報取得手順、仮想情報生成手順、マップ情報管理手順、端末情報取得手順、特定手順、及び画像情報出力手順を実行させる。
【0080】
前記検索対象物の情報紐付手順は、前記本発明の第1のプログラムにより実行され、
前記撮像情報取得手順は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記仮想情報生成手順は、前記特定エリアに関する仮想画像を生成し、
前記対象物位置情報取得手順は、前記検索対象物の情報紐付手順により出力された前記検索対象物の位置情報を取得し、
前記マップ情報管理手順は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得手順は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力手順は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成手順において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力手順は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する。
【0081】
また、本実施形態の第2のプログラムは、コンピュータを、検索対象物の情報紐付手順、撮像情報取得手順、対象物位置情報取得手順、仮想情報生成手順、マップ情報管理手順、端末情報取得手順、特定手順、及び画像情報出力手順として機能させるプログラムということもできる。
【0082】
本実施形態のプログラムは、前記本発明の画像処理装置および画像処理方法における記載を援用できる。前記各手順は、例えば、「手順」を「処理」と読み替え可能である。また、本実施形態のプログラムは、例えば、コンピュータ読み取り可能な記録媒体に記録されてもよい。前記記録媒体は、例えば、非一時的なコンピュータ可読記録媒体(non-transitory computer-readable storage medium)である。前記記録媒体は、特に制限されず、例えば、ランダムアクセスメモリ(RAM)、読み出し専用メモリ(ROM)、ハードディスク(HD)、光ディスク、フロッピー(登録商標)ディスク(FD)等があげられる。
【0083】
以上、実施形態を参照して本発明を説明したが、本発明は、上記実施形態に限定されるものではない。本発明の構成や詳細には、本発明のスコープ内で当業者が理解しうる様々な変更をできる。
【0084】
<付記>
上記の実施形態の一部または全部は、以下の付記のように記載されうるが、以下には限られない。
(付記1)
起点位置情報取得部、移動情報取得部、画像情報取得部、識別情報抽出部、位置情報抽出部、及び、出力部を含み、
前記起点位置情報取得部は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得部は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得部は、検索対象物の画像情報を取得し、
前記識別情報抽出部は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出部は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力部は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する、ことを特徴とする検索対象物の情報紐付装置。
(付記2)
前記画像情報取得部は、起点マーカ画像を取得し、
前記起点位置情報取得部は、前記起点マーカ画像から前記第1起点位置情報を取得する、付記1記載の情報紐付装置。
(付記3)
属性情報取得部を含み、
前記属性情報取得部は、前記検索対象物の識別情報に基づき、前記検索対象物の属性情報を取得し、
前記出力部は、前記検索対象物の位置情報に、前記検索対象物の属性情報を紐づけて出力する、付記1又は2に記載の情報紐付装置。
(付記4)
検索対象物の情報紐付部、撮像情報取得部、対象物位置情報取得部、仮想情報生成部、マップ情報管理部、端末情報取得部、特定部、及び画像情報出力部を含み、
前記検索対象物の情報紐付部は、付記1から3のいずれかに記載の検索対象物の情報紐付装置であり、
前記撮像情報取得部は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得部は、前記検索対象物の情報紐付部により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成部は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理部は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得部は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力部は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成部において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力部は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、画像処理装置。
(付記5)
前記検索対象物毎の仮想画像は、さらに、前記検索対象物の詳細情報画像を含み、前記位置画像及び前記詳細情報画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力部は、前記撮像画像内にウインドウ部を設け、前記ウインドウ部に前記撮像画像内に存在する前記検索対象物の位置画像と紐づけられている前記詳細情報画像を重畳する、付記4に記載の画像処理装置。
(付記6)
選別情報取得部を備え、
前記選別情報取得部は、前記検索対象物の選別を行う選別情報を取得し、
前記画像情報出力部は、前記選別情報に基づいて、前記撮像画像内に存在する前記検索対象物を選別し、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、付記4又は5記載の画像処理装置。
(付記7)
撮像部、通信部、表示部を含み、
前記撮像部は、特定エリアにおける起点位置情報を含む撮像画像を撮像し、
前記通信部は、付記4から6のいずれかに記載の画像処理装置と通信可能であり、前記撮像画像を前記画像処理装置に送信可能であり、且つ、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を受信可能であり、
前記表示部は、前記位置画像を重畳した画像を表示する、画像表示端末。
(付記8)
入力部を含み、
前記入力部は、前記選別情報を入力可能であり、
前記通信部は、付記6記載の画像処理装置に前記選別情報を送信可能であり、且つ、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を受信可能であり、
前記表示部は、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を表示する、付記7に記載の画像表示端末。
(付記9)
サーバと、端末とを含み、
前記サーバと、前記端末とは、互いに通信可能であり、
前記サーバが、付記4から6のいずれかに記載の画像処理装置であり、
前記端末が、付記7又は8記載の画像表示端末である、画像処理システム装置。
(付記10)
起点位置情報取得工程、移動情報取得工程、画像情報取得工程、識別情報抽出工程、位置情報抽出工程、及び、出力工程を含み、
前記起点位置情報取得工程は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得工程は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得工程は、検索対象物の画像情報を取得し、
前記識別情報抽出工程は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出工程は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力工程は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する、ことを特徴とする検索対象物の情報紐付方法。
(付記11)
前記画像情報取得工程は、起点マーカ画像を取得し、
前記起点位置情報取得工程は、前記起点マーカ画像から前記第1起点位置情報を取得する、付記10記載の情報紐付方法。
(付記12)
属性情報取得工程を含み、
前記属性情報取得工程は、前記検索対象物の識別情報に基づき、前記検索対象物の属性情報を取得し、
前記出力工程は、前記検索対象物の位置情報に、前記検索対象物の属性情報を紐づけて出力する、付記10又は11に記載の情報紐付方法。
(付記13)
検索対象物の情報紐付工程、撮像情報取得工程、対象物位置情報取得工程、仮想情報生成工程、マップ情報管理工程、端末情報取得工程、特定工程、及び画像情報出力工程を含み、
前記検索対象物の情報紐付工程は、付記10から12のいずれかに記載の検索対象物の情報紐付方法であり、
前記撮像情報取得工程は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得工程は、前記検索対象物の情報紐付工程により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成工程は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理工程は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得工程は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力工程は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成工程において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力工程は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、画像処理方法。
(付記14)
前記検索対象物毎の仮想画像は、さらに、前記検索対象物の詳細情報画像を含み、前記位置画像及び前記詳細情報画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力工程は、前記撮像画像内にウインドウ工程を設け、前記ウインドウ工程に前記撮像画像内に存在する前記検索対象物の位置画像と紐づけられている前記詳細情報画像を重畳する、付記13に記載の画像処理方法。
(付記15)
選別情報取得工程を備え、
前記選別情報取得工程は、前記検索対象物の選別を行う選別情報を取得し、
前記画像情報出力工程は、前記選別情報に基づいて、前記撮像画像内に存在する前記検索対象物を選別し、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、付記13又は14記載の画像処理方法。
(付記16)
コンピュータに、起点位置情報取得手順、移動情報取得手順、画像情報取得手順、識別情報抽出手順、位置情報抽出手順、及び、出力手順を実行させるためのプログラムであって、
前記起点位置情報取得手順は、第1起点位置情報を取得し、
前記第1起点位置情報は、第1ユーザの位置情報の起点となる第1起点位置の情報を含み、
前記移動情報取得手順は、第1ユーザ移動情報を取得し、
前記第1ユーザ移動情報は、前記第1起点位置からの第1のユーザの移動量の情報を含み、
前記画像情報取得手順は、検索対象物の画像情報を取得し、
前記識別情報抽出手順は、前記検索対象物の画像情報から、前記検索対象物の識別情報を抽出し、
前記位置情報抽出手順は、前記第1起点位置情報と、前記第1ユーザ移動情報とに基づき、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報を抽出し、
前記出力手順は、前記検索対象物の識別情報と、前記検索対象物の画像情報を取得した際の前記第1ユーザの位置情報とを紐づけて、前記検索対象物の位置情報として出力する、ことを特徴とするプログラム。
(付記17)
前記画像情報取得手順は、起点マーカ画像を取得し、
前記起点位置情報取得手順は、前記起点マーカ画像から前記第1起点位置情報を取得する、付記16記載のプログラム。
(付記18)
コンピュータに、さらに属性情報取得手順を実行させるためのプログラムであって、
前記属性情報取得手順は、前記検索対象物の識別情報に基づき、前記検索対象物の属性情報を取得し、
前記出力手順は、前記検索対象物の位置情報に、前記検索対象物の属性情報を紐づけて出力する、付記16又は17に記載のプログラム。
(付記19)
コンピュータに、検索対象物の情報紐付手順、撮像情報取得手順、対象物位置情報取得手順、仮想情報生成手順、マップ情報管理手順、端末情報取得手順、特定手順、及び画像情報出力手順を実行させるためのプログラムであって、
前記検索対象物の情報紐付手順は、付記16から17のいずれかに記載のプログラムにより実行され、
前記撮像情報取得手順は、第2ユーザにより特定エリアで撮像された、第2起点位置情報を含む撮像画像を取得し、
前記第2起点位置情報は、第2ユーザの位置情報の起点となる第2起点位置の情報を含み、
前記対象物位置情報取得手順は、前記検索対象物の情報紐付手順により出力された前記検索対象物の位置情報を取得し、
前記仮想情報生成手順は、前記特定エリアに関する仮想画像を生成し、
前記マップ情報管理手順は、前記特定エリアのマップ上に前記検索対象物の位置情報を紐づけて管理し、
前記端末情報取得手順は、前記第2起点位置情報に基づき、前記端末の位置情報及び前記端末の向き情報を取得し、
前記画像情報出力手順は、前記撮像画像に前記仮想画像を重畳した合成画像を出力し、
前記仮想情報生成手順において生成する仮想画像は、前記特定エリアの前記検索対象物毎の仮想画像を含み、
前記検索対象物毎の仮想画像は、前記検索対象物の位置画像を含み、前記位置画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力手順は、前記撮像画像内に存在する前記検索対象物に対して、前記撮像画像内の前記検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、プログラム。
(付記20)
前記検索対象物毎の仮想画像は、さらに、前記検索対象物の詳細情報画像を含み、前記位置画像及び前記詳細情報画像は前記検索対象物毎に互いに紐づけられており、
前記画像情報出力手順は、前記撮像画像内にウインドウ手順を設け、前記ウインドウ手順に前記撮像画像内に存在する前記検索対象物の位置画像と紐づけられている前記詳細情報画像を重畳する、付記19に記載のプログラム。
(付記21)
コンピュータに、さらに選別情報取得手順を実行させるためのプログラムであって、
前記選別情報取得手順は、前記検索対象物の選別を行う選別情報を取得し、
前記画像情報出力手順は、前記選別情報に基づいて、前記撮像画像内に存在する前記検索対象物を選別し、前記選別した検索対象物に対応する位置に前記位置画像を重畳した画像を前記端末に出力する、付記19又は20記載のプログラム。
(付記22)
付記16から21のいずれかに記載のプログラムを記録しているコンピュータ読み取り可能な記録媒体。
【産業上の利用可能性】
【0085】
本発明によれば、検索対象物の識別情報と、検索対象物の位置情報とを容易に紐づけることができる。このため、本発明によれば、検索対象物の種類と位置情報を対応付けたデータベースを容易に構築することができ、効率的に検索対象物を検索できる。こんため、例えば、物品の管理が必要となる様々な分野において特に有用である。
【符号の説明】
【0086】
10、10A 情報紐付装置、情報紐付部
11 起点位置情報取得部
12 移動嬢王取得部
13 画像情報取得部
14 識別情報抽出部
15 位置情報抽出部
16 出力部
17 属性情報抽出部
101 中央処理装置
102 メモリ
103 バス
104 記憶装置
105 入力装置
106 表示装置
107 通信デバイス
200、200A 画像処理システム装置
20、20A 画像処理装置
21 撮像情報取得部
22 対象物位置情報取得部
23 仮想情報生成部
24 マップ情報管理部
25 端末情報取得部
26 画像情報出力部
27 選別情報取得部
201 中央処理装置
202 メモリ
203 バス
204 記憶装置
205 入力装置
206 表示装置
207 通信デバイス
30、30A 画像表示端末
31 撮像部
32 通信部(通信デバイス)
33 表示部(ディスプレイ)
34 入力部
301 中央処理装置
302 メモリ
303 バス
304 記憶装置
305 入力部