特許 6069423 位置検出システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6069423

(24)【登録日】2017年1月6日

(45)【発行日】2017年2月1日

(54)【発明の名称】位置検出システム

(51)【国際特許分類】

   G06F 21/30 20130101AFI20170123BHJP

   H04M 11/00 20060101ALI20170123BHJP

   H04M 1/00 20060101ALI20170123BHJP

   H04N 5/232 20060101ALI20170123BHJP

【ＦＩ】

   G06F21/30

   H04M11/00 301

   H04M1/00 R

   H04N5/232 Z

【請求項の数】5

【全頁数】17

(21)【出願番号】特願2015-133990(P2015-133990)

(22)【出願日】2015年7月2日

(65)【公開番号】特開2017-16488(P2017-16488A)

(43)【公開日】2017年1月19日

【審査請求日】2015年11月19日

(73)【特許権者】

【識別番号】501440684

【氏名又は名称】ソフトバンク株式会社

(74)【代理人】

【識別番号】100154195

【弁理士】

【氏名又は名称】丸林 敬子

(74)【代理人】

【識別番号】100171826

【弁理士】

【氏名又は名称】丸林 啓介

(72)【発明者】

【氏名】亀田 裕一

【審査官】 岸野 徹

(56)【参考文献】

【文献】 特開２００７−０７２８６１（ＪＰ，Ａ）

【文献】 特開２０１０−２３１３９７（ＪＰ，Ａ）

【文献】 特開２００８−１０２８９０（ＪＰ，Ａ）

【文献】 特開２００６−２５９９２４（ＪＰ，Ａ）

【文献】 特開２００９−０６４１４０（ＪＰ，Ａ）

【文献】 特開２０００−２９８７２７（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ ２１／３０

Ｈ０４Ｍ １／００

Ｈ０４Ｍ １１／００

Ｈ０４Ｎ ５／２３２

(57)【特許請求の範囲】

【請求項1】

ディスプレイの表示画面を見ている複数人の瞳に写る画像を捕らえるカメラと、前記カメラで捕らえた画像から複数人のうちの一部の人の瞳に写る画像を分析して前記一部の人を特定する瞳画像分析手段と、を備えたことを特徴とする位置検出システム。

【請求項2】

複数人を撮影するカメラと、複数人の瞳に写る画像をカメラで撮影しかつ撮影された画像から複数人のうちの一部の瞳に写る画像を分析して前記一部の人を特定する瞳画像分析手段とを備えたことを特徴とする位置検出システム。

【請求項3】

複数人を撮影するカメラと、カメラで撮影した複数人の画像を分析する画像分析手段と、画像分析手段で複数人のうちの一部の人の瞳に写る画像をカメラで撮影しかつ撮影された瞳の画像を分析して前記一部の人を特定する瞳画像分析手段とを備えたことを特徴とする位置検出システム。

【請求項4】

瞳画像分析手段による画像の分析は、瞳に写る画像の形又は色によって分析する請求項１乃至３のいずれかに記載の位置検出システム。

【請求項5】

ディスプレイを備えた携帯端末を用いることを特徴とする請求項１乃至３のいずれかに記載の位置検出システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、複数人の中から個人を特定する、位置検出システムに関する。

【背景技術】

【0002】

図９を用いて、特許文献１で開示された位置検出システムについて説明する。図９に示した位置検出システムでは、携帯端末１０１を所持する人が部屋１０２から部屋１０３に移動した場合、部屋１０２に設置された人感センサ１０４がオフの検出結果及び位置情報を管理装置１０６へ送信し、部屋１０３に設けられた人感センサ１０５が部屋１０３に入室した人を検出したオンの検出結果及び位置情報を管理装置１０６へ送信し、携帯端末１０１が内蔵された加速度センサや地磁気センサの計測値を基に演算した部屋１０２から部屋１０３への移動方向を示す携帯端末移動情報ＡＢを計算して管理装置１０６へ送信し、管理装置１０６が人感センサ１０４，１０５から取得した位置情報を基に人感センサ１０４から人感センサ１０５への方向を示す人感センサ方向情報ａｂを計算する。そして、管理装置１０６は、携帯端末移動情報ＡＢで示される方向と人感センサ方向情報ａｂで示される方向との差が所定の範囲内であれば携帯端末１０１を所持した人が部屋１０２から部屋１０３に移動したと判断し、携帯端末移動情報ＡＢで示される方向と人感センサ方向情報ａｂで示される方向との差が所定の範囲外であれば携帯端末１０１を所持した人以外の人が別の部屋から部屋１０３へ移動してきたと判断する。即ち、特許文献１で開示された位置検出システムでは、携帯端末移動情報ＡＢと人感センサ方向情報ａｂとに基づいて携帯端末１０１を所持する人の位置を特定するようになっている。

【0003】

しかしながら、図９の位置検出システムでは、複数人が同時期に部屋１０２から部屋１０３に移動した場合はその複数人の中から個人の位置を特定することが困難である。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１５−６１２０３号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明は、上記背景技術に鑑みてなされたものであり、複数人のうちから一部の人の瞳に写る画像を分析して前記一部の人を特定できる位置検出システムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明は、ディスプレイの表示画面を見ている複数人の瞳に写る画像をカメラで捕らえ、捕らえた画像から複数人のうちの一部の人を特定することを特徴とする。

【発明の効果】

【0007】

本発明によれば、カメラで捕らえた複数人の瞳に写る画像から複数人のうちの一部を特定するので、複数人の中から個人を特定することができる。

【図面の簡単な説明】

【0008】

【図1】発明を実施するための形態１に係る位置検出システムを示す構成図。

【図2】発明を実施するための形態１に係る位置検出処理を示すフローチャート。

【図3】発明を実施するための形態２に係る位置検出システムを示す構成図。

【図4】発明を実施するための形態２に係る位置検出処理を示すフローチャート。

【図5】発明を実施するための形態３に係る位置検出システムを示す構成図。

【図6】発明を実施するための形態３に係る位置検出処理を示すフローチャート。

【図7】発明を実施するための形態４に係る位置検出システムを示す構成図。

【図8】発明を実施するための形態４に係る位置検出処理を示すフローチャート。

【図9】従来の位置検出システムを示す構成図。

【発明を実施するための形態】

【0009】

図１を用いて、発明を実施するための形態１に係る位置検出システムについて説明する。図１に示した位置検出システムは、学校の教室１０において講義を受講している複数の学生をカメラ１１で撮影し、画像分析手段５が上記撮影した画像の中から他の学生と異なる姿勢をとる学生を特定し、瞳画像分析手段６が画像分析手段５で特定された学生の瞳に写る画像をカメラ１１で撮影し、その撮影した学生の瞳に写る画像から特異な学生を個人として特定するものである。

【0010】

図１に示す位置検出システムは、管理装置１、入力部２、出力部３、記憶部７、教室１０に設けられたカメラ１１からなる。管理装置１は、カメラ１１で教室１０に居る複数人としての全部の学生を撮影した画像から特異な学生を特定するものであって、カメラ１１を制御するカメラ制御手段４、カメラ１１で撮影した画像を分析する画像分析手段５、カメラ１１で撮影した画像のうち人の瞳の画像を分析する瞳画像分析手段６を備える。カメラ制御手段４、画像分析手段５、瞳画像分析手段６は、管理装置１の図示のされていないコンピューターにより具現化される。

【0011】

入力部２は、操作部やキーボードなどであって、人により操作されることでカメラ制御手段４に対してカメラ１１の撮影開始及び撮影範囲などの動作を指示する。出力部３は、画像分析手段５や瞳画像分析手段６で分析した画像を人が視聴覚できるように表示する機能を備えており、ディスプレイやプリンター或いはスピーカーなどにより構成される。記憶部７は、カメラ１１で撮影した画像を分析する際にどのようなタイミングで分析するかを示す時期データを記憶する時期データ部８とカメラ１１で撮影した画像のうち、例えば、顔を下に向けたままの学生のように他の学生とは異なる姿勢をとる学生の画像を記憶する収集データ部９とを備える。時期データ部８は、画像の分析タイミングとして撮影開始からの所定時間、例えば、撮影開始から５分後、１５分後、３０分後などの撮影した画像を分析するタイミングを複数個記憶する。

【0012】

例えば、管理装置１の図示のされていないコンピューターが講義を受講している複数の学生の中から特異な学生を特定するように起動し、教室１０に円形に示した複数人の学生が方形に示した複数個の席のそれぞれに着席し、図示のされていない講師が教室１０に居る全部の学生に講義を開始する際に、講師又は別の人が入力部２を操作すると、カメラ１１がカメラ制御手段４からの制御により撮影を開始し教室１０に居る全部の学生を撮影する。そしてカメラ１１が教室１０に居る全部の学生に対する撮影を開始した後、時期データ部８の分析タイミングごとに、画像分析手段５が上記全部の学生に対するカメラ１１で撮影した画像を分析し、他の学生と異なる姿勢をとる学生の画像を分析した場合はその学生の画像を収集データ部９に記憶するとともにカメラ制御手段４にズームアップの指示を行い、カメラ制御手段４がカメラ１１を他の学生と異なる姿勢をとる学生にズームアップしてカメラ１１で他の学生と異なる姿勢をとる学生の瞳に写る画像を撮影するようにカメラ１１を制御し、カメラ１１で撮影した瞳に写る画像を瞳画像分析手段６が分析して他の学生と異なる姿勢をとる特異な学生を特定する。

【0013】

具体的には、上記画像分析手段５が他の学生と異なる姿勢をとる学生１５又は学生１５，１６又は学生１５乃至１７の画像を分析した場合は、それら分析した学生１５又は学生１５，１６又は学生１５乃至１７の画像を収集データ部９に記憶するとともにカメラ制御手段４にズームアップ指示を行う。これにより、カメラ制御手段４がカメラ１１を学生１５又は学生１５，１６又は学生１５乃至１７にズームアップされたカメラ１１で学生１５又は学生１５，１６又は学生１５乃至１７の瞳に写る画像を撮影し、瞳画像分析手段６が上記カメラ１１で撮影した学生１５又は学生１５，１６又は学生１５乃至１７の瞳に写る画像を分析して他の学生と異なる姿勢をとる学生１５又は学生１５，１６又は学生１５乃至１７を特定する。又、時期データ部８の分析タイミングごとに、画像分析手段５が他の学生と異なる姿勢をとる学生などの画像を分析しなかった場合は収集データ部９に記憶しない。尚、席１２に学生１５が着席し、席１３に学生１６が着席し、席１４に学生１７が着席した場合を例示した。

【0014】

次に、発明を実施するための形態１の動作について図２を用いて説明する。尚、カメラ１１は図示のされない講師の近傍に配置されているものとする。管理装置１の図示のされていないコンピューターが起動し、当該コンピューターによる図２に示した処理が開始すると、ステップ２０１で撮影開始であるかを判断する。そして、講師が講義を開始する際に、講師又は別の人が入力部２を操作しない場合は、ステップ２０１で「ＮＯ」と判断し、ステップ２０１に戻り、講師又は別の人が入力部２を操作した場合は、ステップ２０１で「ＹＥＳ」と判断し、カメラ制御手段４がカメラ１１を制御し、カメラ１１の動作により、カメラ１１は教室１０に居る全学生の撮影を開始する。カメラ１１で撮影された画像は、出力部３のディスプレイに可視画像として表示される。カメラ１１は講師の近傍に配置されているので、学生が講義を受けているときは、講師の方を向くため、学生はカメラ１１の方向に顔を向けていることになる。よって、カメラ１１により撮影された画像には教室１０に居る全学生の顔が撮影され、出力部３のディスプレイには教室１０に居る全学生の顔の画像が可視画像として表示され、ステップ２０２に進む。

【0015】

ステップ２０２では、画像分析手段５が時期データ部８の時期データに基づき分析時期であるか判断し、分析時期でない場合は、ステップ２０２で「ＮＯ」と判断し、ステップ２０２に戻り、分析時期である場合は、ステップ２０２で「ＹＥＳ」と判断し、ステップ２０３に進む。ステップ２０３では、画像分析手段５が分析時期の画像を取得して分析し、ステップ２０４に進む。ステップ２０４では、画像分析手段５がステップ２０３で分析した画像の中に他の学生と異なる姿勢をとる学生の画像があるかを判断し、他の学生と異なる姿勢をとる学生の画像がないと判断した場合は、ステップ２０４で「ＮＯ」と判断し、ステップ２０２に戻り、他の学生と異なる姿勢をとる学生の画像があると判断した場合は、ステップ２０２で「ＹＥＳ」と判断し、ステップ２０５に進む。

【0016】

尚、ステップ２０４での他の学生と異なる姿勢をとる学生の画像の判断は、画像分析手段５に学生の顔を確認する解析機能を持たせ、画像分析手段５の解析機能により他の学生と異なる姿勢をとる学生を特定した場合を例示したが、講師又は入力部２を操作する人が出力部３に表示される画像を見て他の学生と異なる姿勢をとる学生がいるかどうかを判断することも適用可能である。このように講師又は入力部２を操作する人が出力部３に表示される画像を見て他の学生と異なる姿勢をとる学生がいるかどうかを判断する場合は、他の学生と異なる姿勢をとる学生がいると判断した人が入力部２の図示のされていないズームアップ部を操作することにより、ステップ２０５に進む。

【0017】

ステップ２０５では、カメラ制御手段４が他の学生と異なる姿勢をとる学生とその周囲とにカメラ１１をズームアップし、カメラ１１が他の学生と異なる姿勢をとる学生の瞳とその周囲の学生の瞳とを撮影し、ステップ２０６に進む。ステップ２０６では、瞳画像分析手段６がステップ２０５で撮影した他の学生と異なる姿勢をとる学生の瞳に写る画像をその周囲の学生の瞳に写る画像と比較して分析し、その分析結果を瞳画像分析手段６が出力部３に出力する。

【0018】

例えば、一般に、人がスマートフォンのような携帯端末の備えたディスプレイを見ている場合、その人の瞳にはディスプレイに表示された文字や図形などの画像が写る。人の瞳に写る画像を分析すれば、その人が何を見ているのかが判断できる。そのため、発明を実施するための形態１では、他の学生と異なる姿勢をとる学生の瞳に写る画像をカメラ１１で撮影し、その画像を瞳画像分析手段５で分析することでその学生が何を見ているのかを判断する。よって、ステップ２０６における分析の結果として、他の学生と異なる姿勢をとる学生が見ていた画像が教科書やノートなどの画像とは異なる画像であれば、他の学生と異なる姿勢をとる学生は真面目に講義を受講していないと判断できるので、瞳画像分析手段６が分析結果を出力部３に出力することで、講師が他の学生と異なる姿勢をとる学生に注意を喚起し、ステップ２０７に進む。

【0019】

ステップ２０７では、時期データ部８の時期データに後続の時期データがあるかを判断し、後続の時期データがあればステップ２０７で「ＮＯ」と判断し、ステップ２０２に戻り上述した処理を行う。一方、後続の時期データが無いのであれば、ステップ２０７で「ＹＥＳ」と判断し、ステップ２０８に進んで撮影を終了する。

【0020】

以上のように、発明を実施するための形態１によれば、教室１０に居る講義を受講する全学生の中で下を向いている学生のように、他の多くの学生と異なる姿勢をとる学生がいた場合、その学生を特定し、その学生の瞳に写る画像を分析することで何を見ているのかを確認できる。したがって、複数人の学生の中から他の学生と異なる姿勢をとる学生としての個人を特定して、その学生に注意を喚起することができる。尚、特定される個人の人数は一人に限定されるものではく、複数人であって適用可能である。特定される個人の人数が複数人である場合、その学生の瞳に写る画像をカメラ１１で撮影する場合、学生一人一人に対して行う。

【0021】

図３を用いて発明を実施するための形態２に係る位置検出システムについて説明する。図３に示した位置検出システムは、銀行などの店舗に設置される現金自動預け払い機（以下、ＡＴＭという）又は店舗などの建物の出入口を利用する人３２に対し、ＡＴＭ又は建物の出入口とそれを利用する人３２との間で予め定めた暗証番号を使用せずに、人３２がＡＴＭ又は建物の出入口を利用する際に管理装置２２から示された暗証番号をディスプレイ３１に表示し、ディスプレイ３１に表示された暗証番号を見た人の瞳に写る画像をカメラ２９で撮影し、カメラ２９で撮影した暗証番号がディスプレイ３１に表示した暗証番号に一致した場合に本人と確認するものである。

【0022】

図３において、２１は本人確認機器であり、ＡＴＭや建物の出入口の扉などに設けられる。２２は管理装置であり、本人確認機器２１と記憶部２５と携帯端末２８とのそれぞれと通信を行い、本人確認機器２１と記憶部２５と携帯端末２８とのそれぞれの種々の動作を制御する。２３は暗証番号取得手段であり、本人確認機器２１からの本人確認要求に基づき暗証番号記憶部２６から１つの暗証番号を取得して携帯端末２８に送信するように、管理装置２２の図示のされていないコンピューターにより具現化される。２４は瞳画像分析手段であり、本人確認機器２１を操作する人の瞳に写る画像をカメラ２９で撮影し、その撮影された瞳に写る画像を分析するように、管理装置２２の図示のされていないコンピューターにより具現化される。２５は記憶部であり、暗証番号記憶部２６、収集データ部２７を備える。暗証番号記憶部２６は、複数個の暗証番号が記憶されている。暗証番号は本人確認機器２１において、本人確認機器２１の設置されたＡＴＭや建物の出入口を利用する人３２が本人であるかを確認するために用いられる乱数からなる番号である。２７は収集データ部であり、瞳画像分析手段２４で分析した画像を記憶する。２８は携帯端末であり、本人確認機器２１で本人確認を行う人３２が所持するものであって、カメラ２９と、そのカメラ２９の動作を制御するカメラ制御手段３０と、カメラ２９で撮影した画像を表示するディスプレイ３１を備える。

【0023】

例えば、携帯端末２８を所持する人３２が本人確認機器２１を操作するか又は本人確認機器２１に設けられた図示のされていない人感センサが本人確認機器２１の場所に居る携帯端末２８を所持する人３２を感知すると、本人確認機器２１が本人確認要求を管理装置２２に出力するとともに携帯端末２８と管理装置２２との間での無線通信に対する接続作業を促す表示を本人確認機器２１の図示のされていないスピーカー又はディスプレイで行う。人３２が上記接続作業を促す表示を見るか又は人３２が上記接続作業を促す内容を音で聴くことにより、携帯端末２８を操作して管理装置２２にインターネット又は近距離無線通信などにより通信可能に接続する。

【0024】

そして、管理装置２２の暗証番号取得手段２３が本人確認機器２１からの本人確認要求に基づき暗証番号記憶部２６の複数個の暗証番号の中から１つの暗証番号を取得して携帯端末２８に送信し、携帯端末２８の図示のされていない受信制御部が受信した１つの暗証番号をディスプレイ３１に表示する。引き続き、携帯端末２８を所持する人３２がディスプレイ３１に表示された１つの暗証番号を見るとともにカメラ２９で自分の瞳を撮影するように携帯端末２８を操作する。

【0025】

これにより、カメラ制御手段３０がカメラ２９を制御し、カメラ２９が携帯端末２８を所持する人３２の瞳に写る画像を撮影し、携帯端末２８の図示のされていない送信制御部が撮影された携帯端末２８を所持する人３２の瞳に写る画像を管理装置２２に送信し、管理装置２２の瞳画像分析手段２４が受信した画像を管理装置２２から携帯端末２８に送信した１つの暗証番号であるか１つの暗証番号でない非暗証番号であるかを分析する。瞳画像分析手段２４による分析結果が１つの暗証番号であるときは、瞳画像分析手段２４が本人であることを示す情報を本人確認機器２１に送信し、本人確認機器２１が本人確認機器２１の設置されたＡＴＭや建物の出入口の扉などに正常に動くように指示する。瞳画像分析手段２４による分析結果が非暗証番号であるときは、瞳画像分析手段２４が他人であることを示す情報を本人確認機器２１に送信し、本人確認機器２１が本人確認機器２１の設置されたＡＴＭや建物の出入口の扉などに動かないように指示する。

【0026】

次に、発明を実施するための形態２の動作について図４を用いて説明する。本人確認機器２１及び管理装置２２が起動し、管理装置２２と携帯端末２８とが通信可能に接続され、図４に示した処理が開始し、ステップ４０１で管理装置２２の暗証番号取得手段２３が本人確認開始であるかを判断する。つまり、暗証番号取得手段２３が本人確認機器２１からの本人確認要求の受信を検出しないときは、ステップ４０１で「ＮＯ」と判断し、ステップ４０１に戻り、暗証番号取得手段２３が本人確認機器２からの本人確認要求の受信を検出したときは、ステップ４０１で「ＹＥＳ」と判断し、ステップ４０２に進む。ステップ４０２では、暗証番号取得手段２３が暗証番号記憶部２６の複数個の暗証番号中から１つの暗証番号を取得して携帯端末２８に送信する。これにより、携帯端末２８の図示のされていない受信制御部で受信した１つの暗証番号がディスプレイ３１に表示され、ステップ４０３に進む。ステップ４０３では、ディスプレイ３１を見ている人３２の瞳をカメラ２９で撮影し、携帯端末２８が撮影された瞳の画像を管理装置２２に送信し、ステップ４０４に進む。

【0027】

ステップ４０４において、瞳画像分析手段２４が携帯端末２８から受信した人３２の瞳の画像を記憶装置２５の収集データ部２７に記憶するとともに、瞳に写る画像をステップ４０２で管理装置２２から携帯端末２８に送信した１つの暗証番号と比較して分析し、ステップ４０５に進む。ステップ４０５では、ステップ４０４での分析結果としての瞳の画像がステップ４０２で管理装置２２から携帯端末２８に送信した１つの暗証番号と一致したときは、ステップ４０５で「ＹＥＳ」と判断し、ステップ４０６に進み、ステップ４０４での分析結果としての瞳の画像がステップ４０２で管理装置２２から携帯端末２８に送信した１つの暗証番号と不一致であるときは、ステップ４０５で「ＮＯ」と判断し、ステップ４０７に進む。ステップ４０６では、瞳画像分析手段２４が本人であることを示す情報を本人確認機器２１に送信し、本人確認機器２１が本人確認機器２１の設置されたＡＴＭや建物の出入口の扉などに正常に動くように指示する。ステップ４０７では、瞳画像分析手段２４が他人であることを示す情報を本人確認機器２１に送信し、本人確認機器２１が本人確認機器２１の設置されたＡＴＭや建物の出入口の扉などに動かないように指示する。

【0028】

以上のように、発明を実施するための形態２においては、本人確認機器２１の設置されたＡＴＭや建物の出入口の扉など利用する人３２に対し、ＡＴＭ又は建物の出入口とそれ利用する人との間で予め定めた暗証番号を使用せずに、人３２がＡＴＭ又は建物の出入口を利用する際に管理装置２２から示された暗証番号を利用して本人確認を行うことができるので、ＡＴＭ又は建物の出入口とそれ利用する人が予め定めた暗証番号を覚えておかなくても、本人確認ができる。

【0029】

図５を用いて発明を実施するための形態３に係る位置検出システムについて説明する。図５に示した位置検出システムは、人の集まる場所に設置されたディスプレイ５４に市場調査用の画像データ（以下、マーケティング画像データという）を表示し、その人の集まる場所の前に設置されたカメラ５３でその人の集まる場所を撮影し、撮影した画像の中から人の瞳に写る画像を解析し、人の集まる場所に居る複数人に対するマーケティング画像データにより表示されたマーケティング画像を見ている人の割合を調べることにより、市場調査を行うものである。

【0030】

図５において、４１は管理装置であり、インターネット５１経由でマーケティング調査装置５２と通信可能に接続され、市場調査手段４２、カメラ制御手段４３、画像分析手段４４、瞳画像分析手段４５を備える。市場調査手段４２、カメラ制御手段４３、画像分析手段４４、瞳画像分析手段４５は、管理装置４１の図示のされていないコンピューターの動作により具現化される。具体的には、市場調査手段４２は、入力部４６からの指示で記憶部４８のマーケティング画像データ記憶部４９からマーケティング画像データを取得してマーケティング調査装置５２にインターネット５１経由で送信する。カメラ制御手段４３は、カメラ５３の動作を制御する。画像分析手段４４は、カメラ５３で撮影された画像を分析する。瞳画像分析手段４５は、カメラ５３で撮影された人の顔の画像の一部である瞳の画像を分析する。

【0031】

入力部４６は、カメラ５３の動作やディスプレイ５４に表示する画像の選択などを管理装置４１に指示するもので、人により操作される操作部やキーボードなどである。出力部４７は、画像分析手段４４や瞳画像分析手段４５で分析した画像を人が視聴覚できるように表示するディスプレイやプリンター或いはスピーカーなどである。記憶部４８は、マーケティング画像データ記憶部４９と収集データ記憶部５０とを備える。マーケティング画像データ記憶部４９は、ディスプレイ５４に表示するマーケティング調査用の複数個のマーケティング画像データが記憶されている。収集データ記憶部５０は、瞳画像分析手段４５で分析された画像を記憶するものである。マーケティング調査装置５２は、カメラ５３とディスプレイ５４とを備える。カメラ５３は、マーケティング調査装置５２の前方に居る人を撮影するものである。ディスプレイ５４は、マーケティング画像データ記憶部４９から取得されたマーケティング画像を表示するものである。

【0032】

例えば、入力部４６が図示のされていない人の操作に基づく市場調査の指示を管理装置４１に出力すると、市場調査手段４２がマーケティング画像データ記憶部４９の複数個のマーケティング画像データの中から１つのマーケティング画像データを取得してインターネット５１経由でマーケティング調査装置５２に送信する。

【0033】

そして、マーケティング調査装置５２が管理装置４１から送信されたマーケティング画像データをマーケティング画像としてディスプレイ５４に表示した後、カメラ制御手段４３がマーケティング調査装置５２の前に居る複数人の顔をカメラ５３で撮影するようにインターネット５１経由でカメラ５３を制御する。マーケティング調査装置５２がカメラ５３で撮影された画像をインターネット５１経由で管理装置４１に送信し、画像分析手段４４が送信されたカメラ５３で撮影された複数人の顔の画像を分析する。

【0034】

次に、画像分析手段４４がカメラ５３で撮影された複数人の顔の画像の中からディスプレイ５４の方に顔を向けている人を分析すると、画像分析手段４４がズームアップの指示をカメラ制御手段４３に出力し、カメラ制御手段４３がマーケティング調査装置５２のディスプレイ５４の方に顔を向けている人の瞳をズームアップしてカメラ５３で撮影するようにインターネット５１経由でカメラ５３を制御する。そして、マーケティング調査装置５２がカメラ１１で撮影した瞳に写る画像をインターネット５１経由で管理装置４１に送信し、瞳画像分析手段４５が送信された瞳の画像を管理装置４１からマーケティング調査装置５２に送信されてディスプレイ５４に表示されたマーケティング画像と比較する。この場合、ディスプレイ５４に表示されたマーケティング画像として例えば、自動車とその自動車の社名とすると、カメラ１１で撮影した瞳に写る画像も自動車とその自動車の社名になる。よって、カメラ１１で撮影した瞳に写る画像（自動車とその自動車の社名）とディスプレイ５４に表示されたマーケティング画像（自動車とその自動車の社名）とを比較することでマーケティング画像を見ている個人の数が分かる。

【0035】

その後、瞳画像分析手段４５は、瞳の画像がマーケティング画像である人の顔の数とカメラ１１が撮影したマーケティング調査装置５２の前に居る複数人の顔の数とから、複数人としての不特定多数の人に対するマーケティング画像を見ている人の割合を算出して出力部４７に出力する。出力部４７は不特定多数の人に対するマーケティング画像を見ている人の割合を表示し、この出力部４７で表示された不特定多数の人に対するマーケティング画像を見ている人の割合を市場調査員が調べることにより、市場調査を行うことができる。図５において、丸印で示した７人がマーケティング調査装置５２の前に居り、ディスプレイ５４の方に顔を向けている人５５，５６，５７が３人であるが、その３人の中の人５５の瞳に写る画像がマーケティング画像でなく、人５６，５７の瞳に写る画像がマーケティング画像であれば、不特定多数の人に対するマーケティング画像を見ている個人の割合が７分の２となる。

【0036】

尚、図５において、管理装置４１とマーケティング調査装置５２とをインターネット５１以外の通信手段で通信可能に接続しても適用可能である。又、マーケティング調査装置５２をカメラ５３に相当するカメラとディスプレイ５４に相当するディスプレイとを備えた携帯端末に置換しても適用可能である。

【0037】

次に、発明を実施するための形態３の動作について図６を用いて説明する。管理装置４１とマーケティング調査装置５２とが起動して相互にインターネット５１経由で通信可能に接続され、図６に示した処理が開始し、ステップ６０１で市場調査の指示が管理装置４１に入力されたかを判断する。つまり、市場調査手段４２が入力部４６からの市場調査の指示を検出しないときは、ステップ６０１で「ＮＯ」と判断し、ステップ６０１に戻り、市場調査手段４２が入力部４６からの市場調査の指示を検出したときは、ステップ６０１で「ＹＥＳ」と判断し、ステップ６０２に進む。ステップ６０２では、市場調査手段４２がマーケティング画像データ記憶部４９の複数個のマーケティング画像データの中から１つのマーケティング画像データを取得してマーケティング調査装置５２に送信し、マーケティング調査装置５２が管理装置４１からのマーケティング画像データをマーケティング画像としてディスプレイ５４に表示し、ステップ６０３に進む。

【0038】

ステップ６０３では、カメラ制御手段４４がカメラ５３を制御し、カメラ５３がマーケティング調査装置５２の前に居る複数人の顔を撮影し、ステップ６０４に進む。ステップ６０４では、マーケティング調査装置５２がカメラ５３で撮影された画像を管理装置４１に送信し、画像分析手段４４が送信されたカメラ５３で撮影された人の顔の画像を分析してマーケティング調査装置５２の前に居る複数人の顔の数を収集データ記憶部５０に記憶し、ステップ６０５に進む。ステップ６０５では、画像分析手段４４が分析した画像の中にディスプレイ５４の方を向いている画像があるかを判断し、ディスプレイ５４の方を向いている画像がないときは、ステップ６０５で「ＮＯ」と判断し、処理を終わり、ディスプレイ５４の方を向いている画像があるときは、ステップ６０５で「ＹＥＳ」と判断し、ステップ６０６に進む。

【0039】

ステップ６０６では、画像分析手段４４がカメラ制御手段４３にズームアップの指示を行い、カメラ制御手段４３がカメラ５３をディスプレイ５４の方に向いている人にズームアップさせてカメラ５３で瞳に写る画像を撮影するようにカメラ５３を制御する。そして、マーケティング調査装置５２がカメラ５３で撮影したディスプレイ５４の方に向いている人の瞳に写る画像を管理装置４１に送信し、瞳画像分析手段４５が管理装置４１に送信されたディスプレイ５４の方に向いている人の瞳に写る画像を記憶部４８の収集データ記憶部５０に記憶する。又、瞳画像分析手段４５が瞳に写る画像をステップ６０２で管理装置２２からマーケティング調査装置５２に送信したマーケティング画像データによるマーケティング画像と比較する。その後、瞳画像分析手段４５は瞳の画像がマーケティング画像である人の顔の数を収集データ記憶部５０に記憶して、ステップ６０７に進む。ステップ６０７では、瞳画像分析手段４５が複数人としての不特定多数の人に対するマーケティング画像を見ている人の割合を求めて出力部４７に出力し、出力部４７が出力された不特定多数の人数に対するマーケティング画像を見ている人数の割合を表示して処理を終わる。よって、上記出力部４７で表示された不特定多数の人数に対するマーケティング画像を見ている人数の割合を市場調査員が調べることにより、市場調査を行うことができる。

【0040】

図７を用いて発明を実施するための形態４に係る位置検出システムについて説明する。図７に示した位置検出システムは、自走可能なロボットを特定の人の基に呼び寄せるものである。

【0041】

図７において、６１は管理装置であって、インターネット７３を介して自走ロボット７４、携帯端末７８、７９と通信可能に接続されている。自走ロボット７４は、図示のされていない車輪などを備え自ら移動できるロボットである。自走ロボット７４は、ロボット駆動手段７５、ロボット制御手段７６、カメラ７７を備える。ロボット駆動手段７５は、自走ロボット７４を移動させるための駆動機構であり、車輪、モーター、バッテリーなど図示のされていない構造物から構成される。カメラ７７は、自走ロボット７４の前方に居る人の顔を撮影する。ロボット制御手段７６は、インターネット７３を介して管理装置６１と通信することによりロボット駆動手段７５とカメラ７７とを制御する。携帯端末７８は、人８２が所持し、ディスプレイ８０を備える。携帯端末７９は、人８３が所持し、ディスプレイ８１を備える。

【0042】

管理装置６１は、カメラ制御手段６４、画像分析手段６５、瞳画像分析手段６６、特定画像配信手段６７、ロボット呼出手段６８、到達時期演算手段６９を備える。カメラ制御手段６４、画像分析手段６５、瞳画像分析手段６６、特定画像配信手段６７、ロボット呼出手段６８、到達時期演算手段６９は、管理装置６１の図示のされていないコンピューターにより具現化される。具体的には、カメラ制御手段６４は、カメラ７７の動作を制御するものでありインターネット７３を介してカメラ７７を制御する。画像分析手段６５は、カメラ７７で撮影した自走ロボット７４の前方に居る複数人の顔の画像を分析するものである。瞳画像分析手段６６は、カメラ７７で撮影された人の顔の画像の一部である瞳の画像を分析するものである。特定画像配信手段６７は、携帯端末７８，７９のディスプレイ８０，８１に表示する特定の画像、例えば、文字や記号などをインターネット７３経由で携帯端末７８，７９に配信するものである。

【0043】

ロボット呼出手段６８は自走ロボット７４を呼出すものである。自走ロボット７４の呼出しは、人８２，８３が携帯端末７８，７９を操作することで携帯端末７８．７９からロボット呼出手段６８へインターネット７３を介して呼出信号を送信する。ロボット呼出手段６８は、携帯端末７８，７９からの呼出信号を受信することで自走ロボット７４を呼出す。到達時期演算手段６９は、携帯端末７８，７９から自走ロボット７４を呼出したときに自走ロボット７４が呼出した人８２，８３のところまで移動に掛かる時間を算出するものである。入力部６２は、管理装置６１に備えられたカメラ制御手段６４、画像分析手段６５、瞳画像分析手段６６、特定画像配信手段６７、ロボット呼出手段６８、到達時期演算手段６９などの各手段に対する設定や操作を行うもので人の操作を受ける操作部やキーボードなどからなる。記憶部６３は、時期データ記憶部７０、収集データ記憶部７１、特定画像データ記憶部７２を備える。時期データ記憶部７０は、到達時期演算手段６９で演算された到達時刻を記憶する。収集データ記憶部７１は、瞳画像分析手段６６で分析した画像を記憶する。特定画像データ記憶部７２は、自走ロボット７４を呼出した人の顔の瞳に写る画像を記憶する。

【0044】

例えば、自走ロボット７４及び複数人８２，８３，８４がイベント会場などの建物の内部で互いに離れた場所に居て、人８２が所持した携帯端末７８の図示のされていない呼出部を操作して自走ロボット７４を自分の所に呼び出すと、携帯端末７８が自己の位置情報とロボットの呼出信号とをインターネット７３経由で管理装置６１に送信する。そして、管理装置６１が携帯端末７８からの位置情報と呼出信号とを受信すると、ロボット呼出手段６８が携帯端末７８の位置情報と呼出信号とをインターネット７３経由で自走ロボット７４に送信し、かつ、到達時期演算手段６９が携帯端末７８の位置情報と自走ロボット７４の現在位置との距離および自走ロボット７４の移動速度から自走ロボットの携帯端末７８の位置情報の場所へ移動するのに掛かる到達時間を演算して時期データ記憶部７０に記憶する。

【0045】

又、上記管理装置６１から送信された携帯端末７８の位置情報と呼出信号とを受信した自走ロボット７４がロボット制御手段７６の制御によるロボット駆動手段７５により携帯端末７８の位置情報の場所まで移動する。又、上記到達時期演算手段６９で演算した到達時間になると、特定画像配信手段６７が特定画像データ記憶部７２の複数個の特定画像データの中から１つの特定画像データを取得してインターネット７３経由で携帯端末７８に送信し、カメラ制御手段６４が制御信号をインターネット７３経由で自走ロボット７４に送信する。上記特定画像配信手段６７からの特定画像データを受信した携帯端末７８がディスプレイ８０に受信した特定画像データによる画像（以下、特定画像という）を表示し、上記カメラ制御手段６４からの制御信号を受信した自走ロボット７４がロボット駆動手段７５により到達した場所を広範囲に例えば３６０度の全周囲に横方向に回転しながら、カメラ７７が到達した場所を広範囲に例えば３６０度の全周囲に撮影した画像をインターネット７３経由で管理装置６１に送信し、画像分析手段６５が受信した自走ロボット７４からの広範囲の画像の中から携帯端末７８を見ているなど複数人と異なる個人を特定した特定信号をインターネット７３経由で自走ロボット７４に送信する。

【0046】

次に、ロボット駆動手段７５が管理装置６１から受信した特定信号に基づきカメラ７７を上記特定した個人の顔にズームアップしてその特定した個人の瞳に写る画像を撮影し、自走ロボット７４が撮影した個人の瞳に写る画像をインターネット７３経由で管理装置６１に送信し、瞳画像分析手段６６が自走ロボット７４からの瞳に写る画像を管理装置６１から携帯端末７８に送信した特定画像と比較して分析し、自走ロボット７４からの瞳に写る画像の形又は色が管理装置６１から携帯端末７８に送信した特定画像の形又は色に一致することより自走ロボット７４を呼出した人８２を特定し、人８２の前に移動することをロボット呼出手段６８がインターネット７３経由で自走ロボット７４に送信し、自走ロボット７４は、ロボット制御手段７６によるロボット駆動手段７５の駆動により人８２の前に移動して停止することができる。

【0047】

尚、図７において、人８３が所持した携帯端末７９で自走ロボット７４を呼び出す場合は、上記説明中の人８２を人８３と読み替え、携帯端末７８を携帯端末７９と読み替えることで適用可能である。又、管理装置６１と自走ロボット７４とをインターネット５１以外の通信手段で通信可能に接続しても、又は、管理装置６１と自走ロボット７４と携帯端末７８，７９とをインターネット５１以外の通信手段で通信可能に接続しても適用可能である。

【0048】

次に、発明を実施するための形態４に係る位置検出システムの動作について図８を用いて説明する。管理装置６１と自走ロボット７４と携帯端末７８とが起動して相互にインターネット７３で通信可能に接続され、図８に示した処理が開始し、ステップ８０１で自走ロボット７４の呼出が入力されたかを判断する。つまり、管理装置６１が携帯端末７８の位置情報と自走ロボット７４の呼出信号とを携帯端末７８からインターネット７３経由で受信しないと、ステップ８０１で「ＮＯ」と判断し、ステップ８０１に戻り、管理装置６１が携帯端末７８の位置情報と自走ロボット７４の呼出信号とを携帯端末７８からインターネット７３経由で受信すると、ステップ８０１で「ＹＥＳ」と判断し、ステップ８０２に進む。ステップ８０２では、ロボット呼出手段６８が携帯端末７８の位置情報と呼出信号とをインターネット７３経由で自走ロボット７４に送信することにより、自走ロボット７４が携帯端末７８の位置情報の場所まで移動して停止し、到達時期演算手段６９が携帯端末７８の位置情報と自走ロボット７４の現在位置との距離および自走ロボット７４の移動速度から自走ロボット７４の携帯端末７８の位置情報の場所へ移動するのに掛かる到達時間を演算し、ステップ８０３に進む。

【0049】

ステップ８０３では、ステップ８０２での呼出信号の送信からの経過時間が到達時間に到達したかを判断し、経過時間が到達時間に達しないときはステップ８０３で「ＮＯ」と判断し、ステップ８０３に戻り、経過時間が到達時間に達したときはステップ８０３で「ＹＥＳ」と判断し、ステップ８０４に進む。ステップ８０４では、特定画像配信手段６７が特定画像データ記憶部から取得した特定画像をインターネット７３経由で携帯端末７８に配信してディスプレイ８０に表示し、ステップ８０５に進む。ステップ８０５では、カメラ制御手段６４がインターネット７３経由で自走ロボット７４のカメラ７７を制御することにより、カメラ７７が携帯端末７８の位置情報の場所としての呼出エリアで自走ロボット７４の周囲を広範囲に撮影し、撮影した画像を自走ロボット７４がインターネット７３経由で管理装置６１に送信し、ステップ８０６に進む。

【0050】

ステップ８０６では、画像分析手段６５が受信した画像の中から携帯端末７８を見ているなど複数人と異なる個人を特定する特異画像があるか判断し、特異画像が無いときは、ステップ８０６で「ＮＯ」と判断し、処理を終わり、特異画像があるときは、ステップ８０６で「ＹＥＳ」と判断し、画像分析手段６５が特定信号をインターネット７３経由で自走ロボット７４に送信し、ステップ８０７に進む。ステップ８０７では、カメラ制御手段６４の制御に基づき自走ロボット７４に備えられるカメラ７７を上記特定した個人の顔にズームアップしてその特定した個人の瞳に写る画像を撮影してインターネット７３経由で管理装置６１に送信し、ステップ８０７に進む。ステップ８０７では、瞳画像分析手段６６が自走ロボット７４からの瞳に写る画像をステップ８０４で管理装置６１から携帯端末７８に送信した特定画像と比較分析し、自走ロボット７４からの瞳に写る画像の形又は色が管理装置６１から携帯端末７８に送信した特定画像の形又は色に一致することより自走ロボット７４を呼出した人８２を特定し、人８２の前に移動することをロボット呼出手段６８インターネット７３経由で自走ロボット７４に送信し、自走ロボット７４が人８２の前に移動して停止することができる。

【0051】

以上のように、発明を実施するための形態４によれば、自走ロボット７４及び複数人が互いに離れた場所に居て、複数人の中の人８２が所持した携帯端末７８で自走ロボット７４を自分の所に呼出すと、自走ロボット７４が携帯端末７８の位置情報の場所に移動して停止するころに、複数人の中から個人を特定するための特定画像が携帯端末７８のディスプレイ８０に表示され、自走ロボット７４のカメラ７７が携帯端末７８の位置情報の場所を撮影し、その撮影した画像の複数人の中から特異画像を分析して自走ロボット７４を呼出した人を特定すると、カメラ７７が自走ロボット７４を呼出した人８２の顔をズームアップしてその人８２の瞳に写る画像を撮影し、この撮影した瞳に写る画像を上記特定画像と比較して分析して人８２を特定し、特性した人８２の所に自走ロボット７４を呼び寄せることができる。

【符号の説明】

【0052】

１ 管理装置
２ 入力部
３ 出力部
４ カメラ制御手段
５ 画像分析手段
６ 瞳画像分析手段
７ 記憶部
８ 時期データ部
９ 収集データ部
１０ 教室
１１ カメラ
１２ 席
１３ 席
１４ 席
１５ 学生
１６ 学生
１７ 学生
２１ 本人確認機器
２２ 管理装置
２３ 暗証番号取得手段
２４ 瞳画像分析手段
２５ 記憶部
２６ 暗証番号記憶部
２７ 収集データ部
２８ 携帯端末
２９ カメラ
３０ カメラ制御手段
３１ ディスプレイ
３２ 人
４１ 管理装置
５２ マーケティング調査装置
４２ 市場調査手段
４３ カメラ制御手段
４４ 画像分析手段
４５ 瞳画像分析手段
４６ 入力部
４７ 出力部
４８ 記憶部
４９ マーケティングデータ記憶部
５０ 収集データ記憶部
５１ インターネット
５２ マーケティング調査装置
５３ カメラ
５４ ディスプレイ
５５ 人
５６ 人
５７ 人
６１ 管理装置
６２ 入力部
６３ 記憶部
６４ カメラ制御部手段
６５ 画像分析手段
６６ 瞳画像分析手段
６７ 特定画像配信手段
６８ ロボット呼出手段
６９ 到達時期演算手段
７０ 時期データ記憶部
７１ 収集データ記憶部
７２ 特定画像データ記憶部
７３ インターネット
７４ 自走ロボット
７５ ロボット駆動手段
７６ ロボット制御手段
７７ カメラ
７８ 携帯端末
７９ 携帯端末
８０ ディスプレイ
８１ ディスプレイ
８２ 人
８３ 人

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】