特許 6359704 イベントに関連付けられる情報を人に供給するための方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6359704

(24)【登録日】2018年6月29日

(45)【発行日】2018年7月18日

(54)【発明の名称】イベントに関連付けられる情報を人に供給するための方法

(51)【国際特許分類】

   G06F 3/01 20060101AFI20180709BHJP

   G09F 19/00 20060101ALI20180709BHJP

【ＦＩ】

   G06F3/01 510

   G09F19/00 Z

【請求項の数】12

【外国語出願】

【全頁数】12

(21)【出願番号】特願2017-36102(P2017-36102)

(22)【出願日】2017年2月28日

(62)【分割の表示】特願2015-526938(P2015-526938)の分割

【原出願日】2013年8月8日

(65)【公開番号】特開2017-126355(P2017-126355A)

(43)【公開日】2017年7月20日

【審査請求日】2017年3月24日

(31)【優先権主張番号】12306005.5

(32)【優先日】2012年8月16日

(33)【優先権主張国】EP

(73)【特許権者】

【識別番号】391030332

【氏名又は名称】アルカテル−ルーセント

(74)【代理人】

【識別番号】110001173

【氏名又は名称】特許業務法人川口國際特許事務所

(72)【発明者】

【氏名】ツェ・ロウ

(72)【発明者】

【氏名】ティンヤオ・ウー

【審査官】 菊池 伸郎

(56)【参考文献】

【文献】 特開２０１０−４１１６７（ＪＰ，Ａ）

【文献】 特開２０１０−３９３３３（ＪＰ，Ａ）

【文献】 特開２０１０−１５０７６（ＪＰ，Ａ）

【文献】 特開２０１１−３３９９３（ＪＰ，Ａ）

【文献】 特開２００８−２８９０８８（ＪＰ，Ａ）

【文献】 特表２００９−５３１９２６（ＪＰ，Ａ）

【文献】 特表２００５−５２５５９７（ＪＰ，Ａ）

【文献】 特開２０１１−１８７０５４（ＪＰ，Ａ）

【文献】 欧州特許出願公開第１１９９８９９（ＥＰ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ ３／０１

３／０４８−３／０４８９

３／１６

Ｇ１０Ｋ １１／００−１３／００

Ｈ０４Ｒ １／２０−１／４０

３／００−３／１４

(57)【特許請求の範囲】

【請求項1】

イベントに関連付けられる情報を人に供給するための方法であって、
ａ．ユーザによってカスタマイズされた、人が前記イベントを見ている時間に基づいて前記イベントに関連している前記人を検出するステップと、
ｂ．前記イベントに関連している前記人の地理的位置を決定するステップと、
ｃ．前記イベントに関連している前記人の前記地理的位置だけで、指向性情報の供給を制御するステップとを備えることを特徴とする、方法。

【請求項2】

指向性情報供給制御手段（ＩＰＣＭ）の制御下で、前記イベントに関連している前記人の前記地理的位置で、前記イベントに関連付けられる前記情報だけを供給するステップをさらに備えることを特徴とする、請求項１に記載の方法。

【請求項3】

イベントに関連付けられる情報を人に供給するためのシステムであって、
ａ．ユーザによってカスタマイズされた、人が前記イベントを見ている時間に基づいて前記イベントに関連している前記人を検出するように構成されたイベント検出手段（ＥＤＭ）と、
ｂ．前記イベントに関連している前記人の地理的位置を決定するように構成された位置決定手段（ＬＤＭ）と、
ｃ．前記イベントに関連している前記人の前記地理的位置だけで、前記イベントに関連付けられる前記情報の供給を制御するように構成された指向性情報供給制御手段（ＩＰＣＭ）とを備えることを特徴とする、システム。

【請求項4】

前記指向性情報供給制御手段（ＩＰＣＭ）の制御下で、前記イベントに関連している前記人の前記地理的位置で、前記イベントに関連付けられる前記情報だけを提供するように構成された情報供給手段（ＩＰＭ）をさらに備えることを特徴とする、請求項３に記載のシステム。

【請求項5】

前記イベント検出手段（ＥＤＭ）が、前記イベントに関連している人を、少なくとも前記イベントに関連している前記人を含む場面の画像に基づいて検出するように構成され、前記画像が少なくとも１台のカメラによってキャプチャされることを特徴とする、請求項３または４に記載のシステム。

【請求項6】

前記イベント検出手段（ＥＤＭ）が、少なくとも１台のカメラによってキャプチャされた前記場面をカバーする前記画像から決定された複数の人のうちのある人の顔検出、視線検出、頭部追跡のうちの少なくとも１つに基づいて、前記イベントに関連している人を検出するように構成されていることを特徴とする、請求項５に記載のシステム。

【請求項7】

前記位置決定手段（ＬＤＭ）が、少なくとも１台のカメラによってキャプチャされた場面をカバーする画像に基づいて、前記イベントに関連している前記人の地理的位置を決定することができることを特徴とする、請求項３に記載のシステム。

【請求項8】

イベントに関連付けられる情報を人に供給するためのデバイスであって、
ａ．ユーザによってカスタマイズされた、人が前記イベントを見ている時間に基づいて前記イベントに関連している前記人を検出するように構成されたイベント検出手段（ＥＤＭ）と、
ｂ．前記イベントに関連している前記人の地理的位置を決定するように構成された位置決定手段（ＬＤＭ）と、
ｃ．前記イベントに関連している前記人の前記地理的位置だけで、前記イベントに関連付けられる前記情報の供給を制御するように構成された指向性情報供給制御手段（ＩＰＣＭ）とを備えることを特徴とする、デバイス。

【請求項9】

前記デバイスが、
ｄ．前記指向性情報供給制御手段（ＩＰＣＭ）の制御下で、前記イベントに関連している前記人の前記地理的位置で、前記イベントに関連付けられる前記情報を提供するように構成された情報供給手段（ＩＰＭ）をさらに備えることを特徴とする、請求項８に記載のイベントに関連付けられる情報を人に供給するためのデバイス。

【請求項10】

前記イベント検出手段（ＥＤＭ）が、前記イベントに関連している人を、少なくとも前記イベントに関連している前記人を含む場面の画像に基づいて検出するように構成され、前記画像が少なくとも１台のカメラによってキャプチャされることを特徴とする、請求項８または９に記載のイベントに関連付けられる情報を人に供給するためのデバイス。

【請求項11】

前記イベント検出手段（ＥＤＭ）が、少なくとも１台のカメラによってキャプチャされた前記場面をカバーする前記画像から決定された複数の人のうちのある人の顔検出、視線検出、頭部追跡のうちの少なくとも１つに基づいて、前記イベントに関連している人を検出するように構成されていることを特徴とする、請求項１０に記載のイベントに関連付けられる情報を人に供給するためのデバイス。

【請求項12】

前記位置決定手段（ＬＤＭ）が、少なくとも１台のカメラによってキャプチャされる場面をカバーする画像に基づいて、前記イベントに関連している前記人の地理的位置を決定することができることを特徴とする、請求項８に記載のイベントに関連付けられる情報を人に供給するためのデバイス。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、請求項１のプリアンブルに記載されるような、イベントに関連付けられる情報を人に供給するための方法、請求項３のプリアンブルに記載されるような、イベントに関連付けられる情報を人に供給するための関連システム、および請求項８のプリアンブルに記載されるような、関連デバイスに関する。

【背景技術】

【0002】

たとえば人々の注目を集めるために街頭の至る所に置かれる広告ボードから人に、イベントに関連付けられる情報を供給するためのそのような方法および関連システムは、当分野ではよく知られている。ＴＶのマルチメディア広告とは異なり、そのような１枚のポスターに基づく広告は通常は屋外にあり、見る人に静的で単調な情報を与える。これらの非常に高価な広告配信に何人の人が実際に注意を払っているかを知ることは、興味深いだろう。さらに、広告ポスターまたはマルチメディアアセットに本当に興味がある人々に、１ページのポスター、または再生されたマルチメディアアセットのテーマについてのより多くのさらなる情報を提供することができる。

【0003】

無線周波数識別対応の広告ボードの場合、人は、自分の近距離通信対応の携帯電話（さらにＮＦＣ対応携帯電話と呼ばれる）で広告ボードにタッチして、より詳細な情報をこの携帯電話にダウンロードすることができる。そのようなソリューションは、巨大市場ではない特別なデバイス（ＮＦＣ対応の携帯電話）を必要とし、また人が自分の電話でボードにタッチする必要があるという点で不都合である。

【先行技術文献】

【非特許文献】

【0004】

【非特許文献1】ｈｔｔｐ：／／ｗｗｗ．ｐｏｐｕｌａｒｍｅｃｈａｎｉｃｓ．ｃｏｍ／ｔｅｃｈｎｏｌｏｇｙ／ｇａｄｇｅｔｓ／ｈｏｍｅ−ｔｈｅａｔｅｒ／ｎｅｘｔ−ｕｐ−ｉｎ−ｋｉｎｅｃｔ−ｓｔｙｌｅ−ｍｏｔｉｏｎ−ｓｅｎｓｉｎｇ−ｕｌｔｒａｓｏｕｎｄ−９１１８７９５？ｃｌｉｃｋ＝ｐｍ＿ｌａｔｅｓｔ

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明の目的は、人が関連しているイベントに関連付けられる情報を、そのイベントに関連している人だけに情報が提供される自動的な方法で、人に供給するための方法、システム、または関連デバイスを提供することである。

【課題を解決するための手段】

【0006】

本発明によれば、この目的は、請求項１に記載の方法、請求項３に記載のシステム、および請求項８に記載の関連デバイスによって達成される。

【0007】

実際に、本発明によれば、この目的は、まず人のイベントへの関連が検出され、関連は場合によっては、少なくとも１台のカメラによってイベントが記録される場面の画像の分析に基づいて検出され、続いて、やはり場合によっては少なくとも１台のカメラによって記録された３次元場面に基づいて、イベントに関連している人の地理的位置が決定され、さらに人の決定された地理的位置に基づいて、イベントに関連している人の決定された地理的位置だけで、イベントに関連している人への、指向性音声などの指向性情報の供給を制御するという事実によって達成される。

【0008】

したがって、まずイベントに関連している人を検出することによって、イベントに関連している検出された人の地理的位置が決定され、続いて、これに基づいて、人の地理的位置で、イベントに関連している人への指向性音声の供給が制御される。

【0009】

そのような興味を引くイベントは、映画、情報マルチメディアアセット、広告、または他の任意の種類のマルチメディアアセットなどのマルチメディアアセットでもよく、または、プレゼンテーションボードに提示されたマルチメディアアセットではない、あるオブジェクトでもよい。

【0010】

さらなる代替のイベントは、関連している人にさらなる情報が提供されるべき任意の状況でもよく、そのようなイベントは、そうした行動を見せている人に警告または懲戒などの情報が提供されるべき、深刻な、またはあまり深刻ではない、法律違反または予期される行動でもよい。

【0011】

人がイベントに関連しているか否か、たとえば、人がプレゼンテーションボードに提示されたマルチメディアアセットなどのオブジェクトに興味があるか否かを判定するために、人のこの関連は以下に基づいて判定することができる：
− 人とボードとの間の距離が関連し得る。少なくとも１台のカメラによってキャプチャされた場面の画像を使用する場面の分析（深度計算）に基づいて、人とプレゼンテーションボードまたはオブジェクトとの間の距離を決定することができる。
− 顔／頭の向き。やはりキャプチャされた場面の画像の画像処理に基づいて、人がボードの方を向いているかどうかを判定することができる。
− 人がプレゼンテーションボードまたはオブジェクトを「見ている」時間。
このパラメータは、ユーザおよび依頼人（ａｐｐｌｉｃａｎｔ）によってカスタマイズされたしきい値でよい。

【0012】

さらに、人の地理的位置を決定するために、そのような地理的位置の計算は以下に基づき得る。

【0013】

図１に示されるように、キャプチャされた場面からの深度計算に基づいて、人Ａとカメラとの間の距離を取り出すことができる。図面では、この距離はｂとして印をつけられている。タイムオブフライトカメラ（ｔｉｍｅ−ｏｆ−ｆｌｉｇｈｔ ｃａｍｅｒａ）が使用される場合、距離ｂは、赤外線が人Ａに飛んで、戻ってくる時間によって決定される。ステレオペアカメラが使用される場合、距離ｂは、カメラおよび／またはプレゼンテーションボードに対する人の地理的位置を決定する２台のカメラの間の差に基づいて計算される。

【0014】

あるいは、図２に示されるように、配向角は以下の式：ａ＝ｘ／ｙ＊Ｃによって計算することができ、ｘは人Ａと中間点との間の距離であり、ｙは最大範囲の距離であり、Ｃは最大視野角である。ｘ、ｙは容易に測定することができ、Ｃはカメラの知られているパラメータである。そのように配向角を決定することができる。配向角とともに、人とカメラとの間の距離が、カメラおよび／またはプレゼンテーションボードに対する人の地理的位置を決定する。

【0015】

深度および配向角の計算の提示されるアルゴリズムは、アルゴリズムの一実施形態である点に留意されたい。視野角、ならびに人（人Ａ）とカメラおよび／またはプレゼンテーションボード（広告ボード）との間の距離を決定するための、さらなる代替アルゴリズムまたは方法があってよい。

【0016】

指向性情報の供給は、検出されるイベントに基づく情報を運ぶ音声でよい。検出されるべきイベントは、あるあらかじめ定義された情報に関連付けられる。イベントに関連している人のプロフィール情報が現在利用可能である場合、関連付けられる情報もこの関連している人にパーソナライズすることができる。

【0017】

本発明の別の特徴的な実施形態は、請求項２、請求項４、および請求項９に開示されている。

【0018】

関連システムおよび関連デバイスは、指向性情報供給制御手段の制御下で、このイベントに関連している人の地理的位置で、イベントに関連付けられる情報を事実上提供するためのステップを実行するための情報供給手段をさらに備える。そのような内部または外部情報供給手段ＩＰＭは指向性スピーカでもよく、人にＷｉ−Ｆｉまたはブルートゥース、あるいは他の任意のワイヤレス技術を介して人のモバイル通信デバイスまたはラジオに送信された指向性メッセージでもよい。この方法で、イベントに関連付けられる情報だけを、イベントに関連している人に提供することができる。

【0019】

本発明の別の特徴的な実施形態は、請求項５および請求項１０に開示されている。

【0020】

イベント検出手段は、少なくともイベントに関連している人を含む場面をカバーする画像に基づいて、イベントに関連している人を検出するように構成され、場面をカバーする画像は少なくとも１台のカメラによってキャプチャされる。

【0021】

本発明の別の特徴的な実施形態は、請求項６および請求項１１に開示されている。

【0022】

イベント検出手段は、少なくとも１台のカメラによってキャプチャされた前記場面をカバーする前記画像から決定された、複数の人のうちのある人の顔検出、視線検出、頭部追跡のうちの少なくとも１つに基づいて、イベントに関連している人を検出するようにさらに構成される。あるあらかじめ定義されたイベントへの興味を見せていると解釈され得るそのような人の他の任意の動きまたはジェスチャも、人がこのイベントに関連しているか否かを判定するために適用することができる。

【0023】

本発明の別の特徴的な実施形態は、請求項７および請求項１２に開示されている。

【0024】

位置決定手段は、１台または複数のカメラによってキャプチャされた場面をカバーする画像に基づいて、イベントに関連している人の地理的位置を決定することができる。

【0025】

１台または複数のカメラによってキャプチャされた写真またはビデオ画像は、プレゼンテーションボードまたはオブジェクトの前の場面の３次元モデルを再構築するために使用される。再構築された３次元場面に基づいて、システムは、対象者、すなわちイベントに興味がある人の位置を決定することができる。対象者、すなわちイベントに興味がある人の地理的位置は、以下に基づき得る。

【0026】

図１に示されるように、キャプチャされた場面からの深度計算に基づいて、人とカメラとの間の距離を取り出すことができる。図面では、この距離はｂとして印をつけられている。タイムオブフライトカメラが使用される場合、距離ｂは、赤外線が人Ａに飛んで、戻ってくる時間によって決定される。ステレオペアカメラが使用される場合、距離ｂは、カメラおよび／またはプレゼンテーションボードに対する人の地理的位置を決定する２台のカメラの間の差に基づいて計算される。

【0027】

あるいは、図２に示されるように、配向角は以下の式：ａ＝ｘ／ｙ＊Ｃによって計算することができ、ｘは人Ａと中間点との間の距離であり、ｙは最大範囲の距離であり、Ｃは最大視野角である。ｘ、ｙは容易に測定することができ、Ｃはカメラの知られているパラメータである。そのように配向角、および人とカメラとの間の距離を決定することができ、それがカメラおよび／またはプレゼンテーションボードに対する人の地理的位置を決定する。

【0028】

深度および配向角の計算の提示されるアルゴリズムは、アルゴリズムの一実施形態である点に留意されたい。視野角、ならびに人（人Ａ）とカメラおよび／またはプレゼンテーションボード（広告ボード）との間の距離を決定するための、さらなる代替アルゴリズムまたは方法があってよい。

【0029】

前記場面の画像をキャプチャするために１台のカメラが使用される場合、イベントに関連している人の地理的位置を決定するために、タイムオブフライトカメラなどの深度カメラが適用されるべきである。

【0030】

特許請求の範囲で使用される「備える（ｃｏｍｐｒｉｓｉｎｇ）」という用語は、その後に列挙される手段に限定されると解釈されるべきではない点に留意されたい。したがって、「手段ＡおよびＢを備えるデバイス（ａ ｄｅｖｉｃｅ ｃｏｍｐｒｉｓｉｎｇ ｍｅａｎｓ Ａ ａｎｄ Ｂ）」という表現の範囲は、構成要素ＡおよびＢだけで構成されるデバイスに限定されるべきではない。それは、本発明に関して、デバイスの唯一の関連構成要素がＡおよびＢであることを意味する。

【0031】

同様に、やはり特許請求の範囲で使用される「結合された（ｃｏｕｐｌｅｄ）」という用語は、直接接続のみに限定されると解釈されるべきではない点に留意されたい。したがって、「デバイスＢに結合されたデバイスＡ（ａ ｄｅｖｉｃｅ Ａ ｃｏｕｐｌｅｄ ｔｏ ａ ｄｅｖｉｃｅ Ｂ）」という表現の範囲は、デバイスＡの出力がデバイスＢの入力に直接接続されているデバイスまたはシステムに限定されるべきではない。それは、Ａの出力とＢの入力との間に、他のデバイスまたは手段を含むパスであってよいパスが存在することを意味する。

【0032】

以下の実施形態の説明を添付の図面と併せて参照することによって、本発明の上記および他の目的ならびに特徴がより明らかになり、本発明自体が最もよく理解されるだろう。

【図面の簡単な説明】

【0033】

【図1】本発明による、情報を人に供給するための方法がローカルに実行される環境の概要を示す図である。

【図2】本発明による、情報を人に供給するための方法がローカルに実行され、場面をキャプチャするために１台のカメラが適用される環境の別の概要を示す図である。

【図3】図１に提示される環境で使用するための、情報供給システムＩＰＳの機能的な表現を示す図である。

【発明を実施するための形態】

【0034】

以下の段落では、図面を参照して、本発明による、イベントに関連付けられるさらなる情報を人に供給するための方法の実装形態を説明する。

【0035】

この説明の第１の段落では、図３に提示される情報供給システムＩＰＳの主要な機能部分を説明する。第２の段落では、前述した手段間のすべての接続を定義する。後続の段落では、情報供給システムＩＰＳの実際の実行を説明する。

【0036】

情報供給システムは、イベントに関連している人を検出するように構成されたイベント検出手段ＥＤＭと、検出された、イベントに関連している人の地理的位置を決定することができる位置決定手段ＬＤＭと、検出されたイベントに関連している人の地理的位置で、イベントに関連付けられる情報（たとえば、指向性音声）の供給を制御するように構成された指向性情報供給制御手段ＩＰＣＭとを備える。さらに、情報供給システムＩＰＳは、指向性情報供給制御手段ＩＰＣＭの制御下で、イベントに関連している人の地理的位置で、イベントに関連付けられる情報を提供するように構成された外部情報供給手段ＩＰＭを備えるか、それに結合される。そのような外部情報供給手段ＩＰＭは指向性スピーカでもよく、人にＷｉ−Ｆｉまたはブルートゥース、あるいは他の任意のワイヤレス技術を介して人のモバイル通信デバイスまたは無線デバイスに送信された指向性メッセージでもよい。

【0037】

さらに、情報供給システムＩＰＳは、少なくとも１人の人が存在する場面を監視することができる、場面監視手段ＳＭＭを備える。

【0038】

そのような場面は、マルチメディアアセットをレンダリングするためのプレゼンテーションボードＰＢの周囲でもよく、あるオブジェクトの周囲でもよい。そのような場面は、プレゼンテーションボードにレンダリングされたマルチメディアアセットに興味があるかもしれず、ないかもしれない、あるいは前述のオブジェクトに興味があるかもしれず、ないかもしれない、１人または複数の人々を含み得る。この場面のこの監視は、その場面で画像および／または音を記録するカメラを用いて実行することができる。あるいは、この場面の監視は、以下を用いて実行することができる：
１．周囲の動きを検出するために使用される超音波技術（ｈｔｔｐ：／／ｗｗｗ．ｐｏｐｕｌａｒｍｅｃｈａｎｉｃｓ．ｃｏｍ／ｔｅｃｈｎｏｌｏｇｙ／ｇａｄｇｅｔｓ／ｈｏｍｅ−ｔｈｅａｔｅｒ／ｎｅｘｔ−ｕｐ−ｉｎ−ｋｉｎｅｃｔ−ｓｔｙｌｅ−ｍｏｔｉｏｎ−ｓｅｎｓｉｎｇ−ｕｌｔｒａｓｏｕｎｄ−９１１８７９５？ｃｌｉｃｋ＝ｐｍ＿ｌａｔｅｓｔ）、
２．赤外線カメラ、タイムオブフライトカメラなどの深度カメラ、
３．近接性に基づいて周囲を検出／監視するためのＲＦＩＤ技術。

【0039】

あるいは、そのような場面監視手段ＳＭＭは、前記情報供給システムの外部に配置され得る。

【0040】

場面監視手段ＳＭＭは、イベント検出手段ＥＤＭの入力への出力にも結合されている。場面監視手段ＳＭＭとイベント検出手段ＥＤＭとの間の結合は、場面監視手段ＳＭＭが組み込まれている場合は内部結合でもよく、場面監視手段ＳＭＭが外部に配置されている場合は外部通信リンクを介して結合されてもよい。

【0041】

イベント検出手段ＥＤＭは、位置決定手段ＬＤＭの入力端末に結合された出力端末をさらに有し、位置決定手段ＬＤＭは、指向性情報供給制御手段ＩＰＣＭの入力端末に結合された出力端末を有する。指向性情報供給制御手段ＩＰＣＭは、情報供給手段ＩＰＭが組み込まれている場合は、内部結合を介して情報供給手段ＩＰＭに結合され、情報供給手段ＩＰＭが外部に配置されている場合は外部通信リンクを介して結合される。

【0042】

本発明のある特定の具体化（ｉｎｃａｒｎａｔｉｏｎ）、および本発明の実行を説明するために、プレゼンテーションボードＰＢがある位置に配置されていると仮定する。このボードの前で、１人または複数の人がいる場面があると仮定する。さらに、１人または複数の人々からの１人の人Ａが、プレゼンテーションボードＰＢに提示されているマルチメディアアセット、または前述のオブジェクトに注意を払うと仮定する。

【0043】

さらに、この場合はプレゼンテーションボードＰＢの上部に搭載されたカメラのセットである場面監視手段ＳＭＭが、プレゼンテーションボードＰＢの前の場面を監視すると仮定する。場面には、人Ａを含む人々の小グループが存在する。場面監視手段ＳＭＭの各カメラが、場面の画像および任意選択で音を記録し、その場面は人々の小グループを含む。

【0044】

次いで、人Ａが、提示されたマルチメディアアセットをしばらくの間見ており、したがって彼の顔がスクリーンの方向を向いていて、彼の目がスクリーンに集中しているので、イベント検出手段ＥＤＭが、イベントに関連している、すなわち、プレゼンテーションボードＰＢにレンダリングされているマルチメディアアセットに興味がある１人の人Ａを検出する。

【0045】

イベント検出手段ＥＤＭは、たとえば、プレゼンテーションボードＰＢの前でキャプチャされた場面の画像（カメラのセットによってキャプチャされた）に基づいて、興味がある人Ａを検出する。イベント検出手段ＥＤＭは、たとえば、場面にいる人の視線を検出するために、決定された複数の人のうちのある人の頭部を追跡するために、顔検出を用いて広告ボードの方向を見ている顔を探すことによって、興味のある誰かを検出するために、キャプチャされた画像を分析する。

【0046】

人がイベントに関連しているか否か、たとえば、人がプレゼンテーションボードに提示されたマルチメディアアセットなどのオブジェクトに興味があるか否かを判定するために、人のこの関連は以下に基づいて判定することができる：
− 人とボードとの間の距離が関連し得る。少なくとも１台のカメラによってキャプチャされた場面の画像を使用する場面の分析（深度計算）に基づいて、人とボードとの間の距離を決定することができる。
− 顔／頭の向き。やはりキャプチャされた場面の画像の画像処理に基づいて、人がボードの方を向いているかどうかを判定することができる。
− 人がプレゼンテーションボードまたはオブジェクトを「見ている」時間。
このパラメータは、ユーザおよび依頼人によってカスタマイズされたしきい値でよい。

【0047】

あるいは、人Ａは、プレゼンテーションボードに向かって指差しジェスチャをすることによって、提示されたマルチメディアアセットへの彼の興味を表す場合がある。

【0048】

この場合、１人または複数の人が、検出されたイベントに関連していると検出されると、彼らはプレゼンテーションに興味があることが分かるので、そのような興味のある人の位置、すなわち地理的位置が決定されるべきである。検出された、イベントに関連しているそのような人、すなわち、その場所でレンダリングされたマルチメディアアセットに興味がある人の地理的位置を決定するために、位置決定手段ＬＤＭは、やはりプレゼンテーションボードＰＢの近くのキャプチャされた場面の画像（たとえば、カメラのセットによってキャプチャされた）に基づいて、検出された、イベントに関連している人の地理的位置を決定する。イベント検出手段ＥＤＭは、プレゼンテーションボードＰＢの前の場面の３次元モデルを再構築するために、キャプチャされた画像を分析する。この再構築された３次元場面に基づいて、システムは、対象者の位置を決定することができる。

【0049】

人の地理的位置を決定するために、そのような地理的位置の計算は、以下に基づき得る：図１に示されるように、キャプチャされた場面からの深度計算に基づいて、人とカメラとの間の距離を取り出すことができる。図面では、この距離はｂとして印をつけられている。タイムオブフライトカメラが使用される場合、距離ｂは、赤外線が人Ａに飛んで、戻ってくる時間によって決定される。ステレオペアカメラが使用される場合、距離ｂは、カメラおよび／またはプレゼンテーションボードに対する人の地理的位置を決定する２台のカメラの間の差に基づいて計算される。

【0050】

あるいは、図２に示されるように、場面をキャプチャするために１台のカメラが使用される場合、配向角は以下の式：ａ＝ｘ／ｙ＊Ｃによって計算することができ、ｘは人Ａと中間点との間の距離であり、ｙは最大範囲の距離であり、Ｃは最大視野角である。ｘ、ｙは容易に測定することができ、Ｃはカメラの知られているパラメータである。そのように配向角、および人とカメラとの間の距離を決定することができ、それがカメラおよび／またはプレゼンテーションボードに対する人の地理的位置を決定する。

【0051】

深度および配向角の計算の提示されるアルゴリズムは、アルゴリズムの一実施形態である点に留意されたい。視野角、ならびに人（人Ａ）とカメラおよび／またはプレゼンテーションボード（広告ボード）との間の距離を決定するための、さらなる代替アルゴリズムまたは方法があってよい。

【0052】

続いて、位置決定手段ＬＤＭを用いて、イベントに関連している人の地理的位置を決定した後、位置決定手段は、決定された地理的位置を指向性情報供給制御手段ＩＰＣＭに転送し、指向性情報供給制御手段ＩＰＣＭが、決定された人の地理的位置を受信して、続いて検出されたイベントに関連している人の地理的位置でのイベントに関連付けられるさらなる情報の供給を制御する。この方法で、イベントに関連付けられる情報を、イベントに関連している人だけに提供することができる。

【0053】

さらなる情報は、実際には、ボードＰＢ上で示される情報に関連する。さらなる情報は、チップメモリなどのメモリを用いてプレゼンテーションボードＰＢに格納することもでき、ネットワークのどこかに格納することもできる。さらなる情報をネットワークに格納する場合、ボード上にもネットワーク接続が提供されなければならない。さらなる情報の内容は、すべての人にとって同じでもよく、使用される検出技術の種類に基づいて、個人にとって異なっておりカスタマイズされていてもよい。検出技術が人のプロフィールを識別することができる場合、興味がある人に、その人に最も適したカスタマイズされたさらなる情報を提供することができる。検出技術が人のプロフィールを識別することができない場合、一般的なさらなる情報だけを提供することができる。

【0054】

さらなる情報をパーソナライズできるようにするために、人のプロフィール情報の取得を容易にする適用することができる技術は以下のものがある。

【0055】

１．その人が誰かを識別するためにキャプチャされた画像に基づく顔認識。

【0056】

２．やはりいくらかは一意である、人のモバイルＩＤ（ＳＩＭ ｉｄ）を識別するためのＷｉ−Ｆｉまたはブルートゥースリンクに基づくもの。

【0057】

３．人を識別するための指紋に基づくもの。この場合、ユーザはボードにタッチしなければならない。

【0058】

４．ＲＦＩＤ、または同様の技術。

【0059】

さらに、指向性情報供給制御手段ＩＰＣＭに結合されている外部情報供給手段ＩＰＭは、指向性情報供給制御手段ＩＰＣＭの制御下で、イベントに関連している人の地理的位置で、イベントに関連付けられるさらなる情報を提供する。

【0060】

したがって、外部情報供給手段ＩＰＭは、指向性音声を用いて、イベントに関連している人の地理的位置で、イベントに関連付けられるさらなる情報を人Ａだけに送信する。

【0061】

あるいは、情報供給手段ＩＰＭは、人にＷｉ−Ｆｉまたはブルートゥース、あるいは他の任意のワイヤレス技術を介して人のモバイル通信デバイスまたは無線デバイスに送信された指向性メッセージを用いて、さらなる情報を提供することができる。

【0062】

人Ａは、プレゼンテーションボードＰＢに提示されているマルチメディアアセットを見ており、見ていることが、キャプチャされた画像に対して行われる分析に基づいてイベント検出手段ＥＤＭによって検出され、続いて、位置決定手段ＬＤＭが、やはりキャプチャされた画像に基づいて人の地理的位置を決定して、そこからプレゼンテーションボードの前の場面の３次元モデルが生成される。決定された地理的位置に基づいて、外部情報供給手段ＩＰＭは、指向性情報供給制御手段ＩＰＣＭの制御下で、イベントに関連している人の地理的位置で、イベントに関連付けられるさらなる情報を提供し、さらなる情報は、マルチメディアアセットの背景情報を人に伝える指向性音声である。したがって、音声メッセージは、周囲の他の人々を邪魔することなしに、人Ａである適切な人だけに送信される。

【0063】

マルチメディアアセットが広告である場合、興味がある人が何らかのより多くの詳細を読んでいる、または広告内部の図表（ｆｉｇｕｒｅ）を見ている間、エリア内の販売業者に関する情報などの広告の追加情報を備えた音声メッセージが人に送信される。

【0064】

あるいは、そのような興味を引くイベントは、映画、情報マルチメディアアセット、広告、または他の任意の種類のマルチメディアアセットなどのマルチメディアアセットでもよく、または、プレゼンテーションボードに提示されたマルチメディアアセットではない、あるオブジェクトでもよい。

【0065】

さらなる代替のイベントは、関連している人にさらなる情報が提供されるべき任意の状況でもよく、そのようなイベントは、そうした行動を見せている人に警告または懲戒などの情報が提供されるべき、深刻な、またはあまり深刻ではない、法律違反または予期される行動でもよい。

【0066】

最後に、本発明の実施形態は機能ブロックに関して上述されている。上記で与えられるこれらのブロックの機能説明から、電子デバイス設計分野の当業者には、これらのブロックの実施形態をよく知られている電子部品で製造することができる方法が明らかであろう。したがって、機能ブロックの内容の詳細なアーキテクチャは与えられていない。

【0067】

上記で本発明の原理を特定の装置に関連して説明してきたが、この説明は例として行われるにすぎず、本発明の範囲を限定するものとして行われるものではないことが明確に理解されるべきである。本発明の範囲は添付の特許請求の範囲で定義される。

【図1】

【図2】

【図3】