特許 7594573 情報処理装置、プログラム、システム、及び情報処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-11-26

(45)【発行日】2024-12-04

(54)【発明の名称】情報処理装置、プログラム、システム、及び情報処理方法

(51)【国際特許分類】

   H04N 21/234 20110101AFI20241127BHJP

   G06F 3/01 20060101ALI20241127BHJP

   G06T 19/00 20110101ALI20241127BHJP

   H04N 21/262 20110101ALI20241127BHJP

【ＦＩ】

H04N21/234

G06F3/01 510

G06T19/00 600

H04N21/262

【請求項の数】 13

(21)【出願番号】P 2022186056

(22)【出願日】2022-11-21

(65)【公開番号】P2024074713

(43)【公開日】2024-05-31

【審査請求日】2023-02-08

(73)【特許権者】

【識別番号】501440684

【氏名又は名称】ソフトバンク株式会社

(74)【代理人】

【識別番号】110000877

【氏名又は名称】弁理士法人ＲＹＵＫＡ国際特許事務所

(72)【発明者】

【氏名】松本 晋司

(72)【発明者】

【氏名】朝倉 慶介

(72)【発明者】

【氏名】石田 圭利

(72)【発明者】

【氏名】杉村 聡太

【審査官】富樫 明

(56)【参考文献】

【文献】特開２０１５－０３８６９６（ＪＰ，Ａ）

【文献】国際公開第２０１８／１６７８４３（ＷＯ，Ａ１）

【文献】特開２０１６－２０１０５６（ＪＰ，Ａ）

【文献】特開２０１６－１５７４５８（ＪＰ，Ａ）

【文献】特開２０１９－１８５８１２（ＪＰ，Ａ）

【文献】米国特許第１１４５０００２（ＵＳ，Ｂ１）

【文献】特開２０１２－２３３９６２（ＪＰ，Ａ）

【文献】特開２０１２－１６３８５３（ＪＰ，Ａ）

【文献】特開２０２２－１０４９７０（ＪＰ，Ａ）

【文献】特開２００９－０７６９８５（ＪＰ，Ａ）

【文献】特開２０２１－０８１７５７（ＪＰ，Ａ）

【文献】特開平１０－２２２２８７（ＪＰ，Ａ）

【文献】国際公開第２０１９／１２３７７０（ＷＯ，Ａ１）

【文献】新留英峰、外２名，ディスプレイ中の映像に埋め込まれた不可視ARマーカに対する同期撮像，第１９回バーチャルリアリティ学会論文大会論文集，日本，日本バーチャルリアリティ学会，2024年09月01日，pp.385-386

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２１／００ － ２１／８５８

Ｇ０６Ｆ ３／００ － ３／１８

Ｇ０６Ｔ １９／００ － １９／２０

(57)【特許請求の範囲】

【請求項1】

表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、マーカ投影装置に前記マーカを投影させることによって、前記映像が前記表示対象領域に表示されている間に、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入部と、
前記映像内の注目が集まる注目エリアを示す注目エリア情報を格納する情報格納部と
を備え、
前記マーカ挿入部は、前記マーカが前記注目エリア情報によって示される前記注目エリアの外側エリアに挿入されるように、前記マーカの挿入位置を決定する、
情報処理装置。

【請求項2】

表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、マーカ投影装置に前記マーカを投影させることによって、前記映像が前記表示対象領域に表示されている間に、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入部と、
前記表示デバイスの前記ユーザの視線を示す視線情報を受信する情報受信部と、
前記視線情報によって示される前記ユーザの前記視線に基づいて、前記映像内の注目が集まる注目エリアを特定する注目エリア特定部と
を備え、
前記マーカ挿入部は、前記マーカが前記注目エリア特定部によって特定された前記注目エリアの外側エリアに挿入されるように、前記マーカの挿入位置を決定する、
情報処理装置。

【請求項3】

表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、マーカ投影装置に前記マーカを投影させることによって、前記映像が前記表示対象領域に表示されている間に 、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入部と、
前記表示デバイスの前記ユーザの動作を示すユーザ動作情報を受信する情報受信部と
を備え、
前記マーカ挿入部は、前記表示デバイスの前記ユーザの前記ユーザ動作情報に基づいて、前記マーカを前記映像に挿入する、
情報処理装置。

【請求項4】

表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、マーカ投影装置に前記マーカを投影させることによって、前記映像が前記表示対象領域に表示されている間に、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入部と、
前記表示デバイスの前記ユーザに関連するユーザ関連情報を受信する情報受信部と
を備え、
前記マーカ挿入部は、前記ユーザ関連情報に基づいて、前記マーカを前記映像に挿入する挿入期間を決定する、
情報処理装置。

【請求項5】

前記情報格納部は、前記映像内の色に関連する色関連情報をさらに格納し、
前記マーカ挿入部は、前記色関連情報に基づいて、前記マーカが挿入された場合に前記マーカの色と前記映像内の前記色との間の色差がより大きくなるように、前記マーカの挿入位置を決定する、
請求項１に記載の情報処理装置。

【請求項6】

前記情報格納部は、前記映像内の色に関連する色関連情報をさらに格納し、
前記マーカ挿入部は、前記色関連情報に基づいて、前記マーカが挿入位置に挿入された場合に、前記マーカの色と前記映像内の前記色との間の色差がより大きくなるように、前記マーカの色を決定する、
請求項１に記載の情報処理装置。

【請求項7】

前記表示デバイスに前記コンテンツを配信するコンテンツ配信部
をさらに備える、請求項１に記載の情報処理装置。

【請求項8】

コンピュータを、請求項１から７のいずれか一項に記載の情報処理装置として機能させるためのプログラム。

【請求項9】

請求項１から７のいずれか一項に記載の情報処理装置と、
前記表示デバイスと
を備える、システム。

【請求項10】

コンピュータによって実行される情報処理方法であって、
表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、マーカ投影装置に前記マーカを投影させることによって、前記映像が前記表示対象領域に表示されている間に、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入段階
を備え、
前記マーカ挿入段階は、前記マーカが、前記コンピュータに格納されている注目エリア情報によって示される、前記映像内の注目が集まる注目エリアの外側エリアに挿入されるように、前記マーカの挿入位置を決定する決定段階を有する、
情報処理方法。

【請求項11】

コンピュータによって実行される情報処理方法であって、
表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、マーカ投影装置に前記マーカを投影させることによって、前記映像が前記表示対象領域に表示されている間に、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入段階と、
前記表示デバイスの前記ユーザの視線を示す視線情報を受信する情報受信段階と、
前記視線情報によって示される前記ユーザの前記視線に基づいて、前記映像内の注目が集まる注目エリアを特定する注目エリア特定段階と
を備え、
前記マーカ挿入段階は、前記マーカが前記注目エリア特定段階で特定された前記注目エリアの外側エリアに挿入されるように、前記マーカの挿入位置を決定する決定段階を有する、
情報処理方法。

【請求項12】

コンピュータによって実行される情報処理方法であって、
表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、マーカ投影装置に前記マーカを投影させることによって、前記映像が前記表示対象領域に表示されている間に、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入段階と、
前記表示デバイスの前記ユーザの動作を示すユーザ動作情報を受信する情報受信段階と
を備え、
前記マーカ挿入段階は、前記表示デバイスの前記ユーザの前記ユーザ動作情報に基づいて、前記マーカを前記映像に挿入する、
情報処理方法。

【請求項13】

コンピュータによって実行される情報処理方法であって、
表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、マーカ投影装置に前記マーカを投影させることによって、前記映像が前記表示対象領域に表示されている間に、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入段階と、
前記表示デバイスの前記ユーザに関連するユーザ関連情報を受信する情報受信段階と
を備え、
前記マーカ挿入段階は、前記ユーザ関連情報に基づいて、前記マーカを前記映像に挿入する挿入期間を決定する決定段階を有する、
情報処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、プログラム、システム、表示デバイス、及び情報処理方法に関する。

【背景技術】

【0002】

特許文献１には、ＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）グラス等の眼鏡型デバイスを装着した装着者の視線のデータを用いたマッチングサービスが記載されている。特許文献２には、空間共有での違和感を低減できるＡＲ表示制御装置が記載されている。特許文献３には、ステルス性の高い潜像を作成する画像処理装置が記載されている。特許文献４には、シーンチェンジ期間の間にデジタルビデオ信号のデフォルトエンコーディングを適合させるための装置が記載されている。
［先行技術文献］
［特許文献］
［特許文献１］特開２０２２－０８５７３０号公報
［特許文献２］特開２０２１－１３１７４１号公報
［特許文献３］特開２０２１－００４９５７号公報
［特許文献４］国際公開第２００８／０１９５２５号

【発明の概要】

【課題を解決するための手段】

【0003】

本発明の一実施態様によれば、情報処理装置が提供される。前記情報処理装置は、表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入部を備えてよい。

【0004】

前記マーカ挿入部は、前記映像に映像加工処理を実行することによって、前記マーカを前記映像に挿入してよい。

【0005】

前記いずれかの情報処理装置において、前記マーカ挿入部は、前記映像が前記表示対象領域に表示されている間に、前記マーカを前記映像に挿入してよい。

【0006】

前記いずれかの情報処理装置において、前記マーカ挿入部は、マーカ投影装置に前記マーカを投影させることによって、前記マーカを前記映像に挿入してよい。

【0007】

前記いずれかの情報処理装置は、前記表示デバイスの前記ユーザの動作を示すユーザ動作情報を受信する情報受信部をさらに備え。前記マーカ挿入部は、前記表示デバイスの前記ユーザの前記ユーザ動作情報に基づいて、前記マーカを前記映像に挿入してよい。

【0008】

前記いずれかの情報処理装置は、前記表示デバイスに搭載されている前記撮像部が前記映像を撮像した撮像画像を受信する情報受信部をさらに備え、前記マーカ挿入部は、前記撮像画像に基づいて、前記マーカを前記映像に挿入してよい。

【0009】

前記いずれかの情報処理装置は、前記映像内の注目が集まる注目エリアを示す注目エリア情報を格納する情報格納部をさらに備え、前記マーカ挿入部は、前記マーカが前記注目エリア情報によって示される前記注目エリアの外側エリアに挿入されるように、前記マーカの挿入位置を決定してよい。

【0010】

前記いずれかの情報処理装置は、前記表示デバイスの前記ユーザの視線を示す視線情報を受信する情報受信部と、前記視線情報によって示される前記ユーザの前記視線に基づいて、前記映像内の注目が集まる注目エリアを特定する注目エリア特定部とをさらに備え、前記マーカ挿入部は、前記マーカが前記注目エリア特定部によって特定された前記注目エリアの外側エリアに挿入されるように、前記マーカの挿入位置を決定してよい。

【0011】

前記いずれかの情報処理装置は、前記映像内の色に関連する色関連情報を格納する情報格納部をさらに備え、前記マーカ挿入部は、前記色関連情報に基づいて、前記マーカが挿入された場合に前記マーカの色と前記映像内の前記色との間の色差がより大きくなるように、前記マーカの挿入位置を決定してよい。

【0012】

前記いずれかの情報処理装置は、前記映像内の色に関連する色関連情報を格納する情報格納部をさらに備えて、前記マーカ挿入部は、前記色関連情報に基づいて、前記マーカが挿入位置に挿入された場合に、前記マーカの色と前記映像内の前記色との間の色差がより大きくなるように、前記マーカの色を決定してよい。

【0013】

前記いずれかの情報処理装置は、前記表示デバイスの前記ユーザに関連するユーザ関連情報を受信する情報受信部をさらに備え、前記マーカ挿入部は、前記ユーザ関連情報に基づいて、前記マーカを前記映像に挿入する挿入期間を決定してよい。

【0014】

前記いずれかの情報処理装置は、前記表示デバイスが前記マーカを認識できたか否かを示す認識可否情報を受信する情報受信部をさらに備え、前記マーカ挿入部は、前記認識可否情報が、前記表示デバイスが前記マーカを認識できていないことを示す場合、前記表示デバイスが前記マーカを認識できるように、前記マーカの挿入位置、前記マーカの色、及び、前記マーカのサイズのうちの少なくともいずれかを変更してよい。

【0015】

前記いずれかの情報処理装置は、前記表示デバイスに前記コンテンツを配信するコンテンツ配信部をさらに備えてよい。

【0016】

本発明の一実施態様によれば、コンピュータを、前記情報処理装置として機能させるためのプログラムが提供される。

【0017】

本発明の一実施態様によれば、システムが提供される。前記システムは、前記情報処理装置を備えてよい。前記システムは、前記表示デバイスを備えてよい。

【0018】

本発明の一実施態様によれば、表示デバイスが提供される。前記表示デバイスは、表示部を備えてよい。前記表示デバイスは、撮像部を備えてよい。前記表示デバイスは、前記撮像部が表示対象領域に表示されている映像を撮像した撮像画像から、前記表示デバイスのユーザが認識可能な期間より短い期間、前記映像に挿入されているマーカを認識するマーカ認識部を備えてよい。前記表示デバイスは、前記マーカ認識部によって認識された前記マーカに基づいて、前記表示部に表示されるコンテンツの表示位置を決定する表示位置決定部を備えてよい。

【0019】

前記表示デバイスは、前記撮像画像に含まれる前記表示対象領域の画角を示す画角情報を格納する情報格納部をさらに備え、前記表示位置決定部は、前記画角情報にさらに基づいて、前記コンテンツの前記表示位置を決定してよい。

【0020】

前記いずれかの表示デバイスにおいて、前記マーカ認識部は、前記撮像画像から、前記映像に挿入されている複数の前記マーカを認識し、前記表示位置決定部は、前記マーカ認識部によって認識された前記複数のマーカに基づいて、３Ｄコンテンツである前記コンテンツの前記表示位置を決定してよい。

【0021】

本発明の一実施態様によれば、コンピュータを、前記表示デバイスとして機能させるためのプログラムが提供される。

【0022】

本発明の一実施態様によれば、コンピュータによって実行される情報処理方法が提供される。前記情報処理方法は、表示デバイスに搭載されている撮像部が表示対象領域に表示されている映像を撮像している間に前記表示デバイスの表示部に表示される前記映像に関連するコンテンツの表示位置を決定するためのマーカを、前記表示デバイスのユーザが認識可能な期間より短い期間の間、前記映像に挿入するマーカ挿入段階を備えてよい。

【0023】

本発明の一実施態様によれば、コンピュータによって実行される情報処理方法が提供される。前記情報処理方法は、前記コンピュータに搭載されている撮像部が表示対象領域に表示されている映像を撮像した撮像画像から、前記コンピュータのユーザが認識可能な期間より短い期間、前記映像に挿入されているマーカを認識するマーカ認識段階を備えてよい。前記情報処理方法は、前記マーカ認識段階で認識された前記マーカに基づいて、前記コンピュータに搭載されている表示部に表示されるコンテンツの表示位置を決定する表示位置決定段階を備えてよい。

【0024】

尚、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

【図面の簡単な説明】

【0025】

【図1】システム１０の一例を概略的に示す。

【図2】表示デバイス１００の構成の一例を概略的に示す。

【図3】表示デバイス１００がマーカを認識する一例を説明するための説明図である。

【図4】表示デバイス１００がコンテンツを表示する一例を説明するための説明図である。

【図5】表示デバイス１００がコンテンツを表示する他の一例を説明するための説明図である。

【図6】表示デバイス１００がマーカを認識する他の一例を説明するための説明図である。

【図7】表示デバイス１００がコンテンツを表示する他の一例を説明するための説明図である。

【図8】表示デバイス１００がコンテンツを表示する他の一例を説明するための説明図である。

【図9】表示デバイス１００の撮像部１２０によって撮像された撮像画像８０の一例を概略的に示す。

【図10】表示デバイス１００がマーカを認識する他の一例を説明するための説明図である。

【図11】情報処理装置２００の機能構成の一例を概略的に示す。

【図12】表示デバイス１００の機能構成の一例を概略的に示す。

【図13】システム１０による処理の流れの一例を概略的に示す。

【図14】情報処理装置２００又は表示デバイス１００として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。

【発明を実施するための形態】

【0026】

ＡＲグラスの装着者がＡＲグラスを通してスクリーンに投影されている映像を観賞する場合において、ＡＲグラスは、ＡＲグラスの表示部の適切な位置にコンテンツを表示すべく、自己位置推定を実行する必要がある。しかしながら、ＡＲグラスは、暗所において、自己位置推定を実行するために必要な特徴点を把握できない場合がある。本実施形態に係るシステム１０は、例えば、ＡＲグラスの自己位置推定のための特徴点として用いられるマーカを、人間が認識できない短時間の間、スクリーンに投影されている映像に挿入する仕組みを採用する。

【0027】

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

【0028】

図１は、システム１０の一例を概略的に示す。システム１０は、表示デバイス１００及び情報処理装置２００を備える。システム１０は、通信デバイス３００をさらに備えてよい。システム１０は、映像表示装置４００をさらに備えてよい。システム１０は、通信端末１５０をさらに備えてもよい。

【0029】

システム１０は、表示対象領域５０に表示されている映像にバーチャルの視覚情報を追加することによって実空間を仮想的に拡張するＡＲ技術を用いたサービスを提供する施設で利用される。システム１０は、例えば、映画館で利用される。システム１０は、例えば、プロジェクションマッピング等のデジタルアートのイベント会場で利用される。システム１０は、例えば、バーチャルライブのライブ会場で利用される。システム１０は、例えば、遊園地等のテーマパークで利用される。システム１０は、例えば、ゲームセンターで利用される。システム１０は、自宅で利用されてもよい。図１は、システム１０が映画館で利用される場合の一例を示す。

【0030】

表示対象領域５０は、例えば、スクリーン装置のスクリーン領域である。表示対象領域５０は、例えば、ディスプレイ装置のディスプレイ領域である。表示対象領域５０は、例えば、部屋や建物等の壁領域、天井領域、床領域等である。表示対象領域５０は、映像を表示可能なその他の任意の領域であってよい。図１は、表示対象領域５０がスクリーン装置のスクリーン領域である場合の一例を示す。

【0031】

表示デバイス１００は、無線通信機能と、コンテンツを表示部に表示する表示機能とを有しているデバイスであれば、どのようなものであってもよい。表示デバイス１００は、例えば、眼鏡型デバイスである。眼鏡型デバイスは、例えば、ＡＲグラスである。表示デバイス１００は、スマートフォンやタブレット端末等であってもよい。図１は、表示デバイス１００がＡＲグラスである場合の一例を示す。

【0032】

コンテンツは、任意のデータ形式であってよい。例えば、コンテンツは、２ＤのＣＧ（Ｃｏｍｐｕｔｅｒ Ｇｒａｐｈｉｃｓ）データである。例えば、コンテンツは、３ＤのＣＧデータである。例えば、コンテンツは、静止画である。また、例えば、コンテンツは、動画である。例えば、コンテンツは、テキストである。コンテンツは、これらを複合的に含んでもよい。

【0033】

表示デバイス１００は、コンテンツを透明又は半透明の表示部上に表示することによって、実空間にコンテンツが配置されている感覚をユーザ１０２に与えることが可能なデバイスであってよい。すなわち、表示デバイス１００は、いわゆる透過型（シースルー型）のデバイスであってよい。尚、表示デバイス１００は、ビデオパススルー型のデバイスであってもよい。この場合、表示デバイス１００は、ユーザ１０２の視界に対応する範囲を撮影している撮影画像を非透過型のディスプレイに表示し、コンテンツを重畳表示してよい。

【0034】

表示デバイス１００は、例えば、自機の位置を推定する機能を有する。表示デバイス１００は、例えば、表示デバイス１００に搭載されている撮像部によって撮像された撮像画像に基づいて、自機の位置を推定する。表示デバイス１００は、例えば、撮像画像から自機の位置を推定するための特徴点を抽出することによって、自機の位置を推定する。表示デバイス１００は、例えば、抽出した特徴点の形状及びサイズに基づいて、自機の位置を推定する。表示デバイス１００は、自機の位置を推定した推定結果に基づいて、コンテンツを表示部に表示してよい。

【0035】

情報処理装置２００は、映像に関連する情報処理を実行する。情報処理装置２００は、例えば、情報を映像に挿入する挿入処理を実行する。情報処理装置２００は、例えば、表示デバイス１００に搭載されている撮像部が表示対象領域５０に表示されている映像を撮像している間に表示デバイス１００の表示部に表示される当該映像に関連するコンテンツの表示位置を決定するためのマーカ６０を、表示デバイス１００のユーザ１０２が認識可能な期間より短い期間の間、当該映像に挿入する。尚、表示デバイス１００のユーザ１０２は、表示デバイス１００の装着者であってよい。

【0036】

情報処理装置２００は、例えば、視覚マスキング効果を利用して、表示デバイス１００のユーザ１０２が認識可能な期間より短い期間の間、マーカ６０を当該映像に挿入する。視覚マスキング効果とは、ターゲット刺激及びマスク刺激の２つの視覚刺激が時間的及び空間的に近接して表示された場合に、ターゲット刺激のみが表示される場合と比較して、ターゲット刺激の知覚が妨害される効果である。尚、マスク刺激がターゲット刺激に対して時間的に先に表示される場合を順向マスキングと称し、マスク刺激がターゲット刺激に対して時間的に後に表示される場合を逆向マスキングと称する。例えば、情報処理装置２００は、視覚マスキング効果を利用して、７０～８０ｍｓ以下の間、マーカ６０を当該映像に挿入する。

【0037】

映像のフレームレートは、例えば、６０ｆｐｓ（ｆｒａｍｅｓ ｐｅｒ ｓｅｃｏｎｄ）である。この場合、情報処理装置２００は、視覚マスキング効果を利用して、４～５フレーム以下の連続したフレームに、マーカ６０を挿入してよい。映像のフレームレートは、その他の任意の値であってもよい。

【0038】

マーカ６０は、例えば、ＱＲ（Ｑｕｉｃｋ Ｒｅｓｐｏｎｓｅ）コードである。マーカ６０は、例えば、バーコードである。マーカ６０は、表示デバイス１００がマーカとして認識可能であれば、矩形や円形等の任意の形状の図形であってもよい。

【0039】

マーカ６０は、例えば、コンテンツに関連するコンテンツ関連情報を含む。コンテンツ関連情報は、例えば、コンテンツを識別するコンテンツ識別情報を含む。コンテンツ関連情報は、例えば、コンテンツのデータ形式を示すデータ形式情報を含む。

【0040】

映像に関連するコンテンツは、映像に関連していれば、どのようなものであってもよい。映像に関連するコンテンツは、例えば、映像の演出に用いられるコンテンツ、映像の字幕に用いられるコンテンツ、映像のシーンの解説に用いられるコンテンツ、映像で登場する商品の宣伝に用いられるコンテンツ等であってよい。

【0041】

情報処理装置２００は、映像を通信デバイス３００に提供する。情報処理装置２００は、例えば、ネットワーク２０を介して通信デバイス３００と通信することによって、映像を通信デバイス３００に提供する。

【0042】

ネットワーク２０は、通信事業者によって提供されるコアネットワークを含んでよい。コアネットワークは、例えば、５Ｇ（５ｔｈ Ｇｅｎｅｒａｔｉｏｎ）通信システムに準拠する。コアネットワークは、６Ｇ（６ｔｈ Ｇｅｎｅｒａｔｉｏｎ）通信システム以降の移動体通信システムに準拠してもよい。コアネットワークは、３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）通信システムやＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）通信システムに準拠してもよい。ネットワーク２０は、インターネットを含んでもよい。ネットワーク２０は、Ｗｉ－Ｆｉ（登録商標）通信方式に対応していてもよい。ネットワーク２０には、Ｗｉ－Ｆｉアクセスポイントを介してアクセス可能であってよい。ネットワーク２０には、その他無線通信全般を利用してアクセス可能であってよい。ネットワーク２０には、有線接続を介してアクセス可能であってもよい。

【0043】

通信デバイス３００は、情報処理装置２００と通信可能なデバイスであれば、どのようなものであってもよい。通信デバイス３００は、例えば、ラップトップＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、デスクトップＰＣ等のＰＣである。通信デバイス３００は、スマートフォンやタブレット端末等であってもよい。図１は、通信デバイス３００がラップトップＰＣである場合の一例を示す。

【0044】

通信デバイス３００は、例えば、情報処理装置２００によって提供された映像を映像表示装置４００に送信する。通信デバイス３００は、例えば、有線接続を介して、当該映像を映像表示装置４００に送信する。通信デバイス３００は、ＨＤＭＩ（登録商標）（Ｈｉｇｈ－Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）ケーブル等を用いて、映像表示装置４００と有線接続を確立してよい。通信デバイス３００は、無線接続を介して、当該映像を映像表示装置４００に送信してもよい。通信デバイス３００は、Ｗｉ－Ｆｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）及びＺｉｇｂｅｅ（登録商標）等の短距離無線通信方式を用いて、映像表示装置４００と無線接続を確立してよい。

【0045】

映像表示装置４００は、通信デバイス３００から受信した映像を表示可能なデバイスであれば、どのようなものであってもよい。映像表示装置４００は、例えば、プロジェクタである。映像表示装置４００は、ディスプレイ装置であってもよい。図１は、映像表示装置４００がプロジェクタである場合の一例を示す。

【0046】

情報処理装置２００は、例えば、映像に関連するコンテンツを通信端末１５０に配信する。情報処理装置２００は、例えば、ネットワーク２０を介して通信端末１５０と通信することによって、当該コンテンツを通信端末１５０に配信する。

【0047】

通信端末１５０は、情報処理装置２００と通信可能なデバイスであれば、どのようなものであってもよい。通信端末１５０は、例えば、スマートフォンやタブレット端末等である。通信端末１５０は、ＰＣであってもよい。通信端末１５０は、ウェアラブル端末であってもよい。通信端末１５０は、ＡＲグラスであってもよい。図１は、通信端末１５０がスマートフォンである場合の一例を示す。

【0048】

通信端末１５０は、情報処理装置２００によって配信された、映像に関連するコンテンツを表示デバイス１００に送信する。通信端末１５０は、例えば、無線接続を介して、当該コンテンツを表示デバイス１００に送信する。通信端末１５０は、Ｗｉ－Ｆｉ、Ｂｌｕｅｔｏｏｔｈ及びＺｉｇｂｅｅ等の短距離無線通信方式を用いて、表示デバイス１００と無線接続を確立してよい。通信端末１５０は、有線接続を介して、当該コンテンツを表示デバイス１００に送信してもよい。通信端末１５０及び表示デバイス１００は、一体であってもよい。

【0049】

例えば、表示デバイス１００は、表示デバイス１００に搭載されている撮像部が表示対象領域５０に表示されている映像を撮像した撮像画像から、表示デバイス１００のユーザ１０２が認識可能な期間より短い期間、当該映像に挿入されているマーカ６０を認識する。次に、表示デバイス１００は、認識したマーカ６０に基づいて、通信端末１５０から受信したコンテンツの表示位置を決定する。その後、表示デバイス１００は、決定した表示位置に従って、表示デバイス１００の表示部に表示する。

【0050】

尚、情報処理装置２００は、ＭＥＣ（Ｍｏｂｉｌｅ Ｅｄｇｅ Ｃｏｍｐｕｔｉｎｇ又はＭｕｌｔｉ－ａｃｃｅｓｓ Ｅｄｇｅ Ｃｏｍｐｕｔｉｎｇ）として機能してよい。すなわち、情報処理装置２００は、ＭＥＣサーバであってよい。

【0051】

ＡＲ技術を用いて表示デバイスの表示部の適切な位置にコンテンツを表示させるためには、コンテンツの表示位置を決定するための特徴点を表示デバイスに認識させる必要がある。しかしながら、映画館やイベント会場等の暗所において、表示デバイスは、特徴点を認識することができず、表示部の適切な位置にコンテンツを表示できない場合がある。その一方で、表示デバイスの装着者が特徴点を認識した場合、表示デバイスの装着者が興醒めしてしまう恐れがある。以上より、暗所において、コンテンツの表示位置を決定するための特徴点が、表示デバイスが認識でき、且つ、表示デバイスの装着者が認識できない態様で表示されることが望ましい。

【0052】

本実施形態に係るシステム１０によれば、情報処理装置２００は、視覚マスキング効果を利用して、コンテンツの表示位置を決定するための特徴点としてのマーカ６０を、表示デバイス１００のユーザ１０２が認識できないほど短期間の間だけ映像に挿入する。映像が表示される表示対象領域５０は暗所において明るい領域であるので、情報処理装置２００は、表示対象領域５０に表示されている映像に挿入されたマーカ６０を表示デバイス１００に認識させることができる。よって、情報処理装置２００は、暗所において、表示デバイスの表示部の適切な位置にコンテンツを表示させることができる。さらに、マーカ６０が映像に挿入された期間が、表示デバイス１００のユーザ１０２がマーカ６０を認識可能な期間より短いので、情報処理装置２００は、表示対象領域５０に表示されている映像に挿入されたマーカ６０を表示デバイス１００のユーザ１０２に認識させない。以上より、本実施形態に係るシステム１０は、暗所において、表示デバイスのユーザにマーカを認識させることなく、表示デバイスにマーカを認識させて表示デバイスの表示部の適切な位置にコンテンツを表示させることによって、表示デバイスを通して映像を観賞した表示デバイスのユーザの没入感を向上させることができる。

【0053】

図２は、表示デバイス１００の構成の一例を概略的に示す。表示デバイス１００は、リム１１２及びテンプル１１８を有するフレーム１１０を備える。表示デバイス１００は、バッテリを備えてもよい。

【0054】

表示デバイス１００は、例えば、撮像部１２０を備える。撮像部１２０の撮像範囲は、表示デバイス１００を装着しているユーザ１０２の視界に対応する範囲であってよい。図２における撮像部１２０の配置は一例であり、撮像部１２０は、他の位置に配置されてもよい。

【0055】

表示デバイス１００は、例えば、センサ１２２を備える。センサ１２２は、表示デバイス１００を装着しているユーザ１０２の動作を検出するためのセンサであってよい。センサ１２２は、例えば、加速度センサやジャイロセンサ等である。図２では、センサ１２２がブリッジ１１４に配置されている場合を例示しているが、図２におけるセンサ１２２の配置は一例であり、センサ１２２は、他の位置に配置されてもよい。

【0056】

表示デバイス１００は、例えば、視線検出部１２４を備える。視線検出部１２４は、表示デバイス１００の装着者であるユーザ１０２の視線を検出してよい。視線検出部１２４は、例えば、ユーザ１０２の目を撮像して監視することによって、ユーザ１０２の視線を検出する。図２における視線検出部１２４の配置は一例であり、視線検出部１２４は、他の位置に配置されてもよい。

【0057】

表示デバイス１００は、各種入力を受け付けてよい。表示デバイス１００は、表示デバイス１００の任意の位置に配置された操作部を介して、ユーザ１０２からの各種入力を受け付けてよい。表示デバイス１００は、例えば、フレーム１１０の任意の位置に配置されたボタン等の入力部を介して、ユーザ１０２からの各種入力を受け付ける。表示デバイス１００は、例えば、通信端末１５０を介して、ユーザ１０２からの各種入力を受け付けてもよい。

【0058】

表示デバイス１００は、レンズ１１６への表示機能を備えてよい。レンズ１１６は、表示デバイス１００の表示部の一例であってよい。レンズ１１６は、透明又は半透明のディスプレイであってよく、表示デバイス１００は、レンズ１１６に各種表示を実行させてよい。すなわち、表示デバイス１００は、透明又は半透明のディスプレイ型のデバイスであってよい。また、表示デバイス１００が、レンズ１１６に対して表示を投影する機能を有してもよい。すなわち、表示デバイス１００は、投影型のデバイスであってよい。

【0059】

表示デバイス１００は、ネットワーク２０を介した通信を実行する機能を有してよい。表示デバイス１００は、移動体通信、Ｗｉ－Ｆｉ通信、及びその他の無線通信全般の少なくともいずれかによって、ネットワーク２０にアクセスしてよい。表示デバイス１００は、ネットワーク２０を介して、情報処理装置２００と通信してよい。情報処理装置２００は、ネットワーク２０を介して、映像に関連するコンテンツを表示デバイス１００に配信してよい。

【0060】

図３は、表示デバイス１００がマーカを認識する一例を説明するための説明図である。図３～図８及び図１０において、図内のｘ軸方向が水平方向であり、図内のｙ軸方向が鉛直方向であるものとする。

【0061】

表示デバイス１００は、例えば、表示対象領域５０に表示されている映像を撮像部１２０が撮像した撮像画像から、情報処理装置２００によって映像に挿入されている１つのマーカであるマーカ６０を認識する。以下の図４及び図５の説明では、表示デバイス１００が、図３に示されるマーカ６０を認識した場合に、マーカ６０に基づいてレンズ１１６に表示されるコンテンツの表示位置を決定する一例をそれぞれ説明する。

【0062】

図４は、表示デバイス１００がコンテンツを表示する一例を説明するための説明図である。表示デバイス１００は、例えば、図３に示されるマーカ６０を認識し、認識したマーカ６０に基づいて、レンズ１１６に表示される１つのコンテンツの表示位置を決定する。表示デバイス１００は、認識したマーカ６０に基づいて、レンズ１１６に表示される複数のコンテンツの表示位置を決定してもよい。ここでは、表示デバイス１００が、認識したマーカ６０に基づいて、レンズ１１６に表示される１つのコンテンツ７０の表示位置を決定する場合の一例を主に説明する。

【0063】

表示デバイス１００は、例えば、認識したマーカ６０の中心位置を基準位置とし、基準位置とコンテンツ７０の表示位置との間の位置関係を示す位置関係情報に基づいて、コンテンツ７０の表示位置を決定する。表示デバイス１００は、例えば、情報処理装置２００から位置関係情報を受信する。表示デバイス１００は、通信端末１５０から位置関係情報を受信してもよい。表示デバイス１００は、マーカ６０から、位置関係情報を含むコンテンツ関連情報を読み取ってもよい。

【0064】

図４に示される一例において、表示デバイス１００は、基準位置からｘ軸方向にｘ_ｃ、ｙ軸方向ｙ_ｃ離れた位置がコンテンツ７０の表示位置であると決定する。表示デバイス１００は、コンテンツ７０が決定した表示位置に表示されるように、レンズ１１６にコンテンツ７０の表示を実行させてよい。

【0065】

図５は、表示デバイス１００がコンテンツを表示する他の一例を説明するための説明図である。図５に示される一例において、表示デバイス１００は、図３に示されるマーカ６０の中心位置がコンテンツ７０の表示位置であると決定する。表示デバイス１００は、コンテンツ７０が決定した表示位置に表示されるように、レンズ１１６にコンテンツ７０の表示を実行させてよい。

【0066】

図６は、表示デバイス１００がマーカを認識する他の一例を説明するための説明図である。表示デバイス１００は、例えば、表示対象領域５０に表示されている映像を撮像部１２０が撮像した撮像画像から、情報処理装置２００によって映像に挿入されている３つのマーカであるマーカ６２、マーカ６４、及びマーカ６６を認識する。マーカ６２、マーカ６４、及びマーカ６６のそれぞれは、マーカ６０と同様の特徴を有してよい。以下の図７及び図８の説明では、表示デバイス１００が、図６に示されるマーカ６２、マーカ６４、及びマーカ６６を認識した場合に、マーカ６２、マーカ６４、及びマーカ６６に基づいてレンズ１１６に表示されるコンテンツの表示位置を決定する一例をそれぞれ説明する。

【0067】

図７は、表示デバイス１００がコンテンツを表示する他の一例を説明するための説明図である。ここでは、表示デバイス１００が、図６に示されるマーカ６２、マーカ６４、及びマーカ６６を認識し、認識したマーカ６２、マーカ６４、及びマーカ６６に基づいて、レンズ１１６に表示される１つの３Ｄコンテンツであるコンテンツ７０の表示位置を決定する場合の一例を主に説明する。

【0068】

表示デバイス１００は、例えば、認識したマーカ６２、マーカ６４、及びマーカ６６がコンテンツ７０の表示位置を決定するためのマーカであることを示す対応関係情報と、マーカ６２、マーカ６４、及びマーカ６６の間の位置関係とに基づいて、コンテンツ７０の表示位置を決定する。表示デバイス１００は、例えば、情報処理装置２００から対応関係情報を受信する。表示デバイス１００は、通信端末１５０から対応関係情報を受信してもよい。表示デバイス１００は、マーカ６２、マーカ６４、及びマーカ６６のそれぞれから、対応関係情報を含むコンテンツ関連情報を読み取ってもよい。

【0069】

対応関係情報は、例えば、コンテンツ識別情報を含む。対応関係情報は、例えば、マーカを識別するマーカ識別情報を含む。

【0070】

表示デバイス１００は、マーカ６２、マーカ６４、及びマーカ６６のそれぞれの中心位置に基づいて、マーカ６２、マーカ６４、及びマーカ６６の間の位置関係を決定してよい。表示デバイス１００は、コンテンツ７０が決定した表示位置に表示されるように、レンズ１１６にコンテンツ７０の表示を実行させてよい。

【0071】

図８は、表示デバイス１００がコンテンツを表示する他の一例を説明するための説明図である。ここでは、表示デバイス１００が、図６に示されるマーカ６２、マーカ６４、及びマーカ６６を認識し、認識したマーカ６２、マーカ６４、及びマーカ６６のそれぞれに基づいて、レンズ１１６に表示される３つのコンテンツであるコンテンツ７２、コンテンツ７４、及び、コンテンツ７６のそれぞれの表示位置を決定する場合の一例を主に説明する。

【0072】

表示デバイス１００は、例えば、認識したマーカ６２、マーカ６４、及びマーカ６６のそれぞれが、コンテンツ７２、コンテンツ７４、及び、コンテンツ７６のそれぞれの表示位置を決定するためのマーカであることを示す複数の対応関係情報を基づいて、コンテンツ７２、コンテンツ７４、及び、コンテンツ７６のそれぞれの表示位置を決定する。図８に示される一例において、表示デバイス１００は、マーカ６２の中心位置がコンテンツ７２の表示位置であり、マーカ６４の中心位置がコンテンツ７４の表示位置であり、マーカ６６の中心位置がコンテンツ７６の表示位置であると決定する。表示デバイス１００は、コンテンツ７２、コンテンツ７４、及び、コンテンツ７６のそれぞれが決定した表示位置に表示されるように、レンズ１１６にコンテンツ７２、コンテンツ７４、及び、コンテンツ７６の表示を実行させてよい。

【0073】

図９は、表示デバイス１００の撮像部１２０によって撮像された撮像画像８０の一例を概略的に示す。図９は、表示デバイス１００のユーザ１０２及びユーザ５０２が表示対象領域５０に表示されている雪合戦のビデオゲームをしているときに撮像部１２０によって撮像された撮像画像の一例を示す。撮像画像８０は、表示対象領域５０に表示されている雪合戦のビデオゲームの映像及びユーザ５０２を含む。表示デバイス１００は、撮像画像８０を情報処理装置２００に送信してよい。

【0074】

情報処理装置２００は、例えば、表示デバイス１００から受信した撮像画像８０に基づいて、マーカ６０を映像に挿入する。例えば、情報処理装置２００は、撮像画像８０を画像解析することによって、ユーザ５０２の動作を検出する。情報処理装置２００は、検出したユーザ５０２の動作に基づいて、マーカ６０を映像に挿入してよい。情報処理装置２００は、例えば、ユーザ５０２の動作が映像に関連する特定動作である場合に、マーカ６０を映像に挿入する。表示対象領域５０に表示されている映像が雪合戦のビデオゲームの映像である場合において、情報処理装置２００は、例えば、ユーザ５０２の動作が投球動作である場合に、マーカ６０を映像に挿入する。

【0075】

情報処理装置２００は、撮像画像８０を画像解析することによって、表示対象領域５０とユーザ５０２とが重複している重複エリアを検出してもよい。この場合、情報処理装置２００は、マーカ６０が重複エリアの外側エリアに表示されるように、マーカ６０を映像に挿入してよい。

【0076】

図１０は、表示デバイス１００がマーカを認識する他の一例を説明するための説明図である。表示デバイス１００は、情報処理装置２００によって、重複エリアの外側エリアに挿入されたマーカ６０を認識してよい。

【0077】

図１１は、情報処理装置２００の機能構成の一例を概略的に示す。情報処理装置２００は、情報格納部２０２、情報受信部２０４、要求送信部２０６、マーカ挿入部２０８、注目エリア特定部２１０、映像提供部２１２、及び、コンテンツ配信部２１４を備える。尚、情報処理装置２００がこれらの全ての構成を備えることが必須とは限らない。

【0078】

情報格納部２０２は、各種情報を格納する。情報格納部２０２は、例えば、マーカ６０の挿入対象の映像に関連する映像関連情報を格納する。映像関連情報は、例えば、マーカ６０の挿入対象の映像を含む。映像関連情報は、例えば、映像内の注目が集まる注目エリアを示す注目エリア情報を含む。注目エリアは、例えば、登場人物やキャラクタ等の注目対象が占めるエリアである。注目エリアは、映像の中央エリアであってもよい。映像関連情報は、例えば、映像内の色に関連する色関連情報を含む。色関連情報は、例えば、映像内の色相を示す色相情報を含む。色関連情報は、例えば、映像内の明度を示す明度情報を含む。色関連情報は、映像内の彩度を示す彩度情報を含んでもよい。映像関連情報は、例えば、映像のメインターゲットを示すメインターゲット情報を含む。映像のメインターゲットは、例えば、子供である。映像のメインターゲットは、例えば、大人である。映像のメインターゲットは、例えば、男性である。映像のメインターゲットは、例えば、女性である。映像関連情報は、映像に関連する特定動作を示す特定動作情報を含んでもよい。

【0079】

情報格納部２０２は、マーカ６０の挿入対象の映像に関連するコンテンツを格納する。情報格納部２０２は、当該コンテンツを映像関連情報に対応付けて格納してよい。

【0080】

情報格納部２０２は、当該コンテンツのコンテンツ関連情報を格納してもよい。情報格納部２０２は、コンテンツ関連情報を映像関連情報に対応付けて格納してよい。

【0081】

情報受信部２０４は、外部装置から各種情報を受信する。情報受信部２０４は、例えば、外部装置から、ネットワーク２０を介して、各種情報を受信する。情報受信部２０４は、受信した各種情報を情報格納部２０２に格納してよい。

【0082】

情報受信部２０４は、例えば、表示デバイス１００から、各種情報を受信する。情報受信部２０４は、例えば、表示デバイス１００のユーザに関連するユーザ関連情報を受信する。ユーザ関連情報は、例えば、ユーザの年代を示す年代情報を含む。ユーザ関連情報は、例えば、ユーザの年齢を示す年齢情報を含む。ユーザ関連情報は、ユーザの性別を示す性別情報を含んでもよい。情報受信部２０４は、ユーザの視線を示す視線情報を受信してもよい。

【0083】

情報受信部２０４は、例えば、通信端末１５０から、各種情報を受信する。情報受信部２０４は、表示デバイス１００から受信した情報と同様の情報を、通信端末１５０から受信してよい。

【0084】

情報受信部２０４は、例えば、映像が表示対象領域５０に表示されている間に、各種情報を受信する。情報受信部２０４は、例えば、表示デバイス１００のユーザの動作を示すユーザ動作情報を受信する。表示デバイス１００のユーザの動作は、例えば、表示デバイス１００が備えるセンサ１２２によって検出される。表示デバイス１００のユーザの動作は、例えば、通信端末１５０が備える加速度センサやジャイロセンサ等のセンサによって検出される。表示デバイス１００のユーザの動作は、表示対象領域５０を含む空間に設置されたカメラによって検出されてもよい。この場合、情報受信部２０４は、カメラによって撮像された、表示デバイス１００のユーザを含む撮像画像を受信してもよい。

【0085】

情報受信部２０４は、例えば、表示デバイス１００に搭載されている撮像部１２０が表示対象領域５０に表示されている映像を撮像した撮像画像を受信する。情報受信部２０４は、表示デバイス１００がマーカ６０を認識できたか否かを示す認識可否情報を受信してもよい。

【0086】

要求送信部２０６は、外部装置に各種情報の送信を要求する。要求送信部２０６は、例えば、ネットワーク２０を介して、外部装置に各種情報の送信を要求する。情報受信部２０４は、外部装置が要求送信部２０６による要求に応じて送信した各種情報を受信してよい。

【0087】

要求送信部２０６は、例えば、表示デバイス１００に要求する。要求送信部２０６は、例えば、通信端末１５０に要求する。要求送信部２０６は、通信デバイス３００に要求してもよい。

【0088】

マーカ挿入部２０８は、マーカ６０の挿入対象の映像にマーカ６０を挿入する。マーカ挿入部２０８は、例えば、マーカ６０の挿入対象の映像に複数のマーカ６０を挿入する。

【0089】

マーカ挿入部２０８は、例えば、表示デバイス１００に搭載されている撮像部１２０が表示対象領域５０に表示されている映像を撮像している間に表示デバイス１００の表示部に表示される映像に関連するコンテンツの表示位置を決定するためのマーカ６０を、表示デバイス１００のユーザが認識可能な期間より短い期間の間、映像に挿入する。マーカ挿入部２０８は、例えば、映像に映像加工処理を実行することによって、マーカ６０を映像に挿入する。マーカ挿入部２０８は、マーカ投影装置にマーカ６０を投影させることによって、マーカ６０を映像に挿入してもよい。マーカ投影装置は、例えば、プロジェクタである。

【0090】

マーカ挿入部２０８は、例えば、マーカ６０の挿入位置を決定する。マーカ挿入部２０８は、例えば、マーカ６０の色を決定する。マーカ挿入部２０８は、例えば、マーカ６０のサイズを決定する。マーカ挿入部２０８は、例えば、マーカ６０を映像に挿入するタイミングを決定する。マーカ挿入部２０８は、マーカ６０を映像に挿入する挿入期間を決定してもよい。

【0091】

マーカ挿入部２０８は、例えば、情報格納部２０２に格納されている各種情報に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、映像関連情報に対応付けて情報格納部２０２に格納されているコンテンツ関連情報に基づいて、マーカ６０を映像に挿入する。

【0092】

マーカ挿入部２０８は、例えば、コンテンツ関連情報に含まれる対応関係情報に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、対応関係情報によってコンテンツに対応付けられているマーカ６０を映像に挿入する。マーカ挿入部２０８は、マーカ６０がコンテンツ関連情報を含むように、マーカ６０を映像に挿入してもよい。

【0093】

マーカ挿入部２０８は、例えば、映像関連情報に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、映像関連情報に含まれる注目エリア情報に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、注目エリア情報に基づいて、マーカ６０の挿入位置を決定する。マーカ挿入部２０８は、例えば、マーカ６０が注目エリア情報によって示される注目エリアの外側エリアに挿入されるように、マーカ６０の挿入位置を決定する。

【0094】

表示デバイス１００のユーザは、表示対象領域５０に表示されている映像を観賞する場合、注目エリアを注視して観賞する傾向にある。したがって、情報処理装置２００は、マーカ６０が注目エリアの外側エリアに挿入されるようにマーカ６０を映像に挿入することによって、マーカ６０が表示デバイス１００のユーザによって認識される可能性をより軽減できる。

【0095】

マーカ挿入部２０８は、例えば、映像関連情報に含まれる色関連情報に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、色関連情報に基づいて、マーカ６０の挿入位置を決定する。マーカ挿入部２０８は、例えば、マーカ６０が挿入された場合にマーカ６０の色と映像内の色との間の色差がより大きくなるように、マーカ６０の挿入位置を決定する。マーカ挿入部２０８は、例えば、色関連情報に基づいて、マーカ６０の色を決定してもよい。マーカ挿入部２０８は、マーカ６０が挿入位置に挿入された場合に、マーカ６０の色と映像内の色との間の色差がより大きくなるように、マーカ６０の色を決定してもよい。

【0096】

表示デバイス１００は、マーカ６０の色と映像内の色との間の色差が大きいほど、映像に挿入されているマーカ６０を認識し易くなる。したがって、情報処理装置２００は、マーカ６０の色と映像内の色との間の色差がより大きくなるようにマーカ６０を映像に挿入することによって、表示デバイス１００により確実にマーカ６０を認識させることができる。

【0097】

マーカ挿入部２０８は、表示デバイス１００のユーザのユーザ関連情報に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、複数の表示デバイス１００のそれぞれのユーザの複数のユーザ関連情報に基づいて、マーカ６０を映像に挿入する。

【0098】

マーカ挿入部２０８は、例えば、ユーザ関連情報に基づいて、マーカ６０を映像に挿入する挿入期間を決定する。マーカ挿入部２０８は、例えば、ユーザ関連情報に含まれる年代情報によって示される年代の表示デバイス１００のユーザが認識可能な期間より短い期間の間、マーカ６０が映像に挿入されるように、マーカ６０を映像に挿入する挿入期間を決定する。マーカ挿入部２０８は、例えば、ユーザ関連情報に含まれる年齢情報によって示される年齢の表示デバイス１００のユーザが認識可能な期間より短い期間の間、マーカ６０が映像に挿入されるように、マーカ６０を映像に挿入する挿入期間を決定する。マーカ挿入部２０８は、ユーザ関連情報に含まれる性別情報によって示される性別の表示デバイス１００のユーザが認識可能な期間より短い期間の間、マーカ６０が映像に挿入されるように、マーカ６０を映像に挿入する挿入期間を決定してもよい。

【0099】

マーカ挿入部２０８は、マーカ６０の挿入対象の映像のメインターゲット情報に基づいて、マーカ６０を映像に挿入してもよい。マーカ挿入部２０８は、例えば、映像のメインターゲット情報に基づいて、マーカ６０を映像に挿入する挿入期間を決定する。マーカ挿入部２０８は、例えば、メインターゲット情報によって示される映像のメインターゲットが認識可能な期間より短い期間の間、マーカ６０が映像に挿入されるように、マーカ６０を映像に挿入する挿入期間を決定する。

【0100】

表示デバイス１００のユーザがマーカ６０を認識することが可能になるマーカ６０の挿入期間は、表示デバイス１００のユーザの年齢や性別によって異なる傾向にある。したがって、マーカ挿入部２０８は、表示デバイス１００のユーザの年齢や性別を考慮してマーカ６０を映像に挿入することによって、マーカ６０が表示デバイス１００のユーザによって認識される可能性をより軽減できる。

【0101】

マーカ挿入部２０８は、例えば、映像が表示対象領域５０に表示されている間に、マーカ６０を映像に挿入する。すなわち、マーカ挿入部２０８は、映像の再生中にマーカ６０をリアルタイムで挿入する。マーカ挿入部２０８は、映像が表示対象領域５０に表示される前に予めマーカ６０を映像に挿入してもよい。

【0102】

マーカ挿入部２０８は、例えば、映像が表示対象領域５０に表示されている間に情報受信部２０４が受信した各種情報に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、表示デバイス１００のユーザのユーザ動作情報に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、ユーザ動作情報に基づいて、マーカ６０を映像に挿入するタイミングを決定する。マーカ挿入部２０８は、例えば、ユーザ動作情報によって示される表示デバイス１００のユーザの動作が特定動作情報によって示される映像に関連する特定動作である場合に、マーカ６０を映像に挿入する。この場合、マーカ挿入部２０８は、対応関係情報によって特定動作に対応するコンテンツに対応付けられているマーカ６０を映像に挿入してよい。マーカ挿入部２０８は、表示デバイス１００のユーザが予め定められた移動距離閾値よりも長い移動距離を移動した場合に、マーカ６０を映像に挿入してもよい。

【0103】

マーカ挿入部２０８は、例えば、表示デバイス１００に搭載されている撮像部１２０が映像を撮像した撮像画像に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、当該撮像画像を画像解析することによって、マーカ６０を映像に挿入する。

【0104】

マーカ挿入部２０８は、例えば、表示対象領域５０に表示されている映像及び表示デバイス１００のユーザではない他のユーザを含む当該撮像画像に基づいて、マーカ６０を映像に挿入する。マーカ挿入部２０８は、例えば、当該撮像画像に基づいて、マーカ６０を映像に挿入するタイミングを決定する。マーカ挿入部２０８は、例えば、当該撮像画像から他のユーザの動作を検出し、検出した他のユーザの動作が特定動作情報によって示される映像に関連する特定動作である場合に、マーカ６０を映像に挿入する。この場合、マーカ挿入部２０８は、対応関係情報によって特定動作に対応するコンテンツに対応付けられているマーカ６０を映像に挿入してよい。マーカ挿入部２０８は、他のユーザが予め定められた移動距離閾値よりも長い移動距離を移動した場合に、マーカ６０を映像に挿入してもよい。

【0105】

マーカ挿入部２０８は、例えば、当該撮像画像に基づいて、マーカ６０の挿入位置を決定する。マーカ挿入部２０８は、例えば、当該撮像画像から表示対象領域５０と他のユーザとが重複している重複エリアを検出し、マーカ６０が重複エリアの外側エリアに表示されるように、マーカ６０の挿入位置を決定する。

【0106】

マーカ挿入部２０８は、表示対象領域５０に表示されている映像及び他のユーザ以外の障害物を含む撮像画像に基づいて、マーカ６０を映像に挿入してもよい。マーカ挿入部２０８は、例えば、当該撮像画像に基づいて、マーカ６０の挿入位置を決定する。マーカ挿入部２０８は、例えば、当該撮像画像から表示対象領域５０と障害物とが重複している重複エリアを検出し、マーカ６０が重複エリアの外側エリアに表示されるように、マーカ６０の挿入位置を決定する。

【0107】

マーカ挿入部２０８は、認識可否情報に基づいて、マーカ６０を映像に挿入してもよい。マーカ挿入部２０８は、例えば、認識可否情報が、表示デバイス１００がマーカ６０を認識できていないことを示す場合、表示デバイス１００がマーカ６０を認識できるように、マーカ６０の挿入位置、マーカ６０の色、及び、マーカ６０のサイズのうちの少なくともいずれかを変更する。マーカ挿入部２０８は、マーカ６０が表示対象領域５０に表示された時刻から予め定められた期間内に、情報受信部２０４が表示デバイス１００から認識可否情報を受信しない場合、表示デバイス１００がマーカ６０を認識できるように、マーカ６０の挿入位置、マーカ６０の色、及び、マーカ６０のサイズのうちの少なくともいずれかを変更してもよい。

【0108】

マーカ挿入部２０８は、例えば、マーカ６０の挿入位置を変更する場合、変更後のマーカ６０挿入位置におけるマーカ６０の色と映像内の色との間の色差がより大きくなるように、マーカ６０の挿入位置を変更する。マーカ挿入部２０８は、例えば、マーカ６０の色を変更する場合、変更後のマーカ６０の色と映像内の色との間の色差がより大きくなるように、マーカ６０の色を変更する。マーカ挿入部２０８は、例えば、マーカ６０のサイズを変更する場合、変更後のマーカ６０のサイズが変更前のマーカ６０のサイズより大きくなるように、マーカ６０のサイズを変更する。

【0109】

注目エリア特定部２１０は、注目エリアを特定する。注目エリア特定部２１０は、例えば、情報格納部２０２に格納されている表示デバイス１００のユーザの視線情報によって示されるユーザの視線に基づいて、注目エリアを特定する。注目エリア特定部２１０は、例えば、複数の表示デバイス１００のそれぞれのユーザの複数の視線情報によって示される複数のユーザそれぞれの視線に基づいて、注目エリアを特定する。注目エリア特定部２１０は、例えば、映像内のユーザの視線がより向けられているエリアを特定することによって、注目エリアを特定する。注目エリア特定部２１０は、情報処理装置２００が備える入力デバイスが映像の作成者やディレクタ等による入力を受け付けることによって、注目エリアを特定してもよい。

【0110】

注目エリア特定部２１０は、例えば、映像が表示対象領域５０に表示されている間に、注目エリアを特定する。すなわち、注目エリア特定部２１０は、映像の再生中に注目エリアをリアルタイムで特定する。注目エリア特定部２１０は、映像が表示対象領域５０に表示される前に予め注目エリアを特定してもよい。

【0111】

注目エリア特定部２１０は、特定した注目エリアを注目エリア情報として情報格納部２０２に格納してよい。マーカ挿入部２０８は、注目エリア特定部２１０によって特定された注目エリアに基づいて、マーカ６０を映像に挿入してもよい。

【0112】

映像提供部２１２は、マーカ挿入部２０８によってマーカ６０が挿入された映像を提供する。映像提供部２１２は、例えば、当該映像を通信デバイス３００に提供する。

【0113】

映像提供部２１２は、例えば、ネットワーク２０を介して当該映像を送信することによって、当該映像を提供する。映像提供部２１２は、例えば、ストリーミング方式で当該映像を送信する。映像提供部２１２は、ダウンロード方式で当該映像を送信してもよい。映像提供部２１２は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）等の記録媒体に当該映像を記録することによって、当該映像を提供してもよい。

【0114】

コンテンツ配信部２１４は、情報格納部２０２に格納されているコンテンツを配信する。コンテンツ配信部２１４は、例えば、ネットワーク２０を介して、コンテンツを配信する。

【0115】

コンテンツ配信部２１４は、例えば、表示デバイス１００にコンテンツを配信する。コンテンツ配信部２１４は、例えば、通信端末１５０にコンテンツを配信する。コンテンツ配信部２１４は、通信デバイス３００にコンテンツを配信してもよい。

【0116】

コンテンツ配信部２１４は、例えば、映像関連情報に対応付けて情報格納部２０２に格納されているコンテンツ関連情報に基づいて、コンテンツを配信する。コンテンツ配信部２１４は、例えば、コンテンツ関連情報に含まれる対応関係情報によってマーカ６０に対応付けられているコンテンツを配信する。

【0117】

コンテンツ配信部２１４は、例えば、映像が表示対象領域５０に表示されている間に、コンテンツを配信する。コンテンツ配信部２１４は、映像の再生中にコンテンツをリアルタイムで配信する。コンテンツ配信部２１４は、例えば、映像提供部２１２が映像を提供している間に、当該映像に関連するコンテンツを配信する。コンテンツ配信部２１４は、映像が表示対象領域５０に表示される前に予めコンテンツを配信してもよい。

【0118】

図１２は、表示デバイス１００の機能構成の一例を概略的に示す。表示デバイス１００は、情報格納部１０４、情報受信部１０６、画角決定部１０７、マーカ認識部１０８、表示位置決定部１０９、撮像部１２０、センサ１２２、視線検出部１２４、表示部１２６、要求受信部１２８、及び情報送信部１３０を備える。尚、表示デバイス１００がこれらの全ての構成を備えることが必須とは限らない。

【0119】

情報格納部１０４は、各種情報を格納する。情報格納部１０４は、例えば、表示デバイス１００のユーザのユーザ関連情報を格納する。情報格納部１０４は、例えば、撮像部１２０によって撮像された撮像画像を格納する。情報格納部１０４は、例えば、センサ１２２によって検出された表示デバイス１００のユーザの動作を示すユーザ動作情報を格納する。情報格納部１０４は、視線検出部１２４によって検出された表示デバイス１００のユーザの視線を示す視線情報を格納してもよい。

【0120】

情報受信部１０６は、各種情報を受信する。情報受信部１０６は、例えば、ネットワーク２０を介して、各種情報を受信する。情報受信部１０６は、受信した各種情報を情報格納部１０４に格納してよい。

【0121】

情報受信部１０６は、例えば、情報処理装置２００から、各種情報を受信する。情報受信部１０６は、例えば、通信端末１５０から、各種情報を受信する。情報受信部１０６は、例えば、通信デバイス３００から、各種情報を受信してもよい。

【0122】

情報受信部１０６は、例えば、表示対象領域５０に表示されている映像に関連するコンテンツを受信する。情報受信部１０６は、当該コンテンツに関連するコンテンツ関連情報を受信してもよい。

【0123】

画角決定部１０７は、撮像部１２０によって撮像される撮像画像に含まれる表示対象領域５０の画角を決定する。画角決定部１０７は、例えば、映像が表示対象領域５０に表示される前の表示対象領域５０を含む空間が明るい状態で撮像部１２０が表示対象領域５０を撮像した撮像画像に基づいて、表示対象領域５０の画角を決定する。画角決定部１０７は、映画館やライブ会場等のような、表示デバイス１００のユーザが表示対象領域５０に表示されている映像を観賞する観賞位置を事前に特定可能である場合、表示デバイス１００のユーザの観賞位置に基づいて、表示対象領域５０の画角を決定してもよい。画角決定部１０７は、決定した表示対象領域５０の画角を画角情報して情報格納部２０２に格納してよい。

【0124】

マーカ認識部１０８は、表示対象領域５０に表示されている映像に挿入されているマーカ６０を認識する。マーカ認識部１０８は、例えば、撮像部１２０が表示対象領域５０に表示されている映像を撮像した撮像画像から、表示デバイス１００のユーザが認識可能な期間より短い期間、当該映像に挿入されているマーカ６０を認識する。マーカ認識部１０８は、撮像画像から、映像に挿入されている複数のマーカ６０を認識してよい。マーカ認識部１０８は、認識したマーカ６０から、コンテンツ関連情報を読み取ってもよい。

【0125】

マーカ認識部１０８は、例えば、マーカ６０の形状を認識する。マーカ認識部１０８は、マーカ６０のサイズを認識してもよい。

【0126】

表示位置決定部１０９は、表示部１２６に表示される、情報格納部１０４に格納されているコンテンツの表示位置を決定する。表示位置決定部１０９は、例えば、マーカ認識部１０８によって認識されたマーカ６０に基づいて、コンテンツの表示位置を決定する。表示位置決定部１０９は、例えば、マーカ認識部１０８によって認識された複数のマーカ６０に基づいて、３Ｄコンテンツであるコンテンツの表示位置を決定する。表示位置決定部１０９は、マーカ認識部１０８によって認識された複数のマーカ６０に基づいて、複数のコンテンツの表示位置を決定してもよい。

【0127】

表示位置決定部１０９は、例えば、マーカ６０の形状及びサイズに基づいて、コンテンツの表示位置を決定する。例えば、表示位置決定部１０９は、マーカ６０の形状及びサイズに基づいて、表示デバイス１００の位置を推定する。表示位置決定部１０９は、推定した表示デバイス１００の位置により適合するように、コンテンツの表示位置を決定してよい。この場合、マーカ６０は、表示デバイス１００の位置を推定するための特徴点であってよい。

【0128】

表示位置決定部１０９は、例えば、複数のマーカ６０の位置関係に基づいて、コンテンツの表示位置を決定する。例えば、表示位置決定部１０９は、複数のマーカ６０の位置関係に基づいて、表示デバイス１００の位置を推定する。表示位置決定部１０９は、推定した表示デバイス１００の位置により適合するように、コンテンツの表示位置を決定してよい。この場合、複数のマーカ６０は、表示デバイス１００の位置を推定するための特徴点であってよい。尚、表示位置決定部１０９は、当該複数のマーカ６０のそれぞれの中心位置を特定することによって、当該複数のマーカ６０の位置関係を決定してよい。

【0129】

表示位置決定部１０９は、コンテンツ関連情報にさらに基づいて、コンテンツの表示位置を決定する。表示位置決定部１０９は、コンテンツ関連情報に含まれる位置関係情報に基づいて、コンテンツの表示位置を決定する。表示位置決定部１０９は、例えば、位置関係情報によって示される、マーカ認識部１０８によって認識されたマーカ６０の中心位置である基準位置とコンテンツの表示位置との間の位置関係に基づいて、コンテンツの表示位置を決定する。

【0130】

表示位置決定部１０９は、例えば、コンテンツ関連情報に含まれる対応関係情報に基づいて、コンテンツの表示位置を決定する。表示位置決定部１０９は、例えば、１つのマーカ６０が１つのコンテンツの表示位置を決定するためのマーカであることを対応関係情報が示す場合、当該マーカ６０の中心位置がコンテンツの表示位置であると決定する。表示位置決定部１０９は、例えば、マーカ認識部１０８によって認識された複数のマーカ６０が１つの３Ｄコンテンツであるコンテンツの表示位置を決定するためのマーカであることを対応関係情報が示す場合、当該複数のマーカ６０の位置関係に基づいて、３Ｄコンテンツであるコンテンツの表示位置を決定する。この場合、当該複数のマーカ６０は、例えば、３つ以上のマーカ６０である。

【0131】

表示位置決定部１０９は、例えば、情報格納部１０４に格納されている画角情報にさらに基づいて、コンテンツの表示位置を決定する。例えば、表示位置決定部１０９は、画角情報によって示される、撮像部１２０によって撮像された撮像画像に含まれる表示対象領域５０の画角に基づいて、表示デバイス１００の位置を推定する。表示位置決定部１０９は、推定した表示デバイス１００の位置により適合するように、コンテンツの表示位置を決定してよい。この場合、表示対象領域５０の画角は、表示デバイス１００の位置を推定するための特徴点であってよい。

【0132】

表示部１２６は、情報格納部１０４に格納されているコンテンツを表示する。表示部１２６は、例えば、表示位置決定部１０９によって決定された表示位置にコンテンツを表示する。

【0133】

表示部１２６は、例えば、情報格納部１０４に格納されているコンテンツ関連情報に基づいて、コンテンツを表示する。表示部１２６は、例えば、コンテンツ関連情報に含まれる対応関係情報によって、マーカ認識部１０８が認識したマーカ６０に対応付けられているコンテンツを表示する。

【0134】

要求受信部１２８は、情報格納部１０４に格納されている各種情報の送信の要求を受信する。要求受信部１２８は、例えば、ネットワーク２０を介して、要求を受信する。

【0135】

要求受信部１２８は、例えば、情報処理装置２００から要求を受信する。要求受信部１２８は、通信端末１５０から要求を受信してもよい。

【0136】

情報送信部１３０は、情報格納部１０４に格納されている各種情報を送信する。情報送信部１３０は、例えば、ネットワーク２０を介して、各種情報を送信する。

【0137】

情報送信部１３０は、例えば、要求受信部１２８が要求を受信したことに応じて、各種情報を送信する。情報送信部１３０は、各種情報を定期的に送信してもよい。

【0138】

情報送信部１３０は、例えば、各種情報を情報処理装置２００に送信する。情報送信部１３０は、各種情報を通信端末１５０に送信してもよい。

【0139】

図１３は、システム１０による処理の流れの一例を概略的に示す。ここでは、映像が表示対象領域５０に表示されていない状態を開始状態とする。

【0140】

ステップ（ステップをＳと省略して記載する場合がある。）１０２において、マーカ挿入部２０８は、マーカ６０の挿入対象の映像にマーカ６０を挿入する。Ｓ１０４において、映像提供部２１２は、Ｓ１０２でマーカ挿入部２０８がマーカ６０を挿入した映像を通信デバイス３００に送信する。

【0141】

Ｓ１０６において、通信デバイス３００は、Ｓ１０４で情報処理装置２００から受信した映像を映像表示装置４００に送信する。Ｓ１０８において、映像表示装置４００は、Ｓ１０６で通信デバイス３００から受信した映像の表示対象領域５０への表示を開始する。

【0142】

Ｓ１１０において、コンテンツ配信部２１４は、表示デバイス１００にコンテンツを配信する。Ｓ１１２において、撮像部１２０は、表示対象領域５０に表示されている映像を撮像する。Ｓ１１４において、マーカ認識部１０８は、Ｓ１１２で撮像部１２０によって撮像された撮像画像から、表示デバイス１００のユーザが認識可能な期間より短い期間、映像に挿入されているマーカ６０を認識する。Ｓ１１６において、表示位置決定部１０９は、Ｓ１１４でマーカ認識部１０８によって認識されたマーカ６０に基づいて、表示部１２６に表示されるコンテンツの表示位置を決定する。Ｓ１１８において、表示部１２６は、Ｓ１１６で表示位置決定部１０９によって決定された表示位置にコンテンツを表示する。

【0143】

映像表示装置４００が表示対象領域５０に映像を表示している間は、Ｓ１１０～Ｓ１１８が繰り返し実行され得る。Ｓ１２０において、映像表示装置４００は、映像の表示対象領域５０への表示を終了し、システム１０による処理が終了する。

【0144】

図１４は、情報処理装置２００又は表示デバイス１００として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。コンピュータ１２００にインストールされたプログラムは、コンピュータ１２００を、上記実施形態に係る装置の１又は複数の「部」として機能させ、又はコンピュータ１２００に、上記実施形態に係る装置に関連付けられるオペレーション又は当該１又は複数の「部」を実行させることができ、及び／又はコンピュータ１２００に、上記実施形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ１２００に、本明細書に記載のフローチャート及びブロック図のブロックのうちのいくつか又は全てに関連付けられた特定のオペレーションを実行させるべく、ＣＰＵ１２１２によって実行されてよい。

【0145】

本実施形態によるコンピュータ１２００は、ＣＰＵ１２１２、ＲＡＭ１２１４、及びグラフィックコントローラ１２１６を含み、それらはホストコントローラ１２１０によって相互に接続されている。コンピュータ１２００はまた、通信インタフェース１２２２、記憶装置１２２４、ＤＶＤドライブ１２２６、及びＩＣカードドライブのような入出力ユニットを含み、それらは入出力コントローラ１２２０を介してホストコントローラ１２１０に接続されている。ＤＶＤドライブ１２２６は、ＤＶＤ－ＲＯＭドライブ及びＤＶＤ－ＲＡＭドライブ等であってよい。記憶装置１２２４は、ハードディスクドライブ及びソリッドステートドライブ等であってよい。コンピュータ１２００はまた、ＲＯＭ１２３０及びキーボード１２４２のようなレガシの入出力ユニットを含み、それらは入出力チップ１２４０を介して入出力コントローラ１２２０に接続されている。

【0146】

ＣＰＵ１２１２は、ＲＯＭ１２３０及びＲＡＭ１２１４内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ１２１６は、ＲＡＭ１２１４内に提供されるフレームバッファ等又はそれ自体の中に、ＣＰＵ１２１２によって生成されるイメージデータを取得し、イメージデータがディスプレイデバイス１２１８上に表示されるようにする。

【0147】

通信インタフェース１２２２は、ネットワークを介して他の電子デバイスと通信する。記憶装置１２２４は、コンピュータ１２００内のＣＰＵ１２１２によって使用されるプログラム及びデータを格納する。ＤＶＤドライブ１２２６は、プログラム又はデータをＤＶＤ－ＲＯＭ１２２７等から読み取り、記憶装置１２２４に提供する。ＩＣカードドライブは、プログラム及びデータをＩＣカードから読み取り、及び／又はプログラム及びデータをＩＣカードに書き込む。

【0148】

ＲＯＭ１２３０はその中に、アクティブ化時にコンピュータ１２００によって実行されるブートプログラム等、及び／又はコンピュータ１２００のハードウェアに依存するプログラムを格納する。入出力チップ１２４０はまた、様々な入出力ユニットをＵＳＢポート、パラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入出力コントローラ１２２０に接続してよい。

【0149】

プログラムは、ＤＶＤ－ＲＯＭ１２２７又はＩＣカードのようなコンピュータ可読記憶媒体によって提供される。プログラムは、コンピュータ可読記憶媒体から読み取られ、コンピュータ可読記憶媒体の例でもある記憶装置１２２４、ＲＡＭ１２１４、又はＲＯＭ１２３０にインストールされ、ＣＰＵ１２１２によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ１２００に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ１２００の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。

【0150】

例えば、通信がコンピュータ１２００及び外部デバイス間で実行される場合、ＣＰＵ１２１２は、ＲＡＭ１２１４にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース１２２２に対し、通信処理を命令してよい。通信インタフェース１２２２は、ＣＰＵ１２１２の制御の下、ＲＡＭ１２１４、記憶装置１２２４、ＤＶＤ－ＲＯＭ１２２７、又はＩＣカードのような記録媒体内に提供される送信バッファ領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、又はネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。

【0151】

また、ＣＰＵ１２１２は、記憶装置１２２４、ＤＶＤドライブ１２２６（ＤＶＤ－ＲＯＭ１２２７）、ＩＣカード等のような外部記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がＲＡＭ１２１４に読み取られるようにし、ＲＡＭ１２１４上のデータに対し様々なタイプの処理を実行してよい。ＣＰＵ１２１２は次に、処理されたデータを外部記録媒体にライトバックしてよい。

【0152】

様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。ＣＰＵ１２１２は、ＲＡＭ１２１４から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索／置換等を含む、様々なタイプの処理を実行してよく、結果をＲＡＭ１２１４に対しライトバックする。また、ＣＰＵ１２１２は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第２の属性の属性値に関連付けられた第１の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、ＣＰＵ１２１２は、当該複数のエントリの中から、第１の属性の属性値が指定されている条件に一致するエントリを検索し、当該エントリ内に格納された第２の属性の属性値を読み取り、それにより予め定められた条件を満たす第１の属性に関連付けられた第２の属性の属性値を取得してよい。

【0153】

上で説明したプログラム又はソフトウェアモジュールは、コンピュータ１２００上又はコンピュータ１２００近傍のコンピュータ可読記憶媒体に格納されてよい。また、専用通信ネットワーク又はインターネットに接続されたサーバシステム内に提供されるハードディスク又はＲＡＭのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ１２００に提供する。

【0154】

本実施形態におけるフローチャート及びブロック図におけるブロックは、オペレーションが実行されるプロセスの段階又はオペレーションを実行する役割を持つ装置の「部」を表わしてよい。特定の段階及び「部」が、専用回路、コンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び／又はコンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び／又はアナログハードウェア回路を含んでよく、集積回路（ＩＣ）及び／又はディスクリート回路を含んでよい。プログラマブル回路は、例えば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、及びプログラマブルロジックアレイ（ＰＬＡ）等のような、論理積、論理和、排他的論理和、否定論理積、否定論理和、及び他の論理演算、フリップフロップ、レジスタ、並びにメモリエレメントを含む、再構成可能なハードウェア回路を含んでよい。

【0155】

コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読記憶媒体は、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピー（登録商標）ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリメモリ（ＲＯＭ）、消去可能プログラマブルリードオンリメモリ（ＥＰＲＯＭ又はフラッシュメモリ）、電気的消去可能プログラマブルリードオンリメモリ（ＥＥＰＲＯＭ）、静的ランダムアクセスメモリ（ＳＲＡＭ）、コンパクトディスクリードオンリメモリ（ＣＤ－ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、ブルーレイ（登録商標）ディスク、メモリスティック、集積回路カード等が含まれてよい。

【0156】

コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ（ＩＳＡ）命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はＳｍａｌｌｔａｌｋ（登録商標）、ＪＡＶＡ（登録商標）、Ｃ＋＋等のようなオブジェクト指向プログラミング言語、及び「Ｃ」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、１又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。

【0157】

コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路が、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を生成するために当該コンピュータ可読命令を実行すべく、ローカルに又はローカルエリアネットワーク（ＬＡＮ）、インターネット等のようなワイドエリアネットワーク（ＷＡＮ）を介して、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路に提供されてよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。

【0158】

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。そのような変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

【0159】

特許請求の範囲、明細書、及び図面中において示した装置、システム、プログラム、及び方法における動作、手順、ステップ、及び段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、及び図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。

【符号の説明】

【0160】

１０ システム、２０ ネットワーク、５０ 表示対象領域、６０ マーカ、６２ マーカ、６４ マーカ、６６ マーカ、７０ コンテンツ、７２ コンテンツ、７４ コンテンツ、７６ コンテンツ、８０ 撮像画像、１００ 表示デバイス、１０２ ユーザ、１０４ 情報格納部、１０６ 情報受信部、１０７ 画角決定部、１０８ マーカ認識部、１０９ 表示位置決定部、１１０ フレーム、１１２ リム、１１４ ブリッジ、１１６ レンズ、１１８ テンプル、１２０ 撮像部、１２２ センサ、１２４ 視線検出部、１２６ 表示部、１２８ 要求受信部、１３０ 情報送信部、１５０ 通信端末、２００ 情報処理装置、２０２ 情報格納部、２０４ 情報受信部、２０６ 要求送信部、２０８ マーカ挿入部、２１０ 注目エリア特定部、２１２ 映像提供部、２１４ コンテンツ配信部、３００ 通信デバイス、４００ 映像表示装置、５０２ ユーザ、１２００ コンピュータ、１２１０ ホストコントローラ、１２１２ ＣＰＵ、１２１４ ＲＡＭ、１２１６ グラフィックコントローラ、１２１８ ディスプレイデバイス、１２２０ 入出力コントローラ、１２２２ 通信インタフェース、１２２４ 記憶装置、１２３０ ＲＯＭ、１２４０ 入出力チップ、１２４２ キーボード

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】