IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

▶ 株式会社リコーの特許一覧

特許7031228プログラム、画像表示方法、画像表示システム、情報処理装置
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-02-28
(45)【発行日】2022-03-08
(54)【発明の名称】プログラム、画像表示方法、画像表示システム、情報処理装置
(51)【国際特許分類】
   H04N 21/4728 20110101AFI20220301BHJP
   G06Q 30/02 20120101ALI20220301BHJP
   G06F 3/04845 20220101ALI20220301BHJP
   G06F 3/04842 20220101ALI20220301BHJP
   G09G 5/36 20060101ALI20220301BHJP
   G09G 5/00 20060101ALI20220301BHJP
【FI】
H04N21/4728
G06Q30/02 446
G06F3/0484 150
G06F3/0484 120
G09G5/36 520P
G09G5/00 550B
G09G5/36 520F
G09G5/36 520G
G09G5/00 530H
【請求項の数】 31
(21)【出願番号】P 2017207636
(22)【出願日】2017-10-26
(65)【公開番号】P2019080252
(43)【公開日】2019-05-23
【審査請求日】2020-08-19
(73)【特許権者】
【識別番号】000006747
【氏名又は名称】株式会社リコー
(72)【発明者】
【氏名】藤田 陽平
(72)【発明者】
【氏名】小河原 修
(72)【発明者】
【氏名】原 崇之
【審査官】長谷川 素直
(56)【参考文献】
【文献】特開2014-006880(JP,A)
【文献】国際公開第2016/009864(WO,A1)
【文献】米国特許出願公開第2017/0244946(US,A1)
【文献】特開2011-053456(JP,A)
【文献】特開2016-110649(JP,A)
【文献】特表2015-534662(JP,A)
【文献】国際公開第2012/042974(WO,A1)
【文献】特開2017-049956(JP,A)
【文献】特開2006-157615(JP,A)
【文献】特開2007-322452(JP,A)
【文献】特開2017-059902(JP,A)
(58)【調査した分野】(Int.Cl.,DB名)
H04N 21/00-21/858
G06Q 30/02
G06F 3/04845
G06F 3/04842
G09G 5/36
G09G 5/00
(57)【特許請求の範囲】
【請求項1】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ
前記広角画像は全天球画像であり、
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、立体球上の曲線の距離が長い方の経路を経由して前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とするプログラム。
【請求項2】
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、360度以上、全天球画像を移動する経路を経由して前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする請求項1に記載のプログラム。
【請求項3】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、視線方向を軸に前記表示範囲を回転させることを特徴とするプログラム。
【請求項4】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記注目点表示手段は最後に表示した前記注目点を記録しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は前記最後に表示した前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とするプログラム。
【請求項5】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記注目点表示手段はすでに表示した前記注目点を記録しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段はまだ表示していない前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とするプログラム。
【請求項6】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記注目点表示手段はすでに表示した前記注目点を記録しており、
前記広角画像は複数の前記注目点の表示順を指定する情報を保持しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は最後に表示した前記注目点の次の前記注目点を前記表示順から特定し、該注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とするプログラム。
【請求項7】
前記広角画像の表示に関する操作を受け付ける操作受付手段と、
前記操作受付手段が操作を受け付けた操作に応じて前記表示範囲に表示される前記広角画像の範囲を変更する画像表示手段と、を有し、
前記画像表示手段が表示した前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする請求項1~のいずれか1項に記載のプログラム。
【請求項8】
前記表示範囲に前記注目点が含まれない状態で、前記所定の契機として前記操作受付手段が操作を受け付けない所定時間が経過した場合、前記注目点表示手段は前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする請求項7に記載のプログラム。
【請求項9】
前記表示範囲に前記注目点が含まれない状態又は前記表示範囲に前記注目点が含まれる状態で、前記所定の契機として前記操作受付手段が前記情報処理装置を回転させるか又は移動させる操作を受け付けた場合、前記注目点表示手段は注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする請求項7に記載のプログラム。
【請求項10】
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は現在の表示範囲から最も近い前記注目点を含む前記範囲を前記表示範囲に表示することを特徴とする請求項1~のいずれか1項に記載のプログラム。
【請求項11】
前記情報処理装置はネットワークを介して第二の情報処理装置と通信することができ、
前記広角画像は前記第二の情報処理装置から送信され、前記広角画像は前記注目点ごとに複数の前記情報処理装置で選択された回数を保持しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は選択された回数が最も多い前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする請求項1~のいずれか1項に記載のプログラム。
【請求項12】
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、移動量が最短になる経路以外の経路を経由して前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする請求項1~11のいずれか1項に記載のプログラム。
【請求項13】
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、予め定められた表示する前記注目点の決定方法で決定した前記注目点とは別の前記注目点を表示してから、前記決定方法で決定した前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする請求項4~6のいずれか1項に記載のプログラム。
【請求項14】
前記注目点表示手段は、前記注目点と前記注目点の距離が閾値未満の場合、距離が閾値未満の複数の前記注目点の重心を決定し、前記重心が含まれる前記広角画像を前記表示範囲に表示することを特徴とする請求項1~13のいずれか1項に記載のプログラム。
【請求項15】
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、前記表示範囲を変更しながら前記広角画像を拡大又は縮小するか、前記注目点が含まれる前記広角画像を前記表示範囲に表示した後に前記広角画像を拡大又は縮小することを特徴とする請求項1~14のいずれか1項に記載のプログラム。
【請求項16】
前記注目点が含まれる前記広角画像を前記表示範囲に表示した後、前記注目点表示手段は複数の前記注目点を順番に表示することを特徴とする請求項1~15のいずれか1項に記載のプログラム。
【請求項17】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記注目点表示手段は最後に表示した前記注目点を記録しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は前記最後に表示した前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする画像表示方法。
【請求項18】
注目点を有する広角画像を表示装置に表示させる情報処理装置
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記注目点表示手段はすでに表示した前記注目点を記録しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段はまだ表示していない前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする画像表示方法。
【請求項19】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記注目点表示手段はすでに表示した前記注目点を記録しており、
前記広角画像は複数の前記注目点の表示順を指定する情報を保持しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は最後に表示した前記注目点の次の前記注目点を前記表示順から特定し、該注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする画像表示方法
【請求項20】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記広角画像は全天球画像であり、
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、立体球上の曲線の距離が長い方の経路を経由して前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする画像表示方法。
【請求項21】
注目点を有する広角画像を表示装置に表示させる情報処理装置を、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、視線方向を軸に前記表示範囲を回転させることを特徴とする画像表示方法。
【請求項22】
1つ以上の注目点を有する広角画像を配信する画像配信装置と、前記広角画像を表示する端末装置とを有する画像表示システムであって、
前記広角画像の少なくとも一部を表示範囲にして前記端末装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記注目点表示手段は最後に表示した前記注目点を記録しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は前記最後に表示した前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする画像表示システム。
【請求項23】
1つ以上の注目点を有する広角画像を配信する画像配信装置と、前記広角画像を表示する端末装置とを有する画像表示システムであって、
前記広角画像の少なくとも一部を表示範囲にして前記端末装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記注目点表示手段はすでに表示した前記注目点を記録しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段はまだ表示していない前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする画像表示システム。
【請求項24】
1つ以上の注目点を有する広角画像を配信する画像配信装置と、前記広角画像を表示する端末装置とを有する画像表示システムであって、
前記広角画像の少なくとも一部を表示範囲にして前記端末装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記注目点表示手段はすでに表示した前記注目点を記録しており、
前記広角画像は複数の前記注目点の表示順を指定する情報を保持しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は最後に表示した前記注目点の次の前記注目点を前記表示順から特定し、該注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする画像表示システム。
【請求項25】
1つ以上の注目点を有する広角画像を配信する画像配信装置と、前記広角画像を表示する端末装置とを有する画像表示システムであって、
前記広角画像の少なくとも一部を表示範囲にして前記端末装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記広角画像は全天球画像であり、
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、立体球上の曲線の距離が長い方の経路を経由して前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする画像表示システム。
【請求項26】
1つ以上の注目点を有する広角画像を配信する画像配信装置と、前記広角画像を表示する端末装置とを有する画像表示システムであって、
前記広角画像の少なくとも一部を表示範囲にして前記端末装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、視線方向を軸に前記表示範囲を回転させることを特徴とする画像表示システム。
【請求項27】
注目点を有する広角画像を表示装置に表示させる情報処理装置であって、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記注目点表示手段は最後に表示した前記注目点を記録しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は前記最後に表示した前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする情報処理装置。
【請求項28】
注目点を有する広角画像を表示装置に表示させる情報処理装置であって、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記注目点表示手段はすでに表示した前記注目点を記録しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段はまだ表示していない前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする情報処理装置。
【請求項29】
注目点を有する広角画像を表示装置に表示させる情報処理装置であって、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記注目点表示手段はすでに表示した前記注目点を記録しており、
前記広角画像は複数の前記注目点の表示順を指定する情報を保持しており、
前記表示範囲に前記注目点が含まれない場合、前記注目点表示手段は最後に表示した前記注目点の次の前記注目点を前記表示順から特定し、該注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする情報処理装置。
【請求項30】
注目点を有する広角画像を表示装置に表示させる情報処理装置であって、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記広角画像は全天球画像であり、
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、立体球上の曲線の距離が長い方の経路を経由して前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とする情報処理装置。
【請求項31】
注目点を有する広角画像を表示装置に表示させる情報処理装置であって、
前記広角画像の少なくとも一部を表示範囲にして前記表示装置が表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段を有し、
前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、視線方向を軸に前記表示範囲を回転させることを特徴とする情報処理装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、プログラム、画像表示方法、画像表示システム、及び、情報処理装置に関する。
【背景技術】
【0002】
テキストデータと比較して画像データは閲覧者に対する訴求力が強いという点で有利である。更に、画像データが動画の場合は、静止画に比べ多くの情報を含みうるし、画像が変化するため閲覧者に対する訴求力が強い。このため、従来からテレビコマーシャルなどでは動画が多く利用されている。
【0003】
また、インターネットの普及によりWebページにも動画が利用されるようになった(例えば、特許文献1参照。)。特許文献1には、動画広告を配信することで広告の効果(クリック率)を高める技術について開示されている。人は動く物に視線を奪われやすいという傾向があるため、広告の注目度を高め広告の効果を向上させることができる。
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、従来の技術では必ずしも画像の注目点を閲覧者に見せることができないという問題がある。例えば、動画では決まった流れで画像が移り変わるだけであり、動画のうちの任意の注目点を積極的に閲覧者に見せることは困難である。
【0005】
また、撮像装置の高機能化により画角が大きい撮像装置が普及するようになった。更に、魚眼レンズ等を利用した超広角な範囲を撮像できる撮像装置も普及し始めている。これらの広角な撮像装置により撮像された画像は画角が広いため、閲覧者が注目点を探せなかったり、画像の提供者が見せたい注目点を閲覧させられなかったりする場合があると考えられる。
【0006】
本発明は、上記課題に鑑み、画像の注目点を閲覧者が閲覧することが可能なプログラムを提供することを目的とする。
【課題を解決するための手段】
【0007】
本発明は、注目点を有する広角画像を表示装置に表示させる情報処理装置を、前記広角画像の少なくとも一部を表示範囲にして表示した際に所定の契機が検出されると、前記広角画像のうち前記注目点が含まれる範囲を前記表示範囲に表示する注目点表示手段、として機能させ、前記広角画像は全天球画像であり、前記注目点表示手段は、前記広角画像の前記表示範囲を変更して前記注目点を表示する際、立体球上の曲線の距離が長い方の経路を経由して前記注目点が含まれる前記範囲を前記表示範囲に表示することを特徴とするプログラムを提供する。
【発明の効果】
【0008】
画像の注目点を閲覧者が閲覧することが可能なプログラムを提供することができる。
【図面の簡単な説明】
【0009】
図1】広角画像の一例として全天球画像について説明する図の一例である。
図2】閲覧システムの概略を説明する図の一例である。
図3】画像表示システムの概略的な構成図の一例である。
図4】画像配信装置の概略的なハードウェア構成を示したブロック図である。
図5】端末装置のハードウェア構成図の一例である。
図6】全天球カメラの使用イメージ図の一例である。
図7】全天球カメラで撮像された画像から全天球画像が作成されるまでの処理の概略を説明する図である。
図8】全天球カメラで撮像された画像から全天球画像が作成されるまでの処理の概略を説明する図である。
図9】閲覧者の視線を説明する図の一例である。
図10】端末装置、広告主Webサーバ、パートナーサイトWebサーバ、画像配信装置、SSP及びDSPの機能をブロック状に示す機能ブロック図の一例である。
図11】注目点決定部が注目点Pを決定する手順を示すフローチャート図の一例である。
図12】全方位画像の部分画像を説明する図の一例である。
図13】画像表示システムが広告として表示される全天球画像を配信する手順を説明するシーケンス図の一例である。
図14】注目点の表示方法の一例を示す図である。
図15】規則(i)~(iv)に基づく注目点Pの決定方法を模式的に説明する図である。
図16】規則(i)~(iv)に基づく注目点Pの決定方法を模式的に説明する図である。
図17】注目点表示部が注目点を表示する手順を示すフローチャート図の一例である。
図18】複数の注目点の表示方法を説明する図の一例である。
図19】注目点を表示させる際の全天球画像6の回転方法を説明する図の一例である。
図20】注目点を表示させる際の全天球画像6の回転方法を説明する図の一例である。
図21】複数の注目点を順番に表示させる注目点の表示方法を説明する図の一例である。
図22】閲覧者の操作による注目点Pの表示方法を説明する図の一例である。
図23】注目点表示部が注目点を表示する手順を示すフローチャート図の一例である。
図24】表示範囲に注目点が入っているか否かの判断を説明する図の一例である。
図25】拡大又は縮小を模式的に説明する図の一例である。
図26】拡大のみのよる注目点の表示方法を説明する図の一例である。
図27】表示範囲の中心から次の注目点への移動速度を説明する図の一例である。
図28】表示パターンに従った各注目点の表示方法の一例を示す図である。
【発明を実施するための形態】
【0010】
以下、本発明を実施するための形態の一例として、画像表示システム及び画像表示システムが行う画像表示方法について図面を参照しながら説明する。
【0011】
<画像表示システムの動作の概略>
図1は、広角画像の一例として全天球画像6について説明する図の一例である。図1(a)は、3次元の立体球CSで表わされた全天球画像6を示し、図1(b)は正距円筒図法で表された全天球画像6を示す。全天球カメラで生成された全天球画像6は図1(b)のような画像が立体球CSに張り合わされた三次元の構造を有している。仮想カメラICは閲覧者の視点に対応し、図1では全天球画像6の中心に視点がある。閲覧者は仮想カメラICを通るX軸、Y軸、Z軸を中心とする3軸の回転を行わせて、全天球画像6の任意の所定領域Tを表示させることができる。この所定領域Tが表示範囲になる。所定領域Tは拡大又は縮小可能であり、全天球画像6のうち表示されている所定領域Tを画角という。
【0012】
図2は、本実施形態の画像表示システムの概略を説明する図である。図2に示すように広告データが端末装置30に送信される。広告データと広告データの配信までの処理については後述されるが、広告データには図2(a)の全天球画像が含まれる。本実施形態の全天球画像は注目点を保持し、好ましくは更に各注目点の画角を保持している。注目点とは、注目すべき表示範囲の中心であるが、具体的には全天球画像を提示する者が見せたい表示範囲、1人以上の閲覧者による注目度が高い表示範囲の中心、又は、画像処理や機械学習等により特定された特徴点である。
(1)端末装置30は広告データを画像配信装置10から受信して、端末装置30で動作するブラウザ8が例えば広告枠7に予め定められた注目点Pを表示する。図2(a)の全天球画像6は3つの注目点P(区別する場合、P-1、P-2…のように表示する)と各注目点Pの画角を保持しているが、図2(b)では注目点P-1が表示されている。
(2)閲覧者は全天球画像を上下左右に回転させたり拡大/縮小させたりして任意の表示範囲を表示させることができる。しかし、閲覧者が注目点Pを含まない表示範囲を端末装置30に表示させてしまう場合がある。閲覧者は試行錯誤的に操作すればいずれかの注目点Pを表示させることもできるがそれが容易でない場合もある。また、全天球画像の提供者にとって、注目点Pを含まない表示範囲を端末装置30が表示したままであることは広告機会の損失になる。例えば、図2の例において、広告データを受信した端末装置30は、注目点P-1を含む画角で画像を表示している。全天球画像を提示する者は、現在表示されている注目点P-1とは異なる注目点である注目点P-2又はP-3を表示させたい。しかし、ユーザが自由に操作可能であるため、図2(b)の(2)では、注目点P-2及びP-3を含まない領域が表示されている。その後、図2(b)の(3)では、注目点P-3が含まれる領域が表示されている。しかし、これでは端末装置30において注目点P-2が表示されない。
(3)そこで、端末装置30は予め決まった規則にしたがって、閲覧者が操作しなくても注目点Pを含むように全天球画像を表示する。すなわち、閲覧者の操作により表示範囲に注目点Pが含まれなくなると、閲覧者が注目点Pを含むように表示範囲を定める操作をしなくても、端末装置30が自動的に注目点Pを表示範囲にすることができる。
【0013】
したがって、本実施形態の画像表示システムによれば、自動的に注目点Pが表示範囲に表示させることができる。これにより、例えば注目点Pを閲覧者の興味を惹きやすい画像が含まれる位置、領域とすることで、閲覧者に対する画像の広告の効果(例えばクリック率)を高めることができる。自動的に注目点Pが表示範囲に表示されるため、閲覧者に対して注目点の画像を表示させるための操作を強いることが不要になり、閲覧者の負担を低減できる。
【0014】
<用語について>
注目点Pとは、全天球画像6のうち特徴的な像(部分)が写っている部分をいう。「点」と称しても1画素に限られるものでなく一部を意味してよい。例えば、注目点Pは閲覧者が興味を示すと推測される部分である。注目点Pは、例えば純粋な画像処理により決定されてもよい(予め用意した画像と同じ画像が表示される位置を画像処理によって特定する等)し、所定の被写体が写っている部分として検出されてもよいし、1人以上の閲覧者が実際に表示した部分から統計的に決定されてもよい。
【0015】
広告の効果とは、少なくとも閲覧者にその画像を注目させることであるが、更に閲覧者がクリック(又はタップ)することを効果と称してもよい。
【0016】
表示範囲を移動する又は変更するとは広告枠7に表示される広角画像の一部の領域が変わることを言い、画像の拡大や縮小なども含まれる。広角画像が全天球画像6の場合、全天球画像が球体なので全天球画像を回転させるともいうことができる。
【0017】
<システム構成例>
図3は、画像表示システム100の概略的な構成図の一例である。画像表示システム100は、ネットワークNを介して通信可能な端末装置30、画像配信装置10、DSP(Demand-Side Platform)20、SSP(Supply Side Platform)50、パートナーサイトWebサーバ60、及び、広告主Webサーバ70を有している。
【0018】
ネットワークNは、端末装置30が設置されている施設などに構築されているLAN、LANをインターネットに接続するプロバイダのプロバイダネットワーク、及び、回線事業者が提供する回線等により構築されている。ネットワークNは複数のLANを有していたり、WANと呼ばれていたりしてもよい。また、ネットワークNにはインターネットが含まれる。ネットワークNは有線又は無線のどちらで構築されてもよく、また、有線と無線が組み合わされていてもよい。また、端末装置30が直接、公衆回線網に接続する場合は、LANを介さずにプロバイダネットワークに接続することができる。
【0019】
端末装置30は、本実施形態においてクライアント端末として動作する情報処理装置である。端末装置30ではブラウザ8又はこれと同等の機能を有するアプリケーションソフトウェアが動作しており、端末装置30が要求したWebページをパートナーサイトWebサーバ60から受信してディスプレイ(後述するディスプレイ315)に表示させる。
【0020】
端末装置30は、例えばPC(Personal Computer)、タブレット装置、スマートフォン、PDA(Personal Digital Assistant)、ゲーム機、ナビゲーション端末、ウェアラブルPCなどであるが、Webページを表示させることができればよい。例えば、プリンターがWebページを表示させる機能やディスプレイを有する場合、プリンターが端末装置30として使用されてもよい。また、デジタルサイネージがWebページを表示させてもよい。デジタルサイネージとは、屋外、店頭、公共空間及び交通機関など、人が通過又は存在しうる場所でディスプレイなどの電子的な表示機器を使って情報を発信するシステム、表示機器又は表示される情報をいう。なお、本実施形態ではWebページにWebアプリが含まれるものとする。Webアプリとは、Webブラウザ上で動作するプログラミング言語(たとえばJavaScript(登録商標))によるプログラムとWebサーバ側のプログラムが協調することによって動作し、Webブラウザ上で使用されるソフトウェア又はその仕組みを言う。
【0021】
端末装置30は、有線LANや無線LANのアクセスポイントを介してネットワークNと接続してもよいし、3G、4GやLTE(Long Term Evolution)といった交換回線型の通信により、ネットワークNに接続してもよい。
【0022】
パートナーサイトWebサーバ60は閲覧者が使用するクライアントコンピュータ(本実施形態の端末装置30)に対しネットワークを通じて情報や機能を提供するサーバ(一般的な情報処理装置)である。広告主Webサーバ70が提供するWebページには広告枠7が設けられている。パートナーサイトWebサーバ60はSSP50に広告枠7への広告の表示を依頼する。
【0023】
広告主Webサーバ70も閲覧者が使用するクライアントコンピュータ(本実施形態の端末装置30)に対しネットワークを通じて情報や機能を提供するサーバ(一般的な情報処理装置)である。閲覧者が広告枠7をクリック(又はタップ)すると端末装置30が広告主Webサーバ70にアクセスする。広告主Webサーバ70は広告主により運営されており、DSP20に自社の製品又はサービスの広告を表示する広告枠7の購入を依頼し、画像配信装置10に広告の生成と広告の表示を依頼している。
【0024】
広告主Webサーバ70及びパートナーサイトWebサーバ60と端末装置30は例えばHTTP又はHTTPsの通信プロトコルを使って通信する。端末装置30からの要求に対し広告主Webサーバ70とパートナーサイトWebサーバ60が画面情報を端末装置30に送信する。画面情報は、HTML、スクリプト言語、及びCSS(cascading style sheet)で記述されたプログラムであり、主にHTMLによりWebページの構造が特定され、スクリプト言語によりWebページの動作が規定され、CSSによりWebページのスタイルが特定される。本実施形態で、閲覧者のWebページに対する操作を全天球画像6に反映させるのはスクリプト言語である。スクリプト言語として、具体的には、JavaScript(登録商標)又はECMAScriptというプログラム言語が知られている。なお、スクリプトとはプログラムの一種であり、ソフトウェアともいう。
【0025】
広告主Webサーバ70及びパートナーサイトWebサーバ60はいずれもクッキー(Cookie)を端末装置30に記録する。広告主Webサーバ70は自社のクッキーとDSP20のクッキーの両方を記録し、パートナーサイトWebサーバ60は自社のクッキーとSSP50のクッキーの両方を記録する。
【0026】
SSP50は、広告枠7を掲載するパートナーサイトWebサーバ60が広告枠7を販売することで収益を最大化するための仕組みである。図では1つの装置のように記載されているが、1台以上の情報処理装置のネットワークである。パートナーサイトWebサーバ60はSSP50に広告枠7の販売を依頼している。具体的には広告枠7にSSP50が発行する広告タグが記載されており、端末装置30がパートナーサイトWebサーバ60のWebページを表示すると広告タグがSSP50に広告の配信を要求する(広告リクエスト)。SSP50はDSP20から広告枠7の入札を受け付け、落札したDSP20にアクセスするための後述するアクセス情報1を端末装置30に送信する。
【0027】
DSP20は広告枠7の買い付け、広告配信等、広告主のために効率的・効果的な広告配信を行う仕組みである。図では1つの装置のように記載されているが、1台以上の情報処理装置のネットワークである。すなわち、DSP20はSSP50から閲覧者の端末装置30が保持するSSPクッキー等を取得して、自分が管理するDSPクッキーとSSPクッキーの対応付情報に基づき閲覧者の属性等を判断する。そして、閲覧者の属性や予算等に基づいて依頼している広告主からの広告の配信設定に基づいて決定した価格でSSP50に入札する。
【0028】
落札したDSP20はアクセス情報1により端末装置30から広告を要求される。DSP20は画像配信装置10に広告リクエストを通知して、画像配信装置10から画像配信装置10に端末装置30が広告データを要求するための後述するアクセス情報2を取得する。なお、広告データは、全天球画像6,全天球画像6を表示させる表示プログラム及び操作履歴を取得する操作履歴プログラムを含む。
【0029】
DSP20はアクセス情報2を端末装置30に送信する。DSP20は契約にしたがって広告主に課金する。画像配信装置10と広告主との間では契約に従った課金が行われる。ただし、広告が表示されただけで課金されるかどうかなどは契約によって異なる。
【0030】
画像配信装置10は、DSP20が買い取った広告枠7に対し閲覧者の属性に最適な広告の素材(全天球画像6)を含む広告データを提供する1台以上の情報処理装置である。画像配信装置10はバナーやテキストなどの入稿素材や広告画像を保持している。広告データは単なるバナー(文字や写真や絵でつくられた画像)の場合もあるし、画像に加えスクリプト言語が含まれる場合がある。本実施形態では、全天球画像6に注目点Pを表示させたり、閲覧者の全天球画像6に対する操作を全天球画像6の表示態様に反映させたりする表示プログラム、及び、全天球画像6に対する操作履歴を記録したりするための操作履歴プログラムが含まれる。いずれもスクリプト言語で記述される。
【0031】
画像配信装置10による広告用の画像の配信を第三者配信という。第三者配信とは、広告主側でキャンペーン全体を管理するために、複数の媒体を横断して広告を配信する仕組みである。第三者配信サーバは広告の配信頻度などのコントロールや広告の効果の計測等を行う。画像配信装置10が第三者配信サーバに相当する。
【0032】
端末装置30がアクセス情報2に基づいて画像配信装置10に広告データを要求すると、画像配信装置10は広告データを端末装置30に送信する。広告データには全天球画像6が含まれており、表示プログラムは全天球画像6の注目点を表示させるように自動的に全天球画像を回転させ、また、拡大したり縮小したりする。また、操作履歴プログラムは画像配信装置10のクッキー(区別するため画像クッキーという)及び画像IDと共に全天球画像6に対する操作履歴を画像配信装置10に送信する。操作履歴は例えば、どの閲覧画角が表示されたか又はクリックされたかという情報である。なお、この操作履歴は注目点Pの決定等に使用される。
【0033】
また、操作履歴プログラムは、後述する表示パターンのパターンIDと共にクリックされた旨を画像配信装置10に送信する。画像配信装置10は1つの全天球画像6に対し複数の表示パターンを定めており、各表示パターンのクリック率を監視することで、クリック率が高い表示パターンのみを配信できるようになる。
【0034】
<ハードウェア構成例>
図4は、画像配信装置10の概略的なハードウェア構成を示したブロック図である。画像配信装置10は、概ねパーソナル・コンピュータ、ワークステーション又はアプライアンス・サーバとして実装することができる。画像配信装置10は、CPU201と、CPU201が使用するデータの高速アクセスを可能とするメモリ202とを備える。CPU201及びメモリ202は、システム・バス203を介して、画像配信装置10の他のデバイス又はドライバ、例えば、グラフィックス・ドライバ204及びネットワーク・デバイス(NIC)205へと接続されている。
【0035】
グラフィックス・ドライバ204は、バスを介してLCD(Liquid Crystal Display)206に接続されて、CPU201による処理結果をモニタする。LCD206にはタッチパネルが一体に配置されていてもよい。この場合、閲覧者は操作手段として指を使って画像配信装置10を操作できる。
【0036】
また、ネットワーク・ドライバ205は、トランスポート層レベル及び物理層レベルで画像配信装置10をネットワークNへと接続して、広告主Webサーバ70又は端末装置30等とのセッションを確立させている。
【0037】
システム・バス203には、更にI/Oバス・ブリッジ207が接続されている。I/Oバス・ブリッジ207の下流側には、PCIなどのI/Oバス208を介して、IDE、ATA、ATAPI、シリアルATA、SCSI、USBなどにより、HDD209などの記憶装置が接続されている。HDD209の代わりに又はHDD209と共にSSD(Solid State Drive)を有していてもよい。
【0038】
HDD209は画像配信装置10の全体を制御するプログラム209pを記憶している。また、I/Oバス208には、USBなどのバスを介して、キーボード及びマウス(ポインティング・デバイスと呼ばれる)などの入力装置210が接続されうる。
【0039】
広告主Webサーバ70、パートナーサイトWebサーバ60、SSP50、及び、DSP20のハードウェア構成図は図4と相違がないか、又は、相違があったとしても本実施形態の説明の上で支障がないものとする。広告主Webサーバ70、パートナーサイトWebサーバ60、DSP20、及び画像配信装置10はクラウドコンピューティングに対応していることが好ましい。クラウドコンピューティングとは、特定ハードウェア資源が意識されずにネットワーク上のリソースが利用される利用形態をいう。この場合、図4に示したハードウェア構成は、1つの筐体に収納されていたり、一まとまりの装置として備えられていたりする必要はなく、広告主Webサーバ70、パートナーサイトWebサーバ60、DSP20、及び画像配信装置10が備えていることが好ましいハード的な要素を示す。
【0040】
図5は、端末装置30のハードウェア構成図の一例を示す。なお、図5では端末装置30としてスマートフォンやタブレット装置が想定された構成になっているが、前述の通り、端末装置30としてスマートフォンやタブレット装置以外の装置が含まれるため、端末装置30のハードウェア構成としてはこれに限られない。
【0041】
端末装置30は、互いにバス310に接続された、CPU301、ROM302、RAM303、フラッシュメモリ304、CMOSセンサ305、加速度・方位センサ306、ジャイロセンサ307、メディアドライブ308、音声入力部311、音声出力部312、通信装置313、GPS受信部314、ディスプレイ315、及び、タッチパネル316を有する。バス310は、これら各部を電気的に接続するためのアドレスバスやデータバス等である。
【0042】
CPU301はフラッシュメモリ304に記憶されているプログラム304pを実行することで端末装置30全体の動作を制御する。ROM302はIPLや基本入出力プログラムを記憶している。RAM303は、CPU301がプログラムを実行する際にワークエリアとして使用される主記憶装置である。フラッシュメモリ304は端末装置30が実行するプログラムや各種のデータを記憶する不揮発性の記憶装置である。プログラム304pは、例えば、オペレーティングシステム、ブラウザ8、広告主Webサーバ70等の画面情報を含んでいる。端末装置30はブラウザ8と画面情報に含まれる表示プログラムと操作履歴プログラムを実行する。
【0043】
CMOSセンサ305は、CPU301の制御にしたがって被写体を撮像し画像データを得る撮像素子である。CMOSセンサ305の代わりにCCDセンサを用いてもよい。加速度・方位センサ306は、地磁気を検知する電子磁気コンパスとしての機能や3軸方向の加速度を測定する機能等を備えている。ジャイロセンサ307は、x軸、y軸又はz軸に対し端末装置30が回転する際の角速度を検出する。それぞれの軸の回転角度はヨー角、ピッチ角、ロール角と呼ばれる。
【0044】
メディアドライブ308は、フラッシュメモリ等の記録メディア309に対するデータの読み出し又は書き込み(記憶)を制御する。メディアドライブ308の制御にしたがって、既に記録されていたデータが読み出され、又は新たにデータが書き込まれて記憶する記録メディア309が着脱自在な構成となっている。
【0045】
音声入力部311は音声を音声信号に変換するマイクである。音声出力部312は、音声信号を音声に変換するスピーカである。通信装置313は、アンテナ313aを利用して無線通信信号により、最寄りの無線局装置と通信を行う。あるいは、通信装置313はLANに接続するLANカードの場合がある。GPS受信部314は、GPS衛星又は屋内GPSとしてのIMES(Indoor MEssaging System)によって端末装置30の位置情報(緯度、経度、及び高度)を検出する。
【0046】
ディスプレイ315はCPU301の制御により全天球画像を表示したり、ユーザが端末装置30を操作するための各種のメニュー、アイコンなどを表示したりする表示装置である。タッチパネル316は、ディスプレイ315上に一体に重畳され指やタッチペン等によるタッチに対しディスプレイ315上におけるタッチ位置(座標)を検出する。
【0047】
<全天球画像について>
図6図9を用いて全天球画像6について説明する。図6は、全天球カメラ9の使用イメージ図である。全天球カメラ9は、図6に示されているように、ユーザが手に持ってユーザの周りの被写体を撮像するために用いられる。全天球カメラ9は、2つの撮像素子の背面同士が対向させられた構造を有しており、それぞれユーザの周りの被写体を撮像することで、2つの半球画像を得る。
【0048】
次に、図7及び図8を用いて、全天球カメラ9で撮像された画像から全天球画像6が作成されるまでの処理の概略を説明する。なお、図7(a)は全天球カメラ9で撮像された半球画像(前側)、図7(b)は全天球カメラ9で撮像された半球画像(後側)、図7(c)は正距円筒図法により表された画像(以下、「正距円筒画像」という)を示した図である。図8(a)は正距円筒画像で球を被う状態を示した概念図、図8(b)は全天球画像6を示した図である。
【0049】
図7(a)に示されているように、全天球カメラ9によって得られた画像は、魚眼レンズによって湾曲した半球画像(前側)となる。また、図7(b)に示されているように、全天球カメラ9によって得られた画像は、魚眼レンズによって湾曲した半球画像(後側)となる。そして、半球画像(前側)と、180度反転された半球画像(後側)とは、全天球カメラ9によって合成され、図7(c)に示されているように、正距円筒画像が作成される。
【0050】
そして、OpenGL ES(Open Graphics Library for Embedded Systems)が利用されることで、図8(a)に示されているように、正距円筒画像が球面を覆うように貼り付けられ、図8(b)に示されているような全天球画像6が作成される。このように、全天球画像6は、正距円筒画像が球の中心を向いた画像として表される。なお、OpenGL ESは、2D(2-Dimensions)及び3D(3-Dimensions)のデータを視覚化するために使用するグラフィックスライブラリである。全天球画像6は、静止画であっても動画であってもよい。
【0051】
画像配信装置10が配信する広告データにはこの全天球画像6が含まれている。全天球画像6は、球面を覆うように貼り付けられた画像であるため湾曲しており、人間が見ると違和感を持ってしまう。そこで、端末装置30は、全天球画像6の一部の所定領域Tを湾曲の少ない平面画像として表示することで、人間に違和感を与えないように表示する。所定領域Tは、三次元の仮想空間における座標(X,Y,Z)によって示される。一方、ディスプレイ315は二次元平面なので所定領域Tのままでは端末装置30が表示できない。そこで、3Dコンピュータグラフィックの技法を用いて三次元の物体を二次元平面に投影する透視投影変換により端末装置30は所定領域Tを表示範囲に変換する。以上のようにして図1に示したように、全天球画像6の所定領域Tが表示範囲としてディスプレイ315に表示される。
【0052】
図9は、閲覧者の視線を説明する図の一例である。全天球画像6は三次元の座標を有しているので、視線方向は三次元の座標又は緯度・経度などの球体の座標を特定する情報で特定される。本実施形態では、所定領域Tの中心cpを視線方向とする。
【0053】
閲覧者は操作により視線方向を変えることができるが、仮想カメラICが平行移動しないと仮定すると、仮想カメラICは剛体としてロール(Z軸を中心とする回転)、ヨー(Y軸を中心とする回転)、及びピッチ(X軸を中心とする回転)の3つの回転が可能である。この3つの回転のいずれが生じても視線方向が変化する。例えば、閲覧者が全天球画像6を水平方向に回転させるとヨー角が変化し、上下方向に回転させるとピッチ角が変化し、ディスプレイ315の中心(視線方向)を軸に全天球画像6を回転させるとロール角が変化する。本実施形態では、閲覧者のWebページに対する操作が、視線方向(ロール角、ヨー角、ピッチ角)等に反映される。どのように反映されるかは表示プログラムに予め記述されているものとする。
【0054】
閲覧者が視線方向を変更する操作はタッチパネルを操作するフリック又はスワイプだけでなく、端末装置30に角速度又は加速度を生じさせるジェスチャー操作によっても可能である。角速度はジャイロセンサ307により加速度は加速度・方位センサ306によりそれぞれ検出される。
【0055】
<機能について>
図10は端末装置30、広告主Webサーバ70、パートナーサイトWebサーバ60、画像配信装置10、SSP50及びDSP20の機能をブロック状に示す機能ブロック図の一例である。
【0056】
<<広告主Webサーバ、パートナーサイトWebサーバ>>
広告主Webサーバ70とパートナーサイトWebサーバ60は、Webページ提供部71を有している。広告主Webサーバ70とパートナーサイトWebサーバ60が有するこれらの各機能は、図4に示したHDD209からメモリ202に展開されたプログラム209pをCPU201が実行することにより実現される機能又は手段である。
【0057】
Webページ提供部71は、端末装置30からのHTTPリクエストを解釈してWebページを構築してHTTPレスポンスとして端末装置30に送信する。処理に必要であればアプリケーションサーバに処理を依頼し、処理結果をWebページに配置して送信する。広告主Webサーバ70のWebページには広告主のクッキーとDSPクッキーが含まれている。広告主Webサーバ70はDSP20に広告の配信を依頼しているためである。これによりリターゲッティング広告等が可能になる。パートナーサイトWebサーバ60のWebページにはパートナーサイトのクッキーとSSPクッキーが含まれている。パートナーサイトWebサーバ60はSSP50に広告枠7の販売を依頼しているためである。
【0058】
<<SSP>>
SSP50は、広告リクエスト部51、広告要求取得部52、アクセス情報送信部53、及び、落札部54を有している。SSP50が有するこれらの各機能は、HDD209からメモリ202に展開されたプログラム209pをCPU201が実行することにより実現される機能又は手段である。
【0059】
広告要求取得部52は、端末装置30が広告枠7に対応づけられた広告タグを実行することでSSPクッキー等を含む広告リクエストを取得する。広告要求取得部52はSSPクッキーが含まれる広告リクエストを広告リクエスト部51に送出する。
【0060】
広告リクエスト部51は、DSP20に対し広告リクエストを送信する。広告リクエストには、SSPクッキー、パートナーサイトWebサーバ60のドメイン、広告枠ID、広告枠サイズ、広告フォーマット、ブラウザ種類、OS種類等が含まれる。
【0061】
落札部54はDSP20から入札を受け付け、基本的に最も高い入札金額のDSP20に広告枠7を販売するオークションを行う(広告主の製品やサービスによっては入札を受け付けない)。落札部54は落札IDを生成してDSP20に通知する。
【0062】
アクセス情報送信部53は落札したDSP20に対し広告を要求するためのアクセス情報1を生成し落札IDと共に端末装置30に送信する。アクセス情報1にはDSP20のURL(IPアドレス)が含まれる。
【0063】
<<DSP>>
DSP20は、リクエスト受付部21、入札判断部22、入札部23、広告要求受付部24、及び、画像依頼部25を有している。DSP20が有するこれらの各機能は、HDD209からメモリ202に展開されたプログラム209pをCPU201が実行することにより実現される機能又は手段である。
【0064】
また、記憶部29には、クッキー情報DB291と配信設定DB292が構築されている。記憶部29は、図4に示したHDD209又はメモリ202により実現される。
【0065】
【表1】
表1はクッキー情報DB291に記憶される情報を模式的に示す。クッキー情報DB291はDSPクッキーとSSPクッキーを対応付けると共に、閲覧者が訪問した訪問ドメインが登録されている。DSPクッキーとSSPクッキーの対応付けはクッキーシンクと呼ばれる技術により可能である。また、訪問ドメインはDSP20がタグ(行動監視タグ)を貼り付けたWebサイトを閲覧者が訪問することで得られる。したがって、DSP20は、SSPクッキーからDSPクッキーを特定でき、更に、この閲覧者がどのようなWebサイトに興味を持っているかを判断できる。
【0066】
【表2】
表2は配信設定DB292に記憶される情報を模式的に示す。配信設定DB292には、広告主ID、画像ID、広告対象属性(好ましい対象者の属性)、及び、非広告対象属性(好ましくない対象者の属性)が登録されている。広告主IDは広角画像を提供する提供元になる広告主を特定又は識別するための識別情報である。画像IDは広告主が提供する広角画像を特定又は識別するための識別情報である。したがって、DSP20は、広角画像の提供元に対し設定されている好ましい対象者の属性又は好ましくない対象者の属性を参照して、広角画像を送信するか否かを決定することができる。
【0067】
なお、IDはIdentificationの略であり識別子や識別情報という意味である。IDは複数の対象から、ある特定の対象を一意的に区別するために用いられる名称、符号、文字列、数値又はこれらのうち1つ以上の組み合わせをいう。以下のIDについても同様である。広告対象属性は広告主が広告を配信したい閲覧者の属性であり、非広告対象属性は広告主が広告を配信したくない閲覧者の属性である。DSP20はクッキー情報DB291等から判断される閲覧者の属性と配信設定DB292の情報を比較して閲覧者の属性を数値化し、入札金額を決定する。なお、入札金額の決定には時間帯、曜日、閲覧者の地域等、各種の情報が考慮されてよい。
【0068】
(DSP20の機能)
リクエスト受付部21はSSP50から広告リクエストを受けつける。リクエスト情報により端末装置30の広告枠ID等の基本的な情報が得られる。入札判断部22はリクエスト受付部21が受けつけた広告リクエストをクッキー情報DB291と配信設定DB292を参照して評価することで入札金額を決定する(入札しない場合もある)。上記のように、SSPクッキーからDSPクッキーを特定し、DSPクッキーに対応付けて蓄積されている属性情報が、配信設定DB292に記憶された広告主の依頼とどの程度一致するかにより入札金額を決定する。
【0069】
入札部23は、決定された入札金額でSSP50に入札する。落札できた場合は落札IDを取得し、広告リクエストと対応付けておく。
【0070】
広告要求受付部24は、アクセス情報1に基づく端末装置30からの広告要求(落札ID、DSPクッキー)を取得する。広告要求受付部24は落札IDにより広告リクエストを特定する。DSPクッキーはなくてもよく、SSPクッキーとDSPクッキーが対応付けられていない場合に使用される。
【0071】
画像依頼部25はDSPクッキー、広告主ID、及びリクエスト内容と共にアクセス情報2を画像配信装置10に対し要求する。広告主IDにより広告主が特定される。リクエスト内容の広告枠IDにより広告枠7が特定される。更に、閲覧者の属性を画像配信装置10に送信してもよい。これにより、画像配信装置10は閲覧者に適した全天球画像6を配信できる。
【0072】
<<端末装置>>
端末装置30は、Webページ取得部31、Webページ解析部32、Webページ表示部33、操作受付部34、及びスクリプト実行部35を有している。端末装置30が有するこれらの各機能は、HDD209からメモリ202に展開されたプログラム209pをCPU201が実行することにより実現される機能又は手段である。
【0073】
操作受付部34は、端末装置30に対する各種の操作を受け付ける。具体的には、端末装置30が実行するブラウザに対する操作を受け付ける。Webページがスクリプト言語で記述されたプログラム(上記のスクリプト)を有得する場合は、スクリプトが動作の契機とするWebページに対する操作を受け付ける。なお、本実施形態では、操作の対象が端末装置30、ブラウザ又はWebページのいずれであるか厳密に区別せず、端末装置30に対する操作、ブラウザに対する操作又はWebページに対する操作は同等の意味を持つ。
【0074】
Webページ取得部31は、閲覧者の操作により又はスクリプトの動作により広告主Webサーバ70及びパートナーサイトWebサーバ60と通信して、広告主Webサーバ70及びパートナーサイトWebサーバ60からWebページを取得する。
【0075】
Webページ解析部32は、画面情報に含まれるHTMLを先頭から順番に読み取りHTMLに含まれる文章や画像データの構造を解析する。また、CSSに記述されたHTMLの文章や画像データとの紐付けを検出して、HTMLに含まれる文章や画像データのスタイルを対応付ける。また、Webページ解析部32は、HTMLからscriptタグを検出してスクリプト言語で記述されているスクリプトを抽出する。Webページ解析部32はHTMLとCSSをWebページ表示部33に送出し、スクリプトをスクリプト実行部35に送出する。
【0076】
Webページ表示部33はHTMLの先頭から解析が終わった順にWebページをディスプレイ315に表示していく。また、Webページに対する操作に応じてWebページを更新する。
【0077】
スクリプト実行部35は、Webページ解析部32が抽出したスクリプトを実行する。スクリプトの具体的な内容はWebページによって様々である。本実施形態ではスクリプトとして、広告枠7に対応付けられた広告タグ、SSP50から取得するアクセス情報1、DSP20から取得するアクセス情報2、画像配信装置10から配信される広告データが検出される。
【0078】
広告枠検出部36は、Webページ取得部31が取得した画面情報に含まれる広告枠7に対応付けられた広告タグを端末装置30が実行して実現される機能である。広告枠検出部36は広告枠7に対応づけられたURLに基づいてSSPクッキーと共に広告リクエストをSSP50に送信する。
【0079】
アクセス情報取得部37は、SSP50からアクセス情報1を取得する。アクセス情報1はスクリプトで記述されている。広告要求部38は、アクセス情報1に含まれるURLに基づいてDSP20にアクセスし落札IDとDSPクッキーと共に広告を要求する。広告要求部38はこの要求に対しアクセス情報2と広告機会IDを取得する。アクセス情報2もスクリプトで記述されている。
【0080】
広告取得部39はアクセス情報2に含まれる画像配信装置10のURLに基づき、広告機会IDを指定して、画像配信装置10に対し広告データを要求する。画像配信装置10は広告データを生成するので、広告取得部39は広告データを取得する。本実施形態の広告データは、全天球画像6、表示パターン、表示プログラム及び操作履歴プログラムを含む。操作履歴プログラムは操作履歴を画像配信装置10に送信させる。表示プログラムは注目点が表示範囲に含まれなくなると又は閲覧者の操作により表示パターンのいずれか1つの注目点Pを表示範囲に含める。注目点が含まれていれば表示パターンが決まっていなくてもよい。また、表示プログラムは全天球画像6への操作を全天球画像6の表示態様に反映させる。操作履歴プログラムと表示プログラムもスクリプト言語で記述されており、スクリプト実行部35により実行される。
【0081】
広告表示部40は、画像配信装置10から取得した広告データを表示する。広告表示部40は主に表示プログラムで実現され、広告枠7に全天球画像6(すなわち広告)を表示する。また、広告の効果を高めるように全天球画像6を表示する。広告表示部40は更に注目点表示部43を有する。注目点表示部43は全天球画像が保持する注目点を表示する。
【0082】
画像配信装置10から広告データを取得することで端末装置30は画像配信装置10の画像クッキーを取得し記憶部49に記憶できる。広告取得部39が画像クッキーを画像配信装置10に送信することで、画像配信装置10ではDSPクッキーと画像クッキーを対応付けることができる。
【0083】
操作履歴記録部41は、主に操作履歴プログラムにより実現され、全天球画像6に対する操作情報を操作履歴として記録する。操作履歴の詳細は画像配信装置10において説明する。操作履歴送信部42は、主に操作履歴プログラムにより実現され、広告枠7に表示された全天球画像6に対する操作履歴を画像クッキー及び画像ID(全天球画像6を識別する)と共に画像配信装置10に送信する。また、クリックされた場合は更に表示パターンとクリック時画角と共にその旨を画像配信装置10に送信する。
【0084】
<<画像配信装置>>
画像配信装置10は、画像情報応答部11、広告配信部12、注目点決定部13、及び、操作履歴取得部14を有している。画像配信装置10が有するこれらの各機能は、HDD209からメモリ202に展開されたプログラム209pをCPU201が実行することにより実現される機能又は手段である。
【0085】
また、画像配信装置10は、図4に示したHDD209又はメモリ202により実現される記憶部19を有している。記憶部19には、配信履歴DB191、操作履歴DB192、クッキー対応DB193、広告画像DB194、及び、パターンDB195が構築されている。
【0086】
【表3】
表3は、操作履歴DB192に記憶される情報を模式的に示す。操作履歴DB192には各閲覧者が全天球画像6に対しどのような操作を行ったのかという履歴が記録されている。操作履歴DB192には画像ID、閲覧時刻、画像クッキー、閲覧画角1~3の各項目、及び、クリック時画角が記録されている。画像IDは全天球画像6を特定するための情報である。画像クッキーは端末装置30を操作する閲覧者又は端末装置30の同一性を判別する情報になる(装置識別情報の一例)。閲覧画角1~3は閲覧者が全天球画像6を閲覧した際の画角である。各閲覧画角1~3には閲覧時間、拡大の有無、拡大した場合は拡大後の画角、及び、縮小の有無、が格納されている。このように、各画像ごとに閲覧者が興味を持ったと考えられる画角が記録される。閲覧画角1~3は、閲覧者が全天球画像6を回転させずに静止した時間が所定時間(例えば1秒)以上の画角である。端末装置30の操作履歴記録部41は静止した時間が上位3つの画角を記録する。1つだけでもよいし4つ以上でもよい。同様に、操作履歴記録部41はそれぞれの閲覧画角1~3で閲覧者が拡大又は縮小したか否かを記録する。画像配信装置10はこのような操作履歴から注目点Pを決定する場合がある。画像IDに画像クッキーが対応付けられているので、リターゲッティング広告が可能になる。
【0087】
【表4】
表4は、広告画像DB194に記憶されている情報を模式的に示す。広告画像DB194には、広告の対象となる全天球画像6に関する情報が登録されている。広告画像DB194には、広告主ID、画像ID、優先度、及び、対象属性が対応付けて登録されている。DSP20により広告主が決定されるので、この広告主が配信したい画像のうち、閲覧者の属性と表4の対象属性の一致度又は優先度の少なくとも一方に基づいて配信する画像が決定される。なお、リターゲッティング広告の場合は、操作履歴DB192で画像クッキーに対応付けられた画像が配信される。
【0088】
【表5】
表5は、クッキー対応DB193に記憶されている情報を模式的に示す。クッキー対応DB193には、DSPクッキーと画像クッキーが対応付けられている。DSPクッキーはDSP20から通知され、画像クッキーは端末装置30から通知される。両者が対応付けられることでDSPクッキーだけで画像配信装置10が閲覧者を判別できるようになる。
【0089】
【表6】
表6は、パターンDB195に登録されている情報を模式的に示す。パターンDB195には全天球画像6の注目点Pを表示させる順番及び画角の組み合わせが登録されている。順番及び画角の組み合わせを表示パターンという。表6では4つの座標1~4が注目点Pである。注目点Pの数は1つの全天球画像6に4つとは限らず3つ以下又は5つ以上でもよい。また、全天球画像6によって様々でよい。表示パターンは座標1~4の表示順を有している。したがって、注目点Pが4つの場合、表示順は4の階乗個(=24)ある。また、各注目点Pの画角が例えば3段階に変更される場合、3の4乗の画角の組み合わせがある。したがって、画角に関して1つの表示順について81通りの組み合わせがある。最終的に1つの全天球画像について24×81の表示パターンがある。クリック回数はこの表示パターンごとに閲覧者がクリックした回数である。クリックは「所定の操作」の一例である。つまり、画像配信装置10は同じ全天球画像6を同じ表示パターンで全天球画像6を複数の端末装置30に表示させ、端末装置30がクリックした旨を記録する。こうすることで、クリック率の低い表示パターンによる配信を徐々に回避できる。なお、クリック回数は閲覧者の属性(性別、年代、家族構成等)ごとに記録することが好適である。これにより、閲覧者の属性に対しクリック回数が多い表示パターンで表示できる。
【0090】
【表7】
表7は、配信履歴DB191に登録されている情報を模式的に示す。配信履歴DB191には画像クッキーに対応付けて配信された全天球画像6の画像IDと表示パターンが登録されている。画像配信装置10が広告データを送信する際に端末装置30に画像クッキーが登録されている場合、画像配信装置10はこの画像クッキーを端末装置30から取得できる。画像配信装置10は同一の閲覧者に同じ全天球画像6の配信を避けたり、同じ全天球画像6を同じ表示パターンで配信することを避けたりすることができる。逆に、リターゲッティング配信することもできる。
【0091】
(画像配信装置10の機能について)
画像情報応答部11はDSP20から取得したDSPクッキー、広告主ID、リクエスト内容(主に広告枠ID)に対し広告機会IDを付与し、アクセス情報2と共にDSP20に返送する。広告機会IDにより端末装置30の広告枠7ごとに広告の配信機会を特定できる。
【0092】
広告配信部12は、端末装置30から広告機会IDと共に広告データを要求されると配信する全天球画像6と表示パターンを決定する。まず、DSP20から取得した広告主IDに対応付けられた全天球画像6を広告画像DB194から決定する。好ましくは閲覧者の属性を考慮する。閲覧者の属性はDSP20から通知されてもよいし、画像配信装置10が画像クッキーに対応付けて蓄積したものでもよい。次に、広告配信部12はパターンDB195を参照して全天球画像6の表示パターンを決定する。例えば、最もクリック回数の多いパターンを決定する、又は、クリック回数が閾値以上のパターンから任意に決定する。パターン決定時も閲覧者の属性が考慮されることが好ましい。
【0093】
操作履歴取得部14は、端末装置30から画像クッキー及び画像IDと共に操作履歴を取得し、操作履歴DB192に設定する。なお、注目点を決定するための操作履歴とクリック回数を更新するための操作履歴(クリックしたこと)の2種類の操作履歴がある。
【0094】
端末装置30の操作履歴記録部41を画像配信装置10が有していてもよい。操作履歴記録部41は時系列的な操作内容を必要とするので、通信帯域などによっては画像配信装置10が取得することが困難になるおそれがある。これに対し、端末装置30の操作履歴記録部41は最終的な操作履歴のみを画像配信装置10に送信すればよいので通信負荷を低減できる。
【0095】
注目点決定部13は、全天球画像6の注目点Pを決定する。各種の注目点Pの決定方法が考えられるが、詳細は後述する。注目点決定部13は決定した注目点Pを使った表示パターンをパターンDB195に登録する。
【0096】
<注目点Pの決定>
<<特徴量から注目点Pを決定する方法>>
図11は、注目点決定部13が注目点Pを決定する手順を示すフローチャート図の一例である。ステップS1において、注目点決定部13は単位球と共通する中心を有する正多面体を定義した上で、各面の法線方向を視線方向として透視投影変換を行って部分画像を得る。図12(a)、全天球画像の投影面として正八面体を定義した例を示し、図12(b)は、全天球画像の投影面として正十二面体を定義した例を示す。
【0097】
ステップS2では、注目点決定部13がステップS1で得た各部分画像から所定の特徴量を抽出する。入力画像を上記の方法で分割し、歪みの少ない部分画像から特徴量を算出するので、180度を超える超広角画像をロバストに処理することが可能になる。特徴量として、色、エッジ、顕著性、物体位置/ラベル、などを用いることができる。
【0098】
続くステップS3では、注目点決定部13が、所定の回帰モデルを用いて、各部分画像から抽出した特徴量から入力画像の位置ごと(画素ごと)に重要度を算出する。詳細は割愛するが、位置ごとの重要度と特徴量を回帰により関数で表す。なお、予め訓練データを用いて出力(教師データ)である重要度gを適切な方法で決定しておき、特徴量と重要度gの関係を求めておく。
【0099】
続くステップS4では、注目点決定部13が重要度の高い方向にユーザの注目点Pが存在するという設計思想の下、ステップS3で算出された重要度の分布に基づいて注目点Pの尤度分布を算出する。例えば、単位画像面上に視点を通過する領域Rを定義した上で、領域R内の各位置の重要度を加算した加算値を視点の注目点尤度として算出することができる。
【0100】
続くステップS5では、注目点決定部13が、注目点尤度分布に基づいて注目点Pを算出する。本実施形態では、例えば、注目点尤度の最尤値に対応する撮像方向に対応する位置を注目点Pとして算出する。
【0101】
このようにして、いくつかの注目点Pが算出できる。注目点決定部13は上位の注目点PのN個のうち、予め決められた数の注目点P、又は、閾値以上の注目点Pを特定する。そして、パターンDB195に、注目点Pの表示順と画角を組み合わせたパターンを登録する。
【0102】
<<人物を注目点Pに決定する>>
人が注目する被写体としては人物が考えられる。人物の検出方法としては、顔認識が知られている。顔認識にはFOG特徴量やHaar-like特徴量を検出してパターンマッチングする公知の方法を利用できる。注目点決定部13は顔の中心を注目点Pとして検出する。顔の数が多い場合は、距離が近い顔を1つと見なして顔の数を決まった数に低減してもよい。
【0103】
<<文字を注目点Pに決定する>>
文字には重要な情報が含まれている可能性がある。文字の検出方法にも機械学習により得られた学習モデルを使用する方法がある。あるいはOCR(Optical Character Reader)により文字を検出してもよい。
【0104】
<<笑顔を注目点Pに決定する>>
人が注目する被写体としては人の笑顔が考えられる。笑顔の検出方法としては、上記の顔認識に加え、予め保持されている笑顔のパターンを用いてパターンマッチングする公知の方法を利用できる。顔の数が多い場合は、笑顔のみを注目点Pとしてもよい。また、笑顔の他、悲しみ、怒り、困惑などの顔を注目点Pに決定してもよい。
【0105】
<<子供を注目点Pに決定する>>
大人の中に子供が存在する場合、人が子供に注目する場合がある。あるいは、この逆に大勢の子供の中に大人が存在する場合、人が大人に注目する場合がある。子供又は大人の検出方法としては、顔の位置を利用できる。上記の顔認識で特定される顔の位置が他の顔の位置より低い場合は子供であると推定され、顔認識で特定される顔の位置が他の顔の位置より高い場合は大人であると推定される。
【0106】
<<操作履歴を利用する>>
操作履歴DBには全天球画像ごとに閲覧画角が登録されている。注目点決定部13は操作履歴DB192の閲覧画角を加工して注目点を決定する。同じ画像IDの全天球画像を抽出し、クリック時画角が閾値以上、重なっている場合には同じ閲覧画角であると見なして重心を算出した上で、数が多い上位4個のクリック時画角を注目点に決定する。4個としたのは一例であって注目点の数に制限はない。
【0107】
<<任意の被写体を注目点Pに決定する>>
広告主が閲覧者に閲覧させたい注目点Pは広告主が把握していると考えられる。したがって、広告主が指定した被写体を注目点決定部13が検出して注目点Pとすることができる。あるいは、自動車、家具、食品等、広告主の製品やサービスをパターン認識により検出して注目点Pとすることもできる。
【0108】
このようにして決定された注目点Pに対し、それぞれ大中小の画角が自動的に決定される。しかしながら注目点Pの決定と共に画角も決定されもよい。
【0109】
<動作手順>
図13は、画像表示システム100が広告として表示される全天球画像6を配信する手順を説明するシーケンス図の一例である。
【0110】
S1:まず、閲覧者はパートナーサイトWebサーバ60と接続するように端末装置30を操作する。端末装置30の操作受付部34は操作を受け付け、Webページ取得部31がWebページを取得する。
【0111】
S2:端末装置30のWebページ解析部32はWebページを解析しHTML、CSS,スクリプトを抽出し、Webページ表示部33がHTMLとCSSに基づいてWebページを表示する。
【0112】
S3:端末装置30の広告枠検出部36は広告枠7に対応付けられた広告タグ(スクリプト)を実行することで広告リクエストをSSP50に送信する。広告リクエストには、例えばSSPクッキー、パートナーサイトWebサーバ60のドメイン、広告枠ID、広告枠サイズ、広告フォーマット、ブラウザ種類、OS種類等が含まれる。
【0113】
S4:SSP50の広告要求取得部52は広告リクエストを取得し、広告リクエスト部51が広告リクエストを受け付ける。広告リクエスト部51はSSPクッキーを検出してDSP20に対し広告リクエストを通知して広告枠7を販売する。
【0114】
S5:DSP20のリクエスト受付部21は広告リクエストを入札判断部22に送出する。DSP20の入札判断部22はクッキー情報DB291を参照してSSPクッキーからDSPクッキーを特定する。
【0115】
S6:入札判断部22はDSPクッキーから属性を判断する。クッキー情報DB291の訪問ドメインを参照してもよいし、適宜、DSPクッキーで特定される閲覧者の属性情報を参照してもよい。
【0116】
S7:入札判断部22は配信設定DB292を参照して広角画像の提供元に対し設定されている好ましい対象者の属性又は好ましくない対象者の属性に基づいて、この閲覧者に広角画像を送信するか否かを決定する。ここでは少なくとも1つの広告主について配信すると決定したものとする。
【0117】
S8:入札判断部22は広告主の予算や属性の一致度等に応じて入札金額を決定する。
【0118】
S9:DSP20の入札部23はSSP50に入札する。SSP50の落札部54は複数のDSP20からの入札に対し原則的に最も高い入札金額を申し入れたDSP20を落札者に決定する。
【0119】
S10:ここでは図示するDSP20が落札したものとする。SSP50は落札IDをDSP20に通知する。
【0120】
S11:SSP50のアクセス情報送信部53は落札IDと共にアクセス情報1を端末装置30に送信する。
【0121】
S12:端末装置30の広告要求部38はアクセス情報1を実行することで落札IDと共に広告要求をDSP20に送信する。
【0122】
S13:DSP20の広告要求受付部24は落札IDにより広告リクエストを特定する。画像依頼部25は広告主ID、DSPクッキー、及び、広告リクエストと共に画像配信装置10に画像を要求する。
【0123】
S14:画像配信装置10の画像情報応答部11は画像要求を受信すると広告リクエストを特定するための広告機会IDを生成する。
【0124】
S15:画像情報応答部11は広告機会IDと対応付けられたアクセス情報2をDSP20に送信する。
【0125】
S16:DSP20の画像依頼部25はアクセス情報2を受信して、広告要求受付部24が端末装置30に送信する。
【0126】
S17:端末装置30の広告取得部39はアクセス情報2に含まれる画像配信装置10のURLに基づいて広告要求(広告機会ID)を送信する。端末装置30が画像クッキーを保持している場合は画像クッキーを送信することができる。
【0127】
S18:画像配信装置10の広告配信部12は広告機会IDにより画像要求を特定する。
【0128】
S19:広告配信部12はDSPクッキーから属性を判断したり、画像クッキーから属性を判断したりする。
【0129】
S20:広告配信部12は広告主IDと属性に基づき全天球画像6を特定する。すなわち、広告画像DB194を参照し全天球画像6に対し設定されている配信の対象者の属性又は優先度に基づいて送信する全天球画像6を決定する。表示パターンはクリック回数が閾値より高いものであるが、全天球画像6の配信数が少ない間は不作為に選択してよい。
【0130】
S21:広告配信部12は全天球画像6、表示パターン、画像ID、画像クッキー、及び、広告枠IDを含む広告データを端末装置30に送信する。全天球画像6には広告主Webサーバ70のURLが対応付けられている。
【0131】
S22:端末装置30の広告取得部39は広告データを取得し、広告表示部40が広告枠7に全天球画像6を表示する。閲覧者が広告枠7をクリックすると操作受付部34が受け付け、Webページ取得部31が広告主Webサーバ70と通信を開始する。
【0132】
<注目点の表示方法>
注目点を表示させるには様々な方法が考えられるため、以下ではその一例を説明する。説明される表示方法は矛盾がない範囲で組み合わせて実施される場合がある。
【0133】
<<閲覧者の操作がなくても注目点を表示>>
図14は、注目点の表示方法の一例を示す図である。図14では説明の便宜上、正距円筒図法の全天球画像6と端末装置30が図示されている。全天球画像は2つの注目点P-1、P-2を有している。端末装置30ではブラウザ8又はこれと同等のアプリケーションが動作しておりブラウザ8が表示したWebページの広告枠7に全天球画像6を表示させる。初期状態で注目点P-1を端末装置30が表示させたが、閲覧者が全天球画像6を回転させたため、端末装置30が表示範囲R1を表示させた。その後、閲覧者が全天球画像6を操作しないと注目点表示部43は注目点P-2を広告枠7の中心にして予め決まった画角(表示パターンとして指示されている)になるように全天球画像6を回転させる。
【0134】
このような制御は、以下のような規則で次に表示する注目点Pを決定することで実現される。
(i) 最も距離が近い注目点P
(ii) 直前に閲覧した注目点P
(iii) 不作為に決定
(iv) 表示パターンで最後に表示した注目点Pの次の注目点P
(v) 表示していない注目点P(このうち最も距離が近い注目点P、表示パターンで表示していない最も表示順の早い注目点P、不作為の注目点P)
(vi) 操作履歴で閲覧の回数が多い注目点P
(i)~(vi)のいずれかが予め広告データに設定されているものとする。あるいは、閲覧者が(i)~(vi)のいずれかを選択してもよい。
【0135】
図15は規則(i)~(iv)に基づく注目点Pの決定方法を模式的に説明する図である。図15では注目点Pがない表示範囲R1を閲覧者が表示させた。(i)の規則の場合、図15(a)に示すように、注目点表示部43は表示範囲R1の中心Xと注目点P-1、P-2との距離L1,L2を算出する。全天球画像は球体なので立体球上の曲線(円弧)が最短距離であるが、球体の中心と表示範囲R1の中心Xを結ぶ直線と球体の中心と注目点P-1(又はP-2)を結ぶ直線との画角が距離と相関するため画角でもよい。そして、距離L1とL2のうち短い方の注目点P-2を広告データが保持する注目点Pごとに決まっている画角で表示する。閲覧者は最も少ない全天球画像6の回転量で注目点Pを見ることができる。
【0136】
(ii)の規則の場合、図15(b)に示すように、注目点表示部43は表示パターンに含まれる注目点Pのうち、表示範囲に入った注目点Pと順番を記録しておく。例えば、注目点P-1が表示済みでかつ直前の注目点Pである場合、注目点表示部43は注目点P-1を注目点Pごとに決まっている画角で表示する。閲覧者は直前の注目点P-1に戻るように見えるため、安心感がある。
【0137】
(iii)の規則の場合、図15(c)に示すように、注目点表示部43は表示パターンに含まれる注目点Pのうち、不作為(ランダム)に次の注目点Pを決定する。次に表示される注目点Pが固定化されないので、閲覧者は様々な注目点Pを楽しんで見ることができる。
【0138】
(iv)の規則の場合、図15(d)に示すように、注目点表示部43は表示パターンに含まれる注目点Pのうち、少なくとも最後に表示範囲に入った注目点Pを記録しておく。例えば、注目点P-1が直前の注目点Pである場合、注目点表示部43は表示パターンを参照して次の注目点Pである注目点P-2を注目点Pごとに決まっている画角で表示する。閲覧者は表示パターンの順番に注目点Pを見ることができる。
【0139】
(v)の規則の場合、図16(a)に示すように、注目点表示部43は全ての注目点Pのうち表示範囲に入った注目点Pを記録しておく。例えば、注目点P-1が表示済みで注目点P-2が非表示の場合、注目点表示部43は注目点P-2を注目点Pごとに決まっている画角で表示する。閲覧者は見ていない注目点Pを自動的に見ることができ、広告主は注目点Pを積極的に閲覧させることができる。
【0140】
(vi)の規則の場合、図16(b)に示すように、広告データには注目点Pごとに閲覧回数が添付されている。注目点表示部43は全ての注目点Pのうち閲覧回数が最も多い注目点Pを表示すると決定する。閲覧者は他の閲覧者がよく見る注目点Pを自動的に見ることができる。閲覧回数は複数の閲覧者により送信された操作履歴DBの閲覧画角又はクリック時画角を合計したものである。
【0141】
また、例えば、(i)(v)(vi)を重み付けして注目点Pに点数を付け、点数の高い注目点Pを表示してもよい。例えば、現在の表示範囲R1の中心との距離を距離が短いほど大きな値に点数化し、表示していない注目点Pに決まった点数を与え、閲覧回数が多いほど大きな値に点数化する。そして、注目点Pごとに点数を合計し、点数が最も大きな注目点Pを表示する。こうすることで注目点表示部43はいくつかのファクターを総合して表示する注目点Pを決定できる。なお、現在の表示範囲R1の中心との距離を、距離が長いほど大きな値に点数化してもよい。こうすることで、全天球画像6の回転中に多くの注目点Pを見せられる可能性がある。
【0142】
また、図15図16の規則の説明では、注目点Pごとに画角が決まっていると説明したが、端末装置30が画角を決定してもよい。1つの画角に決定するのでなく、最小画角から最大画角まで(又はこの逆に)画角を連続的に変更してもよい。
【0143】
図17は、注目点表示部43が注目点Pを表示する手順を示すフローチャート図の一例である。図17では一例として点数化により表示される注目点Pが決定される例を説明する。広告表示部40は画像配信装置10から送信された広告データに含まれる全天球画像6を広告枠に表示する(S10)。閲覧者が全天球画像を操作しない場合は表示パターンに基づいて自動的に全天球画像の注目点Pが次々に表示される。閲覧者が全天球画像を操作した場合は操作が優先される。
【0144】
閲覧者が全天球画像6を操作すると操作受付部34が受け付けて、広告表示部40が操作に応じて全天球画像6を回転させたり拡大/縮小したりして表示する(S20)。
【0145】
注目点表示部43は表示範囲に入った注目点Pを記録しておく(S30)。なお、全天球画像6の全体が入るような大きな表示範囲では全ての注目点Pが表示されたことになるが、閲覧者が各注目点Pを閲覧したとはいえない。このため、表示範囲が閾値以上の場合、注目点表示部43は表示範囲に入った注目点Pを記録しないことが好ましい。
【0146】
広告表示部40は全天球画像6に対する操作が終了した否かを判断する(S40)。つまり、画像表示をさせるための入力が生じていないことにより判断される。この判断は、閲覧者がタッチパネルに触っていないこと、及び、閾値以上の角速度又は加速度が生じていないことにより判断される(例えば、タッチパネルを指等で操作することで画像を操作する場合、タッチパネルに指等が触れている間は操作中と判断し、タッチパネルから指等が離れることで操作が終了したと判断する、また、端末の角速度・加速度に応じて画像表示を変更する場合、角速度・加速度が閾値以上の値を検出している間(つまり端末装置30自体を一定以上回転させたり移動させたりしていることを検出している間)は操作中と判断し、角速度・加速度が閾値以上の値を検出しなくなった(つまり端末装置30自体を一定以上回転させたり移動させたりされなくなったことを検出した)とき、操作が終了したと判断する等)。ステップS40の判断がNoの場合、処理はステップS20に戻る。
【0147】
ステップS40の判断がYesの場合、注目点表示部43は操作の終了から所定時間が経過したか否かを判断する(S50)。これは、閲覧者が操作を終了した直後に全天球画像6を回転させると、閲覧者の次の操作を阻害するおそれがあるためである。例えば、指等を用いて画像を大きく回転させる場合、画面の一端から画面の他端まで指等を移動させて回転させ、それ以上の回転をさせたい場合、画面の他端から指等を一度離し、再度画面の一端に指を置いて画面の一端から画面の他端まで指等を移動させて回転させる必要がある。しかし、画面の他端から指等を離した瞬間に注目点への移動を実行すると、ユーザが再度画面の一端に指等を置くことができず、ユーザが所望の操作を実行できない場合がある。その為、ステップS40で操作終了を検知した後、所定時間が経過したかを判断させることで、閲覧者の操作を阻害することを防ぐことができる。操作なく所定時間が経過することは「所定の契機」の一例である。なお、「所定の契機」の他の例として、例えば端末装置30の画面上の全天球画像6の表示領域以外の領域に対して操作がされたことを検知したとき等が挙げられる。また、ステップS50を省略しステップS40で操作終了と判断したことを「所定の契機」として判断しても良い。ステップS50の判断がNoの場合、処理はステップS20に戻る。
【0148】
ステップS50の判断がYesの場合、注目点表示部43は注目点Pが表示範囲に入っているか否かを判断する(S60)。ステップS60の判断がYesの場合、注目点Pがすでに表示範囲に入っているので処理はステップS90に進む。
【0149】
ステップS60の判断がNoの場合、注目点表示部43は注目点Pを決定するために注目点Pを点数化する(S70)。
【0150】
そして、注目点表示部43は最も点数が高い注目点Pを表示する(S80)。
【0151】
注目点Pを一定時間表示すると注目点表示部43は表示パターンに基づく全天球画像6の回転を開始する(S90)。これにより、全天球画像に連続的な動きがもたらされ、閲覧者の注意を喚起できる。表示パターンに基づく注目点の表示は繰り返し行われてもよいし、決まった回数だけ繰り返されてもよい。また、全天球画像6の回転を開始しなくてもよい。
【0152】
なお、図17では点数により表示される注目点Pを決定したが、(i)~(iv)のいずれかで注目点Pを決定する場合も同様の手順で可能である。その場合、ステップS70~ステップS80の処理が決定方法によって変わる。
【0153】
このように、本実施形態の画像表示システム100は、自動的に注目点Pが表示範囲に表示されるため、広告の効果(例えばクリック率)を高めることができ、閲覧者の操作の負担を低減できる。
【0154】
<<複数の注目点Pを表示範囲に含める場合>>
図18は、複数の注目点Pの表示方法を説明する図の一例である。図18(a)の現在の表示範囲R1には注目点Pが含まれていない。注目点Pは合計で3つあるが、注目点P-2とP-3の距離が短いため1つの表示範囲に含めてしまえば、閲覧者は同時に2つの注目点P-2とP-3を閲覧できる。そこで、注目点表示部43は表示範囲に表示する注目点Pを決定するにあたり、注目点P同士の距離を算出する。そして、距離が閾値未満の2つの注目点Pがある場合は1つの注目点Pと見なす。図18(a)では注目点P-2とP-3が1つの注目点Pと見なされる。
【0155】
図18(b)に示すように、注目点表示部43は2つの注目点P-2とP-3の重心Gを算出し、重心Gを表示範囲の中心に決定する。表示範囲R2は注目点P-2とP-3に添付されている画角の例えば外接矩形のように決定してもよいし、注目点P-2とP-3の外側に若干の余裕を見た値でもよい。
【0156】
3つ以上の注目点Pについても同様である。図18(c)では、注目点P-2と注目点P-3の距離が閾値未満であり、注目点P-3から閾値未満の距離に注目点P-4がある(注目点P-2との距離は閾値以上)。このため、注目点P-2~P-4の重心Gを算出して重心Gを表示範囲の中心に決定する。
【0157】
<<注目点Pを表示させる際の回転方法について>>
図19は、注目点Pを表示させる際の全天球画像6の回転方法を説明する図の一例である。図19(a)では、注目点表示部43が現在の表示範囲R1の中心Xを注目点P-2まで回転させるものとする。まず、最も移動量が少なくなるように最短距離を回転する回転方法がある。注目点表示部43は全天球の中心と表示範囲R1の中心Xを結ぶ直線、全天球の中心と注目点P-2を結ぶ直線の画角を算出するが、図19(b)に示すように全天球画像6は球体であるため180度未満と180度以上の2つの画角α1とα2が得られる。画角α1=α2でない限り、一方は180度未満である。図19(c)に示すように、注目点表示部43は180度未満の画角となる円弧の経路を経由して全天球画像6を回転させる。
【0158】
一方、図19(d)に示すように、注目点表示部43は180度以上の画角となる円弧の経路を経由して全天球画像6を回転させてもよい。つまり、全天球画像6の回転量を意図的に多くする。こうすることで、閲覧者に全天球画像6のより多くの部分を閲覧させることができる。
【0159】
更に、図19(e)に示すように、360度以上、全天球画像6を回転させる経路を経由してから注目点P-2を表示させてもよい。こうすることで、注目点P-2が2回表示されるので、閲覧者はほぼ全体を閲覧したことを確認した上で注目点P-2をゆっくりと閲覧できる。これらのように最短となる経路以外の経路を移動して注目点P2を表示してもよい。
【0160】
また、注目点表示部43は直線的に全天球画像6を回転させる必要はなく、上下方向に蛇行させながら回転してもよい。図20(a)は視線方向が蛇行した回転方法の一例を示す。この場合も、閲覧者に全天球画像6のより多くの部分を閲覧させることができるし、動きが複雑になるため閲覧者の注目を集めやすくなる。
【0161】
更に、図20(b)に示すように、視線方向を軸にして表示範囲R1を回転させながら注目点P-2の方向に水平に回転させてもよい。図20(b)では表示範囲R1が半時計方向に回転している。1234の数字は回転を説明するための数字で符号ではない。表示範囲R1が半時計方向に回転しながら水平方向にも回転して注目点P-2を表示範囲の中心に表示する。こうすることで注目点P-2が表示されるまでの画像の変化が大きくなり、閲覧者の注目を集めやすくなる。
【0162】
なお、回転方向は時計回りでもよい。また、移動しながら回転するのでなく、注目点表示部43が表示範囲R2を表示した後に回転させてもよい。また、図20(a)(b)の移動方法を図19に適用することもできる。
【0163】
<<複数の注目点を表示させる方法>>
図21は複数の注目点Pを順番に表示させる注目点Pの表示方法を説明する図の一例である。注目点PはP-1~P-3の3つである。例えば、上記(i)~(xi)の規則又は点数化により、注目点表示部43が現在の表示範囲R1の中心Xを注目点P-3まで回転させると決定した。この場合、図21(a)に示すように、注目点P-3まで直接、回転させるのではなく、他の注目点P-2を表示させてから、注目点P-3を表示させる。これにより、最も表示させるべき注目点P-3を表示することができるだけでなく、注目点P-2をも表示させることができ、閲覧者に多くの注目点Pを閲覧させることができる。注目点P-1を辿ってから注目点P-2、P-3に移動してもよいし、更に多くの注目点Pを辿ってから注目点P-3を表示させてもよい。
【0164】
更に、図21(b)に示すように全天球画像6に添付される表示パターンを利用してもよい。図21(b)では注目点P-1→P-2→P-3の表示パターンが全天球画像6に添付されている。現在の表示範囲R1に注目点Pが含まれていない場合、注目点表示部43は表示パターンにしたがって、注目点P-1→P-2→P-3の順番に表示する。現在の表示範囲R1の中心Xに最も近い注目点又は点数の高い注目点(例えば注目点P-2)から注目点P-3だけを表示してもよい。これにより、全ての注目点Pを表示させることができ、閲覧者に多くの注目点Pを閲覧させることができる。
【0165】
また、端末装置30が注目点Pの順番を不作為に決定して複数の注目点Pを次々に表示してもよい。
【0166】
<閲覧者の操作により注目点Pを表示させる>
表示範囲R1に注目点Pが含まれない場合に自動的に注目点Pが表示される他に、閲覧者の操作により注目点Pが表示されてもよい。
【0167】
図22は、閲覧者の操作による注目点Pの表示方法を説明する図の一例である。端末装置30が広告データを受信した直後に注目点P-1を表示した。閲覧者が操作により全天球画像6を回転、拡大/縮小することで表示範囲R1を表示させた。この状態で閲覧者が全天球画像6を右方向にフリック又はスワイプすると操作受付部34が操作を受け付け、注目点表示部43が右方向にある注目点P-2を表示する。表示範囲R1の中心Xと注目点P-2が同じ高さ(緯度)にあるとは限らないので、注目点表示部43はフリック又はスワイプした方向である経度方向にある注目点Pを表示する。したがって、経度方向だけでなく緯度方向に全天球画像6が回転してよい。閲覧者が上又は下方向にフリック又はスワイプした場合、緯度と経度の関係が逆になる。また、斜め方向にフリック又はスワイプした場合は、フリック又はスワイプした方向の水平成分と垂直成分の大きい方にフリック又はスワイプされたと操作受付部34が判断する。
【0168】
図22のような注目点Pの表示方法はジェスチャーによる操作401によっても可能である。閲覧者が右方向に端末装置30を振るか移動させる操作を行う。振る操作は端末装置30の垂直方向の軸を中心に回転させるためジャイロセンサがこれを検出でき、移動させる操作は右方向への加速度が生じるため加速度・方位センサ306がこれを検出できる。操作受付部34がジェスチャーによる操作401を受け付け、注目点表示部43が右方向にある注目点P-2を表示する。
【0169】
ジェスチャーによる操作401の場合、閲覧者は指を使う必要がないため、端末装置30を保持する片手だけで次の注目点Pを表示できるというメリットがある。なお、上又は下方向に端末装置30が振られるか又は移動させられた場合の処理はフリック又はスワイプと同様である。
【0170】
閲覧者の操作による注目点Pの表示方法は、表示範囲R1に注目点Pが表示されていない場合だけでなく、表示範囲に注目点Pが表示されている場合に行われてよい。この場合、閲覧者が端末装置30を振るか又は移動させるという簡単な操作で注目点Pを次々に表示させることができ、閲覧者が全ての注目点Pを容易に閲覧できる。
【0171】
図23は、注目点表示部43が注目点Pを表示する手順を示すフローチャート図の一例である。広告表示部40は画像配信装置10から送信された広告データに含まれる全天球画像6を広告枠に表示する(S10)。
【0172】
操作受付部34は別の注目点Pを表示させる操作を受け付けたか否かを判断する(S110)。表示範囲に注目点Pが表示されていても表示されていなくてもよい。別の注目点Pを表示させる操作は上記のようにある方向にフリック若しくはスワイプさせる操作、又は、角速度若しくは加速度が生じる操作であり、予め定められている。閲覧者の操作は「所定の契機」の一例である。
【0173】
ステップS110の操作がNoの場合、処理はステップS110に戻り操作受付部34が操作を待ち受ける。
【0174】
ステップS110の操作がYesの場合、注目点表示部43は操作された方向の注目点Pを表示する(S120)。
【0175】
このように、本実施形態の画像表示システム100では閲覧者が注目点Pを探さなくても簡単な操作で注目点Pを表示させることができる。
【0176】
<表示範囲に注目点が含まれているか否かの判断>
図24は表示範囲R1に注目点Pが入っているか否かの判断を説明する図の一例である。図24(a)では明らかに表示範囲R1に注目点Pが含まれていない。これは表示範囲R1の4つの頂点の座標と注目点Pの座標を比較することで容易に判断される。
【0177】
図24(b)では現在の表示範囲R1の端部に注目点P-2が含まれている。注目点P-2は点であるが画像としては広がりを持っているため、表示範囲R1には注目点P-2で示される注目すべき要素の一部しか表示されていない。このような場合は、注目点P-2の注目すべき要素(全体)を表示することで広告の訴求力が増すと考えられる。このため、注目点表示部43は図24(b)のように表示範囲R1の端部に注目点P-2が含まれている場合、表示範囲R1に注目点P-2が含まれていないと判断してよい。これにより、注目点Pの全体を閲覧させることができる。
【0178】
注目点表示部43は表示範囲R1の端部の座標と注目点P-2の座標を比較して、差(画角)が閾値未満の場合は、表示範囲R1に注目点P-2が含まれていても含まれていないと判断する。なお、このような判断方法は一例であって、表示範囲R1に注目点P-2が含まれている場合は単純に含まれていると判断してもよい。
【0179】
<拡大と縮小>
本実施形態では各注目点Pに画角が添付されていることを利用して、この画角で次の注目点Pを表示する。このため、現在の表示範囲R1と次に表示される注目点Pの画角が異なる場合は、広告枠の全天球画像6は拡大又は縮小されることになる。
【0180】
図25は、拡大又は縮小を模式的に説明する図の一例である。図25(a)は表示範囲R1の移動と並行に拡大を行う表示方法を示し、図25(b)は表示範囲の移動の後に拡大を行う表示方法を示す。表示範囲R1から表示範囲R2へ移動で画角が小さくなっているので図25は画像の拡大を意味する。画像の縮小の場合も同様になる。
【0181】
図25(a)の表示方法について説明する。注目点表示部43は、現在の表示範囲R1の4つの頂点S1~S4を特定している。注目点P-2の画角の4つの頂点Q1~Q4の座標は注目点P-2の座標と画角から算出可能である(あるいは予め決まっていてよい)。したがって、S1とQ1、S2とQ2、S3とQ3、及び、S4とQ4を接続する立体球上(全天球の球面上)の曲線をいくつかに分割(補間)して各分割点の座標と画角で端末装置30が全天球画像6を表示する。こうすることで、全天球画像6の表示範囲R1から注目点P2の画角に滑らかに移動しながら縮小し、注目点Pを決まった画角で表示できる。
【0182】
図25(b)の表示方法について説明する。注目点表示部43は表示範囲R1の中心Xと注目点P-2を結ぶ立体球上の曲線をいくつかに分割(補間)して各分割点で現在の画角(一定)で画像を表示する。これにより、注目点P-2の画角が表示範囲R1と同じ場合の4つの頂点S1´~S4´が表示範囲R3になる。注目点P-2の本来の画角による4つの頂点Q1~Q4の座標は算出可能である(あるいは予め決まっていてよい)。
【0183】
注目点表示部43は、S1´とQ1、S2´とQ2、S3´とQ3、及び、S4´とQ4を接続する立体球上の曲線をいくつかに分割して各分割点の画角で画像を表示する。こうすることで、全天球画像6の表示範囲R1から表示範囲R3に滑らかに移動し、その後、表示範囲R2に画角が縮小されるので全天球画像6を拡大して表示できる。
【0184】
どちらの表示方法で表示するかは広告の訴求力が高い方でよく、予め画像配信装置10に設定されているものとする。あるいは、2つの表示方法を表示パターンの1種としてクリック回数をカウントし、クリック回数が高い方を採用してもよい。
【0185】
<注目点の表示方法の変形例>
表示範囲R1に表示されていない注目点Pは、全天球画像6の回転により表示されると説明した。また、回転しながら拡大又は縮小されてもよいし、回転後に拡大又は縮小されてもよいと説明した。この他、注目点表示部43は拡大のみにより表示範囲R1に表示されていない注目点Pを表示してもよい。
【0186】
図26は、拡大のみのよる注目点Pの表示方法を説明する図の一例である。図26(a)では表示範囲R1に注目点Pが表示されていない。しかし、注目点表示部43は表示範囲R1の中心を移動することなく画角を大きくすることで表示範囲R2に注目点Pを含めることができる。
【0187】
図26(b)は表示範囲R1の中心を移動することなく画角が拡大されることで表示される表示範囲R2を示す。画角の拡大により表示範囲R2には注目点P2が含まれている。このように、画角の拡大のみによっても注目点Pを表示することが可能である。なお、画角が拡大されることは、広告枠の全天球画像6が縮小されることを意味する。
【0188】
どこまで画角を拡大するかについては、表示範囲R1の中心から最も近い注目点P-2が含まれるまで、又は、注目点P-2の画角の全体が含まれるまでのいずれでもよい。図26(c)は注目点P-2の画角の全体が含まれるまで拡大された表示範囲R2を示す。
【0189】
図26(d)は全天球画像6の全体が含まれる表示範囲R2の一例を示す。このような表示方法をリトルプラネットという。リトルプラネットは全天球画像6に特有の表示形態であり、訴求力が高いといえる。
【0190】
<移動速度について>
図27は、表示範囲R1の中心から次の注目点P-2への移動速度を説明する図の一例である。図27(a)は端末装置30が表示範囲R1の中心から注目点P-2へ一定速度で全天球画像6を回転させる際の移動速度を示す。この移動速度では最も高速に次の注目点Pを表示させることができる。
【0191】
図27(b)は移動開始点の表示範囲R1の中心から徐々に移動速度が速くなり、その後、一定になり、次の注目点P-2の手前で徐々に移動速度が遅くなる移動方法を示す。急激な移動が回避されるので閲覧者が見やすいというメリットがある。
【0192】
図27(c)は移動開始点の表示範囲R1の中心から注目点P-2での停止まで徐々に移動速度が速くなる移動方法を示す。移動開始時に急激な移動を回避できる。
【0193】
図27(d)は移動開始点の表示範囲R1の中心から注目点P-2での停止まで徐々に移動速度が遅くなる移動方法を示す。注目点P-2の手前で徐々に移動速度が遅くなるので、閲覧者は次の注目点Pを長時間閲覧できる。
【0194】
全天球画像6がどの方法で回転するかは広告の訴求力が高い方法が採用されるものとして、予め画像配信装置10に設定されているものとする。あるいは、これらの移動方法を表示パターンの1つとしてクリック回数をカウントし、クリック回数が高い方を採用してもよい。
【0195】
<注目点Pを表示範囲R2で表示後について>
以上のように、種々の方法で注目点Pを表示させることができる。注目点表示部43が注目点Pを表示させた後は、上記のように表示パターンにしたがって自動的に各注目点Pを表示させることができる。
【0196】
図28は、表示パターンに従った各注目点Pの表示方法の一例を示す。図28に示すように全天球画像が保持する表示パターンは注目点P-1→P-2→P-3→P-4である。閲覧者の操作がなくても自動的に注目点Pを表示させる場合、表示範囲R1の中心Xとの距離又は点数化等により注目点P-2が決定されたとする(最初の注目点P-1が決定されてもよい)。注目点表示部43は注目点P-2を所定時間、静止して表示させた後、表示させた注目点P-2の次の注目点Pを表示パターンから決定して、表示させる。表示パターンの全ての注目点Pを表示させることができる。以降は、表示パターンにしたがって、繰り返し注目点Pを表示する。
【0197】
また、閲覧者の操作により注目点Pを表示させた場合も、操作により決定された注目点Pから後は表示パターンにしたがって注目点Pを次々に表示できる。
【0198】
閲覧者の操作がない場合、又は、閲覧者の操作により注目点Pを表示させる場合のいずれでも、表示パターンに基づく注目点Pの表示中に閲覧者の操作が検出された場合、注目点表示部43は表示パターンに基づく注目点Pの表示を中止する。この場合、次の注目点Pを表示するために全天球画像6を回転中であれば、次の注目点Pを表示してよい。あるいは、注目点Pが表示範囲に含まれなくても操作が検出された時の画角で回転を中止してよい。
【0199】
なお、図28のような表示方法は表示パターンに基づく必要はなく、不作為に注目点Pを表示してもよいし、閲覧者が表示パターンを決定してもよい。
【0200】
<動画の場合>
本実施形態の画像表示システムでは静止画に動きをもたらすことができるため、静止画を動画のように表示することができる。一見すると動画なのか静止画なのか分からない。したがって、少ない通信負荷で動画のような演出が可能になる。
【0201】
一方、動画の全天球画像6が配信される場合も少なくない。動画とは撮像時刻が異なるフレームを有する画像である。動画の場合、撮像位置がほとんど動かない場合(被写体も動かない)と撮像位置か被写体の少なくとも一方が動く場合がある。撮像位置も被写体も動かない場合、注目点Pの位置も移動しないので、静止画の場合と同様になる。すなわち、撮像時刻が異なるフレームから注目点Pを表示すればよい。
【0202】
撮像位置又は被写体の少なくとも一方が時間と共に変化する動画の場合、撮像時刻が異なるフレームからそれぞれ注目点Pが抽出されるため、端末装置30はより多くの数の注目点Pを表示できる。したがって、動画のフレームから注目すべき注目点Pをピンポイントで閲覧者に閲覧させることができる。
【0203】
<まとめ>
以上説明したように本実施形態の画像表示システムは、自動的に注目点Pが表示範囲に表示されるため、広告の効果(例えばクリック率)を高めることができ、閲覧者の操作の負担を低減できる。また、閲覧者は簡単な操作で注目点Pを表示範囲に表示できる。また、静止画でありながら動画のように表示することができる。また、上記実施形態の画像表示システムでは、注目点の位置をポップアップのように画像上に表示しないので、表示させる画像をそのまま表示させることができる。
【0204】
<その他の適用例>
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
【0205】
例えば、本実施形態では、広告枠7に全天球画像が表示される例を説明したが、全天球画像は広告として表示されなくてもよい。任意のWebページで表示される全天球画像6について自動的又は閲覧者の操作に対し注目点Pを表示することができる。例えば、SNS(Social Network Service)で表示される全天球画像6にも適用できる。また、デジタルサイネージで表示される全天球画像6にも適用できる。また、情報処理装置だけでなくテレビ受像器が表示する全天球画像6にも適用できる。その為、画像を提供するユーザは広告主ではなく、個人ユーザが自身の撮像した全天球画像を提供してもよい。
【0206】
また、本実施形態では全天球画像が広告に利用される例を説明したが、全天球画像が広告に利用されるものである必要はない。
【0207】
また、全天球画像を表示する端末装置30のアプリケーションはブラウザ8に限られず、任意のアプリケーションソフトウェアが全天球画像を表示する際も自動的又は閲覧者の操作に対し注目点Pを表示させることができる。
【0208】
また、注目点Pは予め決定されている他、配信先の端末装置30が全ての注目点Pを検出してもよいし、予め決定されている注目点Pに検出した注目点Pを追加してもよい。
【0209】
また、図13にて説明したように、本実施形態では端末装置30がDSP20にアクセスし、次に、画像配信装置10にアクセスして広告データを取得している。しかし、DSP20が画像配信装置10から直接、広告データを取得して端末装置30に送信してもよい。端末装置30はDSP20にアクセスするだけで広告データを取得できるため、広告が表示されるまでの時間を短縮できる。
【0210】
また、DSP20と画像配信装置10が一体に構成されており、DSP20が広告データ(全天球画像)を端末装置30に配信してもよい。
【0211】
また、広告配信部12はクリック回数でなくクリック率により表示パターンを評価してもよい。あるいは、「いいねボタン」などの押下回数など評価可能な指標で評価してもよい。
【0212】
また、本実施形態で説明されたSSP50,DSP20及び画像配信装置10が連携する広告の配信方法は一例に過ぎず、端末装置30が広告を表示するまでのプロセスを制限する意図はない。例えば、単純なプロセスとして、パートナーサイトWebサーバ60が広告主からの広告データを預かっておき、端末装置30に配信してもよい。この場合、SSP50、DSP20及び画像配信装置10はなくてよい。
【0213】
また、本実施形態では、全天球カメラの周囲の360度が撮像可能な全天球画像がWebページに配置されるとして説明したが、Webページの画像データは広角画像であればよい。本実施形態の広角画像は、広告枠に表示しきれない部分を有する画像をいう。例えば、水平方向にだけ180度以上の画角を有する広角画像でもよい。また、一般にパノラマ画像と呼ばれる画像も含まれる。
【0214】
また、全天球画像は2つの画像が張り合わされる方法で作成される場合に限られず、例えば、撮像方向を少しずつ移動しながら撮像した画像データの重複部分を重ね合わせて作成してもよい。すなわち、全天球画像の作成方法は制限されない。
【0215】
また、以上の実施例で示した図10などの構成例は、画像表示システム100の処理の理解を容易にするために、主な機能に応じて分割したものである。しかし、各処理単位の分割の仕方や名称によって本願発明が制限されることはない。画像表示システム100は、処理内容に応じて更に多くの処理単位に分割することもできる。また、1つの処理単位が更に多くの処理を含むように分割することもできる。
【0216】
なお、注目点表示部43は注目点表示手段の一例であり、操作受付部34は操作受付手段の一例であり、広告表示部40は画像表示手段の一例である。画像配信装置10は第二の情報処理装置の一例である。
【符号の説明】
【0217】
7 広告枠
10 画像配信装置
20 DSP
30 端末装置
40 広告表示部
50 SSP
60 パートナーサイトWebサーバ
70 広告主Webサーバ
100 画像表示システム
【先行技術文献】
【特許文献】
【0218】
【文献】特開2008-192115号公報
図1
図2
図3
図4
図5
図6
図7
図8
図9
図10
図11
図12
図13
図14
図15
図16
図17
図18
図19
図20
図21
図22
図23
図24
図25
図26
図27
図28