特許 5683756 多視点動画配置システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】5683756

(24)【登録日】2015年1月23日

(45)【発行日】2015年3月11日

(54)【発明の名称】多視点動画配置システム

(51)【国際特許分類】

   H04N 21/2665 20110101AFI20150219BHJP

   H04N 21/258 20110101ALI20150219BHJP

   H04N 21/2187 20110101ALI20150219BHJP

【ＦＩ】

   H04N21/2665

   H04N21/258

   H04N21/2187

【請求項の数】40

【全頁数】27

(21)【出願番号】特願2014-534692(P2014-534692)

(86)(22)【出願日】2014年2月27日

(86)【国際出願番号】JP2014001050

【審査請求日】2014年7月17日

(31)【優先権主張番号】特願2013-206388(P2013-206388)

(32)【優先日】2013年10月1日

(33)【優先権主張国】JP

【早期審査対象出願】

(73)【特許権者】

【識別番号】000151092

【氏名又は名称】株式会社電通

(73)【特許権者】

【識別番号】397073201

【氏名又は名称】株式会社電通国際情報サービス

(74)【代理人】

【識別番号】100092956

【弁理士】

【氏名又は名称】古谷 栄男

(74)【代理人】

【識別番号】100101018

【弁理士】

【氏名又は名称】松下 正

(72)【発明者】

【氏名】志村 彰洋

(72)【発明者】

【氏名】奥出 真弓

【審査官】 古川 哲也

(56)【参考文献】

【文献】 特開２００３−１７９９０８（ＪＰ，Ａ）

【文献】 特開２００３−０１８５８３（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ２１／００ − ２１／８５８

(57)【特許請求の範囲】

【請求項1】

Ａ）下記を備えた配信コンピュータ、
a1)同一対象に対する多視点動画を個別動画として、これを複数組み合わせて1画面に配置した多視点動画データを配信する配信手段、
a2)配信した多視点動画についての視聴行動履歴を受信するユーザ別視聴行動履歴受信手段、
a3)前記受信したユーザ別視聴行動履歴をユーザ別に記憶するユーザ別視聴行動履歴記憶手段、
Ｂ）下記を備えた端末コンピュータ、
b1)前記多視点動画データを前記配信コンピュータから受信する受信手段、
b2)前記多視点動画データを再生する再生手段、
b3)前記再生した多視点動画データに関する視聴行動履歴を前記配信コンピュータに送信する視聴行動履歴送信手段、
を備えた多視点動画配信システムであって、
Ｃ）前記配信手段は、あるユーザに対して多視点動画データを配信する場合に、前記ユーザ別視聴行動履歴記憶手段に記憶された他のユーザの視聴行動履歴を参照して、前記多視点動画データの画面配置を変更した多視点動画データを配信すること、
を特徴とする多視点動画配信システム。

【請求項2】

請求項１の多視点動画配信システムにおいて、
前記視聴行動履歴は、画面配置傾向であること、
を特徴とする多視点動画配信システム。

【請求項3】

請求項２の多視点動画配信システムにおいて、
前記多視点動画データは、前記個別動画を少なくとも１のメイン画面と少なくとも１のサブ画面から構成されており、
前記配信手段は、前記複数の個別動画のうち、当初メイン画面で表示されていたものが、サブ画面に切り換えられた切り換え率に基づいて、前記多視点動画データの画面配置を変更する多視点動画データを配信すること、
を特徴とする多視点動画配信システム。

【請求項4】

請求項２の多視点動画配信システムにおいて、
前記多視点動画データは、前記個別動画を少なくとも１のメイン画面と少なくとも１のサブ画面から構成されており、
前記配信手段は、前記複数の個別動画のうち、当初サブ画面で表示されていたものが、メイン画面に切り換えられた切り換え率に基づいて、前記多視点動画データの画面配置を変更する多視点動画データを配信すること、
を特徴とする多視点動画配信システム。

【請求項5】

請求項２の多視点動画配信システムにおいて、
前記多視点動画データは、メイン画面と前記メイン画面よりも表示領域の小さなサブ画面から構成されており、
前記配信手段は、前記複数の個別動画のうち、再生時に変更された個別動画の表示割合に基づいて、前記多視点動画データの画面配置を変更する多視点動画データを配信すること、
を特徴とする多視点動画配信システム。

【請求項6】

請求項１の多視点動画配信システムにおいて、
前記視聴行動履歴は、前記他のユーザが再生時にしたその個別動画への評価であること、
を特徴とする多視点動画配信システム。

【請求項7】

請求項１の多視点動画配信システムにおいて、
前記配信手段は、ユーザ属性が類似のユーザ群に属するユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を変更した多視点動画データを配信すること、
を特徴とする多視点動画配信システム。

【請求項8】

請求項７の多視点動画配信システムにおいて、
前記ユーザ属性は、ユーザの静的属性であること、
を特徴とする多視点動画配信システム。

【請求項9】

請求項７の多視点動画配信システムにおいて、
前記ユーザ属性は、視聴によって変化する視聴傾向属性であること、
を特徴とする多視点動画配信システム。

【請求項10】

請求項９の多視点動画配信システムにおいて、
前記視聴傾向属性は過去の視聴作品の属性であること、
を特徴とする多視点動画配信システム。

【請求項11】

請求項９の多視点動画配信システムにおいて、
前記視聴傾向属性は過去の視聴画面の属性であること、
を特徴とする多視点動画配信システム。

【請求項12】

請求項１の多視点動画配信システムにおいて、
前記画面配置を変更する多視点動画には、前記端末コンピュータにて画面配置を切り換えるための付加データが付与されており、
前記端末コンピュータの再生手段は、前記付加データに基づき、前記画面配置を変更して再生すること、
を特徴とする多視点動画配信システム。

【請求項13】

請求項１２の多視点動画配信システムにおいて、
前記画面配置の変更は、前記端末コンピュータの視聴者の操作無しに自動的に実行されること、
を特徴とする多視点動画配信システム。

【請求項14】

請求項１２の多視点動画配信システムにおいて、
前記画面配置の変更は、実行前に、前記端末コンピュータの視聴者に報知されること、
を特徴とする多視点動画配信システム。

【請求項15】

請求項１４の多視点動画配信システムにおいて、
前記画面配置の変更は、前記端末コンピュータの視聴者への報知後、自動的に実行されること、
を特徴とする多視点動画配信システム。

【請求項16】

請求項１４の多視点動画配信システムにおいて、
前記画面配置の変更は、前記端末コンピュータの視聴者への報知後、視聴者から許可された場合にだけ実行されること、
を特徴とする多視点動画配信システム。

【請求項17】

請求項１３の多視点動画配信システムにおいて、
前記画面配置の変更がなされた後、切り替え前の画面配置に戻すための情報が報知されること、
を特徴とする多視点動画配信システム。

【請求項18】

請求項１の多視点動画配信システムにおいて、
前記画面配置を変更した多視点動画が、前記配信コンピュータから、前記端末コンピュータにて送信されること、
を特徴とする多視点動画配信システム。

【請求項19】

請求項１の多視点動画配信システムにおいて、
前記配信コンピュータには、複数の多視点動画データが記憶されており、
前記端末コンピュータから、いずれかの多視点動画データが特定された配信要求が与えられると、前記配信コンピュータは、前記他のユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を配信時から変更して配信すること、
を特徴とする多視点動画配信システム。

【請求項20】

請求項１の多視点動画配信システムにおいて、
前記配信コンピュータには、複数の多視点動画データが記憶されており、
前記配信コンピュータは、前記配信途中で、前記他のユーザの視聴行動履歴を参照して、前記多視点動画の画面配置から変更して配信すること、
を特徴とする多視点動画配信システム。

【請求項21】

請求項１２〜請求項１７のいずれかの多視点動画配信システムにおいて、
前記多視点動画の画面配置を変更した多視点動画データを配信する時に、前記端末コンピュータの端末特性に応じて、切り換えを制限する制御データを送信し、
前記端末コンピュータの再生手段は、前記制御データおよび再生する端末の属性情報に基づき、前記画面配置を変更した再生を実行するか否か判断すること、
を特徴とする多視点動画配信システム。

【請求項22】

請求項２１の多視点動画配信システムにおいて、
前記端末コンピュータの属性情報は、当該端末の位置情報であること、
を特徴とする多視点動画再生システム。

【請求項23】

請求項２１の多視点動画配信システムにおいて、
前記端末コンピュータの属性情報は、当該端末の物理的制約であること、
を特徴とする多視点動画再生システム。

【請求項24】

同一対象に対する多視点動画を個別動画として、これを複数組み合わせて1画面に配置した多視点動画データを配信する配信手段、
配信した多視点動画についての視聴行動履歴をユーザ別に受信し、ユーザ別に記憶するユーザ視聴行動履歴記憶手段、
を備え、
前記配信手段は、あるユーザに対して多視点動画データを配信する場合に、前記ユーザ視聴行動履歴記憶手段に記憶された他のユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を変更した多視点動画データを配信すること、
を特徴とする多視点動画配信装置。

【請求項25】

請求項２４の多視点動画配信装置において、
前記視聴行動履歴は、前記他のユーザが再生時にしたその個別動画への評価であること、
を特徴とする多視点動画配信装置。

【請求項26】

請求項２４の多視点動画配信装置において、
前記配信手段は、ユーザ属性が類似のユーザ群に属するユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を変更した多視点動画データを配信すること、
を特徴とする多視点動画配信装置。

【請求項27】

請求項２４の多視点動画配信装置において、
前記画面配置を変更する多視点動画には、前記多視点動画データの配信先のユーザの端末コンピュータにて画面配置を切り換えるための付加データが付与されていること、
を特徴とする多視点動画配信装置。

【請求項28】

請求項２４の多視点動画配信装置において、
前記多視点動画の画面配置を変更した多視点動画データを送信すること、
を特徴とする多視点動画配信装置。

【請求項29】

請求項２４の多視点動画配信装置において、
複数の多視点動画データが記憶されており、
前記ユーザから、いずれかの多視点動画データが特定された配信要求が与えられると、前記他ユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を配信時から変更して配信すること、
を特徴とする多視点動画配信装置。

【請求項30】

請求項２４の多視点動画配信装置において、
複数の多視点動画データが記憶されており、
前記配信途中で、前記他のユーザの視聴行動履歴を参照して、前記多視点動画の画面配置から変更して配信すること、
を特徴とする多視点動画配信装置。

【請求項31】

請求項２７の多視点動画配信装置において、
前記多視点動画の画面配置を変更した多視点動画データを配信する時に、前記端末コンピュータの端末特性に応じて、切り換えを制限する制御データを送信すること、
を特徴とする多視点動画配信装置。

【請求項32】

コンピュータを
同一対象に対する多視点動画を個別動画として、これを複数組み合わせて1画面に配置した多視点動画データを配信する配信手段、
配信した多視点動画についての視聴行動履歴をユーザ別に受信し、ユーザ別に記憶するユーザ視聴行動履歴記憶手段、
として機能させるための多視点動画配信プログラムであって、
前記配信手段は、あるユーザに対して多視点動画データを配信する場合に、前記ユーザ視聴行動履歴記憶手段に記憶された他のユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を変更した多視点動画データを配信すること、
を特徴とする多視点動画配信プログラム。

【請求項33】

請求項３２の多視点動画配信プログラムにおいて、
前記視聴行動履歴は、前記他のユーザが再生時にしたその個別動画への評価であること、
を特徴とする多視点動画配信プログラム。

【請求項34】

請求項３２の多視点動画配信プログラムにおいて、
前記配信手段は、ユーザ属性が類似のユーザ群に属するユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を変更した多視点動画データを配信すること、
を特徴とする多視点動画配信プログラム。

【請求項35】

請求項３２の多視点動画配信プログラムにおいて、
前記画面配置を変更する多視点動画には、前記多視点動画データの配信先のユーザの端末コンピュータにて画面配置を切り換えるための付加データが付与されていること、
を特徴とする多視点動画配信プログラム。

【請求項36】

請求項３２の多視点動画配信プログラムにおいて、
前記配信手段は、前記多視点動画の画面配置を変更した多視点動画データを送信すること、
を特徴とする多視点動画配信プログラム。

【請求項37】

請求項３２の多視点動画配信プログラムにおいて、
前記配信手段は、前記ユーザから、複数の多視点動画データのいずれかが特定された配信要求が与えられると、前記他ユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を配信時から変更して配信すること、
を特徴とする多視点動画配信プログラム。

【請求項38】

請求項３２の多視点動画配信プログラムにおいて、
前記コンピュータには複数の多視点動画データが記憶されており、
前記配信手段は、前記配信途中で、前記他のユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を変更して配信すること、
を特徴とする多視点動画配信プログラム。

【請求項39】

請求項３５の多視点動画配信プログラムにおいて、
前記配信手段は、前記多視点動画の画面配置を変更した多視点動画データを配信する時に、前記端末コンピュータの端末特性に応じて、切り換えを制限する制御データを送信すること、
を特徴とする多視点動画配信プログラム。

【請求項40】

同一対象に対する多視点動画を個別動画として、これを複数組み合わせて1画面に配置した多視点動画データを、配信コンピュータから受信する受信手段、
前記多視点動画データを再生する再生手段、
前記再生した多視点動画データの視聴行動履歴を前記配信コンピュータに送信する視聴行動履歴送信手段、
を備え
前記多視点動画データには、他のユーザの視聴行動履歴を参照して前記多視点動画データの画面配置を変更するための付加データが付与されており、
前記再生手段は、前記付加データに基づき、前記画面配置を変更して再生すること、
を特徴とする多視点動画再生装置。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、多視点動画配置システムに関し、特に、多視点動画の画面配置切り換え処理に関する。

【背景技術】

【0002】

特開2008-211417号公報には、複数のカメラを用いて、多視点から撮像した動画を切り換えて配信することが開示されている。

【発明の概要】

【発明が解決しようとする課題】

【0003】

特開2008-211417号公報のシステムは、配信側にて複数のカメラからの画像を切り換えて、受信側に提供するというものであり、1画面に表示される多視点動画を切り換えるというものは存在しなかった。

【0004】

出願人は既に、1画面に多視点動画が表示可能な動画配信システムにおいて、多視点動画を生成する装置に関する特許出願をおこなった（特願2013-045286号）。

【0005】

このように生成した多視点動画を配信するにあたって、配信コンピュータから全情報を送り、端末側で画面配置などを変更することもできる。

【0006】

しかし、かかる画面配置の変更処理を、ユーザが適切におこなうことは困難である。

【0007】

この発明は、1画面に多視点動画を表示できるシステムにおいて、多視点動画の画面配置を容易に変更可能な多視点動画配置システムを提供することを目的とする。

【課題を解決するための手段】

【0008】

１）本発明にかかる多視点動画配信システムは、下記を備えた配信コンピュータ、a1)同一対象に対する多視点動画を個別動画として、これを複数組み合わせて1画面に配置した多視点動画データを配信する配信手段、a2)配信した多視点動画についての視聴行動履歴を受信するユーザ別視聴行動履歴受信手段、a3)前記受信したユーザ別視聴行動履歴をユーザ別に記憶するユーザ別視聴行動履歴記憶手段、Ｂ）下記を備えた端末コンピュータ、b1)前記多視点動画データを前記配信コンピュータから受信する受信手段、b2)前記多視点動画データを再生する再生手段、b3)前記再生した多視点動画データに関する視聴行動履歴を前記配信コンピュータに送信する視聴行動履歴送信手段、を備えた多視点動画配信システムであって、Ｃ）前記配信手段は、あるユーザに対して多視点動画データを配信する場合に、前記ユーザ視聴行動履歴記憶手段に記憶された他のユーザの視聴行動履歴を参照して、前記多視点動画データの画面配置を変更した多視点動画データを配信する。

【0009】

したがって、他のユーザの視聴行動履歴を参照して、画面配置を変更した多視点動画データを配信することができる。

【0010】

２）本発明にかかる多視点動画配信システムにおいては、前記視聴行動履歴は、画面配置傾向である。したがって、他のユーザの画面配置傾向を参照して、画面配置を変更した多視点動画データを配信することができる。

【0011】

３）本発明にかかる多視点動画配信システムにおいては、前記多視点動画データは、前記個別動画を少なくとも１のメイン画面と少なくとも１のサブ画面から構成されており、前記配信手段は、前記複数の個別動画のうち、当初メイン画面で表示されていたものが、サブ画面に切り換えられた切り換え率に基づいて、前記多視点動画データの画面配置を変更する多視点動画データを配信する。したがって、サブ画面に切り換えられた履歴に基づいた多視点動画データを配信することができる。

【0012】

４）本発明にかかる多視点動画配信システムにおいては、前記多視点動画データは、前記個別動画を少なくとも１のメイン画面と少なくとも１のサブ画面から構成されており、前記配信手段は、前記複数の個別動画のうち、当初サブ画面で表示されていたものが、メイン画面に切り換えられた切り換え率に基づいて、前記多視点動画データの画面配置を変更する多視点動画データを配信する。したがって、メイン画面に切り換えられた履歴に基づいた多視点動画データを配信することができる。

【0013】

５）本発明にかかる多視点動画配信システムにおいては、前記多視点動画データは、メイン画面と前記メイン画面よりも表示領域の小さなサブ画面から構成されており、前記配信手段は、前記複数の個別動画のうち、再生時に変更された個別動画の表示割合に基づいて、前記多視点動画データの画面配置を変更する多視点動画データを配信する。したがって、個別動画の表示割合に基づいた多視点動画データを配信することができる。

【0014】

６）本発明にかかる多視点動画配信システムにおいては、前記視聴行動履歴は、前記他のユーザが再生時にしたその個別動画への評価である。したがって、他のユーザが再生時にしたその個別動画への評価に基づいた多視点動画データを配信することができる。

【0015】

７）本発明にかかる多視点動画配信システムにおいては、前記配信手段は、ユーザ属性が類似のユーザ群に属するユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を変更した多視点動画データを配信する。したがって、ユーザ属性が類似のユーザ群に属するユーザの視聴行動履歴に基づいた多視点動画データを配信することができる。

【0016】

８）本発明にかかる多視点動画配信システムにおいては、前記ユーザ属性は、ユーザの静的属性である。したがって、ユーザの静的属性が類似したユーザの視聴行動履歴に基づいた多視点動画データを配信することができる。

【0017】

９）本発明にかかる多視点動画配信システムにおいては、前記ユーザ属性は、ユーザの視聴によって変化する視聴傾向属性である。したがって、ユーザの視聴傾向属性に基づいた多視点動画データを配信することができる。

【0018】

１０）本発明にかかる多視点動画配信システムにおいては、前記ユーザ属性は、過去の視聴作品の属性である。したがって、ユーザの視聴作品の属性に基づいた多視点動画データを配信することができる。

【0019】

１１）本発明にかかる多視点動画配信システムにおいては、前記視聴傾向属性は過去の視聴画面の属性である。したがって、過去の視聴画面の属性に基づいた多視点動画データを配信することができる。

【0020】

１２）本発明にかかる多視点動画配信システムにおいては、前記画面配置を変更する多視点動画には、前記端末コンピュータにて画面配置を切り換えるための付加データが付与されており、前記端末コンピュータの再生手段は、前記付加データに基づき、前記画面配置を変更して再生する。したがって、前記付加データを送ることにより画面配置を切り換えた多視点動画データを端末コンピュータにて再生することができる。

【0021】

１３）本発明にかかる多視点動画配信システムにおいては、前記画面配置の変更は、前記端末コンピュータの視聴者の操作無しに自動的に実行される。したがって、自動切り換えにて多視点動画データを配信することができる。

【0022】

１４）本発明にかかる多視点動画配信システムにおいては、前記画面配置の変更は、実行前に、前記端末コンピュータの視聴者に報知される。したがって、切り換え前に視聴者がそれを確認する多視点動画データを配信することができる。

【0023】

１５）本発明にかかる多視点動画配信システムにおいては、前記画面配置の変更は、前記端末コンピュータの視聴者への報知後、自動的に実行される。したがって、報知後、自動的に切り換え処理が実行される多視点動画データを配信することができる。

【0024】

１６）本発明にかかる多視点動画配信システムにおいては、前記画面配置の変更は、前記端末コンピュータの視聴者への報知後、視聴者から許可された場合にだけ実行される。したがって、報知後、自動的に切り換え処理が実行される多視点動画データを配信することができる。

【0025】

１７）本発明にかかる多視点動画配信システムにおいては、前記画面配置の変更がなされた後、切り替え前の画面配置に戻すための情報が報知される。したがって、画面配置切り換え後、視聴者が戻すことが容易な多視点動画データを配信することができる。

【0026】

１８）本発明にかかる多視点動画配信システムにおいては、前記画面配置を変更した多視点動画が、前記配信コンピュータから、前記端末コンピュータにて送信される。したがって、端末コンピュータは表示するだけの多視点動画データを配信することができる。

【0027】

１９）本発明にかかる多視点動画配信システムにおいては、前記配信コンピュータには、複数の多視点動画データが記憶されており、前記端末コンピュータから、いずれかの多視点動画データが特定された配信要求が与えられると、前記配信コンピュータは、前記他ユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を配信時から変更して配信する。したがって、配信時から画面配置を変更した状態で多視点動画データを配信することができる。

【0028】

２０）本発明にかかる多視点動画配信システムにおいては、前記配信コンピュータには、複数の多視点動画データが記憶されており、前記配信コンピュータは、前記配信途中で、前記他のユーザの視聴行動履歴を参照して、前記多視点動画の画面配置から変更して配信する。したがって、配信途中から画面配置を変更した状態で多視点動画データを配信することができる。

【0029】

２１）本発明にかかる多視点動画配信システムにおいては、前記多視点動画の画面配置を変更した多視点動画データを配信する時に、前記端末コンピュータの端末特性に応じて、切り換えを制限する制御データを送信し、前記端末コンピュータの再生手段は、前記制御データおよび再生する端末の属性情報に基づき、前記画面配置を変更した再生を実行するか否か判断する。したがって、再生する端末の属性情報に基づき変更した多視点動画データを配信することができる。

【0030】

２２）本発明にかかる多視点動画配信システムにおいては、前記端末コンピュータの属性情報は、当該端末の位置情報である。したがって、再生する端末の位置に基づき変更した多視点動画データを配信することができる。

【0031】

２３）本発明にかかる多視点動画配信システムにおいては、前記端末コンピュータの属性情報は、当該端末の物理的制約である。したがって、再生する端末の物理的制約に基づき変更した多視点動画データを配信することができる。

【0032】

２４）本発明にかかる多視点動画配信装置においては、同一対象に対する多視点動画を個別動画として、これを複数組み合わせて1画面に配置した多視点動画データを配信する配信手段、配信した多視点動画についての視聴行動履歴をユーザ別に受信し、ユーザ別に記憶するユーザ視聴行動履歴記憶手段、を備え、前記配信手段は、あるユーザに対して多視点動画データを配信する場合に、前記ユーザ視聴行動履歴記憶手段に記憶された他ユーザの視聴行動履歴を参照して、前記多視点動画の画面配置を変更した多視点動画データを配信する。したがって、他のユーザの視聴行動履歴を参照して、画面配置を変更した多視点動画データを配信することができる。

【0033】

２５）本発明にかかる多視点動画再生装置においては、同一対象に対する多視点動画を個別動画として、これを複数組み合わせて1画面に配置した多視点動画データを、配信コンピュータから受信する受信手段、前記多視点動画データを再生する再生手段、前記再生した多視点動画データの視聴行動履歴を前記配信コンピュータに送信する視聴行動履歴送信手段、を備え、前記画面配置を変更した多視点動画データには、前記端末コンピュータにて画面配置を切り換えるための付加データが付与されており、前記再生手段は、前記付加データに基づき、前記画面配置を変更して再生する。したがって、前記付加データを送ることにより画面配置を切り換えた多視点動画データを端末コンピュータにて再生することができる。

【0034】

本明細書において、「多視点動画の画面配置を変更する」とは、構成される複数の動画（多視点動画）の個別動画を変更せずに、その配置位置や配置の相対的割合を変更する場合はもちろん、個別動画を変更する場合も含む。

【図面の簡単な説明】

【0035】

【図1】多視点動画配信システム１の機能ブロック図である。

【図2】配信コンピュータ２のハードウェア構成を示す図である。

【図3】ユーザ動画データのフォーマットを示す。

【図4】公式動画データのフォーマットを示す。

【図5】端末コンピュータ３のハードウェア構成を示す図である。

【図6】関連づけ処理フローチャートである。

【図7】多視点動画配信処理フローチャートである。

【図8】端末コンピュータに表示される多視点動画の一例である。

【図9】投稿処理フローチャートである。

【図10】配信コンピュータ２に記憶される視聴操作履歴データを示す。

【図11】視聴操作履歴記憶処理フローチャートである。

【図12】切り換え処理フローチャートである。

【図13】配信コンピュータ２に記憶される視聴操作履歴データの他の例を示す。

【図14】配信コンピュータ２に記憶される視聴操作履歴データの他の例を示す。

【図15】配信コンピュータ２に記憶される視聴操作履歴データの他の例を示す。

【図16】配信コンピュータ２に記憶される視聴操作履歴データの他の例を示す。

【図17】サーバコンピュータ群のブロック図を示す。

【符号の説明】

【0036】

１・・・・ 多視点動画配信システム
２３・・・ＣＰＵ
２７・・・メモリ
１２３・・・ＣＰＵ
１２７・・・メモリ

【発明を実施するための最良の形態】

【0037】

機能ブロック図
図１に、本発明にかかる多視点動画配信システム１の機能ブロック図を示す。多視点動画配信システム１は、配信コンピュータ２と、複数の端末コンピュータ３a〜３nにて構成される。

【0038】

配信コンピュータ２は、配信手段５、ユーザ別視聴行動履歴受信手段７、ユーザ別視聴行動履歴記憶手段６を備えている。

【0039】

配信手段５は、多視点動画データの要求があると、同一対象に対する多視点動画を個別動画として、これを複数組み合わせて1画面に配置した多視点動画データを、多視点動画データを要求した端末コンピュータ３a〜３nに配信する。ユーザ別視聴行動履歴受信手段７は、配信した多視点動画についての視聴行動履歴である視聴操作履歴を端末コンピュータ３a〜３nから受信する。ユーザ別視聴行動履歴記憶手段６は前記受信したユーザ別視聴行動履歴をユーザ別に記憶する。

【0040】

端末コンピュータ３aは、要求手段８，受信手段９、再生手段１０、視聴行動履歴送信手段１１を備えている。要求手段８は、配信コンピュータ２に対して多視点動画データを要求する。受信手段９は配信コンピュータ２から送られてきた多視点動画データを受信する。再生手段１０は、受け取った多視点動画データを再生する。視聴行動履歴送信手段１１は再生した多視点動画データに関する視聴行動履歴を配信コンピュータ２に送信する。

【0041】

配信コンピュータ２の配信手段５は、あるユーザに対して多視点動画データを配信する場合に、ユーザ視聴行動履歴記憶手段６に記憶された他のユーザの視聴行動履歴を参照して、送信する多視点動画データの画面配置を変更した多視点動画データを配信する。本実施形態においては、かかる視聴行動履歴として、各多視点動画についての配信コンピュータ２からの配信データ属性、また、各多視点動画に対して、視聴ユーザが、興味深さを直接または間接的に表す視聴行動の履歴を採用した。例えば、多視点動画を構成する個別動画のうち、多くのユーザによってサブ画面からメイン画面に切り替えられた個別動画をメイン画面とした配置に変更して表示する。

【0042】

端末コンピュータ３a以外の他の端末コンピュータの機能も同様である。

【0043】

２．ハードウェア構成
配信コンピュータ２のハードウェア構成について、図２を用いて説明する。同図は、配信コンピュータ２を、ＣＰＵを用いて構成したハードウェア構成の一例である。

【0044】

配信コンピュータ２は、ＣＰＵ２３、メモリ２７、ハードディスク２６、モニタ３０、光学式ドライブ２５、入力デバイス２８、通信ボード３１、およびバスライン２９を備えている。ＣＰＵ２３は、ハードディスク２６に記憶された各プログラムにしたがいバスライン２９を介して、各部を制御する。

【0045】

ハードディスク２６は、オペレーティングシステムプログラム２６ｏ（以下ＯＳと略す）、メインプログラム２６ｐが記憶される。メインプログラム２６ｐの処理は、後述する。

【0046】

動画データ記憶部２６dには、複数のユーザがアップロードしたユーザ動画、およびニュースチャンネル等の公式動画が記憶されている。各ユーザ動画は、図３に示すように、動画データID、アップロードユーザ名、撮像開始日時、撮像時間、位置情報、インデックスワードで構成されている。本実施形態においては、撮像場所データとしてGPS情報を、撮像時刻データとして、撮影開始時刻および動画の撮像時間を採用した。各公式動画は、図４に示すように、ユーザ動画と同様に動画データIDに、属性データとして撮像場所データおよび撮像時刻データが付加されている。

【0047】

本実施形態においては、オペレーティングシステムプログラム（ＯＳ）２６ｏとして、Windows2008R2（登録商標または商標）を採用したが、これに限定されるものではない。

【0048】

なお、上記各プログラムは、光学式ドライブ２５を介して、プログラムが記憶されたＣＤ−ＲＯＭ２５ａから読み出されてハードディスク２６にインストールされたものである。なお、ＣＤ−ＲＯＭ以外に、フレキシブルディスク（ＦＤ）、ＩＣカード等のプログラムをコンピュータ可読の記録媒体から、ハードディスクにインストールさせるようにしてもよい。さらに、通信回線を用いてダウンロードするようにしてもよい。

【0049】

本実施形態においては、プログラムをＣＤ−ＲＯＭからハードディスク２６にインストールさせることにより、ＣＤ−ＲＯＭに記憶させたプログラムを間接的にコンピュータに実行させるようにしている。しかし、これに限定されることなく、ＣＤ−ＲＯＭに記憶させたプログラムを光学式ドライブ２５から直接的に実行するようにしてもよい。なお、コンピュータによって、実行可能なプログラムとしては、そのままインストールするだけで直接実行可能なものはもちろん、一旦他の形態等に変換が必要なもの（例えば、データ圧縮されているものを、解凍する等）、さらには、他のモジュール部分と組合して実行可能なものも含む。

【0050】

配信コンピュータ２は、後述するように、公式動画の組み合わせおよび／またはユーザ動画の組み合わせた多視点動画を生成して、配信する。

【0051】

端末コンピュータ３a〜３nのハードウェア構成を図５に示す。ハードディスク１２６にはブラウザプログラム１２６P、行動履歴抽出プログラム１２６ｋが記憶されている。ＣＰＵ１２３がブラウザプログラム１２６Pに基づいて、多視点動画をモニタ１３０に表示すると、ＣＰＵ１２３は行動履歴抽出プログラム１２６ｋに基づき、ユーザがおこなった所定の視聴行動を視聴行動履歴記憶部１２６ｕに記憶し、配信コンピュータ２に送信する。他の構成は一般的なパソコンなどと同じである。なお、端末コンピュータは、タブレットコンピュータ、スマートフォン、ゲーム機、スマートテレビ、その他の家電製品などであってもよい。

【0052】

また、行動履歴抽出プログラム１２６ｋは予めハードディスク１２６に記憶するようにしたが、これは必要なプログラムをブラウザプログラムにプラグイン処理で実行させるようにしてもよい。

【0053】

また、本実施形態においては、ハードディスク１２６に、ブラウザプログラム１２６P、行動履歴抽出プログラム１２６ｋ、行動履歴抽出プログラム１２６ｋ、視聴行動履歴記憶部１２６が記憶されている場合について説明したが、これらの記憶場所については限定されない。

【0054】

３. フローチャート
（３．１ 多視点動画生成処理）
つぎに、ユーザ動画と公式動画との関連づけ処理について、図６を用いて説明する。

【0055】

多視点動画送出装置１のＣＰＵ２３は、ユーザ動画の属性データを読み出す（図６ステップＳ１０１）。具体的には、撮像場所、撮像日時およびインデックスワードである。ＣＰＵ２３は、公式動画と一致するものがあるか否か判断する（ステップＳ１０３）。これは、位置情報および撮像日時のズレがあらかじめ定めた範囲内か否かで判断する。本実施形態においては、位置情報のズレを直線距離にして所定距離内（例えば１００メートル）、時間のずれを少なくとも一部が重複するかで判断するようにした。例えば、図３に示すようなユーザデータがある場合、ユーザ動画２０１、２０３は、図４に示す公式動画K１との位置のずれが所定距離内で、かつ、時間帯が重複しているので、一致する動画データと判断される。これに対して、ユーザ動画２０２は、時間帯は重複するが、公式動画K１との位置ずれが所定距離を超えているので、一致する動画データと判断されない。また、ユーザ動画２０４は、公式動画K１との位置ずれは所定距離内であるが、時間帯が重複しないので、一致する動画データと判断されない。

【0056】

つぎにＣＰＵ２３は、内容データを解析する(ステップＳ１０５）。そして、内容データが一致する場合には、関連づけをする(ステップＳ１０７)。これは、同じ対象物に対する動画であっても、公式動画とは、場所または時間帯が離れている場合があるからである。

【0057】

時間帯は離れているが、場所が近い場合としては、子供の成長記録動画、スポーツやダンスレッスンの練習動画、季節毎のテーマバークにおけるパレード動画、同じ場所における監視カメラ、定点カメラの動画データなどがある。

【0058】

また、時間帯は近いが、場所が離れている場合としては、遠隔地での擬似セッションの動画（例えば、ボーカル：東京、ギター：大阪、ベース：名古屋等）、各地の年末カウントダウンライブの動画、オリンピック開催時の各地競技動画、試合前の本番会場と練習会場の選手の様子動画、各駅伝ランナーの動画、同じ時間帯に並行して行われたセミナーの動画、大きな商業施設内の監視カメラの動画データなどがある。

【0059】

公式動画データおよびこれと関連づけられたユーザ動画データは、多視点動画として配信可能状態となる。

【0060】

本実施形態においては、公式動画データをメイン画面とし、これと関連づけられたユーザ動画をサブ画面として配置するようにしたが、多視点動画の構成はこれに限定されない。例えば、公式動画データだけで生成してもよいし、ユーザ動画をメイン画面とし、これと関連づけられた公式動画データをサブ画面として配置してもよいし、また、ユーザ動画だけで構成するようにしてもよい。

【0061】

また、公式動画およびユーザ動画のフォーマットについては図３，４にて提示した以外のフォーマットであってもよい。

【0062】

かかる公式動画またはユーザ動画は、録画されたものはもちろん、ライブ映像も当然含む。

【0063】

（３．２ 多視点動画配信処理）
動画データ記憶部２６ｄに記憶された多視点動画の配信処理について、図７を用いて説明する。以下では、ユーザがＩＤとパスワードで多視点動画配信システムにログインし、予め配信可能状態となった複数の多視点動画のうちいずれかを選択した場合について説明する。

【0064】

端末コンピュータのＣＰＵ１２３は、ユーザから配信要求命令があるか否か判断しており（ステップＳ２０１）、配信要求命令があれば、配信要求を配信コンピュータに送信する（ステップＳ２０２）。配信コンピュータのＣＰＵ２３(図２参照)は、端末コンピュータから多視点動画を特定した配信要求があるか否か判断しており（ステップＳ２０３）、かかる配信要求があると、ユーザ履歴として記憶する(ステップＳ２０４)。ＣＰＵ２３は現在の画面配置パラメータを付加して、多視点動画の配信を開始する（ステップＳ２０５）。

【0065】

端末コンピュータのＣＰＵ１２３は、多視点動画を受信するか否か判断しており（ステップＳ２０５）、受信すると画面配置パラメータの設定どおりにモニタに表示する（ステップＳ２０７）。画面１Ｋ〜５Ｋが１画面に配信された多視点動画の一例を図８に示す。

【0066】

このように、動画を複数組み合わせた多視点動画を予め複数種類記憶しておき、リスト要求があるとこれを端末コンピュータに送信して、端末コンピュータにてリスト表示し、ユーザが選択した特定の多視点動画を端末コンピュータに配信することができる。

【0067】

（３．３ ユーザ端末における視聴操作処理）
多視点動画の配信が開始された後は、従来の動画配信サイトと同様に、多視点動画に対する評価やコメントなどを付加することができる。

【0068】

例えば、図８において、画面１Ｋはメイン画面である。メイン画面には動画の任意再生時間にタグアイコン２０iをクリックすることにより、タグを付与することができる。これは、例えば開始1分20秒後に注目するプレーがあったような場合に、自分はこのプレーに注目したというように使用することができる。また、タグには、コメントを付与することもできる。アイコン１０iは「画質を切り換える」、アイコン１１iは、「これをお気に入り動画として登録する」、アイコン１２iは「この動画のシェアをする」、アイコン１３iは、「高評価であることを報知する」アイコンである。

【0069】

かかるコメントなどの投稿命令があった場合の配信コンピュータと端末コンピュータ間の処理については従来と同様である。例えば、表示された多視点動画をみて、ユーザが投稿するアイコンを選択された場合には以下のように処理が実行される。

【0070】

端末コンピュータのＣＰＵ１２３は、投稿入力の確定指示があるか否か判断しており(図９ステップＳ２０８）、投稿命令があるとこれを配信コンピュータに送信する(ステップＳ２０９)。

【0071】

配信コンピュータのＣＰＵ２３(図２参照)は、端末コンピュータから投稿があるか否か判断しており（ステップＳ２１０）、かかる投稿要求があると、ユーザ履歴として記憶するとともに、投稿結果を反映した配信をおこなう(ステップＳ２１１)。

【0072】

本実施形態においては、投稿としては、タグ投稿、タグ投稿に対するコメントを採用したが、これに限定されず、例えば、テロップ/スーパー投稿、クリッカブルリンク投稿であってもよい。

【0073】

またアイコン10i〜アイコン13iは一例であり、その他のアイコンを採用してもよい。

【0074】

また、投稿以外の視聴操作、例えば、「個別視点毎のオンマウス処理」、「ボリューム増減処理」、「ステレオ・モノラル切替処理」、「メイン画面への切り換え処理」、「カメラ群変更処理」、「拡大縮小機能実行処理」、「全画面表示機能実行処理」についても、アイコンを選択することにより、操作可能である。なお、オンマウス処理とはある個別動画にポインティングデバイスをその上にもっていくことをいう。

【0075】

（３．４ ユーザの視聴処理による画面配置変更処理）
配信コンピュータ２は、ユーザが端末コンピュータで行った視聴操作履歴をユーザ別に記憶し、かかる履歴を用いて配信時の画面配置パラメータを変更する。

【0076】

視聴履歴としては、各多視点動画について、配信コンピュータ２から配信する多視点動画データの配信に伴い発生するデータである。本実施形態においては、「視聴開始時刻」、「視聴終了時刻」、「視聴中断時刻」、「視聴再開時刻」、「総視聴回数」について、図１０に示すようにユーザ別、動画ＩＤ別に記憶するようにした。

【0077】

さらに、配信中における行動履歴である「タグ投稿の内容および投稿時刻」、「タグコメントの内容およびその投稿時刻」、「テロップ/スーパー投稿の内容および投稿時刻」、「クリッカブルリンク投稿の内容および投稿時刻」、「接触したフローティングバナーのIDおよび接触時刻」、「個別視点毎のオンマウス処理およびオンマウス時刻」、「ボリューム増減処理および処理時刻」、「ステレオ・モノラル切替処理および処理時刻」、「メイン画面への切り換え処理および処理時刻」、「カメラ群変更処理および処理時刻」、「拡大縮小機能実行処理および処理時刻」、「全画面表示機能実行処理および処理時刻」について、図９に示すようにユーザ別、動画ＩＤ別に記憶するようにした。これらは、多視点動画に対して視聴したユーザが、興味深さを直接または間接的に表す視聴行動データとして後述するように、動的な切り換え配信処理に用いられる。なお、オンマウス処理とはある個別動画にポインティングデバイスをその上にもっていくことをいう。

【0078】

図１１を用いて、かかる視聴操作履歴を配信コンピュータに送出させる処理について説明する。

【0079】

端末コンピュータのＣＰＵ１２３は、視聴操作履歴をハードディスク１２６に記憶する(ステップＳ３０１）。ＣＰＵ１２３は、送信条件に合致するか否か判断しており(ステップＳ３０２)、送信条件に合致すると、配信コンピュータへ送信する(ステップＳ３０３)。本実施形態においては、送信条件として、記憶してからの経過時刻を採用し、ＣＰＵ１２３が所定時刻経過した場合に端末コンピュータから配信コンピュータへ送信するようにした。かかる送信条件としては、これらに限定されず、当該動画の視聴終了後や、履歴に該当する操作を採用してもよい。

【0080】

また、配信コンピュータから、送信すべき履歴がないかを問い合わせて、これを端末コンピュータが判断するようにしてもよい。

【0081】

配信コンピュータのＣＰＵ２３は、かかる履歴を受け取ったか否か判断しており(ステップＳ３０４)、受信するとこれを、ユーザ別に図１０のように、ユーザ履歴として蓄積記憶する(ステップＳ３０５)。

【0082】

配信コンピュータのＣＰＵ２３は、蓄積されたユーザ履歴を用いて画面配置パラメータを変更する割り込み処理を行う。本実施形態においては、図１２に示すように、ＣＰＵ２３は切り換え条件に合致するか否かを判断し(ステップＳ３１１)、合致する場合には、画面配置パラメータを書き換える(ステップＳ３１２)。

【0083】

例えば、配信している多視点動画について、既視聴したユーザのうち６０％以上のユーザがあるサブ画面をメイン画面に切り換えたような場合には、他のユーザについても、そのサブ画面がメイン画面として表示されるためのパラメータを変更する。

【0084】

このようにして、画面配置パラメータを動的に切り換えて、端末コンピュータにて、画面配置の異なった表示が行われる。このように、あるユーザに多視点動画を配信する際に、他のユーザの視聴行動を参照して、画面配置を変更した多視点動画データを配信することにより、多視点動画を構成する個々の動画について、他のユーザがどのように興味を持ったかを踏まえての画面配置での多視点動画配信が可能となる。

【0085】

なお、上記例では、他のユーザの視聴行動を参照にして別のユーザの画面配置を変更するようにしたが、自分自身の視聴操作履歴を参照にして、当該ユーザの画面配置を変更するようにしてもよい。たとえば、サッカーの試合の多視点動画では、ゴール地点の動画をメイン画面に切り換える率が高いユーザは、サッカーの試合では、そのような画面配置で配信するようにすればよい。たとえば、個別の視点の属性タグを参照するようにすればよい。

【0086】

また、同じコンテンツを繰り返し視聴している場合には、まだ視聴したことのない個別動画の組み合わせで配信するようにしてもよい。このように、特定のユーザの端末コンピュータにおける画面配置を第三者または自分自身の操作履歴から動的に変更することができる。

【0087】

また、上記動的変更の対象とするユーザを、ユーザ全体ではなく、ユーザ属性が類似のユーザ操作履歴を参照するようにしてもよい。かかるユーザ属性としては、例えば、年齢などの静的属性が似ているユーザ群、視聴によって変化する動的な視聴傾向属性が似ているユーザ群、過去の視聴作品属性が似ているユーザ群、過去の視聴画面属性が似ているユーザ群等が採用可能である。例えば、特定の野球チームが好きなユーザは、同じ属性を有するユーザ群の行動履歴を参照すればよい。

【0088】

さらに、これらを切り換える際に、時間帯をパラメータとして検出するようにしてもよい。例えば、ある時間帯になると、その多視点動画のあるサブ画面がメイン画面に切り換えられる傾向にある場合には、その時間帯になると上記切換を行うようにしてもよい。

【0089】

このように、ユーザの視聴行動に基づいて、端末コンピュータにて適切な多視点動画配信の画面配置を提案することができる。

【0090】

４.他の実施形態
なお、画面配置パラメータを変更するためのデータとしては、例えば、各構成小動画画面の配置傾向、構成小動画画面のサブ画面への移行率が低いもの、構成小画面のメイン画面への移行率が高いもの、構成小画面の画面拡大率等が、採用可能である。また、構成小動画画面ごとに、評価を付与できるようにしておき、かかる評価が高いかどうかで決定するようにしてもよい。

【0091】

図１３〜図１７に配信コンピュータに記憶されるユーザ毎の視聴履歴に基づいて決定された属性データの一覧を示す。例えば、「視聴開始時刻」のように、視点、多視点動画全体、ユーザと３つについて記憶される属性もあれば、「タグコメント総数」のようにユーザだけ記憶される属性もある。このような多視点動画およびまたはユーザごとに視聴に関して行った行動履歴を、配信コンピュータで記憶することにより、配信する多視点動画の動的な画面配置を切り換えることができる。

【0092】

本実施形態においては、画面配置をするための付加データ（配置特定データ）で、動的に切り換えるようにした。かかる切り替えは、たとえば、HTML５のVIDEOタグを用いて、画面の位置および／または、縮小率などを変更するようにすればよい。

【0093】

また、上記付加データを用いてユーザ端末で切り替えるのではなく、直接、画面配置自体を変更して配信するようにしてもよい。

【0094】

かかるサーバ側で配置変更して配信する場合の、サーバの構成について図１７を用いて説明する。図１７のサーバシステム２００は、エンコーダ２０１、ユニキャストプロトコルでストリームスイッチ２０３、ＨＬＳ化モジュール２０７、多視点映像合成モジュール２０５、Webサーバ２０９を備えている。

【0095】

エンコーダ２０１は、与えられた６つの動画を、映像はｍｐｅｇ２形式に、音声はＡＡＣ形式にエンコードし、ユニキャストプロトコルでストリームスイッチ２０３に送信する。ストリームスイッチ２０３は、これらの動画データを、マルチキャストプロトコルにて、ＨＬＳ化モジュール２０７、および多視点映像合成モジュール２０５に送信する。多視点映像合成モジュール２０５は前記動画データを組合せたサブ画面の多視点動画を複数合成処理する。かかる処理は、例えば、EP1164794A1、EP917371A2、USP5617135公報に開示された通常の合成技術を用いればよい。

【0096】

本実施形態においては、以下のような６パターンをサブ画面多視点動画を生成した。６つの動画を動画D１〜D６として、動画D１を除いた残りの５の動画を配置したサブ画面動画、動画D２を除いた残りの５の動画を配置したサブ画面動画、動画D３を除いた残りの５の動画を配置したサブ画面動画、・・・動画６を除いた残りの５の動画を配置したサブ画面動画とした。

【0097】

多視点映像合成モジュール２０５は、これらの６パターンのサブ画面多視点動画を、ストリームスイッチ２０３に送信する。本実施形態においては、動画D１を除いた残りの５の動画を配置したサブ画面動画に動画D１をメイン画面として組み合わせた多視点動画TD1、動画D２を除いた残りの５の動画を配置したサブ画面動画に動画D２をメイン画面として組み合わせた多視点動画TD2、・・・というように６パターンの多視点動画を生成して、ストリームスイッチ２０３に送信するようにした。

【0098】

ストリームスイッチ２０３は、多視点映像合成モジュール２０５から受け取った６パターンのサブ画面多視点動画に、エンコーダ２０１から受け取った６つの動画をメイン画面として組み合わせた多視点動画を６パターン生成し、ＨＬＳ化モジュール２０５に送信する。ＨＬＳ化モジュール２０５は、これらの多視点動画のうち、デフォルトの多視点動画をHLS形式に変換して、Webサーバ２０９に送信する。残りの多視点動画については記憶する。本実施形態においては、デフォルトとして多視点動画TD1を採用した。

【0099】

本実施形態においては、配信する多視点動画TD1以外の多視点動画TD2〜TD6については、ＨＬＳ化モジュール２０５に記憶するようにしたが、別途記憶部を設けるようにしてもよい。

【0100】

Webサーバ２０９は、受け取った多視点動画TD1を送信要求のあった端末コンピュータの形式に変換して、配信する。

【0101】

配信していた多視点動画について配置変更要求があった場合の処理について説明する。動画D1がメイン画面を、動画D２〜動画D６がサブ画面を構成するの多視点動画を配信している場合に、動画D６がメイン画面を、動画D１〜動画D５がメイン画面を構成する多視点動画に変更する場合の処理について説明する。

【0102】

端末コンピュータ２２０のユーザは、動画D1がメイン画面を、動画D２〜動画D６がサブ画面を構成する多視点動画TD１のうち、サブ画面の動画D６をクリックする。これにより、端末コンピュータ２２０は、メイン画面を動画D６、サブ画面を動画D１〜D５に変更したレイアウト情報（XML形式）をWebサーバ２０９に送信する。本実施形態においては、サブ画面のクリックにメイン画面入れ替えのAPI （Application Programming Interface)を関連づけておき、いずれかのサブ画面がクリックされると、端末コンピュータは、そのサブ画面をメイン画面とするレイアウト情報をWebサーバ２０９に送信するようにしたが、これに限定されない。

【0103】

Webサーバ２０９は、受信したレイアウト情報に基づく多視点動画が、ＨＬＳ化モジュール２０７に記憶されているかを問い合わせる。ＨＬＳ化モジュール２０７は、動画D６がメイン画面を、動画D１〜動画D５がサブ画面を構成する多視点動画TD６は既にバッファしているので、多視点動画TD６をHLS形式に変換して、Webサーバ２０９に送信する。Webサーバ２０９は、多視点動画TD６を端末コンピュータ２２０に送信する。これにより、画面配置が変更された多視点動画TD６が端末コンピュータ２２０に表示される。

【0104】

なお、サブ画面とメイン画面を入れ替える以外の処理の場合には、ＨＬＳ化モジュール２０７は、記憶されていないと回答する。これにより、以下のような処理が実行される。Webサーバ２０９は、ストリームスイッチ２０３に、受信したレイアウト情報をストリームスイッチ用レイアウト情報（ＲＦＣプロトコル）に変換して、ストリームスイッチ２０３に送信する。これにより、ストリームスイッチ２０３は、受信したレイアウト情報に基づく多視点動画を生成する。生成された多視点動画は、ＨＬＳ化モジュール２０７を介して、Webサーバ２０９に送信される。これにより、新しいレイアウト情報に基づく多視点動画が配信される。メイン画面とサブ画面の組み合わせを変更した複数のパターンの多視点動画か生成される点については上記と同様である。

【0105】

図１７に示すサーバシステム２００の、多視点映像合成モジュール２０５、ストリームスイッチ２０３のような多視点動画生成プログラムを端末コンピュータに予めインストールしておき、多視点動画の元となる各動画データを端末コンピュータに送り、配置の変更は端末でおこない、かかる配置特定データを変更することにより、端末コンピュータにて動的に切り換えることも可能である。

【0106】

また、端末コンピュータにて、画面配置を動的に自動切り替えするのはでなく、画面配置の切り替え前に注意喚起する、注意喚起した後に自動またはユーザが手動での切り換えする、切り替え後に戻すための注意喚起する、ことも可能である。

【0107】

本実施形態においては、切り換えるタイミングはその多視点動画の配信時としたが、配信途中で動的に切り換えるようにしてもよい。

【0108】

また、端末コンピュータの特性（端末の物理的制約または端末の地図上の位置等）に応じて切り換えるようにしてもよい。例えば、端末の物理的制約としては、表示画面の解像度または、画面の大きさに応じて、多視点動画を構成する個別動画の数、メイン画面の大きさなどを変更するようにしてもよい。また、受信している端末コンピュータの地図上の位置によって、画面配置を換えてもよい。例えば、ある地域の端末コンピュータは、その多視点動画のあるサブ画面がメイン画面に切り換えられる傾向にある場合には、その地域の端末コンピュータの画面配置はそのように配置切換を行うようにしてもよい。

【0109】

また、自分自身または他人の視聴傾向ではなく、多視点動画のコンテンツ特性に応じて初期画面を切り換えるようにしてもよい。

【0110】

また、多視点動画を構成する個別動画として、CM（コマーシャル動画）を採用してもよい。かかる動画も上記と同様に、切り換えることが可能である。

【0111】

属性データとしては、各シーンに付けられたタグ情報や、画像検出も含めた広義のアノテーション（動画にオーバーレイとして表示されるクリック可能なテキスト）を属性データとして用いることも可能である。また、かかるタグ情報は、システムが元々付加したタグ、ユーザーが動画に付加したタグ、システムが類推して動画に付加したタグなど、どのようなものであってもよい。

【0112】

なお、上記実施形態では、表示されているサブ画面のうち、メイン画面に選択された個別動画を、他のユーザのメイン画面と配置する場合について説明したが、予めサブ画面として選択されていない個別動画についても、サブ画面またはさらにメイン画面として配置できるようにすることもできる。例えば、配信コンピュータから、初期は１画面に６つの個別動画で配信している場合に、初期には表示されないが、個別動画として７番目以降に関連づけられている個別動画の一覧を配信しておき、ユーザが７番目以降に関連づけられている個別動画をサブ画面またはメイン画面に配置した傾向が高ければ、それに基づき他の端末コンピュータの画面配置を切り換えることもできる。

【0113】

また、その場合に、サブ画面などを切り換えるのではなく、ポップイン表示させるようにしてもよい。また、その場合に、多視点動画を構成する個別動画数を増減させるようにしてもよい。

【0114】

また、視聴者の能動的ではないアクションをパラメータとして抽出するようにしてもよい。例えば、入札単価の高い広告素材を強制表示する、各個別動画に付かされたタグ情報などに基づき、時間と共に多視点動画のレイアウトを動的に変更する。

【0115】

上記実施形態では、多視点動画を構成する個別動画の切り換えする場合を例として説明したが、インターネットにて接続された別のサイトへのアウトリンク（例えば、別のエレクトロニックコマースのサイトへ飛ばす、または、インリンク（別の関連動画へ飛ばすなどの処理も可能である。

【0116】

なお、上記実施形態においては、自動的に画面配置を変更するようにしたが、切り替え前にユーザに「画面配置を切り替えます」というようなメッセージを表示させ、許可した場合に、配置変換処理をするようにしてもよい。また切り替え後、切り替え前の画面配置に戻すアイコンを表示し、かかる戻す処理をするのかをユーザに尋ねるようにしてもよい。

【0117】

なお、各視点の評価値の演算手法としては、一般的な動画の評価手法が採用可能である。例えば、各カメラ視点における高評価数、多視点動画としての高評価数などをスコアとして総計すればよい。高評価数以外の、他の特定ログについても同様である。

【0118】

また、各スコアについては重み付けを行うようにしてもよい。また、重み付けを決定するのに、回帰分析してもよい。

【0119】

視聴傾向を推定するには、例えば、最尤法、ベイズ推定、アソシエーション、協調フィルタリング、ベイジアンネットワーク、テキストマイニング等が採用可能である。また、配信コンピュータから表示を切り換えるため、下記のような条件（ルール）を記憶しておき、このような特定順序による表示切換が行われた場合には、次の画面をそのように切り換えてもよい。例えば、「メイン画面が視点「１」→「６」→「３」→「２」と切り換えられた場合には、次は5秒後に「５」に切り換える」という条件をルールとして端末コンピュータに送信しておき、その端末コンピュータにて、メイン画面が１→６→３→２と切り換えられた場合には、自動的にメイン画面を５と切り換えるようにしてもよい。

【0120】

また、過去の視聴傾向がバラバラで傾向がつかめない場合には、ランダムフラグを端末コンピュータに送り、端末にて乱数発生させて、ランダムに画面配置を変更するようにしてもよい。

【0121】

なお、本実施形態においては、上記傾向が閾値を上回る場合に、切り換えるようにしたが、設定値を下回る場合に、切り換えるようにしてもよい。また、かかる閾値は絶対値ではなく、相対値、例えば、視聴者の傾向のランキング（上位１〜１０位までを抽出、「下位下〜最終位まで抽出）で決定するようにしてもよい。

【0122】

尤度（ゆうど）で判断するようにしてもよい。また、有意水準を越えた場合、例えば、 t値、z値、p値等で判断してもよい。また、情報量基準としては、赤池情報量規準（AIC）、BIC（ベイズ情報量規準）など、種々の情報量基準が採用可能である。

【0123】

また、本実施形態においては、切替要素として、構成カメラ群の数（例：6画面 → 4画面）、メイン画面とサブ画面の配置など、各種の画面配置を採用したが、画面配置としては、例えば、構成カメラ群のレイアウト（例：カメラA：左、カメラB：右 → カメラA：右、カメラB：左）、各カメラの表示回数 （例：プレミアムビュー、制限付ビュー） 各カメラの拡大・縮小比率、動画の画角（例：通常、パノラマ）なども同様に、切り替え可能である。

【0124】

さらに、個別動画と広告の画面構成率、テロップ・タグなどの表示有無、動画サムネイルスライド速度、オートズーム（例えば、被写体に寄る）などを切り換えることも可能である。

【0125】

また、画面配置切り換えとして、再生位置をずらした動画画面に切り換えることも可能である。例えば、配信初期から1分20秒後にメイン画面を「６」→「３」と切り換えた後、10秒巻き戻し処理が多く実行されたような場合、配信初期から1分20秒後に、メイン画面を「６」→「３」と切り換えるとともに、10秒巻き戻し処理して再生することも可能である。

【0126】

また、別の多視点動画への切り換えることも可能である。例えば、歌手グループαの構成員α１の視点が、開始後5分20秒で無くなった場合、構成員α１のファンは、構成員α１が登場している別の多視点動画に切り換えるという処理がなされる場合もある。このような場合、同じユーザ属性を有するユーザについては、これを自動的に切り換えることにより、切り換える処理が省ける。

【0127】

また、同じ状況で、複数の多視点動画を画面上に表示して、ユーザ端末にてユーザが構成する個別動画の組み合わせを変えられるようにしてもよい。かかる履歴を記憶することにより、多視点動画の構成をも切り換えることができる。

【0128】

また、上記実施形態においては、切り換えるのは画面配置としたが、サウンドプロパティを切り換えるようにしてもよい。例えば、配信初期から2分20秒後に音声ボリュームを大きくする処理が多く実行されたような場合、その多視点動画配信初期から2分20秒後に、音声ボリュームを大きくすることも可能である。その際、画面配置切換と重畳させるようにしてもよい。サウンドプロパティとしては、ミュート、主音声/副音声切り換え、ステレオ/モノラル切り換え、バックミュージック/BGM開始または停止などが採用可能である。

【0129】

また、サウンドプロパティではなく、使用言語を切り換えるようにしてもよい。これにより、途中で別の言語を使用する人がインタビューされたような場合、使用する言語を翻訳して報知することも可能となる。

【0130】

また、画面配置でなく、物理要素を切り換えるようにしてもよい。端末コンピュータのモニタの明度/輝度の変更（例、白黒/カラー/セピア、RGB）、配信帯域/配信画質の変更（例：128kbps→256kpbs、240p→720p）、端末コンピュータに接続されているネットワークカメラの首振り、ズーム処理、ピント処理などをするようにしてもよい。

【0131】

このように、画面配置の切換とは別に、またはこれと組み合わせて、ある端末コンピュータの撮像する動画を撮像条件を切り換えることにより、より高機能な多視点動画配信およびそれを用いた動的切り換えが可能となる。

【0132】

上記実施形態においては、端末コンピュータの処理は、ブラウザプログラムで実行させたが、専用ハードウェアまたはソフトウェアを搭載させることも可能である。

【0133】

なお、本実施形態においては端末における視聴操作履歴それ自体を配信コンピュータに取得させ、各種の分析を行うようにしたが、端末にてある程度データ処理した結果を配信コンピュータに送って、これを記憶するようにしてもよい。例えば、メインへの切り換え率などである。この場合、配信コンピュータに視聴操作履歴およびタイムスタンプを全て送信するのではなく、これらから得られた値を配信コンピュータに記憶するようにしてもよい。

【0134】

なお、本実施形態においては、他のユーザの視聴行動履歴を参照して、同じ画面配置となるように、配信する多視点動画データの画面配置を変更したがこれには限定されない。

【0135】

また、端末コンピュータはパソコンではなく、携帯端末などであってもよい。

【0136】

上記実施形態においては、図１に示す機能を実現するために、ＣＰＵを用い、ソフトウェアによってこれを実現している。しかし、その一部若しくはすべてを、ロジック回路等のハードウェアによって実現してもよい。

【0137】

なお、上記プログラムの一部の処理をオペレーティングシステム（ＯＳ）にさせるようにしてもよい。

【要約】

【課題】 多視点動画の画面配置を動的に変更する。
【解決手段】 視聴行動履歴送信手段１１は再生した多視点動画データに関する視聴行動履歴を配信コンピュータ２に送信する。配信コンピュータ２のユーザ別視聴行動履歴受信手段７は、配信した多視点動画についての視聴行動履歴である視聴操作履歴を端末コンピュータから受信し、ユーザ別視聴行動履歴記憶手段６は、これをユーザ別に記憶する。配信手段５は、あるユーザに対して多視点動画データを配信する場合に、ユーザ視聴行動履歴記憶手段６に記憶された他のユーザの視聴行動履歴を参照して、送信する多視点動画データの画面配置を変更した多視点動画データを配信する。
【選択図】 図１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図8】