特開 2024-125349 データ処理装置、データ処理方法、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024125349

(43)【公開日】2024-09-18

(54)【発明の名称】データ処理装置、データ処理方法、及びプログラム

(51)【国際特許分類】

   G06T 19/00 20110101AFI20240910BHJP

   H04N 21/258 20110101ALI20240910BHJP

   H04N 23/60 20230101ALI20240910BHJP

   G06T 15/20 20110101ALN20240910BHJP

【ＦＩ】

G06T19/00 A

H04N21/258

H04N23/60 500

H04N23/60 300

G06T15/20 500

【審査請求】有

【請求項の数】25

【出願形態】ＯＬ

(21)【出願番号】P 2024099945

(22)【出願日】2024-06-20

(62)【分割の表示】P 2022553508の分割

【原出願日】2021-08-03

(31)【優先権主張番号】P 2020163978

(32)【優先日】2020-09-29

(33)【優先権主張国・地域又は機関】JP

(71)【出願人】

【識別番号】306037311

【氏名又は名称】富士フイルム株式会社

(74)【代理人】

【識別番号】110001519

【氏名又は名称】弁理士法人太陽国際特許事務所

(72)【発明者】

【氏名】青木 貴嗣

(72)【発明者】

【氏名】入江 史憲

(72)【発明者】

【氏名】田村 一紀

(72)【発明者】

【氏名】宮田 真彦

(72)【発明者】

【氏名】村上 泰規

(57)【要約】      （修正有）

【課題】仮想視点画像の再生履歴及び／又は登録データに関する第１データのみがデバイスで用いられる場合に比べ、観賞者が意図する仮想視点画像を観賞者に対して選択させ易くすることができるデータ処理装置、データ処理方法及びプログラムを提供する。
【解決手段】ＬＡＮ又はＷＡＮ等の通信網を介して複数のユーザデバイス１２と通信を行うデータ処理装置であって、データ処理装置の動画生成部は、各ユーザデバイスからの要求に応じて、複数の撮像画像に基づいて生成された仮想視点画像を、ユーザデバイスに送信し、仮想視点画像の再生履歴及び／又は登録データに関する第１データを取得し、取得した第１データに基づいて、仮想視点画像に関する第２データをデバイスに送信する制御を行う。
【選択図】図４

【特許請求の範囲】

【請求項1】

プロセッサと、
前記プロセッサに内蔵又は接続されたメモリと、を備え、
撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理装置であって、
前記プロセッサは、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データを取得し、
取得した前記第１データに基づいて、前記仮想視点画像に関する第２データを前記デバイスに送信する制御を行う
データ処理装置。

【請求項2】

前記プロセッサは、前記第１データに関連する前記仮想視点画像である第１仮想視点画像とは異なる前記仮想視点画像である第２仮想視点画像に関する前記第２データを送信する制御を行う請求項１に記載のデータ処理装置。

【請求項3】

前記第１データは、前記仮想視点画像の視点に関連する視点関連情報を含む請求項２に記載のデータ処理装置。

【請求項4】

前記視点関連情報は、視点位置、視線方向、画角、注視点、前記視点位置の時間経過に応じた変位を示す視点位置パス、及び前記注視点の時間経過に応じた変位を示す注視点パスのうちの少なくとも１つを含む請求項３に記載のデータ処理装置。

【請求項5】

前記第１データは、前記仮想視点画像を生成するのに用いられた前記撮像画像の撮像時刻に関する第１時刻情報を含む請求項４に記載のデータ処理装置。

【請求項6】

前記第２データは、前記仮想視点画像の縮小画像、及び、前記視点関連情報のうちの少なくとも一方を含む請求項５に記載のデータ処理装置。

【請求項7】

前記第２データは、前記第１データに含まれる前記視点関連情報と前記視点関連情報に関する類似度が高く、かつ、前記第１データに含まれる前記第１時刻情報と前記第１時刻情報に関する類似度が低い順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６に記載のデータ処理装置。

【請求項8】

前記第２データは、前記第１データに含まれる前記視点関連情報と前記視点関連情報に関する類似度が低く、かつ、前記第１データに含まれる前記第１時刻情報と前記第１時刻情報に関する類似度が高い順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６に記載のデータ処理装置。

【請求項9】

前記プロセッサは、前記第１データに含まれる前記視点関連情報と前記第２データに含まれる前記視点関連情報との間での前記視点位置パス又は前記注視点パスの位置の違いに基づいて、前記視点関連情報に関する前記類似度を取得する請求項７又は請求項８に記載のデータ処理装置。

【請求項10】

前記プロセッサは、前記視点位置パス又は前記注視点パスに付与されたタグの違いに基づいて、前記視点関連情報に関する前記類似度を取得する請求項７又は請求項８に記載のデータ処理装置。

【請求項11】

前記第２データは、前記デバイスを用いて前記第１仮想視点画像を観賞した観賞者の属性と、前記第２仮想視点画像の作者の属性との類似度に基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１０の何れか一項に記載のデータ処理装置。

【請求項12】

前記第２データは、前記デバイスを用いて前記第１仮想視点画像を観賞した観賞者による前記仮想視点画像の前記再生履歴と、他の観賞者による前記仮想視点画像の前記再生履歴との違いに基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１１の何れか一項に記載のデータ処理装置。

【請求項13】

前記第２データは、前記デバイスを用いて前記第１仮想視点画像を観賞した観賞者による前記仮想視点画像の前記再生履歴から抽出した再生傾向に基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１２の何れか一項に記載のデータ処理装置。

【請求項14】

前記第２データは、複数の前記第２仮想視点画像の各々に付与されたコメントに基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１３の何れか一項に記載のデータ処理装置。

【請求項15】

前記コメントは、前記第２データに含まれる視点位置の時間経過に応じた変位を示す視点位置パス、又は、前記第２データに含まれる注視点の時間経過に応じた変位を示す注視点パスに付与されたコメントであり、
前記第２データは、前記視点位置パスの形又は前記注視点パスの形に前記コメントが付与された画像が前記デバイスに表示されるデータである
請求項１４に記載のデータ処理装置。

【請求項16】

前記第２データは、複数の前記第２仮想視点画像の各々に付与された第１評価に基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１５の何れか一項に記載のデータ処理装置。

【請求項17】

前記第２データは、前記第１仮想視点画像に対する第２評価に基づいて推定された観賞者の趣向に応じて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１６の何れか一項に記載のデータ処理装置。

【請求項18】

前記第２データは、新たな仮想視点画像が追加された場合に、前記第１データに基づいて、追加された前記仮想視点画像に関する前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１７の何れか一項に記載のデータ処理装置。

【請求項19】

前記仮想視点画像は動画であり、
前記第２データは、前記第１仮想視点画像の再生開始から終了までの時間に対する、前記第１データに含まれる視点位置の時間経過に応じた変位を示す視点位置パスの長さ、又は、前記第１データに含まれる注視点の時間経過に応じた変位を示す注視点パスの長さに基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１８の何れか一項に記載のデータ処理装置。

【請求項20】

前記仮想視点画像は動画であり、
前記第２データは、前記第２仮想視点画像を生成するのに用いられた前記撮像画像の撮像時刻に関する第２時刻情報と、前記第２仮想視点画像の再生開始から終了までの時間との比に基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項１９の何れか一項に記載のデータ処理装置。

【請求項21】

前記第２データは、複数の前記第２仮想視点画像の各々のデータ容量に基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項２０の何れか一項に記載のデータ処理装置。

【請求項22】

前記第２データは、複数の前記第２仮想視点画像の各々の画質に関するパラメータに基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項２１の何れか一項に記載のデータ処理装置。

【請求項23】

前記第２データは、前記第２仮想視点画像に付与された音声データに基づいて定められた順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項６から請求項２２の何れか一項に記載のデータ処理装置。

【請求項24】

前記第２データは、前記プロセッサが前記第２仮想視点画像の再生を指示する再生指示を受け付けたことを条件に前記デバイスで順次再生される複数の前記第２仮想視点画像が、前記デバイスで再生されるデータである請求項２から請求項２３の何れか一項に記載のデータ処理装置。

【請求項25】

前記第２データは、前記複数の第２仮想視点画像の各々の再生が終了する毎に、前記第１仮想視点画像及び前記第２仮想視点画像とは異なる第１画像が前記デバイスで再生されるデータである請求項２４に記載のデータ処理装置。

【請求項26】

前記第２データは、前記第２仮想視点画像を再生する条件となる第２画像が前記デバイスで再生されるデータである請求項２から請求項２５の何れか一項に記載のデータ処理装置。

【請求項27】

前記第２データは、前記デバイスに送信された前記第２画像の内容に関する画像情報に基づいて、前記第２仮想視点画像を再生する条件となる第３画像が前記デバイスで再生されるデータである請求項２６に記載のデータ処理装置。

【請求項28】

前記第２データは、複数の前記第２仮想視点画像のうち、与えられた指示に従って選択された第２仮想視点画像に、他の第２仮想視点画像に係る視点位置の時間経過に応じた変位を示す視点位置パス、又は注視点の時間経過に応じた変位を示す注視点パスを合成した合成画像が前記デバイスで再生されるデータである請求項２から請求項２７の何れか一項に記載のデータ処理装置。

【請求項29】

前記視点位置パス又は前記注視点パスに対するパス変更指示を受け付けた場合、前記第２データは、前記合成画像の再生を止めて、前記パス変更指示に含まれる前記視点位置パス又は前記注視点パスに対応する前記第２仮想視点画像が前記デバイスで再生されるデータである請求項２８に記載のデータ処理装置。

【請求項30】

前記デバイスで再生中の前記第２仮想視点画像の視点に関連する視点関連情報に対する変更指示を受け付けた場合、前記第２データは、前記変更指示に基づいて導出された新たな視点関連情報に基づいて生成された仮想視点画像が前記デバイスで再生されるデータである請求項２から請求項２９の何れか一項に記載のデータ処理装置。

【請求項31】

前記デバイスで再生中の前記第２仮想視点画像に対するリプレイ画像生成指示が受け付けられた場合、前記第２データは、前記第２仮想視点画像の視点に関連する視点関連情報に基づいて生成された新たな視点関連情報に基づいて生成された仮想視点画像が前記デバイスで再生されるデータである請求項２から請求項３０の何れか一項に記載のデータ処理装置。

【請求項32】

観賞を拒否する被写体に関する観賞拒否被写体情報が受け付けられた場合、前記第２データは、前記観賞拒否被写体情報に基づいて生成した視点関連情報に基づいて生成した仮想視点画像が前記デバイスで再生されるデータである請求項２から請求項３１の何れか一項に記載のデータ処理装置。

【請求項33】

前記第２仮想視点画像は、複数フレームの画像を含む動画であり、
前記第２仮想視点画像の縮小画像であって前記第２データに含まれる縮小画像に対するダイジェスト画像表示指示が受け付けられた場合、前記第２データは、前記第２仮想視点画像から、視点位置が既定間隔で異なる前記複数フレームの画像を抽出することによって生成されるダイジェスト画像が前記デバイスで再生されるデータである請求項２から請求項３２の何れか一項に記載のデータ処理装置。

【請求項34】

前記プロセッサは、前記第１仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、前記第１仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形が前記第２データに対応付けられて表示されるパス画像を、前記デバイスに送信する制御を行い、
前記パス画像は、前記視点位置パスの形又は前記注視点パスの形が、前記第２データと区別可能な態様で示されている画像である
請求項２から請求項３３の何れか一項に記載のデータ処理装置。

【請求項35】

前記第２データは、前記第２仮想視点画像の縮小画像と、前記第２仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、前記第２仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形と、を含み、
前記第２データは、前記縮小画像の前記視点位置パス又は前記注視点パス上での位置を特定可能な第１位置情報を含む請求項２から請求項３４の何れか一項に記載のデータ処理装置。

【請求項36】

前記第２データは、前記第２仮想視点画像に関する前記第２データが、時系列で横方向に配置され、かつ、前記第１仮想視点画像の視点関連情報に対する前記第２仮想視点画像の視点関連情報の類似度に応じて縦方向に配置される第２位置情報を含む請求項２から請求項３５の何れか一項に記載のデータ処理装置。

【請求項37】

前記登録データは、前記第１仮想視点画像を観賞した観賞者の属性を示す属性データ、及び、前記観賞者の趣向を示す趣向データを含む請求項２から請求項３６の何れか一項に記載のデータ処理装置。

【請求項38】

前記第２データは、前記属性データに基づいて、前記仮想視点画像のうちの観賞制限対象とされた仮想視点画像に関するデータが除外されたデータである請求項３７に記載のデータ処理装置。

【請求項39】

前記仮想視点画像を生成するのに用いられた前記撮像画像の撮像時刻に関する第３時刻情報に対する時刻設定指示が受け付けられた場合、前記第２データは、複数の前記第２仮想視点画像のうち、前記第３時刻情報が前記時刻設定指示によって示される範囲内である第２仮想視点画像に関するデータである請求項２から請求項３８の何れか一項に記載のデータ処理装置。

【請求項40】

前記時刻設定指示が受け付けられた場合、前記第２データは、前記仮想視点画像のうちの前記第３時刻情報が前記時刻設定指示によって示される範囲内である時刻限定仮想視点画像の画像数と、前記時刻限定仮想視点画像のうちの前記第２仮想視点画像に含まれる画像数とを含む請求項３９に記載のデータ処理装置。

【請求項41】

前記プロセッサは、
前記仮想視点画像の観賞者に対して関連付けられたアカウントへの前記仮想視点画像の再生履歴を取得可能であり、
前記再生履歴を、前記仮想視点画像の視点に関連する視点関連情報と対応付けて出力可能である
請求項１から請求項４０の何れか一項に記載のデータ処理装置。

【請求項42】

前記プロセッサは、
各々の前記仮想視点画像が何回再生されたかを集計可能であり、
集計結果を、前記仮想視点画像の視点に関連する視点関連情報と対応付けて出力可能である
請求項１から請求項４１の何れか一項に記載のデータ処理装置。

【請求項43】

前記プロセッサは、前記仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、前記仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形が前記第２データに対応付けて表示されるパス画像を、前記デバイスに送信する制御を行い、
前記パス画像は、前記視点位置パス又は前記注視点パスのうちの前記仮想視点画像を再生済みの部分と未再生の部分とが区別可能な態様で示されている画像である
請求項１から請求項４２の何れか一項に記載のデータ処理装置。

【請求項44】

第１仮想視点画像は、前記仮想視点画像のうちの少なくとも一部が前記デバイスで再生済みの仮想視点画像を含む請求項１から請求項４３の何れか一項に記載のデータ処理装置。

【請求項45】

プロセッサと、
前記プロセッサに内蔵又は接続されたメモリと、を備え、
撮像画像に基づいて生成された複数の仮想視点画像をデバイスに送信するデータ処理装置であって、
前記プロセッサは、
前記複数の仮想視点画像のうち、前記デバイスに少なくとも一部が送信済みの仮想視点画像である第１仮想視点画像に関する第１データを取得し、
取得した前記第１データに基づいて、前記複数の仮想視点画像のうち、前記デバイスに未送信の仮想視点画像である第２仮想視点画像に関する第２データを前記デバイスに送信する制御を行う
データ処理装置。

【請求項46】

撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理方法であって、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データを取得すること、並びに、
取得した前記第１データに基づいて、前記仮想視点画像に関する第２データを前記デバイスに送信する制御を行うこと
を含むデータ処理方法。

【請求項47】

撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理をコンピュータに実行させるためのプログラムであって、
前記データ処理は、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データを取得すること、並びに、
取得した前記第１データに基づいて、前記仮想視点画像に関する第２データを前記デバイスに送信する制御を行うことを含む処理である
プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示の技術は、データ処理装置、データ処理方法、及びプログラムに関する。

【背景技術】

【0002】

特開２０２０－００９０２１号公報には、設定手段と生成手段とを備えることを特徴とするデータ処理装置が開示されている。設定手段は、複数のカメラから得られる多視点画像に基づく仮想視点画像の生成に係る第１仮想視点位置を設定する。生成手段は、設定手段により設定された第１仮想視点位置とは位置及び向きの少なくとも何れかが異なる第２仮想視点位置であって第１仮想視点位置と共通の時刻に対応する第２仮想視点位置を示す視点位置情報を、設定手段により設定された第１仮想視点位置に基づいて生成する。

【0003】

特開２０１８－０３６９５６号公報には、受付手段と表示制御手段とを有することを特徴する表示制御装置が開示されている。受付手段は、ユーザの操作に応じて仮想視点位置を受け付ける。表示制御手段は、仮想視点位置に基づいて、撮像画像から生成された第１の仮想視点画像と、第１の仮想視点画像に比べて仮想的な撮影範囲の広い、第２の仮想視点画像とが表示画面上に表示されるよう制御する。

【0004】

特開２０１５－１８７７９７号公報には、少なくとも一つ以上の視点位置から撮影された視点画像データを取得し、取得した視点画像データを使用して、任意の視点位置からの画像の再生を可能とした自由視点画像データを生成する画像データ生成装置が開示されている。画像データ生成装置は、オブジェクト配置データ生成部と、自由視点位置メタデータ生成部と、符号化部と、多重化部と、を具備することを特徴とする。オブジェクト配置データ生成部は、背景をモデル化して画像データとして作成した背景モデルデータにおけるオブジェクトの配置位置を示すオブジェクト座標データを生成する。自由視点位置メタデータ生成部は、視点位置の基点となる位置を示す視点位置座標データと、視点位置の方向の初期位置を示し、かつ視点位置を回転させて自由視点位置表示を行う際の回転中心を示す回転基点データとをそれぞれ少なくとも一つ以上含む推奨視点位置配置データを生成し、さらに、オブジェクト座標データと、推奨視点位置配置データから、自由視点位置メタデータを生成する。符号化部は、視点画像データ、及び視点画像データにおける各オブジェクトの領域を識別するための領域画像データを符号化する。多重化部は、自由視点位置メタデータ、視点画像データ、領域画像データ、及び背景モデルデータを多重化し、自由視点画像データを生成する。

【発明の概要】

【0005】

本開示の技術に係る一つの実施形態は、仮想視点画像の再生履歴及び／又は登録データに関する第１データのみがデバイスで用いられる場合に比べ、観賞者が意図する仮想視点画像を観賞者に対して選択させ易くすることができるデータ処理装置、データ処理方法、及びプログラムを提供する。

【課題を解決するための手段】

【0006】

本開示の技術に係る第１の態様は、プロセッサと、プロセッサに内蔵又は接続されたメモリと、を備え、撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理装置であって、プロセッサが、仮想視点画像の再生履歴及び／又は登録データに関する第１データを取得し、取得した第１データに基づいて、仮想視点画像に関する第２データをデバイスに送信する制御を行うデータ処理装置である。

【0007】

本開示の技術に係る第２の態様は、プロセッサが、第１データに関連する仮想視点画像である第１仮想視点画像とは異なる仮想視点画像である第２仮想視点画像に関する第２データを送信する制御を行う第１の態様に係るデータ処理装置である。

【0008】

本開示の技術に係る第３の態様は、第１データが、仮想視点画像の視点に関連する視点関連情報を含む第２の態様に係るデータ処理装置である。

【0009】

本開示の技術に係る第４の態様は、視点関連情報が、視点位置、視線方向、画角、注視点、視点位置の時間経過に応じた変位を示す視点位置パス、及び注視点の時間経過に応じた変位を示す注視点パスのうちの少なくとも１つを含む第３の態様に係るデータ処理装置である。

【0010】

本開示の技術に係る第５の態様は、第１データが、仮想視点画像を生成するのに用いられた撮像画像の撮像時刻に関する第１時刻情報を含む第４の態様に係るデータ処理装置である。

【0011】

本開示の技術に係る第６の態様は、第２データが、仮想視点画像の縮小画像、及び、視点関連情報のうちの少なくとも一方を含む第５の態様に係るデータ処理装置である。

【0012】

本開示の技術に係る第７の態様は、第２データが、第１データに含まれる視点関連情報と視点関連情報に関する類似度が高く、かつ、第１データに含まれる第１時刻情報と第１時刻情報に関する類似度が低い順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様に係るデータ処理装置である。

【0013】

本開示の技術に係る第８の態様は、第２データが、第１データに含まれる視点関連情報と視点関連情報に関する類似度が低く、かつ、第１データに含まれる第１時刻情報と第１時刻情報に関する類似度が高い順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様に係るデータ処理装置である。

【0014】

本開示の技術に係る第９の態様は、プロセッサが、第１データに含まれる視点関連情報と第２データに含まれる視点関連情報との間での視点位置パス又は注視点パスの位置の違いに基づいて、視点関連情報に関する類似度を取得する第７の態様又は第８の態様に係るデータ処理装置である。

【0015】

本開示の技術に係る第１０の態様は、プロセッサが、視点位置パス又は注視点パスに付与されたタグの違いに基づいて視点関連情報に関する類似度を取得する第７の態様又は第８の態様に係るデータ処理装置である。

【0016】

本開示の技術に係る第１１の態様は、第２データが、デバイスを用いて第１仮想視点画像を観賞した観賞者の属性と、第２仮想視点画像の作者の属性との類似度に基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１０の態様のうち何れか１つの態様に係るデータ処理装置である。

【0017】

本開示の技術に係る第１２の態様は、第２データが、デバイスを用いて第１仮想視点画像を観賞した観賞者による仮想視点画像の再生履歴と、他の観賞者による仮想視点画像の再生履歴との違いに基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１１の態様のうち何れか１つの態様に係るデータ処理装置である。

【0018】

本開示の技術に係る第１３の態様は、第２データが、デバイスを用いて第１仮想視点画像を観賞した観賞者による仮想視点画像の再生履歴から抽出した再生傾向に基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１２の態様のうち何れか１つの態様に係るデータ処理装置である。

【0019】

本開示の技術に係る第１４の態様は、第２データが、複数の第２仮想視点画像の各々に付与されたコメントに基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１３の態様のうち何れか１つの態様に係るデータ処理装置である。

【0020】

本開示の技術に係る第１５の態様は、コメントが、第２データに含まれる視点位置の時間経過に応じた変位を示す視点位置パス、又は、第２データに含まれる注視点の時間経過に応じた変位を示す注視点パスに付与されたコメントであり、第２データが、視点位置パスの形又は注視点パスの形にコメントが付与された画像がデバイスに表示されるデータである第１４の態様に係るデータ処理装置である。

【0021】

本開示の技術に係る第１６の態様は、第２データが、複数の第２仮想視点画像の各々に付与された第１評価に基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１５の態様のうち何れか１つの態様に係るデータ処理装置である。

【0022】

本開示の技術に係る第１７の態様は、第２データが、第１仮想視点画像に対する第２評価に基づいて推定された観賞者の趣向に応じて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１６の態様のうち何れか１つの態様に係るデータ処理装置である。

【0023】

本開示の技術に係る第１８の態様は、第２データが、新たな仮想視点画像が追加された場合に、第１データに基づいて、追加された仮想視点画像に関する縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１７の態様のうち何れか１つの態様に係るデータ処理装置である。

【0024】

本開示の技術に係る第１９の態様は、仮想視点画像が動画であり、第２データが、第１仮想視点画像の再生開始から終了までの時間に対する、第１データに含まれる視点位置の時間経過に応じた変位を示す視点位置パスの長さ、又は、第１データに含まれる注視点の時間経過に応じた変位を示す注視点パスの長さに基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１８の態様のうち何れか１つの態様に係るデータ処理装置である。

【0025】

本開示の技術に係る第２０の態様は、仮想視点画像が動画であり、第２データが、第２仮想視点画像を生成するのに用いられた撮像画像の撮像時刻に関する第２時刻情報と、第２仮想視点画像の再生開始から終了までの時間との比に基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第１９の態様のうち何れか１つの態様に係るデータ処理装置である。

【0026】

本開示の技術に係る第２１の態様は、第２データが、複数の第２仮想視点画像の各々のデータ容量に基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第２０の態様のうち何れか１つの態様に係るデータ処理装置である。

【0027】

本開示の技術に係る第２２の態様は、第２データが、複数の第２仮想視点画像の各々の画質に関するパラメータに基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第２１の態様のうち何れか１つの態様に係るデータ処理装置である。

【0028】

本開示の技術に係る第２３の態様は、第２データが、第２仮想視点画像に付与された音声データに基づいて定められた順に、縮小画像、及び、視点関連情報のうちの少なくとも一方がデバイスに表示されるデータである第６の態様から第２２の態様のうち何れか１つの態様に係るデータ処理装置である。

【0029】

本開示の技術に係る第２４の態様は、第２データが、プロセッサが第２仮想視点画像の再生を指示する再生指示を受け付けたことを条件にデバイス順次にで再生される複数の第２仮想視点画像が、デバイスで再生されるデータである第６の態様から第２３の態様のうち何れか１つの態様に係るデータ処理装置である。

【0030】

本開示の技術に係る第２５の態様は、第２データが、複数の第２仮想視点画像の各々の再生が終了する毎に、第１仮想視点画像及び第２仮想視点画像とは異なる第１画像がデバイスで再生されるデータである第２４の態様に係るデータ処理装置である。

【0031】

本開示の技術に係る第２６の態様は、第２データが、第２仮想視点画像を再生する条件となる第２画像がデバイスで再生されるデータである第２の態様から第２５の態様のうち何れか１つの態様に係るデータ処理装置である。

【0032】

本開示の技術に係る第２７の態様は、第２データが、デバイスに送信された第２画像の内容に関する画像情報に基づいて、第２仮想視点画像を再生する条件となる第３画像がデバイスで再生されるデータである第２６の態様に係るデータ処理装置である。

【0033】

本開示の技術に係る第２８の態様は、第２データが、複数の第２仮想視点画像のうち、与えられた指示に従って選択された第２仮想視点画像に、他の第２仮想視点画像に係る視点位置の時間経過に応じた変位を示す視点位置パス、又は注視点の時間経過に応じた変位を示す注視点パスを合成した合成画像がデバイスで再生されるデータである第２の態様から第２７の態様のうち何れか１つの態様に係るデータ処理装置である。

【0034】

本開示の技術に係る第２９の態様は、視点位置パス又は注視点パスに対するパス変更指示を受け付けた場合、第２データが、合成画像の再生を止めて、パス変更指示に含まれる視点位置パス又は注視点パスに対応する第２仮想視点画像がデバイスで再生されるデータである第２８の態様に係るデータ処理装置である。

【0035】

本開示の技術に係る第３０の態様は、デバイスで再生中の第２仮想視点画像の視点に関連する視点関連情報に対する変更指示を受け付けた場合、第２データが、変更指示に基づいて導出された新たな視点関連情報に基づいて生成された仮想視点画像がデバイスで再生されるデータである第２の態様から第２９の態様のうち何れか１つの態様に係るデータ処理装置である。

【0036】

本開示の技術に係る第３１の態様は、デバイスで再生中の第２仮想視点画像に対するリプレイ画像生成指示が受け付けられた場合、第２データが、第２仮想視点画像の視点に関連する視点関連情報に基づいて生成された新たな視点関連情報に基づいて生成された仮想視点画像がデバイスで再生されるデータである第２の態様から第３０の態様のうち何れか１つの態様に係るデータ処理装置である。

【0037】

本開示の技術に係る第３２の態様は、観賞を拒否する被写体に関する観賞拒否被写体情報が受け付けられた場合、第２データが、観賞拒否被写体情報に基づいて生成した視点関連情報に基づいて生成した仮想視点画像がデバイスで再生されるデータである第２の態様から第３１の態様のうち何れか１つの態様に係るデータ処理装置である。

【0038】

本開示の技術に係る第３３の態様は、第２仮想視点画像が、複数フレームの画像を含む動画であり、第２仮想視点画像の縮小画像であって第２データに含まれる縮小画像に対するダイジェスト画像表示指示が受け付けられた場合、第２データが、第２仮想視点画像から、視点位置が既定間隔で異なる複数フレームの画像を抽出することによって生成されるダイジェスト画像がデバイスで再生されるデータである第２の態様から第３２の態様のうち何れか１つの態様に係るデータ処理装置である。

【0039】

本開示の技術に係る第３４の態様は、プロセッサが、第１仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、第１仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形が第２データに対応付けられて表示されるパス画像を、デバイスに送信する制御を行い、パス画像が、視点位置パスの形又は注視点パスの形が、第２データと区別可能な態様で示されている画像である第２の態様から第３３の態様のうち何れか１つの態様に係るデータ処理装置である。

【0040】

本開示の技術に係る第３５の態様は、第２データが、第２仮想視点画像の縮小画像と、第２仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、第２仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形と、を含み、第２データが、縮小画像の視点位置パス又は注視点パス上での位置を特定可能な第１位置情報を含む第２の態様から第３４の態様のうち何れか１つの態様に係るデータ処理装置である。

【0041】

本開示の技術に係る第３６の態様は、第２データが、第２仮想視点画像に関する第２データが、時系列で横方向に配置され、かつ、第１仮想視点画像の視点関連情報に対する第２仮想視点画像の視点関連情報の類似度に応じて縦方向に配置される第２位置情報を含む第２の態様から第３５の態様のうち何れか１つの態様に係るデータ処理装置である。

【0042】

本開示の技術に係る第３７の態様は、登録データが、第１仮想視点画像を観賞した観賞者の属性を示す属性データ、及び、観賞者の趣向を示す趣向データを含む第２の態様から第３６の態様のうち何れか１つの態様に係るデータ処理装置である。

【0043】

本開示の技術に係る第３８の態様は、第２データが、属性データに基づいて、仮想視点画像のうちの観賞制限対象とされた仮想視点画像に関するデータが除外されたデータである第３７の態様に係るデータ処理装置である。

【0044】

本開示の技術に係る第３９の態様は、仮想視点画像を生成するのに用いられた撮像画像の撮像時刻に関する第３時刻情報に対する時刻設定指示が受け付けられた場合、第２データが、複数の第２仮想視点画像のうち、第３時刻情報が時刻設定指示によって示される範囲内である第２仮想視点画像に関するデータである第２の態様から第３８の態様のうち何れか１つの態様に係るデータ処理装置である。

【0045】

本開示の技術に係る第４０の態様は、時刻設定指示が受け付けられた場合、第２データが、仮想視点画像のうちの第３時刻情報が時刻設定指示によって示される範囲内である時刻限定仮想視点画像の画像数と、時刻限定仮想視点画像のうちの第２仮想視点画像に含まれる画像数とを含む第３９の態様に係るデータ処理装置である。

【0046】

本開示の技術に係る第４１の態様は、プロセッサが、仮想視点画像の観賞者に対して関連付けられたアカウントへの仮想視点画像の再生履歴を取得可能であり、再生履歴を、仮想視点画像の視点に関連する視点関連情報と対応付けて出力可能である第１の態様から第４０の態様のうち何れか１つの態様に係るデータ処理装置である。

【0047】

本開示の技術に係る第４２の態様は、プロセッサが、各々の仮想視点画像が何回再生されたかを集計可能であり、集計結果を、仮想視点画像の視点に関連する視点関連情報と対応付けて出力可能である第１の態様から第４１の態様のうち何れか１つの態様に係るデータ処理装置である。

【0048】

本開示の技術に係る第４３の態様は、プロセッサが、仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形が第２データに対応付けて表示されるパス画像を、デバイスに送信する制御を行い、パス画像が、視点位置パス又は注視点パスのうちの仮想視点画像を再生済みの部分と未再生の部分とが区別可能な態様で示されている画像である第１の態様から第４２の態様のうち何れか１つの態様に係るデータ処理装置である。

【0049】

本開示の技術に係る第４４の態様は、第１仮想視点画像が、仮想視点画像のうちの少なくとも一部がデバイスで再生済みの仮想視点画像を含む第１の態様から第４３の態様のうち何れか１つの態様に係るデータ処理装置である。

【0050】

本開示の技術に係る第４５の態様は、プロセッサと、プロセッサに内蔵又は接続されたメモリと、を備え、撮像画像に基づいて生成された複数の仮想視点画像をデバイスに送信するデータ処理装置であって、プロセッサが、複数の仮想視点画像のうち、デバイスに少なくとも一部が送信済みの仮想視点画像である第１仮想視点画像に関する第１データを取得し、取得した第１データに基づいて、複数の仮想視点画像のうち、デバイスに未送信の仮想視点画像である第２仮想視点画像に関する第２データをデバイスに送信する制御を行うデータ処理装置である。

【0051】

本開示の技術に係る第４６の態様は、撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理方法であって、仮想視点画像の再生履歴及び／又は登録データに関する第１データを取得すること、並びに、取得した第１データに基づいて、仮想視点画像に関する第２データをデバイスに送信する制御を行うことを含むデータ処理方法である。

【0052】

本開示の技術に係る第４７の態様は、撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理をコンピュータに実行させるためのプログラムであって、データ処理が、仮想視点画像の再生履歴及び／又は登録データに関する第１データを取得すること、並びに、取得した第１データに基づいて、仮想視点画像に関する第２データをデバイスに送信する制御を行うことを含む処理であるプログラムである。

【図面の簡単な説明】

【0053】

【図1】データ処理装置と、ユーザデバイスとの関係の一例を示す概念図である。

【図2】データ処理装置の電気的ハードウェア構成の一例、及びユーザデバイスとの関係の一例を示すブロック図である。

【図3】データ処理装置に表示されたメニュー画面の一例を示す概念図である。

【図4】第１実施形態による動画生成部の要部機能の一例を示すブロック図である。

【図5】第１実施形態による生成動画リストの一例を示す概念図である。

【図6】第１実施形態による再生済み動画リストの一例を示す概念図である。

【図7】第１実施形態による動画再生部の要部機能の一例を示す概念図である。

【図8】第１実施形態による動画再生部の要部機能の一例を示す概念図である。

【図9】第１実施形態によるお勧め動画リストの一例を示す概念図である。

【図10】ユーザデバイスに表示された第１実施形態によるお勧め画面の一例を示す概念図である。

【図11】第１実施形態による動画再生部の要部機能の一例を示す概念図である。

【図12】再生済みの仮想視点動画が第１実施形態による再生済み動画リストに追加された態様の一例を示す概念図である。

【図13】第１実施形態による動画生成処理の流れの一例を示すフローチャートである。

【図14】第１実施形態による動画再生処理の流れの一例を示すフローチャートである。

【図15】第２実施形態による視点関連情報受付画面で設定された視点位置パス、注視点、及び画角の一例を示す概念図である。

【図16】第２実施形態による生成動画リストの一例を示す概念図である。

【図17】第２実施形態による再生済み動画リストの一例を示す概念図である。

【図18】第２実施形態による動画再生部の要部機能の一例を示す概念図である。

【図19】ユーザデバイスに表示された第２実施形態によるお勧め画面の一例を示す概念図である。

【図20】第２実施形態による動画再生部の要部機能の一例を示す概念図である。

【図21】ユーザデバイスに、ダイジェスト画像が表示される態様の一例を示す概念図である。

【図22】視点位置パスに付与されたタグの一例を示す概念図である。

【図23】ユーザデバイスに表示された第２実施形態によるお勧め画面に、再生済みの仮想視点動画に係る視点位置パスの形が表示される態様の一例を示す概念図である。

【図24】ユーザデバイスに表示された第２実施形態によるお勧め画面の他の一例を示す概念図である。

【図25】ユーザデバイスに表示された第２実施形態によるお勧め画面のさらに他の一例を示す概念図である。

【図26】アカウントに対応付けて登録された属性データを用いてお勧めデータを生成する態様の一例を示す概念図である。

【図27】再生済み動画リストに示された再生傾向に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図28】再生済み動画リストに示された再生履歴に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図29】視点位置パスに付与されたコメントに基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図30】視点位置パスに付与されたコメントに基づいて生成されたお勧めデータを示すお勧め画面の一例を示す概念図である。

【図31】仮想視点動画を観賞したユーザから仮想視点動画に付与された評価に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図32】動画再生指示の送信元であるユーザデバイスを使用するユーザ自らが、観賞済みの仮想視点動画に対して付与した評価に基づいて、お勧めデータを生成する態様の一例を示す概念図である。

【図33】ユーザの趣向データに基づいて、仮想視点動画が新たに追加されたことを知らせる態様の一例を示す概念図である。

【図34】動画の長さに対する視点位置パスの比に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図35】動画の長さに対する試合経過時間の長さの比に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図36】動画の長さに対する試合経過時間の長さの比に基づいて生成したお勧めデータを示すお勧め画面の一例を示す概念図である。

【図37】仮想視点動画のデータ容量に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図38】仮想視点動画の解像度に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図39】仮想視点動画に付与された音声データの有無に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図40】仮想視点動画が順次再生される態様の一例を示す概念図である。

【図41】仮想視点動画が順次再生される場合に、仮想視点動画の間に別の動画が挿入される態様の一例を示す概念図である。

【図42】仮想視点動画が順次再生される場合に、仮想視点動画の間に広告動画が挿入される態様の一例を示す概念図である。

【図43】仮想視点動画の再生中に広告動画が表示される態様の一例を示す概念図である。

【図44】広告情報に基づいて広告動画が変更される態様の一例を示す概念図である。

【図45】ユーザデバイスに合成動画を表示する態様の一例を示す概念図である。

【図46】パス変更指示に基づいて、ユーザデバイスに表示された仮想視点動画を他の視点位置パスを有する仮想視点動画に切り換える態様の一例を示す概念図である。

【図47】視点位置変更指示に基づいて、ユーザデバイスに表示された仮想視点動画の視点位置を切り換える態様の一例を示す概念図である。

【図48】リプレイ動画生成指示に基づいて、リプレイ動画が再生される態様の一例を示す概念図である。

【図49】観賞拒否被写体情報に対応する新たな視点位置パスに基づいて生成された仮想視点動画が再生される態様の一例を示す概念図である。

【図50】ユーザの属性データに基づいて仮想視点動画の再生を制限する態様の一例を示す概念図である。

【図51】時刻設定指示に基づいてお勧めデータを生成する態様の一例を示す概念図である。

【図52】時刻設定指示に基づいて生成されたお勧めデータを示すお勧め画面の一例を示す概念図である。

【図53】途中で再生を注視した仮想視点動画が再生済み動画リストに追加される態様の一例を示す概念図である。

【図54】観賞データを含む生成動画リストの一例を示す概念図である。

【図55】タブレット端末に表示された管理画面の一例を示す概念図である。

【図56】各ユーザのユーザデバイスに表示された管理画面の一例を示す概念図である。

【図57】記憶媒体に記憶された作動プログラムがデータ処理装置のコンピュータにインストールされる態様の一例を示す概念図である。

【発明を実施するための形態】

【0054】

添付図面に従って本開示の技術に係るデータ処理装置、データ処理方法、及びプログラムの実施形態の一例について説明する。

【0055】

先ず、以下の説明で使用される文言について説明する。

【0056】

ＣＰＵとは、“Central Processing Unit”の略称を指す。ＲＡＭとは、“Random Access Memory”の略称を指す。ＳＳＤとは、“Solid State Drive”の略称を指す。ＨＤＤとは、“Hard Disk Drive”の略称を指す。ＥＥＰＲＯＭとは、“Electrically Erasable and Programmable Read Only Memory”の略称を指す。Ｉ／Ｆとは、“Interface”の略称を指す。ＩＣとは、“Integrated Circuit”の略称を指す。ＡＳＩＣとは、“Application Specific Integrated Circuit”の略称を指す。ＰＬＤとは、“Programmable Logic Device”の略称を指す。ＦＰＧＡとは、“Field-Programmable Gate Array”の略称を指す。ＧＵＩとは、“Graphical User Interface”の略称を指す。ＳｏＣとは、“System-on-a-chip”の略称を指す。ＧＰＵとは、“Graphics Processing Unit”の略称を指す。ＬＡＮとは、“Local Area Network”の略称を指す。ＷＡＮとは、“Wide Area Network”の略称を指す。３Ｄとは、“3 Dimensions”の略称を指す。ＵＳＢとは、“Universal Serial Bus”の略称を指す。ＩＤとは、“Identification”の略称を指す。ＮＶＭとは、“Non-volatile Memory”の略称を指す。以下では、説明の便宜上、本開示の技術に係る「プロセッサ」の一例として、ＣＰＵを例示しているが、本開示の技術に係る「プロセッサ」は、ＣＰＵ及びＧＰＵ等のように複数の処理装置の組み合わせであってもよい。本開示の技術に係る「プロセッサ」の一例として、ＣＰＵ及びＧＰＵの組み合わせが適用される場合、ＧＰＵは、ＣＰＵの制御下で動作し、画像処理の実行を担う。

【0057】

以下の説明において、「一致」とは、完全な一致の他に、本開示の技術が属する技術分野で一般的に許容される誤差であって、本開示の技術の趣旨に反しない程度の誤差を含めた意味合いでの一致を指す。

【0058】

［第１実施形態］
一例として図１に示すように、データ処理装置１０は、ＬＡＮ又はＷＡＮ等の通信網を介して複数のユーザデバイス１２と通信を行う。データ処理装置１０は、各ユーザデバイス１２からの要求に応じて、動画生成処理と動画再生処理とを行う。なお、図１に示す例では、ユーザデバイス１２としてスマートデバイスが図示されているが、ユーザデバイス１２はこれに限らず、例えば、パーソナル・コンピュータ、タブレット端末、又はインターネット通信機能付きのテレビ等であってもよい。データ処理装置１０は、本開示の技術に係る「データ処理装置」の一例である。ユーザデバイス１２は、本開示の技術に係る「デバイス」の一例である。

【0059】

動画生成処理は、各ユーザデバイス１２からの動画生成要求５０（図３参照）に応じて仮想視点動画３０を生成し、生成した仮想視点動画３０のデータを要求元であるユーザデバイス１２に送信する処理である。以下、特に断りが無い場合、データ処理装置１０の内部、ユーザデバイス１２の内部、及びデータ処理装置１０とユーザデバイス１２との間ではデータが送受信される。仮想視点動画３０は、要求元であるユーザデバイス１２に送信されるのに加えて、データ処理装置１０内のデータベース２２（図２参照）に記憶される。仮想視点動画３０は、撮像領域を仮想的な視点から観察した場合の動画であり、３Ｄポリゴンによって生成される仮想的な動画である。なお、仮想視点動画３０は、本開示の技術に係る「仮想視点画像」の一例である。

【0060】

動画再生処理は、データベース２２に記憶された複数の仮想視点動画３０のうち、動画再生要求５２（図３参照）を受け付けたユーザデバイス１２に未送信の仮想視点動画３０（以下、「未送信仮想視点動画３０」とも称する）に関するデータを生成し、生成したデータを要求元であるユーザデバイス１２に送信する処理である。本第１実施形態では、「未送信仮想視点動画３０に関するデータ」の一例として、ユーザによる仮想視点動画３０の選択を簡便にするお勧めデータ３２を生成する形態例について説明する。なお、未送信仮想視点動画３０は、本開示の技術に係る「第２仮想視点画像」の一例である。また、お勧めデータ３２は、本開示の技術に係る「第２データ」の一例である。

【0061】

ユーザデバイス１２は、データ処理装置１０から受信した仮想視点動画３０をタッチパネル・ディスプレイ１２Ａに設けられた動画再生画面３３で再生する。また、ユーザデバイス１２は、お勧めデータ３２をタッチパネル・ディスプレイ１２Ａの動画再生画面３３の下に表示させる。データ処理装置１０はサーバに相当するデバイスであり、ユーザデバイス１２は、データ処理装置１０に対するクライアント端末に相当するデバイスである。

【0062】

複数のユーザデバイス１２は、複数のユーザＡ、Ｂ、・・・Ｚによってそれぞれ使用されている。ユーザＡ、Ｂ、・・・Ｚは、各々、データ処理装置１０から受信した仮想視点動画３０を、ユーザデバイス１２を用いて観賞する。ユーザＡ、Ｂ、・・・Ｚは、本開示の技術に係る「観賞者」の一例である。以下、ユーザＡ、Ｂ、・・・Ｚを区別して説明する必要がない場合には、符号を付けず、包括的に「ユーザ」と称する。

【0063】

一例として図２に示すように、データ処理装置１０は、コンピュータ１４と通信Ｉ／Ｆ１６とを備えている。コンピュータ１４は、ＣＰＵ１４Ａ、ＮＶＭ１４Ｂ、及びＲＡＭ１４Ｃを備えており、ＣＰＵ１４Ａ、ＮＶＭ１４Ｂ、ＲＡＭ１４Ｃは、バス２０を介して接続されている。図２に示す例では、図示の都合上、バス２０として１本のバスが図示されているが、複数のバスであってもよい。また、バス２０には、シリアルバス、又は、データバス、アドレスバス、及びコントロールバス等で構成されるパラレルバスが含まれていてもよい。

【0064】

ＣＰＵ１４Ａは、データ処理装置１０の全体を制御する。ＮＶＭ１４Ｂは、不揮発性メモリである。ここでは、ＮＶＭ１４Ｂの一例として、ＥＥＰＲＯＭ、ＳＳＤ及びＨＤＤが採用されているが、これに限らず、ＨＤＤ、ＳＳＤ、又はＥＥＰＲＯＭ等であってもよいし、複数の不揮発性メモリの組み合わせであってもよい。ＮＶＭ１４Ｂは、データ処理装置１０で生成した仮想視点動画３０等を記憶するデータベース２２を含んでいる。なお、ＮＶＭ１４Ｂは、本開示の技術に係る「メモリ」の一例である。

【0065】

ＲＡＭ１４Ｃには、各種データが一時的に記憶される。ＲＡＭ１４Ｃは、ＣＰＵ１４Ａによってワークメモリとして用いられる。

【0066】

ＮＶＭ１４Ｂには、作動プログラム２４が記憶されている。ＣＰＵ１４Ａは、ＮＶＭ１４Ｂから作動プログラム２４を読み出し、読み出した作動プログラム２４をＲＡＭ１４Ｃ上で実行する。ＣＰＵ１４Ａは、ＲＡＭ１４Ｃ上で実行する作動プログラム２４に従って、動画生成部２６として動作することにより動画生成処理を実行し、動画再生部２８として動作することにより動画再生処理を実行する。なお、作動プログラム２４は、本開示の技術に係る「プログラム」の一例である。コンピュータ１４は、本開示の技術に係る「コンピュータ」の一例である。また、ＣＰＵ１４Ａは、本開示の技術に係る「プロセッサ」の一例である。

【0067】

動画生成部２６は、各ユーザデバイス１２からの要求に応じて、複数の撮像装置（図示省略）を用いて撮像領域を複数の方向から撮像することで得られた撮像動画３４（図４参照）に基づいて、仮想視点動画３０を生成する。なお、動画生成部２６は、仮想視点動画３０を自身で生成する代わりに、外部のサーバ等で生成された仮想視点動画３０を取得してもよい。図２に示す例では、複数の撮像装置は、サッカー競技場に設置されており、サッカー競技場内の領域を撮像領域として撮像する。仮想視点動画３０は、サッカー競技場内の任意の視点からサッカー競技場を観察した場合の動画である。動画生成部２６は、生成した仮想視点動画３０をデータベース２２に記憶する。データベース２２には、複数のユーザデバイス１２からの要求に応じて動画生成部２６により生成された複数の仮想視点動画３０が記憶されている。

【0068】

動画再生部２８は、各ユーザデバイス１２からの要求に応じて、データベース２２に記憶された複数の仮想視点動画３０のうちの未送信仮想視点動画３０に関するお勧めデータ３２を生成する。動画再生部２８は、生成したお勧めデータ３２をデータベース２２に記憶する。

【0069】

通信Ｉ／Ｆ１６は、通信網を介して、ユーザデバイス１２と通信可能に接続されている。通信Ｉ／Ｆ１６は、例えば、ＦＰＧＡを有するデバイスによって実現される。通信Ｉ／Ｆ１６は、バス２０に接続されている。通信Ｉ／Ｆ１６は、無線通信方式で、ＣＰＵ１４Ａとユーザデバイス１２との間で各種データの授受を司る。なお、通信Ｉ／Ｆ１６は、ＦＰＧＡの代わりに固定回路で構成することも可能である。また、通信Ｉ／Ｆ１６は、ＡＳＩＣ、ＦＰＧＡ、及び／又はＰＬＤ等で構成された回路であってもよい。

【0070】

ＣＰＵ１４Ａは、仮想視点動画３０及びお勧めデータ３２をデータベース２２から読み出し、読み出した仮想視点動画３０及びお勧めデータ３２を通信Ｉ／Ｆ１６を介してユーザデバイス１２に送信する。ユーザデバイス１２は、仮想視点動画３０及びお勧めデータ３２を受信し、受信した仮想視点動画３０をタッチパネル・ディスプレイ１２Ａの動画再生画面３３で再生し、かつ、タッチパネル・ディスプレイ１２Ａに対して、受信したお勧めデータ３２を表示させる。図２に示す例では、お勧めデータ３２は動画再生画面３３の下に表示されている。なお、本開示の技術において、「再生」とは、ユーザデバイス１２のタッチパネル・ディスプレイ１２Ａの動画再生画面３３に画像を表示させる処理を指す。タッチパネル・ディスプレイ１２Ａ上で再生する画像は、仮想視点動画３０に限らず、他の動画であってもよいし、静止画であってもよい。

【0071】

動画再生画面３３の下には、仮想視点動画３０の送信状況及び再生箇所を示すシークバー３１が表示されている。シークバー３１の横方向の長さは、再生中の仮想視点動画３０の長さに相当する。シークバー３１のうち、濃い色で示された再生箇所表示部分３１Ａは、動画再生画面３３で再生している仮想視点動画３０の再生箇所を示す。シークバー３１のうち、再生箇所表示部分３１Ａよりも薄い色で示された送信状況表示部分３１Ｂは、動画再生画面３３で再生している仮想視点動画３０に係るデータ処理装置１０からユーザデバイス１２へのデータ送信状況を示す。

【0072】

一例として図３に示すように、ユーザデバイス１２に対するユーザの操作によって、ユーザデバイス１２が、各ユーザに関連付けられたアカウントでデータ処理装置１０にアクセスし、ユーザデバイス１２とデータ処理装置１０との通信が確立されると、データ処理装置１０は、ユーザデバイス１２にメニュー画面４０を送信する。ユーザデバイス１２は、データ処理装置１０から受信したメニュー画面４０をタッチパネル・ディスプレイ１２Ａに表示させる。なお、各ユーザに関連付けられたアカウントは、本開示の技術に係る「アカウント」の一例である。

【0073】

メニュー画面４０には、仮想視点動画３０の生成及び観賞が可能なイベントのタイトル４２、及びイベントが行われた日付４４が表示されている。また、メニュー画面４０には、生成ボタン４６及び観賞ボタン４８が表示されている。

【0074】

ユーザデバイス１２は、ユーザによる生成ボタン４６に対するＧＵＩ操作を受け付けた場合、仮想視点動画３０の生成を要求する動画生成要求５０を動画生成部２６に送信する。動画生成部２６は、ユーザデバイス１２から動画生成要求５０を受け付けた場合に、動画生成処理を開始する。また、ユーザデバイス１２は、ユーザによる観賞ボタン４８に対するＧＵＩ操作を受け付けた場合、動画の再生を要求する動画再生要求５２を動画再生部２８に送信する。動画再生部２８は、ユーザデバイス１２から動画再生要求５２を受け付けた場合に、動画再生処理を開始する。

【0075】

図４を参照して、動画生成部２６によって行われる動画生成処理の一例について、以下、具体的に説明する。動画生成部２６は、ユーザデバイス１２から動画生成要求５０を受け付けた場合、視点関連情報受付画面５４を生成する。動画生成部２６は、生成した視点関連情報受付画面５４を、動画生成要求５０の出力元であるユーザデバイス１２に送信する。ユーザデバイス１２は、視点関連情報受付画面５４を受信し、受信した視点関連情報受付画面５４をタッチパネル・ディスプレイ１２Ａに表示させる。

【0076】

視点関連情報受付画面５４は、仮想視点動画３０の視点に関連する視点関連情報５８の受け付けに用いられる画面である。本第１実施形態において、視点関連情報５８は、仮想的な視点に関する視点位置、視線方向、及び画角を含むデータである。なお、視点関連情報５８は、本開示の技術に係る「視点関連情報」の一例である。

【0077】

視点関連情報受付画面５４には、サッカー競技場の俯瞰画像５６が表示されている。俯瞰画像５６は、サッカー競技場を真上又は斜め上から実際に撮像することで得られた画像であってもよいし、サッカー競技場の縦横比に基づいて疑似的に生成した画像であってもよい。俯瞰画像５６は、サッカー競技場と相似関係にある画像であり、相似比は、例えば、数百：１である。

【0078】

タッチパネル・ディスプレイ１２Ａは、視点関連情報受付画面５４に対するユーザからの操作を受け付ける。ユーザは、仮想的な視点位置、視線方向、及び画角を視点関連情報受付画面５４上で指示する。ユーザデバイス１２は、俯瞰画像５６に対して指示された視点位置の座標に基づいて、サッカー競技場に対する視点位置５８Ａ（図５参照）の座標を導出する。また、ユーザデバイス１２は、俯瞰画像５６に対する視線方向の指示に基づいて、サッカー競技場における視線方向５８Ｂ（図５参照）を導出する。また、ユーザデバイス１２は、俯瞰画像５６に対する画角の指示に基づいて、サッカー競技場における画角５８Ｃ（図５参照）を導出する。ユーザデバイス１２は、導出した視点位置５８Ａ、視線方向５８Ｂ、及び画角５８Ｃを、視点関連情報５８として動画生成部２６に送信する。

【0079】

動画生成部２６は、視点関連情報５８を受け付け、受け付けた視点関連情報５８をデータベース２２の生成動画リスト６０に記録する。また、動画生成部２６は、受け付けた視点関連情報５８に基づき、撮像動画３４を用いて仮想視点動画３０を生成する。具体的には、動画生成部２６は、視点位置５８Ａから視線方向５８Ｂに画角５８Ｃで撮像領域を観察した仮想視点動画３０を生成する。なお、視点位置５８Ａは、本開示の技術に係る「視
点位置」の一例である。また、視線方向５８Ｂは、本開示の技術に係る「視線方向」の一例である。また、画角５８Ｃは、本開示の技術に係る「画角」の一例である。

【0080】

動画生成部２６は、生成した仮想視点動画３０に関する動画情報６２を、仮想視点動画３０を生成するのに使用した視点関連情報５８に対応付けて、データベース２２の生成動画リスト６０に記録する。また、動画生成部２６は、生成した仮想視点動画３０をデータベース２２に記憶する。

【0081】

動画生成部２６は、生成した仮想視点動画３０を、動画生成要求５０の出力元であるユーザデバイス１２に送信する。ユーザデバイス１２は、仮想視点動画３０を受信し、受信した仮想視点動画３０をタッチパネル・ディスプレイ１２Ａに表示させる。動画生成部２６は、送信した仮想視点動画３０に関する視点関連情報５８及び動画情報６２を、データベース２２に記憶されている複数の再生済み動画リスト６４のうち、仮想視点動画３０を送信したユーザデバイス１２を使用するユーザのアカウントに対応する再生済み動画リスト６４に追加する。以下、視点関連情報５８及び動画情報６２を包括的に「情報」とも称する。

【0082】

一例として図５に示すように、生成動画リスト６０には、動画生成部２６によって生成された複数の仮想視点動画３０に関する視点関連情報５８及び動画情報６２が、リスト形式で記録されている。視点関連情報５８は、仮想視点動画３０の視点位置５８Ａ、視線方向５８Ｂ、及び画角５８Ｃを含む。動画情報６２は、仮想視点動画３０毎に割り当てられた動画ＩＤ６２Ａ、仮想視点動画３０の作者６２Ｂ、仮想視点動画３０に対応するサッカーの試合経過時間６２Ｃ、動画の長さ６２Ｄ、及び仮想視点動画３０のサムネイル画像６２Ｅを含む。

【0083】

試合経過時間６２Ｃは、仮想視点動画３０を生成するのに用いられた撮像動画３４の撮像時刻に基づいて算出された時間である。具体的には、仮想視点動画３０を生成するのに用いられた撮像動画３４のうち、最初のフレームの撮像画像の撮像時刻から試合開始時刻を引いた値が、試合経過時間６２Ｃの開始時間となり、最後のフレームの撮像画像の撮像時刻から試合開始時刻を引いた値が、試合経過時間６２Ｃの終了時間となる。なお、試合経過時間６２Ｃは、本開示の技術に係る「第１時刻情報」の一例である。

【0084】

一例として図６に示すように、再生済み動画リスト６４は、ユーザのアカウント毎に生成されるリストである。例えば、図６はユーザＡの再生済み動画リスト６４であり、アカウント６４Ａの欄にはユーザＡのアカウント名「Ａ」が記録されている。図６に示す再生済み動画リスト６４には、ユーザＡのアカウントでデータ処理装置１０にアクセスしているユーザデバイス１２で再生済みの仮想視点動画３０、すなわち、ユーザＡが観賞済みの仮想視点動画３０に関するデータがリスト形式で記録されている。

【0085】

また、再生済み動画リスト６４は、ユーザＡのアカウントでデータ処理装置１０にアクセスしているユーザデバイス１２に関する仮想視点動画３０の再生履歴を示している。なお、「再生」とは、ユーザデバイス１２のタッチパネル・ディスプレイ１２Ａの動画再生画面３３に画像を表示させる処理であるので、「ユーザデバイス１２に関する仮想視点動画３０の再生履歴」は「タッチパネル・ディスプレイ１２Ａの動画再生画面３３による仮想視点動画３０の表示履歴」と同義である。再生済み動画リスト６４に記録された再生履歴は、本開示の技術に係る「再生履歴」の一例である。また、再生済み動画リスト６４に記録された内容は、本開示の技術に係る「第１データ」の一例である。

【0086】

図７を参照して、動画再生部２８によって行われる動画再生処理の一例について、以下、具体的に説明する。動画再生部２８は、例えば、ユーザＡのユーザデバイス１２から動画再生要求５２を受け付けた場合、ユーザＡのアカウントに対応する再生済み動画リスト６４をデータベース２２から読み出す。ユーザＡのアカウントに対応する再生済み動画リスト６４には、「００１」の画像ＩＤ６２Ａを有する仮想視点動画３０（以下、「仮想視点動画３０－００１」と称する）に関する情報が記録されている。なお、仮想視点動画３０－００１は、本開示の技術に係る「第１仮想視点画像」の一例である。

【0087】

動画再生部２８は、データベース２２から生成動画リスト６０を読み出す。生成動画リスト６０には、動画生成部２６で作成された仮想視点動画３０に関するデータが記録されている（図５参照）。動画再生部２８は、再生済み動画リスト６４に記録されている仮想視点動画３０－００１に関する情報を、生成動画リスト６０から削除する。これにより、生成動画リスト６０には、仮想視点動画３０－００１とは異なる仮想視点動画３０に関する情報、すなわち、ユーザデバイス１２に未送信の仮想視点動画３０（未送信仮想視点動画３０）に関する情報が残る。なお、未送信仮想視点動画３０は、本開示の技術に係る「第２仮想視点画像」の一例である。また、再生済み動画リスト６４に記録されている仮想視点動画３０－００１に関する情報は、必ずしも生成動画リスト６０から削除される必要はなく、仮想視点動画３０－００１に関する情報に、送信済みという情報を付加して未送信の仮想視点動画３０と区別してもよい。

【0088】

動画再生部２８は、生成動画リスト６０に残された各々の未送信仮想視点動画３０の視点位置５８Ａと、再生済み動画リスト６４に記録された仮想視点動画３０－００１の視点位置５８Ａ（以下、「基準視点位置」と称する）との間の視点位置差を算出する。例えば、動画再生部２８は、「００２」の動画ＩＤ６２Ａを有する未送信仮想視点動画３０（以下、「未送信仮想視点動画３０－００２」と称する）の視点位置５８Ａを示す座標（Ｘ２，Ｙ２）と、基準視点位置の座標（Ｘ１，Ｙ１）とを取得する。動画再生部２８は、Ｘ２とＸ１との差を取ることによって、未送信仮想視点動画３０－００２の視点位置５８Ａと基準視点位置との間のＸ軸方向における差（以下、「Ｘ軸方向視点位置差」と称する）を算出する。また、動画再生部２８は、Ｙ２とＹ１との差を取ることによって、未送信仮想視点動画３０－００２の視点位置５８Ａと基準視点位置との間のＹ軸方向における差（以下、「Ｙ軸方向視点位置差」と称する）を算出する。動画再生部２８は、Ｘ軸方向視点位置差とＹ軸方向視点位置差の和を、未送信仮想視点動画３０－００２の視点位置差として算出する。

【0089】

動画再生部２８は、「００３」の動画ＩＤ６２Ａを有する仮想視点動画３０（以下、「未送信仮想視点動画３０－００３」と称する）の視点位置５８Ａと基準視点位置との視点位置差を同様に算出する。動画再生部２８は、視点位置差が小さい順に、すなわち、基準視点位置との類似度が高い順に、未送信仮想視点動画３０を生成動画リスト６０で並べ替える。例えば、未送信仮想視点動画３０－００２の視点位置差が８であり、未送信仮想視点動画３０－００３の視点位置差が６である場合、動画再生部２８は、未送信仮想視点動画３０－００３を、未送信仮想視点動画３０－００２よりも生成動画リスト６０の上位に移動する。

【0090】

また、一例として図８に示すように、動画再生部２８は、視点位置差が同じ未送信仮想視点動画３０について、各未送信仮想視点動画３０の視線方向５８Ｂと仮想視点動画３０－００１の視線方向５８Ｂ（以下、「基準視線方向」と称する）との差（以下、「視線方向差」）を算出する。動画再生部２８は、視点位置差が同じ未送信仮想視点動画３０について、視線方向差が小さい順に、すなわち、基準視線方向との類似度が高い順に、未送信仮想視点動画３０を生成動画リスト６０で並べ替える。

【0091】

動画再生部２８は、さらに、未送信仮想視点動画３０の試合経過時間６２Ｃと、再生済み動画リスト６４に記録された仮想視点動画３０－００１の試合経過時間６２Ｃ（以下、「基準試合経過時間」と称する）とを比較する。動画再生部２８は、試合経過時間６２Ｃが、既定値（例えば、数十秒）以上にわたって基準試合経過時間に重複している未送信仮想視点動画３０を、生成動画リスト６０の最下位へ移動させる。すなわち、動画再生部２８は、基準試合経過時間と類似度が高い試合経過時間６２Ｃを有する未送信仮想視点動画３０を、生成動画リスト６０の最下位へ移動させる。例えば、本第１実施形態では、仮想視点動画３０－００３の試合経過時間６２Ｃは、２５秒間にわたって基準試合経過時間に重複している。従って、動画再生部２８は、仮想視点動画３０－００３を、生成動画リスト６０の最下位へ移動させる。

【0092】

動画再生部２８は、並べ替え後の生成動画リスト６０を、お勧め動画リスト６６としてデータベース２２に記憶する。動画再生部２８は、お勧め動画リスト６６に記録された未送信仮想視点動画３０の並び順に、未送信仮想視点動画３０に関する動画情報６２に基づいて、お勧めデータ３２を生成する。

【0093】

一例として図９に示すように、お勧め動画リスト６６には、未送信仮想視点動画３０に関する情報が、お勧め順に記録されている。動画再生部２８は、データベース２２から、お勧め動画リスト６６に記録された未送信仮想視点動画３０に関する動画情報６２を、お勧め動画リスト６６に記録された未送信仮想視点動画３０の並び順に５つずつ読み出す。動画再生部２８は、データベース２２から読み出した５つの未送信仮想視点動画３０に関する動画情報６２と、動画情報６２に含まれる動画ＩＤ６２Ａ、作者６２Ｂ、試合経過時間６２Ｃ、動画の長さ６２Ｄ、及びサムネイル画像６２Ｅの配置情報とを含むお勧めデータ３２を生成する。動画再生部２８は、生成したお勧めデータ３２をユーザデバイス１２に送信する。ユーザデバイス１２は、お勧めデータ３２を受信し、受信したお勧めデータ３２をお勧め画面７０（図１０参照）としてタッチパネル・ディスプレイ１２Ａに表示させる。

【0094】

一例として図１０に示すように、お勧め画面７０には、お勧めデータ３２が表示される。お勧め画面７０には、５つの未送信仮想視点動画３０に関する動画情報６２が表示される。なお、お勧め画面７０に表示される未送信仮想視点動画３０の数は５つに限らず、ユーザが任意に設定できてもよい。お勧め画面７０において、サムネイル画像６２Ｅはお勧め画面７０の左側に配置されている。各サムネイル画像６２Ｅの右下には、対応する未送信仮想視点動画３０の長さ６２Ｄが配置されている。作者６２Ｂ、動画ＩＤ６２Ａ、及び試合経過時間６２Ｃは、対応するサムネイル画像６２Ｅの右側に配置されている。なお、サムネイル画像６２Ｅは、本開示の技術に係る「縮小画像」の一例である。

【0095】

お勧め画面７０の右下には、更新ボタン６８が配置されている。ユーザがタッチパネル・ディスプレイ１２Ａ上で更新ボタン６８に接触した場合、ユーザデバイス１２は、動画再生部２８に対してお勧めデータ３２の更新指示を与える。動画再生部２８は、ユーザデバイス１２から更新指示を受け付けて、次の５つの未送信仮想視点動画３０に関する動画情報６２、すなわち、６番目から１０番目に記録された未送信仮想視点動画３０に関する動画情報６２に基づいてお勧めデータ３２を生成する。動画再生部２８は、生成したお勧めデータ３２をユーザデバイス１２に送信する。

【0096】

ユーザがお勧め画面７０に表示されたサムネイル画像６２Ｅに接触した場合、一例として図１１に示すように、ユーザデバイス１２は、接触されたサムネイル画像６２Ｅに対応する未送信仮想視点動画３０に対する再生指示７２を動画再生部２８に送信する。動画再生部２８は、対象の未送信仮想視点動画３０をデータベース２２から読み出す。動画再生部２８は、データベース２２から読み出した未送信仮想視点動画３０を、再生指示７２の出力元であるユーザデバイス１２に送信する。ユーザデバイス１２は、未送信仮想視点動画３０を受信し、受信した仮想視点動画３０をタッチパネル・ディスプレイ１２Ａで再生する。なお、再生指示７２は、本開示の技術に係る「再生指示」の一例である。

【0097】

動画再生部２８は、ユーザデバイス１２に送信した仮想視点動画３０に関する情報を、ユーザデバイス１２を使用しているユーザのアカウントに対応する再生済み動画リスト６４に追加する。これにより、一例として図１２に示すように、例えば、ユーザＡのアカウントでデータ処理装置１０にアクセスしているユーザデバイス１２から与えられた再生指示７２に応じて、再生指示７２の送信元であるユーザデバイス１２に仮想視点動画３０－００２が送信された場合、ユーザＡのアカウントに対応する再生済み動画リスト６４には、仮想視点動画３０－００２に関するデータが追加される。

【0098】

図１２に示す例のように、再生済み動画リスト６４に複数の仮想視点動画３０に関する情報が含まれる場合、動画再生部２８は、再生済み動画リスト６４に含まれる複数の仮想視点動画３０のうちの最も遅く再生済み動画リスト６４に追加された仮想視点動画３０－００２に関する情報（以下、「基準情報」と称する）を基準にして、お勧め動画リスト６６を生成する。なお、最も遅く再生済み動画リスト６４に追加された仮想視点動画３０－００２に関する情報を基準にすることに代えて、複数の仮想視点動画３０を基準にしてお勧め動画リスト６６を生成してもよい。

【0099】

次に、本第１実施形態に係る動画生成部２６の作用について、図１３を参照しながら説明する。図１３に示す動画生成処理は、ＣＰＵ１４Ａが、作動プログラム２４を実行することで実現される。また、図１３に示す動画生成処理は、動画生成部２６が、複数のユーザデバイス１２のうちの少なくとも１つから動画生成要求５０を受信した場合に開始される。

【0100】

図１３に示す動画生成処理では、先ず、ステップＳＴ１０１で、動画生成部２６は、視点関連情報受付画面５４を生成し、生成した視点関連情報受付画面５４を、動画生成要求５０の出力元であるユーザデバイス１２に送信する。ユーザデバイス１２は、視点関連情報受付画面５４を受信し、受信した視点関連情報受付画面５４をタッチパネル・ディスプレイ１２Ａに表示させる。この後、動画生成処理はステップＳＴ１０２に移行する。

【0101】

ステップＳＴ１０２で、動画生成部２６は、視点関連情報受付画面５４を送信したユーザデバイス１２から視点関連情報５８を受け付けたか否かを判定する。ステップＳＴ１０２において、視点関連情報５８を受け付けた場合、判定が肯定されて動画生成処理はステップＳＴ１０３に移行する。ステップＳＴ１０２において、視点関連情報５８を受け付けていない場合、判定が否定されて動画生成処理はステップＳＴ１０２に移行する。

【0102】

ステップＳＴ１０３で、動画生成部２６は、ユーザデバイス１２から受け付けた視点関連情報５８をデータベース２２の生成動画リスト６０に記憶する。この後、動画生成処理はステップＳＴ１０４に移行する。

【0103】

ステップＳＴ１０４で、動画生成部２６は、ユーザデバイス１２から受け付けた視点関連情報５８に基づいて、仮想視点動画３０を生成する。この後、動画生成処理はステップＳＴ１０５に移行する。

【0104】

ステップＳＴ１０５で、動画生成部２６は、生成した仮想視点動画３０に関する動画情報６２を、視点関連情報５８に対応付けて、データベース２２の生成動画リスト６０に記憶する。この後、動画生成処理はステップＳＴ１０６に移行する。

【0105】

ステップＳＴ１０６で、動画生成部２６は、生成した仮想視点動画３０をデータベース２２に記憶する。この後、動画生成処理はステップＳＴ１０７に移行する。

【0106】

ステップＳＴ１０７で、動画生成部２６は、生成した仮想視点動画３０を、動画生成要求５０の出力元であるユーザデバイス１２に送信する。ユーザデバイス１２は、仮想視点動画３０を受信し、受信した仮想視点動画３０を動画再生画面３３で再生する。この後、動画生成処理はステップＳＴ１０８に移行する。

【0107】

ステップＳＴ１０８で、動画生成部２６は、動画生成要求５０の出力元であるユーザデバイス１２を使用するユーザのアカウントに対応する再生済み動画リスト６４に、生成した仮想視点動画３０を追加する。この後、動画生成処理はステップＳＴ１０９に移行する。

【0108】

ステップＳＴ１０９で、動画生成部２６は、終了条件を満足しているか否かを判定する。終了条件としては、例えば、ユーザデバイス１２から動画生成停止要求を受信した場合が挙げられる。ステップＳＴ１０９において、終了条件を満足している場合、判定が肯定されて、動画生成処理は終了する。ステップＳＴ１０９において、終了条件を満足していない場合、判定が否定されて動画生成処理はステップＳＴ１０１に移行する。

【0109】

次に、本第１実施形態に係る動画再生部２８の作用について、図１４を参照しながら説明する。図１４に示す動画再生処理は、ＣＰＵ１４Ａが、作動プログラム２４を実行することで実現される。また、図１４に示す動画再生処理は、動画再生部２８が、複数のユーザデバイス１２のうちの少なくとも１つから動画再生要求５２を受信した場合に開始される。

【0110】

図１４に示す動画再生処理では、先ず、ステップＳＴ２０１で、動画再生部２８は、生成動画リスト６０、及び、動画再生要求５２の出力元であるユーザデバイス１２を使用しているユーザのアカウントに対応する再生済み動画リスト６４をデータベース２２から読み出す。この後、動画再生処理は、ステップＳＴ２０２に移行する。

【0111】

ステップＳＴ２０２で、動画再生部２８は、生成動画リスト６０から、再生済み動画リスト６４に記憶されている仮想視点動画３０に関する情報を削除する。この後、動画再生処理はステップＳＴ２０３に移行する。

【0112】

ステップＳＴ２０３で、動画再生部２８は、再生済み動画リスト６４から基準情報を取得し、取得した基準情報に基づいて、生成動画リスト６０内の仮想視点動画３０を並べ替える。動画再生部２８は、並べ替え後の生成動画リスト６０を、お勧め動画リスト６６としてデータベース２２に記憶する。この後、動画再生処理はステップＳＴ２０４に移行する。

【0113】

ステップＳＴ２０４で、動画再生部２８は、Ｎ＝０に設定する。この後、動画再生処理はステップＳＴ２０５に移行する。

【0114】

ステップＳＴ２０５で、動画再生部２８は、お勧め動画リスト６６の５Ｎ＋１番目から５（Ｎ＋１）番目までの仮想視点動画３０の動画情報６２に基づいて、お勧めデータ３２を生成する。つまり、Ｎ＝０の場合、動画再生部２８は、お勧め動画リスト６６の１番目から５番目までの仮想視点動画３０の動画情報６２に基づいて、お勧めデータ３２を生成する。動画再生部２８は、生成したお勧めデータ３２をユーザデバイス１２に送信する。この後、動画再生処理はステップＳＴ２０６に移行する。

【0115】

ステップＳＴ２０６で、動画再生部２８は、ユーザデバイス１２から、お勧めデータ３２に含まれる５つの仮想視点動画３０のうちの何れかに対する再生指示７２を受け付けたか否かを判定する。再生指示７２を受け付けた場合、動画再生処理はステップＳＴ２０９に移行する。再生指示７２を受け付けていない場合、動画再生処理はステップＳＴ２０７に移行する。

【0116】

ステップＳＴ２０７で、動画再生部２８は、ユーザデバイス１２から更新指示を受け付けたか否かを判定する。ステップＳＴ２０７において、更新指示を受け付けた場合、判定が肯定されて、動画再生処理はステップＳＴ２０８に移行する。ステップＳＴ２０７において、更新指示を受け付けていない場合、判定が否定されて、動画再生処理はステップＳＴ２０６に移行する。

【0117】

ステップＳＴ２０８で、動画再生部２８はＮを１だけインクリメントする。この後、動画再生処理はステップＳＴ２０５に移行する。

【0118】

ステップＳＴ２０９で、動画再生部２８は、再生指示７２によって指示された仮想視点動画３０をデータベース２２から読み出す。動画再生部２８は、データベース２２から読み出した仮想視点動画３０をユーザデバイス１２に送信する。この後、動画再生処理はステップＳＴ２１０に移行する。

【0119】

ステップＳＴ２１０で、動画再生部２８は、ユーザデバイス１２に送信された仮想視点動画３０に関する情報を再生済み動画リスト６４に追加する。この後、動画再生処理はステップＳＴ２１１に移行する。

【0120】

ステップＳＴ２１１で、動画再生部２８は、終了条件を満足しているか否かを判定する。終了条件としては、例えば、ユーザデバイス１２から動画観賞停止要求を受信した場合が挙げられる。ステップＳＴ２１１において、終了条件を満足している場合、判定が肯定されて、動画再生処理は終了する。ステップＳＴ２１１において、終了条件を満足していない場合、判定が否定されて、動画再生処理はステップＳＴ２０１に移行する。

【0121】

以上説明したように、本第１実施形態において、データ処理装置１０は、撮像動画３４に基づいて生成された仮想視点動画３０をユーザデバイス１２に送信する。動画再生部２８は、あるユーザのアカウントでデータ処理装置１０にアクセスしているユーザデバイス１２から動画再生要求５２を受け付けた場合、要求元のアカウントに対応する再生済み動画リスト６４をデータベース２２から読み出す。動画再生部２８は、取得した再生済み動画リスト６４に含まれる視点関連情報５８と試合経過時間６２Ｃとに基づいて、未送信仮想視点動画３０に関するお勧めデータ３２を生成する。動画再生部２８は、生成したお勧めデータ３２をユーザデバイス１２に送信する。従って、本構成によれば、再生済み動画リスト６４のみがユーザデバイス１２で用いられる場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0122】

また、本第１実施形態において、動画再生部２８は、再生済み動画リスト６４に記録された仮想視点動画３０とは異なる未送信仮想視点動画３０に関するお勧めデータ３２を送信する制御を行う。従って、本構成によれば、再生済み動画リスト６４のみがユーザデバイス１２で用いられる場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0123】

また、本第１実施形態において、再生済み動画リスト６４は、仮想視点動画３０の視点に関連する視点関連情報５８を含む。従って、本構成によれば、再生済み動画リスト６４が、視点関連情報５８と何ら関係ない情報を含む場合に比べ、未送信仮想視点動画３０のうち、視点関連情報５８と関連性のある仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0124】

また、本第１実施形態において、視点関連情報５８は、視点位置５８Ａ、視線方向５８Ｂ、及び画角５８Ｃを含む。従って、本構成によれば、視点関連情報５８が、視点位置５８Ａ、視線方向５８Ｂ、及び画角５８Ｃの何れとも関係ない情報を含む場合に比べ、未送信仮想視点動画３０のうち、視点位置５８Ａ、視線方向５８Ｂ、及び画角５８Ｃのうちの少なくとも１つと関連性のある仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0125】

また、本第１実施形態において、再生済み動画リスト６４は、仮想視点動画３０を生成するのに用いられた撮像動画３４の撮像時刻に関する試合経過時間６２Ｃを含む。従って、本構成によれば、再生済み動画リスト６４が、撮像動画３４の撮像時刻と何ら関係ない情報を含む場合に比べ、未送信仮想視点動画３０のうち、撮像動画３４の撮像時刻と関連性のある仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0126】

また、本第１実施形態において、お勧めデータ３２は、再生済み動画リスト６４に含まれる視点関連情報５８と視点関連情報５８に関する類似度が高く、かつ、再生済み動画リスト６４に含まれる試合経過時間６２Ｃと試合経過時間６２Ｃに関する類似度が低い順に、未送信仮想視点動画３０のサムネイル画像６２Ｅがユーザデバイス１２に表示されるデータである。従って、本構成によれば、未送信仮想視点動画３０に関するサムネイル画像６２Ｅがランダムにユーザデバイス１２に表示される場合に比べ、再生済み動画リスト６４に含まれる視点関連情報５８と視点関連情報５８に関する類似度が高く、かつ、再生済み動画リスト６４に含まれる試合経過時間６２Ｃと試合経過時間６２Ｃに関する類似度が低い仮想視点動画３０を、ユーザに対して選択させ易くすることができる。

【0127】

また、本第１実施形態において、データ処理装置１０は、撮像動画３４に基づいて生成された複数の仮想視点動画３０をユーザデバイス１２に送信する。動画再生部２８は、ユーザデバイス１２から動画再生要求５２を受け付けた場合、複数の仮想視点動画３０のうち、動画再生要求５２の送信元であるユーザデバイス１２に少なくとも一部が送信済みの仮想視点動画３０に関する情報を再生済み動画リスト６４から取得する。動画再生部２８は、取得した情報に基づいて、複数の仮想視点動画３０のうち、要求元であるユーザデバイス１２に未送信の仮想視点動画３０（未送信仮想視点動画３０）に関する情報を、お勧めデータ３２として生成する。動画再生部２８は、生成したお勧めデータ３２を、要求元であるユーザデバイス１２に送信する。従って、本構成によれば、再生済み動画リスト６４のみがユーザデバイス１２で用いられる場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0128】

［第２実施形態］
上記第１実施形態では、視点関連情報５８が、視点位置５８Ａ、視線方向５８Ｂ、及び画角５８Ｃを含む形態例について説明したが、本第２実施形態では、視点関連情報５８が、視点位置５８Ａ及び視線方向５８Ｂの代わりに、視点位置パス５８Ｄ及び注視点５８Ｅを含む形態例について説明する。また、上記第１実施形態では、動画再生部２８は、再生済み動画リスト６４に含まれる視点関連情報５８と視点関連情報５８に関する類似度が高く、かつ、再生済み動画リスト６４に含まれる試合経過時間６２Ｃと試合経過時間６２Ｃに関する類似度が低い順に、未送信仮想視点動画３０に関する動画情報６２を含むお勧めデータ３２を生成する形態例について説明したが、本第２実施形態では、動画再生部２８が、再生済み動画リスト６４に含まれる視点関連情報５８と視点関連情報５８に関する類似度が低く、かつ、再生済み動画リスト６４に含まれる試合経過時間６２Ｃと試合経過時間６２Ｃに関する類似度が高い順に、未送信仮想視点動画３０に関する動画情報６２を含むお勧めデータ３２を生成する形態例について説明する。以下、第１実施形態との相違点を説明する。以下の説明において、第１実施形態と同一の構成は第１実施形態と同じ符号で表し、第１実施形態と同様の構成及び作用については、その説明を省略する。なお、第１実施形態においても第２実施形態同様の方法でお勧めデータ３２を生成してもよい。また、第２実施形態においても第１実施形態と同様の方法でお勧めデータ３２を生成してもよい。

【0129】

図１５に、ユーザデバイス１２からの動画生成要求５０に応じて、動画生成部２６からユーザデバイス１２に送信される視点関連情報受付画面５４の一例を示す。視点関連情報受付画面５４には、俯瞰画像５６が表示されている。本第２実施形態において、ユーザは、視点関連情報受付画面５４上で、視点位置パス、注視点、及び画角を指示する。視点位置パスは、視点位置の時間経過に応じた変位を示す。注視点は、撮像領域内の注視位置であり、図１５に示す例では、注目選手の顔に設定されているが、本開示の技術はこれに限らず、注視点は撮像領域内の他のオブジェクトの位置、例えば、ボールの位置、ゴールの位置、又は特定のラインの位置等であってもよい。また、注視点は、撮像領域内のオブジェクトを含まない任意の位置であってもよい。画角は、視点位置パスに含まれる各視点位置から注視点を観察する場合の画角である。

【0130】

ユーザデバイス１２は、俯瞰画像５６に対して指示された視点位置パスの座標に基づいて、サッカー競技場に対する視点位置パス５８Ｄ（図１６参照）の座標を導出する。また、ユーザデバイス１２は、俯瞰画像５６に対して指示された注視点の座標に基づいて、サッカー競技場における注視点５８Ｅ（図１６参照）の座標を導出する。また、ユーザデバイス１２は、俯瞰画像５６に対する画角の指示に基づいて、サッカー競技場における画角５８Ｃ（図１６参照）を導出する。ユーザデバイス１２は、導出した視点位置パス５８Ｄ、注視点５８Ｅ、及び画角５８Ｃを、視点関連情報５８として動画生成部２６に送信する。なお、視点位置パス５８Ｄは、本開示の技術に係る「視点位置パス」の一例である。また、注視点５８Ｅは、本開示の技術に係る「注視点」の一例である。

【0131】

一例として図１６に示すように、動画生成部２６は、ユーザデバイス１２から受信した視点関連情報５８を生成動画リスト６０に記録する。また、動画生成部２６は、ユーザデバイス１２から受信した視点関連情報５８に基づき、撮像動画３４を用いて仮想視点動画３０を生成する。動画生成部２６は、生成した仮想視点動画３０に関する動画情報６２を、視点関連情報５８に対応付けて生成動画リスト６０に記録する。なお、生成動画リスト６０には、動画生成部２６が、複数のユーザデバイス１２から受信した視点関連情報５８に基づいて生成した複数の仮想視点動画３０に関する視点関連情報５８及び動画情報６２が記録されている。

【0132】

動画生成部２６は、生成した仮想視点動画３０を要求元であるユーザデバイス１２に送信し、送信した仮想視点動画３０を、要求元であるユーザデバイス１２を使用するユーザのアカウントに対応する再生済み動画リスト６４に記録する。一例として図１７に示すように、動画生成部２６が、ユーザＡのアカウントでデータ処理装置１０にアクセスしているユーザデバイス１２から受信した視点関連情報５８に基づいて仮想視点動画３０を生成した場合、動画生成部２６は、生成した仮想視点動画３０を視点関連情報５８の送信元であるユーザデバイス１２に送信し、送信した仮想視点動画３０をユーザＡのアカウントに対応する再生済み動画リスト６４に記録する。

【0133】

図１８を参照して、本第２実施形態に係る動画再生部２８によって行われる動画再生処理について、以下、具体的に説明する。例えば、動画再生部２８は、ユーザＡのアカウントでデータ処理装置１０にアクセスしているユーザデバイス１２から動画再生要求５２を受け付けた場合、ユーザＡのアカウントに対応する再生済み動画リスト６４をデータベース２２から読み出す。読み出した再生済み動画リスト６４には、「０１１」の動画ＩＤ６２Ａを有する仮想視点動画３０（以下、「仮想視点動画３０－０１１」と称する）に関する情報が記録されている。なお、仮想視点動画３０－０１１は、本開示の技術に係る「第１仮想視点画像」の一例である。

【0134】

動画再生部２８は、データベース２２から生成動画リスト６０を読み出す。生成動画リスト６０には、動画生成部２６によって生成された仮想視点動画３０に関するデータが記録されている（図１６参照）。動画再生部２８は、再生済み動画リスト６４に記録されている仮想視点動画３０－０１１に関する情報を、生成動画リスト６０から削除する。これにより、生成動画リスト６０には、動画再生要求５２の出力元であるユーザデバイス１２に未送信の仮想視点動画３０に関する情報が残る。

【0135】

動画再生部２８は、各々の未送信仮想視点動画３０の試合経過時間６２Ｃと、再生済み動画リスト６４に記録された仮想視点動画３０－０１１の試合経過時間６２Ｃ（以下、「基準試合経過時間」と称する）とを比較する。動画再生部２８は、試合経過時間６２Ｃが、既定値（例えば、数十秒）以上にわたって基準試合経過時間に重複している仮想視点動画３０を残し、他の仮想視点動画３０を生成動画リスト６０から削除する。すなわち、動画再生部２８は、基準試合経過時間と類似度が高い試合経過時間６２Ｃを有する未送信仮想視点動画３０を生成動画リスト６０に残す。

【0136】

動画再生部２８は、各々の未送信仮想視点動画３０の視点位置パス５８Ｄと、再生済み動画リスト６４に記録された仮想視点動画３０－０１１の視点位置パス５８Ｄ（以下、「基準視点位置パス」と称する）との位置を比較することによって、基準視点位置パスに対する各未送信仮想視点動画３０の視点位置パス５８Ｄに関する類似度を導出する。具体的には、例えば、動画再生部２８は、「０１２」の動画ＩＤ６２Ａを有する仮想視点動画３０（以下、「仮想視点動画３０－０１２」と称する）の視点位置パス５８Ｄの開始座標（Ｘ_Ｓ２，Ｙ_Ｓ２，Ｚ_Ｓ２）及び終了座標（Ｘ_Ｅ２，Ｙ_Ｅ２，Ｚ_Ｅ２）と、基準視点位置パスの開始座標（Ｘ_Ｓ１，Ｙ_Ｓ１，Ｚ_Ｓ１）及び終了座標（Ｘ_Ｅ１，Ｙ_Ｅ１，Ｚ_Ｅ１）とを取得する。動画再生部２８は、仮想視点動画３０－０１２の視点位置パス５８Ｄと基準視点位置パスと間の開始座標同士の差、及び終了座標同士との差を取る。

【0137】

動画再生部２８は、Ｘ_Ｓ２－Ｘ_Ｓ１を算出することによって、仮想視点動画３０－０１２の視点位置パス５８Ｄと基準視点位置パスとの間の開始座標同士のＸ軸方向における差（以下、「Ｘ軸方向開始座標差」と称する）を算出する。動画再生部２８は、Ｙ_Ｓ２－Ｙ_Ｓ１を算出することによって、仮想視点動画３０－０１２の視点位置パス５８Ｄと基準視点位置パスとの間の開始座標同士のＹ軸方向における差（以下、「Ｙ軸方向開始座標差」と称する）を算出する。動画再生部２８は、Ｚ_Ｓ２－Ｚ_Ｓ１を算出することによって、仮想視点動画３０－０１２の視点位置パス５８Ｄと基準視点位置パスとの間の開始座標同士のＺ軸方向における差（以下、「Ｚ軸方向開始座標差」と称する）を算出する。動画再生部２８は、Ｘ軸方向開始座標差、Ｙ軸方向開始座標差、及びＺ軸方向開始座標差の和を開始座標差として算出する。

【0138】

また、動画再生部２８は、Ｘ_Ｅ２－Ｘ_Ｅ１を算出することによって、仮想視点動画３０－０１２の視点位置パス５８Ｄと基準視点位置パスとの間の終了座標同士のＸ軸方向における差（以下、「Ｘ軸方向終了座標差」と称する）を算出する。動画再生部２８は、Ｙ_Ｅ２－Ｙ_Ｅ１を算出することによって、仮想視点動画３０－０１２の視点位置パス５８Ｄと基準視点位置パスとの間の終了座標同士のＹ軸方向における差（以下、「Ｙ軸方向終了座標差」と称する）を算出する。動画再生部２８は、Ｚ_Ｅ２－Ｚ_Ｅ１を算出することによって、仮想視点動画３０－０１２の視点位置パス５８Ｄと基準視点位置パスとの間の終了座標同士のＺ軸方向における差（以下、「Ｚ軸方向終了座標差」と称する）を算出する。動画再生部２８は、Ｘ軸方向終了座標差、Ｙ軸方向終了座標差、及びＺ軸方向終了座標差の和を終了座標差として算出する。動画再生部２８は、開始座標差と終了座標差の和を、視点位置パス差として算出する。なお、視点位置パス差は、開始座標差と終了座標差の和に限られない。例えば、開始座標差と終了座標差に加えてパス上の任意の点の座標差を取得してもよい。より具体的には、例えば、仮想視点動画３０の再生から１秒毎の視点の座標差を算出して開始座標差と終了座標差に加算してもよい。

【0139】

動画再生部２８は、各未送信仮想視点動画３０の視点位置パス５８Ｄと基準視点位置パスとの視点位置パス差を同様に算出する。動画再生部２８は、視点位置パス差が大きい順に、すなわち、仮想視点動画３０の視点位置パス５８Ｄと基準視点位置パスとの類似度が低い順に、生成動画リスト６０内の未送信仮想視点動画３０を並べ替える。

【0140】

動画再生部２８は、並べ替え後の生成動画リスト６０を、お勧め動画リスト６６としてデータベース２２に記憶する。動画再生部２８は、お勧め動画リスト６６に記録された仮想視点動画３０の並び順に５つずつ、仮想視点動画３０に関する情報をデータベース２２から読み出す。動画再生部２８は、データベース２２から読み出した５つの未送信仮想視点動画３０に関する動画ＩＤ６２Ａ、試合経過時間６２Ｃ、サムネイル画像６２Ｅ、及び視点位置パス５８Ｄと、その配置情報とを含むお勧めデータ３２を生成する。動画再生部２８は、生成したお勧めデータ３２をユーザデバイス１２に送信する。

【0141】

一例として図１９に示すように、ユーザデバイス１２は、お勧めデータ３２を受信し、受信したお勧めデータ３２を、お勧め画面７０としてタッチパネル・ディスプレイ１２Ａに表示させる。本第２実施形態によるお勧め画面７０では、５つの未送信仮想視点動画３０に関するサムネイル画像６２Ｅがお勧め画面７０の左側に表示される。各サムネイル画像６２Ｅの右側には、サムネイル画像６２Ｅに対応する未送信仮想視点動画３０の動画ＩＤ６２Ａ及び視点位置パス５８Ｄの形が表示される。視点位置パス５８Ｄの形は、サッカー競技場の俯瞰画像５６に重畳して表示される。

【0142】

なお、視点位置パス５８Ｄの形に関する表示方法の変形例としては、図１９の変形例１に示すように、視点位置パス５８Ｄの形は、サッカー競技場の側面図に重畳して表示されてもよい。また、図１９の変形例２に示すように、視点位置パス５８Ｄの形は、サッカー競技場を示す３次元画像に重畳して表示されてもよい。また、視点位置パス５８Ｄの形を俯瞰画像５６に重畳した画像と、視点位置パス５８Ｄの形を側面図に重畳した画像とを並べてサムネイル画像６２Ｅの右側に表示してもよい。

【0143】

一例として図２０に示すように、ユーザが、指又はスタイラスペン等でお勧め画面７０に表示されたサムネイル画像６２Ｅに接触した場合、ユーザデバイス１２は、接触されたサムネイル画像６２Ｅに対するダイジェスト画像表示指示７４を動画再生部２８に送信する。動画再生部２８は、ユーザデバイス１２からダイジェスト画像表示指示７４を受け付けた場合、接触されたサムネイル画像６２Ｅに対応する仮想視点動画３０をデータベース２２から読み出す。なお、ダイジェスト画像表示指示７４は、本開示の技術に係る「ダイジェスト画像表示指示」の一例である。

【0144】

動画再生部２８は、データベース２２から読み出した仮想視点動画３０から視点位置が既定間隔で異なる複数フレームの画像（以下、「抽出画像」と称する）２７（図２１参照）を抽出する。動画再生部２８は、抽出画像２７を含むダイジェスト画像７６（図２１参照）を生成する。動画再生部２８は、生成したダイジェスト画像７６とダイジェスト画像７６の配置情報とを含むダイジェストデータを、ユーザデバイス１２に送信する。なお、ダイジェスト画像７６は、本開示の技術に係る「ダイジェスト画像」の一例である。また、ダイジェストデータは、本開示の技術に係る「第２データ」の一例である。

【0145】

一例として図２１に示すように、ユーザデバイス１２は、ダイジェストデータを受信し、受信したダイジェストデータをタッチパネル・ディスプレイ１２Ａに表示させる。これにより、例えば、４つの抽出画像２７を含むダイジェスト画像７６が、サムネイル画像６２Ｅの表示枠内に表示される。

【0146】

以上説明したように、本第２実施形態において、お勧めデータ３２は、再生済み動画リスト６４に含まれる視点関連情報５８と視点関連情報５８に関する類似度が低く、かつ、再生済み動画リスト６４に含まれる試合経過時間６２Ｃと試合経過時間６２Ｃに関する類似度が高い順に、未送信仮想視点動画３０のサムネイル画像６２Ｅ及び視点位置パス５８Ｄがユーザデバイス１２に表示されるデータである。従って、本構成によれば、未送信仮想視点動画３０に関するサムネイル画像６２Ｅ及び視点位置パス５８Ｄがランダムにユーザデバイス１２に表示される場合に比べ、再生済み動画リスト６４に含まれる視点関連情報５８と視点関連情報５８に関する類似度が低く、かつ、再生済み動画リスト６４に含まれる試合経過時間６２Ｃと試合経過時間６２Ｃに関する類似度が高い仮想視点動画３０を、ユーザに対して選択させ易くすることができる。

【0147】

また、本第２実施形態において、動画再生部２８は、再生済み動画リスト６４に含まれる視点関連情報５８と、お勧めデータ３２に含まれる視点関連情報５８との間で視点位置パス５８Ｄの位置を比較することによって、視点関連情報５８に関する類似度を導出する。従って、本構成によれば、何らデータを比較せずに類似度を導出する場合に比べ、類似度を精度良く導出することができる。

【0148】

また、本第２実施形態において、お勧めデータ３２は、未送信仮想視点動画３０のサムネイル画像６２Ｅと視点関連情報５８とを含む。従って、本構成によれば、お勧めデータ３２が、未送信仮想視点動画３０のサムネイル画像６２Ｅ及び視点関連情報５８の何れも含まない場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0149】

また、本第２実施形態において、視点関連情報５８は、視点位置パス５８Ｄ及び注視点５８Ｅを含む。従って、本構成によれば、視点関連情報５８が、視点位置パス５８Ｄ及び注視点５８Ｅの何れも含まないに比べ、未送信仮想視点動画３０のうち、視点位置パス５８Ｄ及び注視点５８Ｅのうちの少なくとも１つと関連性のある仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0150】

また、本第２実施形態において、動画再生部２８は、ユーザデバイス１２からダイジェスト画像表示指示７４を受け付けた場合、視点位置５８Ａが既定間隔で異なる複数フレームの抽出画像２７を仮想視点動画３０から抽出することによって、ダイジェスト画像７６を生成する。動画再生部２８は、生成したダイジェスト画像７６がユーザデバイス１２で再生される再生データを、ユーザデバイス１２に送信する。従って、本構成によれば、ユーザは、ダイジェスト画像７６を参考に、仮想視点動画３０を選択することができる。選択された仮想視点動画３０は、第１実施形態と同様にタッチパネル・ディスプレイ１２Ａで再生される。なお、ダイジェスト画像を再生する操作については上記に限られない。例えば、ユーザが、指又はスタイラスペン等でお勧め画面７０に表示されたサムネイル画像６２Ｅを長押しした場合にダイジェスト画像が再生され、指又はスタイラスペン等でお勧め画面７０に表示されたサムネイル画像６２Ｅをタップした場合に仮想視点動画３０が再生されてもよい。

【0151】

なお、上記第２実施形態では、ユーザが、お勧め画面７０に表示されたサムネイル画像６２Ｅに接触した場合、ユーザデバイス１２は、接触されたサムネイル画像６２Ｅに対するダイジェスト画像表示指示７４を動画再生部２８に送信したが、本開示の技術はこれに限定されない。ユーザの指又はスタイラスペン等がサムネイル画像６２Ｅの上に重なった場合、又は、ユーザがお勧め画面７０に設けられたダイジェストボタン（図示省略）に接触した場合、ユーザデバイス１２は、ダイジェスト画像表示指示７４を動画再生部２８に送信してもよい。

【0152】

また、上記第２実施形態では、視点関連情報５８は注視点５８Ｅを含むが、本開示の技術はこれに限定されず、視点関連情報５８は、注視点５８Ｅの代わりに、注視点５８Ｅの時間経過に応じた変位を示す注視点パスを含んでいてもよい。また、この場合、動画再生部２８は、再生済み動画リスト６４に含まれる視点関連情報５８と、お勧めデータ３２に含まれる視点関連情報５８との間で注視点パスの位置を比較することによって、視点関連情報５８に関する類似度を導出してもよい。注視点パスは、本開示の技術に係る「注視点パス」の一例である。本構成によれば、視点関連情報５８が、注視点パスを含まない場合に比べ、未送信仮想視点動画３０のうち、注視点パスと関連性のある仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0153】

また、上記第２実施形態では、動画再生部２８は、再生済み動画リスト６４に含まれる視点関連情報５８と、お勧めデータ３２に含まれる視点関連情報５８との間で視点位置パス５８Ｄの位置を比較することによって、視点関連情報５８に関する類似度を導出するが、本開示の技術はこれに限定されない。一例として図２２に示すように、動画再生部２８は、各視点位置パス５８Ｄに含まれる複数の視点位置５８Ａのうちの開始視点位置、中間視点位置、及び終了視点位置から注視点５８Ｅを観察した画像に写っているオブジェクトを、画像認識の技術を用いて抽出し、抽出したオブジェクトを示すタグ７８を各視点位置パス５８Ｄに付与してもよい。動画再生部２８は、視点位置パス５８Ｄに付与されたタグ７８を比較することによって、視点関連情報５８に関する類似度を導出してもよい。なお、タグ７８は、本開示の技術に係る「タグ」の一例である。

【0154】

図２２に示す例では、視点位置パス５８Ｄ－１には、「ゴール」、「観客席」、及び「選手１１」の３つのタグが付与されている。視点位置パス５８Ｄ－２には、「ゴール」、「ゴール」、及び「選手１１」の３つのタグが付与されている。視点位置パス５８Ｄ－３には、「ボール」、「選手１１」、及び「選手１１」の３つのタグが付与されている。選手１１は、背番号１１番の選手を意味する。選手は、例えば、周知の顔認識技術を用いて特定される。

【0155】

視点位置パス５８Ｄ－１に付与されたタグ７８と、視点位置パス５８Ｄ－２に付与されたタグ７８を比較した場合、「ゴール」及び「選手１１」のタグが共通している。視点位置パス５８Ｄ－１に付与されたタグ７８と、視点位置パス５８Ｄ－３に付与されたタグ７８を比較した場合、「選手１１」のタグが共通している。従って、視点位置パス５８Ｄ－２は、視点位置パス５８Ｄ－１に対して、視点位置パス５８Ｄ－３よりも高い類似度を有する。

【0156】

図２２に示す構成によれば、何らデータを比較せずに類似度を導出する場合に比べ、類似度を精度良く導出することができる。なお、視点位置パス５８Ｄの代わりに、注視点パスにタグを付与し、注視点パスに付与されたタグを比較することによって視点関連情報５８に関する類似度を導出してもよい。

【0157】

また、上記第２実施形態では、お勧め画面７０において、未送信仮想視点動画３０の視点位置パス５８Ｄの形が俯瞰画像５６に重畳されて表示されるが、本開示の技術はこれに限定されない。一例として図２３に示すように、未送信仮想視点動画３０の視点位置パス５８Ｄの形に加えて、再生済み動画リスト６４に含まれる視点関連情報５８の視点位置パス５８Ｄの形が俯瞰画像５６に重畳されて表示されてもよい。

【0158】

この場合、動画再生部２８は、再生済み動画リスト６４に含まれる視点関連情報５８の視点位置パス５８Ｄの形がお勧めデータ３２に対応付けて表示されるパス画像を生成し、生成したパス画像をユーザデバイス１２に送信する。パス画像では、再生済み動画リスト６４に含まれる視点関連情報５８の視点位置パス５８Ｄの形が、お勧めデータ３２に含まれる未送信仮想視点動画３０の視点位置パス５８Ｄの形と区別可能な態様で示されている。なお、パス画像は、本開示の技術に係る「パス画像」の一例である。

【0159】

図２３に示す構成によれば、ユーザは、再生済み動画リスト６４に含まれる視点関連情報５８の視点位置パス５８Ｄの形を参考に、仮想視点動画３０を選択することができる。なお、お勧め画面７０において、未送信仮想視点動画３０の注視点パスの形が俯瞰画像５６に重畳されて表示される場合には、再生済み動画リスト６４に含まれる視点関連情報５８の注視点パスの形が、俯瞰画像５６に重畳されて表示されてもよい。

【0160】

また、上記第２実施形態では、図１９に示すお勧め画面７０がタッチパネル・ディスプレイ１２Ａに表示される形態例について説明したが、本開示の技術はこれに限定されない。以下、図２４及び図２５を参照して、お勧め画面７０の別の形態例について説明する。

【0161】

一例として図２４に示すお勧め画面７０がタッチパネル・ディスプレイ１２Ａに表示されてもよい。お勧めデータ３２は、シークバー８２と、俯瞰画像５６と、お勧めデータ３２に含まれる未送信仮想視点動画３０のサムネイル画像６２Ｅ及び視点位置パス５８Ｄの形と、再生済み動画リスト６４に含まれる仮想視点動画３０のサムネイル画像６２Ｅ及び視点位置パス５８Ｄの形とを含む。

【0162】

お勧め画面７０において、シークバー８２は、お勧めデータ３２に含まれる仮想視点動画３０の試合経過時間６２Ｃを示している。再生済み動画リスト６４に含まれる仮想視点動画３０の視点位置パス５８Ｄの形と、お勧めデータ３２に含まれる未送信仮想視点動画３０の視点位置パス５８Ｄの形とは、区別可能な態様でお勧め画面７０に表示されている。各サムネイル画像６２Ｅは、各視点位置パス５８Ｄ上の対応する位置に表示されている。

【0163】

つまり、動画再生部２８は、各サムネイル画像６２Ｅが、各視点位置パス５８Ｄに含まれる複数の視点位置のうちの何れの視点位置から観察された画像であるかを取得し、各サムネイル画像６２Ｅの各視点位置パス５８Ｄ上での位置を特定可能な第１位置情報を含むお勧めデータ３２を生成する。なお、第１位置情報は、本開示の技術に係る「第１位置情報」の一例である。

【0164】

図２４に示す構成によれば、お勧め画面７０上に、サムネイル画像６２Ｅと視点位置パス５８Ｄとが別々に表示される場合に比べ、ユーザは、視点位置パス５８Ｄに対するサムネイル画像６２Ｅの位置を参考に、仮想視点動画３０を選択することができる。なお、視点位置パス５８Ｄの代わりに、注視点パスを含むお勧め画面７０を表示してもよい。この場合、お勧めデータ３２は、サムネイル画像６２Ｅの注視点パス上での位置を特定可能な位置情報を含む。また、図２４に示す例では、１つの未送信仮想視点動画３０に関する視点位置パス５８Ｄ及びサムネイル画像６２Ｅがお勧め画面７０に表示されているが、複数の未送信仮想視点動画３０に関する視点位置パス５８Ｄ及びサムネイル画像６２Ｅがお勧め画面７０に表示されてもよい。

【0165】

また、上記第２実施形態では、図１９に示すお勧め画面７０がタッチパネル・ディスプレイ１２Ａに表示されるが、一例として図２５に示すお勧め画面７０がタッチパネル・ディスプレイ１２Ａに表示されてもよい。お勧め画面７０は、シークバー８２と、お勧めデータ３２に含まれる複数の仮想視点動画３０に関する動画情報６２、すなわち、動画ＩＤ６２Ａ、作者６２Ｂ、試合経過時間６２Ｃ、動画の長さ６２Ｄ、及びサムネイル画像６２Ｅとを含んでいる。

【0166】

お勧め画面７０において、シークバー８２は、試合の開始時間から終了時間までを示している。仮想視点動画３０に関する動画情報６２は、動画情報６２に含まれる試合経過時間６２Ｃ毎に大別され、時系列で横方向に配置される。具体的には、試合経過時間６２Ｃの開始時間が０分～１０分の間にある仮想視点動画３０に関する動画情報６２はお勧め画面７０の最も左側の列に配置され、１１分～２０分の間にある仮想視点動画３０に関する動画情報６２はお勧め画面７０の左から２列目に配置され、２１分～３０分の間にある仮想視点動画３０に関する動画情報６２はお勧め画面７０の左から３列目に配置され、３１分～４５分の間にある仮想視点動画３０に関する動画情報６２はお勧め画面７０の最も右側の列に配置される。

【0167】

また、各列において、仮想視点動画３０に関する動画情報６２は、再生済み動画リスト６４に含まれる視点関連情報５８の視点位置パス５８Ｄとの視点位置パス差が大きい順、すなわち、視点位置パス５８Ｄに関する類似度が低い順に上から配置される。なお、図２５に図示されているお勧め画面７０はほんの一部であり、お勧め画面７０は、タッチパネル・ディスプレイ１２Ａの左右方向及び上下方向にスクロール可能である。試合経過時間の分け方は上記の分け方に限られずどのような分け方であってもよい。また、視点位置パス差に関する縦軸の情報をタッチパネル・ディスプレイ１２Ａに表示してもよい。本実施形態においては、視点位置パス差に関する縦軸の情報とは、例えば、上に位置するほど視点位置パス差が大、下に位置するほど視点位置パス差が小、という情報である。

【0168】

つまり、お勧めデータ３２は、複数の仮想視点動画３０に関する動画情報６２を、試合経過時間６２Ｃの時系列で横方向に配置させ、かつ、再生済み動画リスト６４に含まれる視点関連情報５８の視点位置パス５８Ｄとの視点位置パス５８Ｄに関する類似度が低い順に縦方向に配置させる第２位置情報を含む。なお、第２位置情報は、本開示の技術に係る「第２位置情報」の一例である。

【0169】

図２５に示す構成によれば、複数の仮想視点動画３０に関する動画情報６２がランダムに配置される場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。なお、図２５に示す例では、仮想視点動画３０に関する動画情報６２は、再生済み動画リスト６４に含まれる視点関連情報５８の視点位置パス５８Ｄとの視点位置パス差が大きい順に上から配置されているが、本開示の技術はこれに限定されず、仮想視点動画３０に関する動画情報６２は、再生済み動画リスト６４に含まれる視点関連情報５８の視点位置パス５８Ｄとの視点位置パス差が小さい順に上から配置されてもよい。

【0170】

上記第１及び第２実施形態では、動画再生部２８は、再生済み動画リスト６４に含まれる視点関連情報５８との類似度及び試合経過時間６２Ｃとの類似度に基づいてお勧めデータ３２を生成する形態例について説明したが、本開示の技術はこれに限定されない。以下、図２６～図３９を参照して、再生済み動画リスト６４に含まれる仮想視点動画３０と未送信仮想視点動画３０との間の視点関連情報５８の類似度及び試合経過時間６２Ｃの類似度以外の要素に基づいてお勧めデータ３２を生成する形態例について説明する。

【0171】

一例として図２６に示すように、動画再生部２８は、ユーザの登録データを取得し、取得した登録データに基づいてお勧めデータ３２を生成してもよい。登録データの一例としては、ユーザの属性を示す属性データが挙げられる。

【0172】

図２６に示す例では、ユーザＡのアカウントに対応する再生済み動画リスト６４には、「Ｊａｐａｎ」を示すユーザＡの属性データ６４Ｂが記録されている。この属性データは、ユーザＡが「Ｊａｐａｎ」チームのファンであることを示す。属性データは、ユーザデバイス１２からデータ処理装置１０に登録されてもよいし、別のデバイスからデータ処理装置１０に登録されてもよい。また、属性データは、ユーザによるアカウント登録時に登録されてもよいし、ユーザデバイス１２から受け付ける動画再生要求５２に含まれていてもよい。なお、属性データとしては、ユーザが好きなチーム名の他に、ユーザの性別、年齢、及び好きな選手名等が挙げられる。なお、属性データは、本開示の技術に係る「属性データ」の一例である。

【0173】

動画再生部２８は、再生済み動画リスト６４に含まれるユーザの属性データ６４Ｂと、未送信仮想視点動画３０の作者６２Ｂの属性データ６２Ｆとの類似度が高い順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。例えば、図２６に示す例では、ユーザＡの属性データ６４Ｂは、作者Ｃの属性データ６２Ｆと一致しているので、動画再生部２８は、作者Ｃが作成した仮想視点動画３０に重み付けをする。なお、属性データ６４Ｂが含む属性は１つに限らず、動画再生部２８は、複数の属性の類似度に従って仮想視点動画３０に重み付けをしてもよい。動画再生部２８は、仮想視点動画３０に与えた重みの大きい順に、生成動画リスト６０内の仮想視点動画３０を並べ替えることでお勧め動画リスト６６を生成し、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。

【0174】

図２６に示す構成によれば、動画再生部２８は、ユーザの登録データに基づいてお勧めデータ３２を生成する。従って、本構成によれば、ユーザの登録データを考慮せずにお勧めデータ３２を生成する場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0175】

また、図２６に示す構成によれば、ユーザの登録データは、ユーザの属性を示す属性データ６４Ｂである。従って、本構成によれば、ユーザの属性データ６４Ｂを考慮せずにお勧めデータ３２を生成する場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0176】

また、図２６に示す構成によれば、お勧めデータ３２は、ユーザデバイス１２を用いているユーザの属性データ６４Ｂと、仮想視点動画３０の作者６２Ｂの属性データ６２Ｆとの類似度に基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８がユーザデバイス１２に表示されるデータである。従って、本構成によれば、仮想視点動画３０に関するお勧めデータ３２がランダムにユーザデバイス１２に表示される場合に比べ、ユーザの属性データ６４Ｂと作者６２Ｂの属性データ６２Ｆとの類似度に基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。なお、図２６では、再生済み動画リスト６４に含まれるユーザＡの属性データ６４Ｂと仮想視点動画３０の作者６２Ｂの属性データ６２Ｆとの類似度が高い順に、お勧めデータ３２を生成する態様例を示したが、本開示の技術はこれに限定されず、再生済み動画リスト６４に含まれるユーザの属性データ６４Ｂと仮想視点動画３０の作者６２Ｂの属性データ６２Ｆとの類似度が低い順に、お勧めデータ３２を生成してもよい。

【0177】

一例として図２７に示すように、動画再生部２８は、ユーザデバイス１２を使用しているユーザのアカウントに対応する再生済み動画リスト６４に示された仮想視点動画３０の再生履歴から抽出した再生傾向に基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。

【0178】

図２７に示す例では、ユーザＡのアカウントに対応する再生済み動画リスト６４には、ユーザＡが作成した１つの仮想視点動画３０に関する情報と、ユーザＥが作成した２つの仮想視点動画３０に関する情報が記録されている。動画再生部２８は、再生済み動画リスト６４を参照して、ユーザＡは、ユーザＥが作成した仮想視点動画３０を好んで観賞していると判断する。動画再生部２８は、生成動画リスト６０に記録されている仮想視点動画３０のうち、作者６２Ｂが「Ｅ」である仮想視点動画３０に重み付けをする。動画再生部２８は、重みの大きい順に、生成動画リスト６０内の仮想視点動画３０を並べ替えることでお勧め動画リスト６６を生成し、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。

【0179】

図２７に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、ユーザによる仮想視点動画３０の再生傾向に基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0180】

また、図２７に示す例では、動画再生部２８は、再生済み動画リスト６４に示された仮想視点動画３０の再生履歴から再生傾向を抽出したが、本開示の技術はこれに限定されない。ユーザは、好きな作者「Ｅ」をユーザの趣向を示す趣向データとして予め登録しておき、動画再生部２８は、ユーザの趣向データに基づいてお勧めデータ３２を作成してもよい。趣向データは、本開示の技術に係る「趣向データ」の一例である。本構成によれば、ユーザの趣向データを考慮せずにお勧めデータ３２を生成する場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。なお、趣向データとしては、好きな作者の他に、好きな視点位置、好きな視線方向、及び好きな画角等が挙げられる。

【0181】

一例として図２８に示すように、動画再生部２８は、ユーザデバイス１２を使用しているユーザのアカウントに対応する再生済み動画リスト６４に示された仮想視点動画３０の再生履歴と、他のユーザのアカウントに対応する再生済み動画リスト６４に示された仮想視点動画３０の再生履歴との比較結果に基づいて定めた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。

【0182】

図２８に示す例では、ユーザＡのアカウントに対応する再生済み動画リスト６４には、「００１」及び「００３」の動画ＩＤ６２Ａを有する仮想視点動画３０に関する情報が記録されている。「００１」及び「００３」の動画ＩＤ６２Ａを有する仮想視点動画３０は、ユーザＡによる仮想視点動画３０の再生履歴、すなわち、ユーザＡの観賞履歴である。動画再生部２８は、ユーザＡの観賞履歴に類似した観賞履歴を有するユーザＣのアカウントに対応する再生済み動画リスト６４を読み出す。動画再生部２８は、ユーザＡの観賞履歴とユーザＣの観賞履歴とを比較し、生成動画リスト６０に記録されている仮想視点動画３０のうち、ユーザＣの観賞履歴に含まれる仮想視点動画３０であってユーザＡの観賞履歴に含まれていない仮想視点動画３０に重み付けをする。つまり、図２８に示す例では、動画再生部２８は、「００４」の動画ＩＤ６２Ａを有する仮想視点動画３０に重み付けをする。動画再生部２８は、重みの大きい順に、生成動画リスト６０内の仮想視点動画３０を並べ替え、並べ替え後の生成動画リスト６０をお勧め動画リスト６６として記憶する。動画再生部２８は、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。

【0183】

図２８に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、ユーザのアカウントに対応する再生済み動画リスト６４に示された仮想視点動画３０の再生履歴と、他のユーザのアカウントに対応する再生済み動画リスト６４に示された仮想視点動画３０の再生履歴との比較結果に基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0184】

一例として図２９に示すように、動画再生部２８は、仮想視点動画３０の各々に付与されたコメントに基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。

【0185】

図２９に示す例では、各仮想視点動画３０の視点位置パス５８Ｄには、コメント８６が付与されている。コメント８６は、各仮想視点動画３０の作者によって付与されたものでもよいし、各仮想視点動画３０を観賞した観賞者によって付与されたものでもよい。コメント８６は、各仮想視点動画３０の視点位置パス５８Ｄ上の位置に対応付けて、生成動画リスト６０に記録されている。なお、コメント８６は、本開示の技術に係る「コメント」の一例である。

【0186】

動画再生部２８は、付与されたコメント８６の数に応じて仮想視点動画３０に重み付けをする。つまり、図２９に示す例では、２つのコメント８６が付与された仮想視点動画３０は、１つのコメント８６が付与された仮想視点動画３０よりも重く重み付けされる。動画再生部２８は、重みの大きい順に、生成動画リスト６０内の仮想視点動画３０を並べ替えることでお勧め動画リスト６６を生成し、生成したお勧め動画リスト６６に従ってお勧めデータ３２を生成する。動画再生部２８は、生成したお勧めデータ３２をユーザデバイス１２に送信する。

【0187】

一例として図３０に示すように、ユーザデバイス１２は、お勧めデータ３２を受信し、受信したお勧めデータ３２を、お勧め画面７０としてタッチパネル・ディスプレイ１２Ａに表示させる。お勧め画面７０において、コメント８６は、視点位置パス５８Ｄ上の位置に対応付けて、俯瞰画像５６に重畳して表示される。つまり、お勧めデータ３２は、視点位置パス５８Ｄの形にコメント８６を付与した画像が、ユーザデバイス１２に表示されるデータである。

【0188】

図２９に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、仮想視点動画３０の各々に付与されたコメント８６に基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。また、図３０に示す構成によれば、コメント８６だけをお勧め画面７０に表示させる場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。なお、視点位置パス５８Ｄの代わりに、注視点パスにコメント８６を付与してもよい。

【0189】

一例として図３１に示すように、生成動画リスト６０において、各仮想視点動画３０には評価５９が付与されていてもよい。評価５９は、各仮想視点動画３０を観賞したユーザによって付与された評価である。評価５９は、１人のユーザによって付与された評価であってもよいし、複数のユーザが付与した評価の平均値又は最頻値等であってもよい。動画再生部２８は、評価５９に基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。なお、評価５９は、本開示の技術に係る「第１評価」の一例である。

【0190】

図３１に示す例では、「０１１」の動画ＩＤ６２Ａを有する仮想視点動画３０には、星３つの評価５９が与えられている。

【0191】

「０１２」及び「０１３」の動画ＩＤ６２Ａを有する仮想視点動画３０には、星２つの評価５９が与えられている。動画再生部２８は、星の数に応じて仮想視点動画３０に重み付けをする。つまり、動画再生部２８は、星の数が多い順に、生成動画リスト６０内の仮想視点動画３０を並べ替えることでお勧め動画リスト６６を生成し、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。

【0192】

図３１に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、各仮想視点動画３０に付与された評価５９に基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0193】

一例として図３２に示すように、例えば、ユーザＡのアカウントに対応する再生済み動画リスト６４において、各仮想視点動画３０には評価９０が付与されていてもよい。評価９０は、ユーザＡによって付与された評価である。動画再生部２８は、各仮想視点動画３０に付与された評価９０に基づいて、ユーザＡの趣向を推定する。動画再生部２８は、推定したユーザＡの趣向に応じて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。なお、評価９０は、本開示の技術に係る「第２評価」の一例である。

【0194】

図３２に示す例では、作者Ａが作成した仮想視点動画３０には、星１つの評価９０が与えられている。作者Ｂが作成した仮想視点動画３０には、星２つの評価９０が与えられている。作者Ｅが作成した仮想視点動画３０には、星３つの評価９０が与えられている。動画再生部２８は、作者Ｅが作成した仮想視点動画３０に高い評価９０が与えられていることに基づいて、ユーザＡは、作者Ｅが作成した仮想視点動画３０を好むと推定する。動画再生部２８は、生成動画リスト６０において、作者Ｅが作成した仮想視点動画３０に重み付けをする。動画再生部２８は、重みの大きい順に、生成動画リスト６０内の仮想視点動画３０を並べ替え、並べ替え後の生成動画リスト６０をお勧め動画リスト６６として記憶する。動画再生部２８は、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。

【0195】

図３２に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、ユーザの趣向に基づき、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0196】

一例として図３３に示すように、動画再生部２８は、新たな仮想視点動画３０が生成動画リスト６０に追加された場合に、ユーザデバイス１２を使用しているユーザの登録データに基づいて、追加された仮想視点動画３０に関するサムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。

【0197】

図３３に示す例では、ユーザデバイス１２を使用しているユーザは、作者Ｅを好きな作者として登録している。動画再生部２８は、作者Ｅによって新たに作成された仮想視点動画３０が生成動画リスト６０に追加された場合に、追加された仮想視点動画３０に重み付けをする。動画再生部２８は、重みの大きい順に、生成動画リスト６０内の仮想視点動画３０を並べ替え、並べ替え後の生成動画リスト６０をお勧め動画リスト６６として記憶する。動画再生部２８は、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。

【0198】

お勧めデータ３２は、お勧め画面７０として、タッチパネル・ディスプレイ１２Ａ上に表示される。作者Ｅによって新たに作成された仮想視点動画３０に関する情報は、お勧め画面７０の最上位に、他の仮想視点動画３０に関する情報と区別可能な態様で表示されてもよい。

【0199】

図３３に示す構成によれば、お勧めデータ３２が、既存の仮想視点動画３０に関する情報しか含まない場合に比べ、ユーザの登録データに基づき、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。なお、図３３に示す例では、動画再生部２８は、ユーザの登録データに基づいて、新たに生成動画リスト６０に追加された仮想視点動画３０に関する情報を含むお勧めデータ３２を作成するが、本開示の技術はこれに限定されない。動画再生部２８は、ユーザの登録データの代わりに、ユーザのアカウントに対応する再生済み動画リスト６４に示される仮想視点動画３０の再生履歴に基づいて、新たに生成動画リスト６０に追加された仮想視点動画３０に関する情報を含むお勧めデータ３２を作成してもよい。また、ユーザのアカウントに対応する再生履歴に関係なく、ユーザのアカウントにおいてお気に入りに登録された仮想視点動画３０に基づき、上記と同様にしてお勧めデータ３２を作成してもよい。

【0200】

一例として図３４に示すように、動画再生部２８は、動画の長さ６２Ｄに対する視点位置パス５８Ｄの長さに基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。動画の長さ６２Ｄに対する視点位置パス５８Ｄの長さは、仮想視点動画３０における視点位置の変化の度合いを示す。つまり、動画の長さ６２Ｄに対して視点位置パス５８Ｄが長い場合、仮想視点動画３０は、視点位置の変化が大きい動画であると推定できる。一方、動画の長さ６２Ｄに対して視点位置パス５８Ｄが短い場合、仮想視点動画３０は、視点位置の変化が小さい動画であると推定できる。視点位置の変化の度合いは、動画の長さ６２Ｄに対する視点位置パス５８Ｄの長さの比（以下、「視点位置変化比」と称する）で表される。

【0201】

図３４に示す例では、ユーザＡのアカウントに対応する再生済み動画リスト６４において、「０１５」の動画ＩＤ６２Ａを有する仮想視点動画３０には高い評価９０が与えられている。動画再生部２８は、評価９０が高い仮想視点動画３０の視点位置変化比を算出し、算出した視点位置変化比が既定値よりも小さい場合、ユーザＡは視点位置の変化が小さい仮想視点動画３０を好むと推定する。動画再生部２８は、生成動画リスト６０において、視点位置変化比が既定値よりも小さい仮想視点動画３０に重み付けをする。動画再生部２８は、重みの大きい順に、生成動画リスト６０内の仮想視点動画３０を並べ替え、並べ替え後の生成動画リスト６０をお勧め動画リスト６６として記憶する。動画再生部２８は、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。なお、算出した視点位置変化比が既定値よりも大きい場合には、動画再生部２８は、生成動画リスト６０において、視点位置変化比が既定値よりも大きい仮想視点動画３０に重み付けをしてもよい。

【0202】

図３４に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、動画の長さ６２Ｄに対する視点位置パス５８Ｄの長さに基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。なお、図３４に示す例では、動画再生部２８は、視点位置変化比を既定値と比較することによってユーザの趣向を推定したが、本開示の技術はこれに限定されない。動画再生部２８は、算出した視点位置変化比を、視点位置変化比の平均値又は最頻値等と比較することによって、ユーザの趣向を推定してもよい。また、図３４に示す例では、動画再生部２８は、動画の長さ６２Ｄに対する視点位置パス５８Ｄの長さに基づいてお勧めデータ３２を生成するが、本開示の技術はこれに限定されない。動画再生部２８は、動画の長さ６２Ｄに対する注視点パスの長さに基づいてお勧めデータ３２を生成してもよい。なお、視点位置パス５８Ｄを参照する例はこれに限られない。例えば、高い評価９０が付けられた仮想視点動画３０の視点位置パス５８Ｄに高い重みづけをして、その視点位置パス５８Ｄと似た順に仮想視点動画３０が並んだお勧めデータ３２を作成してもよい。また、高い評価９０が付けられた仮想視点動画３０の作者と、視点位置パス５８Ｄとの双方に高い重みづけをしてお勧めデータ３２を作成してもよい。

【0203】

一例として図３５に示すように、動画再生部２８は、動画の長さ６２Ｄに対する試合経過時間６２Ｃの長さに基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。動画の長さ６２Ｄに対する試合経過時間６２Ｃの長さは、仮想視点動画３０の平均速度を示す。つまり、動画の長さ６２Ｄに対して試合経過時間６２Ｃが長い仮想視点動画３０、つまり平均速度が速い動画は、長時間の撮像動画３４を縮めた早回しの動画である。なお、試合経過時間６２Ｃの長さは、本開示の技術に係る「第２時刻情報」の一例である。

【0204】

図３５に示す例では、動画再生部２８は、生成動画リスト６０に記録された各仮想視点動画３０の平均速度を算出し、算出した平均速度が速い順に、生成動画リスト６０内の仮想視点動画３０を並べ替える。動画再生部２８は、並べ替え後の生成動画リスト６０をお勧め動画リスト６６として記憶する。動画再生部２８は、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。

【0205】

一例として図３６に示すように、仮想視点動画３０の平均速度に基づいて生成されたお勧めデータ３２を表示するお勧め画面７０では、俯瞰画像５６の下にシークバー９５が表示される。シークバー９５において、仮想視点動画３０の速度が既定値よりも速い箇所（以下、「早回し箇所」と称する）はハッチングで示される。仮想視点動画３０の速度が既定値よりも遅い箇所（以下、「遅回し箇所」と称する）は、好プレーシーン及び／又はゴールシーン等の注目されるシーンに対応する箇所であると推定される。各遅回し箇所に対応して、試合経過時間６２Ｃが表示される。また、視点位置パス５８Ｄにおいて、早回し箇所と遅回し箇所は区別可能な態様で表示される。

【0206】

図３５及び図３６に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、動画の長さ６２Ｄに対する試合経過時間６２Ｃの長さに基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0207】

一例として図３７に示すように、生成動画リスト６０には、各仮想視点動画３０のデータ容量９６が記憶されている。動画再生部２８は、各仮想視点動画３０のデータ容量９６に基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。なお、データ容量９６は、本開示の技術に係る「データ容量」の一例である。

【0208】

動画再生部２８は、ユーザデバイス１２の通信速度を判別し、判別したユーザデバイス１２の通信速度に応じて、生成動画リスト６０内の仮想視点動画３０を並べ替える。つまり、ユーザデバイス１２の通信速度が既定値よりも遅い場合には、データ容量９６が小さい順に、生成動画リスト６０内の仮想視点動画３０を並べ替える。一方、ユーザデバイス１２の通信速度が既定値よりも速い場合には、データ容量９６が大きい順に、生成動画リスト６０内の仮想視点動画３０を並べ替える。動画再生部２８は、並べ替え後の生成動画リスト６０をお勧め動画リスト６６として記憶する。動画再生部２８は、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。

【0209】

図３７に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、各仮想視点動画３０のデータ容量９６に基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0210】

図３７に示す例では、動画再生部２８は、仮想視点動画３０のデータ容量９６に基づいてお勧めデータ３２を生成するが、本開示の技術はこれに限定されない。動画再生部２８は、仮想視点動画３０のデータ容量９６の代わりに、各仮想視点動画３０の解像度９７に基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。

【0211】

一例として図３８に示すように、生成動画リスト６０には、各仮想視点動画３０の解像度９７が記憶されている。動画再生部２８は、ユーザデバイス１２の通信速度に応じて生成動画リスト６０内の仮想視点動画３０を並べ替え、並べ替え後の生成動画リスト６０をお勧め動画リスト６６として記憶する。動画再生部２８は、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。なお、解像度９７は、本開示の技術に係る「画質に関するパラメータ」の一例である。

【0212】

図３８に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、各仮想視点動画３０の解像度９７に基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。なお、図３８に示す例では、動画再生部２８は、各仮想視点動画３０の解像度９７に基づいてお勧めデータ３２を生成するが、本開示の技術はこれに限定されない。動画再生部２８は、各仮想視点動画３０の解像度９７の代わりに、各仮想視点動画３０のフレームレートに基づいてお勧めデータ３２を生成してもよい。

【0213】

一例として図３９に示すように、生成動画リスト６０は、各仮想視点動画３０に付与された音声データ９８の有無に関する情報を含む。音声データ９８としては、各仮想視点動画３０に付与された解説者の音声、選手の声、声援、及び歌声等が挙げられる。音声データ９８は、仮想視点動画３０を生成するのに用いられた撮像動画３４に含まれている音声がそのまま付与されたものでもよいし、生成後の仮想視点動画３０に付与したものであってもよい。

【0214】

動画再生部２８は、各仮想視点動画３０に付与された音声データ９８の有無に基づいて定められた順に、サムネイル画像６２Ｅ及び／又は視点関連情報５８をユーザデバイス１２に表示するお勧めデータ３２を生成してもよい。図３９に示す例では、動画再生部２８は、音声データ９８を有する仮想視点動画３０が、音声データ９８を有さない仮想視点動画３０よりも上位に位置するように、生成動画リスト６０内の仮想視点動画３０を並べ替え、並べ替え後の生成動画リスト６０をお勧め動画リスト６６として記憶する。動画再生部２８は、生成したお勧め動画リスト６６に従ってお勧めデータ３２を作成する。なお、音声データ９８は、本開示の技術に係る「音声データ」の一例である。

【0215】

図３９に示す構成によれば、お勧めデータ３２が、ランダムに選択された仮想視点動画３０の情報を含む場合に比べ、各仮想視点動画３０に付与された音声データ９８の有無に基づいて、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0216】

上記第１及び第２実施形態では、ユーザの操作によりユーザデバイス１２から送信される再生指示７２に応じて、１つの仮想視点動画３０がユーザデバイス１２で再生される形態例について説明したが、本開示の技術はこれに限定されない。以下、図４０～図４４を参照して、ユーザデバイス１２から送信される再生指示７２に応じて、複数の仮想視点動画３０がユーザデバイス１２で再生される形態例について説明する。

【0217】

一例として図４０に示すように、動画再生部２８は、上記に説明した何れかの形態例でお勧めデータ３２を生成し、生成したお勧めデータ３２をユーザデバイス１２に送信する。ユーザデバイス１２は、お勧めデータ３２を受信し、受信したお勧めデータ３２を、お勧め画面７０としてタッチパネル・ディスプレイ１２Ａに表示させる。

【0218】

ユーザがお勧め画面７０に表示されたサムネイル画像６２Ｅに接触した場合、ユーザデバイス１２は、再生指示７２を動画再生部２８に送信する。動画再生部２８は、ユーザデバイス１２から再生指示７２を受け付けた場合に、お勧め画面７０に表示された情報を有する５つの仮想視点動画３０をデータベース２２から読み出し、読み出した５つの仮想視点動画３０が順次ユーザデバイス１２で再生される再生データ１０２を生成してもよい。動画再生部２８は、生成した再生データ１０２をユーザデバイス１２に送信する。ユーザデバイス１２は、再生データ１０２を受信し、受信した再生データ１０２をタッチパネル・ディスプレイ１２Ａで再生する。なお、再生データ１０２は、本開示の技術に係る「第２データ」の一例である。

【0219】

「５つの仮想視点動画３０が順次ユーザデバイス１２で再生される」とは、１つの仮想視点動画３０の再生が終了した後、すぐに次の仮想視点動画３０の再生が開始されてもよいし、１つの仮想視点動画３０の再生が終了する前に、次の仮想視点動画３０の再生が開始されてもよい。また、１つの仮想視点動画３０の再生が終了してから既定時間が経過した後、次の仮想視点動画３０の再生が開始されてもよい。また、５つの仮想視点動画３０は、ユーザの操作によりユーザデバイス１２から停止指示が送信されるまで、繰り返し再生され続けてもよい。

【0220】

図４０に示す構成によれば、ユーザによる仮想視点動画３０の再生操作の手間を省くことができる。なお、図４０に示す構成では、お勧め画面７０に表示された情報を有する５つの仮想視点動画３０のうちの全てが順次ユーザデバイス１２で再生されているが、本開示の技術はこれに限定されず、５つの仮想視点動画３０のうちの２つ以上が順次ユーザデバイス１２で再生されればよい。

【0221】

図４０に示す例では、動画再生部２８は、５つの仮想視点動画３０が順次ユーザデバイス１２で再生される再生データ１０２を生成する態様を示したが、本開示の技術はこれに限定されない。一例として図４１に示すように、動画再生部２８は、順次ユーザデバイス１２で再生される複数の仮想視点動画３０の各々の再生が終了する毎に、別の動画１０６がユーザデバイス１２で再生される再生データ１０２を生成してもよい。なお、動画１０６は、本開示の技術に係る「第１画像」の一例である。

【0222】

動画１０６は、仮想視点動画３０であってもよいし、又は撮像動画３４であってもよい。又は、動画１０６は、仮想視点動画３０又は撮像動画３４とは別の動画であってもよい。また、図４１に示す例では、５つの仮想視点動画３０の各々の再生が終了する毎に、動画１０６がユーザデバイス１２で再生されているが、本開示の技術はこれに限定されず、少なくとも２つの仮想視点動画３０の再生の間に動画１０６が再生されればよい。動画１０６としては、例えば、動画１０６の再生直前に再生された仮想視点動画３０のリプレイ動画又はダイジェスト動画等が挙げられる。

【0223】

図４１に示す構成によれば、お勧め画面７０に表示された情報を有する仮想視点動画３０だけが順次再生される場合に比べ、ユーザの意図に関わらず、ユーザに別の動画１０６を観賞させることができる。

【0224】

図４１に示す例では、動画再生部２８は、各々の仮想視点動画３０の再生が終了する毎に、別の動画１０６がユーザデバイス１２で再生される再生データ１０２を生成する態様を示したが、本開示の技術はこれに限定されない。一例として図４２に示すように、動画再生部２８は、各々の仮想視点動画３０の再生が終了する毎に、次の仮想視点動画３０を再生する条件となる広告動画１０８がユーザデバイス１２で再生される再生データ１０２を生成してもよい。なお、広告動画１０８は、本開示の技術に係る「第２画像」の一例である。

【0225】

図４２に示す構成によれば、お勧め画面７０に表示された情報を有する仮想視点動画３０だけが順次再生される場合に比べ、広告による効果を得ることができる。なお、図４２に示す例では、各々の仮想視点動画３０の再生が終了する毎に、広告動画１０８がユーザデバイス１２で再生されるが、本開示の技術はこれに限定されず、ユーザデバイス１２を使用しているユーザに対してアンケートの回答を要求するアンケート画像が再生されてもよい。また、図４２に示す例では、各々の仮想視点動画３０の再生が終了する毎に、広告動画１０８がユーザデバイス１２で再生されるが、本開示の技術はこれに限定されない。一例として図４３に示すように、仮想視点動画３０の再生中に広告動画１０８がユーザデバイス１２で再生されてもよい。

【0226】

図４２に示す例では、動画再生部２８は、各々の仮想視点動画３０の再生が終了する毎に、同一の広告動画１０８がユーザデバイス１２で再生される再生データ１０２を生成したが、本開示の技術はこれに限定されない。動画再生部２８は、ユーザデバイス１２に送信された広告動画１０８の内容に関する広告情報１１０に基づいて、仮想視点動画３０を再生する条件となる広告動画１０８がユーザデバイス１２で再生される再生データ１０２を生成してもよい。なお、広告情報１１０は、本開示の技術に係る「画像情報」の一例である。

【0227】

一例として図４４に示すように、ユーザＡのアカウントに対応する再生済み動画リスト６４には、各仮想視点動画３０の再生後又は再生中にユーザデバイス１２に表示された広告の内容を示す広告情報１１０が記録されている。動画再生部２８は、再生済み動画リスト６４から広告情報１１０を読み出し、同一の広告動画が既定回数（例えば、数回）以上連続して再生されている場合には、別の広告動画がユーザデバイス１２で再生される再生データ１０２を生成する。図４４に示す例では、「０２１」、「０２２」、及び「０２３」の動画ＩＤ６２Ａを有する仮想視点動画３０の再生後又は再生中に、第１広告動画が３回連続して再生されている。そこで、動画再生部２８は、第１広告動画を第２広告動画に切り替えて、第２広告動画がユーザデバイス１２で再生される再生データ１０２を生成する。なお、第１広告動画は、本開示の技術に係る「第２画像」の一例であり、第２広告動画は、本開示の技術に係る「第３画像」の一例である。

【0228】

図４４に示す構成によれば、第１広告動画のみが繰り返しユーザデバイス１２で再生される場合に比べ、広告の効果をより向上させることができる。

【0229】

上記図４０～図４４に示す構成では、動画再生部２８は、複数の仮想視点動画３０の全編がユーザデバイス１２で再生される再生データ１０２を生成する形態例について説明したが、本開示の技術はこれに限定されない。以下、図４５～図４９を参照して、ユーザデバイス１２から送信される指示に応じて、ユーザデバイス１２で再生中の仮想視点動画３０が別の仮想視点動画３０に切り換わる形態例について説明する。

【0230】

一例として図４５に示すように、ユーザがお勧め画面（図１０参照）に表示されたサムネイル画像６２Ｅに接触した場合、ユーザデバイス１２は、再生指示７２を動画再生部２８に送信する。動画再生部２８は、複数の仮想視点動画３０のうち、ユーザデバイス１２から与えられた再生指示７２に従って選択された仮想視点動画３０－Ｘに、他の仮想視点動画３０－Ｙ及び３０－Ｚに係る視点位置パス５８Ｄを示す矢印画像１１１を合成した合成動画１１２を生成する。動画再生部２８は、合成動画１１２がユーザデバイス１２で再生される再生データ１０２を生成し、生成した再生データ１０２をユーザデバイス１２に送信する。ユーザデバイス１２は、再生データ１０２をタッチパネル・ディスプレイ１２Ａで再生する。なお、合成動画１１２は、本開示の技術に係る「合成画像」の一例である。

【0231】

一例として図４６に示すように、ユーザが指又はスタイラスペン等で、例えば、仮想視点動画３０－Ｙの視点位置パス５８Ｄを示す矢印画像１１１に接触した場合、ユーザデバイス１２は、パス変更指示１１３を動画再生部２８に送信する。動画再生部２８は、ユーザデバイス１２からパス変更指示１１３を受け付けた場合、合成動画１１２の再生を止めて、パス変更指示１１３に含まれる視点位置パス５８Ｄに対応した仮想視点動画３０－Ｙがユーザデバイス１２で再生される再生データ１０２を生成する。動画再生部２８は、生成した再生データ１０２をユーザデバイス１２に送信する。ユーザデバイス１２は、再生データ１０２を受信し、受信した再生データ１０２をタッチパネル・ディスプレイ１２Ａで再生する。なお、パス変更指示は、本開示の技術に係る「パス変更指示」の一例である。

【0232】

これにより、ユーザデバイス１２で再生中の仮想視点動画３０－Ｘに基づく合成動画１１２が、仮想視点動画３０－Ｙに切り換わる。また、切り換えのタイミングにおいて、タッチパネル・ディスプレイ１２Ａの右下には、仮想視点動画３０－Ｘ及び３０－Ｙに係る視点位置パス５８Ｄの形が重畳された俯瞰画像５６が表示される。また、タッチパネル・ディスプレイ１２Ａで再生中の仮想視点動画３０－Ｘの視点位置パス５８Ｄから仮想視点動画３０－Ｙの視点位置パス５８Ｄにスムーズに切り換える切換動画の視点位置パス５８Ｄが、俯瞰画像５６に重畳表示されてもよい。

【0233】

切換動画とは、仮想視点動画３０－Ｘの視点位置パス５８Ｄと仮想視点動画３０－Ｙの視点位置パス５８Ｄとに基づいて、動画生成部２６により生成される仮想視点動画３０である。この場合、動画再生部２８は、合成動画１１２、切り替え動画、及び仮想視点動画３０－Ｙが、この順でユーザデバイス１２に再生される再生データ１０２を生成する。

【0234】

図４５に示す構成によれば、動画再生部２８は、合成動画１１２が再生される再生データ１０２を生成することにより、再生中の仮想視点動画３０－Ｘから他の仮想視点動画３０－Ｙへの切り換えを可能にする。また、図４６に示す構成によれば、再生中の仮想視点動画３０から他の仮想視点動画３０への切り換えができない場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。なお、図４５に示す例では、合成動画１１２には、視点位置パス５８Ｄを示す矢印画像１１１が合成されているが、本開示の技術はこれに限定されず、視点位置パス５８Ｄの代わりに注視点パスを示す矢印画像が合成されていてもよい。この場合、パス変更指示は、視点位置パス５８Ｄに対する変更指示ではなく、注視点パスに対する変更指示になる。

【0235】

図４５及び図４６に示す構成によれば、ユーザデバイス１２で再生中の仮想視点動画３０が、既に生成されている他の仮想視点動画３０に切り替えられたが、本開示の技術はこれに限定されず、ユーザデバイス１２で再生中の仮想視点動画３０に対する指示に従って新たに生成された仮想視点動画３０に切り替えられてもよい。

【0236】

一例として図４７に示すように、動画生成部２６は、ユーザデバイス１２から、ユーザデバイス１２で再生中の仮想視点動画３０の視点位置５８Ａに対する視点位置変更指示１１４を受け付けた場合、受け付けた視点位置変更指示１１４に基づいて導出された新たな視点位置５８Ａに基づいて、新たな仮想視点動画３０を生成してもよい。動画再生部２８は、動画生成部２６によって生成された新たな仮想視点動画３０がユーザデバイス１２で再生される再生データ１０２を生成し、生成した再生データ１０２をユーザデバイス１２に送信してもよい。なお、視点位置変更指示１１４は、本開示の技術に係る「視点関連情報に対する変更指示」の一例である。

【0237】

図４７に示す例では、ユーザが、指又はスタイラスペン等で、仮想視点動画３０を再生中のタッチパネル・ディスプレイ１２Ａの任意の位置（以下、「指示位置」と称する）１１５を指示した場合、ユーザデバイス１２は、視点位置変更指示１１４を動画生成部２６に送信する。視点位置変更指示１１４は、再生中の仮想視点動画３０において、視点位置変更指示１１４を受け付けたタイミングに対応する試合経過時間６２Ｃと、再生中の仮想視点動画３０に含まれる画像であって、視点位置変更指示１１４を受け付けたタイミングに対応するフレームの画像に対する指示位置１１５の座標と、を含む。

【0238】

動画生成部２６は、ユーザデバイス１２から視点位置変更指示１１４を受け付ける。動画生成部２６は、視点位置変更指示１１４に含まれる指示位置１１５の座標に基づいて、サッカー競技場内の新たな視点位置５８Ａを導出する。動画生成部２６は、導出した新たな視点位置５８Ａに基づき、視点位置変更指示１１４に含まれる試合経過時間６２Ｃに対応する撮像動画３４を用いて、試合経過時間６２Ｃ以降の新たな仮想視点動画３０を生成する。動画生成部２６は、生成した仮想視点動画３０をデータベース２２に記憶する。

【0239】

動画再生部２８は、データベース２２から新たな仮想視点動画３０を読み出し、新たな仮想視点動画３０がユーザデバイス１２で再生される再生データ１０２を生成する。動画再生部２８は、生成した再生データ１０２をユーザデバイス１２に送信する。ユーザデバイス１２は、再生データ１０２を受信し、受信した再生データ１０２をタッチパネル・ディスプレイ１２Ａで再生する。従って、ユーザデバイス１２では、タッチパネル・ディスプレイ１２Ａで再生中の仮想視点動画３０が、視点位置変更指示１１４に基づいて新たに生成された仮想視点動画３０に切り替わる。

【0240】

図４７に示す構成によれば、ユーザは、観賞中の仮想視点動画３０の視点位置５８Ａを変更することができる。なお、図４７に示す例では、ユーザが仮想視点動画３０を再生中のタッチパネル・ディスプレイ１２Ａの任意の位置を指示することによって、仮想視点動画３０の視点位置５８Ａが変更されたが、本開示の技術はこれに限定されず、視線方向５８Ｂ、画角５８Ｃ、又は注視点５８Ｅ等が変更されてもよい。

【0241】

図４７に示す構成によれば、ユーザによってタッチパネル・ディスプレイ１２Ａに与えられた指示位置１１５に基づいて新たな視点位置５８Ａが導出されたが、本開示の技術はこれに限定されず、再生中の仮想視点動画３０の視点位置パス５８Ｄに基づいて新たな視点位置パス５８Ｄが決定されてもよい。

【0242】

一例として図４８に示すように、動画生成部２６は、ユーザデバイス１２から、ユーザデバイス１２で再生中の仮想視点動画３０に対するリプレイ動画生成指示１１６を受け付けた場合、再生中の仮想視点動画３０に関する視点関連情報５８に基づいて、リプレイ動画１２０を生成してもよい。動画再生部２８は、動画生成部２６によって生成されたリプレイ動画１２０がユーザデバイス１２で再生される再生データ１０２を生成し、生成した再生データ１０２をユーザデバイス１２に送信してもよい。なお、リプレイ動画生成指示１１６は、本開示の技術に係る「リプレイ画像生成指示」の一例である。

【0243】

図４８に示す例では、タッチパネル・ディスプレイ１２Ａで仮想視点動画３０を再生する動画再生画面３３の右下には、リプレイ動画生成ボタン１１８が設けられている。ユーザが、指又はスタイラスペン等で、仮想視点動画３０を再生中の動画再生画面３３に設けられたリプレイ動画生成ボタン１１８に接触した場合、ユーザデバイス１２は、リプレイ動画生成指示１１６を動画生成部２６に送信する。リプレイ動画生成指示１１６は、再生中の仮想視点動画３０において、リプレイ動画生成指示１１６を受け付けたタイミングに対応する試合経過時間６２Ｃと、再生中の仮想視点動画３０に関する視点位置パス５８Ｄ及び注視点５８Ｅと、を含む。

【0244】

動画生成部２６は、ユーザデバイス１２からリプレイ動画生成指示１１６を受け付ける。動画生成部２６は、リプレイ動画生成指示１１６に含まれる視点位置パス５８Ｄに基づいて、再生中の仮想視点動画３０に係る視点位置パス５８Ｄとは異なる新たな視点位置パス５８Ｄを決定する。動画生成部２６は、決定した新たな視点位置パス５８Ｄと、リプレイ動画生成指示１１６に含まれる注視点５８Ｅと同一の注視点５８Ｅとに基づき、視点位置変更指示１１４に含まれる試合経過時間６２Ｃの数秒～数十秒前から試合経過時間６２Ｃまでの間に撮像された撮像動画３４を用いて、新たな仮想視点動画であるリプレイ動画１２０を生成する。動画生成部２６は、生成したリプレイ動画１２０をデータベース２２に記憶する。

【0245】

動画再生部２８は、データベース２２からリプレイ動画１２０を読み出し、リプレイ動画１２０がユーザデバイス１２で再生される再生データ１０２を生成する。動画再生部２８は、生成した再生データ１０２をユーザデバイス１２に送信する。ユーザデバイス１２は、再生データ１０２を受信し、受信した再生データ１０２をタッチパネル・ディスプレイ１２Ａで再生する。従って、ユーザデバイス１２では、タッチパネル・ディスプレイ１２Ａで再生中の仮想視点動画３０が、リプレイ動画１２０に切り替わる。

【0246】

図４８に示す構成によれば、ユーザは、観賞中の仮想視点動画３０のリプレイ動画１２０を観賞することができる。

【0247】

一例として図４９に示すように、動画生成部２６は、ユーザデバイス１２から、ユーザデバイス１２で再生中の仮想視点動画３０のうちの観賞を拒否する被写体に関する観賞拒否被写体情報１２２を受け付けた場合、観賞拒否被写体情報１２２に基づく視点関連情報５８に基づいて、新たな仮想視点動画３０を生成してもよい。動画再生部２８は、動画生成部２６によって生成された新たな仮想視点動画３０がユーザデバイス１２で再生される再生データ１０２を生成し、生成した再生データ１０２をユーザデバイス１２に送信してもよい。なお、観賞拒否被写体情報１２２は、本開示の技術に係る「観賞拒否被写体情報」の一例である。

【0248】

図４９に示す例では、ユーザが、指又はスタイラスペン等で、タッチパネル・ディスプレイ１２Ａで再生中の仮想視点動画３０内の観賞したくない選手を示すオブジェクト画像１２４に接触した場合、ユーザデバイス１２は、観賞拒否被写体情報１２２を動画生成部２６に送信する。観賞拒否被写体情報１２２は、オブジェクト画像１２４と、再生中の仮想視点動画３０において、観賞拒否被写体情報１２２を受け付けたタイミングに対応する試合経過時間６２Ｃと、再生中の仮想視点動画３０に関する注視点５８Ｅと、を含む。

【0249】

動画生成部２６は、ユーザデバイス１２から観賞拒否被写体情報１２２を受け付ける。動画生成部２６は、観賞拒否被写体情報１２２に含まれるオブジェクト画像１２４に基づき、周知の画像認識技術等を用いて、オブジェクト画像１２４に写る選手を特定する。動画生成部２６は、特定した選手が写らない仮想視点動画３０が生成される視点関連情報５８を決定する。この場合、決定される視点関連情報５８は、観賞拒否被写体情報１２２に含まれる注視点５８Ｅと同一の注視点５８Ｅを有し、かつ、再生中の仮想視点動画３０と異なる視点位置パス５８Ｄを有する。

【0250】

動画生成部２６は、決定した視点関連情報５８に基づき、観賞拒否被写体情報１２２に含まれる試合経過時間６２Ｃ以降に撮像された撮像動画３４を用いて、仮想視点動画３０を生成する。動画生成部２６は、生成した仮想視点動画３０をデータベース２２に記憶する。

【0251】

動画再生部２８は、データベース２２から仮想視点動画３０を読み出し、仮想視点動画３０がユーザデバイス１２で再生される再生データ１０２を生成する。動画再生部２８は、生成した再生データ１０２をユーザデバイス１２に送信する。ユーザデバイス１２は、再生データ１０２を受信し、受信した再生データ１０２をタッチパネル・ディスプレイ１２Ａで再生する。

【0252】

図４９に示す構成によれば、ユーザは、観賞したくない被写体を含まない仮想視点動画３０を観賞することができる。なお、図４９に示す例では、オブジェクト画像１２４は、観賞したくない選手の画像であるが、本開示の技術はこれに限定されず、オブジェクト画像１２４は、広告看板、ゴール、及びライン等を含むサッカー競技場内の任意のオブジェクトの画像であってもよい。

【0253】

一例として図５０に示すように、お勧めデータ３２は、ユーザのアカウント６４Ａに対応付けて登録された属性データ６４Ｂに基づいて、仮想視点動画３０のうちの観賞制限対象とされた仮想視点動画３０を除外したデータであってもよい。図５０に示す例では、「Ａ」のアカウント６４Ａに対応付けて、「１２才未満」の属性データ６４Ｂが登録されている。また、生成動画リスト６０の動画情報６２は、仮想視点動画３０を観賞できるユーザをユーザの年齢に応じて制限する対象年齢６２Ｇを含んでいる。

【0254】

動画再生部２８は、ユーザＡが使用しているユーザデバイス１２から動画再生要求５２を受信した場合、ユーザＡのアカウント６４Ａに対応付けて登録された「１２才未満」の属性データ６４Ｂに基づいて、生成動画リスト６０に記録されている仮想視点動画３０のうち、１２才未満のユーザによる観賞が制限されている仮想視点動画３０に関する情報をお勧め動画リスト６６から除外する。図５０に示す例では、生成動画リスト６０において、「００３」の動画ＩＤ６２Ａを有する仮想視点動画３０は、対象年齢６２Ｇが「１５才以上」になっている。このため、動画再生部２８は、「１５才以上」の対象年齢６２Ｇを有する仮想視点動画３０を生成動画リスト６０から削除する処理を行い、処理後の生成動画リスト６０をお勧め動画リスト６６としてデータベース２２に記憶する。

【0255】

図５０に示す構成によれば、仮想視点動画３０がユーザの属性データ６４Ｂによって制限されない場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0256】

一例として図５１に示すように、ユーザデバイス１２から送信される動画再生要求５２は、試合経過時間６２Ｃに対する時刻設定指示１２６を含んでいてもよい。動画再生部２８は、ユーザデバイス１２から時刻設定指示１２６を含む動画再生要求５２を受け付けた場合、複数の仮想視点動画３０のうち、試合経過時間６２Ｃが時刻設定指示１２６によって示される範囲内である仮想視点動画３０（以下、「時刻限定仮想視点動画」とも称する）に関する情報を含むお勧めデータ３２を生成してもよい。また、お勧めデータ３２は、時刻限定仮想視点動画の数と、時刻限定仮想視点動画のうちのユーザデバイス１２で再生済みの仮想視点動画の数とを含んでいてもよい。なお、試合経過時間６２Ｃは、本開示の技術に係る「第３時刻情報」の一例である。また、時刻限定仮想視点動画は、本開示の技術に係る「時刻限定仮想視点画像」の一例である。

【0257】

動画再生部２８は、ユーザデバイス１２から時刻設定指示１２６を含む動画再生要求５２を受け付けた場合、データベース２２から生成動画リスト６０を読み出す。動画再生部２８は、生成動画リスト６０に記録されている仮想視点動画３０のうち、試合経過時間６２Ｃが時刻設定指示１２６によって示される範囲内である時刻限定仮想視点動画を残し、他の仮想視点動画３０を生成動画リスト６０から削除する。動画再生部２８は、生成動画リスト６０に残った時刻限定仮想視点動画の数を、総動画数１３０（図５２参照）として取得する。

【0258】

動画再生部２８は、動画再生要求５２の出力元であるユーザデバイス１２に関する再生済み動画リスト６４をデータベース２２から読み出す。動画再生部２８は、再生済み動画リスト６４に含まれる再生済みの仮想視点動画３０を生成動画リスト６０から削除し、削除後の生成動画リスト６０をお勧め動画リスト６６としてデータベース２２に記憶する。動画再生部２８は、総動画数１３０から、お勧め動画リスト６６に含まれる仮想視点動画３０の数を引いた値を、再生済み動画数１３２（図５２参照）として取得する。動画再生部２８は、お勧め動画リスト６６、総動画数１３０、及び再生済み動画数１３２に基づいてお勧めデータ３２を生成し、生成したお勧めデータ３２をユーザデバイス１２に送信する。

【0259】

一例として図５２に示すように、ユーザデバイス１２は、お勧めデータ３２を受信し、受信したお勧めデータ３２を、お勧め画面７０としてタッチパネル・ディスプレイ１２Ａに表示させる。お勧め画面７０には、時刻設定指示１２６で設定された試合経過時間６２Ｃを示す時刻設定情報１３４、時刻限定仮想視点動画の数を示す総動画数１３０、及び時刻限定仮想視点動画のうちの再生済み動画数１３２が含まれる。

【0260】

図５１に示す構成によれば、時刻設定指示１２６が受け付けられない場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。また、図５２に示す構成によれば、ユーザは、総動画数１３０及び再生済み動画数１３２を把握することができる。

【0261】

一例として図５３に示すように、ユーザが、ユーザデバイス１２で再生されている仮想視点動画３０の観賞を途中で中止した場合にも、動画再生部２８は、少なくとも一部がユーザデバイス１２で再生された仮想視点動画３０を再生済み動画リスト６４に記録してもよい。これにより、例えば、ユーザが、ユーザデバイス１２で再生を始めた仮想視点動画３０が意図したものと違っていたため途中で中止した場合に、途中で中止された仮想視点動画３０に関する情報が再生済み動画リスト６４に記録されることになる。動画再生部２８は、再生済み動画リスト６４を参照して、途中で再生が中止された仮想視点動画３０の情報に基づいてお勧めデータ３２を生成する。この場合、例えば、途中で中止された所までの視点位置パス５８Ｄの情報に基づき、上記実施形態と同様の方法にしてお勧めデータ３２が生成される。

【0262】

図５３に示す構成によれば、再生済み動画リスト６４が、全編再生された仮想視点動画３０しか含まない場合に比べ、ユーザが意図する仮想視点動画３０をユーザに対して選択させ易くすることができる。

【0263】

図５３に示す例では、動画再生部２８は、少なくとも一部がユーザデバイス１２で再生された仮想視点動画３０を再生済みと判断する形態例について説明したが、本開示の技術はこれに限定されない。以下、図５４～図５６を参照して、全編がユーザデバイス１２で再生された仮想視点動画３０が再生済みと判断される形態例について説明する。

【0264】

一例として図５４に示すように、生成動画リスト６０には、５つの仮想視点動画３０に関する情報が含まれている。５つの仮想視点動画３０は、例えば、火災現場での火の広がり方等を学ぶ教育用途で用いられる動画である。動画生成部２６は、火災再現実験が撮像されることで得られた撮像動画３４を用いて、データ処理装置１０の管理者が作成した視点位置パス５８Ｄに基づいて仮想視点動画３０を生成し、生成した仮想視点動画３０に関する動画情報６２及び視点関連情報５８を生成動画リスト６０に記録する。

【0265】

動画再生部２８は、観賞者Ａ～Ｃの各々のアカウントでデータ処理装置１０にアクセスしているユーザデバイス１２からの要求に応じて、仮想視点動画３０を要求の出力元であるユーザデバイス１２に送信する。各ユーザデバイス１２による仮想視点動画３０の再生履歴、すなわち、各観賞者Ａ、Ｂ、又はＣによる仮想視点動画３０の観賞履歴は、生成動画リスト６０に記録される。なお、観賞者Ａ、観賞者Ｂ、及び観賞者Ｃは、本開示の技術に係る「観賞者」の一例である。以下、観賞者Ａ、観賞者Ｂ、及び観賞者Ｃを区別して説明する必要がない場合には、包括的に「観賞者」と称する。

【0266】

生成動画リスト６０には、観賞者データ１４０Ａと観賞回数１４０Ｂとを含む観賞データ１４０が記録されている。観賞者データ１４０Ａは、各仮想視点動画３０が、各観賞者によって観賞されたか否かを示す。観賞回数１４０Ｂは、観賞者によって各仮想視点動画３０が観賞された回数を示す。

【0267】

動画再生部２８は、仮想視点動画３０の観賞者に対して関連付けられたアカウントへの仮想視点動画３０の再生履歴を、観賞者データ１４０Ａとして取得可能である。また、動画再生部２８は、各々の仮想視点動画３０がユーザデバイス１２で何度再生されたかを、観賞回数１４０Ｂとして集計可能である。動画再生部２８は、取得した観賞者データ１４０Ａ及び観賞回数１４０Ｂを、データ処理装置１０の管理者に対して関連付けられたアカウントに対して出力可能である。動画再生部２８は、観賞データ１４０を、例えば図５４に示す表形式で出力する。

【0268】

図５４に示す構成によれば、データ処理装置１０の管理者は、どのユーザデバイス１２に仮想視点動画３０が送信されたかを、仮想視点動画３０の視点関連情報５８と対応付けて把握することができる。

【0269】

図５４に示す例では、動画再生部２８は、観賞データ１４０を表形式で出力するが、本開示の技術はこれに限定されない。動画再生部２８は、一例として図５５に示すパス画像の形式で、観賞データ１４０を出力してもよい。図５５に示す例では、動画再生部２８は、火災再現実験の３次元画像と、各仮想視点動画３０に関する動画ＩＤ６２Ａ、視点位置パス５８Ｄ、観賞データ１４０とを含む管理データを生成する。動画再生部２８は、生成した管理データを、管理者のアカウントでデータ処理装置１０にアクセスしているタブレット端末１４２に送信する。タブレット端末１４２は、管理データを受信し、受信した管理データを、管理画面１４４として、タッチパネル・ディスプレイ１４２Ａに表示させる。なお、管理データは、本開示の技術に係る「第２データ」の一例である。

【0270】

管理画面１４４では、各仮想視点動画３０の視点位置パス５８Ｄの形が、火災再現実験の３次元画像に重畳されて表示される。管理画面１４４において、各視点位置パス５８Ｄに対応する仮想視点動画３０の動画ＩＤ６２Ａ、観賞回数１４０Ｂ、及び各仮想視点動画３０を未観賞の観賞者名は、各視点位置パス５８Ｄに対応付けて表示される。観賞者Ａ～Ｃの全員によって観賞済みの仮想視点動画３０に係る視点位置パス５８Ｄの形、つまり、「３回」の観賞回数１４０Ｂを有する仮想視点動画３０に係る視点位置パス５８Ｄの形は、他の仮想視点動画３０に係る視点位置パス５８Ｄの形と区別可能な態様で管理画面１４４に表示される。

【0271】

「観賞者Ａ～Ｃの全員によって観賞済みの仮想視点動画３０」とは、観賞者Ａ～Ｃの全員が、仮想視点動画３０の全編を観賞済みということであり、仮想視点動画３０に係る視点位置パス５８Ｄの最初から最後までを観賞済みということである。観賞者が、各視点位置パス５８Ｄの途中で仮想視点動画３０の観賞を停止した場合には、観賞を途中で停止した観賞者名と停止位置を示すタグ１４６が、視点位置パス５８Ｄに対応付けて表示される。

【0272】

図５５に示す構成によれば、データ処理装置１０の管理者は、各仮想視点動画３０が何回再生されたかを、各仮想視点動画３０の視点位置パス５８Ｄと対応付けて把握することができる。なお、図５５に示す例では、視点位置パス５８Ｄの形が火災再現実験の３次元画像に重畳表示されているが、本開示の技術はこれに限定されず、注視点パスの形が火災再現実験の３次元画像に重畳表示されてもよい。

【0273】

観賞者が、各視点位置パス５８Ｄの途中で仮想視点動画３０の観賞を停止した場合の停止位置の表示方法は図５５に示す例に限らない。一例として図５６に示すように、動画再生部２８は、視点位置パス５８Ｄの形が火災再現実験の３次元画像に重畳表示されるパス画像を含む管理データを、観賞者毎に生成し、生成した管理データを各観賞者が使用するユーザデバイス１２に送信してもよい。ユーザデバイス１２は、管理データを受信し、受信した管理データを管理画面１４８としてタッチパネル・ディスプレイ１２Ａに表示させる。

【0274】

管理画面１４８では、視点位置パス５８Ｄの形が、火災再現実験の３次元画像に重畳表示されている。仮想視点動画３０の動画ＩＤ６２Ａは、仮想視点動画３０の視点位置パス５８Ｄと対応付けて表示される。パス画像において、視点位置パス５８Ｄのうちの仮想視点動画３０を再生済みの部分は、未再生の部分と区別可能な態様で表示される。

【0275】

図５６に示す構成によれば、パス画像において、視点位置パス５８Ｄのうちの仮想視点動画３０を再生済みの部分と未再生の部分とが同じ態様で表示される場合に比べ、観賞者は、パス画像内の視点位置パス５８Ｄを参考に、仮想視点動画３０を選択することができる。なお、図５６に示す例では、視点位置パス５８Ｄの形が火災再現実験の３次元画像に重畳表示されているが、本開示の技術はこれに限定されず、注視点パスの形が火災再現実験の３次元画像に重畳表示されてもよい。

【0276】

また、上記実施形態では、サッカー競技場又は火災再現実験を撮像した撮像動画３４を用いて仮想視点動画３０を生成する態様を例示したが、これはあくまでも一例に過ぎず、野球場、ラグビー場、カーリング場、陸上競技場、競泳場、コンサートホール、野外音楽場、及び演劇会場等のように、複数の物理カメラが設置可能であれば、如何なる場所の撮像動画３４を用いて仮想視点動画３０を生成してもよい。

【0277】

また、上記実施形態では、仮想視点動画３０が生成及び再生される態様を例示したが、これはあくまでも一例にすぎず、静止画である仮想視点画像が生成及び再生されてもよい。

【0278】

また、上記実施形態では、未送信仮想視点動画３０に基づきお勧めデータ３２を生成したが、必ずしも未送信仮想視点動画３０に基づきお勧めデータ３２を生成しなくてもよい。例えば、ユーザデバイス１２に送信済みの仮想視点動画３０であっても、ユーザによって再生されていない仮想視点動画３０であれば、ユーザにお勧めすることが考えられる。この場合、データ処理装置１０は、ユーザデバイス１２又はユーザのアカウントから、どの仮想視点動画３０が再生されたかに関するデータを取得し、未再生の仮想視点動画３０に基づきお勧めデータ３２を生成する。なお、ユーザが、再生済みの仮想視点動画３０を再度見たい場合もあるので、データ処理装置１０は、再生済みの仮想視点動画３０を含めてお勧めデータ３２を生成してもよい。

【0279】

また、上記実施形態では、コンピュータ１４を例示したが、本開示の技術はこれに限定されない。例えば、コンピュータ１４に代えて、ＡＳＩＣ、ＦＰＧＡ、及び／又はＰＬＤを含むデバイスを適用してもよい。また、コンピュータ１４に代えて、ハードウェア構成及びソフトウェア構成の組み合わせを用いてもよい。

【0280】

また、上記実施形態では、動画生成処理及び動画再生処理がデータ処理装置１０のＣＰＵ１４Ａによって実行される形態例を挙げて説明したが、本開示の技術はこれに限定されない。ＣＰＵ１４Ａに代えて、ＧＰＵを採用してもよいし、複数のＣＰＵを採用してもよい。また、１つのプロセッサ、又は、物理的に離れている複数のプロセッサによって各種処理が実行されるようにしてもよい。

【0281】

また、上記実施形態では、ＮＶＭ１４Ｂに作動プログラム２４が記憶されているが、本開示の技術はこれに限定されず、一例として図５７に示すように、任意の可搬型の記憶媒体２００に作動プログラム２４が記憶されていてもよい。記憶媒体２００は、非一時的記憶媒体である。記憶媒体２００としては、例えば、ＳＳＤ又はＵＳＢメモリ等が挙げられる。記憶媒体２００に記憶されている作動プログラム２４はコンピュータ１４にインストールされ、ＣＰＵ１４Ａは、作動プログラム２４に従って、動画生成処理及び動画再生処理を実行する。

【0282】

また、通信網（図示省略）を介してコンピュータ１４に接続される他のコンピュータ又はサーバ装置等のプログラムメモリに作動プログラム２４を記憶させておき、データ処理装置１０の要求に応じて作動プログラム２４がデータ処理装置１０にダウンロードされるようにしてもよい。この場合、ダウンロードされた作動プログラム２４に基づく動画生成処理及び動画再生処理がコンピュータ１４のＣＰＵ１４Ａによって実行される。

【0283】

動画生成処理及び動画再生処理を実行するハードウェア資源としては、次に示す各種のプロセッサを用いることができる。プロセッサとしては、例えば、上述したように、ソフトウェア、すなわち、プログラムに従ってデータ処理を実行するハードウェア資源として機能する汎用的なプロセッサであるＣＰＵが挙げられる。

【0284】

また、他のプロセッサとしては、例えば、ＦＰＧＡ、ＰＬＤ、又はＡＳＩＣなどの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路が挙げられる。何れのプロセッサにもメモリが内蔵又は接続されており、何れのプロセッサもメモリを使用することでデータ処理を実行する。

【0285】

データ処理を実行するハードウェア資源は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ、又はＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、データ処理を実行するハードウェア資源は１つのプロセッサであってもよい。

【0286】

１つのプロセッサで構成する例としては、第１に、クライアント及びサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが、データ処理を実行するハードウェア資源として機能する形態がある。第２に、ＳｏＣなどに代表されるように、データ処理を実行する複数のハードウェア資源を含むシステム全体の機能を１つのＩＣチップで実現するプロセッサを使用する形態がある。このように、データ処理は、ハードウェア資源として、上記各種のプロセッサの１つ以上を用いて実現される。

【0287】

更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電気回路を用いることができる。

【0288】

また、上述したデータ処理はあくまでも一例である。従って、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。

【0289】

以上に示した記載内容及び図示内容は、本開示の技術に係る部分についての詳細な説明であり、本開示の技術の一例に過ぎない。例えば、上記の構成、機能、作用、及び効果に関する説明は、本開示の技術に係る部分の構成、機能、作用、及び効果の一例に関する説明である。よって、本開示の技術の主旨を逸脱しない範囲内において、以上に示した記載内容及び図示内容に対して、不要な部分を削除したり、新たな要素を追加したり、置き換えたりしてもよいことは言うまでもない。また、錯綜を回避し、本開示の技術に係る部分の理解を容易にするために、以上に示した記載内容及び図示内容では、本開示の技術の実施を可能にする上で特に説明を要しない技術常識等に関する説明は省略されている。

【0290】

本明細書において、「Ａ及び／又はＢ」は、「Ａ及びＢのうちの少なくとも１つ」と同義である。つまり、「Ａ及び／又はＢ」は、Ａだけであってもよいし、Ｂだけであってもよいし、Ａ及びＢの組み合わせであってもよい、という意味である。また、本明細書において、３つ以上の事柄を「及び／又は」で結び付けて表現する場合も、「Ａ及び／又はＢ」と同様の考え方が適用される。

【0291】

本明細書に記載された全ての文献、特許出願及び技術規格は、個々の文献、特許出願及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。

【0292】

以上の実施形態に関し、更に以下の付記を開示する。

【0293】

［付記項１］
撮像画像に基づいて生成された複数の仮想視点画像をデバイスに送信するデータ処理方法であって、
上記複数の仮想視点画像のうち、上記デバイスに少なくとも一部が送信済みの仮想視点画像である第１仮想視点画像に関する第１データを取得すること、及び、
取得した上記第１データに基づいて、上記複数の仮想視点画像のうち、上記デバイスに未送信の仮想視点画像である第２仮想視点画像に関する第２データを上記デバイスに送信すること
を含むデータ処理方法。

【0294】

［付記項２］
撮像画像に基づいて生成された複数の仮想視点画像をデバイスに送信するデータ処理をコンピュータに実行させるためのプログラムであって、
上記データ処理は、
上記複数の仮想視点画像のうち、上記デバイスに少なくとも一部が送信済みの仮想視点画像である第１仮想視点画像に関する第１データを取得すること、及び、
取得した上記第１データに基づいて、上記複数の仮想視点画像のうち、上記デバイスに未送信の仮想視点画像である第２仮想視点画像に関する第２データを上記デバイスに送信することを含む処理である
プログラム。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】

【図25】

【図26】

【図27】

【図28】

【図29】

【図30】

【図31】

【図32】

【図33】

【図34】

【図35】

【図36】

【図37】

【図38】

【図39】

【図40】

【図41】

【図42】

【図43】

【図44】

【図45】

【図46】

【図47】

【図48】

【図49】

【図50】

【図51】

【図52】

【図53】

【図54】

【図55】

【図56】

【図57】

【手続補正書】

【提出日】2024-07-19

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

プロセッサと、
前記プロセッサに内蔵又は接続されたメモリと、を備え、
撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理装置であって、
前記プロセッサは、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データに基づいて、前記第１データに関連する前記仮想視点画像である第１仮想視点画像とは異なる前記仮想視点画像である第２仮想視点画像に関する第２データを送信する
データ処理装置。

【請求項2】

前記第１データは、前記仮想視点画像の視点に関連する視点関連情報を含む請求項１に記載のデータ処理装置。

【請求項3】

前記視点関連情報は、視点位置、視線方向、画角、注視点、前記視点位置の時間経過に応じた変位を示す視点位置パス、及び前記注視点の時間経過に応じた変位を示す注視点パスのうちの少なくとも１つを含む請求項２に記載のデータ処理装置。

【請求項4】

前記第１データは、前記仮想視点画像を生成するのに用いられた前記撮像画像の撮像時刻に関する第１時刻情報を含む請求項３に記載のデータ処理装置。

【請求項5】

前記第２データは、前記仮想視点画像の縮小画像、及び、前記視点関連情報のうちの少なくとも一方を含む請求項４に記載のデータ処理装置。

【請求項6】

前記第２データは、前記第１データに含まれる前記視点関連情報と前記視点関連情報に関する類似度が高く、かつ、前記第１データに含まれる前記第１時刻情報と前記第１時刻情報に関する類似度が低い順に、前記縮小画像、及び、前記視点関連情報のうちの少なくとも一方が前記デバイスに表示されるデータである請求項５に記載のデータ処理装置。

【請求項7】

前記第２データは、複数の前記第２仮想視点画像のうち、与えられた指示に従って選択された第２仮想視点画像に、他の第２仮想視点画像に係る視点位置の時間経過に応じた変位を示す視点位置パス、又は注視点の時間経過に応じた変位を示す注視点パスを合成した合成画像が前記デバイスで再生されるデータである請求項１から請求項６の何れか一項に記載のデータ処理装置。

【請求項8】

前記視点位置パス又は前記注視点パスに対するパス変更指示を受け付けた場合、前記第２データは、前記合成画像の再生を止めて、前記パス変更指示に含まれる前記視点位置パス又は前記注視点パスに対応する前記第２仮想視点画像が前記デバイスで再生されるデータである請求項７に記載のデータ処理装置。

【請求項9】

前記デバイスで再生中の前記第２仮想視点画像の視点に関連する視点関連情報に対する変更指示を受け付けた場合、前記第２データは、前記変更指示に基づいて導出された新たな視点関連情報に基づいて生成された仮想視点画像が前記デバイスで再生されるデータである請求項１から請求項８の何れか一項に記載のデータ処理装置。

【請求項10】

前記デバイスで再生中の前記第２仮想視点画像に対するリプレイ画像生成指示が受け付けられた場合、前記第２データは、前記第２仮想視点画像の視点に関連する視点関連情報に基づいて生成された新たな視点関連情報に基づいて生成された仮想視点画像が前記デバイスで再生されるデータである請求項１から請求項９の何れか一項に記載のデータ処理装置。

【請求項11】

観賞を拒否する被写体に関する観賞拒否被写体情報が受け付けられた場合、前記第２データは、前記観賞拒否被写体情報に基づいて生成した視点関連情報に基づいて生成した仮想視点画像が前記デバイスで再生されるデータである請求項１から請求項１０の何れか一項に記載のデータ処理装置。

【請求項12】

前記第２仮想視点画像は、複数フレームの画像を含む動画であり、
前記第２仮想視点画像の縮小画像であって前記第２データに含まれる縮小画像に対するダイジェスト画像表示指示が受け付けられた場合、前記第２データは、前記第２仮想視点画像から、視点位置が既定間隔で異なる前記複数フレームの画像を抽出することによって生成されるダイジェスト画像が前記デバイスで再生されるデータである請求項１から請求項１１の何れか一項に記載のデータ処理装置。

【請求項13】

前記プロセッサは、前記第１仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、前記第１仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形が前記第２データに対応付けられて表示されるパス画像を、前記デバイスに送信する制御を行い、
前記パス画像は、前記視点位置パスの形又は前記注視点パスの形が、前記第２データと区別可能な態様で示されている画像である
請求項１から請求項１２の何れか一項に記載のデータ処理装置。

【請求項14】

前記第２データは、前記第２仮想視点画像の縮小画像と、前記第２仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、前記第２仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形と、を含み、
前記第２データは、前記縮小画像の前記視点位置パス又は前記注視点パス上での位置を特定可能な第１位置情報を含む請求項１から請求項１３の何れか一項に記載のデータ処理装置。

【請求項15】

前記第２データは、前記第２仮想視点画像に関する前記第２データが、時系列で横方向に配置され、かつ、前記第１仮想視点画像の視点関連情報に対する前記第２仮想視点画像の視点関連情報の類似度に応じて縦方向に配置される第２位置情報を含む請求項１から請求項１４の何れか一項に記載のデータ処理装置。

【請求項16】

前記登録データは、前記第１仮想視点画像を観賞した観賞者の属性を示す属性データ、及び、前記観賞者の趣向を示す趣向データを含む請求項１から請求項１５の何れか一項に記載のデータ処理装置。

【請求項17】

前記第２データは、前記属性データに基づいて、前記仮想視点画像のうちの観賞制限対象とされた仮想視点画像に関するデータが除外されたデータである請求項１６に記載のデータ処理装置。

【請求項18】

前記仮想視点画像を生成するのに用いられた前記撮像画像の撮像時刻に関する第３時刻情報に対する時刻設定指示が受け付けられた場合、前記第２データは、複数の前記第２仮想視点画像のうち、前記第３時刻情報が前記時刻設定指示によって示される範囲内である第２仮想視点画像に関するデータである請求項１から請求項１７の何れか一項に記載のデータ処理装置。

【請求項19】

前記時刻設定指示が受け付けられた場合、前記第２データは、前記仮想視点画像のうちの前記第３時刻情報が前記時刻設定指示によって示される範囲内である時刻限定仮想視点画像の画像数と、前記時刻限定仮想視点画像のうちの前記第２仮想視点画像に含まれる画像数とを含む請求項１８に記載のデータ処理装置。

【請求項20】

プロセッサと、
前記プロセッサに内蔵又は接続されたメモリと、を備え、
撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理装置であって、
前記プロセッサは、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データに基づいて、前記仮想視点画像に関する第２データを送信し、
前記プロセッサは、
前記仮想視点画像の観賞者に対して関連付けられたアカウントの前記仮想視点画像の再生履歴を取得し、
前記再生履歴を、前記仮想視点画像の視点に関連する視点関連情報と対応付けて出力する
データ処理装置。

【請求項21】

プロセッサと、
前記プロセッサに内蔵又は接続されたメモリと、を備え、
撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理装置であって、
前記プロセッサは、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データに基づいて、前記仮想視点画像に関する第２データを送信し、
前記プロセッサは、
各々の前記仮想視点画像の再生回数を、前記仮想視点画像の視点に関連する視点関連情報と対応付けて出力する
データ処理装置。

【請求項22】

プロセッサと、
前記プロセッサに内蔵又は接続されたメモリと、を備え、
撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理装置であって、
前記プロセッサは、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データに基づいて、前記仮想視点画像に関する第２データを送信し、
前記プロセッサは、前記仮想視点画像の視点位置の時間経過に応じた変位を示す視点位置パスの形、又は、前記仮想視点画像の注視点の時間経過に応じた変位を示す注視点パスの形が前記第２データに対応付けて表示されるパス画像を、前記デバイスに送信する制御を行い、
前記パス画像は、前記視点位置パス又は前記注視点パスのうちの前記仮想視点画像を再生済みの部分と未再生の部分とが区別可能な態様で示されている画像である
データ処理装置。

【請求項23】

プロセッサと、
前記プロセッサに内蔵又は接続されたメモリと、を備え、
撮像画像に基づいて生成された複数の仮想視点画像をデバイスに送信するデータ処理装置であって、
前記プロセッサは、
前記複数の仮想視点画像のうち、前記デバイスに少なくとも一部が送信済みの仮想視点画像である第１仮想視点画像に関する第１データに基づいて、前記複数の仮想視点画像のうち、前記デバイスに未送信の仮想視点画像である第２仮想視点画像に関する第２データを前記デバイスに送信する制御を行う
データ処理装置。

【請求項24】

撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理方法であって、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データに基づいて、前記第１データに関連する前記仮想視点画像である第１仮想視点画像とは異なる前記仮想視点画像である第２仮想視点画像に関する第２データを前記デバイスに送信すること
を含むデータ処理方法。

【請求項25】

撮像画像に基づいて生成された仮想視点画像をデバイスに送信するデータ処理をコンピュータに実行させるためのプログラムであって、
前記データ処理は、
前記仮想視点画像の再生履歴及び／又は登録データに関する第１データに基づいて、前記第１データに関連する前記仮想視点画像である第１仮想視点画像とは異なる前記仮想視点画像である第２仮想視点画像に関する第２データを前記デバイスに送信することを含む処理である
プログラム。