特開 2023-157630 生成装置、生成方法および生成プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023157630

(43)【公開日】2023-10-26

(54)【発明の名称】生成装置、生成方法および生成プログラム

(51)【国際特許分類】

   H04N 5/92 20060101AFI20231019BHJP

   H04N 23/60 20230101ALI20231019BHJP

   H04N 21/435 20110101ALI20231019BHJP

   H04N 21/433 20110101ALI20231019BHJP

   G06F 3/0481 20220101ALI20231019BHJP

【ＦＩ】

H04N5/92 010

H04N5/232 300

H04N21/435

H04N21/433

G06F3/0481

【審査請求】有

【請求項の数】7

【出願形態】ＯＬ

(21)【出願番号】P 2022067661

(22)【出願日】2022-04-15

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＢＬＵＥＴＯＯＴＨ

(71)【出願人】

【識別番号】592054580

【氏名又は名称】株式会社トスコ

(71)【出願人】

【識別番号】000110217

【氏名又は名称】ＴＯＰＰＡＮエッジ株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】前田 誠

(72)【発明者】

【氏名】高力 正

【テーマコード（参考）】

5C053

5C122

5C164

5E555

【Ｆターム（参考）】

5C053GB06

5C053JA21

5C053LA01

5C053LA04

5C053LA06

5C053LA11

5C053LA14

5C122DA03

5C122DA14

5C122EA42

5C122FK12

5C122FK28

5C122FK37

5C122FK38

5C122FK39

5C122FK40

5C122FK42

5C122GA18

5C122GC07

5C122GC14

5C122GC52

5C122HA04

5C122HA05

5C122HA13

5C122HA35

5C122HA75

5C122HA90

5C122HB01

5C122HB05

5C122HB09

5C164GA05

5C164UB10P

5C164UB36P

5C164UB41S

5C164UB88S

5C164YA30

5E555AA26

5E555AA41

5E555BA01

5E555BB01

5E555BC01

5E555BC17

5E555CB40

5E555CC05

5E555DA01

5E555DB22

5E555DB55

5E555DB57

5E555FA00

(57)【要約】

【課題】ユーザが直感的に所望の映像を表示することを可能にさせる生成装置、生成方法および生成プログラムを提案すること。
【解決手段】本開示に係る一形態の生成装置は、取得部と、生成部とを備える。取得部は、動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得する。生成部は、前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する。また、生成装置は、前記生成部によって生成された再生バーを地図データに組み込むことにより、前記再生バーと地図データとが合成された合成地図を表示する表示制御部をさらに備えてもよい。
【選択図】図１

【特許請求の範囲】

【請求項1】

動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得する取得部と、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する生成部と、
を備えることを特徴とする生成装置。

【請求項2】

前記生成部によって生成された再生バーを地図データに組み込むことにより、前記再生バーと地図データとが合成された合成地図を表示する表示制御部、
をさらに備えることを特徴とする請求項１に記載の生成装置。

【請求項3】

前記合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画コンテンツおよび当該動画コンテンツを構成するフレームを特定し、特定されたフレームから当該動画コンテンツを再生するよう制御する再生部、
をさらに備えることを特徴とする請求項２に記載の生成装置。

【請求項4】

前記表示制御部は、
前記再生部によって再生されている動画コンテンツのフレームに紐づく位置情報の遷移に応じて、当該動画コンテンツの現在の再生位置を示すマークを前記合成地図上の再生バー上に表示する、
ことを特徴とする請求項３に記載の生成装置。

【請求項5】

前記再生部は、
前記動画コンテンツの終端における位置情報に紐づくフレームを有する他の動画コンテンツを特定し、前記動画コンテンツの再生が終了した際に、当該他の動画コンテンツを続けて再生する、
ことを特徴とする請求項３に記載の生成装置。

【請求項6】

前記再生部は、
前記任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報に関連する複数の動画コンテンツであって、当該任意箇所に到達するまでの位置情報の遷移過程が異なる複数の動画コンテンツを特定し、特定した複数の動画コンテンツを再生する、
ことを特徴とする請求項３または５に記載の生成装置。

【請求項7】

コンピュータが、
動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得し、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する、
ことを含むことを特徴とする生成方法。

【請求項8】

コンピュータを、
動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得する取得部と、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する生成部と、
を備える生成装置として機能させることを特徴とする生成プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、動画の再生状況を示すための再生バーを生成する生成装置、生成方法および生成プログラムに関する。

【背景技術】

【0002】

自動車や二輪車等の移動体に撮像機器が設置されるようになり、様々な動画がユーザによって撮影されている。また、このようにして撮影された動画像の再生手法も多様化している。

【0003】

例えば、車載カメラによって連続的に撮影された画像と、それぞれの画像の撮影時刻とを関連付けることにより、ユーザが選択した時刻に対応する画像を表示する技術が知られている（例えば、特許文献１）。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１３－３２９４９号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

上記の従来技術によれば、ユーザは、走行中の風景を思い出すことができない場合であっても、撮影時刻に基づいて画像を検索することができるので、目的の画像を容易に示すことができる。

【0006】

しかしながら、車載カメラによって記録される動画は膨大であり、撮影日時のみを頼りに所望の映像を検索することは難しい。また、ユーザが視聴したい映像は、必ずしも自身が撮影したものに限らず、複数ユーザで共有されている映像であったり、何らかの調査のために提供された映像であったりする可能性もある。この場合、ユーザは、撮影日時を特定することが難しく、所望の映像を視聴することができなかったり、動画の検索に多大な時間を要したりするおそれがある。

【0007】

そこで、本開示では、ユーザが直感的に所望の映像を視聴することを可能にさせる生成装置、生成方法および生成プログラムを提案する。

【課題を解決するための手段】

【0008】

上記の課題を解決するために、本開示に係る一形態の生成装置は、動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得する取得部と、前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する生成部と、を備えることを特徴とする。

【発明の効果】

【0009】

実施形態の一態様によれば、生成装置は、ユーザが直感的に所望の映像を視聴することを可能にさせることができる。

【図面の簡単な説明】

【0010】

【図1】実施形態に係る生成処理の概要を示す図である。

【図2】実施形態に係る表示制御処理を説明するための図（１）である。

【図3】実施形態に係る表示制御処理を説明するための図（２）である。

【図4】実施形態に係る表示制御処理を説明するための図（３）である。

【図5】実施形態に係る生成装置の構成例を示す図である。

【図6】実施形態に係る動画の構成を模式的に示す図（１）である。

【図7】実施形態に係る動画の構成を模式的に示す図（２）である。

【図8】実施形態に係る動画の構成を模式的に示す図（３）である。

【図9】実施形態に係る動画記憶部の一例を示す図である。

【図10】実施形態に係る再生データ記憶部の一例を示す図である。

【図11】実施形態に係る生成処理の手順を示すフローチャートである。

【図12】実施形態に係る表示制御処理の手順を示すフローチャートである。

【図13】変形例に係る再生バーの生成処理の一例を示す図である。

【図14】変形例に係る再生処理の一例を示す図（１）である。

【図15】変形例に係る再生処理の一例を示す図（２）である。

【図16】変形例に係る再生処理の一例を示す図（３）である。

【図17】変形例に係るマルチアングル再生処理を説明する図（１）である。

【図18】変形例に係るマルチアングル再生処理を説明する図（２）である。

【図19】生成装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。

【発明を実施するための形態】

【0011】

以下に、本開示の実施形態について図面に基づいて詳細に説明する。なお、以下の実施形態において、同一の部位には同一の符号を付することにより重複する説明を省略する。

【0012】

（１．実施形態）
（１－１．実施形態に係る生成処理の一例）
図１は、実施形態に係る生成処理の概要を示す図である。実施形態に係る生成処理は、図１に示す生成システム１に含まれる生成装置１００によって実行される。図１に示すように、生成システム１は、生成装置１００と、車両２００とを含む。

【0013】

生成装置１００は、実施形態に係る生成処理を実行する情報処理装置である。例えば、生成装置１００は、ＰＣ（Personal Computer）やタブレット端末、サーバ装置等の情報処理端末である。一例として、生成装置１００は、車両２００や、車両２００を運転するユーザ１０が利用する端末装置（以下、「ユーザ端末」と称する）等とネットワークを介して通信可能なクラウドサーバである。あるいは、生成装置１００は、車両２００に搭載された記録媒体（カード型メモリ等）等を介して車両２００と情報の送受信を行うことが可能なＰＣやサーバ装置等であってもよい。生成装置１００は、後述する生成処理により生成される再生バーを含む、動画コンテンツ（以下、単に「動画」と称する）を再生するためのアプリケーション（図１に示す動画プレーヤー２０）をユーザ１０に提供する。

【0014】

車両２００は、ユーザ１０が運転する自動車や二輪車等の移動体である。実施形態では、車両２００は、走行中の車外環境や車内風景を撮影可能な車載カメラを搭載した自動車である。

【0015】

車両２００は、各種センサを備えており、種々の情報を取得可能である。例えば、車両２００は、走行に伴って変化する自装置の位置姿勢情報等を取得する。具体的には、車両２００は、ＧＰＳ（Global Positioning System）を利用して緯度経度に基づく位置情報を取得する。また、車両２００は、ＩＭＵ（Inertial Measurement Unit）（加速度センサ、角速度センサ）や、車速（車輪）エンコーダ等の情報に基づき、ＧＰＳによって取得した位置情報を微修正することが可能である。また、車両２００は、ＳＬＡＭ（Simultaneous Localization and Mapping）等の技術に基づいて周囲の３次元空間データを生成したり、ＬｉＤＡＲ（Light Detection and Ranging）やミリ波レーダ等から得られる情報に基づいて自己位置を特定したりしてもよい。

【0016】

車両２００は、上記した種々の既知の技術を利用することにより、車載カメラで走行中の風景を撮影するとともに、撮影した画像に位置情報や撮影日時情報を紐付けることができる。

【0017】

ユーザ１０は、車両２００の車載カメラによって運転中の動画を撮影したり、撮影した動画を管理したり、生成装置１００から提供される動画再生プレーヤーを操作したりするユーザである。

【0018】

ユーザ１０等の運転者により撮影される運転動画は、様々な用途で活用される。例えば、事故や事件の捜査にあたり、当局は、車載カメラ（ドライブレコーダ）や防犯カメラによって撮影された動画を確認し、事故の状況や目撃者の有無を判定する。その他にも、運転者が撮影した運転動画をウェブ上にアップロードし、運転動画を複数ユーザが共有するウェブサービス等が盛んに利用されている。

【0019】

しかしながら、車載カメラによって記録される動画は膨大であるため、その内容を確認するために手間がかかるという問題がある。例えば、捜査当局が運転動画を確認する場合、提供者から提供された動画の中から所望の場所が写っている映像を見つけ出すためには、動画を最初から最後まで視聴して確認せねばならない。さらに、運転動画は、通常、数分ごとに自動で細切れされた動画ファイルとして作成されることが多い。このため、捜査当局は、提出された大量の動画ファイルをＰＣのエクスプローラ上で検索したり、整理したりといった手間をかける必要も出てくる。また、動画共有サイト等では、視聴者は、どの場所を運転した際に撮影されたものであるかといった説明文を頼りに共有された動画を視聴することになるが、この場合も、必ずしも視聴者が望む場所の映像が動画に含まれているか定かでない。また、所望する映像が含まれていたとしても、その映像が動画全体のどの位置に配置されているか視聴者は確認し辛いため、結局、動画を最初から最後まで視聴することを強いられる。

【0020】

このように、運転動画の利用においては、視聴者が見たいと思う箇所を即座に、かつ、的確に再生させるという課題が存在する。生成装置１００は、実施形態に係る生成処理により、かかる課題を解決する。具体的には、生成装置１００は、動画を構成する各画像に紐づく位置情報を取得し、位置情報に基づいて、動画の再生を制御する再生バー（プログレスバー（progress bar）とも称される）の形状を生成する。より具体的には、生成装置１００は、一般的な動画プレーヤーのように時間経過を直線的に表現した再生バーではなく、位置情報の推移に対応した曲線や多角線で表現される再生バーを生成する。視聴者は、かかる再生バー上で再生位置を指定することで、所望する位置情報に対応した映像を即座に検索することができる。すなわち、生成装置１００によれば、視聴者は、動画コンテンツの全てを視聴することなく、自身が視聴したい映像を直感的に検索して視聴することができる。

【0021】

図１を用いて、かかる生成処理についての概要を説明する。図１に示す例では、ユーザ１０は、車両２００の車載カメラを用いて運転動画を記録する。かかる運転動画は、カメラによって撮影された画像と、画像が撮影された際の位置情報を含む。動画を構成する各々の画像はフレームと称され、一般的には、動画１秒間に３０枚や６０枚のフレームが含まれる。

【0022】

車両２００は、ネットワーク等を介して、生成装置１００に運転動画を送信する。生成装置１００は、運転動画を取得すると、動画を構成するフレームから位置情報を抽出する。位置情報は、例えば、ＧＰＳ等により取得される緯度経度情報である。

【0023】

そして、生成装置１００は、所定の規則に従い、位置情報に対応する再生バー２２を生成する。例えば、生成装置１００は、所定のスケールを有する２次元座標と、緯度経度情報とを対応させる。一例として、生成装置１００は、一般的な地図標記に従い、緯度をＹ軸に、経度をＸ軸に対応させ、その数値を座標としてプロットする。これにより、生成装置１００は、位置情報（すなわち車両２００の移動経路）に対応した形状の再生バー２２を生成することができる。

【0024】

その後、生成装置１００は、ユーザ端末等で起動可能な動画プレーヤー２０をユーザ１０に提供する。図１に示すように、動画プレーヤー２０は、再生バー２２と、動画表示領域２６とを含む。生成装置１００は、ユーザ１０から動画プレーヤー２０において動画再生を要求されると、当該動画の映像を動画表示領域２６に表示するとともに、当該動画に対応する再生バー２２を表示する。また、生成装置１００は、動画の再生状況に合わせて、現在表示位置２４を更新する。図１において、再生バー２２のうち、現在表示位置２４より手前の線（再生バー２２のうち比較的太く表現した線）は、既に動画の再生が終了した箇所を示す。また、再生バー２２のうち、現在表示位置２４より後の線（再生バー２２のうち比較的細く表現した線）は、これから動画が再生される箇所を示す。また、動画表示領域２６に表示される映像は、現在表示位置２４に対応する位置情報と紐付けられた映像である。なお、動画表示領域２６は、動画の再生や一時停止を指示するための操作ボタン２８を含んでもよい。

【0025】

このように、生成装置１００は、動画プレーヤー２０において、一般的な時間経過に基づく再生バーではなく、位置情報の推移に対応した形状の再生バー２２を提供する。ユーザ１０は、所定の位置に対応する映像を確認したい場合、再生バー２２の対応する位置を指定することで、当該位置に対応する映像を即座に表示させることができる。

【0026】

従来の動画プレーヤーでは、再生時間「３：００」頃にどのような風景が映っている、といった説明が付与されていなければ、視聴者が映像の内容を把握することは困難であった。一方、動画プレーヤー２０は、再生時間に連動した再生バーではなく、撮影位置の変遷に連動した再生バー２２を含むので、動画のどの箇所にどのような映像を含むかを視聴者が直感的に把握できる。また、生成装置１００は、動画とは独立した形式で再生バー２２を生成することもできるので、再生バー２２の形状そのものを他のアプリケーション等に利用させることも可能である。

【0027】

さらに、生成装置１００は、生成した再生バー２２を地図データに組み込むことで、より利便性を向上させることができる。この点について、図２を用いて説明する。図２は、実施形態に係る表示制御処理を説明するための図（１）である。

【0028】

図２に示すように、生成装置１００は、再生バー２２を生成したのち、地図データ３０を取得する。例えば、生成装置１００は、再生バー２２に含まれる緯度経度情報に基づいて、当該位置近傍に対応する地図データ３０を取得する。そして、生成装置１００は、再生バー２２と地図データ３０との経度緯度（Ｘ軸およびＹ軸）や縮尺等を適合させて、再生バー２２を地図データ３０に組み込んで合成した合成地図データ３２を生成する。図２に示すように、合成地図データ３２は、地図データ３０に再生バー２２が重畳するものである。なお、生成装置１００は、組込処理の際に、適宜、当該国の地理局等が提供するＧＩＳ（Geographic Information System）等を利用して地図データを取得してもよいし、予め準備した汎用の地図データを利用してもよい。

【0029】

生成装置１００は、動画プレーヤー２０において、合成地図データ３２を表示する。この点について、図３を用いて説明する。図３は、実施形態に係る表示制御処理を説明するための図（２）である。

【0030】

図３には、再生バー２２が組み込まれた合成地図データ３２と、動画表示領域２６とを含む動画プレーヤー２０を示す。ユーザ１０は、ユーザ端末の画面上で、ポインタ３４を合成地図データ３２に重畳された再生バー２２の任意箇所を選択することで、所望の位置に対応する映像の再生を開始することができる。この場合、ユーザ１０は、地図上で位置を確認しながら映像の再生開始箇所を指定できるので、より直感的に、所望する位置に対応した映像を検索することができる。

【0031】

なお、生成装置１００は、地図データに１つの再生バーを組み込むのではなく、取得した複数の動画の各々に対応する複数の再生バーを組み込んでもよい。この点について、図４を用いて説明する。図４は、実施形態に係る表示制御処理を説明するための図（３）である。

【0032】

図４には、再生バー４２や、再生バー４４や、再生バー４６等、複数の再生バーが組み込まれた合成地図データ４０と、動画表示領域２６とを含む動画プレーヤー２０を示す。再生バー４２や再生バー４４、再生バー４６は、ユーザ１０もしくは他のユーザから送信された動画に基づいて、生成装置１００が生成した再生バーである。

【0033】

合成地図データ４０は、合成地図データ３２と比較してより広域を含む地図データであり、複数の再生バーが組み込まれている。この場合、ユーザ１０は、合成地図データ４０のうち、任意の再生バーを選択することが可能である。例えば、ユーザ１０が再生バー４２を選択すると、生成装置１００は、再生バー４２に対応する動画を、ユーザ１０が指定した位置に対応する箇所から再生する。あるいは、ユーザ１０が再生バー４４を選択すると、生成装置１００は、再生バー４４に対応する動画を、ユーザ１０が指定した位置に対応する箇所から再生する。このように、生成装置１００は、複数の再生バーを組み込んだ合成地図データ４０をユーザ１０に提供することもできる。これにより、ユーザ１０は、ＰＣのエクスプローラ上で動画ファイル名を選択するような手間をかけずとも、地図上で視聴したい位置を指定するだけで再生バーに紐づいた動画が自動的に検索されるので、所望する動画をすぐに視聴できる。

【0034】

以上、図１から図４を用いて説明したように、生成装置１００は、動画を構成する各フレームに紐づく位置情報に基づいて、動画の再生を制御する再生バーの形状を生成する。これにより、生成装置１００は、ユーザ１０が直感的に所望の映像を視聴することを可能にさせる。すなわち、ユーザ１０は、数多くの動画ファイルを文字や撮影日時で特定せずとも、所望する位置を地図上で指定するだけで映像を視聴できる。

【0035】

（１－２．実施形態に係る生成装置の構成）
次に、実施形態に係る生成処理を実行する生成装置１００の構成について説明する。図５は、実施形態に係る生成装置１００の構成例を示す図である。

【0036】

図５に示すように、生成装置１００は、通信部１１０と、記憶部１２０と、制御部１３０とを有する。なお、生成装置１００は、生成装置１００を管理する管理者等から各種操作を受け付ける入力部（例えば、キーボードやマウス等）や、各種情報を表示するための表示部（例えば、液晶ディスプレイ等）を有してもよい。

【0037】

通信部１１０は、例えば、ＮＩＣ（Network Interface Card）やネットワークインタフェースコントローラ等によって実現される。通信部１１０は、ネットワークＮ（例えばインターネット）と有線または無線で接続され、ネットワークＮを介して、ユーザ端末や車両２００等との間で情報の送受信を行う。例えば、通信部１１０は、Ｗｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ、ＳＩＭ（Subscriber Identity Module）、ＬＰＷＡ（Low Power Wide Area）等の任意の通信規格もしくは通信技術を用いて、情報の送受信を行ってもよい。なお、通信部１１０と車両２００との通信（情報の送受信）は、必ずしも上記の通信技術等を用いて行われなくてもよい。例えば、車両２００は、車載カメラによって撮像した動画を記憶媒体（カード型メモリ等）に記憶し、記憶媒体を介して、動画を生成装置１００に受け渡してもよい。この場合、通信部１１０は、ネットワークインターフェースに加えて、カード型メモリやＵＳＢ（Universal Serial Bus）等の規格に準じた入出力インターフェースにおける情報の送受信を制御してもよい。

【0038】

記憶部１２０は、各種情報を記憶する。記憶部１２０は、例えば、ＲＡＭ（Random Access Memory）、フラッシュメモリ（Flash Memory）等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。記憶部１２０は、動画記憶部１２１と、再生データ記憶部１２２とを有する。

【0039】

動画記憶部１２１は、車両２００から取得した動画に関する情報を記憶する。なお、生成装置１００は、車両２００から取得された動画に対して、適宜、後段の処理に必要な前処理を実行する。この点について、図６を用いて説明する。図６は、実施形態に係る動画の構成を模式的に示す図（１）である。

【0040】

車両２００によって撮影される動画は、撮影に用いられた車載カメラやドライブレコーダに応じて、様々な形式の動画ファイルとして作成される。動画ファイルは、各種のメタデータ（撮影日時等）や位置情報、車両２００の姿勢情報等を含むが、ファイルの形式によっては、それらの各種情報が動画と分離されていない場合もある。この場合、生成装置１００は、図６に示すように、動画４５を取得すると、動画４５に含まれる位置情報等のデータを分離するため、位置情報抽出処理を実行する（ステップＳ６０）。

【0041】

これにより、生成装置１００は、動画（具体的には、動画を構成するフレーム）と、それぞれのフレームに対応する位置情報とを分離した動画４７を取得する。図６に示すように、動画４７は、動画を構成する各フレーム（画像フレームＦ０１、画像フレームＦ０２、・・・）と、その各々が撮影された位置情報（（経度Ｘ０１,緯度Ｙ０１）、（経度Ｘ０２,緯度Ｙ０２）、・・・）とが紐付けられたデータで構成される。これにより、生成装置１００は、動画と位置情報を紐付けて、あるいは、動画と位置情報とを独立させて、後段の処理で取り扱うことができる。なお、生成装置１００は、フレームから位置情報を抽出する場合に、種々の公知の技術を利用してもよい。

【0042】

図７に、より具体的に動画の構成を示す。図７は、実施形態に係る動画の構成を模式的に示す図（２）である。図７には、生成装置１００が取り扱う動画の一例として、動画５０を示す。

【0043】

図７に示すように、動画５０は、画像データ５２と、音声データ５４と、メタデータ５６と、位置情報５８とを含む。画像データ５２は、画像フレーム５２１、画像フレーム５２２、・・・、画像フレーム５２５等を含む。また、動画５０では、画像フレーム５２１には位置情報５８１が紐付けられ、画像フレーム５２２には位置情報５８２が紐付けられ、画像フレーム５２３には位置情報５８３が紐付けられ、画像フレーム５２４には位置情報５８４が紐付けられ、画像フレーム５２５には位置情報５８５が紐付けられる。

【0044】

このように、生成装置１００は、フレームごとに紐付けられた位置情報を取得し、それぞれの位置情報を座標としてプロットすることで、図１に示したような再生バー２２を生成することができる。

【0045】

なお、車載カメラやドライブレコーダの処理によっては、必ずしもフレームごとに位置情報が取得されない場合もある。フレームと位置情報の割り当ては、例えば、カメラの機種やメーカーによって異なる。動画の総フレーム数をＮ（Ｎは任意の自然数）、位置情報が記録される数をｎ（ｎは任意の自然数）とすると、フレームに位置情報が割り当てられる割合を示す値ａは、Ｎ／ｎで示される。例えば、ａ＝１の場合、動画では、１フレームに１つの割合で位置情報が紐付けられていることを示す。また、ａ＝５の場合、動画では、５フレームにつき１つの割合で位置情報が紐付けられていることを示す。

【0046】

１つのフレームに１つの位置情報が紐付けられていない場合、生成装置１００は、適宜、位置情報を補完してもよい。この点について、図８を用いて説明する。図８は、実施形態に係る動画の構成を模式的に示す図（３）である。

【0047】

図８に例示する動画６０は、画像データ６２と、位置情報６８とを含む。画像データ６２のうち、画像フレーム６２１には位置情報６８１が紐付けられ、画像フレーム６２５には位置情報６８５が紐付けられている。一方、画像データ６２のうち、画像フレーム６２２から画像フレーム６２４には、位置情報が紐付けられていないものとする。

【0048】

この場合、生成装置１００は、画像フレーム６２２から画像フレーム６２４に紐付ける位置情報を補完するための処理を実行する（ステップＳ７０）。例えば、生成装置１００は、位置情報６８５に至るまでの過去の位置推移に基づいて回帰式を導出し、画像フレーム６２２から画像フレーム６２４に紐付ける位置情報６８２、位置情報６８３および位置情報６８４を算出する。具体的には、生成装置１００は、位置情報６８５に至るまでの複数の位置情報から動画６０全体に対応する走行経路を推定する。そして、生成装置１００は、推定した経路上で位置情報６８１から位置情報６８５に至るまでの経路を均等に分割し、それぞれを位置情報６８２、位置情報６８３および位置情報６８４として割り当ててもよい。なお、生成装置１００は、適宜、動画が撮影された時点の車両２００の姿勢情報（走行方向）や速度情報等を取得し、位置情報の補完に利用してもよい。これにより、生成装置１００は、車両２００の移動方向や速度を考慮した位置の推定を行うことができるので、算出する位置情報の精度を向上させることができる。

【0049】

上記のように、生成装置１００は、動画を取得するとともに、各々の動画に対応する位置情報や撮影日時等のメタデータを抽出したり補完したうえで、当該動画を動画記憶部１２１に記憶する。

【0050】

図９に、動画記憶部１２１が記憶する情報の一例を示す。図９は、実施形態に係る動画記憶部１２１の一例を示す図である。図９に示した例では、動画記憶部１２１は、「動画ファイルＩＤ」、「メタデータ」、「画像データ」、「位置情報」といった各項目を有する。なお、図９および図１０に示す例では、記憶部１２０に格納される情報を「Ａ０１」のように概念的に示すが、実際には、後述する各情報が記憶部１２０に記憶されるものとする。

【0051】

「動画ファイルＩＤ」は、動画ファイルを識別する識別情報を示す。「メタデータ」は、動画が撮影された日時等、動画ファイルに関する種々のデータを示す。「画像データ」は、動画を構成する各フレームのデータを示す。「位置情報」は、動画を構成する各フレームに紐付けられた位置情報を示す。

【0052】

また、生成装置１００は、動画を取得すると、動画に対応する再生バーを生成し、生成した再生バーを動画と紐付けて再生データ記憶部１２２に記憶する。図１０に、再生データ記憶部１２２が記憶する情報の一例を示す。図１０は、実施形態に係る再生データ記憶部１２２の一例を示す図である。図１０に示した例では、再生データ記憶部１２２は、「対応地図」、「動画ファイルＩＤ」、「形状データ」といった各項目を有する。

【0053】

「対応地図」は、動画に対応する再生バーが組み込まれた地図データ等、動画の再生時に表示される地図データを示す。なお、再生バーが地図データに組み込まれない場合等には、再生データ記憶部１２２は、対応地図の情報を記憶することを要しない。また、対応地図は、必ずしも当該国の地理局等が提供するデータではなく、位置情報と対応する任意の空間に関するデータ（例えば、各フレームの位置情報と対応する２次元もしくは３次元座標が設定可能な空間データ）であればよい。「動画ファイルＩＤ」は、図９に示した同一の項目に対応する。「形状データ」は、動画に基づいて生成された再生バーの形状を示す。

【0054】

図５に戻り、説明を続ける。制御部１３０は、例えば、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）、ＧＰＵ（Graphics Processing Unit）等によって、生成装置１００内部に記憶されたプログラムがＲＡＭ（Random Access Memory）等を作業領域として実行されることにより実現される。また、制御部１３０は、コントローラ（controller）であり、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現される。

【0055】

図５に示すように、制御部１３０は、取得部１３１と、生成部１３２と、表示制御部１３３と、再生部１３４とを含む。

【0056】

取得部１３１は、各種情報を取得する。例えば、取得部１３１は、動画と、動画を構成するフレームに紐づく位置情報とを取得する。また、取得部１３１は、取得した位置情報に対応する地図データを取得する。

【0057】

生成部１３２は、位置情報に基づいて、動画の再生を制御する再生バーの形状を生成する。例えば、生成部１３２は、動画に経度および緯度を示す位置情報が紐付いている場合、経度をＸ座標、緯度をＹ座標にプロットすることで、再生バーの形状を生成する。生成部１３２は、動画プレーヤー２０の再生バーとして利用できるよう、生成した再生バーを再生データ記憶部１２２に格納する。

【0058】

表示制御部１３３は、図１等に示した動画プレーヤー２０において、各種表示を制御する。例えば、表示制御部１３３は、生成部１３２によって生成された再生バーを地図データに組み込むことにより、再生バーと地図データとが合成された合成地図を表示する。

【0059】

また、表示制御部１３３は、動画プレーヤー２０において動画を再生した際に、再生されている動画のフレームに紐づく位置情報の遷移に応じて、動画の現在の再生位置を示すマーク（例えば、図１等に示した現在表示位置２４）を合成地図上の再生バー上に表示する。これにより、表示制御部１３３は、再生中の動画の映像が、地図上のどの位置に対応するかをユーザに一目で確認させることができる。

【0060】

再生部１３４は、合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画および当該動画を構成するフレームを特定し、特定されたフレームから当該動画を再生するよう制御する。

【0061】

例えば、図４で示したように、ユーザが動画プレーヤー２０において表示されている合成地図上の任意の再生バーをクリックすると、再生部１３４は、記憶部１２０を参照し、クリックされた再生バーに対応する動画ファイルを特定する。また、再生部１３４は、クリックされた地図上の位置に対応する位置情報を特定し、動画ファイルのうち当該位置情報に対応するフレームを特定する。そして、再生部１３４は、当該フレームから動画の再生を開始する。これにより、ユーザは、数多くの動画ファイルを順番に視聴して目的の箇所の映像を特定するような手間をかけず、目的の映像をすぐに視聴することができる。

【0062】

（１－３．実施形態に係る生成処理の手順）
次に、図１１および図１２を用いて、実施形態に係る処理の手順について説明する。まず、図１１を用いて、再生バーの形状を生成する処理の流れについて説明する。図１１は、実施形態に係る生成処理の手順を示すフローチャートである。

【0063】

図１１に示すように、生成装置１００は、再生バーを生成する対象となる動画ファイルを取得する（ステップＳ１０１）。このとき、生成装置１００は、動画ファイルの各フレームに位置情報が紐付いているか否かを判定する（ステップＳ１０２）。

【0064】

各フレームに位置情報が紐付いていない場合（ステップＳ１０２；Ｎｏ）、生成装置１００は、図６から図８で示した位置情報の抽出や補完処理を行い、位置情報を各フレームに紐付ける（ステップＳ１０３）。

【0065】

各フレームに位置情報を紐付けた場合、もしくは、各フレームに位置情報がすでに紐付いていた場合（ステップＳ１０２；Ｙｅｓ）、生成装置１００は、位置情報に基づいて、再生バーの形状を生成する（ステップＳ１０４）。

【0066】

その後、生成装置１００は、ユーザの指示等にしたがい、再生バーを任意の地図に組み込むか否かを判定する（ステップＳ１０５）。再生バーを任意の地図に組み込む場合（ステップＳ１０５；Ｙｅｓ）、生成装置１００は、組み込む対象となる地図を取得する（ステップＳ１０６）。

【0067】

そして、生成装置１００は、再生バーの表示形式やスケール等を地図に適用させ、地図に再生バーを組み込む（ステップＳ１０７）。再生バーを地図に組み込んだ場合、生成装置１００は、組み込んだ合成地図に係る情報を再生データとして記憶する（ステップＳ１０８）。なお、再生バーを地図に組み込まない場合（ステップＳ１０５；Ｎｏ）、生成装置１００は、生成した再生バーの形状のみを再生データとして記憶してもよい。

【0068】

次に、図１２を用いて、生成装置１００が動画を表示する処理の流れについて説明する。図１２は、実施形態に係る表示制御処理の手順を示すフローチャートである。

【0069】

生成装置１００は、ユーザの指示等にしたがい、動画プレーヤー２０を起動する（ステップＳ２０１）。その後、生成装置１００は、表示した地図上の位置（もしくは再生バーの任意位置）の指定をユーザから受け付けたか否かを判定する（ステップＳ２０２）。位置の指定を受け付けない場合（ステップＳ２０２；Ｎｏ）、生成装置１００は、指定を受け付けるまで待機する。

【0070】

一方、位置の指定を受け付けた場合（ステップＳ２０２；Ｙｅｓ）、生成装置１００は、指定位置の位置情報を特定する（ステップＳ２０３）。そして、生成装置１００は、指定位置を含む動画ファイルを特定する（ステップＳ２０４）。続けて、生成装置１００は、指定位置に対応するフレームから、特定した動画ファイルの再生を開始する（ステップＳ２０５）。

【0071】

このとき、生成装置１００は、動画の再生に合わせて、動画の現在再生位置のマークを再生バー上に表示する（ステップＳ２０６）。図３等に示したように、再生バーと動画プレーヤー２０において表示される地図とのスケールは合っていることから、動画プレーヤー２０上では、動画の現在再生位置があたかも地図上に表示されているように見える。すなわち、生成装置１００は、動画が撮影された位置と、動画ファイルにおいて再生中の箇所とが一致するように、地図上のマーク（例えば図３で示した現在表示位置２４）の表示を随時更新する。

【0072】

その後、生成装置１００は、ユーザから動画の再生の終了要求を受け付けたか否かを判定する（ステップＳ２０７）。再生の終了要求を受け付けた場合（ステップＳ２０７；Ｙｅｓ）、生成装置１００は、動画の再生を終了する（ステップＳ２０８）。一方、再生の終了要求を受け付けない場合（ステップＳ２０７；Ｎｏ）、生成装置１００は、動画を再生しつつ、ユーザからの新たな地図上の位置の指定の受け付けを継続し、新たな指定を受け付けた場合、指定された箇所に対応する動画の再生を行う。なお、生成装置１００は、ステップＳ２０２からステップＳ２０６までの処理の間、動画の再生終了要求をユーザから受け付けた場合、図１２に示した順序に関わらず、任意のタイミングで処理を終了してもよい。

【0073】

（２．実施形態の変形例）
（２－１．３次元位置による再生バーの生成）
上記実施形態では、生成装置１００が、経度や緯度により特定される位置情報に基づいて再生バーを生成する例を示した。しかし、生成装置１００は、緯度や経度等の２次元情報のみならず、例えば高さや深度を示す情報を加えた３次元情報に基づいて再生バーを生成してもよい。

【0074】

この点について、図１３を用いて説明する。図１３は、変形例に係る再生バーの生成処理の一例を示す図である。図１３の例では、生成装置１００は、緯度および経度等の２次元情報に加えて、高度や深度等の３次元情報（Ｚ軸情報）を含む位置情報が各フレームに紐付いた動画ファイル７０を取得する。例えば、動画ファイル７０は、空中飛行可能なドローンや、水中潜航が可能な移動体等が備えたカメラによって撮影された動画である。

【0075】

この場合、生成装置１００は、図１３に示すように、Ｘ軸、Ｙ軸、Ｚ軸の３次元で示される再生バー７２を生成する。ユーザは、再生バー７２の任意の位置を指定することで、動画ファイル７０のうち、指定した位置に対応する箇所のフレーム（映像）を視聴することができる。

【0076】

なお、３次元情報を含む動画ファイルは、ドローン等に限らず、高度情報が検知可能なセンサを備えたカメラ等を用いることで取得可能である。例えば、生成装置１００は、ユーザが建造物内を移動しながら撮影した動画に基づいて、３次元の再生バーを生成してもよい。この場合、生成装置１００は、組み込む地図として、３次元で表現された建造物の空間データ等を用いることができる。これにより、生成装置１００は、例えば観光施設などの建造物における案内地図（例えば、来客者が任意の位置を指定すると、その位置までの経路が動画で閲覧できる機能を有する地図等）を容易に生成することができる。

【0077】

（２－２．動画の連続再生）
生成装置１００は、ユーザによる位置指定に基づいて再生した１つの動画が終了した場合に、続けて次の動画を再生してもよい。かかる再生の際、生成装置１００は、動画が終了した時点に紐付いた位置情報に基づいて、次に再生する動画を特定することができる。

【0078】

この点について、図１４を用いて説明する。図１４は、変形例に係る再生処理の一例を示す図（１）である。

【0079】

図１４の例では、生成装置１００は、合成地図７４において、ユーザが指定した経路７５に対応する動画ファイル７６を再生しているものとする。なお、経路７５とは、経路を示す表示であるとともに、動画ファイル７６に基づいて生成された再生バーを意味する。

【0080】

生成装置１００は、動画ファイル７６の最後のフレームに紐付けられた位置情報を取得する。そして、生成装置１００は、再生データを記憶したデータベース（例えば記憶部１２０）から、動画ファイル７６の最後のフレームに紐付けられた位置情報と近い位置情報と紐付けられたフレームを有する動画ファイルを検索する（ステップＳ７７）。例えば、生成装置１００は、動画ファイル７６の最後のフレームに紐付けられた位置情報と、合成地図７４の平面上において最も近い座標を有する位置情報と紐付けられたフレームを有する動画ファイルを検索する。

【0081】

図１４の例では、生成装置１００は、動画ファイル７６の最後のフレームに紐付けられた位置情報と近い位置情報に紐付けられたフレームを有する動画ファイルとして、動画ファイル７８を検索したものとする。動画ファイル７８は、例えば、合成地図７４における経路７９を移動した際に撮影された映像に対応する動画ファイルである。生成装置１００は、動画ファイル７６の再生の直後に、連続して動画ファイル７８を再生することで、映像を途切れさせることなく、直通する経路上（経路７５および経路７９）を撮影した動画を再生することができる。

【0082】

すなわち、生成装置１００に係る再生部１３４は、動画の終端における位置情報に紐づくフレームを有する他の動画を特定し、動画の再生が終了した際に、当該他の動画を続けて再生する。かかる処理によれば、ユーザが特に操作をせずとも、位置情報の近い動画が連続的に再生されるので、ユーザは、連続する経路をわざわざクリックするような手間を要せず、連続した動画を視聴することができる。

【0083】

なお、生成装置１００は、連続した動画ファイルを検索するにあたり、複数の手法をとりうる。この点について、図１５および図１６を用いて説明する。

【0084】

図１５は、変形例に係る再生処理の一例を示す図（２）である。図１５の例では、生成装置１００が、動画ファイル８０と動画ファイル８２を連続して再生する処理について説明する。

【0085】

上述したように、運転動画のような比較的長時間にわたり撮影が行われる動画は、１分毎に分割された動画ファイルとして作成されることがある。この場合、生成装置１００は、メタデータやファイル名等に基づいて、分割された動画ファイルを判別可能である。

【0086】

このことから、生成装置１００は、動画ファイル８０が終了した場合、それに続く動画が存在しているか、すなわち、データベースにおいて連続した動画が記憶されていないかを検索する（ステップＳ８１）。図１５の例では、生成装置１００は、撮影日時や、撮影い用いられたデバイス（カメラ）ＩＤや、ファイル名「Ｊ－００１」や「Ｊ－００２」といった所定の命名規則に基づいて、動画ファイル８０と動画ファイル８２とが連続した動画であると判別可能である。この場合、生成装置１００は、動画ファイル８０が終了した時点で、動画ファイル８０に連続する動画である動画ファイル８２を検索する。そして、生成装置１００は、動画ファイル８０の再生が終了すると、自動的に動画ファイル８２の再生を開始する。かかる処理により、生成装置１００は、ある動画ファイルの終了時点に紐付いた位置情報と、多数のファイル内に含まれる各位置情報とを照合するといった処理を省くことができるため、迅速に動画の連続再生を行うことができる。なお、この場合であっても、生成装置１００は、再生中の動画ファイルの最後のフレームに紐づけられた位置情報と近い位置情報を先頭に持っている動画ファイルを検索し、検索した動画ファイルを連続して再生するようにしてもよい。

【0087】

また、生成装置１００は、必ずしも動画が終了した時点で次の動画を再生するのではなく、第１の動画の途中の箇所から、後続の動画を連続再生してもよい。この場合、生成装置１００は、必ずしも後続の動画を最初から再生するのではなく、途中の箇所から再生してもよい。この点について、図１６を用いて説明する。図１６は、変形例に係る再生処理の一例を示す図（３）である。

【0088】

図１６の例では、生成装置１００が、個別に撮影された動画ファイルである動画ファイル８４と動画ファイル８６を連続して再生する例を示す。生成装置１００は、動画ファイル８４の任意のフレームにおいて、データベースから対応する位置を含む動画を検索する（ステップＳ８５）。例えば、生成装置１００は、動画ファイル８４の任意のフレームに紐付いた位置情報と、データベース内において同一もしくは類似の位置情報が紐付いたフレームとを照合する。そして、生成装置１００は、動画ファイル８４の任意のフレームに紐付いた位置情報と同一もしくは類似の位置情報が紐付いたフレームを有する、動画ファイル８６を特定する。そして、生成装置１００は、動画ファイル８４の当該フレームと、当該フレームと同一もしくは類似の位置情報が紐付いたフレームとが連続するように、動画ファイル８６を再生する。

【0089】

このように、生成装置１００は、図１５のように連続撮影された動画同士でなくても、位置情報に基づいて、個別に撮影された動画ファイルを連続して再生することができる。すなわち、生成装置１００は、動画ファイル８４に対応する経路上で欠損している映像があったとしても、欠損部に対応する映像を含む動画ファイル８６を連続して再生できるので、欠損部を補う（欠損部を追加した）再生を行うことができる。なお、動画ファイル８４と動画ファイル８６とでは、撮影者や撮影日時が異なっていてもよい。ユーザは、例えば動画共有サイト等において、かかる手法を用いて、１つの経路に対応する複数の動画を連続して視聴することで、当該経路を欠損なく撮影された動画を視聴できる。

【0090】

（２－３．動画のマルチアングル再生）
生成装置１００は、複数の異なる視点から撮影された複数動画を表示してもよい。かかる処理について、図１７を用いて説明する。図１７は、変形例に係るマルチアングル再生処理を説明する図（１）である。

【0091】

図１７の例では、ユーザが、合成地図８８上において、任意の位置８９を指定したものとする。この場合、生成装置１００は、位置８９を含む経路（再生バー）９０、経路９１、経路９２等、複数の経路を特定する。なお、生成装置１００は、経路９０等における撮影方向（移動の向き、すなわちベクトル情報）に基づき、異なる方向からそれぞれ位置８９に向かう経路を複数特定してもよい。

【0092】

そして、生成装置１００は、位置８９に向かって撮影された動画であり、かつ、異なる方向から位置８９に向かう複数の動画を同時に表示する。例えば、生成装置１００は、位置８９を終点として、所定フレーム数（例えば、１００フレームなど）だけ遡った複数の動画を同期して再生するよう制御する。図１７の例では、生成装置１００は、経路９０に対応する動画９３、経路９１に対応する動画９４、経路９２に対応する動画９５のそれぞれが位置８９に対応するフレームで同時に再生終了となるよう再生開始点を調整したうえで、これらの動画を同時に再生する。

【0093】

すなわち、生成装置１００に係る再生部１３４は、任意箇所の指定を受け付けると、任意箇所に紐づく位置情報に関連する複数の動画であって、当該任意箇所に到達するまでの位置情報の遷移過程が異なる複数の動画を特定し、特定した複数の動画を再生する。これにより、ユーザは、ある１点に向かって移動する際の映像であって、異なる視点から撮影された動画を一度に視聴することができる。例えば、ユーザは、事故現場の交差点の状況などをマルチアングルで確認できるので、１方向からの映像に比べて、より正確に状況を把握することができる。

【0094】

図１８に、マルチアングル生成される複数の動画ファイルと、動画ファイルを構成するフレームとの関係を図示する。図１８は、変形例に係るマルチアングル再生処理を説明する図（２）である。

【0095】

図１８に示すように、生成装置１００は、位置８９を含む再生バーに対応する複数の動画ファイルである、動画９３、動画９４および動画９５を特定する。図１８に示すように、動画９３、動画９４および動画９５において、位置８９に対応するフレームは、それぞれ異なる。例えば、動画９３では１０４番目のフレームが位置８９に対応し、動画９４では２０５番目のフレームが位置８９に対応し、動画９５では３５４番目のフレームが位置８９に対応する。生成装置１００は、位置８９に対応したこれらのフレームを、動画の終点９６として設定する。そして、この場合、生成装置１００は、それぞれの位置８９に対応するフレームから所定数（例えば、１００フレーム）だけ遡って、再生点９７を決定する。生成装置１００は、再生点９７から動画９３、動画９４および動画９５を同時に再生することで、ある１点に向かって移動する際の映像であって、異なる視点から撮影された動画を一度に再生することができる。

【0096】

なお、上記の再生手法は一例であり、生成装置１００は、３つ以上の複数の動画を同時に表示してもよいし、あるいは、複数動画のそれぞれを同時ではなく任意のタイミングで再生するなど、種々の変形を伴った手法を採用してもよい。

【0097】

（２－４．装置構成）
上記実施形態では、生成システム１が車両２００を含み、車両２００によって撮影された動画を生成装置１００が取得し、動画に対応する再生バーを生成する例を示した。しかし、実施形態に係る生成処理は、車両２００によって撮影された動画のみならず、人間やドローン等、様々な移動体によって撮影された動画に係る再生バーを生成してもよい。

【0098】

また、生成処理に用いる位置情報は、緯度や経度情報に限らず、任意の空間において、撮影箇所を特定することができる情報であれば、いずれの情報を用いてもよい。例えば、位置情報は、任意の点からの距離や座標、角度など、何らかの手段で位置を特定することができる情報であれば、いずれの情報が用いられてもよい。

【0099】

（３．その他の実施形態）
上述した実施形態に係る処理は、上記実施形態以外にも種々の異なる形態にて実施されてよい。

【0100】

例えば、上記実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。

【0101】

また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。

【0102】

また、上述してきた実施形態および変形例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。

【0103】

また、本明細書に記載された効果はあくまで例示であって限定されるものでは無く、他の効果があってもよい。

【0104】

（４．本開示に係る生成装置の効果）
上述してきたように、本開示に係る生成装置（実施形態では生成装置１００）は、取得部（実施形態では取得部１３１）と、生成部（実施形態では生成部１３２）とを含む。取得部は、動画コンテンツと、動画コンテンツを構成するフレームに紐づく位置情報とを取得する。生成部は、位置情報に基づいて、動画コンテンツの再生を制御する再生バーの形状を生成する。

【0105】

このように、本開示に係る生成装置は、動画における位置情報の推移を示す形状を、動画の再生バーとして生成する。これにより、ユーザは、視聴したい映像が含まれている動画の箇所を形状を見るだけで即座に把握できるので、直感的に所望の映像を表示させることができる。

【0106】

また、生成装置は、生成部によって生成された再生バーを地図データに組み込むことにより、再生バーと地図データとが合成された合成地図を表示する表示制御部をさらに備える。

【0107】

このように、生成装置は、再生バーを地図に組み込むことにより、動画の撮影経路そのものを再生バーとしてユーザに利用させることができる。これにより、ユーザは、ある経路を撮影した動画があるか否かを即座に判別したり、目的の箇所の動画を即座に選択したりすることができるので、動画の管理や検索に係る手間を省くことができる。

【0108】

また、生成装置は、合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画コンテンツおよび当該動画コンテンツを構成するフレームを特定し、特定されたフレームから当該動画コンテンツを再生するよう制御する再生部をさらに備える。

【0109】

このように、生成装置は、地図上の位置が選択されると、当該位置に対応した動画を再生する。これにより、ユーザは、映像を視聴したい箇所を地図上で選択するのみで、目的の動画をすぐに視聴することができる。

【0110】

また、表示制御部は、再生部によって再生されている動画コンテンツのフレームに紐づく位置情報の遷移に応じて、当該動画コンテンツの現在の再生位置を示すマークを合成地図上の再生バー上に表示する。

【0111】

このように、生成装置は、一般的な動画プレーヤーのように、動画再生時間ではなく、位置情報に基づいて動画を再生している箇所を示すとともに、地図上でもその表示を遷移させる。これにより、ユーザは、現在再生されている動画がどの位置を撮影したものであるか、一目で把握することができる。

【0112】

また、再生部は、動画コンテンツの終端における位置情報に紐づくフレームを有する他の動画コンテンツを特定し、動画コンテンツの再生が終了した際に、当該他の動画コンテンツを続けて再生する。

【0113】

このように、生成装置は、位置情報に基づいて連続して動画を再生することで、多数に分割された動画や、多数の異なる撮影者によって撮影された動画であっても、スムーズに連続した再生を行うことができる。これにより、ユーザは、多くの動画ファイルの中から、目的位置の近傍を撮影した動画ファイルを検索するなどの手間をかけることなく、目的の映像の視聴を継続することができる。

【0114】

また、再生部は、任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報に関連する複数の動画コンテンツであって、当該任意箇所に到達するまでの位置情報の遷移過程が異なる複数の動画コンテンツを特定し、特定した複数の動画コンテンツを再生する。

【0115】

このように、生成装置は、複数視点に基づく動画をマルチアングルで表示することができる。これにより、ユーザは、ある位置に対応する映像を複数視点で検証できるので、より詳細に状況を把握することができる。

【0116】

（５．ハードウェア構成）
上述してきた実施形態に係る生成装置１００や車載カメラやユーザ端末等の情報機器は、例えば図１９に示すような構成のコンピュータ１０００によって実現される。以下、実施形態に係る生成装置１００を例に挙げて説明する。図１９は、生成装置１００の機能を実現するコンピュータ１０００の一例を示すハードウェア構成図である。コンピュータ１０００は、ＣＰＵ１１００、ＲＡＭ１２００、ＲＯＭ（Read Only Memory）１３００、ＨＤＤ（Hard Disk Drive）１４００、通信インターフェイス１５００、および入出力インターフェイス１６００を有する。コンピュータ１０００の各部は、バス１０５０によって接続される。

【0117】

ＣＰＵ１１００は、ＲＯＭ１３００またはＨＤＤ１４００に格納されたプログラムに基づいて動作し、各部の制御を行う。例えば、ＣＰＵ１１００は、ＲＯＭ１３００またはＨＤＤ１４００に格納されたプログラムをＲＡＭ１２００に展開し、各種プログラムに対応した処理を実行する。

【0118】

ＲＯＭ１３００は、コンピュータ１０００の起動時にＣＰＵ１１００によって実行されるＢＩＯＳ（Basic Input Output System）等のブートプログラムや、コンピュータ１０００のハードウェアに依存するプログラム等を格納する。

【0119】

ＨＤＤ１４００は、ＣＰＵ１１００によって実行されるプログラム、および、かかるプログラムによって使用されるデータ等を非一時的に記録する、コンピュータが読み取り可能な記録媒体である。具体的には、ＨＤＤ１４００は、プログラムデータ１４５０の一例である本開示に係る生成処理を実行するプログラムを記録する記録媒体である。

【0120】

通信インターフェイス１５００は、コンピュータ１０００が外部ネットワーク１５５０（例えばインターネット）と接続するためのインターフェイスである。例えば、ＣＰＵ１１００は、通信インターフェイス１５００を介して、他の機器からデータを受信したり、ＣＰＵ１１００が生成したデータを他の機器へ送信したりする。

【0121】

入出力インターフェイス１６００は、入出力デバイス１６５０とコンピュータ１０００とを接続するためのインターフェイスである。例えば、ＣＰＵ１１００は、入出力インターフェイス１６００を介して、キーボードやマウス等の入力デバイスからデータを受信する。また、ＣＰＵ１１００は、入出力インターフェイス１６００を介して、ディスプレイやスピーカーやプリンタ等の出力デバイスにデータを送信する。また、入出力インターフェイス１６００は、所定の記録媒体（メディア）に記録されたプログラム等を読み取るメディアインターフェイスとして機能してもよい。メディアとは、例えばＤＶＤ（Digital Versatile Disc）、ＰＤ（Phase change rewritable Disk）等の光学記録媒体、ＭＯ（Magneto-Optical disk）等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。

【0122】

例えば、コンピュータ１０００が実施形態に係る生成装置１００として機能する場合、コンピュータ１０００のＣＰＵ１１００は、ＲＡＭ１２００上にロードされたプログラムを実行することにより、制御部１３０等の機能を実現する。また、ＨＤＤ１４００には、本開示に係る生成処理を実行するプログラムや、記憶部１２０内のデータが格納される。なお、ＣＰＵ１１００は、プログラムデータ１４５０をＨＤＤ１４００から読み取って実行するが、他の例として、外部ネットワーク１５５０を介して、他の装置からこれらのプログラムを取得してもよい。

【0123】

以上、本願の実施形態を図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。

【符号の説明】

【0124】

１ 生成システム
１０ ユーザ
２０ 動画プレーヤー
１００ 生成装置
１１０ 通信部
１２０ 記憶部
１２１ 動画記憶部
１２２ 再生データ記憶部
１３０ 制御部
１３１ 取得部
１３２ 生成部
１３３ 表示制御部
１３４ 再生部
２００ 車両

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【手続補正書】

【提出日】2023-07-13

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得する取得部と、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する生成部と、
前記生成部によって生成された再生バーを地図データに組み込むことにより、前記再生バーと地図データとが合成された合成地図を表示する表示制御部と、
前記合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画コンテンツおよび当該動画コンテンツを構成するフレームを特定し、特定されたフレームから当該動画コンテンツを再生するよう制御する再生部と、
を備えることを特徴とする生成装置であって、
前記再生部は、
前記動画コンテンツの終端における位置情報に紐づくフレームを有する他の動画コンテンツを特定し、前記動画コンテンツの再生が終了した際に、当該他の動画コンテンツを続けて再生する、
生成装置。

【請求項2】

動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得する取得部と、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する生成部と、
前記生成部によって生成された再生バーを地図データに組み込むことにより、前記再生バーと地図データとが合成された合成地図を表示する表示制御部と、
前記合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画コンテンツおよび当該動画コンテンツを構成するフレームを特定し、特定されたフレームから当該動画コンテンツを再生するよう制御する再生部と、
を備えることを特徴とする生成装置であって、
前記再生部は、
前記任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報に関連する複数の動画コンテンツであって、当該任意箇所に到達するまでの位置情報の遷移過程が異なる複数の動画コンテンツを特定し、特定した複数の動画コンテンツを再生する、
生成装置。

【請求項3】

前記表示制御部は、
前記再生部によって再生されている動画コンテンツのフレームに紐づく位置情報の遷移に応じて、当該動画コンテンツの現在の再生位置を示すマークを前記合成地図上の再生バー上に表示する、
ことを特徴とする請求項１または２に記載の生成装置。

【請求項4】

コンピュータが、
動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得し、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成し、
前記生成された再生バーを地図データに組み込むことにより、前記再生バーと地図データとが合成された合成地図を表示し、
前記合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画コンテンツおよび当該動画コンテンツを構成するフレームを特定し、特定されたフレームから当該動画コンテンツを再生する、
ことを含むことを特徴とする生成方法であって、
前記再生することは、
前記動画コンテンツの終端における位置情報に紐づくフレームを有する他の動画コンテンツを特定し、前記動画コンテンツの再生が終了した際に、当該他の動画コンテンツを続けて再生する、
ことを含む生成方法。

【請求項5】

コンピュータを、
動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得する取得部と、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する生成部と、
前記生成部によって生成された再生バーを地図データに組み込むことにより、前記再生バーと地図データとが合成された合成地図を表示する表示制御部と、
前記合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画コンテンツおよび当該動画コンテンツを構成するフレームを特定し、特定されたフレームから当該動画コンテンツを再生するよう制御する再生部と、
を備える生成装置として機能させることを特徴とする生成プログラムであって、
前記再生部は、
前記動画コンテンツの終端における位置情報に紐づくフレームを有する他の動画コンテンツを特定し、前記動画コンテンツの再生が終了した際に、当該他の動画コンテンツを続けて再生する、
生成プログラム。

【請求項6】

コンピュータが、
動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得し、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成し、
前記生成された再生バーを地図データに組み込むことにより、前記再生バーと地図データとが合成された合成地図を表示し、
前記合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画コンテンツおよび当該動画コンテンツを構成するフレームを特定し、特定されたフレームから当該動画コンテンツを再生する、
ことを含むことを特徴とする生成方法であって、
前記再生することは、
前記任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報に関連する複数の動画コンテンツであって、当該任意箇所に到達するまでの位置情報の遷移過程が異なる複数の動画コンテンツを特定し、特定した複数の動画コンテンツを再生する、
ことを含む生成方法。

【請求項7】

コンピュータを、
動画コンテンツと、前記動画コンテンツを構成するフレームに紐づく位置情報とを取得する取得部と、
前記位置情報に基づいて、前記動画コンテンツの再生を制御する再生バーの形状を生成する生成部と、
前記生成部によって生成された再生バーを地図データに組み込むことにより、前記再生バーと地図データとが合成された合成地図を表示する表示制御部と、
前記合成地図上の再生バーの任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報から動画コンテンツおよび当該動画コンテンツを構成するフレームを特定し、特定されたフレームから当該動画コンテンツを再生するよう制御する再生部と、
を備える生成装置として機能させることを特徴とする生成プログラムであって、
前記再生部は、
前記任意箇所の指定を受け付けると、当該任意箇所に紐づく位置情報に関連する複数の動画コンテンツであって、当該任意箇所に到達するまでの位置情報の遷移過程が異なる複数の動画コンテンツを特定し、特定した複数の動画コンテンツを再生する、
生成プログラム。