特許 7518253 画像生成装置、画像生成方法、画像生成プログラム及び記録媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-08

(45)【発行日】2024-07-17

(54)【発明の名称】画像生成装置、画像生成方法、画像生成プログラム及び記録媒体

(51)【国際特許分類】

   H04N 5/92 20060101AFI20240709BHJP

   H04N 23/63 20230101ALI20240709BHJP

   H04N 23/62 20230101ALI20240709BHJP

   G07C 5/00 20060101ALI20240709BHJP

【ＦＩ】

H04N5/92 010

H04N23/63 300

H04N23/62

G07C5/00 Z

【請求項の数】 3

(21)【出願番号】P 2023118970

(22)【出願日】2023-07-21

(62)【分割の表示】P 2022500274の分割

【原出願日】2021-01-14

(65)【公開番号】P2023145573

(43)【公開日】2023-10-11

【審査請求日】2023-07-21

(31)【優先権主張番号】P 2020022844

(32)【優先日】2020-02-13

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000005016

【氏名又は名称】パイオニア株式会社

(74)【代理人】

【識別番号】110001025

【氏名又は名称】弁理士法人レクスト国際特許事務所

(72)【発明者】

【氏名】黄 慶浩

【審査官】川中 龍太

(56)【参考文献】

【文献】特開２０１１－０２９８５２（ＪＰ，Ａ）

【文献】特開２０１３－１８３２１８（ＪＰ，Ａ）

【文献】特開２０２０－０１３０７０（ＪＰ，Ａ）

【文献】特開２００７－１３５０６７（ＪＰ，Ａ）

【文献】特開２０１７－０８４１６１（ＪＰ，Ａ）

【文献】特開２０１４－０９２７９７（ＪＰ，Ａ）

【文献】韓国登録特許第１０－１５２５２２４（ＫＲ，Ｂ１）

【文献】国際公開第２０２０／１３７８８３（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ５／７６ － ５／９５６

Ｈ０４Ｎ ２３／００ － ２３／９５９

Ｇ０７Ｃ ５／００

(57)【特許請求の範囲】

【請求項1】

移動体から撮影された一連の動画を取得する動画取得部と、
前記一連の動画の撮影が開始された時点からの移動距離を取得する移動距離取得部と、
前記一連の動画に含まれるフレーム画像であって前記移動距離が対応付けられたフレーム画像を、サムネイル画像として抽出して前記移動距離の順に配列したサムネイル画像群を生成するサムネイル画像生成部と、
を有することを特徴とする画像生成装置。

【請求項2】

前記サムネイル画像生成部は、前記移動距離の間隔が等しくなるように配列した前記サムネイル画像群を生成することを特徴とする請求項１に記載の画像生成装置。

【請求項3】

移動体から撮影された一連の動画を取得する動画取得ステップと、
前記一連の動画の撮影が開始された時点からの移動距離を取得する移動距離取得ステップと、
前記一連の動画に含まれるフレーム画像であって前記移動距離が対応付けられたフレーム画像を、サムネイル画像として抽出して前記移動距離の順に配列したサムネイル画像群を生成するサムネイル画像生成ステップと、
を有することを特徴とする画像生成方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像生成装置、画像生成方法、画像生成プログラム及び記録媒体、特に動画のサムネイル等の画像を生成する画像生成装置、画像生成方法、画像生成プログラム及び記録媒体に関する。

【背景技術】

【0002】

動画像の再生を開始したい箇所をユーザに指定させるためにサムネイルを生成する技術が知られている。

【0003】

例えば、特許文献１には、動画像コンテンツの時間方向の検索を行う時間方向検索手段を備え、タイムコード列を用いて動画像コンテンツからリアルタイムにサムネイルを抽出し、検索結果の表示を行う動画像検索装置が開示されている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００２－２８１４３２号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

例えば、上記のようなサムネイルを用いて、移動体に搭載されたカメラによって当該移動体からの風景が撮影された動画の再生を行う際に、例えば当該移動体の時間当たりの移動量が少ない場合に、同じような内容のサムネイルが多数表示され、所望の箇所に対応するサムネイルを探し出す作業が煩雑になる場合があることが課題の一つとして挙げられる。

【0006】

本発明は上記した点に鑑みてなされたものであり、移動体からの風景が撮影された動画の再生において、ユーザが動画の再生を開始したい箇所を検索する際に、効率の良い検索を可能とし、当該動画の所望の箇所を容易に見つけることを可能にするサムネイル画像を生成する画像生成装置、画像生成方法、画像生成プログラム及び記録媒体を提供することを目的の１つとしている。

【課題を解決するための手段】

【0007】

請求項１に記載の発明は、移動体からの風景が撮影された一連の動画を取得する動画取得部と、前記一連の動画の撮影が開始された時点から前記一連の動画を構成する複数のフレーム画像の各々が撮影された時点までの累積移動距離を取得する移動距離取得部と、前記複数のフレーム画像の各々に撮影時点での前記累積移動距離が対応付けられた動画である移動距離保有動画を生成する移動距離保有動画生成部と、前記累積移動距離に応じて、前記移動距離保有動画から複数のフレーム画像を複数のサムネイル画像として抽出し、前記複数のサムネイル画像を前記累積移動距離順に配列したサムネイル画像群を生成するサムネイル画像生成部と、を有することを特徴とする。

【0008】

請求項５に記載の発明は、画像生成装置がサムネイル画像群を生成する画像生成方法であって、動画取得部が、移動体からの風景が撮影された一連の動画を取得する動画取得ステップと、移動距離取得部が、前記一連の動画の撮影が開始された時点から前記一連の動画を構成する複数のフレーム画像の各々が撮影された時点までの累積移動距離を取得する移動距離取得ステップと、移動距離保有動画生成部が、前記複数のフレーム画像の各々に撮影時点での前記累積移動距離が対応付けられた動画である移動距離保有動画を生成する移動距離保有動画生成ステップと、サムネイル画像生成部が、前記累積移動距離に応じて前記移動距離保有動画から複数のフレーム画像を複数のサムネイル画像として抽出し、前記複数のサムネイル画像を前記累積移動距離順に配列したサムネイル画像群を生成するサムネイル画像生成ステップと、を含むことを特徴とする。

【0009】

請求項６に記載の発明は、コンピュータを備える画像生成装置によって実行される画像生成プログラムであって、前記コンピュータに、動画取得部が移動体からの風景が撮影された一連の動画を取得する動画取得ステップと、移動距離取得部が前記一連の動画の撮影が開始された時点から前記一連の動画を構成する複数のフレーム画像の各々が撮影された時点までの累積移動距離を取得する移動距離取得ステップと、移動距離保有動画生成部が前記複数のフレーム画像の各々に撮影時点での前記累積移動距離が対応付けられた動画である移動距離保有動画を生成する移動距離保有動画生成ステップと、サムネイル画像生成部が前記累積移動距離に応じて前記移動距離保有動画から複数のフレーム画像を複数のサムネイル画像として抽出し、前記複数のサムネイル画像を前記累積移動距離順に配列したサムネイル画像群を生成するサムネイル画像生成ステップと、を実行させることを特徴とする。

【図面の簡単な説明】

【0010】

【図1】実施例に係る画像生成装置を搭載した自動車の斜視図である。

【図2】実施例に係る画像生成装置を搭載した自動車の内側から見た表示部を模式的に示す図である。

【図3】実施例に係るタッチパネルに表示される画像の一例を示す図である。

【図4】実施例に係る画像生成装置の機能ブロック図である。

【図5】実施例に係るサムネイルの生成に用いられるデータの一例を示す図である。

【図6】実施例に係るサムネイルの選択の態様の一例を示す図である。

【図7】実施例に係るサムネイルの表示態様の一例を示す図である。

【図8】実施例に係るサムネイルの表示態様の他の例を示す図である。

【図9】実施例において実行されるルーチンの一例を示すフローチャートである。

【図10】実施例において実行されるルーチンの一例を示すフローチャートである。

【図11】実施例の変形例において動画の再生制御に用いられるデータの一例を示す図である。

【図12】実施例の変形例に係るタッチパネルに表示される画像の一例を示す図である。

【図13】実施例の変形例において実行されるルーチンの一例を示すフローチャートである。

【図14】実施例の変形例において実行されるルーチンの一例を示すフローチャートである。

【発明を実施するための形態】

【0011】

以下に本発明の実施例について詳細に説明する。なお、以下の説明及び添付図面においては、実質的に同一又は等価な部分には同一の参照符号を付している。

【実施例】

【0012】

図１は、本発明の実施例に係る画像生成装置１０の構成を模式的に示す図である。画像生成装置１０は、例えば移動体に搭載されて、当該移動体に搭載されたカメラによって走行しつつ撮影された風景動画を取り込み、当該動画を再生して映像出力可能に構成されている。また、画像生成装置１０は、当該動画のサムネイル画像を生成可能に構成されている。

【0013】

例えば、画像生成装置１０は、当該移動体に搭載された表示装置に向けてサムネイル画像を出力する。また、例えば画像生成装置１０は、当該移動体に搭載された表示装置に向けて動画を再生した映像を出力する。

【0014】

また、例えば画像生成装置１０は、表示装置にサムネイル画像を表示して、当該サムネイル画像の選択操作を受け付け、選択されたサムネイル画像に応じた頭出しを行って当該動画を再生した映像を出力する動画再生装置としても機能する。

【0015】

本実施例においては、画像生成装置１０が移動体としての自動車Ｍに搭載されている例について説明する。図１に示すように、画像生成装置１０は、例えば自動車Ｍのダッシュボード内に搭載されている。

【0016】

カメラ１３は、例えば、自動車Ｍのルーフ部分又はドアパネル部分等に、自動車Ｍの側方を撮影可能に取り付けられたビデオカメラである。カメラ１３は、画像生成装置１０と通信可能に接続されており、撮影した静止画又は動画を画像生成装置１０に送信可能に構成されている。

【0017】

カメラ１３が撮影した動画は、画像生成装置１０に取り込まれる。例えば、カメラ１３は、自動車Ｍがエンジンを始動させて走行を開始すると、撮影を開始するように設定されている。なお、自動車Ｍには、例えば、自動車Ｍの前方及び後方を撮影可能なビデオカメラがさらに取り付けられていても良い。

【0018】

第１ディスプレイ１５は、自動車Ｍの窓部分に備えられた表示装置である。本実施例において、第１ディスプレイ１５は、自動車Ｍの窓ガラスの代わりにドアに取り付けられた透明のディスプレイである場合について説明する。

【0019】

例えば、第１ディスプレイ１５は、リアドアＤＲに取り付けられている。なお、第１ディスプレイ１５は、窓ガラスの代わりに取り付けられている場合に限られず、例えば自動車Ｍの窓ガラスの内側に貼り付けられていてもよい。また、第１ディスプレイ１５は、例えば、フロントドアＤＦに取り付けられていてもよく、例えば、フロントガラスの内側に貼り付けられていてもよい。

【0020】

第１ディスプレイ１５は、例えば、有機ＥＬディスプレイ又は無機ＥＬディスプレイであってもよく、例えば液晶ディスプレイである。例えば、第１ディスプレイ１５は、可視光の透過率が所定以上であり、少なくとも動画を表示していない場合に、肉眼で向こう側の風景が見えるように構成されている。

【0021】

第１ディスプレイ１５は、画像生成装置１０に有線又は無線で接続されている。第１ディスプレイ１５は、自動車Ｍの室内（キャビン内）側に向いた表示面を有し、画像生成装置１０から出力された動画を自動車Ｍの客室側に向けて表示する。例えば、自動車Ｍの室内に居るユーザは、自動車Ｍからの風景が撮影された動画を、窓から外を見るような態様で見ることができる。

【0022】

図２は、自動車Ｍの室内側から見た第１ディスプレイ１５（すなわち自動車Ｍの窓）及びリアドアＤＲの一部を模式的に示す図である。図２は、リアドアＤＲを後部座席から見た状態を示している。

【0023】

第１ディスプレイ１５は、自動車Ｍの内側に面した動画表示面１５Ａを有している。図２において、動画表示面１５Ａには、画像生成装置１０によって再生された自動車Ｍから撮影された動画が表示されている。

【0024】

タッチパネル１７は、リアドアＤＲのドアパネルの内側に取り付けられているタッチパネルディスプレイである。例えば、タッチパネル１７は、図２に示すように、リアドアＤＲの内側パネルＩＰの表面に、内側パネルＩＰの上端部に沿って伸張している。タッチパネル１７は、内側パネルの上端部に沿った方向を長手方向とする矩形の形状を有している。

【0025】

タッチパネル１７は、第２ディスプレイ１７Ａ及びタッチパッド１７Ｂから構成されたタッチパネルである。第２ディスプレイ１７Ａは、例えば液晶表示装置又は有機ＥＬ表示装置等の表示装置である。タッチパッド１７Ｂは、例えば、第２ディスプレイ１７Ａの表示面に貼り付けられた人の指等での操作を受け付ける感圧式または静電式の透明タッチパッドである。

【0026】

タッチパネル１７は、画像生成装置１０に通信可能に接続されており、画像生成装置１０から出力された画像を表示することが可能である。また、タッチパネル１７は、第１ディスプレイ１５に表示される動画の再生、早送り又は早戻しの操作を受け付けて、当該操作の受付に基づく指示を画像生成装置１０に送信することが可能である。

【0027】

図３は、タッチパネル１７に表示される、動画を再生するための操作用の画像である再生操作画像ＰＣの一例を示す図である。図３において、再生操作画像ＰＣとともに再生操作画像ＰＣを用いて操作を行っているユーザの指ＦＮを示している。

【0028】

図３に示すように、再生操作画像ＰＣは、操作用のボタンが表示されている領域であるボタン領域ＡＲ１及び動画の部分を検索するための画像が表示されている領域である検索領域ＡＲ２を含む。

【0029】

ボタン領域ＡＲ１には、再生ボタンＰＬ、停止ボタンＳＴ、早送りボタンＦＦ及び早戻しボタンＲＷが表示されている。例えば、ユーザは、これらのボタンが表示されている領域に指ＦＮを接触させることで、動画の再生、停止、早送り又は早戻しの操作入力を行うことができる。例えば、再生ボタンＰＬが表示されている領域に指ＦＮを接触させることで、画像生成装置１０に一連の動画を再生させて第１ディスプレイ１５の動画表示面１５Ａ（図２参照）に表示させることができる。

【0030】

検索領域ＡＲ２には、シークバーＳＢが表示されている。図３に示すように、シークバーＳＢは、再生操作画像ＰＣの長辺に平行な方向に沿って伸長している棒状の部分である。シークバーＳＢ内には、第１ディスプレイ１５に表示されている映像が、画像生成装置１０によって再生されている動画のどの部分であるかを示す印としてスライダーＳＤ１が表示されている。スライダーＳＤ１は、シークバーＳＢの伸長方向の一部の区間を占めている。

【0031】

具体的には、例えば、シークバーＳＢの左端の位置が動画の始端に対応し、シークバーＳＢの右端の位置が動画の終端に対応する。また、シークバーＳＢの伸長方向においてスライダーＳＤ１が占めている区間は、動画の一部分に対応する。

【0032】

スライダーＳＤ１の中央には、マーカＭＫが表示されている。マーカＭＫのシークバーＳＢの左端からの距離が、動画の撮影が開始された時点から第１ディスプレイ１５に表示されている映像が撮影された時点までの自動車Ｍの累積走行距離（以下、積算走行距離とも称する）に対応する。言い換えれば、シークバーＳＢの伸長方向に沿った軸が累積走行距離に対応している。

【0033】

従って、自動車ＭがシークバーＳＢ上の位置に対応する地点を走行していた(存在していた)時点に撮影された映像が、シークバーＳＢ上の当該位置に対応する動画の部分となる。

【0034】

図３は、動画の撮影終了時点における累積走行距離、すなわち、一連の動画の撮影が開始されてから終了するまでの自動車Ｍの移動距離である合計走行距離が２０ｋｍである場合の例を示している。言い換えれば、動画の終端が累積走行距離２０ｋｍに対応している。

【0035】

また、図３は、シークバーＳＢ上の累積走行距離１０ｋｍ－１２ｋｍに対応する区間にスライダーＳＤ１が表示されている例を示している。マーカＭＫは、１１ｋｍの位置に表示されている。スライダーＳＤ１の中央のマーカＭＫが示す１１ｋｍという累積走行距離は、第１ディスプレイ１５に表示されている動画の部分が撮影された時点の自動車Ｍの累積走行距離に対応する。

【0036】

すなわち、図３に示す例では、第１ディスプレイ１５（図２）に表示されている映像は、一連の動画のうち、自動車Ｍの累積走行距離が１１ｋｍであった時点に、自動車Ｍが走行していた地点で撮影された映像である。

【0037】

スライダーＳＤ１は、シークバーＳＢの領域内をシークバーＳＢの長辺方向に沿って移動する。例えば、ユーザは、指ＦＮをシークバーＳＢの長辺に沿った方向、すなわち図３中の矢印の方向に動かしてドラッグ等の操作を行うことで、スライダーＳＤ１の位置をシークバーＳＢ内で変更することができる。

【0038】

例えば、スライダーＳＤ１の位置が変更されると、スライダーＳＤ１に伴って移動したマーカＭＫの位置に対応する地点で撮影された動画の部分が第１ディスプレイ１５に表示される。

【0039】

サムネイル画像ＳＭ１－ＳＭ６の各々は、画像生成装置１０によって生成されて第２ディスプレイ１７Ａに表示されているサムネイル画像である。サムネイル画像は、例えば、ユーザが一連の動画をどの部分から再生するかを検索したり、頭出しを行ったりする手がかりとなるように再生操作画像ＰＣ内に表示される小さい画像である。

【0040】

例えば、サムネイル画像の各々は、一連の動画を構成する複数のフレーム画像のうちの１つが例えば縮小されることでサムネイル化された画像である。従ってユーザは、サムネイル画像を見ることによって、一連の動画の内容の一部を確認できる。

【0041】

例えば、サムネイル画像ＳＭ１－ＳＭ６は、動画を構成する全てのフレーム画像から、各々が撮像された地点が等距離間隔となるように抽出された複数のフレーム画像が縮小されて生成されて配列されたものである。図３に示す例においては、サムネイル画像ＳＭ１－ＳＭ６の各々は、走行距離０．４ｋｍ毎の等距離間隔で配列されている。

【0042】

サムネイル画像の各々には、対応するフレーム画像の各々が撮像された時点における自動車Ｍの累積走行距離が対応付けられている。従って、サムネイル画像の各々の対応するフレーム画像の各々が撮像された地点は、シークバーＳＢの軸に沿った位置に対応している。

【0043】

サムネイル画像の各々の距離間隔は、例えば固定値でもよく、例えば自動的に変更されてもよい。例えば一連の動画の終端における累積走行距離が大きくなった場合に、より大きい距離間隔に自動的に変更されてもよい。

【0044】

また、図３に示す例においては、サムネイル画像ＳＭ１－ＳＭ６の各々は、シークバーＳＢの伸長方向においてスライダーＳＤ１が占める区間に対応する自動車Ｍの走行区間で撮影されたフレーム画像の一部がサムネイル化された画像である。換言すれば、スライダーＳＤ１は、サムネイル画像が表示されているサムネイル表示区間を示している。

【0045】

図３において、具体的には、スライダーＳＤ１が示すサムネイル画像ＳＭ１－ＳＭ６についてのサムネイル表示区間は、自動車Ｍの累積走行距離が１０ｋｍから１２ｋｍまでの区間である。

【0046】

なお、図３に示すように、再生操作画像ＰＣのボタン領域ＡＲ１内に拡大ボタンＳＬ１及び縮小ボタンＳＬ２が表示されていてもよい。例えば、拡大ボタンＳＬ１及び縮小ボタンＳＬ２によって、サムネイル表示区間が拡大又は縮小されて、より長い区間又は短い区間で撮影されたフレーム画像に対応するサムネイル画像が表示されてもよい。また、表示されるサムネイル画像の変更に伴って、スライダーＳＤ１がシークバーＳＢの伸長方向に拡大又は縮小されてもよい。

【0047】

また、拡大ボタンＳＬ１及び縮小ボタンＳＬ２によって、シークバーＳＢが示す累積走行距離が変更されてもよい。シークバーＳＢが示す累積走行距離の変更に伴って、変更された距離間隔でサムネイル画像が表示されても良い。例えば、拡大ボタンＳＬ１が押されて、シークバーＳＢの左端が累積走行距離５ｋｍの地点に対応し、右端が１０ｋｍの地点に対応するように変更されて、より短い距離間隔でサムネイル画像が表示されてもよい。

【0048】

図４は、画像生成装置１０の機能ブロック図である。画像生成装置１０は、例えば、システムバス１８を介して各部が協働する装置である。

【0049】

入力部１９は、画像生成装置１０の外部の機器からデータを取得するインターフェースである。入力部１９は、自動車Ｍに備えられている機器であるカメラ１３に接続されている。例えば、画像生成装置１０は、入力部１９を介してカメラ１３から風景動画を取り込むことが可能である。

【0050】

また、入力部１９は、自動車Ｍの速度を取得可能な速度センサ２１及び自動車の位置情報を取得する全地球航法衛星システム（ＧＮＳＳ：Global Navigation Satellite System）の１つである全地球測位システム（ＧＰＳ：Global Positioning System）の情報を受信可能なＧＰＳ受信機２２に接続されている。すなわち、画像生成装置１０は、速度センサ２１から自動車Ｍの速度を取得可能であり、かつＧＰＳ受信機２２からＧＰＳ情報を取得可能に構成されている。

【0051】

出力部２３は、画像生成装置１０の外部の機器にデータを出力するインターフェースである。出力部２３は、第１ディスプレイ１５及びタッチパネル１７の第２ディスプレイ１７Ａに接続されている。

【0052】

例えば、出力部２３は、画像生成装置１０によって一連の動画が再生された映像を第１ディスプレイ１５に出力する。例えば、出力部２３は、再生操作のための操作画像を第２ディスプレイ１７Ａに出力する。また、例えば、出力部２３は、画像生成装置１０において生成されたサムネイル画像を第２ディスプレイ１７Ａに出力する。

【0053】

操作入力部２５は、タッチパネル１７のタッチパッド１７Ｂを介した操作入力の信号を取得するインターフェースである。操作入力部２５は、タッチパッド１７Ｂに接続されており、第２ディスプレイ１７Ａに表示された操作用の画像に対する操作入力の信号を取得する。例えば、操作入力部２５は、図３に示したような再生操作画像ＰＣに対する各種操作入力の信号を受け付ける。

【0054】

記憶部２７は、例えば、ハードディスク装置、ＳＳＤ（solid state drive）、フラッシュメモリ等により構成されており、画像生成装置１０における画像処理や動画の再生等に関する各種プログラムを記憶する。なお、各種プログラムは、例えば、他のサーバ装置等からネットワーク（図示せず）を介して取得されるようにしてもよいし、記録媒体に記録されて各種ドライブ装置を介して読み込まれるようにしてもよい。

【0055】

記憶部２７に記憶される各種プログラムは、ネットワークを介して伝送可能であり、また、コンピュータ読み取り可能な記録媒体に記録して譲渡することが可能である。

【0056】

制御部２９は、ＣＰＵ（Central Processing Unit）２９Ａ、ＲＯＭ（Read Only Memory）２９Ｂ、ＲＡＭ（Random Access Memory）２９Ｃ等により構成され、コンピュータとして機能する。そして、ＣＰＵ２９Ａが、ＲＯＭ２９Ｂや記憶部２７に記憶された各種プログラムを読み出し実行することにより各種機能を実現する。

【0057】

例えば、制御部２９は、入力部１９を介してカメラ１３が撮影した動画を取得し、動画取得部として機能する。

【0058】

例えば、制御部２９は、入力部１９を介して自動車Ｍの速度を取得し、当該速度と走行時間から累積走行距離を取得する。

【0059】

例えば、制御部２９は、入力部１９を介してＧＰＳ受信機２２のデータから自動車Ｍの現在位置情報を取得し、自動車Ｍの位置と時刻から自動車Ｍの累積走行距離を算出する。

【0060】

制御部２９は、入力部１９を介して速度センサ２１又はＧＰＳ受信機２２から取得した情報に基づいて自動車Ｍが走行を開始してから現在までの累積走行距離（すなわち積算走行距離）を取得する際に、移動距離取得部として機能する。

【0061】

例えば、制御部２９は、入力部１９を介してカメラ１３から取得した一連の動画を構成するフレーム画像の各々に、当該フレーム画像の各々が撮影された撮影時点における自動車Ｍの累積走行距離を対応付けて移動距離保有動画を生成する移動距離保有動画生成部として機能する。また、制御部２９は、当該生成した移動距離保有動画を記憶部２７に記憶する録画制御部として機能する。

【0062】

また、例えば、制御部２９は、移動距離保有動画からサムネイル画像（例えば図３中、ＳＭ１－ＳＭ６）を生成するサムネイル画像生成部として機能する。例えば、制御部２９は、移動距離保有動画を構成する全てのフレーム画像から複数のフレーム画像を抽出し、当該抽出した複数のフレーム画像の各々を縮小して複数のサムネイル画像を生成する。言い換えれば、制御部２９は、移動距離保有動画から複数のフレーム画像を複数のサムネイル画像として抽出してサムネイル画像を生成する。

【0063】

例えば、制御部２９は、移動距離保有動画から複数のフレーム画像を抽出する際に、各々のフレーム画像の撮像位置における累積走行距離に応じて抽出する。

【0064】

例えば、制御部２９は、移動距離保有動画から複数のフレーム画像を抽出する際に、各々のフレーム画像の撮像位置における累積移動距離の差が等しくなるように複数のフレーム画像を抽出する。言い換えれば、制御部２９は、フレーム画像の各々が撮像された地点が等距離間隔となるように複数のフレーム画像を抽出する。

【0065】

例えば、制御部２９は、等距離間隔で複数のフレーム画像を抽出する際に、複数のフレーム画像の各々が撮像された地点の距離間隔を常に一定の距離間隔とする。

【0066】

例えば、制御部２９は、サムネイル画像を生成する際に、一連の動画の撮影が開始された時点から終了するまでの自動車Ｍの移動距離である合計移動距離に基づいた抽出態様で、当該一連の動画から生成された移動距離保有動画から複数のフレーム画像を抽出する。

【0067】

例えば、制御部２９は、合計走行距離に応じて異なる距離間隔で移動距離保有動画から複数のフレーム画像を抽出する。具体的には、例えば、合計移動距離が長い（大きい）ほど長い（大きい）距離間隔で、複数のフレーム画像を抽出する。

【0068】

例えば、サムネイル画像生成部としての制御部２９は、生成した複数のサムネイル画像の各々を配列してサムネイル画像群を生成してもよい。例えば、サムネイル画像群は、複数のサムネイル画像の各々が自動車Ｍの累積走行距離順（すなわち、移動距離順）に、配列されて生成される。

【0069】

サムネイル画像群は、複数のサムネイル画像が様々な態様で配列されたものである。例えば、サムネイル画像群は、サムネイル画像の各々が自動車Ｍの累積走行距離順（すなわち、移動距離順）に、例えば図３に示したように直線状に配列された画像であってもよい。また、例えばサムネイル画像群は、複数のサムネイル画像が環状又は曲線状に配列された画像であってもよい。

【0070】

例えば、制御部２９は、生成されたサムネイル画像又はサムネイル画像群を第２ディスプレイ１７Ａに表示させる制御を行う表示制御部として機能する。制御部２９は、例えば、図３に示したように、サムネイル画像の各々をシークバーＳＢの伸長方向に沿って、走行距離順すなわち撮影された順に並べて表示する制御を行う。

【0071】

表示制御部としての制御部２９は、例えば、サムネイル画像群の全体を表示する制御を行ってもよく、サムネイル画像群の一部を表示する制御を行ってもよい。例えば、サムネイル画像群の一部を表示する場合、サムネイル画像群の一部をスクロール表示されるように制御してもよい。

【0072】

また、表示制御部としての制御部２９は、第２ディスプレイ１７Ａに表示させる際に、サムネイル画像生成部によって生成されたサムネイル画像を様々な態様で配列してもよい。例えば、図３に示したように、複数のサムネイル画像を直線状に配列してもよい。また、例えば、複数のサムネイル画像を環状又は曲線状に配列してもよい。

【0073】

また、例えば、表示制御部としての制御部２９は、複数のサムネイル画像を表示する際に、複数のサムネイル画像間に重なりや大小関係をもたせて表示された際に奥行き方向に連なって見える態様で奥行き感、遠近感を演出するように配列して表示してもよい。

【0074】

また、制御部２９は、操作入力部２５を介して、一連の動画の再生に関する指示操作を受け付ける操作受付部として機能する。例えば、操作受付部としての制御部２９は、再生操作画像ＰＣ（図３）を用いたタッチパッド１７Ｂへの入力操作を介して、再生制御部に対して再生、早送り又は早戻しを指示する指示操作を受け付ける。

【0075】

制御部２９は、当該指示操作に応じて、出力部２３を介して第１ディスプレイ１５に表示させるための動画の再生に関する制御を行う。例えば、制御部２９は、一連の動画を再生するか、早送り又は早戻しをする制御を行う再生制御部として機能する。

【0076】

例えば、制御部２９は、サムネイル画像の１つを選択する選択操作が受け付けられると、当該選択操作によって選択されたサムネイル画像に対応するフレーム画像から頭出しを行って、一連の動画又は移動距離保有動画を再生した映像を、出力部２３を介して第１ディスプレイ１５に供給する。

【0077】

尚、本実施例においては、再生とは、撮影された風景動画を、動画に付されたタイムコードに基づいて決まる基本速度で順方向に再生することを指す。また、早送りとは、撮影された風景動画を、上記基本速度よりも速い速度で順方向に再生することを指す。また、早戻しとは、撮影された風景動画を、基本速度よりも早い速度で逆方向に再生することを指す。

【0078】

図５は、移動距離保有動画が生成される際に、一連の動画を構成する複数のフレーム画像の各々に、複数のフレーム画像の各々が撮影された時点における自動車Ｍの走行距離が対応付けられたデータの一例であるテーブルＴＢ１を示す図である。

【0079】

図５に示すように、テーブルＴＢ１において、一連の動画を構成する複数のフレーム画像の各々に付された番号であるフレーム番号と、各々のフレーム画像が撮影された時点における撮影開始からの経過時間と、当該時点における撮影開始時点からの累積走行距離と、が対応付けられている。

【0080】

例えば、テーブルＴＢ１において、撮影開始時に撮影されたフレーム番号１のフレーム画像には、撮影開始からの走行距離０（ｍ）が対応付けられている。すなわち、撮影開始の時点は、走行距離の積算の開始時点となっている。なお、経過時間の代わりに時刻が対応付けられていてもよい。

【0081】

例えば、自動車Ｍの走行速度は、道路の状況等によって随時変動するので、時間あたりの走行距離は、必ずしも一定にならない。例えば、図５のテーブルＴＢ１に示す例では、経過時間０から６０secの間及び経過時間６０から１２０secの間の６０sec当たりの走行距離はいずれも１ｋｍである。一方で、経過時間１２０secから１８０secまでの６０sec当たりの走行距離は５００ｍである。

【0082】

上述したように、画像生成装置１０において、制御部２９は、図５に示したような移動距離保有動画を構成する全てのフレーム画像の中から、複数のフレーム画像を抽出してサムネイル画像を生成する。

【0083】

制御部２９は、当該サムネイル画像の生成の際に、経過時間の間隔に関わらず、テーブルＴＢ１を用いて、フレーム画像に対応付けられた累積走行距離の差が等しい等距離間隔となるように複数のフレーム画像を抽出する。従って、経過時間に無関係に、等距離間隔で抽出された複数のフレーム画像に対応する複数のサムネイル画像を生成することができる。

【0084】

一方で、経過時間の間隔が等しい等時間間隔で複数のフレーム画像を抽出してサムネイル画像を生成した場合、内容の変化が少ないサムネイル画像が連続する場合や、内容の変化に対してサムネイル画像の間隔が大きすぎる場合がある。

【0085】

例えば、自動車Ｍが低速で走行していた際に撮影された動画は、高速で走行していた際に撮影された動画と比較して、時間当たりの動画の内容の変化が少ない場合がある。このような場合、同じようなサムネイル画像が連続して表示され、ユーザが所望のサムネイル画像を探す際に時間がかかることがある。

【0086】

また、例えば、自動車Ｍが高速で走行していた際に撮影された動画は、低速で走行していた際に撮影された動画と比較して、時間当たりの動画の内容の変化が大きい場合がある。このような場合、等時間間隔で複数のフレームを抽出してサムネイル画像を生成すると、一部の風景がサムネイル画像に現れない場合が生じ、ユーザが所望のサムネイル画像を見つけ難い場合がある。

【0087】

本実施例においては、図５に示したように、一連の動画を構成する全てのフレーム画像の各々に、各々のフレーム画像が撮影された時点である撮影時点における自動車Ｍの走行距離が対応付けられている。従って、動画を構成する全てのフレーム画像から、各々が撮像された地点が等距離間隔となるように複数のフレーム画像を抽出することができる。従って、走行速度に関わらず、走行距離を基準としたサムネイル画像を生成することができる。

【0088】

図６を参照しつつ、サムネイル画像を用いた動画の再生について説明する。図６は、再生操作画像ＰＣの一例を示す図である。図６において、ユーザの指ＦＮの位置のみが図３と異なる。

【0089】

図６において、サムネイル画像ＳＭ１－ＳＭ６は、累積走行距離が０．４ｋｍ毎の等距離間隔で配列されている。例えば、サムネイル画像ＳＭ１－ＳＭ６は、等距離間隔で配列されたサムネイル画像群の一部がタッチパネル１７に表示されたものであってもよい。例えば、図６中の破線で囲まれた領域Ａは、サムネイル画像群の全体であってもよく、サムネイル画像群の一部であってもよい。

【0090】

ユーザは、サムネイル画像ＳＭ１－ＳＭ６の中から、一連の動画の再生を開始したい部分に該当する１のサムネイル画像をタッチパッド１７Ｂを介して選択することができる。例えば、当該選択のための入力操作は、タッチパネル１７の第２ディスプレイ１７Ａの当該１のサムネイル画像が表示されている領域に指ＦＮが接触することで、タッチパッド１７Ｂを介して受け付けられる。

【0091】

図６は、ユーザの指ＦＮがサムネイル画像ＳＭ５を選択している様子を示している。例えば、図６に示すように、第２ディスプレイ１７Ａ上のサムネイル画像ＳＭ５が表示されている領域にユーザの指ＦＮが接触すると、サムネイル画像ＳＭ５を選択する入力操作がタッチパッド１７Ｂを介して受付けられて、サムネイル画像ＳＭ５に対応するフレーム画像から一連の動画の再生が開始されて第１ディスプレイ１５に表示される。換言すればサムネイル画像ＳＭ５によって頭出しがなされる。

【0092】

なお、例えば、ユーザの指ＦＮが、サムネイル画像ＳＭ５が表示されている領域に接触した後に再生ボタンＰＬが表示されている領域に接触することで、一連の動画の再生を指示する入力操作が受け付けられてもよい。

【0093】

本実施例によれば、図６に示すように、等距離間隔で配列された複数のサムネイル画像の中から、一連の動画が撮影された際の自動車Ｍの走行速度に関わらず、ユーザが所望のサムネイル画像を効率よく検索することを可能にすることができる。従って、ユーザが一連の動画の再生を開始したい箇所に該当するサムネイル画像を容易に見つけることを可能とすることができる。

【0094】

尚、移動体からの風景が撮影された一連の動画から所望の個所を検索しようとする場合、例えば、ユーザが所望の個所が上記一連の動画中のどのあたりに記録されているかの見当がついている場合と、見当がついていない場合とでは、隣接するサムネイル同士の好適な累積移動距離の差が異なる。前者の場合は、既に見当がついている撮影地点周辺のサムネイル画像であって、サムネイル画像同士の累積移動距離の差が比較的短いサムネイル画像列が有効となり、後者の場合は、まずは所望の場面がどのあたりに記録されているかの見当をつける必要があるため、サムネイル画像同士の累積移動距離の差が比較的長いサムネイル画像列が有効となる。これに対応するため、画像生成装置１０は、表示装置に表示される隣接するサムネイル画像同士の累積距離の差を、ユーザにより変更可能に構成されていることが好ましい。

【0095】

図７は、再生操作画像ＰＣの一例を示す図である。図７を参照しつつ、一連の動画の撮影終了時点における累積走行距離が図３及び図６の場合と異なる場合について説明する。図７において、一連の動画の撮影終了時点における累積走行距離、すなわち一連の動画の撮影の開始から終了までの間の自動車Ｍの走行距離である合計走行距離は４０ｋｍである。

【0096】

図７において、スライダーＳＤ２は、シークバーＳＢ上の累積走行距離２０ｋｍ－２２ｋｍに対応する位置をサムネイル表示区間として示している。スライダーＳＤ２は、スライダーＳＤ２が示すサムネイル表示区間が２ｋｍである点において図３や図６に示したスライダーＳＤ１と同様である。

【0097】

また、図７に示すように、スライダーＳＤ２が示すサムネイル表示区間に対応するサムネイル画像ＳＭ７－ＳＭ１２が表示されている。サムネイル画像ＳＭ１－ＳＭ６と同様に、サムネイル画像ＳＭ７－ＳＭ１２は、０．４ｋｍ毎の等距離間隔で配列されている。従って、合計走行距離が２０ｋｍの場合と４０ｋｍとの場合とで、同じ距離間隔でサムネイル画像が表示されている。

【0098】

このように、本実施例において、等距離間隔で配列された複数のサムネイル画像を再生操作画像ＰＣ内に表示させることができる。

【0099】

なお、スライダーＳＤ１（図３）は、合計走行距離２０ｋｍに対応するシークバーＳＢ内に２ｋｍに対応する幅をもって表示されている。これに対して、スライダーＳＤ２は、合計走行距離４０ｋｍに対応するシークバーＳＢ内に２ｋｍに対応する幅をもって表示されているので、スライダーＳＤ２は、スライダーＳＤ１よりも、走行距離に沿った方向における長さが短くなっている。

【0100】

なお、サムネイル画像がスライダーＳＤ２に対応して表示される場合に限られず、例えば、動画の全範囲がサムネイル表示区間となってもよい。例えば、サムネイルの表示数を固定の数とし、合計走行距離をサムネイル画像の表示数によって等分した距離を単位とした等距離間隔で、サムネイル画像が表示されてもよい。また、例えば、サムネイル画像を生成する数を固定の数とし、合計走行距離をサムネイル画像の生成数によって等分した等距離間隔でサムネイル画像が生成されてもよい。

【0101】

なお、例えば、シークバーＳＢのスケールは、自動車Ｍの現在の累積走行距離に追従してリアルタイムに変更されてもよい。その場合にも、一定の距離間隔で、サムネイル画像が表示されてもよく、スライダーＳＤ２の第２ディスプレイ１７Ａ上におけるサイズが変更されてもよい。

【0102】

図８は、再生操作画像ＰＣの一例を示す図である。図８は、自動車Ｍの合計走行距離が４０ｋｍである場合を示している。

【0103】

図８には、シークバーＳＢ及びシークバーＳＢ内のスライダーＳＤ３が表示されている。シークバーＳＢの左端の位置が一連の動画の撮影開始位置０ｋｍに対応し、シークバーＳＢの右端の位置が一連の動画の最後の撮像位置である累積走行距離４０ｋｍの位置に対応する。

【0104】

図８において、シークバーＳＢ上の累積走行距離２０ｋｍ－２４ｋｍに対応する位置にスライダーＳＤ３が表示されている。また、図８には、スライダーＳＤ３に対応するサムネイル画像ＳＭ１３－ＳＭ１８が表示されている。図８に示すように、サムネイル画像ＳＭ１３－ＳＭ１８は、０．８ｋｍ毎の等距離間隔で配列されている。

【0105】

例えば、図３では、自動車Ｍの合計走行距離が２０ｋｍである場合に、サムネイル画像間は、０．４ｋｍ毎の等距離間隔で配列されている。これと比較して、図８では、合計走行距離が４０ｋｍである場合に、サムネイル画像間は、０．８ｋｍ毎の等距離間隔で配列されている。つまり、図３及び図８を参照すると、合計走行距離が大きいほど、大きい（長い）距離間隔でサムネイル画像が表示されている。

【0106】

例えば、移動距離保有動画から複数のフレーム画像が抽出される際に、自動車Ｍの合計走行距離が大きいほど、大きい距離間隔で複数のフレーム画像が抽出されてサムネイル画像が生成されてもよい。これによって、合計走行距離が大きくなっても、検索の対象となるサムネイル生成数が増加しないため、検索の際の煩雑さが緩和されてユーザが効率良く所望のサムネイル画像を検索することができる。

【0107】

図９は、本実施例において、移動距離保有動画が生成される際に制御部２９によって実行されるルーチンの一例である移動距離保有動画生成ルーチンＲＴ１を示すフローチャートである。制御部２９は、例えば自動車ＭのエンジンがＯＮになると、移動距離保有動画生成ルーチンＲＴ１を開始する。

【0108】

制御部２９は、移動距離保有動画生成ルーチンＲＴ１を開始すると、カメラ１３による撮影が開始されたか否かを判定する（ステップＳ１１）。ステップＳ１１において、制御部２９は、入力部１９を介して、例えば、カメラ１３の電源がＯＮになったか否かを判定する。

【0109】

制御部２９は、ステップＳ１１において、撮影が開始されていないと判定する（ステップＳ１１：ＮＯ）と、ステップＳ１１を繰り返し、撮影が開始されたか否かを再び判定する。

【0110】

制御部２９は、ステップＳ１１において、撮影が開始されたと判定する（ステップＳ１１：ＹＥＳ）と、移動距離の積算を開始する（ステップＳ１２）。ステップＳ１２において、制御部２９は、入力部１９を介して速度センサ２１又はＧＰＳ受信機２２から取得した情報に基づいて自動車Ｍが走行を開始すると同時に一連の動画の撮影が開始された時点からの累積走行距離の算出を開始する。ステップＳ１２において、制御部２９は、移動距離取得部として機能する。

【0111】

制御部２９は、ステップＳ１２の実行後、カメラ１３が撮影した動画の取得を開始し、当該動画を構成する複数のフレーム画像の各々に、当該フレーム画像の各々が撮影された時点における自動車Ｍの積算走行距離を対応付けることで移動距離保有動画の生成を開始する（ステップＳ１３）。ステップＳ１３において、制御部２９は、移動距離保有動画生成部として機能する。

【0112】

ステップＳ１３において、制御部２９は、例えば図５に示したように、フレーム画像の各々に付されたフレーム番号毎に、自動車Ｍの走行が開始されてからの経過時間及び当該経過時間における積算走行距離を対応付ける。

【0113】

例えば、ステップＳ１３において、制御部２９は、走行距離保有動画の記憶部２７への記憶を開始してもよい。当該記憶の際に、制御部２９は、録画制御部として機能する。

【0114】

制御部２９は、ステップＳ１３の実行後、カメラ１３による撮影が終了されたか否かを判定する（ステップＳ１４）。ステップＳ１４において、制御部２９は、入力部１９を介して、例えば、カメラ１３の電源がＯＦＦになったか否かを判定する。

【0115】

制御部２９は、ステップＳ１４において、撮影が終了されていないと判定する（ステップＳ１４：ＮＯ）と、ステップＳ１４を繰り返し、撮影が終了されたか否かを再び判定する。

【0116】

制御部２９は、ステップＳ１４において、撮影が終了されたと判定する（ステップＳ１４：ＹＥＳ）と、移動距離保有動画の生成を終了する（ステップＳ１５）。

【0117】

制御部２９は、ステップＳ１５の実行後、移動距離の積算を終了する（ステップＳ１６）。制御部２９は、ステップＳ１６の実行後、移動距離保有動画生成ルーチンＲＴ１の最初に戻り、移動距離保有動画生成ルーチンＲＴ１を繰り返し実行する。

【0118】

図１０は、本実施例において、サムネイル画像が生成される際に、制御部２９によって実行されるルーチンの一例であるサムネイル画像生成ルーチンＲＴ２を示すフローチャートである。例えば、制御部２９は、移動距離保有動画生成ルーチンＲＴ１において、移動距離保有動画の生成を開始する（ステップＳ１３）と、サムネイル画像生成ルーチンＲＴ２を開始する。

【0119】

制御部２９は、移動距離保有動画を取得する（ステップＳ２１）。例えば、ステップＳ２１において、制御部２９は、カメラ１３によって撮影された動画及び当該動画を構成するフレーム画像の各々に、自動車Ｍの走行が開始されてからの経過時間と、当該経過時間における積算走行距離と、が対応付けられたデータ（例えば、テーブルＴＢ１）を取得する。例えば、制御部２９は、当該移動距離保有動画を記憶部２７から取得してもよい。

【0120】

制御部２９は、ステップＳ２１の実行後、移動距離保有動画から複数のフレーム画像を抽出する（ステップＳ２２）。ステップＳ２２において、例えば、移動距離保有動画を構成する全てのフレーム画像の中から、各々のフレームの撮像地点が等距離間隔となるように複数のフレーム画像が抽出される。

【0121】

例えば、ステップＳ２２において、等距離間隔で複数のフレーム画像が抽出される際の距離間隔は、自動車Ｍの合計走行距離の大小に関わらず一定の距離間隔であってもよい。また、例えば、ステップＳ２２において、合計走行距離が大きいほど、大きい距離間隔で複数のフレーム画像が抽出されてもよい。

【0122】

制御部２９は、ステップＳ２２実行後、抽出したフレーム画像の各々をサムネイル化してサムネイル画像を生成する（ステップＳ２３）。例えば、制御部２９は、ステップＳ２３において、ステップＳ２２において抽出した複数のフレーム画像の各々を縮小して複数のサムネイル画像を生成する。

【0123】

制御部２９は、ステップＳ２３の実行後、サムネイル画像を累積移動距離順に配列する（ステップＳ２４）。例えば、制御部２９は、ステップＳ２４において、ステップＳ２３において生成された複数のサムネイル画像の各々を、累積移動距離順に配列したサムネイル画像群を生成する。例えば、ステップＳ２３において、複数のサムネイル画像の各々は、フレーム画像に対応付けられた累積移動距離が小さい順に配列される。

【0124】

制御部２９は、ステップＳ２４の実行後、サムネイル画像生成ルーチンＲＴ２の最初に戻り、サムネイル画像生成ルーチンＲＴ２を繰り返し実行する。

【0125】

例えば、サムネイル画像生成ルーチンＲＴ２は、一連の動画の撮影が終了した後に実行されてもよく、一連の動画の撮影と並行してリアルタイムで実行されてもよい。例えば、リアルタイムで実行される場合、最新のフレーム画像は、現時点での合計走行距離となる。

【0126】

以上、説明したように、本発明によれば、移動体からの風景が撮影された動画の再生において、ユーザに提示するためのサムネイル画像を生成することができる。当該サムネイル画像は、動画を構成するフレーム画像が撮影された時点の移動体の累積移動距離に基づいて抽出されてサムネイル化されることで生成される。従って、移動体の移動速度に影響されることがなく、累積移動距離に対応付けられたサムネイル画像が生成される。

【0127】

従って、ユーザは、動画の再生を開始したい箇所を検索する際に、当該動画の撮影が開始された時点から当該動画を構成する複数のフレーム画像の各々が撮影された時点までの移動体の累積移動距離に対応付けられたサムネイル画像を用いて効率良く検索することができ、当該動画の所望の箇所を容易に見つけることが可能となる。従って、本発明によれば、効率の良い検索を可能とし、当該動画の所望の箇所を容易に見つけることを可能にする画像生成装置、画像生成方法、画像生成プログラム及び記録媒体を提供することができる。

【0128】

［変形例］
図１１～図１４を参照しつつ、本実施例の変形例に係る動画再生装置１０について説明する。本変形例の動画再生装置１０は、上記の実施例における画像生成装置１０と同様に構成されている。上述したように、画像生成装置１０は、カメラ１３が撮影した一連の動画の再生、早送り及び早戻しの制御を行う動画再生装置としても機能する。本変形例において、再生、早送り及び早戻しの速度は、一連の動画の撮影の開始から終了までの間の自動車Ｍの合計走行距離に応じた速度となるように制御される。

【0129】

図１１は、本変形例の動画再生装置１０が一連の動画の再生、早送り又は早戻しの制御を行う際に用いられるデータの一例であるテーブルＴＢ２を示す図である。

【0130】

テーブルＴＢ２には、合計走行距離（ｋｍ）毎に、再生速度及び早送り／早戻し速度が記載されている。再生速度及び早送り／早戻し速度は、動画に付されたタイムコードに基づいて定まる基本速度に対する倍率として示されている。

【0131】

図１１に示すように、テーブルＴＢ２において、合計走行距離が０．５ｋｍ、１ｋｍ、５ｋｍの場合はいずれも早送り／早戻し速度が「×１０」（１０倍）である。テーブルＴＢ２において、合計走行距離が１０ｋｍ以上になると、合計走行距離が大きくなるほど早送り／早戻し速度が速くなっている。

【0132】

例えば、テーブルＴＢ２のデータを用いた再生制御において、合計走行距離の閾値を１０ｋｍとして、合計走行距離が閾値以上になると早送り／早戻し速度が速くなるように制御される。

【0133】

このように制御することで、合計走行距離が大きくなることによって録画時間が長くなった場合にも、早送り／早戻しに要する時間が長くなりすぎることを抑制することができる。従って、ユーザは早送り又は早戻しによって所望の動画の部分を検索する際に、再生速度や早送り速度を切替えるといった、煩雑さが軽減されて効率良く検索することができる。

【0134】

また、図１１に示すように、テーブルＴＢ２において、合計走行距離が０．５ｋｍ、１ｋｍ、５ｋｍの場合はいずれも再生速度が「×１．０」（１倍）であり、基準速度である。テーブルＴＢ２において、合計走行距離が１０ｋｍ以上になると、合計走行距離が大きくなるほど再生速度が速くなっている。

【0135】

例えば、テーブルＴＢ２のデータを用いた再生制御において、合計走行距離の閾値を１０ｋｍとして、合計走行距離が閾値以上になると再生速度が速くなるように制御される。

【0136】

このように制御することで、合計走行距離が大きくなっても再生に要する時間が長くなりすぎることを防ぐことができる。従って、ユーザは一連の動画を再生して、ストレスを感じることなく快適に動画を見ることができる。

【0137】

なお、テーブルＴＢ２における再生、早送り／早戻しの上記の倍率は一例に過ぎず、自動車Ｍの走行速度等に応じて適宜設定することができる。例えば、走行するエリアが高速道路の場合と市街地の場合とで異なる倍率としてもよい。また、合計走行距離の閾値は、図１１においては例えば１０ｋｍであるがこれに限られず、例えば１０ｋｍよりも短い距離を閾値としてもよく、例えば１０ｋｍよりも長い距離を閾値としてもよい。合計走行距離の閾値として、任意の閾値を適宜設定することができる。なお、閾値を設けずに、常に合計走行距離に応じた再生、早送り又は早戻しの制御を行うこととしてもよい。

【0138】

図１２は、本実施例の変形例に係る動画再生装置１０のタッチパネル１７に表示される再生操作画像ＰＣの一例を示す図である。

【0139】

図１２は、ユーザの指ＦＮが、ボタン領域ＡＲ１内の早送りボタンＦＦが表示されている領域に接触して早送りボタンＦＦを押している様子を示している。図１２において、再生ボタンＰＬ、早送りボタンＦＦ、及び早戻しボタンＲＷの各々に、一連の動画について再生、早送り及び早戻しの制御が行われる速度が表示されている。

【0140】

具体的には、図１２において、早送りボタンＦＦの近傍に、「×６０」と表示されている。当該表示は、本変形例の動画再生装置１０によって、動画の早送りの制御がされる際に、早送り速度が基本の再生速度の６０倍である６０倍速となるように制御されることを表わしている。

【0141】

また、早戻しボタンＲＷの近傍にも「×６０」と表示されており、早戻しの速度が基本の再生速度の６０倍である６０倍速となるように制御されることを表わしている。

【0142】

さらに、再生ボタンＰＬの近傍に、「×１．５」と表示されている。当該表示は、本変形例の動画再生装置１０による再生速度が基本の再生速度の１．５倍である１．５倍速となるように制御されることを表わしている。

【0143】

本変形例において、動画再生装置１０は、早送りボタンＦＦへの操作を受け付けると、第１ディスプレイ１５に表示されている動画の早送りの制御を行う。図１２に示す例においては、基本速度の６０倍で早送り制御された動画が第１ディスプレイ１５（図２参照）に表示される。

【0144】

図１２に示すように、検索領域ＡＲ２には、シークバーＳＢが表示され、シークバーＳＢ内にスライダーＳＤ４が表示されている。例えば、上述したように、自動車Ｍの走行距離がスライダーＳＤ４の中心であるマーカＭＫに対応する累積走行距離となった地点で撮影された画像が第１ディスプレイ１５に表示されている。

【0145】

例えば、早送りによる動画の進行に合わせてマーカＭＫを中心とするスライダーＳＤ４がシークバーＳＢ上を移動してもよい。また、早送りに伴うスライダーＳＤ４の移動に追従して、スライダーＳＤ４が示すサムネイル表示区間に対応するサムネイル画像が表示されてもよい。なお、本変形例においては、サムネイル画像が表示されていなくともよい。

【0146】

図１３及び図１４は、一連の動画の早送りの制御の際に制御部２９によって実行されるルーチンの一例である早送り制御ルーチンＲＴ３を示すフローチャートである。制御部２９は、例えば、一連の動画の撮影が終了すると、早送り制御ルーチンＲＴ３を開始する。

【0147】

動画取得部としての制御部２９は、早送り制御ルーチンＲＴ３を開始すると、入力部１９を介して、カメラ１３によって撮影された一連の動画を取得する（ステップＳ３１）。

【0148】

制御部２９は、ステップＳ３１の実行後、再生操作画像ＰＣの再生ボタンＰＬが押されたか否かを判定する（ステップＳ３２）。ステップＳ３２において、制御部２９は、操作受付部として機能し、再生ボタンＰＬに接触することによって再生を指示する指示操作を受け付けたか否かを判定する。例えば、制御部２９は、ステップＳ３２において、入力部１９及びタッチパッド１７Ｂを介して、再生の指示操作を受け付けたか否かを判定する。

【0149】

制御部２９は、ステップＳ３２において、再生ボタンが押されていないと判定する（ステップＳ３２：ＮＯ）と、ステップＳ３２を繰り返し、再生ボタンが押されたか否かを再び判定する。

【0150】

制御部２９は、ステップＳ３２において、再生ボタンが押されたと判定する（ステップＳ３２：ＹＥＳ）と、一連の動画の再生を開始する（ステップＳ３３）。例えば、ステップＳ３３において、制御部２９は、一連の動画を再生した映像を第１ディスプレイ１５に出力する。

【0151】

制御部２９は、ステップＳ３３の実行後、再生操作画像ＰＣの早送りボタンＦＦが押されたか否かを判定する（ステップＳ３４）。ステップＳ３４において、制御部２９は、操作受付部として機能し、例えば早送りボタンＦＦに接触することによって早送りを指示する指示操作を受け付けたか否かを判定する。例えば、制御部２９は、ステップＳ３４において、入力部１９及びタッチパッド１７Ｂを介して、早送りの指示操作を受け付けたか否かを判定する。

【0152】

制御部２９は、ステップＳ３４において、早送りボタンＦＦが押されたと判定する（ステップＳ３４：ＹＥＳ）と、一連の動画の撮影が開始された時点から終了した時点までの自動車Ｍの移動距離である合計移動距離（合計走行距離）が閾値以上であるか否かを判定する（ステップＳ３５）。

【0153】

ステップＳ３５において、制御部２９は、例えば図１１に示したテーブルＴＢ２を参照し、例えば合計走行距離が、早送り速度を変更するための閾値以上であるか否かを判定する。

【0154】

制御部２９は、ステップＳ３５において、合計移動距離が閾値以上ではないと判定する（ステップＳ３５：ＮＯ）と、通常の早送り速度で一連の動画の早送りの制御を開始する（ステップＳ３６）。ステップＳ３６において、例えば、基本速度の１０倍の速度で早送りの制御が開始される。

【0155】

制御部２９は、ステップＳ３５において、合計移動距離が閾値以上であると判定する（ステップＳ３５：ＮＯ）と、通常の早送り速度よりも高速で早送りの制御を開始する（ステップＳ３７）。例えば、テーブルＴＢ２を用いて、例えば合計移動距離が３０ｋｍである場合には、通常の早送り速度である基準速度の１０倍よりも高速の、基準速度の６０倍の速度で早送りの制御が開始される。

【0156】

制御部２９は、ステップＳ３６及びステップＳ３７において、合計移動距離に応じた速度で一連の動画の早送りの制御を行う。なお、制御部２９は、早送りの制御と同様に、合計移動距離に応じた速度で一連の動画の早戻しの制御を行うことが可能である。

【0157】

制御部２９は、ステップＳ３６又はステップＳ３７の実行後、早送りボタンがＯＦＦされたか否かを判定する（ステップＳ３８）。ステップＳ３８において、例えば、制御部２９は、再生操作画像ＰＣの早送りボタンＦＦからユーザの指ＦＮが離れた場合に、早送りボタンがＯＦＦされたと判定する。

【0158】

制御部２９は、ステップＳ３８において、早送りボタンがＯＦＦされていないと判定する（ステップＳ３８：ＮＯ）と、早送りの制御を継続しつつステップＳ３８を繰り返し、早送りボタンがＯＦＦされたか否かを再び判定する。

【0159】

制御部２９は、ステップＳ３８において、早送りボタンがＯＦＦされたと判定する（ステップＳ３８：ＹＥＳ）と、一連の動画の早送りの制御を停止する（ステップＳ３９）。ステップＳ３９において、例えば、早送りの制御が停止されると、第１ディスプレイ１５に早送りの状態で表示されていた動画が停止し、静止画が表示されてもよい。また、例えば、早送りの制御が停止されると、第１ディスプレイ１５に早送りの状態で表示されていた動画が、再生の制御がされている状態に戻ってもよい。

【0160】

制御部２９は、ステップＳ３９の実行後、又はステップＳ３４において早送りボタンが押されていないと判定した場合、再生ボタンがＯＦＦになったか否かを判定する（ステップＳ４０）。例えば、ステップＳ４０において、再生操作画像ＰＣ（図１２）の停止ボタンが押された場合に、再生ボタンがＯＦＦになったと判定される。

【0161】

制御部２９は、ステップＳ４０において、再生ボタンがＯＦＦになっていないと判定すると、ステップＳ３４に戻り、早送りボタンが押されたかどうかを再び判定する。

【0162】

制御部２９は、ステップＳ４０において、再生ボタンがＯＦＦになったと判定すると、再生の制御を終了する（ステップＳ４１）。その後、制御部２９は、早送り制御ルーチンＲＴ３を繰り返し実行する。

【0163】

ステップＳ３３～Ｓ４１において、制御部２９は、再生制御部として機能する。

【0164】

なお、ステップＳ３３において再生の制御が開始される際に、合計走行距離に応じた速度で一連の動画が再生されてもよい。例えば、合計走行距離が大きいほど早い速度で再生されてもよい。例えば、図１１のテーブルＴＢ２に示したように、所定の合計走行距離までは基本速度で再生され、所定の合計走行距離以上になると、基本速度よりも速い速度で再生されてもよい。

【0165】

以上、説明したように、本変形例によれば、移動体からの風景が撮影された動画の再生において、ユーザが動画の再生を開始したい箇所を検索する際に、合計走行距離が長くなった場合でも、通常よりも速い速度で早送り及び早戻しの制御が可能である。従って、効率の良い検索を可能とし、当該動画の所望の箇所を容易に見つけることを可能にする動画再生装置、動画再生方法、動画生成プログラム及び記録媒体を提供することができる。

【0166】

なお、上記の実施例及び変形例において、一連の動画の撮影が開始されてから終了するまでの自動車Ｍの移動距離である合計走行距離に応じて、サムネイル画像を生成する際のフレーム画像の抽出態様及び早送り速度を決定する例について説明した。

【0167】

合計走行距離に関して、例えば、撮影された動画全体のうち一部分が再生部分として指定されている場合又は撮影された動画の一部分が再生部分として抽出されたものを再生する場合は、当該再生部分の先頭時点から終了時点までの自動車Ｍの走行距離を合計走行距離として、フレーム画像の抽出態様又は早送り速度を決定してもよい。

【0168】

なお、上記の実施例及び変形例において、画像生成装置１０が移動体に搭載される場合について説明したが、これに限られない。例えば、画像生成装置１０は、ユーザが携帯する端末装置に搭載されていてもよい。

【0169】

動画を取得するカメラが移動体に設けられている例について説明したが、これに限られない。少なくとも動画の取得に移動が伴っていればよい。例えば、画像生成装置１０は、移動するカメラと別の場所に設けられていてもよく、当該カメラによって撮影された動画を取得できればよい。

【0170】

また、第１ディスプレイ１５は、自動車Ｍの窓に設けられている例について説明したが、これに限られない。第１ディスプレイ１５は、再生制御部としての制御部２９によって再生された映像を表示可能に設けられていればよい。

【0171】

また、第１ディスプレイ１５は、透明である場合に限られず、半透明又は不透明であってもよい。

【0172】

なお、第２ディスプレイ１７Ａが第１ディスプレイ１５とは別体として設けられている例について説明したが、これに限られない。例えば、第１ディスプレイ１５の動画表示面１５Ａの一部に、操作用の画像を表示可能な領域を設けて、再生操作画像ＰＣを表示してもよい。

【0173】

上述した実施例及び変形例における構成は例示に過ぎず、用途等に応じて適宜選択及び変更可能である。

【符号の説明】

【0174】

１０ 画像生成装置、動画再生装置
１３ カメラ
１５ 第１ディスプレイ
１７ タッチパネル
１７Ａ 第２ディスプレイ
１７Ｂ タッチパッド
１８ システムバス
１９ 入力部
２１ 速度センサ
２２ ＧＰＳ受信機
２３ 出力部
２４ 速度センサ
２５ 操作入力部
２７ 記憶部
２９ 制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】