特開 2024-130585 映像再生システム、及び映像再生方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024130585

(43)【公開日】2024-09-30

(54)【発明の名称】映像再生システム、及び映像再生方法

(51)【国際特許分類】

   H04N 7/18 20060101AFI20240920BHJP

   H04N 21/438 20110101ALI20240920BHJP

   H04N 21/44 20110101ALI20240920BHJP

   H04N 5/783 20060101ALI20240920BHJP

   H04N 5/93 20060101ALI20240920BHJP

   B60R 11/02 20060101ALI20240920BHJP

【ＦＩ】

H04N7/18 J

H04N7/18 U

H04N7/18 F

H04N21/438

H04N21/44

H04N5/783

H04N5/93

B60R11/02 Z

【審査請求】未請求

【請求項の数】5

【出願形態】ＯＬ

(21)【出願番号】P 2023040412

(22)【出願日】2023-03-15

(71)【出願人】

【識別番号】000005326

【氏名又は名称】本田技研工業株式会社

(74)【代理人】

【識別番号】110001081

【氏名又は名称】弁理士法人クシブチ国際特許事務所

(72)【発明者】

【氏名】酒井 将勝

(72)【発明者】

【氏名】川浦 晃司

【テーマコード（参考）】

3D020

5C054

5C164

【Ｆターム（参考）】

3D020BA20

3D020BE03

5C054CA04

5C054CC02

5C054DA07

5C054FE14

5C054FE18

5C054FE23

5C054FE28

5C054GB02

5C054GB05

5C054GB06

5C054HA26

5C054HA30

5C164FA07

5C164FA16

5C164SA26S

5C164UB04P

5C164UB24P

5C164UB81S

5C164UD44S

(57)【要約】

【課題】移動体が備えるカメラを用いて取得された複数の映像を、移動体内の装置間において、コストの増加を伴うことなく効率的に伝送して、再生し得るようにする。
【解決手段】映像再生システムは、移動体に搭載された複数のカメラを用いて取得される複数の映像を表す映像情報を送信する映像送信部と、映像情報から複数の映像をそれぞれ再生する再生部と、を備える。映像送信部は、複数の映像から順次、映像フレームを１フレームずつ抽出して、抽出したフレームを周期的に時系列に並べた一つの映像情報を生成し、再生部は、上記映像情報から複数の映像のうちの少なくとも一つの映像の映像フレームを抽出し、抽出した映像フレームを時系列に表示装置に表示して、上記少なくとも一つの映像を再生する。
【選択図】図４

【特許請求の範囲】

【請求項1】

移動体に搭載された複数のカメラを用いて取得される複数の映像を表す映像情報を送信する映像送信部と、
前記映像情報から前記複数の映像をそれぞれ再生する再生部と、
を備え、
前記映像送信部は、前記複数の映像から順次、映像フレームを１フレームずつ抽出して、前記抽出したフレームを周期的に時系列に並べた一つの前記映像情報を生成し、
前記再生部は、前記映像情報から前記複数の映像のうちの少なくとも一つの映像の映像フレームを抽出し、前記抽出した映像フレームを時系列に表示装置に表示して、前記少なくとも一つの映像を再生する、
映像再生システム。

【請求項2】

前記再生部は、前記再生した映像の再生速度が、前記複数のカメラにおいて撮影した映像の時間変化の速度を再現するように、前記抽出した各映像フレームを前記表示装置に表示する際の時間間隔を調整する、
請求項１に記載の映像再生システム。

【請求項3】

前記複数の映像のうちのどの映像を表示するかの選択指示を取得する選択部を備え、
前記再生部は、前記複数の映像のうち、前記選択部が取得した選択指示により指定された映像を表示する、
請求項１に記載の映像再生システム。

【請求項4】

前記複数のカメラ及び前記映像送信部は前記移動体に備えられ、
前記再生部は、前記移動体の外部の端末装置に備えられる、
請求項１ないし３のいずれか一項に記載の映像再生システム。

【請求項5】

移動体に搭載された複数のカメラを用いて取得される複数の映像を表す映像情報を送信する送信ステップと、
前記映像情報から前記複数の映像をそれぞれ再生する再生ステップと、
を有し、
前記送信ステップでは、前記複数の映像から順次、映像フレームを１フレームずつ抽出して、前記抽出したフレームを周期的に時系列に並べた一つの前記映像情報を生成し、
前記再生ステップでは、前記映像情報から前記複数の映像のうちの少なくとも一つの映像の映像フレームを抽出し、前記抽出した映像フレームを時系列に表示装置に表示して、前記少なくとも一つの映像を再生する、
映像再生方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、映像再生システム、及び映像再生方法に関する。

【背景技術】

【0002】

近年、交通の安全性をより一層改善して持続可能な輸送システムの発展に貢献する車両の安全性に関する研究開発が行われている。

【0003】

特許文献１には、車両周囲を撮影する車載カメラから第一映像情報を取得し、車両走行における危険領域を示す危険マップに基づいて第一映像情報よりデータ量が低減した第二映像情報を作成して、遠隔監視装置へ送信する映像伝送装置が記載されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０２０－４３５５７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

ところで、車両の安全性向上においては、車両に搭載し得る限られた通信リソースの範囲内で、コストの増加を伴うことなく、複数の車載カメラが捉えた車両周囲の映像（例えば、駐車中の車両へ接近する不審者等の映像）を、車載の制御装置間で効率的に伝送して再生し得るようにすることが課題である。

【0006】

本願は上記課題の解決のため、移動体が備えるカメラを用いて取得された複数の映像を、移動体内の装置間において、コストの増加を伴うことなく、再生し得るように効率的に伝送することを目的としたものである。そして、延いては交通の安全性をより一層改善して持続可能な輸送システムの発展に寄与するものである。

【課題を解決するための手段】

【0007】

本発明の一の態様は、移動体に搭載された複数のカメラを用いて取得される複数の映像を表す映像情報を送信する映像送信部と、前記映像情報から前記複数の映像をそれぞれ再生する再生部と、を備え、前記映像送信部は、前記複数の映像から順次、映像フレームを１フレームずつ抽出して、前記抽出したフレームを周期的に時系列に並べた一つの前記映像情報を生成し、前記再生部は、前記映像情報から前記複数の映像のうちの少なくとも一つの映像の映像フレームを抽出し、前記抽出した映像フレームを時系列に表示装置に表示して、前記少なくとも一つの映像を再生する、映像再生システムである。
本発明の他の態様によると、前記再生部は、前記再生した映像の再生速度が、前記複数のカメラにおいて撮影した映像の時間変化の速度を再現するように、前記抽出した各映像フレームを前記表示装置に表示する際の時間間隔を調整する。
本発明の他の態様によると、前記複数の映像のうちのどの映像を表示するかの選択指示を取得する選択部を備え、前記再生部は、前記複数の映像のうち、前記選択部が取得した選択指示により指定された映像を表示する。
本発明の他の態様によると、前記複数のカメラ及び前記映像送信部は前記移動体に備えられ、前記再生部は、前記移動体の外部の端末装置に備えられる。
本発明の他の態様は、移動体に搭載された複数のカメラを用いて取得される複数の映像を表す映像情報を送信する送信ステップと、前記映像情報から前記複数の映像をそれぞれ再生する再生ステップと、を有し、前記送信ステップでは、前記複数の映像から順次、映像フレームを１フレームずつ抽出して、前記抽出したフレームを周期的に時系列に並べた一つの前記映像情報を生成し、前記再生ステップでは、前記映像情報から前記複数の映像のうちの少なくとも一つの映像の映像フレームを抽出し、前記抽出した映像フレームを時系列に表示装置に表示して、前記少なくとも一つの映像を再生する、映像再生方法である。

【発明の効果】

【0008】

本発明によれば、移動体が備えるカメラを用いて取得された複数の映像を、移動体内の装置間において、コストの増加を伴うことなく、再生し得るように効率的に伝送することができる。

【図面の簡単な説明】

【0009】

【図1】図１は、本発明の一実施形態に係る映像再生システムの構成を示す図である。

【図2】図２は、映像再生システムを構成する、移動体に備えられる映像取得装置の構成を示す図である。

【図3】図３は、映像再生システムを構成する携帯端末の構成を示す図でる。

【図4】図４は、映像取得装置において生成される映像情報の構成を示す図である。

【図5】図５は、携帯端末の再生部における再生動作について説明するための図である。

【図6】図６は、携帯端末に表示される、映像選択のための監視映像画面の例を示す図である。

【図7】図７は、携帯端末に表示される、映像再生が行われている監視映像画面の例を示す図である。

【図8】図８は、映像再生システムの動作の手順を示すフロー図である。

【発明を実施するための形態】

【0010】

［実施形態］
以下、図面を参照して本発明の実施形態について説明する。
図１は、本発明の一実施形態に係る映像再生システム１の構成を示す図である。映像再生システム１は、移動体２に搭載された複数のカメラを用いて取得される複数の映像を、移動体２の外部にいるユーザＵの端末装置８へ送信して再生する。本実施形態では、一例として、上記複数の映像は、上記複数のカメラからの映像に基づいて生成される、移動体２の周囲のそれぞれ異なる方向の４つの映像である。

【0011】

移動体２は、本実施形態では、例えば車両である。ただし、移動体２は、車両に限らず、その移動体が備える複数のカメラからの映像を乗員その他のユーザに提供することが求められ得る任意の移動体であり得る。そのような移動体は、乗用車、バス、タクシー等の陸上移動体のほか、船舶、潜水艇等の海洋移動体、ｅＶＴＯＬ（Ｅｌｅｃｔｒｉｃ Ｖｅｒｔｉｃａｌ Ｔａｋｅ－Ｏｆｆ ａｎｄ Ｌａｎｄｉｎｇ ａｉｒｃｒａｆｔ）を含む航空機、飛行船等の空中移動体、あるいは、宇宙船、人工衛星などの宇宙移動体であってもよい。

【0012】

映像再生システム１は、上記複数のカメラとして、移動体２に備えられた前方左カメラ３ａと、前方右カメラ３ｂと、後方左カメラ３ｃと、後方右カメラ３ｄと、を含む。前方左カメラ３ａ、前方右カメラ３ｂ、後方左カメラ３ｃ、及び後方右カメラ３ｄは、それぞれ、移動体２の車体に配されて、移動体２の前方左側、前方右側、後方左側、及び後方右側の周囲エリアを撮影する。以下、前方左カメラ３ａ、前方右カメラ３ｂ、後方左カメラ３ｃ、及び後方右カメラ３ｄを総称してカメラ３ともいうものとする。

【0013】

映像再生システム１は、また、移動体２に搭載された映像取得装置４と、映像処理装置５と、移動体２のユーザが所有する端末装置８と、を含む。端末装置８は、例えば、スマートホン等の携帯端末である。映像再生システム１は、さらに、さらに、通信ネットワーク６を介して移動体２と通信可能に接続された中継サーバ７を含んでも良い。

【0014】

図２は、移動体２に搭載された映像取得装置４の構成を示す図である。映像取得装置４は、カメラ３を用いて取得される複数の映像を表す映像情報を映像処理装置５へ送信する。映像取得装置４は、例えば、移動体２に備えられたセキュリティ装置１０からセキュリティアラームを受信したときに、カメラ３からの映像の受信を開始し、受信した映像に基づいて取得される映像の映像情報を、通信バス１２を介して映像処理装置５へ送信する。セキュリティ装置１０は、例えば、イモビライザ機能及び又は車体衝撃検知の機能を有し、従来技術に従い、不正な車両キーの使用や車体への衝撃及び又は振動を検知したときに、セキュリティアラームを出力する。

【0015】

映像処理装置５は、コンピュータであるプロセッサとメモリとを備えて、映像取得装置４から送信された映像情報を、移動体２に備えられた無線通信装置１１により、中継サーバ７を介してユーザＵの端末装置８へ送信する。その際、映像処理装置５は、上記映像処理についての映像圧縮等の処理を行ってもよい。

【0016】

映像取得装置４は、第１プロセッサ２０と、第１メモリ２１と、を備える。第１メモリ２１は、例えば、揮発性及び又は不揮発性の半導体メモリにより構成される。第１プロセッサ２０は、例えば、ＣＰＵ等を備えるコンピュータである。第１プロセッサ２０は、プログラムが書き込まれたＲＯＭ、データの一時記憶のためのＲＡＭ等を有する構成であってもよい。そして、第１プロセッサ２０は、機能要素又は機能ユニットとして、監視部２２と、ビュー生成部２３と、映像送信部２４と、を有する。

【0017】

第１プロセッサ２０が備えるこれらの機能要素は、例えば、コンピュータである第１プロセッサ２０が、第１メモリ２１に保存されたプログラムを実行することにより実現される。なお、プログラムは、コンピュータ読み取り可能な任意の記憶媒体に記憶させておくことができる。これに代えて、第１プロセッサ２０が備える上記機能要素の全部又は一部を、それぞれ一つ以上の電子回路部品を含むハードウェアにより構成することもできる。そのようなハードウェアは、例えば、ＳｏＣ（Ｓｙｓｔｅｍ ｏｎ Ｃｈｉｐ）として実現され得る。

【0018】

監視部２２は、移動体２に備えられたセキュリティ装置１０からセキュリティアームを受信したときに、４つのカメラ３からの移動体２周囲の映像の受信を開始する。監視部２２は、例えば、セキュリティアラームを受信してから、所定時間（例えば、１０分）が経過するまでの間、カメラ３から映像を受信する。カメラ３から受信される映像は、ビュー生成部２３に入力される。

【0019】

ビュー生成部２３は、カメラ３から受信される映像から視点変換した映像を生成する。例えば、ビュー生成部２３は、前方左カメラ３ａ及び前方右カメラ３ｂからの映像から、移動体２の前方映像ＶＦを生成し、後方左カメラ３ｃ及び後方右カメラ３ｄからの映像から、移動体２の後方映像ＶＢを生成する。また、ビュー生成部２３は、前方左カメラ３ａ及び後方左カメラ３ｃからの映像から、移動体２の左側方映像ＶＬを生成し、前方右カメラ３ｂ及び後方右カメラ３ｄからの映像から、移動体２の右側方映像ＶＲを生成する。これらの視点変換は、例えば、リアルタイムに行われ得る。
ここで、ビュー生成部２３が生成する前方映像ＶＦ、後方映像ＶＢ、左側方映像ＶＬ、及び右側方映像ＶＲは、本開示における、移動体に搭載された複数のカメラを用いて取得される複数の映像に相当する。

【0020】

映像送信部２４は、移動体２に搭載された複数のカメラ３を用いて取得される複数の映像を表す映像情報を、映像処理装置５へ送信する。本実施形態では、上記複数の映像は、ビュー生成部２３が生成した前方映像ＶＦ、後方映像ＶＢ、左側方映像ＶＬ、及び右側方映像ＶＲである。以下、前方映像ＶＦ、後方映像ＶＢ、左側方映像ＶＬ、及び右側方映像ＶＲを、方向映像ともいうものとする。

【0021】

映像送信部２４は、上記複数の方向映像のそれぞれから、順次、映像フレームを１フレームずつ抽出して、上記抽出したフレームを周期的に時系列に並べて一つの映像情報を生成する。

【0022】

例えば、映像送信部２４には、複数の方向映像の映像フレームの送信順序が予め定められており、映像送信部２４は、上記抽出したフレームを上記送信順序に従って周期的に並べた映像情報を生成する。

【0023】

図４は、映像送信部２４が生成する映像情報の構成を示す図である。図４に示す例では、方向画像の映像フレームの送信順序が、前方映像ＶＦ、右側方映像ＶＲ、後方映像ＶＢ、左側方映像ＶＬの順に定められており、それぞれ１映像フレームである前方映像フレーム、右側方映像フレーム、後方映像フレーム、左側方映像フレームが、この順に周期的に並べられて、映像情報が生成される。

【0024】

詳細には、例えば、前方映像ＶＦ、右側方映像ＶＲ、後方映像ＶＢ、左側方映像ＶＬの、それぞれの最初の映像フレームである前方映像フレーム４１、右側方映像フレーム４２、後方映像フレーム４３、左側方映像フレーム４４がこの順に並べられて、４つの方向映像の映像フレームの最初のセットが構成される。この４方向映像の映像フレームセットは、これに先行するタイムインデックス４０と組み合わされて、タイムインデックス（ＴＩ）＝ｔが示す時刻の映像データを構成する。以下、タイムインデックスをＴＩと略記する。

【0025】

ＴＩ＝ｔに続く、ＴＩ＝ｔ＋１、…、ｔ＋ｎ、…の映像データも同様に構成され、これらの映像データが時系列に並べられて、一つの映像情報として送信される。映像情報には、また、最初の映像データに先行する位置に、ＴＩ＝ｔが示す時刻（すなわち、映像取得が開始された時刻）を示す開始時刻情報ＳＴを含めてもよい。なお、各映像データの前後には、デリミタが挿入されていてもよい。

【0026】

これにより、映像再生システム１では、４つのカメラ３を用いて取得された複数の方向映像は、それらの映像フレームが周期的に並べられた一つの映像情報として、映像取得装置４から映像処理装置５へ送信されるので、映像取得装置４から映像処理装置５への映像送信に必要な通信容量（通信速度）が低減され、通信処理の負荷も軽減される。このため、例えば、映像取得装置４と映像処理装置５を接続する通信バス１２は、ＬＶＤＳ（Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌｉｎｇ）等の通信規格に準拠した安価なシリアル通信バスを用いることができる。その結果、映像再生システム１では、移動体２内の装置間（例えば、映像取得装置４と映像処理装置５との間）において、コストの増加を伴うことなく、複数の方向映像を効率的に伝送することができる。

【0027】

図２を参照し、映像取得装置４は、上記映像情報と共に、監視部２２が取得したセキュリティアラームの情報であるアラーム情報を、映像処理装置５へ送信する。アラーム情報には、セキュリティアラームが発生した旨の情報とその発生時刻の情報が含まれるものとすることができる。これに加えて、アラーム情報には、移動体２が備えるＧＰＳ装置（不図示）により取得される移動体２の現在位置の情報が含まれてもよい。

【0028】

映像取得装置４からアラーム情報及び映像情報を受信した映像処理装置５は、例えば、映像情報についての映像圧縮等の処理を行ったのち、処理後の映像情報とアラーム情報とを、無線通信装置１１により、中継サーバ７へ送信する。

【0029】

中継サーバ７は、コンピュータであるプロセッサとメモリとを備えて、移動体２から送信されたアラーム情報と映像情報とを受信し、受信したアラーム情報と映像情報とを記憶する。また、中継サーバ７は、例えば、従来技術に従い、上記アラーム情報を受信したことに応じて、アラームが発生したことを移動体２のユーザＵの端末装置８に通知する。この通知は、例えば、アラームの発生を通知するテキストを含んだプッシュ通知として端末装置８へ送信され、当該テキストが端末装置８のタッチパネル３２（後述）に表示される。なお、ユーザＵの端末装置８と通信するためのアクセス情報は、中継サーバ７に予め記憶されているものとすることができる。

【0030】

中継サーバ７は、また、ユーザＵの端末装置８から映像情報の送信要求を受信したことに応じて、従来技術に従い、上記アラーム情報と共に記憶した映像情報を端末装置８へ送信する。

【0031】

図３は、端末装置８の構成を示す図である。上述したように、本実施形態では、端末装置８は、例えばスマートフォン等の携帯端末である。
端末装置８は、第２プロセッサ３０と、第２メモリ３１と、タッチパネル３２と、通信装置３３と、を備える。第２メモリ３１は、例えば、揮発性及び又は不揮発性の半導体メモリにより構成される。通信装置３３は、端末装置８が通信ネットワーク６を介して他の装置と通信するための送受信器である。タッチパネル３２は、本開示における表示装置に相当する。

【0032】

第２プロセッサ３０は、例えば、ＣＰＵ等を備えるコンピュータである。第２プロセッサ３０は、プログラムが書き込まれたＲＯＭ、データの一時記憶のためのＲＡＭ等を有する構成であってもよい。そして、第２プロセッサ３０は、機能要素又は機能ユニットとして、再生部３４と、選択部３５と、を有する。

【0033】

第２プロセッサ３０が備えるこれらの機能要素は、例えば、コンピュータである第２プロセッサ３０が、第２メモリ３１に保存されたプログラム３７を実行することにより実現される。なお、プログラム３７は、コンピュータ読み取り可能な任意の記憶媒体に記憶させておくことができる。あるいは、プログラム３７は、通信ネットワーク６に接続されたサーバ装置（不図示）からダウンロードされるものとすることができる。

【0034】

プログラム３７は、例えば、映像情報を再生するためのアプリケーションプログラムである。以下、プログラム３７が実行されることにより起動されるアプリケーションを映像再生アプリと称する。端末装置８は、従来技術に従い、映像再生アプリの起動アイコンをタッチパネル３２に表示し、対応する起動アイコンが操作されたときに、プログラム３７を実行して、映像再生アプリの機能を実行するための再生部３４と選択部３５とを、第２プロセッサ３０内で実現（又は実体化）する。

【0035】

端末装置８は、従来技術に従い、中継サーバ７からプッシュ通知として送信された上述のアラーム発生を通知するテキストを受信して、タッチパネル３２に表示する。上記プッシュ通知としてタッチパネル３２に表示されたアラーム発生を示すテキスト通知を見たユーザＵは、タッチパネル３２に表示されている上述の映像再生アプリの起動アイコンを操作することによりプログラム３７を起動する。

【0036】

再生部３４は、映像取得装置４の映像送信部２４が生成した映像情報から、上述した移動体２周囲の映像である４つの方向映像をそれぞれ再生する。
選択部３５は、複数の方向映像のうちどの方向映像を表示するかの選択指示を取得する。

【0037】

具体的には、再生部３４は、まず、中継サーバ７へ映像情報の送信要求を送信し、中継サーバ７から最新の映像情報を取得して第２メモリ３１に記憶する。その際、再生部３４は、中継サーバ７から受信した映像情報が映像圧縮されたものであるときは、映像伸張の処理を行う。

【0038】

本実施形態では、特に、再生部３４は、映像情報から、複数の方向映像のうちの少なくとも一つの方向映像の時系列の映像フレームを抽出する。例えば、上記少なくとも一つの方向映像は、選択部３５が取得した選択指示により指定された方向映像である。そして、再生部３４は、上記抽出した一つの方向映像の時系列の複数の映像フレームを、タッチパネル３２において、順次、時系列に切り替えて表示して、上記少なくとも一つの方向映像を動画像として再生する。

【0039】

その際、再生部３４は、動画像として再生した上記方向映像の再生速度が、複数のカメラ３において撮影した映像の時間変化の速度を再現するように、上記抽出した各映像フレームをタッチパネル３２に表示する際の時間間隔を調整する。

【0040】

図５は、再生部３４における再生動作について説明するための図である。図示の例は、映像情報から前方映像ＶＦを再生する動作が示されている。例えば、再生部３４には、映像取得装置４の映像送信部２４に設定されている映像フレームの送信順序の情報が予め与えられている。再生部３４は、上記送信順序の情報に基づいて、映像情報の映像データ毎に、ＴＩの後に最初（１番目）に送信される前方映像ＶＦの映像フレームを順次抽出する。そして、再生部３４は、抽出した映像フレーム（図５に示すＶＦ（ｔ）、ＶＦ（ｔ＋１）、…、ＶＦ（ｔ＋ｎ）…）を、タッチパネル３２に時系列に、順次、切り替えて表示することで、前方映像ＶＦをタッチパネル３２に動画像として表示する。

【0041】

再生部３４は、選択部３５が取得した選択指示により指定された方向映像を、上記のように再生して、タッチパネル３２に表示する。選択部３５は、ユーザＵからの上記選択指示をタッチパネル３２を介して取得するものとすることができる。

【0042】

ユーザＵが上記選択指示をタッチパネル３２に入力する際に、再生部３４は、４つの方向映像のそれぞれの静止画像のサムネイルを、タッチパネル３２に表示するものとすることができる。サムネイルに用いる静止画像は、映像送信部２４が生成した映像情報のうちの、最初のタイムインデックス（ＴＩ＝ｔ）の映像データから生成されるものとすることができる。なお、サムネイルに用いる静止画像は、中継サーバ７において生成されるものとしてもよい。

【0043】

図６及び図７は、映像再生アプリの実行時に第２プロセッサ３０によりタッチパネル３２に表示される監視映像画面の一例を示す図である。図６は、複数の方向映像のうちどの方向映像を表示するかの選択指示をユーザＵから取得する際の画面である。また、図７は、図６の画面において取得された選択指示に従って、４つの方向映像のうちの１の方向映像を拡大表示した際の画面である。

【0044】

図６において、監視映像画面は、サムネイル表示５０と、選択操作部５１と、サムネイル表示ボタン５２と、終了ボタン５３と、を含む。また、監視映像画面には、日時表示５４と位置表示５５も表示されている。日時表示５４及び位置表示５５は、中継サーバ７から端末装置８へ映像情報と共に送信されたアラーム情報である。すなわち、日時表示５４及び位置表示５５は、それぞれ、この監視映像画面に表示されている方向映像の取得原因となったセキュリティアラームの発生日時及び発生場所を示している。

【0045】

サムネイル表示５０には、４つの方向映像のそれぞれの静止画像のサムネイルが表示されている。これらのサムネイルは、上述したように、再生部３４又は中継サーバ７において作成され得る。

【0046】

選択操作部５１には、移動体２の車体を模した図示点線の車体表示６０を中心として、前方映像ＶＦの指定に用いられる前方映像ボタン６１ａと、右側方映像ＶＲの指定に用いられる右側方映像ボタン６１ｂと、後方映像ＶＢの指定に用いられる後方映像ボタン６１ｃと、左側方映像ＶＬの指定に用いられる左側方映像ボタン６１ｄと、が表示されている。以下、前方映像ボタン６１ａ、右側方映像ボタン６１ｂ、後方映像ボタン６１ｃと、及び左側方映像ボタン６１ｄを総称して映像選択ボタン６１ともいうものとする。

【0047】

サムネイル表示ボタン５２は、サムネイル表示５０をタッチパネル３２に表示させるボタンである。サムネイル表示ボタン５２は、例えば、図７に示すようなサムネイル表示５０が表示されていない画面において、サムネイル表示５０を表示させるのに用いられる。図６に示す画面では、既にサムネイル表示５０が表示されているので、サムネイル表示ボタン５２は、無効状態を示すグレイアウト表示（図６では、ハッチングで表示）となっている。
終了ボタン５３は、この映像再生アプリを終了するのに用いられる。

【0048】

図６に示す画面において、ユーザＵは、サムネイル表示５０から、拡大して表示させたい一の方向映像を決定し、決定した方向映像に対応する映像選択ボタン６１にタッチすることにより、選択指示を入力することができる。入力された選択指示は、選択部３５により取得される。これにより、再生部３４は、選択部３５が取得した選択指示に従い、当該選択指示により指示された方向映像を、図５を参照して上述した動作により再生して、タッチパネルに表示する。

【0049】

図７は、ユーザＵからの選択指示に従って再生部３４により再生された方向映像を表示する監視映像画面の一例を示す図である。図７において、図６に示す監視映像画面と同じ構成要素については、図６における符号と同じ符号を用いて示すものとし、上述した図６についての説明を援用する。

【0050】

図７の例では、ユーザＵは、前方映像ボタン６１ａにタッチすることにより前方映像の表示を選択している。タッチされた前方映像ボタン６１ａは、例えば、グレイアウト表示（図７ではハッチング表示）となる。そして、図６においてサムネイル表示５０が表示されていた位置に、方向映像表示５６が表示される。方向映像表示５６には、映像選択ボタン６１により選択された方向映像が拡大して表示される。図７の例では、方向映像表示５６には、前方映像ボタン６１ａにより選択された前方映像ＶＦが表示されている。

【0051】

また、図７に示す画面では、サムネイル表示ボタン５２は、グレイアウト表示ではなく通常表示となっている。ユーザＵは、図７の画面においてサムネイル表示ボタン５２にタッチすることにより、タッチパネル３２の画面を図６の画面に戻すことができる。

【0052】

次に、映像再生システム１における動作の手順について説明する。図８は、映像再生システム１のコンピュータである映像取得装置４の第１プロセッサ２０及び端末装置８の第２プロセッサ３０が協働して実行する映像再生方法の手順を示すフロー図である。図８に示す処理は、繰り返し実行される。

【0053】

処理を開始すると、まず、映像取得装置４の監視部２２は、セキュリティ装置１０からセキュリティアラームを受信したか否かを判断する（Ｓ１００）。そして、監視部２２は、セキュリティアラームを受信しないときは（Ｓ１００、ＮＯ）、ステップＳ１００に戻って処理を繰り返し、セキュリティアラームを受信するのを待機する。

【0054】

一方、セキュリティアラームを受信したときは（Ｓ１００、ＹＥＳ）、第１プロセッサ２０は、監視部２２及びビュー生成部２３により、移動体２の前方、右側方、後方、左側方の４つの方向映像を取得する（Ｓ１０２）。具体的には、監視部２２は、移動体２に備えられた４つのカメラ３により、移動体２の周囲の映像を、所定時間（例えば、１０分）の間、取得する。そして、ビュー生成部２３は、上記取得された４つのカメラ３からの映像についての視点変換処理を行って、前方映像ＶＦ、右側方映像ＶＲ、後方映像ＶＢ、及び左側方映像ＶＬの、４つの方向映像を生成する。

【0055】

次に、映像送信部２４は、上記取得された方向映像から、一つの映像情報を生成する（Ｓ１０４）。具体的には、図４を参照して上述したように、映像送信部２４は、上記複数の方向映像から順次、映像フレームを１フレームずつ抽出して、上記抽出したフレームを周期的に時系列に並べて一つの映像情報を生成する。

【0056】

映像送信部２４は、上記生成した映像情報を、映像処理装置５および中継サーバ７を介して端末装置８へ送信し（Ｓ１０６）、端末装置８は、上記映像情報を受信する（Ｓ１０８）。上述したように、端末装置８における映像情報の受信は、例えば、ユーザＵが端末装置８において映像再生アプリを起動したときに、再生部３４により行われる。

【0057】

続いて、端末装置８の選択部３５は、端末装置８のタッチパネル３２を介してユーザＵから入力される、複数の方向映像のうちどの方向映像を表示するかの選択指示を取得する（Ｓ１１０）。具体的には、ユーザＵは、例えば、端末装置８のタッチパネル３２に表示される図６に示したような監視映像画面において、いずれかの映像選択ボタン６１にタッチすることにより、上記選択指示を入力する。

【0058】

再生部３４は、選択部３５が選択指示を取得したことに応じて、上記取得された選択指示により指定された方向映像を再生する（Ｓ１１２）。上述したように、再生部３４は、映像情報から上記指定された方向映像の映像フレームを抽出する。そして、再生部３４は、上記抽出した映像フレームを、タッチパネル３２において、順次、時系列に切り替えて表示することで、上記指定された方向映像を動画像として再生する。この動画像は、例えば、図７に示す監視映像画面において、方向映像表示５６において表示される。

【0059】

続いて、選択部３５は、図７に示す監視映像画面においてサムネイル表示ボタン５２が押された否かを判断する（Ｓ１１４）。そして、サムネイル表示ボタン５２が押されたときは（Ｓ１１４、ＹＥＳ）、選択部３５は、ステップＳ１１０に戻って処理を繰り返す。

【0060】

一方、サムネイル表示ボタン５２が押されないときは（Ｓ１１４、ＮＯ）、再生部３４は、図７に示す監視映像画面において終了ボタン５３が押された否かを判断する（Ｓ１１６）。そして、終了ボタンが押されないときは（Ｓ１１６、ＮＯ）、再生部３４は、ステップＳ１１２に戻って処理を繰り返す。一方、終了ボタンが押されたときは（Ｓ１１６、ＹＥＳ）、再生部３４は、本処理を終了する。

【0061】

ここで、図８において、ステップＳ１０２、Ｓ１０４、及びＳ１０６は、本開示における送信ステップに相当する。また、図８のステップＳ１１２は、本開示における再生ステップに相当する。

【0062】

［他の実施形態］
上述した実施形態では、ビュー生成部２３が４つのカメラ３からの４つの映像の視点変換処理を行って生成した４つの方向映像を、４つのカメラ３を用いて取得される複数の映像であるものとした。これに代えて、監視部２２により受信される４つのカメラ３からの映像を、そのまま、４つのカメラ３を用いて取得される複数の映像であるものとしてもよい。すなわち、映像取得装置４の映像送信部２４は、監視部２２により受信される４つのカメラ３からの映像を表す映像情報を生成してもよい。

【0063】

また、上述した実施形態では、映像情報として送信される方向映像の数は４つであるものとしたが、映像情報として送信される方向映像の数は２つ以上の任意の数であるものとすることができる。

【0064】

また、上述した実施形態では、映像取得装置４は、映像処理装置５を介して、無線通信装置１１により映像情報を移動体２の外部へ送信するものとした。これに代えて、映像取得装置４は、映像情報を無線通信装置１１に直接送信して、その映像情報を無線通信装置１１から移動体２の外部へ送信するものとしてもよい。この場合でも、映像取得装置４から無線通信装置１１への映像送信に必要な通信容量（通信速度）が低減されるので、移動体２内において、コストの増加を伴うことなく複数の方向映像を効率的に伝送することができる。

【0065】

また、上述した実施形態では、端末装置８の再生部３４は、図５に示すように、映像情報から、一の特定の方向映像（図５の例では、前方映像ＶＦ）の映像フレームを、タイムインデックス毎にすべての映像データから取得するものとした。これに代えて、再生部３４は、第２プロセッサ３０における処理の負荷状況に応じて、いくつかのタイムインデックスの映像データについては、映像フレームの抽出を行わないものとすることができる。例えば、再生部３４は、タイムインデックスｔ＋１、ｔ＋３、ｔ＋４の映像データを読み飛ばして、タイムインデックスｔ、ｔ＋２、ｔ＋４、・・・の映像データから映像フレームを抽出して、映像を再生してもよい。

【0066】

なお、本発明は上記の実施形態の構成に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能である。

【0067】

［上記実施形態によりサポートされる構成］
上述した実施形態は、以下の構成をサポートする。

【0068】

（構成１）移動体に搭載された複数のカメラを用いて取得される複数の映像を表す映像情報を送信する映像送信部と、前記映像情報から前記複数の映像をそれぞれ再生する再生部と、を備え、前記映像送信部は、前記複数の映像から順次、映像フレームを１フレームずつ抽出して、前記抽出したフレームを周期的に時系列に並べた一つの前記映像情報を生成し、前記再生部は、前記映像情報から前記複数の映像のうちの少なくとも一つの映像の映像フレームを抽出し、前記抽出した映像フレームを時系列に表示装置に表示して、前記少なくとも一つの映像を再生する、映像再生システム。
構成１の映像再生システムによれば、複数の映像から順次抽出された映像フレームが周期的に時系列に並べられて一つの映像情報として送信されるので、それら複数の映像を移動体内の装置間において、コストの増加を伴うことなく効率的に伝送して再生し得るようにすることができる。

【0069】

（構成２）前記再生部は、前記再生した映像の再生速度が、前記複数のカメラにおいて撮影した映像の時間変化の速度を再現するように、前記抽出した各映像フレームを前記表示装置に表示する際の時間間隔を調整する、構成１に記載の映像再生システム。
構成２の映像再生システムによれば、一つの映像情報として送信された複数の映像の映像フレームを、映像毎に抽出して、もとの映像と同じ速度で再生することができる。

【0070】

（構成３）前記複数の映像のうちのどの映像を表示するかの選択指示を取得する選択部を備え、前記再生部は、前記複数の映像のうち、前記選択部が取得した選択指示により指定された映像を表示する、構成１又は２に記載の映像再生システム。
構成３の映像再生システムによれば、ユーザは、映像情報に含まれる一の映像を指定して、映像再生システムにその映像を再生させることができる。

【0071】

（構成４）前記複数のカメラ及び前記映像送信部は前記移動体に備えられ、前記再生部は、前記移動体の外部の端末装置に備えられる、構成１ないし３のいずれかに記載の映像再生システム。
構成４の映像再生システムによれば、移動体において取得された複数の映像を、移動体内において効率的に伝送しつつ、ユーザの端末装置において再生することができる。

【0072】

（構成５）移動体に搭載された複数のカメラを用いて取得される複数の映像を表す映像情報を送信する送信ステップと、前記映像情報から前記複数の映像をそれぞれ再生する再生ステップと、を有し、前記送信ステップでは、前記複数の映像から順次、映像フレームを１フレームずつ抽出して、前記抽出したフレームを周期的に時系列に並べた一つの前記映像情報を生成し、前記再生ステップでは、前記映像情報から前記複数の映像のうちの少なくとも一つの映像の映像フレームを抽出し、前記抽出した映像フレームを時系列に表示装置に表示して、前記少なくとも一つの映像を再生する、映像再生方法。
構成５の映像再生方法によれば、複数の映像から順次抽出された映像フレームが周期的に時系列に並べられて一つの映像情報として送信されるので、それら複数の映像を移動体内の装置間において、コストの増加を伴うことなく効率的に伝送して再生し得るようにすることができる。

【符号の説明】

【0073】

１…映像再生システム、２…移動体、３…カメラ、３ａ…前方左カメラ、３ｂ…前方右カメラ、３ｃ…後方左カメラ、３ｄ…後方右カメラ、４…映像取得装置、５…映像処理装置、６…通信ネットワーク、７…中継サーバ、８…端末装置、１０…セキュリティ装置、１１…無線通信装置、１２…通信バス、２０…第１プロセッサ、２１…第１メモリ、２２…監視部、２３…ビュー生成部、２４…映像送信部、３０…第２プロセッサ、３１…第２メモリ、３２…タッチパネル、３３…通信装置、３４…再生部、３５…選択部、５０…サムネイル表示、５１…選択操作部、５２…サムネイル表示ボタン、５３…終了ボタン、５４…日時表示、５５…位置表示、５６…方向映像表示、６０…車体表示、６１…映像選択ボタン、６１ａ…前方映像ボタン、６１ｂ…右側方映像ボタン、６１ｃ…後方映像ボタン、６１ｄ…左側方映像ボタン６１ｄ、Ｕ…ユーザ。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】