特許 6899596 表示制御システム、表示制御方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6899596

(24)【登録日】2021年6月17日

(45)【発行日】2021年7月7日

(54)【発明の名称】表示制御システム、表示制御方法及びプログラム

(51)【国際特許分類】

   H04N 5/91 20060101AFI20210628BHJP

   H04N 5/77 20060101ALI20210628BHJP

   G08G 1/00 20060101ALI20210628BHJP

   G07C 5/00 20060101ALI20210628BHJP

【ＦＩ】

   H04N5/91

   H04N5/77 200

   G08G1/00 D

   G07C5/00 Z

【請求項の数】6

【全頁数】29

(21)【出願番号】特願2019-127284(P2019-127284)

(22)【出願日】2019年7月9日

(62)【分割の表示】特願2018-8523(P2018-8523)の分割

【原出願日】2012年5月8日

(65)【公開番号】特開2020-10336(P2020-10336A)

(43)【公開日】2020年1月16日

【審査請求日】2019年8月6日

(73)【特許権者】

【識別番号】391001848

【氏名又は名称】株式会社ユピテル

(72)【発明者】

【氏名】服部 哲也

【審査官】 松元 伸次

(56)【参考文献】

【文献】 特開２０１０−１８２２１４（ＪＰ，Ａ）

【文献】 特開２００９−０８９０２２（ＪＰ，Ａ）

【文献】 特開２０１０−２５７４８３（ＪＰ，Ａ）

【文献】 特開２０１１−１４６８６０（ＪＰ，Ａ）

【文献】 特開２００９−０３２１４３（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｂ６０Ｒ１／００−１／０４

１／０８−１／１２

Ｇ０７Ｃ１／００−１５／００

Ｇ０８Ｇ１／００−９９／００

Ｈ０４Ｎ５／７６−５／７７５

５／８０−５／９５６

７／１８

(57)【特許請求の範囲】

【請求項1】

車両に搭載されたドライブレコーダによって記録された映像に関連するサムネイル画像を表示する制御を行う表示制御システムであって、
前記映像における互いに異なる時点に対応する複数のサムネイル画像であって、前記ドライブレコーダによって記録された前記車両の運転者の急ハンドルに関するデータに基づいて選択した複数のサムネイル画像を一覧表示する機能
を備える表示制御システム。

【請求項2】

前記複数のサムネイル画像は、前記急ハンドルが開始された時刻の画像を含む
請求項１に記載の表示制御システム。

【請求項3】

前記複数のサムネイル画像は、前記急ハンドルが終了した時刻の画像を含む
請求項１または２に記載の表示制御システム。

【請求項4】

前記複数のサムネイル画像は、前記急ハンドルが終了したときの画像とともに、
加速度が極大値になったときの画像を表示させること
を特徴とする請求項１から３のいずれかに記載の表示制御システム。

【請求項5】

前記複数のサムネイル画像として、前記急ハンドルが終了したときの画像とともに、
加速度が極小値になったときの画像を表示させること
を特徴とする請求項１から４のいずれかに記載の表示制御システム。

【請求項6】

請求項１から５のいずれか１項に記載の表示制御システムの機能をコンピュータに実現させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、車両に搭載されたドライブレコーダによって記録されたイベント単位映像に関連するサムネイル画像を表示する制御を行う表示制御システム、表示制御方法及びプログラムに関する。

【背景技術】

【0002】

従来、車両に設置したカメラにより車両周辺の映像を撮影し、急ブレーキ、急ハンドルや衝突などのイベント（事象）により車両に衝撃が加わった際に周辺映像や車両速度などを記録する車載用映像等記録装置、いわゆるドライブレコーダが一般に普及している。このようなドライブレコーダを車両に備えることにより、事故が発生した場合には記録した情報を解析することにより、事故原因を検証することが可能となっている。また、運転手の安全運転意識の向上が図れるとともに、日頃の運転状況を記録した映像を安全運転指導など役立てることができる。

【0003】

特許文献１及び２には、トラックやタクシー等の業務用車両に搭載されたドライブレコーダによって記録されたカメラ画像や車速、ＧＰＳ（Global Positioning System）位置情報などの運転情報を回収し、運行管理者等が、運転情報の内容をチェックして各乗務員の運転の仕方等を分析し、乗務員の運転教育に活用する運転支援装置が開示されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１０−２５７４８３号公報

【特許文献2】特開２０１０−２５７４８４号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

上記の運転支援装置において、運行管理者等が、急ブレーキ、急ハンドルや衝突などの事象（イベント）ごとに記録された多数の運転情報（以下、イベント単位映像と記す）の中から、急ブレーキ等の特定事象のイベント単位映像に絞り込み、選択するには、例えば、各イベント単位映像に記録された加速度の大きさ・波形などの関連データを利用して行うことになる。すなわち、この関連データを、特定事象のイベント単位映像の絞り込みのためのタグとして認識して、イベント単位映像を分類して絞り込みを行うことになる。しかしながら、最終的に求める事象のイベント単位映像を特定するには、運行管理者等がひとつひとつのイベント単位映像に含まれるカメラ画像の内容を逐一順番に視て確認し、イベント単位映像を特定しなければならない。

【0006】

また、上記の特許文献１及び２に開示された運転支援装置では、1つのイベント単位映像に含まれる複数のカメラ画像のうち、トリガ（例えば、ドライブレコーダによる記録条件が成立したことを示すタイミング信号）が検出された時点に記録されたカメラ画像を縮小化したサムネイル画像を表示しているが、このサムネイル画像は、例えば、急ブレーキや急ハンドル等の事象が発生した時点よりも後のトリガ検出時点に記録されたカメラ画像であるため、このサムネイル画像から、求める事象のイベント単位映像を見つけることは難しい。

【0007】

本発明は、上記例示した事情等に鑑みてなされたものであり、求めるイベント単位映像を、サムネイル画像から簡単に見つけることが可能な表示制御システム、表示制御方法及びプログラムを提供することを目的とするものである。

【課題を解決するための手段】

【0008】

第１の観点では、本発明は、車両に搭載されたドライブレコーダによって記録されたイベント単位映像に関連するサムネイル画像を表示する制御を行う表示制御システムであって、前記イベント単位映像の範囲の中の異なる時点に対応する複数のサムネイル画像を表示する表示制御手段を備えることを特徴とする表示制御システムを提供する。

【0009】

上記第１の観点による表示制御システムでは、イベント単位映像の範囲の中の異なる時点に対応する複数のサムネイル画像から当該イベント単位映像の内容を確認できるようになる。これにより、１つのサムネイル画像から当該イベント単位映像の内容を確認する場合に比して、求めるイベント単位映像をサムネイル画像から簡単に見つけることができる。

【0010】

イベントは、例えば、所定のルールで特定される事象とするとよい。イベント単位は、例えば、あるイベントと他のイベントを区別して管理できる単位の時間的範囲とするとよい。例えば、第２の観点の構成のようにイベントの発生時点の前後の所定期間とするとよい。例えば、あるイベント単位と他のイベント単位は、重ならないようにその時間的範囲をそれぞれ設定してもよいし、例えば、一部が重なりあうように設定してもよい。
イベント単位映像は、例えば、あるイベントと他のイベントを区別して管理可能とする単位の時間的範囲の映像とするとよい。イベント単位映像は、例えば、イベント単位に別々の映像として記録してもよいし、例えば、一つの映像の中のある範囲をイベント単位映像としてもよい。すなわち、「車両に搭載されたドライブレコーダによって記録されたイベント単位映像」は、必ずしもイベント単位に映像を記録することを要しない。

【0011】

一つの映像の中のある範囲をイベント単位映像とする場合、例えば、複数のイベント単位映像の範囲はそれぞれ範囲の重なりを許容するように設定してもよいし、重なり合わない範囲に各イベント単位映像の範囲を設定するようにしてもよい。イベント単位映像は、例えば、映像の中で、イベントに関連している可能性がある範囲とするとよい。
また、「イベント単位映像の範囲の中の異なる時点に対応する複数のサムネイル画像」は、例えば、「イベント単位映像の範囲の中の異なる時点におけるイベント単位映像以外の映像に対応する複数のサムネイル画像」としてもよいが、「イベント単位映像の範囲の中の異なる時点におけるイベント単位映像に対応する複数のサムネイル画像」とするとよい。「イベント単位映像に対応する複数のサムネイル画像」の「に対応する」の具体例としては、「を代表する」とするとよい。その他、「から作成された」、「を画像処理した」、「を画像処理して作成された」、「所定の画像処理を施して作成された」などとするとよい。

【0012】

第２の観点では、本発明は、前記第１の観点による表示制御システムにおいて、前記イベント単位映像は、イベントの発生時点の前後の所定期間に亘る映像であり、前記サムネイル画像として、前記イベントの発生時点よりも前あるいは後のいずれか、または両方の時点に記録された画像を備えることを特徴とする。

【0013】

上記第２の観点による表示制御システムでは、イベントの発生時点よりも前あるいは後のいずれか、または両方の時点に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、イベントの発生時点の前後の時点の事象に関連するイベント単位映像をより簡単に見つけることができる。

【0014】

イベントの発生時点は、例えば、所定の条件を満たした時点とするとよい。イベントの発生時点は、例えば、イベントを代表する所定の条件を満たした時点とするとよい。例えば、所定の条件を満たした時点をイベントの発生時点としてそのイベントの種類に応じてイベント単位映像の範囲を決定するようにしてもよい。イベントとしては、例えば、事故の発生に相当する事象が発生されている時点とするとよい。例えば、衝突に相当する急減速の発生箇所をイベントの発生時点とするとよい。

【0015】

ドライブレコーダには、例えば、「記録条件が成立したことを示すトリガ」の前後の映像を記録するタイプや、映像は常時（例えば、エンジンオンからオフまで常時）記録しておき、トリガがかかった映像の位置を特定可能とするための情報を記憶するタイプがある。この「特定可能とするための情報」は、例えば、トリガがかかった時刻情報などである。例えば、映像の記録開始時刻情報と、このトリガがかかった時刻情報とから、どの映像のどの位置がトリガのかかった位置かを特定する。

【0016】

上記した前者のタイプのドライブレコーダであれば、「イベント単位映像」は、例えば、ドライブレコーダによる記録条件が成立したことを示すトリガの発生時点の前後の所定期間に亘って記録された映像とするとよい。
また、上記した後者のタイプのドライブレコーダであれば、「イベント単位映像」は、例えば、記録単位（上記の例なら、エンジンオンからオフまでが１単位）となる映像の中で、トリガの発生時点の前後の所定期間に亘って記録された部分の映像とするとよい。

【0017】

所定期間は、例えば、記録された映像の全範囲（例えば、エンジンオンからオフまでの全体）としてもよいが、映像の中のある限定された時間の範囲とすると特によい。映像の中の限定された時間の範囲としては、特に、イベントの発生時点を含む時間の範囲とするとよい。なお、映像の中の限定された時間の範囲としては、例えば一定時間の範囲としてもよいが可変時間としてもよい。また、所定期間を構成するイベントの発生時点の前の期間とイベントの発生時点の後の期間とは同一の時間の期間としてもよいが、異なる時間の期間とするとよい。特に、所定期間は、イベントの発生の原因を特定可能とするのに十分な期間とするとよい。特にイベントの種類に応じて所定期間は異なる範囲とするとよい。

【0018】

第３の観点では、本発明は、前記第２の観点による表示制御システムにおいて、前記サムネイル画像として、前記所定期間内において当該イベントの発生時点ではない時点であって、前記イベントが発生したと判定するのに用いた情報を用いた所定のルールによって決定された時点に記録された画像を備えることを特徴とする。

【0019】

上記第３の観点による表示制御システムでは、所定期間内において当該イベントの発生時点ではない時点であって、イベントが発生したと判定するのに用いた情報（例えば、車両に加わる加速度）を用いた所定のルールによって決定された時点（例えば、加速度が所定値を超えた時点）に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、上記の所定のルールによって決定された時点の事象に関連するイベント単位映像を簡単に見つけることができる。

【0020】

第４の観点では、本発明は、前記第２または前記第３の観点による表示制御システムにおいて、前記サムネイル画像として、前記所定期間内であって、前記イベントが発生したと判定するのに用いた情報と異なる情報を用いた所定のルールによって決定された時点に記録された画像を備えることを特徴とする。

【0021】

上記第４の観点による表示制御システムでは、所定期間内であって、イベントが発生したと判定するのに用いた情報（例えば、急ハンドルによる車両の左右方向の加速度）と異なる情報（例えば、急ブレーキによる車両の前後方向の加速度）を用いた所定のルールによって決定された時点（例えば、車両の前後方向の加速度の所定期間内における極大値の時点）に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、上記の所定のルールによって決定された時点の事象に関連するイベント単位映像を簡単に見つけることができる。

【0022】

第５の観点では、本発明は、前記第３または前記第４の観点による表示制御システムにおいて、前記所定のルールは、前記イベントの発生の原因となったサブイベントの発生時点を推定するルールであることを特徴とする。

【0023】

上記第５の観点による表示制御システムでは、イベントの発生の原因となったサブイベントの発生時点を推定するルールによって決定された時点の事象に関連するイベント単位映像を簡単に見つけることができる。
所定のルールは、イベントが発生したと判定した時点からさかのぼって当該イベントの発生に関連する特徴点を推定するルールであり、例えば、車両の加速度の所定期間内における極大点あるいは変曲点、その他の加速度の特徴点とするとよい。また、イベントの種類に応じて異なるルールとするとよい。
所定期間としては、イベントの発生原因となるサブイベントの発生可能性が低いとみなされるのに十分な時間をもって設定されるとよい。

【0024】

第６の観点では、本発明は、前記第２〜前記第５のいずれかの観点による表示制御システムにおいて、前記イベントの発生時点よりも前あるいは後のいずれか、または両方の時点は、前記イベントの種類によって異なる時点としたことを特徴とする。

【0025】

上記第６の観点による表示制御システムでは、イベントの発生時点よりも前あるいは後のいずれか、または両方の時点として、イベントの種類によって異なる時点に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、イベントの種類によって異なる時点の事象に関連するイベント単位映像を簡単に見つけることができる。

【0026】

第７の観点では、本発明は、前記第２〜前記第６のいずれかの観点による表示制御システムにおいて、前記サムネイル画像として、前記イベントの発生時点の直前あるいは直後のいずれか、または両方の時点に記録された画像を備えることを特徴とする。

【0027】

上記第７の観点による表示制御システムでは、イベントの発生時点の直前あるいは直後のいずれか、または両方の時点に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、イベントの発生時点の直前・直後の時点の事象に関連するイベント単位映像を、より簡単に、かつ的確に見つけることができる。

【0028】

第８の観点では、本発明は、前記第２〜前記第７のいずれかの観点による表示制御システムにおいて、前記サムネイル画像として、前記イベントの発生時点の直前と直後の両方の時点に記録された画像を備え、前記イベントが発生したと判定するのに用いた情報の取得間隔は、前記映像のフレームの記録間隔よりも短い間隔に設定されており、前記イベントの発生時点の直前の時点に記録された画像は、前記イベントが発生したと判定した時点の直前のフレームの画像とし、前記イベントの発生時点の直後の時点に記録された画像は、前記イベントが発生したと判定した時点の直後のフレームの画像としたことを特徴とする。

【0029】

上記第８の観点による表示制御システムでは、イベントの発生時点の直前と直後の両方の時点に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、イベントの発生時点の直前と直後の両方の時点の事象に関連するイベント単位映像を、より簡単に、かつ的確に見つけることができる。

【0030】

第９の観点では、本発明は、前記第１〜前記第８のいずれかの観点による表示制御システムにおいて、前記サムネイル画像として、前記イベント単位映像の中の最初あるいは最後のいずれか、または両方の時点に記録された画像を備えることを特徴とする。

【0031】

上記第９の観点による表示制御システムでは、イベント単位映像の中の最初あるいは最後のいずれか、または両方の時点に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、イベント単位映像の最初・最後の時点の事象に関連するイベント単位映像を、より簡単に、かつより的確に見つけることができる。

【0032】

第１０の観点では、本発明は、前記第２〜前記第９のいずれかの観点による表示制御システムにおいて、前記サムネイル画像として、前記イベントの発生時点に記録された画像を備えることを特徴とする。

【0033】

上記第１０の観点による表示制御システムでは、イベントの発生時点に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、イベントの発生時点の事象に関連するイベント単位映像を、より簡単に、かつより的確に見つけることができる。

【0034】

第１１の観点では、本発明は、前記第１〜前記第１０のいずれかの観点による表示制御システムにおいて、前記サムネイル画像として、前記イベント単位映像が記録されたときの前記車両の状態に応じて、前記イベント単位映像の範囲の中の特定期間の画像を備えることを特徴とする。

【0035】

上記第１１観点による表示制御システムでは、イベント単位映像が記録されたときの車両の状態に応じた特定期間の画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、イベント単位映像が記録されたときの車両の状態に関連するイベント単位映像を、より簡単に見つけることができる。

【0036】

「イベント単位映像が記録されたときの車両の状態」とは、例えば、（１）急ブレーキのとき、（２）急ハンドルのとき、（３）車両が何かと衝突したときなどの車両の状態である。
「イベント単位映像の中から選択された特定期間の画像」とは、例えば、（１）急ブレーキのときは、ブレーキを踏んでから放すまでの時点に記録された画像、あるいは、車両に加わる加速度の事象が現れてからそれが終わるまでの時点に記録された画像などである。また、（２）急ハンドルのときは、ハンドルを回しはじめてから、回し終わるまでの時点に記録された画像などである。更に、（３）車両が何かと衝突したときは、バンパー、ガードレールなどの反動による車両の加速度挙動が生まれてから、車両が停止し、加速度挙動が収束したときまでの時点に記録された画像などである。

【0037】

第１２の観点では、本発明は、前記第１〜前記第１１のいずれかの観点による表示制御システムにおいて、前記サムネイル画像として、前記車両に加わる加速度が所定値を超えた時点に記録された画像を備えることを特徴とする。

【0038】

上記第１２の観点による表示制御システムでは、車両に加わる加速度が所定値を超えた時点に記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、車両に加わる加速度が所定値を超えた時点に関連するイベント単位映像を、より簡単に見つけることができる。

【0039】

第１３の観点では、本発明は、前記第２〜前記第１２のいずれかの観点による表示制御システムにおいて、前記イベントの発生は、前記車両の挙動を検出した情報に基づく、特定挙動情報であることを特徴とする。

【0040】

上記第１３の観点による表示制御システムでは、車両の挙動を検出した情報に基づく特定挙動情報をイベントとして記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、特定挙動情報をイベントとして記録されたイベント単位映像を、より簡単に見つけることができる。

【0041】

「車両の挙動を検出した情報」とは、例えば、車両に搭載された加速度センサ、ジャイロセンサ、気圧センサ（あるいは、高度センサ）の検出結果や、記録された映像の解析結果などの何れかから得られる情報などである。

【0042】

第１４の観点では、本発明は、前記第２〜前記第１３のいずれかの観点による表示制御システムにおいて、前記イベントの発生は、前記車両の機能状態に関する情報に基づく、特定車両情報であることを特徴とする。

【0043】

上記第１４の観点による表示制御システムでは、車両の機能状態に関する情報に基づく特定車両情報をイベントとして記録された画像に対応するサムネイル画像から、イベント単位映像の内容を確認できるようになる。これにより、特定車両情報をイベントとして記録されたイベント単位映像を、より簡単に見つけることができる。

【0044】

「車両の機能状態に関する情報」とは、例えば、車両運転時のブレーキ、ウインカ−、アクセル、ハンドル回転、シフトレバー位置、サイドブレーキのいずれかの操作や、車両故障診断システムであるＯＢＤ（On Board Diagnosis）、車載ＬＡＮであるＣＡＮ（Controller Area Network）から得られる情報などである。

【0045】

第１５の観点では、本発明は、前記第１〜前記第１４のいずれかの観点による表示制御システムにおいて、前記複数のサムネイル画像は、異なるイベント単位映像のサムネイル画像が異なる行を構成し、かつ、同一時点のサムネイル画像が異なる列を構成するマトリックス構造により、同一画面上に一覧表示させることを特徴とする。

【0046】

上記第１５の観点による表示制御システムでは、複数のサムネイル画像が、異なるイベント単位映像ごとのサムネイル画像や同一時点のサムネイル画像として整理された状態で視覚的に分かり易く一覧表示される。これにより、サムネイル画像の内容を判別し易くすることができる。

【0047】

第１６の観点では、本発明は、前記第１〜前記第１５のいずれかの観点による表示制御システムにおいて、前記複数のサムネイル画像は、同一イベント単位映像ごとのサムネイル画像が同一行内を左から右、あるいは、右から左に時系列の順番に並ぶように構成するマトリックス構造により、同一画面上に一覧表示させることを特徴とする。

【0048】

上記第１６の観点による表示制御システムでは、複数のサムネイル画像が、同一イベント単位映像ごとに同一行内を時系列の順番に並んだサムネイル画像として視覚的に分かり易く一覧表示される。これにより、サムネイル画像の内容を判別し易くすることができる。

【0049】

前記第１〜前記第１６のいずれかの観点による表示制御手段の構成要素に対応するステップを有する方法の発明と捉えることができる。例えば、第１の観点に対応する方法の発明として、第１７の観点では、本発明は、車両に搭載されたドライブレコーダによって記録されたイベント単位映像に関連するサムネイル画像を表示する制御を行う表示制御方法であって、前記イベント単位映像の範囲の中の異なる時点に対応する複数のサムネイル画像を表示するステップを有することを特徴とする表示制御方法を提供する。

【0050】

上記第１７の観点による表示制御方法では、イベント単位映像の範囲の中の異なる時点に対応する複数のサムネイル画像から当該イベント単位映像の内容を確認できるようになるので、求めるイベント単位映像をサムネイル画像から簡単に見つけることができる。

【0051】

第１８の観点では、本発明は、前記第１〜前記第１６のいずれかの観点による表示制御システムとしての機能をコンピュータに実現させるためのプログラムを提供することができるようになる。

【発明の効果】

【0052】

本発明の表示制御システムによれば、求めるイベント単位映像を、サムネイル画像から簡単に見つけることが可能となる。

【図面の簡単な説明】

【0053】

【図1】実施例１に係る運転支援システムの概略構成を示す図である。

【図2】メモリカード２５に記録される内容のデータ構造を概念的に示す図である。

【図3】実施例１に係るイベント発生時の加速度変化の様子と画像等の記憶方法について説明する図である。

【図4】実施例１に係るサムネイル画像の作成及び表示処理を示すフローチャートである。

【図5】実施例１に係るサムネイル画像の表示態様の一例を示す画面表示図である。

【図6】実施例２に係る急ブレーキの場合の加速度変化を示す図である。

【図7】実施例２に係るサムネイル画像の作成及び表示処理を示すフローチャートである。

【図8】実施例３に係る急ハンドルの場合の加速度変化を示す図である。

【図9】実施例３に係るサムネイル画像の作成及び表示処理を示すフローチャートである。

【図10】実施例４に係る車両衝突の場合の加速度変化を示す図である。

【図11】実施例４に係るサムネイル画像の作成及び表示処理を示すフローチャートである。

【図12】車対車の衝突の場合の加速度変化の実験事例を示す図である。

【図13】図１２に示す実験事例に係るサムネイル画面の表示事例を示す図である。

【発明を実施するための形態】

【0054】

以下、本発明の一実施形態に係る表示制御システムについて図面に基づき、詳細に説明する。なお、本発明は、これに限定されて解釈されるものではなく、本発明の範囲を逸脱しない限りにおいて、当業者の知識に基づいて、種々の変更、修正、改良を加え得るものである。

【実施例】

【0055】

［実施例１］
＜運転支援システムの構成＞
図１は、本発明の表示制御システムの実施例１に係る運転支援システムの概略構成を示す図である。

【0056】

図１に示すように、運転支援システムは、車両に搭載されるドライブレコーダ１０と、ドライブレコーダ１０においてイベント発生時に画像を記憶するメモリカード２５と、このメモリカード２５に記憶された画像を再生するための運転支援装置３０とから構成される。

【0057】

ドライブレコーダ１０は、第１制御部１１、加速度センサ（Ｇセンサ）１２、ジャイロセンサ１３、気圧センサ１４、ＧＰＳアンテナ１５、このＧＰＳアンテナ１５で受信したＧＰＳ信号から車両のＧＰＳ位置情報を測位するＧＰＳ（Global Positioning System）レシーバ１６、スイッチ、ボタン等を含んで構成される第１操作部１７、画像を一次記憶するための第１メモリ１８、メモリカード２５を挿入するスロットを有し且つメモリカード２５への画像の書き込み等を行うための第１ＩＦ（インターフェイス）１９、車両の前方を所定のレートで連続的に撮像するように車両に設置されたＣＣＤカメラ２０、車両信号取得部２１、及びドライブレコーダ１０の各要素に電力を供給するための電源部２２等を有している。

【0058】

また、ドライブレコーダ１０は、ナビゲーション装置（図示せず）と連携して、ナビゲーション装置のディスプレイにおいて画像を再生できるように構成しても良い。更に、ＧＰＳレシーバ１６は、必ずしも必須の構成ではないが、外付けの機器、例えばＡＶＭ（Automatic Vehicle Monitoring）システムや、ナビゲーション装置が受信した位置情報を取得する構成としても良い。

【0059】

第１制御部１１は、ＣＰＵ、ＲＯＭ及びＲＡＭ等を含んだマイコン等で構成され、ドライブレコーダ１０の動作全体の制御を司る。

【0060】

Ｇサンサ１２は、互いに直交する２軸方向（Ｘ軸及びＹ軸）の重力加速度（以下、単に加速度と記す）を検出し、検出した加速度（Ｇデータとも記す）を時刻データと共に第１制御部１１へ送信する。第１制御部１１は、例えば１０ミリ秒間隔でＧセンサ１２から出力されたＧデータ（Ｇｘ、Ｇｙ）を取得して、Ｇデータから加速度の値（大きさ）を判別することができる。

【0061】

なお、ＧｘはＸ軸方向（車両の前後方向）、ＧｙはＹ軸方向（車両の左右方向）の加速度と示すものとする。また、Ｇセンサ１２は、Ｚ軸方向（車両の上下方向）も加えた３軸のものを利用しても良いし、３軸のものにおいて、Ｚ軸方向の加速度Ｇｚのデータを利用しなくても良い。

【0062】

ジャイロセンサ１３は、車両の角加速度（回転）を検出し、主に、車両の進行方向の変化（すなわち、鉛直方向軸であるヨー（Ｚ軸）の回転）を検出し、検出した角加速度データを時刻データと共に第１制御部１１へ送信する。第１制御部１１は、例えば１０ミリ秒間隔でジャイロセンサ１３から出力された角加速度データを取得して、角加速度データから角加速度の値（大きさ）を判別することができる。

【0063】

気圧センサ１４は、車両外部の大気の圧力を検出し、検出した気圧値に基づいて高度を計算し、気圧値及び高度値（気圧・高度データ）を時刻データと共に第１制御部１１へ送信する。第１制御部１１は、例えば１０ミリ秒間隔で気圧センサ１４から出力された気圧・高度データを取得して、気圧・高度データから気圧・高度の値（大きさ）を判別することができる。

【0064】

第１制御部１１は、ＣＣＤカメラ２０が、１００ミリ秒おきに１枚の画像を撮像し、撮像された画像を時刻データと共に第１メモリ１８に順次循環的に記憶（後述するメモリカード２５への記憶のために一次記憶）するように制御する。例えば、常にＣＣＤカメラ２０が撮像した画像２４秒分（画像２４０枚分）の画像データが、第１メモリ１８に記憶されるように構成される。なお、ＣＣＤカメラ２０が撮像する画像は、１００ミリ秒毎に１枚でなく、例えば５０ミリ秒毎に１枚でも良い。また、ＣＣＤカメラ２０が撮影した動画を記憶するように構成しても良い。

【0065】

車両信号取得部２１は、車両の故障診断コネクタと接続して、車両の各種信号や情報（車両データ）を、例えば１００ミリ秒間隔で取得して、取得した車両データを時刻データと共に第１制御部１１へ送信する。車両データとしては、例えば、［１］車両運転時のブレーキ操作を検出した信号、［２］同じくウインカ操作を検出した信号、［３］同じくアクセル操作を検出した信号、［４］同じくハンドル回転を検出した信号、［５］同じくシフトレバー位置を検出した信号、［６］同じくサイドブレーキ操作を検出した信号や、［７］車両内の車両故障診断システム（ＯＢＤ）から得られる車両故障診断情報（車速、エンジン回転数、冷却水温度など）、［８］車載ＬＡＮ（ＣＡＮ）を介して得られる各種車両情報（自車両のＥＣＵ（Electronic Control Unit）からの各機能制御データ、車外のネットワークや他の車両からの通信データなど）などである。

【0066】

一例として、車両信号取得部２１は、ブレーキ操作を検出した信号を取得した場合、車両のブレーキが操作されたか否かを示すブレーキ操作データ、ブレーキ操作が開始された時刻を示すブレーキ操作開始時刻データ及びブレーキ操作が終了された時刻を示すブレーキ操作終了時刻データを第１制御部１１へ送信する。即ち、車両信号取得部２１からのブレーキ操作データ、ブレーキ操作開始時刻データ及びブレーキ操作終了時刻データによって、第１制御部１１は、ブレーキ操作がなされたか否か、ブレーキ操作が開始された時刻、及びブレーキ操作が終了された時刻を判別することができる。

【0067】

他の例として、車両信号取得部２１は、ハンドル回転を検出した信号を取得した場合、車両のハンドルが回転された否かを示すハンドル回転データ、ハンドル回転が開始された時刻を示すハンドル回転開始時刻データ及びハンドル回転が終了された時刻を示すハンドル回転終了時刻データを第１制御部１１へ送信する。即ち、車両信号取得部２１からのハンドル回転データ、ハンドル回転開始時刻データ及びハンドル回転終了時刻データによって、第１制御部１１は、ハンドル回転がなされたか否か、ハンドル回転が開始された時刻、及びハンドル回転が終了された時刻を判別することができる。

【0068】

なお、ＧＰＳアンテナ１５、ＧＰＳレシーバ１６、第１ＩＦ１９、ＣＣＤカメラ２０、車両信号取得部２１等の一部又は全部は、ドライブレコーダ１０と別体に構成されても良い。例えば、ＧＰＳ機能を有する既存のナビゲーション装置と連携させた場合、ドライブレコーダ１０にＧＰＳレシーバ１６等の機能は不要であるので、その分だけドライブレコーダ１０のコストを低く抑えることができる。

【0069】

運転支援装置３０は、第２制御部３１、ディスプレイ等によって構成される表示部３２、表示画面を紙面に印刷するプリンタ等から構成される出力部３３、キーボード、マウス等の入力デバイスを含んで構成される第２操作部３４、画像を一次記憶するための第２メモリ３５、メモリカード２５を挿入するためのスロットを含み且つメモリカード２５から画像の読み出し等を行うための第２ＩＦ（インターフェイス）３６、及び入力画像に所定の画像処理を施すための画像処理部３７等を有している。

【0070】

第２制御部３１は、ＣＰＵ、ＲＯＭ及びＲＡＭ等を含んで構成され、運転支援ソフトがインストールされたパーソナルコンピュータ（ＰＣ）であり、運転支援ソフトに含まれるプログラムを解釈実行して運転支援装置３０の各構成要素を動作させ、本発明の特徴部分にかかる各種機能を実現する。

【0071】

なお、運転支援装置３０は、ドライブレコーダ１０によって記録されたイベント単位映像に関連するサムネイル画像を表示する制御を行う表示制御システムの一態様である。また、本実施例では、イベント単位映像として、イベントの発生時点の前後の所定期間に記録された画像とする。イベントの発生時点としては、例えば、事故の発生に相当する事象が発生されている時点とし、例えば、急ブレーキなどの急減速の発生により車両に衝撃が加わった時点とする。

【0072】

メモリカード２５は、２Ｇバイトの記憶容量を有する書き換え可能な不揮発性の半導体メモリカードである。このメモリカード２５は、第１ＩＦ１９を構成するスロットに挿入されて、イベントの発生時点の前後の所定期間に、第１メモリ１８に常に循環的に一次記憶している所定の画像（例えば、イベントの発生時点の前１２秒分の画像と、後１２秒分の画像）が記憶される。その後、メモリカード２５は、第１ＩＦ１９を構成するスロットから排出されて第２ＩＦ３６を構成するスロットに再挿入されて、記憶されている画像を運転支援装置３０へ出力する。

【0073】

なお、メモリカード２５として半導体メモリカードを用いたが、それに限定されることなく、カードタイプ以外の半導体メモリ、持ち運び可能なハードディスク（ＨＤ）、その他の記憶媒体等を利用することができる。また、メモリカード等の記憶容量は任意であって、用途に応じて自由に決定することが可能である。

【0074】

ドライブレコーダ１０は、予め定める所定の条件が成立したとき（すなわち、ドライブレコーダ１０による記録を行うべきイベントが発生したとき）、具体的には、（ａ）急ブレーキ、急ハンドル、衝突など、あるいは、その他の事故の発生に相当するイベント（事象）などの発生により車両に衝撃が加わって、内部に備えるＧセンサ１２から出力されたＧデータの値（大きさ）が所定の閾値を超えたときや、その他（ｂ）第１操作部１７の緊急スイッチが押された時など、その検出をトリガにして前後数秒〜十数秒分（例えば、前１２秒、後１２秒など）の各種データを、イベント発生時刻データとともに取得して、１つの運転情報としてメモリカード２５に記録する。

【0075】

メモリカード２５に記録される運転情報は、Ｇセンサ１２から出力されたＧデータ、ジャイロセンサ１３から出力された角加速度データ、気圧センサ１４から出力された気圧・高度データ、ＧＰＳレシーバ１６が測位したＧＰＳ位置情報、ＣＣＤカメラ２０が撮影したカメラ画像データ、車両信号取得部２１が取得した車両の各種信号や情報（ブレーキ操作やハンドル回転などの検出データ、車速データなど）、を含む。

【0076】

ドライブレコーダ１０は、記録を行うべきイベントが発生してトリガが検出された時から前後数秒〜十数秒分（例えば、前１２秒、後１２秒など）の複数のカメラ画像１枚１枚に対応付けて、運転情報の各種データをメモリカード２５に記録する。

【0077】

＜メモリカードのデータ構造＞
次に、図２を参照して、メモリカード２５に記録される内容のデータ構造について説明する。図２は、メモリカード２５に記録される内容のデータ構造を概念的に示す図である。

【0078】

図２に示すように、メモリカード２５には、各イベントの発生毎に、対応する運転情報が、運転情報１、運転情報２、運転情報３というように区分されて記録される。運転情報１は、イベント発生時の前後２４秒分（前１２秒、後１２秒）に相当する２４０枚のカメラ画像１〜２４０と、カメラ画像以外のその他の運転情報を含む画像関連情報とから構成される。画像関連情報は、イベント発生時のＧデータとその時刻データを含む主項目データと、２４０枚のカメラ画像１〜２４０それぞれに対応する関連データ１〜２４０とを含む。運転情報２、３についても同様である。

【0079】

主項目データは、Ｇデータ、角加速度データ、気圧・高度データ、それぞれの時刻データを含み、画像関連データは、カメラ画像の撮影日や撮影時刻、カメラ画像の撮影時の車両の各種信号や情報（ブレーキ操作やハンドル回転などの検出データ、車速データなど）、車両のＧＰＳ位置情報を含む。

【0080】

＜イベント発生時の加速度変化と画像等の記憶方法＞
次に、図３を参照して、車両に衝撃が加わるなどのイベントの発生時において、ドライブレコーダ１０のＧセンサ１２（図１参照）で検出される加速度（Ｇデータ）の変化の様子と、ドライブレコーダ１０における画像等の記憶方法について説明する。

【0081】

図３（ａ）はＧセンサ１２から出力されたＧデータ（Ｇｘ、Ｇｙの合成値）の時系列的変化を示しており、図３（ｂ）はメモリカード２５に記憶する画像期間の例を示し、図３（ｃ）は作成されるサムネイル画像の元となる画像の選択タイミングの例を示している。なお、サムネイル画像の作成及び表示については後述する。

【0082】

車両に衝撃が加わった時点より、Ｇセンサ１２から出力されたＧデータの値（大きさ）が、ほぼゼロから急増する。そして、図３（ａ）に示すように、時刻ｔｐにおいて、Ｇセンサ１２のＧデータの値（大きさ）が、閾値加速度Ｇｓ（例えば、０．３Ｇ）になった時（時刻ｔｐ）、第１制御部１０１は、それをトリガと認識し、イベントが発生したと判断（判定）し、ＣＣＤカメラ２０が撮像し、常に第１メモリ１８に循環的に一次記憶している画像をメモリカード２５に記憶し、また、時刻ｔｐをイベント発生判断時刻データとしてメモリカード２５に記憶するように動作する。

【0083】

具体的には、図３（ｂ）に示すように、時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢをメモリカード２５に記憶するように制御する。例えば、ＴＡは１２秒、ＴＢは１２秒とすることができる。なお、ＴＡ及びＴＢの期間は自由に設定できるものとする。例えば、ドライブレコーダ１０の設定画面（図示せず）に設定時間（秒）を表示させながら、ドライブレコーダ１０の第１操作部１７の時間設定ボタンを操作して時間を設定し、設定された情報を保存しておくことにより、任意の時間に設定できる。

【0084】

上記のように車両に衝撃が加わるなどのイベントが発生し、Ｇセンサ１２の検出Ｇデータの値（大きさ）が所定の閾値を超えた時、１回のイベント毎に、第１制御部１１は、イベント発生時刻データ（ｔｐ）、Ｇセンサ１２の検出Ｇデータ（Ｇｘ、Ｇｙ）及びその時刻データ、ジャイロセンサ１３の検出角加速度データ及びその時刻データ、気圧センサ１４の気圧・高度データ及びその時刻データ、車両信号取得部２１で取得された時刻ｔｐの前のＴＡ秒間及び時刻ｔｐの後のＴＢ秒間の車両データ及びその時刻データ（例えば、ブレーキ操作データとその時刻データ、ハンドル回転データとその時刻データ、車速データとその時刻データなど）を、画像データと共にメモリカード２５に記憶する。なお、上述したデータの一部のみをメモリカード２５に記憶するように構成しても良い。

【0085】

メモリカード２５に記憶されるイベント数は、メモリカード２５の記憶容量に応じて、可変することができるが、例えば、５００イベント以上分のデータが記憶できるようにすることが好ましい。また、第１制御部１１は、イベント毎にメモリカード２５にフォルダを作成して、画像データ、イベント発生時刻データ（ｔｐ）、Ｇセンサ１２のＧデータ（Ｇｘ、Ｇｙ）及びその時刻データ、角加速度データ及びその時刻データ、気圧・高度データ及びその時刻データ、車両データ及びその時刻データを記憶するようにすることが好ましい。

【0086】

なお、上述したイベントの発生時において、閾値加速度Ｇｓを超えることをイベント発生のトリガとしたが、例えば、単位時間あたりの加速度の変化量がある値を超えた場合（０．１秒間に、Ｇデータの値（大きさ）が０．１Ｇ以上変化した場合）にイベントが発生したと判断するようにしても良い。

【0087】

＜サムネイル画像の作成及び表示（実施例１）＞
次に、運転支援装置３０におけるサムネイル画像の作成及び表示処理について、図４を参照して説明する。本例では、１つのイベントに関するサムネイル画像の作成及び表示処理動作について説明する。
図４は、実施例１に係るサムネイル画像の作成及び表示処理を示すフローチャートであり、このサムネイル画像の作成及び表示処理は、運転支援装置３０の第２制御部３１のＲＡＭにＨＤＤ等からロードされた制御プログラムにしたがってＣＰＵが実行することにより実現され、第２操作部３４の運転支援ソフトの起動の操作に基づいて開始される。また、図４に示すフローチャートの処理が開始される時点で、スロットを構成する第２ＩＦ３６にドライブレコーダ１０において画像が記憶されたメモリカード２５が挿入されているものとする。

【0088】

ステップＳ１１において、第２制御部３１は、メモリカード２５に記憶されたデータの中からイベント発生判断時刻データ（ｔｐ）を取得する。

【0089】

次にステップＳ１２では、第２制御部３１は、図３（ｂ）に示す時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢの中から複数の異なるタイミングに撮影された複数の画像を選択する。

【0090】

具体的には、この制御プログラムには、図３（ｂ）に示す時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢの中から、図３（ｃ）に示す時刻ｔｐのＴＡ秒（例えば、１２秒）前の時刻ｔｓに撮影された画像Ｐ１を「第１画像」として選択し、時刻ｔｐの直前（所定時間ＴＣ秒前、例えば、０．２秒前）の時刻ｔｐ１に撮影された画像Ｐ２を「第２画像」として選択し、時刻ｔｐの直後（所定時間ＴＣ後、例えば、０．２秒後）の時刻ｔｐ２に撮影された画像Ｐ３を「第３画像」として選択し、時刻ｔｐのＴＢ秒（例えば、１２秒）後の時刻ｔｅに撮像された画像Ｐ４を「第４画像」として選択するといった制御処理がプログラムされている。第２制御部３１は、このような制御プログラムに従って、画像ＰＡ及び画像ＰＢの中から第１〜第４画像の選択制御を行う。

【0091】

なお、時刻ｔｐのＴＡ秒前の時刻ｔｓは、一つのイベントにおいて、画像の記憶が開始された時点であり「第１画像」はイベント発生時点に撮影された画像でもある。また、時刻ｔｐのＴＢ秒後の時刻ｔｅは、一つのイベントにおいて、画像の記憶が終了された時点でもあり、「第４画像」はイベント検知終了時点に撮影された画像である。
また、所定時間ＴＣは、例えば、０．２秒と設定することが可能であるが、アプリケーションに応じて、０秒を含め最適な値を選択することができる。例えば、運転支援装置３０の設定画面（図示せず）に設定時間（秒）を表示させながら、運転支援装置３０の第２操作部３４の時間設定ボタンを操作して時間を設定し、設定された情報を保存しておくことにより、任意の時間に設定できる。

【0092】

次にステップＳ１３では、第２制御部２０１は、第２制御部２０１内のＲＯＭに格納されて制御プログラムに従って、画像処理部３７に対して、ステップＳ１２において選択された「第１〜第４画像」（Ｐ１〜Ｐ４）から第１〜第４サムネイル画像を作成させる画像処理を行わせる。

【0093】

なお、選択された第１〜第４画像からサムネイル画像を作成するには、例えば、元となる第１〜第４画像を、それぞれ縮小化する画像処理を施してサムネイル画像を作成する。その他、縮小化する画像処理以外にも、選択された第１〜第４画像の拡大化する画像処理を施したり、画像の一部を切り出す画像処理を施したりするなど、その他の所定の画像処理を施すことによりサムネイル画像を作成してもよい。また、選択された第１〜第４画像に何も画像処理せずにそのままをサムネイル画像としてもよい。

【0094】

続くステップＳ１４では、第２制御部３１は、第２制御部３１内のＲＯＭに格納されて制御プログラムに従って、表示処理部３８に対して、ステップＳ１３において作成された第１〜第４サムネイル画像を表示部３２に表示させる表示処理を行わせる。具体的には、後述するようにサムネイル画像をマトリックス構造に配置させて同一画面上に一覧表示させる。
これで１つのイベントに関するサムネイル画像作成及び表示処理を終了する。

【0095】

＜サムネイル画像の表示例＞
次に、運転支援装置３０の表示部３２に表示する表示画像の一態様について、図５を参照して説明する。図５は、実施例１に係るサムネイル画像の表示態様の一例を示す画面表示図である。
図５に例示するサムネイル画像の表示態様は、運転支援装置３０の表示部３２に複数のイベントに関するサムネイル画像が表示された状態を示している。

【0096】

図５において、縦方向４行×横方向４列のマトリックス構造に配置されて同一画面上に一覧表示された１６個のサムネイル画像Ａ１〜Ｄ４は、行ごとに、１つのイベントに関するイベント単位画像５１，５２，５３，５４を構成している。すなわち、イベント画像５１，５２，５３，５４は、それぞれが、１つのイベントに関する４個のサムネイル画像が１つの行内に配置されて表示され、かつ、異なるイベントに関する４個のサムネイル画像が異なる行に配置されて表示される４組のサムネイル画像Ａ１〜Ａ４，Ｂ１〜Ｂ４，Ｃ１〜Ｃ４，Ｄ１〜Ｄ４を構成している。

【0097】

なお、サムネイル画像Ａ１〜Ｄ４の下部には、各サムネイル画像の元となる画像の撮影時刻を表示している。図示の例は、イベント単位画像５１におけるイベント発生時刻ｔｐが「１１時４６分１４秒６０」の時の各サムネイル画像の元となる画像の撮影時刻を表示している。

【0098】

また、図５に示す１６個のサムネイル画像は、列ごとに、同一時点（正確には、イベントごとにイベント発生時刻ｔｐに対して同一の時間だけ前後する時点）に撮影された画像から作成された時点単位画像６１，６２，６３，６４を構成している。すなわち、時点単位画像６１，６２，６３，６４は、それぞれが、同一時点に関する４個のサムネイル画像が１つの列内に配置されて表示され、かつ、異なる時点に関する４個のサムネイル画像が異なる列に配置されて表示される４組のサムネイル画像Ａ１〜Ｄ１，Ａ２〜Ｄ２，Ａ３〜Ｄ３，Ａ４〜Ｄ４を構成している。

【0099】

また、図５に示す１６個のサムネイル画像において、左から１列目がイベント発生時点（時刻ｔｓ）に撮影された画像Ｐ１（第１画像）から作成されたサムネイル画像であり、２列目がイベント発生判断時刻の直前（時刻ｔｐ１）に撮影された画像Ｐ２（第２画像）から作成されたサムネイル画像であり、３列目がイベント発生判断時刻の直後（時刻ｔｐ２）に撮影された画像Ｐ３（第３画像）から作成されたサムネイル画像であり、４列目がイベント検知終了時点（時刻ｔｅ）に撮影された画像Ｐ４（第４画像）から作成されたサムネイル画像である。

【0100】

更に、図５において、１つの行内に配置された４個のサムネイル画像は、Ｘ１→Ｘ２→Ｘ３→Ｘ４（Ｘは、Ａ，Ｂ，Ｃ，Ｄのいずれか）の順で、同一のイベント画像ごとのサムネイル画像が同一行内を左から右に時系列の順番に並ぶように配置されて表示されている。なお、表示順番は、同一行内を左から右ではなく、右から左に時系列の順番に並ぶようにしてもよい。

【0101】

なお、図５では、４つのイベントを表示しているが、イベントの表示個数はこれに限定されるものではなく、他の表示個数を選択することや、他の要素（Ｇデータや車両データなど）と合わせて表示させること等も可能である。

【0102】

以上のように本実施例１の運転支援装置３０では、次のような利点を奏する。すなわち、
（１）車両に衝撃が加わるなどのイベントの発生時において、イベント発生時点（時刻ｔｐ）のＴＡ秒前に撮影された第１画像Ｐ１、時刻ｔｐの直前に撮影された第２画像Ｐ２、時刻ｔｐの直後に撮影された第３画像Ｐ３、時刻ｔｐのＴＢ秒後に撮像された第４画像Ｐ４を選択し、選択された第１〜第４画像Ｐ１〜Ｐ４から第１〜第４サムネイル画像を作成し、表示部３２に表示させる制御を行う。これにより、イベントの発生時において、その前後の所定期間が撮影されたイベント単位画像の中の異なる時点に撮影された第１〜第４画像Ｐ１〜Ｐ４に対応する第１〜第４サムネイル画像を確認することにより、イベント発生ごとに記憶されたイベント単位画像の内容を容易に確認することができ、イベントが発生する原因や状況を把握し易い。

【0103】

例えば、イベント発生ごとに記憶された多数のイベント単位画像の中から特定のイベントに関係するイベント単位画像を見つける際に、そのイベント単位画像に関連する１つの時点のサムネイル画像から当該イベント単位画像の内容を確認して特定のイベント単位画像を探す場合に比較して、求める特定のイベント単位画像をサムネイル画像から簡単に見つけることができる。

【0104】

（２）図５に例示するサムネイル画像の表示態様のように、サムネイル画像は、１つのイベントに関する４個のサムネイル画像が１つの行内に配置されて表示され、かつ、異なるイベントに関する４個のサムネイル画像が異なる行に配置されて表示されるので、１つのイベントに関連する４個のサムネイル画像を一目瞭然に判別することができる。
また、１つの行内に配置された４個のサムネイル画像は、イベントごとに同一行内を左から右に時系列の順番に並ぶように配置されて表示されるので、１つのイベントに関連する４個のサムネイル画像の時間経過順を一目瞭然に判別することができる。

【0105】

更に、１列目のサムネイル画像を見れば、イベント発生時点の車両前方の様子が分かり、２列目のサムネイル画像を見れば、イベント発生判断時刻の直前の車両前方の様子が分かり、３列目のサムネイル画像を見れば、イベント発生判断時刻の直後の車両前方の様子が分かり、４列目のサムネイル画像を見れば、イベント検知終了時点の車両前方の様子が分かるので、例えば、同じ列のサムネイル画像を比較して見ることで、イベントが発生する各同一時点での車両前方の様子を比較検証することができる。

【0106】

［実施例２］
本実施例２は、車両に衝撃が加わるなどのイベント事例として、急ブレーキによる場合である。
図６は急ブレーキの場合の加速度変化を示す図であり、Ｇセンサ１２から出力されたＧデータ（Ｇｘ、Ｇｙの合成値）の時系列的変化を示している。

【0107】

図６に示すように、時刻ｔ１において、急ブレーキが踏まれた（ＯＮされた）場合、Ｇセンサ１２では、主に車両の前後方向の加速度（Ｇｘ）が検出され、加速度が変化する。Ｇセンサ１２の加速度（Ｇデータ）は、時刻ｔ１から徐々に増え（すなわち、車両が進む向きと逆向き加速度が大きくなり）、それが閾値加速度Ｇｓ（例えば、０．３Ｇ）になった時（時刻ｔｐ）、第１制御部１１は、それをトリガと認識し、イベントが発生したと判断（判定）し、ＣＣＤカメラ２０が撮像し、常に第１メモリ１０８に循環的に記憶している画像をメモリカード１５０に記憶し、また、時刻ｔｐをイベント発生判断時刻データとしてメモリカード１５０に記憶するように動作する。

【0108】

具体的には、本実施例２でも、実施例１と同様に、時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢをメモリカード２５に記憶するように制御する。

【0109】

時刻ｔｐの以降も加速度は増え続け、極大値（最大値）になった後、減少に変わって徐々に減り（すなわち、車両が進む向きと逆向き加速度が小さくなり）、そして、急減して、ゼロ点を経て、更に減り（すなわち、車両が進む向きの加速度が大きくなり）、極小値（最小値）になり、増加に変わって急増し（すなわち、車両が進む向きの加速度が小さくなり）、車両が停止し、ブレーキが放された（ＯＦＦ）時（時刻ｔ２）、ゼロになる。

【0110】

図６において、時刻ｔ１から時刻ｔｐまでの期間Ｔｄは「危険運転のはじめからトリガ発生直前の期間」であり、時刻ｔｐから時刻ｔ２までの期間Ｔｅは「危険運転の挙動」の期間である。

【0111】

＜サムネイル画像の作成及び表示（実施例２）＞
図７は、実施例２に係るサムネイル画像の作成及び表示処理を示すフローチャートであり、実施例１と同様に、運転支援装置３０の第２制御部３１のＲＡＭにＨＤＤ等からロードされた制御プログラムにしたがってＣＰＵが実行することにより実現され、第２操作部３４の運転支援ソフトの起動の操作に基づいて開始される。また、図７に示すフローチャートの処理が開始される時点で、スロットを構成する第２ＩＦ３６にドライブレコーダ１０において画像が記憶されたメモリカード２５が挿入されているものとする。

【0112】

ステップＳ２１において、第２制御部３１は、メモリカード２５に記憶されたデータからイベント発生判断時刻データ（ｔｐ）を取得する。続いてステップＳ２２において、メモリカード２５に記憶されたデータの中から車両信号取得部２１から出力されたブレーキ操作検出信号（ブレーキ操作データ）を取得する。

【0113】

次にステップＳ２３では、第２制御部３１は、図３（ｂ）に示す時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢの中から、ブレーキ操作に関連する複数の異なるタイミングに撮影された複数の画像を選択する。

【0114】

具体的には、この制御プログラムには、図３（ｂ）に示す時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢの中から、取得したブレーキ操作データに含まれるブレーキ操作開始時刻データに基づいてブレーキ操作が開始された時刻ｔ１（すなわち、加速度事象の出現開始時点）に撮像された画像を「第１画像」として選択し、時刻ｔｐの直前（所定時間ＴＣ前、例えば、０．２秒前）に撮影された画像を「第２画像」として選択し、時刻ｔｐの直後（所定時間ＴＣ後、例えば、０．２秒後）に撮影された画像を「第３画像」として選択し、取得したブレーキ操作データに含まれるブレーキ操作終了時刻データに基づいてブレーキ操作が終了された時刻ｔ２（すなわち、加速度事象の出現終了時点）に撮像された画像を「第４画像」として選択するといった制御処理がプログラムされている。第２制御部３１は、このような制御プログラムに従って、画像ＰＡ及び画像ＰＢの中から第１〜第４画像の選択制御を行う。

【0115】

なお、所定時間ＴＣは、例えば、０．２秒と設定することが可能であるが、アプリケーションに応じて、０秒を含め最適な値を選択することができる。
また、上記した時刻ｔ１、時刻ｔｐの直前・直後、時刻ｔ２の他に、加速度が極大値（最大値）になった時点、その直前・直後や、加速度が極小値（最小値）になった時点、その直前・直後に撮像された画像を選択してもよい。

【0116】

次にステップＳ２４では、第２制御部３１は、第２制御部３１内のＲＯＭに格納されて制御プログラムに従って、画像処理部３７に対して、ステップＳ２３において選択された「第１〜第４画像」から第１〜第４サムネイル画像を作成させる画像処理を行わせる。

【0117】

続くステップＳ２５では、第２制御部３１は、第２制御部３１内のＲＯＭに格納されて制御プログラムに従って、表示処理部３８に対して、ステップＳ２４において作成された第１〜第４サムネイル画像を表示部３２に表示させる表示処理を行わせる。具体的には、図５に示すようにサムネイル画像をマトリックス構造に配置させて同一画面上に一覧表示させる。
これで１つのイベントに関するサムネイル画像作成及び表示処理を終了する。

【0118】

以上のように本実施例２の運転支援装置３０では、次のような利点を奏する。すなわち、
車両に衝撃が加わるなどのイベント事例として急ブレーキによる場合において、ブレーキ操作が開始された時刻ｔ１に撮像された第１画像、時刻ｔｐの直前に撮影された第２画像、時刻ｔｐの直後に撮影された第３画像、ブレーキ操作が終了された時刻ｔ２に撮像された第４画像を選択し、選択された第１〜第４画像から第１〜第４サムネイル画像を作成し、表示部３２に表示させる制御を行う。これにより、急ブレーキの場合において、イベント発生時点（時刻ｔｐ）の前後の所定期間が撮影されたイベント単位画像の中の異なる時点で、特に、ブレーキ操作が開始された時刻ｔ１やブレーキ操作が終了された時刻ｔ２を含む時点に撮影された第１〜第４画像に対応する第１〜第４サムネイル画像を確認することにより、イベント事例として急ブレーキによる場合に記憶されたイベント単位画像の内容を容易に確認することができ、急ブレーキが発生する原因や状況を把握し易い。

【0119】

例えば、イベント発生ごとに記憶された多数のイベント単位画像の中から急ブレーキに関係するイベント単位画像を見つける際に、そのイベント単位画像に関連する１つの時点のサムネイル画像から当該イベント単位画像の内容を確認して、急ブレーキに関係するイベント単位画像を探す場合に比較して、求める急ブレーキに関係するイベント単位画像をサムネイル画像から簡単に見つけることができる。

【0120】

また、図５に示す１６個のサムネイル画像の左から１列目のサムネイル画像を縦に眺めていけば、急ブレーキをかけた時点（ブレーキ操作を開始した時点）の画像を比較して見ることができる。また、２列目のサムネイル画像を縦に眺めていけば、急ブレーキをかけたことに起因してイベント発生と判断された時点の直前の画像を比較して見ることができ、３列目のサムネイル画像を縦に眺めていけば、その直後の画像を比較して見ることができる。更に、４列目のサムネイル画像を縦に眺めていけば、ブレーキを放す時点（ブレーキ操作を終了した時点）の画像を比較して見ることができる。

【0121】

［実施例３］
本実施例３は、車両に衝撃が加わるなどのイベント事例として、急ハンドルによる場合である。
図８は急ハンドルの場合の加速度変化を示す図であり、Ｇセンサ１２から出力されたＧデータ（Ｇｘ、Ｇｙの合成値）の時系列的変化を示している。

【0122】

図８に示すように、時刻ｔ３において、急ハンドルが回され始められた場合、Ｇセンサ１２では、主に車両の左右方向の加速度（Ｇｙ）が検出され、加速度が変化する。Ｇセンサ１２からの加速度（Ｇデータ）は、時刻ｔ３から徐々に増え（すなわち、車両の曲がる向きと逆向きの加速度が大きくなり）、それが閾値加速度Ｇｓ（例えば、０．３Ｇ）になった時（時刻ｔｐ）、第１制御部１１は、それをトリガと認識し、イベントが発生したと判断（判定）し、ＣＣＤカメラ２０が撮像し、常に第１メモリ１０８に循環的に記憶している画像をメモリカード２５に記憶し、また、時刻ｔｐをイベント発生判断時刻データとしてメモリカード２５に記憶するように動作する。

【0123】

具体的には、本実施例３でも、実施例１，２と同様に、時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢをメモリカード２５に記憶するように制御する。

【0124】

時刻ｔｐの以降も加速度は増え続け、極大値（最大値）になった後、減少に変わって徐々に減り（すなわち、車両の曲がる向きと逆向きの加速度が小さくなり）、そして、急減して、ゼロ点を経て、更に減り（すなわち、車両の曲がる向きの加速度が大きくなり）、極小値（最小値）になり、増加に変わって急増し（すなわち、車両の曲がる向きの加速度が小さくなり）、車両が曲がり終わり、ハンドルが回され終えた（すなわち、ハンドルが元に戻された）とき（時刻ｔ４）、ゼロになる。

【0125】

図８において、時刻ｔ３から時刻ｔｐまでの期間Ｔｆは「危険運転のはじめからトリガ発生直前の期間」であり、時刻ｔｐから時刻ｔ４までの期間Ｔｇは「危険運転の挙動」の期間である。

【0126】

＜サムネイル画像の作成及び表示（実施例３）＞
図９は、実施例３に係るサムネイル画像の作成及び表示処理を示すフローチャートであり、実施例１，２と同様に、運転支援装置３０の第２制御部３１のＲＡＭにＨＤＤ等からロードされた制御プログラムにしたがってＣＰＵが実行することにより実現され、第２操作部３４の運転支援ソフトの起動の操作に基づいて開始される。また、図９に示すフローチャートの処理が開始される時点で、スロットを構成する第２ＩＦ３６にドライブレコーダ１０において画像が記憶されたメモリカード２５が挿入されているものとする。

【0127】

ステップＳ３１において、第２制御部３１は、メモリカード２５に記憶されたデータからイベント発生判断時刻データ（ｔｐ）を取得する。続いてステップＳ３２において、メモリカード２５に記憶されたデータの中から、車両信号取得部２１から出力されたハンドル回転検出信号（ハンドル回転データ）を取得する。

【0128】

次にステップＳ３３では、第２制御部３１は、図３（ｂ）に示す時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢの中から、ハンドル回転に関連する複数の異なるタイミングに撮影された複数の画像を選択する。

【0129】

具体的には、この制御プログラムには、図３（ｂ）に示す時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢの中から、取得したハンドル回転データに含まれるハンドル回転開始時刻データに基づいてハンドル回転が開始された時刻ｔ３に撮像された画像を「第１画像」として選択し、時刻ｔｐの直前（所定時間ＴＣ前、例えば、０．２秒前）に撮影された画像を「第２画像」として選択し、時刻ｔｐの直後（所定時間ＴＣ後、例えば、０．２秒後）に撮影された画像を「第３画像」として選択し、取得したハンドル回転データに含まれるハンドル回転終了時刻データに基づいてハンドル回転が終了された時刻ｔ４に撮像された画像を「第４画像」として選択するといった制御処理がプログラムされている。第２制御部３１は、このような制御プログラムに従って、画像ＰＡ及び画像ＰＢの中から第１〜第４画像の選択制御を行う。

【0130】

なお、所定時間ＴＣは、例えば、０．２秒と設定することが可能であるが、アプリケーションに応じて、０秒を含め最適な値を選択することができる。
また、上記した時刻ｔ３、時刻ｔｐの直前・直後、時刻ｔ４の他に、加速度が極大値（最大値）になった時点、その直前・直後や、加速度が極小値（最小値）になった時点、その直前・直後に撮像された画像を選択してもよい。

【0131】

次にステップＳ３４では、第２制御部３１は、第２制御部３１内のＲＯＭに格納されて制御プログラムに従って、画像処理部３７に対して、ステップＳ３３において選択された「第１〜第４画像」から第１〜第４サムネイル画像を作成させる画像処理を行わせる。

【0132】

続くステップＳ３５では、第２制御部３１は、第２制御部３１内のＲＯＭに格納されて制御プログラムに従って、表示処理部３８に対して、ステップＳ３４において作成された第１〜第４サムネイル画像を表示部３２に表示させる表示処理を行わせる。具体的には、図５に示すようにサムネイル画像をマトリックス構造に配置させて同一画面上に一覧表示させる。
これで１つのイベントに関するサムネイル画像作成及び表示処理を終了する。

【0133】

以上のように本実施例３の運転支援装置３０では、次のような利点を奏する。すなわち、
車両に衝撃が加わるなどのイベント事例として急ハンドルによる場合において、ハンドル回転が開始された時刻ｔ３に撮像された第１画像、時刻ｔｐの直前に撮影された第２画像、時刻ｔｐの直後に撮影された第３画像、ハンドル回転が終了された時刻ｔ４に撮像された第４画像を選択し、選択された第１〜第４画像から第１〜第４サムネイル画像を作成し、表示部３２に表示させる制御を行う。これにより、急ハンドルの場合において、イベント発生時点（時刻ｔｐ）の前後の所定期間が撮影されたイベント単位画像の中の異なる時点で、特に、ハンドル回転が開始された時刻ｔ３やハンドル回転が終了された時刻ｔ４を含む時点に撮影された第１〜第４画像に対応する第１〜第４サムネイル画像を確認することにより、イベント事例として急ハンドルによる場合に記憶されたイベント単位画像の内容を容易に確認することができ、急ハンドルが発生する原因や状況を把握し易い。

【0134】

例えば、イベント発生ごとに記憶された多数のイベント単位画像の中から急ハンドルに関係するイベント単位画像を見つける際に、そのイベント単位画像に関連する１つの時点のサムネイル画像から当該イベント単位画像の内容を確認して、急ハンドルに関係するイベント単位画像を探す場合に比較して、求める急ハンドルに関係するイベント単位画像をサムネイル画像から簡単に見つけることができる。

【0135】

また、図５に示す１６個のサムネイル画像の左から１列目のサムネイル画像を縦に眺めていけば、ハンドル操作を始めた時点（ハンドル回転を開始した時点）の画像を比較して見ることができる。また、２列目のサムネイル画像を縦に眺めていけば、ハンドル操作をしたことに起因してイベント発生と判断された時点の直前の画像を比較して見ることができ、３列目のサムネイル画像を縦に眺めていけば、その直後の画像を比較して見ることができる。更に、４列目のサムネイル画像を縦に眺めていけば、ハンドル操作をやめた時点（ハンドル回転を終了した時点）の画像を比較して見ることができる。

【0136】

更に、第３実施例のように、ハンドル回転が開始された時点のサムネイル画像を作成するのは、以下のように、ハンドル操作と加速度事象とが連動していない場合に利点を奏する。
例えば、車両が衝突した時や坂道を走行した時などのように、ハンドル操作とは無関係に加速度が発生する場合と、急ハンドルなどのハンドル操作により加速度が発生する場合とがある。第３実施例の１枚目（上記の図５の左から１列目）のサムネイル画像は、ハンドル回転が開始された時点のものであるが、ハンドル操作と加速度事象とが連動していない場合がある。
第３実施例によれば、ハンドル回転が開始された時点のサムネイル画像であって、イベント発生と所定の関係性を持つサムネイル画像を表示させることができるので、特に、ハンドル回転が開始された時点と加速度事象の出現開始時点とが一致しないような場合に、加速度事象の出現開始時点のサムネイル画像ではなく、ハンドル回転が開始された時点のサムネイル画像から、ハンドル回転を開始された時点とイベント発生との関係性について確認し、イベント発生原因や状況把握に役立てることができる。

【0137】

［実施例４］
本実施例４は、車両に衝撃が加わるなどのイベントの事例として、車両衝突による場合である。
図１０は車両衝突の場合の加速度変化を示す図であり、Ｇセンサ１２から出力されたＧデータ（Ｇｘ、Ｇｙの合成値）の時系列的変化を示している。

【0138】

図１０に示すように、時刻ｔ５において、車両が何かと衝突した場合、Ｇセンサ１２では、車両の前後方向の加速度（Ｇｘ）及び左右方向の加速度（Ｇｙ）がそれぞれ検出され、変化する。Ｇセンサ１２からの加速度（Ｇデータ）は、時刻ｔ５の直後から急増し、更に急減するという急増減を繰り返した後、それが急増し、それが閾値加速度Ｇｓ（例えば、０．３Ｇ）になった時（時刻ｔｐ）、第１制御部１１は、それをトリガと認識し、イベントが発生したと判断（判定）し、ＣＣＤカメラ２０が撮像し、常に第１メモリ１０８に循環的に記憶している画像をメモリカード２５に記憶し、また、時刻ｔｐをイベント発生判断時刻データとしてメモリカード２５に記憶するように動作する。

【0139】

具体的には、本実施例４でも、実施例１，２，３と同様に、時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢをメモリカード２５に記憶するように制御する。

【0140】

時刻ｔｐの以降も加速度は増え、極大値（最大値）になってから急減し、ゼロ点を経て、極小値（最小値）になってから急増し、再び、ゼロ点を経て、再び、極大値（最大値）になってから急減し、再び、ゼロ点を経て、急増減を繰り返した後、車両が停止し、加速度が収束した時点（ｔ６）で、ゼロになる。

【0141】

図１０において、時刻ｔ５から時刻ｔｐまでの期間Ｔｈは「大きな衝撃前の衝撃の期間」であり、この期間Ｔｈには、車両のバンパーやガードレールなどの効果による衝撃軽減による衝撃波形が現れる。また、時刻ｔｐから時刻ｔ６までの期間Ｔｉは「衝撃の挙動」の期間である。

【0142】

＜サムネイル画像の作成及び表示（実施例４）＞
図１１は、実施例４に係るサムネイル画像の作成及び表示処理を示すフローチャートであり、実施例１，２，３と同様に、運転支援装置３０の第２制御部３１のＲＡＭにＨＤＤ等からロードされた制御プログラムにしたがってＣＰＵが実行することにより実現され、第２操作部３４の運転支援ソフトの起動の操作に基づいて開始される。また、図１１に示すフローチャートの処理が開始される時点で、スロットを構成する第２ＩＦ３６にドライブレコーダ１０において画像が記憶されたメモリカード２５が挿入されているものとする。

【0143】

ステップＳ４１において、第２制御部３１は、メモリカード２５に記憶されたデータからイベント発生判断時刻データ（ｔｐ）を取得する。続いてステップＳ４２において、メモリカード２５に記憶されたデータの中から、車両信号取得部２１から出力された車速（車速データ）を取得する。更にステップＳ４３において、メモリカード２５に記憶されたデータの中から、Ｇセンサ１２の検出Ｇデータ（Ｇｘ、Ｇｙ）を取得する。

【0144】

次にステップＳ４４では、第２制御部３１は、図３（ｂ）に示す時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢの中から、車両衝突に関連する複数の異なるタイミングに撮影された複数の画像を選択する。
具体的には、この制御プログラムには、図３（ｂ）に示す時刻ｔｐの前のＴＡ秒間の画像ＰＡと、時刻ｔｐの後のＴＢ秒間の画像ＰＢの中から、車両衝突した時刻ｔ５の直後のＧデータの大きさ（値）が急増減を繰り返して２回目の極大値になった時点ｔｐ３（すなわち、バンパー、ガードレールなどの反動による車両の加速度挙動が生まれる時点）に撮像された画像を「第１画像」として選択し、時刻ｔｐの直前（所定時間ＴＣ前、例えば、０．２秒前）に撮影された画像を「第２画像」として選択し、時刻ｔｐの直後（所定時間ＴＣ後、例えば、０．２秒後）に撮影された画像を「第３画像」として選択し、車速がゼロとなった時刻ｔ６（すなわち、加速度挙動が収束した時点）に撮像された画像を「第４画像」として選択するといった制御処理がプログラムされている。第２制御部３１は、このような制御プログラムに従って、画像ＰＡ及び画像ＰＢの中から第１〜第４画像の選択制御を行う。

【0145】

なお、所定時間ＴＣは、例えば、０．２秒と設定することが可能であるが、アプリケーションに応じて、０秒を含め最適な値を選択することができる。
また、上記した時刻ｔ５の直後、時刻ｔｐの直前・直後、時刻ｔ６の他に、加速度が極大値（最大値）になった時点、その直前・直後や、加速度が極小値（最小値）になった時点、その直前・直後に撮像された画像を選択してもよい。

【0146】

次にステップＳ４５では、第２制御部３１は、第２制御部３１内のＲＯＭに格納されて制御プログラムに従って、画像処理部３７に対して、ステップＳ４４において選択された「第１〜第４画像」から第１〜第４サムネイル画像を作成させる画像処理を行わせる。

【0147】

続くステップＳ４６では、第２制御部３１は、第２制御部３１内のＲＯＭに格納されて制御プログラムに従って、表示処理部３８に対して、ステップＳ４５において作成された第１〜第４サムネイル画像を表示部３２に表示させる表示処理を行わせる。具体的には、図５に示すようにサムネイル画像をマトリックス構造に配置させて同一画面上に一覧表示させる。
これで１つのイベントに関するサムネイル画像作成及び表示処理を終了する。

【0148】

以上のように本実施例４の運転支援装置３０では、次のような利点を奏する。すなわち、
車両に衝撃が加わるなどのイベント事例として車両衝突による場合において、車両衝突した時刻ｔ５の直後のＧデータが急増減を繰り返した時点（反動の加速度挙動の時点）に撮像された第１画像、時刻ｔｐの直前に撮影された第２画像、時刻ｔｐの直後に撮影された第３画像、車速がゼロとなった時刻ｔ６（加速度が収束した時点）に撮像された第４画像を選択し、選択された第１〜第４画像から第１〜第４サムネイル画像を作成し、表示部３２に表示させる制御を行う。これにより、車両衝突の場合において、イベント発生時点（時刻ｔｐ）の前後の所定期間が撮影されたイベント単位画像の中の異なる時点で、特に、車両衝突した時刻ｔ５の直後のＧデータが急増減を繰り返した時点（反動の加速度挙動の時点）や車速がゼロとなった時刻ｔ６（加速度が収束した時点）を含む時点に撮影された第１〜第４画像に対応する第１〜第４サムネイル画像を確認することにより、イベント事例として車両衝突による場合に記憶されたイベント単位画像の内容を容易に確認することができ、車両衝突が発生する原因や状況を把握し易い。

【0149】

例えば、イベント発生ごとに記憶された多数のイベント単位画像の中から車両衝突に関係するイベント単位画像を見つける際に、そのイベント単位画像に関連する１つの時点のサムネイル画像から当該イベント単位画像の内容を確認して、車両衝突に関係するイベント単位画像を探す場合に比較して、求める車両衝突に関係するイベント単位画像をサムネイル画像から簡単に見つけることができる。

【0150】

また、図５に示す１６個のサムネイル画像の左から１列目のサムネイル画像を縦に眺めていけば、車両衝突した時点の画像を比較して見ることができる。また、２列目のサムネイル画像を縦に眺めていけば、車両衝突に起因してイベント発生と判断された時点の直前の画像を比較して見ることができ、３列目のサムネイル画像を縦に眺めていけば、その直後の画像を比較して見ることができる。更に、４列目のサムネイル画像を縦に眺めていけば、車速がゼロとなった時点の画像を比較して見ることができる。

【0151】

＜実験事例＞
図１２は、図１０に示す実施例４に係る車両衝突の場合の加速度変化に関連して、車対車の衝突の場合の加速度変化の実験事例を示す図であり、Ｇセンサ１２から出力されたＸ軸方向（車両の前後方向）の検出加速度Ｇｘの値、Ｙ軸方向（車両の左右方向）の検出加速度Ｇｙの値、Ｚ軸方向（車両の上下方向）の検出加速度Ｇｚの値を、それぞれの時系列的変化として示している。

【0152】

この実験事例では、図１２に示すように、時刻ｔ７において、車両が何かと衝突した場合、時刻ｔ７の直後からＧｘの値、Ｇｙの値、Ｇｚの値が比較的短い周期で急増減を繰り返した後、Ｇｘの値が閾値加速度Ｇｓ（例えば、１．０）になった時（時刻ｔｐ）、トリガと認識され、イベントが発生したと判断される。
時刻ｔｐの以降、Ｇｘの値は、やや大きくなることがあるが、やがてゼロ値近くに収束する（時刻ｔ８）。また、時刻ｔｐの以降、Ｇｙ，Ｇｚの値は比較的小さく、やがて収束する。

【0153】

図１２において、時刻ｔ７から時刻ｔｐまでの期間Ｔｊは、図１０の期間Ｔｈと同じく、「大きな衝撃前の衝撃の期間」であり、この期間Ｔｊには、車両のバンパーやガードレールなどの効果による衝撃軽減による衝撃波形が現れる。また、時刻ｔｐから時刻ｔ８までの期間Ｔｉは、図１０の期間Ｔｉと同じく、「衝撃の挙動」の期間であり、この期間Ｔｋには、衝撃後の反動で車両が動く。

【0154】

＜表示事例＞
図１３は、図１２に示す実験事例に係るサムネイル画面の表示事例を示す図である。
この表示事例は、ドライブレコーダ１０内に装着され、カメラ画像や画像関連情報を含む運転情報が記録されたメモリカード２５を取り出して、運転支援装置３０の表示部３２に表示させているものである。
図１３において、縦４行×横４列のマトリックス構造に配置されて同一画面上に一覧表示された１６個のサムネイル画像は、行ごとに、１つのイベントに関するイベント単位画像７１，７２，７３，７４を表示し、また、列ごとに、同一時点（正確には、イベントごとにイベント発生時刻ｔｐに対して相対的に同一となる時点）に撮影された画像から作成された時点単位画像７１，７２，７３，７４を表示している。

【0155】

次に、上記のようにしてマトリックス構造に配置された形で、サムネイル画像を一覧表示させる方法について、以下に説明する。
使用者は、まず、図１３に示す表示画像の右上のプレイリスト９０の中から、第２操作部２０４によって表示したい複数のイベント（ここでは４つ）のファイル９１，９２，９３，９４を選択する。次に、選択されたイベントのファイル９１，９２，９３，９４に対応するイベント単位画像が読み込まれ、読み込まれたファイルに基づいて、図４にフローチャートの処理手順に従ってサムネイル画像の作成及び表示処理が行われ、サムネイル画像がマトリックス構造に配置されて同一画面上に一覧表示される。

【0156】

図１３の表示事例において、行ごとに表示されたイベント単位画像７１は、ファイル９１のイベントについての４つの時点（すなわち、［１］イベント発生時刻ｔｐのＴＡ秒前であるイベント発生時点、［２］時刻ｔｐの直前（イベント発生直前）、［３］時刻ｔｐの直後（イベント発生直後）、［４］時刻ｔｐのＴＢ秒であるイベント検知終了時点に、それぞれ撮影された画像から作成したサムネイル画像を表示している。
同様に、イベント単位画像７２はファイル９２のイベントについての上記の４つの時点のサムネイル画像を表示し、イベント単位画像７３はファイル９３のイベントについての上記の４つの時点のサムネイル画像を表示し、イベント単位画像７４はファイル９４のイベントについての上記の４つの時点のサムネイル画像を表示している。

【0157】

図１３の表示事例において、列ごとに表示された時点単位画像８１は、イベント単位画像７１，７２，７３，７４のそれぞれ４個のサムネイル画像の中の［１］イベント発生時刻ｔｐのＴＡ秒前であるイベント発生時点に撮影された画像から作成したサムネイル画像を表示している。
同様に、時点単位画像８２は、イベント単位画像７１，７２，７３，７４のそれぞれ４個のサムネイル画像の中の［２］イベント発生時刻ｔｐの直前（イベント発生直前）に撮影された画像から作成したサムネイル画像を表示し、時点単位画像８３は、イベント単位画像７１，７２，７３，７４のそれぞれ４個のサムネイル画像の中の［３］イベント発生時刻ｔｐの直後（イベント発生直後）に撮影された画像から作成したサムネイル画像を表示し、時点単位画像８４は、イベント単位画像７１，７２，７３，７４のそれぞれ４個のサムネイル画像の中の［４］イベント発生時刻ｔｐのＴＢ秒後であるイベント検知終了時点に撮影された画像から作成したサムネイル画像を表示している。

【0158】

＜変形例＞
本発明は、上述した本発明の実施形態の記載内容に限定されず、種々の変形が可能である。その変形例としては、例えば、次のように実施しても良い。

【0159】

（１）上述した実施形態では、Ｇセンサ１２から出力されたＧデータの値（大きさ）が閾値加速度Ｇｓになった時（時刻ｔｐ）をトリガと認識し、イベントが発生したと判断しているが、これに限らず、例えば、ジャイロセンサ１３から出力された角加速度データや気圧センサ１４から出力された気圧・高度データの値（大きさ）が所定値になった時をトリガと認識し、イベントが発生したと判断してもよい。また、記録された映像を解析した結果からイベントが発生したと判断してもよい。
その他、第１操作部１７の緊急スイッチが押された時、外部ポートからの信号入力があった時、及びＡＶＭ−ＥＣＵ（Automatic Vehicle Monitoring − Engine Control Unit）などの外部機器からの通信（例えば、ＲＳ−２３２Ｃ）によりコマンドを受信した時などをイベント発生時としてもよい。

【0160】

（２）上述した実施形態では、１回のイベント毎ごとに記憶された所定期間の画像の中から、急ブレーキ、急ハンドル、車両衝突といったイベントごとに、４つの時点に撮影された第１〜４画像を選択して、第１〜第４サムネイル画像を作成しているが、これに限らず、４つの時点以外の複数の異なる時点に撮影された複数の画像を選択して、選択された画像に対応するサムネイル画像を作成してもよい。また、複数の異なる時点については、イベントの種類によって、種々の組み合わせとするとよいが、イベントの特徴が現れる時点の組み合わせ（所定期間の中の特定期間）とすることが好ましい。
イベントの特徴が現れる時点の組み合わせは、画像データと共にメモリカード２５に記憶された「車両の挙動を検出したデータ」や「車両の機能状態に関するデータ」といった各種データを、単独あるいは組み合わせて使用して、それらのデータに基づいて、的確なタイミングに撮影された複数の画像が選択され、選択された画像に対応するサムネイル画像を作成されるようにするとよい。

【0161】

「車両の挙動を検出したデータ」としては、例えば、加速度データ、角加速度データ、気圧・高度データ、映像解析データなどとするとよい。また、「車両の機能状態に関するデータ」としては、例えば、車両運転時のブレーキ、ウインカ−、アクセル、ハンドル回転、シフトレバー位置、サイドブレーキのいずれかの操作に関するデータや、車両故障診断システムであるＯＢＤ（On Board Diagnosis）、車載ＬＡＮであるＣＡＮ（Controller Area Network）から得られるデータとするとよい。

【0162】

（３）上述した実施形態では、Ｇデータとして、Ｘ軸方向（車両の前後方向）の成分加速度（Ｇデータ）Ｇｘと、Ｙ軸方向（車両の左右方向）の成分加速度（Ｇデータ）Ｇｙの合成値を用いてイベントの発生を判断しているが、これに限らず、各成分加速度（Ｇｘ，Ｇｙ）を個々に用いてイベントの発生を判断するようにしてもよい。例えば、Ｇｘが所定の閾値を越えた後、Ｇｙが所定の閾値を所定時間内に超えた場合など、各成分の値（大きさ）の変化パターンが所定のパターンを採った場合にトリガと認識し、イベントが発生したと判断するようにしてもよい。また、Ｇｘ，Ｇｙの他にＺ軸方向（車両の上下方向）の成分加速度Ｇｚ等も加味してイベントの発生を判断するようにしてもよい。

【0163】

（４）上述した実施形態に限らず、イベントが発生したと判断するのに用いた情報（例えば、急ハンドルによる車両の左右方向のＧデータ（Ｇｙ））と異なる情報（例えば、急ブレーキによる車両の前後方向のＧデータ（Ｇｘ））が所定値（例えば、極大値など）になった時点に撮像された画像を選択し、サムネイル画像を作成してもよい。これにより、イベントが発生したと判断するのに用いた情報（例えば、急ハンドルによるＧデータ（Ｇｙ））と異なる情報（例えば、急ブレーキによるＧデータ（Ｇｘ））が所定値になった時点の事象に関連するイベント単位映像を簡単に見つけることができる。

【0164】

（５）上述した実施形態に限らず、Ｇデータの値（大きさ）が閾値加速度Ｇｓになってイベントが発生したと判断した時（時刻ｔｐ）からさかのぼって、例えば、Ｇデータが極大値・極小値となる時点、Ｇデータの時系列変化の変曲点となる時点、Ｇデータが短時間に急増減を繰り返すなどの特徴的な変化をする時点といったイベントの発生の原因となったサブイベントの発生時点を推定する時点に撮像された画像を選択し、サムネイル画像を作成してもよい。これにより、例えば、Ｇデータの急増減などの特徴的な変化をする時点など、イベントの発生の原因となったサブイベントの発生時点を推定する時点の事象に関連するイベント単位映像を簡単に見つけることができる。

【0165】

（６）上述した実施形態では、ドライブレコーダ１０は「記録条件が成立したことを示すトリガ」の前後の映像を記録するトリガ記録タイプであるが、これに限らず、例えば、エンジンオンからオフまで常時記録しておき、トリガがかかった映像の位置を特定可能とするための情報を記憶する常時記録タイプとしてもよい。この常時記録タイプのドライブレコーダにおいては、例えば、映像の記録開始時刻情報と、トリガがかかった時刻情報とから、どの映像のどの位置がトリガのかかった位置かを特定するとよい。
上記のトリガ記録タイプのドライブレコーダであれば、例えば、ドライブレコーダによる記録条件が成立したことを示すトリガの発生時点の前後の所定期間に亘って記録された映像を「イベント単位映像」とするとよい。また、上記の常時記録タイプのドライブレコーダであれば、例えば、エンジンオンからオフまでが１記録単位となる映像の中で、トリガの発生時点の前後の所定期間に亘って記録された部分の「イベント単位映像」とするとよい。

【0166】

（７）上述した実施形態では、イベント発生と判断した時刻ｔｐの前後のＴＡ秒間の画像ＰＡ及びＴＢ秒間の画像ＰＢをメモリカード２５に記憶しているが、これに限らず、例えば、エンジンオンからオフまで全時間の画像、あるいは、その全時間の中の限定された時間の画像をメモリカード２５に記憶してもよい。この全時間の中の限定された時間は、イベント発生と判断した時刻ｔｐを含む時間とするとよい。
また、上記した時刻ｔｐ前後のＴＡ秒及びＴＢ秒の合計時間は、イベント発生ごとに一定時間としてもよいが可変時間としてもよい。ＴＡ秒及びＴＢ秒の合計時間は、イベントの発生の原因を特定可能とするのに十分な期間とするとよい。特に、イベントの種類に応じてＴＡ秒及びＴＢ秒の合計時間は異なる時間とするとよい。

【0167】

（８）上述した実施形態では、イベント発生と判断した時刻ｔｐの前後のＴＡ秒の時間とＴＢ秒の時間は同一の時間（実施例では、前は１２秒、後は１２秒）としているが、これに限らず、例えば、異なる時間とするとよい。特に、時刻ｔｐの前のＴＡ秒の時間を長くし、後のＴＢ秒の時間を短く（例えば、前は１５秒、後は５秒）するとよい。

【0168】

（９）上述した実施形態では、イベント発生と判断した時刻ｔｐの前後のＴＡ秒間の画像ＰＡ及びＴＢ秒間の画像ＰＢの中から、ＴＡ秒前、直前（ＴＣ秒前）、直後（ＴＣ後）、ＴＢ秒後に撮影された第１〜第４画像を選択し、選択された第１〜第４画像から第１〜及び第４サムネイル画像を作成しているが、これに限らず、例えば、第１〜第４画像の中の２あるいは３枚の画像を組み合わせて選択し、あるいは第１〜第４画像の中の１〜４枚のいずれかの枚数の画像とその他の時点の１枚または複数枚の画像とを組み合わせて選択し、選択された画像からサムネイル画像を作成してもよい。

【0169】

（１０）上述した実施形態では、イベント発生と判断した時刻ｔｐの前後の時点に撮影された画像を選択しているが、これに限らず、時刻ｔｐに撮影された画像を選択して、この画像と時刻ｔｐの前後の時点の画像とを組み合わせてもよい。

【0170】

（１１）上述した実施形態では、図５に示すサムネイル画像の表示態様の一例のように、１６個のサムネイル画像が、行ごとに、一つのイベントに関するイベント単位画像を構成し、列ごとに、同一時点の時点単位画像を構成するようにしているが、これに限らず、行と列を入れ替えて、列ごとにイベント単位画像を構成し、行ごとに時点単位画像を構成してもよい。また、行（あるいは列）ごとに、一つのイベントに関するイベント単位画像を構成したときに、1つの行内（あるいは列内）のイベント単位画像を時系列の順番に並ぶように配置するだけで、列ごとに同一時点とはせずに、イベントの種類に応じた時点の画像としてもよい。更に、縦方向４行×横方向４列に限らず、５行×５列や３行×３列など、他の行数及び列数の組み合わせのマトリックス構造に配置されて同一画面上に一覧表示してもよい。更にまた、画面内に表示しきれない場合に、イベントごとに左右にスクロールさせるのではなく、行列を一体としてスクロール表示させるように構成するとよい。

【0171】

（１２）上述した実施形態では、本発明の表示制御システムを運転支援システム（運転支援装置３０）の例で説明したが、各種の電子機器の機能として実施することができる。例えば、ナビゲーション装置、ドライブレコーダ、レーダ探知機及びカーオーディオの機能として組み込んでもよい。

【0172】

（１３）上述した実施形態に限らず、運転支援装置３０の第２制御部３１のＲＯＭ予め記憶されている制御プログラムを、汎用のパーソナルコンピュータ、携帯電話機、スマートフォン、携帯ゲーム機などの携帯端末にダウンロードし、携帯端末に搭載されたコンピュータに、第２制御部３１の制御処理を実行させ、メモリカード２５に記憶された画像や各種データを読み込ませ、読み込ませた画像や各種データから作成されたサムネイル画像を表示させてもよい。

【0173】

（１４）上記の実施形態の各機能は、その機能をコンピュータ読み取り可能なプログラム言語で記述してそのプログラムを、第２制御部３１のコンピュータに実行させることで実現しているが、これに限らず、例えば、プログラムを複数のコンピュータに分散配置し、分散処理するようにしてもよい。

【符号の説明】

【0174】

１０ ドライブレコーダ
１１ 第１制御部
１２ 加速度センサ（Ｇセンサ）
１３ ジャイロセンサ
１４ 気圧センサ
１５ ＧＰＳアンテナ
１６ ＧＰＳレシーバ
１７ 第１操作部
１８ 第１メモリ
１９ 第１ＩＦ（インターフェイス）
２０ ＣＣＤカメラ
２１ 車両信号取得部
２２ 電源部
２５ メモリカード
３０ 運転支援装置
３１ 第２制御部
３２ 表示部
３３ 出力部
３４ 第２操作部
３５ 第２メモリ
３６ 第２ＩＦ（インターフェイス）
３７ 画像処理部
３８ 表示処理部
５１〜５４，７１〜７４ イベント単位画像
６１〜６４，８１〜８４ 時点単位画像
９０ プレイリスト
９１〜９４ ファイル

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】