特許 5962898 運転評価システム、運転評価方法、及び運転評価プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5962898

(24)【登録日】2016年7月8日

(45)【発行日】2016年8月3日

(54)【発明の名称】運転評価システム、運転評価方法、及び運転評価プログラム

(51)【国際特許分類】

   G08G 1/00 20060101AFI20160721BHJP

   G06Q 50/30 20120101ALI20160721BHJP

   G09B 19/00 20060101ALI20160721BHJP

【ＦＩ】

   G08G1/00 D

   G06Q50/30

   G09B19/00 H

【請求項の数】20

【全頁数】18

(21)【出願番号】特願2012-72996(P2012-72996)

(22)【出願日】2012年3月28日

(65)【公開番号】特開2013-206031(P2013-206031A)

(43)【公開日】2013年10月7日

【審査請求日】2015年2月9日

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100077838

【弁理士】

【氏名又は名称】池田 憲保

(74)【代理人】

【識別番号】100129023

【弁理士】

【氏名又は名称】佐々木 敬

(72)【発明者】

【氏名】内村 淳

(72)【発明者】

【氏名】桐山 良雄

(72)【発明者】

【氏名】高橋 勝彦

【審査官】 田中 純一

(56)【参考文献】

【文献】 特開２０１２−０２７６２３（ＪＰ，Ａ）

【文献】 特開２００１−１８０５３８（ＪＰ，Ａ）

【文献】 特開２００６−２４３２４８（ＪＰ，Ａ）

【文献】 特開２０１０−０４８６５５（ＪＰ，Ａ）

【文献】 特開２０１０−０９２２３８（ＪＰ，Ａ）

【文献】 特開２００６−３３３４５１（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０８Ｇ １／００ − ９９／００

Ｇ０９Ｂ １／００ − ９／５６

Ｇ０９Ｂ １７／００ − １９／２６

Ｇ０７Ｃ １／００ − １５／００

Ｇ０６Ｆ １９／００ − １９／２８

Ｇ０６Ｑ １０／００ − ５０／２０

Ｇ０６Ｑ ５０／２６ − ９９／００

(57)【特許請求の範囲】

【請求項1】

車両に搭載された撮像手段で記録された動画像を記憶する動画像格納手段と、
前記動画像格納手段に記録された動画像から運転評価に用いる基準対象を抽出すると共に、少なくとも抽出位置を出力する画像認識手段と、
前記画像認識手段で出力された抽出位置を運転評価に用いる評価用ログとして記憶するログ格納手段と、
前記動画像格納手段に記録された動画像を評価する際に、前記ログ格納手段に格納された基準対象の少なくとも抽出位置に基づいて、動画像に含まれる基準対象が現れる区間を残しつつ他の区間の再生時間を短縮することで、評価する動画像全体の再生処理時間を短縮させて該当動画像を再生処理するログ可視化手段と、
を備え、
記録した動画像の運転評価を目視で行ない得ることを特徴とする運転評価システム。

【請求項2】

前記ログ可視化手段は、動画像を取得した車両の動画像が記録された間の車両側から得られる運転データを取得して、目視による評価を行う際に、再生する動画像とともに対応する運転データに基づき生成された運転時に行われた操作を、動画像とともに合わせて提示する
ことを特徴とする請求項１記載の運転評価システム。

【請求項3】

前記ログ可視化手段は、目視による評価を行う際に、動画像から抽出した基準対象及び／又は評価基準位置を示す強調表示を、動画像とともに合わせて提示する
ことを特徴とする請求項１または２に記載の運転評価システム。

【請求項4】

システム内に、前記ログ可視化手段を少なくとも有する下位装置と、上位サーバとを具備し、
前記下位装置は、前記ログ可視化手段を用いた運転者毎の運転評価を行った後に、評価結果を前記上位サーバに送付する通信手段を備え、
前記上位サーバは、個々の運転者の評価結果を前記下位装置から収集して、全体としての分析管理を行う
ことを特徴とする請求項１ないし３の何れか一項に記載の運転評価システム。

【請求項5】

システム内に、少なくとも前記ログ可視化手段を有する上位サーバを具備し、
前記上位サーバは、評価対象となる関連データを受け付けて、個々の運転者の運転評価を該当動画像から前記ログ可視化手段を用いて目視で行ない得ると共に、個々の運転者の評価結果を収集して、全体としての分析管理を行う
ことを特徴とする請求項１ないし３の何れか一項に記載の運転評価システム。

【請求項6】

システム内に、前記画像認識手段および前記ログ格納手段を少なくとも有する下位装置と、少なくとも前記ログ可視化手段を有する上位サーバとを具備し、
前記下位装置は、前記画像認識手段による画像認識処理で得て前記ログ格納手段に登録されているログを前記上位サーバに送付する通信手段を備え、
前記上位サーバは、評価対象となる関連データを受け付けて、個々の運転者の運転評価を該当動画像から前記ログ可視化手段を用いて目視で行ない得ると共に、個々の運転者の評価結果を収集して、全体としての分析管理を行う
ことを特徴とする請求項１ないし３の何れか一項に記載の運転評価システム。

【請求項7】

前記ログ可視化手段は、評価時間の指定を受けて動画像を評価する際に、前記再生処理過程で、前記ログ格納手段に格納された基準対象の少なくとも抽出位置と基準対象の優先付け度合に基づいて、未再生区間の動画像に含まれる、優先付け度合がより高い基準対象が現れる区間を優先して残しつつ他の区間の再生時間を短縮することで、評価する動画像全体の再生処理時間を指定された評価時間に近づける調整を実施することを特徴とする請求項１ないし６の何れか一項に記載の運転評価システム。

【請求項8】

個々の運転者の運転評価を目視で行った評価者による評価を、個々の評価結果と その評価結果で用いられた運転データ及び基準対象の抽出位置との関係を反映させて自動判定を行う評価者評価部を更に備えることを特徴とする請求項１ないし７の何れか一項に記載の運転評価システム。

【請求項9】

個々の運転者の運転評価を、運転データ及び基準対象の抽出位置との関係を反映させた評価者の評価に基づいて、補正する評価補正部を更に備えることを特徴とする請求項１ないし８の何れか一項に記載の運転評価システム。

【請求項10】

車両に搭載された撮像手段で記録された動画像を記憶する工程と、
記録された動画像から運転評価に用いる基準対象を画像認識処理により抽出すると共に、少なくとも抽出位置を運転評価に用いる評価用ログとして記憶する工程と、
記録された動画像を評価する際に、前記評価用ログに記録されている基準対象の少なくとも抽出位置に基づいて、動画像に含まれる基準対象が現れる区間を残しつつ他の区間の再生時間を短縮することで、評価する動画像全体の再生処理時間を短縮させる処理を行い該当動画像を再生する工程と、
を情報処理システムに行わせて、記録された動画像の運転評価を目視で行なうことを特徴とする運転評価方法。

【請求項11】

動画像を取得した車両の動画像が記録された間の車両側から得られる運転データを記憶する工程を更に備え、
目視による評価を行う際に、再生する動画像とともに対応する運転データに基づき生成された運転時に行われた操作を、動画像とともに合わせて提示する
ことを特徴とする請求項１０記載の運転評価方法。

【請求項12】

目視による評価を行う際に、動画像から抽出した基準対象及び／又は評価基準位置を示す強調表示を、動画像とともに合わせて提示する
ことを特徴とする請求項１０または１１に記載の運転評価方法。

【請求項13】

目視による評価を行った後に、個々の運転者の運転評価を目視で行った評価者による評価を、個々の評価結果と その評価結果で用いられた運転データ及び基準対象の抽出位置との関係を反映させて自動判定を行う工程を更に備えることを特徴とする請求項１０ないし１２の何れか一項に記載の運転評価方法。

【請求項14】

目視による評価を行った後に、個々の運転者の運転評価を、運転データ及び基準対象の抽出位置との関係を反映させた評価者の評価に基づいて、補正する工程を更に備えることを特徴とする請求項１０ないし１３の何れか一項に記載の運転評価方法。

【請求項15】

情報処理システムの制御部を、
車両に搭載された撮像手段で記録された動画像を記憶する動画像格納手段と、
前記動画像格納手段に記録された動画像から運転評価に用いる基準対象を抽出すると共に、少なくとも抽出位置を出力する画像認識手段と、
前記画像認識手段で出力された抽出位置を運転評価に用いる評価用ログとして記憶するログ格納手段と、
前記動画像格納手段に記録された動画像を評価する際に、前記ログ格納手段に格納された基準対象の少なくとも抽出位置に基づいて、動画像に含まれる基準対象が現れる区間を残しつつ他の区間の再生時間を短縮することで、評価する動画像全体の再生処理時間を短縮させて該当動画像を再生処理するログ可視化手段、
として、記録した動画像の運転評価を目視で行ない得るように動作させることを特徴とする運転評価プログラム。

【請求項16】

前記ログ可視化手段を、動画像を取得した車両の動画像が記録された間の車両側から得られる運転データを取得して、目視による評価を行う際に、再生する動画像とともに対応する運転データに基づき生成された運転時に行われた操作を、動画像とともに合わせて提示する
ように動作させることを特徴とする請求項１５記載の運転評価プログラム。

【請求項17】

前記ログ可視化手段を、目視による評価を行う際に、動画像から抽出した基準対象及び／又は評価基準位置を示す強調表示を、動画像とともに合わせて提示する
ように動作させることを特徴とする請求項１５または１６に記載の運転評価プログラム。

【請求項18】

情報処理システムの制御部を、
個々の運転者の運転評価を目視で行った評価者による評価を、個々の評価結果と その評価結果で用いられた運転データ及び基準対象の抽出位置との関係を反映させて自動判定を行う評価者評価手段
として更に動作させることを特徴とする請求項１５ないし１７の何れか一項に記載の運転評価プログラム。

【請求項19】

情報処理システムの制御部を、
個々の運転者の運転評価を、運転データ及び基準対象の抽出位置との関係を反映させた評価者の評価に基づいて、補正する評価補正手段
として更に動作させることを特徴とする請求項１５ないし１８の何れか一項に記載の運転評価プログラム。

【請求項20】

前記ログ可視化手段を、評価時間の指定を受けて動画像を評価する際に、前記再生処理過程で、前記ログ格納手段に格納された基準対象の少なくとも抽出位置と基準対象の優先付け度合に基づいて、未再生区間の動画像に含まれる、優先付け度合がより高い基準対象が現れる区間を優先して残しつつ他の区間の再生時間を短縮することで、評価する動画像全体の再生処理時間を指定された評価時間に近づける調整を実施するように機能させることを特徴とする請求項１５ないし１９の何れか一項に記載の運転評価プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、映像を伴う車両の運転記録を収集して、その運転記録を運転評価者が目視で確認する運転評価システムに関し、詳しくは、運転評価業務の効率化を図れる運転評価システムに関する。

【背景技術】

【0002】

昨今、様々な環境で、自動車やバイク、自転車などの運転評価が行われている。

【0003】

運転評価には、ドライブレコーダなどからドライブ記録を収集して 収集した記録を評価者が目視で良し悪しを判定する評価方法と、燃費やブレーキタイミングなどのデータから機械的に判定する評価方法がある。

【0004】

運転評価に関連する技術としては、例えば特許文献１ないし特許文献４が挙げられる。
特許文献１には、図１１に示すように、車載装置と情報処理センターとで構成された運転評価システムが記載されている。この運転評価システムは、収集した情報を元に機械的に運転評価を行うシステムであり、また、今後の運転時に気を付けるべき場所（チェックポイント）を算定して、運転者に運転の改善を促すように構成されている。
より詳細に説明すれば、自動車に搭載される車載装置は、各種車載センサやＥＵＣ（Electronic Control Unit）などから取得した車両情報（アクセル開度やエンジン回転数、車速、加速度、燃料消費量など）と、カーナビシステムから取得したナビ情報（走行経路、道路形状、道路勾配など）とを用いて、自車両が走行した所定の走行区間におけるドライバーの運転を評価してデータ化し、そのデータから、運転者に運転の改善を促すようにチェックポイントを算定して、そのチェックポイントについて運転者にアドバイス表示を通知する。また、各情報処理を情報処理センター側で行ってもよいことが記載されている。

【0005】

引用文献２は、出願人による発明であり、自車両に搭載された撮像手段から動画像を取得して、道路環境情報（道路標識や路面標識、信号の状態、歩行者など）を抽出する画像認識処理を行って上位サーバに通知すると共に、他の自動車で取得された道路環境情報を上位サーバから受け付けてリアルタイムに 撮像手段に写らない範囲を含む道路環境情報を 運転者に提示するシステムを記載している。このシステムによって、動画像に映った道路標識等から 情報化しきれていない交通ルールを情報化して、他の車両で取得された道路環境情報を含めてリアルタイム的に運転者に提示できる。

【0006】

また、特許文献３にも、一旦停止義務を生ずる停止線を抽出する画像認識技術の一例が記載されている。

【0007】

また、特許文献４には、特許文献１と同様に動画像を用いずに、運転評価を行う運転評価装置が記載されている。この運転評価装置では、運転が上手な方と被評価者との運転（走行位置）とを対比して提示して、直すべきポイントを被評価者に伝達している。

【先行技術文献】

【特許文献】

【0008】

【特許文献1】特開２０１１−０８１７４３号公報

【特許文献2】特許第４７５２８３６号

【特許文献3】特願２００９−０９９１２５号公報

【特許文献4】特開２００６−２４３２４８号公報

【発明の概要】

【発明が解決しようとする課題】

【0009】

運転者の運転評価には、道路標識や路面標識、信号の状態なども反映させることが重要である。このような運転評価は、従前から同乗や追走によって車両運転者と共に情報化しきれていない交通ルールを含めて行われている。

【0010】

また、昨今は、ドライブレコーダを用いて運転動画像を全て録画して、その動画像を視て運転評価を行う方法も行われている。

【0011】

引用文献１に記載されているような機械的に行なう運転評価方法では、法定速度の遵守や燃費の効率化に大きな改善が望める。他方、改善する点が多くあり、例えば、引用文献１の運転評価システムでは、車両情報とナビ情報とに基づく評価であり、引用文献２で動画像から検出しているような道路環境情報を評価に反映できない。これでは、例えば、燃費の評価のように、黄色信号での交差点侵入や一旦停止線の無視などを行った方が、交通ルールを遵守するよりも評価結果として良い結果を得られる結果となっている。

【0012】

このように動画像などの目視から得られる運転評価は、情報化済みの既知情報に基づく運転評価に比べて、運転の適正化に有効な手段となり得る。

【0013】

しかしながら、このような、同乗や追走、録画した動画像に基づく運転者の運転評価にも問題がある。例えば、運転時間に対して同一時間の評価時間がかかる問題が挙げられる。

【0014】

また、動画像などによる運転評価には、個々の運転評価の定量化にも課題があり、評価者毎に評価に差が生じている現状もある。

【0015】

また、運転評価に掛かる様々なコストを抑え、教官による指導のように限定的に行なうことなく、日常時的に運転評価を継続的に行い得るシステムが望まれる。加えて、多くの運転者の運転評価を継続的に行い得るシステムが望まれる。

【0016】

また、多数台を運用する際に車載装置を安価に抑えたいとの要求もある。

【0017】

加えて、上位サーバへのデータ送信などに掛かる運用コストを低く抑えたいとの要求もある。これは、例えば、通信トラフィックや処理負荷が集中的に発生することを抑えたいとの要求がある。

【0018】

本発明は、上記のような事柄に鑑みて成されたものであり、動画像を参照して行う運転評価を低コストで運用できる運転評価システムの提供を目的とする。

【課題を解決するための手段】

【0019】

本発明に係る運転評価システムは、車両に搭載された撮像手段で記録された動画像を記憶する動画像格納手段と、前記動画像格納手段に記録された動画像から運転評価に用いる基準対象を抽出すると共に、少なくとも抽出位置を出力する画像認識手段と、前記画像認識手段で出力された抽出位置を運転評価に用いる評価用ログとして記憶するログ格納手段と、前記動画像格納手段に記録された動画像を評価する際に、前記ログ格納手段に格納された基準対象の少なくとも抽出位置に基づいて、動画像に含まれる基準対象が現れる区間を残しつつ他の区間の再生時間を短縮することで、評価する動画像全体の再生処理時間を短縮させて該当動画像を再生処理するログ可視化手段と、を備え、記録した動画像の運転評価を目視で行ない得ることを特徴とする。
本発明に係る運転評価方法は、車両に搭載された撮像手段で記録された動画像を記憶する工程と、記録された動画像から運転評価に用いる基準対象を画像認識処理により抽出すると共に、少なくとも抽出位置を運転評価に用いる評価用ログとして記憶する工程と、記録された動画像を評価する際に、前記評価用ログに記録されている基準対象の少なくとも抽出位置に基づいて、動画像に含まれる基準対象が現れる区間を残しつつ他の区間の再生時間を短縮することで、評価する動画像全体の再生処理時間を短縮させる処理を行い該当動画像を再生する工程と、を情報処理システムに行わせて、記録された動画像の運転評価を目視で行なうことを特徴とする。
本発明に係る運転評価プログラムは、情報処理システムの制御部を、車両に搭載された撮像手段で記録された動画像を記憶する動画像格納手段と、前記動画像格納手段に記録された動画像から運転評価に用いる基準対象を抽出すると共に、少なくとも抽出位置を出力する画像認識手段と、前記画像認識手段で出力された抽出位置を運転評価に用いる評価用ログとして記憶するログ格納手段と、前記動画像格納手段に記録された動画像を評価する際に、前記ログ格納手段に格納された基準対象の少なくとも抽出位置に基づいて、動画像に含まれる基準対象が現れる区間を残しつつ他の区間の再生時間を短縮することで、評価する動画像全体の再生処理時間を短縮させて該当動画像を再生処理するログ可視化手段、
として、記録した動画像の運転評価を目視で行ない得るように動作させることを特徴とする。

【発明の効果】

【0020】

本発明によれば、動画像を参照して行う運転評価を低コストで運用できる運転評価システムを提供できる。

【図面の簡単な説明】

【0021】

【図1】第１の実施形態に係る運転評価システム１の機能構成を示すブロック図である。

【図2】車載装置の構成例を示すブロック図である。

【図3】画像認識処理部３０における一時停止箇所の識別方法を例示する画像認識処理フローを示すフローチャートである。

【図4】ログ可視化部４０から出力される画面表示例を示す説明図である。

【図5】第２の実施形態に係る運転評価システム２の機能構成を示すブロック図である。

【図6】第３の実施形態に係る運転評価システム３の機能構成を示すブロック図である。

【図7】第１の実施例に係る運転評価システムを示す説明図である。

【図8】第２の実施例に係る運転評価システムを示す説明図である。

【図9】第３の実施例に係る運転評価システムを示す説明図である。

【図10】第４の実施例に係る運転評価システムを示す説明図である。

【図11】特許文献１に示された車載装置と情報処理センターとで構成される運転評価システムを示すブロック図である。

【発明を実施するための形態】

【0022】

本発明の実施の形態を図１ないし図４に基づいて説明する。
本実施形態では、多数の車両に搭載された車載装置から得られた動画像を収集して、その全てについて目視による安全評価を行えるように構成した運転評価システムを説明する。

【0023】

この運転評価システムでは、個々の車両の運転者は、評価を受ける際に車両を運転時に撮影された動画像を評価者側にデータとして渡し、個々に運転評価を受けることとする。
また、評価者側では評価者を割り当て、渡された多数の動画像に基づいて効率よく個人毎の運転評価を行うこととする。

【0024】

運転評価では、評価に用いる基準対象（停止線や標識など）に基づいた交通ルールが守られているかいるかどうかを重点的に目視でチェックする。また、評価項目として、基準対象が存在することに対する運転動作（通行時の車速や、ブレーキの踏み方など）をチェックすることとする。

【0025】

図１は、実施の一形態の運転評価システム１の機能構成を示すブロック図である。
図１において、本実施形態は、動画像格納部１０と、ログ格納部２０と、画像認識処理部３０と、ログ可視化部４０を含み成る。

【0026】

動画像格納部１０は、記録された動画像データを受け付けて格納する。受け付ける方法はどのような手段を用いてもよい。例えば、半導体記憶媒体を介してもよいし、無線ＬＡＮなどの通信ネットワークを介して動画像データを受け付けてもよい。

【0027】

ログ格納部２０は、画像認識処理部３０から出力される運転評価に用いるログを評価用ログとして格納する。この評価用ログは、動画像格納部１０に格納される動画像データと対応付けられている。

【0028】

画像認識処理部３０は、動画像格納部１０に格納されたている動画像データを画像認識エンジンによる画像認識処理によって分析して、運転評価に用いる基準対象を抽出処理する。

【0029】

基準対象は、道路標識や路面標識、信号の状態、歩行者などを目視評価項目に合わせて適宜抽出する。この抽出処理の際に、基準対象の抽出位置をログ格納部２０に記録する。基準対象の抽出位置は、動画像中での時間的位置、必要に応じて動画像中での空間的位置、実空間での位置などを記録すれば良い。また、標識や停止線、横断歩道などの画像識別と共に、交差点から５ｍ、１０ｍなどの法定ルールを生ずる範囲（位置、座標）や、交差点や学校から○○ｍなどの私的ルールを適用する範囲などを抽出位置として評価用ログとして登録しても良い。

【0030】

ログ可視化部４０は、動画像格納部１０に格納されている動画像を評価者に提示する際に、ログ格納部２０に格納されている評価用ログを用いて動画像に含まれる基準対象が現れるタイミングに重点をおいて、再生処理時間を短縮させながら動画像の内容を再生する。この再生された映像を目視により評価者が確認することによって、個々の運転者の運転を評価する。
評価用ログには、上記したように、行う評価項目に合わせた基準対象の抽出位置が記録されている。基準対象は、重点的に評価すべき範囲、場所、区間、操作を定める基準となる。個々の基準対象がある動画像中の録画位置（視認できる位置や基準対象の位置）から 所定時間前や所定距離前のタイミングから、例えば動画像の再生を標準再生速度とすると共に 他の範囲について早送りやスキップを適宜行って、例えば全てを標準再生速度で再生するよりも高速に時間を進める。
このことによって、標準再生速度での目視評価や、全て倍速で再生して目視評価することに対して、評価精度の維持と共に再生処理時間を短縮させることができる。

【0031】

上記各構成部は、一部を上位サーバに配置して運用することができる。この際には、適宜 通信手段を設けて、インターネットや移動体通信網を介して下位装置と上位サーバとを接続すればよい。

【0032】

図２は、車載装置の構成を例図するブロック図である。
車載装置１００は、撮像部１０１と運転データ収集部１０２と記録部１０３と記憶部１０４を含み成る。本車載装置１００は、所謂 ドライブレコーダであり、記録部１０３によって車両前方の映像や音響をデータ化して動画像ファイル化されると共にアクセル開度や走行速度などの車両情報を動画像に対応するように運転データとしてデータ化されて、その記録データが記憶部１０４に格納される。また、記録部１０３は、必要に応じてナビ情報も取得して対応させて運転データとしてデータ化してもよい。なお、動画像は、ＭＰＥＧなどの動画でもよいし、ＪＰＥＧなどの多数の静止画で構成されても何れでもよい。
記憶部１０４は、半導体メモリ装置で構成され可搬可能である。この記憶部１０４を用いて運転評価システム１に動画像等を入力する。なお、可搬形ＨＤＤ装置や、リライタブルオプティカルディスクなどを用いてもよい。また、無線ＬＡＮインタフェースやＵＳＢインタフェース等の通信インタフェースを介して運転評価システム１に動画像等を入力するようにしてもよい。

【0033】

このように、動画像などのデータは、車両に搭載された車載装置によって記録される。動画像は、運転時の運転者の視点に基づくように録画されることが望ましい。なお、動画像は、１つの撮像範囲のみに限定されない。運転中の複数範囲（例えば前方、後方、車内など）を録画して一体的に扱うようにしてもよい。

【0034】

なお、収集される個々の動画像には、運転者が運転中に認識すべき標識などによる交通規則を伴う基準対象が映像として記録されることとなる。

【0035】

次に、運転評価システム１の処理動作例を説明する。

【0036】

多くの車載装置１００から得られた個々の運転者の運転中の動画像データが動画像格納部１０に順次格納される。
運転評価システム１は、格納された動画像データについて、自動的に又は人間による操作を受けて、逐次 画像認識処理を開始する。

【0037】

画像認識処理の開始を受けて、画像認識処理部３０は、受け付けた動画像データから運転評価に用いる基準対象を抽出処理し、抽出した基準対象に基づく抽出位置をログ内容として評価用ログを生成処理してログ格納部２０に出力する。
この評価用ログには、道路標識や一時停線などの交通規制が反映される。この処理結果により、例えば どの時刻にどのような道路標識や一時停止線などが識別できたかを記録したログファイルが得られる。換言すれば、どの時刻に評価に用いる交通ルールを生ずる基準対象が識別できたかを記録する。また、ログに、どの地点で基準対象を識別したかを記録してもよい。
なお、画像認識処理部３０で行なう詳細な画像認識の処理例について後述する。

【0038】

ログ可視化部４０は、評価者に対して、動画像データと 対応する評価用ログとを用いて、ログを可視化した評価用画面を、動画像データに記録されている時間よりも短縮処理して提示する。

【0039】

この評価用画面を確認する評価者は、画面上に表示される映像を参照して、運転評価に用いる基準対象が発生させる交通規則と、当時の現状（基準対象の見え方や明るさ、周囲状況、など）を考慮するなどして、車両の運転（車速やブレーキタイミングなど）が適正か否かを評価する。

【0040】

この評価時間は、ログ可視化部４０によって、動画像をそのまま確認すること対して、時間的に短縮される。この短縮は、１つの動画像データ（１人の運転者）にかけ得る評価時間を基準として、基準対象が現れるタイミングに重点をおいて短縮区間（早送り区間、スキップ区間）を定める時間基準短縮処理に基づいても良いし、基準対象が現れるタイミングに重点をおいて抽出箇所（抽出数）に対応させて適宜短縮させても良い。また使用する（評価する）基準対象を任意に選択できるようにしてもよい。この選択は、基準対象の位置や種類に応じて選択できることが望ましい。

【0041】

なお、評価者の習熟度などを考慮すれば、基準対象が現れない短縮区間と共に、重点をおく基準対象が現れる区間でも所要に早送りやコマ送りなどの時間短縮を図ることとしても良い。

【0042】

このように本実施形態によれば、目視確認作業の効率化が図れる。
このため、時間当たりの動画像の処理数が増加すると共に、収集された個々の動画像に含まれている運転者毎が運転中に認識すべき標識などの評価者による確認精度が向上する。

【0043】

また、標識が視認できないこと（他車の陰や破損など）などを含めて、評価要ログに含まれている重点的に評価すべき範囲（法定ルールや私的ルールの範囲）を用いて運転評価に反映させることができる。

【0044】

ここで、画像認識処理部３０で行なう画像認識の一処理例とログ可視化部４０から出力される画面表示例を説明する。

【0045】

図３に示す画像認識処理は、画像認識エンジンによる一時停止箇所の識別処理である。
図示するように、画像認識エンジンによって処理部は、入力された動画像から画像を順次１枚ずつ取得し、「止まれ」標識の検出処理と停止線の検出処理とを並列的に実行して、両検出結果を統合して止まるべき位置を識別する。

【0046】

処理結果として、要一時停止箇所を識別できれば基準対象および抽出位置を識別できるフラグを記録する。このフラグに画像中の位置や交通規則が及ぶ範囲（時間や距離）などを紐付けしてもよいし、他の方法で情報を付与してもよい。

【0047】

このような画像識別処理を評価に反映させる内容に沿って並列的に行なえばよい。抽出する処理内容は、重要視する評価項目と関連する基準対象を抽出するように選定すれば良い。また、人間が 動画像から抽出処理する基準対象の画像上での位置（範囲）を任意に選定することによって、処理内容が定まるようにしてもよい。例えば、歩行者について、横断歩道近傍や、公園入り口近傍では基準対象として識別し、他では認識を行わないようにすることで、処理リソース量を調整できる。

【0048】

なお、一時停止箇所の識別処理としても複数の一時停止箇所の識別処理を並列的に行って、識別精度を高めることが望ましい。例えば、上記識別方法と共に、路面標識と停止線とを識別して一時停止箇所の識別精度を高めることができる。また、画像識別時に、動画像と同時に録音された音響を用いて、事故や緊急車両などを基準対象と選定できるように処理しても良い。

【0049】

図４は、ログ可視化部４０から出力される画面表示例を示す説明図である。
図示しているように、評価用画面には、ログ可視化部４０によって画像認識によって基準対象（本画像では停止線）などが元画像にオーバレイされて強調表示される。
この基準対象は、画像識別して得た評価用ログと対応しており、「止まれ」標識と「停止線」との検出結果に基づいて、止まるべきか止まるべきでないかを判断されたフラグ情報と紐付いている。

【0050】

この表示画面は、停止線が所定位置（所定距離）になった画面であり、フラグに基づいて図示するフラグ情報（行なうべき運転・操作：重点評価項目）が表示される。

【0051】

また、後述する実施形態では、ログ可視化部４０によって、現実に行われた運転操作も提示する。

【0052】

また、評価画面の操作入力として、評価者に容易に処理結果が見られるよう、画像コマ送り／戻り機能や、早送り（次のフラグまで自動早送り）機能、指定タイミング（iniファイルなどにより設定）での静止機能などを適宜 提供しても良い。この際、ログ可視化部４０は、指定された評価時間がある場合に、未再生区間の評価の時間を、停止や巻き戻しに要した時間を取り戻させるように、調整する再時間基準短縮処理を行うこととしても良い。換言すれば、指定された評価時間で終了するように、残りの基準対象が現れるタイミングに重点をおいて再生処理時間を再調整する。この際に、基準対象の優先付けを予め登録しておき、優先度に基づいて残す基準対象や再生速度を調整する処理を行えばよい。

【0053】

このように運転評価システム１を運用することによって、評価精度を維持しつつ、運転評価時間を精度よく短縮できる。換言すれば、様々なコストを抑えて多くの運転評価を行える。

【0054】

次に、第２の実施形態を説明する。
第２の実施形態では、多数の車両に搭載された車載装置から得られた動画像を収集して、その全てについてより簡便に目視による安全評価を行えるように構成した運転評価システムを説明する。

【0055】

図５は、第２の実施形態の構成を示すブロック図である。図示するように、第２の実施形態の運転評価システム２は、運転データ格納部５０、評価入力部６０、および評価格納部７０が運転評価システム１に追加されている。

【0056】

運転データ格納部５０は、車載装置などから得られた車両の動画像が記録された間の運転データを、動画像格納部１０に格納される動画像に対応させて格納する。

【0057】

ログ可視化部４０は、動画像を取得した車両の動画像が記録された間の車両から得られる運転データを取得して、内容をそのまま若しくは加工して、評価のために出力する画面に、対応させて提示する。換言すれば、対応する運転データに基づき生成された運転時に行われた操作（加速や減速、ブレーキ、クラクション、急ハンドルなど）の表示を、動画像とともに合わせて提示する。

【0058】

評価入力部６０は、評価時に提示した動画像に対応させて、評価者からの評価入力を受け付けて、評価格納部７０に格納する。

【0059】

評価格納部７０は、評価者によって行われた運転者毎の評価結果を格納して、帳票への印刷や、評価結果画面表示などに所要に利用する。

【0060】

このように運転評価システム２を構成することによって、ドライブレコーダの機能または別のセンサ類、車載コンピュータなどから、時刻毎の位置や車速、アクセルやブレーキの状態、必要に応じて天気や気温などの運転データを車から取得した運転データを用いて、運転時に行われた操作を評価者が直接的に認識して評価に利用できる。

【0061】

次に、第３の実施形態を説明する。
第３の実施形態では、多数の車両に搭載された車載装置から得られた動画像を収集して、その全てについてより簡便に目視による安全評価を行えるように構成すると共に、加えて 評価者の評価を行い、また、評価者毎の評価結果の差を補完する運転評価システムを説明する。

【0062】

図６は、第３の実施形態の構成を示すブロック図である。図示するように、第３の実施形態の運転評価システム３は、評価者評価部８０、評価補正部９０が運転評価システム２に追加されている。

【0063】

評価者評価部８０は、ログ格納部２０、運転データ格納部５０及び評価格納部７０に格納された個々の評価結果と対応する基準対象の抽出位置の関係を反映させて、各々の評価者を評価処理する。この評価者の評価処理では、評価者毎の同様な場面に対する評価の違いを相対的に定量化する方法を用いることができる。評価者の評価項目は、評価者個人による同様な場面に対する評価の差の定量化や、評価誤りの抽出など、所要に定めればよい。これらの評価は、上記各情報を用いて、画像認識処理部３０で認識された基準対象に基づいて下された部分の評価結果部分を、模範的な評価や同様な事象に対する評価の差などに基づいて判定処理する自動評価としても良い。また、評価者が下した評価を参照して評価者を評価する人間が評価することもできる。

【0064】

評価補正部９０は、個々の運転の評価結果を、評価者評価部８０で行った評価者の評価に基づいて補正して、評価格納部７０に記録する。この処理によって、評価者が異なることによって生ずる主観による差を補正できる。この評価者の評価は、予め評価者に、基準となる事例に対する評価を行わせて、同一の運転データ及び基準対象の抽出位置との関係を反映させた評価に基づいて、評価者間の差から求めてもよい。

【0065】

このように運転評価システム３を構成することによって、システム運用者は、評価結果の差を減少させた評価結果を収集および運用することが可能となる。

【0066】

なお、画像認識処理部３０では、画像識別できた画像位置に、この画像又はこの画像より所定量前から再生することを示す重点箇所を示すフラグを付与するようにしてよい。

【0067】

また、識別できた標識や停止線の種類や個数、位置を示すフラグをそれぞれ追加してもよい。また、ナビ情報と連動させて地図上に表示できるようにしたり、他車からのデータと連係させてもよい。

【0068】

次に、複数の実施例を示して本発明を説明する。

【0069】

［実施例１］
この運転評価システムでは、個々の業務用車両の運転者は、業務終了時に車両の運転時に撮影した動画像を管理者側に渡し、日常的に運転評価を受けることとする。
また、管理者側では評価者を割り当て、渡された多数の動画像に基づいて効率よく個人毎の運転評価を行うこととする。

【0070】

図７に示すように、運転評価システムを、上位サーバと 画像認識処理部３０やログ可視化部４０等を有するワークステーションとに分けて、運転者毎の運転評価を行った後に、評価結果を上位サーバに送付する通信手段を設けて構築する。なお本実施例では運転評価システム３の構成を有することとする。
本システムでは、構成管理として、上位サーバから、重要視される評価項目の指示を各出張所のワークステーションに通知されることによって、抽出する基準対象（使用する画像識別処理）と評価項目に反映させる基準対象がそれぞれ設定される。また、構成管理では、出張所のワークステーションや個々のドライブレコーダのハードウエア・ソフトウェアの構成・バージョン管理を行なう。また、ワークステーションの負荷が適切であるかも管理してもよい。また、例えば、地域ごとに任意のルールの処理を割当てるパラメータ最適化をおこなってもよい。

【0071】

出張所のワークステーションでは、個々の車両で取得された各種情報を動画像格納部１０に順次多数受け付ける。
画像認識処理部３０は、記録された動画像から運転評価に用いる基準対象等を抽出してログを生成してログ格納部２０に格納する。
評価者は、ログ可視化部４０から提示される評価画面を参照して、評価入力部６０に個々の評価結果を入力する。

【0072】

評価格納部７０に格納された毎日の評価結果は、帳票などに印刷して確認できる。
なお、画像データの蓄積や検索を、運転者毎や車両毎に行なえるように構成している。

【0073】

これら処理を全て出張所等の業務車を管理する部門にて評価作業を行う。その後、評価した運転結果のみを上位サーバに送付する。上位サーバでは、個々の運転者の分析評価結果を集めて、全体としての運用や出張所毎の分析管理を行い、今後の事故の削減などに利用する。また、評価者の評価と、評価者毎の評価の違いを本部側で補正することとしてもよい。

【0074】

このように上位サーバと下位装置とを分けることによって、画像認識処理を適宜分散して多数の車両について効率よく個人毎の運転評価を精度よく行える。

【0075】

［実施例２］
第２の実施例に係る運転評価システムでも、第１の実施例と同様に、車両の運転時に撮影した動画像を用いて、評価者の目視により、渡された多数の動画像を効率よく運転評価を行う。
第１の実施例と異なる部分は、上位サーバ側に画像認識処理部３０やログ可視化部４０等を有する点である。

【0076】

第２の実施例では、図８に示すように、運転評価システムを、ログ可視化部４０等を有する上位サーバと下位装置たるワークステーションとに分けて、構築する。例えば出張所等の業務車を管理する部門にて、録画データや運転データ等の評価対象となる関連データを上位サーバに送付する。上位サーバは、評価対象となる関連データを受け付けて、個々の運転者の運転評価を行ない、運転者毎の評価結果を出張所毎のワークステーションに送付する。
また、上位サーバでは、評価作業を行い、個々の分析評価結果を集めて、全体としての分析管理を行う。

【0077】

このように上位サーバと下位装置とを分けることによって、画像認識処理を集中処理が行えることとなる。

【0078】

［実施例３］
第３の実施例に係る運転評価システムでも、第１および第２の実施例と同様に、車両の運転時に撮影した動画像を用いて、評価者の目視により、渡された多数の動画像を効率よく運転評価を行う。
第２の実施例と異なる部分は、ワークステーション側に画像認識処理部３０を有する点である。

【0079】

第３の実施例では、図９に示すように、運転評価システムを、ログ可視化部４０等を有する上位サーバと画像認識処理部３０を有するワークステーションとに分けて、構築する。例えば出張所等の業務車を管理する部門にて、画像認識処理を行い、録画データや評価用ログ、運転データ等の評価対象となる関連データを上位サーバに送付する。上位サーバは、評価対象となる関連データを受け付けて、個々の運転者の運転評価を行ない、運転者毎の評価結果を出張所毎のワークステーションに送付する。また、上位サーバでは、評価者の評価作業を行い、個々の分析評価結果を集めて、全体としての分析管理を行う。

【0080】

このように上位サーバと下位装置とを分けることによって、画像認識処理の分散処理が行えることとなる。

【0081】

［実施例４］
第４の実施例に係る運転評価システムでも、第１ないし第３の実施例と同様に、車両の運転時に撮影した動画像を用いて、評価者の目視により、渡された多数の動画像を効率よく運転評価を行う。
他の実施例と異なる部分は、ワークステーション側に画像認識処理部３０とログ可視化部４０を有すると共に、分析管理もワークステーション側で行なう点である。

【0082】

第４の実施例では、図１０に示すように、運転評価システムを、画像認識処理部３０やログ可視化部４０等を有するワークステーションと構成管理を行なう上位サーバに分けて、構築する。各処理は、各出張所のワークステーションで個別に行い、上位サーバでは各出張所の更新や保守管理等の構成管理のみを管理端末を介して一括的に行うように構成されている。

【0083】

このように上位サーバと下位装置とを分けることによって、画像認識処理のから評価者の評価まで出張所毎に個々の都合に合わせて行えることとなる。

【0084】

なお、運転評価システムの各部は、ハードウェアとソフトウェアの組み合わせを用いて実現すればよい。ハードウェアとソフトウェアとを組み合わせた形態では、ＲＡＭに運転評価プログラムが展開され、プログラムに基づいて制御部（ＣＰＵ）等のハードウェアを動作させることによって、各部を各種手段として実現する。また、運転評価プログラムは、記憶媒体に記録されて頒布されても良い。当該記録媒体に記録されたプログラムは、有線、無線、又は記録媒体そのものを介して、メモリに読込まれ、制御部等を動作させる。尚、記録媒体を例示すれば、オプティカルディスクや磁気ディスク、半導体メモリ装置、ハードディスクなどが挙げられる。

【0085】

上記実施の形態を別の表現で説明すれば、運転評価システムとして動作させる情報処理装置を、ＲＡＭに展開された運転評価プログラムに基づき、画像認識手段、ログ格納手段、動画像格納手段、ログ可視化手段、等として制御部を動作させることで実現することが可能である。

【0086】

以上に実施の形態および実施例を図示して説明したが、そのブロック構成の分離併合、手順の入れ替えなどの変更は本発明の趣旨および説明される機能を満たせば自由であり、上記説明が本発明を限定するものではない。

【0087】

以上説明したように、本発明を適用した運転評価システムは、動画像を参照して行う運転評価を低コストで行える環境を提供できる。

【0088】

また、本発明では、情報化しきれていない交通規制を画像認識によって取得して提供することにより、評価者の評価漏れや、評価のブレ、評価者毎の主観による評価の相違などを補完することができる。

【0089】

また、本発明の具体的な構成は前述の実施の形態に限られるものではなく、この発明の要旨を逸脱しない範囲の変更があってもこの発明に含まれる。

【産業上の利用可能性】

【0090】

本発明は、多数の業務車両を管理する運送業や、タクシー業でのシステムに好適である。

【符号の説明】

【0091】

１，２，３ 運転評価システム
１０ 動画像格納部（動画像格納手段）
２０ ログ格納部（ログ格納手段）
３０ 画像認識処理部（画像認識処理手段）
４０ ログ可視化部（ログ可視化手段）
５０ 運転データ格納部（運転データ格納手段）
６０ 評価入力部（評価入力手段）
７０ 評価格納部（評価格納手段）
８０ 評価者評価部（評価者評価手段）
９０ 評価補正部（評価補正手段）

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】