特開 2024-30312 情報処理装置、情報処理システムおよび情報処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024030312

(43)【公開日】2024-03-07

(54)【発明の名称】情報処理装置、情報処理システムおよび情報処理方法

(51)【国際特許分類】

   G07C 5/02 20060101AFI20240229BHJP

   G08G 1/00 20060101ALI20240229BHJP

【ＦＩ】

G07C5/02

G08G1/00 D

【審査請求】未請求

【請求項の数】12

【出願形態】ＯＬ

(21)【出願番号】P 2022133100

(22)【出願日】2022-08-24

(71)【出願人】

【識別番号】000237592

【氏名又は名称】株式会社デンソーテン

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】谷 泰司

(72)【発明者】

【氏名】宮崎 英明

(72)【発明者】

【氏名】服部 正史

【テーマコード（参考）】

3E138

5H181

【Ｆターム（参考）】

3E138AA01

3E138AA07

3E138MA01

3E138MB08

3E138MB15

3E138MC17

3E138MD01

3E138MD05

5H181AA01

5H181BB04

5H181BB05

5H181BB13

5H181BB20

5H181CC04

5H181CC11

5H181FF05

5H181FF10

5H181LL20

5H181MB11

5H181MC15

5H181MC19

5H181MC22

(57)【要約】

【課題】データ転送量を削減すること。
【解決手段】実施形態に係るドライブレコーダは、車両に搭載される情報処理装置であって、コントローラを備える。上記コントローラは、上記車両の車内の映像データを含むデータを記録し、上記車両のドライバの発声を検知した場合に、上記データから上記ドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置へ送信する。
【選択図】図１

【特許請求の範囲】

【請求項1】

車両に搭載される情報処理装置であって、
前記車両の車内の映像データを含むデータを記録し、
前記車両のドライバの発声を検知した場合に、前記データから前記ドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置へ送信するコントローラ、
を備える、情報処理装置。

【請求項2】

前記コントローラは、
前記ドライバの発声を検知した場合に、前記データから前記ドライバが写る部分を切り出した前記軽量化データを前記サーバ装置へ送信する、
請求項１に記載の情報処理装置。

【請求項3】

前記コントローラは、
前記ドライバの発声を検知した場合に、前記データからドライバが写る部分の周辺データを圧縮する、または、間引いた前記軽量化データを前記サーバ装置へ送信する、
請求項１に記載の情報処理装置。

【請求項4】

前記コントローラは、
前記発声の検知時点を基準とする任意の時間分の前記軽量化データを前記サーバ装置へ送信する、
請求項１に記載の情報処理装置。

【請求項5】

前記コントローラは、
前記ドライバの顔の周辺部分を切り出した前記軽量化データを前記サーバ装置へ送信する、
請求項１に記載の情報処理装置。

【請求項6】

前記コントローラは、静止画像である前記軽量化データを前記サーバ装置へ送信する、
請求項１～５のいずれか一つに記載の情報処理装置。

【請求項7】

前記コントローラは、
前記サーバ装置が前記軽量化データに基づいて、記録された前記データである記録データを要すると判定した場合に前記サーバ装置から送信される記録データ要求に基づき、少なくとも動画像である前記映像データを含む前記記録データを前記サーバ装置へ送信する、
請求項６に記載の情報処理装置。

【請求項8】

前記コントローラは、
前記ドライバへの指向性を有する指向性マイクを用いて前記発声を検知する、
請求項１に記載の情報処理装置。

【請求項9】

前記コントローラは、
前記ドライバの音声データを予め登録した音声登録情報に基づいて前記発声を識別する、
請求項８に記載の情報処理装置。

【請求項10】

前記コントローラは、前記映像データの画像認識結果に基づいて前記発声を検知する、
請求項１に記載の情報処理装置。

【請求項11】

車両に搭載される車載装置と、サーバ装置と、を備え、
前記車載装置は、
前記車両の車内の映像データを含むデータを記録し、
前記車両のドライバの発声を検知した場合に、前記データから前記ドライバが写る部分以外のデータ量を少なくした軽量化データを前記サーバ装置へ送信し、
前記サーバ装置は、
前記軽量化データに基づいて、記録された前記データである記録データを要すると判定した場合に、少なくとも動画像である前記映像データを含む前記記録データを要求する記録データ要求を前記車載装置へ送信する、
情報処理システム。

【請求項12】

車両に搭載される情報処理装置が実行する情報処理方法であって、
前記車両の車内の映像データを含むデータを記録することと、
前記車両のドライバの発声を検知した場合に、前記データから前記ドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置へ送信することと、
を含む、情報処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

開示の実施形態は、情報処理装置、情報処理システムおよび情報処理方法に関する。

【背景技術】

【0002】

従来、車両に搭載される通信型ドライブレコーダが知られている。通信型ドライブレコーダは、撮影した映像を含むデータを、携帯電話回線網等のネットワークを介してサーバ装置へ転送する。

【0003】

サーバ装置は、転送されたデータに含まれる車両の周囲映像に基づいてたとえばナビゲーション情報などを生成し、車両側にクラウドサービスとして提供する（たとえば、特許文献１参照）。この他、サーバ装置が、ドライブレコーダから転送されたデータに含まれる車内映像に基づいてドライバの顔の向きや視線などを検知する技術も知られている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１２－００２５６７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、上述した従来技術を用いた場合、映像を含むデータをサーバ装置へ常時転送する必要があり、データ転送量が膨大になる。すなわち、従来技術には、データ転送量を削減するうえで、さらなる改善の余地がある。

【0006】

実施形態の一態様は、上記に鑑みてなされたものであって、データ転送量を削減することができる情報処理装置、情報処理システムおよび情報処理方法を提供することを目的とする。

【課題を解決するための手段】

【0007】

実施形態の一態様に係る情報処理装置は、車両に搭載される情報処理装置であって、コントローラを備える。前記コントローラは、前記車両の車内の映像データを含むデータを記録し、前記車両のドライバの発声を検知した場合に、前記データから前記ドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置へ送信する。

【発明の効果】

【0008】

実施形態の一態様によれば、データ転送量を削減することができる。

【図面の簡単な説明】

【0009】

【図1】図１は、実施形態に係るデータ転送方法の概要説明図である。

【図2】図２は、実施形態に係るデータ転送システムの構成例を示す図である。

【図3】図３は、実施形態に係るドライブレコーダの構成例を示すブロック図である。

【図4】図４は、実施形態に係るサーバ装置の構成例を示すブロック図である。

【図5】図５は、実施形態に係るデータ転送システムが実行する処理シーケンスを示す図である。

【発明を実施するための形態】

【0010】

以下、添付図面を参照して、本願の開示する情報処理装置、情報処理システムおよび情報処理方法の実施形態を詳細に説明する。なお、以下に示す実施形態によりこの発明が限定されるものではない。

【0011】

また、以下では、実施形態に係る情報処理装置が、車両に搭載されるドライブレコーダ１０である場合を例に挙げて説明を行う。同様に、以下では、実施形態に係る情報処理システムが、ドライブレコーダ１０を含むデータ転送システム１である場合を例に挙げて説明を行う。同様に、以下では、実施形態に係る情報処理方法が、ドライブレコーダ１０の実行するデータ転送方法である場合を例に挙げて説明を行う。

【0012】

また、以下では、ドライブレコーダ１０が有する取得部１４ａ（図３参照）によって取得される音声データや映像データを含む各種のセンサデータのことを適宜「データ」と言う。また、以下では、ドライブレコーダ１０が有する記録部１４ｄ（図３参照）によって記録され、ドライブレコーダ１０が有する記憶部１３（図３参照）に記憶されたデータのことを適宜「記録データ」と言う。

【0013】

まず、実施形態に係るデータ転送方法の概要について、図１を用いて説明する。図１は、実施形態に係るデータ転送方法の概要説明図である。

【0014】

図１に示すように、データ転送システム１は、ドライブレコーダ１０と、サーバ装置１００とを有する。ドライブレコーダ１０は、車両に搭載される通信型のデータ記録装置である。

【0015】

ドライブレコーダ１０は、車両の起動中に、ドライブレコーダ１０の有するカメラによって撮影した車両内外の映像データやマイクによって収音した音声データを含むデータを繰り返し上書きしながら記録データとして常時記録することができる。

【0016】

また、ドライブレコーダ１０は、車両の起動中に、事故発生やヒヤリ・ハット等の特定のイベントを検知した場合に、検知時点の前後一定時間分のデータを上書き禁止の不揮発性記録であるイベント記録方式で記録することができる。

【0017】

また、ドライブレコーダ１０は、このイベント記録方式での記録と同時に、データをサーバ装置１００へ転送することができる。サーバ装置１００は、たとえばクラウドサーバとして実現され、車両から転送されたデータに基づいて事故発生時等の車両の状況を解析する。

【0018】

ところで、サーバ装置１００は、転送されたデータに含まれる車内映像に基づいて、たとえばドライバの顔の向きや視線を検知し、事故発生時等の車両の状況を車内映像からも詳細に解析することができる。

【0019】

ただし、サーバ装置１００がこのような解析が行えるとは言え、前述のイベント検知時に転送されるデータでは、解析できる内容は転送された一定時間分に限られてしまう。また、そもそも前述のイベントが検知されなければ、ドライブレコーダ１０からサーバ装置１００へデータが転送されない。このため、サーバ装置１００は、たとえば事故発生やヒヤリ・ハットまでには至らないがこれらの予兆となりうるドライバの挙動まで解析することはできない。

【0020】

つまり、理想的には、ドライブレコーダ１０からはデータがサーバ装置１００へ常時転送されることが好ましい。既存技術には、ドライブレコーダ１０がデータをサーバ装置１００へ常時転送するものがある。しかしながら、この既存技術を用いた場合、データ転送量が膨大になるという問題点がある。

【0021】

そこで、実施形態に係るデータ転送方法では、ドライブレコーダ１０が、車両の車内の映像データを含むデータを記録し、車両のドライバの発声を検知した場合に、上記データからドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置１００へ送信することとした。

【0022】

具体的には、実施形態に係るデータ転送方法では、ドライブレコーダ１０は、マイクによって収音した音声データを解析する。音声データからはたとえばドライバの怒りや驚きといった感情の変化や、運転動作からドライバの注意が逸れる可能性を推定することができる。

【0023】

たとえば、前方車両が遅いことや自車両前方への割り込みなどに激昂して大声を出し、運転動作が荒くなるドライバは一定数存在する。また、たとえば、ドライバが同乗者との会話に気を取られて、運転動作からドライバの注意が逸れてしまうことも起こりうる。

【0024】

ドライブレコーダ１０は、こうしたドライバの感情の変化や注意力散漫、および、これらに伴う危険運転の傾向を音声データの変化によって推定する。

【0025】

このような考え方に基づき、図１に示すように、ドライブレコーダ１０は、サーバ装置１００へのデータ送信のトリガとなる音声データの変化を検知する（ステップＳ１）。ドライブレコーダ１０は、たとえば単にドライバの音声データを検知した場合をトリガとして検知する。あるいは、ドライブレコーダ１０は、たとえばドライバや同乗者の音声データの音量レベルが予め決められた閾値を超えた場合をトリガとして検知する。つまり、ドライブレコーダ１０は、ドライバの発声を検知した場合をトリガとして検知する。

【0026】

そして、このトリガを検知すると、ドライブレコーダ１０は、車内の映像データの一部である部分データを切り出す（ステップＳ２）。「部分データ」は、ドライバが写る部分以外のデータ量を少なくした「軽量化データ」の一例に相当する。そして、ドライブレコーダ１０は、この切り出した部分データのみをサーバ装置１００へ送信する（ステップＳ３）。

【0027】

このとき、車内の映像データは、車内全体が視認可能となる視野角の広い広角映像であることが好ましい。また、部分データは、この広角映像からドライバが写っている範囲のみを切り出した動画像または静止画像であることが好ましい。また、部分データは、ドライバの顔周辺の部分のデータであればより好ましい。切り出しの手法としてはデータから部分データを抜き出すことの他に、不要な周辺部分のデータをゼロにまたはデータ削減する加工をしても同様の効果が得られる。

【0028】

そして、サーバ装置１００は、この部分データを受信して解析する（ステップＳ４）。解析の結果、より詳細な解析が必要であると判定されれば、サーバ装置１００は、部分データではない任意の記録データをドライブレコーダ１０へ要求する。任意の記録データは、たとえば前述のトリガの検知時点を基準とする任意の時間分の記録データである。また、より詳細な解析が必要である場合とは、たとえば静止画像である部分データに対し、少なくとも動画像である映像データを含む記録データを要する場合である。

【0029】

そして、ドライブレコーダ１０は、この記録データ要求に応じた記録データをサーバ装置１００へ転送する。サーバ装置１００は、この転送された記録データに基づき、車両の状況をより詳細に解析することとなる。

【0030】

このように、実施形態に係るデータ転送方法では、ドライブレコーダ１０が、車両の車内の映像データを含むデータを記録し、車両のドライバの発声を検知した場合に、上記データからドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置１００へ送信する。

【0031】

したがって、実施形態に係るデータ転送方法によれば、ドライバの発声を検知した場合にのみサーバ装置１００へデータを転送するので、データ転送量を削減することができる。また、切り出すことによって軽量化した部分データをまずサーバ装置１００へ転送するので、データ転送量を削減することができる。また、部分データの解析の結果、サーバ装置１００は必要な場合にのみ任意の記録データをドライブレコーダ１０に要求して送信させるので、データ転送量を削減することができる。

【0032】

以下、上述した実施形態に係るデータ転送方法を適用したデータ転送システム１の構成例について、より具体的に説明する。

【0033】

図２は、実施形態に係るデータ転送システム１の構成例を示す図である。データ転送システム１は、１以上のドライブレコーダ１０と、サーバ装置１００とを含む。

【0034】

各ドライブレコーダ１０と、サーバ装置１００とは、インターネットや携帯電話回線網、Ｃ－Ｖ２Ｘ（Cellular Vehicle to Everything）通信網等であるネットワークＮを介して相互に通信可能に接続される。

【0035】

ドライブレコーダ１０は、上述したように、カメラによって撮影した車両内外の映像データやマイクによって収音した音声データを含むデータを繰り返し上書きしながら常時記録する。

【0036】

また、ドライブレコーダ１０は、事故発生やヒヤリ・ハット等の特定のイベントを検知した場合に、検知時点の前後一定時間分のデータを上書き禁止の不揮発性記録であるイベント記録方式で記録する。

【0037】

また、ドライブレコーダ１０は、イベント記録方式での記録と同時に、当該データをサーバ装置１００へ転送する。

【0038】

また、ドライブレコーダ１０は、サーバ装置１００へのデータ送信のトリガとなる音声データの変化を検知した場合に、車内の映像データの一部である部分データを切り出してサーバ装置１００へ送信する。

【0039】

また、ドライブレコーダ１０は、送信した部分データに基づいてサーバ装置１００から任意の記録データを要求する記録データ要求を受け付けた場合に、当該要求に応じた記録データをサーバ装置１００へ転送する。

【0040】

サーバ装置１００は、上述したように、たとえばクラウドサーバとして実現される。サーバ装置１００は、たとえばデータ転送システム１を運営する事業者によって管理される。サーバ装置１００は、ドライブレコーダ１０から送信された部分データに基づいて各車両の状況を解析する。

【0041】

また、サーバ装置１００は、部分データに基づいてより詳細な解析が必要であると判定した場合に、任意の記録データをドライブレコーダ１０へ要求する。サーバ装置１００は、当該要求に応じてドライブレコーダ１０から転送された記録データに基づいて各車両の状況をより詳細に解析する。また、サーバ装置１００は、解析した解析結果に基づく各種のクラウドサービスを提供する。

【0042】

サーバ装置１００は、たとえば解析結果に基づいて警報やガイダンス、ナビゲーション情報等を通知する運転支援サービスを各車両に対し提供する。また、サーバ装置１００は、たとえば事故発生時の状況の解析結果を保険会社等へ提供する。また、サーバ装置１００は、たとえばヒヤリ・ハットの統計結果に基づく教育資料等を運送事業者等へ提供する。

【0043】

次に、ドライブレコーダ１０の構成例について説明する。図３は、実施形態に係るドライブレコーダ１０の構成例を示すブロック図である。なお、図３および後に示す図４では、本実施形態の特徴を説明するために必要な構成要素のみを表しており、一般的な構成要素についての記載を省略している。

【0044】

換言すれば、図３および図４に図示される各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。例えば、各ブロックの分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することが可能である。

【0045】

また、図３および図４を用いた説明では、既に説明済みの構成要素については、説明を簡略するか、説明を省略する場合がある。

【0046】

図３に示すように、実施形態に係るドライブレコーダ１０は、センサ部１１と、通信部１２と、記憶部１３と、コントローラ１４とを有する。

【0047】

センサ部１１は、ドライブレコーダ１０に搭載される各種のセンサ群である。センサ部１１は、たとえばマイク１１ａと、カメラ１１ｂと、ＧＰＳ（Global Positioning System）センサ１１ｃと、Ｇセンサ１１ｄとを含む。

【0048】

マイク１１ａは、車両内外の音声データを収音する。ドライバの感情の変化や運転動作への注意力散漫を推定するうえでは、ドライバの発声する音声が最も重要となるので、マイク１１ａはドライバ席への指向性を有する指向性マイクであることが好ましい。なお、マイク１１ａは、無指向性マイクであってもよい。

【0049】

カメラ１１ｂは、１以上設けられる。カメラ１１ｂは、フロントガラス付近やリアガラス付近、ダッシュボード付近等の車両の各所に取り付けられ、車両内外の予め決められた撮影領域を撮影可能に設けられる。本実施形態では、カメラ１１ｂは少なくとも、ドライバの顔の向きや視線が検知可能となる車内映像を撮影可能に設けられる。上述したように、カメラ１１ｂが撮影する車内の映像データは、車内全体が視認可能となる視野角の広い広角映像であることが好ましい。

【0050】

ＧＰＳセンサ１１ｃは、車両のＧＰＳ位置を測位する。Ｇセンサ１１ｄは、車両にかかる加速度を測定する。

【0051】

通信部１２は、ネットワークアダプタ等によって実現される。通信部１２は、ネットワークＮと無線で接続され、ネットワークＮを介して、サーバ装置１００との間で情報の送受信を行う。

【0052】

記憶部１３は、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、フラッシュメモリ（Flash Memory）等の記憶デバイスによって実現される。記憶部１３は、図３の例では、音声登録情報１３ａと、抽出情報１３ｂと、記録データ情報１３ｃとを記憶する。

【0053】

音声登録情報１３ａは、ドライバの音声データと、ドライバ周辺の音声データとを識別するために予めドライバの音声データが登録された情報である。

【0054】

抽出情報１３ｂは、データから前述の部分データを切り出して抽出するための情報であり、部分データの位置やサイズ等が予め設定されている。

【0055】

記録データ情報１３ｃは、マイク１１ａによって収音された音声データ、カメラ１１ｂによって撮影された映像データ、および、ＧＰＳセンサ１１ｃによって測位されたＧＰＳ位置等を含むデータ群が記録データとして格納される。各記録データは、後述する記録部１４ｄによって記録される。

【0056】

コントローラ１４は、いわゆるプロセッサに相当する。コントローラ１４は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等によって、記憶部１３に記憶されている図示略の各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、コントローラ１４は、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現することができる。

【0057】

コントローラ１４は、取得部１４ａと、検知部１４ｂと、記録制御部１４ｃと、記録部１４ｄと、送受信部１４ｅとを有し、以下に説明する情報処理の機能や作用を実現または実行する。

【0058】

取得部１４ａは、センサ部１１から各種のデータを取得する。検知部１４ｂは、取得部１４ａによって取得されたセンサデータに基づいて事故発生やヒヤリ・ハット等に該当する特定のイベントを検知する。

【0059】

また、検知部１４ｂは、取得部１４ａによって取得されたデータおよび音声登録情報１３ａに基づいてドライバの音声データを検知し、当該音声データに基づいて前述のデータ送信のトリガとなる音声データの変化を検知する。また、検知部１４ｂは、当該トリガを検知した場合に、当該トリガを検知したことを記録制御部１４ｃへ通知する。

【0060】

記録制御部１４ｃは、検知部１４ｂによる前述のイベントの検知結果に応じて、記録部１４ｄによって記録されるデータの記録方式を制御する。具体的には、記録制御部１４ｃは、記録データのアクセス権を制御する。

【0061】

より具体的には、記録制御部１４ｃは、検知部１４ｂによって前述のイベントが検知されない場合、記録部１４ｄにデータを繰り返し上書きしながら常時記録させる。一方、記録制御部１４ｃは、検知部１４ｂによって前述のイベントが検知された場合、記録部１４ｄに上書き禁止のイベント記録方式でデータを記録させる。

【0062】

なお、記録制御部１４ｃは、イベント検知時点の前後一定時間分のデータが記録された後は、イベント記録方式での記録を停止させた後、記録部１４ｄに上書き可能な常時記録を再開させる。

【0063】

また、記録制御部１４ｃは、予め転送対象として指定されたイベントについては、このイベントに対応するデータを、サーバ装置１００へ向けて送受信部１４ｅに送信させる。

【0064】

また、記録制御部１４ｃは、検知部１４ｂによって前述のトリガが検知された場合に、当該トリガの検知時点を基準とする任意の時間分のデータから抽出情報１３ｂに基づいて部分データを切り出し、サーバ装置１００へ向けて送受信部１４ｅに送信させる。

【0065】

また、記録制御部１４ｃは、部分データに応じてサーバ装置１００から送信された任意の記録データを要求する記録データ要求が送受信部１４ｅによって受信された場合に、当該要求に応じた記録データをサーバ装置１００へ向けて送受信部１４ｅに送信させる。

【0066】

記録部１４ｄは、記録制御部１４ｃによって制御される記録方式で、データを記録データとして記録データ情報１３ｃへ記録する。

【0067】

送受信部１４ｅは、記録制御部１４ｃによって切り出された部分データを、通信部１２を介してサーバ装置１００へ向け送信する。また、送受信部１４ｅは、通信部１２を介し、部分データに応じてサーバ装置１００から送信された任意の記録データ要求を受信する。

【0068】

また、送受信部１４ｅは、当該要求を受信した場合に、当該要求を記録制御部１４ｃへ通知する。また、送受信部１４ｅは、記録制御部１４ｃの指示に基づいて、この指示に該当する記録データを記録データ情報１３ｃから抽出し、通信部１２を介してサーバ装置１００へ向け送信する。

【0069】

次に、サーバ装置１００の構成例について説明する。図４は、実施形態に係るサーバ装置１００の構成例を示すブロック図である。

【0070】

図４に示すように、実施形態に係るサーバ装置１００は、通信部１０１と、記憶部１０２と、コントローラ１０３とを有する。

【0071】

通信部１０１は、ネットワークアダプタ等によって実現される。通信部１０１は、ネットワークＮと有線または無線で接続され、ネットワークＮを介して、各ドライブレコーダ１０との間で情報の送受信を行う。

【0072】

記憶部１０２は、ＲＯＭ、ＲＡＭ、フラッシュメモリ等の記憶デバイスや、ハードディスク、光ディスク等のディスク装置によって実現される。記憶部１０２は、図４の例では、収集情報ＤＢ（Database）１０２ａと、解析モデル１０２ｂとを記憶する。

【0073】

収集情報ＤＢ１０２ａは、各ドライブレコーダ１０から収集されたデータが格納されるデータベースである。

【0074】

解析モデル１０２ｂは、後述する解析部１０３ｂが各種の解析処理を実行する際に読み込まれるモデルである。解析モデル１０２ｂは、解析部１０３ｂが部分データや記録データを解析するに際して、部分データや記録データが入力された場合に、これらを画像認識して各種の物体を検知可能に設けられる。解析モデル１０２ｂは、車内映像が入力された場合は、少なくともドライバ、当該ドライバの顔の向きおよび視線を検知可能に設けられる。

【0075】

この場合、解析モデル１０２ｂは、たとえば教師データとなる画像データを用いた機械学習を実行することによって予め学習される。機械学習のアルゴリズムとしては、上述したようにディープラーニング等、各種の公知のアルゴリズムを用いることができる。

【0076】

コントローラ１０３は、いわゆるプロセッサに相当する。コントローラ１０３は、ＣＰＵやＭＰＵ等によって、記憶部１０２に記憶されている図示略の各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、コントローラ１０３は、ＡＳＩＣやＦＰＧＡ等の集積回路により実現することができる。

【0077】

コントローラ１０３は、収集部１０３ａと、解析部１０３ｂと、検知部１０３ｃと、要求部１０３ｄとを有し、以下に説明する情報処理の機能や作用を実現または実行する。

【0078】

収集部１０３ａは、通信部１０１を介し、各ドライブレコーダ１０から送信される部分データを収集する。また、収集部１０３ａは、通信部１０１を介し、前述のイベントに応じて各ドライブレコーダ１０から送信される予め転送対象として指定された記録データを収集する。

【0079】

また、収集部１０３ａは、通信部１０１を介し、後述する要求部１０３ｄが要求する任意の記録データ要求に応じて各ドライブレコーダ１０から送信される記録データを収集する。また、収集部１０３ａは、収集した各種のデータを収集情報ＤＢ１０２ａへ格納する。

【0080】

解析部１０３ｂは、収集部１０３ａによって収集された部分データを、解析モデル１０２ｂを用いて解析する。また、解析部１０３ｂは、部分データの解析結果を検知部１０３ｃへ通知する。

【0081】

また、解析部１０３ｂは、前述のイベントまたは記録データ要求に応じてドライブレコーダ１０から送信され、収集部１０３ａによって収集された記録データを、解析モデル１０２ｂを用いて解析する。

【0082】

検知部１０３ｃは、解析部１０３ｂによる部分データの解析結果に基づいて、より詳細な解析のためにさらに記録データを要するか否かを検知する。また、検知部１０３ｃは、検知結果を要求部１０３ｄへ通知する。

【0083】

要求部１０３ｄは、検知部１０３ｃによってさらに記録データを要することが検知された場合に、記録データ要求を生成し、当該要求をドライブレコーダ１０へ向けて通信部１０１を介し送信する。要求部１０３ｄは、たとえば前述のトリガの検知時点を基準とする任意の時間分の記録データがドライブレコーダ１０から送信されるように、記録データ要求を生成し送信する。

【0084】

次に、データ転送システム１が実行する処理手順について説明する。図５は、実施形態に係るデータ転送システム１が実行する処理シーケンスを示す図である。

【0085】

まず、ドライブレコーダ１０は、センサ部１１から少なくとも音声データおよび映像データを取得する（ステップＳ１０１）。そして、ドライブレコーダ１０は、取得した音声データを解析する（ステップＳ１０２）。

【0086】

そして、ドライブレコーダ１０は、解析の結果、サーバ装置１００へのデータ送信のトリガとなる音声データの変化を検知したか否かを判定する（ステップＳ１０３）。

【0087】

ここで、トリガを検知した場合（ステップＳ１０３，Ｙｅｓ）、ドライブレコーダ１０は、部分データを抽出し（ステップＳ１０４）、サーバ装置１００へ向けて送信する（ステップＳ１０５）。一方、トリガを検知しない場合（ステップＳ１０３，Ｎｏ）、ドライブレコーダ１０は、ステップＳ１０１からの処理を繰り返す。

【0088】

サーバ装置１００は、ドライブレコーダ１０から受信した部分データを解析する（ステップＳ１０６）。そして、サーバ装置１００は、解析の結果、より詳細な解析のためにさらに記録データを要することを検知したか否かを判定する（ステップＳ１０７）。

【0089】

ここで、記録データを要する場合（ステップＳ１０７，Ｙｅｓ）、サーバ装置１００は、ドライブレコーダ１０へ記録データ要求を送信する（ステップＳ１０８）。一方、記録データが不要な場合（ステップＳ１０７，Ｎｏ）、サーバ装置１００は、ステップＳ１０６からの処理を繰り返す。

【0090】

ドライブレコーダ１０は、サーバ装置１００からステップＳ１０８の記録データ要求を受信すると、当該要求に応じて送信対象となる記録データを抽出する（ステップＳ１０９）。そして、ドライブレコーダ１０は、抽出した記録データをサーバ装置１００へ向けて送信する（ステップＳ１１０）。

【0091】

サーバ装置１００は、ステップＳ１１０の記録データを受信すると、当該記録データを解析する（ステップＳ１１１）。そして、サーバ装置１００は、当該記録データの解析結果に応じた各種のクラウドサービスを提供することとなる。

【0092】

なお、これまでは、マイク１１ａによって収音された音声データに基づいてドライバの発声を検知することとしたが、音声データによらずドライバの発声を検知するようにしてもよい。たとえば、コントローラ１４は、図示略の画像認識モデルなどを用いた映像データの画像認識結果に基づいてドライバの発声を検知してもよい。画像認識結果に基づいては、たとえばドライバの口の開き具合や、開いた口の形状等によってドライバが発声していることを推定することができる。

【0093】

また、これまでは、「軽量化データ」の一例として、データからドライバが写る部分を切り出した「部分データ」を挙げてきたが、データ軽量化を目的として、ドライバが写る部分の周辺データを圧縮する、または、間引く等の加工を行うことも可能である。データからドライバが写る部分以外のデータ量をゼロにする思想が切り出しと考えれば、周辺のデータ量をゼロではなく減らす思想としてドライバが写る部分の周辺データを圧縮または間引きを行うことも可能である。

【0094】

上述してきたように、実施形態に係るドライブレコーダ１０は、車両に搭載される情報処理装置であって、コントローラ１４を備える。コントローラ１４は、上記車両の車内の映像データを含むデータを記録し、上記車両のドライバの発声を検知した場合に、上記データから上記ドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置１００へ送信する。

【0095】

したがって、実施形態に係るドライブレコーダ１０によれば、ドライバの発声を検知した場合にのみサーバ装置１００へデータを転送するので、データ転送量を削減することができる。また、軽量化データをまずサーバ装置１００へ転送するので、データ転送量を削減することができる。

【0096】

また、コントローラ１４は、上記ドライバの発声を検知した場合に、上記データから上記ドライバが写る部分を切り出した上記軽量化データをサーバ装置１００へ送信する。

【0097】

したがって、実施形態に係るドライブレコーダ１０によれば、ドライバが写る部分のみを切り出した軽量化データにより、データ転送量を削減することができる。

【0098】

また、コントローラ１４は、上記ドライバの発声を検知した場合に、上記データからドライバが写る部分の周辺データを圧縮する、または、間引いた上記軽量化データをサーバ装置１００へ送信する。

【0099】

したがって、実施形態に係るドライブレコーダ１０によれば、ドライバが写る部分の周辺データを圧縮する、または、間引いた軽量化データにより、データ転送量を削減することができる。

【0100】

また、コントローラ１４は、上記発声の検知時点を基準とする任意の時間分の上記軽量化データをサーバ装置１００へ送信する。

【0101】

したがって、実施形態に係るドライブレコーダ１０によれば、発声の検知時点を基準とする限られた時間分のみの軽量化データを送信するので、データ転送量を削減することができる。

【0102】

また、コントローラ１４は、上記ドライバの顔の周辺部分を切り出した上記軽量化データをサーバ装置１００へ送信する。

【0103】

したがって、実施形態に係るドライブレコーダ１０によれば、サーバ装置１００が、軽量化データのみによって、少なくともドライバの顔の向きや視線を含む車両の状況を解析することが可能となる。

【0104】

また、コントローラ１４は、静止画像である上記軽量化データをサーバ装置１００へ送信する。

【0105】

したがって、実施形態に係るドライブレコーダ１０によれば、より軽量化した部分データを送信することによって、データ転送量を削減することができる。

【0106】

また、コントローラ１４は、サーバ装置１００が上記軽量化データに基づいて、記録された前記データである記録データを要すると判定した場合にサーバ装置１００から送信される記録データ要求に基づき、少なくとも動画像である上記映像データを含む上記記録データをサーバ装置１００へ送信する。

【0107】

したがって、実施形態に係るドライブレコーダ１０によれば、サーバ装置１００が必要と判定した場合にのみ動画像を含む記録データをサーバ装置１００へ送信するので、データ転送量を削減することができる。

【0108】

また、コントローラ１４は、上記ドライバへの指向性を有する指向性マイクを用いて上記発声を検知する。

【0109】

したがって、実施形態に係るドライブレコーダ１０によれば、ドライバの感情の変化や注意力散漫を推定するうえでは最も重要なドライバの発声を品質良く収音し、検知することができる。

【0110】

また、コントローラ１４は、上記ドライバの音声データを予め登録した音声登録情報に基づいて上記発声を識別する。

【0111】

したがって、実施形態に係るドライブレコーダ１０によれば、ドライバの感情の変化や注意力散漫を推定するうえでは最も重要なドライバの発声する音声を簡便に特定することができる。

【0112】

また、コントローラ１４は、上記映像データの画像認識結果に基づいて上記発声を検知する。

【0113】

したがって、実施形態に係るドライブレコーダ１０によれば、マイク１１ａを用いることなく画像認識結果のみに基づいてドライバの発声を検知することが可能となる。

【0114】

また、実施形態に係るデータ転送システム１（「情報処理システム」の一例に相当）は、車両に搭載されるドライブレコーダ１０と、サーバ装置１００と、を備える。ドライブレコーダ１０は、上記車両の車内の映像データを含むデータを記録し、上記車両のドライバの発声を検知した場合に、上記データから上記ドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置１００へ送信する。サーバ装置１００は、上記軽量化データに基づいて、記録された上記データである記録データを要すると判定した場合に、少なくとも動画像である上記映像データを含む上記記録データを要求する記録データ要求をドライブレコーダ１０へ送信する。

【0115】

したがって、実施形態に係るデータ転送システム１によれば、ドライバの発声を検知した場合にのみサーバ装置１００へデータを転送するので、データ転送量を削減することができる。また、軽量化データをまずサーバ装置１００へ転送するので、データ転送量を削減することができる。また、軽量化データの解析の結果、サーバ装置１００は必要な場合にのみ任意の記録データをドライブレコーダ１０に要求して送信させるので、データ転送量を削減することができる。

【0116】

また、実施形態に係るデータ転送方法は、車両に搭載されるドライブレコーダ１０が実行する情報処理方法であって、上記車両の車内の映像データを含むデータを記録することと、上記車両のドライバの発声を検知した場合に、上記データから上記ドライバが写る部分以外のデータ量を少なくした軽量化データをサーバ装置１００へ送信することと、を含む。

【0117】

したがって、実施形態に係るデータ転送方法によれば、ドライバの発声を検知した場合にのみサーバ装置１００へデータを転送するので、データ転送量を削減することができる。また、軽量化データをまずサーバ装置１００へ転送するので、データ転送量を削減することができる。

【0118】

なお、上述した実施形態では、予め転送対象として指定されたイベントについては当該イベントの検知時に記録データをサーバ装置１００へ転送することとしたが、予めの転送対象を決めることなく、一律に音声データの変化に基づいて軽量化データおよび軽量化データに応じた記録データのサーバ装置１００への転送が行われるようにしてもよい。

【0119】

また、上述した実施形態では、部分データを切り出すに際して、抽出情報１３ｂに設定された決められた位置およびサイズの部分データを切り出す例を挙げたが、部分データは動的に位置およびサイズが変わるように切り出されてもよい。ドライバの位置は、ドライバ席のシートの傾きやドライバの着座姿勢の違い等によって異なることが多いためである。この場合、たとえば前述の画像認識モデルなどを用いた映像データの画像認識結果に基づいて、動的にドライバの写る領域を切り出すようにしてもよい。

【0120】

また、上述した実施形態では、ドライブレコーダ１０が、車載装置の一例である場合を例に挙げたが、ドライブレコーダ１０以外の１以上の車載装置が、ドライブレコーダ１０と同等の機能を実現するようにしてもよい。

【0121】

たとえば、車両にドライブレコーダ１０が搭載されていない場合に、車両に搭載された車載カメラ、車載マイク、および、通信型のナビゲーション装置等を組み合わせることによって、ドライブレコーダ１０と同等の機能を実現するようにしてもよい。

【0122】

さらなる効果や変形例は、当業者によって容易に導き出すことができる。このため、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細および代表的な実施形態に限定されるものではない。したがって、添付の特許請求の範囲およびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。

【符号の説明】

【0123】

１ データ転送システム
１０ ドライブレコーダ
１１ センサ部
１１ａ マイク
１１ｂ カメラ
１１ｃ ＧＰＳセンサ
１１ｄ Ｇセンサ
１２ 通信部
１３ 記憶部
１３ａ 音声登録情報
１３ｂ 抽出情報
１３ｃ 記録データ情報
１４ コントローラ
１４ａ 取得部
１４ｂ 検知部
１４ｃ 記録制御部
１４ｄ 記録部
１４ｅ 送受信部
１００ サーバ装置
１０１ 通信部
１０２ 記憶部
１０２ａ 収集情報ＤＢ
１０２ｂ 解析モデル
１０３ コントローラ
１０３ａ 収集部
１０３ｂ 解析部
１０３ｃ 検知部
１０３ｄ 要求部

【図1】

【図2】

【図3】

【図4】

【図5】