特開 2023-71336 車載装置、情報処理装置、センサデータ送信方法、および情報処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023071336

(43)【公開日】2023-05-23

(54)【発明の名称】車載装置、情報処理装置、センサデータ送信方法、および情報処理方法

(51)【国際特許分類】

   G08G 1/00 20060101AFI20230516BHJP

   G08G 1/16 20060101ALI20230516BHJP

   H04N 19/115 20140101ALI20230516BHJP

   H04N 19/134 20140101ALI20230516BHJP

   H04N 19/172 20140101ALI20230516BHJP

   G16Y 10/40 20200101ALI20230516BHJP

   G16Y 10/75 20200101ALI20230516BHJP

【ＦＩ】

G08G1/00 D

G08G1/16 A

H04N19/115

H04N19/134

H04N19/172

G16Y10/40

G16Y10/75

【審査請求】未請求

【請求項の数】13

【出願形態】ＯＬ

(21)【出願番号】P 2021184028

(22)【出願日】2021-11-11

(71)【出願人】

【識別番号】314012076

【氏名又は名称】パナソニックＩＰマネジメント株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】福本 賢

【テーマコード（参考）】

5C159

5H181

【Ｆターム（参考）】

5C159PP01

5C159PP04

5C159RC11

5C159SS14

5C159TA60

5C159TB04

5C159TC00

5C159TD12

5C159UA02

5H181AA01

5H181BB04

5H181BB05

5H181BB13

5H181BB20

5H181CC04

5H181CC11

5H181CC14

5H181FF04

5H181FF05

5H181FF10

5H181FF32

5H181KK08

5H181LL01

5H181LL02

5H181LL04

5H181LL09

5H181MC19

5H181MC22

(57)【要約】

【課題】センサデータの圧縮率に応じた処理の実行を可能にする車載装置、情報処理装置、センサデータ送信方法、および情報処理方法を提供する。
【解決手段】本開示に係る車載装置は、取得部と、圧縮部と、送信部とを備える。取得部は、車両の状態を表す車両状態情報と、車両に備えられたセンサによって計測されたセンサデータとを取得する。圧縮部は、車両状態情報に応じた異なる圧縮率でセンサデータを圧縮する。送信部は、圧縮率を、圧縮されたセンサデータに対応付けて送信する。
【選択図】図５

【特許請求の範囲】

【請求項1】

車両の状態を表す車両状態情報と、前記車両に備えられたセンサによって計測されたセンサデータとを取得する取得部と、
前記車両状態情報に応じた異なる圧縮率で前記センサデータを圧縮する圧縮部と、
前記圧縮率を、圧縮された前記センサデータに対応付けて送信する送信部と、
を備える車載装置。

【請求項2】

前記車両状態情報に応じて前記センサデータの圧縮率を決定する決定部と、
前記センサデータに前記決定部により決定された前記圧縮率を付加した圧縮率付きセンサデータを生成する生成部と、をさらに備え、
前記圧縮部は、前記圧縮率付きセンサデータを、前記決定部により決定された前記圧縮率で圧縮し、
前記送信部は、圧縮された前記圧縮率付きセンサデータを送信する、
請求項１に記載の車載装置。

【請求項3】

前記車両状態情報は、少なくとも、前記車両の車速を含み、
前記決定部は、
前記車速が第１の閾値以下の場合は、前記センサデータを第１の圧縮率で圧縮することを決定し、
前記車速が前記第１の閾値より速い場合は、前記センサデータを前記第１の圧縮率より高い第２の圧縮率で圧縮することを決定する、
請求項２に記載の車載装置。

【請求項4】

前記センサデータは、少なくとも、前記車両の周囲を撮影した画像データを含み、
前記決定部は、
前記車速が前記第１の閾値以下の場合は、前記画像データのフレームレートを第１のフレームレートに決定し、
前記車速が前記第１の閾値より速い場合は、前記画像データのフレームレートを前記第１のフレームレートよりも高い第２のフレームレートに決定し、
前記生成部は、前記決定部により決定されたフレームレートに基づいて前記画像データを編集する、
請求項３に記載の車載装置。

【請求項5】

前記センサデータは、少なくとも、前記車両の周囲を撮影した画像データを含み、
前記決定部は、
前記車速が前記第１の閾値以下の場合は、前記画像データの解像度を第１の解像度に決定し、
前記車速が前記第１の閾値より速い場合は、前記画像データの解像度を前記第１の解像度よりも低い第２の解像度に決定し、
前記生成部は、前記決定部により決定された解像度に基づいて前記画像データを編集する、
請求項３または４に記載の車載装置。

【請求項6】

前記車両状態情報は、前記車両の車速、前記車両の位置、前記車両のギヤの状態、前記車両の操舵角、前記車両の周囲の照度、前記車両の周囲の天候情報、および、前記車両のワイパーの動作状態のうちの少なくとも１つを含む、
請求項１または２に記載の車載装置。

【請求項7】

車両に搭載された車載装置から、圧縮されたセンサデータおよび当該センサデータの圧縮率を受信する受信部と、
前記センサデータの圧縮率に応じて、異なる処理を実行する制御処理部と、
を備える情報処理装置。

【請求項8】

前記圧縮率が第２の閾値以下の場合、第１の検知閾値を用いて前記センサデータに基づく障害物検知を実行し、前記圧縮率が第２の閾値より高い場合、前記第１の検知閾値より低い第２の検知閾値を用いて前記センサデータに基づく障害物検知を実行する障害物検知部、を備える、
請求項７に記載の情報処理装置。

【請求項9】

前記圧縮率が第２の閾値以下の場合、第１の学習モデルに前記圧縮されたセンサデータを学習させ、前記圧縮率が第２の閾値より高い場合、前記第１の学習モデルとは異なる第２の学習モデルに前記圧縮されたセンサデータを学習させる学習部、を備える、
請求項７または８に記載の情報処理装置。

【請求項10】

前記制御処理部は、前記圧縮されたセンサデータの圧縮率に応じて処理のアルゴリズムを変更する、
請求項７から９のいずれか１項に記載の情報処理装置。

【請求項11】

前記制御処理部による処理の結果を、前記車載装置に送信する送信部、を備える、
請求項７から１０のいずれか１項に記載の情報処理装置。

【請求項12】

車両の状態を表す車両状態情報と、前記車両に備えられたセンサによって計測されたセンサデータとを取得する取得ステップと、
前記車両状態情報に応じた異なる圧縮率で前記センサデータを圧縮する圧縮ステップと、
前記圧縮率を、圧縮された前記センサデータに対応付けて送信する送信ステップと、
を含むセンサデータ送信方法。

【請求項13】

車両に搭載された車載装置から、圧縮されたセンサデータおよび当該センサデータの圧縮率を受信する受信ステップと、
前記センサデータの圧縮率に応じて、異なる処理を実行する制御処理ステップと、
を含む情報処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、車載装置、情報処理装置、センサデータ送信方法、および情報処理方法に関する。

【背景技術】

【0002】

従来、車両に設けられた各種センサにより計測されたセンサデータを、車載装置からクラウドサーバまたはエッジサーバに送信する技術が知られている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０２０－１０７２９１号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

従来技術においては、車両の走行状況に応じてセンサデータの圧縮率を変更することが知られていたが、圧縮後のセンサデータから圧縮の際の圧縮率を特定することが困難な場合があった。このため、圧縮後のセンサデータを受信したクラウドサーバまたはエッジサーバが、圧縮率に応じた処理を実行することが困難であった。

【0005】

本開示は、センサデータの圧縮率に応じた処理の実行を可能にする車載装置、情報処理装置、センサデータ送信方法、および情報処理方法を提供する。

【課題を解決するための手段】

【0006】

本開示に係る車載装置は、取得部と、圧縮部と、送信部とを備える。取得部は、車両の状態を表す車両状態情報と、車両に備えられたセンサによって計測されたセンサデータとを取得する。圧縮部は、車両状態情報に応じた異なる圧縮率でセンサデータを圧縮する。送信部は、圧縮率を、圧縮されたセンサデータに対応付けて送信する。

【発明の効果】

【0007】

本開示に係る車載装置、情報処理装置、センサデータ送信方法、および情報処理方法によれば、センサデータの圧縮率に応じた処理の実行を可能にする。

【図面の簡単な説明】

【0008】

【図1】図１は、第１の実施形態に係る車両とクラウドサーバ間の情報通信の一例を示す図である。

【図2】図２は、第１の実施形態に係る車載装置を備える車両の一例を示す図である。

【図3】図３は、第１の実施形態に係る車両の運転席近傍の構成の一例を示す図である。

【図4】図４は、第１の実施形態に係る車載装置のハードウェア構成の一例を示す図である。

【図5】図５は、第１の実施形態に係る車載装置の機能の一例を示すブロック図である。

【図6】図６は、第１の実施形態に係るヘッダ付きセンサデータの一例を示す図である。

【図7】図７は、第１の実施形態に係るクラウドサーバの機能の一例を示すブロック図である。

【図8】図８は、第１の実施形態に係るセンサデータの送信処理の流れの一例を示すフローチャートである。

【図9】図９は、第１の実施形態に係るクラウドサーバで実行されるＡＤＡＳ処理の流れの一例を示すフローチャートである。

【図10】図１０は、第２の実施形態に係る車両、エッジサーバ、およびクラウドサーバの間の情報通信の一例を示す図である。

【図11】図１１は、第３の実施形態に係る車両、エッジサーバ、およびクラウドサーバの間の情報通信の一例を示す図である。

【発明を実施するための形態】

【0009】

以下、図面を参照しながら、本開示に係る車載装置、および情報処理装置の実施形態について説明する。

【0010】

（第１の実施形態）
図１は、第１の実施形態に係る車両１とクラウドサーバ２間の情報通信の一例を示す図である。車両１とクラウドサーバ２とは、インターネット等のネットワークを介して接続する。図１に示すように、本実施形態の車両１は、センサデータと共に圧縮率、フレームレート、および解像度等のメタデータをクラウドサーバ２に送信する。

【0011】

クラウドサーバ２は、クラウド環境に設けられる。クラウドサーバ２は、本実施形態における情報処理装置の一例である。

【0012】

クラウドサーバ２は、車両１から送信されたセンサデータのメタデータに応じて、当該センサデータに基づくＡＤＡＳ（Ａｄｖａｎｃｅｄ Ｄｒｉｖｅｒ－Ａｓｓｉｓｔａｎｃｅ Ｓｙｓｔｅｍｓ）等の処理を実行する。例えば、クラウドサーバ２は、センサデータの圧縮率に応じて、処理に用いる閾値、処理のアルゴリズム、または当該センサデータの学習に用いる学習モデルを変更する。

【0013】

クラウドサーバ２が実行するＡＤＡＳ処理は、例えば、ＡＣＣ（Ａｄａｐｔｉｖｅ Ｃｒｕｉｓｅ Ｃｏｎｔｒｏｌ Ｓｙｓｔｅｍ：アダプティブクルーズコントロール)、ＦＣＷ（Ｆｏｒｗａｒｄ Ｃｏｌｌｉｓｉｏｎ Ｗａｒｎｉｎｇ：前方衝突警告）、ＡＥＢＳ（Ａｄｖａｎｃｅｄ Ｅｍｅｒｇｅｎｃｙ Ｂｒａｋｉｎｇ Ｓｙｓｔｅｍ：衝突被害軽減制動制御装置）、ＰＤ（Ｐｅｄｅｓｔｒｉａｎ Ｄｅｔｅｃｔｉｏｎ：歩行者検知）ＴＳＲ（Ｔｒａｆｆｉｃ Ｓｉｇｎ Ｒｅｃｏｇｎｉｔｉｏｎ：交通標識認識）、ＬＤＷ（Ｌａｎｅ Ｄｅｐａｒｔｕｒｅ Ｗａｒｎｉｎｇ：車線逸脱警報）、フリースペース検知、自動駐車、および自動バレー駐車（Ａｕｔｏｍａｔｅｄ Ｖａｌｅｔ Ｐａｒｋｉｎｇ：ＡＶＰ）等であるがこれらに限定されるものではない。

【0014】

クラウドサーバ２は、例えば、車両１から受信したセンサデータおよび当該センサデータのメタデータに基づいて、車両１の走行を制御する車両制御データを車両１に送信する。また、クラウドサーバ２は、車両１の走行を制御する車両制御データ以外に、車両１の運転者への情報提供等を行ってもよい。

【0015】

本実施形態におけるセンサデータは、少なくとも、車両１に搭載された車載カメラが車両１の周囲を撮影した画像データを含む。センサデータのメタデータに含まれるフレームレートは当該画像データのフレームレート、および解像度は当該画像データの解像度である。なお、センサデータは、画像データ以外に、各種のセンサによる計測データを含んでもよい。例えば、センサデータは、車両１に搭載されたソナーまたはレーダーによる車両１の周囲の障害物と車両１との間の距離の測距データ等を含んでもよい。

【0016】

なお、本実施形態において「障害物」という場合、物体、建築物、歩行者等の人、自転車、他の車両等を含むものとする。また、図１ではクラウドサーバ２を例示しているが、クラウドサーバ２の代わりに、あるいはクラウドサーバ２に加えて、エッジサーバが用いられてもよい。

【0017】

次に、本実施形態における車両１の構成について説明する。

【0018】

図２は、第１の実施形態に係る車載装置１００を備える車両１の一例を示す図である。図２に示すように、車両１は、車体１２と、車体１２に所定方向に沿って配置された２対の車輪１３とを備える。２対の車輪１３は、１対のフロントタイヤ１３ｆ及び１対のリアタイヤ１３ｒを備える。

【0019】

なお、図２に示す車両１は４つの車輪１３を備えるが、車輪１３の数はこれに限定されるものではない。例えば、車両１は２輪車であっても良い。

【0020】

車体１２は、車輪１３に結合され、車輪１３によって移動可能である。この場合、２対の車輪１３が配置される所定方向が車両１の走行方向となる。車両１は、不図示のギヤの切り替え等により前進または後退することができる。また、車両１は、操舵により右左折することもできる。

【0021】

また、車体１２は、フロントタイヤ１３ｆ側の端部である前端部Ｆと、リアタイヤ１３ｒ側の端部である後端部Ｒを有する。車体１２は上面視で略矩形をしており、略矩形状の４つの角部を端部と呼ぶ場合もある。また、図２では図示を省略するが、車両１は、表示装置、スピーカ、および操作部を備える。

【0022】

車体１２の前後端部Ｆ，Ｒであって、車体１２の下端付近には１対のバンパー１４が設けられている。１対のバンパー１４のうち、フロントバンパー１４ｆは車体１２の下端部付近の前面全体と側面の一部を覆う。１対のバンパー１４のうち、リアバンパー１４ｒは車体１２の下端部付近の後面全体と側面の一部を覆う。

【0023】

車体１２の所定の端部には、超音波等の音波の送受波を行う送受波部１５ｆ，１５ｒが配置される。例えば、フロントバンパー１４ｆには１つ以上の送受波部１５ｆが配置され、リアバンパー１４ｒには１つ以上の送受波部１５ｒが配置される。以下、送受波部１５ｆ，１５ｒを特に限定しない場合には、単に送受波部１５という。また、送受波部１５の数および位置は、図２に示す例に限定されるものではない。例えば、車両１は、左右の側方に送受波部１５を備えても良い。

【0024】

本実施形態においては、超音波を使用したソナーを送受波部１５の一例とするが、送受波部１５は、電磁波を送受波するレーダーであっても良い。あるいは、車両１は、ソナーとレーダーの両方を備えても良い。また、送受波部１５を単にセンサと称しても良い。

【0025】

送受波部１５は、音波または電磁波の送受結果に基づいて、車両１の周囲の障害物を検出する。また、送受波部１５は、音波または電磁波の送受結果に基づいて、車両１の周囲の障害物と車両１との距離を計測する。

【0026】

また、車両１は、車両１の前方を撮影する第１の車載カメラ１６ａ、車両１の後方を撮影する第２の車載カメラ１６ｂ、車両１の左側方を撮影する第３の車載カメラ１６ｃ、および車両１の右側方を撮影する第４の車載カメラを備える。第４の車載カメラは図示を省略する。

【0027】

以下、第１の車載カメラ１６ａ、第２の車載カメラ１６ｂ、第３の車載カメラ１６ｃ、および第４の車載カメラを特に区別しない場合には単に車載カメラ１６という。車載カメラの位置及び数は図２に示す例に限定されるものではない。例えば、車両１は、また、第１の車載カメラ１６ａおよび第２の車載カメラ１６ｂの２台のみを備えても良い。あるいは、車両１は、上述の例の他に、さらに他の車載カメラを有しても良い。

【0028】

車載カメラ１６は、車両１の周囲の映像を撮影可能であり、例えば、カラー画像を撮影するカメラである。なお、車載カメラ１６が撮影する画像データは、動画でも良いし、静止画でも良い。また、車載カメラ１６は、車両１に内蔵されたカメラであっても良いし、車両１に後付けされたドライブレコーダーのカメラ等であっても良い。

【0029】

また、車両１には、車載装置１００が搭載される。車載装置１００は、車両１に搭載可能な情報処理装置であり、例えば、車両１の内部に設けられたＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）、もしくはＯＢＵ（Ｏｎ Ｂｏａｒｄ Ｕｎｉｔ）である。あるいは、車載装置１００は、車両１のダッシュボード付近に設置された外付けの装置であっても良い。なお、車載装置１００はカーナビゲーション装置等を兼ねても良い。

【0030】

次に、本実施形態の車両１の運転席近傍の構成について説明する。図３は、第１の実施形態に係る車両１の運転席１３０ａ近傍の構成の一例を示す図である。

【0031】

図３に示すように、車両１は運転席１３０ａ、および助手席１３０ｂを備える。また、運転席１３０ａの前方にはフロントガラス１８０、ダッシュボード１９０、ステアリングホイール１４０、表示装置１２０、および操作ボタン１４１が設けられる。

【0032】

表示装置１２０は、車両１のダッシュボード１９０に設けられたディスプレイである。表示装置１２０は、一例として、図３に示すようにダッシュボード１９０の中央に位置する。表示装置１２０は例えば液晶ディスプレイまたは有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイである。また、表示装置１２０は、タッチパネルを兼ねても良い。表示装置１２０は、本実施形態における表示部の一例である。

【0033】

また、ステアリングホイール１４０は、運転席１３０ａの正面に設けられ、ドライバ（運転者）によって操作可能である。ステアリングホイール１４０の回転角度、つまり操舵角は、操舵輪であるフロントタイヤ１３ｆの向きの変化と電気的または機械的に連動する。なお、操舵輪はリアタイヤ１３ｒでも良いし、フロントタイヤ１３ｆとリアタイヤ１３ｒの両方が操舵輪であっても良い。

【0034】

操作ボタン１４１は、ユーザによる操作を受け付け可能なボタンである。なお、本実施形態においてユーザは、例えば車両１の運転者である。なお、操作ボタン１４１の位置は図３に示す例に限定されるものでなく、例えばステアリングホイール１４０に設けられても良い。操作ボタン１４１は、本実施形態における操作部の一例である。また、表示装置１２０がタッチパネルを兼ねる場合は、表示装置１２０が操作部の一例であっても良い。また、不図示のタブレット端末、スマートフォン、リモートコントローラ、または電子キー等の、車両１の外部から車両１に対して信号を送信可能な操作端末を、操作部の一例としても良い。

【0035】

次に、本実施形態の車載装置１００のハードウェア構成について説明する。

【0036】

図４は、第１の実施形態に係る車載装置１００のハードウェア構成の一例を示す図である。図４に示すように、車載装置１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１Ａ、ＲＯＭ１１Ｂ、ＲＡＭ１１Ｃ、デバイスＩ／Ｆ（インタフェース）１１Ｄ、ＣＡＮ（Ｃｏｎｔｒｏｌｌｅｒ Ａｒｅａ Ｎｅｔｗｏｒｋ）Ｉ／Ｆ１１Ｅ、ＮＷ（ＮｅｔＷｏｒｋ） Ｉ／Ｆ１１Ｆ、ＨＤＤ１１Ｇ等がバス１１Ｈにより相互に接続されており、通常のコンピュータを利用したハードウェア構成となっている。

【0037】

ＣＰＵ１１Ａは、車載装置１００全体を制御する演算装置である。なお、ＣＰＵ１１Ａは、本実施形態の車載装置１００におけるプロセッサの一例であり、他のプロセッサまたは処理回路がＣＰＵ１１Ａの代わりに設けられても良い。

【0038】

ＲＯＭ１１Ｂ、ＲＡＭ１１Ｃ、およびＨＤＤ１１Ｇは、記憶部として機能する。例えば、ＲＯＭ１１Ｂは、ＣＰＵ１１Ａによる各種処理を実現するプログラム等を記憶する。ＲＡＭ１１Ｃは、例えば車載装置１００の主記憶装置であり、ＣＰＵ１１Ａによる各種処理に必要なデータを記憶する。

【0039】

デバイスＩ／Ｆ１１Ｄは、各種のデバイスと接続可能なインタフェースである。例えば、デバイスＩ／Ｆ１１Ｄは、ＧＰＳ装置１１ｌと接続し、ＧＰＳ装置１１ｌから、車両１の現在位置を示す位置情報を取得する。当該位置情報は、例えば、車両１の絶対位置を示す緯度と経度の値である。

【0040】

ＧＰＳ装置１１ｌは、ＧＰＳアンテナ１１Ｊが受信したＧＰＳ信号に基づいて車両１の位置を表すＧＰＳ座標を特定する装置である。ＧＰＳアンテナ１１Ｊは、ＧＰＳ信号を受信可能なアンテナである。

【0041】

また、デバイスＩ／Ｆ１１Ｄは、車載カメラ１６および送受波部１５から画像および検知結果等を取得する。

【0042】

ＣＡＮ Ｉ／Ｆ１１Ｅは、車両１内のＣＡＮを介して車両１に搭載された他のＥＣＵとの間で情報の送受信をするためのインタフェースである。なお、ＣＡＮ以外の通信規格を採用しても良い。

【0043】

ＮＷ Ｉ／Ｆ１１Ｆは、インターネット等のネットワークを介してクラウドサーバ２等の外部の情報処理装置と通信可能な通信装置である。ＮＷ Ｉ／Ｆ１１Ｆは、例えば、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）（登録商標）等の公衆回線、Ｗｉ-Ｆｉ（登録商標）やＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離通信等による通信が可能である。また、車載装置１００のＮＷ Ｉ／Ｆ１１Ｆは、インターネットを介してクラウドサーバ２と直接的に通信してもよいし、他の情報処理装置等の機器を介して、間接的に通信してもよい。

【0044】

次に、本実施形態の車載装置１００が備える機能について説明する。

【0045】

図５は、第１の実施形態に係る車載装置１００の機能の一例を示すブロック図である。図５に示すように、車載装置１００は、取得部１０１、決定部１０２、生成部１０３、圧縮部１０４、送信部１０５、受信部１０６、車両制御部１０７、表示制御部１０８、受付部１０９、および記憶部１１０を備える。

【0046】

記憶部１１０は、例えばＲＯＭ１１Ｂ、ＲＡＭ１１Ｃ、またはＨＤＤ１１Ｇによって構成される。なお、図５では１つの記憶部１１０が車載装置１００に含まれるように記載したが、複数の記憶媒体が記憶部１１０として機能しても良い。

【0047】

取得部１０１、決定部１０２、生成部１０３、圧縮部１０４、送信部１０５、受信部１０６、車両制御部１０７、表示制御部１０８、および受付部１０９は、例えば、ＲＯＭ１１ＢまたはＨＤＤ１１Ｇに記憶されたプログラムをＣＰＵ１１Ａが読み出すことにより、実行される機能である。あるいは、これらの機能を備えるハードウェア回路が車載装置１００に設けられても良い。

【0048】

取得部１０１は、車両１の状態を表す車両状態情報と、車両１に備えられたセンサによって計測されたセンサデータとを取得する。

【0049】

本実施形態において、車両１に備えられたセンサは、例えば、車載カメラ１６または送受波部１５とする。さらに具体的には、本実施形態では、車載カメラ１６をセンサとした場合の例について説明する。また、本実施形態では、車載カメラ１６によって撮影された画像データをセンサデータの一例として説明する。

【0050】

取得部１０１は、デバイスＩ／Ｆ１１Ｄを介して、車載カメラ１６から車両１の周囲を撮影した画像データを取得する。また、取得部１０１は、デバイスＩ／Ｆ１１Ｄを介して、送受波部１５から車両１の周囲の障害物と車両１との間の距離の測距データ、および障害物の検出結果を取得する。

【0051】

なお、センサは、車載カメラ１６および送受波部１５の両方、あるいは、送受波部１５のみでもよい。また、車両１はその他のセンサをさらに備えてもよい。センサが送受波部１５である場合は、センサデータは、送受波部１５による車両１の周囲の障害物と車両１との間の距離の測距データ、または障害物の検出結果であってもよい。

【0052】

本実施形態の車両状態情報は、少なくとも、車両１の車速を含む。取得部１０１は、ＣＡＮ Ｉ／Ｆ１１Ｅを介して他のＥＣＵから車両１の車速を取得する。また、取得部１０１は、車両１に備えられた車輪速センサ等から車両１の車輪速を取得し、当該車輪速から車両１の車速を得てもよい。

【0053】

また、車両状態情報は、車速以外の情報を含んでもよい。例えば、車速、ＧＰＳ装置１１ｌによって計測された車両１のＧＰＳ位置情報、車両１のギヤの状態、操舵角、車両１の周囲の照度等の周辺情報、車両１の周囲の天候情報、および車両１のワイパーの動作状態のうちの少なくとも１つが車両状態情報に含まれるものとしてもよい。これらの情報は、取得部１０１によって車両１の各装置から取得される。ＧＰＳ位置情報は、車両１の現在位置の特性を特定するために用いられる。例えば、取得部１０１は、地図データと車両１のＧＰＳ位置情報とから、車両１の現在位置の特性を得てもよい。地図データは、例えば、インターネット等を介して車載装置１００と接続する外部装置に記憶されていてもよいし、車載装置１００の記憶部１１０が記憶していてもよい。車両１の現在位置の特性は、例えば、駐車場、一般道路、および高速道路等の分類である。

【0054】

決定部１０２は、車両状態情報に応じてセンサデータの圧縮率を決定する。例えば、決定部１０２は、車両状態情報に含まれる車速が第１の閾値以下の場合は、センサデータを低圧縮率で圧縮することを決定する。また、決定部１０２は、車両状態情報に含まれる車速が第１の閾値より速い場合は、センサデータを高圧縮率で圧縮することを決定する。低圧縮率は、本願出願における第１の圧縮率の一例である。また、高圧縮率は、本願出願における第２の圧縮率の一例である。低圧縮率および高圧縮率の具体的な数値は特に限定されるものではなく、高圧縮率が低圧縮率より高ければよい。第１の閾値の値は特に限定されるものではない。

【0055】

また、本実施形態において、圧縮率は低圧縮率と高圧縮率の２段階とするが、圧縮率は３段階以上に分かれてもよい。例えば、決定部１０２は、車速が速いほど圧縮率が高くなるように、段階的に圧縮率を決定してもよい。

【0056】

車速が速い場合、車載装置１００は、車両１の走行制御のため、クラウドサーバ２からのＡＤＡＳ処理の結果を迅速に得た方がよい。センサデータの圧縮率が高いほど、圧縮されたセンサデータの車両１とクラウドサーバ２間の送信時間が短くなる。このため、決定部１０２は、車速が速い場合に車速が遅い場合よりもセンサデータの圧縮率を高くし、圧縮後のセンサデータをクラウドサーバ２に迅速に送信する。

【0057】

なお、本実施形態における圧縮の方式は特に限定されないが、基本的に、不可逆圧縮とする。このため、車両１からクラウドサーバ２に送信された圧縮済みのセンサデータは、クラウドサーバ２によって展開された後も、圧縮前の状態よりもデータサイズが小さくなる。クラウドサーバ２が車両１から送信された画像データに基づいて歩行者検知処理を実行する場合、画像データのサイズが大きいほど、高精度の歩行者検知が可能となる。例えば、車両１が低速で走行している場合、車両１が駐車直前の状態か、道幅の狭い道路を走行している場合が想定される。このような場合、歩行者の飛び出し等の可能性が高いため、クラウドサーバ２は、高解像度の画像データによって高精度の歩行者検知を実行する。

【0058】

また、決定部１０２は、車速以外の車両状態情報に応じてセンサデータの圧縮率を決定してもよい。例えば、決定部１０２は、車両１のワイパーが連続して動作している場合、雨が降っている可能性が高い。天候が雨の場合には、運転者による車両１の周囲の視認性が低下する。このような場合、クラウドサーバ２による歩行者検知の精度を向上させるため、決定部１０２は、画像データの圧縮率を低圧縮率に決定する。また、決定部１０２は、車両１の現在位置が駐車場である場合、クラウドサーバ２による歩行者や周囲の他の車両の検知の精度を向上させるため、画像データの圧縮率を低圧縮率に決定してもよい。

【0059】

また、決定部１０２は、複数の情報の組み合わせ、例えば車速と車両１の現在位置の特性との組み合わせに応じて、センサデータの圧縮率を決定してもよい。

【0060】

また、決定部１０２は、圧縮率の他に、センサデータの種々の特性を車両状態情報に応じて決定してもよい。例えば、決定部１０２は、画像データが動画である場合であって、車速が第１の閾値以下の場合は、画像データのフレームレートを低フレームレート、画像データの解像度を高解像度に決定に決定する。また、決定部１０２は、車速が第１の閾値より速い場合は、画像データのフレームレートを高フレームレート、画像データの解像度を低解像度に決定する。

【0061】

低フレームレートは本実施形態における第１のフレームレートの一例である。また、高フレームレートは本実施形態における第１のフレームレートの一例である。低フレームレートおよび高フレームレートの具体的な値は特に限定されず、高フレームレートの方が低フレームレートよりも高ければよい。高解像度は本実施形態における第１の解像度の一例である。低解像度は本実施形態における第２の解像度の一例である。高解像度および低解像度の具体的な値は特に限定されず、高解像度の方が低解像度よりも高ければよい。なお、決定部１０２が決定する解像度は、画像データが圧縮された後に、クラウドサーバ２において展開された状態における解像度である。なお、画像データが静止画である場合は、決定部１０２は、フレームレートについては決定せず、解像度について決定する。

【0062】

また、本実施形態においてはフレームレートおよび解像度は２段階とするが、フレームレートおよび解像度は３段階以上に分かれてもよい。例えば、決定部１０２は、車速が速いほどフレームレートが高くなるように、段階的にフレームレートを決定してもよい。また、決定部１０２は、車速が遅いほど解像度が高くなるように、段階的に解像度を決定してもよい。一般に、車両１の車速が速いほど、画像データの動きが多くなる。決定部１０２がフレームレートを高く設定することにより、クラウドサーバ２における当該画像データ内の動きの検知漏れを低減させることができる。

【0063】

生成部１０３は、センサデータに決定部１０２により決定された圧縮率を付加したヘッダ付きセンサデータを生成する。ヘッダ付きセンサデータは、本実施形態における圧縮率付きセンサデータの一例である。

【0064】

また、決定部１０２が車両状態情報に応じて画像データのフレームレートおよび解像度を決定する場合、生成部１０３は、画像データを決定部１０２により決定されたフレームレートに編集する。また、生成部１０３は、画像データの圧縮および展開後に、画像データが決定部１０２により決定された解像度になるように画像データの解像度を調整してもよい。

【0065】

図６は、第１の実施形態に係るヘッダ付きセンサデータ４００の一例を示す図である。図６に示すように、ヘッダ付きセンサデータ４００は、本体部であるセンサデータ４２０に付帯するヘッダデータ４１０として圧縮率が付与されたデータである。

【0066】

なお、ヘッダ付きセンサデータ４００は、圧縮率以外のデータをヘッダデータ４１０に含んでもよい。図６に示す例では、ヘッダデータ４１０は、画像データの圧縮率、画像データのフレームレート、および画像データの解像度を含む。画像データの圧縮率、画像データのフレームレート、および画像データの解像度は、画像データのメタデータの一例である。センサデータが画像データではない場合は、メタデータの内容は図６に示す例とは異なる場合がある。

【0067】

なお、図６に示すヘッダ付きセンサデータ４００では、画像データであるセンサデータ４２０のヘッダデータ４１０に圧縮率等のメタデータが含まれるが、圧縮率等のメタデータはセンサデータ４２０に対応付けられていればよく、必ずしもヘッダデータ４１０としてセンサデータ４２０に付加されなくともよい。

【0068】

図５に戻り、圧縮部１０４は、車両状態情報に応じた異なる圧縮率でセンサデータを圧縮する。より詳細には、圧縮部１０４は、生成部１０３によって生成されたヘッダ付きセンサデータ４００を、決定部１０２により決定された圧縮率で圧縮する。

【0069】

送信部１０５は、ＮＷ Ｉ／Ｆ１１Ｆを介して、圧縮率を、圧縮されたセンサデータ４２０に対応付けてクラウドサーバ２に送信する。より詳細には、送信部１０５は、圧縮部１０４により圧縮されたヘッダ付きセンサデータ４００をクラウドサーバ２に送信する。

【0070】

受信部１０６は、ＮＷ Ｉ／Ｆ１１Ｆを介して、クラウドサーバ２から、車両１の走行を制御する車両制御データを受信する。車両制御データは、例えば、ＡＤＡＳによる処理結果である。具体的には、車両制御データは、車両１の周囲の障害物の検知結果、車両１の制動操作を指示する信号、車両１の操舵を指示する信号、または車両１の車速を指示する信号等である。

【0071】

車両制御部１０７は、受信部１０６が受信した車両制御データに基づいて、車両１の走行を制御する。例えば、車両制御部１０７は、車両制御データに基づいて、車両１の操舵、制動、および加減速を制御する。また、車両制御部１０７は、車両制御データに基づく制御の他に、車載カメラ１６が車両１の周囲を撮影した画像、および送受波部１５が検知した車両１の周囲の障害物との距離に基づいて、車両１の走行を制御してもよい。

【0072】

表示制御部１０８は、表示装置１２０に各種の画像およびＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を表示させる。また、表示制御部１０８は、受信部１０６が受信した車両制御データに基づいて、障害物検知の警告を表示装置１２０に表示させてもよい。

【0073】

受付部１０９は、操作ボタン１４１を介して車両１の運転者からの各種の操作を受け付ける。また、表示装置１２０がタッチパネルを備える場合、受付部１０９は、当該タッチパネルに入力された車両１の運転者からの各種の操作を受け付ける。

【0074】

次に、クラウドサーバ２の機能について説明する。

【0075】

図７は、第１の実施形態に係るクラウドサーバ２の機能の一例を示すブロック図である。

【0076】

図７に示すように、クラウドサーバ２は、受信部２０１、ＡＤＡＳ処理部２００、送信部２０５、および記憶部２１０を備える。ＡＤＡＳ処理部２００は、本実施形態における制御処理部の一例である。

【0077】

記憶部２１０は、例えばクラウド環境のＲＯＭ、ＲＡＭ、またはＨＤＤによって構成される。

【0078】

受信部２０１、ＡＤＡＳ処理部２００、および送信部２０５は、例えば、記憶部２１０に記憶されたプログラムをクラウド環境のＣＰＵが読み出すことにより、実行される機能である。

【0079】

受信部２０１は、車両１に搭載された車載装置１００から、圧縮されたセンサデータ４２０および当該センサデータ４２０の圧縮率を受信する。より詳細には、受信部２０１は、車両１に搭載された車載装置１００から、圧縮されたヘッダ付きセンサデータ４００を受信する。

【0080】

ＡＤＡＳ処理部２００は、センサデータ４２０の圧縮率に応じて、異なる処理を実行する。より詳細には、ＡＤＡＳ処理部２００は、圧縮されたヘッダ付きセンサデータ４００に含まれる圧縮率に応じて、異なる処理を実行する。

【0081】

図７に示す例では、ＡＤＡＳ処理部２００は、障害物検知部２０２、学習部２０３、および推定部２０４を含む。これらの機能部は、ＡＤＡＳ処理部２００が実行するＡＤＡＳ機能の一例である。なお、ＡＤＡＳ処理部２００に含まれる機能部はこれらに限定されない。

【0082】

障害物検知部２０２は、センサデータ４２０の圧縮率に応じて、センサデータ４２０から障害物を検知する処理における障害物検知用の閾値を変更する。以下、障害物検知用の閾値を検知閾値という。なお、障害物検知部２０２は、圧縮されたセンサデータ４２０を展開した上で、障害物検知に用いる。

【0083】

例えば、障害物検知部２０２は、センサデータ４２０の圧縮率が第２の閾値以下の場合、低圧縮率用検知閾値を用いてセンサデータ４２０に基づく障害物検知を実行する。また、障害物検知部２０２は、センサデータ４２０の圧縮率が第２の閾値より高い場合、高圧縮率用検知閾値を用いてセンサデータ４２０に基づく障害物検知を実行する。

【0084】

低圧縮率用検知閾値は、本実施形態における第１の検知閾値の一例である。高圧縮率用検知閾値は、本実施形態における第２の検知閾値の一例である。高圧縮率用検知閾値は、第低圧縮率用検知閾値より低い値とする。つまり、障害物検知部２０２は、センサデータ４２０の圧縮率が高い場合に、センサデータ４２０の圧縮率が低い場合よりも、「車両１の周囲に障害物が存在する」と判定しやすい。センサデータ４２０が画像データである場合、圧縮率が高い画像データの方が、圧縮率が低い画像データよりも、解像度が低くなる。このため、障害物検知部２０２は、圧縮率が高い画像データを用いる場合は障害物検知のための検知閾値を低く、障害物の検知漏れを低減する。なお、検知閾値の高さは２段階以上に分かれていてもよい。

【0085】

また、障害物検知部２０２は、検知した障害物を回避するための車両１の制動操作を指示する信号、車両１の操舵を指示する信号、または車両１の車速を指示する信号等を生成してもよい。

【0086】

学習部２０３は、車載装置１００から送信されたセンサデータを学習する。学習の手法は、例えば、学習モデルを用いた深層学習等であるが、これに限定されるものではない。なお、学習部２０３は、圧縮されたセンサデータ４２０を展開した上で、学習に用いる。

【0087】

学習部２０３は、センサデータ４２０の圧縮率に応じて、異なる学習モデルを用いる。例えば、学習部２０３は、センサデータ４２０の圧縮率が第２の閾値以下の場合、低圧縮率用学習モデルに、センサデータ４２０を学習させる。また、学習部２０３は、センサデータ４２０の圧縮率が第２の閾値より高い場合、高圧縮率用学習モデルにセンサデータ４２０を学習させる。低圧縮率用学習モデルは、本実施形態における第１の学習モデルの一例である。高圧縮率用学習モデルは、本実施形態における第２の学習モデルの一例である。学習部２０３は、低圧縮率用学習モデルおよび高圧縮率用学習モデルを、例えば記憶部２１０に保存する。

【0088】

学習モデルに入力される学習データの条件が統一されていることで、学習モデルの学習精度が向上する。上述のように、センサデータ４２０が画像データである場合、圧縮率が高い画像データの方が、圧縮率が低い画像データよりも、解像度が低くなる。このため、学習部２０３が、センサデータ４２０の圧縮率に応じて、異なる学習モデルを用いることにより、圧縮率が異なる複数のセンサデータ４２０を１つの学習モデルに入力するよりも、学習モデルの学習精度が向上する。なお、学習モデルの数は２つに限らず、３つ以上であってもよい。

【0089】

推定部２０４は、学習部２０３によって学習された低圧縮率用学習モデルおよび高圧縮率用学習モデルを用いて、推定処理を実行する。推定処理の内容は、例えば、障害物検知でもよいし、前方衝突警告でもよい。

【0090】

例えば、推定部２０４は、センサデータ４２０の圧縮率が第２の閾値以下の場合、学習済みの低圧縮率用学習モデルにセンサデータ４２０を入力し、学習済みの低圧縮率用学習モデルからの出力を推定結果として得る。また、推定部２０４は、センサデータ４２０の圧縮率が第２の閾値より高い場合、学習済みの高圧縮率用学習モデルにセンサデータ４２０を入力し、学習済みの高圧縮率用学習モデルからの出力を推定結果として得る。

【0091】

なお、学習部２０３と推定部２０４とが同時に機能しなくともよい。例えば、低圧縮率用学習モデルおよび高圧縮率用学習モデルに規定の閾値以上のセンサデータ４２０が学習されるまでが、推定部２０４は機能しなくともよい。また、図７では障害物検知部２０２と推定部２０４を別個の機能部として図示したが、障害物検知部２０２が学習部２０３によって学習された低圧縮率用学習モデルおよび高圧縮率用学習モデルを用いて、障害物検知を実行してもよい。

【0092】

なお、センサデータ４２０の圧縮率に応じた処理の変化は、上述の例に限定されない。ＡＤＡＳ処理部２００は、センサデータ４２０の圧縮率に応じて処理のアルゴリズムを変更してもよい。また、ＡＤＡＳ処理部２００は、圧縮率以外のメタデータに応じて、異なる処理を実行してもよい。例えば、ＡＤＡＳ処理部２００は、ヘッダ付きセンサデータ４００のヘッダデータ４１０に含まれるフレームレートまたは解像度に応じて、処理に用いる検知閾値、学習モデル、またはアルゴリズムを変更してもよい。

【0093】

送信部２０５は、ＡＤＡＳ処理部２００による処理の結果である車両制御データを、車載装置１００に送信する。例えば、送信部２０５は、障害物検知部２０２による障害物の検知結果を車載装置１００に送信する。また、送信部２０５は、障害物検知部２０２によって生成された車両１の制動操作を指示する信号、車両１の操舵を指示する信号、または車両１の車速を指示する信号を車載装置１００に送信してもよい。

【0094】

次に、以上のように構成された車載装置１００で実行されるセンサデータ４２０の送信処理の流れについて説明する。

【0095】

図８は、第１の実施形態に係るセンサデータ４２０の送信処理の流れの一例を示すフローチャートである。このフローチャートの処理は、例えば、車載装置１００が車両１のイグニッション電源から電力供給を受けている場合、イグニッション電源がオン状態の場合に開始する。また、車載装置１００が車両１のアクセサリー電源から電力供給を受けている場合、このフローチャートの処理は、アクセサリー電源がオン状態の場合に開始する。

【0096】

まず、取得部１０１は、車両１の車速等の車両状態情報を取得する（Ｓ１０１）。また、取得部１０１は、センサデータ４２０を取得する（Ｓ１０２）。

【0097】

次に、決定部１０２は、車両１が走行中であるか否かを判定する（Ｓ１０３）。例えば、決定部１０２は、取得部１０１によって取得された車両１の車速が閾値以上の場合に、車両１が走行中であると判定する。なお、決定部１０２は、アクセルペダルの動作状態等に基づいて車両１の走行の有無を判定してもよい。

【0098】

車両１が走行中ではないと決定部１０２が判定した場合（Ｓ１０３“Ｎｏ”）、Ｓ１０１の処理に戻る。車両１が走行を開始しない場合は、Ｓ１０１～Ｓ１０３の処理が繰り返し実行される。なお、車両１が走行中ではない場合、取得部１０１は、センサデータ４２０を取得しなくともよい。

【0099】

また、車両１が走行中であると判定した場合（Ｓ１０３“Ｙｅｓ”）、決定部１０２は、車両状態情報に応じて、センサデータ４２０の圧縮率、フレームレート、および解像度を決定する（Ｓ１０４）。

【0100】

次に、生成部１０３は、決定部１０２によって決定されたフレームレート、および解像度に応じて、センサデータ４２０を編集する（Ｓ１０５）。

【0101】

次に、生成部１０３は、センサデータ４２０のヘッダに、決定部１０２によって決定された圧縮率、フレームレート、および解像度を記述する（Ｓ１０６）。

【0102】

次に、圧縮部１０４は、ヘッダ付きセンサデータ４００を、決定部１０２によって決定された圧縮率で圧縮する（Ｓ１０７）。

【0103】

次に、送信部１０５は、圧縮されたヘッダ付きセンサデータ４００を、クラウドサーバ２に送信する（Ｓ１０８）。

【0104】

そして、車両１のイグニッション電源またはアクセサリー電源がオン状態の場合は（Ｓ１０９“Ｎｏ”）、Ｓ１０１の処理に戻り、このフローチャートの処理が繰り返される。また、車両１のイグニッション電源またはアクセサリー電源がオフ状態となった場合は（Ｓ１０９“Ｙｅｓ”）、このフローチャートの処理は終了する。

【0105】

次に、クラウドサーバ２で実行されるＡＤＡＳ処理の流れについて説明する。

【0106】

図９は、第１の実施形態に係るクラウドサーバ２で実行されるＡＤＡＳ処理の流れの一例を示すフローチャートである。クラウドサーバ２によるＡＤＡＳ処理は、基本的に、常時開始可能な状態であり、車載装置１００からのヘッダ付きセンサデータ４００の受信を待機している。

【0107】

クラウドサーバ２の受信部２０１が車両１に搭載された車載装置１００からヘッダ付きセンサデータ４００を受信した場合であって（Ｓ２０１“Ｙｅｓ”）、かつ、圧縮率が第２の閾値以下の場合（Ｓ２０２“Ｙｅｓ”）、クラウドサーバ２のＡＤＡＳ処理部２００に含まれる障害物検知部２０２、学習部２０３、および推定部２０４は、低圧縮率用検知閾値、低圧縮率用学習モデル、および低圧縮率用アルゴリズムを適用して各種のＡＤＡＳ処理を実行する（Ｓ２０３）。

【0108】

また、受信部２０１が車両１に搭載された車載装置１００からヘッダ付きセンサデータ４００を受信した場合であって（Ｓ２０１“Ｙｅｓ”）、かつ、圧縮率が第２の閾値より高い場合（Ｓ２０２“Ｎｏ”）、クラウドサーバ２のＡＤＡＳ処理部２００に含まれる障害物検知部２０２、学習部２０３、および推定部２０４は、高圧縮率用検知閾値、高圧縮率用学習モデル、および高圧縮率用アルゴリズムを適用してＡＤＡＳ処理を実行する（Ｓ２０４）。

【0109】

Ｓ２０３およびＳ２０４の処理の後、クラウドサーバ２の送信部２０５は、ＡＤＡＳ処理部２００による処理の結果である車両制御データを、車載装置１００に送信する（Ｓ２０５）。

【0110】

そして、ＡＤＡＳ処理が終了せずに継続する場合（Ｓ２０６“Ｎｏ”）、Ｓ２０１の処理に戻り、このフローチャートの処理が繰り返される。また、ＡＤＡＳ処理が終了する場合（Ｓ２０６“Ｙｅｓ”）、このフローチャートの処理は終了する。クラウドサーバ２によるＡＤＡＳ処理が終了する場合とは、例えば、管理者によりクラウドサーバ２が停止させられた場合等である。

【0111】

このように、本実施形態の車載装置１００は、車両１の車両状態情報に応じた異なる圧縮率でセンサデータ４２０を圧縮し、当該圧縮率を、圧縮されたセンサデータ４２０に対応付けて送信する。このため、本実施形態の車載装置１００から圧縮後のセンサデータを受信したクラウドサーバ２またはエッジサーバは、センサデータの圧縮率に応じた処理を実行可能である。

【0112】

比較例として、車両状態情報に応じた異なる圧縮率でセンサデータを圧縮し、圧縮したセンサデータのみをクラウドサーバまたはエッジサーバに送信した場合、当該圧縮されたセンサデータを受信したクラウドサーバまたはエッジサーバ等の側では、受信した圧縮されたセンサデータの圧縮率を特定できないため、圧縮率に応じて処理を変更することは困難であった。このため、比較例では、圧縮率が異なるためにデータサイズ等がバラバラなセンサデータに対して同一の処理を施すことになる。これに対して、本実施形態の車載装置１００は、圧縮率を、圧縮されたセンサデータ４２０に対応付けて送信するため、当該圧縮されたセンサデータ４２０を受信したクラウドサーバ２またはエッジサーバの方で、圧縮率に応じて処理を分けることが可能となり、処理結果の精度を向上させることができる。

【0113】

また、本実施形態の車載装置１００は、取得したセンサデータに車両状態情報に応じて決定した圧縮率をヘッダデータとして付加したヘッダ付きセンサデータ４００を生成し、当該ヘッダ付きセンサデータ４００を、決定した圧縮率で圧縮し、圧縮されたヘッダ付きセンサデータ４００を送信する。このため、本実施形態の車載装置１００によれば、圧縮率とセンサデータ４２０とを一体としてクラウドサーバ２等に送信できるため、受信側での圧縮率とセンサデータ４２０との対応関係の把握が容易となる。

【0114】

また、本実施形態において、車両状態情報は、少なくとも、車両１の車速を含む。本実施形態の車載装置１００は、車速が第１の閾値以下の場合は、センサデータ４２０を低圧縮率で圧縮することを決定し、車速が第１の閾値より速い場合は、センサデータ４２０を高圧縮率で圧縮することを決定する。このため、本実施形態の車載装置１００によれば、車両１の車速が早い場合にはセンサデータ４２０の圧縮率を高めてクラウドサーバ２等へのデータ送信時間を短縮することにより、クラウドサーバ２等からの処理結果を迅速に得ることができる。また、本実施形態の車載装置１００によれば、車両１の車速が遅い場合には、センサデータ４２０の圧縮率を低く抑えてセンサデータ４２０の劣化を低減し、クラウドサーバ２等におけるＡＤＡＳ処理の精度向上させることができる。つまり、本実施形態の車載装置１００は、車両１の車速に応じて、データ送信速度と、ＡＤＡＳ処理の精度とのバランスを適切に調整することができる。

【0115】

また、本実施形態において、センサデータ４２０は、少なくとも、車両１の周囲を撮影した画像データを含む。本実施形態の車載装置１００は、車両１の車速が第１の閾値以下の場合は、画像データのフレームレートを低フレームレート、画像データの解像度を高解像度に決定する。また、本実施形態の車載装置１００は、車両１の車速が第１の閾値より速い場合は、画像データのフレームレートを高フレームレート、画像データの解像度を低解像度に決定する。このため、本実施形態の車載装置１００によれば、圧縮率によるデータ送信速度とＡＤＡＳ処理の精度とのバランスの調整に加えて、さらに、フレームレートと解像度によって、車両１の車速に応じたデータ送信速度とＡＤＡＳ処理の精度とのバランスの調整をすることができる。

【0116】

また、本実施形態の車両状態情報は、車両１の車速、車両１の位置、車両１のギヤの状態、車両１の操舵角、車両１の周囲の照度、車両１の周囲の天候情報、および、車両１のワイパーの動作状態のうちの少なくとも１つを含む。このため、本実施形態の車載装置１００によれば、車速だけではなく、車両１の様々な状態に応じて、データ送信速度と、ＡＤＡＳ処理の精度とのバランスを適切に調整することができる。

【0117】

また、本実施形態のクラウドサーバ２は、車載装置１００から、圧縮されたセンサデータ４２０および当該センサデータ４２０の圧縮率を受信し、センサデータ４２０の圧縮率に応じて、異なる処理を実行する。このため、本実施形態のクラウドサーバ２によれば、圧縮率に応じて処理を分けることができ、処理結果の精度を向上させることができる。

【0118】

また、本実施形態のクラウドサーバ２は、センサデータ４２０の圧縮率が第２の閾値以下の場合、低圧縮率用検知閾値を用いてセンサデータ４２０に基づく障害物検知を実行し、センサデータ４２０の圧縮率が第２の閾値より高い場合、高圧縮率用検知閾値を用いてセンサデータ４２０に基づく障害物検知を実行する。このため、本実施形態のクラウドサーバ２によれば、圧縮率が高い画像データを用いる場合は障害物検知のための検知閾値を低くすることにより、障害物の検知漏れを低減することができる。

【0119】

また、本実施形態のクラウドサーバ２は、圧縮率が第２の閾値以下の場合、低圧縮率用学習モデルにセンサデータ４２０を学習させ、圧縮率が第２の閾値より高い場合、高圧縮率用学習モデルにセンサデータ４２０を学習させる。このため、本実施形態のクラウドサーバ２によれば、圧縮率に応じて異なる学習モデルを用いることにより、圧縮率が異なる複数のセンサデータ４２０を１つの学習モデルに入力するよりも、学習モデルの学習精度を向上させることができる。

【0120】

（第２の実施形態）
上述の第１の実施形態では、クラウドサーバ２が、車載装置１００から送信されたセンサデータ４２０に基づいてＡＤＡＳ処理を実行していたが、ＡＤＡＳ処理の実行主体はクラウドサーバ２に限定されるものではない。例えば、エッジサーバがＡＤＡＳ処理の実行主体であってもよい。

【0121】

図１０は、第２の実施形態に係る車両１、エッジサーバ３、およびクラウドサーバ２の間の情報通信の一例を示す図である。本実施形態においては、エッジサーバ３およびクラウドサーバ２が、情報処理装置の一例となる。

【0122】

エッジサーバ３は、エッジコンピューティング技術により、車載装置１００の処理を保管可能なコンピュータである。エッジサーバ３は、例えば、ＣＰＵ等のプロセッサおよびＲＡＭ、ＲＯＭ、ＨＤＤ等の記憶装置を備える。エッジサーバ３は、例えば、通信基地局や交通インフラ設備内等に設けられ、車両１に搭載された車載装置１００およびクラウドサーバ２と相互に情報通信する。

【0123】

例えば、本実施形態においては、図７に図示した第１の実施形態におけるクラウドサーバ２のＡＤＡＳ処理部２００のうち、障害物検知部２０２および推定部２０４がエッジサーバ３に備えられる。また、図７に図示した第１の実施形態におけるクラウドサーバ２のＡＤＡＳ処理部２００のうち、学習部２０３がクラウドサーバ２に備えられる。また、図７に図示した第１の実施形態におけるクラウドサーバ２の受信部２０１、送信部２０５、および記憶部２１０に相当する機能部は、エッジサーバ３およびクラウドサーバ２の両方が備えるものとする。

【0124】

エッジサーバ３の受信部は、車載装置１００から圧縮されたヘッダ付きセンサデータ４００を受信する。エッジサーバ３の障害物検知部２０２および推定部２０４は、第１の実施形態におけるクラウドサーバ２の障害物検知部２０２および推定部２０４と同様に、圧縮率に応じた処理を実行する。また、エッジサーバ３の送信部は、障害物検知部２０２または推定部２０４による処理結果に基づく車両制御データを車両１に送信する。また、エッジサーバ３の送信部は、車載装置１００から受信した圧縮されたヘッダ付きセンサデータ４００をクラウドサーバ２に送信する。

【0125】

クラウドサーバ２の受信部は、エッジサーバ３から圧縮されたヘッダ付きセンサデータ４００を受信する。クラウドサーバ２の学習部２０３は、第１の実施形態と同様に、ヘッダ付きセンサデータ４００の圧縮率に応じた学習モデルで学習を実行する。また、クラウドサーバ２の送信部は、学習部２０３によって学習された学習済みモデルを、エッジサーバ３に送信する。当該学習済みモデルは、例えば、エッジサーバ３の推定部２０４または障害物検知部２０２で使用される。

【0126】

このように障害物検知部２０２および学習部２０３をエッジサーバ３が備えることにより、クラウドサーバ２で処理をするよりも迅速に、ヘッダ付きセンサデータ４００に基づく処理結果である車両制御データを車載装置１００に送信することができる。

【0127】

また、一般に、エッジサーバ３よりもクラウドサーバ２の方が記憶容量の制限が少ないため、処理に時間を要しても車両１の走行制御に影響のない学習処理については、クラウドサーバ２が実行することにより、大量のセンサデータ４２０の学習が可能となる。

【0128】

なお、図１０では、エッジサーバ３およびクラウドサーバ２の両方が用いられる場合について図示したが、あるいは、クラウドサーバ２がなく、エッジサーバ３と車載装置１００のみで処理が行われる構成が採用されてもよい。この場合、エッジサーバ３が情報処理装置の一例となる。

【0129】

（第３の実施形態）
上述の第２の実施形態では、エッジサーバ３は車両１の外部に設けられるものとしたが、エッジサーバ３は車両１内に設けてもよい。図１１は、第３の実施形態に係る車両１、エッジサーバ３、およびクラウドサーバ２の間の情報通信の一例を示す図である。

【0130】

図１１に示すように、本実施形態のエッジサーバ３は、車載装置１００と同様に、車両１に搭載される。このようにエッジサーバ３が車両１に搭載されることにより、車載装置１００とエッジサーバ３とが車両１内で有線接続することが可能となり、通信速度の向上が見込まれる。

【0131】

上述の各実施形態の車載装置１００、クラウドサーバ２、およびエッジサーバ３の各機能は、例えば、ＣＰＵがプログラムを実行することにより実現される。上述の各実施形態の車載装置１００、クラウドサーバ２、およびエッジサーバ３で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、ＣＤ－Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）、フラッシュメモリ等のコンピュータで読み取り可能な記録媒体に記録されて提供される。

【0132】

また、上述の各実施形態の車載装置１００、クラウドサーバ２、およびエッジサーバ３で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、上述の各実施形態の車載装置１００、クラウドサーバ２、およびエッジサーバ３で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

【0133】

また、上述の各実施形態の車載装置１００、クラウドサーバ２、およびエッジサーバ３で実行されるプログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。

【0134】

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これらの実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これらの実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

【符号の説明】

【0135】

１ 車両
２ クラウドサーバ
３ エッジサーバ
１５，１５ｆ，１５ｒ 送受波部
１６，１６ａ～１６ｃ 車載カメラ
１００ 車載装置
１０１ 取得部
１０２ 決定部
１０３ 生成部
１０４ 圧縮部
１０５ 送信部
１０６ 受信部
１０７ 車両制御部
１０８ 表示制御部
１０９ 受付部
１１０ 記憶部
１２０ 表示装置
２００ ＡＤＡＳ処理部
２０１ 受信部
２０２ 障害物検知部
２０３ 学習部
２０４ 推定部
２０５ 送信部
２１０ 記憶部
４００ ヘッダ付きセンサデータ
４１０ ヘッダデータ
４２０ センサデータ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】