特許第6044556号(P6044556)IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

▶ 株式会社デンソーの特許一覧

<>
  • 特許6044556-学習システム、車載装置、及び、サーバ 図000002
  • 特許6044556-学習システム、車載装置、及び、サーバ 図000003
  • 特許6044556-学習システム、車載装置、及び、サーバ 図000004
  • 特許6044556-学習システム、車載装置、及び、サーバ 図000005
  • 特許6044556-学習システム、車載装置、及び、サーバ 図000006
  • 特許6044556-学習システム、車載装置、及び、サーバ 図000007
  • 特許6044556-学習システム、車載装置、及び、サーバ 図000008
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】6044556
(24)【登録日】2016年11月25日
(45)【発行日】2016年12月14日
(54)【発明の名称】学習システム、車載装置、及び、サーバ
(51)【国際特許分類】
   G06N 99/00 20100101AFI20161206BHJP
   G08G 1/16 20060101ALI20161206BHJP
   G06T 7/00 20060101ALI20161206BHJP
【FI】
   G06N99/00 150
   G08G1/16 C
   G06T7/00 350B
【請求項の数】7
【全頁数】14
(21)【出願番号】特願2014-5925(P2014-5925)
(22)【出願日】2014年1月16日
(65)【公開番号】特開2015-135552(P2015-135552A)
(43)【公開日】2015年7月27日
【審査請求日】2015年9月25日
(73)【特許権者】
【識別番号】000004260
【氏名又は名称】株式会社デンソー
(74)【代理人】
【識別番号】110000578
【氏名又は名称】名古屋国際特許業務法人
(72)【発明者】
【氏名】桑島 洋
【審査官】 多賀 実
(56)【参考文献】
【文献】 特開2003−050605(JP,A)
【文献】 特開2012−059058(JP,A)
【文献】 特開2008−100665(JP,A)
【文献】 特開2011−053798(JP,A)
(58)【調査した分野】(Int.Cl.,DB名)
G06N 3/00−99/00
G08G 1/16
G06T 7/00
B60R 16/02
(57)【特許請求の範囲】
【請求項1】
走行中の道路の画像認識を行う機能を有し、異なる車両に搭載された1又は複数の車載装置(10)と、該車載装置と通信を行うサーバ(2)とを有する学習システム(1)であって、
前記車載装置は、
自車両が走行している走行地域を示す環境データを生成する環境データ生成手段(S100)と、
前記機能を実現するための、前記走行地域に応じた内容の処理を実行する実行手段(S105)と、
前記実行手段による前記処理に用いられた撮影画像データを、学習データとして前記サーバに提供する手段であって、該学習データと共に、該処理を実行した時の前記走行地域を示す前記環境データを前記サーバに提供する学習データ提供手段(S110)と、
前記サーバから、前記機能の精度を向上させるために前記処理の内容を更新するための更新データを取得する更新データ取得手段(S300)と、
前記更新データに基づき、前記処理の内容を更新する更新手段(S305)と、
を備え、
前記サーバは、
前記車載装置から前記学習データと前記環境データとを取得する学習データ取得手段(S200)と、
前記学習データを、該学習データと共に提供された前記環境データが示す前記走行地域に対応するグループに分類する分類手段(S210)と、
前記グループに属する前記学習データに基づき、前記車載装置における前記機能の精度を向上させるための機械学習を行う学習処理を該グループに応じて行い、該グループに対応する前記更新データを生成する学習手段(S205,S215)と、
前記更新データを前記車載装置に提供する更新データ提供手段(S220)と、
を備え、
前記更新手段は、前記更新データに基づき、該更新データに対応する前記グループに対応する前記走行地域に応じた前記処理の内容を更新すること、
を特徴とする学習システム。
【請求項2】
予め定められた機能を有し、異なる車両に搭載された1又は複数の車載装置(10)と、該車載装置と通信を行うサーバ(2)とを有する学習システム(1)であって、
前記車載装置は、
自車両又は自車両周辺に関する情報である環境データを生成する環境データ生成手段(S100)と、
前記機能を実現するための、前記環境データに応じた内容の処理を実行する実行手段(S105)と、
前記実行手段による前記処理に用いられたデータを、学習データとして前記サーバに提供する手段であって、該学習データと共に、該処理を実行した時の前記環境データを前記サーバに提供する学習データ提供手段(S110)と、
前記サーバから、前記処理の内容を更新するための更新データを取得する更新データ取得手段(S300)と、
前記更新データに基づき、前記処理の内容を更新する更新手段(S305)と、
を備え、
前記サーバは、
前記車載装置から前記学習データと前記環境データとを取得する学習データ取得手段(S200)と、
前記学習データ取得手段により取得された前記学習データに基づき、前記車載装置における前記機能を向上させるための学習処理を行い、前記更新データを生成する学習手段(S205,S215)と、
前記更新データを前記車載装置に提供する更新データ提供手段(S220)と、
前記学習データと共に提供された前記環境データに基づき、前記学習データをいずれかのグループに分類する分類手段(S210)と、
を備え、
前記グループに関わらずに行われる前記学習処理であるメイン学習処理と、前記グループに応じた前記学習処理であるサブ学習処理とが設けられており、
前記学習手段は、前記学習データ取得手段が取得した前記学習データに基づき前記メイン学習処理を行うことで、前記処理の内容を更新するためのデータを生成し、該データと、前記グループに属する前記学習データとに基づき、該グループに応じた前記サブ学習処理を行い、該グループに対応する前記更新データを生成し、
前記更新手段は、前記更新データに基づき、該更新データに対応する前記グループに係る前記環境データに応じた前記処理の内容を更新すること、
を特徴とする学習システム。
【請求項3】
請求項2に記載の学習システムにおいて、
前記サーバとして、メインサーバとサブサーバとが設けられており、
前記メイン学習処理は、前記メインサーバにて実行され、
前記サブ学習処理は、前記サブサーバにて実行されること、
を特徴とする学習システム。
【請求項4】
自車両が走行している走行地域を示す環境データを生成する環境データ生成手段(S100)と、
走行中の道路の画像認識を行う機能を実現するための、前記走行地域に応じた内容の処理を実行する実行手段(S105)と、
前記実行手段による前記処理に用いられた撮影画像データを、学習データとして、前記機能の精度を向上させるための機械学習を行う学習処理を行うサーバ(2)に提供する手段であって、該学習データと共に、該処理を実行した時の前記走行地域を示す前記環境データを前記サーバに提供する学習データ提供手段(S110)と、
前記サーバから、前記機能の精度を向上させるために前記処理の内容を更新するための更新データを取得する更新データ取得手段(S300)と、
前記更新データに基づき、前記処理の内容を更新する更新手段(S305)と、
を備える車載装置(10)であって、
前記サーバは、前記車載装置から提供された前記学習データを、該学習データと共に提供された前記環境データが示す前記走行地域に対応するグループに分類し、前記グループに属する前記学習データに基づき、該グループに応じた前記学習処理を行うことで、該グループに対応する前記更新データを生成し、
前記更新手段は、前記更新データに基づき、該更新データに対応する前記グループに係る前記走行地域に応じた前記処理の内容を更新すること、
を特徴とする車載装置。
【請求項5】
自車両又は自車両周辺に関する情報である環境データを生成する環境データ生成手段(S100)と、
予め定められた機能を実現するための、前記環境データに応じた内容の処理を実行する実行手段(S105)と、
前記実行手段による前記処理に用いられたデータを、学習データとして、前記機能を向上させるための学習処理を行うサーバ(2)に提供する手段であって、該学習データと共に、該処理を実行した時の前記環境データを前記サーバに提供する学習データ提供手段(S110)と、
前記サーバから、前記処理の内容を更新するための更新データを取得する更新データ取得手段(S300)と、
前記更新データに基づき、前記処理の内容を更新する更新手段(S305)と、
を備える車載装置(10)であって、
前記サーバは、
前記車載装置から提供された前記学習データを、該学習データと共に提供された前記環境データに対応するグループに分類し、
前記学習処理として、前記グループに関わらずに行われるメイン学習処理と、前記グループに応じて行われるサブ学習処理とを行い、
前記学習データに基づき前記メイン学習処理を行うことで、前記処理の内容を更新するためのデータを生成し、該データと、前記グループに属する前記学習データとに基づき、該グループに応じた前記サブ学習処理を行い、該グループに対応する前記更新データを生成し、
前記更新手段は、前記更新データに基づき、該更新データに対応する前記グループに係る前記環境データに応じた前記処理の内容を更新すること、
を特徴とする車載装置。
【請求項6】
車両が走行中の道路の画像認識を行う機能を有し、前記車両に搭載される車載装置(10)から、該車載装置による該機能を実現するための処理に用いられた撮影画像データである学習データと、該処理を実行した時に前記車両が走行している走行地域を示す環境データとを取得する学習データ取得手段(S200)と、
前記学習データを、該学習データと共に前記車載装置から提供された前記環境データが示す前記走行地域に対応するグループに分類する分類手段(S210)と、
前記グループに属する前記学習データに基づき、前記車載装置における前記機能の精度を向上させるための機械学習を行う学習処理を該グループに応じて行い、前記車載装置にて前記処理の内容を更新するためのデータであって、該グループに対応するデータである更新データを生成する学習手段(S205,S215)と、
前記更新データを前記車載装置に提供する更新データ提供手段(S220)と、
を備えることを特徴とするサーバ(2)。
【請求項7】
予め定められた機能を有し、車両に搭載される車載装置(10)から、該車載装置による該機能を実現するための処理に用いられた学習データと、該処理を実行した時の前記車両又は前記車両周辺に関する情報である環境データとを取得する学習データ取得手段(S200)と、
前記学習データ取得手段により取得された前記学習データに基づき、前記車載装置における前記機能を向上させるための学習処理を行い、前記車載装置にて前記処理の内容を更新するための更新データを生成する学習手段(S205,S215)と、
前記更新データを前記車載装置に提供する更新データ提供手段(S220)と、
前記学習データと共に提供された前記環境データに基づき、前記学習データをいずれかのグループに分類する分類手段(S210)と、
を備え、
前記グループに関わらずに行われる前記学習処理であるメイン学習処理と、前記グループに応じた前記学習処理であるサブ学習処理とが設けられており、
前記学習手段は、前記学習データ取得手段が取得した前記学習データに基づき前記メイン学習処理を行うことで、前記処理の内容を更新するためのデータを生成し、該データと、前記グループに属する前記学習データとに基づき、該グループに応じた前記サブ学習処理を行い、該グループに対応する前記更新データを生成すること、
を特徴とするサーバ(2)。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、車載装置における処理についての学習システム等に関する。
【背景技術】
【0002】
従来、画像認識や音声認識等といった様々な分野において機械学習が用いられており、一例として、特許文献1では、機械学習により、スパムメールを除去するためのスパムフィルタを部分的に更新することが提案されている。
【0003】
また、車載装置においても画像認識等が行われているが、このような車載装置の開発段階では、機械学習により認識精度等の向上が図られており、出荷後においても、各車載装置にて異なる機械学習を行うことで各車両に適合した性能の向上を図ることが考えられる。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開2006−12165号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、出荷された車載装置において、本来の機能を稼働させながら機械学習を行うとなると、車載装置のハードウェア性能を大幅に向上させる必要があり、コストの増加等の問題が生じてしまう。
【0006】
本願発明は上記課題に鑑みてなされたものであり、車載装置のハードウェア性能を向上させること無く、出荷後に車載装置の機能を向上させるための学習処理を行うことができる学習システム等を提供することを目的とする。
【課題を解決するための手段】
【0007】
上記課題に鑑みてなされた本発明は、予め定められた機能を有し、異なる車両に搭載された1又は複数の車載装置(10)と、該車載装置と通信を行うサーバ(2)とを有する学習システム(1)に関するものである。
【0008】
車載装置は、機能を実現するための処理を実行する実行手段(S105)と、実行手段による処理に用いられたデータを、学習データとしてサーバに提供する学習データ提供手段(S110)と、サーバから、処理の内容を更新するための更新データを取得する更新データ取得手段(S300)と、更新データに基づき、処理の内容を更新する更新手段(S305)と、を備える。
【0009】
また、サーバは、車載装置から学習データを取得する学習データ取得手段(S200)と、学習データ取得手段により取得された学習データに基づき、車載装置における機能を向上させるための学習処理を行い、更新データを生成する学習手段(S205,S215)と、更新データを車載装置に提供する更新データ提供手段(S220)と、を備える。
【0010】
また、本発明に係る車載装置(10)は、予め定められた機能を実現するための処理を実行する実行手段(S105)と、実行手段による処理に用いられたデータを、学習データとしてサーバ(2)に提供する学習データ提供手段(S110)と、サーバから、処理の内容を更新するための更新データを取得する更新データ取得手段(S300)と、更新データに基づき、処理の内容を更新する更新手段(S305)と、を備える。
【0011】
また、本発明に係るサーバ(2)は、予め定められた機能を有する車載装置(10)から、該車載装置による該機能を実現するための処理に用いられた学習データを取得する学習データ取得手段(S200)と、学習データ取得手段により取得された学習データに基づき、車載装置における機能を向上させるための学習処理を行い、車載装置にて処理の内容を更新するための更新データを生成する学習手段(S205,S215)と、更新データを車載装置に提供する更新データ提供手段(S220)と、を備える。
【0012】
このような構成によれば、車載装置では学習処理が行われず、サーバにて各車載装置から収集した学習データに基づき学習処理が行われる。そして、サーバでの学習処理により生成された更新データが各車載装置に提供され、各車載装置における処理の内容が更新される。
【0013】
このため、車載装置は、自装置で学習処理を行うことなく処理の内容を更新し、機能の向上を図ることができる。
したがって、本発明に係る学習システムや車載装置やサーバによれば、車載装置のハードウェア性能を向上させること無く、出荷後に車載装置の機能を向上させるための学習処理を行うことができる。
【0014】
さらに、サーバには多くの車載装置から収集した学習データが蓄積されるため、短期間で効果的に学習処理を行うことができる。
なお、この欄及び特許請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本発明の技術的範囲を限定するものではない。
【図面の簡単な説明】
【0015】
図1】学習システムの構成を示すブロック図である。
図2】車載装置の構成を示すブロック図である。
図3】学習サーバの構成を示すブロック図である。
図4】メイン学習サーバの構成を示すブロック図である。
図5】学習データ送信処理のフローチャートである。
図6】機械学習処理のフローチャートである。
図7】更新データ受信処理のフローチャートである。
【発明を実施するための形態】
【0016】
以下、本発明の実施形態について図面を用いて説明する。なお、本発明の実施の形態は、下記の実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の形態を採りうる。
【0017】
[構成の説明]
学習システム1は、1又は複数の車載装置10と、無線通信回線網20を介して各車載装置10と通信を行う学習サーバ2とを有している(図1参照)。
【0018】
車載装置10は、自車両周辺の歩行者や道路に描かれた白線等を認識する画像認識機能を有しており、カメラ11,記憶部12,車内LAN通信部13,制御部14,表示部15,操作部16,無線通信部17等を有する(図2参照)。
【0019】
カメラ11は、CCDカメラや赤外線カメラ等として構成されており、自車両周辺を撮影する部位であり、撮影画像に基づき画像認識処理が行われる。なお、カメラ11に替えてレーダ等のセンサを備え、レーダ等を用いて歩行者等の認識処理を行うと共に、該認識処理について、後述する機械学習を行う構成としても良い。
【0020】
また、記憶部12は、記憶保持動作が不要なフラッシュメモリ等として構成されており、画像認識等に必要な各種情報(例えば、後述する機械学習により更新される、画像認識機能におけるパラメータやアルゴリズム等)が記憶されている。
【0021】
また、車内LAN通信部13は、車内LAN(図示無し)を介して他の装置と通信を行う。
また、制御部14は、CPU,ROM,RAM,I/O及びこれらを接続するバスライン等からなる周知のマイクロコンピュータを中心に構成され、ROMに記憶されたプログラムや、RAMにロードされたプログラム等に従い車載装置10を統括制御する。
【0022】
また、制御部14は、学習システム1において行われる、車載装置10の画像認識機能に関する機械学習における識別機能を有している(詳細は後述する)。
また、表示部15は、液晶ディスプレイ等として構成され、各種情報を表示する。
【0023】
また、操作部16は、キースイッチやタッチスイッチ等として構成され、各種操作を受け付ける。
また、無線通信部17は、図示しないアンテナ等により無線通信回線網20にアクセスし、学習サーバ2と通信を行う。
【0024】
なお、車載装置10は、無線通信部17を備えず、車内LANを介して通信可能な無線通信装置により無線通信回線網20にアクセスし、学習サーバ2と通信を行う構成としても良い。
【0025】
一方、学習サーバ2は、メイン学習サーバ30と、車載装置10が搭載された車両の走行地域(詳細は後述する)に対応して設けられた複数のサブ学習サーバ40等により構成されており、これらのサーバは、LANにより接続され、互いに通信可能となっている(図3参照)。
【0026】
メイン学習サーバ30は、例えばPC等として構成されており、通信部31,記憶部32,制御部33,表示部34,操作部35等を備える(図4参照)。
通信部31は、LANを介して無線通信回線網20にアクセスすると共に、他のサブ学習サーバ40と通信を行う部位であり、記憶部32は、HDD等といった記憶保持動作が不要なデバイスから構成されている。
【0027】
また、制御部33は、CPU,ROM,RAM,I/O及びこれらを接続するバスライン等からなる周知のコンピュータを中心に構成され、RAMにロードされたプログラム等に従い動作する。
【0028】
また、制御部33は、学習システム1において行われる、車載装置10の画像認識機能に関する機械学習における学習機能を有している(詳細は後述する)。
また、表示部34は、液晶ディスプレイ等として構成され、各種情報を表示する部位であり、操作部35は、キーボードやマウス等として構成され、各種操作を受け付ける部位である。
【0029】
なお、サブ学習サーバ40等は、メイン学習サーバ30と同様の構成を有しているため、説明を省略する。
[動作の説明]
次に、学習システム1の動作について説明する。学習システム1では、車載装置10及び学習サーバ2にて、車載装置10の画像認識機能についての機械学習を行うよう構成されている。車載装置10は該機械学習における識別機能を担当し、学習サーバ2は学習機能を担当する。
【0030】
すなわち、車載装置10は、画像認識処理を行うと、該画像認識処理に用いられたカメラ11による撮影画像データを学習データとし、学習サーバ2に送信する。
一方、学習サーバ2は、各車載装置10から受信した学習データに基づき、画像認識処理の認識精度を向上させるための学習処理を行い、画像認識処理におけるパラメータを更新するための更新データを生成し、各車載装置10に送信する。
【0031】
なお、該パラメータは、例えば、車載装置10での画像認識処理にて用いられるサポートベクタマシンやニューラルネットワークの重み付けのパラメータであっても良い。
そして、車載装置10は、学習サーバ2から受信した更新データにより、画像認識処理におけるパラメータを更新する。
【0032】
以下では、車載装置10及び学習サーバ2での処理について詳しく説明する。
(1)学習データ送信処理について
まず、車載装置10から学習サーバ2に対し、学習データ(画像認識処理に用いられたカメラ11による撮影画像データ)を送信する学習データ送信処理について、図5に記載のフローチャートを用いて説明する。なお、本処理は、車載装置10での画像認識処理の実行時に開始される。
【0033】
S100では、制御部14は、予め定められた走行地域の中から自車両が現在走行している走行地域を特定すると共に、該走行地域を示す環境データを生成し、S105に処理を移行する。
【0034】
具体的には、制御部14は、例えば、車内LANを介して図示しないナビゲーション装置と通信を行って自車両の現在地を取得し、該現在地に基づき走行地域を特定しても良い。また、自車両による走行が予定される地域を示す情報を予め記憶部12に記憶させておき、該情報が示す地域を走行地域としても良い。
【0035】
S105では、制御部14は、自車両周辺の歩行者や道路に描かれた白線等を認識する画像認識処理を実行すると共に、画像認識処理の結果に基づき、各種処理を実行する。
ここで、画像認識処理では、各走行地域に対応するパラメータが設けられており、制御部14は、S100で特定した走行地域に対応するパラメータを記憶部12から読み出し、該パラメータとを用いて画像認識処理を実行する。
【0036】
続くS110では、制御部14は、画像認識処理に用いられたカメラ11による撮影画像データを学習データとすると共に、該学習データと環境データとを無線通信部17を介して学習サーバ2に送信し、本処理を終了する。
【0037】
(2)機械学習処理について
次に、学習サーバ2にて車載装置10から学習データを収集し、学習処理を行う機械学習処理について、図6に記載のフローチャートを用いて説明する。なお、本処理は、学習サーバ2にて繰り返し実行される。
【0038】
S200では、学習サーバ2を構成するメイン学習サーバ30の制御部33は、車載装置10から学習データと環境データを受信し、これらを対応付けた状態で記憶部32に保存する。そして、保存した学習データ等の数が一定の水準に達すると、S205に処理を移行する。
【0039】
S205では、メイン学習サーバ30の制御部33は、S200にて収集された全ての学習データに基づき学習処理を行い、S210に処理を移行する。
なお、該学習処理においては、一例として教師なし学習を行うことが考えられ、オートエンコーダ等の手法を用いても良い。また、このほかにも、学習データに対してデータマイニング等を行うことも考えられる。
【0040】
S210では、メイン学習サーバ30の制御部33は、S200にて収集された全ての学習データを、各学習データに対応する環境データに基づき走行地域毎に分類し、同一の走行地域で生成された学習データのグループを生成する。
【0041】
そして、各グループに属する学習データを、該グループに係る走行地域に対応するサブ学習サーバ40に送信すると共に、全てのサブ学習サーバ40に対し、メイン学習サーバ30での学習結果を送信し、S215に処理を移行する。
【0042】
S215では、各サブ学習サーバ40の制御部は、メイン学習サーバ30での学習結果を初期値として受信した学習データに基づき学習処理(リファイン)を行い、自装置に対応する走行地域での画像認識処理におけるパラメータを生成し、S220に処理を移行する。
【0043】
なお、S215においては、S205と同様、教師なし学習やデータマイニング等を行うことが考えられる。
このほかにも、メイン学習サーバ30と各サブ学習サーバ40では、以下のようにして学習処理を行うことも考えられる。
【0044】
メイン学習サーバ30の制御部33は、車載装置10から収集した大量の学習データ(教師なしデータ)を用いて、教師なしフィーチャを学習する。フィーチャとは、教師なしデータを最も良く表すことができる表現(例えば、画像のピクセルの線形結合)である。そして、この結果を、メイン学習サーバ30での学習処理の結果として、サブ学習サーバ40に送信する。
【0045】
一方、サブ学習サーバ40では、対応する走行地域から収集された学習データから、比較的少数の教師ありデータを用意する。なお、教師ありデータの作成には人手が必要であり、該教師ありデータは、サブ学習サーバ40を操作するオペレータにより作成される。このため、大量の教師ありデータを用意することはできない。
【0046】
そして、サブ学習サーバ40の制御部は、対応する走行地域から収集された学習データと、教師ありデータの双方を使用して学習処理を行う。
すなわち、教師ありデータをフィーチャで処理し、その出力を用いて教師あり学習を行う。例えば、画像のピクセルをそのまま扱うのではなく、メイン学習サーバ30から送信された重みを使って線形結合を計算し(この例では線形結合の重みは固定値とする)、その結果を入力として別の教師あり学習アルゴリズム(例えばサポートベクターマシーン)を実行する。
【0047】
また、教師なしフィーチャを初期値として教師あり学習を行うことも考えられる。例えば、教師なし学習であるオートエンコーダをメイン学習サーバ30で学習して重みを求めておき、サブ学習サーバ40では、その重みを初期値としてバックプロパゲーションで微調整する。なお、この例では、線形結合の重みそのものを微調整して変更する。
【0048】
換言すれば、メイン学習サーバ30は、走行地域の区別無しに大量の学習データから学習処理を行い、画像認識処理における汎用的なパラメータを生成すると共に、そのパラメータをサブ学習サーバ40に送信する。そして、各サブ学習サーバ40は、対応する走行地域から収集された学習データを用いて、パラメータを微調整(リファイン)する。
【0049】
続くS220では、各サブ学習サーバ40の制御部は、メイン学習サーバ30に対しパラメータを送信する。そして、メイン学習サーバ30の制御部33は、各走行地域に対応するパラメータを更新データとすると共に、各車載装置10に対して更新データを送信し、本処理を終了する。
【0050】
(3)更新データ受信処理について
次に、車載装置10にて学習サーバ2から更新データを受信し、画像認識処理におけるパラメータを更新する更新データ受信処理について、図7に記載のフローチャートを用いて説明する。なお、本処理は、車載装置10にて周期的なタイミングで実行される。
【0051】
S300では、車載装置10の制御部14は、学習サーバ2から更新データを受信する。そして、更新データを受信した場合には(S300:Yes)、S305に処理を移行すると共に、更新データを受信できなかった場合には(S300:No)、本処理を終了する。
【0052】
S305では、制御部14は、受信した更新データを記憶部12に保存することで、画像認識処理のパラメータを更新し、本処理を終了する。以後、制御部14は、新たに保存された更新データを構成するパラメータを用いて画像認識処理を行う。
【0053】
[効果]
本実施形態の学習システム1によれば、車載装置10では学習処理が行われず、学習サーバ2にて各車載装置10から提供された学習データに基づき学習処理が行われる。そして、学習サーバ2での学習処理により生成された更新データが各車載装置10に提供され、各車載装置10における処理の内容が更新される。
【0054】
このため、車載装置10は、自装置で学習処理を行うことなく画像認識機能の向上を図ることができる。
したがって、車載装置10のハードウェア性能を向上させること無く、出荷後に車載装置10の画像認識機能を向上させることができる。
【0055】
さらに、学習サーバ2には、多くの車載装置10から提供された学習データが蓄積されるため、短期間で効果的に機械学習を行うことができる。
また、例えば南国と雪国とでは、車両の走行環境等が大きく異なっており、画像認識処理にて用いられるパラメータの最適値が異なると考えられる。
【0056】
これに対し、本実施形態の学習システム1によれば、車載装置10から学習サーバ2に対し、学習データと共に走行地域を示す環境データが送信される。そして、メイン学習サーバ30にて、学習処理により汎用的なパラメータが生成され、サブ学習サーバ40では、走行地域毎に学習処理が行われ、該パラメータのリファインが行われる。
【0057】
このため、車両の走行地域毎に画像認識処理を最適化することができ、より一層、車載装置10の画像認識機能を向上させることができる。
[他の実施形態]
(1)本実施形態の学習システム1では、車載装置10での画像認識処理についての機械学習が行われるが、これに限らず、例えば音声認識処理等についての機械学習が行われても良い。
【0058】
また、学習サーバ2での機械学習処理では、学習データに基づき画像認識処理にて用いられるパラメータが更新されるが、これに限らず、学習データに基づき画像認識処理等におけるアルゴリズムを更新しても良い。
【0059】
このような場合であれば、学習サーバ2から車載装置10に対し、更新後のアルゴリズムを更新データとして送信し、更新データを受信した車載装置10は、以後、更新データをなすアルゴリズムを用いて画像認識処理等を行うことになる。
【0060】
このような場合であっても、同様の効果を得ることができる。
(2)また、本実施形態では、機械学習処理のS205,S215にて教師なし学習を行うことを例示したが、これに限らず、教師あり学習を行っても良い。
【0061】
なお、教師あり学習を行う場合、各学習データに対応する教師データ(例えば、画像認識処理により認識される白線の位置や、歩行者の有無等を示すラベル)を作成する必要がある。このような作業は、メイン学習サーバ30等を操作するオペレータにより行われる。
【0062】
このような場合であっても、同様の効果を得ることができる。
(3)また、本実施形態の学習システム1では、車載装置10から学習サーバ2に対し、学習データと共に走行地域を示す環境データが送信される。そして、メイン学習サーバ30にて、学習処理により汎用的なパラメータが生成され、サブ学習サーバ40では、走行地域毎に学習処理が行われ、該パラメータのリファインが行われる。
【0063】
しかしながら、これ以外にも、車載装置10は、例えば、天候や時間帯や季節等といった、自車両の走行環境を示す情報を環境データとして生成し、画像認識処理が実行された際の走行環境を示す環境データと学習データとを学習サーバ2に送信しても良い。
【0064】
そして、学習サーバ2では、このような環境データに基づき学習データを複数のグループに分類し、走行環境毎に学習処理を行っても良い。
また、このほかにも、車載装置10は、車両の種類や、機械学習の対象となる処理により学習データが生成された際の車両の状態(例えば、車速や舵角等)を示す情報を環境データとして生成しても良い。そして、該環境データと、該処理により生成された学習データとを学習サーバ2に送信しても良い。
【0065】
そして、学習サーバ2では、このような環境データに基づき学習データを複数のグループに分類し、車両の種類毎、或いは、車両の状態毎に学習処理を行っても良い。
このような場合であっても、同様の効果を得ることができる。
【0066】
(4)また、本実施形態の学習システム1では、学習サーバ2は、メイン学習サーバ30と、複数のサブ学習サーバ40とによる2段階の階層構造を有しているが、3段階以上の階層構造を有していても良い。
【0067】
すなわち、学習サーバ2が3段階の階層構造を有する場合であれば、メイン学習サーバ30の下位に複数の第1サブ学習サーバを設けると共に、各第1サブ学習サーバの下位に複数の第2サブ学習サーバを設けることが考えられる。
【0068】
また、例えば、各走行地域を複数のエリアに分類し、各走行地域をいずれかの第1サブ学習サーバに対応させると共に、各走行地域を構成する各エリアを、該走行地域に対応する第1サブ学習サーバの下位の第2サブ学習サーバに対応させることが考えられる。
【0069】
そして、メイン学習サーバ30では、本実施形態と同様、全ての学習データに基づき学習処理を行った後、学習データを走行地域毎に分類し、各第1サブ学習サーバに対し、学習結果と、対応する走行地域にて得られた学習データを送信する。
【0070】
また、各第1サブ学習サーバでは、メイン学習サーバ30での学習結果を初期値とし、自装置に対応する走行地域で得られた学習データに基づき学習処理(リファイン)を行う。さらに、該学習データを、自装置に対応する走行地域を構成するエリア毎に分類し、自装置の下位の各下位側サブ学習サーバに対し、学習結果と、対応するエリアにて得られた学習データを送信する。
【0071】
また、各第2サブ学習サーバでは、自装置の上位の第1サブ学習サーバでの学習結果を初期値とし、自装置に対応するエリアで得られた学習データに基づき学習処理(リファイン)を行い、パラメータを生成する。そして、該パラメータをメイン学習サーバに送信する。
【0072】
そして、メイン学習サーバ30では、各エリアに対応するパラメータを更新データとすると共に、各車載装置10に対して更新データを送信し、車載装置10では、自装置が走行しているエリアに対応するパラメータを用いて画像認識処理を実行する。
【0073】
このような構成によれば、車載装置10は、自車両の走行場所に応じてより適切な画像認識処理を行うことが可能となる。
(5)また、本実施形態では、学習サーバ2は、メイン学習サーバ30と、複数のサブ学習サーバ40から構成されているが、学習サーバ2を1台のサーバにより構成し、該サーバにより同様の機械学習処理を実行しても良い。このような場合であっても、同様の効果を得ることができる。
【0074】
(6)また、本実施形態では、各走行地域に対応してサブ学習サーバ40が設けられている。しかしながら、例えば、積雪量の多い複数の走行地域や、気温の高い複数の走行地域を1つのエリアとするといった具合に、属性の共通する複数の走行地域を1つのエリアにまとめ、各エリアに対応してサブ学習サーバ40を設けても良い。
【0075】
そして、メイン学習サーバ30にて、学習処理により汎用的なパラメータを生成し、サブ学習サーバ40は、対応するエリアについての学習処理を行い、該パラメータのリファインを行っても良い。
【0076】
このような場合であっても、同様の効果を得ることができる。
(7)また、本実施形態では、メイン学習サーバ30は、各車載装置10から収集した学習データに基づき学習処理を行った後、学習データを走行地域毎に分類し、各サブ学習サーバ40に対し、対応する走行地域に分類された学習データを送信する構成となっている。
【0077】
しかしながら、メイン学習サーバ30は、各車載装置10から学習データを受信した時点で該学習データを走行地域毎に分類しても良い。そして、該学習データを対応するサブ学習サーバ40に送信し、各走行地域から収集した学習データを、対応するサブ学習サーバ40に蓄積しておく構成としても良い。
【0078】
さらに、メイン学習サーバ30は、収集された学習データの数が一定の水準に達すると、各サブ学習サーバ40に蓄積された学習データを収集して学習処理を行い、汎用的なパラメータを生成しても良い。一方、サブ学習サーバ40は、先にメイン学習サーバ30から受信した学習データにより、該パラメータのリファインを行っても良い。
【0079】
このような場合であっても、同様の効果を得ることができる。
[特許請求の範囲との対応]
上記実施形態の説明で用いた用語と、特許請求の範囲の記載に用いた用語との対応を示す。
【0080】
学習データ送信処理のS100が環境データ生成手段の一例に、S105が実行手段の一例に、S110が学習データ提供手段の一例に相当する。
また、機械学習処理のS200が学習データ取得手段の一例に、S205,S215が学習手段の一例に、S210が分類手段の一例に、S220が更新データ提供手段の一例に相当する。
【0081】
また、更新データ受信処理のS300が更新データ取得手段の一例に、S305が更新手段の一例に相当する。
【符号の説明】
【0082】
1…学習システム、2…学習サーバ、10…車載装置、11…カメラ、12…記憶部、13…車内LAN通信部、14…制御部、15…表示部、16…操作部、17…無線通信部、20…無線通信回線網、30…メイン学習サーバ、31…通信部、32…記憶部、33…制御部、34…表示部、35…操作部、40…サブ学習サーバ。
図1
図2
図3
図4
図5
図6
図7