ホーム > 特許ランキング > 日本電気通信システム株式会社
知財求人 - 知財ポータルサイト「IP Force」
▶ 日本電気通信システム株式会社の特許一覧 ▶ 国立大学法人 香川大学の特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-08-21
(45)【発行日】2024-08-29
(54)【発明の名称】自律移動装置、学習装置、異常検知方法、及びプログラム
(51)【国際特許分類】
G06N 20/00 20190101AFI20240822BHJP
G05D 1/43 20240101ALI20240822BHJP
G05D 1/46 20240101ALI20240822BHJP
【ＦＩ】
G06N20/00 130
G05D1/43
G05D1/46
【請求項の数】
10
(21)【出願番号】P 2020000463
(22)【出願日】2020-01-06
(65)【公開番号】P2021110979
(43)【公開日】2021-08-02
【審査請求日】2022-12-09
【前置審査】
(73)【特許権者】
【識別番号】000232254
【氏名又は名称】日本電気通信システム株式会社
(73)【特許権者】
【識別番号】304028346
【氏名又は名称】国立大学法人 香川大学
(74)【代理人】
【識別番号】100103894
【弁理士】
【氏名又は名称】家入 健
(72)【発明者】
【氏名】鎌田 典彦
(72)【発明者】
【氏名】喜田 弘司
(72)【発明者】
【氏名】古▲濱▼ 尚樹
【審査官】青木 重徳
(56)【参考文献】
【文献】特開２０１９－１２３３３７（ＪＰ，Ａ）
【文献】特開２０１８－１２４６３９（ＪＰ，Ａ）
【文献】特開２０１１－０５９７９０（ＪＰ，Ａ）
【文献】国際公開第２０１９／２４４９３０（ＷＯ，Ａ１）
【文献】国際公開第２０１５／１４１２２１（ＷＯ，Ａ１）
【文献】米国特許出願公開第２０１９／０３１０６５１（ＵＳ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｎ ２０／００
Ｇ０５Ｄ １／４３
Ｇ０５Ｄ １／４６
(57)【特許請求の範囲】
【請求項1】
自律移動装置における現在の状態を検知するセンサ群と、制御部と、
を備え、
前記制御部は、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記自律移動装置における異常発生状態を検知又は予測した結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルであり、
前記蓄積センサデータは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける動作状況についての第１時系列データと、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける運行管理を行う側に報告する現在の位置についての第２時系列データと、を含み、
前記学習済みモデルは、前記蓄積グラフ群として、前記第１時系列データを前記第２所定間隔毎に分割した第１蓄積分割データと前記第１時系列データとに基づき生成された複数の第１グラフである第１蓄積グラフ群と、前記第２時系列データを前記第２所定間隔毎に分割した第２蓄積分割データと前記第２時系列データとに基づき生成された複数の第２グラフである第２蓄積グラフ群と、を前記未学習モデルに入力して機械学習を行うことで構築された学習モデルであり、
前記現センサデータは、前記自律移動装置における動作状況についての第３時系列データと、前記自律移動装置における運行管理を行う側に報告する現在の位置についての第４時系列データと、を含み、
前記現グラフ群として、前記第３時系列データを前記第１所定間隔毎に分割した第１現分割データと前記第３時系列データとに基づき生成された複数のグラフである第１現グラフ群と、前記第４時系列データを前記第１所定間隔毎に分割した第２現分割データと前記第４時系列データとに基づき生成された複数のグラフである第２現グラフ群とを、前記学習済みモデルに入力し、前記結果を得る、
自律移動装置。
【請求項2】
Ｎを１以上の整数、ｉを１からＮまでの整数、Ｍを１以上の整数、ｊを１からＭまでの整数とし、前記学習済みモデルに入力される前記現グラフ群は、検知開始時点から前記第１所定間隔がｉ回分経過するまでの合計Ｎ個の期間のそれぞれについて、対応するｉ個の前記現分割データを示すように生成された、Ｎ個のグラフを有し、
前記未学習モデルに入力される前記蓄積グラフ群は、検知開始時点から前記第２所定間隔がｊ回分経過するまでの合計Ｍ個の期間のそれぞれについて、対応するｊ個の前記現分割データを示すように生成された、Ｍ個のグラフを有する、
請求項１に記載の自律移動装置。
【請求項3】
前記蓄積センサデータは、前記自律移動装置及び前記他の同種の自律移動装置の少なくとも１つにおける正常時の状態を、各装置内部のセンサ群で検知した時系列データである正常センサデータを含む、請求項１又は２に記載の自律移動装置。
【請求項4】
前記蓄積センサデータは、前記自律移動装置及び前記他の同種の自律移動装置の少なくとも１つにおける異常時の状態を、各装置内部のセンサ群で検知した時系列データである異常センサデータを含む、請求項１～３のいずれか１項に記載の自律移動装置。
【請求項5】
前記制御部は、前記機械学習のアルゴリズム及び前記機械学習に用いた蓄積センサデータのうちの少なくとも一方が異なる複数の前記学習済みモデルの中から、使用する学習済みモデルを選択し、
選択した学習済みモデルである選択モデルを使用して、前記結果を得る、
請求項１～４のいずれか１項に記載の自律移動装置。
【請求項6】
前記制御部は、前記結果として、正常時の状態、異常時の予兆がある状態、及び異常時の状態を含む、複数の状態のうち１つを得る、請求項１～５のいずれか１項に記載の自律移動装置。
【請求項7】
前記制御部は、前記学習済みモデルを生成する学習部を備え、前記学習部は、
前記蓄積センサデータを取得し、
前記蓄積センサデータを前記第１所定間隔毎に分割して前記蓄積分割データを生成し、
前記蓄積分割データと前記蓄積センサデータとに基づき、前記蓄積グラフ群を生成し、
前記蓄積グラフ群を予め記憶された未学習モデルに入力して機械学習を行うことで、前記自律移動装置における異常発生状態を検知又は予測した結果を得るための前記学習済みモデルを生成する、
請求項１～６のいずれか１項に記載の自律移動装置。
【請求項8】
自律移動装置における現在の状態を検知するセンサ群を備えた自律移動装置と通信する学習装置側通信部と、学習装置側記憶部と、
学習装置側制御部と、
を備え、
前記学習装置側制御部は、
前記学習装置側通信部を介して前記自律移動装置及び他の同種の自律移動装置の少なくとも１つから、前記センサ群で検知された検知開始時点から検知終了時点までの時系列データである蓄積センサデータ又は前記蓄積センサデータを第１所定間隔毎に分割した蓄積分割データを受信して、前記学習装置側記憶部に記憶し、
前記蓄積分割データと前記蓄積センサデータとに基づき、複数のグラフである蓄積グラフ群を生成し、
前記蓄積グラフ群を前記学習装置側記憶部に予め記憶された未学習モデルに入力して機械学習を行うことで、前記自律移動装置における異常発生状態を検知又は予測した結果を得るための学習済みモデルを生成し、
前記蓄積センサデータは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける動作状況についての第１時系列データと、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける運行管理を行う側に報告する現在の位置についての第２時系列データと、を含み、
前記学習済みモデルは、前記蓄積グラフ群として、前記第１時系列データを前記第２所定間隔毎に分割した第１蓄積分割データと前記第１時系列データとに基づき生成された複数の第１グラフである第１蓄積グラフ群と、前記第２時系列データを前記第２所定間隔毎に分割した第２蓄積分割データと前記第２時系列データとに基づき生成された複数の第２グラフである第２蓄積グラフ群と、を前記未学習モデルに入力して機械学習を行うことで構築された学習モデルである、
学習装置。
【請求項9】
自律移動装置における現在の状態を前記自律移動装置内のセンサ群で検知する検知ステップと、前記自律移動装置における異常発生状態を検知又は予測した結果を得る制御ステップと、
を備え、
前記制御ステップは、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルであり、
前記蓄積センサデータは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける動作状況についての第１時系列データと、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける運行管理を行う側に報告する現在の位置についての第２時系列データと、を含み、
前記学習済みモデルは、前記蓄積グラフ群として、前記第１時系列データを前記第２所定間隔毎に分割した第１蓄積分割データと前記第１時系列データとに基づき生成された複数の第１グラフである第１蓄積グラフ群と、前記第２時系列データを前記第２所定間隔毎に分割した第２蓄積分割データと前記第２時系列データとに基づき生成された複数の第２グラフである第２蓄積グラフ群と、を前記未学習モデルに入力して機械学習を行うことで構築された学習モデルであり、
前記現センサデータは、前記自律移動装置における動作状況についての第３時系列データと、前記自律移動装置における運行管理を行う側に報告する現在の位置についての第４時系列データと、を含み、
前記制御ステップは、前記現グラフ群として、前記第３時系列データを前記第１所定間隔毎に分割した第１現分割データと前記第３時系列データとに基づき生成された複数のグラフである第１現グラフ群と、前記第４時系列データを前記第１所定間隔毎に分割した第２現分割データと前記第４時系列データとに基づき生成された複数のグラフである第２現グラフ群とを、前記学習済みモデルに入力し、前記結果を得る、
異常検知方法。
【請求項10】
自律移動装置のコンピュータに、前記自律移動装置における現在の状態を前記自律移動装置内のセンサ群で検知させる検知ステップと、
前記自律移動装置における異常発生状態を検知又は予測した結果を得る制御ステップと、
を実行させるためのプログラムであって、
前記制御ステップは、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルであり、
前記蓄積センサデータは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける動作状況についての第１時系列データと、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける運行管理を行う側に報告する現在の位置についての第２時系列データと、を含み、
前記学習済みモデルは、前記蓄積グラフ群として、前記第１時系列データを前記第２所定間隔毎に分割した第１蓄積分割データと前記第１時系列データとに基づき生成された複数の第１グラフである第１蓄積グラフ群と、前記第２時系列データを前記第２所定間隔毎に分割した第２蓄積分割データと前記第２時系列データとに基づき生成された複数の第２グラフである第２蓄積グラフ群と、を前記未学習モデルに入力して機械学習を行うことで構築された学習モデルであり、
前記現センサデータは、前記自律移動装置における動作状況についての第３時系列データと、前記自律移動装置における運行管理を行う側に報告する現在の位置についての第４時系列データと、を含み、
前記制御ステップは、前記現グラフ群として、前記第３時系列データを前記第１所定間隔毎に分割した第１現分割データと前記第３時系列データとに基づき生成された複数のグラフである第１現グラフ群と、前記第４時系列データを前記第１所定間隔毎に分割した第２現分割データと前記第４時系列データとに基づき生成された複数のグラフである第２現グラフ群とを、前記学習済みモデルに入力し、前記結果を得る、
プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、自律移動装置、学習装置、異常検知方法、及びプログラムに関する。
【背景技術】
【0002】
近年、ドローンや自動運転車などの自律的に移動する装置（自律移動装置）の研究が盛んになされ、一部で実際に利用されてきている。このような自律移動装置は、故障や、セキュリティ攻撃による制御の乗っ取り又は妨害が起きて、異常動作が発生した場合、墜落や交通事故などを誘発し、人や社会に害を及ぼすことになる。そのため、自律移動装置において、異常動作をいち早く検知する仕組みが必要となる。
【0003】
異常の監視、検知の分野では、装置又はその一部を駆動するモータなど、故障が発生し易い個所にセンサを取り付け、得られるセンサ値を閾値処理して定められた範囲を逸脱した場合に異常とみなす方式が用いられている。このような方式は、主に工場の生産設備やその他の設置型の装置のような、固定設置され、ある程度環境条件が保たれ、定められた一定の動作を続けるような装置を対象としているため、閾値とセンサ値との対比という単純な仕組みで異常を検出することができる。
【0004】
また、様々なセンサのデータを分析する技術の例として、特許文献１には、製造工程における複数の時系列データを一括して分析するデータ分析システムが開示されている。特許文献１に記載のシステムは、複数のセンサからそれぞれの検知対象に関する時系列データを取得して、所定時間を単位として時系列データを画像に変換し、予め記憶された学習モデルに基づいて画像を判定した判定結果に基づいて検知対象の状態を推定する。
【0005】
また、特許文献２には、センサデータ取得手段、学習手段、及び診断手段を備え、機械設備の異常予兆の有無を診断する異常予兆診断システムが開示されている。上記センサデータ取得手段は、機械設備に設置された複数のセンサの検出値を含むセンサデータを取得する。上記学習手段は、機械設備が正常であることが既知である期間のセンサデータを学習対象とし、当該センサデータの時系列的な波形を正常モデルとして学習する（クラスタリングする）。上記診断手段は、正常モデルと診断対象のセンサデータの時系列的な波形との比較に基づいて、機械設備の異常予兆の有無を診断する診断手段と、を備える。
【先行技術文献】
【特許文献】
【0006】
【文献】特開２０１８－１２４６３９号公報
【文献】特開２０１７－０３３４７１号公報
【発明の概要】
【発明が解決しようとする課題】
【0007】
しかしながら、自律移動装置は、他の自律移動装置、鳥等の動物、人などの多様な動く障害物、並びに、運行される場所を含む運行環境やその変化などに対し、自律的に対処しながら移動を行う（運行する）。そのため、自律移動装置は、各種センサデータがとりうる範囲が広く、一定ではなく、上述したような閾値を決めることができず、また、一定の基準やレンジを設けて比較するだけでは、異常の有無を判定することはできない。例えば、ドローンを例にとると、故障の前兆としてモータのセンサが極端な値をとったのか（異常）、強風にあおられて姿勢を立て直すために急な動作をして極端な値をとったのか（正常）は、いずれの場合も閾値を超えるため、判定ができない。
【0008】
また、特にセキュリティ攻撃による制御の乗っ取りや妨害による異常動作の場合、上述のような単一のセンサ値を監視する方法では、正常と判定されることになり異常を検知することができない。
【0009】
そこで、本発明者は、自律移動装置においては、モータなどの、故障しやすい箇所、直接動作に関する箇所にセンサを配置するだけでなく、周囲の環境や運行情報など多様な情報をセンサで取得し、これらを総合して異常か否かを判別する必要があることを見出した。ここで、周囲の環境とは、風、気温、湿度、明るさなどを指す。運行情報とは、元々自律移動装置の本体の制御を行うため、並びに管制や運行管理に対して報告するために取得されている情報であり、位置、高度、緯度、経度、方角、速度などを指す。つまり、本発明者は、自律移動装置においては、上述のような様々な情報も総合して異常の検知やセキュリティ攻撃の検知に用いることで、異常動作をいち早く検知することや異常動作の予兆を検知することができることを見出した。
【0010】
それに対し、特許文献１，２に記載の技術は、固定設備を前提としているため、自律移動装置に適用した場合において、正確で素早い異常検知や移動動作の予兆検知（予測）を実行できるとは言えない。よって、自律移動装置において、異常動作をいち早く検知する仕組みや、異常動作の予兆を検知する仕組みが望まれる。
【0011】
本開示の目的は、異常発生状態を素早く正確に検知又は予測することが可能な自律移動装置、学習装置、異常検知方法、及びプログラム等を提供することにある。
【課題を解決するための手段】
【0012】
本開示の第１の態様に係る自律移動装置は、自律移動装置における現在の状態を検知するセンサ群と、制御部と、を備え、前記制御部は、前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記自律移動装置における異常発生状態を検知又は予測した結果を得、前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである、ものである。
【0013】
本開示の第２の態様に係る学習装置は、自律移動装置における現在の状態を検知するセンサ群を備えた自律移動装置と通信する学習装置側通信部と、学習装置側記憶部と、学習装置側制御部と、を備え、前記学習装置側制御部は、前記学習装置側通信部を介して前記自律移動装置から、前記センサ群で検知された検知開始時点から検知終了時点までの時系列データである蓄積センサデータ又は前記蓄積センサデータを第１所定間隔毎に分割した蓄積分割データを受信して、前記学習装置側記憶部に記憶し、前記蓄積分割データと前記蓄積センサデータとに基づき、複数のグラフである蓄積グラフ群を生成し、前記蓄積グラフ群を前記学習装置側記憶部に予め記憶された未学習モデルに入力して機械学習を行うことで、前記自律移動装置における異常発生状態を検知又は予測した結果を得るための学習済みモデルを生成する、ものである。
【0014】
本開示の第３の態様に係る異常検知方法は、自律移動装置における現在の状態を前記自律移動装置内のセンサ群で検知する検知ステップと、前記自律移動装置における異常発生状態を検知又は予測した結果を得る制御ステップと、を備え、前記制御ステップは、前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記結果を得、前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである、ものである。
【0015】
本開示の第４の態様に係るプログラムは、自律移動装置のコンピュータに、前記自律移動装置における現在の状態を前記自律移動装置内のセンサ群で検知させる検知ステップと、前記自律移動装置における異常発生状態を検知又は予測した結果を得る制御ステップと、を実行させるためのプログラムであって、前記制御ステップは、前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記結果を得る、ものである。前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである。
【発明の効果】
【0016】
本開示により、異常発生状態を素早く正確に検知又は予測することが可能な自律移動装置、学習装置、異常検知方法、及びプログラム等を提供することができる。
【図面の簡単な説明】
【0017】
【図1】実施形態１に係る自律移動装置の一構成例を示すブロック図である。
【図2】実施形態１に係る自律移動装置で利用する学習済みモデルを生成する学習装置の一構成例を示すブロック図である。
【図5】実施形態２に係る自律移動装置の一構成例を示すブロック図である。
【図14】実施形態３に係る自律移動装置の一構成例を示すブロック図である。
【図19】実施形態４に係る自律移動装置の一構成例を示すブロック図である。
【図21】実施形態５に係る自律移動装置の一構成例を示すブロック図である。
【図28】装置のハードウェア構成の一例を示す図である。
【発明を実施するための形態】
【0018】
以下、図面を参照して、実施形態について説明する。なお、実施形態において、同一又は同等の要素には、同一の符号を付すことがあり、重複する説明は適宜省略される。
【0019】
【0020】
図１に示すように、本実施形態に係る自律移動装置１は、制御部１ａ及び複数のセンサ（センサ群）１ｂを備えることができる。なお、自律移動装置１は、外部の装置との通信を行う通信部（図示せず）を備えることもできる。この通信部は、自律移動装置１の種類、外部とのデータの通信タイミングなどによって、無線通信部及び有線通信部の少なくとも一方とすることができる。
【0021】
自律移動装置１は、自律的に移動することが可能な装置であり、センサ群１ｂから出力されたセンサデータに基づき、後述する学習済みモデルを利用して、移動中（運行中）の動作異常の検知や動作異常の予兆の検知を行うものとすることができる。
【0022】
本実施形態に係る自律移動装置１は、移動中における異常の監視（検知）が必要となるような移動機器全般に適用でき、その管理に好適に利用することができる。例えば、自律移動装置１としては、ドローン（無人航空機）、自動運転車（手動運転可能な自動車である場合も含む）、航空機、船舶、ロボット電動車いすが挙げられる。ここで、ドローンは、地上、上空、水上、水中、宇宙など、その動作環境を問わず、ロボットは、走行、歩行など、その移動方式を問わない。さらに、自律移動装置１としては、例えば、工場や倉庫等で用いられるフォークリフトや無人搬送車、建機や重機等の工事用車両、鉄道車両、タクシー、トラック等の物流に用いられる車両、警察車両、消防車両なども挙げられる。ここで、鉄道車両は、ライトレール、鉄輪式、新交通システム、モノレール、磁気浮上式など、その移動方式を問わない。なお、自律移動装置１は、自律的に移動可能であればよく、外部のコントローラからの制御に従い、或いは搭乗者の操作に従い、移動する機能を有することもできる。
【0023】
以下、センサ群１ｂ及び制御部１ａについて説明する。
センサ群１ｂは、自律移動装置１における現在の状態を検知する。ここで、現在の状態とは、センサ群１ｂに含まれるセンサそれぞれについて、設置箇所における検知対象を計測した結果のセンサ値、或いはそのセンサ値が示す状態を指すことができ、主に移動状態（運行状態）が含まれる。上記移動状態は、自律移動装置１の傾きや位置などを含むことができる。なお、上記設置箇所や上記検知対象は、一般的に自律移動装置１の種別や形状によって異なることになる。
センサ群１ｂは、自律移動装置１における現在の状態を検知する。ここで、現在の状態とは、センサ群１ｂに含まれるセンサそれぞれについて、設置箇所における検知対象を計測した結果のセンサ値、或いはそのセンサ値が示す状態を指すことができ、主に移動状態（運行状態）が含まれる。上記移動状態は、自律移動装置１の傾きや位置などを含むことができる。なお、上記設置箇所や上記検知対象は、一般的に自律移動装置１の種別や形状によって異なることになる。
【0024】
制御部１ａは、例えば、ＣＰＵ（Central Processing Unit）、作業用メモリ、及びプログラムを記憶した不揮発性の記憶装置などによって実現することができる。このプログラムは、異常及び／又は異常予兆の検知プログラムとすることができる。また、制御部１ａは、例えば集積回路（Integrated Circuit）によって実現することもできる。無論、制御部１ａは、自律移動装置１の全体を制御するように構成すること、或いは自律移動装置１の全体を制御する制御部により制御されるように構成することができる。
【0025】
制御部１ａは、センサ群１ｂで検知された検知開始時点から現時点までの時系列データである現センサデータを取得する。ここでは、現センサデータ（及び後述の蓄積センサデータ）が、センサ群１ｂに含まれる全てのセンサについて所定の形式で整えたデータであることを前提として説明する。但し、実際には、制御部１ａは、これらのセンサの一部又は全部のそれぞれについて、センサ値のデータを個別に取得することができる。また、制御部１ａは、現センサデータを取得できればよく、現センサデータを例えば後述の第１所定間隔等の間隔で順次取得することもできる。また、取得元は、基本的にセンサ群１ｂとなるが、制御部１ａは、例えば無線通信ネットワーク経由で外部のサーバ装置などに個別のセンサ値のデータを送信し、纏まった段階でその返信として現センサデータを受信することもできる。
【0026】
また、制御部１ａは、現センサデータを第１所定間隔毎に分割した現分割データと現センサデータとに基づき生成された複数のグラフを学習済みモデルに入力し、自律移動装置１における異常発生状態を検知又は予測した結果を得る。第１所定間隔は、例えば、第１の所定時間、所定距離、センシングデータ数などとすることができる。
【0027】
ここで、上記複数のグラフ（以下、現グラフ群）は、検知開始時点から現時点までの移動の途中経過等を示すグラフ群とすることができる。そして、現グラフ群は、制御部１ａが生成すること、或いは、外部のサーバ装置に現センサデータを送信した応答として受信することができる。
【0028】
上記学習済みモデルの詳細については、図２を参照しながら後述する。上記学習済みモデルは制御部１ａの内部に記憶しておくなど、自律移動装置１の内部に保存しておくことができるが、外部のサーバ装置に保存しておくこともできる。サーバ装置に学習済みモデルを記憶しておく場合、自律移動装置１は、例えば、そのサーバ装置にセンサ個別のデータ、現センサデータ、現グラフ群のいずれかを送信し、その応答として上記結果を得ることができる。
【0029】
上記結果は、異常の未発生（つまり正常であること）を検知した結果、異常の発生を検知した結果、異常発生の予兆として検知した結果（予測結果）などを示すものとすることができる。つまり、制御部１ａは、上記結果として、正常時の状態、異常時の予兆がある状態、及び異常時の状態を含む、複数の状態のうち１つを得ることが好ましい。制御部１ａは、上記結果に基づき、例えば異常状態であるか正常状態であるかなどを示す情報を、自律移動装置１のフィードバック制御に用いることや、外部のサーバ装置や端末装置等に出力することができる。なお、サーバ装置に学習済みモデルを記憶しておく場合、上記結果は、サーバ装置から他の端末装置に送信されることもできる。
【0030】
ここで、自律移動装置１が通信部を備える場合について補足する。この場合、制御部１ａは、現センサデータを取得し、上記通信部を介して、取得した現センサデータ又は現分割データをサーバ装置に送信してサーバ装置から上記結果を受信することができる。
【0031】
このサーバ装置は、図示しないが、自律移動装置１と通信するサーバ側通信部と、学習済みモデルを記憶するモデル記憶部と、サーバ側制御部と、を備えることができる。このサーバ側制御部は、サーバ側通信部を介して自律移動装置１から現センサデータ又は現分割データを受信する。そして、サーバ側制御部は、モデル記憶部に記憶された学習済みモデルを用いて上記結果を得、サーバ側通信部を介して自律移動装置１に上記結果を送信する。サーバ側制御部も制御部１ａと同様に、ＩＣや、ＣＰＵ等のコンピュータ（制御コンピュータ）を採用することができる。その場合のプログラムは、この制御コンピュータに、データの送受等の処理と、学習済みモデルを用いた検知処理を実行させるためのプログラムを含むことができる。このように、本実施形態に係る自律移動装置１は、サーバ装置（図示せず）とともに自律移動システムを構成することもできる。
【0032】
また、自律移動装置１は、上述したように学習済みモデルを記憶する記憶部を備えることができる。この場合、制御部１ａは、現センサデータを取得し、取得した現センサデータから現グラフ群を生成すれば、内部の学習済みモデルを用いた判定を行うことができる。
【0033】
自律移動装置１は、学習済みモデルを記憶する記憶部だけでなく通信部も備える場合、制御部１ａは、現センサデータを取得し、通信部を介し、取得した現センサデータ又は現分割データをサーバ装置に送信してサーバ装置から現グラフ群を受信する。これにより、制御部１ａは、現グラフ群を取得すれば、内部の学習済みモデルを用いた判定を行うことができる。
【0034】
【0035】
図２で示すように、学習装置２は、制御部（学習装置側制御部）２ａ、通信部（学習装置側通信部）２ｂ、及び記憶部（学習装置側記憶部）と２ｃを備えることができる。なお、学習装置２は、自律移動装置１の外部に備えることを前提として説明するが、学習部として自律移動装置１の内部に備えることもできる。
【0036】
制御部２ａは、後述する蓄積グラフ群２ｅを、後述する未学習モデル２ｄに入力して機械学習を行うことで、学習済みモデルを生成する。制御部２ａは、制御部１ａと同様に、例えば、ＣＰＵ、作業用メモリ、及びプログラムを記憶した不揮発性の記憶装置などによって実現することができる。このプログラムは、学習済みモデル生成プログラムとすることができる。なお、制御部２ａに記憶装置を設ける場合、この記憶装置を記憶部２ｃとすることもできる。また、制御部２ａは、例えば集積回路によって実現することもできる。無論、制御部２ａは、学習装置２の全体を制御するように構成すること、或いは学習装置２の全体を制御する制御部により制御されるように構成することができる。
【0037】
通信部２ｂは、自律移動装置１と通信する部位であり、自律移動装置１の種類、データの通信タイミングなどによって、無線通信部及び有線通信部の少なくとも一方とすることができる。なお、通信部２ｂが有線通信部である場合、例えば自律移動装置１が停止した状態でデータの受信を行えばよい。
【0038】
記憶部２ｃは、学習段階、即ち学習済みモデルの生成フェーズにおいては、未学習モデル２ｄが記憶されているとともに、学習データとして蓄積グラフ群２ｅ等が記憶されている。なお、未学習モデル２ｄとは、運用段階で用いることができない段階の学習モデルを指し、必要な学習データのうちの一部での学習を終えている段階の学習モデルも含むものとする。また、学習済みモデルは、更なる学習データを入力した学習により学習が可能な段階の学習モデルを指すことができる。
【0039】
蓄積グラフ群２ｅは、蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと上記蓄積センサデータとに基づき生成された複数のグラフを指すことができる。ここで、蓄積センサデータは、自律移動装置１及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した（検知して蓄積した）時系列データを指す。例えば、蓄積グラフ群２ｅは、検知開始時点から検知終了時点までの移動の途中経過等を示すグラフ群とすることができる。蓄積グラフ群２ｅの生成は、制御部２ａが行ってもよいし、例えば、上述のように自律移動装置１側で行った結果を通信部２ｂで受信したものとすることもできる。また、蓄積分割データは、所定回数分の第２所定間隔についてのデータである。また、第２所定間隔は、例えば、第２の所定時間、所定距離、センシングデータ数などとすることができる。第２所定間隔は、第１所定間隔と同じであってもよい。
【0040】
自律移動装置１についての蓄積センサデータは、検知開始時点から現時点までの上述した現センサデータにおいて、検知開始時点から検知終了時点までに拡張したデータであると言える。自律移動装置１における状態（例えば複数回のテスト移動時の状態のみでもよい）についてのみの時系列データを学習に用いる場合、自律移動装置やその内部センサ群についての器差を考慮することができる。但し、自律移動装置１と同種の自律移動装置における状態についての時系列データも学習に用いることで、学習データとして入力するデータセットを増やすことができる。
【0041】
学習済みモデルは、このような蓄積グラフ群２ｅを、未学習モデル２ｄに入力して機械学習を行うことで構築された学習モデルである。例えば、未学習モデル２ｄには、自律移動装置１又は同種の自律移動装置における検知開始時点から検知終了時点までの１回についての蓄積グラフ群２ｅを、学習データの１データセットとして入力することができる。なお、上記所定回数は蓄積センサデータ毎に任意とすること、つまり蓄積できた分のデータをもとに蓄積グラフ群２ｅを生成することができる。即ち、データセットの長さ（実施形態２におけるＭに相当）は、各データセットで異なってもよい。
【0042】
このように、制御部２ａは、通信部２ｂを介して自律移動装置１や他の同種の自律移動装置から蓄積センサデータ又は蓄積分割データを、一度に又は順次受信して、記憶部２ｃに記憶する。制御部２ａは、蓄積分割データと蓄積センサデータとに基づき蓄積グラフ群２ｅを生成し、未学習モデル２ｄに入力して機械学習を行うことで、学習済みモデルを生成する（未学習モデル２ｄを学習済みモデルに更新する）。
【0043】
学習装置２で生成される学習済みモデルの元となる未学習モデル２ｄのアルゴリズムは、例えば、畳み込み層、プーリング層、及び全結合層を有するＣＮＮ（Convolutional Neural Network）とすることができるが、これに限らない。例えば、アルゴリズムは、ＲＮＮ（Recurrent Neural Network）等の再帰的な構造をもつものなどであってもよい。また、ＲＮＮは、勾配消失問題を緩和するためにＬＳＴＭ（Long short-term memory）ブロックを有するように拡張したニューラルネットワークとすることもできる。無論、未学習モデル２ｄ、学習済みモデルはこれらのようなＤＮＮを用いたものであることが精度上好ましいが、これに限らない。
【0044】
なお、生成された学習済みモデルは、その精度をチェックし、精度が良ければそのまま実装し、精度が悪ければ畳み込み処理等の前処理を変更する、或いはチューニングを行うなどの処理を実行してもよい。その後、学習済みモデルの生成、評価を行い、実装する学習済みモデルを決定すればよい。また、チューニングの対象となるハイパーパラメータは問わない。ハイパーパラメータとしては、例えば、ＮＮの層数、各層のユニット数（ノード数）、同じデータセットを使用した反復学習の回数（エポック数）など、様々なものが挙げられる。
【0045】
このように、本実施形態に係る自律移動装置１は、上述した学習装置２とともに自律移動システムを構成することができ、さらにこの自律移動システムは、上述したようなサーバ装置を備えることもできる。この場合、サーバ装置は学習装置２を含むように構成することもできる。
【0046】
また、自律移動装置１に学習部を備える場合、この学習部は、前処理として、蓄積センサデータを取得し、蓄積センサデータから蓄積分割データを生成し、蓄積分割データと蓄積センサデータとに基づき蓄積グラフ群を生成する。そして、この学習部は、蓄積グラフ群を予め記憶された未学習モデルに入力して機械学習を行うことで、学習済みモデルを生成する。
【0047】
次に、図３及び図４を参照しながら、学習装置２及び自律移動装置１の処理の一例を説明する。図３は、学習装置２における処理例を説明するためのフロー図で、図４は、自律移動装置１における処理例を説明するためのフロー図である。
【0048】
まず、学習段階（モデル生成処理）では、学習装置２は、蓄積センサデータを取得し（ステップＳ１１）、そこから蓄積分割データを生成する（ステップＳ１２）。次いで、学習装置２は、蓄積センサデータ及び蓄積分割データに基づき、蓄積グラフ群２ｅを生成する（ステップＳ１３）。最後に、学習装置２は、未学習モデル２ｄに蓄積グラフ群２ｅを入力し、機械学習を実行することで、学習済みモデルを生成する（ステップＳ１４）。
【0049】
運用段階（検知処理）では、自律移動装置１は、現センサデータをセンサ群１ｂから取得し（ステップＳ２１）、そこから現分割データを生成する（ステップＳ２２）。次いで、自律移動装置１は、現センサデータ及び現分割データに基づき、現グラフ群を生成する（ステップＳ２３）。自律移動装置１は、内部又は外部のサーバ装置などに記憶された学習済みモデルに、ステップＳ２３で生成された現グラフ群を入力し、異常発生状態を検知又は予測した結果を得る（ステップＳ２４）。
【0050】
例えば、学習済みモデルは、その出力ノードとして、異常発生状態が区別できるように異常を示す出力ノード、正常を示す出力ノードなどを用意しておけば、ステップＳ２４で現グラフ群に対する結果を得ることができる。
【0051】
以上に説明したように、本実施形態では、自律移動装置１において、上述のような蓄積グラフ群２ｅを用いて機械学習した学習済みモデルに対して、現グラフ群を入力して異常発生状態を示す結果を得る。つまり、本実施形態では、閾値による異常判別処理とは異なり、機械学習により生成された学習済みモデルと現グラフとの類似性をもとに、自律移動装置１の異常検出を行う。
【0052】
特に、本実施形態では、ある期間全体のデータのグラフ化に加え、期間を途中経過で分割し、開始から分割した時間までの期間をグラフ化して機械学習を実行するため、途中経過における異常を検知でき、また異常を予兆段階で検知することもできる。このように、本実施形態によれば、期間全体でのみ異常を検知する場合に比べ、自律移動装置１の異常発生状態を素早く正確に検知又は予測することが可能になる。
【0053】
よって、本実施形態では、例えばドローンや自動運転車などの自律移動装置の故障による墜落や暴走、制御の乗っ取りなどセキュリティ攻撃などによる不正動作、風など自然現象による逸脱動作などの異常動作を事故に進展させないようにできる。つまり、本実施形態では、自律移動装置の状態を正確に把握し状態に応じた適切な対処をとること、異常を迅速に検出し事故になる前に早期に対処することができるため、被害を最小限にとどめることができる。特に、自律移動装置の場合には、工場内と異なり厳密に固定設置されて運用されるわけではなく、気象状況や周囲の環境等、時々刻々と変化する様々な外的要因に自律的に対処しながら運用されることから、本実施形態による効果は有益であると言える。さらに、自律移動装置の場合、故障が実際に発生してからでないと異常を検知できないと、故障が起きた場合、例えばドローンでは即墜落してしまうことになり、自動運転車では即事故につながることになる。一方で、本実施形態では事前に予測することができるため、手遅れにならずに事故を未然に防ぐことができる。
【0054】
このように、本実施形態では、前処理としてグラフ化処理を採用した機械学習を用い、且つ、複数センサの情報を統合することで、自律移動装置の状態を正常、異常の予兆、異常の三つの状態に区分して検知している。そのため、本実施形態では、これらの状態の内、異常の予兆を見極め、異常が発生する前に原因を特定することができ、事故を未然に防ぐことができる。
【0055】
＜実施形態２＞
実施形態２について、図５～図１３を参照しながら、実施形態１との相違点を中心に説明するが、実施形態１で説明した様々な例が適用できる。図５は、実施形態２に係る自律移動装置の一構成例を示すブロック図である。図６は、図５における正常センサデータの一例を示す図、図７は、図５における正常センサデータグラフ化部の出力例を示す図である。図８は、図５における現センサデータの一例を示す図、図９は、図５における現センサデータグラフ化部の出力例を示す図、図１０は、図９の出力例を出力するために用意するデータの一例を示す図である。
実施形態２について、図５～図１３を参照しながら、実施形態１との相違点を中心に説明するが、実施形態１で説明した様々な例が適用できる。図５は、実施形態２に係る自律移動装置の一構成例を示すブロック図である。図６は、図５における正常センサデータの一例を示す図、図７は、図５における正常センサデータグラフ化部の出力例を示す図である。図８は、図５における現センサデータの一例を示す図、図９は、図５における現センサデータグラフ化部の出力例を示す図、図１０は、図９の出力例を出力するために用意するデータの一例を示す図である。
【0056】
図５に示すように、本実施形態に係る自律移動装置１０は、正常センサデータグラフ化部１２、モデル学習部１３、モデルＤＢ１４、現センサデータグラフ化部１６、及び異常識別部１７を備えることができる。
【0057】
本実施形態では、蓄積センサデータは、自律移動装置１０における正常時の状態を、各装置内部のセンサ群で検知した時系列データ群である正常センサデータ１１を含む。つまり、図５における正常センサデータ１１は、図示しないセンサ群から以前に取得されたデータであり、外部から取得されるか内部の記憶部から取得されることができる。
【0058】
このように、本実施形態では、正常動作を学習させた学習済みモデルを用いることで、正常以外つまり未知、未分類の異常を検出することができるようにしている。なお、本実施形態における蓄積センサデータとしては、実施形態１で説明したように他の同種の自律移動装置における正常時の状態を検知したデータを、代わりに又は同時に採用することもできる。
【0059】
また、図５における現センサデータ１５は、図示しないセンサ群から取得されたデータであり、ここでは実施形態１における現分割データを複数含むデータ（つまり現分割データ群）に相当する。
【0060】
以下では、自律移動装置１０の一例としてドローン１０を例に挙げて説明するが、他種の自律移動装置であっても同様である。ドローン１０は、ドローン１０の正常飛行を学習し、正常飛行の学習済みモデルを生成するモデル生成フェーズと、この正常飛行の学習済みモデルを使用して、現在の飛行の状態を検知する検知フェーズと、を実行するように構成される。
【0061】
モデル生成フェーズは、運行前に予め過去のセンサデータを用いて実施しておく。なお、モデル生成フェーズは、オフラインで行っても、運行中にオンラインで行ってもよい。モデル生成フェーズでは、正常センサデータグラフ化部１２が、正常センサデータ１１から、飛行（運行又は稼働）の途中経過のグラフを生成する。正常センサデータ１１は、ドローン１０の正常運行をセンサ群により観測した正常時のセンサデータであり、図６で例示するようなデータであり、一括で全て正常センサデータグラフ化部１２に入力されることができる。図６で示す正常センサデータ１１は、時間と、それに対応するスタートからの距離、加速度センサのＸ，Ｙ，Ｚ値、及びジャイロセンサのＲｏｌｌ，Ｐｉｔｃｈ，Ｙａｗ値などが含まれる。
【0062】
正常センサデータグラフ化部１２で生成されるグラフ（グラフデータ）は、図７で例示するように、全間隔でのグラフ１２ａ－ｈを含むことができる。また、このグラフデータは、検知開始時点から各間隔（第２所定間隔）が経過するまでのグラフ１２ａ－１，１２ａ－２，１２ａ－３，・・・と、を含むことができる。ここでは、第２所定間隔は、一定間隔（ここではスタートからの距離について１０ｍ間隔）であるように図示しているが、例えばグラフ１２ａ－１，１２ａ－２の間隔とグラフ１２ａ－２，１２ａ－３の間隔とは互いに異ならせることもできる。つまり、第２所定間隔は、可変とすることもできる。
【0063】
このように、図７の例では、未学習モデルに入力される蓄積グラフ群は、検知開始時点から第２所定間隔がｊ回分経過するまでの合計Ｍ個の期間のそれぞれについて、対応するｊ個の前記現分割データを示すように生成された、Ｍ個のグラフを有する。ここで、Ｍを１以上の整数、ｊを１からＭまでの整数とする。なお、Ｍは後述のＮ以上であることが好ましい。ｊ＝Ｍの場合が、蓄積センサデータを第２所定間隔毎の値として示すように生成されたグラフである。
【0064】
次いで、モデル学習部１３が、正常センサデータグラフ化部１２で生成されたグラフデータを正常データとして機械学習させる。モデルＤＢ１４は、モデル学習部１３により学習された正常飛行のモデルデータベースであり、学習済みモデルの各ノードのウェイト等を記述したものとすることができる。
【0065】
検知フェーズは、運行時に行われる。検知フェーズでは、現センサデータグラフ化部１６が、現センサデータ１５から、飛行の途中経過のグラフを生成する。現センサデータ１５は、現在の運行をセンサ群により観測した現在のセンサデータであり、図８で例示するようなデータである。図８で示す現センサデータ１５は、図６の正常センサデータ１１と同様の項目を含むことができる。
【0066】
現センサデータグラフ化部１６で生成されるグラフ（グラフデータ）は、図９で例示するように、検知開始時点から各間隔（例えば１分等の固定された第１所定間隔）が経過するまでのグラフ１６ａ－１，１６ａ－２，１６ａ－３，・・・，１６ａ－ｈを含むことができる。ここでグラフ１６ａ－ｈは、図示しないが、現時点の最後のグラフ（現時点での全体のグラフ）を指す。なお、第１所定間隔も、可変としてもよい。このようなグラフデータを生成するために、図１０で例示するような間隔（上記第１所定間隔）毎のグラフ１６ｂ－１，１６ｂ－２，１６ｂ－３，・・・を予め生成して内部メモリに記憶しておき、それらを加算していく。
【0067】
このように、図９の例では、学習済みモデルに入力される現グラフ群は、検知開始時点から第１所定間隔がｉ回分経過するまでの合計Ｎ個の期間のそれぞれについて、対応するｉ個の現分割データを示すように生成された、Ｎ個のグラフを有する。ここで、Ｎを１以上の整数、ｉを１からＮまでの整数とする。ｉ＝Ｎの場合が、現センサデータを第１所定間隔毎の値として示すように生成されたグラフである。
【0068】
次いで、異常識別部１７が、現センサデータグラフ化部１６が生成したグラフデータについて、モデルＤＢ１４をもとに正常か正常でない（異常）かを判定（識別）して出力する。例えば、異常識別部１７は、ＮＮに、現センサデータから生成したグラフ１６ａ－１，１６ａ－２，１６ａ－３，・・・等の現分割データと、モデルＤＢ１４のデータ（ウェイト等）と、を入力して計算を実行し、正常か正常でないかを判定して出力する。
【0069】
未設定のＮＮにモデルＤＢ１４のデータ（ウェイト等）が設定された状態で（これが学習済みモデルの例となる）、現分割データを入力することで判定結果が出力される。この判定及び出力は、現センサデータについての第１所定間隔（上述の例では１分等）毎に実行される。
【0070】
次に、本実施形態に係るドローン１０における処理例について、図１１～図１３を併せて参照しながら説明する。図１１は、ドローン１０におけるモデル生成フェーズの処理例を説明するためのフロー図である。図１２は、ドローン１０における検知フェーズの処理例を説明するためのフロー図で、図１３は、その検知結果の具体例を示す概念図である。
【0071】
図１１に示すように、モデル生成フェーズで実行される学習処理は、正常センサデータの数だけのループ処理（ステップＳ３０ａ，Ｓ３０ｂ）を含む。このループ処理では、正常センサデータグラフ化部１２が、処理対象の正常センサデータを入力し（ステップＳ３１）、それをグラフ画像化（ラスターデータ化）し、それまでの時間毎のグラフ画像も生成する（ステップＳ３２）。そして、モデル学習部１３が未学習ＮＮに生成されたグラフ画像群を入力し、正常センサデータから正常な状態のパターンを学習する（ステップＳ３３）。このループ処理は、正常センサデータがある限り繰り返されることになる。その後、見つけたい対象の正常なパラメータ（ウェイト等）に対応する学習済みＮＮのパラメータを抽出し、モデルＤＢ１４に記憶する（ステップＳ３４）。
【0072】
図１２に示すように、検知フェーズで実行される検知処理は、一定間隔毎に運用終了まで実行されるループ処理（ステップＳ４０ａ，Ｓ４０ｂ）を含む。このループ処理では、現センサデータグラフ化部１６が、現間隔についての現センサデータ（現分割データ）、つまり前回処理完了から今回処理開始までに検知されたデータを入力する（ステップＳ４１）。そして、現センサデータグラフ化部１６が、その現分割データをグラフ画像化（ラスターデータ化）し、現在までのグラフ画像も生成する（ステップＳ４２）。そして、異常識別部１７がモデルＤＢ１４に基づき正常か否かを判定し（ステップＳ４３）、その結果を出力する（ステップＳ４４）。
【0073】
ステップＳ４４により、例えば、正常センサデータで学習した正常モデル（説明のため、便宜上、図１３のグラフ１２ａで代表されるグラフと仮定する）と、現センサデータとが一致すれば、正常と出力され、一致しなければ異常と出力される。よって、この例では、現センサデータが図１３のグラフ１６ａ－ｐのようにグラフ化できる場合には正常と出力され、現センサデータが図１３のグラフ１６ａ－ｑのようにグラフ化できる場合には異常と出力される。なお、ここで一致とは、ある程度の許容範囲をもたせた一致とする（以下、同様）。
【0074】
以上に説明したように、本実施形態に係るドローン１０によれば、正常状態を事前に学習させておくことにより、正常とは違う異常（未知の異常の検知）や異常の前兆（予兆）があれば検知することができる。例えば、正常を示した全てのセンサからどれが一番予兆することができるか調べ、選択することで、異常の予兆を見つけることができる。異常の予兆を検知できることで、これにより何らかのアクシデントがあっても素早く、素早く対処することができる。
【0075】
＜実施形態３＞
実施形態３について、図１４～図１８を参照しながら、その効果も含めた実施形態２との相違点を中心に説明する。実施形態３は、実施形態１，２で説明した様々な例が適宜利用できる。図１４は、実施形態３に係る自律移動装置の一構成例を示すブロック図である。
実施形態３について、図１４～図１８を参照しながら、その効果も含めた実施形態２との相違点を中心に説明する。実施形態３は、実施形態１，２で説明した様々な例が適宜利用できる。図１４は、実施形態３に係る自律移動装置の一構成例を示すブロック図である。
【0076】
図１４に示す本実施形態に係る自律移動装置（ここでもドローンで例示）２０は、基本的に、実施形態２に係る自律移動装置１０において、正常センサデータを異常センサデータとしたものである。よって、本実施形態に係るドローン２０は、異常センサデータグラフ化部２２、モデル学習部２３、モデルＤＢ２４、現センサデータグラフ化部２６、及び異常識別部２７を備えることができる。
【0077】
本実施形態では、蓄積センサデータは、ドローン２０における異常時の状態を、各装置内部のセンサ群で検知した時系列データ群である異常センサデータ２１を含む。つまり、図１４における異常センサデータ２１は、図示しないセンサ群から以前に取得されたデータであり、外部から取得されるか内部の記憶部から取得されることができる。なお、図１４における現センサデータ２５は、図５における現センサデータ１５と同様である。
【0078】
このように、本実施形態では、異常動作を学習させた学習済みモデルを用いることで、異常発生状態を検出することができるようにしている。さらに、本実施形態では、複数の異常動作を学習させた学習済みモデルを用いることで、既知の異常については、異常の種別を判別分類することができる。なお、本実施形態における蓄積センサデータとしては、実施形態１で説明したように他の同種の自律移動装置における異常時の状態を検知したデータを、代わりに又は同時に採用することもできる。
【0079】
ドローン２０は、ドローン２０の異常飛行を学習し、異常飛行の学習済みモデルを生成するモデル生成フェーズと、この異常飛行の学習済みモデルを使用して、現在の飛行の状態を検知する検知フェーズと、を実行するように構成される。
【0080】
モデル生成フェーズでは、異常センサデータグラフ化部２２が、異常センサデータ２１から、飛行（運行又は稼働）の途中経過のグラフを生成する。異常センサデータ２１は、ドローン２０の異常運行をセンサ群により観測した異常時のセンサデータであり、図６で例示したようなデータ（但し、異常時のもの）であり、一括で全て異常センサデータグラフ化部２２に入力されることができる。異常センサデータグラフ化部２２で生成されるグラフ（グラフデータ）は、図７で例示したものと同様である（但し、異常時のもの）。
【0081】
さらに、異常センサデータグラフ化部２２は、生成されるグラフがどのような要因の異常であるかを記述し、グラフの異常が現れていないところでは正常であることを記述する。この記述は作業者が行うこともできるが、自動的に運行環境やドローン２０の内部回路の故障状況等を考慮して入力するなど、自動的に行うこともできる。
【0082】
次いで、モデル学習部２３が、異常センサデータグラフ化部２２で生成された記述付きグラフデータを異常データとして機械学習させる。モデルＤＢ２４は、モデル学習部２３により学習された異常飛行のモデルデータベースであり、学習済みモデルの各ノードのウェイト等を記述したものとすることができる。
【0083】
検知フェーズは、運行時に行われる。検知フェーズでは、現センサデータグラフ化部２６が、現センサデータ２５から、飛行の途中経過のグラフ（グラフデータ）を生成する。現センサデータ２５は、現在の運行をセンサ群により観測した現在のセンサデータであり、図８で例示したようなデータ（但し、異常時のもの）である。現センサデータグラフ化部２６で生成されるグラフは、図９で例示したようなグラフである。
【0084】
次いで、異常識別部２７が、現センサデータグラフ化部２６が生成したグラフデータについて、モデルＤＢ２４をもとに異常か異常でない（正常）かを判定して出力する。例えば、異常識別部２７は、ＮＮに、現センサデータから生成したグラフ１６ａ－１，１６ａ－２，１６ａ－３，・・・等の現分割データと、モデルＤＢ２４のデータ（ウェイト等）と、を入力して計算を実行し、異常か異常でないかを判定して出力する。
【0085】
ここで例示している好ましい例では、異常識別部２７は、次の出力を行う。即ち、異常識別部２７は、記述付きグラフデータを、モデルＤＢ２４をもとに異常か正常か、異常の原因、異常が起きた位置を示す情報（緯度経度、スタートからの距離）、異常の発生時刻を示す情報（時刻や、スタートからの経過時間など）を出力する。
【0086】
未設定のＮＮにモデルＤＢ２４のデータ（ウェイト等）が設定された状態で（これが学習済みモデルの例となる）、現分割データを入力することで判定結果が出力される。この判定及び出力は、現センサデータについての第１所定間隔（例えば１分等）毎に実行される。
【0087】
このように、ドローン２０の制御部は、異常時の状態を示す結果として、複数の異常要因のうち少なくとも１つを得るように構成することができる。また、ドローン２０の制御部は、結果が異常時の状態であることを示していた場合、結果が示す異常要因に基づき、その移動制御を変更するようにすることが好ましい。
【0088】
次に、本実施形態に係るドローン２０における処理例について、図１５～図１８を併せて参照しながら説明する。図１５は、ドローン２０におけるモデル生成フェーズの処理例を説明するためのフロー図である。図１６は、ドローン２０における検知フェーズの処理例を説明するためのフロー図である。図１７は、ドローン２０をその処理例とともに示す概念図で、図１８は、図１６の検知結果の具体例を示す概念図である。
【0089】
図１５に示すように、モデル生成フェーズで実行される学習処理は、異常センサデータの数だけのループ処理（ステップＳ５０ａ，Ｓ５０ｂ）を含む。このループ処理では、異常センサデータグラフ化部２２が、処理対象の異常センサデータを入力し（ステップＳ５１）、それをグラフ画像化（ラスターデータ化）し、それまでの時間毎のグラフ画像も生成する（ステップＳ５２）。そして、モデル学習部２３が未学習ＮＮに生成されたグラフ画像群を入力し、異常センサデータから異常な状態のパターンを学習する（ステップＳ５３）。このループ処理は、異常センサデータがある限り繰り返されることになる。その後、見つけたい対象の異常なパラメータ（ウェイト等）に対応する学習済みＮＮのパラメータを抽出し、モデルＤＢ２４に記憶する（ステップＳ５４）。
【0090】
図１６に示すように、検知フェーズで実行される検知処理は、一定間隔毎に運用終了まで実行されるループ処理（ステップＳ６０ａ，Ｓ６０ｂ）を含む。このループ処理では、現センサデータグラフ化部２６が、現間隔についての現センサデータ（現分割データ）、つまり前回処理完了から今回処理開始までに検知されたデータを入力する（ステップＳ６１）。そして、現センサデータグラフ化部２６が、その現分割データをグラフ画像化（ラスターデータ化）し、現在までのグラフ画像も生成する（ステップＳ６２）。そして、異常識別部２７がモデルＤＢ２４に基づき正常／異常／異常要因（異常の場合）を判定し（ステップＳ６３）、その結果を出力する（ステップＳ６４）。
【0091】
ステップＳ６４により、例えば、風要因、故障要因、攻撃要因のそれぞれの異常センサデータ２１（図１７参照）で学習した異常モデルと、現センサデータとが一致すれば、一致したモデルに対応する要因の異常と出力され、一致しなければ正常と出力される。ここでは、それぞれの要因の異常モデルは、便宜上、それぞれ図１８のグラフ１２ｃ，１２ｄ，１２ｅで代表されるグラフと仮定する。よって、この例では、現センサデータが一定方向に流されて飛行している状態であれば風要因であると出力される。また、現センサデータが最初は正常な動きであったが、ある時を境に急にセンサ値に変動が起きた状態であれば、故障要因であると出力される。また、現センサデータが、突然センサ値が小さくなったり大きくなったりする状態であれば、攻撃要因であると出力される。
【0092】
また、現センサデータがこれらのうち複数の状態を示している場合、つまり風要因、故障要因、攻撃要因のうちの２以上の要因の複合モデル（図示せず）を示している場合には、示している状態の要因が複数出力される。このように複数の要因を考慮した複合モデルで一致を行うこともできる。複合モデルは、上述の例の場合、例えばグラフ１２ｃ，１２ｄ，１２ｅの各棒線を足し合わせたモデル、或いはそのうちの２つを足し合わせたモデルなどとすることができる。
【0093】
以上に説明したように、本実施形態に係るドローン２０によれば、異常状態（見つけたい異常パターン）や異常の予兆を事前に学習させておくことにより、見つけたい異常と似たパターンの異常の検知や予兆の検知を行うことができる。例えば、異常を示した全てのセンサからどれが一番予兆することができるか調べ、選択することで、異常の予兆を見つけることができる。異常の予兆を検知できることで、これにより何らかのアクシデントがあっても素早く、素早く対処することができる。
【0094】
また、本実施形態に係るドローン２０によれば、原因の異なる複数の異常パターンを事前に学習させておくことで、発生した異常を分類することができる。また、異常の要因を分類することで、それぞれ次のような効果を奏する。風の影響を受けていることがわかれば、風を考慮して経路を飛行することができ、無駄な動きをしなくてよくなる。よって、風要因を検知することで、バッテリー消費削減も期待できる。故障の影響を受けていることがわかれば、墜落しそうになる前に異常に気づくことができる。よって、故障要因を検知することで、落ちる場所などを考慮して、安全に落ちるように移動制御を行うことができる。攻撃要因を検知して攻撃の影響を受けていることがわかれば、よける、通報する、助けを求める、とにかく安全に着地するという対処を素早く行うことができる。
【0095】
また、本実施形態の考え方は、実施形態２にも適用することができる。即ち、実施形態２において、正常動作を学習した複数の学習済みモデルを用いることで、正常動作の種類を判別し分類することができるようになる。
【0096】
＜実施形態４＞
実施形態４について、図１９～図２０を参照しながら、その効果も含めた実施形態２，３との相違点を中心に説明する。実施形態４は、実施形態１～３で説明した様々な例が適宜利用できる。図１９は、実施形態４に係る自律移動装置の一構成例を示すブロック図である。
実施形態４について、図１９～図２０を参照しながら、その効果も含めた実施形態２，３との相違点を中心に説明する。実施形態４は、実施形態１～３で説明した様々な例が適宜利用できる。図１９は、実施形態４に係る自律移動装置の一構成例を示すブロック図である。
【0097】
図１９に示すように、本実施形態に係る自律移動装置（ここでもドローンで例示）３０は、実施形態２に係るドローン２０と実施形態３に係るドローン３０とを組み合わせたものであり、正常センサデータを異常センサデータの双方用いて学習済みモデルを生成する。よって、本実施形態に係るドローン３０は、異常センサデータグラフ化部３２、モデル学習部３３、モデルＤＢ３４、現センサデータグラフ化部３６、及び異常識別部３７、及び正常センサデータグラフ化部３９を備えることができる。
【0098】
本実施形態では、蓄積センサデータは、ドローン３０における異常時、正常時の状態を、それぞれ各装置内部のセンサ群で検知した時系列データ群である異常センサデータ３１、正常センサデータ３８を含む。つまり、図１９における異常センサデータ３１、正常センサデータ３８は、それぞれ、実施形態３の異常センサデータ２１、実施形態２の正常センサデータ１１と同様とすることができる。なお、図１９における現センサデータ３５は、図５における現センサデータ１５と同様である。
【0099】
このように、本実施形態では、異常動作及び正常動作を学習させた学習済みモデルを用いることで、異常発生状態を検出することができるようにしている。さらに、本実施形態でも実施形態３と同様に、複数の異常動作を学習させた学習済みモデルを用いることで、既知の異常については、異常の種別を判別分類することができる。
【0100】
ドローン３０は、ドローン３０の異常飛行及び正常飛行を学習し、異常飛行及び正常飛行の学習済みモデルを生成するモデル生成フェーズと、これらの学習済みモデルを使用して、現在の飛行の状態を検知する検知フェーズと、を実行するように構成される。
【0101】
モデル生成フェーズでは、異常センサデータグラフ化部３２が、異常センサデータ３１から、飛行の途中経過のグラフを生成する。異常センサデータグラフ化部３２で生成されるグラフ（グラフデータ）は、図７で例示したものと同様である（但し、異常時のもの）。さらに、異常センサデータグラフ化部３２は、生成されるグラフがどのような要因の異常であるかを記述し、グラフの異常が現れていないところでは正常であることを記述する。
【0102】
モデル生成フェーズでは、正常センサデータグラフ化部３９が、正常センサデータ３８から、飛行の途中経過のグラフを生成する。正常センサデータグラフ化部３９で生成されるグラフ（グラフデータ）は、図７で例示したものと同様である。
【0103】
次いで、モデル学習部３３が、正常センサデータグラフ化部３９で生成されたグラフデータを正常データとして、且つ異常センサデータグラフ化部３２で生成された記述付きグラフデータを異常データとして、機械学習させる。モデルＤＢ３４は、モデル学習部３３により学習された正常飛行及び異常飛行のモデルデータベースであり、学習済みモデルの各ノードのウェイト等を記述したものとすることができる。
【0104】
検知フェーズは、運行時に行われる。検知フェーズでは、現センサデータグラフ化部３６が、現センサデータ３５から、飛行の途中経過のグラフを生成する。生成されるグラフは、図９で例示したようなグラフである。
【0105】
次いで、異常識別部３７が、現センサデータグラフ化部３６が生成したグラフデータについて、モデルＤＢ３４をもとに異常か正常かそれ以外の異常かを判定して出力する。例えば、異常識別部３７は、ＮＮに、現分割データと、モデルＤＢ３４のデータ（ウェイト等）と、を入力して計算を実行し、異常か正常かそれ以外の異常（未知の異常）かを判定して出力する。ここで例示している好ましい例では、異常識別部３７は、記述付きグラフデータを、モデルＤＢ３４をもとに、異常の原因、異常が起きた位置を示す情報、異常の発生時刻を示す情報も出力する。
【0106】
【0107】
モデル生成フェーズは、図１１の処理と図１５の処理とを並行又はいずれかを最初に実行すればよい。これにより、見つけたい対象の異常なパラメータ及び正常なパラメータの双方に対応する学習済みＮＮのパラメータが抽出され、モデルＤＢ３４に記憶される。
【0108】
検知フェーズで実行される検知処理は、例えば図１６の処理を現センサデータグラフ化部３６及び異常識別部３７が行う。異常識別部３７は、モデルＤＢ３４に基づき正常／異常／異常要因などを判定し、その結果を出力する。
【0109】
これにより、例えば、風要因、故障要因、攻撃要因のそれぞれの異常センサデータ３１（図２０参照）で学習した異常モデルと、現センサデータとが一致すれば、一致したモデルに対応する要因の異常と出力される。また、現センサデータがこれらのうち複数の状態を示している場合、つまり風要因、故障要因、攻撃要因のうちの２以上の要因の複合モデルを示している場合には、示している状態の要因を複数出力される。
【0110】
また、正常センサデータ３８が正常モデルと一致すれば、正常と出力される。さらに、異常要因数（ここでは３で例示）の異常モデルと正常モデルとのいずれにも、一致しなければ、未知の異常と出力される。
【0111】
以上に説明したように、本実施形態に係るドローン３０では、実施形態３に係るドローン２０において、正常パターンの学習も加えたことで、予め学習した以外の未知（未分類、非正常）の異常や予兆を検出することができる。つまり、本実施形態によれば、実施形態３の効果に加えて、風要因、故障要因、攻撃要因等の予め予想した要因ではない未知の異常を検知すること、並びに未知の異常の予兆を検知することができる。例えば、本実施形態では、異常と正常を示した全てのセンサからどれが一番予兆することができるか調べ、選択することで、異常の予兆を見つけることができる。異常の予兆を検知できることで、これにより何らかのアクシデントがあっても素早く、素早く対処することができる。
【0112】
＜実施形態５＞
実施形態５について、図２１～図２７を参照しながら、その効果も含めた実施形態４との相違点を中心に説明する。実施形態５は、実施形態１～４で説明した様々な例が適宜利用できる。図２３は、実施形態５に係る自律移動装置の一構成例を示すブロック図である。
実施形態５について、図２１～図２７を参照しながら、その効果も含めた実施形態４との相違点を中心に説明する。実施形態５は、実施形態１～４で説明した様々な例が適宜利用できる。図２３は、実施形態５に係る自律移動装置の一構成例を示すブロック図である。
【0113】
図２１に示す本実施形態に係る自律移動装置（ここでもドローンで例示）４０は、実施形態４に係るドローン３０において、使用する学習済みモデルを選択できるようにしたものである。
【0114】
つまり、ドローン４０の制御部は、機械学習のアルゴリズム及び機械学習に用いた蓄積センサデータのうちの少なくとも一方が異なる複数の学習済みモデルの中から、使用する学習済みモデルを選択する。
【0115】
この選択はユーザ操作に基づいてもよいが、ここではより好ましい予兆速度が速い（いち早く検知できる）学習済みモデルを自動的に選択する例を挙げる。これにより、実際に動作不良が起こる前に異常を検知することができる。このように、ドローン４０の制御部は、最も事前に検知できる学習済みモデルを少なくとも含むように選択を行い、選択モデルを使用して、結果を得ることが好ましい。特に、ここでは、複数の異常動作、複数の正常動作の中から、最も早期に異常の予兆を示すモデルを選択する例を挙げて説明する。そして、この制御部は、選択した学習済みモデルである選択モデルを使用して、異常発生状態を検知又は予測した結果を得る。
【0116】
そのため、図２１に示すように、本実施形態に係るドローン４０は、実施形態４に係るドローン３０において、モデルＤＢ３４を複数設けたモデルＤＢ４４を備えるとともに、予兆モデルＤＢ４１、予兆モデル選択部４２を備えることができる。また、ドローン４０における異常識別部４７は、予兆モデルＤＢ４１をもとに異常発生状態を判定する。
【0117】
ドローン４０は、ドローン４０の異常飛行及び正常飛行を学習し、異常飛行及び正常飛行の学習済みモデルを生成するモデル生成フェーズと、これらの学習済みモデルを使用して、現在の飛行の状態を検知する検知フェーズと、を実行するように構成される。
【0118】
モデル生成フェーズでは、モデル学習部３３が、正常センサデータグラフ化部３９で生成されたグラフデータを正常データとして、且つ異常センサデータグラフ化部３２で生成された記述付きグラフデータを異常データとして、機械学習させる。モデルＤＢ４４は、モデル学習部３３により学習された正常飛行及び異常飛行のモデルデータベースであり、学習済みモデルの各ノードのウェイト等を、モデル毎に記述したものとすることができる。ここでは、モデルＤＢ３４と学習済みモデルとが一対一に対応し、その纏まりをモデルＤＢ４４と称して説明する。モデルＤＢは、例えば、搭載されたセンサの種類のそれぞれ（又は登録されたセンサの検出対象のそれぞれ）に対応させることができ、その対応関係は、１対多であってもよい。
【0119】
検知フェーズは、運行時に行われる。検知フェーズでは、現センサデータグラフ化部３６が、現センサデータ３５から、図９で例示したような飛行の途中経過のグラフを生成する。
【0120】
次いで、予兆モデル選択部４２がモデルＤＢ４４の中から使用するモデルを選択し、予兆モデルＤＢ４１に登録（記録）する。ここでは、予兆モデル選択部４２は、モデルＤＢ４４の中から、一番異常の予兆であると見つけるのが速かったモデルＤＢ３４を選択する例を挙げる。この場合、予兆モデル選択部４２は、例えば、正常センサデータ３８よりもどれだけ値が離れていたか、異常センサデータ３１とどれだけ値が近かったか、予め設けた閾値をどの程度超えたかなど、の判定により、モデルＤＢ３４を選択することができる。また、この判定の処理には、平均化するなどの様々な統計処理を加えることもできる。
【0121】
次いで、異常識別部４７が、現センサデータグラフ化部３６が生成したグラフデータについて、予兆モデルＤＢ４１をもとに異常か正常かそれ以外の異常かを判定して出力する。例えば、異常識別部４７は、ＮＮに、現分割データと、予兆モデルＤＢ４１のデータ（ウェイト等）と、を入力して計算を実行し、異常か正常かそれ以外の異常（未知の異常）かを判定して出力する。ここで例示している好ましい例では、異常識別部４７は、記述付きグラフデータを、予兆モデルＤＢ４１をもとに、異常の原因、異常が起きた位置を示す情報、異常の発生時刻を示す情報も出力する。
【0122】
次に、本実施形態に係るドローン４０における処理例について、図２２～図２７を併せて参照しながら説明する。図２２は、ドローン４０におけるモデル生成フェーズの処理例を説明するためのフロー図である。図２３は、ドローン４０における選択結果の具体例を示す概念図である。図２４～図２６は、ドローン４０における検知結果の具体例を示す概念図であり、いずれも異なる具体例を示している。なお、図２４～図２６の具体例は、実施形態４でも適用できる。
【0123】
図２２に示すように、モデル生成フェーズは、図１１の処理と図１５の処理とを並行又はいずれかを最初に実行した後、予兆モデル選択部４２が最も早期に予兆が現れるモデルＤＢ３４を選択し、予兆モデルＤＢ４１に記録する（ステップＳ７１）。図２３に示すように、正常モデル（代表グラフ１２ａ）、風のモデル（代表グラフ１２ｃ）、故障のモデル（代表グラフ１２ｄ）、攻撃のモデル（代表グラフ１２ｅ）が存在する場合を例に挙げる。予兆モデル選択部４２は、このうち、最も早期に予兆が現れるモデル（この例では太線矢印で示した故障のモデル）を選択し、予兆モデルＤＢ４１に記録する。この選択は現センサデータに依らずに実行することができるが、予兆モデル選択部４２は、現センサデータについて最も早期に予兆が現れるモデルを選択してもよい。
【0124】
また、ステップＳ７１の選択は、異常の要因（種類）毎に実行することができる。即ち、予兆モデル選択部４２は、例えば上述の４つのモデルそれぞれについて、１つずつ最も早期に予兆が現れるモデルＤＢを選択して予兆モデルＤＢ４１に記録することもできる。以下の検知フェーズでは、このような例を前提に説明する。
【0125】
検知フェーズで実行される検知処理は、例えば図１６の処理を現センサデータグラフ化部３６及び異常識別部３７が行う。但し、使用するモデルＤＢは予兆モデルＤＢ４１となる。異常識別部３７は、予兆モデルＤＢ４１に基づき正常／異常／異常要因などを判定し、早期にその結果を出力する。
【0126】
これにより、例えば、図２４に示すように、正常センサデータ３８で学習した正常モデルと現センサデータとが一致すれば、正常と出力される。例えば、図２５に示すように、正常モデルと現センサデータとが一致（マッチング）せず、且つ風要因、故障要因、攻撃要因のそれぞれの異常センサデータ３１で学習した異常モデルのいずれかと現センサデータとが一致すれば、異常がその要因とともに出力される。例えば、図２６に示すように、正常モデルと現センサデータとが一致せず、且つ風要因、故障要因、攻撃要因のそれぞれの異常センサデータ３１で学習した異常モデルのいずれとも現センサデータとが一致しない場合には、未知の異常と出力される。
【0127】
ここで、ＮＮの例について、図２７を参照しながら説明する。図２７は、ドローン４０におけるＮＮの一例を示す模式図である。図２７のＮＮは上述した実施形態４でも利用できる。図２７におけるＮＮは、入力層と複数の隠れ層と出力層とを備えることができる。入力層の各ノードには、全体の期間のグラフ画像のラスタデータと検知開始から各間隔の終了までのグラフ画像のラスタデータを入力することができる。出力層は、正常モデルについての結果を示す０，１のいずれかが出力されるノードを含むことができる。出力層は、風モデルについての結果を示す０，１のいずれかが出力されるノードと、故障モデルについての結果を示す０，１のいずれかが出力されるノードと、攻撃モデルについての結果を示す０，１のいずれかが出力されるノードと、を含むことができる。これらの出力層のノードの結果から、図２４～図２６で例示したような結果を得ることができる。
【0128】
以上に説明したように、本実施形態に係るドローン４０では、実施形態４に係るドローン２０において、例えば早期に予兆が現れるような学習済みモデルを使用することで、予兆の検知を早期に行うことができるようになる。つまり、本実施形態によれば、実施形態４の効果に加えて、所定の条件（早期に出現、高精度など）に合うような学習済みモデルを使用することで、所望の予兆検知が可能となる。
【0129】
＜実施形態６＞
実施形態６について、その効果も含めた実施形態２～５との相違点を中心に説明する。実施形態６は、実施形態１～５で説明した様々な例が適宜利用できる。
実施形態６について、その効果も含めた実施形態２～５との相違点を中心に説明する。実施形態６は、実施形態１～５で説明した様々な例が適宜利用できる。
【0130】
本実施形態では、実施形態２～５の正常センサデータ、異常センサデータとして、特に次の第１情報と第２情報との組み合わせを用いる。
【0131】
第１情報は、進行方向、加速度、ハンドル（舵）の制御情報、モータやエンジンなどの動力の出力といった、自律移動装置の動作状況が分かるセンサ情報である。第２情報は、管制や運行管理に対して、自律移動装置が報告する現在の位置情報である。即ち、本実施形態における蓄積センサデータは、自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける動作状況についての時系列データを含む。さらに、本実施形態における蓄積センサデータは、自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける運行管理を行う側に報告する現在の位置についての時系列データも含む。
【0132】
自律移動装置に対して、セキュリティ攻撃による制御の乗っ取りが発生した場合に、発覚を恐れて管制や運行管理に対してウソの位置情報を報告しながら、実際には、本来の経路を外れて飛行するような事態が発生する。
【0133】
一方、本実施形態によれば、実施形態２～５の効果に加え、そのようなケースでも異常を検知すること、つまりセキュリティ上の異常を検知することができる。これは、上述のようなデータを用いて学習させると、管制や運行管理に対して報告している情報と実際の動作の情報の食い違いや、通常起こりえない組み合わせの矛盾を検出できるためである。
【0134】
＜他の実施形態＞
［ａ］
各実施形態において、自律移動装置の機能、学習装置の機能、サーバ装置の機能などについて説明したが、各装置は、例示した構成例に限ったものではなく、各装置としてこれらの機能が実現できればよい。
［ａ］
各実施形態において、自律移動装置の機能、学習装置の機能、サーバ装置の機能などについて説明したが、各装置は、例示した構成例に限ったものではなく、各装置としてこれらの機能が実現できればよい。
【0135】
［ｂ］
各実施形態に係る各装置は、次のようなハードウェア構成を有していてもよい。図２８は、装置のハードウェア構成の一例を示す図である。なお、上記他の実施形態［ａ］についても同様である。
各実施形態に係る各装置は、次のようなハードウェア構成を有していてもよい。図２８は、装置のハードウェア構成の一例を示す図である。なお、上記他の実施形態［ａ］についても同様である。
【0136】
図２８に示す装置１００は、プロセッサ１０１、メモリ１０２、及びインタフェース１０３を有することができる。プロセッサ１０１は、例えば、マイクロプロセッサ、ＭＰＵ(Micro Processor Unit)、又はＣＰＵなどであってもよい。プロセッサ１０１は、複数のプロセッサを含んでもよい。メモリ１０２は、例えば、揮発性メモリ及び不揮発性メモリの組み合わせによって構成される。各実施形態で説明した各装置における機能は、プロセッサ１０１がメモリ１０２に記憶されたプログラムを読み込んで実行することにより実現される。この際、情報の入出力は、内部の他の部位や外部の他の装置との通信を行う通信インタフェース等のインタフェース１０３を介して行うことができる。例えば、装置１００が自律移動装置の場合、インタフェース１０３は、少なくとも各センサとのインタフェースを含むことができる。
【0137】
上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）を含む。さらに、この例は、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗを含む。さらに、この例は、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【0138】
［ｃ］
さらに、上述した各実施形態において、自律移動装置における処理の手順を例示したように、本開示は、自律移動装置における異常検知方法としての形態も採り得る。この異常検知方法は、次の検知ステップ及び制御ステップを備えることができる。上記検知ステップは、自律移動装置における現在の状態をその自律移動装置内のセンサ群で検知する。上記制御ステップは、その自律移動装置における異常発生状態を検知又は予測した結果を得る。上記制御ステップは、センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得する。上記制御ステップは、現センサデータを第１所定間隔毎に分割した現分割データと現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、上記結果を得る。学習済みモデルは、その自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データ（蓄積センサデータ）についての蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築される。蓄積グラフ群は、蓄積センサデータを第２所定間隔毎に分割した、蓄積分割データと蓄積センサデータとに基づき生成された複数のグラフである。なお、その他の例については、上述した各実施形態で説明した通りである。
さらに、上述した各実施形態において、自律移動装置における処理の手順を例示したように、本開示は、自律移動装置における異常検知方法としての形態も採り得る。この異常検知方法は、次の検知ステップ及び制御ステップを備えることができる。上記検知ステップは、自律移動装置における現在の状態をその自律移動装置内のセンサ群で検知する。上記制御ステップは、その自律移動装置における異常発生状態を検知又は予測した結果を得る。上記制御ステップは、センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得する。上記制御ステップは、現センサデータを第１所定間隔毎に分割した現分割データと現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、上記結果を得る。学習済みモデルは、その自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データ（蓄積センサデータ）についての蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築される。蓄積グラフ群は、蓄積センサデータを第２所定間隔毎に分割した、蓄積分割データと蓄積センサデータとに基づき生成された複数のグラフである。なお、その他の例については、上述した各実施形態で説明した通りである。
【0139】
また、自律移動装置に関するプログラムは、自律移動装置に搭載されたコンピュータ（制御コンピュータ）に上述した検知ステップ及び制御ステップを実行させるためのプログラムであると言える。学習装置に関するプログラムは、学習装置に搭載されたコンピュータ（制御コンピュータ）に上記学習済みモデルを生成させるためのプログラムであると言える。サーバ装置に関するプログラムは、サーバ装置に搭載されたコンピュータ（制御コンピュータ）に、データの送受等の処理を行わせるためのプログラムとすることができ、学習済みモデルを搭載する場合にはこのプログラムに検知プログラムを含むことができる。
【0140】
なお、本開示は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。また、本開示は、それぞれの実施形態を適宜組み合わせて実施されてもよい。
【0141】
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
＜付記＞
＜付記＞
【0142】
（付記１）
自律移動装置における現在の状態を検知するセンサ群と、
制御部と、
を備え、
前記制御部は、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記自律移動装置における異常発生状態を検知又は予測した結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである、
自律移動装置。
自律移動装置における現在の状態を検知するセンサ群と、
制御部と、
を備え、
前記制御部は、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記自律移動装置における異常発生状態を検知又は予測した結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである、
自律移動装置。
【0143】
（付記２）
Ｎを１以上の整数、ｉを１からＮまでの整数、Ｍを１以上の整数、ｊを１からＭまでの整数とし、
前記学習済みモデルに入力される前記現グラフ群は、検知開始時点から前記第１所定間隔がｉ回分経過するまでの合計Ｎ個の期間のそれぞれについて、対応するｉ個の前記現分割データを示すように生成された、Ｎ個のグラフを有し、
前記未学習モデルに入力される前記蓄積グラフ群は、検知開始時点から前記第２所定間隔がｊ回分経過するまでの合計Ｍ個の期間のそれぞれについて、対応するｊ個の前記現分割データを示すように生成された、Ｍ個のグラフを有する、
付記１に記載の自律移動装置。
Ｎを１以上の整数、ｉを１からＮまでの整数、Ｍを１以上の整数、ｊを１からＭまでの整数とし、
前記学習済みモデルに入力される前記現グラフ群は、検知開始時点から前記第１所定間隔がｉ回分経過するまでの合計Ｎ個の期間のそれぞれについて、対応するｉ個の前記現分割データを示すように生成された、Ｎ個のグラフを有し、
前記未学習モデルに入力される前記蓄積グラフ群は、検知開始時点から前記第２所定間隔がｊ回分経過するまでの合計Ｍ個の期間のそれぞれについて、対応するｊ個の前記現分割データを示すように生成された、Ｍ個のグラフを有する、
付記１に記載の自律移動装置。
【0144】
（付記３）
前記蓄積センサデータは、前記自律移動装置及び前記他の同種の自律移動装置の少なくとも１つにおける正常時の状態を、各装置内部のセンサ群で検知した時系列データである正常センサデータを含む、
付記１又は２に記載の自律移動装置。
前記蓄積センサデータは、前記自律移動装置及び前記他の同種の自律移動装置の少なくとも１つにおける正常時の状態を、各装置内部のセンサ群で検知した時系列データである正常センサデータを含む、
付記１又は２に記載の自律移動装置。
【0145】
（付記４）
前記蓄積センサデータは、前記自律移動装置及び前記他の同種の自律移動装置の少なくとも１つにおける異常時の状態を、各装置内部のセンサ群で検知した時系列データである異常センサデータを含む、
付記１～３のいずれか１項に記載の自律移動装置。
前記蓄積センサデータは、前記自律移動装置及び前記他の同種の自律移動装置の少なくとも１つにおける異常時の状態を、各装置内部のセンサ群で検知した時系列データである異常センサデータを含む、
付記１～３のいずれか１項に記載の自律移動装置。
【0146】
（付記５）
前記制御部は、
前記機械学習のアルゴリズム及び前記機械学習に用いた蓄積センサデータのうちの少なくとも一方が異なる複数の前記学習済みモデルの中から、使用する学習済みモデルを選択し、
選択した学習済みモデルである選択モデルを使用して、前記結果を得る、
付記１～４のいずれか１項に記載の自律移動装置。
前記制御部は、
前記機械学習のアルゴリズム及び前記機械学習に用いた蓄積センサデータのうちの少なくとも一方が異なる複数の前記学習済みモデルの中から、使用する学習済みモデルを選択し、
選択した学習済みモデルである選択モデルを使用して、前記結果を得る、
付記１～４のいずれか１項に記載の自律移動装置。
【0147】
（付記６）
前記制御部は、前記選択モデルとして最も事前に検知できる学習済みモデルを含むように選択する、
付記５に記載の自律移動装置。
前記制御部は、前記選択モデルとして最も事前に検知できる学習済みモデルを含むように選択する、
付記５に記載の自律移動装置。
【0148】
（付記７）
前記制御部は、前記結果として、正常時の状態、異常時の予兆がある状態、及び異常時の状態を含む、複数の状態のうち１つを得る、
付記１～６のいずれか１項に記載の自律移動装置。
前記制御部は、前記結果として、正常時の状態、異常時の予兆がある状態、及び異常時の状態を含む、複数の状態のうち１つを得る、
付記１～６のいずれか１項に記載の自律移動装置。
【0149】
（付記８）
前記制御部は、異常時の状態を示す前記結果として、複数の異常要因のうち少なくとも１つを得る、
付記４に記載の自律移動装置。
前記制御部は、異常時の状態を示す前記結果として、複数の異常要因のうち少なくとも１つを得る、
付記４に記載の自律移動装置。
【0150】
（付記９）
前記学習済みモデルを記憶する記憶部をさらに備え、
前記制御部は、前記現センサデータを取得し、取得した前記現センサデータから前記現グラフ群を生成する、
付記１～８のいずれか１項に記載の自律移動装置。
前記学習済みモデルを記憶する記憶部をさらに備え、
前記制御部は、前記現センサデータを取得し、取得した前記現センサデータから前記現グラフ群を生成する、
付記１～８のいずれか１項に記載の自律移動装置。
【0151】
（付記１０）
前記蓄積センサデータは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける動作状況についての時系列データと、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける運行管理を行う側に報告する現在の位置についての時系列データと、を含む、
付記１～９のいずれか１項に記載の自律移動装置。
前記蓄積センサデータは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける動作状況についての時系列データと、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける運行管理を行う側に報告する現在の位置についての時系列データと、を含む、
付記１～９のいずれか１項に記載の自律移動装置。
【0152】
（付記１１）
前記制御部は、前記学習済みモデルを生成する学習部を備え、
前記学習部は、
前記蓄積センサデータを取得し、
前記蓄積センサデータを前記第１所定間隔毎に分割して前記蓄積分割データを生成し、
前記蓄積分割データと前記蓄積センサデータとに基づき、前記蓄積グラフ群を生成し、
前記蓄積グラフ群を予め記憶された未学習モデルに入力して機械学習を行うことで、前記自律移動装置における異常発生状態を検知又は予測した結果を得るための前記学習済みモデルを生成する、
付記１～１０のいずれか１項に記載の自律移動装置。
前記制御部は、前記学習済みモデルを生成する学習部を備え、
前記学習部は、
前記蓄積センサデータを取得し、
前記蓄積センサデータを前記第１所定間隔毎に分割して前記蓄積分割データを生成し、
前記蓄積分割データと前記蓄積センサデータとに基づき、前記蓄積グラフ群を生成し、
前記蓄積グラフ群を予め記憶された未学習モデルに入力して機械学習を行うことで、前記自律移動装置における異常発生状態を検知又は予測した結果を得るための前記学習済みモデルを生成する、
付記１～１０のいずれか１項に記載の自律移動装置。
【0153】
（付記１２）
前記学習済みモデルを記憶する記憶部と、
通信部と、
をさらに備え、
前記制御部は、前記現センサデータを取得し、前記通信部を介し、取得した前記現センサデータ又は前記現分割データをサーバ装置に送信して前記サーバ装置から前記現グラフ群を受信する、
付記１～１０のいずれか１項に記載の自律移動装置。
前記学習済みモデルを記憶する記憶部と、
通信部と、
をさらに備え、
前記制御部は、前記現センサデータを取得し、前記通信部を介し、取得した前記現センサデータ又は前記現分割データをサーバ装置に送信して前記サーバ装置から前記現グラフ群を受信する、
付記１～１０のいずれか１項に記載の自律移動装置。
【0154】
（付記１３）
通信部をさらに備え、
前記制御部は、前記現センサデータを取得し、前記通信部を介して、取得した前記現センサデータ又は前記現分割データをサーバ装置に送信して前記サーバ装置から前記結果を受信する、
付記１～１０のいずれか１項に記載の自律移動装置。
通信部をさらに備え、
前記制御部は、前記現センサデータを取得し、前記通信部を介して、取得した前記現センサデータ又は前記現分割データをサーバ装置に送信して前記サーバ装置から前記結果を受信する、
付記１～１０のいずれか１項に記載の自律移動装置。
【0155】
（付記１４）
付記１３に記載の自律移動装置と通信するサーバ側通信部と、
前記学習済みモデルを記憶するモデル記憶部と、
前記サーバ側通信部を介して前記自律移動装置から前記現センサデータ又は前記現分割データを受信し、前記モデル記憶部に記憶された前記学習済みモデルを用いて前記結果を得、前記サーバ側通信部を介して前記自律移動装置に前記結果を送信するサーバ側制御部と、
を備えたサーバ装置。
付記１３に記載の自律移動装置と通信するサーバ側通信部と、
前記学習済みモデルを記憶するモデル記憶部と、
前記サーバ側通信部を介して前記自律移動装置から前記現センサデータ又は前記現分割データを受信し、前記モデル記憶部に記憶された前記学習済みモデルを用いて前記結果を得、前記サーバ側通信部を介して前記自律移動装置に前記結果を送信するサーバ側制御部と、
を備えたサーバ装置。
【0156】
（付記１５）
付記１３に記載の自律移動装置と、
サーバ装置と、
を備え、
前記サーバ装置は、
前記自律移動装置と通信するサーバ側通信部と、
前記学習済みモデルを記憶するモデル記憶部と、
前記サーバ側通信部を介して前記自律移動装置から前記現センサデータ又は前記現分割データを受信し、前記モデル記憶部に記憶された前記学習済みモデルを用いて前記結果を得、前記サーバ側通信部を介して前記自律移動装置に前記結果を送信するサーバ側制御部と、
を備えた、
自律移動システム。
付記１３に記載の自律移動装置と、
サーバ装置と、
を備え、
前記サーバ装置は、
前記自律移動装置と通信するサーバ側通信部と、
前記学習済みモデルを記憶するモデル記憶部と、
前記サーバ側通信部を介して前記自律移動装置から前記現センサデータ又は前記現分割データを受信し、前記モデル記憶部に記憶された前記学習済みモデルを用いて前記結果を得、前記サーバ側通信部を介して前記自律移動装置に前記結果を送信するサーバ側制御部と、
を備えた、
自律移動システム。
【0157】
（付記１６）
自律移動装置における現在の状態を検知するセンサ群を備えた自律移動装置と通信する学習装置側通信部と、
学習装置側記憶部と、
学習装置側制御部と、
を備え、
前記学習装置側制御部は、
前記学習装置側通信部を介して前記自律移動装置から、前記センサ群で検知された検知開始時点から検知終了時点までの時系列データである蓄積センサデータ又は前記蓄積センサデータを第１所定間隔毎に分割した蓄積分割データを受信して、前記学習装置側記憶部に記憶し、
前記蓄積分割データと前記蓄積センサデータとに基づき、複数のグラフである蓄積グラフ群を生成し、
前記蓄積グラフ群を前記学習装置側記憶部に予め記憶された未学習モデルに入力して機械学習を行うことで、前記自律移動装置における異常発生状態を検知又は予測した結果を得るための学習済みモデルを生成する、
学習装置。
自律移動装置における現在の状態を検知するセンサ群を備えた自律移動装置と通信する学習装置側通信部と、
学習装置側記憶部と、
学習装置側制御部と、
を備え、
前記学習装置側制御部は、
前記学習装置側通信部を介して前記自律移動装置から、前記センサ群で検知された検知開始時点から検知終了時点までの時系列データである蓄積センサデータ又は前記蓄積センサデータを第１所定間隔毎に分割した蓄積分割データを受信して、前記学習装置側記憶部に記憶し、
前記蓄積分割データと前記蓄積センサデータとに基づき、複数のグラフである蓄積グラフ群を生成し、
前記蓄積グラフ群を前記学習装置側記憶部に予め記憶された未学習モデルに入力して機械学習を行うことで、前記自律移動装置における異常発生状態を検知又は予測した結果を得るための学習済みモデルを生成する、
学習装置。
【0158】
（付記１７）
自律移動装置における現在の状態を前記自律移動装置内のセンサ群で検知する検知ステップと、
前記自律移動装置における異常発生状態を検知又は予測した結果を得る制御ステップと、
を備え、
前記制御ステップは、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである、
異常検知方法。
自律移動装置における現在の状態を前記自律移動装置内のセンサ群で検知する検知ステップと、
前記自律移動装置における異常発生状態を検知又は予測した結果を得る制御ステップと、
を備え、
前記制御ステップは、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである、
異常検知方法。
【0159】
（付記１８）
自律移動装置のコンピュータに、
前記自律移動装置における現在の状態を前記自律移動装置内のセンサ群で検知させる検知ステップと、
前記自律移動装置における異常発生状態を検知又は予測した結果を得る制御ステップと、
を実行させるためのプログラムであって、
前記制御ステップは、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである、
プログラム。
自律移動装置のコンピュータに、
前記自律移動装置における現在の状態を前記自律移動装置内のセンサ群で検知させる検知ステップと、
前記自律移動装置における異常発生状態を検知又は予測した結果を得る制御ステップと、
を実行させるためのプログラムであって、
前記制御ステップは、
前記センサ群で検知された検知開始時点から現時点までの時系列データである現センサデータを取得し、
前記現センサデータを第１所定間隔毎に分割した現分割データと前記現センサデータとに基づき生成された複数のグラフである現グラフ群を、学習済みモデルに入力し、前記結果を得、
前記学習済みモデルは、前記自律移動装置及び他の同種の自律移動装置の少なくとも１つにおける状態について装置内部のセンサ群で検知した時系列データである蓄積センサデータについて、前記蓄積センサデータを第２所定間隔毎に分割した蓄積分割データと前記蓄積センサデータとに基づき生成された複数のグラフである蓄積グラフ群を、未学習モデルに入力して機械学習を行うことで構築された学習モデルである、
プログラム。
【符号の説明】
【0160】
１ 自律移動装置
１ａ 自律移動装置の制御部
１ｂ センサ群
２ 学習装置
２ａ 制御部
２ｂ 通信部
２ｃ 記憶部
２ｄ 未学習モデル
２ｅ 蓄積グラフ群
１０、２０、３０、４０ 自律移動装置（ドローン）
１１、３８ 正常センサデータ
１２、３９ 正常センサデータグラフ化部
１３、２３、３３ モデル学習部
１４、２４、３４、４４ モデルＤＢ
１５、２５、３５ 現センサデータ
１６、２６、３６ 現センサデータグラフ化部
１７、２７、３７、４７ 異常識別部
２１、３１ 異常センサデータ
２２、３２ 異常センサデータグラフ化部
４１ 予兆モデルＤＢ、
４２ 予兆モデル選択部、
１００ 装置
１０１ プロセッサ
１０２ メモリ
１０３ インタフェース
１ａ 自律移動装置の制御部
１ｂ センサ群
２ 学習装置
２ａ 制御部
２ｂ 通信部
２ｃ 記憶部
２ｄ 未学習モデル
２ｅ 蓄積グラフ群
１０、２０、３０、４０ 自律移動装置（ドローン）
１１、３８ 正常センサデータ
１２、３９ 正常センサデータグラフ化部
１３、２３、３３ モデル学習部
１４、２４、３４、４４ モデルＤＢ
１５、２５、３５ 現センサデータ
１６、２６、３６ 現センサデータグラフ化部
１７、２７、３７、４７ 異常識別部
２１、３１ 異常センサデータ
２２、３２ 異常センサデータグラフ化部
４１ 予兆モデルＤＢ、
４２ 予兆モデル選択部、
１００ 装置
１０１ プロセッサ
１０２ メモリ
１０３ インタフェース
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】