(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-11-11
(45)【発行日】2022-11-21
(54)【発明の名称】指標値特定装置および指標値特定方法
(51)【国際特許分類】
E02F 9/20 20060101AFI20221114BHJP
E02F 9/26 20060101ALI20221114BHJP
【ＦＩ】
E02F9/20 N
E02F9/26 A
【請求項の数】
9
(21)【出願番号】P 2018144089
(22)【出願日】2018-07-31
(65)【公開番号】P2020020145
(43)【公開日】2020-02-06
【審査請求日】2021-06-02
(73)【特許権者】
【識別番号】000001236
【氏名又は名称】株式会社小松製作所
(74)【代理人】
【識別番号】110001634
【氏名又は名称】弁理士法人志賀国際特許事務所
(72)【発明者】
【氏名】▲濱▼田 真太郎
(72)【発明者】
【氏名】杉村 みなみ
【審査官】石川 信也
(56)【参考文献】
【文献】特開２０１５－１９０１１４（ＪＰ，Ａ）
【文献】特開２０００－２０４６０６（ＪＰ，Ａ）
【文献】特開２０１７－２２２００４（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｅ０２Ｆ ９／２０
Ｅ０２Ｆ ９／２６
(57)【特許請求の範囲】
【請求項1】
複数の時刻における作業機械の状態を示す状態データを取得する状態データ取得部と、前記取得した状態データに基づいて前記作業機械の複数の作業の区分それぞれの尤度の時系列を特定する作業特定部と、
特定された尤度の時系列を平滑化する平滑化部と、
前記平滑化された尤度の時系列に基づいて、前記作業の区分のうち、所定の区分に係る尤度が支配的な期間の始点および終点を特定する期間特定部と、
前記始点から前記終点までの前記作業機械の状態の指標値を求める指標値特定部と
を備える指標値特定装置。
【請求項2】
前記作業特定部は、目的別に区分される一連の動作または作業を示す要素作業の区分を特定し、前記期間特定部は、前記要素作業の区分に係る尤度が支配的な期間の前記始点および前記終点を特定する
請求項１に記載の指標値特定装置。
【請求項3】
前記作業特定部は、前記作業機械の一の作業目的を遂行する作業を示す単位作業の区分をさらに特定し、前記期間特定部は、所定の単位作業を構成する所定の要素作業の区分に係る尤度が支配的な期間の前記始点および前記終点を特定し、
前記指標値特定部は、前記期間の前記始点から前記終点までの前記指標値を求める
請求項２に記載の指標値特定装置。
【請求項4】
前記期間特定部は、前記要素作業の区分に係る尤度が支配的な複数の期間の前記始点および前記終点を特定し、前記指標値特定部は、前記複数の期間それぞれの前記始点から前記終点までの前記指標値に基づいて、前記指標値の統計量を求める
請求項３に記載の指標値特定装置。
【請求項5】
前記指標値特定部は、前記期間に係る異なる種類の前記指標値を求める請求項３または請求項４に記載の指標値特定装置。
【請求項6】
前記期間特定部は、前記作業機械の積荷旋回または空荷旋回に係る尤度が支配的な期間の前記始点および前記終点を特定し、前記指標値特定部は、前記積荷旋回または前記空荷旋回における前記作業機械の旋回角を求める
請求項２から請求項５の何れか１項に記載の指標値特定装置。
【請求項7】
前記指標値特定部が特定した前記指標値を出力する出力部を備え、前記期間特定部は、所定の要素作業の区分に係る尤度が支配的な複数の期間の前記始点および前記終点を特定し、
前記指標値特定部は、前記複数の期間それぞれの前記始点から前記終点までの前記指標値を求め、
前記出力部は、前記複数の期間それぞれに係る前記指標値の推移を示すグラフを出力する
請求項１から請求項６の何れか１項に記載の指標値特定装置。
【請求項8】
前記出力部は、前記複数の期間それぞれに係る異なる種類の前記指標値の推移を示すグラフを出力する請求項７に記載の指標値特定装置。
【請求項9】
複数の時刻における作業機械の状態を示す状態データを取得するステップと、前記取得した状態データに基づいて前記作業機械の複数の作業の区分それぞれの尤度の時系列を特定するステップと、
特定された尤度の時系列を平滑化するステップと、
前記平滑化された尤度の時系列に基づいて、前記作業の区分のうち、所定の区分に係る尤度が支配的な期間の始点および終点を特定するステップと、
前記期間における前記作業機械の状態の指標値を求めるステップと
を備える指標値特定方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、指標値特定装置および指標値特定方法に係る。
【背景技術】
【0002】
作業機械の動作に関する動作情報を収集し、作業機械の作業を推定する技術が知られている。特許文献１には、作業機械の稼働状態に依存する複数の運転変数の時間変化に基づいて、作業機械の作業内容を推定する技術が開示されている。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２０１４－２１４５６６号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
ところで、オペレータの技量判定および評価、ならびに作業の解析を行うために、様々な視点に係る評価材料が求められている。
本発明の目的は、ある状況における作業機械の状態を表す指標値を求めることができる指標値特定装置および指標値特定方法を提供することにある。
本発明の目的は、ある状況における作業機械の状態を表す指標値を求めることができる指標値特定装置および指標値特定方法を提供することにある。
【課題を解決するための手段】
【0005】
本発明の第１の態様によれば、指標値特定装置は、複数の時刻における作業機械の状態を示す状態データを取得する状態データ取得部と、前記取得した状態データに基づいて前記作業機械の複数の作業の区分それぞれの尤度の時系列を特定する作業特定部と、特定された尤度の時系列を平滑化する平滑化部と、前記平滑化された尤度の時系列に基づいて、前記作業の区分のうち、所定の区分に係る尤度が支配的な期間の始点および終点を特定する期間特定部と、前記始点から前記終点までの前記作業機械の状態の指標値を求める指標値特定部とを備える。
【発明の効果】
【0006】
上記態様のうち少なくとも１つの態様によれば、指標値特定装置は、オペレータの評価または作業の解析に用いることができる評価材料を生成することができる。
【図面の簡単な説明】
【0007】
【図1】一実施形態に係る作業分析システムの構成を示す概略図である。
【図2】第１の実施形態に係る油圧ショベルの構成を示す斜視図である。
【図3】第１の実施形態に係るラベリング装置の構成を示す概略ブロック図である。
【図4】第１の実施形態に係る作業分析装置の構成を示す概略ブロック図である。
【図5】掘削積込ごとの平均旋回角および平均燃費を表すグラフの例を示す図である。
【図6】掘削積込に係る積込回ごとの旋回角および燃費を表すグラフの例を示す図である。
【図7】第１の実施形態に係る作業分析装置の学習処理を示すフローチャートである。
【図8】第１の実施形態に係る作業分析装置による作業分析方法を示すフローチャートである。
【図9】単位作業に係る尤度の時系列および要素作業に係る尤度の時系列を表すヒートマップの例を示す図である。
【発明を実施するための形態】
【0008】
《全体構成》
図１は、一実施形態に係る作業分析システムの構成を示す概略図である。
作業分析システム１は、作業機械１００とラベリング装置２００と作業分析装置３００を備える。作業分析装置３００は、指標値特定装置の一例である。
図１は、一実施形態に係る作業分析システムの構成を示す概略図である。
作業分析システム１は、作業機械１００とラベリング装置２００と作業分析装置３００を備える。作業分析装置３００は、指標値特定装置の一例である。
【0009】
作業機械１００は、作業分析装置３００による作業分析の対象である。作業機械１００の例としては、油圧ショベルやホイルローダなどが挙げられる。なお、第１の実施形態においては、作業機械１００の例として油圧ショベルを挙げて説明する。作業機械１００には、複数のセンサおよび撮像装置が設けられ、各センサの計測値に係る情報および動画像が作業分析装置３００に送信される。
ラベリング装置２００は、作業分析装置３００に記憶された動画像に、そのときの作業機械１００の作業の区分を示すラベルを付したラベルデータを生成する。
ラベリング装置２００は、作業分析装置３００に記憶された動画像に、そのときの作業機械１００の作業の区分を示すラベルを付したラベルデータを生成する。
【0010】
作業分析装置３００は、作業機械１００から受信する情報とラベリング装置２００から受信するラベルデータとに基づいて学習されたモデルに基づいて、作業機械１００の作業の区分に係るパラメータを表示する画面を出力する。利用者は、作業分析装置３００が出力するパラメータを認識することで、オペレータの評価または作業の解析を行うことができる。
【0011】
《油圧ショベル》
図２は、第１の実施形態に係る油圧ショベルの構成を示す斜視図である。
作業機械１００は、走行体１１０と、走行体１１０に支持される旋回体１２０と、油圧により作動し旋回体１２０に支持される作業機１３０とを備える。旋回体１２０は、旋回中心を中心として走行体１１０に旋回自在に支持される。
図２は、第１の実施形態に係る油圧ショベルの構成を示す斜視図である。
作業機械１００は、走行体１１０と、走行体１１０に支持される旋回体１２０と、油圧により作動し旋回体１２０に支持される作業機１３０とを備える。旋回体１２０は、旋回中心を中心として走行体１１０に旋回自在に支持される。
【0012】
走行体１１０は、左右に設けられた無限軌道１１１と、各無限軌道１１１を駆動するための２つの走行モータ１１２を備える。
【0013】
作業機１３０は、ブーム１３１と、アーム１３２と、バケット１３３と、ブームシリンダ１３４と、アームシリンダ１３５と、バケットシリンダ１３６とを備える。
【0014】
ブーム１３１の基端部は、旋回体１２０にブームピンＰ１を介して取り付けられる。
アーム１３２は、ブーム１３１とバケット１３３とを連結する。アーム１３２の基端部は、ブーム１３１の先端部にアームピンＰ２を介して取り付けられる。
バケット１３３は、土砂などを掘削するための刃先と掘削した土砂を収容するための収容部とを備える。バケット１３３の基端部は、アーム１３２の先端部にバケットピンＰ３を介して取り付けられる。なお、バケット１３３は、例えば法面バケットのように整地を目的としたバケットでもよいし、収容部を備えないバケットでもよい。また、作業機１３０は、バケット１３３に代えて、打突によって粉砕力を与えるためのブレーカや、対象物を把持するグラップルなどの他のアタッチメントを備えてもよい。
アーム１３２は、ブーム１３１とバケット１３３とを連結する。アーム１３２の基端部は、ブーム１３１の先端部にアームピンＰ２を介して取り付けられる。
バケット１３３は、土砂などを掘削するための刃先と掘削した土砂を収容するための収容部とを備える。バケット１３３の基端部は、アーム１３２の先端部にバケットピンＰ３を介して取り付けられる。なお、バケット１３３は、例えば法面バケットのように整地を目的としたバケットでもよいし、収容部を備えないバケットでもよい。また、作業機１３０は、バケット１３３に代えて、打突によって粉砕力を与えるためのブレーカや、対象物を把持するグラップルなどの他のアタッチメントを備えてもよい。
【0015】
ブームシリンダ１３４は、ブーム１３１を作動させるための油圧シリンダである。ブームシリンダ１３４の基端部は、旋回体１２０に取り付けられる。ブームシリンダ１３４の先端部は、ブーム１３１に取り付けられる。
アームシリンダ１３５は、アーム１３２を駆動するための油圧シリンダである。アームシリンダ１３５の基端部は、ブーム１３１に取り付けられる。アームシリンダ１３５の先端部は、アーム１３２に取り付けられる。
バケットシリンダ１３６は、バケット１３３を駆動するための油圧シリンダである。バケットシリンダ１３６の基端部は、アーム１３２に取り付けられる。バケットシリンダ１３６の先端部は、バケット１３３に取り付けられる。
アームシリンダ１３５は、アーム１３２を駆動するための油圧シリンダである。アームシリンダ１３５の基端部は、ブーム１３１に取り付けられる。アームシリンダ１３５の先端部は、アーム１３２に取り付けられる。
バケットシリンダ１３６は、バケット１３３を駆動するための油圧シリンダである。バケットシリンダ１３６の基端部は、アーム１３２に取り付けられる。バケットシリンダ１３６の先端部は、バケット１３３に取り付けられる。
【0016】
旋回体１２０には、オペレータが搭乗する運転室１２１が備えられる。運転室１２１は、旋回体１２０の前方かつ作業機１３０の左側に備えられる。
旋回体１２０は、エンジン１２２、油圧ポンプ１２３、コントロールバルブ１２４、旋回モータ１２５、操作装置１２６、撮像装置１２７、データ集約装置１２８を備える。なお、他の実施形態においては、作業機械１００がネットワークを介した遠隔操作によって動作してもよいし、自動運転によって動作してもよい。この場合、作業機械１００は、運転室１２１および操作装置１２６を備えなくてもよい。
旋回体１２０は、エンジン１２２、油圧ポンプ１２３、コントロールバルブ１２４、旋回モータ１２５、操作装置１２６、撮像装置１２７、データ集約装置１２８を備える。なお、他の実施形態においては、作業機械１００がネットワークを介した遠隔操作によって動作してもよいし、自動運転によって動作してもよい。この場合、作業機械１００は、運転室１２１および操作装置１２６を備えなくてもよい。
【0017】
エンジン１２２は、油圧ポンプ１２３を駆動する原動機である。
油圧ポンプ１２３は、エンジン１２２により駆動され、コントロールバルブ１２４を介して各アクチュエータ（ブームシリンダ１３４、アームシリンダ１３５、バケットシリンダ１３６、走行モータ１１２、および旋回モータ１２５）に作動油を供給する。
コントロールバルブ１２４は、油圧ポンプ１２３から供給される作動油の流量を制御する。
旋回モータ１２５は、コントロールバルブ１２４を介して油圧ポンプ１２３から供給される作動油によって駆動し、旋回体１２０を旋回させる。
油圧ポンプ１２３は、エンジン１２２により駆動され、コントロールバルブ１２４を介して各アクチュエータ（ブームシリンダ１３４、アームシリンダ１３５、バケットシリンダ１３６、走行モータ１１２、および旋回モータ１２５）に作動油を供給する。
コントロールバルブ１２４は、油圧ポンプ１２３から供給される作動油の流量を制御する。
旋回モータ１２５は、コントロールバルブ１２４を介して油圧ポンプ１２３から供給される作動油によって駆動し、旋回体１２０を旋回させる。
【0018】
操作装置１２６は、運転室１２１の内部に設けられる２つのレバーである。操作装置１２６は、ブーム１３１の上げ操作および下げ操作、アーム１３２の押し操作および引き操作、バケット１３３の掘削操作およびダンプ操作、旋回体１２０の右旋回操作および左旋回操作、ならびに走行体１１０の前進操作および後退操作の指令を受け付ける。具体的には、右側操作レバーの前方向の操作は、ブーム１３１の下げ操作の指令に対応する。右側操作レバーの後方向の操作は、ブーム１３１の上げ操作の指令に対応する。右側操作レバーの右方向の操作は、バケット１３３のダンプ操作の指令に対応する。右側操作レバーの左方向の操作は、バケット１３３の掘削操作の指令に対応する。左側操作レバーの前方向の操作は、アーム１３２の引き操作の指令に対応する。左側操作レバーの後方向の操作は、アーム１３２の押し操作の指令に対応する。左側操作レバーの右方向の操作は、旋回体１２０の右旋回操作の指令に対応する。左側操作レバーの左方向の操作は、旋回体１２０の左旋回操作の指令に対応する。
操作装置１２６の傾きに応じて、コントロールバルブ１２４の各アクチュエータへつながる流路の開度が制御される。操作装置１２６は、例えば傾きに応じてパイロット作動油の流量を変化させるバルブを有し、パイロット作動油がコントロールバルブ１２４のスプールを作動させることで、コントロールバルブ１２４の開度を制御する。
操作装置１２６の傾きに応じて、コントロールバルブ１２４の各アクチュエータへつながる流路の開度が制御される。操作装置１２６は、例えば傾きに応じてパイロット作動油の流量を変化させるバルブを有し、パイロット作動油がコントロールバルブ１２４のスプールを作動させることで、コントロールバルブ１２４の開度を制御する。
【0019】
撮像装置１２７は、運転室１２１の上部に設けられる。撮像装置１２７は、運転室１２１の前方の画像であって作業機１３０が写る動画像を撮像する。撮像装置１２７が撮像した動画像は、タイムスタンプと共にデータ集約装置１２８に記憶される。
【0020】
データ集約装置１２８は、作業機械１００が備える複数のセンサから検出値を収集し、タイムスタンプに関連付けて記憶する。またデータ集約装置１２８は、複数のセンサから収集した検出値の時系列、および撮像装置１２７が撮像した動画像を作業分析装置３００に送信する。センサの検出値および動画像は、作業機械１００の状態を示す状態データの一例である。データ集約装置１２８は、図示しないプロセッサ、メインメモリ、ストレージ、インタフェースを備えるコンピュータである。データ集約装置１２８のストレージは、データ集約プログラムを記憶する。データ集約装置１２８のプロセッサは、データ集約プログラムをストレージから読み出してメインメモリに展開し、データ集約プログラムに従った検出値および動画像の収集処理、ならびに送信処理を実行する。なお、データ集約装置１２８は、作業機械１００の内部に設けられてもよいし外部に設けられてもよい。
【0021】
作業機械１００は、複数のセンサを備える。各センサは、計測値をデータ集約装置１２８に出力する。具体的には、作業機械１００は、回転数センサ１４１、トルクセンサ１４２、燃料センサ１４３、パイロット圧センサ１４４、ブームシリンダヘッド圧センサ１４５、ブームシリンダボトム圧センサ１４６、ブームストロークセンサ１４７、アームストロークセンサ１４８、バケットストロークセンサ１４９を備える。
【0022】
回転数センサ１４１は、エンジン１２２に設けられ、エンジン１２２の回転数を計測する。
トルクセンサ１４２は、エンジン１２２に設けられ、エンジン１２２のトルクを計測する。
燃料センサ１４３は、エンジン１２２に設けられ、エンジンの消費燃料量（瞬時燃費）を計測する。
トルクセンサ１４２は、エンジン１２２に設けられ、エンジン１２２のトルクを計測する。
燃料センサ１４３は、エンジン１２２に設けられ、エンジンの消費燃料量（瞬時燃費）を計測する。
【0023】
パイロット圧センサ１４４は、コントロールバルブ１２４に設けられ、操作装置１２６からの各パイロット作動油の圧力（ＰＰＣ圧）を計測する。具体的には、パイロット圧センサ１４４は、ブーム１３１の上げ操作に係るＰＰＣ圧（ブーム上げＰＰＣ圧）、ブーム１３１の下げ操作に係るＰＰＣ圧（ブーム下げＰＰＣ圧）、アーム１３２の押し操作に係るＰＰＣ圧（アーム押しＰＰＣ圧）、アーム１３２の引き操作に係るＰＰＣ圧（アーム引きＰＰＣ圧）、バケット１３３の掘削操作に係るＰＰＣ圧（バケット掘削ＰＰＣ圧）、バケット１３３のダンプ操作に係るＰＰＣ圧（バケットダンプＰＰＣ圧力）、旋回体１２０の右旋回操作に係るＰＰＣ圧（右旋回ＰＰＣ圧）、旋回体１２０の左旋回操作に係るＰＰＣ圧（左旋回ＰＰＣ圧）、左側の無限軌道１１１の前進操作に係るＰＰＣ圧（左前進ＰＰＣ圧）、左側の無限軌道１１１の後退操作に係るＰＰＣ圧（左後退ＰＰＣ圧）、右側の無限軌道１１１の前進操作に係るＰＰＣ圧（右前進ＰＰＣ圧）、および右側の無限軌道１１１の後退操作に係るＰＰＣ圧（右後退ＰＰＣ圧）を計測する。なお、他の実施形態においては、パイロット圧センサ１４４に代えて、操作装置１２６が出力する操作信号を検出する検出器を備えてもよい。
【0024】
ブームシリンダヘッド圧センサ１４５は、ブームシリンダ１３４のヘッド側の油室の圧力を計測する。
ブームシリンダボトム圧センサ１４６は、ブームシリンダ１３４のボトム側の油室の圧力を計測する。
ブームシリンダボトム圧センサ１４６は、ブームシリンダ１３４のボトム側の油室の圧力を計測する。
【0025】
ブームストロークセンサ１４７は、ブームシリンダ１３４のストローク量を計測する。
アームストロークセンサ１４８は、アームシリンダ１３５のストローク量を計測する。
バケットストロークセンサ１４９は、バケットシリンダ１３６のストローク量を計測する。なお、他の実施形態においては、各ストロークセンサに代えて、作業機１３０の角度を直接測る角度計を備えてもよいし、ブーム１３１、アーム１３２、およびバケット１３３のそれぞれに傾斜計またはＩＭＵを備えてもよい。また他の実施形態においては、撮像装置１２７が撮像した作業機１３０が写る画像から作業機１３０の角度を算出してもよい。
アームストロークセンサ１４８は、アームシリンダ１３５のストローク量を計測する。
バケットストロークセンサ１４９は、バケットシリンダ１３６のストローク量を計測する。なお、他の実施形態においては、各ストロークセンサに代えて、作業機１３０の角度を直接測る角度計を備えてもよいし、ブーム１３１、アーム１３２、およびバケット１３３のそれぞれに傾斜計またはＩＭＵを備えてもよい。また他の実施形態においては、撮像装置１２７が撮像した作業機１３０が写る画像から作業機１３０の角度を算出してもよい。
【0026】
データ集約装置１２８は、各センサの計測値に基づいて、作業機械１００の他の状態データを特定してもよい。例えば、データ集約装置１２８は、ブームシリンダボトム圧センサ１４６の計測値に基づいて、作業機１３０の実加重を算出してもよい。また例えばデータ集約装置１２８は、ブームストロークセンサ１４７、アームストロークセンサ１４８およびバケットストロークセンサ１４９に基づいて、作業機１３０の揚程を算出してもよい。
【0027】
《ラベリング装置の構成》
図３は、第１の実施形態に係るラベリング装置の構成を示す概略ブロック図である。
ラベリング装置２００は、プロセッサ２１、メインメモリ２２、ストレージ２３、インタフェース２４を備えるコンピュータである。ラベリング装置２００の例としては、ＰＣ、スマートフォン、およびタブレット端末などが挙げられる。ラベリング装置２００は、どこに設置されてもよい。つまり、ラベリング装置２００は、作業機械１００に搭載されてもよいし、作業分析装置３００に搭載されてもよいし、作業機械１００および作業分析装置３００と別個に設けられてもよい。ストレージ２３は、ラベリングプログラムを記憶する。プロセッサ２１は、ラベリングプログラムをストレージ２３から読み出してメインメモリ３３に展開し、ラベリングプログラムに従った処理を実行する。
図３は、第１の実施形態に係るラベリング装置の構成を示す概略ブロック図である。
ラベリング装置２００は、プロセッサ２１、メインメモリ２２、ストレージ２３、インタフェース２４を備えるコンピュータである。ラベリング装置２００の例としては、ＰＣ、スマートフォン、およびタブレット端末などが挙げられる。ラベリング装置２００は、どこに設置されてもよい。つまり、ラベリング装置２００は、作業機械１００に搭載されてもよいし、作業分析装置３００に搭載されてもよいし、作業機械１００および作業分析装置３００と別個に設けられてもよい。ストレージ２３は、ラベリングプログラムを記憶する。プロセッサ２１は、ラベリングプログラムをストレージ２３から読み出してメインメモリ３３に展開し、ラベリングプログラムに従った処理を実行する。
【0028】
ストレージ２３の例としては、半導体メモリ、ディスクメディアおよびテープメディア等が挙げられる。ストレージ２３は、ラベリング装置２００の共通通信線に直接接続された内部メディアであってもよいし、インタフェース２４を介してラベリング装置２００に接続される外部メディアであってもよい。ストレージ２３は、一時的でない有形の記憶媒体である。
【0029】
プロセッサ２１は、ラベリングプログラムの実行により、動画像取得部２１１、動画像表示部２１２、ラベル入力部２１３、ラベルデータ生成部２１４、ラベルデータ送信部２１５を備える。
ラベリングプログラムは、ラベリング装置２００に発揮させる機能の一部を実現するためのものであってもよい。例えば、ラベリングプログラムは、ストレージ２３に既に記憶されている他のプログラムとの組み合わせ、または他の装置に実装された他のプログラムとの組み合わせによって機能を発揮させるものであってもよい。なお、他の実施形態においては、ラベリング装置２００は、上記構成に加えて、または上記構成に代えてＰＬＤ（Programmable Logic Device）などのカスタムＬＳＩ（Large Scale Integrated Circuit）を備えてもよい。ＰＬＤの例としては、ＰＡＬ(Programmable Array Logic)、ＧＡＬ(Generic Array Logic)、ＣＰＬＤ(Complex Programmable Logic Device)、ＦＰＧＡ（Field Programmable Gate Array）が挙げられる。この場合、プロセッサによって実現される機能の一部または全部が当該集積回路によって実現されてよい。
ラベリングプログラムは、ラベリング装置２００に発揮させる機能の一部を実現するためのものであってもよい。例えば、ラベリングプログラムは、ストレージ２３に既に記憶されている他のプログラムとの組み合わせ、または他の装置に実装された他のプログラムとの組み合わせによって機能を発揮させるものであってもよい。なお、他の実施形態においては、ラベリング装置２００は、上記構成に加えて、または上記構成に代えてＰＬＤ（Programmable Logic Device）などのカスタムＬＳＩ（Large Scale Integrated Circuit）を備えてもよい。ＰＬＤの例としては、ＰＡＬ(Programmable Array Logic)、ＧＡＬ(Generic Array Logic)、ＣＰＬＤ(Complex Programmable Logic Device)、ＦＰＧＡ（Field Programmable Gate Array）が挙げられる。この場合、プロセッサによって実現される機能の一部または全部が当該集積回路によって実現されてよい。
【0030】
動画像取得部２１１は、作業分析装置３００から動画像を受信する。動画像の各フレーム画像には、撮像時刻を示すタイムスタンプが関連付けられている。
動画像表示部２１２は、動画像取得部２１１が取得した動画像をディスプレイに表示させる。
ラベル入力部２１３は、動画像の再生中に、利用者から、再生タイミングにおいて作業機械１００が実行している作業の区分を示すラベル値の入力を受け付ける。
ラベルデータ生成部２１４は、ラベル入力部２１３に入力されたラベル値を、入力された再生タイミングを示すタイムスタンプに関連付けたラベルデータを生成する。ラベルデータは、例えば、作業の区分を行とし、時刻を列とする行列であって、その時刻にその区分に係る作業がなされたか否かを表す値を要素に持つ行列であってよい。つまり、ラベルデータは、ｉ列ｊ行目の要素の値ｗｉｊを、時刻ｔｉに区分ａｊに係る作業がなされているときに１とし、時刻ｔｉに区分ａｊに係る作業がなされていないときに０とする行列であってよい。
ラベルデータ送信部２１５は、ラベルデータを作業分析装置３００に送信する。
動画像表示部２１２は、動画像取得部２１１が取得した動画像をディスプレイに表示させる。
ラベル入力部２１３は、動画像の再生中に、利用者から、再生タイミングにおいて作業機械１００が実行している作業の区分を示すラベル値の入力を受け付ける。
ラベルデータ生成部２１４は、ラベル入力部２１３に入力されたラベル値を、入力された再生タイミングを示すタイムスタンプに関連付けたラベルデータを生成する。ラベルデータは、例えば、作業の区分を行とし、時刻を列とする行列であって、その時刻にその区分に係る作業がなされたか否かを表す値を要素に持つ行列であってよい。つまり、ラベルデータは、ｉ列ｊ行目の要素の値ｗｉｊを、時刻ｔｉに区分ａｊに係る作業がなされているときに１とし、時刻ｔｉに区分ａｊに係る作業がなされていないときに０とする行列であってよい。
ラベルデータ送信部２１５は、ラベルデータを作業分析装置３００に送信する。
【0031】
《作業の区分の例》
ラベル入力部２１３に入力される作業の区分の例について説明する。
ラベル入力部２１３は、利用者から、単位作業に係るラベル値と要素作業に係るラベル値の入力を受け付ける。単位作業とは、一の作業目的を遂行する作業である。要素作業とは、単位作業を構成する要素であって目的別に区分される一連の動作または作業を示す作業である。
ラベル入力部２１３に入力される作業の区分の例について説明する。
ラベル入力部２１３は、利用者から、単位作業に係るラベル値と要素作業に係るラベル値の入力を受け付ける。単位作業とは、一の作業目的を遂行する作業である。要素作業とは、単位作業を構成する要素であって目的別に区分される一連の動作または作業を示す作業である。
【0032】
要素作業の区分の例としては、「掘削」、「積荷旋回」、「排土」、「空荷旋回」、「排土待ち」、「荷台抑え」、「転圧」、「押しならし」、「ホウキ」が挙げられる。
掘削は、バケット１３３によって土砂または岩石を掘り、削り取る作業である。
積荷旋回は、削り取った土砂または岩石をバケット１３３に抱えたまま、旋回体１２０を旋回させる作業である。
排土は、削り取った土砂または岩石を、バケット１３３から運搬車両または所定の場所に下ろす作業である。
空荷旋回は、バケット１３３に土砂および岩石が無い状態で、旋回体１２０を旋回させる作業である。
排土待ちは、削り取った土砂または岩石をバケット１３３に抱えたまま、積み込むための運搬車両を待機している作業である。
荷台押えは、運搬車両の荷台に積み込んだ土砂を上からバケット１３３で押えて平らにする作業である。
転圧は、乱れた地盤に対してバケット１３３で土砂を押し込み、地盤を成形し、また強化する作業である。
押しならしは、バケット１３３の底面で土砂を払い均す作業である。
ホウキは、バケット１３３の側面で土砂を払い均す作業である。なお、ホウキは、作業機１３０に負荷がかかる作業であるが、後述する作業特定方法によって、作業機に負荷がかかる非推奨作業を特定することができる。
掘削は、バケット１３３によって土砂または岩石を掘り、削り取る作業である。
積荷旋回は、削り取った土砂または岩石をバケット１３３に抱えたまま、旋回体１２０を旋回させる作業である。
排土は、削り取った土砂または岩石を、バケット１３３から運搬車両または所定の場所に下ろす作業である。
空荷旋回は、バケット１３３に土砂および岩石が無い状態で、旋回体１２０を旋回させる作業である。
排土待ちは、削り取った土砂または岩石をバケット１３３に抱えたまま、積み込むための運搬車両を待機している作業である。
荷台押えは、運搬車両の荷台に積み込んだ土砂を上からバケット１３３で押えて平らにする作業である。
転圧は、乱れた地盤に対してバケット１３３で土砂を押し込み、地盤を成形し、また強化する作業である。
押しならしは、バケット１３３の底面で土砂を払い均す作業である。
ホウキは、バケット１３３の側面で土砂を払い均す作業である。なお、ホウキは、作業機１３０に負荷がかかる作業であるが、後述する作業特定方法によって、作業機に負荷がかかる非推奨作業を特定することができる。
【0033】
単位作業の区分の例としては、「掘削積込」、「溝掘削」、「埋戻し」、「すき取り」、「法面（上から）」、「法面（下から）」、「積荷集め」、「走行」、「停車」が挙げられる。
掘削積込は、土砂または岩石を掘り、削り取り、削り取った土砂または岩石を運搬車両の荷台に積み込む作業である。掘削積込は、掘削、積荷旋回、排土、空荷旋回、排土待ちおよび荷台押えで構成される単位作業である。
溝掘削は、地盤を溝状に細長く掘り、削り取る作業である。溝掘削は、掘削、積荷旋回、排土、および空荷旋回で構成され、押しならしを含み得る単位作業である。
埋戻しは、地盤に既に空いている溝または穴に土砂を入れて平らに埋め戻す作業である。埋戻しは、掘削、積荷旋回、排土、転圧、および空荷旋回で構成され、押しならしおよびホウキを含み得る単位作業である。
すき取りは、地面の余分な起伏を所定の高さにするため平らに削り取る作業である。すき取りは、掘削および排土、または掘削、積荷旋回、排土、および空荷旋回で構成され、押しならしおよびホウキを含み得る単位作業である。
法面（上から）は、対象箇所の上方に位置する作業機械１００によって斜面を作る作業である。法面（上から）は、転圧、掘削、積荷旋回、排土、空荷旋回で構成され、押しならしを含み得る単位作業である。
法面（下から）は、対象箇所の下方に位置する作業機械１００によって斜面を作る作業である。法面（下から）は、転圧、掘削、積荷旋回、排土、空荷旋回で構成され、押しならしを含み得る単位作業である。
積荷集めは、掘削等によって出た土砂を、運搬車両に積む前に集めておく作業である。積荷集めは、掘削、積荷旋回、排土、空荷旋回で構成され、押しならしを含み得る単位作業である。
走行は、作業機械１００を移動させる作業である。単位作業としての走行は、要素作業としての走行から構成される単位作業である。
停車は、バケット１３３に土砂および岩石が無く、かつ所定時間以上停止している状態である。単位作業としての停車は、要素作業としての停車から構成される単位作業である。
掘削積込は、土砂または岩石を掘り、削り取り、削り取った土砂または岩石を運搬車両の荷台に積み込む作業である。掘削積込は、掘削、積荷旋回、排土、空荷旋回、排土待ちおよび荷台押えで構成される単位作業である。
溝掘削は、地盤を溝状に細長く掘り、削り取る作業である。溝掘削は、掘削、積荷旋回、排土、および空荷旋回で構成され、押しならしを含み得る単位作業である。
埋戻しは、地盤に既に空いている溝または穴に土砂を入れて平らに埋め戻す作業である。埋戻しは、掘削、積荷旋回、排土、転圧、および空荷旋回で構成され、押しならしおよびホウキを含み得る単位作業である。
すき取りは、地面の余分な起伏を所定の高さにするため平らに削り取る作業である。すき取りは、掘削および排土、または掘削、積荷旋回、排土、および空荷旋回で構成され、押しならしおよびホウキを含み得る単位作業である。
法面（上から）は、対象箇所の上方に位置する作業機械１００によって斜面を作る作業である。法面（上から）は、転圧、掘削、積荷旋回、排土、空荷旋回で構成され、押しならしを含み得る単位作業である。
法面（下から）は、対象箇所の下方に位置する作業機械１００によって斜面を作る作業である。法面（下から）は、転圧、掘削、積荷旋回、排土、空荷旋回で構成され、押しならしを含み得る単位作業である。
積荷集めは、掘削等によって出た土砂を、運搬車両に積む前に集めておく作業である。積荷集めは、掘削、積荷旋回、排土、空荷旋回で構成され、押しならしを含み得る単位作業である。
走行は、作業機械１００を移動させる作業である。単位作業としての走行は、要素作業としての走行から構成される単位作業である。
停車は、バケット１３３に土砂および岩石が無く、かつ所定時間以上停止している状態である。単位作業としての停車は、要素作業としての停車から構成される単位作業である。
【0034】
なお、「掘削積込」、「溝掘削」、「埋戻し」、「すき取り」、「法面（上から）」、および「法面（下から）」、は、仕事の直接的な目的に寄与する作業である主体作業である。「積荷集め」、「走行」は、主体作業を行うために必要となる作業である付帯作業である。
【0035】
《作業分析装置の構成》
図４は、第１の実施形態に係る作業分析装置の構成を示す概略ブロック図である。
作業分析装置３００は、プロセッサ３１、メインメモリ３３、ストレージ３５、インタフェース３７を備えるコンピュータである。ストレージ３５は、作業分析プログラムを記憶する。プロセッサ３１は、作業分析プログラムをストレージ３５から読み出してメインメモリ３３に展開し、作業分析プログラムに従った処理を実行する。なお、第１の実施形態に係る作業分析装置３００は、作業機械１００の外部に設けられるが、他の実施形態においては作業分析装置３００は、機能の一部または全部が作業機械１００の内部に設けられてもよい。
図４は、第１の実施形態に係る作業分析装置の構成を示す概略ブロック図である。
作業分析装置３００は、プロセッサ３１、メインメモリ３３、ストレージ３５、インタフェース３７を備えるコンピュータである。ストレージ３５は、作業分析プログラムを記憶する。プロセッサ３１は、作業分析プログラムをストレージ３５から読み出してメインメモリ３３に展開し、作業分析プログラムに従った処理を実行する。なお、第１の実施形態に係る作業分析装置３００は、作業機械１００の外部に設けられるが、他の実施形態においては作業分析装置３００は、機能の一部または全部が作業機械１００の内部に設けられてもよい。
【0036】
ストレージ３５の例としては、半導体メモリ、ディスクメディアおよびテープメディア等が挙げられる。ストレージ３５は、作業分析装置３００の共通通信線に直接接続された内部メディアであってもよいし、インタフェース３７を介して作業分析装置３００に接続される外部メディアであってもよい。ストレージ３５は、一時的でない有形の記憶媒体である。
【0037】
プロセッサ３１は、作業分析プログラムの実行により、状態データ取得部３１１、動画像取得部３１２、ラベルデータ取得部３１３、学習部３１４、作業特定部３１５、平滑化部３１６、期間特定部３１７、指標値特定部３１８、掘削積込グラフ生成部３１９、出力部３２０を備える。またプロセッサ３１は、作業分析プログラムの実行により、メインメモリ３３に状態データ記憶部３３１、動画像記憶部３３２、ラベルデータ記憶部３３３、モデル記憶部３３４の記憶領域を確保する。
作業分析プログラムは、作業分析装置３００に発揮させる機能の一部を実現するためのものであってもよい。例えば、作業分析プログラムは、ストレージ３５に既に記憶されている他のプログラムとの組み合わせ、または他の装置に実装された他のプログラムとの組み合わせによって機能を発揮させるものであってもよい。なお、他の実施形態においては、作業分析装置３００は、上記構成に加えて、または上記構成に代えてＰＬＤなどのカスタムＬＳＩを備えてもよい。ＰＬＤの例としては、ＰＡＬ、ＧＡＬ、ＣＰＬＤ、ＦＰＧＡが挙げられる。この場合、プロセッサによって実現される機能の一部または全部が当該集積回路によって実現されてよい。
作業分析プログラムは、作業分析装置３００に発揮させる機能の一部を実現するためのものであってもよい。例えば、作業分析プログラムは、ストレージ３５に既に記憶されている他のプログラムとの組み合わせ、または他の装置に実装された他のプログラムとの組み合わせによって機能を発揮させるものであってもよい。なお、他の実施形態においては、作業分析装置３００は、上記構成に加えて、または上記構成に代えてＰＬＤなどのカスタムＬＳＩを備えてもよい。ＰＬＤの例としては、ＰＡＬ、ＧＡＬ、ＣＰＬＤ、ＦＰＧＡが挙げられる。この場合、プロセッサによって実現される機能の一部または全部が当該集積回路によって実現されてよい。
【0038】
状態データ取得部３１１は、作業機械１００のデータ集約装置１２８から作業機械１００の状態を示す状態データの時系列を取得する。つまり、状態データ取得部３１１は、タイムスタンプと状態データの複数の組み合わせを取得する。状態データは、作業機械１００の各センサの計測値および計測値に基づいてデータ集約装置１２８が求めた値を含んでよい。状態データ取得部３１１は、取得した状態データの時系列を、作業機械１００のＩＤに関連付けて状態データ記憶部３３１に記憶させる。
【0039】
動画像取得部３１２は、作業機械１００のデータ集約装置１２８から撮像装置１２７が撮像した動画像を取得する。動画像取得部３１２は、取得した動画像を作業機械１００のＩＤに関連付けて動画像記憶部３３２に記憶させる。
【0040】
ラベルデータ取得部３１３は、ラベリング装置２００から単位作業のラベルデータと要素作業のラベルデータとを取得する。ラベルデータ取得部３１３は、撮像装置１２７のフレーム周期と各センサの検出周期とが異なる場合、ラベルデータのタイムスタンプと状態データのタイムスタンプとを一致させる。例えば、ラベルデータ取得部３１３は、ラベルデータのタイムスタンプが、状態データのタイムスタンプに一致するように、ラベルデータの時系列を再構成する。ラベルデータ取得部３１３は、取得したラベルデータの時系列を作業機械１００のＩＤに関連付けてラベルデータ記憶部３３３に記憶させる。つまり、ラベルデータ取得部３１３は、タイムスタンプとラベルデータの複数の組み合わせを、それぞれ作業機械１００のＩＤに関連付けてラベルデータ記憶部３３３に記憶させる。
【0041】
学習部３１４は、状態データ記憶部３３１が記憶する状態データの時系列と、ラベルデータ記憶部３３３が記憶するラベルデータの時系列との組み合わせを教師データとして、状態データの時系列を入力して、作業の区分の時系列を出力するように予測モデルを学習させる。予測モデルの例としては、ニューラルネットワークモデル、決定木モデル、サポートベクターマシンモデルなどが挙げられる。学習部３１４は、学習済みの予測モデルをモデル記憶部３３４に記憶させる。
【0042】
作業特定部３１５は、状態データ取得部３１１が取得した新たな状態データの時系列と、モデル記憶部３３４が記憶する予測モデルとに基づいて、作業の区分に係る尤度の時系列を得る。例えば、作業特定部３１５は、以下の手順で作業の区分に係る尤度の時系列を得る。作業特定部３１５は、状態データの時系列から、作業を特定する時点の状態データを取得する。次に作業特定部３１５は、取得した状態データに基づいて各作業の区分の尤度を特定し結果を取得する。作業特定部３１５は、各時点について特定した作業の区分の尤度を時系列として集計する。
具体的には、作業特定部３１５は、作業の区分を行とし、時刻を列とする行列であって、その時刻にその区分に係る作業の尤度を要素に持つ行列を得る。つまり、尤度の時系列は、ｉ列ｊ行目の要素の値ｗｉｊを、時刻ｔｉにおける作業が区分ａｊに係る作業である尤度とする行列であってよい。作業特定部３１５は、単位作業に係る尤度の時系列を得ることで、作業機械１００による単位作業の区分を特定する。作業特定部３１５は、要素作業に係る尤度の時系列を得ることで、作業機械１００による要素作業の区分を特定する。
具体的には、作業特定部３１５は、作業の区分を行とし、時刻を列とする行列であって、その時刻にその区分に係る作業の尤度を要素に持つ行列を得る。つまり、尤度の時系列は、ｉ列ｊ行目の要素の値ｗｉｊを、時刻ｔｉにおける作業が区分ａｊに係る作業である尤度とする行列であってよい。作業特定部３１５は、単位作業に係る尤度の時系列を得ることで、作業機械１００による単位作業の区分を特定する。作業特定部３１５は、要素作業に係る尤度の時系列を得ることで、作業機械１００による要素作業の区分を特定する。
【0043】
平滑化部３１６は、作業特定部３１５が得た作業の区分ごとの尤度の時系列の平滑化処理を行う。例えば、平滑化部３１６は、尤度の時系列を時間平均フィルタに掛けることで、尤度の時系列を平滑化する。つまり、平滑化部３１６は、単位作業の尤度の時系列および要素作業の尤度の時系列のそれぞれについて、単位時間当たりの代表値を特定する。
このとき、要素作業に係る時間平均フィルタの窓関数の大きさ（単位時間の長さ）は、単位作業に係る時間平均フィルタの窓関数の大きさより小さい。なお、平滑化の方法は時間平均に限られないが、要素作業に係る窓関数の大きさは単位作業に係る窓関数の大きさより小さいことが好ましい。これは、単位作業が要素作業によって構成されているように、一の要素作業が継続する時間は一の単位作業が継続する時間より短いためである。
このとき、要素作業に係る時間平均フィルタの窓関数の大きさ（単位時間の長さ）は、単位作業に係る時間平均フィルタの窓関数の大きさより小さい。なお、平滑化の方法は時間平均に限られないが、要素作業に係る窓関数の大きさは単位作業に係る窓関数の大きさより小さいことが好ましい。これは、単位作業が要素作業によって構成されているように、一の要素作業が継続する時間は一の単位作業が継続する時間より短いためである。
【0044】
期間特定部３１７は、単位作業に係る尤度の時系列および要素作業に係る尤度の時系列に基づいて、「掘削積込」の始点と終点とを特定する。例えば、掘削積込グラフ生成部３１９は、「掘削積込」に係る期間における「排土待ち」の終了時刻を掘削積込の始点として特定する。また例えば、掘削積込グラフ生成部３１９は、「掘削積込」に係る期間における「荷台押え」の開始時刻を掘削積込の終点として特定する。
また期間特定部３１７は、要素作業に係る尤度の時系列に基づいて、「積荷旋回」の始点と終点とを特定する。
また期間特定部３１７は、要素作業に係る尤度の時系列に基づいて、「積荷旋回」の始点と終点とを特定する。
【0045】
なお、単位作業の「掘削積込」は、複数の積込作業によって構成される。１回の「掘削積込」は、例えば「排土」または「荷台押え」に基づいて判定される。例えば、指標値特定部３１８は、掘削積込に係る期間において「積荷旋回」が支配的な期間における旋回角および燃費を特定する。
【0046】
指標値特定部３１８は、状態データ取得部３１１が取得した状態データの時系列に基づいて、期間特定部３１７によって特定された一の「掘削積込」について、「積荷旋回」に関する作業機械１００の状態の指標値を求める。状態の指標値の例としては、要素作業の開始時に旋回体１２０が向く方位から終了時に旋回体１２０が向く方位までの旋回角、開始時から終了時までの燃費などが挙げられる。
また、指標値特定部３１８は、状態データ取得部３１１が取得した状態データの時系列に基づいて、特定された「掘削積込」ごとに、「積荷旋回」に関する作業機械１００の状態の指標値の統計量を求め、運搬車両ごとの掘削積込について、当該指標値を表すグラフを生成する。指標値の統計量の例としては、要素作業における平均旋回角および平均燃費などが挙げられる。
また、指標値特定部３１８は、状態データ取得部３１１が取得した状態データの時系列に基づいて、特定された「掘削積込」ごとに、「積荷旋回」に関する作業機械１００の状態の指標値の統計量を求め、運搬車両ごとの掘削積込について、当該指標値を表すグラフを生成する。指標値の統計量の例としては、要素作業における平均旋回角および平均燃費などが挙げられる。
【0047】
図５は、掘削積込ごとの平均旋回角および平均燃費を表すグラフの例を示す図である。
図６は、掘削積込に係る積込回ごとの旋回角および燃費を表すグラフの例を示す図である。
掘削積込グラフ生成部３１９は、指標値特定部３１８が特定した指標値および指標値の統計量に基づいて、１サイクルの「掘削積込」ごとの作業機械１００の状態の指標値の統計量を示すグラフを生成する。掘削積込における１サイクルとは、作業機械１００が運搬車両へ土砂の積込を開始してから、複数回の積荷旋回を経て、土砂の積込を終了するまでの作業をいう。例えば、掘削積込グラフ生成部３１９は、図５に示すような１サイクルの掘削積込ごとの平均旋回角および平均燃費を表すグラフを生成する。図５の縦軸は、１サイクルの掘削積込の完了時刻を表し、横軸は、平均旋回角および平均燃費を表す。
また掘削積込グラフ生成部３１９は、指標値特定部３１８が特定した指標値および指標値の統計量に基づいて、ある１サイクルの「掘削積込」における積込回ごとの作業機械１００の状態の指標値を示すグラフを生成する。例えば、掘削積込グラフ生成部３１９は、図６に示すような１サイクルの掘削積込に係る積込回ごとの旋回角および燃費を表すグラフを生成する。図６に示す例は、図５の複数の「掘削積込」のうち、１０：３１に係る「掘削積込」における積込回ごとの作業機械１００の状態の指標値を示す。また、図６に示す例においては、掘削積込を開始してから５回の積荷旋回で運搬車両の積載量が最大積載量に達し、掘削積込を終了している。たとえば、図６に示す例においては、２回目の積込における旋回角が１２３．５度、３回目の積込における旋回角が１０６．５度、４回目の積込における旋回角が９６．５度、５回目の積込における旋回角が１０１．５度であることから、平均旋回角は、１０７．０度となる。つまり、１０：３１に係る「掘削積込」における平均旋回角は、図５に示すように１０７．０度である。同様に、図６に示す例においては、１回目の積込における燃費が８．７５Ｌ／Ｈ、２回目の積込における燃費が１５．５５Ｌ／Ｈ、３回目の積込における燃費が１４．３５Ｌ／Ｈ、４回目の積込における燃費が１３．２５Ｌ／Ｈ、５回目の積込における燃費が１３．２５Ｌ／Ｈであることから、平均燃費は、１３．０Ｌ／Ｈとなる。つまり、１０：３１に係る「掘削積込」における平均燃費は、図５に示すように１３．０Ｌ／Ｈである。
なお、第１の実施形態に係る掘削積込グラフ生成部３１９は、積込回ごとの指標値を表すグラフとして、旋回角および燃費を表すグラフを生成するが、これに限られず、旋回角および燃費のいずれか一方の指標値を表してもよい。また掘削積込グラフ生成部３１９は、掘削積込に係る時間などの他の指標値を表すグラフを生成してもよい。また、掘削積込グラフ生成部３１９は、複数種類の指標値の組み合わせを適宜組み合わせてグラフを生成してもよい。組み合わせの数も２種類に限られず、掘削積込グラフ生成部３１９は、３種類以上を組み合わせたグラフを生成してもよい。
図６は、掘削積込に係る積込回ごとの旋回角および燃費を表すグラフの例を示す図である。
掘削積込グラフ生成部３１９は、指標値特定部３１８が特定した指標値および指標値の統計量に基づいて、１サイクルの「掘削積込」ごとの作業機械１００の状態の指標値の統計量を示すグラフを生成する。掘削積込における１サイクルとは、作業機械１００が運搬車両へ土砂の積込を開始してから、複数回の積荷旋回を経て、土砂の積込を終了するまでの作業をいう。例えば、掘削積込グラフ生成部３１９は、図５に示すような１サイクルの掘削積込ごとの平均旋回角および平均燃費を表すグラフを生成する。図５の縦軸は、１サイクルの掘削積込の完了時刻を表し、横軸は、平均旋回角および平均燃費を表す。
また掘削積込グラフ生成部３１９は、指標値特定部３１８が特定した指標値および指標値の統計量に基づいて、ある１サイクルの「掘削積込」における積込回ごとの作業機械１００の状態の指標値を示すグラフを生成する。例えば、掘削積込グラフ生成部３１９は、図６に示すような１サイクルの掘削積込に係る積込回ごとの旋回角および燃費を表すグラフを生成する。図６に示す例は、図５の複数の「掘削積込」のうち、１０：３１に係る「掘削積込」における積込回ごとの作業機械１００の状態の指標値を示す。また、図６に示す例においては、掘削積込を開始してから５回の積荷旋回で運搬車両の積載量が最大積載量に達し、掘削積込を終了している。たとえば、図６に示す例においては、２回目の積込における旋回角が１２３．５度、３回目の積込における旋回角が１０６．５度、４回目の積込における旋回角が９６．５度、５回目の積込における旋回角が１０１．５度であることから、平均旋回角は、１０７．０度となる。つまり、１０：３１に係る「掘削積込」における平均旋回角は、図５に示すように１０７．０度である。同様に、図６に示す例においては、１回目の積込における燃費が８．７５Ｌ／Ｈ、２回目の積込における燃費が１５．５５Ｌ／Ｈ、３回目の積込における燃費が１４．３５Ｌ／Ｈ、４回目の積込における燃費が１３．２５Ｌ／Ｈ、５回目の積込における燃費が１３．２５Ｌ／Ｈであることから、平均燃費は、１３．０Ｌ／Ｈとなる。つまり、１０：３１に係る「掘削積込」における平均燃費は、図５に示すように１３．０Ｌ／Ｈである。
なお、第１の実施形態に係る掘削積込グラフ生成部３１９は、積込回ごとの指標値を表すグラフとして、旋回角および燃費を表すグラフを生成するが、これに限られず、旋回角および燃費のいずれか一方の指標値を表してもよい。また掘削積込グラフ生成部３１９は、掘削積込に係る時間などの他の指標値を表すグラフを生成してもよい。また、掘削積込グラフ生成部３１９は、複数種類の指標値の組み合わせを適宜組み合わせてグラフを生成してもよい。組み合わせの数も２種類に限られず、掘削積込グラフ生成部３１９は、３種類以上を組み合わせたグラフを生成してもよい。
【0048】
出力部３２０は、掘削積込グラフ生成部３１９が生成した掘削積込に係る作業機械１００の指標値を表すグラフを出力する。出力部３２０による出力は、例えば、ディスプレイへの表示、プリンタによる紙等のシートへの印刷、ネットワークを介して接続される外部サーバへの送信、インタフェース３７に接続された外部記憶媒体への書き込みなどが挙げられる。これにより、解析者等は、作業された時刻と異なる時刻に、別の場所で、俯瞰的に作業内容の解析を行うことができる。
【0049】
【0050】
作業分析装置３００の状態データ取得部３１１は、複数の作業機械１００のそれぞれから、当該作業機械１００の状態データの時系列を受信する（ステップＳ１）。状態データ取得部３１１は、受信した状態データの時系列を、作業機械１００のＩＤに関連付けて状態データ記憶部３３１に記憶させる（ステップＳ２）。また動画像取得部３１２は、複数の作業機械１００のそれぞれから、当該作業機械１００の撮像装置１２７が撮像した動画像を受信する（ステップＳ３）。動画像取得部３１２は、受信した動画像を、作業機械１００のＩＤに関連付けて動画像記憶部３３２に記憶させる（ステップＳ４）。
【0051】
ラベリング装置２００は、動画像記憶部３３２に記憶された動画像を取得し、利用者の操作によってラベルデータを生成する。ラベリング装置２００は、生成したラベルデータを作業機械１００のＩＤに関連付けて作業分析装置３００に送信する。ラベリング装置２００は、上記処理により複数の動画像それぞれについて、単位作業のラベルデータおよび要素作業のラベルデータを生成する。
【0052】
作業分析装置３００のラベルデータ取得部３１３は、ラベリング装置２００から複数のラベルデータを受信する（ステップＳ５）。ラベルデータ取得部３１３は、複数のラベルデータを、それぞれ作業機械１００のＩＤに関連付けてラベルデータ記憶部３３３に記憶させる（ステップＳ６）。
【0053】
次に、学習部３１４は、状態データ記憶部３３１が記憶する複数の状態データの時系列と、ラベルデータ記憶部３３３が記憶する複数の単位作業のラベルデータとを教師データとして単位作業予測モデルを学習させ（ステップＳ７）、学習された単位作業予測モデルをモデル記憶部３３４に記憶させる（ステップＳ８）。また、学習部３１４は、状態データ記憶部３３１が記憶する複数の状態データの時系列と、ラベルデータ記憶部３３３が記憶する複数の要素作業のラベルデータとを教師データとして要素作業予測モデルを学習させ（ステップＳ９）、学習された要素作業予測モデルをモデル記憶部３３４に記憶させる（ステップＳ１０）。なお、他の実施形態においては、学習部３１４は、単位作業と要素作業のうちいずれか一方に係る予測モデルのみを学習するものであってもよい。
このとき、学習部３１４は、状態データの時系列を入力とし、ラベルデータ（作業の区分ごとの時系列を示す行列）を出力とするように予測モデルを学習させる。
このとき、学習部３１４は、状態データの時系列を入力とし、ラベルデータ（作業の区分ごとの時系列を示す行列）を出力とするように予測モデルを学習させる。
【0054】
《作業分析方法》
作業分析装置３００は、上記の準備が完了すると、任意の作業機械１００の作業を分析することができる。
図８は、第１の実施形態に係る作業分析装置による作業分析方法を示すフローチャートである。
作業分析装置３００は、上記の準備が完了すると、任意の作業機械１００の作業を分析することができる。
図８は、第１の実施形態に係る作業分析装置による作業分析方法を示すフローチャートである。
【0055】
作業分析装置３００の状態データ取得部３１１は、一の作業機械１００から状態データの時系列を受信する（ステップＳ５１）。次に、作業特定部３１５は、受信した状態データの時系列を、モデル記憶部３３４が記憶する単位作業予測モデルに入力することで、単位作業に係る尤度の時系列を得る（ステップＳ５２）。これにより作業特定部３１５は、時系列に係る各時刻における単位作業を特定する。また作業特定部３１５は、受信した状態データの時系列を、モデル記憶部３３４が記憶する要素作業予測モデルに入力することで、要素作業に係る尤度の時系列を得る（ステップＳ５３）。平滑化部３１６は、単位作業に係る尤度の時系列および要素作業に係る尤度の時系列を、それぞれ時間平均フィルタに掛けることで、尤度の時系列を平滑化する（ステップＳ５４）。
【0056】
図９は、単位作業に係る尤度の時系列および要素作業に係る尤度の時系列を表すヒートマップの例を示す図である。
図９のヒートマップＨ１は、単位作業に係る尤度の時系列を表す。図９のヒートマップＨ２は、要素作業に係る尤度の時系列を表す。図９に示すように、単位作業に係る尤度の時系列および、要素作業に係る尤度の時系列によれば、複数の単位作業または複数の要素作業を複合的に行う作業状態や、異なる作業の区分へシームレスに移る作業状態は、同時刻において複数の作業の区分の尤度が高い状態として表れる。
図９のヒートマップＨ１は、単位作業に係る尤度の時系列を表す。図９のヒートマップＨ２は、要素作業に係る尤度の時系列を表す。図９に示すように、単位作業に係る尤度の時系列および、要素作業に係る尤度の時系列によれば、複数の単位作業または複数の要素作業を複合的に行う作業状態や、異なる作業の区分へシームレスに移る作業状態は、同時刻において複数の作業の区分の尤度が高い状態として表れる。
【0057】
次に、期間特定部３１７は、平滑化された単位作業に係る尤度の時系列に基づいて、「掘削積込」の尤度が支配的な期間を特定する（ステップＳ５５）。次に、期間特定部３１７は、特定した期間において、「排土待ち」の尤度が支配的な複数の期間および「荷台押え」の尤度が支配的な複数の期間を特定する（ステップＳ５６）。期間特定部３１７は、「排土待ち」の尤度が支配的な期間の終了時刻から、「荷台押え」の尤度が支配的な期間の開始時刻までの期間を、それぞれ一の運搬車両について掘削積込を行っている期間と特定する（ステップＳ５７）。つまり、期間特定部３１７は、「排土待ち」の尤度が支配的な期間の終了時刻を、一の運搬車両について掘削積込を行っている期間の始点と特定し、「荷台押え」の尤度が支配的な期間の開始時刻を、一の運搬車両について掘削積込を行っている期間の終点と特定する。
【0058】
作業分析装置３００は、特定した「掘削積込」に係る期間を１つずつ選択し、選択した期間について以下のステップＳ５９からステップＳ６５の処理を実行する（ステップＳ５８）。
期間特定部３１７は、選択された「掘削積込」に係る期間のうち、要素作業が「積荷旋回」に係る複数の期間、および要素作業が「空荷旋回」に係る複数の期間を特定する（ステップＳ５９）。
期間特定部３１７は、選択された「掘削積込」に係る期間のうち、要素作業が「積荷旋回」に係る複数の期間、および要素作業が「空荷旋回」に係る複数の期間を特定する（ステップＳ５９）。
【0059】
指標値特定部３１８は、状態データ取得部３１１が取得した状態データの時系列から、「積荷旋回」に係る期間の始点から、「空荷旋回」に係る期間の終点までの各期間におけるエンジン１２２の消費燃料量を特定する（ステップＳ６０）。指標値特定部３１８は、特定した消費燃料量に基づいて、積込作業ごとの燃費を特定する（ステップＳ６１）。
指標値特定部３１８は、状態データ取得部３１１が取得した状態データの時系列から、「積荷旋回」に係る各期間の始点および終点における旋回体１２０の方位を特定する（ステップＳ６２）。旋回体の方位は、例えば作業機械１００が備える２つのＧＮＳＳアンテナにおける測位情報の差によって、またはポテンショメータによる計測によって求めることができる。指標値特定部３１８は、各期間の始点に係る方位と終点に係る方位の差に基づいて、積込作業ごとの旋回角を特定する（ステップＳ６３）。
掘削積込グラフ生成部３１９は、図６に示すように積込作業ごとの燃費および旋回角の変化を表すグラフを生成する（ステップＳ６４）。
指標値特定部３１８は、状態データ取得部３１１が取得した状態データの時系列から、「積荷旋回」に係る各期間の始点および終点における旋回体１２０の方位を特定する（ステップＳ６２）。旋回体の方位は、例えば作業機械１００が備える２つのＧＮＳＳアンテナにおける測位情報の差によって、またはポテンショメータによる計測によって求めることができる。指標値特定部３１８は、各期間の始点に係る方位と終点に係る方位の差に基づいて、積込作業ごとの旋回角を特定する（ステップＳ６３）。
掘削積込グラフ生成部３１９は、図６に示すように積込作業ごとの燃費および旋回角の変化を表すグラフを生成する（ステップＳ６４）。
【0060】
また、指標値特定部３１８は、ステップＳ６１で特定した積込作業ごとの消費燃料量およびステップＳ６３で特定した積込作業ごとの旋回角に基づいて、選択した期間に係る「掘削積込」の平均旋回角および平均燃費を特定する（ステップＳ６５）。
【0061】
作業分析装置３００が、各「掘削積込」に係る期間について、ステップＳ５９からステップＳ６５の処理を実行すると、掘削積込グラフ生成部３１９は、図５に示すように掘削積込ごとの平均燃費および平均旋回角の変化を表すグラフを生成する（ステップＳ６６）。出力部３２０は、掘削積込グラフ生成部３１９がステップＳ６４およびステップＳ６６で生成したグラフを出力する（ステップＳ６７）。
【0062】
《作用・効果》
このように、第１の実施形態によれば、作業分析装置３００は、作業機械１００の状態を示す状態データに基づいて作業機械が実行した作業の区分を特定し、所定の区分に係る期間の始点から終点までの作業機械１００の状態の指標値を特定する。これにより、利用者は、特定した作業機械１００の状態の指標値を評価材料として、オペレータの評価または作業の解析に用いることができる。なお、第１の実施形態に係る作業分析装置３００は、図７に示すステップＳ１からステップＳ１０の処理、および図８に示すステップＳ５１からステップＳ６７の処理を実行するが、これに限られない。例えば、他の実施形態においては、ステップＳ１からステップＳ１０の処理、ならびに、ステップＳ５２からステップＳ５６、ステップＳ５８からステップＳ５９、およびステップＳ６４からステップＳ６７の処理が実施されなくてもよい。また、作業分析装置３００は、Ｓ６０およびＳ６１、またはＳ６２およびＳ６３のうち、いずれか一方の処理を実行するものであってもよい。また、作業機械１００は、撮像装置１２７、回転数センサ１４１、トルクセンサ１４２、燃料センサ１４３、パイロット圧センサ１４４、ブームシリンダヘッド圧センサ１４５、ブームシリンダボトム圧センサ１４６、ブームストロークセンサ１４７、アームストロークセンサ１４８、バケットストロークセンサ１４９を備えなくてもよい。
このように、第１の実施形態によれば、作業分析装置３００は、作業機械１００の状態を示す状態データに基づいて作業機械が実行した作業の区分を特定し、所定の区分に係る期間の始点から終点までの作業機械１００の状態の指標値を特定する。これにより、利用者は、特定した作業機械１００の状態の指標値を評価材料として、オペレータの評価または作業の解析に用いることができる。なお、第１の実施形態に係る作業分析装置３００は、図７に示すステップＳ１からステップＳ１０の処理、および図８に示すステップＳ５１からステップＳ６７の処理を実行するが、これに限られない。例えば、他の実施形態においては、ステップＳ１からステップＳ１０の処理、ならびに、ステップＳ５２からステップＳ５６、ステップＳ５８からステップＳ５９、およびステップＳ６４からステップＳ６７の処理が実施されなくてもよい。また、作業分析装置３００は、Ｓ６０およびＳ６１、またはＳ６２およびＳ６３のうち、いずれか一方の処理を実行するものであってもよい。また、作業機械１００は、撮像装置１２７、回転数センサ１４１、トルクセンサ１４２、燃料センサ１４３、パイロット圧センサ１４４、ブームシリンダヘッド圧センサ１４５、ブームシリンダボトム圧センサ１４６、ブームストロークセンサ１４７、アームストロークセンサ１４８、バケットストロークセンサ１４９を備えなくてもよい。
【0063】
例えば、図５に示すグラフを参照すると、１０時５６分以降の平均旋回角のばらつきは、１０時５３分以前の間の平均旋回角のばらつきより大きくなっていることがわかる。このことから、１０時５３分までの掘削積込作業においては、予め積荷集めなどの付帯作業がなされており、所定の位置に運搬車両に積み込むべき土砂の山が十分に集められていたことが読み取れる。他方、１０時５６分以降の掘削積込作業においては、積荷集めによって集められた土砂がそれまでの掘削積込作業でなくなり、積み込むべき土砂をその場で掘削しながら積込を行うことで、効率が低下していることが読み取れる。したがって、積込掘削作業ごとの平均旋回角のばらつきにより、オペレータによる付帯作業の質を評価し、また必要となる付帯作業を検討することができる。
【0064】
また例えば、図６に示すグラフを参照すると、１回の積込作業における旋回角が大きいほど、燃費が悪いことが分かる。なお、図６のグラフにおいて１回目の積込作業において旋回角が記録されていないのは、掘削積込の始点において作業機械１００が排土待ちの状態にあり、積荷旋回を行っていないためである。このことから、作業機械１００の旋回角が大きいほど燃料効率が悪くなるという関係を読み取ることができる。なお、１回目の掘削積込の始点における作業機械１００の状態が排土待ちでない場合には、１回目の積込作業の旋回角も記録され得る。
このように、利用者は、作業機械１００の状態の指標値を評価材料とすることで、多角的に解析を行うことができる。
このように、利用者は、作業機械１００の状態の指標値を評価材料とすることで、多角的に解析を行うことができる。
【0065】
〈他の実施形態〉
以上、図面を参照して一実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、様々な設計変更等をすることが可能である。
以上、図面を参照して一実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、様々な設計変更等をすることが可能である。
【0066】
上述した実施形態においては、作業分析装置３００は、単位作業の区分のうち「掘削積込」、および要素作業のうち「積荷旋回」について、作業機械１００の状態の指標値を求めるが、これに限られない。他の実施形態に係る作業分析装置３００は、他の作業の区分について作業機械１００の状態の指標値を求めてもよい。
例えば、作業分析装置３００は、溝掘削作業における掘削から排土までの作業機械１００の状態の指標値を求めてもよい。これにより、利用者は、オペレータの溝掘削作業における評価または溝掘削作業の解析を行うことができる。
また例えば、作業分析装置３００は、法面の転圧作業において作業機１３０の連続動作に係る距離を求めてもよい。作業機１３０の連続動作とは、ブーム１３１、アーム１３２、およびバケット１３３の少なくとも１つへの操作が無い状態から、ブーム１３１、アーム１３２、およびバケット１３３のすべてへの操作がなされている状態を経て、ブーム１３１、アーム１３２、およびバケット１３３の少なくとも１つへの操作が無くなるまでの状態をいう。法面の転圧作業において、オペレータは、バケット１３３の角度を法面の目標角度と一致させながら、法面に沿ってバケット１３３を移動させる必要がある。経験の少ないオペレータは、バケット１３３を少しずつ移動させ、都度バケット１３３の角度を調整するため、作業機１３０の連続動作の距離が短くなる傾向にある。他方、熟練のオペレータは、ブーム１３１、アーム１３２、およびバケット１３３を同時に調整して、法面に沿ってバケット１３３を移動させつつ、バケット１３３の角度を目標角度と一致させるため、作業機１３０の連続動作の距離が長くなる傾向にある。これにより、利用者は、オペレータの法面作業における評価または溝掘削作業の解析を行うことができる。
例えば、作業分析装置３００は、溝掘削作業における掘削から排土までの作業機械１００の状態の指標値を求めてもよい。これにより、利用者は、オペレータの溝掘削作業における評価または溝掘削作業の解析を行うことができる。
また例えば、作業分析装置３００は、法面の転圧作業において作業機１３０の連続動作に係る距離を求めてもよい。作業機１３０の連続動作とは、ブーム１３１、アーム１３２、およびバケット１３３の少なくとも１つへの操作が無い状態から、ブーム１３１、アーム１３２、およびバケット１３３のすべてへの操作がなされている状態を経て、ブーム１３１、アーム１３２、およびバケット１３３の少なくとも１つへの操作が無くなるまでの状態をいう。法面の転圧作業において、オペレータは、バケット１３３の角度を法面の目標角度と一致させながら、法面に沿ってバケット１３３を移動させる必要がある。経験の少ないオペレータは、バケット１３３を少しずつ移動させ、都度バケット１３３の角度を調整するため、作業機１３０の連続動作の距離が短くなる傾向にある。他方、熟練のオペレータは、ブーム１３１、アーム１３２、およびバケット１３３を同時に調整して、法面に沿ってバケット１３３を移動させつつ、バケット１３３の角度を目標角度と一致させるため、作業機１３０の連続動作の距離が長くなる傾向にある。これにより、利用者は、オペレータの法面作業における評価または溝掘削作業の解析を行うことができる。
【0067】
上述した実施形態においては、作業分析装置３００は、指標値の統計量として、指標値の平均値を求めるが、これに限られない。他の実施形態に係る作業分析装置３００は、中央値、最大値、最小値などの他の代表値を求めてもよいし、範囲および標準偏差などの散布度を求めてもよい。代表値および散布度は、統計量の一例である。
【0068】
上述した実施形態においては、作業機械１００のデータ集約装置１２８が、各センサの計測値を作業分析装置３００に送信し、作業分析装置３００がこれに基づいて作業の区分を特定するが、これに限られない。例えば、他の実施形態においては、データ集約装置１２８が各センサの計測値に基づいて作業の区分を特定してもよい。例えば、他の実施形態においては、作業分析装置３００によって生成された予測モデルをデータ集約装置１２８に記憶させ、データ集約装置１２８が当該予測モデルを用いて作業の区分を特定してもよい。つまり、他の実施形態においては、作業分析装置３００がデータ集約装置１２８に実装されてもよい。この場合、データ集約装置１２８は、作業機械１００に搭載されるディスプレイに、リアルタイムに現在の作業の区分の分析結果を表示させてもよい。これにより、オペレータは、作業の区分を認識しながら作業を行うことができる。
【0069】
上述した実施形態に係る作業分析装置３００は、各作業の区分の尤度の時系列を特定するが、他の実施形態においてはこれに限られず、各作業の区分の真偽値の時系列を特定してもよい。この場合においても、作業分析装置３００は、特定された時系列を平滑化することにより、作業の区分の尤度の時系列を得ることができる。
【0070】
また、上述した実施形態に係るラベリング装置２００は、利用者の操作に基づいてラベルデータを生成するが、これに限られない。例えば、他の実施形態に係るラベリング装置２００は、画像処理等によって自動的にラベルデータを生成してもよい。
【0071】
また、上述した実施形態に係る作業分析装置３００は、学習済みの予測モデルに基づいて作業機械１００の作業の区分を特定するがこれに限られない。例えば、他の実施形態に係る作業分析装置３００は、機械学習によらないプログラムに基づいて作業機械１００の作業の区分を特定してもよい。機械学習によらないプログラムとは、状態データの入力に基づき予め規定する操作の組み合わせから作業区分を特定するプログラムである。例えば、作業分析装置３００は、ブーム１３１の上げ操作および下げ操作、アーム１３２の押し操作および引き操作、バケット１３３の掘削操作およびダンプ操作、旋回体１２０の右旋回操作および左旋回操作、ならびに走行体１１０の前進操作および後退操作の状態に基づいて作業区分を特定してもよい。具体的には、作業分析装置３００は、アーム１３２の引き操作とバケット１３３の掘削操作が同時になされているときの要素作業を「掘削」と特定してよい。また作業分析装置３００は、ブーム１３１の上げ操作と旋回体１２０の旋回操作が同時になされているときの要素作業を「積荷旋回」と特定してよい。また作業分析装置３００は、「積荷旋回」の後にバケット１３３のダンプ操作がなされているときの要素作業を「排土」と特定してよい。また作業分析システム１は、ブーム１３１の下げ操作と旋回体１２０の旋回操作が同時になされているときの要素作業を「空荷旋回」と特定してよい。この場合、作業分析システム１は、撮像装置１２７、ラベリング装置２００、動画像取得部３１２、ラベルデータ取得部３１３、学習部３１４、動画像記憶部３３２、およびラベルデータ記憶部３３３を備えなくてもよい。
【0072】
また、上述した実施形態に係る作業分析装置３００は、複数のセンサの検出値、または検出値に基づいて計算された値に基づいて作業の区分を推定するが、これに限られない。例えば、他の実施形態に係る作業分析装置３００は、撮像装置１２７が撮像した動画像に基づいて、作業の区分を推定してもよい。つまり、撮像装置１２７が撮像した画像は、作業機械１００の状態を表す状態データの一例となりうる。また、上述した実施形態に係る作業分析装置３００は、単位作業に係る尤度の時系列および要素作業に係る尤度の時系列に基づいて、単位作業の始点と終点とを特定するが、これに限られない。例えば、他の実施形態に係る作業分析装置３００は、撮像装置１２７が撮像した動画像に基づいて、単位作業の始点と終点とを特定を特定してもよい。
【0073】
また、上述した実施形態に係るデータ集約装置１２８は、状態データをタイムスタンプに関連付けて記憶部に記憶しておき、状態データの時系列として作業分析装置３００に送信するが、これに限られない。例えば、他の実施形態に係るデータ集約装置１２８は、収集した状態データを、逐次タイムスタンプに関連付けて作業分析装置３００に送信してもよい。この場合、作業分析装置３００は、状態データとタイムスタンプの組み合わせを逐次取得し、時系列として集計する。
【符号の説明】
【0074】
１…作業分析システム １００…作業機械 ２００…ラベリング装置 ３００…作業分析装置 １１０…走行体 １２０…旋回体 １３０…作業機 １１１…無限軌道 １１２…走行モータ １３１…ブーム １３２…アーム １３３…バケット １３４…ブームシリンダ １３５…アームシリンダ １３６…バケットシリンダ Ｐ１…ブームピン Ｐ２…アームピン Ｐ３…バケットピン １２１…運転室 １２２…エンジン １２３…油圧ポンプ １２４…コントロールバルブ １２５…旋回モータ １２６…操作装置 １２７…撮像装置 １２８…データ集約装置 １４１…回転数センサ １４２…トルクセンサ １４３…燃料センサ １４４…パイロット圧センサ １４５…ブームシリンダヘッド圧センサ １４６…ブームシリンダボトム圧センサ １４７…ブームストロークセンサ １４８…アームストロークセンサ １４９…バケットストロークセンサ ２１…プロセッサ ２２…メインメモリ ２３…ストレージ ２４…インタフェース ２１１…動画像取得部 ２１２…動画像表示部 ２１３…ラベル入力部 ２１４…ラベルデータ生成部 ２１５…ラベルデータ送信部 ３１…プロセッサ ３３…メインメモリ ３５…ストレージ ３７…インタフェース ３１１…状態データ取得部 ３１２…動画像取得部 ３１３…ラベルデータ取得部 ３１４…学習部 ３１５…作業特定部 ３１６…平滑化部 ３１７…期間特定部 ３１８…指標値特定部 ３１９…掘削積込グラフ生成部 ３２０…出力部 ３３１…状態データ記憶部 ３３２…動画像記憶部 ３３３…ラベルデータ記憶部 ３３４…モデル記憶部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
