特許 7516068 作業機械の遠隔操作システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-05

(45)【発行日】2024-07-16

(54)【発明の名称】作業機械の遠隔操作システム

(51)【国際特許分類】

   E02F 9/26 20060101AFI20240708BHJP

   H04Q 9/00 20060101ALI20240708BHJP

   H04N 7/18 20060101ALI20240708BHJP

   G06F 3/0481 20220101ALI20240708BHJP

【ＦＩ】

E02F9/26 B

H04Q9/00 301B

H04N7/18 J

G06F3/0481

【請求項の数】 9

(21)【出願番号】P 2020028618

(22)【出願日】2020-02-21

(65)【公開番号】P2021134482

(43)【公開日】2021-09-13

【審査請求日】2023-01-13

(73)【特許権者】

【識別番号】000001236

【氏名又は名称】株式会社小松製作所

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】森永 淳

(72)【発明者】

【氏名】指宿 康洋

(72)【発明者】

【氏名】河原 淳人

(72)【発明者】

【氏名】皆川 真範

【審査官】彦田 克文

(56)【参考文献】

【文献】特開２０１９－０６８２３６（ＪＰ，Ａ）

【文献】国際公開第２０１７／０５６２６９（ＷＯ，Ａ１）

【文献】特開２００６－２１９８９４（ＪＰ，Ａ）

【文献】特開２０１６－１９４２３７（ＪＰ，Ａ）

【文献】特開２０１３－０３６２４３（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１４／０１１８５３３（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｅ０２Ｆ ９／２６

Ｈ０４Ｑ ９／００

Ｈ０４Ｎ ７／１８

Ｇ０６Ｆ ３／０４８１

(57)【特許請求の範囲】

【請求項1】

アッパデッキ及び前記アッパデッキよりも上方に配置される運転室を有する車体と、
前記運転室の内側に配置され第１撮像範囲を撮像する第１撮像装置と、
前記アッパデッキの下面に配置され第２撮像範囲を撮像する第２撮像装置と、
前記第１撮像範囲の第１画像及び前記第２撮像範囲の第２画像を遠隔地に送信する通信装置と、を備える、作業機械の遠隔操作システムであって、
前記遠隔地に配置され前記第１画像及び前記第２画像を表示する表示装置を備え、
前記第２撮像範囲の少なくとも一部は、前記第１撮像範囲よりも下方に設定され、
前記第１撮像範囲と前記第２撮像範囲とは、少なくとも前記車体に取り付けられる作業機が映るように重複し、
前記表示装置は、前記第２画像を前記第１画像の一部に重複するように表示する、
作業機械の遠隔操作システム。

【請求項2】

前記車体は、旋回体を含み、
前記作業機械は、前記旋回体の下方に配置され前記旋回体を旋回可能に支持する走行体を備え、
前記第１撮像範囲は、前記作業機の少なくとも一部を含むように設定され、
前記第２撮像範囲は、前記走行体の回転軸と前記作業機の回転軸とが平行になるように前記旋回体が旋回した場合において、前記走行体の前部を含むように設定される、
請求項１に記載の作業機械の遠隔操作システム。

【請求項3】

前記第１撮像範囲は、前記車体の前方に設定され、
前記第２撮像範囲は、前記車体の前方の下側に設定される、
請求項１又は請求項２に記載の作業機械の遠隔操作システム。

【請求項4】

前記第２撮像装置は前記第１撮像装置よりも下方に配置される、
請求項１から請求項３のいずれか一項に記載の作業機械の遠隔操作システム。

【請求項5】

前記車体の車幅方向において、前記第１撮像装置は前記第２撮像装置と等しい位置に配置される、
請求項１から請求項４のいずれか一項に記載の作業機械の遠隔操作システム。

【請求項6】

前記第１撮像装置は前記第２撮像装置よりも後方に配置される、
請求項１から請求項５のいずれか一項に記載の作業機械の遠隔操作システム。

【請求項7】

前記第２撮像範囲は、下方に移動した前記作業機のバケットを含むように設定される、
請求項２に記載の作業機械の遠隔操作システム。

【請求項8】

前記第２撮像範囲は、作業対象の少なくとも一部又は前記走行体が走行する地面を含むように設定される、
請求項２に記載の作業機械の遠隔操作システム。

【請求項9】

前記表示装置は、前記第２画像を前記第１画像の下部に重複するように表示する、
請求項１から請求項８のいずれか一項に記載の作業機械の遠隔操作システム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、作業機械の遠隔操作システムに関する。

【背景技術】

【0002】

作業機械に係る技術分野において、作業機械を遠隔操作する技術が知られている。作業機械の遠隔操作において、作業機械が稼働する作業現場の画像が撮像装置により撮像される。撮像装置により撮像された画像は、遠隔地に配置されている表示装置に表示される。遠隔地の操作者は、表示装置に表示された画像を見ながら、作業機械を遠隔操作する。特許文献１には、撮像装置が旋回体の運転室に配置され、運転室の前方の画像を撮像する技術が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１９－０６８２３６号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

遠隔地の操作者は、運転室の前方の状況のみならず、運転室の前側下方の状況を視認したい場合がある。撮像装置が運転室の前方の画像のみを撮像する場合、遠隔地の操作者は、運転室の前側下方の状況を視認することが困難となる可能性がある。

【0005】

本開示は、遠隔地の操作者が運転室の前側下方の状況を視認できることを目的とする。

【課題を解決するための手段】

【0006】

本開示に従えば、車体と、前記車体に配置され第１撮像範囲を撮像する第１撮像装置と、前記車体に配置され第２撮像範囲を撮像する第２撮像装置と、前記第１撮像範囲の第１画像及び前記第２撮像範囲の第２画像を遠隔地に送信する通信装置と、を備え、前記第２撮像範囲の少なくとも一部は、前記第１撮像範囲よりも下方に設定される、作業機械が提供される。

【発明の効果】

【0007】

本開示によれば、遠隔地の操作者が運転室の前側下方の状況を視認できる。

【図面の簡単な説明】

【0008】

【図1】図１は、実施形態に係る作業機械の遠隔操作システムを示す模式図である。

【図2】図２は、実施形態に係る作業機械を示す斜視図である。

【図3】図３は、実施形態に係る作業機械を示す側面図である。

【図4】図４は、実施形態に係る作業機械を示す平面図である。

【図5】図５は、実施形態に係る遠隔操作室を示す図である。

【図6】図６は、実施形態に係る作業機械の遠隔操作システムを示す機能ブロック図である。

【図7】図７は、実施形態に係る第１画像処理部の処理を説明するための図である。

【図8】図８は、実施形態に係る第２画像処理部の処理を説明するための図である。

【図9】図９は、実施形態に係る表示制御部の処理を説明するための図である。

【図10】図１０は、実施形態に係る作業機械の遠隔操作方法を示すフローチャートである。

【図11】図１１は、実施形態に係るコンピュータシステムを示すブロック図である。

【発明を実施するための形態】

【0009】

以下、本開示に係る実施形態について図面を参照しながら説明するが、本開示はこれに限定されない。以下で説明する実施形態の構成要素は適宜組み合わせることができる。また、一部の構成要素を用いない場合もある。

【0010】

実施形態においては、「左」、「右」、「前」、「後」、「上」、及び「下」の用語を用いて各部の位置関係について説明する。これらの用語は、作業機械１の旋回体３の中心を基準とした相対位置又は方向を示す。

【0011】

［遠隔操作システム］
図１は、実施形態に係る作業機械１の遠隔操作システム１００を示す模式図である。遠隔操作システム１００は、作業現場で稼動する作業機械１を遠隔操作する。作業現場として、鉱山又は採石場が例示される。

【0012】

遠隔操作システム１００の少なくとも一部は、遠隔操作室２００に配置される。遠隔操作室２００は、作業現場から離れた遠隔地に設置される。遠隔操作システム１００は、遠隔操作装置４０と、表示装置５０と、制御装置６０とを備える。

【0013】

遠隔操作装置４０は、遠隔操作室２００に配置される。遠隔操作装置４０は、遠隔操作室２００において操作者に操作される。操作者は、操縦シート４５に着座した状態で、遠隔操作装置４０を操作することができる。

【0014】

表示装置５０は、遠隔操作室２００に配置される。表示装置５０は、作業現場の画像を表示する。遠隔操作室２００の操作者は、作業現場の状況を直接視認することができない。遠隔操作室２００の操作者は、表示装置５０を介して作業現場の状況を視認することができる。

【0015】

操作者は、表示装置５０に表示される作業現場の画像を見ながら、遠隔操作装置４０を操作する。作業機械１は、遠隔操作装置４０によって遠隔操作される。

【0016】

制御装置６０は、遠隔操作室２００に配置される。制御装置６０は、コンピュータシステムを含む。

【0017】

作業機械１は、制御装置３００を備える。制御装置３００は、コンピュータシステムを含む。

【0018】

制御装置６０と制御装置３００とは、通信システム４００を介して通信する。通信システム４００として、インターネット（internet）、ローカルエリアネットワーク（ＬＡＮ：Local Area Network）、携帯電話通信網、及び衛星通信網が例示される。通信システム４００は、通信されるデータを中継する中継局を含んでもよい。

【0019】

［作業機械］
図２は、実施形態に係る作業機械１を示す斜視図である。図３は、実施形態に係る作業機械１を示す側面図である。図４は、実施形態に係る作業機械１を示す平面図である。実施形態においては、作業機械１が積込機械の一種である油圧ショベルであることとする。作業機械１は、作業現場において稼働する。作業機械１は、作業対象の掘削作業を実施する。作業対象として、土砂又は鉱石が例示される。また、作業現場において、運搬車両の一種であるダンプトラックが稼働する。作業機械１は、ダンプトラックに積荷を積み込む積込作業を実施する。積荷として、掘削作業により掘削された掘削物が例示される。

【0020】

図２、図３、及び図４に示すように、作業機械１は、走行体２と、走行体２に支持される旋回体３と、旋回体３に取り付けられる作業機４と、作業機４を駆動する油圧シリンダ５と、撮像装置３０とを備える。

【0021】

走行体２は、旋回体３を支持した状態で走行する。旋回体３は、作業機械１の車体である。走行体２は、旋回体３の下方に配置される。走行体２は、旋回体３を旋回可能に支持する。走行体２は、駆動輪２Ａと、従動輪２Ｂと、駆動輪２Ａ及び従動輪２Ｂに支持される履帯２Ｃとを有する。駆動輪２Ａ及び従動輪２Ｂのそれぞれは、回転軸ＤＸを中心に回転する。駆動輪２Ａ、従動輪２Ｂ、及び履帯２Ｃのそれぞれは、一対設けられる。駆動輪２Ａの回転により、履帯２Ｃが回転する。履帯２Ｃが回転することにより、走行体２が走行する。

【0022】

旋回体３は、走行体２に支持された状態で旋回軸ＲＸを中心に旋回可能である。旋回軸ＲＸは、上下方向に延伸する。旋回体３は、運転室３Ａと、ロアデッキ３Ｂと、ステップ３Ｃと、アッパデッキ３Ｄとを有する。運転室３Ａは、作業者が搭乗可能な旋回体３の内部空間である。運転室３Ａは、旋回体３の前部且つ上部に配置される。ロアデッキ３Ｂは、旋回体３の後部且つ下部に配置される。アッパデッキ３Ｄは、旋回体３の前部且つ上部に配置される。ステップ３Ｃは、ロアデッキ３Ｂとアッパデッキ３Ｄとを繋ぐ。アッパデッキ３Ｄは、運転室３Ａを囲むように配置される。アッパデッキ３Ｄの少なくとも一部は、運転室３Ａの前方に配置される。ロアデッキ３Ｂ、ステップ３Ｃ、及びアッパデッキ３Ｄのそれぞれに、柵状の手すり３Ｅが配置される。

【0023】

ロアデッキ３Ｂ、ステップ３Ｃ、及びアッパデッキ３Ｄのそれぞれは、作業者が通行可能な通路を含む。作業者は、ロアデッキ３Ｂ、ステップ３Ｃ、及びアッパデッキ３Ｄを通行して、運転室３Ａに搭乗することができる。

【0024】

また、旋回体３は、ラダー３Ｆを有する。ラダー３Ｆは、アッパデッキ３Ｄに繋がる。

【0025】

作業機４は、旋回体３の前部に取り付けられる。作業機４は、旋回軸ＲＸよりも前方に配置される。作業機４は、前方に延伸するように動作することができる。作業機４は、旋回体３に連結されるブーム４Ａと、ブーム４Ａに連結されるアーム４Ｂと、アーム４Ｂに連結されるバケット４Ｃとを含む。ブーム４Ａの基端部は、ピンを介して旋回体３の前部に連結される。アーム４Ｂの基端部は、ピンを介してブーム４Ａの先端部に連結される。バケット４Ｃの基端部は、ピンを介してアーム４Ｂの先端部に連結される。バケット４Ｃは、先端刃４Ｄを有する。バケット４Ｃにより作業対象が掘削される。

【0026】

ブーム４Ａは、ブーム回転軸ＡＸを中心に回転可能に旋回体３の前部に連結される。アーム４Ｂは、アーム回転軸ＢＸを中心に回転可能にブーム４Ａに連結される。バケット４Ｃは、バケット回転軸ＣＸを中心に回転可能にアーム４Ｂに連結される。

【0027】

ブーム回転軸ＡＸとアーム回転軸ＢＸとバケット回転軸ＣＸとは、平行である。ブーム回転軸ＡＸ、アーム回転軸ＢＸ、及びバケット回転軸ＣＸのそれぞれは、旋回体３の車幅方向に延伸する。

【0028】

実施形態において、作業機械１は、ローディングショベルである。ローディングショベルとは、バケット４Ｃの先端刃４Ｄが前方を向くようにバケット４Ｃがアーム４Ｂに取り付けられている油圧ショベルをいう。

【0029】

油圧シリンダ５は、ブーム４Ａを駆動するブームシリンダ５Ａと、アーム４Ｂを駆動するアームシリンダ５Ｂと、バケット４Ｃを駆動するバケットシリンダ５Ｃとを含む。ブームシリンダ５Ａの基端部は、旋回体３に連結される。ブームシリンダ５Ａの先端部は、ブーム４Ａに連結される。アームシリンダ５Ｂの基端部は、ブーム４Ａに連結される。アームシリンダ５Ｂの先端部は、アーム４Ｂに連結される。バケットシリンダ５Ｃの基端部は、ブーム４Ａに連結される。バケットシリンダ５Ｃの先端部は、バケット４Ｃに連結される。

【0030】

［撮像装置］
撮像装置３０は、作業現場を撮像して作業現場の画像を取得する。撮像装置３０は、旋回体３に配置される。

【0031】

撮像装置３０により取得される作業現場の画像として、作業機械１の作業対象の画像、作業機械１の少なくとも一部の画像、作業現場に存在する構造物の画像、作業機械１とは別の作業機械の画像、及び作業現場で働く作業者の画像が例示される。実施形態において、作業機械１の作業対象の画像は、作業機４の掘削対象の画像を含む。

【0032】

撮像装置３０は、光学系と、光学系を通過した光を受光するイメージセンサとを有する。イメージセンサは、ＣＣＤ（Couple Charged Device）イメージセンサ又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサを含む。

【0033】

実施形態において、撮像装置３０は、旋回体３に配置され第１撮像範囲Ｍ１を撮像する第１撮像装置３１と、旋回体３に配置され第２撮像範囲Ｍ２を撮像する第２撮像装置３２とを含む。第１撮像装置３１及び第２撮像装置３２のそれぞれは、旋回体３に固定される。第１撮像装置３１と第２撮像装置３２との相対位置は固定される。第２撮像装置３２は、第１撮像装置３１による第１撮像範囲Ｍ１の撮像と並行して、第２撮像範囲Ｍ２を撮像する。

【0034】

旋回体３の上下方向において、第２撮像装置３２は第１撮像装置３１よりも下方に配置される。すなわち、旋回体３の上下方向において、第２撮像装置３２の光学系の入射面は、第１撮像装置３１の光学系の入射面よりも下方に配置される。

【0035】

旋回体３の左右方向において、第１撮像装置３１は第２撮像装置３２と等しい位置に配置される。旋回体３の左右方向は、旋回体３の車幅方向に相当する。すなわち、旋回体３の左右方向において、第１撮像装置３１の光学系の入射面は、第２撮像装置３２の光学系の入射面と等しい位置に配置される。

【0036】

旋回体３の前後方向において、第１撮像装置３１は第２撮像装置３２よりも後方に配置される。すなわち、旋回体３の前後方向において、第１撮像装置３１の光学系の入射面は、第２撮像装置３２の光学系の入射面よりも後方に配置される。

【0037】

実施形態において、上下方向は、旋回軸ＲＸと平行な方向である。左右方向は、ブーム回転軸ＡＸと平行な方向である。前後方向は、ブーム回転軸ＡＸ及び旋回軸ＲＸの両方と直交する方向である。走行体２の接地面を基準として旋回体３が存在する方向が上方であり、上方の逆方向が下方である。旋回軸ＲＸを基準として左右方向の一方が右方であり、右方の逆方向が左方である。旋回軸ＲＸを基準として作業機４が存在する方向が前方であり、前方の逆方向が後方である。

【0038】

第１撮像装置３１は、旋回体３の前方を撮像する。第１撮像範囲Ｍ１は、旋回体３の前方に設定される。第２撮像装置３２は、旋回体３の前方を撮像する。第２撮像範囲Ｍ２は、旋回体３の前方に設定される。図３に示すように、第２撮像範囲Ｍ２の少なくとも一部は、第１撮像範囲Ｍ１よりも下方に設定される。実施形態において、第２撮像範囲Ｍ２は、旋回体３の前方の下側に設定される。図４に示すように、第２撮像範囲Ｍ２の少なくとも一部は、第１撮像範囲Ｍ１よりも右方に設定される。

【0039】

第１撮像範囲Ｍ１は、旋回体３の前方空間ＳＰ１を含む。前方空間ＳＰ１は、運転室３Ａの前方の空間、運転室３Ａの前側斜め上方の空間、前側斜め下方の空間、前側斜め左方の空間、及び前側斜め右方の空間を含む。

【0040】

第２撮像範囲Ｍ２は、前方空間ＳＰ１よりも下方の前側下方空間ＳＰ２を含む。前側下方空間ＳＰ２は、運転室３Ａよりも前側下方の空間である。前側下方空間ＳＰ２は、走行体２の前方の空間を含む。また、前側下方空間ＳＰ２は、前方空間ＳＰ１よりも右方の空間を含む。

【0041】

第２撮像範囲Ｍ２は、作業機械１による掘削作業において好適な画像が得られるように設定される。第２撮像範囲Ｍ２は、例えば旋回体３の前方の下側（足元）から地山又は崖のような掘削対象を含むように設定される。また、第２撮像範囲Ｍ２は、例えば掘削作業を実施するバケット４Ｃを含むように設定される。なお、第２撮像範囲Ｍ２は、上下方向において運転室３Ａよりも前方且つ運転室３Ａと実質的に同じ高さの空間を含むように設定されてもよい。なお、第２撮像範囲Ｍ２は、上下方向において運転室３Ａよりも前方且つ運転室３Ａよりも上方の空間を含むように設定されてもよい。

【0042】

第１撮像装置３１は、運転室３Ａの内側に配置される。実施形態において、第１撮像装置３１は、運転室３Ａの前部且つ上部に配置される。第１撮像装置３１は、運転室３Ａのフロントガラスを介して、旋回体３の前方空間ＳＰ１を撮像する。なお、第１撮像装置３１は、運転室３Ａの後部に配置されてもよいし、運転室３Ａの下部に配置されてもよい。

【0043】

第２撮像装置３２は、旋回体３のアッパデッキ３Ｄに配置される。アッパデッキ３Ｄの少なくとも一部は、運転室３Ａの前方に配置される。第２撮像装置３２は、旋回体３の前方のアッパデッキ３Ｄの下面に配置される。

【0044】

第１撮像装置３１は、第１撮像装置３１の光学系の光軸ＯＡ１が前後方向に延伸するように、運転室３Ａに配置される。第２撮像装置３２は、第２撮像装置３２の光学系の光軸ＯＡ２が前方に向かって下方に傾斜するように、アッパデッキ３Ｄの下面に配置される。また、図４に示すように、第２撮像装置３２は、第２撮像装置３２の光学系の光軸ＯＡ２が前方に向かって右方に傾斜するように、アッパデッキ３Ｄの下面に配置される。

【0045】

作業機４の少なくとも一部が第１撮像範囲Ｍ１に含まれる。すなわち、第１撮像範囲Ｍ１は、作業機４の少なくとも一部を含むように設定される。作業機４のバケット４Ｃは、所定の可動範囲において上下方向に移動する。第１撮像範囲Ｍ１は、上下方向に移動するバケット４Ｃを含むように設定される。

【0046】

また、作業機械１の作業対象の少なくとも一部が第１撮像範囲Ｍ１に含まれる。第１撮像範囲Ｍ１は、作業機械１の作業対象の少なくとも一部を含むように設定される。

【0047】

走行体２の少なくとも一部が第２撮像範囲Ｍ２に移動可能である。すなわち、第２撮像範囲Ｍ２は、走行体２の少なくとも一部を含むことができるように設定される。走行体２の回転軸ＤＸとブーム回転軸ＡＸとが平行になるように旋回体３が旋回した場合、第２撮像範囲Ｍ２は、走行体２の履帯２Ｃの前部を含むように設定される。なお、例えば旋回体３の旋回角度により、走行体２が第２撮像範囲Ｍ２に含まれない場合がある。

【0048】

また、第２撮像範囲Ｍ２は、下方に移動した作業機４のバケット４Ｃを含むように設定される。上述のように、バケット４Ｃは、所定の可動範囲において上下方向に移動する。第２撮像範囲Ｍ２は、可動範囲の下部に移動されたバケット４Ｃを含むように設定される。

【0049】

また、第２撮像範囲Ｍ２は、作業機械１の作業対象の少なくとも一部を含むように設定される。

【0050】

また、第２撮像範囲Ｍ２は、走行体２が走行する地面ＧＲを含むように設定される。

【0051】

実施形態において、第１撮像範囲Ｍ１と第２撮像範囲Ｍ２の少なくとも一部とは重複する。図３に示すように、第１撮像範囲Ｍ１の下部と第２撮像範囲Ｍ２の上部とが重複する。図４に示すように、第１撮像範囲Ｍ１の右部と第２撮像範囲Ｍ２の左部とが重複する。

【0052】

以下の説明において、第１撮像装置３１により撮像された第１撮像範囲Ｍ１の画像を適宜、第１画像Ｐ１、と称し、第２撮像装置３２により撮像された第２撮像範囲Ｍ２の画像を適宜、第２画像Ｐ２、と称する。

【0053】

［遠隔操作室］
図５は、実施形態に係る遠隔操作室２００を示す図である。図５に示すように、遠隔操作室２００に遠隔操作装置４０及び表示装置５０が配置される。

【0054】

遠隔操作装置４０は、操縦シート４５に着座した操作者に操作される。操作者は、表示装置５０の表示画面と正対するように操縦シート４５に着座する。操作者は、表示装置５０の表示画面を見ながら、遠隔操作装置４０を操作する。

【0055】

遠隔操作装置４０が操作されることにより生成された操作信号は、制御装置６０及び通信システム４００を介して作業機械１の制御装置３００に送信される。制御装置３００は、通信システム４００を介して取得した操作信号に基づいて、作業機械１を動作させる。作業機械１の動作は、走行体２の動作、旋回体３の動作、及び作業機４の動作の少なくとも一つを含む。

【0056】

走行体２の動作は、走行体２の前進動作及び後進動作を含む。旋回体３の動作は、旋回体３の左旋回動作及び右旋回動作を含む。作業機４の動作は、ブーム４Ａの上げ動作、ブーム４Ａの下げ動作、アーム４Ｂのダンプ動作、アーム４Ｂの掘削動作、バケット４Ｃの掘削動作、及びバケット４Ｃのダンプ動作を含む。

【0057】

遠隔操作装置４０は、旋回体３及び作業機４の動作のために操作される左作業レバー４１及び右作業レバー４２と、走行体２の動作のために操作される左走行ペダル４３及び右走行ペダル４４とを含む。左作業レバー４１は、操作者の左手により操作される。右作業レバー４２は、操作者の右手により操作される。左走行ペダル４３は、操作者の左足により操作される。右走行ペダル４４は、操作者の右足により操作される。

【0058】

左作業レバー４１は、操縦シート４５の左方に配置される。右作業レバー４２は、操縦シート４５の右方に配置される。一例として、左作業レバー４１が前後方向に操作されることにより、アーム４Ｂがダンプ動作又は掘削動作する。左作業レバー４１が左右方向に操作されることにより、旋回体３が左旋回動作又は右旋回動作する。右作業レバー４２が左右方向に操作されることにより、バケット４Ｃが掘削動作又はダンプ動作する。右作業レバー４２が前後方向に操作されることにより、ブーム４Ａが下げ動作又は上げ動作する。なお、左作業レバー４１が前後方向に操作されたときに旋回体３が右旋回動作又は左旋回動作し、左作業レバー４１が左右方向に操作されたときにアーム４Ｂがダンプ動作又は掘削動作してもよい。左作業レバー４１の操作方向及び右作業レバー４２の操作方向と作業機４の動作との関係は任意である。

【0059】

左走行ペダル４３及び右走行ペダル４４は、操縦シート４５の前側下方に配置される。左走行ペダル４３は、右走行ペダル４４の左方に配置される。左走行ペダル４３が操作されることにより、走行体２の左側の履帯２Ｃが前進動作又は後進動作する。右走行ペダル４４が操作されることにより、走行体２の右側の履帯２Ｃが前進動作又は後進動作する。

【0060】

また、遠隔操作室２００には、作業機械１の稼働状況を示す作業機械稼働データを表示する第１モニタ装置５０１と、作業機械１に搭載されている電気機器を作動させるために操作される操作スイッチ５０２とが配置される。第１モニタ装置５０１は、作業機械稼働データとして、例えば作業機械１に搭載されているエンジンの燃料の残量、エンジンの冷却液の温度、油圧シリンダ５を駆動するための作動油の温度、及び走行体２の走行速度を表示する。操作スイッチ５０２は、作業機械１に搭載されている電気機器として、例えば作業機械１に設けられている前照灯を作動させる。

【0061】

表示装置５０は、作業機械１から送信された第１画像Ｐ１及び第２画像Ｐ２を表示する。第１画像Ｐ１及び第２画像Ｐ２は、制御装置３００及び通信システム４００を介して、遠隔操作システム１００の制御装置６０に送信される。制御装置６０は、通信システム４００を介して取得した第１画像Ｐ１及び第２画像Ｐ２を表示装置５０に表示させる。表示装置５０は、第１画像Ｐ１とともに第２画像Ｐ２を表示する。実施形態において、表示装置５０は、第２画像Ｐ２を第１画像Ｐ１の一部に重複するように表示する。

【0062】

表示装置５０は、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）又は有機ＥＬディスプレイ（ＯＥＬＤ：Organic Electroluminescence Display）のようなフラットパネルディスプレイを含む。実施形態において、表示装置５０は、隣接するように配置された複数のフラットパネルディスプレイを含む。実施形態において、表示装置５０は、中央ディスプレイ５１と、中央ディスプレイ５１の左側に配置される左ディスプレイ５２と、中央ディスプレイ５１の右側に配置される右ディスプレイ５３と、中央ディスプレイ５１の上側に配置される上ディスプレイ５４と、中央ディスプレイ５１の下側に配置される下ディスプレイ５５とを含む。

【0063】

表示装置５０に表示される第１画像Ｐ１は、操作者が作業機械１の運転室３Ａに設けられている運転シートに着座したと仮定したときの操作者の前方空間の視界に相当する画像である。遠隔操作室２００の操作者は、作業機械１の運転シートに実際に着座している感覚を得ることができる。

【0064】

遠隔操作室２００の操作者は、遠隔操作装置４０を操作して作業機４を動作させて、作業対象を掘削する。作業機４のバケット４Ｃにより掘削された掘削物は、積荷としてダンプトラックに積み込まれる。

【0065】

実施形態において、ダンプトラックは、作業現場の管制施設から送信される制御指令に基づいて走行する無人ダンプトラックである。遠隔操作室２００には、作業現場における無人ダンプトラックの稼働状況を示すダンプトラック稼働データを表示する第２モニタ装置５０３が配置される。無人ダンプトラックには、無人ダンプトラックの位置データを検出する位置センサが配置される。位置センサは、全地球航法衛星システム（Global Navigation Satellite System：ＧＮＳＳ）を利用して無人ダンプトラックの絶対位置を検出する。第２モニタ装置５０３は、ダンプトラック稼働データとして、作業現場で稼動する複数の無人ダンプトラックのそれぞれの位置を表示する。また、操作者は、第２モニタ装置５０３に設けられている入力装置を操作して、無人ダンプトラックを停車させたり発車させたりすることができる。

【0066】

また、遠隔操作室２００には、作業機４のガイダンスデータを表示する第３モニタ装置５０４が配置される。ガイダンスデータとして、作業対象の目標設計面と作業機４との相対距離、作業対象の形状、及び作業対象の鉱石分布が例示される。

【0067】

［制御装置］
図６は、実施形態に係る作業機械１の遠隔操作システム１００を示す機能ブロック図である。図６に示すように、遠隔操作システム１００は、遠隔地に配置される通信装置６と、通信装置６に接続される制御装置６０と、制御装置６０に接続される遠隔操作装置４０と、制御装置６０に接続される表示装置５０とを備える。また、遠隔操作システム１００は、作業機械１に配置される通信装置７と、通信装置７に接続される制御装置３００と、制御装置３００に接続される撮像装置３０と、制御装置３００に接続されるセンサ７０と、制御装置３００により制御される走行体２と、制御装置３００により制御される旋回体３と、制御装置３００により制御される油圧シリンダ５とを備える。撮像装置３０は、第１撮像装置３１と、第２撮像装置３２とを含む。センサ７０は、位置センサ７１と、姿勢センサ７２と、角度センサ７３とを含む。

【0068】

制御装置３００は、走行体制御部３０１と、旋回体制御部３０２と、作業機制御部３０３と、画像データ送信部３０４と、センサデータ送信部３０５とを有する。

【0069】

走行体制御部３０１は、制御装置６０から送信された遠隔操作装置４０の操作信号を受信する。走行体制御部３０１は、遠隔操作装置４０の操作信号に基づいて、走行体２の動作を制御する制御信号を出力する。

【0070】

旋回体制御部３０２は、制御装置６０から送信された遠隔操作装置４０の操作信号を受信する。旋回体制御部３０２は、遠隔操作装置４０の操作信号に基づいて、旋回体３の動作を制御する制御信号を出力する。

【0071】

作業機制御部３０３は、制御装置６０から送信された遠隔操作装置４０の操作信号を受信する。作業機制御部３０３は、遠隔操作装置４０の操作信号に基づいて、作業機４の動作を制御する制御信号を出力する。作業機４を制御する制御信号は、油圧シリンダ５を制御する制御信号を含む。

【0072】

画像データ送信部３０４は、撮像装置３０により取得された作業現場の画像を制御装置６０に送信する。画像データ送信部３０４は、第１撮像範囲Ｍ１の第１画像Ｐ１を第１撮像装置３１から取得し、第２撮像範囲Ｍ２の第２画像Ｐ２を第２撮像装置３２から取得する。画像データ送信部３０４は、第１画像Ｐ１及び第２画像Ｐ２を制御装置６０に送信する。

【0073】

センサデータ送信部３０５は、作業機械１に搭載されているセンサ７０の検出データを制御装置６０に送信する。実施形態において、センサ７０は、旋回体３の位置を検出する位置センサ７１、旋回体３の姿勢を検出する姿勢センサ７２、及び作業機４の角度を検出する角度センサ７３を含む。位置センサ７１は、全地球航法衛星システム（Global Navigation Satellite System：ＧＮＳＳ）を利用して旋回体３の絶対位置を検出する。位置センサ７１は、旋回体３に設けられたＧＮＳＳ受信機を含む。姿勢センサ７２は、水平面に対する旋回体３の傾斜角度を検出する。姿勢センサ７２は、旋回体３に設けられた慣性計測装置（ＩＭＵ：Inertial Measurement Unit）を含む。角度センサ７３は、作業機４の角度を検出する。角度センサ７３は、旋回体３に対するブーム４Ａの角度を検出するブーム角度センサ、ブーム４Ａに対するアーム４Ｂの角度を検出するアーム角度センサ、及びアーム４Ｂに対するバケット４Ｃの角度を検出するバケット角度センサを含む。

【0074】

通信装置７は、通信システム４００を介して通信装置６と通信する。通信装置７は、通信装置６を介して制御装置６０から送信された遠隔操作装置４０の操作信号を受信して、制御装置３００に出力する。通信装置７は、画像データ送信部３０４から受信した第１撮像範囲Ｍ１の第１画像Ｐ１及び第２撮像範囲Ｍ２の第２画像Ｐ２を遠隔地の通信装置６に送信する。通信装置７は、第１画像Ｐ１の画像データ及び第２画像Ｐ２の画像データを圧縮するエンコーダを含む。第１画像Ｐ１及び第２画像Ｐ２のそれぞれは、圧縮された状態で、通信装置７から通信装置６に送信される。

【0075】

通信装置６は、通信システム４００を介して通信装置７と通信する。通信装置６は、遠隔操作装置４０が操作されることにより生成された操作信号を通信装置７に送信する。通信装置６は、通信装置７を介して制御装置３００から送信された第１画像Ｐ１及び第２画像Ｐ２を受信して、制御装置６０に出力する。通信装置６は、圧縮された第１画像Ｐ１の画像データ及び第２画像Ｐ２の画像データを復元するデコーダを含む。第１画像Ｐ１及び第２画像Ｐ２は、復元された状態で、通信装置６から制御装置６０に出力される。

【0076】

制御装置６０は、操作信号送信部６１と、画像データ受信部６２と、第１画像処理部６３と、第２画像処理部６４と、表示制御部６５とを有する。

【0077】

操作信号送信部６１は、作業機械１を遠隔操作する操作信号を送信する。遠隔操作装置４０が操作者に操作されることにより、作業機械１を遠隔操作する操作信号が生成される。操作信号送信部６１は、遠隔操作装置４０の操作信号を制御装置３００に送信する。

【0078】

画像データ受信部６２は、第１画像Ｐ１及び第２画像Ｐ２を受信する。画像データ受信部６２は、通信装置６のデコーダにより復元された第１画像Ｐ１及び第２画像Ｐ２を取得する。

【0079】

第１画像処理部６３は、画像データ受信部６２により受信された第１画像Ｐ１を分割する。

【0080】

図７は、実施形態に係る第１画像処理部６３の処理を説明するための図である。図７に示すように、画像データ受信部６２により第１画像Ｐ１が取得される。第１画像Ｐ１は、旋回体３の前方空間ＳＰ１の画像である。第１画像Ｐ１には、バケット４Ｃを含む作業機４の一部が映っている。また、第１画像Ｐ１には、旋回体３の前方の作業対象が映っている。また、第１画像Ｐ１には、アッパデッキ３Ｄの手すり３Ｅが映っている。

【0081】

第１画像処理部６３は、第１画像Ｐ１を複数の画像に分割する。第１画像処理部６３は、第１画像Ｐ１を、中央ディスプレイ５１に表示させるための画像Ｐ１１と、左ディスプレイ５２に表示させるための画像Ｐ１２と、右ディスプレイ５３に表示させるための画像Ｐ１３と、上ディスプレイ５４に表示させるための画像Ｐ１４と、下ディスプレイ５５に表示させるための画像Ｐ１５とに分割する。

【0082】

第２画像処理部６４は、画像データ受信部６２により受信された第２画像Ｐ２からインポーズ画像Ｐ２Ｓを生成する。

【0083】

図８は、実施形態に係る第２画像処理部６４の処理を説明するための図である。図８に示すように、画像データ受信部６２により第２画像Ｐ２が取得される。第２画像Ｐ２は、運転室３Ａの前側下方空間ＳＰ２の画像である。第２画像Ｐ２には、走行体２の履帯２Ｃの前部が映っている。また、第２画像Ｐ２には、バケット４Ｃを含む作業機４の一部が映っている。また、第２画像Ｐ２には、走行体２が走行する地面ＧＲの一部が映っている。第２撮像装置３２の第２撮像範囲Ｍ２に旋回体３は配置されない。第２画像Ｐ２には、アッパデッキ３Ｄ及び手すり３Ｅを含む旋回体３は映らない。

【0084】

第２画像処理部６４は、第２画像Ｐ２を縮小してインポーズ画像Ｐ２Ｓを生成する。

【0085】

表示制御部６５は、第１画像Ｐ１及び第２画像Ｐ２を表示装置５０に表示させる。表示制御部６５は、第１画像Ｐ１とともに第２画像Ｐ２を表示装置５０に表示させる。実施形態において、表示制御部６５は、第２画像Ｐ２が第１画像Ｐ１の一部に重複するように、第１画像Ｐ１とともに第２画像Ｐ２を表示装置５０に表示させる。

【0086】

図９は、実施形態に係る表示制御部６５の処理を説明するための図である。図９に示すように、表示制御部６５は、第１画像Ｐ１の一部である画像Ｐ１１を中央ディスプレイ５１に表示させる。表示制御部６５は、第１画像Ｐ１の一部である画像Ｐ１２を左ディスプレイ５２に表示させる。表示制御部６５は、第１画像Ｐ１の一部である画像Ｐ１３を右ディスプレイ５３に表示させる。表示制御部６５は、第１画像Ｐ１の一部である画像Ｐ１４を上ディスプレイ５４に表示させる。表示制御部６５は、第１画像Ｐ１の一部である画像Ｐ１５を下ディスプレイ５５に表示させる。

【0087】

表示制御部６５は、第２画像Ｐ２から生成されたインポーズ画像Ｐ２Ｓを第１画像Ｐ１の下部に重畳させて表示装置５０に表示させる。実施形態において、表示制御部６５は、インポーズ画像Ｐ２Ｓを画像Ｐ１５に重畳させて下ディスプレイ５５に表示させる。

【0088】

なお、実施形態において、表示制御部６５は、旋回体３の姿勢を示す車体データ画像Ｐ３、作業機４の姿勢を示す作業機データ画像Ｐ４、ダンプトラックに積み込まれる積荷の重量を示す積荷データ画像Ｐ５、及びバケット４Ｃの先端刃４Ｄの位置を示すバケットデータ画像Ｐ６を表示装置５０に表示させる。

【0089】

表示制御部６５は、姿勢センサ７２の検出データに基づいて、水平面に対する旋回体３の傾斜角度を算出する。表示制御部６５は、車体データ画像Ｐ３として、旋回体３の傾斜角度を示すシンボル画像を表示装置５０に表示させる。実施形態において、車体データ画像Ｐ３は、上ディスプレイ５４に表示される。

【0090】

また、表示制御部６５は、角度センサ７３の検出データに基づいて、作業機４の姿勢を算出する。表示制御部６５は、作業機データ画像Ｐ４として、作業機４の姿勢を示すアニメーション画像を表示装置５０に表示させる。実施形態において、作業機データ画像Ｐ４は、右ディスプレイ５３に表示される。

【0091】

また、表示制御部６５は、バケット４Ｃに保持された積荷の重量を検出する重量センサ（不図示）の検出データに基づいて、ダンプトラックに積み込まれる積荷の重量を算出する。表示制御部６５は、積荷データ画像Ｐ５として、積荷の重量を示すインジケータ画像を表示装置５０に表示させる。実施形態において、積荷データ画像Ｐ５は、右ディスプレイ５３に表示される。

【0092】

また、表示制御部６５は、角度センサ７３の検出データに基づいて、バケット４Ｃの先端刃４Ｄの上下方向の位置を算出する。表示制御部６５は、バケットデータ画像Ｐ６として、バケット４Ｃの先端刃４Ｄの上下方向の位置を示すインジケータ画像を表示装置５０に表示させる。実施形態において、バケットデータ画像Ｐ６は、右ディスプレイ５３に表示される。

【0093】

［遠隔操作方法］
図１０は、実施形態に係る作業機械１の遠隔操作方法を示すフローチャートである。以下、第１画像Ｐ１及び第２画像Ｐ２の処理方法について主に説明する。なお、上述のように、遠隔操作装置４０が操作されることにより、制御装置６０の操作信号送信部６１から制御装置３００に作業機械１を遠隔操作する操作信号が送信される。

【0094】

第１撮像装置３１は、旋回体３の前方空間ＳＰ１を含む第１撮像範囲Ｍ１を撮像する。第２撮像装置３２は、旋回体３の前側下方空間ＳＰ２を含む第２撮像範囲Ｍ２を撮像する。画像データ送信部３０４は、通信装置７及び通信システム４００を介して、第１画像Ｐ１及び第２画像Ｐ２を制御装置６０に送信する。第１画像Ｐ１及び第２画像Ｐ２のそれぞれは、圧縮された状態で、作業機械１から制御装置６０に送信される（ステップＳＡ１）。

【0095】

画像データ受信部６２は、作業機械１から送信された第１画像Ｐ１及び第２画像Ｐ２を、通信装置６を介して受信する。画像データ受信部６２は、復元された第１画像Ｐ１及び第２画像Ｐ２を受信する。

【0096】

第１画像処理部６３は、第１画像Ｐ１を画像Ｐ１１と画像Ｐ１２と画像Ｐ１３と画像Ｐ１４と画像Ｐ１５とに分割する（ステップＳＢ１）。

【0097】

第２画像処理部６４は、第２画像Ｐ２からインポーズ画像Ｐ２Ｓを生成する（ステップＳＢ２）。

【0098】

なお、ステップＳＢ１の処理の前にステップＳＢ２の処理が実施されてもよいし、ステップＳＢ１の処理とステップＳＢ２の処理とが並行して実施されてもよい。

【0099】

表示制御部６５は、表示装置５０に第１画像Ｐ１を表示させる。表示制御部６５は、中央ディスプレイ５１に画像Ｐ１１を表示させ、左ディスプレイ５２に画像Ｐ１２を表示させ、右ディスプレイ５３に画像Ｐ１３を表示させ、上ディスプレイ５４に画像Ｐ１４を表示させ、下ディスプレイ５５に画像Ｐ１５を表示させる。

【0100】

また、表示制御部６５は、表示装置５０に表示された第１画像Ｐ１の一部に、第２画像Ｐ２をインポーズさせる。すなわち、表示装置５０は、第２画像Ｐ２を第１画像Ｐ１の一部に重複するように表示する。第２画像Ｐ２は、第１画像Ｐ１の下部にインポーズされる。第２画像Ｐ２のインポーズ画像Ｐ２Ｓが、下ディスプレイ５５において画像Ｐ１５に重畳するように表示される（ステップＳＢ３）。

【0101】

［コンピュータシステム］
図１１は、実施形態に係るコンピュータシステム１０００を示すブロック図である。上述の制御装置６０及び制御装置３００のそれぞれは、コンピュータシステム１０００を含む。コンピュータシステム１０００は、ＣＰＵ（Central Processing Unit）のようなプロセッサ１００１と、ＲＯＭ（Read Only Memory）のような不揮発性メモリ及びＲＡＭ（Random Access Memory）のような揮発性メモリを含むメインメモリ１００２と、ストレージ１００３と、入出力回路を含むインターフェース１００４とを有する。上述の制御装置６０の機能及び制御装置３００の機能は、コンピュータプログラムとしてストレージ１００３に記憶されている。プロセッサ１００１は、コンピュータプログラムをストレージ１００３から読み出してメインメモリ１００２に展開し、プログラムに従って上述の処理を実行する。なお、コンピュータプログラムは、ネットワークを介してコンピュータシステム１０００に配信されてもよい。

【0102】

コンピュータプログラム又はコンピュータシステム１０００は、上述の実施形態に従って、旋回体３に配置された第１撮像装置３１に第１撮像範囲Ｍ１を撮像させて第１撮像範囲Ｍ１の第１画像Ｐ１を取得することと、旋回体３に配置された第２撮像装置３２に第２撮像範囲Ｍ２を撮像させて第２撮像範囲Ｍ２の第２画像Ｐ２を取得することと、第１画像Ｐ１及び第２画像Ｐ２を遠隔地に送信させることと、を実行することができる。

【0103】

［効果］
以上説明したように、実施形態によれば、作業機械１の旋回体３に第１撮像装置３１と第２撮像装置３２とが配置される。第１撮像装置３１は、第１撮像範囲Ｍ１を撮像する。第１撮像範囲Ｍ１は、旋回体３の前方に設定される。作業機４の少なくとも一部が第１撮像範囲Ｍ１に配置される。また、作業機械１の作業対象の少なくとも一部が第１撮像範囲Ｍ１に配置される。したがって、遠隔操作室２００の操作者は、表示装置５０に表示された第１撮像範囲Ｍ１の第１画像Ｐ１を見ながら、作業機４を使って作業対象の掘削作業を実施することができる。第２撮像装置３２は、第２撮像範囲Ｍ２を撮像する。第２撮像範囲Ｍ２は、旋回体３の前側下方に設定される。第２撮像装置３２の第２撮像範囲Ｍ２の少なくとも一部は、第１撮像装置３１の第１撮像範囲Ｍ１よりも下方に配置される。したがって、第１画像Ｐ１が前側下方空間ＳＰ２の画像を含んでいなくても、遠隔操作室２００の操作者は、表示装置５０に表示された第２撮像範囲Ｍ２の第２画像Ｐ２を見ることにより、前側下方空間ＳＰ２の状況を確認することができる。

【0104】

走行体２の少なくとも一部が第２撮像範囲Ｍ２に配置可能である。これにより、遠隔操作室２００の操作者は、表示装置５０に表示された第２画像Ｐ２を見て、走行体２の状況を確認することができる。

【0105】

下方に移動したバケット４Ｃが第２撮像範囲Ｍ２に配置される。これにより、遠隔操作室２００の操作者は、表示装置５０に表示された第２画像Ｐ２を見て、可動範囲の下部に移動したバケット４Ｃの状況を確認することができる。また、第２撮像範囲Ｍ２に作業機械１の作業対象が配置されることにより、遠隔操作室２００の操作者は、表示装置５０に表示された第２画像Ｐ２を見て、作業対象の状況を確認することができる。

【0106】

第１撮像範囲Ｍ１は第１撮像装置３１により撮像され、第２撮像範囲Ｍ２は第２撮像装置３２により撮像される。作業現場が第１撮像装置３１と第２撮像装置３２とにより撮像されることにより、作業現場の画像が第１画像Ｐ１と第２画像Ｐ２とに分割された状態で作業機械１から制御装置６０に送信される。したがって、作業機械１から制御装置６０に送信される第１画像Ｐ１のデータ量及び第２画像Ｐ２のデータ量のそれぞれは小さい。第１画像Ｐ１のデータ量及び第２画像Ｐ２のデータ量のそれぞれが小さいので、画像データの圧縮に要する時間、送信に要する時間、及び復元に要する時間のそれぞれが短縮される。例えば１つの撮像範囲に前方空間ＳＰ１及び前側下方空間ＳＰ２の両方が含まれるような画角が広い光学系を有する撮像装置を採用した場合、画像のデータ量が大きくなってしまう可能性がある。その結果、画像データの圧縮、送信、及び復元に要する時間が長くなってしまう可能性がある。実施形態によれば、画像データの圧縮、送信、及び復元に要する時間が短縮される。したがって、作業機械１の実際の動きに対して表示装置５０に表示される作業機械１の動きが遅延することが抑制される。そのため、遠隔操作室２００の操作者は、表示装置５０に表示された第１画像Ｐ１及び第２画像Ｐ２を見ながら、作業機械１を円滑に精度良く遠隔操作することができる。

【0107】

また、作業現場の画像が第１画像Ｐ１と第２画像Ｐ２とに分割された状態で作業機械１から制御装置６０に送信されることにより、第１画像Ｐ１及び第２画像Ｐ２を伝送する無線通信帯域を確保することができる。

【0108】

第２撮像装置３２は、アッパデッキ３Ｄの下面に配置される。これにより、第２撮像範囲Ｍ２にアッパデッキ３Ｄ及び手すり３Ｅを含む旋回体３は映り込まない。第２画像Ｐ２は、旋回体３を含まずに、走行体２、作業機４、及び地面ＧＲを含む画像になる。したがって、遠隔操作室２００の操作者は、表示装置５０に表示された第２画像Ｐ２を見て、旋回体３の前側下方空間ＳＰ２の状況を適正に認識することができる。

【0109】

表示装置５０は、第２画像Ｐ２のインポーズ画像Ｐ２Ｓを第１画像Ｐ１の下部に重複するように表示する。これにより、遠隔操作室２００の操作者は、第１画像Ｐ１及び第２画像Ｐ２のそれぞれを見て、前方空間ＳＰ１の状況と前側下方空間ＳＰ２の状況とを適正に認識することができる。

【0110】

［その他の実施形態］
上述の実施形態において、旋回体３の上下方向において、第２撮像装置３２は第１撮像装置３１よりも下方に配置されることとした。旋回体３の上下方向において、第２撮像装置３２は第１撮像装置３１よりも上方に配置されてもよいし、第１撮像装置３１と等しい位置に配置されてもよい。

【0111】

上述の実施形態において、旋回体３の左右方向において、第１撮像装置３１は第２撮像装置３２と等しい位置に配置されることとした。旋回体３の左右方向において、第１撮像装置３１は第２撮像装置３２よりも左方に配置されてもよいし、右方に配置されてもよい。

【0112】

上述の実施形態において、旋回体３の前後方向において、第１撮像装置３１は第２撮像装置３２よりも後方に配置されることとした。旋回体３の前後方向において、第１撮像装置３１は第２撮像装置３２よりも前方に配置されてもよいし、第２撮像装置３２と等しい位置に配置されてもよい。

【0113】

上述の実施形態において、第１撮像装置３１と第２撮像装置３２とが上下方向又は左右方向に隣接して配置され、第１撮像装置３１の光軸ＯＡ１の角度と第２撮像装置３２の光軸ＯＡ２の角度とが上下方向において異なるように配置されてもよい。また、第１撮像装置３１と第２撮像装置３２とが上下方向又は左右方向に隣接して配置され、第１撮像装置３１の光軸ＯＡ１の角度と第２撮像装置３２の光軸ＯＡ２の角度とが左右方向において異なるように配置されてもよい。

【0114】

上述の実施形態において、第２画像Ｐ２のインポーズ画像Ｐ２Ｓは、第１画像Ｐ１の下部に重複するように表示されることとした。インポーズ画像Ｐ２Ｓは、第１画像Ｐ１の上部に重複するように表示されてもよいし、第１画像Ｐ１の左部に重複するように表示されてもよいし、第１画像Ｐ１の右部に重複するように表示されてもよい。

【0115】

上述の実施形態において、第１画像Ｐ１と第２画像Ｐ２とは重複しなくてもよい。第１画像Ｐ１と第２画像Ｐ２とが表示装置５０に並んで表示されてもよい。

【0116】

上述の実施形態において、第１撮像装置３１は、運転室３Ａの外側に配置されてもよい。第１撮像装置３１は、旋回体３に配置されていればよい。

【0117】

上述のように、作業現場において無人ダンプトラックが稼働する場合がある。無人ダンプトラックは、作業現場の管制施設から送信される制御指令に基づいて走行する。上述の実施形態において、撮像装置３０により撮像された画像が、作業現場の管制施設に送信され、管制施設に設置されている表示装置に表示されてもよい。管制施設は、作業機械１の遠隔地に配置される。管制施設に存在する作業現場の管理者は、撮像装置３０により撮像された画像を見ることができる。

【0118】

上述の実施形態において、旋回体３（車体）は運転室３Ａを有することとした。旋回体３に運転室３Ａは無くてもよい。旋回体３に運転室３Ａが存在しない場合、第１撮像装置３１は、旋回体３の前部に配置される。

【0119】

上述の実施形態において、表示装置５０は、複数のディスプレイ（５１，５２，５３，５４，５５）を有することとした。表示装置５０は、１つのディスプレイにより構成されてもよい。また、ディスプレイは、フラットパネルディスプレイでもよいし、曲面パネルディスプレイでもよい。

【0120】

なお、上述の実施形態においては、作業機械１がローディングショベルであることとした。作業機械１はバックホウでもよい。また、上述の実施形態においては、作業機械１が車体として旋回体３を備えることとしたが、作業機械１の車体は旋回体でなくてもよい。作業機械１は、作業機を有する作業機械であればよく、ブルドーザでもよいし、ホイールローダでもよい。

【符号の説明】

【0121】

１…作業機械、２…走行体、２Ａ…駆動輪、２Ｂ…従動輪、２Ｃ…履帯、３…旋回体（車体）、３Ａ…運転室、３Ｂ…ロアデッキ、３Ｃ…ステップ、３Ｄ…アッパデッキ、３Ｅ…手すり、３Ｆ…ラダー、４…作業機、４Ａ…ブーム、４Ｂ…アーム、４Ｃ…バケット、４Ｄ…先端刃、５…油圧シリンダ、５Ａ…ブームシリンダ、５Ｂ…アームシリンダ、５Ｃ…バケットシリンダ、６…通信装置、７…通信装置、３０…撮像装置、３１…第１撮像装置、３２…第２撮像装置、４０…遠隔操作装置、４１…左作業レバー、４２…右作業レバー、４３…左走行ペダル、４４…右走行ペダル、４５…操縦シート、５０…表示装置、５１…中央ディスプレイ、５２…左ディスプレイ、５３…右ディスプレイ、５４…上ディスプレイ、５５…下ディスプレイ、６０…制御装置、６１…操作信号送信部、６２…画像データ受信部、６３…第１画像処理部、６４…第２画像処理部、６５…表示制御部、７０…センサ、７１…位置センサ、７２…姿勢センサ、７３…角度センサ、１００…遠隔操作システム、２００…遠隔操作室、３００…制御装置、３０１…走行体制御部、３０２…旋回体制御部、３０３…作業機制御部、３０４…画像データ送信部、３０５…センサデータ送信部、４００…通信システム、５０１…第１モニタ装置、５０２…操作スイッチ、５０３…第２モニタ装置、５０４…第３モニタ装置、１０００…コンピュータシステム、１００１…プロセッサ、１００２…メインメモリ、１００３…ストレージ、１００４…インターフェース、ＡＸ…ブーム回転軸、ＢＸ…アーム回転軸、ＣＸ…バケット回転軸、ＧＲ…地面、ＲＸ…旋回軸、Ｍ１…第１撮像範囲、Ｍ２…第２撮像範囲、ＯＡ１…光軸、ＯＡ２…光軸、Ｐ１…第１画像、Ｐ１１…画像、Ｐ１２…画像、Ｐ１３…画像、Ｐ１４…画像、Ｐ１５…画像、Ｐ２…第２画像、Ｐ２Ｓ…インポーズ画像、Ｐ３…車体データ画像、Ｐ４…作業機データ画像、Ｐ５…積荷データ画像、Ｐ６…バケットデータ画像、ＳＰ１…前方空間、ＳＰ２…前側下方空間。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】