特許 7484401 作業機械の遠隔操作支援システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-05-08

(45)【発行日】2024-05-16

(54)【発明の名称】作業機械の遠隔操作支援システム

(51)【国際特許分類】

   G09B 9/00 20060101AFI20240509BHJP

   E02F 3/43 20060101ALI20240509BHJP

   E02F 9/26 20060101ALI20240509BHJP

   H04Q 9/00 20060101ALI20240509BHJP

   E02F 9/20 20060101ALI20240509BHJP

   B25J 3/00 20060101ALI20240509BHJP

   B66C 13/40 20060101ALI20240509BHJP

【ＦＩ】

G09B9/00 K

E02F3/43 A

E02F9/26 B

H04Q9/00 301B

H04Q9/00 311H

E02F9/20 M

B25J3/00 Z

B66C13/40 Z

【請求項の数】 9

(21)【出願番号】P 2020084327

(22)【出願日】2020-05-13

(65)【公開番号】P2021179105

(43)【公開日】2021-11-18

【審査請求日】2023-02-06

(73)【特許権者】

【識別番号】000246273

【氏名又は名称】コベルコ建機株式会社

(74)【代理人】

【識別番号】110000800

【氏名又は名称】デロイトトーマツ弁理士法人

(72)【発明者】

【氏名】羽馬 涼太

(72)【発明者】

【氏名】大谷 真輝

【審査官】安田 明央

(56)【参考文献】

【文献】国際公開第２０１８／１２４０９８（ＷＯ，Ａ１）

【文献】特開平１１－１１９６４０（ＪＰ，Ａ）

【文献】特開２０１９－０６３９５２（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０９Ｂ ９／００

Ｂ２５Ｊ ３／００

Ｅ０２Ｆ ９／２０

Ｅ０２Ｆ ３／４３

Ｅ０２Ｆ ９／２６

Ｈ０４Ｑ ９／００

Ｂ６６Ｃ １３／４０

(57)【特許請求の範囲】

【請求項1】

作業機械の遠隔操作をシミュレーションするために用いられる遠隔操作支援システムであって、
画像を出力可能である遠隔出力インターフェースと、
遠隔操作機構の操作態様に応じた情報である疑似操作指令情報に基づいて、前記作業機械の姿勢が変化する様子を疑似的に表示する画像である疑似環境画像を生成する第１支援処理要素と、を備え、
前記第１支援処理要素は、前記遠隔操作機構における前記操作態様を認識する処理と、前記操作態様に基づいて疑似環境における前記作業機械の動作態様を認識する処理と、前記動作態様に応じて前記作業機械の姿勢変化を反映させた前記疑似環境画像を前記遠隔出力インターフェースに出力させる処理と、を含む第１支援処理を前記作業機械の遠隔操作の開始前に実行する、
遠隔操作支援システム。

【請求項2】

作業機械の遠隔操作をシミュレーションするために用いられる遠隔操作支援システムであって、
画像を出力可能である遠隔出力インターフェースと、
遠隔操作機構の操作に関する情報である疑似操作指令情報に基づいて、前記作業機械の姿勢が変化する様子を疑似的に表示する画像である疑似環境画像を生成する第１支援処理要素と、を備え、
前記第１支援処理要素は、前記遠隔操作機構を含む遠隔操作装置と、前記作業機械と、の間における通信環境の良し悪しに関する情報である通信情報を取得し、前記通信情報に応じて前記遠隔操作機構の入力に対して疑似環境における前記作業機械が遅れをもって動作する前記疑似環境画像を生成し、前記疑似環境画像を前記遠隔出力インターフェースに出力させる第１支援処理を実行する、
遠隔操作支援システム。

【請求項3】

請求項１又は請求項２に記載の遠隔操作支援システムであって、
前記第１支援処理要素は、前記作業機械の遠隔操作をシミュレーションするために操作された前記遠隔操作機構の入力に関する情報である第１指定操作情報に基づいて疑似環境画像を生成する、
遠隔操作支援システム。

【請求項4】

請求項１から請求項３の何れか１項に記載の遠隔操作支援システムであって、
前記作業機械を遠隔操作するために操作された前記遠隔操作機構の操作に関する情報である第２指定操作情報を取得し、前記第２指定操作情報に基づいて、前記作業機械の遠隔操作を可能とするための処理である第２支援処理を実行する第２支援処理要素を備える、
遠隔操作支援システム。

【請求項5】

請求項４に記載の遠隔操作支援システムであって、
前記第１支援処理要素は、前記第２支援処理要素が実行する前記第２支援処理よりも先に前記第１支援処理を実行する、
遠隔操作支援システム。

【請求項6】

請求項１から請求項５の何れか１項に記載の遠隔操作支援システムであって、
前記第１支援処理要素は、前記作業機械及び当該作業機械を用いて行う作業もしくはこれらのうち少なくとも一方を含む対象である作業対象を指定した時点である第１指定時点から当該作業機械と前記遠隔操作機構を有する遠隔操作装置とがネットワークを通じて接続された時点である第２指定時点までの期間における所定期間に前記第１支援処理を実行する、
遠隔操作支援システム。

【請求項7】

請求項１から請求項６の何れか１項に記載の遠隔操作支援システムであって、
前記第１支援処理要素は、遠隔操作対象として指定された前記作業機械の操作特性に関する情報である特性情報が格納されたデータベースから当該特性情報を取得し、当該特性情報と、前記遠隔操作機構の操作態様に関する情報である操作情報と、に基づいて、前記作業機械の姿勢が変化する様子を疑似的に表示する画像である前記疑似環境画像を生成し、前記疑似環境画像を前記遠隔出力インターフェースに出力するための前記第１支援処理を実行する、
遠隔操作支援システム。

【請求項8】

請求項１から請求項７の何れか１項に記載の遠隔操作支援システムであって、
前記第１支援処理要素は、前記遠隔操作機構の操作量に関する情報である操作情報を取
得し、前記遠隔操作機構の操作態様に関する情報である操作情報に基づいて、前記作業機械が有する作動機構の姿勢が変化する様子を疑似的に表示する画像である前記疑似環境画像を生成し、前記疑似環境画像を前記遠隔出力インターフェースに出力するための処理である前記第１支援処理を実行する、
遠隔操作支援システム。

【請求項9】

請求項１から請求項８の何れか１項に記載の遠隔操作支援システムであって、
前記第１支援処理要素は、前記遠隔操作機構の操作量に関する情報である操作情報を取
得し、前記操作情報に基づいて、前記作業機械が有する上部旋回体が旋回する様子を疑似的に表示する画像である前記疑似環境画像を前記遠隔出力インターフェースに出力するための処理である前記第１支援処理を実行する、
遠隔操作支援システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の遠隔操作支援装置は、作業機械を遠隔操作するオペレータを支援するシステムに関する。

【背景技術】

【0002】

オペレータの操作を直接受け付ける主操作部を有する遠隔操作装置と、操作器に対して通信可能に接続され操作器がオペレータから受け付けた操作量に基づいて作業機械の操作レバーを直接操作する従操作部が搭載される作業機械とにより構成される遠隔操作システムが知られている（例えば、特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【文献】特開平１０－２５２１０１号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

このような遠隔操作システムは、遠隔操作装置と作業機械との間で操作信号を通信することにより、操作器がオペレータから受け付けた操作量に基づいて従操作部が作業機械の操作レバーを操作することが可能となる。

【0005】

しかし、通信が確立し操作器が受け付けた操作量に基づいて従操作部が作業機械の操作レバーを操作する状態になるまでの間、オペレータは主操作部になす操作量に対して従操作部により操作される操作レバーの駆動による作業機械の挙動を把握することができない。この結果、通信確立後にオペレータが操作感覚を把握するまでの間、オペレータは主操作部を必要以上に慎重になって操作することになり、作業性が低下してしまう。

【0006】

そこで、本発明に係る遠隔操作支援装置はかかる背景に鑑みて、遠隔操作装置と作業機械との通信確立前にオペレータが作業機械の操作感覚を把握することができる遠隔操作装置及び遠隔操作支援システムを提供することを目的とする。

【課題を解決するための手段】

【0007】

（１）作業機械の遠隔操作をシミュレーションするために用いられる遠隔操作支援システムであって、
画像を出力可能である遠隔出力インターフェースと、
遠隔操作機構の操作態様に応じた情報である疑似操作指令情報に基づいて、前記作業機械の姿勢が変化する様子を疑似的に表示する画像である疑似環境画像を生成する第１支援処理要素と、を備え、
前記第１支援処理要素は、前記遠隔操作機構における前記操作態様を認識する処理と、前記操作態様に基づいて疑似環境における前記作業機械の動作態様を認識する処理と、前記動作態様に応じて前記作業機械の姿勢変化を反映させた前記疑似環境画像を前記遠隔出力インターフェースに出力させる処理と、を含む第１支援処理を前記作業機械の遠隔操作の開始前に実行する。

【0008】

（作用効果）
当該構成の遠隔操作支援システムによれば、オペレータは、自身が遠隔操作することを予定している作業機械を実際に遠隔操作する前に、その作業機械の操作を疑似的に体験（シミュレーション）することができるので、その作業機械の操作特性を把握することができる。また、自身が作業機械を実際に遠隔操作した後であっても、その作業機械の操作を疑似的に体験（シミュレーション）することができるので、その作業機械の操作特性を振り返ることができる。
（２）前記第１支援処理要素は、前記遠隔操作機構を含む遠隔操作装置と、前記作業機械と、の間における通信環境の良し悪しに関する情報である通信情報を取得し、前記通信情報に応じて前記遠隔操作機構の入力に対して疑似環境における前記作業機械が遅れをもって動作する前記疑似環境画像を生成し、前記疑似環境画像を前記遠隔出力インターフェースに出力させる第１支援処理を実行することが好ましい。
（作用効果）
かかる構成によれば、遠隔操作機構の操作に対して遠隔出力インターフェースに出力される疑似環境画像を通じて、オペレータが通信状況を把握することができる。

【0009】

（３）また、当該構成の遠隔操作支援システムにおいては、前記第１支援処理要素は、前記作業機械の遠隔操作をシミュレーションするために操作された前記遠隔操作機構の入力に関する情報である第１指定操作情報に基づいて疑似環境画像を生成することが好ましい。

【0010】

（作用効果）
かかる構成によれば、オペレータは、自身が遠隔操作することを予定している作業機械を実際に遠隔操作する前に、その作業機械の操作を疑似的に体験（シミュレーション）することができるので、その作業機械の操作特性を把握することができる。

【0011】

（４）また、当該構成の遠隔操作支援システムにおいては、前記作業機械を遠隔操作するために操作された前記遠隔操作機構の操作に関する情報である第２指定操作情報を取得し、前記第２指定操作情報に基づいて、前記作業機械の遠隔操作を可能とするための処理である第２支援処理を実行する第２支援処理要素を備えることが好ましい。

【0012】

（作用効果）
かかる構成によれば、オペレータは、実際に作業機械を遠隔操作することができる。

【0013】

（５）また、当該構成の遠隔操作支援システムにおいては、前記第１支援処理要素は、前記第２支援処理要素が実行する前記第２支援処理よりも先に前記第１支援処理を実行することが好ましい。

【0014】

（作用効果）
かかる構成によれば、オペレータは、実際に前記作業機械の遠隔操作をするよりも先に前記作業機械の遠隔操作をシミュレーションすることができる。すなわち、オペレータは、前記シミュレーションを行うことにより、前記作業機械の操作特性を予め把握することができる。従って、オペレータは、前記作業機械を遠隔操作する前に前記作業機械の操作特性を把握することができる。したがって、必要以上に慎重になって前記作業機械を遠隔操作せずに済むので、前記作業機械を用いて行う作業の作業性を上げることができる。

【0015】

（６）また、当該構成の遠隔操作支援システムにおいては、前記第１支援処理要素は、前記作業機械及び当該作業機械を用いて行う作業もしくはこれらのうち少なくとも一方を含む対象である作業対象を指定した時点である第１指定時点から当該作業機械と前記遠隔操作機構を有する遠隔操作装置とがネットワークを通じて接続された時点である第２指定時点までの期間における所定期間に前記第１支援処理を実行することが好ましい。

【0016】

（作用効果）
かかる構成によれば、オペレータは、自身が遠隔操作することを予定している作業機械か、自身が行うことを予定している作業のうち少なくとも一方を選択すれば、遠隔操作装置と作業機械が接続されるまでの間、その作業機械の遠隔操作をシミュレーションすることができる。すなわち、自身が前記作業対象を選択した時点から遠隔操作装置と作業機械が接続される時点までの待ち時間を使って、前記シミュレーションをすることができるので、前記作業機械を用いて行う作業の作業性を上げることができる。

【0017】

（７）また、当該構成の遠隔操作支援システムにおいては、前記第１支援処理要素は、遠隔操作対象として指定された前記作業機械の操作特性に関する情報である特性情報が格納されたデータベースから当該特性情報を取得し、当該特性情報と、前記遠隔操作機構の操作態様に関する情報である操作情報と、に基づいて、前記作業機械の姿勢が変化する様子を疑似的に表示する画像である前記疑似環境画像を生成し、前記疑似環境画像を前記遠隔出力インターフェースに出力するための前記第１支援処理を実行することが好ましい。

【0018】

（作用効果）
かかる構成によれば、オペレータは、作業機械の大きさや反応等の違いを鑑みた挙動（操作特性）を把握することができる。

【0019】

（８）また、当該構成の遠隔操作支援システムにおいては、前記第１支援処理要素は、前記遠隔操作機構の操作量に関する情報である操作情報を取得し、前記遠隔操作機構の操作態様に関する情報である操作情報に基づいて、前記作業機械が有する作動機構の姿勢が変化する様子を疑似的に表示する画像である前記疑似環境画像を生成し、前記疑似環境画像を前記遠隔出力インターフェースに出力するための処理である前記第１支援処理を実行することが好ましい。

【0020】

（作用効果）
かかる構成によれば、オペレータは、作業機械が有する作動機構の動作に関する操作特性を把握することが出来る。

【0021】

（９）また、当該構成の遠隔操作支援システムにおいては、前記第１支援処理要素は、前記遠隔操作機構の操作量に関する情報である操作情報を取得し、前記操作情報に基づいて、前記作業機械が有する上部旋回体が旋回する様子を疑似的に表示する画像である前記疑似環境画像を前記遠隔出力インターフェースに出力するための処理である前記第１支援処理を実行することが好ましい。

【0022】

（作用効果）
かかる構成によれば、オペレータは、作業機械の旋回特性を把握することができる。

【図面の簡単な説明】

【0023】

【図1】本発明に係る構成の遠隔操作支援装置の一実施形態としての遠隔操作支援システムの構成に関する説明図。

【図2】遠隔操作装置の構成に関する説明図。

【図3】作業機械の構成に関する説明図。

【図4】本発明に係る構成の遠隔操作支援装置の一実施形態としての第1支援処理要素の機能に関する説明図。

【図5】本発明に係る構成の遠隔操作支援装置の一実施形態としての第２支援処理要素の機能に関する説明図。

【図6】本発明に係る構成の遠隔操作支援装置の一実施形態としての疑似環境画像の表示態様に関する説明図。

【図7】他の実施形態としての本発明に係る構成の遠隔操作支援装置の一実施形態としての作動機構の曲げ伸ばしに関する疑似環境画像の表示態様に関する説明図。

【図8】他の実施形態としての本発明に係る構成の上部旋回体の旋回に関する疑似環境画像の表示態様に関する説明図。

【発明を実施するための形態】

【0024】

（遠隔操作支援システムの構成）
図１に示されている本発明に係る構成の遠隔操作支援装置の一実施形態としての遠隔操作支援システムは、遠隔操作支援サーバ１０と、作業機械４０を遠隔操作するための遠隔操作装置２０と、により構成されている。遠隔操作支援サーバ１０、遠隔操作装置２０、および作業機械４０は相互にネットワーク通信可能に構成されている。遠隔操作支援サーバ１０および遠隔操作装置２０の相互通信ネットワークと、遠隔操作支援サーバ１０および作業機械４０の相互通信ネットワークと、は同一であってもよく相違していてもよい。

【0025】

また、作業機械４０の台数は、1台でもよいし、複数台でもよい。また、作業機械４０の種類は、同型の作業機械でもよいし、異なる種類の作業機械でもよい。

【0026】

また、遠隔操作とは、オペレータが、作業機械４０に搭乗せずに、作業機械４０と離れた位置から作業機械４０を操作することを意味する概念である。

【0027】

また、オペレータとは、遠隔操作装置２０を操作して作業機械４０の操縦を行う者を指す概念である。

【0028】

（遠隔操作支援サーバの構成）
遠隔操作支援サーバ１０は、遠隔操作支援装置１００と、データベース１１０及びサーバ無線通信機器１２２と、を備えている。遠隔操作支援装置１００は、第１支援処理要素１０１と、第２支援処理要素１０２と、を備えている。各支援処理要素は、演算処理装置（シングルコアプロセッサまたはマルチコアプロセッサもしくはこれを構成するプロセッサコア）により構成され、メモリなどの記憶装置から必要なデータおよびソフトウェアを読み取り、当該データを対象として当該ソフトウェアにしたがった後述の演算処理を実行する。

【0029】

データベース１１０は、撮像画像データ等を記憶保持する。また、データベース１１０は、作業機械４０の属性と、当該作業機械４０が行うことを予定している作業内容に関する情報を紐づけて記憶保持してもよい。また、データベース１１０は、作業機械４０の一般的な操作特性に関する情報を記憶保持していてもよい。また、データベース１１０は、作業機械４０の一般的な操作特性に関する情報と、当該作業機械４０を用いて行う作業の一般的な作業内容に関する情報と、を紐づけて記憶保持してもよい。また、データベース１１０は、作業機械４０における特有の操作特性に関する情報を記憶保持していてもよい。また、データベース１１０は、作業機械４０における特有の操作特性に関する情報と、当該作業機械４０を用いて行う特有の作業内容に関する情報と、を紐づけて記憶保持してもよい。

【0030】

（遠隔操作装置の構成）
遠隔操作装置２０は、遠隔制御装置２００と、遠隔入力インターフェース２１０と、遠隔出力インターフェース２２０と、を備えている。遠隔制御装置２００は、演算処理装置（シングルコアプロセッサまたはマルチコアプロセッサもしくはこれを構成するプロセッサコア）により構成され、メモリなどの記憶装置から必要なデータおよびソフトウェアを読み取り、当該データを対象として当該ソフトウェアにしたがった演算処理を実行する。遠隔入力インターフェース２１０は、遠隔操作機構２１１を備えている。遠隔出力インターフェース２２０は、画像出力装置２２１と、遠隔無線通信機器２２２と、を備えている。

【0031】

遠隔操作機構２１１には、走行用操作装置と、旋回用操作装置と、ブーム用操作装置と、アーム用操作装置と、バケット用操作装置と、が含まれている。各操作装置は、回動操作を受ける操作レバーを有している。走行用操作装置の操作レバー（走行レバー）は、作業機械４０の作動機構４４０の１つである下部走行体４５０を動かすために操作される。走行レバーは、走行ペダルを兼ねていてもよい。例えば、走行レバーの基部または下端部に固定されている走行ペダルが設けられていてもよい。旋回用操作装置の操作レバー（旋回レバー）は、作業機械４０の作動機構４４０の１つである旋回機構４３０を構成する油圧式の旋回モータを動かすために操作される。ブーム用操作装置の操作レバー（ブームレバー）は、作業機械４０のブームシリンダ４４２を動かすために操作される。アーム用操作装置の操作レバー（アームレバー）は作業機械４０のアームシリンダ４４４を動かすために操作される。バケット用操作装置の操作レバー（バケットレバー）は作業機械４０のバケットシリンダ４４６を動かすために操作される。

【0032】

遠隔操作機構２１１を構成する各操作レバーは、例えば、図２に示されているように、オペレータが着座するためのシートＳｔの周囲に配置されている。シートＳｔは、アームレスト付きのハイバックチェアのような形態であるが、ヘッドレストがないローバックチェアのような形態、または、背もたれがないチェアのような形態など、オペレータが着座できる。任意の形態の着座部であってもよい。

【0033】

シートＳｔの前方に左右のクローラに応じた左右一対の走行レバー２１１０が左右横並びに配置されている。一つの操作レバーが複数の操作レバーを兼ねていてもよい。例えば、図２に示されているシートＳｔの左側フレームの前方に設けられている左側操作レバー２１１１が、前後方向に操作された場合にアームレバーとして機能し、かつ、左右方向に操作された場合に旋回レバーとして機能してもよい。同様に、図２に示されているシートＳｔの右側フレームの前方に設けられている右側操作レバー２１１２が、前後方向に操作された場合にブームレバーとして機能し、かつ、左右方向に操作された場合にバケットレバーとして機能してもよい。レバーパターンは、オペレータの操作指示によって任意に変更されてもよい。

【0034】

画像出力装置２２１は、例えば図２に示されているように、シートＳｔの前方、左斜め前方および右斜め前方のそれぞれに配置された略矩形状の画面を有する中央画像出力装置２２１０、左側画像出力装置２２１１および右側画像出力装置２２１２により構成されている。中央画像出力装置２２１０、左側画像出力装置２２１１および右側画像出力装置２２１２のそれぞれの画面（画像表示領域）の形状およびサイズは同じであってもよく相違していてもよい。

【0035】

図２に示されているように、中央画像出力装置２２１０の画面および左側画像出力装置２２１１の画面が傾斜角度θ１（例えば、１２０°≦θ１≦１５０°）をなすように、左側画像出力装置２２１１の右縁が、中央画像出力装置２２１０の左縁に隣接している。図２に示されているように、中央画像出力装置２２１０の画面および右側画像出力装置２２１２の画面が傾斜角度θ２（例えば、１２０°≦θ２≦１５０°）をなすように、右側画像出力装置２２１２の左縁が、中央画像出力装置２２１０の右縁に隣接している。当該傾斜角度θ１およびθ２は同じであっても相違していてもよい。

【0036】

中央画像出力装置２２１０、左側画像出力装置２２１１および右側画像出力装置２２１２のそれぞれの画面は、鉛直方向に対して平行であってもよく、鉛直方向に対して傾斜していてもよい。中央画像出力装置２２１０、左側画像出力装置２２１１および右側画像出力装置２２１２のうち少なくとも１つの画像出力装置が、複数に分割された画像出力装置により構成されていてもよい。例えば、中央画像出力装置２２１０が、略矩形状の画面を有する上下に隣接する一対の画像出力装置により構成されていてもよい。画像出力装置２２１（中央画像出力装置２２１０、左側画像出力装置２２１１および右側画像出力装置２２１２）は、スピーカ（音声出力装置）をさらに備えていてもよい。

【0037】

作業機械４０とは、作業現場において稼働可能な作業車両をいう。作業機械４０は、土砂を押土又は掘削を実施可能な建設機械の少なくとも一方を含む。建設機械は、バケットを有する油圧ショベル及びブレードを有するブルドーザーの少なくとも一方を含む。

【0038】

作業機械４０は、例えばクローラショベル（建設機械）であり、図３に示されているように、クローラ式の下部走行体４５０と、下部走行体４５０に旋回機構４３０を介して旋回可能に搭載されている上部旋回体４６０と、を備えている。上部旋回体４６０の前方左側部にはキャブ４２４（運転室）が設けられている。上部旋回体４６０の前方中央部には作動機構４４０が設けられている。

【0039】

実機入力インターフェース４１０は、実機操作機構４１１と、実機撮像装置４１２と、を備えている。実機操作機構４１１は、キャブ４２４の内部に配置されたシートの周囲に遠隔操作機構２１１と同様に配置された複数の操作レバーを備えている。遠隔操作レバーの操作態様に応じた信号を受信し、当該受信信号に基づいて実機操作レバーを動かす駆動機構またはロボットがキャブ４２４に設けられている。実機撮像装置４１２は、例えばキャブ４２４の内部に設置され、キャブ４２４の前側にある左右一対のピラー４２４０（左右を区別する場合には「Ｌ」および「Ｒ」を符号に含ませる。）により区画されているフロントウィンドウおよび左右一対のサイドウィンドウ越しに作動機構４４０の少なくとも一部を含む環境を撮像する。フロントウィンドウおよびサイドウィンドウのうち一部または全部が省略されていてもよい。

【0040】

実機出力インターフェース４２０は、実機無線通信機器４２２を備えている。

【0041】

作動機構４４０としての作業アタッチメントは、上部旋回体４６０に起伏可能に装着されているブーム４４１と、ブーム４４１の先端に回動可能に連結されているアーム４４３と、アーム４４３の先端に回動可能に連結されているバケット４４５と、を備えている。作動機構４４０には、伸縮可能な油圧シリンダにより構成されているブームシリンダ４４２、アームシリンダ４４４およびバケットシリンダ４４６が装着されている。

【0042】

ブームシリンダ４４２は、作動油の供給を受けることにより伸縮してブーム４４１を起伏方向に回動させるように当該ブーム４４１と上部旋回体４６０との間に介在する。アームシリンダ４４４は、作動油の供給を受けることにより伸縮してアーム４４３をブーム４４１に対して水平軸回りに回動させるように当該アーム４４３と当該ブーム４４１との間に介在する。バケットシリンダ４４６は、作動油の供給を受けることにより伸縮してバケット４４５をアーム４４３に対して水平軸回りに回動させるように当該バケット４４５と当該アーム４４３との間に介在する。

【0043】

（機能）
前記構成の遠隔操作支援システムの機能について図４及び図５に示されているフローチャートを用いて説明する。当該フローチャートにおいて「Ｃ●」というブロックは、記載の簡略のために用いられ、データの送信および／または受信を意味し、当該データの送信および／または受信を条件として分岐方向の処理が実行される条件分岐を意味している。

【0044】

図４に示されているフローチャートを用いて、本実施形態の第１支援処理について説明する。第１支援処理は、作業機械４０を遠隔操作するためのシミュレーションに関する処理である。

【0045】

遠隔操作装置２０において、遠隔制御装置２００は、本実施形態の第１支援処理の前提として、オペレータが、遠隔操作を意図する作業機械４０を指定する操作を行ったか否かの有無について判定をする（不示図）。当該判定結果が否定的である場合（不示図）、遠隔制御装置２００は、当該判定の処理を繰り返す。その一方、当該判定結果が肯定的である場合（不示図）、遠隔制御装置２００は、ＳＴＥＰ２１１以降の処理を実行する（不示図）。

【0046】

例えば、「作業機械４０を指定する操作」とは、オペレータが、中央画像出力装置２２１０に表示された複数の作業機械４０のうち、自身が遠隔操作することを意図している一又は複数の作業機械４０を、遠隔入力インターフェース２１０をタップ、プッシュ、ピンチ、スワイプ等して選択する操作を含む概念である。

【0047】

また、「作業機械４０を指定する操作」の他の例として、オペレータが、中央画像出力装置２２１０に表示された複数の作業のうち、自身が行うことを意図している一又は複数の作業を、遠隔入力インターフェース２１０をタップ、プッシュ等して選択する操作が挙げられる。

【0048】

この場合、例えば、各作業がどの作業機械４０にて行われるのかが予め定められており、一又は複数の作業が選択されることにより一又は複数の作業が行われる場合に遠隔操作される一又は複数の作業機械４０および各作業の開始時刻である指定時刻（第２指定時点）が自動的に決定されるようにてもよい。

【0049】

具体的には、法面形成作業が、広島市の作業現場に存在する油圧ショベルで行われることが予め定められており、当該法面形成作業が選択されることにより、当該法面形成作業が行われる場合に遠隔操作される当該油圧ショベルおよび当該法面形成作業の開始時刻である指定時刻である午前１０時が自動的に決定されるようにしてもよい。

【0050】

遠隔操作装置２０において、遠隔制御装置２００は、オペレータによる第１指定操作が行われたか否かについて判定する（図４／ＳＴＥＰ２１１）。また、「第１指定操作」とは、オペレータが、作業機械４０の遠隔操作をシミュレーションするために遠隔操作機構２１１を操作することを含む概念である。

【0051】

遠隔操作装置２０において、ＳＴＥＰ２１１の判定結果が否定的である場合（図４／ＳＴＥＰ２１１‥ＮＯ）、遠隔制御装置２００は、処理を終了する。その一方、当該判定結果が肯定的である場合（図４／ＳＴＥＰ２１１‥ＹＥＳ）、遠隔制御装置２００は、遠隔無線通信機器２２２を通じて、遠隔操作支援サーバ１０に対して作業機械４０の操作をシミュレーションするための要求（シミュレーション要求）に関する情報を含む第１操作信号が送信する（図４／ＳＴＥＰ２１２）。

【0052】

「第１操作信号」とは、オペレータが、作業機械４０の遠隔操作をシミュレーションするために遠隔入力インターフェース２１０を操作して入力したシミュレーション操作に関する信号を含む概念である。「第１操作信号」には、遠隔操作装置２０の識別子およびオペレータの識別子のうち少なくとも一方が含まれている。また、「第１操作信号」には、オペレータにより選択された作業機械４０の識別子が含まれている。

【0053】

ここで、遠隔操作装置２０の識別子とは、遠隔操作支援サーバ１０が、複数存在する遠隔操作装置２０の中から、どの遠隔操作装置２０と各データの送受信をすべきかを識別するための情報を含む概念である。

【0054】

また、オペレータの識別子とは、遠隔操作支援サーバ１０が、複数存在するオペレータの中から、どのオペレータと各データの送受信をすべきかを識別するための情報を含む概念である。

【0055】

また、作業機械４０の識別子とは、遠隔操作支援サーバ１０が、複数存在する作業機械４０の中から、どの作業機械４０と各データの送受信をすべきかを識別するための情報を含む概念である。

【0056】

遠隔操作支援サーバ１０において、サーバ無線通信機器１２２を通じて第１操作信号を取得した場合（図４／Ｃ１０）に、第１支援処理要素１０１は、疑似環境状況を認識する（図４／ＳＴＥＰ１１０）。

【0057】

疑似環境状況は、少なくともオペレータにより選択された作業機械４０の識別子を含む。また、仮想作業現場における作業機械４０の動作態様および環境変化態様が疑似環境状況として認識される。そして、第１支援処理要素１０１は、当該疑似環境状況に基づいて疑似環境データを遠隔操作装置２０に対して送信する（図４／ＳＴＥＰ１１１）。

【0058】

疑似環境データには、疑似環境画像又は疑似環境画像を生成するための情報が含まれる。疑似環境画像は、仮想作業現場における作業機械４０を疑似的に表示する画像であり、認識された動作態様および環境変化態様に応じて作業機械４０の姿勢変化を反映可能に表示する画像である。当該疑似環境画像は、例えば、コンピューターグラフィックスで表された作業機械４０の画像である（以下、適宜、疑似環境画像をシミュレーション画像と言ったり、ＣＧ画像と言ったり、バーチャル画像と言ったりする）。

【0059】

遠隔操作装置２０において、遠隔制御装置２００が、疑似環境データを受信する場合（図４／Ｃ２０）、疑似環境画像が遠隔出力インターフェース２２０（画像出力装置２２１）に出力される（図４／ＳＴＥＰ２１４）。

【0060】

これにより、例えば、図６に示すように、遠隔操作装置２０と連携する作業機械４０に搭載された実機撮像装置４１２により撮像されうる疑似環境画像が画像出力装置２２１において出力される。

【0061】

遠隔制御装置２００により、遠隔入力インターフェース２１０を通じた疑似環境画像出力の停止操作の有無が判定される（図４／ＳＴＥＰ２１５）。疑似環境画像出力の停止操作とは、例えば、オペレータが作業機械４０の操作シミュレーションを終了するための遠隔入力インターフェース２１０におけるタップ、プッシュ、ピンチ、スワイプ等の操作である。当該判定結果が肯定的である場合（図４／ＳＴＥＰ２１５‥ＹＥＳ）、遠隔制御装置２００により、疑似環境画像出力の停止要求が遠隔無線通信機器２２２を通じて遠隔操作支援サーバ１０に対して送信される（図４／ＳＴＥＰ２１６）。
その一方、当該判定結果が否定的である場合（図４／ＳＴＥＰ２１５‥ＮＯ）、遠隔制御装置２００により遠隔操作機構２１１の操作態様が認識され（図４／ＳＴＥＰ２１８）、かつ、遠隔無線通信機器２２２を通じて、当該操作態様に応じた疑似操作指令が遠隔操作支援サーバ１０に対して送信される（図４／ＳＴＥＰ２１９）。

【0062】

遠隔操作支援サーバ１０おいて、疑似操作指令が受信された場合（図４／Ｃ１０）、第１支援処理要素１０１により、当該疑似操作指令に応じた疑似環境状況が認識される（図４／ＳＴＥＰ１１０）。例えば、遠隔操作機構２１１の操作態様が、作業機械４０の作動機構４４０（ブーム４４１、アーム４４３、バケット４４５）を曲げ伸ばしさせる操作態様である場合、疑似環境において作動機構４４０がそのように動作する状況が疑似環境状況として認識される。

【0063】

第１支援処理要素１０１は、当該疑似環境状況に基づいて疑似環境画像を遠隔操作装置２０に対して送信する（図４／ＳＴＥＰ１１１）。そして、疑似環境画像出力の停止の受信の有無が判定される（図４／ＳＴＥＰ１１２）。当該判定結果が肯定的である場合（図４／ＳＴＥＰ１１２‥ＹＥＳ）、本実施形態のシミュレーションを終了する。当該判定結果が否定的である場合（図４／ＳＴＥＰ１１２‥ＮＯ）、オペレータが意図する作業の開始時刻である指定時刻（第２指定時点）になったか否かを判定する（図４／ＳＴＥＰ１１３）。当該判定結果が肯定的である場合（図４／ＳＴＥＰ１１３‥ＹＥＳ）、本実施形態のシミュレーションを終了する。当該判定結果が否定的である場合（図４／ＳＴＥＰ１１３‥ＮＯ）、疑似操作指令の受信以降の処理が繰り返される（図４／Ｃ１０→ＳＴＥＰ１１０→ＳＴＥＰ１１１→ＳＴＥＰ１１２→ＳＴＥＰ１１３）。

【0064】

遠隔操作装置２０において、遠隔出力インターフェース２２０を構成する遠隔無線通信機器２２２により疑似環境データが受信された場合（図４／Ｃ２０）、遠隔出力インターフェース２２０を構成する画像出力装置２２１において疑似環境画像が出力される（図４／ＳＴＥＰ２１４）これにより、例えば、図６に示すように、オペレータによる遠隔操作機構２１１の操作態様当該操作にあわせて、ブーム４４１のバーチャル画像４４１Ｖ、アーム４４３のバーチャル画像４４３Ｖ、バケット４４５のバーチャル画像４４５Ｖが、曲げ伸ばしされる様子が遠隔出力インターフェース２２０（画像出力装置２２１）に出力表示される。

【0065】

これにより、オペレータは、作動機構４４０（ブーム４４１、アーム４４３、バケット４４５）の操作感覚、すなわち、遠隔操作機構２１１の操作態様と、作業機械４０の作動機構４４０（ブーム４４１、アーム４４３、バケット４４５）の動作態様と、の相関関係を確かめることができる。

【0066】

また、図６に示すように、オペレータが作業機械４０の上部旋回体４６０を、オペレータの位置を基準として右方向に旋回させるように遠隔操作機構２１１を操作すると、当該操作にあわせて、当該旋回方向とは逆方向に（すなわち、オペレータの位置を基準として左方向に）作業現場における背景のバーチャル画像が変位する様子を遠隔出力インターフェース２２０（画像出力装置２２１）に出力してもよい。

【0067】

これにより、オペレータは、自身が遠隔操作することを意図している作業機械４０の操作感覚、すなわち、操作機構の操作態様と、作業機械の作動機構の動作態様と、の相関関係を確かめることができる。この場合、上部旋回体４６０のバーチャル画像４６０Ｖ（図７）の旋回にあわせて、作業現場の背景（作業現場に存在し、且つ自身が遠隔操作していないショベル、作業現場に存在する解体機、作業現場に存在するクレーン、ダンプトラック、ブルドーザー、ホイールローダ、砂山、岩、木、林、森、建物及び法面等）が流れるように（オペレータから見て右方向に変位するように）遠隔出力インターフェース２２０（画像出力装置２２１）に表示されるので、オペレータは、特に作動機構４４０（上部旋回体４６０）の操作感覚、すなわち、遠隔操作機構２１１の操作態様と、作業機械４０の作動機構４４０（上部旋回体４６０）の動作態様と、の相関関係を確かめることができる。

【0068】

図６に示すように、疑似環境画像の背景として、オペレータが作業することを意図している作業現場の様子が含まれてもよい。当該作業現場の様子は、実写の画像により、表されてもよいし、コンピューターグラフィックスで表された画像（ＣＧ画像）でもよい。当該疑似環境画像に背景を含ませる場合、第１支援処理要素１０１が、データベース１１０に当該作業機械４０の属性と紐づけて記憶保持された作業現場の様子に関する情報を呼び出し、当該情報に基づいて、当該疑似環境画像の背景を生成し、遠隔出力インターフェース２２０に表示するための処理を実行することにより、当該オペレータが作業をすることを意図している作業現場の疑似的な環境画像が、遠隔出力インターフェース２２０に出力される。

【0069】

例えば、図６に示すように、キャブ４２４の内部に設置された実機撮像装置４１２が撮像した撮像画像に基づいて、キャブ４２４の前側にある左右一対のピラー４２４０（左右を区別する場合には「Ｌ」および「Ｒ」を符号に含ませる。）のバーチャル画像４２４０Ｖ（４２４０ＲＶ、４２４０ＬＶ）により区画されているフロントウィンドウのバーチャル画像および左右一対のサイドウィンドウのバーチャル画像越しに作動機構４４０のバーチャル画像４４０Ｖ（４４１Ｖ、４４３Ｖ、４４５Ｖ）の少なくとも一部を含む疑似環境画像を表示してもよい。

【0070】

図７に示すように、側面視からの作業機械４０の姿勢を模した疑似環境画像を表示してもよい。例えば、オペレータが作業機械４０の作動機構４４０（ブーム４４１、アーム４４３、バケット４４５）を曲げ伸ばしさせるように遠隔操作機構２１１を操作する際に、図７に示される疑似環境画像が遠隔出力インターフェース２２０に出力される。図６に示すようなキャブ４２４の内部からの疑似環境画像の片隅に図７に示すような側面視からの疑似環境画像を表示してもよい。
これにより、オペレータは、図６に示すようなキャブ４２４の内部からの疑似環境画像では把握しにくい作業機械４０の作動機構４４０（ブーム４４１、アーム４４３、バケット４４５）の奥行き感を伴った動作態様を確かめることができる。

【0071】

図８に示すように、上面視からの作業機械４０の姿勢を模した疑似環境画像を表示してもよい。例えば、オペレータが作業機械４０の上部旋回体４６０をオペレータの位置を基準として左方向に旋回させるように遠隔操作機構２１１を操作すると、当該操作にあわせて、上部旋回体４６０のバーチャル画像４６０Ｖが、オペレータの位置を基準として左方向に旋回する様子が遠隔出力インターフェース２２０（画像出力装置２２１）に表示される。

【0072】

これにより、オペレータは、図６に示すようなキャブ４２４の内部からの疑似環境画像では把握しにくい作業機械４０の作動機構４４０（上部旋回体４６０）の旋回量（旋回角度）を伴った動作態様を確かめることができる。

【0073】

図５に示されているフローチャートを用いて、本実施形態の第２支援処理について説明する。第２支援処理は、作業機械４０を実際に遠隔操作するための処理である。

【0074】

遠隔操作装置２０において、遠隔制御装置２００は、遠隔入力インターフェース２１０を通じた第２指定操作の有無について判定する（図５／ＳＴＥＰ２２１）。「第２指定操作」は、例えば、オペレータが実際に遠隔操作する作業機械４０を指定するための遠隔入力インターフェース２１０におけるタップ、プッシュ等の操作である。「第２指定操作」の他の例として、オペレータが意図する作業を指定するための遠隔入力インターフェース２１０におけるタップ、プッシュ等の操作を含んでもよい。「第２指定操作」は、「第１指定操作」で指定された作業機械４０による遠隔操作を開始させるための操作である。

【0075】

当該判定結果が否定的である場合（図５／ＳＴＥＰ２２１‥ＮＯ）、遠隔制御装置２００は、第２指定操作の有無の判定以前の処理を繰り返す。その一方、当該判定結果が肯定的である場合（図５／ＳＴＥＰ２２１‥ＹＥＳ）、遠隔制御装置２００は、遠隔無線通信機器２２２を通じて、遠隔操作支援サーバ１０に対して環境確認要求を送信する（図５／ＳＴＥＰ２２２）。

【0076】

遠隔操作支援サーバ１０において、環境確認要求が受信された場合、第２支援処理要素１０２は、当該環境確認要求を該当する作業機械４０に対して送信する（図５／Ｃ１１０）。

【0077】

作業機械４０において、実機無線通信機器４２２を通じて環境確認要求が受信された場合（図５／Ｃ４０）、実機制御装置４００は、実機撮像装置４１２を通じて撮像画像を取得する（図５／ＳＴＥＰ４０２）。また、実機制御装置４００は、実機無線通信機器４２２を通じて、当該撮像画像を表わす撮像画像データを遠隔操作支援サーバ１０に対して送信する（図５／ＳＴＥＰ４０４）。

【0078】

遠隔操作支援サーバ１０において、撮像画像データが受信された場合（図５／Ｃ１２１）、第２支援処理要素１０２は、撮像画像データを遠隔操作装置２０に対して送信する（図５／ＳＴＥＰ１１４）。第２支援処理要素１０２は、撮像画像データに代えて、撮像画像に基づいて生成された模擬的な環境画像を表わす環境画像データを遠隔操作装置２０に対して送信してもよい。この際、第２支援処理要素１０２は、撮像画像データに応じた撮像画像の、画像出力装置２２１（中央画像出力装置２２１０、左側画像出力装置２２１１および右側画像出力装置２２１２）における分割表示態様の指令を遠隔操作装置２０に対して送信してもよい。

【0079】

遠隔操作装置２０において、遠隔制御装置２００は、遠隔無線通信機器２２２を通じて撮像画像データを受信した場合（図５／Ｃ２１）、撮像画像データに応じた撮像画像の、３つの画像出力装置２２１（中央画像出力装置２２１０、左側画像出力装置２２１１および右側画像出力装置２２１２）における分割表示態様を制御する（図５／ＳＴＥＰ２２３）。

【0080】

また、遠隔制御装置２００における撮像画像の出力制御の他の例として、中央画像出力装置２２１０、左側画像出力装置２２１１および右側画像出力装置２２１２に、撮像画像を分割表示せずに、１つの画像出力装置２２１（例えば、中央画像出力装置２２１０）のみに撮像画像を表示する出力制御の例が挙げられる。

【0081】

遠隔操作装置２０において、遠隔制御装置２００は、遠隔操作機構２１１の操作態様を認識し（図５／ＳＴＥＰ２２４）、かつ、遠隔制御装置２００は、遠隔無線通信機器２２２を通じて、当該操作態様に応じた遠隔操作指令を遠隔操作支援サーバ１０に対して送信する（図５／ＳＴＥＰ２２５）。

【0082】

遠隔操作支援サーバ１０において、第２支援処理要素１０２は、遠隔操作指令が受信された場合、当該遠隔操作指令を作業機械４０に対して送信する（図５／Ｃ１３２）。

【0083】

作業機械４０において、実機制御装置４００は、実機無線通信機器４２２を通じて操作指令が受信した場合（図５／Ｃ４２）、作動機構４４０等の動作を制御する（図５／ＳＴＥＰ４０６）。例えば、バケット４４５により作業機械４０の前方の土をすくい、上部旋回体４６０を旋回させたうえでバケット４４５から土を落とす作業が実行される。

【0084】

（効果）
当該構成の遠隔操作支援システム、ならびに、これを構成する遠隔操作支援サーバ１０および遠隔操作装置２０によれば、遠隔操作支援装置１００が有する第１支援処理要素１０１により生成された、作業機械４０の遠隔操作をシミュレーションするための疑似環境画像が遠隔出力インターフェース２２０（画像出力装置２２１）に出力表示される。第１支援処理要素１０１は、オペレータにより選択された作業機械４０の作業機械識別子に基づいて疑似環境データを生成し、当該疑似環境データに応じて疑似環境画像が遠隔出力インターフェース２２０に出力される。当該シミュレーションにおいては、遠隔操作機構の操作態様が認識され疑似操作指令が生成され、該疑似操作指令に基づいて疑似環境画像が出力される。

【0085】

また、第２支援処理要素１０２が作業機械４０を遠隔操作するための処理を実行する

【0086】

このため、オペレータは、実際に当該作業機械４０を遠隔操作する前に、遠隔出力インターフェース２２０（画像出力装置２２１）に表示される疑似環境画像を通じて、遠隔操作することを意図している作業機械４０の操作感覚、すなわち、遠隔操作機構２１１の操作態様と、作業機械４０における作動機構４４０の動作態様と、の相関関係を把握することができる。

【0087】

また、第１支援処理要素は、ＳＴＥＰ２１１にて作業機械４０及び作業機械４０を用いて行う作業もしくはこれらのうち少なくとも一方を含む対象である作業対象を指定した時点である第１指定時点から作業機械４０が遠隔入力インターフェース２１０を有する遠隔操作装置２０によりネットワークを通じて遠隔操作可能となる時点（実際に作業機械４０を遠隔操作することが可能となる時点）である第２指定時点までの期間における所定期間に前記第１支援処理を実行する。

【0088】

これにより、オペレータは、作業対象を選択した時点から遠隔操作装置２０により作業機械４０が遠隔操作可能となる時点（作業機械４０の遠隔操作をすることができる。ようになるまでの時点）までの時間を使って、その作業機械４０の遠隔操作をシミュレーションすることができる。すなわち、オペレータは、第１指定時点から第２指定時点までの待ち時間を有効に使うことができる。したがって、作業機械４０を用いて行う作業の作業性を上げることができる。

【0089】

また、データベース１１０に作業機械４０の一般的な操作特性に関する情報が記憶保持されている場合、作業機械４０の特有の操作特性に関する情報が無い場合であっても、オペレータは、作業機械４０の一般的な操作特性に関する情報に基づいて、作業機械４０の遠隔操作をシミュレーションすることができる。また、データベース１１０に作業機械４０における特有の操作特性に関する情報が記憶保持されている場合、オペレータは、作業機械４０における特有の操作特性に関する情報に基づいて、作業機械４０の遠隔操作をシミュレーションすることができるので、作業機械４０の一般的な操作特性に関する情報に基づいて、シミュレーションする場合に比べて、より具体的な情報に基づいて、シミュレーションをすることができる。

【0090】

（本発明に係る構成の遠隔操作支援装置の他の実施形態）
前記実施形態において、第1支援処理が遠隔操作装置２０と、遠隔操作支援サーバ１０と、により実行される例を説明したが、そのような例に限定されない。例えば、第1支援処理要素１０１は、作業機械４０と、遠隔操作支援サーバ１０と、遠隔操作装置２０と、におけるそれぞれの間における通信環境の良し悪しに関する情報である通信情報を取得し、該通信情報に応じて疑似環境画像を遠隔出力インターフェース２２０に表示する処理を実行してもよい。

【0091】

「通信情報」とは、作業機械４０、遠隔操作支援サーバ１０、遠隔操作装置２０、におけるそれぞれの間における電波強度の強弱に関する情報を含む概念であり、例えば、通信速度である。第1支援処理要素１０１は、通信情報に応じてオペレータが操作した遠隔操作機構２１１の入力に対して、疑似環境における作業機械４０が遅れをもって動作する。例えば、オペレータが作業機械４０の作動機構４４０（ブーム４４１、アーム４４３、バケット４４５）を曲げ伸ばしさせるように遠隔操作機構２１１を操作すると、疑似環境画像上では当該操作から遅れて作動機構４４０が動作する・

【0092】

このようなケースにも、当該構成の遠隔操作支援サーバ１０にかかる遠隔操作支援装置１００を適用することができる。これにより、オペレータは、実際に当該作業機械４０を遠隔操作する前に、遠隔操作機構２１１の操作に対して遠隔出力インターフェース２２０（画像出力装置２２１）に出力される疑似環境画像を通じて、通信状況を把握することができる。

【0093】

前記実施形態において、作業機械４０がバケット４４５を有する油圧ショベルである例を説明したが、そのような例に限定されない。作業機械４０の他の例として、バケット４４５の代わりに破砕装置を設けた解体機、バケット４４５の代わりにグラップラーを設けた土木作業機、クレーンが挙げられる。また、オペレータが遠隔操作することを意図している作業機械４０は、複数台存在してもよい。この場合、オペレータは、操作感覚、すなわち、遠隔操作機構２１１の操作態様と、作業機械４０の作動機構４４０の動作態様と、の相関関係の異なる作業機械４０の遠隔操作をシミュレーションし、遠隔操作機構２１１の操作態様と、作業機械４０における作動機構４４０の動作態様と、の相関関係に馴染むことができる。

【0094】

例えば、オペレータが、大型ショベルを遠隔操作した後、すぐにミニショベルを遠隔操作しようとする場合、ミニショベルの操作感覚、すなわち、操作機構の操作態様と、作業機械の作動機構の動作態様と、の相関関係は、大きく相違する。

【0095】

ところが、オペレータは、ミニショベルを遠隔操作する前に、当該ミニショベルの遠隔操作をシミュレーションすることで、当該ミニショベルの操作感覚、すなわち、操作機構の操作態様と、作業機械の作動機構の動作態様と、の相関関係に応じた遠隔入力インターフェース２１０の操作量を把握することができる。これにより、オペレータは、当該ミニショベルを実際に遠隔操作する場合に、すぐに当該ミニショベルの操作感覚、すなわち、操作機構の操作態様と、作業機械の作動機構の動作態様と、の相関関係に馴染むことができる。

【0096】

このようなケースにも、当該構成の遠隔操作支援サーバ１０にかかる遠隔操作支援装置１００を適用することができる。

【0097】

前記実施形態において、遠隔操作支援装置１００が遠隔操作支援サーバ１０に設けられる例を説明したが、そのような例に限定されない。例えば、遠隔制御装置２００及び実機制御装置４００又はこれらのうちの一方に、遠隔操作支援装置１００の機能の全部又は一部を担わせることができる。

【0098】

このようなケースにも、当該構成の遠隔操作支援サーバ１０にかかる遠隔操作支援装置１００を適用することができる。

【0099】

前記実施形態において、作動機構４４０にブーム４４１、アーム４４３、バケット４４５、上部旋回体４６０は含まれる例を示したが、そのような例に限定されない。作動機構４４０の他の例として、下部走行体４５０を含む例が挙げられる。この場合、前記実施形態における他のシミュレーションの例として、下部走行体４５０のバーチャル画像４５０Ｖを駆動させて作業機械４０のバーチャル画像４０Ｖを走行させる。これにより、オペレータは、作動機構４４０（下部走行体４５０）の操作感覚、すなわち、遠隔操作機構２１１の操作態様と、作業機械４０の作動機構４４０（下部走行体４５０）の動作態様と、の相関関係を確かめることができる。

【0100】

このようなケースにも、当該構成の遠隔操作支援サーバ１０にかかる遠隔操作支援装置１００を適用することができる。

【0101】

前記実施形態において、第２支援処理要素１０２が行う第２支援処理要素がＳＴＥＰ２２１から始まる例を示したが、そのような例に限定されない。第２支援処理要素１０２が行う第２支援処理要素の他の例として、ＳＴＥＰ２２１よりも先に、第２支援処理要素１０２が、第１支援処理要素１０１において第１支援処理が行われたか否かを判定する例が挙げられる。当該判定が肯定的な場合、第２支援処理要素１０２は、ＳＴＥＰ２２１の処理を行い、当該判定が否定的な場合、第２支援処理要素１０２は、当該判定以前の処理を繰り返す。これにより、オペレータは、作業機械４０における遠隔操作のシミュレーションを終えてから、実際に当該作業機械４０を遠隔操作することができる。すなわち、オペレータは、遠隔操作機構２１１の操作態様と、作業機械４０の作動機構４４０の動作態様と、の相関関係を確かめてから、実際に当該作業機械４０を遠隔操作することができる。従って、シミュレーションをせずに実際の遠隔操作をする場合に比べると、オペレータは、過度に注意を払わないで作業に取り掛かることができるので、作業効率を上げることができる。

【0102】

このようなケースにも、当該構成の遠隔操作支援サーバ１０にかかる遠隔操作支援装置１００を適用することができる。

【0103】

前記実施形態において、例えば、タブレットＰＣにより構成され遠隔操作装置２０と相互通信し遠隔操作装置２０の一部をなす手元端末が、遠隔入力インターフェース２１０および遠隔出力インターフェース２２０の一部を構成してもよい。この場合、オペレータは第１指定操作、第２指定操作、停止操作等の入力について手元端末を用いて行うことができる。

【0104】

前記実施形態において、遠隔操作支援サーバ１０において、第１支援処理要素１０１は、本実施形態の第１支援処理の前提として、シミュレーションの対象となる作業機械４０が、実際に遠隔操作されているか、又は使用予定が入っているかを判定するようにしてもよい。当該作業機械４０が、実際に遠隔操作されている場合（不示図）又はこれから使用される場合、第１支援処理要素１０１は、当該以前の処理を終了する。当該作業機械４０が、実際に遠隔操作されていない場合（不示図）又はこれから使用可能となる場合、第１支援処理要素１０１は、ＳＴＥＰ１１０以降の処理を実行する（不示図）。

【符号の説明】

【0105】

１０‥遠隔操作支援サーバ、２０‥遠隔操作装置、４０‥作業機械、１００‥遠隔操作支援装置、１０１‥第1支援処理要素、１０２‥第２支援処理要素。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】