(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024032802
(43)【公開日】2024-03-12
(54)【発明の名称】施工支援装置および施工支援方法
(51)【国際特許分類】
E02F 9/26 20060101AFI20240305BHJP
G06T 19/00 20110101ALI20240305BHJP
【FI】
E02F9/26 A
G06T19/00 A
【審査請求】未請求
【請求項の数】5
【出願形態】OL
(21)【出願番号】P 2024005668
(22)【出願日】2024-01-17
(62)【分割の表示】P 2022121870の分割
【原出願日】2022-07-29
(71)【出願人】
【識別番号】000246273
【氏名又は名称】コベルコ建機株式会社
(74)【代理人】
【識別番号】110000800
【氏名又は名称】デロイトトーマツ弁理士法人
(72)【発明者】
【氏名】関口 伸吾
(72)【発明者】
【氏名】高木 徳雄
(57)【要約】
【課題】地中埋設物を表現するための施工支援画像データのデータ量の低減を図りながら、当該埋設物の位置および姿勢のユーザによる把握の容易を図りうるように当該データを生成する装置等を提供する。
【解決手段】複数の地中探索エリアS
i1、S
i2、‥、S
im、S
im+1のうち少なくとも一部の地中探索エリアにおいて、地中探索機60により地表からの深さ位置が測定された地中埋設物の地中探索点P
1,‥P
i-1,P
i,P
i+1,‥P
n-1,P
nのそれぞれの深さが代表深さ位置に集約される。そして、当該複数の地中探索エリアS
i1、S
i2、‥、S
im、S
im+1のそれぞれに配置されている代表深さ位置を表わすオブジェクトとしての閉曲面m
1、m
2が含まれている3次元画像を表わす施工支援画像データが生成される。
【選択図】
図5
【特許請求の範囲】
【請求項1】
複数の地中探索エリアのそれぞれにおいて地中探索機により地表からの深さ位置が測定された地中埋設物の一または複数の地中探索点からなる地中探索点群のそれぞれの代表深さ位置を表わすように前記複数の地中探索エリアのそれぞれに配置されている複数のオブジェクトが含まれている3次元画像を表わす施工支援画像データを生成する
施工支援装置。
【請求項2】
請求項1に記載の施工支援装置において、
前記複数の地中探索エリアのそれぞれにおいて、前記代表深さ位置に配置されている複数の閉曲面が前記複数のオブジェクトとして含まれている3次元画像を表わす前記施工支援画像データを生成する
施工支援装置。
【請求項3】
請求項2に記載の施工支援装置において、
前記複数の地中探索エリアのうち、重複する複数の地中探索エリアのそれぞれにおける複数の前記閉曲面の合成結果に相当する単一の閉曲面が前記複数のオブジェクトの一部として含まれている3次元画像を表わす前記施工支援画像データを生成する
施工支援装置。
【請求項4】
請求項2に記載の施工支援装置において、
形状が同一である前記複数の閉曲面が含まれている3次元画像を表わす前記施工支援画像データを生成する
施工支援装置。
【請求項5】
請求項1に記載の施工支援装置において、
前記複数のオブジェクトのそれぞれの相対的な配置態様に応じて当該複数のオブジェクトを複数のオブジェクト群に分類し、前記複数のオブジェクトのそれぞれを所属先である一のオブジェクト群に応じた意匠により識別可能な3次元画像を表わす前記施工支援画像データを生成する
施工支援装置。
【請求項6】
請求項1に記載の施工支援装置において、
前記複数の地中探索エリアのそれぞれにおいて地表から前記代表深さ位置まで延在している複数の立体物が前記複数のオブジェクトとして含まれている3次元画像を表わす前記施工支援画像データを生成する
施工支援装置。
【請求項7】
請求項6に記載の施工支援装置において、
形状が同一である、または、水平面に対する投影結果の形状が同一である前記複数の立体物が含まれている3次元画像を表わす前記施工支援画像データを生成する
施工支援装置。
【請求項8】
請求項1に記載の施工支援装置において、
前記複数の地中探索エリアが相互に離間している
施工支援装置。
【請求項9】
複数の地中探索エリアのそれぞれにおいて地中探索機により地表からの深さ位置が測定された地中埋設物の一または複数の地中探索点からなる地中探索点群のそれぞれの代表深さ位置を決定する工程と、
前記代表深さ位置を表わすように前記複数の地中探索エリアのそれぞれに配置されている複数のオブジェクトが含まれている3次元画像を表わす施工支援画像データを生成する工程と、
を含んでいる施工支援方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、作業機械によって地中を掘削中に、地中埋設物を誤って損傷することを防止するための技術に関する。
【背景技術】
【0002】
油圧ショベルを用いて地表近くの地中に埋設された埋設物の周囲の土を掘削するに際して、埋設物を破損させることなく、しかも掘削作業を効率的に行うことのできる技術が提案されている(例えば、特許文献1参照)。具体的には、埋設管の絶対位置とバケット刃先の絶対位置との関係が決められ、この関係に基づいてバケットによる掘削位置および掘削深さが決定される。この決定された掘削位置および掘削深さを例えばモニタ表示することで、オペレータはモニタ表示を見ながら埋設物の破損を防止しつつ油圧ショベルの操作を確実に、かつ迅速に行うことができる。
【0003】
作業機による掘削の正確性及び効率性を向上させることができる技術が提案されている(例えば、特許文献2参照)。具体的には、レーダーが地表から所定の精度で探査を行うことができる深度である許容深度と、レーダーが探査を行った探査位置と、に基づいて、許容深度および作業装置が掘削作業を行う掘削位置がマップに表示される。例えば、1つの作業場内を複数の地中探索エリアに区分されたメッシュ型の作業場マップにおいて、各地中探索エリアに対応する分割データに対して、探査結果および許容深度を示す複数のグループ(複数のランク)が割り当てられている。作業場マップにおいて、各地中探索エリアQnに予め割り当てられたグループ(ランク)が識別できるように、グループ(ランク)が色、数値、文字等で示されている。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開2003-056010号公報
【特許文献2】特開2021-189127号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
地中埋設物の位置および姿勢をユーザに把握させるためには、2次元画像よりも3次元画像のほうが好ましいが、施工支援画像データはその情報量の豊富さゆえにデータ量が過多になる傾向がある。
【0006】
そこで、本発明は、地中埋設物を表現するための施工支援画像データのデータ量の低減を図りながら、当該埋設物の位置および姿勢のユーザによる把握の容易を図りうるように当該データを生成する装置等を提供することを目的とする。
【課題を解決するための手段】
【0007】
本発明の施工支援装置は、
複数の地中探索エリアのそれぞれにおいて地中探索機により地表からの深さ位置が測定された地中埋設物の一または複数の地中探索点からなる地中探索点群のそれぞれの代表深さ位置を表わすように前記複数の地中探索エリアのそれぞれに配置されている複数のオブジェクトが含まれている3次元画像を表わす施工支援画像データを生成する。
【0008】
当該構成の施工支援装置によれば、複数の地中探索エリアのうち少なくとも一部の地中探索エリアにおいて、地中探索機により地表からの深さ位置が測定された地中埋設物の地中探索点のそれぞれの深さが代表深さ位置に集約される。「複数の地中探索エリア」は、例えば、相互に離間している複数のメッシュ状の地中探索エリアなどあらかじめ定められている地中探索エリアであってもよく、地中探索機が所定時間間隔または所定距離ごとに占有している地中探索エリアであってもよい。そして、当該複数の地中探索エリアのそれぞれに配置されている代表深さ位置を表わすオブジェクトが含まれている3次元画像を表わす施工支援画像データが生成される。
【0009】
これにより、地中探索機によるすべての地中探索点の深さ位置のそれぞれを表わす複数のオブジェクトが含まれている施工支援画像データが生成される場合と比較して、施工支援画像データのデータ量の低減が図られている。出力インターフェースに出力された施工支援画像データに応じた施工支援画像(3次元画像)における複数のオブジェクトの空間占有態様を通じて、当該出力インターフェースに接したユーザに3次元実空間における地中埋設物の空間占有態様を把握させることができる。
【0010】
さらに、各オブジェクトは該当する代表深さ位置を表わすように別個独立に配置されていればよく、複数のオブジェクトの間の相対的な位置および姿勢が調節される必要がない分だけ、施工支援画像データの生成処理に要する演算処理負荷の軽減が図られる。
【0011】
前記構成の施工支援装置において、
前記複数の地中探索エリアのそれぞれにおいて、前記代表深さ位置を表わす地表からの深さ位置に配置されている複数の閉曲面が前記複数のオブジェクトとして含まれている3次元画像を表わす前記施工支援画像データを生成する
ことが好ましい。
【0012】
当該構成の施工支援装置によれば、施工支援画像データに含まれているオブジェクトが閉曲面であるため、当該施工支援画像データのデータ量の低減が図られている。「閉曲面」とは、閉曲線により囲まれた平面および曲面を包含する概念である。特に、閉曲面が平面である場合、施工支援画像データのデータ量のさらなる低減が図られる。出力インターフェースに出力される3次元画像に含まれている、3次元仮想空間の複数の地中探索エリアのそれぞれにおける複数の閉曲面の配置態様を通じて、当該出力インターフェースに接したユーザに3次元実空間における地中埋設物の地表からの深さ位置を含めた空間占有態様を把握させることができる。
【0013】
前記構成の施工支援装置において、
前記複数の地中探索エリアのうち、重複する複数の地中探索エリアのそれぞれにおける複数の前記閉曲面の合成結果に相当する単一の閉曲面が前記複数のオブジェクトの一部として含まれている3次元画像を表わす前記施工支援画像データを生成する
ことが好ましい。
【0014】
当該構成の施工支援装置によれば、重複する複数の地中探索エリアのそれぞれに対応する複数の閉曲面が単一の閉曲面に集約される分だけ、施工支援画像データのデータ量の低減が図られる。例えば、複数の地中探索エリアのそれぞれにおける地表からの深さ位置が同一またはほぼ同一の水平な複数の閉曲面が、当該複数の閉曲面と深さ位置が同一またはほぼ同一の、当該複数の地中探索エリアをカバーする水平なまたはほぼ水平な単一の平面として出力インターフェースに出力される。また、複数の地中探索エリアのそれぞれにおける地表からの深さ位置が異なる水平な複数の閉曲面が、当該深さ位置の相違に応じて水平に対して傾斜した、当該複数の地中探索エリアをカバーする単一の平面として出力インターフェースに出力される。
【0015】
前記構成の施工支援装置において、
形状が同一である前記複数の閉曲面が含まれている3次元画像を表わす前記施工支援画像データを生成する
ことが好ましい。
【0016】
当該構成の施工支援装置によれば、複数の閉曲面のそれぞれの形状が共通化されることにより、当該複数の閉曲面の表現が簡易化され、その分だけ施工支援画像データのデータ量の低減が図られる。
【0017】
前記構成の施工支援装置において、
前記複数のオブジェクトのそれぞれの相対的な配置態様に応じて当該複数のオブジェクトを複数のオブジェクト群に分類し、前記複数のオブジェクトのそれぞれを所属先である一のオブジェクト群に応じた意匠により識別可能な3次元画像を表わす前記施工支援画像データを生成する
ことが好ましい。
【0018】
当該構成の施工支援装置によれば、複数のオブジェクト群のうち共通のオブジェクト群を構成する複数のオブジェクトの意匠の共通化が図られる分だけ、施工支援画像データのデータ量の低減が図られている。「意匠」とは、色、形状(サイズを含む。)もしくは模様またはこれらの任意の組み合わせを意味し、静的意匠のほか動的意匠をも包含する概念である。
【0019】
前記構成の施工支援装置において、
前記複数の地中探索エリアのそれぞれにおいて地表から前記代表深さ位置まで延在している複数の立体物が前記複数のオブジェクトとして含まれている3次元画像を表わす前記施工支援画像データを生成する
ことが好ましい。
【0020】
当該構成の施工支援装置によれば、複数の地中探索エリアのそれぞれにおいて地表から代表深さ位置まで延在するという共通の規則を複数の立体物が有している分だけ、このような共通の規則が存在しないオブジェクトが含まれる場合と比較して施工支援画像データのデータ量の低減が図られる。
【0021】
前記構成の施工支援装置において、
形状が同一である、または、水平面に対する投影結果の形状が同一である前記複数の立体物が含まれている3次元画像を表わす前記施工支援画像データを生成する
ことが好ましい。
【0022】
当該構成の施工支援装置によれば、複数の立体物のそれぞれの形状、または、各立体物の水平面(または地表面)への投影結果の形状が共通化されることにより、当該複数の立体物の形状および姿勢の表現が簡易化され、その分だけ施工支援画像データのデータ量の低減が図られる。
【0023】
前記構成の施工支援装置において、
前記複数の地中探索エリアが相互に離間している
ことが好ましい。
【0024】
当該構成の施工支援装置によれば、境界線を介して隣接している複数の地中探索エリアのそれぞれに配置される複数のオブジェクトを表わす3次元画像データのうち当該境界線の少なくとも一部を表わすデータが共通していることに由来して、当該3次元画像データが処理される際に誤認されることが回避されうる。
【図面の簡単な説明】
【0025】
【
図5】施工支援装置(施工支援システム)の機能に関する説明図。
【
図6】作業環境画像および施工支援画像に関する説明図。
【
図7A】複数の地中探索エリアの固定的な配置態様に関する説明図。
【
図7B】複数の地中探索エリアの流動的な配置態様に関する説明図。
【
図8A】重複度が閾値以上である地中探索エリアの処理方法に関する説明図。
【
図8B】重複度が閾値未満である地中探索エリアの第1処理方法に関する説明図。
【
図8C】重複度が閾値未満である地中探索エリアの第2処理方法に関する説明図。
【
図10】施工支援画像の他の実施形態に関する説明図。
【発明を実施するための形態】
【0026】
(施工支援装置の構成)
図1に示されている施工支援システムは、本発明の一実施形態としての施工支援装置10と、施工支援装置10と相互にネットワーク通信可能に構成されている遠隔操作装置20、作業機械40および地中探索機60と、により構成されている。施工支援装置が、施工支援装置10と、遠隔操作装置20、作業機械40および地中探索機60のうち1つまたは2つと、により構成されていてもよい。施工支援装置10および遠隔操作装置20の相互通信ネットワークと、施工支援装置10および作業機械40の相互通信ネットワークと、施工支援装置10および地中探索機60の相互通信ネットワークと、は同一であってもよく相違していてもよい。
【0027】
(施工支援装置の構成)
施工支援装置10は、一または複数のコンピュータまたはサーバコンピュータにより構成されている。
図1に示されているように、施工支援装置10は、データベース102と、地中探索結果認識要素120と、代表深さ位置決定要素121と、施工支援画像データ生成要素122と、を備えている。データベース102は、撮像画像データのほか、施工対象領域の地中埋設物の探索結果等を記憶保持する。データベース102は、施工支援装置10とは別個のデータベースサーバにより構成されていてもよい。施工支援装置10の各構成要素は、演算処理装置(シングルコアプロセッサまたはマルチコアプロセッサもしくはこれを構成するプロセッサコア)により構成され、メモリなどの記憶装置から必要なデータおよびソフトウェアを読み取り、当該データを対象として当該ソフトウェアにしたがった後述の演算処理を実行する。
【0028】
本発明の構成要素が情報(またはデータ)を「認識する」とは、当該情報を受信、読み取りまたは検索等により取得すること、基礎となるデータまたは信号に対して演算処理を実行することにより当該情報を決定、測定、同定、推定、予測等することなど、当該情報を後続の演算処理の実行に際して利用可能な形態で準備するあらゆる処理を包含する概念である。
【0029】
(遠隔操作装置の構成)
図1に示されているように、遠隔操作装置20は、遠隔制御装置200と、遠隔入力インターフェース210と、遠隔出力インターフェース220と、を備えている。遠隔制御装置200は、演算処理装置(シングルコアプロセッサまたはマルチコアプロセッサもしくはこれを構成するプロセッサコア)により構成され、メモリなどの記憶装置から必要なデータおよびソフトウェアを読み取り、当該データを対象として当該ソフトウェアにしたがった演算処理を実行する。
【0030】
遠隔入力インターフェース210は、遠隔操作機構211を備えている。遠隔出力インターフェース220は、遠隔画像出力装置221と、遠隔音響出力装置222と、遠隔無線通信機器224と、を備えている。
【0031】
遠隔操作機構211には、走行用操作装置と、旋回用操作装置と、ブーム用操作装置と、アーム用操作装置と、バケット用操作装置と、が含まれている。各操作装置は、回動操作を受ける操作レバーを有している。走行用操作装置の操作レバー(走行レバー)は、作業機械40の下部走行体41を動かすために操作される。走行レバーは、走行ペダルを兼ねていてもよい。例えば、走行レバーの基部または下端部に固定されている走行ペダルが設けられていてもよい。旋回用操作装置の操作レバー(旋回レバー)は、作業機械40の旋回機構43を構成する油圧式の旋回モータを動かすために操作される。ブーム用操作装置の操作レバー(ブームレバー)は、作業機械40のブームシリンダ442を動かすために操作される。アーム用操作装置の操作レバー(アームレバー)は作業機械40のアームシリンダ444を動かすために操作される。バケット用操作装置の操作レバー(バケットレバー)は作業機械40のバケットシリンダ446を動かすために操作される。
【0032】
遠隔操作機構211を構成する各操作レバーは、例えば、
図2に示されているように、オペレータが着座するためのシートStの周囲に配置されている。シートStは、アームレスト付きのハイバックチェアのような形態であるが、ヘッドレストがないローバックチェアのような形態、または、背もたれがないチェアのような形態など、オペレータが着座できる任意の形態の着座部であってもよい。
【0033】
シートStの前方に左右のクローラに応じた左右走行レバー2110が左右横並びに配置されている。一つの操作レバーが複数の操作レバーを兼ねていてもよい。例えば、
図2に示されているシートStの左側フレームの前方に設けられている左側操作レバー2111が、前後方向に操作された場合にアームレバーとして機能し、かつ、左右方向に操作された場合に旋回レバーとして機能してもよい。同様に、
図2に示されているシートStの右側フレームの前方に設けられている右側操作レバー2112が、前後方向に操作された場合にブームレバーとして機能し、かつ、左右方向に操作された場合にバケットレバーとして機能してもよい。レバーパターンは、オペレータの操作指示によって任意に変更されてもよい。
【0034】
遠隔画像出力装置221は、例えば
図2に示されているように、シートStの前方、左斜め前方および右斜め前方のそれぞれに配置された略矩形状の画面を有する中央遠隔画像出力装置2210、左側遠隔画像出力装置2211および右側遠隔画像出力装置2212により構成されている。中央遠隔画像出力装置2210、左側遠隔画像出力装置2211および右側遠隔画像出力装置2212のそれぞれの画面(画像表示領域)の形状およびサイズは同じであってもよく相違していてもよい。遠隔画像出力装置221は、単一の湾曲したまたは湾曲可能な画像出力装置、シートStの前方を囲むように配置される2つまたは4つ以上の画像出力装置により構成されていてもよい。
【0035】
図2に示されているように、中央遠隔画像出力装置2210の画面および左側遠隔画像出力装置2211の画面が傾斜角度θ1(例えば、120°≦θ1≦150°)をなすように、左側遠隔画像出力装置2211の右縁が、中央遠隔画像出力装置2210の左縁に隣接している。
図2に示されているように、中央遠隔画像出力装置2210の画面および右側遠隔画像出力装置2212の画面が傾斜角度θ2(例えば、120°≦θ2≦150°)をなすように、右側遠隔画像出力装置2212の左縁が、中央遠隔画像出力装置2210の右縁に隣接している。当該傾斜角度θ1およびθ2は同じであっても相違していてもよい。
【0036】
中央遠隔画像出力装置2210、左側遠隔画像出力装置2211および右側遠隔画像出力装置2212のそれぞれの画面は、鉛直方向に対して平行であってもよく、鉛直方向に対して傾斜していてもよい。中央遠隔画像出力装置2210、左側遠隔画像出力装置2211および右側遠隔画像出力装置2212のうち少なくとも1つの画像出力装置が、複数に分割された画像出力装置により構成されていてもよい。例えば、中央遠隔画像出力装置2210が、略矩形状の画面を有する上下に隣接する画像出力装置により構成されていてもよい。
【0037】
遠隔音響出力装置222は、一または複数のスピーカーにより構成され、例えば
図2に示されているように、シートStの後方、左アームレスト後部および右アームレスト後部のそれぞれに配置された中央音響出力装置2220、左側音響出力装置2221および右側音響出力装置2222により構成されている。中央音響出力装置2220、左側音響出力装置2221および右側音響出力装置2222のそれぞれの仕様は同じであってもよく相違していてもよい。
【0038】
(作業機械の構成)
図1に示されているように、作業機械40は、実機制御装置400と、実機入力インターフェース410と、実機出力インターフェース420と、実機無線通信機器422と、を備えている。実機制御装置400の構成要素のそれぞれは、演算処理装置(シングルコアプロセッサまたはマルチコアプロセッサもしくはこれを構成するプロセッサコア)により構成され、メモリなどの記憶装置から必要なデータおよびソフトウェアを読み取り、当該データを対象として当該ソフトウェアにしたがった演算処理を実行する。
【0039】
作業機械40は、例えばクローラショベル(建設機械)であり、
図3に示されているように、クローラ式の下部走行体41と、下部走行体41に旋回機構43を介して旋回可能に搭載されている上部旋回体42と、を備えている。上部旋回体42の前方左側部にはキャブ42C(運転室)が設けられている。上部旋回体42の前方中央部には作業機構44が設けられている。
【0040】
実機入力インターフェース410は、実機操作機構411と、実機撮像装置412と、実機測位装置414と、を備えている。実機操作機構411は、キャブ42Cの内部に配置されたシートの周囲に遠隔操作機構211と同様に配置された複数の操作レバーを備えている。遠隔操作レバーの操作態様に応じた信号を受信し、当該受信信号に基づいて実機操作レバーを動かす駆動機構またはロボットがキャブ42Cに設けられている。実機撮像装置412は、例えばキャブ42Cの内部に設置され、フロントウィンドウおよび左右サイドウィンドウ越しに作業機構44の少なくとも一部を含む環境を撮像する。フロントウィンドウおよびサイドウィンドウのうち一部または全部が省略されていてもよい。実機測位装置414は、GPSまたはGNSSおよび必要に応じてジャイロセンサ等により構成され、作業機械40の位置(緯度および経度)を測定する。
【0041】
図3に示されているように、作業機構44は、上部旋回体42に起伏可能に装着されているブーム441と、ブーム441の先端に回動可能に連結されているアーム443と、アーム443の先端に回動可能に連結されているバケット445と、を備えている。作業機構44には、伸縮可能な油圧シリンダにより構成されているブームシリンダ442、アームシリンダ444およびバケットシリンダ446が装着されている。
【0042】
ブームシリンダ442は、作動油の供給を受けることにより伸縮してブーム441を起伏方向に回動させるように当該ブーム441と上部旋回体42との間に介在する。アームシリンダ444は、作動油の供給を受けることにより伸縮してアーム443をブーム441に対して水平軸回りに回動させるように当該アーム443と当該ブーム441との間に介在する。バケットシリンダ446は、作動油の供給を受けることにより伸縮してバケット445をアーム443に対して水平軸回りに回動させるように当該バケット445と当該アーム443との間に介在する。
【0043】
(地中探索機の構成)
図1に示されているように、地中探索機60は、探索制御装置600と、探索記憶装置602と、深さ位置測定要素611と、探索位置測定要素612と、探索無線通信機器624と、を備えている。
【0044】
深さ位置測定要素611は、地中レーダー装置により構成され、地中埋設物の地表からの深さ位置を測定する。例えば、
図4に示されているように、1台の地中探索機60の異なる位置のそれぞれに複数の深さ位置測定要素611が搭載されていてもよい。探索位置測定要素612は、GPSまたはGNSSおよび必要に応じてジャイロセンサ等により構成され、地中探索機60の2次元位置(緯度および経度)を測定する。
【0045】
探索記憶装置602は、深さ位置測定要素611により測定された深さ位置および探索位置測定要素612により測定された水平位置を地中探索結果として記憶保持する。探索記憶装置602は、そのほか、探索座標系(地中探索機60に対して位置および姿勢が固定されている座標系)における地中レーダー装置の座標値を記憶保持していてもよい。探索無線通信機器624は、探索記憶装置602に記憶保持されている地中探索結果をネットワーク経由で施工支援装置10(またはデータベースサーバ)に対して送信するように構成されている。地中探索結果はデータベース102に蓄積または保存される。
【0046】
(機能)
前記構成の施工支援装置および撮像機能制御システムの機能について
図5に示されているフローチャートを用いて説明する。当該フローチャートにおいて「C●」というブロックは、記載の簡略のために用いられ、データの送信および/または受信を意味し、当該データの送信および/または受信を条件として分岐方向の処理が実行される条件分岐を意味している。
【0047】
遠隔操作装置20において、遠隔制御装置200により、遠隔無線通信機器224を通じて、施工支援装置10に対して地上状況確認要求が送信される(
図4/STEP210)。オペレータにより遠隔入力インターフェース210を通じた第1指定操作の有無が判定され、当該判定結果が肯定的である場合に地上状況確認要求が送信されてもよい。「第1指定操作」は、例えば、オペレータが遠隔操作を意図する作業機械40を指定するための遠隔入力インターフェース210におけるタップなどの操作である。
【0048】
施工支援装置10において、地上状況確認要求が受信された場合、施工支援装置10から当該地上状況確認要求が該当する作業機械40に対して送信される(
図4/C10)。
【0049】
作業機械40において、実機無線通信機器424を通じて地上状況確認要求が受信された場合(
図4/C40)、実機制御装置400が実機撮像装置412を通じて取得された撮像画像(適当な画像処理が施されていてもよい。)を表わす撮像画像データが施工支援装置10に対して送信される(
図4/STEP410)。
【0050】
施工支援装置10において、撮像画像データが受信された場合(
図4/C11)、施工支援装置10から撮像画像に応じた環境画像データが遠隔操作装置20に対して送信される(
図4/STEP110)。環境画像データは、撮像画像データそのもののほか、撮像画像に基づいて生成された模擬的な環境画像を表わす画像データである。
【0051】
遠隔操作装置20において、遠隔無線通信機器224を通じて環境画像データが受信された場合(
図4/C21)、遠隔制御装置200により、環境画像データに応じた環境画像が遠隔画像出力装置221に出力される(
図4/STEP212)。
【0052】
これにより、例えば、
図6に示されているように、キャブ42Cの前方に広がる地面のほか、作業機構44の一部であるブーム441、アーム443および施工対象領域における(バケット445による作業対象である)瓦礫または土砂の山などが映り込んでいる環境画像が遠隔画像出力装置221に出力される。
【0053】
遠隔操作装置20において、遠隔制御装置200により、遠隔無線通信機器224を通じて、施工支援装置10に対して地中状況確認要求が送信される(
図4/STEP220)。オペレータにより遠隔入力インターフェース210を通じた第2指定操作の有無が判定され、当該判定結果が肯定的である場合に地中状況確認要求が送信されてもよい。「第2指定操作」は、例えば、オペレータが遠隔操作を意図する作業機械40を指定するための遠隔入力インターフェース210におけるタップなどの操作である。第2指定操作は、第1指定操作と同一の操作であってもよいし異なる操作であってもよい。
【0054】
施工支援装置10において、地中状況確認要求が受信された場合(
図4/C20)、地中探索結果認識要素120により、当該地中状況確認要求に係る施工対象領域における、地中探索機60による地中探索結果が認識(データベース102から検索)される(
図4/STEP120)。
【0055】
施工対象領域は、例えばその境界を表わす世界座標系の水平座標値(X(経度),Y(緯度))の集合により特定される。施工対象領域は、施工支援装置10と遠隔操作装置20またはその操作対象である作業機械40との通信に基づき、例えば、遠隔操作装置20および/または作業機械40を識別するための識別子に基づき、データベース102が検索されることにより認識される。
【0056】
施工対象領域における複数の地中探索エリアのそれぞれにおいて、地中探索機60により測定された配管等の地中埋設物の地表からの深さ位置(Z(深度))が地中探索結果として認識される。各地中探索エリアは、例えばその境界を表わす世界座標系の水平座標値(X(経度),Y(緯度))の集合により特定される。複数の地中探索エリアは、相互に隣接または連続して定義されていてもよいが、相互に離間して定義されていることが好ましい。複数の地中探索エリアの形状、または、形状およびサイズは同一であってもよく、相違していてもよい。
【0057】
複数の地中探索エリアが固定的に定義されていてもよい。例えば、
図7Aに示されているように、相互に離間して規則的に(正方格子状または三角格子状に)配置されている略矩形状または正方形状の複数の地中探索エリアS
i1、S
i2、‥、S
im、S
im+1が複数の地中探索エリアとして定義されていてもよい。複数の地中探索エリアS
i1、S
i2、‥、S
im、S
im+1が相互に隣接してまたは連続して規則的に配置されていてもよい。この場合、
図7Aに破線矢印で示されているように、地中探索機60が受動的または能動的に変位した場合、地中探索エリアS
i1、S
i2、‥、S
im、S
im+1における地中探索結果がデータベース102に登録され、地中探索結果認識要素120により認識されうる。地中探索エリアの形状は、三角形状、台形状、平行四辺形上、正多角形状(正六角形、正八角形、正十二角形など)、円形状または楕円形状など、さまざまな形状であってもよい。
【0058】
複数の地中探索エリアが地中探索機60による探索結果に応じて流動的に定義されていてもよい。例えば、
図7Bに破線矢印で示されているように、地中探索機60が受動的または能動的に変位する過程で、所定周期のそれぞれにおいて
図7Bに黒丸(●)で表わされている箇所が地中埋設物の地表からの深さ位置が測定された地中探索点である場合を想定する。この場合、当該地中探索点(2次元座標値(X(緯度),Y(経度))により定義される)を中心または重心とし、相互に離間して不規則的に配置されている略矩形状または正方形状の複数の地中探索エリアS
i1、S
i2、‥、S
im、S
im+1が複数の地中探索エリアとして定義されていてもよい。一の所定周期において複数の地中探索点が存在する場合、それらの重心が各地中探索エリアS
ik(k=1,2,‥,m,m+1)の中心または重心として定義されてもよい。各地中探索エリアS
ikのサイズおよび形状はさまざまに変更されてもよいが、あらかじめ定義されていることが好ましい。各地中探索エリアS
ikのサイズは、地中探索機60の変位速度および所定周期(時間間隔)に応じて定められていてもよい。
【0059】
複数の地中探索エリアが地中探索機60の変位態様に応じて流動的に定義されていてもよい。例えば、地中探索機60が受動的または能動的に変位する過程において、地中探索機60の所定周期ごとの重心の位置(2次元座標値により定義される)を中心または重心とし、相互に離間して配置されている略矩形状または正方形状の複数の地中探索エリアSi1、Si2、‥、Sim、Sim+1が複数の地中探索エリアとして定義されていてもよい。各地中探索エリアSikの姿勢(例えば、長辺または短辺の方位)は、地中探索機60の変位方向に沿うように定義されていてもよい。
【0060】
ここで、複数の地中探索エリアが重複している場合の処理に関して説明する。例えば、
図8A左側に示されている略矩形状の2つの地中探索エリアS
1およびS
2の重複度が閾値以上である場合、他の地中探索エリアS
1が削除(間引き)された結果として残った一の地中探索エリアS
2が、
図8A右側に示されている単一の地中探索エリアS
-として定義される。重複している複数の地中探索エリアのうち、地中探索機60により測定された深さ位置の地表からの距離または平均距離が最大(または最小)である一の地中探索エリアを除く他の地中探索エリアが削除されてもよい。重複している複数の地中探索エリアのうち、地中探索機60による深さ位置の測定数が最多(または最少)である一の地中探索エリアを除く他の地中探索エリアが削除されてもよい。
【0061】
一方、
図8B左側に示されている略矩形状の2つの地中探索エリアS
1およびS
2の重複度が閾値未満である場合、
図8B右側に示されているように、当該2つの地中探索エリアS
1およびS
2がまとめられた単一の地中探索エリアS
+が定義される。
図8C左側に示されている略矩形状の2つの地中探索エリアS
1およびS
2の重複度が閾値未満である場合、
図8C右側に示されているように、当該2つの地中探索エリアS
1およびS
2が相互に離間するように変位された2つの地中探索エリアS
1’およびS
2’が定義されてもよい。
【0062】
続いて、代表深さ位置決定要素121により、複数の地中探索エリアのそれぞれにおける一または複数の深さ位置からなる深さ位置群のそれぞれの代表位置が決定される(
図4/STEP121)。
【0063】
例えば、
図9に黒丸(●)で模式的に示されているように、一の地中探索エリアにおいて地中探索機60により地表からの深さ位置が測定された地中埋設物の複数の地中探索点P
1,‥P
i-1,P
i,P
i+1,‥P
n-1,P
nからなる地中探索点群が存在する場合について考察する。この場合、地表に最も近い地中探索点P
+または地表から最も遠い地中探索点P
1の深さ位置が当該地中探索点群の代表深さ位置として決定されてもよい。複数の地中探索点P
1,‥P
i-1,P
i,P
i+1,‥P
n-1,P
nの平均深さ位置(
図9の一点鎖線参照)または中心深さ位置もしくは最頻深さ位置(
図9の点線参照)が、当該地中探索点群の代表深さ位置として決定されてもよい。
【0064】
続いて、施工支援画像データ生成要素122により、施工支援画像データが生成され、かつ、遠隔操作装置20に対して送信される(
図5/STEP122)。施工支援画像データは、地中探索点群のそれぞれの代表深さ位置を表わすように複数の地中探索エリアのそれぞれに配置されている複数のオブジェクトが含まれている3次元画像を表わす3次元画像データである。
【0065】
オブジェクトは、例えば、
図5に示されているように、略矩形状または略正方形状の地中探索エリアが鉛直方向または深さ方向に投影されたような形状およびサイズを有し、かつ、水平面に対して平行な閉曲面m
1およびm
2ある。複数の地中探索エリアの形状(例えば、略矩形状または略正方形状)およびサイズのそれぞれが同一である場合、オブジェクトとしての複数の閉曲面の形状およびサイズのそれぞれも同一になる。複数の地中探索エリアの形状が同一である場合、オブジェクトとしての複数の閉曲面の形状も同一になり、相似する。
【0066】
閉曲面は、Bezier(ベジエ)曲面および/またはNURBS(非一様有理Bスプライン)曲面などの複数の制御点により定義される曲面として定義されていてもよい。当該曲面は連続性(G1連続性、G2連続性またはG3連続性)を有する曲面として定義されていてもよい。例えば、閉曲面がベジエ三角形曲面によって定義される場合、ベジエ三角形曲面の制御ネットの定義域が水平面に張られた三角形メッシュにより定義され、地中探索点が制御点とされたうえで、三角パッチの連続性が確保されるように閉曲面が定義される。
【0067】
遠隔操作装置20において、遠隔無線通信機器224を通じて施工支援画像データが受信された場合(
図4/C22)、遠隔制御装置200により、施工支援情報に応じた施工支援画像が遠隔画像出力装置221に出力される(
図4/STEP222)。
【0068】
これにより、例えば、
図5に示されているように、施工対象領域に含まれる複数の地中探索エリアのそれぞれにおいて、地中探索点群の代表深さ位置に配置された複数の閉曲面m
1およびm
2を含む施工支援画像が、環境画像に重畳された形で遠隔画像出力装置221に出力される。
図5に示されている第1オブジェクト群M
1を構成する複数の閉曲面m
1および第2オブジェクト群M
2を構成する複数の閉曲面m
2のそれぞれの意匠(例えば、色)が、閉曲面m
1およびm
2の深さ位置に応じて識別可能に差異化されている。
図5に示されているように、各閉曲面m
1、m
2から地表まで延びる鉛直線分がオブジェクトの一部を構成していてもよいが、当該鉛直線分は省略されてもよい。
【0069】
施工支援情報におけるオブジェクトの空間占有態様が世界座標系で定義されているので、オブジェクトの配置態様が環境画像座標系に座標変換される。この座標変換のため、作業機械40の世界座標系における座標値がGPS等を用いて測定され、実機撮像装置412の実機座標系(上部旋回体42に対して位置および姿勢が固定された座標系)が、遠隔制御装置200を構成する記憶装置および/またはデータベース102に記憶保持されていてもよい。オペレータは、遠隔画像出力装置221に出力された環境画像およびこれに重畳された施工支援画像を見ながら、バケット445を動かすように遠隔操作機構211を構成する操作レバーを操作することができる。
【0070】
そのほか、施工支援画像が環境画像に重畳されずに、単独で遠隔画像出力装置221に出力されてもよい。この場合、3次元仮想空間において地表に存在する作業機械40および地中埋設物の地表からの深さ位置を表わすように配置されたオブジェクトのそれぞれの空間占有態様を表わす3次元モデル画像が施工支援画像として、環境画像とは別個に遠隔画像出力装置221に出力される。施工支援情報により表わされる閉曲面の配置態様が世界座標系で定義されているので、作業機械40の世界座標系における座標値がGPS等を用いて測定され、遠隔制御装置200を構成する記憶装置および/またはデータベース102に記憶保持されていてもよい。
【0071】
遠隔操作装置20において、遠隔制御装置200により遠隔操作機構211の操作態様が認識され、かつ、遠隔無線通信機器224を通じて、当該操作態様に応じた遠隔操作指令が施工支援装置10に対して送信される(
図5/STEP214)。
【0072】
施工支援装置10において当該遠隔操作指令が受信された場合、当該遠隔操作指令が作業機械40に対して送信される(
図5/C14)。
【0073】
作業機械40において、実機制御装置400により、実機無線通信機器422を通じて操作指令が受信された場合(
図5/C44)、作業機構440等の動作が制御される(
図5/STEP414)。例えば、バケット445により作業機械40の前方の施工対象領域の土を掘り起こしてすくい、上部旋回体42を旋回させたうえで施工対象領域の外にバケット445から土を落とす作業が実行される。
【0074】
(作用効果)
前記機能を発揮する施工支援装置10によれば、複数の地中探索エリアS
i1、S
i2、‥、S
im、S
im+1(
図7Aおよび
図7B参照)のうち少なくとも一部の地中探索エリアにおいて、地中探索機60により地表からの深さ位置が測定された地中埋設物の地中探索点P
1,‥P
i-1,P
i,P
i+1,‥P
n-1,P
nのそれぞれの深さが代表深さ位置に集約される(
図5/STEP121、
図9参照)。そして、当該複数の地中探索エリアS
i1、S
i2、‥、S
im、S
im+1のそれぞれに配置されている代表深さ位置を表わすオブジェクトとしての閉曲面m
1、m
2が含まれている3次元画像を表わす施工支援画像データが生成される(
図5/STEP122、
図5参照)。
【0075】
これにより、地中探索機60によるすべての地中探索点P
1,‥P
i-1,P
i,P
i+1,‥P
n-1,P
nの深さ位置のそれぞれを表わす複数のオブジェクトが含まれている施工支援画像データが生成される場合と比較して、施工支援画像データのデータ量の低減が図られている。遠隔出力インターフェース220を構成する遠隔画像出力装置221に出力された施工支援画像(
図5参照)における複数のオブジェクトとしての閉曲面m
1、m
2の空間占有態様を通じて、当該遠隔画像出力装置221に接したユーザまたはオペレータに3次元実空間における地中埋設物の空間占有態様を把握させることができる。
【0076】
さらに、オブジェクトとしての各閉曲面m1、m2は該当する代表深さ位置を表わすように別個独立に配置されていればよく、複数のオブジェクトの間の相対的な位置および姿勢が調節される必要がない分だけ、施工支援画像データの生成処理に要する演算処理負荷の軽減が図られる。
【0077】
(本発明の他の実施形態)
前記実施形態では、施工支援装置10が遠隔操作装置20、作業機械40および地中探索機60とは別個のコンピュータにより構成されていたが、他の実施形態として、施工支援装置10が、遠隔操作装置20、作業機械40または地中探索機60に搭載されていてもよい。
【0078】
前記実施形態では、作業機械40がオペレータにより遠隔操作装置20を通じて遠隔操作されていたが、他の実施形態として、作業機械40が当該作業機械40に搭乗したオペレータにより実機操作されてもよい。この場合、施工支援装置10から作業機械40に対して施工支援画像データが送信され(
図5/STEP122参照)、実機出力インターフェース420を構成する実機画像出力装置に当該データに応じた施工支援画像が出力されてもよい(
図5参照)。
【0079】
地中探索エリアに配置されているオブジェクトとして、当該地中探索エリアの地表から地中探索点群の代表深さ位置まで延在する立体物が含まれている3次元画像を表わす施工支援画像データが生成されてもよい。例えば、
図10に示されているように、地中探索エリアのそれぞれにおいて地表に底面が配置され、代表深さ位置に頂点が配置されている複数の逆円錐体m
1、m
2がオブジェクトとして含まれている3次元画像を表わす施工支援画像データが生成されてもよい。
図5に示されている例と同様に、第1オブジェクト群M
1を構成する複数の逆円錐体m
1および第2オブジェクト群M
2を構成する複数の逆円錐体m
2のそれぞれの意匠(例えば、色)が、閉曲面m
1およびm
2の深さ位置に応じて識別可能に差異化されている。
【0080】
立体物の表面は、Bezier(ベジエ)曲面および/またはNURBS(非一様有理Bスプライン)曲面などの複数の制御点により定義される曲面として定義されていてもよい。当該曲面は連続性(G1連続性、G2連続性またはG3連続性)を有する曲面として定義されていてもよい。立体物は、逆円錐体とは異なる逆四角錐体などの逆錐体、逆錘台、柱体、球体または楕円球体など、様々な形状の立体物であってもよい。
【符号の説明】
【0081】
10‥施工支援装置
102‥データベース
120‥地中探索結果認識要素
121‥代表深さ位置決定要素
122‥施工支援画像データ生成要素
20‥遠隔操作装置
200‥遠隔制御装置
210‥遠隔入力インターフェース
211‥遠隔操作機構
220‥遠隔出力インターフェース
221‥遠隔画像出力装置
222‥遠隔音響出力装置
224‥遠隔無線通信機器
40‥作業機械
41‥下部走行体
42‥上部旋回体
42C‥キャブ(運転室)
44‥作業機構
445‥バケット
400‥実機制御装置
410‥実機入力インターフェース
420‥実機出力インターフェース
60‥地中探索機
600‥探索制御装置
602‥探索記憶装置
611‥深さ位置測定要素
612‥探索位置測定要素
624‥探索無線通信機器
m1、m2‥オブジェクト(閉曲面、立体物)
P1,‥Pi-1,Pi,Pi+1,‥Pn-1,Pn‥地中探索点
Si1、Si2、‥、Sim、Sim+1‥地中探索エリア。
【手続補正書】
【提出日】2024-01-17
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
施工を行う領域における地中に埋設している地中埋設物に関する情報に基づいて、前記地中埋設物の上側の領域であって、前記地中埋設物に沿った所定の幅を有する線状の形状の施工支援データを生成する手段を有する施工支援装置。
【請求項2】
前記地中埋設物に関する情報は、前記地中埋設物の位置の情報を含む請求項1に記載の施工支援装置。
【請求項3】
前記施工支援データは、前記地中埋設物の地表からの深さの情報を含む請求項1に記載の施工支援装置。
【請求項4】
前記施工支援データは、前記地中埋設物に沿った複数の矩形のデータを含む請求項1乃至3のいずれか1項に記載の施工支援装置。
【請求項5】
コンピュータに、施工を行う領域における地中に埋設している地中埋設物に関する情報に基づいて、前記地中埋設物の上側の領域であって、前記地中埋設物に沿った所定の幅を有する線状の形状の施工支援データを生成する機能を実現させるためのプログラム。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】0003
【補正方法】変更
【補正の内容】
【0003】
作業機による掘削の正確性及び効率性を向上させることができる技術が提案されている(例えば、特許文献2参照)。具体的には、レーダーが地表から所定の精度で探査を行うことができる深度である許容深度と、レーダーが探査を行った探査位置と、に基づいて、許容深度および作業装置が掘削作業を行う掘削位置がマップに表示される。例えば、1つの作業場内を複数の地中探索エリアに区分されたメッシュ型の作業場マップにおいて、各地中探索エリアに対応する分割データに対して、探査結果および許容深度を示す複数のグループ(複数のランク)が割り当てられている。作業場マップにおいて、各地中探索エリアQnに予め割り当てられたグループ(ランク)が識別できるように、グループ(ランク)が色、数値、文字等で示されている。
地中埋設物の位置および姿勢をユーザに把握させるためには、2次元画像よりも3次元画像のほうが好ましいが、施工支援画像データはその情報量の豊富さゆえにデータ量が過多になる傾向がある。
【手続補正3】
【補正対象書類名】明細書
【補正対象項目名】0005
【補正方法】削除
【補正の内容】
【手続補正4】
【補正対象書類名】明細書
【補正対象項目名】0006
【補正方法】変更
【補正の内容】
【0006】
そこで、本発明は、地中埋設物への接触を回避する建設機械の動作制御に活用可能なデータを生成する装置等を提供することを目的とする。
【手続補正5】
【補正対象書類名】明細書
【補正対象項目名】0007
【補正方法】変更
【補正の内容】
【0007】
本発明の施工支援装置は、
施工を行う領域における地中に埋設している地中埋設物に関する情報に基づいて、前記地中埋設物の上側の領域であって、前記地中埋設物に沿った所定の幅を有する線状の形状の施工支援データを生成する手段を有する。
【手続補正6】
【補正対象書類名】明細書
【補正対象項目名】0008
【補正方法】削除
【補正の内容】
【手続補正7】
【補正対象書類名】明細書
【補正対象項目名】0009
【補正方法】削除
【補正の内容】
【手続補正8】
【補正対象書類名】明細書
【補正対象項目名】0010
【補正方法】削除
【補正の内容】
【手続補正9】
【補正対象書類名】明細書
【補正対象項目名】0011
【補正方法】変更
【補正の内容】
【0011】
前記構成の施工支援装置において、
前記地中埋設物に関する情報は、前記地中埋設物の位置の情報を含む
ことが好ましい。
【手続補正10】
【補正対象書類名】明細書
【補正対象項目名】0012
【補正方法】削除
【補正の内容】
【手続補正11】
【補正対象書類名】明細書
【補正対象項目名】0013
【補正方法】変更
【補正の内容】
【0013】
前記構成の施工支援装置において、
前記施工支援データは、前記地中埋設物の地表からの深さの情報を含む
ことが好ましい。
【手続補正12】
【補正対象書類名】明細書
【補正対象項目名】0014
【補正方法】削除
【補正の内容】
【手続補正13】
【補正対象書類名】明細書
【補正対象項目名】0015
【補正方法】変更
【補正の内容】
【0015】
前記構成の施工支援装置において、
前記施工支援データは、前記地中埋設物に沿った複数の矩形のデータを含む
ことが好ましい。
【手続補正14】
【補正対象書類名】明細書
【補正対象項目名】0016
【補正方法】削除
【補正の内容】
【手続補正15】
【補正対象書類名】明細書
【補正対象項目名】0017
【補正方法】変更
【補正の内容】
【0017】
本発明のプログラムは、コンピュータに、施工を行う領域における地中に埋設している地中埋設物に関する情報に基づいて、前記地中埋設物の上側の領域であって、前記地中埋設物に沿った所定の幅を有する線状の形状の施工支援データを生成する機能を実現させるためのプログラムである。
【手続補正16】
【補正対象書類名】明細書
【補正対象項目名】0018
【補正方法】削除
【補正の内容】
【手続補正17】
【補正対象書類名】明細書
【補正対象項目名】0019
【補正方法】削除
【補正の内容】
【手続補正18】
【補正対象書類名】明細書
【補正対象項目名】0020
【補正方法】削除
【補正の内容】
【手続補正19】
【補正対象書類名】明細書
【補正対象項目名】0021
【補正方法】削除
【補正の内容】
【手続補正20】
【補正対象書類名】明細書
【補正対象項目名】0022
【補正方法】削除
【補正の内容】
【手続補正21】
【補正対象書類名】明細書
【補正対象項目名】0023
【補正方法】削除
【補正の内容】
【手続補正22】
【補正対象書類名】明細書
【補正対象項目名】0024
【補正方法】削除
【補正の内容】