IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

▶ 株式会社ジャストの特許一覧

特開2023-26943管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム
<>
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図1
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図2
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図3
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図4
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図5
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図6
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図7
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図8
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図9
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図10
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図11
  • 特開-管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム 図12
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023026943
(43)【公開日】2023-03-01
(54)【発明の名称】管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラム
(51)【国際特許分類】
   G01N 21/88 20060101AFI20230221BHJP
   G01N 21/84 20060101ALI20230221BHJP
   H04N 23/40 20230101ALI20230221BHJP
   H04N 23/698 20230101ALI20230221BHJP
   H04N 23/60 20230101ALI20230221BHJP
   H04N 5/92 20060101ALI20230221BHJP
【FI】
G01N21/88 Z
G01N21/84 B
H04N5/225 500
H04N5/232 380
H04N5/232 290
H04N5/232 300
H04N5/92 010
【審査請求】未請求
【請求項の数】13
【出願形態】OL
(21)【出願番号】P 2021132404
(22)【出願日】2021-08-16
【新規性喪失の例外の表示】特許法第30条第2項適用申請有り (ウェブサイトのアドレス) 株式会社ジャストの製品ページ https://www.just-ltd.co.jp/project/smakan/ (掲載日)令和3年7月26日 〔刊行物等〕 (ウェブサイトのアドレス)下水道展’21大阪の出展紹介ページ https://www.gesuidouten.jp/exhibitors/info/?evcid=GT14J0456 (掲載日)令和3年7月26日
【公序良俗違反の表示】
(特許庁注:以下のものは登録商標)
1.BLUETOOTH
(71)【出願人】
【識別番号】394026714
【氏名又は名称】株式会社ジャスト
(74)【代理人】
【識別番号】100096091
【弁理士】
【氏名又は名称】井上 誠一
(72)【発明者】
【氏名】角田 賢明
(72)【発明者】
【氏名】大貫 雄一
(72)【発明者】
【氏名】楠 佳代子
(72)【発明者】
【氏名】杉山 登
(72)【発明者】
【氏名】鎌形 勇樹
(72)【発明者】
【氏名】▲高▼橋 一広
(72)【発明者】
【氏名】岡田 一哉
【テーマコード(参考)】
2G051
5C053
5C122
【Fターム(参考)】
2G051AA82
2G051AB02
2G051AC17
2G051CA04
2G051CB01
2G051DA06
5C053GB06
5C053JA21
5C053LA01
5C053LA06
5C053LA11
5C053LA14
5C122DA03
5C122DA12
5C122DA26
5C122EA42
5C122EA55
5C122FA02
5C122FH04
5C122FH07
5C122FK37
5C122FK40
5C122FK42
5C122GA31
5C122HA01
5C122HA13
5C122HA35
5C122HB01
5C122HB05
(57)【要約】
【課題】 管状構造物の調査における損傷判定業務及び報告書作成業務等における作業負担を軽減し、作業効率を向上することが可能な管状構造物調査支援装置等を提供することを目的とする。
等を提供する。
【解決手段】 管状構造物調査支援システム1において、撮影システム2は、上下水道管等の管状構造物10の内部を管路に沿って進行しながら広角カメラで撮影し、直視画像を得る。現場PC21は、直視画像を取り込み展開画像を生成する。管状構造物調査支援装置5は、直視画像72及び展開画像71を取得し、直視画像72と、展開画像71の一部範囲と、管全体にわたる展開画像71である全体画像73とを、メイン画面7に並べて表示する。表示されている直視画像72の管10における位置と、展開画像71上のハンドル74の位置と、全体画像73上のハンドル76の位置は連動する。
【選択図】図5
【特許請求の範囲】
【請求項1】
管状構造物の内部を管路に沿って進行しながら広角カメラで撮影した画像である直視画像、及び前記直視画像に基づいて生成された展開画像を取得する画像取得手段と、
前記画像取得手段により取得した前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示する表示手段と、
を備えることを特徴とする管状構造物調査支援装置。
【請求項2】
前記表示手段は、表示する前記直視画像の前記管路における位置と前記展開画像の表示範囲とを連動させて表示するとともに、前記全体画像上及び前記展開画像上に前記位置を示すことを特徴とする請求項1に記載の管状構造物調査支援装置。
【請求項3】
前記直視画像は動画として記録され、
前記直視画像を動画再生させるための指示操作を入力する再生指示入力手段を備え、
前記表示手段は、前記再生指示入力手段により前記直視画像の再生指示が入力されると前記直視画像を動画再生し、表示中の前記直視画像に連動して前記展開画像の表示範囲を移動させるとともに、前記全体画像上及び前記展開画像上に再生中の前記直視画像の前記管路における位置を示すことを特徴とする請求項2に記載の管状構造物調査支援装置。
【請求項4】
表示されている前記展開画像上で任意の位置を指定するための第1の位置指定手段を備え、
前記表示手段は、前記第1の位置指定手段により指定された位置で撮影された前記直視画像を表示するとともに、前記第1の位置指定手段により指定された位置に対応する前記全体画像上の位置を示すことを特徴とする請求項2に記載の管状構造物調査支援装置。
【請求項5】
前記全体画像上で任意の位置を指定するための第2の位置指定手段を備え、
前記表示手段は、前記第2の位置指定手段により指定された位置で撮影された前記直視画像を表示するとともに、前記指定された位置を含む前記展開画像を表示し、前記第2の位置指定手段により指定された位置に対応する該展開画像上の位置を示すことを特徴とする請求項2に記載の管状構造物調査支援装置。
【請求項6】
前記展開画像の任意の位置を指示すると、損傷情報を入力するための損傷入力画面を表示する損傷入力手段と、
前記損傷入力手段により入力された損傷情報を指示された位置の情報と紐づけて記録する損傷記録手段と、
を更に備えることを特徴とする請求項1から請求項5のいずれかに記載の管状構造物調査支援装置。
【請求項7】
前記損傷入力手段において、前記位置を範囲で指定可能であることを特徴とする請求項6に記載の管状構造物調査支援装置。
【請求項8】
前記損傷記録手段に記録された損傷情報を読み出し、前記全体画像とともに一覧表示するプレビュー表示手段を更に備えることを特徴とする請求項6または請求項7に記載の管状構造物調査支援装置。
【請求項9】
前記直視画像を拡大表示させるための操作を入力する拡大操作入力手段を更に備え、
前記拡大操作入力手段により操作が行われると前記表示手段は前記直視画像を拡大表示することを特徴とする請求項1から請求項8のいずれかに記載の管状構造物調査支援装置。
【請求項10】
前記展開画像上にグリッドを表示/非表示させるためのグリッド表示切替手段を更に備えることを特徴とする請求項1から請求項9のいずれかに記載の管状構造物調査支援装置。
【請求項11】
管状構造物の内部を管路に沿って進行しながら広角カメラで撮影する撮影装置と、
前記撮影装置により撮影された画像である直視画像に基づいて前記管状構造物の展開画像を生成する展開画像生成装置と、
前記撮影装置及び前記展開画像生成装置と通信接続された管状構造物調査支援装置と、を備え、
前記管状構造物調査支援装置は、
前記直視画像及び前記展開画像を取得する画像取得手段と、
前記画像取得手段により取得した前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示する表示手段と、
を備えることを特徴とする管状構造物調査支援システム。
【請求項12】
コンピュータが、
管状構造物の内部を管路に沿って進行しながら広角カメラで撮影した画像である直視画像、及び前記直視画像に基づいて生成された展開画像を取得するステップと、
取得した前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示するステップと、
を含むことを特徴とする管状構造物の画像表示方法。
【請求項13】
コンピュータを、
管状構造物の内部を管路に沿って進行しながら広角カメラで撮影した画像である直視画像、及び前記直視画像に基づいて生成された展開画像を取得する画像取得手段、
前記画像取得手段により取得した前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示する表示手段、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、管状構造物調査支援装置、管状構造物調査支援システム、管状構造物の画像表示方法、及びプログラムに関し、詳細には、下水管等の管状構造物の調査を支援するための画像表示及び情報処理技術に関する。
【背景技術】
【0002】
上下水道管、ケーブル管、トンネル等の管状の構造物について、損傷の有無や状態の調査が行われている。この調査では、管路内を走行する撮影装置を用いて管路の内壁面を管路に沿って撮影し、撮影した内壁面の画像データを用いてコンピュータで展開画像を作成し、作成した展開画像を作業者が目視確認することにより、損傷を判定したり、調査報告書の作成を行っている。
【0003】
例えば、特許文献1には、管路内を移動可能な管路内作業装置と、モニタを備えた地上装置とで構成された管路内作業装置モニタシステムにおいて、地上装置が、管路内作業装置の現存位置を示す画像を、管路の内壁を撮影した画像データに基づいて作成された展開画像上に表示する管路内作業装置モニタシステムについて記載されている。
【0004】
また、特許文献2には、管状物の内部を当該管状物に沿って移動しながら撮影された管状物内の全天画像データを基に展開画像を作成する管内壁面画像展開システムについて記載されている。特許文献2の管内壁面画像展開システムでは、管路内を走行する画像撮影手段に接続されたケーブル、ワイヤ等を弛まないよう保持し、そのケーブル、ワイヤ等の送り出し量から画像撮影手段の位置を検知して位置情報Spを取得し、画像撮影手段から画像データSvが入力されたときの位置情報Spをデジタル信号として画像データSvに挿入することで、歪みのない展開画像を生成するというものである。
【0005】
また、非特許文献1には、下水道管の調査報告書を所定の様式で作成するための下水道報告書作成システムについて記載されている。
【先行技術文献】
【特許文献】
【0006】
【特許文献1】2010-066070号公報
【特許文献2】2008-090782号公報
【非特許文献】
【0007】
【非特許文献1】ノザワ電子工業株式会社、”下水道報告書作成システム”、[online]、令和3年8月3日検索、インターネット、<URL:http://nozawa-densi.sakura.ne.jp/CCP004.html>
【発明の概要】
【発明が解決しようとする課題】
【0008】
しかしながら、上述したような損傷を判定する業務や報告書を作成する業務は、従来、損傷の詳細情報の入力を手作業で行う必要があり時間がかかっていた。また、管のジョイント部や取付管等の情報も手作業で判別する必要があった。更に、木の根侵入等、展開画像だけで判別することが難しい損傷については、展開画像のみならず、元となる撮影画像(上記全天画像)も参照しながら状態を詳しく観察する必要があるが、そのための損傷判定・入力に適したユーザ・インターフェースには改良の余地があった。
【0009】
本発明は上記の問題に鑑みてなされたものであり、管状構造物の調査における損傷判定業務及び報告書作成業務等における作業負担を軽減し、作業効率を向上することが可能な管状構造物調査支援装置等を提供することを目的とする。
【課題を解決するための手段】
【0010】
前述した課題を解決するための第1の発明は、管状構造物の内部を管路に沿って進行しながら広角カメラで撮影した画像である直視画像、及び前記直視画像に基づいて生成された展開画像を取得する画像取得手段と、前記画像取得手段により取得した前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示する表示手段と、を備えることを特徴とする管状構造物調査支援装置である。
【0011】
第1の発明の管状構造物調査支援装置によれば、管状構造物の内部の直視画像と、展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示する。これにより、展開画像を観察しながら、観察箇所の管路全体における位置が確認しやすく、また、その位置において撮影された直視画像をすぐに確認できる。そのため、管状構造物の調査における損傷判定業務及び報告書作成業務等における作業効率を向上させることができる。
【0012】
第1の発明において、前記表示手段は、表示する前記直視画像の前記管路における位置と前記展開画像の表示範囲とを連動させて表示するとともに、前記全体画像上及び前記展開画像上に前記位置を示す。具体的には、前記直視画像は動画として記録され、前記直視画像を動画再生させるための指示操作を入力する再生指示入力手段を備え、前記表示手段は、前記再生指示入力手段により前記直視画像の再生指示が入力されると前記直視画像を動画再生し、表示中の前記直視画像に連動して前記展開画像の表示範囲を移動させるとともに、前記全体画像上及び前記展開画像上に再生中の前記直視画像の前記管路における位置を示す。
【0013】
或いは、表示されている前記展開画像上で任意の位置を指定するための第1の位置指定手段を備え、前記表示手段は、前記第1の位置指定手段により指定された位置で撮影された前記直視画像を表示するとともに、前記第1の位置指定手段により指定された位置に対応する前記全体画像上の位置を示す。また、前記全体画像上で任意の位置を指定するための第2の位置指定手段を備え、前記表示手段は、前記第2の位置指定手段により指定された位置で撮影された前記直視画像を表示するとともに、前記指定された位置を含む前記展開画像を表示し、前記第2の位置指定手段により指定された位置に対応する該展開画像上の位置を示す。
表示されている直視画像、展開画像、及び全体画像で、示している位置が互いに連動しているため、各画像の比較参照を円滑に素早く行うことができ、損傷や管構造物等を判別しやすくなる。
【0014】
また、前記展開画像の任意の位置を指示すると、損傷情報を入力するための損傷入力画面を表示する損傷入力手段と、前記損傷入力手段により入力された損傷情報を指示された位置の情報と紐づけて記録する損傷記録手段と、を更に備える。また、前記損傷入力手段において、前記位置を範囲で指定可能である。これにより、損傷情報の入力を簡単な操作で行うことができる。また、損傷は範囲で発生するため、簡単な指示操作で損傷範囲の入力を行うことができ、作業効率が向上する。なお、損傷位置の指定は、範囲(ボックス)での指定とポイント(点)での指定とを自在に切替えられることが望ましい。
【0015】
また、前記損傷記録手段に記録された損傷情報を読み出し、前記全体画像とともに一覧表示するプレビュー表示手段を更に備えることが望ましい。これにより、全体画像を見ながら、記録した損傷情報を一覧で確認できる。損傷判定は人によるブレが生じやすいが、報告書を作成する前に、各損傷の情報を画面に出力して簡単に確認可能となる。
【0016】
前記直視画像を拡大表示させるための操作を入力する拡大操作入力手段を更に備え、前記拡大操作入力手段により操作が行われると前記表示手段は前記直視画像を拡大表示する。これにより、簡単な操作で直視画像を観察しやすいサイズで表示させることが可能となる。
【0017】
前記展開画像上にグリッドを表示/非表示させるためのグリッド表示切替手段を更に備えることが望ましい。これにより、展開画像上で損傷等の実寸を判別しやすくなる。
【0018】
第2の発明は、管状構造物の内部を管路に沿って進行しながら広角カメラで撮影する撮影装置と、前記撮影装置により撮影された画像である直視画像に基づいて前記管状構造物の展開画像を生成する展開画像生成装置と、前記撮影装置及び前記展開画像生成装置と通信接続された管状構造物調査支援装置と、を備え、前記管状構造物調査支援装置は、前記直視画像及び前記展開画像を取得する画像取得手段と、前記画像取得手段により取得した前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示する表示手段と、を備えることを特徴とする管状構造物調査支援システムである。
【0019】
第2の発明の管状構造物調査支援システムによれば、撮影装置で、管状構造物の内部の直視画像を撮影し、展開画像生成装置で展開画像を生成し、管状構造物調査支援装置で、前記直視画像及び前記展開画像を取得して、前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示することができる。これにより、展開画像を観察しながら、観察箇所の管路全体における位置が確認しやすく、また、その位置において撮影された直視画像をすぐに確認できる。そのため、管状構造物の調査における損傷判定業務及び報告書作成業務等における作業効率を向上させることができる。なお、展開画像生成装置と管状構造物調査支援装置とは一体でもよいし、別体で構成されてもよい。
【0020】
第3の発明は、コンピュータが、管状構造物の内部を管路に沿って進行しながら広角カメラで撮影した画像である直視画像、及び前記直視画像に基づいて生成された展開画像を取得するステップと、取得した前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示するステップと、を含むことを特徴とする管状構造物の画像表示方法である。
【0021】
第3の発明により、コンピュータにより直視画像及び展開画像を取得して、前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示することができる。これにより、コンピュータを用いて管状構造物の調査における損傷判定業務及び報告書作成業務等を行うことができる。また、展開画像を観察しながら、観察箇所の管路全体における位置が確認しやすく、その位置において撮影された直視画像をすぐに確認できる。そのため、管状構造物の調査における損傷判定業務及び報告書作成業務等における作業効率を向上させることができる。
【0022】
第4の発明は、コンピュータを、管状構造物の内部を管路に沿って進行しながら広角カメラで撮影した画像である直視画像、及び前記直視画像に基づいて生成された展開画像を取得する画像取得手段、前記画像取得手段により取得した前記直視画像と、前記展開画像の一部の範囲と、管全体にわたる前記展開画像である全体画像とを並べて表示する表示手段、として機能させるためのプログラムである。
【0023】
第4の発明により、コンピュータを第1の発明における管状構造物調査支援装置として機能させることができる。
【発明の効果】
【0024】
本発明により、管状構造物の調査における損傷判定業務及び報告書作成業務等における作業負担を軽減し、作業効率を向上することが可能な管状構造物調査支援装置等を提供できる。
【図面の簡単な説明】
【0025】
図1】管状構造物調査支援システム1の全体構成の一例を示す図
図2】撮影システム2及び管状構造物調査支援装置5の機能構成を示すブロック図
図3】調査処理全体の流れを示すフローチャート
図4】表示処理の流れを示すフローチャート
図5】メイン画面7の一例を示す図
図6】グリッド表示の一例を示す図
図7】管構造物(ジョイント部)を示すオブジェクト971、972の表示例を示す図
図8】損傷入力処理の流れを示すフローチャート
図9】損傷箇所のポイント指定の例を示す図
図10】損傷箇所のボックス(範囲)指定の例を示す図
図11】プレビュー処理の流れを示すフローチャート
図12】プレビュー画面15の一例を示す図
【発明を実施するための形態】
【0026】
以下、図面に基づいて本発明の好適な実施形態について詳細に説明する。
【0027】
図1は、本発明に係る管状構造物調査支援システム1の全体構成を示す図である。以下の説明では、一例として図1に示すように、撮影システム2とストレージ3と管状構造物調査支援装置(以下、調査支援装置)5とがネットワーク4を介して通信可能に接続された管状構造物調査支援システム1について説明する。なお、図1のシステム構成例は一例であり、本発明はこれに限定されない。例えば、ストレージ3を省略し、撮影システム2と調査支援装置5とがネットワーク4を介して接続されたシステムとしてもよいし、撮影システム2と調査支援装置5とがネットワーク4を介した通信接続を行わず、画像データ等の交換は記録媒体等を介して行うことも可能である。
【0028】
撮影システム2は、調査対象となる管状構造物10(上下水道管、吸排気管、ケーブル管、トンネル等。以下、管10という)の内部を管路に沿って進行しながら広角カメラ22Aで撮影する撮影装置22と、調査現場で使用されるコンピュータ端末である現場PC21とを有する。撮影装置22は、走行車に広角カメラ22A及びエンコーダ等を搭載したものである。エンコーダは、管の入口から広角カメラ22Aまでの距離を計測するためのケーブル等である。現場PC21は、撮影装置22が撮影した画像(以下、直視画像)及びエンコーダで計測した距離を取得するインターフェースと、ネットワーク4に通信接続するための通信インターフェースと、制御部(CPU,ROM,RAM)、記憶部、入力部、表示部等を備える。現場PC21は、撮影装置22から取得した直視画像に基づいて展開画像を生成する機能を備えることが望ましいが、展開画像の生成は、別のコンピュータ端末で行うものとしてもよい。
【0029】
展開画像とは、管10の内部を撮影した画像を管路方向に切り開き平面状に展開した画像である。展開画像の作成方法は公知であり、例えば、特開2010-066070号公報等に記載される。また、撮影システム2についても、上記特許文献に示す作業装置及び地上装置や、公知の同様の撮影システムを用いて構成することができる。なお、現場PC21は、エンコーダで取得した距離情報(管の入口から広角カメラ22Aまでの距離)を、位置情報(管路方向位置)として撮影画像(直視画像)及び展開画像に記録する。
【0030】
現場PC21は、撮影した直視画像をネットワーク4を介してストレージ3に記憶する。現場PC21が展開画像を生成した場合は、生成した展開画像を直視画像と紐づけてストレージ3に記憶する。或いは、現場PC21は、直視画像及び展開画像をネットワーク4を介して調査支援装置5に送信してもよい。または、現場PC21は、直視画像及び展開画像を記録媒体に記録してもよい。
【0031】
ストレージ3は、ネットワーク4を介してアクセス可能なストレーサーバであり、現場PC21から送信された直視画像や展開画像、工事情報等を保存するための記憶領域を有する。ストレージ3は、調査支援装置5から画像取得要求を受信すると、要求に応答して該当する直視画像や展開画像を送信する。
【0032】
次に、調査支援装置5について説明する。調査支援装置5は、図2に示すように、制御部51、記憶部52、通信部53、入力部54、表示部55、及び周辺機器I/F(インターフェース)部56等をバスを介して接続したコンピュータにより構成され、PC、タブレット、スマートフォン等を用いることができる。なお、調査支援装置5の構成は適宜変更可能である。調査支援装置5には、管状構造物調査支援プログラムがインストールされ、制御部51が管状構造物調査支援プログラムに従って処理を実行することにより、後述する各機能を実現する。
【0033】
制御部51は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等により構成され、CPUは、記憶部52、ROM等に格納されるプログラムをRAM上のワークメモリ領域に呼び出して実行し、バスを介して接続された各部(記憶部52、通信部53、入力部54、表示部55、周辺機器I/F部56)を駆動制御する。ROMは、ブートプログラムやBIOS等のプログラム、データ等を恒久的に保持する。RAMは、ロードしたプログラムやデータを一時的に保持するとともに、制御部51が各種処理を行うために使用するワークエリアを備える。
【0034】
記憶部52は、フラッシュメモリ、ハードディスク等の記憶装置であり、取得した画像データや入力した損傷情報、入力した管構造情報等を記憶する。また、記憶部52は、後述する各機能に係る処理プログラム(総称して「管状構造物調査支援プログラム」または「アプリ」と呼ぶ)を記憶する。
【0035】
通信部53は、WiFiアンテナ、Bluetooth等の無線通信部、またはLAN等の有線通信部の通信ポート、及び通信制御装置を有し、外部機器との通信を媒介するインターフェースである。
【0036】
入力部54は、例えば、タッチパネル、キーボード、マウス等のポインティング・デバイス、テンキー等の入力装置等を含み、入力されたデータを制御部51へ入力する。
【0037】
表示部55は、例えば液晶パネル等のディスプレイと、ディスプレイと連携して表示処理を実行するための論理回路(ビデオアダプタ等)で構成され、制御部51の制御により入力された表示データをディスプレイに表示させる。なお、表示部55は、表示画面にタッチパネル等の入力装置(入力部54)を一体的に設けたタッチパネルディスプレイとしてもよい。
【0038】
周辺機器I/F部56は、周辺機器を接続させるためのポートであり、制御部51は周辺機器I/F部56を介して周辺機器とのデータの送受信を行う。周辺機器I/F部56は、USB(Universal Serial Bus)等によって構成されている。周辺機器との接続形態は有線、無線を問わない。
【0039】
次に、調査支援装置5の機能構成について、図2を参照して説明する。
調査支援装置5は、機能部として、画像取得部511、表示処理部513、管構造物入力部514、損傷入力部515、及びプレビュー表示部516等を有する。また、調査支援装置5は、展開画像を生成する展開画像生成部512を備えてもよい。これらの機能部は、制御部51のCPUが、記憶部52に記憶された処理プログラム(管状構造物調査支援プログラム)を読み込み、RAM上のワークメモリ領域に呼び出して実行することにより実現される。
【0040】
画像取得部511は、撮影システム2により撮影された直視画像及び生成された展開画像を通信部53または周辺機器I/F部56を介して取得する。或いは、記憶媒体に記憶された直視画像及び展画像を読み込んで取得したり、別のコンピュータに保存されている直視画像及び展開画像やストレージ3上に保存された直視画像及び展開画像を通信部53がLANやインターネット等のネットワーク4を介して取得し、制御部51に取り込むものとしてもよい。
【0041】
展開画像生成部512は、画像取得部511により取得した直視画像に基づいて展開画像を生成し、記憶部52に記憶する。なお、直視画像を撮影しながらリアルタイムに、または直視画像撮影後、すぐに調査現場で展開画像を生成し、適切に変換できたか否かを調査現場で確認することもある。その場合、展開画像は、現場PC21等で生成される。
【0042】
表示処理部513は、表示処理を実行し、画像取得部511により取得した直視画像72と、展開画像71の一部の範囲と、管10の全体にわたる展開画像71である全体画像73とを並べて表示部55に表示する(図5参照)。表示処理において、表示処理部513は、表示する直視画像72の管10における位置と展開画像71の表示範囲とを連動させて表示するとともに、全体画像73及び展開画像71に上記位置を示す。表示処理の詳細や表示画面例については後述する。
【0043】
管構造物入力部514は、画像取得部511により取得した画像(主に展開画像71)に対して管10のジョイント部及び取付管等の構造物の情報の入力を受け付ける。そして、構造物(ジョイント部及び取付管)を示すオブジェクト971、972を展開画像71上または全体画像73上に表示する(図7参照)。また、管構造物入力部514は、構造物(ジョイント部及び取付管等)の各々に識別情報を付加し、管10における位置情報と紐づけて管構造情報として記録する。
【0044】
損傷入力部515は、展開画像71の任意の位置がユーザにより指示されると、損傷情報を入力するための損傷情報入力欄111を表示し(図9図10参照)、損傷情報の入力を受け付ける。また、損傷情報入力欄111に入力された損傷情報を、ユーザにより指示された位置(管10における位置)と紐づけて記録する。なお、損傷位置は、ポイント(点)またはボックス(範囲)で指定可能とする。損傷入力部515の処理の詳細や表示画面例については後述する。
【0045】
プレビュー表示部516は、記録された損傷情報のリストである損傷一覧150を全体画像73とともに表示する(図12参照)。プレビュー表示処理の詳細や表示画面例については後述する。
【0046】
次に、管状構造物調査支援システム1を用いた管状構造物調査の流れについて説明する。まず、図3のフローチャートを参照して、調査全体の流れを説明する。
【0047】
作業者は撮影システム2を調査現場へ運び、撮影装置22を用いて管10の内部を動画撮影する(ステップS101)。撮影された動画(映像)は直視画像72として順次現場PC21に取り込まれる。現場PC21は、展開画像生成処理を実行し、取り込んだ直視画像72に基づいて展開画像71を生成する(ステップS102)。
【0048】
展開画像71の生成をやり直す場合は(ステップS103;No)、ステップS101へ戻る。展開画像71の生成が成功した場合は(ステップS103;Yes)、直視画像72及び展開画像71を記憶する(ステップS104)。
【0049】
ステップS101~ステップS104の処理が終了すると、調査現場での作業を終了し、事務所へ移動する(ステップS105)。事務所では、作業者は調査支援装置5を用いた作業を行う。
【0050】
調査支援装置5の制御部51は、アプリ(管状構造物調査支援処理プログラム)が起動されると(ステップS106)、管状構造物調査支援処理を実行する。制御部51は、作業者の操作に従ってストレージ3等から直視画像72及び展開画像71を取得し(ステップS107)、表示処理(ステップS108)、管構造物入力処理(ステップS109)、損傷入力処理(ステップS110)、プレビュー表示処理(ステップS111)、及び報告書作成処理(ステップS112)等を行う。なお、ステップS107~ステップS112の処理は、作業内容や作業者によって順序を変更したり、一部省略したりしてもよい。以下、各ステップの処理について説明する。
【0051】
まずステップS108の表示処理について、図4を参照して説明する。調査支援装置5の制御部51は、主な表示画面であるメイン画面7を表示部55に表示し、ステップS107で取得した展開画像71、直視画像72、全体画像73をメイン画面7内に設けられる各表示領域に表示する(ステップS301)。
【0052】
図5はメイン画面7の表示例を示す図である。図5の例では、展開画像71の表示領域は画面上部に横長に設けられ、直視画像72の表示領域は画面下部左側に設けられ、全体画像73の表示領域は画面下部右側に設けられるが、各表示領域のレイアウトやサイズはこれに限定されない。
【0053】
展開画像71は、管10の管路方向を横向きに表示される。展開画像71の上下方向中央が管10の底部、展開画像71の上端及び下端が管10の頂部に対応している。また、展開画像71には、管10における管路方向の位置を示す目盛り79や展開画像ハンドル74、展開画像71の表示範囲をスクロールするためのボタン77a、77bが設けられる。展開画像ハンドル74はユーザの操作によって左右に移動可能な操作部(第1の位置指定手段)であり、ユーザは展開画像ハンドル74を移動させて展開画像71上で任意の位置(管路方向位置)を指定できる。なお、目盛り79に示す管路方向位置は、管の入口からカメラ22Aまでの距離である。
【0054】
直視画像72は、一連の動画として撮影された直視画像72のうち、展開画像ハンドル74(または全体画像ハンドル76)で指定された位置で撮影された直視画像72が表示される。すなわち、動画の各フレームのうち、展開画像ハンドル74(または全体画像ハンドル76)で指定された位置で撮影されたフレームが表示される。直視画像72には、位置情報(管の入口からカメラ22Aまでの距離)やジョイント番号(ジョイント部の識別情報)等が表示されることが望ましい。直視画像72の近傍には、再生ボタン75(再生指示入力手段)が設けられる。再生ボタン75が操作されて直視画像72の動画再生指示が入力されると、制御部51は、直視画像72を順方向(管10の始点(撮影の始点)から終点(撮影の終点)へ向かう方向)に動画再生する。また制御部51は、表示中の直視画像72に連動して展開画像71の表示範囲全体を移動させる。制御部51は、展開画像ハンドル74を表示中の直視画像72に連動して移動させるとともに、全体画像ハンドル76を直視画像72に連動して移動させる。すなわち、全体画像73上及び展開画像71上に再生中の直視画像72の位置を示す。なお、再生ボタン75に加え、逆方向再生を行うための逆再生ボタンや、早送り、早戻し操作を行うボタン、始点や終点への移動ボタンを設けるようにしてもよい。動画再生中に再生ボタン75が再度操作されると、制御部51は再生を停止する。
【0055】
全体画像73は、展開画像71を縮小して管路全体にわたって表示した展開画像71であり、管10の管路方向を横向きに表示される。展開画像71と同様に、全体画像73の上下方向中央が管10の底部、全体画像73の上端及び下端が管10の頂部に対応している。また全体画像73には、全体画像ハンドル76、全体画像ハンドル76の位置を移動させるための移動ボタン78a、78b等が設けられる。全体画像ハンドル76はユーザの操作によって左右に移動可能な操作部(第2の位置指定手段)であり、ユーザは全体画像ハンドル76を移動させて全体画像73上で任意の位置(管路方向位置)を指定できる。また、全体画像ハンドル76は、直視画像72が表示している管路における位置、及び展開画像ハンドル74の位置に連動して表示位置が左右に移動される。
【0056】
メイン画面7には、展開画像71、直視画像72、全体画像73等の他、各種の機能を実行するための機能ボタン81~85が表示される。機能ボタン81は、管10のジョイント部(接手部)の位置を手動入力する際に操作されるボタンであり、機能ボタン82は、損傷位置をポイント(点)で指定する際に操作されるボタンであり、機能ボタン83は、損傷位置をボックス(範囲)で指定する際に操作されるボタンであり、機能ボタン84は、取付管の位置を手動入力する際に操作されるボタンであり、機能ボタン85は、展開画像71の表示位置を移動させる際に操作されるボタンである。また、展開画像71の表示範囲を変更(拡大/縮小)する際に操作される表示サイズ(拡大/縮小率)変更欄86、表示サイズ(拡大/縮小率)を元に戻す際に操作されるリセットボタン87、グリッド表示/非表示切替操作部88、メイン画面7に表示されている管10についての各種情報(路線番号、人孔番号、管長、総延長等)が表示される管情報表示欄89、メイン画面7に表示する管10を変更する際に操作される管変更ボタン90、91、損傷情報のプレビュー表示を行う際に操作されるプレビューボタン92等が設けられる。
【0057】
図4の説明に戻る。
メイン画面7において、直視画像72の再生ボタン75が操作されると(ステップS302;Yes)、制御部51は、直視画像72を動作再生するとともに、展開画像71の表示範囲を直視画像72に連動させる(ステップS303)。また制御部51は、表示中の直視画像72に対応する位置を示すように、展開画像ハンドル74、全体画像ハンドル76の位置を移動させて表示する(ステップS304)。
【0058】
また、展開画像ハンドル74が操作された場合は(ステップS302;No→ステップS305;Yes)、制御部51は、常に展開画像ハンドル74の位置が表示領域に含まれるように表示範囲を移動させながら展開画像71を表示するとともに、展開画像ハンドル74の位置に対応する直視画像72を表示する(ステップS306)。また展開画像ハンドル74の位置に対応する位置を全体画像73上に示す(全体画像ハンドル76の表示位置を移動する;ステップS307)。
【0059】
全体画像ハンドル76が操作された場合は(ステップS305;No→ステップS308;Yes)、制御部51は、全体画像ハンドル76で示す位置が含まれるように展開画像71の表示範囲を変更させ、全体画像ハンドル76の位置に対応する直視画像72を表示する(ステップS309)。また全体画像ハンドル76の位置に対応する位置を展開画像71上に示す(展開画像ハンドル74の表示位置を移動する;ステップS310)。
【0060】
メイン画面7において、その他の操作が入力された場合は(ステップS308;No→ステップS311;Yes)、制御部51は操作に応じた処理を実行する(ステップS312)。例えば、メイン画面7のグリッド表示/非表示切替操作部88が操作されると、制御部51は、図6に示すように、展開画像71上のグリッドを表示/非表示を切り替える。グリッドの表示色は、白または黒を選択可能とし、またグリッド幅も10[mm]、50[mm]、100[mm]等のように変更可能とする。展開画像71上にグリッドを表示することで、損傷や構造物の位置、サイズが認識しやすくなる。また、直視画像72上で、例えばマウスの右クリック等の操作が入力されると、制御部51は直視画像72を拡大表示する。また、機能ボタン85が選択された後、マウスで展開画像71がドラッグ操作されると、制御部51は展開画像71の表示位置を変更する。また、表示サイズ(拡大/縮小率)変更欄86にて任意の拡大率または縮小率が入力されると、制御部51は、展開画像71を指定された拡大率または縮小率で表示する。リセットボタン87が操作されると、制御部51は、元の拡大率または縮小率(或いは、初期設定されている所定のサイズ)に戻して展開画像71を表示する。
【0061】
ステップS311~ステップS312では、上述の機能ボタン81~85や全体プレビューボタン92、拡大率変更等の操作に応じた処理を行う。操作が入力されない場合は(ステップS311;No)、ステップS302に戻り、操作を待機する。
【0062】
次に、管構造物入力処理(図3のステップS109)について説明する。
メイン画面7の機能ボタン81は管のジョイント部を指定するためのボタンである。機能ボタン81が選択された状態で展開画像上の任意の位置(管路方向位置)がクリック等の操作によって指定されると、調査支援装置5の制御部51は指定された位置にジョイント部を示すオブジェクト971、972、…を重ねて表示する。また、機能ボタン84は取付管を指定するためのボタンである。機能ボタン84が選択された状態で展開画像上の任意の位置(管路方向位置)がクリック等の操作によって指定されると、調査支援装置5の制御部51は指定された位置に取付管を示すオブジェクトを重ねて表示する。
【0063】
例えば、図7に示すように、ジョイント部の位置に直線オブジェクト971、972、…を重ねて表示する。図示していないが、取付管の位置には例えば円形オブジェクトを重ねて表示する。また、制御部51はこれらの管構造物の位置情報(管10における距離位置)を展開画像71から取得し各管構造物にそれぞれ識別情報を付加する。識別情報は、管構造物の種類を示すアルファベットと、管10の始点からの順番を示す数値との組み合わせ等として付加することが望ましい。例えば、ジョイント部には、「J1」、「J2」、…等の識別情報を付加する。制御部51は、各管構造物の識別情報と位置情報を紐づけて管構造情報として記憶部52に記憶する。
【0064】
図7に示すように、展開画像71にはジョイント部にそれぞれオブジェクト971、972が表示され、各オブジェクト971、972の上部に識別情報971a「J1」、972a「J2」が表示される。また、管10の始点や終点には「管口」等の管構造情報98が表示される。
【0065】
次に、損傷入力処理(図3のステップS110)について、図8のフローチャートを参照して説明する。
メイン画面7において、機能ボタン82が操作され、ポイント入力に切り替えられた後(ステップS501;ポイント)に展開画像の任意の位置(点)がクリックされると(ステップS502)、制御部51は、クリック位置に点マーク110を表示し(ステップS503)、クリック位置の管10における位置情報を取得する(ステップS504)。制御部51は、損傷情報入力欄111を表示する(ステップS505)。
【0066】
図9は、ポイント指定での損傷情報入力欄111が表示された画面例を示す図である。図9に示すように、展開画像71上でユーザにより指定された位置に点マーク110が表示され、その近傍に損傷情報表示欄110aが表示される。損傷情報表示欄110aには、損傷の位置情報(管路方向位置)、ジョイント部の識別番号、取付向、部位、内容等を含む損傷情報が表示される。また、画面下部には損傷情報入力欄111が表示される。損傷情報入力欄111には、内容データタブ111aと写真タブ111bが設けられ、図9は、内容データタブ111aが選択された状態を示している。内容データタブ111aには、距離入力欄113、部位入力欄114、ジョイント番号表示欄112、備考欄115、損傷番号116、損傷の種類入力欄117、及び程度入力欄118が設けられる。距離入力欄113には指定されたポイントの位置情報(管路方向位置)が、展開画像71に付加されている位置情報に基づいて反映されて表示される。部位入力欄114には、ドロップダウンリストの形式で損傷の部位が選択入力可能となっている。ジョイント番号表示欄112には、管構造情報が入力済みの場合に、該当するジョイント番号が反映されて表示される。備考欄115には、任意の文字や数値等が入力できる。損傷の種類入力欄117、程度入力欄118には、ドロップダウンリストの形式で損傷の種類、程度を入力できる。損傷番号116は、各損傷の識別情報を示している。なお、同一箇所に複数の損傷があることもあるため、損傷の種類入力欄117、程度入力欄118は複数設けられることが望ましい。
【0067】
写真タブ111bでは、指定された位置に対応する直視画像72や損傷の拡大写真などを貼付(入力)できる。作業者によりキャンセルボタン111cが操作されると、制御部51は損傷情報入力欄111を消去し、メイン画面7に戻る。作業者により損傷情報入力欄111に情報が入力され(ステップS506)、決定ボタン111dが操作されると、制御部51は損傷情報入力欄111に入力された情報や画像を損傷情報として記憶部52に記憶する(ステップS507)。
【0068】
一方、メイン画面7において、機能ボタン83が操作され、ボックス入力に切り替えられた後(ステップS501;ボックス)に展開画像の任意の範囲がマウス操作等によって指定されると(ステップS508)、制御部51は、指定範囲にボックスマーク120を表示し(ステップS509)、指定範囲の管10における位置情報を取得する(ステップS510)。制御部51は、損傷情報入力欄111を表示する(ステップS505)。
【0069】
図10は、ボックス指定での損傷情報入力欄111が表示された画面例を示す図である。図10に示すように、展開画像71上でユーザにより指定された範囲にボックスマーク120が表示され、その近傍に損傷情報表示欄120aが表示される。損傷情報表示欄120aには、損傷の範囲情報(管路方向位置の範囲)、ジョイント部の場所、取付向、部位、内容等を含む損傷情報が表示される。また、画面下部には損傷情報入力欄111が表示される。損傷情報入力欄111には、図9と同様に、内容データタブ111aと写真タブ111bが設けられ、図9は、内容データタブ111aが選択された状態を示している。内容データタブ111aには、距離入力欄113、部位入力欄114、ジョイント番号表示欄112、備考欄115、損傷番号116、損傷の種類入力欄117、及び程度入力欄118が設けられる。距離入力欄113にはボックス指定された範囲の位置情報が反映されて、「〇〇m~△△m」等のように表示される。その他は図9の損傷情報入力欄111の各部と同様である。写真タブ111bについても同様である。
【0070】
作業者により損傷情報入力欄111に情報が入力され(ステップS506)、決定ボタン111dが操作されると、制御部51は損傷情報入力欄111に入力された情報や画像を損傷情報として記憶部52に記憶する(ステップS507)。
【0071】
次に、プレビュー表示処理(図3のステップS111)について、図11のフローチャートを参照して説明する。
メイン画面7において、プレビューボタン92が操作されると(ステップS601;Yes)、調査支援装置5の制御部51は、プレビュー画面15を表示部55に表示する(ステップS602)。
【0072】
制御部51は、記憶部52に記憶されている損傷情報、管構造情報を取得するとともに、損傷情報に紐づけられている画像(直視画像72や展開画像71等)を取得し(ステップS603)、管構造情報を反映した損傷情報をプレビュー画面15にリスト表示する(ステップS604)。
【0073】
図12はプレビュー画面15の表示例を示す図である。図12に示すようにプレビュー画面15には、損傷一覧150、全体画像73、及び管情報89aが表示される。全体画像73には、損傷情報として記録されている損傷の位置に点マーク110またはボックスマーク120が表示される。損傷一覧150には、損傷番号順に損傷情報151、152、…と、各損傷情報151、152、…に紐づけられた画像72、71a、71b、…がリスト表示される。損傷情報151、152、…は、図9図10の損傷情報入力欄111での入力情報に対応しており、位置情報、部位情報、ジョイント番号、備考、損傷の種類、及び程度(ランク)等が表示される。また、各損傷情報151、152、…には、修正ボタン151a、152a、…が設けられ、内容を修正可能となっている。
【0074】
修正ボタン151a、152a、…が操作されると(ステップS605;Yes)、制御部51は損傷情報151、152、…の修正を受け付ける。作業者により修正が入力されると(ステップS606)、制御部51は修正を反映した損傷情報を記憶部52に更新記憶する(ステップS607)。制御部51は、修正の日時や修正内容、修正者情報等を修正履歴情報として記憶部52に記憶する(ステップS608)。修正ボタン151a、152a、…が操作されない場合は(ステップS605;No)、プレビュー処理を終了する。
【0075】
次に、制御部51は、報告書作成処理(図3のステップS112)を実行する。報告書作成処理では、制御部51は、工事情報、管情報、損傷情報、画像等を記憶部25から読み出し、自治体ごとに定められている所定の書式に従って工事情報、管情報、損傷情報、画像等が記入された報告書を生成する。制御部51は、生成した報告書を表示部55に表示する。また、作業者による指示操作に従って、報告書の印刷出力、報告書データの記憶、送信等を実行する。
【0076】
以上説明したように、管状構造物調査支援システム1において、管状構造物調査支援装置5は、撮影システム2で撮影した直視画像72及び現場PC21もしくは管状構造物調査支援装置5で生成した展開画像71を取得し、直視画像72と、展開画像71の一部範囲と、管全体にわたる展開画像71である全体画像73とを、メイン画面7に並べて表示する。表示されている直視画像72の管10における位置と、展開画像71上のハンドル74の位置と,全体画像73上のハンドル76の位置は連動させることができる。また、損傷箇所を展開画像71上でポイントまたはボックスで指定でき、指定箇所から位置情報(点または範囲の位置情報)を自動算出して損傷情報に反映できる。また、展開画像に管構造物(ジョイント部や取付管等)を示すオブジェクトを入力して付番し、管構造情報として記録できる。また、損傷情報に、管構造情報を反映できる。更に、記録した損傷情報を一覧表示し、全体画像73とともに示すプレビュー画面15を表示できる。そのため、損傷情報の判定作業や、報告書の作成業務を効率よく行うことが可能となる。
【0077】
以上、添付図面を参照して、本発明の好適な実施形態について説明したが、本発明は係る例に限定されない。例えば、各画面のレイアウト、各画像の表示サイズ、機能ボタン、操作ボタン、表示欄、入力欄等の配置等は一例であり、その他のレイアウト、サイズ、配置を採用してもよい。その他、当業者であれば、本願で開示した技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【0078】
1・・・・・・管状構造物調査支援システム
2・・・・・・撮影システム
21・・・・・現場PC
22・・・・・撮影装置
3・・・・・・ストレージ
4・・・・・・ネットワーク
5・・・・・・管状構造物調査支援装置(コンピュータ)
51・・・・・制御部
511・・・・画像取得部
512・・・・展開画像生成部
513・・・・表示処理部
514・・・・管構造物入力部
515・・・・損傷入力部
516・・・・プレビュー表示部
7・・・・・・メイン画面
71・・・・・展開画像(一部範囲)
72・・・・・直視画像
73・・・・・全体画像
74・・・・・展開画像ハンドル(第1の位置指定手段)
75・・・・・再生ボタン
76・・・・・全体画像ハンドル(第2の位置指定手段)
79・・・・・位置情報を示す目盛り
81~85・・機能ボタン
86・・・・・表示サイズ変更欄
88・・・・・グリッド表示/非表示切替操作部
92・・・・・プレビューボタン
971、972・・・直線オブジェクト(ジョイント部)
110・・・・点マーク
120・・・・ボックスマーク
111・・・・損傷情報入力欄
15・・・・・プレビュー画面
10・・・・・管状構造物(管)
図1
図2
図3
図4
図5
図6
図7
図8
図9
図10
図11
図12