IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

▶ 株式会社センシンロボティクスの特許一覧

特開2023-87623情報処理システム、情報処理方法、プログラム、移動体、管理サーバ
<>
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図1
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図2
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図3
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図4
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図5
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図6
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図7
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図8
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図9
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図10
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図11
  • 特開-情報処理システム、情報処理方法、プログラム、移動体、管理サーバ 図12
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023087623
(43)【公開日】2023-06-23
(54)【発明の名称】情報処理システム、情報処理方法、プログラム、移動体、管理サーバ
(51)【国際特許分類】
   G01B 11/00 20060101AFI20230616BHJP
【FI】
G01B11/00 Z
【審査請求】有
【請求項の数】10
【出願形態】OL
(21)【出願番号】P 2022073518
(22)【出願日】2022-04-27
(62)【分割の表示】P 2022073392の分割
【原出願日】2021-12-13
(11)【特許番号】
(45)【特許公報発行日】2023-02-24
(71)【出願人】
【識別番号】518156358
【氏名又は名称】株式会社センシンロボティクス
(74)【代理人】
【識別番号】110002790
【氏名又は名称】One ip弁理士法人
(72)【発明者】
【氏名】菅井 駿
【テーマコード(参考)】
2F065
【Fターム(参考)】
2F065AA04
2F065AA53
2F065CC14
2F065FF04
2F065FF11
2F065MM06
2F065PP22
2F065QQ28
2F065RR08
2F065SS13
(57)【要約】      (修正有)
【課題】本発明は、少なくとも構造物内の構成物を示す三次元点群モデルデータと移動体により取得される三次元点群センシングデータとの比較データに応じた結果データを生成可能な情報処理システム等を提供すること。
【解決手段】本発明の情報処理システム等は、少なくとも構造物内の構成物に関する三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、前記比較データに基づく結果データを生成する結果データ生成部と、を備える。前記三次元点群モデルデータは、前記三次元モデルデータ内で仮想センサを移動させて点群データを取得することで点群化して生成される。
【選択図】図1
【特許請求の範囲】
【請求項1】
少なくとも構造物内の構成物に関する三次元モデルデータを点群化した三次元点群モデ
ルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシン
グデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づく結果データを生成する結果データ生成部と、を備える、
ことを特徴とする情報処理システム。
【請求項2】
前記三次元点群モデルデータは、前記三次元モデルデータ内で仮想センサを移動させて
点群データを取得することで点群化して生成される、
ことを特徴とする請求項1に記載の情報処理システム。
【請求項3】
前記比較データは、前記三次元点群モデルデータ及び前記三次元点群センシングデータ
間の差分情報を含む、
ことを特徴とする請求項1または2のいずれかに記載の情報処理システム。
【請求項4】
前記差分情報に基づき、前記三次元モデルデータの更新データを生成するデータ更新部
をさらに備える、
ことを特徴とする請求項3に記載の情報処理システム。
【請求項5】
前記データ更新部は、前記差分情報に応じて構成物を推定し、前記三次元モデルデータ
における前記構成物を示す構成物情報の変更のための前記更新データを生成する、
ことを特徴とする請求項4に記載の情報処理システム。
【請求項6】
前記データ更新部により所定の構成物が存在することは推定可能であるが前記構成物の
構成物情報の推定ができない場合には、推定ができなかったことを示す不明モデルデータ
を前記三次元モデルデータ上に配置する、
ことを特徴とする請求項5に記載の情報処理システム。
【請求項7】
前記データ更新部により所定の構成物が存在することは推定可能であるが前記構成物の
構成物情報の推定ができない場合には、前記差分情報に基づき推定される形状の不明モデ
ルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする請求項5に記載の情報処理システム。
【請求項8】
前記不明モデルデータのテクスチャは、前記センサによりセンシングした際に取得され
た撮影画像である、
ことを特徴とする請求項6または7のいずれかに記載の情報処理システム。
【請求項9】
前記比較データは、前記三次元点群センシングデータにおける自己位置推定情報に基づ
き推定される前記三次元点群モデルデータにおける自己位置推定情報である、
ことを特徴とする請求項1ないし8のいずれかに記載の情報処理システム。
【請求項10】
比較部により、少なくとも構造物内の構成物に関する三次元モデルデータを点群化した
三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次
元点群センシングデータと、を互いに比較した比較データを生成するステップと、
結果データ生成部により、前記比較データに基づく結果データを生成するステップと、
を含む、
ことを特徴とするコンピュータによる情報処理方法。
【請求項11】
比較部により、少なくとも構造物内の構成物に関する三次元モデルデータを点群化した
三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次
元点群センシングデータと、を互いに比較した比較データを生成するステップと、
結果データ生成部により、前記比較データに基づく結果データを生成するステップと、
をコンピュータに実行させることを特徴とするプログラム。
【請求項12】
少なくとも構造物内の構成物に関する三次元モデルデータを点群化した三次元点群モデ
ルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシン
グデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づく結果データを生成する結果データ生成部と、を備える、
ことを特徴とする移動体。
【請求項13】
少なくとも構造物内の構成物に関する三次元モデルデータを点群化した三次元点群モデ
ルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシン
グデータと、を互いに比較した比較データに基づき、前記三次元モデルデータの更新デー
タを生成するデータ更新部、を備える、
ことを特徴とする管理サーバ。


【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報処理システム、情報処理方法、プログラム、移動体、管理サーバに関す
る。
【背景技術】
【0002】
近年、ドローン(Drone)や無人航空機(UAV:Unmanned Aeria
l Vehicle)などの飛行体(以下、「飛行体」と総称する)や無人地上車両(U
GV:Unmanned Ground Vehicle)などの走行体などの自律制御
可能な移動体が産業に利用され始めている。こうした中で、特許文献1には、LIDAR
により周辺環境のポイントクラウド(点群)を取得して屋内を飛行するシステムが開示さ
れている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開2020-131930号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、上記特許文献1では、飛行体が取得した点群データはオペレータ端末(
ユーザ端末)に転送される旨が開示されているものの、点群データの有効利用については
記載されていない。
【0005】
本発明はこのような背景を鑑みてなされたものであり、少なくとも構造物内の構成物を
示す三次元点群モデルデータと移動体により取得される三次元点群センシングデータとの
比較データに応じた結果データを生成可能な情報処理システム等を提供することを目的と
する。
【課題を解決するための手段】
【0006】
上記課題を解決するための本発明の情報処理システム等は、少なくとも構造物内の構成
物に関する三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内を
センサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較し
た比較データを生成する比較部と、前記比較データに基づく結果データを生成する結果デ
ータ生成部と、を備える。
【発明の効果】
【0007】
本発明によれば、特に、少なくとも構造物内の構成物を示す三次元点群モデルデータと
移動体により取得される三次元点群センシングデータとの比較データに応じた結果データ
を生成可能な情報処理システム等を提供することができる。
【図面の簡単な説明】
【0008】
図1】本発明の実施の形態にかかる情報処理システムの構成を示す図である。
図2図1の管理サーバのハードウェア構成を示すブロック図である。
図3図1のユーザ端末のハードウェア構成を示すブロック図である。
図4図1の移動体のハードウェア構成を示すブロック図である。
図5図1の管理サーバの機能を示すブロック図である。
図6図1の移動体の機能を示すブロック図である。
図7】本発明の実施の形態にかかる情報処理方法のフローチャートである。
図8】本発明の実施の形態にかかる三次元モデルデータの表示例である。
図9】本発明の実施の形態にかかる三次元点群モデルデータの表示例である。
図10】本発明の実施の形態にかかる三次元点群センシングデータの表示例である。
図11】本発明の実施の形態にかかる三次元データ同士をフィッティングした際の表示例である。
図12】本発明の実施の形態にかかる比較データの表示例である。
【発明を実施するための形態】
【0009】
本発明の実施形態の内容を列記して説明する。本発明の実施の形態による情報処理シス
テム等は、以下のような構成を備える。
[項目1]
少なくとも構造物内の構成物に関する三次元モデルデータを点群化した三次元点群モデ
ルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシン
グデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づく結果データを生成する結果データ生成部と、を備える、
ことを特徴とする情報処理システム。
[項目2]
前記三次元点群モデルデータは、前記三次元モデルデータ内で仮想センサを移動させて
点群データを取得することで点群化して生成される、
ことを特徴とする請求項1に記載の情報処理システム。
[項目3]
前記比較データは、前記三次元点群モデルデータ及び前記三次元点群センシングデータ
間の差分情報を含む、
ことを特徴とする請求項1または2のいずれかに記載の情報処理システム。
[項目4]
前記差分情報に基づき、前記三次元モデルデータの更新データを生成するデータ更新部
をさらに備える、
ことを特徴とする請求項3に記載の情報処理システム。
[項目5]
前記データ更新部は、前記差分情報に応じて構成物を推定し、前記三次元モデルデータ
における前記構成物を示す構成物情報の変更のための前記更新データを生成する、
ことを特徴とする請求項4に記載の情報処理システム。
[項目6]
前記データ更新部により所定の構成物が存在することは推定可能であるが前記構成物の
構成物情報の推定ができない場合には、推定ができなかったことを示す不明モデルデータ
を前記三次元モデルデータ上に配置する、
ことを特徴とする請求項5に記載の情報処理システム。
[項目7]
前記データ更新部により所定の構成物が存在することは推定可能であるが前記構成物の
構成物情報の推定ができない場合には、前記差分情報に基づき推定される形状の不明モデ
ルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする請求項5に記載の情報処理システム。
[項目8]
前記不明モデルデータのテクスチャは、前記センサによりセンシングした際に取得され
た撮影画像である、
ことを特徴とする請求項6または7のいずれかに記載の情報処理システム。
[項目9]
前記比較データは、前記三次元点群センシングデータにおける自己位置推定情報に基づ
き推定される前記三次元点群モデルデータにおける自己位置推定情報である、
ことを特徴とする請求項1ないし8のいずれかに記載の情報処理システム。
[項目10]
比較部により、少なくとも構造物内の構成物に関する三次元モデルデータを点群化した
三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次
元点群センシングデータと、を互いに比較した比較データを生成するステップと、
結果データ生成部により、前記比較データに基づく結果データを生成するステップと、
を含む、
ことを特徴とするコンピュータによる情報処理方法。
[項目11]
比較部により、少なくとも構造物内の構成物に関する三次元モデルデータを点群化した
三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次
元点群センシングデータと、を互いに比較した比較データを生成するステップと、
結果データ生成部により、前記比較データに基づく結果データを生成するステップと、
をコンピュータに実行させることを特徴とするプログラム。
[項目12]
少なくとも構造物内の構成物に関する三次元モデルデータを点群化した三次元点群モデ
ルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシン
グデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づく結果データを生成する結果データ生成部と、を備える、
ことを特徴とする移動体。
[項目13]
少なくとも構造物内の構成物に関する三次元モデルデータを点群化した三次元点群モデ
ルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシン
グデータと、を互いに比較した比較データに基づき、前記三次元モデルデータの更新デー
タを生成するデータ更新部、を備える、
ことを特徴とする管理サーバ。
【0010】
<実施の形態の詳細>
以下、本発明の実施の形態による情報処理システム、情報処理方法、プログラム、移動
体、管理サーバについての実施の形態を説明する。添付図面において、同一または類似の
要素には同一または類似の参照符号及び名称が付され、各実施形態の説明において同一ま
たは類似の要素に関する重複する説明は省略することがある。また、各実施形態で示され
る特徴は、互いに矛盾しない限り他の実施形態にも適用可能である。
【0011】
<構成>
図1に示されるように、本実施の形態における情報処理システムは、管理サーバ1と、
一以上のユーザ端末2と、一以上の移動体4(例えば、飛行体や走行体など)と、一以上
の移動体格納装置5とを有している。管理サーバ1と、ユーザ端末2と、移動体4と、移
動体格納装置5は、ネットワークを介して互いに通信可能に接続されている。なお、図示
された構成は一例であり、これに限らず、例えば、移動体格納装置5を有さずに、ユーザ
により持ち運びされる構成などでもよい。
【0012】
<管理サーバ1>
図2は、管理サーバ1のハードウェア構成を示す図である。なお、図示された構成は一
例であり、これ以外の構成を有していてもよい。
【0013】
図示されるように、管理サーバ1は、ユーザ端末2と、移動体4、移動体格納装置5と
接続され本システムの一部を構成する。管理サーバ1は、例えばワークステーションやパ
ーソナルコンピュータのような汎用コンピュータとしてもよいし、或いはクラウド・コン
ピューティングによって論理的に実現されてもよい。
【0014】
管理サーバ1は、少なくとも、プロセッサ10、メモリ11、ストレージ12、送受信
部13、入出力部14等を備え、これらはバス15を通じて相互に電気的に接続される。
【0015】
プロセッサ10は、管理サーバ1全体の動作を制御し、各要素間におけるデータの送受
信の制御、及びアプリケーションの実行及び認証処理に必要な情報処理等を行う演算装置
である。例えばプロセッサ10はCPU(Central Processing Un
it)および/またはGPU(Graphics Processing Unit)で
あり、ストレージ12に格納されメモリ11に展開された本システムのためのプログラム
等を実行して各情報処理を実施する。
【0016】
メモリ11は、DRAM(Dynamic Random Access Memor
y)等の揮発性記憶装置で構成される主記憶と、フラッシュメモリやHDD(Hard
Disc Drive)等の不揮発性記憶装置で構成される補助記憶と、を含む。メモリ
11は、プロセッサ10のワークエリア等として使用され、また、管理サーバ1の起動時
に実行されるBIOS(Basic Input / Output System)、
及び各種設定情報等を格納する。
【0017】
ストレージ12は、アプリケーション・プログラム等の各種プログラムを格納する。各
処理に用いられるデータを格納したデータベースがストレージ12に構築されていてもよ
い。
【0018】
送受信部13は、管理サーバ1をネットワークに接続する。なお、送受信部13は、B
luetooth(登録商標)及びBLE(Bluetooth Low Energy
)の近距離通信インターフェースを備えていてもよい。
【0019】
入出力部14は、キーボード・マウス類等の情報入力機器、及びディスプレイ等の出力
機器である。
【0020】
バス15は、上記各要素に共通に接続され、例えば、アドレス信号、データ信号及び各
種制御信号を伝達する。
【0021】
<ユーザ端末2>
図3に示されるユーザ端末2もまた、プロセッサ20、メモリ21、ストレージ22、
送受信部23、入出力部24等を備え、これらはバス25を通じて相互に電気的に接続さ
れる。各要素の機能は、上述した管理サーバ1と同様に構成することが可能であることか
ら、各要素の詳細な説明は省略する。
【0022】
<移動体4>
移動体4は、ドローンや無人航空機などの飛行体や無人地上車両などの走行体などを含
む既知の移動体であって、特に自律制御可能な移動体である。移動体4の具体的な例とし
て、走行体4を例示して以下で説明する。図4は、走行体4のハードウェア構成を示すブ
ロック図である。コントローラ41は、プログラマブルプロセッサ(例えば、中央演算処
理装置(CPU))などの1つ以上のプロセッサを有することができる。
【0023】
また、コントローラ41は、移動体4全体の動作を制御し、各要素間におけるデータの
送受信の制御、及びアプリケーションの実行及び認証処理に必要な情報処理等を行う演算
装置である。コントローラ41は、メモリ411を有しており、当該メモリにアクセス可
能である。メモリ411は、1つ以上のステップを行うためにコントローラ41が実行可
能であるロジック、コード、および/またはプログラム命令を記憶している。また、コン
トローラ41は、慣性センサ(加速度センサ、ジャイロセンサ)、GPSセンサ、近接セ
ンサ(例えば、ライダー)等のセンサ類412を含みうる。
【0024】
メモリ411は、例えば、SDカードやランダムアクセスメモリ(RAM)などの分離
可能な媒体または外部の記憶装置を含んでいてもよい。カメラ/センサ類42から取得し
たデータは、メモリ411に直接に伝達されかつ記憶されてもよい。例えば、カメラ等で
撮影した静止画・動画データが内蔵メモリ又は外部メモリに記録されてもよいが、これに
限らず、カメラ/センサ類42または内蔵メモリからネットワークNWを介して、少なく
とも管理サーバ1やユーザ端末2、移動体格納装置5のいずれかに1つに記録されてもよ
い。カメラ42は走行体4にジンバルを介して設置されていてもよい。
【0025】
コントローラ41は、走行体4の状態を制御するように構成された図示しない制御モジ
ュールを含んでいる。例えば、制御モジュールは、走行体の空間的配置、速度、および/
または加速度を調整するために、走行体の走行部(モータ45や車輪46等)を制御する
。バッテリー48から給電されるモータ45により車輪46が回転することで走行体の推
進力を生じさせる。制御モジュールは、カメラ/センサ類42の状態のうちの1つ以上を
制御することができる。そして、後述の移動経路情報記憶部480に格納された移動経路
情報に基づき、自律移動制御を行うように構成することも可能である。なお、図4の例示
においては、モータ45が車輪46ごとに設けられているが、これに代えて前後各2つの
車輪で共通としたり(すなわち、モータ45が前後で2つ)、前後4つの車輪で共通とし
たり(すなわち、モータ45が1つ)してもよく、これらは限定されない。
【0026】
コントローラ41は、1つ以上の外部のデバイス(例えば、送受信機(プロポ)49、
管理サーバ1、端末、表示装置、または他の遠隔の制御器)からのデータを送信および/
または受け取るように構成された送受信部47と通信可能である。送受信機49は、有線
通信または無線通信などの任意の適当な通信手段を使用することができる。
【0027】
例えば、送受信部47は、ローカルエリアネットワーク(LAN)、ワイドエリアネッ
トワーク(WAN)、赤外線、無線、WiFi、ポイントツーポイント(P2P)ネット
ワーク、電気通信ネットワーク、クラウド通信などのうちの1つ以上を利用することがで
きる。
【0028】
送受信部47は、カメラ/センサ類42で取得したデータ、コントローラ41が生成し
た処理結果、所定の制御データ、端末または遠隔の制御器からのユーザコマンドなどのう
ちの1つ以上を送信および/または受け取ることができる。
【0029】
本実施の形態によるカメラ/センサ類42は、慣性センサ(加速度センサ、ジャイロセ
ンサ)、GPSセンサ、近接センサ(例えば、LiDAR(Light Detecti
on And Ranging)等)、またはビジョン/イメージセンサ(例えば、カメ
ラ)を含み得る。
【0030】
図5及び図6は、管理サーバ1及び移動体4に実装される機能をそれぞれ例示したブロ
ック図である。本発明の実施の形態においては、例えば、構造物(例えばビルなどの建物
)内の構成物(例えば、壁、柱、階段、設備など)の構成物情報及び構成物の配置情報を
含む三次元モデルデータ(例えば、BIMデータやCADデータなど)を点群化した三次
元点群モデルデータと、構造物内をセンサによりセンシングした結果を示す三次元点群セ
ンシングデータ(例えば、SLAMデータなど)と、を互いに比較した比較結果情報を生
成し、当該比較結果情報に応じた結果データを生成するために各種機能部を有している。
【0031】
本実施の形態においては、管理サーバ1は、通信部110、三次元点群モデルデータ生
成部120、データ更新部130、情報出力部140、三次元モデルデータ記憶部150
、取得データ記憶部160を備えている。さらに、移動体4は、通信部410、三次元点
群センシングデータ取得部420、比較部430、比較結果データ送信部440、自己位
置推定部450、三次元データ記憶部460、生成データ記憶部470、移動経路情報記
憶部480を備えている。なお、各種機能部は、管理サーバ1のプロセッサ10または移
動体4のコントローラ41の能力等に合わせて、プロセッサ10またはコントローラ41
のうちのいずれの構成において実現されていてもよい。
【0032】
通信部110は、ユーザ端末2や、移動体4、移動体格納装置5と通信を行う。通信部
110は、ユーザ端末2等からの各種要求やデータ等を受け付ける受付部としても機能す
る。
【0033】
三次元点群モデルデータ生成部120は、構造物内の構成物に関する構成物情報(寸法
情報も含む)及び構成物の配置に関する配置情報を含む三次元モデルデータから、構造物
内の構成物に関する三次元点群モデルデータを生成する。三次元モデルデータ、三次元点
群モデルデータは、それぞれ設定された任意の点を原点(基準点)とした三次元の直交座
標系により表現されるデータであって、三次元データ記憶部150に記憶されて管理され
る。
【0034】
三次元モデルデータは、CAD(Computer―Aided Design)設計
ソフトウェアなどで作成されたデータを基にして作成された、構造物内の構成物の配置を
示し、寸法情報を有する三次元モデルデータであればどのようなデータであってもよく、
例えば、BIM(Building Information Modeling)デー
タ、CIM(Construction Information Modeling)
データ、CADデータ、City―GML等のGMLデータ、BIMデータ等から再構築
された三次元モデルデータ(例えば、BIMデータに付与されている材質情報等を除き表
面の位置情報等を抽出して三次元モデル化したデータ等)、複数種類の三次元モデルデー
タ(例えば、BIMデータとCity―GMLデータなど)を組み合わせて再構築された
三次元モデルデータなどであってもよいし、二次元の設計図データに基づき所定の高さを
有する構成物を生成することで得られた三次元モデルデータであってもよい。
【0035】
三次元点群モデルデータの生成方法は、三次元モデルデータから構造物内の構成物に関
する三次元点群モデルデータが生成可能であればどのような方法であってもよいが、例え
ば、三次元モデルデータの構造物内を仮想のセンサ(例えば、仮想のLiDAR)を搭載
した仮想の移動体4を移動させることにより構造物内の構成物に関する三次元点群モデル
データを生成してもよい。これにより、理論上、構造物内を移動体4のセンサで実測した
場合の点群センシングデータに近い点群データを生成することができる。また、他の三次
元点群モデルデータの生成方法は、三次元モデルデータを所定の間隔で均等に点群化して
もよいし、三次元モデルデータがポリゴンデータである場合には各頂点に点を配置して点
群化してもよいし、既知の点群化技術(点群データへの変換技術)を用いて点群化しても
よい。
【0036】
ここで、本実施の形態における処理の流れを鑑み、移動体4の機能部について一旦説明
する。
【0037】
通信部410は、管理サーバ1や、ユーザ端末2、移動体格納装置5と通信を行う。通
信部410は、ユーザ端末2等からの各種要求やデータ等を受け付ける受付部としても機
能する。
【0038】
三次元点群センシングデータ取得部420は、三次元モデルデータの対象となっている
構造物内を移動体4に搭載したセンサ(例えば、LiDAR)により実測することで生成
された三次元点群センシングデータを取得する。三次元点群センシングデータは、設定さ
れた任意の点を原点(基準点)とした三次元の直交座標系により表現されるデータであっ
て、三次元データ記憶部460に記憶されて管理される。
【0039】
比較部430は、例えば三次元点群モデルデータ生成部120により生成された三次元
点群モデルデータと、三次元点群センシングデータを比較し、比較データを生成する。三
次元モデルデータは、例えば事前に管理サーバ1から三次元データ記憶部460に記憶さ
れて管理され、比較データは、例えば生成データ記憶部470に記憶されて管理される。
【0040】
比較方法は、点群同士を比較して比較データが生成可能であればどのような方法であっ
てもよく、点群間比較の既存技術であってもよいが、本実施の形態においては両三次元点
群データのフィッティング(両三次元点群データの縮尺が異なる場合には縮尺合わせも含
む)を行って、例えば三次元点群モデルデータの点をベースに三次元点群センシングデー
タを比較して所定のズレ幅がある点や、そもそも点の有無が異なる点に関する比較データ
を生成する方法であってもよく、より具体的な例としては、例えば八分木を用いて所定値
の大きさのボクセルで空間を区切り、三次元点群モデルデータで点がなかったボクセル内
に、三次元スキャン点群データの点が存在する、または、存在しない場合に差分の点とし
て判定するようにしてもよい。すなわち、比較データは、このように両者の差が所定以上
の点群データである差分点群データであってもよい。なお、上述のとおり、両点群データ
の縮尺が異なる場合については縮尺を一致させるようにフィッティングを行うが、若干の
縮尺違い(すなわち、略一致)などの状況においては、ボクセルによる空間分解能に応じ
て、点のズレがあったとしても点の有無の変化がないと判定することが可能であるので、
縮尺一致のためのフィッティングは行わなくとも縮尺違いによる誤差は軽減される。
【0041】
また、比較部430による点群データの比較は、所定の移動経路を移動後の三次元点群
センシングデータと三次元点群モデルデータとの比較であってもよいが、移動経路を移動
中に取得した部分的な三次元点群センシングデータと三次元点群モデルデータとの比較で
あってもよい。そして、後者の比較の場合においては、比較データとして、三次元点群セ
ンシングデータにおける自己位置推定情報に基づき推定される三次元点群モデルデータに
おける自己位置推定情報を含んでいてもよい。
【0042】
結果データ送信部440は、通信部410を介して、比較部430により生成された比
較データに基づく結果データを生成し、外部(特に管理サーバ1やユーザ端末2)へ送信
する。結果データは、例えば比較データをそのまま用いたものであってもよいし、比較デ
ータから不要な情報(例えばズレ幅が所定値よりも小さい情報など)を削除したりなど比
較データを編集したデータであってもよい。
【0043】
ここで、本実施の形態における処理の流れを鑑み、管理サーバ1の機能部について再度
説明する。
【0044】
データ更新部130は、移動体4から受信した結果データに基づき、三次元モデルデー
タの更新のための更新データを生成し、当該更新データに応じて三次元モデルデータを更
新する。結果データは、取得データ記憶部160にて記憶され管理されてもよい。データ
更新部130は、より具体的には、例えば、点群の形状から三次元モデルデータにおける
構成物情報を推定するための学習モデルを用いたり、または、三次元モデルデータにおけ
る構成物の形状を点群化した構成物点群形状情報データベースを参照及び比較して推定す
るなどして、結果データの点群データ(特に差分点群データ)に基づき、変化があった構
成物の構成物情報(特に、構成物識別情報や構成物の種別情報など構成物が何かを特定す
る情報)を推定するとともに、三次元モデルデータと比較していずれの構成物がどのよう
に変化しているか(数の増減または場所の移動があるか)を判定する。そして、データ更
新部130は、この判定結果に基づいて、三次元モデルデータの構成物情報を変化に合わ
せて、例えば変化が判定された構成物のモデルデータを追加したり、削除したり、位置を
変更したりなどと更新する。これにより、移動体4によるセンシング時の構造物内の構成
物の状態を反映した三次元モデルデータに更新が可能となる。
【0045】
なお、データ更新部130は、上述のとおり結果データに基づき構成物(構成物情報)
を推定する際に、構成物情報(特に構成物識別情報や構成物の種別情報など構成物がどの
ような種類のものかを特定する情報)が推定できないが何らかの構成物が存在することは
推定される場合には、例えば、推定できなかったことを示す所定形状の不明モデルデータ
(例えば、円柱や四角柱などの図形的な立体形状)を三次元モデルデータ上に配置するよ
うにしてもよいし、結果データの点群データ(特に差分点群データ)に基づき推定される
不明な構成物の形状(近似した形状を含む)の不明モデルデータを三次元モデルデータ上
に配置してもよいし、三次元モデルデータ上に差分点群データ(特に、比較の結果増えた
点群データ)を、例えば推定できなかった点群であることを示す色付けなどして重ね合わ
せて配置してもよい。さらに、上述の不明モデルデータのテクスチャを他の構成物とは異
なるテクスチャ(例えば、単色の目立つ色のテクスチャや、?マークなどの記号や「不明
」というテキストなどが記載されているテクスチャなど)としてもよいし、例えばセンサ
によりセンシングして点群データを取得する際などに取得された不明な構成物の位置の撮
影画像を不明モデルデータのテクスチャとしてもよい。これにより、三次元モデルデータ
を確認する際に、現場で確かめる必要がある場所が明らかになる。
【0046】
情報出力部140は、三次元データ記憶部150に記憶される三次元モデルデータや三
次元点群モデルデータ、三次元点群センシングデータ、取得データ記憶部160に記憶さ
れる結果データや撮影データ(静止画や動画)、移動関連情報記憶部170に記憶される
移動経路情報や自己位置情報、などに基づいてユーザ端末2や移動体4に送信するための
出力情報を生成する。本実施の形態においては、例えば、ユーザ端末2において三次元モ
デルデータや移動経路情報を可視化する表示のための出力情報や、現在の自己位置情報に
基づく現在位置の表示のための出力情報、取得情報の位置情報に対応付けられた位置に対
応する取得情報を閲覧するためのリンクとなる記号などの印が付された三次元データ(例
えば、三次元モデルデータや三次元点群データ)を閲覧可能にするための出力情報を生成
してもよい。そして、ユーザ端末2において、当該リンクをユーザ端末2上で選択する操
作入力を受け付けることで、対応する取得情報が表示されるようにしてもよい。この時、
三次元データとして、BIMデータに関連する三次元データを用いた場合、BIMデータ
に関連付けて三次元データを構成する構成物ごとの情報を持つことが可能なので、構成物
単位で紐づけ(例えばリンク生成)が可能となる。
【0047】
図7を参照して、本実施形態にかかる情報処理方法(特に、三次元モデルデータの更新
方法)について説明する。図7には、本実施形態にかかる情報処理のフローチャートが例
示されている。図8-11には、各三次元データを例示している。
【0048】
まず、管理サーバ1は、三次元点群モデルデータ生成部により、構造体の構造物に関す
る三次元モデルデータ(図8参照。例えば、BIMデータから生成された三次元モデルデ
ータ)を点群化した三次元点群モデルデータ(図9参照)を生成する(S101)。そし
て、生成した三次元点群モデルデータは、通信部101を介して移動体4へ送信される(
S102)。移動体4により受信された三次元点群モデルデータは、例えば三次元データ
記憶部460に記憶されてもよい。なお、このS102は、移動体4において比較処理が
行われるまでに実行されるのであれば、任意のタイミングで実行されてよい。
【0049】
次に、移動体4は、構造体内をセンサにより実測するために、移動関連情報記憶部17
0に記憶される移動経路情報及びコントローラ41の制御に基づき、自律的な移動を開始
する(S103)。そして、移動体4は、三次元点群センシングデータ取得部420によ
り、移動中にセンサ(例えば、LiDAR)により生成された三次元点群センシングデー
タ(図10に例示されるように、センサを中心にセンシングして取得される三次元点群セ
ンシングデータ)を取得する(S104)。なお、移動経路情報は、例えばユーザ端末2
によりユーザが生成した移動経路に関する情報であってもよいし、移動体4をプロポ等の
外部コントローラで移動させた移動経路を記憶した情報であってもよい。また、移動体4
の移動は、上述の自律的な移動に限らず、ユーザ端末2や外部コントローラの入力操作に
したがって移動するようにしてもよい。
【0050】
次に、移動体4は、比較部430により、移動中または移動終了後の少なくとも何れか
において、取得した三次元点群センシングデータと三次元点群モデルデータとを比較して
比較データを生成する(S105)。比較データは、移動中においては、取得する部分的
な三次元点群センシングデータと三次元点群モデルデータとの比較を行い、三次元点群セ
ンシングデータにおける自己位置推定情報に基づき推定される三次元点群モデルデータに
おける自己位置推定情報を含んでいてもよい。また、比較データの生成は、移動終了後に
おいては、例えば両三次元点群データの比較(図11の例示では両三次元点群データを重
ね合わせている)を行って、例えば両者間で所定のズレ幅がある点や、そもそも点の有無
が異なる点に関する比較データ、すなわち、両者の差が所定以上の点群データ(例えば、
同じボクセル内に存在しない、または、新たに存在する点データの群)である差分点群デ
ータ600(図12参照)を生成してもよい。さらに、比較データは、図12に例示され
るように、三次元点群モデルデータまたは三次元点群センシングデータの少なくともいず
れかに重ね合わせて表示されてもよい。
【0051】
次に、移動体4は、結果データ送信部440により、通信部410を介して、比較部4
30により生成された比較データに基づく結果データを生成し、外部(特に管理サーバ1
やユーザ端末2)へ送信する(S107)。結果データは、上述のとおり、例えば比較デ
ータをそのまま用いたものであってもよいし、比較データから不要な情報(例えばズレ幅
が所定値よりも小さい情報など)を削除したりなど比較データを編集したデータであって
もよい。結果データは、所定位置からセンシングした三次元点群センシングデータに対応
する単一の比較データに基づくデータに限らず、移動体4が移動しながらセンシングした
複数位置における複数の比較データをまとめたデータ(例えば、複数位置における複数の
三次元点群センシングデータに対応する複数の差分点群データ600を重ね合わせた差分
点群データ)であってもよい。なお、このようなまとめ処理は、移動体4においてステッ
プS107内で行われてもよいし、後述するステップS108内で管理サーバ1において
行われてもよい。
【0052】
次に、管理サーバ1は、更新部130により、受信した結果データに基づき、三次元モ
デルデータを更新する(S108)。更新は、結果データに基づき変化があった構成物の
構成物情報を推定するとともに、三次元モデルデータの構成物情報を結果データから判定
される変化に合わせて、例えば変化が判定された構成物のモデルデータを追加したり、削
除したり、位置を変更したりなどと変更する。
【0053】
次に、管理サーバ1は、情報出力部140により、ユーザ端末2において所定の情報を
少なくとも表示するために送信する出力情報(例えば、上述のとおり、三次元モデルデー
タや移動経路情報を可視化する表示のための出力情報や、現在の自己位置情報に基づく現
在位置の表示のための出力情報、取得情報の位置情報に対応付けられた位置に対応する取
得情報を閲覧するためのリンクとなる記号などの印が付された三次元データを閲覧可能に
するための出力情報)を生成する(S109)。そして、生成された出力情報は、ユーザ
端末2や移動体4へ送信されてもよい。
【0054】
このように、本発明は、少なくとも構造物内の構成物を示す三次元点群モデルデータと
移動体により取得される三次元点群センシングデータとの比較データに応じた結果データ
を生成可能な情報処理システム等を提供することができる。
【0055】
なお、上述の実施例では移動体4による構造物内のセンシングを具体例としたが、構造
物内をセンサでセンシングできればどのような構成でもよいため、例えばユーザ等の作業
者がセンサデバイスを持ち歩くことで三次元点群センシングデータを生成してもよく、そ
の他の機能部(通信部410、三次元点群センシングデータ取得部420、比較部430
、比較結果データ送信部440、自己位置推定部450、三次元データ記憶部460、生
成データ記憶部470、移動経路情報記憶部480など)については、センサデバイスが
直接または通信可能に接続される端末(ユーザ端末2を含む)や当該端末を介して接続さ
れる管理サーバ1のプロセッサやメモリにおいて実現される構成であってもよい。その場
合、S103の移動開始ステップは、センサを起動させて作業者が移動するステップであ
り得る。
【0056】
また、上述の実施例では移動体4による構造物内の情報取得を具体例としたが、例えば
構造物外の点検であってもよく、CIMデータやCity―GML等の構造物の表面を構
成するデータを含む三次元モデルデータを用い、このような三次元モデルデータを点群化
した三次元点群モデルデータと、三次元点群センシングデータとを比較することで、構造
物内同様の結果データを生成し、自己位置推定情報を取得したり、更新部130による構
造物外の構成(例えば、看板やアンテナ、増築した構成など)の更新などを行うことが可
能となる。さらに、構造物内外の両方に対する処理を組み合わせてもよい。
【0057】
また、移動体4は、構造物の内壁および/または外壁の所定の事象の有無を点検するた
めに利用される装置、機器等をさらに備えていてもよい。より具体的には、撮像装置(可
視光カメラ、赤外線カメラ、金属探知機、超音波測定器等)や、打鍵装置等、探知装置(
金属探知機)、集音装置、臭気測定器、ガス検知器、空気汚染測定器、検出装置(宇宙線
、放射線、電磁波等を検出するための装置)等の点検対象構造物の状態を知るために必要
な装置は全て採用され得る。
【0058】
また、実施例は例えば構造物内の警備や監視の際に実行されてもよく、警備や監視のた
めに利用される装置、機器等をさらに備えていてもよい。より具体的には、撮像装置(可
視光カメラ、赤外線カメラ、暗視カメラ、金属探知機、超音波測定器等)や、センサ装置
(モーションセンサ、赤外線センサ等)等、警備・監視対象構造物の異常や侵入者等を撮
像・検知するために必要な装置は全て採用され得る。
【0059】
本発明の移動体は、カメラ等を搭載した撮影用の移動体としても好適に使用することが
できる他、セキュリティ分野、インフラ監視、測量、スポーツ会場・工場・倉庫等の建物
や構造物内の点検、災害対応等の様々な産業にも利用することができる。
【0060】
上述した実施の形態は、本発明の理解を容易にするための例示に過ぎず、本発明を限定
して解釈するためのものではない。本発明は、その趣旨を逸脱することなく、変更、改良
することができると共に、本発明にはその均等物が含まれることは言うまでもない。
【符号の説明】
【0061】
1 管理サーバ
2 ユーザ端末
4 移動体
5 移動体格納装置
図1
図2
図3
図4
図5
図6
図7
図8
図9
図10
図11
図12
【手続補正書】
【提出日】2022-04-27
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
少なくとも構造物内の構成物を特定する構成物情報を含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物を推定し、前記推定された構成物を特定する前記構成物情報を前記三次元モデルデータに反映するための更新データを生成するデータ更新部と、
を備える、
ことを特徴とする情報処理システム。
【請求項2】
前記データ更新部により所定の構成物が存在することは推定可能であるが当該構成物を特定する構成物情報の推定ができない場合には、推定ができなかったことを示す不明モデルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする請求項に記載の情報処理システム。
【請求項3】
前記データ更新部により所定の構成物が存在することは推定可能であるが当該構成物を特定する構成物情報の推定ができない場合には、前記比較データに基づき推定される形状の不明モデルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする請求項に記載の情報処理システム。
【請求項4】
前記不明モデルデータのテクスチャは、前記センサによりセンシングした際に取得された撮影画像である、
ことを特徴とする請求項またはのいずれかに記載の情報処理システム。
【請求項5】
前記三次元モデルデータは、BIMデータまたはCIMデータ、GMLデータの少なくともいずれかに含まれる構成物情報を含む、
ことを特徴とする請求項1ないし4のいずれかに記載の情報処理システム。
【請求項6】
比較部により、少なくとも構造物内の構成物を特定する構成物情報を含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成するステップと、
データ更新部により、前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物を推定し、前記推定された構成物を特定する前記構成物情報を前記三次元モデルデータに反映するための更新データを生成するステップと、を含む、
ことを特徴とするコンピュータによる情報処理方法。
【請求項7】
比較部により、少なくとも構造物内の構成物を特定する構成物情報を含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成するステップと、
データ更新部により、前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物を推定し、前記推定された構成物を特定する前記構成物情報を前記三次元モデルデータに反映するための更新データを生成するステップと、
をコンピュータに実行させることを特徴とするプログラム。
【請求項8】
少なくとも構造物内の構成物を特定する構成物情報を含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物を推定し、前記推定された構成物を特定する前記構成物情報を前記三次元モデルデータに反映するための更新データを生成するデータ更新部と、を備える、
ことを特徴とする移動体。
【請求項9】
少なくとも構造物内の構成物を特定する構成物情報を含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物を推定し、前記推定された構成物を特定する前記構成物情報を前記三次元モデルデータに反映するための更新データを生成するデータ更新部、を備える、
ことを特徴とする管理サーバ。
【手続補正書】
【提出日】2022-07-15
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するデータ更新部と、
を備え、
前記構成物モデルデータは、点群データではない、
ことを特徴とする情報処理システム。
【請求項2】
前記データ更新部により所定の構成物が存在することは推定可能であるが当該構成物の種類を推定できない場合には、推定ができなかったことを示す不明モデルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする請求項1に記載の情報処理システム。
【請求項3】
前記データ更新部により所定の構成物が存在することは推定可能であるが当該構成物の種類を推定できない場合には、前記比較データに基づき推定される形状の不明モデルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする請求項2に記載の情報処理システム。
【請求項4】
前記不明モデルデータのテクスチャは、前記不明モデルデータに対応するものを撮影した撮影画像である、
ことを特徴とする請求項2または3のいずれかに記載の情報処理システム。
【請求項5】
前記三次元モデルデータは、BIMデータまたはCIMデータ、GMLデータの少なくともいずれかに含まれる構成物情報を含む、
ことを特徴とする請求項1ないし4のいずれかに記載の情報処理システム。
【請求項6】
比較部により、少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成するステップと、
データ更新部により、前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するステップと、を含
前記構成物モデルデータは、点群データではない、
ことを特徴とするコンピュータによる情報処理方法。
【請求項7】
比較部により、少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成するステップと、
データ更新部により、前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するステップと、
をコンピュータに実行させ、
前記構成物モデルデータは、点群データではない、
ことを特徴とするプログラム。
【請求項8】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するデータ更新部と、を備え、
前記構成物モデルデータは、点群データではない、
ことを特徴とする移動体。
【請求項9】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するデータ更新部、を備え、
前記構成物モデルデータは、点群データではない、
ことを特徴とする管理サーバ。
【手続補正書】
【提出日】2022-11-07
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づき、前記三次元点群センシングデータのみに存在する構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに新たに追加するための更新データを生成するデータ更新部と、
を備え、
前記構成物モデルデータは、点群データではない、
ことを特徴とする情報処理システム。
【請求項2】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するデータ更新部と、
を備え、
前記構成物モデルデータは、点群データではなく、
前記データ更新部により所定の構成物が存在することは推定可能であるが当該構成物種類をできない場合には、前記比較データに基づき推定される形状の不明モデルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする情報処理システム。
【請求項3】
比較部により、少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成するステップと、
データ更新部により、前記比較データに基づき、前記三次元点群センシングデータのみに存在する構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに新たに追加するための更新データを生成するステップと、を含み、
前記構成物モデルデータは、点群データではない、
ことを特徴とするコンピュータによる情報処理方法。
【請求項4】
比較部により、少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成するステップと、
データ更新部により、前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するステップと、を含み、
前記構成物モデルデータは、点群データではなく、
前記更新データを生成するステップにより所定の構成物が存在することは推定可能であるが当該構成物種類をできない場合には、前記比較データに基づき推定される形状の不明モデルデータを前記三次元モデルデータ上に配置するステップをさらに含む、
ことを特徴とするコンピュータによる情報処理方法。
【請求項5】
比較部により、少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成するステップと、
データ更新部により、前記比較データに基づき、前記三次元点群センシングデータのみに存在する構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに新たに追加するための更新データを生成するステップと、
をコンピュータに実行させ、
前記構成物モデルデータは、点群データではない、
ことを特徴とするプログラム。
【請求項6】
比較部により、少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成するステップと、
データ更新部により、前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するステップと、
をコンピュータに実行させ、
前記構成物モデルデータは、点群データではなく、
前記更新データを生成するステップにより所定の構成物が存在することは推定可能であるが当該構成物種類をできない場合には、前記比較データに基づき推定される形状の不明モデルデータを前記三次元モデルデータ上に配置するステップをさらに含む、
ことを特徴とするプログラム。
【請求項7】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づき、前記三次元点群センシングデータのみに存在する構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに新たに追加するための更新データを生成するデータ更新部と、を備え、
前記構成物モデルデータは、点群データではない、
ことを特徴とする移動体。
【請求項8】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データを生成する比較部と、
前記比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するデータ更新部と、を備え、
前記構成物モデルデータは、点群データではなく、
前記データ更新部により所定の構成物が存在することは推定可能であるが当該構成物種類をできない場合には、前記比較データに基づき推定される形状の不明モデルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする移動体。
【請求項9】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データに基づき、前記三次元点群センシングデータのみに存在する構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに新たに追加するための更新データを生成するデータ更新部、を備え、
前記構成物モデルデータは、点群データではない、
ことを特徴とする管理サーバ。
【請求項10】
少なくとも構造物内の構成物に対応する構成物モデルデータを含む三次元モデルデータを点群化した三次元点群モデルデータと、前記構造物内をセンサによりセンシングした結果を示す三次元点群センシングデータと、を互いに比較した比較データに基づき、前記三次元点群モデルデータ及び前記三次元点群センシングデータの間で差分となる構成物の種類を推定し、前記推定された構成物の種類に対応する構成物モデルデータを前記三次元モデルデータに反映するための更新データを生成するデータ更新部、を備え、
前記構成物モデルデータは、点群データではなく、
前記データ更新部により所定の構成物が存在することは推定可能であるが当該構成物種類をできない場合には、前記比較データに基づき推定される形状の不明モデルデータを前記三次元モデルデータ上に配置する、
ことを特徴とする管理サーバ。