(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-07-12
(45)【発行日】2024-07-23
(54)【発明の名称】森林用の情報処理装置、情報処理システム、及び、情報処理方法
(51)【国際特許分類】
G01C 21/26 20060101AFI20240716BHJP
G08G 1/005 20060101ALI20240716BHJP
G01C 15/00 20060101ALI20240716BHJP
【FI】
G01C21/26 P
G08G1/005
G01C15/00 103Z
(21)【出願番号】P 2023527546
(86)(22)【出願日】2022-03-31
(86)【国際出願番号】 JP2022016873
(87)【国際公開番号】W WO2022259750
(87)【国際公開日】2022-12-15
【審査請求日】2023-10-26
(31)【優先権主張番号】P 2021095962
(32)【優先日】2021-06-08
(33)【優先権主張国・地域又は機関】JP
(73)【特許権者】
【識別番号】591184046
【氏名又は名称】株式会社アドイン研究所
(74)【代理人】
【識別番号】110000442
【氏名又は名称】弁理士法人武和国際特許事務所
(72)【発明者】
【氏名】佐々木 浩二
(72)【発明者】
【氏名】塩沢 恵子
(72)【発明者】
【氏名】望月 寿彦
(72)【発明者】
【氏名】中島 大輔
【審査官】佐々木 佳祐
(56)【参考文献】
【文献】特開2019-46464(JP,A)
【文献】特開2006-300603(JP,A)
【文献】特開2011-64523(JP,A)
【文献】特許第5269729(JP,B2)
(58)【調査した分野】(Int.Cl.,DB名)
G01C 21/00-25/00
G08G 1/00-99/00
(57)【特許請求の範囲】
【請求項1】
森林でユーザの現在位置を特定する情報処理装置であって、
前記現在位置からレーザ光を周囲に発し、前記現在位置に対する各樹木までの距離を計測する計測部と、
前記森林を構成する樹木の配置を示すマップデータを取得する第1取得部と、
前記マップデータが示す前記樹木の特徴を示す樹木データを取得する第2取得部と、
前記ユーザの周辺を撮影して画像データを生成する撮影部と、
前記画像データを解析した解析結果、及び、前記計測部による計測結果に基づき、前記マップデータが示す第1樹木と、前記計測結果、又は、前記解析結果に基づいて注目する第2樹木とを対応させる対応部と、
前記第1樹木に対応する前記第2樹木である第3樹木が複数存在すると、複数の前記第3樹木の位置に基づき、前記現在位置を特定する第1特定部と
を備える情報処理装置。
【請求項2】
衛星と通信をして前記現在位置を特定する第2特定部と、
前記第1特定部、及び、前記第2特定部のうち、どちらで前記現在位置を特定するかを判断する判断部とを更に備える
請求項1に記載の情報処理装置。
【請求項3】
前記第3樹木に対し、前記樹木データを出力する出力部を更に備える
請求項1に記載の情報処理装置。
【請求項4】
前記出力部は、
前記第3樹木を基準にして、
目的地への方向、又は、前記目的地へのルートを更に出力する
請求項3に記載の情報処理装置。
【請求項5】
前記撮影部は、
前記ユーザの水平方向360°を撮影する
請求項1に記載の情報処理装置。
【請求項6】
前記マップデータ、及び、前記樹木データを記憶する記憶部を更に備え、
前記第1取得部、及び、前記第2取得部は、
前記記憶部から取得する
請求項1に記載の情報処理装置。
【請求項7】
前記ユーザ、又は、機械が利用する第1ルートを生成する第1ルート生成部と、
前記第1ルートに対して回避物が入力されると、前記回避物を回避した第2ルートを生成する第2ルート生成部とを更に備える
請求項1に記載の情報処理装置。
【請求項8】
前記樹木が倒れる可能性がある範囲を予測する予測部と、
前記範囲に前記ユーザである第1ユーザ、又は、前記ユーザとは異なる第2ユーザがいると、光、音、表示、振動、通信、又は、これらの組み合わせで警告を行う警告部とを更に備える
請求項1に記載の情報処理装置。
【請求項9】
前記現在位置から近距離にある第4樹木に対し、前記樹木データを出力する設定出力部を更に備える
請求項1に記載の情報処理装置。
【請求項10】
前記樹木のうち、樹高を計測する対象とする第5樹木が撮影されて前記画像データに写ると、前記画像データに基づいて、前記第5樹木の所定の計測高における径を計測する径計測部と、
前記森林ごとに、前記樹木の高さに対して前記樹木の直径が細くなる割合を前記計測高及び前記径に基づいて取得する第3取得部と、
前記径、及び、前記割合に基づき、前記樹高を計算する樹高計算部とを更に備える
請求項1に記載の情報処理装置。
【請求項11】
前記樹木に、一定間隔ごとの目印を出力する目印出力部を更に備える
請求項1に記載の情報処理装置。
【請求項12】
目的地へ前記ユーザが通った通過ルートを記録するルート記録部と、
前記通過ルートを学習モデルに学習させる学習部とを備える
請求項1に記載の情報処理装置。
【請求項13】
目的地へ前記ユーザが通った通過ルートを記録するルート記録部と、前記通過ルートを学習モデルに学習させて学習済みモデルを生成する学習部とを備える学習装置から、前記学習済みモデルを取得する学習済みモデル取得部と、
前記学習済みモデルを用いて、前記目的地へのルートを生成するルート生成部とを備える
請求項1に記載の情報処理装置。
【請求項14】
前記ユーザの生体情報を取得する生体情報取得部と、
前記生体情報に基づいて第3ルートを生成する第3ルート生成部とを更に備える
請求項1に記載の情報処理装置。
【請求項15】
回避物、工事に影響がある、危険である、又は、ルートを生成するのに影響がある注目物を入力する注目物入力部を更に備える
請求項1に記載の情報処理装置。
【請求項16】
航空データ、又は、行政情報を統合するデータ統合部を更に備える
請求項1に記載の情報処理装置。
【請求項17】
森林でユーザの現在位置を特定する情報処理装置であって、
前記現在位置からレーザ光を周囲に発し、前記現在位置に対する各樹木までの距離を計測する計測部と、
前記森林を構成する樹木の配置を示すマップデータを記憶する第1記憶部と、
前記マップデータが示す前記樹木の特徴を示す樹木データを記憶する第2記憶部と、
前記ユーザの周辺を撮影して画像データを生成する撮影部と、
前記画像データを解析した解析結果、及び、前記計測部による計測結果に基づき、前記マップデータが示す第1樹木と、前記計測結果、又は、前記解析結果に基づいて注目する第2樹木とを対応させる対応部と、
前記第1樹木に対応する前記第2樹木である第3樹木が複数存在すると、複数の前記第3樹木の位置に基づき、前記現在位置を特定する第1特定部と
を備える情報処理装置。
【請求項18】
森林でユーザの現在位置を特定する情報処理システムであって、
前記現在位置からレーザ光を周囲に発し、前記現在位置に対する各樹木までの距離を計測する計測部と、
前記森林を構成する樹木の配置を示すマップデータを取得する第1取得部と、
前記マップデータが示す前記樹木の特徴を示す樹木データを取得する第2取得部と、
前記ユーザの周辺を撮影して画像データを生成する撮影部と、
前記画像データを解析した解析結果、及び、前記計測部による計測結果に基づき、前記マップデータが示す第1樹木と、前記計測結果、又は、前記解析結果に基づいて注目する第2樹木とを対応させる対応部と、
前記第1樹木に対応する前記第2樹木である第3樹木が複数存在すると、複数の前記第3樹木の位置に基づき、前記現在位置を特定する第1特定部と
を備える情報処理システム。
【請求項19】
森林でユーザの現在位置を特定する情報処理装置が行う情報処理方法であって、
前記現在位置からレーザ光を周囲に発し、前記現在位置に対する各樹木までの距離を計測する計測手順と、
前記森林を構成する樹木の配置を示すマップデータを取得する第1取得手順と、
前記マップデータが示す前記樹木の特徴を示す樹木データを取得する第2取得手順と、
前記ユーザの周辺を撮影して画像データを生成する撮影手順と、
前記画像データを解析した解析結果、及び、前記計測手順による計測結果に基づき、前記マップデータが示す第1樹木と、前記計測結果、又は、前記解析結果に基づいて注目する第2樹木とを対応させる対応手順と、
前記第1樹木に対応する前記第2樹木である第3樹木が複数存在すると、複数の前記第3樹木の位置に基づき、前記現在位置を特定する第1特定手順と
を含む情報処理方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、森林用の情報処理装置、情報処理システム、及び、情報処理方法に関する。
【背景技術】
【0002】
Simultaneous Localization and Mapping(SLAM)、又は、Global Navigation Satellite System(GNSS)等の技術が広く知られている。
【0003】
また、持続可能な開発目標(Sustainable Development Goals、持続可能な開発のための2030アジェンダ、平成27(2015)年9月25日国連サミット採択、以下「SDGs」という。)の推進に向けた取り組みが行われている。SDGsには、森林、林業、及び、木材産業等を通じて森林を整備及び保全する等が関係する。
【0004】
森林を調査するために、まず、ドローンが、上空からレーザ光を発して、樹木の位置等を特定して森林を調査する。このようにして、レーザ計測データが生成される。次に、レーザ計測データに対し、地理情報システム(GIS)から得られる地理的情報を重ね合わせる処理が行われる。さらに、ノイズ除去等の処理が行われる。このようにして、樹冠を高精度に抽出する等を行う森林資源情報算定方法が知られている(例えば、特許文献1等を参照)。
【0005】
また、植物の配置を示すマップを自動的に生成するために、システムが、樹木を撮影する。さらに、システムは、撮影位置、及び、撮影方向を特定する。次に、システムは、画像、撮影位置、及び、撮影方向に基づいて3次元データを取得する。このようにして得られる3次元データを平面上に投影してマップを生成する技術が知られている(例えば、特許文献2を参照)。
【0006】
ほかにも、OWL(登録商標)(Optical Woods Ledger)(以下「OWL(登録商標)」という。)のように、レーザ光を用いて、3D形式で森林地図を作成し、かつ、計測データから森林資源量等を計算する技術が知られている(例えば、特許文献3を参照)。
【先行技術文献】
【特許文献】
【0007】
【文献】特開2018-84472号公報
【文献】特開2017-211805号公報
【文献】特許第5269729号公報
【発明の概要】
【発明が解決しようとする課題】
【0008】
従来の技術では、常にGNSSにより、ユーザの位置等が特定される。一方で、森林内等では、GNSSでは、計測が難しい場合があり、常にGNSSを用いて位置を検出すると、精度が悪くなる課題がある。
【0009】
本発明は、森林内であっても、ユーザの現在位置等を精度良く特定することを目的とする。
【課題を解決するための手段】
【0010】
上記の課題を解決するため、本発明の一態様では、情報処理装置は、
森林でユーザの現在位置を特定する情報処理装置であって、
前記現在位置からレーザ光を周囲に発し、前記現在位置に対する各樹木までの距離を計測する計測部と、
前記森林を構成する樹木の配置を示すマップデータを取得する第1取得部と、
前記マップデータが示す前記樹木の特徴を示す樹木データを取得する第2取得部と、
前記ユーザの周辺を撮影して画像データを生成する撮影部と、
前記画像データを解析した解析結果、及び、前記計測部による計測結果に基づき、前記マップデータが示す第1樹木と、前記計測結果、又は、前記解析結果に基づいて注目する第2樹木とを対応させる対応部と、
前記第1樹木に対応する前記第2樹木である第3樹木が複数存在すると、複数の前記第3樹木の位置に基づき、前記現在位置を特定する第1特定部と
を備える。
【発明の効果】
【0011】
本発明によれば、森林内であっても、ユーザの現在位置等が精度良く特定できる。
【図面の簡単な説明】
【0012】
【
図1】情報処理システムの全体構成を示す図である。
【
図2】情報処理装置のハードウェア構成例を示す図である。
【
図3】GNSSによる現在位置の特定精度が比較的良くなる状況の例と、現在位置の特定精度が比較的悪くなる状況の例を示す図である。
【
図8】現在位置を特定する処理の例を示す図である。
【
図9】情報処理システムの機能構成例を示す図である。
【
図11】第2実施形態におけるルート生成処理の例を示す図である。
【
図14】第2実施形態における情報処理システムの機能構成例を示す図である。
【
図15】第3実施形態における情報処理システムの全体構成を示す図である。
【
図16】第3実施形態における情報処理システムによる予測の例を示す図である。
【
図17】第3実施形態における情報処理システムの機能構成例を示す図である。
【
図18】第4実施形態における出力例を示す図である。
【
図19】第4実施形態における情報処理システムの機能構成例を示す図である。
【
図21】第5実施形態における情報処理システムの機能構成例を示す図である。
【
図22】第6実施形態における目印の出力例を示す図である。
【
図23】第6実施形態における情報処理システムの機能構成例を示す図である。
【
図24】第7実施形態における情報処理システムの機能構成例を示す図である。
【
図25】第8実施形態における情報処理システムの機能構成例を示す図である。
【
図27】第9実施形態における情報処理システムの機能構成例を示す図である。
【
図28】第10実施形態における統合処理例を示す図である。
【
図31】第10実施形態における情報処理システムの機能構成例を示す図である。
【
図32】第11実施形態における情報処理システムの機能構成例を示す図である。
【発明を実施するための形態】
【0013】
以下、添付する図面を参照して、具体例を説明する。なお、以下の説明において、図面に記載する符号は、同一の要素を指す。
【0014】
[第1実施形態]
<全体構成例>
図1は、情報処理システムの全体構成を示す図である。例えば、情報処理システム100は、主に、第1情報処理装置11、及び、第2情報処理装置12等の情報処理装置で構成する。第1情報処理装置11、及び、第2情報処理装置12は、ネットワークを介してデータを送受信する。
【0015】
第1情報処理装置11、及び、第2情報処理装置12等の情報処理装置は、例えば、以下のような装置である。
【0016】
<情報処理装置のハードウェア構成例>
図2は、情報処理装置のハードウェア構成例を示す図である。例えば、第1情報処理装置11は、Central Processing Unit(CPU、以下「CPU11H1」という。)、記憶装置11H2、インタフェース11H3、入力装置11H4、及び、出力装置11H5等を有するハードウェア構成である。
【0017】
CPU11H1は、演算装置及び制御装置の例である。例えば、CPU11H1は、プログラム又は操作等に基づいて演算を行う。
【0018】
記憶装置11H2は、メモリ等の主記憶装置である。なお、記憶装置11H2は、SSD(Solid State Drive)、又は、ハードディスク等の補助記憶装置があってもよい。
【0019】
インタフェース11H3は、ネットワーク、又は、ケーブル等を介して外部装置とデータを送受信する。例えば、インタフェース11H3は、コネクタ又はアンテナ等である。
【0020】
入力装置11H4は、ユーザによる操作を入力する装置である。例えば、入力装置11H4は、マウス又はキーボード等である。
【0021】
出力装置11H5は、ユーザに対して処理結果等を出力する装置である。例えば、出力装置11H5は、ディスプレイ等である。
【0022】
なお、第1情報処理装置11は、上記以外のハードウェア資源を内部又は外部に更に有するハードウェア構成であってもよい。また、第1情報処理装置11は、複数の装置であってもよい。
【0023】
また、第1情報処理装置11は、第2情報処理装置12と同じハードウェア構成でもよいし、異なるハードウェア構成でもよい。
【0024】
例えば、第1情報処理装置11は、ユーザ10が持ち運ぶモバイル型のPersonal Computer(PC)等である。一方で、第2情報処理装置12は、データベースの管理等を行うサーバである。
【0025】
したがって、第1情報処理装置11は、ユーザ10の現在位置にある情報処理装置である。以下、ユーザ10の現在位置と第1情報処理装置11の位置は一致であるとし、単に「現在位置」という。一方で、第2情報処理装置12は、位置を問わない。
【0026】
なお、情報処理システム100は、図示する構成に限られない。例えば、情報処理システム100は、第1情報処理装置11、及び、第2情報処理装置12以外に装置を有してもよい。以下、図示するシステム構成を例に説明する。
【0027】
<レーザ測距装置の例>
第1情報処理装置11は、レーザ測距装置14を備える。
【0028】
レーザ測距装置14は、レーザ光を発する。そして、レーザ光は、樹木等の対象物に当たると反射し、反射光がレーザ測距装置14に返る。次に、レーザ測距装置14は、センサで反射光を受信する。
【0029】
例えば、レーザ測距装置14は、発信光と反射光の波長を比較して距離等を計測する。
【0030】
なお、レーザ測距装置14は、距離に限られず、高さも計測してよい。すなわち、レーザ測距装置14は、対象物までの距離を2次元、又は、3次元で計測してもよい。
【0031】
また、レーザ測距装置14は、レーザ光を発する範囲が事前に設定される。例えば、レーザ測距装置14は、ユーザ10の水平方向(Yaw軸回転方向である。)において360°、及び、垂直方向(Pitch軸方向である。)において180°の範囲を計測する。
【0032】
<カメラの例>
第1情報処理装置11は、カメラ15を備える。
【0033】
カメラ15は、ユーザ10の周辺を撮影する。したがって、ユーザ10が森林内、すなわち、ユーザ10の周辺に樹木があると、カメラ15は、周辺の樹木を示す画像データを生成する。
【0034】
カメラ15は、例えば、全天球カメラ、全方位カメラ、ステレオカメラ、広角カメラ、又は、これらの組み合わせである。なお、カメラ15は、可視光以外の光、例えば、赤外光等を用いる装置でもよい。
【0035】
カメラ15は、ユーザ10の水平方向360°を撮影できる装置が望ましい。ただし、カメラ15は、1台の装置、又は、1フレームで水平方向360°を撮影しなくともよい。すなわち、カメラ15は、複数の光センサで撮影した画像データ、又は、複数のフレームで撮影した画像データを組み合わせて、水平方向360°を撮影した画像データを生成してもよい。
【0036】
なお、第1情報処理装置11は、レーザ測距装置14、及び、カメラ15として、3次元を計測するレーザ測距装置、ステレオカメラ、及び、全天球カメラを備えるのが望ましい。すなわち、第1情報処理装置11は、これらの装置を備えると、精度良くユーザ10の周辺に存在する樹木を計測及び認識できる。
【0037】
<GNSSの例>
第1情報処理装置11は、衛星13と通信を行う構成であるのが望ましい。すなわち、第1情報処理装置11は、GNSS用の送受信機を備えるのが望ましい。
【0038】
第1情報処理装置11は、GNSSとの通信により、現在位置を特定できる。例えば、現在位置は、緯度、及び、経度等の形式で特定される。
【0039】
なお、GNSSで現在位置が特定できる範囲は、例えば、衛星13との通信を行った結果の電波強度等で判断される。すなわち、第1情報処理装置11は、衛星13との通信が難しい環境であると、GNSSによる現在位置の特定精度が悪い状態であると判断する。
【0040】
ただし、第1情報処理装置11は、電波強度以外で判断してもよい。例えば、事前にGNSSによる現在位置の特定精度が悪い範囲等が調査され、現在位置の特定精度が悪い範囲に現在位置が近づいた、又は、範囲内であると推定される場合等には、第1情報処理装置11は、GNSSによる現在位置の特定精度が悪い状態であると判断してもよい。
【0041】
ほかにも、Real Time Kinematic(RTK)-GNSSでは、位相差の計算状況により、現在位置の特定結果は、推測解(Float)か、又は、完全解(Fix)のどちらかになる場合が多い。推測解であると、精度が悪い場合があるため、例えば、推測解である場合等に、第1情報処理装置11は、GNSSによる現在位置の特定精度が悪い状態であると判断してもよい。
【0042】
以下、レーザ測距装置14による計測結果、カメラ15による撮影の画像データ、GNSS等による位置情報、又は、これらの解析結果等を示すデータを「取得データD3」という。なお、取得データD3は、他に種類があってもよい。
【0043】
図3は、GNSSによる現在位置の特定精度が比較的良くなる状況の例と、現在位置の特定精度が比較的悪くなる状況の例を示す図である。例えば、第1地域E1、又は、第3地域E3のように、一定数以上の樹木が存在する地域は、GNSSにおいて利用される電波の受信環境が樹木の影響を受けて悪化しやすいので、現在位置の特定精度が悪い範囲といえる。
【0044】
一方で、第2地域E2のように、樹木が存在しない地域は、GNSSにおいて利用される電波の受信環境が樹木の影響を受けにくいので、悪化せず、現在位置の特定精度が良い範囲と言える。すなわち、森林の内部のある位置にユーザが存在するとき、当該ユーザが自己の現在位置をGNSSによって判断するならば、周囲の樹木の密度を高いほど、GNSSによって判断される現在位置の精度は低くなる。
【0045】
なお、情報処理システム100は、樹木以外にGNSSの通信を悪化させる要素を加えて判断してもよい。例えば、情報処理システム100は、遮蔽物の有無等を考慮してもよい。また、第1地域E1、及び、第2地域E2等は、範囲が一部重複してもよい。さらに、GNSSによる現在位置の特定精度が悪い範囲、すなわち、第2地域E2は、ある程度広く設定されてもよい。
【0046】
<出力装置の例>
第1情報処理装置11は、出力装置等でユーザ10に対して出力を行うのが望ましい。例えば、出力装置は、透過型(いわゆるシースルー(see thrrough)型である。)のヘッドマウントディスプレイ(以下「HMD16」という。)である。
【0047】
なお、出力装置は、HMD16に限られない。すなわち、出力装置は、画面等に情報が表示できる装置等であればよい。例えば、出力装置は、スマートフォン、又は、時計型の情報処理装置等でもよい。ほかにも、HMD16は、一部の情報を他の情報処理装置で出力する、又は、音声で出力する等のように、複数の装置を連携させて動作してもよい。HMD16等のウェアラブル機器を用いると、ユーザ10は、いわゆるハンズフリーとなり、作業等が容易にできる。
【0048】
HMD16は、例えば、ユーザ10に対し、以下のような画面で情報を出力する。
【0049】
図4は、出力例を示す図である。例えば、HMD16は、透過画面161のような形式で表示する。
【0050】
図に示す内容のうち、透過領域162は、ガラス等の透過性の高い素材を通して、ユーザ10が見える森林内の風景である。そして、HMD16は、透過領域162に対し、ルート情報163、及び、樹木データ164等を重ねて表示する。なお、HMD16は、複数の樹木データ164を出力する場合には、互いの表示位置をずらす、大きさを変更する、又は、一部を省略する等で情報を見やすくする処理を行ってもよい。
【0051】
HMD16は、拡張現実(Augmented Reality、AR)等を用いてもよい。すなわち、HMD16は、ユーザ10が透過領域162で見る現実世界に対し、デジタルによる情報を重ねて表示する、視覚的に現実を拡張した表示を行う。このように、HMD16は、実際の風景等を背景にし、かつ、仮想情報を重ねたAR表示等で出力を行う。また、HMD16は、バーチャルキーボード、又は、ユーザ10の手の動き、若しくは、ジェスチャーを認識して入力を受け付けてもよい。
【0052】
ルート情報163は、目的地への方向、又は、目的地へのルートを示す。例えば、ルート情報163は、図示するように矢印等で表示される。なお、ルート情報163は、矢印以外の形式で表示されてもよい。例えば、ルート情報163は、目的地への方角、又は、距離等を表示する形式でもよい。
【0053】
樹木データ164は、例えば、透過領域162内に存在する樹木に関する情報である。具体的には、樹木データ164は、樹木の識別番号(図における「ID」である。)、樹木の胸高直径(図における「DBH」である。)、及び、樹高(図における「H」である。)等である。なお、樹木データ164は、これら以外の種類であってもよい。例えば、樹木データ164には、位置、胸高直径、曲がり、傾き、樹高、又は、材積等があってもよい。
【0054】
樹木データ164は、樹木データベースD1から取得する。なお、樹木データベースD1には、各種の情報が事前に入力される。
【0055】
また、樹木データ164は、施業情報165、及び、防災情報166等を含む。なお、施業情報165、及び、防災情報166は、樹木データベースD1等に事前に入力される。
【0056】
例えば、樹木データ164は、ユーザに最も近い距離にある樹木を対象に出力される。なお、出力は、対象とする樹木を指定、又は、複数の樹木を対象にしてもよい。
【0057】
<全体処理例>
図5は、全体処理例を示す図である。以下、全体処理は、まず、「事前処理」を行い、「事前処理」による準備が完了した後、「実行処理」を行う順序で実行される。なお、「事前処理」及び「実行処理」は連続しなくともよい。また、「事前処理」は、「実行処理」ごとに行わず、以前に少なくとも1回実行されていればよい。
【0058】
<事前処理の例>
ステップS1-1では、情報処理システム100は、樹木の配置を示すデータ(以下「マップデータ」という。)を生成する。例えば、マップデータは、森林内をレーザ測距装置等で計測した結果等である。なお、マップデータを構成する樹木の位置は、計測者がマップ上で樹木の位置を入力する等の形式で入力されてもよい。
【0059】
マップデータは、例えば、生成後、マップデータベースD2等の形式で第2情報処理装置12に記憶される。したがって、マップデータは、マップデータベースD2にアクセスすると取得できる。
【0060】
図6は、マップデータの例を示す。例えば、マップデータは、マップデータベースD2に記憶する情報に基づき、地図を出力するのに用いられる。
【0061】
マップデータは、計測結果に基づき、樹木の位置等を示す。以下、マップデータ上の樹木を「第1樹木TR1」という。したがって、マップデータは、第1樹木TR1同士の位置関係等を正確に示す。
【0062】
ステップS1-2では、情報処理システム100は、樹木データを生成する。
【0063】
樹木データは、第1樹木TR1ごとの各々の特徴を示すデータである。
【0064】
樹木データは、例えば、生成後、樹木データベースD1等の形式で第2情報処理装置12に記憶される。したがって、樹木データは、樹木データベースD1にアクセスすると取得できる。
【0065】
図7は、樹木データの例を示す。例えば、樹木データは、「ID」に対し、「DBH」及び「樹高」等といった各々の樹木の特徴を対応させた形式で生成される。
【0066】
「ID」は、各々の樹木を識別する情報の例である。したがって、「ID」が特定されると、情報処理システム100は、マップデータにおけるどの第1樹木TR1であるかが特定できる。
【0067】
「DBH」及び「樹高」は、第1樹木TR1の各々を計測した結果である。なお、樹木の特徴は、「DBH」及び「樹高」のように第1樹木TR1ごとに異なる情報であって、定量的、かつ、樹木の形状を示す情報であるのが望ましい。
【0068】
森林内では、情報処理システム100は、樹木の形状以外の情報を収集するのが難しい場合がある。さらに、樹木は、森林では同じ種類の樹木が密集している場合も多い。したがって、一般的なパターンマッチングでは、複数の樹木がマッチングしてしまう場合がある。
【0069】
そこで、樹木データは、「DBH」及び「樹高」等のように、同じ種類の樹木が集まっていても、各々の樹木を区別できる情報を含むのが望ましい。
【0070】
なお、樹木データは、「DBH」及び「樹高」以外の情報でもよい。例えば、色等が他の樹木と大きく異なるような樹木である場合等では、色を樹木データに記憶してもよい。
【0071】
ほかにも、情報処理システム100は、地面についてのデータを記憶してもよい。このようなデータがあると、情報処理システム100は、樹木の倒壊、又は、崩落等を予見できる。
【0072】
<実行処理の例>
実行処理は、事前処理が実行された後、情報処理システム100は、マップデータ、及び、樹木データを取得できる状態で実行される。なお、情報処理システム100は、マップデータ、及び、樹木データをリアルタイムに取得、及び、更新する必要はなく、通信が良好な状態等でデータを取得し、記憶しておく等でもよい。以下、実行処理は、ステップS2の位置推定処理を行う処理である例で説明する。
【0073】
ステップS2-1では、情報処理システム100は、ユーザ10の周辺を撮影する。そして、情報処理システム100は、周辺の樹木を示す画像データを生成する。したがって、画像データに写る樹木は、カメラ15の画角等によって定まる範囲に存在する樹木である。この画像データは、情報処理システム100内に記録される。
【0074】
ステップS2-2では、情報処理システム100は、レーザにより計測を行う。この時の点群データは、情報処理システム100内に記録される。
【0075】
ステップS2-3では、情報処理システム100は、ステップS2-1で生成される画像データを解析し、解析結果を示すデータを生成する。例えば、情報処理システム100は、画像認識等により、画像データ内に写る樹木を認識する。
【0076】
なお、情報処理システム100は、ステレオカメラ等を用いて、画像データ内に写る樹木の寸法、及び、現在位置からの樹木までの距離等を解析してもよい。
【0077】
ステップS2-2、又は、ステップS2-3により、現在位置の周辺に存在する樹木が認識される。以下、画像データの解析結果、又は、計測結果に基づいて注目する樹木を「第2樹木」という。
【0078】
なお、ユーザ10の周辺には、複数の樹木が密集する場合もある。このような場合には、複数の樹木が認識される場合もある。このような場合には、第2樹木は、複数の樹木のうち、任意に選択される。例えば、情報処理システム100は、複数の樹木が認識できた場合には、ユーザ10の位置に最も近いと推定する樹木等を第2樹木とする。
【0079】
ステップS2-4では、情報処理システム100は、第1樹木TR1と第2樹木とを対応させる。すなわち、情報処理システム100は、第2樹木がどの第1樹木TR1であるか特定する。
【0080】
対応付けには、情報処理システム100は、第2樹木の解析結果、すなわち、第2樹木の特徴を特定して行う。そして、情報処理システム100は、樹木データによる単木の特徴、マップデータによる配置の特徴に基づき、特徴が一致する第1樹木TR1を探索する。
【0081】
具体的には、画像データを解析した解析結果、及び、レーザの計測結果を参照すると、情報処理システム100は、第2樹木の樹高、DBH、又は、他の樹木との位置関係を取得できる。これらのデータに基づき、情報処理システム100は、樹木データを探索して樹高、DBHの一致するもの、又は、マップデータから他の樹木との位置関係の一致するものを第1樹木TR1として採用する。
【0082】
ただし、情報処理システム100は、数値を比較する上で一定の許容値を考慮してもよい。すなわち、情報処理システム100は、第2樹木の計測結果等に基づく数値と、樹木データ上の数値、位置とが完全に一致した場合だけを一致としなくともよい。例えば、事前に設定する許容値以内の差であれば、情報処理システム100は、一致すると判断してもよい。又は、完全に数値等の特徴が一致しない場合には、情報処理システム100は、最も類似する第1樹木TR1を対応させてもよい。
【0083】
このように、解析結果、及び、計測結果と、樹木データとを用いると、情報処理システム100は、樹木の特徴に基づいて、第1樹木TR1と、第2樹木とを対応させるマッチングができる。ゆえに、精度良く情報処理システム100は、精度良く第1樹木TR1と、第2樹木とを対応させることができる。
【0084】
なお、情報処理システム100は、複数の項目についてマッチングしてもよい。すなわち、情報処理システム100は、複数の特徴が一致する第1樹木TR1を第2樹木と対応させる。このように複数の項目を用いると、より高精度に対応付けができる。
【0085】
以下、特徴が一致した樹木、すなわち、第2樹木のうち、高い可能性で第1樹木TR1と認識できた樹木を「第3樹木」という。
【0086】
ステップS2-5では、情報処理システム100は、第3樹木が複数存在するか否かを判断する。そして、第3樹木が複数存在すると(ステップS2-5でYES)、情報処理システム100は、ステップS2-6に進む。一方で、第3樹木が複数存在しないと(ステップS2-5でNO)、情報処理システム100は、ステップS2-1に進む。
【0087】
ステップS2-6では、情報処理システム100は、現在位置を特定する。例えば、情報処理システム100は、以下のように現在位置を特定する。
【0088】
図8は、現在位置を特定する処理の例を示す図である。以下、ユーザ10が第1地点CP1、第2地点CP2、第3地点CP3・・・と移動していく例で説明する。
【0089】
例えば、第1地点CP1では、第3樹木は、第31樹木TR31、第32樹木TR32、第33樹木TR33、第34樹木TR34、及び、第35樹木TR35が特定される。
【0090】
次に、第31樹木TR31、及び、第32樹木TR32の位置は、対応付けされた樹木データに基づき、位置が把握される。
【0091】
そして、第31樹木TR31、及び、第32樹木TR32を撮影した方向が特定できると、情報処理システム100は、図における点線の交点を現在位置と特定できる。また、現在位置が特定できると、画像データ内、又は、HMD16を通して見える樹木が現在位置を基準にして、どの位置、及び、どの方向にある樹木であるかが特定できる。そのため、情報処理システム100は、画像データ内、又は、HMD16を通して見える樹木がマップデータ等におけるどの樹木かを特定できる。
【0092】
なお、開始時の現在位置は位置精度が高いほうがよく、いくつかの第3樹木の組み合わせで特定した位置情報から、装置を中心とした樹木間の角度とマップデータの樹木間の角度を比較し、その偏差が最小になるように特定してもよい。
【0093】
ほかにも、樹木は、他の樹木との位置関係により、撮影ができる地点が限られる。したがって、情報処理システム100は、各々の樹木が撮影可能な範囲を特定し、すべての第3樹木が撮影可能な地点を現在位置と特定してもよい。
【0094】
例えば、一定時間が経過すると、情報処理システム100は、現在位置を更に特定する。以下、第1地点CP1から一定時間が経過し、ユーザ10が第1地点CP1から第2地点CP2に移動したとする。
【0095】
第2地点CP2では、第3樹木は、第31樹木TR31、第32樹木TR32、第34樹木TR34、第35樹木TR35、第36樹木TR36、及び、第37樹木TR37が特定される。例えば、第32樹木TR32、及び、第34樹木TR34を撮影した方向が特定できると、情報処理システム100は、図における点線の交点を第2地点CP2として現在位置を特定できる。
【0096】
同様に、第3地点CP3では、以下のように現在位置が特定される。
【0097】
第3地点CP3では、第3樹木は、第32樹木TR32、第36樹木TR36、第37樹木TR37、第38樹木TR38、及び、第39樹木TR39が特定される。例えば、第36樹木TR36、及び、第39樹木TR39を撮影した方向が特定できると、情報処理システム100は、図における点線の交点を第3地点CP3として現在位置を特定できる。
【0098】
なお、現在位置の特定方法は、3本以上の樹木を用いてもよい。また、現在位置の特定方法は、Visual SLAM等を用いてもよい。
【0099】
したがって、情報処理システム100は、レーザ、及び、カメラともユーザ10の水平方向360°を撮影するのが望ましい。このように、全周が撮影されると、情報処理システム100は、より精度良く現在位置が特定できる。
【0100】
位置の特定に取得したデータは、樹木位置、樹高、DBHを取得するのに十分なデータである。そして、
図5におけるステップS3では事後処理として、情報処理システム100は、取得したデータを解析し、樹木データベースD1、又はマップデータベースD2等を更新する(ステップS3-1)。
【0101】
<ルート探索の例>
ルート探索は、例えば、車両用のナビゲーション等に用いられるアルゴリズム等で実現する。ただし、ルートの探索、及び、表示は、樹木を中心に処理されるのが望ましい。特に、樹木は、第3樹木を基準、すなわち、対応付けにより識別ができた樹木を中心にするのが望ましい。
【0102】
このように、目的地の方向、又は、目的地へのルートを出力できると、情報処理システム100は、ユーザ10を目的地へ誘導できる。
【0103】
また、情報処理システム100は、ルートの情報等を用いて、目的地までの距離、又は、時間等を計算してもよい。このような計算がされると、情報処理システム100は、林業における運搬等のコスト、時間、又は、運搬距離等を計算できる。
【0104】
<GNSSとの切り替えを行う例>
情報処理システム100は、ステップS2-6で現在位置を特定するのに、GNSSを用いるか、又は、
図8に示すような特定方法を用いるかを切り替えてよい。例えば、情報処理システム100は、
図3に示す情報に基づいて切り替える。
【0105】
例えば、情報処理システム100は、第1地域E1、又は、第3地域E3では、
図8に示すような特定方法で現在位置を特定する。一方で、情報処理システム100は、第2地域E2では、GNSSで現在位置を特定する。
【0106】
なお、切り替えの判断に用いる位置は、推定されてもよい。例えば、第1地域E1では、GNSSでは現在位置が特定できない場合がある。ゆえに、切り替えを判断するのに基準とする位置が特定できない場合がある。このような場合には、情報処理システム100は、どの地域にいるかを推定してもよい。
【0107】
例えば、第2地域E2にユーザ10が位置し、かつ、第1地域E1に向かって移動している場合、情報処理システム100は、直近に計測できた速度、及び、移動方向が維持されると仮定して、ユーザ10が第1地域E1に移動したと推定してもよい。
【0108】
以上のように、GNSS、及び、樹木による位置の特定を切り替えると、情報処理システム100は、通信が難しいような環境であっても現在位置を精度良く特定できる。
【0109】
<データの記憶、更新、及び、解析の例>
第2情報処理装置12は、画像データ、ルートの探索結果、ユーザ10の移動履歴、レーザによる計測結果、マップデータ、及び、樹木データ等を第1情報処理装置11等から受信し、記憶してもよい。なお、データは、複数の装置で分散、又は、冗長して記憶されてもよい。さらに、データは、更新されてもよい。
【0110】
ほかにも、データは、ドローン、又は、航空機等の計測結果があってもよい。
【0111】
また、データは、分析されてもよい。例えば、ルートは、ユーザ10の移動履歴、すなわち、実際にユーザ10が移動した結果等を参考にし、最適化されてもよい。
【0112】
さらに、データは、解析、又は、共有化等のため、所定のフォーマットで記憶されるのが望ましい。
【0113】
<機能構成例>
図9は、情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、計測部100F1、第1取得部100F2、第2取得部100F3、撮影部100F4、対応部100F5、及び、第1特定部100F6等を備える。なお、情報処理システム100は、第2特定部100F7、判断部100F8、出力部100F9、記憶部100F10、及び、更新部100F11を更に備えるのが望ましい。以下、図示する機能構成を例に説明する。
【0114】
計測部100F1は、現在位置からレーザ光を周囲に発し、現在位置に対する各樹木までの距離、方向を計測する計測手順を行う。例えば、計測部100F1は、レーザ測距装置14等で実現する。
【0115】
第1取得部100F2は、第2情報処理装置12等から、マップデータを取得する第1取得手順を行う。例えば、第1取得部100F2は、インタフェース11H3等で実現する。
【0116】
第2取得部100F3は、第2情報処理装置12等から、樹木データを取得する第2取得手順を行う。例えば、第2取得部100F3は、インタフェース11H3等で実現する。
【0117】
撮影部100F4は、ユーザ10の周辺を撮影して画像データを生成する撮影手順を行う。例えば、撮影部100F4は、カメラ15等で実現する。
【0118】
対応部100F5は、画像データを解析した解析結果、及び、計測部100F1による計測結果に基づき、第1樹木と、第2樹木とを対応させる対応手順を行う。例えば、対応部100F5は、CPU11H1等で実現する。
【0119】
第1特定部100F6は、第3樹木が複数存在すると、複数の第3樹木の位置に基づき、現在位置を特定する第1特定手順を行う。例えば、第1特定部100F6は、CPU11H1等で実現する。
【0120】
第2特定部100F7は、衛星と通信をして現在位置を特定する第2特定手順を行う。例えば、第2特定部100F7は、インタフェース11H3等で実現する。
【0121】
判断部100F8は、第1特定部100F6、及び、第2特定部100F7のうち、どちらで現在位置を特定するかを判断する判断手順を行う。例えば、CPU11H1等で実現する。
【0122】
出力部100F9は、第3樹木に対し、樹木データを出力する出力手順を行う。例えば、出力部100F9は、HMD16等で実現する。
【0123】
記憶部100F10は、計測結果を示す取得データD3等のデータを記憶する記憶手順を行う。そして、記憶部100F10が記憶するデータは、解析が行われてもよい。また、解析結果、又は、記憶するデータに基づき、マップデータ、及び、樹木データ等が更新される。また、記憶部100F10は、計測、撮影データを記憶する。例えば、記憶部100F10は、記憶装置11H2等で実現する。
【0124】
更新部100F11は、記憶部100F10が記憶するデータを解析し、樹木データ、又は、マップデータ等を更新する更新手順を行う。例えば、更新部100F11は、CPU11H1等で実現する。
【0125】
以上のような機能構成であると、情報処理システム100は、森林内のように、GNSSでは精度が悪くなる環境であっても、精度良く現在位置を特定できる。
【0126】
ルート等の情報は、現在位置を中心に計算される場合が多い。したがって、ルート探索等の基礎情報である現在位置の精度が悪いと、現在位置を基準に計算される位置は、精度が悪くなりやすい。
【0127】
一方で、上記のような機能構成であると、情報処理システム100は、10センチメートル以下の誤差となる高精度に位置を特定できる。また、このように、現在位置が精度良く特定できると、周辺の物体も精度良く位置が把握できる。そのため、AR表示において、対象とする物体に精度良く重ねて表示ができる。
【0128】
森林において、樹木、及び、樹木の周辺は、樹木の成長、又は、周辺環境により、日々変化する。ゆえに、マップデータ、及び、樹木データ等は、変化を反映させて、日々更新して最新の状態を示すのが望ましい。そのため、情報処理システム100は、変化する森林環境情報等に基づき、各種のデータを簡便に更新する。
【0129】
[その他の実施形態]
実施形態は、上記、及び、下記の実施形態、及び、変形例を組み合わせたものでもよい。
【0130】
人工知能(Artificial Intelligence、以下「AI」という。)等が用いられてもよい。例えば、画像を用いる場合には、以下のようなConvolution Neural Network(畳み込みニューラルネットワーク、CNN)等を有するネットワーク構造のAI等が用いられてもよい。
【0131】
【0132】
実施形態では、ドロップアウト等といった過学習(「過剰適合」又は「過適合」等ともいう。overfitting)を軽減化させる処理が行われてもよい。ほかにも、次元削減等の処理が行われてもよい。
【0133】
学習モデルの学習、及び、学習済みモデルによる実行は、同一の情報処理装置で行われなくともよい。すなわち、学習モデルの学習、及び、学習済みモデルによる実行は、異なる情報処理装置で行われてもよい。
【0134】
ゆえに、学習済みモデルは、ディープラーニング(Deep Learning)等の学習によって生成された後、ネットワーク等を介して配信され、学習された情報処理装置とは異なる装置で実行されてもよい。なお、他の情報処理装置において学習して生成された学習モデルに対し、追加して学習が行われてもよい。
【0135】
学習モデル、及び、学習済みモデルは、CNNのネットワーク構造に限られない。例えば、ネットワーク構造は、RNN(再帰型ニューラルネットワーク、Recurrent Neural Network)又はLSTM(Long Short-Term Memory)等の構成を有してもよい。
【0136】
また、学習モデル、及び、学習済みモデルは、ハイパパラメータを有する構成であってもよい。すなわち、学習モデル、及び、学習済みモデルは、一部の設定をユーザが行う構成でもよい。
【0137】
ほかにも、例えば、グラフ(頂点、及び、辺で構成されるデータである。)を扱う場合には、学習モデル、及び、学習済みモデルは、GNN(グラフニューラルネットワーク、Graph Neural Network)等の構造を有してもよい。
【0138】
また、学習モデル、及び、学習済みモデルは、他の機械学習を利用してもよい。例えば、学習モデル、及び、学習済みモデルは、教師なしのモデルにより、正規化等を前処理で行ってもよい。
【0139】
本発明は、上記に例示する情報処理方法、又は、上記に示す処理と等価な処理を実行するプログラム(ファームウェア、及び、プログラムに準ずるものを含む。以下単に「プログラム」という。)で実現されてもよい。
【0140】
すなわち、本発明は、コンピュータに対して指令を行って所定の結果が得られるように、プログラミング言語等で記載されたプログラム等で実現されてもよい。なお、プログラムは、処理の一部をIC(集積回路、Integrated Circuit)等のハードウェア又はGPU(Graphics Processing Unit)等の演算装置等で実行する構成であってもよい。
【0141】
[第2実施形態]
第2実施形態では、情報処理システム100は、第1実施形態と比較すると、以下のようなルートを生成する点が異なる。以下、異なる点を中心にして重複する説明は省略する。
【0142】
ルートは、目的ごとに複数種類が生成される。具体的には、ルートは、「歩道」、「森林作業道」、及び、「林道」の3種類が別に生成される。
【0143】
例えば、森林作業道は、「森林作業道作設指針(平成22年11月17日付け22林整整第656号林野庁長官通知)」、及び、改正案等で定義される(https://www.rinya.maff.go.jp/j/seibi/sagyoudo/attach/pdf/romousuisin-15.pdf)。このように、森林作業道は、木材の集材、又は、搬出に用いるルートである。そして、情報処理システム100は、このような指針で規定する要件を満たすルートを生成する。具体的には、情報処理システム100は、集材、又は、搬出に用いる機械の種類を入力して、指針が規定する幅員、及び、傾斜等を満たすルートを生成する。
【0144】
歩道は、人が歩ける幅員、及び、傾斜等を満たすルートである。
【0145】
林道は、車両が走行可能なルートである。例えば、林道は、「林道規定(昭和48年4月1日付け林野道第107号林野庁長官通知)」、及び、細部運用等で定義される(https://www.rinya.maff.go.jp/j/seibi/sagyoudo/pdf/kitei.pdf)。このように、林道は、指針等が規定する幅員、及び、傾斜等を満たすルートである。具体的には、林道のうち、「軽車道」は、は、全幅員1.8メートル以上、かつ、3.0メートル未満の軽自動車の通行できるルートである。このように、情報処理システム100は、幅員、及び、傾斜等の条件を満たす場合には、ルートの一部に採用する。一方で、情報処理システム100は、幅員、及び、傾斜等の条件を満たさない場合には、条件を満たさない箇所を通らないルートを探索する。
【0146】
このような指針等のルート条件が事前に定まる。なお、ルート条件は、指針等に限られず、独自の設定値等があってもよい。
【0147】
また、ルートは、事前にマップ等で把握できる既存ルートを結んで生成されてもよい。一方で、ルートは、マップ等では既存ルートとなっていない箇所を選んで生成されてもよい。したがって、ルートは、目的ごとに異なる条件下で生成する。例えば、工事等により新たなルートを開拓するのが可能な条件下でルートを生成する場合には、マップ等では既存ルートとなっていない箇所を含んでルートが生成されてもよい。
【0148】
一方で、森林内を歩く等のために、ルートを生成する場合には、マップ等で事前にルートと設定された箇所、すなわち、既存ルートを探索してルートが生成される。以下、既存ルートを検索して、既存ルートを組み合わせてルートを生成する場合をルートの「探索」という。ルートの種類が異なると、情報処理システム100は、異なるルートを探索される場合がある。
【0149】
なお、ルートは、既存ルートの探索、及び、新たなルートの開拓を組み合わせて、生成されてもよい。
【0150】
図11は、第2実施形態におけるルート生成処理の例を示す図である。情報処理システム100は、以下のような処理でルートを生成する。
【0151】
全体処理は、例えば、「事前処理」と「現場処理」に分かれる。なお、事前処理は、現場処理より前に実行されていればよい。以下、事前処理と現場処理が連続して実行される例で説明するが、全体処理は、これに限られない。例えば、事前処理は、以前に実行されていれば、毎回実行せずに省略して、全体処理は現場処理から開始されてもよい。
【0152】
以下、事前処理で生成するルートを「第1ルート」という。例えば、第1ルートは、事前に会議室等で生成される。一方で、現場処理で生成するルートを「第2ルート」という。例えば、第2ルートは、森林内で生成される。
【0153】
ステップS1101では、情報処理システム100は、3D(3次元)データを入力する。例えば、3Dデータは、対象とする森林の地面等を計測した結果を示すデータである。そのため、3Dデータがあると、情報処理システム100は、所定の条件を満たすルートを探索できる。例えば、3Dデータは、レーザ計測機等で計測を行った結果を示す。
【0154】
ステップS1102では、情報処理システム100は、ルート条件を入力する。
【0155】
ルート条件は、指針等である。また、ルート条件は、ルートを生成する上で用いるパラメータ等を含んでもよい。
【0156】
ステップS1103では、情報処理システム100は、始点、及び、終点を設定する。したがって、情報処理システム100は、第1ルート、及び、第2ルートを始点と終点を結ぶように生成する。なお、始点、及び、終点とは別に、始点から終点へ行く途中に経由させる点である経由点等が設定されてもよい。
【0157】
ステップS1104では、情報処理システム100は、第1ルートを生成する。例えば、第1ルートは、以下のように生成される。
【0158】
図12は、第1ルートの例を示す図である。以下、始点ST1から終点ST2までの第1ルートを生成する例で説明する。例えば、図示するような等高線L1で示す森林では、第1ルートは、以下のように生成される。
【0159】
ルートは、等高線L1に対して直角に近い角度になるほど、傾斜が大きいルートになりやすい。具体的には、第10ルートR10は、等高線L1に対して直角に近い角度が多いルートである。したがって、第10ルートR10は、傾斜が大きく、ルート条件を満たさない場合がある。
【0160】
そこで、情報処理システム100は、第11ルートR11等を生成する。第10ルートR10と比較すると、第11ルートR11は、等高線L1に対する角度が小さい点が多い。
【0161】
例えば、第1ルートは、第11ルートR11のように傾斜が小さくなるように生成される。また、複数のルートが生成できる場合には、情報処理システム100は、複数のルートのうち、例えば、始点ST1から終点ST2までへの移動距離が最も短いルート等を選ぶ。なお、第1ルートの生成方法は、上記以外の方法でもよい。
【0162】
以上のように、事前処理を実行すると、情報処理システム100は、第1ルートが生成できる。次に、事前処理が実行された後、すなわち、第1ルートが生成された後の状態で、情報処理システム100は、以下のように、現場処理を実行する。
【0163】
ステップS1105では、情報処理システム100は、回避物を入力する。
【0164】
回避物は、例えば、岩、又は、水等である。すなわち、回避物は、ルートとする上で避ける対象である。また、回避物は、マップ上で指定、又は、座標値等の形式で位置が入力される。
【0165】
ステップS1106では、情報処理システム100は、第2ルートを生成する。第2ルートは、回避物を避けるルートである。したがって、第2ルートは、回避物の位置、及び、回避物から所定距離内を通過しないルートである。
【0166】
第1ルート、第2ルート、又は、ルートの一部は、例えば、以下のように、パラメータを用いるダイクストラ法(Dijkstra’s algorithm)等で生成される。
【0167】
図13は、ルートの生成例を示す図である。以下、始点ST1から終点ST2までのルートR0を生成する例で説明する。例えば、始点ST1、及び、終点ST2の周辺箇所は、図示するように、メッシュで区分けされる。具体的には、メッシュは、一辺が50cmの矩形を構成する辺と、矩形の対角線等である。なお、メッシュの間隔等は、例えば、ユーザが設定する。
【0168】
また、3Dデータ、又は、マップデータ等に基づいて、第1樹木TR1等が設定される。第1樹木TR1がある箇所は、通過ができない経路(図では、「×」印で示す。)である。したがって、第1樹木TR1がある箇所は、ルートから排除される。なお、第1樹木TR1以外に、手動等で通過できない経路が設定されてもよい。
【0169】
図において、「p」は、ルートを生成する上で傾斜の条件を設定するパラメータ(以下、「傾斜パラメータp」という。)である。例えば、傾斜パラメータpは、ルート条件で入力される。また、「θ」は傾斜角を示す。傾斜角θは、傾斜を示す角度であるため、負の値とならない。
【0170】
図示する例では、「tanθ」の絶対値(図では「|tanθ|」と示す。)が「0.5」より大きい、すなわち、傾斜角θが「45°」より大きい角度となると、傾斜パラメータpは、傾斜パラメータpを「0.1」で除算した値となり、大きな値となる。また、傾斜パラメータpは、図示する例のように、|tanθ|が「0.3」より大きく、かつ、|tanθ|が「0.5」以下の場合のように、複数の条件分けがされてもよい。
【0171】
つまり、この例は、|tanθ|が「0.3」以下、|tanθ|が「0.3」より大きく、かつ、|tanθ|が「0.5」以下、及び、|tanθ|が「0.5」の3段階を設定する場合である。
【0172】
以下、傾斜角θが大きくなると、傾斜パラメータpが大きな値となる例で説明する。
【0173】
なお、傾斜パラメータpは、上記以外の設定がされてもよい。したがって、傾斜パラメータpは、2段階以下、又は、4段階以上に設定されてもよい。また、傾斜角θが「45°」等の設定は、ユーザが任意の値に設定できてもよい。
【0174】
さらに、パラメータは、傾斜以外を考慮して設定されてもよい。例えば、パラメータは、危険度、又は、水量等に応じて増加する設定等でもよい。また、パラメータは、複数あってもよい。
【0175】
情報処理システム100は、経路長Lに傾斜パラメータpを乗じた「L×p」(以下、「L×p」の計算結果を「パス長」という。)を計算する。
【0176】
パス長は、経路長Lと傾斜パラメータpを乗算した結果であるため、どちらかの値が大きいと、パス長は大きい値になりやすい。したがって、情報処理システム100は、パス長が小さくなる経路を探すと、傾斜が小さいルートを生成できる。また、このような計算アルゴリズムを用いると高速で計算できる。
【0177】
第1ルートは、例えば、平均の傾斜が15°程度になるように、事前に生成されるため、現場の状況等が考慮できない場合がある。具体的には、回避物があるか否かは、現場に行く前では把握できない場合が多い。一方で、現場では、回避物が見つかる。そこで、情報処理システム100は、第1ルートを変更して、現場で第2ルートを生成する。このように、現場の状況を踏まえた第2ルートが生成できるのが望ましい。また、マップ等にない情報を反映させた第2ルートが生成できる。
【0178】
第2ルートは、急な作業道が少なく、かつ、ユンボ等の機械で切り出す土砂物の体積が少ないルートにできる。
【0179】
また、ルートは、複数の土地所有者に跨って生成される場合がある。このようなルートが生成された場合には、工事等でルートを使用する前に、事前に土地所有者に使用の許可を得ることができる。
【0180】
<機能構成例>
図14は、第2実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、第1ルート生成部100F21、及び、第2ルート生成部100F22を更に備える点が異なる。以下、異なる点を中心に説明する。
【0181】
第1ルート生成部100F21は、ユーザ、又は、機械が利用する第1ルートを生成する第1ルート生成手順を行う。例えば、第1ルート生成部100F21は、CPU11H1等で実現する。
【0182】
第2ルート生成部100F22は、第1ルートに対して回避物が入力されると、回避物を回避した第2ルートを生成する第2ルート生成手順を行う。例えば、第2ルート生成部100F22は、CPU11H1等で実現する。
【0183】
以上のように、第1ルートを生成できると、基本となるルートが事前に生成できる。一方で、現場では、マップ等では把握できない回避物が存在する場合がある。ルートは、回避物を通らず(一定距離以上の距離を避けたルートが望ましい場合もある。)、回避物を避けて目的地へ進むルートが望ましい。回避物は、例えば、現場でユーザ10が視認して把握する。このような回避物を避けたルートである第2ルートが現場で生成できると、第1ルートを変更した第2ルートを現場で更に確認できる。ゆえに、情報処理システム100は、効率良くルートを生成できる。
【0184】
[第3実施形態]
第3実施形態は、第1実施形態と比較すると、ユーザが複数である状況等で使用される実施形態である点が異なる。なお、HMD16は、少なくとも1人のユーザが装着していればよい。すなわち、HMD16は、複数台であって、各ユーザが装着してもよい。
【0185】
図15は、第3実施形態における情報処理システムの全体構成を示す図である。以下、図示するように、第1ユーザM1と、第2ユーザM2が連携して森林内で樹木を切り倒す作業を行う例で説明する。この例では、第1ユーザM1がHMD16を装着し、かつ、第1ユーザM1は第2ユーザM2等の他のユーザを管理する。一方で、第2ユーザM2は、作業を行う。なお、ユーザは、3人以上でもよい。
【0186】
図16は、第3実施形態における情報処理システムによる予測の例を示す図である。以下、HMD16が、図に示す画面(画面内において、第40樹木TR40等は、透過した風景である。)を第1ユーザM1に出力する例で説明する。この例では、HMD16は、第40樹木TR40等といった透過して見える風景に、第1パネルPL1等の仮想データを重ねて出力する。
【0187】
そして、第40樹木TR40は、第1ユーザM1がチェーンソーで切り倒す対象であるとする。
【0188】
HMD16は、第40樹木TR40が倒れる可能性がある範囲(以下「危険範囲A1」という。)を予測する。例えば、危険範囲A1は、第40樹木TR40を中心にした全周方向を示す円で出力する。
【0189】
ただし、予測結果は、他の形式で出力されてもよい。例えば、予測結果は、倒木予想A2のような形式でもよい。ほかにも、HMD16は、危険範囲A1の範囲内にある樹木を色分けする等で予測してもよい。具体的には、HMD16は、第40樹木TR40を赤色で示し、かつ、危険範囲A1の範囲内にある第41樹木TR41を黄色で示す等でもよい。
【0190】
情報処理システム100は、例えば、第40樹木TR40の樹高(樹高は、第1パネルPL1における「H」の値である。)等に基づいて、危険範囲A1、又は、倒木予想A2を予測する。すなわち、危険範囲A1は、第40樹木TR40の位置を中心にした樹高の全周方向である。
【0191】
なお、危険範囲A1は、安全等のため、余裕があってもよい。例えば、余裕は、樹高に対して更に所定距離多めに中心から遠ざかる、又は、樹高の数倍程度多めに中心から遠ざかる等のように、事前に設定される。
【0192】
情報処理システム100は、第40樹木TR40が倒れるタイミングになると警告を行う。以下、第1ユーザM1が第40樹木TR40の作業担当者であり、かつ、第2ユーザM2が第41樹木TR41の作業担当者である例で説明する。なお、どのユーザがどの樹木を担当するかは入力されてもよい。また、第2ユーザM2が危険範囲A1の範囲内にいるとする。このような場合には、情報処理システム100は、第1ユーザM1に対して、第2ユーザM2が危険範囲A1の範囲内にいる警告を行う。
【0193】
警告は、光、音、表示、振動、通信、又は、これらの組み合わせ等で行う。例えば、情報処理システム100は、警告となる光を発する、警告となる音を発する、振動する、第2ユーザM2が危険範囲A1の範囲内であるメッセージを出力する、又は、これらの組み合わせである。
【0194】
なお、警告は、第2ユーザM2に対して行われてもよい。したがって、情報処理システム100は、第2ユーザM2に向かって、光、音、表示、振動、通信、又は、これらの組み合わせによる警告を発してもよい。また、情報処理システム100は、第1ユーザM1が危険範囲A1の範囲内にいる場合には、第1ユーザM1が危険である警告を行ってもよい。
【0195】
なお、情報処理システム100は、第2ユーザM2が情報処理装置を有する場合には、第2ユーザM2が有する情報処理装置に対し通信で警告を行ってもよい。例えば、情報処理システム100は、HMD16が近距離通信等を行って、第2ユーザM2が有する情報処理装置が音を発する、光を発する、振動する、第2ユーザM2が有する情報処理装置にメッセージを送る、又は、これらの組み合わせ等の警告を行う。
【0196】
情報処理システム100は、カメラが撮影する画像に基づく画像認識、第2ユーザM2が担当する樹木の事前設定、又は、他のセンサによる第2ユーザM2の認識により、第2ユーザM2の位置を把握する。なお、情報処理システム100は、温度、動作、又は、色等でユーザ、及び、ユーザの位置を把握してもよい。
【0197】
なお、警告は、音以外が望ましい。例えば、チェーンソーで作業をしている場合には、チェーンソーによる音が大きいため、作業しているユーザは、周囲からの音が聞き取りにくい場合がある。したがって、警告は、例えば、レーザポインタが発する光等であると、第2ユーザM2が警告を認識しやすい。また、作業をしている間は、手が塞がっている場合が多いため、装置を操作しなくとも警告を受け取れる光等が望ましい。
【0198】
<機能構成例>
図17は、第3実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、予測部100F31、及び、警告部100F32を更に備える点が異なる。以下、異なる点を中心に説明する。
【0199】
予測部100F31は、樹木が倒れる可能性がある範囲を予測する予測手順を行う。例えば、予測部100F31は、CPU11H1等で実現する。
【0200】
警告部100F32は、範囲に第1ユーザM1、又は、第2ユーザM2がいると、光、音、表示、振動、通信、又は、これらの組み合わせで警告を行う警告手順を行う。例えば、警告部100F32は、出力装置11H5等で実現する。
【0201】
以上のように、複数のユーザが連携して作業を行う上で、危険が発生した等の場合に、ユーザに対して警告を発することができると、ユーザは、安全に作業ができる。また、ユーザ間のコミュニケーションを活発にできると、作業の効率を良くできる。
【0202】
[第4実施形態]
第4実施形態は、第1実施形態と比較すると、HMD16による出力が異なる。
【0203】
図18は、第4実施形態における出力例を示す図である。以下、
図18(A)に示すように、ユーザ10の近距離となる範囲(以下「近距離範囲A3」という。)、及び、ユーザ10から遠い位置に、樹木がある例で説明する。以下、第4樹木が「第42樹木TR42」、「第43樹木TR43」、及び、「第44樹木TR44」である例で説明する。
【0204】
第4樹木は、近距離範囲A3の範囲内にある樹木である。すなわち、第42樹木TR42、第43樹木TR43、及び、第44樹木TR44は、ユーザ10に対して近距離にある樹木である。例えば、近距離範囲A3は、「5m以内の範囲」等のように、出力設定が事前に設定される。なお、出力設定は、距離以外でもよい。例えば、出力設定は、非表示にする樹木の種類、又は、間伐済みであると非表示とする等を設定してもよい。また、出力設定は、スライダ(Slider)、又は、数値入力等のUI(User Interface)で実現する。
【0205】
図18(B)は、HMD16がユーザ10に出力する画面の例を示す図である。図示するように、HMD16は、第42樹木TR42、第43樹木TR43、及び、第44樹木TR44に対しては、樹木の識別番号(図における「ID」である。)、樹木の胸高直径(図における「DBH」である。)、及び、樹高(図における「H」である。)等の樹木データを出力する。
【0206】
一方で、HMD16は、
図18(B)に示すように、近距離範囲A3より外、すなわち、ユーザ10から遠距離に位置する樹木である第45樹木TR45については、樹木データを非表示とする。
【0207】
このように、情報処理システム100は、出力する上で近距離の樹木を抽出して、AR表示を行う。第45樹木TR45のように、ユーザ10から離れた位置にある樹木までAR表示を行うと、森林内では樹木が多いため、ユーザ10は、パネル等が多くて見づらい場合が多い。
【0208】
一方で、
図18のように、ユーザ10の近距離に絞ってAR表示がされると、ユーザ10は、表示が見やすい。特に、近距離は、遠近法上、樹木の間隔が広くなりやすいため、パネル等が重なりにくい。一方で、遠距離では、パネル等が重なり見づらい場合が多い。また、情報は、ユーザ10に近いほど重要である場合が多い。したがって、情報処理システム100は、現在位置から近距離にある範囲内について出力するように設定されるのが望ましい。
【0209】
<機能構成例>
図19は、第4実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、設定出力部100F40を更に備える点が異なる。以下、異なる点を中心に説明する。
【0210】
設定出力部100F40は、現在位置から近距離にある第4樹木に対し、樹木データを出力する設定出力手順を行う。例えば、設定出力部100F40は、出力装置11H5等で実現する。
【0211】
[第5実施形態]
第5実施形態は、第1実施形態と比較すると、樹高を計算する点が異なる。以下、樹高の計算対象となる樹木を「第5樹木」という。
【0212】
図20は、樹高の計算例を示す図である。以下のように樹高を計算する上で、全体処理は、例えば、「事前処理」と「実行処理」に分かれる。「事前処理」は、例えば、森林内に入る前等に行う。一方で、「実行処理」は「事前処理」の完了後、森林内で実行される。なお、「事前処理」は、「実行処理」より前に完了していればよく、「事前処理」及び「実行処理」は連続して実行しなくともよい。
【0213】
ステップS2001では、情報処理システム100は、キャリブレーションを行う。例えば、情報処理システム100は、複数の樹木を撮影する。そして、他の計測方法で計測した胸高直径を取得する。このようにすると、情報処理システム100は、撮影された樹木の胸高直径を計測できる。
【0214】
ほかにも、情報処理システム100は、ステレオカメラ等の計測機器により、撮影された樹木の胸高直径を計測できるようにしてもよい。
【0215】
このように、いくつかの樹木を計測した結果を取得すると、情報処理システム100は、以降、キャリブレーションデータに基づき、撮影された樹木の胸高直径を計測できる。
【0216】
ステップS2002では、情報処理システム100は、「細り」を計算する。
【0217】
「細り」は、樹木の高さに対して樹木の直径が細くなる割合を示す値である。樹木の幹は、根元から梢に向かって細くなる。そして、「細り」は、根元から梢までの太さの変化度合いを示す。太さは、例えば、直径等の径で示す。以下、径を胸高直径とする例で説明する。
【0218】
「細り」は、森林ごとにほぼ同じである場合が多い。そこで、「細り」は、森林ごとに計算されるのが望ましい。
【0219】
「細り」は、例えば、1本の樹木において、複数の直径を計測する。そして、高さの変化に対して直径がどれだけ変化を計算すると、情報処理システム100は、「細り」を計算できる。
【0220】
以上のように、事前処理を実行する(例えば、3本程度の樹木に対して行う。)と、情報処理システム100は、撮影した樹木の樹高を計算できる。次に、事前処理が実行された後、情報処理システム100は、以下のように、実行処理を実行する。
【0221】
ステップS2003では、情報処理システム100は、第5樹木を撮影する。
【0222】
ステップS2004では、情報処理システム100は、第5樹木の径、及び、計測高を計測する。例えば、情報処理システム100は、ステップS2003で取得する撮影データ、及び、キャリブレーションデータに基づき、第5樹木の径を計測する。また、情報処理システム100は、径を計測した計測点の高さを計算する。
【0223】
なお、情報処理システム100は、胸高直径のように、特定の計測高となる径を計測してもよい。すなわち、情報処理システム100は、径と、径を計測した計測高とが把握できればよい。
【0224】
ステップS2005では、情報処理システム100は、第5樹木の樹高を計算する。具体的には、情報処理システム100は、「細り」、径、及び、計測高に基づいて、第5樹木の樹高を計算する。
【0225】
以上のような全体処理を行うと、情報処理システム100は、第5樹木の樹高を計算できる。このように樹高が計算できると、例えば、
図4に示す樹木データ164における「H」が出力できる。
【0226】
なお、情報処理システム100は、径を直径でなく、半径、又は、幅等としても樹高が計算できる。
【0227】
<機能構成例>
図21は、第5実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、径計測部100F51、第3取得部100F52、及び、樹高計算部100F53を更に備える点が異なる。以下、異なる点を中心に説明する。
【0228】
径計測部100F51は、第5樹木が撮影されて画像データに写ると、画像データに基づいて第5樹木の所定の計測高における径を計測する径計測手順を行う。例えば、径計測部100F51は、CPU11H1等で実現する。
【0229】
第3取得部100F52は、森林ごとに、「細り」等の割合を計測高及び径に基づいて取得する第3取得手順を行う。例えば、第3取得部100F52は、CPU11H1等で実現する。
【0230】
樹高計算部100F53は、径、及び、割合に基づき、樹高を計算する樹高計算手順を行う。例えば、樹高計算部100F53は、CPU11H1等で実現する。
【0231】
以上のように、樹高が計算できると、例えば、樹木が倒れる場合に、情報処理システム100は、樹木が倒れる範囲を精度良く計算できる。また、樹高が計算できると、例えば、情報処理システム100は、樹木を倒して搬出等を行うのに、どのルートに最も近いか等が計算でき、搬出の計画を立てる等ができる。
【0232】
[第6実施形態]
第6実施形態は、第1実施形態と比較すると、以下のような目印を出力できる点が異なる。
【0233】
図22は、第6実施形態における目印の出力例を示す図である。例えば、作業により、第46樹木TR46を倒した場合を例に説明する。
【0234】
例えば、HMD16は、AR表示で仮想線MKを第46樹木TR46に重ねて表示する。仮想線MKは、第46樹木TR46の端部を始点とした一定間隔ごとの目印の例である。例えば、仮想線MKは、3メートルごとに出力される。また、一定間隔は事前に設定される値である。
【0235】
なお、目印は、仮想線MK以外の形式でもよい。また、目印は、他のユーザが情報処理装置を有している場合には、他のユーザが有する情報処理装置で表示されてもよい。
【0236】
ほかにも、目印は、AR表示による出力に限られず、情報処理システム100がレーザポインタ等を備えて、レーザポインタによる光で位置を示す形式でもよい。
【0237】
例えば、情報処理システム100は、ステレオカメラ等の長さを計測できる計測機器を備える。このような計測機器があると、情報処理システム100は、第46樹木TR46の端部を始点にして、仮想線MK等のように、一定間隔ごとの目印が出力できる。
【0238】
<機能構成例>
図23は、第6実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、目印出力部100F60を更に備える点が異なる。以下、異なる点を中心に説明する。
【0239】
目印出力部100F60は、樹木に、一定間隔ごとの目印を出力する目印出力手順を行う。例えば、目印出力部100F60は、出力装置11H5等で実現する。
【0240】
このような目印があると、ユーザは、一定間隔がどの位置であるかが把握できる。例えば、いわゆる「墨付作業」等が効率良くできる。すなわち、ユーザは、第46樹木TR46を一定間隔ごとに切る作業を行う場合がある。そこで、情報処理システム100は、ユーザが切る位置を目印で示す。このような目印があると、ユーザは効率良く作業ができる。
【0241】
[第7実施形態]
第7実施形態は、第1実施形態と比較すると、ユーザ10が実際に通ったルート(以下「通過ルート71」という。)を学習する点が異なる。
【0242】
例えば、情報処理システム100は、第2実施形態における第1ルート、又は、第2ルート等のルートを生成する。以下、通過ルート71に対し、情報処理システム100が生成するルートを「生成ルート72」という。なお、生成ルート72は、手動等で生成されてもよい。
【0243】
情報処理システム100は、通過ルート71を記録する。いわゆる「ログ」又は「軌跡」として、情報処理システム100は、通過ルート71を記録する。なお、情報処理システム100は、通過ルート71以外に、画像データ等を一緒に記録してもよい。例えば、一定時間ごとに現在位置を記録しておき、時系列順に現在位置をつなぐと、通過ルート71となる。
【0244】
通過ルート71は、生成ルート72とは異なる場合がある。すなわち、ユーザ10に情報処理システム100が生成ルート72を示しても、ユーザ10は、生成ルート72とは異なるルートを通る場合がある。具体的には、生成ルート72を通ろうとしても、ルート上に回避物等がある場合である。
【0245】
又は、情報処理システム100が生成ルート72を通ろうとすると、ユーザ10が歩くには、厳しい傾斜、又は、足場が悪い等の障害が多い場合である。
【0246】
なお、これらの障害の位置等を把握するため、情報処理システム100は、ユーザ10による入力、画像データ、又は、センサデータ等を現在位置情報と一緒に記録してもよい。このように、位置以上の情報があると、回避物等も学習できる。
【0247】
<機能構成例>
図24は、第7実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、学習を行うために、ルート記録部100F71、及び、学習部100F72を更に備える点が異なる。また、
図24の上図は、情報処理システム100が学習装置となる構成を示す。一方で、
図24の下図は、学習装置から情報処理システム100が学習済みモデルML2を取得して実行する実行装置となる構成を示す。
【0248】
情報処理システム100は、第1実施形態と比較すると、学習を行った後、すなわち、実行装置となる構成では、学習済みモデル取得部100F73、及び、ルート生成部100F74を更に備える点が異なる。以下、異なる点を中心に説明する。
【0249】
ルート記録部100F71は、通過ルート71を記録するルート記録手順を行う。例えば、ルート記録部100F71は、記憶装置11H2等で実現する。
【0250】
学習部100F72は、通過ルート71を学習モデルML1に学習させて学習済みモデルML2を生成する学習手順を行う。例えば、学習部100F72は、CPU11H1等で実現する。
【0251】
学習済みモデル取得部100F73は、学習済みモデルML2を取得する学習済みモデル取得手順を行う。例えば、学習済みモデル取得部100F73は、インタフェース11H3等で実現する。
【0252】
ルート生成部100F74は、学習済みモデルML2を用いて、生成ルート72を生成するルート生成手順を行う。例えば、ルート生成部100F74は、CPU11H1等で実現する。
【0253】
なお、情報処理システム100は、学習を行った後も学習を更に行ってもよい。すなわち、情報処理システム100は、ルート記録部100F71、学習部100F72、及び、ルート生成部100F74をいずれも備える構成でもよい。また、学習、及び、ルート生成は、同じ装置が行ってもよい。したがって、情報処理システム100は、ルート生成を行った「本番」の結果を学習データとして更に学習する構成でもよい。
【0254】
学習モデルML1、及び、学習済みモデルML2は、例えば、ベイジアンネットワーク(Bayesian Network)等のAIで実現する。ベイジアンネットワークを用いると、学習モデルML1、及び、学習済みモデルML2は、リンク元(親ノード)を条件とし、リンク先(子ノード)が条件付きの確率で定義される。そのため、ベイジアンネットワークを用いると、確率に基づき、親ノードと子ノードの要因関係が分かりやすい。
【0255】
また、ベイジアンネットワークを用いると、経験則が、学習モデルML1、及び、学習済みモデルML2に反映できる。そのため、経験上、ある変数と他の変数が関係あると分かっている場合に、ある変数と他の変数の関係を学習モデルML1、及び、学習済みモデルML2に反映できる。
【0256】
ほかにも、ベイジアンネットワークは、複数のルートを同時に検索する場合等に適する。
【0257】
なお、情報処理システム100は、他の機械学習を用いてもよい。
【0258】
以上のような構成であると、通過ルート71を学習して、情報処理システム100は、回避物がある場合等に回避物を避けて通る生成ルート72を生成できる。ほかにも、情報処理システム100は、通過ルート71を学習すると、傾斜パラメータp等のパラメータを最適化できる。したがって、情報処理システム100は、ユーザ10にとって、傾斜等が無理のない生成ルート72を生成できる。
【0259】
[第8実施形態]
第8実施形態は、第1実施形態と比較すると、生体情報等を用いる点が異なる。
【0260】
生体情報は、例えば、心拍数、呼吸数、歩行速度、体温、血圧、心音、心電、視線、ふらつき、脳波、又は、これらの組み合わせ等である。すなわち、生体情報は、ユーザ10の状態を把握できるデータであればよい。ほかにも、生体情報は、性別、年齢、又は、登山歴等があってもよい。また、情報処理システム100は、計測する生体情報に合わせたセンサを備える。
【0261】
情報処理システム100は、ユーザ10から取得する生体情報を用いてルート(以下、生体情報に基づいて生成するルートを「第3ルート」という。)を生成する。具体的には、情報処理システム100は、心拍数を計測してユーザ10に負荷が少ないルートを生成する。
【0262】
図13に示すように、ルートは、傾斜パラメータp等に基づいて生成できる。第8実施形態では、情報処理システム100は、生体情報をパラメータ(以下「生体パラメータ」という。)とするにして、第3ルートを生成する。例えば、傾斜が大きくなくとも、道が悪くユーザ10に負荷がかかる場合がある。
【0263】
具体的には、心拍数を生体パラメータとすると、
図13における傾斜パラメータpと同様に、心拍数が高いルートは、生体パラメータを高い値とする。
【0264】
負荷がかかっているか否かは、例えば、心拍数の数値増加等で検出できる。したがって、情報処理システム100は、ユーザ10に負荷がかかる箇所を避けるように第3ルートを生成する。
【0265】
また、生体情報は、労災、災害、遭難救助、及び、ルートの評価等に用いられてもよい。
【0266】
<機能構成例>
図25は、第8実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、生体情報取得部100F81、及び、第3ルート生成部100F82を更に備える点が異なる。
【0267】
生体情報取得部100F81は、ユーザ10の生体情報を取得する生体情報取得手順を行う。例えば、生体情報取得部100F81は、インタフェース11H3等で実現する。
【0268】
第3ルート生成部100F82は、生体情報に基づいて第3ルートを生成する第3ルート手順を行う。例えば、第3ルート生成部100F82は、CPU11H1等で実現する。
【0269】
以上のような構成であると、情報処理システム100は、生体情報を取得して、ユーザ10にかかる負荷が大きいルート、又は、ユーザ10にかかった負荷が大きかったルートを把握できる。そして、情報処理システム100は、負荷が大きいルートを避けるようにルートを生成する。このようにすると、情報処理システム100は、生体情報に合わせて、ユーザ10にかかる負荷が小さいルートを生成できる。
【0270】
[第9実施形態]
第9実施形態は、第1実施形態と比較すると、注目物等を用いる点が異なる。
【0271】
注目物は、工事に影響がある、危険である、又は、ルートを生成するのに影響がある物体である。また、注目物は、回避物であってもよい。
【0272】
例えば、注目物は、水等である。水が流れているか否かは、マップデータ、又は、地図等だけでは把握できない場合が多い。そこで、水、又は、水が流れている水みち(水道)等(以下、単に「水」という。)が現在位置にあると、ユーザ10は、現在位置と対応付けして水の存在を情報処理システム100に入力する。すなわち、情報処理システム100は、水のある位置を入力する。
【0273】
図26は、注目物の入力例を示す図である。例えば、注目物90は、マップ上等に箇所を示すように表示される。なお、注目物90は、発見したユーザ10が入力装置で操作して入力する、又は、センサによる検出結果等で入力される。
【0274】
例えば、水の箇所より下に森林作業道を通すと、森林作業道は水が流れ込みやすいため、水浸しになる。ゆえに、森林作業道を作る場合等のために、水のある位置が入力できるのが望ましい。
【0275】
また、森林内では、危険生物、又は、倒れそうな樹木等がある場合もある。このような危険がある箇所が把握できるのが望ましい。さらに、森林内には、電線、水道管、又は、銅管等が通っている場合もある。このような物体は、避けて工事する等といった工事に影響がある物体である。このような工事に影響する物体がある箇所が把握できるのが望ましい。このような現場でないと把握できない物体が存在する箇所が入力できるのが望ましい。
【0276】
なお、注目物90は、位置情報以外が入力されてもよい。例えば、注目物90は、種類、発見した日、又は、画像データ等が入力されてもよい。
【0277】
<機能構成例>
図27は、第9実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、注目物入力部100F90を更に備える点が異なる。
【0278】
注目物入力部100F90は、回避物、工事に影響がある、危険である、又は、ルートを生成するのに影響がある注目物を入力する注目物入力手順を行う。例えば、注目物入力部100F90は、入力装置11H4等で実現する。
【0279】
以上のように、注目物90が入力できると、情報処理システム100は、工事に影響がある、危険である、又は、ルートを生成するのに影響がある物体等が森林内のどこに存在するかを把握できる。ゆえに、情報処理システム100は、より詳細な情報を森林環境情報として更新できる。このような情報があると、工事の計画等が立てやすくできる。
【0280】
[第10実施形態]
第10実施形態は、第1実施形態と比較すると、航空データ、行政情報、又は、所有者情報を統合する点が異なる。
【0281】
航空データは、例えば、航空機、又は、ドローン等によって森林を上空から撮影して、又は、レーザを発して得られるデータである。このような結果は、樹木の位置(いわゆる「樹頂点位置」である。)が、地上で現在位置からレーザ光を周囲に発して得られるデータ(以下「地上データ」という。)とはズレが生じる場合がある。そこで、情報処理システム100は、以下のように航空データと地上データを統合する。
【0282】
図28は、第10実施形態における統合処理例を示す図である。
【0283】
ステップS2801では、情報処理システム100は、航空データと地上データにおいて、同じ位置と判断できる3本の樹木を抽出する。なお、抽出する本数は、事前に設定でき、任意の本数である。
【0284】
次に、情報処理システム100は、航空データの樹頂点位置と、地上データが示す樹木の位置の距離が最小となるように、ベクトル空間の線形変換を行う。
【0285】
【0286】
【0287】
実験では、
図29における「tree apex ID 33」と
図30における「ID 47」を抽出した。同様に、実験では、
図29における「tree apex ID 80」と
図30における「ID 82」を抽出した。さらに、実験では、
図29における「tree apex ID 102」と
図30における「ID 102」を抽出した。
【0288】
ステップS2802では、情報処理システム100は、ステップS2801で抽出した樹木に対し、航空データと地上データの間で最近点を同一の樹木として再度空間ベクトルの線形変換を行う。
【0289】
ステップS2803では、情報処理システム100は、同一の樹木を特定する。例えば、航空データと地上データの間で、位置の誤差が2m以内、及び、胸高直径が14cm以内であると、同一の樹木であると特定する。
【0290】
実験の結果、航空データで「134本」の樹木があった場合に、手動で行った場合と比較すると「98本」が一致した。このように、情報処理システム100は、航空データと地上データを統合する。このようにすると、情報処理システム100は、航空データ等による立木情報を精密化できる。
【0291】
また、情報処理システム100は、行政情報、又は、所有者情報を統合してもよい。
【0292】
行政情報は、森林簿、又は、林地台帳等である。すなわち、行政情報は、森林法等の様々な法令に基づき、行政が、境界、所有者、又は、森林に関する情報を記載した台帳等である。
【0293】
情報処理システム100は、行政情報、又は、所有者情報を統合して、境界、又は、所有者等の情報を合わせて出力してもよい。このような情報が統合されると、ユーザ10は、境界、又は、どこからが所有者が異なるか等を把握できる。
【0294】
<機能構成例>
図31は、第10実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、データ統合部100F100を更に備える点が異なる。
【0295】
データ統合部100F100は、航空データ、又は、行政情報を統合するデータ統合手順を行う。例えば、データ統合部100F100は、CPU11H1等で実現する。
【0296】
以上のような構成であると、情報処理システム100は、計測部100F1による計測結果等を他のデータと統合させることができる。その結果、他のデータに計測結果、又は、計測結果に他のデータを反映させることができる。
【0297】
[第11実施形態]
第11実施形態は、第1実施形態と比較すると、外部装置との通信がない点が異なる。すなわち、第11実施形態は、スタンドアロン型である。
【0298】
図32は、第11実施形態における情報処理システムの機能構成例を示す図である。例えば、情報処理システム100は、第1実施形態と比較すると、第1記憶部100F111、及び、第2記憶部100F112を更に備える点が異なる。
【0299】
第1記憶部100F111は、マップデータを記憶する第1記憶手順を行う。例えば、第1記憶部100F111は、記憶装置11H2等で実現する。
【0300】
第2記憶部100F112は、樹木データを記憶する第2記憶手順を行う。例えば、第2記憶部100F112は、記憶装置11H2等で実現する。
【0301】
第1実施形態と比較すると、マップデータ、及び、樹木データ等といった様々なデータが記憶されている点が異なる。例えば、データは、事前にメディア等に取得して記憶される。このように事前にデータを取得して記憶しておくと、森林内で通信があまり良くない環境であっても、情報処理システム100は、データを用いることができる。
【0302】
例えば、OWL(登録商標)で計測した結果は、データ容量を少量にできる。例えば、1ヘクタール(ha)を8メガバイト(MB)にできる。したがって、1000ヘクタールの森林であっても、8ギガバイト(GB)等である。ゆえに、8ギガバイトであれば、SDカード(登録商標)等のメディアにも記憶できる容量である。
【0303】
また、実験では、0.24ヘクタール用には、樹木データ(具体的には、樹木の位置、胸高直径、及び、樹高の情報等を示すデータである。)、地面データ(3Dデータ形式である。)、メッシュデータ(ルートを計算する等に用いるデータである。)は、合計で1852キロバイト(kB)である。このような少量のデータ容量であれば、メディアを用いて、スタンドアロン型でも成立する。ゆえに、情報処理システム100は、通信環境が良くない森林等でも使用できる。
【0304】
[実験結果]
図33は、実験結果を示す図である。実験結果RSは、本実験の結果を示す。実験は、森林の入口(公衆回線による通信が可能な環境である。)で、まず、GNSS等により現在位置を取得する。したがって、スタート地点となる位置では、GNSSによる現在位置も、情報処理システム100によって特定する現在位置も誤差がほぼない状態でスタートする。図示するように、ユーザは、スタート地点からスタートし、目的地となる箇所まで森林内を歩行する。その森林内を歩行している間に現在位置の特定結果をプロットした結果が図示する結果である。そして、森林内を通って、スタート地点及び目的地を一往復した場合にどの程度のズレがあるかを調べた。
【0305】
図33において、実験結果RSは、
図1等に示す情報処理システム100による位置の計測結果である。一方で、比較結果COは、GNSSによる位置の計測結果である。比較結果COでは、累積で5メートル程度のズレが発生した。一方で、実験結果RSが示すように、森林内では、情報処理システム100は、累積で5メートル以下の誤差で精度良く現在位置を特定できる。
【0306】
図示するように、情報処理システム100は、GNSS等と比較して精度良く位置を特定できる。また、情報処理システム100は、半径40メートル程度で位置を推定するのに2秒程度と高速で実行できる。
【0307】
また、情報処理システム100であると、樹木ごとの管理が容易にできる。例えば、GNSS等で管理する場合には、樹木ごとにタグ等をつけるが、タグでは森林内において、樹木を特定しにくい場合が多い。また、情報処理システム100は、タグ等がなくとも管理ができるため、管理が容易にできる。
【0308】
[変形例]
情報処理システム100は、林業に限られず、トレイルランニング、マウンテンバイク、又は、サバイバルゲーム等に使用されてもよい。また、情報処理システム100は、重機等に搭載されてもよい。
【0309】
レーザ光を周囲に発して、森林内において、周囲を計測する方法は、OWL(登録商標)、すなわち、特許第5269729号公報等に記載する方法が望ましい。ただし、情報処理システム100は、OWL(登録商標)以外のカメラ等を用いてもよい。また、レーザ測距装置14、及び、カメラ15等のセンサ類は、ユーザ10の腰より上(例えば、肩等の高さである。)にユーザ10が装着するのが望ましい。この高さであると、ユーザ10等がセンシングの障害物となるのを少なくできる。
【0310】
プログラムは、コンピュータが有する演算装置、制御装置、及び、記憶装置等を協働させて上記に示す処理等をコンピュータに実行させる。すなわち、プログラムは、主記憶装置等にロードされて、演算装置に命令を発して演算を行わせてコンピュータを動作させる。
【0311】
また、プログラムは、コンピュータが読み込み可能な記録媒体、又は、ネットワーク等の電気通信回線を介して提供されてもよい。なお、森林内は、一般的な公衆回線(例えば、Long Term Evolution(LTE)、又は、無線LAN等である。)の通信網では通信が成立しない場合がある。したがって、森林内では、920MHz帯を使用する通信等が望ましい。
【0312】
本発明は、複数の装置で構成されるシステムで実現されてもよい。すなわち、複数のコンピュータによる診断システムは、上記に示す処理を冗長、並列、分散、又は、これらの組み合わせとなるように実行してもよい。したがって、本発明は、上記に示すハードウェア構成以外の装置、及び、上記に示す装置以外のシステムで実現されてもよい。
【0313】
本発明は、森林空間の利用を実現させて、SDGsの目標「3」、「4」、「8」、「9」、「11」、及び、「12」等に貢献できる。ほかにも、本発明は、森林の持続可能な経営を実現させて、SDGsの目標「6」、「11」、「13」、「14」、及び、「15」等に貢献できる。また、本発明は、スマート林業の実現に貢献して、木材の生産、加工、及び、流通を改善して、SDGsの目標「5」、「8」、「9」、「11」、及び、「12」等に貢献できる。さらに、本発明は、スマート林業の実現に貢献して、木材の利用を改善して、SDGsの目標「7」、「8」、「9」、「11」、「12」、及び、「13」等に貢献できる。
【0314】
本願は、2021年6月8日に出願された日本国特許出願 特願2021-095962号を基礎とする優先権を主張する出願である。したがって、本願は、基礎出願の内容をすべて参照できる。
【0315】
なお、本発明は、上記に例示する各実施形態に限定されない。したがって、本発明は、技術的な要旨を逸脱しない範囲で、構成要素の追加、又は、変形が可能である。また、実施形態は、複数の実施形態を組み合わせて実施できる。ゆえに、特許請求の範囲に記載された技術思想に含まれる技術的事項のすべてが本発明の対象となる。なお、上記に例示する実施形態は、実施において好適な具体例である。そして、当業者であれば、開示した内容から様々な変形例を実現で可能であって、このような変形例は、特許請求の範囲に記載された技術的範囲に含まれる。
【符号の説明】
【0316】
10 :ユーザ
11 :第1情報処理装置
11H1 :CPU
11H2 :記憶装置
11H3 :インタフェース
11H4 :入力装置
11H5 :出力装置
12 :第2情報処理装置
14 :レーザ測距装置
15 :カメラ
16 :HMD
71 :通過ルート
72 :生成ルート
90 :注目物
100 :情報処理システム
100F1 :計測部
100F10 :記憶部
100F100 :データ統合部
100F11 :更新部
100F111 :第1記憶部
100F112 :第2記憶部
100F2 :第1取得部
100F21 :第1ルート生成部
100F22 :第2ルート生成部
100F3 :第2取得部
100F31 :予測部
100F32 :警告部
100F4 :撮影部
100F40 :設定出力部
100F5 :対応部
100F51 :径計測部
100F52 :第3取得部
100F53 :樹高計算部
100F6 :第1特定部
100F60 :目印出力部
100F7 :第2特定部
100F71 :ルート記録部
100F72 :学習部
100F73 :モデル取得部
100F74 :ルート生成部
100F8 :判断部
100F81 :生体情報取得部
100F82 :第3ルート生成部
100F9 :出力部
100F90 :注目物入力部
161 :透過画面
162 :透過領域
163 :ルート情報
164 :樹木データ
165 :施業情報
166 :防災情報
A1 :危険範囲
A2 :倒木予想
A3 :近距離範囲
CP1 :第1地点
CP2 :第2地点
CP3 :第3地点
D1 :樹木データベース
D2 :マップデータベース
D3 :取得データ
E1 :第1地域
E2 :第2地域
E3 :第3地域
L1 :等高線
M1 :第1ユーザ
M2 :第2ユーザ
MK :仮想線
ML1 :学習モデル
ML2 :学習済みモデル
PL1 :第1パネル
R0 :ルート
R10 :第10ルート
R11 :第11ルート
RS :実験結果
ST1 :始点
ST2 :終点
TR1 :第1樹木
TR31 :第31樹木
TR32 :第32樹木
TR33 :第33樹木
TR34 :第34樹木
TR35 :第35樹木
TR36 :第36樹木
TR37 :第37樹木
TR38 :第38樹木
TR39 :第39樹木
TR40 :第40樹木
TR41 :第41樹木
TR42 :第42樹木
TR43 :第43樹木
TR44 :第44樹木
TR45 :第45樹木
TR46 :第46樹木
p :傾斜パラメータ
θ :傾斜角