IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

▶ 株式会社Aerial Lab Industriesの特許一覧

特許7271028監視装置、監視プログラム及び飛行体を利用した監視システム
<>
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図1
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図2
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図3
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図4
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図5
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図6
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図7
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図8
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図9
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図10
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図11
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図12
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図13
  • 特許-監視装置、監視プログラム及び飛行体を利用した監視システム 図14
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2023-04-28
(45)【発行日】2023-05-11
(54)【発明の名称】監視装置、監視プログラム及び飛行体を利用した監視システム
(51)【国際特許分類】
   G05D 1/00 20060101AFI20230501BHJP
【FI】
G05D1/00 B
【請求項の数】 1
(21)【出願番号】P 2022113713
(22)【出願日】2022-07-15
(62)【分割の表示】P 2018044241の分割
【原出願日】2018-03-12
(65)【公開番号】P2022132484
(43)【公開日】2022-09-08
【審査請求日】2022-08-15
(73)【特許権者】
【識別番号】517106408
【氏名又は名称】株式会社A.L.I.Technologies
(74)【代理人】
【識別番号】110002790
【氏名又は名称】One ip弁理士法人
(72)【発明者】
【氏名】中村 健
(72)【発明者】
【氏名】熊谷 豪
【審査官】杉山 悟史
(56)【参考文献】
【文献】米国特許出願公開第2006/0085106(US,A1)
【文献】特開2011-112370(JP,A)
【文献】特開2014-162316(JP,A)
(58)【調査した分野】(Int.Cl.,DB名)
G05D 1/00 ~ 1/12
B64C 39/02
(57)【特許請求の範囲】
【請求項1】
仮想的にメッシュ化された監視領域内を移動する移動装置の移動履歴に基づいて、当該監視領域の監視を行う監視装置であって、
前記移動装置が存在する現在メッシュ位置を取得する取得部と、
前記移動装置が過去の一定時間内に存在した過去メッシュ位置を記憶する記憶部と、
前記過去メッシュ位置及び前記現在メッシュ位置に基づいて、前記移動装置が次に移動すべき移動先メッシュ位置を演算する演算部と、
前記移動先メッシュ位置に関する情報を前記移動装置に送信する送信部と
前記過去メッシュ位置の夫々に対して、取得時からの時間経過とともに初期値から減少していくパラメータを付与する付与部と、
を備え、
前記演算部は、前記過去メッシュからの距離と、当該過去メッシュの夫々に付与されたパラメータの両方に基づいて前記移動先メッシュ位置を演算する、監視装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、監視装置、監視プログラム及び飛行体を利用した監視システムに関し、特に
、複数の飛行体を利用して特定の領域を監視する技術に関する。
【背景技術】
【0002】
特許文献1には、無人航空機(UAV)による捜索作業の計画を自動立案する捜索作業
支援システムが提案されている。特許文献2には、小型無人航空機による信号源探索が可
能な信号源探索方法及び信号源探索システムが提案されている。
【先行技術文献】
【特許文献】
【0003】
【文献】特開2014-162316号公報
【文献】特開2011-112370号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
ところで、近年、領海・領空における安全確保の観点から、特定の領域を常時監視する
又は一時的に監視する必要が生じており、国防上も重要な問題となっている。上述した特
許文献1及び2においては、広域における監視業務を行うには適していない。
【0005】
そこで、本発明は、特定領域において複数の飛行体による監視業務を行う技術を提供す
ることを一つの目的とする。
【課題を解決するための手段】
【0006】
本発明によれば、
仮想的にメッシュ化された監視領域内を移動する移動装置の移動履歴に基づいて、当該
監視領域の監視を行う監視装置であって、
前記移動装置が存在する現在メッシュ位置を取得する取得部と、
前記移動装置が過去の一定時間内に存在した過去メッシュ位置を記憶する記憶部と、
前記過去メッシュ位置及び前記現在メッシュ位置に基づいて、前記移動装置が次に移動
すべき移動先メッシュ位置を演算する演算部と、
前記移動先メッシュ位置に関する情報を前記移動装置に送信する送信部とを備える、
監視装置が得られる。
【発明の効果】
【0007】
本発明によれば、飛行体の安全性を客観的に担保し得る仕組みとそれを識別する技術を
提供することができる。
【図面の簡単な説明】
【0008】
図1】本発明の実施の形態による監視システムによる監視状態のイメージ図である。
図2】本発明の実施の形態によるシステムの構成図である。
図3図2に示されるドローンの機体の外観を示す模式図である。
図4図3のドローンの機能ブロック図である。
図5図2の監視装置の機能ブロック図である。
図6】本実施の形態によるシステムによる監視業務のイメージ図である。
図7図5に示すドローンの移動履歴のデータレコードのイメージ図である。
図8図5に示すドローンの移動先の演算に関する計算式の例を示す図である。
図9図7の計算式によって算出された移先の評価である。
図10】本実施の形態による監視装置の処理フローを示す図である。
図11】本実施の形態による監視装置の処理フローを示す他の図である。
図12】本実施の形態によるシステムに複数機のドローンを利用した場合の変形例を示す図である。
図13図12のシステムにおける複数台のドローンの移動履歴のデータレコードのイメージ図である。
図14図12に示す各ドローンの移動先の演算に関する計算式の例を示す図である。
【発明を実施するための形態】
【0009】
本発明の実施形態の内容を列記して説明する。本発明の実施の形態による監視装置、監
視プログラムは、以下のような構成を備える。
[項目1]
仮想的にメッシュ化された監視領域内を移動する移動装置の移動履歴に基づいて、当該
監視領域の監視を行う監視装置であって、
前記移動装置が存在する現在メッシュ位置を取得する取得部と、
前記移動装置が過去の一定時間内に存在した過去メッシュ位置を記憶する記憶部と、
前記過去メッシュ位置及び前記現在メッシュ位置に基づいて、前記移動装置が次に移動
すべき移動先メッシュ位置を演算する演算部と、
前記移動先メッシュ位置に関する情報を前記移動装置に送信する送信部とを備える、
監視装置。
[項目2]
項目1に記載の監視装置であって、
前記演算部は、現在メッシュ位置から所定距離以内の周囲メッシュに対し重みづけを行
うものであって、前記過去メッシュからの距離が大きいほど大きな重みづけを行う、
監視装置。
[項目3]
項目2に記載の監視装置であって、
前記過去メッシュ位置の夫々に対して、取得時からの時間経過とともに初期値から減少
していくパラメータを付与する付与部をさらに備えており、
前記重みづけは、前記過去メッシュからの距離と、当該過去メッシュの夫々に付与され
たパラメータの両方に基づいて前記移動先メッシュ位置を演算する、
監視装置。
[項目4]
項目1乃至項目3のいずれかに記載の監視装置であって、
前記取得部は、他の移動装置に関する前記現在メッシュ位置及び前記過去メッシュ位置
を取得する、
監視装置。
[項目5]
項目1乃至項目4のいずれかに記載の監視装置であって、
表示部と、
前記監視領域、前記現在メッシュ位置及び前記過去メッシュ位置を前記表示部に出力す
る表示出力部とを備える、
監視装置。
【0010】
<実施の形態の詳細>
以下、本発明の実施の形態による監視装置、監視プログラムについて、図面を参照しな
がら説明する。
【0011】
<概略>
図1に示されるように、本実施の形態による監視装置によって実現される監視システム
は、監視領域を移動する飛行体をより均一に効率的に監視業務にあたらせるためのもので
ある。
【0012】
図示されるように、監視システムは、監視領域30を20×35にメッシュ化を行い複
数台のドローンを飛行させることにより、監視領域の情報(映像)を収集している。図に
おいては、白色で一定期間内のドローンの移動履歴(移動経路)を示している。白色の部
分は、時間経過ごとに黒色に変化するものであり、当該一定期間経過後には移動経路以外
の部分と同じ色(100%黒色)となる。
【0013】
<概要>
図2に示されるように、本発明の実施の形態による、監視システムは、監視装置10と
、複数のドローン20とを備えている。監視装置10と各ドローン20とはネットワーク
を介して通信可能に構成されている。なお、図においては、概念の理解を容易にするため
に、監視装置10とドローン20とを別体として示されているが、監視装置10はいずれ
かのドローン20に搭載されていてもよいし、複数のドローン20が共同して監視装置1
0の機能を実現することとしてもよい。
【0014】
<ドローンの構成>
本実施の形態によるドローン20は、以下のような構成を有している。なお、本実施の
形態によるドローン(Drone)は、マルチコプター(Multi Copter)、
無人飛行体(Unmanned aerial vehicle:UAV)、RPAS(
remote piloted aircraft systems)、又はUAS(U
nmanned Aircraft Systems)等と称呼されることがある。
【0015】
図3及び図4は、第1の実施の形態にかかるドローン20の機能ブロック図である。ま
ず、フライトコントローラ21は、プログラマブルプロセッサ(例えば、中央演算処理装
置(CPU))などの1つ以上のプロセッサを有することができる。カメラ5U及びカメ
ラ5Lは、ジンバルを介して機体に装備され、ジンバルによって、例えば、機体に対して
上下方向に回転することができる。好ましくは、機体に対して3軸方向(ピッチ角、ロー
ル角、ヨー角)に回転できることが好ましい。また、本例では、図2に示すように、機体
の上方及び下方に二台のカメラを有する飛行体を挙げているが、上方又は下方いずれかの
カメラにより、架線を上方及び下方の両方を撮像することができれば、一台のカメラを有
する飛行体を用いることもできる。
【0016】
また、フライトコントローラ21は、メモリ22を有しており、当該メモリにアクセス
可能である。メモリ22は、1つ以上のステップを行うためにフライトコントローラが実
行可能であるロジック、コード、および/またはプログラム命令を記憶している。
【0017】
メモリは、例えば、SDカードやランダムアクセスメモリ(RAM)などの分離可能な
媒体または外部の記憶装置を含んでいてもよい。カメラやセンサ類から取得したデータは
、メモリに直接に伝達されかつ記憶されてもよい。例えば、カメラ等で撮影した静止画・
動画データが内蔵メモリ又は外部メモリに記録される。カメラは飛行体にジンバルを介し
て設置される。
【0018】
フライトコントローラは、飛行体の状態を制御するように構成された制御モジュールを
含んでいる。例えば、制御モジュールは、6自由度(並進運動x、y及びz、並びに回転
運動θ、θ及びθ)を有する飛行体の空間的配置、速度、および/または加速度を
調整するために、ESCを経由して飛行体の推進機構(モータ等)を制御する。モータに
よりプロペラが回転することで飛行体の揚力を生じさせる。制御モジュールは、搭載部、
センサ類の状態のうちの1つ以上を制御することができる。
【0019】
フライトコントローラは、1つ以上の外部のデバイス(例えば、送受信機(プロポ)2
3、端末、表示装置、または他の遠隔の制御器)からのデータを送信および/または受け
取るように構成された送受信部と通信可能である。送受信機は、有線通信または無線通信
などの任意の適当な通信手段を使用することができる。
【0020】
例えば、送受信部24は、ローカルエリアネットワーク(LAN)、ワイドエリアネッ
トワーク(WAN)、赤外線、無線、WiFi、ポイントツーポイント(P2P)ネット
ワーク、電気通信ネットワーク、クラウド通信などのうちの1つ以上を利用することがで
きる。
【0021】
送受信部24は、センサ類で取得したデータ、フライトコントローラが生成した処理結
果、所定の制御データ、端末または遠隔の制御器からのユーザコマンドなどのうちの1つ
以上を送信および/または受け取ることができる。
【0022】
本実施の形態によるセンサ類25は、慣性センサ(加速度センサ、ジャイロセンサ)、
GPSセンサ、近接センサ(例えば、ライダー)、またはビジョン/イメージセンサ(例
えば、カメラ)を含み得る。
【0023】
また、画像処理部31は、カメラ5で撮像した画像データを一時的にメモリ32に格納
する。なお、画像データは、画像処理部31の全部又は一部の機能を、図示しないドロー
ン外部の管理端末等に備えることも可能である。
【0024】
次に図5を参照して、本実施の形態による監視装置10の機能ブロックを説明する。本
実施の形態においては、領域情報管理部によって監視領域の情報(位置情報)が予め設定
され、仮想メッシュ化される。メッシュのサイズは数百メートル四方~数キロメートル四
方まで、監視領域の全体の面積に応じて適宜設定可能である。設定したメッシュはメッシ
ュ管理部によって管理される。
【0025】
なお、上述した監視装置10の機能の一部又は全部は、ドローン20から離れた地点に
位置しネットワークを介して接続されているコンピュータ端末としてもよいし、ドローン
20の筐体内に持たせることとしてもよい。
【0026】
監視装置20の受信部は、ドローン20から位置情報及び映像情報を受信する。取得し
た映像情報は、記憶部に格納される。一方、取得した位置情報は、対応するメッシュの識
別情報(座標情報等)とともに記憶部に格納される。このとき、評価部は、メッシュの識
別情報には、時間とともに変化するパラメータが関連付けられ、併せて記憶部に格納され
る。
【0027】
本実施の形態による位置情報は、ドローン20の現在の位置情報である現在メッシュ位
置と、ドローン20の過去の位置情報である過去メッシュ位置とを含んでいる。
【0028】
演算部は、記憶部に格納された過去メッシュ位置と、現在メッシュ位置とに基づいてド
ローン20が次に移動すべきメッシュである移動先メッシュを演算する。このとき、演算
部は、監視領域をできるだけ効率的にまんべんなく監視するため、直近に監視したメッシ
ュからは遠ざかるようにして移動先メッシュを決定する。具体的には、現在メッシュ位置
から所定距離以内の周囲メッシュに対して、過去メッシュからの距離が大きいほど大きな
重みづけを行い、かつ当該メッシュに付与されたパラメータの値を乗じることによって最
終的な重みづけの補正を行う。
【0029】
図6乃至図11を参照して移動先メッシュの決定方法を説明する。図6に示されるよう
に、監視領域30は横(x方向)10マス×縦(y方向)8マスにメッシュ化されている
。ドローン20は、(0,0)をスタートし、(1,0)、(1,0)、(1,1)、(
1,2)、(2,2)、(3,2)と移動を行った。
【0030】
図7に示されるように、移動のデータレコードは記憶部に経時的に格納される。データ
レコードは少なくともメッシュ位置、メッシュのx座標、メッシュのy座標、パラメータ
Vを有している。一定期間ごとに、現在メッシュ位置n、ひとつ前に存在していた過去メ
ッシュ位置を(n-1)、その一つ前に存在していた位置を(n-2)・・・とし、本実
施の形態においては、5つ前に位置していた過去メッシュ位置(n-5)まで管理されて
いる。
【0031】
パラメータVは、一定期間(データレコードの更新期間)が経過すると1ずつ低減され
る。データレコードの更新期間は、ドローン20が現在メッシュ位置とは異なるメッシュ
に移動した場合としているが、例えば、数秒から数時間という時間単位でもよい。
【0032】
ドローン20は、自己の位置情報を取得して監視装置10に送信する。監視装置におい
ては、受信した位置情報からドローン20がどのメッシュに存在しているのかを把握する
図8は、メッシュとドローン20の位置関係を示した図である。図示されるように、過
去に通過した各メッシュは過去メッシュ位置として、x座標,y座標,パラメータVとい
う情報が関連付けられて、管理されている。パラメータは所定時間が経過すると更新され
る。
【0033】
本実施の形態におけるパラメータVは、V(t)=-at+b(ただし、bは最初に付
与されるパラメータの値、tは経過時間、aは任意の定数)で表すことができる一時の減
少関数である。しかしながら、これ以外の減衰関数であってもよい。即ち、パラメータの
値が経過とともに減少する関数であれば、どのようなものでも採用可能である。これは、
時間経過とともに情報の新しさがなくなっていくからである。
【0034】
図8に示されるように、ドローン20は座標(3,2)の位置に位置しており、付与さ
れたばかりのパラメータVの値は6となっている。ドローン20がこの次に移動できるメ
ッシュは隣接している周辺メッシュ#1乃至#7のいずれかとなる。
【0035】
本実施の形態における監視装置は、ドローン20の移動先が、過去に監視したメッシュ
からより離れるように設定する。この際、過去メッシュ位置{(0,0)、(1,0)、
(1,0)、(1,1)、(1,2)、(2,2)}において、最も直近に位置していた
過去メッシュ位置n-1(2,2)からはより遠くに離れるように、その次に位置してい
た過去メッシュ位置n-2(1,2)からはその次に遠く離れるように・・・というよう
に、移動先候補に選定されるための重みづけは、時間経過とともに(すなわち、より過去
に存在していた過去メッシュ位置になるほど)大きくする。より過去に監視していたメッ
シュについての情報の新鮮さが低くなっていくからである。
【0036】
換言すれば、パラメータVは情報の新鮮さ(情報新鮮度)と定義することもできる。情
報が新鮮であれば、それ以上そのメッシュを監視(探索)する必要は低いが、情報の新鮮
さが低くなった場合にはそのメッシュの再監視(再探索)をする必要が高い。なお、監視
前における監視領域の情報新鮮度は全てのメッシュにおいて0ということになる。
【0037】
以上の考え方を数式したものを図9に示す。図9は、移動先メッシュの重みづけFの算
定方法である。図に示されるように、Fは、過去メッシュ位置からの距離(D、D
・・D)と付与されたパラメータ(V、V・・・V)の内積で表すことができる
。なお、本実施の形態においては、Dは隣接していれば1としている。即ち、図8におい
て、#2と#3との距離Dは1であるし、#2と#3との距離も1である。
【0038】
図8に示されるように、メッシュ#1乃至#7まで、図9に示した数式によって、Fを
算出した。図においては、(x座標,y座標,パラメータV,F)が示されている。この
場合、メッシュ位置#7のF値が最も高い。即ち、直近の過去メッシュ位置からより離れ
ることを重視した場合ドローン20が次に移動すべきメッシュとしては#7となる。
【0039】
続いて、図8及び図9を参照して監視装置10の処理フローを説明する。図10に示さ
れるように、監視装置10は、ドローン20から送信される位置情報から現在メッシュ位
置を取得する(ステップS701)。現在メッシュ位置にパラメータを付与する(ステッ
プS702)。現在メッシュ位置と、パラメータとを関連付けて記憶部に格納する(ステ
ップS703)。一定期間毎に記憶部のデータレコード上のパラメータを更新する(ステ
ップS704)。更新は、パラメータが0になるまで(S705)行われる。
【0040】
図11に示されるように、監視装置10の他の処理は、現在メッシュ位置を取得し(ス
テップS801)、記憶部から過去のメッシュ位置とパラメータとを読み出す(ステップ
S802)。図9に示される算出式で移動先メッシュの候補となる各メッシュ位置の重み
づけを行い、移動先メッシュを演算する(ステップ803)。算出した移動先メッシュ情
報をドローン20に送信する(ステップS804)。
【0041】
上述した実施の形態は、ドローン20が一機の場合であったが、図12に示されるよう
に、二機(もしくはそれ以上)であってもよい。この場合、移動先候補の演算には、図1
3及び図14に示されるように、他のドローン20の現在メッシュ位置、過去メッシュ位
置及びパラメータに基づいて各ドローンの移動先の演算を行う。
【0042】
なお、図1に示されるように、本実施の形態による監視装置10は、上述した現在メッ
シュ位置及び過去メッシュ位置とパラメータを管理者に可視化するための表示部を備える
こととしてもよい。図示されるように、パラメータVが0の箇所は黒色で示されており、
直近に付与されたパラメータは白色で示されている。パラメータの現ショアは黒色から白
色に変化するグラデーションで示されている。
【0043】
以上説明した監視装置によれば、監視領域を網羅的に監視することができる。また、複
数台のドローン20によって監視した場合であっても、互いの監視履歴(移動したメッシ
ュ位置)に基づいて効率的に監視することができる。
【0044】
<監視装置のハードウェア構成>
本実施の形態による監視装置は、例えばワークステーションやパーソナルコンピュータ
のような汎用コンピュータとしてもよいし、或いはクラウド・コンピューティングによっ
て論理的に実現されてもよい。
【0045】
監視装置は、少なくとも、プロセッサ、メモリ、ストレージ、送受信部、入出力部等を
備え、これらはバスを通じて相互に電気的に接続される。
【0046】
プロセッサは、監視装置全体の動作を制御し、各要素間におけるデータの送受信の制御
、及びアプリケーションの実行に必要な情報処理等を行う演算装置である。例えばプロセ
ッサはCPU(Central Processing Unit)であり、ストレージ
に格納されメモリに展開されたプログラム等を実行して各情報処理を実施する。
【0047】
メモリは、DRAM(Dynamic Random Access Memory)
等の揮発性記憶装置で構成される主記憶と、フラッシュメモリやHDD(Hard Di
sc Drive)等の不揮発性記憶装置で構成される補助記憶と、を含む。メモリは、
プロセッサのワークエリア等として使用され、また、監視装置の起動時に実行されるBI
OS(Basic Input / Output System)、及び各種設定情報
等を格納する。
【0048】
ストレージは、アプリケーション・プログラム等の各種プログラムを格納する。各処理
に用いられるデータを格納したデータベースがストレージに構築されていてもよい。
【0049】
送受信部は、監視装置をネットワークに接続する。なお、送受信部は、有線通信又は無
線通信を適宜適用可能であり、無線LANやBluetooth(登録商標)等の近距離
通信インタフェースを備えていてもよい。
【0050】
入出力部は、キーボード、マウス、マイク、撮影部(カメラ)、タッチパネル類等の情
報入力機器、及びディスプレイやスピーカー等の出力機器である。
【0051】
バスは、上記各要素に共通に接続され、例えば、アドレス信号、データ信号及び各種制
御信号を伝達する。
【0052】
上述した実施の形態は、本発明の理解を容易にするための例示に過ぎず、本発明を限定
して解釈するためのものではない。本発明は、その趣旨を逸脱することなく、変更、改良
することができると共に、本発明にはその均等物が含まれることは言うまでもない。
【符号の説明】
【0053】
1 監視システム
10 監視装置
20 ドローン
21、22 カメラ
30 監視領域
図1
図2
図3
図4
図5
図6
図7
図8
図9
図10
図11
図12
図13
図14