特開2023-158721 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

青山学院大学 (神奈川県相模原市中央区淵野辺)

▶ コムシス情報システム株式会社の特許一覧

特開2023-158721状態判定システムおよび状態判定方法。

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2A
2B
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023158721

(43)【公開日】2023-10-31

(54)【発明の名称】状態判定システムおよび状態判定方法。

(51)【国際特許分類】

G01N 25/72 20060101AFI20231024BHJP

H02S 50/15 20140101ALI20231024BHJP

【ＦＩ】

G01N25/72 G

H02S50/15

【審査請求】未請求

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2022068665

(22)【出願日】2022-04-19

(71)【出願人】

【識別番号】513146376

【氏名又は名称】コムシス情報システム株式会社

(74)【代理人】

【識別番号】100148714

【弁理士】

【氏名又は名称】川浪圭介

(74)【代理人】

【識別番号】100092668

【弁理士】

【氏名又は名称】川浪薫

(74)【代理人】

【識別番号】100154232

【弁理士】

【氏名又は名称】幸田京子

(74)【代理人】

【識別番号】100145148

【弁理士】

【氏名又は名称】北上日出登

(72)【発明者】

【氏名】上島顕

(72)【発明者】

【氏名】岡島匠吾

【テーマコード（参考）】

2G040

5F151

5F251

【Ｆターム（参考）】

2G040AA05

2G040AB08

2G040BA14

2G040BA18

2G040BA26

2G040BA27

2G040CA02

2G040DA06

2G040DA24

2G040GA01

2G040GA09

2G040HA01

2G040HA05

2G040HA11

2G040HA16

2G040HA18

2G040ZA05

2G040ZA08

5F151KA08

5F251KA08

(57)【要約】

【課題】赤外線画像による撮像対象の異常判定の効率を向上させる。
【解決手段】実施形態の状態判定システムは、赤外線画像から撮像対象を含むあらかじめ設定された設定領域を特定する。また、基づく温度情報の分布を求める。また、分布のうち、最高温度を含む第１の設定範囲と、当該第１の設定範囲未満の温度であって、当該範囲と重複しない第２の設定範囲を求める。また、第２の設定範囲に含まれた温度情報の平均値を求める。また、平均値のばらつきを示す値に基づき、障害のおそれがある撮像対象を特定する。
【選択図】図１

【特許請求の範囲】

【請求項1】

飛行体から赤外線画像を受信する画像受信部と、
赤外線画像から撮像対象を含むあらかじめ設定された設定領域を特定する特定部と、
特定した設定領域ごとに赤外線情報に基づく温度情報の分布を求める温度情報取得部と、
分布のうち、最高温度を含む第１の設定範囲と、当該第１の設定範囲未満の温度であって、当該範囲と重複しない第２の設定範囲を求める範囲取得部と、
前記第２の設定範囲に含まれた温度情報の平均値を求める平均値取得部と、
前記平均値のばらつきを示す値に基づき、障害のおそれがある撮像対象を特定する判定部と、を備える
状態判定システム。

【請求項2】

前記判定部は、前記設定領域および隣接する他の設定領域を含む、複数の設定領域をグループとし、グループごとに障害を判定する
ことを特徴とする請求項１に記載の状態判定システム。

【請求項3】

前記判定部は、撮像対象の障害のおそれとして断線を判定するものである
ことを特徴とする請求項１または２に記載の状態判定システム。

【請求項4】

前記判定部は、赤外線画像において複数配列された個々の撮像対象を特定し、
障害のおそれがあると判定した撮像対象の集合がある場合に、当該集合内の当該撮像対象の数を求め、
前記数に基づいて、障害のおそれとして断線を判定するものである
ことを特徴とする請求項３に記載の状態判定システム。

【請求項5】

前記撮像対象の集合は、赤外線画像において隣り合う撮像対象であり、
撮像対象の配列方向において個々の撮像対象の間に撮像対象以外のものが挟まれている場合においても、隣り合う撮像対象として判定するものである
ことを特徴とする請求項４に記載の状態判定システム。

【請求項6】

前記判定部は、前記ばらつきとして前記平均値の標準偏差を求め、偏差値と閾値との対比による異常判定をする
ことを特徴とする請求項１に記載の状態判定システム。

【請求項7】

前記判定部は、前記平均値のばらつきにより判定された障害被疑領域を特定し、
その障害被疑領域を含まないように、再度平均値が求められ、それに基づき障害のおそれがある撮像対象の特定が実行される
ことを特徴とする請求項６に記載の状態判定システム。

【請求項8】

前記判定部は、障害被疑領域が特定されなくなるまで、または障害被疑領域の面積もしくは比率が予め定めた値を下回るまで、平均値の再算出から障害被疑領域の特定処理を繰り返す
ことを特徴とする請求項７に記載の状態判定システム。

【請求項9】

飛行体から赤外線画像を受信する工程と、
赤外線画像から撮像対象を含むあらかじめ設定された設定領域を特定する工程と、
特定した設定領域ごとに赤外線情報に基づく温度情報の分布を求める工程と、
分布のうち、最高温度を含む第１の設定範囲と、当該第１の設定範囲未満の温度であって、当該範囲と重複しない第２の設定範囲を求める工程と、
前記第２の設定範囲に含まれた温度情報の平均値を求める工程と、
前記平均値のばらつきを示す値に基づき、障害のおそれがある撮像対象を特定する工程とを備える
状態判定方法。

【請求項10】

コンピュータに
飛行体から赤外線画像を受信させ、
赤外線画像から撮像対象を含むあらかじめ設定された設定領域を特定させ、
特定した設定領域ごとに赤外線情報に基づく温度情報の分布を求めさせ、
分布のうち、最高温度を含む第１の設定範囲と、当該第１の設定範囲未満の温度であって、当該範囲と重複しない第２の設定範囲を求めさせ、
前記第２の設定範囲に含まれた温度情報の平均値を求めさせ、
前記平均値のばらつきを示す値に基づき、障害のおそれがある撮像対象を特定させる
状態判定プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、空撮された赤外線画像による撮像対象の状態判定システムおよび状態判定方法に関する。

【背景技術】

【0002】

従来、飛行体（無人航空機（ドローン）等）を利用して、空撮することが広く行われている。このような空撮画像は個人が景色を観賞するために利用されるだけでなく、災害救助、農業、生態調査、報道、インフラ点検、異常箇所の点検等、業務上利用されることもある。

【0003】

例えばインフラ点検の一例として、太陽光発電所の太陽光発電設備（太陽光発電パネル等）の点検に空撮画像を利用することができる。太陽光発電設備において、太陽光を受ける面の汚れ、破損等により発電に支障をきたすことがあり、また断線していると、発電した電気エネルギーを利用することができない。空撮画像によって、太陽光発電設備の汚れ、破損等を把握することが可能である。したがって、空撮画像によって太陽光発電設備を撮影して点検することが太陽光発電所において発電効率の低下を防ぐのに有効である。

【0004】

また、太陽光発電パネルを赤外線カメラで撮影し、撮影された赤外線画像を映像モニターを通して目視し、またその画像を保存し、あるいは、プリント出力を行うことで、異常発熱が起こっている不具合箇所の確認や、修理見積りに関しての客観的な情報開示・資料提供をする点検方法もある（特許文献１参照）。

【0005】

しかしながら、太陽光発電パネルを配列（例えばマトリクス状に配列）して構成される太陽光発電設備がある。このような太陽光発電設備の点検においては、規模によってパネルを１枚１枚確認することが困難であることも考えられる。しかし、このような場合であっても、赤外線画像から、太陽光発電パネル群の表面側の温度分布を取得して、温度情報により異常を判定するシステムも提案されている。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開２０１５-１４６３７１号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

赤外線画像を空撮することにより、太陽光発電パネル群の表面側の温度分布を取得して、温度情報により異常を判定する方法として、次のような具体例が挙げられる。まず、ホットスポットを含む太陽光発電パネルが特定される。そして、そのパネルのホットスポットの温度が特定される。次に、当該ホットスポットの周辺の平均温度を求め、先のホットスポットの温度との差を求める。この方法では、このように求めた差が閾値を超過するか判定することにより、当該パネルの異常判定を行なう。

【0008】

ただし、上記ホットスポット周辺の平均温度とホットスポットの温度の差は、季節や天候条件、さらには障害の進行状態を含めたさまざまな要因によって、大きく異なるおそれがある。例えば季節が冬、天候が曇りで障害の進行度が高い場合と、季節および天候が同条件でも進行度が低い場合と、季節が夏、天候が晴れの場合で進行度が低い場合の３つのパターンについて、上記温度差を閾値判定するだけで分類することは非常に困難である。

【0009】

つまり、上記技術により障害パネルを漏らさず抽出するためには、障害の可能性が低いパネルも判定対象に含め、人手により最終判断をすることが望ましい。しかし、それでは赤外線画像による異常判定の負担の軽減を図ることは困難である。また、太陽光発電パネルの障害には、さまざまな要因があり、熟練の者でないと太陽光発電パネルの異常判定を失敗するおそれがある。

【0010】

この発明は、上記課題を解決するためになされたものであり、その目的は、赤外線画像による撮像対象の異常判定の効率を向上させることにある。

【課題を解決するための手段】

【0011】

一の実施形態の状態判定システムは、画像受信部と、特定部と、温度情報取得部と、範囲取得部と、平均値取得部と、判定部とを備える。画像受信部は飛行体から赤外線画像を受信する。特定部は赤外線画像から撮像対象を含むあらかじめ設定された設定領域を特定する。温度情報取得部は、特定した設定領域ごとに赤外線情報に基づく温度情報の分布を求める。範囲取得部は、分布のうち、最高温度を含む第１の設定範囲と、当該第１の設定範囲未満の温度であって、当該範囲と重複しない第２の設定範囲を求める。平均値取得部は、第２の設定範囲に含まれた温度情報の平均値を求める。判定部は平均値のばらつきを示す値に基づき、障害のおそれがある撮像対象を特定する。

【0012】

上記実施形態において、判定部は、設定領域および隣接する他の設定領域を含む、複数の設定領域をグループとし、グループごとに障害を判定してもよい。

【0013】

上記実施形態において、判定部は、撮像対象の障害のおそれとして断線を判定するものであってもよい。

【0014】

上記実施形態において、判定部は、赤外線画像において複数配列された個々の撮像対象を特定し、障害のおそれがあると判定した撮像対象の集合がある場合に、当該集合内の当該撮像対象の数を求め、その数に基づいて、障害のおそれとして断線を判定するものであってもよい。

【0015】

上記実施形態において、撮像対象の集合は、赤外線画像において隣り合う撮像対象であり、撮像対象の配列方向において個々の撮像対象の間に撮像対象以外のものが挟まれている場合においても、隣り合う撮像対象として判定するものであってもよい。

【0016】

上記実施形態において、判定部は、前記ばらつきとして前記平均値の標準偏差を求め、偏差値と閾値との対比による異常判定してもよい。

【0017】

上記実施形態において、判定部は、前記平均値のばらつきにより判定された障害被疑領域を特定し、その障害被疑領域を含まないように、再度平均値が求められ、それに基づき障害のおそれがある撮像対象の特定が実行されてもよい。

【0018】

上記実施形態において、判定部は、障害被疑領域が特定されなくなるまで、または障害被疑領域の面積もしくは比率が予め定めた値を下回るまで、平均値の再算出から障害被疑領域の特定処理を繰り返してもよい。

【発明の効果】

【0019】

実施形態によれば、赤外線画像による撮像対象の異常判定の効率を向上させることが可能である。

【図面の簡単な説明】

【0020】

【図1】第１実施形態の状態判定システムを示す概略ブロック図。

【図2A】赤外線画像の概略図。

【図2B】赤外線画像の概略図。

【図3】赤外線画像の概略図

【図4】第１実施形態の概略フローチャート。

【図5】第２実施形態の状態判定システムを示す概略ブロック図。

【図6】赤外線画像の概略図

【図7】第２実施形態の概略フローチャート。

【図8】第３実施形態の状態判定システムを示す概略ブロック図。

【図9】第３実施形態の概略フローチャート。

【図10】第４実施形態の判定対象検出システムを示す概略ブロック図。

【図11】第４実施形態の概略フローチャート。

【図12】第４実施形態の変形例の状態判定システムを示す概略ブロック図。

【図13】第４実施形態の変形例の概略フローチャート

【図14】第５実施形態の判定対象検出システムを示す概略ブロック図。

【図15】第５実施形態の補正処理の概要を示す概念図。

【図16】第５実施形態の概略フローチャート。

【図17】第６実施形態の判定対象検出システムを示す概略ブロック図。

【図18】第６実施形態の判定処理の概要を示す概念図。

【図19】第６実施形態の概略フローチャート。

【図20】第７実施形態の判定対象検出システムを示す概略ブロック図。

【図21】第７実施形態の判定処理の概要を示す概念図。

【図22】第７実施形態の概略フローチャート。

【図23】第８実施形態の判定対象検出システムを示す概略ブロック図。

【図24】第８実施形態の判定処理の概要を示す概念図。

【図25】第８実施形態の概略フローチャート。

【図26】第９実施形態の判定対象検出システムを示す概略ブロック図。

【図27】第９実施形態の判定処理の概要を示す概念図。

【図28】第９実施形態の変形例の判定処理の概要を示す概念図。

【図29】第９実施形態の概略フローチャート。

【図30】第１０実施形態の判定対象検出システムを示す概略ブロック図。

【図31】第１０実施形態の処理の概要を示す概念図。

【図32】第１０実施形態の処理の概要を示す概念図。

【図33】第１０実施形態の概略フローチャート。

【図34】障害被疑箇所の位置を表す画像の概要を示す概念図。

【図35】障害被疑箇所の位置を表す画像の概要を示す概念図。

【発明を実施するための形態】

【0021】

図１～図３５を参照して、第１実施形態～第３実施形態の状態判定システムにかかる判定対象検出システムについて説明する。

【0022】

［第１実施形態］
第１実施形態にかかる状態判定システム１００の全体構成について図１～図４を参照して説明する。なお、図１における状態判定システムは一例であり、その他の構成を含むことを除外するものではなく、様々な形態で実施することが可能である。

【0023】

（飛行体Ｄの概要）
図１に示すように、飛行体Ｄは、撮影部Ｄ１および位置取得部Ｄ２を備える。撮影部Ｄ１は、可視光カメラと赤外線カメラを備え、可視光画像（図３４・３５）および赤外線画像（図２Ａ・図２Ｂ）とを同時に、または同期して撮影可能である。位置受信部Ｄ２は、ＧＮＳＳ(ＧｌｏｂａｌＮａｖｉｇａｔｉｏｎＳａｔｅｌｌｉｔｅＳｙｓｔｅｍ / 全球測位衛星システム)、例えばＧＰＳ、ＧＬＯＮＡＳＳ、Ｇａｌｉｌｅｏ、準天頂衛星（ＱＺＳＳ）等の測位衛星から航法信号を受信し、飛行体Ｄの３次元位置等を測位し、可視光画像、赤外線画像にそれぞれ付加する（例えばＥＸＩＦ情報）。また位置受信部Ｄ２は、例えば水圧計・気圧計を搭載し、その結果を基に深度・高度に変換してもよい。他の例として、超音波センサー等を搭載し、地表・海底等から飛行体Ｄまでの距離を測ってもよい。その受信された１次元位置情報を可視光画像および赤外線画像に付加する。このようにして可視光画像および赤外線画像の３次元位置が特定可能である。これらは、付加情報として可視光画像および赤外線画像とともに状態判定システム１００に送信される。なお、図３４・３５および図２Ａ・図２Ｂの撮像対象物は一例であって、各画像に描写される対象は、その他の種類の撮像対象物であってもよい。

【0024】

（状態判定システム１００の概要）
状態判定システム１００は、位置情報受信部１１０、画像受信部１２０、特定部１３０、温度情報取得部１４０、高温域取得部１５０、中温域取得部１６０、平均値取得部１７０、判定部１８０および制御部Ｃと記憶部Ｓを含んで構成される。位置情報受信部１１０は、飛行体Ｄから、航法信号に基づく飛行体Ｄの測位情報（３次元位置等）等を受信する。例えばこれらはＥＸＩＦ情報として画像に付加された情報として受信されてもよい。

【0025】

画像受信部１２０は、飛行体Ｄの撮影部Ｄ１から赤外線画像を受ける。特定部１３０は、可視光画像から所定の撮像対象または撮像対象群を特定する。これを以下、「設定領域」と記載する。撮像対象は例えば太陽光発電パネルおよび複数の太陽光発電パネル群である。その他撮像対象は、多数置かれている自動車、建造物の構造物（ガラス等）、多数配置される各種センサー、大量生産されて点検される製造物等を挙げることが可能である。なお、以下においては設定領域の例として、太陽光発電パネルを挙げて説明する。また、「設定領域」としての「太陽光発電パネルまたは、所定数の太陽光発電パネル群」について、説明の便宜上、原則として単に「太陽光発電パネル」と記載する。ただし、本実施形態および後述する他の実施形態およびその変形例に関し、設定領域と記載されていても例示であって太陽光発電パネルに限定されるものではない。

【0026】

（特定部１３０）
特定部１３０について、さらに説明する。特定部１３０は、飛行体Ｄの撮影部Ｄ１から受けた可視光画像おいて、設定領域を特定する。一例として撮像対象の外縁の形状に基づいて、特定する。太陽光発電パネルや、太陽光発電パネル群が撮像対象の場合はパネルの形状に基づき太陽光発電パネルを特定する。ここでいう太陽光発電パネルの特定とは、一例として赤外線画像における、太陽光発電パネルの外縁の座標、または太陽光発電パネルに属する座標を特定することである。

【0027】

なお、例えば太陽光発電パネル群は、縦２列、横２行の太陽光発電パネル群であったり、縦２列、横１行の太陽光発電パネル群であってもよい。この検出単位は状態判定システムごとに決定されていて変更されない構成であっても、図示しない入力部を介したユーザーの操作によって設定される構成であってもよい。以下、「１つの太陽光発電パネルごと」に特定する構成について記載するが、本実施形態では特定部１３０が「２以上の太陽光発電パネルを１単位として」検出する変形例を含むので、以下の温度情報取得部１４０の処理、および第２実施形態以降（変形例を含む）の各処理も、このような太陽光発電パネル群を検出した変形例を考慮したものとする。

【0028】

次に可視光画像における特定した撮像対象の領域（設定領域）の座標について、特定部１３０はそのまま赤外線画像の座標において利用する。これは可視光画像と赤外線画像とで画角、アングル、縮尺等が同一あるいは実質的に同一(両画像におけるパネル位置の差分の許容範囲)であることを前提としている。

【0029】

あるいは可視光画像と赤外線画像との間で画角、アングル、縮尺等がずれており、一方の画像の座標をそのまま他方の座標に置き換えることが許容できない（差分が大きい）場合は、特定部１３０は、何らかのランドマーク、マーカー、または撮像対象における形態的特徴および配置位置の特徴等を利用し、縮尺、位置合わせをするように構成されていてもよい。

【0030】

以上の、撮像対象の検出を可視光画像で行って、その特定した領域の座標を赤外線画像に当てはめる構成については、以下の変形例および他の実施形態においても適用可能である。

【0031】

（温度情報取得部１４０）
温度情報取得部１４０は、特定部１３０により特定された赤外線画像における太陽光発電パネルごとに既知の任意の技術によって、設定領域（例：各パネル、パネル群等）内の温度情報を取得する。例えば温度情報取得部１４０は、赤外線画像の設定領域における、画像を構成する最小単位ごとの色温度から温度情報が求められる。最小単位は、画素・ピクセルであってもよく、既定の画素単位・ピクセル単位のブロックであってもよい。なお、最小単位の温度情報それぞれには、画像における座標情報が対応づけられていてもよい。また、温度情報取得部１４０は、温度情報から設定領域ごとの温度分布を求める。

【0032】

（高温域取得部１５０）
高温域取得部１５０は、設定領域の最小単位ごとの温度情報、例えば温度分布に基づき、第１の設定範囲に含まれる温度情報を特定する。第１の設定範囲とは、温度分布における最高温度以下の設定範囲または最高温度に基づく設定範囲である。また、高温域取得部１５０は、第１の設定範囲に含まれた温度情報に基づく各温度の平均値を求める。この平均値を第１の平均値とする。具体例として高温域取得部１５０は温度情報取得部１４０が求めた設定領域の各画素の温度情報を取得する。この例において高温域取得部１５０は、設定領域の最高温度を含む上位２０％の各温度情報の平均値を求める。この平均値は、設定領域内のすべての温度の平均値でなくてもよい。例えば、上位２０％の最高温度と最低温度の平均を取るような標本平均値や、中央値であってもよい。

【0033】

撮像対象がマトリクス状に配列された太陽光発電パネルの例においては、断線があると配列における行または列に沿って一連の配線に属するパネルの集合において中高温部が全体的にあらわれる。つまり断線があった場合に対応するため、被疑対象の判定において、高温域として温度分布の上位２０％の高温域が用いられる。この高温域は、後述の中温域を取得する際の除外範囲として対比で利用される。この上位２０％とは一例であり、高温域として上位２０％～４０％等であってもよい。

【0034】

（中温域取得部１６０）
中温域取得部１６０は、設定領域の最小単位ごとの温度情報、例えば温度分布に基づき、第１の設定範囲未満の第２の設定範囲の温度情報を特定する。第２の設定範囲の下限は最低温度に至らない温度である。太陽光発電パネル等、エラー、不具合が赤外線画像の高温部に現れる撮像対象の場合、ノイズとなりやすい低温部を除外することにより、誤検出等を防ぎ撮像対象の異常判定の効率を向上させることに資する。つまり最低温度より高く、中間温度未満の温度を第２の設定範囲の下限値にすることで、低温部となる所定範囲を除外する。つまり、いわば高温と低温の間にある温度帯を特定する。中温域の温度範囲については次の平均値取得部１７０において説明する。

【0035】

（平均値取得部１７０）
平均値取得部１７０は、中温域取得部１６０が特定した温度帯（第２の設定範囲）に含まれた温度情報に基づく各温度の平均値を求める。具体例として中温域取得部１６０は温度情報取得部１４０が求めた設定領域の各画素の温度情報を取得する。この例において平均値取得部１７０は、下位２０％を超過するいずれかの温度を下限とし、上位２０％未満のいずれかの温度を上限とする、中温域の各温度情報の平均値を求める（図３・各パネルの「ＡＶＥ」等）。あるいは上位４０～８０％の各温度情報の平均値を求める。この平均値は、設定領域内のすべての温度の平均値でなくてもよい。例えば、第２の設定範囲の最高温度と最低温度の平均を取るような標本平均値や、中央値であってもよい。また第２の設定範囲のような範囲でなく、所定温度（例えば中央値）であってもよい。

【0036】

（判定部１８０）
判定部１８０は、設定領域および隣接する他の設定領域を含む、複数の設定領域を１グループとしてまとめる。このグルーピングは、あらかじめ設定された配列で実行される。マトリクス状に撮像対象が配列されている場合は縦×横の配列数でグルーピングが行われる。

【0037】

判定部１８０は、グループごとに各設定領域の平均値に基づく判定対象値を求める。例えば判定部１８０は、平均値取得部１７０が求めた平均値の偏差量を示した偏差値SS_ｉとして判定対象値を取得する（図３・各パネルの「ＳＳＳ」等）。

【0038】

偏差値SS_ｉは次式１で定義される。

【0039】

なお、次式以降において
Ｘ_ｉ：判定対象物単体（例：太陽光発電パネル）の中温域の平均温度
μ_x：グループごとの各対象物（例：各太陽光発電パネル）のＸ_ｉの平均
σ_x：標準偏差

【0040】

【数1】

パネル総数Ｎの時、基準温度Ｘ_ｉの平均値μ_xは次式２で定義される。

【0041】

【数2】

パネル総数Ｎの時、基準温度Ｘ_ｉの標準偏差σ_xは次式３で定義される。

【0042】

【数3】

判定部１８０は、上記例の偏差値SS_ｉ等の判定対象値と、閾値との対比により、障害のおそれがある撮像対象を特定する。具体的には、判定対象値が閾値や適正範囲のレンジ等と比較され、撮像対象に異常が含まれるか否かが判定される。例えば、太陽光発電パネルそれぞれにおいて偏差値SS_ｉが許容される範囲や値を超えた場合（例えば予め設定された閾値を超過した場合）、障害被疑箇所と特定される。また、判定部１８０は断線の場合の配列に沿った異常箇所の発生パターン（一群の配線に属するパネルの行数もしくは列数、または行数及び列数）、あらかじめ記憶していて、そのパターンとの比較により、特定の異常の態様を特定してもよい。これについては第２実施形態において説明する。

【0043】

また判定部１８０は、判定処理の後処理として太陽光発電パネルごとに異常があった場合は、そのパネルの位置を少なくとも特定してユーザーに任意の方法で提示する処理を行う（図３下側のブロックの縦３～４行目・横１～８列目、または図３４・３５等参照）。また撮像対象位置だけでなく、撮像対象ごとの最高温度、平均温度、または異常画素の数等を画像データとして作成して表示する処理を実行してもよい。

【0044】

［変形例］
なお、第１実施形態は断線以外の障害を判定する構成であってもよい。例えば次のような構成である。高温情報取得部１５０は、第１の設定範囲に含まれた温度情報に基づく各温度の平均値である第１の平均値を求める。中温域取得部１６０は、第２の設定範囲の温度情報を特定し、平均値である第２の平均値を求める。判定部１８０は、第１の平均値と第２の平均値の差である基準値、または最高温度と第２の平均値の差であってもよい。判定部１８０は、複数の設定領域をまとめたグループごとに各設定領域の基準値のばらつきを示す値および平均値のうち少なくともいずれか一方に基づく判定対象値を求める。判定対象値は例えば偏差値SSｉである。判定部１８０は、判定対象値と第１の閾値との対比により、障害のおそれがある撮像対象の特定をする。閾値は、高温情報の種類に応じ、少なくとも１種類について固有の閾値が設定されていてもよい。本実施形態では制御部Ｃが、第１実施形態の断線の障害判定を行った後、上記変形例のように断線以外の判定をするという構成であってもよく、逆に、断線以外の判定の後、断線の判定をする構成であってもよい。断線以外の判定では基準値を利用し、断線の判定においては基準値が利用されない。

【0045】

（制御部Ｃ・構成）
上記説明における各部の処理は、説明の便宜上、図１に示す制御部Ｃの制御の下に実行されるものとして説明した。この制御部Ｃは、例えば、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）、ＧＰＵ（ＧｒａｐｈｉｃｓＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）、或いは、特定用途向け集積回路（ＡｐｐｌｉｃａｔｉｏｎＳｐｅｃｉｆｉｃＩｎｔｅｇｒａｔｅｄＣｉｒｃｕｉｔ：ＡＳＩＣ）等のうち、単一または複数の回路を含んで構成されていてもよい。制御部Ｃはメモリに保存された例えば画像位置特定プログラムを読み出し実行することで機能を実現する。なお、メモリにプログラムを保存する代わりに、回路内にプログラムを直接組み込むよう構成しても構わない。この場合、制御部Ｃとしての回路内に組み込まれたプログラムを読み出し実行することで機能を実現する。なお、制御部Ｃは単一の回路として構成される場合に限らず、複数の独立した回路を組み合わせて１つのプロセッサーとして構成し、その機能を実現するようにしてもよい。さらに、実施形態における複数の構成要素（例えば位置情報受信部１１０、画像受信部１２０、特定部１３０、温度情報取得部１４０、高温域取得部１５０、中温域取得部１６０、平均値取得部１７０、判定部１８０、のうち少なくとも２以上）を１つのプロセッサーへ統合してその機能を実現するようにしてもよい。

【0046】

［動作］
図４は、本実施形態における処理の流れを示す図である。以下、図４を参照しつつ、状態判定システム１００の処理の流れを、ステップ番号（Ｓ００１～Ｓ００９）に添って説明する。

【0047】

（Ｓ００１）
状態判定システム１００における位置情報受信部１１０は、飛行体Ｄから位置情報を受ける。また画像受信部１２０は可視光画像および赤外線画像を受ける。

【0048】

（Ｓ００２）
特定部１３０は、可視光画像において設定領域（太陽光発電パネル等）を特定する。次に可視光画像における特定した撮像対象の領域（設定領域）の座標について、特定部１３０はそのまま赤外線画像の座標において利用する。なお、特定部１３０は、赤外線画像から設定領域を特定してもよい。その場合、可視光画像の取得およびそれに関連する処理を省略してもよい。

【0049】

（Ｓ００３）
温度情報取得部１４０は、特定部１３０により特定された赤外線画像における太陽光発電パネルごとにパネル内の温度情報を取得する。これは画素ごとに行ってもよく、複数画素を一単位として、画素群単位ごとの平均値を温度情報としてもよい。また、温度情報取得部１４０は、温度情報から設定領域ごとの温度分布を求める。

【0050】

（Ｓ００４）
高温域取得部１５０は、第１の設定範囲に含まれる温度情報を特定する。第１の設定範囲とは、温度分布における最高温度以下の設定範囲または最高温度に基づく設定範囲であって、例えば設定領域の最高温度を含む上位２０％である。

【0051】

（Ｓ００５）
中温域取得部１６０は、第２の設定範囲の温度情報を特定する。第２の設定範囲は、いわば高温と低温の間にある温度帯である。

【0052】

（Ｓ００６）
また、平均値取得部１７０は、第２の設定範囲に含まれた温度情報に基づく各温度の平均値を求める。

【0053】

（Ｓ００７）
判定部１８０は、複数の設定領域を１グループとしてまとめる。また判定部１８０は、グループごとに平均値に基づく判定対象値を求める。判定対象値は例えば偏差値SS_ｉである。

【0054】

（Ｓ００８）
判定部１８０は、判定対象値と第１の閾値との対比により、障害のおそれがある撮像対象の特定をする。

【0055】

（Ｓ００９）
また判定部１８０は、判定処理の後処理として太陽光発電パネルごとに異常があった場合は、そのパネルの位置を少なくとも特定してユーザーに任意の方法で提示する処理を行う（図３４・３５参照）。ユーザーは障害のおそれがある太陽光発電パネルを参照することにより、実際に断線等の障害があるか判断することができる。

【0056】

［効果］
本実施形態によれば、赤外線画像の設定領域における温度分布から、中温域の平均値が求められる。また、複数の設定領域によるグループごとに各設定領域の平均値に基づく判定対象値が求められる。さらにその判定対象値に基づいて撮像対象の異常について判定がなされる。このような構成によれば各設定領域における撮像対象の異常判定のミスが低減される。つまり、同様の条件下（気象条件等）にさらされている太陽光発電パネルのグループ内において、パネル間の中温域の平均値の差のばらつきを求めるので、季節、天候による影響と、撮像対象の障害の進行度による影響を識別することができる。

【0057】

さらに、異常判定のミスを低減できる他の理由として赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を異常判定に用いる情報から除外していることが挙げられる。例えば、太陽光発電施設においては、１つの太陽光発電パネル群と他の太陽光発電パネル群との間に、発電機器（パワーコントローラーやケーブル）、アスファルト舗装、水、植物等、太陽光発電パネルとは全く異なる温度情報を呈する物が存在している。赤外線画像全体で温度異常の検出を行うと、そのようなノイズが多数含まれる可能性があり、異常判定に支障をきたすおそれがある。本実施形態によれば、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズが含まれる可能性を低減可能である。さらに、また太陽光発電パネルの配置位置によって、例えば影により太陽光発電パネル配列の右上隅と左下隅で温度情報の平均値が異なってくる場合もあり、その点においても異常判定のミスを低減可能である。

【0058】

上記実施形態によれば判定ミスが低減されるため、障害の可能性が低いパネルが障害被疑の対象から外れやすい。これにより、赤外線画像による撮像対象の異常判定の効率を向上させることが可能である。

【0059】

［第２実施形態］
第２実施形態にかかる状態判定システム２００について図５～図7を参照して説明する。以下の説明において、第１実施形態と重複する説明は割愛する。

【0060】

第１実施形態と同様に、第２実施形態においても赤外線画像内の撮像対象が特定され、平均値、判定対象値が求められる。また、障害被疑対象（パネル等）が特定される点も第１実施形態と同様である。

【0061】

状態判定システムの判定対象に配線がなされている場合、断線があると一連の配線経路に沿って判定対象の集合において中高温部が全体的にあらわれる。このような対象として、太陽光発電パネルを一例について説明する。したがって、第２実施形態においては判定対象に設けられた配線経路に属する判定対象（太陽光発電パネル等）の群と、判定システムにより障害被疑対象との群とを対比する。この対比により判定対象に表れた中高温部の要因が断線であるかをより正確に判定する。詳細について以下、説明する。

【0062】

（状態判定システム２００）
図５に示すように第２実施形態の状態判定システム２００は、位置情報受信部２１０、画像受信部２２０、特定部２３０、温度情報取得部２４０、高温域取得部２５０、中温域取得部２６０、平均値取得部２７０、判定部２８０および制御部Ｃと記憶部Ｓを含んで構成される。

【0063】

（概要）
第１実施形態と同様に、本変形例においても赤外線画像内の撮像対象を設定領域とする。つまり撮像対象以外のものを障害被疑の判定から排除するように構成されている。すなわち、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズ（アスファルト舗装、水、植物、発電機器（パワーコントローラー、ケーブル）等）が含まれる可能性を低減する。さらに太陽光発電パネル配列における異常判定ミスも低減する。

【0064】

特定部２３０による太陽光発電パネルの検出、高温域取得部２５０による高温域の取得、中温域取得部２６０による平均値の算出、平均値取得部２７０による平均値の算出、判定部２８０による判定対象値の取得、および障害のおそれがある撮像対象の特定は第１実施形態と同様である。以下、判定対象について一例である太陽光発電パネルとして説明する。

【0065】

（記憶部Ｓ）
第２実施形態において記憶部Ｓには太陽光発電パネルの一群、すなわち隣接して所定の配列がなされた太陽光発電パネル群において、１つの配線に属する太陽光発電パネルの数を示すパネル数情報が記憶されている。なお、配列情報と分割グループ情報とは外部の記憶手段に記憶されていてもよい。さらに記憶部Ｓ等には断線判定情報が記憶されている。断線判定情報は。当該パネル数情報におけるパネル数以下の数値であって、複数の太陽光発電パネルに共通する障害の状態が断線であるかを判定するための情報である。この断線判定情報におけるパネル数の数値はユーザーが図示しない入力部等を介して変更可能であってもよい。断線判定情報の一例として、１つの配線に属する太陽光発電パネルの数が１６枚である場合に、閾値を１２枚としてもよい。また、１つの配線に属する太陽光発電パネルの数が少ないことを想定して、断線判定情報の下限は４枚程度としてもよい。

【0066】

（判定部２８０）
太陽光発電パネル群では、各パネルにより発電された電力を送電するための配線が設けられている。その配線は複数あり、パネル群における各パネルは複数の配線のいずれかに属する。また断線があると、その配線に属するパネルすべてにおいて比較的高温に偏る傾向がある。したがって、判定部２８０が第１実施形態のように判定した障害被疑パネルの集合におけるパネル数が、１つの配線に属するパネル数に近い場合には、それら複数の障害被疑パネルに断線障害が生じている可能性が高いと判定することが可能である。

【0067】

判定部２８０は、記憶部Ｓ（または外部の記憶手段。以下同じ）に記憶されたパネル数に基づく判定値と、判定部２８０により判定された障害被疑パネルの集合におけるパネル数（以下、「第１被疑パネル数」とする。）とを対比する。

【0068】

判定部２８０は、第１被疑パネル数と断線判定情報とを対比し、第１被疑パネル数が断線判定情報に設定された閾値以上であればその第１被疑パネル数における各太陽光発電パネルを断線による障害被疑パネルとして特定する。なお、判定部２８０は、断線判定情報に設定された閾値を超過した場合に断線による障害被疑パネルとして特定する構成であってもよい。

【0069】

上記の判定の前提として、判定部２８０が第１被疑パネル数における太陽光発電パネルの集合と判断する基準としては、赤外線画像において隣り合うパネルであることをその基準の１つとして挙げることができる。ここで「隣り合う」パネルであるかの判断は、物理的に隣接していることを基準としてもよい。物理的に隣接しているかについては例えば赤外線画像におけるパネル間の距離が所定距離以下（距離０を含む）であるかにより判断されてもよい。さらに「距離」は例えば画素数に基づいて判断される。

【0070】

さらに判定部２８０による「隣り合う」パネルであるかの判断は、物理的に隣接しているかだけでなく、次のような基準も含めて実行されてもよい。例えば太陽光発電パネルの配列方向において個々の間にパネル以外のものが挟まれている場合においても、「隣り合う」と判断されてもよい。「パネル以外の物」については、あらかじめ記憶されている図面データ、座標、赤外線画像でない実画像の解析、温度分布およびパネル間の距離のうち、少なくとも１以上の要素により判定部２８０が判断する。

【0071】

なお、上記に限らず次のような構成とすることも可能である。別の構成として記憶部Ｓには太陽光発電パネルの一群、すなわち隣接して所定の配列がなされた太陽光発電パネル群の配列情報と、太陽光発電パネル群をさらに複数グループに分割した分割グループ情報とが記憶されている。

【0072】

配列情報としては、例えば行列方向に直線状に太陽光発電パネルが配列されている場合、太陽光発電パネル群の行数、列数を示す行列数が含まれる。また配列情報としては各行列に属するパネル数が含まれる。

【0073】

分割グループ情報は、配列情報にしたがって太陽光発電パネル群のどのパネルがどの配線に属するかを示す情報である。太陽光発電パネル群では、各パネルにより発電された電力を送電するための配線が設けられている。その配線は複数あり、例えば太陽光発電の何行目、何列目のパネルが複数の配線のいずれかに属する。つまり太陽光発電パネル群に属する各パネルは、第１～第ｎの配線グループのいずれかに属することになり、分割グループ情報は、配線の識別情報と、配列情報にしたがった各パネルの位置とを対応付けた情報である。

【0074】

判定部２８０は、第１被疑パネルにつき配列情報に基づいて、分割グループ情報と対比する。つまり判定部２８０は、分割グループ情報を参照して第１被疑パネルそれぞれが、どの配線に属するか特定する。また、各配線に属する第１被疑パネルの数、または各配線に属するパネル総数に対するその配線における第１被疑パネルの数の比率を判定部２８０が閾値判定をする。あらかじめ設定された閾値以上であれば、判定部２８０はその第１被疑パネル数における各太陽光発電パネルを断線による障害被疑パネルとして特定する。なお、判定部２８０は、断線判定情報に設定された閾値を超過した場合に断線による障害被疑パネルとして特定する構成であってもよい。

【0075】

［動作］
図７は、第２実施形態における処理の流れを示す図である。以下、図７を参照しつつ、状態判定システム２００の処理の流れを、ステップ番号（Ｓ０２１～Ｓ０３０）に添って説明する。

【0076】

（Ｓ０２１～Ｓ０２８）
上記第１実施形態の状態判定システム１００におけるＳ００１～Ｓ００８と同様である。

【0077】

（Ｓ０２９）
判定部２８０は、Ｓ０２８により特定された障害パネルの集合における第１被疑パネル数と、記憶部Ｓ等から取得した断線判定情報とを対比する。

【0078】

（Ｓ０３０）
判定部２９０は、Ｓ０２８の対比により、例えば第１被疑パネル数が断線判定情報に設定された閾値以上であればその第１被疑パネル数における各太陽光発電パネルを断線による障害被疑パネルとして特定する。

【0079】

Ｓ０３０の判定の結果、判定部２８０は、障害被疑箇所があると判定された設定領域においては判定処理の後処理として、パネルの位置を少なくとも特定し、断線障害であることをユーザーに任意の方法で提示する処理を行う（図３４・３５参照）。

【0080】

［効果］
第２実施形態によれば、赤外線画像の設定領域における温度分布から、各設定領域の平均値に基づく判定対象値が求められる。また、複数の設定領域によるグループごとに各設定領域の基準値のばらつきを示す値および平均値のうち少なくともいずれか一方に基づく判定対象値が求められる。さらにその判定対象値に基づいて撮像対象の異常について判定がなされる。このような構成によれば各設定領域における撮像対象の異常判定のミスが低減される。つまり、同様の条件下（気象条件等）にさらされている太陽光発電パネルのグループ内において、パネル間の中温域の平均値のばらつきを求めるので、季節、天候による影響と、撮像対象の障害の進行度による影響を識別することができる。

【0081】

【0082】

さらに第２実施形態においては第１実施形態において特定した障害被疑箇所についてさらに断線障害であるかを、第１被疑パネルの集合における数に基づいて判断する。これにより、断線による障害被疑箇所を詳細に特定することが可能である。

【0083】

【0084】

［第３実施形態］
第３実施形態にかかる状態判定システム３００について図８および図９を参照して説明する。以下の説明において、第１実施形態または第２実施形態と重複する説明は割愛する。

【0085】

第１実施形態と同様に、第３実施形態においても赤外線画像内の撮像対象が特定され、平均値、判定対象値が求められる。また、障害被疑対象（パネル等）が特定される点も第１実施形態と同様である。

【0086】

第３実施形態はさらに、障害のおそれがある箇所（以下、原則として「障害被疑箇所」と記載する）が検出された場合、その箇所を含めずに再度当該グループにおける状態判定を実施する。判定における同一グループ内に、障害のおそれがある箇所が多く検出されるほど、算出される偏差量は鈍化する可能性がある。したがって、第３実施形態においては障害のおそれがある箇所を除外して再度状態判定を実施することにより、障害被疑箇所の特定を詳細にする。さらに第３実施形態においては、グループごとに障害被疑箇所が特定されなくなるまで、あるいは障害被疑箇所の面積または比率が設定値以下になるまで当該処理が繰り返される。

【0087】

（状態判定システム３００）
図８に示すように第３実施形態の状態判定システム３００は、位置情報受信部３１０、画像受信部３２０、特定部３３０、温度情報取得部３４０、高温域得部３５０、中温域取得部３６０、平均値取得部３７０、判定部３８０および制御部Ｃと記憶部Ｓを含んで構成される。

【0088】

特定部３３０による太陽光発電パネルの検出、高温域取得部３５０による高温域の取得、中温域取得部３６０による中温情報の取得、平均値取得部３７０による判定対象物単体の平均値の算出、判定部２８０によるグループごとの判定対象物それぞれのＸ_ｉの平均値の算出、判定対象値の取得、および障害のおそれがある撮像対象の特定は第１実施形態と同様である。

【0089】

第３実施形態においては判定部３８０の判定の後、障害被疑箇所がある場合には障害被疑箇所を除外して再度障害判定をする。例えば判定部３８０は、障害被疑箇所の画像における座標を特定し、その座標を除外する。最初の設定領域のグルーピングのまま、温度情報取得部３４０はこの除外された座標における温度情報を含めずに設定領域ごとの温度分布を求める。高温域取得部３５０は、この除外後の温度分布に基づき高温域を求める。

【0090】

第２実施形態に基づく第３実施形態においては、第２の障害被疑判定の後に上記除外処理が行われる。

【0091】

中温域取得部３６０は、この除外後の温度分布に基づき第２の設定範囲の温度情報を特定する。あるいは第３実施形態において、最初の判定における第２の設定範囲の温度情報を利用することも可能である。この場合、当該２回目以降の第２の設定範囲の特定処理は省略してもよい。このように特定処理を省略する場合であっても、２回目の判定処理の後、３回目の判定処理を行う場合には再度第２の設定範囲の特定処理を行うように構成されていてもよい。

【0092】

その後の平均値、判定対象値等の算出は第１実施形態または第２実施形態と同様である。判定部３８０は、第１実施形態等と同様に、例えば太陽光発電パネルそれぞれの基準温度Ｘ_ｉに対する偏差値SS_ｉが許容される範囲または値を超過した場合（例えば予め設定された閾値を超過した場合）、障害被疑箇所と特定する。判定部３８０は当該特定処理を経て被疑箇所が未だ存在する場合には、再度上記処理を繰り返す。ただし、第３実施形態はこれに限られない。例えば、判定部３８０は障害被疑領域の面積もしくは比率が予め定めた値を下回るまで、上記被疑箇所の除外から判定処理を繰り返すように構成されていてもよい。また、この構成でなく判定部３８０が閾値を更新しながら、上記被疑箇所の除外から判定処理を繰り返すように構成されていてもよい。

【0093】

［動作］
図９は、第３実施形態における処理の流れを示す図である。以下、図９を参照しつつ、状態判定システム３００の処理の流れを、ステップ番号（Ｓ０３１～Ｓ０３９－１）に添って説明する。

【0094】

（Ｓ０３１～Ｓ０３７）
上記第１実施形態の状態判定システム１００におけるＳ００１～Ｓ００７、または第２実施形態のＳ０２１～Ｓ０２７と同様である。

【0095】

（Ｓ０３８）
判定部３８０は、判定対象値と閾値との対比により、障害のおそれがある撮像対象の特定をする。

【0096】

（Ｓ０３９）
判定部３８０は、判定対象値と閾値との対比により、設定領域ごとに障害被疑箇所があるか判定をする。

【0097】

（Ｓ０３９－１）
Ｓ０３９の判定の結果、障害被疑箇所があると判定された設定領域においては（Ｓ０３９；Ｙｅｓ）、障害被疑箇所の画像における座標を特定し、当該設定領域においてその座標を除外する。

【0098】

Ｓ０３９－１の後、Ｓ０３３に戻り温度情報取得部２４０はこの除外された座標における温度情報を含めずに設定領域ごとの温度分布を求める。以下、Ｓ０３９判定の結果、障害被疑箇所があると判定されなくなるまで（Ｓ０３９；Ｎｏ）、これら処理が繰り返される。また判定部３８０は、判定処理の後処理として太陽光発電パネルごとに異常があった場合は、そのパネルの位置を少なくとも特定してユーザーに任意の方法で提示する処理を行う。

【0099】

［変形例］
なお、第１実施形態の変形例のように、本実施形態では制御部Ｃが、第１実施形態の断線の障害判定を行った後、上記変形例のように断線以外の判定をするという構成であってもよい。つまり、判定部２８０が特定した断線の障害被疑領域を特定した後、その障害被疑領域を含まないように、再度断線以外の他の障害被疑領域の特定が実行されてもよい。逆に、断線以外の判定の後、断線の判定をする構成の場合は、上記の逆である。断線以外の判定では基準値を利用し、断線の判定においては基準値が利用されない。

【0100】

［効果］
第３実施形態によれば、赤外線画像の設定領域における温度分布から、各設定領域の平均値に基づく判定対象値が求められる。また、複数の設定領域によるグループごとに各設定領域の基準値のばらつきを示す値および平均値のうち少なくともいずれか一方に基づく判定対象値が求められる。さらにその判定対象値に基づいて撮像対象の異常について判定がなされる。このような構成によれば各設定領域における撮像対象の異常判定のミスが低減される。つまり、同様の条件下（気象条件等）にさらされている太陽光発電パネルのグループ内において、パネル間の中温域の平均値の差のばらつきを求めるので、季節、天候による影響と、撮像対象の障害の進行度による影響を識別することができる。

【0101】

【0102】

さらに第３実施形態においては障害被疑箇所を除外して再度状態判定を実施することにより、障害被疑箇所の特定を詳細にする。これにより、判定における同一グループ内に、障害のおそれがある箇所が多く検出される場合においても、障害被疑箇所の特定の漏れを低減させることが可能である。

【0103】

【0104】

上記第３実施形態から把握される判定対象検出システムとして次のような特徴を挙げることが可能である。

【0105】

［特徴Ａ］
飛行体から赤外線画像を受信する画像受信部と、
赤外線画像から撮像対象を含むあらかじめ設定された設定領域を特定する特定部と、
特定した設定領域ごとに障害のおそれがある障害被疑領域を特定し、
その障害被疑領域を含まないように、再度他の障害被疑領域の特定が実行される判定部と、を備える
状態判定システム。

【0106】

［判定対象検出システム］
次に上記各実施形態およびその変形例、ならびにそれに対応する各請求項に示される技術的思想と組み合わせることが可能な判定対象検出システムについて説明する。判定対象検出システムは、第４実施形態～第１０実施形態に分けて説明する。

【0107】

［第４実施形態］
本実施形態の判定対象検出システム４００は、上記実施形態と同様に飛行体Ｄから赤外線画像、測位情報、撮影方向情報等を受信し、撮影対象を特定する。図１０に示すように判定対象検出システム４００は、位置情報受信部４１０、画像受信部４２０、特定部４３０、温度情報取得部４４０および制御部Ｃと記憶部Ｓを含んで構成される。位置情報受信部４１０は、飛行体Ｄから、航法信号に基づく飛行体Ｄの測位情報（３次元位置等）等を受信する。例えばこれらはＥＸＩＦ情報として画像に付加された情報として受信されてもよい。

【0108】

画像受信部４２０は、飛行体Ｄの撮影部Ｄ１から赤外線画像を受ける。特定部４３０は、赤外線画像から所定の撮像対象または撮像対象群を特定する。撮像対象は例えば太陽光発電パネルである。その他撮像対象は、多数置かれている自動車、建造物の構造物（ガラス等）、多数配置される各種センサー、大量生産されて点検される製造物等を挙げることが可能である。なお、以下においては撮像対象または撮像対象群の例として、太陽光発電パネルを挙げて説明する。

【0109】

画像受信部４２０により受信された赤外線画像について、特定部４３０は一例として、ディープラーニングにより画像内の太陽光発電パネルそれぞれを推論することにより検出する。これは、いわゆる人工知能（ＡＩ）を用いたディープラーニング（深層学習）により作成された推論モデルを用いたものである。推論モデルには、あらかじめ、赤外線画像から太陽光発電パネルそれぞれを特定した複数のデータからなる教師データ群を有している。

【0110】

人工知能によりその教師データ群を用いて深層学習が行われ、推論モデルが生成される。特定部４３０において、受信された画像に対し当該推論モデルを用いて推論が行われ、赤外線画像から太陽光発電パネルそれぞれの例えば外縁部の座標が特定される（外縁部でなく、太陽光発電パネルの四隅の座標であってもよい。）。

【0111】

なお、本実施形態において、赤外線画像から太陽光発電パネルを検出する方法は、ディープラーニングによるものに限られない。パターンマッチング等、他の方法を用いることも可能である。また、太陽光発電パネルの検出は、各太陽光発電パネルごとでなくてもよく、例えば縦２列、横２行の太陽光発電パネル群であったり、縦２列、横１行の太陽光発電パネル群であってもよい。この検出単位は判定対象検出システムごとに決定されていて変更されない構成であっても、図示しない入力部を介したユーザーの操作によって設定される構成であってもよい。

【0112】

また、上記では赤外線画像において撮像対象を検出する構成であった。しかしながら本実施形態はこれに限られない。例えば、次のような変形例によっても撮像対象を特定することが可能である。すなわち本システムでは、飛行体Ｄから可視光画像と赤外線画像とを受け、双方を利用可能である。さらに可視光画像と赤外線画像とは同一アングルで撮影されたものである。したがって、太陽光発電パネルの位置の特定は赤外線画像に限らず、可視光画像においても可能である。この場合、特定部４３０は、可視光画像において、上記いずれかの推論技術により可視光画像において撮像対象の位置を特定する。

【0113】

次に可視光画像における特定した撮像対象の領域の座標について、特定部４３０はそのまま赤外線画像の座標において利用する。これは可視光画像と赤外線画像とで画角、アングル、縮尺等が同一あるいは実質的に同一(両画像におけるパネル位置の差分の許容範囲)であることを前提としている。

【0114】

あるいは可視光画像と赤外線画像との間で画角、アングル、縮尺等がずれており、一方の画像の座標をそのまま他方の座標に置き換えることが許容できない（差分が大きい）場合は、特定部４３０は、何らかのランドマーク、マーカー、または撮像対象における形態的特徴および配置位置の特徴等を利用し、縮尺、位置合わせをするように構成されていてもよい。また位置合わせについてはこれに限られない。

【0115】

例えば特定部４３０は、全球測位衛星システムからの航法信号から信号発信時刻を、可視光画像の付加情報として取得する。また、飛行体Ｄの速度センサー等から水平移動速度を取得する。また可視光画像に付帯された時刻と赤外線画像に付帯された時刻とを比較し、時刻差や撮影の時間差を求める。

【0116】

また特定部４３０は、移動速度と上記時刻差等とに基づいて、両画像の位置のずれ量（各撮影位置間の距離）を求め、可視光画像および赤外線画像それぞれに対応する複合Ｐｉｔｃｈ角θと、上記ずれ量とに基づいて、両画像がどの方位にどれだけ位置ずれしているかを求める。さらに画角の差、例えば可視光画像の方が広域である場合、特定部４３０はこのように特定した差分情報に基づいて、可視光画像内における赤外線画像が示す範囲を特定する処理を行う場合に、その処理の負荷を低減し、あるいはその処理結果の精度の向上を図ることが可能となる。

【0117】

また、可視光画像と赤外線画像の位置の対応関係を求めることが可能となるため、両画像の画角を統一、あるいは両画像の画角の比を任意の比率となるように変更することも可能である。

【0118】

【0119】

温度情報取得部４４０は、特定部４３０により特定された赤外線画像における太陽光発電パネルごとに既知の任意の技術によって、パネル内の温度情報を取得する。

【0120】

（制御部Ｃ・構成）
上記説明における各部の処理は、説明の便宜上、図１に示す制御部Ｃの制御の下に実行されるものとして説明した。この制御部Ｃについては、上記実施形態の説明とほぼ重複するので説明を割愛する。なお、本実施形態における複数の構成要素（例えば位置情報受信部４１０、画像受信部４２０、特定部４３０および温度情報取得部４４０のうち少なくとも２以上）を１つのプロセッサーへ統合してその機能を実現するようにしてもよい。

【0121】

（制御部Ｃ・判定処理）
また制御部Ｃは、判定対象検出システムにおける判定処理についても実行する。例えば制御部Ｃは、赤外線画像から障害パネルを温度の差とパターンにより、判定することができる。具体例として、制御部Ｃは特定した太陽光発電パネルごとに、そこに含まれる画素ごとの温度情報に基づき、全画素の温度の平均値、または全画素の温度分布を求めてそのうちの高い温度を示す画素の数等により、閾値や適正範囲のレンジ等と比較して、パネルに異常が含まれるか否かを判定する。また、制御部Ｃは、異常温度を呈する画素の集合（パターン）の形状をあらかじめ記憶していて、そのパターンとの比較により、特定の異常の態様を特定してもよい。

【0122】

また制御部Ｃは、判定処理の後処理として太陽光発電パネルごとに異常があった場合は、そのパネルの位置を少なくとも特定してユーザーに任意の方法で提示する処理を行う（図３上側のブロックの縦４行目・横６列目にあるパネルの「ＤＩＦＦ」、または図３４、図３５等参照）。またパネル位置だけでなく、太陽光発電パネルごとの最高温度、平均温度、または異常画素の数等を画像データとして作成して表示する処理を実行してもよい。なお、制御部Ｃは、当該処理において「判定部」の一例に相当する。

【0123】

［動作］
図１１は、本実施形態における処理の流れを示す図である。以下に、図１１を参照しつつ、判定対象検出システム４００の処理の流れを、ステップ番号（Ｓ０４１～Ｓ０４５）に添って説明する。

【0124】

（Ｓ０４１）
判定対象検出システム４００における位置情報受信部４１０は、飛行体Ｄから位置情報を受ける。また画像受信部４２０は赤外線画像を受ける。

【0125】

（Ｓ０４２）
特定部４３０は、赤外線画像において太陽光発電パネルを特定する。

【0126】

（Ｓ０４３）
温度情報取得部４４０は、特定部４３０により特定された赤外線画像における太陽光発電パネルごとにパネル内の温度情報を取得する。これは画素ごとに行ってもよく、複数画素を一単位として、画素群単位ごとの平均値を温度情報としてもよい。

【0127】

（Ｓ０４４）
制御部Ｃは、赤外線画像から障害パネルを温度の差とパターンにより、検出する。

【0128】

（Ｓ０４５）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0129】

［効果］
本実施形態によれば、赤外線画像の撮像対象の異常判定のミスが低減される。その理由の１つとして赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を異常判定に用いる情報から除外していることが挙げられる。例えば、太陽光発電施設においては、１つの太陽光発電パネル群と他の太陽光発電パネル群との間に、発電機器（パワーコントローラーやケーブル）、アスファルト舗装、水、植物等、太陽光発電パネルとは全く異なる温度情報を呈する物が存在している。赤外線画像全体で温度異常の検出を行うと、そのようなノイズが多数含まれる可能性があり、異常判定に支障をきたすおそれがある。本実施形態によれば、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズが含まれる可能性を低減可能である。さらに、また太陽光発電パネルの配置位置によって、例えば影により太陽光発電パネル配列の右上隅と左下隅で温度情報の平均値が異なってくる場合もあり、その点においても異常判定のミスを低減可能である。

【0130】

［変形例］
第４実施形態の変形例にかかる判定対象検出システム４００について図１２および図１３を参照して説明する。以下の説明において、第４実施形態と重複する説明は割愛する。

【0131】

（概要）
第４実施形態と同様に、本変形例においても赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を異常判定に用いる情報から除外する処理を行う。すなわち、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズ（アスファルト舗装、水、植物、発電機器（パワーコントローラー、ケーブル）等）が含まれる可能性を低減する。さらに太陽光発電パネル配列による異常判定ミスも低減する。

【0132】

本変形例における判定対象検出システム４００は、例えばＡＩ（ディープラーニング）推論モデルやパターンマッチングによる太陽光発電パネルの検出と、太陽光発電パネルの配列情報とによって、太陽光発電パネルの位置を検出する。

【0133】

（判定対象検出システム４００）
図１２に示すように本変形例の判定対象検出システム４００は、位置情報受信部４１０、画像受信部４２０、特定部４３０、温度情報取得部４４０および制御部Ｃと記憶部Ｓの他、設定部４１０ａを含んで構成される。特定部４３０は第４実施形態と同様に赤外線画像から太陽光発電パネルを検出する。

【0134】

（設定部４１０ａ）
図２Ａ・図２Ｂおよび図３に示すように、太陽光発電パネルのような撮像対象は、設置現場ごとに特有の配列が決められている場合がある。あるいは、撮像対象特有の配列の傾向がある場合がある。いずれの場合であっても、その配列の態様や状態を示す配列情報あらかじめ設定しておくことにより、赤外線画像から検出した撮像対象の位置について、その配列情報を利用して、特定ミスを低減することが可能である。例えば、当該配列情報と、赤外線画像において撮像対象が示す赤外線情報（あるいは温度情報）とに基づき、赤外線画像から太陽光発電パネルを検出することが可能である。この例であれば、図３のように、縦方向に４つのパネル群が横に７列、横方向に７つのパネル群の縦に４行の、２次元配列された太陽光発電パネルのブロックが１以上、赤外線画像に含まれている。ユーザーが図示しない入力部により赤外線画像の配列情報を入力すると、設定部４１０ａは、その配列情報を記憶部Ｓに記憶させる。太陽光発電パネルの場合、パネル（例：シリコン）と外縁のフレーム（例：アルミ）とで画像において呈する温度情報が異なるため、赤外線情報等によりフレームを検出して１つ１つのパネルを識別することが検出の一例である。ただし、本変形例においては、配列情報をユーザーが入力する構成に限られない。例えば配列数を動的に導出することも可能である。この場合、導出した配列数を利用して特定ミスを低減する構成となる。

【0135】

なお他の例としてディープラーニングにおいて上記教師データ群に加え、マルチモーダル学習という形でこの配列情報を利用することも可能である。

【0136】

特定部４３０は、第１実施形態と同様に赤外線画像から太陽光発電パネルを検出し、さらに記憶部Ｓにおける配列情報を利用し、太陽光発電パネルを特定する。第１の例を挙げる。配列情報として図３のように４行、７列の太陽光発電パネル群があると設定されているときに、太陽光発電パネルがこの配列情報と異なる態様で太陽光発電パネルを検出する場合があり得る。例えば縦４行の設定であるのに、縦４行未満であったり、４行を超えた数を検出した場合や、横７列であるのに横７列未満であったり、７列を超えた数を検出する場合である。この場合、特定部４３０は再度検出をし、配列情報との差異がなくなるまで検出を繰り返してもよい。また、特定部４３０は図示しない表示部にエラーメッセージを出力させるか、あるいは図示しない音声出力部に警告音を出力させる等、任意の方法で検出エラーを報知するように構成されていてもよい。

【0137】

次に第２の例を挙げる。配列情報として図３のようにマトリクス状の太陽光発電パネル群がある場合、そのパネル群の外縁の輪郭形状は例えば長方形となる。したがって、特定部４３０は太陽光発電パネルを検出した後、配列情報に基づき、さらに太陽光発電パネル群の外縁を特定する。さらに特定部１３０はその外縁から外れた位置において検出された太陽光発電パネルを検出エラーとして特定する。検出エラーがあった場合の、特定部４３０の処理は、第１の例と同様である。

【0138】

なお、検出エラーの判定の後における判定対象検出システム４００のとり得る処理の他の例については、第１０実施形態の説明の後に詳述する（変形例１以降）。

【0139】

［動作］
図１３は、本変形例における処理の流れを示す図である。以下に、図１３を参照しつつ、判定対象検出システム４００の処理の流れを、ステップ番号（Ｓ０４１ａ～Ｓ０４５ａ）に添って説明する。

【0140】

（Ｓ０４１ａ）
判定対象検出システム４００における位置情報受信部４１０は、飛行体Ｄから位置情報を受ける。また画像受信部４２０は可視光画像および赤外線画像を受ける。

【0141】

（Ｓ０４２ａ）
特定部４３０は、赤外線画像において太陽光発電パネルを特定する。

【0142】

（Ｓ０１３ａ）
特定部４３０は、設定部４１０ａにおいて設定された配列情報に基づき、Ｓ０４２ａで特定した複数の太陽光発電パネルについて、検出エラーがあるか判定する。検出エラーがあった場合（S０４３ａ；Ｙｅｓ）、検出エラーがなくなるまで検出を繰り返す。なお、これに限らず検出エラーをユーザーに報知して太陽光発電パネルの検査を終了する構成であってもよい。

【0143】

（Ｓ０４４ａ）
温度情報取得部４４０は、S０４３ａの判定により検出エラーがない、またはなくなった場合（S０４３ａ；Ｎｏ）、特定部４３０により特定された赤外線画像における太陽光発電パネルごとにパネル内の温度情報を取得する。これは画素ごとに行ってもよく、複数画素を一単位として、画素群単位ごとの平均値を温度情報としてもよい。

【0144】

（Ｓ０４５ａ）
制御部Ｃは、赤外線画像から障害パネルを温度の差とパターンにより、検出する。

【0145】

（Ｓ０４６ａ）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0146】

［効果］
本実施形態によれば、赤外線画像の撮像対象の異常判定のミスが低減される。その理由の１つとして赤外線画像内の撮像対象と、それ以外のものを識別し、撮影対象以外の温度情報を異常判定に用いる情報から除外していることが挙げられる。例えば、太陽光発電施設においては、１つの太陽光発電パネル群と他の太陽光発電パネル群との間に、発電機器（パワーコントローラーやケーブル）、アスファルト舗装、水、植物等、太陽光発電パネルとは全く異なる温度情報を呈する物が存在している。赤外線画像全体で温度異常の検出を行うと、そのようなノイズが多数含まれる可能性があり、異常判定に支障をきたすおそれがある。本実施形態によれば、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズが含まれる可能性を低減可能である。さらに、また太陽光発電パネルの配置位置によって、例えば影により太陽光発電パネル配列の右上隅と左下隅で温度情報の平均値が異なってくる場合もあり、その点においても異常判定のミスを低減可能である。

【0147】

さらに、本実施形態によれば太陽光発電パネルの検出エラーを配列情報に基づいて判定するので、太陽光発電パネルの障害の検知ミスを低減可能である。

【0148】

［第５実施形態］
第５実施形態にかかる判定対象検出システム５００について図１４～図１６を参照して説明する。以下の説明において、第４実施形態と重複する説明は割愛する。

【0149】

（概要）
第４実施形態と同様に、第５実施形態においても赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を、異常判定（障害パネル判定）に用いる情報から除外する処理を行う。すなわち、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズ（アスファルト舗装、水、植物、発電機器（パワーコントローラー、ケーブル）等）が含まれる可能性を低減する。さらに太陽光発電パネル配列による異常判定ミスも低減する。

【0150】

第５実施形態はさらに、第４実施形態での太陽光発電パネル等の撮像対象の検出処理をするため、画像の傾き補正を実行する。第４実施形態の一例では、ディープラーニング技術を用いた推論モデル、パターンマッチング等の推論技術を利用して撮像対象の物体的特徴に基づく物体検知を行っている。これは太陽光発電パネルの場合、例えばその形態的特徴（外縁が矩形等）に基づき、撮像対象の領域を推論するものである。しかし、撮影対象物に対し撮像方向が傾いている場合、図１５の左側図に示すように矩形領域を推論しても、検出した矩形領域内に、隣接する他の撮像対象や、撮像対象でない他の物が含まれてしまうおそれがある。そのため、第５実施形態においては、複数の撮像対象それぞれにおける所定位置を特定し、その各位置の位置関係から画像の傾きを算出する。さらに算出した傾きを補正することにより、撮像対象の検出ミスの低減を図る。

【0151】

（判定対象検出システム５００）
図１４に示すように第５実施形態の判定対象検出システム５００は、位置情報受信部５１０、画像受信部５２０、特定部５３０、温度情報取得部５４０および制御部Ｃと記憶部Ｓの他、第１の補正部５１０ａを含んで構成される。特定部５３０は第１実施形態と同様に赤外線画像から太陽光発電パネルを検出する。

【0152】

（第１の補正部５１０ａ）
第１実施形態と同様に赤外線画像から撮像対象、例えば太陽光発電パネルが特定される。第１の補正部５１０ａは、特定された複数の太陽光発電パネルの所定位置をさらに特定する。例えば図１５の左側の図に示すように特定した各撮像対象の領域における左上隅の位置（画像内の座標、以下「特定位置」とする）を特定する。次に第１の補正部５１０ａは、最小二乗法により、特定位置それぞれとの距離が最小となる回帰直線を算出する。

【0153】

次に第１の補正部５１０ａは、赤外線画像に対するこの回帰直線の傾きを算出する。また第１の補正部５１０ａはこの傾きがなくなるように画像を回転する補正をする。特定部５３０は、回転補正後において再度撮像対象の特定処理を実行する。なお、第１の補正部５１０ａは、傾きが所定範囲（例えば±５°）以下であれば補正処理を実行しないように構成されていてもよい。

【0154】

また、第１の補正部５１０ａは、傾きが所定範囲（例えば±５°）以上である場合、当該画像を撮像エラーとして判定してもよい。エラー判定の結果、当該画像をパネル異常判定（障害パネル判定）の対象から除外する処理を実行してもよい。なお、当該画像を異常判定の対象から除外した場合であっても、次のような方法により対処可能である。例えば赤外線画像には方位情報および位置情報の少なくとも一方が対応づけられている。したがって、その除外した画像に対応付けられた撮像対象群は特定可能である。すなわち再度当該位置を空撮して画像を取得し直すことも可能である。またその部分のみユーザーが直接検査を行うことも可能である。

【0155】

また、画像を異常判定の対象から除外した場合の他の対処方法を挙げる。飛行体による空撮では、そのときの環境（風や気圧およびその他の要因）の影響を受け、制御しようとした撮像方向と実際の撮像方向との間にずれが生じる場合がある。この問題を解消するため、１つの撮像対象についての空撮を複数回行うように、すなわちオーバーラップ撮影するように飛行体Ｄを制御してもよい。判定対象検出システム５００では、そのオーバーラップ撮影に対応して、１つの撮像対象につき２以上の画像を取得する構成とすることが可能である。このような構成であれば、傾きの程度に応じてある１つの画像を除外しても、他の画像で補完することが可能である。すなわち他の画像において傾きが所定範囲内であれば、その画像において異常（障害パネル）判定を行うことが可能である。傾きが大きい場合、画像ブレ、つぶれ（解像度の低下等）等、傾きだけでない他の問題も発生していることが想定される。よって、上記第１の補正部５１０ａによる傾きの判定は、他の要因による異常判定ミスの低減も併せて実行しうるものである。

【0156】

上記の他の例におけるオーバーラップ撮影の重複の程度は例えば１０％～９５％の範囲のいずれかである。また空撮の時間的間隔が短い場合、空撮環境（強風等）の影響が変化せず、除外すると判定された画像の直後の画像も傾きの許容範囲を超える可能性がある。さらにオーバーラップ範囲が広すぎると、空撮時間の増大、およびシステム上の処理時間、処理負担の増大を招く可能性がある。これらを考慮してオーバーラップ撮影の重複の程度を例えば９０％以下としてもよい。

【0157】

これに対しオーバーラップの範囲が狭すぎると１つの画像を除外した場合に障害パネルの判定対象に含まれないものが出てくる可能性がある。これを考慮して重複の程度を５０％以上としてもよい。

【0158】

また撮影現場の上空の風速を利用して適切なオーバーラップの程度を算出し、算出結果に応じて都度設定される構成であってもよい。またオーバーラップの程度によっては、傾きが大きく除外された画像の直後の画像について、傾きの判定を経ずに除外する構成であってもよい。

【0159】

［動作］
図１６は、本実施形態における処理の流れを示す図である。以下に、図１６を参照しつつ、判定対象検出システム５００の処理の流れを、ステップ番号（Ｓ０５１～Ｓ０５６）に添って説明する。

【0160】

（Ｓ０５１）
判定対象検出システム５００における位置情報受信部５１０は、飛行体Ｄから位置情報を受ける。また画像受信部５２０は可視光画像および赤外線画像を受ける。

【0161】

（Ｓ０５２）
特定部５３０は、赤外線画像において太陽光発電パネルを特定する。

【0162】

（Ｓ０５３）
第１の補正部５１０ａは、複数の撮像対象それぞれにおける所定位置を特定し、その各位置の位置関係から最小二乗法に基づく回帰直線を算出する。また第１の補正部５１０ａは回帰直線の画像に対する傾きを算出する。さらに第１の補正部５１０ａは、算出した傾きを補正する。特定部５３０は、再度太陽光発電パネルを特定する。

【0163】

（Ｓ０５４）
温度情報取得部５４０は、特定部５３０により特定された赤外線画像における太陽光発電パネルごとにパネル内の温度情報を取得する。これは画素ごとに行ってもよく、複数画素を一単位として、画素群単位ごとの平均値を温度情報としてもよい。

【0164】

（Ｓ０５５）
制御部Ｃは、赤外線画像から、パネルごと（所定数パネル群ごと）に障害パネルを温度の差とパターンにより、検出する。

【0165】

（Ｓ０５６）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0166】

［効果］
本実施形態によれば、赤外線画像の撮像対象の異常判定（障害パネル判定）のミスが低減される。その理由の１つとして赤外線画像内の撮像対象と、それ以外のものを識別し、撮影対象以外の温度情報を異常判定に用いる情報から除外していることが挙げられる。例えば、太陽光発電施設においては、１つの太陽光発電パネル群と他の太陽光発電パネル群との間に、発電機器（パワーコントローラーやケーブル）、アスファルト舗装、水、植物等、太陽光発電パネルとは全く異なる温度情報を呈する物が存在している。赤外線画像全体で温度異常の検出を行うと、そのようなノイズが多数含まれる可能性があり、異常判定に支障をきたすおそれがある。本実施形態によれば、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズが含まれる可能性を低減可能である。さらに、太陽光発電パネルの配置位置によって、影により直射日光を受ける位置とそうでない位置ができ、例えば太陽光発電パネル配列の右上隅と左下隅で温度情報の平均値が異なってくる場合もある。その点においても本実施形態では異常判定のミスを低減可能である。

【0167】

さらに、本実施形態によれば一度検出した太陽光発電パネルの検出エラーの要因となり得る傾きを補正するので、太陽光発電パネルの障害の検知ミスを低減可能である。

【0168】

［第６実施形態］
第６実施形態にかかる判定対象検出システム６００について図１７～図１９を参照して説明する。以下の説明において、第４実施形態と重複する説明は割愛する。

【0169】

（概要）
第様に、第６実施形態においても赤外線画像内の撮像対象と、それ以外のものを識別し、撮影対象以外の温度情報を異常判定（障害パネル判定）に用いる情報から除外する処理を行う。すなわち、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズ（アスファルト舗装、水、植物、発電機器（パワーコントローラー、ケーブル）等）が含まれる可能性を低減する。さらに太陽光発電パネル配列による異常判定ミスも低減する。

【0170】

第６実施形態の判定対象検出システム６００はさらに、第４実施形態での太陽光発電パネル等の撮像対象の検出処理のミスを低減するため、撮像対象を検出した後、撮像対象の検出サイズのずれがあるか判定を行う。

【0171】

第４実施形態の一例では、ディープラーニング技術を用いた推論モデル、パターンマッチング等の推論技術を利用して撮像対象の物体的特徴に基づく物体検知を行っている。これは太陽光発電パネルの場合、例えばその形態的特徴（外縁が矩形等）という特徴に基づき、撮像対象の領域を推論するものである。しかし、赤外線画像において撮影対象の外縁は明確に描画されない場合がある。結果、矩形領域を推論しても、図１８に示すように検出した矩形領域に隣接する他の撮像対象や、または撮像対象でない他の物が含まれてしまうおそれがある。そのため、第６実施形態においては、複数の撮像対象それぞれにおけるサイズを算出し、その算出したサイズに基づき検出エラーの判定を行う。これにより、撮像対象の検出ミスの低減を図る。

【0172】

すなわち、撮像対象の種類によっては、サイズが画一的になっている場合がある（太陽光発電パネル等）。したがって、そのサイズが画一的であることを利用して、各撮像対象のうちサイズが大きく検出されたもの（例：図１８のＬ６）および小さく検出されたものがあれば、判定対象検出システム６００がサイズのばらつきとして算出し、結果として誤検出があったか判定を行う。

【0173】

例えば太陽光発電パネルの場合は、同一の発電所内において、施工上の理由や運用上の理由等により、その受光面、太陽光照射面等の面積や形状が概ね等しく形成されるように構成されている。なお施工上の理由とは、土地活用や太陽光の照射面等を考慮したものであり、運用上の理由とは状態監視や故障時の交換等を考慮したものである。

【0174】

したがって、縦方向の長さ、横方向の長さ、外周、面積、対角線の長さ等は各パネルで大きく差が出ないように形成されている。この前提によれば、赤外線画像から、サイズが明らかに異なる太陽光発電パネルが検出された場合、検出ミスである可能性がある。この検出ミスは判定対象検出システムにおける温度情報の異常判定結果に支障をきたすため、判定対象検出システム６００は、サイズが異なる撮像対象があった場合に検出エラーと判定することができる構成を有する。なお、他の撮像対象であっても、撮像対象特有の所定の規則性から外れるものが検出された場合、検出エラーとして判定することができ、このように撮像対象が太陽光発電パネルでないものでもこの実施形態の一例に含まれる。

【0175】

（判定対象検出システム６００）
図１７に示すように第６実施形態の判定対象検出システム６００は、位置情報受信部６１０、画像受信部６２０、特定部６３０、温度情報取得部６４０および制御部Ｃと記憶部Ｓの他、第１の判定部６１０ａを含んで構成される。特定部６３０は第１実施形態と同様に赤外線画像から太陽光発電パネルを検出する。

【0176】

（第１の判定部６１０ａ）
第１実施形態と同様に赤外線画像から撮像対象、例えば太陽光発電パネルが特定される。第１の判定部６１０ａは、特定された複数の太陽光発電パネルにおける所定位置をさらに特定する。例えば図１８に示すように特定した各撮像対象の領域における上端縁のいずれかの位置（画像内のＹ座標、以下「特定位置」とする）を特定する。次に第１の判定部６１０ａは、赤外線画像における画像上の座標におけるＹ軸方向の長さを算出する。

【0177】

この撮像対象のＹ軸方向の長さとは、Ｘ軸方向の中央位置で求めてもよいし、Ｘ軸方向の一端側あるいは他端側でもよい。すなわち各撮像対象におけるＸ軸方向の所定位置におけるＹ軸方向の長さを算出する。例えば第１の判定部６１０ａは上端（画像における上端）位置の座標と下端の座標の差をＹ軸方向の長さとして求める。また各撮像対象において、Ｙ軸方向の長さを複数（所定数）算出して平均をとってもよい。この場合、所定数とは最大で、画像におけるＸ軸方向の画素数の数に相当する分だけ算出することになる。

【0178】

次に第１の判定部６１０ａは、算出した特徴量または特徴量に基づいて算定された数値と、判定値とを対比する。上記の例においては撮像対象のサイズそのものを示す数値、または当該サイズに基づいて算定された数値と、判定値とを対比する。一例を次に説明する。

【0179】

第１の判定部６１０ａは、上記のようにして太陽光発電パネルそれぞれのＹ軸方向の長さを算出した後、複数の太陽光発電パネルにおける当該長さの分散値を算出する。分散値の算出は例えば次式による。

第１の判定部６１０ａは、各検出領域の長さの値から平均値を引いて、個々の長さと平均値の距離（偏差）を求める。また、第１の判定部６１０ａは偏差の二乗平均により分散を求める。その分散値が大きいほど、平均値からの各検出領域の長さの散らばりが大きいということになる。

【0180】

【数4】

また第１の判定部６１０ａは、この分散値と判定値とを対比し、これらが所定の関係にある場合、検出エラーとして判定する。例えば、赤外線画像の１画像に含まれる全ての太陽光発電パネルの長さの分散値を算出し、その分散値と判定値を対比（例：差分を算出）する。この場合、分散値と判定値との差が所定範囲内でなければ第１の判定部６１０ａは、検出エラーと判定するようにしてもよい。つまり、上記長さが長すぎるパネルが検出された場合も、短すぎるパネルが検出された場合のいずれもエラーとして判定されるようになっているということである。

【0181】

なお、Ｙ軸方向における長さでなく、Ｘ軸方向の長さ、検出した撮像対象の面積を判定に利用することも可能である。太陽光発電パネルを配列した太陽光発電施設においては、その発電効率を考慮して太陽光発電パネルを南向きに配置する傾向がある。この場合、発電機器（パワーコントローラー、ケーブル）は、太陽光発電パネル群に対する南北側に配置されないことが多い。同様に樹木等の植物も南北方向に隣接するものは極力除外されることが想定される。つまり、受光面に陰ができないように配慮されるということである。したがって、南北、すなわち赤外線画像におけるＹ軸方向において、温度のばらつきが抑制されていることになる。以上から、太陽光発電パネルの温度情報を示す赤外線画像においては、Ｙ軸方向における撮像対象の端縁が精度よく検出しやすい。本実施形態はサイズのばらつきが大きいことによって、撮像対象の検出の適否を判定する構成であるため、Ｙ軸方向における長さを利用する例について説明した。矩形の太陽光発電パネルでない他の撮像対象であれば、撮像対象自体、または配置場所の特性に応じて撮像対象におけるどのサイズを利用するか設定すればよい。

【0182】

また、第１の判定部６１０ａは、撮像画像における標本平均でなく発電所全体における母平均から分散を求めるように構成されていてもよい。その他に、第１の判定部６１０ａは、分散でなく標準偏差を求めるように構成されていてもよい。その場合、判定値は標準偏差に対応した判定値となる。また第１の判定部６１０ａは、平均値を判定値と対比するように構成されていてもよい。その場合、判定値は平均値に対応した判定値となる。また第１の判定部６１０ａは、各撮像対象のサイズ(例えばＹ軸方向の長さ)そのものと、判定値を対比し、検出エラーの判定をする構成であってもよい。

【0183】

一例として第１の判定部６１０ａは、検出エラーの判定をした場合、対象とした画像を温度異常の判定対象（障害パネル判定の対象）から除外する。他の例として、第１の判定部６１０ａは検出エラーの判定をした場合、サイズのばらつきが大きい撮像対象のみを除外して温度異常の判定を行うように構成されていてもよい。サイズのばらつきの大きさは、例えば１つの撮像対象におけるＹ軸方向の長さの算出値と、各撮像対象の長さ平均値との差が所定範囲内であるかにより判定可能である。また標準偏差や分散によって、各撮像対象のサイズのばらつきの大きさが許容範囲内であるか判定することも可能である。

【0184】

［動作］
図１９は、本実施形態における処理の流れを示す図である。以下に、図１９を参照しつつ、判定対象検出システム６００の処理の流れを、ステップ番号（Ｓ０６１～Ｓ０６７－２）に添って説明する。

【0185】

（Ｓ０６１）
判定対象検出システム６００における位置情報受信部６１０は、飛行体Ｄから位置情報を受ける。また画像受信部６２０は可視光画像および赤外線画像を受ける。

【0186】

（Ｓ０６２）
特定部６３０は、赤外線画像において太陽光発電パネルを特定する。

【0187】

（Ｓ０６３）
第１の判定部６１０ａは、複数の撮像対象それぞれにおける所定のサイズ（例えばＹ軸方向の長さ）を求める。また第１の判定部６１０ａは、撮像対象のサイズのばらつきを求める。

【0188】

（Ｓ０６４）
第１の判定部６１０ａは、判定値に基づき、Ｓ０６３で求めたサイズのばらつきの大きさを判定する。ばらつきが大きいと判定された場合、Ｓ０６５に進む。ばらつきが大きくないと判定された場合、Ｓ０６５－２に進む。

【0189】

（Ｓ０６５）
Ｓ０６４においてサイズのばらつきが大きいと判定された画像があった場合（Ｓ０６４；Ｙｅｓ）、第１の判定部６１０ａは検出エラーと判定する。さらにその場合、ばらつきが大きいと判定された対象を含む画像を、温度異常の判定対象から除外する。他の例として、第１の判定部６１０ａは、サイズのばらつきが大きい撮像対象のみを除外して、Ｓ０６６の温度異常の判定の対象に当該画像を含めてもよい。温度情報取得部６４０は、除外されていない撮像対象それぞれについて温度情報を取得する。

【0190】

（Ｓ０６６）
制御部Ｃは、除外した画像以外の赤外線画像（または検出エラーの撮像対象以外の検出領域）に基づき、パネルごと（所定数パネル群ごと）に障害パネルを温度の差とパターンにより、検出する。

【0191】

（Ｓ０６７）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0192】

（Ｓ０６５－２）
Ｓ０６４において全ての画像においてサイズのばらつきが大きくない(例えば所定範囲内である)と判定された場合（Ｓ０６４；Ｎｏ）、第１の判定部６１０ａは検出エラーが無いものと判定する。またこの場合、Ｓ０６４において検出の適否の判定対象とした画像を全て温度異常の判定対象として含める。温度情報取得部６４０は、撮像対象それぞれについて温度情報を取得する。

【0193】

（Ｓ０６６－２）
制御部Ｃは、第１の判定部６１０ａにより温度異常の判定対象とした全ての赤外線画像（判定した全ての検出領域）に基づき、パネルごと（所定数パネル群ごと）に障害パネルを温度の差とパターンにより、検出する。

【0194】

（Ｓ０６７－２）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0195】

［効果］
本実施形態によれば、赤外線画像の撮像対象の異常判定（障害パネル判定）のミスが低減される。その理由の１つとして赤外線画像内の撮像対象と、それ以外のものを識別し、撮影対象以外の温度情報を異常判定に用いる情報から除外していることが挙げられる。例えば、太陽光発電施設においては、１つの太陽光発電パネル群と他の太陽光発電パネル群との間に、発電機器（パワーコントローラーやケーブル）、アスファルト舗装、水、植物等、太陽光発電パネルとは全く異なる温度情報を呈する物が存在している。赤外線画像全体で温度異常の検出を行うと、そのようなノイズが多数含まれる可能性があり、異常判定に支障をきたすおそれがある。本実施形態によれば、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズが含まれる可能性を低減可能である。さらに、また太陽光発電パネルの配置位置によって、例えば影により太陽光発電パネル配列の右上隅と左下隅で温度情報の平均値が異なってくる場合もあり、その点においても異常判定のミスを低減可能である。

【0196】

さらに、本実施形態によれば撮像対象の検出ミスをサイズのばらつきに基づき判定し、ばらつきが大きい場合には、適宜当該画像またはエラーと判定された撮像対象を、温度の異常判定対象から除外する。したがって、障害パネルの特定ミスを低減可能である。

【0197】

［第７実施形態］
第７実施形態にかかる判定対象検出システム７００について図２０～図２２を参照して説明する。以下の説明において、第７実施形態と重複する説明は割愛する。

【0198】

（概要）
第４実施形態と同様に、第７実施形態においても赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を異常判定（障害パネル判定）に用いる情報から除外する処理を行う。すなわち、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズ（アスファルト舗装、水、植物、発電機器（パワーコントローラー、ケーブル）等）が含まれる可能性を低減する。さらに太陽光発電パネル配列による異常判定ミスも低減する。

【0199】

第７実施形態の判定対象検出システム７００はさらに、第４実施形態での太陽光発電パネル等の撮像対象の検出処理のミスを低減するため、撮像対象を検出した後、撮像対象の整列位置のずれがあるか判定を行う。例えば撮像対象の外縁の境界部分または各撮像対象の領域の検出において誤検出があるか判定を行う。第４実施形態の一例では、ディープラーニング技術を用いた推論モデル、パターンマッチング等の推論技術を利用して撮像対象の物体的特徴に基づく物体検知を行っている。これは太陽光発電パネルの場合であれば例えばその形態的特徴（外縁が矩形等）に基づき、撮像対象の領域を推論するものである。しかし、赤外線画像において撮影対象の外縁は明確に描画されない場合がある。例えば図２１に示すように、矩形領域を推論しても、検出した矩形領域が実際の撮像対象の位置とずれること、あるいはこの検出領域が実際の撮像対象の領域の範囲から部分的に突出（Ｘ軸方向やＹ軸方向等；図１８参照）することがある。そのため、第７実施形態においては、撮像対象特有の所定の配列の規則性を利用し、規則性からずれたものがあるかについて判定する。例えば画像から特定した複数の撮像対象それぞれにおける所定位置をさらに特定し、その特定した位置の、配列規則からのずれ量を算出する。ずれ量が大きければ、検出エラーの判定を行う。これにより、撮像対象の検出ミスの低減を図る。

【0200】

例えば太陽光発電パネルの場合は、その受光面、太陽光照射面等の面積や形状（矩形等）が概ね等しく形成され、なおかつそれらが規則的に行列方向に、二次元的に配列される傾向がある。したがって、複数の太陽光発電パネルそれぞれの外縁は、行方向にも列方向にも整列されていることが想定される。

【0201】

この前提を利用して、赤外線画像から、Ｙ軸方向における両端縁、Ｘ軸方向における両端縁、角部、受光面の中心位置等の特徴位置が、所定の方向において整列しているか、ずれているかを判定することで検出エラーを判定することが可能である。なお、所定の方向とは例えば、Ｙ軸方向もしくはＸ軸方向、または、Ｙ軸方向およびＸ軸方向に対して所定角度傾斜した方向である。

【0202】

なお、他の撮像対象であっても、撮像対象特有の所定の規則性、例えば同心円状に配列される場合や、規則的な波形状に配列される場合において、その配列形状から外れるものが検出された場合、検出エラーとして判定することができ、このように撮像対象が太陽光発電パネルでないものでもこの実施形態の一例に含まれる。

【0203】

（判定対象検出システム７００）
図２０に示すように第７実施形態の判定対象検出システム７００は、位置情報受信部７１０、画像受信部７２０、特定部７３０、温度情報取得部７４０および制御部Ｃと記憶部Ｓの他、第２の判定部７１０ａを含んで構成される。特定部７３０は第４施形態と同様に赤外線画像から太陽光発電パネルを検出する。

【0204】

（第２の判定部７１０ａ）
第１実施形態と同様に赤外線画像から撮像対象、例えば太陽光発電パネルが特定される。第２の判定部７１０ａは、特定された複数の太陽光発電パネルにおける所定位置をさらに特定する。例えば図２１に示すように第２の判定部７１０ａは、特定部７３０により特定された各撮像対象の領域における上端縁のいずれかの位置（画像内のＹ座標、以下「Ｙｍｉｎ」または「Ｙｍｉｎ_ｎ」とする）を特定する。次に第２の判定部７１０ａは、当該領域における下端縁のいずれかの位置（画像内のＹ座標、以下「Ｙｍａｘ」または「Ｙｍａｘ_ｎ」とする）を特定する。

【0205】

次に第２の判定部７１０ａは特定した各撮像対象のＹｍｉｎ_ｉのばらつきと、Ｙｍａｘ_ｉのばらつきとを求める。これらの和を整列分散とする。分散値の算出は例えば次式による。

【0206】

【数5】

上記に限らず、第２の判定部７１０ａは特定した行方向に対し、整列後の次行である各撮像対象Ｙ´ｍｉｎ_ｎのばらつきと、Ｙ´ｍａｘ_ｎのばらつきとを求めてもよい（Ｙ´ｍｉｎ_ｎおよびＹ´ｍａｘ_ｎについては図２１参照）。この分散値の算出は例えば次式による。

【0207】

【数6】

また第２の判定部７１０ａは、この分散値と判定値とを対比し、これらが所定の関係にある場合、検出エラーとして判定する。例えば、所定の配列方向（行方向等）に含まれる全ての太陽光発電パネルのＹ座標の分散値を算出し、その分散値と判定値を対比（例：差分を算出）する。この場合、分散値と判定値との差が所定範囲内でなければ第２の判定部７１０ａは、検出エラーと判定するようにしてもよい。つまり、上記Ｙｍｉｎ₁～Ｙｍｉｎ_ｎ（上端縁）、Ｙｍａｘ_１～Ｙｍａｘ_ｎ（下端縁）のうち、整列位置が許容範囲を超えているパネルが検出されたとき、エラーとして判定されるようになっている。

【0208】

なお、Ｙ座標でなく、Ｘ座標を判定に利用することも可能である。本実施形態でＹ座標を利用した整列位置のばらつきの例を説明している理由は、第６実施形態で説明したように、太陽光発電パネルの温度情報を示す赤外線画像においては、南北方向における撮像対象の端縁（上端／下端,Ｙ座標）が精度よく検出しやすいためである。ただし矩形の太陽光発電パネルでない他の撮像対象であれば、撮像対象自体、または配置場所の特性に応じて撮像対象におけるどの位置（特徴位置（特定しやすい位置））を利用するか設定すればよい。

【0209】

また、第２の判定部７１０ａは、分散でなく標準偏差を求めるように構成されていてもよい。その場合、判定値は標準偏差に対応した判定値となる。

【0210】

一例として第２の判定部７１０ａは、検出エラーの判定をした場合、対象とした画像を温度異常の判定対象から除外する。他の例として、第２の判定部７１０ａは検出エラーの判定をした場合、配列規則からのずれ量のばらつきが大きい撮像対象のみを除外して温度異常の判定を行うように構成されていてもよい。配列規則からのずれ量のばらつきの大きさは、例えば１つの撮像対象におけるＹ座標値と、各撮像対象のＹ座標の平均値との差が所定範囲内であるかにより判定可能である。また標準偏差や分散によって、各撮像対象における配列規則からのずれ量のばらつきの大きさが許容範囲内であるか判定することも可能である。

【0211】

［動作］
図２２は、本実施形態における処理の流れを示す図である。以下に、図２２を参照しつつ、判定対象検出システム７００の処理の流れを、ステップ番号（Ｓ０７１～Ｓ０７７－２）に添って説明する。

【0212】

（Ｓ０７１）
判定対象検出システム７００における位置情報受信部７１０は、飛行体Ｄから位置情報を受ける。また画像受信部７２０は可視光画像および赤外線画像を受ける。

【0213】

（Ｓ０７２）
特定部７３０は、赤外線画像において太陽光発電パネルを特定する。

【0214】

（Ｓ０７３）
第２の判定部７１０ａは、複数の撮像対象それぞれにおける上端縁と下端縁のＹ座標を特定する。また第２の判定部７１０ａは、複数の撮像対象のこれらＹ座標のばらつきを求める。

【0215】

（Ｓ０７４）
第２の判定部７１０ａは、判定値に基づき、Ｓ０７３で求めたＹ座標のばらつきの大きさを判定する。ばらつきが大きいと判定された場合、Ｓ０７５に進む。ばらつきが大きくないと判定された場合、Ｓ０７５－２に進む。

【0216】

（Ｓ０７５）
Ｓ０７４においてＹ座標のばらつき（例：整列分散）が大きいと判定された画像があった場合（Ｓ０７４；Ｙｅｓ）、第２の判定部７１０ａは検出エラーと判定する。さらにその場合、ばらつきが大きいと判定された対象の画像を、温度異常の判定対象から除外する。他の例として、第２の判定部７１０ａは、Ｙ座標のばらつきが大きい撮像対象のみを除外して、Ｓ０７６の温度異常の判定の対象に当該画像を含めてもよい。温度情報取得部７４０は、除外されていない撮像対象それぞれについて温度情報を取得する。

【0217】

（Ｓ０７６）
制御部Ｃは、除外した画像以外の赤外線画像（または検出エラーの撮像対象以外の検出領域）に基づき、パネルごと（所定数パネル群ごと）に障害パネルを温度の差とパターンにより、検出する。

【0218】

（Ｓ０７７）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0219】

（Ｓ０７５－２）
Ｓ０７４において全ての画像においてＹ座標のばらつきが大きくない(例えば所定範囲内である)と判定された場合（Ｓ０７４；Ｎｏ）、第２の判定部７１０ａは検出エラーが無いものと判定する。またこの場合、Ｓ０７４において検出の適否の判定対象とした画像を全て温度異常の判定対象として含める。温度情報取得部７４０は、撮像対象それぞれについて温度情報を取得する。

【0220】

（Ｓ０７６－２）
制御部Ｃは、第２の判定部７１０ａにより温度異常の判定対象とした全ての赤外線画像（判定した全ての検出領域）に基づき、パネルごと（所定数パネル群ごと）に障害パネルを温度の差とパターンにより、検出する。

【0221】

（Ｓ０７７－２）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0222】

［効果］
本実施形態によれば、赤外線画像の撮像対象の異常判定（障害パネル判定）のミスが低減される。その理由の１つとして赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を異常判定に用いる情報から除外していることが挙げられる。例えば、太陽光発電施設においては、１つの太陽光発電パネル群と他の太陽光発電パネル群との間に、発電機器（パワーコントローラーやケーブル）、アスファルト舗装、水、植物等、太陽光発電パネルとは全く異なる温度情報を呈する物が存在している。赤外線画像全体で温度異常の検出を行うと、そのようなノイズが多数含まれる可能性があり、異常判定に支障をきたすおそれがある。本実施形態によれば、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズが含まれる可能性を低減可能である。さらに、また太陽光発電パネルの配置位置によって、例えば影により太陽光発電パネル配列の右上隅と左下隅で温度情報の平均値が異なってくる場合もあり、その点においても異常判定のミスを低減可能である。

【0223】

さらに、本実施形態によれば撮像対象の検出ミスを、撮像対象が所定の配列の規則性から外れたずれ量に基づき判定し、ずれ量が大きい場合には、適宜当該画像またはエラーと判定された撮像対象を、温度の異常判定対象から除外する。したがって、障害パネルの特定ミスを低減可能である。

【0224】

［第８実施形態］
第８実施形態にかかる判定対象検出システム８００について図２３～図２５を参照して説明する。以下の説明において、第４実施形態と重複する説明は割愛する。

【0225】

（概要）
第４実施形態と同様に、第８実施形態においても赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を異常判定（障害パネル判定）に用いる情報から除外する処理を行う。すなわち、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズ（アスファルト舗装、水、植物、発電機器（パワーコントローラー、ケーブル）等）が含まれる可能性を低減する。さらに太陽光発電パネル配列による異常判定ミスも低減する。

【0226】

第８実施形態の判定対象検出システム８００はさらに、第４実施形態での太陽光発電パネル等の撮像対象の検出処理のミスを低減するため、撮像対象を検出した後、検出した撮像対象の配列方向にしたがい順次撮像対象の所定位置を特定する。さらに判定対象検出システム８００は、判定対象である撮像対象または撮像対象群と、直前に所定位置を特定した対象との重畳の程度に応じて、検出エラーを判定する。例えば撮像対象の中心位置が、隣接する撮像対象の領域内に位置する場合、検出ノイズとして判定する。さらに検出ノイズとして判定された撮像対象（検出領域）を、障害パネル判定から除外する。

【0227】

（判定対象検出システム８００）
図２３に示すように第８実施形態の判定対象検出システム８００は、位置情報受信部８１０、画像受信部８２０、特定部８３０、温度情報取得部８４０および制御部Ｃと記憶部Ｓの他、第３の判定部８１０ａを含んで構成される。特定部８３０は第１実施形態と同様に赤外線画像から太陽光発電パネルを検出する。

【0228】

（第３の判定部８１０ａ）
第４実施形態と同様に赤外線画像から撮像対象、例えば太陽光発電パネルが特定される。第３の判定部８１０ａは、特定された複数の太陽光発電パネルにおける所定位置をさらに特定する。例えば図２４に示すように第３の判定部８１０ａは、特定部８３０により特定された各撮像対象の領域における左端縁のいずれかの位置（画像内のＸ座標、以下「Ｘｍｉｎ」とする）を特定する。次に第３の判定部８１０ａは、当該領域における右端縁のいずれかの位置（画像内のＸ座標、以下「Ｘｍａｘ」とする）を特定する。さらに第３の判定部８１０ａは、各撮像対象の領域における中心位置（画像内のＸ座標；以下「ＣｅｎｔｅｒＸ」とする。）を特定する。

【0229】

次に第３の判定部８１０ａは、特定した各撮像対象についてＸ軸方向の中心位置ＣｅｎｔｅｒＸが隣接する撮像対象の領域内に含まれるか判定する。例えば図２４に示すようにＣｅｎｔｅｒＸが隣接する領域のＸ軸方向の一端（例えばＸ軸方向における左端位置；「ＰｒｅｖＸｍｉｎ」とする）と、他端（例えばＸ軸方向における右端位置；「ＰｒｅｖＸｍａｘ」とする）との間に位置する場合、第３の判定部８１０ａが、判定対象の領域を、隣接する領域内に含まれると判定するように構成されていてもよい。

【0230】

なお、本実施形態の説明において、判定しようとする撮像対象の領域の中心位置を用いているのは、第６実施形態で説明したように太陽光発電パネルを一例として挙げているためである。すなわち太陽光発電施設においては、Ｘ軸方向の端側にある太陽光発電パネルにおいて陰ができる可能性が全パネルに対して相対的に高くなっている。したがって、相対的にはＹ軸方向よりＸ軸方向の端縁の検出において技術的困難性が高いといえる。よって、例えば判定しようとする撮像対象の領域のＸ軸方向の端縁が「ＰｒｅｖＸｍｉｎ」と「ＰｒｅｖＸｍａｘ」との間に位置するときにエラーと判定するとすれば、エラー判定の確率が高くなり、赤外線画像によってはエラー判定が頻発する可能性がある。したがって、隣接する領域と判定領域の重複の程度が例えば３０％以上であることを指標とすることや、本実施形態のように中心位置を基準とすることにより、エラー判定の頻発を防ぐことができる。

【0231】

このような目的からすれば、本実施形態において、判定しようとする撮像対象の領域の基準位置を中心位置とする構成に限られない。例えば、基準位置は、Ｘ軸方向における対象領域の一端および他端の双方から、対象領域の全長の３０％にあたる長さ以上離れた任意の位置としてもよい。

【0232】

上記のように重複の程度を比率、割合で算定する場合（「３０％以上の重複」等）は、両者の双方に属する面積と、各判定対象領域の面積とを対比する方法が一例である。あるいは「ＰｒｅｖＸｍｉｎ」から判定対象領域の「Ｘｍｉｎ」までの長さと、判定対象領域のＸ軸方向の長さの比率により重複の程度を判定することも可能である。

【0233】

なお、Ｘ軸方向における重畳の程度でなく、Ｙ軸方向を基準とする事も可能である。例えば第６実施形態や第７実施形態と本実施形態とを組み合わせるにあたり、第６実施形態や第７実施形態で、各撮像対象の領域のＸ軸方向のずれや突出を基準とする場合、本実施形態の位置ずれにおいてはＹ軸方向を基準とすることが考えられる。Ｘ軸方向とＹ軸方向の双方で検出エラーを判定することで、より検出エラーによる障害パネル判定の判定ミスを提言することが可能である。

【0234】

一例として第３の判定部８１０ａは、検出エラーの判定をした場合、対象とした画像を温度異常の判定対象（障害パネル判定の対象）から除外する。他の例として、第３の判定部８１０ａは検出エラーの判定をした場合、位置ずれが大きい撮像対象のみを除外して温度異常の判定を行うように構成されていてもよい。位置ずれが大きさの基準は、上記判定基準と同じであってもよく、変更してもよい。

【0235】

［動作］
図２５は、本実施形態における処理の流れを示す図である。以下に、図２５を参照しつつ、判定対象検出システム８００の処理の流れを、ステップ番号（Ｓ０８１～Ｓ０８７－２）に添って説明する。

【0236】

（Ｓ０８１）
判定対象検出システム８００における位置情報受信部８１０は、飛行体Ｄから位置情報を受ける。また画像受信部８２０は可視光画像および赤外線画像を受ける。

【0237】

（Ｓ０８２）
特定部８３０は、赤外線画像において太陽光発電パネルを特定する。

【0238】

（Ｓ０８３）
第３の判定部８１０ａは、複数の撮像対象それぞれにおける所定位置のＸ座標を特定し、それにより隣接する領域との重畳の程度を判定する。例えば第３の判定部８１０ａは、Ｘｍｉｎ_１～Ｘｍｉｎ_ｎと、Ｘｍａｘ_１～Ｘｍａｘ_ｎと、ＣｅｎｔｅｒＸ_１～ＣｅｎｔｅｒＸ_ｎとを特定する。

【0239】

（Ｓ０８４）
次に第３の判定部８１０ａは、判定対象の領域のＣｅｎｔｅｒＸが隣接する撮像対象の領域内に含まれるか判定する。例えば図２４に示すようにＣｅｎｔｅｒＸ_ｎが隣接する領域の「ＰｒｅｖＸｍｉｎ」と、「ＰｒｅｖＸｍａｘ」との間に位置するか判定する。

【0240】

（Ｓ０８５）
Ｓ０８４において判定対象の領域のＣｅｎｔｅｒＸが隣接する撮像対象の領域内に含まれると判定された場合（Ｓ０８４；Ｙｅｓ）、第３の判定部８１０ａはその領域を検出エラーと判定する。さらにその場合、第３の判定部８１０ａは、隣接領域に含まれると判定された対象の画像自体を、温度異常の判定対象（障害パネル判定）から除外する。他の例として、第３の判定部８１０ａは、該当の撮像対象領域のみを除外して、Ｓ０８６の温度異常の判定（障害パネルの判定）の対象に当該画像を含めてもよい。温度情報取得部８４０は、除外されていない撮像対象それぞれについて温度情報を取得する。

【0241】

（Ｓ０８６）
制御部Ｃは、除外した画像以外の赤外線画像（または検出エラーの撮像対象以外の検出領域）に基づき、パネルごと（所定数パネル群ごと）に障害パネルを温度の差とパターンにより、検出する。

【0242】

（Ｓ０８７）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0243】

（Ｓ０８５－２）
Ｓ０８４において全ての画像において判定領域のＣｅｎｔｅｒＸが隣接領域内に含まれないと判定された場合（Ｓ０８４；Ｎｏ）、第３の判定部８１０ａは検出エラーが無いものと判定する。またこの場合、Ｓ０８４において検出の適否の判定対象とした全ての画像（判定した全ての検出領域）を温度異常の判定対象として含める。温度情報取得部８４０は、撮像対象それぞれについて温度情報を取得する。

【0244】

（Ｓ０８６－２）
制御部Ｃは、第３の判定部８１０ａにより温度異常の判定対象とした全ての赤外線画像に基づき、パネルごと（所定数パネル群ごと）障害パネルを温度の差とパターンにより、検出する。

【0245】

（Ｓ０８７－２）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0246】

【0247】

さらに、本実施形態によれば撮像対象の検出ミスを、撮像対象領域と隣接領域との重畳の程度に基づき判定し、重畳の程度が大きい場合には、適宜当該画像またはエラーと判定された撮像対象を、温度の異常判定対象から除外する。したがって、障害パネルの特定ミスを低減可能である。

【0248】

［第９実施形態］
第９実施形態にかかる判定対象検出システム９００について図２６～図２９を参照して説明する。以下の説明において、第４実施形態と重複する説明は割愛する。

【0249】

（概要）
第４実施形態と同様に、第９実施形態においても赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を異常判定（障害パネル判定）に用いる情報から除外する処理を行う。すなわち、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズ（アスファルト舗装、水、植物、発電機器（パワーコントローラー、ケーブル）等）が含まれる可能性を低減する。さらに太陽光発電パネル配列による異常判定ミスも低減する。

【0250】

第９実施形態の判定対象検出システム９００はさらに、第４実施形態での太陽光発電パネル等の撮像対象の検出処理のミスを低減するため、撮像対象を検出した後、検出した撮像対象の配列方向にしたがい順次撮像対象の所定位置を特定する。さらに判定対象検出システム９００は、撮像対象の配列の規則性にしたがって、赤外線画像において特定された複数の撮像対象を１まとめに集合させる（以下、集合体を「クラスター」とする）。また本実施形態においては、所定位置のクラスターに含まれるはずの撮像対象の所定数が記憶されている。判定対象検出システム９００は、１つのクラスターの検出数が所定数を満たすかに基づき、検出エラーを判定する。

【0251】

さらに判定対象検出システム９００は、隣接するクラスター間の距離に基づきさらに検出エラーの判定を追加して実行するように構成されていてもよい（下記変形例）。さらに判定対象検出システム９００は、検出エラーとして判定された撮像対象（検出領域）を、障害パネル判定から除外する。

【0252】

（判定対象検出システム９００）
図２６に示すように第９実施形態の判定対象検出システム９００は、位置情報受信部９１０、画像受信部９２０、特定部９３０、温度情報取得部９４０および制御部Ｃと記憶部Ｓの他、第４の判定部９１０ａを含んで構成される。特定部９３０は第１実施形態と同様に赤外線画像から太陽光発電パネルを検出する。

【0253】

（第４の判定部９１０ａ）
第１実施形態と同様に赤外線画像から撮像対象、例えば太陽光発電パネルが特定される。第４の判定部９１０ａは、特定された複数の太陽光発電パネルにおける所定位置をさらに特定する。例えば撮像対象が２次元的に配列されている場合がある。この場合、図２７に示すように赤外線画像においてＸ軸方向に整列されて並ぶ撮像対象を１つのクラスターとしてまとめることが可能である（ＣｌｕｓｔｅｒＣ～ＣｌｕｓｔｅｒＦ参照）。

【0254】

一例として第４の判定部９１０ａは、Ｙ軸方向における上端縁および下端縁、または上端縁側の角部および下端縁側の角部等、撮像対象のＹｍｉｎとＹｍａｘを特定する。さらに第４の判定部９１０ａは、Ｘ軸方向に並ぶ撮像対象を１つのクラスターに含めるように、検出された複数の撮像対象において、ＹｍｉｎとＹｍａｘにおけるＹ座標が近いものを求める。一例として、第４の判定部９１０ａは、１つの検出領域のＹｍｉｎの座標を基準に、他の検出領域のＹｍｉｎと対比し、当該他の検出領域のうちＹ座標として所定距離内あるものを特定する。

【0255】

第４の判定部９１０ａは同様に、１つの検出領域のＹｍａｘの座標を基準に、他の検出領域のＹｍａｘと対比し、当該他の検出領域のうちＹ座標として所定距離内あるものを特定する。このようにして第４の判定部９１０ａは、上記１つの検出領域と特定した他の検出領域とを１つのクラスターに属するものとして対応づける。このようにして第４の判定部９１０ａは、赤外線画像においてクラスターおよびクラスター内の検出領域を特定していく。

【0256】

上記クラスターの形成は、ＹｍｉｎとＹｍａｘにおけるＹ座標が近いものを求めるものであるが、これは一例であって、本実施形態はこれに限られない。例えば、第４の判定部９１０ａは、Ｙｍｉｎ、Ｙｍａｘの少なくともいずれか一方、またはいずれかのみにおけるＹ座標が近いものを求めてクラスターを形成してもよい。また他の例として撮像対象の中心点を基準にそのＹ座標が近いものを求めてクラスターを形成してもよい。同様に、多角形の撮像対象である場合は角部のいずれか、あるいは角部のうち任意の数点であってもよい。

【0257】

次に第４の判定部９１０ａは、各クラスター（図２７；ＣｌｕｓｔｅｒＡ～ＣｌｕｓｔｅｒＦ参照）に含まれる検出領域の数を求める。またこのクラスター内の領域検出数と、記憶されている所定数とを対比する。すなわち、判定対象検出システム９００は、当該記憶された１つのクラスターに含まれるべき所定数と、実際にクラスターに含まれた撮像対象の検出数とを対比する。この所定数は、撮像対象や配置場所の特性、配列の規則性から導かれ、例えばユーザーにより設定されてもよい。

【0258】

第４の判定部９１０ａは、クラスター内の検出数が所定数に満たない場合、当該クラスターに属する検出領域をすべて検出エラーとして判定する。その場合、一例として第４の判定部９１０ａは、対象とした画像を温度異常の判定対象から除外する。他の例として、第４の判定部９１０ａは、判定にかかるクラスターに属する検出領域を除外して温度異常の判定を行うように構成されていてもよい。なお、上記に限らず、Ｙ軸方向に並ぶ撮像対象を１つのクラスターにまとめる構成であってもよい。

【0259】

［変形例］
次に、第９実施形態の変形例について説明する。この変形例においても第９実施形態のように複数の撮像対象を１つのクラスターとしてまとめる処理を実行する。ただし本変形例では、第４の判定部９１０ａは、クラスター内の各撮像対象におけるＹｍｉｎの平均値、Ｙｍａｘの平均値を求め、これを当該クラスターのＹｍｉｎ、Ｙｍａｘとする。なお、クラスターのＹｍｉｎ、Ｙｍａｘは属する各撮像対象のＹｍｉｎ、Ｙｍａｘの中央値であってもよい。さらに第４の判定部９１０ａは、Ｙ軸方向における直近のクラスターまでの距離の分散値を求める。また求めた分散値と判定値とを対比し、両者が所定の関係にある場合に検出エラーとして判定する。分散値の算出は例えば次式による。

【0260】

【数7】

第４の判定部９１０ａは、判定対象のクラスターと直近のクラスターまでの距離から、全クラスターそれぞれにおける直近の他のクラスターまでの距離の平均値の差を求め、偏差の二乗平均により分散を求める。その分散値が大きいほど、平均値からの各データの散らばりが大きいということになる。

【0261】

また、本変形例においてはクラスター間の間隔のばらつきを判定するための判定値を図示しない記憶手段に記憶している。第４の判定部９１０ａは、上記分散値と判定値とを対比し、これらが所定の関係にある場合、検出エラーとして判定する。例えば、判定対象のクラスターのＹｍｉｎと上方のクラスターのＹｍａｘとの間隔の分散値を算出し、その分散値と判定値を対比（例：差分を算出）する。同様に判定対象のクラスターのＹｍａｘと上方のクラスターのＹｍｉｎとの間隔の分散値を算出し、その分散値と判定値を対比する。この場合、分散値と判定値との差が所定範囲内でなければ第４の判定部９１０ａは、検出エラーと判定するようにしてもよい。図２８の例においては、撮像対象が２次元配列されており、撮像対象の配置効率からしてもクラスター間には大きな間隔が設けられない。よって、判定対象のクラスターの上辺側および下辺側の双方において、所定間隔より長い間隔が空いていれば、そのクラスターに属する検出領域はすべて検出ノイズであるとしてよい。

【0262】

上記クラスター間の間隔のばらつきの判定は、判定対象のＹｍｉｎと上方のクラスターのＹｍａｘとの間隔についてのものであった。しかしながらこれは一例であって、本実施形態はこれに限られない。例えば、第４の判定部９１０ａは、判定対象のＹｍｉｎと上方（または下方）のクラスターのＹｍｉｎとの間隔についてのばらつきを判定してもよい。また例えば、第４の判定部９１０ａは、判定対象のＹｍａｘと上方（または下方）のクラスターのＹｍａｘとの間隔についてのばらつきを判定してもよい。

【0263】

太陽光発電パネルの例においては、上記のようなＸ軸方向に並ぶクラスターであれば、これらをＹ方向に隣接して配列したアレイ構成となる傾向がある。この場合、判定対象のクラスターのＹｍｉｎと、上方に位置するクラスターのＹｍａｘの差は理論最適値では０となる。分散で比較する上記本実施形態の一例においては、基準となる平均値の上振れも下振れも検出ノイズとして判断されやすい。よって、このような検出ノイズの大きさは、単一方向である方がそのノイズは検出されやすいといえる。

【0264】

すなわち、平均値からマイナス方向に下振れするケースは、クラスターが重なっている状態といえるが、このケースは、第７実施形態のような技術にて除去可能である。つまり、検出ノイズは上振れ(クラスター間に間隔が生じている場合)に集約すると、ノイズの発生を低減しやすくなる。よって、本実施形態の説明を判定対象のＹｍｉｎと上方のクラスターのＹｍａｘとの間隔についてのものを中心に説明した。

【0265】

一例として第４の判定部９１０ａは、検出エラーの判定をした場合、対象とした画像を温度異常の判定対象から除外する。他の例として、第４の判定部９１０ａは検出エラーの判定をした場合、判定にかかるクラスターに属する検出領域を除外して温度異常の判定を行うように構成されていてもよい。なお、上記に限らず、Ｙ軸方向に並ぶ撮像対象を１つのクラスターにまとめる構成であってもよい。

【0266】

［動作］
図２９は、本実施形態（クラスター内検出数による判定）における処理の流れを示す図である。以下に、図２９を参照しつつ、判定対象検出システム９００の処理の流れを、ステップ番号（Ｓ０９１～Ｓ０９７－２）に添って説明する。

【0267】

（Ｓ０９１）
判定対象検出システム９００における位置情報受信部９１０は、飛行体Ｄから位置情報を受ける。また画像受信部９２０は可視光画像および赤外線画像を受ける。

【0268】

（Ｓ０９２）
特定部９３０は、赤外線画像において太陽光発電パネルを特定する。

【0269】

（Ｓ０９３）
第４の判定部９１０ａは、撮像対象の配列規則に基づき、その規則性にしたがった一部の配列に含まれる複数の撮像対象を１つのクラスターとしてまとめる。複数の撮像対象が２次元的に配列される場合、図２７，２８に示すように赤外線画像においてＸ軸方向に整列されて並ぶ撮像対象を１つのクラスターとしてまとめる。例えば赤外線画像の各撮像対象における所定位置（例：ＹｍｉｎとＹｍａｘ）を特定する。また第４の判定部９１０ａは、特定した所定位置、例えばＹ座標を基準として所定距離内にある複数の領域を１つのクラスターとしてまとめる

【0270】

（Ｓ０９４）
第４の判定部９１０ａは、各クラスター（図２７；ＣｌｕｓｔｅｒＡ～ＣｌｕｓｔｅｒＦ参照）に含まれる検出領域の数を求め、記憶されている所定数と対比する。第４の判定部９１０ａは、対比の結果、検出領域数が所定数を満たすか判定する。

【0271】

（Ｓ０９５）
Ｓ９４の対比の結果、クラスター内の検出領域数が所定数に満たない場合（Ｓ０９４；Ｙｅｓ）、第４の判定部９１０ａは当該クラスターに属する領域を検出エラーと判定する。さらにその場合、第４の判定部９１０ａは、対象とした画像を温度異常の判定対象から除外する。他の例として、判定にかかるクラスターに属する各検出領域を、温度異常の判定対象（障害パネル判定）のみを除外して、Ｓ０９６の温度異常の判定の対象に当該画像を含めてもよい。他の例として、第４の判定部９１０ａは、該当の撮像対象領域のみを除外して、Ｓ０９６の温度異常の判定の対象に当該画像を含めてもよい。温度情報取得部９４０は、除外されていない撮像対象それぞれについて温度情報を取得する。

【0272】

（Ｓ０９６）
制御部Ｃは、除外した画像以外の赤外線画像（または検出エラーの撮像対象以外の検出領域）に基づき、パネルごと（所定数パネル群ごと）に障害パネルを温度の差とパターンにより、検出する。

【0273】

（Ｓ０９７）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0274】

（Ｓ０９５－２）
Ｓ０９４においてクラスター内の検出領域数が所定数を満たすと判定された場合（Ｓ０９４；Ｎｏ）、第４の判定部９１０ａは検出エラーが無いものと判定する。またこの場合、Ｓ０９４において検出の適否の判定対象とした全ての画像（判定した全ての検出領域）を温度異常の判定対象として含める。温度情報取得部９４０は、撮像対象それぞれについて温度情報を取得する。

【0275】

（Ｓ０９６－２）
制御部Ｃは、第４の判定部９１０ａにより温度異常の判定対象とした全ての赤外線画像に基づき、パネルごと（所定数パネル群ごと）障害パネルを温度の差とパターンにより、検出する。

【0276】

（Ｓ０９７－２）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0277】

［変形例の動作］
本実施形態の上記変形例の場合、上記Ｓ０９４において第４の判定部９１０ａは、複数の撮像対象それぞれにおける所定位置（例：ＹｍｉｎとＹｍａｘ）を特定し、それにより直近の他の領域との間隔を求める。

【0278】

また上記変形例の場合、Ｓ０９５においてＳ９４の対比の結果、判定対象のクラスターの上辺側および下辺側の双方において、所定間隔より長い間隔が空いている場合（Ｓ０９４；Ｙｅｓ）、そのクラスターに属する検出領域、第４の判定部９１０ａは当該クラスターに属する領域を検出エラーと判定する。エラー判定の後の処理は第９実施形態と同様である。

【0279】

また上記変形例の場合、Ｓ０９５－２において、Ｓ０９４の対比の結果、判定対象のクラスターの上辺側、下辺側のいずれかにおいて、間隔が所定の長さ以内である場合（Ｓ０９４；Ｎｏ）、第４の判定部９１０ａは検出エラーが無いものと判定する。またこの場合、Ｓ０９４において検出の適否の判定対象とした全ての画像（判定した全ての検出領域）を温度異常の判定対象として含める。

【0280】

【0281】

さらに、本実施形態によれば撮像対象の検出ミスを、撮像の配列の規則性からの逸脱の有無あるいは逸脱の程度に基づき判定する。また判定結果に基づき、適宜エラー判定された画像またはエラーと判定された撮像対象を、温度の異常判定対象から除外する。したがって、障害パネルの特定ミスを低減可能である。

【0282】

［第１０実施形態］
第１０実施形態にかかる判定対象検出システム１０００について図３０～図３３を参照して説明する。以下の説明において、第４実施形態と重複する説明は割愛する。

【0283】

（概要）
第４実施形態と同様に、第１０実施形態においても赤外線画像内の撮像対象と、それ以外のものを識別し、撮像対象以外の温度情報を異常判定（障害パネル判定）に用いる情報から除外する処理を行う。すなわち、太陽光発電パネルをまず特定し、異常判定は太陽光発電パネルごと、または太陽光発電パネル群ごとに実行する。その結果、ノイズ（アスファルト舗装、水、植物、発電機器（パワーコントローラー、ケーブル）等）が含まれる可能性を低減する。さらに太陽光発電パネル配列による異常判定ミスも低減する。

【0284】

第１０実施形態の判定対象検出システム１０００はさらに、第４実施形態での太陽光発電パネル等の撮像対象の検出処理のミスを低減するため、撮像対象を検出した後、検出した撮像対象の配列方向にしたがい順次撮像対象の所定位置を特定する。さらに判定対象検出システム１０００は、撮像対象の配列の規則性にしたがって、赤外線画像において特定された複数の撮像対象を１つのクラスターにまとめる。また本実施形態においては、撮像対象の１つの群（クラスター群）における、最下端位置のクラスターの下辺位置を基準に、当該クラスターに含まれる撮像対象のうち、クラスターの下辺位置からずれたものを補正する。なお、下辺位置とは図３１に示すように、当該図の視点における下側を示すものであり、実空間における鉛直下方を示すものではない。太陽光発電施設においては、この下側は、南側となる傾向にある。

【0285】

すなわち、上記の通り太陽光発電施設においては、太陽光発電パネルは南向きに配置される傾向がある。またこの場合、太陽光発電パネルは受光面が南向きとなるように北側が高く南側が低くなるように、つまり南側に下り傾斜となるような架台上に設けられる（図３２参照）。

【0286】

このような構成においては、図３２に示すように、最下端のクラスターに属する各太陽光発電パネルの南側には、日陰領域と日向領域ができる。例えば、１ブロックの最下端に位置するパネルにおいては、その南側に隣接するパネルの北側端部（図３１においては上端部）に太陽光が遮られ、日陰領域ができる。ただし、図３２のように日陰領域の北側は、当該南側隣接パネルの北側端部によって、太陽光が遮られないので、その領域（直射光が照射される領域）は日向領域となる（図３１；符号ＳＰ参照）。

【0287】

日向領域は日陰領域より温度が相対的に高まることから、障害パネルの判定時に検出ノイズとなりうる。本実施形態は下記構成により、この検出ノイズを低減させることを可能にする。

【0288】

（判定対象検出システム１０００）
図３０に示すように第１０実施形態の判定対象検出システム１０００は、位置情報受信部１０１０、画像受信部１０２０、特定部１０３０、温度情報取得部１０４０および制御部Ｃと記憶部Ｓの他、第５の判定部１０１０ａおよび補正部１０１０ｂを含んで構成される。特定部１０３０は第４実施形態と同様に赤外線画像から太陽光発電パネルを検出する。

【0289】

（第５の判定部１０１０ａ）
第４実施形態と同様に赤外線画像から撮像対象、例えば太陽光発電パネルが特定される。第５の判定部１０１０ａは、第６実施形態と同様に、赤外線画像においてＸ軸方向に整列されて並ぶ撮像対象を１つのクラスターとしてまとめることが可能である（図３１：Ｃｌｕｓｔｅｒ_ｎｕｍ１～Ｃｌｕｓｔｅｒ_ｎｕｍ４参照）。

【0290】

さらに第５の判定部１０１０ａは、クラスター内の各撮像対象におけるＹｍａｘの平均値を求め、これを当該クラスターのＹｍａｘとする。なお、クラスターのＹｍａｘは属する各撮像対象のＹｍａｘの中央値であってもよい。

【0291】

また第５の判定部１０１０ａは、複数の撮像対象を２次元配列した１ブロック分におけるクラスターの最下段（図３１：Ｃｌｕｓｔｅｒ_ｎｕｍ４参照）を特定する。特定の方法は、例えば次の通りである。制御部Ｃは、クラスター特定後の赤外線画像を図示しない表示手段（システム外の表示手段を含む）に表示させる（図３１参照）。また制御部Ｃは、当該赤外線画像において撮像対象の配列ごとに、各クラスターを識別するための表示をする制御を実行する。この識別表示は、図３１の例であればクラスター上に表示された通し番号である。その他ユーザーが各クラスターを指定可能な他の識別表示であってもよい。

【0292】

この状態においてユーザーはクラスターごとの識別表示について表示手段を介して視認でき、さらに図示しない入力手段を用いて指定可能に構成されている。この構成において、ユーザーが当該入力手段を用いて画面上の識別表示群のうち、いずれかの識別表示（段数番号、クラスター番号等）を指定すると、制御部Ｃは、当該指定操作を受け付け、当該クラスターを赤外線画像において特定する。

【0293】

なお、複数の撮像対象の２次元配列におけるクラスター最下段の特定方法としては、他の方法であってもよい。例えば各クラスターのうち、クラスター上辺（Ｙｍｉｎ）側に対する直近の他の領域との間隔が所定間隔内であり、さらにクラスター下辺（Ｙｍａｘ）側に対する直近の他の領域との間隔が所定間隔を超えているクラスターを、最下段のクラスターと判定することも可能である。この構成の場合、下辺側に他の領域が無いクラスターも最下段のクラスターと判定される。

【0294】

最下段のクラスターの特定後、第５の判定部１０１０ａはクラスターに属する各検出領域のＹｍａｘの座標とクラスターのＹｍａｘの座標とを対比する。例えば第５の判定部１０１０ａは、各検出領域のＹｍａｘの座標とクラスターのＹｍａｘとの座標の差分（距離）を求める。さらに第５の判定部１０１０ａは、差分が所定範囲内であるかどうか判定する。一例として第５の判定部１０１０ａは、この差分と判定値とを対比する。差分が所定範囲を超えていれば、第５の判定部１０１０ａはその検出領域を特定する。

【0295】

（補正部１０１０ｂ）
補正部１０１０ｂは、第５の判定部１０１０ａにより特定された検出領域の下辺をクラスターの下辺に対応させる。例えば補正部１０１０ｂは、当該検出領域のＹｍａｘのＹ座標を、上記求められた差分に基づきクラスターのＹｍａｘのＹ座標に対応するように補正する。

【0296】

［動作］
図３３は、本実施形態における処理の流れを示す図である。以下に、図３３を参照しつつ、判定対象検出システム１０００の処理の流れを、ステップ番号（Ｓ１０１～Ｓ１０８－２）に添って説明する。

【0297】

（Ｓ１０１）
判定対象検出システム１０００における位置情報受信部１０１０は、飛行体Ｄから位置情報を受ける。また画像受信部１０２０は可視光画像および赤外線画像を受ける。

【0298】

（Ｓ１０２）
特定部１０３０は、赤外線画像において太陽光発電パネルを特定する。

【0299】

（Ｓ１０３）
第５の判定部１０１０ａは、撮像対象の配列規則に基づき、その規則性にしたがった一部の配列に含まれる複数の撮像対象を１つのクラスターとしてまとめる。複数の撮像対象が２次元的に配列される場合、図３１に示すように赤外線画像においてＸ軸方向に整列されて並ぶ撮像対象を１つのクラスターとしてまとめる。例えば赤外線画像の各撮像対象における所定位置（例：ＹｍｉｎとＹｍａｘ）を特定する。また第５の判定部１０１０ａは、特定した所定位置、例えばＹ座標を基準として所定距離内にある複数の領域を１つのクラスターとしてまとめる

【0300】

（Ｓ１０４）
第５の判定部１０１０ａは、撮像対象の２次元配列の１ブロック分に含まれる各クラスター（図３１：Ｃｌｕｓｔｅｒ_ｎｕｍ１～Ｃｌｕｓｔｅｒ_ｎｕｍ４参照）のうち、最下段のクラスターを特定する。

【0301】

（Ｓ１０５）
第５の判定部１０１０ａはクラスターに属する各検出領域のＹｍａｘの座標とクラスターのＹｍａｘの座標とを対比する。さらに第５の判定部１０１０ａは、差分が所定範囲内であるかどうか判定する。

【0302】

（Ｓ１０６）
Ｓ１０５の対比の結果、最下段のクラスター内の検出領域のうち、その下辺がクラスターの下辺と離隔しているものがある場合（Ｓ１０５；Ｙｅｓ）、補正部１０１０ｂはその検出領域の下辺を、当該クラスターの下辺に対応させる補正を行う。

【0303】

（Ｓ１０７）
温度情報取得部１０４０は、最下段のクラスター内の検出領域の下辺が補正された状態の検出領域を含めて温度情報を取得し、パネルごと（所定数パネル群ごと）に障害パネルを温度の差とパターンにより、検出する。

【0304】

（Ｓ１０８）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0305】

（Ｓ１０６－２）
Ｓ０１０５においてクラスター内のすべての検出領域の下辺それぞれと、クラスターの下辺との差が所定範囲内であれば（Ｓ１０４；Ｎｏ）、補正部１０１０ｂの補正処理を行うことなく、パネルごと（所定数パネル群ごと）に温度情報を取得する。

【0306】

（Ｓ１０７－２）
温度情報取得部１０４０は、パネルごと（所定数パネル群ごと）に、温度の差とパターンにより、障害パネルを検出する。

【0307】

（Ｓ１０８－２）
制御部Ｃは、赤外線画像から検出した障害パネルをユーザーに示す。

【0308】

【0309】

さらに、本実施形態によれば、撮像対象群を含む各ブロックの最下段クラスターの下辺位置に対し、各検出領域の下辺位置の逸脱を判定し、許容範囲を超えて逸脱する検出領域があれば、その領域の下辺位置をクラスターに合わせる補正を行う。また本実施形態では、補正後において障害パネル判定を行う。したがって、障害パネルの特定ミスを低減可能である。

【0310】

［変形例１］
次に、上記各実施形態における検出エラーの判定の後における判定対象検出システムのとり得る処理の他の例を説明する。上記実施形態（第５～第９）においては、撮像対象の検出エラーを判定し、検出エラーがあれば、当該検出領域あるいは当該検出領域が含まれる画像を障害パネル判定から除外するように構成されている。しかしながら、他の構成とすることも可能である。例えば判定対象検出システムは、図示しない表示手段（システム外の表示手段を含む）にエラーメッセージを出力させるか、あるいは図示しない音声出力部に警告音を出力させる等、任意の方法で検出エラーを報知するように構成することが可能である。

【0311】

さらに判定対象検出システムの制御部Ｃは、上記ユーザーへの報知後または報知を経ずに、検出エラーにかかる領域を含む画像をユーザーに呈する。これは図示しない任意の表示手段（システム外の表示手段を含む）に当該画像を表示させることがその一例である。さらに当該画像における配列情報と適合しない部分をマニュアル操作により補完するかについてユーザーに選択を促すメッセージを表示する。

【0312】

図３，図３４・３５等に示すように、特定部によって特定された撮像対象は表示手段によりユーザーに認識可能にすることが可能である。つまり、制御部Ｃは、特定部が赤外線画像において撮像対象として特定した領域を、赤外線画像においてユーザーが視認可能な状態とすることが可能である。例えば図３，図３４・３５等に示すように撮像対象の領域の外縁を他と識別可能に描画することが可能である。その他、任意の方法で個々の撮像対象の領域全体を他と識別可能に描画（網掛け、反転表示、点滅表示）することが可能である。

【0313】

さらに制御部Ｃは、赤外線画像における検出エラーとなった領域を表示された画像上でスライド移動させる操作を実行できるように表示する。例えば制御部Ｃはエラー判定となった領域の外縁を強調表示する。さらにユーザーがポインティングデバイスのような任意の入力手段により、画像上のポインタ等を当該表示領域上に重畳させると、制御部Ｃは当該領域を画像上でスライドさせる操作を受け付け可能な状態に移行させる。さらにその状態でユーザーが入力手段を介して領域を画像上の任意の位置に移動させるとその指定位置に当該領域を示す表示が画像上で移動する。

【0314】

さらにユーザーが入力手段を介して当該領域の移動操作を完成させる操作を実行すると、制御部Ｃは移動前の当該領域の座標値を、移動後の座標値に書き換える。本実施形態では、上記のようなマニュアル操作によって検出エラーにかかる領域を修正する操作を可能とする構成を有する。本実施形態によっても、障害パネルの特定ミスを低減可能である。

【0315】

［変形例２］
上記実施形態においては、飛行体Ｄにおける空撮画像において可視光画像と赤外線画像を取得する構成であった。しかしながら、撮像対象によっては、赤外線画像のみを取得する構成であってもよい。

【0316】

［変形例３］
上記実施形態においては、飛行体Ｄにおける空撮画像において可視光画像と赤外線画像を取得する構成であった。しかしながら、撮像対象によっては、空撮画像でなく、撮像対象の上方に固定された（例えば天井部分、または上方に突出した構造物（ポール等）の上部に固定された）撮影手段により、撮像しその画像を状態判定する構成であってもよい。例えば、倉庫や工場において多数配列された撮像対象（保管品、製造品等）の温度情報から状態判定をする構成であってもよい。

【0317】

上記変形例３から把握される判定対象検出システムとして次のような特徴を挙げることが可能である。

【0318】

［特徴１］
撮像対象の上方から当該撮像対象を撮影することにより取得された赤外線画像を受信する画像受信部と、
前記赤外線画像から撮像対象または所定数の撮像対象群を特定する特定部と、
特定した前記撮像対象ごとまたは前記撮像対象群ごとに赤外線情報に基づく温度情報を求める温度情報取得部と、
前記温度情報取得部により求められた前記温度情報に基づき、特定した前記撮像対象ごとまたは前記撮像対象群ごとに異常判定をする判定部と、
を備える判定対象検出システム。

【0319】

［変形例４］
上記実施形態においては、撮像対象に対してその上方から撮影した画像に基づき、温度情報から撮像対象の状態判定をする構成であった。しかしながら、撮像対象によっては、撮像対象の上方でなく、所定距離だけ離隔した水平方向から撮影した画像を利用して状態判定をする構成であってもよい。例えば、鉛直方向に２次元配列された撮像対象（ビルの窓ガラス）に対し、所定距離だけ離れた位置において上方に突出した構造物（ポール等）のいずれかの位置（例：中央位置）に撮影手段が固定されているものとする。この状態で当該撮影手段により、水平方向に当該所定距離だけ離れた撮像対象を撮像する構成であってもよい。また取得された画像に基づき状態判定する構成であってもよい。

【0320】

［整列位置検出システム］
第５実施形態～第７実施形態における技術的思想は、撮像対象の温度情報を利用した判定対象検出システムに限らず、整列位置検出システムとして利用することが可能である。この整列位置検出システムについて以下説明する。

【0321】

［上記第５実施形態の転用］
第５実施形態は画像の傾き補正をするものである。これは温度検出に限らず、単に規則的に整列または配列する前提となっている多数の撮像対象の配列位置の検出に利用可能である。

【0322】

上記実施形態のように、複数配列された撮像対象群を撮像した画像から、個々の撮像対象を検出することが可能である。このとき、２次元配列のように、規則的に並んでいるはずの撮像対象がその規則からずれてしまっている場合、または抜けてしまっている場合が生じうる。例えば同種または同一の製品を２次元配列してパッケージする前提の場合に、当該製品の抜け、位置ずれなどが生じうる。あるいは自動車を所定間隔で所定の配置規則で駐車すべきときに、駐車位置のずれ、抜け等が生じうる。

【0323】

複数配列された撮像対象群を撮像した画像を利用して個々の撮像対象の検出をすることで、このような配列位置の点検が可能である。

【0324】

このような構成において、画像の傾きがあると撮像対象の検出に支障をきたすおそれがあり、配置ずれ、配置抜けの点検ミスが生じうる。これに対し、この整列位置検出システムでは、まず第５実施形態のように画像の傾きを検出する。この画像は赤外線画像であってもよく、可視光画像であってもよい。傾きの検出後は、第５実施形態のように傾き補正を実行してもよい。または、第５実施形態のように撮像エラーとして、配置ずれ、配置抜けの点検対象から当該画像を除外する処理を実行してもよい。

【0325】

整列位置検出システムでは、第４実施形態の特定部と同様に、撮像対象を特定し、さらに撮像対象の配列を特定する（例：縦４行、横７列等）。これは、いわゆる人工知能（ＡＩ）を用いたディープラーニング（深層学習）により作成された推論モデルを用いたものであってもよく、パターンマッチング等、他の方法を用いてもよい。次に所定の制御部等により、ユーザーにより設定された配列情報と、画像から当該特定された撮像対象の配列とが対比され、配置ずれ、配置抜けの点検処理が実行される。

【0326】

上記第５実施形態の転用から把握される整列位置検出システムとして次のような特徴を挙げることが可能である。

【0327】

［特徴２］
撮像対象を撮像した画像を受信する画像受信部と、
前記画像から撮像対象または所定数の撮像対象群を特定する特定部と、
前記撮像対象に対する撮像方向の傾きを求め、当該求めた傾きに基づき傾き補正をする補正部と、
前記補正後の画像において、既定の配列規則から外れる撮像対象、または既定の配列規則から抜けた撮像対象の有無を判定する第７の判定部と、
を備える整列位置検出システム。

【0328】

［上記第６実施形態の転用］
第６実施形態は撮像対象のサイズ（撮像対象に対する少なくとも１方向からの視点でみたサイズ）が画一的であることを利用して、撮像対象の検出ミスの低減を図るものである。これは温度検出に限らず、単に規則的に整列または配列する前提となっている多数の撮像対象の配列位置の検出に利用可能である。

【0329】

上記第５実施形態を転用した整列位置検出システムのように、複数配列された撮像対象群を撮像した画像から、個々の撮像対象を検出することで、整列した撮像対象の位置ずれや抜けの点検が可能である。

【0330】

このような構成において、撮像対象の検出ミスにより、サイズが画一的であるはずの撮像対象が大きく検出され、または小さく検出されると当該点検にミスが生じうる。これに対し、この上記第６実施形態を転用した整列位置検出システムでは、まず第６実施形態のように、検出した各撮像対象の領域のサイズを求める。なお、画像は赤外線画像であってもよく、可視光画像であってもよい。

【0331】

次に、第６実施形態と同様に、撮像対象のサイズ、または当該サイズに基づいて算定された数値と、判定値とを対比することにより、検出ミスを判定する。

【0332】

検出ミスの判定後は、検出エラーがあったことをユーザーに報知してもよく、また検出エラーにかかる撮像対象を画像において強調表示してもよい。または、検出エラーとして、配置ずれ、配置抜けの点検対象から当該画像を除外する処理を実行してもよい。

【0333】

なお、整列位置検出システムでは、上記第５実施形態を転用した整列位置検出システムと同様に特定部により撮像対象の配列を特定する。

【0334】

上記第６実施形態の転用から把握される整列位置検出システムとして次のような特徴を挙げることが可能である。

【0335】

［特徴３］
撮像対象を撮像した画像を受信する画像受信部と、
前記画像から撮像対象または所定数の撮像対象群を特定する特定部と、
前記特定部が特定した前記撮像対象または前記撮像対象群のサイズを算出し、当該算出値のばらつきと、当該ばらつきの許容範囲を示す判定値とを比較し、当該ばらつきが当該判定値に対して所定の関係にある場合、特定エラーとして判定する第８の判定部を備える整列位置検出システム。

【0336】

［特徴４］
撮像対象を撮像した画像を受信する画像受信部と、
前記画像から撮像対象または所定数の撮像対象群を特定する特定部と、
前記画像において、既定の配列規則から外れる撮像対象、または既定の配列規則から抜けた撮像対象の有無を判定する第９の判定部と、
を備える整列位置検出システム。

【0337】

［上記第７実施形態の転用］
第７実施形態は撮像対象の配列規則を利用して、撮像対象の検出ミスの低減を図るものである。すなわち、撮像対象を検出した後、撮像対象の整列位置のずれがあるか判定を行う。例えば撮像対象の外縁の境界部分または各撮像対象の領域の検出において誤検出があるか判定を行う。これは温度検出に限らず、単に規則的に整列または配列する前提となっている多数の撮像対象の配列位置の検出に利用可能である。

【0338】

【0339】

このような構成において、当該第４実施形態を転用した整列位置検出システムにおいては、第７実施形態と同様に撮像対象特有の所定の配列の規則性を利用し、規則性からずれたものがあるかについて判定する。例えば画像から特定した複数の撮像対象それぞれにおける所定位置をさらに特定し、その特定した位置の、配列規則からのずれ量を算出する。ずれ量が大きければ、検出エラーの判定を行う。これにより、撮像対象の検出ミスの低減を図る。

【0340】

すなわち、上記第７実施形態のように、検出した各撮像対象の領域における所定位置をさらに特定する。例えば所定位置は「Ｙｍｉｎ」または「Ｙｍｉｎ_ｎ」である。なお、画像は赤外線画像であってもよく、可視光画像であってもよい。

【0341】

次に、第７実施形態と同様に、特定した各撮像対象の所定位置のばらつきを求める。このばらつきに対して、許容できる範囲と許容できない範囲とを判定値により判定する。第４実施形態と同様にばらつきが許容できない範囲である場合検出エラーとして判定する。

【0342】

検出エラーの判定後は、検出エラーがあったことをユーザーに報知してもよく、また検出エラーにかかる撮像対象を画像において強調表示してもよい。または、検出エラーとして、配置ずれ、配置抜けの点検対象から当該画像を除外する処理を実行してもよい。

【0343】

なお、この整列位置検出システムでは、上記第５実施形態を転用した整列位置検出システムと同様に特定部により撮像対象の配列を特定する。

【0344】

上記第７実施形態の転用から把握される整列位置検出システムとして次のような特徴を挙げることが可能である。

【0345】

［特徴５］
撮像対象を撮像した画像を受信する画像受信部と、
前記画像から撮像対象または所定数の撮像対象群を特定する特定部と、
前記特定部が特定した前記撮像対象または前記撮像対象群の位置関係に基づき、いずれかの前記撮像対象または前記撮像対象群における配列からからのずれ量を求め、当該ずれ量の許容範囲を示す判定値と当該ずれ量とを比較し、当該ずれ量が当該判定値に対して所定の関係にある場合、特定エラーとして判定する第１０の判定部と、
を備える整列位置検出システム。

【0346】

なお、上記３系統の整列位置検出システムは適宜組み合わせることが可能である。

【0347】

この発明の実施形態を説明したが、上記の実施形態は例として提示したものであり、発明の範囲を限定することを意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0348】

１００、２００、３００、状態判定システム
４００、５００、６００、７００、８００、９００，１０００判定対象検出システム
１１０、２１０、３１０、４１０、５１０、６１０、７１０位置情報受信部
１２０、２２０、３２０、４２０、５２０、６２０、７２０、
８２０、９２０、１０２０画像受信部
１３０、２３０、３３０、４３０、５３０、６３０、７３０、
８３０、９３０、１０３０特定部
１４０、２４０、３４０、４４０、５４０、６４０、７４０、
８４０、９４０、１０４０温度情報取得部
１５０、１５０Ａ、２５０、３５０高温域（情報）取得部
１６０、２６０、３６０中温域取得部
１７０、２７０、３７０平均値取得部
１８０、２８０、３８０判定部
４１０ａ設定部
５１０ａ、１０１０ｂ補正部
６１０ａ、７１０ａ、８１０ａ、９１０ａ、１０１０ａ第１～第５の判定部
Ｄ飛行体
Ｄ１撮影部
Ｄ２位置取得部
Ｄ３ジャイロスコープ
Ｄ４ジンバル
Ｄ５地磁気センサー

【図1】