知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022150209
(43)【公開日】2022-10-07
(54)【発明の名称】検査システム、方法及びプログラム
(51)【国際特許分類】
G06Q 10/00 20120101AFI20220929BHJP
【ＦＩ】
G06Q10/00 300
【審査請求】有
【請求項の数】8
【出願形態】ＯＬ
(21)【出願番号】P 2021052701
(22)【出願日】2021-03-26
(11)【特許番号】
(45)【特許公報発行日】2022-01-12
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＱＲコード
(71)【出願人】
【識別番号】500521522
【氏名又は名称】株式会社オプティム
(74)【代理人】
【識別番号】100177220
【弁理士】
【氏名又は名称】小木 智彦
(72)【発明者】
【氏名】菅谷 俊二
【テーマコード（参考）】
5L049
【Ｆターム（参考）】
5L049CC15
(57)【要約】
【課題】指示者がリアルタイムで監視しなくても、機器の検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保する。
【解決手段】検査システム１００は、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、スマートグラス３０などの端末を装着することで、検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れがないように、検査順序又は検査項目を出力する。検査システム１００において、検査対象となる機器の画像を記憶する機器画像記憶部がサーバに備えられ、サーバは、スマートグラス３０による撮影画像を取得し、撮影された機器を、記憶された画像により認識し、認識された機器の検査順序又は検査項目をスマートグラス３０に出力する。
【選択図】図１
【解決手段】検査システム１００は、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、スマートグラス３０などの端末を装着することで、検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れがないように、検査順序又は検査項目を出力する。検査システム１００において、検査対象となる機器の画像を記憶する機器画像記憶部がサーバに備えられ、サーバは、スマートグラス３０による撮影画像を取得し、撮影された機器を、記憶された画像により認識し、認識された機器の検査順序又は検査項目をスマートグラス３０に出力する。
【選択図】図１
【特許請求の範囲】
【請求項1】
現場で作業者が所定の機器を検査するための検査システムであって、
検査対象となる機器の画像を記憶する機器画像記憶部と、
前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部と、
前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部と、
前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部と、
を備える検査システム。
検査対象となる機器の画像を記憶する機器画像記憶部と、
前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部と、
前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部と、
前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部と、
を備える検査システム。
【請求項2】
現場で作業者が所定の機器を検査するための検査システムであって、
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードと、
前記識別コードを撮影可能な端末から、撮影画像を取得する取得部と、
前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部と、
前記認識部で認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部と、
を備える検査システム。
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードと、
前記識別コードを撮影可能な端末から、撮影画像を取得する取得部と、
前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部と、
前記認識部で認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部と、
を備える検査システム。
【請求項3】
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断する請求項１に記載の検査システム。
【請求項4】
前記認識部は、機器が撮影されたことを、事前に撮影された録画データから認識する請求項１又は３に記載の検査システム。
【請求項5】
前記認識部は、前記端末によって撮影された前記撮影画像内の識別コードを認識する処理を、事前に撮影された録画データから認識する請求項２に記載の検査システム。
【請求項6】
現場で作業者が所定の機器を検査するための検査システムが実行する方法であって、
検査対象となる機器の画像を記憶するステップと、
前記機器の画像を撮影可能な端末から、撮影画像を取得するステップと、
前記撮影された機器を、前記記憶された画像により認識するステップと、
前記認識された機器の検査順序又は検査項目を前記端末に出力するステップと、
を備える検査方法。
検査対象となる機器の画像を記憶するステップと、
前記機器の画像を撮影可能な端末から、撮影画像を取得するステップと、
前記撮影された機器を、前記記憶された画像により認識するステップと、
前記認識された機器の検査順序又は検査項目を前記端末に出力するステップと、
を備える検査方法。
【請求項7】
現場で作業者が所定の機器を検査するための検査システムが実行する方法であって、
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードを予め備えておき、前記端末によって撮影された撮影画像を取得するステップと、
前記端末によって撮影された前記撮影画像内の識別コードを認識するステップと、
前記認識された識別コードが示す検査順序又は検査項目を出力するステップと、
を備える検査方法。
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードを予め備えておき、前記端末によって撮影された撮影画像を取得するステップと、
前記端末によって撮影された前記撮影画像内の識別コードを認識するステップと、
前記認識された識別コードが示す検査順序又は検査項目を出力するステップと、
を備える検査方法。
【請求項8】
現場で作業者が所定の機器を検査するための検査システムを、
検査対象となる機器の画像を記憶する機器画像記憶部、
前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部、
前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部、
前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部、
として機能させる検査プログラム。
検査対象となる機器の画像を記憶する機器画像記憶部、
前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部、
前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部、
前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部、
として機能させる検査プログラム。
【請求項9】
現場で作業者が所定の機器を検査するための検査システムを、
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードを予め備えておき、前記端末によって撮影された撮影画像を取得する取得部、
前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部、
前記認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部、
として機能させる検査プログラム。
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードを予め備えておき、前記端末によって撮影された撮影画像を取得する取得部、
前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部、
前記認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部、
として機能させる検査プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、現場で作業者が所定の機器を検査するための検査システム、方法及びプログラムに関する。
【背景技術】
【0002】
従来のリモートサポートシステムでは、作業者端末の撮像画像共有により、指示者は作業者の作業内容を確認する。例えば、下記特許文献１には、ユーザ端末で撮像された画像を、遠隔作業支援のためにユーザ端末と遠隔作業指示端末とで画面共有する際に、ＩＤまたはパスワードが見えなくなるように画像を加工して遠隔作業指示端末に表示する技術が開示されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特許第６２５９９６２号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、現場にいる作業者の確認・検査手順が適切か否かは、遠隔にいる指示者がリアルタイムで監視する必要がある。
【0005】
そこで、本発明は、指示者がリアルタイムで監視しなくても、検査等の手順が正しく、漏れなく行うことができる検査システム、方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【0006】
本発明では、以下のような解決手段を提供する。
【0007】
第１の発明は、現場で作業者が所定の機器を検査するための検査システムであって、検査対象となる機器の画像を記憶する機器画像記憶部と、前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部と、前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部と、前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部と、を備える検査システムを提供する。
【0008】
また、第２の発明は、現場で作業者が所定の機器を検査するための検査システムであって、検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードと、前記識別コードを撮影可能な端末から、撮影画像を取得する取得部と、前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部と、前記認識部で認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部と、を備える検査システムを提供する。
【0009】
また、第３の発明は、第１の発明において、前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断する検査システムを提供する。
【0010】
更に、第４の発明は、第１又は第３の発明において、前記認識部は、機器が撮影されたことを、事前に撮影された録画データから認識する検査システムを提供する。
【0011】
また、第５の発明は、第２の発明において、前記認識部は、識別コードが撮影されることで前記識別コードを認識する処理を、事前に撮影された録画データから認識する検査システムを提供する。
【0012】
また、本発明は、システムのカテゴリであるが、方法及びプログラムであってもよい。
【発明の効果】
【0013】
本発明によれば、指示者がリアルタイムで監視しなくても、機器の検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保することができる。
【図面の簡単な説明】
【0014】
【図1】本発明の実施形態１に係る検査システムの全体構成を示す図である。
【図2】本発明の実施形態１に係る検査システムの機能構成及び出力イメージを示す図である。
【図3】本発明の実施形態１に係る検査システムの出力イメージ及び表示枠にスマートグラスの視線のポインタが静止している状態を示す図である。
【図4】本発明の実施形態１に係る検査処理フローを示す図である。
【図5】本発明の実施形態２に係る検査システムの全体構成を示す図である。
【図6】本発明の実施形態２に係る検査システムの機能構成及び出力イメージを示す図である。
【図7】本発明の実施形態２に係る検査処理フローを示す図である。
【発明を実施するための形態】
【0015】
以下、添付図面を参照して、本発明を実施するための形態（以下、実施形態）について詳細に説明する。以降の図においては、実施形態の説明の全体を通して同じ要素には同じ番号または符号を付している。
【実施形態１】
【0016】
＜基本概念／基本構成＞
図１は、本発明の実施形態１に係る検査システムの全体構成を示す図である。検査システム１００は、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、一例として、スマートグラス３０などの端末を装着することで、検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れなく検査ができるように、検査順序又は検査項目を出力する。なお、本実施形態１では、機器の画像を撮影可能な端末として、スマートグラス３０を例に挙げて説明しているが、スマートフォン、タブレット端末、スマートウォッチ等であってもよい。
図１は、本発明の実施形態１に係る検査システムの全体構成を示す図である。検査システム１００は、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、一例として、スマートグラス３０などの端末を装着することで、検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れなく検査ができるように、検査順序又は検査項目を出力する。なお、本実施形態１では、機器の画像を撮影可能な端末として、スマートグラス３０を例に挙げて説明しているが、スマートフォン、タブレット端末、スマートウォッチ等であってもよい。
【0017】
検査システム１００において、検査対象となる機器の画像を記憶する機器画像記憶部が、サーバに記憶されている。
【0018】
そして、検査システム１００において、サーバは、スマートグラス３０から、撮影画像を取得し、スマートグラス３０によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する。そして、サーバは、認識された機器の検査順序又は検査項目をスマートグラス３０に出力する。また、機器が撮影されたことを、事前に撮影された録画データから認識してもよい。また、機器の認識は、端末（スマートグラス３０）側で行うこともできるし、スマートグラス３０とサーバ５０の双方で実行されてもよい（後述する実施形態２でも同様）。
【0019】
本実施形態では、端末がスマートグラス３０であり、前記複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断する。このような判断は、サーバとなるコンピュータが、撮影動画をスマートグラス３０から受信して、検査対象をきちんと目視して検査したか、機器を順序通りに検査したか（撮影画像の撮影時間）を判断してもよい。判断結果がＮＧの場合は、作業者２０又は指示者に通知して、検査順序通りに検査し直すように促してもよい。
【0020】
このような検査システム１００では、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
【0021】
＜機能構成＞
図２は、本実施形態１に係る検査システムの機能構成及び出力イメージを示す図である。検査システム１００は、作業者２０が装着するスマートグラス３０と、スマートグラス３０とネットワーク８０を介して接続されたサーバ５０と、を備える。なお、本実施形態では、スマートグラス３０とサーバ５０とは別の装置として説明するが、後述するサーバ５０の機能の全部又は一部を端末（スマートグラス３０）が備えるようにしてもよい。
図２は、本実施形態１に係る検査システムの機能構成及び出力イメージを示す図である。検査システム１００は、作業者２０が装着するスマートグラス３０と、スマートグラス３０とネットワーク８０を介して接続されたサーバ５０と、を備える。なお、本実施形態では、スマートグラス３０とサーバ５０とは別の装置として説明するが、後述するサーバ５０の機能の全部又は一部を端末（スマートグラス３０）が備えるようにしてもよい。
【0022】
（スマートグラスの機能構成）
スマートグラス３０は、撮影部であるカメラ３１と、表示部３３と、制御部３６と、通信部３８と、を備える。
スマートグラス３０は、撮影部であるカメラ３１と、表示部３３と、制御部３６と、通信部３８と、を備える。
【0023】
表示部３３は、サーバ５０の出力部５５によって出力された機器の検査順序又は検査項目をスマートグラス３０に表示する。表示部３３は、例えば、スマートグラス３０のグラス部分である。図２に示すように、出力イメージは、スマートグラス３０を装着して高圧電力設備１０を見たときに、例えば、機器１２を認識すると表示２２が表示され、「（１） 電力メータＡは１００ｋｗ以下か？」というように、最初に検査することと、検査項目が表示される。
【0024】
同様に、機器１４を認識すると、表示２４が表示され、２番目に検査することが表示される。機器１６、１８を認識したときも同様に、表示２６、２８が表示され、それぞれ３番目、４番目に検査すべきことが表示される。
【0025】
なお、ここでは、理解を容易にするために、機器１２に対応する表示２２以外は、検査順序のみを表示することとしたが、むろん、機器１４、１６、１８に対応する表示２４、２６、２８にも検査項目を表示してよい。
【0026】
制御部３６は、通信部３８及びネットワーク８０を介して、サーバ５０と相互にデータの送受信を行う。例えば、撮影画像（静止画や動画など）をサーバ５０に送信したり、サーバ５０が出力した機器の検査順序又は検査項目を受信する。むろん、その他のデータの送受信を行うことを妨げるものではない。
【0027】
（サーバの機能構成）
サーバ５０は、例えば、クラウドコンピュータ、スマートフォン、タブレット端末、パーソナルコンピュータ等で構成され、スマートグラス３０とネットワーク８０を介して相互にデータを送受信可能に接続される。
サーバ５０は、例えば、クラウドコンピュータ、スマートフォン、タブレット端末、パーソナルコンピュータ等で構成され、スマートグラス３０とネットワーク８０を介して相互にデータを送受信可能に接続される。
【0028】
また、サーバ５０は、機器画像記憶部５２、取得部５３、認識部５４、出力部５５、判断部５６、通知部５７、録画データ５８、制御部６０、通信部６２と、を備える。
【0029】
機器画像記憶部５２は、検査対象となる機器の画像を記憶する。本実施形態では、少なくとも、機器１２、１４、１６、１８が記憶されている。このような機器画像記憶部５２は、スマートグラス３０に設けてもよい。
【0030】
取得部５３は、機器（機器１２～１８など）の画像を撮影可能なスマートグラス３０から、ネットワーク８０を介して撮影画像を取得する。
【0031】
認識部５４は、前記スマートグラス３０により撮影された機器を、前記機器画像記憶部５２に記憶された画像により認識する。また、認識部５４は、例えば、指示者であるサポート側が映してほしい被写体（機器）を映していることを、画像解析で判断してもよい。
あるいは、サーバ５０の認識部５４と同様の機能をスマートグラス３０に設け、スマートグラス３０側で機器の認識を行うようにしてもよい。
あるいは、サーバ５０の認識部５４と同様の機能をスマートグラス３０に設け、スマートグラス３０側で機器の認識を行うようにしてもよい。
【0032】
出力部５５は、前記認識部５４で認識された機器の検査順序又は検査項目をスマートグラス３０に出力する。
【0033】
判断部５６は、複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、スマートグラス３０によって目視し続けた時間及び目視した時間帯で判断する。例えば、サーバ５０が、スマートグラス３０のカメラ３１によって撮影された動画をネットワーク８０を介して受信し、検査対象をきちんと目視して検査したか（撮影画像の撮影時間）、機器を順序通りに検査したか（撮影画像の撮影時間帯）を判断する。
【0034】
通知部５７は、前記判断部５６によって、機器の検査が適切な順序通りに行われていない（検査順序が間違っている）と判断された場合に、ネットワーク８０を介してスマートグラス３０や指示者の端末に通知する。これによって、検査順序が適切でない場合に、適切な順序で検査をし直すように作業者２０に促すことができる。
【0035】
録画データ５８は、事前に撮影された機器の録画データであって、前記認識部５４は、機器１２、１４、１６、１８が撮影されたことを、録画データ５８から認識するようにしてもよい。このような録画データ５８は、スマートグラス３０に設けてもよい。
【0036】
制御部６０は、通信部６２及びネットワーク８０を介して、スマートグラス３０と相互にデータの送受信を行う。例えば、撮影画像（静止画や動画など）をスマートグラス３０から受信したり、出力部５５によって前記認識部５４で認識された機器の検査順序又は検査項目をスマートグラス３０に送信したり、判断部５６により判断した結果を、通知部５７によってスマートグラス３０に通知する。むろん、その他のデータの送受信を行うことを妨げるものではない。
【0037】
上記の本システム１００の機能構成は、あくまで一例であり、１つの機能ブロックを分割したり、複数の機能ブロックをまとめて１つの機能ブロックとして構成したりしてもよい。各機能処理部は、装置や端末に内蔵されたＣＰＵ（Central Processing Unit）が、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＳＳＤ（Solod State Drive）、ハードディスク等の記憶装置（記憶部）に格納されたコンピュータ・プログラム（例えば、基幹ソフトや上述の各種処理をＣＰＵに実行させるアプリ等）を読み出し、ＣＰＵにより実行されたコンピュータ・プログラムによって実現される。すなわち、各機能処理部は、このコンピュータ・プログラムが、記憶装置に格納されたデータベース（ＤＢ；Data Base）やメモリ上の記憶領域からテーブル等の必要なデータを読み書きし、場合によっては、関連するハードウェア（例えば、入出力装置、表示装置、通信インターフェース装置）を制御することによって実現される。
【0038】
＜処理フロー＞
図４は、実施形態１に係る検査システム１００が実行する検査処理フローを示す図である。検査処理は、本実施形態では、作業者２０が装着する端末であるスマートグラス３０と、スマートグラス３０とネットワーク８０を介してデータの送受信が相互に可能なサーバ５０が実行する。
図４は、実施形態１に係る検査システム１００が実行する検査処理フローを示す図である。検査処理は、本実施形態では、作業者２０が装着する端末であるスマートグラス３０と、スマートグラス３０とネットワーク８０を介してデータの送受信が相互に可能なサーバ５０が実行する。
【0039】
ステップＳ１０において、サーバ５０の取得部５３は、スマートグラス３０から、当該スマートグラス３０のカメラ３１が撮影した撮影画像を取得する。
【0040】
ステップＳ１２において、サーバ５０の認識部５４は、前記スマートグラス３０によって撮影された機器（機器１２～１８など）を認識する。具体的には、検査対象となる機器の画像を記憶した機器画像記憶部５２がサーバ５０に設けられており、前記認識部５４は、前記スマートグラス３０によって撮影された機器が、前記記憶された画像に対応する機器であることを認識する。
【0041】
ステップＳ１４において、サーバ５０の出力部５５は、認識部５４で認識された機器の検査順序又は検査項目を、前記スマートグラス３０に出力する。
【0042】
出力イメージは、スマートグラス３０を装着して高圧電力設備１０を見たときに、例えば、機器１２を認識すると表示２２が表示され、「（１） 電力メータＡは１００ｋｗ以下か？」というように、最初に検査することと、検査項目が表示される。
【0043】
同様に、機器１４を認識すると、表示２４が表示され、２番目に検査することが表示される。機器１６、１８を認識したときも同様に、表示２６、２８が表示され、それぞれ３番目、４番目に検査すべきことが表示される。むろん、機器１４、１６、１８に対応する表示２４、２６、２８にも検査項目を表示してよい。
【0044】
ステップＳ１６において、サーバ５０の判断部５６は、前記複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、スマートグラス３０によって目視し続けた時間及び目視した時間帯で判断する。
【0045】
このような判断は、サーバ５０となるコンピュータが、撮影動画をスマートグラス３０から受信して、検査対象をきちんと目視して検査したか、機器を順序通りに検査したかを判断してもよい。
【0046】
検査対象の機器をきちんと目視して検査したかについては、例えば、図３に示すように、機器１２に対応する表示２２の表示枠２２Ａに、スマートグラス３０の視線のポインタ９０が何秒間静止していたかで、作業者２０が目視した時間を計測し、機器１２を目視して検査したかを判断する。
【0047】
また、機器を順序通りに検査したかは、複数の機器１２、１４、１６、１８を撮影した時刻によって判断してもよい。すなわち、機器１２の撮影時刻から機器１８の撮影時刻の順で撮影時刻が遅くなる場合には、機器１２～機器１８までの検査順序が正しかったものと判断する。
【0048】
ここで、検査順序通りに検査したものと判断部５６により判断された場合（ステップＳ１６でＹＥＳ）には、処理フローを終了する。一方、検査順序通りに検査していないと判断部５６により判断されると（ステップＳ１６でＮＯ）、サーバ５０の通知部５７は、判断結果を作業者２０のスマートグラス３０や指示者の端末にネットワーク８０を通じて通知し（ステップＳ１８）、検査順序通りに検査し直すように促し、正しい順序で検査が行われると処理フローを終了する。また、図３では、検査順序の番号をＡＲ表示することとしているが、ナビゲート要素も含めて表示してもよい。例えば、（１）（機器２２）の確認が取れると、機器２２の場所に「ＯＫ」マークを表示して、次の点検箇所である（２）（機器２４）の方向へ矢印を表示する。それに加えて、次の点検箇所である（２）を点滅表示、あるいは、反転表示させるなどして、目立つようにしてもよい。
【0049】
＜効果＞
このような検査システム１００によれば、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
このような検査システム１００によれば、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
【0050】
なお、本実施形態において、機器１２、１４、１６、１８の認識は、例えば、認識部５４が、機器が撮影されたことを、事前に撮影された録画データ５８から認識してもよい。
【実施形態２】
【0051】
＜基本概念／基本構成＞
次に、本発明の実施形態２について説明する。図５は、本発明の実施形態２に係る検査システムの全体構成を示す図である。検査システム１００Ａは、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、スマートグラス３０Ａを装着することで検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れがないように、検査順序又は検査項目を出力する。なお、実施形態２では、機器の画像を撮影可能な端末として、スマートグラス３０Ａを例に挙げて説明しているが、スマートフォンなどであってもよい。
次に、本発明の実施形態２について説明する。図５は、本発明の実施形態２に係る検査システムの全体構成を示す図である。検査システム１００Ａは、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、スマートグラス３０Ａを装着することで検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れがないように、検査順序又は検査項目を出力する。なお、実施形態２では、機器の画像を撮影可能な端末として、スマートグラス３０Ａを例に挙げて説明しているが、スマートフォンなどであってもよい。
【0052】
検査システム１００Ａにおいては、検査対象となる機器１２、１４、１６、１８の各々に識別コード２３、２５、２７、２９が貼付されている。これら識別コード２３、２５、２７、２９は、検査対象となる機器の検査順序又は検査項目を示すものである。
【0053】
そして、検査システム１００Ａにおいて、スマートグラス３０Ａは、前記識別コード２３、２５、２７、２９をカメラ３１で撮影し、撮影された識別コードを認識し、認識された識別コードが示す機器の検査順序又は検査項目を出力する。また、認識部５４は、識別コード２３、２５、２７、２９が撮影されることで前記識別コード２３、２５、２７、２９を認識する処理を、事前に撮影された録画データから行ってもよい。
【0054】
実施形態２では、端末がスマートグラス３０Ａであり、前記複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断する。このような判断は、サーバとなるコンピュータが、撮影動画をスマートグラス３０Ａから受信して、検査対象をきちんと目視して検査したか、機器を順序通りに検査したか（撮影画像の撮影時間）を判断してもよい。判断結果がＮＧの場合は、作業者２０や指示者に通知して、検査順序通りに検査し直すように促してもよい。
【0055】
このような検査システム１００Ａでは、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
【0056】
＜機能構成＞
図６は、実施形態２に係る検査システムの機能構成及び出力イメージを示す図である。検査システム１００Ａは、作業者２０が装着するスマートグラス３０Ａと、スマートグラス３０Ａとネットワーク８０を介して接続されたサーバ５０Ａと、を備える。なお、本実施形態では、スマートグラス３０Ａとサーバ５０Ａとは別の装置として説明するが、実施形態１と同様に、サーバ５０Ａの機能の全部又は一部を端末（スマートグラス３０Ａ）が備えるようにしてもよい。
図６は、実施形態２に係る検査システムの機能構成及び出力イメージを示す図である。検査システム１００Ａは、作業者２０が装着するスマートグラス３０Ａと、スマートグラス３０Ａとネットワーク８０を介して接続されたサーバ５０Ａと、を備える。なお、本実施形態では、スマートグラス３０Ａとサーバ５０Ａとは別の装置として説明するが、実施形態１と同様に、サーバ５０Ａの機能の全部又は一部を端末（スマートグラス３０Ａ）が備えるようにしてもよい。
【0057】
（スマートグラスの機能構成）
スマートグラス３０Ａは、撮影部であるカメラ３１と、表示部３３と、出力部３４と、制御部３６と、通信部３８と、を備える。
スマートグラス３０Ａは、撮影部であるカメラ３１と、表示部３３と、出力部３４と、制御部３６と、通信部３８と、を備える。
【0058】
表示部３３は、サーバ５０Ａで認識された識別コード２３、２５、２７、２９が示す機器の検査順序又は検査項目をスマートグラス３０Ａに表示する。表示部３３は、例えば、スマートグラス３０Ａのグラス部分である。
【0059】
出力部３４は、サーバ５０Ａの認識部５４で認識された識別コード２３、２５、２７、２９が示す機器の検査順序又は検査項目を出力する。図６に示すように、出力イメージは、スマートグラス３０を装着して高圧電力設備１０を見たときに、機器１２、１４、１６、１８に貼付された識別コード２３、２５、２７、２９を認識すると表示２２、２４、２６、２８が表示され、表示枠内に、それぞれの機器の検査順序が（１）～（４）のように表示される。
【0060】
なお、表示２２、２４、２６、２８には、検査順序のみならず、実施形態１と同様に検査項目を表示してもよいし、検査が正しく行われたことの確認が取れた後には、上述した実施形態１と同様にナビゲート要素を含む表示をしてよい。
【0061】
制御部３６は、通信部３８及びネットワーク８０を介して、サーバ５０Ａと相互にデータの送受信を行う。例えば、撮影画像（静止画や動画など）をサーバ５０Ａに送信したり、所定のデータを受信する。
【0062】
（サーバの機能構成）
サーバ５０Ａは、例えば、クラウドコンピュータ、スマートフォン、タブレット端末、パーソナルコンピュータ等で構成され、スマートグラス３０Ａとネットワーク８０を介してデータを相互に送受信可能に接続される。
サーバ５０Ａは、例えば、クラウドコンピュータ、スマートフォン、タブレット端末、パーソナルコンピュータ等で構成され、スマートグラス３０Ａとネットワーク８０を介してデータを相互に送受信可能に接続される。
【0063】
また、サーバ５０Ａは、取得部５３、認識部５４、出力部５５、判断部５６、通知部５７、録画データ５８、制御部６０、通信部６２と、を備える。
取得部５３は、スマートグラス３０Ａで撮影された撮影画像をスマートグラス３０Ａより取得する。認識部５４は、取得部５３が取得した撮影画像内の識別コードを、所定のデータベース等を参照して認識する。
取得部５３は、スマートグラス３０Ａで撮影された撮影画像をスマートグラス３０Ａより取得する。認識部５４は、取得部５３が取得した撮影画像内の識別コードを、所定のデータベース等を参照して認識する。
【0064】
判断部５６は、複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、スマートグラス３０Ａによって目視し続けた時間及び目視した時間帯で判断する。例えば、サーバ５０Ａが、スマートグラス３０Ａのカメラ３１によって撮影された動画をネットワーク８０を介して受信し、検査対象をきちんと目視して検査したか（撮影画像の撮影時間）、機器を順序通りに検査したか（撮影画像の撮影時間帯）を判断する。
【0065】
通知部５７は、前記判断部５６によって、機器の検査が適切な順序通りに行われていないと判断された場合に、ネットワーク８０を介してスマートグラス３０Ａまたは指示者の端末に通知する。これによって、検査順序が適切でない場合に、適切な順序で検査をし直すように作業者２０に促すことができる。
【0066】
録画データ５８は、事前に撮影された録画データであって、認識部５４は、機器１２、１４、１６、１８に貼付された識別コード２３、２５、２７、２９が撮影されることで識別コード２３、２５、２７、２９を認識する処理を、録画データ５８から認識するようにしてもよい。このような録画データ５８は、スマートグラス３０Ａに設けてもよい。
【0067】
制御部６０は、通信部６２及びネットワーク８０を介して、スマートグラス３０Ａと相互にデータの送受信を行う。例えば、撮影画像（静止画や動画など）をスマートグラス３０から受信したり、判断部５６により判断した結果を、通知部５７によってスマートグラス３０Ａに通知する。むろん、その他のデータの送受信を行うことを妨げるものではない。
【0068】
上記の本システムの機能構成は、あくまで一例であり、１つの機能ブロックを分割したり、複数の機能ブロックをまとめて１つの機能ブロックとして構成したりしてもよい。各機能処理部は、装置や端末に内蔵されたＣＰＵ（Central Processing Unit）が、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＳＳＤ（Solid State Drive）、ハードディスク等の記憶装置（記憶部）に格納されたコンピュータ・プログラム（例えば、基幹ソフトや上述の各種処理をＣＰＵに実行させるアプリ等）を読み出し、ＣＰＵにより実行されたコンピュータ・プログラムによって実現される。すなわち、各機能処理部は、このコンピュータ・プログラムが、記憶装置に格納されたデータベース（ＤＢ；Data Base）やメモリ上の記憶領域からテーブル等の必要なデータを読み書きし、場合によっては、関連するハードウェア（例えば、入出力装置、表示装置、通信インターフェース装置）を制御することによって実現される。
【0069】
＜処理フロー＞
図７は、実施形態２に係る検査システム１００Ａが実行する検査処理フローを示す図である。検査処理は、本実施形態では、作業者２０が装着する端末であるスマートグラス３０Ａと、スマートグラス３０Ａとネットワーク８０を介してデータの送受信が相互に可能なサーバ５０Ａが実行する。なお、検査対象となる機器１２、１４、１６、１８の各々には、識別コード２３、２５、２７、２９が貼付されている。これら識別コード２３、２５、２７、２９は、検査対象となる機器の検査順序又は検査項目を示すものである。
図７は、実施形態２に係る検査システム１００Ａが実行する検査処理フローを示す図である。検査処理は、本実施形態では、作業者２０が装着する端末であるスマートグラス３０Ａと、スマートグラス３０Ａとネットワーク８０を介してデータの送受信が相互に可能なサーバ５０Ａが実行する。なお、検査対象となる機器１２、１４、１６、１８の各々には、識別コード２３、２５、２７、２９が貼付されている。これら識別コード２３、２５、２７、２９は、検査対象となる機器の検査順序又は検査項目を示すものである。
【0070】
ステップＳ２０において、スマートグラス３０Ａが、前記識別コード２３、２５、２７、２９を撮影し、撮影画像をサーバ５０Ａに送信することで、撮影された識別コード２３、２５、２７、２９を、サーバ５０Ａの認識部５４が認識する。
【0071】
ステップＳ２２において、スマートグラス３０Ａの出力部３４は、認識部５４で認識された識別コード２３、２５、２７、２９が示す機器の検査順序又は検査項目を表示部３３に出力する。
ここで、認識部５４が、スマートグラス３０Ａに備えられ、スマートグラス３０Ａで撮影された上記識別コード２３、２５、２７、２９の画像を受信し、認識処理を端末側で行い、その結果をスマートグラス３０Ａの出力部３４で出力してもよい。
ここで、認識部５４が、スマートグラス３０Ａに備えられ、スマートグラス３０Ａで撮影された上記識別コード２３、２５、２７、２９の画像を受信し、認識処理を端末側で行い、その結果をスマートグラス３０Ａの出力部３４で出力してもよい。
【0072】
出力イメージは、スマートグラス３０Ａを装着して高圧電力設備１０を見たときに、例えば、機器１２、１４、１６、１８を見ると、表示２２、２４、２６、２８に検査順序が表示される。また、実施形態１と同様に、検査順序とともに、検査項目を併せて表示してもよい。
【0073】
ステップＳ２４において、サーバ５０Ａの判断部５６は、前記複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、スマートグラス３０によって目視し続けた時間及び目視した時間帯で判断する。
【0074】
このような判断は、サーバ５０Ａとなるコンピュータが、撮影動画をスマートグラス３０Ａから受信して、検査対象をきちんと目視して検査したか、機器を順序通りに検査したかを判断してもよい。
【0075】
検査対象の機器をきちんと目視して検査したかについては、例えば、上述した実施形態１の図３に示すように、機器１２に対応する表示２２の表示枠２２Ａに、スマートグラス３０Ａの視線のポインタ９０が何秒間静止していたかで、作業者２０が目視した時間を計測し、機器１２を目視して検査したかを判断する。
【0076】
また、機器を順序通りに検査したかは、複数の機器１２、１４、１６、１８を撮影した時刻によって判断してもよい。すなわち、機器１２の撮影時刻から機器１８の撮影時刻の順で撮影時刻が遅くなる場合には、機器１２～機器１８までの検査順序が正しかったものと判断する。
【0077】
ここで、検査順序通りに検査したものと判断部５６により判断された場合（ステップＳ２４でＹＥＳ）には、処理フローを終了する。一方、検査順序通りに検査していないと判断部５６により判断されると（ステップＳ２４でＮＯ）、サーバ５０Ａの通知部５７は、判断結果を作業者２０のスマートグラス３０Ａや指示者の端末にネットワーク８０を通じて通知し（ステップＳ２６）、検査順序通りに検査し直すように促し、正しい順序で検査が行われると処理フローを終了する。また、図６では、検査順序の番号をＡＲ表示することとしているが、ナビゲート要素も含めて表示してもよい。例えば、被写体である機器に、ＱＲコード（や何らかの特定の印）が張られている場合、ＱＲコードで確認が取れた場合、次の被写体（機器）を映すことをナビゲートして、次の被写体が撮影されたかどうかを同様の手法で確認してもよい。
【0078】
＜効果＞
このような検査システム１００Ａによれば、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
このような検査システム１００Ａによれば、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
【0079】
なお、本実施形態において、認識部５４は、識別コード２３、２５、２７、２９が撮影されることで前記識別コード２３、２５、２７、２９を認識する処理を、事前に撮影された録画データ５８から行ってもよい。
【0080】
以上、実施形態を用いて本発明を説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されないことは言うまでもない。上記実施形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。また、そのような変更または改良を加えた形態も、本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。なお、上記の実施形態では、本発明を物の発明として、検査システムについて説明したが、本発明において検査システムが実行する方法や、検査システムを各種手段として機能させるプログラムの発明と捉えることもできる。また、本発明では、リアルタイムのデータに加えて、録画データでも対応することができ、点検ポイントのみをハイライト再生するようにしてもよい。更に、本発明は、高圧電力設備の機器のみならず、公知の各種の機器全般の検査に適用可能である。
【0081】
また、本発明の検査システムは、以下のような構成とすることができる。
【0082】
(1)現場で作業者が所定の機器を検査するための検査システムであって、検査対象となる機器の画像を記憶する機器画像記憶部と、前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部と、前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部と、前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部と、を備える構成。
【0083】
(2)現場で作業者が所定の機器を検査するための検査システムであって、検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードと、前記識別コードを撮影可能な端末から、撮影画像を取得する取得部と、前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部と、前記認識部で認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部と、を備える構成。
【0084】
(3)前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断する構成。
【0085】
(4)前記認識部は、機器が撮影されたことを、事前に撮影された録画データから認識する構成。
【0086】
(5)前記認識部は、前記端末によって撮影された前記撮影画像内の識別コードが撮影されたことで前記識別コードを認識する処理を、事前に撮影された録画データから認識する構成。
【符号の説明】
【0087】
１０：高圧電力設備
１２、１４、１６、１８：機器
２０：作業者
２２、２４、２６、２８：表示
２２Ａ：表示枠
２３、２５、２７、２９：識別コード
３０、３０Ａ：スマートグラス
３１：カメラ
３３：表示部
３４：出力部
３６：制御部
３８：通信部
５０、５０Ａ：サーバ
５２：機器画像記憶部
５３：取得部
５４：認識部
５５：出力部
５６：判断部
５７：通知部
５８：録画データ
６０：制御部
６２：通信部
８０：ネットワーク
９０：ポインタ
１００、１００Ａ：検査システム
１２、１４、１６、１８：機器
２０：作業者
２２、２４、２６、２８：表示
２２Ａ：表示枠
２３、２５、２７、２９：識別コード
３０、３０Ａ：スマートグラス
３１：カメラ
３３：表示部
３４：出力部
３６：制御部
３８：通信部
５０、５０Ａ：サーバ
５２：機器画像記憶部
５３：取得部
５４：認識部
５５：出力部
５６：判断部
５７：通知部
５８：録画データ
６０：制御部
６２：通信部
８０：ネットワーク
９０：ポインタ
１００、１００Ａ：検査システム
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【手続補正書】
【提出日】2021-09-01
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
現場で作業者が所定の機器を検査するための検査システムであって、
検査対象となる複数の機器の画像を記憶する機器画像記憶部と、
前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部と、
前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部と、
前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部と、
を備え、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査システム。
検査対象となる複数の機器の画像を記憶する機器画像記憶部と、
前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部と、
前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部と、
前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部と、
を備え、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査システム。
【請求項2】
現場で作業者が所定の機器を検査するための検査システムであって、
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードと、
前記識別コードを撮影可能な端末から、撮影画像を取得する取得部と、
前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部と、
前記認識部で認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部と、
を備え、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査システム。
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードと、
前記識別コードを撮影可能な端末から、撮影画像を取得する取得部と、
前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部と、
前記認識部で認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部と、
を備え、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査システム。
【請求項3】
前記認識部は、機器が撮影されたことを、事前に撮影された録画データから認識する請求項１に記載の検査システム。
【請求項4】
前記認識部は、前記端末によって撮影された前記撮影画像内の識別コードを認識する処理を、事前に撮影された録画データから認識する請求項２に記載の検査システム。
【請求項5】
現場で作業者が所定の機器を検査するための検査システムが実行する方法であって、
検査対象となる複数の機器の画像を記憶するステップと、
前記機器の画像を撮影可能な端末から、撮影画像を取得するステップと、
前記撮影された機器を、前記記憶された画像により認識するステップと、
前記認識された機器の検査順序又は検査項目を前記端末に出力するステップと、
を備え、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査方法。
検査対象となる複数の機器の画像を記憶するステップと、
前記機器の画像を撮影可能な端末から、撮影画像を取得するステップと、
前記撮影された機器を、前記記憶された画像により認識するステップと、
前記認識された機器の検査順序又は検査項目を前記端末に出力するステップと、
を備え、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査方法。
【請求項6】
現場で作業者が所定の機器を検査するための検査システムが実行する方法であって、
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードを予め備えておき、前記識別コードを撮影可能な端末によって撮影された撮影画像を取得するステップと、
前記端末によって撮影された前記撮影画像内の識別コードを認識するステップと、
前記認識された識別コードが示す検査順序又は検査項目を出力するステップと、
を備え、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査方法。
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードを予め備えておき、前記識別コードを撮影可能な端末によって撮影された撮影画像を取得するステップと、
前記端末によって撮影された前記撮影画像内の識別コードを認識するステップと、
前記認識された識別コードが示す検査順序又は検査項目を出力するステップと、
を備え、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査方法。
【請求項7】
現場で作業者が所定の機器を検査するための検査システムを、
検査対象となる複数の機器の画像を記憶する機器画像記憶部、
前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部、
前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部、
前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部、として機能させ、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査プログラム。
検査対象となる複数の機器の画像を記憶する機器画像記憶部、
前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部、
前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部、
前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部、として機能させ、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査プログラム。
【請求項8】
現場で作業者が所定の機器を検査するための検査システムを、
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードを予め備えておき、前記識別コードを撮影可能な端末によって撮影された撮影画像を取得する取得部、
前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部、
前記認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部、
として機能させ、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査プログラム。
検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードを予め備えておき、前記識別コードを撮影可能な端末によって撮影された撮影画像を取得する取得部、
前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部、
前記認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部、
として機能させ、
前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査プログラム。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、現場で作業者が所定の機器を検査するための検査システム、方法及びプログラムに関する。
【背景技術】
【0002】
従来のリモートサポートシステムでは、作業者端末の撮像画像共有により、指示者は作業者の作業内容を確認する。例えば、下記特許文献１には、ユーザ端末で撮像された画像を、遠隔作業支援のためにユーザ端末と遠隔作業指示端末とで画面共有する際に、ＩＤまたはパスワードが見えなくなるように画像を加工して遠隔作業指示端末に表示する技術が開示されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特許第６２５９９６２号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、現場にいる作業者の確認・検査手順が適切か否かは、遠隔にいる指示者がリアルタイムで監視する必要がある。
【0005】
そこで、本発明は、指示者がリアルタイムで監視しなくても、検査等の手順が正しく、漏れなく行うことができる検査システム、方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【0006】
本発明では、以下のような解決手段を提供する。
【0007】
第１の発明は、現場で作業者が所定の機器を検査するための検査システムであって、検査対象となる複数の機器の画像を記憶する機器画像記憶部と、前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部と、前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部と、前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部と、を備え、前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査システムを提供する。
【0008】
また、第２の発明は、現場で作業者が所定の機器を検査するための検査システムであって、検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードと、前記識別コードを撮影可能な端末から、撮影画像を取得する取得部と、前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部と、前記認識部で認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部と、を備え、前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する検査システムを提供する。
【0009】
更に、第３の発明は、第１の発明において、前記認識部は、機器が撮影されたことを、事前に撮影された録画データから認識する検査システムを提供する。
【0010】
また、第４の発明は、第２の発明において、前記認識部は、識別コードが撮影されることで前記識別コードを認識する処理を、事前に撮影された録画データから認識する検査システムを提供する。
【0011】
また、本発明は、システムのカテゴリであるが、方法及びプログラムであってもよい。
【発明の効果】
【0012】
本発明によれば、指示者がリアルタイムで監視しなくても、機器の検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保することができる。
【図面の簡単な説明】
【0013】
【図1】本発明の実施形態１に係る検査システムの全体構成を示す図である。
【図2】本発明の実施形態１に係る検査システムの機能構成及び出力イメージを示す図である。
【図3】本発明の実施形態１に係る検査システムの出力イメージ及び表示枠にスマートグラスの視線のポインタが静止している状態を示す図である。
【図4】本発明の実施形態１に係る検査処理フローを示す図である。
【図5】本発明の実施形態２に係る検査システムの全体構成を示す図である。
【図6】本発明の実施形態２に係る検査システムの機能構成及び出力イメージを示す図である。
【図7】本発明の実施形態２に係る検査処理フローを示す図である。
【発明を実施するための形態】
【0014】
以下、添付図面を参照して、本発明を実施するための形態（以下、実施形態）について詳細に説明する。以降の図においては、実施形態の説明の全体を通して同じ要素には同じ番号または符号を付している。
【実施形態１】
【0015】
＜基本概念／基本構成＞
図１は、本発明の実施形態１に係る検査システムの全体構成を示す図である。検査システム１００は、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、一例として、スマートグラス３０などの端末を装着することで、検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れなく検査ができるように、検査順序又は検査項目を出力する。なお、本実施形態１では、機器の画像を撮影可能な端末として、スマートグラス３０を例に挙げて説明しているが、スマートフォン、タブレット端末、スマートウォッチ等であってもよい。
図１は、本発明の実施形態１に係る検査システムの全体構成を示す図である。検査システム１００は、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、一例として、スマートグラス３０などの端末を装着することで、検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れなく検査ができるように、検査順序又は検査項目を出力する。なお、本実施形態１では、機器の画像を撮影可能な端末として、スマートグラス３０を例に挙げて説明しているが、スマートフォン、タブレット端末、スマートウォッチ等であってもよい。
【0016】
検査システム１００において、検査対象となる機器の画像を記憶する機器画像記憶部が、サーバに記憶されている。
【0017】
そして、検査システム１００において、サーバは、スマートグラス３０から、撮影画像を取得し、スマートグラス３０によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する。そして、サーバは、認識された機器の検査順序又は検査項目をスマートグラス３０に出力する。また、機器が撮影されたことを、事前に撮影された録画データから認識してもよい。また、機器の認識は、端末（スマートグラス３０）側で行うこともできるし、スマートグラス３０とサーバ５０の双方で実行されてもよい（後述する実施形態２でも同様）。
【0018】
本実施形態では、端末がスマートグラス３０であり、前記複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断する。このような判断は、サーバとなるコンピュータが、撮影動画をスマートグラス３０から受信して、検査対象をきちんと目視して検査したか、機器を順序通りに検査したか（撮影画像の撮影時間）を判断してもよい。判断結果がＮＧの場合は、作業者２０又は指示者に通知して、検査順序通りに検査し直すように促してもよい。
【0019】
このような検査システム１００では、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
【0020】
＜機能構成＞
図２は、本実施形態１に係る検査システムの機能構成及び出力イメージを示す図である。検査システム１００は、作業者２０が装着するスマートグラス３０と、スマートグラス３０とネットワーク８０を介して接続されたサーバ５０と、を備える。なお、本実施形態では、スマートグラス３０とサーバ５０とは別の装置として説明するが、後述するサーバ５０の機能の全部又は一部を端末（スマートグラス３０）が備えるようにしてもよい。
図２は、本実施形態１に係る検査システムの機能構成及び出力イメージを示す図である。検査システム１００は、作業者２０が装着するスマートグラス３０と、スマートグラス３０とネットワーク８０を介して接続されたサーバ５０と、を備える。なお、本実施形態では、スマートグラス３０とサーバ５０とは別の装置として説明するが、後述するサーバ５０の機能の全部又は一部を端末（スマートグラス３０）が備えるようにしてもよい。
【0021】
（スマートグラスの機能構成）
スマートグラス３０は、撮影部であるカメラ３１と、表示部３３と、制御部３６と、通信部３８と、を備える。
スマートグラス３０は、撮影部であるカメラ３１と、表示部３３と、制御部３６と、通信部３８と、を備える。
【0022】
表示部３３は、サーバ５０の出力部５５によって出力された機器の検査順序又は検査項目をスマートグラス３０に表示する。表示部３３は、例えば、スマートグラス３０のグラス部分である。図２に示すように、出力イメージは、スマートグラス３０を装着して高圧電力設備１０を見たときに、例えば、機器１２を認識すると表示２２が表示され、「（１） 電力メータＡは１００ｋｗ以下か？」というように、最初に検査することと、検査項目が表示される。
【0023】
同様に、機器１４を認識すると、表示２４が表示され、２番目に検査することが表示される。機器１６、１８を認識したときも同様に、表示２６、２８が表示され、それぞれ３番目、４番目に検査すべきことが表示される。
【0024】
なお、ここでは、理解を容易にするために、機器１２に対応する表示２２以外は、検査順序のみを表示することとしたが、むろん、機器１４、１６、１８に対応する表示２４、２６、２８にも検査項目を表示してよい。
【0025】
制御部３６は、通信部３８及びネットワーク８０を介して、サーバ５０と相互にデータの送受信を行う。例えば、撮影画像（静止画や動画など）をサーバ５０に送信したり、サーバ５０が出力した機器の検査順序又は検査項目を受信する。むろん、その他のデータの送受信を行うことを妨げるものではない。
【0026】
（サーバの機能構成）
サーバ５０は、例えば、クラウドコンピュータ、スマートフォン、タブレット端末、パーソナルコンピュータ等で構成され、スマートグラス３０とネットワーク８０を介して相互にデータを送受信可能に接続される。
サーバ５０は、例えば、クラウドコンピュータ、スマートフォン、タブレット端末、パーソナルコンピュータ等で構成され、スマートグラス３０とネットワーク８０を介して相互にデータを送受信可能に接続される。
【0027】
また、サーバ５０は、機器画像記憶部５２、取得部５３、認識部５４、出力部５５、判断部５６、通知部５７、録画データ５８、制御部６０、通信部６２と、を備える。
【0028】
機器画像記憶部５２は、検査対象となる機器の画像を記憶する。本実施形態では、少なくとも、機器１２、１４、１６、１８が記憶されている。このような機器画像記憶部５２は、スマートグラス３０に設けてもよい。
【0029】
取得部５３は、機器（機器１２～１８など）の画像を撮影可能なスマートグラス３０から、ネットワーク８０を介して撮影画像を取得する。
【0030】
認識部５４は、前記スマートグラス３０により撮影された機器を、前記機器画像記憶部５２に記憶された画像により認識する。また、認識部５４は、例えば、指示者であるサポート側が映してほしい被写体（機器）を映していることを、画像解析で判断してもよい。
あるいは、サーバ５０の認識部５４と同様の機能をスマートグラス３０に設け、スマートグラス３０側で機器の認識を行うようにしてもよい。
あるいは、サーバ５０の認識部５４と同様の機能をスマートグラス３０に設け、スマートグラス３０側で機器の認識を行うようにしてもよい。
【0031】
出力部５５は、前記認識部５４で認識された機器の検査順序又は検査項目をスマートグラス３０に出力する。
【0032】
判断部５６は、複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、スマートグラス３０によって目視し続けた時間及び目視した時間帯で判断する。例えば、サーバ５０が、スマートグラス３０のカメラ３１によって撮影された動画をネットワーク８０を介して受信し、検査対象をきちんと目視して検査したか（撮影画像の撮影時間）、機器を順序通りに検査したか（撮影画像の撮影時間帯）を判断する。
【0033】
通知部５７は、前記判断部５６によって、機器の検査が適切な順序通りに行われていない（検査順序が間違っている）と判断された場合に、ネットワーク８０を介してスマートグラス３０や指示者の端末に通知する。これによって、検査順序が適切でない場合に、適切な順序で検査をし直すように作業者２０に促すことができる。
【0034】
録画データ５８は、事前に撮影された機器の録画データであって、前記認識部５４は、機器１２、１４、１６、１８が撮影されたことを、録画データ５８から認識するようにしてもよい。このような録画データ５８は、スマートグラス３０に設けてもよい。
【0035】
制御部６０は、通信部６２及びネットワーク８０を介して、スマートグラス３０と相互にデータの送受信を行う。例えば、撮影画像（静止画や動画など）をスマートグラス３０から受信したり、出力部５５によって前記認識部５４で認識された機器の検査順序又は検査項目をスマートグラス３０に送信したり、判断部５６により判断した結果を、通知部５７によってスマートグラス３０に通知する。むろん、その他のデータの送受信を行うことを妨げるものではない。
【0036】
上記の本システム１００の機能構成は、あくまで一例であり、１つの機能ブロックを分割したり、複数の機能ブロックをまとめて１つの機能ブロックとして構成したりしてもよい。各機能処理部は、装置や端末に内蔵されたＣＰＵ（Central Processing Unit）が、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＳＳＤ（Solod State Drive）、ハードディスク等の記憶装置（記憶部）に格納されたコンピュータ・プログラム（例えば、基幹ソフトや上述の各種処理をＣＰＵに実行させるアプリ等）を読み出し、ＣＰＵにより実行されたコンピュータ・プログラムによって実現される。すなわち、各機能処理部は、このコンピュータ・プログラムが、記憶装置に格納されたデータベース（ＤＢ；Data Base）やメモリ上の記憶領域からテーブル等の必要なデータを読み書きし、場合によっては、関連するハードウェア（例えば、入出力装置、表示装置、通信インターフェース装置）を制御することによって実現される。
【0037】
＜処理フロー＞
図４は、実施形態１に係る検査システム１００が実行する検査処理フローを示す図である。検査処理は、本実施形態では、作業者２０が装着する端末であるスマートグラス３０と、スマートグラス３０とネットワーク８０を介してデータの送受信が相互に可能なサーバ５０が実行する。
図４は、実施形態１に係る検査システム１００が実行する検査処理フローを示す図である。検査処理は、本実施形態では、作業者２０が装着する端末であるスマートグラス３０と、スマートグラス３０とネットワーク８０を介してデータの送受信が相互に可能なサーバ５０が実行する。
【0038】
ステップＳ１０において、サーバ５０の取得部５３は、スマートグラス３０から、当該スマートグラス３０のカメラ３１が撮影した撮影画像を取得する。
【0039】
ステップＳ１２において、サーバ５０の認識部５４は、前記スマートグラス３０によって撮影された機器（機器１２～１８など）を認識する。具体的には、検査対象となる機器の画像を記憶した機器画像記憶部５２がサーバ５０に設けられており、前記認識部５４は、前記スマートグラス３０によって撮影された機器が、前記記憶された画像に対応する機器であることを認識する。
【0040】
ステップＳ１４において、サーバ５０の出力部５５は、認識部５４で認識された機器の検査順序又は検査項目を、前記スマートグラス３０に出力する。
【0041】
出力イメージは、スマートグラス３０を装着して高圧電力設備１０を見たときに、例えば、機器１２を認識すると表示２２が表示され、「（１） 電力メータＡは１００ｋｗ以下か？」というように、最初に検査することと、検査項目が表示される。
【0042】
同様に、機器１４を認識すると、表示２４が表示され、２番目に検査することが表示される。機器１６、１８を認識したときも同様に、表示２６、２８が表示され、それぞれ３番目、４番目に検査すべきことが表示される。むろん、機器１４、１６、１８に対応する表示２４、２６、２８にも検査項目を表示してよい。
【0043】
ステップＳ１６において、サーバ５０の判断部５６は、前記複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、スマートグラス３０によって目視し続けた時間及び目視した時間帯で判断する。
【0044】
このような判断は、サーバ５０となるコンピュータが、撮影動画をスマートグラス３０から受信して、検査対象をきちんと目視して検査したか、機器を順序通りに検査したかを判断してもよい。
【0045】
検査対象の機器をきちんと目視して検査したかについては、例えば、図３に示すように、機器１２に対応する表示２２の表示枠２２Ａに、スマートグラス３０の視線のポインタ９０が何秒間静止していたかで、作業者２０が目視した時間を計測し、機器１２を目視して検査したかを判断する。
【0046】
また、機器を順序通りに検査したかは、複数の機器１２、１４、１６、１８を撮影した時刻によって判断してもよい。すなわち、機器１２の撮影時刻から機器１８の撮影時刻の順で撮影時刻が遅くなる場合には、機器１２～機器１８までの検査順序が正しかったものと判断する。
【0047】
ここで、検査順序通りに検査したものと判断部５６により判断された場合（ステップＳ１６でＹＥＳ）には、処理フローを終了する。一方、検査順序通りに検査していないと判断部５６により判断されると（ステップＳ１６でＮＯ）、サーバ５０の通知部５７は、判断結果を作業者２０のスマートグラス３０や指示者の端末にネットワーク８０を通じて通知し（ステップＳ１８）、検査順序通りに検査し直すように促し、正しい順序で検査が行われると処理フローを終了する。また、図３では、検査順序の番号をＡＲ表示することとしているが、ナビゲート要素も含めて表示してもよい。例えば、（１）（機器２２）の確認が取れると、機器２２の場所に「ＯＫ」マークを表示して、次の点検箇所である（２）（機器２４）の方向へ矢印を表示する。それに加えて、次の点検箇所である（２）を点滅表示、あるいは、反転表示させるなどして、目立つようにしてもよい。
【0048】
＜効果＞
このような検査システム１００によれば、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
このような検査システム１００によれば、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
【0049】
なお、本実施形態において、機器１２、１４、１６、１８の認識は、例えば、認識部５４が、機器が撮影されたことを、事前に撮影された録画データ５８から認識してもよい。
【実施形態２】
【0050】
＜基本概念／基本構成＞
次に、本発明の実施形態２について説明する。図５は、本発明の実施形態２に係る検査システムの全体構成を示す図である。検査システム１００Ａは、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、スマートグラス３０Ａを装着することで検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れがないように、検査順序又は検査項目を出力する。なお、実施形態２では、機器の画像を撮影可能な端末として、スマートグラス３０Ａを例に挙げて説明しているが、スマートフォンなどであってもよい。
次に、本発明の実施形態２について説明する。図５は、本発明の実施形態２に係る検査システムの全体構成を示す図である。検査システム１００Ａは、例えば、高圧電力設備１０の複数の機器１２、１４、１６、１８の検査をする作業者２０が、スマートグラス３０Ａを装着することで検査すべき機器を認識し、認識した機器を正しい順序で、検査項目の漏れがないように、検査順序又は検査項目を出力する。なお、実施形態２では、機器の画像を撮影可能な端末として、スマートグラス３０Ａを例に挙げて説明しているが、スマートフォンなどであってもよい。
【0051】
検査システム１００Ａにおいては、検査対象となる機器１２、１４、１６、１８の各々に識別コード２３、２５、２７、２９が貼付されている。これら識別コード２３、２５、２７、２９は、検査対象となる機器の検査順序又は検査項目を示すものである。
【0052】
そして、検査システム１００Ａにおいて、スマートグラス３０Ａは、前記識別コード２３、２５、２７、２９をカメラ３１で撮影し、撮影された識別コードを認識し、認識された識別コードが示す機器の検査順序又は検査項目を出力する。また、認識部５４は、識別コード２３、２５、２７、２９が撮影されることで前記識別コード２３、２５、２７、２９を認識する処理を、事前に撮影された録画データから行ってもよい。
【0053】
実施形態２では、端末がスマートグラス３０Ａであり、前記複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断する。このような判断は、サーバとなるコンピュータが、撮影動画をスマートグラス３０Ａから受信して、検査対象をきちんと目視して検査したか、機器を順序通りに検査したか（撮影画像の撮影時間）を判断してもよい。判断結果がＮＧの場合は、作業者２０や指示者に通知して、検査順序通りに検査し直すように促してもよい。
【0054】
このような検査システム１００Ａでは、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
【0055】
＜機能構成＞
図６は、実施形態２に係る検査システムの機能構成及び出力イメージを示す図である。検査システム１００Ａは、作業者２０が装着するスマートグラス３０Ａと、スマートグラス３０Ａとネットワーク８０を介して接続されたサーバ５０Ａと、を備える。なお、本実施形態では、スマートグラス３０Ａとサーバ５０Ａとは別の装置として説明するが、実施形態１と同様に、サーバ５０Ａの機能の全部又は一部を端末（スマートグラス３０Ａ）が備えるようにしてもよい。
図６は、実施形態２に係る検査システムの機能構成及び出力イメージを示す図である。検査システム１００Ａは、作業者２０が装着するスマートグラス３０Ａと、スマートグラス３０Ａとネットワーク８０を介して接続されたサーバ５０Ａと、を備える。なお、本実施形態では、スマートグラス３０Ａとサーバ５０Ａとは別の装置として説明するが、実施形態１と同様に、サーバ５０Ａの機能の全部又は一部を端末（スマートグラス３０Ａ）が備えるようにしてもよい。
【0056】
（スマートグラスの機能構成）
スマートグラス３０Ａは、撮影部であるカメラ３１と、表示部３３と、出力部３４と、制御部３６と、通信部３８と、を備える。
スマートグラス３０Ａは、撮影部であるカメラ３１と、表示部３３と、出力部３４と、制御部３６と、通信部３８と、を備える。
【0057】
表示部３３は、サーバ５０Ａで認識された識別コード２３、２５、２７、２９が示す機器の検査順序又は検査項目をスマートグラス３０Ａに表示する。表示部３３は、例えば、スマートグラス３０Ａのグラス部分である。
【0058】
出力部３４は、サーバ５０Ａの認識部５４で認識された識別コード２３、２５、２７、２９が示す機器の検査順序又は検査項目を出力する。図６に示すように、出力イメージは、スマートグラス３０を装着して高圧電力設備１０を見たときに、機器１２、１４、１６、１８に貼付された識別コード２３、２５、２７、２９を認識すると表示２２、２４、２６、２８が表示され、表示枠内に、それぞれの機器の検査順序が（１）～（４）のように表示される。
【0059】
なお、表示２２、２４、２６、２８には、検査順序のみならず、実施形態１と同様に検査項目を表示してもよいし、検査が正しく行われたことの確認が取れた後には、上述した実施形態１と同様にナビゲート要素を含む表示をしてよい。
【0060】
制御部３６は、通信部３８及びネットワーク８０を介して、サーバ５０Ａと相互にデータの送受信を行う。例えば、撮影画像（静止画や動画など）をサーバ５０Ａに送信したり、所定のデータを受信する。
【0061】
（サーバの機能構成）
サーバ５０Ａは、例えば、クラウドコンピュータ、スマートフォン、タブレット端末、パーソナルコンピュータ等で構成され、スマートグラス３０Ａとネットワーク８０を介してデータを相互に送受信可能に接続される。
サーバ５０Ａは、例えば、クラウドコンピュータ、スマートフォン、タブレット端末、パーソナルコンピュータ等で構成され、スマートグラス３０Ａとネットワーク８０を介してデータを相互に送受信可能に接続される。
【0062】
また、サーバ５０Ａは、取得部５３、認識部５４、出力部５５、判断部５６、通知部５７、録画データ５８、制御部６０、通信部６２と、を備える。
取得部５３は、スマートグラス３０Ａで撮影された撮影画像をスマートグラス３０Ａより取得する。認識部５４は、取得部５３が取得した撮影画像内の識別コードを、所定のデータベース等を参照して認識する。
取得部５３は、スマートグラス３０Ａで撮影された撮影画像をスマートグラス３０Ａより取得する。認識部５４は、取得部５３が取得した撮影画像内の識別コードを、所定のデータベース等を参照して認識する。
【0063】
判断部５６は、複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、スマートグラス３０Ａによって目視し続けた時間及び目視した時間帯で判断する。例えば、サーバ５０Ａが、スマートグラス３０Ａのカメラ３１によって撮影された動画をネットワーク８０を介して受信し、検査対象をきちんと目視して検査したか（撮影画像の撮影時間）、機器を順序通りに検査したか（撮影画像の撮影時間帯）を判断する。
【0064】
通知部５７は、前記判断部５６によって、機器の検査が適切な順序通りに行われていないと判断された場合に、ネットワーク８０を介してスマートグラス３０Ａまたは指示者の端末に通知する。これによって、検査順序が適切でない場合に、適切な順序で検査をし直すように作業者２０に促すことができる。
【0065】
録画データ５８は、事前に撮影された録画データであって、認識部５４は、機器１２、１４、１６、１８に貼付された識別コード２３、２５、２７、２９が撮影されることで識別コード２３、２５、２７、２９を認識する処理を、録画データ５８から認識するようにしてもよい。このような録画データ５８は、スマートグラス３０Ａに設けてもよい。
【0066】
制御部６０は、通信部６２及びネットワーク８０を介して、スマートグラス３０Ａと相互にデータの送受信を行う。例えば、撮影画像（静止画や動画など）をスマートグラス３０から受信したり、判断部５６により判断した結果を、通知部５７によってスマートグラス３０Ａに通知する。むろん、その他のデータの送受信を行うことを妨げるものではない。
【0067】
上記の本システムの機能構成は、あくまで一例であり、１つの機能ブロックを分割したり、複数の機能ブロックをまとめて１つの機能ブロックとして構成したりしてもよい。各機能処理部は、装置や端末に内蔵されたＣＰＵ（Central Processing Unit）が、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＳＳＤ（Solid State Drive）、ハードディスク等の記憶装置（記憶部）に格納されたコンピュータ・プログラム（例えば、基幹ソフトや上述の各種処理をＣＰＵに実行させるアプリ等）を読み出し、ＣＰＵにより実行されたコンピュータ・プログラムによって実現される。すなわち、各機能処理部は、このコンピュータ・プログラムが、記憶装置に格納されたデータベース（ＤＢ；Data Base）やメモリ上の記憶領域からテーブル等の必要なデータを読み書きし、場合によっては、関連するハードウェア（例えば、入出力装置、表示装置、通信インターフェース装置）を制御することによって実現される。
【0068】
＜処理フロー＞
図７は、実施形態２に係る検査システム１００Ａが実行する検査処理フローを示す図である。検査処理は、本実施形態では、作業者２０が装着する端末であるスマートグラス３０Ａと、スマートグラス３０Ａとネットワーク８０を介してデータの送受信が相互に可能なサーバ５０Ａが実行する。なお、検査対象となる機器１２、１４、１６、１８の各々には、識別コード２３、２５、２７、２９が貼付されている。これら識別コード２３、２５、２７、２９は、検査対象となる機器の検査順序又は検査項目を示すものである。
図７は、実施形態２に係る検査システム１００Ａが実行する検査処理フローを示す図である。検査処理は、本実施形態では、作業者２０が装着する端末であるスマートグラス３０Ａと、スマートグラス３０Ａとネットワーク８０を介してデータの送受信が相互に可能なサーバ５０Ａが実行する。なお、検査対象となる機器１２、１４、１６、１８の各々には、識別コード２３、２５、２７、２９が貼付されている。これら識別コード２３、２５、２７、２９は、検査対象となる機器の検査順序又は検査項目を示すものである。
【0069】
ステップＳ２０において、スマートグラス３０Ａが、前記識別コード２３、２５、２７、２９を撮影し、撮影画像をサーバ５０Ａに送信することで、撮影された識別コード２３、２５、２７、２９を、サーバ５０Ａの認識部５４が認識する。
【0070】
ステップＳ２２において、スマートグラス３０Ａの出力部３４は、認識部５４で認識された識別コード２３、２５、２７、２９が示す機器の検査順序又は検査項目を表示部３３に出力する。
ここで、認識部５４が、スマートグラス３０Ａに備えられ、スマートグラス３０Ａで撮影された上記識別コード２３、２５、２７、２９の画像を受信し、認識処理を端末側で行い、その結果をスマートグラス３０Ａの出力部３４で出力してもよい。
ここで、認識部５４が、スマートグラス３０Ａに備えられ、スマートグラス３０Ａで撮影された上記識別コード２３、２５、２７、２９の画像を受信し、認識処理を端末側で行い、その結果をスマートグラス３０Ａの出力部３４で出力してもよい。
【0071】
出力イメージは、スマートグラス３０Ａを装着して高圧電力設備１０を見たときに、例えば、機器１２、１４、１６、１８を見ると、表示２２、２４、２６、２８に検査順序が表示される。また、実施形態１と同様に、検査順序とともに、検査項目を併せて表示してもよい。
【0072】
ステップＳ２４において、サーバ５０Ａの判断部５６は、前記複数の機器１２、１４、１６、１８を適切に検査し、検査順序通りに検査が行われたかを、スマートグラス３０によって目視し続けた時間及び目視した時間帯で判断する。
【0073】
このような判断は、サーバ５０Ａとなるコンピュータが、撮影動画をスマートグラス３０Ａから受信して、検査対象をきちんと目視して検査したか、機器を順序通りに検査したかを判断してもよい。
【0074】
検査対象の機器をきちんと目視して検査したかについては、例えば、上述した実施形態１の図３に示すように、機器１２に対応する表示２２の表示枠２２Ａに、スマートグラス３０Ａの視線のポインタ９０が何秒間静止していたかで、作業者２０が目視した時間を計測し、機器１２を目視して検査したかを判断する。
【0075】
また、機器を順序通りに検査したかは、複数の機器１２、１４、１６、１８を撮影した時刻によって判断してもよい。すなわち、機器１２の撮影時刻から機器１８の撮影時刻の順で撮影時刻が遅くなる場合には、機器１２～機器１８までの検査順序が正しかったものと判断する。
【0076】
ここで、検査順序通りに検査したものと判断部５６により判断された場合（ステップＳ２４でＹＥＳ）には、処理フローを終了する。一方、検査順序通りに検査していないと判断部５６により判断されると（ステップＳ２４でＮＯ）、サーバ５０Ａの通知部５７は、判断結果を作業者２０のスマートグラス３０Ａや指示者の端末にネットワーク８０を通じて通知し（ステップＳ２６）、検査順序通りに検査し直すように促し、正しい順序で検査が行われると処理フローを終了する。また、図６では、検査順序の番号をＡＲ表示することとしているが、ナビゲート要素も含めて表示してもよい。例えば、被写体である機器に、ＱＲコード（や何らかの特定の印）が張られている場合、ＱＲコードで確認が取れた場合、次の被写体（機器）を映すことをナビゲートして、次の被写体が撮影されたかどうかを同様の手法で確認してもよい。
【0077】
＜効果＞
このような検査システム１００Ａによれば、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
このような検査システム１００Ａによれば、指示者がリアルタイムで監視しなくても、検査手順が正しく、かつ、検査項目が漏れなく行われたことを担保できる。
【0078】
なお、本実施形態において、認識部５４は、識別コード２３、２５、２７、２９が撮影されることで前記識別コード２３、２５、２７、２９を認識する処理を、事前に撮影された録画データ５８から行ってもよい。
【0079】
以上、実施形態を用いて本発明を説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されないことは言うまでもない。上記実施形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。また、そのような変更または改良を加えた形態も、本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。なお、上記の実施形態では、本発明を物の発明として、検査システムについて説明したが、本発明において検査システムが実行する方法や、検査システムを各種手段として機能させるプログラムの発明と捉えることもできる。また、本発明では、リアルタイムのデータに加えて、録画データでも対応することができ、点検ポイントのみをハイライト再生するようにしてもよい。更に、本発明は、高圧電力設備の機器のみならず、公知の各種の機器全般の検査に適用可能である。
【0080】
また、本発明の検査システムは、以下のような構成とすることができる。
【0081】
(1)現場で作業者が所定の機器を検査するための検査システムであって、検査対象となる複数の機器の画像を記憶する機器画像記憶部と、前記機器の画像を撮影可能な端末から、撮影画像を取得する取得部と、前記端末によって撮影された機器を、前記機器画像記憶部に記憶された画像により認識する認識部と、前記認識部で認識された機器の検査順序又は検査項目を前記端末に出力する出力部と、を備え、前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する構成。
【0082】
(2)現場で作業者が所定の機器を検査するための検査システムであって、検査対象となる複数の機器に各々貼付され、検査対象となる機器の検査順序又は検査項目を示す識別コードと、前記識別コードを撮影可能な端末から、撮影画像を取得する取得部と、前記端末によって撮影された前記撮影画像内の識別コードを認識する認識部と、前記認識部で認識された識別コードが示す検査順序又は検査項目を前記端末に出力する出力部と、を備え、前記端末が、スマートグラスであって、前記複数の機器を、適切に検査し、検査順序通りに検査が行われたかを、目視し続けた時間及び目視した時間帯で判断し、適切に検査し、検査順序通りに検査が行われたかを判断できない場合は、前記端末に通知する構成。
【0083】
(3)前記認識部は、機器が撮影されたことを、事前に撮影された録画データから認識する構成。
【0084】
(4)前記認識部は、前記端末によって撮影された前記撮影画像内の識別コードが撮影されたことで前記識別コードを認識する処理を、事前に撮影された録画データから認識する構成。
【符号の説明】
【0085】
１０：高圧電力設備
１２、１４、１６、１８：機器
２０：作業者
２２、２４、２６、２８：表示
２２Ａ：表示枠
２３、２５、２７、２９：識別コード
３０、３０Ａ：スマートグラス
３１：カメラ
３３：表示部
３４：出力部
３６：制御部
３８：通信部
５０、５０Ａ：サーバ
５２：機器画像記憶部
５３：取得部
５４：認識部
５５：出力部
５６：判断部
５７：通知部
５８：録画データ
６０：制御部
６２：通信部
８０：ネットワーク
９０：ポインタ
１００、１００Ａ：検査システム
１２、１４、１６、１８：機器
２０：作業者
２２、２４、２６、２８：表示
２２Ａ：表示枠
２３、２５、２７、２９：識別コード
３０、３０Ａ：スマートグラス
３１：カメラ
３３：表示部
３４：出力部
３６：制御部
３８：通信部
５０、５０Ａ：サーバ
５２：機器画像記憶部
５３：取得部
５４：認識部
５５：出力部
５６：判断部
５７：通知部
５８：録画データ
６０：制御部
６２：通信部
８０：ネットワーク
９０：ポインタ
１００、１００Ａ：検査システム