知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024016434
(43)【公開日】2024-02-07
(54)【発明の名称】監視装置、及び監視システム
(51)【国際特許分類】
G01N 3/06 20060101AFI20240131BHJP
G06T 7/70 20170101ALI20240131BHJP
【ＦＩ】
G01N3/06
G06T7/70 A
【審査請求】未請求
【請求項の数】6
【出願形態】ＯＬ
(21)【出願番号】P 2022118551
(22)【出願日】2022-07-26
(71)【出願人】
【識別番号】000001993
【氏名又は名称】株式会社島津製作所
(74)【代理人】
【識別番号】110001081
【氏名又は名称】弁理士法人クシブチ国際特許事務所
(72)【発明者】
【氏名】松浦 融
【テーマコード（参考）】
2G061
5L096
【Ｆターム（参考）】
2G061AA01
2G061AB05
2G061BA15
2G061DA10
2G061DA19
2G061EC07
5L096AA06
5L096BA02
5L096CA04
5L096DA02
5L096EA02
5L096EA43
5L096FA69
5L096GA30
5L096GA51
5L096GA55
5L096KA04
(57)【要約】
【課題】カメラの露出が低い場合でも表示器の表示パネルに設けられた非発光のマーカをカメラの撮影画像から検出できるようにする。
【解決手段】監視装置は、表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置であって、前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、前記第１処理画像をぼやけ処理した第２処理画像を生成する第２生成部と、前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、前記第３処理画像から前記マーカを検出する第１検出部と、を備える。
【選択図】図５
【解決手段】監視装置は、表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置であって、前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、前記第１処理画像をぼやけ処理した第２処理画像を生成する第２生成部と、前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、前記第３処理画像から前記マーカを検出する第１検出部と、を備える。
【選択図】図５
【特許請求の範囲】
【請求項1】
表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置であって、
前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、
前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、
前記撮影画像をぼやけ処理した第２処理画像を生成する第２生成部と、
前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、
前記第３処理画像から前記マーカを検出する第１検出部と、を備える、
監視装置。
前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、
前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、
前記撮影画像をぼやけ処理した第２処理画像を生成する第２生成部と、
前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、
前記第３処理画像から前記マーカを検出する第１検出部と、を備える、
監視装置。
【請求項2】
前記第１検出部が検出した前記マーカの前記撮影画像における位置を検出する第２検出部を備え、
前記第２生成部は、前記ぼやけ処理のフィルタパラメータの値を変更し、前記第２検出部が検出すべき前記マーカの全ての位置を検出していない場合、値を変更した前記フィルタパラメータによって前記ぼやけ処理した前記第２処理画像を生成し、
前記第３生成部は、値が変更された前記フィルタパラメータによって前記ぼやけ処理された前記第２処理画像と、前記第１処理画像とに基づいて、前記第３処理画像を再度生成し、
前記第１検出部は、前記第３生成部により再度生成された前記第３処理画像から前記マーカを検出する、
請求項１に記載の監視装置。
前記第２生成部は、前記ぼやけ処理のフィルタパラメータの値を変更し、前記第２検出部が検出すべき前記マーカの全ての位置を検出していない場合、値を変更した前記フィルタパラメータによって前記ぼやけ処理した前記第２処理画像を生成し、
前記第３生成部は、値が変更された前記フィルタパラメータによって前記ぼやけ処理された前記第２処理画像と、前記第１処理画像とに基づいて、前記第３処理画像を再度生成し、
前記第１検出部は、前記第３生成部により再度生成された前記第３処理画像から前記マーカを検出する、
請求項１に記載の監視装置。
【請求項3】
前記フィルタパラメータの値と、前記撮影画像における前記マーカの位置と、当該位置に前記マーカが存在する存在確率と、の関係を機械学習により学習させた学習済みモデルを備え、
前記第２生成部は、前記フィルタパラメータの入力によって前記学習済みモデルが出力した前記存在確率に基づいて、前記フィルタパラメータの値を変更する、
請求項２に記載の監視装置。
前記第２生成部は、前記フィルタパラメータの入力によって前記学習済みモデルが出力した前記存在確率に基づいて、前記フィルタパラメータの値を変更する、
請求項２に記載の監視装置。
【請求項4】
前記第２生成部は、前記存在確率を用いた勾配降下法によって、前記フィルタパラメータの値を変更する、
請求項３に記載の監視装置。
請求項３に記載の監視装置。
【請求項5】
前記第１検出部が検出した前記マーカの前記撮影画像における位置を検出する第２検出部と、
前記第２検出部が検出した前記マーカの位置に基づいて、前記表示パネルの所定領域を特定する特定部と、を備える、
請求項１から４のいずれか一項に記載の監視装置。
前記第２検出部が検出した前記マーカの位置に基づいて、前記表示パネルの所定領域を特定する特定部と、を備える、
請求項１から４のいずれか一項に記載の監視装置。
【請求項6】
表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置と、前記表示パネルを撮影するカメラとを有する監視システムであって、
前記監視装置は、
前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、
前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、
前記撮影画像をぼやけ処理した第２処理画像を生成する第２生成部と、
前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、
前記第３処理画像から前記マーカを検出する第１検出部と、を備える、
監視システム。
前記監視装置は、
前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、
前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、
前記撮影画像をぼやけ処理した第２処理画像を生成する第２生成部と、
前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、
前記第３処理画像から前記マーカを検出する第１検出部と、を備える、
監視システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、監視装置、及び監視システムに関する。
【背景技術】
【0002】
従来、材料試験機の動作状態や試験データをコンピュータによって管理する技術が提案されている。例えば、特許文献１は、試験デバイスと通信を行うことによって、試験デバイスのステータスに関するデータや試験データを取得する遠隔プラットフォームを開示している。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特表２０１６－５４１０３６号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
従来の技術において、材料試験機が備える表示器をカメラで撮影し、カメラの撮影画像によって表示器の表示パネルを遠隔で監視することが考え得る。また、この監視に際して、所定の用途のために、カメラの撮影画像から表示パネルが有するマーカを検出することも考え得る。しかしながら、表示パネルが有するマーカが非発光のマーカである場合、カメラの露出が低く設定されているとカメラの撮影画像においてはマーカが暗く写ってしまい、カメラの撮影画像からマーカを検出できない可能性がある。ここで、カメラの露出を高く設定することが考えられるが、カメラの露出を高くすると外乱光の影響が撮影画像に生じ得るため、表示パネルの監視に用いる撮影画像としては不適切な撮影画像となり得る。
【0005】
本発明は、このような事情に鑑みなされたものであり、カメラの露出が低い場合でも表示器の表示パネルが有する非発光のマーカをカメラの撮影画像から検出できるようにすることを目的とする。
【課題を解決するための手段】
【0006】
本発明の第１の態様は、表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置であって、前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、前記第１処理画像をぼやけ処理した第２処理画像を生成する第２生成部と、前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、前記第３処理画像から前記マーカを検出する第１検出部と、を備える、監視装置に関する。
【0007】
本発明の第２の態様は、表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置と、前記表示パネルを撮影するカメラとを有する監視システムであって、前記監視装置は、前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、前記第１処理画像をぼやけ処理した第２処理画像を生成する第２生成部と、前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、前記第３処理画像から前記マーカを検出する第１検出部と、を備える、監視システムに関する。
【発明の効果】
【0008】
本発明の第１の態様によれば、第１検出部が検出に用いる画像において非発光のマーカを強調して写すことができる。そのため、カメラの露出が低い場合でも表示器の表示パネルが有する非発光のマーカをカメラの撮影画像から検出できる。
【0009】
本発明の第２の態様によれば、本発明の第１の態様と同様の効果を奏する。
【図面の簡単な説明】
【0010】
【図1】監視システムの構成の一例を示す図である。
【図2】疲労試験機の構成の一例を示す図である。
【図3】表示パネルの構成の一例を示す図である。
【図4】マーカの一例を示す図である。
【図5】サーバ装置の構成の一例を示す図である。
【図6】グレーススケール画像の一例を示す図である。
【図7】ぼやけ処理画像の一例を示す図である。
【図8】２値化画像の一例を示す図である。
【図9】特定部、及び画像処理部の処理の一例を示す図である。
【図10】第１画面の一例を示す図である。
【図11】第２画面の一例を示す図である。
【図12】サーバ装置の動作を示すフローチャートである。
【図13】２値化画像の一例を示す図である。
【図14】サーバ装置の動作を示すフローチャートである。
【図15】サーバ装置の構成の一例を示す図である。
【図16】サーバ装置の動作を示すフローチャートである。
【発明を実施するための形態】
【0011】
［１．第１実施形態］
まず、第１実施形態について説明する。
［１－１．監視システムの構成］
図１は、本実施形態に係る監視システム１００の構成の一例を示す図である。
監視システム１００は、疲労試験機１を監視対象とするシステムである。図１では、監視システム１００が１台の疲労試験機１を監視対象とする構成を例示する。なお、本実施形態では、監視システム１００が１台の疲労試験機１を監視する場合について説明するが、監視対象の疲労試験機１の台数は１台に限定されない。監視システム１００の監視対象の疲労試験機１の台数は、複数台でもよい。
疲労試験機１は、「材料試験機」の一例に対応する。
まず、第１実施形態について説明する。
［１－１．監視システムの構成］
図１は、本実施形態に係る監視システム１００の構成の一例を示す図である。
監視システム１００は、疲労試験機１を監視対象とするシステムである。図１では、監視システム１００が１台の疲労試験機１を監視対象とする構成を例示する。なお、本実施形態では、監視システム１００が１台の疲労試験機１を監視する場合について説明するが、監視対象の疲労試験機１の台数は１台に限定されない。監視システム１００の監視対象の疲労試験機１の台数は、複数台でもよい。
疲労試験機１は、「材料試験機」の一例に対応する。
【0012】
監視システム１００は、疲労試験機１を備える。
疲労試験機１は、試験機本体１０、及び制御装置２０を備える。疲労試験機１は、試験機本体１０を制御装置２０によって制御することによって、試験片ＳＰの疲労試験を行う。例えば、疲労試験機１は、試験片ＳＰに引張応力を繰り返し印加する。引張応力、及び繰り返し回数は、予め設定される。繰り返し回数は、例えば、１０２回～１０８回である。
制御装置２０は、「表示器」の一例に対応する。
疲労試験機１は、試験機本体１０、及び制御装置２０を備える。疲労試験機１は、試験機本体１０を制御装置２０によって制御することによって、試験片ＳＰの疲労試験を行う。例えば、疲労試験機１は、試験片ＳＰに引張応力を繰り返し印加する。引張応力、及び繰り返し回数は、予め設定される。繰り返し回数は、例えば、１０２回～１０８回である。
制御装置２０は、「表示器」の一例に対応する。
【0013】
監視システム１００は、第１カメラ２、第２カメラ３、第３カメラ４、及びサーバ装置５を備える。第３カメラ４は、「カメラ」の一例に対応する。
第１カメラ２、及び第２カメラ３は、試験機本体１０を撮影する。第３カメラ４は、制御装置２０を撮影する。
本実施形態では、監視システム１００が、監視対象の１台の疲労試験機１につき、３台のカメラを備える場合について説明するが、これに限定されない。監視システム１００は、監視対象の１台の疲労試験機１につき、１台、２台、又は４台以上のカメラを備えてもよい。
以下の説明において、第１カメラ２、第２カメラ３、及び第３カメラ４を区別しない場合、「カメラ６」と表記する。
第１カメラ２、及び第２カメラ３は、試験機本体１０を撮影する。第３カメラ４は、制御装置２０を撮影する。
本実施形態では、監視システム１００が、監視対象の１台の疲労試験機１につき、３台のカメラを備える場合について説明するが、これに限定されない。監視システム１００は、監視対象の１台の疲労試験機１につき、１台、２台、又は４台以上のカメラを備えてもよい。
以下の説明において、第１カメラ２、第２カメラ３、及び第３カメラ４を区別しない場合、「カメラ６」と表記する。
【0014】
カメラ６は、所定の撮影範囲を撮影するデジタルカメラである。カメラ６は、静止画像を撮影するデジタルスチルカメラでもよいし、動画像を撮影するデジタルビデオカメラでもよい。カメラ６は、通信機能を有し、ネットワークＮＷ１を介したデータ通信を行う。カメラ６は、撮影した場合に、ネットワークＮＷ１を介してサーバ装置５に撮影画像の画像データを送信する。
【0015】
なお、本実施形態では、カメラ６が通信機能を有する場合について説明するが、これに限定されない。カメラ６の少なくともいずれかは、通信機能を有しない構成でもよい。この場合、カメラ６の少なくともいずれかは、不図示のコンピュータに接続される。当該コンピュータは、ネットワークＮＷ１を介してデータ通信を実行可能な通信機能、及び、接続するカメラ６を制御する機能を有する。当該コンピュータは、例えば、パーソナルコンピュータ、タブレット型コンピュータ、スマートフォンである。この場合、コンピュータに接続するカメラ６は、コンピュータの制御に従って撮影を実行し、このコンピュータが撮影画像の画像データをサーバ装置５に送信する。
【0016】
ネットワークＮＷ１は、ネットワークＮＷ２を介して、カメラ６、及びサーバ装置５を通信可能に接続する。カメラ６は、ネットワークＮＷ１に接続され、ネットワークＮＷ１は、ネットワークＮＷ２と、不図示のルータやゲートウェイ、或いは他の通信ネットワークを介して接続される。ネットワークＮＷ１は、ネットワークＮＷ２に接続される。サーバ装置５は、ネットワークＮＷ２に接続される。
サーバ装置５は、「監視装置」の一例に対応する。
サーバ装置５は、「監視装置」の一例に対応する。
【0017】
ネットワークＮＷ１は、例えば、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）である。ネットワークＮＷ１は、例えば、Ｅｔｈｅｒｎｅｔ（登録商標）規格のケーブル、不図示のルータ、ゲートウェイ等を含む。なお、ネットワークＮＷ１は、Ｗｉ－Ｆｉ（登録商標）等の無線通信回線でもよい。ネットワークＮＷ２は、ネットワークＮＷ１を介して、カメラ６、及びサーバ装置５を通信可能に接続する。ネットワークＮＷ２は、例えば、インターネット等のグローバルネットワークである。なお、ネットワークＮＷ２は、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）でもよい。
【0018】
サーバ装置５は、通信機能を有するサーバコンピュータである。サーバ装置５は、複数のサーバコンピュータによって構成されてもよく、例えば、クラウドサーバであってもよい。サーバ装置５は、いわゆるアプリケーションサーバである。サーバ装置５は、例えば、監視室に配置される。監視室では、例えば、サーバ装置５において、表示部５６に表示される画面を監視することによって、ユーザが、疲労試験機１を監視する。
【0019】
［１－２．疲労試験機の構成］
図２は、疲労試験機１の構成の一例を示す図である。
試験機本体１０は、制御装置２０からの指示に従って、試験片ＳＰの疲労試験を行う。制御装置２０は、試験機本体１０の動作を制御する。
図２は、疲労試験機１の構成の一例を示す図である。
試験機本体１０は、制御装置２０からの指示に従って、試験片ＳＰの疲労試験を行う。制御装置２０は、試験機本体１０の動作を制御する。
【0020】
図２に示すように、試験機本体１０は、基台１１上に、一対の支柱１２Ａ、１２Ｂと、ヨーク１３と、によって負荷枠を形成し、支柱１２Ａ、１２Ｂに、クロスヘッド１４を移動可能に備える。
【0021】
基台１１には、油圧アクチュエータ１５が配置され、油圧アクチュエータ１５のピストンロッド１５Ａには、試験片ＳＰの下端を固定する下部治具１６Ａが取り付けられる。また、クロスヘッド１４には、ロードセル１７を介して、試験片ＳＰの上端を固定する上部治具１６Ｂが取り付けられる。下部治具１６Ａ、及び上部治具１６Ｂの各々は、試験片ＳＰを把持するチャック機構を備える。
ロードセル１７は、試験片ＳＰに作用する試験力を検出する。
ロードセル１７は、試験片ＳＰに作用する試験力を検出する。
【0022】
油圧アクチュエータ１５は、サーボ弁１８によって、圧油方向と圧油量とが制御されて、ピストンロッド１５Ａが伸縮する。その結果、上部治具１６Ｂと下部治具１６Ａとの間に固定された試験片ＳＰに試験力が印加される。油圧アクチュエータ１５のストローク、すなわち試験片ＳＰの変位は、油圧アクチュエータ１５に取り付けられた差動トランス１９によって検出される。
【0023】
試験機本体１０には、不図示の電力源及び油圧源が設けられる。電力源は、試験機本体１０の各部に電力を供給する。電力源は、例えば各種モータに電力を供給し、駆動する。油圧源は、試験機本体１０を構成する油圧装置に油圧を供給する。油圧源は、例えば、油圧アクチュエータ１５に油圧を供給し、油圧アクチュエータ１５を駆動する。すなわち、油圧アクチュエータ１５は、油圧源から供給される油圧によって駆動され、ピストンロッド１５Ａが伸縮される。油圧源は、例えば、油圧ポンプ及び油圧制御弁を備え、油圧ポンプを駆動することによって油圧を発生する。油圧制御弁は、油圧源から出力する油圧を調整する。油圧ポンプ及び油圧制御弁には、電力源から電力が供給される。
【0024】
制御装置２０は、ロードセル１７から出力される試験力信号ＦＳを取得し、試験力信号ＦＳをＡ／Ｄ変換して試験力情報を生成する。制御装置２０は、差動トランス１９から出力される変位信号ＤＳを取得し、変位信号ＤＳをＡ／Ｄ変換して変位情報を生成する。制御装置２０は、試験力情報、及び変位情報に基づいて、指令情報を生成する。制御装置２０は、指令情報をＤ／Ａ変換することによって指令信号ＣＳを生成し、生成した指令信号ＣＳをサーボ弁１８に出力する。
【0025】
サーボ弁１８は、制御装置２０から出力される指令信号ＣＳに従って、油圧アクチュエータ１５に対して、圧油方向と圧油量とを制御する。
【0026】
制御装置２０は、ディスプレイ３０を有する。ディスプレイ３０は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）等によって構成される。制御装置２０は、試験機本体１０から取得した試験力情報、変位情報、及び試験機本体１０に出力した指令情報を、ディスプレイ３０に表示する。
【0027】
図２において、試験機本体１０と制御装置２０との間に、試験力信号ＦＳ、変位信号ＤＳ、及び指令信号ＣＳの各々を増幅する増幅器を配置してもよい。
【0028】
第１カメラ２は、試験機本体１０の撮影範囲ＰＡ１を撮影する。撮影範囲ＰＡ１は、試験機本体１０のほぼ全体を含む。
第２カメラ３は、試験機本体１０の撮影範囲ＰＡ２を撮影する。撮影範囲ＰＡ２は、試験機本体１０に装着された試験片ＳＰを含む。具体的には、撮影範囲ＰＡ２は、上部治具１６Ｂ、下部治具１６Ａ、及び試験片ＳＰを含む。
第３カメラ４は、制御装置２０の撮影範囲ＰＡ３を撮影する。撮影範囲ＰＡ３は、制御装置２０の筐体においてディスプレイ３０が設けられた表示パネル２１の全体を含む。
以下の説明において、第１カメラ２の撮影により得られた撮影画像を、「試験機本体撮影画像」といい「Ｐ１」の符号を付す。また、第２カメラ３の撮影により得られた撮影画像を、「試験片撮影画像」といい「Ｐ２」の符号を付す。また、第３カメラ４の撮影により得られた撮影画像を、「パネル撮影画像」といい「Ｐ３」の符号を付す。
第２カメラ３は、試験機本体１０の撮影範囲ＰＡ２を撮影する。撮影範囲ＰＡ２は、試験機本体１０に装着された試験片ＳＰを含む。具体的には、撮影範囲ＰＡ２は、上部治具１６Ｂ、下部治具１６Ａ、及び試験片ＳＰを含む。
第３カメラ４は、制御装置２０の撮影範囲ＰＡ３を撮影する。撮影範囲ＰＡ３は、制御装置２０の筐体においてディスプレイ３０が設けられた表示パネル２１の全体を含む。
以下の説明において、第１カメラ２の撮影により得られた撮影画像を、「試験機本体撮影画像」といい「Ｐ１」の符号を付す。また、第２カメラ３の撮影により得られた撮影画像を、「試験片撮影画像」といい「Ｐ２」の符号を付す。また、第３カメラ４の撮影により得られた撮影画像を、「パネル撮影画像」といい「Ｐ３」の符号を付す。
【0029】
［１－３．表示面の構成］
図３は、表示パネル２１の構成の一例を示す図である。表示パネル２１は、制御装置２０へのユーザの操作を受け付けると共に、疲労試験機１の動作又は状態を示す種々の情報を表示する。
図３は、表示パネル２１の構成の一例を示す図である。表示パネル２１は、制御装置２０へのユーザの操作を受け付けると共に、疲労試験機１の動作又は状態を示す種々の情報を表示する。
【0030】
図３に示すように、表示パネル２１は、電源スイッチ２１０、ファンクションキー２１１、及びダイヤル２１２を備える。電源スイッチ２１０は、制御装置２０の電源のオン操作及びオフ操作を受け付ける。ファンクションキー２１１は、制御装置２０に特定の機能の実行を指示する操作を受け付ける。ダイヤル２１２は、設定値の変更等の操作を受け付ける。
【0031】
表示パネル２１は、設定キー２１３、テンキー２１４、及び非常停止スイッチ２１５を更に備える。設定キー２１３は、制御装置２０の動作を設定する操作を受け付ける。テンキー２１４は、数値を入力する操作を受け付ける。非常停止スイッチ２１５は、疲労試験機１を非常停止する操作を受け付ける。
【0032】
表示パネル２１は、ディスプレイ３０、パワーユニット操作キー３１、及び試験操作キー３２を更に備える。パワーユニット操作キー３１は、疲労試験機１の油圧源に対する操作を受け付ける。試験操作キー３２は、疲労試験機１における材料試験の開始、及び停止を指示する操作を受け付ける。ディスプレイ３０は、例えば、ＬＣＤ等で構成されるディスプレイと、ディスプレイの表示面に配置されたタッチセンサと、を備えたタッチパネルとして構成される。
【0033】
ディスプレイ３０には、疲労試験機１が実行している疲労試験での試験力、ピストン変位、疲労試験終了までの残り時間等の種々の情報が表示される。
ディスプレイ３０の表示画面は、サイクル数表示部３０１と、特定記号表示部３０２と、試験状態表示部３０３と、を含む。
サイクル数表示部３０１は、疲労試験におけるサイクル数を表示する。
特定記号表示部３０２は、予め定められた特定記号（例えば、アイコン）を表示する。
試験状態表示部３０３は、疲労試験機１において疲労試験が実行されているか否かを表示する。試験状態表示部３０３には、例えば、所定の背景色に重ねて「試験中」または「停止中」の文字が表示される。
ディスプレイ３０の表示画面は、サイクル数表示部３０１と、特定記号表示部３０２と、試験状態表示部３０３と、を含む。
サイクル数表示部３０１は、疲労試験におけるサイクル数を表示する。
特定記号表示部３０２は、予め定められた特定記号（例えば、アイコン）を表示する。
試験状態表示部３０３は、疲労試験機１において疲労試験が実行されているか否かを表示する。試験状態表示部３０３には、例えば、所定の背景色に重ねて「試験中」または「停止中」の文字が表示される。
【0034】
パワーユニット操作キー３１は、起動ボタン３１１と、停止ボタン３１２と、マニフォールドボタン３１３と、加圧ボタン３１４とを有する。起動ボタン３１１は、油圧ポンプを起動する操作を受け付ける。停止ボタン３１２は、油圧ポンプを停止する操作を受け付ける。
マニフォールドボタン３１３は、配管バルブを開状態、及び閉状態にする操作を受け付ける。配管バルブは、油圧ポンプとロードバルブとの間の油圧配管に配置される。また、加圧ボタン３１４は、ロードバルブを開状態、及び閉状態にする操作を受け付ける。ロードバルブは、配管バルブとサーボ弁１８との間の油圧配管に配置される。
マニフォールドボタン３１３は、配管バルブを開状態、及び閉状態にする操作を受け付ける。配管バルブは、油圧ポンプとロードバルブとの間の油圧配管に配置される。また、加圧ボタン３１４は、ロードバルブを開状態、及び閉状態にする操作を受け付ける。ロードバルブは、配管バルブとサーボ弁１８との間の油圧配管に配置される。
【0035】
起動ボタン３１１は、表示ランプ３１１Ａを有し、停止ボタン３１２は、表示ランプ３１２Ｂを有し、マニフォールドボタン３１３は、表示ランプ３１３Ｃを有し、加圧ボタン３１４は、表示ランプ３１４Ｄを有する。
表示ランプ３１１Ａ、表示ランプ３１２Ｂ、表示ランプ３１３Ｃ、及び表示ランプ３１４Ｄの各々は、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等で構成される。表示ランプ３１１Ａ、表示ランプ３１２Ｂ、表示ランプ３１３Ｃ、及び表示ランプ３１４Ｄの各々は、複数のＬＥＤを備え、２色以上の点灯色を選択的に点灯することのできるものであってもよい。
表示ランプ３１１Ａ、表示ランプ３１２Ｂ、表示ランプ３１３Ｃ、及び表示ランプ３１４Ｄの各々は、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等で構成される。表示ランプ３１１Ａ、表示ランプ３１２Ｂ、表示ランプ３１３Ｃ、及び表示ランプ３１４Ｄの各々は、複数のＬＥＤを備え、２色以上の点灯色を選択的に点灯することのできるものであってもよい。
【0036】
油圧ポンプが起動している場合には、表示ランプ３１１Ａが点灯し、油圧ポンプが停止している場合には、表示ランプ３１１Ａが消灯する。
油圧ポンプが起動している場合には、表示ランプ３１２Ｂが消灯し、油圧ポンプが停止している場合には、表示ランプ３１２Ｂが点灯する。
配管バルブが開状態の場合には、表示ランプ３１３Ｃが点灯し、配管バルブが閉状態の場合には、表示ランプ３１３Ｃが消灯する。
ロードバルブが開状態の場合には、表示ランプ３１４Ｄが点灯し、ロードバルブが閉状態の場合には、表示ランプ３１４Ｄが消灯する。
油圧ポンプが起動している場合には、表示ランプ３１２Ｂが消灯し、油圧ポンプが停止している場合には、表示ランプ３１２Ｂが点灯する。
配管バルブが開状態の場合には、表示ランプ３１３Ｃが点灯し、配管バルブが閉状態の場合には、表示ランプ３１３Ｃが消灯する。
ロードバルブが開状態の場合には、表示ランプ３１４Ｄが点灯し、ロードバルブが閉状態の場合には、表示ランプ３１４Ｄが消灯する。
【0037】
表示ランプ３１１Ａ、表示ランプ３１２Ｂ、表示ランプ３１３Ｃ、及び表示ランプ３１４Ｄは、点灯態様の組み合わせによって、疲労試験機１における油圧源状態、すなわち、油圧源の動作の状態を表示する。
【0038】
試験操作キー３２は、開始キー３２１と停止キー３２２とを有する。開始キー３２１は、表示ランプ３２１Ａを有し、停止キー３２２は、表示ランプ３２２Ｂを有する。
表示ランプ３２１Ａ、及び表示ランプ３２２Ｂの各々は、ＬＥＤ等で構成される。表示ランプ３２１Ａ、及び表示ランプ３２２Ｂの各々は、複数のＬＥＤを備え、２色以上の点灯色を選択的に点灯することのできるものであってもよい。
疲労試験機１は疲労試験を実行している場合には、表示ランプ３２１Ａが点灯し、疲労試験機１は疲労試験を実行していない場合には、表示ランプ３２１Ａが消灯する。
疲労試験機１は疲労試験を実行している場合には、表示ランプ３２２Ｂが消灯し、疲労試験機１は疲労試験を実行していない場合には、表示ランプ３２２Ｂが点灯する。
表示ランプ３２１Ａ、及び表示ランプ３２２Ｂの各々は、ＬＥＤ等で構成される。表示ランプ３２１Ａ、及び表示ランプ３２２Ｂの各々は、複数のＬＥＤを備え、２色以上の点灯色を選択的に点灯することのできるものであってもよい。
疲労試験機１は疲労試験を実行している場合には、表示ランプ３２１Ａが点灯し、疲労試験機１は疲労試験を実行していない場合には、表示ランプ３２１Ａが消灯する。
疲労試験機１は疲労試験を実行している場合には、表示ランプ３２２Ｂが消灯し、疲労試験機１は疲労試験を実行していない場合には、表示ランプ３２２Ｂが点灯する。
【0039】
表示ランプ３２１Ａ、及び表示ランプ３２２Ｂは、これらの点灯態様の組み合わせによって疲労試験機１における疲労試験の試験状態、すなわち、試験中であるか停止中であるかを表示する。
【0040】
ユーザが開始キー３２１を押下すると、疲労試験機１は疲労試験を開始し、ディスプレイ３０の試験状態表示部３０３に「試験中」の文字が表示される。また、ユーザが停止キー３２２を押下すると、疲労試験機１は実行中の試験動作を停止し、ディスプレイ３０の試験状態表示部３０３に「停止中」の文字が表示される。
【0041】
ディスプレイ３０は、矩形の第１表示器領域３３に配置される。第１表示器領域３３とは、表示パネル２１においてディスプレイ３０が配置される領域である。
第１表示器領域３３は、「所定領域」の一例を示す。
第１表示器領域３３は、「所定領域」の一例を示す。
【0042】
図３において、第１表示器領域３３の４隅の各々には、マーカＭＫが設けられている。具体的に、第１表示器領域３３の左上隅には、マーカＭＫ１が配置される。第１表示器領域３３の右上隅には、マーカＭＫ２が配置される。第１表示器領域３３の右下隅には、マーカＭＫ３が配置される。第１表示器領域３３の左下隅には、マーカＭＫ４が配置される。
【0043】
パワーユニット操作キー３１は、矩形の第２表示器領域３４に配置される。第２表示器領域３４は、表示パネル２１においてパワーユニット操作キー３１が配置される領域である。
第２表示器領域３４は、「所定領域」の一例を示す。
第２表示器領域３４は、「所定領域」の一例を示す。
【0044】
図３において、第２表示器領域３４の２つの隅には、マーカＭＫが設けられている。具体的には、第２表示器領域３４の右上隅には、マーカＭＫ５が配置される。また、第２表示器領域３４の左下隅には、マーカＭＫ６が配置される。
【0045】
試験操作キー３２は、矩形の第３表示器領域３５に配置される。第３表示器領域３５は、表示パネル２１において試験操作キー３２が配置される領域である。
第３表示器領域３５は、「所定領域」の一例を示す。
第３表示器領域３５は、「所定領域」の一例を示す。
【0046】
図３において、第３表示器領域３５の２つの隅には、マーカＭＫが設けられている。具体的に、第３表示器領域３５の右上隅には、マーカＭＫ７が配置される。また、第３表示器領域３５の左下隅には、マーカＭＫ８が配置される。
【0047】
表示パネル２１に設けられているマーカＭＫの各々は、非発光のマーカである。つまり、マーカＭＫの各々は、自発光しない。本実施形態のマーカＭＫは、矩形であるが、形状は矩形に限定されない。マーカＭＫの各々は、例えば、表示パネル２１に予め貼付されるラベルである。なお、マーカＭＫの各々は、表示パネル２１に予め印刷されてもよい。
【0048】
図４は、マーカＭＫの一例を示す図である。
マーカＭＫは、白色の領域と黒色の領域とを有する。マーカＭＫの外縁部は、白色の領域で構成される。マーカＭＫの外縁部の内側には、コードが形成されている。本実施形態においてコードは、白色の領域と黒色の領域とにより構成される。マーカＭＫに形成されているコードは、マーカＭＫに対応する表示器領域（第１表示器領域３３、第２表示器領域３４、及び第３表示器領域３５）の識別コードを示す。また、マーカＭＫに形成されているコードは、対応するマーカＭＫが、対応する表示器領域のどの位置に配置されるかを示す情報、例えば、その表示器領域の「左上」、「右上」、「右下」、又は「左下」等の情報を含む。
マーカＭＫは、白色の領域と黒色の領域とを有する。マーカＭＫの外縁部は、白色の領域で構成される。マーカＭＫの外縁部の内側には、コードが形成されている。本実施形態においてコードは、白色の領域と黒色の領域とにより構成される。マーカＭＫに形成されているコードは、マーカＭＫに対応する表示器領域（第１表示器領域３３、第２表示器領域３４、及び第３表示器領域３５）の識別コードを示す。また、マーカＭＫに形成されているコードは、対応するマーカＭＫが、対応する表示器領域のどの位置に配置されるかを示す情報、例えば、その表示器領域の「左上」、「右上」、「右下」、又は「左下」等の情報を含む。
【0049】
マーカＭＫ１、ＭＫ２、ＭＫ３、ＭＫ４に形成されたコードの各々は、第１表示器領域３３の識別コードと、第１表示器領域３３におけるそれぞれの位置を示す情報とを含む。例えば、マーカＭＫ１に形成されたコードは、第１表示器領域３３の識別コードと、第１表示器領域３３における「左上」を示す情報とを含む。
マーカＭＫ５、ＭＫ６に形成されたコードの各々は、第２表示器領域３４の識別コードと、第２表示器領域３４におけるそれぞれの位置を示す情報とを含む。
マーカＭＫ７、ＭＫ８に形成されたコードの各々は、第３表示器領域３５の識別コードと、第３表示器領域３５におけるそれぞれの位置を示す情報とを含む。
マーカＭＫ５、ＭＫ６に形成されたコードの各々は、第２表示器領域３４の識別コードと、第２表示器領域３４におけるそれぞれの位置を示す情報とを含む。
マーカＭＫ７、ＭＫ８に形成されたコードの各々は、第３表示器領域３５の識別コードと、第３表示器領域３５におけるそれぞれの位置を示す情報とを含む。
【0050】
［１－４．サーバ装置の構成］
図５は、サーバ装置５の構成の一例を示す図である。
サーバ装置５は、ネットワークＮＷ１、ＮＷ２を介して、第１カメラ２、第２カメラ３、及び第３カメラ４と通信可能に接続される。
サーバ装置５は、プロセッサ５０、メモリ５２、入力部５４、表示部５６、及び、通信インターフェース５８を備える。
図５は、サーバ装置５の構成の一例を示す図である。
サーバ装置５は、ネットワークＮＷ１、ＮＷ２を介して、第１カメラ２、第２カメラ３、及び第３カメラ４と通信可能に接続される。
サーバ装置５は、プロセッサ５０、メモリ５２、入力部５４、表示部５６、及び、通信インターフェース５８を備える。
【0051】
プロセッサ５０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＭＰＵ（Ｍｉｃｒｏ－Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等で構成される。メモリ５２は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＨＤＤ、ＳＳＤ等で構成される。メモリ５２は、制御プログラム５２１、マーカ画像データ５２２、第１学習済みモデル５２３、及び第２学習済みモデル５２４を記憶する。
マーカ画像データ５２２、第１学習済みモデル５２３、及び第２学習済みモデル５２４については、後述する。
マーカ画像データ５２２、第１学習済みモデル５２３、及び第２学習済みモデル５２４については、後述する。
【0052】
入力部５４は、ユーザが使用する各種スイッチやキーを備える。入力部５４は、ユーザが使用する入力デバイスに接続され、入力デバイスに対する操作を検出することによって、ユーザの入力を受け付ける構成であってもよい。入力デバイスとしては、例えば、マウスやトラックパッド等のポインティングデバイス、及び、キーボードが挙げられる。
【0053】
表示部５６は、ＬＣＤ等のディスプレイを備える。表示部５６は、プロセッサ５０の制御に従って、後述の第１画面８００及び第２画面９００を含む種々の画面を表示する。入力部５４は、表示部５６の表示面に重畳して配置されたタッチセンサを備えてもよい。
【0054】
通信インターフェース５８は、ネットワークＮＷ２に接続され、ネットワークＮＷ２及びネットワークＮＷ１を介して、カメラ６と通信を実行する。通信インターフェース５８は、例えば、通信ケーブルを接続可能なコネクタ、及び通信回路を備える。通信インターフェース５８は、無線通信インターフェースを備え、無線通信を実行する構成でもよい。
【0055】
プロセッサ５０は、メモリ５２に記憶された制御プログラム５２１を実行することによって、サーバ装置５は、取得部５０１、第１画像生成部５０２、第２画像生成部５０３、第３画像生成部５０４、第１検出部５０５、第２検出部５０６、特定部５０７、画像処理部５０８、試験値生成部５０９、判定部５１０、及び表示制御部５１１として機能する。
また、メモリ５２は、プロセッサ５０が制御プログラム５２１を実行することによって、マーカ位置記憶部５２５、及び画像記憶部５２６として機能させる。
第１画像生成部５０２は、「第１生成部」の一例である。第２画像生成部５０３は、「第２生成部」の一例である。第３画像生成部５０４は、「第３生成部」の一例である。
また、メモリ５２は、プロセッサ５０が制御プログラム５２１を実行することによって、マーカ位置記憶部５２５、及び画像記憶部５２６として機能させる。
第１画像生成部５０２は、「第１生成部」の一例である。第２画像生成部５０３は、「第２生成部」の一例である。第３画像生成部５０４は、「第３生成部」の一例である。
【0056】
マーカ位置記憶部５２５は、マーカＭＫごとに、パネル撮影画像Ｐ３におけるマーカＭＫの位置を情報として記憶する。具体的に、マーカ位置記憶部５２５は、マーカＭＫごとに、パネル撮影画像Ｐ３に定義された座標系におけるマーカＭＫの座標を、マーカＭＫの位置として記憶する。
【0057】
画像記憶部５２６は、取得部５０１が取得した撮影画像を記憶する。画像記憶部５２６が記憶する撮影画像には、試験機本体撮影画像Ｐ１、試験片撮影画像Ｐ２、及びパネル撮影画像Ｐ３が含まれる。
【0058】
取得部５０１は、カメラ６から撮影画像を取得する。具体的に、取得部５０１は、通信インターフェース３５８を介して、カメラ６から撮影画像の画像データを受信する。なお、取得部５０１は、カメラ６が撮影画像を生成する度に、カメラ６から撮影画像を取得してもよい。
【0059】
第１画像生成部５０２は、グレースケール画像Ｐ４を生成する。
図６は、グレースケール画像Ｐ４の一例を示す図である。
グレースケール画像Ｐ４は、取得部５０１が取得したパネル撮影画像Ｐ３をグレースケール化した画像である。本実施形態では、パネル撮影画像Ｐ３に写る表示パネル２１は、台形状に歪んでいる。これは、第３カメラ４の光軸に対して表示パネル２１の法線方向が傾いているためである。そのため、図６に示すように、グレースケール画像Ｐ４に写る表示パネル２１は、台形状に歪んでいる。
グレースケール画像Ｐ４は、「第１処理画像」の一例である。
図６は、グレースケール画像Ｐ４の一例を示す図である。
グレースケール画像Ｐ４は、取得部５０１が取得したパネル撮影画像Ｐ３をグレースケール化した画像である。本実施形態では、パネル撮影画像Ｐ３に写る表示パネル２１は、台形状に歪んでいる。これは、第３カメラ４の光軸に対して表示パネル２１の法線方向が傾いているためである。そのため、図６に示すように、グレースケール画像Ｐ４に写る表示パネル２１は、台形状に歪んでいる。
グレースケール画像Ｐ４は、「第１処理画像」の一例である。
【0060】
第２画像生成部５０３は、ぼやけ処理画像Ｐ５を生成する。
図７は、ぼやけ処理画像Ｐ５の一例を示す図である。
ぼやけ処理画像Ｐ５は、第１画像生成部５０２が生成したグレースケール画像Ｐ４をぼやけ処理した画像である。ぼやけ処理とは、画像をぼやかせる処理である。ぼやけ処理には、画像の画素を平準化するぼかし処理や、中央値フィルタによるフィルタ処理を含む。本実施形態の第２画像生成部５０３は、ガウシアンフィルタによってグレースケール画像Ｐ４をぼやけ処理し、グレースケール画像Ｐ４の各画素が平滑化されたぼやけ処理画像Ｐ５を生成する。
図７は、ぼやけ処理画像Ｐ５の一例を示す図である。
ぼやけ処理画像Ｐ５は、第１画像生成部５０２が生成したグレースケール画像Ｐ４をぼやけ処理した画像である。ぼやけ処理とは、画像をぼやかせる処理である。ぼやけ処理には、画像の画素を平準化するぼかし処理や、中央値フィルタによるフィルタ処理を含む。本実施形態の第２画像生成部５０３は、ガウシアンフィルタによってグレースケール画像Ｐ４をぼやけ処理し、グレースケール画像Ｐ４の各画素が平滑化されたぼやけ処理画像Ｐ５を生成する。
【0061】
第２画像生成部５０３は、ぼやけ処理画像Ｐ５の生成に用いるぼやけ処理のフィルタパラメータの値を、変更する。本実施形態では、フィルタパラメータとしてフィルタサイズを例示する。フィルタサイズの値の変更については、後述する。
【0062】
第３画像生成部５０４は、２値化画像Ｐ６を生成する。
図８は、２値化画像Ｐ６の一例を示す図である。
２値化画像Ｐ６は、第１画像生成部５０２が生成したグレースケール画像Ｐ４を、第２画像生成部５０３が生成したぼやけ処理画像Ｐ５に基づき２値化した画像である。第３画像生成部５０４は、座標が同じ画素間において、ぼやけ処理画像Ｐ５の画素より輝度が低いグレースケール画像Ｐ４の画素を黒、ぼやけ処理画像Ｐ５の画素より輝度が高いグレースケール画像Ｐ４の画素を白として２値化画像Ｐ６を生成する。
２値化画像Ｐ６は、「第３処理画像」の一例に対応する。
図８は、２値化画像Ｐ６の一例を示す図である。
２値化画像Ｐ６は、第１画像生成部５０２が生成したグレースケール画像Ｐ４を、第２画像生成部５０３が生成したぼやけ処理画像Ｐ５に基づき２値化した画像である。第３画像生成部５０４は、座標が同じ画素間において、ぼやけ処理画像Ｐ５の画素より輝度が低いグレースケール画像Ｐ４の画素を黒、ぼやけ処理画像Ｐ５の画素より輝度が高いグレースケール画像Ｐ４の画素を白として２値化画像Ｐ６を生成する。
２値化画像Ｐ６は、「第３処理画像」の一例に対応する。
【0063】
第１検出部５０５は、２値化画像Ｐ６からマーカＭＫを検出する。第１検出部５０５は、マーカ画像データ５２２をメモリ５２から読み出す。マーカ画像データ５２２は、表示パネル２１が有するマーカＭＫごとに、マーカＭＫの画像データが格納されている。マーカ画像データ５２２は、表示パネル２１が有するマーカＭＫの数に対応する数分、マーカＭＫの画像データを格納する。第１検出部５０５は、マーカ画像データ５２２が示すマーカＭＫの画像を用いて、パターンマッチングにより２値化画像Ｐ６からマーカＭＫを検出する。具体的に、第１検出部５０５は、２値化画像Ｐ６において、マーカ画像データ５２２が示す画像と一致度が所定値（例えば、９０パーセント）以上の画像があるか否かを判定する。そして、第１検出部５０５は、マーカ画像データ５２２が示す画像と一致度が所定値以上の画像を、マーカＭＫとして検出する。
【0064】
第２検出部５０６は、第１検出部５０５が検出したマーカＭＫのパネル撮影画像Ｐ３における位置を検出する。第２検出部５０６は、パネル撮影画像Ｐ３におけるマーカＭＫの位置として、第１検出部５０５が検出したマーカＭＫの２値化画像Ｐ６における位置を検出する。第２検出部５０６は、マーカＭＫの位置として、２値化画像Ｐ６に定義された座標系における座標を検出する。第２検出部５０６は、マーカＭＫの位置を検出すると、検出したマーカＭＫの位置を示す情報をマーカ位置記憶部５２５に記憶させる。
【0065】
【0066】
特定部５０７は、取得部５０１が取得したパネル撮影画像Ｐ３から、第１表示器領域３３、第２表示器領域３４、及び第３表示器領域３５に対応する領域を特定する。特定部５０７は、マーカ位置記憶部５２５が記憶するマーカＭＫの位置を用いて、パネル撮影画像Ｐ３におけるマーカＭＫを特定する。具体的に、特定部５０７は、パネル撮影画像Ｐ３において、マーカ位置記憶部５２５が記憶するマーカＭＫの位置にマーカＭＫがあるとして、マーカＭＫを特定する。次いで、特定部５０７は、特定したマーカＭＫに形成されたコードを読み取り、マーカＭＫがどの位置におけるマーカＭＫであるかを特定し、第１表示器領域３３、第２表示器領域３４、及び第３表示器領域３５に対応する領域を特定する。
図９の中段左図に示すように、特定部５０７は、マーカＭＫ１、ＭＫ２、ＭＫ３、ＭＫ４の位置をパネル撮影画像Ｐ３において特定すると、特定したマーカＭＫ１、ＭＫ２、ＭＫ３、ＭＫ４の位置を４隅とする四角の領域を、パネル撮影画像Ｐ３における第１表示器領域３３に対応する領域として特定する。また、図９の中段中央図に示すように、特定部５０７は、マーカＭＫ５、ＭＫ６の位置をパネル撮影画像Ｐ３において特定すると、特定したマーカＭＫ５、ＭＫ６の位置を対角とする四角の領域を、パネル撮影画像Ｐ３における第２表示器領域３４に対応する領域として特定する。また、図９の中段右図に示すように、特定部５０７は、マーカＭＫ７、ＭＫ８の位置をパネル撮影画像Ｐ３において特定すると、特定したマーカＭＫ７、ＭＫ８の位置を対角とする四角の領域を、パネル撮影画像Ｐ３における第３表示器領域３５に対応する領域として特定する。
図９の中段左図に示すように、特定部５０７は、マーカＭＫ１、ＭＫ２、ＭＫ３、ＭＫ４の位置をパネル撮影画像Ｐ３において特定すると、特定したマーカＭＫ１、ＭＫ２、ＭＫ３、ＭＫ４の位置を４隅とする四角の領域を、パネル撮影画像Ｐ３における第１表示器領域３３に対応する領域として特定する。また、図９の中段中央図に示すように、特定部５０７は、マーカＭＫ５、ＭＫ６の位置をパネル撮影画像Ｐ３において特定すると、特定したマーカＭＫ５、ＭＫ６の位置を対角とする四角の領域を、パネル撮影画像Ｐ３における第２表示器領域３４に対応する領域として特定する。また、図９の中段右図に示すように、特定部５０７は、マーカＭＫ７、ＭＫ８の位置をパネル撮影画像Ｐ３において特定すると、特定したマーカＭＫ７、ＭＫ８の位置を対角とする四角の領域を、パネル撮影画像Ｐ３における第３表示器領域３５に対応する領域として特定する。
【0067】
画像処理部５０８は、特定部５０７が特定した第１表示器領域３３に対応する領域の画像（図９において中段左図）をパネル撮影画像Ｐ３から抽出し、抽出した画像に基づいて、当該画像の歪みを補正する補正関数を算出する。本実施形態では、補正関数は、特定部５０７が特定した第１表示器領域３３に対応する領域の画像を矩形の画像に補正するための射影変換行例で規定される。画像処理部５０８は、算出した射影変換行例を用いて、矩形の画像に変換したディスプレイ画像Ｐ７、第１ランプ画像Ｐ８、及び第２ランプ画像Ｐ９を生成する。
ディスプレイ画像Ｐ７は、第１表示器領域３３に対応する領域の画像を矩形の画像に補正した後の画像である。第１ランプ画像Ｐ８は、第２表示器領域３４に対応する領域の画像を矩形の画像に補正した画像である。第２ランプ画像Ｐ９は、第３表示器領域３５に対する領域の画像を矩形の画像に補正した画像である。
ディスプレイ画像Ｐ７は、第１表示器領域３３に対応する領域の画像を矩形の画像に補正した後の画像である。第１ランプ画像Ｐ８は、第２表示器領域３４に対応する領域の画像を矩形の画像に補正した画像である。第２ランプ画像Ｐ９は、第３表示器領域３５に対する領域の画像を矩形の画像に補正した画像である。
【0068】
さて、サーバ装置５の構成の説明に戻り、試験値生成部５０９は、ディスプレイ画像Ｐ７に含まれ、表示パネル２１に表示される試験値を生成する。
例えば、試験値生成部５０９は、ディスプレイ画像Ｐ７に含まれる特定記号表示部３０２に表示された特定記号のサイズに基づいて、サイクル数を示す文字サイズを推定する。そして、試験値生成部５０９は、推定した文字サイズを用いた画像認識処理（ここでは、文字認識処理）によって、サイクル数の値を生成する。ここでは、試験値生成部５０９が、サイクル数の値を生成する場合について説明するが、試験値生成部５０９は、試験値として、試験力、及び変位等の値もサイクル数の値と同様の処理で、生成する。
また、試験値生成部５０９は、文字認識処理によってサイクル数の値を生成すると共に、文字認識処理におけるサイクル数の値の確度を出力する。サイクル数の値の確度は、サイクル数の値の確からしさを百分率で表した値である。
例えば、試験値生成部５０９は、ディスプレイ画像Ｐ７に含まれる特定記号表示部３０２に表示された特定記号のサイズに基づいて、サイクル数を示す文字サイズを推定する。そして、試験値生成部５０９は、推定した文字サイズを用いた画像認識処理（ここでは、文字認識処理）によって、サイクル数の値を生成する。ここでは、試験値生成部５０９が、サイクル数の値を生成する場合について説明するが、試験値生成部５０９は、試験値として、試験力、及び変位等の値もサイクル数の値と同様の処理で、生成する。
また、試験値生成部５０９は、文字認識処理によってサイクル数の値を生成すると共に、文字認識処理におけるサイクル数の値の確度を出力する。サイクル数の値の確度は、サイクル数の値の確からしさを百分率で表した値である。
【0069】
判定部５１０は、第１ランプ画像Ｐ８に基づき、油圧源状態を判定する。また、判定部５１０は、第２ランプ画像Ｐ９に基づき、疲労試験の試験状態を判定する。
【0070】
まず、油圧源状態の判定処理について説明する。
判定部５１０は、表示ランプ３１１Ａ、表示ランプ３１２Ｂ、表示ランプ３１３Ｃ、及び表示ランプ３１４Ｄの点灯態様の組み合わせに基づき、油圧源状態を判定する。本実施形態では、「点灯態様」とは、点灯か消灯かを示す。
判定部５１０は、表示ランプ３１１Ａ、表示ランプ３１２Ｂ、表示ランプ３１３Ｃ、及び表示ランプ３１４Ｄの点灯態様の組み合わせに基づき、油圧源状態を判定する。本実施形態では、「点灯態様」とは、点灯か消灯かを示す。
【0071】
表示ランプ３１１Ａが点灯し、表示ランプ３１２Ｂ、３１３Ｃ、３１４Ｄが消灯する場合には、判定部５１０は、油圧源状態が「ＲＵＮ状態」、すなわち、油圧ポンプが起動された状態であると判定する。
表示ランプ３１２Ｂが点灯し、表示ランプ３１１Ａ、３１３Ｃ、３１４Ｄが消灯する場合には、判定部５１０は、油圧源状態が「ＳＴＯＰ状態」、すなわち、油圧ポンプが停止した状態であると判定する。
表示ランプ３１２Ｂが点灯し、表示ランプ３１１Ａ、３１３Ｃ、３１４Ｄが消灯する場合には、判定部５１０は、油圧源状態が「ＳＴＯＰ状態」、すなわち、油圧ポンプが停止した状態であると判定する。
【0072】
表示ランプ３１１Ａ、３１３Ｃ、３１４Ｄが点灯し、表示ランプ３１２Ｂが消灯する場合には、判定部５１０は、油圧源状態が「ＬＯＡＤ＿ＭＡＮＩ状態」、すなわち、配管バルブ及びロードバルブが開状態であると判定する。
表示ランプ３１２Ｂ、３１３Ｃが点灯し、表示ランプ３１１Ａ、３１４Ｄが消灯する場合には、判定部５１０は、油圧源状態が「ＳＴＯＰ＿ＭＡＮＩ状態」、すなわち、配管バルブが開状態であると判定する。
表示ランプ３１２Ｂ、３１３Ｃが点灯し、表示ランプ３１１Ａ、３１４Ｄが消灯する場合には、判定部５１０は、油圧源状態が「ＳＴＯＰ＿ＭＡＮＩ状態」、すなわち、配管バルブが開状態であると判定する。
【0073】
表示ランプ３１１Ａ、３１４Ｄが点灯し、表示ランプ３１２Ｂ、３１３Ｃが消灯する場合には、判定部５１０は、油圧源状態が「ＬＯＡＤ状態」、すなわち、ロードバルブが開状態であると判定する。
表示ランプ３１１Ａ、３１２Ｂ、３１３Ｃ、３１４Ｄが全て消灯する場合には、判定部５１０は、油圧源状態が「ＰＯＷＥＲ ＯＦＦ状態」、すなわち、油圧ポンプ、配管バルブ、及びロードバルブの動作のための電源がオフされた状態であると判定する。
表示ランプ３１１Ａ、３１２Ｂ、３１３Ｃ、３１４Ｄが全て消灯する場合には、判定部５１０は、油圧源状態が「ＰＯＷＥＲ ＯＦＦ状態」、すなわち、油圧ポンプ、配管バルブ、及びロードバルブの動作のための電源がオフされた状態であると判定する。
【0074】
また、判定部５１０は、第１学習済みモデル５２３を用いて、油圧源状態を判定する。具体的には、判定部５１０は、第１ランプ画像Ｐ８を、第１学習済みモデル５２３に入力することによって、油圧源状態を判定する。第１学習済みモデル５２３は、表示ランプ３１１Ａ～３１４Ｄの種々の点灯態様の組み合わせを撮影した第１ランプ画像Ｐ８と、表示ランプ３１１Ａ～３１４Ｄの点灯態様の組み合わせに対応する油圧源状態と、の関係を機械学習（いわゆる、「教師あり学習」）によって学習させた学習済みモデルである。判定部５１０は、第１ランプ画像Ｐ８を第１学習済みモデル５２３に入力することによって、油圧源状態を判定する。
【0075】
次に、疲労試験の試験状態の判定処理について説明する。
判定部５１０は、複数の表示ランプの点灯態様の組み合わせに基づき、疲労試験の試験状態を判定する。具体的には、判定部５１０は、表示ランプ３２１Ａ、及び表示ランプ３２２Ｂの点灯態様の組み合わせに基づき、疲労試験の試験状態を判定する。
判定部５１０は、複数の表示ランプの点灯態様の組み合わせに基づき、疲労試験の試験状態を判定する。具体的には、判定部５１０は、表示ランプ３２１Ａ、及び表示ランプ３２２Ｂの点灯態様の組み合わせに基づき、疲労試験の試験状態を判定する。
【0076】
表示ランプ３２１Ａが点灯し、表示ランプ３２２Ｂが消灯する場合には、判定部５１０は、疲労試験の試験状態が「ＳＴＡＲＴ状態」、すなわち疲労試験を実行している状態であると判定する。
表示ランプ３２２Ｂが点灯し、表示ランプ３２１Ａが消灯する場合には、判定部５１０は、疲労試験の試験状態が「ＳＴＯＰ状態」、すなわち、疲労試験を停止している状態であると判定する。
表示ランプ３２２Ｂが点灯し、表示ランプ３２１Ａが消灯する場合には、判定部５１０は、疲労試験の試験状態が「ＳＴＯＰ状態」、すなわち、疲労試験を停止している状態であると判定する。
【0077】
また、判定部５１０は、第２学習済みモデル５２４を用いて、疲労試験の試験状態を判定する。具体的には、判定部５１０は、第２ランプ画像Ｐ９を、第２学習済みモデル５２４に入力することによって、疲労試験の試験状態を判定する。第２学習済みモデル５２４は、表示ランプ３２１Ａ、３２２Ｂの種々の点灯態様の組み合わせを撮影した第２ランプ画像Ｐ９と、表示ランプ３２１Ａ、３２２Ｂの点灯態様の組み合わせに対応する疲労試験の試験状態と、の関係を機械学習（いわゆる、「教師あり学習」）によって学習させた学習済みモデルである。判定部５１０は、第２ランプ画像Ｐ９を第２学習済みモデル５２４に入力することによって、疲労試験の試験状態を判定する。
【0078】
第１学習済みモデル５２３の出力は、油圧源状態についての判定の確度が含まれる。また、第２学習済みモデル５２４の出力には、疲労試験の試験状態についての判定の確度が含まれる。判定の確度は、判定の確からしさを百分率で表した値である。
換言すれば、判定部５１０は、油圧源状態を判定すると共に、その判定の確度を出力する。また、判定部５１０は、疲労試験の試験状態を判定すると共に、その判定の確度を出力する。
換言すれば、判定部５１０は、油圧源状態を判定すると共に、その判定の確度を出力する。また、判定部５１０は、疲労試験の試験状態を判定すると共に、その判定の確度を出力する。
【0079】
表示制御部５１１は、第１画面８００を生成し、生成した第１画面８００を表示部５６に表示させる。また、表示制御部５１１は、第２画面９００を生成し、生成した第２画面９００を表示部５６に表示させる。
【0080】
図１０は、第１画面８００の一例を示す図である。
第１画面８００は、サイクル数表示部８０１と、試験力表示部８０２と、試験状態表示部８０３と、本体画像表示ボタン８０４と、試験片画像表示ボタン８０５と、パネル画像表示ボタン８０６と、を含む。
第１画面８００は、サイクル数表示部８０１と、試験力表示部８０２と、試験状態表示部８０３と、本体画像表示ボタン８０４と、試験片画像表示ボタン８０５と、パネル画像表示ボタン８０６と、を含む。
【0081】
サイクル数表示部８０１は、疲労試験機１のサイクル数の値を表示する。サイクル数の値は、試験値生成部５０９によって生成される。
試験力表示部８０２は、疲労試験機１の試験力の値を表示する。試験力の値は、試験値生成部５０９によって生成される。
試験状態表示部８０３は、疲労試験機１の試験状態を表示する。疲労試験機１の試験状態は、第２ランプ画像Ｐ１０に基づき、判定部５１０によって判定される。
試験力表示部８０２は、疲労試験機１の試験力の値を表示する。試験力の値は、試験値生成部５０９によって生成される。
試験状態表示部８０３は、疲労試験機１の試験状態を表示する。疲労試験機１の試験状態は、第２ランプ画像Ｐ１０に基づき、判定部５１０によって判定される。
【0082】
本体画像表示ボタン８０４は、疲労試験機１の試験機本体撮影画像Ｐ１を表示する場合にユーザによってクリックされる。本体画像表示ボタン８０４がクリックされた場合には、表示制御部５１１は、画像記憶部５２６から試験機本体撮影画像Ｐ１を読み出して、表示領域ＡＲに読み出した試験機本体撮影画像Ｐ１を表示する。
試験片画像表示ボタン８０５は、試験片撮影画像Ｐ２を表示する場合にユーザによってクリックされる。試験片画像表示ボタン８０５がクリックされた場合には、表示制御部５１１は、画像記憶部５２６から試験片撮影画像Ｐ２を読み出して、表示領域ＡＲに読み出した試験片撮影画像Ｐ２を表示する。
パネル画像表示ボタン８０６は、パネル撮影画像Ｐ３を表示する場合にユーザによってクリックされる。パネル画像表示ボタン８０６がクリックされた場合には、表示制御部５１１は、画像記憶部５２６からパネル撮影画像Ｐ３を読み出して、表示領域ＡＲに読み出したパネル撮影画像Ｐ３を表示する。
試験片画像表示ボタン８０５は、試験片撮影画像Ｐ２を表示する場合にユーザによってクリックされる。試験片画像表示ボタン８０５がクリックされた場合には、表示制御部５１１は、画像記憶部５２６から試験片撮影画像Ｐ２を読み出して、表示領域ＡＲに読み出した試験片撮影画像Ｐ２を表示する。
パネル画像表示ボタン８０６は、パネル撮影画像Ｐ３を表示する場合にユーザによってクリックされる。パネル画像表示ボタン８０６がクリックされた場合には、表示制御部５１１は、画像記憶部５２６からパネル撮影画像Ｐ３を読み出して、表示領域ＡＲに読み出したパネル撮影画像Ｐ３を表示する。
【0083】
図１１は、第２画面９００の一例を示す図である。
第２画面９００は、判定結果表示部９０１と、数値表示部９０２と、パネル画像表示部９０３と、本体画像表示部９０４と、試験片画像表示部９０５と、を含む。
第２画面９００は、判定結果表示部９０１と、数値表示部９０２と、パネル画像表示部９０３と、本体画像表示部９０４と、試験片画像表示部９０５と、を含む。
【0084】
判定結果表示部９０１には、判定部５１０の判定結果、すなわち、油圧源状態、及び疲労試験の試験状態が表示される。
判定結果表示部９０１には、例えば、油圧源状態が「ＬＯＡＤ状態」であることが表示される。また、判定結果表示部９０１には、例えば、油圧源状態の判定の確度が第１閾値未満であることを示す「ＷＡＲＮＩＮＧ」が表示される。第１閾値は、例えば、８０％である。
また、判定結果表示部９０１には、例えば、疲労試験の試験状態が「ＳＴＡＲＴ状態」であることが表示される。また、判定結果表示部９０１には、例えば、疲労試験の試験状態の判定の確度が第２閾値以上であることを示す「ＧＯＯＤ」が表示される。第２閾値は、例えば、８０％である。
判定結果表示部９０１には、例えば、油圧源状態が「ＬＯＡＤ状態」であることが表示される。また、判定結果表示部９０１には、例えば、油圧源状態の判定の確度が第１閾値未満であることを示す「ＷＡＲＮＩＮＧ」が表示される。第１閾値は、例えば、８０％である。
また、判定結果表示部９０１には、例えば、疲労試験の試験状態が「ＳＴＡＲＴ状態」であることが表示される。また、判定結果表示部９０１には、例えば、疲労試験の試験状態の判定の確度が第２閾値以上であることを示す「ＧＯＯＤ」が表示される。第２閾値は、例えば、８０％である。
【0085】
数値表示部９０２には、試験値生成部５０９によって生成された試験値が表示される。
数値表示部９０２には、例えば、サイクル数の値が表示される。また、数値表示部９０２には、例えば、サイクル数の値の確度が第３閾値以上であることを示す「ＧＯＯＤ」が表示される。第３閾値は、例えば、８０％である。
数値表示部９０２には、例えば、サイクル数の値が表示される。また、数値表示部９０２には、例えば、サイクル数の値の確度が第３閾値以上であることを示す「ＧＯＯＤ」が表示される。第３閾値は、例えば、８０％である。
【0086】
パネル画像表示部９０３には、パネル撮影画像Ｐ３が表示される。本体画像表示部９０４には、試験機本体撮影画像Ｐ１が表示される。試験片画像表示部９０５には、試験片撮影画像Ｐ２が表示される。
【0087】
【0088】
サーバ装置５は、所定の開始トリガーが発生した場合、図１２の動作を行う。ここで、所定の開始トリガーとしては、パネル撮影画像Ｐ３におけるマーカＭＫの位置を更新する指示をユーザから受け付けた場合や、パネル撮影画像Ｐ３におけるマーカＭＫの位置を新規で設定する指示をユーザから受け付けた場合などが例に挙げられる。
【0089】
取得部５０１は、パネル撮影画像Ｐ３を取得する（ステップＳＡ１）。
次いで、第２画像生成部５０３は、ぼやけ処理のフィルタサイズにデフォルト値を設定する（ステップＳＡ２）。
次いで、第２画像生成部５０３は、ぼやけ処理のフィルタサイズにデフォルト値を設定する（ステップＳＡ２）。
【0090】
次いで、第２検出部５０６は、検出すべき全てのマーカＭＫの位置を検出できたか否かを判定する（ステップＳＡ３）。第２検出部５０６は、メモリ５２が記憶するマーカ画像データ５２２に格納された画像データの個数分、各々異なるマーカＭＫの位置を検出できた場合、ステップＳＡ３において肯定判定し、そうでない場合、ステップＳＡ３において否定判定する。
【0091】
第２検出部５０６が、検出すべき全てのマーカＭＫの位置を検出できていないと判定した場合（ステップＳＡ３：ＮＯ）、第１画像生成部５０２は、ステップＳＡ１で取得されたパネル撮影画像Ｐ３をグレースケール化したグレースケール画像Ｐ４を生成する（ステップＳＡ４）。
【0092】
次いで、第２画像生成部５０３は、ステップＳＡ３で生成されたグレースケール画像Ｐ４をぼやけ処理したぼやけ処理画像Ｐ５を生成する（ステップＳＡ５）。なお、今回のステップＳＡ５の処理が、図１２のフローチャートを開始して初回の処理である場合、パネル撮影画像Ｐ３には、デフォルト値がフィルタサイズに設定されたぼやけ処理が適用される。また、今回のステップＳＡ５の処理が、図１２のフローチャートを開始して２回目以降の処理である場合、パネル撮影画像Ｐ３には、ステップＳＡ１０で変更された値がフィルタサイズに設定されたぼやけ処理が適用される。
【0093】
次いで、第３画像生成部５０４は、ステップＳＡ４で生成されたグレースケール画像Ｐ４と、ステップＳＡ５で生成されたぼやけ処理画像Ｐ５とを用いて、２値化画像Ｐ６を生成する（ステップＳＡ６）。
【0094】
次いで、第１検出部５０５は、マーカ検出処理を行う（ステップＳＡ７）。マーカ検出処理とは、ステップＳＡ６で生成した２値化画像Ｐ６からマーカＭＫを検出する処理である。
【0095】
次いで、第２検出部５０６は、マーカ位置検出処理を行う（ステップＳＡ８）。マーカ位置検出処理は、ステップＳＡ７のマーカ検出処理において検出されたマーカＭＫのパネル撮影画像Ｐ３における位置を検出する処理である。プロセッサ５０は、マーカ検出処理においてマーカＭＫが検出されなかった場合、ステップＳＡ８の処理をスキップする。
【0096】
次いで、第２検出部５０６は、マーカ位置検出処理で検出したマーカＭＫの位置をマーカ位置記憶部５２５に記憶させる（ステップＳＡ９）。
【0097】
次いで、第２画像生成部５０３は、フィルタサイズの値を変更する（ステップＳＡ１０）。
【0098】
ステップＳＡ１０において、第２画像生成部５０３は、マーカＭＫのサイズから定めた下限値及び上限値の範囲において、フィルタサイズの値を変更してもよい。第２画像生成部５０３は、下限値及び上限値をマーカＭＫのサイズで定める。例えば、第２画像生成部５０３は、パネル撮影画像Ｐ３において推定されるマーカＭＫの最大サイズの１．５倍をフィルタサイズの上限値として定め、パネル撮影画像Ｐ３において推定されるマーカＭＫの最小サイズの０．５倍をフィルタサイズの下限値として定める。推定されるマーカＭＫの最大サイズ及び最小サイズについては、予めメモリ５２にデータとして記憶されている。なお、本実施形態においてフィルタサイズの最小単位は１画素に対応する。
【0099】
ステップＳＡ１０において、第２画像生成部５０３は、フィルタサイズの値を、現在設定されているフィルタサイズの値より１又は複数段階増減させてもよい。例えば、現在設定されているフィルタサイズが１０×１０である場合、第２画像生成部５０３は、フィルタサイズを１１×１１に変更してもよい。なお、フィルタサイズを増加させる段階は、１段階に限定されず、複数段階でもよい。この段階的に変更するに際して、第２画像生成部５０３は、上述したフィルタサイズの上限値及び下限値の範囲で変更してもよい。
【0100】
ステップＳＡ１０において、第２画像生成部５０３は、勾配降下法を用いて、フィルタサイズの値を変更してもよい。勾配降下法としては、確率的勾配降下法や最急降下法などが採用される。例えば、第２画像生成部５０３は、前回のマーク検出処理における一致率の最高値と、前々回のマーク検出処理における一致率の最高値との差分を算出し、算出した差分に応じてフィルタサイズの値を変更する。例えば、算出した差分が大きければ大きいほど、フィルタサイズの値の変化度合いが小さくなるようにして、第２画像生成部５０３は、フィルタサイズの値を変更する。この勾配降下法による変更するに際して、第２画像生成部５０３は、上述したフィルタサイズの上限値及び下限値の範囲で変更してもよい。
【0101】
フィルタサイズの値を変更すると、第２検出部５０６は、再度、ステップＳＡ３の判定を行う。プロセッサ５０は、検出すべきマーカＭＫの位置を全て検出するまで、ステップＳＡ３からステップＳＡ１０を繰り返し行う。
【0102】
以上のようにして、サーバ装置５は、２値化画像Ｐ６を生成して、生成した２値化画像Ｐ６からマーカＭＫを検出する。
本実施形態の第３カメラ４は低露出状態で撮影をする。低露出状態とは、露出が低い状態を指し、露出が所定値以下である状態を指す。なお、所定値は、第１表示器領域３３、第２表示器領域３４、及び第３表示器領域３５がパネル撮影画像Ｐ３において適切に写ることの観点に基づいて、事前のテストやシミュレーションなどによって定められている。そのため、パネル撮影画像Ｐ３においては非発光のマーカＭＫが暗く写る。しかしながら、図８で示すように、２値化画像Ｐ６においてはマーカＭＫが強調して写る。よって、サーバ装置５は、第３カメラ４が低露出状態であっても第３カメラ４の撮影画像からマーカＭＫを検出できる。
本実施形態の第３カメラ４は低露出状態で撮影をする。低露出状態とは、露出が低い状態を指し、露出が所定値以下である状態を指す。なお、所定値は、第１表示器領域３３、第２表示器領域３４、及び第３表示器領域３５がパネル撮影画像Ｐ３において適切に写ることの観点に基づいて、事前のテストやシミュレーションなどによって定められている。そのため、パネル撮影画像Ｐ３においては非発光のマーカＭＫが暗く写る。しかしながら、図８で示すように、２値化画像Ｐ６においてはマーカＭＫが強調して写る。よって、サーバ装置５は、第３カメラ４が低露出状態であっても第３カメラ４の撮影画像からマーカＭＫを検出できる。
【0103】
また、図１２を用いて説明した通り、サーバ装置５は、検出すべきマーカＭＫが全て検出されるまでフィルタサイズを変更する。制御装置２０に対する第３カメラ４の相対位置や第３カメラ４の画角によっては、パネル撮影画像Ｐ３に写るマーカＭＫのサイズが異なる。しかしながら、フィルタサイズが変更されるため、マーカＭＫごとに適切なフィルタサイズが設定できるようになる。そのため、サーバ装置５は、制御装置２０に対する第３カメラ４の相対位置や第３カメラ４の画角によることなく、第３カメラ４の撮影画像からマーカＭＫを検出できる。
【0104】
なお、フィルタサイズの値は、大きければ好適というものでも小さければ好適というものではない。フィルタサイズの値が大きければ大きいほど、マーカＭＫ部分をぼやけ処理する際、フィルタサイズにマーカＭＫ以外の要素が多く含まれる。そのため、フィルタサイズの値が大きければ大きいほど、マーカＭＫ部分をぼやけ処理する際に、マーカＭＫ以外の要素を多く含んで平準化することになり、マーカＭＫを適正に平準化できない可能性がある。また、マーカＭＫ部分をぼやけ処理する際、フィルタサイズが小さければ小さいほど、フィルタサイズに含まれる白黒の割合に偏りが生じる。よって、フィルタサイズが小さすぎても、マーカＭＫ部分を適切に平準化できない可能性がある。これは、２値化画像Ｐ６においては、マーカＭＫが強調されて写されないことに繋がる。図１３は、フィルタサイズが小さすぎてしまいマーカＭＫが適切に写らなかった場合の２値化画像Ｐ６の一例である。以上説明したように、フィルタサイズを適正な値に決定する必要があるが、サーバ装置５は、フィルタサイズの値を変更するため、フィルタサイズの値を適切な値に設定できる。
【0105】
【0106】
取得部５０１は、パネル撮影画像Ｐ３を取得する（ステップＳＢ１）。
次いで、特定部５０７は、ステップＳＢ１で取得されたパネル撮影画像Ｐ３において第１表示器領域３３、第２表示器領域３４、及び第３表示器領域３５に対応する領域を特定する（ステップＳＢ２）。
次いで、特定部５０７は、ステップＳＢ１で取得されたパネル撮影画像Ｐ３において第１表示器領域３３、第２表示器領域３４、及び第３表示器領域３５に対応する領域を特定する（ステップＳＢ２）。
【0107】
次いで、画像処理部５０８は、ステップＳＢ２で特定された領域から、ディスプレイ画像Ｐ７、第１ランプ画像Ｐ８、及び第２ランプ画像Ｐ９を生成する（ステップＳＢ３）。
【0108】
次いで、判定部５１０は、状態判定処理を行う（ステップＳＢ４）。状態判定処理は、油圧源状態を判定する処理と、疲労試験の試験状態を判定する処理とを含む。
【0109】
次に、試験値生成部５０９は、試験値を生成する（ステップＳＢ５）
次に、表示制御部５１１は、ユーザからの操作に基づいて、第１画面８００を表示するか、第２画面９００を表示するかを判定する（ステップＳＢ６）。
次に、表示制御部５１１は、ユーザからの操作に基づいて、第１画面８００を表示するか、第２画面９００を表示するかを判定する（ステップＳＢ６）。
【0110】
表示制御部５１１は、第１画面８００を表示すると判定した場合（ステップＳＢ５：第１画面）、表示部５６に第１画面８００を表示させる（ステップＳＢ６）。
【0111】
次いで、表示制御部５１１は、第２画面９００を表示すると判定した場合（ステップＳＢ５：第２画面）、表示部５６に第２画面９００を表示させる（ステップＳＢ７）。
【0112】
［２．第２実施形態］
次に、第２実施形態について説明する。
第２実施形態の監視システム１００の各部の構成について、第１実施形態と同じ構成については、同一の符号を付して詳細な説明を省略する。
次に、第２実施形態について説明する。
第２実施形態の監視システム１００の各部の構成について、第１実施形態と同じ構成については、同一の符号を付して詳細な説明を省略する。
【0113】
［２－１．サーバ装置の構成］
図１５は、第２実施形態に係わるサーバ装置５の構成の一例を示す図である。
図１５と図５とを比較して明らかな通り、第２実施形態のメモリ５２は、第３学習済みモデル５２８を記憶する。
第３学習済みモデル５２８は、「学習済みモデル」の一例に対応する。
図１５は、第２実施形態に係わるサーバ装置５の構成の一例を示す図である。
図１５と図５とを比較して明らかな通り、第２実施形態のメモリ５２は、第３学習済みモデル５２８を記憶する。
第３学習済みモデル５２８は、「学習済みモデル」の一例に対応する。
【0114】
第３学習済みモデル５２８は、フィルタパラメータの値と、パネル撮影画像Ｐ３におけるマーカＭＫの位置と、当該位置にマーカＭＫが存在する存在確率と、の関係を機械学習（いわゆる、「教師あり学習」）により学習させた学習済みモデルである。なお、存在確率は、例えば、百分率で表される。第３学習済みモデル５２８は、フィルタパラメータの値が入力されると、パネル撮影画像Ｐ３におけるマーカＭＫの位置と当該位置にマーカＭＫが存在する存在確率との組み合わせを出力する。なお、第３学習済みモデル５２８は、この組み合わせを複数出力する。
【0115】
第２実施形態の第２画像生成部５０３は、第３学習済みモデル５２８を用いて、フィルタパラメータの値を変更する。第２実施形態においてもフィルタパラメータとしてフィルタサイズを例示する。第２実施形態におけるフィルタサイズの値の変更については、後述する。
【0116】
［２－２．サーバ装置の動作］
図１６を参照して、マーカＭＫの位置の記憶に係わるサーバ装置５の動作について説明する。なお、マーカＭＫの位置を用いた第１画面８００及び第２画面９００に係わる動作については、第２実施形態のサーバ装置５は、第１実施形態と同様の動作を行う。
図１６は、サーバ装置５の動作を示すフローチャートである。
図１６を参照して、マーカＭＫの位置の記憶に係わるサーバ装置５の動作について説明する。なお、マーカＭＫの位置を用いた第１画面８００及び第２画面９００に係わる動作については、第２実施形態のサーバ装置５は、第１実施形態と同様の動作を行う。
図１６は、サーバ装置５の動作を示すフローチャートである。
【0117】
サーバ装置５は、所定の開始トリガーが発生した場合、図１６の動作を行う。ここで、所定の開始トリガーとしては、パネル撮影画像Ｐ３におけるマーカＭＫの位置を更新する指示をユーザから受け付けた場合や、パネル撮影画像Ｐ３におけるマーカＭＫの位置を設定する指示をユーザから受け付けた場合などが例に挙げられる。
【0118】
取得部５０１は、パネル撮影画像Ｐ３を取得する（ステップＳＣ１）。
次いで、第２画像生成部５０３は、ぼやけ処理のフィルタサイズに設定する値を決定し、決定した値を設定する（ステップＳＣ２）。
次いで、第２画像生成部５０３は、ぼやけ処理のフィルタサイズに設定する値を決定し、決定した値を設定する（ステップＳＣ２）。
【0119】
ステップＳＣ２において、第２画像生成部５０３は、第３学習済みモデル５２８が出力する存在確率の少なくともいずれかが所定確率以上となるまで、フィルタサイズに設定する値の候補を１又は複数段階で増減していく。なお、第２画像生成部５０３は、フィルタサイズの値の候補を変更するたびに、第３学習済みモデル５２８に変更したフィルタサイズを入力する。なお、フィルタサイズを変更させる段階は、１段階に限定されず、複数段階でもよい。第２画像生成部５０３は、第３学習済みモデル５２８が出力する存在確率の少なくともいずれかが所定確率以上となった場合に、直近で第３学習済みモデル５２８に入力したフィルタサイズの値の候補をフィルタサイズに設定する値として決定する。なお、第２画像生成部５０３は、第１実施形態と同様に、マーカＭＫのサイズから定めた下限値及び上限値の範囲において、フィルタサイズの値を変更してもよい。
【0120】
ステップＳＣ２において、第２画像生成部５０３は、第３学習済みモデル５２８が出力する存在確率を用いて、勾配降下法によってフィルタサイズの値の候補を決定してもよい。第２画像生成部５０３は、フィルタサイズの値の候補を第３学習済みモデル５２８に入力し、第３学習済みモデル５２８から存在確率を取得する。第２画像生成部５０３は、出力された存在確率が所定確率以下である場合、フィルタサイズの値の候補を変更し、変更したフィルタサイズの値の候補を第３学習済みモデル５２８に入力し、再度、第３学習済みモデル５２８から存在確率を取得する。次いで、第２画像生成部５０３は、今回に取得した存在確率が所定確率以下である場合、今回に取得した存在確率と、前回に取得した存在確率との差分を算出し、算出した差分に応じてフィルタサイズの値の候補を変更する。例えば、算出した差分が大きければ大きいほど、フィルタサイズの値の候補の変化度合いが小さくなるようにして、第２画像生成部５０３は、フィルタサイズの値の候補を変更する。第２画像生成部５０３は、第３学習済みモデル５２８が出力する存在確率が所定確率以上になるまで、フィルタサイズの値の候補を変更し続ける。そして、第２画像生成部５０３は、第３学習済みモデル５２８が出力する存在確率の少なくともいずれかが所定確率以上となった場合に、直近で第３学習済みモデル５２８に入力したフィルタサイズの値の候補をフィルタサイズに設定する値として決定する。なお、第２画像生成部５０３は、第１実施形態と同様に、マーカＭＫのサイズから定めた下限値及び上限値の範囲において、フィルタサイズの値を変更してもよい。
【0121】
次いで、第２検出部５０６は、検出すべき全てのマーカＭＫの位置を検出できたか否かを判定する（ステップＳＣ３）。ステップＳＣ３の判定は、ステップＳＡ３と同様の手法によって行われる。
【0122】
第２検出部５０６が、検出すべき全てのマーカＭＫの位置を検出できていないと判定した場合（ステップＳＣ３：ＮＯ）、第１画像生成部５０２は、ステップＳＣ１で取得されたパネル撮影画像Ｐ３をグレースケール化したグレースケール画像Ｐ４を生成する（ステップＳＣ４）。
【0123】
次いで、第２画像生成部５０３は、ステップＳＣ３で生成されたグレースケール画像Ｐ４をぼやけ処理したぼやけ処理画像Ｐ５を生成する（ステップＳＣ５）。なお、今回のステップＳＣ５の処理が、図１６のフローチャートを開始して初回である場合、パネル撮影画像Ｐ３には、ステップＳＣ２で決定された値がフィルタサイズに設定されたぼやけ処理が適用される。また、今回のステップＳＣ５の処理が、図１６のフローチャートを開始して２回目以降である場合、パネル撮影画像Ｐ３には、ステップＳＣ１０で変更された値がフィルタサイズに設定されたぼやけ処理が適用される。
【0124】
次いで、第３画像生成部５０４は、ステップＳＣ４で生成されたグレースケール画像Ｐ４と、ステップＳＡ５で生成されたぼやけ処理画像Ｐ５とを用いて、２値化画像Ｐ６を生成する（ステップＳＣ６）。
【0125】
次いで、第１検出部５０５は、マーカ検出処理を行う（ステップＳＣ７）。ステップＳＣ７のマーカ検出処理とは、ステップＳＣ６で生成した２値化画像Ｐ６からマーカＭＫを検出する処理である。なお、今回のステップＳＣ６の処理が、図１６のフローチャートを開始して初回の処理である場合、第１検出部５０５は、ステップＳＣ２の処理において存在確率が所定確率以上であるとした２値化画像Ｐ６の位置に対して、パターンマッチングを行う。また、今回のステップＳＣ６の処理が、図１６のフローチャートを開始して２回目以降の処理である場合、第１検出部５０５は、ステップＳＣ１０の処理において存在確率が所定確率以上であるとした２値化画像Ｐ６の位置に対して、パターンマッチングを行う。
【0126】
次いで、第２検出部５０６は、マーカ位置検出処理を行う（ステップＳＣ８）。ステップＳＣ８のマーカ位置検出処理は、ステップＳＣ７のマーカ検出処理において検出されたマーカＭＫのパネル撮影画像Ｐ３における位置を検出する処理である。プロセッサ５０は、マーカ検出処理においてマーカＭＫが検出されなかった場合、ステップＳＣ８の処理をスキップする。
【0127】
次いで、第２検出部５０６は、マーカ位置検出処理で検出したマーカＭＫの位置をマーカ位置記憶部５２５に記憶させる（ステップＳＣ９）。
【0128】
次いで、第２画像生成部５０３は、フィルタサイズの値を変更する（ステップＳＣ１０）。ステップＳＣ１０における変更は、ステップＳＣ２における値の決定と同様に行われる。
【0129】
フィルタサイズの値を変更すると、第２検出部５０６は、再度、ステップＳＣ３の判定を行う。プロセッサ５０は、検出すべきマーカＭＫの位置を全て検出するまで、ステップＳＣ３からステップＳＣ１０を繰り返し行う。
【0130】
第２実施形態によれば、第１実施形態と同様の効果を奏することができる。
【0131】
［３．態様］
上述した各実施形態は、以下の態様の具体例であることが当業者により理解される。
上述した各実施形態は、以下の態様の具体例であることが当業者により理解される。
【0132】
（第１項）
一態様に係わる監視装置は、表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置であって、前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、前記第１処理画像をぼやけ処理した第２処理画像を生成する第２生成部と、前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、前記第３処理画像から前記マーカを検出する第１検出部と、を備える。
一態様に係わる監視装置は、表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置であって、前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、前記第１処理画像をぼやけ処理した第２処理画像を生成する第２生成部と、前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、前記第３処理画像から前記マーカを検出する第１検出部と、を備える。
【0133】
第１項に記載の監視装置によれば、第１検出部が検出に用いる画像において非発光のマーカを強調して写すことができる。そのため、カメラの露出が低い場合でも表示器の表示パネルが有する非発光のマーカをカメラの撮影画像から検出できる。
【0134】
（第２項）
第１項に記載の監視装置において、前記第１検出部が検出した前記マーカの前記撮影画像における位置を検出する第２検出部を備え、前記第２生成部は、前記ぼやけ処理のフィルタパラメータの値を変更し、前記第２検出部が検出すべき前記マーカの全ての位置を検出していない場合、値を変更した前記フィルタパラメータによって前記ぼやけ処理した前記第２処理画像を生成し、前記第３生成部は、値が変更された前記フィルタパラメータによって前記ぼやけ処理された前記第２処理画像と、前記第１処理画像とに基づいて、前記第３処理画像を再度生成し、前記第１検出部は、前記第３生成部により再度生成された前記第３処理画像から前記マーカを検出する。
第１項に記載の監視装置において、前記第１検出部が検出した前記マーカの前記撮影画像における位置を検出する第２検出部を備え、前記第２生成部は、前記ぼやけ処理のフィルタパラメータの値を変更し、前記第２検出部が検出すべき前記マーカの全ての位置を検出していない場合、値を変更した前記フィルタパラメータによって前記ぼやけ処理した前記第２処理画像を生成し、前記第３生成部は、値が変更された前記フィルタパラメータによって前記ぼやけ処理された前記第２処理画像と、前記第１処理画像とに基づいて、前記第３処理画像を再度生成し、前記第１検出部は、前記第３生成部により再度生成された前記第３処理画像から前記マーカを検出する。
【0135】
第２項に記載の監視装置によれば、検出すべてマーカの全ての位置を検出していない場合、フィルタパラメータの値を変更することによって再度、マーカの検出を行う。そのため、カメラの露出が低い場合でも、表示器の表示パネルが有する非発光のマーカの全てをカメラの撮影画像から検出できる。
【0136】
（第３項）
第２項に記載の監視装置において、前記フィルタパラメータの値と、前記撮影画像における前記マーカの位置と、当該位置に前記マーカが存在する存在確率と、の関係を機械学習により学習させた学習済みモデルを備え、前記第２生成部は、前記フィルタパラメータの入力によって前記学習済みモデルが出力した前記存在確率に基づいて、前記フィルタパラメータの値を変更する。
第２項に記載の監視装置において、前記フィルタパラメータの値と、前記撮影画像における前記マーカの位置と、当該位置に前記マーカが存在する存在確率と、の関係を機械学習により学習させた学習済みモデルを備え、前記第２生成部は、前記フィルタパラメータの入力によって前記学習済みモデルが出力した前記存在確率に基づいて、前記フィルタパラメータの値を変更する。
【0137】
第３項に記載の監視装置によれば、学習済みモデルが出力する存在確率を用いてフィルタパラメータの値を変更するため、フィルタパラメータの値を、マーカを検出できる可能性の高いフィルタパラメータの値を適切に変更できる。よって、カメラの露出が低い場合でも表示器の表示パネルが有する非発光のマーカをカメラの撮影画像から精度良く検出できる。
【0138】
（第４項）
第３項に記載の監視装置において、前記第２生成部は、前記存在確率を用いた勾配降下法によって、前記フィルタパラメータの値を変更する。
第３項に記載の監視装置において、前記第２生成部は、前記存在確率を用いた勾配降下法によって、前記フィルタパラメータの値を変更する。
【0139】
第４項に記載の監視装置によれば、段階的にフィルタパラメータの値を変更しなくても適切なフィルタパラメータの値に変更できる。よって、効率良くフィルタパラメータの値を変更できるため、非発光のマーカを速やかに検出できる。
【0140】
（第５項）
構成１から構成４のいずれか一項に記載の監視装置において、前記第１検出部が検出した前記マーカの前記撮影画像における位置を検出する第２検出部と、前記第２検出部が検出した前記マーカの位置に基づいて、前記撮影画像から前記表示パネルの所定領域に対応する領域を特定する特定部と、を備える。
構成１から構成４のいずれか一項に記載の監視装置において、前記第１検出部が検出した前記マーカの前記撮影画像における位置を検出する第２検出部と、前記第２検出部が検出した前記マーカの位置に基づいて、前記撮影画像から前記表示パネルの所定領域に対応する領域を特定する特定部と、を備える。
【0141】
第５項に記載の監視装置によれば、カメラの露出が低い場合でも、非発光のマーカを用いて当該カメラの撮影画像から表示パネルの所定領域を特定できる。
【0142】
（第６項）
別の一態様に係わる監視システムは、表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置と、前記表示パネルを撮影するカメラとを有する監視システムであって、前記監視装置は、前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、前記第１処理画像をぼやけ処理した第２処理画像を生成する第２生成部と、前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、前記第３処理画像から前記マーカを検出する第１検出部と、を備える。
別の一態様に係わる監視システムは、表示パネルに非発光のマーカを有する表示器を備える材料試験機の監視装置と、前記表示パネルを撮影するカメラとを有する監視システムであって、前記監視装置は、前記表示パネルを撮影するカメラの撮影画像を取得する取得部と、前記撮影画像をグレースケール化した第１処理画像を生成する第１生成部と、前記第１処理画像をぼやけ処理した第２処理画像を生成する第２生成部と、前記第１処理画像を前記第２処理画像に基づき２値化した第３処理画像を生成する第３生成部と、前記第３処理画像から前記マーカを検出する第１検出部と、を備える。
【0143】
第６項に記載の監視システムによれば、第１項に記載の監視装置の効果と同様の効果を奏する。
【0144】
［４．その他の実施形態］
なお、各実施形態に係る疲労試験機１は、あくまでも本発明に係る材料試験機の態様の例示であり、本発明の主旨を逸脱しない範囲において任意に変形および応用が可能である。
なお、各実施形態に係る疲労試験機１は、あくまでも本発明に係る材料試験機の態様の例示であり、本発明の主旨を逸脱しない範囲において任意に変形および応用が可能である。
【0145】
例えば、上述した各実施形態では、材料試験機が疲労試験機１である場合について説明するが、これに限定されない。材料試験機が、例えば、引張試験機、圧縮試験機、曲げ試験機、ねじり試験機等であってもよい。
【0146】
例えば、上述した各実施形態では、フィルタパラメータとしてフィルタサイズを例示した。しかしながら、フィルタパラメータは、ぼやけ処理がガウシアンフィルタである場合、標準偏差や平均値としてもよい。
【0147】
例えば、上述した各実施形態では、ぼやけ処理としてガウシアンフィルタを例示したが、ぼやけ処理はガウシアンフィルタに限定されず、平均化フィルタなどの他のフィルタでもよい。例えば、ぼやけ処理が平均化フィルタである場合、フィルタパラメータは、フィルタサイズとしてもよい。
【0148】
例えば、上述した各実施形態では、表示器は制御装置２０に限定されない。表示器は、表示パネル２１の構成と同じ構成であれば制御装置２０と別体でもよい。
【0149】
また、例えば、マーカＭＫの色は、上述した実施形態の色に限定されない。マーカＭＫは、非発光のマーカＭＫであればよい。
【0150】
また、図５及び図１５に示した各機能部は機能的構成を示すものであって、具体的な実装形態は特に制限されない。つまり、必ずしも各機能部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサがプログラムを実行することで複数の機能部の機能を実現する構成とすることも勿論可能である。また、上記実施形態においてソフトウェアで実現される機能の一部をハードウェアで実現してもよく、或いは、ハードウェアで実現される機能の一部をソフトウェアで実現してもよい。
【0151】
また、図１２、図１４、及び図１６に示すフローチャートの処理単位は、サーバ装置５による処理を理解容易にするために、主な処理内容に応じて分割したものである。これらフローチャートに示す処理単位の分割の仕方や名称によって制限されることはなく、処理内容に応じて、さらに多くの処理単位に分割することもできるし、１つの処理単位がさらに多くの処理を含むように分割することもできる。また、上記のフローチャートの処理順序も、図示した例に限られるものではない。
【0152】
プロセッサ５０に実行させる制御プログラム５２１は、コンピュータで読み取り可能に記録した記録媒体に記録しておくことも可能である。
記録媒体としては、磁気的、光学的記録媒体又は半導体メモリデバイスを用いることができる。具体的には、フレキシブルディスク、ＨＤＤ、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ、Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ、光磁気ディスク、フラッシュメモリ、カード型記録媒体等の可搬型、或いは固定式の記録媒体が挙げられる。
また、記録媒体は、サーバ装置５が備える内部記憶装置であるＲＡＭ、ＲＯＭ、ＨＤＤ等の不揮発性記憶装置であってもよい。また、制御プログラム５２１をサーバ装置５と異なる他のサーバ装置等に記憶させておき、サーバ装置５は、当該他のサーバ装置から制御プログラム５２１をダウンロードしてもよい。
記録媒体としては、磁気的、光学的記録媒体又は半導体メモリデバイスを用いることができる。具体的には、フレキシブルディスク、ＨＤＤ、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ、Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ、光磁気ディスク、フラッシュメモリ、カード型記録媒体等の可搬型、或いは固定式の記録媒体が挙げられる。
また、記録媒体は、サーバ装置５が備える内部記憶装置であるＲＡＭ、ＲＯＭ、ＨＤＤ等の不揮発性記憶装置であってもよい。また、制御プログラム５２１をサーバ装置５と異なる他のサーバ装置等に記憶させておき、サーバ装置５は、当該他のサーバ装置から制御プログラム５２１をダウンロードしてもよい。
【符号の説明】
【0153】
１ 疲労試験機（材料試験機）
４ 第３カメラ（カメラ）
５ サーバ装置（監視装置）
２０ 制御装置（表示器）
３３ 第１表示器領域（所定領域）
３４ 第２表示器領域（所定領域）
３５ 第３表示器領域（所定領域）
１００ 監視システム
５０１ 取得部
５０２ 第１画像生成部（第１生成部）
５０３ 第２画像生成部（第２生成部）
５０４ 第３画像生成部（第３生成部）
５０５ 第１検出部
５０６ 第２検出部
５０７ 特定部
５２１ 制御プログラム
５２８ 第３学習済みモデル（学習済みモデル）
ＭＫ マーカ
Ｐ３ パネル撮影画像（カメラの撮影画像）
Ｐ４ グレースケール画像（第１処理画像）
Ｐ５ ぼやけ処理画像（第２処理画像）
Ｐ６ ２値化画像（第３処理画像）
４ 第３カメラ（カメラ）
５ サーバ装置（監視装置）
２０ 制御装置（表示器）
３３ 第１表示器領域（所定領域）
３４ 第２表示器領域（所定領域）
３５ 第３表示器領域（所定領域）
１００ 監視システム
５０１ 取得部
５０２ 第１画像生成部（第１生成部）
５０３ 第２画像生成部（第２生成部）
５０４ 第３画像生成部（第３生成部）
５０５ 第１検出部
５０６ 第２検出部
５０７ 特定部
５２１ 制御プログラム
５２８ 第３学習済みモデル（学習済みモデル）
ＭＫ マーカ
Ｐ３ パネル撮影画像（カメラの撮影画像）
Ｐ４ グレースケール画像（第１処理画像）
Ｐ５ ぼやけ処理画像（第２処理画像）
Ｐ６ ２値化画像（第３処理画像）
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】