特開 2024-87680 監視システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024087680

(43)【公開日】2024-07-01

(54)【発明の名称】監視システム

(51)【国際特許分類】

   G06F 21/32 20130101AFI20240624BHJP

   G06T 7/00 20170101ALI20240624BHJP

   G06V 40/18 20220101ALI20240624BHJP

   G06F 3/01 20060101ALI20240624BHJP

【ＦＩ】

G06F21/32

G06T7/00 510D

G06V40/18

G06F3/01 510

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2022202618

(22)【出願日】2022-12-19

(71)【出願人】

【識別番号】000003078

【氏名又は名称】株式会社東芝

(71)【出願人】

【識別番号】317015294

【氏名又は名称】東芝エネルギーシステムズ株式会社

(74)【代理人】

【識別番号】110001092

【氏名又は名称】弁理士法人サクラ国際特許事務所

(72)【発明者】

【氏名】広沢 陽一郎

(72)【発明者】

【氏名】高橋 圭

(72)【発明者】

【氏名】福冨 孝浩

(72)【発明者】

【氏名】岡本 雅巳

(72)【発明者】

【氏名】岩崎 正男

(72)【発明者】

【氏名】松崎 弘

【テーマコード（参考）】

5B043

5E555

【Ｆターム（参考）】

5B043AA04

5B043AA09

5B043BA04

5B043CA03

5B043DA05

5B043FA07

5B043GA05

5B043HA02

5B043HA11

5E555AA12

5E555AA26

5E555AA51

5E555BA02

5E555BA42

5E555BB02

5E555BC16

5E555CA02

5E555CA12

5E555CA18

5E555CA42

5E555CB56

5E555CB65

5E555CC03

5E555DB04

5E555DC21

5E555FA00

(57)【要約】      （修正有）

【課題】認証に用いる特徴点に汎用性を持たせつつ盗用されにくい監視システムを提供する。
【解決手段】ユーザに表示画面を提供する表示部１１及び表示部を目視するユーザの虹彩及び視線の動きを検出するカメラ部１２を備えた端末１０と接続される監視システム１において、サーバ４０は、ユーザの虹彩及び視線の動きを検出する視線検出部１０４と、視線検出部１０４が検出した虹彩及び視線の動きに基づいてユーザの認証を行う視線認証部１０１と、視線認証部１０１が認証したユーザに提供する表示画面を生成する表示処理部１０５と、を備える。
【選択図】図１

【特許請求の範囲】

【請求項1】

ユーザに表示画面を提供する表示部及び前記表示部を目視する前記ユーザの虹彩及び視線の動きを検出するカメラ部を備えた端末装置と接続される監視システムであって、
前記ユーザの虹彩及び視線の動きを検出する視線検出部と、
前記視線検出部が検出した前記虹彩及び前記視線の動きに基づいて前記ユーザの認証を行う視線認証部と、
前記視線認証部により認証された前記ユーザに提供する表示画面を生成する表示処理部と、
を備えた監視システム。

【請求項2】

前記ユーザの虹彩を示す虹彩情報及び前記ユーザに指定された視線の動きに対応する図形情報を記憶する認証情報データベースをさらに備え、
前記視線認証部は、前記視線検出部が検出した前記虹彩と前記虹彩情報との比較結果、及び前記視線検出部が検出した前記視線の動きと前記図形情報との比較結果に基づいて前記ユーザの認証を行うこと
を特徴とする請求項１記載の監視システム。

【請求項3】

前記視線検出部は、前記ユーザの視線の動きに基づいて前記ユーザの指示を受ける入力インタフェースとして機能することを特徴とする請求項１記載の監視システム。

【請求項4】

前記視線検出部が受けた前記ユーザの指示に基づいて所定の機能を起動する対話処理部をさらに備えたことを特徴とする請求項３記載の監視システム。

【請求項5】

前記視線検出部は、前記表示画面において前記ユーザが目視を継続する箇所に対応する画面ＩＤをさらに取得し、
前記監視システムは、
前記表示画面において前記ユーザが目視を継続する時間を記録する目視時間記録処理部と、
前記ユーザが目視を継続する時間の長い順に前記画面ＩＤに対応する箇所が表示されるよう前記表示処理部が生成する表示画面を編集する画面編集部と、をさらに備えたことを特徴とする請求項１記載の監視システム。

【請求項6】

前記視線検出部は、前記表示画面において前記ユーザが目視を継続する箇所に対応する画面ＩＤをさらに取得し、
前記監視システムは、
前記表示画面において前記ユーザが目視を継続する時間を記録する目視時間記録処理部と、
前記表示画面において前記ユーザが目視を継続する時間の長い画面ＩＤから上位所定数の画面ＩＤを取得する注目点処理部と、を備え、
前記表示処理部は、前記注目点処理部が取得した画面ＩＤを含む表示画面を生成すること
を特徴とする請求項１記載の監視システム。

【請求項7】

プラント機器のシンボル画像と前記プラント機器を識別するプラント機器ＩＤとを対応付けて記憶するプラント機器データベースと、
前記プラント機器ＩＤと前記表示画面における対応する箇所の画面ＩＤとを対応付けて記憶する関連機能データベースと、
前記視線検出部が取得した前記ユーザの視線の動きの終端部に対応する画像データを抽出し、抽出した画像データに基づいて対応するプラント機器ＩＤを前記プラント機器データベースから取得する画像解析部と、
前記画像解析部が取得した前記プラント機器ＩＤに基づき対応する画面ＩＤを前記関連機能データベースから取得する関連機能表示部と、を具備し、
前記表示処理部は、前記関連機能表示部が取得した画面ＩＤを用いて前記表示画面を生成することを特徴とする請求項３記載の監視システム。

【請求項8】

前記ユーザの指示に基づき前記視線検出部が取得した前記ユーザの視線の動きを記録する操作記録部と、
前記視線検出部が取得した前記ユーザの指示に基づき、記録した前記ユーザの視線の動きを再生するリプレイ処理部と
をさらに具備した請求項３記載の監視システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、ネットワークが接続されたプラント機器を遠隔から監視制御可能な監視システムに関する。

【背景技術】

【0002】

近年、インフラ施設でのテロ対策の必要性が高まってきており、特に発電プラント向けの監視制御システム（以下「監視システム」と呼ぶ。）のセキュリティ強化が課題の一つである。併せて、様々な本人認証方法を取り入れた監視システムが提案されている。

【0003】

例えば、利用者ごとのＩＣカードや生体情報（指紋、静脈、顔画像、虹彩パターン、声紋など）のいずれかで本人認証を行い、認証情報を元に操作範囲を開示する監視システムが提案されている。しかしながら、これらの認証方式では、外部の者に対象者のＩＣカードや顔写真、声の録音データを入手されることで認証を破られる可能性がある。

【0004】

例えば、従来の監視システムの生体認証方式では、指紋や虹彩といった身体的特徴を利用した方式や、対象者の歩き方のような行動的特徴を利用した方式が提案されている。しかし、これらの方式では、前者については、身体的特徴は半永久的に変更することができないから、身体的特徴を示す情報が盗まれ又は複製されると、二度とシステムを使用できなくなる可能性がある。また、後者については行動的特徴が外部から容易に視認されることから特徴を盗むことが容易であり、認証を突破される可能性は高い。すなわち、認証に用いる特徴点に汎用性がなく比較的盗用されやすい問題があった。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開2009-32032

【発明の概要】

【発明が解決しようとする課題】

【0006】

このように、従来の監視システムでは、認証に用いる特徴点に汎用性がなく比較的盗用されやすいという問題がある。本発明の目的は、認証に用いる特徴点に汎用性を持たせつつ盗用されにくい監視システムを提供することである。

【課題を解決するための手段】

【0007】

実施形態の監視システムは、ユーザに表示画面を提供する表示部及び表示部を目視するユーザの虹彩及び視線の動きを検出するカメラ部を備えた端末装置と接続される監視システムである。この監視システムは、ユーザの虹彩及び視線の動きを検出する視線検出部と、記視線検出部が検出した虹彩及び視線の動きに基づいてユーザの認証を行う視線認証部と、視線認証部により認証されたユーザに提供する表示画面を生成する表示処理部と、を備える。

【図面の簡単な説明】

【0008】

【図1】第１実施形態の監視システムの構成を示すブロック図である。

【図2】第１実施形態に係る認証情報の一例を示す図である。

【図3】第１実施形態に係る起動機能情報の一例を示す図である。

【図4】第１実施形態に係る画面作成情報の一例を示す図である。

【図5】第１実施形態に係る画面構成情報の一例を示す図である。

【図6】第１実施形態に係るサーバ機能情報の一例を示す図である。

【図7】第１実施形態の監視システムの動作を示すフローチャートである。

【図8】第１実施形態の視線情報の一例を示す図である。

【図9】第１実施形態の視線入力補正画面の一例を示す図である。

【図10】第１実施形態の視線入力画面の一例を示す図である。

【図11】第２実施形態の監視システムの構成を示すブロック図である。

【図12】第２実施形態の視線記録情報の一例を示す図である。

【図13】第２実施形態の対話画面情報の一例を示す図である。

【図14】第２実施形態の対話画面情報の一例を示す図である。

【図15】第２実施形態の監視画面情報の一例を示す図である。

【図16】第２実施形態の監視画面情報の一例を示す図である。

【図17】第２実施形態の監視システムの動作を示すフローチャートである。

【図18】第３実施形態の監視システムの構成を示すブロック図である。

【図19】第３実施形態のプラント機器情報の一例を示す図である。

【図20】第３実施形態の関連機能情報の一例を示す図である。

【図21】第３実施形態の監視システムの動作を示すフローチャートである。

【図22】第４実施形態の監視システムの構成を示すブロック図である。

【図23】第４実施形態の操作記録情報の一例を示す図である。

【図24】第４実施形態の監視システムの動作を示すフローチャートである。

【発明を実施するための形態】

【0009】

（第１実施形態）
実施形態の監視システムは、外部から動作が視認されにくい瞳孔の動きを使用した視線認証方式を用いている。視線認証方式は、外部から視線の動きを盗み取ることを難しくすることができる。併せて、視線認証方式は、虹彩や網膜などの身体的特徴を利用した認証と組み合わせることが容易である。汎用性があり外部から視認されにくい方式と、複製が困難な身体的特徴を利用する方式とを組み合わせることで、より強固な認証方式を提供することが可能になる。

【0010】

瞳孔の動きを利用した視線認証方式は、赤外線投光器付きのＣＭＯＳカメラを用いる。この方式によれば、利用者の目の画像を解析し、視線をトラッキングする視線追従技術を利用するので、外部からの視認が困難である。さらに、視線追従技術を応用して、監視システムの操作方法として、従来のポインティングデバイスによる操作に加えて、利用者の視線の動きを追尾し注視した部分を実行する視線操作機能による操作を提供する。これは、従来のポインティングデバイスを操作できない状況においても監視システムの操作を可能にする。さらに、偽造が困難な虹彩や網膜などを利用した認証技術を採用する。虹彩や網膜は人それぞれ異なるから、元来セキュリティ向上に資する身体的特徴点である。

【0011】

以下、図面を参照して、第１実施形態の構成を説明する。図１に示すように、実施形態の監視システム１は、サーバ４０と、サーバ４０と表示用バス３０を介して接続される端末１０と、サーバ４０とプラントプロセス入力用バス５０を介して接続されるプラント機器６０とを有する。ここで、プラント機器６０は監視対象である。

【0012】

端末１０は、ユーザがプラント機器６０を監視するための指示を与え、プラント機器６０に関する情報を受けるユーザインタフェースである。端末１０は、表示画面を表示する表示部１１、ユーザの目の画像を撮影可能なカメラ部１２、端末１０に情報を入力する入力インタフェース１３を有する。表示部１１は、例えば液晶表示装置などでありタッチパネルのように情報入力機能を有してもよい。カメラ部１２は、例えば近赤外線投光器付きＣＭＯＳカメラなどである。入力インタフェース１３は、例えばキーボードやマウスなどであり、表示部１１と一体化してもよい。端末１０は、表示用バス３０と接続可能な図示しないインタフェースを有している。端末１０は、カメラ部１２が撮影したユーザの画像データを生成する。

【0013】

サーバ４０は、端末１０から受けた指示に基づいてプラント機器６０を監視し制御を実行するコンピュータ装置である。サーバ４０は、視線認証部１０１、認証情報データベース（認証情報ＤＢ）１０２、視線入力データベース（視線入力ＤＢ）１０３、視線検出部１０４を有している。また、サーバ４０は、表示処理部１０５、対話処理部１０６、起動処理データベース（起動処理ＤＢ）１０７、画面作成データベース（画面作成ＤＢ）１０８、画面構成データベース（画面構成ＤＢ）１０９を有している。さらに、サーバ４０は、サーバ処理部１１０、プラント監視データベース（プラント監視ＤＢ）１１１、プロセス処理部１１２を有している。

【0014】

視線認証部１０１は、カメラ部１２が撮影したユーザの画像データから抽出した視線情報を用いて認証する演算ブロックである。認証情報ＤＢ１０２は、端末１０を操作するユーザの認証情報を予め登録するデータベースである。認証情報ＤＢ１０２が予め登録するユーザの認証情報としては、ユーザの虹彩や網膜情報（以下「虹彩情報」と呼ぶ。）、ユーザの視線が追従すべき図形を示す図形情報、ユーザの瞳孔の動きを示す軌跡情報などが例示される。認証情報ＤＢ１０２は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。視線認証部１０１は、受け付けた視線情報と認証情報ＤＢ１０２に登録されている認証情報に含まれる虹彩情報とを比較して認証する。

【0015】

図２は、認証情報ＤＢ１０２に記憶される認証情報の一例である。図２に示すように、実施形態の認証情報は、ユーザの虹彩情報、ユーザの視線が追従すべき図形を示す図形情報、ユーザが視線を移動する描画順を示す軌跡情報などが含まれている。図２に示す例では、図形情報は矩形、軌跡情報は矩形に沿って右回りに移動する軌跡が含まれている。

【0016】

視線入力ＤＢ１０３は、ユーザの視線情報を記憶するデータベースである。視線情報は、端末１０から送られるユーザの画像情報から抽出されるユーザの虹彩情報やユーザの視線の動きを示す軌跡情報などが例示される。また、視線情報として、ユーザの視線が追従すべき図形情報、視線の動きを示す軌跡情報、視線の動きが止まる時間を示す注視情報などを含んでもよい。視線入力ＤＢ１０３は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。視線検出部１０４は、端末１０から表示用バス３０を介して送られる画像データを受信し、受信した画像データからユーザの虹彩情報や視線の軌跡情報を検出し、視線情報として視線入力ＤＢ１０３に登録する演算ブロックである。

【0017】

表示処理部１０５は、端末１０に表示させる画面表示の情報（以下「画面表示情報」と呼ぶ。）を生成する演算ブロックである。表示処理部１０５は、視線検出部１０４が視線入力ＤＢ１０３に登録した虹彩情報や軌跡情報を読み出し、端末１０からの表示要求に基づき画面作成ＤＢ１０８や画面構成ＤＢ１０９から画面表示に必要な情報を取得し、画面表示情報を作成し、端末１０に画面表示情報を返す。

【0018】

対話処理部１０６は、端末１０を操作するユーザの指示を受け、指示に基づき所定の機能を動作させる演算ブロックである。対話処理部１０６は、表示処理部１０５からの起動機能要求を受信し、起動処理ＤＢ１０７から起動機能情報を取得し、サーバ処理部１１０から必要な機能を起動する。

【0019】

起動処理ＤＢ１０７は、サーバ４０やプラント機器６０における所定の機能を起動させる手順などを示す起動機能情報が格納されたデータベースである。起動処理ＤＢ１０７が記憶する起動機能情報としては、画面表示を識別する画面ＩＤや対応する起動機能番号などが例示される。起動処理ＤＢ１０７は、不揮発性メモリやハートディスクドライブなどの記憶媒体上に構成される。

【0020】

図３は、起動処理ＤＢ１０７に記憶される起動機能情報の一例である。図３に示す例では、実施形態の起動機能情報は、画面表示を識別する画面ＩＤと、画面ＩＤそれぞれに対応付けた起動機能番号を含んでいる。

【0021】

画面作成ＤＢ１０８は、画面の種類とレイアウトなどを対応付けた画面作成情報を記憶するデータベースである。画面作成ＤＢ１０８が記憶する画面作成情報は、画面表示を識別する画面ＩＤや対応するレイアウトデータなどが例示される。画面作成ＤＢ１０８は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。

【0022】

図４は、画面作成ＤＢ１０８に記憶される画面作成情報の一例である。図４に示す例では、実施形態の画面作成情報は、画面表示を識別する画面ＩＤと、画面ＩＤそれぞれに対応付けたレイアウトデータを含んでいる。レイアウトデータは、画面表示を構成する部品（構成部品）、構成部品の色、構成部品の位置（配置座標）の要素を含んでいる。図４に示すように、一つの画面ＩＤに複数の構成部品が含まれる場合があるが、構成部品それぞれにはその色と配置座標が必ず対応付けられている。

【0023】

画面構成ＤＢ１０９は、画面表示情報が表す画面の表示画面数とその構成パターンなどを対応付けた画面構成情報を記憶するデータベースである。画面構成ＤＢ１０９が記憶する画面構成情報は、表示画面における表示画面数と対応する画面構成パターンなどが例示される。画面構成ＤＢ１０９は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。

【0024】

図５は、画面構成ＤＢ１０９に記憶される画面構成情報の一例である。図５に示す例では、実施形態の画面構成情報は、表示画面における画面表示数と、画面表示数に対応する構成パターンを含んでいる。構成パターンは、画面表示の配置を示す配置座標と、その画面表示の縮尺を含んでいる。この縮尺は、全画面を１００としたときの割合値で表してもよい。図５に示す例では、画面表示数が「１」のとき（全画面で一つの画面表示のとき）、縮尺は１００であるが、画面１及び２からなる画面表示数「２」のときは、画面１の配置座標及びその縮尺「５０」、画面２の配置座標及びその縮尺「５０」となっている。同様に、図５に示す例では、画面１乃至３からなる画面表示数「３」のときは、画面１の配置座標及びその縮尺「５０」、画面２の配置座標及びその縮尺「２５」、画面３の配置座標及びその縮尺「２５」となっている。すなわち、画面構成情報は、あらかじめユーザが適宜設定することができる。

【0025】

サーバ処理部１１０は、サーバ４０の諸機能を実現する演算ブロックである。サーバ処理部１１０が実現する機能としては、プラント機器６０の動作トレンドを端末１０に表示させるトレンドグラフ表示機能、プラント機器６０の構成を端末１０に表示させる系統図表示機能、端末１０にユーザに対する警報を表示させる警報画面表示機能、サーバ４０やプラント機器６０の動作ログを端末１０に表示させるログ表示機能、端末１０にてユーザが入力したデータをサーバ４０やプラント機器６０に反映させるデータ入力機能などが例示される。

【0026】

図６は、サーバ処理部１１０の起動機能番号と起動プロセス名との関係の一例である。実施形態のサーバ処理部１１０は、実現する機能たる起動プロセス名に対応する起動機能番号を付しており、起動機能番号を受け付けることで対応する起動プロセス名の機能を動作させることができる。

【0027】

プラント監視ＤＢ１１１は、プラント機器６０の状態を記憶するデータベースである。プラント監視ＤＢ１１が記憶する情報は、例えばプロセス機器６０のプロセスを示すプロセス値などが例示される。プラント監視ＤＢ１１１は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。

【0028】

プロセス処理部１１２は、プラント機器６０の状態を取得する演算ブロックである。プロセス処理部１１２は、プラント機器６０の状態についてプラントプロセス入力用バス５０を介して取得し、プラント監視ＤＢ１１１に登録する。

【0029】

続いて、図７を参照して、第１実施形態の監視システムの動作を説明する。端末１０のカメラ部１２は、ユーザの顔面（特に眼）を撮影して近赤外反射画像データを生成する（Ｓ２００）。カメラ部１２が生成した画像データは、少なくともユーザの虹彩が含まれている。端末１０は、カメラ部１２が生成した画像データについて表示用バス３０を介してサーバ４０に送信する。

【0030】

サーバ４０の視線検出部１０４は、端末１０から送られる画像データを受信し、受信した画像データに基づいてユーザの眼の瞳孔を検出する（Ｓ２０５）。瞳孔の検出は、受信した画像に対して二値化処理を実施することで実現することができる。

【0031】

続いて、視線検出部１０４は、ユーザの視線の動きに追従する視線追従処理を実行する（Ｓ２１０）。視線検出部１０４は、画像データ上に検出した瞳孔の輪郭部の周方向に互いに間隔をおいた任意の５点を選択し、原点を通らない楕円方程式を用いて瞳孔の中心位置と回転角を算出する。そして、視線検出部１０４は、算出した瞳孔の中心位置と回転角に基づいて、端末１０の表示部１１における画面上の座標空間内の移動距離と方向に換算し、ユーザの視線の動きを検出する。

【0032】

視線検出部１０４は、ユーザの視線を追従することで、ユーザが表示部１１の画面上を注視しているかどうか判定することができる（Ｓ２１５，Ｓ２１５のＮｏ）。ユーザの視線が同じ場所で所定時間以上（例えば２秒以上）静止した場合（Ｓ２１５のＹｅｓ）、視線検出部１０４は、ユーザは所定の場所を注視した（している）と判定し、表示部１１の画面上のユーザが注視した位置を選択（マウスでいうクリック）したものとして表示処理部１０５に通知し、これまでに視線検出部１０４が得た視線情報を視線入力ＤＢ１０３に登録する（Ｓ２２０）。

【0033】

図８は、視線検出部１０４が視線入力ＤＢ１０３に登録する視線情報の一例である。図８に示す例では、視線情報として、ユーザの画像データから抽出したユーザの虹彩情報、ユーザの視線が追従すべき形態を示す図形情報、ユーザの画像データから抽出した視線の動きを示す軌跡情報、ユーザが注視した場合の注視時刻（年月日時分秒までの時刻）を含んでいる。

【0034】

ユーザが初めて実施形態の監視システム１を利用する場合、視線検出部１０４は、虹彩の読取誤差を補正する必要がある（Ｓ２２５）。表示処理部１０５は、画面作成ＤＢ１０８から補正用画面表示データを端末１０に送信し、表示部１１は補正用画面を表示する。

【0035】

図９は、表示部１１に表示される補正用画面の一例である。図９に示すように、補正用画面１５は、黒色で円形のマーク１５ａ～１５ｅが表されている。補正用画面１５における略中央にマーク１５ａ、左上隅にマーク１５ｂ、右上隅にマーク１５ｃ、左下隅にマーク１５ｄ、左下隅にマーク１５ｅが表され、上縁部にメッセージ１５ｆが表されている。

【0036】

ユーザがメッセージ１５ｆに従い視線を所定の順序でマーク及びマーク間を移動させると、視線検出部１０４は、補正用の視線情報を検出することができる。補正用画面１５における各マークの位置はあらかじめわかっているから、ユーザが正しく視線をマーク及びマーク間を視線移動させれば、その誤差が算出でき、誤差の補正が可能になる。図８に示す例では、メッセージ１５ｆは、ユーザは視線を中央のマーク１５ａ、左上隅のマーク１５ｂ、右上隅のマーク１５ｃ、右下隅のマーク１５ｄ、左下隅のマーク１５ｅを順に視線を移動させるよう促している。

【0037】

続いて、サーバ４０の視線認証部１０１は、視線入力ＤＢ１０３からユーザの視線情報に含まれる虹彩情報を読み出し、認証情報ＤＢ１０２にあらかじめ記憶されたユーザ毎の認証情報に含まれた虹彩情報と比較する（Ｓ２３０）。比較の結果、ユーザの虹彩情報と認証情報に含まれる虹彩情報とが一致しない場合（Ｓ２３０のＮｏ）、視線認証部１０１は、端末１０から送られた画像データに含まれる虹彩情報は未登録ユーザのものであると判定し表示処理部１０５にその旨を通知する。表示処理部１０５は、未登録ユーザである旨を通知する画面表示データを画面作成ＤＢ１０８から読み出して端末１０へ送信する（Ｓ２３５）。通知を受信した端末１０は、表示部１１に未登録ユーザである旨通知する表示画面を表示する。

【0038】

比較の結果、ユーザの虹彩情報と認証情報に含まれる虹彩情報とが一致した場合（Ｓ２３０のＹｅｓ）、視線認証部１０１は、一致した虹彩情報を認証済として視線入力ＤＢ１０３に登録する（Ｓ２４０）。視線認証部１０１は、虹彩情報が認証されると、視線認証のための視線入力画面の画面ＩＤを含む要求信号を表示処理部１０５に送信する。表示処理部１０５は、視線入力画面の画面ＩＤを用いて画面作成ＤＢ１０８から対応する画面表示情報を読み出し、端末１０に送信する。端末１０は、受信した画面表示情報に対応する画面表示を表示部１１に表示する（Ｓ２４５）。

【0039】

図１０は、表示部１１に表示される視線入力画面の一例である。図１０に示すように、視線入力画面１６はブランクであり、上縁部にメッセージ１６ａが表されている。図１０に示す例では、メッセージ１６ａは、ユーザに視線を所定の図形に追従して視線を移動するよう促している。

【0040】

この段階で、端末１０はユーザの視線による認証の待機状態となる。ユーザが表示部１１の指示に従って予め決められた図形の形をなぞるように所定の順序で表示部１１への視線を移動させ最後の順序の位置で注視すると、カメラ部１２は、ユーザの視線の移動を捉えた画像データを取り込む（Ｓ２５０）。端末１０は、取得した画像データについて表示用バス３０を介してサーバ４０に送る。ユーザは、視線を移動する際の図形について、認証情報ＤＢ１０２にあらかじめ登録された認証情報の図形情報及び軌跡情報に従って行うものとする。

【0041】

サーバ４０の視線検出部１０４は、前述したとおり端末１０から送られた画像データから虹彩情報や軌跡情報などを抽出し、注視時刻を検出して視線情報として視線入力ＤＢ１０３に登録する。視線認証部１０１は、視線入力ＤＢ１０３から視線情報を読み出し、視線情報に含まれる虹彩情報をキーとして認証情報ＤＢ１０２に登録された認証情報から一致するものを検索する（Ｓ２５５）。視線認証部１０１は、検索された認証情報に含まれる図形情報及び軌跡情報と、視線情報に含まれる図形情報及び軌跡情報とを比較する（Ｓ２６０）。

【0042】

比較の結果一致しない場合（Ｓ２６０のＮｏ）、即ち、ユーザの視線の動きが予め決められた認証情報のそれと異なる場合、視線認証部１０１は、認証失敗と判定し、表示処理部１０５に通知する。表示処理部１０５は、認証失敗である旨を通知する画面表示データを画面作成ＤＢ１０８から読み出して端末１０へ送信する。通知を受信した端末１０は、表示部１１に認証失敗である旨通知する表示画面を表示する（Ｓ２６５）。

【0043】

比較の結果一致した場合（Ｓ２６０のＹｅｓ）、即ち、ユーザの視線の動きが予め決められた認証情報のそれと一致する場合、視線認証部１０１は、認証成功と判定し、表示処理部１０５に通知する。表示処理部１０５は、初期画面の画面表示データを画面作成ＤＢ１０８から読み出して端末１０へ送信する。通知を受信した端末１０は、表示部１１に初期画面を表示する（Ｓ２７０）。

【0044】

実施形態の監視システム１によれば、システムの認証方式として、ユーザの虹彩情報に加えてユーザの視線の動きを用いるので、システムへの侵入を抑えることができる。また、実施形態の監視システム１によれば、ユーザの視線の動きを検出するので、ユーザインタフェースとしてのポインティングデバイスの代替として入力操作を実現することができる。

【0045】

（第２実施形態）
次に、図１１を参照して、第２実施形態に係る監視システム２を詳細に説明する。第２実施形態の監視システム２は、第１実施形態の監視システム１の構成の一部と新規な構成を組み合わせたものである。以下の説明において、共通する要素について共通の符号を付して示し、重複する説明を省略する。

【0046】

図１１に示すように、実施形態の監視システム２は、サーバ４１と、サーバ４１と表示用バス３０を介して接続される端末１０と、サーバ４１とプラントプロセス入力用バス５０を介して接続されるプラント機器６０とを有する。ここで、プラント機器６０は監視対象である。

【0047】

サーバ４１は、端末１０から受けた指示に基づいてプラント機器６０を監視し制御を実行するコンピュータ装置である。サーバ４１は、視線検出部１０４、表示処理部１０５、対話処理部１０６、起動処理ＤＢ１０７、画面作成ＤＢ１０８、画面構成ＤＢ１０９、サーバ処理部１１０、視線記録データベース（視線記録ＤＢ）１１３、目視時間記録処理部１１４、画面編集部１１５、注目点処理部１１６を有している。

【0048】

視線記録ＤＢ１１３は、ユーザが端末１０の表示部１１（画面）を見ている時間（目視時間）を記録するデータベースである。視線記録ＤＢ１１３が記憶する視線記録情報は、画面表示を識別する画面ＩＤとその画面表示をユーザが目視した時間を示す目視時間などが例示される。視線記録ＤＢ１１３は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。

【0049】

図１２は、視線記録ＤＢ１１３が記憶する視線記録情報の一例である。図１２に示す例では、目視情報は、画面ＩＤと、その画面ＩＤに対応する目視時間が組み合わされている。図１２に示す例では、画面ＩＤ「ＳＣＲ－００００」について目視時間６０秒であったことが表されている。

【0050】

目視時間記録処理部１１４は、視線検出部１０４が検出した目視時間を含む視線記録情報を視線記録ＤＢ１１３に登録する演算ブロックである。画面編集部１１５は、対話画面の表示要求が通知された場合に視線記録ＤＢ１１３を参照し、視線記録情報に含まれる目視時間が長い順に対話画面のレイアウトデータを変更する（並べ替える）演算ブロックである。注目点処理部１１６は、ユーザの目視時間の長い所定数の表示画面を取得して表示処理を行う演算ブロックである。

【0051】

図１３は、表示処理部１０５が画面作成ＤＢ１０８から読み出して端末１０の表示部１１に表示させる対話画面１７の一例である。対話画面１７は、ユーザに対してプラント機器６０の監視に関係する複数の機能の選択肢を提示する機能をもつ。図１３に示すように、対話画面１７は、画面１７ａ…１７ｉ…１７ｊ…１７ｎを含んでいる。画面１７ａ…１７ｉ…１７ｊ…１７ｎは、それぞれ異なる機能が割り当てられており、ユーザが端末１０の入力インタフェース１３を介していずれかの画面を選択すると、対応する機能に関する画面表示が拡大表示される。対話画面を通じて選択可能な機能は、例えばプラント機器６０の監視画面などが例示される。

【0052】

図１３に示すように、対話画面１７の上縁部には、タイトル１７ｏとして「対話画面」が表されている。なお、図１３に示す対話画面１７は初回表示であり、画面１７ａ…１７ｉ…１７ｊ…１７ｎの配列は任意である。

【0053】

図１５は、対話画面を通じて選択可能な機能としての監視画面１８の一例である。図１５に示す例では、実施形態の監視画面１８は、対話画面ボタン１８ａ、４画面表示ボタン１８ｂ、記録停止ボタン１８ｃ、記録ボタン１８ｄ、リプレイボタン１８ｅ、タイトル１８ｆ、監視内容１８ｇが表されている。

【0054】

対話画面ボタン１８ａは、監視画面１８から対話画面１７に遷移する機能を提供する。４画面表示ボタン１８ｂは、監視画面１８のほか合計４つの異なる監視画面等を一つの画面表示に表す機能を提供する。記録ボタン１８ｄは、画面表示の遷移の記録を開始する機能を提供し、記録停止ボタン１８ｃは、画面表示の遷移の記録を停止する機能を提供する。リプレイボタン１８ｅは、記録ボタン１８ｄにより記録された画面表示の遷移の記録を再生する機能を提供する。

【0055】

第２実施形態の監視システム２においても視線検出部１０４を備えており、ユーザの視線の移動を入力インタフェースの代替手段として用いることができる。第２実施形態では、端末１０の表示部１１に表示された対話画面１７をメニューとして、ユーザの視線移動により任意の機能を示す画面１７ａ…１７ｉ…１７ｊ…１７ｎを選択可能としている。ユーザが対話画面１７において、例えば監視画面１８へ遷移する画面を視線により選択すると、表示処理部１０５及び対話処理部１０６は、対応する監視画面１８を端末１０の表示部１１に表示させる。

【0056】

続いて、図１７を参照して、第２実施形態の監視システムの動作を説明する。第２実施形態の動作は、第１実施形態による複数の認証を経た後の動作である。以下の説明において、第１実施形態の動作と共通する認証動作については説明を省略する。

【0057】

（認証処理後の画面表示動作）
第１実施形態の動作に従い、表示処理部１０５は、初期画面として対話画面１７を端末１０の表示部１１に表示させる（Ｓ３００）。ユーザは、対話画面１７に対する視線操作や入力インタフェース１３としてのマウスなどにより、指示を与える。

【0058】

ユーザが、対話画面１７において選択したい画面１７ａ…１７ｉ…１７ｊ…１７ｎのいずれかを視線で選択すると、視線検出部１０４は、視線による画面の選択を検出し、選択された画面ＩＤを視線記録ＤＢ１１３に記録し、選択された画面ＩＤを画面表示要求に格納して表示処理部１０５に送る（Ｓ３０５）。

【0059】

表示処理部１０５は、画面表示要求に格納された画面ＩＤを必要機能の起動要求に格納し、対話処理部１０６に対して必要機能の起動要求を通知する（Ｓ３１０）。必要機能は、選択された画面（画面ＩＤ）に対応し起動されるべき機能である。画面ＩＤは、端末１０の表示部１１に表示される表示画面を構成する部分を特定するＩＤであり、例えばアイコンやボタンなどの表示に対応する識別番号である。

【0060】

対話処理部１０６は、受け取った起動要求に含まれる画面ＩＤをキーとして、起動処理ＤＢ１０７から起動機能番号を取得し、サーバ処理部１１０に対して起動機能番号に対応する機能を起動させる（Ｓ３１５）。サーバ処理部１１０において所定の機能が起動されると、対話処理部１０６は表示処理部１０５に対し起動完了通知を返す。

【0061】

表示処理部１０５は、起動完了通知を受信すると、起動要求に格納した画面ＩＤをキーとして画面作成ＤＢ１０８からレイアウトデータを取得する。併せて、表示処理部１０５は、起動要求の機能に対応する表示画面数をキーとして、画面構成ＤＢ１０９から画面構成パターンを取得する（Ｓ３２０）。機能に対応する表示画面数とは、例えば、デフォルト（表示要求の表示画面数に何も設定されていない場合）は「１」、４画面表示要求の場合は「４」、関連機能表示の場合はデータベースに登録されている枚数である。

【0062】

表示処理部１０５は、取得したレイアウトデータ及び画面構成パターンに基づいて、起動要求の機能に対応する画面（例えば監視画面１８）を含む表示画面データを生成し、端末１０に送信する（Ｓ３２５）。

【0063】

（目視時間の記録動作）
ユーザが選択した機能が起動し所定の表示画面が端末１０の表示部１１に表示されると、目視時間記録処理部１１４は、視線検出部１０４を通じてユーザがその表示画面を見ている時間（目視時間）を検出し、視線記録ＤＢ１１３に記録する（Ｓ３３０）。具体的には、目視時間記録処理部１１４は、視線検出部１０４が検出した視線の先端に対応する画面上の座標が、所定の画面（例えば対話画面１７上の画面１７ａ…１７ｉ…１７ｊ…１７ｎ）それぞれの中に存在しているか否かを判定し、存在している場合に視線記録ＤＢ１１３に記録された当該画面ＩＤに対応する目視時間の値を加算する。

【0064】

（画面一覧の並べ替え動作）
画面表示動作により機能に対応する画面として監視画面１８が端末１０の表示部１１に表示され、目視時間が記録されている状態で、ユーザが監視画面１８上の対話画面ボタン１８ａを選択した場合（Ｓ３３５のＹｅｓ）、表示処理部１０５は、対話画面ボタン１８ａに対応する画面ＩＤを画面並び替え要求に格納し、画面編集部１１５に通知する。画面編集部１１５は、画面並び替え要求に格納された画面ＩＤをキーとして、視線記録ＤＢ１１３から対応する目視時間を取得する（Ｓ３４０）。

【0065】

画面編集部１１５は、取得した画面ＩＤに対応する目視時間（時間幅）に基づいて、目視時間が長い順に画面の左上から右下に向かって縦方向に画面一覧が表示されるように、画面作成ＤＢ１０８に記録されたレイアウトデータを編集する（Ｓ３４５）。この動作により、レイアウトデータには、例えば対話画面１７に表示される複数の監視画面１８のうち目視時間の長い順に並べ替えられる。

【0066】

図１４は、かかる動作によりレイアウトデータが変更された対話画面１７の一例である。図１４に示す対話画面１７では、画面１７ａ…１７ｉ…１７ｊ…１７ｎが並び替えられ、ユーザが個々の画面を目視した目視時間の長い順に並べ替えられている。

【0067】

レイアウトデータの編集が完了すると、画面編集部１１５は、編集の完了を表示処理部１０５に通知する。編集完了を受信すると、表示処理部１０５は、画面作成ＤＢ１０８から編集されたレイアウトデータを取得して対話画面１７の表示画面データを生成し、端末１０の表示部１１に表示させる（Ｓ３５０）。

【0068】

かかる動作により、ユーザが監視画面１８を目視する時間が長い順に対話画面１７における画面の表示位置を並び替えるので、ユーザが次に画面を選択する際の負担を軽減することができる。

【0069】

（４画面表示）
画面表示動作により機能に対応する画面として監視画面１８が端末１０の表示部１１に表示され、目視時間が記録されている状態で、ユーザが監視画面１８上の４画面表示ボタン１８ｂを選択した場合（Ｓ３３５のＮｏ、Ｓ３５５のＹｅｓ）、表示処理部１０５は、４画面表示ボタン１８ｂに対応する画面ＩＤを注目表示要求に格納し、注目点処理部１１６に通知する。注目表示要求を受けると、注目点処理部１１６は、視線記録ＤＢ１１３から目視時間が長い上位４画面の画面ＩＤを取得し、画面表示要求に取得した画面ＩＤと画面表示数（４画面表示の場合「４」）を格納し、表示処理部１０５に返す（Ｓ３６０）。

【0070】

画面表示要求を受けると、表示処理部１０５は、画面作成ＤＢ１０８及び画面構成ＤＢ１０９からレイアウトデータと構成パターンとを取得し、画面表示要求に含まれる４つの画面ＩＤを用いて監視画面１９の表示画面データを生成し、端末１０の表示部１１に表示させる（Ｓ３６５）。

【0071】

図１６は、４画面表示された監視画面１９の一例である。図１６に示すように、表示処理部１０５は、目視時間が長い４つの監視画面１９ａ～１９ｄを画面の左上から右下に向かって並べた形態の画面表示データを生成する。

【0072】

かかる動作により、ユーザが実際に画面を見ている時間が長い順に画面表示を行うので、より円滑な監視を実現できる。

【0073】

（第３実施形態）
次に、図１８を参照して、第３実施形態に係る監視システム３を詳細に説明する。第３実施形態の監視システム３は、第１実施形態の監視システム１の構成の一部と新規な構成を組み合わせたものである。以下の説明において、共通する要素について共通の符号を付して示し、重複する説明を省略する。

【0074】

図１８に示すように、実施形態の監視システム３は、サーバ４２と、サーバ４２と表示用バス３０を介して接続される端末１０と、サーバ４２とプラントプロセス入力用バス５０を介して接続されるプラント機器６０とを有する。ここで、プラント機器６０は監視対象である。

【0075】

サーバ４２は、端末１０から受けた指示に基づいてプラント機器６０を監視し制御を実行するコンピュータ装置である。サーバ４２は、視線入力ＤＢ１０３、視線検出部１０４、表示処理部１０５、対話処理部１０６、起動処理ＤＢ１０７、画面作成ＤＢ１０８、画面構成ＤＢ１０９、サーバ処理部１１０、プラント監視ＤＢ１１１、プロセス処理部１１２、画像解析部１１７、プラント機器データベース（ＤＢ）１１８、関連機能表示部１１９、関連機能データベース（ＤＢ）１２０を有している。

【0076】

画像解析部１１７は、視線検出部１０４が検出した画像を解析する演算ブロックである。画像解析部１１７は、視線検出部１０４から受け取った画像を解析し、解析結果に基づいて関連機能表示要求を関連機能表示部１１９に渡す機能を有する。関連機能表示とは、ある機能について複数の表示画面が存在する場合の表示形態である。

【0077】

プラント機器ＤＢ１１８は、プラント機器６０の画像と、プラント機器６０を識別するプラント機器ＩＤ（ＰＩＤ）とを対応付けて記録するデータベースである。プラント機器ＤＢ１１８は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。プラント機器ＩＤは、端末１０の表示部１１に表示されるプラント機器のシンボル画像に対応する識別番号である。例えば、表示部１１に表示されるプラント機器６０を表す画像があった場合、プラント機器ＩＤはかかる画像に対応付けられた識別番号となる。図１９は、プラント機器ＤＢ１１８が記録するデータの一例である。図１９に示す例では、プラント機器画像としてのプラント機器のシンボル画像と、対応するＰＩＤとが対応付けられている。

【0078】

関連機能表示部１１９は、画像解析部１１７から送られる関連機能表示要求に基づいて表示処理部１０５に画面表示要求を行う演算ブロックである。

【0079】

関連機能ＤＢ１２０は、画面ＩＤと、複数の画面ＩＤを紐づけているＰＩＤと、ＰＩＤごとの表示画面数とを対応付けて記憶するデータベースである。関連機能ＤＢ１２０は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。図２０は、関連機能ＤＢ１２０が記録するデータの一例である。図２０に示す例では、ＰＩＤと、当該ＰＩＤが示すプラント機器画像に対応する画面ＩＤと、当該ＰＩＤに対応する表示画面数とが対応付けられている。

【0080】

続いて、図２１を参照して、第３実施形態の監視システムの動作を説明する。第３実施形態の動作は、第１実施形態による複数の認証を経た後の動作である。以下の説明において、第１及び第２実施形態の構成及び動作と共通する構成及び動作については説明を省略する。

【0081】

ユーザが端末１０の表示部１１の任意のポイントを注視すると、視線検出部１０４は、注視時刻と注視した表示部１１上の画像データを取得する（Ｓ４００）。ここで「注視」とは、所定時間（例えば２秒）以上視線が移動しない状態をいう。視線検出部１０４は、取得した注視時刻と対応する画像データを画像解析部１１７に渡す。

【0082】

画像解析部１１７は、受け取った注視時刻をキーとして、視線入力ＤＢ１０３からユーザの視線の軌跡データを取得し（Ｓ４０５）、その終端上にある部分の画像を抽出する（Ｓ４１０）。

【0083】

画像解析部１１７は、抽出した画像をキーとして、プラント機器ＤＢ１１８から対応するＰＩＤを取得する（Ｓ４１５）。画像解析部１１７は、取得したＰＩＤを関連機能表示要求に格納し、関連機能表示部１１９に渡す。

【0084】

関連機能表示部１１９は、受け取った関連機能表示要求に含まれるＰＩＤをキーとして、関連機能ＤＢ１２０から対応する画面ＩＤと表示画面数を取得して表示要求に格納し、表示処理部１０５に渡す（Ｓ４２０）。

【0085】

表示処理部１０５は、受け取った画面ＩＤ及び表示画面枚数に基づいて、画面作成ＤＢ１０８及び画面構成１０９から画像データやレイアウトデータを取得し、表示画面データを生成する（Ｓ４２５）。生成された表示画面データは、端末１０の表示部１１に送られる（Ｓ４３０）。

【0086】

この実施形態によれば、ユーザが注視した画像に関連する関連画像をリアルタイムに呼び出して表示することが可能になる。すなわち、より効率的に監視業務を実施することができる。

【0087】

（第４実施形態）
次に、図２２を参照して、第４実施形態に係る監視システム４を詳細に説明する。第４実施形態の監視システム４は、第１実施形態の監視システム１の構成の一部と新規な構成を組み合わせたものである。以下の説明において、共通する要素について共通の符号を付して示し、重複する説明を省略する。

【0088】

図２２に示すように、実施形態の監視システム４は、サーバ４３と、サーバ４３と表示用バス３０を介して接続される端末１０と、サーバ４３とプラントプロセス入力用バス５０を介して接続されるプラント機器６０とを有する。ここで、プラント機器６０は監視対象である。

【0089】

サーバ４３は、端末１０から受けた指示に基づいてプラント機器６０を監視し制御を実行するコンピュータ装置である。サーバ４３は、視線検出部１０４、表示処理部１０５、対話処理部１０６、起動処理ＤＢ１０７、画面作成ＤＢ１０８、画面構成ＤＢ１０９、サーバ処理部１１０、プラント監視ＤＢ１１１、操作記録部１２１，プロセス処理部１１２、操作記録ＤＢ１２２、リプレイ処理部１２３を有している。

【0090】

操作記録部１２１は、端末１０の表示部１１が表示する監視画面１８の記録ボタン１８ｄが選択された場合にユーザの視線による操作を取得する演算ブロックである。操作記録部１２１は、視線検出部１０４が検出したユーザの視線が記録ボタン１８ｄを選択した場合に、その操作内容を操作記録ＤＢ１２２に記録する。操作記録ＤＢ１２２は、操作記録部１２１が取得した操作記録を記憶する。操作記録ＤＢ１２２は、不揮発性メモリやハードディスクドライブなどの記憶媒体上に構成される。

【0091】

リプレイ処理部１２３は、端末１０の表示部１１が表示する監視画面１８のリプレイボタン１８ｅが選択された場合に操作記録ＤＢ１２２に記録された操作データを読み出し、当該操作データを含む表示要求を表示処理部１０５に渡す演算ブロックである。

【0092】

続いて、図２４を参照して、第４実施形態の監視システム４の動作を説明する。第４実施形態の動作は、第１実施形態による複数の認証を経た後の動作である。以下の説明において、第１及び第２実施形態の構成及び動作と共通する構成及び動作については説明を省略する。

【0093】

視線検出部１０４は、ユーザの端末１０の表示部１１に対する視線の動きを検出してユーザの操作入力を待機する（Ｓ５００）。

【0094】

ユーザが監視画面１８の記録ボタン１８ｄを視線の動きやマウスなどにより選択すると（Ｓ５０５のＹｅｓ）、操作記録部１２１は、その選択に係る記録番号、画面呼び出し時刻、表示画面数、対応する画面ＩＤを操作記録ＤＢ１２２への記録を開始する（Ｓ５１０）。

【0095】

ユーザが終了操作（例えば監視画面１８の画面外に視線をそらしたり、記録停止ボタン１８ｃを視線やマウスなどにより選択したりする操作）をした場合（Ｓ５１５のＹｅｓ）、記録を終了する（Ｓ５２０）。

【0096】

図２３は、操作記録ＤＢ１２２に記録されるデータの一例である。図２３に示すように、操作記録部１２１が記録するデータは、記録番号、画面呼び出し時刻、表示画面数、対応する画面ＩＤなどが対応付けられている。図２３に示すように、表示画面数が２以上の場合、画面ＩＤも２以上となる。図２３に示す例では、記録番号２の表示画面数は２であり、画面ＩＤが２つ対応付けられている。

【0097】

ユーザが操作記録を確認する場合、監視画面１８のリプレイボタン１８ｅを視線やマウスにより選択する（Ｓ５０５のＮｏ，Ｓ５２５のＹｅｓ）。選択結果は視線検出部１０４からリプレイ処理部１２３に送られる。

【0098】

リプレイ処理部１２３は、リプレイボタン１８ｅが選択されると、操作記録ＤＢ１２２から記録番号が若い順に画面呼び出し時刻、画面ＩＤ、表示画面数を取得する（Ｓ５３０）。リプレイ処理部１２３は、取得した時刻データから各ステップの時刻の差分を求め表示時間を計算する（Ｓ５３５）。

【0099】

リプレイ処理部１２３は、表示要求に操作記録ＤＢ１２２から取得した画面ＩＤと表示画面数を格納し、表示処理部１０５に送る。表示処理部１０５は、受け取ったデータに基づいて画面作成ＤＢ１０８や画面構成ＤＢ１０９からレイアウトデータなどを取得して画面データを作成し（Ｓ５４０）、端末１０の表示部１１に表示させる（Ｓ５４５）。

【0100】

この実施形態によれば、監視操作を記録しリプレイすることができるので、ユーザの操作の振り返りや訓練に資することができる。

【0101】

以上、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0102】

１～４…監視システム、１０…端末、１１…表示部、１２…カメラ部、１３…入力インタフェース、
１５…補正用画面、１６…視線入力画面、１７…対話画面、１８，１９…監視画面、
３０…表示用バス、４０…サーバ、５０…プラントプロセス入力用バス、６０…プラント機器、
１０１…視線認証部、１０２…認証情報データベース（ＤＢ）、１０３…視線入力データベース（ＤＢ）、１０４…視線検出部、１０５…表示処理部、１０６…対話処理部、１０７…起動処理データベース（ＤＢ）、１０８…画面作成データベース（ＤＢ）、１０９…画面構成データベース（ＤＢ）、１１０…サーバ処理部、１１１…プラント監視データベース（ＤＢ）、１１２…プロセス処理部、
１１３…視線記録データベース（ＤＢ）、１１４…目視時間記録処理部、１１５…画面編集部、１１６…注目点処理部、
１１７…画像解析部、１１８…プラント機器データベース（ＤＢ）、１１９…関連機能表示部、１２０…関連機能データベース（ＤＢ）、
１２１…操作記録部、１２２…操作記録データベース（ＤＢ）、１２３…リプレイ処理部。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】