特許 7549259 情報処理装置、情報処理方法、プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-09-03

(45)【発行日】2024-09-11

(54)【発明の名称】情報処理装置、情報処理方法、プログラム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20240904BHJP

   H04N 23/60 20230101ALI20240904BHJP

【ＦＩ】

H04N7/18 D

H04N23/60 500

【請求項の数】 13

(21)【出願番号】P 2023002804

(22)【出願日】2023-01-12

(65)【公開番号】P2024099104

(43)【公開日】2024-07-25

【審査請求日】2023-04-10

(73)【特許権者】

【識別番号】390002761

【氏名又は名称】キヤノンマーケティングジャパン株式会社

(73)【特許権者】

【識別番号】592135203

【氏名又は名称】キヤノンＩＴソリューションズ株式会社

(74)【代理人】

【識別番号】100189751

【弁理士】

【氏名又は名称】木村 友輔

(74)【代理人】

【識別番号】100227857

【弁理士】

【氏名又は名称】中山 圭

(72)【発明者】

【氏名】深谷 大樹

(72)【発明者】

【氏名】帆足 拓未

【審査官】西田 光宏

(56)【参考文献】

【文献】国際公開第２００９／０４７８５０（ＷＯ，Ａ１）

【文献】特開２０１１－０６８４４０（ＪＰ，Ａ）

【文献】特開２０１３－１１３９４０（ＪＰ，Ａ）

【文献】特開２０１１－０５５３８２（ＪＰ，Ａ）

【文献】特開２０１７－１６５５２７（ＪＰ，Ａ）

【文献】特開２００４－２４０８３９（ＪＰ，Ａ）

【文献】特開２００６－０５６６７７（ＪＰ，Ａ）

【文献】特開２００９－２１４９６８（ＪＰ，Ａ）

【文献】特開２０１８－０９７８６６（ＪＰ，Ａ）

【文献】中国特許出願公開第１０９３０８０９４（ＣＮ，Ａ）

【文献】特開２００４－２２０１４７（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｂ６６Ｂ ３／００－５／２８

Ｇ０６Ｆ １／００

Ｇ０６Ｆ １／１６－１／１８

Ｇ０８Ｂ ２３／００－３１／００

Ｇ０９Ｇ ３／００－３／３８

Ｈ０４Ｎ ５／３８－５／４６

Ｈ０４Ｎ ５／６６－５／７４

Ｈ０４Ｎ ７／１０

Ｈ０４Ｎ ７／１４－７／５６

Ｈ０４Ｎ ２１／００－２１／８５８

Ｈ０４Ｎ ２３／６０

(57)【特許請求の範囲】

【請求項1】

端末前方を撮像する撮像手段を備えた情報処理装置であって、
前記撮像手段による撮像に対する遮蔽の状態を検出する検出手段と、
前記遮蔽の状態が検出された場合に、当該遮蔽の状態が検出される前に特定された端末前方状態に基づいて対応処理を決定する決定手段と、
を備え、
前記端末前方状態とは、前記情報処理装置のユーザ本人の存否、および、当該ユーザ本人以外の人物の存否、のうち少なくとも一方に基づいて特定される状態であることを特徴とする情報処理装置。

【請求項2】

前記端末前方状態は、本人在席、離席、なりすまし、覗き込みのいずれかの状態であることを特徴とする請求項１に記載の情報処理装置。

【請求項3】

前記対応処理は、画面ブラックアウト、警告出力、証跡データ送信の少なくとも１つ、または、アクションなしであることを特徴とする請求項１に記載の情報処理装置。

【請求項4】

前記決定された対応処理を実行するよう制御する実行制御手段を備え、
前記実行制御手段は、前記遮蔽の状態が検出される間、前記対応処理を実行するよう制御することを特徴とする請求項１に記載の情報処理装置。

【請求項5】

前記実行制御手段は、前記遮蔽の状態が検出されてから第１の期間待機して前記対応処理を実行するよう制御することを特徴とする請求項４に記載の情報処理装置。

【請求項6】

前記第１の期間は、前記遮蔽の状態が検出される前に特定された端末前方状態に基づいて決定されることを特徴とする請求項５に記載の情報処理装置。

【請求項7】

前記実行制御手段は、前記遮蔽の状態が検出されて即時に前記対応処理を実行するよう制御することを特徴とする請求項４に記載の情報処理装置。

【請求項8】

前記実行制御手段は、前記遮蔽の状態が第２の期間継続する場合に、前記決定手段で決定される対応処理とは別に、所定の処理を実行するよう制御することを特徴とする請求項４に記載の情報処理装置。

【請求項9】

前記所定の処理は、画面ブラックアウト、サインアウト、シャットダウンのいずれかであることを特徴とする請求項８に記載の情報処理装置。

【請求項10】

前記遮蔽の状態が検出される前に特定された端末前方状態に対して決定される対応処理の指定を受け付ける受付手段を備えることを特徴とする請求項１に記載の情報処理装置。

【請求項11】

前記決定手段は、前記遮蔽の状態が検出される前の端末前方状態において、前記情報処理装置のユーザが含まれるか否かに基づいて対応処理を決定することを特徴とする請求項１に記載の情報処理装置。

【請求項12】

端末前方を撮像する撮像手段を備えた情報処理装置の制御方法であって、
検出手段が、前記撮像手段による撮像に対する遮蔽の状態を検出する検出ステップと、
決定手段が、前記遮蔽の状態が検出された場合に、当該遮蔽の状態が検出される前に特定された端末前方状態に基づいて対応処理を決定する決定ステップと、
を含み、
前記端末前方状態とは、前記情報処理装置のユーザ本人の存否、および、当該ユーザ本人以外の人物の存否、のうち少なくとも一方に基づいて特定される状態であることを特徴とする情報処理装置の制御方法。

【請求項13】

端末前方を撮像する撮像手段を備えた情報処理装置において実行可能なプログラムであって、
前記情報処理装置を、
前記撮像手段による撮像に対する遮蔽の状態を検出する検出手段と、
前記遮蔽の状態が検出された場合に、当該遮蔽の状態が検出される前に特定された端末前方状態に基づいて対応処理を決定する決定手段と、
として機能させるためのプログラムであって、
前記端末前方状態とは、前記情報処理装置のユーザ本人の存否、および、当該ユーザ本人以外の人物の存否、のうち少なくとも一方に基づいて特定される状態であることを特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、情報処理方法、プログラムに関する。

【背景技術】

【0002】

近年、各企業でテレワークが普及している。テレワークでは、機密情報の第三者への漏洩防止や、テレワーカの勤務管理の適正化を図る必要がある。

【0003】

そこで、顔認証技術を利用したテレワーク管理システムが開発されている。テレワーク管理システムでは、テレワーカが使用する端末（パソコン、タブレット等）に付属された、または、外付けされたカメラでテレワークの状況を撮影し、撮影された画像から、本人確認やインシデント発生検知を行い、それに応じた処理を行うことにより、テレワーク環境を適正に管理することができる。

【0004】

しかし、悪意の有無に関わらず、カメラが遮蔽され撮影が妨害されてしまうと、テレワークの状況を撮影することができず、適正な管理ができなくなる。

【0005】

そこで、特許文献１では、所定の取引を行う装置において、接続された監視カメラによって撮影された画像が、遮蔽物によって撮影を妨害されたと判断された場合に、当該取引の中断、および、監視センタへの通報を行うことが記載されている。

【先行技術文献】

【特許文献】

【0006】

【文献】特開２００８－１２３０１３号公報

【発明の開示】

【発明が解決しようとする課題】

【0007】

テレワーク環境において、ユーザ本人が意図せずカメラを遮蔽した場合に都度、引用文献１に記載されているように、端末機能を停止（画面のブラックアウトなど）していると、業務効率が低下する。

【0008】

一方、第三者が悪意を持ってカメラを遮蔽した場合には、より厳しい対応が必要となる。

【0009】

そこで本発明では、カメラの遮蔽を検出した場合に、状況に応じた適切な対応ができる仕組みを提供することを目的とする。

【課題を解決するための手段】

【0010】

端末前方を撮像する撮像手段を備えた情報処理装置であって、前記撮像手段による撮像に対する遮蔽の状態を検出する検出手段と、前記遮蔽の状態が検出された場合に、当該遮蔽の状態が検出される前に特定された端末前方状態に基づいて対応処理を決定する決定手段と、を備え、前記端末前方状態とは、前記情報処理装置のユーザ本人の存否、および、当該ユーザ本人以外の人物の存否、のうち少なくとも一方に基づいて特定される状態であることを特徴とする。

【発明の効果】

【0011】

本発明によると、カメラの遮蔽を検出した場合に、状況に応じた適切な対応ができる仕組みを提供することが可能となる。

【図面の簡単な説明】

【0012】

【図1】テレワーク管理システムの構成の一例を示すシステム構成図

【図2】管理サーバ１０１、テレワーカ用ＰＣ１１１、管理者用ＰＣ１２１に適用可能な情報処理装置のハードウェア構成を示すブロック図

【図3】テレワーカ用ＰＣ１１１が実行する制御処理の一例を示すフローチャート

【図4】通常時処理の一例を示すフローチャート

【図5】遮蔽時処理の一例を示すフローチャート

【図6】遮蔽時詳細処理（共通）の一例を示すフローチャート

【図7】パラメータ設定画面の一例を示す図

【図8】パラメータを格納するテーブル類の一例を示す図

【図9】ブラックアウト時の画面表示の一例を示す図

【図10】警告表示画面の一例を示す図

【図11】管理者用ＰＣ１２１での確認画面の一例を示す図。

【発明を実施するための形態】

【0013】

以下、図面を参照して、本発明の実施形態を詳細に説明する。

【0014】

図１は、本発明のテレワーク管理システム１００のシステム構成の一例を示す図である。

【0015】

テレワーク管理システム１００は、１または複数の管理サーバ１０１、１または複数のテレワーカ用ＰＣ１１１、１または複数の管理者用ＰＣ１２１がインターネット１３０を介して接続される構成となっている。

【0016】

管理サーバ１０１は、テレワーカの在席・離席状況に関する情報や第三者による覗き見、なりすまし等の情報（テレワーク情報（証跡情報））を一元管理するサーバであり、サービス環境ネットワーク１０４上に構築されている。

【0017】

管理サーバ１０１へは、テレワーカ用ＰＣ１１１と管理者用ＰＣ１２１が、アカウントＩＤ（ユーザＩＤ）とパスワードを用いた認証処理により接続し、管理サーバ１０１は、テレワーカ用ＰＣ１１１からテレワーク情報を受信した場合は、管理サーバ１０１のデータベースに格納する。また、管理サーバ１０１は、管理者用ＰＣ１２１からテレワーク情報の取得要求があった場合は、管理サーバ１０１のデータベースから必要なテレワーク情報を取得して管理者用ＰＣ１２１に送信して表示する。

【0018】

テレワーカ用ＰＣ１１１は、テレワーカから勤務中か勤務外かの申請（申告）を受け付け、またテレワーカ用ＰＣ１１１に接続されたカメラ１１３（撮像装置）により撮影された映像（画像）から端末の前方の状態（端末前方状態（テレワーカが在席・離席しているのか、覗き見やなりすましが発生しているか））を検知する端末である。テレワーカ用ＰＣ１１１は、遠隔地の自宅ネットワーク１１０（自宅ネットワークではなく、例えば、カフェ等のネットワークでもよい）上に存在し、端末前方状態は、ルータ１１２、インターネット１３０、及びルータ１０３を介して管理サーバ１０１へ送信される。カメラ１１３（撮像装置）は、テレワーカ用ＰＣ１１１の前方を撮影するカメラである。

【0019】

テレワーカ用ＰＣ１１１は、本発明の情報処理装置の適用例であり、テレワークを行うユーザが用いる端末であり、カメラ１１３等の撮像手段を備えている。

【0020】

管理者用ＰＣ１２１は、テレワーク情報を確認するための端末であり、社内ネットワーク１２０上に存在し、テレワーク情報の確認には、ウェブ管理コンソール（ウェブブラウザ上で動作）を使用し、ルータ１２２、インターネット１３０、及びルータ１０３を介して管理サーバ１０１に接続する。

【0021】

なお、本実施例においては、テレワーカ用ＰＣ１１１が端末前方状態を検知し、管理サーバ１０１へ情報を送信する構成として説明するが、テレワーカ用ＰＣ１１１から映像（画像）のみを管理サーバ１０１に送信し、管理サーバ１０１において当該映像（画像）から端末前方状態を検知するよう構成しても良い。

【0022】

図２は、本発明の実施形態における管理サーバ１０１、テレワーカ用ＰＣ１１１、管理者用ＰＣ１２１に適用可能な情報処理装置のハードウェア構成の一例を示すブロック図である。各装置ともに、同様な構成を備えるため、同一の符号を用いて説明する。

【0023】

図２に示すように、情報処理装置は、システムバス２００を介してＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３、記憶装置２０４、入力コントローラ２０５、音声入力コントローラ２０６、ビデオコントローラ２０７、メモリコントローラ２０８、よび通信Ｉ／Ｆコントローラ２０９が接続される。

【0024】

ＣＰＵ２０１は、システムバス２００に接続される各デバイスやコントローラを統括的に制御する。

【0025】

ＲＯＭ２０２あるいは記憶装置２０４は、ＣＰＵ２０１が実行する制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ／Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）や、本情報処理方法を実現するためのコンピュータ読み取り実行可能なプログラムおよび必要な各種データ（データテーブルを含む）を保持している。

【0026】

ＲＡＭ２０３は、ＣＰＵ２０１の主メモリ、ワークエリア等として機能する。ＣＰＵ２０１は、処理の実行に際して必要なプログラム等をＲＯＭ２０２あるいは記憶装置２０４からＲＡＭ２０３にロードし、ロードしたプログラムを実行することで各種動作を実現する。

【0027】

入力コントローラ２０５は、入力装置２１０からの入力を制御する。入力装置２１０としては、キーボード、タッチパネル、マウス等のポインティングデバイス、カメラ１１３等の撮像装置等が挙げられる。

【0028】

カメラ１１３等の撮像装置は、端末の前方を撮像するカメラであり、テレワーカ用ＰＣ１１１は、当該撮影された画像により、端末の前方の状態（端末前方状態（テレワーカが在席・離席しているのか、覗き見やなりすましが発生しているか））を特定することができる。

【0029】

なお、入力装置２１０がタッチパネルの場合、ユーザがタッチパネルに表示されたアイコンやカーソルやボタンに合わせて押下（指等でタッチ）することにより、各種の指示を行うことができることとする。

【0030】

また、タッチパネルは、マルチタッチスクリーンなどの、複数の指でタッチされた位置を検出することが可能なタッチパネルであってもよい。

【0031】

音声入力コントローラ２０６は、マイク／スピーカ２１１がマイク機能として動作する場合、マイク／スピーカ２１１からの音声入力を制御し、マイク／スピーカ２１１から入力された音声を認識することが可能となっている。また、音声入力コントローラ２０６は、マイク／スピーカ２１１がスピーカ機能として動作する場合、マイク／スピーカ２１１への音声出力を制御し、マイク／スピーカ２１１に対し音声を出力することが可能となっている。

【0032】

ビデオコントローラ２０７は、ディスプレイ２１２などの外部出力装置への表示を制御する。ディスプレイは本体と一体になったノート型パソコンのディスプレイも含まれるものとする。なお、外部出力装置はディスプレイに限ったものははく、例えばプロジェクタであってもよい。また、前述のタッチ操作により受け付け可能な装置については、入力装置２１０を提供する。

【0033】

なおビデオコントローラ２０７は、表示制御を行うためのビデオメモリ（ＶＲＡＭ）を制御することが可能で、ビデオメモリ領域としてＲＡＭ２０３の一部を利用することもできるし、別途専用のビデオメモリを設けることも可能である。

【0034】

本発明では、ユーザが情報処理装置を通常使用する場合の表示に用いられる第１のビデオメモリ領域と、所定の画面が表示される場合に、第１のビデオメモリ領域の表示内容に重ねての表示に用いられる第２のビデオメモリ領域を有している。ビデオメモリ領域は２つに限ったものではなく、情報処理装置の資源が許す限り複数有することが可能なものとする。

【0035】

メモリコントローラ２０８は、外部メモリ２１３へのアクセスを制御する。外部メモリとしては、ブートプログラム、各種アプリケーション、フォントデータ、ユーザファイル、編集ファイル、および各種データ等を記憶する外部記憶装置（ハードディスク）、フレキシブルディスク（ＦＤ）、或いはＰＣＭＣＩＡカードスロットにアダプタを介して接続されるコンパクトフラッシュ（登録商標）メモリ等を利用可能である。

【0036】

通信Ｉ／Ｆコントローラ２０９は、ネットワーク２１４（１０４、１１０、１２０）を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信やＩＳＤＮなどの電話回線、および携帯電話の３Ｇ回線を用いた通信が可能である。

【0037】

なお、記憶装置２０４は、情報を永続的に記憶するための媒体であって、その形態をハードディスク等の記憶装置に限定するものではない。例えば、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）などの媒体であってもよい。

【0038】

また本実施形態における通信端末で行われる各種処理時の一時的なメモリエリアとしても利用可能である。

【0039】

尚、ＣＰＵ２０１は、例えばＲＡＭ２０３内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、ディスプレイ２１２上での表示を可能としている。また、ＣＰＵ２０１は、ディスプレイ２１２上の不図示のマウスカーソル等でのユーザ指示を可能とする。

【0040】

図３は、テレワーカが使用するテレワーカ用ＰＣ１１１が実行する制御処理の一例を示すフローチャートである。

【0041】

図３に示す各ステップに示す処理は、テレワーカ用ＰＣ１１１のＣＰＵ２０１が、外部メモリ２１３等の記憶手段に格納されたテレワーク管理プログラムをＲＡＭ２０３にロードして実行することにより実現される。

【0042】

ステップＳ３０１では、テレワーカ用ＰＣ１１１が起動されると、テレワーク管理プログラムが起動され、事前に設定され記憶されているプログラム実行用のパラメータを取得する。

【0043】

ここで、図７を用いて、パラメータについて説明する。図７はパラメータ設定画面７００の一例である。

【0044】

７１０は、「遮蔽されていない」通常時の対応アクションの設定欄であり、カメラ画像から特定される端末前方状態（本人、覗き見、なりすまし、離席）に従って、対応するアクション（ブラックアウト、警告出力、証跡データ送信）か、アクションなしを指定する。対応するアクションは１つでも複数でも指定可能である。なお、上記で示した端末前方状態、対応アクションは一例であり、この限りではない。

【0045】

なお、端末前方状態が判定されると対応するアクションを即時実行するのではなく、猶予時間経過後に対応するアクションを実行する場合には、猶予時間の設定欄を設けてもよいし、デフォルトの猶予時間を設定しておいてもよい。

【0046】

７２０は、遮蔽判定までの保留時間の設定欄であり、遮蔽が検出されてから「遮蔽されている」と判定するまでの保留時間７２１を設定する。これは、ユーザ本人が意図せずカメラを遮蔽してしまった場合（例えば、無意識に手がカメラの前に出てしまった場合や、立ち上がる際に体の一部がカメラを塞いでしまった場合）にすぐに「遮蔽されている」と判定せずに猶予を与えるための時間である。即時に「遮蔽されている」と判定させたい場合は、０を設定すればよい。

【0047】

なお、保留時間を共通設定するのではなく、以下の遮蔽直前の状態ごとに設定できるようにしてもよいし、デフォルトの保留時間を設定してもよい。これにより、遮蔽直前の状態のリスクに応じて、対応の即応性を調整することができる。

【0048】

７３０は、カメラの遮蔽が検出され「遮蔽されている」と判定された遮蔽時の対応アクションの設定欄であり、遮蔽直前の状態（本人、覗き見、なりすまし、離席）に従って、対応するアクション（ブラックアウト、警告出力、証跡データ送信）か、アクションなしを指定する。対応するアクションは１つでも複数でも指定可能である。ここで、遮蔽直前の状態としたのは、遮蔽時は適切なカメラ画像を取得することができず、カメラ画像から端末前方状態を特定することができないため、遮蔽が発生する直前に特定された端末前方状態に従って対応アクションを指定できるようにしたものである。なお、上記で示した遮蔽直前の状態、対応アクションは一例であり、この限りではない。例えば、遮蔽直前の状態を、本人が写っているか（本人、覗き見）、本人が写っていないか（なりすまし、離席）で区分し、それぞれで対応アクションを設定するようにしてもよい。これにより、本人が写っている場合には作業効率重視、本人が写っていない場合にはセキュリティ重視といった設定も可能となる。

【0049】

なお、通常時の対応アクションと遮蔽時の対応アクションを別々に設定するのではなく、共通の設定としてもよい。その場合、通常時の対応アクションで猶予時間が設定されていたとしても、遮蔽時には端末前方状態を判定できないため、即時実行するか、より短い時間で対応アクションを実行するようにしてもよい。また、保留時間７２１を０、または、より短い時間に設定することにより、同様の動作をさせることが可能となる。

【0050】

７４０は、遮蔽継続の許容時間と超過時の対応アクションの設定欄である。許容時間７４１は、「遮蔽されている」と判定してから７３０で指定された対応アクションを継続する時間であり、遮蔽時間が許容時間７４１を超過した場合に実行する対応アクション（ブラックアウト、サインアウト、シャットダウン）を７４２で指定する。超過判定をさせない場合は、許容時間７４１に十分大きな数値（例えば９９９９９）を設定すればよい。これは、遮蔽時間が長引いた場合には、セキュリティ面で深刻なインシデントが発生している恐れがあり、最悪の事態を避けるために、より強い対応を取れるようにしたものである。また、７３０でアクションなしを指定した場合でも、遮蔽時間が許容時間７４１を超過した場合には、７４２で指定した対応アクションが実行されるためセキュリティが確保される。なお、上記で示した対応アクションは一例であり、この限りではない。

【0051】

上記設定後、登録／更新ボタン７５０を押下することにより、設定内容が図８に示すテーブルに反映される。

【0052】

図８（ａ）は通常時アクション設定テーブル８００であり、図７の７１０で設定した内容が格納される。図８（ｂ）は遮蔽判定保留時間設定テーブル８１０であり、図７の７２０で設定した内容が格納される。図８（ｃ）は遮蔽時アクション設定テーブル８２０であり、図７の７３０で設定した内容が格納される。図８（ｄ）は遮蔽継続許容設定テーブルであり、図７の７４０で設定した内容が格納される。

【0053】

図３の説明に戻る。

【0054】

ステップＳ３０１では、図８に示した各テーブルからパラメータを取得する。

【0055】

ステップＳ３０２では、撮影状態を「通常」、遮蔽検出時間をリセット、つまり０に設定する。ここで、撮影状態は「通常」か「遮蔽」かのいずれかが設定され、「遮蔽されていない」か、「遮蔽されている」かを示す。また、遮蔽検出時間は、最初に遮蔽が検出されてから検出が継続している時間を示す。

【0056】

ステップＳ３０３では、カメラで撮影された端末前方の画像を取得する。取得する画像は、連続撮影された動画から所定の時間間隔で抽出したフレーム画像でもよいし、所定の時間間隔で撮影された静止画でもよい。

【0057】

ステップＳ３０４では、ステップＳ３０３で取得された画像を解析し、遮蔽（の有無）を検出する。ここでは、画像内のエッジの量、色の数や分布状況、などの画像解析技術による公知の遮蔽検出方法により遮蔽を検出する。

【0058】

ステップＳ３０５では、ステップＳ３０４で遮蔽を検出したかを判断する。遮蔽を検出した場合はステップＳ３０６へ、検出しなかった場合はステップＳ３１１へ進める。

【0059】

ステップＳ３０６では、遮蔽検出時間を加算する。ここで加算する時間は、前回遮蔽検出処理直後に遮蔽が発生したと想定して、前回遮蔽検出処理からの経過時間とする。カメラ画像を一定時間間隔で取得して遮蔽検出処理する場合は、一定時間を加算する。

【0060】

ステップＳ３０６では、撮影状態が「通常」かを判断する。言い換えると、撮影状態がすでに「遮蔽」に設定されていないかを判断する。撮影状態が「通常」である場合はステップＳ３０８へ、そうではない、つまり「遮蔽」である場合はステップＳ３１０へ進める。

【0061】

ステップＳ３０７では、遮蔽検出時間が保留時間７２１を超えたかを判断する。この判断は、前述の通り、遮蔽検出から「遮蔽されている」と判定するまでの猶予を与えるものである。なお、保留時間７２１に０が設定されている場合は無条件、つまり即時に超えたと判断される。遮蔽検出時間が保留時間７２１を超えた場合はステップＳ３０９へ進め、超えていない場合はステップＳ３０３へ戻す。

【0062】

なお、保留時間が遮蔽直前の状態ごとに設定されている場合は、遮蔽直前の状態に対する保留時間を超えたかを判定する。

【0063】

また、通常時のアクションの対応アクションに猶予時間が設定されており、猶予時間中であったとしても、保留時間７２１に０、または、残りの猶予時間より短い時間が設定されていれば、即時、または、より短い時間でステップＳ３０９へ進めることになり、対応アクションが即時、または、より短い時間で実行されることになる。また、設定ではなく、プログラム処理として同様の動作をさせてもよい。

【0064】

ステップＳ３０９では、「遮蔽されている」と判定し、撮影状態を「遮蔽」に設定する。

【0065】

ステップＳ３１０では、遮蔽時処理を実行する。遮蔽時処理については図５にて後述する。処理実行後、ステップＳ３１５へ進める。

【0066】

ステップＳ３１１では、撮影状態が「遮蔽」かを判断する。つまり、すでに「遮蔽されている」と判定されているかを判断する。撮影状態が「遮蔽」である場合はステップＳ３１２へ、そうでない場合、つまり撮影状態が「通常」である場合はステップＳ３１４へ進める。

【0067】

ステップＳ３１２では、撮影状態を「通常」に設定し、遮蔽検出時間をリセット、つまり０に設定する。ここでは、前に設定された撮影状態が「遮蔽」であり、遮蔽が検出されなかったということは遮蔽が解消されたということであり、撮影状態を「通常」に戻し、遮蔽検出時間をリセットする。

【0068】

ステップＳ３１３では、遮蔽時処理を解除する。本実施例では、遮蔽時処理として、ブラックアウト、警告出力、証跡データ送信、の対応アクションを選択実行可能であり、本ステップでは、ブラックアウトに対してブラックアウト解除、つまり、通常の画面表示へ戻す処理、警告出力に対しては警告出力の消去（非出力）処理、証跡データ送信に対しては証跡データ送信中止処理を実行する。

【0069】

ステップＳ３１４では、「遮蔽されていない」場合、つまり通常時処理を実行する。通常時処理については図４にて後述する。

【0070】

ステップＳ３１５では、プログラム終了を判断する。具体的には、ユーザによってサインアウトやシャットダウンの操作が実施された場合や、ステップＳ３１０の遮蔽時処理でプログラムによってサインアウトやシャットダウンが実行された場合に、プログラム終了と判断する。プログラム終了と判断された場合は本処理フローを終了し、そうでない場合は、ステップＳ３０３へ戻す。

【0071】

以上で図３の説明を終了する。

【0072】

次に、図４を用いて、ステップＳ３１４の通常時処理の詳細について説明する。

【0073】

図４は、ステップＳ３１４の通常時処理の一例を示すフローチャートである。

【0074】

図４に示す各ステップに示す処理は、テレワーカ用ＰＣ１１１のＣＰＵ２０１が、外部メモリ２１３等の記憶手段に格納されたプログラムをＲＡＭ２０３にロードして実行することにより実現される。

【0075】

ステップＳ４０１では、ステップＳ３０３で取得したカメラ画像を顔認証技術等を用いて解析することにより、端末前方状態を特定する。端末前方状態とは、テレワーカ用ＰＣ１１１のディスプレイの前方の人物の存在状態であり、本実施例では、テレワーカ本人のみが存在する「本人」、テレワーカ本人とテレワーカ以外の人物が存在する「覗き見」、テレワーカ以外の人物のみが存在する「なりすまし」、人物が存在しない「離席」に区分される。

【0076】

ステップＳ４０３では、ステップＳ４０１で特定した端末前方状態により処理を分岐する。「本人」の場合はステップＳ４０３へ、「覗き見」の場合はステップＳ４０４へ、「なりすまし」の場合はステップＳ４０６へ、「離席」の場合はステップＳ４０８へ進める。

【0077】

ステップＳ４０３では、状態を「本人」に設定する。状態は特定された端末前方状態を示す変数である。端末前方状態が「本人」である場合は、正常状態であり、基本的に対応アクションは実行しないが、一定サイクルで、カメラ画像や画面ショット等の証跡データをサーバに送信してサーバで記録するようにしてもよい。処理後、ステップＳ４１０へ進める。

【0078】

ステップＳ４０４では、状態を「覗き見」に設定する。

【0079】

ステップＳ４０５では、「覗き見」に対する通常処理を実行する。「覗き見」に対する通常処理は、図７のパラメータ設定画面７００の通常時の対応アクションの設定欄（７１０）で、「覗き見」に対して指定され、図８の通常時アクション設定テーブル８００に登録された対応アクションである。アクションなしが指定された場合は、本ステップでは何もしない。また、対応アクションを即時実行するのではなく、所定の猶予時間を設け、猶予時間経過後に対応アクションを実行するようにしてもよい。処理実行後、ステップＳ４１０へ進める。

【0080】

ステップＳ４０６では、状態を「なりすまし」に設定する。

【0081】

ステップＳ４０７では、「なりすまし」に対する通常処理を実行する。詳細はステップＳ４０５の「覗き見」の場合と同様である。処理実行後、ステップＳ４１０へ進める。

【0082】

ステップＳ４０８では、状態を「離席」に設定する。

【0083】

ステップＳ４０９では、「離席」に対する通常処理を実行する。詳細はステップＳ４０５の「覗き見」の場合と同様である。処理実行後、ステップＳ４１０へ進める。

【0084】

ステップＳ４１０では、後続処理のために、上記で設定した状態を前回状態として、端末前方状態の特定に使用したカメラ画像を前回カメラ画像としてＲＡＭ２０３等に記録する。

【0085】

以上で図４の説明を終了する。

【0086】

次に、図５を用いて、ステップＳ３１０の遮蔽時処理の詳細について説明する。

【0087】

図５は、ステップＳ３１０の遮蔽通常時処理の一例を示すフローチャートである。

【0088】

図５に示す各ステップに示す処理は、テレワーカ用ＰＣ１１１のＣＰＵ２０１が、外部メモリ２１３等の記憶手段に格納されたプログラムをＲＡＭ２０３にロードして実行することにより実現される。

【0089】

ステップＳ５０１では、ステップＳ４０１で記録された前回状態、前回カメラ画像を取得する。これは、「遮蔽されている」と判定される直前の端末前方状態およびカメラ画像である。

【0090】

ステップＳ５０２では、「遮蔽されている」と判定された後の初回の処理であるかを判断する。初回の遮蔽時処理である場合はステップＳ５０３へ、そうではない、つまりすでに遮蔽時処理が実行されている場合はステップＳ５０５へ進める。

【0091】

ステップＳ５０３では、遮蔽時間をリセット、つまり０に設定する。ここで、遮蔽時間は、「遮蔽されている」と判定されてから「遮蔽されている」状態が継続している時間を示す。

【0092】

ステップＳ５０４では、取得した前回状態、前回カメラ画像を管理サーバ１０１に送信する。管理サーバ１０１では受信した前回状態、前回カメラ画像を保存し、管理者用ＰＣ１２１から、遮蔽判定直前の端末前方状態およびカメラ画像として確認可能となる。

【0093】

ステップＳ５０５では、２回目以降の遮蔽時処理なので、遮蔽時間に前回処理からの経過時間を加算する。これにより、「遮蔽されている」と判定されてからその状態が継続している時間を算出する。

【0094】

ステップＳ５０６では、遮蔽時間が許容時間７４１を超えているかを判断する。これは前述の通り、遮蔽時間が長引いた場合には、セキュリティ面で深刻なインシデントが発生している恐れがあり、そのリスクに対応するための判断である。遮蔽時間が許容時間７４１を超えている場合はステップＳ５０７へ、そうでない場合はステップＳ５０８へ進める。

【0095】

ステップＳ５０７では、遮蔽時間超過時処理を実行する。遮蔽時間超過時処理は、図７のパラメータ設定画面７００で対応アクション（７４２）として指定され、図８の遮蔽継続許容設定テーブル８３０の８３２に登録された対応アクションである。処理実行後、本処理フローを終了するが、対応アクションとしてサインアウトやシャットダウンが実行された場合には、図３のステップＳ３１５にてプログラム終了と判断される。

【0096】

ステップＳ５０８では、ステップＳ５０１で取得した前回状態により処理を分岐する。「本人」の場合はステップＳ５０９へ、「覗き見」の場合はステップＳ５１０へ、「なりすまし」の場合はステップＳ５１１へ、「離席」の場合はステップＳ５１２へ進める。

【0097】

ステップＳ５０９～Ｓ５１２はそれぞれ、前回状態、つまり遮蔽判定直前の状態に応じた処理であるが、処理内容は共通なので、図６を用いて、遮蔽時処理（共通）として一括して説明する。

【0098】

図６は、ステップＳ５０９～Ｓ５１２に共通する遮蔽時詳細処理（共通）の一例を示すフローチャートである。

【0099】

図６に示す各ステップに示す処理は、テレワーカ用ＰＣ１１１のＣＰＵ２０１が、外部メモリ２１３等の記憶手段に格納されたプログラムをＲＡＭ２０３にロードして実行することにより実現される。

【0100】

ステップＳ６０１では、前回状態に基づいて遮蔽時の対応アクションを判断する。遮蔽時の対応アクションは、図７のパラメータ設定画面７００の遮蔽時の対応アクションの設定欄（７３０）で、各直前の状態（前回状態）に対して指定され、図８の遮蔽時アクション設定テーブル８２０に登録された対応アクションである。対応アクションが「ブラックアウト」の場合はステップＳ６０２へ、「警告出力」の場合はステップＳ６０３へ、「証跡データ送信」の場合はステップＳ６０４へ進め、アクションなしの場合は何もしない。複数の対応アクションが指定された場合は複数の処理に分岐させる。

【0101】

ステップＳ６０２では、ディスプレイの画面をブラックアウトする。方法としては、ＯＳレベルでロック画面を表示したり、非表示にしたり、プログラムレベルでマスク画像を重畳表示させるなど、元の画面が見えなくなる方法であれば何でもよい。遮蔽時処理の初回であればブラックアウトを実行し、その後はブラックアウトの状態を継続する。

【0102】

図９にブラックアウト時の画面表示例を示す。画面９００の全体はブラックアウトされており、９０１のようなメッセージを表示させてもよい。

【0103】

ステップＳ６０３では、画面に警告を出力する。遮蔽時処理の初回であれば警告出力を実行し、その後は警告が出力された状態を継続する。

【0104】

図１０に警告出力の画面表示例を示す。警告表示ウィンドウ１０００において、遮蔽が検出されたことを警告として表示し、さらに、遮蔽が解消されない場合に、前述の遮蔽時間超過時処理が実行されることを警告として表示してもよい。

【0105】

ステップＳ６０４では、証跡データを取得し、証跡データを管理サーバ１０１に送信する。管理サーバ１０１では受信した証跡データを保存し、管理者用ＰＣ１２１から、遮蔽時の証跡データとして確認可能となる。ここで、証跡データとは、カメラ画像、画面ショット、実行アプリケーションリストや操作ログ等、テレワーカ用ＰＣ１１１の周辺および内部で発生している事象がトレースできるデータである。また、証跡データを連続的に送信するとネットワーク過負荷や記憶容量圧迫の原因となるため、一定間隔や、証跡データに変化のあった瞬間など、送信タイミングを決めて送信してもよい。

【0106】

以上で図６の説明を終了する。

【0107】

ここで、テレワーカ用ＰＣ１１１から管理サーバ１０１に送信された証跡データ等を用いて管理サーバ１０１が管理者用ＰＣ１２１のディスプレイに表示させる画面例を図１１にて説明する。

【0108】

図１１に管理者用ＰＣ１２１でのユーザ状況確認画面１１００および遮蔽状況確認画面１１１０の表示例を示す。

【0109】

ユーザ状況確認画面１１００では、ユーザと確認日付が１１０１に表示され、特定された端末前方状態や検出された遮蔽状態と、対応したアクションが時系列チャートとして１１０２に表示される。これらのデータはテレワーカ用ＰＣ１１１から管理サーバ１０１に都度送信されている。遮蔽時間帯１１０３を指定操作することにより、遮蔽状況確認画面１１１０が表示される。

【0110】

遮蔽状況確認画面１１１０では、ユーザと遮蔽発生日時が１１１１に表示され、ステップＳ５０４で送信された前回状態が１１１２に、前回カメラ画像が１１１３に表示される。さらに、ステップＳ６０４で送信された証跡データとして、カメラ画像が１１１４に、画面ショットが１１１５に取得タイミング順に表示される。

【0111】

以上で図１１の説明を終了する。

【0112】

以上、本発明によれば、カメラの遮蔽を検出した場合に、状況に応じた適切な対応ができるようになる。

【0113】

本実施例においては、図に示した各フローチャートに示す各ステップの処理をテレワーカ用ＰＣ１１１で実行するものとして説明したが、そのいずれかの処理（一部の処理）を管理サーバ１０１において実行するよう構成してもよい。

【0114】

本発明は、例えば、システム、装置、方法、プログラムもしくは記録媒体等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。

【0115】

また、本発明におけるプログラムは、各フローチャートの処理方法をコンピュータが実行可能なプログラムであり、本発明の記憶媒体は各フローチャートの処理方法をコンピュータが実行可能なプログラムが記憶されている。なお、本発明におけるプログラムは各フローチャートの各装置の処理方法ごとのプログラムであってもよい。

【0116】

以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムを読み出し、実行することによっても本発明の目的が達成されることは言うまでもない。

【0117】

この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した記録媒体は本発明を構成することになる。

【0118】

プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ－ＲＯＭ、ＣＤ－Ｒ、ＤＶＤ－ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＥＰＲＯＭ、シリコンディスク等を用いることが出来る。

【0119】

また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

【0120】

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

【0121】

また、本発明は、複数の機器から構成されるシステムに適用しても、ひとつの機器から成る装置に適用しても良い。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。

【0122】

さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。

【符号の説明】

【0123】

１０１ 管理サーバ
１１１ テレワーカ用ＰＣ
１２１ 管理者用ＰＣ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】