特開 2023-103949 プログラム、情報処理方法、情報処理装置、および情報処理システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023103949

(43)【公開日】2023-07-27

(54)【発明の名称】プログラム、情報処理方法、情報処理装置、および情報処理システム

(51)【国際特許分類】

   G06F 21/32 20130101AFI20230720BHJP

   H04N 7/15 20060101ALI20230720BHJP

   H04N 21/4415 20110101ALI20230720BHJP

   G06F 3/01 20060101ALI20230720BHJP

【ＦＩ】

G06F21/32

H04N7/15 170

H04N21/4415

G06F3/01 510

【審査請求】未請求

【請求項の数】13

【出願形態】ＯＬ

(21)【出願番号】P 2022130679

(22)【出願日】2022-08-18

(62)【分割の表示】P 2022004303の分割

【原出願日】2022-01-14

(71)【出願人】

【識別番号】514323800

【氏名又は名称】株式会社キッズプレート

(74)【代理人】

【識別番号】110002815

【氏名又は名称】ＩＰＴｅｃｈ弁理士法人

(72)【発明者】

【氏名】茂出木 謙太郎

【テーマコード（参考）】

5C164

5E555

【Ｆターム（参考）】

5C164FA10

5C164UB62P

5C164UB88S

5C164UB90S

5C164VA04S

5C164VA07P

5E555AA27

5E555AA52

5E555BA13

5E555BA38

5E555BA76

5E555BB13

5E555BB38

5E555BC16

5E555BD06

5E555CA42

5E555DB32

5E555EA22

5E555FA00

(57)【要約】

【課題】オンラインビデオコミュニケーションツールを利用する際に、他のユーザが使用する端末の画面にユーザの顔を出さずに、信頼性の高い本人確認を行う。
【解決手段】プロセッサを備えるコンピュータに、オンラインビデオコミュニケーションツールを提供するアプリケーションへ映像データを出力させるプログラムであって、ユーザの撮像データを取得するステップと、撮像データに基づいて、ユーザをアバターに変換した映像データを生成するステップと、生成された映像データを出力するステップと、撮像データに基づいて顔認証を実行するステップと、を実行させるプログラムが提供される。
【選択図】図６

【特許請求の範囲】

【請求項1】

プロセッサを備えるコンピュータに、オンラインビデオコミュニケーションツールとして機能するアプリケーションへ映像データを出力させるプログラムであって、
ユーザの撮像データを取得するステップと、
前記撮像データに基づいて、前記ユーザをアバターに変換した映像データを生成するステップと、
前記生成された映像データを出力するステップと、
前記撮像データに基づいて顔認証を実行するステップと、を実行させるプログラム。

【請求項2】

前記顔認証を実行するステップにおいて、前記オンラインビデオコミュニケーションツールに、前記ユーザの撮像データを表示させない、請求項１に記載のプログラム。

【請求項3】

前記顔認証を実行するステップにおいて、前記オンラインビデオコミュニケーションツールに、前記アバターに変換した映像データを表示させる、請求項１または請求項２に記載のプログラム。

【請求項4】

前記顔認証を実行するステップにおいて、前記撮像データを用いて前記顔認証を実行させる、請求項１～請求項３のいずれかに記載のプログラム。

【請求項5】

前記顔認証がエラーとなった場合に、所定の時間内に再度の顔認証を実行させる、請求項１～請求項４のいずれか１項に記載のプログラム。

【請求項6】

所定の時間内に再度の顔認証が実行されることを、前記ユーザに通知させる、請求項５に記載のプログラム。

【請求項7】

前記再度の顔認証がエラーとなった場合に、顔認証以外での他の認証を実行させる、請求項６に記載のプログラム。

【請求項8】

前記他の認証がエラーとなった場合に、前記コンピュータを前記オンラインビデオコミュニケーションツールの機能を使用できない状態にさせる、請求項７に記載のプログラム。

【請求項9】

前記他の認証がエラーとなった場合に、前記ユーザとオンラインビデオコミュニケーションを行っている他のユーザに当該エラーを通知させる、請求項７または請求項８に記載のプログラム。

【請求項10】

前記顔認証がエラーとなったことを、前記オンラインビデオコミュニケーションツールにおけるビデオコミュニケーションの主催者に通知させる、請求項１～請求項９のいずれかに記載のプログラム。

【請求項11】

プロセッサを備えるコンピュータにより実行される情報処理方法であって、
前記プロセッサに、請求項１～請求項１０のいずれかに記載のプログラムを実行させる、情報処理方法。

【請求項12】

プロセッサを備える情報処理装置であって、
前記プロセッサに、請求項１～請求項１０のいずれかに記載のプログラムを実行させる、情報処理装置。

【請求項13】

プロセッサを備えるコンピュータを含む情報処理システムであって、
前記プロセッサに、請求項１～請求項１０のいずれかに記載のプログラムを実行させる、情報処理システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、プログラム、情報処理装置および方法に関する。

【背景技術】

【0002】

近年、インターネットを利用したオンラインミーティングやオンラインセミナーなどを実現するオンラインビデオコミュニケーションツールが普及している。このようなツールを利用するにあたり、本人確認を行うための技術が開発されている。例えば、特許文献１には、テレビ会議等の通信システムにおけるセキュリティ向上のために、通話開始時および通話中断後の通話再開時に顔認証などの生体認証が行われる認証技術が開示されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１５－１４２１９３号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

一方で、オンラインビデオコミュニケーションツールを利用する際に、自身の分身としてのアバターを使いたいというニーズがある。このような場合、上記従来技術においては、ユーザの顔を出さずに本人認証を行うことが困難であった。

【0005】

本発明の目的は、オンラインビデオコミュニケーションツールを利用する際に、他のユーザが使用する端末の画面にユーザの顔を出さずに、信頼性の高い本人確認を行うことである。

【課題を解決するための手段】

【0006】

本発明の一態様によれば、プロセッサを備えるコンピュータに、オンラインビデオコミュニケーションツールを提供するアプリケーションへ映像データを出力させるプログラムであって、ユーザの撮像データを取得するステップと、撮像データに基づいて、ユーザをアバターに変換した映像データを生成するステップと、生成された映像データを出力するステップと、撮像データに基づいて顔認証を実行するステップと、を実行させるプログラムが提供される。

【0007】

本開示によれば、インターネットを利用したオンラインビデオコミュニケーションツールを利用する際に、他のユーザが使用する端末の画面にユーザの顔を出さずに本人確認を行うことが可能となる。

【図面の簡単な説明】

【0008】

【図1】映像出力システム１の機能の概要を説明する図である。

【図2】映像出力システム１のハードウェア構成を示すブロック図である。

【図3】ユーザ端末１０の機能構成を示すブロック図である。

【図4】管理サーバ２０の機能構成を示すブロック図である。

【図5】顔認証サーバ３０の機能構成を示すブロック図である。

【図6】映像出力システム１の処理の流れの一例を示すフロー図である。

【図7】ビデオコミュニケーション処理（Ｓ６００）の処理の流れの一例を示すフロー図である。

【図8】顔認証処理（Ｓ７００）の処理の流れの一例を示すフロー図である。

【図9】認証後処理（Ｓ８００）の処理の流れの一例を示すフロー図である。

【図10】ユーザ端末１０に表示される画面例を示す図である。

【図11】認証エラー時にユーザ端末１０に表示される画面例を示す図である。

【発明を実施するための形態】

【0009】

以下、図面を参照しつつ、本開示の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。

【0010】

＜１．第１実施形態＞
（１．映像出力システム１の概要）
図１を参照して、映像出力システム１の概要を説明する。ユーザＵは、ユーザ端末１０が備えるカメラ１６０を用いて、オンラインビデオコミュニケーションツールを利用することができる。オンラインビデオコミュニケーションツールとは、オンライン会議やオンラインセミナー、動画配信による配信者と視聴者とのコミュニケーションなどを実現し、インターネット上に配信されたユーザのビデオ（映像）データを介してユーザ同士のコミュニケーションを可能とするアプリケーションを指す。

【0011】

オンラインビデオコミュニケーションツールは、予めユーザ端末１０にインストールされていてもよいし、クラウドサーバに対してウェブブラウザからアクセスして利用してもよい。オンラインビデオコミュニケーションツールの一例としては、Ｚｏｏｍ，Ｓｋｙｐｅ，ＧｏｏｇｌｅＭｅｅｔ（いずれも登録商標）などを挙げることができる。

【0012】

図１Ａに示すように、オンラインビデオコミュニケーションツールを利用する場合、通常はユーザ端末１０が備えるカメラ１６０が撮像した撮像データＤ１が他のユーザの使用する端末に表示される。これにより、ユーザＵは他のユーザとビデオデータを介したコミュニケーションを実現することができる。

【0013】

一方、映像出力システム１では、図１Ｂに示すように、撮像データＤ１におけるユーザＵをアバターＡに変換した映像データＤ２を、オンラインビデオコミュニケーションツールに出力する。このように、映像出力システム１は、いわゆる仮想カメラソフトウェアとしての機能を備える。これにより、ユーザＵは、他のユーザが利用する端末の画面に自身の顔を出すことなく、オンラインビデオコミュニケーションを実施することができる。

【0014】

映像出力システム１は、さらに、ユーザＵをアバターＡに変換した映像データＤ２をオンラインビデオコミュニケーションツールに出力している状態で、ユーザＵの顔認証を実施することができる。そのため、映像出力システム１では、他のユーザが利用する端末の画面にユーザの顔を出すことなく、信頼性の高い本人確認を行うことが可能となる。以下、各構成を詳細に説明する。

【0015】

（２．映像出力システム１のハードウェア構成）
図２は、映像出力システム１の全体構成の例を示すブロック図である。映像出力システム１は、ユーザ端末１０と、管理サーバ２０と、顔認証サーバ３０を備える。ユーザ端末１０、管理サーバ２０、顔認証サーバ３０は、例えば、ネットワーク４０を介して通信接続する。ネットワーク４０は、例えば、インターネット及び／又は通信事業者が提供する通信網等により実現される。

【0016】

本実施形態において、複数の装置の集合体を１つのサーバとしてもよい。１つ又は複数のハードウェアに対して本実施形態に係る管理サーバ２０及び／又は顔認証サーバ３０を実現することに要する複数の機能の配分の仕方は、各ハードウェアの処理能力及び／又は各サーバに求められる仕様等に鑑みて適宜決定することができる。

【0017】

ユーザ端末１０は、例えば、据え置き型のＰＣ（Personal Computer）、又はラップトップＰＣ等により実現される。また、ユーザ端末１０は、スマートフォン、又はタブレット等の携帯端末により実現されてもよい。

【0018】

ユーザ端末１０は、通信ＩＦ（Interface）１２と、入力装置１３と、出力装置１４と、メモリ１５と、ストレージ１６と、プロセッサ１７とを備える。

【0019】

通信ＩＦ１２は、ユーザ端末１０が外部の装置と通信するため、信号を入出力するためのインタフェースである。

【0020】

入力装置１３は、ユーザからの入力操作を受け付けるための装置（例えば、キーボード、マウス等のポインティングデバイス、タッチパネル、タッチパッド等）である。

【0021】

出力装置１４は、ユーザに対して情報を提示するための装置（ディスプレイ、スピーカ等）である。

【0022】

メモリ１５は、プログラム、及び、プログラム等で処理されるデータ等を一時的に記憶するためのものであり、例えばＤＲＡＭ（Dynamic Random Access Memory）等の揮発性のメモリである。

【0023】

ストレージ１６は、データを保存するためのものであり、例えばフラッシュメモリ、ＨＤＤ（Hard Disc Drive）である。

【0024】

プロセッサ１７は、プログラムに記述された命令セットを実行するためのハードウェアであり、演算装置、レジスタ、周辺回路等により構成される。

【0025】

管理サーバ２０は、映像出力システム１を利用するユーザの管理およびユーザ認証（ログイン／ログアウト）を行う。管理サーバ２０は、通信ＩＦ２２と、入出力ＩＦ２３と、メモリ２５と、ストレージ２６と、プロセッサ２７とを備える。

【0026】

通信ＩＦ２２は、管理サーバ２０が外部の装置と通信するため、信号を入出力するためのインタフェースである。

【0027】

入出力ＩＦ２３は、ユーザからの入力操作を受け付けるための入力装置、及び、ユーザに対し、情報を提示するための出力装置とのインタフェースとして機能する。

【0028】

メモリ２５は、プログラム、及び、プログラム等で処理されるデータ等を一時的に記憶するためのものであり、例えばＤＲＡＭ等の揮発性のメモリである。

【0029】

ストレージ２６は、データを保存するためのものであり、例えばフラッシュメモリ、ＨＤＤである。

【0030】

プロセッサ２７は、プログラムに記述された命令セットを実行するためのハードウェアであり、演算装置、レジスタ、周辺回路等により構成される。

【0031】

顔認証サーバ３０は、映像出力システム１を利用するユーザの顔認証を行う。顔認証サーバ３０は、通信ＩＦ３２と、入出力ＩＦ３３と、メモリ３５と、ストレージ３６と、プロセッサ３７とを備える。これらの構成は、管理サーバ２０と同様であるため、説明は繰り返さない。

【0032】

（３．映像出力システム１の機能構成）
以下、図３～図５を参照して、映像出力システム１の機能構成を説明する。

【0033】

（３－１．ユーザ端末１０の機能構成）
図３は、第１実施形態の映像出力システム１を構成するユーザ端末１０の構成を示す図である。ユーザ端末１０は、インターネットなどのネットワークを介して管理サーバ２０と通信可能に接続される。ユーザ端末１０は、５Ｇ、ＬＴＥ（Long Term Evolution）などの通信規格に対応した無線基地局、またはＩＥＥＥ（Institute of Electrical and Electronics Engineers）８０２．１１などの無線ＬＡＮ（Local Area Network）規格に対応した無線ＬＡＮルータ等の通信機器と通信することによりネットワークに接続される。

【0034】

図３に示すように、ユーザ端末１０は、アンテナ１１０と、アンテナ１１０に対応する無線通信部１２０と、操作受付部１３０（キーボード１３１およびマウス１３２を含む）と、音声処理部１４０（マイク１４１およびスピーカ１４２を含む）と、ディスプレイ１５０と、カメラ１６０と、記憶部１７０と、制御部１８０とを含む構成としてもよい。

【0035】

なお、ユーザ端末１０は、図３では特に図示していない機能及び構成（例えば、電力を保持するためのバッテリー、バッテリーから各回路への電力の供給を制御する電力供給回路など）も有している。図３においてブロックで示される各構成は、バス等により電気的に接続される。

【0036】

アンテナ１１０は、ユーザ端末１０が発する信号を電波として放射する。また、アンテナ１１０は、空間から電波を受信して受信信号を無線通信部１２０へ与える。

【0037】

無線通信部１２０は、ユーザ端末１０が他の無線機器と通信するため、アンテナ１１０を介して信号を送受信するための変復調処理などを行う。無線通信部１２０は、ユーザ端末１０が送受信する無線信号の変復調や周波数変換を行い、受信信号を制御部１８０へ与える。

【0038】

操作受付部１３０は、ユーザの入力操作を受け付けるための機構を有する。具体的には、操作受付部１３０は、キーボード１３１と、マウス１３２とを含むことができる。

【0039】

音声処理部１４０は、音声信号の変復調を行い、マイク１４１から与えられる信号を変調して、変調後の信号を制御部１８０へ与える。また、音声処理部１４０は、音声信号をスピーカ１４２へ与える。音声処理部１４０は、例えば音声処理用のプロセッサによって実現される。マイク１４１は、音声入力を受け付けて、当該音声入力に対応する音声信号を音声処理部１４０へ与える。スピーカ１４２は、音声処理部１４０から与えられる音声信号を音声に変換して当該音声をユーザ端末１０の外部へ出力する。

【0040】

ディスプレイ１５０は、制御部１８０の制御に応じて、画像、動画、テキストなどのデータを表示する。ディスプレイ１５０は、例えばＬＣＤ（Liquid Crystal Display）や有機ＥＬ（Electro-Luminescence）ディスプレイによって実現され得る。

【0041】

カメラ１６０は、受光素子により光を受光して、撮影画像として出力するためのデバイスである。カメラ１６０は、例えば、撮影した画像をリアルタイムでネットワーク４０へ転送可能なリアルタイムカメラ（いわゆるウェブカメラを含む）であってもよい。

【0042】

記憶部１７０は、例えばメモリ１５またはストレージ１６で構成され、ユーザ端末１０が使用するデータおよびプログラムを記憶する。記憶部１７０には、一例として、アバターデータベース２８２が記憶されている。アバターデータベース２８２はユーザが使用可能なアバターについての情報である。アバターとは、コンピュータの画面上に表示される仮想空間においてユーザの分身として表示されるキャラクターを指す。アバターデータベース２８２は、ユーザが使用可能なアバターの外見、属性（名称、性別、種等）、声などの情報を保持する。

【0043】

制御部１８０は、プロセッサ１７が記憶部１７０に記憶されるプログラムを読み込み、プログラムに含まれる命令を実行することにより実現され、ユーザ端末１０の動作を制御する。制御部１８０は、例えば予めユーザ端末１０にインストールされているアプリケーションとして実現してもよい。制御部１８０は、プログラムに従って動作することにより、操作受付モジュール１８０１と、送受信モジュール１８０２と、通知モジュール１８０３と、撮像モジュール１８０４と、映像生成モジュール１８０５と、映像出力モジュール１８０６と、認証モジュール１８０７としての機能を発揮する。

【0044】

操作受付モジュール１８０１は、キーボード１３１等の入力装置に対するユーザの入力操作を受け付ける処理を行う。

【0045】

送受信モジュール１８０２は、ユーザ端末１０が、管理サーバ２０等の外部の装置と、通信プロトコルに従ってデータを送受信するための処理を行う。

【0046】

通知モジュール１８０３は、ユーザに対し情報を通知する処理を行う。具体的には、通知制御部１８４は、表示画像をディスプレイ１５０に表示させる処理、音声をスピーカ１４２に出力させる処理、振動をカメラ１６０に発生させる処理等を行う。

【0047】

撮像モジュール１８０４は、カメラ１６０を機能させてユーザの撮像データを取得する。撮像モジュール１８０４の処理の詳細は後述する。

【0048】

映像生成モジュール１８０５は、撮像モジュール１８０４が取得した撮像データに基づいて、ユーザをアバターに変換した映像データを生成する。映像生成モジュール１８０５の処理の詳細は後述する。

【0049】

映像出力モジュール１８０６は、映像生成モジュール１８０５が生成した映像データを、オンラインビデオコミュニケーションツールに出力する。映像出力モジュール１８０６の処理の詳細は後述する。

【0050】

認証モジュール１８０７は、撮像モジュール１８０４が取得した撮像データに基づいて顔認証を実行する。認証モジュール１８０７の処理の詳細は後述する。

【0051】

ユーザは、映像出力システム１が提供するサービスを利用するために、所定のアプリケーションをユーザ端末１０にインストールしてもよい。ユーザ端末１０は、ユーザから、クレジットカード情報、携帯決済サービス事業者が提供する決済サービスに関する情報の登録を受け付けてもよい。

【0052】

（３－２．管理サーバ２０の機能構成）
図４は、管理サーバ２０の構成を示す図である。図４に示すように、管理サーバ２０は、通信部２０１と、記憶部２０２と、入出力部２０３と、制御部２０４を備える。

【0053】

通信部２０１は、管理サーバ２０がユーザ端末１０等の外部の装置と通信するための処理を行う。

【0054】

記憶部２０２は、メモリ２５またはストレージ２６で実現され、管理サーバ２０が使用するデータ及びプログラムを記憶する。一例として、記憶部２０２には、ユーザデータベース２０２１が記憶されている。ユーザデータベース２０２１は、映像出力システム１を利用するユーザの情報（氏名、性別、年齢、住所、ＩＤ、パスワード等）を記憶する。

【0055】

入出力部２０３は、ユーザからの入力操作を受け付けるための入力装置、および、ユーザに対し情報を提示するための出力装置とのインタフェースとして機能する。

【0056】

制御部２０４は、プロセッサ２７がプログラムに従って処理を行うことにより、以下に示す各種モジュールとして示す機能を発揮する。

【0057】

送受信モジュール２０４１は、管理サーバ２０が外部の装置から通信プロトコルに従って信号を送受信する処理を制御する。

【0058】

認証モジュール２０４２は、ユーザ認証を行う。認証モジュール２０４２の処理の詳細は後述する。

【0059】

（３－３．顔認証サーバ３０の機能構成）
図４は、顔認証サーバ３０の構成を示す図である。図４に示すように、顔認証サーバ３０は、通信部３０１と、記憶部３０２と、入出力部３０３と、制御部３０４を備える。

【0060】

通信部３０１は、顔認証サーバ３０が管理サーバ２０等の外部の装置と通信するための処理を行う。

【0061】

記憶部３０２は、メモリ３５またはストレージ３６で実現され、顔認証サーバ３０が使用するデータ及びプログラムを記憶する。一例として、記憶部３０２には、顔情報データベース３０２１が記憶されている。顔情報データベース３０２１は、予め登録された映像出力システム１を利用するユーザの顔情報を記憶する。

【0062】

入出力部３０３は、ユーザからの入力操作を受け付けるための入力装置、および、ユーザに対し情報を提示するための出力装置とのインタフェースとして機能する。

【0063】

制御部３０４は、プロセッサ３７がプログラムに従って処理を行うことにより、以下に示す各種モジュールとして示す機能を発揮する。

【0064】

送受信モジュール３０４１は、顔認証サーバ３０が外部の装置から通信プロトコルに従って信号を送受信する処理を制御する。

【0065】

認証モジュール３０４２は、顔情報データベース３０２１を参照して、顔認証を行う。認証モジュール３０４２の処理の詳細は後述する。

【0066】

（４．処理の流れ）
以下、図６～図９を参照し、映像出力システム１の処理の流れについて説明する。

【0067】

（４－１．映像出力システム１の処理）
図６を参照して、映像出力システム１の処理の流れの一例を説明する。ステップＳ５１１において、ユーザ端末１０は、ユーザＵからＩＤとパスワードを受け付けて管理サーバ２０へ送信する。ステップＳ５２１において、管理サーバ２０は、ユーザ端末１０が送信したＩＤとパスワードを受信する。

【0068】

ステップＳ５２２において、管理サーバ２０の認証モジュール２０４２は、記憶部２０２内のユーザデータベース２０２１を参照し、ＩＤとパスワードによるログイン認証を実行する。ステップＳ５１２において、ユーザ端末１０の通知モジュール１８０３は、管理サーバ２０からの通知に基づき、ログイン認証が成功したことをディスプレイ１５０に表示する。

【0069】

ステップＳ６００において、ユーザ端末１０は、ビデオコミュニケーション処理を実行する。ビデオコミュニケーション処理の詳細は後述する。

【0070】

ステップＳ５１３において、ユーザ端末１０は、ユーザＵからログアウトの操作を受け付ける。ステップＳ５２３において、管理サーバ２０は、ログアウト処理のリクエストを受信する。

【0071】

ステップＳ５２４において、管理サーバ２０の認証モジュール２０４２は、ログアウト処理を実行する。ステップＳ５１４において、ユーザ端末１０の通知モジュール１８０３は、管理サーバ２０からの通知に基づき、ログアウトしたことをディスプレイ１５０に表示する。

【0072】

（４－２．ビデオコミュニケーション処理の流れ）
図７を参照して、ビデオコミュニケーション処理（Ｓ６００）の処理の流れの一例を説明する。ステップＳ６１０において、ユーザ端末１０の撮像モジュール１８０４は、カメラ１６０を機能させてユーザＵの撮像データを取得する

【0073】

ステップＳ６２０において、ユーザ端末１０の映像生成モジュール１８０５は、撮像モジュール１８０４が取得した撮像データに基づいて、ユーザをアバターに変換した映像データを生成する。具体的には、例えば、撮像データにおけるユーザの顔における特徴点を抽出し、当該特徴点の動きをトラッキングする。その上で、アバターにおける当該特徴点に該当する箇所をトラッキングした動きに合わせて動かした動画を生成する。

【0074】

ステップＳ６３０において、ユーザ端末１０の映像出力モジュール１８６は、映像生成モジュール１８０５が生成した映像データを、オンラインビデオコミュニケーションツールとして機能するアプリケーションへ出力する。一例として、映像出力モジュール１８６は、オンラインビデオコミュニケーションツールとして機能するアプリケーションに設定されている仮想カメラソフトウェアからの入力を受け付ける入力チャネルに対して、映像データを出力する。

【0075】

ステップＳ６４０において、ユーザ端末１０の認証モジュール１８０７は、所定の第１条件が満たされたか否かを判定する。所定の第１条件は、例えばビデオコミュニケーション処理（Ｓ６００）の所要時間（例えば４５分）内に、等間隔のタイミング（例えば５分間隔）で満たされる仕様としてもよいし、ランダムのタイミングで１回または複数回満たされる仕様としてもよい。また、映像出力システム１を利用してオンラインビデオコミュニケーションを主催するユーザ（例えばオンラインセミナーにおける講師）が所定の第１条件を設定可能な仕様としてもよい。一例として、ビデオコミュニケーション処理（Ｓ６００）の開始から終了までの期間に顔認証を行う回数Ｎを設定しておき、ランダムなタイミングで第１条件がＮ回満たされる仕様としてもよい。

【0076】

所定の第１条件が満たされた場合（ステップＳ６４０においてＹＥＳ）、顔認証処理（Ｓ７００）が実行される。顔認証処理の詳細は後述する。

【0077】

顔認証処理（Ｓ７００）の後、認証後処理（Ｓ８００）が実行される。認証後処理の詳細は後述する。認証後処理の後、ステップＳ６５０が実行される。

【0078】

一方、所定の第１条件が満たされない場合（ステップＳ６４０においてＮＯ）、ステップＳ６５０において、オンラインビデオコミュニケーションの終了条件が満たされたか否かが判定される。終了条件としては、予め定められた所要時間が経過したことで満たされる仕様としてもよいし、ユーザの終了操作によって満たされる仕様としてもよい。終了条件が満たされていない場合（ステップＳ６５０においてＮＯ）、ステップＳ６１０以降の処理が繰り返される。一方、終了条件が満たされた場合、ビデオコミュニケーション処理（Ｓ６００）を終了する。

【0079】

このように、映像出力システム１では、ビデオコミュニケーション処理（Ｓ６００）の間、ユーザの撮像データにおけるユーザをアバターに変換した映像データを生成して、オンラインビデオコミュニケーションツールに出力し続ける。その状態で、所定の第１条件が満たされた場合に、顔認証処理（Ｓ７００）が行われる。すなわち、映像出力システム１は、顔認証処理において、撮像モジュール１８０４が取得した撮像データを用いて顔認証を実行させる一方で、オンラインビデオコミュニケーションツールには、当該撮像データにおけるユーザをアバターに変換した映像データを出力し続ける。このように同一の撮像データに基づいて、映像データへの変換と顔認証処理が行われる。

【0080】

このような構成とすることにより、顔認証処理の間においても、オンラインビデオコミュニケーションツールを使用してオンラインビデオコミュニケーションに参加する他のユーザの端末の画面には、ユーザの撮像データは表示されずに、アバターに変換された映像データが表示される。そのため、オンラインビデオコミュニケーションに参加している他のユーザの端末の画面にユーザの顔をだすことなく、当該ユーザの顔認証を行うことが可能となる。

【0081】

（４－３．顔認証処理の流れ）
図８を参照して、顔認証処理（Ｓ７００）の処理の流れの一例を説明する。ステップＳ７１１において、ユーザ端末１０の送受信モジュール１８０２は、撮像モジュール１８０４が取得した撮像データを管理サーバ２０へ送信する。ステップＳ７２１において、管理サーバ２０の送受信モジュール２０４１は、撮像データを受信する。

【0082】

ステップＳ７２２において、管理サーバ２０の送受信モジュール２０４１は、撮像データを顔認証サーバ３０へ送信する。ステップＳ７３１において、顔認証サーバ３０の送受信モジュール３０４１は、撮像データを受信する。

【0083】

ステップＳ７３２において、顔認証サーバ３０の認証モジュール３０４２は、記憶部３０２内の顔情報データベース３０２１を参照し、顔認証を実行する。

【0084】

ステップＳ７３３において、顔認証サーバ３０の送受信モジュール３０４１は、認証結果を管理サーバ２０へ送信する。ステップＳ７２３において、管理サーバ２０の送受信モジュール２０４１は、認証結果を受信する。

【0085】

ステップＳ７２４において、管理サーバ２０の送受信モジュール２０４１は、認証結果をユーザ端末１０へ送信する。ステップＳ７１２において、ユーザ端末１０の認証モジュール１８０７は、認証結果を判定する。

【0086】

（４－４．認証後処理の流れ）
図９を参照して、認証後処理（Ｓ８００）の処理の流れの一例を説明する。ステップＳ８１０において、ユーザ端末１０の認証モジュール１８０７は、認証ができた（認証ＯＫ）か否か（認証エラー）を判定する。認証ＯＫであった場合（ステップＳ８１０において、ＹＥＳ）、認証後処理を終了する。一方、認証エラーだった場合（ステップＳ８１０において、ＮＯ）、ステップＳ８２０が実行される。

【0087】

ステップＳ８２０において、通知モジュール１８０３は、第１エラー画面Ｅ１を出力する。第１エラー画面Ｅ１の詳細は後述する。ステップＳ８３０において、認証モジュール１８０７は、所定の第２条件が満たされたか否かを判定する。所定の第２条件は、例えば前回の顔認証処理（ステップＳ７００）の実行後、所定の時間後（例えば１０分後）に満たされる仕様としてもよいし、所定の時間内（例えば１０分内）にランダムのタイミングで満たされる仕様としてもよい。また、映像出力システム１を利用してオンラインビデオコミュニケーションを主催するユーザが所定の第２条件を設定可能な仕様としてもよい。

【0088】

所定の第２条件が満たされた場合（ステップＳ８３０においてＹＥＳ）、再度の顔認証処理（Ｓ７５０）が実行される。

【0089】

再度の顔認証処理の後、ステップＳ８４０が実行される。ステップＳ８４０において、認証モジュール１８０７は、再度の顔認証の結果を判定する。認証ＯＫであった場合（ステップＳ８４０において、ＹＥＳ）、認証後処理を終了する。一方、認証エラーだった場合（ステップＳ８４０において、ＮＯ）、ステップＳ８５０が実行される。

【0090】

ステップＳ８５０において、通知モジュール１８０３は、第２エラー画面Ｅ２をディスプレイ１５０に出力する。第２エラー画面Ｅ２の詳細は後述する。ステップＳ８６０において、認証モジュール１８０７は、ユーザから受け付けたＩＤ・パスワードによる他の認証を実行する。

【0091】

ステップＳ８７０において、認証モジュール１８０７は、認証の結果を判定する。認証ＯＫだった場合（ステップＳ８７０において、ＹＥＳ）、認証後処理を終了する。一方、認証エラーだった場合（ステップＳ８７０において、ＮＯ）、ステップＳ８８０が実行される。

【0092】

ステップＳ８８０において、通知モジュール１８０３は、第３エラー画面Ｅ３を出力する。第３エラー画面Ｅ３の詳細は後述する。また、通知モジュール１８０３は、第３エラー画面Ｅ３を出力すると同時／代わりに、管理サーバ２０へ顔認証ができなかったことを通知する。管理サーバ２０は、オンラインビデオコミュニケーションを主催するユーザに、顔認証ができなかったことを通知する仕様としてもよい。

【0093】

（５．画面例）
図１０および図１１を参照して、ユーザ端末１０のディスプレイ１５０に表示される画面例を説明する。

【0094】

（５－１．正常時の画面）
図１０Ａに示すように、ビデオコミュニケーション処理（Ｓ７００）の実行中において、ユーザ端末１０のディスプレイ１５０には、カメラ１６０で撮像されたユーザＵの撮像データＤ１が表示される。

【0095】

図１０Ｂに示すように、ビデオコミュニケーション処理の実行中において、映像出力モジュール１８０６は、ユーザＵをアバターＡに変換した映像データＤ２をオンラインビデオコミュニケーションツールに出力する。これにより、ビデオコミュニケーションに参加している他のユーザの端末の画面には、映像データＤ２が表示される。なお、ユーザＵは、オンラインビデオコミュニケーションツールに撮像データＤ１を出力したり（いわゆる顔出しの状態）、映像データＤ２を出力しない（いわゆる画面オフの状態）ようにしたり選択できる仕様としてもよい。

【0096】

図１０Ｃに示すように、顔認証処理（Ｓ８００）の実行中においては認証画面Ｎ１が表示される。このように顔認証処理が行われていることをユーザＵに通知することにより、より正確な顔認証を実現することが可能となる。

【0097】

（５－２．認証エラー時の画面）
図１１Ａは第１エラー画面Ｅ１の一例を示す図である。第１エラー画面Ｅ１は、顔認証処理（Ｓ７００）を行ったユーザＵの端末にのみ表示される。一例として、第１エラー画面Ｅ１には、カメラの前に戻ることを促す通知が表示される。この際、再度の顔認証が実行されることをユーザに通知する仕様としてもよい。このようにすることで、再度の顔認証処理において認証エラーとなることを防ぐことができる。

【0098】

図１１Ｂは第２エラー画面Ｅ２の一例を示す図である。第２エラー画面Ｅ２は、再度の顔認証処理（Ｓ７５０）を行ったユーザＵの端末にのみ表示される。第２エラー画面Ｅ２では、ＩＤとパスワードでの認証を行う必要がある旨の表示がされる。これにより、顔認証が複数回エラーとなったユーザに対して、ＩＤとパスワード等による他の認証を行わせることが可能となる。

【0099】

図１１Ｃは第３エラー画面Ｅ３の一例を示す図である。第３エラー画面Ｅ３は、一例として、オンラインビデオコミュニケーションに参加しているユーザが使用する全ての端末の画面に表示される。このようにすることで、当該オンラインビデオコミュニケーションに参加しているユーザに対して、顔認証処理を行ったユーザＵが認証エラーとなり、本人でない可能性が高いことを知らせることが可能となり、オンラインビデオコミュニケーションにおけるセキュリティレベルを確保することができる。

【0100】

また、顔認証処理を行ったユーザＵのユーザ端末１０において、第３エラー画面Ｅ３を表示させると同時に／代わりに、オンラインビデオコミュニケーションツールを使用できなくさせる仕様としてもよい。このようにすることで、オンラインビデオコミュニケーションにおけるセキュリティレベルを確保することができる。

【0101】

以上のように、本実施の形態においては、映像出力システム１は、ユーザの撮像データを取得するステップと、撮像データに基づいて、ユーザをアバターに変換した映像データを生成するステップと、生成された映像データを出力するステップと、撮像データに基づいて顔認証を実行するステップとを実行する。

【0102】

これにより、オンラインビデオコミュニケーションツールを利用する際に、他のユーザの使用する端末に表示される画面にユーザの顔を出さずに、信頼性の高い本人確認を行うことが可能となる。具体的には、例えば、学校などの教育現場においてオンラインの授業を行う際に、生徒が顔出ししなくとも高い信頼性で本人確認を行うことができる。これにより、なりすましなどの不正行為を防止することができ、出欠管理が容易となる。また、オンライン会議などにおいて、顔出ししなくても本人確認することができるため、安心したコミュニケーションを実現することができる。

【0103】

＜２．その他の実施形態＞
以上、本発明における実施形態およびその変形例について説明したが、本開示の適用は上述の内容に限定されるものではない。

【0104】

例えば、上記実施形態においては、再度の顔認証処理（Ｓ７５０）がエラーであった場合に、他の認証を行っているが、この態様に限定されることはない。例えば、顔認証を３回以上行った上で認証エラーの場合に他の認証を行ってもよいし、１回目の顔認証がエラーの場合に他の認証を行う仕様としてもよい。

【0105】

また、上記実施形態においては、ステップＳ７１１～ステップＳ７３１において、ユーザ端末１０から管理サーバ２０を介して撮像データを顔認証サーバ３０へ送信しているが、この態様に限定されることはない。例えば、ユーザ端末１０から顔認証サーバ３０へ直接撮像データを送信する仕様としてもよい。また、認証結果についても、顔認証サーバ３０からユーザ端末１０へ直接送信する仕様としてもよい。

【0106】

また、上記実施形態においては、他の認証はＩＤおよびパスワードで行っているが、この態様に限定されることはなく、他の生体認証などを使用してもよい。

【0107】

また、他の認証が正常であった場合に、所定の時間内に再度の顔認証を行う仕様としてもよい。

【0108】

また、通信回線を介した所定情報の共有は、主にインターネットなどのＷＡＮを介して行われるが、情報処理装置間では、ＷＡＮを介さずにＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離の無線通信、及び赤外線通信等のみを介して行われてもよい。

【0109】

また、上記実施形態では、各機能をユーザ端末１０、管理サーバ２０、顔認証サーバ３０が備える態様の一例について説明したが、この形態に限定されることはない。すなわち、本開示における一部または全部の機能を、上記実施形態と異なる態様でユーザ端末１０、管理サーバ２０、顔認証サーバ３０の一部または全部が備える構成としてもよい。

【0110】

さらに、本発明は、上述のプログラムを格納する、コンピュータ読み取り可能な非一時的な記録媒体として実現してもよい。

【0111】

以上、本発明に係る種々の実施形態を説明したが、これらは例として提示したものであり、発明の範囲を限定することは意図していない。当該新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。当該実施形態やその変形は、発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【0112】

＜付記＞
以上の各実施の形態で説明した事項を以下に付記する。
（付記１）
プロセッサを備えるコンピュータに、オンラインビデオコミュニケーションツールとして機能するアプリケーションへ映像データを出力させるプログラムであって、ユーザの撮像データを取得するステップ（Ｓ６１０）と、撮像データに基づいて、ユーザをアバターに変換した映像データを生成するステップ（Ｓ６２０）と、生成された映像データを出力するステップ（Ｓ６３０）と、撮像データに基づいて顔認証を実行するステップ（Ｓ７００）と、を実行させるプログラム。
（付記２）
顔認証を実行するステップにおいて、オンラインビデオコミュニケーションツールに、ユーザの撮像データを表示させない、付記１に記載のプログラム。
（付記３）
顔認証を実行するステップにおいて、オンラインビデオコミュニケーションツールに、アバターに変換した映像データを表示させる、付記１または付記２に記載のプログラム。
（付記４）
顔認証を実行するステップにおいて、撮像データを用いて顔認証を実行させる、付記１～付記３のいずれかに記載のプログラム。
（付記５）
顔認証がエラーとなった場合に、所定の時間内に再度の顔認証を実行させる、付記１～付記４のいずれか１項に記載のプログラム。
（付記６）
所定の時間内に再度の顔認証が実行されることを、ユーザに通知させる、付記５に記載のプログラム
（付記７）
再度の顔認証がエラーとなった場合に、顔認証以外での他の認証を実行させる、付記６に記載のプログラム。
（付記８）
他の認証がエラーとなった場合に、コンピュータをオンラインビデオコミュニケーションツールの機能を使用できない状態にさせる、付記７に記載のプログラム。
（付記９）
他の認証がエラーとなった場合に、ユーザとオンラインビデオコミュニケーションを行っている他のユーザに当該エラーを通知させる、付記７または付記８に記載のプログラム。
（付記１０）
顔認証がエラーとなったことを、オンラインビデオコミュニケーションツールにおけるビデオコミュニケーションの主催者に通知させる、付記１～付記９のいずれかに記載のプログラム。

【符号の説明】

【0113】

１：映像出力システム、１０：ユーザ端末、１３：入力装置、１４：出力装置、１５：メモリ、１６：ストレージ、１７：プロセッサ、２０：管理サーバ、２５：メモリ、２６：ストレージ、２７：プロセッサ、２９：プロセッサ、３０：顔認証サーバ、３５：メモリ、３６：ストレージ、３７：プロセッサ、４０：ネットワーク、１１０：アンテナ、１２０：無線通信部、１３０：操作受付部、１３１：キーボード、１３２：マウス、１４０：音声処理部、１４１：マイク、１４２：スピーカ、１５０：ディスプレイ、１６０：カメラ、１７０：記憶部、１８０：制御部、１８４：通知制御部、１８６：映像出力モジュール、２０１：通信部、２０２：記憶部、２０３：入出力部、２０４：制御部、２８２：アバターデータベース、３０１：通信部、３０２：記憶部、３０３：入出力部、３０４：制御部、１８０１：操作受付モジュール、１８０２：送受信モジュール、１８０３：通知モジュール、１８０４：撮像モジュール、１８０５：映像生成モジュール、１８０６：映像出力モジュール、１８０７：認証モジュール、２０２１：ユーザデータベース、２０４１：送受信モジュール、２０４２：認証モジュール、３０２１：顔情報データベース、３０４１：送受信モジュール、３０４２：認証モジュール。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】