特開 2022-174529 本人認証システム及び本人認証方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022174529

(43)【公開日】2022-11-24

(54)【発明の名称】本人認証システム及び本人認証方法

(51)【国際特許分類】

   G06F 21/31 20130101AFI20221116BHJP

   G06F 21/32 20130101ALI20221116BHJP

【ＦＩ】

G06F21/31

G06F21/32

【審査請求】未請求

【請求項の数】7

【出願形態】ＯＬ

(21)【出願番号】P 2021080381

(22)【出願日】2021-05-11

(71)【出願人】

【識別番号】000001432

【氏名又は名称】グローリー株式会社

(74)【代理人】

【識別番号】100114306

【弁理士】

【氏名又は名称】中辻 史郎

(74)【代理人】

【識別番号】100148655

【弁理士】

【氏名又は名称】諏訪 淳一

(72)【発明者】

【氏名】岡田 知之

(57)【要約】

【課題】本人認証を効率良く行うことを課題とする。
【解決手段】本人認証システムは、顔画像を利用して本人認証を行う場合に、ユーザ登録データに記憶した登録顔画像のうち、所定の期間（例えば１年）を越えた有効期限切れの登録顔画像を排除し、有効期限内の登録顔画像を特定し、端末装置２０から送信された顔画像と照合処理を行う。そして、本人認証装置１０で本人認証ができなかった場合は、本人認証装置１０は、端末装置２０に対して追加認証データを要求し、端末装置から送信された追加認証データ（例えば、パスワード）を用いて、本人認証装置１０に記憶したユーザ登録データのうち、顔画像が有効期限切れであり、かつ、ユーザ登録データのパスワードが受信した追加認証データのパスワードと同じユーザ登録データを特定し、端末装置２０から送信された顔画像と照合処理を行う。
【選択図】図１

【特許請求の範囲】

【請求項1】

認証対象者の生体情報と、事前登録された複数の登録生体情報とを照合して前記認証対象者の本人認証を行う本人認証装置を有する本人認証システムであって、
少なくとも前記登録生体情報と所定の登録認証情報とを関連付けて記憶する記憶部と、
前記記憶部に記憶された複数の登録生体情報のうち、所定の条件を満たす登録生体情報を対象外とする処理部と、
前記認証対象者の生体情報を取得する生体情報取得部と、
前記生体情報取得部によって取得された前記認証対象者の生体情報と、前記記憶部に記憶された登録生体情報とを照合して本人認証を行う第１の本人認証部と、
前記第１の本人認証部にて前記認証対象者が本人であると認証されない場合に、前記認証対象者の所定の追加認証情報を取得する追加認証情報取得部と、
前記生体情報、前記追加認証情報、前記記憶部に記憶された前記登録生体情報及び前記登録認証情報に基づいて、前記認証対象者の本人認証を行う第２の本人認証部と
を備えたことを特徴とする本人認証システム。

【請求項2】

前記第２の本人認証部は、
前記追加認証情報に対応する登録認証情報が関連付けられた１又は複数の登録生体情報を特定し、特定した登録生体情報と前記認証対象者の生体情報とを照合して本人認証を行うことを特徴とする請求項１に記載の本人認証システム。

【請求項3】

前記記憶部は、
少なくとも前記登録生体情報と、所定の登録認証情報と、最終利用日とを関連付けて記憶し、
前記処理部は、
前記記憶部に記憶された複数の登録生体情報のうち、前記登録生体情報の最終利用日から所定の期間を経過した場合に、前記登録生体情報を対象外とする
ことを特徴とする請求項１又は２に記載の本人認証システム。

【請求項4】

前記生体情報は、
前記認証対象者の顔、指紋又は掌紋に係る情報であることを特徴とする請求項１～３のいずれか一つに記載の本人認証システム。

【請求項5】

前記登録認証情報は、
前記認証対象者の氏名、生年月日、住所、パスワード、ユーザ識別情報又は端末識別情報であることを特徴とする請求項１～３のいずれか一つに記載の本人認証システム。

【請求項6】

前記生体情報取得部は、
前記認証対象者が所持する端末装置に配設された撮像部であり、
前記追加認証情報は、
前記端末装置に対応して設けられる端末識別情報である
ことを特徴とする請求項１～５のいずれか一つに記載の本人認証システム。

【請求項7】

認証対象者の生体情報と、事前登録された複数の登録生体情報とを照合して前記認証対象者の本人認証を行う本人認証装置を有する本人認証システムにおける本人認証方法であって、
少なくとも前記登録生体情報と所定の登録認証情報とを関連付けて記憶する記憶部に記憶された複数の登録生体情報のうち、所定の条件を満たす登録生体情報を対象外とする処理工程と、
前記認証対象者の生体情報を取得する生体情報取得工程と、
前記生体情報取得工程によって取得された前記認証対象者の生体情報と、前記記憶部に記憶された登録生体情報とを照合して本人認証を行う第１の本人認証工程と、
前記第１の本人認証工程にて前記認証対象者が本人であると認証されない場合に、前記認証対象者の所定の追加認証情報を取得する追加認証情報取得工程と、
前記生体情報、前記追加認証情報、前記記憶部に記憶された前記登録生体情報及び前記登録認証情報に基づいて、前記認証対象者の本人認証を行う第２の本人認証工程と
を含むことを特徴とする本人認証方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、本人認証を効率良く行うことができる本人認証システム及び本人認証方法に関する。

【背景技術】

【0002】

従来、認識対象となる認証対象者の顔画像などの生体情報を取得し、該認証対象者から取得した生体情報と、あらかじめ登録された登録生体情報とを照合処理することにより、認証対象者が本人であるか否かを認証する本人認証技術が知られている。

【0003】

ここで、認証対象者の生体情報の照合対象となる登録生体情報が多くなればなるほど、照合処理に時間を要するため、一定期間照合していない人物の登録生体情報を照合対象から除外する従来技術が知られている（例えば、特許文献１を参照）。かかる従来技術を用いることにより、登録直後のみ使用された登録生体情報、削除忘れの登録生体情報などの使用されない登録生体情報を除外して、照合処理の迅速化及び照合精度の低下の防止を図ることができる。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００４－３１０２８７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、上記の従来技術では、照合対象から除外された人物が認証対象者となる場合に、本人認証を行うことができなくなるという問題がある。ある人物が休暇又は出張などの理由により一定期間本人認証を行わなかった場合に、この人物を本人認証の対象外とするのは妥当ではない。

【0006】

このため、照合対象から除外された人物をいかに効率良く本人認証するかが重要な課題となっている。かかる課題は、本人認証を行う顔を対象とする場合だけではなく、指紋、掌紋などの各種生体情報を用いる場合にも同様に生ずる課題である。

【0007】

本発明は、上記従来技術の課題を解決するためになされたものであって、本人認証を効率良く行うことができる本人認証システム及び本人認証方法を提供することを目的とする。

【課題を解決するための手段】

【0008】

上述した課題を解決し、目的を達成するため、本発明は、認証対象者の生体情報と、事前登録された複数の登録生体情報とを照合して前記認証対象者の本人認証を行う本人認証装置を有する本人認証システムであって、少なくとも前記登録生体情報と所定の登録認証情報とを関連付けて記憶する記憶部と、前記記憶部に記憶された複数の登録生体情報のうち、所定の条件を満たす登録生体情報を対象外とする処理部と、前記認証対象者の生体情報を取得する生体情報取得部と、前記生体情報取得部によって取得された前記認証対象者の生体情報と、前記記憶部に記憶された登録生体情報とを照合して本人認証を行う第１の本人認証部と、前記第１の本人認証部にて前記認証対象者が本人であると認証されない場合に、前記認証対象者の所定の追加認証情報を取得する追加認証情報取得部と、前記生体情報、前記追加認証情報、前記記憶部に記憶された前記登録生体情報及び前記登録認証情報に基づいて、前記認証対象者の本人認証を行う第２の本人認証部とを備えたことを特徴とする。

【0009】

また、本発明は、上記発明において、前記第２の本人認証部は、前記追加認証情報に対応する登録認証情報が関連付けられた１又は複数の登録生体情報を特定し、特定した登録生体情報と前記認証対象者の生体情報とを照合して本人認証を行うことを特徴とする。

【0010】

また、本発明は、上記発明において、前記記憶部は、少なくとも前記登録生体情報と、所定の登録認証情報と、最終利用日とを関連付けて記憶し、前記処理部は、前記記憶部に記憶された複数の登録生体情報のうち、前記登録生体情報の最終利用日から所定の期間を経過した場合に、前記登録生体情報を対象外とすることを特徴とする。

【0011】

また、本発明は、上記発明において、前記生体情報は、前記認証対象者の顔、指紋又は掌紋に係る情報であることを特徴とする。

【0012】

また、本発明は、上記発明において、前記登録認証情報は、前記認証対象者の氏名、生年月日、住所、パスワード、ユーザ識別情報又は端末識別情報であることを特徴とする。

【0013】

また、本発明は、上記発明において、前記生体情報取得部は、前記認証対象者が所持する端末装置に配設された撮像部であり、前記追加認証情報は、前記端末装置に対応して設けられる端末識別情報であることを特徴とする。

【0014】

また、本発明は、認証対象者の生体情報と、事前登録された複数の登録生体情報とを照合して前記認証対象者の本人認証を行う本人認証装置を有する本人認証システムにおける本人認証方法であって、少なくとも前記登録生体情報と所定の登録認証情報とを関連付けて記憶する記憶部に記憶された複数の登録生体情報のうち、所定の条件を満たす登録生体情報を対象外とする処理工程と、前記認証対象者の生体情報を取得する生体情報取得工程と、前記生体情報取得工程によって取得された前記認証対象者の生体情報と、前記記憶部に記憶された登録生体情報とを照合して本人認証を行う第１の本人認証工程と、前記第１の本人認証工程にて前記認証対象者が本人であると認証されない場合に、前記認証対象者の所定の追加認証情報を取得する追加認証情報取得工程と、前記生体情報、前記追加認証情報、前記記憶部に記憶された前記登録生体情報及び前記登録認証情報に基づいて、前記認証対象者の本人認証を行う第２の本人認証工程とを含むことを特徴とする。

【発明の効果】

【0015】

本発明によれば、本人認証を効率良く行うことができる。

【図面の簡単な説明】

【0016】

【図1】図１は、実施形態１に係る本人認証システムの概要を示す図である。

【図2】図２は、実施形態１に係る本人認証システムのシステム構成を示す図である。

【図3】図３は、図２に示した本人認証装置の構成を示す機能ブロック図である。

【図4】図４は、図２に示した本人認証装置のユーザ登録データのデータ構造の一例を示す図である。

【図5】図５は、図２に示した端末装置の構成を示す機能ブロック図である。

【図6】図６は、図２に示した本人認証システムの処理手順を示すシーケンス図である。

【図7】図７は、図２に示した本人認証システムの本人認証処理１の処理手順を示すフローチャートである。

【図8】図８は、図２に示した本人認証システムの本人認証処理２の処理手順を示すフローチャートである。

【図9】図９は、図２に示した本人認証システムを決済システムに応用した場合の端末装置に表示される決済金額確認の画面イメージの一例を示す図である。

【図10】図１０は、図２に示した本人認証システムを決済システムに応用した場合の端末装置の顔画像撮像時の画面イメージの一例を示す図である。

【図11】図１１は、図２に示した本人認証システムを決済システムに応用した場合の端末装置の通信処理中の画面イメージの一例を示す図である。

【図12】図１２は、図２に示した本人認証システムを決済システムに応用した場合の端末装置のパスワード入力時の画面イメージの一例を示す図である。

【図13】図１３は、図２に示した本人認証システムを決済システムに応用した場合の端末装置のクレジットカード決済完了時の画面イメージの一例を示す図である。

【図14】図１４は、実施形態２に係る本人認証システムの概要を示す図である。

【図15】図１５は、顔画像認証の認証スコアと出現頻度の関係を示す図である。

【図16】図１６は、実施形態３に係る本人認証システムの概要を示す図である。

【発明を実施するための形態】

【0017】

以下に、本発明に係る本人認証システム及び本人認証方法の実施形態を図面に基づいて詳細に説明する。

【0018】

［実施形態１］
＜実施形態１に係る本人認証システムの概要＞
本実施形態１に係る本人認証システムの概要について説明する。図１は、実施形態１に係る本人認証システムの概要を説明するための説明図である。ここでは、本人認証装置１０において認証対象者の本人認証を行う場合について説明する。

【0019】

従来、顔画像を用いて本人認証を行う場合に、あらかじめ複数のユーザの登録顔画像を含むユーザ登録データを本人認証装置１０に記憶しておき、本人認証装置１０が認証対象者の顔画像を取得したならば、この認証対象者の顔画像を複数の登録顔画像と順次照合処理する。この照合処理には、例えば相互相関係数などの周知技術が用いられる。そして、認証対象者の顔画像と、いずれかの登録顔画像との照合率が所定値以上であるならば、認証対象者が登録顔画像に対応するユーザ本人であると認証することになる。

【0020】

しかしながら、本人認証装置１０に登録されたユーザ登録データ数が多くなればなるほど、処理時間を要する結果となるため、照合対象となるユーザ登録データを制限することが望まれる。このため、本人認証装置１０は、所定の期間（例えば、１年）利用されないユーザ登録データを有効期限切れとして照合対象から除外する。所定の期間利用されない顔画像は、経年変化によって誤認識する可能性があるためである。

【0021】

ところが、所定の期間（例えば１年）を経過した有効期限切れの顔画像を一律に除外したのでは、認証対象者のユーザ登録データが期限切れである場合に、本人認証されない結果となる。その結果、認証対象者は、あらためて顔画像を再登録しなければならず、効率的ではない。

【0022】

このため、本実施形態１に係る本人認証システムでは、あらかじめユーザの登録顔画像と追加認証データ（例えば、パスワード）を含むユーザ登録データを本人認証装置１０に記憶しておき、認証対象者が本人認証されない場合に、本人認証装置１０が端末装置２０に対して追加認証データ（例えば、パスワード）を要求する。そして、端末装置２０から追加認証データを受信したならば、この追加認証データを持つユーザ登録データを特定し、特定されたユーザ登録データ内の登録顔画像を照合対象とする。これにより、認証対象者のユーザ登録データが期限切れであったとしても、追加認証データにより登録顔画像が照合対象とされるため、認証対象者の本人認証を行うことが可能となる。

【0023】

具体的には、図１に示すように、端末装置２０は、認証対象者の顔画像を撮像し（Ｓ１）、認証対象者の顔画像を含む認証依頼を本人認証装置１０に送信する（Ｓ２）。本人認証装置１０は、あらかじめ記憶部に記憶した複数のユーザ登録データの中から、有効期限内のユーザ登録データを特定し、特定したユーザ登録データ内の登録顔画像を抽出する。その後、本人認証装置１０は、抽出した登録顔画像と認証対象者の顔画像との照合処理を行う（Ｓ３）。

【0024】

具体的には、本人認証装置１０に登録されたユーザ登録データには、ユーザＩＤ、登録顔画像、最終利用日、有効期限フラグ及び追加認証データ（パスワード）が対応付けられている。この有効期限フラグ「１」は有効期限内であることを示し、有効期限フラグ「０」は有効期限切れであることを示している。このため、本人認証装置１０は、有効期限内のユーザ登録データを特定する場合には、有効期限フラグを参照すればよい。

【0025】

このようにして、本人認証装置１０は、登録顔画像と認証対象者の顔画像との照合処理を行い、抽出した複数の登録顔画像と認証対象者の顔画像との照合率（例えば、相互相関係数）がそれぞれ所定の閾値以下である場合には、本人認証が失敗であると判定される（Ｓ４）。

【0026】

本人認証装置１０は、本人認証が失敗した場合に、端末装置２０に対して認証対象者の追加認証データを要求する（Ｓ５）。端末装置２０は、追加認証データの要求を受け付けたならば、認証対象者に対して追加認証データの入力を促し、追加認証データを取得し（Ｓ６）、取得した追加認証データを本人認証装置１０に送信する（Ｓ７）。ここでは、追加認証データが、パスワード「２３７８」である状況を示している。

【0027】

本人認証装置１０は、追加認証データを受信したならば、記憶部に記憶したユーザ登録データのうち、有効期限フラグが「０」であり、かつ、ユーザ登録データのパスワードが「２３７８」であるユーザ登録データを抽出し、このユーザ登録データに含まれる登録顔画像と認証対象者の顔画像とを照合処理する（Ｓ８）。図１に示したユーザＩＤ「１３０」及びユーザ「１５０」は、ユーザ登録データの有効期限フラグが「０」であり、かつ、追加認証データが「２３７８」である状況を示している。本人認証装置１０は、２つの登録顔画像と認証対象者の顔画像とを照合処理し、照合率が所定値以上であるならば、認証対象者がユーザ登録データのユーザであると判定して本人認証成功とする（Ｓ９）。

【0028】

＜本人認証システムのシステム構成＞
次に、本実施形態に係る本人認証システムのシステム構成について説明する。図２は、図１に示した本人認証システムのシステム構成を示す図である。図２に示すように、この本人認証システムは、本人認証装置１０と、複数の端末装置２０ａ、２０ｂ、２０ｃ、２０ｄ（以下、「端末装置２０」と総称する場合がある）と、アクセスポイント３０と、基地局Ｒとを有する。本人認証装置１０は、ネットワークＮに接続され、端末装置２０ａ及び２０ｂは、無線通信の基地局Ｒを介してネットワークＮに接続される。また、端末装置２０ｃ及び２０ｄは、近距離無線通信のアクセスポイント３０を介してネットワークＮに接続される。

【0029】

本人認証装置１０は、記憶部に記憶されたユーザ登録データ１４ａのうち、最終利用日から所定の期間を経過したユーザ登録データ１４ａの有効期限フラグを「０」にして認証対象外とする処理と、認証対象者の追加認証データを用いて本人の追加認証処理等を行う。なお、本人認証装置１０についての詳細な説明は後述する。

【0030】

端末装置２０は、端末装置２０のカメラ２２を用いて、認証対象者の顔画像を取得する処理と、追加認証データを取得する処理と、認証結果を表示する処理とを行う。アクセスポイント３０は、無線ＬＡＮ（Local Area Network）等による近距離無線通信などを行う。なお、端末装置２０についての詳細な説明は後述する。

【0031】

＜本人認証装置１０の構成＞
次に、図２に示した本人認証装置１０の構成について説明する。図３は、図２に示した本人認証装置１０の構成を示す機能ブロック図である。図３に示すように、本人認証装置１０は、表示部１１と、操作部１２と、通信Ｉ／Ｆ部１３と、記憶部１４と、制御部１５とを有する。

【0032】

表示部１１は、液晶パネル又はディスプレイ装置などの表示デバイスであり、操作部１２は、キーボードやマウスなどの入力デバイスである。通信Ｉ／Ｆ部１３は、端末装置２０などの他の装置と通信を行うためのインターフェース部である。

【0033】

記憶部１４は、不揮発性メモリ又はハードディスク装置などの記憶デバイスであり、ユーザ登録データ１４ａを記憶する。なお、ユーザ登録データ１４ａは、ユーザの氏名、生年月日、住所、パスワード、登録顔画像、登録顔画像の最終利用日、有効期限フラグ及びユーザ識別情報を含む。なお、端末識別情報をユーザ識別情報とすることもできる。有効期限は、ユーザ登録データ１４ａの最終利用日から所定の期間（例えば、１年）を経過したか否かの状態を示すフラグであり、有効期限フラグ「１」は有効期限内であることを示し、有効期限フラグ「０」は有効期限切れであることを示す。

【0034】

制御部１５は、本人認証装置１０の全体を制御する制御部であり、有効期限処理部１５ａ、顔画像処理部１５ｂ、本人認証処理部１５ｃ、追加認証データ処理部１５ｄ、本人追加認証処理部１５ｅ及び認証結果通知部１５ｆを有する。実際には、これらプログラムをＣＰＵにロードして実行することにより、有効期限処理部１５ａ、顔画像処理部１５ｂ、本人認証処理部１５ｃ、追加認証データ処理部１５ｄ、本人追加認証処理部１５ｅ及び認証結果通知部１５ｆにそれぞれ対応するプロセスを実行させることになる。

【0035】

有効期限処理部１５ａは、記憶部１４に記憶したユーザ登録データ１４ａのうち、最終利用日から所定の期間（例えば、１年）を経過したユーザ登録データ１４ａの有効期限フラグを「０」とする処理部である。また、最終利用日から所定の期間内のユーザ登録データ１４ａの有効期限フラグは「１」となる。なお、有効期限処理部１５ａによる処理は、毎日所定の時刻（例えば、０時）に行う。

【0036】

顔画像処理部１５ｂは、端末装置２０で取得された認証対象者の顔画像を受信し、認証対象者の顔画像から顔画像部分を切り出す処理、顔画像からノイズを除去する処理などを行う。

【0037】

本人認証処理部１５ｃは、認証対象者の顔画像と、有効期限フラグ「１」のユーザ登録データ１４ａの登録顔画像との照合処理を行う。具体的には、例えば認証対象者の顔画像と登録顔画像との間の相互相関係数（周知技術）を照合値として求め、この照合値が所定値（例えば、０．９）以上である場合に本人認証成功であると判定し、照合値が所定値未満である場合に本人認証失敗であると判定する。また、深層学習により教師有り学習を行った学習済モデルに認証対象者の顔画像及び登録顔画像を入力して認証スコアを求め、この認証スコアが所定の閾値（例えば０．９）以上であれば本人認証成功と判定し、閾値未満である場合に本人認証失敗と判定することもできる。なお、ランダムフォレスト等の他の機械学習を用いることもできる。なお、本人認証処理部１５ｃは、本人認証成功である場合には、ユーザ登録データ１４ａの最終利用日を更新するとともに、有効期限フラグを「１」とする。

【0038】

追加認証データ処理部１５ｄは、本人認証処理部１５ｃで認証結果が「本人認証失敗」である場合には、端末装置２０に対して追加認証データを要求する。追加認証データは、パスワード、ユーザ識別情報及び端末識別情報等とすることができる。

【0039】

本人追加認証処理部１５ｅは、ユーザ登録データ１４ａのうち、有効期限フラグが「０」であり、かつ、端末装置２０から受信した追加認証データを持つユーザ登録データ１４ａを特定し、特定したユーザ登録データ１４ａに含まれる登録顔画像と、認証対象者の顔画像とを照合処理する。なお、本人追加認証処理部１５ｅは、本人認証成功である場合には、ユーザ登録データ１４ａの最終利用日を更新するとともに、有効期限フラグを「１」とする。認証結果通知部１５ｆは、認証結果を端末装置２０に通知する処理部である。

【0040】

次に、ユーザ登録データ１４ａの一例について説明する。図４は、図３に示したユーザ登録データ１４ａの一例を示す図である。図４に示すように、ユーザ登録データ１４ａは、ユーザＩＤ（ユーザ識別情報）、端末識別情報、氏名、生年月日、住所、パスワード、登録顔画像、最終利用日及び有効期限フラグ等が対応付けられている。ここでは、ユーザＩＤ「１００」に対して、端末識別番号「２４５６ｘｘｘｘ」、氏名「田中 ×男」、生年月日「１９９６年４月ｘｘ日」、住所「東京都ａａ区・・・」、パスワード「３０１１」、登録顔画像、最終利用日「２０２１年４月２６日」及び有効期限フラグ「１」が対応付けられている状況を示している。

【0041】

また、ユーザＩＤ「１１０」に対して、端末識別番号「５７８５ｙｙｙｙ」、氏名「佐藤 □子」、生年月日「２０００年９月ｙｙ日」、住所「千葉県ｂｂ市・・・」、パスワード「７０２９」、登録顔画像、最終利用日「２０２１年４月２２日」及び有効期限フラグ「１」が対応付けられている。また、ユーザＩＤ「１２０」に対して、端末識別番号「８４６５ｖｖｖｖ」、氏名「小川 △介」、生年月日「１９６３年５月ｎｎ日」、住所「神奈川県ｅｅ市・・・」、パスワード「４５９５」、登録顔画像、最終利用日「２０２１年４月２７日」及び有効期限フラグ「１」が対応付けられている。また、ユーザＩＤ「１３０」に対して、端末識別番号「６７２０ｃｃｃｃ」、氏名「高橋 ×幸」、生年月日「１９９８年２月ｃｃ日」、住所「埼玉県ｍｍ市・・・」、パスワード「２３７８」、登録顔画像、最終利用日「２０１９年４月１４日」及び有効期限フラグ「０」が対応付けられている。

【0042】

また、ユーザＩＤ「１４０」に対して、端末識別番号「３７６９ｚｚｚｚ」、氏名「山田 △子」、生年月日「１９９７年１月ｄｄ日」、住所「群馬県ｇｇ市・・・」、パスワード「１５７７」、登録顔画像、最終利用日「２０１８年８月９日」及び有効期限フラグ「０」が対応付けられている。また、ユーザＩＤ「１５０」に対して、端末識別番号「１９２７ｆｆｆｆ」、氏名「佐藤 ○也」、生年月日「１９９３年７月ｑｑ日」、住所「茨城県ｈｈ市・・・」、パスワード「２３７８」、登録顔画像、最終利用日「２０１９年９月１日」及び有効期限フラグ「０」が対応付けられている。

【0043】

＜端末装置２０の構成＞
次に、図２に示した端末装置２０の構成について説明する。図５は、図２に示した端末装置２０の構成を示す機能ブロック図である。この端末装置２０は、ウェブブラウザを搭載したスマートフォンなどの端末である。

【0044】

図５に示すように、端末装置２０は、操作表示部２１、カメラ２２、通信Ｉ／Ｆ部２３、記憶部２４及び制御部２５を有する。ここでは、本実施形態１の特徴部に関連する機能部を図示することとし、一般的なスマートフォンが有する他の各種機能部についての説明を省略する。

【0045】

操作表示部２１は、タッチパネル式液晶ディスプレイ等の入出力デバイスである。カメラ２２は、ＣＣＤ（Charge Coupled Device）などの素子からなる撮像デバイスである。通信Ｉ／Ｆ部２３は、移動通信規格である第３世代移動通信方式、第４世代移動通信方式又は第５世代移動通信方式等による無線通信、無線ＬＡＮ（Local Area Network）等による近距離無線通信などを行うインターフェース部である。

【0046】

記憶部２４は、ハードディスク装置や不揮発性メモリ等の記憶デバイスであり、顔画像データ２４ａを記憶する。

【0047】

制御部２５は、端末装置２０の全体を制御する制御部であり、撮像制御部２５ａ、追加認証データ処理部２５ｂ及び認証結果処理部２５ｃを有する。実際には、これらプログラムをＣＰＵにロードして実行することにより、撮像制御部２５ａ、追加認証データ処理部２５ｂ及び認証結果処理部２５ｃにそれぞれ対応するプロセスを実行させることになる。

【0048】

撮像制御部２５ａは、本人の顔画像を取得するためカメラ２２に撮像指示を行い、撮像した顔画像を顔画像データ２４ａとして記憶部２４に記憶する。具体的には、撮像制御部２５ａは、本人の顔画像撮像のため、操作表示部２１に撮像のためのガイド線を生成し、顔を該ガイド線に合わせるように促す。認証対象者が顔をガイド線に合わせ、撮像ボタンを押したならば、カメラ２２からの画像を取得し、取得した顔画像と撮影に必要な設定データを顔画像データ２４ａとして記憶部２４に記憶する。そして撮像制御部２５ａは、本人認証装置１０に該顔画像を含む認証依頼を行う。

【0049】

追加認証データ処理部２５ｂは、本人認証装置１０から追加認証データの要求を受け付け、操作表示部２１に追加認証データの入力を促す表示を行い、認証対象者が追加認証データを入力したならば、該追加認証データを本人認証装置１０に送信する。

【0050】

認証結果処理部２５ｃは、本人認証装置１０で判定した認証結果を受信し、該認証結果を操作表示部２１に表示する。なお、認証結果の表示は、認証結果が本人であるとの判定の場合は、例えば「本人認証成功」を表示し、認証結果が本人ではないとの判定の場合は、「本人認証失敗」を表示する。なお、認証結果が本人ではないとの判定の場合は、何も表示しなくともよい。

【0051】

＜本人認証システムの処理手順＞
次に、図２に示した本人認証システムの処理手順について説明する。図６は、本人認証システムの処理手順を示すシーケンス図である。

【0052】

図６に示すように、端末装置２０は、認証対象者の顔画像取得のため、操作表示部２１に撮像のためのガイド線を生成し、表示する（図示せず）。そして、端末装置２０は、認証対象者が顔をガイド線に合わせ、撮像ボタンを押したならば、カメラ２２に撮像指示を出し、顔画像を取得する（ステップＳ１０１）。次に端末装置２０は、本人認証装置１０に対し、取得した認証対象者の顔画像を含む認証依頼を行う（ステップＳ１０２）。

【0053】

本人認証装置１０は、端末装置２０から顔画像が送信されてくるのを待機する（ステップＳ１０３；Ｎｏ）。そして、本人認証装置１０は、端末装置２０から顔画像を受信したならば（ステップＳ１０３；Ｙｅｓ）、本人認証処理１を行う（ステップＳ１０４）。本人認証処理１については、後述する。次に本人認証装置１０は、本人認証処理１の処理結果に基づき、本人認証が成功した場合には（ステップＳ１０５；Ｙｅｓ）、認証結果を端末装置２０に送信し（ステップＳ１１１）、処理を終了する。

【0054】

また、本人認証装置１０は、本人認証処理１の処理結果に基づき、本人認証が失敗した場合には（ステップＳ１０５；Ｎｏ）、端末装置２０に追加認証データを要求する（ステップＳ１０６）。端末装置２０は、本人認証装置１０から追加認証データの要求を受け付けたならば、認証対象者に追加認証データの入力を促す。端末装置２０は、認証対象者が追加認証データを入力したならば、該追加認証データを取得し（ステップＳ１０７）、本人認証装置１０に送信する（ステップＳ１０８）。

【0055】

本人認証装置１０は、端末装置２０から追加認証データが送信されてくるのを待機する（ステップＳ１０９；Ｎｏ）。そして、本人認証装置１０は、端末装置２０から追加認証データを受信したならば（ステップＳ１０９；Ｙｅｓ）、本人認証処理２を行う（ステップＳ１１０）。本人認証処理２については、後述する。次に本人認証装置１０は、認証結果を端末装置２０に送信し（ステップＳ１１１）、処理を終了する。

【0056】

端末装置２０は、本人認証装置１０から認証結果が送信されてくるのを待機する（ステップＳ１１２；Ｎｏ）。そして、端末装置２０は、認証結果を受信したならば（ステップＳ１１２；Ｙｅｓ）、認証結果を操作表示部２１に表示し（ステップＳ１１３）、処理を終了する。

【0057】

＜本人認証処理１の処理手順＞
次に、本人認証装置１０の本人認証処理１（図６のステップＳ１０４）の処理手順について説明する。図７は、本人認証装置１０の本人認証処理１の処理手順を示すフローチャートである。図７に示すように、本人認証装置１０は、端末装置２０から顔画像を受信したならば、受信した顔画像と複数の登録顔画像とを順次照合処理するために、１つのユーザ登録データ１４ａを特定する（ステップＳ２０１）。

【0058】

本人認証装置１０は、特定したユーザ登録データ１４ａが有効期限内か否かを、有効期限フラグを参照し判定する。本人認証装置１０は、有効期限フラグが「０」の場合には、次のユーザ登録データ１４ａを特定し（ステップＳ２０２；Ｎｏ）、有効期限フラグが「１」の場合には（ステップＳ２０２；Ｙｅｓ）、特定したユーザ登録データ１４ａ内の登録顔画像と受信した顔画像データとの照合処理を行う（ステップＳ２０３）。

【0059】

なお、本人認証装置１０の顔画像の照合処理は、例えば認証対象者の顔画像と登録顔画像との間の相互相関係数（周知技術）を照合値として求め、この照合値が所定値（例えば、０．９）以上である場合に本人認証成功であると判定し、照合値が所定値未満である場合に本人認証失敗であると判定する。また、深層学習により教師有り学習を行った学習済モデルに認証対象者の顔画像及び登録顔画像を入力して認証スコアを求め、この認証スコアが所定の閾値（例えば０．９）以上であれば本人認証成功と判定し、閾値未満である場合に本人認証失敗と判定することもできる。なお、ランダムフォレスト等の他の機械学習を用いることもできる。

【0060】

次に、本人認証装置１０は、本人認証が成功したならば（ステップＳ２０４；Ｙｅｓ）、認証結果を「本人認証成功」と判定し、ユーザ登録データ１４ａの最終利用日を更新するとともに、有効期限フラグを「１」として（ステップＳ２０５）、図６のステップＳ１０５に戻る。また、本人認証装置１０は、本人認証が失敗と判定したならば（ステップＳ２０４；Ｎｏ）、特定したユーザ登録データ１４ａが、ユーザ登録データ１４ａの最後のデータでない場合は（ステップＳ２０６；Ｎｏ）、ステップＳ２０１に戻る。また、特定したユーザ登録データ１４ａが、ユーザ登録データ１４ａの最後のデータである場合は（ステップＳ２０６；Ｙｅｓ）、認証結果を「本人認証失敗」と判定し（ステップＳ２０７）、図６のステップＳ１０５に戻る。

【0061】

＜本人認証処理２の処理手順＞
次に、本人認証装置１０の本人認証処理２（図６のステップＳ１１０）の処理手順について説明する。図８は、本人認証装置１０の本人認証処理２の処理手順を示すフローチャートである。図８に示すように、本人認証装置１０は、端末装置２０から追加認証データを受信したならば、ユーザ登録データ１４ａのうち、追加認証データを持ち、かつ、有効期限フラグが「０」であるユーザ登録データ１４ａを特定する（ステップＳ３０１）。次に、本人認証装置１０は、特定した複数のユーザ登録データ１４ａから登録顔画像を１つ選択する（ステップＳ３０２）。

【0062】

そして、本人認証装置１０は、受信した顔画像データと選択した登録顔画像との照合処理を行う（ステップＳ３０３）。なお、本人認証装置１０の顔画像の照合処理は、本人認証処理１の照合処理（ステップＳ２０３）と同じでよい。

【0063】

次に、本人認証装置１０は、本人認証が成功したならば（ステップＳ３０４；Ｙｅｓ）、認証結果を「本人認証成功」と判定し、ユーザ登録データ１４ａの最終利用日を更新するとともに、有効期限フラグを「１」として（ステップＳ３０５）、図６のステップＳ１１１に戻る。また、本人認証装置１０は、本人認証が失敗と判定したならば（ステップＳ３０４；Ｎｏ）、選択した登録顔画像が、選択したユーザ登録データ１４ａの最後のデータでない場合は（ステップＳ３０６；Ｎｏ）、ステップＳ３０２に戻る。また、選択した登録顔画像が、特定したユーザ登録データ１４ａの最後のデータである場合は（ステップＳ３０６；Ｙｅｓ）、認証結果を「本人認証失敗」と判定し（ステップＳ３０７）、図６のステップＳ１１１に戻る。

【0064】

次に、本実施形態１に係る本人認証システムを決済システムの応用した場合の端末装置２０の決済金額確認時の画面イメージの一例について説明する。図９は、図２に示した端末装置２０の決済金額確認時の画面イメージの一例を示す図である。図９に示すように、決済金額確認時は、決済する金額を表示し、認証対象者の確認の入力を促す状態を示している。

【0065】

次に、端末装置２０の顔画像撮像時の画面イメージの一例について説明する。図１０は、図２に示した端末装置２０の顔画像撮像時の画面イメージの一例を示す図である。図１０に示すように、顔画像撮像時は、顔をどのような位置で撮像するかのガイド線を操作表示部２１に表示している状態を示している。

【0066】

次に、端末装置２０の通信処理中の画面イメージの一例を説明する。図１１は、図２に示した端末装置２０の通信処理中の画面イメージの一例を示す図である。図１１に示すように、端末装置２０は、本人認証装置１０と通信処理中には、操作表示部２１に通信処理中であることが分かる表示をしている状態を示している。

【0067】

次に、端末装置２０の追加認証データの入力要求時の画面イメージの一例を説明する。図１２は、図２に示した端末装置２０の追加認証データの入力要求時の画面イメージの一例を示す図である。図１２に示すように、この例では追加認証データとして数字４ケタのパスワードの入力を促している状況を示している。

【0068】

次に、端末装置２０の決済完了時の画面イメージの一例を説明する。図１３は、図２に示した端末装置２０の決済完了時の画面イメージの一例を示す図である。図１３に示すように、ここではクレジットカード決済が完了し、支払金額として＊＊＊＊円で決済された状況を示している。

【0069】

なお、上記実施形態では、本人認証システムは、顔画像を利用して認証を行う構成について説明したが、本発明はこれに限定されるものではなく、本人の指紋又は掌紋を利用して認証を行ってもよい。また、追加認証データは、パスワードを利用する構成について説明したが、追加認証データは、例えば利用者識別情報、又は端末識別情報であってもよい。

【0070】

このように、実施形態１に係る本人認証システム及び本人認証方法では、顔画像を利用して本人認証を行う場合は、ユーザ登録データ１４ａに記憶した登録顔画像のうち、所定の期間（例えば１年）を越えた有効期限切れの顔画像を排除し、有効期限内の登録顔画像を特定し、端末装置２０から送信された顔画像と照合処理を行う。そして、本人認証装置１０で本人認証が出来なかった場合は、本人認証装置１０は、端末装置２０に対して追加認証データを要求し、端末装置２０から送信された追加認証データ（例えば、パスワード）を用いて、本人認証装置１０に記憶したユーザ登録データのうち、顔画像が有効期限切れであり、かつ、ユーザ登録データのパスワードが受信した追加認証データのパスワードと同じデータを特定し、端末装置２０から送信された顔画像と照合処理を行うように構成したので、本人認証を効率良く行うことができる。

【0071】

［実施形態２］
ところで、上記の実施形態１では、顔画像については、マスクを着用していない状況で認証を行う場合を示したが、認証対象者がマスクを着用した場合には、認証の精度が低下してしまう状況が生じる。そこで、本実施形態２では、マスクを着用している場合に、認証スコアに応じて追加認証を行う場合について説明する。

【0072】

＜実施形態２に係る本人認証システムの概要＞
本実施形態２では、端末装置２０が、認証対象者のマスクなしの状態で顔画像を撮像し、本人認証装置１０に顔画像を含む認証依頼を行った場合の本人認証の照合条件と、端末装置２０が、認証対象者のマスクを着用した顔画像を撮像し、本人認証装置１０に顔画像を含む認証依頼を行った場合の本人照合条件を自動的に切り替えて効率良く認証を行う本人認証システムについて説明する。

【0073】

図１４は、実施形態２に係る本人認証システムの概要を説明する説明図である。図１４に示すように、端末装置２０は、認証対象者がマスクなしの状態で顔画像を撮像し、本人認証装置１０に顔画像を含む認証依頼を行う（Ｓ１０）。本人認証装置１０では、端末装置２０から送信された顔画像を受信し、受信した顔画像がマスク着用の顔画像か否かを判定し、マスクなしの照合処理は、マスクなしの場合の認証スコアに基づいて行う（Ｓ１１）。

【0074】

本人認証装置１０の認証対象者がマスクなしの場合の認証判定は、認証スコアが通常（マスクなし）の閾値以上であり、かつ、閾値以上の候補が一人の場合は、本人認証成功と判定する。また、認証スコアが通常（マスクなし）の閾値以上であり、かつ、閾値以上の候補が二人以上存在する場合は、追加認証が必要と判定する。また、認証スコアが通常（マスクなし）の閾値より小さい場合は、本人認証失敗と判定する。

【0075】

また、端末装置２０は、認証対象者がマスクを着用した状態で顔画像を撮像し、顔画像を含む認証依頼を行った場合は（Ｓ１２）、本人認証装置１０は、認証対象者がマスクを着用の顔画像か否かを判定し、マスクを着用していたならば、マスク着用の認証スコアに基づいて照合を行う（Ｓ１３）。

【0076】

本人認証装置１０の認証対象者がマスクを着用する場合の認証判定は、認証スコアが通常（マスクなし）の閾値以上であり、かつ、閾値以上の候補が一人の場合は、本人認証成功と判定する。また、認証スコアが通常（マスクなし）の閾値以上であり、かつ、閾値以上の候補が二人以上存在する場合は、追加認証が必要と判定する。

【0077】

また、本人認証装置１０の認証対象者がマスクを着用する場合の認証判定は、認証スコアが通常（マスクなし）の閾値より小さく、マスク用閾値以上である場合は、追加認証が必要と判定する。また、認証スコアがマスク用閾値より小さい場合は、本人認証失敗と判定する。

【0078】

次に、実施形態２に係る本人認証システムのマスクなしの場合及びマスク着用の場合の顔画像の認証スコアと出現頻度の関係について説明する。図１５は、本人認証装置１０の顔画像認証の認証スコアと出現頻度の関係を表わした図である。図に示すように、マスクなしの認証スコアの分布とマスクなしの他人と認証される認証スコアの分布は、マスクなしの認証スコアの閾値Ｓ_thで分けることができる。

【0079】

すなわち、マスクなしの顔画像の認証は、認証スコアが閾値Ｓ_th以上であれば本人と認証することができる。一方、マスク着用の本人認証スコアの分布は、マスクなしの本人認証スコアよりも認証スコアが低くなるため、他人と認証される認証スコアの分布と重なる部分が存在する。したがって、マスク着用の顔認証は、マスク着用の本人認証スコア分布の下限の閾値をＳ_thmとすると、認証スコアがマスクなしの閾値Ｓ_th以上の場合には、本人認証成功と判定し、認証スコアが閾値Ｓ_thより小さく、閾値Ｓ_thmより大きい場合には、追加認証が必要と判定し、閾値Ｓ_thmより小さい場合には、本人認証失敗と判定する。

【0080】

このように、実施形態２に係る本人認証システム及び本人認証方法では、認証対象者から送信される顔画像のマスク着用の有無を自動で判定し、マスク着用の有無によって本人認証の判定条件を変更するように構成したので、本人認証を効率良く行うことができる。

【0081】

［実施形態３］
ところで、上記の実施形態２では、マスク着用の場合に追加認証を要求される頻度が上がる状況が生じる。そこで、本実施形態３では、認証対象者が利用する端末装置２０の種類及び認証対象者の位置情報に基づいて撮像時にマスクを外す等の撮像指示を出す場合を説明する。

【0082】

＜実施形態３に係る本人認証システムの概要＞
本実施形態３では、端末装置２０が認証対象者の顔画像を撮像し、本人認証装置１０に顔画像を含む認証依頼を行った場合に、本人認証装置１０は、受信した顔画像からマスク着用の有無を判定する。そして、本人認証装置１０は、認証対象者がマスク着用の場合には、認証対象者が使用する端末装置２０の種類及び認証対象者の位置情報（自宅か否か）に基づいて、認証対象者の顔画像撮像時に撮像指示を送信し効率良く認証を行う本人認証システムについて説明する。

【0083】

図１６は、実施形態３に係る本人認証システムの概要を説明する説明図である。図１６に示すように、本人認証装置１０は、認証対象者がマスク着用の場合に、認証対象者が使用する端末装置２０が、個人所有の個人端末装置なのか、店舗端末装置なのかの情報を取得する。そして、認証対象者が使用する端末装置２０が個人端末装置であるならば、その個人端末装置の位置情報を取得する。なお、認証対象者が使用する端末装置２０の種類は、例えば、認証対象者に端末の種類を入力してもらうことで取得する。また、位置情報は、端末装置が装備するＧＰＳ（Global Positioning System）の位置情報から取得してもよい。

【0084】

認証対象者が使用する個人端末装置が自宅にある場合、本人認証装置１０は、認証対象者の顔画像を撮像する場合に、マスクを外すように指示を出す。なお、本人認証装置１０は、個人端末装置に対して認証対象者がマスクを外すまで撮像ボタンを押せないように制御してもよい。また、認証対象者が使用する個人端末装置が、自宅以外にある場合は、本人認証装置１０は、認証対象者の顔画像を撮像する場合に、マスクなしの場合と同じでなにも制御しない。

【0085】

また、本人認証装置１０は、端末装置２０が個人端末装置である場合に、認証対象者がその端末を所持することを認証する所持認証を行うことにより、他人と認証することが防げるため、マスク着用での認証処理を許可することもできる。認証対象者が使用する端末装置２０が店舗端末装置であるならば、認証対象者の顔画像を撮像する場合、認証精度を上げるためマスクをずらすように指示を出す。なお、この場合、本人認証装置１０は、店舗端末装置に対して認証対象者がマスクをずらして、例えば鼻が検出するまで、撮影ボタンを押せないように制御してもよい。

【0086】

このように、実施形態３に係る本人認証システム及び本人認証方法では、認証対象者から送信される顔画像のマスク着用の有無を自動で判定し、認証対象者がマスクを着用していたならば、認証対象者が使用する端末の種類及び位置情報に基づいて撮像時にマスクを外す、又は、マスクをずらす等の撮像指示を出すように構成したので、本人認証を効率良く行うことができる。

【0087】

上記の各実施形態で図示した各構成は機能概略的なものであり、必ずしも物理的に図示の構成をされていることを要しない。すなわち、各装置の分散・統合の形態は図示のものに限られず、その全部又は一部を各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。

【産業上の利用可能性】

【0088】

本発明に係る本人認証システム及び本人認証方法は、本人認証を効率良く行う場合に適している。

【符号の説明】

【0089】

Ｎ ネットワーク
Ｒ 基地局
１０ 本人認証装置
１１ 表示部
１２ 操作部
１３ 通信Ｉ／Ｆ部
１４ 記憶部
１４ａ ユーザ登録データ
１５ 制御部
１５ａ 有効期限処理部
１５ｂ 顔画像処理部
１５ｃ 本人認証処理部
１５ｄ 追加認証データ処理部
１５ｅ 本人追加認証処理部
１５ｆ 認証結果通知部
２０、２０ａ、２０ｂ、２０ｃ、２０ｄ 端末装置
２１ 操作表示部
２２ カメラ
２３ 通信Ｉ／Ｆ部
２４ 記憶部
２４ａ 顔画像データ
２５ 制御部
２５ａ 撮像制御部
２５ｂ 追加認証データ処理部
２５ｃ 認証結果処理部
３０ アクセスポイント

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】