知財求人 - 知財ポータルサイト「IP Force」
特開2024-130349なりすまし検知システムおよびなりすまし検知プログラム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024130349
(43)【公開日】2024-09-30
(54)【発明の名称】なりすまし検知システムおよびなりすまし検知プログラム
(51)【国際特許分類】
G06V 40/40 20220101AFI20240920BHJP
G06V 40/16 20220101ALI20240920BHJP
G06T 7/00 20170101ALI20240920BHJP
G06T 7/60 20170101ALI20240920BHJP
【ＦＩ】
G06V40/40
G06V40/16 A
G06T7/00 510F
G06T7/00 660A
G06T7/60 150Z
【審査請求】有
【請求項の数】8
【出願形態】ＯＬ
(21)【出願番号】P 2023040020
(22)【出願日】2023-03-14
(11)【特許番号】
(45)【特許公報発行日】2024-03-29
(71)【出願人】
【識別番号】520128576
【氏名又は名称】有限会社バラエティーエム・ワン
(74)【代理人】
【識別番号】100123984
【弁理士】
【氏名又は名称】須藤 晃伸
(74)【代理人】
【識別番号】100102314
【弁理士】
【氏名又は名称】須藤 阿佐子
(74)【代理人】
【識別番号】100159178
【弁理士】
【氏名又は名称】榛葉 貴宏
(72)【発明者】
【氏名】三嶽 敏朗
【テーマコード（参考）】
5B043
5L096
【Ｆターム（参考）】
5B043AA10
5B043BA04
5B043EA02
5B043EA05
5B043EA06
5L096BA08
5L096CA04
5L096FA64
5L096FA69
5L096FA70
5L096GA51
5L096JA03
(57)【要約】 （修正有）
【課題】写真などの平面物を用いた人物のなりすましを高い精度で検知するなりすまし検知システムおよびなりすまし検知プログラムを提供する。
【解決手段】なりすまし検知システムにおいて、情報処理装置１０は、認証対象者を異なるアングルで複数フレーム撮像する撮像手段（カメラ１１）と、撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段および異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段としての演算部１４と、ディスプレイ１２と、記憶部１３と、を有する。
【選択図】図１
【解決手段】なりすまし検知システムにおいて、情報処理装置１０は、認証対象者を異なるアングルで複数フレーム撮像する撮像手段（カメラ１１）と、撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段および異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段としての演算部１４と、ディスプレイ１２と、記憶部１３と、を有する。
【選択図】図１
【特許請求の範囲】
【請求項1】
認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、
認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、
前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有する、なりすまし検知システム。
認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、
前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有する、なりすまし検知システム。
【請求項2】
前記なりすまし検知手段は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知する請求項１に記載のなりすまし検知システム。
【請求項3】
前記なりすまし検知手段は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する、請求項２に記載のなりすまし検知システム。
【請求項4】
前記なりすまし検知手段は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記平面類似度および複数の前記立体類似度に基づいて、なりすましを検知する請求項２に記載のなりすまし検知システム。
【請求項5】
前記なりすまし検知手段は、前記フレーム画像ごとに、前記平面類似度が所定値以上である場合に平面スコアをカウントアップするとともに、前記立体類似度が所定値以上である場合に立体スコアをカウントアップする処理を行い、前記平面スコアが前記立体スコアに対して所定の差分Ｄ以上となった場合に、なりすましがあると検知し、前記立体スコアが前記平面スコアに対して前記差分Ｄ以上となった場合に、なりすましがないと検知する、請求項４に記載のなりすまし検知システム。
【請求項6】
前記特徴検出手段は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、
前記なりすまし検知手段は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点の位置の差を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う、請求項１に記載のなりすまし検知システム。
前記なりすまし検知手段は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点の位置の差を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う、請求項１に記載のなりすまし検知システム。
【請求項7】
認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知プログラムであって、コンピューターに、
認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、
前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させるためのプログラム。
認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、
前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、写真などの平面物を用いたなりすましを防止することができるなりすまし検知システムおよびなりすまし検知プログラムに関する。
【背景技術】
【0002】
従来、認証情報（たとえば、人の目や口など）を情報コードに含めた形態で記憶しておき、情報コードに含まれる認証情報と、対象者を撮像して得た認証情報とを用いて人物を認証する技術が知られている（たとえば特許文献１）。また、人物を認証する際に、写真などを用いたなりすましを防止する技術が知られている（たとえば特許文献２）。
【0003】
ここで、ＱＲコード（登録商標）などの情報コードは記憶容量が限られ、顔全体などの情報を認証情報として含めることが困難である。そのため、特許文献１に記載のように、顔の一部である目や口などの特徴点を情報コードに含め、これら特徴点を比較することで、人物の認証を行うことが提案されている。しかしながら、特許文献１では、対象者の顔を撮像する場合に、悪意ある第三者が対象者の顔を撮像した写真などをカメラに撮像させることで、対象者になりすまして認証されてしまうことがあった。
この点、特許文献２では、特徴点を比較することで人物の認証を行うとともに、写真を用いたなりすましを防止するために、異なるアングルで撮像した画像を比較して、写真や実物かのなりすましを判定している。具体的には、特許文献２では、検査対象物を異なるアングルで撮影して第１画像と第２画像とを得て、第２画像から検出した第２の特徴点の座標を第１画像への平面的な射影に変換し、変換座標と、第１画像から検出した第１の特徴点の座標との誤差が一定値以下となる場合に、なりすましが試みられたと判定する。
この点、特許文献２では、特徴点を比較することで人物の認証を行うとともに、写真を用いたなりすましを防止するために、異なるアングルで撮像した画像を比較して、写真や実物かのなりすましを判定している。具体的には、特許文献２では、検査対象物を異なるアングルで撮影して第１画像と第２画像とを得て、第２画像から検出した第２の特徴点の座標を第１画像への平面的な射影に変換し、変換座標と、第１画像から検出した第１の特徴点の座標との誤差が一定値以下となる場合に、なりすましが試みられたと判定する。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開２０２１－１６８０４７号公報
【特許文献2】国際公開第２０１０／０５０２０６号
【発明の概要】
【発明が解決しようとする課題】
【0005】
このように、特許文献２では、検査対象物を異なるアングルで撮影した画像を比較することで、検査対象物が立体物か否かを判定する構成を開示していているが、近年のセキュリティ意識の高まりから、なりすまし判定精度がより高いなりすまし検知システムおよびなりすまし検知プログラムが希求されている。
【課題を解決するための手段】
【0006】
このような課題を解決するため、発明者は鋭意研究を行い、対象物が平面物であるかを検証することで、より高いなりすまし判定精度を得られるとの知見を得た。具体的には、認証対象者の顔を撮像した撮像画像において、顔の縦の長さと横の長さの比（アスペクト比）に基づいて、認証対象者が、写真などの平面物であるか、実物の人物であるかを判定することで、なりすましの検知に用いるデータ容量を小さくするとともに、写真などの平面物を用いたなりすましを高い精度で検知することができるとの知見を得て、本発明を創作した。
本発明に係るなりすまし検知システムは、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を登録情報として予め記憶する記憶手段と、認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、前記登録情報に含まれる登録者の顔のアスペクト比と、異なるアングルで撮像された各認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有する。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知する構成とすることができる。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する構成とすることができる。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記平面類似度および複数の前記立体類似度に基づいて、なりすましを検知する構成とすることができる。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、前記フレーム画像ごとに、前記平面類似度が所定値以上である場合に平面スコアをカウントアップするとともに、前記立体類似度が所定値以上である場合に立体スコアをカウントアップする処理を行い、前記平面スコアが前記立体スコアに対して所定の差分Ｄ以上となった場合に、なりすましがあると検知し、前記立体スコアが前記平面スコアに対して前記差分Ｄ以上となった場合に、なりすましがないと検知する構成とすることができる。
上記なりすまし検知システムにおいて、前記特徴検出手段は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、前記なりすまし検知手段は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う構成とすることができる。
本発明に係るなりすまし検知プログラムは、コンピューターに、認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させる。
本発明に係るなりすまし検知システムは、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を登録情報として予め記憶する記憶手段と、認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、前記登録情報に含まれる登録者の顔のアスペクト比と、異なるアングルで撮像された各認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有する。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知する構成とすることができる。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する構成とすることができる。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記平面類似度および複数の前記立体類似度に基づいて、なりすましを検知する構成とすることができる。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、前記フレーム画像ごとに、前記平面類似度が所定値以上である場合に平面スコアをカウントアップするとともに、前記立体類似度が所定値以上である場合に立体スコアをカウントアップする処理を行い、前記平面スコアが前記立体スコアに対して所定の差分Ｄ以上となった場合に、なりすましがあると検知し、前記立体スコアが前記平面スコアに対して前記差分Ｄ以上となった場合に、なりすましがないと検知する構成とすることができる。
上記なりすまし検知システムにおいて、前記特徴検出手段は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、前記なりすまし検知手段は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う構成とすることができる。
本発明に係るなりすまし検知プログラムは、コンピューターに、認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させる。
【発明の効果】
【0007】
本発明によれば、写真などの平面物を用いたなりすましを高い精度で検知することができる。
【図面の簡単な説明】
【0008】
【図1】本実施形態に係るなりすまし検知システムの構成図である。
【図2】登録情報の登録画面の一例を示す図である。
【図3】本実施形態に係る情報コードの一例を示す図である。
【図4】情報登録処理を示すフローチャートである。
【図5】認証処理を示すフローチャートである。
【図6】フレーム画像の取得方法の一例を示す図である。
【図7】ステップＳ２０５の連続性判定処理を示すフローチャートである。
【図8】ステップＳ２０７の平面判定処理を示すフローチャートである。
【図9】認証対象者が実在する場合と平面物に写された写真である場合のアスペクト比を説明するための図である。
【図10】ステップＳ２０８の立体判定処理を示すフローチャートである。
【発明を実施するための形態】
【0009】
本発明に係るなりすまし検知システムの実施形態を、図面に基づいて説明する。図１は、なりすまし検知システム１の構成を示すブロック図である。図１に示すように、本実施形態に係るなりすまし検知システム１は、情報処理装置１０のみで構成することができる。また、図示していないが、情報処理装置１０と通信可能なサーバーを備え、情報処理装置１０の一部の機能をサーバーで実行する構成とすることもできる。以下においては、単一の情報処理装置１０で、認証の対象となる対象者（以下、対象者という）を認証する場面を例示して説明する。
【0010】
情報処理装置１０は、スマートフォン、タブレット、ノートパソコン、デスクトップパソコンなどの装置であり、図１に示すように、カメラ１１と、ディスプレイ１２と、記憶部１３と、演算部１４とを有する。カメラ１１は、対象者の顔画像などを撮像する。ディスプレイ１２は、認証結果の表示などを行う。記憶部１３には、本実施形態に係るなりすまし検知プログラムを記憶するほか、予め登録した認証用の登録情報を含む情報コードを記憶している。演算部１４は、記憶部１３に記憶したプログラムを実行することで、対象者を認証するための登録情報を登録する情報登録機能と、登録情報を用いて対象者の認証を行う認証機能とを有する。なお、情報処理装置１０は、なりすまし検知プログラムをサーバーからダウンロードすることができ、ダウンロードしたプログラムをインストールして実行することができる。以下に、情報処理装置１０の各機能について説明する。
【0011】
情報処理装置１０の情報登録機能は、認証用の登録情報を登録する。情報登録機能は、たとえば、図２に示すように、対象者に、顔を撮像するように促す画像を、ディスプレイ１２の画面に表示することで、対象者に顔画像を撮像させ、撮像された顔画像を取得する。そして、情報登録機能は、取得した対象者の顔画像から、対象者の目、鼻、口端、顔の輪郭などの特徴点を抽出する。なお、特徴点の抽出方法は、公知の方法で行うことができる。さらに、情報登録機能は、抽出した目、鼻、口端の位置座標や、顔の縦の長さと顔の横と長さとの比であるアスペクト比を、登録情報として算出する。なお、顔の縦の長さは、適宜設定することができ、たとえば、顎先から眉間の高さまでの距離、口端の高さから眉の高さまでの距離、顎先から目元の高さまでの距離などとすることができる。また、顔の横の長さも、適宜設定することができ、たとえば、右のこめかみから左のこめかみまでの距離とすることができる。また、情報登録機能は、顔の輪郭を検出し、検出した顔の輪郭のうち、横方向（目の並び方向）において最も長い距離と、縦方向（目の並び方向と垂直する方向）において最も長い距離との比を、顔の縦の長さと顔の横と長さとの比であるアスペクト比として検出することもできる。なお、本実施形態では、両目を通る直線を顔の横方向の直線と設定し、当該横方向における直線のうち、右のこめかみから左のこめかみまでの線分の長さを、顔の横方向の長さとして算出する。ただし、たとえば顔の傾きに関係なく、画像の左右方向を横方向として設定する構成としてもよいし、あるいは、ジャイロセンサーなどから水平方向を得ることで、水平方向を横方向として設定する構成としてもよい。また、本実施形態では、設定した顔の横方向の直線と直交する直線を、顔の縦方向の直線と設定し、当該縦方向における直線のうち、顎先から眉間までの線分、口端から眉までの線分、あるいは、顎先から目元までの線分の長さを、顔の縦方向の長さとして算出することができる。また、顔の横方向の長さおよび縦方向の長さは、長いほど高い精度が得られるため、縦方向の線分や横方向の線分を設定する場合には、顔の端部までの線分を設定することが好ましい。そして、情報登録機能は、登録情報を含む情報コード２を生成し、生成した情報コード２を記憶部１３に記憶する。
【0012】
ここで、図３は、本実施形態に係る情報コード２の一例を示す図である。図３に示すように、本実施形態に係る情報コード２は、情報を表示する単位となる２色以上の色付きの情報セル２２から構成される情報コード領域２１と、情報セル２２の色を識別するため、情報セル２２と同色であり、かつ、情報セル２２と同じ色数の教師セル２４を有する教師コード領域２３と、切り出しシンボル２５と、を有した方形状の二次元コードである。
【0013】
情報コード領域２１は、格子状に配列された、２色以上の情報セル２２から構成される。情報セル２２の色は、２色以上であれば、特に限定されず、たとえば白色と黒色の２色であってもよいし、白色および黒色以外の３色以上としてもよい。また、本実施形態において、情報コード２は、情報セル２２の色の識別精度を高めるために、教師コード領域２３に複数の教師セル２４を有している。教師セル２４の色の種類と、情報セル２２の色の種類とは一致しており、教師セル２４の色と情報セル２２の色とを比較することで、情報セル２２の色を高い精度で識別することが可能となっている。特に、カラーＱＲコードでは、色の種類が増えるほど、各色の色相が近くなるため、照明などの光環境、情報コード２の印刷環境、情報コード２のディスプレイなどへの表示環境、印刷した情報コード２の経年による退色などによっては情報セル２２の色を適切に識別することが困難となる場合がある。このような場合でも、教師セル２４を参照して、情報セル２２の色を識別することで、情報セル２２の情報を適切に把握することができる。たとえば、情報セル２２の色情報が、紫がかっており、赤色に類似しているか、青色に類似しているかを識別することが困難な場合に、紫色の教師セル２４の色情報よりも赤色に近い色情報である場合には、当該情報セル２２の色は赤色であると判断することができる。なお、色情報は、ＲＧＢ値やＣＭＹ値として数値化することができる。
【0014】
情報コード領域２１は、情報単位である情報セル２２の表示パターンを変えることで、一定容量の文字情報および／またはバイナリ情報からなる特定情報を記録することができる。情報コード領域２１が記録する特定情報の内容は、特に限定されないが、本実施形態では、生体認証用の生体認証情報を含む個人情報を記憶することができる。個人情報としては、生体認証情報に加えて、マイナンバー、パスポート番号、口座番号、免許証番号、名前、社会保険番号、誕生日、誕生地、旧姓などの情報を含めることができる。また、生体認証情報としては、顔画像、指紋情報、虹彩情報、掌形、網膜、血管、音声、耳形などを含めることができる。本実施形態では、生体認証情報として、顔画像、特に、特徴点となる目、鼻、口端の画像、座標、あるいはアスペクト比などの特徴点に基づく情報を記憶する構成を例示して説明する。
【0015】
なお、本実施形態に係る情報コード２では、特定情報が記録される情報コード領域２１は、３色以上の情報セル２２から構成され、白色および黒色の２色から構成される情報コードと比べて、記録できる情報量が大きくなっている。しかしながら、情報コード２に記憶できるデータ容量は、他の記録媒体と比べて少ないため、顔認証が可能な程度の解像度で顔全体の画像を記録する場合、４色の情報セル２２から構成される情報コード領域２１でも記憶容量が足りなくなってしまうおそれがある。そこで、本実施形態に係る情報コード２では、利用者の顔全体ではなく、利用者の目、鼻や口端など、顔認証において特徴点となる顔の一部位だけを顔認証用の顔画像として記憶しておくことで、情報コード２に顔認証用の顔画像を記録することが可能となっている。
【0016】
情報処理装置１０の認証機能は、情報処理装置１０を用いて認証を受けようとする対象者が、登録情報を登録した本人であるか否かを判定することで、対象者を認証する。特に、本実施形態において、認証機能は、写真などの平面物を用いたなりすましを防止するために、カメラ１１で撮像した対象物の画像が、写真などの平面物であるか、立体物であるかを判定して、認証を行うことを特徴とする。なお、本実施形態に係る認証方法については後述する。
【0017】
次に、本実施形態に係る情報登録処理について説明する。図４は、本実施形態に係る情報登録処理を示すフローチャートである。なお、図４に示す情報登録処理は、情報処理装置１０の情報登録機能により実行される。なお、以下においては、図４に示す情報登録処理を行う者を登録対象者と称して説明する。
【0018】
ステップＳ１０１では、情報登録機能により、カメラ１１により撮像された登録対象者の顔画像が取得される。たとえば、情報登録機能は、図２に示すように、登録対象者の顔画像の撮像を促す画面をディスプレイ１２に表示し、登録対象者に顔画像を撮像させることで、登録対象者の顔画像を取得することができる。
【0019】
ステップＳ１０２では、情報登録機能により、登録対象者の顔画像の特徴点が検出される。具体的に、情報登録機能は、公知の方法を用いて、ステップＳ１０１で取得した撮像画像から、登録対象者の目、鼻、口端、顔の輪郭などの特徴点を検出する。続くステップＳ１０３では、情報登録機能により、ステップＳ１０２で検出した特徴点の正規化が行われる。たとえば、情報登録機能は、公知の方法を用いて、目や鼻、口端などが所定の基準位置に位置するように、特徴点の位置を変更する構成とすることができる。また、続くステップＳ１０４では、情報登録機能により、ステップＳ１０３で正規化した特徴点に基づいて、登録対象者の登録情報が生成される。たとえば、情報登録機能は、正規化した目、鼻、口端の位置座標を登録情報として生成することができる。また、情報登録機能は、登録対象者の顔の横の長さと縦の長さとの比であるアスペクト比を、登録情報として生成することができる。
【0020】
ステップＳ１０５では、情報登録機能により、ステップＳ１０４で生成した登録情報を用いて、認証用の情報コード２が生成される。たとえば、情報登録機能は、公知の方法で、ステップＳ１０４で用いた登録情報を含む情報コード２を生成することができる。そして、続くステップＳ１０６では、情報登録機能により、ステップＳ１０５で生成した情報コード２が、記憶部１３に記憶される。
【0021】
次に、本実施形態に係る認証処理について説明する。本実施形態に係る認証処理は、認証処理を行う対象者（以下、認証対象者という）が、情報登録処理において登録された登録対象者（以下、登録者という）であるかを判定し、認証を行う処理である。特に、本実施形態に係る認証処理では、悪意のある認証対象者が、登録者の顔の写った写真、お面、顔の形状に合わせて折り曲げた写真などを用いて、なりすましをしている場合でも、認証対象者を適切に認証すること（なりすましを適切に検出すること）を目的としている。図５は、本実施形態に係る認証処理を示すフローチャートである。なお、図５に示す認証処理は、情報処理装置１０の認証機能により実行される。
【0022】
ステップＳ２０１では、認証機能により、予め登録情報として登録されている登録者と、認証を行う認証対象者とが同一人物であるかを判定するための本人認証処理が行われる。認証機能は、まず、図４に示す情報登録処理で登録された登録情報を取得する。本実施形態では、情報処理装置１０の記憶部１３に情報コード２の形式で登録者の顔の特徴点の情報（目、鼻、口端、顔の輪郭などの位置情報や、顔の縦の長さと横と長さとのアスペクト比）が登録情報として記憶されており、認証機能は、記憶部１３から登録情報を含む情報コード２を取得し、取得した情報コード２から登録情報を抽出することができる。また、認証機能は、認証対象者の顔撮像画像を取得する。たとえば、認証機能は、ディスプレイ１２に、「顔を正面から写してください。」などのコメントを重畳した画面を表示することで、カメラ１１に、認証対象者の顔を正面から撮像させ、正面から撮像された認証対象者の顔撮像画像を取得することができる。そして、認証機能は、取得した認証対象者の顔撮像画像から特徴点を検出する。そして、認証機能は、登録情報として登録されている登録者の顔の特徴点と、認証対象者の顔の特徴点とを比較し、類似度を算出する。たとえば、認証機能は、登録者の顔画像および認証対象者の顔画像において、鼻と眼までの距離、鼻と口までの距離、顔輪郭の左右の距離、額から顎までの距離などを算出し、これら距離を比較することで、比較結果を類似度として算出することができる。
【0023】
ステップＳ２０２では、認証機能により、ステップＳ２０１で算出した類似度に基づいて、認証対象者が登録者本人であるか否かの判定が行われる。たとえば、認証機能は、ステップＳ２０１で算出した登録者および認証対象者の鼻と眼までの距離、鼻と口までの距離、顔輪郭の左右の距離、および／または、額から顎までの距離が、所定値以下である場合に、認証対象者が登録者本人であると認定することができる。そして、認証機能は、認証対象者が登録者本人であると判定した場合は、ステップ２０３に進み、一方、認証対象者が登録者本人ではないと判定した場合には、ステップＳ２１２に進み、認証エラーの表示を行う。
【0024】
なお、登録者と認証対象者とが同一人物である場合でも顔の向きなどに応じて、各特徴点の位置にずれが生じる場合がある。そのため、ステップＳ２０１，Ｓ２０２において、認証機能は、以下のように、登録者と認証対象者とが同一人物か判定する構成とすることもできる。すなわち、特徴点は目、鼻、口端、顔の輪郭などの部位に高い密度で分布する傾向があるため、登録情報に登録されている登録者の特徴点の分布のうち分布密度が所定値ｄ以上となる半径ｒ１の範囲と、認証対象者の特徴点の分布のうち分布密度が所定値ｄ以上となる半径ｒ２の範囲とが一部重複する場合に、同一の部位（目、鼻、口端、顔の輪郭など）に対応する特徴点であると特定し、各部位の特徴点がそれぞれ一部重複する場合に、同一人物と認定する構成とすることができる。また、認証機能は、公知の方法により、登録情報として取得した登録者の顔の向きや大きさ一致するように、認証対象者の顔画像から抽出した特徴点の位置を補正してから、同一人物かを判定する構成とすることができる。
【0025】
ステップＳ２０３では、異なるアングルで撮像された認証対象者の複数の顔撮像画像を用いてなりすましを判定するために、認証機能により、認証対象者に対して首振りの指示が行われる。たとえば、認証機能は、ディスプレイ１２に「首を横に振ってください」などとコメントを重畳した画面を表示することで、図６（Ａ）～（Ｃ）に示すように、カメラ１１に、異なるアングルで認証対象者の顔画像を撮像させることができる。なお、以下においては、異なるアングルで撮像された複数の顔撮像画像のそれぞれをフレーム画像と称す。
【0026】
ステップＳ２０４では、認証機能により、基準アスペクト比の取得が行われる。基準アスペクト比は、後述するステップＳ２０７の平面判定処理で利用される。本実施形態では、図５に示す認証処理を開始してから最初に撮像した、認証対象者の顔画像（フレーム画像）から、認証対象者の顔の縦の長さと横の長さとの比をアスペクト比として算出し、算出したアスペクト比を、基準アスペクト比として設定する。また、本実施形態では、登録者の特徴点の情報（目、鼻、口端、顔の輪郭などの位置情報や、顔の縦の長さと横と長さとのアスペクト比）が登録情報として記憶部１３に記憶されており、登録情報として記憶する登録者の顔のアスペクト比を、基準アスペクト比として取得する構成とすることもできる。さらに、複数のフレーム画像のうち、認証対象者が正面を向いたタイミングなど、所定のタイミングで撮像されたフレーム画像から検出した認証対象者の顔のアスペクト比を、基準アスペクト比として取得する構成とすることもできる。
【0027】
ステップＳ２０５～Ｓ２０９では、フレーム画像ごとに、後述する連続性判定処理、平面判定処理、および立体判定処理が行われる。以下においては、処理対象となるフレーム画像を対象フレーム画像と称して説明する。
【0028】
ステップＳ２０５では、認証機能により、連続性判定処理が行われる。連続性判定処理とは、認証対象者が、認証対象者の実際の顔（立体物）と、登録者の顔を写した写真やお面などの平面物の両方を用いて、なりすましを行っていないかを判定するための処理である。すなわち、写真やお面などの平面物だけを用いた場合に、認証が行われないことを知っている悪意ある認証対象者が、写真やお面などの平面物と、認証対象者の実際の顔とをカメラ１１に写すことで、なりすましを行うことが想定される。連続性判定処理では、このような場合でも、認証対象者のなりすましを適切に検出することを目的としている。ここで、図７は、ステップＳ２０５の連続性判定処理を示すフローチャートである。以下に、図７に基づいて、ステップＳ２０５の連続性判定処理について説明する。
【0029】
まず、ステップＳ３０１では、認証機能により、認証対象者の顔を撮像したフレーム画像から特徴点が検出される。たとえば、本実施形態において、認証機能は、登録情報に含まれる特徴点の情報を用いて、対象フレーム画像から特徴点を抽出する。特徴点の抽出方法は特に限定されず、公知の方法を用いることができる。
【0030】
ステップＳ３０２では、認証機能により、対象フレーム画像から検出した特徴点の位置と、対象フレーム画像の１つ前に取得したフレーム画像（以下、前回フレーム画像）から検出した特徴点の位置との比較が行われる。そして、続くステップＳ３０３では、認証機能により、ステップＳ３０２で比較された対象フレーム画像と前回フレーム画像とで、対応する特徴点の距離が閾値ＴＬ以上であるか否かの判定が行われる。たとえば、認証機能は、連続する対象フレーム画像と前回フレーム画像との間において、同一要素（たとえば目、鼻、口端、顔の輪郭など）に対する特徴点を対応する特徴点として要素ごとに特定し、対応する特徴点の距離（位置の差）を要素ごとに算出する。そして、認証機能は、対応する特徴点の距離の合計値あるいは平均値が、所定の閾値ＴＬ以上であるか否かを判定する。ここで、上記閾値ＴＬは、特に限定されないが、実証実験などにより、認証対象者が、認証対象者の実際の顔と、登録対象者の写真画像の両方を用いて、なりすましを行っていると判定できる距離を、上記閾値ＴＬとして設定することができる。
【0031】
ステップＳ３０３において、連続するフレーム画像間の対応する特徴点の距離が閾値ＴＬ満である場合は、ステップＳ３０４に進む。ステップＳ３０４では、認証機能により、連続して撮像されたフレーム画像に連続性があり、認証対象者の実際の顔と登録者の写真画像の両方を用いてなりすましを行っていないと判定される。また、ステップＳ３０３において、対応する特徴点の距離が閾値ＴＬ以上であると判定された場合は、ステップＳ３０５に進み、認証機能により、連続して撮像されたフレーム画像には連続性がなく、認証対象者の実際の顔と登録者の写真画像の両方を用いてなりすましを行っていると判定される。そして、図５に戻り、ステップＳ２０６に進む。
【0032】
ステップＳ２０６では、認証機能により、ステップＳ２０５の連続判定処理において、連続性があると判定されたかの判定が行われる。連続性があると判定された場合は、ステップＳ２０７に進む。一方、連続性がないと判定された場合は、ステップＳ２１２に進み、認証機能により、認証対象者と登録者とは同一人物ではないとして、認証エラーの表示が行われる。なお、図７に示す連続判定処理においては、全てのフレーム画像について連続性を判定する構成としてもよいし、認証対象者が首振りを開始してから所定時間（たとえば１秒間）のフレーム画像のみだけ連続性を判定する構成としてもよいし、さらに、ランダムに抽出したフレーム画像について連続性を測定する構成としてもよい。また、１つのフレーム画像でも連続性がないと判定された場合はなりすましがあると判定する構成としてもよし、所定数以上のフレーム画像において連続性がないと判定された場合になりすましがあると判定する構成としてもよい。
【0033】
続くステップＳ２０７では、認証機能により、平面判定処理が行われる。平面判定処理とは、認証対象者が、写真などの平面物を用いてなりすましを行っていないか否かを判定するための処理である。ここで、図８は、ステップＳ２０７の平面判定処理を示すフローチャートである。以下に、図８に基づいて、ステップＳ２０７の平面判定処理について説明する。
【0034】
まず、ステップＳ４０１では、認証機能により、対象フレーム画像の特徴点のうち、たとえば、顔の輪郭、あるいは、左右こめかみの位置および顎と眉間の位置に基づいて、認証対象者の顔の縦の長さと横の長さとの比が、認証対象者の顔のアスペクト比として算出される。また、ステップＳ４０２では、認証機能により、ステップＳ４０１で算出した認証対象者の顔のアスペクト比Ｒ１と、図５に示すステップＳ２０４で取得した基準アスペクト比Ｒ２とに基づいて、平面類似度が算出される。具体的に、認証機能は、基準アスペクト比Ｒ２に対する、認証対象者の顔のアスペクト比Ｒ１の変化率を、平面類似度として算出する。たとえば、認証機能は、（基準アスペクト比Ｒ２－認証対象者の顔のアスペクト比Ｒ１）／基準アスペクト比Ｒ２の絶対値｜（Ｒ２－Ｒ１）／Ｒ２｜を、平面類似度として算出することができる。
【0035】
ここで、図９は、認証対象者が実在する場合と写真などの平面物に写された顔画像である場合のアスペクト比を説明するための図であり、（Ａ）は実在の認証対象者が正面を向いた状態で撮像したフレーム画像であり、（Ｂ）は写真を斜め方向に傾けて、その写真を撮像したフレーム画像であり、（Ｃ）は実在の認証対象者が斜め方向に向いた状態で撮像したフレーム画像である。また、図９（Ａ）～（Ｃ）では、各フレーム画像の顔の縦の長さおよび横の長さを実線の矢印で示している。また、図９（Ｂ），（Ｃ）では、図９（Ａ）における顔の横の長さＨ０を破線で重畳して示している。さらに、図９（Ｂ），（Ｃ）では、図９（Ａ）おける顔の横の長さと、図９（Ｂ），（Ｃ）における顔の横の長さとの差をＷ１，Ｗ２として示している。
【0036】
図９に示す例では、（Ａ）～（Ｃ）において、顔の縦の長さＶ０～Ｖ２が同じ長さとなるように、認証対象者および写真のカメラ１１からの距離を調整している。ここで、図９（Ｂ）に示すように、写真を斜め方向に傾けた場合（ヨー方向に回転させた場合）、写真を傾けた角度の分だけ写真に写る対象者の顔の横の長さＨ１は短くなる。一方、図９（Ｃ）に示すように、認証対象者が実在する場合は、認証対象者が顔を斜め方向に向けても、認証対象者が正面を向いている（Ａ）の顔の横の長さＨ０と比べて、認証対象者の顔の横の長さＨ２は大きくは変化しない。そのため、図９（Ｃ）に示すように、認証対象者の実際の顔では、認証対象者が斜め方向を向いている場合の顔の横の長さＨ１と、認証対象者が正面を向いている場合の顔の長さＨ０との差Ｗ２は小さくなるが、図９（Ｂ）に示すように、平面物に写った顔画像では、平面物を斜め方向に向けた場合の認証対象者の顔の横の長さＨ１と、実在の認証対象者が正面を向いた場合の顔の長さＨ０との差Ｗ１は大きくなる。その結果、認証対象者の実際の顔が斜め方向を向いた場合の認証対象者の顔のアスペクト比は、基準アスペクト比に近い値となり、基準アスペクト比からの変化率が小さくなるため、平面類似度は小さくなる傾向にある。一方、平面物に写した認証対象者が斜め方向を向いた場合の認証対象者の顔のアスペクト比は、平面物を斜め方向に傾けるほど、基準アスペクト比から離れることとなり、基準アスペクト比からの変化率は大きくなり、平面類似度が高くなる傾向にある。
【0037】
そのため、実際の顔で認証しようとする認証対象者が、首振りの指示に基づいて、首を横に振って実際の顔を回転させた場合に、平面類似度が所定値ＴＳ以上となるフレーム画像の数は少なくなる。一方で、なりすましをしようとする第三者が、首振りの指示に基づいて、平面物に写した顔画像を、首を横に振るように回転させた場合に、平面類似度が所定値ＴＳ以上となるフレーム画像の数は多くなる。そこで、本実施形態では、平面類似度が所定値ＴＳ以上となるフレーム画像の数を平面スコアＳ１としてカウントし、平面スコアＳ１に基づいて、写真などの平面物を用いたなりすましを検出する。
【0038】
すなわち、ステップＳ４０３では、認証機能により、ステップＳ４０２で算出した平面類似度が所定値ＴＳ以上であるか否かの判断が行われる。平面類似度が所定値ＴＳ以上である場合には、ステップＳ４０４に進み、認証機能により、平面スコアＳ１がカウントアップされる。一方、平面類似度が所定値ＴＳ未満である場合には、ステップＳ４０４に進まず、図８に示す平面判定処理を終了する。なお、本実施形態では、フレーム画像ごとに平面類似度が算出され、各フレーム画像において平面類似度が所定値ＴＳ以上であると判定される度に平面スコアＳ１がカウントアップされる。そのため、平面スコアＳ１は、認証対象者の顔が平面物に写した顔画像である可能性を示す指標であり、平面スコアＳ１が高いほど認証対象者が平面物に写した顔画像である可能性が高いと判断することができる。
【0039】
ステップＳ２０８では、認証機能により、立体判定処理が行われる。立体判定処理とは、フレーム画像が実在の人物などの立体物を撮像したものかを判定するための処理である。図１０は、ステップＳ２０８の立体判定処理を示すフローチャートである。以下に、図１０に基づいて、ステップＳ２０８の立体判定処理について説明する。
【0040】
図１０に示すように、まず、ステップＳ５０１では、認証機能により、対象フレーム画像の複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点が抽出され、これら特徴点間の距離（顔の右側と左側の距離）が算出される。このような特徴点としては、できる限り離れた位置にあることが好ましく、たとえば、鼻と左右の頬、鼻と左右のこめかみ、鼻と左右の輪郭、鼻と左右の耳などに対応する特徴点が例示される。たとえば、認証機能は、認証対象者の左の頬から鼻までの距離をＬ１として算出し、右の頬から鼻までの距離をＬ２として算出する構成とすることができ、また、認証対象者の左のこめかみから鼻まで距離をＬ１として算出し、右のこめかみから鼻までの距離をＬ２として算出する構成とすることもでき、あるいは、左耳から鼻までの距離をＬ１として、右耳から鼻までの距離をＬ２として算出する構成とすることもできる。なお、本実施形態では、認証機能は、認証対象者の左の頬から鼻までの距離Ｌ１と、右の頬から鼻までの距離Ｌ２とを算出する。
【0041】
また、本実施形態では、顔の凹凸も含めて、距離Ｌ１およびＬ２を算出する構成とすることが好ましい。たとえば、認証機能は、顔の凹凸方向における距離（凹凸の高さ）を実際の距離よりも大きく算出することで、顔の凹凸を加味して、立体物であるかを判定する構成とすることができる。なお、顔の凹凸の高さは、公知の方法を用いて算出することができ、連続するフレーム画像間の特徴点の変化から求める構成としてもよいし、あるいは、情報処理装置１０がＬｉＤＡＲなどのセンサーを内蔵しており、ＬｉＤＡＲなどで高さ情報も取得する構成としてもよい。
【0042】
ステップＳ５０２では、認証機能により、ステップＳ５０１で算出した特徴点の距離Ｌ１，Ｌ２が比較され、比較結果が立体類似度として算出される。本実施形態では、認証機能は、認証対象者の左の頬から鼻までの距離Ｌ１と、右の頬から鼻までの距離Ｌ２との比（Ｌ１／Ｌ２）を、立体類似度として算出する。
【0043】
ここで、写真などの平面物に写った顔画像の場合、平面物の向きを変えた場合も、認証対象者の左の頬から鼻までの距離Ｌ１と、右の頬から鼻までの距離Ｌ２はほぼ変化しないため、立体類似度が、既に算出した別のフレーム画像に基づく立体類似度に近似する頻度は多くなる。これに対して、実際の認証対象者の顔人物（立体物）の場合、顔の向きを変えた場合には、認証対象者の左の頬から鼻までの距離Ｌ１と、右の頬から鼻までの距離Ｌ２との比（Ｌ１／Ｌ２）は大きく変化する傾向にあるため、既に算出した別のフレーム画像に基づく立体類似度と近似する頻度は少なくなる。そこで、本実施形態では、立体類似度が既出の立体類似度と近似しないフレーム画像の数を立体スコアＳ２としてカウントし、立体スコアＳ２に基づいて、認証対象者が実在の人物（立体物）であるかを判定する。
【0044】
すなわち、ステップＳ５０３では、認証機能により、ステップＳ５０２で算出した立体類似度が、既に算出した別のフレーム画像に基づく立体類似度から一定範囲内にあり近似するか否かの判定が行われる。立体類似度が既出の立体類似度から一定範囲を超えた範囲にあり近似しない場合は、ステップＳ５０４に進み、認証機能により、立体スコアＳ２がカウントアップされる。さらに、続くステップＳ３において、認証機能により、平面スコアＳ１がカウントダウンされる。一方、立体類似度が既出の立体類似度から一定範囲内にあり近似する場合には、図１０に示す立体判定処理を終了し、図５に示すステップＳ２０９に進む。なお、本実施形態では、フレーム画像ごとに立体類似度が算出され、各フレーム画像において立体類似度が既出の立体類似度と近似しない度に立体スコアＳ２がカウントアップされる。そのため、立体スコアＳ２は、認証対象者が実在する人物（立体物）である可能性を示す指標であり、立体スコアＳ２が高いほど認証対象者が実在する人物である可能性が高いとも言える。なお、立体類似度が既出の立体類似度に近似するか否かの基準となる一定範囲の大きさは、特に限定されず、実証実験などで適宜設定することができる。
【0045】
ステップＳ２０９では、認証機能により、平面スコアＳ１と立体スコアＳ２との差の絶対値が所定の差分Ｄ以上であるか判定される。ここで、差分Ｄは、平面スコアＳ１と立体スコアＳ２とに大差がついており、認証対象者が実物の人物または写真などの平面物であると判定できる閾値を設定することが好ましく、実証実験などで適切な差分Ｄを設定することができる。平面スコアＳ１と立体スコアＳ２との差の絶対値が差分Ｄ未満である場合は、判定が十分ではなく、別のフレーム画像に基づいて平面スコアＳ１および立体スコアＳ２を算出するため、ステップＳ２０５に戻り、対象フレーム画像の次に取得された別のフレーム画像を対象フレーム画像として、ステップＳ２０５～Ｓ２０８の処理が行われる。これに対して、平面スコアＳ１と立体スコアＳ２との差の絶対値が差分Ｄ以上である場合には、ステップＳ２１０に進む。
【0046】
ステップＳ２１０では、認証機能により、立体スコアＳ２が平面スコアＳ１よりも大きいか否かの判定がされる。立体スコアＳ２が平面スコアＳ１よりも大差（差分Ｄ以上の差）で大きい場合には、ステップＳ２１１に進み、認証対象が認証対象者の実際の顔であると判定され、認証できた旨（認証成功）の情報が、ディスプレイ１２に出力される。一方、平面スコアＳ１が立体スコアＳ２よりも大差（差分Ｄ以上の差）で大きい場合には、ステップＳ２１２に進み、認証できない旨（認証エラー）の情報が、ディスプレイ１２に出力される。
【0047】
以上のように、本実施形態では、カメラ１１により撮像された複数のフレーム画像ごとに、認証対象者の顔の縦の長さと横の長さとの比をアスペクト比として検出し、基準アスペクト比に対する、認証対象者のアスペクト比の変化率を平面類似度としてフレーム画像ごとに算出し、平面類似度に基づいて、対象者が写真などの平面物に写った人物であるかを判定することができ、写真などの平面物を用いたなりすましを高い精度で検出することができる。特に、本実施形態では、立体物を判定する立体物判定処理と併用して、平面物を判定する平面物判定処理を行うことで、なりすましをより高い精度で行うことが可能となる。すなわち、本実施形態では、平面物判定処理で平面物ではない判定された場合も、立体物判定処理で立体物ではないと判定された場合には、認証エラーとすることで、写真などの平面物を用いた認証をより高い精度で行うことが可能となる。また、本実施形態では、フレーム画像ごとに平面判定処理を行い、平面物であると判定されたフレーム画像の数を平面スコアＳ１としてスコア化するとともに、立体物であると判定されたフレーム画像の数を立体スコアＳ２としてスコア化する。そして、平面スコアＳ１と立体スコアＳ２との差が差分Ｄ以上と大きな差が開いた場合には、平面スコアＳ１が立体スコアＳ２よりも高い場合には平面物として判定し、立体スコアＳ２が平面スコアＳ１よりも高い場合には立体物として判定することで、認証対象者が平面物であるかを複数のフレーム画像を用いて総合的に判定することができ、なりすましの判定精度を高めることができる。加えて、本実施形態では、記憶容量の小さいアスペクト比を用いることで、登録情報の記憶容量が制限される場合でも、なりすまし判定を適切に行うことが可能となる。
【0048】
以上、本発明の好ましい実施形態例について説明したが、本発明の技術的範囲は上記実施形態の記載に限定されるものではない。上記実施形態例には様々な変更・改良を加えることが可能であり、そのような変更または改良を加えた形態のものも本発明の技術的範囲に含まれる。
【0049】
たとえば、上述した実施形態では、登録情報を情報コード２に含めた形態で記憶する構成を例示したが、この構成に限定されず、登録情報をそのまま記憶する構成とすることができる。
【0050】
また、上述した実施形態では、基準アスペクト比Ｒ２に対する、認証対象者の顔のアスペクト比Ｒ１の変化率の絶対値｜（Ｒ２－Ｒ１）／Ｒ２｜を平面類似度として算出する構成を例示したが、この構成に限定されず、たとえば、認証対象者の顔のアスペクト比Ｒ１と基準アスペクト比Ｒ２との変化量（差）の絶対値｜Ｒ１－Ｒ２｜を平面類似度として算出する構成とすることができる。この場合、平面類似度が所定値ＴＳ’以上である場合に、平面スコアＳ１をカウントアップし、平面類似度が所定値ＴＳ’未満である場合に、平面スコアＳ１をカウントアップしない構成とすることができる。
【0051】
さらに、上述した実施形態では、認証対象者の左頬から鼻までの距離Ｌ１と右頬から鼻までの距離Ｌ２との比（Ｌ１／Ｌ２）を、立体類似度として算出する構成を例示したが、この構成に限定されず、たとえば、認証対象者の左頬から鼻までの距離Ｌ１と右頬から鼻までの距離Ｌ２との差（Ｌ１－Ｌ２）を立体類似度として算出する構成とすることができる。この場合も、立体類似度が既出の立体類似度と近似する場合に立体スコアＳ２をカウントアップする構成とすることができる。
【0052】
加えて、上述した実施形態では、立体判定処理において、認証対象者の左の頬から鼻までの距離Ｌ１と、右の頬から鼻までの距離Ｌ２との比（Ｌ１／Ｌ２）を、立体類似度として算出する構成を例示したが、たとえば、上下方向への首振りも加味して立体物であるか否かを判定するために、さらに、顎とおでこを特徴点として検出し、顎から鼻までの距離Ｌ３と、鼻からおでこまでの距離Ｌ４を用いて、これらの比（Ｌ３／Ｌ４）も、立体類似度として算出する構成とすることができる。この場合、Ｌ１／Ｌ２で表される立体類似度が既出の立体類似度と近似すること、および／または、Ｌ３／Ｌ４で表される立体類似度が既出の立体類似度と近似することで、平面物と判定する構成とすることができる。
【符号の説明】
【0053】
１…なりすまし検知システム
１０…情報処理装置
１１…カメラ
１２…ディスプレイ
１３…記憶部
１４…演算部
２…情報コード
２１…情報コード領域
２２…情報セル
２３…教師コード領域
２４…教師セル
２５…切り出しシンボル
１０…情報処理装置
１１…カメラ
１２…ディスプレイ
１３…記憶部
１４…演算部
２…情報コード
２１…情報コード領域
２２…情報セル
２３…教師コード領域
２４…教師セル
２５…切り出しシンボル
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【手続補正書】
【提出日】2024-02-15
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、
認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、
前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、
前記なりすまし検知手段は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する、なりすまし検知システム。
認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、
前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、
前記なりすまし検知手段は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する、なりすまし検知システム。
【請求項2】
前記なりすまし検知手段は、前記立体類似度に加えて、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知する請求項１に記載のなりすまし検知システム。
【請求項3】
認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、
認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、
前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、
前記なりすまし検知手段は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知し、
前記なりすまし検知手段は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する、なりすまし検知システム。
認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、
前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、
前記なりすまし検知手段は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知し、
前記なりすまし検知手段は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する、なりすまし検知システム。
【請求項4】
前記なりすまし検知手段は、前記フレーム画像ごとに、前記平面類似度が所定値以上である場合に平面スコアをカウントアップするとともに、前記立体類似度が所定値以上である場合に立体スコアをカウントアップする処理を行い、前記平面スコアが前記立体スコアに対して所定の差分Ｄ以上となった場合に、なりすましがあると検知し、前記立体スコアが前記平面スコアに対して前記差分Ｄ以上となった場合に、なりすましがないと検知する、請求項２に記載のなりすまし検知システム。
【請求項5】
認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、
認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、
前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、
前記特徴検出手段は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、
前記なりすまし検知手段は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点の位置の差を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う、なりすまし検知システム。
認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、
前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、
前記特徴検出手段は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、
前記なりすまし検知手段は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点の位置の差を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う、なりすまし検知システム。
【請求項6】
認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知プログラムであって、コンピューターに、
認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、
前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させ、
前記なりすまし検知機能は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する、プログラム。
認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、
前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させ、
前記なりすまし検知機能は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する、プログラム。
【請求項7】
認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知プログラムであって、コンピューターに、
認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、
前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を有し、
前記なりすまし検知機能は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知し、
前記なりすまし検知機能は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する、プログラム。
認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、
前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を有し、
前記なりすまし検知機能は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知し、
前記なりすまし検知機能は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する、プログラム。
【請求項8】
認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知プログラムであって、コンピューターに、
認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、
前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させ、
前記特徴検出機能は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、
前記なりすまし検知機能は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点の位置の差を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う、プログラム。
認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、
前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、
異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させ、
前記特徴検出機能は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、
前記なりすまし検知機能は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点の位置の差を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う、プログラム。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【0006】
このような課題を解決するため、発明者は鋭意研究を行い、対象物が平面物であるかを検証することで、より高いなりすまし判定精度を得られるとの知見を得た。具体的には、認証対象者の顔を撮像した撮像画像において、顔の縦の長さと横の長さの比（アスペクト比）に基づいて、認証対象者が、写真などの平面物であるか、実物の人物であるかを判定することで、なりすましの検知に用いるデータ容量を小さくするとともに、写真などの平面物を用いたなりすましを高い精度で検知することができるとの知見を得て、本発明を創作した。
本発明の第１の観点に係るなりすまし検知システムは、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を登録情報として予め記憶する記憶手段と、認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、前記登録情報に含まれる登録者の顔のアスペクト比と、異なるアングルで撮像された各認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、前記なりすまし検知手段は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、前記立体類似度に加えて、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知する構成とすることができる。
本発明の第２の観点に係るなりすまし検知システムは、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、前記なりすまし検知手段は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知し、前記なりすまし検知手段は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、前記フレーム画像ごとに、前記平面類似度が所定値以上である場合に平面スコアをカウントアップするとともに、前記立体類似度が所定値以上である場合に立体スコアをカウントアップする処理を行い、前記平面スコアが前記立体スコアに対して所定の差分Ｄ以上となった場合に、なりすましがあると検知し、前記立体スコアが前記平面スコアに対して前記差分Ｄ以上となった場合に、なりすましがないと検知する構成とすることができる。
本発明の第３の観点に係るなりすまし検知システムは、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、前記特徴検出手段は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、前記なりすまし検知手段は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う。
本発明の第１の観点に係るなりすまし検知プログラムは、コンピューターに、認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させ、前記なりすまし検知機能は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する。
本発明の第２の観点に係るなりすまし検知プログラムは、コンピューターに、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知プログラムであって、コンピューターに、認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を有し、前記なりすまし検知機能は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知し、前記なりすまし検知機能は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する。
本発明の第３の観点に係るなりすまし検知プログラムは、コンピューターに、認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させ、前記なりすまし検知機能は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する。
本発明の第１の観点に係るなりすまし検知システムは、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を登録情報として予め記憶する記憶手段と、認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、前記登録情報に含まれる登録者の顔のアスペクト比と、異なるアングルで撮像された各認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、前記なりすまし検知手段は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、前記立体類似度に加えて、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知する構成とすることができる。
本発明の第２の観点に係るなりすまし検知システムは、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、前記なりすまし検知手段は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知し、前記なりすまし検知手段は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する。
上記なりすまし検知システムにおいて、前記なりすまし検知手段は、前記フレーム画像ごとに、前記平面類似度が所定値以上である場合に平面スコアをカウントアップするとともに、前記立体類似度が所定値以上である場合に立体スコアをカウントアップする処理を行い、前記平面スコアが前記立体スコアに対して所定の差分Ｄ以上となった場合に、なりすましがあると検知し、前記立体スコアが前記平面スコアに対して前記差分Ｄ以上となった場合に、なりすましがないと検知する構成とすることができる。
本発明の第３の観点に係るなりすまし検知システムは、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知システムであって、認証対象者の顔を異なるアングルで複数フレーム撮像する撮像手段と、前記撮像手段により撮像された複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出手段と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知手段と、を有し、前記特徴検出手段は、異なるアングルで撮像したフレーム画像ごとに、対象者の顔の特徴点の位置を検出し、前記なりすまし検知手段は、前記フレーム画像ごとに、連続して撮像された他のフレーム画像との特徴点を算出し、前記差が閾値ＴＬ以上である場合に、平面物および立体物の両方を用いたなりすましがあると判定する処理をさらに行う。
本発明の第１の観点に係るなりすまし検知プログラムは、コンピューターに、認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させ、前記なりすまし検知機能は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する。
本発明の第２の観点に係るなりすまし検知プログラムは、コンピューターに、認証対象者が実在する人物であるか平面物に写された人物であるかを検出するなりすまし検知プログラムであって、コンピューターに、認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を有し、前記なりすまし検知機能は、前記フレーム画像ごとに、基準アスペクト比に対する、前記認証対象者の顔のアスペクト比の変化率または変化量を、平面類似度として算出し、算出した複数の前記平面類似度に基づいて、なりすましを検知し、前記なりすまし検知機能は、予め登録されている本人の顔のアスペクト比、または、前記複数のフレーム画像のうち、最初に撮像されたフレーム画像における認証対象者の顔のアスペクト比を、前記基準アスペクト比として取得する。
本発明の第３の観点に係るなりすまし検知プログラムは、コンピューターに、認証対象者を異なるアングルで撮像した複数のフレーム画像を取得する取得機能と、前記複数のフレーム画像のそれぞれから、認証対象者の顔の縦の長さと横の長さとの比であるアスペクト比を検出する特徴検出機能と、異なるアングルで撮像された認証対象者の顔のアスペクト比に基づいて、平面物による人物のなりすましを検知するなりすまし検知機能と、を実行させ、前記なりすまし検知機能は、各フレーム画像における複数の特徴点のうち、顔の幅方向において離れて位置する少なくとも３つの特徴点を抽出し、抽出した特徴点における、顔の右側と左側とにおける特徴点間の距離の比を立体類似度として算出し、前記フレーム画像ごとに算出した複数の前記立体類似度に基づいてなりすましを検知する。