特許 7485448 処理システム、処理方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-05-08

(45)【発行日】2024-05-16

(54)【発明の名称】処理システム、処理方法及びプログラム

(51)【国際特許分類】

   G06T 7/00 20170101AFI20240509BHJP

【ＦＩ】

G06T7/00 510B

【請求項の数】 10

(21)【出願番号】P 2021524688

(86)(22)【出願日】2020-04-13

(86)【国際出願番号】 JP2020016266

(87)【国際公開番号】W WO2020246141

(87)【国際公開日】2020-12-10

【審査請求日】2021-11-18

【審判番号】

【審判請求日】2023-08-28

(31)【優先権主張番号】P 2019105904

(32)【優先日】2019-06-06

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100110928

【弁理士】

【氏名又は名称】速水 進治

(72)【発明者】

【氏名】蘇 雷明

(72)【発明者】

【氏名】島原 達也

(72)【発明者】

【氏名】森田 浩章

【合議体】

【審判長】千葉 輝久

【審判官】板垣 有紀

【審判官】高橋 宣博

(56)【参考文献】

【文献】特表２０１９－５０６６９４（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１８／０３４９７２１（ＵＳ，Ａ１）

【文献】特開２０１６－５１４８２（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

G06T 7/00

G06V 40/00 - 40/16

G06V 40/18 - 40/19

G06V 40/30 - 40/70

G06T 1/00

(57)【特許請求の範囲】

【請求項1】

撮影時に互いに異なる特徴の光を発する複数の撮影装置各々に紐付けて、前記複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量を記憶する記憶手段と、
画像と、前記画像を生成した撮影装置を示す撮影装置識別情報とを取得する取得手段と、
前記画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段と、
前記抽出された光の特徴量と、前記記憶手段に記憶されている前記参照特徴量とを照合し、前記抽出された光の特徴量と一致する前記参照特徴量に紐付けられた撮影装置を特定する照合手段と、
前記撮影装置識別情報で示される撮影装置と前記特定された撮影装置とが一致しない場合、前記画像は生体を撮影した画像でないと判定する生体検知手段と、
を有する処理システム。

【請求項2】

請求項１に記載の処理システムにおいて、
前記複数の撮影装置は、複数の種別の光を発することができ、撮影時に発する光の種別をランダムに又は規則的に変化させ、
前記記憶手段は、前記複数の撮影装置各々に紐付けて、前記複数の撮影装置各々が発することができる複数の種別の光各々の特徴を示す前記参照特徴量を記憶し、
前記照合手段は、
前記複数の撮影装置各々からの通知、又は予め記憶していた前記複数の撮影装置各々が各タイミングで発する光の種別を算出する算出ルールに基づき、前記人物が撮影された時に前記複数の撮影装置各々が発する光の種別を特定し、
前記抽出された光の特徴量と、前記人物が撮影された時に前記複数の撮影装置各々が発する種別の光の特徴を示す前記参照特徴量とを照合し、前記抽出された光の特徴量と一致する前記参照特徴量に紐付けられた撮影装置を特定する処理システム。

【請求項3】

撮影時に互いに異なる特徴の光を発する複数の撮影装置各々に紐付けて、前記複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量を記憶する記憶手段と、
画像と、前記画像を生成した撮影装置を示す撮影装置識別情報とを取得する取得手段と、
前記画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段と、
前記抽出された光の特徴量と、前記撮影装置識別情報で示される撮影装置に紐付けて前記記憶手段に記憶されている参照特徴量とを照合する照合手段と、
前記照合手段による照合の結果が不一致である場合、前記画像は生体を撮影した画像でないと判定する生体検知手段と、
を有する処理システム。

【請求項4】

請求項３に記載の処理システムにおいて、
前記複数の撮影装置は、複数の種別の光を発することができ、撮影時に発する光の種別をランダムに又は規則的に変化させ、
前記記憶手段は、前記複数の撮影装置各々に紐付けて、前記複数の撮影装置各々が発することができる複数の種別の光各々の特徴を示す前記参照特徴量を記憶し、
前記照合手段は、
前記複数の撮影装置各々からの通知、又は予め記憶していた前記複数の撮影装置各々が各タイミングで発する光の種別を算出する算出ルールに基づき、前記人物が撮影された時に前記複数の撮影装置各々が発する光の種別を特定し、
前記抽出された光の特徴量と、前記撮影装置識別情報で示される撮影装置に紐付けて前記記憶手段に記憶されている前記参照特徴量の中の前記人物が撮影された時にその撮影装置が発する種別の光の特徴を示す前記参照特徴量とを照合する処理システム。

【請求項5】

請求項１から４のいずれか１項に記載の処理システムにおいて、
前記複数の撮影装置は、発する光の特徴を変化させながら同一人物を複数回撮影して複数の画像を生成し、
前記取得手段は、前記複数の画像を取得し、
前記抽出手段は、前記複数の画像各々から、人物の角膜で反射した光の特徴量を抽出し、
前記照合手段は、前記複数の画像各々から抽出された前記光の特徴量を互いに照合し、
前記生体検知手段は、
前記複数の画像各々から抽出された前記光の特徴量が互いに一致する場合、前記画像は生体を撮影した画像でないと判定する処理をさらに行う処理システム。

【請求項6】

請求項１から５のいずれか１項に記載の処理システムにおいて、
前記抽出手段は、光のパターン、及び、瞳孔内の光の位置の少なくとも一方を示す特徴量を抽出する処理システム。

【請求項7】

コンピュータが、
撮影時に互いに異なる特徴の光を発する複数の撮影装置各々に紐付けて、前記複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量を記憶しておき、
画像と、前記画像を生成した撮影装置を示す撮影装置識別情報とを取得し、
前記画像から、人物の角膜で反射した光の特徴量を抽出し、
前記抽出された光の特徴量と、記憶されている前記参照特徴量とを照合し、前記抽出された光の特徴量と一致する前記参照特徴量に紐付けられた撮影装置を特定し、
前記撮影装置識別情報で示される撮影装置と前記特定された撮影装置とが一致しない場合、前記画像は生体を撮影した画像でないと判定する処理方法。

【請求項8】

コンピュータが、
撮影時に互いに異なる特徴の光を発する複数の撮影装置各々に紐付けて、前記複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量を記憶しておき、
画像と、前記画像を生成した撮影装置を示す撮影装置識別情報とを取得し、
前記画像から、人物の角膜で反射した光の特徴量を抽出し、
前記抽出された光の特徴量と、前記撮影装置識別情報で示される撮影装置に紐付けて記憶されている参照特徴量とを照合し、
前記照合の結果が不一致である場合、前記画像は生体を撮影した画像でないと判定する処理方法。

【請求項9】

コンピュータを、
撮影時に互いに異なる特徴の光を発する複数の撮影装置各々に紐付けて、前記複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量を記憶する記憶手段、
画像と、前記画像を生成した撮影装置を示す撮影装置識別情報とを取得する取得手段、
前記画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段、
前記抽出された光の特徴量と、前記記憶手段に記憶されている前記参照特徴量とを照合し、前記抽出された光の特徴量と一致する前記参照特徴量に紐付けられた撮影装置を特定する照合手段、
前記撮影装置識別情報で示される撮影装置と前記特定された撮影装置とが一致しない場合、前記画像は生体を撮影した画像でないと判定する生体検知手段、
として機能させるプログラム。

【請求項10】

コンピュータを、
撮影時に互いに異なる特徴の光を発する複数の撮影装置各々に紐付けて、前記複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量を記憶する記憶手段、
画像と、前記画像を生成した撮影装置を示す撮影装置識別情報とを取得する取得手段、
前記画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段、
前記抽出された光の特徴量と、前記撮影装置識別情報で示される撮影装置に紐付けて前記記憶手段に記憶されている参照特徴量とを照合する照合手段、
前記照合手段による照合の結果が不一致である場合、前記画像は生体を撮影した画像でないと判定する生体検知手段、
として機能させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

この開示は、処理システム、処理方法及びプログラムに関する。

【背景技術】

【0002】

虹彩画像、顔画像等を利用した生体認証において、生体検知技術が利用される場合がある。特許文献１は、カメラの移動に伴う角膜反射の変化に基づき生体検知する技術を開示している。また、特許文献１は、照明の色やパターンを変化させることに応じて変化する角膜反射に基づき生体検知してもよいことを開示している。

【先行技術文献】

【特許文献】

【0003】

【文献】特表２０１８－５０４７０３

【発明の概要】

【発明が解決しようとする課題】

【0004】

角膜反射の変化に基づき生体検知する特許文献１に記載の技術の場合、複数枚の画像が必須であり、１枚の画像に基づき生体検知できない。この開示は、１枚の画像に基づき生体検知できる技術を提供することを課題とする。

【課題を解決するための手段】

【0005】

この開示によれば、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段と、
前記抽出された光の特徴量と、複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量とに基づき、前記抽出された光の特徴量に対応する撮影装置を特定する照合手段と、
前記第１の撮影装置と前記特定された撮影装置とが一致するか否かの結果に基づき生体検知を行う生体検知手段と、
を有する処理システムが提供される。

【0006】

また、この開示によれば、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段と、
前記抽出された光の特徴量と、前記第１の撮影装置が撮影時に発する光の特徴を示す参照特徴量とを照合する照合手段と、
前記抽出された光の特徴量と前記参照特徴量とが一致するか否かの結果に基づき生体検知を行う生体検知手段と、
を有する処理システムが提供される。

【0007】

また、この開示によれば、
コンピュータが、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出し、
前記抽出された光の特徴量と、複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量とに基づき、前記抽出された光の特徴量に対応する撮影装置を特定し、
前記第１の撮影装置と前記特定された撮影装置とが一致するか否かの結果に基づき生体検知を行う処理方法が提供される。

【0008】

また、この開示によれば、
コンピュータが、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出し、
前記抽出された光の特徴量と、前記第１の撮影装置が撮影時に発する光の特徴を示す参照特徴量とを照合し、
前記抽出された光の特徴量と前記参照特徴量とが一致するか否かの結果に基づき生体検知を行う処理方法が提供される。

【0009】

また、この開示によれば、
コンピュータを、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段、
前記抽出された光の特徴量と、複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量とに基づき、前記抽出された光の特徴量に対応する撮影装置を特定する照合手段、
前記第１の撮影装置と前記特定された撮影装置とが一致するか否かの結果に基づき生体検知を行う生体検知手段、
として機能させるプログラムが提供される。

【0010】

また、この開示によれば、
コンピュータを、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段、
前記抽出された光の特徴量と、前記第１の撮影装置が撮影時に発する光の特徴を示す参照特徴量とを照合する照合手段、
前記抽出された光の特徴量と前記参照特徴量とが一致するか否かの結果に基づき生体検知を行う生体検知手段、
として機能させるプログラムが提供される。

【図面の簡単な説明】

【0011】

【図1】本実施形態の撮影装置と処理システムの関係の一例を説明するための機能ブロック図である。

【図2】本実施形態の処理システムのハードウエア構成の一例を示す図である。

【図3】本実施形態の処理システムの機能ブロック図の一例である。

【図4】本実施形態の処理システムの作用効果を説明するための図である。

【図5】本実施形態の処理システムが処理する情報の一例を模式的に示す図である。

【図6】本実施形態の処理システムの処理の一例を説明するための図である。

【図7】本実施形態の処理システムの処理の流れの一例を示すフローチャートである。

【図8】本実施形態の処理システムが処理する情報の一例を模式的に示す図である。

【図9】本実施形態の処理システムの処理の流れの一例を示すフローチャートである。

【図10】本実施形態の処理システムの処理の流れの一例を示すフローチャートである。

【図11】本実施形態の処理システムの処理の流れの一例を示すフローチャートである。

【図12】本実施形態の撮影装置と処理システムの関係の一例を説明するための機能ブロック図である。

【発明を実施するための形態】

【0012】

＜第１の実施形態＞
まず、図１を用いて、本実施形態の全体像及び概要を説明する。図示するように、本実施形態では、サーバ－クライアントシステムを採用する。サーバ１は、クライアント端末２から取得した虹彩画像や顔画像に基づく生体認証、及び、角膜部分の画像（以下、「角膜画像」）に基づく生体検知を行う。そして、サーバ１は、生体認証に成功し、かつ、生体から得られた画像と判定されたクライアント端末２に、所定の処理を許可する。所定の処理はサーバ１へのログインなどであるが、これに限定されない。

【0013】

本実施形態の生体認証は、あらゆる技術を採用して実現される。

【0014】

本実施形態の生体検知の概要は、次の通りである。まず、複数のクライアント端末２各々に設けられた撮影装置１０の中には、メーカ、型番、バージョン等が互いに異なるものが含まれる。なお、複数の撮影装置１０の中には、メーカ、型番、バージョン等が互いに一致するものが含まれてもよい。メーカ、型番、バージョン等が互いに異なる撮影装置１０は、光源の数、複数の光源の配列方法、レンズと光源との位置関係、複数の光源の発光のさせ方等の違いに起因して、撮影時に発する光の特徴が互いに異なり得る。結果、画像に含まれる人物の角膜に映る反射光の特徴（例：光のパターン、瞳孔内の位置等）も互いに異なり得る。撮影装置１０の光源が発する光は、赤外光であることが望ましいが、その他の光であってもよい。

【0015】

生体が撮影装置１０で撮影された場合には、生成された画像に含まれる人物の角膜で反射した光の特徴はその撮影装置１０に由来のものとなる。一方、生体でないもの、例えば他の撮影装置１０が生成した画像（印刷物）が撮影装置１０で撮影された場合には、生成された画像に含まれる人物の角膜で反射した光の特徴は他の撮影装置１０に由来のものとなる。

【0016】

本実施形態の処理システム２０は、このような特徴に基づき生体検知を行う。具体的には、処理システム２０は、第１の撮影装置１０が生成した画像から人物の角膜で反射した光の特徴量を抽出すると、抽出された光の特徴量と、複数の撮影装置１０各々が撮影時に発する光の特徴を示す参照特徴量とを照合し、抽出された光の特徴量に対応する撮影装置１０を特定する。そして、処理システム２０は、第１の撮影装置１０と特定された撮影装置１０とが一致する場合、生体から得られた画像と判定し、一致しない場合、生体から得られた画像でないと判定する。

【0017】

次に、本実施形態の処理システム２０の構成を詳細に説明する。まず、処理システム２０のハードウエア構成の一例を説明する。処理システム２０が備える各機能は、任意のコンピュータのＣＰＵ（Central Processing Unit）、メモリ、メモリにロードされるプログラム、そのプログラムを格納するハードディスク等の記憶ユニット（あらかじめ装置を出荷する段階から格納されているプログラムのほか、ＣＤ（Compact Disc）等の記憶媒体やインターネット上のサーバ等からダウンロードされたプログラムをも格納できる）、ネットワーク接続用インターフェイスを中心にハードウエアとソフトウエアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。

【0018】

図２は、処理システム２０のハードウエア構成を例示するブロック図である。図２に示すように、処理システム２０は、プロセッサ１Ａ、メモリ２Ａ、入出力インターフェイス３Ａ、周辺回路４Ａ、バス５Ａを有する。周辺回路４Ａには、様々なモジュールが含まれる。なお、周辺回路４Ａは有さなくてもよい。なお、処理システム２０は物理的及び／又は論理的に一体となった１つの装置で構成されてもよいし、物理的及び／又は論理的に分かれた複数の装置で構成されてもよい。物理的及び／又は論理的に分かれた複数の装置で構成される場合、複数の装置各々が上記ハードウエア構成を備えることができる。

【0019】

バス５Ａは、プロセッサ１Ａ、メモリ２Ａ、周辺回路４Ａ及び入出力インターフェイス３Ａが相互にデータを送受信するためのデータ伝送路である。プロセッサ１Ａは、例えばＣＰＵ、ＧＰＵ（Graphics Processing Unit）などの演算処理装置である。メモリ２Ａは、例えばＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）などのメモリである。入出力インターフェイス３Ａは、入力装置、外部装置、外部サーバ、外部センサ、カメラ等から情報を取得するためのインターフェイスや、出力装置、外部装置、外部サーバ等に情報を出力するためのインターフェイスなどを含む。入力装置は、例えばキーボード、マウス、マイク、タッチパネル、物理ボタン、カメラ等である。出力装置は、例えばディスプレイ、スピーカ、プリンター、メーラ等である。プロセッサ１Ａは、各モジュールに指令を出し、それらの演算結果をもとに演算を行うことができる。

【0020】

次に、処理システム２０の機能構成の一例を説明する。図３に、処理システム２０の機能ブロック図の一例を示す。図示するように、処理システム２０は、取得部２１と、抽出部２２と、照合部２３と、生体検知部２４と、記憶部２５とを有する。なお、処理システム２０は記憶部２５を有さなくてもよい。この場合、処理システム２０と通信可能に構成された外部装置が記憶部２５を備える。

【0021】

記憶部２５は、複数の撮影装置１０各々が撮影時に発する光の特徴を示す参照特徴量を記憶する。

【0022】

上述の通り、複数の撮影装置１０の中には、メーカ、型番、バージョン等が互いに異なるものが含まれる。そして、メーカ、型番、バージョン等が互いに異なる撮影装置１０は、光源の数、複数の光源の配列方法、レンズと光源との位置関係、複数の光源の発光のさせ方等の違いに起因して、撮影時に発する光の特徴が互いに異なり得る。結果、画像に含まれる人物の角膜に映る反射光の特徴（例：光のパターン、瞳孔内の位置等）も互いに異なり得る。例えば、図４に示すように、画像内の瞳孔ｐに重畳している反射光ｑのパターンや瞳孔ｐ内の反射光ｑの位置等が撮影装置１０毎に異なり得る。

【0023】

参照特徴量は、画像内の瞳孔ｐに重畳している反射光ｑのパターン、及び、画像内での瞳孔ｐ内における反射光ｑの位置の少なくとも一方を示すことができる。また、参照特徴量は、画像内の右目及び左目各々における上記反射光ｑの特徴を示してもよい。右目及び左目において、反射光の特徴（瞳孔内の位置など）が異なり得る。

【0024】

図５に、記憶部２５が記憶する情報の一例を模式的に示す。図示する例では、撮影装置識別情報と、参照特徴量とが互いに対応付けられている。

【0025】

図３に戻り、取得部２１は、複数の撮影装置１０各々が生成した画像と、各画像を生成した撮影装置１０を識別する情報（撮影装置識別情報）とを取得する。例えば、クライアント端末２（図１参照）は自端末に対応する撮影装置１０が生成した画像、及び、撮影装置識別情報をサーバ１に送信する。そして、取得部２１は、クライアント端末２から送信された画像及び撮影装置識別情報を取得する。

【0026】

なお、本明細書において、「取得」とは、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置が他の装置や記憶媒体に格納されているデータを取りに行くこと（能動的な取得）」、たとえば、他の装置にリクエストまたは問い合わせして受信すること、他の装置や記憶媒体にアクセスして読出すこと等、および、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置に他の装置から出力されるデータを入力すること（受動的な取得）」、たとえば、外部装置から送信されたデータを受信できる状態で待機しており、外部装置から送信されたデータを受信すること、外部装置から配信（または、送信、プッシュ通知等）されるデータを受信すること、また、受信したデータまたは情報の中から選択して取得すること、及び、「データを編集（テキスト化、データの並び替え、一部データの抽出、ファイル形式の変更等）などして新たなデータを生成し、当該新たなデータを取得すること」の少なくともいずれか一方を含む。

【0027】

抽出部２２は、撮影装置１０が生成した画像から、人物の角膜で反射した光の特徴量を抽出する。例えば、抽出部２２は、テンプレートマッチングやエッジ検出技術等のあらゆる画像解析技術を利用して、画像に含まれる人物の顔、人物の目、人物の瞳孔、瞳孔内の反射光等を検出する。そして、抽出部２２は、検出結果に基づき、瞳孔に重畳している反射光のパターン及び瞳孔内の反射光の位置の少なくとも一方を特定する。

【0028】

照合部２３は、抽出部２２により抽出された光の特徴量と、記憶部２５に記憶されている複数の撮影装置１０各々の参照特徴量とに基づき、抽出部２２により抽出された光の特徴量に対応する撮影装置１０を特定する。

【0029】

例えば、照合部２３は、抽出部２２により抽出された光の特徴量と、記憶部２５に記憶されている複数の撮影装置１０各々の参照特徴量とを照合し、抽出部２２により抽出された光の特徴量と一致（類似度が所定レベル以上）する参照特徴量を特定してもよい。そして、照合部２３は、特定した参照特徴量に対応する撮影装置１０を、抽出部２２により抽出された光の特徴量に対応する撮影装置１０として特定してもよい。

【0030】

その他、複数の撮影装置１０各々と、各撮影装置１０が生成した人物の顔画像（又は、各撮影装置１０の参照特徴量）とを対応付けた教師データに基づく機械学習で、人物の角膜で反射した光の特徴量からその顔画像を生成した撮影装置１０を推定する推定モデルが生成されてもよい。そして、照合部２３は、当該推定モデルと抽出部２２が抽出した光の特徴量とに基づき、その光の特徴量に対応する撮影装置１０の推定結果を得てもよい。なお、本願において生体検知で利用する「顔画像」は、人物の目を含む画像であればよく、必ずしも人の顔全体が含まれる必要はない。

【0031】

図６に、当該処理の概要を示す。図示するように、推定モデルの推定結果では、各撮影装置１０で生成された画像である確信度が示されてもよい。そして、照合部２３は、当該確信度が所定条件（例：最大値かつ閾値以上）を満たす撮影装置１０を、抽出部２２により抽出された光の特徴量に対応する撮影装置１０として特定してもよい。

【0032】

図３に戻り、生体検知部２４は、取得部２１が取得した画像を生成した撮影装置１０と、照合部２３により特定された撮影装置１０とが一致するか否かの結果に基づき、生体検知を行う。

【0033】

具体的には、取得部２１が取得した画像を生成した撮影装置１０と、照合部２３により特定された撮影装置１０とが一致する場合、生体検知部２４は、取得部２１が取得した画像は生体から得られた画像と判定する。生体から得られた画像は、撮影装置１０が生体そのものを撮影することで生成された画像を意味する。

【0034】

一方、取得部２１が取得した画像を生成した撮影装置１０と、照合部２３により特定された撮影装置１０とが一致しない場合、生体検知部２４は、取得部２１が取得した画像は生体から得られた画像でないと判定する。生体から得られたものでない画像は、例えば、撮影装置１０が印刷物を撮影することで生成された画像などである。

【0035】

次に、図７のフローチャートを用いて、処理システム２０の処理の流れの一例を説明する。なお、各機能部が行う処理の詳細は上述したので、ここでは省略する。

【0036】

まず、取得部２１が、画像及び撮影装置識別情報を取得する（Ｓ１０及びＳ１１）。そして、抽出部２２が、Ｓ１０で取得した画像から、人物の角膜で反射した光の特徴量を抽出する（Ｓ１２）。

【0037】

次いで、照合部２３が、Ｓ１２で抽出された光の特徴量と、記憶部２５に記憶されている複数の撮影装置１０各々の参照特徴量とに基づき、Ｓ１２で抽出された光の特徴量に対応する撮影装置１０を特定する（Ｓ１３）。

【0038】

そして、Ｓ１３で特定した撮影装置１０と、Ｓ１１で取得した撮影装置識別情報が示す撮影装置１０とが一致する場合（Ｓ１４のＹｅｓ）、生体検知部２４は、Ｓ１０で取得した画像は生体から得られた画像と判定する（Ｓ１５）。一方、Ｓ１３で特定した撮影装置１０と、Ｓ１１で取得した撮影装置識別情報が示す撮影装置１０とが一致しない場合（Ｓ１４のＮｏ）、生体検知部２４は、Ｓ１０で取得した画像は生体から得られた画像でないと判定する（Ｓ１６）。

【0039】

以上、本実施形態の撮影装置１０と処理システム２０によれば、１枚の画像に基づき生体検知できる技術が実現される。また、１枚の画像に基づき生体検知できるので、複数の画像を解析することによるコンピュータの処理負担の増加を軽減できる。また、角膜反射の変化に基づき生体検知する場合に必要となる照明の色やパターンが変化するカメラを用意する必要がないので、コスト負担の増加を軽減できる。

【0040】

＜第２の実施形態＞
本実施形態では、複数の撮影装置１０は、撮影時に発する光をランダムに又は規則的に変化させる。例えば、あるタイミングでは１つの光源を発光させ、他のタイミングでは複数の光源を発光させるといった具合である。

【0041】

そして、処理システム２０は、人物が撮影された時に複数の撮影装置１０各々が発する光の種別を示す発光種別情報を取得し、当該発光種別情報に基づき、抽出された光の特徴量に対応する撮影装置１０を特定する。以下、詳細に説明する。

【0042】

本実施形態の処理システム２０の機能ブロック図の一例は、図３で示される。

【0043】

記憶部２５は、複数の撮影装置１０各々が撮影時に発する光の特徴を示す参照特徴量を記憶する。図８に、記憶部２５が記憶する情報の一例を模式的に示す。図示する例では、撮影装置識別情報と、発光種別と、参照特徴量とが互いに対応付けられている。図示するように、記憶部２５は、各撮影装置１０に対応付けて、各撮影装置１０の複数の参照特徴量のバリエーションを記憶する。

【0044】

照合部２３は、人物が撮影された時に複数の撮影装置１０各々が発する光の種別を示す発光種別情報を取得する。照合部２３は、発光種別情報を撮影装置１０から取得してもよいし、所定のルールに基づき算出してもよい。

【0045】

例えば、撮影装置１０は、予め定められた所定のタイミングで、又は、ランダムなタイミングで、発する光の種別（以下、「発光種別」という場合がある）を切り替える。そして、撮影装置１０は、発光種別を切り替えると、その都度、新たな発光種別を処理システム２０に通知する。照合部２３は、撮影装置１０からの通知に基づき、複数の撮影装置１０各々の最新の発光種別を管理する。

【0046】

予め定められた所定のタイミングは、５分毎、３０分毎、１時間毎、１日毎等、一定時間毎であってもよい。互いに異なる発光種別は、光源の発光のさせ方が互いに異なる。例えば、ある発光種別では１つの光源を発光させ、他の発光種別では複数の光源を発光させるといった具合である。発光種別の切り替え方は様々であるが、例えば、撮影装置１０は、複数の発光種別を予め定められた順で切り替えてもよいし、複数の発光種別の中からランダムに新たな１つを決定してもよい。

【0047】

その他、撮影装置１０は、任意のキーと、予め定められた算出ルールとに基づき、各撮影タイミングで発する光の種別を決定してもよい。例えば、撮影タイミングにおける日時に含まれる任意の数字（例：月、日、時、分等）をキーとしてもよい。そして、照合部２３は、各撮影装置１０の上記算出ルールを予め記憶しておき、当該算出ルールと、自システムで取得したキーとに基づき、撮影装置１０各々が各タイミングで発する光の種別を算出してもよい。

【0048】

なお、照合部２３が発光種別情報を取得する手段は上記例に限定されず、その他の手段が採用されてもよい。

【0049】

そして、照合部２３は、取得した発光種別情報に基づき、抽出部２２で抽出された光の特徴量に対応する撮影装置１０を特定する。

【0050】

例えば、照合部２３は、抽出部２２により抽出された光の特徴量と、取得部２１が取得した画像の撮影時に複数の撮影装置１０各々が発する光の特徴を示す参照特徴量（発光種別情報に基づき特定される）とを照合し、抽出部２２により抽出された光の特徴量と一致する参照特徴量を特定してもよい。そして、照合部２３は、特定した参照特徴量に対応する撮影装置１０を、抽出部２２により抽出された光の特徴量に対応する撮影装置１０として特定してもよい。

【0051】

その他、複数の撮影装置１０各々と、取得部２１が取得した画像の撮影時に複数の撮影装置１０各々が発する光の特徴を示す参照特徴量（又は、当該光を発した時に生成された画像）とを対応付けた教師データに基づく機械学習で、人物の角膜で反射した光の特徴量からその顔画像を生成した撮影装置１０を推定する推定モデルが生成されてもよい。そして、照合部２３は、当該推定モデルと抽出部２２が抽出した光の特徴量とに基づき、その光の特徴量に対応する撮影装置１０の推定結果を得てもよい。

【0052】

撮影装置１０及び処理システム２０のその他の構成は、第１の実施形態と同様である。

【0053】

以上、本実施形態の撮影装置１０と処理システム２０によれば、第１の実施形態と同様の作用効果が実現される。また、撮影装置１０が撮影時に発する光をランダムに又は規則的に変化させながら第１の実施形態で説明した生体検知を行うことができるので、不正行為をより効果的に排除することができる。

【0054】

＜第３の実施形態＞
本実施形態の処理システム２０は、第１の撮影装置１０が生成した画像から抽出された光の特徴量と、第１の撮影装置１０が撮影時に発する光の特徴を示す参照特徴量とが一致するか否かに基づき生体検知を行う点で、第１及び第２の実施形態と異なる。

【0055】

本実施形態の処理システム２０の機能ブロック図の一例は、図３で示される。

【0056】

照合部２３は、抽出部２２により抽出された光の特徴量と、取得部２１が取得した撮影装置識別情報で示される撮影装置１０が撮影時に発する光の特徴を示す参照特徴量とを照合する。

【0057】

生体検知部２４は、抽出部２２により抽出された光の特徴量と参照特徴量とが一致するか否かの結果に基づき生体検知を行う。

【0058】

具体的には、抽出部２２により抽出された光の特徴量と参照特徴量とが一致する場合、生体検知部２４は、取得部２１が取得した画像は生体から得られた画像と判定する。一方、抽出部２２により抽出された光の特徴量と参照特徴量とが一致しない場合、生体検知部２４は、取得部２１が取得した画像は生体から得られた画像でないと判定する。

【0059】

次に、図９のフローチャートを用いて、処理システム２０の処理の流れの一例を説明する。なお、各機能部が行う処理の詳細は上述したので、ここでは省略する。

【0060】

まず、取得部２１が、画像及び撮影装置識別情報を取得する（Ｓ２０及びＳ２１）。そして、照合部２３が、Ｓ２１で取得した撮影装置識別情報に対応する参照特徴量を記憶部２５（図５参照）から取り出す（Ｓ２２）。また、抽出部２２が、Ｓ２０で取得した画像から、人物の角膜で反射した光の特徴量を抽出する（Ｓ２３）。なお、Ｓ２２及びＳ２３の処理順は図示する例に限定されない。

【0061】

次いで、照合部２３が、Ｓ２３で抽出された光の特徴量と、Ｓ２２で取得した参照特徴量とを照合する（Ｓ２４）

【0062】

Ｓ２３で抽出された光の特徴量と、Ｓ２２で取得した参照特徴量とが一致する場合（Ｓ２５のＹｅｓ）、生体検知部２４は、Ｓ２０で取得した画像は生体から得られた画像と判定する（Ｓ２６）。一方、Ｓ２３で抽出された光の特徴量と、Ｓ２２で取得した参照特徴量とが一致しない場合（Ｓ２５のＮｏ）、生体検知部２４は、Ｓ２０で取得した画像は生体から得られた画像でないと判定する（Ｓ２７）。

【0063】

撮影装置１０及び処理システム２０のその他の構成は、第１の実施形態と同様である。

【0064】

以上、本実施形態の撮影装置１０と処理システム２０によれば、第１の実施形態と同様の作用効果が実現される。また、第１の実施形態と異なる処理で第１の実施形態と同様の作用効果が実現されるので、設計の幅が広がり好ましい。

【0065】

＜第４の実施形態＞
本実施形態では、複数の撮影装置１０は、撮影時に発する光をランダムに又は規則的に変化させる。例えば、あるタイミングでは１つの光源を発光させ、他のタイミングでは複数の光源を発光させるといった具合である。

【0066】

そして、処理システム２０は、取得した画像が生成された時にその画像を生成した撮影装置１０が発した光の種別を示す発光種別情報を取得し、当該発光種別情報で示される光の特徴を示す参照特徴量を用いた照合処理を行う。以下、詳細に説明する。

【0067】

本実施形態の処理システム２０の機能ブロック図の一例は、図３で示される。

【0068】

記憶部２５は、複数の撮影装置１０各々が撮影時に発する光の特徴を示す参照特徴量を記憶する。図８に、記憶部２５が記憶する情報の一例を模式的に示す。図示する例では、撮影装置識別情報と、発光種別と、参照特徴量とが互いに対応付けられている。図示するように、記憶部２５は、各撮影装置１０に対応付けて、各撮影装置１０の複数の参照特徴量のバリエーションを記憶する。

【0069】

照合部２３は、取得部２１が取得した画像が生成された時（撮影時）にその画像を生成した撮影装置１０が発した光の種別を示す発光種別情報を取得する。照合部２３が発光種別情報を取得する手段は、第２の実施形態で説明したものと同様である。

【0070】

そして、照合部２３は、抽出部２２により抽出された光の特徴量と、取得した発光種別情報で示される光の特徴を示す参照特徴量とを照合する。

【0071】

次に、図１０のフローチャートを用いて、処理システム２０の処理の流れの一例を説明する。なお、各機能部が行う処理の詳細は上述したので、ここでは省略する。

【0072】

まず、取得部２１が、画像及び撮影装置識別情報を取得する（Ｓ３０及びＳ３１）。次いで、照合部２３が、Ｓ３０で取得した画像生成時に撮影装置１０が発した光の種別を示す発光種別情報を取得する（Ｓ３２）。そして、照合部２３が、Ｓ３１で取得した撮影装置識別情報、及び、Ｓ３２で取得した発光種別識別情報に対応する参照特徴量を記憶部２５（図８参照）から取り出す（Ｓ３３）。また、抽出部２２が、Ｓ３０で取得した画像から、人物の角膜で反射した光の特徴量を抽出する（Ｓ３４）。なお、Ｓ３２及びＳ３３と、Ｓ３４との処理順は図示する例に限定されない。

【0073】

次いで、照合部２３が、Ｓ３４で抽出された光の特徴量と、Ｓ３３で取得した参照特徴量とを照合する（Ｓ３５）

【0074】

Ｓ３４で抽出された光の特徴量と、Ｓ３３で取得した参照特徴量とが一致する場合（Ｓ３６のＹｅｓ）、生体検知部２４は、Ｓ３０で取得した画像は生体から得られた画像と判定する（Ｓ３７）。一方、Ｓ３４で抽出された光の特徴量と、Ｓ３３で取得した参照特徴量とが一致しない場合（Ｓ３６のＮｏ）、生体検知部２４は、Ｓ３０で取得した画像は生体から得られた画像でないと判定する（Ｓ３８）。

【0075】

撮影装置１０及び処理システム２０のその他の構成は、第３の実施形態と同様である。

【0076】

以上、本実施形態の撮影装置１０と処理システム２０によれば、第３の実施形態と同様の作用効果が実現される。また、撮影装置１０が撮影時に発する光をランダムに又は規則的に変化させながら第３の実施形態で説明した生体検知を行うことができるので、不正行為をより効果的に排除することができる。

【0077】

＜第５の実施形態＞
本実施形態では、「第１乃至第４の実施形態の中のいずれかの生体検知処理」と、「撮影装置１０が発する光を変化させて同一人物を複数回撮影することで生成された複数の画像に基づく生体検知処理」とを組み合わせた生体検知を行う。以下、詳細に説明する。

【0078】

本実施形態の処理システム２０の機能ブロック図の一例は、図３で示される。

【0079】

本実施形態では、撮影装置１０は、発する光を変化させて同一人物を複数回撮影し、同一人物を含む複数の画像を生成する。例えば、あるタイミングでは１つの光源を発光させて撮影し、他のタイミングでは他の光源（又は複数の光源）を発光させて撮影するといった具合である。

【0080】

抽出部２２は、複数の画像各々から、人物の角膜で反射した光の特徴量を抽出する。

【0081】

照合部２３は、同一人物を含む複数の画像各々から抽出された光の特徴量どうしを照合する。

【0082】

生体検知部２４は、同一人物を含む複数の画像各々から抽出された光の特徴量に基づき生体検知を行う。具体的には、生体検知部２４は、前記複数の画像各々から抽出された光の特徴量どうしが所定の関係を満たすか否かの結果に基づき生体検知を行う。所定の関係は「複数の画像各々から抽出された光の特徴量が互いに一致しない」、「複数の画像各々から抽出された光の特徴量が示す発光位置の相対的な関係が所定の関係を満たす」などであるが、これらに限定されない。

【0083】

例えば、あるタイミングでは１つの光源を発光させて撮影し、他のタイミングでは他の１つの光源を発光させて撮影した場合、この非常に短い２つのタイミングの間に被撮影者がほとんど動いていないことを前提とすると、あるタイミングで生成した画像における瞳孔内の反射光の位置と、他のタイミングで生成した画像における瞳孔内の反射光の位置とは互いに異なる。また、その相対的な関係は、２つの光源の相対的な位置関係、及び、カメラと光源と被撮影者との間の相対的な位置関係等に基づき算出できる。

【0084】

次に、図１１のフローチャートを用いて、処理システム２０の処理の流れの一例を説明する。なお、各機能部が行う処理の詳細は上述したので、ここでは省略する。

【0085】

まず、取得部２１が、複数の画像及び撮影装置識別情報を取得する（Ｓ４０及びＳ４１）。ここでは、取得部２１は、先のタイミングで撮影された画像と後のタイミングで撮影された画像を取得するものとする。なお、先の撮影タイミングと後の撮影タイミングにおいては、撮影装置１０が発した光の種別が異なる。そして、抽出部２２が、Ｓ４０で取得した複数の画像各々から、人物の角膜で反射した光の特徴量を抽出する（Ｓ４２）。

【0086】

次いで、照合部２３が、先のタイミングで撮影された画像から抽出された光の特徴量と、記憶部２５に記憶されている複数の撮影装置１０各々の参照特徴量（先のタイミングの撮影時に発する光の特徴を示す参照特徴量）とに基づき、Ｓ４２で抽出された光の特徴量に対応する撮影装置１０を特定する（Ｓ４３）。予め、撮影装置１０毎に先のタイミングで発する光の種別が決定されており、その情報を処理システム２０に記憶されていてもよい。なお、ここの処理は、「先のタイミング」を「後のタイミング」に置き換えてもよい。

【0087】

そして、Ｓ４３で特定した撮影装置１０と、Ｓ４１で取得した撮影装置識別情報が示す撮影装置１０とが一致する場合（Ｓ４４のＹｅｓ）、照合部２３は、先のタイミングで撮影された画像から抽出された光の特徴量と、後のタイミングで撮影された画像から抽出された光の特徴量とが所定の関係を満たすか判断する（Ｓ４５）。所定の関係は、上述した通りである。

【0088】

先のタイミングで撮影された画像から抽出された光の特徴量と、後のタイミングで撮影された画像から抽出された光の特徴量とが所定の関係を満たす場合（Ｓ４６のＹｅｓ）、生体検知部２４は、Ｓ４０で取得した画像は生体から得られた画像と判定する（Ｓ４７）。

【0089】

一方、Ｓ４３で特定した撮影装置１０と、Ｓ４１で取得した撮影装置識別情報が示す撮影装置１０とが一致しない場合（Ｓ２３のＮｏ）、また、先のタイミングで撮影された画像から抽出された光の特徴量と、後のタイミングで撮影された画像から抽出された光の特徴量とが所定の関係を満たさない場合（Ｓ４６のＮｏ）、生体検知部２４は、Ｓ４０で取得した画像は生体から得られた画像でないと判定する（Ｓ４８）。

【0090】

なお、Ｓ４０乃至Ｓ４３の処理は、図９のＳ２０乃至Ｓ２５、又は、図１０のＳ３０乃至Ｓ３６に置き換えてもよい。

【0091】

撮影装置１０及び処理システム２０のその他の構成は、第１乃至第４の実施形態のいずれかと同様である。

【0092】

以上、本実施形態の撮影装置１０と処理システム２０によれば、複数の生体検知処理を組み合わせることで、生体検知の精度が向上する。

【0093】

＜第６の実施形態＞
本実施形態の撮影装置１０と処理システム２０は、図１２に示すように１対１の関係である。撮影装置１０と処理システム２０とは、物理的及び／又は論理的に分かれていてもよいし、物理的及び／又は論理的に一体となっていてもよい。

【0094】

このような本実施形態の場合、処理システム２０の記憶部２５は、対応する撮影装置１０の参照特徴量のみを記憶する。そして、取得部２１は、撮影装置識別情報を取得する必要がない。撮影装置１０及び処理システム２０のその他の構成は、第１乃至第４の実施形態のいずれかと同様である。

【0095】

以上、本実施形態の撮影装置１０と処理システム２０によれば、第１乃至第５の実施形態と同様の作用効果を実現できる。

【0096】

＜変形例＞
ここで、すべての実施形態に適用可能な変形例を説明する。処理システム２０は、各撮影装置１０から取得した画像を、各撮影装置１０の撮影装置識別情報に対応付けて蓄積してもよい。そして、当該蓄積したデータを、上述した推定モデル（図６参照）を生成するための教師データとして利用してもよい。

【0097】

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限定されない。
１． 第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段と、
前記抽出された光の特徴量と、複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量とに基づき、前記抽出された光の特徴量に対応する撮影装置を特定する照合手段と、
前記第１の撮影装置と前記特定された撮影装置とが一致するか否かの結果に基づき生体検知を行う生体検知手段と、
を有する処理システム。
２． １に記載の処理システムにおいて、
前記複数の撮影装置は、撮影時に発する光をランダムに又は規則的に変化させ、
前記照合手段は、前記人物が撮影された時に前記複数の撮影装置各々が発する光の種別を示す発光種別情報を取得し、前記発光種別情報に基づき、前記抽出された光の特徴量に対応する撮影装置を特定する処理システム。
３． 第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段と、
前記抽出された光の特徴量と、前記第１の撮影装置が撮影時に発する光の特徴を示す参照特徴量とを照合する照合手段と、
前記抽出された光の特徴量と前記参照特徴量とが一致するか否かの結果に基づき生体検知を行う生体検知手段と、
を有する処理システム。
４． ３に記載の処理システムにおいて、
前記第１の撮影装置は、発する光をランダムに又は規則的に変化させ、
前記照合手段は、前記第１の撮影装置が前記人物を撮影した時に発した光の種別を示す発光種別情報を取得し、前記抽出された光の特徴量と、前記発光種別情報で示される光の特徴を示す前記参照特徴量とを照合する処理システム。
５． １から４のいずれかに記載の処理システムにおいて、
前記第１の撮影装置は、発する光を変化させて同一人物を含む複数の画像を生成し、
前記生体検知手段は、前記複数の画像各々から抽出された光の特徴量に基づき生体検知を行う処理システム。
６． ５に記載の処理システムにおいて、
前記照合手段は、前記複数の画像各々から抽出された光の特徴量どうしを照合し、
前記生体検知手段は、前記複数の画像各々から抽出された光の特徴量どうしが一致するか否かの結果に基づき生体検知を行う処理システム。
７． １から６のいずれかに記載の処理システムにおいて、
前記抽出手段は、光のパターン、及び、瞳孔内の光の位置の少なくとも一方を示す特徴量を抽出する処理システム。
８． １から７のいずれかに記載の処理システムにおいて、
前記抽出手段は、右目及び左目各々の角膜で反射した光の特徴量を抽出する処理システム。
９． コンピュータが、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出し、
前記抽出された光の特徴量と、複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量とに基づき、前記抽出された光の特徴量に対応する撮影装置を特定し、
前記第１の撮影装置と前記特定された撮影装置とが一致するか否かの結果に基づき生体検知を行う処理方法。
１０． コンピュータが、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出し、
前記抽出された光の特徴量と、前記第１の撮影装置が撮影時に発する光の特徴を示す参照特徴量とを照合し、
前記抽出された光の特徴量と前記参照特徴量とが一致するか否かの結果に基づき生体検知を行う処理方法。
１１． コンピュータを、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段、
前記抽出された光の特徴量と、複数の撮影装置各々が撮影時に発する光の特徴を示す参照特徴量とに基づき、前記抽出された光の特徴量に対応する撮影装置を特定する照合手段、
前記第１の撮影装置と前記特定された撮影装置とが一致するか否かの結果に基づき生体検知を行う生体検知手段、
として機能させるプログラム。
１２． コンピュータを、
第１の撮影装置が生成した画像から、人物の角膜で反射した光の特徴量を抽出する抽出手段、
前記抽出された光の特徴量と、前記第１の撮影装置が撮影時に発する光の特徴を示す参照特徴量とを照合する照合手段、
前記抽出された光の特徴量と前記参照特徴量とが一致するか否かの結果に基づき生体検知を行う生体検知手段、
として機能させるプログラム。

【0098】

以上、実施形態（及び実施例）を参照してこの開示を説明したが、この開示は上記実施形態（及び実施例）に限定されるものではない。この開示の構成や詳細には、この開示のスコープ内で当業者が理解し得る様々な変更をすることができる。

【0099】

この出願は、２０１９年６月６日に出願された日本出願特願２０１９－１０５９０４号を基礎とする優先権を主張し、その開示の全てをここに取り込む。

【符号の説明】

【0100】

１Ａ プロセッサ
２Ａ メモリ
３Ａ 入出力Ｉ／Ｆ
４Ａ 周辺回路
５Ａ バス
１ サーバ
２ クライアント端末
１０ 撮影装置
２０ 処理システム
２１ 取得部
２２ 抽出部
２３ 照合部
２４ 生体検知部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】