特許 7567925 情報処理装置、情報処理方法、及び、プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-10-07

(45)【発行日】2024-10-16

(54)【発明の名称】情報処理装置、情報処理方法、及び、プログラム

(51)【国際特許分類】

   G06Q 50/10 20120101AFI20241008BHJP

【ＦＩ】

G06Q50/10

【請求項の数】 9

(21)【出願番号】P 2022553390

(86)(22)【出願日】2020-10-02

(86)【国際出願番号】 JP2020037522

(87)【国際公開番号】W WO2022070400

(87)【国際公開日】2022-04-07

【審査請求日】2023-03-27

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100107331

【弁理士】

【氏名又は名称】中村 聡延

(74)【代理人】

【識別番号】100104765

【弁理士】

【氏名又は名称】江上 達夫

(74)【代理人】

【識別番号】100131015

【弁理士】

【氏名又は名称】三輪 浩誉

(72)【発明者】

【氏名】早坂 昭裕

【審査官】加内 慎也

(56)【参考文献】

【文献】特開２００４－２０２７６６（ＪＰ，Ａ）

【文献】特開２０２０－０６４５４１（ＪＰ，Ａ）

【文献】特開２０１７－０２１６０３（ＪＰ，Ａ）

【文献】特開２０１１－０６０１０７（ＪＰ，Ａ）

【文献】国際公開第２０１８／２２５３９１（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

(57)【特許請求の範囲】

【請求項1】

証明書を撮影し、証明書画像を生成する証明書撮影手段と、
前記証明書から第１のハッシュ値を取得する取得手段と、
前記証明書画像から、券面情報を読み取る読取手段と、
前記券面情報を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較する比較手段と、
ユーザの顔画像を撮影する顔画像撮影手段と、
撮影された顔画像と、前記証明書画像から読み取られた顔画像とを比較する顔認証手段と、
カメラにより撮像されているユーザの顔画像と、前記ユーザの顔方向に応じて移動するカーソルと、目標点とを表示する表示手段と、
前記第１のハッシュ値と前記第２のハッシュ値が一致し、かつ、前記撮影された顔画像と前記証明書画像から読み取られた顔画像とが一致した場合に、前記証明書画像、又は、前記券面情報を登録する登録手段と、
を備え、
前記顔画像撮影手段は、前記カーソルの位置と前記目標点の位置が一致する場合に前記顔画像を撮影する情報処理装置。

【請求項2】

前記顔画像撮影手段は、前記証明書撮影手段が前記証明書を撮影するのと同時に、前記顔画像を撮影する請求項１に記載の情報処理装置。

【請求項3】

前記第１のハッシュ値は、前記証明書にコード情報として記載されており、
前記取得手段は、前記証明書画像から当該コード情報を読み取って前記第１のハッシュ値を取得する請求項１又は２に記載の情報処理装置。

【請求項4】

前記第１のハッシュ値は、前記証明書に電子透かしとして設けられており、
前記取得手段は、前記証明書画像から当該電子透かしを読み取って前記第１のハッシュ値を取得する請求項１又は２に記載の情報処理装置。

【請求項5】

前記証明書は記憶部を備え、前記第１のハッシュ値は前記記憶部に記憶されており、
前記取得手段は、前記証明書の記憶部から前記第１のハッシュ値を読み取る請求項１又は２に記載の情報処理装置。

【請求項6】

前記比較手段は、前記券面情報に含まれる文字情報と顔画像とを合わせたデータ列から前記第２のハッシュ値を生成する請求項１乃至５のいずれか一項に記載の情報処理装置。

【請求項7】

前記比較手段は、前記券面情報に含まれる文字情報から生成したハッシュ値と、前記券面情報に含まれる顔画像から生成したハッシュ値を結合して前記第２のハッシュ値を生成する請求項１乃至６のいずれか一項に記載の情報処理装置。

【請求項8】

コンピュータにより実行される情報処理方法であって、
証明書を撮影し、証明書画像を生成し、
前記証明書から第１のハッシュ値を取得し、
前記証明書画像から、券面情報を読み取り、
前記券面情報を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較し、
ユーザの顔画像を撮影し、
撮影された顔画像と、前記証明書画像から読み取られた顔画像とを比較し、
カメラにより撮像されているユーザの顔画像と、前記ユーザの顔方向に応じて移動するカーソルと、目標点とを表示し、
前記第１のハッシュ値と前記第２のハッシュ値が一致し、かつ、前記撮影された顔画像と前記証明書画像から読み取られた顔画像とが一致した場合に、前記証明書画像、又は、前記券面情報を登録し、
前記カーソルの位置と前記目標点の位置が一致する場合に前記顔画像を撮影する情報処理方法。

【請求項9】

証明書を撮影し、証明書画像を生成し、
前記証明書から第１のハッシュ値を取得し、
前記証明書画像から、券面情報を読み取り、
前記券面情報を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較し、
ユーザの顔画像を撮影し、
撮影された顔画像と、前記証明書画像から読み取られた顔画像とを比較し、
カメラにより撮像されているユーザの顔画像と、前記ユーザの顔方向に応じて移動するカーソルと、目標点とを表示し、
前記第１のハッシュ値と前記第２のハッシュ値が一致し、かつ、前記撮影された顔画像と前記証明書画像から読み取られた顔画像とが一致した場合に、前記証明書画像、又は、前記券面情報を登録し、
前記カーソルの位置と前記目標点の位置が一致する場合に前記顔画像を撮影する処理をコンピュータに実行させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、証明書を電子化する方法に関する。

【背景技術】

【0002】

近年、運転免許証やパスポートなどの顔写真を含む公的証明書が紙媒体からデジタルデータへと徐々に置き換わりつつある。公的証明書のデジタル化に伴い、デジタル化する公的証明書が本物であること、即ち、偽造されたものでないことを確認する必要がある。特許文献１は、運転免許証の画像データからＯＣＲ処理により文字・記号等を認識し、認識した文字・記号等が所定のルールに適合するか否かにより証明書の真贋判定を行う手法を記載している。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１７－１２０５７０号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１の手法では、証明書の画像データから抽出された文字・記号等に基づいて証明書の真贋判定を行うが、証明書に表示されている顔画像に関するチェックについては記載されていない。このため、悪意ある人物が証明書の顔画像を改ざんしたり、他人の証明書を登録したりすることを防止できない。

【0005】

本発明の１つの目的は、証明書に含まれる情報が一致する場合でも、証明書の真贋を判定することが可能な情報処理装置を提供することにある。

【課題を解決するための手段】

【0006】

本発明の一つの観点は、情報処理装置であって、
証明書を撮影し、証明書画像を生成する証明書撮影手段と、
前記証明書から第１のハッシュ値を取得する取得手段と、
前記証明書画像から、券面情報を読み取る読取手段と、
前記券面情報を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較する比較手段と、
ユーザの顔画像を撮影する顔画像撮影手段と、
撮影された顔画像と、前記証明書画像から読み取られた顔画像とを比較する顔認証手段と、
カメラにより撮像されているユーザの顔画像と、前記ユーザの顔方向に応じて移動するカーソルと、目標点とを表示する表示手段と、
前記第１のハッシュ値と前記第２のハッシュ値が一致し、かつ、前記撮影された顔画像と前記証明書画像から読み取られた顔画像とが一致した場合に、前記証明書画像、又は、前記券面情報を登録する登録手段と、
を備え、
前記顔画像撮影手段は、前記カーソルの位置と前記目標点の位置が一致する場合に前記顔画像を撮影する。

【0007】

本発明の他の観点は、コンピュータにより実行される情報処理方法であって、
証明書を撮影し、証明書画像を生成し、
前記証明書から第１のハッシュ値を取得し、
前記証明書画像から、券面情報を読み取り、
前記券面情報を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較し、
ユーザの顔画像を撮影し、
撮影された顔画像と、前記証明書画像から読み取られた顔画像とを比較し、
カメラにより撮像されているユーザの顔画像と、前記ユーザの顔方向に応じて移動するカーソルと、目標点とを表示し、
前記第１のハッシュ値と前記第２のハッシュ値が一致し、かつ、前記撮影された顔画像と前記証明書画像から読み取られた顔画像とが一致した場合に、前記証明書画像、又は、前記券面情報を登録し、
前記カーソルの位置と前記目標点の位置が一致する場合に前記顔画像を撮影する。

【0008】

本発明の他の観点は、プログラムであって、
証明書を撮影し、証明書画像を生成し、
前記証明書から第１のハッシュ値を取得し、
前記証明書画像から、券面情報を読み取り、
前記券面情報を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較し、
ユーザの顔画像を撮影し、
撮影された顔画像と、前記証明書画像から読み取られた顔画像とを比較し、
カメラにより撮像されているユーザの顔画像と、前記ユーザの顔方向に応じて移動するカーソルと、目標点とを表示し、
前記第１のハッシュ値と前記第２のハッシュ値が一致し、かつ、前記撮影された顔画像と前記証明書画像から読み取られた顔画像とが一致した場合に、前記証明書画像、又は、前記券面情報を登録し、
前記カーソルの位置と前記目標点の位置が一致する場合に前記顔画像を撮影する処理をコンピュータに実行させる。

【発明の効果】

【0009】

本発明によれば、証明書に含まれる情報が一致する場合でも、証明書の真贋を判定することが可能となる。

【図面の簡単な説明】

【0010】

【図1】第１実施形態に係る端末装置のハードウェア構成を示す。

【図2】第１実施形態に係る端末装置の機能構成を示す。

【図3】証明書にハッシュ値を埋め込む例を示す。

【図4】第１実施形態による証明書電子化処理のフローチャートである。

【図5】第２実施形態に係る端末装置の機能構成を示す。

【図6】第２実施形態による証明書電子化処理のフローチャートである。

【図7】第３実施形態に係る端末装置の構成を示す。

【図8】証明書画像を撮影する様子を示す。

【図9】顔画像を撮影する様子を示す。

【図10】証明書画像を表示する際の認証方法の例を示す。

【図11】表示情報を選択する例を示す。

【図12】登録された証明書画像の全体を表示した例を示す。

【図13】第４実施形態に係る情報処理装置の機能構成を示す。

【図14】第４実施形態による登録処理のフローチャートである。

【発明を実施するための形態】

【0011】

以下、図面を参照して、本発明の好適な実施形態について説明する。以下の実施形態では、運転免許証やパスポートなどの紙媒体の公的証明書をユーザが自分のスマートフォンやタブレット端末など（以下、「端末装置」と呼ぶ。）で撮影し、端末装置にインストールされた公的証明書アプリケーションなどに登録する状況を想定する。

【0012】

＜第１実施形態＞
［基本原理］
証明書を電子的に端末装置に登録する場合、悪意ある人物は、他人の証明書を自身の端末装置にそのまま登録したり、他人の証明書の顔画像のみを自分のものに変更して自身の端末装置に登録することを試みると考えられる。この場合、証明書に含まれる顔画像に関するチェックを行わないと、悪意ある人物による登録を防止することができない。

【0013】

そこで、本実施形態では、証明書を発行する自治体や機関など（以下、「証明書発行者」と呼ぶ。）が証明書にチェックのための情報を埋め込んでおく。具体的には、証明書発行者は、証明書の券面に表示されている文字情報（住所、氏名、生年月日などの個人情報）及び顔画像を基にハッシュ値を生成し、証明書の発行時にこのハッシュ値を証明書に埋め込む。ハッシュ値を証明書に埋め込む方法としては以下のものが考えられる。
（１）証明書の券面にＱＲコード（登録商標）などのコード情報として印刷する。
（２）証明書の券面の一部又は全体に、電子透かしとして埋め込む。
（３）証明書がＩＣカードなどの記憶部を備える場合、その記憶部に記憶させる。
これにより、各証明書は、その証明書の所有者の正しい個人情報及び顔画像から生成したハッシュ値を常に保持している状態となる。なお、証明書にハッシュ値を埋め込む際には、ハッシュ値を何らかの方式で暗号化してもよい。

【0014】

証明書を電子化し、デジタルデータとして端末装置に登録する際、ユーザは、端末装置を用いて証明書を撮影する。端末装置は、撮影画像から文字情報及び顔画像を抽出し、ハッシュ値を生成する。また、端末装置は、証明書に予め埋め込まれているハッシュ値を取得する。そして、端末装置は、証明書の撮影画像から生成したハッシュ値と、その証明書に埋め込まれているハッシュ値とを照合する。２つのハッシュ値が一致すれば、端末装置は、情報の改ざんは無いと判定し、その証明書を端末装置にデジタルデータとして登録する。これにより、証明書の文字情報と顔画像のどこか一か所でも改ざんが行われた場合には、２つのハッシュ値が一致しないので、端末装置は改ざんを検出し、登録を中止することができる。

【0015】

［ハードウェア構成］
図１は、第１実施形態に係る端末装置のハードウェア構成を示すブロック図である。端末装置１００は、ユーザの端末装置により構成され、プロセッサ１２と、メモリ１３と、カメラ１４と、ライト１５と、記録媒体１６と、データベース（ＤＢ）１７と、表示部１８と、入力部１９とを備える。

【0016】

プロセッサ１２は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのコンピュータであり、予め用意されたプログラムを実行することにより、端末装置１００の全体を制御する。特に、プロセッサ１２は、後述する証明書電子化処理を行う。

【0017】

メモリ１３は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などにより構成される。メモリ１３は、プロセッサ１２により実行される各種のプログラムを記憶する。また、メモリ１３は、プロセッサ１２による各種の処理の実行中に作業メモリとしても使用される。

【0018】

カメラ１４は、端末装置に設けられたカメラであり、電子化の対象となる証明書の撮影画像を生成する。ライト１５は、端末装置に設けられているフラッシュライトなどであり、必要に応じて、撮影時に証明書を照明するために使用される。

【0019】

記録媒体１６は、ディスク状記録媒体、半導体メモリなどの不揮発性で非一時的な記録媒体であり、端末装置１００に対して着脱可能に構成される。記録媒体１６は、プロセッサ１２が実行する各種のプログラムを記録している。

【0020】

ＤＢ１７は、カメラ１４が生成した証明書の撮影画像を記憶する。また、ＤＢ１７には、端末装置１００により本物と判定された証明書のデジタルデータが記憶される。表示部１８は、端末装置に設けられた液晶パネルなどであり、カメラ１４が撮影した証明書の撮影画像や、証明書を端末装置に登録するための操作画面などを表示する。入力部１９は、端末装置に設けられたボタンや、表示部１８と一体化されたタッチパネルなどである。入力部１９に対しては、証明書電子化処理の実行時にユーザにより必要な指示、入力が行われる。

【0021】

［機能構成］
図２は、第１実施形態に係る端末装置１００の機能構成を示すブロック図である。端末装置１００は、機能的には、証明書撮影部２１と、情報読取部２２と、ハッシュ比較部２３と、登録部２４とを備える。

【0022】

証明書撮影部２１は、ユーザの指示に基づいてカメラ１４やライト１５を制御して、証明書を撮影する。証明書撮影部２１は、証明書の撮影画像（以下、「証明書画像」と呼ぶ。）を情報読取部２２へ出力する。

【0023】

情報読取部２２は、証明書画像から文字情報及び顔画像を読み取る。この際、情報読取部２２は、必要に応じて、証明書画像の補正を行う。即ち、情報読取部２２は、証明書の撮影角度などの影響で証明書画像に生じた歪みを幾何学的に補正する。

【0024】

また、情報読取部２２は、証明書に予め埋め込まれているハッシュ値（以下、「第１のハッシュ値」とも呼ぶ。）を読み取る。図３は、証明書にハッシュ値を埋め込む例を示す。図３（Ａ）は、運転免許証である証明書４０に第１のハッシュ値がＱＲコード４２として印刷されている例を示す。この場合、情報読取部２２は、証明書画像からＱＲコードを抽出し、復号化して第１のハッシュ値を取得する。

【0025】

図３（Ｂ）は、証明書４０に第１のハッシュ値が可視的な電子透かし４３として埋め込まれている例を示す。この場合、情報読取部２２は、電子透かし４３の埋め込み手法に対応する読取手法を用いて、証明書画像から第１のハッシュ値を取得する。なお、電子透かし４３は不可視的に埋め込まれてもよい。また、証明書４０がＩＣカードなどの記憶部を備える媒体である場合、第１のハッシュ値を記憶部に記憶することができる。この場合、情報読取部２２は、証明書の記憶部にアクセスして第１のハッシュ値を取得する。そして、情報読取部２２は、取得した第１のハッシュ値をハッシュ比較部２３に出力する。

【0026】

ハッシュ比較部２３は、情報読取部２２から取得した文字情報及び顔画像を用いて、ハッシュ値（以下、「第２のハッシュ値」と呼ぶ。）を計算する。なお、ハッシュ値の生成方式は特定のものには限定されないが、例えば、Ｌｏｃａｌｉｔｙ－ｓｅｎｓｉｔｉｖｅ Ｈａｓｈｉｎｇのような、マルチメディアデータの類似検索向けのハッシュ法を利用することができる。そして、ハッシュ比較部２３は、情報読取部２２から取得した第１のハッシュ値と、計算により得られた第２のハッシュ値とを比較する。そして、ハッシュ比較部２３は、第１のハッシュ値と第２のハッシュ値が一致したか否かを示す比較結果を登録部２４へ出力する。

【0027】

登録部２４は、ハッシュ比較部２３から入力された比較結果に応じて、証明書画像の登録を行う。具体的に、比較結果が第１のハッシュ値と第２のハッシュ値が一致したことを示す場合、登録部２４は、証明書に改ざんが無いと判定し、証明書撮影部２１が生成した証明書画像をデジタルデータとしてＤＢ１７に登録する。一方、比較結果が第１のハッシュ値と第２のハッシュ値が一致しないことを示す場合、登録部２４は、証明書を登録できないことを示すメッセージなどを表示して、処理を終了する。

【0028】

登録部２４は、証明書撮影部２１が撮影した証明書画像をＤＢ１７に登録する際、前述のように証明書画像に撮影角度などの影響で歪みなどがある場合には、歪みを除去する幾何学補正を行った後の画像を登録することが好ましい。なお、情報読取部２２が既に幾何学補正を行っている場合には、登録部２４はその補正後の証明書画像を登録すればよい。

【0029】

なお、登録部２４は、証明書画像そのものをＤＢ１７に登録する代わりに、情報読取部２２が証明書画像から抽出した文字情報及び顔画像をＤＢ１７に登録してもよい。例えば、証明書が運転免許証である場合、登録部２４は、証明書画像から抽出された氏名、住所、有効期限、運転免許番号、顔画像など、そのユーザに固有の情報をＤＢ１７に登録してもよい。この場合、登録された証明書の情報を表示部１８に表示する際には、端末装置１００は、ＤＢ１７から上記の登録情報を読み出し、運転免許証のテンプレートにおける対応箇所に挿入して疑似的な運転免許証の画像を生成して表示すればよい。

【0030】

［証明書電子化処理］
図４は、第１実施形態の端末装置１００による証明書電子化処理のフローチャートである。この処理は、図１に示すプロセッサ１２が、予め用意されたプログラムを実行し、図２に示す各要素として動作することにより実現される。

【0031】

まず、証明書撮影部２１は、ユーザの撮影指示に基づき、カメラ１４及びライト１５を制御して証明書を撮影し、証明書画像を生成する（ステップＳ１１）。次に、情報読取部２２は、証明書画像から文字情報及び顔画像を取得する（ステップＳ１２）。また、情報読取部２２は、証明書に埋め込まれた第１のハッシュ値を取得する（ステップＳ１３）。なお、ステップＳ１２とＳ１３の順序は逆でもよく、並列に行ってもよい。

【0032】

次に、ハッシュ比較部２３は、ステップＳ１２で取得された文字情報及び顔画像から第２のハッシュ値を計算し、ステップＳ１３で取得した第１のハッシュ値と比較する（ステップＳ１４）。第１のハッシュ値と第２のハッシュ値が一致しない場合（ステップＳ１５：Ｎｏ）、登録部２４は、証明書に改ざんがあると判定し、処理を終了する。一方、第１のハッシュ値と第２のハッシュ値が一致した場合（ステップＳ１５：Ｙｅｓ）、登録部２４は、証明書に改ざんが無いと判定し、証明書画像をデジタルデータとしてＤＢ１７に登録する（ステップＳ１６）。そして、処理は終了する。

【0033】

以上説明したように、第１実施形態の端末装置１００によれば、証明書の文字情報や顔画像が改ざんされている場合には、証明書の登録を防止することができる。

【0034】

［変形例］
次に、第１実施形態の変形例について説明する。以下の変形例は、適宜組み合わせて適用することができる。
（変形例１）
上記のように、ハッシュ比較部２３は証明書画像から抽出した文字情報及び顔画像から第２のハッシュ値を生成する。この際、ハッシュ比較部２３は、文字情報と顔画像とを合わせたデータ列から１つのハッシュ値を生成してもよいし、文字情報と顔画像から別々にハッシュ値を生成し、それらを結合して第２のハッシュ値としてもよい。

【0035】

（変形例２）
上記の実施形態では、ハッシュ比較部２３は顔画像そのものからハッシュ値を生成しているが、その代わりに、顔の個人性に関わる情報を用いてハッシュ値を生成してもよい。顔の個人性に関わる情報としては、例えば、顔画像を顔認証に使用する際に顔画像から抽出される特徴量や、顔画像における目、鼻、口などの特徴点の位置情報などを用いることができる。

【0036】

＜第２実施形態＞
［原理説明］
上記の第１実施形態は、証明書の文字情報や顔画像に改ざんがなされた場合に証明書の登録を防止できるが、悪意ある人物が他人の証明書を入手して、自己の端末装置にそのまま登録することを防止できない。そこで、第２実施形態では、証明書の所有者と、登録作業を行う人物との同一性をチェックして、悪意ある人物が他人の証明書を自己の端末装置に登録することを防止する。

【0037】

［ハードウェア構成］
第２実施形態に係る端末装置のハードウェア構成は、図１に示す第１実施形態と同様であるので、説明を省略する。

【0038】

［機能構成］
図５は、第２実施形態に係る端末装置２００の機能構成を示すブロック図である。端末装置２００は、証明書撮影部３１と、情報読取部３２と、ハッシュ比較部３３と、登録部３４と、顔画像撮影部３５と、顔認証部３６とを備える。ここで、証明書撮影部３１、情報読取部３２、ハッシュ比較部３３及び登録部３４は、第１実施形態の証明書撮影部２１、情報読取部２２、ハッシュ比較部２３及び登録部２４と基本的に同様であるので、重複した説明は行わない。

【0039】

顔画像撮影部３５は、ユーザの指示に基づいてカメラ１４やライト１５を制御して、証明書の登録作業を行う人物（以下、「作業者」と呼ぶ。）の顔画像を撮影する。顔画像撮影部３５は、撮影された作業者の顔画像（以下、「撮影顔画像」と呼ぶ。）を顔認証部３６へ出力する。

【0040】

情報読取部３２は、第１実施形態と同様に証明書画像から文字情報及び顔画像を抽出し、顔画像を顔認証部３６へ出力する。顔認証部３６は、顔画像撮影部３５から入力された撮影顔画像と、情報読取部３２から入力された証明書の顔画像（以下、「証明書顔画像」と呼ぶ。）を照合し、顔認証を行う。そして、顔認証部３６は、顔認証結果を登録部３４へ出力する。

【0041】

登録部３４は、ハッシュ比較部３３から入力された比較結果、及び、顔認証部３６から入力された顔認証結果に応じて、証明書画像の登録を行う。具体的に、登録部３４は、比較結果が第１のハッシュ値と第２のハッシュ値が一致したことを示し、かつ、顔認証結果が撮影顔画像と証明書顔画像が同一人物であることを示す場合に、証明書撮影部３１が生成した証明書画像をデジタルデータとしてＤＢ１７に記憶する。一方、ハッシュ値の比較結果と顔認証結果の一方でも一致しなかった場合には、登録部３４は、証明書を登録できないことを示すメッセージなどを表示して、処理を終了する。

【0042】

［証明書電子化処理］
図６は、第２実施形態の端末装置２００による証明書電子化処理のフローチャートである。この処理は、図１に示すプロセッサ１２が、予め用意されたプログラムを実行し、図２に示す各要素として動作することにより実現される。

【0043】

まず、証明書撮影部３１は、ユーザの撮影指示に基づき、カメラ１４及びライト１５を制御して証明書を撮影し、証明書画像を生成する（ステップＳ２１）。また、顔画像撮影部２６は、ユーザの撮影指示に基づき、カメラ１４及びライト１５を制御して作業者の顔を撮影し、顔画像画像を生成する（ステップＳ２２）。なお、ステップＳ２１とＳ２２の順序は逆でもよい。ステップＳ２３～Ｓ２５の処理は、図４に示す第１実施形態の証明書電子化処理のステップＳ１２～Ｓ１４と同様であるので説明を省略する。

【0044】

次に、ハッシュ比較部３３は、ステップＳ２３で取得された文字情報及び顔画像から第２のハッシュ値を計算し、ステップＳ２４で取得した第１のハッシュ値と比較する（ステップＳ２６）。第１のハッシュ値と第２のハッシュ値が一致しない場合（ステップＳ２６：Ｎｏ）、登録部３４は証明書に改ざんがあるとして処理を終了する。一方、第１のハッシュ値と第２のハッシュ値が一致した場合（ステップＳ２６：Ｙｅｓ）、顔認証部３６は、ステップＳ２２で得られた撮影顔画像と、証明書画像から得られた証明書顔画像とを照合する（ステップＳ２７）。

【0045】

撮影顔画像と証明書顔画像が同一人物でない場合（ステップＳ２８：Ｎｏ）、登録部３４は作業者が証明書の所有者ではないと判定し、処理を終了する。一方、撮影顔画像と証明書顔画像が同一人物である場合（ステップＳ２８：Ｙｅｓ）、登録部３４は、証明書画像に改ざんが無く、かつ、作業者は証明書の所有者本人であると判定し、証明書画像をデジタルデータとしてＤＢ１７に登録する（ステップＳ２９）。そして、処理は終了する。なお、ステップＳ２６とＳ２８の判定処理は、順序を逆にしてもよく、並列に行ってもよい。

【0046】

以上説明したように、第２実施形態の端末装置２００は、証明書の文字情報や顔画像に対する改ざんがなく、かつ、登録作業を行っている者が証明書の所有者本人である場合に証明書の登録を行う。これにより、他人の証明書をそのまま自分の端末装置に登録することを防止することができる。

【0047】

［変形例］
次に、第２実施形態の変形例について説明する。第１実施形態に関する上記の変形例１、２は第２実施形態についても同様に適用できる。また、第２実施形態については、さらに以下の変形例を適用することができる。

【0048】

（変形例３）
第２実施形態では、証明書撮影部３１で証明書を撮影するとともに、顔画像撮影部３５で作業者の顔画像を撮影する。この際、証明書の撮影と顔画像の撮影を同時に行うことが好ましい。通常、スマートフォンやタブレットなどの端末装置には、アウトカメラとインカメラの２つのカメラが設けられている。アウトカメラは、端末装置の背面側に設けられ、端末装置の液晶画面に表示される被写体を撮影するカメラである。インカメラは、端末装置の前面に設けられ、端末装置の液晶画面を見ているユーザ側を撮影するカメラである。よって、端末装置２００がアウトカメラとインカメラを備える場合には、アウトカメラで証明書を撮影すると同時にインカメラで作業者の顔画像を撮影する。これにより、証明書の撮影と同時に、証明書の登録作業を行っている人物の顔画像を撮影することができ、証明書の所有者と作業者との同一性を確実に確認することができる。また、作業者の顔画像を撮影していることが作業者にわからないように、作業者の顔画像を撮影してもよい。

【0049】

＜第３実施形態＞
次に、第３実施形態について説明する。第３実施形態は、本発明に係る端末装置を運転免許証の登録に適用したものである。図７は、第４実施形態に係る端末装置６０の構成を示す。なお、端末装置６０は、基本的には図１に示す第１実施形態と同様のハードウェア構成を備える。

【0050】

［構成］
端末装置６０は、証明書撮影部６１と、顔画像撮影部６２と、登録部６３と、記憶部６４と、表示制御部６５と、表示部６６とを備える。証明書撮影部６１は、カメラなどにより証明書である運転免許証を撮影する。証明書撮影部６１は、撮影により生成した証明書画像を登録部６３へ出力する。顔画像撮影部６２は、カメラなどにより、証明書の登録作業を行う作業者の顔画像を撮影し、登録部６３へ出力する。

【0051】

登録部６３は、証明書撮影部６１が生成した証明書画像と、顔画像撮影部６２が生成した顔画像とを用いて、第２実施形態と同様の判定を行う。即ち、登録部６３は、証明書画像に基づいて証明書に改ざんが無いと判定し、かつ、顔画像に基づいて作業者が証明書の所有者と同一人物であると判定した場合に、証明書画像を記憶部６４に登録する。

【0052】

証明書画像が記憶部６４に登録された後、表示制御部６５は、ユーザの操作に応じて、記憶部６４に登録された証明書画像を表示部６６に表示する。なお、表示部６６はタッチパネルなどにより構成され、入力部としても機能する。

【0053】

［登録方法］
次に、証明書画像を登録する方法について具体的に説明する。まず、作業者は、証明書画像を撮影する。図８は、証明書画像を撮影する様子を示す。図示のように、作業者が端末装置６０のカメラを操作することにより、証明書撮影部６１は運転免許証である証明書４０を撮影する。この場合の１つの例では、作業者が登録用アプリを起動し、撮影ボタンをタップすると、端末装置６０のカメラが証明書を撮影する。他の例では、作業者が登録用アプリを起動すると、登録用アプリが適当なタイミングで「３、２、１」とカウントダウンを表示し、カメラにより自動的に証明書を撮影してもよい。さらに他の例では、作業者が登録用アプリを起動すると、登録用アプリが自動的に端末装置６０のカメラを起動し、スマートフォンで使用されるＱＲコード（登録商標）リーダのように、カメラの撮像画像中に証明書が映り込んだことを検知して自動的に証明書を撮影してもよい。

【0054】

次に、作業者は、顔画像を撮影する。図９は、顔画像を撮影する様子を示す。図９（Ａ）に示すように、顔画像の撮影時には、端末装置６０は、表示部６６にカーソル７２を表示する。カーソル７２は、カメラにより撮像されている作業者の顔の向きに応じて移動する。具体的には、カーソル７２は、端点７１を起点とし、カメラに写っている作業者の顔の向きに応じて、矢印７３に示すようにその方向が変化する。また、表示部６６には、目標点７４ａが表示される。

【0055】

作業者は、カーソル７２の先端（端点７１と反対側の端点）が目標点７４ａと一致するように、顔の向きを変化させる。カーソル７２の先端が目標点７４ａと一致すると、図１１（Ｂ）に示すように、目標点７４ａの周りに円形のゲージ７５が表示される。ゲージ７５は、カーソル７２の先端が目標点７４ａと一致した状態（以下、「カーソル一致状態」と呼ぶ。）の継続時間を示す。作業者は、図１１（Ｂ）に示すようにカーソル一致状態で、顔の向きを維持する。作業者がカーソル一致状態を維持すると、ゲージ７５のポインタ７６が目標点７４ａの周りを移動する。カーソル一致状態が所定時間（例えば数秒）に達したときに、ポインタ７６は目標点７４ａの周りを一周して０時の位置に戻る。カーソル一致状態が所定時間に達すると、端末装置６０は、その目標点７４ａを消し、図１１（Ｃ）に示すように次の目標点７４ｂを表示する。

【0056】

次の目標点７４ｂが表示されると、作業者は、同じ要領でカーソル７２の先端が目標点７４ｂと一致するように顔の向きを調整し、カーソル一致状態を所定時間維持する。端末装置６０は、この処理を所定回数行う。なお、このような処理を行う理由は、作業者が実際に端末装置で自分の顔画像を撮影していることを確認するためである。即ち、作業者が他人の顔画像などを端末装置６０に表示して証明書を登録しようとした場合には、カーソル７２の先端を目標点７４に一致させることができないので、登録作業が中止される。

【0057】

顔画像撮影部６２は、カーソル７２の先端を目標点７４に合わせる処理を作業者が所定回数行う間に、作業者の顔画像を撮影する。例えば、顔画像撮影部６２は、カーソル７２の先端が目標点７４と一致した状態で作業者が顔の向きを維持している間に、作業者の顔画像を撮影する。

【0058】

こうして、証明書画像と顔画像が得られると、登録部６３は、証明書画像を用いて証明書に改ざんが無いと判定し、かつ、顔画像を用いて作業者が証明書の所有者と同一人物であると判定した場合に、証明書画像を記憶部６４に登録する。

【0059】

［表示方法］
次に、登録された証明書画像の表示方法について説明する。図１０は、証明書画像を表示する際の認証方法の例を示す。端末装置６０を証明書の表示モードに設定すると、図１０（Ａ）に示す表示認証画面が表示される。ユーザは、ボタン８１、８１ｂにより、表示認証の方法を選択する。ユーザがパスコードのボタン８１ａを選択した場合、端末装置６０は図１０（Ｂ）に示すパスコード入力画面を表示する。ユーザは予め登録したパスコードを入力することにより、表示認証を行う。一方、ユーザが顔認証のボタン８１ｂを選択した場合、端末装置６０は図１０（Ｃ）に示す顔認証画面を表示する。ユーザはカメラで自分の顔を表示することにより、表示認証を行う。

【0060】

いずれかの方法で表示認証に成功すると、端末装置６０には図１１（Ａ）に示す表示情報選択画面が表示される。表示情報選択画面は、表示情報として全ての情報を指定するボタン８２ａと、年齢を指定するボタン８２ｂと、氏名及び住所を指定するボタン８２ｃと、デジタルコードを指定するボタン８２ｄとを含む。

【0061】

表示情報選択画面においてユーザがボタン８２ｂを選択すると、図１１（Ｂ）に示すように、ユーザの顔画像と年齢とが表示される。表示情報選択画面においてユーザがボタン８２ｃを選択すると、図１１（Ｃ）に示すように、ユーザの顔画像と、ユーザの住所及び氏名が表示される。表示情報選択画面においてユーザがボタン８２ｄを選択すると、図１１（Ｄ）に示すように、ユーザの顔画像とデジタルコードが表示される。なお、デジタルコードは、証明書に含まれる氏名、住所、運転免許番号、その他の個人情報をコード化したものである。表示したデジタルコードを対応するコードリーダで読み取ることにより、個人情報を取得することができる。

【0062】

一方、表示情報選択画面においてユーザがボタン８２ａを選択すると、図１２（Ａ）に示すように、証明書画像全体が表示される。ここで、表示された証明書画像における顔画像は多少の動きをもって表示される。例えば、顔画像は、顔の方向が左右や上下に多少変化する動画的な画像として表示される。これにより、証明書の画像を単に撮影して端末装置６０に表示したのでは無いことが証明できる。即ち、この顔画像の動きは、証明書画像をこの端末装置６０の登録アプリケーションを用いて正式に登録したことの証明となる。

【0063】

また、証明書画像全体が表示された状態で、図１２（Ｂ）に示すようにユーザが端末装置６０の画面の一部にタッチすると、符号８３で示すように、証明書の領域が所定の色で色付けされる。また、端末装置６０の表示画面上でユーザが指でタッチした箇所には所定の形状のポインタ８４が表示される。ユーザが表示画面上で指の位置を移動させると、ポインタ８４は指の動きに追従して移動する。このように、ユーザがタッチしたときに色付けをしたり、タッチ位置にポインタ８４を表示したりするのも、証明書の撮影画像を単に表示しているのではなく、登録アプリケーションを用いて正式に登録した証明書画像を表示していることを示すための手法である。

【0064】

＜第４実施形態＞
図１３は、第４実施形態に係る情報処理装置９０の機能構成を示すブロック図である。情報処理装置９０は、証明書を電子データとして登録する。情報処理装置９０は、証明書撮影手段９１と、取得手段９２と、読取手段９３と、比較手段９４と、登録手段９５と、記憶部９６とを備える。証明書撮影手段９１は、証明書を撮影し、証明書画像を生成する。取得手段９２は、証明書から第１のハッシュ値を取得する。読取手段９３は、証明書画像から、文字情報及び顔画像を読み取る。比較手段９４は、文字情報及び顔画像を用いて第２のハッシュ値を算出し、第１のハッシュ値と比較する。登録手段９５は、第１のハッシュ値と第２のハッシュ値が一致した場合に、証明書に関する情報を記憶部９６に記憶する。

【0065】

図１４は、第４実施形態による登録処理のフローチャートである。証明書撮影手段９１は、証明書を撮影し、証明書画像を生成する（ステップＳ３１）。取得手段９２は、証明書から第１のハッシュ値を取得する（ステップＳ３２）。読取手段９３は、証明書画像から、文字情報及び顔画像を読み取る（ステップＳ３３）。比較手段９４は、文字情報及び顔画像を用いて第２のハッシュ値を算出し、第１のハッシュ値と比較する（ステップＳ３４）。登録手段９５は、第１のハッシュ値と第２のハッシュ値が一致した場合に、証明書に関する情報を記憶部９６に記憶する（ステップＳ３５）。そして、処理は終了する。

【0066】

第４実施形態によれば、情報処理装置９０は、証明書画像から抽出された文字情報及び顔画像から第２のハッシュ値が計算され、予め証明書に保持された第１のハッシュ値と比較される。そして、両者が一致した場合、情報処理装置９０は、証明書に改ざんなどが無いとして、証明書の情報を記憶部９６に登録する。よって、証明書の内容に改ざんが無い場合に限り、証明書の情報を電子データとして登録することが可能となる。

【0067】

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

【0068】

（付記１）
証明書を撮影し、証明書画像を生成する証明書撮影手段と、
前記証明書から第１のハッシュ値を取得する取得手段と、
前記証明書画像から、文字情報及び顔画像を読み取る読取手段と、
前記文字情報及び前記顔画像を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較する比較手段と、
前記第１のハッシュ値と前記第２のハッシュ値が一致した場合に、前記証明書に関する情報を記憶部に記憶する登録手段と、
を備える情報処理装置。

【0069】

（付記２）
ユーザの顔画像を撮影する顔画像撮影手段と、
撮影された顔画像と、前記証明書画像から読み取られた顔画像とを照合する顔認証手段と、を備え、
前記登録手段は、前記第１のハッシュ値と前記第２のハッシュ値が一致し、かつ、前記撮影された顔画像と前記証明書画像から読み取られた顔画像とが一致した場合に、前記証明書に関する情報を前記記憶部に記憶する付記１に記載の情報処理装置。

【0070】

（付記３）
前記顔画像撮影手段は、前記証明書撮影手段が前記証明書を撮影するのと同時に、前記顔画像を撮影する付記２に記載の情報処理装置。

【0071】

（付記４）
前記第１のハッシュ値は、前記証明書にコード情報として記載されており、
前記取得手段は、前記証明書画像から当該コード情報を読み取って前記第１のハッシュ値を取得する付記１乃至３のいずれか一項に記載の情報処理装置。

【0072】

（付記５）
前記第１のハッシュ値は、前記証明書に電子透かしとして設けられており、
前記取得手段は、前記証明書画像から当該電子透かしを読み取って前記第１のハッシュ値を取得する付記１乃至３のいずれか一項に記載の情報処理装置。

【0073】

（付記６）
前記証明書は記憶部を備え、前記第１のハッシュ値は前記記憶部に記憶されており、
前記取得手段は、前記証明書の記憶部から前記第１のハッシュ値を読み取る付記１乃至３のいずれか一項に記載の情報処理装置。

【0074】

（付記７）
前記比較手段は、前記文字情報と前記顔画像とを合わせたデータ列から前記第２のハッシュ値を生成する付記１乃至６のいずれか一項に記載の情報処理装置。

【0075】

（付記８）
前記比較手段は、前記文字情報から生成したハッシュ値と、前記顔画像から生成したハッシュ値を結合して前記第２のハッシュ値を生成する付記１乃至７のいずれか一項に記載の情報処理装置。

【0076】

（付記９）
前記比較手段は、前記顔画像から特徴情報を抽出し、当該特徴情報を用いてハッシュ値を生成する付記７又は８に記載の情報処理装置。

【0077】

（付記１０）
前記登録手段は、前記証明書画像を前記記憶部に記憶する付記１乃至９のいずれか一項に記載の情報処理装置。

【0078】

（付記１１）
前記登録手段は、前記証明書画像に含まれる情報及び顔画像を前記記憶部に記憶する付記１乃至９のいずれか一項に記載の情報処理装置。

【0079】

（付記１２）
証明書を撮影し、証明書画像を生成し、
前記証明書から第１のハッシュ値を取得し、
前記証明書画像から、文字情報及び顔画像を読み取り、
前記文字情報及び前記顔画像を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較し、
前記第１のハッシュ値と前記第２のハッシュ値が一致した場合に、前記証明書に関する情報を記憶部に記憶する情報処理方法。

【0080】

（付記１３）
証明書を撮影し、証明書画像を生成し、
前記証明書から第１のハッシュ値を取得し、
前記証明書画像から、文字情報及び顔画像を読み取り、
前記文字情報及び前記顔画像を用いて第２のハッシュ値を算出し、前記第１のハッシュ値と比較し、
前記第１のハッシュ値と前記第２のハッシュ値が一致した場合に、前記証明書に関する情報を記憶部に記憶する処理をコンピュータに実行させるプログラムを記録した記録媒体。

【0081】

以上、実施形態及び実施例を参照して本発明を説明したが、本発明は上記実施形態及び実施例に限定されるものではない。本発明の構成や詳細には、本発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

【符号の説明】

【0082】

１２ プロセッサ
２１、３１、６１ 証明書撮影部
２２、３２ 情報読取部
２３、３３ ハッシュ比較部
２４、３４、６３ 登録部
３５、６２ 顔画像撮影部
３６ 顔認証部
６４ 記憶部
６５ 表示制御部
６６ 表示部
６０、１００、２００ 端末装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】