特開 2022-150290 情報処理装置、情報処理方法、プログラムおよび情報処理システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022150290

(43)【公開日】2022-10-07

(54)【発明の名称】情報処理装置、情報処理方法、プログラムおよび情報処理システム

(51)【国際特許分類】

   G06T 1/00 20060101AFI20220929BHJP

   H04N 5/232 20060101ALI20220929BHJP

【ＦＩ】

G06T1/00 500A

H04N5/232 290

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2021052837

(22)【出願日】2021-03-26

(71)【出願人】

【識別番号】000000295

【氏名又は名称】沖電気工業株式会社

(74)【代理人】

【識別番号】100140958

【弁理士】

【氏名又は名称】伊藤 学

(74)【代理人】

【識別番号】100137888

【弁理士】

【氏名又は名称】大山 夏子

(74)【代理人】

【識別番号】100190942

【弁理士】

【氏名又は名称】風間 竜司

(72)【発明者】

【氏名】斎藤 利博

【テーマコード（参考）】

5B057

5C122

【Ｆターム（参考）】

5B057CA08

5B057CA12

5B057CA16

5B057CB08

5B057CB12

5B057CB16

5B057CC03

5B057CE04

5B057CE20

5B057DA17

5B057DB02

5B057DB09

5B057DC30

5C122DA03

5C122EA07

5C122EA61

5C122FH21

5C122GA21

5C122HB01

(57)【要約】      （修正有）

【課題】本人確認書類の厚さを確認できる動画データを提供することが可能な、新規かつ改良された情報処理装置、情報処理方法、プログラム及び情報処理システムを提供する。
【解決手段】情報処理装置であるサーバ４０は、本人確認書類を撮影して得られた複数のフレームの各々に対し、ユーザに関する所定の情報を含む対象領域に所定の情報を隠す画像処理を実行する画像処理部４５５、を備える。
【選択図】図４

【特許請求の範囲】

【請求項1】

ユーザの本人確認書類を撮影して得られた複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に前記所定の情報を隠す画像処理を実行する処理部、
を備える情報処理装置。

【請求項2】

前記情報処理装置は、
前記複数のフレームの各々から、前記ユーザに関する所定の情報を検出する検出部、
を更に備える、請求項１に記載の情報処理装置。

【請求項3】

前記処理部は、
前記複数のフレームのうち、前記所定の情報が最初に検出されたフレームより所定数前にあるフレームから、前記所定の情報が最後に検出されたフレームより所定数後にあるフレームまでに対し、前記対象領域に前記所定の情報を隠す画像処理を実行する、
請求項２に記載の情報処理装置。

【請求項4】

前記検出部は、
本人確認書類を撮影して得られたフレームおよび前記所定の情報との関係の学習により得られた推定器を用いて、前記複数のフレームの各々から、前記ユーザに関する所定の情報を検出する、
請求項２または請求項３に記載の情報処理装置。

【請求項5】

前記情報処理装置は、
前記本人確認書類を撮影して得られた複数のフレームを受信する通信部、
を更に備える、請求項１から請求項４までのうちいずれか一項に記載の情報処理装置。

【請求項6】

ユーザの本人確認書類を撮影して得られた複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に前記所定の情報を隠す画像処理を実行することと、
を含む、コンピュータにより実行される情報処理方法。

【請求項7】

コンピュータに、
ユーザの本人確認書類を撮影して得られた複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に前記所定の情報を隠す画像処理を実行する処理機能、
を実現させるプログラム。

【請求項8】

ユーザおよびユーザの本人確認書類を撮影して得られた動画データを保持するデータベース部、
を備える、記憶装置と、
前記記憶装置から取得した前記本人確認書類に含まれる複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に前記所定の情報を隠す画像処理を実行する処理部、
を備える、情報処理装置と、
を備える、情報処理システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、情報処理方法、プログラムおよび情報処理システムに関する。

【背景技術】

【0002】

近年、本人確認書類の特定の情報にモザイク処理等の画像処理を施す技術が開発されている。例えば、特許文献１では、本人確認書類の画像データに対し、モザイク処理などの画像処理を施す技術が開示されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１５－４９６０２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかし、特許文献１に記載した技術では、画像データに対して画像処理を施すため、厚さなどを確認することは困難であり、例えば本人確認書類に係る非対面本人確認において、確認者は当該本人確認書類が偽造されているか否かを判別することは困難である。

【0005】

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、本人確認書類の厚さを確認できる動画データを提供することが可能な、新規かつ改良された情報処理装置、情報処理方法、プログラムおよび情報処理システムを提供することにある。

【課題を解決するための手段】

【0006】

上記課題を解決するために、本発明のある観点によれば、ユーザの本人確認書類を撮影して得られた複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に前記所定の情報を隠す画像処理を実行する処理部、を備える情報処理装置が提供される。

【0007】

前記情報処理装置は、前記複数のフレームの各々から、前記ユーザに関する所定の情報を検出する検出部、を更に備えてもよい。

【0008】

前記処理部は、前記複数のフレームのうち、前記所定の情報が最初に検出されたフレームより所定数前にあるフレームから、前記所定の情報が最後に検出されたフレームより所定数後にあるフレームまでに対し、前記対象領域に前記所定の情報を隠す画像処理を実行してもよい。

【0009】

前記検出部は、本人確認書類を撮影して得られたフレームおよび前記所定の情報との関係の学習により得られた推定器を用いて、前記複数のフレームの各々から、前記ユーザに関する所定の情報を検出してもよい。

【0010】

前記情報処理装置は、前記本人確認書類を撮影して得られた複数のフレームを受信する通信部、を更に備えてもよい。

【0011】

また、上記課題を解決するために、本発明の別の観点によれば、ユーザの本人確認書類を撮影して得られた複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に前記所定の情報を隠す画像処理を実行することと、を含む、コンピュータにより実行される情報処理方法が提供される。

【0012】

また、上記課題を解決するために、本発明の別の観点によれば、コンピュータに、ユーザの本人確認書類を撮影して得られた複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に前記所定の情報を隠す画像処理を実行する処理機能、を実現させるプログラムが提供される。

【0013】

また、上記課題を解決するために、本発明の別の観点によれば、ユーザおよびユーザの本人確認書類を撮影して得られた動画データを保持するデータベース部、を備える、記憶装置と、前記記憶装置から取得した前記本人確認書類に含まれる複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に前記所定の情報を隠す画像処理を実行する処理部、を備える、情報量処理装置と、を備える、情報処理システムが提供される。

【発明の効果】

【0014】

以上説明したように本発明によれば、本人確認書類の厚さを確認できる動画データを提供することが可能な、新規かつ改良された情報処理装置、情報処理方法、プログラムおよび情報処理システムを提供することにある。

【図面の簡単な説明】

【0015】

【図1】本実施形態に係る情報処理システムの概略を説明するための説明図である。

【図2】本実施形態に係る情報処理端末１０の機能構成例を説明するための説明図である。

【図3】本実施形態に係る審査端末２０および審査システム３０の機能構成例を説明するための説明図である。

【図4】本実施形態に係るサーバ４０の機能構成例を説明するための説明図である。

【図5】本実施形態に係るサーバ４０が保険証に対して画像処理を実行する具体例を説明するための説明図である。

【図6】本実施形態に係る情報処理システムの動作処理の一例を説明するための説明図である。

【図7】本実施形態に係る情報処理システムの動作処理例を説明するための説明図である。

【図8】本実施形態に係るサーバ４０の動作処理例を説明するための説明図である。

【図9】本実施形態に係るサーバ４０のハードウェア構成を示したブロック図である。

【発明を実施するための形態】

【0016】

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

【0017】

＜＜１．情報処理システムの概要＞＞
行政または民間などのサービスを利用するに当り、ユーザは申込データに加え、当該ユーザの身分を証明するための本人確認書類を提出する場合がある。そして、行政または民間企業などの確認者は、提出された各種データを確認する必要がある。

【0018】

例えば、確認者は、申込データの記載事項を確認し、ユーザおよび本人確認書類の動画データから、当該本人確認書類に含まれる各種印字情報に違和感がないか、また、本人確認書類の厚み等を確認することにより本人確認書類が偽造されていないかなどの確認を行う。

【0019】

一方、本人確認書類には、他者に提供してはいけない情報、または提供すべきでない情報が含まれている場合がある。

【0020】

そこで、本実施形態に係る情報処理システムは、本人確認書類を撮影して得られた複数のフレームの各々に対し、ユーザに関する所定の情報を含む対象領域に所定の情報を隠す画像処理を実行する。

【0021】

以下、本実施形態に係る情報処理システムが、ユーザの本人確認書類を撮影して得られた動画データに対し、ユーザの所定の情報を含む対象領域に所定の情報を隠す画像処理を実行する技術について、順次説明する。まずは、図１を参照して、情報処理システムの概略を説明する。なお、以下の説明では、動画データを複数のフレームと表現する場合がある。

【0022】

図１は、本実施形態に係る情報処理システムの概略を説明するための説明図である。本実施形態に係る情報処理システムは、ネットワーク１と、情報処理端末１０と、審査端末２０と、審査システム３０と、サーバ４０とを有する。

【0023】

（ネットワーク１）
ネットワーク１は、情報処理端末１０および審査システム３０と、審査端末２０および審査システム３０と、審査システム３０およびサーバ４０とをそれぞれ接続する。

【0024】

例えば、ネットワーク１Ａは、無線通信ＷｉＦｉを用いて、情報処理端末１０および審査システム３０を接続してもよい。

【0025】

また、ネットワーク１Ｂは、ＩＥＥＥなどの規格に則った通信用のイーサネットケーブルなどの通信ケーブルによる広域インターネット回線や専用回線を用いて、審査端末２０および審査システム３０と、審査システム３０およびサーバ４０をそれぞれ接続してもよい。

【0026】

（情報処理端末１０）
情報処理端末１０は、あるサービスに申し込みを行うユーザにより利用される端末である。例えば、情報処理端末１０は、例えば、図１に示すように、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）１０Ａやスマートフォン１０Ｂであってもよい。以下の説明では、情報処理端末１０がＰＣ１０Ａである例を主に説明する。

【0027】

（審査端末２０）
審査端末２０は、申込データおよび本人確認書類を確認する確認者により利用される端末である。例えば、審査端末２０は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、スマートフォンまたはタブレット端末であってもよい。以下の説明では、図１に示すように審査端末２０がＰＣである例を主に説明する。

【0028】

（審査システム３０）
審査システム３０は、ユーザの申込データおよび本人確認書類の画像データを保持する。本実施形態に係る審査システム３０は、例えばサーバやＰＣなどであってもよい。

【0029】

例えば、ユーザが利用する情報処理端末１０は、申込データと、本人および本人確認書類を撮影して得られた動画データとを審査システム３０に送信する。そして、審査システム３０は、受信した当該申込データおよび動画データをサーバ４０に送信する。なお、以下の説明では、本人および本人確認書類を撮影して得られた動画データを単に動画データと表現する場合がある。

【0030】

（サーバ４０）
サーバ４０は、情報処理装置の一例であり、ユーザの本人確認書類を撮影して得られた複数のフレームの各々に対し、前記ユーザに関する所定の情報を含む対象領域に所定の情報を隠す画像処理を実行する。

【0031】

以上、本実施形態に係る情報処理システムの概略を説明した。続いて、図２を参照して、本実施形態に係る情報処理端末１０の機能構成例を説明する。

【0032】

＜＜２．情報処理端末１０の機能構成例＞＞
図２は本実施形態に係る情報処理端末１０の機能構成例を説明するための説明図である。

【0033】

本実施形態に係る情報処理端末１０は、図２に示すように、カメラ部１１と、操作部１３と、表示部１５と制御部１７と、通信部１９とを備える。

【0034】

カメラ部１１は、ユーザおよびユーザの本人確認書類を撮影する。

【0035】

操作部１３は、ユーザの操作を受け付ける。例えば、操作部１３は、ユーザの操作により、申込みに関する各種情報の入力を受け付ける。

【0036】

なお、操作部１３は、例えば、マウスやキーボードなどの各種入力装置であってもよい。

【0037】

表示部１５は、申込画面などの各種情報を表示する。表示部１５は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）ディスプレイ装置、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置であってもよい。

【0038】

制御部１７は、情報処理端末１０の動作全般に係る制御を行う。例えば、制御部１７は、通信部１９による各種通信の制御を行う。

【0039】

通信部１９は、審査システム３０との間で各種通信を行う。例えば、通信部１９は、ユーザにより入力された申込データおよび動画データを審査システム３０に送信する。

【0040】

以上、本実施形態に係る情報処理端末１０に係る機能構成例を説明した。続いて、図３を参照して、本実施形態に係る審査端末２０および審査システム３０の機能構成例を説明する。

【0041】

＜＜３．審査端末２０および審査システム３０の機能構成例＞＞
図３は、本実施形態に係る審査端末２０および審査システム３０の機能構成例を説明するための説明図である。まずは、本実施形態に係る審査端末２０の機能構成例を説明する。

【0042】

本実施形態に係る審査端末２０は、図３に示すように、操作部２１と、表示部２３と、制御部２５と、通信部２７とを備える。

【0043】

操作部２１は、確認者の操作入力を受け付ける。例えば、操作部２１は、確認者により審査対象の選択に係る操作入力を受け付ける。

【0044】

なお、操作部２１は、例えば、マウスやキーボードなどの各種入力装置であってもよい。

【0045】

表示部２３は、審査対象として選択された申込データや処理後動画データを表示する。なお、処理後動画データに関する詳細は後述する。

【0046】

表示部２３は、例えば、ＣＲＴディスプレイ装置、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ装置であってもよい。

【0047】

制御部２５は、審査端末２０の動作全般に係る制御を行う。例えば、制御部２５は、通信部２７による各種通信を制御する。

【0048】

通信部２７は、審査システム３０との間で各種通信を行う。例えば、通信部２７は、確認者により選択された審査対象に関する情報を審査システム３０に送信する。

【0049】

また、通信部２７は、送信した審査対象に対応する処理後動画データを審査システム３０から受信する。

【0050】

以上、本実施形態に係る審査端末２０の機能構成例を説明した。続いて、本実施形態に係る審査システム３０の機能構成例を説明する。

【0051】

本実施形態に係る審査システム３０は、図３に示すように、データベース部３１と、制御部３３と、通信部３５とを備える。

【0052】

データベース部３１は、申込データや当該申込データに対応するユーザおよび本人確認書類の動画データなどの各種顧客情報を保持する。

【0053】

また、データベース部３１は、サーバ４０により画像処理が実行された処理後動画データを保持する。なお、データべース部３１は、サーバ４０から受信した処理後動画データを処理前の動画データに上書き保存してもよい。

【0054】

制御部３３は、審査システム３０の動作全般に係る制御を行う。例えば、制御部３３は、通信部３５による各種通信を制御する。

【0055】

通信部３５は、審査端末２０との間で各種通信を行う。また、通信部３５は、サーバ４０との間で各種通信を行う。

【0056】

例えば、通信部３５は、情報処理端末１０から受信した動画データをサーバ４０に送信する。そして、通信部３５は、当該動画データに画像処理が施された処理後動画データをサーバ４０から受信する。

【0057】

また、通信部３５は、審査端末２０から審査対象に関する情報を受信し、当該審査対象に対応する申込データおよび処理後動画データを審査端末２０に送信する。

【0058】

以上、本実施形態に係る審査システム３０の機能構成例を説明した。続いて、図４を参照し、本実施形態に係るサーバ４０の機能構成例を説明する。

【0059】

＜＜４．サーバ４０の機能構成例＞＞
図４は、本実施形態に係るサーバ４０の機能構成例を説明するための説明図である。本実施形態に係るサーバ４０は、図３に示すように、データベース部４１と、通信部４３と、制御部４５とを備える。

【0060】

データベース部４１は、ある基準となる本人確認書類および当該本人確認書類に含まれる所定の情報の位置を保持する。

【0061】

通信部４３は、審査システム３０との間で各種通信を行う。例えば、通信部４３は、審査システム３０から、ユーザおよびユーザの本人確認書類を撮影して得られた動画データを受信する。また、通信部４３は、受信した動画データに画像処理を実行した処理後動画データを審査システム３０に送信する。

【0062】

制御部４５は、サーバ４０の動作全般に係る制御を行う。図４に示すように、サーバ４０は、学習部４５１と、推定器４５３と、画像処理部４５５とを備える。

【0063】

学習部４５１は、ある基準となる本人確認書類と、本人確認書類に含まれる所定の情報の位置との組みを教師データとする機械学習技術により学習データを生成する。

【0064】

また、学習部４５１は、本人確認書類が把持されている画像、光の反射や白飛び、回転、カード部分の拡大・縮小、または背景などの各種パラメータを調整した画像をある基準となる本人確認書類として学習してもよい。

【0065】

推定器４５３は、検出部の一例であり、ユーザの本人確認書類の動画データからユーザに関する所定の情報を検出する。例えば、推定器４５３は、ユーザの本人確認書類の動画データを入力し、当該動画データに含まれる複数のフレームの各々から、ユーザに関する所定の情報を検出し、当該所定の情報の位置を推定する。なお、推定器４５３の機能は、学習部４５１により生成された学習データにより得られる。

【0066】

また、推定器４５３は、ユーザの本人確認書類の動画データの画素値を所定数に変換してもよい。これにより、推定器４５３は、より高い精度で複数のフレームの各々から、ユーザに関する所定の情報および当該所定の情報の位置を推定し得る。

【0067】

画像処理部４５５は、本人確認書類の動画データに含まれる複数のフレームの各々に対し、ユーザに関する所定の情報を含む対象領域に所定の情報を隠す画像処理を実行する。画像処理に係る具体例は後述する。

【0068】

以上、本実施形態に係るサーバ４０の機能構成例を説明した。続いて、図５を参照して、本実施形態に係る画像処理の具体例を説明する。

【0069】

＜＜５．所定の情報を隠す画像処理に係る具体例＞＞
図５は、本実施形態に係るサーバ４０が保険証に対して画像処理を実行する具体例を説明するための説明図である。なお、図５に示す保険証Ｃは、本人確認書類の一例である。なお、本実施形態に係る本人確認書類は、運転免許証やマイナンバーカード等であってもよい。

【0070】

２０２０年１０月１日より施工された健康保険法改正により、健康保険事業遂行等の目的以外で、被保険者の記号Ｍ１、番号Ｍ２および保険者番号Ｍ３等の告知を求めることが禁止された。

【0071】

そのような背景もあり、本人確認書類として健康保険証の写しを提出する際に、ユーザ、あるいは審査側の端末は、ユーザの健康保険証の所定の情報を含む対象領域に対し、所定の情報を隠す画像処理を実行する必要が生じた。なお、所定の情報を隠す画像処理は、図５に示すようなモザイク処理やマスキング処理やコントラスト低下処理などの所定の情報が隠れる程度の任意の画像処理であってもよい。

【0072】

例えば、推定器４５３は、動画データに含まれる複数のフレームの各々からカード券面（記号Ｍ１や番号Ｍ２などの情報が付されている面）の特徴に合致する領域を検出する。そして、画像処理部４５５は、動画データに含まれる複数のフレームの各々に対し、所定の情報を含む対象領域にモザイク処理などの画像処理を実行し、処理後動画データを生成する。

【0073】

また、確認者は、処理後動画データから保険証Ｃがコピーなどでない、本人確認書類そのものかを判別する必要がある。この場合、ユーザが、例えば保険証Ｃを回転させた動画データを提出することにより、確認者は、保険証Ｃの厚みを確認することで保険証Ｃが本人確認書類そのものか否かを判別し得る。

【0074】

一方、画像処理部４５５は、推定器４５３により検出された所定の情報に対し、画像処理を実行するが、例えば、複数のフレームのうちカード券面を検出したフレーム以外のフレームにおいても、確認者が所定の情報を視認できるフレームが存在する可能性がある。

【0075】

そこで、本実施形態に係る画像処理部４５５は、所定の情報が最初に検出されたフレームより所定数前にあるフレームから、所定の情報が最後に検出されたフレームより所定数後にあるフレームまでに対し、対象領域に所定の情報を隠す画像処理を実行してもよい。

【0076】

例えば、推定器４５３は、券面未検出から券面検出に遷移する遷移タイミング１と、券面検出から券面未検出に遷移する遷移タイミング２を推定してもよい。この場合、画像処理部４５５は、遷移タイミング１より所定数前のフレームから、遷移タイミング２より所定数後のフレームまでの各フレーム対して、所定の情報にモザイク処理などの画像処理を実行してもよい。これにより、画像処理部４５５は、推定器４５３が所定の情報を検出し得なかったフレームに対しても、モザイク処理などの画像処理を実行することにより、所定の情報が確認者に視認される可能性をより低減し得る。

【0077】

以上、本実施形態に係る所定の情報を隠す画像処理の具体例を説明した。続いて図６～図８を参照して、本実施形態に係る情報処理システムの動作を順次説明する。

【0078】

＜＜６．本実施形態に係る情報処理システムの動作処理例＞＞
図６は、本実施形態に係る情報処理システムの動作処理の一例を説明するための説明図である。まず、情報処理端末１０は、申込データと本人および本人確認書類が撮影された動画データをアップロードする（Ｓ１０１）。

【0079】

そして、審査システム３０は、アップロードされた対象データを一時保存する（Ｓ１０５）。

【0080】

次に、サーバ４０は、一時保存された本人および本人確認書類が撮影された動画データを受信する（Ｓ１０９）。

【0081】

そして、サーバ４０は、対象領域に所定の情報を隠す画像処理を実行する（Ｓ１１３）。

【0082】

そして、サーバ４０は、処理後動画データを審査システムに送信する（Ｓ１１７）。

【0083】

そして、審査システム３０は、処理後動画データを一時保存していた動画データに置き換えて保存し（Ｓ１２１）、情報処理システムは、本実施形態に係る情報処理システムは動作処理を終了する。

【0084】

以上、本実施形態に係る情報処理システムの動作処理例を説明した。続いて、図７を参照して、確認者が審査対象を審査する際における情報処理システムの動作処理例を説明する。

【0085】

図７は、本実施形態に係る情報処理システムの動作処理例を説明するための説明図である。まず、審査端末２０は、確認者により未審査データが照会され、審査対象データが選択される（Ｓ２０１）。

【0086】

そして、審査システム３０は、確認者により選択された審査対象に対応する申込データおよび処理後動画データを審査端末２０に送信する（Ｓ２０５）。

【0087】

次に、審査端末２０は、受信した申込データおよび処理後動画データを表示する（Ｓ２０９）。

【0088】

そして、審査端末２０は、確認者により行われた審査の判定結果を審査システム３０に送信する（Ｓ２１３）。

【0089】

そして、審査システム３０は、審査結果を保管し（Ｓ２１７）、本実施形態に係る情報処理システムは動作処理を終了する。

【0090】

以上、確認者が審査対象を審査する際における情報処理システムの動作処理例を説明した。続いて、図８を参照して、本実施形態に係るサーバ４０が対象領域に対し、画像処理を実行する動作処理例を説明する。

【0091】

図８は、本実施形態に係るサーバ４０の動作処理例を説明するための説明図である。まず通信部３５は、ユーザおよびユーザの本人確認書類を撮影して得られた動画データを受信する（Ｓ３０１）。

【0092】

続いて、推定器４５３は、受信した動画データから本人確認書類の券面を検出する（Ｓ３０５）。

【0093】

そして、推定器４５３は、券面未検出状態から券面検出状態に遷移するタイミングを特定する（Ｓ３０９）。

【0094】

次に、推定器４５３は、券面未検出状態から券面検出状態に遷移するタイミングを特定する（Ｓ３１３）。

【0095】

そして、推定器４５３は、画像処理を実行するフレームおよび対象領域を決定し、記憶する（Ｓ３１７）。

【0096】

そして、画像処理部４５５は、対象領域に所定の情報を隠す画像処理を実行する（Ｓ３２１）。

【0097】

そして、通信部４３は、処理後動画データを審査システム３０に送信し（Ｓ３２５）、本実施形態に係るサーバ４０は動作処理を終了する。

【0098】

以上、本実施形態に係るサーバ４０の動作処理例を説明した。続いて、本実施形態の作用効果を説明する。

【0099】

＜＜７．本実施形態の作用効果＞＞
以上説明した本実施形態によれば、多様な作用効果が得られる。例えば、本実施形態に係るサーバ４０によれば、動画データに対し、ユーザに関する所定の情報を含む対象領域に所定の情報を隠す画像処理を実行することで、ユーザによるマスキングなどの手間を削減し、かつ、マスキング等の実施漏れの可能性も低減し得る。

【0100】

また、推定器４５３は、学習部４５１により生成された学習データを用いることにより、光の反射などの外乱を考慮することが可能になり、所定の情報をより高い精度で検出し得る。

【0101】

＜＜８．本実施形態に係るサーバ４０のハードウェア構成＞＞
以上説明した情報処理は、ソフトウェアと以下に説明するサーバ４０のハードウェアとの協働により実現される。なお、以下に説明するハードウェア構成は情報処理端末１０、審査端末２０および審査システム３０にも適用可能である。

【0102】

図９は、本実施形態に係るサーバ４０のハードウェア構成を示したブロック図である。サーバ４０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）４０２と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）４０４と、ＲＡＭ（Ｒａｎｄｏｍｅ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）４０６と、内部バス４０８と、入出力インターフェース４１０と、表示部４１２と、入力部４１３と、音声出力部４１４と、記憶部４１５と、ドライブ４１６と、ネットワークインターフェース４１７と、外部インターフェース４１８と、を備えることができる。

【0103】

ＣＰＵ４０２は、演算処理装置及び制御装置として機能し、各種プログラムに従ってサーバ４０内の動作全般を制御する。ＣＰＵ４０２が後述するＲＯＭ４０４、ＲＡＭ４０６及びソフトウェアと協働することにより、例えば、学習部４５１、推定器４５３、および画像処理部４５５などの機能が実現され得る。

【0104】

ＲＯＭ４０４は、ＣＰＵ４０２が使用するプログラムおよび演算パラメータ等を記憶する。ＲＡＭ４０６は、ＣＰＵ４０２の実行において使用するプログラム、およびその実行において適宜変化するパラメータ等を一時記憶する。

【0105】

ＣＰＵ４０２、ＲＯＭ４０４、ＲＡＭ４０６は、内部バス４０８によって相互に接続され、さらに入出力インターフェース４１０を介して後述する表示部４１２、入力部４１３、音声出力部４１４、記憶部４１５、ドライブ４１６、ネットワークインターフェース４１７、外部インターフェース４１８と接続される。

【0106】

表示部４１２は、例えば、ＣＲＴディスプレイ装置、液晶ディスプレイ（ＬＣＤ）、ＯＬＥＤ装置などの表示装置であり、映像データを映像に変換して出力する。また、入力部４１３は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、センサ、スイッチ及びレバーなどメンバーが情報を入力するための入力手段と、メンバーによる入力に基づいて入力信号を生成し、ＣＰＵ４０２に出力する入力制御回路などから構成され得る。また、音声出力部４１４は、スピーカ及びヘッドホンなどの音声出力装置であり、音声データなどを音声に変換して出力する。

【0107】

記憶部４１５は、本実施形態にかかるデータベース部４１の一例として構成されたデータ記憶用の装置である。記憶部４１５は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置及び記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。記憶部４１５は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）やＳＳＤ（Ｓｏｌｉｄ Ｓｔｒａｇｅ Ｄｒｉｖｅ）、あるいは同等の機能を有するメモリ等で構成される。この記憶部４１５は、ストレージを駆動し、ＣＰＵ４０２が実行するプログラムや各種データを記憶する。

【0108】

ドライブ４１６は、記憶媒体用リーダライタであり、サーバ４０に内蔵、または外付けされる。ドライブ４１６は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなどのリムーバブル記憶媒体に記憶されている情報を読み出して、ＲＡＭ４０６に出力する。また、ドライブ４１６は、リムーバブル記憶媒体に情報を書き込むことも可能である。

【0109】

ネットワークインターフェース４１７は、例えば、インターネットなどの通信網に接続するためのデバイス等で構成された通信インターフェースである。また、ネットワークインターフェース４１７は、有線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）または無線ＬＡＮ対応通信装置であってもよいし、有線による通信を行うワイヤー通信装置であってもよい。

【0110】

外部インターフェース４１８は、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）ポート、ＲＳ－２３２Ｃポートまたは光オーディオ端子などのような外部接続機器を接続するための接続ポートで構成された接続インターフェースである。

【0111】

＜＜９．補足＞＞
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

【0112】

例えば、本実施形態に係る情報処理端末１０、審査端末２０、審査システム３０およびサーバ４０の動作の処理におけるステップは、必ずしも説明図として記載された順序に沿って時系列に処理する必要はない。例えば、情報処理端末１０、審査端末２０、審査システム３０およびサーバ４０の動作の処理における各ステップは、説明図として記載した順序と異なる順序で処理されてもよく、並列的に処理されてもよい。

【0113】

また、情報処理端末１０、審査端末２０、審査システム３０およびサーバ４０に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアに、上述した情報処理端末１０、審査端末２０、審査システム３０およびサーバ４０の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。

【0114】

また、推定器４５３は、動画データに含まれる複数のフレームのうち、一部のフレームに対して所定の情報を検出し、また、所定の情報の位置を推定してもよい。これにより、複数の動画データや大量の動画データに対する画像処理などにおいて、ＣＰＵやメモリなどに生じ得る負荷を低減し得る。

【符号の説明】

【0115】

１０ 情報処理端末
１１ カメラ部
１３ 操作部
１５ 表示部
１７ 制御部
１９ 通信部
２０ 審査端末
２１ 操作部
２３ 表示部
２５ 制御部
２７ 通信部
３０ 審査システム
３１ データベース部
３３ 制御部
３５ 通信部
４０ サーバ
４１ データベース部
４３ 通信部
４５ 制御部
４５１ 学習部
４５３ 推定器
４５５ 画像処理部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】