特許 7522356 画像データ編集プログラム、画像データ編集方法及び画像データ編集装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-17

(45)【発行日】2024-07-25

(54)【発明の名称】画像データ編集プログラム、画像データ編集方法及び画像データ編集装置

(51)【国際特許分類】

   G06F 21/62 20130101AFI20240718BHJP

   G06T 1/00 20060101ALI20240718BHJP

【ＦＩ】

G06F21/62 345

G06T1/00 200C

【請求項の数】 6

(21)【出願番号】P 2021054791

(22)【出願日】2021-03-29

(65)【公開番号】P2022152134

(43)【公開日】2022-10-12

【審査請求日】2023-12-07

(73)【特許権者】

【識別番号】000005223

【氏名又は名称】富士通株式会社

(74)【代理人】

【識別番号】100087480

【弁理士】

【氏名又は名称】片山 修平

(72)【発明者】

【氏名】原田 義之

(72)【発明者】

【氏名】豆田 成示

(72)【発明者】

【氏名】和田 浩二

(72)【発明者】

【氏名】浅野 貴美子

(72)【発明者】

【氏名】郡司 靖

(72)【発明者】

【氏名】時津 裕史

【審査官】青木 重徳

(56)【参考文献】

【文献】特開２００７－２０７１８１（ＪＰ，Ａ）

【文献】特開２０１９－１８５１３９（ＪＰ，Ａ）

【文献】特開２０１３－４２２２７（ＪＰ，Ａ）

【文献】中国特許出願公開第１１１２５９２０７（ＣＮ，Ａ）

【文献】米国特許出願公開第２０１５／０１１２７５３（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ２１／６２

Ｇ０６Ｔ １／００

(57)【特許請求の範囲】

【請求項1】

画像データに含まれる文字列を取得し、
マスク対象の項目名と、該項目名に対応する文字列の特徴とを関連付けて記憶する記憶部を参照して、取得した前記文字列の中から前記マスク対象の項目名を抽出し、
前記記憶部を参照して、前記画像データに含まれる文字列の中から、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第１文字列を特定し、
特定した前記第１文字列を基準として、縦方向及び横方向に並ぶ、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第２文字列を特定し、
前記画像データの、前記第１文字列と前記第２文字列をマスクする、
処理をコンピュータに実行させるための画像データ編集プログラム。

【請求項2】

前記第１文字列を特定する処理では、抽出した前記マスク対象の項目名の左上側を除く範囲に存在する文字列の中から、前記第１文字列を１つ特定する、ことを特徴とする請求項１に記載の画像データ編集プログラム。

【請求項3】

前記第１文字列を特定する処理では、抽出した前記マスク対象の項目名に最も近い位置に存在する前記第１文字列を特定する、ことを特徴とする請求項１又は２に記載の画像データ編集プログラム。

【請求項4】

前記記憶部は、マスク対象の領域を示す画像と、前記マスク対象の領域に対応する文字列の特徴とを関連付けて記憶しており、
前記マスクする処理では、前記画像データのうち、前記記憶部に記憶されている前記マスク対象の領域に存在し、かつ前記マスク対象の領域に対応する文字列の特徴を有する文字列をマスクする、ことを特徴とする請求項１～３のいずれか一項に記載の画像データ編集プログラム。

【請求項5】

画像データに含まれる文字列を取得し、
マスク対象の項目名と、該項目名に対応する文字列の特徴とを関連付けて記憶する記憶部を参照して、取得した前記文字列の中から前記マスク対象の項目名を抽出し、
前記記憶部を参照して、前記画像データに含まれる文字列の中から、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第１文字列を特定し、
特定した前記第１文字列を基準として、縦方向及び横方向に並ぶ、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第２文字列を特定し、
前記画像データの、前記第１文字列と前記第２文字列をマスクする、
処理をコンピュータが実行することを特徴とする画像データ編集方法。

【請求項6】

画像データに含まれる文字列を取得する文字列取得部と、
マスク対象の項目名と、該項目名に対応する文字列の特徴とを関連付けて記憶する記憶部と、
前記記憶部を参照して、取得した前記文字列の中から前記マスク対象の項目名を抽出する抽出部と、
前記記憶部を参照して、前記画像データに含まれる文字列の中から、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第１文字列を特定する第１特定部と、
特定した前記第１文字列を基準として、縦方向及び横方向に並ぶ、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第２文字列を特定する第２特定部と、
前記画像データの、前記第１文字列と前記第２文字列をマスクするマスク処理部と、
を備える画像データ編集装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像データ編集プログラム、画像データ編集方法及び画像データ編集装置に関する。

【背景技術】

【0002】

例えば、銀行等において、利用するシステムのマニュアルを作成する場合、実際の入力画面等をスクリーンショットして得られる画像を利用することがある。このような画像には、顧客情報などの秘匿すべき情報が含まれるため、従来においては、人手で秘匿すべき情報にマスクをかける必要があった。

【0003】

また、画像の秘匿すべき部分を隠蔽する技術として、例えば特許文献１、２等が知られている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００５－１８２２０号公報

【文献】特開２００８－２０４２２６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、人手で秘匿すべき情報にマスクをかける場合、手間がかかるとともに、見落としが生じるおそれがある。

【0006】

また、例えば特許文献２では、表において特定の項目の所定方向（例えば下側）に並ぶ文字列を非表示にすることはできるものの、特定の項目に対応する文字列が当該項目の所定方向に並んでいない場合には非表示にすることはできない。

【0007】

１つの側面では、本発明は、画像データに含まれる特定の項目に対応する文字列を精度よくマスクすることが可能な画像データ編集プログラム、画像データ編集方法及び画像データ編集装置を提供することを目的とする。

【課題を解決するための手段】

【0008】

一つの態様では、画像データ編集プログラムは、画像データに含まれる文字列を取得し、マスク対象の項目名と、該項目名に対応する文字列の特徴とを関連付けて記憶する記憶部を参照して、取得した前記文字列の中から前記マスク対象の項目名を抽出し、前記記憶部を参照して、前記画像データに含まれる文字列の中から、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第１文字列を特定し、特定した前記第１文字列を基準として、縦方向及び横方向に並ぶ、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第２文字列を特定し、前記画像データの、前記第１文字列と前記第２文字列をマスクする、処理をコンピュータに実行させるための画像データ編集プログラムである。

【発明の効果】

【0009】

画像データに含まれる特定の項目に対応する文字列を精度よくマスクすることができる。

【図面の簡単な説明】

【0010】

【図1】一実施形態に係る情報処理システムの構成を概略的に示す図である。

【図2】図２（ａ）は、サーバのハードウェア構成を示す図であり、図２（ｂ）は、管理者端末及び利用者端末のハードウェア構成を示す図である。

【図3】サーバの機能ブロック図である。

【図4】管理者端末、サーバ、利用者端末の処理の概要を示す図である。

【図5】図５（ａ）は、文字列パターンＤＢを示す図であり、図５（ｂ）、図５（ｃ）は、文字列パターンＤＢのチェックルールのフィールドに格納される画像の一例を示す図である。

【図6】登録部の処理を示すフローチャートである。

【図7】サーバによる画像データのマスク処理を示すフローチャートである。

【図8】キャプチャされた画像データの一例を示す図である。

【図9】図８の画像データに含まれる全ての文字列の情報を示す図である。

【図10】図１０（ａ）、図１０（ｂ）は、図７の処理で得られるリストを示す図（その１）である。

【図11】図１１（ａ）、図１１（ｂ）は、図７の処理で得られるリストを示す図（その２）である。

【図12】図１２（ａ）、図１２（ｂ）は、図７の処理で得られるリストを示す図（その３）である。

【図13】項目名の原点を基準とした第１象限～第４象限を示す図である。

【図14】図７のステップＳ４２を説明するための図である。

【図15】図１５（ａ）～図１５（ｅ）は、マスク対象の情報を示す図である。

【図16】マスク処理された画像データの一例を示す図である。

【図17】図１７（ａ）、図１７（ｂ）は、画像データに含まれる表の別例について説明するための図である。

【発明を実施するための形態】

【0011】

以下、情報処理システムの一実施形態について、図１～図１７に基づいて詳細に説明する。

【0012】

図１には、一実施形態に係る情報処理システム１００の構成が概略的に示されている。図１に示すように、情報処理システム１００は、画像データ編集装置としてのサーバ１０と、管理者端末６０と、複数の利用者端末７０と、備えており、各装置は、インターネットなどのネットワーク８０に接続されている。

【0013】

サーバ１０は、利用者端末７０から送信されてくる画像データを取得して、取得した画像データの中から、マスク（秘匿）すべき文字列を特定する。また、サーバ１０は、特定した文字列を自動的にマスク処理し、マスク処理後の画像データを利用者端末７０に戻す処理を実行する。

【0014】

図２（ａ）には、サーバ１０のハードウェア構成が示されている。図２（ａ）に示すように、サーバ１０は、ＣＰＵ（Central Processing Unit）９０、ＲＯＭ（Read Only Memory）９２、ＲＡＭ（Random Access Memory）９４、記憶部（例えば、ＳＳＤ（Solid State Drive）やＨＤＤ（Hard Disk Drive））９６、ネットワークインタフェース９７、及び可搬型記憶媒体用ドライブ９９等を備えている。これらサーバ１０の構成各部は、バス９８に接続されている。サーバ１０では、ＲＯＭ９２あるいはＨＤＤ９６に格納されているプログラム（画像データ編集プログラムを含む）、或いは可搬型記憶媒体用ドライブ９９が可搬型記憶媒体９１から読み取ったプログラム（画像データ編集プログラムを含む）をＣＰＵ９０が実行することにより、図３に示す、各部の機能が実現される。なお、図３には、サーバ１０の記憶部９６等に格納されている画像データ記憶部４２や、記憶部としての文字列パターンＤＢ４０も図示されている。なお、図３の各部の機能は、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現されてもよい。なお、図３の各部の詳細については後述する。

【0015】

管理者端末６０は、管理者が利用するＰＣ（Personal Computer）等の端末であり、図２（ｂ）に示すようなハードウェア構成を有する。具体的には、図２（ｂ）に示すように、管理者端末６０は、ＣＰＵ１９０、ＲＯＭ１９２、ＲＡＭ１９４、記憶部１９６、ネットワークインタフェース１９７、表示部１９３、入力部１９５、及び可搬型記憶媒体用ドライブ１９９等を備えている。これら管理者端末６０の構成各部は、バス１９８に接続されている。また、可搬型記憶媒体用ドライブ１９９は、可搬型記憶媒体１９１に記憶されているプログラムやデータを読み取る装置である。表示部１９３は、液晶ディスプレイ等を含み、入力部１９５は、キーボードやマウス、タッチパネル等を含む。

【0016】

管理者端末６０を利用する管理者は、入力部１９５を介して、画像データにおいてマスク処理を施すべき文字列の情報を入力する。サーバ１０では、管理者が入力した情報を取得すると、当該情報を管理し、マスク処理に利用する。

【0017】

利用者端末７０は、利用者（例えば銀行で利用されるシステムのマニュアルを作成するユーザ）が利用するＰＣ（Personal Computer）等の端末であり、管理者端末６０と同様、図２（ｂ）に示すようなハードウェア構成を有する。

【0018】

利用者端末７０を利用する利用者は、入力部１９５を介して、表示部１９３上に表示されている画面をキャプチャするための指示を入力する（例えば、キーボードの「print screen」キーを押下する）。利用者端末７０は、当該指示が入力されると、表示部１９３上に表示されている画面をキャプチャし、生成された画像データをサーバ１０に送信する。また、利用者端末７０は、サーバ１０からマスク処理後の画像データが送信されてきたときに、当該画像データを取得する。

【0019】

図４には、本実施形態における、管理者端末６０、サーバ１０、利用者端末７０の処理の概要が示されている。本実施形態においては、管理者が、管理者端末６０に、マスク処理を施すべき文字列の情報を入力すると、管理者端末６０は、（１）マスク処理すべき文字列の情報をサーバ１０に送信する。この情報を受信したサーバ１０は、（２）管理者端末６０から受信したマスク処理すべき文字列の情報を登録する。この（１）、（２）の処理は、管理者がマスク処理すべき文字列の情報を入力するたびに実行される。一方、利用者端末７０において、利用者が画面をキャプチャする指示を入力すると、利用者端末７０は、（３）画面をキャプチャし、キャプチャした画像データをサーバ１０に送信する。これに対し、画像データを受信したサーバ１０は、（４）受信した画像データに対しマスク処理を実行する。そして、サーバ１０は、（５）マスク処理後の画像データを利用者端末７０に送信する。本実施形態では、例えば、利用者端末７０において図８に示すような画像データがキャプチャされた場合、サーバ１０では、図１６に示すようにマスク処理し、マスク処理後の画像データが利用者端末７０に送信されるようになっている。

【0020】

次に、サーバ１０の機能について、図３に基づいて説明する。サーバ１０は、ＣＰＵ９０がプログラムを実行することにより、登録部２０、画像データ受信部２４、文字列取得部としてのＯＣＲ処理部２６、秘密情報解析部２８、マスク処理部３０、マスク画像送信部３２、として機能する。

【0021】

登録部２０は、管理者端末６０において管理者が入力したマスク処理すべき文字列の情報を取得し、文字列パターンＤＢ４０に格納する。ここで、文字列パターンＤＢ４０は、画像データの中からマスク処理をすべき文字列を特定するために必要な情報が格納されている。具体的には、文字列パターンＤＢ４０は、図５（ａ）に示すように、「項目名」、「属性」、「値」、「チェックルール」の各フィールドを有する。「項目名」のフィールドには、マスク処理をすべき文字列の項目名（例えば「マイナンバー」や「性別」など）が格納されている。「属性」及び「値」のフィールドには、「項目名」に対応する文字列の特徴が格納されている。例えば、項目名が「マイナンバー」の場合、属性として「%n12」が格納されている。「%n12」は、１２桁の数値を意味する。また、例えば、項目名が「性別」の場合、値として具体的な文字列「男」、「女」「男性」、「女性」が格納されている。

【0022】

「チェックルール」には、属性や値では表現できない条件がある場合に、詳細なチェックルールが格納される。例えば、項目名が「マイナンバー」の場合、１２桁の数値がマイナンバーであるかをチェックする「マイナンバーチェック」が格納される。マイナンバーチェックとしては、総務省で定められた、文字列の１２桁目でチェックデジットを行う方法を用いることができる（平成二十六年総務省令第八十五号「行政手続における特定の個人を識別するための番号の利用等に関する法律の規定による通知カード及び個人番号カード並びに情報提供ネットワークシステムによる特定個人情報の提供等に関する省令」第五条）。また、例えば項目名が「免許証番号」の場合、「チェックルール」には、「免許証番号チェック」が格納される。この免許証番号チェックの場合、警察庁で定められた、文字列の１１桁目でチェックデジットを行う方法を用いることができる（昭和５６年９月１０日「丁運発第１０５号 運転免許証の番号の形式及び内容について」参照）。

【0023】

上記のように、本実施形態では、図５（ａ）の文字列パターンＤＢ４０において、マスク対象の項目名と、項目名に対応する文字列の特徴とが関連付けて（紐付けて）記憶されている。

【0024】

また、例外処理として、ある領域をマスク領域として追加したり、ある領域をマスク領域から除外する場合には、「チェックルール」のフィールドに、領域を特定するための画像が格納される。なお、領域を特定するための画像の具体例については、後述する。

【0025】

画像データ受信部２４は、利用者端末７０においてキャプチャされた画像データを取得し、画像データ記憶部４２に記憶する。なお、画像データ記憶部４２には、サーバ１０においてマスク処理される画像データが一時記憶される。

【0026】

ＯＣＲ処理部２６は、画像データ記憶部４２に記憶された画像データを取得し、ＯＣＲ（Optical Character Recognition）処理により、画像データに含まれる文字列を取得する。

【0027】

秘密情報解析部２８は、文字列パターンＤＢ４０（図５（ａ））を参照して、ＯＣＲ処理部２６が取得した文字列の中から、文字列パターンＤＢ４０に格納されている項目名と一致する文字列を特定する。また、秘密情報解析部２８は、特定した文字列を基準として、項目名に対応する特徴を有する文字列（マスクすべき、又はマスクするのが好ましい文字列）を抽出する。

【0028】

マスク処理部３０は、画像データ記憶部４２から画像データを読み出し、秘密情報解析部２８が抽出したマスクすべき文字列をマスクする処理を実行する。

【0029】

マスク画像送信部３２は、マスク処理部３０がマスク処理した画像データを利用者端末７０に対して送信する処理を実行する。

【0030】

（サーバ１０の処理について）
次に、サーバ１０の処理について、図６、図７のフローチャートに沿って、その他図面を適宜参照しつつ詳細に説明する。

【0031】

（登録部２０の処理）
図６は、登録部２０の処理を示すフローチャートである。この図６の処理は、図４の（１）、（２）の処理に対応している。

【0032】

図６の処理が開始されると、登録部２０は、まず、ステップＳ１０において、マスク対象の項目名と文字列パターンの情報（属性、値、チェックルール）を受信するまで待機する。管理者端末６０に管理者がマスク対象の項目名と文字列パターンの情報を入力すると、ステップＳ１２に移行する。

【0033】

ステップＳ１２に移行すると、登録部２０は、項目名と文字列パターンとを紐づけて、文字列パターンＤＢ４０に格納する。例えば、管理者が項目名「マイナンバー」と「性別」に関する文字列パターンの情報（特徴の情報）を入力した場合には、図５（ａ）に示すように情報を格納する。登録部２０は、その後はステップＳ１０に戻り、上記処理を繰り返し実行する。

【0034】

（画像データのマスク処理）
図７は、サーバ１０による画像データのマスク処理を示すフローチャートである。この図７の処理は、図４の（３）～（５）の処理に対応している。図７の処理は、利用者端末７０からキャプチャされた画像データが送信されてきた段階（画像データ受信部２４が画像データを取得した段階）で開始される。なお、ここでは、画像データ受信部２４は、図８に示すような画像データを取得し、画像データ記憶部４２に記憶したとする。図８においては、画像データの左上を原点とした座標系を示しているが、実際の画像データには座標系の表示は含まれないものとする。

【0035】

図７の処理が開始されると、まず、ステップＳ３０において、ＯＣＲ処理部２６が、画像データに対してＯＣＲ処理を実行し、各文字列と、文字列の位置やサイズ情報を取得する。ここで、文字列の位置やサイズの情報には、文字列の左上位置を原点として、原点の横方向の座標、原点の縦方向の座標、文字列全体を矩形とみなしたときの矩形サイズ横、矩形サイズ縦の情報が含まれる。図９には、図８の画像データに含まれる全ての文字列の情報が示されている。例えば、「マイナンバー」という文字列であれば、文字列の情報は、文字列＝「マイナンバー」、原点の横方向の座標＝「１５０」、原点の縦方向の座標＝「５０」、文字列全体を矩形とみなしたときの矩形サイズ横＝「７５」、矩形サイズ縦＝「２５」である。図９のように取得された情報は、図１０（ａ）に示すようにリスト化され、秘密情報解析部２８に送信される。

【0036】

次いで、ステップＳ３２では、秘密情報解析部２８が、文字列パターンＤＢ４０（図５（ａ））を参照して、文字列パターンＤＢ４０に格納されている項目名と一致する文字列を特定する。ここでは、図１０（ａ）のリストから、図１０（ｂ）に示すように、文字列「マイナンバー」と「性別」が特定される。

【0037】

次いで、ステップＳ３４では、秘密情報解析部２８が、文字列パターンＤＢ４０を参照し、特定した項目名に対応する特徴を有する文字列を抽出する。

【0038】

ここで、秘密情報解析部２８は、まず、項目名「マイナンバー」についての処理を行うものとする。このとき、秘密情報解析部２８は、図１０（ａ）のリストの中から、１２桁の数値であり、かつマイナンバーチェックの条件をクリアする文字列を特定する。例えば、図１０（ａ）のリスト中から、１２桁の数値として、図１１（ａ）に示す（Ａ）～（Ｇ）の７つの文字列が特定されたとする。また、特定された７つの文字列のうち、マイナンバーチェックの条件をクリアする文字列は、（Ａ）文字列「１２３４５６７８９０１２」と、（Ｃ）「２３４５６７８９０１２３」、（Ｇ）「３４５６７８９０１２３４」となったものとする。

【0039】

また、秘密情報解析部２８は、上記マイナンバーチェックの条件を満たす文字列であっても、マスク領域から除外する領域に存在する文字列は除外する。図５（ａ）の例では、マスク領域から除外する領域が、従業員番号欄画像.PNGで特定されている。従業員番号欄画像.PNGは、図５（ｂ）に示すような画像である。この場合、秘密情報解析部２８は、項目名「従業員番号」の下側の欄の領域に存在する１２桁の文字列は、マスクしないこととする。図８の例では、当該領域に文字列「９９９９９９９９９９９９」や「８８８８８８８８８８８８８」が存在しているので、これらの文字列については、仮にマイナンバーチェックの条件を満たす場合でも除外される。この結果、項目名「マイナンバー」に対応する特徴を有する文字列のリストとして、図１１（ｂ）に示すようなリストが得られる。

【0040】

本実施形態では、上述したように、マスク領域から除外する領域を定義するために「従業員番号欄画像.PNG」のような画像（図５（ｂ））を用いることとしている。これにより、利用者が表をどのような大きさ（拡大率）でキャプチャしても、マスク領域から除外する箇所を精度よく特定することができる。

【0041】

また、秘密情報解析部２８は、項目名「性別」についての処理も行う。この場合、秘密情報解析部２８は、図１０（ａ）のリストから、「男」、「女」、「男性」、「女性」のいずれかである文字列（図１２（ａ）の（Ｈ）、（Ｉ）参照）を、特定する。この結果、項目名「性別」に対応する特徴を有する文字列のリストとして、図１２（ｂ）に示すようなリストが得られる。

【0042】

次いで、ステップＳ３６では、秘密情報解析部２８が、項目名に対応する特徴を有する文字列が抽出できたか否かを判断する。このステップＳ３６の判断が否定された場合、すなわちステップＳ３４において文字列を特定できなかった場合には、ステップＳ５０に移行し、秘密情報解析部２８はマスク処理を行う箇所が無かった旨を利用者端末７０に通知する。利用者は、この通知を参照することで、キャプチャした画像に秘匿すべき情報がないことを確認できるので、安心して、キャプチャした画像をマニュアル等の作成に利用することができる。その後は、図７の全処理を終了する。

【0043】

一方、ステップＳ３６の判断が肯定された場合、すなわち、図１１（ｂ）、図１２（ｂ）に示すようにステップＳ３４において文字列を特定できた場合には、ステップＳ３８に移行する。ステップＳ３８に移行すると、秘密情報解析部２８は、ステップＳ３４において抽出できた文字列に対応する項目名を１つ選択する。ここでは、項目名「マイナンバー」が選択されるものとする。

【0044】

次いで、ステップＳ４０では、秘密情報解析部２８が、選択した項目名の左上側の領域を除く領域において、抽出した文字列の中から、選択した項目名の位置に最も近い文字列を特定する。この場合、秘密情報解析部２８は、図１０（ｂ）の項目名「マイナンバー」の座標と、図１１（ｂ）のリストに含まれる文字列の座標を参照する。そして、秘密情報解析部２８は、図１３に示すように項目名「マイナンバー」の原点から見て、第２象限を除く領域（第１、第３、第４象限）に存在し、項目名「マイナンバー」の原点から最も原点が近い文字列（第１文字列）を特定する。このように第２象限を除外するのは、第２象限には、選択している項目名「マイナンバー」に対応する文字列が存在する可能性が低いからであり、第２象限を除外することで、処理を簡素化することができる。ここでは、図１１（ｂ）のリストのうち、文字列「１２３４５６７８９０１２」が特定されたものとする。

【0045】

次いで、ステップＳ４２では、秘密情報解析部２８が、抽出した文字列（図１１（ｂ））の中から、特定した文字列（第１文字列）を基準として、縦横に並ぶ文字列（第２文字列）を特定する。具体的には、秘密情報解析部２８は、図１４に示すように、文字列「１２３４５６７８９０１２」から縦方向に探索することで、文字列「２３４５６７８９０１２３」を特定する。また、秘密情報解析部２８は、文字列「１２３４５６７８９０１２」から横方向に探索したり、文字列「２３４５６７８９０１２３」から横方向に探索するが（図１４の破線矢印参照）、この場合には、新たな文字列は特定されない。したがって、本実施形態では、秘密情報解析部２８は、図１５（ａ）、図１５（ｂ）に示すようなマスク対象領域の情報（マスク処理をすべき文字列を示す情報）を生成し、マスク処理部３０に送信する。なお、例えば、文字列「１２３４５６７８９０１２」や「２３４５６７８９０１２３」から横方向に探索した結果、新たな文字列が特定された場合には、秘密情報解析部２８は、新たに特定された文字列を起点として縦方向や横方向に文字列の探索を行うものとする。

【0046】

次いで、ステップＳ４４では、秘密情報解析部２８が、マスク領域追加処理を実行し、追加対象の文字列を特定する。この場合、秘密情報解析部２８は、図５（ａ）の文字列パターンＤＢ４０を参照して、選択している項目名に対応するチェックルールとして「マスク領域追加」が存在しているかを判断する。そして、存在している場合には、秘密情報解析部２８は、当該マスク領域追加に対応付けられている画像（ここでは「備考欄画像.PNG」）を参照する。ここで、「備考欄画像.PNG」は、図５（ｃ）に示すような画像であるとする。秘密情報解析部２８は、この「備考欄画像.PNG」と同一の部分が、図８の画像データ中に存在するかを判断する。図８の場合、図５（ｃ）と同一の部分が存在しているので、その部分の下側の欄に存在する１２桁の数値で、マイナンバーチェックの条件を満たす文字列をマスク対象とする。図８の例では、「３４５６７８９０１２３４」がマスク対象領域となる。したがって、秘密情報解析部２８は、図１５（ｃ）に示すようなマスク対象領域の情報を生成し、マスク処理部３０に送信する。

【0047】

なお、本実施形態では、上述したように、マスク領域に追加する領域を定義するために図５（ｃ）に示す「備考欄画像.PNG」のような画像を用いることとしている。これにより、利用者が表をどのような大きさ（拡大率）でキャプチャしても、マスク領域を精度よく特定することができる。

【0048】

次いで、ステップＳ４６では、秘密情報解析部２８が、項目名を全て選択したか否かを判断する。ここでの判断が否定されると、秘密情報解析部２８は、ステップＳ３８に戻る。

【0049】

ステップＳ３８に戻ると、秘密情報解析部２８は、ステップＳ３４において抽出できた文字列に対応する項目名を１つ選択する。ここでは、項目名「性別」が選択されるものとする。

【0050】

次いで、ステップＳ４０では、秘密情報解析部２８が、選択した項目名「性別」の原点を基準とした左上の領域を除く領域において、抽出した文字列（図１２（ｂ））の中から、選択した項目名の位置に最も近い文字列を特定する。この場合、図１２（ｂ）のリストに含まれる文字列の中から、図８において上側に位置する「男性」の文字列が特定される。

【0051】

次いで、ステップＳ４２では、秘密情報解析部２８が、抽出した文字列（図１２（ｂ））の中から、ステップＳ４０で特定した文字列を基準として、縦横に並ぶ文字列を特定する。これにより、図８において下側に位置する「男性」の文字列が特定される。本実施形態では、秘密情報解析部２８は、図１５（ｄ）、図１５（ｅ）に示すようなマスク対象領域の情報を生成し、マスク処理部３０に送信する。

【0052】

次いで、ステップＳ４４では、秘密情報解析部２８が、マスク領域追加処理を実行し、追加対象の文字列を特定する。なお、図５（ａ）に示すように、選択中の項目名「性別」には「マスク領域追加」のチェックルールが存在していないので、ここでの処理は行われず、ステップＳ４６に移行する。

【0053】

ステップＳ４６に移行すると、秘密情報解析部２８は、項目名を全て選択したか否かを判断する。ここでの判断が肯定されると、秘密情報解析部２８は、ステップＳ４８に移行する。

【0054】

ステップＳ４８では、マスク処理部３０が、画像データのうち、特定された文字列の位置をマスク処理する。具体的には、マスク処理部３０は、秘密情報解析部２８から送信されてきた図１５（ａ）～図１５（ｅ）に示すマスク対象領域の情報に基づいて、図８の画像データを図１６に示すようにマスク処理する。そして、マスク画像送信部３２は、マスク処理後の画像データ（図１６）を利用者端末７０に送信する。これにより、利用者は、人手で画像データにマスク処理を行う必要がなくなる。また、本実施形態では、精度よく画像データがマスク処理されるため、秘匿すべき情報が漏洩するのを防止することができる。以上により、図７の全処理が終了する。

【0055】

なお、本実施形態では、図１７（ａ）に示すような表（３列目以降の項目名が省略されている表）がキャプチャされた場合でも、マスク処理すべき文字列を精度よく特定することができる。この場合、項目名「マイナンバー」が特定され（（１）参照）、項目名に対応する特徴を有する文字列のうち最も近い文字列（第１文字列）が特定される（（２）参照）。そして、（２）で特定された最も近い文字列から縦横方向に探索されることで、同様の特徴を有する文字列（第２文字列）が特定される（（３）～（５）参照）。なお、本処理においては、（２）の文字列を起点として、縦方向に探索をし、縦方向の文字列の探索が完了したら、（２）の文字列と、縦方向の探索で見つかった（３）の文字列を起点として横方向への探索を行う。また、横方向の探索で新たに見つかった（４）、（５）の文字列からも縦方向及び横方向に探索を行う。なお、既に見つかっている文字列が再度見つかった場合には、その文字列からは再度探索は行わないこととする。

【0056】

また、図１７（ｂ）に示すような表（項目名「マイナンバー」よりも上側にマイナンバーの文字列が表示された表）がキャプチャされた場合でも、マスク処理すべき文字列を精度よく特定することができる。この場合、（１）項目名「マイナンバー」が特定され、（２）項目名に対応する特徴を有する文字列のうち最も近い文字列（第１文字列）が特定される。そして、（３）～（５）最も近い文字列から縦横方向に探索して同様の特徴を有する文字列（第２文字列）が特定される。このように、様々な形式の表がキャプチャされた画像データであっても、図８の画像データと同様に、マスク処理を精度よく行うことができる。

【0057】

これまでの説明から明らかなように、本実施形態では、秘密情報解析部２８により、画像データから所定の項目名を抽出する抽出部、画像データから項目名に対応する文字列の特徴を満たす文字列を特定する第１、第２特定部としての機能が実現されている。

【0058】

以上、詳細に説明したように、本実施形態によると、ＯＣＲ処理部２６は、画像データに含まれる文字列を取得する（Ｓ３０）。また、秘密情報解析部２８は、文字列パターンＤＢ４０を参照して、取得した文字列の中からマスク対象の項目名を特定する（Ｓ３２）。また、秘密情報解析部２８は、文字列パターンＤＢ４０を参照して、画像データに含まれる文字列の中から、特定した項目名に対応する文字列の特徴を満たす文字列を特定する（Ｓ３４、Ｓ４０）。また、秘密情報解析部２８は、特定した文字列を基準として、縦方向及び横方向に並ぶ、項目名に対応する文字列の特徴を満たす文字列を特定する（Ｓ４２）。そして、マスク処理部３０は、秘密情報解析部２８の処理結果に基づいて、画像データをマスク処理する（Ｓ４８）。すなわち、秘密情報解析部２８は、マスクするのが好ましい文字列の特徴を有する文字列（第１文字列）を基準として、同様の特徴を有する文字列が配置されている可能性の高い位置を探索し、同様の特徴を有する文字列（第２文字列）を特定する。これにより、精度よくマスク対象の文字列を特定することができる。したがって、サーバ１０によれば、マスク対象の文字列が精度よくマスク処理された画像データを自動的に生成し、利用者端末７０に提供することができる。また、サーバ１０において画像データが自動的にマスク処理されることから、利用者は、画像データを手動でマスク処理しなくてもよくなる。例えば、マスク処理の方法としては、項目名の所定方向（右方向や下方向）に存在する所定文字数の文字列をマスクする方法がある。しかしながら、このような方法では、図１７（ａ）や図１７（ｂ）のような表を含む画像データを適切にマスクすることは難しい。一方、本実施形態では、図１７（ａ）や図１７（ｂ）のような表を含む画像データであっても、適切にマスク処理を行うことができる。

【0059】

また、本実施形態では、ステップＳ４０において、秘密情報解析部２８は、選択している項目名の左上側（第２象限）を除く範囲において、項目名に対応する特徴を有する文字列を１つ特定する。このように、処理において、第２象限を除外することで、処理の簡素化を図ることができる。

【0060】

また、本実施形態では、図５（ａ）の「チェックルール」のフィールドに、マスク領域を追加するために用いる画像（例えば、備考欄画像.PNG）を格納しておくことができる。このように、マスク領域を特定する画像を格納しておくことで、表がどのような大きさ（拡大率）でキャプチャされたとしても、マスク領域に追加する領域を精度よく特定することができる。

【0061】

なお、上記実施形態では、秘密情報解析部２８は、ステップＳ４０において、項目名に対応する特徴を有する文字列のうち、項目名の最も近くに存在する文字列を特定しているが、これに限られるものではない。例えば、秘密情報解析部２８は、項目名に対応する特徴を有する文字列の中からランダムに１つの文字列を特定してもよい。

【0062】

なお、上記実施形態では、秘密情報解析部２８は、ステップＳ４０において、項目名の原点を基準として第２象限以外の範囲で、項目名の位置に最も近い文字列を特定する場合について説明したが、これに限られるものではない。例えば、ステップＳ３４において、秘密情報解析部２８が文字列を抽出する範囲から、第２象限を除外してもよい。また、ステップＳ４２において、秘密情報解析部２８が縦横に探索する際に、第２象限を除外することとしてもよい。あるいは、ステップＳ４０やステップＳ３４、Ｓ４２において、第２象限を除外せずに各処理を行うこととしてもよい。

【0063】

なお、上記実施形態では、マスク処理部３０は、文字列を黒塗りの矩形形状でマスクする場合について説明したが、これに限られるものではない。例えば、文字列の文字数がわかるように、１文字ずつマスクすることとしてもよい。また、モザイク処理を行ったり、任意の文字（例えばアルファベットや×など）で置き換える処理を行うこととしてもよい。

【0064】

なお、上記の処理機能は、コンピュータによって実現することができる。その場合、処理装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記憶媒体（ただし、搬送波は除く）に記録しておくことができる。

【0065】

プログラムを流通させる場合には、例えば、そのプログラムが記録されたＤＶＤ（Digital Versatile Disc）、ＣＤ－ＲＯＭ（Compact Disc Read Only Memory）などの可搬型記憶媒体の形態で販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。

【0066】

プログラムを実行するコンピュータは、例えば、可搬型記憶媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記憶媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。

【0067】

上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。

【0068】

なお、以上の実施形態の説明に関して、更に以下の付記を開示する。
（付記１） 画像データに含まれる文字列を取得し、
マスク対象の項目名と、該項目名に対応する文字列の特徴とを関連付けて記憶する記憶部を参照して、取得した前記文字列の中から前記マスク対象の項目名を抽出し、
前記記憶部を参照して、前記画像データに含まれる文字列の中から、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第１文字列を特定し、
特定した前記第１文字列を基準として、縦方向及び横方向に並ぶ、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第２文字列を特定し、
前記画像データの、前記第１文字列と前記第２文字列をマスクする、
処理をコンピュータに実行させるための画像データ編集プログラム。
（付記２） 前記第１文字列を特定する処理では、抽出した前記マスク対象の項目名の左上側を除く範囲に存在する文字列の中から、前記第１文字列を１つ特定する、ことを特徴とする付記１に記載の画像データ編集プログラム。
（付記３） 前記第１文字列を特定する処理では、抽出した前記マスク対象の項目名に最も近い位置に存在する前記第１文字列を特定する、ことを特徴とする付記１又は２に記載の画像データ編集プログラム。
（付記４） 前記記憶部は、マスク対象の領域を示す画像と、前記マスク対象の領域に対応する文字列の特徴とを関連付けて記憶しており、
前記マスクする処理では、前記画像データのうち、前記記憶部に記憶されている前記マスク対象の領域に存在し、かつ前記マスク対象の領域に対応する文字列の特徴を有する文字列をマスクする、ことを特徴とする付記１～３のいずれかに記載の画像データ編集プログラム。
（付記５） 画像データに含まれる文字列を取得し、
マスク対象の項目名と、該項目名に対応する文字列の特徴とを関連付けて記憶する記憶部を参照して、取得した前記文字列の中から前記マスク対象の項目名を抽出し、
前記記憶部を参照して、前記画像データに含まれる文字列の中から、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第１文字列を特定し、
特定した前記第１文字列を基準として、縦方向及び横方向に並ぶ、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第２文字列を特定し、
前記画像データの、前記第１文字列と前記第２文字列をマスクする、
処理をコンピュータが実行することを特徴とする画像データ編集方法。
（付記６） 画像データに含まれる文字列を取得する文字列取得部と、
マスク対象の項目名と、該項目名に対応する文字列の特徴とを関連付けて記憶する記憶部と、
前記記憶部を参照して、取得した前記文字列の中から前記マスク対象の項目名を抽出する抽出部と、
前記記憶部を参照して、前記画像データに含まれる文字列の中から、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第１文字列を特定する第１特定部と、
特定した前記第１文字列を基準として、縦方向及び横方向に並ぶ、抽出した前記マスク対象の項目名に対応する文字列の特徴を満たす第２文字列を特定する第２特定部と、
前記画像データの、前記第１文字列と前記第２文字列をマスクするマスク処理部と、
を備える画像データ編集装置。
（付記７） 前記第１特定部は、抽出した前記マスク対象の項目名の左上側を除く範囲に存在する文字列の中から、前記第１文字列を１つ特定する、ことを特徴とする付記６に記載の画像データ編集装置。
（付記８） 前記第１特定部は、抽出した前記マスク対象の項目名に最も近い位置に存在する前記第１文字列を特定する、ことを特徴とする付記６又は７に記載の画像データ編集装置。
（付記９） 前記記憶部は、マスク対象の領域を示す画像と、前記マスク対象の領域に対応する文字列の特徴とを関連付けて記憶しており、
前記マスク処理部は、前記画像データのうち、前記記憶部に記憶されている前記マスク対象の領域に存在し、かつ前記マスク対象の領域に対応する文字列の特徴を有する文字列をマスクする、ことを特徴とする付記６～８のいずれかに記載の画像データ編集装置。

【符号の説明】

【0069】

１０ サーバ（画像データ編集装置）
２６ ＯＣＲ処理部（文字列取得部）
２８ 秘密情報解析部（抽出部、第１特定部、第２特定部）
３０ マスク処理部
４０ 文字列パターンＤＢ（記憶部）

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】