(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2023-12-11
(45)【発行日】2023-12-19
(54)【発明の名称】情報処理装置及び情報処理プログラム
(51)【国際特許分類】
G06V 30/14 20220101AFI20231212BHJP
G06T 7/00 20170101ALI20231212BHJP
【ＦＩ】
G06V30/14 340J
G06T7/00 570
G06T7/00 590
【請求項の数】
6
(21)【出願番号】P 2019209447
(22)【出願日】2019-11-20
(65)【公開番号】P2021082046
(43)【公開日】2021-05-27
【審査請求日】2022-10-20
(73)【特許権者】
【識別番号】000005496
【氏名又は名称】富士フイルムビジネスイノベーション株式会社
(74)【代理人】
【識別番号】100115129
【弁理士】
【氏名又は名称】清水 昇
(74)【代理人】
【識別番号】100102716
【弁理士】
【氏名又は名称】在原 元司
(74)【代理人】
【識別番号】100122275
【弁理士】
【氏名又は名称】竹居 信利
(72)【発明者】
【氏名】小林 邦彦
(72)【発明者】
【氏名】久保 周作
(72)【発明者】
【氏名】上野 邦和
【審査官】伊知地 和之
(56)【参考文献】
【文献】特開２００２－２４５４６１（ＪＰ，Ａ）
【文献】特開２０１７－０４９９７６（ＪＰ，Ａ）
【文献】特開２０１９－０４０４６７（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｖ ３０／１４
Ｇ０６Ｔ ７／００
(57)【特許請求の範囲】
【請求項1】
メモリと一又は複数のプロセッサを備え、前記メモリは、対象画像と予め定められた位置関係にある項目の情報を抽出するための規則を記憶しており、
前記プロセッサは、
画像から対象画像を抽出し、
前記規則を用いて、抽出した対象画像と予め定められた位置関係にある項目の情報を抽出し、
前記対象画像を印影画像とし、
前記項目の情報を署名又は記名の文字認識結果とし、
前記メモリは、さらに、印鑑の印影画像と該印鑑の所有者を対応させて記憶しており、
前記プロセッサは、
前記画像内の文字画像の全て又は一部を文字認識し、
抽出した印影画像と予め定められた位置関係にある文字画像の文字認識結果を署名又は記名として抽出し、
抽出した文字認識結果が、前記メモリ内の印影画像に対応する所有者と一致するか否かについての判断結果を、表示装置に表示させるように制御する、
情報処理装置。
【請求項2】
前記プロセッサは、さらに、抽出した文字認識結果が、前記メモリ内の印影画像に対応する所有者に一致しない場合は、該所有者に対して通知を行う、
請求項１に記載の情報処理装置。
【請求項3】
前記対象画像を印影画像とし、前記項目の情報を署名画像とし、
前記メモリは、さらに、印鑑の印影画像と該印鑑の所有者による署名画像を対応させて記憶しており、
前記プロセッサは、
抽出した印影画像と予め定められた位置関係にある文字画像を署名画像として抽出し、
抽出した印影画像と文字画像が、前記メモリ内の印影画像と署名画像と一致するか否かについての判断結果を、表示装置に表示させるように制御する、
請求項１に記載の情報処理装置。
【請求項4】
前記プロセッサは、さらに、抽出した署名画像が、前記メモリ内の印影画像に対応する署名画像に一致しない場合は、前記所有者、又は、抽出した署名画像を文字認識した結果である署名者に対して通知を行う、
請求項３に記載の情報処理装置。
【請求項5】
前記規則は、前記対象画像と前記項目の位置関係の他に、さらに、前記対象画像の大きさと前記項目の領域の大きさの関係、前記項目に記載されている文字の属性の指定、前記項目に記載されている文字画像の文字認識結果、のうちいずれか１つ、又は、これらの組み合わせによって構成されている、請求項１から４のいずれか１項に記載の情報処理装置。
【請求項6】
メモリと一又は複数のプロセッサを備え、前記メモリは、対象画像と予め定められた位置関係にある項目の情報を抽出するための規則を記憶している、
コンピュータに、
画像から対象画像を抽出し、
前記規則を用いて、抽出した対象画像と予め定められた位置関係にある項目の情報を抽出し、
前記対象画像を印影画像とし、
前記項目の情報を署名又は記名の文字認識結果とし、
前記メモリは、さらに、印鑑の印影画像と該印鑑の所有者を対応させて記憶しており、
前記コンピュータは、
前記画像内の文字画像の全て又は一部を文字認識し、
抽出した印影画像と予め定められた位置関係にある文字画像の文字認識結果を署名又は記名として抽出し、
抽出した文字認識結果が、前記メモリ内の印影画像に対応する所有者と一致するか否かについての判断結果を、表示装置に表示させるように制御する、
処理を実行させるための情報処理プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報処理装置及び情報処理プログラムに関する。
【背景技術】
【0002】
特許文献１には、画像を含んだ情報を効率的かつ適確に検索し得る情報検索方法および情報検索プログラムを記録した記録媒体を提供することを課題とし、自動情報収集装置でＷＷＷ上の画像を含むデータを収集し、この収集データの特徴量を特徴量抽出装置で抽出し、単語抽出装置で画像情報の近傍の単語を抽出し、各単語に対して画像に近い順に高い点数を付与し、データと単語とをそれぞれのデータ特徴量と点数とに対応付けてデータベースに格納し、検索時は、キー画像の特徴量を抽出し、データベース内のデータの特徴量から近似順位を求め、キー画像とキーワードに対してデータベース内の画像とキー画像の近似順位およびキーワードとデータベース内の単語との一致したものとその点数からキーワードに関係する画像を順位付けし、該順位に基づいて検索結果を得ることが開示されている。
【0003】
特許文献２には、文書画像からの情報項目の値の抽出を容易にすることを課題とし、文書情報ＤＢには、文書画像から抽出すべき各項目の項目名と、文書画像中でのその項目名に対する項目値が存在すべき相対位置とが登録され、項目名抽出部は、文書画像に対する文字認識結果から、抽出すべき項目の項目名に該当する文字列を求め、項目値抽出部は、求められた項目名に対し、項目値が存在すべき相対位置にある文字列を、その項目名に対する項目値として抽出することが開示されている。
【0004】
特許文献３には、フォーマットが未知の画像から、効率よく高速に文字認識処理による情報の抽出を行う情報処理装置を提供することを課題とし、情報処理装置は、画像を領域解析することにより領域を抽出し、特定のキーワードと当該キーワードに対応するバリューとを抽出するためのルールを取得し、ルールを用いてキーワードを含む領域および当該キーワードに対応するバリューを含む領域を特定する順番を、当該ルールに含まれる前記キーワードと当該キーワードに対応するバリューとが取り得る値に応じて決定し、決定された順番に従い、キーワードを含む領域または当該キーワードに対応するバリューを含む領域を抽出された領域の中から特定し、特定された領域に対して文字認識処理を行い、その後、決定された順番に従い、先に特定した領域に基づいて、対応するもう一方の領域を特定することが開示されている。
【先行技術文献】
【特許文献】
【0005】
【文献】特開平１１－２２４２５６号公報
【文献】特開２００７－２３３９１３号公報
【文献】特開２０１８－１２８９９６号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
画像から対象情報と関連する項目の情報を抽出する情報処理装置において、キーとなる対象情報を文字認識結果であるテキストとした構成では、対象情報が文字認識できない画像である場合に関連する項目の情報を抽出することができない。そこで本発明は、対象情報が画像である場合に、その対象情報である画像と予め定められた位置関係にある項目の情報を抽出することができる情報処理装置及び情報処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【0007】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。なお、以下の「請求項」とあるのは、出願当初の請求項である。
請求項１の発明は、メモリと一又は複数のプロセッサを備え、前記メモリは、対象画像と予め定められた位置関係にある項目の情報を抽出するための規則を記憶しており、前記プロセッサは、画像から対象画像を抽出し、前記規則を用いて、抽出した対象画像と予め定められた位置関係にある項目の情報を抽出する、情報処理装置である。
請求項１の発明は、メモリと一又は複数のプロセッサを備え、前記メモリは、対象画像と予め定められた位置関係にある項目の情報を抽出するための規則を記憶しており、前記プロセッサは、画像から対象画像を抽出し、前記規則を用いて、抽出した対象画像と予め定められた位置関係にある項目の情報を抽出する、情報処理装置である。
【0008】
請求項２の発明は、前記対象画像を印影画像とし、前記項目の情報を署名又は記名の文字認識結果とし、前記メモリは、さらに、印鑑の印影画像と該印鑑の所有者を対応させて記憶しており、前記プロセッサは、前記画像内の文字画像の全て又は一部を文字認識し、抽出した印影画像と予め定められた位置関係にある文字画像の文字認識結果を署名又は記名として抽出し、抽出した文字認識結果が、前記メモリ内の印影画像に対応する所有者と一致するか否かについての判断結果を、表示装置に表示させるように制御する、請求項１に記載の情報処理装置である。
【0009】
請求項３の発明は、前記プロセッサは、さらに、抽出した文字認識結果が、前記メモリ内の印影画像に対応する所有者に一致しない場合は、該所有者に対して通知を行う、請求項２に記載の情報処理装置である。
【0010】
請求項４の発明は、前記対象画像を印影画像とし、前記項目の情報を署名画像とし、前記メモリは、さらに、印鑑の印影画像と該印鑑の所有者による署名画像を対応させて記憶しており、前記プロセッサは、抽出した印影画像と予め定められた位置関係にある文字画像を署名画像として抽出し、抽出した印影画像と文字画像が、前記メモリ内の印影画像と署名画像と一致するか否かについての判断結果を、表示装置に表示させるように制御する、請求項１に記載の情報処理装置である。
【0011】
請求項５の発明は、前記プロセッサは、さらに、抽出した署名画像が、前記メモリ内の印影画像に対応する署名画像に一致しない場合は、前記所有者、又は、抽出した署名画像を文字認識した結果である署名者に対して通知を行う、請求項４に記載の情報処理装置である。
【0012】
請求項６の発明は、前記規則は、前記対象画像と前記項目の位置関係の他に、さらに、前記対象画像の大きさと前記項目の領域の大きさの関係、前記項目に記載されている文字の属性の指定、前記項目に記載されている文字画像の文字認識結果、のうちいずれか１つ、又は、これらの組み合わせによって構成されている、請求項１から５のいずれか１項に記載の情報処理装置である。
【0013】
請求項７の発明は、メモリと一又は複数のプロセッサを備え、前記メモリは、対象画像と予め定められた位置関係にある項目の情報を抽出するための規則を記憶している、コンピュータに、画像から対象画像を抽出し、前記規則を用いて、抽出した対象画像と予め定められた位置関係にある項目の情報を抽出する、処理を実行させるための情報処理プログラムである。
【発明の効果】
【0014】
請求項１の情報処理装置によれば、対象情報が画像である場合に、その対象情報である画像と予め定められた位置関係にある項目の情報を抽出することができる。
【0015】
請求項２の情報処理装置によれば、対象画像を印影画像とし、項目の情報を署名又は記名の文字認識結果とした場合に、文字認識結果が、印鑑の所有者と一致するか否かについて、ユーザーは知ることができる。
【0016】
請求項３の情報処理装置によれば、文字認識結果が、印鑑の所有者に一致しない場合は、その所有者に対して通知を行うことができる。
【0017】
請求項４の情報処理装置によれば、対象画像を印影画像とし、項目の情報を署名画像とし、印影画像と署名画像が、メモリ内の印影画像と署名画像と一致するか否かについて、ユーザーは知ることができる。
【0018】
請求項５の情報処理装置によれば、署名画像が、メモリ内の印影画像に対応する署名画像に一致しない場合は、印鑑の所有者、又は、抽出した署名画像を文字認識した結果である署名者に対して通知を行うことができる。
【0019】
請求項６の情報処理装置によれば、規則として、対象画像と項目の位置関係の他に、さらに、対象画像の大きさと項目の領域の大きさの関係、項目に記載されている文字の属性の指定、項目に記載されている文字画像の文字認識結果、のうちいずれか１つ、又は、これらの組み合わせを用いることができる。
【0020】
請求項７の情報処理プログラムによれば、対象情報が画像である場合に、その対象情報である画像と予め定められた位置関係にある項目の情報を抽出することができる。
【図面の簡単な説明】
【0021】
【図1】第１の実施の形態の構成例についての概念的なモジュール構成図である。
【図2】第１の実施の形態を利用したシステム構成例を示す説明図である。
【図3】第１の実施の形態が処理対象とする文書の例を示す説明図である。
【図4】バリュー抽出規則テーブルのデータ構造例を示す説明図である。
【図5】第１の実施の形態による処理例を示すフローチャートである。
【図6】画像情報テーブルのデータ構造例を示す説明図である。
【図7】画像・文字処理結果テーブルのデータ構造例を示す説明図である。
【図8】第１の実施の形態による処理例を示すフローチャートである。
【図9】第１の実施の形態による処理例を示すフローチャートである。
【図10】第１の実施の形態による表示例を示す説明図である。
【図11】第２の実施の形態の構成例についての概念的なモジュール構成図である。
【図12】第２の実施の形態を利用したシステム構成例を示す説明図である。
【図13】第２の実施の形態が処理対象とする文書の例を示す説明図である。
【図14】第２の実施の形態による処理例を示すフローチャートである。
【図15】印鑑情報テーブルのデータ構造例を示す説明図である。
【図16】署名印鑑処理結果テーブルのデータ構造例を示す説明図である。
【図17】第２の実施の形態による処理例を示す説明図である。
【図18】第２の実施の形態による処理例を示すフローチャートである。
【図19】第２の実施の形態による処理例を示すフローチャートである。
【図20】第２の実施の形態による表示例を示す説明図である。
【図21】第２の実施の形態による処理例を示すフローチャートである。
【図22】第２の実施の形態による処理例を示すフローチャートである。
【図23】印鑑情報テーブルのデータ構造例を示す説明図である。
【図24】第２の実施の形態による処理例を示すフローチャートである。
【図25】本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。
【発明を実施するための形態】
【0022】
以下、図面に基づき本発明を実現するにあたっての好適な各種の実施の形態の例を説明する。
図１は、第１の実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（「ソフトウェア」の解釈として、コンピュータ・プログラムを含む）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム（例えば、コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム）、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するという意味である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（例えば、データの授受、指示、データ間の参照関係、ログイン等）の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態にしたがって、又はそれまでの状況・状態にしたがって定まることの意を含めて用いる。「予め定められた値」が複数ある場合は、それぞれ異なった値であってもよいし、２以上の値（「２以上の値」には、もちろんのことながら、全ての値も含む）が同じであってもよい。また、「Ａである場合、Ｂをする」という記載は、「Ａであるか否かを判断し、Ａであると判断した場合はＢをする」の意味で用いる。ただし、Ａであるか否かの判断が不要である場合を除く。また、「Ａ、Ｂ、Ｃ」等のように事物を列挙した場合は、断りがない限り例示列挙であり、その１つのみを選んでいる場合（例えば、Ａのみ）を含む。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（「ネットワーク」には、一対一対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」（つまり、社会システム）にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスクドライブ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙの略）、外部記憶媒体、通信回線を介した記憶装置、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔの略）内のレジスタ等を含んでいてもよい。
図１は、第１の実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（「ソフトウェア」の解釈として、コンピュータ・プログラムを含む）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム（例えば、コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム）、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するという意味である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（例えば、データの授受、指示、データ間の参照関係、ログイン等）の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態にしたがって、又はそれまでの状況・状態にしたがって定まることの意を含めて用いる。「予め定められた値」が複数ある場合は、それぞれ異なった値であってもよいし、２以上の値（「２以上の値」には、もちろんのことながら、全ての値も含む）が同じであってもよい。また、「Ａである場合、Ｂをする」という記載は、「Ａであるか否かを判断し、Ａであると判断した場合はＢをする」の意味で用いる。ただし、Ａであるか否かの判断が不要である場合を除く。また、「Ａ、Ｂ、Ｃ」等のように事物を列挙した場合は、断りがない限り例示列挙であり、その１つのみを選んでいる場合（例えば、Ａのみ）を含む。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（「ネットワーク」には、一対一対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」（つまり、社会システム）にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスクドライブ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙの略）、外部記憶媒体、通信回線を介した記憶装置、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔの略）内のレジスタ等を含んでいてもよい。
【0023】
本実施の形態である画像処理装置１００は、対象画像と関連する項目の情報を抽出することができる機能を有しており、図１の例に示すように、画像処理装置１００は、ＵＩ処理モジュール１０５、情報登録モジュール１１０、情報記憶モジュール１１５、画像・文字認識処理モジュール１２０、スキャン処理モジュール１２５、画像処理モジュール１３０、画像認識処理モジュール１３５、文字認識処理モジュール１４０、結果保存モジュール１４５、結果情報記憶モジュール１５０、確認モジュール１５５を有している。
ここで「対象画像」は、文書画像内にある画像であって、キーとなり得る画像である。なお、「キー」とは、画像から項目の情報を抽出するための手がかりとなる情報である。したがって、対象画像には、同じ文書画像内に関連する項目がある。「対象画像」として、例えば、印影画像、顔画像、商品画像等がある。
ここで「対象画像」は、文書画像内にある画像であって、キーとなり得る画像である。なお、「キー」とは、画像から項目の情報を抽出するための手がかりとなる情報である。したがって、対象画像には、同じ文書画像内に関連する項目がある。「対象画像」として、例えば、印影画像、顔画像、商品画像等がある。
【0024】
ＵＩ処理モジュール１０５は、情報登録モジュール１１０、画像・文字認識処理モジュール１２０、確認モジュール１５５と接続されている。ＵＩ処理モジュール１０５は、画像処理装置１００のユーザーインタフェースの機能を有する。例えば、対象となる画像又は画像・文字認識処理モジュール１２０による処理結果等を表示装置に表示し、画像・文字認識処理モジュール１２０による処理結果等の修正の操作等を受け付ける。表示装置として、例えば、液晶ディスプレイ、有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅの略）等であってもよいし、タッチパネル等を制御して、表示を行うようにしてもよいし、操作者が有している携帯通信機器と通信（主に無線通信）を行って、その携帯通信機器に表示させるようにしてもよい。また、表示装置への表示の他に、スピーカーによる音声出力、触覚デバイスを用いた触感によって、ユーザーへのメッセージを提示するようにしてもよい。操作等を受け付ける方法として、マウス、キーボード、カメラ、マイク等を用いたユーザーの操作（視線、ジェスチャ、音声等も含む）を受け付けるようにしてもよいし、、また、前述したように、タッチパネル等を制御して、操作を受け付けるようにしてもよいし、操作者が有している携帯通信機器と通信（主に無線通信）を行って、その携帯通信機器における操作を受け付けるようにしてもよい。
【0025】
情報登録モジュール１１０は、ＵＩ処理モジュール１０５、情報記憶モジュール１１５と接続されている。情報登録モジュール１１０は、対象となり得る画像に関する情報、対象画像と予め定められた位置関係にある項目の情報を抽出するための規則を、情報記憶モジュール１１５に記憶させる。例えば、ＵＩ処理モジュール１０５が受け付けたユーザーの操作に応じて、それらの情報を情報記憶モジュール１１５に記憶させる。
【0026】
「対象となり得る画像に関する情報」とは、画像を本実施の形態において一意に識別するための情報とその画像との組み合わせの情報である。「対象となり得る画像に関する情報」として、例えば、画像情報テーブル６００がある。図６は、画像情報テーブル６００のデータ構造例を示す説明図である。画像情報テーブル６００は、画像ＩＤ欄６０５、画像欄６１０を有している。画像ＩＤ欄６０５は、本実施の形態において、画像を一意に識別するための情報（具体的には、画像ＩＤ：ＩＤｅｎｔｉｆｉｃａｔｉｏｎの略）を記憶している。画像欄６１０は、画像を記憶している。例えば、画像情報テーブル６００の１行目は、画像ＩＤ：Ｇ００１１は、画像「ｉｍａｇｅ１１」であることを示しており、２行目は、画像ＩＤ：Ｇ００１２は、画像「ｉｍａｇｅ１２」であることを示している。画像欄６１０には、画像そのものを記憶していてもよいし、その画像が記憶されているＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒの略）等であってもよいし、その画像を認識するために必要な特徴を記憶するようにしてもよい。
【0027】
「対象画像と予め定められた位置関係にある項目の情報を抽出するための規則」とは、キーとなる画像の位置とその画像に関連する項目がある位置との関係を規定した情報である。例えば、バリュー抽出規則テーブル４００がある。図４は、バリュー抽出規則テーブル４００のデータ構造例を示す説明図である。バリュー抽出規則テーブル４００は、ルールＩＤ欄４０５、キー欄４１０、バリュー抽出規則欄４１５を有している。ルールＩＤ欄４０５は、本実施の形態において、ルールを一意に識別するための情報（具体的には、ルールＩＤ）を記憶している。キー欄４１０は、キーを記憶している。バリュー抽出規則欄４１５は、バリュー抽出規則を記憶している。例えば、バリュー抽出規則テーブル４００の１行目は、ルールＩＤ：ＧＲ０００１は、キーが「顔画像」であり、バリュー抽出規則が「顔画像の右側にある領域」であることを示しており、２行目は、ルールＩＤ：ＳＲ１１１１は、キーが「印影画像」であり、バリュー抽出規則が「正立の印影画像の左側にある署名領域」であることを示している。
【0028】
また、規則は、対象画像と項目の位置関係の他に、さらに、対象画像の大きさと項目の領域の大きさの関係、項目に記載されている文字の属性の指定、項目に記載されている文字画像の文字認識結果、のうちいずれか１つ、又は、これらの組み合わせによって構成されていてもよい。
「文字の属性の指定」の規則とは、文字における表示形態を示すものであって、例えば、下線が引かれているか否か、文字の大きさ、文字の書体、文字の色等の指定が該当する。
「文字画像の文字認識結果」の規則とは、項目として抽出される文字画像を文字認識した結果のテキストであって、例えば、日付を除く、予め定められた文字列であること、又は、予め定められた文字列を除く等が該当する。
「文字の属性の指定」の規則とは、文字における表示形態を示すものであって、例えば、下線が引かれているか否か、文字の大きさ、文字の書体、文字の色等の指定が該当する。
「文字画像の文字認識結果」の規則とは、項目として抽出される文字画像を文字認識した結果のテキストであって、例えば、日付を除く、予め定められた文字列であること、又は、予め定められた文字列を除く等が該当する。
【0029】
情報記憶モジュール１１５は、情報登録モジュール１１０、画像認識処理モジュール１３５と接続されている。情報記憶モジュール１１５は、対象画像と予め定められた位置関係にある項目の情報を抽出するための規則を少なくとも記憶している。例えば、前述したバリュー抽出規則テーブル４００を記憶している。さらに、画像情報テーブル６００等を記憶していてもよい。
【0030】
画像・文字認識処理モジュール１２０は、ＵＩ処理モジュール１０５、スキャン処理モジュール１２５と接続されている。画像・文字認識処理モジュール１２０は、スキャン処理モジュール１２５、画像処理モジュール１３０、画像認識処理モジュール１３５、文字認識処理モジュール１４０を制御して、画像からの対象となる画像の認識処理と抽出処理、そして、その抽出した画像内の文字の認識処理を行わせる。
【0031】
スキャン処理モジュール１２５は、画像・文字認識処理モジュール１２０、画像処理モジュール１３０と接続されている。スキャン処理モジュール１２５は、対象画像が含まれている画像を取得する。例えば、画像読取装置で画像を読み取ってもよいし、カメラ等で画像を撮影してもよい。また、画像が蓄積されている画像蓄積装置から画像を取得するようにしてもよい。なお、画像には、文書の画像が含まれる。
画像処理モジュール１３０は、スキャン処理モジュール１２５、画像認識処理モジュール１３５、文字認識処理モジュール１４０、結果保存モジュール１４５と接続されている。画像処理モジュール１３０は、スキャン処理モジュール１２５によって取得された画像に対して、画像認識処理モジュール１３５、文字認識処理モジュール１４０を用いて、対象画像の抽出処理を行い、抽出した対象画像と予め定められた位置関係にある項目の情報を抽出する。ここで項目の情報として、文字認識処理モジュール１４０による文字認識結果が該当する。そして、この処理結果を結果保存モジュール１４５に渡す。
画像処理モジュール１３０は、スキャン処理モジュール１２５、画像認識処理モジュール１３５、文字認識処理モジュール１４０、結果保存モジュール１４５と接続されている。画像処理モジュール１３０は、スキャン処理モジュール１２５によって取得された画像に対して、画像認識処理モジュール１３５、文字認識処理モジュール１４０を用いて、対象画像の抽出処理を行い、抽出した対象画像と予め定められた位置関係にある項目の情報を抽出する。ここで項目の情報として、文字認識処理モジュール１４０による文字認識結果が該当する。そして、この処理結果を結果保存モジュール１４５に渡す。
【0032】
画像認識処理モジュール１３５は、情報記憶モジュール１１５、画像処理モジュール１３０と接続されている。画像認識処理モジュール１３５は、スキャン処理モジュール１２５によって取得された画像から、情報記憶モジュール１１５に記憶されている対象画像を抽出する。そして、抽出した対象画像を画像処理モジュール１３０に渡す。
また、情報記憶モジュール１１５に記憶されている規則を用いて、抽出した対象画像と予め定められた位置関係にある項目の画像を抽出する。抽出した項目の画像を、文字認識処理モジュール１４０に渡す。
例えば、対象画像が顔画像である場合は、情報記憶モジュール１１５内の顔画像とのパターンマッチング処理で、その顔画像を抽出するようにしてもよいし、情報記憶モジュール１１５内の顔画像の特徴を用いて、顔認識処理を行って、その顔画像を抽出するようにしてもよい。顔認識処理として、人工知能による顔認識等の既存の技術を用いればよい。
また、情報記憶モジュール１１５に記憶されている規則を用いて、抽出した対象画像と予め定められた位置関係にある項目の画像を抽出する。抽出した項目の画像を、文字認識処理モジュール１４０に渡す。
例えば、対象画像が顔画像である場合は、情報記憶モジュール１１５内の顔画像とのパターンマッチング処理で、その顔画像を抽出するようにしてもよいし、情報記憶モジュール１１５内の顔画像の特徴を用いて、顔認識処理を行って、その顔画像を抽出するようにしてもよい。顔認識処理として、人工知能による顔認識等の既存の技術を用いればよい。
【0033】
文字認識処理モジュール１４０は、画像処理モジュール１３０と接続されている。文字認識処理モジュール１４０は、画像認識処理モジュール１３５によって抽出された項目の画像を対象として、文字認識処理を行う。そして、文字認識結果を画像処理モジュール１３０に渡す。
【0034】
確認モジュール１５５は、ＵＩ処理モジュール１０５、結果保存モジュール１４５と接続されている。確認モジュール１５５は、画像処理モジュール１３０による処理結果である、（１）画像から抽出した対象画像、（２）その対象画像と予め定められた位置関係にある項目の情報を、ユーザーに確認させる。そして、ユーザーが誤りを発見した場合は、ユーザーの操作に応じて修正が行われる。例えば、抽出した対象画像を表示することによって、その対象画像の確認が行われ、誤りがある場合はユーザーの操作によって対象画像の抽出が行われる。同様に、文字認識結果を表示することによって、その文字認識結果の確認が行われ、誤りがある場合はユーザーの操作によって文字の修正が行われる。
【0035】
結果保存モジュール１４５は、画像処理モジュール１３０、結果情報記憶モジュール１５０、確認モジュール１５５と接続されている。結果保存モジュール１４５は、画像処理モジュール１３０による処理結果である、（１）画像から抽出した対象画像、（２）その対象画像と予め定められた位置関係にある項目の情報を、結果情報記憶モジュール１５０に記憶させる。そして、確認モジュール１５５の処理のために、結果情報記憶モジュール１５０内の情報を読み出して、確認モジュール１５５に渡す。
【0036】
結果情報記憶モジュール１５０は、結果保存モジュール１４５と接続されている。結果情報記憶モジュール１５０は、画像処理モジュール１３０による処理結果を記憶する。例えば、画像・文字処理結果テーブル７００を記憶する。図７は、画像・文字処理結果テーブル７００のデータ構造例を示す説明図である。画像・文字処理結果テーブル７００は、文書ＩＤ欄７０５、文書名欄７１０、説明文認識結果欄７１５、画像ＩＤ欄７２０、処理日欄７２５を有している。文書ＩＤ欄７０５は、本実施の形態において、文書を一意に識別するための情報（具体的には、文書ＩＤ）を記憶している。文書名欄７１０は、文書名を記憶している。説明文認識結果欄７１５は、文字認識処理モジュール１４０による文字認識結果である説明文認識結果を記憶している。画像ＩＤ欄７２０は、画像認識処理モジュール１３５によって抽出された画像の画像ＩＤを記憶している。画像情報テーブル６００の画像ＩＤ欄６０５に対応するものである。処理日欄７２５は、画像処理モジュール１３０による処理が行われた日時（年、月、日、時、分、秒、秒以下、又はこれらの組み合わせであってもよい）を記憶している。例えば、画像・文字処理結果テーブル７００の１行目は、文書ＩＤ：Ｄ１１１１は、文書名が「所員リスト」であり、説明文認識結果が「富士太郎 ＸＸＸ研究Ｇ」であり、画像ＩＤが「Ｇ００１１」であり、処理日が「２０１９／１０／１」であることを示しており、２行目は、文書ＩＤ：Ｄ１１１１は、文書名が「所員リスト」であり、説明文認識結果が「富士二郎 ＹＹＹ研究Ｇ」であり、画像ＩＤが「Ｇ００１２」であり、処理日が「２０１９／１０／１」であることを示している。
【0037】
図２は、第１の実施の形態を利用したシステム構成例を示す説明図である。図１の例に示した画像処理装置１００は、単独のスタンドアロンとして処理を行うようにしてもよいし、通信回線に接続されて、他のユーザー端末２５０から利用されるようにしてもよい。
画像処理装置１００Ａ、画像処理装置１００Ｂ、画像情報等登録サーバー２１０、ユーザー端末２５０は、通信回線２９０を介してそれぞれ接続されている。通信回線２９０は、無線、有線、これらの組み合わせであってもよく、例えば、通信インフラとしてのインターネット、イントラネット等であってもよい。また、画像処理装置１００による機能は、クラウドサービスとして実現してもよい。また、ユーザー端末２５０と画像処理装置１００又は画像情報等登録サーバー２１０との接続は、ユーザー端末２５０内のＷＥＢブラウザによって行われるようにしてもよい。
画像情報等登録サーバー２１０は、情報記憶モジュール１１５、結果情報記憶モジュール１５０を有している。情報記憶モジュール１１５、結果情報記憶モジュール１５０は、図１の例に示すように画像処理装置１００に内蔵されていてもよいし、図２の例に示すように、画像処理装置１００の外部の画像情報等登録サーバー２１０にあり、通信回線２９０を介して、画像処理装置１００に情報記憶モジュール１１５、結果情報記憶モジュール１５０の機能を提供するようにしてもよい。
画像処理装置１００Ａ、画像処理装置１００Ｂ、画像情報等登録サーバー２１０、ユーザー端末２５０は、通信回線２９０を介してそれぞれ接続されている。通信回線２９０は、無線、有線、これらの組み合わせであってもよく、例えば、通信インフラとしてのインターネット、イントラネット等であってもよい。また、画像処理装置１００による機能は、クラウドサービスとして実現してもよい。また、ユーザー端末２５０と画像処理装置１００又は画像情報等登録サーバー２１０との接続は、ユーザー端末２５０内のＷＥＢブラウザによって行われるようにしてもよい。
画像情報等登録サーバー２１０は、情報記憶モジュール１１５、結果情報記憶モジュール１５０を有している。情報記憶モジュール１１５、結果情報記憶モジュール１５０は、図１の例に示すように画像処理装置１００に内蔵されていてもよいし、図２の例に示すように、画像処理装置１００の外部の画像情報等登録サーバー２１０にあり、通信回線２９０を介して、画像処理装置１００に情報記憶モジュール１１５、結果情報記憶モジュール１５０の機能を提供するようにしてもよい。
【0038】
例えば、画像処理装置１００のスキャナで、文書が読み込まれる。そして、画像処理装置１００によって、その文書の画像から対象画像を抽出し、抽出したその対象画像と予め定められた位置関係にある項目の情報を抽出することが行われる。その処理結果が画像情報等登録サーバー２１０に記憶される。そして、ユーザーがユーザー端末２５０を操作して、画像情報等登録サーバー２１０内の処理結果を表示し、確認と修正が行われる。
【0039】
図３は、第１の実施の形態が処理対象とする文書の例を示す説明図である。
画像処理装置１００のスキャナによって読み込まれる文書の一例である。
文書３００は、タイトル３１０、画像３２０ａ、説明領域３３０ａ、画像３２０ｂ、説明領域３３０ｂ、画像３２０ｃ、説明領域３３０ｃを有している。例えば、画像３２０がユーザーの顔画像であり、説明領域３３０にはそのユーザーの氏名等の説明文が記載されている。また、画像３２０が商品画像であり、説明領域３３０にはその商品の性能等の説明文が記載されている。
ここで、画像３２０が対象画像である。そして、画像３２０が顔画像である場合、図４の例に示しているバリュー抽出規則テーブル４００の１行目の規則を用いた場合、説明領域３３０が「顔画像の右側にある領域」が該当する。そして、説明領域３３０内を文字認識した結果が項目の情報に該当する。
画像処理装置１００のスキャナによって読み込まれる文書の一例である。
文書３００は、タイトル３１０、画像３２０ａ、説明領域３３０ａ、画像３２０ｂ、説明領域３３０ｂ、画像３２０ｃ、説明領域３３０ｃを有している。例えば、画像３２０がユーザーの顔画像であり、説明領域３３０にはそのユーザーの氏名等の説明文が記載されている。また、画像３２０が商品画像であり、説明領域３３０にはその商品の性能等の説明文が記載されている。
ここで、画像３２０が対象画像である。そして、画像３２０が顔画像である場合、図４の例に示しているバリュー抽出規則テーブル４００の１行目の規則を用いた場合、説明領域３３０が「顔画像の右側にある領域」が該当する。そして、説明領域３３０内を文字認識した結果が項目の情報に該当する。
【0040】
図５は、第１の実施の形態による処理例を示すフローチャートである。
ステップＳ５００では、画像・文字認識処理を開始する。
ステップＳ５０２では、文書のスキャンを実施する。
ステップＳ５０４では、画像認識処理を行う。具体的には、文書の画像から対象画像の抽出処理を行う。例えば、図６に示す画像情報テーブル６００内の画像欄６１０内の画像を、スキャンした文書の画像から抽出する。
ステップＳ５００では、画像・文字認識処理を開始する。
ステップＳ５０２では、文書のスキャンを実施する。
ステップＳ５０４では、画像認識処理を行う。具体的には、文書の画像から対象画像の抽出処理を行う。例えば、図６に示す画像情報テーブル６００内の画像欄６１０内の画像を、スキャンした文書の画像から抽出する。
【0041】
ステップＳ５０６では、文字認識処理をしていない対象画像はあるか否かを判断し、ある場合はステップＳ５０８へ進み、それ以外の場合は処理を終了する（ステップＳ５９９）。
ステップＳ５０８では、文字認識処理を行う。ステップＳ５０８の詳細な処理については、図８の例に示すフローチャートを用いて後述する。
ステップＳ５１０では、画像と文字の認識結果を情報記憶モジュール１１５に記憶させ、ステップＳ５０６へ戻る。例えば、図７に示す画像・文字処理結果テーブル７００を情報記憶モジュール１１５に記憶させる。
ステップＳ５０８では、文字認識処理を行う。ステップＳ５０８の詳細な処理については、図８の例に示すフローチャートを用いて後述する。
ステップＳ５１０では、画像と文字の認識結果を情報記憶モジュール１１５に記憶させ、ステップＳ５０６へ戻る。例えば、図７に示す画像・文字処理結果テーブル７００を情報記憶モジュール１１５に記憶させる。
【0042】
図８は、第１の実施の形態による処理例を示すフローチャートである。
ステップＳ８００では、文字認識処理を開始する。
ステップＳ８０２では、文書画像内の対象の顔画像の位置を抽出する。
ステップＳ８０４では、「顔画像の右側にある領域」というバリュー抽出規則を用いて、顔画像に対応する説明領域を抽出する。具体的には、図４の例に示したバリュー抽出規則テーブル４００の１行目のバリュー抽出規則欄４１５内の規則を用いることになる。
ステップＳ８００では、文字認識処理を開始する。
ステップＳ８０２では、文書画像内の対象の顔画像の位置を抽出する。
ステップＳ８０４では、「顔画像の右側にある領域」というバリュー抽出規則を用いて、顔画像に対応する説明領域を抽出する。具体的には、図４の例に示したバリュー抽出規則テーブル４００の１行目のバリュー抽出規則欄４１５内の規則を用いることになる。
【0043】
ステップＳ８０６では、ステップＳ８０４で抽出した説明領域の画像を文字認識する。
ステップＳ８０８では、顔画像をキーとして、説明領域の文字認識結果をバリューとする。具体的には、図７の例に示した画像・文字処理結果テーブル７００の画像ＩＤ欄７２０内の画像ＩＤが示す画像がキーとなり、説明文認識結果欄７１５内の文字認識結果がバリューとなる。
ステップＳ８０８では、顔画像をキーとして、説明領域の文字認識結果をバリューとする。具体的には、図７の例に示した画像・文字処理結果テーブル７００の画像ＩＤ欄７２０内の画像ＩＤが示す画像がキーとなり、説明文認識結果欄７１５内の文字認識結果がバリューとなる。
【0044】
図９は、第１の実施の形態による処理例を示すフローチャートである。
ステップＳ９００では、確認処理を開始する。
ステップＳ９０２では、結果情報記憶モジュール１５０から画像・文字処理結果テーブル７００を取得する。
ステップＳ９０４では、処理済みの文書の一覧を表示する。画像・文字処理結果テーブル７００の文書名欄７１０を利用して、例えば、図１０（ａ）に示す文書リスト画面１０００を表示する。図１０は、第１の実施の形態による表示例を示す説明図である。文書リスト画面１０００には、文書名欄１００５、確認実施欄１０１０、結果欄１０１５、日付欄１０２０を表示する。文書名欄１００５には、文書名を表示する。確認実施欄１０１０には、確認の実施が済んでいるか否かの情報を表示する。結果欄１０１５には、その確認の結果を表示する。日付欄１０２０には、その確認が行われた日付を表示する。
ステップＳ９００では、確認処理を開始する。
ステップＳ９０２では、結果情報記憶モジュール１５０から画像・文字処理結果テーブル７００を取得する。
ステップＳ９０４では、処理済みの文書の一覧を表示する。画像・文字処理結果テーブル７００の文書名欄７１０を利用して、例えば、図１０（ａ）に示す文書リスト画面１０００を表示する。図１０は、第１の実施の形態による表示例を示す説明図である。文書リスト画面１０００には、文書名欄１００５、確認実施欄１０１０、結果欄１０１５、日付欄１０２０を表示する。文書名欄１００５には、文書名を表示する。確認実施欄１０１０には、確認の実施が済んでいるか否かの情報を表示する。結果欄１０１５には、その確認の結果を表示する。日付欄１０２０には、その確認が行われた日付を表示する。
【0045】
ステップＳ９０６では、ユーザーが確認をすべき文書を指示する。
ステップＳ９０８では、指示された文書の顔画像と説明文を表示して、確認処理をユーザーに行わせる確認画面１０５０を表示する。例えば、ステップＳ９０６で図１０（ａ）に示す文書リスト画面１０００の１行目が指示された場合の例を、図１０（ｂ）に示す確認画面１０５０のように表示する。確認画面１０５０には、文書名欄１０５５、顔画像欄１０６０、説明欄１０６５、チェック欄１０７０ａ、チェック欄１０７０ｂを表示する。文書名欄１０５５には、文書名を表示する。顔画像欄１０６０は、「所員リスト」という文書の画像から抽出した対象画像である顔画像を表示する。説明欄１０６５は、その顔画像に対応する説明領域内に記載された説明の文字認識結果を表示する。そして、各行には、チェック欄１０７０が対応しており、ユーザーは文書名欄１０５５、顔画像欄１０６０、説明欄１０６５を確認する。
ステップＳ９１０では、ユーザーが確認結果を入力する。文書名欄１０５５、顔画像欄１０６０、説明欄１０６５の確認の結果、誤りがなければチェック欄１０７０をチェックする。また、誤りを発見した場合は、例えば、顔画像の抽出操作、又は、文字認識結果の修正を行い、チェック欄１０７０をチェック
ステップＳ９１２では、確認結果を用いて、画像・文字処理結果テーブル７００を更新する。
ステップＳ９０８では、指示された文書の顔画像と説明文を表示して、確認処理をユーザーに行わせる確認画面１０５０を表示する。例えば、ステップＳ９０６で図１０（ａ）に示す文書リスト画面１０００の１行目が指示された場合の例を、図１０（ｂ）に示す確認画面１０５０のように表示する。確認画面１０５０には、文書名欄１０５５、顔画像欄１０６０、説明欄１０６５、チェック欄１０７０ａ、チェック欄１０７０ｂを表示する。文書名欄１０５５には、文書名を表示する。顔画像欄１０６０は、「所員リスト」という文書の画像から抽出した対象画像である顔画像を表示する。説明欄１０６５は、その顔画像に対応する説明領域内に記載された説明の文字認識結果を表示する。そして、各行には、チェック欄１０７０が対応しており、ユーザーは文書名欄１０５５、顔画像欄１０６０、説明欄１０６５を確認する。
ステップＳ９１０では、ユーザーが確認結果を入力する。文書名欄１０５５、顔画像欄１０６０、説明欄１０６５の確認の結果、誤りがなければチェック欄１０７０をチェックする。また、誤りを発見した場合は、例えば、顔画像の抽出操作、又は、文字認識結果の修正を行い、チェック欄１０７０をチェック
ステップＳ９１２では、確認結果を用いて、画像・文字処理結果テーブル７００を更新する。
【0046】
図１１は、第２の実施の形態の構成例についての概念的なモジュール構成図である。
画像処理装置１１００は、ＵＩ処理モジュール１１０５、印鑑情報登録モジュール１１１０、印鑑情報記憶モジュール１１１５、署名印影認識処理モジュール１１２０、スキャン処理モジュール１１２５、画像処理モジュール１１３０、印影認識処理モジュール１１３５、署名認識処理モジュール１１４０、署名印影結果保存モジュール１１４５、署名印影結果情報記憶モジュール１１５０、署名印影確認モジュール１１５５を有している。第２の実施の形態である画像処理装置１１００は、第１の実施の形態である画像処理装置１００による対象画像を印影画像に限定して処理を行うものである。ＵＩ処理モジュール１１０５、印鑑情報登録モジュール１１１０、印鑑情報記憶モジュール１１１５、署名印影認識処理モジュール１１２０、スキャン処理モジュール１１２５、画像処理モジュール１１３０、印影認識処理モジュール１１３５、署名認識処理モジュール１１４０、署名印影結果保存モジュール１１４５、署名印影結果情報記憶モジュール１１５０、署名印影確認モジュール１１５５は、それぞれ画像処理装置１００のＵＩ処理モジュール１０５、情報登録モジュール１１０、情報記憶モジュール１１５、画像・文字認識処理モジュール１２０、スキャン処理モジュール１２５、画像処理モジュール１３０、画像認識処理モジュール１３５、文字認識処理モジュール１４０、結果保存モジュール１４５、結果情報記憶モジュール１５０、確認モジュール１５５に該当する。第１の実施の形態の説明における対象画像を印影画像と読み替え、第１の実施の形態の説明における項目の情報を署名又は記名の文字認識結果と読み替えればよい。なお、印影画像に対する特有の処理について説明する。
対象とする文書例である申込書、契約書、組織内における稟議文書等では、印鑑が押されたものを原本とし、正式な文書として採用される。これらの文書は多くの場合保管しておく必要がある。しかし、常に必要なものではないので、スキャナや複合機により読み込まれて電子化され、紙ファイル自体は倉庫に保管するといった運用が多くなってきている。
しかしながら、本実施の形態以外のシステムにあっては、それらの押印された文書を電子化し、ファイルサーバー等に保管すると、その文書が正しい印鑑によって押印されている否かは電子文書を開いて見てみなければ分からない。
第２の実施の形態は、印影画像をキーとして、その印影画像に対応する署名又は記名を抽出して、ユーザーに確認させるようにしている。
画像処理装置１１００は、ＵＩ処理モジュール１１０５、印鑑情報登録モジュール１１１０、印鑑情報記憶モジュール１１１５、署名印影認識処理モジュール１１２０、スキャン処理モジュール１１２５、画像処理モジュール１１３０、印影認識処理モジュール１１３５、署名認識処理モジュール１１４０、署名印影結果保存モジュール１１４５、署名印影結果情報記憶モジュール１１５０、署名印影確認モジュール１１５５を有している。第２の実施の形態である画像処理装置１１００は、第１の実施の形態である画像処理装置１００による対象画像を印影画像に限定して処理を行うものである。ＵＩ処理モジュール１１０５、印鑑情報登録モジュール１１１０、印鑑情報記憶モジュール１１１５、署名印影認識処理モジュール１１２０、スキャン処理モジュール１１２５、画像処理モジュール１１３０、印影認識処理モジュール１１３５、署名認識処理モジュール１１４０、署名印影結果保存モジュール１１４５、署名印影結果情報記憶モジュール１１５０、署名印影確認モジュール１１５５は、それぞれ画像処理装置１００のＵＩ処理モジュール１０５、情報登録モジュール１１０、情報記憶モジュール１１５、画像・文字認識処理モジュール１２０、スキャン処理モジュール１２５、画像処理モジュール１３０、画像認識処理モジュール１３５、文字認識処理モジュール１４０、結果保存モジュール１４５、結果情報記憶モジュール１５０、確認モジュール１５５に該当する。第１の実施の形態の説明における対象画像を印影画像と読み替え、第１の実施の形態の説明における項目の情報を署名又は記名の文字認識結果と読み替えればよい。なお、印影画像に対する特有の処理について説明する。
対象とする文書例である申込書、契約書、組織内における稟議文書等では、印鑑が押されたものを原本とし、正式な文書として採用される。これらの文書は多くの場合保管しておく必要がある。しかし、常に必要なものではないので、スキャナや複合機により読み込まれて電子化され、紙ファイル自体は倉庫に保管するといった運用が多くなってきている。
しかしながら、本実施の形態以外のシステムにあっては、それらの押印された文書を電子化し、ファイルサーバー等に保管すると、その文書が正しい印鑑によって押印されている否かは電子文書を開いて見てみなければ分からない。
第２の実施の形態は、印影画像をキーとして、その印影画像に対応する署名又は記名を抽出して、ユーザーに確認させるようにしている。
【0047】
ＵＩ処理モジュール１１０５は、印鑑情報登録モジュール１１１０、署名印影認識処理モジュール１１２０、署名印影確認モジュール１１５５と接続されている。
印鑑情報登録モジュール１１１０は、ＵＩ処理モジュール１１０５、印鑑情報記憶モジュール１１１５と接続されている。
印鑑情報登録モジュール１１１０は、ＵＩ処理モジュール１１０５、印鑑情報記憶モジュール１１１５と接続されている。
【0048】
印鑑情報記憶モジュール１１１５は、印鑑情報登録モジュール１１１０、印影認識処理モジュール１１３５と接続されている。印鑑情報記憶モジュール１１１５は、印影画像と予め定められた位置関係にある項目の情報を抽出するための規則、及び、印鑑の印影画像とその印鑑の所有者を対応させて記憶している。
また、規則は、印影画像と項目の位置関係の他に、さらに、印影画像の大きさと項目である「署名又は記名」の領域の大きさの関係、項目に記載されている文字の属性の指定、項目に記載されている文字画像の文字認識結果、のうちいずれか１つ、又は、これらの組み合わせによって構成されていてもよい。
「文字の属性の指定」の規則とは、署名又は記名における表示形態を示すものであって、例えば、下線が引かれているか否か、文字の大きさ、文字の書体、文字の色等の指定が該当する。なお、文字の書体は、署名である場合は手書きであるため不定とする。また、記名である場合は印刷文字であるため、明朝体、ゴシック体等がある。
「文字画像の文字認識結果」の規則とは、項目として抽出される署名又は記名である文字画像を文字認識した結果のテキストであって、例えば、日付を除く、氏名等のように予め定められた文字列であること、又は、「署名者」等のように予め定められた文字列を除く等が該当する。
また、規則は、印影画像と項目の位置関係の他に、さらに、印影画像の大きさと項目である「署名又は記名」の領域の大きさの関係、項目に記載されている文字の属性の指定、項目に記載されている文字画像の文字認識結果、のうちいずれか１つ、又は、これらの組み合わせによって構成されていてもよい。
「文字の属性の指定」の規則とは、署名又は記名における表示形態を示すものであって、例えば、下線が引かれているか否か、文字の大きさ、文字の書体、文字の色等の指定が該当する。なお、文字の書体は、署名である場合は手書きであるため不定とする。また、記名である場合は印刷文字であるため、明朝体、ゴシック体等がある。
「文字画像の文字認識結果」の規則とは、項目として抽出される署名又は記名である文字画像を文字認識した結果のテキストであって、例えば、日付を除く、氏名等のように予め定められた文字列であること、又は、「署名者」等のように予め定められた文字列を除く等が該当する。
【0049】
署名印影認識処理モジュール１１２０は、ＵＩ処理モジュール１１０５、スキャン処理モジュール１１２５と接続されている。
スキャン処理モジュール１１２５は、署名印影認識処理モジュール１１２０、画像処理モジュール１１３０と接続されている。
画像処理モジュール１１３０は、スキャン処理モジュール１１２５、印影認識処理モジュール１１３５、署名認識処理モジュール１１４０、署名印影結果保存モジュール１１４５と接続されている。
印影認識処理モジュール１１３５は、印鑑情報記憶モジュール１１１５、画像処理モジュール１１３０と接続されている。
スキャン処理モジュール１１２５は、署名印影認識処理モジュール１１２０、画像処理モジュール１１３０と接続されている。
画像処理モジュール１１３０は、スキャン処理モジュール１１２５、印影認識処理モジュール１１３５、署名認識処理モジュール１１４０、署名印影結果保存モジュール１１４５と接続されている。
印影認識処理モジュール１１３５は、印鑑情報記憶モジュール１１１５、画像処理モジュール１１３０と接続されている。
【0050】
署名認識処理モジュール１１４０は、画像処理モジュール１１３０と接続されている。署名認識処理モジュール１１４０は、画像内の文字画像の全て又は一部を文字認識する。ここでの「画像内の文字画像の一部」とは、規則によって定められている「印影画像と予め定められた位置関係にある項目」がある領域をいう。もちろんのことながら、画像内の文字画像の全てを文字認識する場合よりも、文字認識する処理量は少なくなる。
そして、署名認識処理モジュール１１４０は、抽出した印影画像と予め定められた位置関係にある文字画像の文字認識結果を署名又は記名として抽出する。
そして、署名認識処理モジュール１１４０は、抽出した印影画像と予め定められた位置関係にある文字画像の文字認識結果を署名又は記名として抽出する。
【0051】
署名印影結果保存モジュール１１４５は、画像処理モジュール１１３０、署名印影結果情報記憶モジュール１１５０、署名印影確認モジュール１１５５と接続されている。
署名印影結果情報記憶モジュール１１５０は、署名印影結果保存モジュール１１４５と接続されている。
署名印影結果情報記憶モジュール１１５０は、署名印影結果保存モジュール１１４５と接続されている。
【0052】
署名印影確認モジュール１１５５は、ＵＩ処理モジュール１１０５、署名印影結果保存モジュール１１４５と接続されている。署名印影確認モジュール１１５５は、署名認識処理モジュール１１４０によって抽出された文字認識結果が、印鑑情報記憶モジュール１１１５内の印影画像に対応する所有者と一致するか否かについての判断結果を、表示装置に表示させるように制御する。
さらに、署名印影確認モジュール１１５５は、署名認識処理モジュール１１４０によって抽出された文字認識結果が、印鑑情報記憶モジュール１１１５内の印影画像に対応する所有者に一致しない場合は、その所有者に対して通知を行うようにしてもよい。
通知先として、印鑑の所有者以外に、スキャン操作を行った担当者、印鑑情報の管理者等を含めてもよい。ただし、印鑑が用いられているにも関わらず、その印鑑の所有者の署名又は記名に対応した印鑑でない場合は、印鑑が無断で使用されている可能性があるので、その印鑑の所有者に印鑑が使用された旨を通知するようにしている。また、署名又は記名を、その印鑑の所有者に通知するようにしてもよい。
なお、通知として、例えば、電子メール、チャット、電子掲示板、ソーシャルメディアを用いた通知、プッシュ通知、自動音声応答による電話発信等があり、電話発信として、例えば、Ｌｙｎｃ（登録商標）等を用いて行えばよい。
さらに、署名印影確認モジュール１１５５は、署名認識処理モジュール１１４０によって抽出された文字認識結果が、印鑑情報記憶モジュール１１１５内の印影画像に対応する所有者に一致しない場合は、その所有者に対して通知を行うようにしてもよい。
通知先として、印鑑の所有者以外に、スキャン操作を行った担当者、印鑑情報の管理者等を含めてもよい。ただし、印鑑が用いられているにも関わらず、その印鑑の所有者の署名又は記名に対応した印鑑でない場合は、印鑑が無断で使用されている可能性があるので、その印鑑の所有者に印鑑が使用された旨を通知するようにしている。また、署名又は記名を、その印鑑の所有者に通知するようにしてもよい。
なお、通知として、例えば、電子メール、チャット、電子掲示板、ソーシャルメディアを用いた通知、プッシュ通知、自動音声応答による電話発信等があり、電話発信として、例えば、Ｌｙｎｃ（登録商標）等を用いて行えばよい。
【0053】
図１２は、第２の実施の形態を利用したシステム構成例を示す説明図である。
画像処理装置１１００Ａ、画像処理装置１１００Ｂ、印鑑情報等登録サーバー１２１０、ユーザー端末２５０は、通信回線２９０を介してそれぞれ接続されている。印鑑情報等登録サーバー１２１０は、印鑑情報記憶モジュール１１１５、署名印影結果情報記憶モジュール１１５０を有している。図２の例に示したシステム構成に対応しており、画像処理装置１００を画像処理装置１１００、画像情報等登録サーバー２１０を印鑑情報等登録サーバー１２１０、情報記憶モジュール１１５を印鑑情報記憶モジュール１１１５、結果情報記憶モジュール１５０を署名印影結果情報記憶モジュール１１５０としている。
画像処理装置１１００Ａ、画像処理装置１１００Ｂ、印鑑情報等登録サーバー１２１０、ユーザー端末２５０は、通信回線２９０を介してそれぞれ接続されている。印鑑情報等登録サーバー１２１０は、印鑑情報記憶モジュール１１１５、署名印影結果情報記憶モジュール１１５０を有している。図２の例に示したシステム構成に対応しており、画像処理装置１００を画像処理装置１１００、画像情報等登録サーバー２１０を印鑑情報等登録サーバー１２１０、情報記憶モジュール１１５を印鑑情報記憶モジュール１１１５、結果情報記憶モジュール１５０を署名印影結果情報記憶モジュール１１５０としている。
【0054】
例えば、画像処理装置１１００のスキャナで、印鑑が押印された文書が読み込まれる。そして、画像処理装置１１００によって、その文書の画像から印影画像を抽出し、抽出したその印影画像と予め定められた位置関係にある領域にある署名又は記名を文字認識して、署名又は記名のテキスト情報を抽出することが行われる。その処理結果が印鑑情報等登録サーバー１２１０に記憶される。そして、ユーザーがユーザー端末２５０を操作して、印鑑情報等登録サーバー１２１０内の処理結果を表示し、確認と修正が行われる。さらに、署名又は記名のテキスト情報と印影画像に対応する印鑑の所有者が一致するか否かの判断が行われ、一致しない場合は、警告等を内容とする通知先への通知が行われる。
【0055】
仕事の順序を定めている作業フローの中の業務には、非定型形式の契約書のような書類がある。具体的には、署名や印鑑がある位置が定まっていない書類がある。このような非定型形式の書類に対して、確認すべき署名や印鑑の位置が定まっていないが、画像処理装置１１００は、署名と印鑑の押印が正しく実施されているかを判断できるようにしている。
図１３は、第２の実施の形態が処理対象とする文書の例を示す説明図である。
図１３（ａ）の例では、書類１３００の下方の領域を示している。未だ記名、押印がされていない白紙の状態の例である。書類１３００には、本文欄１３０５、日付欄１３１０、雇用者欄１３１５、労働者欄１３３５が記載されている。雇用者欄１３１５は、肩書欄１３２０、署名・記名欄１３２５、押印欄１３３０を有している。労働者欄１３３５は、肩書欄１３４０、署名・記名欄１３４５、押印欄１３５０を有している。
なお、雇用者欄１３１５、労働者欄１３３５は、書類１３００内で定められた位置ではなく、任意の位置に記載されていてもよい。したがって、その場合、事前に雇用者欄１３１５、労働者欄１３３５の位置を知ることはできない。
図１３は、第２の実施の形態が処理対象とする文書の例を示す説明図である。
図１３（ａ）の例では、書類１３００の下方の領域を示している。未だ記名、押印がされていない白紙の状態の例である。書類１３００には、本文欄１３０５、日付欄１３１０、雇用者欄１３１５、労働者欄１３３５が記載されている。雇用者欄１３１５は、肩書欄１３２０、署名・記名欄１３２５、押印欄１３３０を有している。労働者欄１３３５は、肩書欄１３４０、署名・記名欄１３４５、押印欄１３５０を有している。
なお、雇用者欄１３１５、労働者欄１３３５は、書類１３００内で定められた位置ではなく、任意の位置に記載されていてもよい。したがって、その場合、事前に雇用者欄１３１５、労働者欄１３３５の位置を知ることはできない。
【0056】
図１３（ｂ）の例は、図１３（ａ）の例に示した書類１３００に正しく署名と印鑑の押印がなされた書類１３００ｂを示している。
雇用者欄１３１５ｂの署名・記名欄１３２５ｂには「鈴木一郎」と記名され、押印欄１３３０ｂには鈴木一郎の印鑑によって押印された印影がある。
労働者欄１３３５ｂの署名・記名欄１３４５ｂには「田中太郎」と記名され、押印欄１３５０ｂには田中太郎の印鑑によって押印された印影がある。
画像処理装置１１００は、書類１３００ｂを対象とした場合、図１４の例に示すフローチャートによる処理によって、照合結果として「正しい」と判断する。
雇用者欄１３１５ｂの署名・記名欄１３２５ｂには「鈴木一郎」と記名され、押印欄１３３０ｂには鈴木一郎の印鑑によって押印された印影がある。
労働者欄１３３５ｂの署名・記名欄１３４５ｂには「田中太郎」と記名され、押印欄１３５０ｂには田中太郎の印鑑によって押印された印影がある。
画像処理装置１１００は、書類１３００ｂを対象とした場合、図１４の例に示すフローチャートによる処理によって、照合結果として「正しい」と判断する。
【0057】
一方、図１３（ｃ）の例は、図１３（ａ）の例に示した書類１３００に誤って署名と印鑑の押印がなされた書類１３００ｃを示している。
雇用者欄１３１５ｃの署名・記名欄１３２５ｃには「富士一郎」と記名されているが、押印欄１３３０ｃには鈴木一郎の印鑑によって押印された印影がある。
労働者欄１３３５ｃの署名・記名欄１３４５ｃには「田中太郎」と記名され、押印欄１３５０ｃには田中太郎の印鑑によって押印された印影がある。
画像処理装置１１００は、書類１３００ｃを対象とした場合、図１４の例に示すフローチャートによる処理によって、照合結果として「誤り」と判断する。
雇用者欄１３１５ｃの署名・記名欄１３２５ｃには「富士一郎」と記名されているが、押印欄１３３０ｃには鈴木一郎の印鑑によって押印された印影がある。
労働者欄１３３５ｃの署名・記名欄１３４５ｃには「田中太郎」と記名され、押印欄１３５０ｃには田中太郎の印鑑によって押印された印影がある。
画像処理装置１１００は、書類１３００ｃを対象とした場合、図１４の例に示すフローチャートによる処理によって、照合結果として「誤り」と判断する。
【0058】
図１４は、第２の実施の形態である画像処理装置１１００による処理例を示すフローチャートである。
ステップＳ１４００では、署名印影認識処理を開始する。
ステップＳ１４０２では、帳票のスキャンを実施する。
ステップＳ１４０４では、印影認識処理を行う。例えば、印鑑情報テーブル１５００の印影画像欄１５１５を用いて、パターンマッチングによって印影画像を抽出するようにしてもよい。また、印影は朱色であり、円形（楕円を含む）であるという特徴を利用して、その特徴を有している画像を抽出するようにしてもよい。図１５は、印鑑情報テーブル１５００のデータ構造例を示す説明図である。印鑑情報テーブル１５００は、印鑑ＩＤ欄１５０５、印鑑所有者名欄１５１０、印影画像欄１５１５を有している。印鑑ＩＤ欄１５０５は、本実施の形態において、印鑑を一意に識別するための情報（具体的には、印鑑ＩＤ）を記憶している。印鑑所有者名欄１５１０は、その印鑑の所有者名を記憶している。印影画像欄１５１５は、印影画像を記憶している。なお、印影画像欄１５１５には、印影画像そのものの他に、その印影画像の認識に必要となる特徴量を記憶するようにしてもよい。印鑑情報テーブル１５００の１行目は、印鑑ＩＤ：Ｓ０００１は、印鑑所有者名が「鈴木一郎」であり、印影画像として「鈴木」という印鑑が登録されていることを示しており、２行目は、印鑑ＩＤ：Ｓ０００２は、印鑑所有者名が「田中太郎」であり、印影画像として「田中」という印鑑が登録されていることを示している。
ステップＳ１４００では、署名印影認識処理を開始する。
ステップＳ１４０２では、帳票のスキャンを実施する。
ステップＳ１４０４では、印影認識処理を行う。例えば、印鑑情報テーブル１５００の印影画像欄１５１５を用いて、パターンマッチングによって印影画像を抽出するようにしてもよい。また、印影は朱色であり、円形（楕円を含む）であるという特徴を利用して、その特徴を有している画像を抽出するようにしてもよい。図１５は、印鑑情報テーブル１５００のデータ構造例を示す説明図である。印鑑情報テーブル１５００は、印鑑ＩＤ欄１５０５、印鑑所有者名欄１５１０、印影画像欄１５１５を有している。印鑑ＩＤ欄１５０５は、本実施の形態において、印鑑を一意に識別するための情報（具体的には、印鑑ＩＤ）を記憶している。印鑑所有者名欄１５１０は、その印鑑の所有者名を記憶している。印影画像欄１５１５は、印影画像を記憶している。なお、印影画像欄１５１５には、印影画像そのものの他に、その印影画像の認識に必要となる特徴量を記憶するようにしてもよい。印鑑情報テーブル１５００の１行目は、印鑑ＩＤ：Ｓ０００１は、印鑑所有者名が「鈴木一郎」であり、印影画像として「鈴木」という印鑑が登録されていることを示しており、２行目は、印鑑ＩＤ：Ｓ０００２は、印鑑所有者名が「田中太郎」であり、印影画像として「田中」という印鑑が登録されていることを示している。
【0059】
ステップＳ１４０６では、署名認識処理していない印影があるか否かを判断し、ある場合はステップＳ１４０８へ進み、それ以外の場合は処理を終了する（ステップＳ１４９９）。
ステップＳ１４０８では、署名認識処理を行う。ステップＳ１４０８の詳細な処理については、図１８の例に示すフローチャートを用いて後述する。
ステップＳ１４１０では、印鑑情報との照合を行う。具体的には、印鑑情報テーブル１５００を用いて、ステップＳ１４０４でキーとして抽出した印影画像と同じ印影画像を印鑑情報テーブル１５００の印影画像欄１５１５内の印影画像から抽出する。そして、ステップＳ１４０８でバリューとして抽出した署名領域の文字認識結果と、抽出した印影画像と同じ行にある印鑑情報テーブル１５００の印鑑所有者名欄１５１０内の印鑑所有者名とを照合する。つまり、署名が印影画像の印鑑の所有者と一致するか否かを判断する。
ステップＳ１４０８では、署名認識処理を行う。ステップＳ１４０８の詳細な処理については、図１８の例に示すフローチャートを用いて後述する。
ステップＳ１４１０では、印鑑情報との照合を行う。具体的には、印鑑情報テーブル１５００を用いて、ステップＳ１４０４でキーとして抽出した印影画像と同じ印影画像を印鑑情報テーブル１５００の印影画像欄１５１５内の印影画像から抽出する。そして、ステップＳ１４０８でバリューとして抽出した署名領域の文字認識結果と、抽出した印影画像と同じ行にある印鑑情報テーブル１５００の印鑑所有者名欄１５１０内の印鑑所有者名とを照合する。つまり、署名が印影画像の印鑑の所有者と一致するか否かを判断する。
【0060】
ステップＳ１４１２では、印影と署名の認識結果、照合結果を署名印影結果情報記憶モジュール１１５０に記憶させ、ステップＳ１４０６へ戻る。具体的には、署名印鑑処理結果テーブル１６００を生成して、署名印影結果情報記憶モジュール１１５０に記憶させる。図１６は、署名印鑑処理結果テーブル１６００のデータ構造例を示す説明図である。署名印鑑処理結果テーブル１６００は、書類ＩＤ欄１６０５、書類名欄１６１０、署名認識結果欄１６１５、印影画像欄１６２０、印鑑ＩＤ欄１６２５、判断結果欄１６３０を有している。書類ＩＤ欄１６０５は、本実施の形態において、書類を一意に識別するための情報（具体的には、書類ＩＤ）を記憶している。書類名欄１６１０は、書類名を記憶している。署名認識結果欄１６１５は、署名認識結果を記憶している。印影画像欄１６２０は、印影画像を記憶している。印鑑ＩＤ欄１６２５は、印鑑ＩＤを記憶している。判断結果欄１６３０は、判断結果を記憶している。ここでの判断結果とは、署名の文字認識結果と印影画像の印鑑の所有者が一致しているか否かを示す情報である。図１６の例では「×」は一致していないことを示し、「○」は一致していることを示している。署名印鑑処理結果テーブル１６００の１行目は、書類ＩＤ：Ｄ０００１は、書類名が「ＸＸＸ契約書」であり、署名認識結果が「富士一郎」であり、印影画像として「鈴木」という印鑑が押印された印影であり、印鑑ＩＤが「Ｓ０００１」であり、判断結果が「×」であることを示しており、２行目は、書類ＩＤ：Ｄ０００２は、書類名が「ＸＸＸ契約書」であり、署名認識結果が「田中太郎」であり、印影画像として「田中」という印鑑が押印された印影であり、印鑑ＩＤが「Ｓ０００２」であり、判断結果が「○」であることを示している。
【0061】
図１８は、第２の実施の形態による処理例を示すフローチャートである。図１７に示す例を用いて説明する。図１７は、第２の実施の形態による処理例を示す説明図である。
ステップＳ１８００では、署名認識処理を開始する。
ステップＳ１８０２では、画像内の印影画像の位置を抽出する。具体的には、図１４の例に示すフローチャートのステップＳ１４０４で抽出された印影画像の位置を抽出すればよい。図１７（ａ）の例は、図１３（ｃ）に示した例と同じであるが、押印欄１３３０ｃ内の印影画像を抽出する。
ステップＳ１８０４では、「正立の印影画像の左側にある署名領域」というバリュー抽出規則を用いて、印影画像に対応する署名領域を抽出する。具体的には、図４の例に示すバリュー抽出規則テーブル４００の２行目のバリュー抽出規則を利用して、印影画像に対応する署名領域を抽出する。このバリュー抽出規則によって、図１７（ａ）では、押印欄１３３０ｃの左側にある領域を抽出する。この例では、肩書欄１３２０ｃと署名・記名欄１３２５ｃが抽出されることになり、その結果が図１７（ｂ）の例に示す抽出画像１７１０の文字画像である。
ステップＳ１８００では、署名認識処理を開始する。
ステップＳ１８０２では、画像内の印影画像の位置を抽出する。具体的には、図１４の例に示すフローチャートのステップＳ１４０４で抽出された印影画像の位置を抽出すればよい。図１７（ａ）の例は、図１３（ｃ）に示した例と同じであるが、押印欄１３３０ｃ内の印影画像を抽出する。
ステップＳ１８０４では、「正立の印影画像の左側にある署名領域」というバリュー抽出規則を用いて、印影画像に対応する署名領域を抽出する。具体的には、図４の例に示すバリュー抽出規則テーブル４００の２行目のバリュー抽出規則を利用して、印影画像に対応する署名領域を抽出する。このバリュー抽出規則によって、図１７（ａ）では、押印欄１３３０ｃの左側にある領域を抽出する。この例では、肩書欄１３２０ｃと署名・記名欄１３２５ｃが抽出されることになり、その結果が図１７（ｂ）の例に示す抽出画像１７１０の文字画像である。
【0062】
ステップＳ１８０６では、ステップＳ１８０４で抽出した署名領域の画像を文字認識する。例えば、既存の技術を用いて、認識対象の文字は活字体であるか手書きであるかを判断し、活字体の記名である場合は、印刷文字用の文字認識処理を行うようにし、手書きでの署名である場合は、手書き用の文字認識処理を行うようにすればよい。
ステップＳ１８０８では、印影画像をキーとして、署名領域の文字認識結果をバリューとする。図１７（ｃ）の例に示すように、キー・バリュー情報１７２０を生成する。キー・バリュー情報１７２０は、署名認識結果１７２５と印影画像１７３０によって構成されており、印影画像１７３０はキーである印影画像を記憶しており、署名認識結果１７２５はバリューである抽出画像１７１０の文字認識結果を記憶している。なお、規則として、前述の印影画像との位置関係の他に、「項目に記載されている文字画像の文字認識結果として、「雇用者」、「労働者」という文字列は、バリューから除外する」が含まれている場合の処理結果であり、「雇用者」という文字列は除外されて「富士一郎」という名前だけがバリューとして抽出されている。
ステップＳ１８０８では、印影画像をキーとして、署名領域の文字認識結果をバリューとする。図１７（ｃ）の例に示すように、キー・バリュー情報１７２０を生成する。キー・バリュー情報１７２０は、署名認識結果１７２５と印影画像１７３０によって構成されており、印影画像１７３０はキーである印影画像を記憶しており、署名認識結果１７２５はバリューである抽出画像１７１０の文字認識結果を記憶している。なお、規則として、前述の印影画像との位置関係の他に、「項目に記載されている文字画像の文字認識結果として、「雇用者」、「労働者」という文字列は、バリューから除外する」が含まれている場合の処理結果であり、「雇用者」という文字列は除外されて「富士一郎」という名前だけがバリューとして抽出されている。
【0063】
図１９は、第２の実施の形態による処理例を示すフローチャートである。図２０に示す例を用いて説明する。図２０は、第２の実施の形態による表示例を示す説明図である。
ステップＳ１９００では、署名印影確認処理を開始する。
ステップＳ１９０２では、署名印影結果情報記憶モジュール１１５０から署名印影処理結果を取得する。
ステップＳ１９０４では、処理済みの文書の一覧を表示する。図２０（ａ）の例に示すように、文書リスト画面２０００を表示装置に表示するように制御する。文書リスト画面２０００には、文書名欄２００５、確認実施欄２０１０、結果欄２０１５、日付欄２０２０を表示する。文書名欄２００５には、文書名を表示する。確認実施欄２０１０には、確認実施を済んでいるか否かの情報を表示する。結果欄２０１５には、照合結果を表示する。日付欄２０２０には、ユーザーによる確認が行われた日付を表示する。
ステップＳ１９００では、署名印影確認処理を開始する。
ステップＳ１９０２では、署名印影結果情報記憶モジュール１１５０から署名印影処理結果を取得する。
ステップＳ１９０４では、処理済みの文書の一覧を表示する。図２０（ａ）の例に示すように、文書リスト画面２０００を表示装置に表示するように制御する。文書リスト画面２０００には、文書名欄２００５、確認実施欄２０１０、結果欄２０１５、日付欄２０２０を表示する。文書名欄２００５には、文書名を表示する。確認実施欄２０１０には、確認実施を済んでいるか否かの情報を表示する。結果欄２０１５には、照合結果を表示する。日付欄２０２０には、ユーザーによる確認が行われた日付を表示する。
【0064】
ステップＳ１９０６では、ユーザーが確認をすべき文書を指示する。図２０（ａ）の例に示す文書リスト画面２０００では、最終行が選択されたとする。
ステップＳ１９０８では、指示された文書の署名と印影を表示して、確認処理をユーザーに行わせる確認画面を表示する。図２０（ｂ）の例に示す確認画面２０５０を表示装置に表示するように制御する。確認画面２０５０には、文書名欄２０５５、名前欄２０６０、印影画像欄２０６５、印鑑所有者名欄２０７０、チェック欄２０７５を表示する。文書名欄２０５５には、文書名を表示する。名前欄２０６０には、バリューである署名欄に記載されていた名前を表示する。つまり、署名欄内の文字画像の文字認識結果である。印影画像欄２０６５には、キーである印影画像を表示する。印鑑所有者名欄２０７０には、印鑑の所有者名を表示する。具体的には、印鑑情報テーブル１５００を用いて印影画像から印鑑の所有者を抽出すればよい。
ステップＳ１９１０では、ユーザーが確認結果を入力する。図２０（ｂ）の例では、名前欄２０６０の名前（富士一郎）と印鑑所有者名欄２０７０内の名前（鈴木一郎）が異なっているので、ユーザーは、この「ｘｘｘ契約書」は不当であると判断することになる。
ステップＳ１９１２では、確認結果を用いて、署名印影処理情報を更新する。
ステップＳ１９０８では、指示された文書の署名と印影を表示して、確認処理をユーザーに行わせる確認画面を表示する。図２０（ｂ）の例に示す確認画面２０５０を表示装置に表示するように制御する。確認画面２０５０には、文書名欄２０５５、名前欄２０６０、印影画像欄２０６５、印鑑所有者名欄２０７０、チェック欄２０７５を表示する。文書名欄２０５５には、文書名を表示する。名前欄２０６０には、バリューである署名欄に記載されていた名前を表示する。つまり、署名欄内の文字画像の文字認識結果である。印影画像欄２０６５には、キーである印影画像を表示する。印鑑所有者名欄２０７０には、印鑑の所有者名を表示する。具体的には、印鑑情報テーブル１５００を用いて印影画像から印鑑の所有者を抽出すればよい。
ステップＳ１９１０では、ユーザーが確認結果を入力する。図２０（ｂ）の例では、名前欄２０６０の名前（富士一郎）と印鑑所有者名欄２０７０内の名前（鈴木一郎）が異なっているので、ユーザーは、この「ｘｘｘ契約書」は不当であると判断することになる。
ステップＳ１９１２では、確認結果を用いて、署名印影処理情報を更新する。
【0065】
図２１は、第２の実施の形態による処理例を示すフローチャートである。
図１４の例に示すフローチャートのステップＳ１４１０の処理を、図２１の例に示すフローチャートに置きかえてもよい。
ステップＳ２１００では、印鑑情報照合処理を開始する。
ステップＳ２１０２では、署名の認識結果は印鑑の所有者と一致するか否かを判断し、一致する場合は処理を終了し（ステップＳ２１９９）、それ以外の場合はステップＳ２１０４へ進む。
ステップＳ２１０４では、通知先にアラームを通知する。ここでの通知先として、印鑑の所有者、スキャン操作を行った担当者、印鑑情報の管理者等がある。ただし、印鑑が無断で使用されている可能性が高いので、印鑑の所有者を通知先として含めるべきである。
図１４の例に示すフローチャートのステップＳ１４１０の処理を、図２１の例に示すフローチャートに置きかえてもよい。
ステップＳ２１００では、印鑑情報照合処理を開始する。
ステップＳ２１０２では、署名の認識結果は印鑑の所有者と一致するか否かを判断し、一致する場合は処理を終了し（ステップＳ２１９９）、それ以外の場合はステップＳ２１０４へ進む。
ステップＳ２１０４では、通知先にアラームを通知する。ここでの通知先として、印鑑の所有者、スキャン操作を行った担当者、印鑑情報の管理者等がある。ただし、印鑑が無断で使用されている可能性が高いので、印鑑の所有者を通知先として含めるべきである。
【0066】
次に、第２の実施の形態において、署名の文字画像を文字認識の対象とはしない場合の処理について説明する。例えば、手書きの署名である場合、又は、署名の文字画像を認識できなかった場合には、次のようにしてもよい。
対象画像を印影画像とし、項目の情報を署名画像とする。そして、印鑑情報記憶モジュール１１１５は、さらに、印鑑の印影画像とその印鑑の所有者による署名画像を対応させて記憶している。
画像処理モジュール１１３０は、印影認識処理モジュール１１３５が抽出した印影画像と予め定められた位置関係にある文字画像を署名画像として抽出する。そして、画像処理モジュール１１３０は、印影認識処理モジュール１１３５が抽出した印影画像と文字画像が、印鑑情報記憶モジュール１１１５内の印影画像と署名画像と一致するか否かについての判断結果を、表示装置に表示させるように制御する。
画像処理モジュール１１３０は、さらに、印影認識処理モジュール１１３５が抽出した署名画像が、印鑑情報記憶モジュール１１１５内の印影画像に対応する署名画像に一致しない場合は、所有者、又は、抽出した署名画像を文字認識した結果である署名者に対して通知を行う。
ここでの通知先として、印鑑の所有者、署名者以外に、スキャン操作を行った担当者、管理者等を含めてもよい。ただし、印鑑が用いられているにも関わらず、その所有者の署名でない場合は、印鑑が無断で使用されている可能性があるので、所有者に印鑑が使用された旨を通知するようにしている。その際に、署名を通知するようにしてもよい。また、署名されているにも関わらず、その署名者が所有している印影でない場合は、印鑑を誤って使用した可能性があるので、署名者に印鑑を誤って使用した旨を通知するようにしている。その際に、印影画像を通知するようにしてもよい。
対象画像を印影画像とし、項目の情報を署名画像とする。そして、印鑑情報記憶モジュール１１１５は、さらに、印鑑の印影画像とその印鑑の所有者による署名画像を対応させて記憶している。
画像処理モジュール１１３０は、印影認識処理モジュール１１３５が抽出した印影画像と予め定められた位置関係にある文字画像を署名画像として抽出する。そして、画像処理モジュール１１３０は、印影認識処理モジュール１１３５が抽出した印影画像と文字画像が、印鑑情報記憶モジュール１１１５内の印影画像と署名画像と一致するか否かについての判断結果を、表示装置に表示させるように制御する。
画像処理モジュール１１３０は、さらに、印影認識処理モジュール１１３５が抽出した署名画像が、印鑑情報記憶モジュール１１１５内の印影画像に対応する署名画像に一致しない場合は、所有者、又は、抽出した署名画像を文字認識した結果である署名者に対して通知を行う。
ここでの通知先として、印鑑の所有者、署名者以外に、スキャン操作を行った担当者、管理者等を含めてもよい。ただし、印鑑が用いられているにも関わらず、その所有者の署名でない場合は、印鑑が無断で使用されている可能性があるので、所有者に印鑑が使用された旨を通知するようにしている。その際に、署名を通知するようにしてもよい。また、署名されているにも関わらず、その署名者が所有している印影でない場合は、印鑑を誤って使用した可能性があるので、署名者に印鑑を誤って使用した旨を通知するようにしている。その際に、印影画像を通知するようにしてもよい。
【0067】
以下に、前述した第２の実施の形態とは異なる処理について説明する。
図２２は、第２の実施の形態による処理例を示すフローチャートである。図１４の例に示したフローチャートに対応するものであり、署名認識処理において、署名を文字認識できない場合における処理である。
ステップＳ２２００では、署名印影認識処理を開始する。
ステップＳ２２０２では、帳票のスキャンを実施する。
ステップＳ２２０４では、印影認識処理を行う。
ステップＳ２２０６では、署名認識処理していない印影があるか否かを判断し、ある場合はステップＳ２２０８へ進み、それ以外の場合は処理を終了する（ステップＳ２２９９）。
ステップＳ２２０８では、署名認識処理を行う。ステップＳ２２０８の詳細な処理については、図２４の例に示すフローチャートを用いて後述する。
図２２は、第２の実施の形態による処理例を示すフローチャートである。図１４の例に示したフローチャートに対応するものであり、署名認識処理において、署名を文字認識できない場合における処理である。
ステップＳ２２００では、署名印影認識処理を開始する。
ステップＳ２２０２では、帳票のスキャンを実施する。
ステップＳ２２０４では、印影認識処理を行う。
ステップＳ２２０６では、署名認識処理していない印影があるか否かを判断し、ある場合はステップＳ２２０８へ進み、それ以外の場合は処理を終了する（ステップＳ２２９９）。
ステップＳ２２０８では、署名認識処理を行う。ステップＳ２２０８の詳細な処理については、図２４の例に示すフローチャートを用いて後述する。
【0068】
ステップＳ２２１０では、印鑑情報との照合を行う。具体的には、印鑑情報テーブル２３００を用いて照合を行う。図２３は、印鑑情報テーブル２３００のデータ構造例を示す説明図である。印鑑情報テーブル２３００は、印鑑ＩＤ欄２３０５、印鑑所有者署名欄２３１０、印影画像欄２３１５を有している。印鑑ＩＤ欄２３０５は、本実施の形態において、印鑑を一意に識別するための情報（具体的には、印鑑ＩＤ）を記憶している。印鑑所有者署名欄２３１０は、その印鑑の所有者の署名画像を記憶している。印影画像欄２３１５は、印影画像を記憶している。印鑑情報テーブル２３００の１行目は、印鑑ＩＤ：ＳＳ０００１は、印鑑の所有者（鈴木一郎）の手書きの署名画像であり、印影画像として「鈴木」という印鑑が登録されていることを示しており、２行目は、印鑑ＩＤ：ＳＳ０００２は、印鑑の所有者（田中太郎）の手書きの署名画像であり、印影画像として「田中」という印鑑が登録されていることを示している。
照合の具体的な処理は、印鑑情報テーブル２３００を用いて、ステップＳ２２０４でキーとして抽出した印影画像と同じ印影画像を印鑑情報テーブル２３００の印影画像欄２３１５内の印影画像から抽出する。そして、ステップＳ２２０８でバリューとして抽出した署名領域内の署名画像と、抽出した印影画像と同じ印影画像がある印鑑情報テーブル２３００の行における印鑑所有者署名欄２３１０内の署名画像とを照合する。照合処理として、例えば、両者の署名画像同士のパターンマッチングであってもよいし、署名画像の特徴を抽出し、特徴空間における両者の距離が予め定められた閾値以下又は未満である場合は、同じ者による署名であると判断し、それ以外の場合は、異なる者による署名であると判断するようにしてもよい。
照合の具体的な処理は、印鑑情報テーブル２３００を用いて、ステップＳ２２０４でキーとして抽出した印影画像と同じ印影画像を印鑑情報テーブル２３００の印影画像欄２３１５内の印影画像から抽出する。そして、ステップＳ２２０８でバリューとして抽出した署名領域内の署名画像と、抽出した印影画像と同じ印影画像がある印鑑情報テーブル２３００の行における印鑑所有者署名欄２３１０内の署名画像とを照合する。照合処理として、例えば、両者の署名画像同士のパターンマッチングであってもよいし、署名画像の特徴を抽出し、特徴空間における両者の距離が予め定められた閾値以下又は未満である場合は、同じ者による署名であると判断し、それ以外の場合は、異なる者による署名であると判断するようにしてもよい。
【0069】
ステップＳ２２１２では、印影と署名の２つの画像照合結果を署名印影結果情報記憶モジュール１１５０に記憶させ、ステップＳ２２０６へ戻る。なお、署名印影結果情報記憶モジュール１１５０に記憶させる情報として、図１６の例に示した署名印鑑処理結果テーブル１６００の署名認識結果欄１６１５を署名画像欄として、バリュー抽出規則テーブル４００を用いて抽出したバリューである署名画像を記憶させたものとしたデータ構造とすればよい。
【0070】
なお、ステップＳ２２０８の処理として、図１８の例に示すフローチャートを用いてもよい。そして、ステップＳ２２０８の後に、署名を文字認識できたか否かの判断処理を行い、文字認識できなかった場合は、ステップＳ２２１０、ステップＳ２２１２の処理を行い、文字認識できた場合は、図１４の例に示すフローチャートのステップＳ１４１０、ステップＳ１４１２の処理を行うようにしてもよい。
【0071】
図２４は、第２の実施の形態による処理例を示すフローチャートである。図１８の例に示したフローチャートに対応するものである。
ステップＳ２４００では、署名認識処理を開始する。
ステップＳ２４０２では、画像内の印影画像の位置を抽出する。
ステップＳ２４０４では、「正立の印影画像の左側にある署名領域」というバリュー抽出規則を用いて、印影画像に対応する署名領域を抽出する。
ステップＳ２４０６では、印影画像をキーとして、署名領域の画像をバリューとする。したがって、この処理でのバリューは、手書きの署名画像である。
ステップＳ２４００では、署名認識処理を開始する。
ステップＳ２４０２では、画像内の印影画像の位置を抽出する。
ステップＳ２４０４では、「正立の印影画像の左側にある署名領域」というバリュー抽出規則を用いて、印影画像に対応する署名領域を抽出する。
ステップＳ２４０６では、印影画像をキーとして、署名領域の画像をバリューとする。したがって、この処理でのバリューは、手書きの署名画像である。
【0072】
図２５を参照して、本実施の形態の画像処理装置１００、画像処理装置１１００のハードウェア構成例について説明する。図２５に示す構成は、例えばパーソナルコンピュータ等によって構成されるものであり、スキャナ等のデータ読み取り部２５１７と、プリンタ等のデータ出力部２５１８を備えたハードウェア構成例を示している。メモリとして、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙの略）２５０２、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙの略）２５０３、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅの略）２５１１、リムーバブル記録媒体２５１３を例示している。メモリとして、さらに、通信部２５１６と通信回線を介して接続されている記憶手段を含めてもよい。プロセッサとして、一つのＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔの略）２５０１を例示している。一つのＣＰＵ２５０１に複数のプロセッサコアが搭載されていてもよいし、複数のＣＰＵ２５０１が搭載されていてもよい。プロセッサとして、さらに、通信部２５１６と通信回線を介して接続されているプロセッサを含めてもよい。また、複数のプロセッサを用いる場合は、密結合マルチプロセッサ、疎結合マルチプロセッサのいずれの形態であってもよい。
【0073】
ＣＰＵ２５０１は、前述の実施の形態において説明した各種のモジュール、すなわち、ＵＩ処理モジュール１０５、情報登録モジュール１１０、画像・文字認識処理モジュール１２０、スキャン処理モジュール１２５、画像処理モジュール１３０、画像認識処理モジュール１３５、文字認識処理モジュール１４０、結果保存モジュール１４５、確認モジュール１５５、ＵＩ処理モジュール１１０５、印鑑情報登録モジュール１１１０、署名印影認識処理モジュール１１２０、スキャン処理モジュール１１２５、画像処理モジュール１１３０、印影認識処理モジュール１１３５、署名認識処理モジュール１１４０、署名印影結果保存モジュール１１４５、署名印影確認モジュール１１５５等の各モジュールの実行シーケンスを記述したコンピュータ・プログラムにしたがった処理を実行する制御部である。
【0074】
ＲＯＭ２５０２は、ＣＰＵ２５０１が使用するプログラムや演算パラメータ等を格納する。ＲＡＭ２５０３は、ＣＰＵ２５０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を格納する。これらはＣＰＵバス等から構成されるホストバス２５０４により相互に接続されている。
【0075】
ホストバス２５０４は、ブリッジ２５０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅの略）バス等の外部バス２５０６に接続されている。
【0076】
キーボード２５０８、マウス等のポインティングデバイス２５０９は、操作者により操作されるデバイスである。ディスプレイ２５１０は、液晶表示装置、有機ＥＬディスプレイ又はＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅの略）等があり、各種情報をテキストやイメージ情報として表示する。また、ポインティングデバイス２５０９とディスプレイ２５１０の両方の機能を備えているタッチスクリーン等であってもよい。その場合、キーボードの機能の実現について、キーボード２５０８のように物理的に接続しなくても、画面（例えば、タッチスクリーン）上にソフトウェアでキーボード（いわゆるソフトウェアキーボード、スクリーンキーボード等ともいわれる）を描画して、キーボードの機能を実現するようにしてもよい。
【0077】
ＨＤＤ２５１１は、ハードディスク（ハードディスク以外に、フラッシュ・メモリ等であってもよい）を内蔵し、ハードディスクを駆動し、ＣＰＵ２５０１によって実行するプログラムや情報を記録又は再生させる。ＨＤＤ２５１１は、情報記憶モジュール１１５、結果情報記憶モジュール１５０、印鑑情報記憶モジュール１１１５、署名印影結果情報記憶モジュール１１５０等としての機能を実現させる。さらに、その他の各種データ、各種コンピュータ・プログラム等が格納される。
【0078】
ドライブ２５１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体２５１３に記録されているデータ又はプログラムを読み出して、そのデータ又はプログラムを、インタフェース２５０７、外部バス２５０６、ブリッジ２５０５、及びホストバス２５０４を介して接続されているＲＡＭ２５０３に供給する。なお、リムーバブル記録媒体２５１３も、データ記録領域として利用可能である。
【0079】
接続ポート２５１４は、外部接続機器２５１５を接続するポートであり、ＵＳＢ、ＩＥＥＥ１３９４等の接続部を持つ。接続ポート２５１４は、インタフェース２５０７、及び外部バス２５０６、ブリッジ２５０５、ホストバス２５０４等を介してＣＰＵ２５０１等に接続されている。通信部２５１６は、通信回線に接続され、外部とのデータ通信処理を実行する。データ読み取り部２５１７は、例えばスキャナであり、ドキュメントの読み取り処理を実行する。データ出力部２５１８は、例えばプリンタであり、ドキュメントデータの出力処理を実行する。
【0080】
前述の実施の形態のうち、コンピュータ・プログラムによるものについては、本ハードウェア構成のシステムにソフトウェアであるコンピュータ・プログラムを読み込ませ、ソフトウェアとハードウェア資源とが協働して、前述の実施の形態が実現される。
なお、図２５に示す画像処理装置１００等のハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図２５に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、プロセッサとして、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔの略、ＧＰＧＰＵ（Ｇｅｎｅｒａｌ－Ｐｕｒｐｏｓｅ ｃｏｍｐｕｔｉｎｇ ｏｎ Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔｓの略）を含む）を用いてもよいし、一部のモジュールを専用のハードウェア（例えば特定用途向け集積回路（具体例として、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔの略）等がある）や再構成可能な集積回路（具体例として、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙの略）等がある）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続している形態でもよく、さらに図２５に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、携帯情報通信機器（携帯情報通信機器として、携帯電話、スマートフォン、モバイル機器、ウェアラブルコンピュータ等を含む）、情報家電、ロボット、複写機、ファックス、スキャナ、プリンタ、複合機（複合機とは、スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）等に組み込まれていてもよい。
なお、図２５に示す画像処理装置１００等のハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図２５に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、プロセッサとして、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔの略、ＧＰＧＰＵ（Ｇｅｎｅｒａｌ－Ｐｕｒｐｏｓｅ ｃｏｍｐｕｔｉｎｇ ｏｎ Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔｓの略）を含む）を用いてもよいし、一部のモジュールを専用のハードウェア（例えば特定用途向け集積回路（具体例として、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔの略）等がある）や再構成可能な集積回路（具体例として、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙの略）等がある）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続している形態でもよく、さらに図２５に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、携帯情報通信機器（携帯情報通信機器として、携帯電話、スマートフォン、モバイル機器、ウェアラブルコンピュータ等を含む）、情報家電、ロボット、複写機、ファックス、スキャナ、プリンタ、複合機（複合機とは、スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）等に組み込まれていてもよい。
【0081】
なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通等のために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ－Ｒ、ＤＶＤ－ＲＷ、ＤＶＤ－ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ－ＲＯＭ）、ＣＤレコーダブル（ＣＤ－Ｒ）、ＣＤリライタブル（ＣＤ－ＲＷ）等、ブルーレイ・ディスク（Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ）、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ（登録商標））、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）、ＳＤ（Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌの略）メモリーカード等が含まれる。
そして、前記のプログラムの全体又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、又は無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分若しくは全部であってもよく、又は別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して記録されていてもよい。また、圧縮や暗号化等、復元可能であればどのような態様で記録されていてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通等のために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ－Ｒ、ＤＶＤ－ＲＷ、ＤＶＤ－ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ－ＲＯＭ）、ＣＤレコーダブル（ＣＤ－Ｒ）、ＣＤリライタブル（ＣＤ－ＲＷ）等、ブルーレイ・ディスク（Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ）、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ（登録商標））、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）、ＳＤ（Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌの略）メモリーカード等が含まれる。
そして、前記のプログラムの全体又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、又は無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分若しくは全部であってもよく、又は別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して記録されていてもよい。また、圧縮や暗号化等、復元可能であればどのような態様で記録されていてもよい。
【符号の説明】
【0082】
１００…画像処理装置
１０５…ＵＩ処理モジュール
１１０…情報登録モジュール
１１５…情報記憶モジュール
１２０…画像・文字認識処理モジュール
１２５…スキャン処理モジュール
１３０…画像処理モジュール
１３５…画像認識処理モジュール
１４０…文字認識処理モジュール
１４５…結果保存モジュール
１５０…結果情報記憶モジュール
１５５…確認モジュール
２１０…画像情報等登録サーバー
２５０…ユーザー端末
２９０…通信回線
１１００…画像処理装置
１１０５…ＵＩ処理モジュール
１１１０…印鑑情報登録モジュール
１１１５…印鑑情報記憶モジュール
１１２０…署名印影認識処理モジュール
１１２５…スキャン処理モジュール
１１３０…画像処理モジュール
１１３５…印影認識処理モジュール
１１４０…署名認識処理モジュール
１１４５…署名印影結果保存モジュール
１１５０…署名印影結果情報記憶モジュール
１１５５…署名印影確認モジュール
１２１０…印鑑情報等登録サーバー
１０５…ＵＩ処理モジュール
１１０…情報登録モジュール
１１５…情報記憶モジュール
１２０…画像・文字認識処理モジュール
１２５…スキャン処理モジュール
１３０…画像処理モジュール
１３５…画像認識処理モジュール
１４０…文字認識処理モジュール
１４５…結果保存モジュール
１５０…結果情報記憶モジュール
１５５…確認モジュール
２１０…画像情報等登録サーバー
２５０…ユーザー端末
２９０…通信回線
１１００…画像処理装置
１１０５…ＵＩ処理モジュール
１１１０…印鑑情報登録モジュール
１１１５…印鑑情報記憶モジュール
１１２０…署名印影認識処理モジュール
１１２５…スキャン処理モジュール
１１３０…画像処理モジュール
１１３５…印影認識処理モジュール
１１４０…署名認識処理モジュール
１１４５…署名印影結果保存モジュール
１１５０…署名印影結果情報記憶モジュール
１１５５…署名印影確認モジュール
１２１０…印鑑情報等登録サーバー
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】