(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-12-20
(45)【発行日】2022-12-28
(54)【発明の名称】画像処理システムおよび画像処理プログラム
(51)【国際特許分類】
H04N 1/387 20060101AFI20221221BHJP
G06T 5/00 20060101ALI20221221BHJP
【ＦＩ】
H04N1/387
G06T5/00 720
【請求項の数】
3
(21)【出願番号】P 2018247122
(22)【出願日】2018-12-28
(65)【公開番号】P2020108068
(43)【公開日】2020-07-09
【審査請求日】2021-11-30
(73)【特許権者】
【識別番号】000006150
【氏名又は名称】京セラドキュメントソリューションズ株式会社
(74)【代理人】
【識別番号】100140796
【弁理士】
【氏名又は名称】原口 貴志
(72)【発明者】
【氏名】樫本 陽介
【審査官】花田 尚樹
(56)【参考文献】
【文献】特開２０１６－０３９５２５（ＪＰ，Ａ）
【文献】特開２００７－１７４０３７（ＪＰ，Ａ）
【文献】特開平０５－３４７６９８（ＪＰ，Ａ）
【文献】特開２００６－３５０６８０（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ １／３８ － １／３９３
Ｇ０６Ｔ １／００ － １／４０
３／００ － ５／５０
(57)【特許請求の範囲】
【請求項1】
マークが付与された画像としてのマーク付与画像から、前記マークの部分の画像と、前記マーク以外の記載部分の画像としての非マーク部分画像とを色に基づいて抽出する画像抽出部と、前記画像抽出部によって抽出された、前記マークの部分の画像としての色抽出マーク画像において前記マーク以外の記載部分によって生じた途切れを穴埋めした穴埋め済みマーク画像を、前記色抽出マーク画像と、前記非マーク部分画像とに基づいて、画像の膨張および収縮と、画像の論理和と、画像の論理積とを使用して生成する穴埋め済みマーク画像生成部と、
前記穴埋め済みマーク画像のうち、前記色抽出マーク画像の領域と全く重複しない連続領域を除去することによって、不要な領域が除去された前記マークの部分の画像としての不要領域除去済みマーク画像を生成する不要領域除去済みマーク画像生成部と
を備えることを特徴とする画像処理システム。
【請求項2】
前記画像抽出部は、前記非マーク部分画像として、罫線部分の画像としての罫線画像と、文字部分の画像としての文字画像とを抽出し、前記穴埋め済みマーク画像生成部は、前記色抽出マーク画像と、前記罫線画像および前記文字画像のうち一方の画像との論理和の画像としての第１の論理和画像を生成し、
前記穴埋め済みマーク画像生成部は、前記色抽出マーク画像を、前記一方の画像に応じた量で膨張および収縮させた第１の膨張収縮済みマーク画像を生成し、
前記穴埋め済みマーク画像生成部は、前記第１の論理和画像と、前記第１の膨張収縮済みマーク画像との論理積の画像としての第１の穴埋め済みマーク画像を生成し、
前記穴埋め済みマーク画像生成部は、前記第１の穴埋め済みマーク画像と、前記罫線画像および前記文字画像のうち前記一方の画像ではない他方の画像との論理和の画像としての第２の論理和画像を生成し、
前記穴埋め済みマーク画像生成部は、前記第１の穴埋め済みマーク画像を、前記他方の画像に応じた量で膨張および収縮させた第２の膨張収縮済みマーク画像を生成し、
前記穴埋め済みマーク画像生成部は、前記第２の論理和画像と、前記第２の膨張収縮済みマーク画像との論理積の画像としての第２の穴埋め済みマーク画像を前記穴埋め済みマーク画像として生成することを特徴とする請求項１に記載の画像処理システム。
【請求項3】
マークが付与された画像としてのマーク付与画像から、前記マークの部分の画像と、前記マーク以外の記載部分の画像としての非マーク部分画像とを色に基づいて抽出する画像抽出部と、前記画像抽出部によって抽出された、前記マークの部分の画像としての色抽出マーク画像において前記マーク以外の記載部分によって生じた途切れを穴埋めした穴埋め済みマーク画像を、前記色抽出マーク画像と、前記非マーク部分画像とに基づいて、画像の膨張および収縮と、画像の論理和と、画像の論理積とを使用して生成する穴埋め済みマーク画像生成部と、
前記穴埋め済みマーク画像のうち、前記色抽出マーク画像の領域と全く重複しない連続領域を除去することによって、不要な領域が除去された前記マークの部分の画像としての不要領域除去済みマーク画像を生成する不要領域除去済みマーク画像生成部と
をコンピューターに実現させることを特徴とする画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、マークが付与されたマーク付与画像からマークを抽出する画像処理システムおよび画像処理プログラムに関する。
【背景技術】
【0002】
従来、マークが付与されたマーク付与画像からマークを抽出する画像処理システムが知られている（例えば、特許文献１参照。）。
【0003】
白色などの淡色の部分の上だけでなく黒色などの濃色の文字の上にも半透明のマークが付与されたマーク付与画像から、例えば色相、明度および彩度の少なくとも１つに基づいてマークが抽出される場合、マークのうち、濃色の文字の上に付与された部分が抽出されず、マークに途切れが生じることがある。
【0004】
特許文献１に記載された画像処理システムは、マークが付与された画像としてのマーク付与画像から、マーク部分の画像と、マーク以外の記載部分としての文字の画像とを抽出し、マーク部分の画像と、文字の画像との論理和の画像としての論理和画像を生成し、マーク部分の画像を、文字の画像に応じた量、すなわち、文字の幅に応じた量で膨張および収縮させた画像としての膨張収縮済みマーク画像を生成し、論理和画像と、膨張収縮済みマーク画像との論理積の画像としての穴埋め済みマーク画像を生成する。
【0005】
特許文献１に記載された画像処理システムは、マーク部分の画像を、文字の幅に応じた量で膨張および収縮させた画像を生成することによって、マークに生じる途切れを穴埋めすることができる。
【0006】
また、特許文献１に記載された画像処理システムは、マーク部分の画像と、文字の画像との論理和の画像としての論理和画像と、膨張収縮済みマーク画像との論理積の画像としての穴埋め済みマーク画像を生成するので、マーク付与画像においてマーク同士が近接している場合に、近接しているマーク同士の間の隙間を途切れとして穴埋めしたとしても、最終的に、近接しているマーク同士の間の隙間を適切に隙間として処理することができる。
【先行技術文献】
【特許文献】
【0007】
【文献】特開２０１６－０３９５２５号公報
【発明の概要】
【発明が解決しようとする課題】
【0008】
しかしながら、従来の特許文献１に記載された画像処理システムにおいては、マーク付与画像においてマーク同士が近接している場合に、近接しているマーク同士の間の隙間に文字が存在するとき、この文字が穴埋め済みマーク画像に含まれてしまう可能性があるという問題がある。
【0009】
そこで、本発明は、マークが付与されたマーク付与画像からのマークの抽出の精度を向上することができる画像処理システムおよび画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【0010】
本発明の画像処理システムは、マークが付与された画像としてのマーク付与画像から、前記マーク部分の画像と、前記マーク以外の記載部分の画像としての非マーク部分画像とを色に基づいて抽出する画像抽出部と、前記画像抽出部によって抽出された、前記マーク部分の画像としての前記色抽出マーク画像において前記マーク以外の記載部分によって生じた途切れを穴埋めした穴埋め済みマーク画像を、前記色抽出マーク画像と、前記非マーク部分画像とに基づいて、画像の膨張および収縮と、画像の論理和と、画像の論理積とを使用して生成する穴埋め済みマーク画像生成部と、前記穴埋め済みマーク画像のうち、前記色抽出マーク画像の領域と全く重複しない連続領域を除去することによって、不要な領域が除去された前記マーク部分の画像としての不要領域除去済みマーク画像を生成する不要領域除去済みマーク画像生成部とを備えることを特徴とする。
【0011】
この構成により、本発明の画像処理システムは、穴埋め済みマーク画像のうち、色抽出マーク画像の領域と全く重複しない連続領域を除去することによって、不要な領域が除去されたマーク部分の画像としての不要領域除去済みマーク画像を生成するので、マーク付与画像においてマーク同士が近接している場合に、近接しているマーク同士の間の隙間に罫線や文字などの記載部分が存在するとき、この記載部分が不要領域除去済みマーク画像に含まれてしまう可能性を低減することができる。したがって、本発明の画像処理システムは、マーク付与画像からのマークの抽出の精度を向上することができる。
【0012】
本発明の画像処理システムにおいて、前記画像抽出部は、前記非マーク部分画像として、罫線部分の画像としての罫線画像と、文字部分の画像としての文字画像とを抽出し、前記穴埋め済みマーク画像生成部は、前記色抽出マーク画像と、前記罫線画像および前記文字画像のうち一方の画像との論理和の画像としての第１の論理和画像を生成し、前記穴埋め済みマーク画像生成部は、前記色抽出マーク画像を、前記一方の画像に応じた量で膨張および収縮させた第１の膨張収縮済みマーク画像を生成し、前記穴埋め済みマーク画像生成部は、前記第１の論理和画像と、前記第１の膨張収縮済みマーク画像との論理積の画像としての第１の穴埋め済みマーク画像を生成し、前記穴埋め済みマーク画像生成部は、前記第１の穴埋め済みマーク画像と、前記罫線画像および前記文字画像のうち前記一方の画像ではない他方の画像との論理和の画像としての第２の論理和画像を生成し、前記穴埋め済みマーク画像生成部は、前記第１の穴埋め済みマーク画像を、前記他方の画像に応じた量で膨張および収縮させた第２の膨張収縮済みマーク画像を生成し、前記穴埋め済みマーク画像生成部は、前記第２の論理和画像と、前記第２の膨張収縮済みマーク画像との論理積の画像としての第２の穴埋め済みマーク画像を前記穴埋め済みマーク画像として生成しても良い。
【0013】
この構成により、本発明の画像処理システムは、マークに対する影響が互いに異なる、罫線と、文字とを区別して処理するので、マーク付与画像からのマークの抽出の精度を向上することができる。
【0014】
本発明の画像処理プログラムは、マークが付与された画像としてのマーク付与画像から、前記マーク部分の画像と、前記マーク以外の記載部分の画像としての非マーク部分画像とを色に基づいて抽出する画像抽出部と、前記画像抽出部によって抽出された、前記マーク部分の画像としての前記色抽出マーク画像において前記マーク以外の記載部分によって生じた途切れを穴埋めした穴埋め済みマーク画像を、前記色抽出マーク画像と、前記非マーク部分画像とに基づいて、画像の膨張および収縮と、画像の論理和と、画像の論理積とを使用して生成する穴埋め済みマーク画像生成部と、前記穴埋め済みマーク画像のうち、前記色抽出マーク画像の領域と全く重複しない連続領域を除去することによって、不要な領域が除去された前記マーク部分の画像としての不要領域除去済みマーク画像を生成する不要領域除去済みマーク画像生成部とをコンピューターに実現させることを特徴とする。
【0015】
この構成により、本発明の画像処理プログラムを実行するコンピューターは、穴埋め済みマーク画像のうち、色抽出マーク画像の領域と全く重複しない連続領域を除去することによって、不要な領域が除去されたマーク部分の画像としての不要領域除去済みマーク画像を生成するので、マーク付与画像においてマーク同士が近接している場合に、近接しているマーク同士の間の隙間に罫線や文字などの記載部分が存在するとき、この記載部分が不要領域除去済みマーク画像に含まれてしまう可能性を低減することができる。したがって、本発明の画像処理プログラムを実行するコンピューターは、マーク付与画像からのマークの抽出の精度を向上することができる。
【発明の効果】
【0016】
本発明の画像処理システムおよび画像処理プログラムは、マークが付与されたマーク付与画像からのマークの抽出の精度を向上することができる。
【図面の簡単な説明】
【0017】
【図1】本発明の一実施の形態に係るＭＦＰのブロック図である。
【図8】（ａ）図４（ａ）に示す色抽出マーク画像と、罫線画像との論理和の画像である第１の論理和画像を示す図である。 （ｂ）図４（ａ）に示す色抽出マーク画像において罫線によって生じた途切れを穴埋めした第１の穴埋め済みマーク画像を示す図である。
【発明を実施するための形態】
【0018】
以下、本発明の実施の形態について、図面を用いて説明する。
【0019】
まず、本発明の一実施の形態に係る画像処理システムとしてのＭＦＰ（Ｍｕｌｔｉｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ）の構成について説明する。
【0020】
図１は、本実施の形態に係るＭＦＰ１０のブロック図である。
【0021】
図１に示すように、ＭＦＰ１０は、種々の操作が入力される例えばボタンなどの入力デバイスである操作部１１と、種々の情報を表示する例えばＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）などの表示デバイスである表示部１２と、用紙などの記録媒体に画像を印刷する印刷デバイスであるプリンター１３と、原稿から画像を読み取る読取デバイスであるスキャナー１４と、図示していない外部のファクシミリ装置と公衆電話回線などの通信回線経由でファックス通信を行うファックスデバイスであるファックス通信部１５と、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットなどのネットワーク経由で、または、ネットワークを介さずに有線または無線によって直接に、外部の装置と通信を行う通信デバイスである通信部１６と、各種の情報を記憶する例えば半導体メモリー、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などの不揮発性の記憶デバイスである記憶部１７と、ＭＦＰ１０全体を制御する制御部１８とを備えている。
【0022】
記憶部１７は、マークが付与されたマーク付与画像からマークを抽出するための画像処理プログラム１７ａを記憶している。画像処理プログラム１７ａは、例えば、ＭＦＰ１０の製造段階でＭＦＰ１０にインストールされていても良いし、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリーなどの外部記憶媒体からＭＦＰ１０に追加でインストールされても良いし、ネットワーク上からＭＦＰ１０に追加でインストールされても良い。
【0023】
制御部１８は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）と、プログラムおよび各種のデータを記憶しているＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）と、ＣＰＵの作業領域として用いられるメモリーとしてのＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）とを備えている。ＣＰＵは、記憶部１７またはＲＯＭに記憶されているプログラムを実行する。ＭＦＰ１０は、コンピューターを構成している。
【0024】
制御部１８は、画像処理プログラム１７ａを実行することによって、マーク付与画像から、マーク部分の画像と、マーク以外の記載部分の画像としての非マーク部分画像とを色に基づいて抽出する画像抽出部１８ａと、画像抽出部１８ａによって抽出された、マーク部分の画像としての色抽出マーク画像においてマーク以外の記載部分によって生じた途切れを穴埋めした穴埋め済みマーク画像を、色抽出マーク画像と、非マーク部分画像とに基づいて、画像の膨張および収縮と、画像の論理和と、画像の論理積とを使用して生成する穴埋め済みマーク画像生成部１８ｂと、穴埋め済みマーク画像のうち、色抽出マーク画像の領域と全く重複しない連続領域を除去することによって、不要な領域が除去されたマーク部分の画像としての不要領域除去済みマーク画像を生成する不要領域除去済みマーク画像生成部１８ｃとを実現する。
【0025】
次に、ＭＦＰ１０の動作について説明する。
【0026】
図２は、ＭＦＰ１０の動作のフローチャートである。
【0027】
制御部１８は、文書に付与されたマークに応じた特定の処理の実行が操作部１１または通信部１６を介して指示されると、画像処理プログラム１７ａを実行することによって、図２に示す動作を実行する。なお、この文書は、例えば、蛍光ペンなどのマーカーによってマークが付与されたものである。
【0028】
図２に示すように、制御部１８は、例えば、文書がスキャナー１４にセットされている場合に、この文書をスキャナー１４によって読み取ることによって、マーク付与画像を取得する（Ｓ１０１）。なお、マーク付与画像の取得方法は、スキャナー１４によって文書を読み取る方法以外の方法でも良い。
【0029】
【0030】
図３に示すマーク付与画像３０は、白色などの淡色の部分の上だけでなく黒色などの濃色の罫線３１や文字３２の上にも半透明のマーク３３が付与された画像である。以下、Ｓ１０１において取得されたマーク付与画像が図３に示すマーク付与画像３０であるものとして説明する。
【0031】
【0032】
図２に示すように、画像抽出部１８ａは、Ｓ１０１の処理の後、マーク付与画像３０から、例えば色相、明度および彩度の少なくとも１つなど、色に基づいて、図４（ａ）に示す色抽出マーク画像４１と、図４（ｂ）に示す非マーク部分画像４２とを抽出する（Ｓ１０２）。ここで、色抽出マーク画像４１は、マーク付与画像３０に付与されたマーク３３のうち、罫線３１や文字３２など、マーク３３以外の記載部分に重なる部分を除いた部分である。非マーク部分画像４２には、罫線３１と、文字３２とが含まれている。
【0033】
図５（ａ）は、非マーク部分画像４２から抽出される、罫線３１部分の画像（以下「罫線画像」という。）４３を示す図である。図５（ｂ）は、非マーク部分画像４２から抽出される、文字３２部分の画像（以下「文字画像」という。）４４を示す図である。
【0034】
図２に示すように、画像抽出部１８ａは、Ｓ１０２の処理の後、非マーク部分画像４２から、図５（ａ）に示す罫線画像４３と、図５（ｂ）に示す文字画像４４とを抽出する（Ｓ１０３）。罫線を含む画像から罫線を抽出する方法としては、公知の任意の方法が採用されることが可能である。同様に、文字を含む画像から文字を抽出する方法としては、公知の任意の方法が採用されることが可能である。例えば、マーク付与画像３０に含まれる可能性がある文字の最大のサイズが、例えば７２ポイントなど、特定のサイズとして想定される場合、この最大のサイズで描かれる文字に含まれる可能性がある線の最大の長さが特定されるので、この最大の長さより長い線を、画像抽出部１８ａは、罫線３１として抽出しても良い。
【0035】
図６は、罫線３１の一例を示す図である。
【0036】
図２に示すように、穴埋め済みマーク画像生成部１８ｂは、Ｓ１０３の処理の後、罫線３１によって生じたマーク３３の途切れを穴埋めするための、色抽出マーク画像４１の膨張の量を決定するために、矢印３０ａで示すマーク３３の延在方向における罫線３１の幅３１ａを、Ｓ１０３において抽出した罫線画像４３から罫線３１毎に取得する（Ｓ１０４）。なお、罫線３１は、矢印３０ａで示す方向に直交する矢印３０ｂで示す方向に常に延在しているとは限らない。例えば、罫線３１は、図６に示すように、矢印３０ｂで示す方向から傾いた方向に延在している場合もある。したがって、穴埋め済みマーク画像生成部１８ｂは、罫線３１の延在方向に直交する方向における幅３１ｂと、矢印３０ｂで示す方向に対する罫線３１の傾き３１ｃとを罫線画像４３から取得し、これらの情報から、矢印３０ａで示す方向における罫線３１の幅３１ａを取得しても良い。
【0037】
図７は、色抽出マーク画像４１を膨張および収縮させた画像（以下「第１の膨張収縮済みマーク画像」という。）４５を示す図である。
【0038】
図２に示すように、穴埋め済みマーク画像生成部１８ｂは、Ｓ１０４の処理の後、罫線３１によって生じた途切れを穴埋めするために、Ｓ１０４において取得した矢印３０ａで示す方向における罫線３１の幅３１ａに応じた量で矢印３０ａで示す方向に色抽出マーク画像４１を膨張させて（Ｓ１０５）、Ｓ１０５において膨張させた画像をＳ１０５における矢印３０ａで示す方向の膨張の量と同一の量で矢印３０ａで示す方向に収縮させることによって、図７に示す第１の膨張収縮済みマーク画像４５を生成する（Ｓ１０６）。ここで、穴埋め済みマーク画像生成部１８ｂは、罫線画像４３に複数の罫線３１が含まれる場合には、罫線画像４３に含まれる全ての罫線３１の、矢印３０ａで示す方向における、最大の幅に応じた量で矢印３０ａで示す方向に、色抽出マーク画像４１を膨張および収縮させても良いし、罫線３１毎に、この罫線３１の矢印３０ａで示す方向における幅３１ａに応じた量で矢印３０ａで示す方向に、色抽出マーク画像４１のうち、この罫線３１の近傍の箇所に相当する箇所を膨張および収縮させても良い。
【0039】
図８（ａ）は、色抽出マーク画像４１と、罫線画像４３との論理和の画像（以下「第１の論理和画像」という。）４６を示す図である。図８（ｂ）は、色抽出マーク画像４１において罫線３１によって生じた途切れを穴埋めした画像（以下「第１の穴埋め済みマーク画像」という。）４７を示す図である。
【0040】
マーク付与画像３０においてマーク３３同士が近接している場合、第１の膨張収縮済みマーク画像４５は、罫線３１によって生じたマーク３３の途切れだけでなく、マーク付与画像３０において単にマーク３３同士が近接していた部分も穴埋めされている可能性がある。したがって、穴埋め済みマーク画像生成部１８ｂは、罫線３１によって生じたマーク３３の途切れ以外の部分の穴埋めを第１の膨張収縮済みマーク画像４５から除去するために、図２に示すように、Ｓ１０６の処理の後、Ｓ１０２において抽出した色抽出マーク画像４１と、Ｓ１０３において抽出した罫線画像４３との論理和の画像である、図８（ａ）に示す第１の論理和画像４６を生成し（Ｓ１０７）、Ｓ１０６において生成した第１の膨張収縮済みマーク画像４５と、Ｓ１０７において生成した第１の論理和画像４６との論理積の画像である、図８（ｂ）に示す第１の穴埋め済みマーク画像４７を生成する（Ｓ１０８）。
【0041】
穴埋め済みマーク画像生成部１８ｂは、Ｓ１０８の処理の後、文字３２によって生じたマーク３３の途切れを穴埋めするための、第１の穴埋め済みマーク画像４７の膨張の量を決定するために、矢印３０ａで示す方向における文字３２の幅と、矢印３０ｂで示す方向における文字３２の高さとを、Ｓ１０３において抽出した文字画像４４から文字３２毎に取得する（Ｓ１０９）。
【0042】
図９は、第１の穴埋め済みマーク画像４７を膨張および収縮させた画像（以下「第２の膨張収縮済みマーク画像」という。）４８を示す図である。
【0043】
図２に示すように、穴埋め済みマーク画像生成部１８ｂは、Ｓ１０９の処理の後、文字３２によって生じた途切れを穴埋めするために、Ｓ１０９において取得した矢印３０ａで示す方向における文字３２の幅に応じた量で矢印３０ａで示す方向に、Ｓ１０９において取得した矢印３０ｂで示す方向における文字３２の高さに応じた量で矢印３０ｂで示す方向に、それぞれ、第１の穴埋め済みマーク画像４７を膨張させて（Ｓ１１０）、Ｓ１１０において膨張させた画像を、Ｓ１１０における矢印３０ａで示す方向の膨張の量と同一の量で矢印３０ａで示す方向に、Ｓ１１０における矢印３０ｂで示す方向の膨張の量と同一の量で矢印３０ｂで示す方向に、それぞれ、収縮させることによって、図９に示す第２の膨張収縮済みマーク画像４８を生成する（Ｓ１１１）。ここで、穴埋め済みマーク画像生成部１８ｂは、文字画像４４に複数の文字３２が含まれる場合には、文字画像４４に含まれる全ての文字３２の、矢印３０ａで示す方向における、最大の幅に応じた量で矢印３０ａで示す方向に、文字画像４４に含まれる全ての文字３２の、矢印３０ｂで示す方向における、最大の高さに応じた量で矢印３０ｂで示す方向に、それぞれ、第１の穴埋め済みマーク画像４７を膨張および収縮させても良いし、文字３２毎に、この文字３２の矢印３０ａで示す方向における幅に応じた量で矢印３０ａで示す方向に、この文字３２の矢印３０ｂで示す方向における高さに応じた量で矢印３０ｂで示す方向に、それぞれ、第１の穴埋め済みマーク画像４７のうち、この文字３２の近傍の箇所に相当する箇所を膨張および収縮させても良い。
【0044】
図１０（ａ）は、文字画像４４と、第１の穴埋め済みマーク画像４７との論理和の画像（以下「第２の論理和画像」という。）４９を示す図である。図１０（ｂ）は、マーク付与画像３０において文字３２によって生じた途切れを穴埋めした画像（以下「第２の穴埋め済みマーク画像」という。）５０を示す図である。
【0045】
マーク付与画像３０においてマーク３３同士が近接している場合、第２の膨張収縮済みマーク画像４８は、文字３２によって生じたマーク３３の途切れだけでなく、マーク付与画像３０において単にマーク３３同士が近接していた部分も穴埋めされている可能性がある。したがって、穴埋め済みマーク画像生成部１８ｂは、文字３２によって生じたマーク３３の途切れ以外の部分の穴埋めを第２の膨張収縮済みマーク画像４８から除去するために、図２に示すように、Ｓ１１１の処理の後、Ｓ１０３において抽出した文字画像４４と、Ｓ１０８において抽出した第１の穴埋め済みマーク画像４７との論理和の画像である、図１０（ａ）に示す第２の論理和画像４９を生成し（Ｓ１１２）、Ｓ１１１において生成した第２の膨張収縮済みマーク画像４８と、Ｓ１１２において生成した第２の論理和画像４９との論理積の画像である、図１０（ｂ）に示す第２の穴埋め済みマーク画像５０を生成する（Ｓ１１３）。
【0046】
図１１は、第２の穴埋め済みマーク画像５０から生成される不要領域除去済みマーク画像６０を示す図である。
【0047】
マーク付与画像３０においてマーク３３と、文字３２とが近接している場合、第２の穴埋め済みマーク画像５０は、文字３２が残っている可能性がある。例えば、図１０（ｂ）に示す第２の穴埋め済みマーク画像５０においては、文字「Ｔ」が残っている。したがって、不要領域除去済みマーク画像生成部１８ｃは、図２に示すように、Ｓ１１３の処理の後、Ｓ１１３において生成した第２の穴埋め済みマーク画像５０のうち、Ｓ１０２において抽出した色抽出マーク画像４１の領域と全く重複しない連続領域を除去することによって、図１１に示す不要領域除去済みマーク画像６０を生成する（Ｓ１１４）。
【0048】
制御部１８は、Ｓ１１４の処理の後、Ｓ１１４において生成した不要領域除去済みマーク画像６０によって示されるマーク３３に応じた特定の処理を実行して（Ｓ１１５）、図２に示す動作を終了する。ここで、特定の処理とは、例えば、マーク付与画像３０からのマーク３３の除去、マーク付与画像３０に対するマーク３３部分の墨塗り、マーク付与画像３０においてマーク３３で囲まれた部分の文字３２の抽出などである。
【0049】
以上に説明したように、ＭＦＰ１０は、第２の穴埋め済みマーク画像５０のうち、色抽出マーク画像４１の領域と全く重複しない連続領域を除去することによって、不要な領域が除去されたマーク３３部分の画像としての不要領域除去済みマーク画像６０を生成する（Ｓ１１４）ので、マーク付与画像３０においてマーク３３同士が近接している場合に、近接しているマーク３３同士の間の隙間に罫線や文字などの記載部分が存在するとき、この記載部分が不要領域除去済みマーク画像６０に含まれてしまう可能性を低減することができる。したがって、ＭＦＰ１０は、マーク付与画像３０からのマーク３３の抽出の精度を向上することができる。
【0050】
ＭＦＰ１０は、マーク３３に対する影響が互いに異なる、罫線と、文字とを区別して処理する（Ｓ１０４～Ｓ１１３）ので、マーク付与画像３０からのマーク３３の抽出の精度を向上することができる。
【0051】
ＭＦＰ１０は、本実施の形態において、Ｓ１１０における膨張の量と、Ｓ１１１における収縮の量とに関して、矢印３０ａで示す方向における膨張や収縮の量を矢印３０ａで示す方向における文字３２の幅に応じたものとし、矢印３０ｂで示す方向における膨張や収縮の量を矢印３０ｂで示す方向における文字３２の高さに応じたものとしている。しかしながら、ＭＦＰ１０は、Ｓ１１０における膨張の量と、Ｓ１１１における収縮の量とに関して、膨張や収縮の方向に関わらず、矢印３０ａで示す方向における文字３２の幅と、矢印３０ｂで示す方向における文字３２の高さとのうち、大きい方に応じたものを膨張や収縮の量としても良い。
【0052】
文字は、罫線とは異なり、１つの文字に複数のマーク３３がかかる場合が少ないと考えられる。したがって、文字は、罫線とは異なり、適切な量以上の量で画像の膨張および収縮が行われたとしても、Ｓ１１２～Ｓ１１４の処理によって不要な部分が適切に除去される可能性が高いと考えられる。そこで、ＭＦＰ１０は、図２に示す動作に代えて、図１２に示す動作を実行しても良い。図１２に示す動作は、図２に示す動作においてＳ１０９の処理に代えてＳ１２９の処理を実行したものと同一である。穴埋め済みマーク画像生成部１８ｂは、Ｓ１２９において、矢印３０ａで示す方向における文字３２の幅、および、矢印３０ｂで示す方向における文字３２の高さとして、例えば７２ポイントなど、マーク付与画像３０に含まれる可能性がある最大のサイズの文字の幅および高さを取得する。図１２に示す動作は、図２に示す動作と比較して、文字画像４４から文字３２の幅および高さを文字３２毎に取得する必要がなく、固定値である幅および高さを常に取得するので、制御部１８の処理負担を軽くすることができる。
【0053】
ＭＦＰ１０は、本実施の形態において、罫線に起因するマーク３３の途切れの穴埋めを、文字に起因するマーク３３の途切れの穴埋めより先に処理する。しかしながら、ＭＦＰ１０は、文字に起因するマーク３３の途切れの穴埋めを、罫線に起因するマーク３３の途切れの穴埋めより先に処理しても良い。
【0054】
ＭＦＰ１０は、本実施の形態において、罫線に起因するマーク３３の途切れの穴埋めと、文字に起因するマーク３３の途切れの穴埋めとを別々に処理する。しかしながら、ＭＦＰ１０は、罫線と、文字とを区別せずに、マーク３３の途切れの穴埋めを実行しても良い。
【0055】
ＭＦＰ１０は、本実施の形態において、マーク付与画像から抽出される、マーク３３以外の記載部分として、文字および罫線を採用している。しかしながら、本発明の画像処理システムは、マーク付与画像から抽出される、マーク３３以外の記載部分として、文字および罫線のいずれか１つのみを採用しても良い。また、本発明の画像処理システムは、マーク付与画像から抽出される、マーク３３以外の記載部分として、文字および罫線の少なくとも１つに代えて、または、文字および罫線に加えて、例えば図など、文字および罫線のいずれでもない記載部分を採用しても良い。
【0056】
本発明の画像処理システムは、本実施の形態においてＭＦＰであるが、プリンター専用機など、ＭＦＰ以外の画像形成装置でも良いし、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）など、画像形成装置以外のコンピューターでも良い。本発明の画像処理システムは、１台のコンピューターによって構成されても良いし、複数台のコンピューターによって構成されても良い。
【符号の説明】
【0057】
１０ ＭＦＰ（画像処理システム、コンピューター）
１７ａ 画像処理プログラム
１８ａ 画像抽出部
１８ｂ 穴埋め済みマーク画像生成部
１８ｃ 不要領域除去済みマーク画像生成部
３０ マーク付与画像
３１ 罫線（記載部分）
３２ 文字（記載部分）
３３ マーク
４１ 色抽出マーク画像
４２ 非マーク部分画像
４３ 罫線画像
４４ 文字画像
４５ 第１の膨張収縮済みマーク画像
４６ 第１の論理和画像
４７ 第１の穴埋め済みマーク画像
４８ 第２の膨張収縮済みマーク画像
４９ 第２の論理和画像
５０ 第２の穴埋め済みマーク画像（穴埋め済みマーク画像）
６０ 不要領域除去済みマーク画像
１７ａ 画像処理プログラム
１８ａ 画像抽出部
１８ｂ 穴埋め済みマーク画像生成部
１８ｃ 不要領域除去済みマーク画像生成部
３０ マーク付与画像
３１ 罫線（記載部分）
３２ 文字（記載部分）
３３ マーク
４１ 色抽出マーク画像
４２ 非マーク部分画像
４３ 罫線画像
４４ 文字画像
４５ 第１の膨張収縮済みマーク画像
４６ 第１の論理和画像
４７ 第１の穴埋め済みマーク画像
４８ 第２の膨張収縮済みマーク画像
４９ 第２の論理和画像
５０ 第２の穴埋め済みマーク画像（穴埋め済みマーク画像）
６０ 不要領域除去済みマーク画像
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】