特開 2023-183827 画像読取装置、画像形成装置、及び画像処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023183827

(43)【公開日】2023-12-28

(54)【発明の名称】画像読取装置、画像形成装置、及び画像処理方法

(51)【国際特許分類】

   H04N 1/387 20060101AFI20231221BHJP

【ＦＩ】

H04N1/387

H04N1/387 700

H04N1/387 800

H04N1/387 200

H04N1/387 110

【審査請求】未請求

【請求項の数】6

【出願形態】ＯＬ

(21)【出願番号】P 2022097582

(22)【出願日】2022-06-16

(71)【出願人】

【識別番号】000006150

【氏名又は名称】京セラドキュメントソリューションズ株式会社

(74)【代理人】

【識別番号】110003443

【氏名又は名称】弁理士法人ＴＮＫアジア国際特許事務所

(72)【発明者】

【氏名】王 紹楊

【テーマコード（参考）】

5C076

【Ｆターム（参考）】

5C076AA02

5C076AA03

5C076AA13

5C076AA17

5C076AA24

5C076AA37

5C076BA06

5C076CA09

(57)【要約】

【課題】本の画像における各頁の画像別に、テキストなどが記載されたコンテンツ領域及び余白領域を抽出し、この余白領域を用いて、頁の画像を適宜補正し、頁の画像の見栄えをより好ましくする。
【解決手段】画像読取装置２０において、制御部２９は、読取部３２により読取られた読取領域Ｒ０の画像から本６１の画像６２を抽出し、この抽出された本６１の画像６２から左右の各頁の画像６３、６４を抽出し、左右の各頁の画像６３、６４毎に、頁の画像を、該頁の画像に含まれるコンテンツ領域、及び該頁の画像の両側のエッジからコンテンツ領域までのそれぞれの余白領域に区別し、各余白領域の一方を削除して、各余白領域の他方をその削除された余白領域の代わりに配置して、該頁の画像を補正する。
【選択図】図４

【特許請求の範囲】

【請求項1】

プラテンガラス上に載置された本の画像を含む読取領域を、前記プラテンガラスを介して読取る読取部と、
前記読取部により読取られた読取領域の画像から前記本の画像を抽出し、前記抽出された本の画像から該本の見開かれた各頁の画像を抽出し、前記抽出された各頁の画像毎に、頁の画像を、該頁の画像に含まれるコンテンツ領域と、該頁の画像の両側のエッジから前記コンテンツ領域までのそれぞれの余白領域とに区別し、前記各余白領域の一方を削除して、前記各余白領域の他方を前記削除された余白領域の代わりに配置して、該頁の画像を補正する制御部と、を備える画像読取装置。

【請求項2】

前記制御部は、前記抽出された各頁の画像毎に、頁の画像を、該頁の画像に含まれるコンテンツ領域、及び該頁の画像の両側のエッジから前記コンテンツ領域までのそれぞれの余白領域に区別し、該頁の画像における前記各余白領域の一方を削除して、別の頁の画像における前記各余白領域のいずれかを該頁の画像における削除された余白領域の代わりに配置して、該頁の画像を補正する請求項１に記載の画像読取装置。

【請求項3】

前記制御部は、前記頁の画像のエッジに隣接する縁領域を設定して、前記縁領域に飾り模様が含まれるか否かを判定し、前記飾り模様が含まれていない場合に、前記頁の画像のエッジから前記コンテンツ領域までを前記余白領域として区別し、前記飾り模様が含まれる場合は、前記頁の画像のエッジから前記コンテンツ領域までの前記飾り模様を含んだ領域を前記余白領域として区別する請求項２に記載の画像読取装置。

【請求項4】

前記制御部は、前記抽出された本の画像から各頁の画像を抽出すると、前記各頁の画像の傾きを補正し、前記傾きが補正された各頁の画像毎に、頁の画像を、該頁の画像に含まれるコンテンツ領域、及び該頁の画像の両側のエッジから前記コンテンツ領域までのそれぞれの余白領域に区別する請求項２に記載の画像読取装置。

【請求項5】

請求項１乃至請求項４のいずれか１つに記載の画像読取装置と、
前記画像読取装置により補正された頁の画像を記録紙に形成する画像形成部と、を備える画像形成装置。

【請求項6】

プラテンガラス上に載置された本の画像を含む読取領域を、前記プラテンガラスを介して読取るステップと、
前記読取られた読取領域の画像から前記本の画像を抽出するステップと、
前記抽出された本の画像から左右の各頁の画像を抽出するステップと、
前記抽出された各頁の画像毎に、頁の画像を、該頁の画像に含まれるコンテンツ領域、及び該頁の画像の両側のエッジから前記コンテンツ領域までのそれぞれの余白領域に区別するステップと、
前記各余白領域の一方を削除して、前記各余白領域の他方を前記削除された余白領域の代わりに配置して、該頁の画像を補正するステップと、を有する画像処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、原稿や本の画像を読取る画像読取装置、それを備える画像形成装置、及び画像処理方法に関し、特に読取られた本の画像からそれぞれの頁の画像を抽出するための技術に関する。

【背景技術】

【0002】

画像形成装置では、画像読取装置がプラテンガラス上に載置された原稿の画像を読取り、画像形成部が原稿の画像を記録紙に形成する。画像読取装置のプラテンガラス上に見開かれた本が載置され、この見開かれた本の画像が読取られた場合は、本の中綴じ部分がプラテンガラスから浮き上がって、読み取られた本の画像の中心付近が暗くなるので、画像処理により本の画像の中心付近を消去することがある。

【0003】

例えば、特許文献１に記載の画像形成装置では、スキャナによりコンタクトガラス上の書籍などの見開き原稿を読み取り、読み取ったデータの濃度分布から見開き原稿ののど部（中綴じ部分）を検出し、見開き原稿ののど部を複写紙のセンターに一致させると共にのど部の影を消去している。また、画像を特定量左右に移動させて、綴じ代となる余白を複写紙に形成している。これにより、書籍などの見開き原稿を複写紙に適切に複写することができる。

【0004】

また、特許文献２に記載の画像補正方法では、１つの画像を余白とそれ以外の文字又は表などの各情報領域に区分し、画像全体に対する各情報領域の傾きを検出し、それらの傾きを補正して、傾きのない画像を取得している。これにより、綴じられた書類または本などを見開いて読取った場合でも、一部の領域だけが傾くような事態を避けることができる。

【0005】

また、特許文献３に記載の画像読取装置では、原稿載置台に載置された本などを読取る場合に、本の外側一辺から中綴じ部分までの範囲を複数の区間に区分し、区間毎に、本の頁からの反射光を受光するＣＣＤイメージセンサの出力レベルに基づき該本の頁に照射される照射光量を調節している。これにより、本の中綴じ部分が白抜け画像や黒い画像にならないようにすることができる。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開平９－２４７４２２号公報

【特許文献2】特開２００１－３２０５７２号公報

【特許文献3】特開２０１２－３９３３２号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

ここで、上記のように画像読取装置によりプラテンガラス上の見開かれた本の画像が読取られた場合は、本の画像の中心付近が暗くなることから、画像処理により本の画像の中心付近を消去しているが、これだけではなく、本の画像における左右の各頁別に、テキストなどが記載されたコンテンツ領域及び余白領域を抽出し、この余白領域を用いて、頁の画像を補正すれば、頁の画像の見栄えをより好ましくすることができる。

【0008】

上記特許文献１では、原稿ののど部（中綴じ部分）の影を消去し、また画像を特定量左右に移動させて、綴じ代となる余白を複写紙に形成しているものの、綴じ代を形成しているだけであるから、原稿の見栄えが改善されることはない。

【0009】

また、上記特許文献２では、１つの画像を余白と情報領域に区分し、各情報領域の傾きを検出して補正しているが、余白を利用して、頁の画像を補正してはいない。

【0010】

更に、上記特許文献３では、見開き原稿の中綴じ部分が白抜け画像や黒い画像にならないようにしているが、余白を利用して、頁の画像を補正してはいない。

【0011】

本発明は、上記の事情に鑑みなされたものであり、本の画像における各頁の画像別に、テキストなどが記載されたコンテンツ領域及び余白領域を抽出し、この余白領域を用いて、頁の画像を適宜補正し、頁の画像の見栄えをより好ましくすることを目的とする。

【課題を解決するための手段】

【0012】

本発明の一局面に係る画像読取装置は、プラテンガラス上に載置された本の画像を含む読取領域を、前記プラテンガラスを介して読取る読取部と、前記読取部により読取られた読取領域の画像から前記本の画像を抽出し、前記抽出された本の画像から該本の見開かれた各頁の画像を抽出し、前記抽出された各頁の画像毎に、頁の画像を、該頁の画像に含まれるコンテンツ領域、及び該頁の画像の両側のエッジから前記コンテンツ領域までのそれぞれの余白領域に区別し、前記各余白領域の一方を削除して、前記各余白領域の他方を前記削除された余白領域の代わりに配置して、該頁の画像を補正する制御部と、を備えるものである。

【0013】

また、本発明の一局面に係る画像形成装置は、上記本発明の画像読取装置と、前記画像読取装置により補正された頁の画像を記録紙に形成する画像形成部と、を備えるものである。

【0014】

また、本発明の一局面に係る画像処理方法は、プラテンガラス上に載置された本の画像を含む読取領域を、前記プラテンガラスを介して読取るステップと、前記読取られた読取領域の画像から前記本の画像を抽出するステップと、前記抽出された本の画像から左右の各頁の画像を抽出するステップと、前記抽出された各頁の画像毎に、頁の画像を、該頁の画像に含まれるコンテンツ領域、及び該頁の画像の両側のエッジから前記コンテンツ領域までのそれぞれの余白領域に区別するステップと、前記各余白領域の一方を削除して、前記各余白領域の他方を前記削除された余白領域の代わりに配置して、該頁の画像を補正するステップと、を有する方法である。

【発明の効果】

【0015】

本発明によれば、本の画像における各頁の画像別に、テキストなどが記載されたコンテンツ領域及び余白領域を抽出し、この余白領域を用いて、頁の画像を適宜補正し、頁の画像の見栄えをより好ましくすることができる。

【図面の簡単な説明】

【0016】

【図1】本発明の一実施形態に係る画像形成装置を示す断面図である。

【図2】画像形成装置における画像読取装置を示す断面図である。

【図3】画像読取装置の外観を示す斜視図である。

【図4】画像形成装置の内部構成を示すブロック図である。

【図5】（Ａ）は画像読取装置のプラテンガラス上に見開かれた本が載置された状態を示す側面図であり、（Ｂ）は画像読取装置により読取られた本の画像を示す図である。

【図6】（Ａ）（Ｂ）は本の画像から抽出された左頁の画像及び右頁の画像を示す図である。

【図7】傾きが補正された左頁の画像及び右頁の画像を示す図である。

【図8】（Ａ）は左頁の画像及び右頁の画像を示す図であり、（Ｂ）は左頁の画像におけるコンテンツ領域、外側の余白領域、及び内側の余白領域、右頁の画像におけるコンテンツ領域、外側の余白領域、及び内側の余白領域を示す図である。

【図9】（Ａ）は飾り模様を含む左頁の画像及び右頁の画像を示す図であり、（Ｂ）は左頁の画像におけるコンテンツ領域、飾り模様を含む外側の余白領域、及び内側の余白領域、右頁の画像におけるコンテンツ領域、飾り模様を含む外側の余白領域、及び内側の余白領域を示す図である。

【図10】（Ａ）は補正された左頁の画像及び右頁の画像を示す図であり、（Ｂ）は補正された飾り模様を含む左頁の画像及び右頁の画像を示す図である。

【図11】左頁の画像及び右頁の画像を補正するための制御手順を示すフローチャートである。

【図12】画像形成装置の表示部に表示された初期画面を示す図である。

【図13】補正された左頁の画像及び右頁の画像の変形例を示す図である。

【発明を実施するための形態】

【0017】

以下、本発明の実施形態について図面を参照して説明する。

【0018】

図１は、本発明にかかる一実施形態の画像形成装置を示す断面図である。本実施形態の画像形成装置１０は、画像読取装置２０及び画像形成部２１を備えている。

【0019】

画像読取装置２０は、原稿の画像を光学的に読み取る撮像素子を有しており、この撮像素子のアナログ出力がデジタル信号に変換されて、原稿の画像を示す画像データが生成される。

【0020】

画像形成部２１は、上記画像データによって示される画像を記録用紙に印刷するものであり、マゼンタ用の画像形成ユニット３Ｍ、シアン用の画像形成ユニット３Ｃ、イエロー用の画像形成ユニット３Ｙ、及びブラック用の画像形成ユニット３Ｂｋを備えている。各画像形成ユニット３Ｍ、３Ｃ、３Ｙ、及び３Ｂｋのいずれにおいても、感光体ドラム４の表面を均一帯電させ、感光体ドラム４の表面を露光して、感光体ドラム４の表面に静電潜像を形成し、感光体ドラム４の表面の静電潜像をトナー像に現像して、感光体ドラム４の表面のトナー像を、中間転写ベルト５に転写する。これにより、カラーのトナー像が中間転写ベルト５上に形成される。このカラーのトナー像は、中間転写ベルト５と２次転写ローラー６の間のニップ域Ｎにおいて給紙部１４から搬送路８を通じて搬送されてきた記録用紙Ｐに２次転写される。

【0021】

この後、定着装置１５で記録用紙Ｐが加熱及び加圧されて、記録用紙Ｐ上のトナー像が熱圧着により定着され、更に記録用紙Ｐが排出ローラー１６を通じて排出トレイ１７に排出される。

【0022】

次に、画像読取装置２０について説明する。図２は、画像読取装置２０を示す断面図である。また、図３は、画像読取装置２０の外観を示す斜視図であり、原稿搬送部３１が開かれた状態を示している。

【0023】

図２及び図３に示すように、画像読取装置２０は、原稿搬送部３１及び読取部３２を備えている。原稿搬送部３１は、原稿トレイ３３、給紙ローラー３４、レジストローラー３５、複数の搬送ローラー３６、排紙ローラー３７、及び原稿排出トレイ３８等を備えている。また、読取部３２は、第１プラテンガラス４１、第２プラテンガラス４２、キャリッジ４４、光学系ユニット４５、集光レンズ４６、及びＣＣＤセンサー４７等を備えている。

【0024】

読取部３２において、キャリッジ４４は、原稿に光を照射する光源４４Ａと、原稿ＭＳで反射された光を反射するミラー４４Ｂとを備えている。

【0025】

光学系ユニット４５は、ミラー４５Ａと、ミラー４５Ｂとを備えている。ミラー４５Ａは、キャリッジ４４のミラー４４Ｂで反射された光を受けて略垂直下方に方向転換させる。ミラー４５Ｂは、ミラー４５Ａで反射された光を、さらに略水平に方向転換させて、集光レンズ４６を通じてＣＣＤセンサー４７へと導く。

【0026】

キャリッジ４４及び光学系ユニット４５は、レールに沿って主走査方向Ｙと直交する副走査方向Ｘに往復移動可能に設けられ、ステッピングモーター（図示せず）を動力源とする既知の駆動機構により所定の速度関係を維持しつつ副走査方向Ｘに移動される。

【0027】

読取部３２の上面３２ａの一端部には、２つのヒンジ４８が離間して設けられており、これらのヒンジ４８により原稿搬送部３１が開閉可能に支持されて、ユーザーによる原稿搬送部３１の開閉操作が可能にされている。

【0028】

ここで、画像読取装置２０では、第２プラテンガラス４２上に載置された原稿Ｍの画像を読取る第１モード、及び原稿搬送部３１により原稿Ｍを搬送しつつ該原稿Ｍの画像を読取る第２モードのいずれかを切替えることができる。例えば、第２プラテンガラス４２上に載置された原稿Ｍを検出する第１センサー（図示せず）、及び原稿搬送部３１の原稿トレイ３３に載置された原稿Ｍを検出する第２センサー（図示せず）が設けられている。第１センサーにより原稿Ｍが検出されたときには第１モードが設定され、また第２センサーにより原稿Ｍが検出されたときには第２モードが設定される。

【0029】

第１モードにおいては、原稿搬送部３１が開かれて、読取部３２の第２プラテンガラス４２が開放された状態で、第２プラテンガラス４２上に原稿Ｍが載置され、更に原稿搬送部３１が閉じられて、原稿搬送部３１により第２プラテンガラス４２上に載置された原稿Ｍが押さえられる。読取部３２では、キャリッジ４４及び光学系ユニット４５を所定の速度関係を維持して副走査方向Ｘに移動させつつ、キャリッジ４４の光源４４Ａの光を、第２プラテンガラス４２を介して原稿Ｍに照射し、原稿Ｍで反射された光をキャリッジ４４のミラー４４Ｂで反射する。更に、この光は、光学系ユニット４５のミラー４５Ａ及びミラー４５Ｂで反射されて、集光レンズ４６を通じてＣＣＤセンサー４７に入射する。ＣＣＤセンサー４７は、原稿Ｍの画像を主走査方向Ｙ（副走査方向Ｘと直交する方向）に繰り返し読取る。

【0030】

また、第２モードにおいては、原稿搬送部３１が閉じられた状態で、原稿搬送部３１の給紙ローラー３４により原稿トレイ３３に載置された原稿Ｍが１枚ずつ引出されて、レジストローラー３５及び各搬送ローラー３６により原稿Ｍが第１プラテンガラス４１上を通じて副走査方向に搬送され、排紙ローラー３７により原稿Ｍが原稿排出トレイ３８に排出される。読取部３２では、キャリッジ４４及び光学系ユニット４５を第１プラテンガラス４１下方のそれぞれの所定位置に位置決めし、キャリッジ４４の光源４４Ａの光を、第１プラテンガラス４１を介して原稿Ｍに照射し、原稿Ｍで反射された光を各ミラー４４Ｂ、４５Ａ、４５Ｂで反射させて、集光レンズ４６を通じてＣＣＤセンサー４７に入射させ、ＣＣＤセンサー４７により原稿Ｍの画像を主走査方向Ｙに繰り返し読取らせる。

【0031】

図４は、画像形成装置１０の内部構成を示すブロック図である。画像形成装置１０は、画像読取装置２０と、画像形成部２１と、操作部２３と、表示部２４と、タッチパネル２５と、画像メモリー２６と、記憶部２７と、制御ユニット２８とを備えている。これらの構成要素は、互いにバスを通じてデータ又は信号の送受信が可能とされている。

【0032】

操作部２３は、テンキー、決定キー、スタートキーなどの物理キーを備えている。操作部２３は、ユーザーによる操作に基づいて各所の指示を受け付ける。

【0033】

表示部２４は、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）又は有機ＥＬ（ＯＬＥＤ：Organic Light-Emitting Diode）ディスプレイなどから構成される。

【0034】

表示部２４の画面には、タッチパネル２５が配置されている。タッチパネル２５は、所謂抵抗膜方式や静電容量方式などのタッチパネルであって、タッチパネル２５に対するユーザーの指などの接触（タッチ）をその接触位置とともに検知して、その接触位置の座標を示す検知信号を制御ユニット２８の後述する制御部２９に出力する。

【0035】

画像メモリー２６は、画像読取装置２０により読取られた原稿の画像を示す画像データを一時的に記憶する。

【0036】

記憶部２７は、ＳＳＤ（Solid State Drive）又はＨＤＤ（Hard Disk Drive）などの大容量の記憶装置であって、各種のアプリケーションプログラムや種々のデータを記憶している。

【0037】

制御ユニット２８は、プロセッサー、ＲＡＭ(Random Access Memory）、及びＲＯＭ（Read Only Memory）などから構成される。プロセッサーは、例えばＣＰＵ（Central Processing Unit）、ＡＳＩＣ（Application Specific Integrated Circuit）、又はＭＰＵ（Micro Processing Unit）等である。制御ユニット２８は、上記のＲＯＭ又は記憶部２７に記憶された制御プログラムが上記のプロセッサーで実行されることにより、制御部２９として機能する。

【0038】

制御部２９は、画像形成装置１０を統括的に制御する。制御ユニット２８は、画像読取装置２０、画像形成部２１、操作部２３、表示部２４、タッチパネル２５、画像メモリー２６、及び記憶部２７などと接続されている。制御部２９は、これらの構成要素の動作制御や、該各構成要素との間での信号またはデータの送受信を行う。

【0039】

制御部２９は、画像形成装置１０による画像形成に必要な各種の処理などを実行する処理部としての役割を果たす。また、制御部２９は、タッチパネル２５から出力される検知信号あるいは操作部２３の物理キーの操作に基づき、ユーザーにより入力された操作指示を受け付ける。更に、制御部２９は、表示部２４の表示動作を制御する機能を有する。

【0040】

ここで、画像形成装置１０において、例えばユーザーが、原稿を画像読取装置２０の読取部３２の第２プラテンガラス４２上に載置して、操作部２３のスタートキーを操作し、原稿読取指示が操作部２３に受け付けられると、制御部２９は、読取部３２により第２プラテンガラス４２上の原稿の画像を読取らせて、原稿の画像を示す画像データを画像メモリー２６に一旦記憶させ、この画像データによって示される原稿の画像を画像形成部２１により記録紙Ｐに形成させる。

【0041】

図５（Ａ）は画像読取装置のプラテンガラス上に見開かれた本が載置された状態を画像読取装置の側方から見て示す側面図である。図５（Ｂ）は画像読取装置により読取られた本の画像を示す図である。

【0042】

また、第２プラテンガラス４２上に、平坦な原稿ではなく、見開かれた本が載置された場合も、読取部３２によりその見開かれた本の頁が読取られる。例えば、読取部３２は、図５（Ａ）に示すように第２プラテンガラス４２上に載置された見開かれた本６１の画像を読取る。

【0043】

しかしながら、図５（Ａ）に示すように本６１の中央の中綴じ部分６１Ａが第２プラテンガラス４２から浮き上がるので、図５（Ｂ）に示すようにその読み取られた本６１の画像６２の中央部６２Ａが暗い画像となり、また本６１の画像６２の図５（Ｂ）における副走査方向Ｘに並ぶそれぞれの縁部６２Ｂも暗くなる。また、副走査方向Ｘに並ぶ各頁の画像６３、６４に含まれるテキストなどのコンテンツが副走査方向Ｘにおける中央に片寄る。更に、各頁の画像６３、６４が傾くこともある。このため、本６１の画像６２がそのまま記録紙に形成されると、記録紙に形成された本６１の画像６２の見栄えが良くない。

【0044】

このため、本実施形態の画像読取装置２０では、本６１の画像６２を見栄え良く補正して記録紙に形成するためのブックモードの機能を有している。

【0045】

ユーザーは、ブックモードを利用する場合、図５（Ａ）に示すように本６１を副走査方向Ｘに見開いて第２プラテンガラス４２上に載置する。

【0046】

制御部２９は、ブックモードが設定された上で、画像読取装置２０により図６（Ａ）に示すような本６１の画像６２を含む読取領域Ｒ０が読取られると、この読取領域Ｒ０の画像を示す画像データを画像メモリー２６に記憶させる。制御部２９は、読取部３２により読取られる読取領域Ｐ０の副走査方向Ｘに延びる一辺をｘ軸とし、読取領域Ｒ０の主走査方向Ｙに延びる他の一辺をｙ軸とする直交座標系を定義する。

【0047】

制御部２９は、画像メモリー２６内の読取領域Ｒ０の画像を示す画像データを参照して、読取領域Ｒ０の画像における本６１の画像６２のエッジを抽出する。

【0048】

例えば、制御部２９は、読取領域Ｒ０の画像において、副走査方向Ｘに並ぶ全ての走査ライン（主走査方向Ｙに延びる）の画像毎に、主走査方向Ｙ位置が同一となる、走査ライン上の各画素を図６（Ａ）において副走査方向Ｘに例えば左側から右側へと順次選択していき、１つの選択画素の値と、副走査方向Ｘに並ぶ次の画素の値との差分を算出して、この差分が予め設定された閾値Ｋ以上となった（暗から明に変化した）最初の選択画素を判定する。制御部２９は、主走査方向Ｙ位置が同一となる副走査方向Ｘに並ぶ各画素のうち、差分が予め設定された閾値Ｋ以上となった最初の選択画素を判定する。更に、制御部２９は、当該最初の選択画素が主走査方向Ｙに並んでなす近似直線を検出して、この近似直線を、画像６３の図６（Ａ）において左側のエッジＥＬとして取得する。

【0049】

同様に、制御部２９は、読取領域Ｒ０の画像において、副走査方向Ｘに並ぶ全ての走査ライン（主走査方向Ｙに延びる）の画像毎に、主走査方向Ｙ位置が同一となる、走査ライン上の各画素を図６（Ａ）において副走査方向Ｘに例えば右側から左側へと順次選択していき、１つの選択画素の値と、副走査方向Ｘに並ぶ次の画素の値との差分を算出して、この差分が予め設定された閾値Ｋ以上となった（暗から明に変化した）最初の選択画素を判定する。制御部２９は、主走査方向Ｙ位置が同一となる副走査方向Ｘに並ぶ各画素のうち、差分が予め設定された閾値Ｋ以上となった最初の選択画素を判定する。更に、制御部２９は、当該最初の選択画素が主走査方向Ｙに並んでなす近似直線を検出して、この近似直線を、画像６３の図６（Ａ）において右側のエッジＥＲとして取得する。

【0050】

制御部２９は、上記直交座標系において、左側のエッジＥＬと右側のエッジＥＲに基づいてこれらの間の副走査方向Ｘにおける中心線ＣＬ（主走査方向Ｙに延びる）を算出し、この中心線ＣＬで読取領域Ｒ０の画像を左側画像ＧＬと右側画像ＧＲに２分割する。

【0051】

制御部２９は、左側画像ＧＬにおいて、全ての主走査ラインの画像毎に、主走査ライン上の各画素を図６（Ａ）において上側から下側へと順次選択して、この選択画素の値と次の画素の値の差分を算出して、この差分が閾値Ｋ以上となった最初の選択画素を判定し、各主走査ライン上で判定されたそれぞれの最初の選択画素を概ね通って副走査方向Ｘに延びる近似直線を算出して、この近似直線を図６（Ａ）において画像６３の上側のエッジＥＵとして取得する。

【0052】

同様に、制御部２９は、右側画像ＧＲにおいて、全ての主走査ラインの画像毎に、主走査ライン上の各画素を図６（Ａ）において上側から下側へと順次選択して、この選択画素の値と次の画素の値の差分を算出して、この差分が閾値Ｋ以上となった最初の選択画素を判定し、各主走査ライン上で判定されたそれぞれの最初の選択画素を概ね通って副走査方向Ｘに延びる近似直線を算出して、この近似直線を図６（Ａ）において画像６４の上側のエッジＥＵとして取得する。

【0053】

また、制御部２９は、左側画像ＧＬにおいて、全ての主走査ライン毎に、主走査ライン上の各画素を図６（Ａ）において下側から上側へと順次選択して、この選択画素の値と次の画素の値の差分を求めて、この差分が閾値Ｋ以上となった最初の選択画素を判定し、各主走査ライン上で判定されたそれぞれの最初の選択画素を概ね通って副走査方向Ｘに延びる近似直線を算出して、この近似直線を図６（Ａ）において左頁の画像６３の下側のエッジＥＤとして取得する。

【0054】

同様に、制御部２９は、右側画像ＧＲにおいて、全ての主走査ライン毎に、主走査ライン上の各画素を図６（Ａ）において下側から上側へと順次選択して、この選択画素の値と次の画素の値の差分を求めて、この差分が閾値Ｋ以上となった最初の選択画素を判定し、各主走査ライン上で判定されたそれぞれの最初の選択画素を概ね通って副走査方向Ｘに延びる近似直線を算出して、この近似直線を図６（Ａ）において右頁の画像６４の下側のエッジＥＤとして取得する。

【0055】

これにより、制御部２９は、上記直交座標系において、本６１の左頁の画像６３の輪郭となる左側のエッジＥＬ、上側のエッジＥＵ、下側のエッジＥＤ、及び中心線ＣＬを取得し、また本６１の右頁の画像６４の輪郭となる右側のエッジＥＲ、上側のエッジＥＵ、下側のエッジＥＤ、及び中心線ＣＬを取得する。

【0056】

制御部２９は、上記直交座標系において、例えば図６（Ｂ）に示すように、ｘ軸に対する本６１の左頁の画像６３の上側のエッジＥＵの傾斜角度θを判定し、この傾斜角度θが０となるように本６１の左頁の画像６３を回転させて、本６１の左頁の画像６３の傾きを補正する。

【0057】

同様に、制御部２９は、上記直交座標系において、図６（Ｂ）に示すように、ｘ軸に対する本６１の右頁の画像６４の上側のエッジＥＵの傾斜角度θを判定し、この傾斜角度θが０となるように本６１の右頁の画像６４を回転させて、本６１の右頁の画像６４の傾きを補正する。

【0058】

これにより、制御部２９は、図７に示すように、傾いていない本６１の左頁の画像６３及び右頁の画像６４を生成する。

【0059】

続いて、制御部２９は、既知のＯＣＲ機能により左頁の画像６３を示す画像データを解析して、左頁の画像６３における、テキスト画像のみが存在する領域をテキスト領域として判定し、更に、画像のみが存在する領域を画像領域として判定し、表のみが存在する領域を表領域として判定し、図形のみが存在する領域を図形領域として判定し、左頁の画像６３に含まれるこれらテキスト領域、画像領域、表領域、図形領域により構成される矩形領域をコンテンツ領域として判定する。

【0060】

制御部２９は、図８（Ａ）において、左頁の画像６３の副走査方向Ｘの最大幅ｘｍａを判定して、例えば左頁の画像６３の左側のエッジＥＬに隣接する最大幅ｘｍａの１／１０幅の左側縁領域ＱＬを判定し、この左側縁領域ＱＬに包含されるコンテンツ領域の有無を判定して、コンテンツ領域が無ければ、左頁の画像６３の縁に飾り模様が無いものとし、図８（Ｂ）において、左頁の画像６３の左側のエッジＥＬより右方向に進んで最初のコンテンツ領域ＴＺまでの矩形状の領域を外側の余白領域ＳＬとして設定する。

【0061】

また、制御部２９は、図９（Ａ）において、左側縁領域ＱＬに包含されるコンテンツ領域が有れば、そのコンテンツ領域の面積（画素数）を算出し、左側縁領域ＱＬの面積（画素数）に対するその包含されるコンテンツ領域の面積の比率を算出する。制御部２９は、例えばその算出された比率が１／３以下であれば、すなわち、左側縁領域ＱＬに包含されるコンテンツ領域の面積が狭ければ、この包含されるコンテンツ領域が左頁の画像６３の周縁の飾り模様Ｊであるとみなし、図９（Ｂ）において、左頁の画像６３の左側のエッジＥＬより右方向に進んで、飾り模様Ｊとは異なる別のコンテンツ領域ＴＺまでの矩形状の領域を、外側の余白領域ＳＬ（飾り模様Ｊを含む）として設定する。別のコンテンツ領域ＴＺは、左側縁領域ＱＬに包含されないものとする。

【0062】

制御部２９は、上記算出された比率が１／３を超えれば、左側縁領域ＱＬに包含されるコンテンツ領域の面積が広く、このコンテンツ領域が飾り模様ではない可能性があるので、外側の余白領域ＳＬを設定しないようする。

【0063】

また、制御部２９は、図９（Ｂ）において、左頁の画像６３の中心線ＣＬに対して左側に隣り合うコンテンツ領域ＴＺを判定し、この判定されたコンテンツ領域ＴＺよりも右側を内側の余白領域ＵＬとして設定する。

【0064】

そして、制御部２９は、図１０（Ａ）又は図１０（Ｂ）に示すように、頁の画像６３の内側の余白領域ＵＬの画像を削除し、この内側の余白領域ＵＬの画像の代わりに、外側の余白領域ＳＬの画像を配置して、左頁の画像６３を補正する。これにより、画像６３における余領域ＵＬの画像を削除して、左頁の画像６３に含まれていた暗い中央部６２Ａを削除する。

【0065】

同様に、制御部２９は、本６１の右頁の画像６４を示す画像データをＯＣＲ機能により解析して、右頁の画像６４に含まれるコンテンツ領域を判定する。

【0066】

制御部２９は、図８（Ａ）において、右頁の画像６４の副走査方向Ｘの最大幅ｘｍａを判定して、右頁の画像６４の右側のエッジＥＲに隣接する最大幅ｘｍａの１／１０幅の右側縁領域ＱＲを設定し、この右側縁領域ＱＲに包含されるコンテンツ領域の有無を判定する。制御部２９は、コンテンツ領域が無ければ、右頁の画像６４の縁に飾り模様が無いものとし、図８（Ｂ）において、右頁の画像６４の右側のエッジＥＲより左方向に進んで最初のコンテンツ領域ＴＺまでの矩形状の領域を外側の余白領域ＳＲとして設定する。

【0067】

また、制御部２９は、図９（Ａ）において、右側縁領域ＱＲに包含されるコンテンツ領域が有れば、その包含されるコンテンツ領域の面積（画素数）を算出し、右側縁領域ＱＲの面積（画素数）に対するそのコンテンツ領域の面積の比率を算出する。制御部２９は、その算出された比率が１／３以下であれば、すなわち、右側縁領域ＱＲに包含されるコンテンツ領域の面積が狭ければ、この包含されるコンテンツ領域が右頁の画像６４の周縁の飾り模様Ｊであるとみなし、図９（Ｂ）において、右頁の画像６４の右側のエッジＥＲより左方向に進んで、飾り模様Ｊとは異なる別のコンテンツ領域ＴＺまでの矩形状の領域を、外側の余白領域ＳＲ（飾り模様Ｊを含む）として設定する。別のコンテンツ領域ＴＺは、右側縁領域ＱＲに包含されないものとする。

【0068】

制御部２９は、上記算出された比率が１／３を超えれば、右側縁領域ＱＲに包含されるコンテンツ領域の面積が広く、このコンテンツ領域が飾り模様ではない可能性があるので、外側の余白領域ＳＲを設定しないようする。

【0069】

また、制御部２９は、図９（Ｂ）において、右頁の画像６４の中心線ＣＬに対して右側に隣り合うコンテンツ領域ＴＺを判定し、この判定されたコンテンツ領域ＴＺよりも左側を内側余白領域ＵＲとして設定する。

【0070】

そして、制御部２９は、図１０（Ａ）又は図１０（Ｂ）に示すように、右頁の画像６４の内側余白領域ＵＲの画像を削除し、この内側余白領域ＵＲの画像の代わりに、外側余白領域ＳＲの画像を配置して、右頁の画像６４を補正する。これにより、内側の余白領域ＵＲの画像を削除して、右頁の画像６４に含まれていた暗い中央部６２Ａを削除する。

【0071】

これにより、補正された左頁の画像６３及び右頁の画像６４の両側に同一幅の余白領域又は同一幅でかつ同一の飾り模様Ｊを含む余白領域が配置されて、左右の頁の各画像６３、６４の中央にそれぞれのコンテンツ領域ＴＺが配置され、左右の各頁の画像６３、６４の見栄えが良くなる。また、各頁の画像６３、６４の間の暗い中央部６２Ａが削除される。

【0072】

次に、上記のように本６１の画像６２から左頁の画像６３及び右頁の画像６４を抽出して、左右の各頁の画像６３、６４の傾きを補正し、更に左右の各頁の画像６３、６４別に、頁の画像を補正するための制御手順を、図１１に示すフローチャートなどを参照して説明する。なお、ここでいう左右とは、図６乃至図１０における位置関係を示す。

【0073】

制御部２９は、図１２に示すような初期画面Ｇ１を表示部２４に表示させているものとする。この初期画面Ｇ１には、それぞれの機能に対応付けられた複数の機能キー７１ａ～７１ｈ等が表示されている。１つの機能キー７１ｈは、所定のブックモードを指示するためのキーである。

【0074】

ユーザーが機能キー７１ｈにタッチ操作せず、すなわち、ブックモードの指示が操作部２３に入力されることなく、ユーザーが本を見開きとして第２プラテンガラス４２上に載置し、ユーザーによる操作部２３のスタートキーの操作に基づいて、原稿読取指示が操作部２３に入力されたものとする。あるいは、ユーザーによる操作に基づき、タッチパネル２５を通じて、機能キー７１ｈへのタッチ操作により操作部２３にブックモードの指示が入力されてから、ユーザーが本を見開きとして第２プラテンガラス４２上に載置し、ユーザーによる操作部２３のスタートキーの操作に基づいて、原稿読取指示が操作部２３に入力されたものとする。

【0075】

制御部２９は、ブックモードの指示が操作部２３に入力されていないと判断したときは（Ｓ１０１「Ｎｏ」）、ブックモードを設定することなく、読取部３２により第２プラテンガラス４２上の見開かれた本の画像を読取らせて、この見開かれた本の画像を示す画像データを画像メモリー２６に一旦記憶させ、この画像データによって示される見開かれた本６１の画像６２を画像形成部２１により記録紙に形成させる（Ｓ１０２）。この場合は、図６（Ａ）に示すような読取部３２により読取られた読取領域Ｒ０の画像がそのまま記録紙Ｐに形成される。

【0076】

また、制御部２９は、ブックモードの指示が操作部２３に入力されていると判断したときは（Ｓ１０１「Ｙｅｓ」）、ブックモードを設定し（Ｓ１０３）、操作部２３に原稿読取指示が入力されたと判断したときに、読取部３２により第２プラテンガラス４２上の見開かれた本６１の画像６２を読取らせて、この見開かれた本６１の画像６２を示す画像データを画像メモリー２６に記憶させる（Ｓ１０４）。この後、Ｓ１０５以降の処理に移る。

【0077】

画像メモリー２６には、図６（Ａ）に示すような読取部３２により読取られた読取領域Ｒ０の画像を示す画像データが記憶される。この画像データは、読取部３２により読取られた読取領域Ｒ０の画像の各画素の値を示すものであり、この読取領域Ｒ０の画像には見開かれた本６１の画像６２が含まれる。その画像データには見開かれた本６１の画像６２の各画素の値が含まれる。

【0078】

制御部２９は、上記のように画像メモリー２６内の読取領域Ｒ０の画像を示す画像データを参照して、読取領域Ｒ０の画像における本６１の画像６２の左側のエッジＥＬ及び右側のエッジＥＲを抽出する（Ｓ１０５）。

【0079】

制御部２９は、上記のように本６１の画像６２の左側のエッジＥＬ及び右側のエッジＥＲの間の中心線ＣＬを算出し、この中心線ＣＬで読取領域Ｒ０の画像を左側画像ＧＬと右側画像ＧＲに２分割する（Ｓ１０６）。

【0080】

制御部２９は、上記のように左側画像ＧＬから本６１の左頁の画像６３の輪郭となる上側のエッジＥＵ、下側のエッジＥＤ、左側のエッジＥＬ、及び中心線ＣＬを取得し、右側画像ＧＲから本６１の右頁の画像６４の輪郭となる上側のエッジＥＵ、下側のエッジＥＤ、右側のエッジＥＲ、及び中心線ＣＬを取得する（Ｓ１０７）。

【0081】

制御部２９は、上記のように直交座標系における左頁の画像６３の傾きθ及び右頁の画像６４の傾きθを算出して、これらの傾きθを補正する（Ｓ１０８）。

【0082】

制御部２９は、上記のように左頁の画像６３における上記テキスト領域、画像領域、表領域、図形領域を判定することにより、左頁の画像６３に含まれるコンテンツ領域を判定する（Ｓ１０９）。また、制御部２９は、上記のように右頁の画像６４における上記テキスト領域、画像領域、表領域、図形領域を判定することにより、右頁の画像６４に含まれるコンテンツ領域を判定する（Ｓ１０９）。

【0083】

制御部２９は、図８（Ａ）及び図９（Ａ）に示すように、左側縁領域ＱＬを設定して（Ｓ１１０）、左側縁領域ＱＬに包含されるコンテンツ領域の有無を判定し（Ｓ１１１）、図８（Ａ）に示すようにコンテンツ領域が無ければ（Ｓ１１１「無」）、左頁の画像６３の縁に飾り模様が無いものとし、図８（Ｂ）に示すように左頁の画像６３の左側のエッジＥＬより右方向に進んで最初のコンテンツ領域ＴＺまでの矩形状の領域を外側の余白領域ＳＬとして設定する（Ｓ１１２）。同様に、制御部２９は、右側縁領域ＱＲを設定して（Ｓ１１０）、右側縁領域ＱＲに包含されるコンテンツ領域の有無を判定し（Ｓ１１１）、図８（Ａ）に示すようにコンテンツ領域が無ければ（Ｓ１１１「無」）、右頁の画像６４の縁に飾り模様が無いものとし、図８（Ｂ）に示すように右頁の画像６４の右側のエッジＥＲより左方向に進んで最初のコンテンツ領域ＴＺまでの矩形状の領域を外側の余白領域ＳＲとして設定する（Ｓ１１２）。

【0084】

また、制御部２９は、図９（Ａ）に示すように左側縁領域ＱＬに包含されるコンテンツ領域が有れば（Ｓ１１１「有」）、左側縁領域ＱＬの面積に対するコンテンツ領域の面積の比率を算出し（Ｓ１１３）、その算出された比率が１／３以下であるか否かを判定する（Ｓ１１４）。同様に、制御部２９は、右側縁領域ＱＲに包含されるコンテンツ領域が有れば（Ｓ１１１「有」）、右側縁領域ＱＲに対するコンテンツ領域の面積の比率を算出し（Ｓ１１３）、その算出された比率が１／３以下であるか否かを判定する（Ｓ１１４）。

【0085】

例えば、制御部２９は、算出された比率が１／３以下であれば（Ｓ１１４「Ｙｅｓ」）、上記コンテンツ領域が左頁の画像６３の周縁の飾り模様Ｊであるとみなし、図９（Ｂ）に示すように左頁の画像６３の左側のエッジＥＬより右方向に進んでコンテンツ領域ＴＺまでの矩形状の領域を外側の余白領域ＳＬとして設定する（Ｓ１１２）。同様に、制御部２９は、上記コンテンツ領域が右頁の画像６４の周縁の飾り模様Ｊであるとみなし、図９（Ｂ）に示すように右頁の画像６４の右側のエッジＥＲより左方向に進んでコンテンツ領域ＴＺまでの矩形状の領域を外側の余白領域ＳＲとして設定する（Ｓ１１２）。

【0086】

一方、制御部２９は、図８（Ｂ）及び図９（Ｂ）に示すように、左頁の画像６３の中心線ＣＬに対して左側に隣り合うコンテンツ領域ＴＺを判定し、この判定されたコンテンツ領域ＴＺよりも右側を内側の余白領域ＵＬとして設定する（Ｓ１１５）。同様に、制御部２９は、右頁の画像６４の中心線ＣＬに対して右側に隣り合うコンテンツ領域ＴＺを判定し、この判定されたコンテンツ領域ＴＺよりも左側を内側の余白領域ＵＲとして設定する（Ｓ１１５）。

【0087】

そして、制御部２９は、図１０（Ａ）及び図１０（Ｂ）に示すように、左頁の画像６３の内側の余白領域ＵＬの画像を削除し、この内側の余白領域ＵＬの画像の代わりに、外側の余白領域ＳＬの画像を配置して、左頁の画像６３を補正し、また右頁の画像６４の内側の余白領域ＵＲの画像を削除し、この内側の余白領域ＵＲの画像の代わりに、外側の余白領域ＳＲの画像を配置して、右頁の画像６４を補正する（Ｓ１１６）。

【0088】

制御部２９は、補正された左頁の画像６３及び右頁の画像６４を示すそれぞれの画像データを画像形成部２１に入力させ、画像形成部２１により左頁の画像６３及び右頁の画像６４をそれぞれの記録紙に形成させる（Ｓ１１７）。

【0089】

この結果、図１０（Ａ）又は図１０（Ｂ）に示すように補正された見栄えの良い左右頁の画像６３，６４がそれぞれの記録紙に形成される。

【0090】

また、制御部２９は、算出された比率が１／３を超えれば（Ｓ１１４「Ｎｏ」）、左側縁領域に包含されるコンテンツ領域の面積が広く、このコンテンツ領域が飾り模様ではない可能性があるので、Ｓ１１２、Ｓ１１５、Ｓ１１６、Ｓ１１７を行わず、画像メモリー２６に記憶されている画像データによって示される見開かれた本６１の画像６２を画像形成部２１により記録紙に形成させる（Ｓ１０２）。

【0091】

このように本実施形態では、本６１の画像６２から左頁の画像６３及び右頁の画像６４を抽出して、左頁の画像６３の傾き及び右頁の画像６４の傾きを補正し、左頁の画像６３をコンテンツ領域ＴＺ、該コンテンツ領域ＴＺの左側に隣接する外側の余白領域ＳＬ、及び該コンテンツ領域ＴＺの右側に隣接する内側の余白領域ＵＬに区別すると共に、右頁の画像６４をコンテンツ領域ＴＺ、該コンテンツ領域ＴＺの右側に隣接する外側の余白領域ＳＲ、及び該コンテンツ領域ＴＺの左側に隣接する内側の余白領域ＵＲとに区別し、左頁の画像６３については、内側の余白領域ＵＬを削除して、外側の余白領域ＳＬをコンテンツ領域ＴＺの右側に配置して、該左頁の画像６３を補正し、また右頁の画像６４については、内側の余白領域ＵＲを削除して、外側の余白領域ＳＲをコンテンツ領域ＴＺの左側に配置して、該右頁の画像６４を補正している。これにより、補正された左頁の画像６３及び右頁の画像６４の両側には、同一幅の余白領域又は同一幅でかつ同一の飾り模様Ｊを含む余白領域が配置され、補正された左頁の画像６３及び右頁の画像６４の中央にはそれぞれのコンテンツ領域ＴＺが配置され、補正された左頁の画像６３及び右頁の画像６４の見栄えが良くなる。

【0092】

尚、上記実施形態では、左頁の画像６３における飾り模様Ｊを含む外側の余白領域ＳＬを、該左頁の画像６３におけるコンテンツ領域ＴＺの右側に配置し、また右頁の画像６４における飾り模様Ｊを含む余白領域ＳＬを、該右頁の画像６４におけるコンテンツ領域ＴＺの左側に配置しているが、この代わりに、図１３に示すように左頁の画像６３における飾り模様Ｊを含む余白領域ＳＬを、右頁の画像６４におけるコンテンツ領域ＴＺの左側に配置し、また右頁の画像６４における飾り模様Ｊを含む余白領域ＳＲを、左頁の画像６３におけるコンテンツ領域ＴＺの右側に配置してもよい。

【0093】

従って、本実施形態によれば、本の画像における各頁の画像別に、テキストなどが記載されたコンテンツ領域及び余白領域を抽出し、この余白領域を用いて、頁の画像を適宜補正し、頁の画像の見栄えをより好ましくすることができる。

【0094】

また、本発明は上記実施の形態の構成に限られず種々の変形が可能である。図１乃至図１３を用いて説明した上記実施形態の構成及び処理は、本発明の一例に過ぎず、本発明を当該構成に限定する趣旨ではない。

【符号の説明】

【0095】

１０ 画像形成装置
２０ 画像読取装置
２１ 画像形成部
２３ 操作部
２４ 表示部
２５ タッチパネル
２６ 画像メモリー
２７ 記憶部
２８ 制御ユニット
２９ 制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】