特許 7415634 情報処理装置及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-01-09

(45)【発行日】2024-01-17

(54)【発明の名称】情報処理装置及びプログラム

(51)【国際特許分類】

   G06F 3/04842 20220101AFI20240110BHJP

   H04N 1/00 20060101ALI20240110BHJP

   H04N 1/387 20060101ALI20240110BHJP

【ＦＩ】

G06F3/04842

H04N1/00 350

H04N1/387 200

【請求項の数】 12

(21)【出願番号】P 2020020638

(22)【出願日】2020-02-10

(65)【公開番号】P2021128356

(43)【公開日】2021-09-02

【審査請求日】2023-01-20

(73)【特許権者】

【識別番号】000005496

【氏名又は名称】富士フイルムビジネスイノベーション株式会社

(74)【代理人】

【識別番号】110001210

【氏名又は名称】弁理士法人ＹＫＩ国際特許事務所

(72)【発明者】

【氏名】高木 有人

【審査官】塩屋 雅弘

(56)【参考文献】

【文献】特開２０２０－１８２０２０（ＪＰ，Ａ）

【文献】特開２０２０－１８２０２１（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０４８４２

Ｈ０４Ｎ １／００

Ｈ０４Ｎ １／３８７

(57)【特許請求の範囲】

【請求項1】

プロセッサを備え、
プロセッサは、
原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、
前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、
前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出し、
前記表示制御は、前記複数のパターンを同時表示する画像を前記画面に表示するための制御であり、
前記プロセッサは、前記入力画像から抽出された前記原稿領域の前記パターンの数が所定の閾値より大きい場合に、前記複数のパターンを同時表示する画像を前記画面に表示するための制御、とは別の表示制御を実行する、
ことを特徴とする情報処理装置。

【請求項2】

前記画像は、前記複数のパターンの各々に対応付けて、当該パターンを選択するためのＵＩ部品を更に表示したものであり、
前記選択を受け付ける処理は、前記画面に表示された前記画像において前記ユーザが選択した前記ＵＩ部品に対応するパターンを前記正しいパターンとする、
ことを特徴とする請求項１に記載の情報処理装置。

【請求項3】

プロセッサを備え、
プロセッサは、
原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、
前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、
前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出し、
前記表示制御は、前記複数のパターンのうちの第１のパターンを表示した画像を前記画面上に表示するための制御であり、
前記プロセッサは、更に、
前記画像に表示されている前記第１のパターンに含まれる原稿領域のうち１以上の正しい原稿領域の選択を受け付け、
前記入力画像のうち、選択された前記１以上の正しい原稿領域を除いた部分に含まれる原稿領域の指定を、前記第１のパターン内から選ぶ方法とは異なる方法で受け付ける第２受付処理を実行し、
前記入力画像の中から、選択された前記１以上の正しい原稿領域の各々の画像と、前記異なる方法で指定された各原稿領域の画像と、を抽出する、
ことを特徴とする情報処理装置。

【請求項4】

前記第２受付処理は、前記複数のパターンのうちの、選択された前記１以上の正しい原稿領域を含むパターン、の中から正しいパターンの選択を受け付ける処理である、請求項３に記載の情報処理装置。

【請求項5】

前記第２受付処理は、選択された前記１以上の正しい原稿領域を含むパターンの数が所定の閾値以下である場合に、それら前記１以上の正しい原稿領域を含むパターンを同時表示する画像であって、同時表示するパターンの各々に対応付けて、当該パターンを選択するためのＵＩ部品を表示した画像、を前記画面に表示し、前記画面に表示された当該画像において前記ユーザが選択した前記ＵＩ部品に対応するパターンを前記正しいパターンとする、
請求項４に記載の情報処理装置。

【請求項6】

前記第２受付処理は、選択された前記１以上の正しい原稿領域を除いた部分に含まれる原稿領域を特定する頂点又は辺の指定を受け付ける、請求項３に記載の情報処理装置。

【請求項7】

プロセッサを備え、
プロセッサは、
原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、
前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、
前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出し、
前記表示制御は、前記複数のパターンのうちの第１のパターンを表示した画像を前記画面上に表示するための制御であり、
前記プロセッサは、更に、
前記画像に表示されている前記第１のパターンに含まれる原稿領域のうち１以上の誤っている原稿領域の選択を受け付け、
前記入力画像のうち、選択された前記１以上の誤っている原稿領域に該当する部分に含まれる原稿領域の指定を、前記第１のパターン内から選ぶ方法とは異なる方法で受け付ける第２受付処理を実行し、
前記入力画像の中から、前記第１のパターンのうち前記１以上の誤っている原稿領域を除いた残りの各原稿領域の画像と、前記異なる方法で指定された各原稿領域の画像と、を抽出する、
ことを特徴とする情報処理装置。

【請求項8】

前記第２受付処理は、前記複数のパターンのうちの、選択された前記１以上の誤っている原稿領域を除いた残りの各原稿領域を含むパターン、の中から正しいパターンの選択を受け付ける処理である、請求項７に記載の情報処理装置。

【請求項9】

前記プロセッサは、
前記画面に表示された前記入力画像に含まれる少なくとも１つの原稿領域を特定する頂点又は辺の指定を受け付け、
前記入力画像の中から、指定された頂点又は辺により特定される前記少なくとも１つの原稿領域の画像を抽出する、
ことを特徴とする請求項１に記載の情報処理装置。

【請求項10】

コンピュータを、
原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、
前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、
前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出する、
よう動作させるためのプログラムであって、
前記表示制御は、前記複数のパターンを同時表示する画像を前記画面に表示するための制御であり、
前記プログラムは、前記コンピュータを、
前記入力画像から抽出された前記原稿領域の前記パターンの数が所定の閾値より大きい場合に、前記複数のパターンを同時表示する画像を前記画面に表示するための制御、とは別の表示制御を実行する、
よう動作させるためのものであることを特徴とするプログラム。

【請求項11】

コンピュータを、
原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、
前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、
前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出する、
よう動作させるためのプログラムであって、
前記表示制御は、前記複数のパターンのうちの第１のパターンを表示した画像を前記画面上に表示するための制御であり、
前記プログラムは、前記コンピュータを、更に、
前記画像に表示されている前記第１のパターンに含まれる原稿領域のうち１以上の正しい原稿領域の選択を受け付け、
前記入力画像のうち、選択された前記１以上の正しい原稿領域を除いた部分に含まれる原稿領域の指定を、前記第１のパターン内から選ぶ方法とは異なる方法で受け付ける第２受付処理を実行し、
前記入力画像の中から、選択された前記１以上の正しい原稿領域の各々の画像と、前記異なる方法で指定された各原稿領域の画像と、を抽出する、
よう動作させるためのものであることを特徴とするプログラム。

【請求項12】

コンピュータを、
原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、
前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、
前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出する、
よう動作させるためのプログラムであって、
前記表示制御は、前記複数のパターンのうちの第１のパターンを表示した画像を前記画面上に表示するための制御であり、
前記プログラムは、前記コンピュータを、更に、
前記画像に表示されている前記第１のパターンに含まれる原稿領域のうち１以上の誤っている原稿領域の選択を受け付け、
前記入力画像のうち、選択された前記１以上の誤っている原稿領域に該当する部分に含まれる原稿領域の指定を、前記第１のパターン内から選ぶ方法とは異なる方法で受け付ける第２受付処理を実行し、
前記入力画像の中から、前記第１のパターンのうち前記１以上の誤っている原稿領域を除いた残りの各原稿領域の画像と、前記異なる方法で指定された各原稿領域の画像と、を抽出する、
よう動作させるためのものであることを特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置及びプログラムに関する。

【背景技術】

【0002】

スキャナ装置や複合機（すなわちスキャナ、プリンタ、コピー機等の機能を併せ持つ装置）の中には、プラテンとも呼ばれる原稿台の上に置かれた複数の原稿を読み取り、読み取った画像から個々の原稿の画像を切り出してデータ化する機能を持つものがある。このような機能は、マルチクロップ機能と呼ばれる。

【0003】

従来装置は、原稿台の上に置いた複数の原稿を黒い背景紙で覆う等の方法により原稿の周縁部と背景とのコントラストを高めることで、個々の原稿の画像の切り出しの精度を高めている。

【0004】

しかし、原稿群の上を黒い背景紙で覆うという操作は忘れられがちである。複合機等は、原稿台に対して開閉可能な原稿カバー部（これは自動原稿送り装置を内蔵する場合が多い）を備えており、この原稿カバー部の原稿台に面する面は一般に白色である。原稿台上の複数の原稿を黒い背景紙で覆うのを忘れ、通常通り原稿カバー部を閉めて読み取りを行うと、読取り結果の画像は、白い背景上に白い原稿が複数配置された状態を示すものとなる。この読取り結果の画像には原稿のエッジが明確に現れない場合が多い。原稿のエッジが明確でない場合、個々の原稿の画像の切り出しの精度が劣化する。例えば、別々の複数の原稿を、１つの大きな原稿として切り出してしまう等の誤りが生じる。

【0005】

また、黒い背景紙等を用いて切り出しの精度を高めた場合でも、切り出しに誤りが生じる場合がある。例えば、複数の原稿が、隙間なく又は互いに少し重なった状態で、整列して原稿台の上に置かれた場合、マルチクロップ機能が、それら複数の原稿を１つの原稿として切り出してしまうことがある。

【0006】

マルチクロップ機能を持つ従来装置の中には、切り出し結果をユーザに提示する機能を持つものがある。

【0007】

例えば特許文献１に開示された装置は、原稿台全面を低解像度でプレスキャンして得た画像から個々の原稿の領域を検出し、検出した原稿の領域を表示した後、本スキャンを実行する（同文献の段落００２５、００６１、００７９、図２を参照）。

【0008】

また、マルチクロップに関する従来技術を示す文献として、特許文献２及び３がある。

【先行技術文献】

【特許文献】

【0009】

【文献】特許第４５７４５０３号明細書

【文献】特開２０１８－２０１１７４号公報

【文献】特開２０１９－０９２０６５号公報

【発明の概要】

【発明が解決しようとする課題】

【0010】

原稿を撮像した入力画像から抽出した、原稿領域を単に表示するだけでは、ユーザは、表示された原稿領域が正しいものであるか否かを確認できるだけである。表示された原稿領域が誤っている場合、ユーザは、例えば、原稿台上の原稿を置き直し、再度装置に原稿の撮像を行わせる等の作業を行うことにより、正しい原稿領域が抽出されるようにするが、その操作がユーザにとっては煩雑であった。

【0011】

本発明は、原稿を撮像した入力画像から抽出した原稿領域を単に表示する方式と比べて、正しい原稿領域が抽出されるためのユーザの操作負担を軽減することを目的とする。

【課題を解決するための手段】

【0012】

請求項１に係る発明は、プロセッサを備え、プロセッサは、原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出し、前記表示制御は、前記複数のパターンを同時表示する画像を前記画面に表示するための制御であり、前記プロセッサは、前記入力画像から抽出された前記原稿領域の前記パターンの数が所定の閾値より大きい場合に、前記複数のパターンを同時表示する画像を前記画面に表示するための制御、とは別の表示制御を実行する、ことを特徴とする情報処理装置である。

【0014】

請求項２に係る発明は、前記画像は、前記複数のパターンの各々に対応付けて、当該パターンを選択するためのＵＩ部品を更に表示したものであり、前記選択を受け付ける処理は、前記画面に表示された前記画像において前記ユーザが選択した前記ＵＩ部品に対応するパターンを前記正しいパターンとする、ことを特徴とする請求項１に記載の情報処理装置である。

【0016】

請求項３に係る発明は、プロセッサを備え、プロセッサは、原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出し、前記表示制御は、前記複数のパターンのうちの第１のパターンを表示した画像を前記画面上に表示するための制御であり、前記プロセッサは、更に、前記画像に表示されている前記第１のパターンに含まれる原稿領域のうち１以上の正しい原稿領域の選択を受け付け、前記入力画像のうち、選択された前記１以上の正しい原稿領域を除いた部分に含まれる原稿領域の指定を、前記第１のパターン内から選ぶ方法とは異なる方法で受け付ける第２受付処理を実行し、前記入力画像の中から、選択された前記１以上の正しい原稿領域の各々の画像と、前記異なる方法で指定された各原稿領域の画像と、を抽出する、ことを特徴とする情報処理装置である。

【0017】

請求項４に係る発明は、前記第２受付処理は、前記複数のパターンのうちの、選択された前記１以上の正しい原稿領域を含むパターン、の中から正しいパターンの選択を受け付ける処理である、請求項３に記載の情報処理装置である。

【0018】

請求項５に係る発明は、前記第２受付処理は、選択された前記１以上の正しい原稿領域を含むパターンの数が所定の閾値以下である場合に、それら前記１以上の正しい原稿領域を含むパターンを同時表示する画像であって、同時表示するパターンの各々に対応付けて、当該パターンを選択するためのＵＩ部品を表示した画像、を前記画面に表示し、前記画面に表示された当該画像において前記ユーザが選択した前記ＵＩ部品に対応するパターンを前記正しいパターンとする、請求項４に記載の情報処理装置である。

【0019】

請求項６に係る発明は、前記第２受付処理は、選択された前記１以上の正しい原稿領域を除いた部分に含まれる原稿領域を特定する頂点又は辺の指定を受け付ける、請求項３に記載の情報処理装置である。

【0020】

請求項７に係る発明は、プロセッサを備え、プロセッサは、原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出し、前記表示制御は、前記複数のパターンのうちの第１のパターンを表示した画像を前記画面上に表示するための制御であり、前記プロセッサは、更に、前記画像に表示されている前記第１のパターンに含まれる原稿領域のうち１以上の誤っている原稿領域の選択を受け付け、前記入力画像のうち、選択された前記１以上の誤っている原稿領域に該当する部分に含まれる原稿領域の指定を、前記第１のパターン内から選ぶ方法とは異なる方法で受け付ける第２受付処理を実行し、前記入力画像の中から、前記第１のパターンのうち前記１以上の誤っている原稿領域を除いた残りの各原稿領域の画像と、前記異なる方法で指定された各原稿領域の画像と、を抽出する、ことを特徴とする情報処理装置である。

【0021】

請求項８に係る発明は、前記第２受付処理は、前記複数のパターンのうちの、選択された前記１以上の誤っている原稿領域を除いた残りの各原稿領域を含むパターン、の中から正しいパターンの選択を受け付ける処理である、請求項７に記載の情報処理装置である。

【0022】

請求項９に係る発明は、前記プロセッサは、前記画面に表示された前記入力画像に含まれる少なくとも１つの原稿領域を特定する頂点又は辺の指定を受け付け、前記入力画像の中から、指定された頂点又は辺により特定される前記少なくとも１つの原稿領域の画像を抽出する、ことを特徴とする請求項１に記載の情報処理装置である。

【0023】

請求項１０に係る発明は、コンピュータを、原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出する、よう動作させるためのプログラムであって、前記表示制御は、前記複数のパターンを同時表示する画像を前記画面に表示するための制御であり、前記プログラムは、前記コンピュータを、前記入力画像から抽出された前記原稿領域の前記パターンの数が所定の閾値より大きい場合に、前記複数のパターンを同時表示する画像を前記画面に表示するための制御、とは別の表示制御を実行する、よう動作させるためのものであることを特徴とするプログラムである。
である。
請求項１１に係る発明は、コンピュータを、原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出する、よう動作させるためのプログラムであって、前記表示制御は、前記複数のパターンのうちの第１のパターンを表示した画像を前記画面上に表示するための制御であり、前記プログラムは、前記コンピュータを、更に、前記画像に表示されている前記第１のパターンに含まれる原稿領域のうち１以上の正しい原稿領域の選択を受け付け、前記入力画像のうち、選択された前記１以上の正しい原稿領域を除いた部分に含まれる原稿領域の指定を、前記第１のパターン内から選ぶ方法とは異なる方法で受け付ける第２受付処理を実行し、前記入力画像の中から、選択された前記１以上の正しい原稿領域の各々の画像と、前記異なる方法で指定された各原稿領域の画像と、を抽出する、よう動作させるためのものであることを特徴とするプログラムである。
請求項１２に係る発明は、コンピュータを、原稿を撮像した入力画像から抽出された原稿領域のパターンが複数ある場合に、それら複数のパターンを選択肢として画面に表示するための表示制御を実行し、前記表示制御による前記画面の表示に応じて、前記複数のパターンのうち正しいパターンの選択を受け付け、前記入力画像の中から、ユーザが選択した前記パターンに含まれる原稿領域の画像を抽出する、よう動作させるためのプログラムであって、前記表示制御は、前記複数のパターンのうちの第１のパターンを表示した画像を前記画面上に表示するための制御であり、前記プログラムは、前記コンピュータを、更に、前記画像に表示されている前記第１のパターンに含まれる原稿領域のうち１以上の誤っている原稿領域の選択を受け付け、前記入力画像のうち、選択された前記１以上の誤っている原稿領域に該当する部分に含まれる原稿領域の指定を、前記第１のパターン内から選ぶ方法とは異なる方法で受け付ける第２受付処理を実行し、前記入力画像の中から、前記第１のパターンのうち前記１以上の誤っている原稿領域を除いた残りの各原稿領域の画像と、前記異なる方法で指定された各原稿領域の画像と、を抽出する、よう動作させるためのものであることを特徴とするプログラムである。

【発明の効果】

【0024】

請求項１又は１０に係る発明によれば、原稿を撮像した入力画像から抽出した原稿領域を単に表示する方式と比べて、正しい原稿領域が抽出されるためのユーザの操作負担を軽減することができる。

【0025】

更に、複数のパターンを切替表示する方式よりも、正しいパターンの選択のための画面切替の回数を減らすことができると共に、複数のパターンを同時表示するとパターン同士の視覚的区別が困難な場合には、同時表示以外の表示を行うことができる。

【0026】

請求項２に係る発明によれば、正しい原稿領域を一つ一つ選ぶ方式よりも、より少ない操作で、正しい原稿領域からなる正しいパターンを選択することができる。

【0028】

請求項３又は１１に係る発明によれば、第１のパターンを表示した画像内で、そのパターン内の原稿領域のうち正しい原稿領域の選択を受けつつ、第１のパターン内の誤っている原稿領域は別の方法で指定を受け付けることができる。

【0029】

請求項４に係る発明によれば、複数のパターンのすべてから正しいパターンを選択するよりも、正しいパターンを選択するための操作の回数を減らすことができる。

【0030】

請求項５に係る発明によれば、複数のパターンを切替表示する方式よりも、正しいパターンの選択のための画面切替の回数を減らすことができる。正しい原稿領域を一つ一つ選ぶ方式よりも、より少ない操作で、正しい原稿領域からなる正しいパターンを選択することができる。

【0031】

請求項６又は９に係る発明によれば、選択された正しい原稿領域以外の原稿領域の特定をユーザから受け付けることができる。

【0032】

請求項７又は１２に係る発明によれば、第１のパターンから選択された誤った原稿領域以外の原稿領域を正しいものとし、他の原稿領域を別の方法で指定を受け付けることができる。

【0033】

請求項８に係る発明によれば、複数のパターンのすべてから正しいパターンを選択するよりも、正しいパターンを選択するための操作の回数を減らすことができる。

【図面の簡単な説明】

【0034】

【図1】情報処理装置が備えるコンピュータのハードウエア構成を例示する図である。

【図2】情報処理装置のプロセッサが実行する処理手順の一部を例示する図である。

【図3】情報処理装置のプロセッサが実行する処理手順の一部を例示する図である。

【図4】情報処理装置のプロセッサが実行する処理手順の一部を例示する図である。

【図5】情報処理装置のプロセッサが実行する処理手順の一部を例示する図である。

【図6】パターンの抽出結果を示すデータの例を示す図である。

【図7】プラテン上の原稿群の配置の一例を示す図である。

【図8】確認型のＵＩ画面を例示する図である。

【図9】プラテン上の原稿群の配置の別の例を示す図である。

【図10】同時表示型のＵＩ画面を例示する図である。

【図11】同時表示型のＵＩ画面で１つのパターンが選択された状態を示す図である。

【図12】プラテン上の原稿群の配置の別の例を示す図である。

【図13】切替表示型のＵＩ画面を例示する図である。

【図14】切替表示型のＵＩ画面において１つの原稿領域が選択された状態を示す図である。

【図15】切替表示型のＵＩ画面に、選択された１つの原稿領域を持つ別のパターンが表示された状態を示す図である。

【図16】切替表示型のＵＩ画面において２つの原稿領域が選択された状態を示す図である。

【図17】切替表示型のＵＩ画面に、選択された２つの原稿領域を持つ別のパターンが表示された状態を示す図である。

【図18】切替表示型のＵＩ画面において表示されたすべての原稿領域が選択された状態を示す図である。

【図19】プラテン上の原稿群の配置の別の例を示す図である。

【図20】図１９に示したプラテンをスキャンしたときに表示されるＵＩ画面を例示する図である。

【図21】全選択ボタンの押下に応じて、表示された全ての原稿領域が選択状態となったＵＩ画面を例示する図である。

【図22】全選択された原稿領域のうちの１つの選択が解除されたときのＵＩ画面を例示する図である。

【図23】図２２と共通する選択状態の原稿領域を持つ別のパターンを表示したＵＩ画面を例示する図である。

【図24】図２３のＵＩ画面の非選択状態の２つの原稿領域が選択された状態のＵＩ画面を例示する図である。

【図25】抽出された原稿領域の中に正しいものがない場合のＵＩ画面を例示する図である。

【図26】置換案内用のＵＩ画面を例示する図である。

【図27】矩形指定用のＵＩ画面を例示する図である。

【図28】矩形指定用のＵＩ画面上で３つの頂点が選択された状態を例示する図である。

【図29】矩形指定用のＵＩ画面上で１つの原稿領域が確定した状態を例示する図である。

【発明を実施するための形態】

【0035】

＜ハードウエア構成の例＞
この実施形態の情報処理装置のハードウエア構成を図１に示す。図１に示す例は、情報処理装置がいわゆる複合機である場合のものである。複合機は、プリンタ、スキャナ、コピー機、ファクシミリ装置等の機能を併せ持つ装置である。複合機は、ローカルエリアネットワーク等のネットワーク経由でパーソナルコンピュータ等のクライアントからリクエストを受け付けたり、インターネット上のサーバ等と通信したりする機能を持つ場合もある。

【0036】

この情報処理装置は、例えば、図２に示すように、ハードウエアとして、プロセッサ１０２、ランダムアクセスメモリ（ＲＡＭ）等のメモリ（主記憶装置）１０４、フラッシュメモリやＳＳＤ（ソリッドステートドライブ）、ＨＤＤ（ハードディスクドライブ）等の不揮発性記憶装置である補助記憶装置１０６を制御するコントローラ、各種の入出力装置１０８とのインタフェース、ローカルエリアネットワークなどのネットワークとの接続のための制御を行うネットワークインタフェース１１０等が、例えばバス１１２等のデータ伝送路を介して接続された回路構成を有する。入出力装置１０８の中には、例えば、タッチパネル等の表示装置兼入力装置やスピーカ等の音声出力装置、ユーザ認証用のカードリーダー等が含まれる。以上に説明した部分の回路構成は、汎用のコンピュータと同様のものでよい。

【0037】

また、情報処理装置は、バス１１２等を介してそのコンピュータ部分に接続されたスキャナ制御回路１１４、プリンタ制御回路１１６、ファクシミリ装置１１８等を備える。これらは、情報処理装置（この例では複合機）が備える各種の機能のためのものである。スキャナ制御回路１１４は、複合機が内蔵するスキャナや自動原稿送り装置を制御するための回路であり、プリンタ制御回路１１６は、複合機が内蔵するプリンタを制御するための回路である。また、ファクシミリ装置１１８は、複合機が持つファクシミリ送受信機能を担う装置である。

【0038】

情報処理装置のコンピュータ部分は、ＵＩ（ユーザインタフェース）のための処理、ネットワーク経由でのデータのやりとりの制御、スキャナ、プリンタ及びファクシミリ装置等の各種機能要素の制御のための情報処理を実行する。これら各種の情報処理の内容が記述されたプログラムが、ネットワーク等を経由してコンピュータにインストールされ、補助記憶装置１０６に保存される。補助記憶装置１０６に記憶されたプログラムが、プロセッサ１０２によりメモリ１０４を用いて実行されることにより、この実施形態の情報処理装置が実現される。

【0039】

ここでプロセッサ１０２とは広義的なプロセッサを指し、汎用的なプロセッサ（例えばＣＰＵ：Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、等）や、専用のプロセッサ（例えばＧＰＵ：Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、 ＡＳＩＣ：Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ、 ＦＰＧＡ：Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ、 プログラマブル論理デバイス、等）を含むものである。

【0040】

また、プロセッサ１０２の動作は、１つのプロセッサ１０２によってなすのみでなく、物理的に離れた位置に存在する複数のプロセッサ１０２が協働してなすものであってもよい。また、プロセッサ１０２の各動作は、以下の実施形態において説明する順序のみに限定されるものではなく、適宜に変更してもよい。

【0041】

本実施形態の処理は、情報処理装置が備える撮像機構（例えば、スキャナ制御回路１１４に接続されたスキャナ）により撮像された画像に対するものである。したがって、情報処理装置は、プリンタ及びこれを制御するプリンタ制御回路１１６やファクシミリ装置１１８等を含んでいなくてもよい。以下では、情報処理装置が複合機として実現されている場合を主たる例として説明するが、これはあくまで一例にすぎない。情報処理装置は、撮像機構を備えた装置であればよく、例えばスキャナ装置、キオスク端末、スマートフォン、タブレット端末、パーソナルコンピュータ等であってもよい。

【0042】

＜原稿画像の抽出処理の例＞
以下、図２～図５のフローチャートを参照して、スキャナでスキャン処理により得られたスキャン画像から原稿画像を抽出する処理の例を説明する。

【0043】

この処理は、ユーザが、情報処理装置に付属するスキャナのプラテン（すなわち原稿台）上に１以上の原稿を置き、情報処理装置に対して「マルチクロップ」処理の実行開始を指示すると開始される。なお、マルチクロップの対象となる原稿としては、例えば、名刺やレシート等がある（ただしこれらに限定されるものでない）。

【0044】

この処理では、図２に例示するように、プロセッサ１０２は、まずスキャナ制御回路１１４を介してスキャナにスキャンを実行させる（Ｓ１０）。これにより、プロセッサ１０２は、プラテン全面をスキャンした結果の画像（以下、スキャン画像と呼ぶ）を取得する。

【0045】

次にプロセッサ１０２は、スキャン画像から、その中に含まれる１以上の原稿領域を抽出する（Ｓ１２）。原稿領域とは、スキャン画像のうち、プラテン上に置かれた原稿の画像（すなわち、原稿画像）の領域である。例えば、原稿がレシートの場合、レシートの画像を示す領域が原稿領域である。スキャン画像は、背景の画像（例えばプラテンを覆うカバーの画像）内に１以上の原稿画像が配置された画像であり、Ｓ１２では、そのようなスキャン画像から原稿画像の領域、すなわち原稿領域を抽出するのである。一般に、原稿は矩形である場合が多いので、原稿領域のことを以下では「矩形」又は「矩形領域」とも呼ぶ。

【0046】

Ｓ１２における原稿領域の抽出は、従来公知の技術を用いて行われる。このような技術としては、例えば、スキャン画像からエッジ抽出処理により抽出したエッジに基づいて個々の原稿領域を求める方式等がある。

【0047】

Ｓ１２の原稿領域の抽出処理において、エッジ等から求められる原稿領域には、いくつかの可能性があることが少なくない。例えば、図９に示した例では、プラテン１０上に、幅が等しい２つの矩形の原稿１２が、両側辺が同一直線上に並ぶように、互いに近接して配置されている。この状態をスキャンして得られるスキャン画像に対して原稿領域の抽出処理を行った場合、２つの原稿１２に対応する２つの原稿領域からなるパターンだけでなく、それら２つの原稿１２を一続きの１つの原稿領域とみるパターンも認識されることがある。２つの原稿１２の境界がスキャン画像上にはっきり現れない場合、後者のパターンが認識される可能性が高い。そこで、原稿領域の抽出処理では、スキャン画像から認識した原稿領域のパターンに対して、そのパターンの確からしさを示すスコアを計算する。このスコアの計算処理には、従来のマルチクロップ処理で用いられている方法を利用すればよい。従来のマルチクロップ処理では、このスコアが最高値であるパターンを自動的に選び、そのパターンが示す各原稿領域の画像を抽出して出力していた。

【0048】

これに対して、本実施形態では、スコアが最高のパターンを自動的に選択するのではなく、ある程度スコアが高いパターンが複数ある場合に、それら複数のパターンをユーザに提示し、正しいパターンの選択をユーザに求める。

【0049】

図６に、Ｓ１２の処理の結果、プロセッサ１０２がメモリ１０４内に作成したパターンの抽出結果データを例示する。この例の抽出結果データには、パターンごとに、パターン番号、スコア、領域数、領域ＩＤ、領域形状の情報を含む。パターン番号はパターンの通し番号である。スコアは上述のものである。領域数は、そのパターンが含む原稿領域の数であり、例えば、後述するＳ１６の判定で参照される。領域ＩＤは、Ｓ１２で抽出された各原稿領域の識別情報である。領域形状は、対応する領域ＩＤが示す原稿領域の矩形形状を規定する情報である。図示例では、矩形形状の情報は、矩形形状の３つの頂点の座標の組である。図６に示す抽出結果データは、後述する図１０の例に示される抽出結果に対応している。例示したパターン番号１のパターンは、領域ＩＤが１と２である２つの原稿領域からなるパターンである。図６に示す例には含まれないが、同じ原稿領域が異なる複数のパターンに属することもある。

【0050】

プロセッサ１０２は、Ｓ１２で求められた１以上のパターンの中から、あらかじめ定められたスコア閾値以上のスコアを持つパターンを抽出する（Ｓ１４）。逆に言えば、スコアがスコア閾値以下のパターンは正解である可能性が著しく低いので、この段階で捨てる。

【0051】

次にプロセッサ１０２は、Ｓ１４で抽出されたパターンの数が、１個であるか、２以上Ｔ個以下（Ｔは２以上の整数）であるか、（Ｔ＋１）個以上であるか、を判定する（Ｓ１６）。

【0052】

Ｓ１６の判定結果が「１個」である場合の処理を、図７及び図８も参照しつつ説明する。図７は、情報処理装置が備えるスキャナ機構のプラテン１０上に２つの原稿１２が互いに十分離れて置かれた状態を示している。このように個々の原稿１２が十分離れて配置されている場合には、Ｓ１２の処理により、すべての原稿１２の原稿領域が的確に抽出され、スコアがスコア閾値以上である原稿領域のパターンは１つに絞られる。

【0053】

このようにＳ１６の判定結果が「１個」の場合、プロセッサ１０２は、図８に例示するＵＩ画面２００を、入出力装置１０８の一例である表示装置に表示させる（Ｓ１８）。図８に例示するＵＩ画面２００を、確認型ＵＩ画面と呼ぶ。このＵＩ画面２００には、スキャン画像２１０、切り出しボタン２２０、置き直しボタン２２２、矩形指定ボタン２２４、パターン数表示欄２３０が表示される。確認型ＵＩ画面は、求められたただ１つのパターンを表示し、そのパターンに従って原稿画像の抽出（図では「切り出し」と表現）を行うか否か、ユーザに確認を求めるために用いられる。

【0054】

スキャン画像２１０には、プラテン１０上に置かれた原稿１２の画像である原稿画像２１２が含まれる。また、スキャン画像２１０には、Ｓ１２で抽出された原稿領域２１４が表示される。図示例では、原稿領域２１４は、当該原稿領域の外周を取り囲む枠線（図示例では矩形の枠線）の形態で示される。ただしこれは一例に過ぎない。この代わりに、例えば、二次元的な原稿領域全体を特定色で塗りつぶした画像を原稿領域２１４として用いてもよい。

【0055】

パターン数表示欄２３０には、Ｓ１０で得たスキャン画像２１０中から抽出された原稿領域のパターンの数が表示される。図７及び図８の例では、ある程度確からしい（すなわちスコアがスコア閾値以上である）パターンが１個だけなので、パターン数表示欄２３０には「１」という値が表示される。

【0056】

切り出しボタン２２０は、スキャン画像２１０中から各原稿領域２１４の画像を切り出す、すなわち抽出する指示を受け付けるＧＵＩ（グラフィカルユーザインタフェース）部品である。例えば、情報処理装置が備える表示装置がタッチパネルとして構成されている場合、ユーザは、そのタッチパネル上に表示された切り出しボタン２２０に指で触れることで、切り出しボタン２２０を押下する。なお、図８の切り出しボタン２２０に重なるように示した矢印は、切り出しボタン２２０が押下対象として選ばれたことを示している。

【0057】

置き直しボタン２２２は、ユーザがプラテン１０上の原稿１２群を置き直してスキャンをし直す場合に押下される。

【0058】

矩形指定ボタン２２４は、Ｓ１２で抽出された原稿領域のパターンを破棄し、ユーザが原稿領域（この例では「矩形」）を手作業で指定する場合に押下される。

【0059】

プロセッサ１０２は、Ｓ１８でＵＩ画面２００を表示した後、ユーザが切り出しボタン２２０、置き直しボタン２２２、矩形指定ボタン２２４のいずれを押下したか判定する（Ｓ２０）。

【0060】

ユーザが切り出しボタン２２０を押下すると、プロセッサ１０２は、表示しているＵＩ画面２００に表示された唯一のパターンが示す各原稿領域２１４内の画像を抽出し、抽出した各画像をそれぞれ原稿画像として、ファイルに出力する（Ｓ２２）。

【0061】

また、ユーザが置き直しボタン２２２を押下すると、プロセッサ１０２は、置き直し案内画面を表示装置に表示させ（Ｓ２４）、置き直し案内画面の案内に従ってユーザが原稿を置き直してスキャン開始を指示するのを待つ（Ｓ２６）。置き直し案内画面の具体例は、後で図２６を参照して説明する。

【0062】

ユーザが矩形指定ボタン２２４を押下すると、プロセッサ１０２は、矩形指定画面を表示装置に表示させ、その画面上でユーザから原稿領域の矩形の指定を受け付ける（Ｓ２８）。矩形指定画面やＳ２８の処理の具体例については、後で図２７～図２９を参照して説明する。

【0063】

Ｓ１６の判定結果が「２～Ｔ個」である場合、プロセッサ１０２は、図３に示す手順に進む。この場合、プロセッサ１０２は、表示装置に同時表示型ＵＩ画面を表示させる（Ｓ３０）。同時表示型ＵＩ画面は、Ｓ１４で抽出したスコアがスコア閾値以上であるパターンを１つのＵＩ画面上に同時に表示する画面である。あまりに多数のパターンを１つの画面上で表示すると、人間から見て個々のパターンの区別がつきにくくなる。そこで、この例では、１画面上に表示しても人間が区別可能な上限のパターン数を閾値Ｔとし、Ｓ１４で抽出されたパターンの数が２個以上Ｔ個以下であれば、同時表示型ＵＩ画面を用いることとした。

【0064】

図９に示す例では、スキャナのプラテン１０上に、幅が等しい２つの矩形の原稿１２が、両側辺が同一直線上に並ぶように、互いに近接して配置されている。既に簡単に説明したように、この例では、原稿領域の抽出処理により、２つの原稿１２に対応する２つの原稿領域からなるパターンだけでなく、それら２つの原稿１２を一続きの１つの原稿領域とみるパターンも認識されることがある。

【0065】

図１０に、図９に例示した状態のプラテン１０をスキャンしたときに表示されるＵＩ画面２００（すなわち同時表示型ＵＩ画面）を例示する。この例では、ＵＩ画面２００内のスキャン画像２１０上に、２つの原稿画像２１２の各々とほぼ同じ２つの矩形の原稿領域２１４ａからなるパターン１と、それら２つの原稿画像２１２を合わせた１つの原稿領域２１４ｂからなるパターン２が同時に表示される。パターン１に属する各原稿領域と、パターン２に属する各原稿領域とは、互いに区別できるよう、異なる表示形態で表示される。図示例では、パターン１に属する各原稿領域２１４ａは第１色の実線の枠線で、パターン２に属する原稿領域２１４ｂは第１色とは異なる第２色の破線の枠線で、それぞれ示されている。

【0066】

この例では、スキャン画像から認識されるパターンの数は２つであり、このパターン数「２」がパターン数表示欄２３０に表示されている。

【0067】

また、このＵＩ画面２００上には、図８のＵＩ画面２００にもある切り出しボタン２２０、置き直しボタン２２２、矩形指定ボタン２２４に加え、「パターン１選択」ボタン２２６と「パターン２選択」ボタン２２８が表示される。「パターン１選択」ボタン２２６及び「パターン２選択」ボタン２２８は、それぞれ、ユーザからパターン１及びパターン２の選択を受け付けるためのＧＵＩ部品である。「パターン１選択」ボタン２２６は、スキャン画像２１０上のパターン１の各原稿領域２１４ａの表示形態に対応する表示形態で表示され、「パターン２選択」ボタン２２９は、パターン２の原稿領域２１４ｂの表示形態に対応する表示形態で表示される。例えば、「パターン１選択」ボタン２２６はパターン１の原稿領域２１４ａの表示色である第１色で、「パターン２選択」ボタン２２８はパターン２の原稿領域２１４ｂの表示色である第２色で表示される。

【0068】

このように、例示したＵＩ画面２００では、各パターンの原稿領域の表示形態と、それら各パターンを選択するためのボタンの表示形態とを、同じものまたは互いに対応するものとしている。これにより、パターンとボタンの対応付けが視覚的に分かりやすくなる。パターン及びこれに対応するボタンの表示形態には、上に例示した色の他に、原稿領域やボタンを囲む枠線の色や線種（例えば実線、破線等）、点滅表示の有無等もある。

【0069】

ＵＩ画面２００上に表示された複数（図１０の例では２つ）のパターンの中に正しいパターンがあれば、ユーザは、ＵＩ画面２００上の「正しいパターンを選択してください。」というメッセージに従い、正しいパターンに対応するボタン２２６又は２２８を押下する。

【0070】

プロセッサ１０２は、ＵＩ画面２００に対するユーザの操作を検知した場合、その操作がパターンを選択するボタン２２６又は２２８の押下であるか、それとも他のボタン２２０、２２２又は２２４の押下であるかを判定する（Ｓ３２）。なお、図１０のＵＩ画面２００を表示した時点では、同時表示された複数のパターンからユーザはどのパターンも選択していないので、切り出しボタン２２０が押下されても、それら複数のパターンのうちどのパターンに従って原稿画像を抽出してよいか分からない。したがって、Ｓ３０の表示の時点では、切り出しボタン２２０を無効化しておいてもよい。

【0071】

Ｓ３２でボタン２２６又は２２８が押下されたと判定した場合、プロセッサ１０２は、押下されたボタン２２６又は２２８に対応するパターンの各原稿領域を、スキャン画像２１０上で、「選択状態」（すなわち選択された状態）を示す表示態様で表示する（Ｓ３４）。Ｓ３４におけるＵＩ画面２００の表示例を、図１１に示す。この例はユーザが「パターン２選択」ボタン２２８を押下した場合の例である。この場合、スキャン画像２１０内のパターン２に属する２つの原稿領域２１４ｂの各々に対してチェックマーク２１５が表示される。これらチェックマーク２１５が、それら各原稿領域２１４ｂが選択状態であることを示す。Ｓ３４の段階では、ユーザがパターンを選択しているので、切り出しボタン２２０を有効化（すなわち押下可能な状態に遷移）させる。選択状態とは、当該原稿領域をユーザが正しい原稿領域と判断したことを示す状態ともいえる。

【0072】

この後、プロセッサ１０２は、ユーザからの操作、すなわち、切り出しボタン２２０、置き直しボタン２２２、矩形指定ボタン２２４、パターンの選択のためのボタン２２６又は２２８の押下を待ち受ける。

【0073】

ユーザの操作を検知した場合、プロセッサ１０２は、その操作が切り出しボタン２２０の押下であるか判定する（Ｓ３６）。この判定の結果がＹｅｓの場合、プロセッサ１０２は、スキャン画像２１０から、選択状態である各原稿領域内の画像を切り出して、ファイルに出力する（Ｓ３８）。

【0074】

Ｓ３６の判定結果がＮｏの場合、プロセッサ１０２は、ユーザの操作が置き直しボタン２２２の押下であるか否かを判定し（Ｓ４０）、この判定の結果がＹｅｓの場合、図２のＳ２４の処理に進む。Ｓ４０の判定結果がＮｏの場合、プロセッサ１０２は、ユーザの操作が矩形指定ボタン２２４の押下であるか否かを判定し（Ｓ４２）、この判定の結果がＹｅｓの場合、図２のＳ２８の処理に進む。Ｓ４２の判定結果がＮｏの場合、プロセッサ１０２は、Ｓ３２に進み、ユーザの操作が、パターンを選択するボタン２２６又は２２８の押下であるかどうかを判定し、以降、既述の処理を実行する。

【0075】

Ｓ１６の判定結果が「（Ｔ＋１）個以上」である場合、プロセッサ１０２は、図４に示す手順に進む。図４の手順では、切替表示型ＵＩ画面を用いてユーザからの指示を受け付ける。以下では、一例としてＴ＝２の場合の例を説明する。

【0076】

切替表示型ＵＩ画面は、当該画面内に１つのパターンのみを表示し、表示するパターンをユーザの操作で順次切り替えていくタイプの画面である。

【0077】

図１２に示す例では、プラテン１０上に３つの原稿１２が配置されており、そのうちの右側の２つの原稿１２は、両側辺が同一直線上に並ぶように、互いに近接して配置されている。この例では、図２のＳ１４で抽出されたパターンの数が５つであるとする。それら５つのパターンは、例えば、スコアが高い順に通し番号を付与してもよい。

【0078】

図１３に、図１２に例示した状態のプラテン１０をスキャンしたときに表示されるＵＩ画面２００（すなわち切替表示型ＵＩ画面）を例示する。この例では、ＵＩ画面２００内のスキャン画像２１０上に、それら５つのパターンのうちの１つ（例えばスコアが最高値のもの）が表示される。このパターンは、左側の原稿画像２１２ａを覆う原稿領域２１６ａと、右側の２つの原稿画像２１２ｂ及び２１２ｃを一続きに覆う原稿領域２１６ｂとからなる。

【0079】

Ｓ１４で抽出された５つのパターンは、切替表示型のＵＩ画面２００に切替表示するパターンの候補である。これら候補のことを「切替候補」とよぶ。パターン数表示欄２３０内の表示内容「１／５」のうちの「／」の右側の「５」は切替候補のパターンの総数を示し、左側の「１」はそれら５つの切替候補のうち現在表示中のパターンの番号（例えば上述の通し番号）を示す。

【0080】

切替表示型のＵＩ画面２００には、前候補ボタン２３２、次候補ボタン２３４、全選択ボタン２３６、及び全解除ボタン２３８が表示される。前候補ボタン２３２は、ＵＩ画面２００内に表示する切替候補のパターンを、現在表示中のパターンの１つ前の切替候補に切り替える指示を受け付けるボタンである。次候補ボタン２３４は、ＵＩ画面２００内に表示する切替候補のパターンを、現在表示中のパターンの１つ後の切替候補に切り替える指示を受け付けるボタンである。全選択ボタン２３６は、現在表示中のパターンに含まれる全ての原稿領域を選択状態にする指示を受け付けるボタンであり、全解除ボタン２３８は、現在表示中のパターンに含まれる全ての原稿領域の選択状態を解除する指示を受け付けるボタンである。

【0081】

このＵＩ画面２００では、ユーザが原稿領域２１６ａ又は２１６ｂをタッチすると、タッチされた原稿領域２１６ａ又は２１６ｂが選択状態に遷移する。すなわち、ユーザは、表示されている原稿領域（すなわち、矩形）の中から、原稿画像にぴったり適合する正しい原稿領域を見つけると、その原稿領域にタッチすることにより、その原稿領域を選択する。また、選択状態の原稿領域２１６ａ又は２１６ｂをタッチすると、タッチされた原稿領域２１６ａ又は２１６ｂの選択状態が解除される。これにより、それまで選択状態であった原稿領域２１６ａ又は２１６ｂは、非選択状態に遷移する。

【0082】

図４の手順の説明に戻る。Ｓ１６の判定結果が「（Ｔ＋１）個以上」である場合、プロセッサ１０２は、Ｓ１４で抽出したスコア閾値以上のスコアを持つパターンを切替候補に選定する（Ｓ５０）。次にプロセッサ１０２は、図１３に例示したＵＩ画面２００を、表示装置に表示させる（Ｓ５２）。この時点では、スキャン画像２１０上に示されたパターンに属する全ての原稿領域２１６ａ及び２１６ｂが非選択状態である。

【0083】

プロセッサ１０２は、そのＵＩ画面２００に対するユーザの操作を受け付けると、その操作が矩形、すなわち原稿領域２１６ａ又は２１６ｂの選択、又は解除を指示する操作であるか否かを判定する（Ｓ５４）。Ｓ５４の判定結果がＹｅｓの場合、プロセッサ１０２は、その選択又は解除の操作に応じ、原稿領域２１６ａ又は２１６ｂの状態を選択状態又は非選択状態に遷移させる。またこのときプロセッサ１０２は、前候補ボタン２３２又は次候補ボタン２３４の押下によりＵＩ画面２００に切り替え表示される切替候補のパターンを、現在選択状態にある原稿領域を含んだパターンのみに絞り込む（Ｓ５６）。

【0084】

例えば、図１３に例示したＵＩ画面２００では、原稿領域２１６ａ及び２１６ｂはいずれも非選択状態であるが、ユーザが原稿領域２１６ａをタッチすると、図１４に例示するように、原稿領域２１６ａが選択状態に遷移する。図１４に例示するＵＩ画面２００では、スキャン画像２１０内の原稿領域２１６ａ上に、選択状態であることを示すチェックマーク２１５が表示されている。図１３の状態では切替候補は５つあったが、原稿領域２１６ａの選択により、切替候補は、原稿領域２１６ａを含むパターンに限定される。図示例では、そのようなパターンは３つである。

【0085】

Ｓ５４の判定結果がＮｏの場合、プロセッサ１０２は、ユーザの操作が次候補ボタン２３４の押下であるか否かを判定する（Ｓ５８）。この判定の結果がＹｅｓの場合、プロセッサ１０２は、スキャン画像２１０上に表示するパターンを次の切替候補へと切り替え（Ｓ６０）、Ｓ５２に戻る。

【0086】

例えば、図１４に例示したＵＩ画面２００上で、ユーザが次候補ボタン２３４を押下すると、図１５に例示するように、スキャン画像２１０上に次の、すなわち２番目の、切替候補のパターンが表示される。このパターンは、選択状態にある原稿領域２１６ａの他に、原稿画像２１２ｂをぴったり覆う原稿領域２１６ｃと、原稿画像２１２ｃの下方の一部を覆う原稿領域２１６ｄからなる。原稿領域２１６ｄは、例えば、原稿画像２１２ｃ内の濃度の分布等により原稿領域２１６ｄの上端に対応する部分にエッジがあると誤検出された結果と考えられる。

【0087】

Ｓ５８の判定結果がＮｏの場合、プロセッサ１０２は、ユーザの操作が前候補ボタン２３２の押下であるか否かを判定する（Ｓ６２）。この判定の結果がＹｅｓの場合、プロセッサ１０２は、スキャン画像２１０上に表示するパターンを１つ前の切替候補へと切り替え（Ｓ６４）、Ｓ５２に戻る。

【0088】

Ｓ６２の判定結果がＮｏの場合、プロセッサ１０２は、ユーザの操作が全選択ボタン２３６の押下であるか否かを判定する（Ｓ６６）。この判定の結果がＹｅｓの場合、プロセッサ１０２は、表示中のパターンに属する全ての矩形、すなわち原稿領域を選択状態に遷移させ（Ｓ６８）、Ｓ５２に戻る。また、プロセッサ１０２は、切替候補を、それら全ての原稿領域を含んだパターンのみに限定する。

【0089】

Ｓ６６の判定結果がＮｏの場合、プロセッサ１０２は、ユーザの操作が全解除ボタン２３８の押下であるか否かを判定する（Ｓ７０）。この判定の結果がＹｅｓの場合、プロセッサ１０２は、表示中のパターンに属する全ての矩形、すなわち原稿領域を非選択状態に遷移させ（Ｓ７２）、Ｓ５２に戻る。また、プロセッサ１０２は、切替候補の集合を、Ｓ５０で選定した時点のものに戻す。

【0090】

Ｓ７０の判定結果がＮｏの場合、図５に示すように、プロセッサ１０２は、ユーザの操作が切り出しボタン２２０の押下か否かを判定する（Ｓ７４）。この判定の結果がＮｏの場合、プロセッサ１０２は、ユーザの操作が置き直しボタン２２２の押下であるか否かを判定し（Ｓ８４）、この判定の結果がＹｅｓの場合、図２のＳ２４の処理に進む。Ｓ８４の判定結果がＮｏの場合、プロセッサ１０２は、ユーザの操作が矩形指定ボタン２２４の押下であるか否かを判定し（Ｓ８６）、この判定の結果がＹｅｓの場合、図２のＳ２８の処理に進む。Ｓ８６の判定結果がＮｏの場合、プロセッサ１０２は、Ｓ５４に進み、ユーザの操作が、原稿領域の選択又は解除の操作であるかどうかを判定し、以降、既述の処理を実行する。

【0091】

Ｓ７４の判定結果がＹｅｓの場合、プロセッサ１０２は、表示中のパターンに含まれる原稿領域の中に非選択状態のものがあるか否かを判定する（Ｓ７６）。この判定の結果がＮｏの場合（すなわちそのパターン内の全ての原稿領域が選択状態である場合）、プロセッサ１０２は、スキャン画像２１０から、選択状態である各原稿領域内の画像を抽出し、ファイルに出力する（Ｓ８２）。

【0092】

Ｓ７６の判定結果がＹｅｓの場合、プロセッサ１０２は、非選択状態の原稿領域の画像については、切り出しすなわち抽出が行われない旨の警告と、切り出しを行ってよいかの問合せと、を含んだダイアログをＵＩ画面２００上に表示する（Ｓ７８）。プロセッサ１０２は、このダイアログに対してユーザが入力した回答が「ＯＫ」（すなわち、切り出しを行ってよい）であるか否かを判定する（Ｓ８０）。この判定の結果がＹｅｓの場合、スキャン画像２１０から、選択状態である各原稿領域内の画像を抽出し、ファイルに出力する（Ｓ８２）。Ｓ７８及びＳ８０は、情報処理装置が抽出した原稿領域の中に、ユーザにとって不要なものがある場合を考慮に入れた処理である。例えば、プラテン１０の汚れ等により本来原稿が存在しない部分に画像が生じ、その画像を含む部分が原稿領域と認識されてしまった場合には、その原稿領域の画像はそもそも抽出する必要がない。

【0093】

Ｓ８０の判定の結果がＮｏの場合、プロセッサ１０２は、Ｓ５２に戻ってＵＩ画面２００を表示し、ユーザからの更なる操作を受け付ける。

【0094】

図４及び図５の処理において、例えば図１５に示したＵＩ画面２００上でユーザが原稿領域２１６ｃを選択すると、図１６に示すように、原稿領域２１６ｃ上に、選択状態であることを示すチェックマーク２１５が表示される。また、この選択の結果、切替候補は、選択状態である原稿領域２１６ａ及び２１６ｃを含んだ２つのパターンに絞り込まれる。図１６のＵＩ画面２００上でユーザが次候補ボタン２３４を押下すると、図１７に例示する次の切替候補のパターンが表示される。このパターンは、上述の原稿領域２１６ａ及び２１６ｃに加え、原稿画像２１２ｃをぴったりと覆う原稿領域２１６ｅを含んでいる。

【0095】

図１７のＵＩ画面２００上でユーザが原稿領域２１６ｅを選択すると、図１８に示すように、原稿領域２１６ｅ上に、選択状態であることを示すチェックマーク２１５が表示される。このあと、ユーザが切り出しボタン２２０を押下すると、プロセッサ１０２は、Ｓ８２にて、選択状態の原稿領域２１６ａ、２１６ｃ、２１６ｅの画像を切り出し、切り出した各画像をそれぞれファイルに出力する。

【0096】

図１２～図１８に示した例では、表示されているパターンの中からユーザが正しい原稿領域を選択することにより切替候補のパターンを絞り込み、最終的に正しいパターンにたどり着いた。しかし、切替候補のパターンが少数であれば、前候補ボタン２３２や次候補ボタン２３４を押下して全てのパターンを順に調べ、正しいパターンを見つけ出すこととしてさほど手間は掛からない。

【0097】

また、図１６及び図１７に示した例では、切替候補のパターン数が２つという十分小さい数に絞り込まれた時点でも、切替表示型のＵＩ画面２００を表示したが、これは一例に過ぎない。別の例として、ユーザによる原稿領域群の選択の結果、絞り込まれた切替候補のパターン数がＴ個以下になった時点で、プロセッサ１０２は、表示するＵＩ画面２００を同時表示型（図１０参照）のものに切り替えてもよい。この時点で残った切替候補のパターン同士の間では、選択状態である原稿領域群は共通している。そこで、非選択状態の原稿領域についてのみ、図１０に例示した異なるパターン間で表示形態の区別を行うようにしてもよい。

【0098】

次に、全選択ボタン２３６の利用シーンの例を説明する。図１９に例示するように、プラテン１０上に多数の原稿１２が比較的密な状態で配置されている場合、Ｓ１４で抽出されるパターンの数がかなり大きい数となる場合がある。そのパターン数は仮に１５であり、図４のＳ５０の後に最初に表示されるＵＩ画面２００が図２０に示すものであったとする。このように原稿の数や切替候補の数が多い場合、次候補ボタン２３４等を用いて全ての切替候補を順に調べる方法でも、正しい原稿領域２１８ａ等を順に１つずつ選んで切替候補を絞り込んでいく方向でも、正しいパターンにたどり着くのに時間がかかる。

【0099】

図２０の例の場合、ユーザは、ＵＩ画面２００上に表示されたパターンの各原稿領域２１８ａ、２１８ｂ、・・・２１８ｈ、２１８ｉと各原稿画像２１２ａ、２１２ｂ、・・・２１２ｉ、２１８ｊとを目視で確認する。これにより、ユーザは、原稿領域２１８ｉは、２つの原稿画像２１２ｉ及び２１２ｊの両方を一続きで覆っているため誤っていることを知る。またユーザは、他の原稿領域２１８ａ、２１８ｂ、・・・、２１８ｈは、それぞれ１つの原稿画像２１２ａ、２１２ｂ、・・・、２１２ｈにぴったり適合しており、正しいものであることを知る。これらのことから、ユーザは、原稿画像２１２ａ、２１２ｂ、・・・、２１２ｈは正しいものとして採用し、原稿領域２１８ｉだけを修正すればよいと判断する。

【0100】

そこでユーザは、全選択ボタン２３６を押下することにより、表示中のパターン内の全ての原稿領域２１８ａ、２１８ｂ、・・・、２１８ｈ、２１８ｉをいったん選択してしまう。これにより、ＵＩ画面２００は図２１に示すものに変化する。このとき、切替候補の数は１個である。ユーザは、このＵＩ画面２００上で原稿領域２１８ｉにタッチすることで、原稿領域２１８ｉの選択状態を解除する。これにより、ＵＩ画面２００は図２２に示すものに変化する。原稿領域２１８ｉが非選択状態となったことにより、切替候補の数が２個に増えている。ユーザは、もう一つの切替候補のパターンを確認するために、次候補ボタン２３４を押下する。これにより、ＵＩ画面２００は図２３に示すものに変化する。図２３に示すＵＩ画面２００に示されるパターンには、原稿画像２１２ｉにぴったり適合する原稿領域２１８ｊと、原稿画像２１２ｊにぴったり適合する原稿領域２１８ｋが含まれる。ユーザが、それら２つの原稿領域２１８ｊ及び２１８ｋを選択すると、ＵＩ画面２００は図２４に示すものへと変化する。このＵＩ画面２００上でユーザが切り出しボタン２２０を押下すると、プロセッサ１０２は、選択状態の各原稿領域２１８ａ、２１８ｂ、・・・、２１８ｈ、２１９ｊ、２１８ｋ内の画像を切り出し、それぞれファイルに出力する。

【0101】

図１９～図２４を参照して説明した例は、誤っている原稿領域は１つだけであったが、選択状態にある原稿領域のうち誤っているものが複数ある場合は、それら誤っているものを全て選択してもよい。この場合、プロセッサ１０２は、スキャン画像２１０のうち、それら選択された複数の原稿領域からなる部分を未確定部分とする。あるいは、プロセッサ１０２は、スキャン画像から「誤っている原稿領域の選択の後で選択状態（すなわち正しいもの）のまま残った原稿領域群」を除いた残りの部分を、未確定部分としてもよい。そして、プロセッサ１０２は、その未確定部分内の原稿領域の指定をユーザから受け付ける。例えば、プロセッサ１０２は、Ｓ１４で抽出された各パターンのうち、選択状態のまま残った原稿画像群を含むパターンを切替候補としてユーザに提示し、それら切替候補の中からユーザの選択を受け付ける。この場合、ユーザに提示される切替候補同士の間では、未確定部分内の原稿領域は互いに異なるが、選択状態の原稿領域は共通である。この場合、ＵＩ画面２００内のその未確定部分内に表示される原稿領域は、選択状態の原稿領域群を含んだパターン（すなわち切替候補）に含まれるものである。しかし、別の例として、Ｓ１４で抽出されたパターンのうち選択状態の原稿領域群を含まないパターンに属する原稿領域であって、かつ未確定部分に内包される原稿領域を、正しい原稿領域の候補としてＵＩ画面２００上に表示し、ユーザから選択を受け付けてもよい。

【0102】

また、ＵＩ画面２００が最初に表示された時点で、その中に表示されたパターンの全ての原稿領域を選択状態（すなわち「全選択」の状態）としておき、その状態から誤っている原稿領域をユーザに選択させてもよい。

【0103】

次に、置き直しボタン２２２及び矩形指定ボタン２２４の利用シーンを例示する。

【0104】

図２５に示すＵＩ画面２００の例は、Ｓ１２及びＳ１４にて抽出された原稿領域のパターンの中に、正しいものが１つもない場合の例である。パターン１は２つの原稿画像２１２ａと２１２ｂの両方を内包する１つの大きい矩形の原稿領域２１９ａからなり、パターン２は原稿画像２１２ａを下方に拡張した原稿領域２１９ｂ－１と、原稿画像２１２ｂを部分的に覆う原稿領域２１９ｂ－２からなる。原稿画像２１２ａ及び２１２ｂのエッジの曖昧さやそれら画像の濃度分布、プラテン１０の汚れ等が相まって、このように原稿画像２１２ａ及び２１２ｂのどの１つにも適合しない原稿領域が抽出されることもある。

【0105】

この例では、抽出されたパターンが２つなので、同時表示型のＵＩ画面２００が採用されており、その画面内には「パターン１選択」ボタン２２６及び「パターン２選択」ボタンが表示されている。しかし、どちらのパターンも正しくないので、それらボタンを押下しても正しいパターンは選べない。

【0106】

この場合ユーザは、置き直しボタン２２２を押下してプラテン１０上の原稿群を置き直すか、矩形指定ボタン２２４を押下してＵＩ画面２００上で矩形すなわち原稿領域を直接指定するかの操作を行う。

【0107】

ユーザが置き直しボタン２２２を押下した場合、プロセッサ１０２は、図２６に例示する置き直し案内用のＵＩ画面２００Ａを表示する（図２のＳ２４）。この画面には、案内情報２４０が表示される。案内情報２４０には、ユーザが行うべき作業を表す「原稿を置き直して、再スキャンしてください。」とのメッセージと、その作業についての注意事項（例えば原稿同士を所定距離以上離すべきこと）の既述が含まれる。ユーザは、この案内情報２４０を参考にして、プラテン１０上の原稿を置き直し、再度スキャンの実行を指示する。スキャン実行の指示を受けると（図２のＳ２６の判定結果がＹｅｓ）、プロセッサ１０２は、図２のＳ１０以降のステップを再度実行する。

【0108】

図２５に例示したＵＩ画面２００上で、ユーザが矩形指定ボタン２２４を押下した場合、プロセッサ１０２は、図２７に示す矩形指定用のＵＩ画面２００Ｂを表示し、ユーザからの操作を受け付け、その操作に応じて矩形すなわち原稿領域を確定していく（図２のＳ２８）。

【0109】

ユーザが矩形指定ボタン２２４を押下した直後に表示されるＵＩ画面２００Ｂのスキャン画像２１０には、原稿領域は１つも表示されていない。またこのＵＩ画面２００Ｂには、矩形指定の方法を示す説明文２５２、矩形数表示欄２５４、キャンセルボタン２５６及びやり直しボタン２５８が表示される。説明文２５２に示される矩形指定の方法は、矩形の４つの頂点のうちの任意の３つを、時計回りの順序で選択するという方法である。矩形数表示欄２５４には、ユーザの操作に応じて既に確定している又は選択済みの矩形（すなわち原稿領域）の数が表示される。図２７のＵＩ画面２００Ｂの表示の時点では、矩形は１つも確定していないので、矩形数表示欄２５４内に表示される矩形数は０である。

【0110】

キャンセルボタン２５６は、ユーザによる頂点の選択を取り消す指示のためのボタンである。例えば、ユーザが、第１の頂点を選択した後第２の頂点を選択し、その直後にキャンセルボタン２５６を押下すると、第２の頂点の選択が取り消され、更にもう一度キャンセルボタン２５６を押下すると、第１の頂点の選択も取り消される。やり直しボタン２５８は、スキャン画像２１０上での頂点の選択、及びそれに伴う原稿領域の確定を全てクリアするためのボタンである。

【0111】

ユーザは、スキャン画像２１０を見て原稿画像２１２ａ又は２１２ｂを認識し、認識した原稿画像２１２ａ又は２１２ｂの矩形の頂点を１つずつ、時計回りに選択していく。この選択は、例えば、タッチパネルに表示されたスキャン画像２１０内の原稿画像の頂点を指でタッチするという操作により行う。プロセッサ１０２は、選択された頂点のスキャン画像２１０内での座標を記憶すると共に、スキャン画像２１０上のその座標に、選択された頂点を示すマーク（図では、円）を表示する。図２７に表示した段階では、ユーザは、原稿画像２１２ａの１つ目の頂点２５０ａを選択済みである。この後ユーザは、時計回りに、原稿画像２１２ａの２つ目及び３つ目の頂点２５０ｂ及び２５０ｃを順に選択していく（図２８参照）。プロセッサ１０２は、選択された頂点の数が３つになると、それら３つの頂点の座標から一意に特定される矩形を、図２９に示すように１つの原稿領域２１９ｃとして確定し、確定した原稿領域２１９ｃの情報をメモリ１０４に記憶する。図２９に示すＵＩ画面２００Ｂ上では、確定された原稿領域２１９ｃが枠線で示され、更に選択状態（すなわち確定済み）であることを示すチェックマーク２１５がその領域内に表示されている。その後ユーザは、２つ目の原稿画像２１２ｂを示す矩形の３つの頂点を順に選択していく。図２９は、そのうちの１つ目の頂点２５０ｄが選択された時点の状態を示している。

【0112】

以上の例は、ユーザが原稿画像の矩形の３つの頂点を選択することでその矩形を特定するものであったが、これは一例にすぎない。この代わりに、例えば、ユーザがＵＩ画面２００Ｂ上の原稿画像の隣り合う２つの辺を指でなぞる操作により、その原稿画像の矩形を特定してもよい。

【0113】

図２５～図２９を参照して説明した例は、原稿領域の抽出処理により抽出された原稿領域の中に正しい原稿領域が１つもない場合の例であった。しかし、矩形指定は、このような場合に限らず、任意の時点で実行可能である。例えば、図１６に例示した２つの原稿領域２１６ａ及び２１６ｃを選択した状態で、前候補ボタン２３２又は次候補ボタン２３４を押下して残りのパターンを全て調べても、原稿画像２１２ｃにぴったり適合する原稿領域を含んだパターンが見つからない場合に、矩形指定により原稿画像２１２ｃの原稿領域の矩形を指定してもよい。すなわち、この場合、プロセッサ１０２は、選択状態の各原稿領域の情報をメモリ１０４内に保持しつつ、ユーザが選択した頂点群に基づいて新たな原稿領域を認識し、メモリ１０４に追加して記憶する。

【0114】

以上、本発明の実施の形態を説明した。上述の実施の形態はあくまで一例に過ぎない。本発明の範囲内で様々な変形や改良が可能である。例えば、複数の原稿が並べられた面をスマートフォンのカメラで撮像し、これにより得られた画像に対して、スマートフォンにインストールされたアプリケーションが以上に説明した処理と同様の処理を行う例も考えられる。

【符号の説明】

【0115】

１０ プラテン、１２ 原稿、１０２ プロセッサ、１０４ メモリ、１０６ 補助記憶装置、１０８ 入出力装置、１１０ ネットワークインタフェース、１１２ バス、１１４ スキャナ制御回路、１１６ プリンタ制御回路、１１８ ファクシミリ装置、２００ ＵＩ画面、２１０ スキャン画像、２１２ 原稿画像、２１４，２１６ 原稿領域、２２０ 切り出しボタン、２２２ 置き直しボタン、２２４ 矩形指定ボタン、２２６ 「パターン１選択」ボタン、２２８ 「パターン２選択」ボタン、２３０ パターン数表示欄、２３２ 前候補ボタン、２３４ 次候補ボタン、２３６ 全選択ボタン、２３８ 全解除ボタン。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】

【図25】

【図26】

【図27】

【図28】

【図29】