特許 5917080 画像処理装置、拡大観察装置および画像処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5917080

(24)【登録日】2016年4月15日

(45)【発行日】2016年5月11日

(54)【発明の名称】画像処理装置、拡大観察装置および画像処理プログラム

(51)【国際特許分類】

   G06T 7/60 20060101AFI20160422BHJP

   G01N 21/88 20060101ALI20160422BHJP

【ＦＩ】

   G06T7/60 110

   G01N21/88 Z

【請求項の数】9

【全頁数】27

(21)【出願番号】特願2011-228468(P2011-228468)

(22)【出願日】2011年10月18日

(65)【公開番号】特開2013-88997(P2013-88997A)

(43)【公開日】2013年5月13日

【審査請求日】2014年9月1日

(73)【特許権者】

【識別番号】000129253

【氏名又は名称】株式会社キーエンス

(74)【代理人】

【識別番号】100098305

【弁理士】

【氏名又は名称】福島 祥人

(72)【発明者】

【氏名】近藤 亮介

(72)【発明者】

【氏名】康 宇範

【審査官】 岡本 俊威

(56)【参考文献】

【文献】 特開２００９−１８６４３４（ＪＰ，Ａ）

【文献】 特開２００２−００５７４３（ＪＰ，Ａ）

【文献】 特開平０５−２７４４０９（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｔ ７／００− ７／６０

Ｇ０１Ｎ ２１／８８

(57)【特許請求の範囲】

【請求項1】

画像データに基づく画像において第１の条件に基づいて抽出される複数の領域を表示するための表示部と、
前記表示部に表示された複数の領域のいずれかを選択するために使用者により操作される操作部と、
前記第１の条件に基づいて抽出された複数の領域のうち前記操作部の操作による前記表示部の画面上の位置の指定により選択された領域の面積、形状に関する情報、および予め定められた部分の長さのうち少なくとも１つを含む幾何的な特徴情報に基づいて領域の維持または削除の第２の条件を決定し、前記表示部に表示された複数の領域のうち、前記決定された第２の条件を満たす領域を必要領域または不要領域として決定し、前記表示部に表示された複数の領域のうち、前記必要領域以外の領域または前記不要領域を削除する処理を行うように動作する処理部とを備える、画像処理装置。

【請求項2】

前記処理部は、前記選択された領域に関する幾何的な特徴情報の値に基づいて定められる範囲を前記条件として決定し、前記表示部に表示された複数の領域のうち前記範囲内の幾何的な特徴情報の値を有する領域を前記必要領域または前記不要領域として決定するように動作する、請求項１記載の画像処理装置。

【請求項3】

前記処理部は、前記表示部により表示された領域の幾何的な特徴情報を示す表、前記操作部の操作により選択された領域の一覧画像または前記操作部の操作により選択された領域の幾何的な特徴情報の分布を示す図を前記表示部に表示させ、領域の処理の結果に基づいて前記表、前記一覧画像または前記図を更新するように動作する、請求項１または２記載の画像処理装置。

【請求項4】

前記処理部は、前記操作部の操作により前記表、前記一覧画像または前記図において幾何的な特徴情報が指定された場合に、前記表示部に表示された複数の領域のうち前記指定された幾何的な特徴情報に対応する領域を特定するように動作する、請求項３記載の画像処理装置。

【請求項5】

前記処理部は、前記操作部の操作により前記表示部に表示された複数の領域のいずれかが指定された場合に、前記表、前記一覧画像または前記図において前記指定された領域に対応する幾何的な特徴情報を特定するように動作する、請求項３または４記載の画像処理装置。

【請求項6】

前記第１の条件は、前記画像データの輝度に対して設定されるしきい値である、請求項１〜５のいずれか一項に記載の画像処理装置。

【請求項7】

前記処理部は、前記表示部に表示された複数の領域のうち、前記処理による変化前または変化後の領域を他の領域と異なる表示態様で前記表示部に表示させるように動作する、請求項１〜６のいずれか一項に記載の画像処理装置。

【請求項8】

画像データに基づく画像において第１の条件に基づいて抽出される複数の領域を表示部の画面に表示するための処理と、
前記第１の条件に基づいて抽出された複数の領域のうち使用者による前記表示部の画面上の位置の指定による領域の選択を受け付ける処理と、
使用者による前記表示部の画面上の位置の指定により選択された領域の面積、形状に関する情報、および予め定められた部分の長さのうち少なくとも１つを含む幾何的な特徴情報に基づいて領域の維持または削除の第２の条件を決定し、表示された複数の領域のうち、前記決定された第２の条件を満たす領域を必要領域または不要領域として決定し、表示された複数の領域のうち、前記必要領域以外の領域または前記不要領域を削除する処理を行う処理とを、
処理装置に実行させる、画像処理プログラム。

【請求項9】

観察対象を撮像するための撮像装置を有する顕微鏡と、
前記撮像装置からの観察対象に関する画像データに基づく画像において第１の条件に基づいて抽出される複数の領域を表示するための表示部と、
前記表示部に表示された複数の領域のいずれかを選択するために使用者により操作される操作部と、
前記第１の条件に基づいて抽出された複数の領域のうち前記操作部の操作による前記表示部の画面上の位置の指定により選択された領域の面積、形状に関する情報、および予め定められた部分の長さのうち少なくとも１つを含む幾何的な特徴情報に基づいて領域の維持または削除の第２の条件を決定し、前記表示部に表示された複数の領域のうち、前記決定された第２の条件を満たす領域を必要領域または不要領域として決定し、前記表示部に表示された複数の領域のうち、前記必要領域以外の領域または前記不要領域を削除する処理を行うように動作する処理部とを備える、拡大観察装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像を処理する画像処理装置、拡大観察装置および画像処理プログラムに関する。

【背景技術】

【0002】

拡大観察装置の使用者は、観察対象物の画像から特定の領域を抽出することにより、観察対象物の特定の領域のみを観察することができる。また、使用者は、観察対象物の画像から抽出された領域に基づいて観察対象物の特定の領域の寸法および面積等を算出することができる。

【0003】

特許文献１に記載された画像検査装置においては、検出対象画像中の検出すべき最低輝度値が第１閾値として設定される。それにより、検出対象画像から第１閾値より大きい輝度値を有する画素のブロブが特定される。また、第１閾値よりも大きい第２閾値が設定される。それにより、特定された全てのブロブから第２閾値より小さい輝度値のみからなるブロブが削除される。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００９−１８６４３４号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、特許文献１の画像検査装置では、不要なブロブを削除するための第２閾値を適切に設定することは容易ではない。そのため、使用者は、画像中の複数のブロブのうち所望のブロブを削除する処理を容易に行うことは難しい。

【0006】

本発明の目的は、画像中の複数の領域のうち所望の領域を削除する処理を容易に行うことが可能な画像処理装置、拡大観察装置および画像処理プログラムを提供することである。

【課題を解決するための手段】

【0007】

（１）第１の発明に係る画像処理装置は、画像データに基づく画像において第１の条件に基づいて抽出される複数の領域を表示するための表示部と、表示部に表示された複数の領域のいずれかを選択するために使用者により操作される操作部と、第１の条件に基づいて抽出された複数の領域のうち操作部の操作による表示部の画面上の位置の指定により選択された領域の面積、形状に関する情報、および予め定められた部分の長さのうち少なくとも１つを含む幾何的な特徴情報に基づいて領域の維持または削除の第２の条件を決定し、表示部に表示された複数の領域のうち、決定された第２の条件を満たす領域を必要領域または不要領域として決定し、表示部に表示された複数の領域のうち、必要領域以外の領域または不要領域を削除する処理を行うように動作する処理部とを備えるものである。

【0008】

この画像処理装置においては、画像データに基づく画像において第１の条件に基づいて抽出される複数の領域が表示部の画面に表示される。第１の条件に基づいて抽出された複数の領域のうち使用者による表示部の画面上の位置の指定による領域の選択が受け付けられる。使用者による表示部の画面上の位置の指定により選択された領域の面積、形状に関する情報、および予め定められた部分の長さのうち少なくとも１つを含む幾何的な特徴情報に基づいて領域の維持または削除の第２の条件が決定される。また、表示された複数の領域のうち、決定された第２の条件を満たす領域が必要領域または不要領域として決定される。表示された複数の領域のうち、必要領域以外の領域または不要領域を削除する処理が行われる。このように、使用者は、画像中の複数の領域のうち所望の領域を削除する処理を容易に行うことが可能となる。

【0009】

（２）処理部は、選択された領域に関する幾何的な特徴情報の値に基づいて定められる範囲を条件として決定し、表示部に表示された複数の領域のうち範囲内の幾何的な特徴情報の値を有する領域を必要領域または不要領域として決定するように動作してもよい。

【0010】

この場合、使用者は、特定の幾何的な特徴情報の値を有する領域を選択することにより、一定の範囲の幾何的な特徴情報の値を有する領域を容易に維持または削除することができる。

【0011】

（３）処理部は、表示部により表示された領域の幾何的な特徴情報を示す表、操作部の操作により選択された領域の一覧画像または操作部の操作により選択された領域の幾何的な特徴情報の分布を示す図を表示部に表示させ、領域の処理の結果に基づいて表、一覧画像または図を更新するように動作してもよい。

【0012】

この場合、使用者は、表、一覧画像または図を参照することにより、処理後の領域の幾何的な特徴情報、画像または分布を容易に認識することができる。

【0013】

（４）処理部は、操作部の操作により表、一覧画像または図において幾何的な特徴情報が指定された場合に、表示部に表示された複数の領域のうち指定された幾何的な特徴情報に対応する領域を特定するように動作してもよい。

【0014】

この場合、使用者は、表、一覧画像または図の幾何的な特徴情報を指定することにより、指定した幾何的な特徴情報に対応する領域を容易に認識することができる。

【0015】

（５）処理部は、操作部の操作により表示部に表示された複数の領域のいずれかが指定された場合に、表、一覧画像または図において指定された領域に対応する幾何的な特徴情報を特定するように動作してもよい。

【0016】

この場合、使用者は、複数の領域のいずれかを指定することにより、指定した領域に対応する幾何的な特徴情報を容易に認識することができる。

【0017】

（６）第１の条件は、画像データの輝度に対して設定されるしきい値であってもよい。

【0019】

（７）処理部は、表示部に表示された複数の領域のうち、処理による変化前または変化後の領域を他の領域と異なる表示態様で表示部に表示させるように動作してもよい。この場合、使用者は処理が行われる領域または処理が行われた領域を容易に認識することができる。

【0020】

（８）第２の発明に係る画像処理プログラムは、画像データに基づく画像において抽出される第１の条件に基づいて複数の領域を表示部の画面に表示するための処理と、第１の条件に基づいて抽出された複数の領域のうち使用者による表示部の画面上の位置の指定による領域の選択を受け付ける処理と、使用者による表示部の画面上の位置の指定により選択された領域の面積、形状に関する情報、および予め定められた部分の長さのうち少なくとも１つを含む幾何的な特徴情報に基づいて領域の維持または削除の第２の条件を決定し、表示された複数の領域のうち、決定された第２の条件を満たす領域を必要領域または不要領域として決定し、表示された複数の領域のうち、必要領域以外の領域または不要領域を削除する処理を行う処理とを、処理装置に実行させるものである。

【0021】

この画像処理プログラムによれば、画像データに基づく画像において第１の条件に基づいて抽出される複数の領域が表示部の画面に表示される。第１の条件に基づいて抽出された複数の領域のうち使用者による表示部の画面上の位置の指定による領域の選択が受け付けられる。使用者による表示部の画面上の位置の指定により選択された領域の面積、形状に関する情報、および予め定められた部分の長さのうち少なくとも１つを含む幾何的な特徴情報に基づいて領域の維持または削除の第２の条件が決定される。また、表示された複数の領域のうち、決定された第２の条件を満たす領域が必要領域または不要領域として決定される。表示された複数の領域のうち、必要領域以外の領域または不要領域を削除する処理が行われる。このように、使用者は、画像中の複数の領域のうち所望の領域を削除する処理を容易に行うことが可能となる。
（９）第３の発明に係る拡大観察装置は、観察対象を撮像するための撮像装置を有する顕微鏡と、撮像装置からの観察対象に関する画像データに基づく画像において第１の条件に基づいて抽出される複数の領域を表示するための表示部と、表示部に表示された複数の領域のいずれかを選択するために使用者により操作される操作部と、第１の条件に基づいて抽出された複数の領域のうち操作部の操作による表示部の画面上の位置の指定により選択された領域の面積、形状に関する情報、および予め定められた部分の長さのうち少なくとも１つを含む幾何的な特徴情報に基づいて領域の維持または削除の第２の条件を決定し、表示部に表示された複数の領域のうち、決定された第２の条件を満たす領域を必要領域または不要領域として決定し、表示部に表示された複数の領域のうち、必要領域以外の領域または不要領域を削除する処理を行うように動作する処理部とを備えるものである。

【発明の効果】

【0022】

本発明によれば、画像中の複数の領域のうち所望の領域を削除する処理を容易に行うことができる。

【図面の簡単な説明】

【0023】

【図1】本発明の一実施の形態に係る画像処理装置を備えた拡大観察装置の構成を示すブロック図である。

【図2】本発明の一実施の形態に係る画像処理装置を備えた拡大観察装置の顕微鏡を示す斜視図である。

【図3】顕微鏡の撮像装置がＺ方向と平行に固定されている状態を示す模式図である。

【図4】顕微鏡の撮像装置がＺ方向から所望の角度まで傾斜された状態を示す模式図である。

【図5】表示部の画面の一例を示す模式図である。

【図6】第１の処理例を説明するための模式図である。

【図7】第１の処理例を説明するための模式図である。

【図8】画像処理装置による第１の処理例である加工処理を示すフローチャートである。

【図9】画像処理装置による第１の処理例である加工処理を示すフローチャートである。

【図10】表示部の画面の他の例を示す模式図である。

【図11】第２の処理例を説明するための模式図である。

【図12】第２の処理例を説明するための模式図である。

【図13】画像処理装置による第２の処理例である削除処理を示すフローチャートである。

【図14】画像処理装置による第２の処理例である削除処理を示すフローチャートである。

【図15】表示部の画面のさらに他の例を示す模式図である。

【図16】必要領域および不要領域の決定後の初期画像を示す模式図である。

【図17】計測結果表が表示された表示部を示す模式図である。

【図18】計測結果表の拡大図である。

【図19】抽出画像一覧表が表示された表示部を示す模式図である。

【図20】図１９の抽出画像一覧表の拡大図である。

【図21】ヒストグラム画像が表示された表示部を示す模式図である。

【図22】図２１のヒストグラム画像の拡大図である。

【発明を実施するための形態】

【0024】

以下、本発明の一実施の形態に係る画像処理装置を備えた拡大観察装置について図面を参照しながら説明する。

【0025】

（１）拡大観察装置の構成
図１は、本発明の一実施の形態に係る画像処理装置を備えた拡大観察装置の構成を示すブロック図である。

【0026】

以下において、水平面内で直交する２方向をＸ方向およびＹ方向とし、Ｘ方向およびＹ方向に垂直な方向（鉛直方向）をＺ方向とする。

【0027】

図１に示すように、拡大観察装置３００は、顕微鏡１００および画像処理装置２００を備える。

【0028】

顕微鏡１００は、撮像装置１０、ステージ装置２０および回転角度センサ３０を含む。撮像装置１０は、カラーＣＣＤ（電荷結合素子）１１、ハーフミラー１２、対物レンズ１３、Ａ／Ｄ変換器（アナログ／デジタル変換器）１５、照明用光源１６およびレンズ駆動部１７を含む。ステージ装置２０は、ステージ２１、ステージ駆動部２２およびステージ支持部２３を含む。ステージ２１上には、観察対象物Ｓが載置される。

【0029】

照明用光源１６は、例えば白色光を発生するハロゲンランプまたは白色ＬＥＤ（発光ダイオード）である。照明用光源１６により発生された白色光は、ハーフミラー１２により反射された後、対物レンズ１３によりステージ２１上の観察対象物Ｓに集光される。

【0030】

観察対象物Ｓにより反射された白色光は、対物レンズ１３およびハーフミラー１２を透過してカラーＣＣＤ１１に入射する。カラーＣＣＤ１１は、赤色波長の光を受光する複数の赤色用画素、緑色波長の光を受光する複数の緑色用画素、および青色波長の光を受光する複数の青色用画素を有する。複数の赤色用画素、複数の緑色用画素および複数の青色用画素は二次元的に配列される。カラーＣＣＤ１１の各画素からは、受光量に対応する電気信号が出力される。カラーＣＣＤ１１の出力信号は、Ａ／Ｄ変換器１５によりデジタル信号に変換される。Ａ／Ｄ変換器１５から出力されるデジタル信号は、画像データとして画像処理装置２００に順次与えられる。カラーＣＣＤ１１に代えてＣＭＯＳ（相補性金属酸化膜半導体）イメージセンサ等の撮像素子が用いられてもよい。

【0031】

対物レンズ１３は、Ｚ方向に移動可能に設けられる。レンズ駆動部１７は、画像処理装置２００の制御により対物レンズ１３をＺ方向に移動させる。それにより、撮像装置１０の焦点の位置がＺ方向において移動する。

【0032】

ステージ２１は、Ｚ方向の軸の周りで回転可能にステージ支持部２３上に設けられる。ステージ駆動部２２は、画像処理装置２００から与えられる移動指令信号（駆動パルス）に基づいてステージ２１をステージ支持部２３に対して相対的に後述するｘ方向およびｙ方向に移動させる。ステージ駆動部２２には、ステッピングモータが用いられる。回転角度センサ３０は、ステージ２１の回転角度を検出し、検出した角度を示す角度検出信号を画像処理装置２００に与える。

【0033】

画像処理装置２００は、インタフェース２１０、ＣＰＵ（中央演算処理装置）２２０、ＲＯＭ（リードオンリメモリ）２３０、記憶装置２４０、入力装置２５０、表示部２６０および作業用メモリ２７０を含む。

【0034】

ＲＯＭ２３０には、システムプログラムが記憶される。記憶装置２４０は、ハードディスク等からなる。記憶装置２４０には、画像処理プログラムが記憶されるとともに、顕微鏡１００からインタフェース２１０を通して与えられる画像データ等の種々のデータを記憶する。画像処理プログラムの詳細は後述する。入力装置２５０は、キーボードおよびポインティングデバイスを含む。ポインティングデバイスとしては、マウスまたはジョイスティック等が用いられる。

【0035】

表示部２６０は、例えば液晶ディスプレイパネルまたは有機ＥＬ（エレクトロルミネッセンス）パネルにより構成される。

【0036】

作業用メモリ２７０は、ＲＡＭ（ランダムアクセスメモリ）からなり、種々のデータの処理のために用いられる。

【0037】

ＣＰＵ２２０は、記憶装置２４０に記憶された画像処理プログラムを実行することにより作業用メモリ２７０を用いて画像データに基づく後述する加工処理または削除処理等の画像処理を行うとともに、画像データに基づく画像を表示部２６０に表示させる。また、ＣＰＵ２２０は、インタフェース２１０を通して顕微鏡１００のカラーＣＣＤ１１、照明用光源１６、レンズ駆動部１７およびステージ駆動部２２を制御する。

【0038】

図２は、本発明の一実施の形態に係る拡大観察装置３００の顕微鏡１００を示す斜視図である。図２においては、Ｘ方向、Ｙ方向およびＺ方向が矢印で示される。

【0039】

図２に示すように、顕微鏡１００はベース１を有する。ベース１上には、第１の支持台２が取り付けられるとともに、この第１の支持台２の前面に嵌め込まれるように第２の支持台３が取り付けられる。

【0040】

第１の支持台２の上端部には、連結部４がＹ方向に延びる回動軸Ｒ１の周りに回動可能に取り付けられる。連結部４には回動支柱５が取り付けられる。それにより、回動支柱５は連結部４の回動に伴って回動軸Ｒ１を支点としてＺ方向に平行な垂直面内で傾斜可能である。使用者は、固定つまみ９により連結部４を第１の支持台２に対して固定することができる。

【0041】

連結部６の前面には環状の支持部７が取り付けられる。支持部７には、略円筒状の撮像装置１０が取り付けられる。図２の状態では、撮像装置１０の光軸Ｒ２はＺ方向に平行である。支持部７は、撮像装置１０を水平面内で移動させるための複数の調整ネジ４１を有する。複数の調整ネジ４１を用いて撮像装置１０の光軸Ｒ２が回動軸Ｒ１に垂直に交差するように撮像装置１０の位置を調整することができる。

【0042】

ベース１上の第２の支持台３の前面には、Ｚ方向に摺動可能にスライダ８が取り付けられる。第２の支持台３の側面には、調整つまみ４２が設けられる。スライダ８のＺ方向（高さ方向）の位置は、調整つまみ４２により調整可能である。

【0043】

ステージ装置２０のステージ支持部２３は、スライダ８上に取り付けられる。ステージ２１は、ステージ支持部２３に対してＺ方向の回転軸Ｒ３の周りに回転可能に設けられる。また、ステージ２１には、水平面内で互いに直交するｘ方向およびｙ方向が設定される。ステージ２１は、図１のステージ駆動部２２によりｘ方向およびｙ方向に移動可能に設けられる。ステージ２１が回転軸Ｒ３の周りに回転すると、ステージ２１のｘ方向およびｙ方向も回転する。それにより、ステージ２１のｘ方向およびｙ方向は、Ｘ方向およびＹ方向に対して水平面内で傾斜する。

【0044】

撮像装置１０の撮像範囲（視野範囲）は、撮像装置１０の倍率により異なる。以下、撮像装置１０の撮像範囲を単位領域と呼ぶ。ステージ２１をｘ方向およびｙ方向に移動させることにより複数の単位領域の画像データを取得することができる。複数の単位領域の画像データを連結することにより複数の単位領域の画像を図１の表示部２６０に表示することができる。

【0045】

図３は顕微鏡１００の撮像装置１０がＺ方向と平行に固定されている状態を示す模式図である。また、図４は顕微鏡１００の撮像装置１０がＺ方向から所望の角度まで傾斜された状態を示す模式図である。

【0046】

図３に示すように、回動支柱５がＺ方向に平行な状態で固定つまみ９を締めることにより連結部４が第２の支持台３に固定される。それにより、撮像装置１０の光軸Ｒ２がＺ方向に平行な状態で回動軸Ｒ１に垂直に交差する。この場合、撮像装置１０の光軸Ｒ２はステージ２１の表面に垂直となる。

【0047】

固定つまみ９を緩めることにより連結部４が回動軸Ｒ１の周りに回動可能となり、回動支柱５が回動軸Ｒ１を支点として傾斜可能となる。それにより、図４に示すように、撮像装置１０の光軸Ｒ２をＺ方向に対して任意の角度θ傾斜させることができる。この場合、撮像装置１０の光軸Ｒ２は回動軸Ｒ１に垂直に交差する。同様にして、撮像装置１０の光軸Ｒ２をＺ方向に対して図４と逆側に任意の角度傾斜させることができる。

【0048】

したがって、ステージ２１上の観察対象物の表面の高さを回動軸Ｒ１の高さに一致させることにより、観察対象物の同じ部分を垂直な方向および斜め方向から観察することができる。

【0049】

（２）画像処理装置による第１の処理例
図５は、表示部２６０の画面の一例を示す模式図である。図６および図７は、第１の処理例を説明するための模式図である。図５に示すように、表示部２６０の画面上には、画像表示領域２６１および抽出条件設定領域２６２が表示される。

【0050】

画像表示領域２６１には、図１の記憶装置２４０に記憶される画像データに基づいて観察対象物の画像が表示される。画像は、複数の画素から構成される。以下、記憶装置２４０に記憶される画像データに基づいて画像表示領域２６１に表示される画像を初期画像ＩＭと呼ぶ。抽出条件設定領域２６２には、次へボタン２６３ａ、戻るボタン２６３ｂおよび終了ボタン２６３ｃ等が表示される。また、抽出条件設定領域２６２には、しきい値設定バー２６４が表示される。しきい値設定バー２６４は、水平方向に移動可能なスライダ２６４ｓを有する。さらに、抽出条件設定領域２６２には、計測結果表示ボタン２６５、抽出画像一覧表示ボタン２６６およびヒストグラム表示ボタン２６７が表示される。

【0051】

図５においては、初期画像ＩＭの異なる領域が複数のドットパターンおよびハッチングパターンにより表されている。具体的には、領域Ａ１〜Ａ８が第１のドットパターンで表されている。他の複数のブロブからなる領域Ｂ１〜Ｂ３がハッチングパターンで表されている。背景の領域Ｘが第２のドットパターンで表されている。ここで、各領域は、連続した一または複数の画素から構成される。領域Ｘの輝度が最も高く、領域Ｂ１〜Ｂ３の輝度が２番目に高く、領域Ａ１〜Ａ８の輝度が最も低い。

【0052】

本実施の形態に係る画像処理装置２００においては、初期画像ＩＭから輝度に基づいて複数の領域が抽出される。この場合、初期画像ＩＭが輝度のしきい値（以下、しきい値と略記する。）を用いて２値化されることにより、複数の領域が抽出される。例えば、しきい値以下の輝度値を有する画素により構成される領域が抽出される。使用者は、図１の入力装置２５０を用いて、しきい値設定バー２６４のスライダ２６４ｓ水平方向に移動することによりしきい値を設定することができる。本実施の形態においては、抽出された領域の画素は“１”で表され、他の領域の画素は“０”で表される。

【0053】

図５の例では、使用者は、複数の領域Ａ１〜Ａ８と領域Ｂ１〜Ｂ３，Ｘとを区別する適切なしきい値を設定することにより、初期画像ＩＭから複数の領域Ａ１〜Ａ８のみを抽出することができる。領域Ａ１，Ａ２，Ａ５，Ａ６は、それぞれくびれ部分ａ１，ａ２，ａ５，ａ６を有する。ここで、くびれ部分とは、他の部分に比べて小さい幅を有する部分である。

【0054】

次に、抽出された複数の領域Ａ１〜Ａ８のうち所望の領域にその領域の状態を変化させる処理を行う。領域の状態を変化させる処理を加工処理と呼ぶ。加工処理は、例えば、１つの領域を複数の領域に分離する分離処理、複数の領域を１つの領域に結合する結合処理、領域を拡大する拡大処理、領域を縮小する縮小処理、領域の輝度、色相もしくは明度等を変化させる処理、またはぼかし処理等である。本例では、加工処理として、所望の領域Ａ１，Ａ２にくびれ部分で領域を分離する分離処理を行う。

【0055】

この場合、複数の領域Ａ１〜Ａ８のうち所望の領域Ａ１，Ａ２のみに分離処理を行うためには、くびれ部分の寸法等の種々の条件を設定する必要がある。そのため、所望の領域Ａ１，Ａ２のみに分離処理を行うことは容易ではない。そこで、本実施の形態では、以下の方法で所望の領域Ａ１，Ａ２のみに分離処理を行うことができる。

【0056】

まず、使用者は、図１の入力装置２５０を用いて図５のしきい値設定バー２６４のスライダ２６４ｓを移動させることにより、初期画像ＩＭから一または複数の領域を抽出するためのしきい値を設定する。使用者は、領域Ａ１〜Ａ８と他の領域Ｂ１〜Ｂ３，Ｘとを区別する適切なしきい値を設定することにより、領域Ａ１〜Ａ８のみを抽出することができる。

【0057】

その後、使用者は、入力装置２５０を用いて図５の次へボタン２６３ａを操作する。これにより、抽出された領域Ａ１〜Ａ８を表示するための抽出領域データが生成される。生成された抽出領域データは、図１の作業用メモリ２７０に記憶される。なお、使用者が入力装置２５０を用いて図５の戻るボタン２６３ｂを操作することにより、領域の抽出が解除される。これにより、使用者はしきい値を再設定することができる。

【0058】

本実施の形態では、抽出された領域の画素は“１”で表され、他の領域の画素は“０”で表される。そのため、抽出された領域の画素すなわち“１”の画素が、初期画像ＩＭに重なるように黒く表示される。図６（ａ）において、領域Ａ１〜Ａ８は抽出された領域であるため、作業用メモリ２７０に記憶された抽出領域データに基づいて領域Ａ１〜Ａ８が黒く表示されている。

【0059】

次に、図６（ｂ）に示すように、使用者は、入力装置２５０を用いて抽出された領域Ａ１〜Ａ８について矩形の選択範囲Ｒを指定する。それにより、選択範囲Ｒに含まれるか、または選択範囲Ｒの枠に交差する領域が選択される。本例においては、領域Ａ１，Ａ２の少なくとも一部を含みかつ領域Ａ５，Ａ６を含まない選択範囲Ｒが指定される。図６（ｂ）の例においては、領域Ａ１が選択範囲Ｒと交差する。また、領域Ａ２〜Ａ４が選択範囲Ｒに含まれる。そのため、使用者が入力装置２５０を用いて次へボタン２６３ａを指定することにより、領域Ａ１〜Ａ４が選択される。以下、選択範囲Ｒの指定により選択された領域を選択領域と呼び、選択範囲Ｒの指定により選択されなかった領域を非選択領域と呼ぶ。選択領域を表示するための画像データは、選択領域データとして作業用メモリ２７０に記憶される。また、非選択領域を表示するための画像データは、非選択領域データとして作業用メモリ２７０に記憶される。

【0060】

使用者は、入力装置２５０を用いて選択範囲Ｒを再び指定した後、次へボタン２６３ａを指定することにより、領域を再選択することができる。

【0061】

本実施の形態では、選択領域の画素は“１”で表され、非選択領域の画素は“０”で表される。そのため、選択領域の画素すなわち“１”の画素が、初期画像ＩＭに重なるように黒く表示される。図６（ｃ）において、領域Ａ１〜Ａ４は選択領域であるため、作業用メモリ２７０に記憶された選択領域データに基づいて領域Ａ１〜Ａ４が黒く表示されている。

【0062】

次に、使用者は、入力装置２５０を用いてくびれ部分を有する領域の分離処理を指示する。これにより、選択された領域Ａ１〜Ａ４のうちくびれ部分を有する領域Ａ１，Ａ２に分離処理が行われる。その結果、図７（ａ）に示すように、領域Ａ１は図５のくびれ部分ａ１を境界に領域Ａ１１および領域Ａ１２に分離される。また、領域Ａ２は図５のくびれ部分ａ２を境界に領域Ａ２１および領域Ａ２２に分離される。作業用メモリ２７０に記憶される領域Ａ１，Ａ２に対応する選択領域データは、分離処理後の領域Ａ１１，Ａ１２，Ａ２１，Ａ２２を表示するための画像データにより更新される。

【0063】

本実施の形態においては、加工処理が行われた領域を強調表示することができる。図７（ａ）の例では、分離処理後の領域Ａ１１，Ａ１２，Ａ２１，Ａ２２が他の領域Ａ３〜Ａ８とは異なる色または輝度等の異なる表示態様により強調表示されている。これにより、使用者は分離処理が行われた領域を容易に認識することができる。

【0064】

その後、加工処理された領域が他の選択領域および非選択領域に合成される。本実施の形態では、合成後の領域の画素は“１”で表され、他の領域（抽出されなかった領域）の画素は“０”で表される。そのため、合成後の領域の画素すなわち“１”の画素が、初期画像ＩＭに重なるように黒く表示される。図７（ｂ）において、作業用メモリ２７０に記憶された抽出領域データに基づいて領域Ａ１１，Ａ１２，Ａ２１，Ａ２２，Ａ３〜Ａ８が黒く表示されている。

【0065】

このようにして、抽出された領域Ａ１〜Ａ８のうち、領域Ａ５，Ａ６に分離処理が行われることなく、所望の領域Ａ１，Ａ２にのみ分離処理が行われる。

【0066】

（３）加工処理
図８および図９は、画像処理装置２００による第１の処理例である加工処理を示すフローチャートである。加工処理は、ＣＰＵ２２０が記憶装置２４０に記憶された加工処理プログラムを実行することにより行われる。以下、図８および図９のフローチャートにしたがって、画像処理装置２００による加工処理を説明する。

【0067】

図１のＣＰＵ２２０は、使用者により図１の記憶装置２４０に記憶された画像データが選択されたか否かを判定する（ステップＳ１）。画像データが選択されていない場合、ＣＰＵ２２０は、使用者により画像データが選択されるまで待機する。ステップＳ１で使用者により画像データが選択された場合、ＣＰＵ２２０は選択された画像データに基づいて初期画像ＩＭを図５の表示部２６０の画像表示領域２６１に表示する（ステップＳ２）。

【0068】

次に、ＣＰＵ２２０は、初期画像ＩＭの２値化が指示されたか否かを判定する（ステップＳ３）。使用者は、図１の入力装置２５０を用いて図５のスライダ２６４ｓを移動させて適切なしきい値を設定した後、図５の次へボタン２６３ａを操作することにより２値化を指示する。初期画像ＩＭの２値化が指示されていない場合、ＣＰＵ２２０は使用者により初期画像ＩＭの２値化が指示されるまで待機する。

【0069】

ステップＳ３で使用者により初期画像ＩＭの２値化が指示された場合、ＣＰＵ２２０は初期画像ＩＭの２値化を実行する（ステップＳ４）。これにより、ＣＰＵ２２０は初期画像ＩＭの２値化により抽出された領域を表示するための抽出領域データを生成する。また、ＣＰＵ２２０は生成された抽出領域データに基づいて抽出された領域を図５の表示部２６０の画像表示領域２６１に表示する。

【0070】

続いて、ＣＰＵ２２０は、使用者が入力装置２５０を用いて選択範囲Ｒを指定することにより領域が選択されたか否かを判定する（ステップＳ５）。領域が選択されていない場合、ＣＰＵ２２０は使用者により領域が選択されるまで待機する。ステップＳ５で使用者により領域が選択された場合、ＣＰＵ２２０は選択領域を表示するための選択領域データおよび非選択領域を表示するための非選択領域データを生成し、生成された選択領域データおよび非選択領域データを図１の作業用メモリ２７０に記憶する（ステップＳ６）。

【0071】

次に、ＣＰＵ２２０は、使用者により選択領域の加工処理が指示されたか否かを判定する（ステップＳ７）。選択領域の加工処理が指示されていない場合、ＣＰＵ２２０はステップＳ５の処理に戻る。これにより、使用者は領域を再選択することができる。ステップＳ７で使用者により選択領域の加工処理が指示された場合、ＣＰＵ２２０は選択領域の加工処理を実行する（ステップＳ８）。図７の例においては、加工処理は、選択された領域のうちくびれ部分を有する領域の分離処理である。また、図７の例においては、加工処理が行われた領域が強調表示される。

【0072】

その後、ＣＰＵ２２０は、作業用メモリ２７０に記憶される選択領域データを加工処理後の選択領域データに更新する（ステップＳ９）。次に、ＣＰＵ２２０は、非選択領域データと更新後の選択領域データとを合成する（ステップＳ１０）。続いて、ＣＰＵ２２０は、合成後の画像データに基づく画像を表示部２６０の画像表示領域２６１に表示し（ステップＳ１１）、加工処理を終了する。

【0073】

（４）加工処理の効果
本実施の形態に係る画像処理装置２００においては、表示部２６０の画像表示領域２６１に表示される初期画像ＩＭの複数の領域のうち、使用者が入力装置２５０を用いて選択範囲Ｒで指定した領域にのみ加工処理が行われる。これにより、使用者は、初期画像ＩＭ中の複数の領域のうち所望の領域の加工処理を容易に行うことが可能となる。

【0074】

また、本実施の形態においては、選択範囲Ｒに含まれる領域のみでなく、選択範囲Ｒの枠に交差する領域も選択領域として指定される。これにより、領域が選択範囲Ｒの枠に交差する場合でも、選択範囲Ｒの枠の内側の領域および外側の領域に同一の加工処理が行われる。その結果、選択範囲Ｒの枠の内側の領域と外側の領域との境界が不連続または不自然になることが防止される。

【0075】

（５）画像処理装置による第２の処理例
図１０は、表示部２６０の画面の他の例を示す模式図である。図１１および図１２は、第２の処理例を説明するための模式図である。

【0076】

図１０に示すように、表示部２６０の画像表示領域２６１には、図１の記憶装置２４０に記憶される画像データに基づいて初期画像ＩＭとは異なる初期画像ＩＭ２が表示される。

【0077】

図１０においては、初期画像ＩＭ２の異なる領域が複数のドットパターンおよびハッチングパターンにより表されている。具体的には、領域Ｃ１〜Ｃ１５が第１のドットパターンで表されている。領域Ｄ１〜Ｄ４がハッチングパターンで表されている。背景の領域Ｙが第２のドットパターンで表されている。ここで、各領域は、連続した一または複数の画素から構成される。領域Ｙの輝度が最も高く、領域Ｄ１〜Ｄ４の輝度が２番目に高く、領域Ｃ１〜Ｃ１５の輝度が最も低い。

【0078】

まず、使用者は、図１の入力装置２５０を用いて図１０のしきい値設定バー２６４のスライダ２６４ｓを移動させることにより、初期画像ＩＭ２から複数の領域を抽出するためのしきい値を設定する。使用者は、領域Ｃ１〜Ｃ１５と他の領域Ｄ１〜Ｄ４，Ｙとを区別する適切なしきい値を設定することにより、領域Ｃ１〜Ｃ１５のみを抽出することができる。

【0079】

その後、使用者は、入力装置２５０を用いて図１０の次へボタン２６３ａを操作する。これにより、抽出された領域Ｃ１〜Ｃ１５を表示するための抽出領域データが生成される。生成された抽出領域データは、図１の作業用メモリ２７０に記憶される。なお、使用者が入力装置２５０を用いて図１０の戻るボタン２６３ｂを操作することにより、領域の抽出が解除される。これにより、使用者はしきい値を再設定することができる。

【0080】

本実施の形態では、抽出された領域の画素は“１”で表され、他の領域の画素は“０”で表される。そのため、抽出された領域の画素すなわち“１”の画素が、初期画像ＩＭ２に重なるように黒く表示される。図１１（ａ）において、領域Ｃ１〜Ｃ１５は抽出された領域であるため、作業用メモリ２７０に記憶された抽出領域データに基づいて領域Ｃ１〜Ｃ１５が黒く表示されている。

【0081】

第２の処理例では、抽出された複数の領域のうち所望の領域に削除処理が行われる。削除処理では、以下の方法で、複数の領域のうち維持すべき領域を必要領域として決定し、削除すべき領域を不要領域として決定する。

【0082】

図１１（ｂ）に示すように、使用者は、入力装置２５０を用いて抽出された領域Ｃ１〜Ｃ１５のうちの特定の特徴情報を有する一の領域をカーソルＣで選択する。図１１（ｂ）の例においては、領域Ｃ７がカーソルＣで選択される。特徴情報は、領域の面積、領域の予め定められた部分の長さ、または領域の予め定められた部分と指定された範囲内の重心との間の距離であってもよい。また、特徴情報は、領域の形状に関する情報または領域の画素の値に関する情報であってもよい。さらに、領域が略楕円状である場合、特徴情報は長径と短径との比であってもよく、例えば円形度であってもよい。円形度は図形の円形への近さを表すパラメータであり、図形が円形に近いほど円形度は１に近づく。円形度は、領域の面積を領域の周囲長の２乗で除算し、さらに所定の係数（例えば４π）を乗算することにより算出される。画素の値は、輝度を表してもよく、色を表してもよく、輪郭成分を表してもよい。本例では、使用者は、領域の面積を特徴情報として予め入力装置２５０を用いて設定する。

【0083】

次に、選択された領域の特徴情報に基づいて領域の維持または削除の条件が決定される。本例では、カーソルＣで選択された領域Ｃ７の面積に基づいて領域の削除の条件が決定される。例えば、領域の削除の条件は、領域Ｃ７の面積以下の面積を有することである。削除の条件を満たす領域が強調表示される。本例では、領域Ｃ１〜Ｃ３の面積は領域Ｃ７の面積よりも大きく、領域Ｃ４〜Ｃ６，Ｃ８〜Ｃ１５の面積は領域Ｃ７の面積以下である。そのため、図１１（ｂ）の例では、領域Ｃ４〜Ｃ１５が領域Ｃ１〜Ｃ３とは異なる色または輝度等の異なる表示態様により強調表示されている。これにより、使用者は削除処理が行われる領域を容易に認識することができる。

【0084】

ここで、使用者は、入力装置２５０を用いて次へボタン２６３ａを操作する。これにより、削除の条件を満たす領域が不要領域として決定され、削除の条件を満たさない領域が必要領域として決定される。本例では、領域Ｃ１〜Ｃ３が必要領域として決定され、領域Ｃ４〜Ｃ１５が不要領域として決定される。また、必要領域である領域Ｃ１〜Ｃ３を表示するための必要領域データおよび不要領域である領域Ｃ４〜Ｃ１５を表示するための不要領域データが生成される。生成された必要領域データおよび不要領域は、作業用メモリ２７０に記憶される。

【0085】

本実施の形態では、必要領域および不要領域の決定後においては、必要領域の画素は“１”で表され、他の領域の画素は“０”で表される。そのため、必要領域の画素すなわち“１”の画素が、初期画像ＩＭ２に重なるように黒く表示される。図１１（ｃ）において、領域Ｃ１〜Ｃ３は必要領域であるため、作業用メモリ２７０に記憶された必要領域データに基づいて領域Ｃ１〜Ｃ３が黒く表示されている。

【0086】

削除すべき所望の領域が不要領域に含まれなかったため、または維持すべき領域が必要領域に含まれなかったため、必要領域および不要領域の決定をやり直したい場合がある。その場合、使用者は、入力装置２５０を用いて抽出された領域Ｃ１〜Ｃ１５のうちの一の領域をカーソルＣで再び指定することにより、必要領域および不要領域を再決定することができる。図１２（ａ）の例においては、領域Ｃ１５がカーソルＣで指定される。領域Ｃ１〜Ｃ９の面積は領域Ｃ１５の面積よりも大きく、領域Ｃ１０〜Ｃ１４の面積は領域Ｃ１５の面積以下である。そのため、図１２（ａ）の例では、領域Ｃ１０〜Ｃ１５が領域Ｃ１〜Ｃ９とは異なる色または輝度等の異なる表示態様により強調表示されている。

【0087】

ここで、使用者は、入力装置２５０を用いて次へボタン２６３ａを操作する。これにより、領域Ｃ１〜Ｃ９が必要領域として決定され、領域Ｃ１０〜Ｃ１５が不要領域として決定される。また、必要領域である領域Ｃ１〜Ｃ９を表示するための必要領域データおよび不要領域である領域Ｃ１０〜Ｃ１５を表示するための不要領域データが生成される。生成された必要領域データおよび不要領域は、作業用メモリ２７０に記憶される。図１２（ｂ）において、領域Ｃ１〜Ｃ９は必要領域であるため、作業用メモリ２７０に記憶された必要領域データに基づいて領域Ｃ１〜Ｃ９が黒く表示されている。

【0088】

使用者が入力装置２５０を用いて終了ボタン２６３ｃを操作すると、必要領域が維持され、不要領域が削除される。本例では、領域Ｃ１〜Ｃ９が維持され、領域Ｃ１０〜Ｃ１５が削除される。

【0089】

このようにして、抽出された領域Ｃ１〜Ａ１５のうち、領域Ｃ１〜Ｃ９が維持されつつ、所望の領域Ｃ１０〜Ｃ１５に削除処理が行われる。

【0090】

なお、本例においては、削除の条件を満たす領域が不要領域として決定され、削除の条件を満たさない領域が必要領域として決定されるが、これに限定されない。維持の条件を満たす領域が必要領域として決定され、維持の条件を満たさない領域が不要領域として決定されてもよい。

【0091】

また、本例においては、カーソルＣにより選択された領域の面積以下の面積を有する領域が不要領域として決定されるが、これに限定されない。選択された領域の特徴情報の値と同一の特徴情報を有する領域が必要領域または不要領域として決定されてもよい。例えば、カーソルＣにより選択された領域の面積と同一の面積を有する領域が必要領域として決定されてもよい。また、カーソルＣにより選択された領域の面積と同一の面積を有する領域が不要領域として決定されてもよい。

【0092】

さらに、カーソルＣにより選択された領域の面積以上の面積を有する領域が不要領域として決定されてもよい。カーソルＣにより選択された領域の面積以下の面積を有する領域が必要領域として決定されてもよい。カーソルＣにより選択された領域の面積以上の面積を有する領域が必要領域として決定されてもよい。

【0093】

（６）削除処理
図１３および図１４は、画像処理装置２００による第２の処理例である削除処理を示すフローチャートである。削除処理は、ＣＰＵ２２０が記憶装置２４０に記憶された削除処理プログラムを実行することにより行われる。以下、図１３および図１４のフローチャートにしたがって、画像処理装置２００による削除処理を説明する。

【0094】

図１のＣＰＵ２２０は、使用者により図１の記憶装置２４０に記憶された画像データが選択されたか否かを判定する（ステップＳ２１）。画像データが選択されていない場合、ＣＰＵ２２０は、使用者により画像データが選択されるまで待機する。ステップＳ２１で使用者により画像データが選択された場合、ＣＰＵ２２０は選択された画像データに基づいて初期画像ＩＭ２を図１０の表示部２６０の画像表示領域２６１に表示する（ステップＳ２２）。

【0095】

次に、ＣＰＵ２２０は、初期画像ＩＭ２の２値化が指示されたか否かを判定する（ステップＳ２３）。使用者は、図１の入力装置２５０を用いて図１０のスライダ２６４ｓを移動させて適切なしきい値を設定した後、図１０の次へボタン２６３ａを操作することにより２値化を指示する。初期画像ＩＭ２の２値化が指示されていない場合、ＣＰＵ２２０は使用者により初期画像ＩＭ２の２値化が指示されるまで待機する。

【0096】

ステップＳ２３で使用者により初期画像ＩＭ２の２値化が指示された場合、ＣＰＵ２２０は初期画像ＩＭ２の２値化を実行する（ステップＳ２４）。これにより、ＣＰＵ２２０は初期画像ＩＭ２の２値化により抽出された領域を表示するための抽出領域データを生成する。また、ＣＰＵ２２０は生成された抽出領域データに基づいて抽出された領域を図１０の表示部２６０の画像表示領域２６１に表示する。

【0097】

続いて、ＣＰＵ２２０は、使用者が入力装置２５０を用いて抽出された領域のうちの特定の特徴情報を有する一の領域をカーソルＣで選択することにより領域が選択されたか否かを判定する（ステップＳ２５）。領域が選択されていない場合、ＣＰＵ２２０は使用者により領域が選択されるまで待機する。

【0098】

ステップＳ２５で使用者により領域が選択された場合、ＣＰＵ２２０は、選択された領域の特徴情報に基づいて領域の削除の条件を決定する（ステップＳ２６）。図１１および図１２の例では、特徴情報はカーソルＣで選択された領域の面積である。また、削除される領域の条件は、その領域がカーソルＣで選択された領域の面積以下の面積を有することである。図１１（ｂ）および図１２（ａ）の例では、削除される領域が強調表示されている。

【0099】

次に、ＣＰＵ２２０は、使用者が入力装置２５０を用いて図１０の次へボタン２６３ａを操作することにより必要領域および不要領域の決定が指示されたか否かを判定する（ステップＳ２７）。必要領域および不要領域の決定が指示されていない場合、ＣＰＵ２２０はステップＳ２５の処理に戻る。これにより、使用者は領域を再選択することができる。

【0100】

ステップＳ２７で使用者により必要領域および不要領域の決定が指示された場合、ＣＰＵ２２０は、削除の条件を満たさない領域を必要領域として決定し、削除の条件を満たす領域を不要領域として決定する（ステップＳ２８）。その後、ＣＰＵ２２０は、必要領域を表示するための必要領域データおよび不要領域を表示するための不要領域データを生成し、生成された必要領域データおよび不要領域データを図１の作業用メモリ２７０に記憶する（ステップＳ２９）。本例においては、必要領域の維持または不要領域の削除が指示されるまで必要領域および不要領域の表示が維持される。

【0101】

次に、ＣＰＵ２２０は、使用者が入力装置２５０を用いて図１０の終了ボタン２６３ｃを操作することにより必要領域の維持または不要領域の削除が指示されたか否かを判定する（ステップＳ３０）。必要領域の維持および不要領域の削除が指示されていない場合、ＣＰＵ２２０はステップＳ２５の処理に戻る。これにより、使用者は領域を再選択することができる。

【0102】

ステップＳ３０で使用者により必要領域の維持または不要領域の削除が指示された場合、ＣＰＵ２２０は、不要領域を削除する（ステップＳ３１）。それにより、作業用メモリ２７０に記憶された不要領域データが削除されるとともに、表示部２６０の画像表示領域２６１から不要領域が消去される。その後、削除処理が終了する。

【0103】

（７）削除処理の効果
本実施の形態に係る画像処理装置２００においては、表示部２６０の画像表示領域２６１に表示される初期画像ＩＭ２の複数の領域のうち、使用者が入力装置２５０を用いてカーソルＣで選択した領域よりも大きい面積を有する領域が必要領域として決定される。また、使用者が入力装置２５０を用いてカーソルＣで選択した領域の面積以下の面積を有する領域が不要領域として決定される。決定された不要領域に削除処理が実行される。これにより、使用者は、所望の領域に容易に削除処理を行うことができる。

【0104】

（８）計測結果、抽出画像一覧およびヒストグラムの表示
図５および図１０の計測結果表示ボタン２６５、抽出画像一覧表示ボタン２６６およびヒストグラム表示ボタン２６７について説明する。図１５は、表示部２６０の画面のさらに他の例を示す模式図である。図１５に示すように、表示部２６０の画像表示領域２６１には、図１の記憶装置２４０に記憶される画像データに基づいて初期画像ＩＭ，ＩＭ２とは異なる初期画像ＩＭ３が表示される。初期画像ＩＭ３には、観察対象物として回路基板の一部を示す画像が表示されている。

【0105】

図１５においては、初期画像ＩＭ３の異なる領域が複数のドットパターンおよびハッチングパターンにより表されている。具体的には、回路基板は絶縁層を含む。絶縁層上には複数の矩形状の導体パターン、他の複数の矩形状の導体パターンおよび複数の円形状の導体パターンが形成されている。複数の矩形状の導体パターンからなる領域Ｅ１〜Ｅ３５、他の複数の矩形状の導体パターンからなる領域Ｆ１〜Ｆ５および複数の円形状の導体パターンからなる領域Ｇ１〜Ｇ２５が第１のハッチングパターンで表されている。絶縁層からなる領域Ｚが第１のドットパターンで表されている。ここで、各領域は、連続した一または複数の画素から構成される。領域Ｚの輝度は領域Ｅ１〜Ｅ３５，Ｆ１〜Ｆ５，Ｇ１〜Ｇ２５の輝度よりも高い。

【0106】

図１６は、必要領域および不要領域の決定後の初期画像ＩＭ３を示す模式図である。図１５の初期画像ＩＭ３において、領域Ｅ１〜Ｅ３５，Ｆ１〜Ｆ５，Ｇ１〜Ｇ２５と他の領域Ｚとを区別する適切なしきい値を設定することにより、初期画像ＩＭ３から領域Ｅ１〜Ｅ３５，Ｆ１〜Ｆ５，Ｇ１〜Ｇ２５のみが抽出される。その後、画像処理装置２００による第２の処理例と同様に、抽出された領域のうち、所望の面積以下の面積を有する領域がカーソルで選択される。これにより、図１６に示すように、領域Ｅ１〜Ｅ３５が必要領域として決定され、領域Ｆ１〜Ｆ５，Ｇ１〜Ｇ２５が不要領域として決定される。

【0107】

必要領域である複数の領域Ｅ１〜Ｅ３５の各々には、固有の識別番号が付与される。本例においては、領域Ｅ１〜Ｅ３５には、それぞれ“Ｎｏ．１”〜“Ｎｏ．３５”の識別番号が付与される。また、複数の必要領域の各々について種々の特徴情報の値が計測される。特徴情報は、例えば領域の面積、周囲長、最大径または最小径を含む。

【0108】

以下、計測結果表示ボタン２６５が操作された場合のＣＰＵ２２０の動作について説明する。使用者が図１の入力装置２５０を用いて計測結果表示ボタン２６５を操作すると、ＣＰＵ２２０は、領域ごとに計測された特徴情報を含む計測結果表を作成し、表示部２６０に表示する。

【0109】

図１７は、計測結果表が表示された表示部２６０を示す模式図である。図１８は、図１７の計測結果表２６５０の拡大図である。図１８に示すように、計測結果表２６５０は、計測結果表示領域２６５１、編集結果表示領域２６５２および複数の結果表示欄２６５３，２６５４，２６５５，２６５６を含む。

【0110】

計測結果表示領域２６５１の各行には、必要領域の識別番号とそれに対応する複数の特徴情報の値が表示される。図１８の例においては、計測結果表示領域２６５１の各行には、領域Ｅ１〜Ｅ３５の各々の識別番号、面積、周囲長および最大径が表示される。計測結果表示領域２６５１においては、各特徴情報の値を降順または昇順に表示することができる。

【0111】

編集結果表示領域２６５２には、領域Ｅ１〜Ｅ３５の特徴情報の値の編集結果が表示される。編集結果は、例えば特徴情報の平均値、標準偏差値、最大値、最小値および総計値を含む。結果表示欄２６５３には、必要領域である領域Ｅ１〜Ｅ３５の数が表示される。なお、本例においては、必要領域の数は“３５”である。

【0112】

結果表示欄２６５４には、複数の領域Ｅ１〜Ｅ３５の総面積が表示される。なお、総面積は、領域の面積の総計値として編集結果表示領域２６５２にも表示可能である。編集結果表示領域２６５２には、初期画像ＩＭ３の全領域の面積が画面全体面積として表示される。結果表示欄２６５６には、画面全体面積に対する総面積が総面積率として表示される。本例では、総面積率が百分率で表示される。

【0113】

使用者が入力装置２５０を用いて計測結果表２６５０の計測結果表示領域２６５１に表示されたいずれかの識別番号および特徴情報を含む行を指定すると、その行に対応する初期画像ＩＭ３の必要領域が強調表示される。図１８の例においては、矢印ａで示すように、識別番号“Ｎｏ．５”を含む行が指定される。そのため、図１７の例においては、識別番号“Ｎｏ．５”を含む行に対応する領域Ｅ５が他の領域とは異なる色または輝度等の異なる表示態様により強調表示される。これにより、使用者は、指定した識別番号および特徴情報の値に対応する領域を容易に認識することができる。

【0114】

同様に、使用者が入力装置２５０を用いて画像表示領域２６１に表示された初期画像ＩＭ３からいずれかの必要領域を指定すると、その必要領域に対応する計測結果表示領域２６５１の識別番号および特徴情報の値を含む行が強調表示される。これにより、使用者は、指定した必要領域に対応する識別番号および特徴情報の値を容易に認識することができる。

【0115】

次に、図１６に戻り、抽出画像一覧表示ボタン２６６が操作された場合のＣＰＵ２２０の動作について説明する。使用者が図１の入力装置２５０を用いて抽出画像一覧表示ボタン２６６を操作すると、ＣＰＵ２２０は、図２の作業用メモリ２７０の必要領域データに基づいて、複数の必要領域の画像を含む抽出画像一覧表を作成し、表示部２６０に表示する。

【0116】

図１９は、抽出画像一覧表が表示された表示部２６０を示す模式図である。図２０は、図１９の抽出画像一覧表の拡大図である。図２０に示すように、抽出画像一覧表２６６０は、特徴情報選択欄２６６１、表示順序選択欄２６６２、一または複数の抽出画像表示領域２６６３、および一または複数の特徴情報表示領域２６６４を含む。抽出画像表示領域２６６３の数および特徴情報表示領域２６６４の数は必要領域の数に等しい。したがって、本例においては、抽出画像表示領域２６６３の数および特徴情報表示領域２６６４の数は“３５”である。

【0117】

複数の抽出画像表示領域２６６３および複数の特徴情報表示領域２６６４の各々には、必要領域の識別番号が割り当てられる。各抽出画像表示領域２６６３内には、割り当てられた識別番号に対応する必要領域の画像が表示される。各抽出画像表示領域２６６３の下方には、特徴情報表示領域２６６４が配置される。複数の特徴情報表示領域２６６４の各々には、割り当てられた識別番号に対応する必要領域の特徴情報の値が表示される。

【0118】

特徴情報表示領域２６６４に表示される特徴情報は、特徴情報選択欄２６６１に表示される種々の特徴情報から選択することができる。図２０の例においては、特徴情報表示領域２６６４に表示される特徴情報は面積である。また、複数の抽出画像表示領域２６６３および複数の特徴情報表示領域２６６４の表示順序は、表示順序選択欄２６６２の種々の表示順序から選択することができる。図２０の例においては、複数の抽出画像表示領域２６６３および複数の特徴情報表示領域２６６４の表示順序は降順である。

【0119】

使用者が入力装置２５０を用いて抽出画像一覧表２６６０に表示されたいずれかの抽出画像表示領域２６６３および特徴情報表示領域２６６４を指定すると、その抽出画像表示領域２６６３および特徴情報表示領域２６６４の識別番号に対応する初期画像ＩＭ３の必要領域が強調表示される。図２０の例においては、矢印ｂで示すように、識別番号“Ｎｏ．３２”の抽出画像表示領域２６６３および特徴情報表示領域２６６４が指定される。それにより、図１９の例においては、識別番号“Ｎｏ．３２”に対応する領域Ｅ３２が他の領域とは異なる色または輝度等の異なる表示態様により強調表示される。これにより、使用者は、指定した識別番号、画像および特徴情報の値に対応する領域を容易に認識することができる。

【0120】

同様に、使用者が入力装置２５０を用いて画像表示領域２６１に表示された初期画像ＩＭ３からいずれかの必要領域を指定すると、その必要領域に対応する識別番号が割り当てられた抽出画像表示領域２６６３内の画像および特徴情報表示領域２６６４が強調表示される。これにより、使用者は、指定した領域に対応する識別番号、画像および特徴情報の値を容易に認識することができる。

【0121】

次に、図１６に戻り、ヒストグラム表示ボタン２６７が操作された場合のＣＰＵ２２０の動作について説明する。使用者が図１の入力装置２５０を用いてヒストグラム表示ボタン２６７を操作すると、ＣＰＵ２２０は、必要領域の特徴情報についてのヒストグラム画像を作成し、表示部２６０に表示する。

【0122】

図２１は、ヒストグラム画像が表示された表示部２６０を示す模式図である。図２２は、図２１のヒストグラム画像２６７０の拡大図である。図２２に示すように、ヒストグラム画像２６７０は、特徴情報選択欄２６７１およびヒストグラム表示領域２６７２を含む。ヒストグラム表示領域２６７２には、複数の必要領域の特徴情報についてのヒストグラムが表示される。

【0123】

ヒストグラム表示領域２６７２に表示される特徴情報は、特徴情報選択欄２６７１に表示される種々の特徴情報から選択することができる。図２２の例においては、ヒストグラム表示領域２６７２に表示される特徴情報は面積である。ヒストグラムの第１の特徴情報範囲には識別番号“Ｎｏ．３５”の必要領域が含まれる。ヒストグラムの第２の特徴情報範囲には識別番号“Ｎｏ．１”〜“Ｎｏ．４”，“Ｎｏ．７”〜“Ｎｏ．１５”，“Ｎｏ．１７”，“Ｎｏ．１９”〜“Ｎｏ．２８”の必要領域が含まれる。ヒストグラムの第３の特徴情報範囲には識別番号“Ｎｏ．３３”の必要領域が含まれる。ヒストグラムの第４の特徴情報範囲には識別番号“Ｎｏ．３０”〜“Ｎｏ．３２”，“Ｎｏ．３４”の必要領域が含まれる。ヒストグラムの第５の特徴情報範囲には識別番号“Ｎｏ．２９”の必要領域が含まれる。ヒストグラムの第６の特徴情報範囲には識別番号“Ｎｏ．５”，“Ｎｏ．６”，“Ｎｏ．１６”，“Ｎｏ．１８”の必要領域が含まれる。

【0124】

使用者が入力装置２５０を用いてヒストグラム表示領域２６７２に表示されたいずれかの特徴情報範囲を指定すると、特徴情報範囲に含まれる識別番号に対応する初期画像ＩＭ３の必要領域が強調表示される。図２２の例においては、矢印ｃで示すように、識別番号“Ｎｏ．１”〜“Ｎｏ．４”，“Ｎｏ．７”〜“Ｎｏ．１５”，“Ｎｏ．１７”，“Ｎｏ．１９”〜“Ｎｏ．２８”の必要領域を含む第２の特徴情報範囲が指定される。そのため、図２１の例においては、識別番号“Ｎｏ．１”〜“Ｎｏ．４”，“Ｎｏ．７”〜“Ｎｏ．１５”，“Ｎｏ．１７”，“Ｎｏ．１９”〜“Ｎｏ．２８”の必要領域に対応する領域Ｅ１〜Ｅ４，Ｅ７〜Ｅ１５，Ｅ１７，Ｅ１９〜Ｅ２８が他の領域とは異なる色または輝度等の異なる表示態様により強調表示される。これにより、使用者は、指定した特徴情報範囲に対応する領域を容易に認識することができる。

【0125】

同様に、使用者が入力装置２５０を用いて画像表示領域２６１に表示された初期画像ＩＭ３からいずれかの必要領域を指定すると、その必要領域に対応する識別番号を含むヒストグラム表示領域２６７２のヒストグラムの特徴情報範囲が強調表示される。これにより、使用者は、指定した領域に対応する特徴情報範囲を容易に認識することができる。

【0126】

（９）計測結果、抽出画像一覧およびヒストグラムの表示の効果
使用者は、計測結果表２６５０、抽出画像一覧表２６６０またはヒストグラム画像２６７０に表示された特徴情報を指定することにより、指定した特徴情報に対応する画像表示領域２６１の必要領域を容易に認識することができる。

【0127】

また、使用者は、画像表示領域２６１に表示された複数の必要領域のいずれかを指定することにより、指定した必要領域に対応する計測結果表２６５０、抽出画像一覧表２６６０またはヒストグラム画像２６７０の特徴情報を容易に認識することができる。

【0128】

（１０）他の実施の形態
上記実施の形態において、第２の処理例における必要領域の各領域についての計測結果表２６５０、抽出画像一覧表２６６０およびヒストグラム画像２６７０が作成されるが、これに限定されない。第２の処理例における不要領域または第１の処理例における選択領域もしくは非選択領域についての計測結果表２６５０、抽出画像一覧表２６６０およびヒストグラム画像２６７０が作成されてもよい。

【0129】

また、上記実施の形態において、分布図としてヒストグラム画像２６７０が作成されるが、これに限定されない。分布図としてスキャッタグラム（散布図）画像等の他の分布図が作成されてもよい。

【0130】

（１１）請求項の各構成要素と実施の形態の各部との対応関係
以下、請求項の各構成要素と実施の形態の各部との対応の例について説明するが、本発明は下記の例に限定されない。

【0131】

初期画像ＩＭ，ＩＭ２，ＩＭ３が画像の例であり、表示部２６０が表示部の例であり、入力装置２５０が操作部の例であり、ＣＰＵ２２０が処理部および処理装置の例である。画像処理装置２００が画像処理装置の例であり、計測結果表２６５０が表の例であり、抽出画像一覧表２６６０が一覧画像の例であり、ヒストグラム画像２６７０が図の例である。

【0132】

請求項の各構成要素として、請求項に記載されている構成または機能を有する他の種々の要素を用いることもできる。

【産業上の利用可能性】

【0133】

本発明は、種々の画像処理装置、拡大観察装置および画像処理プログラムに有効に利用することができる。

【符号の説明】

【0134】

１ ベース
２，３ 支持台
４，６ 連結部
５ 回動支柱
７ 支持部
８，２６４ｓ スライダ
９ 固定つまみ
１０ 撮像装置
１１ カラーＣＣＤ
１２ ハーフミラー
１３ 対物レンズ
１５ Ａ／Ｄ変換器
１６ 照明用光源
１７ レンズ駆動部
２０ ステージ装置
２１ ステージ
２２ ステージ駆動部
２３ ステージ支持部
３０ 回転角度センサ
４１ 調整ネジ
４２ 調整つまみ
１００ 顕微鏡
２００ 画像処理装置
２１０ インタフェース
２２０ ＣＰＵ
２３０ ＲＯＭ
２４０ 記憶装置
２５０ 入力装置
２６０ 表示部
２６１ 画像表示領域
２６２ 抽出条件設定領域
２６３ａ 次へボタン
２６３ｂ 戻るボタン
２６３ｃ 終了ボタン
２６４ しきい値設定バー
２６５ 計測結果表示ボタン
２６６ 抽出画像一覧表示ボタン
２６７ ヒストグラム表示ボタン
２７０ 作業用メモリ
３００ 拡大観察装置
２６５０ 計測結果表
２６５１ 計測結果表示領域
２６５２ 編集結果表示領域
２６５３〜２６５６ 結果表示欄
２６６０ 抽出画像一覧表
２６６１，２６７１ 特徴情報選択欄
２６６２ 表示順序選択欄
２６６３ 抽出画像表示領域
２６６４ 特徴情報表示領域
２６７０ ヒストグラム画像
２６７２ ヒストグラム表示領域
ａ〜ｃ 矢印
ａ１，ａ２，ａ５，ａ６ くびれ部分
Ａ１〜Ａ８，Ａ１１，Ａ１２，Ａ２１，Ａ２２，Ｂ１〜Ｂ３，Ｃ１〜Ｃ１５，Ｄ１〜Ｄ４，Ｅ１〜Ｅ３５，Ｆ１〜Ｆ５，Ｇ１〜Ｇ２５，Ｘ，Ｙ，Ｚ 領域
Ｃ カーソル
ＩＭ，ＩＭ２，ＩＭ３ 初期画像
Ｒ 選択範囲
Ｒ１ 回動軸
Ｒ２ 光軸
Ｒ３ 回転軸
Ｓ 観察対象物

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】