知財求人 - 知財ポータルサイト「IP Force」
特開2022-163412視覚的顕著性マップ生成装置、視覚的顕著性マップ生成方法及びプログラム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022163412
(43)【公開日】2022-10-26
(54)【発明の名称】視覚的顕著性マップ生成装置、視覚的顕著性マップ生成方法及びプログラム
(51)【国際特許分類】
G06T 7/11 20170101AFI20221019BHJP
【ＦＩ】
G06T7/11
【審査請求】未請求
【請求項の数】15
【出願形態】ＯＬ
(21)【出願番号】P 2021068322
(22)【出願日】2021-04-14
(71)【出願人】
【識別番号】000003193
【氏名又は名称】凸版印刷株式会社
(74)【代理人】
【識別番号】100149548
【弁理士】
【氏名又は名称】松沼 泰史
(74)【代理人】
【識別番号】100139686
【弁理士】
【氏名又は名称】鈴木 史朗
(74)【代理人】
【識別番号】100169764
【弁理士】
【氏名又は名称】清水 雄一郎
(74)【代理人】
【識別番号】100147267
【弁理士】
【氏名又は名称】大槻 真紀子
(72)【発明者】
【氏名】岡崎 那耶
【テーマコード（参考）】
5L096
【Ｆターム（参考）】
5L096AA09
5L096CA22
5L096DA01
5L096FA66
5L096FA67
5L096GA55
(57)【要約】
【課題】実物の大きさを考慮するため、観察者と観察対象の画像との視距離と、視距離における視角とに応じて、画像上の実寸法の長さを、視距離、視角それぞれに対応した画像構成単位での長さに変換し、長さから求めたパラメータを用いた特徴検出フィルタで特徴検出を行い、視距離及び視角に対応した精度の高い顕著性マップを生成する視覚的顕著性マップ生成装置を提供する。
【解決手段】本発明は、対象物の画像に対する顕著性マップを生成する顕著性マップ生成装置であり、対象物と対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換部と、第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成部とを備える。
【選択図】図１
【解決手段】本発明は、対象物の画像に対する顕著性マップを生成する顕著性マップ生成装置であり、対象物と対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換部と、第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成部とを備える。
【選択図】図１
【特許請求の範囲】
【請求項1】
対象物の画像に対する顕著性マップを生成する顕著性マップ生成装置であり、
前記対象物と当該対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換部と、
前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成部と
を備えることを特徴とする視覚的顕著性マップ生成装置。
前記対象物と当該対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換部と、
前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成部と
を備えることを特徴とする視覚的顕著性マップ生成装置。
【請求項2】
前記画像構成単位がピクセル数である
ことを特徴とする請求項１に記載の視覚的顕著性マップ生成装置。
ことを特徴とする請求項１に記載の視覚的顕著性マップ生成装置。
【請求項3】
前記第１寸法及び前記第２寸法とを求める際、前記視距離及び前記視角のいずれかまたは双方の数値を変更するパラメータ操作部をさらに有する
ことを特徴とする請求項１または請求項２に記載の視覚的顕著性マップ生成装置。
ことを特徴とする請求項１または請求項２に記載の視覚的顕著性マップ生成装置。
【請求項4】
前記パラメータ変換部が、前記特徴検出フィルタとして方位特徴フィルタで用いる波長パラメータ及び偏差パラメータの各々を前記第２寸法により算出し、
前記視覚的顕著性マップ生成部が、前記波長パラメータ及び前記偏差パラメータの前記方位特徴フィルタを用いて抽出した前記画像の方位特徴により、前記視覚的顕著性マップを生成する
ことを特徴とする請求項１から請求項３のいずれか一項に記載の視覚的顕著性マップ生成装置。
前記視覚的顕著性マップ生成部が、前記波長パラメータ及び前記偏差パラメータの前記方位特徴フィルタを用いて抽出した前記画像の方位特徴により、前記視覚的顕著性マップを生成する
ことを特徴とする請求項１から請求項３のいずれか一項に記載の視覚的顕著性マップ生成装置。
【請求項5】
パラメータ操作部をさらに備え、
前記パラメータ操作部が、操作を行う操作者が入力する数値により、前記視距離、前記視角、前記波長パラメータ及び前記偏差パラメータを変更する
ことを特徴とする請求項４に記載の視覚的顕著性マップ生成装置。
前記パラメータ操作部が、操作を行う操作者が入力する数値により、前記視距離、前記視角、前記波長パラメータ及び前記偏差パラメータを変更する
ことを特徴とする請求項４に記載の視覚的顕著性マップ生成装置。
【請求項6】
画像処理部と結果表示部とをさらに備え、
前記画像処理部が、仮想空間内において、前記視点から観察される仮想３次元形状の観察面に、当該観察面の前記顕著性マップを前記対象物の面に貼り付けて顕著性マップ画像を生成し、
当該結果表示部が、前記顕著性マップ画像を表示する
ことを特徴とする請求項１から請求項５のいずれか一項に記載の視覚的顕著性マップ生成装置。
前記画像処理部が、仮想空間内において、前記視点から観察される仮想３次元形状の観察面に、当該観察面の前記顕著性マップを前記対象物の面に貼り付けて顕著性マップ画像を生成し、
当該結果表示部が、前記顕著性マップ画像を表示する
ことを特徴とする請求項１から請求項５のいずれか一項に記載の視覚的顕著性マップ生成装置。
【請求項7】
前記視距離を取得する距離情報取得部をさらに備え、
前記視点が観察者の観察点であり、前記視距離が前記観察点と前記画像が表示される画像表示装置の表示画面との距離である場合、
前記視距離が前記表示画面の近傍に備えられた距離センサにより計測された数値である
ことを特徴とする請求項１から請求項６のいずれか一項に記載の視覚的顕著性マップ生成装置。
前記視点が観察者の観察点であり、前記視距離が前記観察点と前記画像が表示される画像表示装置の表示画面との距離である場合、
前記視距離が前記表示画面の近傍に備えられた距離センサにより計測された数値である
ことを特徴とする請求項１から請求項６のいずれか一項に記載の視覚的顕著性マップ生成装置。
【請求項8】
前記視距離を取得する距離情報取得部をさらに備え、
前記距離情報取得部が、前記対象物と前記視点との前記視距離を予め所定の数値に設定する
ことを特徴とする請求項１から請求項６のいずれか一項に記載の視覚的顕著性マップ生成装置。
前記距離情報取得部が、前記対象物と前記視点との前記視距離を予め所定の数値に設定する
ことを特徴とする請求項１から請求項６のいずれか一項に記載の視覚的顕著性マップ生成装置。
【請求項9】
前記視距離を取得する距離情報取得部をさらに備え、
前記距離情報取得部が、操作を行う操作者が入力する距離値を、前記視距離として取得する
ことを特徴とする請求項１から請求項６のいずれか一項に記載の視覚的顕著性マップ生成装置。
前記距離情報取得部が、操作を行う操作者が入力する距離値を、前記視距離として取得する
ことを特徴とする請求項１から請求項６のいずれか一項に記載の視覚的顕著性マップ生成装置。
【請求項10】
前記視距離を取得する距離情報取得部をさらに備え、
実寸法で構築された前記仮想空間内における前記仮想３次元形状と、当該仮想空間内の所定の座標位置との距離を、前記視距離として取得する
ことを特徴とする請求項６に記載の視覚的顕著性マップ生成装置。
実寸法で構築された前記仮想空間内における前記仮想３次元形状と、当該仮想空間内の所定の座標位置との距離を、前記視距離として取得する
ことを特徴とする請求項６に記載の視覚的顕著性マップ生成装置。
【請求項11】
前記視距離を取得する距離情報取得部をさらに備え、
前記距離情報取得部が、実寸法で構築された前記仮想空間内において、当該仮想空間内における視点位置としてヘッドマウントディスプレイの表示画面と、前記仮想３次元形状との距離を、前記視距離として取得する
ことを特徴とする請求項６に記載の視覚的顕著性マップ生成装置。
前記距離情報取得部が、実寸法で構築された前記仮想空間内において、当該仮想空間内における視点位置としてヘッドマウントディスプレイの表示画面と、前記仮想３次元形状との距離を、前記視距離として取得する
ことを特徴とする請求項６に記載の視覚的顕著性マップ生成装置。
【請求項12】
前記視距離を取得する距離情報取得部をさらに備え、
実寸法で構築された前記仮想空間内における前記仮想３次元形状と、当該仮想空間内において操作を行う操作者が設定した座標位置との距離を、前記視距離として取得する
ことを特徴とする請求項６に記載の視覚的顕著性マップ生成装置。
実寸法で構築された前記仮想空間内における前記仮想３次元形状と、当該仮想空間内において操作を行う操作者が設定した座標位置との距離を、前記視距離として取得する
ことを特徴とする請求項６に記載の視覚的顕著性マップ生成装置。
【請求項13】
パラメータ操作部をさらに備え、
前記パラメータ操作部が、操作を行う操作の設定により、前記対象物に照射される照射光の特性を変更し、前記対象物の観察者の視認性を変化させる
ことを特徴とする請求項１から請求項１２のいずれか一項に記載の視覚的顕著性マップ生成装置。
前記パラメータ操作部が、操作を行う操作の設定により、前記対象物に照射される照射光の特性を変更し、前記対象物の観察者の視認性を変化させる
ことを特徴とする請求項１から請求項１２のいずれか一項に記載の視覚的顕著性マップ生成装置。
【請求項14】
対象物の画像に対する顕著性マップを生成する視覚的顕著性マップ生成方法であり、
パラメータ変換部が、対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換過程と、
視覚的顕著性マップ生成部が、前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的著性マップ生成過程と
を含むことを特徴とする視覚的顕著性マップ生成方法。
パラメータ変換部が、対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換過程と、
視覚的顕著性マップ生成部が、前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的著性マップ生成過程と
を含むことを特徴とする視覚的顕著性マップ生成方法。
【請求項15】
対象物の画像に対する顕著性マップを生成する視覚的顕著性マップ生成装置としてコンピュータを機能させるためのプログラムであり、
前記コンピュータを、
前記対象物と当該対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換手段、
前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成手段
として機能させるためのプログラム。
前記コンピュータを、
前記対象物と当該対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換手段、
前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成手段
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、画像の顕著性を示す顕著性マップを生成する三次元形状モデルに対してテクスチャマッピングを行なうテクスチャ画像を生成する視覚的顕著性マップ生成装置、視覚的顕著性マップ生成方法及びプログラムに関する。
【背景技術】
【0002】
近年、顕著性マップを利用することにより、画像における特徴の顕著さから、観察者の視線が向きやすい画像における領域を予測し、予測結果を提供するビジネスが増加している。
その一例として、室内の空間デザインや広告のデザインの善し悪しの指標の一つとして、空間デザインや広告のデザインなどの画像の顕著性マップを生成することが行われている。
そして、顕著性マップにおける顕著度により、上記空間デザインや広告のデザインの善し悪しを評価することが行われている（例えば、特許文献１参照）。
その一例として、室内の空間デザインや広告のデザインの善し悪しの指標の一つとして、空間デザインや広告のデザインなどの画像の顕著性マップを生成することが行われている。
そして、顕著性マップにおける顕著度により、上記空間デザインや広告のデザインの善し悪しを評価することが行われている（例えば、特許文献１参照）。
【0003】
また、観察者と、当該観察者の観察対象である観察対象との距離に応じて、観察者の観察する観察対象の見え方が異なる。
このため、距離に対応した見え方の違いを考慮して、観察対象の顕著性マップを生成することが行われている（例えば、特許文献２参照）。
このため、距離に対応した見え方の違いを考慮して、観察対象の顕著性マップを生成することが行われている（例えば、特許文献２参照）。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特許第５４１６６６３号公報
【特許文献2】特許第６２３２７１２号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、特許文献１においては、観察対象である対象物の画像がＷｅｂページで表示されるコンテンツとしての画像に限定されており、画像におけるパターンのサイズや、観察者との距離の変化などの物理量（実寸法）が考慮されていない。
このため、作成される顕著性マップが、予め設定され、かつ観察者と画像との距離が不明の状態で作成されているため、対象物の実物の大きさに対応しておらず、画像を観察する距離に対応して観察者が視認する顕著性の精度が低いという問題がある。
このため、作成される顕著性マップが、予め設定され、かつ観察者と画像との距離が不明の状態で作成されているため、対象物の実物の大きさに対応しておらず、画像を観察する距離に対応して観察者が視認する顕著性の精度が低いという問題がある。
【0006】
また、特許文献２においては、距離に基づいて画像から得られる特徴成分の比率を調整している。
すなわち、顕著性マップを生成する際に距離を方位成分のバイアス（画像の特徴の強度の調整）として用いるのみであり、物理量としての距離を実際に用いて顕著性マップを生成するアルゴリズムとなっていない。
このため、特許文献２は、用いる画像の特徴（輝度、色度、方位の特徴）を単に減衰させたり、無駄に強調させてしまい、生成する顕著性マップにおける顕著度の精度を低減させる。
すなわち、顕著性マップを生成する際に距離を方位成分のバイアス（画像の特徴の強度の調整）として用いるのみであり、物理量としての距離を実際に用いて顕著性マップを生成するアルゴリズムとなっていない。
このため、特許文献２は、用いる画像の特徴（輝度、色度、方位の特徴）を単に減衰させたり、無駄に強調させてしまい、生成する顕著性マップにおける顕著度の精度を低減させる。
【0007】
例えば、対象物としての壁紙や床材などの建装材（対象物）の画像のように、模様や凹凸などの大きさが大小異なるパターンを有する場合、観察者との距離（視距離）による見え方（視認性）の変化を考慮する必要がある。
しかしながら、特許文献１及び特許文献２においては、特徴の方位検出を初めとしたフィルタのパラメータの数値によっては、上術したような多彩なパターンのある建装材の画像の顕著性パップの生成において顕著度の誤検出や検出漏れが発生することになる。
すなわち、対象物の画像の特徴を検出する際に、特徴検出フィルタのパラメータが、対象物の大きさと、当該対象物との実際の距離を反映したものでなく、特徴検出フィルタが高い精度で対象物の画像の特徴を抽出することができず、高い精度の顕著度を有する顕著性マップを生成することができない。
しかしながら、特許文献１及び特許文献２においては、特徴の方位検出を初めとしたフィルタのパラメータの数値によっては、上術したような多彩なパターンのある建装材の画像の顕著性パップの生成において顕著度の誤検出や検出漏れが発生することになる。
すなわち、対象物の画像の特徴を検出する際に、特徴検出フィルタのパラメータが、対象物の大きさと、当該対象物との実際の距離を反映したものでなく、特徴検出フィルタが高い精度で対象物の画像の特徴を抽出することができず、高い精度の顕著度を有する顕著性マップを生成することができない。
【0008】
本発明は、このような状況に鑑みてなされたもので、実物の大きさを考慮するため、実際の観察者と観察対象の画像との視距離（物理的に意味のある実寸法）と、当該視距離における視角との各々に応じて、画像上の実寸法の長さを、視距離、視角それぞれに対応した画像構成単位での長さに変換し、当該長さから求めたパラメータを用いた特徴検出フィルタにより特徴検出を行うことで、視距離及び視角に対応した精度の高い顕著性マップを生成することが可能な視覚的顕著性マップ生成装置、視覚的顕著性マップ生成方法及びプログラムを提供する。
【課題を解決するための手段】
【0009】
上述した課題を解決するために、本発明の視覚的顕著性マップ生成装置は、対象物の画像に対する顕著性マップを生成する顕著性マップ生成装置であり、前記対象物と当該対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換部と、前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成部とを備えることを特徴とする。
本発明の視覚的顕著性マップ生成装置は、前記画像構成単位がピクセル数であることを特徴とする。
本発明の視覚的顕著性マップ生成装置は、前記画像構成単位がピクセル数であることを特徴とする。
【0010】
本発明の視覚的顕著性マップ生成装置は、前記第１寸法及び前記第２寸法とを求める際、前記視距離及び前記視角のいずれかまたは双方の数値を変更するパラメータ操作部をさらに有することを特徴とする。
【0011】
本発明の視覚的顕著性マップ生成装置は、前記パラメータ変換部が、前記特徴検出フィルタとして方位特徴フィルタで用いる波長パラメータ及び偏差パラメータの各々を前記第２寸法により算出し、前記視覚的顕著性マップ生成部が、前記波長パラメータ及び前記偏差パラメータの前記方位特徴フィルタを用いて抽出した前記画像の方位特徴により、前記視覚的顕著性マップを生成することを特徴とする。
【0012】
本発明の視覚的顕著性マップ生成装置は、パラメータ操作部をさらに備え、前記パラメータ操作部が、操作を行う操作者が入力する数値により、前記視距離、前記視角、前記波長パラメータ及び前記偏差パラメータを変更することを特徴とする。
【0013】
本発明の視覚的顕著性マップ生成装置は、画像処理部と結果表示部とをさらに備え、前記画像処理部が、仮想空間内において、前記視点から観察される仮想３次元形状の観察面に、当該観察面の前記顕著性マップを前記対象物の面に貼り付けて顕著性マップ画像を生成し、当該結果表示部が、前記顕著性マップ画像を表示することを特徴とする。
【0014】
本発明の視覚的顕著性マップ生成装置は、前記視距離を取得する距離情報取得部をさらに備え、前記視点が観察者の観察点であり、前記視距離が前記観察点と前記画像が表示される画像表示装置の表示画面との距離である場合、前記視距離が前記表示画面の近傍に備えられた距離センサにより計測された数値であることを特徴とする。
【0015】
本発明の視覚的顕著性マップ生成装置は、前記視距離を取得する距離情報取得部をさらに備え、前記距離情報取得部が、前記対象物と前記視点との前記視距離を予め所定の数値に設定することを特徴とする。
【0016】
本発明の視覚的顕著性マップ生成装置は、前記視距離を取得する距離情報取得部をさらに備え、前記距離情報取得部が、操作を行う操作者が入力する距離値を、前記視距離として取得することを特徴とする。
【0017】
本発明の視覚的顕著性マップ生成装置は、前記視距離を取得する距離情報取得部をさらに備え、実寸法で構築された前記仮想空間内における前記仮想３次元形状と、当該仮想空間内の所定の座標位置との距離を、前記視距離として取得することを特徴とする。
【0018】
本発明の視覚的顕著性マップ生成装置は、前記視距離を取得する距離情報取得部をさらに備え、前記距離情報取得部が、実寸法で構築された前記仮想空間内において、当該仮想空間内における視点位置としてヘッドマウントディスプレイの表示画面と、前記仮想３次元形状との距離を、前記視距離として取得することを特徴とする。
【0019】
本発明の視覚的顕著性マップ生成装置は、前記視距離を取得する距離情報取得部をさらに備え、実寸法で構築された前記仮想空間内における前記仮想３次元形状と、当該仮想空間内において操作を行う操作者が設定した座標位置との距離を、前記視距離として取得することを特徴とする。
【0020】
本発明の視覚的顕著性マップ生成装置は、パラメータ操作部をさらに備え、前記パラメータ操作部が、操作を行う操作の設定により、前記対象物に照射される照射光の特性を変更し、前記対象物の観察者の視認性を変化させることを特徴とする。
【0021】
本発明の視覚的顕著性マップ生成方法は、対象物の画像に対する顕著性マップを生成する視覚的顕著性マップ生成方法であり、パラメータ変換部が、対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換過程と、視覚的顕著性マップ生成部が、前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成過程とを含むことを特徴とする。
【0022】
本発明のプログラムは、対象物の画像に対する視覚的顕著性マップを生成する視覚的顕著性マップ生成装置としてコンピュータを機能させるためのプログラムであり、前記コンピュータを、前記対象物と当該対象物を観察する視点との距離である視距離に対応した、当該視点おける視角に対応した実距離単位の第１寸法を、前記画像を構成する単位である画像構成単位による第２寸法に変換するパラメータ変換手段、前記第２寸法により求めたパラメータを用いた特徴検出フィルタにより抽出された前記対象物の特徴を用いて視覚的顕著性マップを生成する視覚的顕著性マップ生成手段として機能させるためのプログラムである。
【発明の効果】
【0023】
以上説明したように、本発明によれば、実物の大きさを考慮するため、実際の観察者と観察対象の画像との視距離（物理的に意味のある実寸法）と、当該視距離における視角との各々に応じて、画像上の実寸法の長さを、視距離、視角それぞれに対応した画像構成単位での長さに変換し、当該長さから求めたパラメータを用いた特徴検出フィルタにより特徴検出を行うことで、視距離及び視角に対応した精度の高い顕著性マップを生成することが可能な視覚的顕著性マップ生成装置、視覚的顕著性マップ生成方法及びプログラムを提供することができる。
【図面の簡単な説明】
【0024】
【図1】本発明の第１の実施形態による視覚的顕著性マップ生成装置の構成例を示すブロック図である。
【図2】第１の実施形態の視覚的顕著性マップ生成装置１における、利用者と対象物の画像との相対位置を説明する図である。
【図3】距離単位の視距離ｄに対応する、表示部１＿Ｓの表示画面上の距離単位における長さを、画像構成単位の長さｙ、すなわちピクセル数に変換する処理を説明する概念図である。
【図4】本実施形態における視覚的顕著性マップ生成装置１の視角特徴抽出部１０４の構成例を示す図である。
【図5】対象物の画像から色相Ｒｓ、色相Ｇｓ 、色相Ｂｓ及び色相Ｙｓの各々を求める処理を示す概念図である。
【図6】対象物の画像におけるピクセルの各々の階調度から輝度値を算出し輝度値画像を求める処理を示す概念図である。
【図7】本実施形態における視覚的顕著性マップ生成装置１の特徴別顕著性マップ生成部１０５の構成例を示す図である。
【図8】輝度値画像から輝度特徴ガウシアンピラミッド画像を生成し、輝度特徴ガウシアンピラミッド画像から方位特徴ガウシアンピラミッド画像を生成する処理を説明する概念図である。
【図9】輝度特徴顕著性マップ生成部１０５３による輝度特徴顕著性マップの生成を説明する概念図である。
【図10】本実施形態の視覚的顕著性マップ生成装置１による視覚的顕著性マップの生成の処理の動作例を示すフローチャートである。
【図11】第２の実施形態の視覚的顕著性マップ生成装置１における、利用者と対象物の画像との相対位置を説明する図である。
【発明を実施するための形態】
【0025】
＜第１の実施形態＞
以下、本発明の第１の実施形態について、図面を参照して説明する。
図１は、本発明の第１の実施形態による視覚的顕著性マップ生成装置の構成例を示すブロック図である。本実施形態においては、図示しない外部装置から、対象物の画像、あるいはＣＧ（computer graphics）等の仮想空間における三次元形状モデル（仮想三次元形状ともいう）のデータが供給される。以下の説明においては、建装材の三次元形状モデルのデータが外部装置から供給される場合を例として説明する。
以下、本発明の第１の実施形態について、図面を参照して説明する。
図１は、本発明の第１の実施形態による視覚的顕著性マップ生成装置の構成例を示すブロック図である。本実施形態においては、図示しない外部装置から、対象物の画像、あるいはＣＧ（computer graphics）等の仮想空間における三次元形状モデル（仮想三次元形状ともいう）のデータが供給される。以下の説明においては、建装材の三次元形状モデルのデータが外部装置から供給される場合を例として説明する。
【0026】
本実施形態の視覚的顕著性マップ生成装置１は、データ入力部１０１、距離情報取得部１０２、パラメータ変換部１０３、視角特徴抽出部１０４、特徴別顕著性マップ生成部１０５、視覚的顕著性マップ生成部１０６、画像処理部１０７、結果表示部１０８、三次元形状モデル記憶部１０９、ガウシアンピラミッド画像記憶部１１０、特徴別顕著性マップ記憶部１１１、視覚的顕著性マップ記憶部１１２及びパラメータ操作部１１３の各々を備えている。
【0027】
データ入力部１０１は、建装材の三次元形状モデルのデータを外部装置（例えば、ＣＧデータを作成するサーバなど）から取得し、三次元形状モデル記憶部１０９に書き込んで記憶させる。
また、データ入力部１０１は、外部装置、あるいは操作者の入力処理により、表示画面の仕様データとして、分解能の横ピクセル数Ｘ及び縦ピクセル数Ｙと、表示画面の画面サイズを示すインチ数Ｉとを取得する。
また、データ入力部１０１は、外部装置、あるいは操作者の入力処理により、表示画面の仕様データとして、分解能の横ピクセル数Ｘ及び縦ピクセル数Ｙと、表示画面の画面サイズを示すインチ数Ｉとを取得する。
【0028】
距離情報取得部１０２は、視覚的顕著性マップ生成装置１の表示部（後述する１＿Ｓ）近傍に配置される距離センサから、上記表示部から操作者（後述する操作者２００）までの距離を入力する。
【0029】
図２は、本実施形態の視覚的顕著性マップ生成装置１における、利用者と対象物の画像との相対位置を説明する図である。
操作者２００は、視覚的顕著性マップ生成装置１を操作し、視覚的顕著性マップ生成装置１の表示画面に表示される対象物の画像の顕著性を示す顕著性マップを生成させ、対象物のデザインや色などに基づいて、当該対象物が視認された際に視認される顕著性を評価する。
操作者２００は、視覚的顕著性マップ生成装置１を操作し、視覚的顕著性マップ生成装置１の表示画面に表示される対象物の画像の顕著性を示す顕著性マップを生成させ、対象物のデザインや色などに基づいて、当該対象物が視認された際に視認される顕著性を評価する。
【0030】
視覚的顕著性マップ生成装置１の表示部１＿Ｓの表示画面の枠には、距離センサ３００が設置されている。
距離センサ３００は、視覚的顕著性マップ生成装置１の表示部１＿Ｓの表示画面と、操作者２００との距離、すなわち表示画面と操作者２００の視点（観察点）との距離である視距離ｄを計測する。
距離センサ３００は、視覚的顕著性マップ生成装置１の表示部１＿Ｓの表示画面と、操作者２００との距離、すなわち表示画面と操作者２００の視点（観察点）との距離である視距離ｄを計測する。
【0031】
図１に戻り、パラメータ変換部１０３は、距離情報取得部１０２が取得した視点距離Ｌに対応して、上記表示画面に表示された画像上の長さの単位である画像構成単位（例えば、ピクセル数または画素数など）を、実空間における視距離ｄの長さの単位である距離単位（例えば、ｍｍ、ｃｍなど）に変換する単位変換パラメータを生成する。
ここで、パラメータ変換部１０３は、データ入力部１０１を介して、表示画面の仕様データとして、分解能の横ピクセル数Ｘ及び縦ピクセル数と、表示画面の画面サイズを示すインチ数Ｉとを取得する。
ここで、パラメータ変換部１０３は、データ入力部１０１を介して、表示画面の仕様データとして、分解能の横ピクセル数Ｘ及び縦ピクセル数と、表示画面の画面サイズを示すインチ数Ｉとを取得する。
【0032】
そして、パラメータ変換部１０３は、視距離ｄと、表示部１＿Ｓの表示画面の画面サイズのインチ数Ｉと、表示画面の横ピクセル数Ｘ及び縦ピクセル数Ｙの各々とから、距離単位あたりのピクセル数ｎを求める。
このとき、パラメータ変換部１０３は、例えば、距離単位（例えば、１ｍｍ）当りのピクセル数ｎ（ｐｅｌ／ｍｍ）を算出する。この算出する際に用いる計算式は、以下の（１）式である。
このとき、パラメータ変換部１０３は、例えば、距離単位（例えば、１ｍｍ）当りのピクセル数ｎ（ｐｅｌ／ｍｍ）を算出する。この算出する際に用いる計算式は、以下の（１）式である。
【0033】
【数1】
【0034】
そして、パラメータ変換部１０３は、視距離ｄに対応する距離単位（ｍｍ）における視角（後述する視角α）における画面上の長さｐを、上記距離単位当りのピクセル数ｎ及び視角の角度αを用いて、画像構成単位の長さｙ（画像構成単位のピクセル数）に、以下の（２）式を用いて変換する。
【0035】
【数2】
【0036】
図３は、距離単位の視距離ｄに対応する、表示部１＿Ｓの表示画面上の距離単位における長さを、画像構成単位の長さｙ、すなわちピクセル数に変換する処理を説明する概念図である。
図３において、視角αに対応する表示部１＿Ｓの表示画像上における距離ｐは、ｄ×tan（α）である。ここで、角度αは、例えば操作者２００の視角の角度である。
したがって、パラメータ変換部１０３は、距離単位（例えば、１ｍｍ）当りのピクセル数ｎ（ｐｅｌ／ｍｍ）に対して、距離ｐ（＝ｄ×tan（α））を乗算することにより、距離単位での長さｐを、この長さｐと同じ距離単位となる、画像構成単位の長さｙ（すなわち、ピクセル数ｙ）に変換する。
図３において、視角αに対応する表示部１＿Ｓの表示画像上における距離ｐは、ｄ×tan（α）である。ここで、角度αは、例えば操作者２００の視角の角度である。
したがって、パラメータ変換部１０３は、距離単位（例えば、１ｍｍ）当りのピクセル数ｎ（ｐｅｌ／ｍｍ）に対して、距離ｐ（＝ｄ×tan（α））を乗算することにより、距離単位での長さｐを、この長さｐと同じ距離単位となる、画像構成単位の長さｙ（すなわち、ピクセル数ｙ）に変換する。
【0037】
図１に戻り、視角特徴抽出部１０４は、色相特徴及び輝度特徴の各々を、対象物の画像からそれぞれ抽出する。
図４は、本実施形態における視覚的顕著性マップ生成装置１の視角特徴抽出部１０４の構成例を示す図である。
図４において、視角特徴抽出部１０４は、色相特徴抽出部１０４１及び輝度特徴抽出部１０４２の各々を備えている。
図４は、本実施形態における視覚的顕著性マップ生成装置１の視角特徴抽出部１０４の構成例を示す図である。
図４において、視角特徴抽出部１０４は、色相特徴抽出部１０４１及び輝度特徴抽出部１０４２の各々を備えている。
【0038】
色相特徴抽出部１０４１は、入力された対象物の画像を、色成分Ｒ（Red、赤）、色成分Ｇ（Green、緑）及び色成分Ｂ（Blue、青）の各々の画像に分解して、それぞれＲ色成分画像ｒ、Ｇ色成分画像ｇ、Ｂ色成分画像ｂそれぞれを生成する。
そして、色相特徴抽出部１０４１は、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂの各々を用いて、以下の（３）式により、画像におけるピクセル毎に色相Ｒｓ（赤）、色相Ｇｓ（緑）、色相Ｂｓ（青）、色相Ｙｓ（黄）のそれぞれを、色相特徴として求める。
そして、色相特徴抽出部１０４１は、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂの各々を用いて、以下の（３）式により、画像におけるピクセル毎に色相Ｒｓ（赤）、色相Ｇｓ（緑）、色相Ｂｓ（青）、色相Ｙｓ（黄）のそれぞれを、色相特徴として求める。
【0039】
【数3】
【0040】
図５は、対象物の画像から色相Ｒｓ、色相Ｇｓ 、色相Ｂｓ及び色相Ｙｓの各々を求める処理を示す概念図である。
色相特徴抽出部１０４１は、対象物の画像である入力画像を、色成分Ｒ、色成分Ｇ及び色成分Ｂの各々に分解し、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ、Ｂ色成分画像ｂそれぞれを生成する。
色相特徴抽出部１０４１は、対象物の画像である入力画像を、色成分Ｒ、色成分Ｇ及び色成分Ｂの各々に分解し、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ、Ｂ色成分画像ｂそれぞれを生成する。
【0041】
そして、色相特徴抽出部１０４１は、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂの各々のピクセル毎に、上記（３）式に対してそれぞれのピクセルの色成分Ｒ、色成分Ｇ、色成分Ｂのそれぞれの階調度を入力する。
これにより、色相特徴抽出部１０４１は、ピクセル毎の色相Ｒｓ、色相Ｇｓ 、色相Ｂｓ及び色相Ｙｓの各々を求め、色相Ｒｓ画像、色相Ｇｓ画像、色相Ｂｓ画像、色相Ｙｓ画像それぞれを色相画像として生成する。
これにより、色相特徴抽出部１０４１は、ピクセル毎の色相Ｒｓ、色相Ｇｓ 、色相Ｂｓ及び色相Ｙｓの各々を求め、色相Ｒｓ画像、色相Ｇｓ画像、色相Ｂｓ画像、色相Ｙｓ画像それぞれを色相画像として生成する。
【0042】
また、色相特徴抽出部１０４１は、色相Ｒｓ画像の各ピクセルＡの階調度から、色相Ｇｓ画像における上記ピクセルＡの各々に対応するピクセルＢの階調度を減算し、減算結果の絶対値を階調度とする色相特徴画像ＲＧを生成する。
同様に、色相特徴抽出部１０４１は、色相Ｂｓ画像の各ピクセルＣの階調度から、色相Ｙｓ画像における上記ピクセルＣの各々に対応するピクセルＤの階調度を減算し、減算結果の絶対値を階調度とする色相特徴画像ＢＹを生成する。
同様に、色相特徴抽出部１０４１は、色相Ｂｓ画像の各ピクセルＣの階調度から、色相Ｙｓ画像における上記ピクセルＣの各々に対応するピクセルＤの階調度を減算し、減算結果の絶対値を階調度とする色相特徴画像ＢＹを生成する。
【0043】
図４に戻り、輝度特徴抽出部１０４２は、入力された対象物の画像を、色成分Ｒ、色成分Ｇ及び色成分Ｂの各々の画像に分解して、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ、Ｂ色成分画像ｂそれぞれを色相特徴画像として生成する。
そして、輝度特徴抽出部１０４２は、グレースケール画像を生成して、輝度値画像として使用する。
そして、輝度特徴抽出部１０４２は、グレースケール画像を生成して、輝度値画像として使用する。
【0044】
このとき、輝度特徴抽出部１０４２は、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂの各々のピクセル毎に、それぞれのピクセルの色成分Ｒ、色成分Ｇ、色成分Ｂのそれぞれの階調度の平均値（＝（ｒ＋ｇ＋ｂ）／３）を算出する。
そして、輝度特徴抽出部１０４２は、算出した色成分Ｒ、色成分Ｇ、色成分Ｂのそれぞれの階調度の平均値を、ピクセルの各々の輝度値として用いることにより、輝度値画像の生成を行う。
そして、輝度特徴抽出部１０４２は、算出した色成分Ｒ、色成分Ｇ、色成分Ｂのそれぞれの階調度の平均値を、ピクセルの各々の輝度値として用いることにより、輝度値画像の生成を行う。
【0045】
図６は、対象物の画像におけるピクセルの各々の階調度から輝度値を算出し輝度値画像を求める処理を示す概念図である。
図６において、輝度特徴抽出部１０４２は、対象物の画像である入力画像を、色成分Ｒ、色成分Ｇ及び色成分Ｂの各々に分解し、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ、Ｂ色成分画像ｂそれぞれを生成する。
そして、輝度特徴抽出部１０４２は、対象物の画像におけるピクセルの色成分Ｒ、色成分Ｇ及び色成分Ｂの各々の階調度の平均値を、各ピクセルの輝度値として算出し、輝度値画像（グレースケールの画像）を生成する。
図６において、輝度特徴抽出部１０４２は、対象物の画像である入力画像を、色成分Ｒ、色成分Ｇ及び色成分Ｂの各々に分解し、Ｒ色成分画像ｒ、Ｇ色成分画像ｇ、Ｂ色成分画像ｂそれぞれを生成する。
そして、輝度特徴抽出部１０４２は、対象物の画像におけるピクセルの色成分Ｒ、色成分Ｇ及び色成分Ｂの各々の階調度の平均値を、各ピクセルの輝度値として算出し、輝度値画像（グレースケールの画像）を生成する。
【0046】
図１に戻り、特徴別顕著性マップ生成部１０５は、視角特徴抽出部１０４が生成した色相特徴画像（Ｒ色成分画像ｒ、Ｇ色成分画像ｇ、Ｂ色成分画像ｂ）及び輝度特量画像の各々から、方位特徴顕著性マップ、色相特徴顕著性マップ、輝度特徴顕著性マップのそれぞれを生成する。
【0047】
図７は、本実施形態における視覚的顕著性マップ生成装置１の特徴別顕著性マップ生成部１０５の構成例を示す図である。
図７において、特徴別顕著性マップ生成部１０５は、ガウシアンピラミッド生成部１０５１、方位特徴顕著性マップ生成部１０５２、輝度特徴顕著性マップ生成部１０５３、色相特徴顕著性マップ生成部１０５４及び画素値正規化部１０５５の各々を備えている。
図７において、特徴別顕著性マップ生成部１０５は、ガウシアンピラミッド生成部１０５１、方位特徴顕著性マップ生成部１０５２、輝度特徴顕著性マップ生成部１０５３、色相特徴顕著性マップ生成部１０５４及び画素値正規化部１０５５の各々を備えている。
【0048】
ガウシアンピラミッド生成部１０５１は、色相特徴画像ＲＧ及び色相特徴画像ＢＹと輝度値画像との各々のガウシアンピラミッドを、特徴別ガウシアンピラミッド（色相特徴ガウシアンピラミッド画像、輝度特徴ガウシアンピラミッド画像）として生成する。
【0049】
ここで、ガウシアンピラミッド生成部１０５１は、３種類の色相画像の各々を、画像サイズを１／４とする、すなわち縦ピクセル数及び横ピクセル数をそれぞれ１／２（半分）とする、解像度を低減する処理をｎ回繰り返して、色相特徴画像ＲＧ及び色相特徴画像ＢＹのそれぞれのｎ段階の色相特徴ガウシアンピラミッド画像を生成する。
そして、ガウシアンピラミッド生成部１０５１は、生成した色相特徴ガウシアンピラミッド画像の各々を、ガウシアンピラミッド画像記憶部１１０に書き込んで記憶させる。
そして、ガウシアンピラミッド生成部１０５１は、生成した色相特徴ガウシアンピラミッド画像の各々を、ガウシアンピラミッド画像記憶部１１０に書き込んで記憶させる。
【0050】
同様に、ガウシアンピラミッド生成部１０５１は、輝度値画像の画像サイズを１／４とする、すなわち縦ピクセル数及び横ピクセル数をそれぞれ１／２とする、解像度を順次低減させる処理をｎ回繰り返して、輝度値画像のｎ段階の輝度特徴ガウシアンピラミッド画像を生成する。
そして、ガウシアンピラミッド生成部１０５１は、生成した輝度特徴ガウシアンピラミッド画像の各々を、ガウシアンピラミッド画像記憶部１１０に書き込んで記憶させる。
そして、ガウシアンピラミッド生成部１０５１は、生成した輝度特徴ガウシアンピラミッド画像の各々を、ガウシアンピラミッド画像記憶部１１０に書き込んで記憶させる。
【0051】
方位特徴顕著性マップ生成部１０５２は、ガウシアンピラミッド画像記憶部１１０から、ｎ段階の、すなわちｎ枚の輝度特徴ガウシアンピラミッド画像の各々を読み出す。
そして、方位特徴顕著性マップ生成部１０５２は、ガボールフィルタを用いて、輝度特徴ガウシアンピラミッド画像の各々から、それぞれの段階の輝度特徴ガウシアンピラミッド画像に対応する方位特徴ガウシアンピラミッド画像を生成する。
すなわち、方位特徴顕著性マップ生成部１０５２は、例えば、以下に示すガボールフィルタの定義式の（４）式を用いて、輝度特徴ガウシアンピラミッド画像から所定方位（角度θの角度方向）における方位特徴を抽出する。
そして、方位特徴顕著性マップ生成部１０５２は、ガボールフィルタを用いて、輝度特徴ガウシアンピラミッド画像の各々から、それぞれの段階の輝度特徴ガウシアンピラミッド画像に対応する方位特徴ガウシアンピラミッド画像を生成する。
すなわち、方位特徴顕著性マップ生成部１０５２は、例えば、以下に示すガボールフィルタの定義式の（４）式を用いて、輝度特徴ガウシアンピラミッド画像から所定方位（角度θの角度方向）における方位特徴を抽出する。
【0052】
下記の（４）式において、波長λは波長（画素周期）であり、θは特徴を検出する方向の角度であり、φは位相であり、σは偏差であり、γは楕円率である。ここで、位相φ及び楕円率γに関しては、ガボールフィルタを用いて方位特徴を抽出する際に用いられる一般的な数値を用いる。ここで、視角の角度αを小さく、あるいは視距離ｄを短くすることにより、輝度特徴ガウシアンピラミッド画像（グレースケール画像）における対象物の詳細な方向特徴を検出することができ、一方、視角の角度αを大きく、あるいは視距離ｄを長くすることにより、輝度特徴ガウシアンピラミッド画像における大まかな特徴を検出する。
【0053】
【数4】
【0054】
また、（４）式におけるｘ’及びｙ’の各々は、以下の（５）式により求められる。
【0055】
【数5】
【0056】
また、（４）式における偏差σは、波長λを用いて下記（６）式において求められる。この（４）式において、係数値ｂは帯域幅であり、予め設定した数値としても、あるいは任意に設定する数値を用いてもよい。また、πは円周率である。
【0057】
【数6】
【0058】
上記（４）式及び（６）式における波長λとして、パラメータ変換部１０３が算出したピクセル数ｙを用いる。これにより、視距離ｄ及び視角αの各々により求まる表示画面上における距離単位で示される長さｐを、画像構成単位で表した長さｙを波長λとして使用することができる。
すなわち、視距離ｄ及び視角αの各々を変更することにより、視距離ｄ、視角αそれぞれの組合せに対応した方位特徴を、輝度特徴ガウシアンピラミッド画像から任意に抽出することができる。
そして、方位特徴顕著性マップ生成部１０５２は、（４）式により輝度特徴ガウシアンピラミッド画像における各ピクセルの方位特徴を画素値として求め、方位特徴ガウシアンピラミッド画像を生成する。
すなわち、視距離ｄ及び視角αの各々を変更することにより、視距離ｄ、視角αそれぞれの組合せに対応した方位特徴を、輝度特徴ガウシアンピラミッド画像から任意に抽出することができる。
そして、方位特徴顕著性マップ生成部１０５２は、（４）式により輝度特徴ガウシアンピラミッド画像における各ピクセルの方位特徴を画素値として求め、方位特徴ガウシアンピラミッド画像を生成する。
【0059】
図８は、輝度値画像から輝度特徴ガウシアンピラミッド画像を生成し、輝度特徴ガウシアンピラミッド画像から方位特徴ガウシアンピラミッド画像を生成する処理を説明する概念図である。
図８において、輝度値画像（すなわち、輝度特徴ガウシアンピラミッド画像）３０１＿１は、輝度特徴抽出部１０４２が生成したグレースケール画像である。輝度特徴ガウシアンピラミッド画像３－１＿２は、画像分解能を低減する分解能低減処理Ｆ１により輝度値画像３０１＿１の縦ピクセル数及び横ピクセル数をそれぞれ１／２（半分）として生成されている。
例えば、輝度値画像３０１＿１における縦ピクセルが５１２個、横ピクセルが５１２個である場合、輝度特徴ガウシアンピラミッド画像３０１＿２においては、縦ピクセルが２５６個、横ピクセルが２５６個となる。
図８において、輝度値画像（すなわち、輝度特徴ガウシアンピラミッド画像）３０１＿１は、輝度特徴抽出部１０４２が生成したグレースケール画像である。輝度特徴ガウシアンピラミッド画像３－１＿２は、画像分解能を低減する分解能低減処理Ｆ１により輝度値画像３０１＿１の縦ピクセル数及び横ピクセル数をそれぞれ１／２（半分）として生成されている。
例えば、輝度値画像３０１＿１における縦ピクセルが５１２個、横ピクセルが５１２個である場合、輝度特徴ガウシアンピラミッド画像３０１＿２においては、縦ピクセルが２５６個、横ピクセルが２５６個となる。
【0060】
また、輝度特徴ガウシアンピラミッド画像３０１＿３は、画像分解能を低減する分解能低減処理Ｆ１により輝度特徴ガウシアンピラミッド画像３０１＿２の縦ピクセル数及び横ピクセル数をそれぞれ１／２として生成されている。
例えば、輝度特徴ガウシアンピラミッド画像３０１＿２における縦ピクセルが２５６個、横ピクセルが２５６個である場合、輝度特徴ガウシアンピラミッド画像３０１＿３においては、縦ピクセルが１２８個、横ピクセルが１２８個となる。
上述した分化能低減処理をｎ－１回、順次繰返すことにより、ｎ段階の輝度特徴ガウシアンピラミッド画像として、輝度値画像３０１＿１、輝度特徴ガウシアンピラミッド画像３－１＿２から輝度特徴ガウシアンピラミッド画像３－１＿ｎのｎ枚の輝度特徴ガウシアンピラミッド画像が生成される。輝度値画像３０１＿１は、ガウシアンピラミッドの頂点（ガウシアンピラミッドの１段目）としての輝度特徴ガウシアンピラミッド画像である。
例えば、輝度特徴ガウシアンピラミッド画像３０１＿２における縦ピクセルが２５６個、横ピクセルが２５６個である場合、輝度特徴ガウシアンピラミッド画像３０１＿３においては、縦ピクセルが１２８個、横ピクセルが１２８個となる。
上述した分化能低減処理をｎ－１回、順次繰返すことにより、ｎ段階の輝度特徴ガウシアンピラミッド画像として、輝度値画像３０１＿１、輝度特徴ガウシアンピラミッド画像３－１＿２から輝度特徴ガウシアンピラミッド画像３－１＿ｎのｎ枚の輝度特徴ガウシアンピラミッド画像が生成される。輝度値画像３０１＿１は、ガウシアンピラミッドの頂点（ガウシアンピラミッドの１段目）としての輝度特徴ガウシアンピラミッド画像である。
【0061】
ここで、ガウシアンピラミッドを生成する場合、ガウシアンブラー（ガウシアンフィルタ）によって、輝度値画像をぼかすことにより行う構成としてもよい。そして、このガウシアンブラーにおけるぼかしの強度を設定する偏差σとして、ガボールフィルタにおける偏差σを用いる。これにより、ぼかしの強度を視距離ｄに対応させることができる。
【0062】
そして、輝度特徴ガウシアンピラミッド画像３０１＿１から輝度特徴ガウシアンピラミッド画像３０１＿ｎの各々に対して、上述したガボールフィルタによる方位特徴を検出するフィルタ処理Ｆ２を行う。
このとき、方位特徴顕著性マップ生成部１０５２は、（４）式における方位の角度θを、例えば０度、４５度、９０度、１３５度の各々として、４つの角度θに対応する方位特徴それぞれを、輝度特徴ガウシアンピラミッド画像３０１＿１から輝度特徴ガウシアンピラミッド画像３０１＿ｎ毎に生成する。
このとき、方位特徴顕著性マップ生成部１０５２は、（４）式における方位の角度θを、例えば０度、４５度、９０度、１３５度の各々として、４つの角度θに対応する方位特徴それぞれを、輝度特徴ガウシアンピラミッド画像３０１＿１から輝度特徴ガウシアンピラミッド画像３０１＿ｎ毎に生成する。
【0063】
方位特徴顕著性マップ生成部１０５２は、例えば、角度θを０度、４５度、９０度、１３５度の各々に変更して、輝度特徴ガウシアンピラミッド画像３０１＿１から角度θの各々に対応する方位特徴ガウシアンピラミッド画像４０１＿１（０度、４５度、９０度、１３５度）を生成する。
図７においては、角度θが０度の場合に生成される方位特徴ガウシアンピラミッド画像４０１＿１から方位特徴ガウシアンピラミッド画像４０１＿ｎを示している。したがって、方位特徴ガウシアンピラミッド画像４０１＿１から方位特徴ガウシアンピラミッド画像４０１＿ｎの組が、角度θ毎に４組生成される。
図７においては、角度θが０度の場合に生成される方位特徴ガウシアンピラミッド画像４０１＿１から方位特徴ガウシアンピラミッド画像４０１＿ｎを示している。したがって、方位特徴ガウシアンピラミッド画像４０１＿１から方位特徴ガウシアンピラミッド画像４０１＿ｎの組が、角度θ毎に４組生成される。
【0064】
同様に、方位特徴顕著性マップ生成部１０５２は、例えば、角度θを０度、４５度、９０度、１３５度の各々に変更して、輝度特徴ガウシアンピラミッド画像３０１＿２～輝度特徴ガウシアンピラミッド画像３０１＿ｎから、角度θの各々に対応する方位特徴ガウシアンピラミッド画像４０１＿２から方位特徴ガウシアンピラミッド画像４０１＿ｎ（０度、４５度、９０度、１３５度）を生成する。
また、上述したフィルタ処理Ｆ２において、方位を変更するために角度θを０度、４５度、９０度、１３５度とする以外、（４）式におけるフィルタのパラメータである波長λ、位相φ、偏差σ及び楕円率γの各々は、同一の数値が用いられる。
また、上述したフィルタ処理Ｆ２において、方位を変更するために角度θを０度、４５度、９０度、１３５度とする以外、（４）式におけるフィルタのパラメータである波長λ、位相φ、偏差σ及び楕円率γの各々は、同一の数値が用いられる。
【0065】
図７に戻り、方位特徴顕著性マップ生成部１０５２は、生成した方位特徴ガウシアンピラミッド画像４０１＿１から方位特徴ガウシアンピラミッド画像４０１＿ｎの各々を用いて、方位毎に４つの方位特徴顕著性マップ（０度、４５度、９０度、１３５度）を生成する。
輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿１～輝度特徴ガウシアンピラミッド画像３０１＿ｎから、輝度特徴顕著性マップを生成する。
輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿１～輝度特徴ガウシアンピラミッド画像３０１＿ｎから、輝度特徴顕著性マップを生成する。
【0066】
図９は、輝度特徴顕著性マップ生成部１０５３による輝度特徴顕著性マップの生成を説明する概念図である。図９においては、輝度特徴ガウシアンピラミッド画像３０１＿４～輝度特徴ガウシアンピラミッド画像３０１＿ｎについては省略してあるが、輝度特徴ガウシアンピラミッド画像３０１＿２及び輝度特徴ガウシアンピラミッド画像３０１＿３の各々と同様の処理が行われる。
図９において、方位特徴顕著性マップ生成部１０５２は、輝度特徴ガウシアンピラミッド画像３０１＿６及び輝度特徴ガウシアンピラミッド画像３０１＿７の各々の画像サイズの拡大処理Ｆ４を行ない、それぞれ比較輝度ガウシアンピラミッド画像３０２＿６、比較輝度ガウシアンピラミッド画像３０２＿７のそれぞれを生成する。
図９において、方位特徴顕著性マップ生成部１０５２は、輝度特徴ガウシアンピラミッド画像３０１＿６及び輝度特徴ガウシアンピラミッド画像３０１＿７の各々の画像サイズの拡大処理Ｆ４を行ない、それぞれ比較輝度ガウシアンピラミッド画像３０２＿６、比較輝度ガウシアンピラミッド画像３０２＿７のそれぞれを生成する。
【0067】
拡大処理Ｆ４は、輝度特徴ガウシアンピラミッド画像３０１の各々を、減算する対象の輝度特徴ガウシアンピラミッド画像３０１の縦のピクセル数及び横のピクセル数を合わせる処理を示す。
このとき、輝度特徴顕著性マップ生成部１０５３は、例えば、輝度特徴ガウシアンピラミッド画像３０１＿３の各ピクセルの諧調度から、輝度特徴ガウシアンピラミッド画像３０１＿６における対応するピクセルの諧調度を減算する場合、輝度特徴ガウシアンピラミッド画像３０１＿６の各々の縦のピクセル数及び横のピクセル数を４倍の個数にコピー（複製の作成）することにより行う。また、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿３の各ピクセルの諧調度から、輝度特徴ガウシアンピラミッド画像３０１＿７における対応するピクセルの諧調度を減算する場合、輝度特徴ガウシアンピラミッド画像３０１＿７の各々の縦のピクセル数及び横のピクセル数を８倍の個数にコピー（複製の作成）することにより行う。
このとき、輝度特徴顕著性マップ生成部１０５３は、例えば、輝度特徴ガウシアンピラミッド画像３０１＿３の各ピクセルの諧調度から、輝度特徴ガウシアンピラミッド画像３０１＿６における対応するピクセルの諧調度を減算する場合、輝度特徴ガウシアンピラミッド画像３０１＿６の各々の縦のピクセル数及び横のピクセル数を４倍の個数にコピー（複製の作成）することにより行う。また、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿３の各ピクセルの諧調度から、輝度特徴ガウシアンピラミッド画像３０１＿７における対応するピクセルの諧調度を減算する場合、輝度特徴ガウシアンピラミッド画像３０１＿７の各々の縦のピクセル数及び横のピクセル数を８倍の個数にコピー（複製の作成）することにより行う。
【0068】
これにより、輝度特徴ガウシアンピラミッド画像３０１＿６及び輝度特徴ガウシアンピラミッド画像３０１＿７の各々は、輝度特徴ガウシアンピラミッド画像３０１＿３と同様の縦ピクセル及び横ピクセル数となる。
このとき、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿３と同様の縦ピクセル及び横ピクセル数として生成した輝度特徴ガウシアンピラミッド画像３０１＿６及び輝度特徴ガウシアンピラミッド画像３０１＿７の各々を、それぞれ比較輝度特徴ガウシアンピラミッド画像３０２＿６及び比較輝度特徴ガウシアンピラミッド画像３０２＿７として出力する。
このとき、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿３と同様の縦ピクセル及び横ピクセル数として生成した輝度特徴ガウシアンピラミッド画像３０１＿６及び輝度特徴ガウシアンピラミッド画像３０１＿７の各々を、それぞれ比較輝度特徴ガウシアンピラミッド画像３０２＿６及び比較輝度特徴ガウシアンピラミッド画像３０２＿７として出力する。
【0069】
そして、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿３の各ピクセルＥの階調度から、比較輝度特徴ガウシアンピラミッド画像３０２＿６における上記ピクセルＥの各々に対応するピクセルＦの階調度を減算し、減算結果を各ピクセルの階調度とする輝度差分ガウシアンピラミッド画像５０１＿１を生成する。
同様に、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿３の各ピクセルＥの階調度から、比較輝度特徴ガウシアンピラミッド画像３０２＿７における上記ピクセルＥの各々に対応するピクセルＧの階調度を減算し、減算結果を各ピクセルの階調度とする輝度差分ガウシアンピラミッド画像５０１＿２を生成する。
同様に、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿３の各ピクセルＥの階調度から、比較輝度特徴ガウシアンピラミッド画像３０２＿７における上記ピクセルＥの各々に対応するピクセルＧの階調度を減算し、減算結果を各ピクセルの階調度とする輝度差分ガウシアンピラミッド画像５０１＿２を生成する。
【0070】
図示されていない輝度特徴ガウシアンピラミッド画像３０１＿４から輝度特徴ガウシアンピラミッド画像３０１＿９の各々を用いて、輝度差分ガウシアンピラミッド画像５０１＿３から輝度差分ガウシアンピラミッド画像５０１＿６のそれぞれも生成される。
このとき、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿４の各々のピクセルの輝度値から、比較輝度特徴ガウシアンピラミッド画像３０２＿７のピクセルの輝度値を減算し、輝度差分ガウシアンピラミッド画像５０１＿３を生成する。
また、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿４の各々のピクセルの諧調度から、比較輝度特徴ガウシアンピラミッド画像３０２＿８のピクセルの輝度値を減算し、輝度差分ガウシアンピラミッド画像５０１＿４を生成する。
このとき、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿４の各々のピクセルの輝度値から、比較輝度特徴ガウシアンピラミッド画像３０２＿７のピクセルの輝度値を減算し、輝度差分ガウシアンピラミッド画像５０１＿３を生成する。
また、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿４の各々のピクセルの諧調度から、比較輝度特徴ガウシアンピラミッド画像３０２＿８のピクセルの輝度値を減算し、輝度差分ガウシアンピラミッド画像５０１＿４を生成する。
【0071】
輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿５の各々のピクセルの諧調度から、比較輝度特徴ガウシアンピラミッド画像３０２＿８のピクセルの輝度値を減算し、輝度差分ガウシアンピラミッド画像５０１＿５を生成する。
また、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿５の各々のピクセルの諧調度から、比較輝度特徴ガウシアンピラミッド画像３０２＿９のピクセルの輝度値を減算し、輝度差分ガウシアンピラミッド画像５０１＿６を生成する。
そして、輝度特徴顕著性マップ生成部１０５３は、輝度差分ガウシアンピラミッド画像５０１＿１から輝度差分ガウシアンピラミッド画像５０１＿６の各々を、輝度特徴ガウシアンピラミッド画像３０１＿１と、縦のピクセル数及び横のピクセル数を合わせる拡大処理（拡大処理Ｆ４と同様）を行い、ガウシアン輝度差分ガウシアンピラミッド画像５０１＿１から輝度差分ガウシアンピラミッド画像５０１＿６の各々における対応する位置のピクセルそれぞれの輝度値を加算し、加算結果を階調度とする輝度特徴顕著性マップを生成する。
輝度特徴顕著性マップ生成部１０５３は、生成した輝度特徴顕著性マップを特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
また、輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像３０１＿５の各々のピクセルの諧調度から、比較輝度特徴ガウシアンピラミッド画像３０２＿９のピクセルの輝度値を減算し、輝度差分ガウシアンピラミッド画像５０１＿６を生成する。
そして、輝度特徴顕著性マップ生成部１０５３は、輝度差分ガウシアンピラミッド画像５０１＿１から輝度差分ガウシアンピラミッド画像５０１＿６の各々を、輝度特徴ガウシアンピラミッド画像３０１＿１と、縦のピクセル数及び横のピクセル数を合わせる拡大処理（拡大処理Ｆ４と同様）を行い、ガウシアン輝度差分ガウシアンピラミッド画像５０１＿１から輝度差分ガウシアンピラミッド画像５０１＿６の各々における対応する位置のピクセルそれぞれの輝度値を加算し、加算結果を階調度とする輝度特徴顕著性マップを生成する。
輝度特徴顕著性マップ生成部１０５３は、生成した輝度特徴顕著性マップを特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
【0072】
上述したように、輝度特徴ガウシアンピラミッド画像３０１＿２から輝度特徴ガウシアンピラミッド画像３０１＿ｎのように、２ガウシアンピラミッドとして縮小された輝度特徴ガウシアンピラミッド画像３０１＿２に対して拡大処理Ｆ４を行うことにより、ブラー（ぼかし）がかかった画像（比較輝度特徴ガウシアンピラミッド画像３０２）となる。
そして、輝度特徴ガウシアンピラミッド画像３０１から比較輝度特徴ガウシアンピラミッド画像３０２を減算して輝度値の差分を取ることにより、輝度差分ガウシアンピラミッド画像におけるエッジ成分を得ることができる。
そして、輝度特徴ガウシアンピラミッド画像３０１から比較輝度特徴ガウシアンピラミッド画像３０２を減算して輝度値の差分を取ることにより、輝度差分ガウシアンピラミッド画像におけるエッジ成分を得ることができる。
【0073】
このため、輝度差分ガウシアンピラミッド画像を生成する場合、画像間のピクセル値の階調度の差分を取得する際、ＤｏＧ（Difference of Gaussian）フィルタを用いる構成としてもよい。
ここで、輝度特徴顕著性マップ生成部１０５３は、例えば、２種類のσで定義された上記ＤｏＧフィルタを用いることにより、上述した輝度差分ガウシアンピラミッド画像５０１を作成する。
ここで、輝度特徴顕著性マップ生成部１０５３は、例えば、２種類のσで定義された上記ＤｏＧフィルタを用いることにより、上述した輝度差分ガウシアンピラミッド画像５０１を作成する。
【0074】
すなわち、ＤｏＧフィルタの演算を行う以下の（７）式において、２種類の偏差σとして、偏差σｅｘ（視角０．５度から２度の間）と、偏差σｉｎｈ（視角１０度から２０度の間）で設定する。
【0075】
【数7】
【0076】
この上記（７）式のＤｏＧフィルタにより、偏差σｅｘ及び偏差σｉｎｈで定義された輝度差分ガウシアンピラミッド画像におけるピクセルの各々の輝度値の差分を求める。このとき、パラメータ変換部１０３は、偏差σｅｘ及び偏差σｉｎｈの各々を、（６）式で説明したように、視距離に対応する画像構成要素であるピクセル数により生成する。
【0077】
方位特徴顕著性マップ生成部１０５２は、上述した輝度特徴顕著性マップ生成部１０５３の輝度顕著性マップの生成と同様に、４個の角度θ（０度、４５度、９０度、１３５度）の各々に対応する方位における方位特徴顕著性マップ（０度、４５度、９０度、１３５度）をそれぞれ生成する。
すなわち、方位特徴顕著性マップ生成部１０５２は、例えば、角度θが０度の方位顕著性マップを生成する場合、角度θが０度で生成したガウシアンピラミッドにおける方位特徴ガウシアンピラミッド画像４０１＿２から方位特徴ガウシアンピラミッド画像４０１＿ｎの各々をガウシアンピラミッド画像記憶部１１０からそれぞれ読み出す。
そして、方位特徴顕著性マップ生成部１０５２は、輝度特徴顕著性マップ生成部１０５３における拡大処理Ｆ４と同様に、方位特徴ガウシアンピラミッド画像４０１＿２～方位特徴ガウシアンピラミッド画像４０１＿ｎの各々から、比較方位ガウシアンピラミッド画像４０２＿２～比較方位ガウシアンピラミッド画像４０２＿ｎのそれぞれを生成する。
すなわち、方位特徴顕著性マップ生成部１０５２は、例えば、角度θが０度の方位顕著性マップを生成する場合、角度θが０度で生成したガウシアンピラミッドにおける方位特徴ガウシアンピラミッド画像４０１＿２から方位特徴ガウシアンピラミッド画像４０１＿ｎの各々をガウシアンピラミッド画像記憶部１１０からそれぞれ読み出す。
そして、方位特徴顕著性マップ生成部１０５２は、輝度特徴顕著性マップ生成部１０５３における拡大処理Ｆ４と同様に、方位特徴ガウシアンピラミッド画像４０１＿２～方位特徴ガウシアンピラミッド画像４０１＿ｎの各々から、比較方位ガウシアンピラミッド画像４０２＿２～比較方位ガウシアンピラミッド画像４０２＿ｎのそれぞれを生成する。
【0078】
方位特徴顕著性マップ生成部１０５２は、方位特徴ガウシアンピラミッド画像４０１＿１の各ピクセルＨの階調度から、比較方位ガウシアンピラミッド画像４０２＿２における上記ピクセルＨの各々に対応するピクセルＩの階調度を減算し、減算結果を各ピクセルの階調度とする方位差分ガウシアンピラミッド画像５０２＿２を生成する。
同様に、方位特徴顕著性マップ生成部１０５２は、方位特徴ガウシアンピラミッド画像４０１＿１の各ピクセルの階調度から、比較方位ガウシアンピラミッド画像４０２＿３～比較方位ガウシアンピラミッド画像４０２＿ｎの各々のピクセルの階調度を減算し、減算結果を階調度とする方位差分ガウシアンピラミッド画像５０２＿３から方位差分ガウシアンピラミッド画像５０２＿ｎのそれぞれを生成する。
同様に、方位特徴顕著性マップ生成部１０５２は、方位特徴ガウシアンピラミッド画像４０１＿１の各ピクセルの階調度から、比較方位ガウシアンピラミッド画像４０２＿３～比較方位ガウシアンピラミッド画像４０２＿ｎの各々のピクセルの階調度を減算し、減算結果を階調度とする方位差分ガウシアンピラミッド画像５０２＿３から方位差分ガウシアンピラミッド画像５０２＿ｎのそれぞれを生成する。
【0079】
そして、方位特徴顕著性マップ生成部１０５２は、方位差分ガウシアンピラミッド画像５０２＿２から方位差分ガウシアンピラミッド画像５０２＿ｎの各々における対応する位置のピクセルそれぞれの輝度値を加算し、加算結果を階調度とする角度θが９０度の方位の方位特徴顕著性マップを生成する。
輝度特徴顕著性マップ生成部１０５３は、生成した方位特徴顕著性マップ（９０度）を特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
また、輝度特徴顕著性マップ生成部１０５３は、上述した方位特徴顕著性マップ（９０度）の生成と同様の処理により、角度θが０度、４５度、１３５度の方位の方位特徴顕著性マップ（０度）、方位特徴顕著性マップ（４５度）、方位特徴顕著性マップ（１３５度）を生成し、特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
輝度特徴顕著性マップ生成部１０５３は、生成した方位特徴顕著性マップ（９０度）を特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
また、輝度特徴顕著性マップ生成部１０５３は、上述した方位特徴顕著性マップ（９０度）の生成と同様の処理により、角度θが０度、４５度、１３５度の方位の方位特徴顕著性マップ（０度）、方位特徴顕著性マップ（４５度）、方位特徴顕著性マップ（１３５度）を生成し、特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
【0080】
色相特徴顕著性マップ生成部１０５４は、上述した輝度特徴顕著性マップ生成部１０５３の輝度顕著性マップの生成と同様に、 色相特徴画像ＲＧ及び色相特徴画像ＢＹの各々に対応する色相特徴顕著性マップ（ＲＧ、ＢＹ）を生成する。
すなわち、方位特徴顕著性マップ生成部１０５２は、例えば、色相特徴画像ＲＧの色相特徴顕著性マップを生成する場合、色相特徴画像から生成したガウシアンピラミッドにおける色相特徴ガウシアンピラミッド画像ＲＧ６０１＿２から色相特徴ガウシアンピラミッド画像ＲＧ６０１＿ｎの各々をガウシアンピラミッド画像記憶部１１０からそれぞれ読み出す。
そして、色相特徴顕著性マップ生成部１０５４は、輝度特徴顕著性マップ生成部１０５３における拡大処理Ｆ４と同様に、色相特徴ガウシアンピラミッド画像ＲＧ６０１＿２（ガウシアンピラミッドの２段目）～色相特徴ガウシアンピラミッド画像ＲＧ６０１＿ｎ（ガウシアンピラミッドのｎ段目）の各々から、比較色相ガウシアンピラミッド画像ＲＧ６０２＿２～比較色相ガウシアンピラミッド画像ＲＧ６０２＿ｎのそれぞれを生成する。
すなわち、方位特徴顕著性マップ生成部１０５２は、例えば、色相特徴画像ＲＧの色相特徴顕著性マップを生成する場合、色相特徴画像から生成したガウシアンピラミッドにおける色相特徴ガウシアンピラミッド画像ＲＧ６０１＿２から色相特徴ガウシアンピラミッド画像ＲＧ６０１＿ｎの各々をガウシアンピラミッド画像記憶部１１０からそれぞれ読み出す。
そして、色相特徴顕著性マップ生成部１０５４は、輝度特徴顕著性マップ生成部１０５３における拡大処理Ｆ４と同様に、色相特徴ガウシアンピラミッド画像ＲＧ６０１＿２（ガウシアンピラミッドの２段目）～色相特徴ガウシアンピラミッド画像ＲＧ６０１＿ｎ（ガウシアンピラミッドのｎ段目）の各々から、比較色相ガウシアンピラミッド画像ＲＧ６０２＿２～比較色相ガウシアンピラミッド画像ＲＧ６０２＿ｎのそれぞれを生成する。
【0081】
色相特徴顕著性マップ生成部１０５４は、色相特徴ガウシアンピラミッド画像ＲＧ６０１＿１（ガウシアンピラミッドの１段目）の各ピクセルＪの階調度から、比較色相ガウシアンピラミッド画像ＲＧ６０２＿２における上記ピクセルＪの各々に対応するピクセルＫの階調度を減算し、減算結果を各ピクセルの階調度とする色相差分ガウシアンピラミッド画像５０３＿２を生成する。
同様に、色相特徴顕著性マップ生成部１０５４は、色相特徴ガウシアンピラミッド画像ＲＧ６０１＿１の各ピクセルの階調度から、比較色相ガウシアンピラミッド画像ＲＧ６０２＿３～比較色相ガウシアンピラミッド画像ＲＧ６０２＿ｎの各々のピクセルの階調度を減算し、減算結果を階調度とする色相差分ガウシアンピラミッド画像５０３＿３から色相差分ガウシアンピラミッド画像ＲＧ５０３＿ｎのそれぞれを生成する。
同様に、色相特徴顕著性マップ生成部１０５４は、色相特徴ガウシアンピラミッド画像ＲＧ６０１＿１の各ピクセルの階調度から、比較色相ガウシアンピラミッド画像ＲＧ６０２＿３～比較色相ガウシアンピラミッド画像ＲＧ６０２＿ｎの各々のピクセルの階調度を減算し、減算結果を階調度とする色相差分ガウシアンピラミッド画像５０３＿３から色相差分ガウシアンピラミッド画像ＲＧ５０３＿ｎのそれぞれを生成する。
【0082】
そして、色相特徴顕著性マップ生成部１０５４は、色相差分ガウシアンピラミッド画像５０３＿２から色相差分ガウシアンピラミッド画像５０３＿ｎの各々における対応する位置のピクセルそれぞれの輝度値を加算し、加算結果を階調度とする、色相特徴画像ＲＧの色相特量顕著性マップ（ＲＧ）を生成する。
色相特徴顕著性マップ生成部１０５４は、生成した色相特徴顕著性マップ（ＲＧ）を特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
また、色相特徴顕著性マップ生成部１０５４は、上述した色相特量顕著性マップ（ＲＧ）の生成と同様の処理により、色相特徴画像ＢＹに対応する色相特徴顕著性マップ（ＢＹ）を生成し、特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
色相特徴顕著性マップ生成部１０５４は、生成した色相特徴顕著性マップ（ＲＧ）を特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
また、色相特徴顕著性マップ生成部１０５４は、上述した色相特量顕著性マップ（ＲＧ）の生成と同様の処理により、色相特徴画像ＢＹに対応する色相特徴顕著性マップ（ＢＹ）を生成し、特徴別顕著性マップ記憶部１１１に書き込んで記憶させる。
【0083】
画素値正規化部１０５５は、特徴別顕著性マップ記憶部１１１から、輝度特徴顕著性マップと、方位特徴顕著性マップ（０度、９０度、１８０度、２７０度）と、色相特徴顕著性マップ（ＲＧ、ＢＹ）との、計７個の各々のマップをそれぞれ読み出す。
そして、画素値正規化部１０５５は、読み出した輝度特徴顕著性マップ、方位特徴顕著性マップ（０度、９０度、１８０度、２７０度）、色相特徴顕著性マップ（ＲＧ、ＢＹ）の各々の７個のマップ毎に、階調度の正規化を行う。この階調度の正規化は、周囲の領域に比較して階調度の高い領域をより強調させ、周囲の領域と差がない階調度の領域をより差を無くして平坦な数値に変更するために行われる。
そして、画素値正規化部１０５５は、読み出した輝度特徴顕著性マップ、方位特徴顕著性マップ（０度、９０度、１８０度、２７０度）、色相特徴顕著性マップ（ＲＧ、ＢＹ）の各々の７個のマップ毎に、階調度の正規化を行う。この階調度の正規化は、周囲の領域に比較して階調度の高い領域をより強調させ、周囲の領域と差がない階調度の領域をより差を無くして平坦な数値に変更するために行われる。
【0084】
画素値正規化部１０５５は、輝度特徴顕著性マップのマップ画像を例として、以下にマップ画像の階調度の正規化の処理を説明する。
＃１： 画素値正規化部１０５５は、輝度特徴顕著性マップの各々のピクセルの階調度を比較し、最も大きな階調度を画像最大値として抽出する。
そして、画素値正規化部１０５５は、輝度特徴顕著性マップのマップ画像の各々のピクセルの階調度を、それぞれ上記画像最大値により除算し、階調度を０から１とする正規化を行う。
＃１： 画素値正規化部１０５５は、輝度特徴顕著性マップの各々のピクセルの階調度を比較し、最も大きな階調度を画像最大値として抽出する。
そして、画素値正規化部１０５５は、輝度特徴顕著性マップのマップ画像の各々のピクセルの階調度を、それぞれ上記画像最大値により除算し、階調度を０から１とする正規化を行う。
【0085】
＃２： 画素値正規化部１０５５は、輝度特徴顕著性マップのマップ画像を、複数の領域に分割し、分割マップ画像を生成する。
＃３： 画素値正規化部１０５５は、生成した分割マップ画像の各々におけるピクセルの階調度（規格値）を比較し、最大の階調度（規格値）として分割画像最大値を抽出する。
そして、画素値正規化部１０５５は、分割マップ画像の各々の分割画像最大値の平均値を算出し、算出結果を最大値平均として求める。
＃４： 画素値正規化部１０５５は、画像最大値から最大値平均との差分を算出し、算出結果を二乗して計数Ｋとする。
＃３： 画素値正規化部１０５５は、生成した分割マップ画像の各々におけるピクセルの階調度（規格値）を比較し、最大の階調度（規格値）として分割画像最大値を抽出する。
そして、画素値正規化部１０５５は、分割マップ画像の各々の分割画像最大値の平均値を算出し、算出結果を最大値平均として求める。
＃４： 画素値正規化部１０５５は、画像最大値から最大値平均との差分を算出し、算出結果を二乗して計数Ｋとする。
【0086】
＃５： 画素値正規化部１０５５は、輝度特徴顕著性マップのマップ画像におけるピクセルの各々の階調度に対して、任意の回数上記計数Ｋを乗算して新たな輝度特徴顕著性マップのマップ画像を生成する。
＃６： 画素値正規化部１０５５は、新たな輝度特徴顕著性マップのマップ画像を用いて、上記＃１から＃５の処理を予め設定された回数繰返す。
そして、画素値正規化部１０５５は、所定の回数の後に、上述した処理により、最後に得られた新たな輝度特徴顕著性マップのマップ画像を特徴別顕著性マップ（輝度特徴）とし、特徴別顕著性マップ記憶部１１１に対して書き込んで記憶させる。
＃６： 画素値正規化部１０５５は、新たな輝度特徴顕著性マップのマップ画像を用いて、上記＃１から＃５の処理を予め設定された回数繰返す。
そして、画素値正規化部１０５５は、所定の回数の後に、上述した処理により、最後に得られた新たな輝度特徴顕著性マップのマップ画像を特徴別顕著性マップ（輝度特徴）とし、特徴別顕著性マップ記憶部１１１に対して書き込んで記憶させる。
【0087】
また、画素値正規化部１０５５は、特徴別顕著性マップ（輝度特徴）の生成の処理と同様の処理を行い、方位特徴顕著性マップ（０度、４５度、９０度、１３５度）と、色相特徴顕著性マップ（ＲＧ、ＢＹ）とに対応する、特徴別顕著性マップ（方位特徴：０度、４５度、９０度、１３５度）、特徴別顕著性マップ（色相：ＲＧ、ＢＹ）のそれぞれを生成する。
そして、画素値正規化部１０５５は、求めた特徴別顕著性マップ（方位特徴：０度、４５度、９０度、１３５度）、特徴別顕著性マップ（色相：ＲＧ、ＢＹ）それぞれを、特徴別顕著性マップ記憶部１１１に対して書き込んで記憶させる。
これにより、画素値正規化部１０５５は、特徴別顕著性マップ（輝度特徴）の１個、特徴別顕著性マップ（方位特徴：０度、４５度、９０度、１３５度）の４個、特徴別顕著性マップ（色相：ＲＧ、ＢＹ）の２個の計７個の特徴別顕著性マップを生成する。
そして、画素値正規化部１０５５は、求めた特徴別顕著性マップ（方位特徴：０度、４５度、９０度、１３５度）、特徴別顕著性マップ（色相：ＲＧ、ＢＹ）それぞれを、特徴別顕著性マップ記憶部１１１に対して書き込んで記憶させる。
これにより、画素値正規化部１０５５は、特徴別顕著性マップ（輝度特徴）の１個、特徴別顕著性マップ（方位特徴：０度、４５度、９０度、１３５度）の４個、特徴別顕著性マップ（色相：ＲＧ、ＢＹ）の２個の計７個の特徴別顕著性マップを生成する。
【0088】
図１に戻り、視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（輝度特徴）、特徴別顕著性マップ（方位特徴：０度、４５度、９０度、１３５度）、特徴別顕著性マップ（色相：ＲＧ、ＢＹ）の７個の特徴別顕著性マップを、特徴別顕著性マップ記憶部１１１から読み出す。
視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（方位特徴：０度）、特徴別顕著性マップ（方位特徴：４５度）、特徴別顕著性マップ（方位特徴：９０度）及び特徴別顕著性マップ（方位特徴：１３５度）の各々を統合し、すなわち各マップにおける位置が同一のピクセルの階調度を比較して最も大きい階調度を統合した階調度とし、統合結果の階調度のピクセルからなる特徴別顕著性マップ（方位特徴）を生成する。
視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（方位特徴：０度）、特徴別顕著性マップ（方位特徴：４５度）、特徴別顕著性マップ（方位特徴：９０度）及び特徴別顕著性マップ（方位特徴：１３５度）の各々を統合し、すなわち各マップにおける位置が同一のピクセルの階調度を比較して最も大きい階調度を統合した階調度とし、統合結果の階調度のピクセルからなる特徴別顕著性マップ（方位特徴）を生成する。
【0089】
また、視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（色相：ＲＧ）及び特徴別顕著性マップ（色相：ＢＹ）の各々を統合し、すなわち各マップにおける位置が同一のピクセルの階調度を比較して最も大きい階調度を統合した階調度とし、統合結果の階調度のピクセルからなる特徴別顕著性マップ（輝度特徴）を生成する。
そして、視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（輝度特徴）、特徴別顕著性マップ（方位特徴）及び特徴別顕著性マップ（色相特徴）の各々における位置が同一のピクセルの階調度の線形和を算出し、算出結果の階調度のピクセルからなる視覚的顕著性マップを生成する。
視覚的顕著性マップ生成部１０６は、対象物の画像の顕著度を示す、生成された視覚的顕著性マップを、視覚的顕著性マップ記憶部１１２に書き込んで記憶させる。
そして、視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（輝度特徴）、特徴別顕著性マップ（方位特徴）及び特徴別顕著性マップ（色相特徴）の各々における位置が同一のピクセルの階調度の線形和を算出し、算出結果の階調度のピクセルからなる視覚的顕著性マップを生成する。
視覚的顕著性マップ生成部１０６は、対象物の画像の顕著度を示す、生成された視覚的顕著性マップを、視覚的顕著性マップ記憶部１１２に書き込んで記憶させる。
【0090】
画像処理部１０７は、三次元形状（対象物）の所定の視点及び観察方向から観察される対象物の画像を生成する。この視点及び観察方向は、操作者が任意に設定できる。
結果表示部１０８は、作成された視覚的顕著性マップを表示画面に表示させる。このとき、画像処理部１０７は、上記三次元形状に対してテクスチャとして、視覚的顕著性マップを張り付ける構成としてもよい。
結果表示部１０８は、対象物の画像及び各特徴別顕著性マップ（輝度特徴、輝度特徴、方位特徴）、視覚的顕著性マップそれぞれを表示する。また、結果表示部１０８は、対象物に各特徴別顕著性マップ及び視覚的顕著性マップの各々を張り付けて、表示する構成としてもよい。
パラメータ操作部１１３は、操作者の操作により、視距離ｄ、視角α、ガボールフィルタの各パラメータ（波長λ、偏差σ、角度θ、位相φ、楕円率γ）を変更する処理を行う。
結果表示部１０８は、作成された視覚的顕著性マップを表示画面に表示させる。このとき、画像処理部１０７は、上記三次元形状に対してテクスチャとして、視覚的顕著性マップを張り付ける構成としてもよい。
結果表示部１０８は、対象物の画像及び各特徴別顕著性マップ（輝度特徴、輝度特徴、方位特徴）、視覚的顕著性マップそれぞれを表示する。また、結果表示部１０８は、対象物に各特徴別顕著性マップ及び視覚的顕著性マップの各々を張り付けて、表示する構成としてもよい。
パラメータ操作部１１３は、操作者の操作により、視距離ｄ、視角α、ガボールフィルタの各パラメータ（波長λ、偏差σ、角度θ、位相φ、楕円率γ）を変更する処理を行う。
【0091】
図１０は、本実施形態の視覚的顕著性マップ生成装置１による視覚的顕著性マップの生成の処理の動作例を示すフローチャートである。
ステップＳ１０１：
操作者が外部装置からＣＧデータを視覚的顕著性マップ生成装置１に読み込む。これにより、データ入力部１０１は、上記外部装置から入力したＣＧデータを三次元形状モデル記憶部１０９に書き込んで記憶させる。
そして、操作者は、結果表示部１０８の表示部１＿Ｓの表示画面に表示される三次元形状モデルを観察する方向や距離などを調整して取得される観察画像を選択し、当該観察画像を対象物の画像とする。
また、予め作成された対象物の画像を外部装置から読み込みことにより、画像を取得する構成としてもよい。
ステップＳ１０１：
操作者が外部装置からＣＧデータを視覚的顕著性マップ生成装置１に読み込む。これにより、データ入力部１０１は、上記外部装置から入力したＣＧデータを三次元形状モデル記憶部１０９に書き込んで記憶させる。
そして、操作者は、結果表示部１０８の表示部１＿Ｓの表示画面に表示される三次元形状モデルを観察する方向や距離などを調整して取得される観察画像を選択し、当該観察画像を対象物の画像とする。
また、予め作成された対象物の画像を外部装置から読み込みことにより、画像を取得する構成としてもよい。
【0092】
ステップＳ１０２：
距離情報取得部１０２は、図２で説明したように、距離センサ３００が計測する表示部１＿Ｓの表示画面と、操作者２００との距離を、視距離ｄとして取得する。
また、距離情報取得部１０２には、予め視距離ｄが○○ｍと設定されており、操作者に対して「表示画面から○○ｍ離れて観察してください」との通知を行う構成としてもよい。
また、操作者が自身で視距離ｄを計測したり、あるいは任意の数値として所定の入力手段により視距離ｄを入力し、当該視距離を距離情報取得部１０２が取得する構成としてもよい。
距離情報取得部１０２は、図２で説明したように、距離センサ３００が計測する表示部１＿Ｓの表示画面と、操作者２００との距離を、視距離ｄとして取得する。
また、距離情報取得部１０２には、予め視距離ｄが○○ｍと設定されており、操作者に対して「表示画面から○○ｍ離れて観察してください」との通知を行う構成としてもよい。
また、操作者が自身で視距離ｄを計測したり、あるいは任意の数値として所定の入力手段により視距離ｄを入力し、当該視距離を距離情報取得部１０２が取得する構成としてもよい。
【0093】
ステップＳ１０３：
輝度特徴抽出部１０４２は、対象物の画像をＲ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂを生成する。
そして、輝度特徴抽出部１０４２は、生成したＲ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂの各々から、輝度値の特徴を示すグレースケール画像として輝度値画像を生成する。
輝度特徴抽出部１０４２は、対象物の画像をＲ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂを生成する。
そして、輝度特徴抽出部１０４２は、生成したＲ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂの各々から、輝度値の特徴を示すグレースケール画像として輝度値画像を生成する。
【0094】
ステップＳ１０４：
色相特徴抽出部１０４１は、対象物の画像をＲ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂを生成する。
そして、色相特徴抽出部１０４１は、生成したＲ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂの各々から、色相特徴として色相特徴画像ＲＧ及び色相特徴画像ＢＹの各々を生成する。
色相特徴抽出部１０４１は、対象物の画像をＲ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂを生成する。
そして、色相特徴抽出部１０４１は、生成したＲ色成分画像ｒ、Ｇ色成分画像ｇ及びＢ色成分画像ｂの各々から、色相特徴として色相特徴画像ＲＧ及び色相特徴画像ＢＹの各々を生成する。
【0095】
ステップＳ１０５：
ガウシアンピラミッド生成部１０５１は、色相特徴画像ＲＧ及び色相特徴画像ＢＹと輝度値画像との各々のガウシアンピラミッドを、特徴別ガウシアンピラミッド（色相特徴ガウシアンピラミッド画像、輝度特徴ガウシアンピラミッド画像）として生成する。
そして、ガウシアンピラミッド生成部１０５１は、生成した色相特徴ガウシアンピラミッド画像（ＲＧ６０１＿１～ＲＧ６０１＿ｎ、ＢＹ６０１＿１～ＢＹ６０１＿ｎ）及び輝度特徴ガウシアンピラミッド画像（３０１＿１～３０１＿ｎ）を、ガウシアンピラミッド画像記憶部１１０に書き込んで記憶させる。
ガウシアンピラミッド生成部１０５１は、色相特徴画像ＲＧ及び色相特徴画像ＢＹと輝度値画像との各々のガウシアンピラミッドを、特徴別ガウシアンピラミッド（色相特徴ガウシアンピラミッド画像、輝度特徴ガウシアンピラミッド画像）として生成する。
そして、ガウシアンピラミッド生成部１０５１は、生成した色相特徴ガウシアンピラミッド画像（ＲＧ６０１＿１～ＲＧ６０１＿ｎ、ＢＹ６０１＿１～ＢＹ６０１＿ｎ）及び輝度特徴ガウシアンピラミッド画像（３０１＿１～３０１＿ｎ）を、ガウシアンピラミッド画像記憶部１１０に書き込んで記憶させる。
【0096】
ステップＳ１０６：
方位特徴顕著性マップ生成部１０５２は、輝度特徴ガウシアンピラミッド画像（３０１＿１～３０１＿ｎ）に対してガボールフィルタを用いて、角度θが０度、４５度、９０度、１３５度の各々示す方位に対応する方位特徴ガウシアンピラミッド画像４０１＿２～方位特徴ガウシアンピラミッド画像４０１＿ｎそれぞれを生成する。
そして、方位特徴顕著性マップ生成部１０５２は、輝度値画像（方位特徴ガウシアンピラミッド画像４０１＿１）と、方位特徴ガウシアンピラミッド画像４０１＿２～方位特徴ガウシアンピラミッド画像４０１＿ｎとを用いて、方位特徴顕著性マップ（０度、４５度、９０度、１３５度）を生成する。
方位特徴顕著性マップ生成部１０５２は、輝度特徴ガウシアンピラミッド画像（３０１＿１～３０１＿ｎ）に対してガボールフィルタを用いて、角度θが０度、４５度、９０度、１３５度の各々示す方位に対応する方位特徴ガウシアンピラミッド画像４０１＿２～方位特徴ガウシアンピラミッド画像４０１＿ｎそれぞれを生成する。
そして、方位特徴顕著性マップ生成部１０５２は、輝度値画像（方位特徴ガウシアンピラミッド画像４０１＿１）と、方位特徴ガウシアンピラミッド画像４０１＿２～方位特徴ガウシアンピラミッド画像４０１＿ｎとを用いて、方位特徴顕著性マップ（０度、４５度、９０度、１３５度）を生成する。
【0097】
ステップＳ１０７：
輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像（３０１＿１～３０１＿ｎ）を用いて、輝度特徴顕著性マップを生成する。
輝度特徴顕著性マップ生成部１０５３は、輝度特徴ガウシアンピラミッド画像（３０１＿１～３０１＿ｎ）を用いて、輝度特徴顕著性マップを生成する。
【0098】
ステップＳ１０８：
色相特徴顕著性マップ生成部１０５４は、色相特徴ガウシアンピラミッド画像ＲＧ６０１＿２～色相特徴ガウシアンピラミッド画像ＲＧ６０１＿ｎの各々を用いて、色相特徴顕著性マップ（ＲＧ）を生成する。
同様に、色相特徴顕著性マップ生成部１０５４は、色相特徴ガウシアンピラミッド画像ＢＹ６０１＿２～色相特徴ガウシアンピラミッド画像ＢＹ６０１＿ｎの各々を用いて、色相特徴顕著性マップ（ＢＹ）を生成する。
色相特徴顕著性マップ生成部１０５４は、色相特徴ガウシアンピラミッド画像ＲＧ６０１＿２～色相特徴ガウシアンピラミッド画像ＲＧ６０１＿ｎの各々を用いて、色相特徴顕著性マップ（ＲＧ）を生成する。
同様に、色相特徴顕著性マップ生成部１０５４は、色相特徴ガウシアンピラミッド画像ＢＹ６０１＿２～色相特徴ガウシアンピラミッド画像ＢＹ６０１＿ｎの各々を用いて、色相特徴顕著性マップ（ＢＹ）を生成する。
【0099】
ステップＳ１０９：
画素値正規化部１０５５は、方位特徴顕著性マップ（０度、４５度、９０度、１３５度、輝度特徴顕著性マップ、色相特徴顕著性マップ（ＲＧ、ＢＹ）の７個の顕著性マップの各々の正規化を行う。
そして、特徴別顕著性マップ生成部１０５は、正規化を行った方位特徴顕著性マップ（０度、４５度、９０度、１３５度、輝度特徴顕著性マップ、色相特徴顕著性マップ（ＲＧ、ＢＹ）の７個の顕著性マップの各々を特徴別顕著性マップ（方位特徴）として、特徴別顕著性マップ記憶部１１１に対して書き込んで記憶させる。
画素値正規化部１０５５は、方位特徴顕著性マップ（０度、４５度、９０度、１３５度、輝度特徴顕著性マップ、色相特徴顕著性マップ（ＲＧ、ＢＹ）の７個の顕著性マップの各々の正規化を行う。
そして、特徴別顕著性マップ生成部１０５は、正規化を行った方位特徴顕著性マップ（０度、４５度、９０度、１３５度、輝度特徴顕著性マップ、色相特徴顕著性マップ（ＲＧ、ＢＹ）の７個の顕著性マップの各々を特徴別顕著性マップ（方位特徴）として、特徴別顕著性マップ記憶部１１１に対して書き込んで記憶させる。
【0100】
ステップＳ１１０：
視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（方位特徴：０度）、特徴別顕著性マップ（方位特徴：４５度）、特徴別顕著性マップ（方位特徴：９０度）及び特徴別顕著性マップ（方位特徴：１３５度）の各々を統合して特徴別顕著性マップ（方位特徴）を生成する。また、視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（色相：ＲＧ）及び特徴別顕著性マップ（色相：ＢＹ）の各々を統合して、特徴別顕著性マップ（色相特徴）を生成する。
視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（方位特徴：０度）、特徴別顕著性マップ（方位特徴：４５度）、特徴別顕著性マップ（方位特徴：９０度）及び特徴別顕著性マップ（方位特徴：１３５度）の各々を統合して特徴別顕著性マップ（方位特徴）を生成する。また、視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（色相：ＲＧ）及び特徴別顕著性マップ（色相：ＢＹ）の各々を統合して、特徴別顕著性マップ（色相特徴）を生成する。
【0101】
そして、視覚的顕著性マップ生成部１０６は、特徴別顕著性マップ（輝度特徴）、特徴別顕著性マップ（方位特徴）及び特徴別顕著性マップ（色相特徴）の各々における位置が同一のピクセルの階調度の線形和を算出し、算出結果の階調度のピクセルからなる視覚的顕著性マップを生成する。
視覚的顕著性マップ生成部１０６は、対象物の画像の顕著度を示す、生成された視覚的顕著性マップを、視覚的顕著性マップ記憶部１１２に書き込んで記憶させる。
視覚的顕著性マップ生成部１０６は、対象物の画像の顕著度を示す、生成された視覚的顕著性マップを、視覚的顕著性マップ記憶部１１２に書き込んで記憶させる。
【0102】
ステップＳ１１１：
結果表示部１０８は、生成した視覚的顕著性マップを単独で、あるいは対象物の画像に重畳させて表示する。
また、画像処理部１０７は、生成した視覚的顕著性マップを三次元形状モデルにテクスチャとして貼り付け、視覚的顕著性マップ記憶部１１２に書き込んで記憶させる構成としてもよい。
結果表示部１０８は、生成した視覚的顕著性マップを単独で、あるいは対象物の画像に重畳させて表示する。
また、画像処理部１０７は、生成した視覚的顕著性マップを三次元形状モデルにテクスチャとして貼り付け、視覚的顕著性マップ記憶部１１２に書き込んで記憶させる構成としてもよい。
【0103】
ステップＳ１１２：
パラメータ操作部１１３は、操作者が視覚的顕著性マップの確認処理を終了したか否かの検出を行う。
このとき、パラメータ操作部１１３は、視覚的顕著性マップの確認処理が終了していない場合、処理をステップＳ１１３へ進める。
一方、パラメータ操作部１１３は、視覚的顕著性マップの確認処理が終了した場合、処理を終了する。（例えば、対象物の画像を変更して、再度、このフローチャートの処理を行う。）
パラメータ操作部１１３は、操作者が視覚的顕著性マップの確認処理を終了したか否かの検出を行う。
このとき、パラメータ操作部１１３は、視覚的顕著性マップの確認処理が終了していない場合、処理をステップＳ１１３へ進める。
一方、パラメータ操作部１１３は、視覚的顕著性マップの確認処理が終了した場合、処理を終了する。（例えば、対象物の画像を変更して、再度、このフローチャートの処理を行う。）
【0104】
ステップＳ１１３：
パラメータ操作部１１３は、操作者に対してガボールフィルタの各パラメータあるいは視距離ｄあるいは視角αの変更を促す通知を行う。
そして、パラメータ変換部１０３は、パラメータ操作部１１３から供給される視距離ｄ、視角αとガボールフィルタの各パラメータとに対応して、ガボールフィルタのパラメータの変更を行い、処理をステップＳ１０３へ進める。
また、パラメータ変換部１０３は、ガウシアンピラミッドを生成する際、ガウシアンフィルタやＤｏＧフィルタを用いる場合、ガウシアンフィル及びＤｏＧフィルタの偏差σの変更を視距離ｄに対応したガボールフィルタの偏差σに変更する。
パラメータ操作部１１３は、操作者に対してガボールフィルタの各パラメータあるいは視距離ｄあるいは視角αの変更を促す通知を行う。
そして、パラメータ変換部１０３は、パラメータ操作部１１３から供給される視距離ｄ、視角αとガボールフィルタの各パラメータとに対応して、ガボールフィルタのパラメータの変更を行い、処理をステップＳ１０３へ進める。
また、パラメータ変換部１０３は、ガウシアンピラミッドを生成する際、ガウシアンフィルタやＤｏＧフィルタを用いる場合、ガウシアンフィル及びＤｏＧフィルタの偏差σの変更を視距離ｄに対応したガボールフィルタの偏差σに変更する。
【0105】
上述したように、本実施形態によれば、実空間内において、実物の大きさを考慮するため、実際の観察者と対象物の画像との視距離及び視角に応じて、物理的に意味のある実寸法に対応して、画像上の長さを調整したパラメータを用いた特徴検出フィルタにより特徴検出を行って視覚的顕著性マップを生成、すなわち、視角αによる表示画面における長さｙを、実距離（距離単位）の視距離ｄに対応したピクセル数に変換し、この視角αに対応するピクセル数を波長λとして用い、この波長λから偏差σを求めるため、ガボールフィルタが対象物の画像からの視距離ｄ及び視角αに対応した波長によって方位特徴を求めるため、視距離ｄの距離で観察する操作者の視認する顕著度を高い精度で求めることが可能となる。
【0106】
本実施形態における視覚的顕著性マップ生成装置における、方向特徴、色相特徴及び輝度特徴の各々から視覚的顕著性マップを生成するアルゴリズムとしては、「A Model of Saliency-based Visual Attention for Rapid Scene Analysis（Laurent Itti, Christof Koch, and Ernst Niebur、IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, VOL. 20, NO. 11, NOVEMBER 1998）」を元にしている。
【0107】
＜第２の実施形態＞
以下、本発明の第２の実施形態について、図面を参照して説明する。
本発明の第２の実施形態による視覚的顕著性マップ生成装置の構成は、図１に示す第１の実施形態と同様である。
以下、第２の実施形態による視覚的顕著性マップ生成装置が、第１の実施形態と異なる点についてのみ説明する。
以下、本発明の第２の実施形態について、図面を参照して説明する。
本発明の第２の実施形態による視覚的顕著性マップ生成装置の構成は、図１に示す第１の実施形態と同様である。
以下、第２の実施形態による視覚的顕著性マップ生成装置が、第１の実施形態と異なる点についてのみ説明する。
【0108】
図１１は、第２の実施形態の視覚的顕著性マップ生成装置１における、利用者と対象物の画像との相対位置を説明する図である。
第１の実施形態においては、視距離ｄは、実空間内における表示画面と操作者との距離であった。
一方、第２の実施形態において、視距離ｄは、実空間における距離単位で示されており、仮想空間４００内における視点３００Ａと、仮想空間４００内における観察対象の対象物（仮想三次元形状、例えば建装材など）４５０との距離である。本実施形態における仮想空間は、実空間と同一の距離単位（ｍｍ、ｃｍなどの単位）に対応した、すなわち実寸法の三次元座標系において形成されている。
結果表示部１０８は、表示画面に対して視点３００Ａから所定の視点方向から観察される仮想三次元対象物４５０の画像、すなわち視点３００Ａにおいて仮想撮像装置で撮像した撮像画像を表示する。
第１の実施形態においては、視距離ｄは、実空間内における表示画面と操作者との距離であった。
一方、第２の実施形態において、視距離ｄは、実空間における距離単位で示されており、仮想空間４００内における視点３００Ａと、仮想空間４００内における観察対象の対象物（仮想三次元形状、例えば建装材など）４５０との距離である。本実施形態における仮想空間は、実空間と同一の距離単位（ｍｍ、ｃｍなどの単位）に対応した、すなわち実寸法の三次元座標系において形成されている。
結果表示部１０８は、表示画面に対して視点３００Ａから所定の視点方向から観察される仮想三次元対象物４５０の画像、すなわち視点３００Ａにおいて仮想撮像装置で撮像した撮像画像を表示する。
【0109】
視距離ｄ及び視角αによって視覚的顕著性マップを生成する処理については、第２のｓ実施形態と第１の実施形態とは同様である。
第１の実施形態においては、表示画面に表示されている対象物の画像に対する視覚的顕著性マップを生成している。
しかしながら、第２の実施形態においては、仮想空間４００内での視点から視認される仮想三次元形状４５０における視覚的顕著性マップを生成する。
したがって、第２の実施形態においては、仮想空間４００内において、視点３００Ａから視距離ｄ離れた仮想三次元形状４５０を、視点３００Ａから観察して視認される顕著度を示す視覚的顕著性マップが、結果表示部１０８により表示画面に表示される。
第１の実施形態においては、表示画面に表示されている対象物の画像に対する視覚的顕著性マップを生成している。
しかしながら、第２の実施形態においては、仮想空間４００内での視点から視認される仮想三次元形状４５０における視覚的顕著性マップを生成する。
したがって、第２の実施形態においては、仮想空間４００内において、視点３００Ａから視距離ｄ離れた仮想三次元形状４５０を、視点３００Ａから観察して視認される顕著度を示す視覚的顕著性マップが、結果表示部１０８により表示画面に表示される。
【0110】
仮想空間４００内において、操作者がマウスの操作により、視点の位置を移動させたり、視点からの観察方向を移動させたりするごとに、視覚的顕著性マップを生成することにより、視点位置及び観察方向に対応した仮想三次元形状を観察した際に視認される顕著度を示す視覚的顕著性マップを生成することができる。
また、操作者が仮想空間４００内にマウスにより、視点及び観察方向の各々をあらかじめ所定の位置に設定して固定状態として視覚的顕著性マップの生成処理を行ってもよい。
また、操作者が仮想空間４００内にマウスにより、視点及び観察方向の各々をあらかじめ所定の位置に設定して固定状態として視覚的顕著性マップの生成処理を行ってもよい。
【0111】
また、ＨＭＤ（Head Mounted Display、ヘッドマウントディスプレイ）におけるディスプレイ（表氏画面）に、点３００Ａから観察して視認される仮想三次元形状４５０の視覚的顕著性マップを表示する構成にしてもよい。この場合、ディスプレイが仮想空間４００内における視点位置となる。
すなわち、ＨＭＤを頭部に装着した操作者が、移動したり、頭を回転（上下左右の任意の方向）することにより、仮想空間４００内における視点３００Ａの位置及び観察方向が変化する。
また、第１の実施形態と同様に、画像処理部１０７は、作成した視覚的顕著性マップを、仮想三次元形状に対してテクスチャとして張り付けて、当該視覚的顕著性マップを生成した視点及び観察方向から表示させる構成としてもよい。
すなわち、ＨＭＤを頭部に装着した操作者が、移動したり、頭を回転（上下左右の任意の方向）することにより、仮想空間４００内における視点３００Ａの位置及び観察方向が変化する。
また、第１の実施形態と同様に、画像処理部１０７は、作成した視覚的顕著性マップを、仮想三次元形状に対してテクスチャとして張り付けて、当該視覚的顕著性マップを生成した視点及び観察方向から表示させる構成としてもよい。
【0112】
上述したように、本実施形態によれば、仮想空間内において、実物の大きさを考慮するため、仮想空間における観察者と対象物（仮想三次元形状）の画像との視距離（実空間と同様の実寸法で示された距離）と視角とに応じて、物理的に意味のある実寸法に対応して、画像上の長さを調整したパラメータを用いた特徴検出フィルタにより特徴検出を行って視覚的顕著性マップを生成、すなわち、視角αによる表示画面における長さｙを、実距離（距離単位）の視距離ｄに対応したピクセル数に変換し、この視角αに対応するピクセル数を波長λとして用い、この波長λから偏差σを求めるため、ガボールフィルタが対象物の画像からの視距離ｄ及び視角αに対応した波長によって方位特徴を求めるため、視距離ｄの距離で観察する操作者の視認する顕著度を高い精度で求めることが可能となる。
【0113】
また、第１の実施形態及び第２の実施形態の各々においては、結果表示部１０８が視覚的顕著性マップを表示画面に表示する構成を説明したが、操作者の表示する顕著性マップの選択処理により、特徴別顕著性マップ（方位特徴、色相特徴及び輝度特徴の各々）を視覚的顕著性マップと同様に表示画面に表示する構成としてもよい。
また、第１の実施形態及び第２の実施形態の各々において、仮想空間における対象物である仮想三次元形状（三次元形状モデル）に対して照射される照明の特性を変化させ、対象物の各特徴別顕著性マップ（輝度特徴、輝度特徴、方位特徴）それぞれを求めて、当該対象物の視認性を変更して、視覚的顕著性マップを生成する構成としてもよい。
また、第１の実施形態及び第２の実施形態の各々において、仮想空間における対象物である仮想三次元形状（三次元形状モデル）に対して照射される照明の特性を変化させ、対象物の各特徴別顕著性マップ（輝度特徴、輝度特徴、方位特徴）それぞれを求めて、当該対象物の視認性を変更して、視覚的顕著性マップを生成する構成としてもよい。
【0114】
なお、本発明における図１の分光テクスチャ画像生成システムのそれぞれ機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませて実行することにより、対象物の画像の視覚的顕著性マップを生成する処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳ（Operating System）や周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境（あるいは表示環境）を備えたＷＷＷ（World Wide Web）システムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ（Read Only Memory）、ＣＤ－ＲＯＭ（Compact Disc - Read Only Memory）等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ（Random Access Memory））のように、一定時間プログラムを保持しているものも含むものとする。
【0115】
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【0116】
以上、この発明の実施形態を図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等も含まれる。
【符号の説明】
【0117】
１…視覚的顕著性マップ生成装置
１０１…データ入力部
１０２…距離情報取得部
１０３…パラメータ変換部
１０４…視角特徴抽出部
１０５…特徴別顕著性マップ生成部
１０６…視覚的顕著性マップ生成部
１０７…画像処理部
１０８…結果表示部
１０９…三次元形状モデル記憶部
１１０…ガウシアンピラミッド画像記憶部
１１１…特徴別顕著性マップ記憶部
１１２…視覚的顕著性マップ記憶部
１１３…パラメータ操作部
１０４１…色相特徴抽出部
１０４２…輝度特徴抽出部
１０５１…ガウシアンピラミッド生成部
１０５２…方位特徴顕著性マップ生成部
１０５３…輝度特徴顕著性マップ生成部
１０５４…色相特徴顕著性マップ生成部
１０５５…画素値正規化部
１０１…データ入力部
１０２…距離情報取得部
１０３…パラメータ変換部
１０４…視角特徴抽出部
１０５…特徴別顕著性マップ生成部
１０６…視覚的顕著性マップ生成部
１０７…画像処理部
１０８…結果表示部
１０９…三次元形状モデル記憶部
１１０…ガウシアンピラミッド画像記憶部
１１１…特徴別顕著性マップ記憶部
１１２…視覚的顕著性マップ記憶部
１１３…パラメータ操作部
１０４１…色相特徴抽出部
１０４２…輝度特徴抽出部
１０５１…ガウシアンピラミッド生成部
１０５２…方位特徴顕著性マップ生成部
１０５３…輝度特徴顕著性マップ生成部
１０５４…色相特徴顕著性マップ生成部
１０５５…画素値正規化部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】