特許 6741270 画像処理装置、画像処理方法、及び画像処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6741270

(24)【登録日】2020年7月29日

(45)【発行日】2020年8月19日

(54)【発明の名称】画像処理装置、画像処理方法、及び画像処理プログラム

(51)【国際特許分類】

   G06T 1/00 20060101AFI20200806BHJP

   G06T 11/80 20060101ALI20200806BHJP

【ＦＩ】

   G06T1/00 340A

   G06T11/80 A

【請求項の数】16

【全頁数】21

(21)【出願番号】特願2016-101023(P2016-101023)

(22)【出願日】2016年5月20日

(65)【公開番号】特開2017-73108(P2017-73108A)

(43)【公開日】2017年4月13日

【審査請求日】2019年5月8日

(31)【優先権主張番号】特願2015-199425(P2015-199425)

(32)【優先日】2015年10月7日

(33)【優先権主張国】JP

(73)【特許権者】

【識別番号】504176911

【氏名又は名称】国立大学法人大阪大学

(73)【特許権者】

【識別番号】000001959

【氏名又は名称】株式会社 資生堂

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(72)【発明者】

【氏名】森川 和則

(72)【発明者】

【氏名】松下 戦具

(72)【発明者】

【氏名】白土 真紀

(72)【発明者】

【氏名】関根 春奈

【審査官】 山田 辰美

(56)【参考文献】

【文献】 特開平１０−２８９３０３（ＪＰ，Ａ）

【文献】 特開２０１１−０５３９４２（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１３／００３９５９９（ＵＳ，Ａ１）

【文献】 特開２０１１−２３３０７３（ＪＰ，Ａ）

【文献】 特開平１０−０２１２９０（ＪＰ，Ａ）

【文献】 特開２００８−００６２２４（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｔ １／００

Ｇ０６Ｔ １１／８０

ＩＥＥＥ Ｘｐｌｏｒｅ

(57)【特許請求の範囲】

【請求項1】

画像中の人物から顔領域を検出する検出手段と、
前記検出手段により検出された顔領域の輪郭に対応させた指標を設定する設定手段と、
前記設定手段により設定された指標を基準として、前記人物の顔の所定部位を変形させる画像処理手段と、
前記画像処理手段により前記人物の顔の所定の部位を変形させたときの変化量に基づいて、前記人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する定量化手段とを有することを特徴とする画像処理装置。

【請求項2】

前記設定手段は、
前記顔領域の輪郭上の頬弓部に対応付けられた第１の点と、オトガイ部に対応付けられた第２の点とを結ぶ直線を前記指標として設定し、
前記画像処理手段は、
前記指標として設定された前記直線の傾きを変化させることで、前記人物の顔の所定の部位を変形させることを特徴とする請求項１に記載の画像処理装置。

【請求項3】

前記画像処理手段は、
前記人物の顔の所定の部位を変化させることで生じる前記画像の画素の移動量を、前記人物のあごの角度に基づいて補正することを特徴とする請求項１又は２に記載の画像処理装置。

【請求項4】

前記定量化手段は、
前記画像処理手段により補正された前記変化量に基づいて、前記人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化することを特徴とする請求項３に記載の画像処理装置。

【請求項5】

前記設定手段は、
前記顔領域の輪郭に対応させた所定の形状を前記指標として設定し、
前記画像処理手段は、
前記指標として設定された前記所定の形状の面積を変化させることで、前記人物の顔の所定の部位を変形させることを特徴とする請求項１乃至４のいずれか一項に記載の画像処理装置。

【請求項6】

前記定量化手段は、
前記画像処理手段により変形させたときの前記形状の面積比率に基づいて、前記人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化することを特徴とする請求項５に記載の画像処理装置。

【請求項7】

前記設定手段は、
前記形状を前記顔領域の下半分の領域の輪郭に対応させ、前記人物の目の領域に対応して設定された第１の線を上辺とし、前記顔のあごの領域に対応して設定された第２の線を下辺とする台形形状として設定することを特徴とする請求項５又は６に記載の画像処理装置。

【請求項8】

前記設定手段は、
前記第１の線を、前記顔領域の下半分の領域に対する左右の耳珠点を結ぶ線とし、前記第２の線を、前記第１の線に平行で前記顔のオトガイ点を通る線として設定し、
前記画像処理手段は、
前記第２の線を伸縮させた等脚台形の面積を変化させることで、前記人物の顔を変形させることを特徴とする請求項７に記載の画像処理装置。

【請求項9】

前記画像処理手段は、
前記等脚台形の面積を変化させることで、前記人物の顔の下半分の領域を縮小又は拡大させた前記人物の顔のパターンを生成することを特徴とする請求項８に記載の画像処理装置。

【請求項10】

前記画像処理手段は、前記人物の顔の画像を、顔の輪郭の画像、顔の中心パーツの画像及び頸部・肩の画像に分割し、異なる割合で伸縮させた複数の前記顔の輪郭の画像に、前記人物の顔の画像から分割した前記顔の中心パーツの画像及び頸部・肩の画像を合成して前記人物の顔のパターンを生成することを特徴とする請求項１に記載の画像処理装置。

【請求項11】

前記画像処理手段は、前記人物の顔の画像を、顔の画像及び頸部・肩の画像に分割し、異なる割合で伸縮させた複数の前記顔の画像に、前記人物の顔の画像から分割した前記頸部・肩の画像を合成して前記人物の顔のパターンを生成することを特徴とする請求項１に記載の画像処理装置。

【請求項12】

前記定量化手段は、
前記画像処理手段により生成された前記人物の顔のパターンと、前記人物にメイクアップを施した顔とを比較することで、前記人物の顔の輪郭に対するメイクアップ効果を定量化することを特徴とする請求項９乃至１１のいずれか一項に記載の画像処理装置。

【請求項13】

前記定量化手段は、
前記人物の顔のパターンと、前記人物にメイクアップを施した顔とを心理物理測定法のうち上下法を用いて比較することで、前記人物の顔の輪郭に対する錯視効果を定量化することを特徴とする請求項１２に記載の画像処理装置。

【請求項14】

前記定量化手段は、
前記人物の顔の輪郭に対するメイクアップ効果として、前記人物にメイクアップを施したときの小顔効果を定量化することを特徴とする請求項１２に記載の画像処理装置。

【請求項15】

画像処理装置が、
画像中の人物から顔領域を検出する検出手順と、
前記検出手順により検出された顔領域の輪郭に対応させた指標を設定する設定手順と、
前記設定手順により設定された指標を基準として、前記人物の顔の所定部位を変形させる画像処理手順と、
前記画像処理手順により前記人物の顔の所定の部位を変形させたときの変化量に基づいて、前記人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する定量化手順とを有することを特徴とする画像処理方法。

【請求項16】

コンピュータを、
請求項１乃至１４の何れか一項に記載の画像処理装置が有する各手段として機能させるための画像処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本願は、画像処理装置、画像処理方法、及び画像処理プログラムに関する。

【背景技術】

【0002】

従来より、顔の印象に対する分析を行い、その分析結果を用いた美容カウンセリング方法が知られている（例えば、特許文献１参照）。特許文献１では、顔表面の三次元形状から小顔等の印象因子の発現量（例えば、特徴量がどの程度発現しているか）を抽出し、小顔等の印象の程度を定量分析して、その分析結果に対する美容情報（美容施術方法、毛髪化粧料又はメイク化粧料を表す情報）を提示している。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特許第５２３１６８５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、上述した特許文献１の手法では、被験者のそのままの顔形状から得られる情報を用いて見掛け年齢、実年齢、小顔印象等の程度を示すだけであり、例えば人物の顔形状を段階的に変化させながら、小顔に対する見え方の効果を定量的に評価するものではなく、小顔等に対するメイクアップ効果を精度よく定量化することができなかった。

【0005】

１つの側面では、本発明は、小顔に対するメイクアップ効果を定量化することを目的とする。

【課題を解決するための手段】

【0006】

本発明の１つの態様において、画像処理装置は、画像中の人物から顔領域を検出する検出手段と、前記検出手段により検出された顔領域の輪郭に対応させた指標を設定する設定手段と、前記設定手段により設定された指標を基準として、前記人物の顔の所定部位を変形させる画像処理手段と、前記画像処理手段により前記人物の顔の所定の部位を変形させたときの変化量に基づいて、前記人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する定量化手段とを有する。

【発明の効果】

【0007】

１つの側面として、メイクアップ効果を定量化することが可能となる。

【図面の簡単な説明】

【0008】

【図1】本実施形態における画像処理装置の機能構成の一例を示している。

【図2】画像処理が実現可能なハードウェア構成の一例を示す図である。

【図3】本実施形態における画像処理の一例を示すフローチャートである。

【図4】顔の特徴点の抽出例を示す図である。

【図5】特徴点に基づく定量化のための補正処理の一例を示す図である。

【図6】補正処理におけるあごのラインの傾斜について説明するための図である。

【図7】補正処理における座標の計算例を示す図である。

【図8】小顔のものさしの作成方法を説明するための図である。

【図9】小顔効果が生じる顔画像（標準刺激）の一例を示す図である。

【図10】指数関数を利用して変形された顔画像の一例を示す図である。

【図11】化粧を施した顔画像（標準刺激）の一例を示す図である。

【図12】評価実験で得られた結果の一例を示す図である。

【図13】標準刺激と比較刺激とが一枚ずつ表示された画面の一例のイメージ図である。

【図14】顔画像を変形させた尺度画像を生成する他の方法を説明する図である。

【図15】顔画像を変形させた尺度画像を生成する他の方法を説明する図である。

【発明を実施するための形態】

【0009】

以下、本発明の実施の形態について詳細に説明する。なお、以下の例では、小顔に対するメイクアップ効果（化粧効果）を定量化するための画像処理装置、画像処理方法、及び画像処理プログラムについて説明する。

【0010】

＜画像処理装置の機能構成例＞
図１は、本実施形態における画像処理装置の機能構成の一例を示している。図１に示すように、画像処理装置１０は、入力手段１１と、出力手段１２と、記憶手段１３と、画像取得手段１４と、検出手段１５と、設定手段１６と、画像処理手段１７と、定量化手段１８と、制御手段１９とを有する。

【0011】

入力手段１１は、例えば本実施形態における小顔に対するメイクアップ効果を定量化するための画像処理に関する各種指示の開始や終了、各種設定等の入力を受け付ける。入力手段１１は、例えば画像処理装置１０がＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等の汎用のコンピュータであれば、キーボードやマウス等のポインティングデバイスである。また、画像処理装置１０が、タブレット端末やスマートフォン等であれば、タッチパネル等である。また、入力手段１１は、例えば音声等により入力が可能なマイク等の音声入力デバイスであってもよい。

【0012】

出力手段１２は、入力手段１１により入力された内容、記憶手段１３に記憶されている情報、画像取得手段１４により取得された画像、入力内容に基づいて実行された内容等の出力を行う。出力手段１２は、例えばディスプレイやスピーカ等である。出力手段１２は、入力手段１１と一体型のタッチパネルであってもよい。また、出力手段１２は、処理結果等を紙等の印刷媒体に印刷するプリンタ等の印刷デバイスであってもよい。

【0013】

記憶手段１３は、本実施形態において必要な各種情報を記憶する。具体的には、記憶手段１３は、本実施形態における小顔に対するメイクアップ効果を定量化するための画像処理を実行するための各種プログラム（アプリケーション、ソフトウェア等）や、各種設定情報等を記憶する。また、記憶手段１３は、実行経過や実行結果（履歴情報）、エラー情報、ユーザ情報等を記憶してもよい。記憶手段１３に記憶される情報は、例えばインターネットやＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）に代表される通信ネットワークを介して接続される他の装置（例えば、データベースサーバ）等から取得してもよい。

【0014】

画像取得手段１４は、小顔に対するメイクアップ効果の定量化等を行う人物（ユーザ、被験者、被写体）の顔を含む画像を取得する。画像取得手段１４は、例えばデジタルカメラ等の撮像手段から撮影される画像又は映像等を取得することができるがこれに限定されるものではない。撮像手段は、画像処理装置１０に内蔵されていてもよく、外付けされる他の装置であってもよい。画像取得手段１４により取得された画像は、記憶手段１３に記憶されてもよく、画像を取得後すぐに検出手段１５による検出処理が行われてもよい。また、撮影される画像は、素顔でもよく、メイクアップされた画像（化粧）でもよい。

【0015】

検出手段１５は、画像取得手段１４により取得した画像から、画像中に含まれる人物を抽出し、更に抽出した人物の顔領域を検出する。なお、顔領域の検出手法としては、例えば予め設定された顔の特徴情報（例えば、目、鼻、口の各色情報や、エッジ情報、相互間の位置関係）や、顔の輪郭部分における画素情報（例えば、輝度情報）と、背景画像における画素情報との差分情報を抽出し、抽出した差分値が、所定の閾値以上である場合等を条件として、顔と背景とを分離し、顔領域を検出することができる。

【0016】

なお、顔画像の検出手法については、上述した例に限定されるものではない。例えば、検出手段１５は、予め設定された特徴情報に対応するマッチングテーブル（テンプレート情報）等を用いて画像中から人物の顔領域を検出してもよい。また、検出手段１５は、画像中における顔の座標情報や位置情報、顔の向き情報等を検出してもよい。また、顔の検出については、例えば画像取得手段１４により取得した画像を出力手段１２の画面に表示し、表示された画像をユーザが確認して、入力手段１１により人物の顔領域を設定してもよい。

【0017】

設定手段１６は、検出手段１５により検出された顔領域の輪郭に対応させた指標を設定する。指標としては、例えば顔領域の輪郭上の頬弓部に対応付けられた第１の点と、オトガイ部に対応付けられた第２の点とを結ぶ直線等である。なお、指標については、これに限定されるものではなく、例えば顔の所定の点や輪郭等を基準にした所定の形状（例えば、台形形状）等でもよい。

【0018】

また、設定手段１６は、例えば顔領域の下半分の領域に対する左右の耳珠点を結ぶ線を第１の線として設定する。また、設定手段１６は、上述した第１の線に平行で、且つ顔のオトガイ点を通る線を第２の線として設定してもよい。

【0019】

上述した設定手段１６による処理は、画像解析により自動で行ってもよく、また出力手段１２の画面に検出手段１５により検出された顔領域を表示し、その顔領域からユーザが入力手段１１を用いて設定を行ってもよい。

【0020】

画像処理手段１７は、設定手段１６により設定された指標を基準として、検出手段１５により検出した顔領域（人物の顔）の所定部位を変形させる。また、画像処理手段１７は、指標として設定された直線の傾き等を変化させることで、人物（ユーザ、被験者、被写体）の顔の所定の部位を変形させる。

【0021】

また、画像処理手段１７は、人物の顔の所定の部位を変化させることで生じる画像中の所定の画素の移動量を、人物のあごの角度に基づいて補正する処理を行ってもよい。また、画像処理手段１７は、設定手段１６により指標として設定された所定の形状の面積を変化させることで、人物の顔の所定の部位を変形させてもよい。

【0022】

また、画像処理手段１７は、設定手段１６により設定された第２の線を伸縮させた等脚台形の面積を変化させることで、人物の顔を変形させてもよい。また、画像処理手段１７は、等脚台形の面積を変化させることで、人物の顔の下半分の領域を縮小又は拡大させた人物の顔のパターンを生成する。

【0023】

例えば、画像処理手段１７は、上述した処理により、顔型の特徴を維持しながら、顔下部の輪郭に対応させた形状を変形させる。なお、画像処理手段１７は検出手段１５により検出した顔領域の画像を、例えば顔の輪郭の画像、顔の中心パーツの画像、頸部・肩の画像などの部位画像に分割し、伸縮させる部位画像を伸縮させたあとで合成することにより顔領域の所定部位を変形させてもよい。

【0024】

例えば画像処理手段１７は顔の輪郭の部位画像を伸縮させた後、元の顔の中心パーツの部位画像と頸部・肩の部位画像とを合成するようにしてもよい。また、例えば画像処理手段１７は顔の輪郭の部位画像と顔の中心パーツの部位画像とを伸縮させた後、元の顔の頸部・肩の部位画像を合成するようにしてもよい。また、画像処理手段１７は、人物の顔を段階的に変化させる。

【0025】

また、画像処理手段１７は、素顔の顔画像の所定の領域に対してＣＧ（Ｃｏｍｐｕｔｅｒ Ｇｒａｐｈｉｃｓ）等により、アイシャドーや口紅、チーク等のメイク画像を重ね合わせてメイクアップ画像を生成してもよい。

【0026】

定量化手段１８は、画像処理手段１７により人物の顔の所定の部位を変形させたときの変化量を求め、求めた変化量に対応させて、人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する。また、定量化手段１８は、画像処理手段１７により補正された変化量に基づいて、人物の顔の輪郭又は大きさに基づく小顔等に対するメイクアップ効果を定量化する。

【0027】

また、定量化手段１８は、画像処理手段１７により変形させたときの形状の面積比率又は顔の特徴点間の距離等に基づいて、人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する。

【0028】

また、定量化手段１８は、例えば、顔の下部の輪郭（フェースライン）を小さく見せる小顔の効果として、メイクアップによる錯視効果を定量化する。また、定量化手段１８は、定量化された結果を画面に出力してもよく、記憶手段１３に記憶してもよい。

【0029】

例えば、定量化手段１８は、人物の元画像（標準刺激）と、画像処理手段１７により補正された画像（比較刺激）とを用いて、標準刺激と感覚的に等しい効果をもつ比較刺激の物理量を算出する。この値（主観的等価点）を測定することで、例えば化粧を施した顔（標準刺激）が素顔に対してどの程度の小顔効果を持つかを定量化することができる。

【0030】

また、定量化手段１８は、定量化された結果に基づいて各種の評価等を行ってもよい。評価としては、定量化された数値に基づく化粧カウンセリングや、美容アドバイス、美容施術等であるが、これに限定されるものではない。

【0031】

制御手段１９は、画像処理装置１０の各構成部全体の制御を行う。例えば、制御手段１９は、画像取得手段１４による対象画像の取得や、検出手段１５によるユーザの顔領域の検出、設定手段１６による指標等の設定、画像処理手段１７による各種画像処理、定量化手段１８による人物の顔の輪郭又は大きさに基づく小顔等に対するメイクアップ効果の定量化等の制御を行う。なお、制御手段１９による制御は、これに限定されるものではなく、例えば処理の開始や終了、エラー発生時の制御等を行ってもよい。

【0032】

＜画像処理装置１０のハードウェア構成例＞
ここで、本実施形態では、上述した画像処理装置１０の各機能をコンピュータに実行させる実行プログラム（画像処理プログラム）を生成し、例えば汎用のＰＣ、サーバ等にインストールすることで、本実施形態における画像処理等を実現することができる。

【0033】

図２は、画像処理が実現可能なハードウェア構成の一例を示す図である。図２に示す画像処理装置１０のコンピュータ本体には、入力装置２１と、出力装置２２と、ドライブ装置２３と、補助記憶装置２４と、メモリ装置２５と、各種制御を行うＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２６と、ネットワーク接続装置２７とを有するように構成され、これらはシステムバス２９で相互に接続されている。

【0034】

入力装置２１は、ユーザ等が操作するキーボード、マウス等のポインティングデバイスを有しており、マイク等の音声入力デバイス等を有し、ユーザ等からのプログラムの実行等、各種操作信号を入力する。

【0035】

出力装置２２は、本実施形態に係る処理を行うコンピュータ本体を操作するのに必要な各種ウィンドウやデータ等を表示するディスプレイを有し、ＣＰＵ２６が有する制御プログラムにより実行経過や結果等を表示する。

【0036】

ここで、本実施形態においてコンピュータ本体にインストールされる実行プログラムは、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリやＣＤ−ＲＯＭ等の可搬型の記録媒体２８等により提供される。記録媒体２８は、ドライブ装置２３にセット可能であり、記録媒体２８に含まれる実行プログラムが、記録媒体２８からドライブ装置２３を介して補助記憶装置２４にインストールされる。

【0037】

補助記憶装置２４は、ハードディスク等のストレージ手段であり、本実施形態における実行プログラムや、コンピュータに設けられた制御プログラム等を記憶し、必要に応じて入出力を行うことが可能である。

【0038】

メモリ装置２５は、ＣＰＵ２６により補助記憶装置２４から読み出された実行プログラム等を格納する。なお、メモリ装置２５は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等である。なお、上述した補助記憶装置２４やメモリ装置２５は、１つの記憶装置として一体型に構成されていても良い。

【0039】

ＣＰＵ２６は、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）等の制御プログラム、及びメモリ装置２５に格納されている実行プログラムに基づいて、各種演算や各ハードウェア構成部とのデータの入出力等、コンピュータ全体の処理を制御して、本実施形態における画像処理を実現する。なお、プログラム実行中に必要な各種情報等は、補助記憶装置２４から取得し、実行結果等を格納しても良い。

【0040】

ネットワーク接続装置２７は、インターネットやＬＡＮ等に代表される通信ネットワーク等と接続することにより、実行プログラムを通信ネットワークに接続されている他の装置等から取得する。また、ネットワーク接続装置２７は、プログラムを実行することで得られた実行結果又は本実施形態における実行プログラム自体を他の装置等に提供することが可能である。

【0041】

記録媒体２８は、上述したように実行プログラム等を格納するコンピュータで読み取り可能な記録媒体である。記録媒体２８は、例えばフラッシュメモリ等の半導体メモリであってもよい。また、記録媒体２８は、ＵＳＢメモリ等の可搬型記録媒体であってもよいが、これに限定されるものではない。

【0042】

本実施形態では、上述したコンピュータ本体のハードウェア構成に実行プログラム（例えば、画像処理プログラム等）をインストールすることで、ハードウェア資源とソフトウェアとが協働して本実施形態における画像処理等を実現することができる。また、上述した表示制御処理に対応する画像処理プログラムは、例えば装置上で常駐している状態であってもよく、起動指示により起動させてもよい。

【0043】

＜本実施形態における画像処理の一例について＞
次に、本実施形態における画像処理の一例について、フローチャートを用いて説明する。図３は、本実施形態における画像処理の一例を示すフローチャートである。図３の例において、画像処理装置１０の画像取得手段１４は、カメラ等により撮影された人物の顔の輪郭又は大きさに基づく小顔等に対するメイクアップ効果を定量化する対象となる画像を取得する（Ｓ０１）。次に、画像処理装置１０の検出手段１５は、画像中の人物から顔領域を検出する（Ｓ０２）。

【0044】

次に、画像処理装置１０の設定手段１６は、顔領域の輪郭に対応させた指標を設定する（Ｓ０３）。なお、設定手段１６は、検出手段１５により画像中から検出された検出画像から取得してもよく、また画面上に表示された顔領域からユーザが設定してもよい。

【0045】

次に、画像処理装置１０の画像処理手段１７は、設定された指標を基準として、人物の顔の所定部位を変形させる（Ｓ０４）。次に、画像処理装置１０の定量化手段１８は、人物の顔の所定の部位を変形させたときの変化量に基づいて、人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する（Ｓ０５）。また、定量化手段１８は、定量化した結果に基づき顔を評価する（Ｓ０６）。なお、本実施形態における画像処理では、Ｓ０６の評価処理を行わなくてもよい。

【0046】

次に、画像処理装置１０の制御手段１９は、本実施形態における画像処理を終了するか否かを判断する（Ｓ０７）。Ｓ０７の処理では、例えばＳ０１の処理で取得した画像等の問題でメイクアップ効果の定量化や顔の評価ができず、画像の取得をやり直す場合や、記憶手段１３等に記憶された複数の画像に対して、メイクアップ効果の定量化や顔の評価を連続して行う場合には、処理を終了しないと判断する。また、ユーザからの終了指示等を受けた場合や処理対象の画像がない場合には、処理を終了すると判断する。Ｓ０７の処理において、処理を終了しない場合（Ｓ０７において、ＮＯ）、Ｓ０１の処理に戻る。また、処理を終了する場合（Ｓ０７において、ＹＥＳ）、本実施形態における画像処理を終了する。

【0047】

＜メイクアップ効果の定量化の具体例＞
次に、画像処理装置１０における設定手段１６、画像処理手段１７、及び定量化手段１８を用いたメイクアップ効果の定量化の具体例について説明する。本実施形態では、例えば素顔の顔に関する特徴を維持しながら、小顔の度合いを段階的に変化させる。その方法として、例えば画像処理手段１７において顔形状の台形補正等を行い、補正により生成された比較刺激（指標の異なる複数の顔画像）等を用いて、標準刺激（元画像）の小顔度を上下法（ｕｐ−ｄｏｗｎ ｍｅｔｈｏｄ、ｓｔａｉｒｃａｓｅ ｍｅｔｈｏｄ）を用いて測定することで、メイクアップによる小顔効果を定量化する。

【0048】

ここで、本実施形態において、小顔とは、顔が小さく見えることである。また、美容上の小顔効果とは、例えばその人物の顔立ち以外の影響（メーキャップ、ヘアスタイル、服装、姿勢、表情等）により、その人物の顔幅が実際の顔幅よりも細く見える効果等であるが、これらの意味に限定されるものではない。本実施形態における小顔効果は、例えばファンデーションやフェースカラー等を塗布し、陰影や立体感を演出することによって、主に顔下部（顔の下半分）の輪郭（フェースライン）を小さく見せる効果である。

【0049】

本実施形態では、画像処理装置１０が、画像中の人物から顔領域を検出し、検出された顔領域の輪郭に対応させた指標を設定し、設定された指標を基準として、人物の顔の所定部位を変形させる。また、人物の顔の所定の部位を変形させたときの変化量に基づいて、人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する。

【0050】

例えば、設定手段１６は、顔領域の輪郭上の頬弓部に対応付けられた第１の点と、オトガイ部に対応付けられた第２の点とを結ぶ直線を指標として設定し、画像処理手段１７は、指標として設定された直線の傾きを変化させることで、人物の所定の部位（例えば、顔下部）を変形させることができる。また、画像処理手段１７は、人物の所定の部位（例えば、顔下部）を変化させることで生じる画像の画素の移動量を、人物のあごの角度に基づいて補正する。また、定量化手段１８は、画像処理手段１７により補正された変化量に基づいて、人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する。

【0051】

＜顔画像のあご幅を変える方法と、その指標例＞
ここで、顔画像のあご幅を変える方法と、その指標例について説明する。図４は、顔の特徴点の抽出例を示す図である。図４の例では、カメラ等で撮影した画像に含まれる被験者（ユーザ）の顔画像３０に対して、顔の特徴点として、例えば輪郭線上の６点（特徴点１〜６）の座標を計測する。

【0052】

なお、図４の例において、特徴点１、６は頬弓であり、特徴点２、５は口角を結ぶフェースラインとの交点であり、特徴点３，４はオトガイである。特徴点１〜６の画像上のそれぞれの座標値は、画像の左上を原点（０，０）として（ｘ_ｓ１，ｙ_ｓ１）〜（ｘ_ｓ６，ｙ_ｓ６）と設定することができる。このとき、左上の原点に対して、右に行くほどｘ座標値が大きくなり、下に行くほどｙ座標値が大きくなる。

【0053】

具体的には、図４の例では、特徴点１（ｘ_ｓ１，ｙ_ｓ１）＝（１３０，５５５）、特徴点２（ｘ_ｓ２，ｙ_ｓ２）＝（１９５，８００）、特徴点３（ｘ_ｓ３，ｙ_ｓ３）＝（３０３，９３０）、特徴点４（ｘ_ｓ４，ｙ_ｓ４）＝（５１２，９３０）、特徴点５（ｘ_ｓ５，ｙ_ｓ５）＝（６２５，８００）、特徴点６（ｘ_ｓ６，ｙ_ｓ６）＝（６７８，５５５）となっている。なお、座標値の単位はピクセルである。

【0054】

＜元画像と補正画像とのピクセルの対応関係＞
次に、本実施形態における画像処理における元画像と補正画像とのピクセルの対応関係について説明する。補正画像は、次の手順で生成される。まず、元画像と同じサイズのブランク画像（新画像）を生成する。次に、新画像の各ピクセルに対し、順番に元画像のピクセルを使って埋めてゆく。新画像の座標（ｘ_ｎ，ｙ_ｎ）のピクセルには、元画像の座標（ｘ_０，ｙ_０）のピクセルの色を使う。したがって、ｘ_０とｙ_０とを求めることになる。元画像のどのピクセルを用いるかは、例えば以下に示す計算式等で決定することができる。

【0055】

例えば、本実施形態における補正処理の一例として、最初に特徴点２と特徴点５の箇所をどれだけ太めるか（幅を広げるか）を決定する。ここで、太める幅（ピクセル単位）をＬとする。また、ｙ_０＝ｙ_ｎとして求める。
＜あごのラインによる補正（傾斜）がある場合＞
向かって右半面の顔を処理する式は、
w=exp((x_n-(((x_s4-x_s6)/(y_s4-y_s6))*(y_n-y_s5)+x_s5+L))/A) ・・・（１Ａ）
x₀=x_n-w*L ・・・（２Ａ）
向かって左半面の顔を処理する式は、
w=exp(((((x_s3-x_s1)/(y_s3-y_s1))*(y_n-y_s2)+x_s2-L)-x_n)/A) ・・・（１Ｂ）
x₀=x_n+w*L ・・・（２Ｂ）
ここで、上述した（１Ａ）又は（１Ｂ）式において、Ａは指数関数の効果を調整する定数であり、例えば画像サイズ等に依存する。
＜あごのラインによる補正（傾斜）がない場合＞
向かって右半面の顔を処理する式は、
w=exp((x_n-(０*(y_n-y_s5)+x_s5+L))/A) ・・・（３Ａ）
x₀=x_n-w*L ・・・（４Ａ）
向かって左半面の顔を処理する式は、
w=exp(((０*(y_n-y_s2)+x_s2-L)-x_n)/A) ・・・（３Ｂ）
x₀=x_n＋w*L ・・・（４Ｂ）
これらにより、（ｘ_０，ｙ_０）が求まる。

【0056】

ここで、例えば（１Ａ）式において、「exp((x_n-(((x_s4-x_s6)/(y_s4-y_s6))*(y_n-y_s5)+x_s5+L))/A)」は、補正において、全ピクセルＬだけ移動させるということはできない。そのため、例えば図４に示す特徴点５からのｘ（横軸）の距離に応じてＬに対する重み付けを計算する。また、（１Ａ）式において、「(x_s4-x_s6)/(y_s4-y_s6)」は、特徴点４と特徴点６とを結ぶ傾きを計算している。また、（１Ａ）式において、「(x_s4-x_s6)/(y_s4-y_s6)*(y_n-y_s5)+x_s5+L)」は、単純に特徴点５からのｘ距離で決めているのではなく、「(x_s4-x_s6)/(y_s4-y_s6)」で計算する傾きで補正している。

【0057】

次に、あごのラインによる補正（傾斜）がある場合とない場合とについて図を用いて説明する。図５は、特徴点に基づく定量化のための補正処理の一例を示す図である。図５（Ａ）は、傾斜を付けずに上述した（３Ａ）、（３Ｂ）、（４Ａ）、及び（４Ｂ）式により計算した図を示し、図５（Ｂ）は、傾斜を付けて上述した（１Ａ）、（１Ｂ）、（２Ａ）、及び（２Ｂ）式により計算した図を示している。

【0058】

上述した２つの補正の違いは、上述した特徴点１と特徴点３とを結ぶ線や、特徴点４と特徴点６とを結ぶ線の傾きに沿った傾斜が付けられているか否かである。図５（Ａ）の例では、任意の点に対応する元画像の点座標を計算する際にｙ座標値に関わらず、変形に使う指数関数の原点を、特徴点２や特徴点５のｘ座標値に設定している。したがって、画像処理後（補正後）の画像は、図５（Ａ）の点線に示すように平行に圧縮された状態になる。

【0059】

一方で、図５（Ｂ）の例では、指数関数の原点は、特徴点１と特徴点３とを結ぶ線（或いは４と特徴点６）の傾斜によってシフトしている。したがって、画像処理後（補正後）の画像は、図５（Ｂ）の点線に示すようにあごの傾斜に沿った圧縮になる。ただし、傾斜の原点は、左半面では特徴点２であり、右半面では特徴点５である。そのため、特徴点２や特徴点５付近のあごのライン（行）では相違がないことになる。

【0060】

図６は、補正処理におけるあごのラインの傾斜について説明するための図である。図６（Ａ）は、図５（Ａ）に対応する図の部分拡大図であり、図６（Ｂ）は、図５（Ｂ）に対応する図の部分拡大図である。図６（Ａ）、（Ｂ）は、何れも特徴点２と特徴点５付近のあごのラインの拡大図である。図６（Ａ）、（Ｂ）に示すように、左半面の特徴点２付近の行のピクセルの並びと、右半面では特徴点５付近の行のピクセルの並びは、図６（Ａ）と図６（Ｂ）とで同一となる。つまり、あごのラインによる補正（傾斜）がある場合でも、ない場合でも、特徴点２及び特徴点５付近のピクセルの並びは同一となる。

【0061】

＜指標について＞
ここで、本実施形態において、顔画像のあごが、どのくらい小さいかを表す指標として例えば「幅」と「あご・インデックス」とがある。「幅」とは、例えば特徴点２と特徴点５との間隔である。この指標のメリットは、画像生成時に必ず線形に操作できることと、定量化の処理が簡便なことである。また、「あご・インデックス」とは、顔の下半分の面積を顔の上半分の面積で除算した値である。半分の基準となる位置（ライン）は、例えば上述した図４に示す特徴点１と特徴点６との平均的な高さ等を用いて定義することができるが、これに限定されるものではない。したがって、ある画像（補正画像）において、どれだけ小顔か（痩せたか）を表すには、任意の画像における上述した指標と、元画像の指標との比を取ればよい。上述した指標に基づく画像（比較刺激）の生成は、画像処理手段１７が行う。また、画像処理手段１７は、標準刺激や比較刺激の顔画像が素顔の顔画像の場合にＣＧ等を用いてメイクアップされた顔画像を生成する。

【0062】

次に、上述した図５（Ｂ）に示す補正処理（傾斜付き）について具体的に説明する。図７は、補正処理における座標の計算例を示す図である。図７の例において、例えば元画像のサイズが幅８１６，縦１０５２（余白含む）である場合に、上述した図４における特徴点５を−２０ピクセル太める（つまり２０ピクセル痩せさせる）場合を考える。なお、上述した（１Ａ）式における定数Ａを８５とする。これは、画像の大きさに依存する値である。

【0063】

例えば、新しい画像のピクセル座標（６０５，８００）が、元画像のどのピクセルに対応するかは、以下の計算で求まる。まず、ｙ座標値は、そのまま８００である。また、ｘ座標値は、向かって右半面にあるため、上述した（１Ａ）式、（２Ａ）式により、
w=exp((605-(((512-678)/(930-555))*(800-800)+625+(-20)))/85)=1
x₀=605-1*(-20)=625
となり、画像処理の結果として、ｘ座標６２５の点が６０５に−２０ピクセル移動したような画像が生成される（特徴点５の移動に相当する）。

【0064】

また、他の例として、任意の点（１１９，４２６）（図７に示す点４１）を描画するための元画像の座標を求めてみる（太らせ幅は同じく−２０ピクセルとする）。これは、向かって左半面の点であるため、（１Ｂ）式、（２Ｂ）式により、
w=exp(((((303-130)/(930-555))*(426-800)+195-(-20))-119)/85)=0.406385
x₀=119+0.406385*(-20)=110.8723
ピクセルは、整数単位なので四捨五入して１１１となり、したがって点４１の座標（１１９，４２６）に対応する元画像の点は（１１１，４２６）であり、点４１が８ピクセル横に移動したように見える。

【0065】

また、上述した図５（Ａ）と比較して、顔の中心点と、特徴点２や特徴点５がどのような座標として得られるかに関しては、上述したように違いはない。また、顔の中心点に関して、例えば点（４０７，５１１）（図７に示す点４２）に対応する元画像の点を考えてみる。この点の座標ｘは、特徴点１から特徴点６の平均で表すことができるが、仮に右半面として計算する。

【0066】

まず、あごのラインの傾斜がある場合（図５（Ｂ）の場合）、そのｘ座標値は，
w=exp((407-(((512-678)/(930-555))*(511-800)+625+(-20)))/85)=0.0216
x₀=407-(0.0216*(-20))=407.4
となる。ここで、ピクセルは、整数単位であるため、四捨五入して４０７となり、ｙ座標値はいつもｙ_ｏ＝ｙ_ｎであるため、５１１となる。つまり、新しい画像の座標４０７，５１１に対応する元画像の点は同じく（４０７，５１１）である。

【0067】

次に、あごのラインの傾斜がない場合（図５（Ａ）の場合）、そのｘ座標値は、
w=exp((407-(0*(511-800)+625+(-20)))/85)=0.09735
x₀=407-(0.09735*(-20))=408.9
となる。これを小数点第一位で四捨五入して整数にすると４０９となる。つまり、元画像では２ピクセル横に当たる箇所から点を取ってくることになる。ただし、これらの結果は定数Ａにも依存し、元画像と同じになる場合がある。

【0068】

＜補正により操作したピクセルに対応する幅比、あご・インデックス比について＞
次に、補正により操作したピクセルに対応する上述した幅（あご幅）比、あご・インデックス比について説明する。幅比については、任意の顔のあご幅と元画像のあご幅との比で求めることができる。例えば元画像のあご幅を４３０ピクセルとすると、操作したピクセルが０のとき、それは元画像であるため、あご幅比は４３０／４３０＝１となる。また、操作したピクセルが左右の片方につき−２０のとき、あご幅は、４３０＋（２＊（−２０））＝３９０であり、あご幅比は３９０／４３０＝０．９０６９７７となる。

【0069】

ここで、操作したピクセルが５のとき、あご幅は４３０＋（２＊５）＝４４０で、あご幅比は４４０／４３０＝１．０２３２５６となる。

【0070】

また、あご・インデックス比の場合は、顔の面積のうち、上述した図４に示す特徴点１と特徴点６との平均ｙ座標値より下の面積を上の面積で割った数値で求めることができ、面積はピクセル数で求まる。例えば、元画像の下面積が１８５９３８ピクセルで、上面積が２９８６６２ピクセルである場合、あご・インデックスは、０．６２２５６９９９６となる。

【0071】

あご・インデックス比は、補正した任意の画像のあご・インデックスと元画像のあご・インデックスとの比である。ここで、補正により操作したピクセルが０のとき、それは元画像であるため、比は１となる。また、操作したピクセルが−２０のとき、下面積が１７０４３０で、上面積が２９１８７７であるとすると、あご・インデックス比は（１７０４３０／２９１８７７）／０．６２２５６９９９６＝０．９３７９０３１２７となる。

【0072】

また、補正により操作したピクセルが５の場合、下面積が１８９６３６で、上面積が３００１０４であるとすると、あご・インデックス比は（１８９６３６／３００１０４）／０．６２２５６９９９６＝１．０１４９８７７８５となる。

【0073】

＜上下法を用いた実施形態＞
ここで、あご幅を用いた定量化の方法について、本実施形態では上下法を用いて指標を設定してもよい。例えば、画像処理装置１０において、設定手段１６は、顔領域の輪郭に対応させた所定の形状を指標として設定する。画像処理手段１７は、指標として設定された所定の形状の面積を変化させることで、人物の顔の所定の部位を変形させる。

【0074】

また、定量化手段１８は、画像処理手段１７により変形させたときの形状の面積比率に基づいて、人物の顔の輪郭又は大きさに関わるメイクアップ効果を定量化する。また、設定手段１６は、形状を顔領域の下半分の領域の輪郭に対応させ、人物の目の領域に対応して設定された第１の線を上辺とし、顔のあごの領域に対応して設定された第２の線を下辺とする台形形状として設定する。なお、設定手段１６は、例えば上述した第１の線を、顔領域の下半分の領域に対する左右の耳珠点を結ぶ線とし、また上述した第２の線を、第１の線に平行で顔のオトガイ点を通る線として設定することができる。

【0075】

また、画像処理手段１７は、第２の線を伸縮させた等脚台形の面積を変化させることで、人物の顔を変形させる。また、画像処理手段１７は、等脚台形の面積を変化させることで、人物の顔の下半分の領域を縮小又は拡大させた人物の顔のパターンを生成する。また、定量化手段１８は、画像処理手段１７により生成された人物の顔のパターンと、人物にメイクアップを施した顔とを比較することで、人物の顔の輪郭に対するメイクアップ効果を定量化する。

【0076】

また、定量化手段１８は、人物の顔のパターンと、人物にメイクアップを施した顔とを心理物理測定法のうち上下法を用いて比較することで、人物の顔の輪郭に対する錯視効果を定量化する。また、定量化手段１８は、人物の顔の輪郭に対するメイクアップ効果として、人物にメイクアップを施したときの小顔効果を定量化することができる。

【0077】

＜小顔効果の評価測定手法＞
顔をスリムに見せる化粧法があることは知られている。しかし、そのメイクが（人の目にとって）どの程度の効果を持っているのかを測定するための良い尺度は存在していなかった。そこで、本実施形態では、顔の「スリム度」或いは「小顔度」を測定するための客観的な尺度（ものさし）を設定する。その上で、その尺度を使った測定方法として上下法を用いる。上下法（階段法）は心理物理学的測定方法の一例である。

【0078】

本実施形態における尺度は、客観的な指標によって頬からあごにかけての輪郭線を変形（痩せさせたり太らせたり）した無化粧の顔写真又は中立的な化粧を施した顔写真等である（比較刺激）。化粧の施された顔写真（標準刺激）を、これらの比較刺激と比較すれば、どの程度の痩せ度に相当するか（主観的等価点）を測定することができる。

【0079】

ここで、本実施形態における上下法とは、例えばメイクアップ顔（化粧顔）の「小顔に見える」という知覚を、実際に顔下部の輪郭を段階的に変化させた素顔画像のものさしと一定のルールで繰り返し比較することで推定する手法であるが、これに限定されるものではない。

【0080】

ここで、図８は、小顔のものさしの作成方法を説明するための図である。本実施形態では、顔画像を変形させた尺度画像を生成する方法として、４種類の方法を用いることができる。第１の方法は、図８に示すように、顔の下半分に長方形の枠５０を設定し、それを面積２％ステップで台形形状５１に変換する。鼻と口の幅も同様に変換されるが、首の太さは一定（元画像（original）３０のまま）である。これにより、標準刺激（元画像）に対するユーザの尺度画像（比較刺激）３０ａ〜３０ｆが生成される。図８の例では、面積の錯視量として、尺度画像３０ａ〜３０ｆに対して、＋４％、＋２％、−２％、−４％、−６％、−８％が設定されている。

【0081】

本実施形態では、例えば図８に示すように顔画像の目から下の顔の面積を一定の割合で拡大又は縮小することにより、顔の大きさのものさしとなる比較刺激を生成することができる。また、本実施形態では、例えば図１３のように、標準刺激（例えば、シェーディングの化粧を施した顔）と、比較刺激とを一枚ずつ画面に表示し、実験参加者等に「どちらの顔が大きく見えるか」を判断させる。図１３は標準刺激と比較刺激とが一枚ずつ表示された画面の一例のイメージ図である。なお、図１３の画面では試行ごとに標準刺激と比較刺激とを例えば数秒間、表示する。標準刺激と比較刺激との左右位置は、毎回、ランダムに決める。例えば実験参加者は、どちらが小顔に見えるかを判断し、対応するキー押し等で回答する。

【0082】

上下法では各標準刺激に２系列を割り当てる。各系列の最初の比較刺激は明らかに標準刺激の顔より広く或いは狭く見える顔から開始する。実験参加者が比較刺激の方が大きいと判断すれば、次のステップではもう一段階小さい比較刺激と標準刺激とを比較し、比較刺激の方が小さいと判断すれば、次のステップではもう一段階大きい比較刺激と標準刺激とを比較して、どちらの顔が大きく見えるかを再度判断させる。この過程を繰り返すことで、比較刺激のサイズは上昇下降を繰り返して、標準刺激と同程度の顔の大きさに知覚される点へ収束する。

【0083】

上昇から下降及び下降から上昇への折り返し点の値を平均することで、標準刺激と感覚的に等しい効果をもつ比較刺激の物理量（主観的等価点）を算出することができる。すなわち、主観的等価点は各標準刺激の顔幅と同じに知覚される比較刺激の顔幅となる。このように、主観的等価点を測定することで、化粧を施した顔（標準刺激）がモデルの素顔に対してどの程度の小顔効果を持つかを定量化することができる。

【0084】

例えば、上述した尺度画像３０ａ〜３０ｆを用いて、被験者１８名により観察距離０．６ｍで上下法アルゴリズムにより主観的等価点を測定する。図９は、小顔効果が生じる顔画像（標準刺激）の一例を示す図である。主観的等価点を測定した結果、頬にシェーディングを施した顔画像６０で、−１．９１７％（ｐ＜０．０００１）、化粧なしで首を細くした画像６１では、−１．１６７％（ｐ＜０．００３）の統計的に有意な小顔錯視が得られた。本実施形態において、小顔錯視とは、例えば元は小顔になったわけではないのに小顔になったように視認することであるが、これに限定されるものではない。

【0085】

尺度画像を作成する第２の方法は、指数関数による勾配を利用した変形方法である。この変形方法の優れた点は、あごの輪郭は変形されても、顔の中の口や鼻の形状は維持されることである。変形後の顔を描画するには、例えば顔画像の向かって右半分の場合、上述した数式の（１Ａ）式、（２Ａ）式を用いて元画像のピクセルを採取し描画する。

【0086】

図１０は、指数関数を利用して変形された顔画像の一例を示す図である。図１０の例では比較刺激の画像（補正画像）を示している。これらは全て素顔（無化粧顔）であり，化粧顔の見た目の痩せ具合を測定するための尺度として使用される。図１０に示す顔画像７０ａから７０ｅは、口角の延長線上のほほの幅を基準にして、顔の細さが系統的に操作されている。その幅は、それぞれ顔画像７０ａは９０％，顔画像７０ｂは９５％，顔画像７０ｃは１００％，顔画像７０ｄは１０５％，顔画像７０ｅは１１０％である。つまり、顔画像７０ｃが元画像である）。

【0087】

ここで、図１０に示すように指数関数で変形された顔画像７０ａ〜７０ｅに対する評価実験を行った。図１１は、化粧を施した顔画像（標準刺激）の一例を示す図である。なお、実験参加者は、大学生２５人であった。測定される刺激（標準刺激）は、チークの濃さ２水準（なし，あり）と輪郭のシェーディングの濃さ３水準（なし，薄い，濃い）とに操作された顔画像７１ａ〜７１ｆである（被験者内要因）。また、比較刺激は、頬の痩せ度を２１段階に操作された顔写真とした。背景は、白色で首と肩は、画像処理により削除されている。主観的等価点の測定アルゴリズムは上下法である。

【0088】

なお、図１１において、顔画像７１ａ〜７１ｃはチークなし画像、顔画像７１ｄ〜７１ｆはチークあり画像である。また、顔画像７１ａ〜７１ｃ、顔画像７１ｄ〜７１ｆは、それぞれ段階的にシェーディングなし、薄いシェーディング、濃いシェーディングとなっている。

【0089】

図１２は、評価実験で得られた結果の一例を示す図である。図１２において、横軸は、画像処理によるシェーディングの濃さを示し、縦軸は、知覚された頬の幅の変化量（％）を示す。

【0090】

評価実験の結果、図１２に示すように、メイクアップとしてチークがあるときは、チークがないときよりも頬の幅（口角の延長線上）が約０．２％太って見えるという効果が見られた（ｐ＝０．０２２）。しかしながら、シェーディングの効果及び両要因の交互作用は有意ではなかった（ｐ＝．１７２及びｐ＝．１４９５）。ただし、チークなしや、濃いシェーディングが施された顔で知覚される痩せ幅（Ｍ＝−０．５２％，ＳＤ＝０．３４）は、０よりも有意に小さいため（ｔ（２４）＝４．４２７，ｐ＝．０００２），シェーディングによる小顔効果も部分的に示された。

【0091】

これらの尺度（台形変換又は指数関数に基づく変形画像）と上下法による測定との組み合わせにより、小顔錯視量を高精度で測定することができた。本実施形態で得られた錯視量は、例えばチークでも０．２％程度と小さかった。この小さな値は、標準刺激のメイクの仕方に起因するものであり、尺度と測定方法の関係に影響するものではない。この測定方法は、これほど小さな知覚の差であっても抽出できる精度の高さを証明している。更に、シェーディングもチークも施されていない顔の痩せ具合は、ほぼ正しく±０％となっている。これもこの測定方法の妥当性を示す一つの結果である。

【0092】

なお、上述した小顔のものさしの画像処理の他の例として、例えば図４に示す顔画像３０に対して、左右の目袋のカーブの最下点を通り、顔の左右輪郭との交点の成す線分を上底とし、この線分に平行であごのカーブの最下点を通る任意の長さの直線からなる等脚台形を規定する。ここで、画像処理手段１７は、上底と下底の長さが等しい、すなわち長方形を成すときの顔の大きさの面積を１００％とし、下底の長さを一定の比率で伸縮することで小顔効果の比較刺激（モノサシ）を作成してもよい。これにより、上述したように台形の面積の拡大率、縮小率を顔の大きさ（小顔効果）の指標とすることができる。

【0093】

尺度画像を作成する第３の方法は、図１４に示すように、顔領域の画像を、顔の輪郭の画像、顔の中心パーツの画像、頸部・肩の画像に分割し、顔の輪郭の画像を横方向に小さなステップ（例えば１％刻みで９５％〜１０４％）で伸縮させた後、元の顔の中心パーツの画像と頸部・肩の画像とを合成するものである。

【0094】

図１４は顔画像を変形させた尺度画像を生成する他の方法を説明する図である。尺度画像を作成する第３の方法では、顔の輪郭の画像が横方向に伸縮するが、顔の中心パーツの画像と頸部・肩の画像とが不変となる。第３の方法は、顔の中心パーツの大きさ知覚に影響せず、顔全体の幅を縮小して見せる小顔メイクの場合に適している。

【0095】

また、尺度画像を作成する第４の方法は、図１５に示すように、顔領域の画像を、顔の画像、頸部・肩の画像に分割し、顔の画像を横方向に小さなステップ（例えば１％刻みで９５％〜１０４％）で伸縮させた後、元の頸部・肩の画像を合成するものである。

【0096】

図１５は顔画像を変形させた尺度画像を生成する他の方法を説明する図である。尺度画像を作成する第４の方法では、顔の輪郭の画像と共に顔の中心パーツの画像も横方向に伸縮する。なお、頸部・肩の画像は不変である。第４の方法は、顔の中心パーツの大きさ知覚にも影響する小顔メイクの場合に適している。

【0097】

上述したように、本実施形態によれば、メイクアップ効果を定量化することができる。また、定量化した結果に基づいて顔の評価を行うことができ、化粧アドバイスやカウンセリング、美容、施術等に対する各種情報を提供することができる。

【0098】

例えば、素顔の顔型の特徴を維持しながら、小顔の度合いを段階的に変化させる方法として、台形補正等を行い、そのようにして生成された比較刺激を用いて、標準刺激の小顔度を上下法を用いて測定することで、メイクアップによる小顔効果を測定して定量化することができる。

【0099】

以上、実施例について詳述したが、特定の実施例に限定されるものではなく、特許請求の範囲に記載された範囲において、種々の変形及び変更が可能である。また、上述した各実施例の一部又は全部を組み合わせることも可能である。

【符号の説明】

【0100】

１０ 画像処理装置
１１ 入力手段
１２ 出力手段
１３ 記憶手段
１４ 画像取得手段
１５ 検出手段
１６ 設定手段
１７ 画像処理手段
１８ 定量化手段
１９ 制御手段
２１ 入力装置
２２ 出力装置
２３ ドライブ装置
２４ 補助記憶装置
２５ メモリ装置
２６ ＣＰＵ
２７ ネットワーク接続装置
２８ 記録媒体
２９ システムバス
３０，６０，７０，７１ 顔画像
４１，４２ 点
５０ 枠

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】