特許 6382052 画像処理装置、画像処理システム、画像処理方法、プログラム及び記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6382052

(24)【登録日】2018年8月10日

(45)【発行日】2018年8月29日

(54)【発明の名称】画像処理装置、画像処理システム、画像処理方法、プログラム及び記憶媒体

(51)【国際特許分類】

   H04N 1/62 20060101AFI20180820BHJP

   H04N 1/60 20060101ALI20180820BHJP

   G06T 1/00 20060101ALI20180820BHJP

【ＦＩ】

   H04N1/62 800

   H04N1/60 830

   G06T1/00 510

   G06T1/00 340A

【請求項の数】14

【全頁数】22

(21)【出願番号】特願2014-202831(P2014-202831)

(22)【出願日】2014年10月1日

(65)【公開番号】特開2015-144420(P2015-144420A)

(43)【公開日】2015年8月6日

【審査請求日】2017年9月25日

(31)【優先権主張番号】特願2013-265707(P2013-265707)

(32)【優先日】2013年12月24日

(33)【優先権主張国】JP

(73)【特許権者】

【識別番号】000006747

【氏名又は名称】株式会社リコー

(73)【特許権者】

【識別番号】304021831

【氏名又は名称】国立大学法人千葉大学

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(72)【発明者】

【氏名】柿沼 明宏

(72)【発明者】

【氏名】高橋 浩

(72)【発明者】

【氏名】上条 直裕

(72)【発明者】

【氏名】津村 徳道

(72)【発明者】

【氏名】田中 伶実

【審査官】 豊田 好一

(56)【参考文献】

【文献】 米国特許出願公開第２００７／００６５００６（ＵＳ，Ａ１）

【文献】 特開２００２−１５２７７２（ＪＰ，Ａ）

【文献】 特表２０１３−５２０２７４（ＪＰ，Ａ）

【文献】 Norimichi Tsumura et al.，Image-based skin color and texture analysis/synthesis by extracting hemoglobin and melanin information in the skin，ACM TRANSACTIONS ON GRAPHICS(TOG)，米国，ACM，２００３年 ７月 １日，vol. 22,no. 3，pp. 770-779，ISSN:0730-0301

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ １／４６−６２

Ｇ０６Ｔ １／００

(57)【特許請求の範囲】

【請求項1】

画像から肌領域を抽出し、前記肌領域から肌情報を取得する肌情報取得部と、
前記肌情報から前記肌領域を構成する独立成分を抽出する独立成分抽出部と、
前記独立成分に基づいて、前記画像の撮影時に前記肌領域を照射する光源の色情報であるバイアスを算出するバイアス算出部と、を有し、
前記独立成分抽出部は、前記肌情報から前記独立成分として、メラニン色素成分とヘモグロビン色素成分と陰影成分とを抽出し、
前記バイアス算出部は、前記メラニン色素成分の最小成分と前記ヘモグロビン色素成分の最小成分と前記陰影成分の最小成分のうち、少なくとも前記メラニン色素成分の最小成分と前記ヘモグロビン色素成分の最小成分とを含む前記最小成分の合成和に基づいて、前記バイアスを算出する
ことを特徴とする画像処理装置。

【請求項2】

前記独立成分抽出部は、前記肌情報取得部が取得した前記肌情報を対数空間にプロットし、プロットされた肌情報を色素平面に射影し、
前記メラニン色素成分の最小成分は、前記色素平面へ射影された射影肌情報の中で、前記ヘモグロビン色素成分の独立成分方向をなす直線に最も近い射影肌情報プロットから取得されたメラニン色素成分であり、
前記ヘモグロビン色素成分の最小成分は、前記色素平面へ射影された射影肌情報の中で、前記メラニン色素成分の独立成分方向をなす直線に最も近い射影肌情報プロットから得られたヘモグロビン色素成分である
請求項１に記載の画像処理装置。

【請求項3】

前記メラニン色素成分のメラニン色素成分量を、前記ヘモグロビン色素成分の独立成分方向をなす直線からの距離とし、前記メラニン色素成分量が小さい方から所定範囲内にある複数のメラニン色素成分の平均を前記メラニン色素成分の最小成分とし、
前記ヘモグロビン色素成分のヘモグロビン色素成分量を、前記メラニン色素成分の独立成分方向をなす直線からの距離とし、前記ヘモグロビン色素成分量が小さい方から所定範囲内にある複数のヘモグロビン色素成分の平均を前記ヘモグロビン色素成分の最小成分とする
請求項１に記載の画像処理装置。

【請求項4】

前記陰影成分の最小成分は、前記独立成分抽出部によって抽出された陰影成分のうち、前記メラニン色素成分の独立成分方向をなす直線と前記ヘモグロビン色素成分の独立成分方向をなす直線とを含む平面からの距離が最も小さい陰影成分である
請求項１から３の何れか一項に記載の画像処理装置。

【請求項5】

前記陰影成分の陰影成分量を、前記メラニン色素成分の独立成分方向をなす直線と前記ヘモグロビン色素成分の独立成分方向をなす直線とを含む平面からの距離とし、前記陰影成分量が小さい方から所定範囲内にある複数の陰影成分の平均を前記陰影成分の最小成分とする
請求項１から３の何れか一項に記載の画像処理装置。

【請求項6】

前記バイアスに基づいて、前記画像を補正する画像補正部を有する
請求項１から５の何れか一項に記載の画像処理装置。

【請求項7】

前記画像補正部は、前記補正の目標となる基準バイアスを取得し、前記バイアス算出部によって算出された前記バイアスと前記基準バイアスとに基づいて、前記画像を補正する請求項６に記載の画像処理装置。

【請求項8】

前記基準バイアスは、標準的な光源の色情報である
請求項７に記載の画像処理装置。

【請求項9】

前記基準バイアスはユーザの指定によって決められる情報である
請求項７に記載の画像処理装置。

【請求項10】

前記補正は、前記バイアスと前記基準バイアスとによって算出される補正パラメータを、前記画像の少なくとも一部に演算する処理である
請求項７から９の何れか一項に記載の画像処理装置。

【請求項11】

ネットワークを介して接続された画像処理装置と情報処理端末とを備える画像処理システムであって、
前記画像処理装置は、
画像から肌領域を抽出し、前記肌領域から肌情報を取得する肌情報取得手段と、
前記肌情報から前記肌領域を構成する独立成分を抽出する独立成分抽出手段と、
前記独立成分に基づいて、前記画像の撮影時に前記肌領域を照射する光源の色情報であるバイアスを算出するバイアス算出手段と、を有し、
前記独立成分抽出手段は、前記肌情報から前記独立成分として、メラニン色素成分とヘモグロビン色素成分と陰影成分とを抽出し、
前記バイアス算出手段は、前記メラニン色素成分の最小成分と前記ヘモグロビン色素成分の最小成分と前記陰影成分の最小成分のうち、少なくとも前記メラニン色素成分の最小成分と前記ヘモグロビン色素成分の最小成分とを含む前記最小成分の合成和に基づいて、前記バイアスを算出する
ことを特徴とする画像処理システム。

【請求項12】

画像から肌領域を抽出し、前記肌領域から肌情報を取得する肌情報取得工程と、
前記肌情報から前記肌領域を構成する独立成分を抽出する独立成分抽出工程と、
前記独立成分に基づいて、前記画像の撮影時に前記肌領域を照射する光源の色情報であるバイアスを算出するバイアス算出工程と、を有し、
前記独立成分抽出工程において、前記肌情報から前記独立成分として、メラニン色素成分とヘモグロビン色素成分と陰影成分とを抽出し、
前記バイアス算出工程において、前記メラニン色素成分の最小成分と前記ヘモグロビン色素成分の最小成分と前記陰影成分の最小成分のうち、少なくとも前記メラニン色素成分の最小成分と前記ヘモグロビン色素成分の最小成分とを含む前記最小成分の合成和に基づいて、前記バイアスを算出する
ことを特徴とする画像処理方法。

【請求項13】

請求項１２に記載の画像処理方法をコンピュータに実行させるためのプログラム。

【請求項14】

請求項１３に記載のプログラムを記憶したコンピュータが読み取り可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像データに画像処理を施す画像処理装置、画像処理システム、画像処理方法、プログラム及び記憶媒体に関する。

【背景技術】

【0002】

デジタルカメラによる撮影、スキャナによる写真等の読み込み等で得られるデジタル画像データ（以下、「画像データ」と称する）は、各種プリンタから記録紙等への出力、インターネットを介して接続する複数のモニタへの表示等、様々な形で用いられる。

【0003】

画像データは記録紙やモニタ等に見える形で出力され、用途によっては画像データの出力結果に高い画像品質が要求される。

【0004】

画像品質の劣化にはいろいろな症状があるが、画像データ中の被写体の色味が記憶色と異なって見える現象は観察者に違和感を与え、最も品質を低下させる症状の一つとなっている。このように被写体の色味が変化してしまうことを「色かぶり」などと称し、色かぶりを低減するためには画像変換ソフト等による複雑な修正作業が必要となる。

【0005】

色かぶりの発生要因もいろいろと挙げられるが、撮影時の光源の影響を受けて発生することが一般的である。

【0006】

撮影時の光源の色温度が標準的な白色光源（例えば５０００Ｋの光源）に比べて高かったり低かったりすると、該色温度に応じて被写体の色味が変化してしまうのは当然である。人間の視覚は色温度の異なる光源下でもある程度順応してしまう特性があるため、撮影環境下では被写体の色味変化が抑制されて見えてしまう。従って、撮影後の画像データにおける被写体の色味変化を見ると違和感を覚えることが起こる。

【0007】

また、人間の目の分光感度と撮像素子の分光感度とが一致していることは一般的にはあり得ないために、撮影時の光源の分光特性によっては、（視覚順応とは関係なく）標準的な色味に見えていた被写体が、撮影された画像データ上では色味が変化して再現されることがある。

【0008】

このような問題を解消するには、撮影時の光源の特性情報（色温度や分光特性等）を取得または推定し、該特性情報を用いて画像補正を行う手法が必要となる。

【0009】

撮影時の光源特性を正確に取得するには、そのためのセンサー等を撮像素子とは別に設置する方法があるが、コストの上昇や撮像機のサイズアップ等の弊害も伴い、最適な手法とは言い難い。従って、画像データ情報を分析して撮影時の光源特性を推定するのが、一般的な手法となっている。

【0010】

特に肌色は、赤や黄色のような原色とは異なり、微妙な色の変化が視覚的に大きく効いてくるため、色かぶりによる色味変化が大きな画像破綻を引き起こすことが多い。つまり、人物が被写体となる撮影においては、より厳密な光源特性の推定が要求されることになり、最近では画像データ中の肌情報を利用した光源推定等が提案されている。

【0011】

例えば、特許文献１に係る画像処理方法によれば、画像データから肌部と高輝度部を抽出し、前記肌部と前記高輝度部との色空間における相対位置関係が、補正によって基準ベクトルの位置関係と同等になるような画像補正を行うことで、色かぶり等の画像弊害を抑制することが可能な画像処理を施すことができる。

【発明の概要】

【発明が解決しようとする課題】

【0012】

しかしながら、特許文献１に係る画像処理方法では、前記肌部と前記高輝度部は全く相関無く抽出されるため、前記肌部に対する光源と前記高輝度部に対する光源の条件が異なる場合には正確な色補正が達成できない。

【0013】

また、前記高輝度部として、彩度の高い被写体の高明度部（例えば、黄色い物体の明るい部分等）が抽出されてしまった場合でも、正確な色補正が達成できない。

【0014】

本発明は上記に鑑みてなされたものであって、肌部のみの情報から撮影時の光源特性を推定し、色かぶりの抑制が可能な画像処理装置を提供することを目的とする。

【課題を解決するための手段】

【0015】

本発明の一態様の画像処理装置によれば、画像から肌領域を抽出し、前記肌領域から肌情報を取得する肌情報取得部と、前記肌情報から前記肌領域を構成する独立成分を抽出する独立成分抽出部と、前記独立成分に基づいて、前記画像の撮影時に前記肌領域を照射する光源の色情報であるバイアスを算出するバイアス算出部とを有し、前記独立成分抽出部は、前記肌情報から前記独立成分として、メラニン色素成分とヘモグロビン色素成分と陰影成分とを抽出し、前記バイアス算出部は、前記メラニン色素成分の最小成分と前記ヘモグロビン色素成分の最小成分と前記陰影成分の最小成分のうち、少なくとも前記メラニン色素成分の最小成分と前記ヘモグロビン色素成分の最小成分とを含む前記最小成分の合成和に基づいて、前記バイアスを算出する。

【発明の効果】

【0016】

本発明の実施形態によれば、画像データ中の肌部のみの情報から撮影時の光源特性を精度良く推定し、画像データの色かぶりの抑制を簡便に実現できる画像処理を実現可能な画像処理装置を提供できる。

【図面の簡単な説明】

【0017】

【図1】第１の実施形態に係る画像処理装置のハードウェア構成を例示する図である。

【図2】第１の実施形態に係る画像処理装置の機能構成を例示する図である。

【図3】第１の実施形態に係る入力画像データ及び肌領域を例示する図である。

【図4】対数色空間における肌情報の分布を例示する図である。

【図5】独立成分抽出処理のフローチャートを例示する図である。

【図6】対数色空間における各最小独立成分及びバイアスを例示する図である。

【図7】バイアス算出部が算出したバイアスを例示する図である。

【図8】バイアスを基準バイアスに置き換えた処理を例示する図である。

【図9】バイアス及び基準バイアスから分離された色素成分と陰影成分を例示する図である。

【図10】画像補正部における画像補正処理のフローチャートを例示する図である。

【図11】第１の実施形態に係る画像処理のフローチャートを例示する図である。

【図12】第２の実施形態に係る画像処理システムの構成を例示する図である。

【図13】第２の実施形態に係るＭＦＰのハードウェア構成を例示する図である。

【図14】第２の実施形態に係る画像処理サーバのハードウェア構成を例示する図である。

【図15】第２の実施形態に係る画像処理システムの機能構成を例示する図である。

【発明を実施するための形態】

【0018】

以下、本発明の好適な実施形態について、図面を用いて詳細に説明する。

【0019】

〔第１の実施形態〕
＜画像処理装置のハードウェア構成＞
図１に、第１の実施形態の画像処理装置１００のハードウェア構成例を示す。

【0020】

図１に示す様に、画像処理装置１００は、制御部１０１、主記憶部１０２、補助記憶部１０３、外部記憶装置Ｉ／Ｆ部１０４、ネットワーク部Ｉ／Ｆ１０５、操作部１０６、表示部１０７を含み、それぞれパスＢを介して相互に接続されている。

【0021】

制御部１０１は、コンピュータの中で、各装置の制御やデータの演算、加工を行うＣＰＵ（Central Processing Unit）である。また、制御部１０１は、主記憶部１０２に記憶されたプログラムを実行する演算装置であり、入力装置や記憶装置からデータを受け取り、演算、加工した上で、出力装置や記憶装置等に出力する。

【0022】

主記憶部１０２は、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等であり、制御部１０１が実行する基本ソフトウェアであるＯＳやアプリケーションソフトウェア等のプログラムやデータを記憶又は一時保存する記憶装置である。

【0023】

補助記憶部１０３は、ＨＤＤ（Hard Disk Drive）などであり、実行されるプログラムなどに関連するデータを記憶する記憶装置である。

【0024】

外部記憶装置Ｉ／Ｆ部１０４は、例えばＵＳＢ（Universal Serial Bus）等のデータ伝送路を介して接続される例えばフラッシュメモリ等の記憶媒体１０８と画像処理装置１００とのインターフェイスである。

【0025】

また、記憶媒体１０８に、所定のプログラムを格納し、この記憶媒体１０８に格納されたプログラムが外部記憶装置Ｉ／Ｆ部１０４を介して画像処理装置１００にインストールされ、インストールされた所定のプログラムは画像処理装置１００により実行可能となる。

【0026】

ネットワークＩ／Ｆ部１０５は、有線及び／又は無線回線等のデータ伝送路により構築されたＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）等のネットワークを介して接続された通信機器を有する周辺機器と画像処理装置１００とのインターフェイスである。

【0027】

操作部１０６は、例えばハードキーで構成されるキースイッチやマウス等である。

【0028】

表示部１０７は、例えば、液晶や有機ＥＬ等のディスプレイであり、画像や操作用アイコン等を表示し、画像処理装置１００が有する機能をユーザが利用する際に各種設定を行うユーザインターフェイスとして機能する装置である。

【0029】

＜画像処理装置の機能構成＞
図２は、第１の実施形態に係る画像処理装置１００の機能構成を例示する図である。

【0030】

図２に示す様に、第１の実施形態に係る画像処理装置１００は、肌情報取得部２０１、独立成分抽出部２０２、バイアス算出部２０３、画像補正部２０４を有する。

【0031】

肌情報取得部２０１、独立成分抽出部２０２、バイアス算出部２０３、画像補正部２０４は、制御部１０１（図１）が主記憶部１０２等に記憶されているプログラムを実行することで実現される機能である。

【0032】

以下では、画像処理装置１００に入力された画像データの光源推定がなされて最終的に画像補正されるまでを行う処理における各部の処理内容について、図３から図１０に例示する画像処理に使用するデータ等と併せて説明する。

【0033】

≪肌領域抽出と肌情報取得≫
画像処理装置１００には、人物画像を含む画像データ（以下、入力画像データ）が入力され、肌情報取得部２０１が入力画像データから肌領域抽出を行い、人物画像の肌情報を取得する。

【0034】

図３に、画像処理装置１００に入力された入力画像データ３０１、肌情報取得部２０１による肌領域（３０２，３０４）の抽出例を示す。図３（ａ）は、入力画像データ３０１に存在する肌領域３０２（白色部分）をほぼ全て抽出した場合を例示する図である。

【0035】

図３（ａ）の事例では、肌情報取得部２０１は、入力画像データを構成する画素の色情報と予め設定された肌色判定基準とを比較しながら、一画素毎に肌領域か非肌領域かを判定する。入力画像データを構成する全画素において判定を行い、肌領域と判定された画素の集合が肌領域と自動的に決定される。

【0036】

図３（ｂ）は、入力画像データ３０１の人物画像における複数の肌部位３０３から、肌領域として肌パッチ３０４を抽出した場合を例示する図である。

【0037】

図３（ｂ）の事例では、肌情報取得部２０１は、入力画像データから顔検出を行い、人物の顔部分を抽出する。顔部分が抽出されると、顔部分の目や口や眉等の位置を検出し、それらとの相対位置関係から肌部位を抽出すべく位置を特定する。図３（ｂ）は、額、両頬、顎の４箇所から肌部位を抽出するように設定された事例であるが、肌部位の抽出箇所はこれらに限らず、肌領域であれば任意に設定してよい。図３（ｂ）の肌パッチ３０４は、４箇所の肌部位を組み合わせて１つのパッチとしている。肌部位及び肌パッチは矩形に限らず、任意の形状としてもよい。

【0038】

また、図３（ａ）と図３（ｂ）は自動的に肌領域（３０２，３０４）を抽出する事例であるが、表示部１０７に入力画像データを表示し、ユーザが該表示を見ながら操作部１０６を用いて肌領域を指定する方法としてもよい。

【0039】

入力画像データ３０１から肌領域（３０２，３０４）が抽出されると、肌情報取得部２０１は、肌領域（３０２，３０４）を構成する画素の肌情報を取得する。

【0040】

肌情報は、肌領域（３０２，３０４）を構成する全画素のＲＧＢ毎の８ビット階調値（０〜２５５）である。入力画像データ３０１が、例えばオフセット印刷等で扱われる様なＣＭＹＫ４色版の網点率等で構成されている場合には、所定の変換テーブル等を使ってＲＧＢへ変換してから肌情報を取得する。

【0041】

≪肌領域の独立成分抽出≫
肌情報取得部２０１により肌領域３０２等から肌情報が取得されると、次に独立成分抽出部２０２が、肌情報から肌領域を構成する独立成分（後述）を抽出する。

【0042】

皮膚の層構造は、表皮側から、メラニンを主な色素として含有する表皮層と、ヘモグロビンを主な色素として含有する真皮層と、皮下組織とにモデル化でき、肌色の見え（内部反射による色再現）は、主にメラニンとヘモグロビンの色素成分に依存していることが分かっている。

【0043】

人間のメラニンとヘモグロビンの色素自体の特性は一般的には個人差は無く、かつ夫々の色素成分は独立に扱える（ただし、各色素濃度は肌部位や個人によって異なり、それによって肌の見えが異なる）。従って画像信号のＲＧＢについて、−ｌｏｇＲ、−ｌｏｇＧ、−ｌｏｇＢをそれぞれｘ軸、ｙ軸、ｚ軸に割り当てた対数空間を考慮すると、メラニンの色素成分とヘモグロビンの色素成分は、１点で交わった夫々方向の異なる独立成分として表わせる。

【0044】

さらに、人間の肌には該肌を照射する光源位置等に関係して暗い部分と明るい部分とが存在し、このような濃淡は前述した２色素成分とは独立した陰影成分として表わせる。陰影成分は、対数空間において（１，１，１）方向の成分となる。

【0045】

従って肌色は、メラニンの色素成分とヘモグロビンの色素成分と、さらには肌の濃淡を決める陰影成分との各独立成分へと分離できる。肌色は、特定の人物画像においても肌部位によって異なるが、これは独立成分抽出部２０２によって抽出される各独立成分（メラニン色素成分、ヘモグロビン色素成分、陰影成分）の濃度が、肌部位によって夫々異なるためによる。

【0046】

図４は、対数空間にプロットされた、肌情報取得部２０１により抽出された肌情報の分布を例示する図である。図４には、独立成分抽出部２０２により抽出される各独立成分の方向を示すメラニン色素成分軸４０２、ヘモグロビン色素成分軸４０３、陰影成分軸４０４、さらにはメラニン色素成分軸４０２とヘモグロビン色素成分軸４０３とで構成される色素平面４０５が明示されている。

【0047】

色素平面４０５において陰影成分はゼロとなるため、対数空間にプロットされた肌情報４０１を陰影成分軸４０４と平行に移動させ、色素平面４０５に射影することで、陰影成分を除外し２色素成分のみで構成される射影肌情報４０６を得ることができる。この際、各肌情報が色素平面４０５に射影されるまでに移動した距離が、該各肌情報の陰影成分濃度（長さ）と等しくなる。

【0048】

さらに、射影肌情報４０６をメラニン色素成分軸４０２の方向成分とヘモグロビン色素成分軸４０３の方向成分とに分離すれば、メラニン色素成分とヘモグロビン色素成分が抽出される。例えば、図４において、任意の射影肌情報Ｆｉから抽出されるメラニン色素成分はＭｉ、ヘモグロビン色素成分はＨｉとなる。

【0049】

以上のように、独立成分抽出部２０２により、肌領域３０２等を構成する肌情報全てのメラニン色素成分、ヘモグロビン色素成分、陰影成分を抽出することができる。

【0050】

図５に、独立成分抽出部２０２における独立成分抽出処理のフローチャートを例示する。

【0051】

独立成分抽出部２０２では、まずステップＳ５０１にて、メラニン色素の成分軸４０２とヘモグロビン色素の成分軸４０３の情報を主記憶部１０２等から取得し、対数空間に２色素の成分軸（４０２，４０３）から構成される色素平面４０５を設定する。２色素の成分軸情報は、任意の人物の肌内部反射光画像に対して独立成分分析を行うことで抽出したものを、予め主記憶部１０２等に格納しておく。

【0052】

次にステップＳ５０２にて、肌情報取得部２０１が取得した肌情報を対数空間にプロットする。続いて、ステップＳ５０３にて、プロットされた肌情報４０１を色素平面４０５に射影し、射影時の移動距離に応じて各肌情報の陰影成分を抽出する。

【0053】

最後にステップＳ５０４にて、図４の肌情報Ｆｉからメラニンとヘモグロビンの各色素成分（Ｍｉ，Ｈｉ）を分離したように、色素平面４０５に射影された射影肌情報４０６の全プロットからメラニン色素成分とヘモグロビン色素成分を全て抽出する。

【0054】

≪バイアスの算出≫
独立成分抽出部２０２により、肌情報から各独立成分（メラニン色素成分、ヘモグロビン色素成分、陰影成分）が抽出されると、次にバイアス算出部２０３が、各独立成分から最小成分を夫々取得する。

【0055】

ここで、メラニン色素成分の最小成分を最小メラニン色素成分、ヘモグロビン色素成分の最小成分を最小ヘモグロビン色素成分、陰影成分の最小成分を最小陰影成分とする。

【0056】

図６は、最小メラニン色素成分Ｍｍｉｎと最小ヘモグロビン色素成分Ｈｍｉｎと最小陰影成分Ｓｍｉｎを例示した図である。最小メラニン色素成分Ｍｍｉｎは、色素平面４０５へ射影された射影肌情報４０６の中で、ヘモグロビン色素成分軸４０３に最も近い射影肌情報プロット６０１から得られたメラニン色素成分である。最小ヘモグロビン色素成分Ｈｍｉｎは、色素平面４０５へ射影された射影肌情報４０６の中で、メラニン色素成分軸４０２に最も近い射影肌情報プロット６０２から得られたヘモグロビン色素成分である。

【0057】

最小陰影成分Ｓｍｉｎは、肌情報４０１を色素平面４０５へ射影する際に、移動量が最も小さくなる肌情報プロット６０３から得られた陰影成分である。

【0058】

各独立成分の最小成分が取得されると、次にバイアス算出部２０３がバイアスを算出する。バイアスとは、入力画像データ３０１の撮影時に、被写体となった人物を照射する光源の色情報を示すベクトルである。

【0059】

バイアスは、最小メラニン色素成分と最小ヘモグロビン成分と最小陰影成分との合成和として算出され、図６の対数空間では、ベクトル６０４として表わされる。

【0060】

最小成分のみを用いてバイアスを算出する場合、いずれかの独立成分の最小成分に、肌領域抽出時のエラー等による誤情報が含まれると、正しいバイアスが得られなくなる。そのため、独立成分抽出部２０２により抽出された各独立成分群を、最小成分をはじめとして成分が小さい順に序列を付け、最小成分を含み成分が小さい方から所定範囲内にある複数の独立成分の平均を最小成分としてもよい。前記所定範囲とは、例えば独立成分抽出部２０２により抽出された独立成分の総数のＮ％にあたる範囲とすることができ、前記Ｎは画像処理の目的に応じて適切な数値を設定できる。

【0061】

図７は、色特性の異なる２つの光源下で撮影された人物画像に基づいて、バイアス算出部２０３が算出したバイアス（７０５，７１０）を例示する図である。図７（ａ）における撮影光源を光源α、図７（ｂ）における撮影光源を光源βとする。

【0062】

図７（ａ）は、光源αの下で撮影された肌色の異なる人物（人物Ａと人物Ｂ）の肌情報（人物Ａの肌情報を７０１、人物Ｂの肌情報を７０２とする）を色素平面４０５に射影した射影肌情報（人物Ａの射影肌情報を７０３、人物Ｂの射影肌情報を７０４とする）を例示した図である。図７（ｂ）は、光源βの下で撮影された肌色の異なる人物（人物Ａと人物Ｂ）の肌情報（人物Ａの肌情報を７０６、人物Ｂの肌情報を７０７とする）を色素平面４０５に射影した射影肌情報（人物Ａの射影肌情報を７０８、人物Ｂの射影肌情報を７０９とする）を例示した図である。

【0063】

図７（ａ）と図７（ｂ）に示す様に、同じ光源下においても肌色の異なる人物の射影肌情報の分布（７０３と７０４、７０８と７０９）は異なる。これは個人によって、肌の日焼け具合によるメラニンの色素濃度が異なったり、血中のヘモグロビンの状態が異なったりすることに依存している。

【0064】

けれども、同じ光源下であれば、肌色の異なる人物（ＡとＢ）の肌情報から算出されたバイアスは同等となることが、我々の研究から分かっている。図７（ａ）においては、光源αの下では人物Ａと人物Ｂの夫々から算出されたバイアス７０５は一致し、図７（ｂ）においても、光源βの下では人物Ａと人物Ｂの夫々から算出されたバイアス７１０は一致する。

【0065】

そして、バイアス（７０５，７１０）は、対象となる人物を照射する光源の色情報と同等になることも、我々の研究から分かっている。

【0066】

従って、最小メラニン色素成分と最小ヘモグロビン色素成分と最小陰影成分の合成和であるバイアスを算出することで、個人に依らず一定の光源色情報を取得することが可能となる。図７（ａ）と図７（ｂ）で示す様に、光源色情報としてのバイアス（７０５，７１０）は、撮影時の光源（光源αと光源β）の特性に応じて変化することになり、これら光源色情報に基づけば、夫々の撮影画像において適正な色補正を行うことができる。

【0067】

≪画像補正≫
バイアス算出部２０３により、バイアス６０４等が算出されると、次に画像補正部２０４が入力画像データの色補正処理を行う。

【0068】

色補正処理の目的は、撮影時の光源の影響で撮影画像データに生じた色かぶり等を低減させることにあり、処理後画像は標準的な光源（例えば、色温度５０００Ｋに相当する光源等）の下で撮影された画像と同等の色再現へと補正されることが期待される。

【0069】

従って、色補正処理の方法としては、バイアス算出部２０３により算出されたバイアス６０４等を、標準的な光源の色情報である基準バイアスと置き換える画像処理が挙げられる。

【0070】

図８は、入力画像データ３０１から抽出された肌領域３０２等の肌情報８０３に基づいて、バイアス算出部２０３により算出されたバイアス８０１を基準バイアス８０２に置き換えた処理を例示する模式図である。当該バイアスの置き換え処理により、肌情報取得部２０１により取得された肌情報８０３は、処理後肌情報８０４へと変換され、肌の色補正が行われることが分かる。

【0071】

図９は、バイアス算出部２０３により算出されたバイアス８１１と、基準バイアス（８１２，８１６）から夫々分離された色素成分と陰影成分を例示する図である。色素成分とは、メラニン色素成分とヘモグロビン色素成分の合成成分を示す。図９の直線ｍはメラニン色素成分軸、直線ｈはヘモグロビン色素成分軸、（１，１，１）方向は陰影成分軸であることを示す。

【0072】

ここで、基準バイアスを２種類に分類し、夫々の場合を、図９（ａ）と図９（ｂ）に例示する。

【0073】

図９（ａ）は、バイアス８１１から分離された陰影成分８１５と基準バイアス８１２から分離された陰影成分８１５が一致する事例を示す。陰影成分が一致するということは、入力画像データ３０１の肌領域３０２等の明度を変えずに色味だけを変化させる補正処理を行うことを意味する。この場合、入力画像の明るさを維持した状態で、色味だけを補正することができる。

【0074】

図９（ｂ）は、バイアス８１１から分離された陰影成分８１５と基準バイアス８１６から分離された陰影成分８１８が一致しない事例を示す。陰影成分が一致しないということは、入力画像データ３０１の肌領域３０２等の色味だけでなく、明度をも変化させる補正処理を行うことを意味する。これは例えば、逆光で撮影されて暗くなってしまった顔画像や、光量が多すぎて白飛びしてしまった顔画像を適正な露出（明るさ）に補正したい場合等に有効な処理方法となる。

【0075】

以下、図９（ａ）と図９（ｂ）に例示した両事例における、具体的な色補正処理について説明する。

【0076】

〔バイアスと基準バイアスの陰影成分が一致する場合：図９（ａ）〕
色補正処理の方法として、バイアス算出部２０３により算出されたバイアスを、標準的な光源の色情報である基準バイアスと置き換える手法について前述したが、図９（ａ）で示す様に、バイアスと基準バイアスの陰影成分が一致する場合、バイアスの色素成分を基準バイアスの色素成分に置き換えることと同意になる。

【0077】

図１０に、画像補正部２０４における画像補正処理のフローチャートを例示する。

【0078】

図１０（ａ）は、バイアスと基準バイアスの陰影成分が一致する場合の画像補正処理のフローチャートの事例である。ここで、バイアス算出部２０３により算出されたバイアスをＢ、基準バイアスをＢｔ、バイアスＢから分離された色素成分をＬ、基準バイアスＢｔから分離された基準色素成分をＬｔとする。

【0079】

図１０（ａ）における画像補正部２０４では、まずステップＳ９０１にて、基準バイアスＢｔを主記憶部１０２等から取得する。基準バイアスＢｔは、画像補正後の目標とする標準的な光源のバイアス情報（対数空間の原点からのベクトル情報）であり、主記憶部１０２等に予め格納されている。

【0080】

基準バイアスＢｔの取得としては、表示部１０７に複数の目標光源リストを表示し、ユーザが操作部１０６を用いて画像補正に使用したい目標光源を指定する方法としてもよい。この場合、複数の光源色情報（対数空間でのベクトル情報）が主記憶部１０２等に格納されており、ユーザの指定に基づいて、複数の光源色情報の中から１つの光源色情報が基準バイアスＢｔとして取得される。

【0081】

次に、ステップＳ９０２にて、バイアス算出部２０３により算出されたバイアスＢとステップＳ９０１により取得された基準バイアスＢｔを、夫々色素成分と陰影成分とに分離する。バイアスＢから分離された色素成分をＬ、基準バイアスＢｔから分離された基準色素成分をＬｔとする。

【0082】

次に、ステップＳ９０３にて、色素成分Ｌと基準色素成分ＬｔをＲＧＢ実空間情報へと変換する。ＲＧＢ実空間へ変換された色素成分をＲＧＢ色素成分ｌ、ＲＧＢ実空間へ変換された基準色素成分をＲＧＢ基準色素成分ｌｔとし、夫々ｌ＝ｅｘｐ（−Ｌ）、ｌｔ＝ｅｘｐ（−Ｌｔ）で計算される。

【0083】

次に、ステップＳ９０４にて、ＲＧＢ色素成分ｌとＲＧＢ基準色素成分ｌｔに基づいて補正パラメータＣ１を算出する。

【0084】

補正パラメータＣ１は、ＲＧＢ色素成分ｌをＲＧＢ基準色素成分ｌｔで除算すること（Ｃ１＝ｌ／ｌｔ）で算出されるベクトル情報である。

【0085】

ステップＳ９０４により補正パラメータＣ１が算出されると、次にステップＳ９０５にて、補正パラメータＣ１を用いた入力画像データの補正処理を行う。

【0086】

補正処理は、入力画像データを構成する全ての画素情報に補正パラメータＣ１の逆数を乗算する。入力画像データを構成する任意の画素をＲＧＢベクトルｐｉ、補正処理後の該画素をＲＧＢベクトルｐｉ'とすると、ｐｉ'＝Ｃ１^−１・ｐｉで計算される。

【0087】

なお、入力画像データ中の被写体を認識して、人物を含む主要被写体領域のみに補正処理を施す方法としてもよい。また、主要被写体領域とそれ以外の領域との境界近傍においては、補正処理の度合いを徐々に変化させる方法としてもよい。

【0088】

〔バイアスと基準バイアスの陰影成分が一致しない場合：図９（ｂ）〕
図９（ｂ）で示す様に、バイアスと基準バイアスの陰影成分が一致しない場合には、対数空間上においてバイアスを基準バイアスに置き換える処理を行えばよい。

【0089】

図１０（ｂ）は、バイアスと基準バイアスの陰影成分が一致しない場合の画像補正処理のフローチャートの事例である。ここで、バイアス算出部２０３により算出されたバイアスをＢ、基準バイアスをＢｔとする。

【0090】

図１０（ｂ）における画像補正部２０４では、まずステップＳ９１１にて、基準バイアスＢｔを主記憶部１０２等から取得する。基準バイアスＢｔは、画像補正後の目標とする標準的な光源のバイアス情報（対数空間の原点からのベクトル情報）であり、主記憶部１０２等に予め格納されている。

【0091】

基準バイアスＢｔの取得としては、表示部１０７に複数の目標光源リストを表示し、ユーザが操作部１０６を用いて画像補正に使用したい目標光源を指定する方法としてもよい。この場合、複数の光源色情報（対数空間でのベクトル情報）が主記憶部１０２等に格納されており、ユーザの指定に基づいて、複数の光源色情報の中から１つの光源色情報が基準バイアスＢｔとして取得される。

【0092】

さらに、補正後の肌画像の明るさを示唆するような情報もユーザに指定させ、明るさ情報を反映させた基準バイアスＢｔを取得するようにしてもよい。

【0093】

次に、ステップＳ９１２にて、入力画像データを構成する画素成分を対数空間情報へと変換する。入力画像データを構成する任意の画素をＲＧＢベクトルｐｉ、対数空間へ変換された該画素を対数ベクトルＰｉとすると、Ｐｉ＝−ｌｏｇ（ｐｉ）で計算される。

【0094】

次に、ステップＳ９１３にて、バイアスＢと基準バイアスＢｔに基づいて補正パラメータＣ２を算出する。

【0095】

補正パラメータＣ２は、バイアスＢから基準バイアスＢｔを減算すること（Ｃ２＝Ｂ−Ｂｔ）で算出されるベクトル情報である。

【0096】

ステップＳ９１３により補正パラメータＣ２が算出されると、次にステップＳ９１４にて、対数空間に変換された入力画像データに対し、補正パラメータＣ２に基づいた補正処理を行う。

【0097】

補正処理は、対数空間に変換された入力画像データを構成する全ての画素情報から補正パラメータＣ２を減算する。対数空間に変換された入力画像データを構成する任意の画素を対数ベクトルＰｉ、補正処理後の該画素を対数ベクトルＰｉ'とすると、Ｐｉ'＝Ｐｉ−Ｃ２で計算される。

【0098】

入力画像データ中の被写体を認識して、人物を含む主要被写体領域のみに補正処理を施す方法としてもよい。また、主要被写体領域とそれ以外の領域との境界近傍においては、補正処理の度合いを徐々に変化させる方法としてもよい。

【0099】

上述した様に、画像補正部２０４が入力画像データの色補正処理を行うことで、撮影時の光源の影響で色かぶり等が発生した入力画像データを違和感の無い適正な色調（またはユーザが所望する色調）に補正することができる。

【0100】

画像補正部２０４により色補正処理が行われた最終画像データは、例えば表示部１０７に表示され、ユーザは補正処理結果を確認することができる。

【0101】

＜画像処理の流れ＞
図１１に、第１の実施形態に係る画像処理装置１００における画像処理のフローチャートを例示する。

【0102】

まずステップＳ１にて人物画像を含む撮影画像が入力されると、続いてステップＳ２にて、肌情報取得部２０１が入力画像データから肌領域の抽出を行い、人物画像の肌情報を取得する。

【0103】

次にステップＳ３にて、独立成分抽出部２０２が、肌情報から該肌色を構成する独立成分であるメラニン色素成分とヘモグロビン色素成分と陰影成分を抽出する。次にステップＳ４にてバイアス算出部２０３が、ステップＳ３により抽出された各独立成分群から夫々の最小成分（最小メラニン色素成分、最小ヘモグロビン色素成分、最小陰影成分）を取得する。

【0104】

続いてステップＳ５では、バイアス算出部２０３が、最小メラニン色素成分と最小ヘモグロビン色素成分と最小陰影成分の合成和から、入力画像データの撮影時に該人物に照射された光源の色情報であるバイアスを算出する。

【0105】

次にステップＳ６にて、画像補正部２０４が画像補正後の目標色味を示唆する基準バイアスを取得する。続いてステップＳ７では、ステップＳ６により取得された基準バイアスとステップＳ５により算出されたバイアスとから補正パラメータを算出し、補正パラメータに基づいて入力画像データの色補正処理が行われる。

【0106】

ステップＳ７により入力画像データの補正処理が行われると、ステップ８にて補正後の画像データが出力されて、処理を終了する。

【0107】

以上で説明した様に、第１の実施形態に係る画像処理装置１００によれば、入力された画像データから肌領域が抽出され、当該肌領域から抽出された肌の独立成分情報に基づいて撮影時の光源色情報（バイアス）を算出し、バイアスに基づいて入力画像データの色かぶり等の補正処理を簡便に行うことができる。

【0108】

以上で説明した第１の実施形態に係る画像処理装置１００は、他の必要機能を付加することで、例えば複合コピー機、プリンタ、ＦＡＸ、スキャナ、デジタルカメラ、ＰＣ（Personal Computer）等、画像データの処理を実行する各種装置として用いることができる。

【0109】

また、第１の実施形態に係る画像処理装置１００が有する機能は、上記に説明を行った各処理手順を、画像処理装置１００にあったプログラミング言語でコード化したプログラムとしてコンピュータで実行することで実現することができる。よって、画像処理装置１００を実現するためのプログラムは、コンピュータが読み取り可能な記録媒体１０８に格納することができる。

【0110】

よって、第１の実施形態に係るプログラムは、フロッピー（登録商標）ディスク、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disk）等の記録媒体１０８に記憶させることによって、これらの記録媒体１０８から、画像処理装置１００にインストールすることができる。また、画像処理装置１００は、ネットワークＩ／Ｆ部１０５を有していることから、第１の実施形態に係るプログラムは、インターネット等の電気通信回線を介してダウンロードし、インストールすることもできる。

【0111】

〔第２の実施形態〕
次に、第２の実施形態について図面に基づいて説明する。なお、第１の実施形態の画像処理装置１００と同一の構成又は処理については、説明を省略する場合がある。

【0112】

また、以下に示す実施形態では、画像データを入力する画像入力装置として、プリンタ機能、スキャナ機能、コピー機能、ファクシミリ機能を一つの筐体に搭載した複合機を例に挙げて説明している。しかし、これに限定されるものではなく、画像データを入力可能であれば、スキャナ装置、ファクシミリ装置、コピー装置等のいずれにも適用することができる。

【0113】

＜画像処理システムの構成＞
図１２は、第２の実施形態に係る画像処理システムの一例を示す図である。図１２に示す様に、画像処理システム１はネットワークを介してＭＦＰ（Multifunction Peripheral）１０，２０、画像処理サーバ３０、情報処理端末（例えば、ＰＣ（Personal Computer）等）５０が接続されている。

【0114】

ＭＦＰ１０は、画像読取手段としてのスキャン機能、コピー機能、プリンタ機能、ファクシミリ機能等を一つの筐体に搭載したものである。ＭＦＰ１０は、スキャン機能により紙媒体等をスキャン処理して画像データを作成し、作成された画像データを画像処理サーバ３０に送信する。ＭＦＰ１０の詳細については後述する。

【0115】

画像処理サーバ３０は、各ＭＦＰ１０，２０でスキャンされて読み取られた画像データやネットワークを通じて取得した画像データ等を受信し、種々の処理を実行するワークステーション等のコンピュータであり、画像データに対して画像処理を行うことができる画像処理装置である。なお、画像処理サーバ３０は、ＭＦＰ１０，２０に組み込まれていてもよい。また、画像処理サーバ３０が有する画像処理装置としての機能は、情報処理端末５０に持たせることもできる。

【0116】

なお、ネットワークを介して接続されるＭＦＰ、画像処理サーバ及び情報処理端末の数は、それぞれ任意の数でもよい。

【0117】

図１３は、ＭＦＰ１０のハードウェア構成例を示すブロック図である。

【0118】

図１３に示す様に、ＭＦＰ１０は、制御部１１、主記憶部１２、補助記憶部１３、外部記憶装置Ｉ／Ｆ部１４、ネットワークＩ／Ｆ部１５、読取部１６、操作部１７、エンジン部１８を含む。

【0119】

制御部１１は、コンピュータの中で、各装置の制御やデータの演算、加工を行うＣＰＵ（Central Processing Unit）である。また、制御部１１は、主記憶部１２に記憶されたプログラムを実行する演算装置であり、入力装置や記憶装置からデータを受け取り、演算、加工した上で、出力装置や記憶装置に出力する。

【0120】

主記憶部１２は、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等であり、制御部１１が実行する基本ソフトウェアであるＯＳやアプリケーションソフトウェアなどのプログラムやデータを記憶又は一時保存する記憶装置である。

【0121】

補助記憶部１３は、ＨＤＤ（Hard Disk Drive）などであり、アプリケーションソフトウェアなどに関連するデータを記憶する記憶装置である。

【0122】

外部記憶装置Ｉ／Ｆ部１４は、ＵＳＢ（Universal Serial Bus）などのデータ伝送路を介して接続された記憶媒体１９（例えば、フラッシュメモリなど）とＭＦＰ１０とのインターフェイスである。

【0123】

また、記憶媒体１９に、所定のプログラムを格納し、この記憶媒体１９に格納されたプログラムは外部記憶装置Ｉ／Ｆ部１４を介してＭＦＰ１０にインストールされ、インストールされた所定のプログラムはＭＦＰ１０により実行可能となる。

【0124】

ネットワークＩ／Ｆ部１５は、有線及び／又は無線回線などのデータ伝送路により構築されたＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）などのネットワークを介して接続された通信機能を有する周辺機器とＭＦＰ１０とのインターフェイスである。

【0125】

読取部１６は、紙媒体等をスキャンすることによって画像を読み取って画像データとして取得するスキャン装置である。

【0126】

操作部１７は、キースイッチ（ハードキー）とタッチパネル機能（ＧＵＩ（Graphical User Interface）のソフトウェアキーを含む）を備えたＬＣＤ（Liquid Crystal Display）とから構成され、ＭＦＰ１０が有する機能を利用する際のＵＩ（User Interface）として機能する表示及び／又は入力装置である。

【0127】

エンジン部１８は、画像形成に係る処理を行うプロッタ等の機構部分である。

【0128】

図１４は、画像処理サーバ３０のハードウェア構成例を示す図である。

【0129】

図１４に示す様に、画像処理サーバ３０は、制御部３１、主記憶部３２、補助記憶部３３、外部記憶装置Ｉ／Ｆ部３４、ネットワークＩ／Ｆ部３５を含む。

【0130】

制御部３１は、コンピュータの中で、各装置の制御やデータの演算、加工を行うＣＰＵである。また、制御部３１は、主記憶部３２に記憶されたプログラムを実行する演算装置であり、入力装置や記憶装置からデータを受け取り、演算、加工した上で、出力装置や記憶装置に出力する。

【0131】

主記憶部３２は、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）などであり、制御部３１が実行する基本ソフトウェアであるＯＳやアプリケーションソフトウェアなどのプログラムやデータを記憶又は一時保存する記憶装置である。

【0132】

補助記憶装置３３は、ＨＤＤ（Hard Disk Drive）などであり、アプリケーションソフトウェアなどに関連するデータを記憶する記憶装置である。

【0133】

外部記憶装置Ｉ／Ｆ部３４は、ＵＳＢ（Universal Serial Bus）などのデータ伝送路を介して接続された記憶媒体１９（例えば、フラッシュメモリなど）と画像処理サーバ３０とのインターフェイスである。

【0134】

また、記憶媒体１９に、所定のプログラムを格納し、この記憶媒体１９に格納されたプログラムは外部記憶装置Ｉ／Ｆ部３４を介して画像処理サーバ３０にインストールされ、インストールされた所定のプログラムは画像処理サーバ３０により実行可能となる。

【0135】

ネットワークＩ／Ｆ部３５は、有線及び／又は無線回線などのデータ伝送路により構築されたＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）などのネットワークを介して接続された通信機能を有する周辺機器と画像処理サーバ３０とのインターフェイスである。また、図１２に示す図では、画像処理サーバ３０には、キーボードなどの操作部とＬＣＤ等を備える表示部とを図示していないが、これらを有する構成としてもよい。

【0136】

情報処理端末５０のハードウェア構成は、図１に示す第１の実施形態の画像処理装置１００と同様である。

【0137】

＜画像処理システムの機能＞
図１５は、第２の実施形態に係る画像処理システム１の機能の構成例を示すブロック図である。

【0138】

ＭＦＰ１０は、読取部１６、通信部２１、エンジン部１８を有する。

【0139】

読取部１６は、紙媒体等をスキャンすることによって画像処理を施す画像データを取得することができる。

【0140】

通信部２１は、情報処理端末５０の記憶部５５に記憶されている画像データを受信することができる。また、読取部１６で取得された画像データを画像処理装置としての画像処理サーバ３０に送信し、画像処理サーバ３０で画像処理が施された画像データを受信することができる。

【0141】

エンジン部１８は、画像処理サーバ３０によって画像処理が施された画像データを記録紙等の記録媒体に印刷して出力できる。また、画像処理サーバ３０で画像変換された画像データを記録媒体に印刷して出力できる。

【0142】

情報処理端末５０は、記憶部５５、読出部５２、通信部５１、表示制御部５３、表示部５４を有する。

【0143】

記憶部５５は、入力画像データ３０１、色素成分軸情報、基準バイアス等を記憶する。

【0144】

読出部５２は、記憶部５５から画像データ及び基準バイアス等を読み出す。

【0145】

通信部５１は、読出部５２が読み出した画像データ等をＭＦＰ１０又は画像処理サーバ３０に送信する。また、ＭＦＰ１０又は画像処理サーバ３０から送信される画像データ等を受信する。

【0146】

表示制御部５３は、通信部５１が受信した画像データを表示部５４に表示する。また、情報処理端末５０に記憶されている画像データを表示部５４に表示することもできる。

【0147】

表示部５４は、例えば液晶や有機ＥＬ等のディスプレイであり、画像や操作用アイコン等を表示する。

【0148】

画像処理サーバ３０は、通信部３６、肌情報取得部３７、独立成分抽出部３８、バイアス算出部３９、画像補正部４０等を有する。各部の機能は、第１の実施形態の画像処理装置１００と同様である。

【0149】

この様な構成において、画像処理実行者は、画像処理を施す処理対象画像を、ＭＦＰ１０の読取部１６によって画像データとして取得し、画像処理サーバ３０によって画像処理を行う。もしくは、画像処理実行者は、画像処理を施す処理対象画像データを情報処理端末５０から読み出し、画像処理サーバ３０によって画像処理を行う。

【0150】

画像処理サーバ３０では、肌情報取得部３７において入力画像データ３０１から抽出された肌領域から肌情報を取得し、独立成分抽出部３８で肌情報から独立成分群を抽出し、バイアス算出部３９で独立成分群から最小成分を夫々取得し、最小成分から撮影光源の色情報であるバイアスを算出し、画像補正部４０で、バイアスと記憶部５５から読み出した基準バイアスとに基づいて入力画像を補正する。また、ＭＦＰ１０のエンジン部１８が、画像処理が行われた画像データを印刷、若しくは、情報処理端末５０の表示制御部５３が表示部５４に表示する。

【0151】

また、例えば画像処理サーバ３０が有する機能を情報処理端末５０に組み込むことで、情報処理端末５０において画像処理を行う様に構成することもできる。

【0152】

画像処理実行者は、画像処理サーバ３０からネットワークを介して接続するＭＦＰ１０に画像処理が施された画像データを送信し、ＭＦＰ１０のエンジン部１８から記録紙等に印刷させることで、補正処理後の画像出力を得ることができる。

【0153】

もしくは、画像処理実行者は、画像処理サーバ３０からネットワークを介して接続する情報処理端末５０に画像処理が施された画像データを送信し、情報処理端末５０の表示制御部５３が表示部５４に表示させることで、色補正を施した画像出力を得ることができる。

【0154】

以上で説明した様に、第２の実施形態の画像処理システム１では、画像処理実行者が、ＭＦＰ１０等を用いて画像処理を施す画像データを取得し、画像処理サーバ３０又は情報処理端末５０により画像処理を施すことができる。

【0155】

＜まとめ＞
上記した実施形態によれば、入力された画像データから肌領域が抽出され、当該肌領域から抽出された肌の独立成分情報に基づいて撮影時の光源色情報を推定し、光源色情報に基づいて入力画像データの色かぶり等の補正処理を簡便に行うことができる。

【0156】

結果として、撮影時の光源の影響による色かぶり等の発生を抑制できる画像処理を実現可能な画像処理装置を提供できる。

【0157】

以上、本発明の実施形態について説明したが、上記実施形態に挙げた構成等に、その他の要素との組み合わせなど、ここで示した構成に本発明が限定されるものではない。これらの点に関しては、本発明の趣旨を逸脱しない範囲で変更することが可能であり、その応用形態に応じて適切に定めることができる。

【符号の説明】

【0158】

１ 画像処理システム
１００ 画像処理装置
１０，２０ ＭＦＰ（画像入力装置）
３０ 画像処理サーバ（画像処理装置）
５０ 情報処理端末
２０１ 肌情報取得部
２０２ 独立成分抽出部
２０３ バイアス算出部
２０４ 画像補正部
３０１ 入力画像
３０２，３０４ 肌領域
４０１，８０３ 肌情報
４０２ メラニン色素成分軸
４０３ ヘモグロビン色素成分軸
４０４ 陰影成分軸
４０５ 色素平面
４０６ 射影肌情報
６０４，７０５，７１０，８０１，８１１ バイアス
８０２，８１２，８１６ 基準バイアス

【先行技術文献】

【特許文献】

【0159】

【特許文献1】特開２０１２−０２３６９２号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】