特許 6192174 画像処理装置、画像処理方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6192174

(24)【登録日】2017年8月18日

(45)【発行日】2017年9月6日

(54)【発明の名称】画像処理装置、画像処理方法及びプログラム

(51)【国際特許分類】

   G06T 1/00 20060101AFI20170828BHJP

   H04N 1/46 20060101ALI20170828BHJP

   H04N 1/60 20060101ALI20170828BHJP

【ＦＩ】

   G06T1/00 510

   H04N1/46 Z

   H04N1/40 D

【請求項の数】10

【全頁数】15

(21)【出願番号】特願2014-536889(P2014-536889)

(86)(22)【出願日】2013年9月19日

(86)【国際出願番号】JP2013075234

(87)【国際公開番号】WO2014046155

(87)【国際公開日】20140327

【審査請求日】2016年8月5日

(31)【優先権主張番号】特願2012-205704(P2012-205704)

(32)【優先日】2012年9月19日

(33)【優先権主張国】JP

(73)【特許権者】

【識別番号】504258527

【氏名又は名称】国立大学法人 鹿児島大学

(74)【代理人】

【識別番号】100090273

【弁理士】

【氏名又は名称】國分 孝悦

(72)【発明者】

【氏名】大塚 作一

(72)【発明者】

【氏名】比良 祥子

(72)【発明者】

【氏名】木原 健

【審査官】 佐田 宏史

(56)【参考文献】

【文献】 国際公開第２００８／０３２５２８（ＷＯ，Ａ１）

【文献】 特表２００９−５３０９８５（ＪＰ，Ａ）

【文献】 国際公開第２０１１／０３０８１４（ＷＯ，Ａ１）

【文献】 特表２００５−５２４１５４（ＪＰ，Ａ）

【文献】 特開２００４−０８０１１８（ＪＰ，Ａ）

【文献】 米国特許出願公開第２００２／００１５５３６（ＵＳ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｔ １／００

Ｈ０４Ｎ １／４６，１／６０，５／２２５，９／６４

Ｇ０９Ｇ ５／０２，５／３６

(57)【特許請求の範囲】

【請求項1】

被写体を撮影することにより得られ、輝度信号と２つの色差信号によって表現される前記被写体のオリジナルカラー画像の各画素データについて、前記２つの色差信号で定められる色空間において前記２つの色差信号のうちの一方の色差信号を２色覚者が識別容易な色対の色差信号である第１色差信号とするとともに前記２つの色差信号のうちの他方の色差信号を前記２色覚者が識別困難な色対の色差信号である第２色差信号とする回転角θの色相回転処理を行う色相回転処理手段と、
前記色相回転処理手段による色相回転処理が施された色相回転済カラー画像を取得するカラー画像取得手段と、
前記色相回転済カラー画像の各画素データについて、前記第１色差信号の成分に対して前記第２色差信号の成分を混合する混合処理を行う色差信号処理手段と、
前記色差信号処理手段による処理が施されたカラー画像の各画素データについて、前記第１色差信号と前記第２色差信号とで定められる色空間において回転角−θの逆色相回転処理を行う逆色相回転処理手段と、
前記逆色相回転処理手段による逆色相回転処理が施されたカラー画像を色変換済カラー画像として表示部に表示する制御を行う表示制御手段と
を有することを特徴とする画像処理装置。

【請求項2】

輝度信号と、２色覚者が識別容易な色対の色差信号である第１色差信号と、前記２色覚者が識別困難な色対の色差信号である第２色差信号とで表現される被写体のカラー画像を取得するカラー画像取得手段と、
前記カラー画像の各画素データについて、前記第２色差信号には処理を加えることなく、前記第１色差信号の成分に対してのみ前記第２色差信号の成分を混合する混合処理を行い、変換済み第１色差信号を得る色差信号処理手段と、
前記輝度信号、前記変換済み第１色差信号、および、前記第２色差信号により表現されたカラー画像を色変換済カラー画像として表示部に表示する制御を行う表示制御手段と
を有することを特徴とする画像処理装置。

【請求項3】

前記カラー画像取得手段は、
前記輝度信号と２つの色差信号によって表現される前記被写体のオリジナルカラー画像の各画素データについて、前記２つの色差信号で定められる色空間において前記２つの色差信号のうちの一方の色差信号を前記第１色差信号とするとともに前記２つの色差信号のうちの他方の色差信号を前記第２色差信号とする回転角θの色相回転処理が施された色相回転済カラー画像を取得するものであり、
前記表示制御手段は、前記表示部に、前記色変換済カラー画像と前記オリジナルカラー画像とを交互に表示する制御を行うことを特徴とする請求項１または２に記載の画像処理装置。

【請求項4】

前記色差信号処理手段は、前記第１色差信号の成分に対して前記第２色差信号の成分に係数を乗じて前記混合処理を行うことを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。

【請求項5】

前記色差信号処理手段は、前記混合処理に加えて、前記第１色差信号および前記第２色差信号の振幅を調整する振幅調整処理を更に行うことを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。

【請求項6】

前記２色覚者は、１型および２型の２色覚者であり、
前記第１色差信号は、青色と黄色主体の色差信号であり、
前記第２色差信号は、赤色と緑色主体の色差信号であることを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。

【請求項7】

被写体を撮影することにより得られ、輝度信号と２つの色差信号によって表現される前記被写体のオリジナルカラー画像の各画素データについて、前記２つの色差信号で定められる色空間において前記２つの色差信号のうちの一方の色差信号を２色覚者が識別容易な色対の色差信号である第１色差信号とするとともに前記２つの色差信号のうちの他方の色差信号を前記２色覚者が識別困難な色対の色差信号である第２色差信号とする回転角θの色相回転処理を行う色相回転処理ステップと、
前記色相回転処理ステップによる色相回転処理が施された色相回転済カラー画像を取得するカラー画像取得ステップと、
前記色相回転済カラー画像の各画素データについて、前記第１色差信号の成分に対して前記第２色差信号の成分を混合する混合処理を行う色差信号処理ステップと、
前記色差信号処理ステップによる処理が施されたカラー画像の各画素データについて、前記第１色差信号と前記第２色差信号とで定められる色空間において回転角−θの逆色相回転処理を行う逆色相回転処理ステップと、
前記逆色相回転処理ステップによる逆色相回転処理が施されたカラー画像を色変換済カラー画像として表示部に表示する制御を行う表示制御ステップと
を有することを特徴とする画像処理方法。

【請求項8】

輝度信号と、２色覚者が識別容易な色対の色差信号である第１色差信号と、前記２色覚者が識別困難な色対の色差信号である第２色差信号とで表現される被写体のカラー画像を取得するカラー画像取得ステップと、
前記カラー画像の各画素データについて、前記第２色差信号には処理を加えることなく、前記第１色差信号の成分に対してのみ前記第２色差信号の成分を混合する混合処理を行い、変換済み第１色差信号を得る色差信号処理ステップと、
前記輝度信号、前記変換済み第１色差信号、および、前記第２色差信号により表現されたカラー画像を色変換済カラー画像として表示部に表示する制御を行う表示制御ステップと
を有することを特徴とする画像処理方法。

【請求項9】

被写体を撮影することにより得られ、輝度信号と２つの色差信号によって表現される前記被写体のオリジナルカラー画像の各画素データについて、前記２つの色差信号で定められる色空間において前記２つの色差信号のうちの一方の色差信号を２色覚者が識別容易な色対の色差信号である第１色差信号とするとともに前記２つの色差信号のうちの他方の色差信号を前記２色覚者が識別困難な色対の色差信号である第２色差信号とする回転角θの色相回転処理を行う色相回転処理ステップと、
前記色相回転処理ステップによる色相回転処理が施された色相回転済カラー画像を取得するカラー画像取得ステップと、
前記色相回転済カラー画像の各画素データについて、前記第１色差信号の成分に対して前記第２色差信号の成分を混合する混合処理を行う色差信号処理ステップと、
前記色差信号処理ステップによる処理が施されたカラー画像の各画素データについて、前記第１色差信号と前記第２色差信号とで定められる色空間において回転角−θの逆色相回転処理を行う逆色相回転処理ステップと、
前記逆色相回転処理ステップによる逆色相回転処理が施されたカラー画像を色変換済カラー画像として表示部に表示する制御を行う表示制御ステップと
をコンピュータに実行させるためのプログラム。

【請求項10】

輝度信号と、２色覚者が識別容易な色対の色差信号である第１色差信号と、前記２色覚者が識別困難な色対の色差信号である第２色差信号とで表現される被写体のカラー画像を取得するカラー画像取得ステップと、
前記カラー画像の各画素データについて、前記第２色差信号には処理を加えることなく、前記第１色差信号の成分に対してのみ前記第２色差信号の成分を混合する混合処理を行い、変換済み第１色差信号を得る色差信号処理ステップと、
前記輝度信号、前記変換済み第１色差信号、および、前記第２色差信号により表現されたカラー画像を色変換済カラー画像として表示部に表示する制御を行う表示制御ステップと
をコンピュータに実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、カラー画像の処理を行う画像処理装置及び画像処理方法、並びに、当該画像処理方法をコンピュータに実行させるためのプログラムに関するものである。

【背景技術】

【0002】

従来から、いわゆる色覚異常者（２色覚者）がカラー画像の色相を把握可能な技術が開発されている（例えば、下記の特許文献１参照）。

【0003】

具体的に、下記の特許文献１には、オリジナルカラー画像（「原画像」ともいう）を、輝度信号と２色覚者が識別困難な色対の色差信号である第１色差信号と当該２色覚者が識別容易な色対の色差信号である第２色差信号とに変換する第１変換処理を行い、第１変換処理により得られた第１色差信号の値を第２色差信号の値に変換するとともに第１変換処理により得られた第２色差信号の値を第１色差信号の値に変換する第２変換処理を行い、第１変換処理により得られた輝度信号と第２変換処理により得られた変換後の第１色差信号及び変換後の第２色差信号とに基づいて色相変換済カラー画像を生成し、オリジナルカラー画像と色相変換済カラー画像とを当該２色覚者が同一視点で視認可能に切り替え表示するようにした画像処理装置が開示されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】国際公開第２０１１／０３０８１４号

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、特許文献１の技術では、色相変換済カラー画像の生成において、２色覚者が識別容易な色対の色差信号も２色覚者が識別困難な色対の色差信号に変換されるため、２色覚者がオリジナルカラー画像と色相変換済カラー画像とを交互に見て相補的にオリジナルカラー画像の色相を把握する際に、学習を要し慣れが必要であった。

【0006】

本発明は、このような問題点に鑑みてなされたものであり、学習を要することなく、２色覚者が被写体の色相を把握可能な仕組みを提供することを目的とする。

【課題を解決するための手段】

【0007】

本発明の画像処理装置は、被写体を撮影することにより得られ、輝度信号と２つの色差信号によって表現される前記被写体のオリジナルカラー画像の各画素データについて、前記２つの色差信号で定められる色空間において前記２つの色差信号のうちの一方の色差信号を２色覚者が識別容易な色対の色差信号である第１色差信号とするとともに前記２つの色差信号のうちの他方の色差信号を前記２色覚者が識別困難な色対の色差信号である第２色差信号とする回転角θの色相回転処理を行う色相回転処理手段と、前記色相回転処理手段による色相回転処理が施された色相回転済カラー画像を取得するカラー画像取得手段と、前記色相回転済カラー画像の各画素データについて、前記第１色差信号の成分に対して前記第２色差信号の成分を混合する混合処理を行う色差信号処理手段と、前記色差信号処理手段による処理が施されたカラー画像の各画素データについて、前記第１色差信号と前記第２色差信号とで定められる色空間において回転角−θの逆色相回転処理を行う逆色相回転処理手段と、前記逆色相回転処理手段による逆色相回転処理が施されたカラー画像を色変換済カラー画像として表示部に表示する制御を行う表示制御手段とを有する。
本発明の画像処理装置における他の態様は、輝度信号と、２色覚者が識別容易な色対の色差信号である第１色差信号と、前記２色覚者が識別困難な色対の色差信号である第２色差信号とで表現される被写体のカラー画像を取得するカラー画像取得手段と、前記カラー画像の各画素データについて、前記第２色差信号には処理を加えることなく、前記第１色差信号の成分に対してのみ前記第２色差信号の成分を混合する混合処理を行い、変換済み第１色差信号を得る色差信号処理手段と、前記輝度信号、前記変換済み第１色差信号、および、前記第２色差信号により表現されたカラー画像を色変換済カラー画像として表示部に表示する制御を行う表示制御手段とを有する。
また、本発明は、上述した画像処理装置による画像処理方法、及び、当該画像処理方法をコンピュータに実行させるためのプログラムを含む。

【発明の効果】

【0008】

本発明によれば、学習を要することなく、２色覚者が被写体の色相を把握可能な仕組みを提供することができる。

【図面の簡単な説明】

【0009】

【図1】図１は、本発明の実施形態に係る多機能携帯電話機（画像処理装置）のハードウェア構成の一例を示すブロック図である。

【図2】図２は、本発明の実施形態に係る多機能携帯電話機（画像処理装置）の機能構成の一例を示すブロック図である。

【図3】図３は、本発明の実施形態を示し、オリジナルカラー画像の一例を示す模式図である。

【図4】図４は、本発明の実施形態を示し、ＣｂＣｒ色空間の一例を示す模式図である。

【図5】図５は、本発明の実施形態に係る多機能携帯電話機（画像処理装置）による画像処理方法の処理手順の一例を示すフローチャートである。

【発明を実施するための形態】

【0010】

以下に、図面を参照しながら、本発明を実施するための形態（実施形態）について説明する。なお、以下に説明する本発明の実施形態では、本発明に係る画像処理装置として、多機能携帯電話機（いわゆるスマートフォン）を適用した例を挙げて説明を行うが、本発明においてはこれに限定されるものではなく、例えば、デジタルカメラやＰＣ（パーソナルコンピュータ）等の他の画像処理装置も適用可能である。

【0011】

また、以下に説明する本発明の実施形態では、色覚異常者の中で、その発生頻度が高く、赤系統〜緑系統の色識別が困難な１型（Ｐ型）／２型（Ｄ型）の２色覚者が、学習を要することなく、被写体の色相を把握可能な仕組みについて記載する。

【0012】

図１は、本発明の実施形態に係る多機能携帯電話機（画像処理装置）１００のハードウェア構成の一例を示すブロック図である。
図１に示すように、多機能携帯電話機１００は、ＣＰＵ１０１、ＲＡＭ１０２、ＲＯＭ１０３、外部メモリ１０４、マイク１０５、スピーカ１０６、撮像部１０７、入力デバイス１０８、表示部１０９、通信インタフェース（通信Ｉ／Ｆ）１１０、及び、バス１１１のハードウェア構成を有して構成されている。

【0013】

ＣＰＵ１０１は、例えば、ＲＯＭ１０３或いは外部メモリ１０４に記憶されたプログラムやデータや情報を用いて、当該多機能携帯電話機１００全体の制御を行う。

【0014】

ＲＡＭ１０２は、ＳＤＲＡＭ、ＤＲＡＭなどによって構成され、ＲＯＭ１０３或いは外部メモリ１０４からロードされたプログラムやデータや情報を一時的に記憶するエリアを備えるとともに、ＣＰＵ１０１が各種の処理を行うために必要とするワークエリアを備える。

【0015】

ＲＯＭ１０３は、変更を必要としないプログラムや各種のデータや各種のパラメータ等の情報などを格納している。

【0016】

外部メモリ１０４は、例えば、オペレーティングシステム（ＯＳ）やＣＰＵ１０１が実行するプログラム、更には、本実施形態の説明において既知としているデータや情報などを記憶している。なお、本実施形態においては、本発明の実施形態に係る処理を実行するためのプログラムは、外部メモリ１０４に記憶されているものとするが、例えばＲＯＭ１０３に記憶されている形態であっても適用可能である。

【0017】

マイク（マイクロフォン）１０５及びスピーカ１０６は、それぞれ、電話機としての通話において使用される。さらに、マイク１０５は、撮像部１０７による動画撮影時の音声の検出に使用され、スピーカ１０６は、当該動画の再生時に、マイク１０５で検出した音声の再生に使用される。

【0018】

撮像部１０７は、被写体Ｈの光学像を、ＹＣｂＣｒで表現されるカラー画像として撮像するものである。ここで、ＹＣｂＣｒは、輝度信号Ｙと２つの色差信号Ｃｂ（Ｂ−Ｙ），Ｃｒ（Ｒ−Ｙ）を使って表現される色空間である。以下、撮像部１０７で撮像されたカラー画像を、「オリジナルカラー画像」と称する。この撮像部１０７は、光学レンズ１０７１、及び、撮像素子１０７２を備えて構成されている。光学レンズ１０７１は、被写体Ｈからの光学像を撮像素子１０７２に導くためのものである。撮像素子１０７２は、光学レンズ１０７１を介して導光された被写体Ｈの光学像を、ＹＣｂＣｒで表現されるオリジナルカラー画像として撮像するものである。

【0019】

入力デバイス１０８は、例えば、当該多機能携帯電話機１００に備え付けられたスイッチやボタン、表示部１０９上に設けられた透明なタッチパネル等で構成されている。この入力デバイス１０８は、例えばユーザが当該多機能携帯電話機１００に対して各種の指示を行う際に操作され、当該指示をＣＰＵ１０１等に入力する。

【0020】

表示部１０９は、例えば、モニタ等を具備して構成されており、ＣＰＵ１０１の制御に基づいて、各種の画像や各種の情報をモニタに出力する。

【0021】

通信Ｉ／Ｆ１１０は、当該多機能携帯電話機１００と外部装置Ｇとの間で行われる各種の情報や各種の信号等の送受信を司るものである。

【0022】

バス１１１は、ＣＰＵ１０１、ＲＡＭ１０２、ＲＯＭ１０３、外部メモリ１０４、マイク１０５、スピーカ１０６、撮像部１０７、入力デバイス１０８、表示部１０９及び通信Ｉ／Ｆ１１０を相互に通信可能に接続する。

【0023】

図２は、本発明の実施形態に係る多機能携帯電話機（画像処理装置）１００の機能構成の一例を示すブロック図である。この図２において、図１に示す構成と同様の機能の構成については、同じ符号を付している。
図２に示すように、多機能携帯電話機１００は、オリジナルカラー画像撮像手段２１０、画像処理手段２２０、表示制御手段２３０、入力デバイス１０８、及び、表示部１０９の機能構成を有して構成されている。

【0024】

ここで、図１に示す多機能携帯電話機１００のハードウェア構成と、図２に示す多機能携帯電話機１００の機能構成との対応関係の一例について以下に示す。
例えば、図１に示す撮像部１０７から、図２に示すオリジナルカラー画像撮像手段２１０が構成される。また、例えば、図１に示すＣＰＵ１０１及び外部メモリ１０４内に記憶されているプログラム、並びに、ＲＡＭ１０２から、図２に示す画像処理手段２２０、及び、表示制御手段２３０が構成される。

【0025】

続いて、図２に示す各機能構成について説明する。
オリジナルカラー画像撮像手段２１０は、被写体Ｈの光学像に基づいて、ＹＣｂＣｒで表現される被写体Ｈのオリジナルカラー画像を撮像する。

【0026】

図３は、本発明の実施形態を示し、オリジナルカラー画像３００の一例を示す模式図である。
例えば、オリジナルカラー画像撮像手段２１０は、図３に示すオリジナルカラー画像３００を取得する。このオリジナルカラー画像３００は、図３に示すように、行方向（ｘ方向）及び列方向（ｙ方向）に複数の画素３０１を有して構成されている。このとき、ｉ及びｊを任意の自然数とすると、図３に示すように、画素（ｘ_ｉ，ｙ_ｊ）におけるカラー値Ｖ_ｉｊは、（Ｙ_ｉｊ，Ｃｂ_ｉｊ，Ｃｒ_ｉｊ）として表すことができる。

【0027】

画像処理手段２２０は、入力デバイス１０８から入力された入力情報に基づいて、オリジナルカラー画像撮像手段２１０で撮像されたオリジナルカラー画像の画像処理（色変換処理）を行い、色変換済カラー画像を生成する。具体的に、画像処理手段２２０は、色相回転処理手段２２１、色相回転済カラー画像取得手段２２２、色差信号処理手段２２３、及び、逆色相回転処理手段２２４を備えて構成されている。

【0028】

ここで、画像処理手段２２０では、図３に示すオリジナルカラー画像３００の画素（ｘ_ｉ，ｙ_ｊ）におけるカラー値Ｖ_ｉｊ（Ｙ_ｉｊ，Ｃｂ_ｉｊ，Ｃｒ_ｉｊ）のうち、輝度信号Ｙ_ｉｊに対しては処理を行わないため、ＣｂＣｒで表現される２次元の色差平面であるＣｂＣｒ色空間で処理を考えることができる。

【0029】

図４は、本発明の実施形態を示し、ＣｂＣｒ色空間の一例を示す模式図である。
図４のＣｂＣｒ色空間は、水平方向に設けられたＣｂ軸と、当該Ｃｂ軸と垂直に交わるＣｒ軸とによって定められるものである。

【0030】

色相回転処理手段２２１は、オリジナルカラー画像撮像手段２１０で撮像されたオリジナルカラー画像の各画素データについて、図４に示すように、ＣｂＣｒ色空間において一方の色差信号Ｃｂを１型／２型の２色覚者が識別容易な色対（青色と黄色主体）の色差信号である第１色差信号Ｃｂ’とするとともに他方の色差信号Ｃｒを１型／２型の２色覚者が識別困難な色対（赤色と緑色主体）の色差信号である第２色差信号Ｃｒ’とする回転角θの色相回転処理を行う。

【0031】

具体的に、色相回転処理手段２２１は、図４に示すように、Ｃｂ軸及びＣｒ軸を回転角θだけ回転させて、Ｃｂ’軸を青色と黄色主体の色差信号の軸とし、Ｃｒ’軸を赤色と緑色主体の色差信号の軸とする。軸の回転により、回転後のＣｂ’及びＣｒ’は、それぞれ、以下の（１）式及び（２）式のように表せる。ここで、回転角θの値は概ね−３０°であるが、２色覚者の個人差によってかなりの変動が見込まれ、少なくとも−１０°〜−５０°の幅で調整可能にしておく必要がある。ただし、回転角θは２色覚者の個人差によって大きく変動するので、この範囲に限定されるものではない。

【0032】

【数1】

【0033】

色相回転済カラー画像取得手段２２２は、色相回転処理手段２２１による色相回転処理が施された色相回転済カラー画像を取得する。

【0034】

色差信号処理手段２２３は、色相回転済カラー画像の各画素データについて、第１色差信号Ｃｂ’の成分に対して第２色差信号Ｃｒ’の成分を混合する混合処理を行う。この際、色差信号処理手段２２３は、第１色差信号Ｃｂ’の成分に対して第２色差信号Ｃｒ’の成分に係数（後述するＫ_２）を乗じて前記混合処理を行う。さらに、必要に応じて、色差信号処理手段２２３は、前記混合処理に加えて、第１色差信号Ｃｂ’の振幅を調整する（後述する第１色差信号Ｃｂ’の成分に係数Ｋ_１を乗じる）とともに、第２色差信号Ｃｒ’の振幅を調整する（後述する第２色差信号Ｃｒ’の成分に係数Ｋ_３を乗じる）振幅調整処理を行う。

【0035】

具体的に、色差信号処理手段２２３は、以下の（３）式及び（４）式に示す色差信号処理を行う。ここで、色差信号処理後の第１色差信号Ｃｂ″は、（３）式のように示され、第１色差信号Ｃｂ’に彩度の強度調整処理（振幅調整処理）がなされるとともに、第２色差信号Ｃｒ’による混合処理がなされたものである。色差信号処理後の第２色差信号Ｃｒ″は、（４）式のように示され、単に第２色差信号Ｃｒ’に彩度の強度調整処理（振幅調整処理）がなされたものである。

【0036】

【数2】

【0037】

但し、（３）式において、本実施形態においては、Ｋ_１は「青−黄」の彩度の強調係数、Ｋ_２は「赤−緑」の着色係数、Ｋ_４は使用者によって青色と黄色の知覚の程度に偏りがある場合に補正を行うためのバイアス係数である。ここで、係数Ｋ_２の符号をマイナスとしているのは、赤を黄として、緑を青として着色する方向を正方向とするためである。もちろん、符号を反転されれば、赤を青として、緑を黄として着色することも可能である。Ｋ_２を正の値とした場合、２色覚者にとって無彩色と感じられる色相が「黄色から黄緑色へ移る付近」と「青色から青紫色へ移る付近」の２点となり、橙色を中心として赤色から黄色までが黄色系統の色として知覚され、青緑色を中心として緑色から青色までが青系統の色として知覚されることになる。この場合は、一般的に言われる暖色系と寒色系色に２分された状態を作り出すことができるので自然な分割となる。一方、Ｋ_２を負の値とした場合、２色覚者にとって無彩色と感じられる色相が「橙色から黄色へ移る付近」と「シアンから青色へ移る付近」の２点となり、黄緑色を中心として黄色から緑色までが黄色系統の色として知覚され、紫色を中心として青色から赤色までが青系統の色として知覚されることになる。この場合は、一般的な状態とは異なり、ある意味では不自然な分割となる。しかし、橙色を境界として赤色から黄色への色相変化を逆に強調して表示することが可能になるため、２色覚者が日常頻繁に遭遇する鮮明な赤色と茶色との識別の問題、即ち具体例を挙げれば、肉の焼け具合の判別困難などの問題、を有効に解決する手段となる。また、（４）式において、本実施形態においては、Ｋ_３は「赤−緑」の彩度の強調係数である。

【0038】

彩度の強調係数Ｋ_１及びＫ_３は、一般的な彩度の強度調整を目的として同時に１以外の数値に設定することは可能である。しかしながら、後述するような特別の意図を持たない限り、彩度の強調係数Ｋ_１及びＫ_３は１のままで問題ない（即ち、元の画像のまま）。

【0039】

また、着色係数Ｋ_２は１でも問題ないが、人間の視覚特性の知見に基づいてある程度変更することが望ましい。例えば、ＭａｃＡｄａｍの楕円で知られるように、色相によって色の変化に対する視覚の感度（感じ方）は異なる。３色覚者（一般色覚者）の場合、多くの領域で、「赤−緑」方向の感度は、「青−黄」方向の感度に対して概ね２倍〜３倍の値をとる。したがって、１型／２型の２色覚者に３色覚者の「赤−緑」方向の彩度の差をナチュラルに伝えようと意図した場合には、着色係数Ｋ_２を２〜３程度に設定すればよい（即ち、数式上は着色を強調することになる）。但し、１型／２型の２色覚者が感じる彩度には個人差が大きいので、この値を基本にして、より広い範囲で調整可能とすることが肝要である。

【0040】

さらに、着色係数Ｋ_２を２〜３よりも十分に大きな値とすることで、赤味もしくは緑味を帯びた領域を強調表示することが可能になる。このような設定にすることにより、若干自然さが損なわれるが、見分けにくい色を簡単に見分けられるようになる効果がある。なお、以上に述べた着色係数Ｋ_２の大きさと視覚効果との関係は、符号を反転した場合に全体として色相の変化方向が反転するだけであるので、絶対値で考えるとほぼ同様の効果となる。

【0041】

ここで、彩度の強調係数Ｋ_１もしくはＫ_３を、１以外の値に設定した場合の効果について述べる。「青−黄」の彩度の強調係数Ｋ_１を１よりも小さくゼロに近い値、もしくはゼロに設定することにより、１型／２型の２色覚者がもともと見えていた「青−黄」の色対比を抑制することができる。このようにすると、結果的に着色を強調する効果が期待できる。また、「赤−緑」の彩度の強調係数Ｋ_３をゼロにする、もしくはゼロに近づけると、１型／２型の２色覚者の見えに対しては影響がほとんどないが、３色覚者（一般色覚者）がこの画像を見た場合には、「赤−緑」が除去される効果がある。したがって、１型／２型の２色覚者が処理画像に対してどのような知覚を得るかを３色覚者が類推することが可能になる。

【0042】

また、上述した（３）式及び（４）式の演算処理を行った結果得られる色差信号（Ｃｂ″，Ｃｒ″）の値域は、定義された値域を超える場合があるので注意を要する。これに対しては、適宜、閾値処理を行うものとする。

【0043】

以上、１型／２型の２色覚者に赤味及び緑味を帯びた領域を同時に呈示するための着色方法を述べたが、着色係数Ｋ_２に対する簡単な非線形処理（閾値処理）により、特定の色域を表示することも可能である。例えば、赤味もしくは緑味を帯びた領域を単独に求めて、色変換済カラー画像を呈示する場合には、Ｋ_２’を閾値処理後の着色係数とすると、以下の（５）式は赤味を帯びた領域、また、以下の（６）式は緑味を帯びた領域を、各々単独で求める場合の閾値の処理式となる。

【0044】

【数3】

その他、用途に応じて、着色係数Ｋ_２に対する閾値を０以外に設定したり、複数の閾値を設定したりすることももちろん可能であるが、詳細については省略する。

【0045】

逆色相回転処理手段２２４は、色差信号処理手段２２３による処理が施されたカラー画像の各画素データについて、第１色差信号Ｃｂ’と第２色差信号Ｃｒ’とで定められるＣｂ’Ｃｒ’色空間において回転角−θの逆色相回転処理を行う。具体的に、逆色相回転処理手段２２４は、（Ｃｂ″，Ｃｒ″）をもとの（Ｃｂ，Ｃｒ）軸上での表現に戻すために、回転角−θの逆色相回転処理を行う。以下の（７）式及び（８）式を用いて逆色相回転処理がなされた値を、それぞれ、Ｃｂ'''、Ｃｒ'''とし、これによって画像処理手段２２０による画像処理が完了し、色変換済カラー画像が生成される。

【0046】

【数4】

【0047】

さらに、簡単のために、１型／２型の２色覚者の見えに殆ど関係のない「赤−緑」の彩度の強調係数Ｋ_３を１とし、標準的な使用者を想定してバイアス係数Ｋ_４を０として、（７）式及び（８）式を、（Ｃｂ，Ｃｒ）を用いて直接変形すると、以下の（９）式及び（１０）式で表すことができる。通常は、この（９）式及び（１０）式を直接計算することで画像処理を行えばよい。

【0048】

【数5】

【0049】

表示制御手段２３０は、画像処理手段２２０で生成された色変換済カラー画像を表示部１０９に表示する制御を行う。この際、表示制御手段２３０は、ユーザからの指示等に応じて、色変換済カラー画像とともにオリジナルカラー画像撮像手段２１０で撮像されたオリジナルカラー画像を表示部１０９に並べて表示する、もしくは両画像を交互に表示部１０９に表示する制御を行う。

【0050】

次に、本発明の実施形態に係る多機能携帯電話機（画像処理装置）１００による画像処理方法の処理手順について説明を行う。

【0051】

図５は、本発明の実施形態に係る多機能携帯電話機（画像処理装置）１００による画像処理方法の処理手順の一例を示すフローチャートである。この図５に示すフローチャートの説明においては、図２に示す多機能携帯電話機１００の機能構成を用いて説明を行う。

【0052】

まず、ユーザから入力デバイス１０８を介して係数（Ｋ_１，Ｋ_２，Ｋ_３，Ｋ_４）及び回転角θが入力されると、ステップＳ１において、画像処理手段２２０は、入力デバイス１０８から入力された係数（Ｋ_１，Ｋ_２，Ｋ_３，Ｋ_４）及び回転角θを設定する。

【0053】

続いて、ステップＳ２において、オリジナルカラー画像撮像手段２１０は、被写体Ｈの光学像に基づいて、ＹＣｂＣｒで表現される被写体Ｈのオリジナルカラー画像を撮像する。ここで、オリジナルカラー画像撮像手段２１０は、例えば、図３に示すオリジナルカラー画像３００を撮像するものとする。

【0054】

続いて、ステップＳ３において、画像処理手段２２０は、ステップＳ２で撮像されたオリジナルカラー画像を得て、当該オリジナルカラー画像の画素数Ｎを設定する。ここでは、画像処理手段２２０は、例えば、図３に示すオリジナルカラー画像３００の総画素数Ｎを設定するとともに、オリジナルカラー画像３００を構成する各画素に対して当該各画素を特定するための１〜Ｎの各番号を付与するものとする。

【0055】

続いて、ステップＳ４において、画像処理手段２２０は、処理対象の画素を示す変数ｎを１に設定する。これにより、処理対象の画素ｎが設定される。

【0056】

続いて、ステップＳ５において、画像処理手段２２０の色相回転処理手段２２１は、ステップＳ２で撮像されたオリジナルカラー画像における画素ｎの画素データに対して、図４に示すように、ＣｂＣｒ色空間において一方の色差信号Ｃｂを１型／２型の２色覚者が識別容易な色対（青色と黄色主体）の色差信号である第１色差信号Ｃｂ’とするとともに他方の色差信号Ｃｒを１型／２型の２色覚者が識別困難な色対（赤色と緑色主体）の色差信号である第２色差信号Ｃｒ’とする回転角θの色相回転処理を行う。

【0057】

具体的に、色相回転処理手段２２１は、図４に示すように、Ｃｂ軸及びＣｒ軸を、ステップＳ１で設定された回転角θだけ回転させて、Ｃｂ’軸を青色と黄色主体の色差信号の軸とし、Ｃｒ’軸を赤色と緑色主体の色差信号の軸とする。この回転角θの軸の回転により、第１色差信号Ｃｂ’及び第２色差信号Ｃｒ’は、それぞれ、上述した（１）式及び（２）式のようになる。このステップＳ５の処理をステップＳ２で撮像されたオリジナルカラー画像の各画素について行うことにより、色相回転済カラー画像（ＹＣｂ’Ｃｒ’カラー画像）の生成が行われる。

【0058】

続いて、ステップＳ６において、画像処理手段２２０の色差信号処理手段２２３は、ステップＳ５の処理が施された画素ｎの画素データに対して、第１色差信号Ｃｂ’の成分に対して第２色差信号Ｃｒ’の成分を混合する混合処理を行う。この際、色差信号処理手段２２３は、第１色差信号Ｃｂ’の成分に対して第２色差信号Ｃｒ’の成分に係数Ｋ_２を乗じて前記混合処理を行う。さらに、必要に応じて、色差信号処理手段２２３は、ステップＳ５の処理が施された画素ｎの画素データに対して、第１色差信号Ｃｂ’の振幅を調整する（第１色差信号Ｃｂ’の成分に係数Ｋ_１を乗じる）とともに、第２色差信号Ｃｒ’の振幅を調整する（第２色差信号Ｃｒ’の成分に係数Ｋ_３を乗じる）振幅調整処理を行う。具体的に、色差信号処理手段２２３は、上述した（３）式及び（４）式に示す演算処理を行うが、この際、係数Ｋ_１，Ｋ_２，Ｋ_３，Ｋ_４は、ステップＳ１で設定された値を用いる。

【0059】

続いて、ステップＳ７において、画像処理手段２２０の逆色相回転処理手段２２４は、ステップＳ６の処理が施された画素ｎの画素データに対して、第１色差信号Ｃｂ’と第２色差信号Ｃｒ’とで定められるＣｂ’Ｃｒ’色空間において回転角−θの逆色相回転処理を行う。具体的に、逆色相回転処理手段２２４は、（Ｃｂ″，Ｃｒ″）をもとの（Ｃｂ，Ｃｒ）軸上での表現に戻すために、上述した（７）式及び（８）式を用いて回転角−θの逆色相回転処理を行う。

【0060】

続いて、ステップＳ８において、画像処理手段２２０は、処理対象の画素を示す変数ｎがステップＳ３で設定された画素数Ｎより小さいか否かを判断する。

【0061】

ステップＳ８の判断の結果、処理対象の画素を示す変数ｎがステップＳ３で設定された画素数Ｎより小さい場合（Ｓ８／ＹＥＳ）には、ステップＳ２で撮像されたオリジナルカラー画像の全ての画素については未だ処理が行われていないと判定し、ステップＳ９に進む。
ステップＳ９に進むと、画像処理手段２２０は、処理対象の画素を示す変数ｎに１を加算して、処理対象の画素ｎを変更する。そして、変更した画素ｎに対して、ステップＳ５以降の処理を再度行う。

【0062】

一方、ステップＳ８の判断の結果、処理対象の画素を示す変数ｎがステップＳ３で設定された画素数Ｎより小さくない場合（Ｓ８／ＮＯ）には、ステップＳ２で撮像されたオリジナルカラー画像の全ての画素について処理が行われたと判定し、ステップＳ１０に進む。
ステップＳ１０に進むと、画像処理手段２２０は、ステップＳ５〜Ｓ７における処理が施された画素データに基づいて、描画処理を行う。この描画処理により、色変換済カラー画像が生成される。

【0063】

続いて、ステップＳ１１において、表示制御手段２３０は、ステップＳ１０で生成された色変換済カラー画像を表示部１０９に表示する制御を行う。この際、表示制御手段２３０は、ユーザからの指示等に応じて、ステップＳ１０で生成された色変換済カラー画像とともにステップＳ２で撮像されたオリジナルカラー画像を表示部１０９に並べて表示する、もしくは両画像を交互に表示部１０９に表示する制御を行う。

【0064】

ステップＳ１１の処理が終了すると、「ＳＴＡＲＴ」に戻り、次のオリジナルカラー画像の撮像を行う場合、ステップＳ１〜ステップＳ１１の処理が再度行われることになる。

【0065】

以上説明した本発明の実施形態に係る多機能携帯電話機（画像処理装置）１００では、１型／２型の２色覚者が識別容易な色対（青色と黄色主体）の色差信号である第１色差信号Ｃｂ’の成分に対して１型／２型の２色覚者が識別困難な色対（赤色と緑色主体）の色差信号である第２色差信号Ｃｒ’の成分を混合する混合処理を行って、色変換済カラー画像を生成するようにしている（図５のＳ６，Ｓ１０）。
かかる構成によれば、１型（Ｐ型）／２型（Ｄ型）の２色覚者は、被写体Ｈ（或いはオリジナルカラー画像）と色変換済カラー画像とを見比べて、色変換済カラー画像の、当該２色覚者が識別容易な色対の色味が変化すれば、当該色味が変化した部位に対応する被写体Ｈ（或いはオリジナルカラー画像）の部位に、当該２色覚者が識別困難な色対の色が存在することを把握することができる。
一般的な設定として、着色係数Ｋ_２を正の値として混合した場合、具体的に、１型（Ｐ型）／２型（Ｄ型）の２色覚者は、被写体Ｈ（或いはオリジナルカラー画像）と色変換済カラー画像とを見比べて、色変換済カラー画像の黄色の色味が増した場合、当該黄色の色味が増した部位に対応する被写体Ｈ（或いはオリジナルカラー画像）の部位に、当該２色覚者が識別困難な赤色が存在することを把握することができる。また、１型（Ｐ型）／２型（Ｄ型）の２色覚者は、被写体Ｈ（或いはオリジナルカラー画像）と色変換済カラー画像とを見比べて、色変換済カラー画像の青色の色味が増した場合、当該青色の色味が増した部位に対応する被写体Ｈ（或いはオリジナルカラー画像）の部位に、当該２色覚者が識別困難な緑色が存在することを把握することができる。
一方、特殊な設定として着色係数Ｋ_２を負の値として混合した場合、１型（Ｐ型）／２型（Ｄ型）の２色覚者は、赤紫色を含む赤色系統、もしくは茶褐色系統であることが分かっている被写体Ｈ（或いはオリジナルカラー画像）と色変換済カラー画像とを見比べて、色変換済カラー画像の青色の色味が増した場合には赤紫色を含む赤色系統であり、青味が減少もしくは黄色味が増加した場合には茶褐色系統であると判断することができる。
即ち、本発明の実施形態に係る多機能携帯電話機（画像処理装置）１００によれば、学習を要することなく、１型（Ｐ型）／２型（Ｄ型）の２色覚者が被写体Ｈの色相を把握可能な仕組みを提供することができる。

【0066】

（その他の実施形態）
また、上述した本発明の実施形態では、被写体Ｈのカラー画像における色空間としてＹＣｂＣｒで表現されるものを採用したが、本発明においては、この色空間に限定されるものではない。本発明は、輝度信号と、１型／２型の２色覚者が識別容易な色対（青色と黄色主体）の色差信号である第１色差信号と、１型／２型の２色覚者が識別困難な色対（赤色と緑色主体）の色差信号である第２色差信号とで表現可能な色空間であれば適用可能である。

【0067】

また、本発明は、以下の処理を実行することによっても実現される。
即ち、上述した本発明の実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
このプログラム及び当該プログラムを記憶したコンピュータ読み取り可能な記録媒体は、本発明に含まれる。

【0068】

なお、上述した本発明の実施形態は、いずれも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。即ち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。

【産業上の利用可能性】

【0069】

本発明によれば、学習を要することなく、２色覚者が被写体の色相を把握可能な仕組みを提供することができる。

【図1】

【図2】

【図3】

【図4】

【図5】