特許 7589364 画像処理方法、装置、機器及び可読記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-11-15

(45)【発行日】2024-11-25

(54)【発明の名称】画像処理方法、装置、機器及び可読記憶媒体

(51)【国際特許分類】

   G06T 5/75 20240101AFI20241118BHJP

【ＦＩ】

G06T5/75

【請求項の数】 12

(21)【出願番号】P 2023547662

(86)(22)【出願日】2022-01-29

(65)【公表番号】

(43)【公表日】2024-02-07

(86)【国際出願番号】 CN2022075130

(87)【国際公開番号】W WO2022166907

(87)【国際公開日】2022-08-11

【審査請求日】2023-08-07

(31)【優先権主張番号】202110164141.7

(32)【優先日】2021-02-05

(33)【優先権主張国・地域又は機関】CN

(73)【特許権者】

【識別番号】521431088

【氏名又は名称】北京字跳▲網▼絡技▲術▼有限公司

【氏名又は名称原語表記】Ｂｅｉｊｉｎｇ Ｚｉｔｉａｏ Ｎｅｔｗｏｒｋ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ．

【住所又は居所原語表記】０２０７， ２／Ｆ， Ｂｕｉｌｄｉｎｇ ４， Ｚｉｊｉｎ Ｄｉｇｉｔａｌ Ｐａｒｋ， Ｈａｉｄｉａｎ Ｄｉｓｔｒｉｃｔ， Ｂｅｉｊｉｎｇ，Ｐ． Ｒ． Ｃｈｉｎａ

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】ワン，シュイ

(72)【発明者】

【氏名】リウ，カイ

【審査官】岡本 俊威

(56)【参考文献】

【文献】中国特許出願公開第１１１４６２１５８（ＣＮ，Ａ）

【文献】サルワカくん，Photoshopで写真をイラスト風に加工する（鉛筆タッチ），インターネット，日本，2017年07月12日，https://saruwakakun.com/design/photoshop/retouch-pencil，[2024年05月14日検索]

【文献】山田 伸一，たった30秒!!Photoshop～イラスト加工～，インターネット，日本，2013年10月25日，https://www.legit.co.jp/photoshop-lllustration-processing-only-30/1705，[2024年05月14日検索]

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ ５／００－ ５／９４

(57)【特許請求の範囲】

【請求項1】

画像処理方法であって、
ソース画像を取得するステップと、
前記ソース画像をグレースケール画像に変換するステップと、
前記グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得るステップと、
前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成するステップと、を含み、
前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成するステップの後に、
前記ソース画像を色相彩度明度（ＨＳＶ）画像に変換するステップと、
前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定するステップと、
前記ハイライト領域を修正して第２のスケッチ画像を得るステップと、をさらに含む、
ことを特徴とする画像処理方法。

【請求項2】

前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定するステップは、
前記ＨＳＶ画像の正規化された彩度が予め設定されたしきい値を超えている画素を決定して第１の画素セットを得るステップと、
前記第１の画素セットに基づいて前記第１のスケッチ画像から第２の画素セットを決定するステップであって、前記第１の画素セットと前記第２の画素セットとにおける画素は１対１に対応し、前記第２の画素セットが前記ハイライト領域を形成するステップと、を含み、
前記ハイライト領域を修正して第２のスケッチ画像を得るステップは、
前記第１の画素セットに基づいて前記グレースケール画像から第３の画素セットを決定するステップであって、前記第１の画素セットと前記第３の画素セットとにおける画素は１対１に対応するステップと、
第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して、前記第１のスケッチ画像を修正して前記第２のスケッチ画像を得るステップと、を含む、ことを特徴とする請求項１に記載の方法。

【請求項3】

第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して、前記第１のスケッチ画像を修正して前記第２のスケッチ画像を得るステップは、
第１の画素セットにおける第１の画素の正規化された彩度に基づいて第１の重みを決定するステップであって、前記第１の重みは前記第１の画素の正規化された彩度と正相関するステップと、
前記第１の重みに基づいて第２の重みを決定するステップであって、前記第２の重みは予め設定された値と前記第１の重みとの差であるステップと、
前記第２の画素セットにおける第２の画素、前記第３の画素セットにおける第３の画素、前記第１の重み、及び前記第２の重みに基づき、重み付け融合された第４の画素を決定するステップと、
前記第１のスケッチ画像の第２の画素を前記第４の画素に置き換え、前記第２のスケッチ画像を得るステップと、を含む、ことを特徴とする請求項２に記載の方法。

【請求項4】

前記ハイライト領域を修正して第２のスケッチ画像を得るステップの後に、
前記グレースケール画像の画素の画素値に基づいて予め設定されたテクスチャ画像と前記第２のスケッチ画像とを融合するステップをさらに含む、ことを特徴とする請求項１～３のいずれか１項に記載の方法。

【請求項5】

前記予め設定されたテクスチャ画像は第１のテクスチャ画像と第２のテクスチャ画像とを含み、前記第１のテクスチャ画像のテクスチャと前記第２のテクスチャ画像のテクスチャとは方向が互いに垂直であり、前記第１のテクスチャ画像のテクスチャ色は前記第２のテクスチャ画像のテクスチャ色より濃くなっている、ことを特徴とする請求項４に記載の方法。

【請求項6】

前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成するステップの後に、
前記第１のスケッチ画像の画素の画素値に基づいて前記第１のスケッチ画像の画素の重みを決定するステップと、
前記第１のスケッチ画像の各画素の画素値に基づいて前記第１のスケッチ画像の対応する画素の着色重みを決定するステップと、
前記第１のスケッチ画像の各画素の画素値、着色重み、及び前記ソース画像の対応する画素の画素値に基づき、前記第１のスケッチ画像を着色して第３のスケッチ画像を得るステップと、をさらに含む、ことを特徴とする請求項１～３のいずれか１項に記載の方法。

【請求項7】

前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成するステップは、
前記グレースケール画像の画素の画素値と前記ガウスぼかし画像の画素の画素値とに基づき、前記第１のスケッチ画像の画素の画素値を決定するステップであって、前記グレースケール画像、前記ガウスぼかし画像、及び前記第１のスケッチ画像は、サイズが同じであり、前記グレースケール画像と前記ガウスぼかし画像と前記第１のスケッチ画像との画素は１対１に対応するステップと、
決定された前記第１のスケッチ画像の画素の画素値に基づいて前記第１のスケッチ画像を生成するステップと、を含む、ことを特徴とする請求項１～３のいずれか１項に記載の方法。

【請求項8】

前記ソース画像をグレースケール画像に変換するステップは、
前記ソース画像に対してノイズリダクション処理を行うステップと、
ノイズリダクション処理されたソース画像を前記グレースケール画像に変換するステップと、を含む、ことを特徴とする請求項１～３のいずれか１項に記載の方法。

【請求項9】

画像処理装置であって、
ソース画像を取得するために用いられる取得モジュールと、
前記ソース画像に基づいてグレースケール画像を生成するために用いられるグレースケールモジュールと、
前記グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得るために用いられる処理モジュールと、
前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成するために用いられる生成モジュールと、を含み、
前記装置は、
前記生成モジュールが前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成した後、前記ソース画像を色相彩度明度（ＨＳＶ）画像に変換し、前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定し、前記ハイライト領域を修正して第２のスケッチ画像を得るために用いられる修正モジュール、をさらに含む、
ことを特徴とする画像処理装置。

【請求項10】

少なくとも１つのプロセッサとメモリとを含む電子機器であって、
前記メモリにはコンピュータ実行命令が記憶されており、
前記少なくとも１つのプロセッサが前記メモリに記憶されているコンピュータ実行命令を実行すると、前記少なくとも１つのプロセッサが請求項１～８のいずれか１項に記載の画像処理方法を実行する、ことを特徴とする電子機器。

【請求項11】

コンピュータ可読記憶媒体であって、前記コンピュータ可読記憶媒体にはコンピュータ実行命令が記憶されており、プロセッサが前記コンピュータ実行命令を実行するとき、請求項１～８のいずれか１項に記載の画像処理方法が実現される、ことを特徴とするコンピュータ可読記憶媒体。

【請求項12】

コンピュータプログラムであって、前記コンピュータプログラムがプロセッサにより実行されるとき、請求項１～８のいずれか１項に記載の方法が実現される、ことを特徴とするコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示の実施例は、画像処理技術の分野に関し、特に、画像処理方法、装置、機器及び可読記憶媒体に関する。

【背景技術】

【0002】

画像にはさまざまなスタイルがあり、一般的な画像のスタイルは漫画風や昔風などを含む。現在は、元の画像をスタイル変換して他のスタイルの画像を得ることができる。例えば、手動で描画された漫画サンプル及びポートレートなどの画像サンプルを予め利用して深層学習モデルをトレーニングし、この後は深層学習モデルを利用して元の画像をスタイル変換することにより漫画を得る。

【0003】

スケッチもユーザに人気のある画像スタイルである。しかしながら、従来の技術においては、ソース画像のスケッチスタイルの画像への変換を可能にすることができない。

【発明の概要】

【発明が解決しようとする課題】

【0004】

本開示の実施例は、画像処理方法、装置、機器及び可読記憶媒体を提供し、グレースケール処理やガウスぼかしなどの手段を用いてスケッチ画像を得ることができ、ディテール部分を最大限に保留し、スケッチ画像をリアルにさせ、且つ深層学習プロセスを行う必要がなく、効率が高い。

【課題を解決するための手段】

【0005】

第１の態様では、本開示の実施例は、画像処理方法を提供し、前記方法は、
ソース画像を取得するステップと、
前記ソース画像をグレースケール画像に変換するステップと、
前記グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得るステップと、
前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成するステップと、を含む。

【0006】

第２の態様では、本開示は、画像処理装置を提供し、前記装置は、
ソース画像を取得するために用いられる取得モジュールと、
前記ソース画像に基づいてグレースケール画像を生成するために用いられるグレースケールモジュールと、
前記グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得るために用いられる処理モジュールと、
前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成するために用いられる生成モジュールと、を含む。

【0007】

第３の態様では、本開示の実施例は、少なくとも１つのプロセッサとメモリとを含む電子機器を提供し、
前記メモリにはコンピュータ実行命令が記憶されており、
前記少なくとも１つのプロセッサが前記メモリに記憶されているコンピュータ実行命令を実行すると、前記少なくとも１つのプロセッサが上記の第１の態様及び第１の態様の様々な可能な設計に記載されている画像処理方法を実行する。

【0008】

第４の態様では、本開示の実施例は、コンピュータ可読記憶媒体を提供し、前記コンピュータ可読記憶媒体にはコンピュータ実行命令が記憶されており、プロセッサが前記コンピュータ実行命令を実行するとき、上記の第１の態様及び第１の態様の様々な可能な設計に記載されている画像処理方法が実現される。

【0009】

第５の態様では、本開示の実施例は、コンピュータプログラムを含む、コンピュータプログラム製品を提供し、前記コンピュータプログラムは可読記憶媒体に記憶されており、電子機器の少なくとも１つのプロセッサが前記可読記憶媒体から前記コンピュータプログラムを読み取り、前記少なくとも１つのプロセッサが前記コンピュータプログラムを実行すると、前記電子機器が上記の第１の態様に記載されている方法を実行する。

【0010】

第６の態様では、本開示の実施例は、コンピュータプログラムを提供し、前記コンピュータプログラムは可読記憶媒体に記憶されており、電子機器の少なくとも１つのプロセッサが前記可読記憶媒体から前記コンピュータプログラムを読み取り、前記少なくとも１つのプロセッサが前記コンピュータプログラムを実行すると、前記電子機器が上記の第１の態様に記載されている方法を実行する。

【発明の効果】

【0011】

本開示の実施例により提供される画像処理方法、装置、機器及び可読記憶媒体によれば、電子機器は、ソース画像を取得した後、ソース画像に基づいてグレースケール画像を生成し、グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得る。そして、電子機器はガウスぼかし画像とグレースケール画像とを利用して第１のスケッチ画像を生成する。電子機器は、当該解決手段を採用すれば、グレースケール処理やガウスぼかしなどの手段を用いて第１のスケッチ画像を得ることができ、ディテール部分を最大限に保留し、第１のスケッチ画像をリアルにさせ、且つ深層学習プロセスを行う必要がなく、効率が高い。

【図面の簡単な説明】

【0012】

以下、本開示の実施例や従来の技術における解決手段をより明瞭に説明するために、実施例又は従来の技術の記述において使用する必要がある図面を簡単に説明する。当然ながら、以下、記載する図面は本開示のいくつかの実施例であり、当業者であれば、創造的な労力を要することなく、これらの図面に基づいて他の図面を想到しうる。

【図1】本開示の実施例により提供される画像処理方法のネットワークアーキテクチャの概略図である。

【図2】本願の実施例により提供される画像処理方法のフローチャートである。

【図3A】本開示の実施例により提供される画像処理方法におけるスケッチ画像の生成プロセスの概略図である。

【図3B】本開示の実施例により提供される画像処理方法におけるスケッチ画像の生成プロセスの概略図である。

【図4】本開示の実施例により提供される画像処理方法において彩度に基づいて第1のスケッチ画像を修正するプロセスの概略図である。

【図5】本開示の実施例により提供される画像処理方法におけるテクスチャ組み込みの概略図である。

【図6】本開示の実施例により提供される画像処理方法におけるテクスチャ画像の概略図である。

【図7】本開示の実施例により提供される画像処理方法における融合効果の効果曲線概略図である。

【図8A】本開示の実施例により提供される画像処理方法における着色プロセスの概略図である。

【図8B】本開示の実施例により提供される画像処理方法における着色プロセスの概略図である。

【図9】本願の実施例により提供される画像処理方法のフローチャートである。

【図10】本開示の実施例により提供される１つの画像処理装置の構造ブロック図である。

【図11】本開示の実施例により提供される他の画像処理装置の構造ブロック図である。

【図12】本開示の実施例を実現するための電子機器の構造概略図である。

【発明を実施するための形態】

【0013】

以下、本開示の実施例の目的、技術的解決手段及び利点をより明瞭にするために、本開示の実施例に係る図面を参照しながら、その技術的解決手段について明瞭、且つ完全に説明し、当然ながら、記載される実施例は本開示の実施例の一部にすぎず、そのすべての実施例ではない。当業者は、本開示における実施例に基づいて創造的な労働をすることなく、獲得されたその他のすべての実施例は、いずれも本開示の保護範囲に属する。

【0014】

現在、多くのアプリケーションプログラム（ａｐｐｌｉｃａｔｉｏｎ、ＡＰＰ）にはスタイル変換機能が備わっており、ユーザは当該機能に基づいて１枚の画像を漫画スタイルやスケッチスタイルなどの画像に容易に変換することができる。二次元の漫画は写意を重視する芸術であり、深層学習の手段を採用し、手動で描画された漫画サンプル及びポートレートなどの画像サンプルを利用して深層学習モデルをトレーニングするのが一般的であり、漫画サンプルの描画スタイルは同じである。当該深層学習モデルはユーザの移動端末やサーバなどの電子機器に配置されており、電子機器は、オリジナル画像を取得した後、オリジナル画像を深層学習モデルに入力すれば漫画を出力することができる。モデルトレーニング中には、顔立ちなどのディテールのような多くのディテールを保留することができない。しかし、漫画には「リアルさ」という要件が高く求められていないため、深層学習モデルによって得られた漫画にはディテールが多く省略されたとしても、当該漫画は比較的よい写意的な効果を達成し、ユーザに受け入れられる。

【0015】

しかし、鉛筆画スケッチはより写実的なものを重視しており、写実的な内容が求められるため、よりディテールにこだわる。例えば、オリジナル画像は人物画像である場合、当該オリジナル画像に基づいて得られる鉛筆画スケッチとして、当該鉛筆画スケッチの顔や顔立ちなどが人物画像にぴったりと合っている限り、当該鉛筆画スケッチは合格と認められる。上記の深層学習の手段は鉛筆画スケッチの取得に適していないことが明らかである。

【0016】

図１は、本開示の実施例により提供される画像処理方法のネットワークアーキテクチャの概略図である。図１を参照すると、当該ネットワークアーキテクチャは、端末機器１、サーバ２、及びネットワーク３を含み、端末機器１とサーバ２は、ネットワーク３を介してネットワーク接続を確立する。ネットワーク３は、有線及び無線通信リンクや光ファイバケーブルなど、さまざまなネットワーク接続タイプがある。

【0017】

ユーザは、端末機器１を利用してサーバ２とネットワーク３を介してインタラクションし、メッセージなどを送受信する。端末機器１には、動画再生系アプリケーション、ショッピング系アプリケーション、検索系アプリケーション、インスタントメッセンジャー、メールボックスクライアント端末、ソーシャルプラットフォームソフトウェアなど、さまざまな通信クライアント端末アプリケーションがインストールされている。

【0018】

端末機器１は、ハードウェアであってもよいし、ソフトウェアであってもよい。端末機器１はハードウェアである場合、端末機器１は例えば、携帯電話、タブレットコンピュータ、電子書籍リーダー、ラップトップ携帯型コンピュータ、デスクトップコンピュータなどである。端末機器１はソフトウェアである場合、上記列記したハードウェアデバイスにインストールされることができ、この場合、端末機器１は例えば、複数のソフトウェアモジュール又は単一のソフトウェアモジュールなどであり、本開示の実施例はそれを限定しない。

【0019】

サーバ２は、複数のサービスを提供できるサーバであり、端末機器から送信されたソース画像を受信し、ソース画像をスタイル変換して白黒スケッチ画像又は色鉛筆スケッチなどの鉛筆画スケッチを得るために用いられる。

【0020】

サーバ２は、ハードウェアであってもよいし、ソフトウェアであってもよい。サーバ２はハードウェアである場合、当該サーバ２は単一のサーバ又は複数のサーバからなる分散サーバクラスタである。サーバ２はソフトウェアである場合、複数のソフトウェアモジュール又は単一のソフトウェアモジュールなどであってもよく、本開示の実施例はそれを限定しない。

【0021】

なお、図１の端末機器１、サーバ２、及びネットワーク３の数は単に例示的なものである。実際に実現する際に、実際の必要に応じて任意の数の端末機器１、サーバ２、及びネットワーク３を配置する。

【0022】

また、本開示に係る画像処理方法は端末機器１により実行される場合、ネットワークに接続する必要がないため、上記の図１のサーバ２及びネットワーク３は存在しなくてもよい。

【0023】

以下、図１に示されるネットワークアーキテクチャに基づき、本願の実施例に記載される画像処理方法を詳細に説明する。例示的に、図２を参照する。

【0024】

図２は、本願の実施例により提供される画像処理方法のフローチャートである。本実施例の実行主体は電子機器であり、当該電子機器は例えば、上記の図１の端末機器又はサーバである。本実施例は、以下のステップを含む。

【0025】

１０１では、ソース画像を取得する。

【0026】

例示的に、電子機器はローカルからソース画像を取得するか、または、インターネットからソース画像を取得する。ソース画像は（ｉｍａｇｅ＿ｓｒｃ）とも呼ばれる。ソース画像は、赤緑青（ｒｅｄ ｇｒｅｅｎ ｂｌｕｅ、ＲＧＢ）画像や白黒写真などであり、本開示の実施例はそれを限定しない。

【0027】

１０２では、前記ソース画像をグレースケール画像に変換する。

【0028】

例示的に、電子機器は、ソース画像の各画素に対してグレースケール処理を行い、ソース画像をグレースケール画像に変換する。例えば、電子機器は、各画素のＲ、Ｇ、Ｂの値に対して平均値を求め、その平均値をグレースケール値とする。また、例えば、電子機器は、ソース画像の各画素に対して、当該画素のＲ、Ｇ、Ｂの最大値と最小値とを決定し、最大値と最小値との平均値をグレースケール値とする。さらに、例えば、電子機器は、２値画像法や加重平均法などを採用し、ソース画像に対してグレースケール画像を生成する。

【0029】

本開示の実施例では、グレースケール画像は（ｉｍａｇｅ＿ｇｒａｙ）とも呼ばれる。

【0030】

１０３では、前記グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得る。

【0031】

例示的に、電子機器は、ガウス畳み込みなどに基づいてガウスぼかしに対応するガウスカーネル（ｋｅｒｎｅｌ）を決定し、当該ガウスｋｅｒｎｅｌを利用してグレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得る。ガウスカーネルは例えば２５５などである。電子機器は異なるガウスカーネルを利用してグレースケール画像に対してガウスぼかしを行うと、得られるガウスぼかし画像も異なる。本開示の実施例では、ガウスぼかし画像は（ｉｍａｇｅ＿ｂｌｕｒ）とも呼ばれる。

【0032】

１０４では、前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成する。

【0033】

本ステップでは、電子機器は、ガウスぼかし画像とグレースケール画像とを素材として、第１のスケッチ画像を生成する。例えば、電子機器は、ガウスぼかし画像の画素とグレースケール画像の対応する画素とに対して融合処理を行い、第１のスケッチ画像を生成する。本開示の実施例では、第１のスケッチ画像は（ｉｍａｇｅ＿ｔａｒｇｅｔ）とも呼ばれる。

【0034】

電子機器は異なるガウスｋｅｒｎｅｌを利用してグレースケール画像に対してガウスぼかしを行うと、得られるガウスぼかし画像も異なるため、電子機器はグレースケール画像と異なるガウスぼかし画像とに基づいて生成するスケッチ画像も異なる。例示的に、図３Ａ及び図３Ｂを参照する。

【0035】

図３Ａは、本開示の実施例により提供される画像処理方法における第１のスケッチ画像の生成プロセスの概略図である。図３Ａを参照すると、ガウスカーネル１は小さい場合、ガウスぼかし画像１とグレースケール画像とに基づいて生成する第１のスケッチ画像は薄い。

【0036】

図３Ｂは本開示の実施例により提供される画像処理方法におけるスケッチ画像の生成プロセスの概略図である。図３Ｂを参照すると、ガウスカーネル２は大きい場合、ガウスぼかし画像２とグレースケール画像とに基づいて生成する第１のスケッチ画像は濃い。

【0037】

上記の図３Ａ及び図３Ｂには、ソース画像は例えば、カラー画像又は白黒画像であり、本開示の実施例はそれを限定しない。図３Ａ及び図３Ｂの第１のスケッチ画像は、異なる段階での第１のスケッチ画像とも呼ばれる。つまり、図３Ａの第１のスケッチ画像は、画家が絵を描くことを模擬する過程での半成品であり、図３Ｂの第１のスケッチ画像は、画家が絵を描く過程での完成品に相当する。

【0038】

本開示の実施例により提供される画像処理方法によれば、電子機器は、ソース画像を取得した後、ソース画像に基づいてグレースケール画像を生成し、グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得る。そして、電子機器は、ガウスぼかし画像とグレースケール画像とを利用して第１のスケッチ画像を生成する。電子機器は、当該解決手段を採用すれば、グレースケール処理やガウスぼかしなどの手段を用いて第１のスケッチ画像を得ることができ、ディテール部分を最大限に保留し、第１のスケッチ画像をリアルにさせ、且つ深層学習プロセスを行う必要がなく、効率が高い。

【0039】

上記の実施例では、電子機器は、ソース画像を取得した後、前記ソース画像に対してノイズリダクション処理を行う。例えば、電子機器は、オリジナル画像に対してメディアンフィルタを行い、オリジナル画像に存在する可能性のあるノイズを除去する。また、電子機器は、平均値フィルタや適応ウィーナーフィルタなどを利用し、ソース画像に対してノイズリダクション処理を行っても良い。本開示はノイズリダクション処理の具体的な手段を限定しない。

【0040】

電子機器は、当該解決手段を採用すれば、ソース画像に対してノイズリダクション処理を行うことにより、ソース画像のノイズを抑制又は除去し、ソース画像品質向上の目的を達成する。

【0041】

上記の実施例では、電子機器は、前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成する過程では、前記グレースケール画像の画素の画素値と前記ガウスぼかし画像の画素の画素値とに基づき、前記第１のスケッチ画像の画素の画素値を決定し、前記グレースケール画像、前記ガウスぼかし画像、及び前記第１のスケッチ画像は、サイズが同じであり、前記グレースケール画像と前記ガウスぼかし画像と前記第１のスケッチ画像との画素は１対１に対応し、決定された前記第１のスケッチ画像の画素の画素値に基づいて前記スケッチ画像を生成する。

【0042】

例示的に、ソース画像、グレースケール画像、ガウスぼかし画像、及び第１のスケッチ画像は、サイズが同じであり、画素は１対１に対応する。したがって、電子機器は、グレースケール画像とガウスぼかし画像との画素の画素値に基づいてスケッチ画像の対応する画素の画素値を決定し、それによって第１のスケッチ画像を得ることができる。例えば、電子機器は、ガウスぼかし画像を生成した後、ドッジ（ｄｏｄｇｅ）モードにて、すなわち、下記の式（１）を用いて効果抽出を行う。
ｉｍａｇｅ＿ｔａｒｇｅｔ＝（ｉｍａｇｅ＿ｇｒａｙ／ｇｒａｙ＿ｂｌｕｒ１）×２５５
式（１）

【0043】

当該解決手段を採用すれば、異なるガウスｋｅｒｎｅｌのｄｏｄｇｅに基づいて異なる段階での第１のスケッチ画像の効果を達成することができる。

【0044】

上記の実施例では、ソース画像には人物の髪領域が含まれる場合、ステップ１０４に基づいて得られた第１のスケッチ画像には、髪領域の色は比較的明るく白っぽい。しかし、実際には、第１のスケッチ画像の髪は黒い。したがって、第１のスケッチ画像を修正して第２のスケッチ画像を得る必要がある。電子機器は、修正中に、ソース画像を色相彩度明度（Ｈｕｅ Ｓａｔｕｒａｔｉｏｎ Ｖａｌｕｅ、ＨＳＶ）画像に変換する。そして、電子機器は、前記ＨＳＶ画像の各画素の彩度に基づいて前記第１のスケッチ画像を修正する。

【0045】

例示的に、電子機器は、ソース画像をＲＧＢモードからＨＳＶモードに変換してＨＳＶ画像を得、そして、ＨＳＶ画像に基づいてＨＳＶ画像の各画素の彩度を得ることができ、彩度はＳチャネル値とも呼ばれる。そして、電子機器は、ＨＳＶ画像の各画素の彩度に基づいて、第１のスケッチ画像からハイライト領域、すなわち修正対象領域を決定する。例えば、電子機器は彩度しきい値を決定し、ＨＳＶ画像の１つの画素の彩度は予め設定された彩度を超えている場合、当該画素をハイライト領域の１つの画素とする。そして、第１のスケッチ画像のハイライト領域を修正して第２のスケッチ画像を得る。

【0046】

また、例えば、電子機器はＨＳＶ画像の各画素の彩度を０～１に正規化する。正規化後に、正規化されたＨＳＶ画像の各画素の彩度に基づいて第１のスケッチ画像から修正対象ハイライト領域を決定する。例えば、ソース画像は６４０×４８０の画像である場合、ＨＳＶ画像に変換された後、ＨＳＶ画像の２００００個の画素の正規化された彩度が予め設定されたしきい値を超えていることは判明されると、ＨＳＶ画像の当該２００００個の画素に基づいて第１のスケッチ画像から２００００個の画素を決定するとともに、第１のスケッチ画像の当該２００００個の画素の色を濃くするなどして、第１のスケッチ画像に含まれる髪領域の修正を実現する。

【0047】

電子機器は、当該解決手段を採用すれば、ソース画像のＨＳＶ画像の各画素の彩度値に基づいて、第１のスケッチ画像から修正対象画素を決定して修正することにより、第１のスケッチ画像の品質向上の目的を達成する。

【0048】

上記の実施例では、電子機器は、前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定するとき、電子機器は、まず、ＨＳＶ画像から正規化された彩度が予め設定されたしきい値を超えている画素を決定し、第１の画素セットを得る。そして、電子機器は、第１の画素セットに基づいて第１のスケッチ画像から第２の画素セットを決定し、第１の画素セットと第２の画素セットとにおける画素は１対１に対応し、且つ対応する画素の位置が同じであり、第２の画素セットが前記ハイライト領域を形成する。電子機器は、前記第１の画素セットに基づいて前記グレースケール画像から第３の画素セットを決定し、前記第１の画素セットと前記第３の画素セットとにおける画素は１対１に対応する。最後に、電子機器は、第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して前記第１のスケッチ画像を修正する。

【0049】

例示的に、ＨＳＶ画像の各画素の彩度は、正規化されると、０～１となる。しきい値は０．５であると仮定すると、電子機器は、正規化された彩度が０．５以上である画素をＨＳＶ画像から決定し、これらの画素を第１の画素セットとすることができる。電子機器は、第１の画素セットに基づいて、第１のスケッチ画像から第２の画素セットを決定するとともに、グレースケール画像から第３の画素セットを決定することができ、当該３つの画素セットにおける画素は１対１に対応し、例えば、第１の画素セットには画素ａがあり、第２の画素セットには画素ｂがあり、第３の画素セットには画素ｃがある場合、１対１に対応することは、画素ａのＨＳＶ画像での位置が画素ｂの第１のスケッチ画像での位置と同じであり、画素ａのＨＳＶ画像での位置が画素ｃのグレースケール画像での位置と同じであることを意味する。そして、電子機器は、第１のスケッチ画像の画素とグレースケール画像の対応する画素とを重み付け融合して第２のスケッチ画像を得る。

【0050】

電子機器は、当該解決手段を採用すれば、修正対象画素を決定した後、第１のスケッチ画像の画素とグレースケール画像の対応する画素とを重み付け融合して、第１のスケッチ画像修正の目的を達成する。

【0051】

上記の実施例では、電子機器は、第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して第１のスケッチ画像を修正するとき、電子機器は、まず、第１の画素セットにおける第１の画素の正規化された彩度に基づいて第１の重みを決定するとともに、第１の重みに基づいて第２の重みを決定し、前記第２の重みは、１と前記第１の重みとの差である。そして、電子機器は、前記第２の画素セットにおける画素、前記第３の画素セットにおける画素、前記第１の重み、及び前記第２の重みに基づいて重み付け融合された第４の画素を決定する。最後に、電子機器は、第１のスケッチ画像の第２の画素を前記第４の画素に置き換え、第２のスケッチ画像を得る。

【0052】

例示的に、第１の画素セット、第２の画素セット、及び第３の画素セットにおける画素は１対１に対応し、当該１対１に対応する画素は、第１の画素、第２の画素、及び第３の画素である場合、電子機器は、第１の画素セットを決定した後、第１の画素セットにおける各第１の画素の正規化された彩度を第２の画素セットにおける第２の画素の第１の重みとして、１と第１の重みとの差を第２の重みとして、当該第２の重みは第３の画素セットにおける第３の画素の第２の重みである。そして、電子機器は、第１の重みと第２の重みとに基づき、第２の画素と第３の画素とを重み付け融合して第４の画素を得る。例えば、第１の画素の正規化された彩度は０．６であり、予め設定されたしきい値０．５より大きい。第２の画素のグレースケール値は５であり、第３の画素のグレースケール値は１００である場合、第４の画素のグレースケール値は５×０．６＋１００×０．４＝４３とする。

【0053】

また、上記の実施例では、電子機器は、第１の画素セットを決定した後、第１の画素セットにおける各第１の画素の正規化された彩度を第３の画素セットにおける第３の画素の第１の重みとして、１と第１の重みとの差を第２の重みとして、当該第２の重みは第２の画素セットにおける第２の画素の重みである。そして、電子機器は、第１の重みと第２の重みとに基づき、第２の画素と第３の画素とを重み付け融合して第４の画素を得る。例えば、第１の画素の正規化された彩度は０．６であり、予め設定されたしきい値０．５より大きい。第２の画素のグレースケール値は５であり、第３の画素のグレースケール値は１００である場合、第４の画素のグレースケール値は５×０．４＋１００×０．６＝６２とする。

【0054】

電子機器は、第２の画素セットにおける各画素に対して対応する第４の画素を決定した後、第１のスケッチ画像の第２の画素を第４の画素で置き換え、第２のスケッチ画像を得る。

【0055】

図４は、本開示の実施例により提供される画像処理方法において彩度に基づいて第１のスケッチ画像を修正するプロセスの概略図である。図４を参照すると、左から順にソース画像、第１のスケッチ画像、及び第２のスケッチ画像である。明らかに、第１のスケッチ画像の髪の毛は白っぽいものであり、通常のスケッチ効果ではなく、修正後に、髪の毛が明るくて白っぽい問題は改善される。

【0056】

なお、図４のソース画像はカラー画像にしてもよく、本開示の実施例はそれを限定しない。

【0057】

電子機器は、当該解決手段を採用すれば、ＨＳＶ画像の正規化された彩度に基づいて重み付け融合に関わる重みを決定し、第１のスケッチ画像の精確な修正の目的を達成する。

【0058】

上記の実施例では、電子機器は、正規化されたＨＳＶ画像の各画素の彩度に基づいて第１のスケッチ画像を修正する際、髪などのハイライト領域をのみ修正することができ、すなわち、局所的な領域改善はできるが、画像全体を大域的に修正することができない。したがって、電子機器は、上記の修正を完了した後、第１のスケッチ画像がより鉛筆画テクスチャを有する手描きの絵画のように見えるために、修正された白黒鉛筆画に着色（ｓｈａｄｅｒ）を加える必要があり、これは、テクスチャ追加とも呼ばれる。また、上記の修正によって局所領域のハイライト問題を完全に解決できない場合もある。したがって、電子機器は、上記の修正後に、ｓｈａｄｅｒを加えることで、第２のスケッチ画像をさらに修正する必要がある。電子機器は、ｓｈａｄｅｒを加える際、グレースケール画像の各画素の画素値に基づいて、予め設定されたテクスチャ画像と修正された前記鉛筆画スケッチとを融合する。

【0059】

例えば、電子機器は、グレースケールしきい値を決定した後、グレースケール値がグレースケールしきい値を超えている画素をグレースケール画像から決定し、これらの画素に基づいて第２のスケッチ画像から対応する画素を決定するとともに、これらの画素によって形成される領域に濃いテクスチャを加える。残りの画素によって形成される領域に薄いテクスチャを加える。

【0060】

さらに、例えば、電子機器は、グレースケール画像の各画素の画素値を０～１に正規化してしきい値を設定し、しきい値に基づいてグレースケール画像の画素を複数のセットに分割し、異なるセットにおける画素には、１回目の修正されたスケッチ画像において対応する画素がある。そして、電子機器は、テクスチャ画像と１回目の修正された鉛筆画スケッチとを融合して、１回目の修正された鉛筆画スケッチに鉛筆画テクスチャを組み込む。１つの実現形態では、電子機器は、グレースケール画像の正規化された画素値に基づいて重みを決定し、重みに基づいて１回目の修正された鉛筆画スケッチに鉛筆画テクスチャを組み込む。

【0061】

図５は、本開示の実施例により提供される画像処理方法におけるテクスチャ組み込みの概略図である。図５を参照すると、ソース画像には、帽子及び顔はいずれも白く、これらと比較して、髪色は暗くなっている。スタイル変換して得られた第１のスケッチ画像には、髪、帽子、及び顔の色は明るくなっている。しかし、元の画像の髪領域の色は濃くなっているため、髪領域の色を濃くする必要があり、顔領域及び帽子領域の色を濃くする必要がない。電子機器は、ＨＳＶ画像の彩度に基づいて修正するとき、第１のスケッチ画像から第２の画素セットにおける画素を髪領域の画素として決定する。１回目の修正後に、髪領域の色は明らかに濃くなっている。そして、電子機器は、テクスチャ画像と第２のスケッチ画像とを融合して、第２のスケッチ画像に鉛筆画テクスチャを組み込む。

【0062】

電子機器は、当該解決手段を採用すれば、テクスチャ追加で第２のスケッチ画像にテクスチャを加え、第２のスケッチ画像に鉛筆画テクスチャを組み込む目的、及び第２のスケッチ画像をさらに修正する目的を達成する。

【0063】

上記の実施例では、予め設定されたテクスチャ画像は複数あってもよい。例えば、予め設定されたテクスチャ画像は、第１のテクスチャ画像及び第２のテクスチャ画像を含み、前記第１のテクスチャ画像のテクスチャは、前記第２のテクスチャ画像のテクスチャと逆向きであり、前記第１のテクスチャ画像のテクスチャ色は前記第２のテクスチャ画像のテクスチャ色よりも濃くなっている。

【0064】

図６は、本開示の実施例により提供される画像処理方法におけるテクスチャ画像の概略図である。図６を参照すると、左側は第１のテクスチャ画像であり、右側は第２のテクスチャ画像であり、第１のテクスチャ画像の色は濃く、第２のテクスチャ画像の色は薄く、第１のテクスチャ画像と第２のテクスチャ画像とのテクスチャ方向は、図の矢印で示すように、当該２つの方向は互いに垂直（直交）することが明らかである。

【0065】

予め設定されたしきい値は０．１、０．３３、０．５を含むと仮定すると、電子機器は下記の式（２）に基づいてテクスチャ融合を行う。

【0066】

【数1】

【0067】

上記の式（２）には、Ｒｅｓｕｌｔは、テクスチャ融合された、第２のスケッチ画像の画素の画素値を２５５で割った値を表し、Ｓｋｅｔｃｈは、第２のスケッチ画像の画素の画素値を２５５で割った値を表し、Ｍａｓｋ１は、第１のテクスチャ画像の画素の画素値を２５５で割った値を表し、Ｍａｓｋ２は、第２のテクスチャ画像の画素の画素値を２５５で割った値を表す。上記の式（２）に基づいてｒｅｓｕｌｔを決定した後、ｒｅｓｕｌｔに２５５を乗算すれば、融合された画素の画素値を得ることができる。

【0068】

電子機器は、当該解決手段を採用して、３つのしきい値を合理的に設定し、グレースケール画像の各画素の正規化されたグレースケール値に基づいて、第２のスケッチ画像と第１のテクスチャ画像と第２のテクスチャ画像とを融合して鉛筆画テクスチャを組み込み、第２のスケッチ画像の線をより滑らかにする。

【0069】

上記の実施例では、ソース画像はカラー画像である場合、上記の第１のスケッチ画像を得た後、第３のスケッチ画像、すなわち、色鉛筆スケッチをさらに得ることができる。電子機器は、第３のスケッチ画像の取得中に、前記第１のスケッチ画像の各画素の画素値に基づいて前記第１のスケッチ画像の各画素の重みを決定し、前記第１のスケッチ画像の各画素の画素値、前記第１のスケッチ画像の各画素の重み、及び前記ソース画像の各画素の画素値に基づき、前記第１のスケッチ画像を着色して第３のスケッチ画像を得る。

【0070】

例示的に、電子機器は、第１のスケッチ画像とソース画像とを素材としてセグメンテーション関数を設計することにより、マスク（ｍａｓｋ）を得る。マスクに基づいてソース画像と第１のスケッチ画像とを画素ごとに融合し、第１のスケッチ画像を着色して第３の鉛筆画スケッチを得る。

【0071】

電子機器は、下記の式（３）に基づいてセグメンテーション関数を決定する。

【0072】

【数2】

【0073】

上記の式（３）には、Ｐ［ｉ］［ｊ］は、白黒鉛筆画の１つの画素の画素値を表し、値の範囲が０～２５５の整数であり、ｉは、当該画素の白黒鉛筆画での横座標を表し、ｊは、当該画素の白黒鉛筆画での縦座標を表し、パラメータｔｈｒｅｓｈは例えば１２８などである。上記のＭａｓｋ
ｖａｌｕｅは重みとする。

【0074】

電子機器は、式（４）に基づいてソース画像と第１のスケッチ画像とを画素ごとに融合する。
ｉｍａｇｅ＿ｃｏｌｏｒ＝ｉｍａｇｅ＿ｔａｒｇｅｔ×（１－Ｍａｓｋ ｖａｌｕｅ）＋ｉｍａｇｅ＿ｓｒｃ×ｍａｓｋ ｖａｌｕｅ 式（４）。

【0075】

図７は、本開示の実施例により提供される画像処理方法における融合効果の効果曲線概略図である。図７を参照すると、横軸は第１のスケッチ画像の画素の画素値であり、値の範囲が０～２５５である。縦軸は融合過程での重みの値であり、値の範囲が０～１である。当該効果曲線は３セグメントのセグメンテーション関数であり、全体としては連続的であり、融合効果から見ると、第１のスケッチ画像の画素の画素値はｔｈｒｅｓｈより小さい場合、第１のスケッチ画像の画素の重みは１に近いほど大きく、これに応じてソース画像の対応する画素の重みは小さく、且つ減衰が緩い。第１のスケッチ画像の画素の画素値はｔｈｒｅｓｈ以上になると、第１のスケッチ画像の画素の重みは、図の画素値１２８～１８０の部分に示すように、０．９のままである。そして、第１のスケッチ画像の画素の画素値は１８０より大きくなると、第１のスケッチ画像の画素の重みは急激に低下し、急速に０に減衰する。このようにして、髪や眼球などの部分の着色効果をよりよく保ちつつ、その他の白いハイライト部分はソース画像の影響を受けずに済む。

【0076】

当該解決手段を採用すれば、第１のスケッチ画像を着色すると同時に、優れる着色効果を確保することができる。

【0077】

上記の着色過程では、第１のスケッチ画像の着色を例にして説明したが、本開示の実施例はそれに限定されない。例えば、着色中に、テクスチャが加わっていない第２のスケッチ画像を着色してもよいし、または、テクスチャが加わった第２のスケッチ画像を着色してもよい。

【0078】

図８Ａは、本開示の実施例により提供される画像処理方法における着色プロセスの概略図である。図８Ａを参照すると、左から順にソース画像（カラー）、第１のスケッチ画像、及び第３のスケッチ画像である。

【0079】

図８Ｂは、本開示の実施例により提供される画像処理方法における着色プロセスの概略図である。図８Ｂを参照すると、左から順にソース画像（カラー）、第１のスケッチ画像、第２のスケッチ画像、及び第３のスケッチ画像である。

【0080】

また、上記の画像処理方法は他の方法に変形され得る。例示的に、図９を参照する。

【0081】

図９は、本願の実施例により提供される画像処理方法のフローチャートである。本実施例の実行主体は電子機器であり、当該電子機器は例えば、上記の図１の端末機器又はサーバである。本実施例は、以下のステップを含む。

【0082】

２０１では、ソース画像を取得する。

【0083】

２０２では、前記ソース画像に基づいてＲチャネル画像とＧチャネル画像とＢチャネル画像とを生成する。

【0084】

例示的に、電子機器は、ソース画像に対してＲＧＢチャネル分離を行い、ソース画像を３つのチャネルに分割し、Ｒチャネル画像（ｉｍｇ＿ｒ）、Ｇチャネル画像（ｉｍｇ＿ｇ）、及びＢチャネル画像（ｉｍｇ＿ｂ）とそれぞれ表す。

【0085】

２０３では、前記Ｒチャネル画像に対してガウスぼかしを行い、Ｒチャネルガウスぼかし画像を得て、前記Ｇチャネル画像に対してガウスぼかしを行い、Ｇチャネルガウスぼかし画像を得て、前記Ｂチャネル画像に対してガウスぼかしを行い、Ｂチャネルガウスぼかし画像を得る。

【0086】

例示的に、電子機器は、ガウス畳み込みなどに基づいてＲＧＢのそれぞれのガウスぼかしに対応するガウスカーネル（ｋｅｒｎｅｌ）を決定し、ガウスｋｅｒｎｅｌを利用し、Ｒチャネル画像（ｉｍｇ＿ｒ）に対してガウスぼかしを行い、Ｒチャネルガウスぼかし画像（ｒ＿ｂｌｕｒ）を得て、Ｇチャネル画像に対してガウスぼかしを行い、Ｇチャネルガウスぼかし画像（ｇ＿ｂｌｕｒ）を得て、Ｂチャネル画像に対してガウスぼかしを行い、Ｂチャネルガウスぼかし画像（ｂ＿ｂｌｕｒ）を得る。

【0087】

２０４では、前記Ｒチャネル画像と前記Ｒチャネルガウスぼかし画像とに基づいてＲ鉛筆画スケッチ画像を得て、前記Ｇチャネル画像と前記Ｇチャネルガウスぼかし画像とに基づいてＧ鉛筆画スケッチ画像を得て、前記Ｂチャネル画像と前記Ｂチャネルガウスぼかし画像とに基づいてＢ鉛筆画スケッチ画像を得る。

【0088】

例示的に、Ｒ鉛筆画スケッチ画像はｒ＿ｔａｒｇｅｔと表してもよく、Ｇ鉛筆画スケッチ画像はｇ＿ｔａｒｇｅｔと表してもよく、Ｂ鉛筆画スケッチ画像はｂ＿ｔａｒｇｅｔと表してもよい。電子機器は、ｄｏｄｇｅモードにて効果抽出を行い、すなわち、ｂ＿ｔａｒｇｅｔ
＝ （ｉｍｇ＿ｂ ／ ｂ＿ｂｌｕｒ） × ２５５、ｇ＿ｔａｒｇｅｔ ＝ （ｉｍｇ＿ｇ ／ ｇ＿ｂｌｕｒ） × ２５５、ｒ＿ｔａｒｇｅｔ ＝ (ｉｍｇ＿ｒ ／ ｒ＿ｂｌｕｒ) × ２５５とする。

【0089】

２０５では、前記Ｒ鉛筆画スケッチ画像と前記Ｇ鉛筆画スケッチ画像と前記Ｂ鉛筆画スケッチ画像とを融合し、色鉛筆スケッチを得る。

【0090】

例示的に、電子機器は、ｂ＿ｔａｒｇｅｔとｇ＿ｔａｒｇｅｔとｒ＿ｔａｒｇｅｔとに対してチャネル融合を行い、最終的な結果を得る。

【0091】

電子機器は、当該解決手段を採用してＲＧＢチャネル分割を行うことにより、カラーソース画像をカラー鉛筆スケッチに直接に変換することができ、柔軟性が高い。

【0092】

上記した実施例に係る画像処理方法に対応して、図１０は、本開示の実施例により提供される１つの画像処理装置の構造ブロック図である。説明の便宜上、本開示の実施例に関連する部分をのみ示している。図１０を参照すると、当該画像処理装置１００は、取得モジュール１１、グレースケールモジュール１２、処理モジュール１３、及び生成モジュール１４を含む。

【0093】

取得モジュール１１は、ソース画像を取得するために用いられ、
グレースケールモジュール１２は、前記ソース画像に基づいてグレースケール画像を生成するために用いられ、
処理モジュール１３は、前記グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得るために用いられ、
生成モジュール１４は、前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成するために用いられる。

【0094】

図１１は、本開示の実施例により提供される他の画像処理装置の構造ブロック図である。本実施例により提供される画像処理装置１００は、上記の図１０に基づいて、さらに、
前記生成モジュール１４が前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成した後、前記ソース画像を色相彩度明度（ＨＳＶ）画像に変換し、前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定し、前記ハイライト領域を修正して第２のスケッチ画像を得るために用いられる修正モジュール１５を含む。

【0095】

本開示の１つの実施例では、前記修正モジュール１５は、前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定するとき、前記ＨＳＶ画像の正規化された彩度が予め設定されたしきい値を超えている画素を決定して第１の画素セットを得て、前記第１の画素セットに基づいて前記第１のスケッチ画像から第２の画素セットを決定するために用いられ、前記第１の画素セットと前記第２の画素セットとにおける画素は１対１に対応し、前記第２の画素セットが前記ハイライト領域を形成する。前記修正モジュール１５は、前記ハイライト領域を修正して第２のスケッチ画像を得るとき、前記第１の画素セットに基づいて前記グレースケール画像から第３の画素セットを決定し、前記第１の画素セットと前記第３の画素セットとにおける画素は１対１に対応すること、及び、第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して、前記第１のスケッチ画像を修正して前記第２のスケッチ画像を得ること、に用いられる。

【0096】

本開示の１つの実施例では、前記修正モジュール１５は、第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して、前記第１のスケッチ画像を修正して前記第２のスケッチ画像を得るとき、第１の画素セットにおける第１の画素の正規化された彩度に基づいて第１の重みを決定し、前記第１の重みは前記第１の画素の正規化された彩度と正相関すること、前記第１の重みに基づいて第２の重みを決定し、前記第２の重みは予め設定された値と前記第１の重みとの差であること、及び、前記第２の画素セットにおける第２の画素、前記第３の画素セットにおける第３の画素、前記第１の重み、及び前記第２の重みに基づき、重み付け融合された第４の画素を決定し、前記第１のスケッチ画像の第２の画素を前記第４の画素に置き換え、前記第２のスケッチ画像を得ること、用いられる。

【0097】

再び図１１を参照すると、本開示の１つの実施例では、上記の画像処理装置１００は、
前記修正モジュール１５が前記ハイライト領域を修正して第２のスケッチ画像を得た後、前記グレースケール画像の画素の画素値に基づいて予め設定されたテクスチャ画像と前記第２のスケッチ画像とを融合するために用いられる融合モジュール１６をさらに含む。

【0098】

本開示の１つの実施例では、前記予め設定されたテクスチャ画像は第１のテクスチャ画像と第２のテクスチャ画像とを含み、前記第１のテクスチャ画像のテクスチャと前記第２のテクスチャ画像のテクスチャとは方向が互いに垂直であり、前記第１のテクスチャ画像のテクスチャ色は前記第２のテクスチャ画像のテクスチャ色より濃くなっている。

【0099】

再び図１１を参照すると、本開示の１つの実施例では、上記の画像処理装置１００は、前記生成モジュール１４が前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成した後、前記第１のスケッチ画像の画素の画素値に基づいて前記第１のスケッチ画像の画素の重みを決定し、前記第１のスケッチ画像の各画素の画素値に基づいて前記第１のスケッチ画像の対応する画素の着色重みを決定し、前記第１のスケッチ画像の各画素の画素値、着色重み、及び前記ソース画像の対応する画素の画素値に基づき、前記第１のスケッチ画像を着色して第３のスケッチ画像を得るために用いられる着色モジュール１７をさらに含む。

【0100】

本開示の１つの実施例では、前記生成モジュール１４は、前記グレースケール画像の画素の画素値と前記ガウスぼかし画像の画素の画素値とに基づき、前記第１のスケッチ画像の画素の画素値を決定し、前記グレースケール画像、前記ガウスぼかし画像、及び前記第１のスケッチ画像は、サイズが同じであり、前記グレースケール画像と前記ガウスぼかし画像と前記第１のスケッチ画像との画素は１対１に対応すること、及び、決定された前記第１のスケッチ画像の画素の画素値に基づいて前記第１のスケッチ画像を生成すること、に用いられる。

【0101】

本開示の１つの実施例では、上記のグレースケールモジュール１２は、前記ソース画像に対してノイズリダクション処理を行い、ノイズリダクション処理されたソース画像を前記グレースケール画像に変換するために用いられる。

【0102】

本実施例により提供される装置は、上記の方法の実施例に係る解決手段を実行するために使用されることができ、その実現原理及び技術的効果が類似するため、本実施例はここで繰り返して説明しない。

【0103】

図１２は、本開示の実施例を実現するための電子機器の構造概略図であり、当該電子機器２００は、端末機器又はサーバにすることができる。端末機器は、携帯電話、ノートブックコンピュータ、デジタル放送受信機、パーソナルデジタルアシスタント（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ、ＰＤＡと略称）、タブレットコンピュータ（Ｐｏｒｔａｂｌｅ Ａｎｄｒｏｉｄ Ｄｅｖｉｃｅ、ＰＡＤと略称）、携帯型マルチメディアプレーヤー（Ｐｏｒｔａｂｌｅ Ｍｅｄｉａ Ｐｌａｙｅｒ、ＰＭＰと略称）、車載端末（例えば、車載ナビゲーション端末）などの移動端末、及びデジタルＴＶ、デスクトップコンピュータなどの固定端末を含むことができるが、それらに限定されない。図１２に示される電子機器は単なる一例であり、本開示の実施例の機能及び使用範囲にいかなる制限も課すべきでない。

【0104】

図１２に示すように、電子機器２００は、処理装置（中央処理装置やグラフィックプロセッサなど）２０１を含むことができ、当該処理装置は、読み取り専用メモリ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ、ＲＯＭと略称）２０２に記憶されたプログラムまたは記憶装置２０８からランダムアクセスメモリ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＲＡＭと略称）２０３にロードされたプログラムに従って、さまざまな適切な動作及び処理を実行することができる。ＲＡＭ２０３には、電子機器２００の操作に必要なさまざまなプログラム及びデータも記憶されている。処理装置２０１、ＲＯＭ２０２及びＲＡＭ２０３は、バス２０４を介して互いに接続されている。入力／出力（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ、Ｉ／Ｏと略称）インタフェース２０５もバス２０４に接続されている。

【0105】

通常、タッチスクリーン、タッチパッド、キーボード、マウス、カメラ、マイクロフォン、加速度計、ジャイロスコープなどを含む入力装置２０６と、液晶ディスプレイ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ、ＬＣＤと略称）、スピーカー、バイブレータなどを含む出力装置２０７と、磁気テープやハードディスクなどを含む記憶装置２０８と、通信装置２０９とは、Ｉ／Ｏインタフェース２０５に接続されることができる。通信装置２０９は、電子機器２００が他のデバイスと無線又は有線で通信してデータを交換することを可能にし得る。図１２は、さまざまなデバイスを備える電子機器２００を示すが、図示されたデバイスのすべてが実施又は配置される必要があるわけではないことを理解すべきである。代替的に、より多くの又は少ないデバイスが実施又は配置され得る。

【0106】

特に、本開示の実施例によれば、フローチャートを参照して説明されている上記のプロセスは、コンピュータソフトウェアプログラムとして実施されることができる。例えば、本開示の実施例は、コンピュータ可読媒体に搭載されているコンピュータプログラムを含むコンピュータプログラム製品を含み、当該コンピュータプログラムがフローチャートに示される方法を実行するためのプログラムコードを含む。このような実施例では、当該コンピュータプログラムは、通信装置２０９を介してネットワークからダウンロード及びインストールされるか、または記憶装置２０８からインストールされるか、またはＲＯＭ２０２からインストールされることができる。当該コンピュータプログラムは、処理装置２０１により実行されると、本開示の実施例に係る方法で限定されている上記の機能は実行される。

【0107】

本開示的実施例は、コンピュータプログラムを含み、当該コンピュータプログラムがフローチャートに示される方法を実行するためのプログラムコードを含む。

【0108】

なお、本開示に記載されたコンピュータ可読媒体は、コンピュータ可読信号媒体又はコンピュータ可読記憶媒体又は上記２つの任意の組み合わせであり得る。コンピュータ可読記憶媒体は、例えば、電気的、磁気的、光学的、電磁的、赤外線、又は半導体のシステム、装置又はデバイス、あるいは上記の任意の組み合わせにすることができるが、それらに限定されない。コンピュータ可読記憶媒体のより具体的な例として、１本又は複数のワイヤを有する電気的接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥＰＲＯＭ又はフラッシュメモリ）、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）、光ストレージデバイス、磁気メモリコンポーネント、または上記の任意の適切な組み合わせを含み得るが、それらに限定されない。本開示では、コンピュータ可読記憶媒体は、命令実行システム、装置、またはデバイスによって使用されるか、またはそれらに組み合わせて使用できるプログラムを含む又は記憶する任意の有形媒体であり得る。本開示では、コンピュータ可読信号媒体は、ベースバンドで、または搬送波の一部として伝播されるデータ信号を含むことができ、その中にコンピュータ可読プログラムコードが搭載されている。このような伝播されたデータ信号は、電磁信号、光信号、または上記の任意の適切な組み合わせを含むがそれらに限定されない多くの形をとることができる。コンピュータ可読信号媒体は、さらに、コンピュータ可読記憶媒体以外の任意のコンピュータ可読媒体にすることができ、当該コンピュータ可読信号媒体は、命令実行システム、装置、またはデバイスによって使用されるか、またはそれらに組み合わせて使用するためのプログラムを送信、伝播、または伝送することができる。コンピュータ可読媒体に含まれたプログラムコードは、電線、光ファイバケーブル、ＲＦ（無線周波数）などを含むがそれらに限定されない任意の適切な媒体、または上記の任意の適切な組み合わせを使用して伝送することができる。

【0109】

上記のコンピュータ可読媒体は、上記の電子機器に含まれていてもよく、または当該電子機器に組み立てられずに単独で存在していてもよい。

【0110】

上記のコンピュータ可読媒体には、１つ又は複数のプログラムが搭載されており、上記の１つ又は複数のプログラムは当該電子機器により実行されると、当該電子機器は、上記の実施例に示される方法を実行する。

【0111】

本開示の操作を実行するためのコンピュータプログラムコードは、Ｊａｖａ、Ｓｍａｌｌｔａｌｋ、Ｃ＋＋などのオブジェクト指向プログラミング言語と、「Ｃ」言語又はそれに類似するプログラミング言語などの従来の手続き型プログラミング言語と、を含む１つ又は複数のプログラミング言語、あるいはそれらの組み合わせで書くことができる。プログラムコードは、完全にユーザのコンピュータ上で、一部はユーザのコンピュータ上で、スタンドアロンソフトウェアパッケージとして、一部はユーザのコンピュータ上で、一部はリモートコンピュータ上で、または完全にリモートコンピュータ又はサーバ上で実行できる。リモートコンピュータの場合、リモートコンピュータは、ローカルエリアネットワーク(Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ、ＬＡＮと略称)やワイドエリアネットワーク（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ、ＷＡＮと略称)など、あらゆる種類のネットワークを介してユーザのコンピュータに接続されることができ、もしくは、外部コンピュータに接続されることもできる（例えば、インターネットサービスプロバイダーを使用してインターネット経由で接続する）。

【0112】

図面のフローチャート及びブロック図は、本開示の様々な実施例によるシステム、方法、及びコンピュータプログラム製品によって実現可能なアーキテクチャ、機能、及び操作を示している。これに関して、フローチャート又はブロック図の各ブロックは、指定される論理的機能を実現するための１つ又は複数の実行可能な命令を含むモジュール、グログラムセグメント、又はコードの一部を表すことができる。いくつかの代替の実現では、ブロックに示されている機能は、図に示されている順序と異なる順序で実行できることにも注意すべきである。例えば、連結して表示される２つのブロックは、実際には、基本的に並行して実行できるが、または、関連する機能に応じて、ブロックが逆の順序で実行される場合もある。なお、ブロック図及び／又はフローチャートの各ブロック、及びブロック図及び／又はフローチャートのブロックの組み合わせは、指定される機能又は操作を実行する専用のハードウェアベースのシステムを使用して実現することができ、または、専用のハードウェアとコンピュータ命令の組み合わせを使用して実現することもできる。

【0113】

本開示の実施例に記載されたユニットは、ソフトウェアで実現することができ、またはハードウェアで実現することもできる。これらのユニットの名称は、特定の状況下でのユニット自体を制限する目的ではない場合がある。

【0114】

本明細書で上記に説明された機能は、少なくとも部分的に、１つ又は複数のハードウェアロジックコンポーネントによって実行され得る。例えば、使用できるハードウェアロジックコンポーネントの例示的なタイプとして、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、特定用途向け標準部品（ＡＳＳＰ）、システムオンチップ（ＳＯＣ）、複雑なプログラマブルロジックデバイス（ＣＰＬＤ）などを含むことができるが、それらに限定されない。

【0115】

本開示のコンテキストでは、コンピュータ可読媒体は、命令実行システム、装置、またはデバイスによって使用されるか、またはそれらに組み合わせて使用できるプログラムを含む又は記憶する有形媒体であり得る。コンピュータ可読媒体は、コンピュータ可読信号媒体又はコンピュータ可読記憶媒体であり得る。コンピュータ可読媒体は、電気的、磁気的、光学的、電磁的、赤外線、又は半導体のシステム、装置又はデバイス、あるいは上記の任意の組み合わせにすることができるが、それらに限定されない。コンピュータ可読記憶媒体のより具体的な例として、１本又は複数のワイヤに基づく電気的接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥＰＲＯＭ又はフラッシュメモリ）、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）、光ストレージデバイス、磁気メモリコンポーネント、または上記の任意の適切な組み合わせを含み得る。

【0116】

第１の態様では、本開示の１つ又は複数の実施例によれば、画像処理方法を提供し、前記方法は、ソース画像を取得するステップと、前記ソース画像に基づいてグレースケール画像を生成するステップと、前記グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得るステップと、前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成するステップと、を含む。

【0117】

本開示の１つ又は複数の実施例によれば、前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成するステップの後に、前記方法は、さらに、前記ソース画像を色相彩度明度（ＨＳＶ）画像に変換するステップと、前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定するステップと、前記ハイライト領域を修正して第２のスケッチ画像を得るステップと、を含む。

【0118】

本開示の１つ又は複数の実施例によれば、前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定するステップは、前記ＨＳＶ画像の正規化された彩度が予め設定されたしきい値を超えている画素を決定して第１の画素セットを得るステップと、前記第１の画素セットに基づいて前記第１のスケッチ画像から第２の画素セットを決定するステップであって、前記第１の画素セットと前記第２の画素セットとにおける画素は１対１に対応し、前記第２の画素セットが前記ハイライト領域を形成するステップと、を含み、前記ハイライト領域を修正して第２のスケッチ画像を得るステップは、前記第１の画素セットに基づいて前記グレースケール画像から第３の画素セットを決定するステップであって、前記第１の画素セットと前記第３の画素セットとにおける画素は１対１に対応するステップと、第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して、前記第１のスケッチ画像を修正して前記第２のスケッチ画像を得るステップと、を含む。

【0119】

本開示の１つ又は複数の実施例によれば、第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して、前記第１のスケッチ画像を修正して前記第２のスケッチ画像を得るステップは、第１の画素セットにおける第１の画素の正規化された彩度に基づいて第１の重みを決定するステップであって、前記第１の重みは前記第１の画素の正規化された彩度と正相関するステップと、前記第１の重みに基づいて第２の重みを決定するステップであって、前記第２の重みは予め設定された値と前記第１の重みとの差であるステップと、前記第２の画素セットにおける第２の画素、前記第３の画素セットにおける第３の画素、前記第１の重み、及び前記第２の重みに基づき、重み付け融合された第４の画素を決定するステップと、前記第１のスケッチ画像の第２の画素を前記第４の画素に置き換え、前記第２のスケッチ画像を得るステップと、を含む。

【0120】

本開示の１つ又は複数の実施例によれば、前記ハイライト領域を修正して第２のスケッチ画像を得るステップの後に、前記方法は、さらに、前記グレースケール画像の画素の画素値に基づいて予め設定されたテクスチャ画像と前記第２のスケッチ画像とを融合するステップを含む。

【0121】

本開示の１つ又は複数の実施例によれば、前記予め設定されたテクスチャ画像は第１のテクスチャ画像と第２のテクスチャ画像とを含み、前記第１のテクスチャ画像のテクスチャと前記第２のテクスチャ画像のテクスチャとは方向が互いに垂直であり、前記第１のテクスチャ画像のテクスチャ色は前記第２のテクスチャ画像のテクスチャ色より濃くなっている。

【0122】

本開示の１つ又は複数の実施例によれば、前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成するステップの後に、前記方法は、さらに、前記第１のスケッチ画像の画素の画素値に基づいて前記第１のスケッチ画像の画素の重みを決定するステップと、前記第１のスケッチ画像の各画素の画素値に基づいて前記第１のスケッチ画像の対応する画素の着色重みを決定するステップと、前記第１のスケッチ画像の各画素の画素値、着色重み、及び前記ソース画像の対応する画素の画素値に基づき、前記第１のスケッチ画像を着色して第３のスケッチ画像を得るステップと、を含む。

【0123】

本開示の１つ又は複数の実施例によれば、前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成するステップは、前記グレースケール画像の画素の画素値と前記ガウスぼかし画像の画素の画素値とに基づき、前記第１のスケッチ画像の画素の画素値を決定するステップであって、前記グレースケール画像、前記ガウスぼかし画像、及び前記第１のスケッチ画像は、サイズが同じであり、前記グレースケール画像と前記ガウスぼかし画像と前記第１のスケッチ画像との画素は１対１に対応するステップと、決定された前記第１のスケッチ画像の画素の画素値に基づいて前記第１のスケッチ画像を生成するステップと、を含む。

【0124】

本開示の１つ又は複数の実施例によれば、前記ソース画像をグレースケール画像に変換するステップは、前記ソース画像に対してノイズリダクション処理を行うステップと、ノイズリダクション処理されたソース画像を前記グレースケール画像に変換するステップと、を含む。

【0125】

第２の態様では、本開示の１つ又は複数の実施例によれば、画像処理装置を提供し、前記装置は、
ソース画像を取得するために用いられる取得モジュールと、
前記ソース画像に基づいてグレースケール画像を生成するために用いられるグレースケールモジュールと、
前記グレースケール画像に対してガウスぼかしを行い、ガウスぼかし画像を得るために用いられる処理モジュールと、
前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成するために用いられる生成モジュールと、を含む。

【0126】

本開示の１つ又は複数の実施例によれば、上記の装置は、さらに、前記生成モジュールが前記ガウスぼかし画像と前記グレースケール画像とに基づいて前記ソース画像の対応する第１のスケッチ画像を生成した後、前記ソース画像を色相彩度明度（ＨＳＶ）画像に変換し、前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定し、前記ハイライト領域を修正して第２のスケッチ画像を得るために用いられる修正モジュールを含む。

【0127】

本開示の１つ又は複数の実施例によれば、前記修正モジュールは、前記ＨＳＶ画像の画素の彩度に基づいて前記第１のスケッチ画像からハイライト領域を決定するとき、前記ＨＳＶ画像の正規化された彩度が予め設定されたしきい値を超えている画素を決定して第１の画素セットを得て、前記第１の画素セットに基づいて前記第１のスケッチ画像から第２の画素セットを決定し、前記第１の画素セットと前記第２の画素セットとにおける画素は１対１に対応し、前記第２の画素セットが前記ハイライト領域を形成することに用いられ、
前記修正モジュールは、前記ハイライト領域を修正して第２のスケッチ画像を得るとき、前記第１の画素セットに基づいて前記グレースケール画像から第３の画素セットを決定し、前記第１の画素セットと前記第３の画素セットとにおける画素は１対１に対応すること、及び、第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して、前記第１のスケッチ画像を修正して前記第２のスケッチ画像を得ること、に用いられる。

【0128】

本開示の１つ又は複数の実施例によれば、前記修正モジュールは、第２の画素セットにおける画素と第３の画素セットにおける対応する画素とを重み付け融合して、前記第１のスケッチ画像を修正して前記第２のスケッチ画像を得るとき、第１の画素セットにおける第１の画素の正規化された彩度に基づいて第１の重みを決定し、前記第１の重みは前記第１の画素の正規化された彩度と正相関すること、前記第１の重みに基づいて第２の重みを決定し、前記第２の重みは予め設定された値と前記第１の重みとの差であること、及び、前記第２の画素セットにおける第２の画素、前記第３の画素セットにおける第３の画素、前記第１の重み、及び前記第２の重みに基づき、重み付け融合された第４の画素を決定し、前記第１のスケッチ画像の第２の画素を前記第４の画素に置き換え、前記第２のスケッチ画像を得ること、に用いられる。

【0129】

本開示の１つ又は複数の実施例によれば、上記の装置は、さらに、前記修正モジュールが前記ハイライト領域を修正して第２のスケッチ画像を得た後に、前記グレースケール画像の画素の画素値に基づいて予め設定されたテクスチャ画像と前記第２のスケッチ画像とを融合するために用いられる融合モジュールを含む。

【0130】

本開示の１つ又は複数の実施例によれば、前記予め設定されたテクスチャ画像は第１のテクスチャ画像と第２のテクスチャ画像とを含み、前記第１のテクスチャ画像のテクスチャと前記第２のテクスチャ画像のテクスチャとは方向が互いに垂直であり、前記第１のテクスチャ画像のテクスチャ色は前記第２のテクスチャ画像のテクスチャ色より濃くなっている。

【0131】

本開示の１つ又は複数の実施例によれば、上記の装置は、さらに、前記生成モジュールが前記ガウスぼかし画像と前記グレースケール画像とに基づいて第１のスケッチ画像を生成した後、前記第１のスケッチ画像の画素の画素値に基づいて前記第１のスケッチ画像の画素の重みを決定し、前記第１のスケッチ画像の各画素の画素値に基づいて前記第１のスケッチ画像の対応する画素の着色重みを決定し、前記第１のスケッチ画像の各画素の画素値、着色重み、及び前記ソース画像の対応する画素の画素値に基づき、前記第１のスケッチ画像を着色して第３のスケッチ画像を得るために用いられる着色モジュールを含む。

【0132】

本開示の１つ又は複数の実施例によれば、前記生成モジュールは、前記グレースケール画像の画素の画素値と前記ガウスぼかし画像の画素の画素値とに基づき、前記第１のスケッチ画像の画素の画素値を決定し、前記グレースケール画像、前記ガウスぼかし画像、及び前記第１のスケッチ画像は、サイズが同じであり、前記グレースケール画像と前記ガウスぼかし画像と前記第１のスケッチ画像との画素は１対１に対応すること、及び、決定された前記第１のスケッチ画像の画素の画素値に基づいて前記第１のスケッチ画像を生成すること、に用いられる。

【0133】

本開示の１つ又は複数の実施例によれば、前記グレースケールモジュールは、前記ソース画像に対してノイズリダクション処理を行い、ノイズリダクション処理されたソース画像を前記グレースケール画像に変換するために用いられる。

【0134】

第３の態様では、本開示の１つ又は複数の実施例によれば、少なくとも１つのプロセッサとメモリとを含む電子機器を提供し、
前記メモリにはコンピュータ実行命令が記憶されており、
前記少なくとも１つのプロセッサは前記メモリに記憶されているコンピュータ実行命令を実行すると、前記少なくとも１つのプロセッサは上記した画像処理方法を実行する。

【0135】

第４の態様では、本開示の１つ又は複数の実施例によれば、コンピュータ可読記憶媒体を提供し、前記コンピュータ可読記憶媒体にはコンピュータ実行命令が記憶されており、プロセッサが前記コンピュータ実行命令を実行するとき、上記した画像処理方法が実現される。

【0136】

第５の態様では、本開示の１つ又は複数の実施例によれば、コンピュータプログラムを含む、コンピュータプログラム製品を提供し、前記コンピュータプログラムは可読記憶媒体に記憶されており、電子機器の少なくとも１つのプロセッサが前記可読記憶媒体から前記コンピュータプログラムを読み取り、前記少なくとも１つのプロセッサが前記コンピュータプログラムを実行すると、前記電子機器が上記した画像処理方法を実現する。

【0137】

第６の態様では、本開示の１つ又は複数の実施例によれば、コンピュータプログラムを提供し、前記コンピュータプログラムは可読記憶媒体に記憶されており、電子機器の少なくとも１つのプロセッサが前記可読記憶媒体から前記コンピュータプログラムを読み取り、前記少なくとも１つのプロセッサが前記コンピュータプログラムを実行すると、前記電子機器が上記した画像処理方法を実現する。

【0138】

上記した説明は、本開示のいくつかの好ましい実施例に関する説明、及び適用される技術的原理に関する説明にすぎない。当業者は、本開示の実施例に係る発明範囲は、上記の技術的特徴の特定の組み合わせによって形成される解決手段に限定されず、上記の発明構想から逸脱することなく、上記の技術的特徴又はそれらの同等の特徴の任意の組み合わせによって形成される他の解決手段、例えば、上記特徴を、本開示で開示される（ただしこれに限定されない）同様の機能を有する技術的特徴に置き換えることによって形成される解決手段もカバーすべきであることを理解すべきである。

【0139】

なお、特定の順序で各操作について説明したが、これらの操作は示されている特定の順序又は順番に実行されることを要求するものと理解されるべきではない。マルチタスクや並列処理は、一定の環境下では有利である場合がある。同様に、上記の説明にはいくつかの具体的な実現の詳細が含まれるが、これらは本開示の範囲を限定するものとして解釈されるべきではない。個々の実施例のコンテキストにおいて説明される特定の特徴は、単一の実施例において組み合わせて実現されてもよい。逆に、単一の実施例のコンテキストにおいて説明される様々な特徴は、複数の実施例において、単独で又は任意の適切なサブ組合せで実現されてもよい。

【0140】

本主題は、構造的特徴及び／又は方法的論理動作に固有の言語を用いて説明されてきたが、添付の特許請求の範囲に限定される主題は、必ずしも上記の特定の特徴又は動作に限定されないことが理解されるべきである。逆に、上記の特定の特徴及び動作は、特許請求の範囲を実施するための例示的な形態にすぎない。

【0141】

本願は２０２１年０２月０５日に中国特許局に提出された、出願番号が２０２１１０１６４１４１．７で、発明の名称が「画像処理方法、装置、機器及び可読記憶媒体」という中国特許出願の優先権を主張し、その全ての内容は援用によって本願に組み合わせられる。

【図1】

【図2】

【図3A】

【図3B】

【図4】

【図5】

【図6】

【図7】

【図8A】

【図8B】

【図9】

【図10】

【図11】

【図12】