特許 6981561 カラーチャート

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】6981561

(24)【登録日】2021年11月22日

(45)【発行日】2021年12月15日

(54)【発明の名称】カラーチャート

(51)【国際特許分類】

   G01J 3/52 20060101AFI20211202BHJP

   H04N 1/60 20060101ALI20211202BHJP

【ＦＩ】

   G01J3/52

   H04N1/60

【請求項の数】7

【全頁数】17

(21)【出願番号】特願2021-39110(P2021-39110)

(22)【出願日】2021年3月11日

【審査請求日】2021年3月12日

(31)【優先権主張番号】特願2020-104762(P2020-104762)

(32)【優先日】2020年6月17日

(33)【優先権主張国】JP

【早期審査対象出願】

(73)【特許権者】

【識別番号】000002886

【氏名又は名称】ＤＩＣ株式会社

(74)【代理人】

【識別番号】100114775

【弁理士】

【氏名又は名称】高岡 亮一

(74)【代理人】

【識別番号】100121511

【弁理士】

【氏名又は名称】小田 直

(74)【代理人】

【識別番号】100193725

【弁理士】

【氏名又は名称】小森 幸子

(74)【代理人】

【識別番号】100163038

【弁理士】

【氏名又は名称】山下 武志

(74)【代理人】

【識別番号】100207240

【弁理士】

【氏名又は名称】樋口 喜弘

(72)【発明者】

【氏名】高橋 雅人

(72)【発明者】

【氏名】森原 康博

(72)【発明者】

【氏名】津村 徳道

(72)【発明者】

【氏名】高橋 凌

(72)【発明者】

【氏名】小川 恵子

(72)【発明者】

【氏名】金 一石

【審査官】 横尾 雅一

(56)【参考文献】

【文献】 米国特許出願公開第２０１４／０２０９６８２（ＵＳ，Ａ１）

【文献】 再公表特許第２０１６／１６３２６６（ＪＰ，Ａ１）

【文献】 特表２０１８−５２３８１８（ＪＰ，Ａ）

【文献】 再公表特許第２０１５／００５１５２（ＪＰ，Ａ１）

【文献】 特表２０１７−５１５１０６（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１４／０２３２９２３（ＵＳ，Ａ１）

【文献】 米国特許出願公開第２０１１／００６４３０７（ＵＳ，Ａ１）

【文献】 国際公開第２０１６／０７６１６５（ＷＯ，Ａ１）

【文献】 再公表特許第２００４／０４４６３９（ＪＰ，Ａ１）

【文献】 米国特許出願公開第２００８／００６８６２５（ＵＳ，Ａ１）

【文献】 高橋康弘、外２名，遠隔医療における色補正，第５回画像センシングシンポジウム講演論文集，1999年06月17日，第３２１頁−第３２４頁

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０１Ｊ ３／００ − Ｇ０１Ｊ ３／５２

Ｈ０４Ｎ １／６０

Ｈ０４Ｎ ９／０４ − Ｈ０４Ｎ ９／１１

Ｈ０４Ｎ ９／４４ − Ｈ０４Ｎ ９／７８

ＪＳＴＰｌｕｓ／ＪＭＥＤＰｌｕｓ／ＪＳＴ７５８０（ＪＤｒｅａｍＩＩＩ）

(57)【特許請求の範囲】

【請求項1】

複数のパッチと、前記複数のパッチの少なくとも一つを自動認識するための自動認識用マーカとを有し、
前記複数のパッチが、以下の第１パッチから第７パッチからなる群から選択される少なくとも３つのパッチを有する、
ことを特徴とするカラーチャート。
第１パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝７２、ａ^＊＝８、及びｂ^＊＝２２で表される第１色、又は第１色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第２パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝７８、ａ^＊＝３０、及びｂ^＊＝１５で表される第２色、又は第２色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第３パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝５８、ａ^＊＝２７、及びｂ^＊＝７で表される第３色、又は第３色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第４パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝６０、ａ^＊＝２０、及びｂ^＊＝５で表される第４色、又は第４色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第５パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝４８、ａ^＊＝２５、及びｂ^＊＝２で表される第５色、又は第５色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第６パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝５２、ａ^＊＝５０、及びｂ^＊＝１３で表される第６色、又は第６色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第７パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝３３、ａ^＊＝４０、及びｂ^＊＝３０で表される第７色、又は第７色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域

【請求項2】

模様が異なる前記自動認識用マーカを２つ以上有する、請求項１に記載のカラーチャート。

【請求項3】

前記複数のパッチが、明度が異なる複数の無彩色のパッチを有する、請求項１又は２に記載のカラーチャート。

【請求項4】

前記複数のパッチが、前記第１色から前記第７色とは異なる複数の有彩色のパッチを有する、請求項１〜３のいずれかに記載のカラーチャート。

【請求項5】

面積が４０ｃｍ^２以上１５０ｃｍ^２以下である、請求項１〜４のいずれかに記載のカラーチャート。

【請求項6】

前記複数のパッチの各面積が、０．２５ｃｍ^２以上４ｃｍ^２以下である、請求項１〜５のいずれかに記載のカラーチャート。

【請求項7】

主面の右下部に空白部を有する請求項１〜６のいずれかに記載のカラーチャート。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、カラーチャートに関する。

【背景技術】

【0002】

カラーチャートは、色見本を配列した板状の物体であり、画像システムの色彩再現性をチェックするなど色の比較・測定に用いられる。

【0003】

カラーチャートは、デジタルカメラ等の撮影によって撮影されたデジタル画像の色補正に使用されることがある。
例えば、被写体の撮影時に、カラーチャート（色見本）も一緒に撮影しておき、得られたデジタル画像に含まれるカラーチャートでの画素値を用いることで、デジタル画像を色補正する技術が提案されている（例えば、特許文献１参照）。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開平６−４６４４８号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

特許文献１で提案されている技術では、カラーチャートの色票（パッチ）の色と、撮影されたカラーチャートの色票の色との関係を演算するに際して、撮影されたカラーチャートの色票の抽出については、キーボードやマウスを操作して手作業で行う（特許文献１の段落〔００２０〕〜〔００２１〕）。このような作業は、抽出の間違いが発生する可能性がある上に、カラーチャート中の全ての色票を手作業で抽出しようとすると時間がかかるという問題がある。

【0006】

そこで、カラーチャート中のパッチを容易に自動認識することができる技術が求められる。

【0007】

すなわち、本発明は、カラーチャート中のパッチを容易に自動認識することができるカラーチャートを提供することを目的とする。

【課題を解決するための手段】

【0008】

本発明者らは、上記課題を解決するために鋭意研究を重ねた結果、カラーチャートにマーカを設けることで、カラーチャートからパッチを容易に自動認識することができることを見出し、本発明の完成に至った。

【0009】

すなわち、本発明は、以下の態様を包含するものである。
［１］ 複数のパッチと、前記複数のパッチの少なくとも一つを自動認識するための自動認識用マーカとを有することを特徴とするカラーチャート。
［２］ 模様が異なる前記自動認識用マーカを２つ以上有する、［１］に記載のカラーチャート。
［３］ 前記複数のパッチが、以下の第１パッチから第７パッチからなる群から選択される少なくとも３つのパッチを有する、［１］又は［２］に記載のカラーチャート。
第１パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝７２、ａ^＊＝８、及びｂ^＊＝２２で表される第１色、又は第１色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第２パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝７８、ａ^＊＝３０、及びｂ^＊＝１５で表される第２色、又は第２色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第３パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝５８、ａ^＊＝２７、及びｂ^＊＝７で表される第３色、又は第３色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第４パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝６０、ａ^＊＝２０、及びｂ^＊＝５で表される第４色、又は第４色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第５パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝４８、ａ^＊＝２５、及びｂ^＊＝２で表される第５色、又は第５色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第６パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝５２、ａ^＊＝５０、及びｂ^＊＝１３で表される第６色、又は第６色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第７パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝３３、ａ^＊＝４０、及びｂ^＊＝３０で表される第７色、又は第７色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
［４］ 前記複数のパッチが、明度が異なる複数の無彩色のパッチを有する、［１］〜［３］のいずれかに記載のカラーチャート。
［５］ 前記複数のパッチが、前記第１色から前記第７色とは異なる複数の有彩色のパッチを有する、［３］又は［４］に記載のカラーチャート。
［６］ 面積が４０ｃｍ^２以上１５０ｃｍ^２以下である、［１］〜［５］のいずれかに記載のカラーチャート。
［７］ 前記複数のパッチの各面積が、０．２５ｃｍ^２以上４ｃｍ^２以下である、［１］〜［６］のいずれかに記載のカラーチャート。
［８］ 主面の右下部に空白部を有する［１］〜［７］のいずれかに記載のカラーチャート。

【発明の効果】

【0010】

本発明によれば、カラーチャート中のパッチを容易に自動認識することができるカラーチャートを提供することができる。

【図面の簡単な説明】

【0011】

【図1】カラーチャートの一例の模式図である。

【図2】画像表示システムの一例の構成図である。

【図3】表示手段の一例の機能構成図である。

【図4】画像表示方法の一例のフローチャートである。

【図5】撮影手段でカラーチャート及び患者を同時に撮影する一例の模式図である。

【図6】表示手段の表示部に撮影して得られた画像を表示した一例の模式図である。

【図7】医師が表示手段の表示部に撮影して得られた画像を表示して遠隔診療を行う一例の模式図である。

【発明を実施するための形態】

【0012】

以下、本発明のカラーチャートについて詳細に説明するが、以下に記載する構成要件の説明は、本発明の一実施態様としての一例であり、これらの内容に特定されるものではない。

【0013】

＜カラーチャート＞
本発明のカラーチャートは、複数のパッチと、自動認識用マーカとを少なくとも有する。

【0014】

複数のパッチは、例えば、明度が異なる複数の無彩色のパッチを有する。無彩色のパッチの種類は、例えば、５〜７種類が挙げられる。無彩色のパッチの種類が３種類以下であると、例えば、カメラによりカラーチャートが撮影された画像の色補正を、無彩色のパッチを用いて行う際、カメラの非線形性に十分に対応できず、色補正の精度が低下する場合がある。その点で、無彩色のパッチの種類は、５種類以上が好ましい。

【0015】

複数のパッチは、例えば、複数の有彩色のパッチを有する。複数のパッチは、例えば、後述する第１色から第７色とは異なる複数の有彩色のパッチを有する。これらの有彩色のパッチの種類は、例えば、１５〜２０種類が挙げられる。

【0016】

カラーチャートにおける各パッチの大きさとしては、特に限定されないが、色の認識を妨げない点で小さすぎないことが好ましい。その点で、０．２５ｃｍ^２以上が好ましい。また、カラーチャートが大きくなりすぎない点で、４ｃｍ^２以下が好ましい。
各パッチの形状としては、例えば、正方形などが挙げられる。

【0017】

カラーチャートは、複数のパッチの少なくとも一つを自動認識するための自動認識用マーカを有する。カラーチャートが自動認識用マーカを有することにより、後述する色補正を行う際の、画像データにおけるカラーチャートの各パッチを認識する作業を、自動で行うことができる。
自動認識用マーカの形状、大きさとしては、特に限定されないが、例えば、パッチと同程度の形状、大きさであることが好ましい。例えば、自動認識用マーカの大きさは、０．２５ｃｍ^２以上４ｃｍ^２以下が好ましい。また、自動認識用マーカは、通常、各パッチが有さない模様を有している。
カラーチャートは、模様が異なる自動認識用マーカを２つ以上有することが好ましい。２つ以上の自動認識用マーカを用いる場合には、２つ以上の自動認識用マーカの相対的な位置関係を考慮して各パッチの自動認識が行われることから、各パッチの自動認識性が向上する。

【0018】

自動認識用マーカは、自動認識を可能とするマーカであれば特に制限されるものではないが、自動認識用マーカに対し二次元バーコード等によりカラーチャートのバージョン情報、使用方法へのリンク、使用期限等の情報を付加してもよい。なお、カラーチャートは、保管状態により退色する場合がある。その点で、カラーチャートには使用期限を設けることが好ましい場合がある。

【0019】

ここで、自動認識用マーカを用いてカラーチャートの各パッチを自動認識する方法の一例を説明する。
まず、カラーチャートを撮影して得られた画像の中から、自動認識用マーカを検知する。自動認識用マーカの検知は、例えば、汎用の画像認識処理ソフトウェアを備える画像認識手段を用いて行うことができる。具体的には、画像認識手段を用いて、あらかじめ画像認識手段に記憶されている自動認識用マーカの画像と、カラーチャートを撮影して得られた画像とのパターンマッチングを行うことにより、カラーチャートを撮影して得られた画像の中から、自動認識用マーカを検知する。
他方、カラーチャートにおける自動認識用マーカと各パッチとの位置関係を、あらかじめ画像認識手段に記憶させておく。例えば、模様が異なる２つの自動認識用マーカを用いる場合には、２つの自動認識用マーカそれぞれと各パッチとの位置関係を、あらかじめ画像認識手段の記憶部に記憶させておく。ここで、画像認識手段としては、ＣＰＵとメモリとの組み合わせが挙げられる。
そして、検知した自動認識用マーカを用いて、撮影して得られた画像のカラーチャートに、把握しておいた位置関係を当てはめることで、撮影して得られた画像のカラーチャート中の各パッチを自動認識することができる。

【0020】

カラーチャートの大きさとしては、特に限定されないが、片手で持つことができ、カラーチャートを顔の近くで持っても邪魔にならない点から、カラーチャートの面積は、４０ｃｍ^２以上１５０ｃｍ^２以下が好ましい。

【0021】

カラーチャートは、通常、シート状である。そして、カラーチャートの主面の形状は、例えば、矩形である。

【0022】

カラーチャートの材質としては、各パッチが印刷可能であれば、特に限定されず、例えば、プラスチック樹脂製（例えば、合成紙）であってもよいし、紙製であってもよい。

【0023】

カラーチャートは、主面の右下部（正面視した際の左下部）に空白部を有することが好ましい。人間は右利きが多い。そのため、カラーチャートの当該空白部を右手で持つと、顔の右横にカラーチャートを自然に配置しやすくなる。

【0024】

ところで、遠隔医療に関連する市場は、慢性疾患対応やモバイルヘルスアプリなども一要因となり、成長している。新型コロナウイルス感染症（ＣＯＶＩＤ−１９）の蔓延により、感染予防の観点からも遠隔診療の重要性が認識され、良好な遠隔診療システムの構築の必要性が生じている。
歯科における歯茎の色の観察、皮膚科における皮膚の色の観察、耳鼻咽喉科における喉の色の観察、漢方医学で行われている、顔の肌色、舌色などによる診察（望診）など、診療においては、色を重視する診療が行われる場合がある。このような診療においては、色の認識が正しく行われないことが診断に影響を与えることがある。
そのため、そのような診療を遠隔診療で行う際には、色を正確に認識することが重要である。

【0025】

本発明のカラーチャートは、以下の第１パッチから第７パッチからなる群から選択される少なくとも２つのパッチを有することが好ましく、少なくとも３つを有することがより好ましく、少なくとも５つを有することがさらにより好ましく、７つを有することが特に好ましい。カラーチャートが、以下の第１パッチから第７パッチからなる群から選択される少なくとも２つのパッチを有する場合、カラーチャートは、遠隔診療において肌色、舌色などの色を正確に認識することを助けることから、カラーチャートは、患者の肌色、舌色などの色情報を用いた遠隔診療に有用である。
これら第１パッチから第７パッチの組み合わせとして、７つのパッチから選択される２つ以上であれば特に制限されるものではないが、紫赤、薄赤紫、濃い黄赤のように色調が異なるバッチを３つ以上選択することが好ましい。

【0026】

第１パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝７２、ａ^＊＝８、及びｂ^＊＝２２で表される第１色、又は第１色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第２パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝７８、ａ^＊＝３０、及びｂ^＊＝１５で表される第２色、又は第２色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第３パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝５８、ａ^＊＝２７、及びｂ^＊＝７で表される第３色、又は第３色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第４パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝６０、ａ^＊＝２０、及びｂ^＊＝５で表される第４色、又は第４色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第５パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝４８、ａ^＊＝２５、及びｂ^＊＝２で表される第５色、又は第５色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第６パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝５２、ａ^＊＝５０、及びｂ^＊＝１３で表される第６色、又は第６色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域
第７パッチ：Ｌ^＊ａ^＊ｂ^＊値においてＬ^＊＝３３、ａ^＊＝４０、及びｂ^＊＝３０で表される第７色、又は第７色に対してＬ^＊ａ^＊ｂ^＊色空間において色差ΔＥ^＊が５以下の色、を有する領域

【0027】

第１パッチが有する色は、湿（余分な水）が蓄積した舌苔の色に対応する。
第２パッチが有する色は、炎症肌色に対応する。
第３パッチが有する色は、淤血の（微小循環が悪い）舌の色に対応する。
第４パッチが有する色は、健康な舌苔のある部分の色に対応する。
第５パッチが有する色は、舌深静脈の怒張＝淤血の色に対応する。
第６パッチが有する色は、健康な舌の色に対応する。
第７パッチが有する色は、熱がある舌の色に対応する。
これらの色を有するカラーチャートを用いることで、患者の肌色、舌色などの色情報を用いた診断を行いやすくできる。

【0028】

ここで、カラーチャートの一例を、図を用いて説明する。
図１は、カラーチャートの一例の模式図である。
なお、図１のカラーチャートは、グレースケールであるが、実際のカラーチャートは、有彩色のパッチを含んでいる。
図１のカラーチャートは、縦約９０ｍｍ、横約５５ｍｍの長方形であり、その主面の上方の右上部（正面視した際の左上部）、及び下方の左下部（正面視した際の右下部）に、１０ｍｍ四方の自動認識用マーカ１１ａ、１１ｂが配されている。２つの自動認識用マーカ１１ａ、１１ｂは、黒地に白模様を有している。自動認識用マーカ１１ａの白模様と自動認識用マーカ１１ｂと白模様とは異なる。上方及び下方に挟まれた中央部には、１０ｍｍ四方の各パッチが６（Ａ〜Ｆ）行５（ａ〜ｅ）列で間隔を空けずに並んでいる。主面の最右列（第１列：正面視した際の最左列）には、無彩色のパッチが、明度順に並んでいる。
図１に示すカラーチャートの各パッチのＬ^＊ａ^＊ｂ^＊値を表１−１に示す。また、図１に示すカラーチャートの各パッチの色の概略を、表１−２に示す。また、第１パッチから第７パッチについて肌色、舌色との関係を表１−３に示す。

【0029】

【表1-1】

【0030】

【表1-2】

【0031】

【表1-3】

【0032】

以下に、本発明のカラーチャートを用いた画像表示システム、及び画像表示方法の一例を説明する。

【0033】

（画像表示システム、画像表示方法）
本発明に関する画像表示システムは、カラーチャートと、撮影手段と、表示手段とを少なくとも有し、更に必要に応じて、その他の手段を有する。
本発明に関する画像表示方法は、撮影工程と、表示工程とを少なくとも有し、更に必要に応じて、その他の工程を有する。
図２に画像表示システムの一例の構成図を示す。図２の画像表示システムは、カラーチャート１と、撮影手段２と、表示手段３とを有する。

【0034】

＜撮影手段、撮影工程＞
撮影手段は、カラーチャート及び撮影対象者を同時に撮影し、画像データを取得するための手段である。
撮影工程では、カラーチャート及び撮影対象者が同時に撮影され、画像データが取得される。
撮影工程は、例えば、撮影手段により行われる。
撮影対象者は、例えば、遠隔診療を受診する患者である。

【0035】

撮影手段としては、例えば、カメラ、カメラ機能付き電子機器などが挙げられる。
カメラ機能付き電子機器としては、例えば、携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、監視カメラ、医療診断装置に付帯するカメラシステム（例えば、ｆ−ＭＲＩに付帯するカメラシステム）などが挙げられる。なお、撮影手段としてのパーソナルコンピュータにおけるカメラは、内臓カメラであってもよいし、外付けのカメラであってもよい。
撮影手段が有する撮像素子としては、例えば、ＣＣＤ（電荷結合素子）、ＣＭＯＳ（相補性金属酸化膜半導体）などが挙げられる。

【0036】

撮影手段は、画像データを送信する送信部を有していることが好ましい。
送信部による画像データの送信は、無線通信で行われてもよいし、有線通信で行われてもよい。
無線送信としては、例えば、Ｗｉ−Ｆｉ、ＬＴＥ、５Ｇなど、使用可能な任意の方式の無線通信を利用することができる。

【0037】

撮影により得られる画像は、静止画像であってもよいし、動画であってもよい。

【0038】

＜表示手段、表示工程＞
表示手段は、画像データを受け取り、画像データを画像として表示部に表示するための手段であり、表示部を少なくとも有し、更に必要に応じて色補正部などのその他の部を有する。
表示工程では、画像データが受け取られ、画像データが画像として表示部に表示される。
表示工程では、更に色補正処理が行われてもよい。
表示工程は、例えば、表示手段により行われる。
図３に表示手段の一例の機能構成図を示す。図３の表示手段３は、表示部３ａと、色補正部３ｂとを有する。

【0039】

表示手段は、例えば、画像データを受信する受信部を有している。
画像データは、例えば、撮影手段から送信され、表示手段で受信される。画像データの送受信は、通常、インターネット回線を通じて行われる。

【0040】

画像データのファイル形式としては、特に限定されず、使用可能な任意の方式を利用することができ、例えば、静止画像であれば、ＪＰＧ（ＪＰＥＧ）、ＧＩＦ、ＰＮＧ、ＢＭＰなどが挙げられ、動画であれば、ＡＶＩ、ＱｕｉｃｋＴｉｍｅ、Ｍｐｅｇ−１、Ｍｐｅｇ−２、ＷＭＶ、ＦＬＶ、ＭＰＥＧ−４などが挙げられる。

【0041】

画像データの送信及び受信は、例えば、Ｅ−メール、ソーシャルネットワーキングサービスなどの通信サービスを用いて行うことができる。
また、画像データが動画である場合、送受信は、例えば、Ｓｋｙｐｅ、Ｚｏｏｍ、Ｍｉｃｒｏｓｏｆｔ Ｔｅａｍｓなどのｗｅｂ会議システムを用い、画像データに加えて、音声データを送受信してもよい。

【0042】

撮影手段から表示手段へ画像データを伝える方法は、クラウドを利用した、撮影手段からクラウドサーバへの画像データのアップロード、及びクラウドサーバから表示手段への画像データのダウンロードであってもよい。すなわち、表示手段は、クラウドサーバから画像データを受け取ってもよい。
また、撮影手段から表示手段へ画像データを伝える方法は、外部メモリを介した物理的な移動によって行われてもよい。例えば、撮影手段で取得された画像データがＵＳＢメモリなどの外部メモリに保存され、外部メモリが郵送などにより物理的に移動された後、外部メモリを表示手段に接続することで、表示手段は画像データを受け取ることができる。
更に、表示手段に、受け取った複数回の画像データが保存されることで、それら画像データを用いて、撮影対象者の経時変化の確認を行うこともできる。

【0043】

表示手段としては、特に限定されないが、例えば、携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータ、電子カルテシステムの出力端末などが挙げられる。

【0044】

表示手段としては、特に限定されないが、例えば、携帯電話、スマートフォン、タブレット端末、パーソナルコンピュータなどが挙げられる。

【0045】

＜＜色補正部、色補正処理＞＞
色補正部は、表示部に表示される画像におけるカラーチャート内の少なくとも一つのパッチの色が、表示部が置かれた場所の光源下において測定されるカラーチャート内の対応する少なくとも一つのパッチの色に近づく乃至は一致するように、表示部の表示色、及び画像データの色情報を補正するための部である。
色補正処理では、表示部に表示される画像におけるカラーチャート内の少なくとも一つのパッチの色が、表示部が置かれた場所の光源下において測定されるカラーチャート内の対応する少なくとも一つのパッチの色に近づく乃至は一致するように、表示部の表示色、及び画像データの色情報が補正される。
色補正処理は、例えば、色補正部により行われる。
色補正部は、例えば、色補正を行うプログラムを実行するＣＰＵである。
ここで、色補正によってどの程度色を近づけるかは、目的に応じて適宜選択すればよい。
このような色補正は、カラーチャート内のパッチの一つのみを用いて行ってもよいし、複数を用いて行ってもよい。

【0046】

色補正部は、例えば、第１補正部と、第２補正部とを有する。
第１補正部は、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色に、表示部の対応する表示色が近づく乃至は一致するように、表示部の表示色を補正するための部である。
第２補正部は、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色に、画像データのカラーチャート内の対応する少なくとも一つのパッチの色が近づく乃至は一致するように、画像データの色情報を補正するための部である。

【0047】

色補正処理は、例えば、第１補正処理と、第２補正処理とを有する。
第１補正処理では、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色に、表示部の対応する表示色が近づく乃至は一致するように、表示部の表示色が補正される。
第２補正処理では、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色に、画像データのカラーチャート内の対応する少なくとも一つのパッチの色が近づく乃至は一致するように、画像データの色情報が補正される。
第１補正処理は、例えば、第１補正部により行われる。
第２補正処理は、例えば、第２補正部により行われる。

【0048】

カラーチャート及び撮影対象者を同時に撮影する場合、撮影環境の違い、撮影手段の種類の違いなどにより、得られる画像データにおける色情報（例えば、ＲＧＢ値）は異なる。
撮影環境の違いとしては、例えば、室内での撮影の場合は、照明の光源の種類、照明の明るさなどが挙げられる。また、光源と、撮影対象（カラーチャート及び撮影対象者）との位置関係の違いも、得られる画像データにおける色情報に影響を与える。
撮影手段の種類の違いとしては、例えば、撮像素子の種類の違い、画像処理エンジンの違いなどが挙げられる。画像処理エンジンは、例えば、撮像素子から出力される生画像に処理を加え、人間が観察するのに適した画像に変換するシステムＬＳＩである。画像処理エンジンであるシステムＬＳＩは、例えば、組み込みＣＰＵ、組み込みＤＳＰ、顔検出などを行う専用演算回路、プログラムメモリ、データメモリ、画像メモリなどで構成される。
例えば、カラーチャートを撮影する場合、撮影手段としてのスマートフォンの種類の違い、室内照明の種類の違いなどにより、得られる画像データ毎にカラーチャートのパッチの色情報が異なる場合がある。そのため、それを同じ表示部で表示した場合でも、画像におけるカラーチャートのパッチの色は異なる場合がある。この違いは、遠隔診療に影響を与える場合がある。
また、カラーチャートを観察した場合に人が認識するカラーチャートのパッチの色は、観察する環境（例えば、光源）に依存する。これは、カラーチャートを照らす光の分光分布が、光源に依存するためである。そのため、光源が異なれば、カラーチャートを観察した際に認識又は測定されるカラーチャートのパッチの色は異なる。そのため、表示部にカラーチャートの各パッチの色のＲＧＢ値を正確に表示しても、表示部に表示されるカラーチャートの各パッチの色と、表示部が置かれた場所の光源下において人に認識されるカラーチャートの各パッチの色とは異なることがある。
そこで、前述の色補正部、及び色補正処理が有用になる。

【0049】

ここで、医師がカラーチャートを用いて患者の遠隔診療を行う場合の色補正の具体例について説明する。
色補正の目的は、医師が使用する表示部（例えば、ＰＣのディスプレイ）に表示される画像におけるカラーチャート（患者とともに撮影されたカラーチャート）の色を、正解値である医師の手元にあるカラーチャートの色（ある光源下において医師が認識するカラーチャートの色）に合わせることである。
色補正は、医師が使用するディスプレイの表示色の色補正（第１補正処理）、及び患者が撮影して得られた画像の色補正（第２補正処理）の順で行う。

【0050】

まず、第１補正処理の一例について説明する。
第１補正処理では、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色に、表示部の対応する表示色が近づく乃至は一致するように、表示部の表示色が補正される。
具体的には、まず、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色を測色する。次に、測色された色に近づく乃至は一致するように、ディスプレイの表示色を補正する。
人は、色を３刺激値ＸＹＺにより認識する。そのため、正解値のＸＹＺ値を、医師の照明環境と同様の照明環境下で、測色計により測定して求める。測色計としては、例えば、コニカミノルタ 色彩輝度計ＣＳ−１００Ａが用いられる。
ディスプレイの補正は、以下の非特許文献を参考にして、具体的には以下のように実施する。
Ｍａｔｓｕｓｈｉｔａ， Ｆ．， Ｋｉｙｏｍｉｔｓｕ， Ｋ．， Ｏｇａｗａ， Ｋ．， ＆ Ｔｓｕｍｕｒａ， Ｎ． （２０１９）． Ｅｖａｌｕａｔｉｏｎ ｏｆ Ｋａｍｐｏ ｄｉｓｅａｓｅ ｓｔａｔｅｓ ｕｓｉｎｇ ｆａｃｉａｌ ｉｍａｇｅｓ． Ａｒｔｉｆｉｃｉａｌ Ｌｉｆｅ ａｎｄ Ｒｏｂｏｔｉｃｓ， ２４（１）， ｐｐ．４４−５１

【0051】

輝度と入力されるＲＧＢレベルとの関係は、以下の式（１）で表される。

【数1】

ここで、Ｌ’_Ｒ，Ｌ’_Ｇ，及びＬ’_Ｂは、それぞれ、赤、緑、及び青の輝度であり、ａ_ｉ，ｂ_ｉ，及びｃ_ｉ（ｉ＝０、１、２）は係数である。

【0052】

ディスプレイの表示色の３刺激値Ｘ’，Ｙ’，及びＺ’は、次の式（２）に示すように、Ｒ，Ｇ，Ｂの寄与項に分解できる。

【数2】

ここで、Ｘ’_ｉ，Ｙ’_ｉ，及びＺ’_ｉ（ｉ＝Ｒ，Ｇ，Ｂ）は、それぞれ、赤、緑、及び青の発光に対する、３刺激値を示す。各発光に対応する３刺激値は、ディスプレイを測定した時の輝度Ｌ，色座標ｘ，ｙから計算できる。各発光についての、Ｘ−Ｙ，Ｙ−Ｚの関係は、次の式（３）のような線形方程式で表すことができる．

【数3】

ここで、ａ_ｉ，ｂ_ｉ，ｃ_ｉ，ｄ_ｉ（ｉ＝Ｒ，Ｇ，Ｂ）は係数である。
式（２）、及び式（３）から、次の式（４）が得られる。

【数4】

式（４）から、ある三刺激値Ｘ’Ｙ’Ｚ’をディスプレイに表示したいときの、ＲＧＢそれぞれの輝度は、式（５）によって求めることができる。

【数5】

式（５）のＸ’、Ｙ’、Ｚ’に、医師の照明環境と同様の照明環境下で、測色計により測定して求めた正解値であるカラーチャート内のパッチのＸＹＺ値を入れる。そして、式（５）によって、求めた輝度を、式（１）に当てはめることで、ＲＧＢ値（基準ＲＧＢ値）が算出できる。そして、カラーチャートのパッチの色（ＲＧＢ値）に対応するディスプレイの表示色（ＲＧＢ値）を、算出されたＲＧＢ値（基準ＲＧＢ値）に修正する。これにより、医師が使用するディスプレイの表示色の補正ができる。すなわち、上記手順により、ディスプレイの表示色を正解値に補正できる。

【0053】

次に、第２補正処理の一例について説明する。
第２補正処理では、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色に、画像データのカラーチャート内の対応する少なくとも一つのパッチの色が近づく乃至は一致するように、画像データの色情報が補正される。
具体的には、カラーチャート及び患者を撮影して得られた画像の画像データにおけるカラーチャートの少なくとも一つのパッチのＲＧＢ値を、第１処理補正で算出した、対応する基準ＲＧＢ値に補正する。
更に具体的には、撮影して得られた画像から、自動認識用マーカを使ってカラーチャートのそれぞれのパッチの部分を抽出し、それぞれのパッチについて、パッチ内の各画素のＲＧＢ値の平均値を求める。平均化された数字（ＲＧＢ値）と、対応する基準ＲＧＢ値との違いから、重回帰によってモデルを作成する。そのモデルに基づき、画像データの全画素を変換して、撮影された人の顔、舌などの色の補正を行う。
補正は、患者が撮影して得られた画像の画像データにおけるカラーチャートのパッチのＲＧＢ値と、対応する基準ＲＧＢ値との相関を調べることで行われる。
補正では、まず、撮影して得られた画像のカラーチャートのパッチにおける無彩色を利用して、画像データのガンマ補正を行う。次に、カラーチャートのパッチにおける全ての有彩色を利用して、画像データのＲＧＢ値の補正を行う。
ガンマ補正の詳細を説明する。まず、第１補正処理においてカラーチャートのパッチにおける無彩色部分を測色計で測色したときの輝度をもとに、撮影して得られた画像における当該無彩色部分のＲＧＢ値に対して、ガンマ補正を行う。同様に、これを基準ＲＧＢ値のグレースケール部分についても行う。
次に、ガンマ補正をＲＧＢ値それぞれに対して行う。Ｒの場合には式（６）のような形となる。

【数6】

Ｒ_ｃは、撮影して得られた画像のＲ値であり、Ｙは、カラーチャートのパッチにおける無彩色を測色計で測色した際の輝度である。カラーチャートの無彩色において、黒が０、白が１となるように白色の輝度値で正規化を行うことで、無彩色の明るさを０〜１の範囲になるように変換を行っている。このモデルによって任意のＲＧＢ値についてガンマの補正を行う。具体的には、式（６）の逆関数をそれぞれのＲＧＢ値に対してかけることで、ガンマを補正したＲＧＢ値を算出する。

【0054】

次に、ガンマの補正済みの各パッチの色に対して重回帰でモデルを構築する。Ｒの場合は式（７）となる。

【数7】

Ｒ’_ｃは、補正した画像のＲ値であり、Ｒ_ｒ，Ｇ_ｒ，及びＢ_ｒは、補正前のＲＧＢ値である。各パラメータ（ａ、ｂ、ｃ、ｄ）は、それぞれのパッチを用いた重回帰により求める。

【0055】

画像表示システムを用いた画像表示方法の一例を、図を用いて説明する。
図４は、画像表示方法の一例のフローチャートである。
まず、図５に示すように、撮影手段２であるスマートフォンを用いて、カラーチャート１と撮影対象者２１とを同時に撮影する（Ｓ１１）。
次に、撮影により得られた画像データを、撮影手段２から表示手段３に送信する（Ｓ１２）。
次に、撮影手段２から送信された画像データを表示手段３で受信する（Ｓ１３）。送受信は、例えば、Ｅ−メールに画像データを添付して行われる。
他方、表示部３ａの表示色の補正を行う（Ｓ１４）。具体的には、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色に、表示部の対応する表示色が近づく乃至は一致するように、表示部の表示色を補正する。この色補正は、色補正部３ｂが行う。
次に、画像データの補正を行う（Ｓ１５）。具体的には、表示部が置かれた場所の光源下において測定されるカラーチャート内の少なくとも一つのパッチの色に、画像データのカラーチャート内の対応する少なくとも一つのパッチの色が近づく乃至は一致するように、画像データの色情報を補正する（Ｓ１５）。この色補正は、色補正部３ｂが行う。色補正を行う際、画像中のカラーチャートの各パッチは、自動認識用マーカを用いて自動認識される。
最後に、図６に示すように、表示手段３であるＰＣの表示部３ａ（ディスプレイ）に補正された画像データを画像として表示する（Ｓ１６）。
以上により、画像表示方法の一例が行われる。なお、工程Ｓ１４は、工程Ｓ１３の後に行う必要はなく、工程Ｓ１４と他の工程とを行う順序は任意でよい。
更に、画像表示方法を用いた遠隔診療を行う場合には、図７に示すように、診断者である医師４が、撮影対象者２１である患者が持っているカラーチャート１と同じカラーチャート１を持ちながら、表示部３ａに表示された患者の顔の肌色や舌色を観察して、診断を行う。
この例では、色補正が行われているため、画像内の患者の顔の肌色は、色補正が行われない場合と比べて、対面診療を行ったと仮定した際の患者の顔の肌色に近い状態となっている。そのため、医師は、患者の肌色、舌色を望診する際、対面診療を行うのと近い状態で遠隔診療を行うことができる。
なお、本発明のカラーチャートは、上記のような色補正を行わない場合においても利用することができる。すなわち、本発明のカラーチャートは、人間の色順応の能力（色を対比し脳内で色の補正を行う能力）を利用して遠隔診療を行う場合にも利用できる。その場合、例えば、遠隔診療は、以下のように行うことができる。
医師は、手元にカラーチャートを持ちながら、患者から送られてきた画像（カラーチャートと患者とが同時に撮影された画像）をパーソナルコンピュータに表示させ、当該画像を見ながら患者の顔の肌色を観察して診断を行う。その際、医師は、手元のカラーチャートの色と、パーソナルコンピュータに表示された画像のカラーチャートとの色を対比し、それらの色の差を画像の患者の色に反映させることを脳内で行いながら、患者の顔の肌色を観察する。

【0056】

以下に参考例として、カラーチャートを用いた画像表示方法の一例の実施結果を挙げる。
図４に示すフローチャートに従って、画像表示を行った。
カラーチャートとして、図１に示すカラーチャートを用いた。
画像の色補正は、式（１）〜（７）を用いて、前述の方法で行った。
色補正を行うためのプログラムは、Ｐｙｔｈｏｎで作成した。
結果として、表示部に表示された画像の患者の顔の肌色は、対面診療を行ったと仮定した際の顔の肌色と同様であった。
１名の漢方医が、表示部に表示された画像を評価した。評価結果では、診療において信頼できる範囲の色補正がなされているとの意見が得られた。

【符号の説明】

【0057】

１ カラーチャート
２ 撮影手段
３ 表示手段
３ａ 表示部
４ 医師
１１ａ、１１ｂ 自動認識用マーカ
２１ 撮影対象者

【要約】      （修正有）

【課題】カラーチャート中のパッチを容易に自動認識することができる技術を提供する。
【解決手段】カラーチャート１は複数のパッチと、複数のパッチの少なくとも一つを自動認識するための自動認識用マーカ１１ａ，１１ｂとを有する。自動認識用マーカを有することにより、色補正を行う際の、画像データにおけるカラーチャートの各パッチを認識する作業を、自動で行うことができる。
【選択図】図１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】