▶ インターナショナル・ビジネス・マシーンズ・コーポレーションの特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公表特許公報(A)
(11)【公表番号】
(43)【公表日】2023-11-29
(54)【発明の名称】グラフベースの色記述生成
(51)【国際特許分類】
G06N 5/02 20230101AFI20231121BHJP
G06T 7/00 20170101ALI20231121BHJP
G06N 3/0895 20230101ALI20231121BHJP
【ＦＩ】
G06N5/02
G06T7/00 350C
G06N3/0895
【審査請求】未請求
【予備審査請求】未請求
(21)【出願番号】P 2023522843
(86)(22)【出願日】2021-11-16
(85)【翻訳文提出日】2023-04-13
(86)【国際出願番号】 IB2021060583
(87)【国際公開番号】W WO2022106986
(87)【国際公開日】2022-05-27
(31)【優先権主張番号】17/100,018
(32)【優先日】2020-11-20
(33)【優先権主張国・地域又は機関】US
(81)【指定国・地域】
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＳＭＡＬＬＴＡＬＫ
(71)【出願人】
【識別番号】390009531
【氏名又は名称】インターナショナル・ビジネス・マシーンズ・コーポレーション
【氏名又は名称原語表記】ＩＮＴＥＲＮＡＴＩＯＮＡＬ ＢＵＳＩＮＥＳＳ ＭＡＣＨＩＮＥＳ ＣＯＲＰＯＲＡＴＩＯＮ
【住所又は居所原語表記】Ｎｅｗ Ｏｒｃｈａｒｄ Ｒｏａｄ， Ａｒｍｏｎｋ， Ｎｅｗ Ｙｏｒｋ １０５０４， Ｕｎｉｔｅｄ Ｓｔａｔｅｓ ｏｆ Ａｍｅｒｉｃａ
(74)【代理人】
【識別番号】100112690
【弁理士】
【氏名又は名称】太佐 種一
(74)【代理人】
【識別番号】100120710
【弁理士】
【氏名又は名称】片岡 忠彦
(74)【復代理人】
【識別番号】110000316
【氏名又は名称】弁理士法人ピー・エス・ディ
(72)【発明者】
【氏名】ロヨラ、ホイフェマン、パブロ、サルバドル
(72)【発明者】
【氏名】ボンクルビサル、ジャヤコーン
【テーマコード（参考）】
5L096
【Ｆターム（参考）】
5L096AA02
5L096FA72
5L096GA51
5L096HA11
5L096JA03
5L096JA11
5L096KA04
(57)【要約】
自然言語による色についての記述を生成するための方法、システム、及びコンピュータプログラム製品が提示される。この方法は、タプルのリストを取得することと、タプルの各々をノードとして用い、ノード間の人間の知覚の観点での色差が所定範囲外にある場合にノード間にエッジを追加することによってグラフを生成することと、外部色比較記述に基づいてエッジをフィルタリングすることと、人間の知覚の観点での色差に基づいて最も近い近隣ノードを見つけ、新ノードと最も近い近隣ノードとの間に新しいエッジを追加することによって新ノードをグラフに組み込むことと、メッセージパッシングを用い、ノードの色を初期シードとして用いることによって、ノードの各々について特徴ベクトルを学習することと、学習された特徴ベクトルの各々をニューラルネットワークベースのデコーダの初期状態として使用することによって新ノードの記述を生成することとを含む。
【特許請求の範囲】
【請求項1】
自然言語による色についての記述を生成するためのコンピュータ実装方法であって、タプルの各々が色及び記述を含む、タプルのリストを取得することと、
前記タプルの各々をノードとして用い、前記ノード間の人間の知覚の観点での色差が所定範囲外にある場合に前記ノード間にエッジを追加することによってグラフを生成することと、
外部色比較データベースに格納された外部色比較記述に基づいて前記エッジをフィルタリングすることと、
人間の知覚の観点での色差に基づいて最も近い近隣ノードを見つけ、新ノードと前記最も近い近隣ノードとの間に新しいエッジを追加することによって前記新ノードを前記グラフに組み込むことであって、前記新ノードは前記タプルのリストに含まれていない新しい色を含み、記述を有しない、組み込むことと、
メッセージパッシングを用い、前記ノードの色を初期シードとして用いることによって、前記グラフ内の前記ノードの各々について特徴ベクトルを学習することと、
学習された前記特徴ベクトルの各々を半教師あり方式でリカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダの初期状態として使用することによって前記新ノードの記述を生成することと、
を含むコンピュータ実装方法。
【請求項2】
前記エッジをフィルタリングすることは、前記グラフから冗長又は実現不可能なエッジを除去することを含む、請求項１に記載のコンピュータ実装方法。
【請求項3】
前記人間の知覚の観点での色差は、メトリックであるデルタＥによって提供される、請求項１に記載のコンピュータ実装方法。
【請求項4】
２つの色の間のデルタＥが１１と４９との間である場合、前記２つの色の間にエッジが生成される、請求項３に記載のコンピュータ実装方法。
【請求項5】
前記新ノードが前記グラフに追加された後、ラベル付きノードのセットからラベルなしノードのセットまで前記エッジからのコンテキスト情報を用いて前記新ノードのための記述を学習する、請求項１に記載のコンピュータ実装方法。
【請求項6】
前記ＲＮＮにおける損失が、前記グラフのラベル付き部分に対して計算される、請求項１に記載のコンピュータ実装方法。
【請求項7】
前記新ノードは、ラベルなしノードとして定義される、請求項１に記載のコンピュータ実装方法。
【請求項8】
自然言語による色についての記述を生成するためのコンピュータ実装方法であって、タプルの各々が色及び記述を含む、タプルのリストを得ることと、
前記タプルの各々をノードとして用い、類似度閾値に基づいて前記ノード間にエッジを追加することによってグラフを生成することと、
外部色比較データベースに格納された外部色比較記述に基づいて前記エッジをフィルタリングすることと、
前記類似度閾値に基づいて最も近い近隣ノードを見つけ、新ノードと前記最も近い近隣ノードとの間に新しいエッジを追加することによって前記新ノードを前記グラフに組み込むことと、
を含むコンピュータ実装方法。
【請求項9】
前記新ノードは、前記タプルのリストに含まれていない新しい色を含み、記述を有しない、請求項８に記載のコンピュータ実装方法。
【請求項10】
前記グラフ内の前記ノードの各々について特徴ベクトルを学習することをさらに含む、請求項９に記載のコンピュータ実装方法。
【請求項11】
前記特徴ベクトルは、メッセージパッシングを用い、前記ノードの色を初期シードとして用いることによって学習される、請求項１０に記載のコンピュータ実装方法。
【請求項12】
学習された前記特徴ベクトルの各々を初期状態として指定することによって、前記新ノードの記述を生成することをさらに含む、請求項１１に記載のコンピュータ実装方法。
【請求項13】
前記初期状態が、半教師あり方式でリカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダに与えられる、請求項１２に記載のコンピュータ実装方法。
【請求項14】
前記類似度閾値は、所定範囲外にある前記ノード間の人間の知覚の観点での色差である、請求項１３に記載のコンピュータ実装方法。
【請求項15】
前記人間の知覚の観点での色差は、メトリックであるデルタＥによって提供される、請求項１４に記載のコンピュータ実装方法。
【請求項16】
２つの色の間のデルタＥが１１と４９との間である場合、前記２つの色の間にエッジが生成される、請求項１５に記載のコンピュータ実装方法。
【請求項17】
前記ＲＮＮにおける損失が、前記グラフのラベル付き部分に対して計算される、請求項１６に記載のコンピュータ実装方法。
【請求項18】
前記エッジをフィルタリングすることは、前記グラフから冗長又は実現不可能なエッジを除去することを含む、請求項８に記載のコンピュータ実装方法。
【請求項19】
前記新ノードが前記グラフに追加された後、ラベル付きノードのセットからラベルなしノードのセットまで前記エッジからのコンテキスト情報を用いて前記新ノードのための記述を学習する、請求項８に記載のコンピュータ実装方法。
【請求項20】
自然言語による色についての記述を生成するためのコンピュータプログラム製品であって、プログラム命令をその中に具現化したコンピュータ可読記憶媒体を含み、前記プログラム命令は、コンピュータによって実行可能であり、前記コンピュータに、タプルの各々が色及び記述を含む、タプルのリストを取得することと、
前記タプルの各々をノードとして用い、前記ノード間の人間の知覚の観点での色差が所定範囲外にある場合に前記ノード間にエッジを追加することによってグラフを生成することと、
外部色比較データベースに格納された外部色比較記述に基づいて前記エッジをフィルタリングすることと、
人間の知覚の観点での色差に基づいて最も近い近隣ノードを見つけ、新ノードと前記最も近い近隣ノードとの間に新しいエッジを追加することによって前記新ノードを前記グラフに組み込むことであって、前記新ノードは前記タプルのリストに含まれていない新しい色を含み、記述を有しない、組み込むことと、
メッセージパッシングを用い、前記ノードの色を初期シードとして用いることによって、前記グラフ内の前記ノードの各々について特徴ベクトルを学習することと、
学習された前記特徴ベクトルの各々を半教師あり方式でリカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダの初期状態として使用することによって前記新ノードの記述を生成することと、
を行わせる、コンピュータプログラム製品。
【請求項21】
前記新ノードが前記グラフに追加された後、ラベル付きノードのセットからラベルなしノードのセットまで前記エッジからのコンテキスト情報を用いて前記新ノードのための記述を学習する、請求項２０に記載のコンピュータプログラム製品。
【請求項22】
自然言語による色についての記述を生成するためのコンピュータプログラム製品であって、プログラム命令をその中に具現化したコンピュータ可読記憶媒体を含み、前記プログラム命令は、コンピュータによって実行可能であり、前記コンピュータに、タプルの各々が色及び記述を含む、タプルのリストを得ることと、
前記タプルの各々をノードとして用い、類似度閾値に基づいて前記ノード間にエッジを追加することによってグラフを生成することと、
外部色比較データベースに格納された外部色比較記述に基づいて前記エッジをフィルタリングすることと、
前記類似度閾値に基づいて最も近い近隣ノードを見つけ、新ノードと前記最も近い近隣ノードとの間に新しいエッジを追加することによって前記新ノードを前記グラフに組み込むことと、
を行わせる、コンピュータプログラム製品。
【請求項23】
前記グラフ内の前記ノードの各々について特徴ベクトルが学習され、前記特徴ベクトルは、メッセージパッシングを用い、前記ノードの色を初期シードとして用いることによって学習される、請求項２２に記載のコンピュータプログラム製品。
【請求項24】
学習された前記特徴ベクトルの各々を半教師あり方式でリカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダに与えられる初期状態として指定することによって、前記新ノードの記述が生成される請求項２３に記載のコンピュータプログラム製品。
【請求項25】
自然言語による色についての記述を生成するためのコンピュータ実装方法であって、複数のノードとエッジとを含む、色の関係を構造化するグラフを生成することと、
色比較記述に基づいて冗長エッジを除去することと、
類似度閾値に基づいて、新ノードを新エッジと共に前記グラフに組み込むことと、
前記グラフの各ノードについて特徴ベクトルを学習することと、
前記特徴ベクトルを使用して前記新ノードの記述を生成することであって、前記特徴ベクトルは半教師あり様式でニューラルネットワークに与えられる、生成することと、
を含むコンピュータ実装方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、一般にカラーネーミングに関するものであり、より具体的には、グラフベースの色記述の生成に関するものである。
【背景技術】
【0002】
色は主要な視覚的キューの１つであり、色の物理学及び精神物理学から始まり、実用的課題における色の原理の使用まで、多様なレベルで広範囲に研究されてきた。その中には、正確なレンダリング、表示及び再現、画像フィルタリング、符号化、検索、その他の科学的視覚化、コンピュータグラフィックス、画像及び映像処理における数多くの応用が含まれる。興味深いことに、カラーネーミングは最も一般的な視覚タスクの１つであるにもかかわらず、工学界ではあまり注目されていなかった。しかし、視覚技術及びマルチメディアが急速に発展し、高度なユーザインターフェース及び人間と機械との対話が発達した今日、個々の色の名称を命名し、特定の色のオブジェクトを指し示し、色構成の印象を伝える能力は、ますます重要なタスクになっている。カラーキューは、対話式の視覚化及びコンピュータグラフィックスに利用することができる。カラーネーミングは、自然なユーザインターフェースの設計を容易にする。高次の色記述子は画像コンテンツへのリンクを提供することが多いので、そうした高次の色記述子の抽出は画像解析及びコンピュータビジョンにおける挑戦的な課題である。画像のセグメント化と組み合わせたときに、カラーネーミングを、色によるオブジェクトの選択、画像の外観の記述、さらには意味論的注釈の生成に利用できるようにすることは有利である。
【発明の概要】
【0003】
第１の態様によれば、本発明は、自然言語による色についての記述を生成するための方法を提供する。この方法は、タプルの各々が色及び記述を含む、タプルのリストを取得することと、タプルの各々をノードとして用い、ノード間の人間の知覚の観点での色差が所定範囲外にある場合にノード間にエッジを追加することによってグラフを生成することと、外部色比較データベースに格納された外部色比較記述に基づいてエッジをフィルタリングすることと、人間の知覚の観点での色差に基づいて最も近い近隣ノードを見つけ、新ノードと最も近い近隣ノードとの間に新しいエッジを追加することによって新ノードをグラフに組み込むことであって、新ノードはタプルのリストに含まれていない新しい色を含み、記述を有しない、組み込むことと、メッセージパッシングを用い、ノードの色を初期シードとして用いることによって、グラフ内のノードの各々について特徴ベクトルを学習することと、学習された特徴ベクトルの各々を半教師あり方式でリカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダの初期状態として使用することによって新ノードの記述を生成することと、を含む。
【0004】
別の態様によれば、本発明は、自然言語による色についての記述を生成するための方法を提供する。この方法は、タプルの各々が色及び記述を含む、タプルのリストを得ることと、タプルの各々をノードとして用い、類似度閾値に基づいてノード間にエッジを追加することによってグラフを生成することと、外部色比較データベースに格納された外部色比較記述に基づいてエッジをフィルタリングすることと、類似度閾値に基づいて最も近い近隣ノードを見つけ、新ノードと最も近い近隣ノードとの間に新しいエッジを追加することによって新ノードをグラフに組み込むことと、を含む。
【0005】
自然言語による色についての記述を生成するためのコンピュータプログラム製品が提示され、このコンピュータプログラム製品は、プログラム命令をその中に具現化したコンピュータ可読記憶媒体を含み、プログラム命令は、コンピュータによって実行可能であり、コンピュータに、タプルの各々が色及び記述を含む、タプルのリストを取得することと、タプルの各々をノードとして用い、ノード間の人間の知覚の観点での色差が所定範囲外にある場合にノード間にエッジを追加することによってグラフを生成することと、外部色比較データベースに格納された外部色比較記述に基づいてエッジをフィルタリングすることと、人間の知覚の観点での色差に基づいて最も近い近隣ノードを見つけ、新ノードと最も近い近隣ノードとの間に新しいエッジを追加することによって新ノードをグラフに組み込むことであって、新ノードはタプルのリストに含まれていない新しい色を含み、記述を有しない、組み込むことと、メッセージパッシングを用い、ノードの色を初期シードとして用いることによって、グラフ内のノードの各々について特徴ベクトルを学習することと、学習された特徴ベクトルの各々を半教師あり方式でリカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダの初期状態として使用することによって新ノードの記述を生成することと、を行わせる。
【0006】
自然言語による色についての記述を生成するためのコンピュータプログラム製品が提示され、このコンピュータプログラム製品は、プログラム命令をその中に具現化したコンピュータ可読記憶媒体を含み、プログラム命令は、コンピュータによって実行可能であり、コンピュータに、タプルの各々が色及び記述を含む、タプルのリストを得ることと、タプルの各々をノードとして用い、類似度閾値に基づいてノード間にエッジを追加することによってグラフを生成することと、外部色比較データベースに格納された外部色比較記述に基づいてエッジをフィルタリングすることと、類似度閾値に基づいて最も近い近隣ノードを見つけ、新ノードと最も近い近隣ノードとの間に新しいエッジを追加することによって新ノードをグラフに組み込むことと、を行わせる。
【0007】
さらに別の実施形態によれば、自然言語による色についての記述を生成するための方法が提供される。この方法は、複数のノードとエッジとを含む、色の関係を構造化するグラフを生成することと、色比較記述に基づいて冗長エッジを除去することと、類似度閾値に基づいて、新ノードを新エッジと共にグラフに組み込むことと、グラフの各ノードについて特徴ベクトルを学習することと、特徴ベクトルを使用して新ノードの記述を生成することであって、特徴ベクトルは半教師あり様式でニューラルネットワークに与えられる、生成することと、を含む。
【0008】
例示的な実施形態は、異なる主題を参照して説明されていることに留意されたい。特に、いくつかの実施形態は、方法タイプの請求項を参照して説明されているのに対し、他の実施形態は、装置タイプの請求項を参照して説明されている。しかしながら、当業者は、上記及び以下の説明から、特段の断りのない限り、１つのタイプの主題に属する特徴のあらゆる組み合わせに加えて、異なる主題に関連する特徴間のあらゆる組み合わせ、特に、方法タイプの請求項の特徴と装置タイプの請求項の特徴との間のあらゆる組み合わせも、本文書内に記載されるとみなされることを推測するであろう。
【0009】
これら及び他の特徴及び利点は、添付の図面と関連して読まれる、その例示的な実施形態の以下の詳細な説明から明らかになるであろう。
【図面の簡単な説明】
【0010】
本発明は、以下の図面を参照しながら、以下の好ましい実施形態の説明において詳細を提供する。
【0011】
【図1】本発明の一実施形態による、コンテキスト色グラフ生成を説明する例示的な図である。
【図2】本発明の一実施形態による、エッジ・フィルタリングを説明する例示的な図である。
【図3】本発明の一実施形態による、ラベルなしノード追加を説明する例示的な図である。
【図4】本発明の一実施形態による、色ベースのノード特徴学習を説明する例示的な図である。
【図5】本発明の一実施形態による、記述生成を説明する例示的な図である。
【図6】本発明の一実施形態による、コンテキスト色グラフ生成のための例示的な方法のブロック／フロー図である。
【図7】本発明の一実施形態による、エッジ・フィルタリングのための例示的な方法のブロック／フロー図である。
【図8】本発明の一実施形態による、ラベルなしノード追加の例示的な方法のブロック／フロー図である。
【図9】本発明の一実施形態による、色ベースのノード特徴学習のための例示的な方法のブロック／フロー図である。
【図10】本発明の一実施形態による、記述生成のための例示的な方法のブロック／フロー図である。
【図11】本発明の一実施形態による、訓練セットをグラフとして構造化して、半教師あり方式で記述生成を実行するための例示的な方法のブロック／フロー図である。
【図12】本発明の一実施形態による、例示的なクラウド・コンピューティング環境のブロック／フロー図である。
【図13】本発明の一実施形態による、例示的な抽象化モデル層の模式図である。
【0012】
図面を通じて、同一又は類似の参照数字は、同一又は類似の要素を表している。
【発明を実施するための形態】
【0013】
本発明による例示的な実施形態は、自然言語による色についての記述を生成することを提供する。カラーグラウンディング（color grounding）タスクは、言語と色知覚との間の関係を特徴付けることを可能にする。言語と色との間のマッピングを学習することは、人間の表現の創発のいくつかの側面を理解するために重要である。カラーグラウンディングの応用は、例えば、世論（非構造的、抽象的）を予測し、その世論をブランディングのサポートやユーザの反応の推測などに利用するための、広告もしくはマーケティング又はその両方に関連する。カラーグラウンディングにおけるタスクは、自然言語による色についての記述を生成することを学習することである。本発明の例示的な実施形態は、訓練セットをグラフとして構成し、半教師あり方式で記述生成を実行する。
【0014】
色空間は明確な色指定を可能にするが、日常生活では色は主にその名称で識別されている。色を名称で識別することは、かなりの一般的な色の語彙を必要とし、かつ正確性には欠けるが、誰もが理解できるコミュニケーション方法である。そこで、色名を選択するための語彙、構文、及び標準法を設計しようという、いくつもの試みが行われた。当業者に知られているマンセル表色系は、色の正確な仕様を必要とする用途で広く用いられている。例として、塗料、テキスタイルなどの製造が挙げられる。マンセル表色系は、１，２００色の精密に制御された色見本（チップ）を含むマンセル・カラー・ブックによって補完され、業界標準として使用されることが多い。チップは、チップ間の単位段階が知覚的に等しくなるように配置されている。各チップは３つのコードで識別される。明度スケールは、黒を０／、白を１０／とするマンセル値で表される。マンセル彩度は、２段階ずつ高くなる（／２、／４、・・・、／１０）。色相スケールは、赤（Ｒ）、黄赤（ＹＲ）、黄（Ｙ）、黄緑（ＧＹ）、緑（Ｇ）、青緑（ＢＧ）、青（Ｂ）、紫青（ＰＢ）、紫（Ｐ）、赤紫（ＲＰ）の１０色相に分けられ、各色相はさらに１０セクションに分けることができる。しかし、マンセル系による色ベース処理の１つの顕著な欠点は、任意の色空間からマンセルへの正確な変換ができないことである。例えば、他者によって提案された変換はかなり複雑であり、ＣＩＥ ＸＹＺの特定領域では不正確なこともある。
【0015】
色の命名に使われる３０００以上の英単語及び語句を列挙した最初のリストは、Ｍａｅｒｚ及びＰａｕｌによって考案され、Ｄｉｃｔｉｏｎａｒｙ ｏｆ ｃｏｌｏｒｓとして出版された。さらに詳細なものは、米国国立標準局（Ｔｈｅ Ｎａｔｉｏｎａｌ Ｂｕｒｅａｕ ｏｆ Ｓｔａｎｄａｒｄｓ）が発行した辞書である。これは、生物学、地質学、切手収集、テキスタイル、染料、及び塗料産業など特定の分野で一般的に使われるようになった約７５００の様々な名称を収録したものである。どちらの辞書も、珍しい言葉又は難解な言葉の例を含んでおり、用語が非系統的に列挙されているため、一般的な使用には適さない。
【0016】
米国国立標準局は、色空間内の２６７領域の色名を収録したＩＳＣＣ－ＮＢＳ色名辞書を策定した。この辞書は、英語の用語を使用して、色空間の色相、明度、飽和度の３つの次元に沿って色を記述する。ＩＳＣＣ－ＮＢＳモデルの１つの問題点は、体系的な構文がないことである。このことに対処して、新しいカラーネーミングシステム（Ｃｏｌｏｒ－Ｎａｍｉｎｇ Ｓｙｓｔｅｍ、ＣＮＳ）が設計された。ＣＮＳは、ＩＳＣＣ－ＮＢＳモデルを部分的にベースにしている。ＣＮＳは同じ３つの次元を使用しているが、これらの次元の単語を組み合わせるために使用される規則は形式的構文で定義されている。ＣＮＳモデルを拡張したＣｏｌｏｒ－Ｎａｍｉｎｇ Ｍｅｔｈｏｄ（ＣＮＭ）と呼ばれるモデルは、ＣＮＳモデルで記述される構文と同様の構文を使用し、ＣＮＭの色名をマンセル系の色範囲にマッピングする。前述の方法はいずれもマンセルモデルと密接な関係があり、したがって、マンセル色空間内で各名称をどのように位置づけるかの説明を提供するものである。
【0017】
しかしながら、これらの方法を用いて、色見本に色名を付し、命名された色の例を示し、シーンの色領域及びオブジェクトを記述し、最終的に画像の色構成を伝える方法は明白ではない。
【0018】
本発明の例示的な実施形態は、そうした問題をグラフベースの色記述機構又は構造を生成することによって軽減する方法及びシステムを開示する。訓練セットは、グラフとして構造化され、半教師あり方式で記述生成を実行する。本発明の例示的な実施形態は、色表現のグローバルな知覚を組み込んだコンテキスト情報を使用する。人間の知覚の使用により、より現実的な色関係が可能になり、グラフベースの表現により、近隣のノードが情報／コンテキストを共有することが可能になり、コンテキスト情報は、完全一致が満たされない場合に、より多くの色と言語との関連付けの発見に潜在的につながる有用な多様性を提供する。さらに、本発明の例示的な実施形態に鑑みて、標準モデルと比較して、記憶に関する問題がより少なくなる。
【0019】
本発明は、所与の例示的アーキテクチャの観点から説明されるが、他のアーキテクチャ、構造、基板材料、及びプロセスの特徴並びにステップ／ブロックは、本発明の範囲内で変化させることができることが理解されるであろう。明確化のために、特定の特徴をすべての図に示すことができないことに留意されたい。これは、いずれかの特定の実施形態、又は図示、又は特許請求の範囲の限定として解釈されることを意図していない。
【0020】
本発明の様々な例示的な実施形態を以下に説明する。明確にするために、実際の実装のすべての特徴を本明細書で説明するわけではない。もちろん、そのような実際の実施形態の開発において、開発者の特定の目標を達成するためには、システム関連及びビジネス関連の制約への準拠など多くの実装固有の決定を行わなければならず、それは実装ごとに異なるであろうことは理解されよう。さらに、そのような開発努力は複雑で時間がかかるかもしれないが、それにもかかわらず、本発明の利益を有する当業者にとっては日常的な仕事であろうことが理解されよう。
【0021】
図１は、本発明の一実施形態による、コンテキスト色グラフ生成を説明する例示的な図である。
【0022】
コンテキスト色グラフ生成１０に関して、データ１２は、類似度閾値ｔに基づいてグラフとして構造化される。閾値ｔは、人間が色差をどのように知覚するかを説明するメトリックであるデルタＥ（ＲＧＢ空間内の距離は線形に知覚されないので有用なメトリックである）に基づいて定義される。具体的には、２つの色の間のデルタＥ値が１１と４９との間である場合、例示的な方法はリンクを生成する。デルタＥ値がその範囲外である場合（似すぎている、ほとんど同じ、又は遠すぎる）、例示的な方法はエッジを追加しない。
【0023】
コンテキスト色グラフは、１つの非限定的な例において、第１の色２０、第２の色２２、第３の色２４、第４の色２６、第５の色２８、第６の色３０、及び第７の色３２を含むことができる。第１の色２０は、エッジ１１を介して第２の色２２に接続されている。第２の色２２は、エッジ１３を介して第３の色２４に接続されている。第３の色２４は、エッジ１７を介して第４の色２６に接続されている。第１の色２０は、エッジ１５を介して第４の色２６に接続されている。第３の色２４は、エッジ１９を介して第５の色２８に接続されている。第４の色２６は、エッジ２１を介して第５の色２８に接続されている。第４の色２６は、エッジ２３を介して第６の色３０に接続されている。第５の色２８は、エッジ２５を介して第６の色３０に接続されている。第５の色２８は、エッジ２７を介して第７の色３２に接続されている。
【0024】
データ１２は、（色，記述）のタプル（ｃｉ，ｄｉ）のリストＴとして指定することができ、ここでｃｉはＲＧＢタプルで表された色であり、ｄｉはトークンのシーケンスである。
【0025】
グラフＧは次のように与えることができる。
【数1】
【0026】
デルタＥ（又はｄＥ）は、２つの色の間の「距離」を表す単一の数である。その考え方は、１．０のｄＥが人間の目で見ることができる最小の色差であるというものである。つまり、１．０より小さいｄＥはいずれも知覚できず、１．０より大きいｄＥは当然、気づくことができるということになる。しかしながら、色差によっては１より大きくても完全に許容できる場合もあり、それどころか気づかない場合もあり得る。また、同じｄＥの色差でも、２種類の黄色の間の色差と２種類の青色の間の色差が、目には同じ差に見えないこともあり、また、別の場所では、観察者の目には違うように見えることもある。
【0027】
デルタＥレベルは、表示色と入力コンテンツの元の色標準との差である。デルタＥの数値が低いほど精度が高いことを示し、デルタＥの数値が高いほどミスマッチが大きいことを示している。デルタＥの「Ｅ」は、ドイツ語で「感覚」を意味する「Ｅｍｐｆｉｎｄｕｎｇ」を表す。全体として、デルタＥという用語は、感覚における違いを意味する。例示的な実施形態は、新しい色の定義を支援するためのグラフベースの方法を作成又は生成する。
【0028】
図２は、本発明の一実施形態による、エッジ・フィルタリングを説明する例示的な図である。
【0029】
エッジ・フィルタリングに関して、外部データ色比較データベース３５の外部データを用いて、冗長又は実現不可能なエッジを除去する。色比較データ４０が使用される。色比較データは、非限定的な一例において、いくつかの異なる色４１～４８を含むことができる。各エッジについて、（ソース、ターゲット）ペアがデータセット内のいずれかのペアに近い場合、そのエッジは保持又は維持される。そうでない場合、エッジは削除される。これにより、より滑らかな遷移を得る（例えば、急激な色の変化を避ける）ことができ、そのことが最終的に学習を容易にする。エッジの除去の結果、コンテキスト色グラフ１０’が得られる。このグラフ１０’では、３つのエッジが除去されている。除去された第１のエッジは、５０で示され、第１の色２０と第４の色２６との間に位置していた。除去された第２のエッジは、５２で示され、第３の色２４と第５の色２８との間に位置していた。除去された第３のエッジは、５４で示され、第４の色２６と第５の色２８との間に位置していた。このように、外部データに基づいて、これら３つのエッジが冗長又は実現不可能なエッジであると判断された。外部データは、比較色データのみを格納するためのカスタムデータベースである、外部データ色比較データベース３５に格納されていることに留意されたい。
【0030】
図３は、本発明の一実施形態による、ラベルなしノードの追加を説明する例示的な図である。
【0031】
ラベルなしノードの追加に関して、未見色（unseen color）が与えられると、ラベルなしノード（記述を持たない、色のみ）として表される。未見色６２は、色差の観点で最も近い近隣を見つけることによって、主グラフ６０に組み込まれる。この処理にも人間の知覚のメトリックであるデルタＥを閾値として用いる（図１のコンテキスト色グラフ生成に関して上述したのと同じ構成）。ノード６２がグラフ６０に追加された後、ゴールは、ラベル付きノードのセットからラベルなしノードまでエッジが提供するコンテキスト情報を使用し、それによりｃｕのための記述ｄｕを学習することである。新ノード６２は、エッジ６１及び６３を有する。エッジ６１は、新ノード６２を第５の色２８に接続又はリンクし、エッジ６３は、新ノード６２を第７のノード３２に接続又はリンクする。したがって、ノード６２の色は、色２８、３２に類似している又は近い。
【0032】
【0033】
色ベースのノード特徴学習に関して、色を初期シードとして用い、メッセージパッシング・アルゴリズムを用いて、すべてのノードについて特徴ベクトルを学習する。これにより、得られた各ベクトルは、各色とその周囲の近隣との関係を符号化する。
【0034】
具体的には、５つの色が示されている。したがって、５つのベクトルが生成される。例えば、第４の色２６は特徴ベクトル７２を有し、第５の色２８は特徴ベクトル７６を有し、第６の色３０は特徴ベクトル７４を有し、第７の色３２は特徴ベクトル７８を有し、新ノード６２は特徴ベクトル８０を有する。色２８、３２と色３０、３２と色２６、３０との間の矢印は、異なる色の間で展開される関係を示す。
【0035】
メッセージパッシング・アルゴリズム（ＭＰＡ）は、符号のグラフィカルモデルにおいて動作する確率伝搬アルゴリズムの一種であることに留意されたい。ＭＰＡは、変数ノードとチェックノードとの間で、結果に到達するか又は処理が停止するまで繰り返しメッセージが行き来するので、反復アルゴリズムとしても知られている。
【0036】
【0037】
記述生成に関して、学習されたベクトルは半教師あり設定で使用される。各ベクトルは、リカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダ９２、９４、９６に渡され、生成のためのその初期シードとして機能する。ＲＮＮにおける損失が、グラフのラベル付き部分に対して計算される。したがって、学習は、関係するすべての表現（ラベル付き及びラベルなしの両方）に影響を与える。さらに、新ノード６２の特徴ベクトル８０は、デコーダ９２、９４、９６を通過して、重みｗ１、ｗ２、ｗ３を生成する。
【0038】
図６は、本発明の一実施形態による、コンテキスト色グラフ生成のための例示的な方法のブロック／フロー図である。
【0039】
ブロック１１０において、データは類似度閾値に基づくグラフとして構造化され、類似度閾値はデルタＥ（人間が色差をどのように知覚するかを説明するメトリック）に基づいて定義される。
【0040】
ブロック１１２において、２つの色に関するデルタＥ値が１１と４９との間であるか否かが判断される。ＹＥＳの場合、プロセスはブロック１１４に進む。ＮＯの場合、プロセスはブロック１１６に進む。
【0041】
ブロック１１４において、２つの色の間にリンクが生成される。
【0042】
ブロック１１８において、コンテキスト色グラフ生成の後、エッジ・フィルタリングが開始される。
【0043】
ブロック１１６において、デルタＥ値が１１と４９との間でない場合、２つの色の間に接続は定義されない。
【0044】
図７は、本発明の一実施形態による、エッジ・フィルタリングのための例示的な方法のブロック／フロー図である。
【0045】
ブロック１２０において、図６を参照して説明したように、コンテキスト色グラフが生成される。
【0046】
ブロック１２２において、少なくとも色比較データを含む外部データを使用して、エッジ・フィルタリング処理を開始する。
【0047】
ブロック１２４において、（ソース、ターゲット）ペアが、色比較データ内のいずかのペアに近いか否かが判断される。ＹＥＳの場合、プロセスはブロック１２６に進む。ＮＯの場合、プロセスはブロック１２８に進む。
【0048】
ブロック１２６において、エッジが維持又は保持される。
【0049】
ブロック１２９において、エッジ・フィルタリングが行われた後、ラベルなしノード追加が行われる。
【0050】
ブロック１２８において、そのペアが色比較データ内のいずれのペアにも近くない場合、エッジが除去される。
【0051】
図８は、本発明の一実施形態による、ラベルなしノード追加の例示的な方法のブロック／フロー図である。
【0052】
ブロック１２０において、図６を参照して説明したように、コンテキスト色グラフが生成される。
【0053】
ブロック１１８において、図７を参照して説明したように、エッジ・フィルタリングが実行される。
【0054】
ブロック１３０において、未見色が、ラベルなしノード（記述なし）として表現される。
【0055】
ブロック１３２において、色差の観点から最も近い近隣を見つけることによって、未見色が（ノードとして）主グラフに組み込まれる。
【0056】
ブロック１３４において、ラベルなしノード追加を行った後、色ベースのノード特徴学習が行われる。
【0057】
図９は、本発明の一実施形態による、色ベースのノード特徴学習のための例示的な方法のブロック／フロー図である。
【0058】
ブロック１２０において、図６を参照して説明したように、コンテキスト色グラフが生成される。
【0059】
ブロック１１８において、図７を参照して説明したように、エッジ・フィルタリングが実行される。
【0060】
ブロック１２９において、図８を参照して説明したように、コンテキスト色グラフへのラベルなしノード追加が実行される。
【0061】
ブロック１４０において、メッセージパッシング・アルゴリズムを使用して、すべてのノードについて特徴ベクトルを学習して、各色とその周囲の近隣との関係を符号化する。
【0062】
ブロック１４２において、色ベースのノード特徴学習を行った後、記述生成が行われる。
【0063】
図１０は、本発明の一実施形態による、記述生成のための例示的な方法のブロック／フロー図である。
【0064】
ブロック１２０において、図６を参照して説明したように、コンテキスト色グラフが生成される。
【0065】
ブロック１１８において、図７を参照して説明したように、エッジ・フィルタリングが実行される。
【0066】
ブロック１２９において、図８を参照して説明したように、コンテキスト色グラフへのラベルなしノード追加が実行される。
【0067】
ブロック１４０において、図９を参照して説明したように、コンテキスト色グラフのすべてのノードについて特徴ベクトルが学習される。
【0068】
ブロック１５０において、学習されたベクトルは、記述生成のために、半教師あり設定で使用される（各ベクトルは、ＲＮＮベースのデコーダに渡され、生成のための初期シードとして機能する）。
【0069】
ブロック１５２において、色－言語マッピングが表形式に組み込まれ、コンピューティング・デバイスに表示される。
【0070】
図１１は、本発明の一実施形態による、訓練セットをグラフとして構造化して、半教師あり方式で記述生成を実行する例示的な方法のブロック／フロー図である。
【0071】
ブロック２１０において、タプルの各々が色及び記述を含む、タプルのリストを取得する。
【0072】
ブロック２２０において、タプルの各々をノードとして用い、ノード間の人間の知覚の観点での色差が所定範囲外にある場合にノード間にエッジを追加することによって、グラフを生成する。
【0073】
ブロック２３０において、外部データベースに格納された外部色比較記述に基づいてエッジをフィルタリングする。
【0074】
ブロック２４０において、人間の知覚の観点での色差に基づいて最も近い近隣ノードを見つけ、新ノードと近隣ノードとの間に新しいエッジを追加することによって新ノードをグラフに組み込み、新ノードはリストに含まれていない新しい色を含み、記述を有しない。
【0075】
ブロック２５０において、メッセージパッシング・アルゴリズムを用い、ノードの色を初期シードとして用いることによって、グラフ内のノードの各々について特徴ベクトルを学習する。
【0076】
ブロック２６０において、学習された特徴ベクトルの各々を半教師あり方式でＲＮＮベースのデコーダの初期状態として使用することによって、新ノードの記述を生成する。
【0077】
要約すると、本発明の例示的な実施形態は、色表現のグローバルな知覚を組み込んだコンテキスト情報を使用する。人間の知覚の使用により、より現実的な色関係が可能になり、グラフベースの表現により、近隣のノードが情報／コンテキストを共有することが可能になり、コンテキスト情報は、完全一致が満たされない場合に、より多くの色と言語との関連付けの発見に潜在的につながる、有用な多様性を提供する。さらに、標準モデルと比較して、記憶に関する問題がより少なくなる。また、色－言語マッピングのために生成されるグラフは、データセットごとに１つだけである。このように、モデルが学習され、グラフを用いて色関係を構造化し、いくつもの生成及び検索タスクに利用することができる構文的に妥当な記述が生成される。
【0078】
図１２は、本発明の一実施形態による、例示的なクラウド・コンピューティング環境のブロック／フロー図である。
【0079】
本発明は、クラウド・コンピューティングについての詳細な説明を含むが、本明細書に記載された教示の実装は、クラウド・コンピューティング環境に限定されないことが理解されるであろう。むしろ、本発明の実施形態は、現在既知の、又は後に開発される他のあらゆるタイプのコンピューティング環境と組み合わせて実施することが可能である。
【0080】
クラウド・コンピューティングは、最小限の管理労力又はサービス・プロバイダとの対話で迅速にプロビジョニング及び解放することができる構成可能なコンピューティング・リソース（例えば、ネットワーク、ネットワーク帯域幅、サーバ、処理、メモリ、ストレージ、アプリケーション、仮想マシン、及びサービス）の共有プールへの、便利なオンデマンドのネットワーク・アクセスを可能にするためのサービス配信のモデルである。このクラウド・モデルは、少なくとも５つの特徴、少なくとも３つのサービス・モデル、及び少なくとも４つのデプロイメント・モデルを含むことができる。
【0081】
特徴は以下の通りである。オンデマンド・セルフサービス：クラウド・コンシューマは、必要に応じて、サーバ時間及びネットワーク・ストレージ等のコンピューティング機能を、人間がサービスのプロバイダと対話する必要なく自動的に、一方的にプロビジョニングすることができる。広範なネットワーク・アクセス：機能は、ネットワーク上で利用可能であり、異種のシン又はシック・クライアント・プラットフォーム（例えば、携帯電話、ラップトップ、及びＰＤＡ）による使用を促進する標準的な機構を通じてアクセスされる。リソース・プール化：プロバイダのコンピューティング・リソースは、マルチ・テナント・モデルを用いて、複数のコンシューマにサービスを提供するためにプールされ、異なる物理及び仮想リソースが、要求に応じて動的に割り当て及び再割り当てされる。コンシューマは、一般に、提供されるリソースの正確な位置についての制御又は知識を持たないという点で位置とは独立しているといえるが、より抽象化レベルの高い位置（例えば、国、州、又はデータセンタ）を特定できる場合がある。迅速な弾力性：機能を、迅速かつ弾力的に、場合によっては自動的に、プロビジョニングしてすばやくスケールアウトし、迅速に解放して素早くスケールインすることができる。コンシューマにとって、プロビジョニングに利用可能な機能は、多くの場合、無制限であるように見え、いつでもどんな量でも購入できる。計測されるサービス：クラウド・システムは、サービスのタイプ（例えば、ストレージ、処理、帯域幅、及びアクティブなユーザ・アカウント）に適した何らかの抽象化レベルでの計量機能を用いることによって、リソースの使用を自動的に制御及び最適化する。リソース使用を監視し、制御し、報告して、利用されるサービスのプロバイダとコンシューマの両方に対して透明性をもたらすことができる。
【0082】
サービス・モデルは以下の通りである。Ｓｏｆｔｗａｒｅ ａｓ ａ Ｓｅｒｖｉｃｅ（ＳａａＳ）：コンシューマに提供される機能は、クラウド・インフラストラクチャ上で動作する、プロバイダのアプリケーションを使用することである。これらのアプリケーションには、ウェブ・ブラウザ（例えば、ウェブ・ベースの電子メール）などのシン・クライアント・インターフェースを通じて、種々のクライアント・デバイスからアクセス可能である。コンシューマは、限定されたユーザ固有のアプリケーション構成設定を想定される例外として、ネットワーク、サーバ、オペレーティング・システム、ストレージ、又は個々のアプリケーション機能をも含めて、基礎をなすクラウド・インフラストラクチャを管理又は制御しない。
Ｐｌａｔｆｏｒｍ ａｓ ａ Ｓｅｒｖｉｃｅ（ＰａａＳ）：コンシューマに提供される機能は、プロバイダによってサポートされるプログラミング言語及びツールを用いて生成された、コンシューマが作成した又は取得したアプリケーションを、クラウド・インフラストラクチャ上にデプロイすることである。コンシューマは、ネットワーク、サーバ、オペレーティング・システム、又はストレージを含む基礎をなすクラウド・インフラストラクチャを管理又は制御しないが、デプロイされたアプリケーション、及び場合によってはアプリケーション・ホスティング環境構成に対する制御を有する。Ｉｎｆｒａｓｔｒｕｃｔｕｒｅ ａｓ ａ Ｓｅｒｖｉｃｅ（ＩａａＳ）：コンシューマに提供される機能は、コンシューマが、オペレーティング・システム及びアプリケーションを含み得る任意のソフトウェアをデプロイして動作させることができる、処理、ストレージ、ネットワーク、及び他の基本的なコンピューティング・リソースをプロビジョニンングすることである。コンシューマは、基礎をなすクラウド・インフラストラクチャを管理又は制御しないが、オペレーティング・システム、ストレージ、デプロイされたアプリケーションに対する制御、及び場合によってはネットワーク・コンポーネント（例えば、ホストのファイアウォール）選択に対する限定された制御を有する。
Ｐｌａｔｆｏｒｍ ａｓ ａ Ｓｅｒｖｉｃｅ（ＰａａＳ）：コンシューマに提供される機能は、プロバイダによってサポートされるプログラミング言語及びツールを用いて生成された、コンシューマが作成した又は取得したアプリケーションを、クラウド・インフラストラクチャ上にデプロイすることである。コンシューマは、ネットワーク、サーバ、オペレーティング・システム、又はストレージを含む基礎をなすクラウド・インフラストラクチャを管理又は制御しないが、デプロイされたアプリケーション、及び場合によってはアプリケーション・ホスティング環境構成に対する制御を有する。Ｉｎｆｒａｓｔｒｕｃｔｕｒｅ ａｓ ａ Ｓｅｒｖｉｃｅ（ＩａａＳ）：コンシューマに提供される機能は、コンシューマが、オペレーティング・システム及びアプリケーションを含み得る任意のソフトウェアをデプロイして動作させることができる、処理、ストレージ、ネットワーク、及び他の基本的なコンピューティング・リソースをプロビジョニンングすることである。コンシューマは、基礎をなすクラウド・インフラストラクチャを管理又は制御しないが、オペレーティング・システム、ストレージ、デプロイされたアプリケーションに対する制御、及び場合によってはネットワーク・コンポーネント（例えば、ホストのファイアウォール）選択に対する限定された制御を有する。
【0083】
デプロイメント・モデルは以下の通りである。プライベート・クラウド：クラウド・インフラストラクチャは、ある組織のためだけに運営される。これは、その組織又は第三者によって管理することができ、オンプレミス又はオフプレミスに存在することができる。コミュニティ・クラウド：クラウド・インフラストラクチャは、幾つかの組織によって共有され、共通の関心事項（例えば、ミッション、セキュリティ要件、ポリシー、及びコンプライアンス上の考慮事項）を有する特定のコミュニティをサポートする。これは、それらの組織又は第三者によって管理することができ、オンプレミス又はオフプレミスに存在することができる。パブリック・クラウド：クラウド・インフラストラクチャは、一般公衆又は大規模な業界グループによって利用可能であり、クラウド・サービスを販売する組織によって所有される。ハイブリッド・クラウド：クラウド・インフラストラクチャは、固有のエンティティのままであるが、データ及びアプリケーションのポータビリティを可能にする標準化技術又は専用技術（例えば、クラウド間の負荷平衡のためのクラウド・バースティング）によって互いに結び付けられた、２つ以上のクラウド（プライベート、コミュニティ、又はパブリック）の組合せである。
【0084】
クラウド・コンピューティング環境は、サービス指向であり、ステートレス性、低結合性、モジュール性、及びセマンティック相互運用性に焦点を置く。クラウド・コンピューティングの中心は、相互接続されたノードのネットワークを含むインフラストラクチャである。
【0085】
ここで図１２を参照すると、本発明のユースケースを可能にするための例示的なクラウド・コンピューティング環境１２５０が描かれている。図示されるように、クラウド・コンピューティング環境１２５０は、クラウド・コンシューマによって用いられる例えば携帯情報端末（ＰＤＡ）又は携帯電話１２５４Ａ、デスクトップ・コンピュータ１２５４Ｂ、ラップトップ・コンピュータ１２５４Ｃ、もしくは自動車コンピュータ・システム１２５４Ｎ又はそれらの組合せ等のローカル・コンピューティング・デバイスが通信することができる１つ又は複数のクラウド・コンピューティング・ノード１２１０を含む。ノード１２１０は、互いに通信することができる。これらを物理的又は仮想的にグループ化（図示せず）して、上述のようなプライベート・クラウド、コミュニティ・クラウド、パブリック・クラウドもしくはハイブリッド・クラウド又はこれらの組合せ等の１つ又は複数のネットワークにすることができる。これによりクラウド・コンピューティング環境１２５０は、インフラストラクチャ、プラットフォームもしくはソフトウェア又はそれらの組合せを、クラウド・コンシューマがローカル・コンピューティング・デバイス上にリソースを保持する必要のないサービスとして提供することができるようになる。図１２に示されるコンピューティング・デバイス１２５４Ａ－Ｎのタイプは単なる例示として意図されており、コンピューティング・ノード１２１０及びクラウド・コンピューティング環境１２５０は、あらゆるタイプのネットワークもしくはネットワーク・アドレス指定可能な接続又はその両方を介して（例えば、ウェブ・ブラウザを用いて）、あらゆるタイプのコンピュータ化された装置と通信することができることが理解される。
【0086】
図１３は、本発明の一実施形態による、例示的な抽象化モデル層の模式図である。図１３に示されるコンポーネント、層及び機能は、単なる例証を意図したものであり、本発明の実施形態はそれらに限定されないことを予め理解されたい。図示されるように、以下の層及び対応する機能が提供される。
【0087】
ハードウェア及びソフトウェア層１３６０は、ハードウェア及びソフトウェアのコンポーネントを含む。ハードウェア・コンポーネントの例には、メインフレーム１３６１、ＲＩＳＣ（Reduced Instruction Set Computer（縮小命令セットコンピュータ））アーキテクチャ・ベースのサーバ１３６２、サーバ１３６３、ブレード・サーバ１３６４、ストレージデバイス１３６５、並びにネットワーク及びネットワーキング・コンポーネント１３６６が含まれる。幾つかの実施形態において、ソフトウェア・コンポーネントは、ネットワーク・アプリケーション・サーバ・ソフトウェア１３６７及びデータベース・ソフトウェア１３６８を含む。
【0088】
仮想化層１３７０は、抽象化層を提供し、この層により、仮想エンティティの以下の例、すなわち、仮想サーバ１３７１、仮想ストレージ１３７２、仮想プライベート・ネットワークを含む仮想ネットワーク１３７３、仮想アプリケーション及びオペレーティング・システム１３７４、並びに仮想クライアント１３７５を提供することができる。
【0089】
一例では、管理層１３８０は、以下に説明する機能を提供することができる。
【0090】
リソースプロビジョニング１３８１は、クラウド・コンピューティング環境内でタスクを実行するために利用されるコンピューティング・リソース及びその他のリソースの動的な調達を提供する。
【0091】
計量及び価格設定１３８２は、クラウド・コンピューティング環境内でリソースが利用されたときの費用追跡と、これらのリソースの消費に対する課金又は請求とを提供する。一例として、これらのリソースは、アプリケーション・ソフトウェア・ライセンスを含むことができる。セキュリティは、クラウド・コンシューマ及びタスクについての識別検証、並びにデータ及び他のリソースに対する保護を提供する。ユーザ・ポータル１３８３は、コンシューマ及びシステム管理者に対してクラウド・コンピューティング環境へのアクセスを提供する。サービスレベル管理１３８４は、必要なサービスレベルが満たされるようにクラウド・コンピューティング・リソースの割当て及び管理を提供する。サービスレベル・アグリーメント（ＳＬＡ）計画及び履行１３８５は、ＳＬＡに従って将来的な必要性が予測されるクラウド・コンピューティング・リソースの事前配置及び調達を提供する。
【0092】
ワークロード層１３９０は、クラウド・コンピューティング環境をそのために利用することができる機能の例を提供する。この層から提供することができるワークロード及び機能の例は、マッピング及びナビゲーション１３９１、ソフトウェア開発及びライフサイクル管理１３９２、仮想教室教育配信１３９３、データ解析処理１３９４、トランザクション処理１３９５、並びにクラウドサーバにおけるグラフベースの色記述１３９６を含む。
【0093】
本明細書で使用される場合、「データ」、「コンテンツ」、「情報」及び同様の用語は、様々な例示的な実施形態に従って捕捉、送信、受信、表示もしくは保存する又はそれらの組合せを行うことができるデータを指すために互換的に使用することができる。したがって、いずれかのそのような用語の使用は、本開示の精神及び範囲を制限するものと取るべきではない。さらに、コンピューティング・デバイスが別のコンピューティング・デバイスからデータを受信するように本明細書に記載されている場合、データは、別のコンピューティング・デバイスから直接受信することもでき、又は例えば、１つ又は複数のサーバ、中継器、ルータ、ネットワークアクセスポイント、基地局又はそれらの組合せなどの１つ又は複数の介在するコンピューティング・デバイスを介して間接的に受信することもできる。
【0094】
ユーザとの対話を提供するために、本明細書に記載の主題の実施形態は、ユーザに情報を表示するための表示装置、例えばＣＲＴ（陰極線管）又はＬＣＤ（液晶ディスプレイ）モニタ、並びにユーザがコンピュータに入力を提供できるキーボード及びポインティング装置、例えばマウス又はトラックボールを有するコンピュータで実装することができる。ユーザとの対話を提供するために他の種類の装置も使用することができ、例えば、ユーザに提供されるフィードバックは、視覚フィードバック、聴覚フィードバック、触覚フィードバックなど、あらゆる形式の感覚フィードバックとすることができ、ユーザからの入力は、音響、音声、触覚入力など、あらゆる形式で受信することができる。
【0095】
本発明は、システム、方法、もしくはコンピュータプログラム製品又はそれらの組合せとすることができる。コンピュータプログラム製品は、本発明の態様をプロセッサに実行させるためのコンピュータ可読プログラム命令を有する１つ又は複数のコンピュータ可読ストレージ媒体を含むことができる。
【0096】
コンピュータ可読ストレージ媒体は、命令実行デバイスによる使用のために命令を保持及び格納することができる有形デバイスとすることができる。コンピュータ可読ストレージ媒体は、例えば、電子ストレージデバイス、磁気ストレージデバイス、光ストレージデバイス、電磁気ストレージデバイス、半導体ストレージデバイス、又は上記のものの任意の適切な組合せとすることができるがこれらに限定されない。コンピュータ可読ストレージ媒体のより具体的な例の非網羅的なリストは、ポータブル・コンピュータ・ディスケット、ハードディスク、ランダム・アクセス・メモリ（ＲＡＭ）、読み出し専用メモリ（ＲＯＭ）、消去可能プログラム可能読み出し専用メモリ（ＥＰＲＯＭ又はフラッシュメモリ）、静的ランダム・アクセス・メモリ（ＳＲＡＭ）、ポータブル・コンパクトディスク読み出し専用メモリ（ＣＤ－ＲＯＭ）、デジタル多目的ディスク（ＤＶＤ）、メモリスティック、フロッピーディスク、記録された命令を有するパンチカードもしくは溝内に隆起した構造等の機械式コード化デバイス、及び上記のものの任意の適切な組合せを含む。コンピュータ可読ストレージ媒体は、本明細書で用いられる場合、無線波もしくは他の自由に伝搬する電磁波、導波路もしくは他の伝送媒体を通って伝搬する電磁波（例えば光ファイバケーブルを通る光パルス）、又は電線を通って伝送される電気信号のような一時的な信号自体と解釈すべきではない。
【0097】
本明細書で説明されるコンピュータ可読プログラム命令は、コンピュータ可読ストレージ媒体からそれぞれのコンピューティング／処理デバイスにダウンロードすることも、又は、例えばインターネット、ローカル・エリア・ネットワーク、広域ネットワークもしくは無線ネットワーク又はそれらの組合せを経由して、外部コンピュータもしくは外部ストレージデバイスにダウンロードすることもできる。ネットワークは、銅伝送ケーブル、光伝送ファイバ、無線伝送、ルータ、ファイアウォール、スイッチ、ゲートウェイ・コンピュータもしくはエッジサーバ又はそれらの組合せを含むことができる。各コンピューティング／処理デバイス内のネットワーク・アダプタ・カード又はネットワーク・インタフェースは、ネットワークからコンピュータ可読プログラム命令を受け取り、そのコンピュータ可読プログラム命令をそれぞれのコンピューティング／処理デバイス内のコンピュータ可読ストレージ媒体にストレージのために転送する。
【0098】
本発明のオペレーションを実行するためのコンピュータ可読プログラム命令は、アセンブラ命令、命令セット・アーキテクチャ（ＩＳＡ）命令、機械語命令、機械依存命令、マイクロコード、ファームウェア命令、状態設定データ、又は、Ｓｍａｌｌｔａｌｋ、もしくはＣ＋＋などのオブジェクト指向プログラミング言語及び「Ｃ」プログラミング言語もしくは類似のプログラミング言語のような従来の手続き型プログラミング言語を含む１つもしくは複数のプログラミング言語の任意の組合せで記述されたソースコードもしくはオブジェクトコードのいずれかとすることができる。コンピュータ可読プログラム命令は、完全にユーザのコンピュータ上で実行される場合もあり、一部がユーザのコンピュータ上で独立型ソフトウェア・パッケージとして実行される場合もあり、一部がユーザのコンピュータ上で実行され、一部が遠隔コンピュータ上で実行される場合もあり、又は完全に遠隔コンピュータもしくはサーバ上で実行される場合もある。後者のシナリオにおいては、遠隔コンピュータは、ローカル・エリア・ネットワーク（ＬＡＮ）もしくは広域ネットワーク（ＷＡＮ）を含むいずれかのタイプのネットワークを通じてユーザのコンピュータに接続される場合もあり、又は外部コンピュータへの接続が行われる場合もある（例えば、インターネット・サービス・プロバイダを用いたインターネットを通じて）。幾つかの実施形態において、例えばプログラム可能論理回路、フィールドプログラム可能ゲートアレイ（ＦＰＧＡ）、又はプログラム可能論理アレイ（ＰＬＡ）を含む電子回路は、本発明の態様を実施するために、コンピュータ可読プログラム命令の状態情報を利用して電子回路を個別化することにより、コンピュータ可読プログラム命令を実行することができる。
【0099】
本発明の態様は、本明細書において、本発明の実施形態による方法、装置（システム）、及びコンピュータプログラム製品のフローチャート図もしくはブロック図又はその両方を参照して説明される。フローチャート図もしくはブロック図又はその両方の各ブロック、並びにフローチャート図もしくはブロック図又はその両方のブロックの組合せは、コンピュータ可読プログラム命令によって実装することができることが理解されるであろう。
【0100】
これらのコンピュータ可読プログラム命令を、汎用コンピュータ、専用コンピュータ、又は他のプログラム可能データ処理装置のプロセッサに与えてマシンを製造し、それにより、コンピュータ又は他のプログラム可能データ処理装置のプロセッサによって実行される命令が、フローチャートもしくはブロック図又はその両方の１つ又は複数のブロック内で指定された機能／動作を実装するための手段を作り出すようにすることができる。これらのコンピュータ可読プログラム命令を、コンピュータ、プログラム可能データ処理装置、もしくは他のデバイス又はそれらの組合せを特定の方式で機能させるように指示することができるコンピュータ可読ストレージ媒体内に格納し、それにより、その中に格納された命令を有するコンピュータ可読媒体が、フローチャートもしくはブロック図又はその両方の１つ又は複数のブロックにおいて指定された機能／動作の態様を実装する命令を含む製品を含むようにすることもできる。
【0101】
コンピュータ可読プログラム命令を、コンピュータ、他のプログラム可能データ処理装置又は他のデバイス上にロードして、一連のオペレーションステップをコンピュータ、他のプログラム可能データ処理装置又は他のデバイス上で行わせてコンピュータ実装のプロセスを生成し、それにより、コンピュータ、他のプログラム可能装置又は他のデバイス上で実行される命令が、フローチャートもしくはブロック図又はその両方の１つ又は複数のブロックにおいて指定された機能／動作を実装するようにすることもできる。
【0102】
図面内のフローチャート及びブロック図は、本開示の種々の実施形態による、システム、方法、及びコンピュータプログラム製品の可能な実装の、アーキテクチャ、機能及びオペレーションを示す。この点に関して、フローチャート又はブロック図内の各ブロックは、指定された論理機能を実装するための１つ又は複数の実行可能命令を含む、モジュール、セグメント、又は命令の一部を表すことができる。幾つかの代替的な実装において、ブロック内に記された機能は、図中に記された順序とは異なる順序で行われることがある。例えば、連続して示された２つのブロックは、関与する機能に応じて、実際には実質的に同時に実行されることもあり、又はこれらのブロックはときとして逆順で実行されることもある。ブロック図もしくはフローチャート図又はその両方の各ブロック、及びブロック図もしくはフローチャート図又はその両方の中のブロックの組合せは、指定された機能又は動作を実行する専用ハードウェア・ベースのシステムによって実装することもでき、又は専用ハードウェアとコンピュータ命令との組合せを実行することもできることにも留意されたい。
【0103】
本明細書において、本原理の「１つの実施形態」又は「一実施形態」、及びその他の変形への言及は、その実施形態に関連して説明される特定の特徴、構造、特性などが、本原理の少なくとも１つの実施形態に含まれることを意味している。したがって、本明細書中の様々な場所に現れる「１つの実施形態において」又は「一実施形態において」という表現、及びその他の変形は、必ずしも全てが同じ実施形態を指しているわけではない。
【0104】
以下の「／」、「及び／又は」、及び「の少なくとも１つ」のいずれかの使用、例えば、「Ａ／Ｂ」、「Ａ及び／又はＢ」、及び「Ａ及びＢの少なくとも１つ」の場合、第１のリストされた選択肢（Ａ）のみの選択、又は第２のリストされた選択肢（Ｂ）のみの選択、又は両方の選択肢（Ａ及びＢ）の選択を包含することが意図されていることが理解されよう。さらなる例として、「Ａ、Ｂ、及び／又はＣ」及び「Ａ、Ｂ、及びＣの少なくとも１つ」の場合、かかる表現は、第１のリストされた選択肢（Ａ）のみの選択、又は第２のリストされた選択肢（Ｂ）のみの選択、又は第３のリストされた選択肢（Ｃ）のみの選択、又は第１及び第２のリストされた選択肢（Ａ及びＢ）のみの選択、又は第１及び第３のリストされた選択肢（Ａ及びＣ）のみの選択、又は第２及び第３のリストされた選択肢（Ｂ及びＣ）のみの選択、又は３つの選択肢すべて（Ａ及びＢ及びＣ）の選択を包含することが意図されている。このことは、この技術及び関連技術の当業者が容易に理解できるように、リストされた項目の数だけ拡張することができる。
【0105】
自然言語による色についての記述を生成するためのシステム及び方法の好ましい実施形態（これらは例示であり、限定することを意図していない）を説明したが、上記の教示に照らして、当業者によって修正及び変形がなされ得ることに留意されたい。したがって、添付の特許請求の範囲によって概説される本発明の範囲内である、説明された特定の実施形態において変更がなされ得ることが理解されるであろう。このように、特許法が要求する詳細さ及び具体性をもって本発明の態様を説明したが、特許によって請求され、保護されることを望むものは、添付の特許請求の範囲に規定される。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【手続補正書】
【提出日】2023-05-24
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
コンピュータが実行する、自然言語による色についての記述を生成するための方法であって、タプルの各々が色及び記述を含む、タプルのリストを取得することと、
前記タプルの各々をノードとして用い、前記ノード間の人間の知覚の観点での色差が所定範囲外にある場合に前記ノード間にエッジを追加することによってグラフを生成することと、
外部色比較データベースに格納された外部色比較記述に基づいて前記エッジをフィルタリングすることと、
人間の知覚の観点での色差に基づいて最も近い近隣ノードを見つけ、新ノードと前記最も近い近隣ノードとの間に新しいエッジを追加することによって前記新ノードを前記グラフに組み込むことであって、前記新ノードは前記タプルのリストに含まれていない新しい色を含み、記述を有しない、組み込むことと、
メッセージパッシングを用い、前記ノードの色を初期シードとして用いることによって、前記グラフ内の前記ノードの各々について特徴ベクトルを学習することと、
学習された前記特徴ベクトルの各々を半教師あり方式でリカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダの初期状態として使用することによって前記新ノードの記述を生成することと、
を含む方法。
【請求項2】
前記エッジをフィルタリングすることは、前記グラフから冗長又は実現不可能なエッジを除去することを含む、請求項１に記載の方法。
【請求項3】
前記人間の知覚の観点での色差は、メトリックであるデルタＥによって提供される、請求項１に記載の方法。
【請求項4】
２つの色の間のデルタＥが１１と４９との間である場合、前記２つの色の間にエッジが生成される、請求項３に記載の方法。
【請求項5】
前記新ノードが前記グラフに追加された後、ラベル付きノードのセットからラベルなしノードのセットまで前記エッジからのコンテキスト情報を用いて前記新ノードのための記述を学習する、請求項１に記載の方法。
【請求項6】
前記ＲＮＮにおける損失が、前記グラフのラベル付き部分に対して計算される、請求項１に記載の方法。
【請求項7】
前記新ノードは、ラベルなしノードとして定義される、請求項１に記載の方法。
【請求項8】
コンピュータが実行する、自然言語による色についての記述を生成するための方法であって、タプルの各々が色及び記述を含む、タプルのリストを得ることと、
前記タプルの各々をノードとして用い、類似度閾値に基づいて前記ノード間にエッジを追加することによってグラフを生成することと、
外部色比較データベースに格納された外部色比較記述に基づいて前記エッジをフィルタリングすることと、
前記類似度閾値に基づいて最も近い近隣ノードを見つけ、新ノードと前記最も近い近隣ノードとの間に新しいエッジを追加することによって前記新ノードを前記グラフに組み込むことと、
を含む方法。
【請求項9】
前記新ノードは、前記タプルのリストに含まれていない新しい色を含み、記述を有しない、請求項８に記載の方法。
【請求項10】
前記グラフ内の前記ノードの各々について特徴ベクトルを学習することをさらに含む、請求項９に記載の方法。
【請求項11】
前記特徴ベクトルは、メッセージパッシングを用い、前記ノードの色を初期シードとして用いることによって学習される、請求項１０に記載の方法。
【請求項12】
学習された前記特徴ベクトルの各々を初期状態として指定することによって、前記新ノードの記述を生成することをさらに含む、請求項１１に記載の方法。
【請求項13】
前記初期状態が、半教師あり方式でリカレントニューラルネットワーク（ＲＮＮ）ベースのデコーダに与えられる、請求項１２に記載の方法。
【請求項14】
前記類似度閾値は、所定範囲外にある前記ノード間の人間の知覚の観点での色差である、請求項１３に記載の方法。
【請求項15】
前記人間の知覚の観点での色差は、メトリックであるデルタＥによって提供される、請求項１４に記載の方法。
【請求項16】
２つの色の間のデルタＥが１１と４９との間である場合、前記２つの色の間にエッジが生成される、請求項１５に記載の方法。
【請求項17】
前記ＲＮＮにおける損失が、前記グラフのラベル付き部分に対して計算される、請求項１６に記載の方法。
【請求項18】
前記エッジをフィルタリングすることは、前記グラフから冗長又は実現不可能なエッジを除去することを含む、請求項８に記載の方法。
【請求項19】
前記新ノードが前記グラフに追加された後、ラベル付きノードのセットからラベルなしノードのセットまで前記エッジからのコンテキスト情報を用いて前記新ノードのための記述を学習する、請求項８に記載の方法。
【請求項20】
コンピュータが実行する、自然言語による色についての記述を生成するための方法であって、複数のノードとエッジとを含む、色の関係を構造化するグラフを生成することと、
色比較記述に基づいて冗長エッジを除去することと、
類似度閾値に基づいて、新ノードを新エッジと共に前記グラフに組み込むことと、
前記グラフの各ノードについて特徴ベクトルを学習することと、
前記特徴ベクトルを使用して前記新ノードの記述を生成することであって、前記特徴ベクトルは半教師あり様式でニューラルネットワークに与えられる、生成することと、
を含む方法。
【請求項21】
自然言語による色についての記述を生成するためのコンピュータプログラムであって、コンピュータによって実行可能であり、前記コンピュータに、請求項１から請求項２０までのいずれかに記載の方法を実行させる、コンピュータプログラム。
【請求項22】
請求項２１に記載のコンピュータプログラムを格納した、コンピュータ可読記憶媒体。
【国際調査報告】