特許 7597976 類似画像検索装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2024-12-02

(45)【発行日】2024-12-10

(54)【発明の名称】類似画像検索装置

(51)【国際特許分類】

   G06F 16/58 20190101AFI20241203BHJP

   G06F 16/535 20190101ALI20241203BHJP

【ＦＩ】

G06F16/58

G06F16/535

【請求項の数】 4

(21)【出願番号】P 2024089263

(22)【出願日】2024-05-31

【審査請求日】2024-06-05

(73)【特許権者】

【識別番号】000130824

【氏名又は名称】株式会社サンゲツ

(74)【代理人】

【識別番号】110001564

【氏名又は名称】フェリシテ弁理士法人

(72)【発明者】

【氏名】森 祐輝

【審査官】松尾 真人

(56)【参考文献】

【文献】米国特許出願公開第２０１９／０２３６０９８（ＵＳ，Ａ１）

【文献】韓国公開特許第１０－２０２２－０１３７３９５（ＫＲ，Ａ）

【文献】韓国登録特許第１０－２５９１１１３（ＫＲ，Ｂ１）

【文献】特開２０１３－２３５４７８（ＪＰ，Ａ）

【文献】特開２００８－１６８０６７（ＪＰ，Ａ）

【文献】特開２０１６－０１５１６４（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１８／０３５０２８１（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ １６／００－１６／９５８

Ｇ０６Ｑ １０／００－９９／００

(57)【特許請求の範囲】

【請求項1】

壁装材又は床材の候補画像と、前記候補画像から抽出した複数の特徴量と、色及び柄を示す情報を含む属性情報とを関連付けて記憶する記憶部と、
ユーザによって入力された壁装材又は床材の入力画像を取得する画像取得部と、
前記入力画像から前記複数の特徴量を抽出する特徴量抽出部と、
前記ユーザによって入力された前記属性情報を取得する属性情報取得部と、
前記入力画像から抽出した前記複数の特徴量と前記候補画像から抽出した前記複数の特徴量との類似度に基づいて、前記候補画像の中から前記入力画像の類似画像を検索する検索部と、
前記属性情報取得部によって取得された前記属性情報と前記記憶部に記憶されている前記属性情報に基づいて、前記検索部によって検索された前記候補画像の中から所定数の前記候補画像を選択し、選択した前記候補画像を出力する出力部と、を備え、
前記検索部は、前記画像取得部によって取得された前記入力画像の中で前記ユーザによって選択された一部の画像領域の類似画像を検索する、類似画像検索装置。

【請求項2】

前記属性情報は、見本帳への掲載開始日及び前記見本帳への掲載終了日の少なくとも一方を示す情報を含む、請求項１に記載の類似画像検索装置。

【請求項3】

前記属性情報は、厚さを示す情報を含む、請求項１に記載の類似画像検索装置。

【請求項4】

前記属性情報は、価格を示す情報を含む、請求項１に記載の類似画像検索装置。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、類似画像検索装置に関する。

【背景技術】

【0002】

従来から、入力画像の類似画像を検索する技術が知られている（例えば、特許文献１～３参照）。

【0003】

具体的には、かかる技術は、入力画像の特徴量と候補画像の特徴量との類似度に基づいて、候補画像の中から入力画像の類似画像を検索する。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００９-２５１８５０号公報

【文献】特開２０１１-２０３７７６号公報

【文献】特開２０１２-５８９４０号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

長年の間、インテリア業界では、古くなったり傷がついてしまったりした壁装材や床材等の張替えの際に、現在の壁装材や床材等の製品番号が分からないという課題を抱えている。

【0006】

具体的には、かかる張替えの作業を行う者が、メーカーに対して問い合わせを行い、メーカーの担当者が、多くの見本帳のサンプルの中から、現在の壁装材や床材等の類似品を検索するという運用がなされていたが、かかる運用には、かなりの工数が必要である。

【0007】

また、担当者間で、類似すると判断する壁装材や床材等にブレがあり、類似する壁装材や床材等の候補を効率良く特定する必要があった。

【0008】

さらに、各メーカーにおいて、過去からの歴代の見本帳を全て保存しておくためのスペースを確保することが困難な状況であるため、デジタル施策によって、かかる課題を解決することが求められている。

【0009】

上述の課題に対して、上述の特許文献１～３の技術を用いて、現在の壁装材や床材等の写真を入力画像として類似画像を検索しようとしても、以下の理由により、適切な類似画像を検索できないことが多いことが分かった。

【0010】

第１の理由としては、薄い色のシンプルな柄を有することが多い壁装材や床材等については、上述の特許文献１～３の技術では、入力画像の特徴量を適切に抽出できず、入力画像に全く類似していない画像を類似画像として検索してしまう可能性があった。

【0011】

第２の理由としては、照明の影響で、実際の色と異なる色の写真で、現在の壁装材や床材等の写真が撮影されてしまうと、入力画像に全く類似していない画像を類似画像として検索してしまう可能性があった。

【0012】

そこで、本開示は、上述の課題に鑑みてなされたものであり、薄い色のシンプルな柄を有することが多い壁装材や床材等の写真についても類似画像を適切に検索することができる類似画像検索装置を提供することを目的とする。

【課題を解決するための手段】

【0013】

本開示の第１の特徴は、類似画像検索装置であって、候補画像と、前記候補画像から抽出した複数の特徴量と、属性情報とを関連付けて記憶する記憶部と、
ユーザによって入力された入力画像を取得する画像取得部と、前記入力画像から前記複数の特徴量を抽出する特徴量抽出部と、前記ユーザによって入力された前記属性情報を取得する属性情報取得部と、前記入力画像から抽出した前記複数の特徴量と前記候補画像から抽出した前記複数の特徴量との類似度に基づいて、前記候補画像の中から前記入力画像の類似画像を検索する検索部と、前記属性情報取得部によって取得された前記属性情報と前記記憶部に記憶されている前記属性情報に基づいて、前記検索部によって検索された前記候補画像の中から所定数の前記候補画像を選択し、選択した前記候補画像を出力する出力部と、を備え、前記属性情報は、色及び柄を示す情報を含むことを要旨とする。

【発明の効果】

【0014】

本開示によれば、薄い色のシンプルな柄を有することが多い壁装材や床材等の写真についても類似画像を適切に検索することができる類似画像検索装置を提供することができる。

【図面の簡単な説明】

【0015】

【図1】図１は、一実施形態に係る類似画像検索装置１の機能ブロックの一例を示す図である。

【図2】図２は、一実施形態に係る類似画像検索装置１の出力部１６によって表示される類似画像の検索画面の一例を示す図である。

【図3】図３は、一実施形態に係る類似画像検索装置１の出力部１６によって表示される類似画像の検索画面の一例を示す図である。

【図4】図４は、一実施形態に係る類似画像検索装置１の出力部１６によって表示される類似画像の検索画面の一例を示す図である。

【図5】図５は、一実施形態に係る類似画像検索装置１の出力部１６によって表示される類似画像の検索結果を表示する画面の一例を示す図である。

【発明を実施するための形態】

【0016】

以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。なお、以下の図面の記載において、同一又は類似の部分には、同一又は類似の符号を付している。ただし、図面は模式的なものであり、各寸法の比率等は現実のものとは異なることに留意すべきである。したがって、具体的な寸法等は、以下の説明を参酌して判断すべきである。また、図面相互間においても互いの寸法の関係や比率が異なる部分が含まれ得る。本明細書及び図面において、実質的に同一の機能、構成を有する要素については、同一の符号を付することにより重複説明を省略し、また本発明に直接関係のない要素は図示を省略する。

【0017】

（第１実施形態）
以下、図１～図５を参照して、本発明の第１実施形態に係る類似画像検索装置１について説明する。図１は、本実施形態に係る類似画像検索装置１の機能ブロックの一例を示す図であり、図２～図４は、本実施形態に係る類似画像検索装置１の出力部１６によって表示される類似画像の検索画面の一例を示す図であり、図５は、本実施形態に係る類似画像検索装置１の出力部１６によって表示される類似画像の検索結果を表示する画面の一例を示す図である。

【0018】

本実施形態係る類似画像検索装置１は、任意の入力画像の類似画像を検索することができる。

【0019】

例えば、類似画像検索装置１は、壁装材や床材やカーテン等のインテリア用品の写真を入力画像として、かかる入力画像の類似画像を検索することができる。ここで、壁装材には、化粧シートや化粧フィルムや壁紙や天井材等が含まれる。

【0020】

以下、本実施形態では、入力画像として壁装材の写真を用いて、壁紙の類似画像を検索するケースを例に挙げて説明するが、本発明は、かかるケースに限定されることなく、任意の入力画像の類似画像を検索するケースに適用可能である。

【0021】

図１に示すように、本実施形態に係る類似画像検索装置１は、記憶部１１と、画像取得部１２と、特徴量抽出部１３と、属性情報取得部１４と、検索部１５と、出力部１６と、を備える。

【0022】

記憶部１１は、候補画像と、かかる候補画像から抽出した複数の特徴量と、属性情報とを関連付けて記憶する。
ここで、属性情報は、種別を示す情報や、色を示す情報や、柄（質感）を示す情報や、見本帳の識別情報（見本帳名や見本帳の発刊番号）や、見本帳への掲載開始日を示す情報や、見本帳への掲載終了日を示す情報や、インテリア用品の厚さを示す情報や、インテリア用品の価格を示す情報等を含んでもよい。なお、属性情報は、インテリア用品の商品データベースに記録されている任意の情報を含んでいてもよい。

【0023】

ここで、複数の特徴量は、任意の方法で定義される所定の特徴ベクトルであってもよい。例えば、かかる所定の特徴ベクトルは、色や柄や材質等の特徴量を含んでいてもよい。

【0024】

画像取得部１２は、ユーザによって入力された入力画像を取得する。例えば、画像取得部１２は、キーボートやマウス等の入力装置によって操作することができ、かかる入力装置を介してユーザによって入力された入力画像を取得してもよい。或いは、画像取得部１２は、ユーザによって入力された入力画像を、ネットワークを介してユーザ端末２（例えば、スマートフォンやＰＣ等）から取得してもよい。

【0025】

特徴量抽出部１３は、画像取得部１２によって取得された入力画像から、上述の複数の特徴量（例えば、所定の特徴ベクトル）を抽出する。

【0026】

属性情報取得部１４は、ユーザによって入力された属性情報を取得する。例えば、属性情報取得部１４は、キーボートやマウス等の入力装置によって操作することができ、かかる入力装置を介してユーザによって入力された属性情報を取得してもよい。或いは、属性情報取得部１４は、ユーザによって入力された属性情報を、ネットワークを介してユーザ端末２から取得してもよい。

【0027】

検索部１５は、入力画像から抽出した複数の特徴量と候補画像から抽出した複数の特徴量との類似度に基づいて、候補画像の中から入力画像の類似画像を検索する。

【0028】

例えば、検索部１５は、入力画像から抽出した所定の特徴ベクトルと候補画像から抽出した所定の特徴ベクトルと差分の絶対値（距離）を、上述の類似度として算出し、かかる差分の絶対値が所定値以下の候補画像を検索してもよい。

【0029】

なお、検索部１５は、画像取得部１２によって取得された入力画像の中でユーザによって選択された一部の画像領域Ａ（後述の図４参照）の類似画像を検索してもよい。

【0030】

出力部１６は、属性情報取得部１４によって取得された属性情報と記憶部１１に記憶されている属性情報に基づいて、検索部１５によって検索された候補画像の中から所定数の候補画像を選択し、選択した候補画像を出力する。

【0031】

例えば、出力部１６は、選択した候補画像をディスプレイ等の出力装置に出力（表示）してもよい（後述の図５参照）。或いは、出力部１６は、選択した候補画像を、ネットワークを介してユーザ端末２出力（送信）してもよい。

【0032】

以下、図２～図４を参照して、類似画像検索装置１を用いて入力画像の類似画像を検索する場合の画面の遷移の一例について説明する。

【0033】

第１に、ユーザは、図２に示す画面において、「ファイルを選択」ボタンをクリックし、所望の入力画像（図２の例では、ＲＥ５３０９６_Ｃ０１.ｊｐｇ）を選択し、「次へ」ボタンをクリックすると、図３に示す画面に遷移する。

【0034】

ここで、ユーザは、図２に示す画面の「種別」、「色」及び「質感」のプルダウンにおいて、属性情報を入力してもよい。

【0035】

例えば、「種別」は、入力画像の種別（例えば、壁紙等）を示す属性情報を入力するためのプルダウンであり、「色」は、入力画像の色を示す属性情報を入力するためのプルダウンであり、「質感」は、入力画像の柄を示す属性情報を入力するためのプルダウンである。

【0036】

第２に、図３に示す画面は、図２に示す画面においてユーザによって選択された入力画像を表示し、ユーザは、かかる入力画像が所望の入力画像である場合、「検索」ボタンをクリックする。一方、ユーザは、かかる入力画像が所望の入力画像でない場合、「画像を選びなおす検索」ボタンをクリックして、図２に示す画面において、入力画像を選択し直す。

【0037】

ここで、ユーザは、図４に示すように、図３に示す画面において表示された入力画像の一部の画像領域Ａを選択し、「検索」ボタンをクリックすることで、かかる画像領域Ａの類似画像が検索される。

【0038】

かかる構成によれば、例えば、自宅の壁紙を携帯端末で撮影した画像を入力画像として類似検索する場合で、且つ、壁紙の一部に汚れや傷等がある場合であっても、かかる汚れや傷等の部分を除いた画像領域の類似画像を検索することで、入力画像の適切な類似画像を検索することができる。

【0039】

第３に、図５に示す画面において、出力部１６は、上述の入力画像の類似画像として選択した画像を表示する。

【0040】

上述のように、本実施形態によれば、属性情報に入力画像の色を示す情報及び入力画像の柄を示す情報を含めることで、薄い色のシンプルな柄を有する壁装材の写真を入力画像とする場合であっても、入力画像に全く類似しない画像を検索してしまうという事態を回避することができる。

【0041】

また、本実施形態によれば、照明の影響で、実際の色と異なる色の写真で、現在の壁装材や床材等の写真が撮影された場合であっても、ユーザによって属性情報として入力画像の色を示す情報が入力されることで、入力画像に全く類似していない画像を類似画像として検索してしまうという事態を回避することができる。

【0042】

また、本実施形態によれば、属性情報に入力画像の見本帳への掲載開始日及び見本帳への掲載終了日の少なくとも一方を示す情報を含めることで、インテリア用品の写真を入力画像とする場合に、近い将来、廃番になる見本帳に掲載されているインテリア用品（或いは、既に廃番となった見本帳に掲載されていたインテリア商品）の画像の出力を回避することができる。なお、同じインテリア用品が、異なる複数の見本帳に掲載される場合がある。

【0043】

ここで、一方の見本帳は廃番となるが、もう一方の見本帳は廃番とならずにインテリア用品の掲載が継続する場合があり、前者の見本帳に掲載されたインテリア用品の画像の出力を回避し、後者の見本帳に掲載されたインテリア用品の画像を出力することができる。

【0044】

また、壁装材は、張替えの際には、古くなった下地の凹凸が目立たないように、ある程度の厚さを有することが好ましい。この点、本実施形態によれば、属性情報にインテリア用品の厚さを示す情報を含めることで、古くなった下地の凹凸を目立たなくすることができる壁装材の写真のみを類似画像として出力することができる。

【0045】

また、本実施形態によれば、属性情報に入力画像の価格を示す情報を含めることで、所望の価格帯のインテリア用品の類似画像のみを出力することができる。

【0046】

なお、古くなった壁装材や床材等では、傷や汚れが付いている場合が多いため、実際の色や柄と異なる状態で壁装材や床材等の写真が撮影されてしまう場合がある。この点、本実施形態によれば、かかる場合であっても、入力画像に全く類似していない画像を類似画像として検索してしまうという事態を回避することができる。

【0047】

上述の実施形態を用いて本発明について詳細に説明したが、当業者にとっては、本発明が本明細書中に説明した実施形態に限定されるものではないということは明らかである。本発明は、特許請求の範囲の記載により定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施できる。したがって、本明細書の記載は、例示説明を目的とするものであり、本発明に対して何ら制限的な意味を有するものではない。

【符号の説明】

【0048】

１…類似画像検索装置
１１…記憶部
１２…画像取得部
１３…特徴量抽出部
１４…属性情報取得
１５…検索部
１６…出力部
２…ユーザ端末

【要約】

【課題】薄い色のシンプルな柄を有する壁装材の写真についても類似画像を適切に検索すること。
【解決手段】本開示に係る類似画像検索装置１は、候補画像と候補画像から抽出した複数の特徴量と属性情報とを関連付けて記憶する記憶部１１と、ユーザによって入力された入力画像を取得する画像取得部１２と、入力画像から複数の特徴量を抽出する特徴量抽出部１３と、ユーザによって入力された属性情報を取得する属性情報取得部１４と、入力画像から抽出した複数の特徴量と候補画像から抽出した複数の特徴量との類似度に基づいて候補画像の中から入力画像の類似画像を検索する検索部１５と、属性情報取得部１４によって取得された属性情報と記憶部１１に記憶されている属性情報に基づいて検索部１５によって検索された候補画像の中から所定数の候補画像を選択して出力する出力部１６とを備え、属性情報は、色及び柄を示す情報を含む。
【選択図】図１

【図1】

【図2】

【図3】

【図4】

【図5】