特開 2024-164393 在庫管理システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024164393

(43)【公開日】2024-11-27

(54)【発明の名称】在庫管理システム

(51)【国際特許分類】

   F25D 23/00 20060101AFI20241120BHJP

   B65G 1/137 20060101ALI20241120BHJP

   G06Q 10/00 20230101ALI20241120BHJP

【ＦＩ】

F25D23/00 301G

B65G1/137 A

G06Q10/00

【審査請求】未請求

【請求項の数】6

【出願形態】ＯＬ

(21)【出願番号】P 2023079838

(22)【出願日】2023-05-15

(71)【出願人】

【識別番号】399048917

【氏名又は名称】日立グローバルライフソリューションズ株式会社

(74)【代理人】

【識別番号】110000350

【氏名又は名称】ポレール弁理士法人

(72)【発明者】

【氏名】栗山 哲

(72)【発明者】

【氏名】林 正二

(72)【発明者】

【氏名】梅澤 功一

(72)【発明者】

【氏名】京谷 浩平

【テーマコード（参考）】

3F522

3L345

5L010

5L049

【Ｆターム（参考）】

3F522AA10

3F522BB16

3F522BB22

3F522CC09

3F522DD03

3F522DD23

3F522DD26

3F522DD32

3F522FF12

3F522FF24

3F522GG03

3F522GG17

3F522GG37

3F522HH22

3F522LL36

3L345AA02

3L345AA21

3L345EE03

3L345JJ03

3L345JJ13

3L345JJ14

3L345JJ23

3L345JJ26

3L345KK02

3L345KK03

3L345KK04

5L010AA22

5L049AA22

(57)【要約】

【課題】撮像した画像と、在庫リストに格納された食材情報とを、少ない演算量で紐づけることのできる在庫管理システムを提供する。
【解決手段】食材に貼付されたＩＤを読み取る読取部と、前記食材を含む第１画像を取得するカメラと、を用いて、前記食材の在庫を管理する在庫管理システムにおいて、前記読取部による読取結果に基づき、前記ＩＤに対応した食材情報が格納される在庫リストを生成する在庫リスト生成部と、前記カメラが取得した前記第１画像と、前記在庫リストに格納された前記食材情報と、に基づき類似度を算出する類似度算出部と、前記類似度が所定の閾値以上となる前記食材情報を、前記第１画像に紐付ける統合部と、を備えたことを特徴とする。
【選択図】 図２

【特許請求の範囲】

【請求項1】

食材に貼付されたＩＤを読み取る読取部と、前記食材を含む第１画像を取得するカメラと、を用いて、前記食材の在庫を管理する在庫管理システムにおいて、
前記読取部による読取結果に基づき、前記ＩＤに対応した食材情報が格納される在庫リストを生成する在庫リスト生成部と、
前記カメラが取得した前記第１画像と、前記在庫リストに格納された前記食材情報と、に基づき類似度を算出する類似度算出部と、
前記類似度が所定の閾値以上となる前記食材情報を、前記第１画像に紐付ける統合部と、を備えたことを特徴とする在庫管理システム。

【請求項2】

請求項１において、
前記第１画像は、前記食材が貯蔵された状態の貯蔵室内をカメラで撮影した画像であり、
前記第１画像のうち前記食材の領域が指定された場合に、前記統合部によって紐付けられた前記食材情報を表示する表示部を、さらに備えたことを特徴とする在庫管理システム。

【請求項3】

請求項２において、
前記類似度が所定の閾値以上となる前記食材情報が複数あるとき、前記表示部は、それぞれの前記食材情報を並べて表示することを特徴とする在庫管理システム。

【請求項4】

請求項１において、
前記在庫リストには、前記食材情報として、前記ＩＤに対応する外観画像である第２画像も格納され、
前記類似度算出部は、前記第１画像と前記第２画像を比較して、類似度を算出することを特徴とする在庫管理システム。

【請求項5】

請求項４において、
前記第１画像から、前記食材の種別またはパッケージに関する第１の特徴情報を抽出する特徴抽出部を、さらに備え、
前記在庫リストには、前記食材情報として、前記ＩＤに対応する第２の特徴情報も格納され、
前記類似度算出部は、第１画像から抽出された前記第１の特徴情報と、前記在庫リストに格納された前記第２の特徴情報と、を比較して、類似度を算出することを特徴とする在庫管理システム。

【請求項6】

請求項１において、
前記カメラが、取得した動画に基づき前記食材の入庫動作があったと判断したときの時刻を第１の入庫時刻とし、
前記在庫リスト生成部が、前記読取部による読取結果に基づき前記食材の入庫を判定したときの時刻を第２の入庫時刻とすると、
前記類似度算出部は、前記第１画像と、前記第１の入庫時刻と前記第２の入庫時刻との差異が所定の閾値以下となる前記食材情報と、に基づき類似度を算出することを特徴とする在庫管理システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、在庫管理システムに関する。

【背景技術】

【0002】

食材の過剰な在庫による食品ロスの低減に向けて、冷蔵庫などの貯蔵庫に貯蔵される食材の在庫管理システムが提案されている。在庫管理システムの中には、貯蔵庫の内部をカメラで撮影し、撮影画像をスマートフォンなどで確認できるようにしたものもある。さらに、在庫管理システムの中には、食材に付されたＲＦＩＤ（Radio Frequency Identifier）などのタグを元に在庫管理をするものもある。

【0003】

また、撮像した物品の画像と、読み取られたタグ情報と、に基づき、テーブル形式の物品管理情報（在庫リスト）を生成して、当該情報に基づいて在庫管理を行う技術として、特許文献１が知られている。この特許文献１には、「画像物品特定部２３６は、例えば、複数の物品名と複数の画像とを対応付けた対応付けデータにおける複数の画像に対して、撮像部２２４が撮像した物品１０の画像をもとに類似画像検索を実行する。そして、画像物品特定部２３６は、類似度が最も高い画像の類似度が予め定められた閾値より大きい場合に、当該画像に対応付けられた物品名を取得して、物品管理情報更新部２３２に通知する」との記載もある（段落００３６）。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１５－１２５５３５号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

特許文献１に記載の技術では、カメラで撮像した物品画像に類似する画像を検索し、類似度の高い画像から物品名を特定するとともに、タグ情報から特定される物品名との対応付けを行っている。このとき検索される対象は、流通している物品に関する画像であるが、その数は膨大であるため、類似度を計算するための負荷が高くなってしまう。

【0006】

本発明の目的は、撮像した画像と、在庫リストに格納された食材情報とを、少ない演算量で紐づけることのできる在庫管理システムを提供することにある。

【課題を解決するための手段】

【0007】

前述の改題を解決するため、本発明は、食材に貼付されたＩＤを読み取る読取部と、前記食材を含む第１画像を取得するカメラと、を用いて、前記食材の在庫を管理する在庫管理システムにおいて、前記読取部による読取結果に基づき、前記ＩＤに対応した食材情報が格納される在庫リストを生成する在庫リスト生成部と、前記カメラが取得した前記第１画像と、前記在庫リストに格納された前記食材情報と、に基づき類似度を算出する類似度算出部と、前記類似度が所定の閾値以上となる前記食材情報を、前記第１画像に紐付ける統合部と、を備えたことを特徴とする。

【発明の効果】

【0008】

本発明によれば、撮像した画像と、在庫リストに格納された食材情報とを、少ない演算量で紐づけることのできる在庫管理システムを提供することが可能となる。上記した以外の課題、構成および効果は、以下の発明を実施するための形態の説明により明らかにされる。

【図面の簡単な説明】

【0009】

【図1】貯蔵庫の構造を示した鳥観図

【図2】実施例１に係る在庫管理に関する機能ブロック図

【図3】実施例１に係る在庫リストの一例

【図4A】在庫管理のアプリ画面の一例（類似する食材のうち、一方がタップされた状態）

【図4B】在庫管理のアプリ画面の一例（類似する食材のうち、他方がタップされた状態）

【図4C】在庫管理のアプリ画面の一例（同一の食材のうち、一方がタップされた状態）

【図4D】在庫管理のアプリ画面の一例（同一の食材のうち、他方がタップされた状態）

【図5】実施例１に係る在庫管理の動作を示したフロー図

【図6】実施例２に係る在庫管理に関する機能ブロック図

【図7】実施例２に係る在庫リストの一例

【図8】実施例３に係る在庫管理に関する機能ブロック図

【図9】実施例３に係る在庫管理の動作を示したフロー図

【図10】図９におけるステップＳ１２０ｂの詳細を示したフロー図

【図11】実施例４に係る在庫管理の動作を示したフロー図

【図12】実施例５に係る在庫リストの一例

【発明を実施するための形態】

【0010】

以下、図面を参照して本発明の実施形態を説明する。実施例は、本発明を説明するための例示であって、説明の明確化のため、適宜、省略および簡略化がなされている。本発明は、他の種々の形態でも実施することが可能である。特に限定しない限り、各構成要素は単数でも複数でも構わない。

【0011】

また、発明を実施するための形態では、貯蔵庫として冷蔵庫を例に説明するが、収納棚やストッカーなど他の収容庫であっても構わない。

【0012】

同一あるいは同様の機能を有する構成要素が複数ある場合には、同一の符号に異なる添字を付して説明する場合がある。また、これらの複数の構成要素を区別する必要がない場合には、添字を省略して説明する場合がある。

【実施例0013】

本発明の実施例１に係る貯蔵庫の構造ついて、図１を用いて説明する。

【0014】

図１は貯蔵庫の構造を示した鳥観図である。１は冷蔵庫であり、１０は冷蔵庫１が具備する回転扉貯蔵室であり、１１は回転扉貯蔵室１０を封止するための左扉であり、１２は回転扉貯蔵室１０を封止するための右扉であり、２０は第１の引出扉貯蔵室であり、２１は第２の引出扉貯蔵室であり、３０は第３の引出扉貯蔵室であり、４０は第４の引出扉貯蔵室であり、１００は庫内アンテナであり、１１０は庫外アンテナであり、１２０ａはカメラである。図１では、回転扉貯蔵室の左扉１１および右扉１２は閉鎖されており、第１の引出扉貯蔵室２０～第４の引出扉貯蔵室４０も閉鎖されている状態を示している。

【0015】

第１の引出扉貯蔵室２０と第２の引出扉貯蔵室２１は同一の高さ位置に設置され、第３の引出扉貯蔵室３０は第１の引出扉貯蔵室２０および第２の引出扉貯蔵室２１より低い位置に設置され、第４の引出扉貯蔵室４０は第３の引出扉貯蔵室３０より低い位置に設置される。また、回転扉貯蔵室１０は第１の引出扉貯蔵室２０および第２の引出扉貯蔵室２１より高い位置に設置される。ここで、回転扉貯蔵室１０は冷蔵室であり、第１の引出扉貯蔵室２０は製氷室であり、第２の引出扉貯蔵室２１は冷凍室であり、第３の引出扉貯蔵室３０は冷凍室であり、第４の引出扉貯蔵室４０は野菜室である。なお、上記貯蔵室の分類は一例であり、第３の引出扉貯蔵室３０が野菜室で、第４の引出扉貯蔵室４０が冷凍室であっても構わない。

【0016】

庫内アンテナ１００は回転扉貯蔵室１０の庫内天井に設置され、庫外アンテナ１１０およびカメラ１２０ａは冷蔵庫１の上部に左扉１１および右扉１２が開放された状態においても冷蔵庫１より前面方向に突出するように設置された突起部に設置される。庫内アンテナ１００は回転扉貯蔵室１０内に存在するＲＦＩＤタグを読み取り、庫外アンテナ１１０は回転扉貯蔵室１０外に存在するＲＦＩＤタグを読み取るように各々読取領域が設定される。カメラ１２０ａは食材が貯蔵された状態の少なくとも回転扉貯蔵室１０の内部を正面方向から撮影できるように設定され、食材を含む画像（第１画像）を取得する。

【0017】

次に、本発明の実施例１に係る在庫管理動作について、図２～図５を用いて説明する。

【0018】

図２は回転扉貯蔵室１０での在庫管理に関する機能ブロック図であり、図３は在庫リストの一例であり、図４Ａ～図４Ｄはユーザーに提供される在庫管理結果表示の一例であり、図５は回転扉貯蔵室１０での在庫管理に関するシステム動作フローである。

【0019】

図２において、２００は読取部であり、２１０は扉開閉情報生成部であり、２２０は在庫リスト生成部であり、２３０はＩＤ－食材情報データベースであり、２４０は類似度算出部であり、２５０は統合部であり、２６０は表示部であり、３００はカメラ画像（第１画像）であり、４１０は食材の外観画像（第２画像）である。読取部２００は、食材に貼付されたＲＦＩＤタグを読み取るものであり、庫内アンテナ１００および庫外アンテナ１１０を含む。扉開閉情報生成部２１０は、回転扉貯蔵室１０などの扉の開閉を検知するセンサを含む。在庫リスト生成部２２０は、読取部２００による読取結果に基づき、ＩＤに対応した食材情報が格納される在庫リストを生成する。ＩＤ－食材情報データベース２３０は、流通している食材に付されるＩＤごとに、対応する食材情報が記録されたデータベースである。類似度算出部２４０は、カメラ１２０ａが取得したカメラ画像３００と、在庫リストに格納された食材情報（例えば外観画像４１０）と、に基づき、類似度を算出する。統合部２５０は、類似度が所定の閾値以上となる食材情報を、カメラ画像３００に紐付ける。表示部２６０は、回転扉貯蔵室１０などの貯蔵室の内部を撮影したカメラ画像３００や在庫リストなどを表示するものであり、カメラ画像３００のうち所定の食材の領域が指定（タップ）された場合、統合部２５０によって紐付けられた食材情報を、カメラ画像３００に重畳させて表示する。

【0020】

図３において、４００は在庫リストであり、４０１ａはＩＤに対応する食材情報であり、４１０はＩＤに対応する食材の外観画像であり、４２０はＩＤに対応する食材の品名であり、４３０は食材の貯蔵場所（回転扉貯蔵室１０、第１の引出扉貯蔵室２０～第４の引出扉貯蔵室４０）であり、４４０は食材の消費期限（または賞味期限）である。つまり、在庫リスト４００には、冷蔵庫１に貯蔵される食材ごとに、少なくともこれら４つの要素から構成される食材情報４０１ａが格納される。外観画像４１０、品名４２０および消費期限４４０については、在庫リスト生成部２２０が、読取部２００が読み取ったＩＤをＩＤ－食材情報データベース２３０と照合することで、格納される。なお、ここでは説明の簡便化のため、在庫リストを構成する要素としてこれら４つを挙げているが、これ以外に食材が冷蔵庫１に最初に入庫された日時に加えて、ＲＦＩＤタグのＩＤに紐づく生産国、生産者などの要素を具備しても構わない。

【0021】

図４Ａ～図４Ｄにおいて、６００はアプリ画面であり、７００はアプリ画面をタップするユーザーであり、５００ａ～５００ｃはカメラ画像３００ａまたはカメラ画像３００ｂ内の食材位置（領域）に対応した食材候補の内容であり、５１０ａ～５１０ｄは食材である。なお、図４Ａおよび図４Ｂにおいては、カメラ画像３００ａは同一であり、パッケージは類似するものの異なる食材（食材５００ａが〇〇〇納豆、食材５００ｂが〇〇〇豆腐）が貯蔵されている。図４Ｃおよび図４Ｄにおいては、カメラ画像３００ｂは同一であり、同一の食材であるが消費期限（または賞味期限）が異なる（食材５００ｃも食材５００ｄも〇〇〇納豆）が複数貯蔵されている。また、図４Ａではユーザーは食材５００ａをタップしており、図４Ｂではユーザーは食材５００ｂをタップしており、図４Ｃではユーザーは食材５００ｃをタップしており、図４Ｄではユーザーは食材５００ｄをタップしている。

【0022】

図４Ａ～図４Ｄでは、類似度が所定値以上となる食材情報が複数（２つ）あるため、表示部２６０は、それぞれの食材情報を候補として上下に並べて表示している。また、図４Ａおよび図４Ｂでは、類似度の高い食材を優先して上方に表示している。さらに、図４Ｃおよび図４Ｄでは、消費期限（または賞味期限）が近い食材を優先して上方に表示しても良い。このように、カメラ画像内の食材位置と、食材情報を厳密に１対１対応させていないので、類似または同一の食材が複数ある場合でも、食材の在庫管理が可能となる。

【0023】

図５を用いて、本発明の実施例１に係る在庫管理動作フローを説明する。まず、扉開閉情報生成部２１０が「開」情報を出力するか否かが判定される（ステップＳ１００）。ユーザーが回転扉貯蔵室１０の左扉１１または右扉１２を開放した場合、扉開閉情報生成部２１０は「開」情報を出力するため、読取部２００はＲＦＩＤタグの読み取りを開始し、少なくともタグＩＤ、読取時刻、読み取ったアンテナ名称（庫内アンテナ１００または庫外アンテナ１１０）を出力する（ステップＳ１１０）。また、扉開閉情報生成部２１０が「開」情報を出力した場合、カメラ１２０ａは撮影を開始し、少なくともカメラ画像を出力する（ステップＳ１２０ａ）。

【0024】

次に、扉開閉情報生成部２１０が「閉」情報を出力するか否かが判定される（ステップＳ１３０）。所定時間が経過しても「閉」情報が出力されない場合は、再びステップＳ１１０およびステップＳ１２０ａに戻り、ＲＦＩＤタグの読み取りおよび画像の撮影が繰り返される。

【0025】

一方、ユーザーが回転扉貯蔵室１０の左扉１１および右扉１２を閉鎖した場合、扉開閉情報生成部２１０は「閉」情報を出力するため、在庫リスト生成部２２０は読取部２００から出力されるＲＦＩＤタグの読取結果に基づく在庫判定を実施する（ステップＳ１４０）。具体的には、あるＩＤを有するＲＦＩＤタグを庫内アンテナの方が庫外アンテナより遅い時刻まで読み取っていた場合は「入庫」と判定され、逆に庫外アンテナの方が庫内アンテナより遅い時刻まで読み取っていた場合は「出庫」と判定される。また、庫内アンテナでしか読み取れていない場合は「入庫」と判定され、逆に庫外アンテナでしか読み取れていない場合は「出庫」と判定される。さらに、いずれのアンテナでも読み取れていないものの在庫リストにＩＤが存在する場合は「在庫」と判定される。そして、庫内アンテナの方が庫外アンテナより遅い時刻まで読み取っていたものの、在庫リストにＩＤが存在する場合も「在庫」と判定される。

【0026】

ステップＳ１４０にて「入庫」または「在庫」と判定された場合、在庫リスト生成部２２０は、対象の食材のＲＦＩＤタグが持つＩＤ情報をＩＤ－食材情報データベース２３０と照合し、在庫リスト４００を生成する（ステップＳ１５０）。なお、ステップＳ１４０にて「出庫」と判定された場合、在庫リスト生成部２２０は、対象の食材に関する情報を在庫リスト４００から削除する。この削除された食材に関する情報は、「出庫リスト」や冷蔵庫１に貯蔵された履歴がある「履歴リスト」など他のリストとして管理されても構わない。

【0027】

その後、類似度算出部２４０は、ステップＳ１２０ａにおいて出力されたカメラ画像３００と、ステップＳ１５０で生成された在庫リスト４００に格納された外観画像４１０と、を比較し、類似度を算出する（ステップＳ１６０）。さらに、統合部２５０は、類似度が予め設定された閾値以上となる食材情報４０１ａを、カメラ画像３００内の食材が写っている画素領域に紐付け、食材位置に対応した食材候補の内容５００として出力する（ステップＳ１７０）。最後に、表示部２６０は、カメラ画像３００内の食材が写っている画素領域をユーザーがタップした場合、同領域に紐付けられた食材候補の内容５００をアプリ画面上に表示する（ステップＳ１８０）。

【0028】

以上のシステム動作により、パッケージは類似するものの、異なる食材が貯蔵されている場合において、ユーザーがカメラ画像の食材が写っている画素領域をタップ（指定）すると、その食材情報の候補が表示され、ユーザーにカメラ画像をベースとしてより詳細な食材情報を提供できる（図４Ａおよび図４Ｂ）。また、同一の食材であるが消費期限（または賞味期限）が異なる食材が複数貯蔵されている場合においても、ユーザーがカメラ画像の食材が写っている画素領域をタップ（指定）すると、その食材情報の候補が表示されるため、ユーザーにカメラ画像をベースとしてより詳細な食材情報を提供できる（図４Ｃおよび図４Ｄ）。また、冷蔵庫１に貯蔵されている食材の数、つまり在庫リスト４００が有する食材情報４０１ａの数は多くても１００オーダーであり、世の中で流通している食材（商品）の数に比べて圧倒的に少ないため、カメラ画像と食材情報に紐づけられた食材の外観画像との類似度算出の精度を高められると同時に、演算量を低減できる。

【0029】

なお、本発明の実施例１に係る類似度算出部２４０は、カメラ画像３００と在庫リスト４００に格納された食材の外観画像４１０とを比較する動作において、カメラ１２０ａが撮影した貯蔵室（本実施例では回転扉貯蔵室１０）に貯蔵された食材に対応する食材情報４０１ａを在庫リスト４００から予め選択し、当該食材情報４０１ａ（外観画像４１０）とカメラ画像３００とを比較しても構わない。この場合、比較する食材情報４０１ａが選択しない場合に比べて少なくなるため、比較結果の精度が向上するとともに、演算量を低減できる効果がある。

【0030】

また、本発明の実施例１ではＲＦＩＤタグを読み取る庫内アンテナは回転扉貯蔵室１０のみに設置したが、第１の引出扉貯蔵室２０～第４の引出扉貯蔵室４０にも設置して、第１の引出扉貯蔵室～第４の引出扉貯蔵室に貯蔵される食材の在庫リストを生成しても構わない。また、カメラ１２０ａは少なくとも回転扉貯蔵室１０内部に貯蔵された状態の食材の画像（カメラ画像）を取得するように設置したが、第１の引出扉貯蔵室２０～第４の引出扉貯蔵室４０内部に貯蔵された状態の食材の画像（カメラ画像）を取得できるように設置しても構わない。この場合、食材の管理範囲が冷蔵庫１全体に拡張できるという効果がある。

【0031】

なお、食材情報と紐付けるカメラ画像は、カメラが撮像した生画像でも、カメラが撮像した生画像を加工した画像でも、どちらでも良い。さらに、食材情報と紐付けるカメラ画像は、カメラによって取得した動画を画像に加工したものでも良い。

【0032】

なお、扉開閉情報生成部２１０による扉開閉状態の検知は、貯蔵室側に磁気センサを設置し、扉側に磁石を設置し、磁気センサの出力電力の変化量が所定の閾値を超えた場合に「開」または「閉」を判定する構造が望ましい。ただし、磁気センサに限らず、回転扉に設置した角速度センサや加速度センサ、引出扉に設置した加速度センサ、引出扉と貯蔵室との距離を検知するＴＯＦ(Time of Flight)センサなどを用いて、センサ出力の変化量が所定の閾値を超えた場合に「開」または「閉」を判定する構造であっても構わない。また、各貯蔵室内に温度センサまたは湿度センサを設置し、温度または湿度の変化量が所定の閾値を超えた場合に「開」または「閉」を判定する構造であっても構わない。

【実施例0033】

本発明の実施例２に係る貯蔵庫の動作ついて、図６および図７を用いて説明する。
図６は回転扉貯蔵室１０での在庫管理に関する機能ブロック図であり、図７は在庫リストの一例である。

【0034】

図６において、２７０はカメラ画像３００から第１の特徴情報を抽出する特徴抽出部であり、３１０はカメラ画像３００に第１の特徴情報が付加されたものである。ここで、特徴情報とは、食材の種別情報（乳製品、加工肉類、練り製品など）、食材のパッケージ情報（ペットボトル、缶、瓶、紙パックなど）、食材に印字された文字認識情報などである。また、在庫リスト生成部２２０は、ＩＤ－食材情報データベース２３０と照合し、食材情報として第２の特徴情報を含む在庫リスト４００を生成する。図７において、４６１は食材の種別情報であり、４６２は食材のパッケージ情報であり、これらは第２の特徴情報４６０に相当する。

【0035】

本発明の実施例２において、類似度算出部２４０は、カメラ画像３００と外観画像４１０との類似度を算出する際に、特徴抽出部２７０が抽出した第１の特徴情報と、在庫リスト４００に格納された第２の特徴情報４６０と、の比較結果を用いることができる。このとき、類似度算出部２４０は、在庫リスト４００に格納された食材の品名４２０も用いて、類似度を算出しても良い。本発明の実施例２では、類似度を算出するための要素が実施例１に比べて増えるため、類似度算出の精度を高められる効果がある。