(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-11-16
(45)【発行日】2022-11-25
(54)【発明の名称】商品情報提供システム
(51)【国際特許分類】
G06Q 30/02 20120101AFI20221117BHJP
G10L 15/22 20060101ALI20221117BHJP
G10L 13/00 20060101ALI20221117BHJP
G06F 16/00 20190101ALI20221117BHJP
【ＦＩ】
G06Q30/02 470
G10L15/22 300Z
G10L13/00 100M
G06F16/00
【請求項の数】
4
(21)【出願番号】P 2018182790
(22)【出願日】2018-09-27
(65)【公開番号】P2020052833
(43)【公開日】2020-04-02
【審査請求日】2021-07-27
(73)【特許権者】
【識別番号】000002897
【氏名又は名称】大日本印刷株式会社
(74)【代理人】
【識別番号】100091982
【弁理士】
【氏名又は名称】永井 浩之
(74)【代理人】
【識別番号】100091487
【弁理士】
【氏名又は名称】中村 行孝
(74)【代理人】
【識別番号】100082991
【氏名又は名称】佐藤 泰和
(74)【代理人】
【識別番号】100105153
【弁理士】
【氏名又は名称】朝倉 悟
(74)【代理人】
【識別番号】100127465
【弁理士】
【氏名又は名称】堀田 幸裕
(72)【発明者】
【氏名】山田 雄幸
【審査官】塩田 徳彦
(56)【参考文献】
【文献】国際公開第２０１８／０３４０２８（ＷＯ，Ａ１）
【文献】特開２０１４－１０９９１０（ＪＰ，Ａ）
【文献】特開２０１８－１０６５２４（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１３／０１５１３５２（ＵＳ，Ａ１）
【文献】中国実用新案第２０６７１１２４１（ＣＮ，Ｕ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｑ １０／００－９９／００
Ｇ０６Ｆ １６／９０
Ｇ０６Ｆ １６／００
Ｇ１０Ｌ １５／２２
Ｇ１０Ｌ １３／００
(57)【特許請求の範囲】
【請求項1】
商品を取り扱う店内に設置され、前記店内に入店した
ユーザが提示するサンプルに基づいて、前記ユーザとの間で対話をしながら前記ユーザに対して商品情報を提供する商品情報提供システムにおいて、前記ユーザが提示する サンプルを撮影して画像データを得る撮影部と、音声を受けかつ発する音声部と、商品情報を表示する表示部とを有する商品検索端末と、
前記商品検索端末に接続されたサーバとを備え、
前記サーバは送受信部と、商品情報を格納する商品情報記憶部と、前記送受信部に接続され画像データおよび音声データを処理する画像、音声データ処理部と、前記画像、音声データ処理部で生成された画像データおよび音声データに基づいて、検索キーワードおよび特徴画像を生成するキーワード/特徴画像生成部とを有し、前記キーワード/特徴画像生成部で生成された検索キーワードおよび特徴画像に基づいて前記商品情報記憶部内の前記ユーザが提示するサンプルと同一の製造会社名および商品名を含む前記サンプルに対応する商品情報を読み出して前記画像、音声データ処理部へ送り、前記サンプルに対応する商品情報を前記表示部に表示する商品情報提供システム。
【請求項2】
前記商品検索端末の前記表示部は、３Ｄ表示部からなる、請求項１記載の商品情報提供システム。
【請求項3】
前記サーバに、前記サーバからの前記サンプルの画像データを受け、この画像データの解析結果を前記サーバに送る画像解析システムが接続される、請求項１または２記載の商品情報提供システム。
【請求項4】
前記サーバに、前記ユーザとの間の対話中の前記ユーザ側の会話文を受け、接客側の会話文を生成するチャットボットが接続される、請求項１乃至３のいずれか記載の商品情報提供システム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、商品情報提供システムに係り、とりわけユーザが提示するサンプルに基づいて、ユーザとの間で対話をしながら商品情報を提供する商品情報提供システムに関する。
【背景技術】
【0002】
大型の書籍販売店には書籍の検索システムが導入され、この検索システムには、様々な書籍がジャンル別に分類して表示されている。そのため、ユーザがこの書籍の検索システムを用い、好みのジャンルを選択して書籍一覧を表示させることにより、好みに合った書籍を容易に探すことができるようになっている。
【0003】
また、書籍の検索システム上で、店内の情報をキーワードにより検索できるようになされた大型店も多い。このような書籍の検索システムを備えた大型店では、書籍に関連したキーワードを用いて店内を検索することにより、ユーザの好みに合った書籍をより簡単に探すことができるようになっている。
【0004】
しかしながら、上記の様な検索システムは様々な商品を販売しているモールのような大型店には導入されていない。また、キーワードにより商品情報を検索することは容易ではなく、特に不慣れなユーザにとっては検索が困難である。このような場合、ユーザとの間で対話をしながら商品情報を検索する技術も開発されている。しかしながら、この技術では対話の中味は定型の会話文からなり、ユーザとの間でスムーズな対話をすることはできない。
【0005】
他方、ユーザとしては自ら持ち込んだサンプルに基づいて商品情報を検索したい要望もある。
【先行技術文献】
【特許文献】
【0006】
【文献】特開２０１４－１８２５４８号公報
【発明の概要】
【発明が解決しようとする課題】
【0007】
本開示はこのような点を考慮してなされたものであり、ユーザとの間で自由な対話をしながら、かつユーザが提示するサンプルに基づいて商品情報を確実に検索することができる商品情報提供システムを提供することを目的とする。
【課題を解決するための手段】
【0008】
本開示は、ユーザが提示するサンプルに基づいて、前記ユーザとの間で対話をしながら前記ユーザに対して商品情報を提供する商品情報提供システムにおいて、サンプルを撮影して画像データを得る撮影部と、音声を受けかつ発する音声部と、商品情報を表示する表示部とを有する商品検索端末と、前記商品検索端末に接続されたサーバとを備え、前記サーバは送受信部と、商品情報を格納する商品情報記憶部と、前記送受信部に接続され画像データおよび/又は音声データを処理する画像、音声データ処理部と、前記画像、音声データ処理部で生成された画像データおよび/又は音声データに基づいて、検索キーワードおよび/又は特徴画像を生成するキーワード/特徴画像生成部とを有し、前記キーワード/特徴画像生成部で生成された検索キーワードおよび/又は特徴画像に基づいて前記商品情報記憶部内の商品情報を読み出して前記画像、音声データ処理部へ送る、商品情報提供システムである。
【0009】
本開示は、前記商品検索端末の前記表示部は、３Ｄ表示部からなる、商品情報提供システムである。
【0010】
本開示は、前記サーバに、前記サーバからの前記サンプルの画像データを受け、この画像データの解析結果を前記サーバに送る画像解析システムが接続される、商品情報提供システムである。
【0011】
本開示は、前記サーバに、ユーザとの間の対話中のユーザ側の会話文を受け、接客側の会話文を生成するチャットボットが接続される、商品情報提供システムである。
【発明の効果】
【0012】
本開示によれば、ユーザとの間で自由な対話をしながら、かつユーザが提示するサンプルに基づいて商品情報を容易かつ確実に検索することができる。
【図面の簡単な説明】
【0013】
【発明を実施するための形態】
【0014】
以下、図面を参照して商品情報提供システムについて説明する。
【0015】
【0016】
まず図１により商品情報提供システムの概略について述べる。図１１に示すように、商品情報提供システム１０は、大型店内に設置され、ユーザＰが提示するサンプルに基づいて、ユーザＰとの間で対話をしながらユーザＰに対して商品情報を提供するものである。
【0017】
このような商品情報提供システム１０は、サンプル５を撮影して画像データ５ａを得る撮影部（カメラ）１２と、音声を発する音声部１３と、商品情報を表示する表示部１４とを有する商品検索端末１１と、この商品検索端末１１に接続されたサーバ２０とを備えている。
【0018】
このうち商品検索端末１１は図２に示すように商品検索端末本体１１ａと、商品検索端末本体１１ａの上方部に設けられたカメラからなる撮影部１２を有し、商品検索端末本体１１ａの中央部に３Ｄ表示部からなる表示部１４が設けられている。また商品検索端末本体１１ａの下方部に音声部１３が設けられ、この音声部１３は音声を発するスピーカと音声を受けるマイクとを含む。
【0019】
また商品検索端末１１にはインターネット１を介してサーバ２０が接続され、このサーバ２０は送受信部２１と、商品情報を格納する商品情報記憶部２４と、サンプル画像の画像データおよび対話中の音声データを処理する画像、音声データ処理部２２とを有する。またサーバ２０は、画像、音声データ処理部２２で生成された画像データおよび音声データに基づいて、検索キーワードおよび特徴画像を生成するキーワード/特徴画像生成部２３を有する。またキーワード/特徴画像生成部２３で生成された検索キーワードおよび特徴画像に基づいて、データ読み出し部２５が商品情報記憶部２４内の商品情報を読み出して画像、音声データ処理部２２へ送るようになっている。
【0020】
またサーバ２０には、インターネット１を介してサーバ２０からのサンプル５の画像データ５ａを受けて画像データ５ａを画像解析し、画像データ５ａの解析結果をサーバ２０へ送る画像解析システム３０が接続され、この画像解析システム３０は外部サーバ３０ａを含む。
【0021】
さらにサーバ２０には、インターネット１を介してユーザＰとの間の対話中のユーザＰ側の会話文を受け、接客側の会話文を生成するチャットボットシステム３２が接続され、このチャットボットシステム３２は外部サーバ３２ａを含む。
【0022】
ところで商品情報提供システム１０のサーバ２０が備える画像、音声データ生成部２２、キーワード/特徴画像生成部２３、およびデータ読み出し部２５の各機能は、ハードウェア、ＤＳＰ（Digital Signal Processor）、ソフトウェアの何れによっても構成することが可能である。例えばソフトウェアによって構成する場合、これらの各機能は、実際にはサーバ２０内の記憶部２６内に格納された、コンピュータのＣＰＵ、ＲＡＭ、ＲＯＭなどを備えて構成され、ＲＡＭやＲＯＭ、ハードディスクまたは半導体メモリ等の記録媒体に記憶された商品情報提供用プログラムが動作することによって実現される。
【0023】
また商品情報記憶部２４は、ユーザに提案する商品の情報を記憶する。商品情報記憶部２４に記憶する商品情報は、例えば、商品名、商品属性（色、サイズ、男性用か女性用かの性別など）、商品画像、商品の説明文、価格などを含んでいる。
【0024】
またキーワード/特徴画像生成部２３は、画像、音声データ処理部２２で生成された画像データおよび音声データに基づいて検索キーワードおよび特徴画像を生成する。そしてキーワード/特徴画像生成部２３で生成された検索キーワードおよび特徴画像に基づいて商品情報記憶部２４内の商品情報がデータ読み出し部２５により読み出される。そして、データ読み出し部２５で読み出された商品情報は画像、音声データ処理部２２へ送られて、表示部１４で表示される画像データおよび音声部１３から発せられる音声データが生成される。
【0025】
【0026】
まず大型店内に入ったユーザＰは商品検索端末１１の前に立ち、商品検索端末１１との間で対話を開始する。
【0027】
具体的には、商品検索端末１１にはサーバ２０が接続され、このサーバ２０にチャットボットシステム３２が接続されている。ユーザＰは対話中のユーザ側会話文を音声部１３のマイクから商品検索端末１１に送る。次にユーザ側会話文は商品検索端末１１からサーバ２０の送受信部２１から画像、音声データ処理部２２へ送られ、この画像、音声データ処理部２２において音声データが生成されてチャットボットシステム３２へ送られる。次にチャットボットシステム３２では、ユーザ側会話文に回答する接客側会話文の音声データを生成し、この接客側会話文の音声データは画像、音声データ処理部２２から送受信部２１を介して商品検索端末１１へ送られて、音声部１３のスピーカからユーザＰあてに接客側会話文が発せられる。
【0028】
このような手順を繰り返すことにより、ユーザＰと商品検索端末１１との間で対話が実行されて進められる。
【0029】
ところでユーザＰと商品検索端末１１との間で進行する対話文としては以下のものが挙げられる。
【0030】
ユーザＰ「ちょっと聞きたいことがあるんだけど…」
商品検索端末１１「いらっしゃいませ。どのようなご用件でしょうか？」（このとき表示部１４に店員のアバター３５が表示される（図５（ａ）参照））。
商品検索端末１１「いらっしゃいませ。どのようなご用件でしょうか？」（このとき表示部１４に店員のアバター３５が表示される（図５（ａ）参照））。
【0031】
ユーザＰ「これが壊れたんだけど、同一商品は売っている？」
このときユーザＰはサンプル５を商品検索端末１１の撮影部１２に提示する。
このときユーザＰはサンプル５を商品検索端末１１の撮影部１２に提示する。
【0032】
次に商品検索端末１１は「少々お待ちください。」と音声を発して、対話を続ける。
【0033】
その後撮影部１２はサンプル５を撮影して画像データ５ａを得るとともに、撮影部１２からの画像データ５ａはサーバ２０に送られる。画像データ５ａは、次にサーバ２０の送受信部２１から画像、音声データ処理部２２へ送られる。さらに画像データ５ａはサーバ２０から画像解析システム３０に送られ、送られた画像データが解析されて特定の商品が特定される。画像解析システム３０で解析結果はサーバ２０の画像、音声データ処理部２２へ送られる。
【0034】
次に画像、音声データ処理部２２からユーザＰと商品検索端末１１との間の対話中におけるユーザ側会話文と、画像解析システム３０で解析された画像データがキーワード/特徴画像生成部２３へ送られ、このキーワード/特徴画像生成部２３において検索キーワードおよび特徴画像が生成される。
【0035】
次にサーバ２０のキーワード/特徴画像生成部２３において生成されたキーワードに基づいて、データ読み出し部２５により、商品情報記憶部２４内の商品情報が読み出され、商品情報記憶部２４内から読み出された商品情報が画像、音声データ処理部２２へ送られる。次に画像、音声データ処理部２２において、商品情報記憶部２４内から読み出された商品情報に基づいて、商品情報に関する音声データおよび画像データが作成される。
【0036】
次にサーバ２０の画像、音声データ処理部２２で作成された商品情報に関する音声データおよび画像データは、サーバ２０から商品検索端末１１へ送られる。そして音声データは商品検索端末１１の音声部１３のスピーカから音声として外方へ発せられる。
【0037】
この場合、商品検索端末１１は、音声部１３のスピーカから「○○社製の××－△△ですね。生産終了してますが、後継商品があります。」と対話する。同時に商品検索端末１１の表示部１４から商品情報の画像データ５ｂ、例えが商品の外観が外部へ表示される（図５（ｂ）参照）。
【0038】
その後、ユーザＰは「そうなんだ。ありがとう。」と言って対話を終了する。
【0039】
以上のように本実施の形態によれば、ユーザＰは商品検索端末１１との間でチャットボットシステム３２により作成された対話を続けながら、サンプル５を撮影部１２で撮影することにより得られた画像データを用いて必要な商品情報を容易かつ確実に得ることができる。
【0040】
なお、商品検索端末１１の表示部１４から商品情報の画像データ５ｂを表示する例を示したが、これに限らず商品検索端末１１の表示部１４から商品情報の画像データ５ｂを他の背景５ｃと組み合わせてＡＲ表示（Argumented Reality表示）の形態で表示してもよい（図５（ｃ）参照）。
【0041】
【0042】
まず大型店内に入ったユーザＰは商品検索端末１１の前に立ち、商品検索端末１１との間で対話を開始する。
【0043】
具体的には、商品検索端末１１にはサーバ２０が接続され、このサーバ２０にチャットボットシステム３２が接続されている。ユーザＰは対話中のユーザ側会話文を音声部１３のマイクから商品検索端末１１に送る。次にユーザ側会話文は商品検索端末１１からサーバ２０の送受信部２１から画像、音声データ処理部２２へ送られ、この画像、音声データ処理部２２において音声データが生成されてチャットボットシステム３２へ送られる。次にチャットボットシステム３２では、ユーザ側会話文に回答する接客側会話文の音声データを生成し、この接客側会話文の音声データは画像、音声データ処理部２２から送受信部２１を介して商品検索端末１１へ送られて、音声部１３のスピーカからユーザＰあてに接客側会話文が発せられる。
【0044】
このような手順を繰り返すことにより、ユーザＰと商品検索端末１１との間で対話が実行されて進められる。
【0045】
ところでユーザＰと商品検索端末１１との間で進行する対話文としては以下のものが挙げられる。
【0046】
ユーザＰ「ちょっと聞きたいことがあるんだけど…」
商品検索端末１１「いらっしゃいませ。どのようなご用件でしょうか？」（このとき表示部１４に店員のアバター３５が表示される（図５（ａ）参照））。
商品検索端末１１「いらっしゃいませ。どのようなご用件でしょうか？」（このとき表示部１４に店員のアバター３５が表示される（図５（ａ）参照））。
【0047】
ユーザＰ「この商品の裏側がみたいんだけど。」
このときユーザＰはサンプル５を商品検索端末１１の撮影部１２に提示する。
このときユーザＰはサンプル５を商品検索端末１１の撮影部１２に提示する。
【0048】
次に商品検索端末１１は「少々お待ちください。」と音声を発して、対話を続ける。
【0049】
その後撮影部１２はサンプル５を撮影して画像データ５ａを得るとともに、撮影部１２からの画像データ５ａはサーバ２０に送られる。画像データ５ａは、次にサーバ２０の送受信部２１から画像、音声データ処理部２２へ送られる。さらに画像データ５ａはサーバ２０から画像解析システム３０に送られ、送られた画像データが画像解析システム３０内で解析されて特定の商品が特定される。画像解析システム３０で解析結果はサーバ２０の画像、音声データ処理部２２へ送られる。
【0050】
次に画像、音声データ処理部２２からユーザＰと商品検索端末１１との間の対話中におけるユーザ側会話文と、画像解析システム３０で解析された画像データがキーワード/特徴画像生成部２３へ送られ、このキーワード/特徴画像生成部２３において検索キーワードおよび特徴画像が生成される。
【0051】
次にサーバ２０のキーワード/特徴画像生成部２３において生成されたキーワードに基づいて、データ読み出し部２５により、商品情報記憶部２４内の商品情報が読み出され、商品情報記憶部２４内から読み出された商品情報が画像、音声データ処理部２２へ送られる。次に画像、音声データ処理部２２において、商品情報記憶部２４内から読み出された商品情報に基づいて、商品情報に関する音声データおよび画像データが作成される。
【0052】
次にサーバ２０の画像、音声データ処理部２２で作成された商品情報に関する音声データおよび画像データは、サーバ２０から商品検索端末１１へ送られる。そして音声データは商品検索端末１１の音声部１３のスピーカから音声として外方へ発せられる。
【0053】
この場合、商品検索端末１１は、音声部１３のスピーカから「○○社製の××－△△ですね。マニュアル表示します。」と対話する。同時に商品検索端末１１の表示部１４から商品情報の画像データ５ｂ、例えが商品のマニュアルが外部へ表示される。
【0054】
その後、ユーザＰは「そうなんだ。ありがとう。」と言って対話を終了する。
【0055】
以上のように本実施の形態によれば、ユーザＰは商品検索端末１１との間でチャットボットシステム３２により作成された対話を続けながら、サンプル５を撮影部１２で撮影することにより得られた画像データを用いて必要な商品情報を容易かつ確実に得ることができる。なお、上記の実施の形態において、画像、音声データ処理部２２で生成された画像データおよび音声データに基づいて、検索キーワードおよび特徴画像を生成し、この検索キーワードおよび特徴画像に基づいて商品情報記憶部２４内の商品情報を検索して読み出し画像、音声データ処理部２２へ送る例を示したが、これに限らず、画像、音声データ処理部２２で生成された画像データ及び音声データのいずれかのデータに基づいて、検索キーワード又は特徴画像を生成し、この検索キーワード又は特徴画像に基づいて前記商品情報記憶部２４内の商品情報を検索して読み出し、前記画像、音声データ処理部２２へ送ってもよい。
【符号の説明】
【0056】
１ インターネット
５ サンプル
５ａ、５ｂ 画像データ
１０ 商品情報提供システム
１１ 商品検索端末
１２ 撮影部
１３ 音声部
１４ 表示部
２０ サーバ
２１ 送受信部
２２ 画像、音声データ処理部
２３ キーワード/特徴画像生成部
２４ 商品情報記憶部
２５ データ読み出し部
２６ 記憶部
３０ 画像解析システム
３２ チャットボットシステム
５ サンプル
５ａ、５ｂ 画像データ
１０ 商品情報提供システム
１１ 商品検索端末
１２ 撮影部
１３ 音声部
１４ 表示部
２０ サーバ
２１ 送受信部
２２ 画像、音声データ処理部
２３ キーワード/特徴画像生成部
２４ 商品情報記憶部
２５ データ読み出し部
２６ 記憶部
３０ 画像解析システム
３２ チャットボットシステム
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】