特許 7603402 情報処理装置およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-12-12

(45)【発行日】2024-12-20

(54)【発明の名称】情報処理装置およびプログラム

(51)【国際特許分類】

   G06Q 30/0201 20230101AFI20241213BHJP

   G07G 1/12 20060101ALI20241213BHJP

【ＦＩ】

G06Q30/0201

G07G1/12 361Z

【請求項の数】 6

(21)【出願番号】P 2020157617

(22)【出願日】2020-09-18

(65)【公開番号】P2022051241

(43)【公開日】2022-03-31

【審査請求日】2023-05-18

(73)【特許権者】

【識別番号】000003562

【氏名又は名称】東芝テック株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】丸茂 宣之

【審査官】中野 修平

(56)【参考文献】

【文献】国際公開第２０１５／１３７０６５（ＷＯ，Ａ１）

【文献】特表２０１６－５０３９１４（ＪＰ，Ａ）

【文献】国際公開第２０１６／１８９５９４（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ ３０／０２０１

Ｇ０７Ｇ １／１２

(57)【特許請求の範囲】

【請求項1】

客の商品に対する要望を、当該要望の対象となる商品を特定する情報と関連付けて取得する取得部と、
商品と当該商品の属性との関連付けを定義した第１のテーブルと、前記属性と客の要望に含まれるキーワードとの関連付けを定義した第２のテーブルと、を有して、前記取得部が取得した、前記商品に対する要望が含むキーワードを前記第２のテーブルから抽出して、抽出された前記キーワードが、前記商品のいずれの属性に属するかを前記第１のテーブルを参照することによって特定して、前記商品の前記属性に係る客の要望を分析する分析部と、
前記分析部による分析結果を、前記商品に関連付けられた送信先に送信する送信部と、
を備える情報処理装置。

【請求項2】

前記取得部は、
客の商品に対する要望を、前記客が所持する携帯端末で撮影した、要望の対象となる商品の画像と関連付けて取得する、
請求項１に記載の情報処理装置。

【請求項3】

前記分析部は、
前記商品に対する要望に含まれる、前記キーワードの出現数を算出する、
請求項１または請求項２に記載の情報処理装置。

【請求項4】

前記分析部は、
前記商品に対する要望に含まれる、肯定的なキーワードと否定的なキーワードとのそれぞれの出現数を算出する、
請求項３に記載の情報処理装置。

【請求項5】

前記取得部は、音声によって前記客の要望を取得する、
請求項１から請求項４のいずれか１項に記載の情報処理装置。

【請求項6】

コンピュータを、
客の商品に対する要望を、当該要望の対象となる商品を特定する情報と関連付けて取得する取得部と、
商品と当該商品の属性との関連付けを定義した第１のテーブルと、前記属性と客の要望に含まれるキーワードとの関連付けを定義した第２のテーブルと、を有して、前記取得部が取得した、前記商品に対する要望が含むキーワードを前記第２のテーブルから抽出して、抽出された前記キーワードが、前記商品のいずれの属性に属するかを前記第１のテーブルを参照することによって特定して、前記商品の前記属性に係る客の要望を分析する分析部と、
前記分析部による分析結果を、前記商品に関連付けられた送信先に送信する送信部と、
して機能させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施の形態は、情報処理装置およびプログラムに関する。

【背景技術】

【0002】

店舗は、今後より売れる商品はどのような商品かを知る為に、また生産者は、現在生産している商品よりも売れる商品を開発するために、現在販売している商品についての感想や要望を収集して役立てている。

【0003】

しかしながら、このような意見の収集は、一般的に店舗や生産者側が作成したアンケートに基づく場合が多い（例えば、特許文献１）。

【0004】

一方で、消費者は購入した商品に対して不満がある場合、より良い商品を購入するため、商品に対する要望を、ＷＥＢ（World Wide Web）サイトやＳＮＳ（Social Networking Service）を用いて発信する場合がある。

【0005】

店舗や生産者が、このような消費者の感想や要望を収集するには、消費者が登録したＷＥＢサイトやＳＮＳを参照して、欲しい情報を収集する必要がある。しかしながら、膨大な情報の中から必要な情報のみを取捨選択するのは、手間がかかる作業であった。

【発明の概要】

【発明が解決しようとする課題】

【0006】

本発明が解決しようとする課題は、商品に対する客の要望を、客自身の言葉で容易に取得することができる情報処理装置およびプログラムを提供することである。

【課題を解決するための手段】

【0007】

実施の形態の情報処理装置は、取得部と、分析部と、送信部とを備える。取得部は、客の商品に対する要望を、当該要望の対象となる商品を特定する情報と関連付けて取得する。分析部は、商品と当該商品の属性との関連付けを定義した第１のテーブルと、属性と客の要望に含まれるキーワードとの関連付けを定義した第２のテーブルと、を有して、取得部が取得した、商品に対する要望が含むキーワードを第２のテーブルから抽出して、抽出されたキーワードが、商品のいずれの属性に属するかを第１のテーブルを参照することによって特定して、商品の属性に係る客の要望を分析する。送信部は、分析部による分析結果を、商品に関連付けられた送信先に送信する。

【図面の簡単な説明】

【0008】

【図1】図１は、実施の形態の要望分析システムの構成の一例を示すシステム構成図である。

【図2】図２は、実施の形態の店舗サーバのハードウエア構成の一例を示すハードウエアブロック図である。

【図3】図３は、実施の形態の携帯端末のハードウエア構成の一例を示すハードウエアブロック図である。

【図4】図４は、実施の形態の店舗サーバの機能構成の一例を示す機能ブロック図である。

【図5】図５は、実施の形態の携帯端末の機能構成の一例を示す機能ブロック図である。

【図6】図６は、携帯端末に表示される、オブジェクト認識の結果を示す画面の一例を示す図である。

【図7】図７は、認識された商品の商品情報を示す画面の一例を示す図である。

【図8】図８は、音声入力した要望を示す画面の一例を示す図である。

【図9】図９は、要望の分析を行うために登録するワードの一例を示す図である。

【図10】図１０は、要望の分析結果の一例を示す図である。

【図11】図１１は、要望の送付先である生産者リストの一例を示す図である。

【図12】図１２は、実施の形態の携帯端末が行う処理の流れの一例を示すフローチャートである。

【図13】図１３は、携帯端末が行う要望入力処理の流れの一例を示すフローチャートである。

【図14】図１４は、携帯端末が行う商品登録処理および決済処理の流れの一例を示すフローチャートである。

【図15】図１５は、実施の形態の店舗サーバが行う処理の流れの一例を示すフローチャートである。

【図16】図１６は、店舗サーバが行う要望認識処理の流れの一例を示すフローチャートである。

【発明を実施するための形態】

【0009】

（実施の形態）
本発明の実施の形態である要望分析システム１０について説明する。

【0010】

（要望分析システムの全体構成）
まず、図１を用いて、要望分析システム１０の全体構成を説明する。図１は、第１の実施の形態の要望分析システムの構成の一例を示すシステム構成図である。

【0011】

要望分析システム１０は、店舗サーバ１２と、携帯端末１４と、生産者サーバ１６とを備える。

【0012】

店舗サーバ１２は、携帯端末１４と無線通信で接続される。店舗サーバ１２は、携帯端末１４から、当該携帯端末１４で決済された内容を示す決済情報を取得する。また、店舗サーバ１２は、客が携帯端末１４で入力した、商品に対する要望を取得する。そして、店舗サーバ１２は、客が入力した商品に対する要望の内容を分析する。また、店舗サーバ１２は、要望の分析結果を、該当する商品の生産者と関連付いた宛先に送信する。店舗サーバ１２は、本開示における情報処理装置の一例である。

【0013】

携帯端末１４は、店舗に会員登録している客が所持して、当該客が店舗で商品を購入した際に、購入した商品に係る決済を行う、いわゆるスマホＰＯＳ（Point Of Sales）として機能する。また、携帯端末１４は、客の操作に基づいて、客が選択した商品に対する要望の入力を受け付ける。商品の選択は、携帯端末１４が備えるカメラよって、要望を入力したい商品の画像を撮影してもよいし、携帯端末１４をインターネットに接続して、キーワード入力等による情報検索を行うことによって選択してもよい。

【0014】

そして、選択された商品に対する要望を、携帯端末１４に向かって喋って入力してもよいし、携帯端末１４のタッチパネルを利用してテキスト入力してもよい。

【0015】

生産者サーバ１６は、店舗サーバ１２と通信可能に接続されて、店舗サーバ１２から、当該店舗サーバ１２が分析した商品に対する要望を、当該商品と関連付けて取得する。

【0016】

（店舗サーバのハードウエア構成）
次に、図２を用いて、店舗サーバ１２のハードウエア構成を説明する。図２は、実施の形態の店舗サーバのハードウエア構成の一例を示すハードウエアブロック図である。

【0017】

店舗サーバ１２は、制御部２１と、記憶部２２と、入出力コントローラ２４と、通信インタフェース２５とを備える。

【0018】

制御部２１は、ＣＰＵ（Central Processing Unit）２１ａと、ＲＯＭ（Read Only Memory）２１ｂと、ＲＡＭ（Random Access Memory）２１ｃとを備えた一般的なコンピュータの構成を有する。ＣＰＵ２１ａは、ＲＯＭ２１ｂや後述する記憶部２２に記憶された各種プログラムやデータファイル等を読み出して、ＲＡＭ２１ｃに展開する。ＣＰＵ２１ａは、ＲＡＭ２１ｃに展開された各種プログラムやデータファイル等に従って動作して、店舗サーバ１２の全体の制御を司る。

【0019】

制御部２１は、内部バス２３を介して、記憶部２２と、入出力コントローラ２４と、通信インタフェース２５と、それぞれ接続される。

【0020】

記憶部２２は、電源を切っても記憶情報を保持する。記憶部２２は、例えばＨＤＤ（Hard Disk Drive）である。また、ＨＤＤの代わりに、フラッシュメモリ等の不揮発性メモリを備えてもよい。記憶部２２は、制御プログラムＰ１を含むプログラム等を記憶する。制御プログラムＰ１は、店舗サーバ１２が備える機能を発揮させるためのプログラムである。

【0021】

なお、制御プログラムＰ１は、ＲＯＭ２１ｂに予め組み込まれて提供されてもよい。また、制御プログラムＰ１は、制御部２１にインストール可能な形式又は実行可能な形式のファイルで、ＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disc）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。さらに、制御プログラムＰ１を、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、制御プログラムＰ１を、インターネット等のネットワーク経由で提供または配布するように構成してもよい。

【0022】

記憶部２２は、更に、商品マスタＭと、売上ファイルＦと、オブジェクト認識辞書Ｄ１と、音声認識辞書Ｄ２と、構文解析辞書Ｄ３と、キーワードファイルＫと、要望分析ファイルＴと、送信先ファイルＵとを記憶する。

【0023】

商品マスタＭは、商品コードに対応させて、商品の名称、単価等の商品情報を格納したマスタファイルである。なお、商品マスタＭは、店舗サーバ１２と接続された非図示の上位サーバと通信を行うことによって、店舗に入荷する商品に応じて随時更新される。

【0024】

売上ファイルＦは、決済毎の売上の明細情報を記憶したファイルである。売上ファイルＦは、少なくとも、客を識別する識別情報と、商品の購入日と、商品を一意に特定する商品識別情報と、購入数と、単価と、税抜き合計金額と、税込み合計金額と、決済方法とを含む。決済方法とは、電子マネー決済、クレジット決済等の決済方法を示す。

【0025】

オブジェクト認識辞書Ｄ１は、携帯端末１４から送信された商品の画像が示す商品を一意に特定するために用いる、商品の外観の特徴を登録した辞書である。

【0026】

音声認識辞書Ｄ２は、携帯端末１４から送信された、客が入力した音声を認識するために用いる各種辞書である。音声認識を行うためには、一般に、音響モデルと、単語モデルと、言語モデルとを利用する。音響モデルは、入力された音声信号の中から音素を抽出するためのモデルである。単語モデルは、音響モデルを用いて抽出した音素の組み合わせから単語を特定するモデルである。言語モデルは、特定された単語同士のつながりを分析して文章を完成させるためのモデルである。

【0027】

構文解析辞書Ｄ３は、音声認識された文章の構造を構文解析するために用いる辞書である。構文解析を行うためには、一般に文法規則が用いられる。

【0028】

キーワードファイルＫは、客の要望の中に含まれると想定される各種ワードを記憶したファイルである。詳しくは後述する。

【0029】

要望分析ファイルＴは、客の要望の中に含まれるワードの種類と出現頻度等を分析した結果を記憶したファイルである。詳しくは後述する。

【0030】

送信先ファイルＵは、要望分析ファイルＴの送信先を、商品と関連付けて記憶したファイルである。詳しくは後述する。

【0031】

入出力コントローラ２４は、制御部２１と、入出力機器であるモニタ２６と、タッチパネル２７と、キーボード２８とを接続する。

【0032】

モニタ２６は、店舗サーバ１２が出力する各種画像情報を表示する。

【0033】

タッチパネル２７およびキーボード２８は、店舗サーバ１２に対して、各種操作情報を入力する。

【0034】

通信インタフェース２５は、携帯端末１４との間で無線接続を確立させる。店舗サーバ１２は、携帯端末１４から、客の認証情報および決済情報を受信する。また、店舗サーバ１２は、携帯端末１４から、客が入力した、商品に対する要望を取得する。また、通信インタフェース２５は、生産者サーバ１６との間で無線接続を確立させる。店舗サーバ１２は、要望分析ファイルＴに含まれる商品と関連付いた生産者サーバ１６に対して、当該要望分析ファイルＴを送信する。

【0035】

（携帯端末のハードウエア構成）
次に、図３を用いて、携帯端末１４のハードウエア構成を説明する。図３は、実施の形態の携帯端末のハードウエア構成の一例を示すハードウエアブロック図である。

【0036】

携帯端末１４は、制御部３１と、記憶部３２と、入出力コントローラ３４と、通信インタフェース３５とを備える。

【0037】

制御部３１は、ＣＰＵ３１ａと、ＲＯＭ３１ｂと、ＲＡＭ３１ｃとを備えた一般的なコンピュータの構成を有する。ＣＰＵ３１ａは、ＲＯＭ３１ｂや後述する記憶部３２に記憶された各種プログラムやデータファイル等を読み出して、ＲＡＭ３１ｃに展開する。ＣＰＵ３１ａは、ＲＡＭ３１ｃに展開された各種プログラムやデータファイル等に従って動作して、携帯端末１４の全体の制御を司る。

【0038】

制御部３１は、内部バス３３を介して、記憶部３２と、入出力コントローラ３４と、通信インタフェース３５と、それぞれ接続される。

【0039】

記憶部３２は、電源を切っても記憶情報を保持する。記憶部３２は、例えばＨＤＤである。また、ＨＤＤの代わりに、フラッシュメモリ等の不揮発性メモリを備えてもよい。記憶部３２は、制御プログラムＰ２を含むプログラム等を記憶する。制御プログラムＰ２は、携帯端末１４が備える機能を発揮させるためのプログラムである。

【0040】

記憶部３２は、更に、商品登録ファイルＲと、決済ファイルＳとを記憶する。

【0041】

商品登録ファイルＲは、客が購入する商品を登録したファイルである。商品登録ファイルＲは、少なくとも、商品を一意に特定する商品識別情報と、購入数と、単価と、税抜き合計金額とを含む。

【0042】

決済ファイルＳは、客が購入する商品に係る決済内容を登録したファイルである。決済ファイルＳは、少なくとも、客を識別する識別情報と、商品の購入日と、商品を一意に特定する商品識別情報と、購入数と、単価と、税抜き合計金額と、税込み合計金額と、決済方法とを含む。

【0043】

入出力コントローラ３４は、制御部３１と、入出力機器であるモニタ３６と、タッチパネル３７と、カメラ３８と、マイク３９とを接続する。

【0044】

モニタ３６は、携帯端末１４が出力する各種画像情報を表示する。

【0045】

タッチパネル３７は、携帯端末１４に対して、各種操作情報を入力する。タッチパネル３７には、例えば、客が購入する全ての商品の登録が完了した際に、決済処理の開始を指示する締めボタン等の複数のボタンが割り付けられている。

【0046】

カメラ３８は、客が購入する商品を登録する際に、商品に付されたバーコード等のコードシンボルを読み取る。カメラ３８は、携帯端末１４に内蔵された、例えばＣＣＤやＣＭＯＳ等の撮像素子を用いたセンサである。

【0047】

マイク３９は、客の発話を検出して音声信号に変換する。変換された音声信号は、携帯端末１４に一時記憶される。

【0048】

通信インタフェース３５は、携帯端末１４と店舗サーバ１２との間で無線通信を確立させる。また、通信インタフェース３５は、携帯端末１４をインターネットと接続させる。

【0049】

（店舗サーバの機能構成）
次に、図４を用いて、店舗サーバ１２の機能構成を説明する。図４は、実施の形態の店舗サーバの機能構成の一例を示す機能ブロック図である。

【0050】

店舗サーバ１２の制御部２１は、制御プログラムＰ１をＲＡＭ２１ｃに展開して動作させることによって、図４に示す通信接続部４１と、顧客情報取得部４２と、入力情報取得部４３と、オブジェクト認識部４４と、音声認識部４５と、テキスト分析部４６と、認識結果送信部４７と、認識確認結果取得部４８と、要望分析部４９と、要望送信部５０と、買上情報取得部５１とを機能部として実現する。

【0051】

通信接続部４１は、携帯端末１４との間で無線通信を確立させる。

【0052】

顧客情報取得部４２は、携帯端末１４から送信された顧客情報を読み取ることによって、店舗の会員であることを認証する認証処理を行う。具体的には、客は入店した際に、携帯端末１４のカメラ３８によって、店舗の入口に設置されたＱＲコード（登録商標）等のコードシンボルを読み取る。認証処理が成功すると、店舗サーバ１２と携帯端末１４とが無線接続される。そして、顧客情報読取部５２は、携帯端末１４に格納されている顧客情報（例えば顧客ＩＤ）を読み取る。

【0053】

入力情報取得部４３は、客の商品に対する要望を、当該要望の対象となる商品を特定する情報と関連付けて取得する。具体的には、入力情報取得部４３は、携帯端末１４から、当該携帯端末１４で取得した、要望の対象となる商品の画像と、当該商品に対する客の要望とを取得する。客の要望は、当該客が発話した音声信号であってもよいし、客が携帯端末１４に入力したテキスト情報であってもよい。なお、商品の画像は、当該商品を一意に特定することが可能な、商品名等を含むテキスト情報であってもよい。なお、入力情報取得部４３は、本開示における取得部の一例である。

【0054】

オブジェクト認識部４４は、携帯端末１４から送信された画像に写る商品を、オブジェクト認識辞書Ｄ１を用いて、一意に特定する。特定された結果は、例えば商品コードや商品名で出力される。

【0055】

音声認識部４５は、携帯端末１４から送信された客の音声を、音声認識辞書Ｄ２を用いて認識する。

【0056】

テキスト分析部４６は、音声認識部４５が認識した客の要望を、構文解析することによって文章に書き起こす、いわゆるディクテーション（Dictation）を行う。

【0057】

認識結果送信部４７は、オブジェクト認識部４４と音声認識部４５との認識結果を携帯端末１４に送信する。

【0058】

認識確認結果取得部４８は、認識結果送信部４７が携帯端末１４に送信した認識結果に対する、客の確認結果を取得する。

【0059】

要望分析部４９は、商品毎に、客の要望に含まれる、予め設定されたワードの出現頻度を分析する。なお、要望分析部４９は、本開示における分析部の一例である。

【0060】

要望送信部５０は、要望分析部４９による分析結果を、商品に関連付けられた送信先に送信する。なお、要望送信部５０は、本開示における送信部の一例である。

【0061】

買上情報取得部５１は、客が、携帯端末１４によって、購入する商品の登録および決済を行った結果を取得する。より具体的には、買上情報取得部５１は、決済が完了した際に、携帯端末１４から、商品登録ファイルＲと決済ファイルＳとを取得する。

【0062】

（携帯端末の機能構成）
次に、図５を用いて、携帯端末１４の機能構成を説明する。図５は、実施の形態の携帯端末の機能構成の一例を示す機能ブロック図である。

【0063】

携帯端末１４の制御部３１は、制御プログラムＰ２をＲＡＭ２１ｃに展開して動作させることによって、図５に示す通信接続部６１と、顧客情報送信部６２と、画像取得部６３と、情報検索部６４と、音声取得部６５と、テキスト情報取得部６６と、入力情報送信部６７と、認識結果取得部６８と、認識結果確認部６９と、認識確認結果送信部７０と、コードシンボル読取部７１と、商品登録処理部７２と、決済処理部７３と、買上情報送信部７４と、表示制御部７５と、操作制御部７６とを機能部として実現する。

【0064】

通信接続部６１は、店舗サーバ１２との間で無線通信を確立させる。

【0065】

顧客情報送信部６２は、認証のために、店舗サーバ１２に対して、顧客情報（例えば顧客ＩＤ）を送信する。

【0066】

画像取得部６３は、カメラ３８によって、要望の対象となる商品の画像を取得する。

【0067】

情報検索部６４は、インターネット等から、要望の対象となる商品を検索する。

【0068】

音声取得部６５は、マイク３９によって、客の商品に対する要望を音声信号として取得する。

【0069】

テキスト情報取得部６６は、タッチパネル３７によって入力された、客の商品に対する要望をテキスト情報として取得する。

【0070】

入力情報送信部６７は、携帯端末１４が取得した商品の画像、および音声信号またはテキスト情報を店舗サーバ１２に送信する。

【0071】

認識結果取得部６８は、店舗サーバ１２から、オブジェクト認識部４４による商品の画像の認識結果と、音声認識部４５およびテキスト分析部４６による客の発話の認識結果とを取得する。

【0072】

認識結果確認部６９は、認識結果取得部６８が取得した認識結果をモニタ３６に表示する。そして、認識結果確認部６９は、客に対して、認識結果の確認を要求する。そして、認識結果確認部６９は、客の確認結果を取得する。

【0073】

認識確認結果送信部７０は、認識結果確認部６９が確認した認識結果を、店舗サーバ１２に送信する。

【0074】

コードシンボル読取部７１は、カメラ３８を用いて、客が購入する商品に付されたバーコード等のコードシンボルを読み取る。

【0075】

商品登録処理部７２は、コードシンボル読取部７１が読み取ったコードシンボルに記録された商品コードと商品マスタＭとを照合することによって、客が購入する商品を一意に特定する。そして、商品登録処理部７２は、一意に特定された商品を、購入商品として登録して、商品登録ファイルＲを生成する。なお、商品登録処理部７２は、商品コードを店舗サーバ１２に送信して、店舗サーバ１２において、商品コードと商品マスタＭとの照合を行う。そして、携帯端末１４は、店舗サーバ１２から照合結果を取得する。

【0076】

決済処理部７３は、例えば、タッチパネル３７の締めボタンが押されたことを検出した際に、その時点で登録されている商品に対する決済を行う。そして、決済処理部７３は、決済ファイルＳを生成する。

【0077】

買上情報送信部７４は、商品登録処理部７２が生成した商品登録ファイルＲと、決済処理部７３が生成した決済ファイルＳとを店舗サーバ１２に送信する。

【0078】

表示制御部７５は、モニタ３６に、前記した各部が行う処理に応じた画像情報を出力する。

【0079】

操作制御部７６は、タッチパネル３７に対してなされた操作を検出することによって、携帯端末１４に対して、なされた操作に応じた制御を行わせる。

【0080】

（商品に対する要望の入力方法）
次に、図６から図８を用いて、商品に対する要望の入力方法を説明する。図６は、携帯端末に表示される、オブジェクト認識の結果を示す画面の一例である。図７は、認識された商品の商品情報を示す画面の一例である。図８は、音声入力した要望を示す画面の一例である。

【0081】

客は、店内において、要望を入力したい商品を探し、携帯端末１４のカメラ３８で、当該商品の画像を撮影する。携帯端末１４の画像取得部６３は、撮影された画像を取得する。そして、入力情報送信部６７は、携帯端末１４が取得した商品の画像を店舗サーバ１２に送信する。

【0082】

店舗サーバ１２の入力情報取得部４３は、携帯端末１４から送信された商品の画像を取得する。そして、オブジェクト認識部４４は、入力情報取得部４３が取得した画像に対してオブジェクト認識を行って、当該商品を一意に特定する。そして、認識結果送信部４７は、オブジェクト認識部４４による認識結果を携帯端末１４に送信する。

【0083】

携帯端末１４の認識結果取得部６８は、店舗サーバ１２から、オブジェクト認識部４４による商品の画像の認識結果を取得する。そして、認識結果確認部６９は、表示制御部７５に対して、携帯端末１４のモニタ３６に、図６に示す商品選択画面３６ａを表示させる。

【0084】

商品選択画面３６ａには、商品画像８０と、商品候補リスト８１と、決定ボタン８２と、終了ボタン８３とが表示される。

【0085】

客は、商品候補リスト８１に表示された商品候補の中から、正しい候補を選択する。操作制御部７６は、客のタッチパネル３７に対する操作を検出することによって、選択された商品を検出する。そして、操作制御部７６は、更に、決定ボタン８２が押下されたことを検出することによって、商品を一意に決定する。その後、終了ボタン８３が押下されたことが検出されると、表示制御部７５は、商品選択画面３６ａを消去する。そして、認識確認結果送信部７０は、一意に決定した商品名を、店舗サーバ１２に送信する。

【0086】

客は、携帯端末１４をインターネットに接続することによって、一意に決定した商品に係る各種情報を得ることができる。図７は、このようにして携帯端末１４のモニタ３６に表示された、商品情報画面３６ｂの一例である。

【0087】

商品情報画面３６ｂには、商品画像８０と、商品情報８４と、要望入力ボタン８５と、終了ボタン８３とが表示される。なお、商品画像８０の上部には、一意に決定した商品名が表示される。

【0088】

客は、商品情報８４に表示された各種情報を閲覧することができる。そして、一意に決定した商品に対して要望を入力したい場合には、要望入力ボタン８５を押下する。操作制御部７６が、要望入力ボタン８５が押下されるのを検出した場合に、表示制御部７５は、モニタ３６に、図８に示す要望入力画面３６ｃを表示する。なお、商品情報画面３６ｂにおいて終了ボタン８３が押下された場合は、要望入力の意思がないとして、携帯端末１４は処理を終了する。

【0089】

要望入力画面３６ｃには、商品画像８０と、開始ボタン８６と、終了ボタン８３と、要望表示ウインドウ８７と、完了ボタン８８と、再入力ボタン８９とが表示される。

【0090】

開始ボタン８６が押下されると、音声取得部６５は、マイク３９によって、客の商品に対する要望を音声信号として取得する。音声取得部６５は、終了ボタン８３が押下されるまでの間、音声信号の取得を継続する。

【0091】

終了ボタン８３が押下されると、入力情報送信部６７は、取得された音声信号を店舗サーバ１２に送信する。

【0092】

店舗サーバ１２の入力情報取得部４３は、携帯端末１４から送信された音声信号を取得する。そして、音声認識部４５は、入力情報取得部４３が取得した音声信号に対して音声認識を行う。そして、テキスト分析部４６は、音声認識部４５が認識した結果を、構文解析することによって文章に書き起こす。その後、認識結果送信部４７は、音声認識部４５およびテキスト分析部４６による認識結果を携帯端末１４に送信する。

【0093】

携帯端末１４の認識結果取得部６８は、店舗サーバ１２から、音声認識部４５およびテキスト分析部４６による音声信号の認識結果を取得する。そして、認識結果確認部６９は、表示制御部７５に対して、要望表示ウインドウ８７に認識結果を表示させる。

【0094】

要望表示ウインドウ８７に表示された認識結果が正しい場合、客は完了ボタン８８を押下する。操作制御部７６は、完了ボタン８８が押下されたことを検出すると、表示制御部７５は、要望入力画面３６ｃを消去する。そして、認識確認結果送信部７０は、音声信号の認識結果が正しい旨を店舗サーバ１２に送信する。

【0095】

なお、要望表示ウインドウ８７に表示された認識結果が間違っている場合、客は再入力ボタン８９を押下する。再入力ボタン８９が押下されると、要望表示ウインドウ８７に表示されていた認識結果が消去されて、再び音声入力が可能な状態になる。そして、客は再び開始ボタン８６を押下して、商品に対する要望を発話する。以下、前記した処理が繰り返される。

【0096】

なお、図示はしないが、客の要望は、テキスト入力によって入力してもよい。また、音声認識に間違いがあった場合に、要望表示ウインドウ８７に表示された認識結果を、客が自らテキスト編集することによって訂正してもよい。

【0097】

（商品に対する要望の分析方法）
次に、図９と図１０を用いて、商品に対する要望の分析方法を説明する。図９は、要望の分析を行うために登録するワードの一例を示す図である。図１０は、要望の分析結果の一例を示す図である。

【0098】

客の要望を分析するために登録されたワードは、前記したキーワードファイルＫに登録される。キーワードファイルＫは、図９（ａ）に示す属性ファイルＫａと、図９（ｂ）に示すワードファイルＫｂとを備える。

【0099】

属性ファイルＫａは、商品毎にワードの属性を登録したファイルである。属性ファイルＫａには、商品コード９０と、商品名９１と、キーワードの属性９２とが、互いに関連付けられて登録される。

【0100】

ワードファイルＫｂは、ワードの各属性に該当する具体的なワード９３を登録したファイルである。ワードファイルＫｂには、キーワードの属性９２と具体的なワード９３とが関連付けられて登録される。なお、ワード９３は、本開示におけるキーワードの一例である。ワード９３は、属性９２のそれぞれに対して、肯定的なワードと否定的なワードとが登録される。なお、ワードファイルＫｂに登録された各ワード９３に対して、肯定的なワードを示すフラグと、否定的なワードを示すフラグとを付与してもよい。

【0101】

店舗サーバ１２の要望分析部４９は、入力された客の要望の中から、ワードファイルＫｂに登録されたワード９３を抽出する。更に、要望分析部４９は、同一商品に対する複数の客の要望を分析することによって、ワード９３の出現頻度を算出する。

【0102】

図１０は、要望分析部４９による分析結果の一例を示す。要望分析ファイルＴには、図１０に示すように、商品１に関する複数の要望を分析した結果が格納される。

【0103】

要望分析ファイルＴには、商品名９５と、各商品に対する要望の解析結果９６とが関連付けて格納される。商品名９５は、要望の対象となる商品名を格納する。なお、商品名は、データ管理を容易にするため、一般に商品コードの形式で格納される。

【0104】

解析結果９６は、味、金額等の属性毎に、各属性に関連付けられた複数のワード９３の出現頻度を格納する。なお、図１０には図示しないが、更に、各商品に対して要望を寄せた客の数を格納してもよい。また、肯定的なワード９３の出現頻度と、否定的なワード９３の出現頻度とを数値化してもよい。

【0105】

（商品に対する要望の送信方法）
次に、図１１を用いて、商品に対する要望の送信方法を説明する。図１１は、要望の送付先である生産者リストの一例を示す図である。

【0106】

生産者リストは、送信先ファイルＵで管理される。送信先ファイルＵには、生産者コード９７と、生産者名９８と、メールアドレス９９と、電話番号１００と、商品名１０１とが関連付けて格納される。

【0107】

生産者コード９７は、各生産者を一意に特定する識別番号である。

【0108】

生産者名９８は、各生産者のメーカ名である。

【0109】

メールアドレス９９は、各生産者に要望を送信する際のメールアドレスである。

【0110】

電話番号１００は、各生産者の電話番号である。

【0111】

商品名１０１は、各生産者が生産した商品名である。なお商品名は、一般に商品コードの形式で格納される。

【0112】

店舗サーバ１２の要望送信部５０は、例えば月に１回等の定期的なタイミングで、要望分析ファイルＴに格納された要望分析結果にアクセスする。そして、要望送信部５０は、要望分析ファイルＴと送信先ファイルＵとを比較参照することによって、要望分析ファイルＴに格納された各要望の対象となる商品の生産者を特定する。

【0113】

そして、要望送信部５０は、特定した生産者のメールアドレスに対して、要望分析ファイルＴに格納された解析結果９６を送信する。そして、要望送信部５０は、要望分析ファイルＴの解析結果９６のうち、生産者にメール送信した解析結果９６をリセットする。

【0114】

（要望分析システムが行う処理の流れ）
次に、図１２から図１６を用いて、要望分析システム１０が行う処理の流れを説明する。

【0115】

（携帯端末が行う処理の流れ）
まず、図１２から図１４を用いて、携帯端末１４が行う処理の流れを説明する。図１２は、実施の形態の携帯端末が行う処理の流れの一例を示すフローチャートである。図１３は、携帯端末が行う要望入力処理の流れの一例を示すフローチャートである。図１４は、携帯端末が行う商品登録処理および決済処理の流れの一例を示すフローチャートである。

【0116】

まず、図１２を用いて、携帯端末１４が行う処理全体の流れを説明する。

【0117】

顧客情報送信部６２は、携帯端末１４と無線接続された店舗サーバ１２に対して、顧客情報を送信する（ステップＳ１１）。

【0118】

顧客情報が認証されると、通信接続部６１は、携帯端末１４と店舗サーバ１２との無線接続を確立する（ステップＳ１２）。

【0119】

この後、携帯端末１４は、客の要望を取得する要望入力処理を行う（ステップＳ１３）。要望入力処理の詳細は後述する（図１３参照）。

【0120】

そして、携帯端末１４は、客が買い物を行う際の商品登録処理と決済処理とを行う（ステップＳ１４）。商品登録処理と決済処理の詳細は後述する（図１４参照）。

【0121】

通信接続部６１は、携帯端末１４と店舗サーバ１２との無線接続を保持できるかを判定する（ステップＳ１５）。携帯端末１４と店舗サーバ１２との無線接続を保持できると判定される（ステップＳ１５：Ｙｅｓ）とステップＳ１３に戻る。一方、携帯端末１４と店舗サーバ１２との無線接続を保持できると判定されない（ステップＳ１５：Ｎｏ）とステップＳ１６に進む。

【0122】

ステップＳ１５において、携帯端末１４と店舗サーバ１２との無線接続を保持できると判定されないと、通信接続部６１は、携帯端末１４と店舗サーバ１２との無線接続を切断する（ステップＳ１６）。その後、携帯端末１４は、図１２の処理を終了する。

【0123】

（携帯端末が行う要望入力処理の流れ）
次に、図１３を用いて、携帯端末１４が行う要望入力処理の流れを説明する。

【0124】

画像取得部６３は、携帯端末１４のカメラ３８によって、要望の対象となる商品を撮影する（ステップＳ２１）。

【0125】

入力情報送信部６７は、携帯端末１４が取得した商品の画像を店舗サーバ１２に送信する（ステップＳ２２）。

【0126】

認識結果取得部６８は、店舗サーバ１２から、店舗サーバ１２のオブジェクト認識部４４による商品の画像の認識結果を取得する（ステップＳ２３）。

【0127】

認識結果確認部６９は、商品の認識結果が正しいかを判定する（ステップＳ２４）。具体的には、認識結果確認部６９は、認識結果取得部６８が取得した商品の認識結果をモニタ３６に表示して、客に対して、認識結果の確認を要求する（図６参照）。そして、認識結果確認部６９は、客の確認結果を取得する。ステップＳ２４において、商品の認識結果が正しいと判定される（ステップＳ２４：Ｙｅｓ）とステップＳ２５に進む。一方、商品の認識結果が正しいと判定されない（ステップＳ２４：Ｎｏ）とステップＳ２６に進む。

【0128】

ステップＳ２４において、商品の認識結果が正しいと判定されないと、操作制御部７６は、客に対して、商品候補リスト８１（図６参照）を選択させる（ステップＳ２６）。その後、ステップＳ２５に進む。

【0129】

ステップＳ２４において、商品の認識結果が正しいと判定された場合、または、ステップＳ２６において、商品候補リスト８１の中から商品が選択された場合、認識確認結果送信部７０は、確認結果を店舗サーバ１２に送信する（ステップＳ２５）。

【0130】

続いて、音声取得部６５は、携帯端末１４のマイク３９によって、客の商品に対する要望を音声信号として取得する（ステップＳ２７）。

【0131】

入力情報送信部６７は、取得した音声信号を店舗サーバ１２に送信する（ステップＳ２８）。

【0132】

認識結果取得部６８は、店舗サーバ１２から、音声認識部４５およびテキスト分析部４６による客の発話の認識結果を取得する（ステップＳ２９）。

【0133】

認識結果確認部６９は、客の要望の認識結果が正しいかを判定する（ステップＳ３０）。具体的には、認識結果確認部６９は、認識結果取得部６８が取得した客の要望の認識結果をモニタ３６に表示して、客に対して、認識結果の確認を要求する（図８参照）。そして、認識結果確認部６９は、客の確認結果を取得する。ステップＳ３０において、客の要望の認識結果が正しいと判定される（ステップＳ３０：Ｙｅｓ）とステップＳ３１に進む。一方、客の要望の認識結果が正しいと判定されない（ステップＳ３０：Ｎｏ）と、ステップＳ２７に戻って再入力を行わせる。なお、客の要望の認識結果が正しいことは、例えば、図８に示す完了ボタン８８が押下されたことによって判定される。

【0134】

ステップＳ３０において、客の要望の認識結果が正しいと判定された場合、認識確認結果送信部７０は、客の要望の認識結果が正しい旨を店舗サーバ１２に送信する（ステップＳ３１）。その後、図１２のステップＳ１４に戻る。

【0135】

（携帯端末が行う商品登録処理と決済処理の流れ）
次に、図１４を用いて、携帯端末１４が行う商品登録処理と決済処理の流れを説明する。

【0136】

コードシンボル読取部７１は、客が購入する商品に付されたバーコード等のコードシンボルを読み取る（ステップＳ４１）。

【0137】

商品登録処理部７２は、コードシンボル読取部７１が読み取ったコードシンボルに記録された商品コードと商品マスタＭとを照合することによって、客が購入する商品を一意に特定する。そして、商品登録処理部７２は、一意に特定された商品を、購入商品として登録する（ステップＳ４２）。より具体的には、商品登録処理部７２は、コードシンボル読取部７１が読み取ったコードシンボルを店舗サーバ１２に送信する。そして、店舗サーバ１２において、商品コードと商品マスタＭとが照合されて、商品が一意に特定される。そして、商品登録処理部７２は、一意に特定された商品情報を店舗サーバ１２から受信することによって、商品登録を行う。なお、登録された商品情報は、商品登録ファイルＲに記憶される。なお、携帯端末１４が店舗サーバ１２から商品マスタＭを取得して、携帯端末１４の内部で商品の特定を行ってもよい。

【0138】

操作制御部７６は、タッチパネル３７に割り付けられた締めボタンが押下されたかを判定する（ステップＳ４３）。締めボタンが押下されたと判定される（ステップＳ４３：Ｙｅｓ）とステップＳ４４に進む。一方、締めボタンが押下されたと判定されない（ステップＳ４３：Ｎｏ）とステップＳ４１に戻る。

【0139】

ステップＳ４３において、締めボタンが押下されたと判定されると、決済処理部７３は、商品登録処理部７２が登録した商品に係る決済処理を行う（ステップＳ４４）。なお、決済処理の結果は、決済ファイルＳに記録される。

【0140】

買上情報送信部７４は、商品登録ファイルＲと決済ファイルＳとを、店舗サーバ１２に送信する（ステップＳ４５）。その後、図１２のステップＳ１５に戻る。

【0141】

（店舗サーバが行う処理の流れ）
次に、図１５を用いて、店舗サーバ１２が行う処理の流れを説明する。図１５は、実施の形態の店舗サーバが行う処理の流れの一例を示すフローチャートである。

【0142】

顧客情報取得部４２は、携帯端末１４から送信された顧客情報を取得する（ステップＳ５１）。

【0143】

顧客情報取得部４２は、取得した顧客情報に基づいて、店舗の会員であるかを判定する（ステップＳ５２）。店舗の会員である、即ち認証ＯＫであると判定される（ステップＳ５２：Ｙｅｓ）とステップＳ５３に進む。一方、店舗の会員であると判定されない、即ち認証ＯＫであると判定されない（ステップＳ５２：Ｎｏ）とステップＳ５１に戻る。

【0144】

ステップＳ５２において、店舗の会員であると判定されると、通信接続部４１は、店舗サーバ１２と携帯端末１４との間に無線接続を確立させる（ステップＳ５３）。

【0145】

続いて、店舗サーバ１２は、携帯端末１４で入力された客の要望を認識する要望認識処理を行う（ステップＳ５４）。要望認識処理の詳細は後述する（図１６参照）。

【0146】

要望分析部４９は、商品毎に、客の要望に含まれる、予め設定されたワードの出現頻度を分析する（ステップＳ５５）。

【0147】

要望送信部５０は、要望分析部４９による要望の分析結果の送信先を設定する（ステップＳ５６）。

【0148】

要望送信部５０は、ステップＳ５６で設定した送信先に、要望の分析結果を送信する（ステップＳ５７）。

【0149】

買上情報取得部５１は、携帯端末１４から、商品登録ファイルＲと決済ファイルＳとを取得したかを判定する（ステップＳ５８）。商品登録ファイルＲと決済ファイルＳとを取得したと判定される（ステップＳ５８：Ｙｅｓ）とステップＳ５９に進む。一方、商品登録ファイルＲと決済ファイルＳとを取得したと判定されない（ステップＳ５８：Ｎｏ）とステップＳ６０に進む。

【0150】

ステップＳ５８において、商品登録ファイルＲと決済ファイルＳとを取得したと判定されると、買上情報取得部５１は、売上ファイルＦを生成する（ステップＳ５９）。

【0151】

通信接続部４１は、店舗サーバ１２と携帯端末１４との無線接続を保持できるかを判定する（ステップＳ６０）。店舗サーバ１２と携帯端末１４との無線接続を保持できると判定される（ステップＳ６０：Ｙｅｓ）とステップＳ５４に戻る。一方、店舗サーバ１２と携帯端末１４との無線接続を保持できると判定されない（ステップＳ６０：Ｎｏ）とステップＳ６１に進む。

【0152】

ステップＳ６０において、店舗サーバ１２と携帯端末１４との無線接続を保持できると判定されないと、通信接続部４１は、店舗サーバ１２と携帯端末１４との無線接続を切断する（ステップＳ６１）。そして、店舗サーバ１２は、図１５の処理を終了する。

【0153】

（店舗サーバが行う要望認識処理の流れ）
次に、図１６を用いて、店舗サーバ１２が行う要望認識処理の流れを説明する。

【0154】

入力情報取得部４３は、携帯端末１４が撮影した商品の画像を受信する（ステップＳ７１）。

【0155】

オブジェクト認識部４４は、ステップＳ７１で受信した商品の画像に対して、オブジェクト認識を実行する（ステップＳ７２）。

【0156】

認識結果送信部４７は、オブジェクト認識の結果を携帯端末１４に送信する（ステップＳ７３）。

【0157】

認識確認結果取得部４８は、携帯端末１４から商品の認識結果に対する客の確認結果を受信する（ステップＳ７４）。

【0158】

続いて、入力情報取得部４３は、携帯端末１４が取得した、客の音声信号を受信する（ステップＳ７５）。

【0159】

音声認識部４５は、取得した音声信号に対して音声認識を実行する（ステップＳ７６）。

【0160】

テキスト分析部４６は、テキスト分析を実行することによって、音声認識部４５が認識した客の要望を文章に書き起こす（ステップＳ７７）。

【0161】

認識結果送信部４７は、音声認識部４５およびテキスト分析部４６が行った処理結果を携帯端末１４に送信する（ステップＳ７８）。

【0162】

認識確認結果取得部４８は、携帯端末１４から要望の確認結果を受信する（ステップＳ７９）。その後、図１５のステップＳ５５に戻る。

【0163】

なお、ここでは、携帯端末１４が取得した画像と音声信号を店舗サーバ１２に送信して、店舗サーバ１２において、オブジェクト認識、音声認識、テキスト分析を行う構成を説明した。しかし、各種認識処理を行うエンジン、およびオブジェクト認識辞書Ｄ１、音声認識辞書Ｄ２、構文解析辞書Ｄ３をコンパクトに構成することによって、これらのエンジンと辞書とを携帯端末１４に実装してもよい。このような構成をとることによって、携帯端末１４の中で、客の要望を認識可能な構成としてもよい。

【0164】

以上説明したように、実施の形態の店舗サーバ１２（情報処理装置）は、入力情報取得部４３（取得部）が、客の商品に対する要望を、当該要望の対象となる商品を特定する情報（例えば、商品の画像や商品コードや商品名）と関連付けて取得する。そして、要望分析部４９（分析部）が、入力情報取得部４３が取得した要望を、商品毎に、要望の中に予め設定されたキーワードが含まれるかに基づいて分析する。要望送信部５０（送信部）は、要望分析部４９による分析結果を、商品に関連付けられた送信先（例えば、商品の生産者）に送信する。したがって、商品と当該商品に対する客の要望とを関連付けて、生産者が欲する形式で容易に取得することができる。

【0165】

また、実施の形態の店舗サーバ１２（情報処理装置）において、入力情報取得部４３（取得部）は、客の商品に対する要望を、客が所持する携帯端末１４で撮影した、要望の対象となる商品の画像と関連付けて取得する。したがって、店舗サーバ１２は、例えばオブジェクト認識を行って商品を認識することができるため、要望の対象となる商品を、簡単かつ確実に一意に特定することができる。

【0166】

また、実施の形態の店舗サーバ１２（情報処理装置）において、要望分析部４９（分析部）は、商品に対する要望に含まれる、ワード９３（キーワード）の出現数を算出する。したがって、簡便な処理によって、客の要望のおおよその内容を検出することができる。

【0167】

また、実施の形態の店舗サーバ１２（情報処理装置）において、要望分析部４９（分析部）は、商品に対する要望に含まれる、肯定的なキーワードと否定的なキーワードとのそれぞれの出現数を算出する。したがって、算出されたキーワードの出現数によって、肯定的な要望がなされたのか、否定的な要望がなされたのかを容易に判定することができる。これによって、多数の要望を整理する際の効率を向上させることができる。

【0168】

また、実施の形態の店舗サーバ１２（情報処理装置）において、入力情報取得部４３（取得部）は、音声によって前記客の要望を取得する。したがって、情報機器に不慣れな客であっても、商品に対する要望を容易に伝達することができる。

【0169】

以上、本発明の実施形態を説明したが、この実施形態は例示であり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0170】

１０…要望分析システム、１２…店舗サーバ（情報処理装置）、１４…携帯端末、１６…生産者サーバ、２１，３１…制御部、２２，３２…記憶部、２４，３４…入出力コントローラ、２５，３５…通信インタフェース、３６…モニタ、３６ａ…商品選択画面、３６ｂ…商品情報画面、３６ｃ…要望入力画面、３８…カメラ、３９…マイク、４１，６１…通信接続部、４２…顧客情報取得部、４３…入力情報取得部（取得部）、４４…オブジェクト認識部、４５…音声認識部、４６…テキスト分析部、４７…認識結果送信部、４８…認識確認結果取得部、４９…要望分析部（分析部）、５０…要望送信部（送信部）、５１…買上情報取得部、６２…顧客情報送信部、６３…画像取得部、６４…情報検索部、６５…音声取得部、６６…テキスト情報取得部、６７…入力情報送信部、６８…認識結果取得部、６９…認識結果確認部、７０…認識確認結果送信部、７１…コードシンボル読取部、７２…商品登録処理部、７３…決済処理部、７４…買上情報送信部、７５…表示制御部、７６…操作制御部、９２…属性、９３…ワード（キーワード）、Ｄ１…オブジェクト認識辞書、Ｄ２…音声認識辞書、Ｄ３…構文解析辞書、Ｆ…売上ファイル、Ｋ…キーワードファイル、Ｋａ…属性ファイル、Ｋｂ…ワードファイル、Ｐ１，Ｐ２…制御プログラム、Ｒ…商品登録ファイル、Ｓ…決済ファイル、Ｔ…要望分析ファイル、Ｕ…送信先ファイル

【先行技術文献】

【特許文献】

【0171】

【文献】特開２０１７－６２６７２号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】