特開 2024-78516 情報処理装置、情報処理方法、およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024078516

(43)【公開日】2024-06-11

(54)【発明の名称】情報処理装置、情報処理方法、およびプログラム

(51)【国際特許分類】

   G06Q 50/10 20120101AFI20240604BHJP

【ＦＩ】

G06Q50/10

【審査請求】未請求

【請求項の数】11

【出願形態】ＯＬ

(21)【出願番号】P 2022190937

(22)【出願日】2022-11-30

(71)【出願人】

【識別番号】309007911

【氏名又は名称】サントリーホールディングス株式会社

(71)【出願人】

【識別番号】521413866

【氏名又は名称】ＡＶＩＴＡ株式会社

(74)【代理人】

【識別番号】100115749

【弁理士】

【氏名又は名称】谷川 英和

(72)【発明者】

【氏名】北垣 歩武

(72)【発明者】

【氏名】大窪 信一

(72)【発明者】

【氏名】西口 昇吾

【テーマコード（参考）】

5L049

5L050

【Ｆターム（参考）】

5L049CC11

5L050CC11

(57)【要約】      （修正有）

【課題】特定の場合に適切なアバターの動作を実現させる情報処理装置、処理方法及びプログラムを提供する。
【解決手段】情報処理装置、接客者端末、店舗端末、顧客端末及び運営者端末を備える店舗システムにおいて、情報処理装置は、接客者端末情報を受信する接客者端末情報受信部１２２、顧客端末情報を受信する顧客端末情報受信部１２１、接客者の動作を模倣したアバターを構成するための情報を含む出力情報を構成する出力情報構成部１３１及び出力情報を店舗端末又は顧客端末に送信する出力情報送信部１４１を備える。出力情報構成部は、接客者端末情報、顧客端末情報又は運営者端末から受信した運営者端末情報が、アバターの出力を特定の出力とする特定条件を満たす場合に、接客者の動作を模倣しないアバターを構成するための特定情報又は接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、それに基づく出力情報を構成する。
【選択図】図３

【特許請求の範囲】

【請求項1】

顧客の接客者が使用する接客者端末から送信された接客者端末情報を受信する接客者端末情報受信部と、
当該顧客が居る店舗の店舗端末または当該顧客が使用する顧客端末から送信された顧客端末情報を受信する顧客端末情報受信部と、
前記接客者の動作を模倣したアバターを構成するための情報を含み、前記店舗端末または前記顧客端末に出力される情報を構成するための情報である出力情報を構成する出力情報構成部と、
前記出力情報を前記店舗端末または前記顧客端末に送信する出力情報送信部と、
前記出力情報構成部は、
前記接客者端末情報または前記顧客端末情報または運営者端末から受信された運営者端末情報が、アバターの出力を特定の出力とする特定条件を満たす場合に、前記接客者の動作を模倣しないアバターを構成するための特定情報、または前記接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、当該特定情報に基づく出力情報を構成する情報処理装置。

【請求項2】

前記特定条件は、
前記接客者端末情報に含まれる接客者音声情報、または前記顧客端末情報に含まれる顧客音声情報のうちのいずれかの音声情報に関する条件である請求項１記載の情報処理装置。

【請求項3】

前記特定条件は、
前記接客者端末情報に含まれる接客者映像情報、または前記顧客端末情報に含まれる顧客映像情報のうちのいずれかの映像情報に関する条件である請求項１記載の情報処理装置。

【請求項4】

前記特定条件は、
前記接客者端末情報または前記顧客端末情報または前記運営者端末情報に含まれる操作情報に関する条件である請求項１記載の情報処理装置。

【請求項5】

前記出力情報構成部は、
前記特定条件を満たした場合に、特定情報を決定するための２以上の候補情報から一の候補情報を選択する選択手段と、
当該一の候補情報を用いて、前記特定情報を取得し、当該特定情報に基づく出力情報を構成する構成手段とを具備する請求項１から請求項４いずれか一項に記載の情報処理装置。

【請求項6】

前記選択手段は、
前記顧客の１以上の顧客属性値または前記店舗の１以上の店舗属性値を取得し、当該１以上の顧客属性値または当該１以上の店舗属性値に対応する前記一の候補情報を選択する請求項５記載の情報処理装置。

【請求項7】

前記接客者端末情報または前記顧客端末情報または運営者端末から受信された運営者端末情報が前記特定条件を満たすか否かを判断する判断部をさらに具備し、
前記出力情報構成部は、
前記判断部が前記特定条件を満たすと判断した場合に、前記接客者の動作を模倣しないアバターを構成するための特定情報、または前記接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、当該特定情報に基づく出力情報を構成する請求項１記載の情報処理装置。

【請求項8】

前記特定条件は、
アバターが乾杯の動作を行うための条件であり、
前記出力情報構成部は、
前記特定条件を満たした場合に、バーチャルな飲料を持たせたアバターを構成するための特定情報を取得し、当該特定情報を有する出力情報を構成する請求項１記載の情報処理装置。

【請求項9】

前記特定条件は、
アバターが乾杯の動作を行うための条件であり、
前記候補情報は、
乾杯の動作における飲料を特定する飲料情報を含む請求項６記載の情報処理装置。

【請求項10】

接客者端末情報受信部と、顧客端末情報受信部と、出力情報構成部と、出力情報送信部とにより実現される情報処理方法であって、
前記接客者端末情報受信部が、顧客の接客者が使用する接客者端末から送信された接客者端末情報を受信する接客者端末情報受信ステップと、
前記顧客端末情報受信部が、当該顧客が居る店舗の店舗端末または当該顧客が使用する顧客端末から送信された顧客端末情報を受信する顧客端末情報受信ステップと、
前記出力情報構成部が、前記接客者の動作を模倣したアバターを構成するための情報を含み、前記店舗端末または前記顧客端末に出力される情報を構成するための情報である出力情報を構成する出力情報構成ステップと、
前記出力情報送信部が、前記出力情報を前記店舗端末または前記顧客端末に送信する出力情報送信ステップとを具備し、
前記出力情報構成ステップにおいて、
前記接客者端末情報または前記顧客端末情報または運営者端末から受信された運営者端末情報が、アバターの出力を特定の出力とする特定条件を満たす場合に、前記接客者の動作を模倣しないアバターを構成するための特定情報、または前記接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、当該特定情報に基づく出力情報を構成する情報処理装置。

【請求項11】

コンピュータを、
顧客の接客者が使用する接客者端末から送信された接客者端末情報を受信する接客者端末情報受信部と、
当該顧客が居る店舗の店舗端末または当該顧客が使用する顧客端末から送信された顧客端末情報を受信する顧客端末情報受信部と、
前記接客者の動作を模倣したアバターを構成するための情報を含み、前記店舗端末または前記顧客端末に出力される情報を構成するための情報である出力情報を構成する出力情報構成部と、
前記出力情報を前記店舗端末または前記顧客端末に送信する出力情報送信部として機能させ、
前記出力情報構成部は、
前記接客者端末情報または前記顧客端末情報または運営者端末から受信された運営者端末情報が、アバターの出力を特定の出力とする特定条件を満たす場合に、前記接客者の動作を模倣しないアバターを構成するための特定情報、または前記接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、当該特定情報に基づく出力情報を構成するものとして、前記コンピュータを機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、アバター技術を活用し、顧客に対して接客を行うことを支援する情報処理装置等に関するものである。

【背景技術】

【0002】

従来、キャラクタ画像を介した顧客との応答においてオペレータと顧客との間で自然で円滑なコミュニケーションを成立させることが可能である、とする顧客応対システムがあった（特許文献１参照）。このシステムは、顧客に対して情報を提供する顧客側端末と、前記顧客と応対する際のオペレータの動作を検出するモーション検出部と、前記モーション検出部の出力に基づいてモーションデータを生成するモーション認識部と、前記モーションデータに基づいてキャラクタ画像を生成するキャラクタ画像生成部とを備え、前記オペレータが前記顧客と応対する際に、前記顧客側端末に、前記キャラクタ画像生成部で生成されたキャラクタ画像を表示して、前記情報を提供することを特徴とする顧客応対システムである。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１９－８６８５８号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来技術の顧客応対システムは、接客者の動作を模倣したアバターを出力するだけであり、特定の場合に適切なアバターの動作を実現できない。

【課題を解決するための手段】

【0005】

本第一の発明の情報処理装置は、顧客の接客者が使用する接客者端末から送信された接客者端末情報を受信する接客者端末情報受信部と、顧客が居る店舗の店舗端末または顧客が使用する顧客端末から送信された顧客端末情報を受信する顧客端末情報受信部と、接客者の動作を模倣したアバターを構成するための情報を含み、店舗端末または顧客端末に出力される情報を構成するための情報である出力情報を構成する出力情報構成部と、出力情報を店舗端末または顧客端末に送信する出力情報送信部と、出力情報構成部は、接客者端末情報または顧客端末情報または運営者端末から受信された運営者端末情報が、アバターの出力を特定の出力とする特定条件を満たす場合に、接客者の動作を模倣しないアバターを構成するための特定情報、または接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、特定情報に基づく出力情報を構成する情報処理装置である。

【0006】

かかる構成により、特定の場合に適切なアバターの動作を実現できる。

【0007】

また、本第二の発明の情報処理装置は、第一の発明に対して、特定条件は、接客者端末情報に含まれる接客者音声情報、または顧客端末情報に含まれる顧客音声情報のうちのいずれかの音声情報に関する条件である情報処理装置である。

【0008】

かかる構成により、接客者または顧客からの音声に基づいて、特定の場合に適切なアバターの動作を実現できる。

【0009】

また、本第三の発明の情報処理装置は、第一の発明に対して、特定条件は、接客者端末情報に含まれる接客者映像情報、または顧客端末情報に含まれる顧客映像情報のうちのいずれかの映像情報に関する条件である情報処理装置である。

【0010】

かかる構成により、接客者または顧客からの映像に基づいて、特定の場合に適切なアバターの動作を実現できる。

【0011】

また、本第四の発明の情報処理装置は、第一の発明に対して、特定条件は、接客者端末情報または顧客端末情報または運営者端末情報に含まれる操作情報に関する条件である情報処理装置である。

【0012】

かかる構成により、接客者または顧客または運営者の端末に対する操作に基づいて、特定の場合に適切なアバターの動作を実現できる。

【0013】

また、本第五の発明の情報処理装置は、第一から第四いずれか１つの発明に対して、出力情報構成部は、特定条件を満たした場合に、特定情報を決定するための２以上の候補情報から一の候補情報を選択する選択手段と、一の候補情報を用いて、特定情報を取得し、特定情報に基づく出力情報を構成する構成手段とを具備する情報処理装置である。

【0014】

かかる構成により、特定の場合に、アバターのより適切な動作を実現できる。

【0015】

また、本第六の発明の情報処理装置は、第五の発明に対して、選択手段は、顧客の１以上の顧客属性値または店舗の１以上の店舗属性値を取得し、１以上の顧客属性値または１以上の店舗属性値に対応する一の候補情報を選択する情報処理装置である。

【0016】

かかる構成により、特定の場合に、アバターのより適切な動作を実現できる。

【0017】

また、本第七の発明の情報処理装置は、第一から第六いずれか１つの発明に対して、接客者端末情報または顧客端末情報または運営者端末から受信された運営者端末情報が特定条件を満たすか否かを判断する判断部をさらに具備し、出力情報構成部は、判断部が特定条件を満たすと判断した場合に、接客者の動作を模倣しないアバターを構成するための特定情報、または接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、特定情報に基づく出力情報を構成する情報処理装置である。

【0018】

かかる構成により、判断部が特定の場合であると判断した場合に、適切なアバターの動作を実現できる。

【0019】

また、本第八の発明の情報処理装置は、第一から第七いずれか１つの発明に対して、特定条件は、アバターが乾杯の動作を行うための条件であり、出力情報構成部は、特定条件を満たした場合に、バーチャルな飲料を持たせたアバターを構成するための特定情報を取得し、特定情報を有する出力情報を構成する情報処理装置である。

【0020】

かかる構成により、乾杯の動作を適切に行うアバターを提供できる。

【0021】

また、本第九の発明の情報処理装置は、第六の発明に対して、特定条件は、アバターが乾杯の動作を行うための条件であり、候補情報は、乾杯の動作における飲料を特定する飲料情報を含む情報処理装置である。

【0022】

かかる構成により、乾杯の動作をより適切に行うアバターを提供できる。

【発明の効果】

【0023】

本発明による情報処理装置によれば、特定の場合に適切なアバターの動作を実現できる。

【図面の簡単な説明】

【0024】

【図1】実施の形態１における店舗システムＡの概念図

【図2】同店舗システムＡのブロック図

【図3】同情報処理装置１のブロック図

【図4】同情報処理装置１の動作例について説明するフローチャート

【図5】同受信情報処理の例について説明するフローチャート

【図6】同判断処理の例について説明するフローチャート

【図7】同特定情報取得処理の例について説明するフローチャート

【図8】同出力情報構成処理の例について説明するフローチャート

【図9】同接客者端末２の動作例について説明するフローチャート

【図10】同店舗端末３の動作例について説明するフローチャート

【図11】同顧客端末４の動作例について説明するフローチャート

【図12】同店舗管理表を示す図

【図13】同接客者管理表を示す図

【図14】同アバター管理表を示す図

【図15】同特定条件管理表を示す

【図16】同店舗システムＡのフロー図

【図17】同店舗システムＡの概念図

【図18】同アバターの表示例を示す図

【発明を実施するための形態】

【0025】

以下、情報処理装置等の実施形態について図面を参照して説明する。なお、実施の形態において同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。

【0026】

（実施の形態１）
本実施の形態において、顧客の接客者に対応するアバターを、当該顧客が居る店舗の端末である店舗端末または当該顧客が使用する顧客端末に出力し、当該接客者がアバターを介して、顧客に対して接客することを支援する情報処理装置を含む店舗システムについて説明する。また、情報処理装置は、顧客端末、接客者端末、運営者端末のうちのいずれか１以上から受信した情報が特定条件を満たした場合に、接客者の動作を模倣しないアバターを出力する、または接客者の動作を模倣したアバターに変更を加えたアバターを出力する装置である。なお、特定条件は、例えば、接客者または顧客の音声情報に関する条件、接客者または顧客の映像に関する条件、接客者または顧客または運営者の操作に関する条件である。また、情報処理装置は、顧客の接客者に対応するアバターを、顧客が居る店舗の端末である店舗端末または顧客が使用する顧客端末に出力し、接客者がアバターを介して、顧客に対して接客することを支援する装置である。

【0027】

また、本実施の形態において、出力情報を構成するための特定情報を２以上の候補から選択できる情報処理装置を含む店舗システムについて説明する。

【0028】

また、本実施の形態において、店舗属性値または顧客属性値に基づいて、特定情報を２以上の候補から選択できる情報処理装置を含む店舗システムについて説明する。

【0029】

また、本実施の形態において、特定の場合に、アバターの動作を乾杯モードに切り替える情報処理装置を含む店舗システムについて説明する。

【0030】

さらに、本実施の形態において、乾杯モードの際に、２以上の飲料の候補から、アバターが手に持つ飲料を選択する情報処理装置を含む店舗システムについて説明する。

【0031】

なお、本実施の形態において、情報Ｘが情報Ｙに対応付いていることは、情報Ｘから情報Ｙを取得できること、または情報Ｙから情報Ｘを取得できることであり、その対応付けの方法は問わない。情報Ｘと情報Ｙとがリンク付いていても良いし、同じバッファに存在していても良いし、情報Ｘが情報Ｙに含まれていても良いし、情報Ｙが情報Ｘに含まれている等でも良い。

【0032】

図１は、本実施の形態における店舗システムＡの概念図である。店舗システムＡは、例えば、情報処理装置１、１または２以上の接客者端末２、１または２以上の店舗端末３、１または２以上の顧客端末４、および１または２以上の運営者端末５を備える。

【0033】

図１において、店舗システムＡは、例えば、店舗Ｓ１、店舗ＳＮ等の各店舗において、１または２以上の店舗端末３が設置されている、とする。なお、ここでの店舗は、通常、飲食店であるが、問わない。また、飲食店は、例えば、スナック、クラブ、バーであるが、その種類は問わない。ここでの店舗は、接客が発生する事業体であれば良い。

【0034】

情報処理装置１は、顧客に対するアバターによる接客を支援するサーバである。情報処理装置１は、例えば、顧客の映像を店舗端末３または顧客端末４から受信し、接客者端末２に送信する機能を有する。情報処理装置１は、例えば、アバターのモデル情報を接客者端末２から受信し、店舗端末３または顧客端末４に送信する機能を有する。

【0035】

情報処理装置１は、通常、サーバであり、例えば、クラウドサーバ、ＡＳＰサーバであるが、その種類は問わない。

【0036】

接客者端末２は、顧客を接客する接客者が使用する端末である。接客者端末２は、接客者の音声を集音する。なお、その音声情報は、店舗端末３または顧客端末４で出力される。接客者端末２は、例えば、接客者を撮影する端末である。接客者端末２は、例えば、撮影している接客者の動きに応じたアバターのモデル情報を構成し、当該モデル情報を送信する端末である。なお、アバターのモデル情報は、店舗端末３または顧客端末４で出力される。接客者端末２は、例えば、いわゆるパソコン、タブレット端末、スマートフォン等であり、その種類は問わない。また、店舗端末３または顧客端末４で出力されるモデル情報は、接客者端末２が構成しても良いし、情報処理装置１が構成しても良いし、店舗端末３または顧客端末４が構成しても良い。

【0037】

店舗端末３は、店舗に存在する端末である。店舗端末３は、通常、店舗に設置されている端末である。１または２以上の各店舗に、１または２以上の店舗端末３が設置されていることは好適である。店舗端末３には、顧客に接客中のアバターが出力される。店舗端末３は、例えば、いわゆるパソコン、タブレット端末、スマートフォン等であり、その種類は問わない。

【0038】

顧客端末４は、顧客が使用する端末である。顧客端末４は、例えば、顧客が接客者または／およびアバターを選択するために使用する端末である。顧客端末４は、例えば、いわゆるパソコン、タブレット端末、スマートフォン等であり、その種類は問わない。

【0039】

なお、店舗端末３と顧客端末４とは、両方、店舗で使用される端末である。ここでは、主に、店舗システムＡが店舗端末３と顧客端末４の両方を備える場合について説明するが、店舗システムＡは、店舗端末３と顧客端末４とのうちの一方の種類の端末のみを有する構成でも良い。店舗システムＡが顧客端末４を有しない場合、例えば、店舗端末３が使用されることにより接客が開始される。また、店舗システムＡが店舗端末３を有しない場合、店舗において端末を設置する必要がなく、顧客端末４を用いて接客が行われる。

【0040】

運営者端末５は、運営者が使用する端末である。運営者とは、接客者の顧客に対する接客を支援する者である。運営者は、例えば、特定条件を満たすための情報を入力する者である。運営者は、例えば、アバターに乾杯の動作を行わせるために、当該動作の指示を運営者端末５に入力する者である。運営者端末５は、例えば、特定条件を満たすための情報を情報処理装置に送信するための端末である。運営者端末５は、例えば、いわゆるパソコン、タブレット端末、スマートフォン等であり、その種類は問わない。

【0041】

情報処理装置１と１以上の各接客者端末２、情報処理装置１と１以上の各店舗端末３、情報処理装置１と１以上の各顧客端末４、および情報処理装置１と１以上の各運営者端末５とは、通常、インターネットやＬＡＮ等により通信可能である。

【0042】

図２は、本実施の形態における店舗システムＡのブロック図である。図３は、情報処理装置１のブロック図である。

【0043】

店舗システムＡを構成する情報処理装置１は、格納部１１、受信部１２、処理部１３、および送信部１４を備える。格納部１１は、店舗管理部１１１、接客側管理部１１２、特定条件管理部１１３、および候補管理部１１４を備える。受信部１２は、顧客端末情報受信部１２１、接客者端末情報受信部１２２、および運営側端末情報受信部１２３を備える。処理部１３は、判断部１３０、および出力情報構成部１３１を備える。出力情報構成部１３１は、選択手段１３２、および構成手段１３３を備える。送信部１４は、出力情報送信部１４１を備える。

【0044】

接客者端末２は、接客格納部２１、接客受付部２２、接客処理部２３、接客送信部２４、接客受信部２５、および接客出力部２６を備える。接客処理部２３は、接客撮影部２３１、接客音声取得部２３２、およびアバター変換処理部２３３を備える。

【0045】

店舗端末３は、店舗格納部３１、店舗受付部３２、店舗処理部３３、店舗送信部３４、店舗受信部３５、および店舗出力部３６を備える。店舗処理部３３は、店舗撮影部３３１、店舗音声取得部３３２、および出力情報構成部３３３を備える。

【0046】

顧客端末４は、顧客格納部４１、顧客受付部４２、顧客処理部４３、顧客送信部４４、顧客受信部４５、および顧客出力部４６を備える。

【0047】

運営者端末５は、運営者格納部５１、運営者受付部５２、運営者処理部５３、運営者送信部５４、運営者受信部５５、および運営者出力部５６を備える。

【0048】

情報処理装置１を構成する格納部１１には、各種の情報が格納される。各種の情報は、例えば、後述する店舗情報、後述する接客者情報、後述する顧客情報、カレント顧客識別子、カレント接客者識別子、カレント店舗識別子である。

【0049】

カレント顧客識別子とは、現在、接客されている顧客の識別子である。カレント接客者識別子とは、現在、接客して接客者の識別子である。カレント店舗識別子は、接客が行われている店舗の識別子である。カレント顧客識別子とカレント接客者識別子とカレント店舗識別子とは、対応付いていることは好適である。対応付いているカレント顧客識別子とカレント接客者識別子とカレント店舗識別子とは、各々、顧客と当該顧客の接客者と当該顧客が居る店舗の識別子である。

【0050】

店舗管理部１１１には、１または２以上の店舗情報が格納される。店舗情報とは、店舗に関する情報である。店舗情報は、店舗識別子と１または２以上の店舗属性値とを有する。店舗識別子とは、店舗を識別する情報である。店舗識別子は、例えば、ＩＤ、店舗名、住所である。店舗属性値とは、店舗の属性値である。店舗属性値は、例えば、住所、都道府県、地区識別子、場所のレベル、業態（例えば、スナック、クラブ）、高級度、店舗の広さ、接客する顧客の平均人数、接客できる顧客の最大人数である。地区識別子とは、店舗が設置されている地区を識別する情報（例えば、新橋、渋谷、六本木）である。場所のレベルは、例えば、１～５の５段階またはＡ，Ｂ，Ｃの３段階である。高級度は、例えば、１～１０の１０段階またはＡ，Ｂ，Ｃの３段階である。

【0051】

接客側管理部１１２には、１または２以上の接客者情報、および１または２以上のアバター情報が格納される。

【0052】

接客者とアバターとの対応は固定でも良いし、動的に変化しても良い。接客者とアバターとの対応が固定である場合、接客側管理部１１２には、接客者情報とアバター情報との対応が管理されていても良い。接客者とアバターとの対応は、１対１でも良いし、１対多でも良いし、多対１でも良いし、多対多でも良い。

【0053】

なお、接客者情報とアバター情報との対応を示す情報は、例えば、接客者識別子とアバター識別子との組、接客者情報とアバター情報とをリンク付ける情報であるが、そのデータ構造は問わない。

【0054】

接客者情報とは、接客者に関する情報である。接客者とは、顧客を接客する人である。接客者が接客する顧客の数は、一人でも二人以上でも良い。接客者情報は、例えば、接客者識別子、１または２以上の接客者属性値を有する。接客者情報は、例えば、接客者の静的な情報である。接客者識別子とは、接客者を識別する情報である。接客者識別子は、例えば、ＩＤ、メールアドレス、電話番号、接客者端末２のＩＰアドレス、接客者端末２のＭＡＣアドレスである。接客者属性値は、例えば、性別、年齢、出身地、居住地、職歴を示す情報、現在の職業、学歴、接客レベルである。接客レベルとは、接客のレベルである。

【0055】

アバター情報とは、アバターに関する情報である。アバター情報は、例えば、アバター識別子、１または２以上のアバター属性値を有する。アバター情報は、例えば、モデル情報を有する。

【0056】

アバター識別子とは、アバターを識別する情報である。アバター識別子は、例えば、ＩＤ、名前である。

【0057】

アバター属性値は、例えば、アバターの性別、アバターの年齢、アバターのタイプ、データサイズである。アバターのタイプは、例えば、エレガント、スタイリッシュ、お嬢様系、ボーイッシュである。なお、データサイズは、モデル情報のデータのサイズである。

【0058】

モデル情報とは、アバターの表示を構成するための情報である。モデル情報は、例えば、メッシュ情報、ボーン情報、マテリアル情報を有する。モデル情報は、例えば、glTF ?(GL Transmission Format)?のデータ構造を有する。ただし、モデル情報のデータ構造は、VRM、OBJ、FBX、STL、GLB、COLLADA、等でも良く、種類を問わない。

【0059】

特定条件管理部１１３には、１または２以上の特定条件が管理される。特定条件は、モード識別子が対応付いていることは好適である。なお、特定条件は、プログラム中に埋め込まれていても良いことは言うまでもない。

【0060】

特定条件とは、特定の場合を検知するための条件である。特定条件とは、アバターの出力を特定の出力とする場合の条件である。特定条件は、例えば、操作条件、音声条件、映像条件である。特定の場合は、例えば、乾杯をする場合、顧客の退店の際にお見送りをする場合である。

【0061】

操作条件とは、受信された接客者端末情報に含まれる接客者操作情報、または受信された顧客端末情報に含まれる顧客操作情報、または受信された運営者端末情報に含まれる運営者操作情報のうちのいずれかの操作情報に関する条件である。操作条件は、例えば、「操作情報＝乾杯ボタンＯＮ」である。

【0062】

接客者端末情報とは、接客者端末２から送信された情報である。接客者端末情報は、例えば、アバター関連情報、接客者音声情報、接客者操作情報のうちの１または２種類以上の情報を含む。アバター関連情報とは、出力されるアバターに関する情報である。アバター関連情報は、例えば、接客者の動作を模倣したアバターのモデル情報、または接客者映像である。接客者映像とは、接客者を撮影した映像である。接客者音声情報とは、接客者が発声した音声の情報である。接客者操作情報とは、接客者端末２から送信された操作情報である。操作情報とは、操作を特定する情報である。操作情報は、例えば、指示されたボタンのボタン識別子を有する。なお、指示されたボタンは、例えば、「乾杯」ボタン、「終了」ボタンである。

【0063】

顧客端末情報とは、店舗端末３または顧客端末４から送信された情報である。顧客端末情報は、例えば、顧客映像、顧客音声情報、顧客操作情報のうちの１または２種類以上の情報を含む。顧客映像とは、顧客を撮影した映像である。顧客音声情報とは、顧客が発声した音声の情報である。顧客操作情報とは、店舗において入力された操作情報である。顧客操作情報は、通常、顧客が店舗端末３または顧客端末４に入力した情報である。顧客操作情報は、通常、顧客が入力した情報である。

【0064】

運営者端末情報とは、運営者端末５から送信された情報である。顧客端末情報は、例えば、運営者操作情報を含む。運営者操作情報とは、運営者端末５から送信された操作情報である。運営者操作情報は、通常、運営者が入力した情報である。

【0065】

音声条件とは、受信された接客者端末情報に含まれる接客者音声情報、または受信された顧客端末情報に含まれる顧客音声情報のうちのいずれかの音声情報に関する条件である。なお、顧客音声情報は、通常、顧客の音声の情報である。

【0066】

音声条件は、例えば、「乾杯」または「かんぱーい」の音声情報を含むことである。音声条件は、例えば、「今日は、本当に有難うございました」の音声情報を含むことである。

【0067】

映像条件とは、受信された接客者端末情報に含まれる接客者映像、または受信された顧客端末情報に含まれる顧客映像のうちのいずれかの映像に関する条件である。映像は、１または２以上の静止画像である。なお、顧客映像は、通常、顧客を撮影した映像の情報である。

【0068】

映像条件は、例えば、「乾杯のために腕を斜め上に上げた動作の映像を検知したこと」である。映像条件は、例えば、接待の最後に、「頭を深く下げた動作の映像を検知したこと」である。「頭を深く下げた動作の映像」は、例えば、接客者の画像の領域が「後頭部のみの映像」であることである。

【0069】

モード識別子とは、モードを識別する情報である。モードは、通常、接待における特定の状況である。モード識別子は、例えば、アバターに乾杯の動作をさせる「乾杯モード」、アバターに顧客を店舗から送り出す「お見送りモード」である。

【0070】

候補管理部１１４は、１または２以上の候補情報を管理する。候補情報は、特定条件に対応付いていることは好適である。候補情報は、選択条件に対応付いていても良い。

【0071】

候補情報とは、特定情報の候補である。特定情報は、アバターの特定の動作を行わせるための情報である。特定情報は、例えば、画像、映像、またはプログラムである。

【0072】

特定情報は、例えば、アバターの乾杯の動作のためにアバターの手の持たせる飲料の画像である。特定情報は、例えば、アバターに顧客を店舗から送り出す際のアバターの動作を行うプログラムである。なお、かかる動作は、例えば、立ちあがって、手を振る動作である。

【0073】

選択条件とは、特定情報を選択するための条件である。選択条件は、例えば、１以上の顧客属性値または１以上の店舗属性値に関する条件である。

【0074】

受信部１２は、各種の指示や情報を受信する。各種の指示や情報は、例えば、接客者端末情報、顧客端末情報、運営者端末情報である。

【0075】

顧客端末情報受信部１２１は、店舗端末３または顧客端末４から送信された顧客端末情報を受信する。

【0076】

接客者端末情報受信部１２２は、接客者端末２から送信された接客者端末情報を受信する。

【0077】

処理部１３は、各種の処理を行う。各種の処理とは、例えば、判断部１３０、出力情報構成部１３１が行う処理である。

【0078】

処理部１３は、例えば、接客側管理部１１２のアバターのモデル情報と、接客者端末２から受信された接客者情報が有する動き情報とを用いて、出力されるアバターのモデル情報を構成する。かかる処理は、後述するアバター変換処理部２３３の処理と同じである。

【0079】

判断部１３０は、接客者端末情報または顧客端末情報または運営者端末５から受信された運営者端末情報が、特定条件を満たすか否かを判断し、判断結果を取得する。

【0080】

判断部１３０は、例えば、受信された操作情報が特定条件を満たすか否かを判断し、判断結果を取得する。

【0081】

判断部１３０は、例えば、受信された音声情報を音声認識し、文字列を取得し、当該文字列が特定条件を満たすか否かを判断し、判断結果を取得する。文字列が特定条件を満たす場合は、例えば、特定条件に含まれる文字列（例えば、「乾杯」）が文字列の中に含まれることである。

【0082】

判断部１３０は、例えば、受信された映像に含まれる各フレームの中の人の画像を取得し、当該人の画像と、特定条件に含まれる画像との類似度を算出し、類似度が閾値以上または閾値より大きいか否かを判断する。類似度が閾値以上または閾値より大きい場合に、判断部１３０は、特定条件を満たす、と判断する。

【0083】

出力情報構成部１３１は、出力情報を構成する。出力情報とは、店舗端末３または顧客端末４に送信される情報であり、アバターを構成するための情報を含む。出力情報は、例えば、接客者の動作を模倣したアバターを構成するための情報を含む。特定の場合に、出力情報は、特定情報を含むことは好適である。出力情報は、例えば、アバターのモデル情報と接客者音声情報とを含む。出力情報は、例えば、アバターのモデル情報と接客者の動き情報と接客者音声情報とを含む。出力情報は、例えば、アバターのモデル情報と特定情報と接客者の動き情報と接客者音声情報とを含む。

【0084】

出力情報構成部１３１は、接客者端末情報または顧客端末情報または運営者端末５から受信された運営者端末情報が特定条件を満たす場合に、接客者の動作を模倣しないアバターを構成するための特定情報、または接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、当該特定情報に基づく出力情報を構成する。

【0085】

なお、アバターを構成するための情報を変更する特定情報は、例えば、アバターのモデル情報に付加される情報、アバターを構成するための情報を変更するプログラムである。アバターのモデル情報に付加される情報は、例えば、静止画、動画であるが、そのデータタイプは問わない。

【0086】

出力情報構成部１３１は、接客者端末情報または顧客端末情報または運営者端末情報が特定条件を満たす場合に、例えば、当該特定条件に対応する特定情報であるプログラムを実行し、アバターのモデル情報を取得し、当該モデル情報を有する出力情報を構成する。

【0087】

出力情報構成部１３１は、接客者端末情報または顧客端末情報または運営者端末情報が特定条件を満たす場合に、例えば、当該特定条件に対応する特定情報である静止画または動画を取得し、当該静止画または動画を含むアバターのモデル情報を取得し、当該モデル情報を有する出力情報を構成する。

【0088】

出力情報構成部１３１は、特定条件を満たした場合に、例えば、バーチャルな飲料を持たせたアバターを構成するための特定情報を取得し、当該特定情報を有する出力情報を構成する。なお、かかる特定情報は、アバターが手に持つ飲料を構成するための飲料情報である。

【0089】

選択手段１３２は、特定条件を満たした場合に、特定情報を決定するための２以上の候補情報から一の候補情報を候補管理部１１４から選択する。選択手段１３２は、候補管理部１１４から一の候補情報を取得する。候補情報は、例えば、乾杯の動作における飲料を特定する飲料情報である。

【0090】

選択手段１３２は、例えば、１以上の顧客属性値または１以上の店舗属性値を取得し、当該１以上の顧客属性値または当該１以上の店舗属性値に対応する一の候補情報を候補管理部１１４から選択する。

【0091】

選択手段１３２は、例えば、格納部１１のカレント顧客識別子と対になる１以上の顧客属性値を格納部１１から取得する。選択手段１３２は、例えば、格納部１１のカレント店舗識別子と対になる１以上の店舗属性値を店舗管理部１１１から取得する。選択手段１３２は、例えば、当該１以上の顧客属性値または当該１以上の店舗属性値が合致する選択条件と対になる一の候補情報を候補管理部１１４から取得する。

【0092】

構成手段１３３は、選択手段１３２が取得した一の候補情報を用いて特定情報を取得し、当該特定情報を有する出力情報を構成する。なお、一の候補情報は、特定情報でも良い。

【0093】

送信部１４は、各種の情報を送信する。各種の情報は、例えば、開始情報、顧客端末情報、出力情報である。

【0094】

開始情報とは、接客の開始に関する情報である。開始情報は、例えば、接客の開始指示である。開始指示の接客者端末２への送信により、接客者端末２は、例えば、カメラを起動し、接客者の撮影を開始する。開始指示の接客者端末２への送信により、接客者端末２は、例えば、接客の開始を促す情報を出力する。開始情報は、例えば、アバターのモデル情報を含む。

【0095】

送信部１４は、顧客端末情報受信部１２1が受信した顧客端末情報が有する顧客映像と顧客音声情報とを接客者端末２に送信する。顧客映像とは、１または２以上の顧客を撮影した映像である。顧客音声情報とは、１または２以上の顧客が発声した音声の情報である。

【0096】

出力情報送信部１４１は、出力情報を店舗端末３または顧客端末４に送信する。

【0097】

出力情報送信部１４１は、例えば、接客側情報が有するアバター識別子で識別されるアバターを顧客が視聴する端末に出力するための出力情報を送信する。なお、顧客が視聴する端末とは、接客されている際に、顧客がアバターを視聴する端末であり、通常、店舗端末３であるが、顧客端末４でも良い。

【0098】

出力情報は、通常、接客者音声情報を有する。出力情報は、通常、アバターのモデル情報を有する。しかし、出力情報は、アバターを構成するための動き情報を有しても良い。出力情報は、特定情報を有しても良い。アバターを構成する処理は、顧客がアバターを視聴する端末で行われても良い。なお、顧客が視聴する端末で出力されるアバターは、接客者端末２で構成されることは好適であるが、情報処理装置１で構成されても良いし、顧客がアバターを視聴する端末で構成されても良い。特定情報に基づいたアバターは、情報処理装置１で構成されることは好適であるが、顧客がアバターを視聴する端末で構成されても良いし、接客者端末２で構成されても良い。

【0099】

接客者端末２を構成する接客格納部２１には、各種の情報が格納される。各種の情報は、例えば、接客者識別子、接客者の分身のアバターのモデル情報である。

【0100】

接客受付部２２は、各種の指示や情報を受け付ける。各種の指示や情報とは、例えば、接客者操作情報、終了指示である。接客者操作情報は、例えば、「乾杯モード」のボタンの指示を含む。接客者操作情報は、例えば、「お見送りモード」のボタンの指示を含む。なお、ボタンの指示に代えて、メニュー項目の選択等の他のオブジェクトの指示や選択でも良い。終了指示とは、接客を終了させるための指示である。

【0101】

各種の指示や情報の入力手段は、タッチパネルやキーボードやマウスやメニュー画面によるもの等、何でも良い。

【0102】

接客処理部２３は、各種の処理を行う。各種の処理とは、例えば、受信された情報を表示されるデータに構成する処理である。各種の処理とは、例えば、受け付けられた指示等を送信する指示等に構成する処理である。

【0103】

各種の処理は、例えば、接客撮影部２３１、接客音声取得部２３２、アバター変換処理部２３３が行う処理である。

【0104】

接客処理部２３は、例えば、アバター変換処理部２３３が取得したモデル情報と接客音声取得部２３２が取得した接客者音声情報とを有する接客者端末情報を構成する。

【0105】

接客処理部２３は、例えば、接客撮影部２３１が撮影した接客者映像と接客音声取得部２３２が取得した接客者音声情報とを有する接客者端末情報を構成する。

【0106】

接客処理部２３は、例えば、接客撮影部２３１が撮影した接客者映像を解析し、接客者の動きを示す動き情報を取得し、当該動き情報と接客音声取得部２３２が取得した接客者音声情報とを有する接客者端末情報を構成する。

【0107】

接客撮影部２３１は、接客者を撮影し、接客者映像を取得する。接客撮影部２３１は、通常、カメラである。

【0108】

接客音声取得部２３２は、接客者の音声を受け付け、接客者音声情報を取得する。接客音声取得部２３２は、通常、マイクである。

【0109】

アバター変換処理部２３３は、アバターのモデル情報を用いて、接客撮影部２３１が取得した接客者映像が示す接客者の動きに応じて、当該動きを伴うモデル情報を取得する。なお、アバター変換処理部２３３は公知技術により実現可能である。アバター変換処理部２３３は、例えば、接客者映像を解析し、接客者の動きを示す動き情報を取得する。そして、アバター変換処理部２３３は、例えば、当該動き情報を用いて、アバターのモデル情報に動きが加わったモデル情報を構成する。

【0110】

接客送信部２４は、各種の情報や指示を送信する。接客送信部２４は、例えば、接客処理部２３が構成した接客者端末情報を送信する。接客送信部２４は、通常、接客者端末情報を情報処理装置１に送信する。なお、接客者端末情報は、通常、モデル情報と接客者音声情報とを有する。接客者端末情報は、動き情報と接客者音声情報とを有しても良い。接客者端末情報は、接客者映像と接客者音声情報とを有しても良い。

【0111】

接客受信部２５は、各種の情報や指示を受信する。各種の情報や指示は、例えば、開始情報、顧客端末情報である。接客受信部２５は、情報処理装置１から開始情報や顧客端末情報を受信することは好適である。

【0112】

開始情報とは、接客の開始に関する情報である。開始情報は、例えば、接客の開始指示である。開始指示の接客者端末２への送信により、接客者端末２は、例えば、カメラを起動し、接客者の撮影を開始する。開始指示の接客者端末２への送信により、接客者端末２は、例えば、接客の開始を促す情報を出力する。開始情報は、例えば、アバターのモデル情報を含む。

【0113】

接客出力部２６は、各種の情報を出力する。各種の情報は、例えば、接客受信部２５が受信した顧客端末情報である。顧客端末情報は、顧客映像と顧客音声情報である。

【0114】

ここで、出力とは、ディスプレイへの表示、プロジェクターを用いた投影、音出力、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。

【0115】

店舗端末３を構成する店舗格納部３１には、各種の情報が格納される。各種の情報は、例えば、店舗識別子、アバターのモデル情報である。

【0116】

店舗受付部３２は、各種の指示や情報を受け付ける。各種の指示や情報とは、例えば、顧客操作情報である。

【0117】

各種の指示や情報の入力手段は、タッチパネルやキーボードやマウスやメニュー画面によるもの等、何でも良い。

【0118】

店舗処理部３３は、各種の処理を行う。各種の処理とは、例えば、受信された情報を表示されるデータに構成する処理である。各種の処理とは、例えば、受け付けられた指示等を送信する指示等に構成する処理である。

【0119】

各種の処理は、例えば、店舗撮影部３３１、店舗音声取得部３３２、出力情報構成部３３３が行う処理である。

【0120】

店舗撮影部３３１は、店舗に居る１または２以上の顧客を撮影し、顧客映像を取得する。店舗撮影部３３１は、通常、カメラである。

【0121】

店舗音声取得部３３２は、店舗に居る１または２以上の顧客の音声である顧客音声情報を取得する。店舗音声取得部３３２は、通常、マイクである。

【0122】

出力情報構成部３３３は、出力情報を構成する。出力情報構成部３３３は、例えば、受信されたアバターのモデル情報を用いて、出力されるアバターを構成する。

【0123】

出力情報構成部３３３は、例えば、店舗格納部３１のアバターのモデル情報と、受信された動き情報とを用いて、出力されるアバターを構成する。かかる出力情報構成部３３３の処理は、アバター変換処理部２３３の処理と同じである。なお、接客者端末２または情報処理装置１で出力されるモデル情報が構成される場合、出力情報構成部３３３は、不要である。

【0124】

出力情報構成部３３３は、接客者端末情報または顧客端末情報または運営者端末情報が特定条件を満たす場合に、接客者の動作を模倣しないアバターを構成するための特定情報、または接客者の動作を模倣したアバターを構成するための情報を変更した特定情報を取得し、特定情報に基づく出力情報を構成する。

【0125】

出力情報構成部３３３は、特定条件を満たした場合に、例えば、バーチャルな飲料を持たせたアバターを構成するための特定情報を取得し、特定情報を有する出力情報を構成する。なお、出力情報構成部３３３が特定情報に基づく出力情報を構成する場合の処理は、上述した出力情報構成部１３１の処理と同じ処理で良い。

【0126】

店舗送信部３４は、各種の情報や指示を情報処理装置１に送信する。各種の情報や指示は、例えば、顧客端末情報、店舗識別子、顧客識別子である。

【0127】

店舗受信部３５は、各種の情報や指示を受信する。各種の情報や指示は、例えば、出力情報である。店舗受信部３５は、例えば、アバターのモデル情報と接客者音声情報とを有する出力情報を、情報処理装置１から受信する。

【0128】

店舗出力部３６は、各種の情報を出力する。各種の情報は、例えば、モデル情報を用いたアバターと、接客者音声情報である。店舗出力部３６は、店舗受信部３５が受信した出力情報を用いて、アバターと接客者音声情報とを出力する。なお、特定の場合には、かかるアバターは、特定情報に基づくアバターであることは好適である。

【0129】

ここで、出力とは、ディスプレイへの表示、プロジェクターを用いた投影、音出力、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。

【0130】

顧客端末４を構成する顧客格納部４１には、各種の情報が格納される。各種の情報は、例えば、顧客識別子、店舗識別子、アバターのモデル情報である。

【0131】

顧客受付部４２は、各種の指示や情報を受け付ける。各種の指示や情報とは、例えば、各種の指示や情報とは、例えば、顧客操作情報である。

【0132】

各種の指示や情報の入力手段は、タッチパネルやキーボードやマウスやメニュー画面によるもの等、何でも良い。

【0133】

顧客処理部４３は、各種の処理を行う。各種の処理とは、例えば、受信された情報を表示されるデータに構成する処理である。各種の処理とは、例えば、受け付けられた指示等を送信する指示等に構成する処理である。

【0134】

顧客処理部４３は、例えば、アバターのモデル情報を用いて、出力されるアバターを構成する。

【0135】

顧客処理部４３は、例えば、アバターのモデル情報と動き情報とを用いて、出力されるアバターを構成する。

【0136】

顧客送信部４４は、各種の情報や指示を送信する。各種の情報や指示は、例えば、開始指示、顧客端末情報である。顧客送信部４４は、例えば、各種の情報や指示を情報処理装置１に送信する。

【0137】

顧客受信部４５は、各種の情報を受信する。各種の情報は、例えば、アバターのモデル情報、接客者音声情報である。各種の情報は、例えば、接客者の動き情報である。

【0138】

顧客出力部４６は、各種の情報を出力する。各種の情報は、例えば。メニュー、アバター、接客者音声情報である。

【0139】

ここで、出力とは、ディスプレイへの表示、プロジェクターを用いた投影、音出力、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。

【0140】

運営者端末５を構成する運営者格納部５１には、各種の情報が格納される。各種の情報は、例えば、開始指示、運営者端末情報、終了指示である。

【0141】

運営者受付部５２は、各種の指示や情報を受け付ける。各種の指示や情報とは、例えば、運営者操作情報である。運営者操作情報は、例えば、指示された特定のボタンのボタン識別子である。なお、特定のボタンは、例えば、「乾杯」ボタン、「終了」ボタンである。なお、ボタンは、指示対象のオブジェクト、選択対象のオブジェクトであれば良い。

【0142】

運営者処理部５３は、各種の処理を行う。各種の処理とは、例えば、受信された情報を表示されるデータに構成する処理である。各種の処理とは、例えば、受け付けられた指示等を送信する指示等に構成する処理である。

【0143】

運営者送信部５４は、各種の情報や指示を送信する。各種の情報や指示は、例えば、開始指示、運営者端末情報、終了指示である。顧客送信部４４は、例えば、各種の情報や指示を情報処理装置１に送信する。

【0144】

運営者受信部５５は、各種の情報を受信する。各種の情報は、例えば、指示や情報の送信結果である。

【0145】

運営者出力部５６は、各種の情報を出力する。各種の情報は、例えば、指示や情報の送信結果である。

【0146】

格納部１１、店舗管理部１１１、接客側管理部１１２、特定条件管理部１１３、候補管理部１１４、接客格納部２１、店舗格納部３１、顧客格納部４１、および運営者格納部５１は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。

【0147】

格納部１１等に情報が記憶される過程は問わない。例えば、記録媒体を介して情報が格納部１１等で記憶されるようになってもよく、通信回線等を介して送信された情報が格納部１１等で記憶されるようになってもよく、あるいは、入力デバイスを介して入力された情報が格納部１１等で記憶されるようになってもよい。

【0148】

受信部１２、顧客端末情報受信部１２１、接客者端末情報受信部１２２、運営側端末情報受信部１２３、接客受信部２５、店舗受信部３５、顧客受信部４５、および運営者受信部５５は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。

【0149】

処理部１３、判断部１３０、出力情報構成部１３１、選択手段１３２、構成手段１３３、接客処理部２３、アバター変換処理部２３３、店舗処理部３３、出力情報構成部３３３、顧客処理部４３、および運営者処理部５３は、通常、プロセッサやメモリ等から実現され得る。処理部１３等の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。なお、プロセッサは、ＣＰＵ、ＭＰＵ、ＧＰＵ等であり、その種類は問わない。

【0150】

送信部１４、出力情報送信部１４１、接客送信部２４、店舗送信部３４、顧客送信部４４、および運営者送信部５４は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。

【0151】

接客受付部２２、店舗受付部３２、顧客受付部４２、および運営者受付部５２は、タッチパネルやキーボード等の入力手段のデバイスドライバーや、メニュー画面の制御ソフトウェア等で実現され得る。

【0152】

接客出力部２６、店舗出力部３６、顧客出力部４６、および運営者出力部５６は、ディスプレイやスピーカー等の出力デバイスを含むと考えても含まないと考えても良い。接客出力部２６は、出力デバイスのドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。

【0153】

接客撮影部２３１、および店舗撮影部３３１は、カメラとそのドライバーソフトとにより実現され得る。

【0154】

接客音声取得部２３２、および店舗音声取得部３３２は、マイクとそのドライバーソフトとにより実現され得る。

【0155】

次に、店舗システムＡの動作例について説明する。まず、情報処理装置１の動作例について、図４のフローチャートを用いて説明する。

【0156】

（ステップＳ４０１）受信部１２１は、端末から開始指示を受信したか否かを判断する。開始指示を受信した場合はステップＳ４０２に行き、開始指示を受信しなかった場合はステップＳ４０１に戻る。なお、端末は、例えば、接客者端末２、店舗端末３、顧客端末４、または運営者端末５である。

【0157】

（ステップＳ４０２）処理部１３は、開始指示に対応するアバター識別子または／および接客者識別子を用いて、開始情報を構成する。次に、送信部１４は、開始指示に対応するアバター識別子と対になる接客識別子、または開始指示に対応する接客者識別子で識別される接客者端末２に、開始情報を送信する。

【0158】

なお、開始情報は、例えば、開始指示に含まれるアバター識別子で識別されるアバターのモデル情報、または開始指示に含まれる接客者識別子で識別されるアバターのモデル情報を有する。

【0159】

（ステップＳ４０３）受信部１２は、端末から情報等を受信したか否かを判断する。情報等を受信した場合はステップＳ４０４に行き、情報等を受信しなかった場合はステップＳ４０６に行く。

【0160】

なお、端末は、例えば、接客者端末２、店舗端末３、顧客端末４、または運営者端末５である。また、受信する情報等は、例えば、接客者端末情報、顧客端末情報、運営者端末情報のうち、１または２種類以上の情報を含む。

【0161】

（ステップＳ４０４）処理部１３は、ステップＳ４０３で受信された情報等を図示しないバッファに蓄積する。

【0162】

（ステップＳ４０５）処理部１３等は、ステップＳ４０３で受信された情報等に応じた処理を行う。ステップＳ４０３に戻る。なお、かかる受信情報処理の例について、図５のフローチャートを用いて説明する。

【0163】

（ステップＳ４０６）処理部１３は、接客を終了するか否かを判断する。接客を終了する場合はステップＳ４０１に戻り、接客を終了しない場合はステップＳ４０３に戻る。

【0164】

なお、接客を終了する場合は、例えば、接客者端末２または店舗端末３または顧客端末４または運営者端末５から、接客識別子または接客者識別子または顧客識別子に対応付く終了指示が受信された場合、または予め決められた時刻になった場合である。

【0165】

なお、図～のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。

【0166】

次に、ステップＳ４０５の受信情報処理の例について、図５のフローチャートを用いて説明する。

【0167】

（ステップＳ５０１）判断部１３０は、ステップＳ４０３で受信された情報等に対して、判断処理を行う。判断処理の例について、図６のフローチャートを用いて説明する。

【0168】

（ステップＳ５０２）処理部１３は、ステップＳ４０３で受信された情報等の中に、接客者端末情報が含まれるか否かを判断する。接客者端末情報が含まれる場合はステップＳ５０２に行き、含まれない場合はステップＳ５０７に行く。

【0169】

なお、接客者端末情報は、常時、接客者端末２から受信されているので、通常、ステップＳ４０３で受信された情報等の中には、接客者端末情報が含まれる。

【0170】

（ステップＳ５０３）出力情報構成部１３１は、ステップＳ５０１における判断処理の結果が特定条件に合致する、との判断結果であるか否かを判断する。特定条件に合致するとの判断結果である場合はステップＳ５０４に行き、特定条件に合致しないとの判断結果である場合はステップＳ５０５に行く。

【0171】

（ステップＳ５０４）出力情報構成部１３１は、特定情報取得処理を行う。特定情報取得処理の例について、図７のフローチャートを用いて説明する。

【0172】

（ステップＳ５０５）出力情報構成部１３１は、接客者端末情報、またはステップＳ５０４で取得された特定情報のうちの１または２種類の情報を用いて、出力情報を構成する。かかる出力情報構成処理の例について、図８のフローチャートを用いて説明する。

【0173】

（ステップＳ５０６）出力情報送信部１４１は、ステップＳ５０５で構成された出力情報を、店舗端末３と顧客端末４のうちの１または２以上の端末に送信する。

【0174】

（ステップＳ５０７）処理部１３は、ステップＳ４０３で受信された情報等の中に、顧客端末情報が含まれるか否かを判断する。顧客端末情報が含まれる場合はステップＳ５０８に行き、含まれない場合は上位処理にリターンする。

【0175】

なお、顧客端末情報は、常時、店舗端末３または顧客端末４から受信されているので、通常、ステップＳ４０３で受信された情報等の中には、顧客端末情報が含まれる。

【0176】

（ステップＳ５０８）送信部１４は、受信された顧客端末情報を、接客者端末２に送信する。上位処理にリターンする。

【0177】

次に、ステップＳ５０２の判断処理の例について、図６のフローチャートを用いて説明する。

【0178】

（ステップＳ６０１）判断部１３０は、カウンタｉに１を代入する。

【0179】

（ステップＳ６０２）判断部１３０は、ｉ番目の特定条件が特定条件管理部１１３に存在するか否かを判断する。ｉ番目の特定条件が存在する場合はステップＳ６０３に行き、存在しない場合はステップＳ６０９に行く。

【0180】

（ステップＳ６０３）判断部１３０は、ｉ番目の特定条件を特定条件管理部１１３から取得する。

【0181】

（ステップＳ６０４）判断部１３０は、ｉ番目の特定条件に合致するか否かの判断のために使用する１または２以上の情報を取得する。

【0182】

かかる情報は、例えば、接客者端末２または店舗端末３または顧客端末４または運営者端末５から受信された操作情報、接客者端末２または店舗端末３または顧客端末４から受信された音声情報、または接客者端末２または店舗端末３または顧客端末４から受信された映像である。

【0183】

（ステップＳ６０５）判断部１３０は、ステップＳ６０４で、ｉ番目の特定条件の判断のために使用する情報を取得できたか否かを判断する。取得できた場合はステップＳ６０６に行き、取得できなかった場合はステップＳ６０８に行く。

【0184】

（ステップＳ６０６）判断部１３０は、ステップＳ６０４で取得した１以上の情報がｉ番目の特定条件に合致するか否かを判断する。合致する場合はステップＳ６０７に行き、合致しない場合はステップＳ６０８に行く。

【0185】

（ステップＳ６０７）判断部１３０は、変数「判断結果」に値「合致」を代入する。上位処理にリターンする。

【0186】

（ステップＳ６０８）判断部１３０は、カウンタｉを１、インクリメントする。（ステップＳ６０２に戻る。

【0187】

（ステップＳ６０９）判断部１３０は、変数「判断結果」に値「不合致」を代入する。上位処理にリターンする。

【0188】

次に、ステップＳ５０４の特定情報取得処理の例について、図７のフローチャートを用いて説明する。

【0189】

（ステップＳ７０１）出力情報構成部１３１は、合致すると判断した特定条件と対になる選択条件が、特定条件管理部１１３に存在するか否かを判断する。選択条件が存在する場合はステップＳ７０２に行き、存在しない場合はステップＳ７１０に行く。

【0190】

（ステップＳ７０２）出力情報構成部１３１は、カウンタｉに１を代入する。

【0191】

（ステップＳ７０３）出力情報構成部１３１は、合致すると判断された特定条件と対になるｉ番目の選択条件が、特定条件管理部１１３に存在するか否かを判断する。ｉ番目の選択条件が存在する場合はステップＳ７０４に行き、存在しない場合はステップＳ７０９に行く。

【0192】

（ステップＳ７０４）出力情報構成部１３１は、合致すると判断された特定条件と対になるｉ番目の選択条件を特定条件管理部１１３から取得する。

【0193】

（ステップＳ７０５）出力情報構成部１３１は、ステップＳ７０４で取得したｉ番目の選択条件の判断に使用する１または２以上の情報を取得する。なお、かかる情報は、例えば、カレント店舗識別子と対になる店舗属性値、カレント顧客識別子と対になる顧客属性値のうちの１以上の情報である。

【0194】

（ステップＳ７０６）出力情報構成部１３１は、ステップＳ７０５で取得した１以上の情報がｉ番目の選択条件に合致するか否かを判断する。ｉ番目の選択条件に合致する場合はステップＳ７０７に行き、合致しない場合はステップＳ７０８に行く。

【0195】

（ステップＳ７０７）出力情報構成部１３１は、ｉ番目の選択条件と対になる特定情報を候補管理部１１４から取得する。上位処理にリターンする。

【0196】

（ステップＳ７０８）出力情報構成部１３１は、カウンタｉを１、インクリメントする。ステップＳ７０３に戻る。

【0197】

（ステップＳ７０９）出力情報構成部１３１は、合致すると判断された特定条件と対になるデフォルトの特定情報を候補管理部１１４から取得する。上位処理にリターンする。

【0198】

（ステップＳ７１０）出力情報構成部１３１は、合致すると判断された特定条件と対になる特定情報を候補管理部１１４から取得する。上位処理にリターンする。

【0199】

次に、ステップＳ５０５の出力情報構成処理の例について、図８のフローチャートを用いて説明する。

【0200】

（ステップＳ８０１）出力情報構成部１３１は、特定情報を取得しているか否かを判断する。特定情報を取得している場合はステップＳ８０２に行き、特定情報を取得していない場合はステップＳ８０６に行く。

【0201】

（ステップＳ８０２）出力情報構成部１３１は、取得している特定情報が接客者の動きを利用してアバターを構成する情報であるか、接客者の動きを利用しないでアバターを構成する情報であるかを判断する。接客者の動きを利用する場合はステップＳ８０３に行き、接客者の動きを利用しない場合はステップＳ８０５に行く。

【0202】

なお、例えば、出力情報構成部１３１は、取得した特定情報のタイプに応じて、接客者の動きを利用するか否かを判断する。例えば、出力情報構成部１３１は、取得した特定情報のタイプがデータ（例えば、画像）であれば、接客者の動きを利用する、と判断し、取得した特定情報のタイプがプログラム（例えば、実行モジュール）であれば、接客者の動きを利用しない、と判断する。また、接客者の動きを利用するか否かを示すフラグが、特徴情報と対に管理されていても良い。

【0203】

（ステップＳ８０３）出力情報構成部１３１は、接客者の動きを模倣したアバターのモデル情報を取得する。また、出力情報構成部１３１は、受信されている接客者音声情報を取得する。

【0204】

（ステップＳ８０４）出力情報構成部１３１は、ステップＳ８０３で取得したアバターのモデル情報に、取得している特定情報を付加し、出力するアバターのモデル情報を構成する。また、出力情報構成部１３１は、当該アバターのモデル情報と接客者音声情報とを有する出力情報を構成する。上位処理にリターンする。

【0205】

（ステップＳ８０５）出力情報構成部１３１は、取得している特定情報を用いて、アバターのモデル情報を取得する。出力情報構成部１３１は、当該アバターのモデル情報と接客者音声情報とを有する出力情報を構成する。上位処理にリターンする。なお、取得している特定情報は、例えば、接客者の動きとは独立に、アバターを構成するためのプログラムである。

【0206】

（ステップＳ８０６）出力情報構成部１３１は、受信されている情報を用いて、アバターのモデル情報を取得する。出力情報構成部１３１は、当該アバターのモデル情報と接客者音声情報とを有する出力情報を構成する。上位処理にリターンする。

【0207】

次に、接客者端末２の動作例について、図９のフローチャートを用いて説明する。

【0208】

（ステップＳ９０１）接客受付部２２は、開始指示を受け付けたか否かを判断する。開始指示を受け付けた場合はステップＳ９０２に行き、開始指示を受け付けなかった場合はステップＳ９０３に行く。

【0209】

（ステップＳ９０２）接客処理部２３は、接客格納部２１から接客者識別子を取得する。次に、接客処理部２３は、接客者識別子を有する開始指示を構成する。次に、接客送信部２４は、構成した開始指示を、情報処理装置１に送信する。ステップＳ９０１に戻る。

【0210】

（ステップＳ９０３）接客受信部２５は、情報処理装置１から開始情報を受信したか否かを判断する。開始情報を受信した場合はステップＳ９０４に行き、開始情報を受信しなかった場合はステップＳ９１６に行く。

【0211】

（ステップＳ９０４）接客処理部２３は、受信された開始情報に含まれるモデル情報を取得する、または開始情報に含まれるアバター識別子と対になるモデル情報を接客格納部２１から取得する。

【0212】

（ステップＳ９０５）接客撮影部２３１は、カメラを起動し、撮影を開始する。接客音声取得部２３２は、マイクを起動し、集音を開始する。

【0213】

（ステップＳ９０６）接客撮影部２３１は、接客者映像を取得する。

【0214】

（ステップＳ９０７）アバター変換処理部２３３は、接客者映像から接客者の動きの情報を抽出し、当該動きの情報に従って、ステップＳ９０４で取得したモデル情報を変形し、送信するモデル情報を構成する。

【0215】

（ステップＳ９０８）接客音声取得部２３２は、接客者音声情報を取得する。

【0216】

（ステップＳ９０９）接客処理部２３は、ステップＳ９０７で構成したモデル情報とステップＳ９０８で取得した接客者音声情報とを有する接客者端末情報を構成する。

【0217】

（ステップＳ９１０）接客送信部２４は、ステップＳ９０９で構成された接客者端末情報を、接客者識別子に対応付けて、情報処理装置１に送信する。

【0218】

（ステップＳ９１１）接客処理部２３は、接客を終了するか否かを判断する。接客を終了する場合はステップＳ９１２に行き、接客を終了しない場合はステップＳ９１３に行く。なお、接客を終了する場合は、例えば、接客受付部２２が終了指示を受け付けた場合、接客受信部２５が終了指示を情報処理装置１から受信した場合である。

【0219】

（ステップＳ９１２）接客処理部２３は、接客の終了処理を行う。ステップＳ９０１に戻る。なお、接客の終了処理とは、例えば、カメラおよびマイクをオフにすることである。

【0220】

（ステップＳ９１３）接客受信部２５は、顧客端末情報を受信したか否かを判断する。顧客端末情報を受信した場合はステップＳ９１４に行き、顧客端末情報を受信しなかった場合はステップＳ９０６に戻る。

【0221】

（ステップＳ９１４）接客出力部２６は、ステップＳ９１３で受信された顧客端末情報が有する顧客映像を出力する。

【0222】

（ステップＳ９１５）接客出力部２６は、ステップＳ９１３で受信された顧客端末情報が有する顧客音声情報を出力する。ステップＳ９０６に戻る。

【0223】

（ステップＳ９１６）接客受付部２２は、操作を受け付けたか否かを判断する。操作を受け付けた場合はステップＳ９１７に行き、操作を受け付けなかった場合はステップＳ９０１に戻る。

【0224】

（ステップＳ９１７）接客処理部２３は、接客格納部２１から接客者識別子を取得する。次に、接客処理部２３は、受け付けた操作に従って、接客者識別子を有する操作情報を構成する。次に、接客送信部２４は、構成した操作情報を、情報処理装置１に送信する。ステップＳ９０１に戻る。

【0225】

なお、図９のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。

【0226】

次に、店舗端末３の動作例について、図１０のフローチャートを用いて説明する。

【0227】

（ステップＳ１００１）店舗受付部３２は、開始指示を受け付けたか否かを判断する。開始指示を受け付けた場合はステップＳ１００２に行き、開始指示を受け付けなかった場合はステップＳ１００６に行く。なお、開始指示は、例えば、顧客識別子と接客者識別子とを有する。開始指示は、例えば、顧客識別子とアバター識別子とを有する。開始指示は、例えば、顧客識別子と接客者識別子とアバター識別子とを有する。

【0228】

（ステップＳ１００２）店舗処理部３３は、店舗識別子を店舗格納部３１から取得する。次に、店舗処理部３３は、当該店舗識別子を有する開始指示を構成する。次に、店舗送信部３４は、当該開始指示を情報処理装置１に送信する。

【0229】

（ステップＳ１００３）店舗撮影部３３１は、カメラを起動し、撮影を開始する。店舗音声取得部３３２は、マイクを起動し、集音を開始する。ステップＳ１００１に戻る。なお、ここで、接客は開始される、とする。

【0230】

（ステップＳ１００４）店舗処理部３３は、接客中であるか否かを判断する。接客中であればステップＳ１００５に行き、接客中でなければステップＳ１００１に戻る。

【0231】

（ステップＳ１００５）店舗撮影部３３１は、顧客映像を取得する。

【0232】

（ステップＳ１００６）店舗音声取得部３３２は、顧客音声情報を取得する。

【0233】

（ステップＳ１００７）店舗処理部３３は、顧客映像と顧客音声情報とを有する顧客端末情報を構成する。なお、送信される顧客端末情報は、例えば、接客者識別子、店舗識別子に対応付いている。また、送信される顧客端末情報は、例えば、店舗端末識別子に対応付いていても良い。店舗端末識別子とは、店舗端末３を識別する情報である。

【0234】

（ステップＳ１００８）店舗送信部３４は、ステップＳ１００７で構成された顧客端末情報を情報処理装置１に送信する。

【0235】

（ステップＳ１００９）店舗受信部３５は、情報処理装置１から出力情報を受信したか否かを判断する。出力情報を受信した場合はステップＳ１０１２に行き、出力情報を受信しなかった場合はステップＳ１０１５に行く。

【0236】

（ステップＳ１０１０）店舗処理部３３は、ステップＳ１０１１で受信された出力情報を用いて、出力するアバターを構成する。店舗処理部３３は、例えば、出力情報が有するアバターのモデル情報を用いて、出力するアバターを構成する。店舗処理部３３は、例えば、出力情報が有する動き情報と、店舗格納部３１のアバターのモデル情報とを用いて、出力するアバターを構成する。店舗処理部３３は、例えば、出力情報が有する特定情報を用いて、出力するアバターを構成する。

【0237】

（ステップＳ１０１１）店舗出力部３６は、ステップＳ１０１２で構成されたアバターを出力する。

【0238】

（ステップＳ１０１２）店舗処理部３３は、ステップＳ１００９で受信された出力情報に含まれる接客者音声情報を取得する。店舗出力部３６は、当該接客者音声情報を出力する。

【0239】

（ステップＳ１０１３）店舗処理部３３は、接客を終了するか否かを判断する。接客を終了する場合はステップＳ１０１４に行き、接客を終了しない場合はステップＳ１００５に戻る。接客を終了する場合は、例えば、店舗受信部３５が終了指示を受信した場合、または店舗受付部３２が終了指示を受け付けた場合である。

【0240】

（ステップＳ１０１４）店舗処理部３３は、カメラ、マイクの電源をオフにする。ステップＳ１０１に戻る。

【0241】

なお、図１０のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。

【0242】

次に、顧客端末４の動作例について、図１１のフローチャートを用いて説明する。図１１のフローチャートにおいて、図１０のフローチャートと同一のステップについて説明を省略する。なお、図１１のフローチャートにおいて、図１０のフローチャートと同一のステップでも、動作を行う主体は、図１０のフローチャートにおける主体とは異なることは言うまでもない。

【0243】

（ステップＳ１１０１）顧客受付部４２は、店舗識別子を受け付けたか否かを判断する。店舗識別子を受け付けた場合はステップＳ１１０２に行き、店舗識別子を受け付けなかった場合はステップＳ１００４に行く。

【0244】

（ステップＳ１１０２）顧客処理部４３は、顧客格納部４１から顧客識別子を取得する。

【0245】

（ステップＳ１１０３）顧客処理部４３は、顧客識別子と店舗識別子とを含む開始指示を構成する。顧客送信部４４は、当該開始指示を情報処理装置１に送信する。ステップＳ１００１に行く。なお、開始指示は、接客者識別子、アバター識別子を有しても良い。かかる場合、ステップＳ１１０１で顧客受付部４２が、接客者識別子、アバター識別子を受け付けている。

【0246】

なお、図１１のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。

【0247】

次に、運営者端末５の動作例について説明する。運営者端末５の運営者受付部５２は、操作を受け付ける。次に、運営者処理部５３は、当該操作に対応する操作情報を構成する。次に、運営者送信部５４は、当該操作情報を情報処理装置１に送信する。また、運営者端末５の運営者受信部５５は、顧客端末情報を受信する。そして、運営者出力部５６は、顧客端末情報を出力する。また、運営者受信部５５は、接客者端末情報を受信する。そして、運営者出力部５６は、接客者端末情報を出力する。なお、操作情報は、例えば、「乾杯ボタンＯＮ」「終了ボタンＯＮ」である。

【0248】

以下、本実施の形態における店舗システムＡの具体的な動作について説明する。店舗システムＡの概念図は図１である。

【0249】

今、情報処理装置１の店舗管理部１１１には、図１２に示す店舗管理表が格納されている、とする。店舗管理表とは、店舗情報を管理する表である。店舗管理表は、「ＩＤ」「店舗識別子」「店舗属性値」を有する１以上のレコードを管理する。「店舗属性値」は、ここでは「地区識別子」「業態」「高級度」を有する。「ＩＤ」はレコードを識別する情報である。「業態」は、例えば、「クラブ」「スナック」「バー」「一杯飲み屋」等を採り得る、とする。「高級度」は、ここでは、１から５のいずれかを採り得る、とする。そして、高級度「５」が、店舗が最も高級であるクラスに属することを示す。

【0250】

また、接客側管理部１１２には、図１３に示す接客者管理表が格納されている、とする。接客者管理表とは、接客者情報を管理する表である。接客者管理表は、「ＩＤ」「接客者識別子」「接客者属性値」「アバター識別子」を有する１以上のレコードを管理する。「接客者属性値」は、「性別」「年齢」「出身地」「居住地」「接客レベル」を有する。なお、「接客レベル」は、ここでは、例えば、過去の１または２以上の顧客の評価値の平均値である、とする。「アバター識別子」は、対になる接客者識別子で識別される接客者の１または２以上の分身であるアバターの識別子である。なお、ここでは、接客者識別子とアバター識別子とは、１対１、または１対多の関係であるが、多対多、多対１の関係でも良い。

【0251】

また、接客側管理部１１２には、図１４に示すアバター管理表が格納されている、とする。アバター管理表とは、アバター情報を管理する表である。アバター管理表は、「ＩＤ」「アバター識別子」「アバター属性値」を有する１以上のレコードを管理する。「アバター属性値」は、「性別」「年齢」「タイプ」「データサイズ」「モデル情報」を有する。

【0252】

また、特定条件管理部１１３には、図１５に示す特定条件管理表が格納されている、とする。特定条件管理表とは、特定条件、選択条件、および候補情報を管理する表である。特定条件管理表は、「ＩＤ」「モード識別子」「特定条件」「選択条件」「候補情報」を有する１以上のレコードを管理する。なお、「選択条件」を有さないレコードが存在しても良い。「モード識別子」は、特定のモードを識別する情報である。

【0253】

「ＩＤ＝１」の特定条件は、「顧客端末情報が有する音声情報の音声認識結果の文字列の中に「カンパイ」含まれること」または「接客者端末情報が有する操作情報の中に「乾杯ボタンＯＮ」が含まれること」または「運営側端末情報が有する操作情報の中に「乾杯ボタンＯＮ」が含まれること」である。「乾杯ボタンＯＮ」は、乾杯ボタンが指示されたことを示す情報である。

【0254】

「ＩＤ＝２」の特定条件は、静止画「おじぎ画像．ｊｐｇ」との類似度が０．８以上のフレームが、接客者端末情報の中の映像に含まれることである。静止画「おじぎ画像．ｊｐｇ」は、お辞儀をした時にカメラが撮影した後頭部の写真である。

【0255】

「ＩＤ＝１」の選択条件「業態＝クラブ ＯＲ （業態＝スナック ＡＮＤ 高級度＞＝４）」は、「カレント店舗識別子と対になる店舗属性値「業態」が「クラブ」であること」または「カレント店舗識別子と対になる店舗属性値「業態」が「スナック」であり、かる店舗属性値「高級度」が４以上であること」である。「ＩＤ＝１」の選択条件「他」は、選択条件「業態＝クラブ ＯＲ （業態＝スナック ＡＮＤ 高級度＞＝４）」を満たさないことである。つまり、選択条件「他」は、デフォルトの特定情報に対応する。

【0256】

「ＩＤ＝１」の候補情報「シャンパン．ｊｐｇ」は、アバターが乾杯する際に手に持つ画像であり、シャンパングラスの画像である特定情報である。「ＩＤ＝１」の候補情報「ビール．ｊｐｇ」は、アバターが乾杯する際に手に持つ画像であり、ビールジョッキの画像である特定情報である。

【0257】

「ＩＤ＝２」の候補情報「お見送り．ｅｘｅ」は、顧客に対して出力されているアバターのモデル情報を用いて、当該アバターが顧客をお見送りするように動作させるプログラムである。

【0258】

かかる状況において、図１６のフロー図、図１７の店舗システムＡの概念図を用いて、 以下に、店舗システムＡの具体的な動作例について説明する。

【0259】

ここでは、複数名の顧客が、店舗識別子「Ｓ００１」で識別される店舗を訪れ、店舗端末３に表示されているコード（例えば、ＱＲコード（登録商標）、バーコード）を、一人の顧客Ａの顧客端末４で読み取り、当該コードに埋め込まれた店舗識別子「Ｓ００１」を取得した、とする（１６０１）。次に、顧客Ａは、顧客端末４に、チェックイン指示を入力した、とする。なお、コードの読み込みが、チェックイン指示の入力となっても良い。また、チェックイン指示とは、店舗への入店を示す指示であり、接客の開始指示であっても良い。

【0260】

次に、顧客端末４の顧客受付部４２は、チェックイン指示を受け付ける。次に、顧客処理部４３は、顧客格納部４１の顧客識別子「Ｃ００１」を読み出し、店舗識別子「Ｓ００１」と顧客識別子「Ｃ００１」とを含む情報を構成する。次に、顧客送信部４４は、当該情報を情報処理装置１に送信する（１６０２）。

【0261】

次に、情報処理装置１の受信部１２は、店舗識別子「Ｓ００１」と顧客識別子「Ｃ００１」とを受信する。次に、処理部１３は、顧客識別子「Ｃ００１」が図示しない顧客管理表で管理されていることを確認し、認証成功である、と判断する（１６０２）。なお、認証処理は必須ではない。

【0262】

次に、処理部１３は、接客者を決定する。ここで、処理部１３は、接客者管理表（図１３）から接客側情報「＜接客者識別子＞Ｒ００１ ＜アバター識別子＞Ａ００１」を取得した、とする（１６０３）。なお、処理部１３が接客者を決定するアルゴリズムは問わない。

【0263】

次に、処理部１３は、当該アバター識別子「Ａ００１」と対になるモデル情報をアバター管理表（図１４）から取得し、当該モデル情報と、顧客識別子「Ｃ００１」とを有する開始情報を構成する。

【0264】

次に、送信部１４は、処理部１３が取得した接客者識別子「Ｒ００１」で識別される接客者Ｘの接客者端末２に、開始情報を送信する（１６０４）。

【0265】

次に、接客者端末２の接客受信部２５は、当該開始情報を受信する。ここで接客出力部２６は、接客の開始確認のために、接客が開始される旨の情報を出力しても良い。そして、接客受付部２２は、接客者からの確認を受け付けても良い（１６０５）。

【0266】

次に、接客処理部２３は、以下のように、アバターの処理を開始する（１６０６）。つまり、接客処理部２３は、まず、受信された開始情報に含まれるモデル情報を取得する。次に、接客者端末２の接客撮影部２３１は、カメラを起動し、撮影を開始する。接客音声取得部２３２は、マイクを起動し、集音を開始する。そして、接客撮影部２３１は、接客者映像を取得する。そして、アバター変換処理部２３３は、接客者映像から接客者の動きの情報を抽出し、当該動きの情報に従って、取得したモデル情報を変形し、送信するモデル情報を構成する。また、接客音声取得部２３２は、接客者音声情報を取得する。次に、接客処理部２３は、構成したモデル情報と取得した接客者音声情報とを有する接客者端末情報を構成する。次に、接客送信部２４は、構成された接客者端末情報を、接客者識別子「Ｒ００１」に対応付けて、情報処理装置１に送信する（図１７の１７０１）。以上の接客者端末２の処理は、接客が終了するまで繰り返される。

【0267】

また、接客の開始後の適切なタイミングで、店舗撮影部３３１（図１７のカメラ）は、顧客映像の取得を開始する。また、店舗音声取得部３３２は、顧客音声情報の取得を開始する。そして、店舗処理部３３は、顧客映像と顧客音声情報とを有する顧客端末情報を構成する。次に、店舗送信部３４は、構成された顧客端末情報を情報処理装置１に送信する（１７０２）。以上の処理が、接客が終了するまで繰り返される。

【0268】

そして、情報処理装置１の受信部１２は、接客者端末２から接客者端末情報を受信する。次に、処理部１３は、当該接客者端末情報を図示しないバッファに蓄積する。

【0269】

また、受信部１２４は、店舗端末３から顧客端末情報を受信する。次に、処理部１３は、当該顧客端末情報を図示しないバッファに蓄積する。

【0270】

そして、判断部１３０は、接客者端末情報および顧客端末情報に対して、特定条件管理表（図１５）を参照し、図６のフローチャートで説明した判断処理を行う。ここで、判断部１３０は、接客者端末情報および顧客端末情報は、特定条件を満たさなかった、と判断した、とする。

【0271】

そして、特定条件を満たさない間は、図１７に示すように、接客者Ｘの動きがアバターに反映される（１７０１）。そして、当該アバターのモデル情報と接客者音声情報とを有する接客者端末情報が、接客者端末２から情報処理装置１を経由して、店舗端末３に送信される（１７０２）。そして、店舗端末３は、当該接客者端末情報を受信する。次に、店舗端末３は、当該接客者端末情報が有するアバターのモデル情報を用いて、アバターをモニタに表示する（図１７参照）。また、店舗端末３は、スピーカーから、接客者端末情報が有する接客者音声情報を出力する。

【0272】

また、店舗端末３では、顧客映像と顧客音声情報とが取得され、店舗端末３から情報処理装置１を経由して、接客者端末２に送信される（１７０３）。

【0273】

そして、接客者端末２は、顧客映像と顧客音声情報とを受信する。次に、接客者端末２は、モニタに顧客映像を表示し、スピーカーから顧客音声情報を出力する。特定条件を満たさない間は、以上の処理が継続される。

【0274】

そして、接客中のあるタイミングで、接客者は、乾杯をするタイミングであると判断し、「乾杯しましょう」との音声を発生し、顧客の様子を見て、少し間を取り、「カンパーイ」と発生し、乾杯の動作を真似た動きであり、手を挙げる動きを行いながら、接客者端末２に表示されている「乾杯」ボタン（図示しない）を指示した、とする。

【0275】

すると、接客処理部２３は、「乾杯しましょう。・・・・カンパーイ・・・」を含む接客者音声情報、「乾杯の動作を真似た動きであり、手を挙げる動き」を撮影した接客者映像を取得する。また、接客者端末２の接客受付部２２は、接客者操作情報「乾杯ボタンＯＮ」を受け付ける。

【0276】

次に、アバター変換処理部２３３は、接客者映像から接客者の動きの情報を抽出し、当該動きの情報に従って、取得したモデル情報を変形し、送信するモデル情報を構成する。

【0277】

次に、接客処理部２３は、当該接客者操作情報「乾杯ボタンＯＮ」、当該接客者音声情報、および当該モデル情報を有する接客者端末情報を構成する。次に、接客送信部２４は、当該接客者端末情報を情報処理装置１に送信する。

【0278】

次に、情報処理装置１の受信部１２４は、接客者端末２から当該接客者端末情報を受信する。次に、処理部１３は、当該接客者端末情報を図示しないバッファに蓄積する。

【0279】

そして、判断部１３０は、接客者端末情報に対して、特定条件管理表（図１５）を参照し、図６のフローチャートで説明した判断処理を行う。ここで、判断部１３０は、接客者端末情報に含まれる接客者操作情報「乾杯ボタンＯＮ」が、特定条件管理表の「ＩＤ＝１」の特定条件を満たす、と判断する。

【0280】

出力情報構成部１３１は、図７、図８のフローチャートを用いて説明した処理により、出力情報を構成する。つまり、出力情報構成部１３１は、「ＩＤ＝１」の特定条件と対になる選択条件が、特定条件管理表（図１５）に存在する、と判断する。

【0281】

次に、出力情報構成部１３１は、「ＩＤ＝１」の１番目の選択条件の判断に使用する情報であり、カレント店舗識別子「Ｓ００１」の属性値である業態「スナック」および高級度「４」を、店舗管理表（図１２）から取得する。次に、出力情報構成部１３１は、取得した業態「スナック」および高級度「４」が、特定条件管理表の「ＩＤ＝１」の１番目の選択条件を満たす、と判断する。次に、出力情報構成部１３１は、１番目の選択条件と対になる特定情報（候補情報）「シャンパン．ｊｐｇ」を取得し、当該特定情報のファイル名で識別される画像データを格納部１１から取得する。また、出力情報構成部１３１は、「ＩＤ＝１」の特定条件と対になるモード識別子「乾杯モード」を取得する。

【0282】

次に、取得している特定情報のタイプがデータ（ここでは、画像）であるので、出力情報構成部１３１は、接客者の動きを利用してアバターを構成する情報である、と判断する。なお、ここでは、出力情報構成部１３１は、取得した特定情報のタイプがデータであれば、接客者の動きを利用する、と判断し、取得した特定情報のタイプがプログラムであれば、接客者の動きを利用しない、と判断する、とする。

【0283】

次に、出力情報構成部１３１は、接客者の動きを模倣したアバターのモデル情報を取得する。次に、出力情報構成部１３１は、取得したアバターのモデル情報に、取得している特定情報「シャンパン．ｊｐｇ」を付加し、出力するアバターのモデル情報を構成する。なお、出力情報構成部１３１は、取得しているモード識別子「乾杯モード」に対応する位置（アバターの手の位置）に「シャンパン．ｊｐｇ」を付加する。つまり、出力情報構成部１３１は、特定情報を用いて、特定条件に対応するモードに応じたモデル情報を構成する。また、構成されたアバターは、シャンパングラスを手に持ったアバターである。次に、出力情報構成部１３１は、当該モデル情報と受信されている接客者音声情報とを有する出力情報を構成する。次に、出力情報送信部１４１は、当該出力情報を店舗端末３に送信する。

【0284】

次に、店舗端末３の店舗受信部３５は、当該出力情報を受信する。次に、店舗端末３の店舗処理部３３は、当該出力情報が有するアバターのモデル情報を用いて、アバターを構成する。次に、店舗出力部３６は、当該アバターをモニタに表示する。かかるアバターの表示例は、図１８である。モニタのアバターは、シャンパングラスを手に持って、乾杯の動作を行うアバターである。また、店舗端末３の店舗出力部３６は、スピーカーから、当該出力情報が有する接客者音声情報を出力する。なお、図１８の１８０１は「乾杯」ボタン、１８０２は「終了」ボタンである。

【0285】

次に、顧客が、店舗端末３のモニタの「終了」ボタンを指示した、とする。次に、店舗端末３の店舗受付部３２は、顧客操作情報「終了ボタンＯＮ」を受け付ける。次に、店舗処理部３３は、当該顧客操作情報「終了ボタンＯＮ」と顧客識別子「Ｃ００１」と接客識別子と決済情報（例えば、費用）とを有する顧客端末情報を構成する。次に、店舗送信部３４は、当該顧客操作情報「終了ボタンＯＮ」を有する顧客端末情報を情報処理装置１に送信する（図１６の１６０７）。

【0286】

次に、情報処理装置１の受信部１２は、当該顧客端末情報を受信する。次に、処理部１３は、当該顧客端末情報が有する顧客識別子「Ｃ００１」と決済情報とを用いて、顧客識別子「Ｃ００１」で識別される顧客に対する課金処理を行う。なお、課金処理は公知の処理である。

【0287】

次に、判断部１３０は、受信された顧客端末情報に対して、判断処理を行う。つまり、判断部１３０は、当該顧客端末情報が有する顧客操作情報「終了ボタンＯＮ」が、特定条件管理表（図１５）の「ＩＤ＝２」の特定条件を満たす、と判断する。次に、出力情報構成部１３１は、合致すると判断した特定条件と対になる選択条件が特定条件管理表に存在しないと判断する。次に、出力情報構成部１３１は、「ＩＤ＝２」の特定条件と対になる特定情報「お見送り．ｅｘｅ」を特定条件管理表（図１５）から取得する。また、出力情報構成部１３１は、「ＩＤ＝２」の特定条件と対になるモード識別子「お見送りモード」を取得する。

【0288】

次に、出力情報構成部１３１は、取得した特定情報がプログラム（実行モジュール）であるので、接客者の動きを利用しないでアバターを構成するモデル情報を取得する、と判断する。

【0289】

次に、出力情報構成部１３１は、モード識別子「お見送りモード」に対応する処理を行う。つまり、出力情報構成部１３１は、顧客端末４で出力されているアバターのモデル情報を特定情報であるプログラム「お見送り．ｅｘｅ」に与え、当該プログラムを実行し、顧客をお見送りするアバターのモデル情報を構成する。かかる間、アバターのモデル情報の構成のために、接客者の動きを利用しないので、接客者は、動く必要はなく、体は休憩できる。

【0290】

ただし、出力情報構成部１３１は、この間に受信された接客者音声情報「今日は、有難うございました。また、いらしてください。・・・」と見送りするアバターのモデル情報とを含む出力情報を構成することは好適である。ただし、出力情報構成部１３１は、モード識別子「お見送りモード」に対応する音声情報（例えば、「本日は有難う。また、ぜひお越しください。」の音声情報）を格納部１１から読み出し、当該音声情報を含む出力情報を構成しても良い。かかる場合、接客者は、発声する必要もなく、休むことができる。

【0291】

次に、出力情報送信部１４１は、出力情報構成部１３１が構成した出力情報を、店舗端末３に送信する。

【0292】

次に、店舗端末３の店舗受信部３５は、当該出力情報を受信する。次に、店舗端末３の店舗処理部３３は、当該出力情報が有するアバターのモデル情報を用いて、顧客のお見送りをする動作を行うアバターを構成する。次に、店舗出力部３６は、当該アバターをモニタに表示する。また、店舗端末３の店舗出力部３６は、スピーカーから、当該出力情報が有する接客者音声情報「今日は、有難うございました。また、いらしてください。・・・」を出力する。

【0293】

以上、本実施の形態によれば、特定の場合に適切なアバターの動作を実現できる。また、本実施の形態によれば、接客者または顧客からの音声に基づいて、特定の場合に適切なアバターの動作を実現できる。また、本実施の形態によれば、接客者または顧客または運営者の端末に対する操作に基づいて、特定の場合に適切なアバターの動作を実現できる。例えば、本実施の形態によれば、乾杯の動作を適切に行うアバターを提供できる。

【0294】

さらに、本実施の形態における処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをＣＤ－ＲＯＭなどの記録媒体に記録して流布しても良い。なお、このことは、本明細書における他の実施の形態においても該当する。なお、本実施の形態における情報処理装置１を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータを、顧客の接客者が使用する接客者端末から送信された接客者端末情報を受信する接客者端末情報受信部と、当該顧客が居る店舗の店舗端末または当該顧客が使用する顧客端末から送信された顧客端末情報を受信する顧客端末情報受信部と、前記接客者の動作を模倣したアバターを構成するための情報を含み、前記店舗端末または前記顧客端末に出力される情報を構成するための情報である出力情報を構成する出力情報構成部と、前記出力情報を前記店舗端末または前記顧客端末に送信する出力情報送信部として機能させ、前記出力情報構成部は、前記接客者端末情報または前記顧客端末情報または運営者端末から受信された運営者端末情報が、アバターの出力を特定の出力とする特定条件を満たす場合に、前記接客者の動作を模倣しないアバターを構成するための特定情報、または前記接客者の動作を模倣したアバターを構成するための情報を変更する特定情報を取得し、当該特定情報に基づく出力情報を構成するものとして、前記コンピュータを機能させるためのプログラムである。

【0295】

なお、上記プログラムにおいて、情報を送信する送信ステップや、情報を受信する受信ステップなどでは、ハードウェアによって行われる処理、例えば、送信ステップにおけるモデムやインターフェースカードなどで行われる処理（ハードウェアでしか行われない処理）は含まれない。

【0296】

また、上記プログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。

【0297】

また、上記各実施の形態において、一の装置に存在する２以上の通信手段は、物理的に一の媒体で実現されても良いことは言うまでもない。

【0298】

また、上記各実施の形態において、各処理（各機能）は、単一の装置（システム）によって集中処理されることによって実現されてもよく、あるいは、複数の装置によって分散処理されることによって実現されてもよい。

【0299】

本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。

【産業上の利用可能性】

【0300】

以上のように、本発明にかかる情報処理装置は、特定の場合に適切なアバターの動作を実現できるという効果を有し、情報処理装置等として有用である。

【符号の説明】

【0301】

Ａ 店舗システム
１ 情報処理装置
２ 接客者端末
３ 店舗端末
４ 顧客端末
５ 運営者端末
１１ 格納部
１２ 受信部
１３ 処理部
１４ 送信部
２１ 接客格納部
２２ 接客受付部
２３ 接客処理部
２４ 接客送信部
２５ 接客受信部
２６ 接客出力部
３１ 店舗格納部
３２ 店舗受付部
３３ 店舗処理部
３４ 店舗送信部
３５ 店舗受信部
３６ 店舗出力部
４１ 顧客格納部
４２ 顧客受付部
４３ 顧客処理部
４４ 顧客送信部
４５ 顧客受信部
４６ 顧客出力部
５１ 運営者格納部
５２ 運営者受付部
５３ 運営者処理部
５４ 運営者送信部
５５ 運営者受信部
５６ 運営者出力部
１１１ 店舗管理部
１１２ 接客側管理部
１１３ 特定条件管理部
１１４ 候補管理部
１２１ 顧客端末情報受信部
１２２ 接客者端末情報受信部
１２３ 運営側端末情報受信部
１３０ 判断部
１３１、３３３ 出力情報構成部
１３２ 選択手段
１３３ 構成手段
１４１ 出力情報送信部
２３１ 接客撮影部
２３２ 接客音声取得部
２３３ アバター変換処理部
３３１ 店舗撮影部
３３２ 店舗音声取得部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】