知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024118302
(43)【公開日】2024-08-30
(54)【発明の名称】情報処理装置、情報処理方法及びプログラム
(51)【国際特許分類】
G06T 13/40 20110101AFI20240823BHJP
H04N 21/24 20110101ALI20240823BHJP
H04N 21/2343 20110101ALI20240823BHJP
【ＦＩ】
G06T13/40
H04N21/24
H04N21/2343
【審査請求】有
【請求項の数】8
【出願形態】ＯＬ
(21)【出願番号】P 2023024657
(22)【出願日】2023-02-20
(71)【出願人】
【識別番号】000208891
【氏名又は名称】ＫＤＤＩ株式会社
(74)【代理人】
【識別番号】110004222
【氏名又は名称】弁理士法人創光国際特許事務所
(74)【代理人】
【識別番号】100166006
【弁理士】
【氏名又は名称】泉 通博
(74)【代理人】
【識別番号】100154070
【弁理士】
【氏名又は名称】久恒 京範
(74)【代理人】
【識別番号】100153280
【弁理士】
【氏名又は名称】寺川 賢祐
(72)【発明者】
【氏名】上月 勝博
(72)【発明者】
【氏名】三功 浩嗣
【テーマコード（参考）】
5B050
5C164
【Ｆターム（参考）】
5B050BA09
5B050BA12
5B050CA07
5B050DA04
5B050EA07
5B050EA19
5B050FA05
5C164MA03S
5C164PA39
5C164SB02P
5C164SB41P
5C164UA04S
5C164YA11
(57)【要約】
【課題】視聴者ごとにアバターの表示を設定可能にするための仕組みを提供する。
【解決手段】情報処理装置３は、第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部３３１と、第１端末とは異なる第２端末から、人物に対応するアバターを表示するための第２端末表示要求を取得する第２端末用取得部３３２と、第２端末用取得部が第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、アバターを生成するアバター生成部３３３と、動作情報に基づいて、アバター生成部３３３が生成したアバターの動作を制御する動作制御部３３４と、動作制御部３３４が動作を制御したアバターを表示するための表示情報を第２端末に送信する送信部３３６と、を有する。
【選択図】図２
【解決手段】情報処理装置３は、第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部３３１と、第１端末とは異なる第２端末から、人物に対応するアバターを表示するための第２端末表示要求を取得する第２端末用取得部３３２と、第２端末用取得部が第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、アバターを生成するアバター生成部３３３と、動作情報に基づいて、アバター生成部３３３が生成したアバターの動作を制御する動作制御部３３４と、動作制御部３３４が動作を制御したアバターを表示するための表示情報を第２端末に送信する送信部３３６と、を有する。
【選択図】図２
【特許請求の範囲】
【請求項1】
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部と、
前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得する第２端末用取得部と、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するアバター生成部と、
前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、
前記動作制御部が動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信する送信部と、
を有する情報処理装置。
前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得する第２端末用取得部と、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するアバター生成部と、
前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、
前記動作制御部が動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信する送信部と、
を有する情報処理装置。
【請求項2】
前記第２端末表示要求には、複数の前記アバターの種類の中から選択された前記アバターの種類を示す種類選択情報が含まれ、
前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成する、
請求項１に記載の情報処理装置。
前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成する、
請求項１に記載の情報処理装置。
【請求項3】
前記第２端末用取得部は、前記送信部が前記表示情報を送信した後において、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置を示す位置情報と、前記仮想視点からの向きを示す向き情報とを前記第２端末から取得し、
前記情報処理装置は、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターが表示された前記表示情報を生成する表示情報生成部をさらに有し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記情報処理装置は、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターが表示された前記表示情報を生成する表示情報生成部をさらに有し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項4】
前記第１端末用取得部は、前記人物において動作する部位と、前記アバターにおいて動作させる部位との対応付けを設定するための部位設定情報をさらに取得し、
前記動作制御部は、前記動作情報によって示される前記人物の部位の動作を、前記部位設定情報において当該人物の部位に対応付けられている前記アバターの部位に適用する、
請求項１に記載の情報処理装置。
前記動作制御部は、前記動作情報によって示される前記人物の部位の動作を、前記部位設定情報において当該人物の部位に対応付けられている前記アバターの部位に適用する、
請求項１に記載の情報処理装置。
【請求項5】
前記第２端末表示要求には、仮想空間に前記アバターを表示させるＶＲ（Virtual Reality）モードと、現実空間に前記アバターを表示させるＡＲ（Augmented Reality）モードとの中から選択されたモードを示すモード選択情報が含まれ、
前記情報処理装置は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成する表示情報生成部をさらに有し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記情報処理装置は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成する表示情報生成部をさらに有し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項6】
前記情報処理装置は、前記第２端末に表示される前記アバターの表示品質がそれぞれ異なる複数の品質レベルの中から前記第２端末を使用するユーザが選択した選択レベル、又は前記ユーザが利用する通信サービスの利用状態に基づいて、前記複数の品質レベルの中から前記第２端末に適用する前記品質レベルを決定する決定部をさらに有し、
前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項7】
前記情報処理装置は、前記第１端末及び前記第２端末とは異なる第３端末から、前記第２端末に表示されている前記アバターを表示するための第３端末表示要求を取得する第３端末用取得部をさらに有し、
前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得し、
前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信する、
請求項１に記載の情報処理装置。
前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得し、
前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信する、
請求項１に記載の情報処理装置。
【請求項8】
前記第２端末用取得部は、前記アバターを、前記人物の動作とは異なる他の動作をさせるための動作指示情報をさらに取得し、
前記動作制御部は、前記動作指示情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する、
請求項１に記載の情報処理装置。
前記動作制御部は、前記動作指示情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する、
請求項１に記載の情報処理装置。
【請求項9】
コンピュータが実行する、
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得するステップと、
前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得するステップと、
前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するステップと、
前記動作情報に基づいて、が生成した前記アバターの動作を制御するステップと、
動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信するステップと、
を有する情報処理方法。
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得するステップと、
前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得するステップと、
前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するステップと、
前記動作情報に基づいて、が生成した前記アバターの動作を制御するステップと、
動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信するステップと、
を有する情報処理方法。
【請求項10】
コンピュータを、
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部、
前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得する第２端末用取得部、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するアバター生成部、
前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、及び
前記動作制御部が動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信する送信部、
として機能させるためのプログラム。
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部、
前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得する第２端末用取得部、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するアバター生成部、
前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、及び
前記動作制御部が動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信する送信部、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報処理装置、情報処理方法及びプログラムに関する。
【背景技術】
【0002】
従来、人物の動きに応じて三次元モデルを制御するシステムが知られている。特許文献１には、人物の動きに応じて三次元のキャラクター（以下、「アバター」という。）が動く動画像を生成する技術が開示されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１５－１８４６８９号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、上記技術においては、人物の動作が反映されたアバターを視聴する複数の視聴者に対して同じ動画像しか表示されず、視聴者ごとにアバターの表示を自由に設定することができなかった。
【0005】
そこで、本発明はこれらの点に鑑みてなされたものであり、視聴者ごとにアバターの表示を設定可能にするための仕組みを提供することを目的とする。
【課題を解決するための手段】
【0006】
本発明の第１の態様にかかる情報処理装置は、第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部と、前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得する第２端末用取得部と、前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するアバター生成部と、前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、前記動作制御部が動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信する送信部と、を有する。
【0007】
前記第２端末表示要求には、複数の前記アバターの種類の中から選択された前記アバターの種類を示す種類選択情報が含まれてもよいし、前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成してもよい。
【0008】
前記第２端末用取得部は、前記送信部が前記表示情報を送信した後において、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置を示す位置情報と、前記仮想視点からの向きを示す向き情報とを前記第２端末から取得してもよいし、前記情報処理装置は、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターが表示された前記表示情報を生成する表示情報生成部をさらに有してもよいし、前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信してもよい。
【0009】
前記第１端末用取得部は、前記人物において動作する部位と、前記アバターにおいて動作させる部位との対応付けを設定するための部位設定情報をさらに取得してもよいし、前記動作制御部は、前記動作情報によって示される前記人物の部位の動作を、前記部位設定情報において当該人物の部位に対応付けられている前記アバターの部位に適用してもよい。
【0010】
前記第２端末表示要求には、仮想空間に前記アバターを表示させるＶＲ（Virtual Reality）モードと、現実空間に前記アバターを表示させるＡＲ（Augmented Reality）モードとの中から選択されたモードを示すモード選択情報が含まれてもよいし、前記情報処理装置は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成する表示情報生成部をさらに有してもよいし、前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信してもよい。
【0011】
前記情報処理装置は、前記第２端末に表示される前記アバターの表示品質がそれぞれ異なる複数の品質レベルの中から前記第２端末を使用するユーザが選択した選択レベル、又は前記ユーザが利用する通信サービスの利用状態に基づいて、前記複数の品質レベルの中から前記第２端末に適用する前記品質レベルを決定する決定部をさらに有してもよいし、前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信してもよい。
【0012】
前記情報処理装置は、前記第１端末及び前記第２端末とは異なる第３端末から、前記第２端末に表示されている前記アバターを表示するための第３端末表示要求を取得する第３端末用取得部をさらに有してもよいし、前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得してもよいし、前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信してもよい。
【0013】
前記第２端末用取得部は、前記アバターを、前記人物の動作とは異なる他の動作をさせるための動作指示情報をさらに取得してもよいし、前記動作制御部は、前記動作指示情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御してもよい。
【0014】
本発明の第２の態様にかかる情報処理方法は、コンピュータが実行する、第１端末の撮像部が撮像した人物の動作を示す動作情報を取得するステップと、前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得するステップと、前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するステップと、前記動作情報に基づいて、が生成した前記アバターの動作を制御するステップと、動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信するステップと、を有する。
【0015】
本発明の第３の態様にかかるプログラムは、コンピュータを、第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部、前記第１端末とは異なる第２端末から、前記人物に対応するアバターを表示するための第２端末表示要求を取得する第２端末用取得部、前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、前記アバターを生成するアバター生成部、前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、及び前記動作制御部が動作を制御した前記アバターを表示するための表示情報を前記第２端末に送信する送信部、として機能させる。
【発明の効果】
【0016】
本発明によれば、視聴者ごとにアバターの表示を設定可能にするための仕組みを提供することができるという効果を奏する。
【図面の簡単な説明】
【0017】
【図1】情報処理システムの概要を説明するための図である。
【図2】情報処理装置の機能構成を模式的に示す図である。
【図3】ある演者に対応するアバターが同時に提示されている複数の第２端末それぞれに表示された表示画像を模式的に表した図である。
【図4】ある演者に対応するアバターが同時に提示されている複数の第２端末それぞれに表示された表示画像を模式的に表した図である。
【図5】情報処理装置の処理の流れを示すフローチャートである。
【発明を実施するための形態】
【0018】
［情報処理システムＳの概要］
図１は、情報処理システムＳの概要を説明するための図である。情報処理システムＳは、アバター提示サービスをユーザに提供するために用いられるシステムである。アバター提示サービスは、演者Ｐに対応するアバターを視聴者に提示するサービスであり、例えば、イベント及びレッスン等のように様々な用途で利用される。
図１は、情報処理システムＳの概要を説明するための図である。情報処理システムＳは、アバター提示サービスをユーザに提供するために用いられるシステムである。アバター提示サービスは、演者Ｐに対応するアバターを視聴者に提示するサービスであり、例えば、イベント及びレッスン等のように様々な用途で利用される。
【0019】
演者Ｐは、アバターを介して所定のパフォーマンスを視聴者に提供する人物（ユーザ）であり、例えば、イベントに出演する出演者、レッスンを受講する受講者等である。視聴者は、演者Ｐがアバターを介して行う所定のパフォーマンスを視聴するユーザであり、例えば、イベントに参加する観客、レッスンにおいて受講者を指導する指導者等である。情報処理システムＳは、第１端末１と、第２端末２と、情報処理装置３とを有する。
【0020】
第１端末１は、演者Ｐが管理する端末である。第１端末１は、例えば、スマートフォン、タブレット端末、パーソナルコンピュータ等である。第１端末１は、被写体を撮像するカメラ等の撮像部を有する。なお、撮像部は、第１端末１と電気的に接続された外部のカメラであってもよい。第１端末１は、カメラであってもよい。第１端末１は、情報処理装置３と通信可能である。
【0021】
第２端末２は、第１端末１とは異なる端末であって、視聴者が使用する端末である。第２端末２には、例えば、アバター提示サービスを利用するために用いられる専用のアプリケーションプログラムがインストールされている。第２端末２は、例えば、スマートフォン、タブレット端末、パーソナルコンピュータ等である。第２端末２は、情報を表示するディスプレイ等の表示部と、視聴者の操作を受け付けるタッチパネル等の操作部とを有する。第２端末２は、情報処理装置３と通信可能である。
【0022】
情報処理装置３は、アバター表示サービスを管理する装置である。情報処理装置３は、例えば、サーバである。情報処理装置３は、第１端末１及び第２端末２と通信可能である。
以下において、情報処理システムＳが実行する処理について説明する。
以下において、情報処理システムＳが実行する処理について説明する。
【0023】
まず、第１端末１は、動作情報を情報処理装置３に送信する（図１における（１））。動作情報は、第１端末１の撮像部が撮像した演者Ｐの動作を示す情報であり、例えば、演者Ｐの全身の点群データである。動作情報は、演者Ｐの一部（例えば、顔、上半身、下半身など）の点群データであってもよい。
【0024】
情報処理装置３は、第２端末２から、第２端末表示要求を取得する（図１における（２））。第２端末表示要求は、演者Ｐに対応するアバターを表示するための要求である。図１に示す例において、情報処理装置３は、第２端末２ａ及び第２端末２ｂそれぞれから第２端末表示要求を取得する。
【0025】
情報処理装置３は、第２端末表示要求を取得するごとに、演者Ｐに対応するアバターを生成する（図１における（３））。図２に示す例において、情報処理装置３は、第２端末２ａに対応する第１アバターと、第２端末２ｂに対応する第２アバターとを生成する。
【0026】
情報処理装置３は、第１端末１から取得した動作情報に基づいて、生成した各アバターの動作を制御する（図１における（４））。図１に示す例において、情報処理装置３は、第１端末１から取得した動作情報に基づいて、第１アバター及び第２アバターそれぞれの動作を制御する。
【0027】
そして、情報処理装置３は、動作を制御したアバターを表示するための表示情報を第２端末２に送信する（図１における（５））。表示情報は、例えば、アバターを含む表示画像である。図１に示す例において、情報処理装置３は、動作を制御した第１アバターを表示するための第１表示情報を第２端末２ａに送信し、動作を制御した第２アバターを表示するための第２表示情報を第２端末２ｂに送信する。
【0028】
その後、第２端末２は、情報処理装置３から表示情報を取得すると、当該表示情報に基づいて、動作が制御されたアバターを表示する。図１に示す例において、第２端末２ａは、第１表示情報に基づいて、動作が制御された第１アバターであるアバターＡ１を表示する。また、第２端末２ｂは、第２表示情報に基づいて、動作が制御された第２アバターであるアバターＡ２を表示する。
【0029】
このようにすることで、情報処理システムＳは、視聴者ごとに、当該視聴者用のアバターを提示することができる。これにより、情報処理システムＳは、ある視聴者が当該視聴者用のアバターの表示を設定（例えば、アバターの外見の設定、アングルの設定等）しても、当該視聴者が設定した内容が他の視聴者用のアバターの表示に反映されることを防ぐことができる。その結果、情報処理システムＳは、複数の視聴者それぞれが視聴者ごとにアバターの表示を設定可能にするための仕組みを提供することができる。
【0030】
上記において、第１端末１と第２端末２とは異なる端末である例を説明したが、これに限らない。例えば、第１端末１は、第２端末２が有する機能を有し、アバターを表示させてもよい。このように、第１端末１が当該演者Ｐの動作に応じて制御されているアバターを表示させることにより、演者Ｐは、動作が制御されているアバターを確認しながら、パフォーマンスを行うことができる。
以下、情報処理装置３の構成について説明する。
以下、情報処理装置３の構成について説明する。
【0031】
［情報処理装置３の構成］
図２は、情報処理装置３の機能構成を模式的に示す図である。情報処理装置３は、通信部３１と、記憶部３２と、制御部３３とを備える。図２において、矢印は主なデータの流れを示しており、図２に示していないデータの流れがあってもよい。図２において、各機能ブロックはハードウェア（装置）単位の構成ではなく、機能単位の構成を示している。そのため、図２に示す機能ブロックは単一の装置内に実装されてもよく、あるいは複数の装置内に分かれて実装されてもよい。機能ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてもよい。
図２は、情報処理装置３の機能構成を模式的に示す図である。情報処理装置３は、通信部３１と、記憶部３２と、制御部３３とを備える。図２において、矢印は主なデータの流れを示しており、図２に示していないデータの流れがあってもよい。図２において、各機能ブロックはハードウェア（装置）単位の構成ではなく、機能単位の構成を示している。そのため、図２に示す機能ブロックは単一の装置内に実装されてもよく、あるいは複数の装置内に分かれて実装されてもよい。機能ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてもよい。
【0032】
通信部３１は、ネットワークに接続するための通信インターフェースであり、外部の端末及び外部のサーバからデータを受信するための通信コントローラを有する。
【0033】
記憶部３２は、情報処理装置３を実現するコンピュータのＢＩＯＳ（Basic Input Output System）等を格納するＲＯＭ（Read Only Memory）や情報処理装置３の作業領域となるＲＡＭ（Random Access Memory）、ＯＳ（Operating System）やアプリケーションプログラム、当該アプリケーションプログラムの実行時に参照される種々の情報を格納するＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）等の大容量記憶装置である。
【0034】
記憶部３２は、アバター提示サービスを利用するユーザに関する情報を記憶している。ユーザに関する情報には、例えば、ユーザのＩＤ、ユーザの名前等が含まれる。
【0035】
制御部３３は、情報処理装置３のＣＰＵ（Central Processing Unit）やＧＰＵ（Graphics Processing Unit）等のプロセッサであり、記憶部３２に記憶されたプログラムを実行することによって、第１端末用取得部３３１、第２端末用取得部３３２、アバター生成部３３３、動作制御部３３４、表示情報生成部３３５、送信部３３６、決定部３３７及び第３端末用取得部３３８として機能する。
【0036】
第１端末用取得部３３１は、第１端末１の撮像部が撮像した演者Ｐの動作を示す動作情報を取得する。例えば、まず、第１端末１は、動作する演者Ｐの撮像画像（例えば動画像）を撮像部で撮像すると、当該動画像のフレームごとにフレーム画像を不図示のデータ生成サーバに送信する。データ生成サーバは、第１端末１から取得したフレーム画像に基づいて、点群データを生成する。そして、第１端末用取得部３３１は、フレーム画像ごとに、データ生成サーバが生成した点群データを動作情報として取得する。
【0037】
なお、第１端末１は、データ生成サーバの機能を有し、撮像部が撮像した撮像画像に基づいて点群データを生成してもよい。また、第１端末用取得部３３１は、データ生成サーバの機能を有し、第１端末１から取得した撮像画像に基づいて点群データを生成することにより、動作情報を取得してもよい。
【0038】
第１端末用取得部３３１は、動作情報をアバターのＩＤに関連付けて取得してもよい。アバターのＩＤは、演者Ｐ又は当該演者Ｐに対応するアバターを識別するためのユーザのＩＤである。
【0039】
第２端末用取得部３３２は、第２端末２から、演者Ｐに対応するアバターを表示するための第２端末表示要求を取得する。具体的には、第２端末用取得部３３２は、複数の第２端末２それぞれから第２端末表示要求を取得する。例えば、第２端末表示要求には、アバターのＩＤと、視聴者のＩＤとが含まれる。視聴者のＩＤは、視聴者を識別するためのユーザのＩＤである。
【0040】
例えば、まず、視聴者が第２端末２においてアバター提示サービスを提供するサイトにアクセスする操作を行うと、第２端末２は、提示可能な一以上のアバターの一覧が表示された一覧画面を表示する。視聴者が第２端末２に表示された一覧画面においてアバターを選択する操作を行うと、第２端末２は、視聴者が選択したアバターのＩＤと、当該視聴者のＩＤとを含む第２端末表示要求を送信する。そして、第２端末用取得部３３２は、第２端末２から第２端末表示要求を取得する。
【0041】
アバター生成部３３３は、第２端末用取得部３３２が第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、アバターを生成する。具体的には、アバター生成部３３３は、第２端末用取得部３３２が第２端末表示要求を取得するごとに、当該第２端末表示要求を送信した第２端末２に対応するアバターを生成する。
【0042】
アバター生成部３３３は、例えば、第２端末用取得部３３２が取得した第２端末表示要求を送信した第２端末２に対応するインスタンスを生成することにより、アバターを生成する。インスタンスは、例えば、第２端末表示要求を送信した第２端末２に対して当該第２端末表示要求に含まれるアバターのＩＤに対応するアバターを提示するために生成される領域である。インスタンスには、アバターを含む画像をレンダリングするための情報が含まれ、例えば、形、色、大きさ等のアバターの外見を構成するための情報が含まれる。
【0043】
情報処理装置３は、アバターをＶＲ又はＡＲで提示可能であり、アバターがＶＲで提示される場合、インスタンスには、アバターが配置された仮想空間において当該アバターを眺めるための仮想視点の位置及び向きを示す情報、及びアバター以外のオブジェクト（例えば背景等）を構成するための情報等がさらに含まれてもよい。また、アバターがＡＲで提示される場合、インスタンスには、アバターが配置される現実空間の位置を示す情報がさらに含まれてもよい。アバター生成部３３３は、例えば、第２端末表示要求に含まれるアバターのＩＤ及び視聴者のＩＤに関連付けてインスタンスを生成する。
【0044】
動作制御部３３４は、動作情報に基づいて、アバター生成部３３３が生成したアバターの動作を制御する。具体的には、動作制御部３３４は、アバター生成部３３３が生成したアバターごとに、第２端末表示要求に含まれるアバターのＩＤに対応する当該アバターに対して、第１端末用取得部３３１が第２端末表示要求に含まれるアバターのＩＤに関連付けて取得した動作情報によって示される演者Ｐの動作を反映させることにより、アバターの動作を制御する。
【0045】
動作制御部３３４は、例えば、アバター生成部３３３が生成したインスタンスごとに、当該インスタンスに含まれるアバターに対して、第１端末用取得部３３１が当該インスタンスに関連付けられているアバターのＩＤに関連付けて取得した動作情報によって示される演者Ｐの動作を反映させる。動作制御部３３４は、例えば、既知の技術を用いて、動作情報によって示される演者Ｐの動作をアバターに反映する。
【0046】
動作制御部３３４は、例えば、リアルタイムに演者Ｐの動作をアバターに反映させる。具体的には、動作制御部３３４は、第１端末用取得部３３１が取得した動作情報によって示される演者Ｐの動作と、アバターの動作とを同期させる。動作制御部３３４は、例えば、第１端末用取得部３３１が新たな動作情報を取得するごとに、当該新たな動作情報によって示される演者Ｐの動作をアバターに反映させる。
【0047】
送信部３３６は、動作制御部３３４が動作を制御したアバターを表示するための表示情報を第２端末２に送信する。具体的には、情報処理装置３は、以下の２つのステップを実行することにより、表示情報を第２端末２に送信する。
【0048】
第１のステップとして、表示情報生成部３３５は、アバター生成部３３３が生成したアバターごとに、動作制御部３３４が動作を制御した当該アバターを表示するための表示情報を生成する。表示情報生成部３３５は、例えば、アバター生成部３３３が生成したインスタンスごとに、当該インスタンスに含まれる情報に基づいて、当該インスタンスにおいて動作制御部３３４が動作情報に基づいて動作を制御したアバターを含む画像をレンダリングすることにより、表示情報を生成する。
【0049】
第２のステップとして、送信部３３６は、表示情報生成部３３５が生成した表示情報ごとに、当該表示情報を当該表示情報に対応する第２端末２に送信する。具体的には、送信部３３６は、表示情報生成部３３５が生成した表示情報を、当該表示情報に基づくインスタンスに関連付けられている視聴者のＩＤに対応する第２端末２に送信する。送信部３３６は、例えば、表示情報生成部３３５がレンダリングするごとに、当該レンダリングに対応する表示情報を第２端末２に送信する。
【0050】
情報処理装置３は、視聴者ごとに、当該視聴者による設定に応じたアバターを提示する。情報処理装置３は、例えば、仮想空間にアバターを表示させるＶＲモードと、現実空間にアバターを表示させるＡＲモードとの中から視聴者が選択したモードでアバターを提示する。具体的には、情報処理装置３は、以下の３つのステップを実行することにより、視聴者が選択したモードでアバターを提示する。
【0051】
第１のステップとして、第２端末用取得部３３２は、モード選択情報を含む第２端末表示要求を取得する。モード選択情報は、ＶＲモードとＡＲモードとの中から選択されたモードを示す情報である。例えば、アバターの一覧画面には、ＶＲモード及びＡＲモードのいずれかを選択するための選択項目が設けられており、視聴者が当該選択項目においていずれかのモードを選択すると、第２端末２は、視聴者が選択したモードを示すモード選択情報を含む第２端末表示要求を情報処理装置３に送信する。
【0052】
第２のステップとして、表示情報生成部３３５は、ＶＲモードが選択されたことをモード選択情報が示す場合、仮想空間に配置したアバターが表示された表示情報を生成する。表示情報生成部３３５は、例えば、所定の仮想視点（例えば、予め定められた仮想視点）から眺めた場合におけるアバター及び他のオブジェクト（例えば、背景を構成するオブジェクト等）が表示された表示画像を表示情報として生成する。
【0053】
表示情報生成部３３５は、ＡＲモードが選択されたことをモード選択情報が示す場合、現実空間に配置したアバターが表示された表示情報を生成する。例えば、まず、第２端末２は、視聴者がアバターの一覧画面においてアバター及びＡＲモードを選択した後に、撮像部が撮像した撮像画像を表示部に表示させる。撮像画像が表示された第２端末２の表示部において、視聴者がアバターを配置したい位置を指定する操作（例えば、表示部においてアバターを配置したい位置に対応する箇所をタップする操作）を行うと、第２端末２は、当該第２端末２が存在する存在位置と、視聴者が指定した指定位置との関係を示す位置関係情報（例えば、距離、各位置の位置座標等）を情報処理装置３に送信する。そして、第２端末用取得部３３２が位置関係情報を取得すると、表示情報生成部３３５は、当該位置関係情報に基づいて、第２端末２の存在位置を視点として、指定位置に配置したアバターが表示された表示画像を表示情報として生成する。
【0054】
第３のステップとして、送信部３３６は、表示情報生成部３３５が生成した表示情報を第２端末２に送信する。その後、第２端末２は、情報処理装置３から取得した表示情報に基づくアバターが表示された表示画像を表示部に表示させる。例えば、視聴者がＶＲモードを選択した場合、第２端末２は、情報処理装置３から取得した表示画像を表示部に表示させる。また、例えば、視聴者がＡＲモードを選択した場合、第２端末２は、情報処理装置３から取得した表示画像を、撮像部が撮像した撮像画像に重畳して表示部に表示させる。このようにすることで、情報処理装置３は、視聴者が希望するモードでアバターを提示することができる。
【0055】
情報処理装置３は、視聴者が設定した種類のアバターを提示してもよい。アバターの種類は、例えば、人、動物、ロボット等である。具体的には、情報処理装置３は、以下の３つのステップを実行することにより、視聴者が設定した種類のアバターを提示する。
【0056】
第１のステップとして、第２端末用取得部３３２は、種類選択情報を含む第２端末表示要求を取得する。種類選択情報は、複数のアバターの種類の中から選択されたアバターの種類を示す情報である。例えば、アバターの一覧画面には、アバターの種類を選択するための選択項目が設けられており、視聴者が第２端末２に表示されたアバターの一覧画面において選択項目から１つのアバターの種類を選択する操作を行うと、第２端末２は、視聴者が選択したアバターの種類を示す種類選択情報をさらに含む第２端末表示要求を情報処理装置３に送信する。
【0057】
第２のステップとして、アバター生成部３３３は、第２端末用取得部３３２が取得した第２端末表示要求に含まれる種類選択情報によって示される種類のアバターを生成する。アバター生成部３３３は、例えば、第２端末用取得部３３２が取得した第２端末表示要求に含まれる種類選択情報によって示される種類のアバターの外見を構成するための情報をインスタンスに格納する。
【0058】
第３のステップとして、送信部３３６は、アバター生成部３３３が生成したアバターであって、第２端末表示要求に含まれる種類選択情報によって示される種類のアバターを表示するための表示情報を第２端末２に送信する。その後、第２端末２は、情報処理装置３から取得した表示情報に基づくアバターが表示された表示画像を表示部に表示させる。
【0059】
図３は、ある演者Ｐに対応するアバターが同時に提示されている複数の第２端末２それぞれに表示された表示画像を模式的に表した図である。図３（ａ）に示す図は、例えば、２つの第２端末２のうちの一方の第２端末２に表示された表示画面を示す。図３（ａ）に示す例においては、一方の第２端末２を使用する視聴者が選択したアバターの種類として「人」の外見をしたアバターＡ３が表示されている。
【0060】
図３（ｂ）に示す図は、例えば、２つの第２端末２のうちの他方の第２端末２に表示された表示画面を示す。図３（ｂ）に示す例においては、他方の第２端末２を使用する視聴者が選択したアバターの種類として「犬」の外見をしたアバターＡ４が表示されている。このようにすることで、情報処理装置３は、視聴者ごとに当該視聴者が選択した種類のアバターを提示することができる。
【0061】
ここで、情報処理装置３が、動物、ロボット等のように人以外の種類のアバターを視聴者に提示する場合、演者Ｐにおいて動作する部位（例えば、腕、足等）と、アバターにおいて動作させる部位（例えば、アバターの種類が「犬」である場合における前足、後ろ足、しっぽ等）とを対応付けすることが望ましい。そこで、情報処理装置３は、演者Ｐの部位の動作を、当該演者Ｐの部位に対応付けたアバターの部位に適用してもよい。
【0062】
具体的には、まず、第１端末用取得部３３１は、演者Ｐにおいて動作する部位と、アバターにおいて動作させる部位との対応付けを設定するための部位設定情報をさらに取得する。部位設定情報は、例えば、演者Ｐにおいて動作する部位と、当該演者Ｐの部位に対応付けるアバターの部位とを関連付けた情報である。部位設定情報は、例えば、演者Ｐによってアバターの種類ごとに設定される。そして、動作制御部３３４は、動作情報によって示される演者Ｐの部位の動作を、第１端末用取得部３３１が取得した部位設定情報において当該人物の部位に対応付けられているアバターの部位に適用する。このようにすることで、情報処理装置３は、アバターの種類に応じて演者Ｐが所望する動作をさせることができる。
【0063】
情報処理装置３は、視聴者がＶＲモードを選択した場合、当該視聴者が設定したアングルでアバターを提示してもよい。具体的には、情報処理装置３は、以下の３つのステップを実行することにより、視聴者が設定したアングルでアバターを提示する。
【0064】
第１のステップとして、第２端末用取得部３３２は、送信部３３６が表示情報を送信した後において、アバターが配置された仮想空間においてアバターを眺めるための仮想視点の位置を示す位置情報と、当該仮想視点からの向きを示す向き情報とを第２端末２から取得する。例えば、第２端末２においてアバターが表示された表示画面には、アングルを操作するためのコントローラが設けられており、視聴者がコントローラを介してアングルを変える操作を行うと、第２端末２は、変えられたアングルに対応する位置情報及び向き情報を情報処理装置３に送信する。
【0065】
第２のステップとして、表示情報生成部３３５は、第２端末用取得部３３２が取得した位置情報及び向き情報に基づいて、仮想視点から眺めた場合のアバターが表示された表示情報を生成する。例えば、まず、表示情報生成部３３５は、インスタンスに含まれる位置情報及び向き情報を、第２端末用取得部３３２が取得した位置情報及び向き情報に更新する。そして、表示情報生成部３３５は、位置情報及び向き情報を更新した後のインスタンスに含まれる情報に基づいて、当該インスタンスにおいて動作制御部３３４が動作情報に基づいて動作を制御したアバターを含む画像をレンダリングすることにより、表示情報を生成する。
【0066】
第３のステップとして、送信部３３６は、表示情報生成部３３５が生成した表示情報を第２端末２に送信する。図４は、ある演者Ｐに対応するアバターが同時に提示されている複数の第２端末２それぞれに表示された表示画像を模式的に表した図である。
【0067】
図４（ａ）に示す図は、例えば、２つの第２端末２のうちの一方の第２端末２に表示された表示画面を示す。図４（ａ）に示す例においては、アバターの正面に位置する仮想視点Ｖ１からアバターを眺めた場合におけるアバターＡ５が表示されている。
【0068】
図４（ｂ）に示す図は、例えば、２つの第２端末２のうちの他方の第２端末２に表示された表示画面を示す。図４（ｂ）に示す例においては、アバターの側面に位置する仮想視点Ｖ２からアバターを眺めた場合におけるアバターＡ６が表示されている。このようにすることで、情報処理装置３は、視聴者が希望するアングルのアバターを提示することができる。
【0069】
情報処理装置３は、視聴者に応じた品質でアバターを提示してもよい。具体的には、情報処理装置３は、以下の２つのステップを実行することにより、視聴者に応じた品質でアバターを提示する。
【0070】
第１のステップとして、決定部３３７は、複数の品質レベルの中から第２端末２に適用する視聴者に応じた品質レベルを決定する。品質レベルは、第２端末２に表示されるアバターの表示品質であり、例えば、アバターの表示画像の画素数、アバターの表示画像のフレームレート等である。情報処理装置３には、例えば、「高」、「中」、「低」等のように、アバターの表示品質がそれぞれ異なる複数の品質レベルが設定されている。
【0071】
具体的には、決定部３３７は、第２端末２を使用する視聴者が選択した選択レベルに基づいて、第２端末２に適用する品質レベルを決定する。例えば、まず、第２端末用取得部３３２は、複数の品質レベルの中から視聴者が選択した選択レベルを示すレベル情報を含む第２端末表示要求を取得する。そして、決定部３３７は、第２端末用取得部３３２が取得した第２端末表示要求に含まれるレベル情報によって示される選択レベルを、第２端末２に適用する品質レベルとして決定する。
【0072】
決定部３３７は、視聴者が利用する通信サービスの利用状態に基づいて、第２端末２に適用する品質レベルを決定してもよい。例えば、情報処理装置３を管理する管理者は、通信サービスを提供する通信事業者であり、記憶部３２には、通信サービスを利用する利用者に関する情報が記憶されている。利用者に関する情報には、例えば、利用者のＩＤ、利用者による通信サービスの利用履歴、利用者が契約している通信サービスの利用プラン等が含まれる。
【0073】
この場合において、決定部３３７は、記憶部３２に記憶されている利用者に関する情報によって特定される視聴者が利用する通信サービスの利用状態に基づいて、第２端末２に適用する品質レベルを決定する。決定部３３７は、例えば、視聴者が通信サービスを利用している場合、第２端末２に適用する品質レベルを高く決定し、視聴者が通信サービスを利用していない場合、第２端末２に適用する品質レベルを低く決定する。
【0074】
また、決定部３３７は、通信サービスを利用している視聴者の利用履歴によって特定される通信サービスの利用度合い（例えば、視聴者が利用した通信量、又は視聴者が支払った金額等）が高いほど、第２端末２に適用する品質レベルを高く決定し、通信サービスの利用度合いが低いほど、第２端末２に適用する品質レベルを低く決定してもよい。決定部３３７は、例えば、通信サービスの利用度合いが予め定められた基準の利用閾値（例えば、予め定められた通信量又は予め定められた金額）を超える場合に、第２端末２に適用する品質レベルを高く決定し、通信サービスの利用度合いが利用閾値を超えない場合に、第２端末２に適用する品質レベルを低く決定する。
【0075】
また、決定部３３７は、通信サービスを利用している視聴者の利用プランが上位のプラン（例えば、金額が高いプラン）であるほど、第２端末２に適用する品質レベルを高く決定し、視聴者の利用プランが下位のプラン（例えば、金額が安いプラン）であるほど、第２端末２に適用する品質レベルを低く決定してもよい。決定部３３７は、例えば、視聴者の利用プランが予め定められた基準のプラン閾値（例えば、予め定められたプラン）よりも上位のプランである場合に、第２端末２に適用する品質レベルを高く決定し、視聴者の利用プランがプラン閾値より上位のプランではない場合に、第２端末２に適用する品質レベルを低く決定する。
【0076】
第２のステップとして、送信部３３６は、決定部３３７が決定した品質レベルに基づいて、表示情報を第２端末２に送信する。例えば、品質レベルがアバターの表示画像の画素数である場合、送信部３３６は、表示情報生成部３３５が決定された品質レベルに基づいて生成した表示情報を第２端末２に送信する。例えば、品質レベルごとに画素数が定められており、表示情報生成部３３５は、決定部３３７が決定した品質レベルに対応する画素数で表示画像を生成する。
【0077】
例えば、品質レベルがアバターの表示画像のフレームレートである場合、送信部３３６は、表示情報生成部３３５が決定された品質レベルに基づいて生成した表示情報を第２端末２に送信する。例えば、品質レベルごとにフレームレートが定められており、表示情報生成部３３５は、決定部３３７が決定した品質レベルに対応するフレームレートで表示画像を生成する。このようにすることで、情報処理装置３は、視聴者に応じた品質レベルでアバターを提示することができる。
【0078】
情報処理装置３は、アバターが表示されている第２端末２の表示部に表示されている表示画像を、当該第２端末２とは異なる他の第２端末２（以下、「第３端末」という。）に提示してもよい。表示画像は、ＶＲモードにおける表示情報生成部３３５が生成した表示画像、又はＡＲモードにおける表示情報生成部３３５が生成した表示画像と第２端末２の撮像部が撮像した撮像画像とを重畳した画像である。具体的には、情報処理装置３は、以下の３つのステップを実行することにより、第２端末２の表示画像を第３端末に提示する。
【0079】
第１のステップとして、第３端末用取得部３３８は、第３端末から、第２端末２に表示されているアバターを表示するための第３端末表示要求を取得する。第３端末表示要求には、第２端末２の視聴者のＩＤが含まれる。例えば、アバターの一覧画面には、当該アバターを視聴している視聴者（第２端末２の視聴者）を示す情報（例えば、視聴者の名前等）がさらに表示されており、第３端末の視聴者が第２端末２の視聴者を選択する操作を行うと、第３端末は、第３端末の視聴者が選択した第２端末２の視聴者のＩＤを含む第３端末表示要求を情報処理装置３に送信する。
【0080】
第２のステップとして、第２端末用取得部３３２は、第２端末２から、表示情報に基づいて表示されている表示画像を取得する。具体的には、第２端末用取得部３３２は、第３端末用取得部３３８が取得した第３端末用表示要求に含まれる視聴者のＩＤに対応する第２端末２から、表示情報に基づいて表示されている表示画像を取得する。
【0081】
第３のステップとして、送信部３３６は、第２端末用取得部３３２が取得した表示画像を第３端末に送信する。このようにすることで、情報処理装置３は、ある第２端末２に表示されているアバターを含む表示画像を当該第２端末２の視聴者とは異なる他の視聴者に共有させることができる。
【0082】
情報処理装置３は、アバターが表示されている第２端末２の表示部に表示されている表示画像を、当該第２端末２の視聴者が設定した設定条件を満たす第３端末に提示してもよい。設定条件は、例えば、第２端末２の表示部に表示されている表示画面の共有を許可するか否か、当該表示画面を共有する共有範囲等である。共有範囲は、例えば、アバター提示サービスがフレンドを登録する機能を有する場合における第２端末２の視聴者のフレンドまで（第２端末２の視聴者がフレンドとして登録されている他の視聴者まで）、又はｎ階層の他の視聴者まで（例えば、共有範囲として２階層の他の視聴者までと設定されている場合、第２端末２の視聴者のフレンド（第１階層の他の視聴者）のフレンド（第２階層の他の視聴者）まで）等である。
【0083】
この場合において、情報処理装置３は、例えば、第３端末に表示させるアバターの一覧画面において、当該第３端末がアバターを表示している第２端末２の視聴者の設定条件を満たす場合に、当該第２端末２の視聴者を示す情報をさせる。
【0084】
ところで、アバター提示サービスがレッスンの用途で用いられる場合、視聴者である指導者は、演者Ｐのパフォーマンスを視聴するだけではなく、演者Ｐにパフォーマンスを指導し得る。この場合、指導者が指導する動作をアバターに反映させて、演者Ｐにフィードバックさせることが望ましい。
【0085】
そこで、情報処理装置３は、指導者の指示に応じてアバターの動作を制御してもよい。この場合、例えば、第１端末１は、第２端末２の機能（アバターを表示させる機能）を有し、第２端末２は、第１端末１の機能（指導者の動作を示す情報を送信する機能）を有する。具体的には、情報処理装置３は、以下の２つのステップを実行することにより、指導者の指示に応じてアバターの動作を制御する。
【0086】
第１のステップとして、第２端末用取得部３３２は、アバターを、演者Ｐの動作とは異なる他の動作をさせるための動作指示情報をさらに取得する。例えば、アバターが表示された表示画面には、第１端末１の動作情報に基づくアバターの動作の制御と、第２端末２の動作情報に基づくアバターの動作の制御とを切り替える切り替えボタンが設けられており、指導者が第２端末２において切り替えボタンを押下する操作を行うと、第２端末２は、動作指示情報を情報処理装置３に送信する。その後、第２端末２は、指導者の動作を示す動作情報を情報処理装置３に送信する。
【0087】
第２のステップとして、動作制御部３３４は、動作指示情報に基づいて、アバター生成部が生成したアバターの動作を制御する。動作制御部３３４は、例えば、第２端末２の動作情報に基づいてアバターの動作を制御することを動作指示情報が示す場合に、第２端末用取得部３３２が第２端末２から取得した動作情報に基づいて、アバターの動作を制御する。その後、送信部３３６は、動作制御部３３４が第２端末２の動作情報に基づいて動作を制御したアバターを表示するための表示情報を第１端末１及び第２端末２に送信する。
【0088】
［情報処理装置３の処理］
続いて、情報処理装置３の処理の流れについて説明する。図５は、情報処理装置３の処理の流れを示すフローチャートである。第１端末用取得部３３１は、フレーム画像ごとに当該フレーム画像に対応する動画情報を取得している。この場合において、本処理は、第２端末用取得部３３２が複数の第２端末２それぞれから第２端末表示要求を取得したことを契機として開始する（Ｓ１）。
続いて、情報処理装置３の処理の流れについて説明する。図５は、情報処理装置３の処理の流れを示すフローチャートである。第１端末用取得部３３１は、フレーム画像ごとに当該フレーム画像に対応する動画情報を取得している。この場合において、本処理は、第２端末用取得部３３２が複数の第２端末２それぞれから第２端末表示要求を取得したことを契機として開始する（Ｓ１）。
【0089】
アバター生成部３３３は、第２端末用取得部３３２が第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいて、アバターを生成する（Ｓ２）。動作制御部３３４は、アバター生成部３３３が生成したアバターごとに、第１端末用取得部３３１が取得した最新の動作情報に基づいて当該アバターの動作を制御する（Ｓ３）。
【0090】
表示情報生成部３３５は、アバター生成部３３３が生成したアバターごとに、動作制御部３３４が動作を制御した当該アバターを表示するための表示情報を生成する（Ｓ４）。そして、送信部３３６は、表示情報生成部３３５が生成した表示情報ごとに、当該表示情報を当該表示情報に対応する第２端末２に送信する（Ｓ５）。
【0091】
［本実施の形態における効果］
以上説明したとおり、情報処理装置３は、第２端末２から第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいてアバターを生成し、動作情報に基づいて動作を制御したアバターを表示するための表示情報を第２端末２に送信する。このようにすることで、情報処理装置３は、視聴者ごとに、当該視聴者用のアバターを提示することができる。これにより、情報処理装置３は、ある視聴者が当該視聴者用のアバターの表示を設定しても、当該視聴者が設定した内容が他の視聴者用のアバターの表示に反映されることを防ぐことができる。その結果、情報処理装置３は、複数の視聴者それぞれが視聴者ごとにアバターの表示を設定可能にするための仕組みを提供することができる。
以上説明したとおり、情報処理装置３は、第２端末２から第２端末表示要求を取得するごとに、当該第２端末表示要求に基づいてアバターを生成し、動作情報に基づいて動作を制御したアバターを表示するための表示情報を第２端末２に送信する。このようにすることで、情報処理装置３は、視聴者ごとに、当該視聴者用のアバターを提示することができる。これにより、情報処理装置３は、ある視聴者が当該視聴者用のアバターの表示を設定しても、当該視聴者が設定した内容が他の視聴者用のアバターの表示に反映されることを防ぐことができる。その結果、情報処理装置３は、複数の視聴者それぞれが視聴者ごとにアバターの表示を設定可能にするための仕組みを提供することができる。
【0092】
なお、本発明により、国連が主導する持続可能な開発目標（SDGs）の目標９「産業と技術革新の基盤をつくろう」に貢献することが可能となる。
【0093】
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の全部又は一部は、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を併せ持つ。
【符号の説明】
【0094】
１ 第１端末
２ 第２端末
３ 情報処理装置
３１ 通信部
３２ 記憶部
３３ 制御部
３３１ 第１端末用取得部
３３２ 第２端末用取得部
３３３ アバター生成部
３３４ 動作制御部
３３５ 表示情報生成部
３３６ 送信部
３３７ 決定部
３３８ 第３端末用取得部
Ｓ 情報処理システム
２ 第２端末
３ 情報処理装置
３１ 通信部
３２ 記憶部
３３ 制御部
３３１ 第１端末用取得部
３３２ 第２端末用取得部
３３３ アバター生成部
３３４ 動作制御部
３３５ 表示情報生成部
３３６ 送信部
３３７ 決定部
３３８ 第３端末用取得部
Ｓ 情報処理システム
【図1】
【図2】
【図3】
【図4】
【図5】
【手続補正書】
【提出日】2023-09-04
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部と、
前記第１端末とは異なる複数の第２端末それぞれから、前記人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部と、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部と、
前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成する表示情報生成部と、
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部と、
を有する情報処理装置。
前記第１端末とは異なる複数の第２端末それぞれから、前記人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部と、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部と、
前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成する表示情報生成部と、
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部と、
を有する情報処理装置。
【請求項2】
前記第２端末表示要求には、複数の前記アバターの種類の中から選択された前記アバターの種類を示す種類選択情報が含まれ、
前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成する、
請求項１に記載の情報処理装置。
前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成する、
請求項１に記載の情報処理装置。
【請求項3】
前記第１端末用取得部は、前記人物において動作する部位と、前記アバターにおいて動作させる部位との対応付けを設定するための部位設定情報をさらに取得し、
前記動作制御部は、前記動作情報によって示される前記人物の部位の動作を、前記部位設定情報において当該人物の部位に対応付けられている前記アバターの部位に適用する、
請求項１に記載の情報処理装置。
前記動作制御部は、前記動作情報によって示される前記人物の部位の動作を、前記部位設定情報において当該人物の部位に対応付けられている前記アバターの部位に適用する、
請求項１に記載の情報処理装置。
【請求項4】
前記第２端末表示要求には、仮想空間に前記アバターを表示させるＶＲ（Virtual Reality）モードと、現実空間に前記アバターを表示させるＡＲ（Augmented Reality）モードとの中から選択されたモードを示すモード選択情報が含まれ、
前記表示情報生成部は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記表示情報生成部は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項5】
前記情報処理装置は、前記第２端末に表示される前記アバターの表示品質がそれぞれ異なる複数の品質レベルの中から前記第２端末を使用するユーザが選択した選択レベル、又は前記ユーザが利用する通信サービスの利用状態に基づいて、前記複数の品質レベルの中から前記第２端末に適用する前記品質レベルを決定する決定部をさらに有し、
前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項6】
前記情報処理装置は、前記第１端末及び前記第２端末とは異なる第３端末から、前記第２端末に表示されている前記アバターを表示するための第３端末表示要求を取得する第３端末用取得部をさらに有し、
前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得し、
前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信する、
請求項１に記載の情報処理装置。
前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得し、
前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信する、
請求項１に記載の情報処理装置。
【請求項7】
前記第２端末用取得部は、前記アバターを、前記人物の動作とは異なる他の動作をさせるための動作指示情報をさらに取得し、
前記動作制御部は、前記動作指示情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する、
請求項１に記載の情報処理装置。
前記動作制御部は、前記動作指示情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する、
請求項１に記載の情報処理装置。
【請求項8】
コンピュータが実行する、
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得するステップと、
前記第１端末とは異なる複数の第２端末それぞれから、前記人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得するステップと、
前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するステップと、
前記動作情報に基づいて、生成した前記アバターの動作を制御するステップと、
動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成するステップと、
生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信するステップと、
を有する情報処理方法。
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得するステップと、
前記第１端末とは異なる複数の第２端末それぞれから、前記人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得するステップと、
前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するステップと、
前記動作情報に基づいて、生成した前記アバターの動作を制御するステップと、
動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成するステップと、
生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信するステップと、
を有する情報処理方法。
【請求項9】
コンピュータを、
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部、
前記第１端末とは異なる複数の第２端末それぞれから、前記人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部、
前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報である第１表示情報を生成する表示情報生成部、及び
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部、
として機能させるプログラム。
第１端末の撮像部が撮像した人物の動作を示す動作情報を取得する第１端末用取得部、
前記第１端末とは異なる複数の第２端末それぞれから、前記人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部、
前記動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報である第１表示情報を生成する表示情報生成部、及び
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部、
として機能させるプログラム。
【手続補正書】
【提出日】2024-02-06
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得する第１端末用取得部と、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部と、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部と、
前記第１動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成する表示情報生成部と、
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部と、
を有し、
前記第２端末用取得部は、前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とをさらに取得し、
前記動作制御部は、前記第２端末用取得部が前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替える、
情報処理装置。
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部と、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部と、
前記第１動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成する表示情報生成部と、
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部と、
を有し、
前記第２端末用取得部は、前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とをさらに取得し、
前記動作制御部は、前記第２端末用取得部が前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替える、
情報処理装置。
【請求項2】
前記第２端末表示要求には、複数の前記アバターの種類の中から選択された前記アバターの種類を示す種類選択情報が含まれ、
前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成する、
請求項１に記載の情報処理装置。
前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成する、
請求項１に記載の情報処理装置。
【請求項3】
前記第１端末用取得部は、前記第１人物において動作する部位と、前記アバターにおいて動作させる部位との対応付けを設定するための部位設定情報をさらに取得し、
前記動作制御部は、前記第１動作情報によって示される前記第１人物の部位の動作を、前記部位設定情報において当該第１人物の部位に対応付けられている前記アバターの部位に適用する、
請求項１に記載の情報処理装置。
前記動作制御部は、前記第１動作情報によって示される前記第１人物の部位の動作を、前記部位設定情報において当該第１人物の部位に対応付けられている前記アバターの部位に適用する、
請求項１に記載の情報処理装置。
【請求項4】
前記第２端末表示要求には、仮想空間に前記アバターを表示させるＶＲ（Virtual Reality）モードと、現実空間に前記アバターを表示させるＡＲ（Augmented Reality）モードとの中から選択されたモードを示すモード選択情報が含まれ、
前記表示情報生成部は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記表示情報生成部は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項5】
前記情報処理装置は、前記第２端末に表示される前記アバターの表示品質がそれぞれ異なる複数の品質レベルの中から前記第２端末を使用するユーザが選択した選択レベル、又は前記ユーザが利用する通信サービスの利用状態に基づいて、前記複数の品質レベルの中から前記第２端末に適用する前記品質レベルを決定する決定部をさらに有し、
前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項6】
前記情報処理装置は、前記第１端末及び前記第２端末とは異なる第３端末から、前記第２端末に表示されている前記アバターを表示するための第３端末表示要求を取得する第３端末用取得部をさらに有し、
前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得し、
前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信する、
請求項１に記載の情報処理装置。
前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得し、
前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信する、
請求項１に記載の情報処理装置。
【請求項7】
コンピュータが実行する、
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得するステップと、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得するステップと、
前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するステップと、
前記第１動作情報に基づいて、生成した前記アバターの動作を制御するステップと、
動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成するステップと、
生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信するステップと、
前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とを取得するステップと、
前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替えるステップと、
を有する情報処理方法。
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得するステップと、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得するステップと、
前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するステップと、
前記第１動作情報に基づいて、生成した前記アバターの動作を制御するステップと、
動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成するステップと、
生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信するステップと、
前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とを取得するステップと、
前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替えるステップと、
を有する情報処理方法。
【請求項8】
コンピュータを、
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得する第１端末用取得部、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部、
前記第１動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報である第１表示情報を生成する表示情報生成部、及び
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部、
として機能させ、
前記第２端末用取得部は、前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とをさらに取得し、
前記動作制御部は、前記第２端末用取得部が前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替える、
プログラム。
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得する第１端末用取得部、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部、
前記第１動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報である第１表示情報を生成する表示情報生成部、及び
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部、
として機能させ、
前記第２端末用取得部は、前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とをさらに取得し、
前記動作制御部は、前記第２端末用取得部が前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替える、
プログラム。
【手続補正書】
【提出日】2024-06-17
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得する第１端末用取得部と、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部と、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部と、
前記第１動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成する表示情報生成部と、
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部と、
を有し、
前記第２端末用取得部は、前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とをさらに取得し、
前記動作制御部は、前記第２端末用取得部が前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替え、
前記送信部は、前記動作制御部が前記第２動作情報に基づく前記アバターの動作の制御に切り替えた後に前記表示情報生成部が生成した前記表示情報を、前記第１端末及び前記第２人物に対応する前記第２端末に送信する、
情報処理装置。
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部と、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部と、
前記第１動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部と、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成する表示情報生成部と、
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部と、
を有し、
前記第２端末用取得部は、前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とをさらに取得し、
前記動作制御部は、前記第２端末用取得部が前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替え、
前記送信部は、前記動作制御部が前記第２動作情報に基づく前記アバターの動作の制御に切り替えた後に前記表示情報生成部が生成した前記表示情報を、前記第１端末及び前記第２人物に対応する前記第２端末に送信する、
情報処理装置。
【請求項2】
前記第２端末表示要求には、複数の前記アバターの種類の中から選択された前記アバターの種類を示す種類選択情報が含まれ、
前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成する、
請求項１に記載の情報処理装置。
前記アバター生成部は、前記第２端末表示要求に含まれる前記種類選択情報によって示される種類の前記アバターを生成する、
請求項１に記載の情報処理装置。
【請求項3】
前記第１端末用取得部は、前記第１人物において動作する部位と、前記アバターにおいて動作させる部位との対応付けを設定するための部位設定情報をさらに取得し、
前記動作制御部は、前記第１動作情報によって示される前記第１人物の部位の動作を、前記部位設定情報において当該第１人物の部位に対応付けられている前記アバターの部位に適用する、
請求項１に記載の情報処理装置。
前記動作制御部は、前記第１動作情報によって示される前記第１人物の部位の動作を、前記部位設定情報において当該第１人物の部位に対応付けられている前記アバターの部位に適用する、
請求項１に記載の情報処理装置。
【請求項4】
前記第２端末表示要求には、仮想空間に前記アバターを表示させるＶＲ（Virtual Reality）モードと、現実空間に前記アバターを表示させるＡＲ（Augmented Reality）モードとの中から選択されたモードを示すモード選択情報が含まれ、
前記表示情報生成部は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記表示情報生成部は、前記ＶＲモードが選択されたことを前記モード選択情報が示す場合、前記仮想空間に配置した前記アバターが表示された前記表示情報を生成し、前記ＡＲモードが選択されたことを前記モード選択情報が示す場合、前記現実空間に配置した前記アバターが表示された前記表示情報を生成し、
前記送信部は、前記表示情報生成部が生成した前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項5】
前記情報処理装置は、前記第２端末に表示される前記アバターの表示品質がそれぞれ異なる複数の品質レベルの中から前記第２端末を使用するユーザが選択した選択レベル、又は前記ユーザが利用する通信サービスの利用状態に基づいて、前記複数の品質レベルの中から前記第２端末に適用する前記品質レベルを決定する決定部をさらに有し、
前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
前記送信部は、前記決定部が決定した前記品質レベルに基づいて、前記表示情報を前記第２端末に送信する、
請求項１に記載の情報処理装置。
【請求項6】
前記情報処理装置は、前記第１端末及び前記第２端末とは異なる第３端末から、前記第２端末に表示されている前記アバターを表示するための第３端末表示要求を取得する第３端末用取得部をさらに有し、
前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得し、
前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信する、
請求項１に記載の情報処理装置。
前記第２端末用取得部は、前記第２端末から、前記表示情報に基づいて表示されている表示画像を取得し、
前記送信部は、前記第２端末用取得部が取得した表示画像を前記第３端末に送信する、
請求項１に記載の情報処理装置。
【請求項7】
コンピュータが実行する、
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得するステップと、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得するステップと、
前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するステップと、
前記第１動作情報に基づいて、生成した前記アバターの動作を制御するステップと、
動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成するステップと、
生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信するステップと、
前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とを取得するステップと、
前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替えるステップと、
前記第２動作情報に基づく前記アバターの動作の制御に切り替えた後に生成した前記表示情報を、前記第１端末及び前記第２人物に対応する前記第２端末に送信するステップと、
を有する情報処理方法。
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得するステップと、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得するステップと、
前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するステップと、
前記第１動作情報に基づいて、生成した前記アバターの動作を制御するステップと、
動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報を生成するステップと、
生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信するステップと、
前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とを取得するステップと、
前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替えるステップと、
前記第２動作情報に基づく前記アバターの動作の制御に切り替えた後に生成した前記表示情報を、前記第１端末及び前記第２人物に対応する前記第２端末に送信するステップと、
を有する情報処理方法。
【請求項8】
コンピュータを、
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得する第１端末用取得部、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部、
前記第１動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報である第１表示情報を生成する表示情報生成部、及び
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部、
として機能させ、
前記第２端末用取得部は、前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とをさらに取得し、
前記動作制御部は、前記第２端末用取得部が前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替え、
前記送信部は、前記動作制御部が前記第２動作情報に基づく前記アバターの動作の制御に切り替えた後に前記表示情報生成部が生成した前記表示情報を、前記第１端末及び前記第２人物に対応する前記第２端末に送信する、
プログラム。
第１端末の撮像部が撮像した第１人物の動作を示す第１動作情報を取得する第１端末用取得部、
前記第１端末とは異なる複数の第２端末それぞれから、前記第１人物に対応するアバターを表示するための第２端末表示要求であって、前記第２端末を使用する視聴者のＩＤを含む前記第２端末表示要求と、前記アバターが配置された仮想空間において前記アバターを眺めるための仮想視点の位置であって前記視聴者が設定した前記位置を示す位置情報と、前記仮想視点からの向きであって前記視聴者が設定した前記向きを示す向き情報とを取得する第２端末用取得部、
前記第２端末用取得部が前記第２端末表示要求を取得するごとに、当該第２端末表示要求に含まれる前記視聴者のＩＤに関連付けて前記アバターを生成するアバター生成部、
前記第１動作情報に基づいて、前記アバター生成部が生成した前記アバターの動作を制御する動作制御部、
前記動作制御部が動作を制御した前記アバターであって、前記位置情報及び向き情報に基づいて、前記仮想視点から眺めた場合の前記アバターを表示するための表示情報である第１表示情報を生成する表示情報生成部、及び
前記表示情報生成部が生成した前記表示情報を、当該表示情報によって表示される前記アバターに関連付けられている前記視聴者のＩＤに対応する前記第２端末に送信することにより、前記複数の第２端末それぞれに前記表示情報を送信する送信部、
として機能させ、
前記第２端末用取得部は、前記第２端末の撮像部が撮像した人物であって前記第１人物とは異なる人物である第２人物の動作を示す第２動作情報と、前記第１動作情報に基づく前記アバターの動作の制御から前記第２動作情報に基づく前記アバターの動作の制御に切り替えるための動作指示情報とをさらに取得し、
前記動作制御部は、前記第２端末用取得部が前記動作指示情報を取得した場合に、前記第１動作情報に基づく前記アバターの動作の制御から、前記第２動作情報に基づく前記アバターの動作の制御に切り替え、
前記送信部は、前記動作制御部が前記第２動作情報に基づく前記アバターの動作の制御に切り替えた後に前記表示情報生成部が生成した前記表示情報を、前記第１端末及び前記第２人物に対応する前記第２端末に送信する、
プログラム。