ホーム > 特許ランキング > １７ＬＩＶＥ株式会社
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B1)
(11)【特許番号】
(24)【登録日】2024-02-29
(45)【発行日】2024-03-08
(54)【発明の名称】サーバ、方法及びコンピュータプログラム
(51)【国際特許分類】
H04N 21/27 20110101AFI20240301BHJP
G06F 3/048 20130101ALI20240301BHJP
H04L 51/02 20220101ALI20240301BHJP
【ＦＩ】
H04N21/27
G06F3/048
H04L51/02
【請求項の数】
9
【外国語出願】
(21)【出願番号】P 2023131438
(22)【出願日】2023-08-10
【審査請求日】2023-10-12
【早期審査対象出願】
(73)【特許権者】
【識別番号】517287224
【氏名又は名称】１７ＬＩＶＥ株式会社
(74)【代理人】
【識別番号】100199277
【弁理士】
【氏名又は名称】西守 有人
(72)【発明者】
【氏名】徐永吉
(72)【発明者】
【氏名】許淳勝
(72)【発明者】
【氏名】石宗台
(72)【発明者】
【氏名】劉謹▲い▼
(72)【発明者】
【氏名】胡哲維
【審査官】鈴木 隆夫
(56)【参考文献】
【文献】特開２０２０－０６４６１６（ＪＰ，Ａ）
【文献】中国特許出願公開第１１０７３０３９０（ＣＮ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ ２１／００－２１／８５８
Ｇ０６Ｆ ３／０４８
Ｈ０４Ｌ ５１／０２
(57)【特許請求の範囲】
【請求項1】
ライブストリーミングプラットフォームにおける交流を処理するサーバであって、１以上のプロセッサを含み、前記１以上のプロセッサが機械可読命令を実行して、キャラクターに対応するキャラクターデータを受信する機能と、
前記キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、
前記仮想チャットボットを前記ライブストリーミングルームに設定する機能と、を実行し、
前記仮想チャットボットが、前記ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成され、
前記１以上のプロセッサは機械可読命令を実行してさらに、
ライブストリーマーがイベントに参加している間、前記ライブストリーミングルームのステータスを受信する機能と、
前記イベント中にトリガーが検出されたことに応答して、前記仮想チャットボットを介してヒントメッセージを表示する機能と、を実行し、
前記ヒントメッセージが、前記イベントにおいて前記ライブストリーマーまたは他のユーザをガイドするための情報を含む、ことを特徴とする、サーバ。
【請求項2】
第１のユーザから前記キャラクターの選択を受信する機能をさらに含み、前記キャラクターの前記キャラクターデータが、前記サーバ内部のデータベースから取得される、または外部の前記キャラクターに関連するインターネット上のリソースから取得され、
前記キャラクターが、有名人、前記ライブストリーミングプラットフォームのユーザ、またはアニメキャラクターである、
ことを特徴とする、請求項１に記載のサーバ。
【請求項3】
第１のユーザからパーソナリティの選択を受信する機能をさらに含み、前記パーソナリティに対応するプロンプトデータを取得し、かつ
前記プロンプトデータを前記機械学習モデルに入力して、前記仮想チャットボット上で前記パーソナリティを生成する、
ことを特徴とする、請求項１に記載のサーバ。
【請求項4】
ライブストリーミングプラットフォームにおける交流を処理するサーバであって、１以上のプロセッサを含み、前記１以上のプロセッサが機械可読命令を実行して、
キャラクターに対応するキャラクターデータを受信する機能と、
前記キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、
前記仮想チャットボットを前記ライブストリーミングルームに設定する機能と、を実行し、
前記仮想チャットボットが、前記ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成され、
前記１以上のプロセッサは機械可読命令を実行してさらに、
前記ライブストリーミングルーム内のユーザの情報を取得する機能と、
前記ユーザの前記情報に基づき、前記仮想チャットボットを介して前記ユーザをタグする機能と、を実行する、ことを特徴とする、サーバ。
【請求項5】
前記ライブストリーミングルーム内のユーザからの交流を受信する機能と、前記交流を前記機械学習モデルに入力する機能と、
前記機械学習モデルから出力を生成する機能と、
前記仮想チャットボットを介して前記出力を前記ライブストリーミングルームに伝送する機能と、
をさらに含む、ことを特徴とする、請求項１に記載のサーバ。
【請求項6】
ライブストリーミングプラットフォームにおける交流を処理するサーバであって、１以上のプロセッサを含み、前記１以上のプロセッサが機械可読命令を実行して、
キャラクターに対応するキャラクターデータを受信する機能と、
前記キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、
前記仮想チャットボットを前記ライブストリーミングルームに設定する機能と、を実行し、
前記仮想チャットボットが、前記ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成され、
前記仮想チャットボットが、レベルと、交流値を含み、
前記レベルと前記交流値が、前記仮想チャットボットとユーザの過去の交流に基づいて増加し、
前記仮想チャットボットから前記ユーザへのリアルタイムの交流が、前記仮想チャットボットの前記レベルと前記交流値に基づいて変化する、
ことを特徴とする、サーバ。
【請求項7】
ライブストリーミングプラットフォームにおける交流を処理するサーバであって、１以上のプロセッサを含み、前記１以上のプロセッサが機械可読命令を実行して、
キャラクターに対応するキャラクターデータを受信する機能と、
前記キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、
前記仮想チャットボットを前記ライブストリーミングルームに設定する機能と、を実行し、
前記仮想チャットボットが、前記ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成され、
前記仮想チャットボットの情報がさらに前記ライブストリーミングルームのサムネイルに表示される、ことを特徴とする、サーバ。
【請求項8】
ライブストリーミングプラットフォームにおける交流を処理する方法であって、キャラクターに対応するキャラクターデータを受信する工程と、
前記キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する工程と、
前記仮想チャットボットを前記ライブストリーミングルームに設定する工程と、を含み、
前記仮想チャットボットが、前記ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成され、
前記方法はさらに、
ライブストリーマーがイベントに参加している間、前記ライブストリーミングルームのステータスを受信する工程と、
前記イベント中にトリガーが検出されたことに応答して、前記仮想チャットボットを介してヒントメッセージを表示する工程と、をさらに含み、
前記ヒントメッセージが、前記イベントにおいて前記ライブストリーマーまたは他のユーザをガイドするための情報を含む、ことを特徴とする、方法。
【請求項9】
コンピュータプログラムであって、サーバに、キャラクターに対応するキャラクターデータを受信する機能と、
前記キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、
前記仮想チャットボットを前記ライブストリーミングルームに設定する機能と、を実行させ、
前記仮想チャットボットが、前記ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成され、
前記コンピュータプログラムはさらに、
ライブストリーマーがイベントに参加している間、前記ライブストリーミングルームのステータスを受信する機能と、
前記イベント中にトリガーが検出されたことに応答して、前記仮想チャットボットを介してヒントメッセージを表示する機能と、をさらに前記サーバに実行させ、
前記ヒントメッセージが、前記イベントにおいて前記ライブストリーマーまたは他のユーザをガイドするための情報を含む、ことを特徴とする、コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、情報通信技術に関し、特に、ライブストリーミングにおけるサーバ、方法、及びコンピュータプログラムに関する。
【背景技術】
【0002】
アプリやプラットフォームの中には、ライブストリーマーと視聴者が交流できるライブストリーミングサービスを提供しているものがある。ライブストリーマーが視聴者を応援するパフォーマンスをしたり、視聴者がライブストリーマーを支援したりするために贈り物を送ることもある。
【0003】
視聴者がライブストリーマーを応援しないと、ライブストリーマーが落胆してしまい、視聴者とライブストリーマー間の交流がどんどん悪化してしまうこともある。特許文献１には、仮想インテリジェントロボットを生成することにより、ライブストリーミングルームの活動不足の問題を解決する方法が開示されている。
【0004】
しかしながら、ライブストリーマーは視聴者との交流が増える可能性があり、現状のチャットボットではライブストリーマーからのニーズを満たせない可能性がある。また、チャットボットの機能は常に固定され、限定的であり、これはユーザエクスペリエンスの低下につながる可能性がある。そのため、いかにユーザエクスペリエンスを向上させるかが重要である。
【先行技術文献】
【特許文献】
【0005】
【文献】中国特許出願公開第１１０７３０３９０号明細書
【発明の概要】
【0006】
本開示の一実施態様によるサーバは、１以上のプロセッサを備え、当該１以上のプロセッサが機械可読命令を実行して、キャラクターに対応するキャラクターデータを受信する機能と、当該キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、当該仮想チャットボットを当該ライブストリーミングルームに設定する機能と、を実行し、当該仮想チャットボットが当該ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成される。
【0007】
本開示の一実施態様によるライブストリーミングプラットフォームにおける交流を処理する方法は、キャラクターに対応するキャラクターデータを受信する工程と、当該キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する工程と、当該仮想チャットボットを当該ライブストリーミングルームに設定する工程と、を含み、当該仮想チャットボットが当該ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成される。
【0008】
本開示の一実施態様によるコンピュータプログラムは、サーバに、キャラクターに対応するキャラクターデータを受信する機能と、当該キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、当該仮想チャットボットを当該ライブストリーミングルームに設定する機能と、を実行させ、当該仮想チャットボットが当該ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供するように構成される。
【0009】
本開示によれば、当該キャラクターを備えたＡＩチャットボットは、ライブストリーミングルームにおける交流や楽しさを増大させることができる。さらに、ライブストリーミングにおける雰囲気の監視や対応を一部または全部当該ＡＩチャットボットに任せることもできる。したがって、ユーザエクスペリエンスが向上される可能性がある。
【図面の簡単な説明】
【0010】
【図1】本開示の一部の実施態様に基づくライブストリーミングシステム１の構成を示す概略図である。
【図2】本開示の一部の実施態様に基づくユーザ端末２０のブロック図である。
【図3】本開示の一部の実施態様に基づくサーバ１０のブロック図である。
【図9】本開示の一部の実施態様に基づくライブストリーミングシステム１の機能構成例を示す概略図である。
【図10】ライブストリーマーのユーザ端末２０または視聴者のユーザ端末３０のディスプレイ上に表示されるライブストリーミングルーム画面６００の例示的な画面イメージである。
【図11】ライブストリーマーのユーザ端末２０または視聴者のユーザ端末３０のディスプレイ上に表示されるライブストリーミングルーム画面６００の例示的な画面イメージである。
【図12】ライブストリーマーのユーザ端末２０または視聴者のユーザ端末３０のディスプレイ上に表示されるライブストリーミングルーム画面６００の例示的な画面イメージである。
【図13】ライブストリーマーのユーザ端末２０または視聴者のユーザ端末３０のディスプレイ上に表示されるライブストリーミングルーム画面６００の例示的な画面イメージである。
【図14】ライブストリーマーのユーザ端末２０または視聴者のユーザ端末３０のディスプレイ上に表示されるライブストリーミングルーム画面６００の例示的な画面イメージである。
【図15】ライブストリーマーのユーザ端末２０または視聴者のユーザ端末３０のディスプレイ上に表示されるライブストリーミングルーム画面６００の例示的な画面イメージである。
【図16】当該ユーザ端末２０、３０におけるアプリケーション起動処理の工程を示すフローチャートである。
【図17】本開示の一部の実施態様に基づくライブストリーミングシステム１の機能構成例を示す概略図である。
【図18】本開示の一部の実施態様に基づく情報処理装置の例示的なハードウェア構成である。
【発明を実施するための形態】
【0011】
以下、各図面に示す同一または類似の構成要素、部材、手順または信号には、すべての図面において同様の符号を付し、それによって重複する説明は適宜省略される。また、各図面の説明において重要でない一部部材は省略される。
【0012】
本開示の一部の実施態様に基づくライブストリーミングシステム１は、ユーザ間のコミュニケーションと交流を円滑にする強化機能を提供する。より具体的には、技術的な方法で視聴者やライブストリーマーを楽しませるものである。
【0013】
図１に本開示の一部の実施態様に基づくライブストリーミングシステム１の構成を示す概略図を示す。当該ライブストリーミングシステム１は、ストリーミングのライブストリーマー（ライバー、ストリーマー、または配信者とも呼ばれる）ＬＶと視聴者（オーディエンスとも呼ばれる）ＡＵ（ＡＵ１、ＡＵ２...）に、リアルタイムで相互交流するためのライブストリーミングサービスを提供する。図１に示すように、当該ライブストリーミングシステム１は、サーバ１０と、ユーザ端末２０と、ユーザ端末３０（３０ａ、３０ｂ...）を含むことができる。当該ユーザ端末２０はライブストリーマー、当該ユーザ端末３０は視聴者であってもよい。一部の実施態様において、当該ライブストリーマーと視聴者はユーザと呼ばれてもよい。当該サーバ１０は、ネットワークＮＷを介して接続された、１または複数の情報処理装置を含むことができる。当該ユーザ端末２０、３０は、例えば、スマートフォン、タブレット、ノートＰＣ、レコーダー、携帯ゲーム機、ウェアラブル端末などの携帯端末や、デスクトップＰＣなどの据置型コンピュータであってもよい。当該サーバ１０、ユーザ端末２０、ユーザ端末３０は、任意の種類の有線または無線ネットワークＮＷにより通信可能に接続されてもよい。
【0014】
当該ライブストリーミングシステム１には、当該ライブストリーマーＬＶ、当該視聴者ＡＵ、当該サーバ１０を提供するアプリプロバイダー（図示せず）が関与する。当該ライブストリーマーＬＶは、自身の歌、トーク、パフォーマンス、ゲームストリーミングなどのコンテンツを自身のユーザ端末２０で収録して当該サーバ１０にアップロードし、リアルタイムでコンテンツを配信する者となることができる。一部の実施態様において、当該ライブストリーマーＬＶは、当該ライブストリーミングを介して当該視聴者ＡＵと交流することができる。
【0015】
当該アプリプロバイダーは、当該サーバ１０においてライブストリーミングされるコンテンツのためのプラットフォームを提供することができる。一部の実施態様において、当該アプリプロバイダーは、当該ライブストリーマーＬＶと当該視聴者ＡＵ間のリアルタイム通信を管理するメディアまたはマネージャーであってもよい。当該視聴者ＡＵは、当該ユーザ端末３０により当該プラットフォームにアクセスし、自身が視聴したいコンテンツを選択して視聴することができる。当該視聴者ＡＵは、当該ユーザ端末３０により、当該ライブストリーマーに対してコメントしたり、応援したりなど、当該ライブストリーマーと交流するための操作を行うことができる。コンテンツを提供する当該ライブストリーマーは、当該コメントや応援に応答することができる。当該ライブストリーマーの応答は、映像及び（または）音声などにより当該視聴者ＡＵに送信することができる。従って、当該ライブストリーマーと視聴者間の相互通信を達成することができる。
【0016】
本明細書でいう「ライブストリーミング」とは、当該ライブストリーマーＬＶが当該ユーザ端末２０により記録したコンテンツを、当該視聴者ＡＵが当該ユーザ端末３０を介して実質的に再生・視聴することを可能にする、データ伝送を指すことができる。一部の実施態様において、「ライブストリーミング」は、上述のデータ伝送により実現されるストリーミングを指すこともある。当該ライブストリーミングは、ＨＴＴＰライブストリーミング、ＣＭＡＦ（Ｃｏｍｍｏｎ Ｍｅｄｉａ Ａｐｐｌｉｃａｔｉｏｎ Ｆｏｒｍａｔ）、ＷｅｂＲＴＣ（Ｗｅｂ Ｒｅａｌ－Ｔｉｍｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、ＲＴＭＰ（Ｒｅａｌ―Ｔｉｍｅ Ｍｅｓｓａｇｉｎｇ Ｐｒｏｔｏｃｏｌ）、ＭＰＥＧ ＤＡＳＨなど、公知の技術によって実現することができる。当該ライブストリーミングは、さらに、当該ライブストリーマーがコンテンツを記録している間、当該視聴者ＡＵが特定の遅延をもって当該コンテンツを再生または視聴することができる、実施形態を含んでもよい。当該遅延の程度については、少なくとも当該ライブストリーマーＬＶと当該視聴者ＡＵがコミュニケーションを行うことができる程度に小さいことが望ましい。ただし、ライブストリーミングは、いわゆるオンデマンド配信とは異なる。より具体的に、当該オンデマンド配信とは、当該コンテンツを記録したすべてのデータをサーバに格納し、ユーザの要求に応じてランダムなタイミングで当該サーバから当該ユーザにデータを提供することを指してもよい。
【0017】
本明細書における「ストリーミングデータ」とは、画像データや音声データを含むデータを指すことができる。より具体的に、当該画像データ（ビデオデータと呼んでもよい）は、当該ユーザ端末２０と３０の画像キャプチャ機能によって生成されてもよい。当該音声データ（オーディオデータと呼んでもよい）は、当該ユーザ端末２０と３０の音声入力機能により生成されてもよい。当該ストリーミングデータを当該ユーザ端末２０、３０で再生し、ユーザに関するコンテンツを視聴できるようにしてもよい。一部の実施態様において、当該ライブストリーマーの当該ユーザ端末でストリーミングデータが生成されてから、当該視聴者の当該ユーザ端末で再生されるまでの間、圧縮、拡張、エンコード、デコード、トランスコードなど、データの形式、サイズ、規格を変更する処理が想定される。このような処理の前と後、当該コンテンツ（映像や音声）は実質的に変更されず、このため、本開示の現在の実施態様においては、処理される前のストリーミングデータと処理された後のストリーミングデータは同じであると説明される。つまり、当該ライブストリーマーの当該ユーザ端末により生成された当該ストリーミングデータが、当該サーバ１０を介して当該視聴者の当該ユーザ端末で再生される場合、当該ライブストリーマーの当該ユーザ端末で生成された当該ストリーミングデータ、当該サーバ１０を通過した当該ストリーミングデータ、そして当該視聴者の当該ユーザ端末が受信して再生する当該ストリーミングデータは、すべて同じストリーミングデータである。
【0018】
図１に示すように、当該ライブストリーマーＬＶはライブストリーミングを提供する。当該ライブストリーマーのユーザ端末２０は、当該ストリーマーの映像及び（または）音声を記録することにより、ストリーミングデータを生成し、ネットワークＮＷを介してサーバ１０に送信する。同時に、当該ユーザ端末２０は映像ＶＤを当該ユーザ端末２０のディスプレイ上に表示し、当該ライブストリーマーＬＶのストリーミングコンテンツをチェックすることができる。
【0019】
当該ライブストリーマーのライブストリーミングの提供をプラットフォームに要求するユーザ端末３０ａ、３０ｂの視聴者ＡＵ１、ＡＵ２は、当該ネットワークＮＷを介して当該ライブストリーミングに対応するストリーミングデータを受信し、受信したストリーミングデータを再生してディスプレイ上に映像ＶＤ１、ＶＤ２を表示し、スピーカーなどから音声を出力することができる。当該ユーザ端末３０ａ、３０ｂ上にそれぞれ表示される当該映像ＶＤ１、ＶＤ２は、当該ライブストリーマーＬＶの当該ユーザ端末により記録された当該映像と実質的に同じであり、当該ユーザ端末３０ａ、３０ｂから出力される当該音声は、当該ライブストリーマーＬＶの当該ユーザ端末により記録された当該音声と実質的に同じである。
【0020】
当該ライブストリーマーの当該ユーザ端末２０での記録は、当該視聴者ＡＵ１、ＡＵ２の当該ユーザ端末３０ａ、３０ｂでのストリーミングデータの再生と同時であってもよい。当該視聴者ＡＵ１が当該ライブストリーマーＬＶのコンテンツに関するコメントを当該ユーザ端末３０ａに入力すると、当該サーバ１０は、当該コメントを当該ライブストリーマーの当該ユーザ端末２０にリアルタイムで表示するとともに、当該視聴者ＡＵ１、ＡＵ２の当該ユーザ端末３０ａ、３０ｂにもそれぞれ表示する。当該ライブストリーマーＬＶが当該コメントに応答した場合、当該応答を当該視聴者ＡＵ１、ＡＵ２の当該ユーザ端末３０ａ、３０ｂからテキスト、画像、映像または音声として出力し、当該ライブストリーマーＬＶと当該視聴者ＡＵ１、ＡＵ２のコミュニケーションを実現することができる。従って、当該ライブストリーミングシステムは、双方向通信のライブストリーミングを実現することができる。
【0021】
図２は、本開示の実施態様に基づく、図１に示すユーザ端末２０の機能と構成を示すブロック図である。当該ユーザ端末３０は、当該ユーザ端末２０と同様の機能と構成を有する。本明細書のブロック図に描かれているブロックは、コンピュータのＣＰＵなどのデバイスや機械部品などのハードウェア、およびこれらの要素の連携によって実施される機能ブロックを表現する、コンピュータプログラムなどのソフトウェアで実施される。したがって、機能ブロックは、ハードウェアとソフトウェアの組み合わせによる多様な態様で実装され得ることが、当業者には理解されよう。
【0022】
当該ライブストリーマーＬＶと視聴者ＡＵは、ネットワークＮＷを介して、ダウンロードサイトから本開示のライブストリーミングアプリケーション（ライブストリーミングアプリ）を当該ユーザ端末２０と３０にダウンロードしてインストールすることができる。または、当該ライブストリーミングアプリは、当該ユーザ端末２０と３０に予めインストールされていてもよい。当該ユーザ端末２０と３０によるライブストリーミングの実行により、当該ユーザ端末２０と３０は、当該ネットワークＮＷを介して当該サーバ１０と通信し、複数の機能を実現することができる。当該ユーザ端末２０と３０（より具体的に、ＣＰＵなどのプロセッサ）による当該ライブストリーミングアプリの実行により実現される当該機能は、当該ユーザ端末２０と３０の機能として以下で説明される。当該機能は基本的に、当該ライブストリーミングアプリが当該ユーザ端末２０と３０に実現させる機能である。一部の実施態様において、これらの機能は、ネットワークＮＷを介して当該サーバ１０から当該ユーザ端末２０と３０のウェブブラウザに送信し、当該ウェブブラウザのコンピュータプログラムにより実行されることにより実現されてもよい。当該コンピュータプログラムは、ＨＴＭＬ（Ｈｙｐｅｒ Ｔｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）などのプログラミング言語で書かれていてもよい。
【0023】
当該ユーザ端末２０は、ストリーミングユニット１００と視聴ユニット２００を含む。一部の実施態様において、当該ストリーミングユニット１００は、ユーザのオーディオ及び（または）ビデオデータを記録し、当該サーバ１０に送信するストリーミングデータを生成するように構成される。当該視聴ユニット２００は、サーバ１０からストリーミングデータを受信し、再生するように構成される。一部の実施態様において、ユーザは、ブロードキャスト時に当該ストリーミングユニット１００を作動させる、またはストリーミングを視聴するときに当該視聴ユニット２００を作動させることができる。一部の実施態様において、当該ストリーミングユニット１００を作動させる当該ユーザ端末は、ライブストリーマーと呼ぶことができ、またはストリーミングデータを生成する当該ユーザ端末と呼ぶことができる。当該視聴ユニット２００を作動させる当該ユーザ端末は、視聴者と呼ぶことができ、または当該ストリーミングデータを再生する当該ユーザ端末と呼ぶことができる。
【0024】
当該ストリーミングユニット１００は、ビデオコントロールユニット１０２と、オーディオコントロールユニット１０４と、配信ユニット１０６と、ＵＩコントロールユニット１０８を含むことができる。当該ビデオコントロールユニット１０２は、カメラ（図示せず）に接続されてもよく、当該映像は当該カメラにより制御される。当該ビデオコントロールユニット１０２は、当該カメラから当該ビデオデータを取得することができる。当該オーディオコントロールユニット１０４は、マイク（図示せず）に接続されてもよく、音声は当該マイクにより制御される。当該オーディオコントロールユニット１０４は、当該マイクから当該オーディオデータを取得することができる。
【0025】
当該配信ユニット１０６は、当該ビデオコントロールユニット１０２からのビデオデータと、当該オーディオコントロールユニット１０４からのオーディオデータを含むストリーミングデータを受信し、ネットワークＮＷを介して当該サーバ１０に送信する。一部の実施態様において、当該配信ユニット１０６は当該ストリーミングデータをリアルタイムで送信する。つまり、当該ビデオコントロールユニット１０２と当該オーディオコントロールユニット１０４からの当該ストリーミングデータの生成と、当該配信ユニット１０６の配信は同時に実行される。
【0026】
当該ＵＩコントロールユニット１０８は、当該ライブストリーマーのＵＩを制御する。当該ＵＩコントロールユニット１０８はディスプレイ（図示しない）に接続され、当該配信ユニット１０６が当該ストリーミングデータを送信し、再生して当該ディスプレイ上に表示する相手に対して当該ストリーミングデータを生成するように構成される。当該ＵＩコントロールユニット１０８は、操作するオブジェクトまたは指示を受けるオブジェクトをディスプレイ上に表示し、当該ライブストリーマーからのタップ入力を受け付けるように構成される。
【0027】
当該視聴ユニット２００は、ＵＩコントロールユニット２０２と、レンダリングユニット２０４と、入力送信ユニット２０６を含んでもよい。当該視聴ユニット２００は、ネットワークＮＷを介してサーバ１０からストリーミングデータを受信するように構成される。当該ＵＩコントロールユニット２０２は、当該視聴者のＵＩを制御する。当該ＵＩコントロールユニット２０２は、ディスプレイ（図示せず）及び（または）スピーカー（図示せず）に接続され、当該ストリーミングデータを再生することにより、当該ディスプレイ上に映像を表示し、当該スピーカーから音声を出力するように構成される。一部の実施態様において、当該ディスプレイ上に映像を出力し、当該スピーカーから音声を出力することを「ストリーミングデータを再生する」ことと呼んでもよい。当該ＵＩコントロールユニット２０２は、タッチパネルやキーボード、ディスプレイなどの入力ユニットに接続され、ユーザからの入力を取得することができる。
【0028】
当該レンダリングユニット２０４は、当該サーバ１０からのストリーミングデータと、フレーム画像とをレンダリングするように構成されてもよい。当該フレーム画像は、ユーザからの入力、視聴者により入力されたコメント、当該サーバ１０から受信したデータを受け付けるためのユーザインターフェイスオブジェクトを含んでもよい。当該入力送信ユニット２０６は、当該ＵＩコントロールユニット２０２から当該ユーザ入力を受信し、当該ネットワークＮＷを介して当該サーバ１０に送信するように構成される。
【0029】
一部の実施態様において、当該ユーザ入力は、ライブストリームの選択、コメントの入力、贈り物の送信、ユーザのフォローまたはフォロー解除、イベントでの投票、ゲームなど、当該ユーザ端末の画面上のオブジェクトをクリックすることであってもよい。例えば、当該入力送信ユニット２０６は、視聴者の当該ユーザ端末が当該ライブストリーマーに贈り物を送るために画面上の贈り物オブジェクトをクリックした場合に、贈り物情報を生成し、インターネットＮＷを介して当該サーバ１０に送信してもよい。
【0030】
図３は、本開示の一部の実施態様に基づく当該サーバ１０のブロック図である。当該サーバ１０は、ストリーミング情報ユニット３０２、中継ユニット３０４、処理ユニット３０６、ストリームＤＢ３２０、ユーザＤＢ３２２、ＡＩチャットボットＤＢ３２４、トレーニングデータＤＢ３２６、パーソナリティＤＢ３２８と、機械学習モデル３３０を含んでもよい。一部の実施態様において、当該機械学習モデル３３０は、言語モデル３３０などであってもよい。
【0031】
当該ストリーミング情報ユニット３０２は、当該ネットワークＮＷを介して当該ライブストリーマーの当該ユーザ端末２０からライブストリーミングの要求を受信する。要求を受信すると、当該ストリーミング情報ユニット３０２は、当該ライブストリーミングの情報を当該ストリームＤＢ３２０に登録する。一部の実施態様において、当該ライブストリーミングの情報は、当該ライブストリーミングのストリームＩＤ及び（または）当該ライブストリーミングに対応する当該ライブストリーマーのライブストリーマーＩＤであってもよい。
【0032】
当該視聴者から当該ネットワークＮＷを介して当該ユーザ端末３０の当該視聴ユニット２００から当該ライブストリーミングの当該情報の提供要求を受信すると、当該ストリーミング情報ユニット３０２は当該ストリームＤＢ３２０を参照し、利用可能なライブストリーミングのリストを生成する。
【0033】
その後当該ストリーミング情報ユニット３０２は、当該ネットワークＮＷを介して当該ユーザ端末３０に当該リストを送信する。当該ユーザ端末３０の当該ＵＩコントロールユニット２０２は、当該リストに基づいてライブストリーミング選択画面を生成し、当該ユーザ端末３０のディスプレイ上に当該リストを表示する。
【0034】
当該ユーザ端末３０の当該入力送信ユニット２０６は、当該ライブストリーミング選択画面上での当該視聴者によるライブストリーミングの選択を受信すると、選択された当該ライブストリーミングの当該ストリームＩＤを含む配信要求を生成し、当該ネットワークを介して当該サーバ１０に送信する。当該ストリーミング情報ユニット３０２は、当該配信要求で当該ストリームＩＤにより指定された当該ライブストリーミングの当該ユーザ端末３０に対する提供を開始することができる。当該ストリーミング情報ユニット３０２は、当該ストリームＤＢ３２０を更新し、当該ユーザ端末３０の当該視聴者の視聴者ＩＤを当該ストリームＩＤの当該ライブストリーマーＩＤに追加することができる。
【0035】
当該中継ユニット３０４は、当該ストリーミング情報ユニット３０２により開始された当該ライブストリーミングにおいて、当該ライブストリーマーの当該ユーザ端末２０から、当該視聴者の当該ユーザ端末３０へのライブストリーミングの送信を中継することができる。当該中継ユニット３０４は、ストリーミングデータの再生中に、当該視聴者からのユーザ入力を示す信号を当該入力送信ユニット２０６から受信することができる。当該ユーザ入力を示す当該信号は、当該ユーザ端末３０のディスプレイに表示されるオブジェクトの指定を示すオブジェクト指定信号であってもよい。
【0036】
当該オブジェクト指定信号は、当該視聴者の視聴者ＩＤ、当該視聴者が視聴しているライブストリーミングを配信するライブストリーマーのライブストリーマーＩＤ、及び当該オブジェクトにより指定されるオブジェクトＩＤを含んでもよい。当該オブジェクトが贈り物などである場合、当該オブジェクトＩＤは、贈り物ＩＤなどであってもよい。同様に、当該中継ユニット３０４は、ストリーミングデータの再生中に、当該ユーザ端末２０の当該ストリーミングユニット１００から、例えば当該オブジェクト指定信号など、当該ライブストリーマーのユーザ入力を示す信号を受信することができる。
【0037】
当該処理ユニット３０６は、ユーザのユーザ端末からの操作に応じて要求を処理するように構成される。例えば、当該ユーザはボタンをクリックして、当該ライブストリーミングルームにＡＩチャットボットを生成してもよい。当該ユーザは、好みに応じて所望のチャットボットを選択することができる。当該中継ユニット３０４が要求を受信すると、当該処理ユニット３０６はその選択に基づき、当該トレーニングデータＤＢ３２６などの対応するデータベースを参照してもよい。
【0038】
一部の実施態様において、サーバ１０は、当該ユーザにいくつかのデフォルトのＡＩチャットボットを提供してもよい。当該デフォルトのＡＩチャットボットに対応する当該トレーニングデータは、予め当該トレーニングデータＤＢ３２６に格納されていてもよい。一部の実施態様において、当該処理ユニット３０６は、内部または外部からデータを取得し、関連する情報をトレーニングデータとして当該トレーニングデータＤＢ３２６に格納してもよい。例えば、選択されたチャットボットが有名人である場合、当該処理ユニット３０６は、ＦａｃｅｂｏｏｋやＩｎｓｔａｇｒａｍなどのソーシャルメディアサイトを参照し、その記録をトレーニングデータとして取得してもよい。
【0039】
選択されたチャットボットが当該ライブストリーミングプラットフォームのユーザである場合、当該処理ユニット３０６は、当該ユーザＤＢ３２２、当該ユーザのライブストリーミング、アーカイブされたストリーミング、当該ユーザの投稿を参照したり、あるいは当該ユーザのソーシャルメディアサイトを参照してさらに記録をトレーニングデータとして取得してもよい。また、選択されたチャットボットがアニメキャラクターである場合、当該処理ユニット３０６は、公式サイトなどを参照してもよい。一部の実施態様において、当該トレーニングデータのリソースは、実際の必要性に応じて柔軟に決定されてもよい。
【0040】
一部の実施態様において、当該処理ユニット３０６はさらに、ＡＩチャットボットなどの生成のために、当該トレーニングデータを機械学習モデルに入力してもよい。一部の実施態様において、当該機械学習モデルは、内部で訓練されたモデルであっても、第三者のサービスプロバイダーから提供されたモデルであってもよい。一部の実施態様において、ＡＩチャットボット生成のための当該機械学習モデルは、言語モデルなどによって実現されてもよい。一部の実施態様において、当該機械学習モデルは、ＣｈａｔＧＰＴやその他のＬＬＭ（大規模言語モデル）などのＡＩチャットボットであってもよい。一部の実施態様において、当該機械学習の方法は、実際の必要性に応じて、任意の可能なモデルによって実現されてもよい。
【0041】
図４は、図３のストリームＤＢ３２０の例示的データ構造を示す表である。当該ストリームＤＢ３２０は、現在行われているライブストリームに関する情報を保持する。当該ストリームＤＢ３２０は、当該ライブストリーミングシステム１が提供するライブストリーミングプラットフォーム上のライブストリームを識別するためのストリームＩＤ、当該ライブストリームを提供するライブストリーマーを識別するためのライブストリーマーＩＤ、当該ライブストリーミングルーム内のＡＩチャットボットを識別するためのＡＩチャットボットＩＤ、及び当該ライブストリームの視聴者を識別するための視聴者ＩＤを、互いに関連付けて格納する。一部の実施態様において、ＡＩチャットボットは、クリエイターとしてのユーザにバインドされてもよい。一部の実施態様において、当該ＡＩチャットボットは、ライブストリームにバインドされてもよい。一部の実施態様において、当該ＡＩチャットボットは、異なるライブストリーミングルーム間を移動可能であってもよい。
【0042】
図５は、図３のユーザＤＢ３２２の例示的データ構造を示す表である。当該ユーザＤＢ３２２は、ユーザに関する情報を保持する。当該ユーザＤＢ３２２は、ユーザを識別するためのユーザＩＤ、当該ユーザが蓄積したポイントを特定するためのポイント、当該ユーザのレベルを識別するためのレベル、当該ユーザのステータスを識別するためのステータスを、相互に関連付けて格納する。当該ポイントは、当該ライブストリーミングプラットフォーム内で流通する電子的な価値である。当該レベルは、当該ライブストリーミングプラットフォームにおける当該ユーザの活動またはエンゲージメントの量の指標であってもよい。当該ステータスは、当該ライブストリーミングプラットフォームにおける当該ユーザのアイデンティティまたはメンバーシップステータスであってもよい。
【0043】
図６は、図３のＡＩチャットボットＤＢ３２４の例示的データ構造を示す表である。当該ＡＩチャットボットＤＢ３２４は、当該ライブストリーミングプラットフォーム上のＡＩチャットボットに関する情報を保持する。当該ＡＩチャットボットＤＢ３２４は、当該ライブストリーミングシステム１が提供する、または当該ユーザが生成したＡＩチャットボットを識別するチャットボットＩＤと、当該チャットボットが現在配置されているライブストリームを識別するストリームＩＤと、当該チャットボットのキャラクターを識別するキャラクターと、当該チャットボットのパーソナリティを識別するパーソナリティと、当該チャットボットの追加機能を識別する追加機能と、を互いに関連付けて格納する。
【0044】
一部の実施態様において、当該アプリプロバイダーは、幾つかのデフォルトチャットボットを予め提供してもよく、またはユーザがリアルタイムでチャットボットを生成してもよい。当該チャットボットは、ライブストリーミングルームで生成されてもよく、異なるライブストリーミングルーム間を移動してもよい。一部の実施態様において、１つのチャットボットが異なるライブストリーミングルームに出現してもよい。一部の実施態様において、当該キャラクターは、有名人、著名人、ライブストリーミングプラットフォームのユーザ、アニメキャラクター、あるいは弁護士などの職業、または任意の可能なキャラクターであってもよい。
【0045】
当該パーソナリティは、人間の個人の特徴であってもよい。例えば、当該チャットボットは、ポジティブ、ネガティブ、おしゃべり、無口、せっかち、忍耐強い、派手、地味、優しい、暴力的、同情的、冷酷などのパーソナリティを有していてもよい。一部の実施態様において、１つのキャラクターがデフォルトのパーソナリティを有していてもよい。例えば、有名な科学者アルバート・アインシュタインは、思慮深く想像力豊かな天才と考えられている。一部の実施態様において、当該キャラクターはパーソナリティを持たなくてもよい。例えば、当該チャットボットは、ロボットのようにコメントしたり、応答したりしてもよい。
【0046】
一部の実施態様において、当該キャラクターのパーソナリティは設定または変更されてもよい。例えば、当該ユーザは、せっかち、おしゃべりなどのパーソナリティを持つアインシュタインを生成してもよい。一部の実施態様において、当該キャラクターは、通常の印象と対照的な正反対のパーソナリティを有していてもよい。例えば、無口な人物であると考えられているあるユーザのＡＩチャットボットは、おしゃべりなパーソナリティで生成されてもよい。一部の実施態様において、当該ＡＩチャットボットと当該ユーザ間の対照性が、ライブストリーミングルームに楽しさをもたらす可能性がある。
【0047】
一部の実施態様において、当該パーソナリティは、テキストメッセージの用語、語彙、言葉遣い、音声メッセージのトーン、ピッチ、音質、テンポ、速度、言葉遣い、または仮想チャットボットからのビデオメッセージの顔の特徴、ジェスチャー、動作などにより、ＡＩチャットボットによって示されてもよい。例えば、ユーモアのセンスがあるパーソナリティの当該ＡＩチャットボットは、時々ジョークを言ってもよく、悲観的なパーソナリティを持つ当該ＡＩチャットボットは、顔をしかめたり、ネガティブなことを言ったりしてもよい。
【0048】
一部の実施態様において、当該追加機能は、当該ライブストリーミングルームにおける当該チャットボットの機能であってもよい。当該追加機能は、当該ライブストリーミングルームの状況に応じて当該ユーザにより設定されてもよい。例えば、当該チャットボットはイベントアシスタントであってもよい。当該イベントアシスタントは、当該ストリーマーが現在当該ライブストリーミングプラットフォームによって開催されているイベントに関与している場合、当該イベントで当該ストリーマーを支援してもよい。当該ＡＩチャットボットは、当該ライブストリーマーがイベントにおいて報酬閾値を満たすよう支援するためのヒントメッセージを該ライブストリーマーまたは視聴者に提供してもよい。
【0049】
当該イベント中、当該処理ユニット３０６は当該ライブストリーミングルームのステータスを監視し続け、当該ステータスに基づきヒントメッセージを提供してもよい。当該ステータスは、当該イベント終了の５分前など、特定の時点であってもよい。また、当該ステータスは、当該ライブストリーマーの受領ポイントが減少しているなどの具体的な状況であってもよい。このような情報は、当該処理ユニット３０６が当該機械学習モデルに基づきヒントメッセージを提供するためのトリガーとみなされてもよい。
【0050】
一部の実施態様において、当該チャットボットは、当該ライブストリーマーに対し、視聴者を盛り上げるために歌を歌ったり、ギターを弾いたりするなど、視聴者と交流することを提案してもよい。一部の実施態様において、当該チャットボットはまた、当該ライブストリーマーが勝利する、またはイベントで報酬閾値を満たすための目標を視聴者に通知してもよい。例えば、「ライブストリーマーが勝利するには２,０００ポイントが必要です。小さなイベントの贈り物（５００）を４つ、または大きなイベントの贈り物（２,０００）を１つ寄付しませんか？」というヒントメッセージがＡＩチャットボットを通じて表示され、当該ライブストリーマーを支援するように視聴者を誘導してもよい。
【0051】
当該チャットボットは、当該ライブストリーミングルームのムードメーカーとなってもよい。当該ライブストリーミングルームの雰囲気が悪くなったとき、チャットボットは、ライブストリーマーと視聴者間の交流を増やすために、視聴者にキューを出したり、話題を開始したりしてもよい。一部の実施態様において、当該ライブストリーミングルームの雰囲気は、例えば、視聴者の数、コメントの数、コメントの内容、贈り物の数、贈り物の価値などによって判断されてもよい。一部の実施態様において、交流の程度が閾値より低くなると、当該チャットボットが起動され、当該ライブストリーミングルームの雰囲気を高めるムードメーカーとして機能してもよい。
【0052】
一部の実施態様において、当該ＡＩチャットボットＤＢ３２４はさらに、当該チャットボットのレベルを識別するためのレベル、当該ユーザとの交流の程度を識別するための交流値、当該チャットボットの現在の状態を識別するためのステータスを、互いに関連付けて格納してもよい。当該ステータスは、「アクティブ」、「非アクティブ」、「フリーズ」、「破壊」など、当該チャットボットの現在の状態を示してもよい。「アクティブ」及び「非アクティブ」の当該ステータスは、当該チャットボットが現在アクティブ化されているか否かを示してもよい。一部の実施態様において、当該チャットボットのステータスは、実際の必要性に応じて柔軟に設計及び決定されてもよい。
【0053】
一部の実施態様において、当該該チャットボットは、異なるレベルと交流値を有してもよい。当該交流値は、ユーザへのタギング、コメント、ユーザへの応答、ヒントメッセージの提供など、当該ユーザとの交流によって得られてもよい。当該レベルは、十分な交流値を受け取ることによってアップグレードされてもよい。一部の実施態様において、当該チャットボットの当該機能は、当該レベルなどに応じてロック解除されてもよい。一部の実施態様において、当該チャットボットからの当該交流は、当該レベルに基づいて変更されてもよい。
【0054】
一部の実施態様において、異なるレベルは異なる年齢に対応し、当該コメントやトピックは当該レベルに基づいて異なっていてもよい。例えば、１２歳以下の当該ＡＩチャットボットは子供のような振る舞いをし、４０歳超のＡＩチャットボットはずっと大人の振る舞いをするなどであってもよい。つまり、当該チャットボットの当該レベルに応じて、トレーニングデータを変更または追加してもよい。一部の実施態様において、当該処理ユニット３０６はさらに、当該ＡＩチャットボットの当該レベルに基づいてトレーニングデータを取得してもよい。
【0055】
一部の実施態様において、当該ＡＩチャットボットの当該ステータスは、当該ＡＩチャットボットと当該ライブストリーミングルーム内の当該ユーザとの交流に基づいて変化してもよい。一部の実施態様において、当該ステータスはさらに、「嬉しい」、「不快」、「悲しい」、「落ち込んでいる」、「寂しい」などの感情的なステータスを含んでいてもよい。例えば、当該ＡＩチャットボットと当該ユーザ間の交流がポジティブまたはネガティブである場合、当該ＡＩチャットボットの当該ステータスは、「嬉しい」または「悲しい」などのポジティブまたはネガティブなものであってもよい。一部の実施態様において、当該交流値の増加は、当該ステータス基づいて変化してもよい。例えば、当該交流値は、ポジティブなステータスにある間、ネガティブなステータスにある間よりも速く増加してもよい。
【0056】
一部の実施態様において、当該ＡＩチャットボットの当該ステータスは、当該ＡＩチャットボットのヘルスポイント（ＨＰ）とも呼ばれてもよい。一部の実施態様において、当該ＡＩチャットボットの当該ステータスは、当該ユーザからの交流に基づいて変化してもよい。例えば、当該ユーザからの交流が少ない、または全くない場合、当該ステータスは「寂しい」、「落ち込んでいる」、「弱っている」、または「危険な状態」となってもよい。一部の実施態様において、当該ＡＩチャットボットの当該ステータスが特定の期間にわたってネガティブなままである場合、当該ＡＩチャットボットは当分の間または永遠に動作不能になってもよい。例えば、１時間以上当該ＡＩチャットボットと交流するユーザがいない場合、当該ＡＩチャットボットは永遠に破壊されてもよい。
【0057】
一部の実施態様において、当該ＡＩチャットボットの当該ステータスは、当該ＡＩチャットボットと当該ユーザの交流を変化させてもよい。例えば、当該ＡＩチャットボットのステータスがネガティブである場合、当該ＡＩチャットボットからのメッセージはネガティブなものになるなどであってもよい。一部の実施態様において、当該ＡＩチャットボットの当該ステータスは、当該ＡＩチャットボットのプロフィールページ、表示画像、またはメッセージに表示されてもよい。一部の実施態様において、当該ＡＩチャットボットの当該ステータスは、図１２のアイコン６１８のような、ライブストリーミング内のアイコンに表示されてもよい。本実施形態によれば、当該ユーザは、当該ＡＩチャットボットの当該ステータスを理解し、必要に応じて当該ＡＩチャットボットと交流することができる。
【0058】
図７は、図３のトレーニングデータＤＢ３２６の例示的データ構造を示す表である。当該トレーニングデータＤＢ３２６は、ＡＩチャットボットのトレーニングデータに関する情報を保持する。当該トレーニングデータＤＢ３２６は、当該チャットボットのキャラクターを識別するキャラクターと、当該キャラクターの種類を識別する種類と、当該キャラクターのトレーニングデータを識別するキャラクターデータとを互いに関連付けて格納する。
【0059】
一部の実施態様において、当該キャラクターの種類は、「チャリティ」、「ユーザ」、「アニメーション」等を含んでいてもよい。当該種類「チャリティ」は、有名な著名人を指していてもよい。当該人物は、俳優、女優、科学者、政治家などであってもよい。当該種類「ユーザ」は、当該ライブストリーミングプラットフォーム内のユーザを指していてもよい。当該ユーザは、当該ライブストリーミングプラットフォーム内の有名なユーザや、フォロワー、フォロイー、当該ライブストリーミングルーム内の別のユーザの友人であってもよい。当該種類「アニメーション」は、ドラえもん、スーパーマリオ、ピカチュウなどのアニメーションの仮想キャラクターを指していてもよい。
【0060】
一部の実施態様において、当該キャラクターの当該トレーニングデータは、当該キャラクターの種類に基づいて取得されてもよい。例えば、チャリティの当該トレーニングデータは、Ｆａｃｅｂｏｏｋ、Ｉｎｓｔａｇｒａｍ、ｔｗｉｔｔｅｒなどのソーシャルメディアサイトの公開情報から取得されてもよい。ユーザの当該トレーニングデータは、当該ライブストリーミングプラットフォームにアップロードされた当該ユーザの情報や、当該ユーザのソーシャルメディアサイト等から取得されてもよい。本実施態様によれば、当該ユーザが当該ライブストリーミングプラットフォームにより多くの情報を投稿する動機付けとなる可能性がある。
【0061】
さらに、当該アニメーションキャラクターの当該トレーニングデータは、その公式ウェブサイト、アニメーション、オンライン検索結果などから取得されてもよい。一部の実施態様において、当該トレーニングデータは、実際の必要に応じて柔軟に取得されてもよい。一部の実施態様において、当該データは、事前にダウンロードされても、リアルタイムでインターネットから取得されてもよい。当該データは、トレーニングのために当該トレーニングデータＤＢ３２６に格納されてもよい。一部の実施態様において、当該トレーニングデータは、例えば、当該ＡＩチャットボットのレベルなどに基づいて分類されてもよい。一部の実施態様において、当該トレーニングデータは、柔軟に追加、削除、調整等されてもよい。
【0062】
図８は、図３のパーソナリティＤＢ３２８の例示的データ構造を示す表である。当該パーソナリティＤＢ３２８は、ＡＩチャットボットのパーソナリティデータに関する情報を保持する。当該パーソナリティＤＢ３２８は、当該チャットボットのパーソナリティを識別するパーソナリティＩＤと、パーソナリティの説明を識別する説明文と、当該パーソナリティのプロンプトデータを識別するプロンプトデータとを互いに関連付けて格納する。
【0063】
一部の実施態様において、当該パーソナリティは、言語モデルのプロンプトデータであってもよい。当該プロンプトは、応答を生成するためまたは特定のタスクを実行するために当該言語モデルに提供される入力テキストまたは指示を指してもよい。一部の実施態様において、当該プロンプトデータは、チャットボットの特定のパーソナリティを示すための一文またはひとまとまりの文章であってもよい。例えば、当該プロンプトデータは、「あなたは教養があり、礼儀正しく、忍耐強い人であり、人と分かち合うことが好きで、人の話にも耳を傾けます」であってもよい。当該プロンプトデータを取得し、当該言語モデルに入力することで、当該チャットボットに特定のパーソナリティを付与してもよい。
【0064】
例えば、「おしゃべり」というパーソナリティは、「あなたはおしゃべりです」、「回答は６文以上または１００語以上でなければなりません」という入力を供給することで実現されてもよい。当該アプリプロバイダーは、いくつかのデフォルトのパーソナリティデータを提供し、当該ユーザが選択できるようにしてもよい。一部の実施態様において、当該プロンプトデータは、当該ユーザにより入力及び設定されてもよい。例えば、当該ユーザは、パーソナリティなしまたはデフォルトのパーソナリティを選択することができる。また、当該ユーザは、プロンプトデータとしてひとまとまりの文章を入力し、当該ＡＩチャットボットにパーソナリティを付与するなどしてもよい。
【0065】
図９は、本開示の一部の実施態様に基づくライブストリーミングシステム１の機能構成例を示す概略図である。図９に示すように、ＡＩチャットボットは、ユーザのユーザ端末からのユーザ入力に応答して生成され、設定されてもよい。一部の実施態様において、当該ＡＩチャットボットの生成は、サーバ１０によって自動的に実行されてもよい。当該ユーザは、キャラクターなど当該チャットボットの情報を設定してもよい。一部の実施態様において、当該ユーザはさらに、パーソナリティ、追加機能などを設定してもよい。当該ユーザからの設定に応じて、サーバ１０は、内部またはインターネット等の外部から当該トレーニングデータを収集してもよい。例えば、当該ユーザが当該キャラクターを自分のフォロワーに設定した場合、サーバ１０は、サーバ１０に保存されている当該フォロワーの公開情報を収集しても、ソーシャルメディアサイト等の外部から収集してもよい。
【0066】
一部の実施態様において、当該ユーザが当該ＡＩチャットボットに特定のパーソナリティを設定した場合、当該サーバ１０は、当該パーソナリティＤＢ３２８などを参照して、特定のパーソナリティを有するフォロワーのチャットボットを生成してもよい。当該トレーニングデータとパーソナリティデータが収集されると、サーバ１０はさらに当該トレーニングデータとパーソナリティデータを当該言語モデル３３０に入力し、それに基づいてチャットボットを生成してもよい。当該チャットボットは、ライブストリーマーのライブストリーミングルームなどに配置され、表示されてもよい。
【0067】
一部の実施態様において、当該処理ユニット３０６は、当該ライブストリーミングルームの状況を監視してもよい。例えば、当該処理ユニット３０６は、コメント、イベント情報、イベントにおける当該ライブストリーマーの受領ポイントまたは順位等を監視してもよい。当該処理ユニット３０６はさらに、関連情報を当該言語モデル３３０に入力してもよい。当該言語モデル３３０はさらに、当該関連情報に基づいて応答を生成し、当該ライブストリーマーがイベントや当該ライブストリーミングルーム内の雰囲気を処理することなどを支援してもよい。例えば、ユーザが当該チャットボットをタグし、当該チャットボットにジョークを言うように依頼した場合、当該処理ユニット３０６は、当該コメントを当該言語モデル３３０に入力し、当該ユーザのためにジョークを生成してもよい。
【0068】
図１０から図１５は、ライブストリーマーのユーザ端末２０または視聴者のユーザ端末３０のディスプレイ上に表示されるライブストリーミングルーム画面６００の例示的な画面イメージである。視聴者がライブストリーミングルームを選択して入室すると、ライブストリーマーのライブストリーミングルーム画面６００が当該ディスプレイに表示されてもよい。当該ライブストリーミングルーム画面６００は、ライブストリーマー情報オブジェクト６０２、ライブストリーマー画像６０４、メッセージゾーン６０６、メッセージ入力ボックス６０８、贈り物オブジェクト６１０、共有オブジェクト６１２等を含んでもよい。
【0069】
一部の実施態様において、当該画面６００はさらに、招待ボタン６１４を含んでいてもよい。当該招待ボタン６１４は、当該ライブストリーミングルームにユーザを招待するように、当該ライブストリーミングルームでＡＩチャットボットを生成するように構成される。図１０に示すように、当該招待ボタン６１４がクリックされると、図１１に示すように、ＡＩチャットボットを設定するためのＵＩ６１６が当該ユーザに表示されてもよい。一部の実施態様において、当該ＵＩ６１６は、当該ユーザがキャラクター、パーソナリティ、追加機能などを決定するためのオプションを備えたフォームを含んでもよい。
【0070】
一部の実施態様において、当該ＵＩ６１６は、カスタマイズされたＡＩチャットボットを生成するために、当該ユーザがプロンプトとしてひとまとまりの文章を入力するための欄（図示せず）を含んでもよい。例えば、当該ユーザは、「自分のライブストリーミングルームで、クレイジーなパーソナリティのスーパーマリオのＡＩチャットボットをムードメーカーにしたい」と入力してもよく、それに基づき当該処理ユニット３０６がキーワードを抽出してＡＩチャットボットを生成してもよい。一部の実施態様において、当該ＡＩチャットボットの設計と設定は柔軟に決定されてもよい。
【0071】
当該ユーザが当該ＡＩチャットボットの選択を終えると、当該処理ユニット３０６は、当該ＡＩチャットボットの情報を機械学習モデルに入力してもよい。ここでは、言語モデル３３０を例に挙げて説明する。一部の実施態様において、当該言語モデルは、ＣｈａｔＧＰＴなどの可能または利用可能な任意のモデルであってもよい。一部の実施態様において、当該機械学習モデルは、入力に基づいて可能な出力を推論してもよく、当該ＡＩチャットボット生成の手順は、当該モデルからの推論をユーザに提供することを指してもよい。
【0072】
一部の実施態様において、当該処理ユニット３０６は、サーバ１０内のデータベースまたはインターネットからＡＩチャットボットのトレーニングデータを取得してもよい。当該ＡＩチャットボットの生成後、当該処理ユニット３０６は、図１２に示すように、当該ＡＩチャットボットを当該ライブストリーミングルーム内に表示してもよい。一部の実施態様において、当該ライブストリーミングルーム内にＡＩチャットボットが存在することを示すアイコン６１８があってもよい。一部の実施態様において、当該ＡＩチャットボットの表示画像などに、当該ＡＩチャットボットのＩＤを示すマーク（図示せず）が表示されてもよい。
【0073】
図１２に示すように、当該ＡＩチャットボットは、当該ライブストリーマー及び視聴者と交流してもよい。例えば、当該視聴者は当該ＡＩチャットボットをタグし、当該ＡＩチャットボットにジョークを言うように依頼するなどしてもよい。当該処理ユニット３０６はさらに、当該ライブストリーミングルームのステータスを監視し、コメントを当該言語モデル３３０に入力して、当該視聴者からのコメントに基づき応答を生成してもよい。
【0074】
当該ＡＩチャットボットは、当該視聴者をタグし、当該視聴者が当該ライブストリーマーと交流する動機を与えてもよい。例えば、当該処理ユニット３０６は、当該ライブストリーミングプラットフォームまたはソーシャルメディアサイトにおける視聴者の投稿を参照してもよい。当該視聴者が日本旅行から帰ってきたところである場合、当該処理ユニット３０６は、当該視聴者をタグし、当該ＡＩチャットボットを介して当該視聴者に日本での旅行について尋ねてもよい。一部の実施態様において、当該ＡＩチャットボットは、当該ライブストリーミングルームに初めて参加する視聴者にキューを出したり、視聴者をタグしたりするなどしてもよい。本実施態様によれば、新規ユーザは、当該ライブストリーミングルームに歓迎され、関わっていると感じることができ、ユーザエクスペリエンスが向上される可能性がある。
【0075】
一部の実施態様において、当該ＡＩチャットボットは、図１３に示すように、ライブストリーミングルーム内の他のユーザと同様または同一の操作を実行することができてもよい。例えば、当該ＡＩチャットボットは、ライブストリーマーなどとグループ通話やＰＫバトル、ゲームバトルなどをしてもよい。一部の実施態様において、当該ＡＩチャットボットは、ユーザと交流するための音声メッセージＡＭを備えていてもよい。本実施態様によれば、当該ＡＩチャットボットは、当該ライブストリーマーが当該ライブストリーミングルーム内の雰囲気をコントロールしやすくすることができ、ユーザエクスペリエンスが向上される可能性がある。
【0076】
図１４に示すように、当該ＡＩチャットボットは、プロフィールページ６２０を有してもよい。当該プロフィールページ６２０は、例えば、当該ＡＩチャットボットの表示画像をクリックするなどによってアクセス可能であってもよい。一部の実施態様において、当該ＡＩチャットボットの当該プロフィールページ６２０は、キャラクター、パーソナリティ、レベル、年齢、交流値、追加機能など、当該ＡＩチャットボットの詳細情報を含んでいてもよい。一部の実施態様において、当該ユーザの当該プロフィールページ６２０上に、当該ＡＩチャットボットを追加またはフォローするための追加ボタン６２２が提供されていてもよい。一部の実施態様において、他のユーザは、当該ＡＩチャットボットをタグ、贈り物、ＰＫ招待の送信、ブロック、ダイレクトメッセージの送信などを行うことができる。
【0077】
一部の実施態様において、当該ＡＩチャットボットは、当該ライブストリーミングのサムネイル上に表示されてもよい。図１５に示すように、当該ユーザは、サーバ１０に対してライブストリーミングの情報提供を要求してもよく、当該ストリーミング情報ユニット３０２は、当該ストリームＤＢ３２０を参照し、利用可能なライブストリーミングのリストを生成してもよい。当該リストを受信すると、当該ユーザ端末３０のＵＩコントロールユニット２０２は、当該リストに基づいてライブストリーミング選択画面６２２を生成し、当該ユーザ端末３０のディスプレイに表示してもよい。一部の実施態様において、当該ライブストリーミング選択画面６２２は、当該ユーザが選択するための各ライブストリーミングのサムネイルＴＮを含んでいてもよい。
【0078】
一部の実施態様において、当該ライブストリーミングの当該サムネイルＴＮは、当該ライブストリーミングにＡＩチャットボットが存在するか否かを示すマーク６２４を含んでいてもよい。当該ユーザは、当該マーク６２４をクリックするなどして、当該ＡＩチャットボットの詳細情報を受け取ってもよい。本実施態様によれば、各ライブストリーマーは、独自のＡＩチャットボットを生成し、それをセールスポイントとして、より多くの視聴者のライブストリーミングへの参加を動機付けることができる。
【0079】
図１６は、当該ユーザ端末２０、３０におけるアプリケーション起動処理の工程を示すフローチャートである。当該ユーザは、当該ライブストリーミングルームにＡＩチャットボットを生成してもよい。当該ユーザの当該ユーザ端末から当該ＡＩチャットボットの選択を受信すると（Ｓ５０２）、サーバ１０は、当該ユーザの選択に基づき、選択された当該ＡＩチャットボットのトレーニングデータを取得してもよい（Ｓ５０４）。一部の実施態様において、当該トレーニングデータは、キャラクターに対応するキャラクターデータであってもよい。当該キャラクターは、有名人、ユーザ、アニメのキャラクター等であってもよい。当該処理ユニット３０６は、サーバ１０内の対応するデータベース、またはソーシャルメディアサイトや公式ウェブサイトなどインターネット上のリソースを参照してもよい。
【0080】
一部の実施態様において、当該処理ユニット３０６はさらに、当該トレーニングデータを言語モデルなどの機械学習モデルに入力し、当該トレーニングデータに基づいてＡＩチャットボットを生成してもよい（Ｓ５０６）。一部の実施態様において、当該ユーザが当該ＡＩチャットボットにパーソナリティを設定する場合、当該処理ユニット３０６はさらに、当該パーソナリティＤＢ３２８を参照し、対応するプロンプトデータを追加して、当該ＡＩチャットボットのパーソナリティを設定してもよい。当該ＡＩチャットボットの生成後当該、処理ユニット３０６は、当該ＡＩチャットボットを当該ライブストリーミングルームに設定し（Ｓ５０８）、当該ＡＩチャットボットに当該ライブストリーミングルーム内の当該ユーザと交流させてもよい。一部の実施態様において、当該仮想チャットボットは、当該ライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供してもよい。
【0081】
本開示によれば、当該キャラクターを備えたＡＩチャットボットは、ライブストリーミングルームにおける交流や楽しさを増大させることができる。さらに、ライブストリーミングにおける雰囲気の監視や対応を一部または全部当該ＡＩチャットボットに任せることもできる。したがって、ユーザエクスペリエンスが向上される可能性がある。
【0082】
一部の実施態様において、当該キャラクター、パーソナリティ、追加機能などの選択は、ランダムボタンで実現されてもよい。例えば、当該ユーザは、ランダムボタンをクリックして、ランダムなキャラクター、パーソナリティ、追加機能などを有するＡＩチャットボットをランダムに生成してもよい。本実施態様によれば、ランダムなキャラクター、パーソナリティ、追加機能などを有するＡＩチャットボットが生成され、当該ライブストリーミングルーム内の雰囲気を向上させることができる。
【0083】
一部の実施態様において、当該ユーザは、テキスト、音声、ビデオメッセージなどによって、ＡＩチャットボットに合図を送ったり、タグしたりしてもよい。例えば、当該ライブストリーマーは、ボタンをクリックする、特定のメッセージを入力する、特定のメッセージを言う、特定のジェスチャーをする、などにより、当該ＡＩチャットボットに合図を送ってもよい。本実施態様によれば、当該ライブストリーマーは、当該ライブストリーミングルーム内の雰囲気が盛り上がっていない場合に、当該ＡＩチャットボットに助けを求める合図を送ってもよく、それにより当該ライブストリーミングルーム内の雰囲気を改善することができる。
【0084】
一部の実施態様において、ライブストリーミングルーム内には２つ以上のＡＩチャットボットが存在してもよい。当該ライブストリーミングルーム内の１つのＡＩチャットボットが別のＡＩチャットボットと交流してもよい。一部の実施態様において、当該ユーザは１つのＡＩチャットボットに、別のＡＩチャットボットと交流するよう合図を送ってもよい。当該ユーザは、異なるＡＩチャットボットに相互に交流するよう合図を送ってもよい。例えば、当該ユーザは、ストリートファイターと任天堂のキャラクターのＡＩチャットボットに、交流やＰＫなどの合図を送ってもよい。本実施態様によれば、当該ライブストリーミングルーム内の楽しさを向上することができる。
【0085】
一部の実施態様において、当該ＡＩチャットボットは、当該ライブストリーミングルーム内のガイドであってもよい。当該ＡＩチャットボットは、当該ライブストリーマーまたは視聴者に、ライブストリーミングを行う、ライブストリーミングを見る、当該ライブストリーマーと交流する、ゲームをする、などを案内してもよい。一部の実施態様において、ゲームなどの新機能が登場したとき、当該ＡＩチャットボットはあるライブストリーミングルーム内で当該新機能を体験し、別のライブストリーミングルーム内でその体験を共有してもよい。本実施態様によれば、当該ユーザが新機能を体験する障壁が低減され、ユーザエクスペリエンスが向上される可能性がある。
【0086】
一部の実施態様において、当該ＡＩチャットボットは、あるユーザが当該ライブストリーミングプラットフォームのルールに違反した場合、当該ユーザをミュート、追放、ブロックしてもよい。例えば、あるユーザのコメントに不適切な言葉や違法なポイント情報が含まれている場合、当該ＡＩチャットボットは当該ユーザをミュートしたり、当該ライブストリーミングルームから追放したりしてもよい。一部の実施態様において、当該ＡＩチャットボットは、上記の動作を自動で、またはライブストリーマーや他のユーザからの要求に基づいて実行してもよい。本実施態様によれば、当該ＡＩチャットボットは、当該ライブストリーマーが当該ライブストリーミングルーム内の雰囲気に対応する支援をすることができる。
【0087】
一部の実施態様において、当該ＡＩチャットボットは、ライブストリーミングプラットフォーム内でポイントを消費することなどにより生成されてもよい。一部の実施態様において、ＡＩチャットボットは、レベル８０以上やＶＩＰステータスなど、特定のレベルやステータスを持つユーザによってのみ生成されてもよい。一部の実施態様において、ＡＩチャットボット生成のための当該ポイントは、１人のユーザが支払う、または複数のユーザが分担して支払ってもよい。一部の実施態様において、２つ以上のＡＩチャットボット生成のための当該ポイントは、同じであっても、ＡＩチャットボットの数などに基づいて増加されてもよい。
【0088】
一部の実施態様において、当該チャットボットのキャラクター、パーソナリティ、特徴は、当該ライブストリーミングルーム内の当該ユーザからの入力によって学習させてもよい。当該ユーザは、プロンプトデータとして入力を提供し、当該ＡＩチャットボットに新しいパーソナリティなどを付与してもよい。一部の実施態様において、各ユーザは、キャラクターやパーソナリティ、特徴をカスタマイズした自分だけのＡＩチャットボットを有してもよい。一部の実施態様において、当該ユーザが自分のＡＩチャットボットを見せて競い合うキャンペーンが開催されてもよい。
【0089】
当該ＡＩチャットボットは、当該ライブストリーミングルーム内の当該ユーザからの交流に応答してもよい。一部の実施態様において、当該ＡＩチャットボットは、定期的に、あるいはライブストリーミングルーム内の雰囲気が悪くなったときなどに、自動的に話題を提供したり、会話を生成したりしてもよい。例えば、当該ＡＩチャットボットは、毎時間の最新ニュースを提供したり、ライブストリーミングルーム内に交流がないときに星占い情報を提供したりしてもよい。
【0090】
一部の実施態様において、当該ＡＩチャットボットは、ライブストリーミングプラットフォーム内で、あるいは外部のソーシャルメディアサイトから、ユーザの情報を受信し、その情報に基づいて当該ユーザに合図を送ってもよい。例えば、あるユーザがタイ旅行に関する記事をライブストリーミングプラットフォームに投稿し、当該ＡＩチャットボットがその記事から情報を取得してもよい。当該ユーザがあるライブストリーミングルームに入室すると、当該ＡＩチャットボットは当該ユーザに合図を送り、当該タイ旅行について質問してもよい。本実施態様によれば、当該ライブストリーマーと当該ユーザ間の話題作りに役立ち、また、当該ユーザが当該ライブストリーミングルーム内のユーザたちともっと交流する動機付けになる可能性がある。
【0091】
一部の実施態様において、当該ＡＩチャットボットは、ユーザとライブストリーマー間の交流履歴情報を収集し、当該ライブストリーマーに当該情報を提供してもよい。例えば、当該ライブストリーマーが３日前に当該ユーザと会話した場合、または昨日当該ユーザの記事でいいねをクリックした場合、当該ＡＩチャットボットは当該ライブストリーマーにヒントメッセージを提供し、当該ライブストリーマーが当該ユーザとの交流を思い出すようにしてもよい。本実施態様によれば、当該ライブストリーマーが当該ユーザを記憶しやすくなり、ユーザエクスペリエンスが向上される可能性がある。
【0092】
一部の実施態様において、当該ＡＩチャットボットは、ユーザとの交流から、当該ユーザの情報を記憶してもよい。例えば、当該ユーザが当該ＡＩチャットボットに対して自分がおうし座であることを伝えた場合、当該ＡＩチャットボットはその情報を受信し、当該情報を当該レーニングデータＤＢやユーザＤＢなどに格納してもよい。より具体的には、当該処理ユニット３０６はさらに、当該ライブストリーミングルームにおける交流を取得し、リアルタイムで当該トレーニングデータＤＢやユーザＤＢを更新してもよい。本実施態様によれば、当該ＡＩチャットボットと当該ユーザ間の交流が円滑になり、ユーザエクスペリエンスが向上される可能性がある。
【0093】
一部の実施態様において、当該ＡＩチャットボットはライブストリーミングなどを開始してもよい。一部の実施態様において、当該ＡＩチャットボットはそのキャラクターに関連する情報を提供してもよい。例えば、当該ＡＩチャットボットが占い師や占星術師である場合、当該ＡＩチャットボットはライブストリーミングなどで星占い情報を提供してもよい。一部の実施態様において、当該ＡＩチャットボットのデザインおよび機能は、実際の必要性に応じて柔軟に決定されてもよい。
【0094】
一部の実施態様において、当該ＡＩチャットボットは、当該ライブストリーマーと視聴者間の交流を受信し、当該ライブストリーマーが当該視聴者とどのように交流するかを学習してもよい。一部の実施態様において、当該ＡＩチャットボットは、当該ライブストリーマーと同じように、当該視聴者と話したり、交流したり、ゲームをしたりするようにトレーニングされてもよい。一部の実施態様において、当該ライブストリーマーは、当該ライブストリーマーが対応できない間、当該ＡＩチャットボットを代理ライブストリーマーとして設定してもよい。例えば、当該ライブストリーマーまたは視聴者は、トイレに行くなどでオンライン麻雀ゲームから抜け出すために、当該ＡＩチャットボットを代理プレイヤーとして設定してもよい。一部の実施態様において、自動プレイモードや自動交流モードを設定し、当該ＡＩチャットボットにゲームをプレイさせたり、視聴者と交流させたりするためのスイッチボタンが提供されてもよい。
【0095】
一部の実施態様において、ＴＴＳ（Ｔｅｘｔ－ｔｏ―Ｓｐｅｅｃｈ、テキストの音声読み上げ）やＳＴＴ（Ｓｐｅｅｃｈ－ｔｏ―Ｔｅｘｔ、音声のテキスト変換）などの自然言語処理技術も導入されてもよい。例えば、当該ライブストリーマーからの音声などの音声データをテキスト情報に変換して機械学習モデルに入力したり、テキスト出力を音声に変換し、音声データを介して当該ＡＩチャットボットがユーザに応答するなどしてもよい。一部の実施態様において、音声メッセージのトーン、ピッチ、音質、テンポ、スピードは、感情によって変化してもよい。例えば、当該ＡＩチャットボットは、非常に興奮しているとき、高いピッチと速い速度で話してもよい。
【0096】
一部の実施態様において、当該ＡＩチャットボットにアバターやバーチャルスキンを設定してもよい。一部の実施態様において、当該アバターやバーチャルスキンは、プラットフォームプロバイダーから提供される、またはユーザ自身によってカスタマイズされるなどであってもよい。一部の実施態様において、当該ＡＩチャットボットの顔の特徴、ジェスチャー、動きは、感情に基づいて変化してもよい。例えば、当該ＡＩチャットボットは贈り物を受け取るとき笑顔になり、ネガティブなメッセージを受け取ったときは怒った顔を見せてもよい。一部の実施態様において、当該アバターやバーチャルスキンは、サーバ１０によって提供されても、Ｌｉｖｅ２Ｄ、ＶＲｏｉｄ Ｈｕｂなどのサードパーティ製ソフトウェアによって提供されてもよい。
【0097】
一部の実施態様において、当該ＡＩチャットボットの感情は、当該ライブストリーミングルーム内の当該ライブストリーマーのステータスに基づいて変化してもよい。例えば、当該ＡＩチャットボットは、当該ライブストリーマーが特定のポイント以上の贈り物を受け取ったり、イベントで報酬を獲得したりなどすると、嬉しいといったポジティブな感情を示してもよい。一部の実施態様において、特定の達成度と対応する感情との関係を格納するルックアップテーブルが提供されてもよい。例えば、当該ＡＩチャットボットは、受け取ったポイントが１,０００点超の場合喜び、受け取ったポイントが１０,０００点超の場合踊るなどしてもよい。
【0098】
一部の実施態様において、サーバ１０は、ＡＩチャットボットの感情を処理するためのエモーションユニットをさらに含んでもよい。当該エモーションユニットは、当該ＡＩチャットボットからのテキスト、音声、ビデオメッセージの情報などの当該ＡＩチャットボットの感情を処理するように構成されてもよい。一部の実施態様において、当該ＡＩチャットボットの感情はランダムに、または定期的に変わってもよい。例えば、当該ＡＩチャットボットは、毎日感情を変えるなどしてもよい。感情の当該情報はインターネットなどから受信されてもよい。
【0099】
一部の実施態様において、当該エモーションユニットは、内部データベースまたは占星術ウェブサイトなどの外部リソースを参照して個々の星占いを受信し、さらに星占いに基づいて当該感情を決定してもよい。例えば、当該ＡＩチャットボットが牡牛座の占星術師に設定されている場合、当該エモーションユニットは、占星術ウェブサイトを参照して、その日の牡牛座の星占いを取得してもよい。牡牛座の星占いが幸運日であることを示している場合、当該エモーションユニットは当該ＡＩチャットボットにポジティブな感情を設定するなどしてもよい。
【0100】
一部の実施態様において、サーバ１０は、当該ライブストリーミングルームにおける当該ＡＩチャットボットと当該ユーザの交流を処理するための記憶ユニットをさらに含んでもよい。当該記憶ユニットは、当該ライブストリーミングルーム内の当該ユーザの情報を記憶するように構成されてもよい。例えば、あるユーザが双子座であると発言した場合、当該記憶ユニットは、当該メッセージからその情報を抽出し、例えば、当該ユーザＤＢ３２２やトレーニングデータＤＢ３２６などに当該情報を格納してもよい。当該ユーザが当該ＡＩチャットボットと交流すると、その情報はさらにトピックなどとして利用されてもよい。例えば、別の日に当該ユーザが当該ライブストリーミングルームに入室した場合、当該ＡＩチャットボットが「またお会いしましたね」と声をかけたり、今週の双子座の星占いを参考に提供したりしてもよい。
【0101】
図１７は、本開示の一部の実施態様に基づくライブストリーミングシステム１の機能構成例を示す概略図である。一部の実施態様において、当該ライブストリーミングシステム１はさらに推論システムを含んでもよい。当該推論システムは、当該ＡＩチャットボットに設定されるムードや感情を推論するように構成されてもよい。図１７に示すように、当該ＡＩチャットボットは異なる機能が実装されてもよい。一部の実施態様において、当該カスタマイズしたバーチャルスキン、テキストの音声読み上げ、音声のテキスト変換、キャラクターデータ、プロンプトデータなどがＡＩチャットボットに実装されてもよい。一部の実施態様において、上述の技術は、個別に、または組み合わせて使用されてもよい。
【0102】
一部の実施態様において、当該ＡＩチャットボットと当該ユーザ間の交流も、当該ＡＩチャットボットに入力されてもよい。当該ＡＩチャットボット内のデータはさらに当該推論システムに送信されてもよい。一部の実施態様において、当該ＡＩチャットボットは、アシスタントとしても機能してもよく、また対応するデータも当該推論システムに送信されてもよい。さらに、当該ライブストリーミングルームの環境ステータスも、リアルタイムで当該推論エンジンに入力されてもよい。
【0103】
一部の実施態様において、当該環境ステータスは、当該ライブストリーミングルームの知識とステータスを含んでもよい。ここで、当該「知識」とは、当該ライブストリーミングルーム内のトピックを指してもよい。一部の実施態様において、当該ＡＩチャットボットは、当該ＡＩチャットボットのキャラクターデータ及びパーソナリティデータに基づき、当該ユーザが興味を持っているトピックを収集してもよい。当該「ステータス」とは、当該ライブストリーミングルーム内の現在のステータスを指してもよい。例えば、当該ライブストリーミングルームのステータスは、当該ライブストリーマーの受信ポイント、配信時間の長さ、フォロワー数や登録者数等であってもよい。
【0104】
一部の実施態様において、上記のすべての情報が当該推論システムに送信されてもよい。上記の入力に基づいて、当該推論システムは、当該エモーションユニットより可能性のあるムード指数を推論してもよい。ここで、ムード指数とは、当該ＡＩチャットボットのムードを指してもよい。例えば、当該ＡＩチャットボットのキャラクターが水瓶座である場合、当該推論エンジンは、水瓶座の今日の星占いを使用して、ムード指数を生成してもよい。さらに、当該ライブストリーミングルーム内での交流や、ユーザが興味を持っているトピックも、ムード指数を生成するための入力として使用されてもよい。さらに、当該指数がＬＬＭ（大規模言語モデル）などの機械学習モデルに入力されてもよい。さらに、当該記憶ユニットによって格納されている交流情報も当該機械学習モデルに入力されてもよい。
【0105】
一部の実施態様において、当該手順はランダムに、または１日１回など定期的に実行されてもよい。一部の実施態様において、当該ＡＩチャットボットの当該ムードは、上記手順に基づいて決定されてもよい。当該実施態様によれば、当該ＡＩチャットボットと当該ユーザ間の交流が、当該ＡＩチャットボットの当該ムードに基づいて異なってもよい。当該ユーザからの交流が同じであっても、当該ＡＩチャットボットは異なるムードに基づいて異なる出力を生成してもよい。したがって、当該ライブストリーミングルーム内での楽しさが増し、ユーザエクスペリエンスが向上される可能性がある。
【0106】
当該実施態様によれば、オリジナルの当該ＡＩチャットボットが、当該推論システム、記憶ユニット、エモーションユニット等によって、トレーニングされてもよい。したがって、プロンプトデータを追加した固有のＡＩチャットボットを得ることができる。一部の実施態様において、当該ＬＬＭからの当該出力は、当該ライブストリーミングルームのステータスとして提供され、さらにループとして再び当該推論エンジンに入力されてもよい。したがって、当該ＡＩチャットボットは、日によって異なるキャラクター、パーソナリティ、感情、ムードを有してもよく、当該ＡＩチャットボットとユーザ間の交流は予測不可能で、より面白いものに成る可能性がある。したがって、やはりユーザエクスペリエンスが向上される可能性がある。
【0107】
図１８は、本開示の一部の実施態様に基づくシステム構成および処理を実行するためのコンピュータハードウェアの概略ブロック図である。図１８の情報処理装置９００は、例えば、本開示の一部の実施態様に基づく当該サーバ１０と当該ユーザ端末２０、３０をそれぞれ実現するように構成される。
【0108】
当該情報処理装置９００は、ＣＰＵ ９０１と、リードオンリーメモリ（ＲＯＭ）９０３、ランダムアクセスメモリ（ＲＡＭ）９０５を含む。さらに、当該情報処理装置９００は、ホストバス９０７、ブリッジ９０９、外部バス９１１、インターフェイス９１３、入力ユニット９１５、出力ユニット９１７、ストレージユニット９１９、ドライブ９２１、接続ポート９２５、通信ユニット９２９を含んでもよい。当該情報処理装置９００は、カメラなどの撮像装置（図示せず）を含んでもよい。当該情報処理装置９００は、ＣＰＵ９０１に代えて、または加えて、デジタルシグナルプロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）等の処理回路を含んでもよい。
【0109】
当該ＣＰＵ９０１は、演算処理装置および制御装置として機能し、ＲＯＭ９０３、ＲＡＭ９０５、ストレージユニット９１９、またはリムーバブル記録媒体９２３に記録された各種プログラムに従って、当該情報処理装置９００の全体動作またはその一部の動作を制御する。例えば、当該ＣＰＵ９０１は、上述した実施態様の当該サーバ１０および当該ユーザ端末２０、３０に含まれる各機能ユニットの動作全般を制御する。当該ＲＯＭ９０３は、当該ＣＰＵ９０１が使用するプログラム、動作パラメータなどを記憶する。当該ＲＡＭ９０５は、当該ＣＰＵ９０１が実行する際に使用するプログラムや、当該プログラムを実行する際に適宜変化するパラメータを過渡的に記憶する。当該ＣＰＵ９０１、当該ＲＯＭ９０３、当該ＲＡＭ９０５は、ＣＰＵバスなどの内部バスから構成されるホストバス９０７を介して互いに接続されている。当該ホストバス９０７は、当該ブリッジ９０９を介してペリフェラルコンポーネントインターコネクト／インターフェイス（ＰＣＩ）バスなどの外部バス９１１に接続される。
【0110】
当該入力ユニット９１５は、マウス、キーボード、タッチパネル、ボタン、スイッチ、レバーなど、ユーザによって操作される装置である。当該入力ユニット９１５は、オーディオセンサ（マイクなど）、加速度センサ、傾斜センサ、赤外線センサ、深度センサ、温度センサ、湿度センサなど、物理量を電気信号に変換する装置であってもよい。当該入力ユニット９１５は、例えば、赤外線や別の種類の電波を利用するリモートコントロール装置であってもよい。あるいは、当該入力ユニット９１５は、当該情報処理装置９００の動作に対応する携帯電話などの外部接続端末９２７であってもよい。当該入力ユニット９１５は、ユーザから入力される情報に基づいて入力信号を生成し、生成した入力信号を当該ＣＰＵ９０１に出力する入力制御回路を含む。当該ユーザは当該入力ユニット９１５を操作することにより、各種データを入力し、当該情報処理装置９００に対する処理動作の指示を行う。
【0111】
当該出力ユニット９１７は、取得した情報をユーザに対して視覚的または聴覚的に報知することができる装置を含む。当該出力ユニット９１７は、例えば、ＬＣＤ、ＰＤＰ、ＯＬＥＤなどのディスプレイ装置、スピーカー、ヘッドホンなどの音声出力装置、プリンタなどであってもよい。当該出力ユニット９１７は、当該情報処理装置９００が実行する処理によって得られた結果を、テキスト、画像などの映像、音声などのサウンドの形で出力する。
【0112】
当該ストレージユニット９１９はデータストレージ用装置であり、当該情報処理装置９００のストレージユニットの一例である。当該ストレージユニット９１９は、例えば、ハードディスクドライブ（ＨＤＤ）などの磁気記憶装置、半導体記憶装置、光記憶装置、光磁気記憶装置などを含む。当該ストレージユニット９１９は、当該ＣＰＵ９０１が実行するプログラムや各種データ、及び外部から取得された各種データを格納する。
【0113】
当該ドライブ９２１は、磁気ディスク、光ディスク、光磁気ディスク、半導体メモリなどのリムーバブル記録媒体９２３のリーダー／ライターであり、当該情報処理装置９００に内蔵または外付けされる。当該ドライブ９２１は、装着された当該リムーバブル記録媒体９２３に記録された情報を読み出し、当該ＲＡＭ９０５に出力する。当該ドライブ９２１は、装着された当該リムーバブル記録媒体９２３に記録を書き込む。
【0114】
当該接続ポート９２５は、当該情報処理装置９００に機器を直接接続するために用いられるポートである。当該接続ポート９２５は、例えば、ＵＳＢ（ユニバーサルシリアルバス）ポート、ＩＥＥＥ１３９４ポート、またはＳＣＳＩ（小型計算機システムインターフェイス）ポートであってもよい。当該接続ポート９２５は、ＲＳ―２３２Ｃポート、光オーディオ端子、ＨＤＭＩ（高精細度マルチメディアインターフェイス（登録商標））ポートなどであってもよい。当該接続ポート９２５に外部接続端末９２７が接続されることにより、当該情報処理装置９００と当該外部接続端末９２７間の各種データのやり取りが可能になる。
【0115】
当該通信ユニット９２９は、例えば、通信ネットワークＮＷに接続するための通信装置を含む通信インターフェイスである。当該通信ユニット９２９は、例えば、有線または無線のローカルエリアネットワーク（ＬＡＮ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、または、無線ＵＳＢ（ＷＵＳＢ）用の通信カードであってもよい。
【0116】
当該通信ユニット９２９は、例えば、光通信用のルータ、ＡＤＳＬ（非対称デジタル加入者線）用のルータ、または、各種通信用のモデムであってもよい。例えば、当該通信ユニット９２９は、ＴＣＰ／ＩＰ等の所定のプロトコルを用いて、インターネットにおける信号の送受信や、他の通信装置との信号の送受信を行う。当該通信ユニット９２９が接続する当該通信ネットワークＮＷは、有線接続または無線接続により確立されたネットワークである。当該通信ネットワークＮＷは、例えば、インターネット、家庭内ＬＡＮ、赤外線通信、電波通信、または衛星通信である。
【0117】
当該撮像装置（図示せず）は、例えば、ＣＣＤ（電荷結合デバイス）やＣＭＯＳ（相補型金属酸化膜半導体）などの撮像素子と、当該撮像素子上の被写体像の結像を制御するためのレンズなど各種部材を用いて現実空間を撮像し、撮像画像を生成する装置である。当該撮像装置は、静止画を撮像しても、動画を撮像してもよい。
【0118】
以上、本開示のライブストリーミングシステム１について、実施形態を参照しながら説明した。上述の実施態様は、単に説明のために記載されたものである。むしろ、実施態様の上述した構成要素や処理を多様に組み合わせ、さまざまな変更がなされ得ることは、当業者であれば容易に想到し得ることであり、これらも本開示の技術的範囲に包含される。
【0119】
本明細書に記載された工程、特にフローチャートやフローチャートを用いて説明された工程は、工程を構成する工程の一部の省略、工程を構成する工程に明示的に含まれない工程の追加、及び（または）工程順序の並べ替えが可能である。このような省略、追加、並べ替えの対象となった工程も、本開示の要旨を逸脱しない限り、本開示の範囲に含まれる。
【0120】
一部の実施態様において、当該サーバ１０が実行する機能の少なくとも一部は、当該サーバ１０以外が実行してもよく、例えば、当該ユーザ端末２０または３０が実行するようにしてもよい。一部の実施態様において、当該ユーザ端末２０または３０が実行する機能の少なくとも一部を、当該ユーザ端末２０または３０以外が実行してもよく、例えば、当該サーバ１０が実行するようにしてもよい。一部の実施態様において、フレーム画像のレンダリングは、視聴者、サーバ、ライブストリーマー等の当該ユーザ端末が実行するようにしてもよい。
【0121】
さらに、上記実施態様で説明したシステムまたは方法は、固体記憶装置、光ディスク記憶装置、磁気ディスク記憶装置などの非一時的なコンピュータ可読ストレージ装置、またはコンピュータプログラム製品などで提供されてもよい。あるいは、プログラムは、インターネットを介してサーバからダウンロードされるものとしてもよい。
【0122】
本開示の実施例において、当該方法は、当該サーバ、視聴者側、ストリーマー側に適用することができるが、これらに限定されるものではない。実装端末は、スマートフォン、デスクトップコンピュータ、ノートパソコン、タブレットコンピュータなどの電子端末を含むことができるが、これらに限定されない。
【0123】
以上、本開示の技術的内容及び特徴を説明したが、本開示の属する技術分野において通常の知識を有する者であれば、本開示の教示及び開示から逸脱することなく、なお多くの変形及び修正を行うことができる。したがって、本開示の範囲は、既に開示された実施態様に限定されず、本開示から逸脱しない別の変形や修正を含む、後付の特許請求の範囲に含まれる範囲である。
【符号の説明】
【0124】
１ ライブストリーミングシステム
１０ サーバ
２０ ユーザ端末
１００ ストリーミングユニット
１０２ ビデオコントロールユニット
１０４ オーディオコントロールユニット
１０６ 配信ユニット
１０８ ＵＩコントロールユニット
２００ 視聴ユニット
２０２ ＵＩコントロールユニット
２０４ レンダリングユニット
２０６ 入力送信ユニット
３０、３０ａ、３０ｂ ユーザ端末
３０２ ストリーミング情報ユニット
３０４ 中継ユニット
３０６ 処理ユニット
３２０ ストリームＤＢ
３２２ ユーザＤＢ
３２４ ＡＩチャットボットＤＢ
３２６ トレーニングデータＤＢ
３２８ パーソナリティＤＢ
３３０ 言語モデル
６００ 画面
６０２オブジェクト
６０４ 画像
６０６ メッセージゾーン
６０８ メッセージ入力ボックス
６１０ 贈り物オブジェクト
６１２ 共有オブジェクト
６１４ ボタン
９００ 情報処理装置
９０１ ＣＰＵ
９０３ ＲＯＭ
９０５ ＲＡＭ
９０７ ホストバス
９０９ ブリッジ
９１１ 外部バス
９１３ インターフェイス
９１５ 入力ユニット
９１７ 出力ユニット
９１９ ストレージユニット
９２１ ドライブ
９２３ リムーバブル記録媒体
９２５ 接続ポート
９２７ 外部接続端末
９２９ 通信ユニット
ＬＳ ライブストリーミング
ＬＶ ライブストリーマー
ＮＷ ネットワーク
ＳＰ 特定の部分
ＡＵ１、ＡＵ２ 視聴者
Ｓ５０２、Ｓ５０４、Ｓ５０６、Ｓ５０８ 工程
ＶＤ、ＶＤ１、ＶＤ２ 映像
１０ サーバ
２０ ユーザ端末
１００ ストリーミングユニット
１０２ ビデオコントロールユニット
１０４ オーディオコントロールユニット
１０６ 配信ユニット
１０８ ＵＩコントロールユニット
２００ 視聴ユニット
２０２ ＵＩコントロールユニット
２０４ レンダリングユニット
２０６ 入力送信ユニット
３０、３０ａ、３０ｂ ユーザ端末
３０２ ストリーミング情報ユニット
３０４ 中継ユニット
３０６ 処理ユニット
３２０ ストリームＤＢ
３２２ ユーザＤＢ
３２４ ＡＩチャットボットＤＢ
３２６ トレーニングデータＤＢ
３２８ パーソナリティＤＢ
３３０ 言語モデル
６００ 画面
６０２オブジェクト
６０４ 画像
６０６ メッセージゾーン
６０８ メッセージ入力ボックス
６１０ 贈り物オブジェクト
６１２ 共有オブジェクト
６１４ ボタン
９００ 情報処理装置
９０１ ＣＰＵ
９０３ ＲＯＭ
９０５ ＲＡＭ
９０７ ホストバス
９０９ ブリッジ
９１１ 外部バス
９１３ インターフェイス
９１５ 入力ユニット
９１７ 出力ユニット
９１９ ストレージユニット
９２１ ドライブ
９２３ リムーバブル記録媒体
９２５ 接続ポート
９２７ 外部接続端末
９２９ 通信ユニット
ＬＳ ライブストリーミング
ＬＶ ライブストリーマー
ＮＷ ネットワーク
ＳＰ 特定の部分
ＡＵ１、ＡＵ２ 視聴者
Ｓ５０２、Ｓ５０４、Ｓ５０６、Ｓ５０８ 工程
ＶＤ、ＶＤ１、ＶＤ２ 映像
【要約】 （修正有）
【課題】キャラクターを備えたＡＩチャットボットにより、ライブストリーミングルームにおける交流や楽しさを増大させ、ライブストリーミングにおける雰囲気の監視や対応をＡＩチャットボットに任せることもでき、ユーザエクスペリエンスが向上させるライブストリーミングプラットフォームにおける交流を処理するサーバ、方法及びコンピュータプログラムを提供する。
【解決手段】ライブストリーミングシステムにおいて、サーバ１０は、キャラクターに対応するキャラクターデータを受信する機能と、キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、仮想チャットボットを当該ライブストリーミングルームに設定する機能と、を実行し、仮想チャットボットがライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供する。
【選択図】図９
【解決手段】ライブストリーミングシステムにおいて、サーバ１０は、キャラクターに対応するキャラクターデータを受信する機能と、キャラクターデータを機械学習モデルに入力し、ライブストリーミングルーム内に仮想チャットボットを生成する機能と、仮想チャットボットを当該ライブストリーミングルームに設定する機能と、を実行し、仮想チャットボットがライブストリーミングルーム内のライブストリーマーまたは視聴者に支援を提供する。
【選択図】図９
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】