特表 2025-504760 ユーザの顔をゲームキャラクターと組み合わせ、変更されたキャラクターを共有するための技法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2025-02-19

(54)【発明の名称】ユーザの顔をゲームキャラクターと組み合わせ、変更されたキャラクターを共有するための技法

(51)【国際特許分類】

   A63F 13/655 20140101AFI20250212BHJP

   G06T 11/80 20060101ALI20250212BHJP

   A63F 13/60 20140101ALI20250212BHJP

   A63F 13/35 20140101ALI20250212BHJP

   H04L 67/131 20220101ALI20250212BHJP

   G06T 13/40 20110101ALI20250212BHJP

【ＦＩ】

A63F13/655

G06T11/80 A

A63F13/60

A63F13/35

H04L67/131

G06T13/40

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2024538474

(86)(22)【出願日】2022-12-31

(85)【翻訳文提出日】2024-06-24

(86)【国際出願番号】 US2022082672

(87)【国際公開番号】W WO2023133079

(87)【国際公開日】2023-07-13

(31)【優先権主張番号】17/571,465

(32)【優先日】2022-01-08

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＰＹＴＨＯＮ

(71)【出願人】

【識別番号】310021766

【氏名又は名称】株式会社ソニー・インタラクティブエンタテインメント

(74)【代理人】

【識別番号】100105924

【弁理士】

【氏名又は名称】森下 賢樹

(72)【発明者】

【氏名】ヒラカワ、ケン ヨシヒコ

(72)【発明者】

【氏名】サイトウ、ケイスケ

(72)【発明者】

【氏名】モラレス、ダニエル

(72)【発明者】

【氏名】クリシュナムルティ、ディリップ

(72)【発明者】

【氏名】ブラウン、キース ディー．

(72)【発明者】

【氏名】カワサキ、タクヤ

【テーマコード（参考）】

5B050

【Ｆターム（参考）】

5B050BA06

5B050BA12

5B050CA07

5B050DA01

5B050DA10

5B050EA07

5B050EA19

5B050FA02

5B050GA08

(57)【要約】

本技法は、コンピュータゲームキャラクター（３０２）と、サーバに、第１のユーザの写真を生成し、写真をサーバに送信するように動作可能な、写真に従ってキャラクターを変更する（４０８）写真アプリを第１のユーザ装置にダウンロードさせるために、少なくとも第１のユーザ装置のカメラによってスキャン可能な第１のスキャン可能なコード（ＳＣ）（３０４）と、をディスプレイ（２００）上に提示する。変更された顔を有するキャラクター（６０２）は、写真に従って変更された顔を有するキャラクターの画像を送信して、第２のユーザ装置が写真に従って変更された顔を有するキャラクターを表示することができるようにするために、サーバに、第２のユーザ装置を選択する（８０８）ように動作可能な共有アプリを、第１のユーザ装置にダウンロードさせるようにスキャンできる第２のＳＣ（６０４）とともに提示される。
【選択図】図６

【特許請求の範囲】

【請求項1】

デバイスであって、
一時的な信号ではなく、少なくとも１つのプロセッサによって実行可能な命令を含む少なくとも１つのストレージデバイスを備え、前記命令は、前記少なくとも１つのプロセッサに、
少なくとも第１のキャラクターを含む少なくとも１つのコンピュータゲームを、少なくとも１つのディスプレイ上に提示させ、
少なくとも１つのサーバに、少なくとも第１のユーザの写真を生成し、前記写真を前記少なくとも１つのサーバに送信するように動作可能である写真アプリケーション（アプリ）を第１のユーザ装置にダウンロードさせるために、少なくとも前記第１のユーザ装置のカメラによってスキャン可能な少なくとも第１のスキャン可能なコード（ＳＣ）を、前記ディスプレイ上に提示させ、
前記写真に従って変更された顔を有する前記第１のキャラクターの画像を、前記少なくとも１つのサーバから受信させ、
前記写真に従って変更された前記顔を有する前記キャラクターを、前記少なくとも１つのディスプレイ上に提示させ、
前記写真に従って変更された前記顔を有する前記キャラクターの画像を送信して、第２のユーザ装置が、前記写真に従って変更された前記顔を有する前記キャラクターを表示することができるようにするために、前記少なくとも１つのサーバに、前記第２のユーザ装置を選択するように動作可能な共有アプリを前記第１のユーザ装置にダウンロードさせるために、前記第１のユーザ装置のカメラによってスキャン可能な少なくとも第２のＳＣを前記ディスプレイ上に提示させる、デバイス。

【請求項2】

前記ディスプレイが、ＴＶを含み、前記第１及び第２のユーザ装置が、携帯電話を含む、請求項１に記載のデバイス。

【請求項3】

前記ＳＣが、クイックレスポンス（ＱＲ）コードを含む、請求項１に記載のデバイス。

【請求項4】

前記少なくとも１つのプロセッサを備える、請求項１に記載のデバイス。

【請求項5】

前記少なくとも１つのサーバを含む、請求項４に記載のデバイス。

【請求項6】

前記第１及び第２のユーザ装置を含む、請求項５に記載のデバイス。

【請求項7】

前記命令が、前記第１のＳＣとともに、前記写真をアップロードするために前記第１のＳＣをスキャンするようにプロンプトを提示するように実行可能である、請求項１に記載のデバイス。

【請求項8】

前記命令が、前記第２のＳＣとともに、前記写真を共有するために前記第２のＳＣをスキャンするようにプロンプトを提示するように実行可能である、請求項１に記載のデバイス。

【請求項9】

方法であって、
少なくとも第１のキャラクターを含む少なくとも１つのコンピュータゲームを、少なくとも１つのディスプレイ上に提示することと、
少なくとも１つのサーバに、少なくとも第１のユーザの写真を生成し、前記写真を前記少なくとも１つのサーバに送信するように動作可能である写真アプリケーション（アプリ）を第１のユーザ装置にダウンロードさせるために、少なくとも前記第１のユーザ装置のカメラによってスキャン可能な少なくとも第１のスキャン可能なコード（ＳＣ）を、前記ディスプレイ上に提示することと、
前記写真に従って変更された顔を有する前記第１のキャラクターの画像を、前記少なくとも１つのサーバから受信することと、
前記写真に従って変更された前記顔を有する前記キャラクターを、前記少なくとも１つのディスプレイ上に提示することと、
前記写真に従って変更された前記顔を有する前記キャラクターの画像を送信して、第２のユーザ装置が、前記写真に従って変更された前記顔を有する前記キャラクターを表示することができるようにするために、前記少なくとも１つのサーバに、前記第２のユーザ装置を選択するように動作可能な共有アプリを前記第１のユーザ装置にダウンロードさせるために、前記第１のユーザ装置のカメラによってスキャン可能な少なくとも第２のＳＣを前記ディスプレイ上に提示することと、を含む、方法。

【請求項10】

前記ディスプレイが、ＴＶを含み、前記第１及び第２のユーザ装置が、携帯電話を含む、請求項９に記載の方法。

【請求項11】

前記ＳＣが、クイックレスポンス（ＱＲ）コードを含む、請求項９に記載の方法。

【請求項12】

前記第１のＳＣとともに、前記写真をアップロードするために前記第１のＳＣをスキャンするようにプロンプトを提示することを含む、請求項９に記載の方法。

【請求項13】

前記第２のＳＣとともに、前記写真を共有するために前記第２のＳＣをスキャンするようにプロンプトを提示することを含む、請求項９に記載の方法。

【請求項14】

デバイスであって、
少なくとも第１のキャラクターを含む少なくとも１つの動画を、少なくとも１つのディスプレイ上に提示し、
少なくとも第１のユーザの写真を生成し、前記写真をアップロードするように動作可能である写真アプリケーション（アプリ）を第１のユーザ装置上で呼び出すために、少なくとも前記第１のユーザ装置のカメラによってスキャン可能な少なくとも第１のスキャン可能なコード（ＳＣ）を、前記ディスプレイ上に提示し、
前記写真に従って変更された顔を有する前記第１のキャラクターの画像を受信し、
前記写真に従って変更された前記顔を有する前記キャラクターを、前記少なくとも１つのディスプレイ上に提示し、
かつ、前記写真に従って変更された前記顔を有する前記キャラクターの画像を送信して、第２のユーザ装置が、前記写真に従って変更された前記顔を有する前記キャラクターを表示することができるようにするために、前記第２のユーザ装置を選択するように動作可能な共有アプリを前記第１のユーザ装置上で呼び出すために、前記第１のユーザ装置のカメラによってスキャン可能な少なくとも第２のＳＣを前記ディスプレイ上に提示するための命令でプログラムされた少なくとも１つのプロセッサを備える、デバイス。

【請求項15】

前記ディスプレイが、ＴＶを含み、前記第１及び第２のユーザ装置が、電話を含む、請求項１４に記載のデバイス。

【請求項16】

前記ＳＣが、クイックレスポンス（ＱＲ）コードを含む、請求項１４に記載のデバイス。

【請求項17】

前記第１及び第２のユーザ装置を含む、請求項１４に記載のデバイス。

【請求項18】

前記命令が、前記第１のＳＣとともに、前記写真をアップロードするために前記第１のＳＣをスキャンするようにプロンプトを提示するように実行可能である、請求項１４に記載のデバイス。

【請求項19】

前記命令が、前記第２のＳＣとともに、前記写真を共有するために前記第２のＳＣをスキャンするようにプロンプトを提示するように実行可能である、請求項１４に記載のデバイス。

【発明の詳細な説明】

【技術分野】

【0001】

本出願は、概して、プレーヤーがリアルタイムで自分のゲーム体験を取り換え、パーソナライズすることを可能にする、高速かつ正確な顔取り換えゲーム技術のための技法に関する。

【背景技術】

【0002】

本明細書で認識されるように、ゲーマーの顔をコンピュータキャラクター上にモーフィングすることは、特に、楽しみをフレンドと共有するためのものが用意されていたら、楽しく、興味深いものになるだろう。

【発明の概要】

【0003】

したがって、一態様では、一時的な信号ではない少なくとも１つのストレージデバイスは、プロセッサに、少なくとも第１のキャラクターを含む少なくとも１つのコンピュータゲームを少なくとも１つのディスプレイ上に提示させるための、少なくとも１つのプロセッサによって実行可能な命令を含む。命令は、少なくとも１つのサーバに写真アプリケーション（アプリ）を第１のユーザ装置にダウンロードさせるために、少なくとも第１のユーザ装置のカメラによってスキャン可能な少なくとも第１のスキャン可能なコード（ＳＣ）をディスプレイ上に提示するように実行可能である。写真アプリは、少なくとも第１のユーザの写真を生成し、その写真を少なくとも１つのサーバに送信するように動作可能である。命令は、写真に従って変更された顔を有する第１のキャラクターの画像をサーバから受信し、写真に従って変更された顔を有するキャラクターをディスプレイ上に提示するように実行可能である。命令は、写真に従って変更された顔を有するキャラクターの画像を送信して、第２のユーザ装置が写真に従って変更された顔を有するキャラクターを表示することができるようにするために、サーバに、第２のユーザ装置を選択するように動作可能な共有アプリを第１のユーザ装置にダウンロードさせるために、第１のユーザ装置のカメラによってスキャン可能な少なくとも第２のＳＣを、ディスプレイ上に提示するように更に実行可能である。

【0004】

ディスプレイは、ＴＶを含んでもよく、第１及び第２のユーザ装置は、携帯電話であってもよい。ＳＣは、クイックレスポンス（ＱＲ）コードを含んでもよい。

【0005】

非限定的な例では、本命令は、第１のＳＣとともに、写真をアップロードするために第１のＳＣをスキャンするようにプロンプトを提示するように実行可能であり得る。所望であれば、本命令は、第２のＳＣとともに、写真を共有するために第２のＳＣをスキャンするようにプロンプトを提示するように実行可能であり得る。

【0006】

上記のロジックを伴う方法もまた開示される。

【0007】

別の態様では、デバイスは、少なくとも第１のキャラクターを含む少なくとも１つの動画を少なくとも１つのディスプレイ上に提示するための命令でプログラムされた少なくとも１つのプロセッサを有する。プロセッサは、第１のユーザ装置上で、少なくとも第１のユーザの写真を生成し、写真をアップロードするように動作可能な写真アプリケーション（アプリ）を呼び出すために、少なくとも第１のユーザ装置のカメラによってスキャン可能な少なくとも第１のスキャン可能なコード（ＳＣ）を、ディスプレイ上に提示するようにプログラムされている。プロセッサは、写真に従って変更された顔を有する第１のキャラクターの画像を受信し、写真に従って変更された顔を有するキャラクターを少なくとも１つのディスプレイ上に提示し、写真に従って変更された顔を有するキャラクターの画像を送信して、第２のユーザ装置が写真に従って変更された顔を有するキャラクターを表示することができるようにするために、第２のユーザ装置を選択するように動作可能な共有アプリを第１のユーザ装置上で呼び出すために、第１のユーザ装置のカメラによってスキャン可能な少なくとも第２のＳＣを、ディスプレイ上に提示するようにプログラムされている。

【0008】

本出願の詳細は、その構造及び動作の両方に関して、添付図面を参照することにより最良に理解することができ、図中の同様の参照番号は同様の部品を示す。

【図面の簡単な説明】

【0009】

【図1】本原理に従った例示的なシステムのブロック図である。

【図2】本原理に沿ってコンピュータシミュレーションが提示されているディスプレイの第１の例示的なスクリーンショットを例解する。

【図3】本原理に沿ってコンピュータシミュレーションが提示されているディスプレイの第２の例示的なスクリーンショットを例解する。

【図4】本原理に沿った例示的なロジックを例示的なフローチャート形式で例解する。

【図5】本原理に沿ったコンピュータシミュレーションが提示されているディスプレイの第３の例示的なスクリーンショットを例解する。

【図6】本原理に沿ったコンピュータシミュレーションが提示されているディスプレイの第４の例示的なスクリーンショットを例解する。

【図7】本原理に沿った追加の例示的なロジックを例示的なフローチャート形式で例解する。

【図8】ゲーマーの携帯電話の第１の例示的なスクリーンショットを例解する。

【図9】ゲーマーの携帯電話の第２の例示的なスクリーンショットを例解する。

【図10】選択されたフレンドの携帯電話の例示的なスクリーンショットを例解する。

【図11】例示的な技法の全体的な処理を例解する。

【図12】シミュレーションを更にパーソナライズするために使用できる、例示的なユーザインターフェース（ＵＩ）のスクリーンショットである。

【図13】シミュレーションを更にパーソナライズするために使用できる、例示的なユーザインターフェース（ＵＩ）のスクリーンショットである。

【図14】シミュレーションを更にパーソナライズするために使用できる、例示的なユーザインターフェース（ＵＩ）のスクリーンショットである。

【図15】シミュレーションを更にパーソナライズするために使用できる、例示的なユーザインターフェース（ＵＩ）のスクリーンショットである。

【図16】シミュレーションを更にパーソナライズするために使用できる、例示的なユーザインターフェース（ＵＩ）のスクリーンショットである。

【図17】シミュレーションを更にパーソナライズするために使用できる、例示的なユーザインターフェース（ＵＩ）のスクリーンショットである。

【発明を実施するための形態】

【0010】

本開示は、概して、コンピュータゲームネットワークに限定されないコンシューマエレクトロニクス（ＣＥ）デバイスネットワークの態様を含むコンピュータエコシステムに関する。本明細書におけるシステムは、クライアントコンポーネントとサーバコンポーネントとの間でデータが交換され得るように、ネットワーク経由で接続され得るサーバコンポーネント及びクライアントコンポーネントを含み得る。クライアントコンポーネントは、ソニーＰｌａｙＳｔａｔｉｏｎ（商標登録）又はＭｉｃｒｏｓｏｆｔ、若しくは任天堂若しくは他のメーカー製のゲームコンソールなどのゲームコンソール、仮想現実（ＶＲ）ヘッドセット、拡張現実（ＡＲ）ヘッドセット、ポータブルテレビ（例えば、スマートテレビ、インターネット対応テレビ）、ラップトップ及びタブレットコンピュータなどのポータブルコンピュータ、スマートフォンを含む他のモバイルデバイスを含む１つ以上のコンピューティングデバイス、並びに後述する追加の例を含み得る。これらのクライアントデバイスは、様々な動作環境で動作し得る。例えば、クライアントコンピュータの一部は、例として、Ｌｉｎｕｘ（登録商標）オペレーティングシステム、Ｍｉｃｒｏｓｏｆｔのオペレーティングシステム、又はＵｎｉｘ（登録商標）オペレーティングシステム、又はＡｐｐｌｅ社製若しくはＧｏｏｇｌｅ製のオペレーティングシステムを採用し得る。これらの動作環境は、Ｍｉｃｒｏｓｏｆｔ若しくはＧｏｏｇｌｅ、若しくはＭｏｚｉｌｌａによって作製されたブラウザー、又は後述するインターネットサーバがホストするウェブサイトにアクセスできる他のブラウザープログラムなど、１つ以上のブラウジングプログラムを実行するために使用され得る。また、本原理による動作環境は、１つ以上のコンピュータゲームプログラムを実行するために使用され得る。

【0011】

インターネットなどのネットワーク経由でデータを受信及び送信するようにサーバを構成する命令を実行する１つ以上のプロセッサを含み得るサーバ及び／又はゲートウェイが使用され得る。あるいは、クライアント及びサーバは、ローカルイントラネット又は仮想プライベートネットワークで接続することもできる。サーバ又はコントローラは、ソニーＰｌａｙＳｔａｔｉｏｎ（商標登録）などのゲームコンソール、パーソナルコンピュータなどによって具体化され得る。

【0012】

クライアントとサーバとの間でネットワークを経由して、情報が交換され得る。この目的及びセキュリティのために、サーバ及び／又はクライアントは、ファイアウォール、ロードバランサ、一時ストレージ、及びプロキシ、並びに信頼性及びセキュリティのための他のネットワークインフラを含み得る。１つ以上のサーバは、オンラインソーシャルウェブサイト又はゲーマーネットワークのような安全なコミュニティをネットワークメンバーに提供する方法を実装する装置を形成し得る。

【0013】

プロセッサは、アドレス線、データ線、及び制御線、及びレジスタ、及びシフトレジスタなどの様々な配線によってロジックを実行できるシングルチップ又はマルチチップのプロセッサであり得る。

【0014】

ある実施形態に含まれるコンポーネントは、他の実施形態でも適切な組み合わせで使用できる。例えば、本明細書に記載される及び／又は図面に示される様々なコンポーネントはいずれも、他の実施形態と組み合わされ、交換され、又は他の実施形態から除外され得る。

【0015】

「Ａ、Ｂ、及びＣのうちの少なくとも１つを有するシステム」（同様に「Ａ、Ｂ、又はＣのうちの少なくとも１つを有するシステム」、及び「Ａ、Ｂ、Ｃのうちの少なくとも１つを有するシステム」）は、Ａのみ、Ｂのみ、Ｃのみ、Ａ及びＢを一緒に、Ａ及びＣを一緒に、Ｂ及びＣを一緒に、並びに／又はＡ、Ｂ、及びＣを一緒に有するシステムを含む。

【0016】

ここで具体的に図１を参照すると、例示的なシステム１０が示されており、このシステム１０は、上述の例示的なデバイスのうちの１つ以上を含み得、本原理に従って以下に更に説明する。システム１０に含まれる例示的なデバイスの第１は、ＴＶチューナー（等価的に、ＴＶを制御するセットトップボックス）を伴うインターネット対応ＴＶなどのオーディオビデオデバイス（ＡＶＤ）１２などのコンシューマエレクトロニクス（ＣＥ）デバイスであるが、これに限定されない。ＡＶＤ１２はまた、代替的に、コンピュータ化されたインターネット対応（「スマート」）電話、タブレットコンピュータ、ノートブックコンピュータ、スマートメガネ又はＶＲヘッドセットなどのヘッドマウントデバイス（ＨＭＤ）及び／又はヘッドセット、別のウェアラブルなコンピュータ化されたデバイス、コンピュータ化されたインターネット対応音楽プレーヤー、コンピュータ化されたインターネット対応ヘッドフォン、植込み型スキンデバイスなどのコンピュータ化されたインターネット対応植込み型デバイスであり得る。それにもかかわらず、ＡＶＤ１２は、本原理を実現する（例えば、本原理を実現するために他のＣＥデバイスと通信し、本明細書に記載のロジックを実行し、本明細書に記載の任意の他の機能及び／又は動作を実行する）ように構成されていることを理解されたい。

【0017】

したがって、このような原理を実現するために、ＡＶＤ１２は図１に示されたコンポーネントの一部又は全部によって確立することができる。例えば、ＡＶＤ１２は、高精細若しくは超高精細「４Ｋ」又はそれ以上のフラットスクリーンによって実装され得る１つ以上のタッチ対応ディスプレイ１４を含むことができる。タッチ対応ディスプレイ（複数可）１４は、例えば、本原理と一致するタッチ感知用の電極のグリッドを有する容量式又は抵抗式タッチ感知層を含み得る。

【0018】

ＡＶＤ１２はまた、本原理に従ってオーディオを出力するための１つ以上のスピーカ１６と、ＡＶＤ１２を制御するためにＡＶＤ１２に可聴式コマンドを入力するためのオーディオ受信器／マイクロフォンなどの少なくとも１つの追加入力デバイス１８とを含み得る。例示的なＡＶＤ１２はまた、１つ以上のプロセッサ２４の制御下で、インターネット、ＷＡＮ、ＬＡＮなどの少なくとも１つのネットワーク２２を経由して通信するための１つ以上のネットワークインターフェース２０を含み得る。したがって、インターフェース２０は、限定はしないが、メッシュネットワークトランシーバなどであるがそれに限定されない、無線コンピュータネットワークインターフェースの実施例であるＷｉ－Ｆｉトランシーバであり得る。プロセッサ２４は、ディスプレイ１４を制御してその上に画像を提示すること、及びそこから入力を受信することなど、本明細書に記載されるＡＶＤ１２の他の要素を含め、本原理を実現するためにＡＶＤ１２を制御することを理解されたい。更に、ネットワークインターフェース２０は、有線若しくは無線のモデム若しくはルータ、又は無線電話トランシーバ、又は前述のＷｉ－Ｆｉトランシーバなどの他の適切なインターフェースであり得ることに留意されたい。

【0019】

上記に加えて、ＡＶＤ１２は、別のＣＥデバイスに物理的に接続するための高精細マルチメディアインターフェース（ＨＤＭＩ（登録商標））ポート若しくはユニバーサルシリアルバス（ＵＳＢ）ポート、及び／又はヘッドフォンを通してＡＶＤ１２からユーザにオーディオを提示するためにヘッドフォンをＡＶＤ１２に接続するためのヘッドフォンポートのような１つ以上の入力及び／又は出力ポート２６を含み得る。例えば、入力ポート２６は、有線又は無線で、ケーブル又は衛星のオーディオビデオコンテンツの供給源２６ａに接続することができる。したがって、供給源２６ａは、別個又は統合されたセットトップボックス、あるいは衛星受信機であり得る。あるいは、供給源２６ａは、コンテンツを含むゲームコンソール又はディスクプレーヤーであり得る。ゲームコンソールとして実装される場合の供給源２６ａは、ＣＥデバイス４８に関連して以下に記載されるコンポーネントの一部又は全部を含み得る。

【0020】

ＡＶＤ１２は、一時的な信号ではないディスクベースストレージ又はソリッドステートストレージなどの１つ以上のコンピュータメモリ／コンピュータ可読記憶媒２８を更に含み得、場合によっては、スタンドアロンデバイスとして、又はＡＶプログラムを再生するためのＡＶＤの筐体の内部若しくは外部のいずれかでパーソナルビデオレコーディングデバイス（ＰＶＲ）若しくはビデオディスクプレーヤーとして、又はリムーバブルメモリメディア若しくは後述のサーバとして、ＡＶＤの筐体内部で具現化される。また、一部の実施形態では、ＡＶＤ１２は、衛星又は携帯電話基地局から地理的位置情報を受信し、その情報をプロセッサ２４に提供し、並びに／又はプロセッサ２４と連動してＡＶＤ１２が配設される高度を判定するように構成されている、携帯電話受信器、ＧＰＳ受信器及び／若しくは高度計３０などの位置若しくは所在地受信器を含むことができるが、これらに限定されない。コンポーネント３０はまた、ＡＶＤ１２の所在地及び向きを三次元で判定するために、典型的には加速度計、ジャイロスコープ、及び磁気計の組み合わせを含む慣性測定ユニット（ＩＭＵ）によって、又はイベントベースのセンサによって実装され得る。

【0021】

ＡＶＤ１２の説明を続けると、一部の実施形態では、ＡＶＤ１２は、赤外線カメラ、ウェブカムなどのデジタルカメラ、イベントベースのセンサ、及び／又はＡＶＤ１２に統合され、プロセッサ２４によって制御可能で、本原理に従って写真／画像及び／又は動画を収集することができるカメラなど、１つ以上のカメラ３２を含み得る。また、ＡＶＤ１２には、Ｂｌｕｅｔｏｏｔｈ（登録商標）及び／又は近距離無線通信（ＮＦＣ）の技術をそれぞれ使用して他のデバイスと通信するためのＢｌｕｅｔｏｏｔｈ（登録商標）トランシーバ３４及び他のＮＦＣ要素３６が含まれてもよい。例示的なＮＦＣ要素は、無線周波数識別（ＲＦＩＤ）要素であってもよい。

【0022】

更に引き続き、ＡＶＤ１２は、プロセッサ２４に入力を提供する１つ以上の補助センサ３８（例えば、感圧センサ、モーションセンサ（例えば加速度計、ジャイロスコープ、サイクロメータ、又は磁気センサなど）、赤外線（ＩＲ）センサ、光学センサ、速度及び／又はケイデンスセンサ、イベントベースのセンサ、（例えば、ジェスチャコマンドを感知するための）ジェスチャセンサ）を含み得る。例えば、補助センサ３８のうちの１つ以上は、タッチ対応ディスプレイ１４自体の層を形成する１つ以上の圧力センサを含み得、限定されないが、圧電式圧力センサ、容量式圧力センサ、ピエゾ抵抗ひずみゲージ、光学式圧力センサ、電磁式圧力センサなどであり得る。

【0023】

ＡＶＤ１２はまた、プロセッサ２４に入力を提供する地上波テレビ放送を受信するための地上波テレビ放送ポート４０を含み得る。上記に加えて、ＡＶＤ１２はまた、ＩＲデータ協会（ＩＲＤＡ）デバイスなどの赤外線（ＩＲ）送信器及び／又はＩＲ受信器及び／又はＩＲトランシーバ４２を含み得ることに留意されたい。バッテリ（図示せず）が、ＡＶＤ１２に電力を供給するために提供され得、また、運動エネルギーを、バッテリを充電するための電力及び／又はＡＶＤ１２に供給するための電力に変換する運動エネルギー収穫器であり得る。グラフィックス処理ユニット（ＧＰＵ）４４及びフィールドプログラマブルゲートアレイ４６も含み得る。１つ以上の触覚／振動生成器４７は、デバイスを保持する、又はデバイスと接触している人によって感知されることができる触覚信号を生成するために提供され得る。触覚生成器４７は、様々な周波数及び／又は振幅の振動、並びに様々な方向への模擬的な力を生成するために、モータの制御下で（そして同様に、プロセッサ２４のようなプロセッサによって制御され得る）シャフトが回転できるように、モータの回転可能なシャフトを介して、中心及び／又はバランスがずれた重りに接続された電気モータを使用して、ＡＶＤ１２の全て又は一部を振動させ得る。

【0024】

引き続き図１を参照するが、ＡＶＤ１２に加えて、システム１０は、１つ以上の他のＣＥデバイスタイプを含み得る。一例では、第１のＣＥデバイス４８は、ＡＶＤ１２に直接送信されるコマンドを介して、及び／又は後述のサーバを通して、コンピュータゲームの音声及び映像をＡＶＤ１２に送信するために使用できるコンピュータゲームコンソールであり得、一方、第２のＣＥデバイス５０は、第１のＣＥデバイス４８と同様のコンポーネントを含み得る。示される例では、第２のＣＥデバイス５０は、プレーヤーによって操作されるコンピュータゲームコントローラ、又はプレーヤーによって装着されるヘッドマウントディスプレイ（ＨＭＤ）として構成され得る。ＨＭＤは、ＡＲ／ＭＲコンテンツ又はＶＲコンテンツをそれぞれ提示するためのヘッドアップ式透明ディスプレイ又は非透明ディスプレイを含み得る。

【0025】

示される例では、ＣＥデバイスは２つしか示されていないが、これより少ない数又はより多い数のデバイスが使用され得ることを理解されたい。本明細書におけるデバイスは、ＡＶＤ１２について示したコンポーネントの一部又は全部を実装し得る。以下の図に示されるコンポーネントのうちのいずれも、ＡＶＤ１２の場合に示されるコンポーネントの一部又は全部を組み込み得る。

【0026】

ここで、前述の少なくとも１つのサーバ５２を参照すると、少なくとも１つのサーバプロセッサ５４と、ディスクベースストレージ又はソリッドステートストレージなどの少なくとも１つの有形コンピュータ可読記憶媒体５６と、サーバプロセッサ５４の制御下で、ネットワーク２２を経由して図１の他のデバイスとの通信を可能にし、実際に本原理に従ってサーバとクライアントデバイスとの間の通信を容易にし得る少なくとも１つのネットワークインターフェース５８と、を含む。ネットワークインターフェース５８は、例えば、有線若しくは無線のモデム若しくはルータ、Ｗｉ－Ｆｉトランシーバ、又は、例えば、無線電話トランシーバなどの他の適切なインターフェースであり得ることに留意されたい。

【0027】

したがって、一部の実施形態では、サーバ５２は、インターネットサーバ又はサーバ「ファーム」全体であり得、例えば、ネットワークゲームアプリケーションのための例示的な実施形態において、システム１０のデバイスがサーバ５２を介して「クラウド」環境にアクセスし得るような「クラウド」機能を含み、かつ実行し得る。あるいは、サーバ５２は、図１に示した他のデバイスと同じ部屋又はその近くにある１つ以上のゲームコンソール又は他のコンピュータによって実装され得る。

【0028】

以下の図に示されるコンポーネントは、図１に示されるコンポーネントの一部又は全部を含み得る。本明細書で記載されるユーザインターフェース（ＵＩ）は、統合され、及び／又は拡張され得、ＵＩ要素は、ＵＩ間でミックスされて、調和し得る。

【0029】

図２は、示される非限定的な例では、それぞれのコンピュータゲームからの動画又は静止画像を提示するゲームウィンドウ２０４を含む、メインアプリケーション（「アプリ」）の制御下でＵＩ２０２を提示する、本明細書に記載の任意のディスプレイ、例えば、ビデオゲームが提示されているＴＶなどのディスプレイ２００を例解する。ウィンドウ２０４の下には、「新規」、「フレンドに人気」、「最高のひととき」（ゲームの繰り返し又は視聴されたセグメントを表すか、又はユーザが「いいね」したゲームのセグメントを表す）、及び「トロフィータイム」などのゲームのそれぞれのカテゴリを表す機能ウィンドウ２０６があり、ユーザ又は他のユーザが賞を獲得したゲーム又はゲームセグメントを表す。

【0030】

図３に示されるＵＩ３００は、自動で、又はユーザの選択に応じて、ディスプレイ２００上に提示され得る。図３の非限定的な例では、コンピュータゲームのキャラクターが静止画又は動画で現れるキャラクターウィンドウ３０２が示される。ユーザが提示されるクリップを選択してもよく、又はクリップがユーザのために自動で選択されてもよい。ユーザが変更されるべきキャラクターをゲームから選択してもよく、キャラクターがユーザのために自動で選択されてもよい。

【0031】

また、例えば、スマートフォンなどのユーザ装置のカメラによってスキャンされ得る、クイックレスポンス（ＱＲ）コード、又はバーコード、又は他のコードなどのスキャン可能なコード（ＳＣ）３０４が現れる。プロンプト３０６はまた、ユーザに特定の目的のためにコードをスキャンすることを促すように表示され得、示される例では、直後に説明される目的でユーザの写真（「自撮り写真」）をアップロードするためである。

【0032】

実際、ここで図４に目を向けると、ブロック４００において、例えば、電話などのユーザ装置を操作するユーザは、図３に示されるコード３０４をスキャンするように電話上のカメラを動作する。これにより、電話は、本明細書では「自撮りアプリ」と呼ばれるアプリケーションを開き、これは、ブロック４０４においてユーザ自身によって撮影された写真が、ブロック４０６においてユーザがセルフィーアプリによって提示された自分の電話上の「アップロード」ボタンを選択したときに、図１に示されるサーバ５２などのサーバにアップロードされることを許可するためのウェブアプリである。コードをスキャンすることによって、本質的に、携帯電話、サーバ、又はそれら２つの組み合わせによってホストされるハイパーテキスト転送プロトコル（ＨＴＴＰ）ウェブページの統一資源一覧（ＵＲＬ）が呼び出される。

【0033】

サーバは、ユーザの画像を受信し、ブロック４０８において、ユーザの画像に従って、図３の３０２に示されるキャラクターの顔を変更し、必要に応じて体も変更する。他の実施形態では、ユーザ装置が、顔を変更し、必要に応じて、キャラクターの体も変更する。他の実施形態では、サーバは、ユーザ装置と協働して、顔及び／又は体を変更する。一部の実施形態では、ユーザは、ゲーム又はクリップのどちらが、低品質又は高品質の動画で提示されるべきかを決定するための入力を提供し得、したがって、ユーザの顔で変更するために、それぞれ、より少ない時間又はより長い時間を要する。

【0034】

非限定的な例では、「Ｆａｃｅｓｗａｐ」として知られるＰｙｔｈｏｎスクリプトが使用され得、ライブラリが元動画を引き受け、自撮り写真を動画内の顔にマージする。

【0035】

非限定的な例では、ユーザの画像は、ゲームキャラクターの画像とブレンドされ得る。ブレンドは、任意の適切なブレンドアルゴリズムを使用して達成され得る。例えば、ユーザ画像及びキャラクター画像のブレンドは、ビットマップを使用し、対応するビットを平均して平均画像を生成するか、レイヤマスクを使用するか、又はアルファブレンドを使用して行われ得、２つの画像の合成は、典型的にはピクセルごとになど、ピクセル透過率（アルファ）値に基づいてピクセルカラー値を組み合わせることから導出される。ブレンドは、顔の特徴のみであってもよく、又はユーザの全身画像をキャラクターの全身画像とブレンドすることによって行われてもよい。

【0036】

図５は、ディスプレイ２００上に提示され得るＵＩ５００を例解し、そこには、ゲームキャラクターの静止画像又は動画像５０２が、図４のブロック４０６でサーバにアップロードされたユーザの画像５０４と横に並べて表示される。次に、図４のブロック４０８における動作の後、少なくともキャラクター６０２の顔がユーザの画像に基づいているように、ユーザの画像に従って変更されたゲームキャラクター６０２を示しているＵＩ６００が、ディスプレイ２００上に提示され得る。ゲームは、キャラクターの顔がユーザの顔であるように見えることを除いて、ゲームコントローラの制御下で、ゲームプログラムによって動くキャラクター６０２で実行することができる。

【0037】

ＵＩ６００はまた、ユーザの画像に従って変更されたゲームキャラクター６０２の画像を共有するためにスキャンされ得る第２のコード６０４を提示し得る。この効果にプロンプト６０６が提示され得る。

【0038】

したがって、図７のブロック７００において、ユーザは、図６に示されるコード６０４をスキャンするために、電話などの自分の装置を操作し得る。これにより、ブロック７０２において、ユーザ装置は、図８に示される共有アプリを開く。

【0039】

より具体的には、図８は、図６のコード６０４をスキャンし、その結果、共有アプリに従ってＵＩ８０２を提示したユーザ装置８００を例解する。ＵＩ８０２は、ゲームのタイトル８０６及び共有セレクタ８０８とともに、コンピュータゲームからのシーン８０４を提示する。共有セレクタ８０８を選択すると、図９に示されるＵＩ９００をユーザ装置８００上に表示させ得る。ＵＩ９００は、動画をチェックアウトするためのプロンプト９０２を含んでもよく、その下にセレクタ９０４があり、装置８００に記憶されているフレンドリストからフレンドなどの受信者を選択するように各々選択可能であり得る。送信モードセレクタ９０６は、セレクタ９０４を使用して選択されたフレンドへの送信モードを指定するように選択されてもよい。限定されない送信モードは、例えば、インスタントメッセージ又は他のタイプの電話メッセージ、ウェブブラウザーを介した送信などを含み得る。

【0040】

ユーザが受信者（複数可）及び送信モードを選択すると、選択された送信モードに適した受信者のネットワークアドレス又は電子メールアドレス又は電話番号にアクセスされ、データは、受信者に関連付けられ、図１０に示される装置１０００に送信される。受信装置１０００は、図６の６０２に示されるように、ユーザの画像に従って変更されたゲームキャラクターを表示するコンピュータゲームのシーン１００２を提示する。ゲーム及び／又はキャラクターのタイトル１００４が、送信ユーザの名前１００６とともに提示され得る。

【0041】

図１１は、上記で論じられた技法をカプセル化する。メインアプリ１１００は、１１０２において、図１に示されるサーバ５２などのサーバ１１０４から動画を取得する。ゲーム動画は、図２に示され、上述したディスプレイ２００上に提示され得る。ユーザは、自分の装置８００を用いて、１１０６に示されるように第１のコード３０４をスキャンし、自撮りアプリを実行し、１１０８に示されるようにユーザの画像をサーバに送信する。

【0042】

それに応答して、１１１０で示されるように、サーバは、提示するために画像をディスプレイ２００に送信する。キャラクターが変更されているゲーム動画のユーザ画像及びＩＤは、矢印１１１２によって示されるように、サーバとディスプレイとの間で交換される。したがって、ディスプレイは、１１１４で示されるようにユーザ画像に従って変更されたキャラクターを含む変更された動画を取得し、矢印１１１６によって示されるように共有アプリを呼び出すためにユーザ装置８００によってスキャンされる第２のコード６０４を提示する。

【0043】

上記の技法は、リアルタイム又は非リアルタイムで実行され得る。ユーザによって入力されたテキスト、及びユーザによって話され、マイクロフォンを使用して拾った音声は、ゲームキャラクター上にモーフィングしてもよく、更に以下に記載されるようにしてもよい。

【0044】

図１２は、例えば、ＵＩ１２０２を提示することができるユーザ装置のディスプレイを含む、本明細書における任意のディスプレイなどのディスプレイ１２００を例解する。示される非限定的な例では、ＵＩは、ゲームデザイナによって提供されたゲームキャラクターの画像１２０４、又は上記の開示に従ってユーザの顔を有するように修正されたゲームキャラクターの画像１２０４を含む。

【0045】

プロンプト１２０６は、ユーザが、ユーザの名前（セレクタ１２０８を選択することによって）又はユーザによって入力された別の空想的な名前（セレクタ／入力フィールド１２１０を選択することによって）を使用するためにキャラクター１２０４に関連付けられたゲームの本来の会話を変更することを可能にするために提示され得る。その後、ゲーム及び／又はゲームの選択されたクリップが提示されると、キャラクター２０４の本来の名前が発せられるたびに、代わりにユーザによって選択された名前が再生されるように、オーディオスピーカ上で再生される会話が変更される。

【0046】

図１３は、例えば、ＵＩ１３０２を提示することができるユーザ装置のディスプレイを含む、本明細書における任意のディスプレイなどのディスプレイ１３００を例解する。示される非限定的な例では、ＵＩは、ゲームデザイナによって提供されたゲームキャラクターの画像１３０４、又は上記の開示に従ってユーザの顔を有するように修正されたゲームキャラクターの画像１３０４を含む。

【0047】

プロンプト１３０６は、例えば、セレクタ１３０８を選択することによって、ユーザが．ｇｉｆファイルを作成することを可能にするために提示され得る。これに応じて、クリップは．ｇｉｆ形式の画像ファイルに変換される。

【0048】

図１４は、例えば、ＵＩ１４０２を提示することができるユーザ装置のディスプレイを含む、本明細書における任意のディスプレイなどのディスプレイ１４００を例解する。示される非限定的な例では、ＵＩは、開始（左側）から終了（右側）までのゲームタイムラインの画像１４０４を含み、タイムライン内の複数のフレーム１４０６は、動画として再生されたときにゲーム内で表示される時間である。スライダ１４０８が提供され得、破線矢印１４１０によって示されるようにタイムラインに沿って左右に移動させて、上記の図１～図１１で説明されるクリップを開始するフレーム１４０６を選択することができる。ストップフレームを選択して、クリップの終わりを選択することもできる。

【0049】

図１５は、エンドユーザがキャラクターの顔の視覚的属性を変更することを可能にするためにパレットを提供することができることを例解する。

【0050】

より具体的には、図１５は、例えば、ＵＩ１５０２を提示することができるユーザ装置のディスプレイを含む、本明細書の任意のディスプレイなどのディスプレイ１５００を例解する。示される非限定的な例では、ＵＩは、ゲームデザイナによって提供されたゲームキャラクターの画像１５０４、又は上記の開示に従ってユーザの顔を有するように修正されたゲームキャラクターの画像１５０４を含む。

【0051】

キャラクター１５０４の顔の色を定義するために、ユーザによって選択することができるカラーセレクタ１５０６が提供され得る。年齢セレクタ１５０８が提供され得、キャラクター１５０４の顔の年齢を定義するためにユーザによって選択することができる（低い年齢が選択されたときに第１の数のしわ線が顔に課され、高い年齢が選択されたときに第１の数よりも大きい第２の数のしわ線が顔に課されるように、高い年齢を示すより多くのしわ線などを有する）。

【0052】

図１６は、例えば、ＵＩ１６０２を提示することができるユーザ装置のディスプレイを含む、本明細書における任意のディスプレイなどのディスプレイ１６００を例解する。示される非限定的な例では、ＵＩは、ゲームデザイナによって提供されたゲームキャラクターの画像１６０４、又は上記の開示に従ってユーザの顔を有するように修正されたゲームキャラクターの画像１６０４を含む。

【0053】

ＵＩ１６０２は、ユーザが、キャラクターによって話される会話にユーザの声を吹き替えることを可能にするように選択可能なセレクタ１６０６を含み得る。ユーザは、例えば、ユーザ装置上のマイクロフォンによって、１６０８で示されるように、自分の声のクリップを録音してもよい。録音された音声の音声特性は、キャラクター１６０４の音声を変更するために使用される。

【0054】

また、必要に応じて、ユーザは、セレクタ１６１０を選択して、キャラクター１６０４にゲーム本来のゲーム会話であるが、必要に応じてユーザの声で話すようにさせてもよく、又はセレクタ１６１２を選択して、キャラクター１６０４にユーザによって作成された会話を話すようにさせてもよい。ユーザによって作成された会話は、セレクタ１６１４を選択して、ユーザ装置のマイクロフォンに所望の会話を指示するか、又は音声に変換され、キャラクター１６０４又は他のキャラクターの会話に使用されるテキストを１６１６で入力するかのいずれかによって作成してもよい。

【0055】

図１７は、エンドユーザがテンプレートを選択して、テキストを拡大縮小し、単語を強調してアニメーション化し、テキストを動画クリップの一部に調整できることを例解する。より具体的には、例えば、ＵＩ１７０２を提示することができるユーザ装置のディスプレイを含む、本明細書の任意のディスプレイなどのディスプレイ１７００は、ゲームデザイナによって提供されたゲームキャラクターの画像、又は上記の開示に従って、ユーザの顔を有するように修正されたゲームキャラクターの画像を含むことができる。

【0056】

ＵＩ１７０２は、テキストサイズセレクタ１７０４を含み得、ユーザによって入力された又はフレンドから受信したように、ゲームプレイ中にディスプレイ上に提示されるテキストのサイズ及び必要に応じて位置をユーザが選択することを可能にする。ＵＩ１７０２はまた、アニメーションセレクタ１７０６を含み得、フィールド１７０８においてユーザによって定義されるような単語のタイプ及び特定の単語自体を含む、ゲームプレイ中にどのテキスト用語がアニメーション化されるか、又は着色されるか、又はそうでなければ強調されるかを定義することを可能にしてもよい。

【0057】

機械学習は、フレンドをまとめるために使用され得、そこで、ゲームコンソールは、例えば、トロフィーが獲得されたゲームの期間の動画をキャプチャし、ユーザ装置のフレンドのリスト上のフレンドの間で動画を共有することができる。

【0058】

本明細書では、特定の実施形態を示し、詳細に説明するが、本発明によって包含される主題は、特許請求の範囲によってのみ限定されることを理解されたい。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【国際調査報告】