特許 7333529 端末装置の制御プログラム、端末装置、端末装置の制御方法、サーバ装置の制御プログラム、サーバ装置、及びサーバ装置の制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2023-08-17

(45)【発行日】2023-08-25

(54)【発明の名称】端末装置の制御プログラム、端末装置、端末装置の制御方法、サーバ装置の制御プログラム、サーバ装置、及びサーバ装置の制御方法

(51)【国際特許分類】

   H04N 7/14 20060101AFI20230818BHJP

   A63F 13/87 20140101ALI20230818BHJP

   A63F 13/79 20140101ALI20230818BHJP

   A63F 13/525 20140101ALI20230818BHJP

   A63F 13/35 20140101ALI20230818BHJP

   A63F 13/30 20140101ALI20230818BHJP

   G06F 3/0481 20220101ALI20230818BHJP

   H04L 51/04 20220101ALI20230818BHJP

【ＦＩ】

H04N7/14

A63F13/87

A63F13/79

A63F13/525

A63F13/35

A63F13/30

G06F3/0481

H04L51/04

【請求項の数】 15

(21)【出願番号】P 2022042722

(22)【出願日】2022-03-17

【審査請求日】2022-03-17

(73)【特許権者】

【識別番号】504437801

【氏名又は名称】グリー株式会社

(74)【代理人】

【識別番号】100196829

【弁理士】

【氏名又は名称】中澤 言一

(72)【発明者】

【氏名】内田 素貴

(72)【発明者】

【氏名】増住 啓吾

(72)【発明者】

【氏名】早田 大起

【審査官】大西 宏

(56)【参考文献】

【文献】特開２０２１－１４９４０７（ＪＰ，Ａ）

【文献】特開２０２１－１５８５５８（ＪＰ，Ａ）

【文献】特開２０２１－１７４４２２（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１４ － ７／１７３

Ａ６３Ｆ １３／００ －１３／９８

Ｇ０６Ｆ ３／０４８－ ３／０４８９

Ｈ０４Ｌ ５１／００ －５１／５８

(57)【特許請求の範囲】

【請求項1】

第１ユーザの端末装置の制御プログラムであって、
前記第１ユーザの端末装置に、
前記第１ユーザを示す第１オブジェクトを含む第１画像と、前記第１ユーザとは異なる第２ユーザを示す第２オブジェクトを含む第２画像とを少なくとも表示し、
前記第１画像の表示に関する情報を前記第２ユーザの端末装置に送信し、
前記第１ユーザの第１音声を取得した場合、前記第１音声を前記第２ユーザの端末装置に送信し、
前記第１ユーザの動作又は前記第１音声に応じて変化する前記第１オブジェクトを含む前記第１画像を表示し、
前記第２ユーザの第２音声を受信した場合、前記第２音声を出力し、
前記第２ユーザの動作又は前記第２音声に応じて変化する前記第２オブジェクトを含む前記第２画像を表示し、
前記第１ユーザによる指示又は前記第２ユーザによる指示に応じて、少なくとも一部が変更された前記第１画像又は少なくとも一部が変更された前記第２画像を表示すること、
を実行させ、
少なくとも一部が変更された前記第１画像の表示において、前記第１ユーザの端末装置に、
前記第１画像の表示時間及び／又は前記第２画像の表示時間に関する条件を含む所定の条件が満たされた場合、複数の第２候補オブジェクトを含む選択グループに特定の前記第２候補オブジェクトを含めるか、又は、前記選択グループから一部の前記第２候補オブジェクトを削除し、
前記選択グループの中から前記第２ユーザによる指示に応じて選択された前記第２候補オブジェクトに対応する第３オブジェクトを含む前記第１画像を表示すること、
を実行させるための制御プログラム。

【請求項2】

少なくとも一部が変更された前記第１画像の表示において、前記第１ユーザの端末装置に、
前記第１ユーザに関連付けられた一又は複数の第１候補オブジェクトの中から前記第１ユーザによる指示に応じて選択された前記第１候補オブジェクトに基づいて、一部が変更された前記第１オブジェクトを含む前記第１画像を表示すること、
を実行させる、請求項１に記載の制御プログラム。

【請求項3】

前記第１オブジェクトは仮想空間内に配置される立体オブジェクトであり、
前記第１オブジェクトを含む前記第１画像の表示において、前記第１ユーザの端末装置に、
前記仮想空間内の所定の視点から見た前記仮想空間を示す画像を前記第１画像として表示すること、
を実行させ、
前記第１ユーザの端末装置に、
前記仮想空間内において自動的に移動する前記所定の視点から見た前記仮想空間を示す画像を前記第１画像として表示すること、
を実行させる、請求項２に記載の制御プログラム。

【請求項4】

前記所定の視点は、前記第１オブジェクトの変更された一部に近づくように移動制御される、請求項３に記載の制御プログラム。

【請求項5】

前記所定の視点は、前記所定の視点からの視線方向を前記第１オブジェクトに向く方向に合わせながら前記第１オブジェクトの周囲を移動するように移動制御される、請求項３に記載の制御プログラム。

【請求項6】

前記第１ユーザの端末装置に、
前記選択グループの中から前記第１ユーザによる指示に応じて選択された前記第２候補オブジェクトに基づいて、選択された前記第２候補オブジェクトに対応する前記第３オブジェクトを含む前記第２画像を表示するとともに、前記第３オブジェクトの表示に関する情報を前記第２ユーザの端末装置に送信すること、
を実行させ、
前記所定の条件は、前記第１ユーザ及び／又は前記第２ユーザによる前記第２候補オブジェクトの選択回数に関する条件を含む、請求項１～５のいずれか一項に記載の制御プログラム。

【請求項7】

前記第１画像と前記第２画像との表示において、前記第１ユーザの端末装置に、
複数の前記第２ユーザのそれぞれを示す複数の前記第２画像を表示すること、
を実行させ、
前記第１ユーザの端末装置に、
前記第２ユーザによる指示に応じて選択された前記第２候補オブジェクトに基づいて、選択された前記第２候補オブジェクトに対応する前記第３オブジェクトを含む、前記第１画像及び複数の前記第２ユーザのそれぞれを示す複数の前記第２画像を表示すること、
を実行させる、請求項１～５のいずれか一項に記載の制御プログラム。

【請求項8】

前記第１ユーザによって前記第３オブジェクトの選択指示が可能であり、
前記第１ユーザの端末装置に、
前記第１ユーザによる前記第３オブジェクトの選択指示に応じて、一部が変更された前記第１オブジェクトを含む前記第１画像を表示すること、
を実行させる、請求項１～５のいずれか一項に記載の制御プログラム。

【請求項9】

少なくとも一部が変更された前記第１画像の表示において、前記第１ユーザの端末装置に、
前記第１ユーザ及び／又は前記第２ユーザによってプレイされるゲームの進行を示す画像を、前記第１画像の少なくとも一部に替えて表示すること、
を実行させる、請求項１～５のいずれか一項に記載の制御プログラム。

【請求項10】

前記第１ユーザの端末装置に、
前記第２ユーザによる指示に応じて選択された前記第２候補オブジェクトがゲームに対応する場合、前記第１ユーザ及び／又は前記第２ユーザによってプレイされる前記ゲームの進行を示す画像を、前記第２画像の少なくとも一部に替えて表示すること、
を実行させる、請求項１～５のいずれか一項に記載の制御プログラム。

【請求項11】

第１ユーザの端末装置及び前記第１ユーザとは異なる第２ユーザの端末装置のそれぞれと通信可能なサーバ装置の制御プログラムであって、
前記第１ユーザを示す第１オブジェクトを含む第１画像の表示に関する情報を、前記第１ユーザの端末装置から受信し、前記第２ユーザを示す第２オブジェクトを含む第２画像の表示に関する情報を、前記第２ユーザの端末装置から受信し、
前記第１画像を少なくとも表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、前記第２画像を少なくとも表示するための情報を、少なくとも前記第１ユーザの端末装置に送信し
前記第１ユーザの第１音声を受信した場合、前記第１音声を前記第２ユーザの端末装置に送信し、
前記第１ユーザの動作又は前記第１音声に応じて変化する前記第１オブジェクトを含む前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、
前記第２ユーザの第２音声を受信した場合、前記第２音声を前記第１ユーザの端末装置に送信し、
前記第２ユーザの動作又は前記第２音声に応じて変化する前記第２オブジェクトを含む前記第２画像を表示するための情報を、少なくとも前記第１ユーザの端末装置に送信し、
前記第１ユーザによる指示に応じて、少なくとも一部が変更された前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、
前記第２ユーザによる指示に応じて、少なくとも一部が変更された前記第２画像を表示するための情報を、少なくとも前記第１ユーザの端末装置に送信すること、
を実行させ、
前記第１画像の表示時間及び／又は前記第２画像の表示時間に関する条件を含む所定の条件が満たされた場合、複数の第２候補オブジェクトを含む選択グループに特定の前記第２候補オブジェクトが含まれるか、又は、前記選択グループから一部の前記第２候補オブジェクトが削除され、
少なくとも一部が変更された前記第１画像の表示において、前記サーバ装置に、
前記選択グループの中から前記第２ユーザによる指示に応じて選択された前記第２候補オブジェクトに対応する第３オブジェクトを含む前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信すること、
を実行させる、ことを特徴とする制御プログラム。

【請求項12】

第１ユーザの端末装置であって、
前記第１ユーザを示す第１オブジェクトを含む第１画像と、前記第１ユーザとは異なる第２ユーザを示す第２オブジェクトを含む第２画像とを少なくとも表示し、
前記第１画像の表示に関する情報を前記第２ユーザの端末装置に送信し、
前記第１ユーザの第１音声を取得した場合、前記第１音声を前記第２ユーザの端末装置に送信し、
前記第１ユーザの動作又は前記第１音声に応じて変化する前記第１オブジェクトを含む前記第１画像を表示し、
前記第２ユーザの第２音声を受信した場合、前記第２音声を出力し、
前記第２ユーザの動作又は前記第２音声に応じて変化する前記第２オブジェクトを含む前記第２画像を表示し、
前記第１ユーザによる指示又は前記第２ユーザによる指示に応じて、少なくとも一部が変更された前記第１画像又は少なくとも一部が変更された前記第２画像を表示する、処理部
を備え、
前記処理部が、少なくとも一部が変更された前記第１画像の表示において、
前記第１画像の表示時間及び／又は前記第２画像の表示時間に関する条件を含む所定の条件が満たされた場合、複数の第２候補オブジェクトを含む選択グループに特定の前記第２候補オブジェクトを含めるか、又は、前記選択グループから一部の前記第２候補オブジェクトを削除し、
前記選択グループの中から前記第２ユーザによる指示に応じて選択された前記第２候補オブジェクトに対応する第３オブジェクトを含む前記第１画像を表示する、
ことを特徴とする端末装置。

【請求項13】

第１ユーザの端末装置及び前記第１ユーザとは異なる第２ユーザの端末装置のそれぞれと通信可能なサーバ装置であって、
前記第１ユーザを示す第１オブジェクトを含む第１画像の表示に関する情報を、前記第１ユーザの端末装置から受信し、前記第２ユーザを示す第２オブジェクトを含む第２画像の表示に関する情報を、前記第２ユーザの端末装置から受信し、
前記第１画像を少なくとも表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、前記第２画像を少なくとも表示するための情報を、少なくとも前記第１ユーザの端末装置に送信し、
前記第１ユーザの第１音声を受信した場合、前記第１音声を前記第２ユーザの端末装置に送信し、
前記第１ユーザの動作又は前記第１音声に応じて変化する前記第１オブジェクトを含む前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、
前記第２ユーザの第２音声を受信した場合、前記第２音声を前記第１ユーザの端末装置に送信し、
前記第２ユーザの動作又は前記第２音声に応じて変化する前記第２オブジェクトを含む前記第２画像を表示するための情報を、少なくとも前記第１ユーザの端末装置に送信し、
前記第１ユーザによる指示に応じて、少なくとも一部が変更された前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、
前記第２ユーザによる指示に応じて、少なくとも一部が変更された前記第２画像を表示するための情報を、少なくとも前記第１ユーザの端末装置に送信する、処理部
を備え、
前記第１画像の表示時間及び／又は前記第２画像の表示時間に関する条件を含む所定の条件が満たされた場合、複数の第２候補オブジェクトを含む選択グループに特定の前記第２候補オブジェクトが含まれるか、又は、前記選択グループから一部の前記第２候補オブジェクトが削除され、
前記処理部が、少なくとも一部が変更された前記第１画像の表示において、
前記選択グループの中から前記第２ユーザによる指示に応じて選択された前記第２候補オブジェクトに対応する第３オブジェクトを含む前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信する、
ことを特徴とするサーバ装置。

【請求項14】

第１ユーザの端末装置の制御方法であって、
前記第１ユーザの端末装置が、
前記第１ユーザを示す第１オブジェクトを含む第１画像と、前記第１ユーザとは異なる第２ユーザを示す第２オブジェクトを含む第２画像とを少なくとも表示し、
前記第１画像の表示に関する情報を前記第２ユーザの端末装置に送信し、
前記第１ユーザの第１音声を取得した場合、前記第１音声を前記第２ユーザの端末装置に送信し、
前記第１ユーザの動作又は前記第１音声に応じて変化する前記第１オブジェクトを含む前記第１画像を表示し、
前記第２ユーザの第２音声を受信した場合、前記第２音声を出力し、
前記第２ユーザの動作又は前記第２音声に応じて変化する前記第２オブジェクトを含む前記第２画像を表示し、
前記第１ユーザによる指示又は前記第２ユーザによる指示に応じて、少なくとも一部が変更された前記第１画像又は少なくとも一部が変更された前記第２画像を表示すること、
を含み、
少なくとも一部が変更された前記第１画像の表示において、前記第１ユーザの端末装置が、
前記第１画像の表示時間及び／又は前記第２画像の表示時間に関する条件を含む所定の条件が満たされた場合、複数の第２候補オブジェクトを含む選択グループに特定の前記第２候補オブジェクトを含めるか、又は、前記選択グループから一部の前記第２候補オブジェクトを削除し、
前記選択グループの中から前記第２ユーザによる指示に応じて選択された前記第２候補オブジェクトに対応する第３オブジェクトを含む前記第１画像を表示すること、
を更に含むことを特徴とする制御方法。

【請求項15】

第１ユーザの端末装置及び前記第１ユーザとは異なる第２ユーザの端末装置のそれぞれと通信可能なサーバ装置の制御方法であって、
前記第１ユーザを示す第１オブジェクトを含む第１画像の表示に関する情報を、前記第１ユーザの端末装置から受信し、前記第２ユーザを示す第２オブジェクトを含む第２画像の表示に関する情報を、前記第２ユーザの端末装置から受信し、
前記第１画像を少なくとも表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、前記第２画像を少なくとも表示するための情報を、少なくとも前記第１ユーザの端末装置に送信し、
前記第１ユーザの第１音声を受信した場合、前記第１音声を前記第２ユーザの端末装置に送信し、
前記第１ユーザの動作又は前記第１音声に応じて変化する前記第１オブジェクトを含む前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、
前記第２ユーザの第２音声を受信した場合、前記第２音声を前記第１ユーザの端末装置に送信し、
前記第２ユーザの動作又は前記第２音声に応じて変化する前記第２オブジェクトを含む前記第２画像を表示するための情報を、少なくとも前記第１ユーザの端末装置に送信し、
前記第１ユーザによる指示に応じて、少なくとも一部が変更された前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信し、
前記第２ユーザによる指示に応じて、少なくとも一部が変更された前記第２画像を表示するための情報を、少なくとも前記第１ユーザの端末装置に送信すること、
を含み、
前記第１画像の表示時間及び／又は前記第２画像の表示時間に関する条件を含む所定の条件が満たされた場合、複数の第２候補オブジェクトを含む選択グループに特定の前記第２候補オブジェクトが含まれるか、又は、前記選択グループから一部の前記第２候補オブジェクトが削除され、
少なくとも一部が変更された前記第１画像の表示において、前記サーバ装置が、
前記選択グループの中から前記第２ユーザによる指示に応じて選択された前記第２候補オブジェクトに対応する第３オブジェクトを含む前記第１画像を表示するための情報を、少なくとも前記第２ユーザの端末装置に送信すること、
を含むことを特徴とする制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本明細書で開示された実施形態は、端末装置の制御プログラム、端末装置、端末装置の制御方法、サーバ装置の制御プログラム、サーバ装置、及びサーバ装置の制御方法に関する。

【背景技術】

【0002】

従来から、複数のユーザがそれぞれＰＣ（Personal Computer）等の端末装置を用いて各ユーザ自身を示す画像及び／又は各ユーザの音声等の各種情報を互いに他ユーザの端末装置に送信することでコミュニケーションを実現する情報システムが知られている。例えば、特許文献１には、各ユーザが、仮想空間内でユーザの分身として行動するアバター等のキャラクタオブジェクトを用いて、他ユーザのキャラクタオブジェクトとの音声チャットを行う情報システムの技術が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２００９－１９９１９８号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来の情報システムでは、ユーザが他ユーザとのコミュニケーションを行っている時にユーザの端末装置からの出力に多様性がないため、ユーザが他ユーザとのコミュニケーションに飽きてしまうという問題が生じていた。

【0005】

開示された端末装置の制御プログラム、端末装置、端末装置の制御方法、サーバ装置の制御プログラム、サーバ装置、及びサーバ装置の制御方法は、他ユーザとのコミュニケーションを継続しようとするユーザの意欲を向上させることを可能とする。

【課題を解決するための手段】

【0006】

端末装置の制御プログラムは、第１ユーザの端末装置の制御プログラムであって、第１ユーザの端末装置に、第１ユーザを示す第１オブジェクトを含む第１画像と、第１ユーザとは異なる第２ユーザを示す第２オブジェクトを含む第２画像とを少なくとも表示し、第１画像の表示に関する情報を第２ユーザの端末装置に送信し、第１ユーザの第１音声を取得した場合、第１音声を第２ユーザの端末装置に送信し、第１ユーザの動作又は第１音声に応じて変化する第１オブジェクトを含む第１画像を表示し、第２ユーザの第２音声を受信した場合、第２音声を出力し、第２ユーザの動作又は第２音声に応じて変化する第２オブジェクトを含む第２画像を表示し、第１ユーザによる指示又は第２ユーザによる指示に応じて、少なくとも一部が変更された第１画像又は少なくとも一部が変更された第２画像を表示すること、を実行させる。

【0007】

また、端末装置の制御プログラムにおいて、少なくとも一部が変更された第１画像の表示において、第１ユーザの端末装置に、第１ユーザに関連付けられた一又は複数の第１候補オブジェクトの中から第１ユーザによる指示に応じて選択された第１候補オブジェクトに基づいて、一部が変更された第１オブジェクトを含む第１画像を表示すること、を実行させることが好ましい。

【0008】

また、端末装置の制御プログラムにおいて、第１オブジェクトは仮想空間内に配置される立体オブジェクトであり、第１オブジェクトを含む第１画像の表示において、第１ユーザの端末装置に、仮想空間内の所定の視点から見た仮想空間を示す画像を第１画像として表示すること、を実行させ、第１ユーザの端末装置に、仮想空間内において自動的に移動する所定の視点から見た仮想空間を示す画像を第１画像として表示すること、を実行させることが好ましい。

【0009】

また、端末装置の制御プログラムにおいて、所定の視点は、第１オブジェクトの変更された一部に近づくように移動制御されることが好ましい。

【0010】

また、端末装置の制御プログラムにおいて、所定の視点は、所定の視点からの視線方向を第１オブジェクトに向く方向に合わせながら第１オブジェクトの周囲を移動するように移動制御されることが好ましい。

【0011】

また、端末装置の制御プログラムにおいて、少なくとも一部が変更された第１画像の表示において、第１ユーザの端末装置に、一又は複数の第２候補オブジェクトを含む選択グループの中から第２ユーザによる指示に応じて選択された第２候補オブジェクトに対応する第３オブジェクトを含む第１画像を表示すること、を実行させることが好ましい。

【0012】

また、端末装置の制御プログラムにおいて、所定の条件が満たされた場合、選択グループに特定の第２候補オブジェクトが含まれることが好ましい。

【0013】

また、端末装置の制御プログラムにおいて、所定の条件は、第１画像の表示時間及び／又は第２画像の表示時間に関する条件を含むことが好ましい。

【0014】

また、端末装置の制御プログラムにおいて、第１ユーザの端末装置に、一又は複数の第２候補オブジェクトを含む選択グループの中から第１ユーザによる指示に応じて選択された第２候補オブジェクトに基づいて、選択された第２候補オブジェクトに対応する第３オブジェクトを含む第２画像を表示するとともに、当該第３オブジェクトの表示に関する情報を第２ユーザの端末装置に送信すること、を実行させ、所定の条件は、第１ユーザ及び／又は第２ユーザによる第２候補オブジェクトの選択回数に関する条件を含むことが好ましい。

【0015】

また、端末装置の制御プログラムにおいて、第１画像と第２画像との表示において、第１ユーザの端末装置に、複数の第２ユーザのそれぞれを示す複数の第２画像を表示すること、を実行させ、第１ユーザの端末装置に、第２ユーザによる指示に応じて選択された第２候補オブジェクトに基づいて、選択された第２候補オブジェクトに対応する第３オブジェクトを含む、第１画像及び複数の第２ユーザのそれぞれを示す複数の第２画像を表示すること、を実行させることが好ましい。

【0016】

また、端末装置の制御プログラムにおいて、第１ユーザによって第３オブジェクトの選択指示が可能であり、第１ユーザの端末装置に、第１ユーザによる第３オブジェクトの選択指示に応じて、一部が変更された第１オブジェクトを含む第１画像を表示すること、を実行させることが好ましい。

【0017】

また、端末装置の制御プログラムにおいて、少なくとも一部が変更された第１画像の表示において、第１ユーザの端末装置に、第１ユーザ及び／又は第２ユーザによってプレイされるゲームの進行を示す画像を、第１画像の少なくとも一部に替えて表示すること、を実行させることが好ましい。

【0018】

また、端末装置の制御プログラムにおいて、第１ユーザの端末装置に、第２ユーザによる指示に応じて選択された第２候補オブジェクトがゲームに対応する場合、第１ユーザ及び／又は第２ユーザによってプレイされるゲームの進行を示す画像を、第２画像の少なくとも一部に替えて表示すること、を実行させることが好ましい。

【0019】

サーバ装置の制御プログラムは、第１ユーザの端末装置及び第１ユーザとは異なる第２ユーザの端末装置のそれぞれと通信可能なサーバ装置の制御プログラムであって、第１ユーザを示す第１オブジェクトを含む第１画像の表示に関する情報を、第１ユーザの端末装置から受信し、第２ユーザを示す第２オブジェクトを含む第２画像の表示に関する情報を、第２ユーザの端末装置から受信し、第１画像を少なくとも表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２画像を少なくとも表示するための情報を、少なくとも第１ユーザの端末装置に送信し第１ユーザの第１音声を受信した場合、第１音声を第２ユーザの端末装置に送信し、第１ユーザの動作又は第１音声に応じて変化する第１オブジェクトを含む第１画像を表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２ユーザの第２音声を受信した場合、第２音声を第１ユーザの端末装置に送信し、第２ユーザの動作又は第２音声に応じて変化する第２オブジェクトを含む第２画像を表示するための情報を、少なくとも第１ユーザの端末装置に送信し、第１ユーザによる指示に応じて、少なくとも一部が変更された第１画像を表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２ユーザによる指示に応じて、少なくとも一部が変更された第２画像を表示するための情報を、少なくとも第１ユーザの端末装置に送信すること、を実行させる。

【0020】

端末装置は、第１ユーザの端末装置であって、第１ユーザを示す第１オブジェクトを含む第１画像と、第１ユーザとは異なる第２ユーザを示す第２オブジェクトを含む第２画像とを少なくとも表示し、第１画像の表示に関する情報を第２ユーザの端末装置に送信し、第１ユーザの第１音声を取得した場合、第１音声を第２ユーザの端末装置に送信し、第１ユーザの動作又は第１音声に応じて変化する第１オブジェクトを含む第１画像を表示し、第２ユーザの第２音声を受信した場合、第２音声を出力し、第２ユーザの動作又は第２音声に応じて変化する第２オブジェクトを含む第２画像を表示し、第１ユーザによる指示又は第２ユーザによる指示に応じて、少なくとも一部が変更された第１画像又は少なくとも一部が変更された第２画像を表示する、処理部を備える。

【0021】

サーバ装置は、第１ユーザの端末装置及び第１ユーザとは異なる第２ユーザの端末装置のそれぞれと通信可能なサーバ装置であって、第１ユーザを示す第１オブジェクトを含む第１画像の表示に関する情報を、第１ユーザの端末装置から受信し、第２ユーザを示す第２オブジェクトを含む第２画像の表示に関する情報を、第２ユーザの端末装置から受信し、第１画像を少なくとも表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２画像を少なくとも表示するための情報を、少なくとも第１ユーザの端末装置に送信し、第１ユーザの第１音声を受信した場合、第１音声を第２ユーザの端末装置に送信し、第１ユーザの動作又は第１音声に応じて変化する第１オブジェクトを含む第１画像を表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２ユーザの第２音声を受信した場合、第２音声を第１ユーザの端末装置に送信し、第２ユーザの動作又は第２音声に応じて変化する第２オブジェクトを含む第２画像を表示するための情報を、少なくとも第１ユーザの端末装置に送信し、第１ユーザによる指示に応じて、少なくとも一部が変更された第１画像を表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２ユーザによる指示に応じて、少なくとも一部が変更された第２画像を表示するための情報を、少なくとも第１ユーザの端末装置に送信する、処理部を備える。

【0022】

端末装置の制御方法は、第１ユーザの端末装置の制御方法であって、第１ユーザの端末装置が、第１ユーザを示す第１オブジェクトを含む第１画像と、第１ユーザとは異なる第２ユーザを示す第２オブジェクトを含む第２画像とを少なくとも表示し、第１画像の表示に関する情報を第２ユーザの端末装置に送信し、第１ユーザの第１音声を取得した場合、第１音声を第２ユーザの端末装置に送信し、第１ユーザの動作又は第１音声に応じて変化する第１オブジェクトを含む第１画像を表示し、第２ユーザの第２音声を受信した場合、第２音声を出力し、第２ユーザの動作又は第２音声に応じて変化する第２オブジェクトを含む第２画像を表示し、第１ユーザによる指示又は第２ユーザによる指示に応じて、少なくとも一部が変更された第１画像又は少なくとも一部が変更された第２画像を表示すること、を含む。

【0023】

サーバ装置の制御方法は、第１ユーザの端末装置及び第１ユーザとは異なる第２ユーザの端末装置のそれぞれと通信可能なサーバ装置の制御方法であって、第１ユーザを示す第１オブジェクトを含む第１画像の表示に関する情報を、第１ユーザの端末装置から受信し、第２ユーザを示す第２オブジェクトを含む第２画像の表示に関する情報を、第２ユーザの端末装置から受信し、第１画像を少なくとも表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２画像を少なくとも表示するための情報を、少なくとも第１ユーザの端末装置に送信し、第１ユーザの第１音声を受信した場合、第１音声を第２ユーザの端末装置に送信し、第１ユーザの動作又は第１音声に応じて変化する第１オブジェクトを含む第１画像を表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２ユーザの第２音声を受信した場合、第２音声を第１ユーザの端末装置に送信し、第２ユーザの動作又は第２音声に応じて変化する第２オブジェクトを含む第２画像を表示するための情報を、少なくとも第１ユーザの端末装置に送信し、第１ユーザによる指示に応じて、少なくとも一部が変更された第１画像を表示するための情報を、少なくとも第２ユーザの端末装置に送信し、第２ユーザによる指示に応じて、少なくとも一部が変更された第２画像を表示するための情報を、少なくとも第１ユーザの端末装置に送信すること、を含む。

【発明の効果】

【0024】

端末装置の制御プログラム、端末装置、端末装置の制御方法、サーバ装置の制御プログラム、サーバ装置、及びサーバ装置の制御方法によって、他ユーザとのコミュニケーションを継続しようとするユーザの意欲を向上させることが可能となる。

【図面の簡単な説明】

【0025】

【図1】情報システムの概要の一例を説明するための模式図である。

【図2】情報システムの概略構成の一例を示す図である。

【図3】端末装置の概略構成の一例を示す図である。

【図4】各種テーブルのデータ構造の一例を示す図である。

【図5】サーバ装置の概略構成の一例を示す図である。

【図6】端末装置の表示装置に表示される画面の一例を示す図である。

【図7】端末装置の表示装置に表示される画面の一例を示す図である。

【図8】端末装置の表示装置に表示される画面の一例を示す図である。

【図9】端末装置の表示装置に表示される画面の一例を示す図である。

【図10】端末装置の表示装置に表示される画面の一例を示す図である。

【図11】端末装置の表示装置に表示される画面の一例を示す図である。

【図12】端末装置の表示装置に表示される画面の一例を示す図である。

【図13】端末装置の表示装置に表示される画面の一例を示す図である。

【図14】端末装置の表示装置に表示される画面の一例を示す図である。

【図15】端末装置の表示装置に表示される画面の一例を示す図である。

【図16】情報システムの動作シーケンスの一例を示す図である。

【図17】端末装置の表示装置に表示される画面の一例を示す図である。

【図18】仮想空間内を説明するための模式図である。

【発明を実施するための形態】

【0026】

以下、図面を参照しつつ、本発明の様々な実施形態について説明する。ただし、本発明の技術的範囲はそれらの実施形態に限定されず、特許請求の範囲に記載された発明とその均等物に及ぶ点に留意されたい。

【0027】

（情報システムの概要）
図１は、情報システムの概要の一例を説明するための模式図である。情報システムは、複数のユーザのそれぞれが操作する端末装置とサーバ装置とを備える。例えば、端末装置は、ユーザが所有する多機能携帯電話（所謂「スマートフォン」）等の情報処理装置である。例えば、サーバ装置は、通信ネットワークを介して端末装置間のコミュニケーションサービスを提供するためのコンピュータである。

【0028】

端末装置は、アプリケーションプログラム等の制御プログラムを記憶し、ユーザからの開始操作に応じて制御プログラムをメモリにロードし、ロードした制御プログラムに含まれる命令の実行によりコミュニケーションサービスを開始する。コミュニケーションサービスが開始されると、端末装置は、制御プログラムに含まれる命令を実行することにより複数の機能を実現する。

【0029】

例えば、ユーザの端末装置は、ユーザによって入力された各種の入力データに基づくモーションデータを含むキャラクタ動画データを含む出力情報を生成する生成機能を実現する。例えば、入力データは、ユーザの端末装置に備えられた撮像装置によって所定のサンプリング時間間隔ごとに取得された複数の撮像データであり、この場合、各撮像データにはユーザが写されている。キャラクタ動画データは、ユーザを示すキャラクタオブジェクトを含むユーザ出力画像の表示に関する情報の一例である。コミュニケーションサービス中において、出力情報は所定時間ごとに生成される。

【0030】

また、例えば、ユーザの端末装置は、キャラクタ動画データに基づいてユーザ出力画像を表示し、生成された出力情報をサーバ装置経由で他ユーザの端末装置に送信するため、当該出力情報をサーバ装置に所定時間ごとに送信する出力機能を実現する。また、例えば、ユーザの端末装置は、サーバ装置から所定時間ごとに送信された他ユーザの出力情報に基づいて、他ユーザを示すキャラクタオブジェクトを含む他ユーザ出力画像を表示する機能を実現する。

【0031】

コミュニケーションサービスが開始されると、図１（ａ）に示されるように、ユーザの端末装置によって、例えば、ユーザ出力画像（１）と他ユーザ出力画像（２）とが表示される。コミュニケーションサービスが開始されたときに、他ユーザがコミュニケーションサービスに参加していない場合、ユーザの端末装置によって、ユーザ出力画像（１）のみが表示される。コミュニケーションサービスが開始されたときに、ユーザがコミュニケーションサービスに参加していない場合、他ユーザの端末装置では、他ユーザ出力画像（２）のみが表示される。

【0032】

ユーザ出力画像（１）は、キャラクタ動画データに含まれるユーザのモーションデータに応じて動作するユーザのキャラクタオブジェクトを含む。また、他ユーザ出力画像（２）は、受信された他ユーザの出力情報に含まれる他ユーザのモーションデータに応じて動作する他ユーザのキャラクタオブジェクトを含む。このように、ユーザの端末装置は、ユーザの動作に応じて変化するユーザのキャラクタオブジェクトを含むユーザ出力画像（１）を表示し、他ユーザの動作に応じて変化する他ユーザのキャラクタオブジェクトを含む他ユーザ出力画像（２）を表示する。

【0033】

ユーザの端末装置及び他ユーザの端末装置はともにマイクを備えるため、ユーザの端末装置はユーザによって発せられた音声を取得し、他ユーザの端末装置は他ユーザによって発せられた音声を取得する。そして、ユーザの端末装置は、取得したユーザの音声データを出力情報に含め、ユーザの音声データを含む出力情報をサーバ装置経由で他ユーザの端末装置に送信するため、当該出力情報をサーバ装置に送信する。また、ユーザの端末装置は、他ユーザの端末装置によってサーバ装置に送信された他ユーザの音声データを含む出力情報を、サーバ装置から受信する。

【0034】

例えば、ユーザによって音声が発生される時、キャラクタ動画データに含まれるユーザのモーションデータには、ユーザの唇の動きを示すフェイスモーションデータが含まれる。この場合、ユーザの端末装置において、ユーザが発生している音声と略同期するように唇が動作するユーザのキャラクタオブジェクトを含むユーザ出力画像（１）が表示されることになる。ユーザの端末装置によって受信された他ユーザの出力情報に、他ユーザのモーションデータとともに他ユーザの音声データが含まれる場合がある。この場合、ユーザの端末装置において、他ユーザの音声が出力されるとともに、他ユーザの音声と略同期するように唇が動作する他ユーザのキャラクタオブジェクトを含む他ユーザ出力画像（２）が表示されることになる。

【0035】

上述した機能の他に、ユーザの端末装置は、ユーザによる指示に応じてユーザ出力画像（１）の少なくとも一部を変更し、変更されたユーザ出力画像（１）を表示する機能を実現する。また、ユーザの端末装置は、ユーザによる指示に応じて他ユーザ出力画像（２）の少なくとも一部を変更し、変更された他ユーザ出力画像（２）を表示する機能を実現してもよい。

【0036】

例えば、ユーザの端末装置は、ユーザによる変更指示に応じて、ユーザのキャラクタオブジェクトの少なくとも一部を変化させ、これにより、ユーザ出力画像（１）の少なくとも一部を変更する。図１（ｂ）に示されるように、例えば、ユーザの端末装置は、ユーザによる変更指示に応じて、ユーザのキャラクタオブジェクトの一部（頭部に装着されているアイテム「帽子」）を変化させる（アイテム「帽子」がアイテム「リボン」に変更される）。例えば、ユーザによる変更指示は、所定の操作オブジェクト（ボタンオブジェクト等）をユーザが選択する選択操作によって入力される。また、ユーザによる変更指示は、それぞれが互いに異なるアイテムに対応する複数の候補オブジェクトの内の一の候補オブジェクトをユーザが選択する選択操作によって入力されてもよい。この場合、ユーザ出力画像（１）に含まれるユーザのキャラクタオブジェクトのアイテムが、ユーザによって選択された一の候補オブジェクトに対応するアイテムに変更される。または、ユーザによって選択された一の候補オブジェクトに対応するアイテムが追加された、ユーザのキャラクタオブジェクトを含むユーザ出力画像（１）が表示されてもよい。

【0037】

また、例えば、ユーザの端末装置は、ユーザによる追加指示に応じて、他ユーザ出力画像（２）に追加オブジェクトを含ませ、これにより、他ユーザ出力画像（２）の少なくとも一部を変更する。例えば、図１（ｃ）に示されるように、ユーザの端末装置は、ユーザによる追加指示に応じて、他ユーザのキャラクタオブジェクトの周囲に配置されるように、又は、他ユーザのキャラクタの少なくとも一部に重畳するように、追加オブジェクトを他ユーザ出力画像（２）に含ませる。ユーザによる追加指示は、例えば、所定の操作オブジェクト（ボタンオブジェクト等）をユーザが選択する選択操作によって入力される。また、ユーザによる追加指示は、それぞれが互いに異なる追加オブジェクトに対応する複数の候補オブジェクトの内の一の候補オブジェクトをユーザが選択する選択操作によって入力されてもよい。この場合、ユーザによって選択された一の候補オブジェクトに対応する追加オブジェクトが含まれる他ユーザ出力画像（２）が表示される。

【0038】

また、ユーザの端末装置は、他ユーザによる指示に応じてユーザ出力画像（１）の少なくとも一部を変更し、変更されたユーザ出力画像（１）を表示する機能を実現してもよい。例えば、この機能では、ユーザの端末装置は、他ユーザによる追加指示に応じて、ユーザのキャラクタオブジェクトの周囲に配置されるように、又は、ユーザのキャラクタの少なくとも一部に重畳するように、追加オブジェクトをユーザ出力画像（１）に含ませる。また、ユーザの端末装置は、他ユーザによる指示に応じて他ユーザ出力画像（２）の少なくとも一部を変更し、変更された他ユーザ出力画像（２）を表示する機能を実現してもよい。例えば、この機能では、ユーザの端末装置は、他ユーザによる変更指示に応じて、他ユーザのキャラクタオブジェクトの一部を変化させ、変化した他ユーザのキャラクタオブジェクトを含む他ユーザ出力画像（２）を表示する。

【0039】

なお、ユーザの端末装置は、ユーザによる指示又は他ユーザによる指示に応じて、ユーザの端末装置による出力を変更してもよい。例えば、ユーザの端末装置は、ユーザによる指示又は他ユーザによる指示に応じて、ユーザの音声又は他ユーザの音声の音質を、所定期間だけ変更してもよい。また、ユーザの端末装置は、ユーザによる指示又は他ユーザによる指示に応じて、ユーザの端末装置の振動部を所定期間だけ動作させてもよい。

【0040】

以上、図１を参照しつつ説明したとおり、端末装置の制御プログラム、端末装置、端末装置の制御方法、サーバ装置の制御プログラム、サーバ装置、及びサーバ装置の制御方法では、ユーザによる指示又は他ユーザによる指示に応じて、少なくとも一部が変更されたユーザ出力画像又は少なくとも一部が変更された他ユーザ出力画像が表示される。このように、端末装置の制御プログラム、端末装置、端末装置の制御方法、サーバ装置の制御プログラム、サーバ装置、及びサーバ装置の制御方法によって、コミュニケーションサービス中に、端末装置からの出力がユーザ又は他ユーザによって変更されるようにすることで、コミュニケーションに対するユーザの継続使用の意欲を向上させることが可能となる。

【0041】

図１に示される例において、ユーザ及び他ユーザは、コミュニケーションサービスを利用可能な複数のユーザのうち、所定のコミュニケーショングループに所属するユーザである。所定のコミュニケーショングループは、ユーザ及び他ユーザのいずれかによって作成されたグループ等である。図１に示される例では、２人のユーザのキャラクタオブジェクトが表示されるが、所定のコミュニケーショングループに所属する３人以上のユーザのキャラクタオブジェクトが表示され、３人以上のユーザがコミュニケーションできるように構成されてもよい。

【0042】

また、図１に示される例において、ユーザ及び他ユーザは、所定の関係を有しているユーザでもよい。例えば、ユーザと所定の関係を有する他ユーザは、ユーザの相互フォロワーである。なお、ユーザが他ユーザをフォローし且つ他ユーザもユーザをフォローしている（ユーザと他ユーザが相互フォローしている）場合、ユーザと他ユーザは相互フォロワーとなる。また、ユーザと所定の関係を有する他ユーザは、ユーザの相互フォロワーである所定ユーザと相互フォローの関係にある他ユーザでもよい。また、ユーザと所定の関係を有する他ユーザは、ユーザとフレンド関係にある他ユーザでもよく、または、ユーザの端末装置に特定情報（電話番号、メールアドレス、所定のＩＤ（identification）等）が記憶されている他のユーザでもよい。また、ユーザの端末装置が、ユーザのキャラクタオブジェクトを含むユーザ出力画像を、一又は複数の他ユーザの端末装置にサーバ装置を介して配信する機能を有する場合、ユーザと所定の関係を有する他ユーザは、ユーザが配信したユーザ出力画像を視聴した他ユーザである。この場合、所定の関係を有しているユーザ及び他ユーザが、図１に示されるようなコミュニケーションを行う場合、ユーザ及び他ユーザによって構成される所定のコミュニケーショングループが、ユーザ若しくは他ユーザの端末装置又はサーバ装置によって一時的に作成されてもよい。

【0043】

なお、上述した図１の説明は、本発明の内容への理解を深めるための説明にすぎない。本発明は、具体的には、次に説明する各実施形態において実施され、且つ、本発明の原則を実質的に超えずに、さまざまな変形例によって実施されてもよい。このような変形例はすべて、本発明および本明細書の開示範囲に含まれる。

【0044】

（情報システム１）
図２は、情報システム１の概略構成の一例を示す図である。情報システム１は、複数のユーザのそれぞれが操作する端末装置２と、サーバ装置３とを備える。端末装置２及びサーバ装置３は、例えば、基地局４と移動体通信網５とゲートウェイ６とインターネット７等の通信ネットワークとを介して相互に接続される。端末装置２及びサーバ装置３間では、ハイパーテキスト転送プロトコル（Hypertext Transfer Protocol，HTTP）等の通信プロトコルに基づいて通信が行われる。また、端末装置２及びサーバ装置３間において、最初にＨＴＴＰ通信によりコネクションが確立され、その後は、ＨＴＴＰ通信よりも小コスト（通信負荷及び処理負荷が少ない）の双方向通信が行われるＷｅｂＳｏｃｋｅｔに基づいて通信が行われてもよい。なお、端末装置２及びサーバ装置３間の通信方式は、上述の方式に限定されず、本実施形態を実現できるものであれば、端末装置２及びサーバ装置３間においてどのような通信方式の技術が用いられてもよい。

【0045】

端末装置２は、スマートフォン等の情報処理装置である。端末装置２は、携帯電話機、ノートＰＣ、タブレット端末、タブレットＰＣ、ヘッドマウントディスプレイ（Head Mounted Display，HMD）、電子書籍リーダー、又はウェアラブルコンピュータ等でもよい。端末装置２は、携帯ゲーム機、又はゲーム用コンソール等でもよい。端末装置２は、ユーザ及び他ユーザのキャラクタオブジェクトの表示出力、並びに、ユーザ及び他ユーザの音声の出力が可能であれば、どのような情報処理装置でもよい。

【0046】

図２に示される例では、１台のサーバ装置３が情報システム１の構成要素として図示されているが、サーバ装置３は複数の物理的に別体のサーバ装置３の集合であってもよい。この場合、複数のサーバ装置３のそれぞれは、同一の機能を有するものでもよく、１台のサーバ装置３の機能を分散して有するものでもよい。

【0047】

（端末装置２）
図３は、端末装置２の概略構成の一例を示す図である。端末装置２は、基地局４と移動体通信網５とゲートウェイ６とインターネット７等の通信ネットワークとを介してサーバ装置３に接続し、サーバ装置３と通信を行う。端末装置２は、ユーザによって入力された各種データ（撮像データ等）に従ってモーションデータを含むキャラクタ動画データを生成し、生成したキャラクタ動画データ及び／又はユーザの音声データを含む出力情報をサーバ装置３に送信する。また、端末装置２は、サーバ装置３から送信された他ユーザの出力情報を受信し、受信した出力情報に基づいて他ユーザのキャラクタオブジェクトを表示し、及び／又は、他ユーザの音声を出力する。このような機能を実現するため、端末装置２は、端末通信Ｉ／Ｆ２１と、端末記憶装置２２と、表示装置２３と、入力装置２４と、撮像装置２５と、マイク２６と、端末処理装置２７とを備える。

【0048】

端末通信Ｉ／Ｆ２１は、ハードウェア、ファームウェア、又はＴＣＰ／ＩＰ（Transmission Control Protocol / Internet Protocol）ドライバやＰＰＰ（Point-to-Point Protocol）ドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。端末装置２は、端末通信Ｉ／Ｆ２１を介して、サーバ装置３等の他の装置にデータを送信し且つ他の装置からデータを受信することができる。

【0049】

端末記憶装置２２は、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等の半導体メモリ装置である。端末記憶装置２２は、端末処理装置２７における処理に用いられるオペレーティングシステムプログラム、ドライバプログラム、制御プログラム及びデータ等を記憶する。端末記憶装置２２に記憶されるドライバプログラムは、表示装置２３を制御する出力デバイスドライバプログラム、及び、入力装置２４を制御する入力デバイスドライバプログラム等である。端末記憶装置２２に記憶される制御プログラムは、例えば、コミュニケーションサービスに関する各種機能を実現するためのアプリケーションプログラムである。なお、制御プログラムは、サーバ装置３又はその他の装置から送信されたものでもよい。

【0050】

端末記憶装置２２は、データとして、端末装置２を操作するユーザを一意に識別するための識別情報（例えば、ユーザＩＤ（identification））等を記憶する。また、端末記憶装置２２は、データとして、背景データ及びモデルデータ等を記憶する。また、端末記憶装置２２は、データとして、ユーザテーブルＴ１、オブジェクトテーブルＴ２、及びグループテーブルＴ３を記憶する。また、端末記憶装置２２は、所定の処理に係るデータを一時的に記憶してもよい。

【0051】

背景データは、ユーザ出力画像において、ユーザのキャラクタオブジェクトが存在する仮想空間を構築するためのアセットデータである。背景データは、仮想空間の背景を描画するためのデータ、ユーザ出力画像に含まれる各種物体を描画するためのデータ、及びこれら以外のユーザ出力画像に表示される各種背景オブジェクトを描画するためのデータが含まれる。背景データには、仮想空間における各種背景オブジェクトの位置を示すオブジェクト位置情報を含んでもよい。

【0052】

表示装置２３は、液晶ディスプレイである。なお、表示装置２３は、有機ＥＬ（Electro-Luminescence）ディスプレイ等でもよい。表示装置２３は、端末処理装置２７から供給された、動画像データに応じた動画像及び／又は静止画像データに応じた静止画像等を表示画面に表示する。また、表示装置２３は、端末装置２の構成要素でなくてもよく、この場合、表示装置２３は、サーバ装置３と通信可能なＨＭＤのディスプレイ、有線又は無線を介して端末装置２と通信可能な、プロジェクションマッピング（Projection Mapping）用の映写装置、網膜投影型の投影装置等でもよい。

【0053】

入力装置２４は、タッチパネル等のポインティングデバイスである。入力装置２４がタッチパネルである場合、入力装置２４は、ユーザのタップ、ダブルタップ、ドラッグ等の各種タッチ操作を検出することができる。タッチパネルは、静電容量式の近接センサを備え、ユーザの非接触操作を検出可能に構成されてもよい。なお、入力装置２４は、入力キー等でもよい。ユーザは、入力装置２４を用いて、文字、数字及び記号、若しくは、表示装置２３の表示画面上の位置等を入力することができる。入力装置２４は、ユーザにより操作されると、その操作に対応する信号を発生する。そして、入力装置２４は、発生した信号を、ユーザの指示として、端末処理装置２７に供給する。

【0054】

撮像装置２５は、結像光学系、撮像素子及び画像処理部等を有するカメラである。結像光学系は、例えば光学レンズであり、被写体からの光束を撮像素子の撮像面上に結像させる。撮像素子は、ＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）等であり、撮像面上に結像した被写体像の画像を出力する。画像処理部は、連続して撮像素子によって生成された画像から、所定期間毎に所定のファイル形式の動画像データを作成して撮像データとして出力する。または、画像処理部は、撮像素子によって生成された画像から所定のファイル形式の静止画像データを作成して撮像データとして出力する。

【0055】

マイク２６は、ユーザによって発せられた音声を取得し、音声データに変換するように構成された集音装置である。マイク２６は、ユーザの音声入力を取得することができるように構成され、マイク２６により取得されたユーザの音声入力を音声データに変換し、音声データを端末処理装置２７に出力する。

【0056】

端末処理装置２７は、端末記憶装置２２に記憶されているオペレーティングシステムプログラム、ドライバプログラム及び制御プログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行するプロセッサである。端末処理装置２７は、例えば、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）、ＤＳＰ（Digital Signal Processor）、ＧＰＵ（Graphics Processing Unit）等の電子回路、又は各種電子回路の組み合わせである。端末処理装置２７は、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）、ＭＣＵ（Micro Controller Unit）等の集積回路により実現されてもよい。図３においては、端末処理装置２７が単一の構成要素として図示されているが、端末処理装置２７は複数の物理的に別体のプロセッサの集合であってもよい。

【0057】

端末処理装置２７は、制御プログラムに含まれる各種命令を実行することにより、生成部２７１、送信部２７２、受信部２７３、表示処理部２７４、及び音声出力部２７５として機能する。生成部２７１、送信部２７２、受信部２７３、表示処理部２７４、及び音声出力部２７５の機能については後述する。

【0058】

（各種テーブル）
図４は、端末記憶装置２２に記憶されるユーザテーブルＴ１、オブジェクトテーブルＴ２、及びグループテーブルＴ３のデータ構造の一例を示す図である。なお、ユーザテーブルＴ１、オブジェクトテーブルＴ２、及びグループテーブルＴ３のうちの少なくとも一つのテーブルは、サーバ装置３のサーバ記憶装置３２に記憶されてもよい。この場合、端末装置２は、所定のタイミングで、サーバ記憶装置３２に記憶されている最新のテーブルを受信して端末記憶装置２２に記憶してもよい。

【0059】

（ユーザテーブルＴ１）
図４（ａ）は、コミュニケーションサービスに参加するユーザを管理するユーザテーブルＴ１のデータ構造の一例である。ユーザテーブルＴ１では、各ユーザについて、ユーザＩＤ、ユーザの名称、ユーザのキャラクタオブジェクト、ユーザの保有オブジェクト、及び使用オブジェクト等が、互いに関連付けて記憶されている。ユーザテーブルＴ１において、ユーザのユーザＩＤに関連付けて、ユーザの保有コイン（ユーザが保有している仮想的な貨幣価値の「コイン」の総量を示す情報）及び／又はユーザポイント等が記憶されてもよい。ユーザＩＤは、各ユーザを一意に識別するための識別データの一例である。名称は、各ユーザの名称を示すデータの一例である。

【0060】

例えば、キャラクタオブジェクトは、キャラクタオブジェクトのアニメーションを生成するためのモデルデータを識別するためのモデルＩＤである。モデルデータは、モデルＩＤに関連付けられて端末記憶装置２２に記憶される。モデルデータは、３次元のアニメーションを生成するための３次元モデルデータであってもよいし、２次元のモデルデータを生成するための２次元モデルデータであってもよい。モデルデータは、例えば、キャラクタオブジェクトの顔及び顔以外の部分の骨格を示すリグデータ（所謂「スケルトンデータ」）と、キャラクタオブジェクトの表面の形状や質感を示す表面データとを含む。モデルデータには、互いに異なる複数のモデルデータが含まれてもよい。複数のモデルデータのそれぞれは、互いに異なるリグデータを有してもよく、又は、同じリグデータを有してもよい。複数のモデルデータのそれぞれは、互いに異なる表面データを有してもよく、又は、同じ表面データを有してもよい。

【0061】

保有オブジェクトは、各ユーザが保有しているオブジェクトを示すオブジェクトＩＤである。保有オブジェクトは、キャラクタオブジェクトの特定の部位に関連付けることが可能な装着オブジェクト、及び、ユーザ出力画像内においてユーザのキャラクタオブジェクトの背面に配置される壁紙オブジェクト等である。装着オブジェクト及び壁紙オブジェクトの詳細は後述する。保有オブジェクトは、ユーザの操作によって、ユーザの端末装置２又はサーバ装置３によって実行された抽選ゲームによって選択されたオブジェクトである。また、保有オブジェクトは、情報システム１における購入機能において、ユーザが仮想的な貨幣価値の「コイン」を消費することで、ユーザが保有することになったオブジェクトでもよい。

【0062】

使用オブジェクトは、ユーザの端末装置２において表示中のユーザ出力画像において使用されているオブジェクトを示すオブジェクトＩＤである。例えば、コミュニケーションサービス中に、ユーザの変更指示が入力された場合、表示中のユーザ出力画像に含まれるユーザのキャラクタオブジェクトに、ユーザの保有オブジェクトとして保有している装着オブジェクトが装着される。この場合、ユーザのキャラクタオブジェクトに装着された装着オブジェクトのオブジェクトＩＤが、使用オブジェクトとしてユーザＩＤに関連付けてユーザテーブルＴ１に記憶される。また、例えば、コミュニケーションサービス中に、ユーザの変更指示が入力された場合、表示中のユーザ出力画像においてユーザのキャラクタオブジェクトの背面に、ユーザの保有オブジェクトとして保有している壁紙オブジェクトが配置される。この場合、ユーザ出力画像に配置された壁紙オブジェクトのオブジェクトＩＤが、使用オブジェクトとしてユーザＩＤに関連付けてユーザテーブルＴ１に記憶される。

【0063】

（オブジェクトテーブルＴ２）
図４（ｂ）は、追加オブジェクトとして選択されるオブジェクトを管理するオブジェクトテーブルＴ２のデータ構造の一例である。追加オブジェクトは、例えば、ユーザが他ユーザに贈るギフトオブジェクトである。オブジェクトテーブルＴ２では、各追加オブジェクトについて、オブジェクトＩＤ、名称、画像情報、希少度及び配置箇所等が、互いに関連付けて記憶されている。

【0064】

オブジェクトＩＤは、各追加オブジェクトを一意に識別するための識別データの一例である。画像情報は、各追加オブジェクトに対応する一又は複数の静止画像である。画像情報は、各追加オブジェクトに対応する１種類以上の動画像でもよい。希少度は、各追加オブジェクトの希少度合いを示す情報である。配置箇所は、各追加オブジェクトの画像情報が表示される箇所を示す情報である。なお、キャラクタオブジェクトの表示位置及び表示範囲が定められている場合、当該キャラクタオブジェクトに対する相対的な位置を示す情報が配置箇所として記憶されてもよい。

【0065】

追加オブジェクトは、複数の種類（カテゴリ）に分類される。例えば、追加オブジェクトには、エフェクトギフトとして使用されるエフェクトオブジェクトと、通常ギフトとして使用される通常オブジェクトと、装着ギフトとして使用される装着オブジェクトと、メッセージギフトとして使用されるメッセージオブジェクトと、が含まれる。追加オブジェクトに、ユーザ出力画像内のキャラクタオブジェクトの背面に配置される壁紙オブジェクトが含まれてもよい。なお、追加オブジェクトの種類（カテゴリ）を示す情報が、追加オブジェクトのオブジェクトＩＤに関連付けてオブジェクトテーブルＴ２に記憶されてもよい。以下、追加オブジェクトの種類に応じて、画像情報及び配置箇所について説明する。

【0066】

エフェクトオブジェクトは、ユーザ出力画像及び／又は他ユーザ出力画像の全体の印象に影響を与えるオブジェクトである。エフェクトオブジェクトは、例えば、紙吹雪を模したオブジェクトである。エフェクトオブジェクトが紙吹雪を模したオブジェクトである場合、画像情報として、複数の紙を示す画像が記憶される。

【0067】

エフェクトオブジェクトの配置箇所として「空間」を示す情報が記憶される。例えば、紙吹雪を模したオブジェクトは、ユーザ出力画像及び／又は他ユーザ出力画像の全体に表示される。なお、エフェクトオブジェクトは、ユーザの指示に応じて、ユーザ出力画像及び他ユーザ出力画像を含む画面（後述するコミュニケーション画面）全体に表示されてもよい。また、エフェクトオブジェクトは、ユーザ出力画像及び他ユーザ出力画像のうち、ユーザによって選択された出力画像内にのみ表示されてもよい。また、エフェクトオブジェクトは、ユーザ出力画像及び／又は他ユーザ出力画像に含まれるキャラクタオブジェクトと重複するように表示されてもよい。エフェクトオブジェクトは、後述する装着オブジェクトと異なり、キャラクタの特定の部位に関連付けられずに表示される。このように、情報システム１の端末装置２は、ユーザの指示に応じてエフェクトオブジェクトを表示することで、当該エフェクトオブジェクトが表示される前に比べて、ユーザ出力画像及び／又は他ユーザ出力画像の全体の印象を変えることができる。

【0068】

通常オブジェクトは、例えば、ぬいぐるみ、花束、アクセサリ、又はギフトやプレゼントに適した物品を模したオブジェクトである。通常オブジェクトの配置箇所として「空間」を示す情報が記憶される。例えば、通常オブジェクトには、所定の移動ルートに関する情報が関連付けられており、ユーザ出力画像又は他ユーザ出力画像内を所定の移動ルートに沿って移動する通常オブジェクトが表示される。「通常オブジェクト」の配置箇所として記憶される「空間」を示す情報は、複数の種類に分類されてもよい。複数の種類の「空間」は、例えば、「中央の空間」（ユーザ出力画像又は他ユーザ出力画像を左右に３分割した場合の画像中央の領域）、「左の空間」（ユーザ出力画像又は他ユーザ出力画像を左右に３分割した場合の画像左側の領域）、及び「右の空間」（ユーザ出力画像又は他ユーザ出力画像を左右に３分割した場合の画像右側の領域）である。また、複数の種類の「空間」は、「中央の空間」（ユーザ出力画像又は他ユーザ出力画像を上下に３分割した場合の画像中央の領域）、「上の空間」（ユーザ出力画像又は他ユーザ出力画像を上下に３分割した場合の画像上側の領域）、及び「下の空間」（ユーザ出力画像又は他ユーザ出力画像を上下に３分割した場合の画像下側の領域）でもよい。この場合、通常オブジェクトに関連付けられた移動ルートは、当該通常オブジェクトの配置箇所として関連付けられた種類の「空間」内に設定される。例えば、通常オブジェクトに、「右の空間」を示す情報が記憶された場合、当該通常オブジェクトに、ユーザ出力画像又は他ユーザ出力画像を左右に３分割した場合の画像右側の領域内を移動する移動ルートに関する情報が関連付けられる。また、通常オブジェクトは、ユーザ出力画像又は他ユーザ出力画像内の通常オブジェクトごとに設定された位置又は自動的にランダムに決定された位置から、所定の移動ルールに沿って移動する通常オブジェクトが表示されてもよい。所定の移動ルールは、例えば、通常オブジェクトが自由落下しているような移動となるように設定された移動ルールである。なお、通常オブジェクトは、キャラクタオブジェクトと重複するように表示されてもよい。この場合、通常オブジェクトは、後述する装着オブジェクトと異なり、キャラクタオブジェクトの特定の部位に関連付けられずに表示される。また、通常オブジェクトは、キャラクタオブジェクトに接したタイミングで跳ね返るような移動を行うように表示されてもよい。

【0069】

通常オブジェクトがキャラクタオブジェクトと重複して表示される場合、例えば、通常オブジェクトは、キャラクタオブジェクトの「『顔』を含む『頭部』以外の部分」と重複するように表示されてもよい。この場合、通常オブジェクトは、キャラクタオブジェクトの「頭部」とは重複しないように表示される。また、通常オブジェクトは、キャラクタオブジェクトの「『顔』を含む『上半身』以外の部分」と重複するように表示されてもよい。この場合、通常オブジェクトは、キャラクタオブジェクトの「上半身」とは重複しないように表示される。

【0070】

装着オブジェクトは、キャラクタオブジェクトの特定の部位（装着箇所）に関連付けてユーザ出力画像又は他ユーザ出力画像に表示されるオブジェクトである。例えば、特定の部位は、キャラクタオブジェクトの頭部における、頭部の前方左側、前方右側、後方左側、後方右側、中央前側、中央後側、左目、右目、左耳、右耳、及び髪全体等である。また、特定の部位は、親指、薬指、手首、肘、肩、二の腕、手全体、腕全体等でもよい。

【0071】

キャラクタオブジェクトの特定の部位に関連付けられた装着オブジェクトは、キャラクタオブジェクトの特定の部位に接するようにユーザ出力画像又は他ユーザ出力画像に表示される。また、キャラクタオブジェクトの特定の部位に関連付けられた装着オブジェクトは、キャラクタオブジェクトの特定の部位の一部又は全部を覆うようにユーザ出力画像又は他ユーザ出力画像に表示されてもよい。特定の部位は、３次元座標空間における位置を示す３次元位置情報で特定されてもよく、また、３次元座標空間の位置情報に関連付けられてもよい。

【0072】

装着オブジェクトの画像情報は、例えば、キャラクタオブジェクトに装着されるアクセサリ（カチューシャ、ネックレス又はイヤリング等）、衣服（Ｔシャツ又はワンピース等）、コスチューム、及び、これら以外のキャラクタオブジェクトが装着可能なもの、を模した画像情報である。

【0073】

装着オブジェクトの配置箇所として、装着オブジェクトがキャラクタオブジェクトのどの部位に関連付けられるかを示す装着部位を示す情報が記憶される。例えば、装着オブジェクトが「カチューシャ」である場合、装着オブジェクトの配置箇所として、キャラクタオブジェクトの「頭部」を示す情報が記憶される。また、装着オブジェクトが「Ｔシャツ」である場合、装着オブジェクトの配置箇所として、キャラクタオブジェクトの「胴部」を示す情報が記憶される。

【0074】

装着オブジェクトの配置箇所として、３次元座標空間における複数の装着部位を示す情報が記憶されてもよい。例えば、装着オブジェクトが「カチューシャ」である場合、装着オブジェクトの配置箇所として、キャラクタオブジェクトの「頭部後方左側」及び「頭部後方右側」の２つの部位を示す情報が記憶されてもよい。これにより、「カチューシャ」を模した装着オブジェクトは、キャラクタオブジェクトの「頭部後方左側」及び「頭部後方右側」の両方に装着されるように表示される。

【0075】

キャラクタオブジェクトに装着箇所が共通する複数種類の装着オブジェクトが装着される場合、当該複数種類の装着オブジェクトは時間を隔ててキャラクタオブジェクトに装着される。これにより、装着部位が共通する複数種類の装着オブジェクトは、キャラクタオブジェクトに同時に装着されない。例えば、「カチューシャ」を示す装着オブジェクト及び「帽子」を示す装着オブジェクトの装着箇所として、ともに「頭部」が記憶される場合、「カチューシャ」を示す装着オブジェクト及び「帽子」を示す装着オブジェクトは、同時にキャラクタオブジェクトの頭部に表示されない。

【0076】

オブジェクトテーブルＴ２において、追加オブジェクトの種類に応じた表示時間が、当該追加オブジェクトのオブジェクトＩＤに関連付けて記憶されてもよい。例えば、装着オブジェクトの表示時間は、エフェクトオブジェクトの表示時間及び通常オブジェクトの表示時間よりも長い時間が記憶されてもよい。例えば、装着オブジェクトの表示時間として「６０秒」が記憶された場合、エフェクトオブジェクトの表示時間として「５秒」が記憶され、通常オブジェクトの表示時間として「１０秒」が記憶されてもよい。

【0077】

（グループテーブルＴ３）
図４（ｃ）は、ユーザが属するグループ（フレンド関係のユーザのグループ、相互フォロワーである他ユーザとのグループ、ユーザ又は他ユーザによって任意に作成されたグループ等）を管理するグループテーブルＴ３のデータ構造の一例である。グループテーブルＴ３は、ユーザごとに個別に設けられ、図４（ｃ）に示されるグループテーブルＴ３は、当該グループテーブルＴ３を記憶する端末装置２を操作するユーザのグループテーブルＴ３である。

【0078】

グループテーブルＴ３では、各グループについて、グループのグループＩＤ、グループの名称、グループに所属する所属ユーザ等が、互いに関連付けて記憶されている。グループＩＤは、各グループを一意に識別するための識別データの一例である。名称は、各グループの名称を示すデータの一例である。所属ユーザは、グループに所属する各ユーザのユーザＩＤである。

【0079】

図３に戻り、生成部２７１、送信部２７２、受信部２７３、表示処理部２７４、音声出力部２７５の機能について説明する。

【0080】

（生成部２７１）
生成部２７１は、撮像装置２５によって連続的に出力された撮像データを、撮像装置２５から取得する。例えば、ユーザによって把持された端末装置２の撮像装置２５は、表示装置２３の表示画面を眺めるユーザの顔が撮影方向となるように、端末装置２に設けられる。撮像装置２５は、撮影方向のユーザの顔を連続的に撮像し、ユーザの顔の撮像データを取得し、端末処理装置２７の生成部２７１に出力する。撮像装置２５は、ユーザの顔以外の部位、例えば、頭部、腕部、手部（指部を含む）、胸部、胴部、脚部、又はこれら以外の部位を撮像して撮像データを取得しても良い。また、撮像装置２５は、人物の顔の奥行きを検出可能な３Ｄカメラであってもよい。

【0081】

生成部２７１は、連続的に取得した撮像データに基づいて、ユーザの顔の動きのデジタル表現であるフェイスモーションデータを、時間の経過に伴って随時生成する。フェイスモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、生成部２７１によって生成されたフェイスモーションデータは、ユーザの顔の動き（表情の変化）を時系列的にデジタル表現することができる。

【0082】

生成部２７１は、ユーザの各部位（頭部、腕部、手部（指部を含む）、胸部、胴部、脚部、又はこれら以外の部位）の位置及び向きのデジタル表現であるボディモーションデータを、フェイスモーションデータとともに、又は、フェイスモーションデータとは別に、生成してもよい。

【0083】

ボディモーションデータは、ユーザに装着された公知のモーションセンサからの検出情報に基づいて生成されてもよい。この場合、端末装置２の端末通信Ｉ／Ｆ２１は、ユーザに装着されたモーションセンサからの検出情報を無線通信で取得するための所定の通信回路を有する。そして、生成部２７１は、端末通信Ｉ／Ｆ２１によって取得された検出情報に基づいてボディモーションデータを生成する。ボディモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、生成部２７１によって生成されたボディモーションデータは、ユーザの体の動きを時系列的にデジタル表現することができる。

【0084】

ユーザに装着されたモーションセンサからの検出情報に基づくボディモーションデータの生成は、例えば、撮影スタジオで行われてもよい。この場合、撮影スタジオには、ベースステーションと、トラッキングセンサと、ディスプレイと、が備えられてもよい。ベースステーションは、例えば、多軸レーザーエミッターである。ユーザに装着されるモーションセンサは、例えば、HTC CORPORATIONから提供されているVive Trackerでもよく、また、ベースステーションは、例えば、HTC CORPORATIONから提供されているベースステーションでもよい。

【0085】

また、撮影スタジオに隣接した別室に、サポーターコンピュータが設置されていてもよい。撮影スタジオのディスプレイは、サポーターコンピュータから受信した情報を表示するように構成されてもよい。サーバ装置３は、サポーターコンピュータが設置されている部屋と同じ部屋に設置されてもよい。サポーターコンピュータが設置されている部屋と撮影スタジオとはガラス窓によって隔てられていてもよい。この場合、サポーターコンピュータのオペレータは、ユーザを視認できる。サポーターコンピュータは、サポーターの操作に応じて、撮影スタジオに備えられた各種装置の設定を変更することができるように構成されてもよい。サポーターコンピュータは、例えば、ベースステーションによる走査インターバルの設定、トラッキングセンサの設定、及びこれら以外の各種機器の各種設定の変更を行うことができる。オペレータは、サポーターコンピュータにメッセージを入力し、当該入力されたメッセージが撮影スタジオのディスプレイに表示されてもよい。

【0086】

生成部２７１は、随時生成したフェイスモーションデータ及び／又はボディモーションデータを含むキャラクタ動画データを生成し、生成したキャラクタ動画データを、表示処理部２７４に出力する。以下、フェイスモーションデータ及びボディモーションデータを、モーションデータと総称する場合がある。また、生成部２７１は、生成したキャラクタ動画データと、端末記憶装置２２に記憶されたユーザＩＤとを含む出力情報を生成し、生成した出力情報を送信部２７２に出力する。なお、生成部２７１は、マイク２６から出力されたユーザの音声データを取得した場合、生成したキャラクタ動画データと、取得した音声データと、端末記憶装置２２に記憶されたユーザＩＤとを含む出力情報を生成し、生成した出力情報を送信部２７２に出力する。

【0087】

生成部２７１は、ユーザがプレイするゲームのゲーム画面を示すゲーム画像データを、ゲーム進行中に随時生成し、生成したゲーム画像データと、端末記憶装置２２に記憶されたユーザＩＤとを含む出力情報を生成し、生成した出力情報を送信部２７２に出力する。なお、出力情報には、生成したゲーム画像データとともに、生成したキャラクタ動画データ及び／又は取得した音声データが含まれてもよい。

【0088】

（送信部２７２）
送信部２７２は、生成部２７１から出力された出力情報を、送信先情報とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。送信先情報は、ユーザとのコミュニケーションサービスに参加中の一又は複数の他ユーザのユーザＩＤを含む。また、出力情報に含まれるユーザＩＤが送信先情報として用いられてもよい。例えば、サーバ装置３は、ユーザとのコミュニケーションサービスに参加中の一又は複数の他ユーザのユーザＩＤを記憶しており、出力情報を取得すると、出力情報に含まれるユーザＩＤのユーザとのコミュニケーションサービスに参加中の一又は複数の他ユーザのユーザＩＤを特定し、特定されたユーザＩＤによって示される他ユーザの端末装置２に、受信した出力情報を送信する。

【0089】

また、送信部２７２は、ユーザが入力装置２４を操作することによって入力された各種の指示を示す情報を、端末記憶装置２２に記憶されたユーザＩＤ及び送信先情報とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。ユーザによる各種の指示には、例えば、追加指示が含まれる。追加指示は、他ユーザ出力画像に含ませる追加オブジェクトのオブジェクトＩＤとユーザＩＤとともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信される。

【0090】

（受信部２７３）
受信部２７３は、サーバ装置３から送信された、他ユーザの出力情報及び他ユーザの各種の指示を示す情報等を、端末通信Ｉ／Ｆ２１を介して受信する。受信部２７３は、受信した情報を端末処理装置２７に出力する。サーバ装置３から送信された他ユーザの出力情報は、他ユーザの端末装置２の生成部２７１によって生成され且つ他ユーザの端末装置２の送信部２７２によってサーバ装置３に送信されたものである。他ユーザの出力情報には、他ユーザのキャラクタ動画データと、他ユーザの音声データと、他ユーザのユーザＩＤ等が含まれる。他ユーザの出力情報に、他ユーザの音声データが含まれない場合があってもよく、他ユーザの出力情報に、他ユーザのキャラクタ動画データが含まれない場合があってもよい。

【0091】

（表示処理部２７４）
表示処理部２７４は、生成部２７１によって生成されたモーションデータ（キャラクタ動画データ）に基づいて描画された画像をユーザ出力画像として表示装置２３に表示する。また、表示処理部２７４は、受信部２７３によって受信された他ユーザの出力情報に含まれるモーションデータ（キャラクタ動画データ）に基づいて描画された画像を他ユーザ出力画像として表示装置２３に表示する。以下、モーションデータに基づく画像の描画処理について説明する。ユーザ（端末装置２を操作するユーザ）のモーションデータに基づく画像の描画処理では、端末記憶装置２２に記憶されたユーザＩＤが用いられ、受信部２７３によって受信された他ユーザの出力情報に含まれるモーションデータに基づく画像の描画処理では、出力情報に含まれるユーザＩＤが用いられる。

【0092】

まず、表示処理部２７４は、ユーザＩＤに関連付けられたキャラクタオブジェクトのモデルＩＤと、使用オブジェクトのオブジェクトＩＤとをユーザテーブルＴ１から抽出する。次に、表示処理部２７４は、抽出したモデルＩＤに関連付けられたモデルデータと、抽出した使用オブジェクトのオブジェクトＩＤに関連付けられた画像情報及び配置箇所を端末記憶装置２２から読み出す。次に、表示処理部２７４は、読み出したモデルデータと使用オブジェクトの画像情報及び配置箇所とモーションデータとに基づいて、使用オブジェクトが配置箇所に装着されたキャラクタオブジェクトのアニメーションを生成する。表示処理部２７４は、モーションデータにフェイスモーションデータが含まれる場合、キャラクタオブジェクトの表情がフェイスモーションデータに基づいて変化するように、キャラクタオブジェクトのアニメーションを生成する。これにより、表示処理部２７４は、読み出したモデルデータとフェイスモーションデータとに基づいて、ユーザの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。表示処理部２７４は、モーションデータにフェイスモーションデータ及びボディモーションデータが含まれる場合、読み出したモデルデータとフェイスモーションデータ及びボディモーションデータとに基づいて、ユーザの表情及び体の動きに同期して動くキャラクタオブジェクトのアニメーションを生成する。次に、表示処理部２７４は、生成したキャラクタオブジェクトのアニメーション（動画像）と、端末記憶装置２２に記憶された背景データを用いて生成した背景を示す背景画像と、を含む画像を描画する。なお、表示処理部２７４は、コミュニケーショングループに予め関連付けて端末記憶装置２２に記憶された壁紙オブジェクトを背景画像として用いてもよい。この場合、コミュニケーショングループ全員の背景画像として、同一の壁紙オブジェクトが適用されてもよい。そして、表示処理部２７４は、描画された画像を示す描画データを出力し、モーションデータに基づく画像の描画処理を終了する。なお、端末記憶装置２２に記憶されたユーザＩＤに関連付けられたキャラクタオブジェクトに基づいて描画された画像が、ユーザのユーザ出力画像である。また、受信された他ユーザの出力情報に含まれるユーザＩＤに関連付けられたキャラクタオブジェクトに基づいて描画された画像は、当該他ユーザの他ユーザ出力画像である。

【0093】

また、表示処理部２７４は、ユーザの変更指示に応じて、ユーザの保有オブジェクトとしてユーザが保有する装着オブジェクトを新たに装着したキャラクタオブジェクトを、表示装置２３に表示してもよい。例えば、ユーザによって変更指示された装着オブジェクトが「カチューシャ」である場合、表示処理部２７４は、当該装着オブジェクト（「カチューシャ」）のオブジェクトＩＤを、ユーザテーブルＴ１においてユーザのユーザＩＤに関連付けられた保有オブジェクトから抽出し、使用オブジェクトとして記憶する。表示処理部２７４は、使用オブジェクトとして記憶されたオブジェクトＩＤに関連付けられた画像情報及び配置箇所をオブジェクトテーブルＴ２から抽出する。次に、表示処理部２７４は、抽出した画像情報及び配置箇所に基づいて、装着オブジェクト（「カチューシャ」）を頭部（「カチューシャ」のオブジェクトＩＤに関連付けられた配置箇所）に装着したキャラクタオブジェクトを含むユーザ出力画像を生成する。なお、表示処理部２７４は、キャラクタオブジェクトの装着部位（配置箇所）の動きに付随して動く装着オブジェクトを装着したキャラクタオブジェクトを含むユーザ出力画像を生成してもよい。

【0094】

また、表示処理部２７４は、他ユーザからの追加オブジェクトの追加指示に応じて、追加オブジェクトを含むユーザ出力画像を表示する。表示処理部２７４は、ユーザからの他ユーザ出力画像に追加オブジェクトを表示させる追加指示に応じて、追加オブジェクトを含む他ユーザ出力画像を表示する。

【0095】

表示処理部２７４は、他ユーザからの追加オブジェクトの追加指示に含まれるオブジェクトＩＤがいずれかのエフェクトオブジェクトのオブジェクトＩＤである場合、オブジェクトテーブルＴ２を参照して、追加指示に含まれるオブジェクトＩＤに関連付けられたエフェクトオブジェクトの静止画像又は動画像（画像情報）を端末記憶装置２２から抽出し、抽出した静止画像又は動画像を含むユーザ出力画像を生成する。例えば、紙吹雪や花火を示すエフェクトオブジェクトの追加指示がなされた場合、表示処理部２７４は、紙吹雪や花火を模したエフェクトオブジェクト（図示せず）の動画像を含むユーザ出力画像を生成する。表示処理部２７４は、ユーザからの追加オブジェクトの追加指示に含まれるオブジェクトＩＤがいずれかのエフェクトオブジェクトのオブジェクトＩＤである場合、同様に、オブジェクトテーブルＴ２を参照して、追加指示に含まれるオブジェクトＩＤに関連付けられたエフェクトオブジェクトの静止画像又は動画像（画像情報）を端末記憶装置２２から抽出し、抽出した静止画像又は動画像を含む他ユーザ出力画像を生成する。

【0096】

表示処理部２７４は、他ユーザからの追加オブジェクトの追加指示に含まれるオブジェクトＩＤが通常オブジェクトのオブジェクトＩＤである場合、オブジェクトテーブルＴ２を参照して、通常オブジェクトのオブジェクトＩＤに関連付けられた、通常オブジェクトの静止画像又は動画像（画像情報）及び配置箇所を抽出する。次に、表示処理部２７４は、配置箇所によって示される位置に配置した通常オブジェクトの静止画像又は動画像を含むユーザ出力画像を生成する。また、表示処理部２７４は、ユーザからの追加オブジェクトの追加指示に含まれるオブジェクトＩＤが通常オブジェクトのオブジェクトＩＤである場合、同様に、オブジェクトテーブルＴ２を参照して、通常オブジェクトのオブジェクトＩＤに関連付けられた、通常オブジェクトの静止画像又は動画像（画像情報）及び配置箇所を抽出し、配置箇所によって示される位置に配置した通常オブジェクトの静止画像又は動画像を含む他ユーザ出力画像を生成する。

【0097】

表示処理部２７４は、ユーザ出力画像及び他ユーザ出力画像の表示領域内を移動する通常オブジェクトの動画像を含むユーザ出力画像及び他ユーザ出力画像を生成してもよい。以下、ユーザ出力画像及び他ユーザ出力画像を、出力画像と総称する場合がある。例えば、表示処理部２７４は、通常オブジェクトは、出力画像の上から下に向かって落下する通常オブジェクトの動画像を含む出力画像を生成してもよい。この場合、通常オブジェクトは、落下開始から出力画像の下端まで落下する間、出力画像の表示領域内に表示され、出力画像の下端に落下した後に出力画像から消滅してもよい。なお、通常オブジェクトの移動ルートは、出力画像の、左から右の方向、右から左の方向、左上から左下の方向、またはこれら以外の方向のルートでもよく、また、直線軌道、円軌道、楕円軌道、螺旋軌道、またはこれら以外の軌道に沿ったルートでもよい。

【0098】

表示処理部２７４は、他ユーザからの追加オブジェクトの追加指示に含まれるオブジェクトＩＤが装着オブジェクトのオブジェクトＩＤである場合、ユーザ出力画像内に、装着指示に関する通知情報を表示する。表示処理部２７４は、ユーザからの装着指示に応じて、オブジェクトテーブルＴ２を参照して、追加指示に含まれるオブジェクトＩＤに関連付けられた装着オブジェクトの画像情報及び配置箇所を抽出する。次に、表示処理部２７４は、抽出した画像情報及び配置箇所に基づいて、装着オブジェクトを、配置箇所によって示される装着部位に装着したキャラクタオブジェクトを含むユーザ出力画像を生成する。

【0099】

また、表示処理部２７４は、ユーザの指示に応じて、ユーザがプレイするゲームを開始し、当該ゲームのゲーム画面を表示装置２３に表示する。ゲームが開始されると、表示処理部２７４は、ユーザのゲーム操作によるゲーム進行指示に応じて進行するゲームのゲーム画面を表示装置２３に表示し、ゲームの終了条件が満たされると、ゲーム画面の表示を終了する。ゲームの終了条件は、ゲームのルールに応じて予め定められており、例えば、ユーザのゲーム媒体（キャラクタ等）が対戦相手に勝利又は敗北したこと、ユーザのゲーム媒体が所定の目的地に到達したこと、又は、ユーザによって操作されるゲームオブジェクトが所定の状態となる（例えば、複数のコマ（ゲームオブジェクト）がゲームフィールド上の升目に並ぶ）こと等である。

【0100】

また、表示処理部２７４は、サーバ装置３から送信された他ユーザの出力情報に、他ユーザがプレイするゲームのゲーム画像データが含まれる場合、他ユーザがプレイするゲームのゲーム画像を表示装置２３に表示する。なお、他ユーザがプレイするゲームのゲーム画像が表示されているときには、当該他ユーザの他ユーザ出力画像は表示されないが、他ユーザがプレイするゲームのゲーム画像と当該他ユーザの他ユーザ出力画像とが同時に表示されてもよい。

【0101】

（音声出力部２７５）
音声出力部２７５は、他ユーザの出力情報に他ユーザの音声データが含まれる場合、表示処理部２７４による他ユーザ出力画像の表示とともに、音声データに基づいて生成される他ユーザの音声をスピーカ（図示せず）から音声出力する。これにより、他ユーザ出力画像に含まれる他ユーザのキャラクタオブジェクトの唇の動作中に、他ユーザの音声が出力されるため、ユーザは、音声を発しているような他ユーザのキャラクタオブジェクトを含む他ユーザ出力画像を見ることができる。

【0102】

（サーバ装置３）
図５は、サーバ装置３の概略構成の一例を示す図である。複数のユーザのそれぞれの端末装置２にコミュニケーションサービスを提供するサーバ装置３は、一のユーザの端末装置２から送信された出力情報及び各種の指示を示す情報を、一のユーザとは異なる他ユーザの端末装置２に送信する。そのために、サーバ装置３は、サーバ通信Ｉ／Ｆ３１と、サーバ記憶装置３２と、サーバ処理装置３３とを備える。例えば、一のユーザの端末装置２による情報の送信先の端末装置２は、受信した送信先情報に含まれるユーザＩＤによって示されるユーザの端末装置２である。

【0103】

サーバ通信Ｉ／Ｆ３１は、ハードウェア、ファームウェア、又はＴＣＰ／ＩＰドライバやＰＰＰドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。サーバ装置３は、サーバ通信Ｉ／Ｆ３１を介して、他の装置に情報を送信し且つ他の装置から情報を受信することができる。

【0104】

サーバ記憶装置３２は、例えば、ＲＯＭ、ＲＡＭ等の半導体メモリ装置である。サーバ記憶装置３２は、例えば、磁気ディスク、光ディスク、又はデータを記憶可能な前記以外の各種記憶装置でもよい。サーバ記憶装置３２は、サーバ処理装置３３における処理に用いられるオペレーティングシステムプログラム、ドライバプログラム、アプリケーションプログラム及びデータ等を記憶する。なお、サーバ記憶装置３２は、データとして、ユーザテーブルＴ１、オブジェクトテーブルＴ２、及びグループテーブルＴ３を記憶してもよい。

【0105】

サーバ処理装置３３は、サーバ記憶装置３２に記憶されているオペレーティングシステムプログラム、ドライバプログラム、及び制御プログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行するプロセッサである。サーバ処理装置３３は、例えば、ＣＰＵ、ＭＰＵ、ＤＳＰ、ＧＰＵ等の電子回路、又は各種電子回路の組み合わせである。サーバ処理装置３３は、ＡＳＩＣ、ＰＬＤ、ＦＰＧＡ、ＭＣＵ等の集積回路により実現されてもよい。図５においては、サーバ処理装置３３が単一の構成要素として図示されているが、サーバ処理装置３３は複数の物理的に別体のプロセッサの集合であってもよい。サーバ処理装置３３は、制御プログラムに含まれる各種命令を実行することにより、サーバ受信部３３１、サーバ送信部３３２として機能する。

【0106】

（サーバ受信部３３１）
サーバ受信部３３１は、複数のユーザのうちのいずれかユーザの端末装置２から送信された出力情報及び各種の指示を示す情報等を、サーバ通信Ｉ／Ｆ３１を介して受信する。なお、サーバ受信部３３１は、端末装置２から送信された出力情報及び各種の指示を示す情報とともに、送信先情報を受信してもよい。

【0107】

（サーバ送信部３３２）
サーバ送信部３３２は、サーバ受信部３３１によって受信された出力情報及び各種の指示を示す情報を、サーバ通信Ｉ／Ｆ３１を介して、同時に受信した送信先情報に含まれるユーザＩＤによって示される他ユーザの端末装置２に送信する。また、サーバ送信部３３２は、サーバ受信部３３１によって受信された各種の指示を示す情報を、サーバ通信Ｉ／Ｆ３１を介して、情報を送信したユーザによって指定された、１人又は複数の他ユーザの端末装置２に送信してもよい。

【0108】

（各種画面の例）
以下、図６～図１５を参照し、ユーザの端末装置２の表示装置２３に表示される各種画面の例について説明する。図６～図１５において、同一の符号が付されている複数の構成要素は、互いに等価な機能を有する構成要素である。

【0109】

図６（ａ）は、ユーザの端末装置２の表示装置２３に表示されるグループ作成画面６００の一例を示す図である。グループ作成画面６００には、他ユーザ表示領域６０１、選択オブジェクト６０２と、作成ボタン６０３と、が含まれる。例えば、グループ作成画面６００は、端末記憶装置２２に記憶された制御プログラムの実行に応じて表示されたホーム画面（図示せず）のグループ作成オブジェクト等がユーザの入力装置２４の操作によって選択された場合に表示される。

【0110】

他ユーザ表示領域６０１には、ユーザと所定の関係を有する他ユーザのそれぞれを示す他ユーザ情報が表示される。図６（ａ）に示される例では、ユーザの端末装置２の表示処理部２７４は、他ユーザのキャラクタオブジェクトのサムネイル画像及び他ユーザの名称を他ユーザ情報として表示する。

【0111】

選択オブジェクト６０２は、各他ユーザ情報によって示される各他ユーザを選択するための操作オブジェクトである。図６（ａ）に示される例では、ユーザの端末装置２の表示処理部２７４は、各他ユーザ情報に対応するチェックボックスオブジェクトを選択オブジェクト６０２として表示する。例えば、ユーザの入力装置２４の操作によって選択オブジェクト６０２が選択されると、選択オブジェクト６０２が「チェック」マークを含む表示となる。この場合、「チェック」マークを含む表示となっている選択オブジェクト６０２に対応する他ユーザ情報の他ユーザが選択された状態となる。また、「チェック」マークを含む表示となっている選択オブジェクト６０２がユーザの入力装置２４の操作によって選択されると、選択オブジェクト６０２が「チェック」マークを含まない表示となる。
この場合、「チェック」マークを含まない表示となっている選択オブジェクト６０２に対応する他ユーザ情報の他ユーザが選択されていない状態となる。選択オブジェクト６０２のそれぞれには、対応する他ユーザ情報に係る他ユーザのユーザＩＤが関連付けられている。

【0112】

作成ボタン６０３は、ユーザが新たにコミュニケーショングループを作成するためのボタンオブジェクト等である。ユーザによる入力装置２４の操作によって作成ボタン６０３が選択されると、端末装置２を操作するユーザと選択オブジェクト６０２において選択された状態の他ユーザとを所属ユーザとする新たなグループが作成される。例えば、ユーザの端末装置２の表示処理部２７４は、端末記憶装置２２に記憶されたユーザのユーザＩＤと、選択オブジェクト６０２において選択された状態の他ユーザに係る選択オブジェクト６０２に関連付けられた他ユーザのユーザＩＤと、を特定する。そして、表示処理部２７４は、新たに作成したグループＩＤに、特定されたユーザのユーザＩＤ及び他ユーザのユーザＩＤを所属ユーザとして関連付けてグループテーブルＴ３に記憶する。この際、表示処理部２７４は、新たに作成したグループＩＤに対して、自動的に作成したグループの名称を対応付けてもよく、又は、ユーザによって入力されたグループの名称を対応付けてもよい。

【0113】

作成ボタン６０３の選択に応じて新たなグループが作成されると、表示処理部２７４は、新たなグループの所属ユーザによる情報交換画面７００を表示する。図７（ａ）は、ユーザの端末装置２の表示装置２３に表示される情報交換画面７００の一例を示す図である。情報交換画面７００には、新たなグループの所属ユーザのそれぞれが入力したテキスト又は画像等の情報を表示する表示領域７０１と、表示領域７０１に表示された情報を入力した所属ユーザを示す情報（キャラクタオブジェクトのサムネイル画像等）７０２と、ユーザが新たな表示領域７０１に表示させるテキスト又は画像を入力するための入力オブジェクト７０３と、コミュニケーションサービスを開始するための開始オブジェクト７０４が含まれる。

【0114】

ユーザの端末装置２の送信部２７２は、情報交換画面７００が表示されると、情報交換画面の表示指示を、新たなグループに関する情報及び送信先情報とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。新たなグループに関する情報は、新たなグループのグループＩＤ、名称、及び所属ユーザのそれぞれのユーザＩＤである。送信先情報には、新たなグループの所属ユーザのうち端末装置２を操作するユーザを除く他ユーザのそれぞれのユーザＩＤが含まれる。サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、情報交換画面の表示指示、新たなグループに関する情報及び送信先情報を受信する。なお、サーバ受信部３３１は、受信した送信先情報をサーバ記憶装置３２に記憶してもよい。サーバ装置３のサーバ送信部３３２は、情報交換画面の表示指示及び新たなグループに関する情報を、送信先情報に含まれるユーザＩＤによって示される他ユーザの端末装置２にサーバ通信Ｉ／Ｆ３１を介して送信する。他ユーザの端末装置２は、サーバ装置３経由でユーザの端末装置２から送信された情報交換画面の表示指示を受信すると、新たなグループの所属ユーザによる情報の交換が可能な情報交換画面７００を表示することができる。

【0115】

図７（ａ）に説明を戻す。例えば、いずれかの所属ユーザの操作によって入力オブジェクト７０３に新たな情報が入力されると、情報を入力したユーザの端末装置２によって表示される情報交換画面７００に新たな情報を表示する表示領域７０１が追加される。また、情報を入力したユーザの端末装置２の送信部２７２は、情報を入力したユーザ以外の所属ユーザの端末装置２に、サーバ装置３経由で、入力された新たな情報を送信する。これにより、情報を入力したユーザ以外の所属ユーザである他ユーザの端末装置２に表示される情報交換画面７００においても、新たな情報を表示する表示領域７０１が追加される。

【0116】

開始オブジェクト７０４は、新たなグループの所属ユーザのそれぞれが参加可能なコミュニケーションサービスを開始するためのボタンオブジェクト等である。ユーザによる入力装置２４の操作によって開始オブジェクト７０４が選択されると、情報交換画面７００による情報交換が可能なグループをコミュニケーショングループとするコミュニケーションサービスの開始処理が実行される。以下、ユーザによる開始オブジェクト７０４の選択に応じた開始処理の一例について説明する。

【0117】

まず、ユーザの端末装置２の表示処理部２７４は、コミュニケーショングループに所属する各ユーザの端末装置２によって表示可能なコミュニケーション画面８１０（図８（ｂ））を表示する。また、表示処理部２７４は、コミュニケーショングループのグループＩＤを、コミュニケーションサービスを開始したグループのグループＩＤとして端末記憶装置２２に記憶する。さらに、表示処理部２７４は、ユーザのユーザＩＤをコミュニケーションサービスに参加中のユーザのユーザＩＤとして端末記憶装置２２に記憶する。なお、コミュニケーショングループに所属する他ユーザの全てが未だコミュニケーションサービスに参加していない場合、コミュニケーション画面８１０においてユーザのユーザ出力情報のみが表示される。

【0118】

次に、ユーザの端末装置２の送信部２７２は、コミュニケーションサービスの開始指示を、端末記憶装置２２に記憶されたユーザのユーザＩＤ、コミュニケーショングループに関する情報及び／又は送信先情報とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。コミュニケーショングループに関する情報は、コミュニケーショングループのグループＩＤ、名称、及び所属ユーザのそれぞれのユーザＩＤである。送信先情報には、コミュニケーショングループの所属ユーザのうち端末装置２を操作するユーザを除く他ユーザのそれぞれのユーザＩＤが含まれる。なお、サーバ記憶装置３２に送信先情報が記憶されている場合、送信先情報が送信されなくてもよい。サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、開始指示、ユーザＩＤ、コミュニケーショングループに関する情報及び送信先情報を受信する。サーバ装置３のサーバ送信部３３２は、開始指示、ユーザＩＤ及びコミュニケーショングループに関する情報を、送信先情報に含まれるユーザＩＤによって示される他ユーザの端末装置２にサーバ通信Ｉ／Ｆ３１を介して送信する。

【0119】

他ユーザの端末装置２の受信部２３７は、サーバ装置３から、ユーザの端末装置２から送信された開始指示、ユーザＩＤ及びコミュニケーショングループに関する情報を受信する。受信部２３７は、コミュニケーショングループに関する情報のうちのグループＩＤを、コミュニケーションサービスを開始したグループのグループＩＤとして端末記憶装置２２に記憶する。さらに、表示処理部２７４は、送信されたユーザＩＤをコミュニケーションサービスに参加中のユーザのユーザＩＤとして端末記憶装置２２に記憶する。他ユーザの端末装置２の表示処理部２７４は、受信したコミュニケーショングループに関する情報に基づき、通知画面（図示せず）を表示する。表示処理部２７４は、ユーザによる通知画面内の所定のオブジェクトの選択に応じて、コミュニケーションサービスに参加するためのグループ選択画面７１０（図７（ｂ））を表示装置２３に表示する。以上により、開始処理が終了する。なお、他ユーザの端末装置２の表示処理部２７４は、通知画面に後述する参加ボタン８０５を含めてもよい。これにより、グループ選択画面７１０を表示することなく、他のユーザは、即座にコミュニケーションサービスに参加することが可能となる。

【0120】

開始処理は、ユーザによる入力装置２４の操作によってグループ作成画面６００の作成ボタン６０３が選択された場合に実行されてもよい。すなわち、ユーザによる作成ボタン６０３の選択に応じて、グループ作成画面６００において作成された新たなグループをコミュニケーショングループとするコミュニケーションサービスの開始処理が実行されてもよい。この場合、情報交換画面７００は表示されない。

【0121】

また、開始処理は、グループ作成画面６００において作成された新たなグループをコミュニケーショングループとするコミュニケーションサービスの開始処理に限らない。例えば、既に作成されたグループをコミュニケーショングループとするコミュニケーションサービスの開始処理が実行されてもよい。例えば、図６（ｂ）は、いずれかのユーザによって作成されたコミュニケーショングループを選択するためのグループ選択画面６１０の一例を示す図である。例えば、グループ選択画面６１０は、端末記憶装置２２に記憶された制御プログラムの実行に応じて表示されたホーム画面（図示せず）のグループ選択オブジェクト等がユーザの入力装置２４の操作によって選択された場合に表示される。

【0122】

ユーザの端末装置２に表示されたグループ選択画面６１０には、複数のコミュニケーショングループのいずれかを選択するためのグループ表示領域６１１が含まれる。グループ表示領域６１１には、既に作成済み且つユーザが所属するコミュニケーショングループのそれぞれを示すグループ情報が表示される。図６（ｂ）に示される例では、ユーザの端末装置２の表示処理部２７４は、コミュニケーショングループの所属ユーザのそれぞれのサムネイル画像及びグループの名称をグループ情報として表示する。図６（ｂ）に示される例では、所属ユーザのうち他ユーザのそれぞれのサムネイル画像が表示されるが、所属ユーザ全員のそれぞれのサムネイル画像が表示されてもよい。なお、コミュニケーショングループに、ユーザ以外に１人の他ユーザしか含まれていない場合、図６（ｂ）に示されるように、グループの名称ではなく、当該１人の他ユーザの名称が表示されてもよい。

【0123】

ユーザによる入力装置２４の操作によってグループ表示領域６１１に含まれる一のグループ情報が選択されると、選択されたグループ情報に対応するコミュニケーショングループの所属ユーザによる情報交換画面７００が表示される。情報交換画面７００には、コミュニケーショングループの所属ユーザのそれぞれが入力したテキスト又は画像等の情報が含まれる。この場合においても、コミュニケーショングループの所属ユーザのうちの他ユーザの端末装置２には、サーバ装置３経由で、情報交換画面の表示指示、コミュニケーショングループに関する情報が送信され、他ユーザの端末装置２においても情報交換画面７００が表示される。

【0124】

そして、情報交換画面７００において、ユーザによって開始オブジェクト７０４が選択された場合、情報交換画面７００において情報交換を行うコミュニケーショングループによるコミュニケーションサービスの開始処理が実行される。開始処理が実行されると、ユーザの端末装置２の表示処理部２７４は、コミュニケーショングループに所属する各ユーザの端末装置２によって表示可能なコミュニケーション画面８１０（図８（ｂ））を表示する。また、他ユーザの端末装置２の表示処理部２７４は、通知画面（図示せず）を表示し、通知画面に対する他のユーザの操作に応じて、コミュニケーションサービスに参加するためのグループ選択画面７１０（図７（ｂ））を表示装置２３に表示する。なお、この場合においても、他ユーザの端末装置２の表示処理部２７４は、通知画面に後述する参加ボタン８０５を含めてもよい。

【0125】

なお、この場合においても、開始処理は、ユーザによる入力装置２４の操作によってグループ選択画面６１０において一のグループ情報が選択された場合に実行されてもよい。すなわち、ユーザによる一のグループ情報の選択に応じて、選択されたグループ情報に対応するコミュニケーショングループによるコミュニケーションサービスの開始処理が実行されてもよい。この場合、情報交換画面７００は表示されない。

【0126】

次に、既に開始されたコミュニケーションサービスに参加していないユーザの参加方法について説明する。図７（ｂ）は、ユーザの端末装置２の表示装置２３に表示されるグループ選択画面７１０の一例を示す図である。例えば、グループ選択画面７１０は、表示された通知画面内の所定のオブジェクトの選択に応じて表示される。また、グループ選択画面７１０は、端末記憶装置２２に記憶された制御プログラムの実行に応じて表示されたホーム画面のグループ選択オブジェクト等がユーザの入力装置２４の操作によって選択された場合に表示されてもよい。

【0127】

グループ選択画面７１０のグループ表示領域７１１において、コミュニケーションサービスを開始しているコミュニケーショングループを示すグループ情報が、他のグループ情報と判別可能に表示される。図７（ｂ）に示される例では、最も上に表示されているグループ情報が、コミュニケーションサービスを開始しているコミュニケーショングループを示すものである。例えば、コミュニケーショングループの所属ユーザのそれぞれのサムネイル画像に重畳して又は近傍に、コミュニケーションサービスに参加している所属ユーザの数を示す情報が表示される。また、コミュニケーショングループの名称の近傍に、コミュニケーションサービスを示すマーク画像７１２が表示される。

【0128】

ユーザによる入力装置２４の操作によってグループ表示領域７１１に含まれるグループ情報のうち、コミュニケーションサービスを開始しているコミュニケーショングループを示すグループ情報が選択されると、選択されたグループ情報に対応するコミュニケーショングループの所属ユーザによる情報交換画面８００が表示される。

【0129】

図８（ａ）は、ユーザの端末装置２の表示装置２３に表示される情報交換画面８００の一例を示す図である。情報交換画面８００には、コミュニケーションサービスを開始しているコミュニケーショングループの所属ユーザのそれぞれが入力したテキスト又は画像等の情報を表示する表示領域８０１ａ～８０１ｂと、表示領域８０１ａ～８０１ｂのそれぞれに表示された情報を入力した所属ユーザを示す情報（キャラクタオブジェクトのサムネイル画像等）８０２ａ～８０２ｂと、ユーザが新たな表示領域８０１に表示させるテキスト又は画像を入力するための入力オブジェクト８０３と、既に開始されているコミュニケーションサービスを示すサービス表示領域８０４と、既に開始されているコミュニケーションサービスに参加するための参加ボタン８０５が含まれる。

【0130】

図８（ａ）に示されるサービス表示領域８０４には、コミュニケーションサービスに参加している３人のユーザのキャラクタオブジェクトのサムネイル画像が表示される。図８（ａ）に示される表示領域８０１ｂには、コミュニケーションサービスを開始したことを示す情報が表示される。参加ボタン８０５がユーザによって選択されることによって参加処理が実行される。以下、参加処理の一例について説明する。

【0131】

ユーザによる入力装置２４の操作によって参加ボタン８０５が選択されると、まず、ユーザの端末装置２の表示処理部２７４は、端末記憶装置２２に記憶されたユーザのユーザＩＤを、サービス表示領域８０４に関するコミュニケーションサービスに参加中のユーザのユーザＩＤとして端末記憶装置２２に記憶する。次に、表示処理部２７４は、コミュニケーションサービスに参加中の全てのユーザのユーザ出力画像を含むコミュニケーション画面８１０（図８（ｂ））を表示する。

【0132】

次に、ユーザの端末装置２の送信部２７２は、コミュニケーションサービスの参加指示を、端末記憶装置２２に記憶されたユーザのユーザＩＤ、コミュニケーショングループに関する情報及び／又は送信先情報とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。コミュニケーショングループに関する情報は、コミュニケーショングループのグループＩＤ、名称、及び所属ユーザのそれぞれのユーザＩＤである。送信先情報には、コミュニケーショングループの所属ユーザのうち端末装置２を操作するユーザを除く他ユーザのそれぞれのユーザＩＤが含まれる。サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、参加指示、ユーザＩＤ、コミュニケーショングループに関する情報及び／又は送信先情報を受信する。サーバ装置３のサーバ送信部３３２は、参加指示、ユーザＩＤ及びコミュニケーショングループに関する情報を、送信先情報に含まれるユーザＩＤによって示される他ユーザの端末装置２にサーバ通信Ｉ／Ｆ３１を介して送信する。

【0133】

他ユーザの端末装置２の受信部２３７は、サーバ装置３から、ユーザの端末装置２から送信された参加指示、ユーザＩＤ及びコミュニケーショングループに関する情報を受信する。受信部２３７は、受信したユーザＩＤを、コミュニケーションサービスに参加中のユーザのユーザＩＤとして端末記憶装置２２に記憶する。当該端末装置においてコミュニケーション画面８１０が表示されている場合、他ユーザの端末装置２の表示処理部２７４は、コミュニケーションサービスに参加中の全てのユーザのユーザ出力画像を含むコミュニケーション画面８１０を表示する。以上により、参加処理が終了する。

【0134】

選択処理は、ユーザによる入力装置２４の操作によってグループ選択画面７１０においてグループ情報が選択された場合に実行されてもよい。すなわち、ユーザによるグループ情報の選択に応じて、グループ情報に対応するコミュニケーショングループが参加可能なコミュニケーションサービスへの参加処理が実行されてもよい。この場合、情報交換画面８００は表示されない。

【0135】

コミュニケーションサービスの開始又は参加の実施形態は、上述した例に限らない。例えば、ユーザによる開始オブジェクト７０４の選択に応じた開始処理とは異なる他の開始処理が実行されてもよい。他の開始処理は、ホーム画面等の所定の画面において、コミュニケーションサービスの開始を指定するための所定の表示オブジェクトがユーザによって選択された場合に実行される。なお、所定の表示オブジェクトは、ユーザのキャラクタオブジェクトのサムネイル画像等が選択された場合に表示されてもよく、また、所定の画面のメニュー項目に含まれていてもよい。他の開始処理は、所定の開始条件が満たされた場合に自動的に実行されてもよい。例えば、所定の開始条件は、現在時刻が予め定められた時刻となったこと、前回のコミュニケーションサービスの終了から所定の時間が経過したこと、ユーザの相互フォロワー数が所定数を超えたこと等である。以下、他の開始処理の一例について説明する。

【0136】

まず、ユーザの端末装置２の送信部２７２は、コミュニケーションサービスの開始指示を、端末記憶装置２２に記憶されたユーザのユーザＩＤ、及び／又は送信先情報とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。また、送信部２７２は、ユーザのユーザＩＤをコミュニケーションサービスに参加中のユーザのユーザＩＤとして端末記憶装置２２に記憶する。送信先情報には、ユーザと所定の関係を有する一又は複数の他ユーザのそれぞれのユーザＩＤが含まれる。例えば、送信先情報には、ユーザの相互フォロワーである一又は複数の他のユーザのユーザＩＤが含まれてもよい。また、送信先情報には、ユーザの相互フォロワーである一又は複数の他のユーザのユーザＩＤに替えて又は加えて、ユーザの相互フォロワーである所定ユーザと相互フォローの関係にある他ユーザのユーザＩＤが含まれてもよい。

【0137】

サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、開始指示、ユーザＩＤ及び／又は送信先情報を受信する。サーバ装置３のサーバ送信部３３２は、開始指示、ユーザＩＤ及び送信先情報を、送信先情報に含まれるユーザＩＤによって示される他ユーザの端末装置２にサーバ通信Ｉ／Ｆ３１を介して送信する。他ユーザの端末装置２の受信部２３７は、サーバ装置３から、ユーザの端末装置２から送信された開始指示、ユーザＩＤ及び送信先情報を受信する。受信部２３７は、送信されたユーザＩＤをコミュニケーションサービスに参加中のユーザのユーザＩＤとして端末記憶装置２２に記憶する。他ユーザの端末装置２の表示処理部２７４は、受信したユーザＩＤに基づいて通知画面（図示せず）を表示装置２３に表示する。通知画面には、受信したユーザＩＤによって示されるユーザからコミュニケーションサービスの参加を促す情報と参加ボタン等が含まれる。

【0138】

他ユーザによる入力装置２４の操作によって通知画面内の参加ボタンが選択されると、他ユーザの端末装置２の表示処理部２７４は、端末記憶装置２２に記憶された他ユーザのユーザＩＤを、サービス表示領域８０４に関するコミュニケーションサービスに参加中のユーザのユーザＩＤとして端末記憶装置２２に記憶する。次に、表示処理部２７４は、コミュニケーションサービスに参加中の全てのユーザのユーザ出力画像を含むコミュニケーション画面８１０（図８（ｂ））を表示する。

【0139】

次に、他ユーザの端末装置２の送信部２７２は、コミュニケーションサービスの参加指示を、端末記憶装置２２に記憶された他ユーザのユーザＩＤ及び／又は送信先情報とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。送信先情報は、先に受信部２３７により受信された送信先情報に含まれるユーザＩＤから、送信先情報を送信する端末装置２の他ユーザのユーザＩＤを送信先情報から削除し、同時に受信部２３７により受信されたユーザＩＤを加えたものである。サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、参加指示、ユーザＩＤ、及び／又は送信先情報を受信する。サーバ装置３のサーバ送信部３３２は、参加指示、ユーザＩＤ、及び送信先情報を、送信先情報に含まれるユーザＩＤによって示される他ユーザの端末装置２にサーバ通信Ｉ／Ｆ３１を介して送信する。

【0140】

参加指示の送信先のユーザの端末装置２の受信部２３７は、サーバ装置３から、ユーザの端末装置２から送信された参加指示、ユーザＩＤ、及び送信先情報を受信する。受信部２３７は、受信したユーザＩＤを、コミュニケーションサービスに参加中のユーザのユーザＩＤとして端末記憶装置２２に記憶する。当該端末装置２においてコミュニケーション画面８１０が表示されている場合、端末装置２の表示処理部２７４は、コミュニケーションサービスに参加中の全てのユーザのユーザ出力画像を含むコミュニケーション画面８１０を表示する。以上により、一連の参加処理が終了する。

【0141】

なお、ユーザと所定の関係を有する他ユーザとのコミュニケーションサービスの開始又は参加の実施形態は、上述した例に限らない。例えば、ユーザによってコミュニケーションサービスの開始を指定するための所定の表示オブジェクトがユーザによって選択された場合、一又は複数のユーザの相互フォロワーである他ユーザを示す情報を含む選択画面が表示されてもよい。この場合、ユーザによっていずれかの他ユーザを示す情報が選択されると、選択された他ユーザとのコミュニケーションを開始する開始指示に基づく他の開始処理が実行されてもよい。さらにこの場合、選択された他ユーザとの情報交換画面が表示され、当該情報交換画面内の開始ボタンが選択されることにより、他ユーザとのコミュニケーションを開始する開始指示に基づく他の開始処理が実行されてもよい。

【0142】

従来の情報システムでは、ユーザの相互フォロワー等のユーザと所定の関係を有する他ユーザとのコミュニケーションの開始及び／又は参加指示を、ユーザが簡易なインターフェースを用いて行うことができなかった。本実施形態において開示される情報システム１では、上述の他の開始処理が実行されることにより、コミュニケーションの開始及び／又は参加指示に係るユーザインタフェースを向上させ、サーバ装置３及び端末装置２間の通信負荷を低減させることが可能となる。

【0143】

図８（ｂ）は、端末装置２の表示装置２３に表示されるコミュニケーション画面８１０の一例を示す図である。コミュニケーション画面８１０は、端末装置２を操作するユーザを所属ユーザとして含むコミュニケーショングループのコミュニケーション画面である。以下、端末装置２を操作するユーザをユーザＡと称し、コミュニケーション画面８１０に対応するコミュニケーションサービスに参加中の、ユーザＡ以外のユーザを、ユーザＢ１、ユーザＢ２、ユーザＢ３、・・・と称する。なお、ユーザＢ１、ユーザＢ２、ユーザＢ３、・・・を、ユーザＢと総称する場合がある。

【0144】

コミュニケーション画面８１０には、ユーザＡのキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａが少なくとも含まれる。図８（ｂ）に示される例では、ユーザＡ以外で、コミュニケーションサービスに参加中のユーザが３人（ユーザＢ１、ユーザＢ２、ユーザＢ３）いる。すなわち、ユーザＢ１、ユーザＢ２、及びユーザＢ３のそれぞれのキャラクタオブジェクト８１１ｂ１、８１１ｂ２、８１１ｂ３を含むユーザ出力画像８１２ｂ１、８１２ｂ２、８１２ｂ３がコミュニケーション画面８１０に含まれる。以下、キャラクタオブジェクト８１１ｂ１、８１１ｂ２，８１１ｂ３を、キャラクタオブジェクト８１１ｂと総称し、ユーザ出力画像８１２ｂ１、８１２ｂ２、８１２ｂ３を、ユーザ出力画像８１２ｂと総称する場合がある。なお、ユーザＢは、ユーザＡにとって他ユーザであり、ユーザＡの端末装置２に表示されるユーザＢのユーザ出力画像８１２ｂは、他ユーザ出力画像である。

【0145】

ユーザＡ以外で、コミュニケーションサービスに参加中のユーザがいない場合、コミュニケーション画面８１０にユーザ出力画像８１２ａのみが含まれ、ユーザＢがコミュニケーションサービスに参加するたびに、当該ユーザＢのユーザ出力画像８１２ｂが新たにコミュニケーション画面８１０に含まれる。コミュニケーションサービスに参加可能なユーザ数に上限はなく、例えば、ユーザＡ以外に９人のユーザＢがコミュニケーションサービスに参加している場合、ユーザＡのユーザ出力画像８１２ａとともに、９人のユーザＢのそれぞれのユーザ出力画像８１２ｂ１、８１２ｂ２，８１２ｂ３、・・・８１２ｂ９がコミュニケーション画面８１０に含まれる。

【0146】

キャラクタオブジェクト８１１ａは、生成部２７１によって生成されたユーザＡのモーションデータと、ユーザテーブルＴ１のユーザＡのユーザＩＤに関連付けられたキャラクタオブジェクト及び使用オブジェクトとに基づいて、表示処理部２７４によって生成されたユーザＡのキャラクタオブジェクトのアニメーション（動画像）である。なお、生成部２７１によって生成されたユーザＡのモーションデータは、ユーザＢの端末装置２に送信される出力情報に含まれるモーションデータと同一である。ユーザＡの出力情報には、ユーザＡのモーションデータとともにユーザＡの音声データが含まれる。生成部２７１によって生成されたユーザＡのモーションデータにユーザＡのフェイスモーションデータが含まれる場合、ユーザＡの表情の動きに同期して表情が変化するキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａが表示される。例えば、ユーザＡが音声を発しているときには、唇が動作しているキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａが表示される。また、生成部２７１によって生成されたユーザＡのモーションデータにユーザＡのボディモーションデータが含まれる場合、ユーザＡの体の動きに同期して、対応する部位が動作するキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａが表示される。

【0147】

なお、ユーザＡの端末装置２の送信部２７２は、ユーザＡの出力情報を、送信先情報（コミュニケーショングループに含まれる各ユーザＢ（ユーザＢ１～ユーザＢ３）のユーザＩＤ）とともに、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。次に、サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、ユーザＡの端末装置２から送信されたユーザＡの出力情報を受信する。次に、サーバ装置３のサーバ送信部３３２は、受信したユーザＢ（ユーザＢ１～ユーザＢ３）のユーザＩＤを参照し、サーバ通信Ｉ／Ｆ３１を介して、ユーザＡの出力情報をユーザＢ（ユーザＢ１～ユーザＢ３）の端末装置２に送信する。そして、ユーザＢの端末装置２の受信部２７３によって、端末通信Ｉ／Ｆ２１を介して出力情報が受信されると、ユーザＢの端末装置２の表示処理部２７４は、出力情報に含まれるユーザＩＤによって示されるユーザＡのモーションデータに基づくキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａを表示する。

【0148】

キャラクタオブジェクト８１１ｂは、受信部２７３によって受信されたユーザＢの出力情報に含まれるモーションデータと、ユーザテーブルＴ１のユーザＢのユーザＩＤに関連付けられたキャラクタオブジェクトとに基づいて、表示処理部２７４によって生成されたユーザＢのキャラクタオブジェクトのアニメーション（動画像）である。受信部２７３によって受信されたユーザＢのモーションデータにユーザＢのフェイスモーションデータが含まれる場合、ユーザＢの表情の動きに同期して表情が変化するキャラクタオブジェクト８１１ｂを含むユーザ出力画像８１２ｂが表示される。例えば、ユーザＢが音声を発した場合では、唇が動作しているキャラクタオブジェクト８１１ｂを含むユーザ出力画像８１２ｂが表示される。また、生成部２７１によって生成されたユーザＢのモーションデータにユーザＢのボディモーションデータが含まれる場合、ユーザＢの体の動きに同期して、対応する部位が動作するキャラクタオブジェクト８１１ｂを含むユーザ出力画像８１２ｂが表示される。受信部２７３によって受信されたユーザＢの出力情報にユーザＢの音声データが含まれる場合、表示処理部２７４によってユーザ出力画像８１２ｂが表示されるとともに、音声出力部２７５によって音声データに基づいて生成されるユーザＢの音声が音声出力される。

【0149】

このように、ユーザ出力画像８１２ａ及びユーザ出力画像８１２ｂを含むコミュニケーション画面８１０が表示されることによって、ユーザＡは、音声を発しているようなユーザＢのキャラクタオブジェクト８１１ｂを見ながらユーザＢの音声を聞くことができる。また、ユーザＡのキャラクタオブジェクト及び音声データは、ユーザＢの端末装置２によって出力される。これにより、コミュニケーションサービスに参加しているユーザＡとユーザＢは、キャラクタオブジェクトを介してコミュニケーションすることが可能となる。

【0150】

コミュニケーション画面８１０には、追加ボタン８１３及びゲームボタン８１４が含まれる。図８（ｂ）に示される例では、追加ボタン８１３及びゲームボタン８１４は、ユーザ出力画像８１２ａの表示領域内に配置されているが、ユーザ出力画像８１２ａの表示領域外に表示されてもよい。また、追加ボタン８１３及びゲームボタン８１４は、所定の表示条件が満たされた場合に、所定時間だけ表示されるように表示処理部２７４によって表示制御されてもよい。

【0151】

追加ボタン８１３は、コミュニケーション画面８１０に含ませる追加オブジェクトを選択するための選択画面１２００の表示を指示するためのボタンオブジェクト等のオブジェクト画像である。ユーザＡによる入力装置２４の操作によって追加ボタン８１３が選択されると、選択画面１２００が表示される。選択画面１２００の詳細は後述する。

【0152】

ゲームボタン８１４は、ゲームの開始を指示するためのボタンオブジェクト等のオブジェクト画像である。ユーザＡによる入力装置２４の操作によってゲームボタン８１４が選択されると、入力装置２４はゲーム開始指示を表示処理部２７４に入力する。端末処理装置２７は、入力装置２４から入力されたゲーム開始指示を取得すると、端末記憶装置２２に記憶されている制御プログラム（ゲームプログラム）に含まれる各種命令を実行する。これにより、端末処理装置２７の表示処理部２７４は、ゲームを開始し、開始したゲームのゲーム画面を含むゲーム表示オブジェクト１５００（図１５（ａ））を表示装置２３に表示する機能を実現する。ゲーム画面を含むゲーム表示オブジェクト１５００の詳細は後述する。

【0153】

ユーザＡは、キャラクタオブジェクト８１１ａに、新たな装着オブジェクトを装着させたい場合、又は、キャラクタオブジェクト８１１ａに装着されている装着オブジェクトを、新たな装着オブジェクトに変更したい場合、キャラクタオブジェクト８１１ａを選択する操作を行う。ユーザＡによる入力装置２４の操作によってキャラクタオブジェクト８１１ａが選択されると、コミュニケーション画面８１０の表示が終了し、コミュニケーション画面９００（図９（ａ））が表示される。なお、コミュニケーション画面９００の表示は、ユーザＡによる入力装置２４の操作によってユーザ出力画像８１２ａが選択された場合に実行されてもよい。

【0154】

図９（ａ）は、端末装置２の表示装置２３に表示されるコミュニケーション画面９００の他の一例を示す図である。コミュニケーション画面９００は、コミュニケーション画面８１０（図８（ｂ））に含まれる、ユーザＡによる入力装置２４の操作によってキャラクタオブジェクト８１１ａ又はユーザ出力画像８１２ａが選択された場合に表示される。

【0155】

コミュニケーション画面９００では、ユーザＡのキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａが全面に表示される。また、ユーザ出力画像８１２ａに重畳して、ユーザＢ１、ユーザＢ２、ユーザＢ３のそれぞれのキャラクタオブジェクト８１１ｂ１、８１１ｂ２、８１１ｂ３を含むユーザ出力画像９０１が表示される。なお、コミュニケーション画面９００において、ユーザ出力画像９０１が表示されなくてもよい。この場合、ユーザＢ１、ユーザＢ２、ユーザＢ３のそれぞれの音声データが出力されてもよい。

【0156】

さらに、コミュニケーション画面９００には、追加ボタン８１３及びゲームボタン８１４とともに、変更ボタン９０２及び画面終了ボタン９０３が含まれる。なお、コミュニケーション画面９００において、追加ボタン８１３及びゲームボタン８１４が含まれなくてもよい。

【0157】

変更ボタン９０２は、選択画面９１０（図９（ｂ））の表示を指示するためのボタンオブジェクト等のオブジェクト画像である。ユーザＡによる入力装置２４の操作によって変更ボタン９０２が選択されると、キャラクタオブジェクト８１１ａに装着させる新たな装着オブジェクトを選択するための選択画面９１０が表示される。選択画面９１０の詳細は後述する。

【0158】

画面終了ボタン９０３は、コミュニケーション画面９００の表示の終了を指示するためのボタンオブジェクト等のオブジェクト画像である。ユーザＡによる入力装置２４の操作によって画面終了ボタン９０３が選択されると、コミュニケーション画面９００の表示が終了し、コミュニケーション画面８１０（図８（ｂ））が表示される。

【0159】

図９（ｂ）は、端末装置２の表示装置２３に表示される選択画面９１０の一例を示す図である。選択画面９１０では、コミュニケーション画面９００（図９（ａ））と同様に、ユーザＡのキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａが全面に表示される。また、選択画面９１０には、配置候補オブジェクト９１１、及び画面終了ボタン９１２が含まれる。

【0160】

オブジェクトテーブルＴ２に示されるように、各装着オブジェクトが配置される配置箇所は、予め定められた複数の配置箇所のうちのいずれかの配置箇所である。図９（ｂ）に示される例では、複数の配置箇所のそれぞれを示す複数の配置候補オブジェクト９１１が選択画面９１０に含まれる。なお、複数の配置候補オブジェクト９１１は、各装着オブジェクトが属する複数のカテゴリ（種類）に対応するものでもよい。選択画面９１０に表示される配置候補オブジェクト９１１の数は、５つに限らない。端末装置２の表示処理部２７４は、複数の配置候補オブジェクト９１１を示す画像の一部を選択画面９１０内に含めることができない場合、配置候補オブジェクト９１１をスクロール可能に表示してもよい。この場合、ユーザＡによるスワイプ操作（例えば、指が画面に接しながら当該指が画面下から上に移動する操作）に応じて、選択画面９１０に現在表示されていない配置候補オブジェクト９１１が、選択画面９１０内にスクロール表示される。

【0161】

ユーザＡは、まず、キャラクタオブジェクト８１１ａに装着させたい装着オブジェクトの配置箇所を選択する。すなわち、ユーザＡによる入力装置２４の操作によって複数の配置候補オブジェクト９１１のいずれかが選択されると、選択された配置候補オブジェクト９１１に対応する配置候補に関連付けられたユーザＡの装着オブジェクトを選択するための選択画面１０００が表示される。

【0162】

画面終了ボタン９１２は、選択画面９１０の表示の終了を指示するためのボタンオブジェクト等のオブジェクト画像である。ユーザＡによる入力装置２４の操作によって画面終了ボタン９１２が選択されると、選択画面９１０の表示が終了し、コミュニケーション画面８１０（図８（ｂ））が表示される。

【0163】

図１０（ａ）は、端末装置２の表示装置２３に表示される選択画面１０００の一例を示す図である。選択画面１０００では、コミュニケーション画面９００（図９（ａ））と同様に、ユーザＡのキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａが全面に表示される。また、選択画面１０００には、キャラクタオブジェクト８１１ａに装着させる装着オブジェクトの候補となる装着候補オブジェクト１００１及び画面終了ボタン１００２が含まれる。

【0164】

装着候補オブジェクト１００１は、選択画面９１０（図９（ｂ））において選択された配置候補オブジェクト９１１に対応する配置候補に関連付けられたユーザＡの保有オブジェクトのオブジェクトＩＤに対応する選択オブジェクトである。図１０（ａ）に示される例では、３つの保有オブジェクトのオブジェクトＩＤのそれぞれに対応する３つの装着候補オブジェクト１００１が選択画面１０００に含まれる。選択画面１０００に表示される装着候補オブジェクト１００１の数は、３つに限らない。端末装置２の表示処理部２７４は、複数の装着候補オブジェクト１００１を示す画像の一部を選択画面１０００内に含めることができない場合、装着候補オブジェクト１００１をスクロール可能に表示してもよい。この場合、ユーザＡによるスワイプ操作（例えば、指が画面に接しながら当該指が画面下から上に移動する操作）に応じて、選択画面１０００に現在表示されていない装着候補オブジェクト１００１が、選択画面１０００内にスクロール表示される。

【0165】

ユーザＡによる入力装置２４の操作によって複数の装着候補オブジェクト１００１のいずれかが選択されると、入力装置２４は、変更指示を端末処理装置２７に入力する。入力装置２４は、変更指示とともに、選択された装着候補オブジェクト１００１に対応するオブジェクトＩＤを端末処理装置２７に入力する。以下、変更指示に応じた変更処理の一例について説明する。

【0166】

まず、表示処理部２７４は、入力装置２４から入力された変更指示及びオブジェクトＩＤを取得すると、取得したオブジェクトＩＤを使用オブジェクトとしてユーザＡのユーザＩＤに関連付けてユーザテーブルＴ１に記憶する。なお、ユーザテーブルＴ１において、取得したオブジェクトＩＤの装着オブジェクトと同じ装着箇所の他の使用オブジェクトのオブジェクトＩＤが記憶されている場合、表示処理部２７４は、当該他の使用オブジェクトのオブジェクトＩＤをユーザテーブルＴ１から削除して、取得したオブジェクトＩＤを使用オブジェクトとしてユーザＡのユーザＩＤに関連付けてユーザテーブルＴ１に記憶する。表示処理部２７４は、生成部２７１によって生成されたユーザＡのモーションデータと、ユーザテーブルＴ１のユーザＡのユーザＩＤに関連付けられたキャラクタオブジェクト及び使用オブジェクトとに基づいて、ユーザＡのキャラクタオブジェクト１０１１ａのアニメーション（動画像）を含むユーザ出力画像１０１２ａを生成して、ユーザ出力画像１０１２ａを含む選択画面１０１０（図１０（ｂ））を表示する。これにより、新たな装着オブジェクトを装着したキャラクタオブジェクト１０１１ａを含むユーザ出力画像１０１２ａが表示される。

【0167】

次に、送信部２７２は、入力装置２４から入力された変更指示及びオブジェクトＩＤを取得すると、変更指示を示す情報を、端末記憶装置２２に記憶されたユーザＡのユーザＩＤ、及び、取得したオブジェクトＩＤ、並びに、送信先情報（ユーザＢ（ユーザＢ１～ユーザＢ３）のユーザＩＤ）とともに、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。次に、サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、変更指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤと送信先情報とを受信する。次に、サーバ装置３のサーバ送信部３３２は、サーバ通信Ｉ／Ｆ３１を介して、変更指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤとを、ユーザＢ（ユーザＢ１～ユーザＢ３）の端末装置２に送信する。そして、ユーザＢの端末装置２の受信部２７３は、端末通信Ｉ／Ｆ２１を介して、変更指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤとを受信すると、受信したオブジェクトＩＤを使用オブジェクトとしてユーザＡのユーザＩＤに関連付けてユーザテーブルＴ１に記憶する。ユーザＢの端末装置２の表示処理部２７４は、受信されたユーザＡのモーションデータと、ユーザテーブルＴ１のユーザＡのユーザＩＤに関連付けられたキャラクタオブジェクト及び使用オブジェクトとに基づいて、ユーザＡのキャラクタオブジェクト１０１１ａのアニメーション（動画像）を含むユーザ出力画像１０１２ａを生成して、ユーザ出力画像１０１２ａを含むコミュニケーション画面１１１０（図１１（ｂ））を表示する。これにより、ユーザＢの端末装置２においても、新たな装着オブジェクトを装着したキャラクタオブジェクト１０１１ａを含むユーザ出力画像１０１２ａが表示される。以上により、変更処理は終了する。

【0168】

画面終了ボタン１００２は、選択画面１０００の表示の終了を指示するためのボタンオブジェクト等のオブジェクト画像である。ユーザＡによる入力装置２４の操作によって画面終了ボタン１００２が選択されると、選択画面１０００の表示が終了し、コミュニケーション画面８１０（図８（ｂ））が表示される。なお、ユーザＡによる入力装置２４の操作によって複数の装着候補オブジェクト１００１のいずれかが選択されると、上述した変更処理が実行されて、選択画面１０００の表示が終了し、新たな装着オブジェクトを装着したキャラクタオブジェクト１０１１ａを含むユーザ出力画像１０１２ａを含むコミュニケーション画面１１１０（図１１（ｂ））が表示されてもよい。

【0169】

図１０（ｂ）は、端末装置２の表示装置２３に表示される選択画面１０１０の一例を示す図である。選択画面１０１０では、選択画面１０００（図１０（ａ））と同様に、ユーザＡのキャラクタオブジェクト１０１１ａを含むユーザ出力画像１０１２ａが全面に表示される。また、選択画面１０１０には、選択画面１０００と同様に、キャラクタオブジェクト１０１１ａに装着させる装着オブジェクトの候補となる装着候補オブジェクト１０１３及び画面終了ボタン１０１４が含まれる。

【0170】

キャラクタオブジェクト１０１１ａは、選択画面１０００（図１０（ａ））において、変更指示が入力された後のユーザのキャラクタオブジェクトである。装着候補オブジェクト１０１３は、選択画面１０００の装着候補オブジェクト１００１と同一の配置位置に関連付けられたユーザＡの保有オブジェクトのオブジェクトＩＤに対応する選択オブジェクトである。キャラクタオブジェクト１０１１ａは、選択画面１０００（図１０（ａ））の装着候補オブジェクト１００１のうちの一つの装着候補オブジェクト１００１に対応する装着オブジェクトが装着されているため、キャラクタオブジェクト１０１１ａに装着されている装着オブジェクトに対応する装着候補オブジェクトは、装着候補オブジェクト１０１３に含まれていない。なお、キャラクタオブジェクト１０１１ａに装着されている装着オブジェクトに対応する装着候補オブジェクトは、装着候補オブジェクト１０１３に含まれていてもよい。この場合、装着されている装着オブジェクトに対応する装着候補オブジェクトは、ユーザＡによって選択できないようにグレーアウト表示されていてもよい。

【0171】

画面終了ボタン１０１４は、選択画面１０１０の表示の終了を指示するためのボタンオブジェクト等のオブジェクト画像である。ユーザＡによる入力装置２４の操作によって画面終了ボタン１０１４が選択されると、選択画面１０１０の表示が終了し、新たな装着オブジェクトを装着したキャラクタオブジェクト１０１１ａを含むユーザ出力画像１０１２ａを含むコミュニケーション画面１１１０（図１１（ｂ））が表示される。なお、選択画面１０１０に決定ボタン（図示せず）が表示されてもよい。ユーザＡによる入力装置２４の操作によって決定ボタンが選択されると、選択画面１０１０の表示が終了し、新たな装着オブジェクトを装着したキャラクタオブジェクト１０１１ａを含むユーザ出力画像１０１２ａを含むコミュニケーション画面１１１０（図１１（ｂ））が表示されてもよい。この場合、ユーザＡによる入力装置２４の操作によって画面終了ボタン１０１４が選択されると、選択画面１０１０の表示が終了し、変更処理前のキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａを含むコミュニケーション画面８１０（図８（ｂ））が表示されてもよい。

【0172】

ユーザＡによる入力装置２４の操作によってコミュニケーション画面９００の変更ボタン９０２が選択された場合に表示される画面は選択画面９１０に限らず、選択画面１１００が表示されてもよい。図１１（ａ）は、端末装置２の表示装置２３に表示される選択画面１１００の一例を示す図である。

【0173】

図１１（ａ）に示される選択画面１１００は、コミュニケーション画面９００に重畳して表示される。選択画面１１００は、コミュニケーション画面９００の表示を終了させた後に表示されてもよい。

【0174】

選択画面１１００には、複数の配置箇所のそれぞれを示す複数の配置候補オブジェクト１１０１、及び、キャラクタオブジェクト８１１ａに装着させる装着オブジェクトの候補となる装着候補オブジェクト１１０２が含まれる。ユーザＡによる入力装置２４の操作によって複数の配置候補オブジェクト１１０１のいずれかが選択されると、選択された配置候補オブジェクト１１０１に対応する配置候補に関連付けられたユーザＡの保有オブジェクトのオブジェクトＩＤに対応する装着候補オブジェクト１１０２が選択画面１１００に含まれる。ユーザＡによる入力装置２４の操作によって複数の装着候補オブジェクト１１０２のいずれかが選択されると、入力装置２４は、変更指示を端末処理装置２７に入力し、上述の変更処理が実行され、表示処理部２７４は、新たな装着オブジェクトを装着したキャラクタオブジェクト１０１１ａを含むユーザ出力画像１０１２ａを含むコミュニケーション画面１１１０（図１１（ｂ））を表示する。

【0175】

図１１（ｂ）は、端末装置２の表示装置２３に表示されるコミュニケーション画面１１１０の他の一例を示す図である。コミュニケーション画面１１１０には、新たな装着オブジェクトを装着したユーザＡのキャラクタオブジェクト１０１１ａを含むユーザ出力画像１０１２ａが少なくとも含まれる。

【0176】

また、コミュニケーション画面１１１０には、コミュニケーション画面８１０（図８（ｂ））と同様に、コミュニケーションサービスに参加中のユーザＢ１、ユーザＢ２、及びユーザＢ３のそれぞれのキャラクタオブジェクト８１１ｂ１、８１１ｂ２、及び８１１ｂ３を含むユーザ出力画像８１２ｂ１、８１２ｂ２、及び８１２ｂ３が含まれる。

【0177】

なお、コミュニケーションサービスに参加中のユーザＢによって入力された変更指示が、ユーザＢの端末装置２に入力されると、ユーザＢによって入力された変更指示に応じた変更処理が、ユーザＢの端末装置２及びユーザＡの端末装置２において実行される。これにより、新たな装着オブジェクトが装着されたユーザＢのキャラクタオブジェクトを含むユーザ出力画像がユーザＢの端末装置２及びユーザＡの端末装置２において表示される。

【0178】

図８（ｂ）～図１１（ｂ）を参照して説明したように、ユーザＡによる変更指示に応じて、ユーザＡのキャラクタオブジェクトの少なくとも一部が変更され、又は、ユーザＢによる変更指示に応じて、ユーザＢのキャラクタオブジェクトの少なくとも一部が変更される。これにより、キャラクタオブジェクトを介したコミュニケーション中に、ユーザＡ及びユーザＢが飽きてしまうこと防止し、ユーザＡがユーザＢとのコミュニケーションを継続しようとするユーザの意欲を向上させることが可能となる。

【0179】

また、従来の情報システムでは、ユーザは、キャラクタオブジェクトを介して他ユーザとのコミュニケーションを開始した後に、キャラクタオブジェクトを含む出力画像を変更しようとするためには、コミュニケーションサービスを中断しなければならなかった。そして、コミュニケーションサービスが中断された後に、キャラクタオブジェクトの外観及び／又はキャラクタオブジェクトを含む出力画像内の背景等の画像を変更するための機能を起動させる必要があった。そして、ユーザは、変更機能を用いてキャラクタオブジェクト及び／又は出力画像を変更した後に、再度コミュニケーションサービスに参加するという煩雑な手続きを行う必要があった。これに対し、本実施形態の情報システム１は、キャラクタオブジェクトを介したコミュニケーションを中断してユーザのキャラクタオブジェクトの再設定を行うことなく、ユーザのキャラクタオブジェクトの変更を可能とする。これにより、本実施形態の情報システム１では、コミュニケーション中にユーザのキャラクタオブジェクトを変更させるためのユーザインタフェースが複雑とならないため、従来の情報システムより、ユーザビリティを向上させることが可能となる。また、本実施形態の情報システム１では、コミュニケーションを中断することなくユーザのキャラクタオブジェクトの変更が可能であるため、サーバ装置３及び端末装置２間の通信回数及び通信量を低減させることができる。このように、本実施形態の情報システム１では、サーバ装置３及び端末装置２間の通信を改善することが可能となる。

【0180】

図８（ｂ）に戻り、ユーザＡは、少なくとも１人のユーザＢのユーザ出力画像８１２ｂに追加オブジェクトを含ませることにより、少なくとも１人のユーザＢのユーザ出力画像８１２ｂを変更したい場合、追加ボタン８１３を選択する操作を行う。ユーザＡによる入力装置２４の操作によって追加ボタン８１３が選択されると、選択画面１２００が表示される。

【0181】

図１２（ａ）は、端末装置２の表示装置２３に表示される選択画面１２００の一例を示す図である。図１２（ａ）に示される選択画面１２００は、コミュニケーション画面８１０に重畳して表示される。選択画面１２００は、コミュニケーション画面８１０の表示を終了させた後に表示されてもよい。

【0182】

図１２（ａ）に示される例では、８種類の追加候補オブジェクトを示す画像及び名称が選択画面１２００の表示領域内に含まれる。選択画面１２００の表示領域内に含まれる追加候補オブジェクトの数は、８つに限らない。端末装置２の表示処理部２７４は、複数の追加候補オブジェクトを示す画像の一部を選択画面１２００の表示領域内に含めることができない場合、追加候補オブジェクトを示す画像をスクロール可能に表示してもよい。この場合、ユーザＡによるスワイプ操作（例えば、指が画面に接しながら当該指が画面右から左に移動する操作）に応じて、選択画面１２００の表示領域内に現在含まれていない追加候補オブジェクトを示す画像がスクロールされて、選択画面１２００の表示領域内にス出現される。

【0183】

追加候補オブジェクトのそれぞれは追加オブジェクトを示し、追加候補オブジェクトを示す画像は、例えば、ギフトオブジェクトを示すアイコン画像、サムネイル画像等である。なお、選択画面１２００において、各追加候補オブジェクトの画像及び／又は名称が、追加オブジェクトの種類（無料ギフト、有料ギフト、アクセサリ、応援グッズ、アピール、バラエティ等）ごとに分類されて表示されてもよい。なお、有料ギフトに属する追加オブジェクトとは、ユーザが仮想的な貨幣価値の「コイン」を消費することにより購入可能な追加オブジェクトである。無料ギフトに属する追加オブジェクトとは、貨幣価値を消費することなく、代わりに配信を視聴することなどで取得できるポイントを消費すること等で入手可能な追加オブジェクトである。なお、追加オブジェクトは、ユーザＡが、端末装置２において実行される所定のミッションをプレイして、当該所定のミッションをクリアすることで保有するオブジェクトでもよい。

【0184】

ユーザＡによる入力装置２４の操作によって、追加候補オブジェクトのいずれかが選択されると、入力装置２４は、追加指示を端末処理装置２７に入力する。追加候補オブジェクトの選択と前後して、ユーザＡによる入力装置２４の操作によって、追加オブジェクトを含ませたいユーザＢのユーザ出力画像８１２ｂのいずれかが選択されると、選択されたユーザ出力画像８１２ｂに対応するユーザＢのユーザＩＤが特定される。入力装置２４は、追加指示とともに、選択された追加候補オブジェクトに対応するオブジェクトＩＤと、特定されたユーザＩＤと、を端末処理装置２７に入力する。なお、ユーザＢのユーザ出力画像８１２ｂのいずれも選択されていない場合、入力装置２４は、追加指示とともに、選択された追加候補オブジェクトに対応するオブジェクトＩＤを端末処理装置２７に入力する。この場合、全てのユーザＢのユーザ出力画像８１２ｂに追加オブジェクトが含まれることになる。なお、追加オブジェクトを含ませたいユーザＢのユーザ出力画像８１２ｂの選択は、ユーザ出力画像８１２ｂに含まれるキャラクタオブジェクト８１１ｂの選択であってもよい。また、２人以上のユーザＢのユーザ出力画像８１２ｂ又はキャラクタオブジェクト８１１ｂが選択されてもよい。以下、ユーザＢ１のユーザ出力画像８１２ｂ１が選択された場合における追加指示に応じた追加処理の一例について説明する。

【0185】

まず、表示処理部２７４は、入力装置２４から入力された追加指示及びオブジェクトＩＤを取得すると、オブジェクトテーブルＴ２を参照して、取得したオブジェクトＩＤに関連付けられた追加オブジェクトの静止画像又は動画像（画像情報）を端末記憶装置２２から抽出し、抽出した静止画像又は動画像を含むユーザ出力画像を生成する。なお、追加指示とともにユーザＢ１のユーザＩＤを取得した場合、抽出した追加オブジェクトの静止画像又は動画像を含むユーザ出力画像は、取得したユーザＢ１のユーザＩＤに対応するユーザ出力画像である。なお、追加指示とともにユーザＢ１～ユーザＢ３のいずれのユーザＩＤを取得していない場合、抽出した静止画像又は動画像を含むユーザ出力画像は、全てのユーザ（ユーザＡのユーザ出力画像及びユーザＢ１～ユーザＢ３）それぞれに対応するユーザ出力画像である。

【0186】

次に、送信部２７２は、入力装置２４から入力された追加指示及びオブジェクトＩＤを取得すると、追加指示を示す情報を、端末記憶装置２２に記憶されたユーザＡのユーザＩＤ、及び、取得したオブジェクトＩＤ、並びに送信先情報（ユーザＢ（ユーザＢ１～Ｂ３）それぞれのユーザＩＤ）とともに、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。次に、サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、追加指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤとを受信する。次に、サーバ装置３のサーバ送信部３３２は、サーバ通信Ｉ／Ｆ３１を介して、追加指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤとを、全てのユーザＢ（ユーザＢ１～Ｂ３）それぞれの端末装置２に送信する。そして、ユーザＢの端末装置２の受信部２７３は、端末通信Ｉ／Ｆ２１を介して、変更指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤとを受信すると、ユーザＢの端末装置２の表示処理部２７４は、オブジェクトテーブルＴ２を参照して、受信したオブジェクトＩＤに関連付けられた追加オブジェクトの静止画像又は動画像（画像情報）を端末記憶装置２２から抽出し、抽出した追加オブジェクトの静止画像又は動画像を含むユーザ出力画像を生成する。なお、ユーザＡの端末装置２の送信部２７２が、追加指示とともにユーザＢ１のユーザＩＤを送信している場合、ユーザＢ１のユーザＩＤもサーバ装置３によって送信されている。ユーザＢの端末装置２が追加指示とともにユーザＢ１のユーザＩＤを受信した場合、ユーザＢの端末装置２において表示される追加オブジェクトを含むユーザ出力画像は、受信したユーザＢ１のユーザＩＤに対応するユーザ出力画像のみである。ユーザＢの端末装置２が追加指示とともにユーザＢのユーザＩＤを取得していない場合、ユーザＢの端末装置２において表示される追加オブジェクトを含むユーザ出力画像は、全てのユーザ（ユーザＡ及びユーザＢ１～ユーザＢ３）に対応するユーザ出力画像である。以上により、追加処理は終了する。

【0187】

図１２（ｂ）は、ユーザＡの追加指示後の端末装置２の表示装置２３に表示されるコミュニケーション画面１２１０の他の一例を示す図である。図１２（ｂ）には、追加指示とともにユーザＢ１のユーザＩＤが受信された場合における、追加指示後の端末装置２の表示装置２３に表示されるコミュニケーション画面１２１０が示されている。図１２（ｂ）に示されるように、追加オブジェクト１２１１を含むユーザ出力画像は、ユーザＢ１のユーザＩＤに対応するユーザ出力画像８１２ｂ１のみである。

【0188】

図１３（ａ）は、ユーザＡの追加指示後の端末装置２の表示装置２３に表示されるコミュニケーション画面１３００の他の一例を示す図である。図１３（ａ）には、追加指示とともにユーザＢのユーザＩＤが受信されなかった場合における、追加指示後の端末装置２の表示装置２３に表示されるコミュニケーション画面１３００が示されている。図１３（ａ）に示されるように、追加オブジェクト１３０１を含むユーザ出力画像は、ユーザＡのユーザ出力画像８１２ａと、全てのユーザＢのユーザＩＤに対応するユーザ出力画像８１２ｂ１～８１２ｂ３である。ユーザＡの追加指示後の追加オブジェクト１３０１を含むユーザ出力画像は、全てのユーザＢのユーザＩＤのそれぞれに対応するユーザ出力画像８１２ｂ１～８１２ｂ３でもよい（ユーザＡのユーザ出力画像８１２ａが含まれなくてもよい）。

【0189】

図１２（ａ）～図１３（ａ）に示される例では、ユーザによる追加指示に応じて、自動的に追加オブジェクトが一又は複数のユーザのユーザ出力画像に追加されるが、ユーザによる追加指示後に、追加指示を行ったユーザ以外の他ユーザの承諾指示があった場合に、追加オブジェクトが一又は複数のユーザのユーザ出力画像に追加されるように構成されてもよい。

【0190】

図１３（ｂ）は、追加指示後の端末装置２の表示装置２３に表示されるコミュニケーション画面１３１０の他の一例を示す図である。図１３（ｂ）に示す例では、追加指示は、ユーザＢ１による端末装置２の入力装置２４の操作によって入力される。図１３（ｂ）に示される例における追加指示は、装着オブジェクトを示す追加候補オブジェクトのいずれかが選択され、且つ、装着オブジェクトを含ませたいユーザ出力画像としてユーザＡのユーザ出力画像８１２ａが選択された場合に、ユーザＢ１の端末装置２の入力装置２４によって入力される。

【0191】

選択された追加候補オブジェクトに対応する装着オブジェクトのオブジェクトＩＤとともに追加指示を受信したユーザＡの端末装置２は、図１３（ｂ）に示されるような追加オブジェクト１３１１を含むユーザ出力画像６１２ａを表示する。追加オブジェクト１３１１は、追加指示を行ったユーザＢ１から追加オブジェクトが贈られたことを示す情報が表示されるものである。追加オブジェクト１３１１は、ユーザＢ１～ユーザＢ３の端末装置２には表示されない。なお、追加オブジェクト１３１１は、ユーザＢ１～ユーザＢ３の端末装置２に表示されてもよい。

【0192】

ユーザＡよって、追加オブジェクト１３１１を含むユーザ出力画像８１２ａが表示されたコミュニケーション画面１３１０に対する所定の操作（例えば、ユーザ出力画像８１２ａに対するタップ操作、所定方向へのスワイプ操作等）がされた場合、ユーザＡの端末装置２の入力装置２４は、承諾指示を、ユーザＢ１の端末装置２から送信された装着オブジェクトのオブジェクトＩＤとともに端末処理装置２７に入力する。以下、承諾指示に応じた承諾処理の一例について説明する。

【0193】

まず、表示処理部２７４は、入力装置２４から入力された承諾指示及びオブジェクトＩＤを取得すると、オブジェクトテーブルＴ２を参照して、取得したオブジェクトＩＤに関連付けられた追加オブジェクト（装着オブジェクト）を装着したユーザＡのキャラクタオブジェクトを含むユーザ出力画像を生成する。そして、表示処理部２７４は、追加オブジェクト（装着オブジェクト）１４０１を装着したユーザＡのキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａを含むコミュニケーション画面１４００を表示する。

【0194】

次に、送信部２７２は、入力装置２４から入力された承諾指示及びオブジェクトＩＤを取得すると、承諾指示を示す情報を、端末記憶装置２２に記憶されたユーザＡのユーザＩＤ、及び、取得したオブジェクトＩＤ、並びに、送信先情報（ユーザＢ（ユーザＢ１～ユーザＢ３）のユーザＩＤ）とともに、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。次に、サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、承諾指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤと送信先情報とを受信する。次に、サーバ装置３のサーバ送信部３３２は、サーバ通信Ｉ／Ｆ３１を介して、承諾指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤとを、全てのユーザＢ（ユーザＢ１～Ｂ３）それぞれの端末装置２に送信する。そして、ユーザＢの端末装置２の受信部２７３は、端末通信Ｉ／Ｆ２１を介して、承諾指示を示す情報とユーザＡのユーザＩＤとオブジェクトＩＤとを受信する。次に、ユーザＢの端末装置２の表示処理部２７４は、オブジェクトテーブルＴ２を参照して、受信したオブジェクトＩＤに関連付けられた追加オブジェクト（装着オブジェクト）１４０１を装着したユーザＡのキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａを生成する。そして、表示処理部２７４は、追加オブジェクト（装着オブジェクト）１４０１を装着したユーザＡのキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａを含むコミュニケーション画面１４００を表示する。以上により、承諾処理は終了する。

【0195】

なお、ユーザＢ１による追加指示に係る追加オブジェクト（装着オブジェクト）によって変更されるキャラクタオブジェクトは、ユーザＢ１以外の全てのユーザ（図１３（ｂ）に示す例では、ユーザＡ，ユーザＢ２及びユーザＢ３）のキャラクタオブジェクトでもよい。この場合、ユーザＢ１以外の全てのユーザの端末装置２において追加オブジェクト１３１１を含むユーザ出力画像８１２ａ、８１２ｂ２及び８１２ｂ３が表示される。ユーザＡ，ユーザＢ２及びユーザＢ３による追加オブジェクト１３１１に係る承諾指示が入力されると、追加オブジェクト（装着オブジェクト）１４０１を装着したユーザＡのキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａ、追加オブジェクト（装着オブジェクト）１４０１を装着したユーザＢ２のキャラクタオブジェクト８１１ｂ２を含むユーザ出力画像８１２ｂ２、及び追加オブジェクト（装着オブジェクト）１４０１を装着したユーザＢ３のキャラクタオブジェクト８１１ｂ３を含むユーザ出力画像８１２ｂ３が表示される。なお、この場合、追加指示をしたユーザＢ１のキャラクタオブジェクト８１１ｂ１に追加オブジェクト（装着オブジェクト）１４０１が装着されてもよい。

【0196】

図１４（ａ）は、承諾指示後の端末装置２の表示装置２３に表示されるコミュニケーション画面１４００の他の一例を示す図である。図１４（ａ）に示されるように、コミュニケーション画面１４００には、追加オブジェクト（装着オブジェクト）１４０１が装着されたキャラクタオブジェクト８１１ａを含むユーザ出力画像８１２ａが表示される。

【0197】

ユーザのキャラクタオブジェクトに新たに装着オブジェクトが装着された場合、他ユーザが評価できるようにしてもよい。図１４（ｂ）は、ユーザＢ２のキャラクタオブジェクト８１１ｂ２に新たに装着オブジェクト１４１１が装着された場合におけるユーザＡの端末装置２の表示装置２３に表示されるコミュニケーション画面１４１０の他の一例を示す図である。

【0198】

コミュニケーション画面１４１０には、追加ボタン８１３及びゲームボタン８１４とともに、新たに評価ボタン１４１２が含まれる。図１４（ｂ）に示される例では、評価ボタン１４１２は、ユーザ出力画像８１２ａの表示領域内に配置されているが、ユーザ出力画像８１２ａの表示領域外に表示されてもよい。また、評価ボタン１４１２は、ユーザＢ２のキャラクタオブジェクト８１１ｂ２に新たに装着オブジェクト１４１１が装着されてから所定時間（例えば、１０秒間）だけ表示されるように表示処理部２７４によって表示制御されてもよい。

【0199】

評価ボタン１４１２は、新たに装着オブジェクト１４１１が装着されたキャラクタオブジェクト８１１ｂ２に対するユーザＡの評価を示す評価データを送信させるための評価指示を入力するためのオブジェクト画像である。ユーザＡによる入力装置２４の操作によって評価ボタン１４１２が選択されると、入力装置２４は、評価指示を端末処理装置２７に入力する。入力装置２４は、評価指示とともに、端末記憶装置２２に記憶されたユーザＡのユーザＩＤと、新たに装着オブジェクトが装着されたキャラクタオブジェクト８１１ｂ２に係るユーザＢ２のユーザＩＤを端末処理装置２７に入力する。以下、評価指示に応じた評価処理の一例について説明する。

【0200】

まず、ユーザＡの端末装置２の表示処理部２７４は、入力装置２４から入力された評価指示、ユーザＡのユーザＩＤ、及びユーザＢ２のユーザＩＤを取得すると、新たに装着オブジェクトが装着されたキャラクタオブジェクト８１１ｂ２に関する肯定的な評価を示す情報を表示する。表示処理部２７４は、例えば、ユーザＢ２のユーザＩＤに関連付けられたユーザＢ２の名称を抽出して、ユーザＢ２の名称を褒める文字列を肯定的な評価を示す情報として表示する。また、例えば、表示処理部２７４は、キャラクタオブジェクト８１１ｂ２のユーザ出力画像８１２ｂ２の表示領域内に所定のマーク画像を肯定的な評価を示す情報として表示してもよい。

【0201】

次に、ユーザＡの端末装置２の送信部２７２は、入力装置２４から入力された評価指示を示す情報、ユーザＡのユーザＩＤ、及びユーザＢ２のユーザＩＤを取得すると、取得した情報を、送信先情報（ユーザＢ（ユーザＢ１～ユーザＢ３）のユーザＩＤ）とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。次に、サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、評価指示を示す情報とユーザＡのユーザＩＤとユーザＢ２のユーザＩＤと送信先情報とを受信する。次に、サーバ装置３のサーバ送信部３３２は、サーバ通信Ｉ／Ｆ３１を介して、評価指示を示す情報とユーザＡのユーザＩＤとユーザＢ２のユーザＩＤとを、ユーザＢ（ユーザＢ１～ユーザＢ３）の端末装置２に送信する。そして、ユーザＢの端末装置２の受信部２７３によって、端末通信Ｉ／Ｆ２１を介して変評価指示を示す情報とユーザＡのユーザＩＤとユーザＢ２のユーザＩＤとが受信されると、ユーザＢの端末装置２の表示処理部２７４は、新たに装着オブジェクトが装着されたキャラクタオブジェクト８１１ｂ２に関する肯定的な評価を示す情報を表示する。表示処理部２７４は、例えば、ユーザＢ２のユーザＩＤに関連付けられたユーザＢ２の名称を抽出して、ユーザＢ２の名称を褒める文字列を肯定的な評価を示す情報として表示する。また、例えば、表示処理部２７４は、キャラクタオブジェクト８１１ｂ２のユーザ出力画像８１２ｂ２の表示領域内に所定のマーク画像を肯定的な評価を示す情報として表示してもよい。以上により、評価処理は終了する。

【0202】

これにより、ユーザＡは、ユーザＢのキャラクタオブジェクトに装着オブジェクトが装着された場合に、簡単な操作でリアクションを行うことができ、ユーザＢとのコミュニケーションを継続しようとするユーザＡの意欲を向上させることが可能となる。また、端末装置２の表示装置２３のディスプレイ画面の大きさには限りがあり、多くの情報を表示装置２３に表示させると、ユーザが表示された情報の認識することが難しくなるという問題があった。本実施形態におけるユーザＡの端末装置２では、ユーザＡ以外のユーザのキャラクタオブジェクト又はユーザ出力画像が変化した場合に、評価ボタン１４１２が表示される。そして、ユーザＡは、評価ボタン１４１２を操作することで、変化後のユーザＡ以外のユーザのキャラクタオブジェクト又はユーザ出力画像に対する評価を入力することができる。このように、本実施形態におけるユーザＡの端末装置２は、キャラクタオブジェクト又はユーザ出力画像に対する評価のタイミングに合わせて評価ボタン１４１２をユーザＡに提供することができるため、ユーザビリティを向上させることが可能となる。なお、ユーザＡによる評価指示に応じて表示される情報は、肯定的な情報に限らず、否定的な情報でもよい。また、表示される評価ボタン１４１２は複数種類であってもよい。例えば、肯定的な評価データを送信するための評価ボタン及び否定的な評価データを送信するための評価ボタンの２種類の評価ボタン等が表示されてもよい。

【0203】

図８（ｂ）に戻り、ユーザＡのユーザ出力画像８１２ａに替えて、又は、ユーザＡのユーザ出力画像８１２ａとともに、ユーザＡがプレイするゲームの進行を示すゲーム画面を含むゲーム表示オブジェクトが表示されてもよい。ゲーム表示オブジェクトは、所謂フィルターでもよい。例えば、ユーザＡによる入力装置２４の操作によってゲームボタン８１４が選択されると、入力装置２４は、ゲーム開始指示を端末処理装置２７に入力する。なお、選択画面１２００において、追加候補オブジェクトとして、ゲームボタン８１４と同じ機能を有するオブジェクトが含まれてもよい。この場合、ユーザＡによる入力装置２４の操作によってゲーム開始指示の入力するための追加候補オブジェクトが選択されると、入力装置２４は、ゲーム開始指示を端末処理装置２７に入力する。

【0204】

まず、表示処理部２７４は、入力装置２４から入力されたゲーム開始指示を取得すると、端末記憶装置２２に記憶された制御プログラム（ゲームアプリケーションプログラム等）に含まれる各種命令を実行することで実現されるゲームを開始し、開始したゲームのゲーム画面を含むゲーム表示オブジェクト１５００を表示装置２３に表示する。図１５（ａ）は、ユーザＡによるゲーム開始指示に応じてユーザＡの端末装置２の表示装置２３に表示されるゲーム画面を含むゲーム表示オブジェクト１５００の一例を示す図である。

【0205】

ゲーム表示オブジェクト１５００が表示されると、表示処理部２７４は、ユーザＡからの各種入力情報と、制御プログラム（ゲームアプリケーションプログラム等）に含まれる各種命令とに応じて、ゲーム表示オブジェクト１５００のゲームを進行させる。そして、表示処理部２７４は、所定のゲーム終了条件が満たされた場合、ゲーム表示オブジェクト１５００のゲームを終了する。

【0206】

また、ゲーム表示オブジェクト１５００が表示されると、生成部２７１は、ユーザＡがプレイするゲームのゲーム画面を示すゲーム画像データを、ゲーム進行中に随時生成する。次に生成部２７１は、生成したゲーム画像データと、端末記憶装置２２に記憶されたユーザＩＤとを含む出力情報を生成し、生成した出力情報を送信部２７２に出力する。

【0207】

次に、ユーザＡの端末装置２の送信部２７２は、ユーザＡの出力情報を、送信先情報（ユーザＢ（ユーザＢ１～ユーザＢ３）のユーザＩＤ）とともに端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する。次に、サーバ装置３のサーバ受信部３３１は、サーバ通信Ｉ／Ｆ３１を介して、ユーザＡの端末装置２から送信されたユーザＡの出力情報を受信する。次に、サーバ装置３のサーバ送信部３３２は、サーバ通信Ｉ／Ｆ３１を介して、ユーザＡの出力情報をユーザＢ（ユーザＢ１～ユーザＢ３）の端末装置２に送信する。そして、ユーザＢの端末装置２の受信部２７３によって、端末通信Ｉ／Ｆ２１を介して出力情報が受信されると、ユーザＢの端末装置２の表示処理部２７４は、出力情報に含まれるユーザＩＤによって示されるユーザＡのユーザ出力画像８１２ａに替えて、出力情報に含まれるゲーム画像データに基づくゲーム画像を含むゲーム表示オブジェクト１５１１を表示する（図１５（ｂ））。

【0208】

図１５（ａ）に示される例では、ゲーム表示オブジェクト１５００に含まれるゲーム画面のゲームは釣りゲームである。ゲーム表示オブジェクト１５００に含まれるゲーム画面には、ゲームオブジェクト１５０１、標的オブジェクト１５０２、パラメータカーソル１５０３、及びパラメータゲージ枠１５０４が含まれる。

【0209】

ゲームオブジェクト１５０１は、魚を模したオブジェクト画像であり、ゲーム画面内における予め定められた経路又はランダムに決定された経路を自動的に移動するように、表示処理部２７４によって表示制御される。なお、端末記憶装置２２には、ゲームオブジェクト１５０１に関連付けられた初期値が記憶されており、表示処理部２７４は、ゲームの開始時点において、ゲームオブジェクト１５０１のパラメータ値としてゲームオブジェクト１５０１に関連付けられた初期値を設定する。

【0210】

標的オブジェクト１５０２は、第１標的オブジェクト１５０２ａ、第２標的オブジェクト１５０２ｂ及び第３標的オブジェクト１５０２ｃにより構成される。第１標的オブジェクト１５０２ａは、略円形の形状を有するオブジェクト画像であり、第２標的オブジェクト１５０２ｂは、第１標的オブジェクト１５０２ａの周囲を囲む形状を有するオブジェクト画像であり、第３標的オブジェクト１５０２ｃは、第２標的オブジェクト１５０２ｂの周囲を囲む形状を有するオブジェクト画像である。

【0211】

入力装置２４がタッチパネルである場合、ゲームオブジェクト１５０１内をユーザＡがタップ操作することにより、入力装置２４はゲーム入力指示を表示処理部２７４に入力する。表示処理部２７４は、入力装置２４からゲーム入力指示を取得した時点のゲームオブジェクト１５０１の所定箇所（例えば、魚の口に対応する箇所）が、第１標的オブジェクト１５２ａ、第２標的オブジェクト１５０２ｂ及び第３標的オブジェクト１５０２ｃのいずれかに位置するかを判定する。

【0212】

表示処理部２７４は、ゲームオブジェクト１５０１の所定箇所が、第１標的オブジェクト１５０２ａ、第２標的オブジェクト１５０２ｂ及び第３標的オブジェクト１５０２ｃのいずれかに位置すると判定した場合、ゲームオブジェクト１５０１のパラメータ値を変化（増大又は減少）させる。

【0213】

表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値の変化量を、入力装置２４からゲーム入力指示を取得した時点のゲームオブジェクト１５０１の所定箇所の位置に応じて変更させる。例えば、ゲーム入力指示があった時点のゲームオブジェクト１５０１の所定箇所が第１標的オブジェクト１５０２ａ内に位置する場合、表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値を、第１減少値分だけ減少させる。なお、ゲーム入力指示があった時点のゲームオブジェクト１５０１の所定箇所が第１標的オブジェクト１５０２ａに位置する場合、表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値を、第１増大値分だけ増大させてもよい。また、ゲーム入力指示があった時点のゲームオブジェクト１５０１の所定箇所が第１標的オブジェクト１５０２ａ外であり且つ第２標的オブジェクト１５０２ｂ内に位置する場合、表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値を、第１減少値よりも小さい値の第２減少値分だけ減少させる。なお、ゲーム入力指示があった時点のゲームオブジェクト１５０１の所定箇所が第１標的オブジェクト１５０２ａ外、且つ、第２標的オブジェクト１５０２ｂ内に位置する場合、表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値を、第１増大値よりも小さい値の第２増大値分だけ増大させてもよい。また、ゲーム入力指示があった時点のゲームオブジェクト１５０１の所定箇所が第２標的オブジェクト１５０２ｂ外であり且つ第３標的オブジェクト１５０２ｃ内に位置する場合、表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値を、第２減少値よりも小さい値の第３減少値分だけ減少させる。なお、ゲーム入力指示があった時点のゲームオブジェクト１５０１の所定箇所が第２標的オブジェクト１５０２ｂ外であり且つ第３標的オブジェクト１５０２ｃ内に位置する、表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値を、第２増大値よりも小さい値の第３増大値分だけ増大させてもよい。また、ゲーム入力指示があった時点のゲームオブジェクト１５０１の所定箇所が標的オブジェクト１５０２外に位置する場合、表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値を変化させない。

【0214】

パラメータカーソル１５０３は、ゲームオブジェクト１５０１のパラメータ値を示すカーソルオブジェクトである。表示処理部２７４は、パラメータゲージ枠１５０４内における、ゲームオブジェクト１５０１のパラメータ値に対応する位置に、パラメータカーソル１５０３を配置する。図１３（ａ）に示される例では、パラメータカーソル１５０３は、パラメータゲージ枠１５０４内を左右に移動可能であり、ゲームオブジェクト１５０１のパラメータ値が大きい程、パラメータゲージ枠１５０４内の右方向に配置される。

【0215】

表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値が所定値（例えば、「０」（ゼロ））以下となった場合、ユーザＡがゲームのクリアに成功したと判定し、当該ゲームを終了する。表示処理部２７４は、ゲームオブジェクト１５０１のパラメータ値が所定値（ゲームの開始時点のパラメータ値よりも大きい値）以上となった場合、ユーザＡがゲームのクリアに成功したと判定してもよい。表示処理部２７４は、ゲームが成功するまで当該ゲームを継続させてもよく、また、ゲームの開始から所定のゲーム期間（例えば、３０秒）が経過した場合、ユーザＡがゲームのクリアに成功していなくても当該ゲームを終了させてもよい。

【0216】

ゲーム表示オブジェクト１５００に含まれるゲーム画面のゲームが終了した場合、ユーザＢのいずれかの端末装置２に、ゲーム表示オブジェクトが表示されてもよい。例えば、ユーザＡの端末装置２の送信部２７２は、ゲーム終了を示す情報をサーバ装置３に送信し、サーバ装置３は、ユーザＢ１の端末装置２にユーザＡに係るゲーム終了を示す情報を送信する。ユーザＢ１の端末装置２の表示処理部２７４は、受信されたゲーム終了に関する情報を取得すると、端末記憶装置２２に記憶された制御プログラム（ゲームアプリケーションプログラム等）に含まれる各種命令を実行することで実現されるゲームを開始し、開始したゲームのゲーム画面を含むゲーム表示オブジェクト１５００を表示装置２３に表示する。ユーザＢ１がプレイしたゲームが終了すると、同様に、ユーザＢ１の端末装置２によってサーバ装置３経由でゲーム終了を示す情報がユーザＢ２の端末装置２に送信され、ユーザＢ１の端末装置２の表示処理部２７４は、ゲーム表示オブジェクト１５００を表示する。さらに、ユーザＢ２がプレイしたゲームが終了すると、同様に、ユーザＢ２の端末装置２によってサーバ装置３経由でゲーム終了を示す情報がユーザＢ３の端末装置２に送信され、ユーザＢ１の端末装置２の表示処理部２７４は、ゲーム表示オブジェクト１５００を表示する。なお、ゲームをプレイしていないユーザの端末装置２には、図１３（ｂ）の画面が表示され、他のユーザのプレイ状況を視認することができる。このように、コミュニケーショングループに含まれる各ユーザが順番にゲームを行うことができ、コミュニケーションに対するユーザの継続使用の意欲を向上させることが可能となる。

【0217】

なお、端末装置２は、ゲームを実行するために、制御プログラムに組み込まれたブラウザ機能を呼び出して、ゲームプログラムを実行してもよい。例えば、端末装置２は、呼び出したブラウザ機能を用いて、サーバ装置３からウェブページ（ＨＴＭＬ（Hyper Text Markup Language）等のマークアップ言語によって記述されたドキュメント）を受信する。そして、端末装置２は、受信したウェブページに組み込まれたゲームプログラムを実行する。例えば、マークアップ言語として、ＨＴＭＬ５が用いられることにより、端末装置２は、新規なゲームを容易に実行することができる。情報システム１において上述のウェブアプリケーションを採用することにより、ゲームプログラムの製作者は、サーバ装置３が送信するウェブページに新しいゲームプログラムを組み込むだけで新しいゲームをクライアントサイド（端末装置２側）に提供できる。これにより、ゲームプログラムの製作者は、新しいゲームプログラムの製作工数を大幅に抑えることが可能となる。また、クライアントサイドでは、新しいゲームプログラムをダウンロードせずにウェブページを受信するだけで、新しいゲームの提供を受けることができる。これにより、情報システム１において、ゲームプログラムのダウンロードに比べ、通信ネットワークの負荷、通信コスト及び／又は通信時間の低減が可能となり且つユーザのインターフェースの簡素化を実現することが可能となる。

【0218】

入力装置２４によるユーザＡのゲーム入力指示は、タップ操作に応じて入力されるものに限らない。例えば、ユーザＡによる所定方向へのスワイプ操作に応じて、入力装置２４はゲーム入力指示を表示処理部２７４に入力してもよい。また、ゲーム入力指示は、入力装置２４によって入力されるものに限らない。例えば、表示処理部２７４が、連続的に取得した撮像データに基づいて生成部２７１によって時間の経過に伴って随時生成されたフェイスモーションデータを取得し、フェイスモーションデータに基づいて、ユーザＡが所定の動作をしたと判定した時に、ゲーム入力指示を生成してもよい。所定の動作は、例えば、ユーザＡが目をつぶること、ユーザＡの顔が所定方向を向くこと、又は、ユーザの手が所定の動作をしたこと等である。フェイスモーションデータに基づいてゲーム入力指示が生成される場合、ユーザＡのユーザ出力画像８１２ａとともに、ユーザＡがプレイするゲームの進行を示すゲーム画面を含むゲーム表示オブジェクト１５００が表示されてもよい。ユーザ出力画像８１２ａとゲーム表示オブジェクト１５００との同時表示は、ユーザ出力画像８１２ａとゲーム表示オブジェクト１５００とが並んで表示される方式でもよく、また、ユーザ出力画像８１２ａがゲーム表示オブジェクト１５００に重畳して表示される方式でもよい。例えば、ユーザ出力画像８１２ａがゲーム表示オブジェクト１５００の背景画像として表示されてもよい。これにより、ユーザは、ユーザのキャラクタオブジェクトの動作を確認しながらゲームをプレイすることができ、ゲームの操作性を向上させることが可能となる。また、加速度センサ（図示せず）を有する端末装置２をユーザＡが振る動作をすることで、加速度センサによって所定値以上の加速度が測定された場合に、表示処理部２７４が、ゲーム入力指示を生成してもよい。

【0219】

ゲーム表示オブジェクト１５００に含まれるゲーム画面のゲームは釣りゲーム以外のゲームでもよい。例えば、ユーザＡが目をつぶるたびに所定距離移動するユーザＡのキャラクタオブジェクトが登場するゲームでもよく、また、ユーザＡが目をつぶるたびに所定距離移動するいずれかのユーザＢのキャラクタオブジェクトが登場するゲームでもよい。

【0220】

また、ゲーム表示オブジェクト１５１１内のゲーム画像に対してユーザＢによる所定のゲーム入力指示が入力できる場合、いずれかのユーザＢの操作に応じたゲーム入力指示により、ゲーム表示オブジェクト１５１１内のゲーム画像に示されるゲームが進行してもよい。なお、ゲーム表示オブジェクト１５１１内のゲーム画像に対してユーザＢによる所定のゲーム入力指示が入力できる場合、ユーザＡによるゲーム入力指示ができないように、ユーザＡの端末装置２の入力装置２４が制御されてもよい。また、ゲーム表示オブジェクト１５１１内のゲーム画像に対してユーザＢによる所定のゲーム入力指示が入力できる場合、ユーザＡによるゲーム入力指示と全てのユーザＢによるゲーム入力指示とにより、ゲーム表示オブジェクト１５１１内のゲーム画像に示されるゲームが進行してもよい。図１５（ｂ）の画面において、ユーザＡによってプレイされるゲーム表示オブジェクト１５１１だけでなく、ユーザＢ１、ユーザＢ２及びユーザＢ３のそれぞれによってプレイされるゲーム表示オブジェクト１５１１が表示されてもよい。この場合、各ユーザは、図１５（ｂ）の画面において、４つのゲーム表示オブジェクト１５１１が表示され、各ユーザが、各ユーザに対応するゲーム表示オブジェクト１５１１のゲームをプレイする。

【0221】

このように、ユーザＡは、ユーザＢとのコミュニケーション中にゲーム画面を提供することができる。これにより、ユーザＡ及びユーザＢはコミュニケーションを継続しようとする意欲を向上させることが可能となる。

【0222】

（情報システム１の動作シーケンス）
図１６は、情報システム１の動作シーケンスの一例を示す図である。この動作シーケンスは、予め端末記憶装置２２及びサーバ記憶装置３２に記憶されている制御プログラムに基づいて、主に端末処理装置２７及びサーバ処理装置３３により、端末装置２及びサーバ装置３の各要素と協働して実行される。以下、ユーザＡは端末装置２ａを操作し、ユーザＢ１は端末装置２ｂ１を操作し、ユーザＢ２は端末装置２ｂ２を操作するものとして説明する。なお、ユーザＡ以外のユーザの端末装置は、ユーザＢ１及びＢ２の端末装置２ｂ１～２ｂ２だけに限らず、３人以上のユーザの端末装置２がサーバ装置３に接続されてもよい。

【0223】

まず、端末装置２ａの送信部２７２は、撮像装置２５によって連続的に出力された撮像データに基づいて生成部２７１によって生成されたユーザＡのモーションデータを含むキャラクタ動画データと、マイク２６から出力されたユーザＡの音声データと、ユーザＡのユーザＩＤとを含む出力情報を、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する（ステップＳ１０１）。なお、出力情報は、ユーザがプレイするゲームのゲーム画面を示すゲーム画像データとユーザＡのユーザＩＤを含むものでもよい。また、送信部２７２の送信処理において送信先情報が含まれてもよい。ステップＳ１０１の処理は、配信イベントが終了するまで所定時間間隔ごと（例えば、２秒間隔ごと）に連続して実行されるため、ステップＳ１０１～Ｓ１１０に係る処理は、断続的に実行される。

【0224】

次に、サーバ装置３のサーバ送信部３３２は、端末装置２ａから受信した出力情報を、サーバ通信Ｉ／Ｆ３１を介して、端末装置２ｂ１に送信する（ステップＳ１０２）とともに、端末装置２ｂ２に送信する（ステップＳ１０３）。

【0225】

また、端末装置２ｂ１の送信部２７２は、ユーザＢ１のキャラクタ動画データとユーザＢ１の音声データとユーザＢ１のユーザＩＤとを含む出力情報を、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する（ステップＳ１０４）。次に、サーバ装置３のサーバ送信部３３２は、端末装置２ｂ１から受信した出力情報を、サーバ通信Ｉ／Ｆ３１を介して、端末装置２ａに送信する（ステップＳ１０５）とともに、端末装置２ｂ２に送信する。

【0226】

また、端末装置２ｂ２の送信部２７２は、ユーザＢ２のキャラクタ動画データとユーザＢ２の音声データとユーザＢ２のユーザＩＤとを含む出力情報を、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する（ステップＳ１０６）。次に、サーバ装置３のサーバ送信部３３２は、端末装置２ｂ２から受信した出力情報を、サーバ通信Ｉ／Ｆ３１を介して、端末装置２ａに送信する（ステップＳ１０７）とともに、端末装置２ｂ１に送信する。

【0227】

端末装置２ａの表示処理部２７４は、ユーザＡ、ユーザＢ１、及びユーザＢ２のそれぞれの出力情報に基づいてユーザＡのキャラクタオブジェクトを含むユーザ出力画像、ユーザＢ１のキャラクタオブジェクトを含むユーザ出力画像、及びユーザＢ２のキャラクタオブジェクトを含むユーザ出力画像を含むコミュニケーション画面を、端末装置２ａの表示装置２３に表示出力し、ユーザＢ１及びユーザＢ２の音声を出力する（ステップＳ１０８）。

【0228】

ステップＳ１０８と同様に、端末装置２ｂ１の表示処理部２７４は、ユーザＡ、ユーザＢ１、及びユーザＢ２のそれぞれの出力情報に基づいてユーザＡのキャラクタオブジェクトを含むユーザ出力画像、ユーザＢ１のキャラクタオブジェクトを含むユーザ出力画像、及びユーザＢ２のキャラクタオブジェクトを含むユーザ出力画像を含むコミュニケーション画面を、端末装置２ｂ１の表示装置２３に表示出力し、ユーザＡ及びユーザＢ２の音声を出力する（ステップＳ１０９）。

【0229】

ステップＳ１０８と同様に、端末装置２ｂ２の表示処理部２７４は、ユーザＡ、ユーザＢ１、及びユーザＢ２のそれぞれの出力情報に基づいてユーザＡのキャラクタオブジェクトを含むユーザ出力画像、ユーザＢ１のキャラクタオブジェクトを含むユーザ出力画像、及びユーザＢ２のキャラクタオブジェクトを含むユーザ出力画像を含むコミュニケーション画面を、端末装置２ｂ２の表示装置２３に表示出力し、ユーザＡ及びユーザＢ１の音声を出力する（ステップＳ１１０）。

【0230】

次に、端末装置２ａの送信部２７２は、ユーザＡによる入力装置２４の操作に応じて入力された、変更指示、追加指示及び評価指示のいずれかを示す情報を、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する（ステップＳ１１１）。

【0231】

次に、サーバ装置３のサーバ送信部３３２は、端末装置２ａから受信した変更指示、追加指示及び評価指示のいずれかを示す情報を、サーバ通信Ｉ／Ｆ３１を介して、端末装置２ｂ１に送信する（ステップＳ１１２）とともに、端末装置２ｂ２に送信する（ステップＳ１１３）。

【0232】

端末装置２ａの表示処理部２７４は、ユーザＡによる入力装置２４の操作に応じて入力された、変更指示、追加指示及び評価指示のいずれかに応じて、ユーザＡのユーザ出力画像、ユーザＢ１のユーザ出力画像、及びユーザＢ２のユーザ出力画像、の少なくとも一部を変更して、端末装置２ａの表示装置２３に表示出力する（ステップＳ１１４）。

【0233】

端末装置２ｂ１の表示処理部２７４は、ユーザＡの端末装置２ａから送信された、変更指示、追加指示及び評価指示のいずれかを示す情報に応じて、ユーザＡのユーザ出力画像、ユーザＢ１のユーザ出力画像、及びユーザＢ２のユーザ出力画像、の少なくとも一部を変更して、端末装置２ｂ１の表示装置２３に表示出力する（ステップＳ１１５）。

【0234】

端末装置２ｂ２の表示処理部２７４は、ユーザＡの端末装置２ａから送信された、変更指示、追加指示及び評価指示のいずれかを示す情報に応じて、ユーザＡのユーザ出力画像、ユーザＢ１のユーザ出力画像、及びユーザＢ２のユーザ出力画像、の少なくとも一部を変更して、端末装置２ｂ２の表示装置２３に表示出力する（ステップＳ１１６）。

【0235】

次に、端末装置２ｂ１の送信部２７２は、ユーザＢ１による入力装置２４の操作に応じて入力された、装着オブジェクトの追加指示を示す情報を、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する（ステップＳ１１７）。

【0236】

次に、サーバ装置３のサーバ送信部３３２は、端末装置２ｂ１から受信した装着オブジェクトの追加指示を示す情報を、サーバ通信Ｉ／Ｆ３１を介して、端末装置２ａに送信する（ステップＳ１１８）。

【0237】

端末装置２ａの表示処理部２７４は、ユーザＢ１の端末装置２ａから送信された装着オブジェクトの追加指示を示す情報に応じて表示された追加オブジェクトに対して、ユーザＡによって承諾に関する所定の操作がされたか否かを判定する（ステップＳ１１９）。

【0238】

ユーザＡによって承諾に関する所定の操作がされなかったと判定された場合（ステップＳ１１９－Ｎｏ）、ステップＳ１２３は実行されない。ユーザＡによって承諾に関する所定の操作がされたと判定された場合（ステップＳ１１９－Ｙｅｓ）、端末装置２ａの送信部２７２は、承諾指示を示す情報を、端末通信Ｉ／Ｆ２１を介してサーバ装置３に送信する（ステップＳ１２０）。

【0239】

次に、サーバ装置３のサーバ送信部３３２は、端末装置２ａから受信した承諾指示を示す情報を、サーバ通信Ｉ／Ｆ３１を介して、端末装置２ｂ１に送信する（ステップＳ１２１）とともに、端末装置２ｂ２に送信する（ステップＳ１２２）。なお、承諾指示を示す情報とともに、ステップＳ１１７においてユーザＢ１の端末装置２ａから送信された追加指示を示す情報に係る装着オブジェクトを示すオブジェクトＩＤも送信される。

【0240】

端末装置２ａの表示処理部２７４は、ステップＳ１１７においてユーザＢ１の端末装置２ａから送信された追加指示を示す情報に係る装着オブジェクトを装着した、ユーザＡのキャラクタオブジェクトを含むユーザ出力画像を、端末装置２ａの表示装置２３に表示出力する（ステップＳ１２３）。

【0241】

端末装置２ｂ１の表示処理部２７４は、ステップＳ１１７においてユーザＢ１の端末装置２ａから送信された追加指示を示す情報に係る装着オブジェクトを装着した、ユーザＡのキャラクタオブジェクトを含むユーザ出力画像を、端末装置２ｂ１の表示装置２３に表示出力する（ステップＳ１２４）。

【0242】

端末装置２ｂ２の表示処理部２７４は、ステップＳ１１７においてユーザＢ１の端末装置２ａから送信された追加指示を示す情報に係る装着オブジェクトを装着した、ユーザＡのキャラクタオブジェクトを含むユーザ出力画像を、端末装置２ｂ２の表示装置２３に表示出力する（ステップＳ１２５）。

【0243】

以上、詳述したとおり、本実施形態の情報システム１では、ユーザＡによる指示に応じて、少なくとも一部が変更されたユーザＡのユーザ出力画像、及び／又は、少なくとも一部が変更された少なくともの１人のユーザＢのユーザ出力画像が表示される。このように、本実施形態の情報システム１によって、コミュニケーションサービス中に、端末装置２からの出力がユーザＡ又は少なくとも１人のユーザＢによって変更されるようにすることで、コミュニケーションに対するユーザの継続使用の意欲を向上させることが可能となる。

【0244】

（変形例１）
なお、本発明は、本実施形態に限定されるものではない。例えば、所定の条件が満たされた場合、ユーザＡの端末装置２の表示処理部２７４は、選択画面１２００（図１２（ａ））の表示領域内に、新たな追加候補オブジェクトを追加してもよい。また、所定の条件が満たされた場合、ユーザＡの端末装置２の表示処理部２７４は、選択画面１２００の表示領域内に含まれる追加候補オブジェクトの少なくとも一部を削除してもよい。

【0245】

所定の条件は、ユーザＡのキャラクタオブジェクト又はユーザ出力画像がコミュニケーション画面に表示された時間が所定時間を超えたという条件である。また、所定の条件は、ユーザＡのキャラクタオブジェクト又はユーザ出力画像がコミュニケーション画面に表示された時間が所定時間を超えていないという条件でもよい。また、所定の条件は、いずれかのユーザＢのキャラクタオブジェクト又はユーザ出力画像がコミュニケーション画面に表示された時間が、所定時間を超えたという条件又は所定時間を超えていないという条件でもよい。また、所定の条件は、ユーザＡ及び全てのユーザＢのそれぞれのキャラクタオブジェクト又はユーザ出力画像がコミュニケーション画面に表示された時間の合計が所定時間を超えたという条件又は所定時間を超えていないという条件でもよい。また、所定の条件は、ユーザＡ及び全てのユーザＢのうちの少なくとも２人のキャラクタオブジェクト又はユーザ出力画像がコミュニケーション画面に表示された時間の合計が所定時間を超えたという条件又は所定時間を超えていないという条件でもよい。

【0246】

また、所定の条件は、ユーザＡによる入力装置２４の操作によって、追加候補オブジェクトのいずれかが選択された回数が所定回数を超えたという条件でもよい。また、所定の条件は、ユーザＡによる入力装置２４の操作によって、追加候補オブジェクトのいずれかが選択された回数が所定回数を超えていないという条件でもよい。また、所定の条件は、いずれかのユーザＢによる入力装置２４の操作によって、追加候補オブジェクトのいずれかが選択された回数が、所定回数を超えたという条件又は所定の回数を超えていないという条件でもよい。また、所定の条件は、ユーザＡ及び全てのユーザＢのそれぞれによる入力装置２４の操作によって、追加候補オブジェクトのいずれかが選択された回数の合計が、所定回数を超えたという条件又は所定の回数を超えていないという条件でもよい。また、所定の条件は、ユーザＡ及び全てのユーザＢのうちの少なくとも２人による入力装置２４の操作によって、追加候補オブジェクトのいずれかが選択された回数の合計が、所定回数を超えたという条件又は所定の回数を超えていないという条件でもよい。

【0247】

所定の条件が満たされた場合に選択画面１２００の表示領域内に追加される新たな追加候補オブジェクトは、例えば、ユーザ出力画像内のキャラクタオブジェクトの背面に配置される特定の壁紙オブジェクト、及び特定の装着オブジェクト等に対応するものでもよい。

【0248】

このように、所定の条件が満たされることで、追加オブジェクトの選択の幅が広がる（又は狭まる）ため、コミュニケーションサービス中のユーザＡの操作に応じた出力に多様性を持たせることが可能となる。したがって、ユーザＡがユーザＢとのコミュニケーションを継続使用する意欲を向上させることが可能となる。

【0249】

（変形例２）
図１４（ｂ）に示されるように、ユーザＢ２のキャラクタオブジェクト８１１ｂ２に新たに装着オブジェクト１４１１が装着された場合、ユーザＡは、新たに表示されたコミュニケーション画面１４１０に含まれた評価ボタン１４１２を操作できる。ユーザＡの端末装置２において、ユーザＡが、評価ボタン１４１２に替えて又は評価ボタン１４１２とともに、評価ボタン１４１２の操作以外の操作ができるように構成されてもよい。

【0250】

例えば、ユーザＢ２のキャラクタオブジェクト８１１ｂ２に新たに装着オブジェクト１４１１が装着された場合、コミュニケーション画面１４１０に、ユーザＡのキャラクタオブジェクト８１１ａに所定の動作を自動的に行わせるための動作ボタンを所定の表示期間（例えば１０秒間）含めるようにしてもよい。ユーザＡによる入力装置２４の操作によって動作ボタンが選択されると、生成部２７１は、ユーザＡのモーションデータの使用を所定の動作期間（例えば５秒間）中止し、予め端末記憶装置２２に記憶された所定の動作に関する情報を抽出して、ユーザＡのキャラクタオブジェクト６１１ａに所定の動作を所定の動作期間（例えば５秒間）自動的に行わせる。所定の動作は、例えば、拍手をする動作、驚きを示す動作等である。なお、ユーザＡによる入力装置２４の操作によって動作ボタンが選択されると、生成部２７１は、ユーザＡの一部のモーションデータの使用を中止しなくてもよい。例えば、動作ボタンに応じた動作が、キャラクタオブジェクト６１１ａの腕に関する動作である場合、フェイスモーションデータの使用は継続されてもよい。これにより、情報システム１は、動作ボタンによる画一的な動きに止まらず、キャラクタオブジェクトに対し豊かな表現を行わせることができ、ユーザとのコミュニケーションを継続使用する意欲を向上させることが可能となる。

【0251】

また、ユーザＡによる複数の所定の操作のそれぞれに、ユーザＡのキャラクタオブジェクト８１１ａに自動的に行わせる所定の動作に関する情報が関連付けられて端末記憶装置２２に記憶させてもよい。例えば、上方向へのスワイプ操作に関連付けて、ピースサインをする動作に関する情報が端末記憶装置２２に記憶され、下方向へのスワイプ操作に関連付けて、飛び跳ねる動作に関する情報が端末記憶装置２２に記憶されてもよい。例えば、ユーザＡによって上方向へのスワイプ操作が行われたことが入力装置２４によって検知されると、生成部２７１は、ユーザＡのモーションデータの使用を所定の動作期間（例えば５秒間）中止し、予め端末記憶装置２２に記憶されたピースサインをする動作に関する情報を抽出して、ユーザＡのキャラクタオブジェクト８１１ａにピースサインをする動作を所定の動作期間（例えば５秒間）自動的に行わせる。そして、この場合、ユーザＢ２のキャラクタオブジェクト８１１ｂ２に新たに装着オブジェクト１４１１が装着されてから所定の期間（例えば１０秒間）、所定の操作に関連付けられた所定の動作に関する情報を変更してもよい。例えば、ユーザＢ２のキャラクタオブジェクト８１１ｂ２に新たに装着オブジェクト１４１１が装着されてから所定の期間（例えば１０秒間）、上方向へのスワイプ操作に関連付けて、（ピースサインをする動作に関する情報を変更して）拍手をする動作に関する情報が端末記憶装置２２に記憶されてもよい。これにより、ユーザＢ２のキャラクタオブジェクト８１１ｂ２に新たに装着オブジェクト１４１１が装着されてから所定の期間（例えば１０秒間）において、ユーザＡによって上方向へのスワイプ操作が行われたことが入力装置２４によって検知されると、生成部２７１は、ユーザＡのモーションデータの使用を所定の動作期間（例えば５秒間）中止し、予め端末記憶装置２２に記憶された拍手をする動作に関する情報を抽出して、ユーザＡのキャラクタオブジェクト８１１ａに拍手をする動作を所定の動作期間（例えば５秒間）自動的に行わせる。このように、通常のコミュニケーション中と、他ユーザのキャラクタオブジェクトに新たな装着オブジェクトが装着された時とで、同一操作であっても異なる動作をキャラクタオブジェクトにさせることができ、コミュニケーションサービス中のユーザＡの操作に応じた出力に多様性を持たせることが可能となる。したがって、ユーザＡがユーザＢとのコミュニケーションを継続使用する意欲を向上させることが可能となる。また、情報システム１は、キャラクタオブジェクトに対して所定の操作に対応付けられた所定の動作を行わせることにより、モーションデータを用いる場合よりも端末装置２の処理負荷を低減させ、且つ、端末装置２とサーバ装置３間の通信負荷の増加を防止することが可能となる。

【0252】

（変形例３）
表示処理部２７４は、コミュニケーション画面中に追加させる追加オブジェクトを選択するための選択ボタンを、コミュニケーション画面に含めてもよい。例えば、ユーザＡによる入力装置２４の操作によって選択ボタンが選択されると、表示処理部２７４は、端末記憶装置２２に記憶された複数の追加オブジェクトを含むグループから、所定の選択方法に基づいて一又は複数の追加オブジェクトを選択する。なお、所定の選択方法は、複数の追加オブジェクトを含むグループからランダムに抽選する方法、複数の追加オブジェクトを含むグループから所定の順番により選択する方法等である。そして、表示処理部２７４及び送信部２７２は、選択された追加オブジェクトのオブジェクトＩＤと追加指示を用いて追加処理を実行する。これにより、ユーザＡのキャラクタオブジェクトは、選択された追加オブジェクトに基づいてユーザ出力情報を変更することができる。

【0253】

なお、この場合、選択された追加オブジェクトと関連がある装着オブジェクトを装着しているキャラクタオブジェクトのユーザＢのコミュニケーション画面中に、装着ボタンを含めるようにしてもよい。追加オブジェクトと関連がある装着オブジェクトは、例えば、追加オブジェクトと同一属性の装着オブジェクト、又は、追加オブジェクトと同一色の装着オブジェクト等である。この場合、オブジェクトテーブルＴ２において、各オブジェクトＩＤに関連付けて、各オブジェクトの属性を示す情報及び／又は色を示す情報が記憶される。また、ユーザテーブルＴ１において、各ユーザのユーザＩＤに関連付けて、各ユーザのキャラクタオブジェクトの属性を示す情報及び／又は色を示す情報が記憶される。属性は、例えばオブジェクトの型（男性又は女性等）である。また、属性は、オブジェクトを取得可能な抽選ゲームの種類でもよい。ユーザＢよる入力装置２４の操作によって装着ボタンが選択されると、表示処理部２７４は、選択された追加オブジェクトのオブジェクトＩＤを特定し、表示処理部２７４及び送信部２７２は、選択された追加オブジェクトのオブジェクトＩＤと追加指示を用いて追加処理を実行する。これにより、ユーザＡのユーザ出力画像に含まれる追加オブジェクトに関連がある装着オブジェクトを、ユーザＢのキャラクタオブジェクトに装着させることができ、ユーザＡがユーザＢとのコミュニケーションを継続使用する意欲を向上させることが可能となる。なお、選択された追加オブジェクトと関連がある壁紙オブジェクトを適用しているユーザ出力画像のユーザＢのコミュニケーション画面中に、装着ボタンを含めるようにしてもよい。

【0254】

（変形例４）
追加オブジェクト１３１１を含むユーザ出力画像８１２ａが表示されたコミュニケーション画面１３１０に対する所定の操作がユーザＡによって行われない場合、追加オブジェクト１３１１は、ユーザＡの端末装置２のコミュニケーション画面１３１０に表示され続けてもよい。この場合、追加オブジェクト１３１１はマーク画像に変更されてもよい。これにより、ユーザＡは、自身の好みのタイミングで、追加オブジェクト１３１１に対応する装着オブジェクト等によってユーザキャラクタを変更させることができる。

【0255】

また、ユーザＡによって所定の操作が行われない追加オブジェクト１３１１の数が所定数を超えた場合、他のユーザＢ（ユーザＢ１～Ｂ３）のそれぞれの端末装置２に、サーバ装置３を介して、ユーザＡによって所定の操作が行われない追加オブジェクト１３１１に関する情報を送信してもよい。この場合、ユーザＢ（ユーザＢ１～Ｂ３）のそれぞれの端末装置２において、ユーザＡによって所定の操作が行われない追加オブジェクト１３１１が表示される。そして、ユーザＢによって追加オブジェクト１３１１に対する所定の操作がされた場合、ユーザＢの端末装置２の入力装置２４が、ユーザＡの端末装置２の入力装置２４に替わり、承諾指示を、追加オブジェクト１３１１のオブジェクトＩＤとともに端末処理装置２７に入力する。以降、承諾処理が実行される。これにより、ユーザＡが、他のユーザＢから贈られた追加オブジェクトに対応する装着オブジェクトを装着しない場合でも、ユーザＡとは異なる他のユーザが、追加オブジェクトに対応する装着オブジェクトを装着することが可能となる。

【0256】

（変形例５）
キャラクタオブジェクトが、３次元のアニメーションを生成するための３次元モデルデータに基づいて生成される場合、各ユーザのユーザ出力画像は、ユーザごとに定められた仮想空間内に配置された立体オブジェクト（３次元オブジェクト）であるキャラクタオブジェクトを、当該仮想空間内の所定の視点から見た画像であってもよい。例えば、表示処理部２７４は、所定の視点の視線方向に２次元スクリーンを配置し、仮想空間内に配置された各種の立体オブジェクトの３次元座標を当該２次元スクリーンに投影し、各種のオブジェクトが投影された２次元スクリーン面の画像をユーザ出力画像として表示する。なお、例えば、ユーザＡの端末装置２において表示されるユーザＡのユーザ出力画像を表示するための所定の視点の視線方向は、ユーザＡのキャラクタオブジェクトに向く方向である。そして、ユーザＡの端末装置２において表示されるユーザＡのユーザ出力画像を表示するための２次元スクリーンは、所定の視点の移動及び視線方向の回転に応じて、移動及び回転するように制御される。

【0257】

例えば、ユーザＡのキャラクタオブジェクト８１１ａが新たな装着オブジェクトを装着した場合、図１１（ｂ）に示されるコミュニケーション画面１１１０が表示されるが、当該コミュニケーション画面１１１０の表示の前又は後において、表示処理部２７４は、所定の視点を自動的に移動させてもよい。

【0258】

例えば、ユーザＡのキャラクタオブジェクト８１１ａが新たな装着オブジェクトを装着した場合、表示処理部２７４は、所定の視点をユーザＡのキャラクタオブジェクト８１１ａに近づくように移動させてもよい。例えば、表示処理部２７４は、ユーザＡのキャラクタオブジェクト８１１ａが新たな装着オブジェクトを装着したときの所定の視点の位置と新たな装着オブジェクトの位置とを結ぶ経路を算出し、当該経路にそって自動的に移動させる。表示処理部２７４は、仮想空間内において自動的に移動する所定の視点から見た仮想空間を示す画像をユーザ出力画像として表示する。

【0259】

図１７（ａ）は、仮想空間内において自動的に移動する所定の視点から見た仮想空間を示す画像をユーザ出力画像１０１２ａとしたコミュニケーション画面１７００の一例を示す図である。図１７（ａ）に示す例では、ユーザＡのキャラクタオブジェクト８１１ａの髪型が新たな装着オブジェクトに変更されたため、拡大されたキャラクタオブジェクト１０１１ａの頭部を含むユーザ出力画像１０１２ａが表示される。

【0260】

例えば、表示処理部２７４は、ユーザＡのキャラクタオブジェクト８１１ａが新たな装着オブジェクトを装着したときに、装着後のキャラクタオブジェクト１０１１ａの周囲に経路を設定する。そして、表示処理部２７４は、所定の視点の視線方向をキャラクタオブジェクト１０１１ａに向く方向に合せながら、所定の視点を当該経路にそって自動的に移動させる。表示処理部２７４は、仮想空間内において自動的に移動する所定の視点から見た仮想空間を示す画像をユーザ出力画像として表示する。

【0261】

図１７（ｂ）は、仮想空間内において自動的に移動する所定の視点から見た仮想空間を示す画像をユーザ出力画像１０１２ａとしたコミュニケーション画面１７１０の他の一例を示す図である。図１７（ａ）に示す例では、ユーザＡのキャラクタオブジェクト１０１１ａの周囲を移動している時のユーザ出力画像１０１２ａであり、キャラクタオブジェクト１０１１ａの背面を含むユーザ出力画像１０１２ａが表示される。

【0262】

また、表示処理部２７４は、コミュニケーション画面に対するユーザＡによる入力装置２４の所定の操作に応じて、所定の視点の移動及び／又は所定の視点の視線方向の回転を制御してもよい。また、表示処理部２７４は、コミュニケーション画面中に、所定の視点を自動的に移動させるための自動移動ボタンを、コミュニケーション画面に含めてもよい。この場合、例えば、ユーザＡによる入力装置２４の操作によって自動移動ボタンが選択されると、表示処理部２７４は、予め定められた移動ルールに応じて所定の視点を自動的に移動させてもよい。

【0263】

（変形例６）
キャラクタオブジェクトが、３次元のアニメーションを生成するための３次元モデルデータに基づいて生成される場合、各ユーザのユーザ出力画像は、各ユーザに共通の仮想空間内に配置された立体オブジェクト（３次元オブジェクト）であるキャラクタオブジェクトの所定位置（例えば、キャラクタオブジェクトの目の位置）に配置されたユーザ視点から仮想空間内を見た画像でもよい。なお、ユーザ視点は、ユーザによる操作に応じて及び／又は自動で、キャラクタオブジェクトの所定位置から移動して、キャラクタオブジェクトの後方、上方、又は前方等に位置してもよい。

【0264】

各ユーザに共通の仮想空間におけるコミュニケーションサービスの利用方法の一例について説明する。例えば、図１８に示すように、表示処理部２７４は、仮想空間内において、ユーザＡのキャラクタオブジェクトＣのユーザ視点からの視野範囲内に、仮想のタブレットＰＣ等の装置オブジェクトＳを登場させる。この装置オブジェクトＳの表示装置部分に、図６～１５及び１７において説明した各種画面が表示される。この場合、装置オブジェクトＳの表示装置部分に表示されるユーザＡのユーザ出力画像は、装置オブジェクトＳの所定位置に設けられた仮想カメラから仮想空間内を見た２次元画像である。ユーザＡの音声データは、端末装置２のマイク２６によって取得された音声データである。

【0265】

端末装置２の送信部２７２は、ユーザＡのユーザ出力画像と、ユーザＡの音声データと、ユーザＡのユーザＩＤとを、サーバ装置３を経由して全てのユーザＢの端末装置２に送信する。なお、送信部２７２は、ユーザＡのユーザ出力画像に替えて、仮想空間内における仮想カメラの位置及び視線方向、仮想空間内におけるユーザＡのキャラクタオブジェクトの位置及びボディの向き、並びに、ユーザＡのモーションデータを送信してもよい。また、ユーザＡの端末装置２は、各ユーザＢの端末装置２から、サーバ装置３を介して、各ユーザＢのユーザ出力画像と、各ユーザＢの音声データと、各ユーザＢのユーザＩＤとを受信する。そして、ユーザＡの端末装置２の表示処理部２７４は、各ユーザＢのユーザ出力画像を装置オブジェクトＳの表示装置部分に表示し、各ユーザＢの音声データを端末装置２から音声出力する。これにより、仮想の装置オブジェクトＳを用いたコミュニケーションサービスを実現することが可能となる。

【0266】

（変形例７）
端末装置２の端末処理装置２７により実現される機能の少なくとも一部は、端末装置２の端末処理装置２７以外のプロセッサにより実現されてもよい。端末処理装置２７により実現される機能の少なくとも一部は、例えば、サーバ装置３のサーバ処理装置３３により実現されてもよい。具体的には、生成部２７１と表示処理部２７４の機能の一部は、サーバ装置３において実行されてもよい。例えば、端末装置２は、連続的に取得した撮像データと音声データを、端末装置２を操作するユーザのユーザＩＤとともにサーバ装置３に送信する。そして、サーバ装置３は、生成部２７１及び表示処理部２７４の機能を用いて、キャラクタ動画データを生成し、全てのユーザのユーザ出力画像を含むコミュニケーション画面を表示装置２３に表示するための表示情報を生成する。そして、サーバ装置３は、表示情報を、音声情報（音声データ）とともに全てのユーザの各端末装置２に送信する。各端末装置２は、サーバ装置３から受信した各情報を出力する（所謂「サーバレンダリング」）。

【0267】

（変形例８）
端末装置２は、端末装置２に記憶された制御プログラムに含まれる各種命令を実行することにより、コミュニケーション画面等を表示する機能を有するが、端末装置２は、コミュニケーションサービスを実現するために、ウェブアプリケーションに組み込まれたブラウザ機能を呼び出し、このブラウザ機能を用いて、サーバ装置からウェブページ（ＨＴＭＬ（Hyper Text Markup Language）等のマークアップ言語によって記述されたドキュメント）を受信し、このウェブページに組み込まれた制御プログラムを実行してもよい（所謂「ブラウザレンダリング」）。例えば、マークアップ言語として、ＨＴＭＬ ５が用いられることにより、端末装置２は、新規な情報処理を容易に実行することができる。端末装置においてコミュニケーションサービスを実現させるためにこのようなウェブアプリケーションを採用することにより、プログラムの製作者は、サーバ装置により送信されるウェブページに新しいプログラムを組み込むだけで新しい情報処理をクライアントサイド（端末装置側）に提供することができ、新しいプログラムの製作工数を大幅に抑えることが可能となる。また、クライアントサイドでは、新しい制御プログラムをダウンロードせずにウェブページを受信するだけで、新しいサービスの提供を受けることができ、制御プログラムのダウンロードに比べ、通信ネットワークの負荷、通信コスト及び／又は通信時間の低減が可能となり且つユーザのインターフェースの簡素化を実現することが可能となる。

【0268】

（変形例９）
ユーザＡの端末装置２の生成部２７１は、撮像データを用いずにフェイスモーションデータを含む出力情報を生成してもよい。例えば、端末装置２の端末記憶装置２２には、音声データに対応するフェイスモーションデータを記憶しており、生成部２７１は、取得したユーザＡの音声データに対応するフェイスモーションデータを端末記憶装置２２から抽出して、抽出したフェイスモーションデータと、音声データ及びユーザＡのユーザＩＤとを含む出力情報を生成してもよい。また、ユーザＡの端末装置２の生成部２７１は、フェイスモーションデータを含めずに、マイク２６から出力されたユーザＡの音声データと端末記憶装置２２に記憶されたユーザＩＤとを含む出力情報を生成してもよい。この場合、ユーザＢの端末装置２の表示処理部２７４は、サーバ装置３経由で受信したユーザＡの出力情報に含まれるユーザＡの音声データに対応するフェイスモーションデータを抽出して、ユーザＡのキャラクタオブジェクトのアニメーションを生成してもよい。なお、ユーザの音声データに対応するフェイスモーションデータの生成処理は、公知のリップシンクアルゴリズムを用いた処理であってもよい。

【0269】

このように、ＨＭＤを表示装置２３として用いるユーザＡの端末装置２において、ユーザＡの撮像データを取得することなしに、キャラクタオブジェクトを介したコミュニケーションをユーザＢと行うことが可能となる。

【符号の説明】

【0270】

１ 情報システム
２（２ａ、２ｂ１、２ｂ２） 端末装置
２１ 端末通信Ｉ／Ｆ
２２ 端末記憶装置
２３ 表示装置
２４ 入力装置
２５ 撮像装置
２６ マイク
２７ 端末処理装置
２７１ 生成部
２７２ 送信部
２７３ 受信部
２７４ 表示処理部
２７５ 音声出力部
３ サーバ装置
３１ サーバ通信Ｉ／Ｆ
３２ サーバ記憶装置
３３ サーバ処理装置
３３１ サーバ受信部
３３２ サーバ送信部
４ 基地局
５ 移動体通信網
６ ゲートウェイ
７ インターネット

【要約】

【課題】他ユーザとのコミュニケーションを継続しようとするユーザの意欲を向上させることを可能とする。
【解決手段】端末装置の制御プログラムは、第１ユーザの端末装置に、第１ユーザを示す第１オブジェクトを含む第１画像と、第２ユーザを示す第２オブジェクトを含む第２画像とを少なくとも表示し、第１画像の表示に関する情報を第２ユーザの端末装置に送信し、第１ユーザの第１音声を取得した場合、第１音声を第２ユーザの端末装置に送信し、第１ユーザの動作又は第１音声に応じて変化する第１オブジェクトを含む第１画像を表示し、第２ユーザの第２音声を受信した場合、第２音声を出力し、第２ユーザの動作又は第２音声に応じて変化する第２オブジェクトを含む第２画像を表示し、第１ユーザによる指示又は第２ユーザによる指示に応じて、少なくとも一部が変更された第１画像又は少なくとも一部が変更された第２画像を表示すること、を実行させる。
【選択図】図３

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】