特開 2022-149193 配信システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022149193

(43)【公開日】2022-10-06

(54)【発明の名称】配信システム

(51)【国際特許分類】

   H04N 21/239 20110101AFI20220929BHJP

   G06F 13/00 20060101ALI20220929BHJP

【ＦＩ】

H04N21/239

G06F13/00 540A

【審査請求】未請求

【請求項の数】6

【出願形態】ＯＬ

(21)【出願番号】P 2021051230

(22)【出願日】2021-03-25

(71)【出願人】

【識別番号】308036402

【氏名又は名称】株式会社ＪＶＣケンウッド

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】西村 典子

【テーマコード（参考）】

5B084

5C164

【Ｆターム（参考）】

5B084AA01

5B084AA12

5B084AA29

5B084AB07

5B084BB14

5B084CA07

5B084CB06

5B084CB23

5B084CF12

5B084DC02

5B084DC03

5B084DC06

5C164GA07

5C164SB01S

5C164SB29P

5C164SB41S

5C164UB41S

5C164YA07

5C164YA12

(57)【要約】

【課題】実演者及び視聴者に臨場感を与える。
【解決手段】配信システムは、実演を行う実演者の実演映像を取得し、取得した実演映像を送信する配信装置と、配信装置から送信される実演映像を受信し、受信した実演映像に基づいて配信用映像を生成し、生成した配信用映像を送信するサーバ装置と、サーバ装置から送信される配信用映像を受信し、受信した配信用映像を受信側表示部に表示する受信装置とを備え、受信装置は、配信用映像を視聴する視聴者を撮影した視聴者映像を取得し、取得した視聴者映像を送信し、サーバ装置は、受信装置から送信される視聴者映像を受信し、配信用映像を視聴する視聴者の視聴状態に応じた表示態様で視聴者映像を表示又は非表示とした視聴状況映像を生成し、生成した視聴状況映像を送信し、配信装置は、サーバ装置から送信される視聴状況映像を受信し、受信した視聴状況映像を配信側表示部に表示する。
【選択図】図１

【特許請求の範囲】

【請求項1】

実演を行う実演者の実演映像を取得し、取得した前記実演映像を送信する配信装置と、
前記配信装置から送信される前記実演映像を受信し、受信した前記実演映像に基づいて配信用映像を生成し、生成した前記配信用映像を送信するサーバ装置と、
前記サーバ装置から送信される前記配信用映像を受信し、受信した前記配信用映像を受信側表示部に表示する受信装置と
を備え、
前記受信装置は、前記配信用映像を視聴する前記視聴者を撮影した視聴者映像を取得し、取得した前記視聴者映像を送信し、
前記サーバ装置は、前記受信装置から送信される前記視聴者映像を受信し、前記配信用映像を視聴する前記視聴者の視聴状態に応じた表示態様で前記視聴者映像を表示又は非表示とした視聴状況映像を生成し、生成した前記視聴状況映像を送信し、
前記配信装置は、前記サーバ装置から送信される前記視聴状況映像を受信し、受信した前記視聴状況映像を配信側表示部に表示する
配信システム。

【請求項2】

前記配信装置は、前記配信側表示部に表示された前記視聴者映像に対して前記実演者が応答する場合の応答情報を取得し、取得した前記応答情報を送信し、
前記サーバ装置は、前記配信装置から送信される前記応答情報を受信し、受信した前記応答情報に基づいて前記配信用映像の少なくとも一部の表示態様を変化させる
請求項１に記載の配信システム。

【請求項3】

前記配信装置は、前記実演者と前記配信側表示部との位置関係に応じた表示態様で前記視聴者映像を表示する
請求項１又は請求項２に記載の配信システム。

【請求項4】

前記サーバ装置は、前記実演映像を表示するための表示領域と、前記表示領域に対応し前記実演映像を視聴する視聴者のアイコンを配置可能なアイコン配置領域とを含む配信用映像を生成し、
前記視聴状態は、前記表示領域と前記アイコンとの位置関係を含む
請求項１から請求項３のいずれか一項に記載の配信システム。

【請求項5】

前記視聴状態は、前記配信用映像に対する前記視聴者の積極性の度合いを示す積極度を含み、
前記サーバ装置は、前記積極度が基準を下回る前記視聴者の前記視聴者映像が非表示となるように前記視聴状況映像を生成する
請求項１から請求項４のいずれか一項に記載の配信システム。

【請求項6】

実演を行う実演者の実演映像を取得し、前記実演映像に基づいて配信用映像を生成し、生成した前記配信用映像を配信する配信システムであって、
前記配信用映像を視聴する視聴者を撮影した視聴者映像が前記視聴者側から送信された場合、前記配信システムは、前記視聴者映像を受信し、前記配信用映像を視聴する前記視聴者の視聴状態に応じた表示態様で前記視聴者映像を表示または非表示とした視聴状況映像を生成する、
配信システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、配信システムに関する。

【背景技術】

【0002】

実演を行う実演者の実演映像等の映像を配信する配信装置と、配信される映像を受信して表示する受信装置とを備える配信システムが知られている（例えば、特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特許第３８３２３１８号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１に記載の配信システム等では、実演者及び視聴者に臨場感を与えることが困難である。

【0005】

本発明は、上記に鑑みてなされたものであり、実演者及び視聴者に臨場感を与えることが可能な配信システムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明に係る配信システムは、実演を行う実演者の実演映像を取得し、取得した前記実演映像を送信する配信装置と、前記配信装置から送信される前記実演映像を受信し、受信した前記実演映像に基づいて配信用映像を生成し、生成した前記配信用映像を送信するサーバ装置と、前記サーバ装置から送信される前記配信用映像を受信し、受信した前記配信用映像を受信側表示部に表示する受信装置とを備え、前記受信装置は、前記配信用映像を視聴する前記視聴者を撮影した視聴者映像を取得し、取得した前記視聴者映像を送信し、前記サーバ装置は、前記受信装置から送信される前記視聴者映像を受信し、前記配信用映像を視聴する前記視聴者の視聴状態に応じた表示態様で前記視聴者映像を表示又は非表示とした視聴状況映像を生成し、生成した前記視聴状況映像を送信し、前記配信装置は、前記サーバ装置から送信される前記視聴状況映像を受信し、受信した前記視聴状況映像を配信側表示部に表示する。

【発明の効果】

【0007】

本発明によれば、実演者及び視聴者に臨場感を与えることが可能な配信システムを提供することができる。

【図面の簡単な説明】

【0008】

【図1】図１は、本実施形態に係る配信システムの一例を模式的に示す図である。

【図2】図２は、配信装置の一例を示す機能ブロック図である。

【図3】図３は、配信装置及び当該配信装置に接続される機器の一例を模式的に示す図である。

【図4】図４は、サーバ装置の一例を示す機能ブロック図である。

【図5】図５は、受信装置の一例を示す機能ブロック図である。

【図6】図６は、配信用映像の一例を模式的に示す図である。

【図7】図７は、視聴状況映像の一例を模式的に示す図である。

【図8】図８は、視聴者映像の表示態様の設定例を説明する図である。

【図9】図９は、視聴者映像の表示態様の設定例を説明する図である。

【図10】図１０は、視聴者映像の表示態様の設定例を説明する図である。

【図11】図１１は、視聴者映像の表示態様の設定例を説明する図である。

【図12】図１２は、本実施形態に係る配信システムの動作の流れを示すフローチャートである。

【図13】図１３は、配信装置及び当該配信装置に接続される機器の他の例を模式的に示す図である。

【図14】図１４は、配信装置にて表示される管理画面の一例を示す図である。

【発明を実施するための形態】

【0009】

以下、本発明に係る配信システムの実施形態を図面に基づいて説明する。なお、この実施形態によりこの発明が限定されるものではない。また、下記実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。

【0010】

図１は、本実施形態に係る配信システム１００の一例を模式的に示す図である。図１に示すように、配信システム１００は、配信装置１０と、サーバ装置３０と、受信装置５０とを備える。配信装置１０、サーバ装置３０及び受信装置５０は、ネットワークＮＷを介して接続される。配信システム１００は、ネットワークＮＷを介して、実演者による実演の映像及び音声を視聴者に配信する。実演者による実演の例としては、例えば楽器等の演奏、歌曲の歌唱、演劇、舞踊、曲芸、演芸、朗詠、プレゼンテーション、結婚式、フィットネス、講演、授業等が挙げられる。

【0011】

図２は、配信装置１０の一例を示す機能ブロック図である。図２に示すように、配信装置１０は、入力部１１と、出力部１２と、通信部１３と、制御部１４と、記憶部１５とを備える。

【0012】

入力部１１は、例えば撮影部１６、音声入力部１７、操作部１８等の入力機器に接続される。撮影部１６、音声入力部１７、操作部１８等の一部または全部を配信装置１０が備える構成としてもよい。図３は、配信装置１０及び当該配信装置１０に接続される機器の一例を模式的に示す図である。撮影部１６は、例えば１台又は複数台のカメラを有する。撮影部１６は、実演者Ｐによる実演を撮影して実演映像を生成する。撮影部１６は、例えば上手側、中央側、下手側に配置される。音声入力部１７は、例えば１つ又は複数のマイクを有する。音声入力部１７は、実演者による実演を収音して実演音声を生成する。音声入力部１７は、例えば撮影部１６に内蔵された構成であってもよい。音声入力部１７は、マイクに代えて、またはマイクに加えて電子楽器または音声ミキサー等の音を入力するインタフェース（いわゆるライン入力）を備えてもよい。操作部１８は、例えばキーボード、マウス、タッチパネル等の入力装置により構成される。操作部１８は、配信装置１０に所定の情報を入力する。操作部１８は、例えば後述する表示部１９に表示される視聴状況映像から１つ以上の視聴者映像を選択するための入力操作を行うことができる。

【0013】

出力部１２は、表示部（配信側表示部）１９、音声出力部２０等の出力機器に接続される。表示部（配信側表示部）１９、音声出力部２０等の一部または全部を配信装置１０が備える構成としてもよい。表示部１９は、画像等の情報を表示する。表示部１９としては、例えばプロジェクタ装置及び投影スクリーン等の投影システム、液晶パネル等の表示パネル、等の各種の表示機器が用いられる。表示部１９は、１つ又は複数設けられる。表示部１９は、後述する視聴状況映像を表示可能である。本実施形態において、表示部１９は、実演者が実演を行う実演スペース２５の全体をカバーする大きさとなっているが、これに限定されない。例えば、一部のスペースに参加者を動員し、空いているスペースに表示部１９を配置してもよい。音声出力部２０は、音声情報を出力する。音声出力部２０は、例えばスピーカ等により構成される。

【0014】

通信部１３は、ネットワークＮＷを介して情報の送受信が可能である。通信部１３は、有線通信及び無線通信のいずれの通信を行うものであってもよい。通信部１３は、サーバ装置３０との間で情報の送受信を行う。

【0015】

制御部１４は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等の処理装置と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）又はＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等の記憶装置を有する。制御部１４は、配信装置１０を統括的に制御する。制御部１４は、入力情報取得部２１と、通信制御部２２と、出力制御部２３と、応答情報取得部２４とを有する。

【0016】

入力情報取得部２１は、入力部１１に入力される実演映像、実演音声、操作信号等の情報を取得する。通信制御部２２は、通信部１３で受信した各種情報を取得する。

【0017】

通信制御部２２は、入力情報取得部２１で取得した実演映像、実演音声を通信部１３からサーバ装置３０に送信させる。通信制御部２２は、後述する実演者の応答情報を通信部１３からサーバ装置３０に送信させる。

【0018】

出力制御部２３は、表示部１９及び音声出力部２０の動作を制御する。出力制御部２３は、表示部１９の表示内容を設定する。出力制御部２３は、後述するサーバ装置３０から送信される視聴状況映像を表示部１９に表示する。

【0019】

応答情報取得部２４は、表示部１９に表示される視聴状況映像に対する実演者の応答情報を取得する。応答情報は、例えば、視聴映像に表示される視聴者映像に対して実演者が応答を行ったことを示す情報と、実演者が応答を行った対象となる視聴者（又は受信装置５０）を示す情報と、を含む。

【0020】

記憶部１５は、各種情報を記憶する。記憶部１５は、例えばハードディスクドライブ、ソリッドステートドライブ等のストレージを有している。なお、記憶部１５として、リムーバブルディスク等の外部記憶媒体が用いられてもよい。

【0021】

図４は、サーバ装置３０の一例を示す機能ブロック図である。図４に示すように、サーバ装置３０は、通信部３１と、制御部３２と、記憶部３３とを備える。通信部３１は、ネットワークＮＷを介して配信装置１０及び受信装置５０との間で情報の通信が可能である。

【0022】

制御部３２は、サーバ装置３０の動作を統括的に制御する。制御部３２は、ＣＰＵ等の処理装置と、ＲＡＭ又はＲＯＭ等の記憶装置を有する。制御部３２は、通信制御部３４と、配信用映像生成部３５と、視聴状況映像生成部３６と、音量設定部３７とを有する。

【0023】

通信制御部３４は、通信部３１の動作を制御する。通信制御部３４は、通信部３１で受信した各種情報を取得する。また、通信制御部３４は、各種情報を通信部３１から送信させる。

【0024】

配信用映像生成部３５は、配信装置１０から送信される実演映像に基づいて、配信用映像を生成する。配信用映像は、後述する受信装置５０の表示部５９に表示させるための映像である。配信用映像生成部３５は、配信装置１０が備える構成としてもよい。また、配信用映像生成部３５は、受信装置５０が備える構成としてもよい。この場合、受信装置５０が、実演映像に基づいて表示部５９に表示させるための映像（配信用映像）を生成する。

【0025】

視聴状況映像生成部３６は、受信装置５０から送信される視聴者映像に基づいて、視聴状況映像を生成する。視聴状況映像は、配信用映像７０を視聴する視聴者の視聴状況を示す映像である。視聴状況映像は、配信用映像７０を視聴する視聴者の視聴状態に応じた表示態様で視聴者映像を表示又は非表示とした映像である。

【0026】

音量設定部３７は、実演音声及び後述する視聴者音声の音量を設定する。

【0027】

記憶部３３は、各種情報を記憶する。記憶部３３は、例えばハードディスクドライブ、ソリッドステートドライブ等のストレージを有している。なお、記憶部３３として、リムーバブルディスク等の外部記憶媒体が用いられてもよい。記憶部３３は、後述する受信装置５０の表示部に表示する配信用映像のデータを記憶する。

【0028】

図５は、受信装置５０の一例を示す機能ブロック図である。図５に示すように、受信装置５０は、入力部５１と、出力部５２と、通信部５３と、制御部５４と、記憶部５５とを備える。受信装置５０としては、例えばスマートフォン、タブレット、パーソナルコンピュータ、カラオケ端末等の汎用端末が挙げられる。受信装置５０は、これらの汎用端末に限らず、専用端末でもよい。受信装置５０は、視聴者が保有する端末でもよいし、配信事業者またはカラオケ店舗等の施設（受信装置５０を備えた施設）を管理する事業者が保有する端末でもよい。事業者が保有する端末装置５０は、事業者が視聴者に貸与して視聴者が使用してもよいし、事業者が管理するカラオケ店舗等の施設（受信装置５０を備えた施設）に視聴者が訪れて使用してもよい。配信システム１００において、受信装置５０は、１つ以上、例えば複数設けられる。

【0029】

入力部５１は、各種情報の入力を行う。入力部５１は、撮影部５６、音声入力部５７、操作部５８等に接続される。撮影部５６、音声入力部５７、操作部５８等の一部または全部を受信装置５０が備える構成としてもよい。撮影部５６は、例えば１台又は複数台のカメラを有する。撮影部５６は、配信用映像を視聴する視聴者を撮影して視聴者映像を生成する。音声入力部５７は、例えば１つ又は複数のマイクを有する。音声入力部５７は、配信用映像を視聴する視聴者の音声または拍手の音などを収音して視聴者音声を生成する。音声入力部５７は、例えば撮影部５６に内蔵された構成であってもよい。操作部５８は、例えばキーボード、マウス、タッチパネル等の入力装置により構成される。操作部５８は、受信装置５０に所定の情報を入力する。操作部５８は、例えば視聴者のアイコンの位置を設定する際に用いることができる。

【0030】

出力部５２は、表示部（受信側表示部）５９、音声出力部６０等に接続される。表示部（受信側表示部）５９、音声出力部６０等の一部または全部を受信装置５０が備える構成としてもよい。表示部５９は、画像等の情報を表示する。表示部５９は、例えば液晶パネル等の表示パネルを有する。表示部５９は、配信用映像７０を表示可能である。受信装置５０の表示部５９には、配信用映像７０に加えてユーザインタフェース（アプリケーションソフトウェアの操作画面）を表示してもよい。ユーザインタフェースは専用のアプリケーション（いわゆるネイティブアプリケーション）でもよいし、ウェブブラウザで動作するアプリケーション（いわゆるウェブアプリケーション）でもよい。表示部５９は、音声出力部２０は、音声情報を出力する。音声出力部２０は、例えばスピーカ等により構成される。

【0031】

通信部５３は、ネットワークＮＷを介して情報の送受信が可能である。通信部５３は、有線通信及び無線通信のいずれの通信を行うものであってもよい。通信部５３は、サーバ装置３０との間で情報の送受信を行う。

【0032】

制御部５４は、ＣＰＵ等の処理装置と、ＲＡＭ又はＲＯＭ等の記憶装置を有する。制御部５４は、受信装置５０における統括的な制御を行う。制御部５４は、入力情報取得部６１と、通信制御部６２と、出力制御部６３とを有する。

【0033】

入力情報取得部６１は、入力部５１に入力される視聴者の映像、音声、操作信号等の情報を取得する。通信制御部６２は、通信部５３で受信した各種情報を取得する。また、通信制御部６２は、入力情報取得部６１で取得した視聴者の映像、音声を通信部５３から送信させる。

【0034】

出力制御部６３は、表示部５９及び音声出力部６０の動作を制御する。出力制御部６３は、表示部５９の表示内容を設定する。出力制御部６３は、表示部５９に表示される視聴者映像の表示態様を設定する。出力制御部２３は、後述する受信装置５０からの状態情報に基づいて、視聴者映像の表示態様を設定する。出力制御部２３による視聴者映像の表示態様の具体的な設定動作については、後述する。

【0035】

記憶部５５は、例えばハードディスクドライブ、ソリッドステートドライブ等のストレージを有している。なお、記憶部５５として、リムーバブルディスク等の外部記憶媒体が用いられてもよい。記憶部５５は、各種情報を記憶する。

【0036】

次に、上記のように構成された配信システム１００の動作の一例を説明する。撮影部１６及び音声入力部１７は、実演者が行った所定の実演を、それぞれ撮影及び収音し、実演映像及び実演音声を生成する。なお、実演者による実演は、例えば上手側、中央側、下手側等のように異なる方向に配置される複数の撮影部１６で撮影を行ってもよい。撮影部１６で撮影された実演映像及び音声入力部１７で収音された実演音声は、配信装置１０の入力部１１に入力される。

【0037】

配信装置１０において、入力情報取得部２１は、入力部１１に入力される実演映像及び実演音声を取得する。通信制御部２２の制御により、入力情報取得部２１で取得した実演映像及び実演音声が通信部１３からサーバ装置３０に送信される。サーバ装置３０は、配信装置１０から送信された実演映像及び実演音声を受信する。

【0038】

配信用映像生成部３５は、配信装置１０から送信される実演映像に基づいて、配信用映像を生成する。図６は、配信用映像の一例を模式的に示す図である。図６に示すように、配信用映像７０は、表示領域７１と、アイコン配置領域７２とが設けられる背景画像７５を含む。表示領域７１は、配信装置１０から送信される実演映像７３を表示する領域である。表示領域７１は、例えば実演会場のステージに相当する。アイコン配置領域７２は、表示領域７１に対応して設けられる。アイコン配置領域７２は、実演映像を視聴する視聴者のアイコン７４を配置可能な領域である。アイコン配置領域７２は、例えば実演会場の観客席に相当する。配信用映像７０は、いわゆるＶｉｒｔｕａｌ Ｒｅａｌｉｔｙ映像、３６０度映像であってもよい。配信用映像生成部３５は、配信装置１０から送信される実演映像７３を背景画像７５の表示領域７１に合成する。受信装置５０の表示部５９は複数のディスプレイ等、例えば大画面のディスプレイと、スマートフォン、タブレット、またはカラオケ端末等とに分けてもよい。配信用映像生成部３５は、表示部５９が複数の場合、例えば表示領域７１を大画面のディスプレイに表示させ、アイコン配置領域をスマートフォン、タブレット、またはカラオケ端末等に表示させるように配信用映像を生成してもよい。配信用映像７０では、受信装置５０の操作部５８において自身のアイコン７４をドラッグまたはスワイプしたときは自身のアイコン７４の位置を移動させることができ、自身のアイコン７４以外の位置をドラッグまたはスワイプしたときは、映像を表示する角度または範囲を変更できるようにしてもよい。また、タッチパネルのピンチイン・ピンチアウト操作、またはスクロール操作によって、配信用映像７０の表示範囲と拡大率をそれぞれ変更できるようにしてもよい。例えば実演映像７３のみを表示したい場合は、こうした操作によって、実演映像７３の大きさを受信装置５０の表示部５９の大きさと同一にすることが可能である。また、こうした操作を行った際に、受信装置５０の表示部５９に表示されなくなったアイコン７４からの音声、または実演映像７３が表示部５９に表示されなくなった場合の実演映像７３の実演音声は、音声出力部６０から出力されないようにしてもよい。

【0039】

また、視聴者は、受信装置５０からサーバ装置３０にアクセスし、背景画像７５のアイコン配置領域７２のうち所望の位置にアイコン７４を配置するように設定する。配信用映像生成部３５は、背景画像７５のアイコン配置領域７２のうち設定された位置にアイコン７４を合成する。

【0040】

配信用映像生成部３５は、背景画像７５の表示領域７１に実演映像７３を合成し、アイコン配置領域７２にアイコン７４を合成することにより、配信用映像７０を生成する。図６に示す例では、例えば６つのアイコン７４（７４ａ～７４ｆ）が合成された配信用映像７０が示されている。以下の説明において、図示される複数のアイコン７４を区別する場合、アイコン７４ａ、アイコン７４ｂ等のように個々のアイコン７４を示す符号を付して表記する。なお、異なる方向に配置される複数の撮影部１６で実演者による実演を撮影した場合、配信用映像生成部３５は、表示領域７１とアイコン７４との位置関係に基づいて、配信用映像７０に合成する実演映像を複数の実演映像の中から選択することができる。例えば、アイコン７４が表示領域７１の上手側に配置される場合、配信用映像生成部３５は、当該アイコン７４に対応する受信装置５０に送信する配信用映像７０に、実演者による実演を上手側から撮影した実演映像７３を合成することができる。具体的には、例えば複数の実演画像７３のうちどの実演画像を選択するかについて、アイコン配置領域７２を複数の領域に分けて選択領域を設け、アイコン７４がどの選択領域に位置しているかに基づいて、配信用映像生成部３５は実演画像７３を選択してもよい。また、配信用映像生成部３５は、アイコン７２の位置に基づいて、実演画像７３を拡大または縮小してもよい。この場合、配信用映像生成部３５は、例えば実演画像７３の横方向はアイコン７２の位置に近い位置、実演画像７３の縦方向は実演者の顔画像を中心にして拡大または縮小してもよい。また、配信用映像生成部３５は、表示領域７１とアイコン７４との関係に基づいて、アイコン７４の動きに合わせて実演画像７３が滑らかに変更されるように画像処理することが好ましい。この場合、配信用映像生成部３５は、撮影部１６の数を数十台程度まで増やした映像を用い、または３Ｄモデリング等を使用して画像処理することが好ましい。また、配信用映像生成部３５は、アイコン７４の位置を変化させずに、所定のアイコン（例えば双眼鏡等の拡縮操作を示すアイコン）を視聴者がクリックまたはタップした場合に、実演画像７３を拡大した映像に切り替えてもよい。なお、配信用映像生成部３５は、所定のアイコンをクリックまたはタップしたタイミング（時刻）を各視聴者と関連づけて記録しておき、タイミングが一致または類似する（近い）視聴者は相性がよいことを示す表示をアイコン７４に追加して表示してもよい。配信用映像生成部３５は、相性がよいことを示す表示として、例えばパーセンテージ（相性のよさの度合いを示す数値）をアイコン７４とともに表示するように映像を生成してもよいし、相性がよい視聴者のアイコン７４のサイズを大きく表示するように映像を生成してもよいし、交流を推奨する他の視聴者として表示するように映像を生成してもよい。

【0041】

また、音量設定部３７は、配信用映像７０における表示領域７１とアイコン７４との位置関係に基づいて、実演音声の音量を設定することができる。例えば、音量設定部３７は、アイコン７４が表示領域７１の近くに配置されるほど、当該アイコン７４に対応する受信装置５０に送信する実演音声の音量が大きくなるように設定できすることができる。また、音量設定部３７は、アイコン７４が表示領域７１から遠くに配置されるほど、当該アイコン７４に対応する受信装置５０に送信する実演音声の音量が小さくなるように設定することができる。この動作により、実演会場で実演を観賞する場合と同様の聞こえ方で音声を聞くことができる。また、同様の趣旨から、音量設定部３７は、表示領域７１の上手側、中央側、下手側等のように左右方向の位置に応じて、実演音声に含まれる音声成分ごとに音量を調整してもよい。具体的な例として、音量設定部３７は、アイコン７４が下手側に位置しているときに下手側にて実演している楽器の音量を大きくしてもよい。音量設定部３７は、音量だけでなく周波数特性を設定してもよい。また、アイコン７４に方向を示す情報を付加し、音声の指向性を持たせることで、音量設定部３７は、アイコン７４の方向によって音量、音声成分、周波数特性等を変更してもよい。

【0042】

生成された配信用映像７０及び実演音声は、通信制御部３４の制御により、受信装置５０に配信される。

【0043】

受信装置５０は、サーバ装置３０から送信された配信用映像７０を受信する。通信制御部６２は、受信した配信用映像７０を取得する。出力制御部６３は、取得された配信用映像７０を表示部５９に表示させる。視聴者は、表示部５９に表示される配信用映像７０を視聴することができる。

【0044】

撮影部５６は、配信用映像７０を視聴する視聴者を撮影し、視聴者映像を生成する。音声入力部５７は、配信用映像７０を視聴する視聴者の音声を収音し、視聴者音声を生成する。視聴者映像及び視聴者音声は、入力部５１に入力される。入力情報取得部６１は、入力された視聴者映像及び視聴者音声を取得する。通信制御部６２の制御により、取得された視聴者映像及び視聴者音声が通信部５３からサーバ装置３０に送信される。

【0045】

サーバ装置３０は、視聴者映像及び視聴者音声を受信する。また、通信制御部３４は、受信した視聴者音声を、例えば受信先の受信装置５０とは異なる受信装置５０に送信することができる。この動作により、実演会場で実演を観賞する際に他の観客の歓声等を把握できるのと同様、視聴者の間で配信用映像７０に対する他の視聴者の反応を把握し合うことができる。この場合、音量設定部３７は、アイコン配置領域７２に配置されるアイコン７４同士の位置関係に基づいて、視聴者音声の音量を設定することができる。例えば、音量設定部３７は、アイコン７４同士が近くに配置されるほど、互いに相手のアイコン７４に対応する受信装置５０に送信する視聴者音声の音量が大きくなるように設定できすることができる。また、音量設定部３７は、アイコン７４同士が遠くに配置されるほど、互いに相手のアイコン７４に対応する受信装置５０に送信する視聴者音声の音量が小さくなるように設定することができる。

【0046】

配信用映像生成部３５は、取得した視聴者映像を、アイコン７４に代えて、又はアイコン７４に加えて、アイコン配置領域７２に合成することができる。この場合、一の視聴者の視聴者映像が表示された状態で配信用映像７０が各受信装置５０に送信される。つまり、一の視聴者の視聴者映像が他の視聴者に配信される。この動作により、実演会場で実演を観賞する際に他の観客の様子等を把握できるのと同様、視聴者の間で配信用映像７０に対する他の視聴者の様子を把握し合うことができる。また、この動作により実演の開始前、休憩中、または実演の終了後等に、アイコン７４が近くに位置している視聴者同士で会話できるようにしてもよい。自身のアイコン７４の位置は、当該アイコン７４をドラッグアンドドロップ等の操作により動かしてもよいし、例えば、スマートフォンの位置、方向等を取得するセンサを用いて、スマートフォンの動作に合わせて動くようにしてもよく、進む・後退・右を向く等のボタンを設けてもよいし、その他のユーザインタフェースを適宜利用してもよい。

【0047】

視聴状況映像生成部３６は、例えば受信した視聴者映像及び視聴者音声と、アイコン配置領域７２に設定されたアイコン７４の位置とに基づいて、配信用映像７０を視聴する視聴者の視聴状態を検出する。視聴状況映像生成部３６は、視聴状態に応じた表示態様で視聴者映像を表示又は非表示とした視聴状況映像を生成する。また、視聴状況映像生成部３６は、自身の視聴者画像が視聴映像として視聴状況映像に表示されている視聴者に、表示されている旨を通知してもよい。具体的には、視聴状況映像生成部３６は、受信装置５０に表示するアイコン７４の態様を変更してもよいし、受信装置５０に文字や画像等で通知してもよい。また、視聴状況映像生成部３６は、受信装置５０で視聴者映像として表示する前に、表示することを視聴者に確認してもよい。なお、視聴者は受信装置５０で自身の視聴映像及び音声の公開範囲を設定でき、配信用映像生成部３５は、設定された公開範囲に基づき、取得した視聴者映像をアイコン配置領域７２に合成してもよい。また、受信装置５０では、視聴者が他の視聴者について友達登録できるようにしてもよい。友達登録の方法としては、例えば、他の視聴者のうち友達登録をしていない視聴者のアイコン７４から所定距離内に自身のアイコン７４を移動し、友達登録をしていない視聴者のアイコン７４をタップまたはクリックすることで友達登録をしていない視聴者に対して友達申請を送れるようにするのが好ましい。友達申請を送られた視聴者が申請を許可するとお互いに友達登録ができる。受信装置５０で設定できる公開範囲として、例えば、視聴状況映像、友達の受信装置５０の視聴者映像、友達以外の視聴者の受信装置５０の視聴者映像に関して、それぞれ公開または非公開を設定可能とすることが好ましい。

【0048】

図７は、視聴状況映像の一例を模式的に示す図である。図７に示すように、視聴状況映像８０は、１つ以上の視聴者映像８１を含む。視聴者映像８１は、各受信装置５０において撮影される映像である。視聴状況映像生成部３６は、視聴者の視聴状況に応じて、１つ以上の視聴者映像８１を所定の位置に配置することができる。図７では、例えば６つの視聴者映像８１（８１ａ～８１ｆ）が表示される場合を示している。以下の説明において、図示される複数の視聴者映像８１を区別する場合、視聴者映像８１ａ、視聴者映像８１ｂ等のように個々の視聴者映像８１を示す符号を付して表記する。この場合、視聴者映像８１ａは、図６等に示す配信用映像７０のアイコン７４ａに対応する視聴者の映像であるとする。また、視聴者映像８１ｂは、配信用映像７０のアイコン７４ｂに対応する視聴者の映像であるとする。同様に、視聴者映像８１ｃ、８１ｄ、８１ｅ、８１ｆは、それぞれ配信用映像７０のアイコン７４ｃ、７４ｄ、７４ｅ、７４ｆに対応する視聴者の映像であるとする。

【0049】

視聴状況映像生成部３６は、例えば、表示領域７１の位置とアイコン７４の位置との位置関係に基づいて、視聴者映像の表示態様を設定することができる。

【0050】

図８は、視聴者映像の表示態様の設定例を説明する図である。図８に示すように、視聴状況映像生成部３６は、アイコン７４がアイコン配置領域７２のうち表示領域７１の近傍の近傍領域７２ａに配置されている視聴者（アイコン７４ａ、７４ｃ、７４ｆに対応する視聴者）については視聴状況映像８０に視聴者映像８１（８１ｂ、８１ｄ、８１ｅ）を表示し、アイコン７４が近傍領域７２ａに配置されていない視聴者（アイコン７４ｂ、７４ｄ、７４ｅに対応する視聴者）については視聴状況映像８０に視聴者映像を表示しない態様とすることができる。なお、図８ではアイコン配置領域７２を座席として表示しているが、視聴状況映像生成部３６は、例えば座席を表示せずフリースペースとして表示してもよい。また、実演映像７３を視聴する権利を実際の実演会場の座席指定チケットと同様に座席指定の権利とし、視聴状況映像生成部３６は、表示領域７１を表示するときはアイコン配置領域７２のうち視聴者の指定座席にのみアイコン７４を位置させることを可能としてもよい。また、この場合、前方の席は料金が高くなるように視聴者へ課金するよう設定してもよい。図８に示すような座席を模した、又は実在するホール等の座席画像を用いることで、視聴者は配信映像に加えて会場の雰囲気を楽しむことができる。また、視聴状況映像生成部３６は、アイコン７４が近傍領域７２ａに配置されている視聴者を視聴状況映像８０に表示する映像を生成することで、実際に会場に行った場合と同様に前方席の視聴者についてのみ実演者から視認することが可能となり、実演者及び視聴者双方に臨場感を与えることができる。また、視聴状況映像生成部３６は、前方席に位置する視聴者のみを表示する映像を生成することで、限られたリソースの中で実演者と視聴者の双方に臨場感を与えつつ、視聴者映像８１を視聴状況映像８０に表示することができる。ここで、限られたリソースとは、例えば視聴状況映像８０の表示領域、サーバ装置８０の処理能力、ネットワークＮＷにかかる通信負荷など各種の制限を意味する。視聴状況映像８０は、視聴者映像８０に限らずアイコン７４の画像や視聴者のアバター等を含めてもよい。また、視聴状況映像生成部３６は、アイコン７４を実演会場の周辺に移動できるようにしてもよい。実演会場の周辺とは、例えば、実演会場施設内のロビー、売店もしくは控室等、または実演会場施設付近の飲食店等が挙げられる。実演会場と実演会場の周辺とのアイコン７４の移動は、出入口を模した画像を介して行えるようにしてもよいし、３次元の仮想空間を移動することができるようにしてもよい。視聴状況映像生成部３６は、アイコン７４が実演会場に入っている視聴者のみ、視聴者映像８１を視聴状況映像８０に表示してもよい。なお、視聴状況映像生成部３６は、視聴者が実演音声に集中できるように、実演会場内では他の視聴者の音声の音量を自動的に所定の値まで小さくする、またはゼロにしてもよい。この場合においても、視聴状況映像生成部３６は、限られたリソースの中で実演者と視聴者の双方に臨場感を与えながら視聴者映像８１を視聴状況映像８０に表示することができる。また、視聴状況映像生成部３６は、視聴者同士の会話の内容を音声認識し、その会話における話題から実演者に関する内容を抽出してアイコン７４の周辺にテキスト表示してもよい。この場合、実演の終演後等に多数の視聴者で実演者に関する話題を共有し、会話をすることが容易になる。

【0051】

図９は、視聴者映像の表示態様の設定例を説明する図である。図９に示すように、視聴状況映像生成部３６は、表示領域７１の位置とアイコン７４ａ～７４ｆの位置との間で上手側及び下手側の位置関係が同一となるように、視聴状況映像８０内に視聴者映像８１ａ～８１ｆを表示することができる。この態様により、実際の実演会場でステージ側から観客席側を見た場合と同様の態様で視聴者映像８１を表示することができる。

【0052】

図１０は、視聴者映像の表示態様の設定例を説明する図である。図１０に示すように、視聴状況映像生成部３６は、表示領域７１に近い位置にアイコン７４が配置される視聴者の視聴者映像８１を相対的に大きく表示し、表示領域７１から遠い位置にアイコン７４が配置される視聴者の視聴者映像８１を相対的に小さく表示することができる。例えば、表示領域７１に最も近い位置に配置されるアイコン７４ｃ、７４ｆに対応する視聴者映像８１ｃ、８１ｆが、視聴状況映像８０において最も大きく表示される。また、表示領域７１に２番目に近い位置に配置されるアイコン７４ａに対応する視聴者映像８１ａが、視聴状況映像８０において２番目に大きく表示される。また、表示領域７１に３番目に近い位置に配置されるアイコン７４ｄ、７４ｅに対応する視聴者映像８１ｄ、８１ｅが、視聴状況映像８０において３番目に大きく表示される。また、表示領域７１に最も遠い位置に配置されるアイコン７４ｂに対応する視聴者映像８１ｂが、視聴状況映像８０において最も小さく表示される。この態様により、実際の実演会場でステージ側から観客席側を見た場合と同様の態様で視聴者映像８１を表示することができる。なお、視聴者映像８１は、静止画でも動画でもよく、静止画を動的に切り替えたり、静止画と動画とを適宜切り替えたりしてもよい。仮想空間上のアイコン７４の位置と実演者が見る視聴者映像８１の位置とが連動することで、実演者に臨場感を与えることが可能になる。また、視聴者には多様な要望があり、例えば「前方に行きたい」、「実演者に自分の顔を覚えてほしい」、「下手に自分が応援している実演者がいる」、「実演者に見られるのは恥ずかしい」などの要望を、視聴者が直感的にシステムに入力することができる。また、配信システム１００は、視聴者の多様な要望に対応しつつ、視聴者映像８１を動的に変化させることで、表示可能な視聴者映像８１の数を増加または減少させることもできる。配信システム１００は、視聴者の多様な要望に対応しつつ、視聴者映像８１を動的に変化させることで、適切な表示により臨場感を与えることができる。また、視聴者に段階的な課金を設定し、課金の金額に応じて視聴状況映像８０の表示態様を変えてもよい。

【0053】

また、視聴状況映像生成部３６は、例えば、表示部１９に対する実演者Ｐ１の位置に応じて、視聴者映像の表示態様を設定することができる。

【0054】

図１１は、視聴者映像の表示態様の設定例を説明する図である。図１１に示すように、視聴状況映像生成部３６は、表示部１９のうち実演者Ｐ１が存在する位置に対応する領域に視聴者映像８１が表示されるように視聴状況映像を生成することができる。この態様により、実演者が視聴者映像８１を把握しやすくなる。また、実演者Ｐ１が複数存在し、視聴者が特定の実演者を選択できる構成の場合、視聴状況映像生成部３６は、表示部１９のうち視聴者の選択した実演者の位置に対応する領域に当該実演者を選択した視聴者の視聴者映像８１が表示されるように視聴状況映像を生成することができる。この態様により、視聴者が選択した実演者の近くに当該視聴者の視聴者映像８１を表示することができる。具体的には、配信装置１０またはサーバ装置３０は、撮影部１６を用いた顔検出、視線検出、骨格検出等、または放射温度計もしくはＴｏＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）センサ等の他のセンサを用いて実演者の位置を特定してもよい。視聴状況映像生成部３６は、実演者の位置に基づいて視聴者映像８１を生成する。特に視聴者が特定の実演者を応援する画像等を掲示している場合、視聴状況映像生成部３６は、応援画像に含まれる文字または顔画像等を画像認識し、応援されている実演者の視認しやすい位置に視聴者映像８１が表示されるようにしてもよい。視聴状況映像生成部３６は、応援画像の検出を記録し、又は、声援の音声を音声認識し、各視聴者と応援している実演者とを対応付けたデータベースを作成することで、特定の実演者を応援している視聴者の視聴者映像８１を特定の実演者の視認しやすい位置に表示する映像を生成してもよい。視聴状況映像生成部３６は、実演者の動きに合わせて視聴者映像８１を動的に変化させるように生成してもよい。

【0055】

上記のように生成された視聴状況映像は、通信制御部３４の制御により、通信部３１から配信装置１０に送信される。配信装置１０は、送信された視聴状況映像を受信する。通信制御部２２は、受信された視聴状況映像を取得する。出力制御部２３は、取得した視聴状況映像を表示部１９に表示する。

【0056】

また、視聴状況映像生成部３６は、配信用映像７０に対する視聴者の積極性の度合いを示す積極度に応じて、視聴者映像の表示態様を設定することができる。積極度は、配信用映像７０を視聴する際、例えば、実演者に対して声援を送っている、声援の音量が大きい、動きが大きい、実演者の動きに対応して動いている、踊っている、実演者の応援グッズを使用している、笑顔である、感動して泣いている（感情が動いている）、視聴者の顔が視聴者映像に映っている、というように、配信用映像７０に対して肯定的な言動をとる場合に高い値となる指標である。制御部３２は、視聴状況映像に対して画像認識、顔認識、音声認識、骨格認証、等を適宜組み合わせ、または放射温度計もしくはＴｏＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）センサ等の他のセンサを用いて視聴者の積極度を測定してもよい。また、積極度は、視聴者の視聴者映像を視聴状況映像に表示することが許可されている、視聴者が配信用映像７０に対して否定的なワード又は禁止ワードを発言した履歴がない、というように、配信用映像７０に対して消極的な言動をとらない場合に高い値となる。上記に示した例を含め、制御部３２は、所定の項目ごとにスコアを算出し、スコアに応じて積極度を設定することができる。視聴状況映像生成部３６は、例えば、積極度が基準以上である視聴者の視聴者映像８１が表示となり、積極度が基準を下回る視聴者の視聴者映像８１が非表示となるように視聴状況映像８０を生成することができる。制御部３２は、視聴状況映像の画像認識結果に基づいて積極度を算出してもよいし、視聴者がコメント欄等に入力するテキストによるコメントの内容に基づいて積極度を算出してもよい。また、視聴者のＳＮＳ（Ｓｏｃｉａｌ Ｎｅｔｗｏｒｋｉｎｇ Ｓｅｒｖｉｃｅ）等のアカウントと連携できるようにしてもよく、制御部３２は、ＳＮＳの情報を参照して積極度を算出してもよい。また、学校の授業等で配信システム１００を使用する場合、視聴状況映像生成部３６は、寝ている生徒など、積極度が低く算出される視聴者をあえて優先して表示するように視聴者映像を生成してもよい。

【0057】

図１４は、配信装置１０の操作者が確認する管理画面の例である。図１４に示す管理画面の例では、ユーザ１からユーザ３０までの管理状況、強制退出ボタン、表示部１９の輝度管理、及び視聴者の音量管理等が表示されている。ユーザの管理状況の中には、表示名、視聴者映像８１を表示中か否か、視聴者の顔が視聴者映像８１に映っているか否か、ＮＧワードを発した回数が含まれている。また、笑顔スコア、声援スコア、動きスコア、応援グッズスコアが表示されており、これらの合計値として積極度が規定されている。この例では、積極度は各スコアの合計値としたが、所定の係数等を用いた計算を行ってもよい。図１４に示す管理画面の例では、ユーザ１からユーザ３０までの管理状況が表示されているが、視聴状況映像を表示しているユーザの管理状況のみ、もしくは、スコアや状況に変化があったユーザの管理状況のみを表示するようにしてもよい。このように所定の項目ごとにスコアを算出することができる。なお、所定項目ごとのスコアの算出は、管理画面に表示せず、サーバ装置の制御部等で自動的に行ってもよい。

【0058】

実演者は、表示部１９に表示された視聴状況映像８０に対して、応答を行うことができる。応答情報取得部２４は、表示部１９に表示される視聴状況映像に対して実演者が応答を行う場合、当該実演者の応答情報を取得する。応答情報取得部２４は、実演者の視線を検出し、検出結果に基づいて応答情報を取得してもよい。この場合、応答情報取得部２４は、例えば撮影部１６で撮影される実演映像に基づいて実演者の視線を検出することができる。応答情報取得部２４は、検出結果に基づいて、実演者が表示部１９を注視しているかを検出し、表示部１９を注視している場合には表示部１９のどの位置を注視しているかを検出する。応答情報取得部２４は、実演者の視線が表示部１９のうち視聴者映像が表示されている部分又はその近傍を注視していることが検出された場合、実演者が視聴者映像に対して応答を行っていると判定する。この場合、応答情報取得部２４は、実演者が注視している位置及びその近傍に映っている視聴者映像を抽出し、抽出した視聴者映像に対応する視聴者（又は受信装置５０）を特定する。このように、応答情報取得部２４は、実演者が応答を行っていることと、実演者の応答の対象となる視聴者を示す情報とを応答情報として取得する。

【0059】

実演者が視聴者映像に応答する例としては、視聴者映像に視線を向けることに限定されない。例えば、実演者が視聴者映像に声を掛ける、手を振る、指をさす、視線を送る、実演者または配信装置１０の操作者が操作部１８により視聴者映像をクリックまたはタップする等して選択する、等であってもよい。図３の例では、操作部１８は配信装置１０の操作者が用いるマウスを模した絵となっているが、実演者が使用する操作部１８としては、実演をしながら使用できるように例えば、マイクにボタンを追加したものであったり、携帯可能な端末であったりしてもよい。応答情報取得部２４は、例えば実演映像及び実演音声に基づいて、実演者が声を掛けたことと、実演者が声を掛けた対象となる視聴者映像とを応答情報として取得する。応答情報取得部２４は、例えば実演映像に基づいて、実演者が手を振ったこと、指をさしたこと、視線を送ったこと、及び、これらの対象となる視聴者映像を応答情報として取得する。また、応答情報取得部２４は、実演者が操作部１８により視聴者映像を選択した場合には、選択により応答を行ったことと、選択の対象となる視聴者映像とを応答情報として取得する。

【0060】

通信制御部２２は、応答情報取得部２４で取得された応答情報を通信部１３からサーバ装置３０に送信させる。サーバ装置３０は、配信装置１０から送信された応答情報を受信する。通信制御部３４は、応答情報を取得する。

【0061】

サーバ装置３０は、応答情報に基づいて配信用映像の少なくとも一部の表示態様を変化させることができる。例えば、配信用映像生成部３５は、実演者の応答の対象である視聴者の受信装置５０に送信する配信用映像７０について、当該視聴者を示すアイコン７４の表示態様を変化させることができる。配信用映像生成部３５は、例えばアイコン７４を点滅、拡縮、移動、変形、変色またはこれらの組み合わせ等のように表示が経時変化する態様としてもよい。

【0062】

この動作により、実演者の応答の対象である視聴者の受信装置５０の表示部５９には、表示態様が変化した状態でアイコン７４が表示される。視聴者は、アイコン７４の表示態様の変化を視認することにより、実演者から応答があったことを把握できる。本実施形態に係る配信システム１００では、実演者から配信される配信用映像７０に対して、視聴者から実演者へ、また、実演者から視聴者へと、双方向のコミュニケーションを行うことが可能となっている。

【0063】

図１２は、本実施形態に係る配信システム１００の動作の流れを示すフローチャートである。図１２に示すように、配信システム１００では、配信装置１０、サーバ装置３０、及び受信装置５０の起動、または撮影もしくは収音の開始操作等をトリガとして動作を開始する（スタート）。撮影部１６及び音声入力部１７は、実演者による実演を撮影及び収音し、実演映像及び実演音声を生成する（ステップＳ１０１）。生成された実演映像及び実演音声は、入力部１１に入力される。通信制御部２２は、入力された実演映像及び実演音声を、通信部１３からサーバ装置３０に送信させる（ステップＳ１０２）。サーバ装置３０は、配信装置１０から送信された実演映像及び実演音声を受信する（ステップＳ１０３）。配信用映像生成部３５は、背景画像７５の表示領域７１に実演映像７３を合成する（ステップＳ１０４）。

【0064】

一方、視聴者は、受信装置５０からサーバ装置３０にアクセスし、アイコン７４の配置の設定を行う（ステップＳ１０５）。サーバ装置３０の配信用映像生成部３５は、設定された位置にアイコン７４を合成する（ステップＳ１０６）。これにより、配信用映像７０が生成される。通信制御部２２は、生成された配信用映像７０を、通信部３１から受信装置５０に送信させる（ステップＳ１０７）。

【0065】

受信装置５０は、サーバ装置３０から送信された配信用映像７０を受信する（ステップＳ１０８）。受信した配信用映像７０は、通信制御部６２により取得され、出力制御部６３により表示部５９に表示される（ステップＳ１０９）。視聴者は、表示部５９に表示される配信用映像７０を視聴することができる。

【0066】

撮影部５６及び音声入力部５７は、配信用映像７０を視聴する視聴者を撮影及び視聴者の音声を収音し、視聴者映像及び視聴者音声を生成する（ステップＳ１１０）。視聴者映像及び視聴者音声は、入力部５１に入力され、通信制御部６２の制御により通信部５３からサーバ装置３０に送信される（ステップＳ１１１）。

【0067】

サーバ装置３０は、視聴者映像及び視聴者音声を受信する（ステップＳ１１２）。視聴状況映像生成部３６は、配信用映像７０を視聴する視聴者の視聴状態を検出し、視聴状態に応じた表示態様で視聴者映像を表示又は非表示とした視聴状況映像を生成する（ステップＳ１１３）。

【0068】

視聴状況映像は、通信制御部３４の制御により、通信部３１から配信装置１０に送信される（ステップＳ１１４）。配信装置１０は、送信された視聴状況映像を受信する（ステップＳ１１５）。視聴状況映像は、通信制御部２２により取得され、出力制御部２３により表示部１９に表示される（ステップＳ１１６）。

【0069】

応答情報取得部２４は、表示部１９に表示される視聴状況映像に対して実演者が応答を行う場合、当該実演者の応答情報を取得する（ステップＳ１１７）。通信制御部２２は、応答情報取得部２４で取得された応答情報を通信部１３からサーバ装置３０に送信させる（ステップＳ１１８）。サーバ装置３０は、配信装置１０から送信された応答情報を受信する（ステップＳ１１９）。

【0070】

サーバ装置３０は、応答情報に基づいて配信用映像の少なくとも一部の表示態様を変化させる（ステップＳ１２０）。実演者の応答の対象である視聴者の受信装置５０の表示部５９には、表示態様が変化した状態でアイコン７４が表示される（ステップＳ１２１）。視聴者は、アイコン７４の表示態様の変化を視認することにより、実演者から応答があったことを把握できる。なお、図１２に示すフローチャートでは、配信装置１０、サーバ装置３０、及び受信装置５０における各動作の終了後にそれぞれエンドとしているが、終了操作の受付、所定時間の経過、または所定回数（ループ）の経過まで、一連の動作を繰り返し実施（ループ）させることが好ましい。

【0071】

以上のように、本実施形態に係る配信システム１００は、実演を行う実演者の実演映像７３を取得し、取得した実演映像７３を送信する配信装置１０と、配信装置１０から送信される実演映像７３を受信し、受信した実演映像７３に基づいて配信用映像７０を生成し、生成した配信用映像７０を送信するサーバ装置３０と、サーバ装置３０から送信される配信用映像７０を受信し、受信した配信用映像７０を表示部５９に表示する受信装置５０とを備え、受信装置５０は、配信用映像７０を視聴する視聴者を撮影した視聴者映像８１を取得し、取得した視聴者映像８１を送信し、サーバ装置３０は、受信装置５０から送信される視聴者映像８１を受信し、配信用映像７０を視聴する視聴者の視聴状態に応じた表示態様で視聴者映像８１を表示又は非表示とした視聴状況映像８０を生成し、生成した視聴状況映像８０を送信し、配信装置１０は、サーバ装置３０から送信される視聴状況映像８０を受信し、受信した視聴状況映像８０を表示部１９に表示する。

【0072】

この構成によれば、受信装置５０において視聴者映像８１が取得され、サーバ装置３０において視聴状況映像８０が生成され、配信装置１０において視聴状況映像８０が表示部１９に表示されるため、実演者は表示部１９に表示される視聴状況映像８０を見ることにより、視聴者の視聴状態を容易に把握することが可能となる。

【0073】

本実施形態に係る配信システム１００において、配信装置１０は、表示部１９に表示された視聴者映像８１に対して実演者が応答する場合の応答情報を取得し、取得した応答情報を送信し、サーバ装置３０は、配信装置１０から送信される応答情報を受信し、受信した応答情報に基づいて配信用映像７０の少なくとも一部の表示態様を変化させる。この構成によれば、視聴者は配信用映像７０の表示態様の変化を確認することで、実演者からの応答があったことを把握できる。このため、実演者から視聴者へのコミュニケーションを容易に行うことが可能となる。

【0074】

本実施形態に係る配信システム１００において、配信装置１０は、実演者と表示部１９との位置関係に応じた表示態様で視聴者映像８１を表示する。この構成によれば、実演者が視聴者映像８１を認識しやすくなる。

【0075】

本実施形態に係る配信システム１００において、サーバ装置３０は、実演映像７３を表示するための表示領域７１と、表示領域７１に対応し実演映像７３を視聴する視聴者のアイコン７４を配置可能なアイコン配置領域７２とを含む配信用映像７０を生成し、状態情報は、表示領域７１とアイコン７４との位置関係を含む。この構成によれば、表示領域７１とアイコン７４との位置関係に応じて、多様な表示態様で視聴状況映像８０を生成することができる。

【0076】

本実施形態に係る配信システム１００において、状態情報は、配信用映像７０に対する視聴者の積極度を含み、サーバ装置３０は、積極度が基準を下回る視聴者の視聴者映像８１が非表示となるように視聴状況映像８０を生成する。この構成によれば、配信用映像７０に対して積極性の高い視聴者の視聴状況を選択的に表示部１９に表示させることができる。

【0077】

本発明の技術範囲は上記実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更を加えることができる。例えば、上記実施形態では、配信装置１０が配置される環境が無観客の状態である場合を例に挙げて説明したが、これに限定されない。図１３は、配信装置１０及び当該配信装置１０に接続される機器の他の例を模式的に示す図である。図１３に示すように、実演スペース２５に対して観客席２６が配置された構成であってもよい。この場合、表示部１９Ａ、１９Ｂ、１９Ｃは、実演スペース２５から見て観客席２６の後方に配置される。この構成によれば、実演者は、観客席２６の観客の反応と受信装置５０の視聴者の反応との両方を把握することができる。また、観客席２６の観客と受信装置５０の視聴者との間で、実演者による実演に対する反応を共有することができる。また、実演映像７３は複数の映像であってもよい。例えば、配信用映像７０の大きさを、実演映像７３及びアイコン７４の大きさと比べて十分に大きくすることで、視聴者はアイコン７４を動かしたり、実演映像７３に適宜近づいたり、表示範囲を変更したりして実演を視聴することができる。例えば、実演映像７３を複数のウェブサイトに配置し、視聴者が複数のウェブサイトを行き来することで複数の実演映像７３を視聴できるようにしてもよい。実演映像７３を複数配置することで、複数の実演者が複数のステージで同時に実演を行ういわゆるフェスと呼ばれるイベント、博覧会または学会などの複数の講演またはポスターセッション等が同時に行われるイベントなどの実施が可能である。なお、上記説明したすべての実施形態では、各機能（動作）を配信装置１０、サーバ装置３０、または受信装置５０の一部（における実施）としてそれぞれ説明したが、あくまでも一例であり、システム全体として配信装置１０、サーバ装置３０、または受信装置５０の各機能（動作）が実施されればよく、機能（動作）の実施主体を限定するものではない。また、配信システム１００は、配信装置１０及びサーバ装置３０の各機能（動作）のみを含み、受信装置５０の各機能（動作）を含まない構成でもよい。

【符号の説明】

【0078】

Ｐ１…実演者、ＮＷ…ネットワーク、１０…配信装置、１１，５１…入力部、１２，５２…出力部、１３，３１，５３…通信部、１４，３２，５４…制御部、１５，３３，５５…記憶部、１６，５６…撮影部、１７，５７…音声入力部、１８，５８…操作部、１９，１９Ａ，１９Ｂ，１９Ｃ，５９…表示部、２０，６０…音声出力部、２１，６１…入力情報取得部、２２，３４，６２…通信制御部、２３，６３…出力制御部、２４…応答情報取得部、２５…実演スペース、２６…観客席、３０…サーバ装置、３５…配信用映像生成部、３６…視聴状況映像生成部、３７…音量設定部、５０…受信装置、７０…配信用映像、７１…表示領域、７２…アイコン配置領域、７２ａ…近傍領域、７３…実演映像、７４…アイコン、７５…背景画像、８０…視聴状況映像、８１…視聴者映像、１００…配信システム

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】