特許 7075202 端末装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-05-17

(45)【発行日】2022-05-25

(54)【発明の名称】端末装置

(51)【国際特許分類】

   G06F 3/0488 20220101AFI20220518BHJP

   G06F 3/14 20060101ALI20220518BHJP

   G06F 3/0481 20220101ALI20220518BHJP

   G09G 5/00 20060101ALI20220518BHJP

   H04N 21/436 20110101ALI20220518BHJP

   H04N 21/442 20110101ALI20220518BHJP

【ＦＩ】

G06F3/0488

G06F3/14 350A

G06F3/0481

G09G5/00 510H

G09G5/00 550C

G09G5/00 510V

H04N21/436

H04N21/442

【請求項の数】 3

(21)【出願番号】P 2017242037

(22)【出願日】2017-12-18

(65)【公開番号】P2019109694

(43)【公開日】2019-07-04

【審査請求日】2020-10-27

(73)【特許権者】

【識別番号】000004352

【氏名又は名称】日本放送協会

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】230118913

【弁護士】

【氏名又は名称】杉村 光嗣

(74)【代理人】

【識別番号】100161148

【弁理士】

【氏名又は名称】福尾 誠

(74)【代理人】

【識別番号】100163511

【弁理士】

【氏名又は名称】辻 啓太

(72)【発明者】

【氏名】神戸 喬輔

(72)【発明者】

【氏名】藤澤 和也

(72)【発明者】

【氏名】金谷 美加

(72)【発明者】

【氏名】増渕 悠

【審査官】菅原 浩二

(56)【参考文献】

【文献】特開２０１１－０４８６１０（ＪＰ，Ａ）

【文献】特開２０１７－０５０６０９（ＪＰ，Ａ）

【文献】特開２０１４－１２３２５２（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１５／０２９４６４５（ＵＳ，Ａ１）

【文献】特開２０１２－１３３０６８（ＪＰ，Ａ）

【文献】特開２０１３－２４６５８３（ＪＰ，Ａ）

【文献】特表２０１２－５２１０４３（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１２／０１３９９３９（ＵＳ，Ａ１）

【文献】特開２０１１－２３７５３２（ＪＰ，Ａ）

【文献】特開２０１６－２２５７６２（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１６／０３４９８９３（ＵＳ，Ａ１）

【文献】特開２０１５－０７９４８０（ＪＰ，Ａ）

【文献】特開２０１２－１６９７３９（ＪＰ，Ａ）

【文献】特開２０１１－２２３０６０（ＪＰ，Ａ）

【文献】特開２００４－０６４１２３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０４８－０４８９５

Ｇ０６Ｆ ３／１４

Ｇ０９Ｇ ５／００

Ｈ０４Ｎ ２１／４３６

Ｈ０４Ｎ ２１／４４２

(57)【特許請求の範囲】

【請求項1】

自装置とともに平面上または立体表面上に配置された他の端末装置との相対的な位置関係を決定する端末装置であって、
タッチ面に対するタッチ操作によるタッチ位置を検出し、前記タッチ位置をスライドさせるスライド操作により、前記タッチ面内において、前記タッチ面の外縁に沿って設定された複数の外縁領域の少なくとも１つがタッチされた場合、該タッチされた外縁領域および該外縁領域がタッチされたタイミングを示すセンサ情報を生成する検出部と、
前記他の端末装置との直接通信により、前記検出部により生成されたセンサ情報を前記他の端末装置に送信するとともに、前記他の端末装置から前記センサ情報を受信する共有部と、
自装置と前記他の端末装置との同期をとるとともに、前記共有部が前記他の端末装置との間で送受信したセンサ情報に基づき、自装置と前記他の端末装置との相対的な位置関係を決定する決定部と、を備え、
前記検出部は、自装置と前記他の端末装置とのローカル時刻の差分をさらに検出し、
前記決定部は、自装置および前記他の端末装置の中で基準となる端末装置と自装置とのローカル時刻の差分に基づき、自装置と他の端末装置との同期をとり、
前記決定部は、配信対象の映像を分割した複数の分割映像を生成し、前記複数の分割映像それぞれの格納場所を示す情報を含むマニフェストファイルを生成する配信装置から、前記マニフェストファイルを取得し、前記決定した自装置と他の端末装置との相対的な位置関係に基づく、自装置の位置に対応する分割映像を、前記マニフェストファイルに基づいて取得し、
前記決定部により取得された分割映像を自装置が備える表示部に表示する再構成部をさらに備えることを特徴とする端末装置。

【請求項2】

請求項１に記載の端末装置において、
前記タッチ面は、矩形であり、
前記外縁領域は、前記矩形のタッチ面の四辺それぞれに対応して設けられていることを特徴とする端末装置。

【請求項3】

請求項２に記載の端末装置において、
前記タッチ面の四辺のうち、少なくとも一辺に沿って、複数の外縁領域が設けられていることを特徴とする端末装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、端末装置に関する。

【背景技術】

【0002】

８Ｋ－ＳＨＶに代表されるような超高精細な高解像度映像のコンテンツ（高解像度映像コンテンツ）が普及しつつある。このような高解像度映像コンテンツには、高い再現性が得られる、本物を見ているような立体感を視聴者に感じさせることができるといった特徴がある。

【0003】

しかしながら、上記のような高解像度映像コンテンツを、ユーザが使用する、携帯電話、スマートフォン、タブレット端末などの端末装置において再生する再生環境が十分には整っていないのが現状である。例えば、映像コンテンツを視聴者に提供する方式としては、映像コンテンツを放送波で送信するＢｒｏａｄｃａｓｔｉｎｇ型、映像コンテンツを端末装置で受信しつつ、受信した部分から順次再生するＳｔｒｅａｍｉｎｇ型、映像コンテンツ全体を端末装置で受信した後に生成するＤｏｗｎｌｏａｄ型などがある。高解像度映像コンテンツは、データ容量が大きいため、上述したＳｔｒｅａｍｉｎｇ型の適用は困難であり、Ｖｉｄｅｏ ＰｏｄｃａｓｔなどのＤｏｗｎｌｏａｄ型の適用が考えられる。また、上述の受信環境を考慮すると、現状ではＢｒｏａｄｃａｓｔｉｎｇ型の適用も決して容易ではない。

【0004】

また、近年、端末装置の中には、２Ｋ／４Ｋレベルの映像を表示可能なディスプレイを備えたものもある。しかしながら、現状では、さらに高解像度の８Ｋレベルの映像を表示可能なディスプレイを端末装置に搭載することは、コストなどの観点から難しい。

【0005】

ところで、近年の通信サービスの高速化・低価格化、および、スマートフォンなどの端末装置の普及に伴い、ユーザは、場所を問わず、各種のコンテンツを消費（閲覧）するようになっている。また、ソーシャルメディアの普及もあり、利用者のコンテンツ消費がよりパーソナルなものとなる傾向にある。このような傾向の下では、視聴者を引き付けるコンテンツの制作だけでなく、視聴者によるコンテンツの消費行動、視聴者によるコンテンツの消費環境などに適した態様でのコンテンツの提供が必要となる。

【0006】

例えば、非特許文献１には、２台の端末装置（スマートフォン）で連携してコンテンツを視聴させる技術が開示されている。この技術では、一方の端末装置にはあるキャラクタの視点でのコンテンツを配信し、他方の端末装置には別のキャラクタの視点でのコンテンツを配信する。そして、この技術では、それぞれの端末装置で別々にコンテンツを視聴する場合には、２つのキャラクタが出会うことなくコンテンツが終了し、２つの端末装置を並べてコンテンツを視聴すると、２つのキャラクタが出会うという演出が施されている。

【0007】

また、非特許文献２には、複数の端末装置を一列に並べて配置することで、その複数の端末装置の仮想的に１つのスクリーンのようにしてコンテンツを視聴させる技術が開示されている。

【先行技術文献】

【非特許文献】

【0008】

【文献】「スマホ2台を並べると瀧と三葉の“カタワレ時”を体験できる!? 「Yahoo! JAPAN」アプリで特別動画が配信開始！」、[online]、［平成２９年１１月２２日検索］、インターネット＜ＵＲＬ：http://www.animatetimes.com/news/details.php?id=1501043635＞

【文献】「みんなでスマートフォンを繋げて、クリスマス限定の光り輝くパレードを楽しもう！「SYNC!ILLUMINATION（シンク！イルミネーション）」」、[online]、［平成２９年１１月２２日検索］、インターネット＜ＵＲＬ：http://www.tokyodisneyresort.jp/blog/pr151029/＞

【発明の概要】

【発明が解決しようとする課題】

【0009】

非特許文献１，２などに開示されている技術では、複数の端末装置はそれぞれ、ネットワーク上の外部サーバ（配信サーバ）に接続し、サーバから付与されたグループＩＤによりグルーピングされる。そして、そのグループへの所属順に採番するなどして、外部サーバに通知するとともに、その採番された番号順に複数の端末装置が配置される。外部サーバは、各番号の端末装置にそれぞれ異なるコンテンツを配信して、全体として１つのコンテンツをユーザに視聴させる。

【0010】

上述したような技術では、複数の端末装置の配置は、各端末装置に割り当てられた番号などに基づき固定される。すなわち、端末装置が自律的に他の端末装置との相対的な位置関係を検出することができない。そのため、端末装置の配置変更などに対して、柔軟に対応することができない。

【0011】

上記のような問題点に鑑みてなされた本発明の目的は、自律的に自装置と他の端末装置との相対的な位置関係を検出することができる端末装置を提供することにある。

【課題を解決するための手段】

【0012】

上記課題を解決するため、本発明に係る端末装置は、自装置とともに平面上または立体表面上に配置された他の端末装置との相対的な位置関係を決定する端末装置であって、タッチ面に対するタッチ操作によるタッチ位置を検出し、前記タッチ位置をスライドさせるスライド操作により、前記タッチ面内において、前記タッチ面の外縁に沿って設定された複数の外縁領域の少なくとも１つがタッチされた場合、該タッチされた外縁領域および該外縁領域がタッチされたタイミングを示すセンサ情報を生成する検出部と、前記他の端末装置との直接通信により、前記検出部により生成されたセンサ情報を前記他の端末装置に送信するとともに、前記他の端末装置から前記センサ情報を受信する共有部と、自装置と前記他の端末装置との同期をとるとともに、前記共有部が前記他の端末装置との間で送受信したセンサ情報に基づき、自装置と前記他の端末装置との相対的な位置関係を決定する決定部と、を備え、前記検出部は、自装置と前記他の端末装置とのローカル時刻の差分をさらに検出し、前記決定部は、自装置および前記他の端末装置の中で基準となる端末装置と自装置とのローカル時刻の差分に基づき、自装置と他の端末装置との同期をとり、前記決定部は、配信対象の映像を分割した複数の分割映像を生成し、前記複数の分割映像それぞれの格納場所を示す情報を含むマニフェストファイルを生成する配信装置から、前記マニフェストファイルを取得し、前記決定した自装置と他の端末装置との相対的な位置関係に基づく、自装置の位置に対応する分割映像を、前記マニフェストファイルに基づいて取得し、前記決定部により取得された分割映像を自装置が備える表示部に表示する再構成部をさらに備える。

【0013】

また、本発明に係る端末装置において、前記タッチ面は、矩形であり、前記外縁領域は、前記矩形のタッチ面の四辺それぞれに対応して設けられていることが好ましい。

【0014】

また、本発明に係る端末装置において、前記タッチ面の四辺のうち、少なくとも一辺に沿って、複数の外縁領域が設けられていることが好ましい。

【0015】

また、上記課題を解決するため、本発明に係る端末装置は、自装置とともに平面上または立体表面上に配置された他の端末装置との相対的な位置関係を決定する端末装置であって、三次元空間での相対座標系における基準位置からの自装置の移動距離および移動方向を検出する検出部と、自装置と前記他の端末装置との重ね合わせに応じて、前記他の端末装置との間で直接通信により前記三次元空間での相対座標系に関する情報を送受信して、前記他の端末装置との間で前記相対座標系を一致させる共有部と、前記共有部による前記相対座標系の一致後に前記検出部により検出された自装置の移動距離および移動方向に基づき前記他の端末装置との相対的な位置関係を決定する決定部と、を備える。

【0016】

また、本発明に係る端末装置において、自装置の一面に配置されたカメラ部をさらに有し、前記検出部は、前記カメラ部の撮影画像に基づき、前記一面に前記他の端末装置が重ね合わされたことを検出することが好ましい。

【0017】

また、本発明に係る端末装置において、前記決定部は、前記検出部により自装置が前記平面上または立体表面上から所定距離以上離れたことを検出すると、自装置および前記共有部により直接通信を行う他の端末装置からなるグループから、自装置が除外されたと判定することが好ましい。

【発明の効果】

【0018】

本発明に係る端末装置によれば、自律的に自装置と他の端末装置との相対的な位置関係を検出することができる。

【図面の簡単な説明】

【0019】

【図1】本発明の一実施形態に係る映像表示システムの構成例を示す図である。

【図2】図１に示す複数の端末装置によるコンテンツの表示態様の一例を示す図である。

【図3】図１に示す配信装置および端末装置の構成例を示す図である。

【図4A】図３に示す分割部による配信対象の映像の分割・解像度調整の一例を示す図である。

【図4B】図３に示す分割部による配信対象の映像の分割・解像度調整の別の一例を示す図である。

【図4C】図３に示す分割部による配信対象の映像の分割・解像度調整のさらに別の一例を示す図である。

【図4D】図３に示す分割部による配信対象の映像の分割・解像度調整のさらに別の一例を示す図である。

【図5】図１に示す端末装置による映像の表示について説明するための図である。

【図6A】図１に示す端末装置による配信対象の映像の再構成パターンの一例を示す図である。

【図6B】図１に示す端末装置による配信対象の映像の再構成パターンの別の一例を示す図である。

【図6C】図１に示す端末装置による配信対象の映像の再構成パターンのさらに別の一例を示す図である。

【図7A】図６Ａに示す再構成パターンＡにおいて、各端末装置が受信する分割映像について説明するための図である。

【図7B】図７Ａに示す再構成パターンＡ２における左上端の端末装置が表示する映像について説明するための図である。

【図8】図６Ｂに示す再構成パターンＢにおいて、各端末装置が受信する分割映像について説明するための図である。

【図9】図６Ｃに示す再構成パターンＣにおいて、各端末装置が受信する分割映像について説明するための図である。

【図10A】図１に示す複数の端末装置の縦向きと横向きとを組み合わせた配置の一例を示す図である。

【図10B】図１に示す複数の端末装置の縦向きと横向きとを組み合わせた配置の他の一例を示す図である。

【図11】図１に示す端末装置の向きに応じた映像の表示の一例を示す図である。

【図12】図１に示す複数の端末装置によるコンテンツの再生状態の一例を示す図である。

【図13】図１に示す端末装置における他の端末装置との相対的な位置関係の決定に係る構成例を示す図である。

【図14】図１３に示すタッチセンサのタッチ面に設けられた外縁領域の一例を示す図である。

【図15】図１３に示す端末装置に対するタッチ操作が行われた状態を示す図である。

【図16】図１３に示すタッチセンサのタッチ面に設けられた外縁領域の他の一例を示す図である。

【図17】図１３に示す端末装置による、三次元空間での相対座標系における移動距離および移動の向きの検出について説明するための図である。

【図18】図１３に示す端末装置による、第２の方法による他の端末装置との相対的な位置関係の決定方法について説明するための図である。

【図19】図１３に示す端末装置による、第２の方法による他の端末装置との相対的な位置関係の検出結果の一例を示す図である。

【図20】図１に示す端末装置によるＬａｎｄｓｃａｐｅ表示とＰｏｒｔｒａｉｔ表示との切り替えの一例を示す図である。

【発明を実施するための形態】

【0020】

以下、本発明を実施するための形態について、図面を参照しながら説明する。各図中、同一符号は、同一または同等の構成要素を示している。

【0021】

図１は、本発明の一実施形態に係る映像表示システム１の構成例を示す図である。

【0022】

図１に示す映像表示システム１は、配信装置１０と、複数の端末装置２０とを備える。配信装置１０は、複数の端末装置２０それぞれと、有線通信または無線通信により、ネットワーク２を介して通信可能である。本実施形態に係る映像表示システム１は、配信装置１０から配信された映像コンテンツを複数の端末装置２０で表示するものである。

【0023】

配信装置１０は、映像コンテンツをネットワーク２を介して端末装置２０に配信する。配信装置１０が配信する映像コンテンツとしては、例えば、８Ｋ－ＳＨＶに代表されるような超高精細な高解像度映像のコンテンツ（高解像度映像コンテンツ）がある。

【0024】

端末装置２０は、携帯電話、スマートフォン、タブレット端末のような、ユーザが所有する装置である。端末装置２０は、表示部を有しており、配信装置１０による配信対象の映像コンテンツ（映像）を表示部で表示する。

【0025】

図２は、本実施形態に係る端末装置２０による配信装置１０から配信された映像コンテンツの表示態様の一例を示す図である。

【0026】

図２に示すように、本実施形態においては、複数の端末装置２０が平面上に、表示部が閲覧可能に配置され、配信装置１０による配信対象の映像コンテンツ（映像）を、複数の端末装置２０により表示する。すなわち、複数の端末装置２０はそれぞれ、配信対象の映像が分割された映像を表示し、全体として、配信対象の映像を利用者に閲覧させる。なお、複数の端末装置２０が立体表面上に、表示部が閲覧可能に配置され、配信装置１０による配信対象の映像コンテンツ（映像）を、複数の端末装置２０により表示してもよい。

【0027】

次に、配信装置１０および端末装置２０の構成について説明する。

【0028】

図３は、本実施形態に係る配信装置１０および端末装置２０の構成例を示す図である。なお、図３においては、端末装置２０の構成のうち、配信対象の映像の表示部（不図示）での表示（再生）に係る構成を中心に説明する。まず、配信装置１０の構成について説明する。

【0029】

図３に示す配信装置１０は、分割部１１と、配信部１２とを備える。

【0030】

分割部１１は、配信対象の映像コンテンツ（例えば、高解像度映像）が入力されると、そのコンテンツを配信するための配信ファイルを生成する。具体的には、分割部１１は、配信ファイルとして、配信対象の映像を分割した複数の分割映像を生成する。ここで、分割部１１は、配信対象の映像を、複数の端末装置２０による表示態様に応じた異なる分割パターンで分割し、分割パターンごとの複数の分割映像をまとめた分割グループ（分割グループ１，２，・・・）を生成する。複数の端末装置２０による表示態様としては、配信対象の映像を表示する端末装置２０の台数、複数の端末装置２０の配置、端末装置２０の回転に応じた表示の切り替え（Ｌａｎｄｓｃａｐｅ表示（横向き表示）／Ｐｏｒｔｒａｉｔ表示（縦向き表示））の対応の有無などがある。分割部１１は、種々の表示態様に応じた分割パターンで配信対象の映像を分割し、分割映像を生成する。また、分割部１１は、表示態様に応じて、配信対象の映像の解像度を調整してもよい。

【0031】

図４Ａ～図４Ｄは、分割部１１による配信対象の映像の分割および解像度調整の例を示す図である。図４Ａ～図４Ｄにおいては、配信対象の映像の解像度をサイズで示している。

【0032】

図４Ａは、配信対象の映像（オリジナルの映像）は分割せず、解像度を小さくした（例えば、８Ｋから２Ｋに縮小）例を示す図である。

【0033】

図４Ｂは、配信対象の映像を４分割した例を示す図である。図４Ｂにおいては、配信対象の映像の解像度を小さくした上で４分割（２×２）した例、および、配信対象の映像の解像度はそのままで４分割した例を示している。

【0034】

図４Ｃは、配信対象の映像を９分割した例を示す図である。図４Ｃにおいては、配信対象の映像の解像度を小さくした上で９分割（３×３）した例を示している。なお、図４Ｃにおいては、配信対象の映像の解像度を小さくした上で９分割した例を示しているが、解像度はそのままで、配信対象の映像を９分割してもよい。

【0035】

図４Ｄは、配信対象の映像を１６分割した例を示す図である。図４Ｄにおいては、配信対象の映像の解像度はそのままで１６分割（４×４）した例を示している。

【0036】

図３を再び参照すると、分割部１１は、配信ファイルとしてさらに、マニフェストファイルを生成する。マニフェストファイルには、配信対象の映像が分割された複数の分割映像それぞれの格納場所を示す情報（例えば、ＵＲＬ（Uniform Resource Locator））が含まれる。また、マニフェストファイルには、配信対象の映像の分割パターンを含む、配信対象の映像の表示（再構成）に関する情報が含まれる。

【0037】

なお、分割部１１は、配信対象の映像の解像度を小さくするだけでなく、配信対象の映像のサイズを大きくした上で分割してもよい。例えば、端末装置２０での再構成時に、分割映像の一部だけを端末装置２０の表示部で表示する、すなわち、分割映像の一部をトリミングして再生することを前提として、配信対象の映像のサイズを縦横それぞれ２倍にした上で、４分割するなどしてもよい。

【0038】

配信部１２は、分割部１１により生成された複数の分割映像およびマニフェストファイルを端末装置２０に配信する。配信方法としては、例えば、既存のポッドキャストと同様に、マニフェストファイルおよび分割映像をＷｅｂサーバで公開する方法がある。

【0039】

次に、端末装置２０の構成について説明する。

【0040】

図３に示す端末装置２０は、受信部２１と、同期部２２と、再構成部２３とを備える。

【0041】

受信部２１は、ネットワーク２を介して、配信装置１０が公開したマニフェストファイル、および、配信対象の映像を分割した複数の分割映像のうち、受信したマニフェストファイルに基づく分割映像を受信する。より具体的には、受信部２１は、配信対象の映像を分割した複数の分割映像のうち、自装置で表示する部分に対応する分割映像を受信する。したがって、マニフェストファイルは、全ての端末装置２０が受信する。一方、分割映像は、その分割映像を表示する端末装置２０のみが受信する。すなわち、各端末装置２０で分割映像の受信対象が異なる。したがって、各端末装置２０は、配信対象の映像全体を受信する必要がないので、通信量を削減することができる。

【0042】

同期部２２は、任意の方法により、配信対象の映像を表示するために平面上または立体表面上に配置された複数の端末装置２０による配信対象の映像の表示態様、および、その表示態様における自装置の位置（自装置と他の端末装置２０との相対的な位置関係）を検出する。以下では、複数の端末装置２０が平面上に配置された例を用いて説明する。

【0043】

図２に示したように、配信装置１０から配信されたコンテンツを視聴する際に、複数の端末装置２０が平面上に格子状に配置される。同期部２２は、配信対象の映像を表示する端末装置２０の数、格子状の配置における自装置の位置（格子状座標）、他の端末装置２０の回転に応じた表示の切り替えの対応の有無などを検出する。また、同期部２２は、例えば、自装置と他の端末装置２０とのローカル時刻のズレを検出する。

【0044】

同期部２２は、端末装置２０が備える各種センサ（ジャイロセンサ、地軸センサなど）の検出結果、端末装置２０への操作入力などの種々の情報を他の端末装置２０と送受信する。そして、同期部２２は、他の端末装置２０と送受信した情報に基づき、コンテンツの表示態様、その表示態様における自装置の位置などを検出する。なお、同期部２２は、他の端末装置２０との近距離無線通信により、すなわち、ネットワーク２を介さずに、種々の情報を送受信する。したがって、端末装置２０は、ネットワーク２にアクセスできない環境でも、複数の端末装置２０による配信対象の映像の表示態様、および、その表示態様における自装置の位置などを自律的に検出することができる。

【0045】

同期部２２は、配信対象の映像の複数の表示端末２０による表示態様および自装置の位置を検出すると、受信部２１が受信したマニフェストファイルに示される、検出した表示態様に応じた分割パターンで配信対象の映像が分割された複数の分割映像のうち、検出した自装置の位置に対応する分割映像を受信部２１に受信させる。また、同期部２２は、検出した表示態様および自装置の位置を再構成部２３に出力する。

【0046】

なお、同期部２２は、自装置の位置変更および回転、また、コンテンツを再生する端末装置２０の追加などを検出すると、受信部２１および再構成部２３に再処理を要求する。こうすることで、表示態様に変更があった場合にも、自律的に変更後の表示態様に合わせて配信対象の映像を表示することができる。

【0047】

再構成部２３は、受信部２１が受信したマニフェストファイルに基づき、同期部２２が検出した表示態様に応じて、受信部２１が受信した分割画像を、拡大・縮小するなどして表示部に表示する。また、再構成部２３は、所定の操作入力により、コンテンツの再生・停止・一時停止などを行う。また、再構成部２３は、自装置あるいは他の端末装置２０の位置変更および回転、また、コンテンツを再生する端末装置２０の追加などにより再処理が要求されると、変更後の表示態様に応じた映像を表示部に表示させる。

【0048】

次に、本実施形態に係る映像表示システム１における配信装置１０および端末装置２０の動作について説明する。

【0049】

図５は、本実施形態に係る端末装置２０による配信対象の映像の表示について説明するための図である。図５においては、配信対象の映像が８Ｋの映像であるものとして説明する。

【0050】

配信装置１０は、配信対象の映像（８Ｋの映像）の解像度を下げた映像（２Ｋの映像）、配信対象の映像を４分割した分割映像（４Ｋ×４）、配信対象の映像を１６分割した分割映像（２Ｋ×１６）などを予め生成しておく。

【0051】

端末装置２０は、配信対象の映像を１台で表示する場合には、例えば、図５に示すように、配信対象の映像の解像度を下げた映像を表示する。

【0052】

配信対象の映像を表示する端末装置２０が１台追加され、例えば、図５に示すように、縦方向に隣接して２台の端末装置２０が配置されると、２台の端末装置２０はそれぞれ、配信対象の映像の表示態様（配信対象の映像を表示する台数およびその配置）、自装置と他の端末装置２０との位置関係などを検出し、検出した表示態様に対応する分割パターンで分割された分割映像（４分割された分割映像）のうち、自装置の位置に対応する分割映像を受信し、表示部に表示する。

【0053】

さらに、図５に示すように、配信対象の映像を表示する端末装置２０が３台追加されると、５台の端末装置２０はそれぞれ、配信対象の映像の表示態様、自装置と他の端末装置２０との位置関係などを検出し、検出した表示態様に対応する分割パターンで分割された分割映像（１６分割された分割映像）のうち、自装置の位置に対応する分割映像を受信し、表示部に表示する。

【0054】

このように、配信装置１０は、配信対象の映像の表示態様に応じた異なる分割パターンで配信対象の映像を分割した複数の分割映像を生成する。端末装置２０は、配信対象の映像を複数の端末装置２０で表示する表示態様およびその表示態様における自装置の位置を検出し、検出した表示態様に応じた分割パターンで配信対象の映像が分割された複数の分割映像のうち、自装置の位置に対応する分割映像を受信して表示する。そのため、サーバ装置などを介さずに、複数の端末装置２０による配信対象の映像の表示態様に応じてより柔軟な映像の表示が可能となる。

【0055】

図６Ａ～図６Ｃは、端末装置２０の数に応じた配信対象の映像の再構成パターンの例を示す図である。

【0056】

図６Ａに示す再構成パターン（再構成パターンＡ）では、配信対象の映像を表示する端末装置２０の台数が１台の場合には、端末装置２０は、分割されていない配信対象の映像を表示する。配信対象の映像を表示する端末装置２０の台数が２－４台である場合には、２×２の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が５－１６台である場合には、４×４の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。

【0057】

図６Ｂに示す再構成パターン（再構成パターンＢ）では、配信対象の映像を表示する端末装置２０の台数が１台の場合には、端末装置２０は、分割されていない配信対象の映像を表示する。配信対象の映像を表示する端末装置２０の台数が２－４台である場合には、２×２の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が５－９台である場合には、３×３の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が１０－１６台である場合には、４×４の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。

【0058】

図６Ｃに示す再構成パターン（再構成パターンＣ）では、配信対象の映像を表示する端末装置２０の台数が１台の場合には、端末装置２０は、分割されていない配信対象の映像を表示する。配信対象の映像を表示する端末装置２０の台数が２－１６台である場合には、４×４の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。

【0059】

このように、配信対象の映像を表示する端末装置２０の台数が同じであっても、種々の再構成パターンを設定することができる。分割部１１は、マニフェストファイルにおいて、配信対象の映像の分割パターンと共に、配信対象の映像の再構成パターンを指定する。こうすることで、配信側において、所望の再構成パターンで配信対象の映像を表示させることができる。

【0060】

また、同じ再構成パターンであっても、各端末装置２０が受信する分割映像が異なるようにしてもよい。以下では、同じ再構成パターンでも、各端末装置２０が受信する分割映像が異なる場合について、説明する。

【0061】

図７Ａは、再構成パターンとして、図６Ａを参照して説明した再構成パターンＡを用いる場合の、各端末装置２０が受信する分割映像を示す図である。図７Ａにおいては、配信対象の映像の解像度が下げられた映像と、配信対象の映像を４分割した分割映像と、配信対象の映像を１６分割した分割映像とが用意されているとする。また、以下では、再構成パターンの各矩形は、各端末装置２０を示しており、各矩形に付された番号は、その矩形に対応する端末装置２０が受信する分割映像を示すものとする。

【0062】

図６Ａを参照して説明したように、再構成パターンＡでは、配信対象の映像を表示する端末装置２０の台数が２－４台の場合には、２×２の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が５－１６台の場合には、４×４の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。

【0063】

再構成パターンＡ１では、図７Ａに示すように、配信対象の映像を表示する端末装置２０の台数が２－４台の場合には、各端末装置２０は、２×２の格子状配置の表示態様で、配信対象の映像が４分割された分割映像の中から、２×２の格子状配置における自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が５－１６台の場合には、各端末装置２０は、４×４の格子状配置の表示態様で、配信対象の映像が１６分割された分割映像の中から、４×４の格子状配置における自装置の位置に対応する分割映像を表示する。

【0064】

再構成パターンＡ２では、図７Ａに示すように、配信対象の映像を表示する端末装置２０の台数が２－４台の場合には、各端末装置２０は、２×２の格子状配置の表示態様で、配信対象の映像が４分割された分割映像の中から、２×２の格子状配置における自装置の位置に対応する分割映像を表示する。

【0065】

また、配信対象の映像を表示する端末装置２０の台数が５－１６台の場合には、各端末装置２０は、４×４の格子状配置の表示態様で、配信対象の映像が４分割された分割映像の中から、４×４の格子状配置における自装置の位置に対応する分割映像を表示する。すなわち、端末装置２０は、例えば、自装置の位置が、４×４の格子状配置のうち、左上の４台分の位置に当たる場合には、配信対象の映像が４分割された分割映像のうち、右上の分割映像２を受信する。そして、端末装置２０は、例えば、自装置の位置が、４×４の格子状配置の内、左上端の位置に当たる場合には、図７Ｂに示すように、受信した分割映像２のうち、左上の４分の１の部分の映像２Ａを表示する。

【0066】

図８は、再構成パターンとして、図６Ｂを参照して説明した再構成パターンＢを用いる場合の、各端末装置２０が受信する分割映像を示す図である。図８においては、配信対象の映像の解像度が下げられた映像と、配信対象の映像を４分割した分割映像と、配信対象の映像を９分割した分割映像と、配信対象の映像を１６分割した分割映像とが用意されているとする。

【0067】

図６Ｂを参照して説明したように、再構成パターンＢでは、配信対象の映像を表示する端末装置２０の台数が２－４台の場合には、２×２の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が５－９台の場合には、３×３の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が１０－１６台の場合には、４×４の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。

【0068】

再構成パターンＢ１では、図８に示すように、配信対象の映像を表示する端末装置２０の台数が２－４台の場合には、各端末装置２０は、２×２の格子状配置の表示態様で、配信対象の映像が４分割された分割映像の中から、２×２の格子状配置における自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が５－９台の場合には、各端末装置２０は、３×３の格子状配置の表示態様で、配信対象の映像が９分割された分割映像の中から、３×３の格子状配置における自装置の位置に対応する分割映像を表示する。また、配信対象の映像を表示する端末装置２０の台数が１０－１６台の場合には、各端末装置２０は、４×４の格子状配置の表示態様で、配信対象の映像が１６分割された分割映像の中から、４×４の格子状配置における自装置の位置に対応する分割映像を表示する。

【0069】

再構成パターンＢ２では、図８に示すように、配信対象の映像を表示する端末装置２０の台数が２－４台の場合には、各端末装置２０は、２×２の格子状配置の表示態様で、配信対象の映像が４分割された分割映像の中から、２×２の格子状配置における自装置の位置に対応する分割映像を表示する。

【0070】

また、配信対象の映像を表示する端末装置２０の台数が５－９台の場合には、左上端、右上端、左下端、右下端に位置する端末装置２０は、配信対象の映像が４分割された分割映像の中から、それぞれ対応する位置の分割映像を受信する。すなわち、左上端の端末装置２０は、配信対象の映像が４分割された分割映像のうち、左上の分割映像２を受信する。また、右上端の端末装置２０は、配信対象の映像が４分割された分割映像のうち、右上の分割映像３を受信する。また、左下端の端末装置２０は、配信対象の映像が４分割された分割映像のうち、左下の分割映像４を受信する。また、右下端の端末装置２０は、配信対象の映像が４分割された分割映像のうち、右下の分割映像５を受信する。また、その他の端末装置２０は、３×３の格子状配置の表示態様で、配信対象の映像が９分割された分割映像の中から、３×３の格子状配置における自装置の位置に対応する分割映像を表示する。左上端、右上端、左下端、右下端に位置する端末装置２０はそれぞれ、図７Ｂと同様に、受信した分割映像のうち、自装置の位置に応じた一部の映像を表示部に表示する。

【0071】

また、配信対象の映像を表示する端末装置２０の台数が１０－１６台の場合には、各端末装置２０は、４×４の格子状配置の表示態様で、配信対象の映像が４分割された分割映像の中から、４×４の格子状配置における自装置の位置に対応する分割映像を表示する。すなわち、端末装置２０は、例えば、自装置の位置が、４×４の格子状配置のうち、左上の４台分の位置に当たる場合には、配信対象の映像が４分割された分割映像のうち、左上の分割映像２を受信する。そして、端末装置２０は、例えば、自装置の位置が、４×４の格子状配置の内、左上端の位置に当たる場合には、図７Ｂと同様に、受信した分割映像のうちの一部（左上の４分の１の部分）の映像を表示部に表示する。

【0072】

図９は、再構成パターンとして、図６Ｃを参照して説明した再構成パターンＣを用いる場合の、各端末装置２０が受信する分割映像を示す図である。図９においては、配信対象の映像の解像度が下げられた映像と、配信対象の映像を４分割した分割映像と、配信対象の映像を１６分割した分割映像とが用意されているとする。

【0073】

図６Ｃを参照して説明したように、再構成パターンＣでは、配信対象の映像を表示する端末装置２０の台数が２－１６台の場合には、４×４の格子状配置の表示態様で、各端末装置２０が、自装置の位置に対応する分割映像を表示する。

【0074】

再構成パターンＣ１では、図９に示すように、配信対象の映像を表示する端末装置２０の台数が２－１６台の場合には、各端末装置２０は、４×４の格子状配置の表示態様で、配信対象の映像が１６分割された分割映像の中から、４×４の格子状配置における自装置の位置に対応する分割映像を表示する。

【0075】

再構成パターンＣ２では、図９に示すように、配信対象の映像を表示する端末装置２０の台数が２－１６台の場合には、各端末装置２０は、４×４の格子状配置の表示態様で、配信対象の映像が４分割された分割映像の中から、４×４の格子状配置における自装置の位置に対応する分割映像を表示する。すなわち、端末装置２０は、例えば、自装置の位置が、４×４の格子状配置のうち、左上の４台分の位置に当たる場合には、配信対象の映像が４分割された分割映像のうち、左上の分割映像２を受信する。そして、端末装置２０は、例えば、自装置の位置が、４×４の格子状配置の内、左上端の位置に当たる場合には、図７Ｂと同様に、受信した分割映像のうちの一部（左上の４分の１の部分）の映像を表示部に表示する。

【0076】

図７Ａを参照して説明したように、再構成パターンＡ２では、配信対象の映像を表示する端末装置２０の台数が５－１６台である場合には、配信対象の映像が４分割された分割映像が用いられる。また、図８を参照して説明したように、再構成パターンＢ２では、配信対象の映像を表示する端末装置２０の台数が１０－１６台である場合には、配信対象の映像が４分割された分割映像が用いられる。また、再構成パターンＣ２では、映像を表示する端末装置２０の台数が２－１６台である場合には、配信対象の映像が４分割された分割映像が用いられる。すなわち、これらの再構成パターンＡ２，Ｂ２，Ｃ２では、配信対象の映像を１６分割した分割映像を用意する必要がない。したがって、分割部１１が生成する分割グループを減らし、処理負荷、分割映像を記憶する記憶容量などの削減を図ることができる。

【0077】

このように、分割部１１は、配信対象の映像を表示する端末装置２０の台数よりも少ない分割数で配信対象の映像を分割してもよい。すなわち、分割部１１は、分割映像が１台の端末装置２０で表示される映像よりも大きくなるような分割パターンで配信対象の映像を分割してもよい。この場合、再構成部２３は、同期部２２が検出した自装置の位置に応じて、受信部２１が受信した分割映像における一部の映像を表示部に表示する。すなわち、再構成部２３は、受信部２１が受信した分割映像の一部をトリミングして表示部に表示する。こうすることで、分割部１１が生成する分割グループの数を減らすことができる。

【0078】

なお、例えば、図９に示す再構成パターンＣ２の場合、端末装置２０は、自装置で映像を表示するサイズの４倍のサイズの分割映像を受信する。端末装置２０は、その４倍のサイズの分割映像のトリミングを行う。この場合、端末装置２０は、Ｌａｎｄｓｃａｐｅ表示（横向き表示）を行うために横向きに配置するだけでなく、Ｐｏｒｔｒａｉｔ表示（縦向き表示）を行うために縦向きに配置することも可能である。したがって、図１０Ａ，１０Ｂに示すように、縦向きの端末装置２０と横向きの端末装置２０とを組み合わせて配置して、配信対象の映像を表示することも可能である。なお、図１０Ａにおいては、配信対象の映像を表示する端末装置２０の台数が４台である例を示している。また、図１０Ｂにおいては、配信対象の映像を表示する端末装置２０の台数が１０台である例を示している。

【0079】

また、分割映像が１台の端末装置２０で表示される映像よりも大きくなるような分割パターンで配信対象の映像が分割されている場合、再構成部２３は、同期部２２が検出した自装置の向きに応じて、受信部２１が受信した分割映像における一部の映像を表示部に表示するようにしてもよい。すなわち、再構成部２３は、図１１に示すように、端末装置２０が横向きの場合には（Ｌａｎｄｓｃａｐｅ表示を行う場合には）、分割映像のうち、横向き（横長）の一部の映像（斜線を付した部分）を表示部に表示し、端末装置２０が縦向きの場合には（Ｐｏｒｔｒａｉｔ表示を行う場合には）、縦向き（縦長）の一部の映像（斜線を付した部分）を表示部に表示視してもよい。

【0080】

また、分割部１１が生成するマニフェストファイルには、図１２に示すように、配信されたコンテンツを表示する複数の端末装置２０のうち、その複数の端末装置２０による表示態様における特定の位置の端末装置２０に音声出力をさせるような指示が含まれていてもよい。図１２の例では、４×４の格子状に配置された端末装置２０のうち、左上端の端末装置２０と、左から三番目上から三番目の端末装置２０とが音声出力をしている例を示している。

【0081】

次に、端末装置２０による、自装置と他の端末装置２０との相対的な位置関係の決定方法について説明する。

【0082】

図１３は、端末装置２０における、他の端末装置２０との相対的な位置関係の決定に係る構成例を示す図である。

【0083】

図１３に示す端末装置２０は、検出部２４と、共有部２５と、決定部２６とを備える。検出部２４、共有部２５および決定部２６は、例えば、同期部２２を構成する。

【0084】

検出部２４は、端末装置２０が備えるタッチセンサ２７、種々のセンサからなるセンサ部２８およびカメラ部２９などを用いて、自装置と他の端末装置２０との相対的な位置関係を決定するために利用可能な情報、自装置での配信対象の映像の表示に関する情報など種々の情報（以下、準備情報と称する）を収集する。ここで、検出部２４は、ネットワーク２へのアクセスを必須とせずに自装置で収集可能な範囲で準備情報を収集する。

【0085】

検出部２４が収集する情報としては、自装置のローカル時刻、自装置が備える表示部の画面サイズ、自装置の向く方位など種々の情報が含まれる。検出部２４は、収集した準備情報を共有部２５に出力する。

【0086】

共有部２５は、他の端末装置２０と、Ｗｉｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信を行い、グループを構成する。ここで、共有部２５は、ネットワーク２に接続された外部サーバなどを介さずに、近距離無線通信により通信可能な他の端末装置２０とグループを構成する。共有部２５は、検出部２４から出力された準備情報をグループを構成する他の端末装置２０に送信するとともに、グループを構成する他の端末装置２０から準備情報を受信する。すなわち、共有部２５は、グループを構成する他の端末装置２０と準備情報を共有する。以下では、グループを構成する端末装置２０間で共有された準備情報の集合を、相互位置情報と称することがある。共有部２５は、相互位置情報を決定部２６に出力する。また、共有部２５は、検出部２４により自装置の位置の変更、自装置の回転などが検出される（準備情報が更新される）と、更新後の準備情報を他の端末装置２０と共有して、相互位置情報を更新する。

【0087】

なお、共有部２５は、予め定められた事前ルールに基づき、準備情報の共有処理を制限してもよい。例えば、共有部２５は、Ｎ台以上での準備情報の共有を認めない、表示部の画面サイズ、アスペクト比などが異なる端末装置２０との共有を認めない、などの制限を加えてもよい。また、共有部２５は、準備情報の変更の有無の検知の頻度を調整してもよい。

【0088】

決定部２６は、共有部２５から出力された相互位置情報に基づき、グループを構成する他の端末装置２０との間で同期をとる。また、決定部２６は、共有部２５から出力された相互位置情報に基づき、自装置とともにグループを構成する他の端末装置２０との相対的な位置関係（自装置の位置（格子状座標））を決定する。

【0089】

決定部２６は、例えば、グループへの追加の順序、各端末装置２０のローカル時刻の中央値などに基づき同期の基準となる端末装置２０を決定し、その基準となる端末装置２０のローカル時刻と自装置のローカル時刻との差分をとるなどして、グループを構成する他の端末装置２０との間で同期をとる。

【0090】

次に、決定部２６による他の端末装置２０との相対的な位置関係の決定方法について説明する。

【0091】

他の端末装置２０との相対的な位置関係の決定方法の１つとして、端末装置２０が備えるタッチセンサ２７のタッチ面へのタッチ操作を用いる方法（第１の方法）がある。また、別の決定方法として、端末装置２０が備える種々のセンサからなるセンサ部２８およびカメラ部２９を用いる方法（第２の方法）がある。近年、スマートフォン、タブレット端末などの端末装置２０の多くには、指、スタイラスペンなどによるタッチ面に対するタッチ操作によるタッチ位置を検出するタッチセンサ２７が搭載されている。決定部２６は、このタッチ面へのタッチ操作に基づき、自装置の位置を決定することができる。また、近年、スマートフォン、タブレット端末などの端末装置２０の多くには、端末装置２０の姿勢の検出などに用いられる種々のセンサからなるセンサ部２８およびカメラ部２９が搭載されている。決定部２６は、センサ部２８の検出結果およびカメラ部２９により撮像された撮影画像に基づき、自装置の位置を決定することができる。以下では、まず第１の方法について説明する。

【0092】

第１の方法では、検出部２４は、タッチセンサ２７のタッチ面に対するタッチ操作によるタッチを検出する。そして、検出部２４は、タッチ位置をスライドさせるスライド操作により、タッチ面内において、タッチ面の外縁に沿って設定された複数の外縁領域の少なくとも１つがタッチされた場合、タッチされた外縁領域およびその外縁領域へのタッチのタイミング（時刻など）を示すセンサ情報を生成し、共有部２５に出力する。

【0093】

図１４は、端末装置２０が備えるタッチ面２７ａにおける外縁領域の設定の一例を示す図である。

【0094】

通常、タッチ面２７ａは、端末装置２０が備える表示部に重畳して設けられており、その形状は矩形（長方形）であることが一般的である。外縁領域は、タッチ面２７ａ内において、タッチ面２７ａの外縁に沿って複数設定されている。図１４においては、タッチ面２７ａの上端に沿って外縁領域２７Ｔ（Ｔｏｐ）が設定され、タッチ面２７ａの右端に沿って外縁領域２７Ｒ（Ｒｉｇｈｔ）が設定され、タッチ面２７ａの下端に沿って外縁領域２７Ｂ（Ｂｏｔｔｏｍ）が設定され、タッチ面２７ａの左端に沿って外縁領域２７Ｌ（Ｌｅｆｔ）が設けられている例を示している。

【0095】

図１５は、複数の端末装置２０が平面上に配置され、隣接する端末装置２０に跨るようにタッチ操作が行われた状態を示す図である。図１５においては、端末装置２０－１～２０－４が横向きに、２×２の格子状に配置されているとする。そして、左上に配置された端末装置２０－１から左下に配置された端末装置２０－３に跨るタッチ操作（タッチ操作１）、左上に配置された端末装置２０－１から右上に配置された端末装置２０－２に跨るタッチ操作（タッチ操作２）、および、右上に配置された端末装置２０－２から右下に配置された端末装置２０－４に跨るタッチ操作（タッチ操作３）が行われたとする。

【0096】

タッチ操作１により、端末装置２０－１の検出部２４は、外縁領域２７Ｌがタッチされたこと、および、外縁領域２７Ｌがタッチされたタイミングを示すセンサ情報を生成する。また、端末装置２０－３の検出部２４は、外縁領域２７Ｒがタッチされたこと、および、外縁領域２７Ｒがタッチされたタイミングを示すセンサ情報を生成する。ここで、端末装置２０－３の検出部２４が生成するセンサ情報に示されるタイミング（外縁領域２７Ｒがタッチされたタイミング）は、端末装置２０－１の検出部２４が生成するセンサ情報に示されるタイミング（外縁領域２７Ｌがタッチされたタイミング）の直後である。したがって、これらのセンサ情報から、端末装置２０－１，２０－３が、端末装置２０－１の左端と端末装置２０－３の右端とが接するように配置されていることが分かる。

【0097】

タッチ操作２により、端末装置２０－１の検出部２４は、外縁領域２７Ｂがタッチされたこと、および、外縁領域２７Ｂがタッチされたタイミングを示すセンサ情報を生成する。また、端末装置２０－２の検出部２４は、外縁領域２７Ｔがタッチされたこと、および、外縁領域２７Ｔがタッチされたタイミングを示すセンサ情報を生成する。ここで、端末装置２０－２の検出部２４が生成するセンサ情報に示されるタイミング（外縁領域２７Ｔがタッチされたタイミング）は、端末装置２０－１の検出部２４が生成するセンサ情報に示されるタイミング（外縁領域２７Ｂがタッチされたタイミング）の直後である。したがって、これらのセンサ情報から、端末装置２０－１，２０－２が、端末装置２０－１の下端と端末装置２０－２の上端とが接するように配置されていることが分かる。

【0098】

タッチ操作３により、端末装置２０－２の検出部２４は、外縁領域２７Ｌがタッチされたこと、および、外縁領域２７Ｌがタッチされたタイミングを示すセンサ情報を生成する。また、端末装置２０－４の検出部２４は、外縁領域２７Ｒがタッチされたこと、および、外縁領域２７Ｒがタッチされたタイミングを示すセンサ情報を生成する。ここで、端末装置２０－４の検出部２４が生成するセンサ情報に示されるタイミング（外縁領域２７Ｒがタッチされたタイミング）は、端末装置２０－２の検出部２４が生成するセンサ情報に示されるタイミング（外縁領域２７Ｌがタッチされたタイミング）の直後である。したがって、これらのセンサ情報から、端末装置２０－２，２０－４が、端末装置２０－２の左端と端末装置２０－４の右端とが接するように配置されていることが分かる。

【0099】

このように、検出部２４は、各端末装置２０のタッチ面２７ａの外縁に沿って設定された複数の外縁領域のいずれかがタッチされると、タッチされた外縁領域およびその外縁領域がタッチされたタイミングを示すセンサ情報を生成する。共有部２５は、検出部２４が生成したセンサ情報を他の端末装置２０に送信すると共に、他の端末装置２０からセンサ情報を受信する。そして、決定部２６は、共有部２５が他の端末装置２０との間で送受信したセンサ情報に基づき、自装置と他の端末装置２０との相対的な位置関係を決定する。

【0100】

第１の方法では、各端末装置２０へのタッチ操作（隣接する端末装置２０に跨るスライド操作）だけで、端末装置２０間の位置関係を決定することができる。したがって、ネットワーク２に接続された外部サーバなどを用いることなく、端末装置２０が自律的に、自装置と他の端末装置２０との相対的な位置関係を決定することができる。

【0101】

なお、図１４においては、タッチ面２７ａの四辺にそれぞれ、１つの外縁領域を設ける例を用いて説明したが、これに限られるものではない。タッチ面の四辺の少なくとも一辺に沿って複数の外縁領域を設定してもよい。

【0102】

図１６は、タッチ面２７ａの一辺に複数の外縁領域を設定した例を示す図である。図１６においては、端末装置２０－５のタッチ面２７ａの右端に沿って、２つの外縁領域２７ＲＴ，２７ＲＤが設定されている例を示している。外縁領域２７ＲＴは、タッチ面２７ａ内において、タッチ面２７ａの右端に沿って、タッチ面２７ａの上端から下端に向かって、略半分の位置まで延在する。また、外縁領域２７ＲＤは、タッチ面２７ａにおいて、タッチ面の右端に沿って、タッチ面２７ａの下端から上端に向かって、略半分の位置まで延在する。

【0103】

図１６に示すように、端末装置２０－５は縦向きに配置され、端末装置２０－６は横向きに、端末装置２０－６の下端が端末装置２０－５の右端下側に接するように配置されている場合に、端末装置２０－５から端末装置２０－６に跨るようにスライド操作が行われたとする。この場合、端末装置２０－５の検出部２４は、外縁領域２７ＲＤがタッチされたこと、および、外縁領域２７ＲＤがタッチされたタイミングを示すセンサ情報を生成する。また、端末装置２０－６の検出部２４は、外縁領域２７Ｔがタッチされたこと、および、外縁領域２７Ｔがタッチされたタイミングを示すセンサ情報を生成する。ここで、端末装置２０－６の検出部２４が生成するセンサ情報に示されるタイミング（外縁領域２７Ｔがタッチされたタイミング）は、端末装置２０－５の検出部２４が生成するセンサ情報に示されるタイミング（外縁領域２７ＲＤがタッチされたタイミング）の直後である。したがって、これらのセンサ情報から、端末装置２０－５，２０－６が、端末装置２０－５の右端下側と端末装置２０－４の上端とが接するように配置されていることが分かる。

【0104】

このように、タッチ面２７ａの一辺に沿って複数の外縁領域を設けることで、他の端末装置２０との相対的な位置関係をより正確に検出することができる。

【0105】

次に、第２の方法について説明する。

【0106】

上述したように、スマートフォン、タブレット端末などの端末装置２０の多くには、端末装置２０の姿勢などを検出するために、加速度センサ、ジャイロセンサ、地磁気センサなどの各種のセンサが搭載されている。そして、近年、端末装置２０の中には、これらのセンサを利用して、図１７に示すように、仮想的に三次元空間での相対座標系を設定し、その相対座標系の原点（基準位置）からの端末装置２０の移動距離および移動の向きを検出する機能を備えるものがある。検出部２４は、端末装置２０が備えるセンサ部２８の検出結果から、三次元空間での相対座標系における端末装置２０の移動距離および移動の向きをセンサ情報として検出する。第２の方法においては、端末装置２０は、このセンサ情報を他の端末装置２０と交換することで、自装置と他の端末装置２０との相対的な位置関係を検出する。このとき、各端末装置２０で相対座標系の軸がずれないように地磁気センサなどを用いて、座標軸を揃えておく必要がある。

【0107】

具体的には、まず、ユーザにより、図１８に示すように、２台の端末装置２０－７，２０－８が、表示部が上方向を向くようにして重ね合わされる。近年の端末装置２０の多くには、表示部がユーザに向けられた状態で、ユーザに向かって配置されたカメラ（フロントカメラ）が搭載されている。したがって、下側の端末装置２０－７のカメラ部２９は、上側の端末装置２０－８により覆われる。そのため、端末装置２０－７のカメラ部２９により撮像された撮影画像は、暗くなる。端末装置２０－７の検出部２４は、カメラ部２９により撮像された撮影画像より、自装置の上側に他の端末装置２０が重ね合わせられたことを検出する。すなわち、端末装置２０－７の検出部２４は、端末装置２０の一面に配置されたカメラ部２９により撮像された撮影画像に基づき、端末装置２０の一面（カメラ部２９が配置された面）に他の端末装置２０が重ね合わされたことを検出する。

【0108】

端末装置２０－７は、自装置の上側に他の端末装置２０が重ね合わせられたことを検出すると、例えば、その旨を近距離無線通信により付近の端末装置２０に通知する。上側の端末装置２０－８の検出部２４は、下側の端末装置２０－７から他の端末装置２０が上側に重ね合わせられた旨の通知を受けると、その通知の前後でセンサ部２８の検出結果から自装置が移動していると判定した場合には、自装置が端末装置２０－７の上側に重ね合わせられたと検出する。また、端末装置２０－８の検出部２４は、所定の操作（例えば、タッチ面へのタッチ操作）の入力により、自装置が端末装置２０－７の上側に重ね合わせられたことを検出してもよい。

【0109】

共有部２５は、自装置と他の端末装置２０とが重ね合わせられたことを検出すると（自装置と他の端末装置２０との重ね合わせに応じて）、その他の端末装置２０と近距離無線通信を行い、検出部２４で設定された三次元空間での相対座標系に関する情報を送受信して、三次元空間での相対座標系を一致させる（原点を一致させる）。例えば、上側の端末装置２０の共有部２５が、自装置において設定されている三次元空間での相対座標系を、下側の端末装置２０において設定されている三次元空間での相対座標系に一致させる。

【0110】

端末装置２０－８の決定部２６は、図１８に示すように、下側の端末装置２０－７との三次元空間での相対座標の一致後に、端末装置２０－８が移動すると、検出部２４により検出された自装置の移動距離および移動方向に基づき、下側に配置された他の端末装置２０－７との相対的な位置関係を決定する。

【0111】

すなわち、第２の方法においては、各端末装置２０は、自装置が備える各種センサにより相対座標系を算出（設定）する。次に、各端末装置２０は、地磁気センサなどを用いて、設定した相対座標系の軸をそろえる。次に、端末装置２０同士の重ね合わせにより、設定した座標系の原点を重ね合わせられた端末装置２０間で一致させる。次に、端末装置２０は、自装置が移動すると、設定した相対座標系での位置（移動方向および移動距離）を検出する。

【0112】

決定部２６は、予め定められた事前ルールに基づき、配信対象の映像を表示する端末装置２０の数に対応する座標数に応じた格子状配置における自装置の位置（座標）を決定する。事前ルールとしては、例えば、図１９に示すように、最大で１６台の端末装置２０で配信対象の映像が表示される場合に、グループを構成する端末装置２０の数が１６台に満たなければ、できるだけ配信対象の映像の中央部分の分割映像が表示されるように、自装置の位置を決定するというルールが考えられる。なお、決定部２６は、例えば、グループを構成する端末装置２０の数を、配信対象の映像を表示する端末装置２０として、自装置の位置を決定する。また、グループを構成する端末装置２０の数は、ユーザにより端末装置２０に入力されてもよい。

【0113】

また、決定部２６は、所定の操作入力、例えば、タッチ面２７ａへのタッチ操作により、自装置が他の端末装置２０とともに形成するグループから除外されたと判定してもよい。また、決定部２６は、検出部２４の検出結果から、自装置が他の端末装置２０と共に配置された平面から所定距離以上離れたことを検出すると、自装置が他の端末装置２０とともに形成するグループから除外されたと判定してもよい。なお、第１の方法においても、決定部２６は、同様にして、所定の操作入力、自装置が他の端末装置２０と共に配置された平面上または立体表面上から所定距離以上離れたことなどに基づき、グループから除外されたと判定してもよい。

【0114】

また、端末装置２０の配置方法として、Ｌａｎｄｓｃａｐｅ表示を行う横向きの配置およびＰｏｒｔｒａｉｔ表示を行う縦向きの配置のいずれか一方に固定してもよい。また、配信対象の映像を表示する端末装置２０の数に応じて、Ｌａｎｄｓｃａｐｅ表示を行う端末装置２０の数と、Ｐｏｒｔｒａｉｔ表示を行う端末装置２０の数とを変動させてもよい。

【0115】

また、各端末装置２０ごとに、Ｌａｎｄｓｃａｐｅ表示およびＰｏｒｔｒａｉｔ表示のいずれか一方、あるいは、Ｌａｎｄｓｃａｐｅ表示およびＰｏｒｔｒａｉｔ表示の両方を行わせるかを、事前ルールとして予め決めておいてもよい。Ｌａｎｄｓｃａｐｅ表示およびＰｏｒｔｒａｉｔ表示の両方を行う場合、例えば、図２０に示すように、端末装置２０は、Ｌａｎｄｓｃａｐｅ表示を行うか、Ｐｏｒｔｒａｉｔ表示を行うかに応じて、分割映像のうち、異なる部分を表示部に表示するようにしてもよい。

【0116】

このように本実施形態によれば、端末装置２０は、タッチ面２７ａに対するタッチ操作によるタッチ位置を検出し、タッチ位置をスライドさせるスライド操作により、タッチ面２７ａ内において、タッチ面２７ａの外縁に沿って設定された複数の外縁領域の少なくとも１つがタッチされた場合、タッチされた外縁領域およびその外縁領域がタッチされたタイミングを示すセンサ情報を生成する検出部２４と、他の端末装置２０との直接通信により、検出部２４により生成されたセンサ情報を他の端末装置２０に送信するとともに、他の端末装置２０からセンサ情報を受信する共有部２５と、共有部２５が他の端末装置２０との間で送受信したセンサ情報に基づき、自装置と他の端末装置２０との相対的な位置関係を決定する決定部２６と、を備える。

【0117】

直接通信により、他の端末装置２０との間でセンサ情報を送受信し、そのセンサ情報に基づき、自装置と他の端末装置２０との相対的な位置関係を決定することで、外部サーバなどを介さずに、自律的に自装置と他の端末装置との相対的な位置関係を決定することができる。

【0118】

また、本実施形態によれば、端末装置２０は、基準位置からの三次元空間での相対座標系における自装置の移動距離および移動方向を検出する検出部２４と、自装置と他の端末装置２０との重ね合わせに応じて、他の端末装置２０との間で直接通信により三次元空間での相対座標系に関する情報を送受信して、他の端末装置２０との間で相対座標系を一致させる共有部２５と、共有部２５による相対座標系の一致後に検出部２４により検出された自装置の移動距離および移動方向に基づき他の端末装置２０との相対的な位置関係を決定する決定部２６と、を備える。

【0119】

他の端末装置２０との重ね合わせに応じて、他の端末装置２０との直接通信により、三次元空間での相対座標系に関する情報を送受信して、他の端末装置２０と間で相対座標系を一致させ、相対座標系の一致後の自装置の移動距離および移動方向に基づき、自装置と他の端末装置２０との相対的な位置関係を決定することで、外部サーバなどを介さずに、自律的に自装置と他の端末装置との相対的な位置関係を決定することができる。

【0120】

上述の実施形態は代表的な例として説明したが、本発明の趣旨および範囲内で、多くの変更および置換が可能であることは当業者に明らかである。したがって、本発明は、上述の実施形態によって制限するものと解するべきではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。例えば、実施形態の構成図に記載の複数の構成ブロックを１つに組み合わせたり、あるいは１つの構成ブロックを分割したりすることが可能である。

【符号の説明】

【0121】

１ 映像表示システム
２ ネットワーク
１０ 配信装置
１１ 分割部
１２ 配信部
２０，２０－１～２０－８ 端末装置
２１ 受信部
２２ 同期部
２３ 再構成部
２４ 検出部
２５ 共有部
２６ 決定部
２７ タッチセンサ
２７ａ タッチ面
２７Ｔ，２７Ｒ，２７Ｂ，２７Ｌ，２７ＲＴ，２７ＲＤ 外縁領域
２８ センサ部
２９ カメラ部

【図1】

【図2】

【図3】

【図4A】

【図4B】

【図4C】

【図4D】

【図5】

【図6A】

【図6B】

【図6C】

【図7A】

【図7B】

【図8】

【図9】

【図10A】

【図10B】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】