特開 2024-106334 送出装置及び受信装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024106334

(43)【公開日】2024-08-07

(54)【発明の名称】送出装置及び受信装置

(51)【国際特許分類】

   H04N 21/235 20110101AFI20240731BHJP

   H04N 21/435 20110101ALI20240731BHJP

【ＦＩ】

H04N21/235

H04N21/435

【審査請求】未請求

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2024009213

(22)【出願日】2024-01-25

(31)【優先権主張番号】P 2023010490

(32)【優先日】2023-01-26

(33)【優先権主張国・地域又は機関】JP

(71)【出願人】

【識別番号】000004352

【氏名又は名称】日本放送協会

(74)【代理人】

【識別番号】110001106

【氏名又は名称】弁理士法人キュリーズ

(72)【発明者】

【氏名】市ヶ谷 敦郎

(72)【発明者】

【氏名】根本 慎平

(72)【発明者】

【氏名】岩村 俊輔

(72)【発明者】

【氏名】井口 和久

【テーマコード（参考）】

5C164

【Ｆターム（参考）】

5C164FA04

5C164MA06S

5C164MB13S

5C164MB42S

5C164SB06P

5C164SB11S

5C164UB10P

5C164UB11S

(57)【要約】

【課題】マルチレイヤ符号化を利用して編成スーパー等の上乗せ情報を視聴者に対して適切に提示することを可能とする。
【解決手段】映像配信システムで用いる送出装置は、番組の映像を符号化してベースレイヤのビットストリームを出力するベースレイヤ符号化手段（１１１）と、前記映像に重畳して表示する上乗せ情報を符号化してエンハンスメントレイヤのビットストリームを出力するエンハンスメントレイヤ符号化手段（１１３）と、前記ベースレイヤ及び前記エンハンスメントレイヤの各ビットストリームを多重化して多重化ストリームを出力するとともに、前記上乗せ情報を前記映像に重畳して受信側で表示する時間を制御するための制御情報を前記多重化ストリームに含める多重化手段（１３）と、前記多重化ストリームを送出する送出手段（１４）と、を備える。
【選択図】図２

【特許請求の範囲】

【請求項1】

映像配信システムで用いる送出装置であって、
番組の映像を符号化してベースレイヤのビットストリームを出力するベースレイヤ符号化手段と、
前記映像に重畳して表示する上乗せ情報を符号化してエンハンスメントレイヤのビットストリームを出力するエンハンスメントレイヤ符号化手段と、
前記ベースレイヤ及び前記エンハンスメントレイヤの各ビットストリームを多重化して多重化ストリームを出力するとともに、前記上乗せ情報を前記映像に重畳して受信側で表示する時間を制御するための制御情報を前記多重化ストリームに含める多重化手段と、
前記多重化ストリームを送出する送出手段と、を備える
送出装置。

【請求項2】

前記制御情報は、第１フラグ情報を含み、
前記第１フラグ情報は、当該第１フラグ情報を取得した受信側で前記上乗せ情報を前記映像に重畳して常時表示することが必須であることを示すフラグ情報である
請求項１に記載の送出装置。

【請求項3】

前記制御情報は、第２フラグ情報を含み、
前記第２フラグ情報は、当該第２フラグ情報を取得した受信側で前記上乗せ情報を前記映像に重畳して所定時間だけ表示することが必須であることを示すフラグ情報である
請求項１に記載の送出装置。

【請求項4】

前記制御情報は、前記所定時間に関する時間情報をさらに含み、
前記時間情報は、前記所定時間の時間長、前記所定時間が設定される周期であるインターバル時間、及び前記所定時間が繰り返される繰返し回数のうち、少なくとも１つを示す情報である
請求項３に記載の送出装置。

【請求項5】

前記制御情報は、第３フラグ情報を含み、
前記第３フラグ情報は、当該第３フラグ情報を取得した受信側で前記上乗せ情報を前記映像に重畳して表示するか否かを任意に選択可能であることを示すフラグ情報である
請求項１に記載の送出装置。

【請求項6】

映像配信システムで用いる受信装置であって、
番組の映像を符号化して得られたベースレイヤのビットストリームと前記映像に重畳して表示する上乗せ情報を符号化して得られたエンハンスメントレイヤのビットストリームとが多重化された多重化ストリームを受信する受信手段と、
前記ベースレイヤ及び前記エンハンスメントレイヤの各ビットストリームを分離するとともに、前記上乗せ情報を前記映像に重畳して受信側で表示する時間を制御するための制御情報を前記多重化ストリームから取得する分離手段と、
前記ベースレイヤのビットストリームから前記映像を復号するベースレイヤ復号手段と、
前記制御情報に基づいて、前記エンハンスメントレイヤのビットストリームから前記上乗せ情報を復号するエンハンスメントレイヤ復号手段と、を備える
受信装置。

【請求項7】

前記制御情報は、第１フラグ情報を含み、
前記第１フラグ情報は、当該第１フラグ情報を取得した受信側で前記上乗せ情報を前記映像に重畳して常時表示することが必須であることを示すフラグ情報である
請求項６に記載の受信装置。

【請求項8】

前記制御情報は、第２フラグ情報を含み、
前記第２フラグ情報は、当該第２フラグ情報を取得した受信側で前記上乗せ情報を前記映像に重畳して所定時間だけ表示することが必須であることを示すフラグ情報である
請求項６に記載の受信装置。

【請求項9】

前記制御情報は、前記所定時間に関する時間情報をさらに含み、
前記時間情報は、前記所定時間の時間長、前記所定時間が設定される周期であるインターバル時間、及び前記所定時間が繰り返される繰返し回数のうち、少なくとも１つを示す情報である
請求項８に記載の受信装置。

【請求項10】

前記制御情報は、第３フラグ情報を含み、
前記第３フラグ情報は、当該第３フラグ情報を取得した受信側で前記上乗せ情報を前記映像に重畳して表示するか否かを任意に選択可能であることを示すフラグ情報である
請求項６に記載の受信装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、放送を含む映像配信システムで用いる送出装置及び受信装置に関する。

【背景技術】

【0002】

放送サービスにおいては、過去の番組の再放送時、スポーツ、又は国会放送など、終了時間が流動的な番組がある。そのため、当該番組の放送中又はその後の番組において放送時間が変更になる場合がある。また、一部の番組が放送プログラムを正常化するために放送休止になることもある。

【0003】

そのような場合において、放送時間が変更されたこと又は番組が休止になったことなどを上乗せスーパーと称される字幕により、番組開始時又は別途定められた時間において所定時間にわたって表示することが行われている。このような字幕スーパーは、番組編成情報を告知することから編成スーパーとも称される。

【0004】

例えば、送出装置は、番組開始時に、所定時間にわたって番組の映像に編成スーパーを重畳したうえで符号化を行い、符号化によって得たストリームを送出する。受信装置は、当該ストリームから編成スーパー付きの映像を復号する。その結果、受信側では、当該所定時間にわたって編成スーパー付きの映像を表示する。また、ライブ映像のネット配信を同時に行う場合において、ネット配信でも同様のスーパーの表示を必要とする。

【0005】

一方、特許文献１には、マルチレイヤ符号化を応用して映像の上乗せサービスを実現する技術が記載されている。送出装置は、主映像をベースレイヤとして符号化するとともに、字幕や解説映像等の上乗せ情報（すなわち、副映像）を主映像に重畳した映像をエンハンスメントレイヤとして符号化して送出する。受信側では、視聴者の選択に応じて、ベースレイヤ及びエンハンスメントレイヤを組み合わせて復号することにより、上乗せ情報付きの映像を表示できる。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開２０２２－５３５３４号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

特許文献１に記載の技術では、編成スーパーを上乗せ情報として用いることで、編成スーパーが重畳された映像を受信側で表示させることができる。しかしながら、編成スーパーは、本来であれば番組放送中に継続して表示させたいところであるが、編成スーパーが常時表示されることでコンテンツの邪魔になることもある。そのため、従来の技術では、番組冒頭又は定められた時間において所定時間（数秒から数分）の表示に限定して編成スーパーの上乗せが実施されており、番組の途中から視聴を開始した視聴者の目に触れないことがある。

【0008】

そこで、本発明は、マルチレイヤ符号化を利用して編成スーパー等の上乗せ情報を視聴者に対して適切に提示することを可能とする送出装置及び受信装置を提供することを目的とする。

【課題を解決するための手段】

【0009】

第１の態様に係る送出装置は、映像配信システムで用いる送出装置であって、番組の映像を符号化してベースレイヤのビットストリームを出力するベースレイヤ符号化手段と、前記映像に重畳して表示する上乗せ情報を符号化してエンハンスメントレイヤのビットストリームを出力するエンハンスメントレイヤ符号化手段と、前記ベースレイヤ及び前記エンハンスメントレイヤの各ビットストリームを多重化して多重化ストリームを出力するとともに、前記上乗せ情報を前記映像に重畳して受信側で表示する時間を制御するための制御情報を前記多重化ストリームに含める多重化手段と、前記多重化ストリームを送出する送出手段と、を備える。

【0010】

第２の態様に係る受信装置は、映像配信システムで用いる受信装置であって、番組の映像を符号化して得られたベースレイヤのビットストリームと前記映像に重畳して表示する上乗せ情報を符号化して得られたエンハンスメントレイヤのビットストリームとが多重化された多重化ストリームを受信する受信手段と、前記ベースレイヤ及び前記エンハンスメントレイヤの各ビットストリームを分離するとともに、前記上乗せ情報を前記映像に重畳して受信側で表示する時間を制御するための制御情報を前記多重化ストリームから取得する分離手段と、前記ベースレイヤのビットストリームから前記映像を復号するベースレイヤ復号手段と、前記制御情報に基づいて、前記エンハンスメントレイヤのビットストリームから前記上乗せ情報を復号するエンハンスメントレイヤ復号手段と、を備える。

【発明の効果】

【0011】

本発明によれば、マルチレイヤ符号化を利用して編成スーパー等の上乗せ情報を視聴者に対して適切に提示することを可能とする送出装置及び受信装置を提供できる。

【図面の簡単な説明】

【0012】

【図1】実施形態に係る放送システムの構成例を示す図である。

【図2】実施形態に係る送出装置の構成例を示す図である。

【図3】実施形態に係る重畳部の動作例を示す図である。

【図4】実施形態に係る制御情報の構成例を示す図である。

【図5】実施形態に係る受信装置の構成例を示す図である。

【発明を実施するための形態】

【0013】

図面を参照して、実施形態について説明する。以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。以下において、映像配信システムの一例として放送システムについて説明する。放送システムは、送出装置から受信装置へ放送伝送路を介して一方向の配信を行うシステムである。しかしながら、本発明の映像配信システムは放送システムに限定されない。映像配信システムは、送出装置と受信装置とが通信回線を介して双方向の通信を行うシステム、例えば、インターネット経由で映像配信を行うネット配信システムであってもよい。

【0014】

（放送システム）
図１は、本実施形態に係る放送システム１０の構成例を示す図である。放送システム１０は、送出装置１と受信装置２とを有する。図１では、受信装置２を１つのみ図示しているが、受信装置２の数は複数であってもよい。送出装置１は、番組の映像を符号化して送出する。受信装置２は、符号化された番組映像データを受信して復号する。受信装置２は、図示を省略する表示装置と接続されている、又は表示装置と一体化されていてもよい。受信装置２が復号映像を表示装置に出力することで表示装置が映像を表示する。

【0015】

本実施形態では、放送システム１０は、マルチレイヤ符号化を用いて番組の映像伝送を行う。マルチレイヤ符号化は、階層符号化と称されることもある。マルチレイヤ符号化では、ベースレイヤ（以下、「ＢＬ」と表記する）を基本のストリームとし、その差分映像をエンハンスメントレイヤ（以下、「ＥＬ」と表記する）として伝送する。図１において、１つのＢＬ＃０を伝送し、複数のＥＬ（ＥＬ＃１乃至ＥＬ＃ｎ）を伝送する例を図示しているが、伝送するＥＬは１つのみであってもよい。ここで、「＃」が付された数字は、ビットストリームの識別子（ストリーム番号）を意味する。なお、ＥＬの最大数ｎは、２以上の整数であって、サービスによって符号化方式で定められる。受信装置２は、ＢＬ単体での復号だけではなく、ＢＬ及びＥＬを組み合わせて復号することも可能である。

【0016】

マルチレイヤ符号化の方式には、ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）におけるＳｃａｌａｂｌｅ Ｍａｉｎ １０プロファイルを用いることができる。Ｓｃａｌａｂｌｅ Ｍａｉｎ １０プロファイルは、ＢＬとしてＭａｉｎ１０プロファイル相当の映像を伝送しながら、ＥＬを追加してＢＬの映像に重畳することができる符号化の仕組みである。

【0017】

マルチレイヤ符号化の方式には、ＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）におけるＭｕｌｔｉｌａｙｅｒ Ｍａｉｎ１０プロファイルを用いてもよい。Ｍｕｌｔｉｌａｙｅｒ Ｍａｉｎ１０プロファイルでは、上述のＳｃａｌａｂｌｅ Ｍａｉｎ １０プロファイルと同様に、Ｍａｉｎ１０プロファイルに対して複数レイヤの伝送を実現するプロファイルであり、複数のレイヤの映像伝送が可能である。

【0018】

このようなマルチレイヤ機能を備えた符号化技術では、映像の本サービスとなるＢＬに対して上位レイヤであるＥＬの映像を重畳することができる。なお、マルチレイヤ符号化としてＨＥＶＣのＳｃａｌａｂｌｅ Ｍａｉｎ １０プロファイルやＶＶＣのＭｕｌｔｉｌａｙｅｒ Ｍａｉｎ１０プロファイルを例に挙げたが、ＨＥＶＣやＶＶＣに限定されるものではなく、他の符号化方式を用いてもよい。

【0019】

受信装置２は、ＢＬ単体での復号に加え、ＢＬ及びＥＬを組み合わせて復号することも可能である。マルチレイヤ符号化によれば、例えば、複数のレイヤのビットストリームを利用して復号すると高い品質の映像が再生されるのに対し、一部のレイヤ（ＢＬ）のビットストリームのみを復号しても低い品質の映像が再生可能である。

【0020】

マルチレイヤ符号化の第１の応用例として、ＢＬに対して品質向上のためのＥＬを伝送することで、品質の異なる（低品質、高品質）映像サービスを実現するＳＮＲスケーラブルがある。第２の応用例として、ＢＬ（低解像度映像）に対して解像度向上のためのＥＬ（高解像度映像）を伝送する空間スケーラブルがある。空間スケーラブルによれば、２Ｋ映像と４Ｋ映像とのセットや、４Ｋ映像と８Ｋ映像とのセット等、異なる解像度の放送サービスを効率的に同時に伝送可能である。第３の応用例として、ＢＬに対してフレームレート向上のためのＥＬを伝送する時間スケーラブル（Ｔｅｍｐｏｒａｌ Ｓｃａｌａｂｌｅ）がある。

【0021】

本実施形態では、送出装置１は、マルチレイヤ符号化（特に、ＳＮＲスケーラブル）を応用して映像の上乗せサービスを実現する。具体的には、送出装置１は、主映像をＢＬとして符号化するとともに、字幕や解説映像等の上乗せ情報（すなわち、副映像）を主映像に重畳した映像をＥＬとして符号化し、ＢＬ及びＥＬのそれぞれのビットストリーム（以下、単に「ストリーム」とも称する）を送出する。このような方法によれば、ＢＬのみを受信する受信装置２は主映像のみを再生可能である一方、ＢＬ及びＥＬを受信する受信装置２は、ＢＬのみの復号を行うことで主映像を、ＢＬ及びＥＬの両方を復号することで副映像付きの主映像をそれぞれ再生可能となり、受信したいサービスの選択を受信装置２側で行うことが可能となる。

【0022】

ここで、上乗せ情報とは、番組の映像に重畳して表示する情報である。上乗せ情報は、画面の一部のみを占有する情報であり、例えば、時報や緊急地震速報と呼ばれる情報やニュース速報と呼ばれる情報が上乗せ情報に相当する。上乗せ情報は、字幕（例えば、災害や事件・事故を知らせるテロップ）であってもよい。字幕は、数字を含む文字、図形、若しくは記号、又はこれらの組み合わせからなる。上乗せ情報は、多言語字幕サービスにおける字幕であってもよいし、主映像サービスに関する解説映像サービスにおける解説映像であってもよい（特許文献１参照）。

【0023】

本実施形態では、上乗せ情報が編成スーパーである一例について主として説明する。編成スーパーは、放送時間が変更されたこと又は番組が休止になったことなどを表す字幕である。

【0024】

（送出装置）
図２は、本実施形態に係る送出装置１の構成例を示す図である。送出装置１は、ビットストリーム生成部１１と、制御情報生成部１２と、多重化部１３と、送出部１４とを有する。なお、ＥＬが１つのみである一例を示しているが、ＥＬは複数であってもよい。

【0025】

ビットストリーム生成部１１は、ＢＬ符号化部１１１と、重畳部１１２と、ＥＬ符号化部１１３とを有する。

【0026】

ＢＬ符号化部１１１は、番組の映像である主映像の入力信号をＢＬとして符号化し、ＢＬのビットストリームを多重化部１３に出力する。また、ＢＬ符号化部１１１は、主映像に対応する局部復号映像を重畳部１１２及びＥＬ符号化部１１３に出力する。また、ＢＬ符号化部１１１は、送出しているＢＬビットストリームの映像フォーマットや符号化情報としてＥＬと共有するパラメータをＥＬ符号化部１１３に出力する。

【0027】

重畳部１１２は、主映像に対応する局部復号映像に上乗せ情報（副映像信号）を重畳し、上乗せ情報が重畳された主映像である上乗せ情報付き映像信号をＥＬ符号化部１１３に出力する。なお、重畳部１１２は、主映像に対応する局部復号映像に上乗せ情報を重畳する場合に限らず、主映像に対して直接的に上乗せ情報を重畳してＥＬ符号化部１１３に出力してもよい。重畳部１１２は、上乗せ情報が入力されていない場合（例えば、入力信号が黒一色のような映像情報として内容を含まないような場合）、主映像に対応する局部復号映像をそのままＥＬ符号化部１１３に出力してもよい。

【0028】

図３は、本実施形態に係る重畳部１１２の動作例を示す図である。重畳部１１２は、図３（ａ）に示すような編成スーパーを上乗せ情報として図３（ｂ）に示す番組映像（主映像）に重畳し、図３（ｃ）に示す上乗せ情報付き番組映像を出力する。ここでは、上乗せ情報が編成スーパーであるとしているが、編成スーパーに限定するものではなく、時報や解説映像等における図や映像等であってもよい。

【0029】

ＥＬ符号化部１１３は、上乗せ情報が重畳された主映像である上乗せ情報付き映像信号をＥＬとして符号化し、ＥＬのビットストリームを出力する。例えば、ＥＬ符号化部１１３は、上乗せ情報が重畳された番組映像の全体的な提示領域（すなわち、フレーム全体）を、ＢＬを参照するインターレイヤ予測により符号化する。インターレイヤ予測とは、ＥＬを符号化する際にＢＬを参照する予測をいう。インターレイヤ予測により、ＢＬに対する差分映像をＥＬとして伝送できる。例えば、図３（ｃ）に示す上乗せ情報付き番組映像をＥＬとして符号化する場合、ＢＬは図３（ｂ）に示すような番組映像であるため、差分は図３（ａ）に示す上乗せ情報である。そのため、ＥＬ符号化部１１３は、インターレイヤ予測により上乗せ情報を効率的且つ速やかに符号化してＥＬのビットストリームを生成可能である。ここで、ＥＬ符号化部１１３は、ＢＬとの差分がゼロである領域をインターレイヤ予測に制限してもよい。なお、上乗せ情報が入力されていない場合、ＥＬ符号化部１１３は、予測処理を省略し差分が無いことを示すビットストリームを生成してもよい。

【0030】

なお、本実施形態では、ＢＬとＥＬとで同じ解像度・同じフレームレートの映像を符号化するＳＮＲスケーラブルを利用し、上乗せ情報を効率的に符号化している。なお、一般的なＳＮＲスケーラブルは、ＢＬに生じる符号化劣化を補償する情報をＥＬとして符号化するものであるが、本実施形態では、上乗せ情報を効率的に符号化するためにＳＮＲスケーラブルの技術を利用している。

【0031】

図２に戻り、制御情報生成部１２は、上乗せ情報を主映像に重畳して受信側で表示する時間を制御するための制御情報を生成する。このような制御情報の詳細については後述する。制御情報生成部１２は、生成した制御情報を多重化部１３に出力する。

【0032】

多重化部１３は、制御情報と、ＢＬのビットストリームと、ＥＬのビットストリームと、他のメディア（例えば、音声）とを多重化して多重化ストリームを送出部１４に出力する。ＢＬとＥＬのストリームを合成するか個別に伝送するかは符号化方式、伝送方式による。ここで、多重化部１３は、所定の多重化方式を用いて各ビットストリームを多重化して多重化ストリームを送出する。所定の多重化方式は、例えば、ＭＰＥＧ－２やＭＰＥＧ－４のＴｒａｎｓｐｏｒｔ ｓｔｒｅａｍ（ＴＳ）であってもよいし、ＭＰＥＧ Ｍｅｄｉａ Ｔｒａｎｓｐｏｒｔ（ＭＭＴ）であってもよい。所定の多重化方式は、これらに限定されず、例えばＣＭＡＦ（Ｃｏｍｍｏｎ Ｍｅｄｉａ Ａｐｐｌｉｃａｔｉｏｎ Ｆｏｒｍａｔ）など、複数のストリームを同期して伝送できる多重化方式であればよい。多重化部１３は、ＢＬビットストリーム及びＥＬビットストリームのそれぞれにストリーム識別子を付与してもよい。

【0033】

多重化部１３は、制御情報生成部１２が生成した制御情報を周期的に（繰り返して）多重化ストリームに含めてもよい。多重化部１３は、番組と対応付けられたメッセージ（又はテーブル）に制御情報を含めてもよい。例えば、多重化部１３は、制御情報生成部１２が生成した制御情報を、デジタル放送で用いられているＳｅｒｖｉｃｅ Ｉｎｆｏｒｍａｔｉｏｎ（ＳＩ）情報に含める。ＳＩは、例えば、デジタル放送の番組を視聴するために必要な情報やＥＩＴ（Ｅｖｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ Ｔａｂｌｅ）と呼ばれる番組タイトルや放送時間、番組出演者などを含む情報である。多重化部１３は、制御情報生成部１２が生成した制御情報をＳＩの一部として含む多重化ストリームを出力する。なお、多重化部１３は、ＳＩ情報以外のメッセージ（又はテーブル）に制御情報を含めてもよい。

【0034】

送出部１４は、伝送路を介して多重化ストリームを送出する。伝送路は、無線回線（放送電波）であってもよいし、有線回線（ネットワーク）であってもよい。なお、伝送路については、例えばＢＬビットストリーム及びＥＬビットストリームを放送電波やネットワークを用いた同一経路で伝送してもよいし、一部のストリーム（例えばＢＬビットストリーム）を放送波で伝送しつつ残りのストリーム（例えばＥＬビットストリーム）をネットワークで伝送するというように異経路で伝送してもよい。

【0035】

このように、本実施形態に係る送出装置１は、番組の映像を符号化してＢＬのビットストリームを出力するＢＬ符号化手段（１１１）と、映像に重畳して表示する上乗せ情報を符号化してＥＬのビットストリームを出力するＥＬ符号化手段（１１３）と、ＢＬ及びＥＬの各ビットストリームを多重化して多重化ストリームを出力するとともに、上乗せ情報を映像に重畳して受信側で表示する時間を制御するための制御情報を多重化ストリームに含める多重化手段（１３）と、多重化ストリームを送出する送出手段（１４）と、を有する。このような制御情報を多重化ストリームに含めることにより、マルチレイヤ符号化を利用して編成スーパー等の上乗せ情報を視聴者に対して適切に提示することが可能になる。

【0036】

（制御情報）
図４は、本実施形態に係る制御情報の構成例を示す図である。制御情報には、第１フラグ情報、第２フラグ情報、及び第３フラグ情報のいずれかのフラグ情報がセットされる。

【0037】

第１フラグ情報は、当該第１フラグ情報を取得した受信側で上乗せ情報を映像に重畳して常時表示することが必須であることを示すフラグ情報である。すなわち、第１フラグ情報は、受信側における上乗せ情報の常時表示が必須であることを示す。番組を視聴する受信側が当該番組について第１フラグ情報を取得した場合、当該受信側では、上乗せ情報を当該番組の映像に重畳して常時表示する。これにより、受信側で番組の途中から視聴を開始した場合であっても上乗せ情報が常に表示されるため、上乗せ情報を視聴者に対してより確実に提示することが可能になる。

【0038】

第２フラグ情報は、当該第２フラグ情報を取得した受信側で上乗せ情報を映像に重畳して所定時間だけ表示することが必須であることを示すフラグ情報である。すなわち、第２フラグ情報は、受信側における上乗せ情報の一時的な表示が必須であることを示す。番組を視聴する受信側が当該番組について第２フラグ情報を取得した場合、当該受信側では、当該第２フラグ情報を取得してから所定時間にわたって上乗せ情報を当該番組の映像に重畳して表示し、当該所定時間が経過したときに上乗せ情報を非表示にする。これにより、上乗せ情報を視聴者に対してより確実に提示可能としつつ、上乗せ情報が常時表示されることでコンテンツの邪魔になる事態を抑制できる。

【0039】

制御情報に第２フラグ情報がセットされる場合、制御情報は、所定時間に関する時間情報をさらに含んでもよい。時間情報は、所定時間の時間長、所定時間が設定される周期であるインターバル時間、及び所定時間が繰り返される繰返し回数のうち、少なくとも１つを示す情報である。

【0040】

所定時間の時間長を示す時間情報を制御情報に含めることにより、例えば上乗せ情報の内容に応じて、適切な時間長において当該上乗せ情報を受信側で表示させることができる。但し、所定時間の時間長は、システム仕様で予め規定された固定の時間長であってもよい。

【0041】

インターバル時間を示す時間情報を制御情報に含めることにより、例えば上乗せ情報の内容に応じて、適切なインターバル（周期）で当該上乗せ情報を受信側で表示させることができる。但し、インターバル時間は、システム仕様で予め規定された固定の時間長であってもよい。或いは、上乗せ情報の表示を番組中で１回のみとする場合、インターバル時間は不要である。

【0042】

繰返し回数を示す時間情報を制御情報に含めることにより、例えば上乗せ情報の内容に応じて、適切な回数だけ当該上乗せ情報を受信側で表示させることができる。但し、繰返し回数は、システム仕様で予め規定された固定の回数であってもよい。或いは、上乗せ情報の表示を番組中で１回のみとする場合、繰返し回数は不要である。

【0043】

第３フラグ情報は、当該第３フラグ情報を取得した受信側で上乗せ情報を映像に重畳して表示するか否かを任意に選択可能であることを示すフラグ情報である。番組を視聴する受信側が当該番組について第３フラグ情報を取得した場合、上乗せ情報をデフォルト（初期状態）では非表示とし、視聴者の操作（例えば、リモコンによる操作）によって任意に上乗せ情報の表示・非表示の切り替えを可能とする。例えば、上乗せ情報の内容が、時報や、多言語字幕サービスにおける字幕、又は解説映像サービスにおける解説映像であるような場合、第３フラグ情報をセットすることにより、視聴者が任意に上乗せ情報の表示・非表示を切り替えることができる。

【0044】

制御情報は、フラグ情報と対応付けられたストリーム識別子をさらに含んでもよい。ストリーム識別子は、上乗せ情報が符号化されたＥＬビットストリームを識別するための識別子（ストリーム番号）である。例えば、同一番組について、異なる上乗せ情報をそれぞれＥＬビットストリームで伝送する場合、制御情報は、フラグ情報とストリーム識別子とのセットを複数含んでもよい。これにより、あるＥＬレイヤについては上乗せ情報の表示を必須としつつ、別のＥＬレイヤについては上乗せ情報の表示を任意とするといった運用が可能になる。或いは、上乗せ情報を伝送するストリームは、システム仕様で予め規定されていてもよい。例えば、最も上位のＥＬレイヤ（図１のＥＬ＃ｎ）が上乗せ情報を伝送するストリームであると規定されていてもよい。

【0045】

（受信装置）
図５は、本実施形態に係る受信装置２の構成例を示す図である。受信装置２は、受信部２１と、ストリーム取得部２２と、復号部２３とを有する。

【0046】

受信部２１は、送出装置１からの伝送信号を受信し、受信信号をストリーム取得部２２に出力する。伝送信号は、番組の映像を符号化して得られたＢＬのビットストリーム（ＢＬストリーム）と、当該映像に重畳して表示する上乗せ情報を符号化して得られたＥＬのビットストリーム（ＥＬストリーム）とが多重化された多重化ストリームを含む。本実施形態では、多重化ストリームは、上乗せ情報を映像に重畳して受信側で表示する時間を制御するための制御情報を含む。

【0047】

ストリーム取得部２２は、受信信号からＢＬ及び対応するＥＬのそれぞれのストリームを分離（取得）し、ＢＬストリーム及びＥＬストリームを復号部２３に出力する。ストリーム取得部２２は、選局部２２１と、メディア検出部２２２とを有する。選局部２２１は、例えば視聴者からの操作に基づいてサービス（視聴番組）を選択（すなわち、選局）し、選択結果を示す情報をメディア検出部２２２に出力する。選局部２２１は、リモコンであってもよい。

【0048】

メディア検出部２２２は、選局部２２１が出力する情報に基づいて、視聴者が選択したサービスに対応する多重化ストリームを取得（抽出）してＢＬストリーム及びＥＬストリームに分離し、ＢＬストリーム及びＥＬストリームを復号部２３に出力する。本実施形態では、メディア検出部２２２は、上乗せ情報を映像に重畳して受信側で表示する時間を制御するための制御情報を多重化ストリームから取得し、取得した制御情報を復号部２３に出力する。

【0049】

復号部２３は、マルチレイヤ復号を行う。具体的には、復号部２３は、ＢＬストリーム及びＥＬストリームを組み合わせて復号し、復号映像を表示装置に出力する。復号部２３は、ＢＬ復号部２３１と、ＥＬ復号部２３２と、復号制御部２３３とを有する。

【0050】

ＢＬ復号部２３１は、ＢＬストリームから番組映像を復号する。ＥＬ復号部２３２は、ＥＬストリームから、上乗せ情報が重畳された番組映像を復号する。ここで、ＥＬ復号部２３２は、上乗せ情報が重畳された番組映像の全体的な提示領域（フレーム全体）を、ＢＬを参照するインターレイヤ予測により復号する。ＥＬストリームは、ＢＬに対する差分映像として上乗せ情報を符号化したストリームであるため、ＥＬ復号部２３２は、ＢＬ復号部２３１が復号する番組映像を参照して、差分としての上乗せ情報を番組映像に重畳（合成）し、上乗せ情報付き番組映像を復号する。これにより、インターレイヤ予測により上乗せ情報を効率的且つ速やかに復号して上乗せ情報を提示可能である。

【0051】

復号制御部２３３は、メディア検出部２２２が取得した制御情報に基づいて、上乗せ情報（すなわち、ＥＬストリーム）の復号を制御する。上述のように、制御情報には、第１フラグ情報、第２フラグ情報、及び第３フラグ情報のいずれかのフラグ情報がセットされている。

【0052】

視聴する番組について第１フラグ情報がセットされている場合、復号制御部２３３は、ＥＬストリームを常時復号するようＥＬ復号部２３２を制御する。その結果、復号部２３は、ＥＬストリームから復号された上乗せ情報を、ＢＬストリームから復号された番組映像に重畳して出力する。これにより、番組の途中から視聴を開始した場合であっても上乗せ情報が常に表示されることになる。

【0053】

視聴する番組について第２フラグ情報がセットされている場合、復号制御部２３３は、当該第２フラグ情報を取得してから所定時間だけＥＬストリームを復号するようＥＬ復号部２３２を制御する。その結果、復号部２３は、ＥＬストリームから復号された上乗せ情報を、ＢＬストリームから復号された番組映像に所定時間だけ重畳して出力する。また、視聴する番組について第２フラグ情報がセットされている場合、復号制御部２３３は、制御情報に含まれる時間情報に基づいて所定時間を特定する。上述のように、時間情報は、所定時間の時間長、所定時間が設定される周期であるインターバル時間、及び所定時間が繰り返される繰返し回数のうち、少なくとも１つを示す情報である。

【0054】

視聴する番組について第３フラグ情報がセットされている場合、復号制御部２３３は、選局部２２１（リモコン）に対する視聴者の操作に基づいて、ＥＬストリームを復号するか否か（すなわち、上乗せ情報を番組映像に重畳するか否か）を決定する。

【0055】

このように、本実施形態に係る受信装置２は、番組の映像を符号化して得られたＢＬのビットストリームと映像に重畳して表示する上乗せ情報を符号化して得られたＥＬのビットストリームとが多重化された多重化ストリームを受信する受信手段（２１）と、ＢＬ及びＥＬの各ビットストリームを分離するとともに、上乗せ情報を映像に重畳して受信側で表示する時間を制御するための制御情報を多重化ストリームから取得する分離手段（２２２）と、ＢＬのビットストリームから映像を復号するＢＬ復号手段（２３１）と、制御情報に基づいて、ＥＬのビットストリームから上乗せ情報を復号するＥＬ復号手段（２３２）と、を有する。これにより、マルチレイヤ符号化を利用して編成スーパー等の上乗せ情報を視聴者に対して適切に提示することが可能になる。

【0056】

（その他の実施形態）
上述の実施形態において、便宜上、ＢＬストリームとＥＬストリームを分割して図示したが、符号化方式の仕様に従って１本のストリームとして合成されたストリームでもよい。例えば、ＢＬストリーム及びＥＬストリームを多重化する（伝送する）パケット単位でＢＬストリーム及びＥＬストリームに分割し処理を行ってもよい。

【0057】

送出装置１が行う各処理をコンピュータに実行させるプログラムが提供されてもよい。また、受信装置２が行う各処理をコンピュータに実行させるプログラムが提供されてもよい。プログラムは、コンピュータ読取り可能媒体に記録されていてもよい。コンピュータ読取り可能媒体を用いれば、コンピュータにプログラムをインストールすることが可能である。ここで、プログラムが記録されたコンピュータ読取り可能媒体は、非一過性の記録媒体であってもよい。非一過性の記録媒体は、特に限定されるものではないが、例えば、ＣＤ－ＲＯＭやＤＶＤ－ＲＯＭ等の記録媒体であってもよい。送出装置１が行う各処理を実行する回路を集積化し、送出装置１を半導体集積回路（チップセット、ＳｏＣ）により構成してもよい。受信装置２が行う各処理を実行する回路を集積化し、受信装置２を半導体集積回路（チップセット、ＳｏＣ）により構成してもよい。

【0058】

本開示で使用されている「に基づいて（ｂａｓｅｄ ｏｎ）」、「に応じて（ｄｅｐｅｎｄｉｎｇ ｏｎ）」という記載は、別段に明記されていない限り、「のみに基づいて」、「のみに応じて」を意味しない。「に基づいて」という記載は、「のみに基づいて」及び「に少なくとも部分的に基づいて」の両方を意味する。同様に、「に応じて」という記載は、「のみに応じて」及び「に少なくとも部分的に応じて」の両方を意味する。「含む（ｉｎｃｌｕｄｅ）」、「備える（ｃｏｍｐｒｉｓｅ）」、及びそれらの変形の用語は、列挙する項目のみを含むことを意味せず、列挙する項目のみを含んでもよいし、列挙する項目に加えてさらなる項目を含んでもよいことを意味する。また、本開示において使用されている用語「又は（ｏｒ）」は、排他的論理和ではないことが意図される。さらに、本開示で使用されている「第１」、「第２」等の呼称を使用した要素へのいかなる参照も、それらの要素の量又は順序を全般的に限定するものではない。これらの呼称は、２つ以上の要素間を区別する便利な方法として本明細書で使用され得る。したがって、第１及び第２の要素への参照は、２つの要素のみがそこで採用され得ること、又は何らかの形で第１の要素が第２の要素に先行しなければならないことを意味しない。本開示において、例えば、英語でのａ，ａｎ，及びｔｈｅのように、翻訳により冠詞が追加された場合、これらの冠詞は、文脈から明らかにそうではないことが示されていなければ、複数のものを含むものとする。

【0059】

以上、図面を参照して実施形態について詳しく説明したが、具体的な構成は上述のものに限られることはなく、要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。

【符号の説明】

【0060】

１ ：送出装置
２ ：受信装置
１０ ：放送システム
１１ ：ビットストリーム生成部
１２ ：制御情報生成部
１３ ：多重化部
１４ ：送出部
２１ ：受信部
２２ ：ストリーム取得部
２３ ：復号部
１１１ ：ＢＬ符号化部
１１２ ：重畳部
１１３ ：ＥＬ符号化部
２２１ ：選局部
２２２ ：メディア検出部
２３１ ：ＢＬ復号部
２３２ ：ＥＬ復号部
２３３ ：復号制御部

【図1】

【図2】

【図3】

【図4】

【図5】