特表2024-539722 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

▶ 中興通訊股▲ふん▼有限公司の特許一覧

特表2024-539722ビデオビットストリームのカプセル化、復号、アクセス方法、及び装置

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-10-29

(54)【発明の名称】ビデオビットストリームのカプセル化、復号、アクセス方法、及び装置

(51)【国際特許分類】

H04N 21/236 20110101AFI20241022BHJP

H04N 21/434 20110101ALI20241022BHJP

H04N 19/65 20140101ALI20241022BHJP

H04N 19/70 20140101ALI20241022BHJP

【ＦＩ】

H04N21/236

H04N21/434

H04N19/65

H04N19/70

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2024526624

(86)(22)【出願日】2022-10-12

(85)【翻訳文提出日】2024-05-02

(86)【国際出願番号】 CN2022124932

(87)【国際公開番号】W WO2023078048

(87)【国際公開日】2023-05-11

(31)【優先権主張番号】202111309701.X

(32)【優先日】2021-11-06

(33)【優先権主張国・地域又は機関】CN

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．３ＧＰＰ

(71)【出願人】

【識別番号】511151662

【氏名又は名称】中興通訊股▲ふん▼有限公司

【氏名又は名称原語表記】ＺＴＥＣＯＲＰＯＲＡＴＩＯＮ

【住所又は居所原語表記】ＺＴＥＰｌａｚａ，ＫｅｊｉＲｏａｄＳｏｕｔｈ，Ｈｉ－ＴｅｃｈＩｎｄｕｓｔｒｉａｌＰａｒｋ，ＮａｎｓｈａｎＳｈｅｎｚｈｅｎ，Ｇｕａｎｇｄｏｎｇ５１８０５７Ｃｈｉｎａ

(74)【代理人】

【識別番号】110002066

【氏名又は名称】弁理士法人筒井国際特許事務所

(72)【発明者】

【氏名】フアン，チェン

(72)【発明者】

【氏名】バイ，ヤーシエン

【テーマコード（参考）】

5C159

5C164

【Ｆターム（参考）】

5C159MA04

5C159MA05

5C159RB09

5C159RC11

5C159RF14

5C159UA02

5C159UA05

5C164MA02S

5C164MB41S

5C164SB11P

5C164UB11P

(57)【要約】

本開示の実施例は、ビデオビットストリームのカプセル化、復号、アクセス方法及び装置を提供する。当該方法は、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報をカプセル化するステップと、ＬＲＡＰサンプルのライブラリピクチャサンプルの情報をメディアコンテナファイルにカプセル化するステップであって、当該ライブラリピクチャサンプルは、ＬＲＡＰサンプルの参照ピクチャサンプルであるステップと、を含む。当該方法によれば、関連技術においてライブラリピクチャを参照ピクチャとして用いるビデオ符号化方式では参照ピクチャサンプルを含むビデオビットストリームに対して効率的なアクセス及び処理を行うことができず、処理が複雑であるという問題を解決することができ、ＬＲＡＰサンプルの情報を直接メディアコンテナファイルにカプセル化することにより、ランダムアクセスポイントとすることが可能なＬＲＡＰサンプル及びそれが参照するライブラリピクチャサンプルを容易に認識することができ、圧縮効率を満足しつつ伝送帯域幅を無駄にせず、処理の複雑さを低下させることができる。

【特許請求の範囲】

【請求項1】

第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報をカプセル化するステップと、
前記メディアコンテナファイルに前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報をカプセル化するステップであって、前記ライブラリピクチャサンプルは、前記ＬＲＡＰサンプルの参照ピクチャサンプルであるステップと、を含む、
ビデオビットストリームカプセル化方法。

【請求項2】

【請求項3】

前記メディアコンテナファイルは、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を含むか、又は、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含む同期サンプルデータボックスを含むか、又は、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを含むか、又は、
前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を示すセグメントインデックスデータボックスを含む、
請求項１に記載の方法。

【請求項4】

前記メディアコンテナファイルに、前記ＬＲＡＰサンプルのライブラリピクチャサンプルを含む第２のビデオビットストリームをカプセル化するステップをさらに含む、
請求項１に記載の方法。

【請求項5】

前記ＬＲＡＰサンプルの情報は、ＬＲＡＰサンプルのインデックス、ＬＲＡＰサンプルのストリームアクセスポイントタイプ、ＬＲＡＰサンプルのライブラリピクチャサンプルの数、ＬＲＡＰサンプルのライブラリピクチャサンプルの番号のうちの少なくとも１つを含む、
請求項１～４のいずれか１項に記載の方法。

【請求項6】

前記ライブラリピクチャサンプルの情報は、ライブラリピクチャサンプルに対応するトラック識別子、ライブラリピクチャサンプルの番号のうちの少なくとも１つを含む、
請求項１～４のいずれか１項に記載の方法。

【請求項7】

第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいて、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルを認識するステップと、
前記メディアコンテナファイルにおいて前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識するステップと、
前記ライブラリピクチャサンプルを復号するステップと、
前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号するステップと、を含む、
ビデオビットストリーム復号方法。

【請求項8】

第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいて、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルを認識する前記ステップは、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を解析するステップ、又は、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルの情報を含む同期サンプルデータボックスを解析するステップ、又は、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを解析するステップ、又は、
前記メディアコンテナファイルにおける、前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルの情報を示すセグメントインデックスデータボックスを解析するステップを含む、
請求項７に記載の方法。

【請求項9】

前記メディアコンテナファイルにおいて前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識する前記ステップは、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を解析するステップ、又は、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含む同期サンプルデータボックスを解析するステップ、又は、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを解析するステップ、又は、
前記メディアコンテナファイルにおける、前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を示すセグメントインデックスデータボックスを解析するステップを含む、
請求項７に記載の方法。

【請求項10】

前記ライブラリピクチャサンプルを復号する前記ステップは、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報に基づいて、前記メディアコンテナファイルにカプセル化された第２のビデオビットストリームに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルを復号するステップを含む、
ことを特徴とする請求項９に記載の方法。

【請求項11】

前記ＬＲＡＰサンプルの情報は、ＬＲＡＰサンプルのインデックス、ＬＲＡＰサンプルのストリームアクセスポイントタイプ、ＬＲＡＰサンプルのライブラリピクチャサンプルの数、ＬＲＡＰサンプルのライブラリピクチャサンプルの番号のうちの少なくとも１つを含む、
請求項７～１０のいずれか１項に記載の方法。

【請求項12】

前記ライブラリピクチャサンプルの情報は、ライブラリピクチャサンプルに対応するトラック識別子、ライブラリピクチャサンプルの番号のうちの少なくとも１つを含む、
請求項７～１０のいずれか１項に記載の方法。

【請求項13】

第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得し、前記ＬＲＡＰピクチャのライブラリピクチャを取得するステップと、
前記ライブラリピクチャを参照ピクチャとして用いて前記ＬＲＡＰピクチャを復号するステップと、
前記復号されたＬＲＡＰピクチャにおいて前記第１のビデオビットストリームのランダムアクセスを実行するステップと、を含む、
ビデオビットストリームアクセス方法。

【請求項14】

前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得するステップは、
第１のビデオビットストリームの符号化ビデオデータの、少なくとも１つのＬＲＡＰピクチャを含む第１のセグメントを受信するステップを含む、
請求項１３に記載の方法。

【請求項15】

【請求項16】

第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得し、前記ＬＲＡＰピクチャのライブラリピクチャを取得するステップは、
前記第１のビデオビットストリームの符号化ビデオデータの第４のセグメントを受信するステップであって、前記第４のセグメントの第１のサブセグメントは、前記ライブラリピクチャを含み、前記第４のセグメントの第２のサブセグメントは、少なくとも１つのＬＲＡＰピクチャを含むステップを含む、
請求項１３に記載の方法。

【請求項17】

第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得する前記ステップは、
前記第１のビデオビットストリームの符号化ビデオデータの、前記ＬＲＡＰピクチャが前記第１のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップを含む、
請求項１３に記載の方法。

【請求項18】

前記ＬＲＡＰピクチャのライブラリピクチャを取得する前記ステップは、
前記第１のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャが前記第１のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップ、又は、
第２のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャが前記第２のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップステップを含む、
請求項１３に記載の方法。

【請求項19】

前記ライブラリピクチャを参照ピクチャとして用いて前記ＬＲＡＰピクチャを復号するステップの後に、
前記第１のビデオビットストリームにおける復号順及び表示順で前記ＬＲＡＰピクチャに後続する少なくとも１つの非ランダムアクセスポイントピクチャを復号するステップであって、前記少なくとも１つの非ランダムアクセスポイントピクチャは、復号順又は表示順が前記ＬＲＡＰピクチャに先行するいずれのピクチャをも参照ピクチャとしないステップをさらに含む、
請求項１３に記載の方法。

【請求項20】

第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報をカプセル化するように構成される第１のカプセル化モジュールと、
前記メディアコンテナファイルに前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報をカプセル化するように構成される第２のカプセル化モジュールであって、前記ライブラリピクチャサンプルは、前記ＬＲＡＰサンプルの参照ピクチャサンプルである第２のカプセル化モジュールと、を含む、
ビデオビットストリームカプセル化装置。

【請求項21】

第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいて、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルを認識するように構成される第１の認識モジュールと、
前記メディアコンテナファイルにおいて前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識するように構成される第２の認識モジュールと、
前記ライブラリピクチャサンプルを復号するように構成される第１の復号モジュールと、
前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号するように構成される第２の復号モジュールと、を含む、
ビデオビットストリーム復号装置。

【請求項22】

第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得し、前記ＬＲＡＰピクチャのライブラリピクチャを取得するように構成される取得モジュールと、
前記ライブラリピクチャを参照ピクチャとして用いて前記ＬＲＡＰピクチャを復号するように構成される第３の復号モジュールと、
前記復号されたＬＲＡＰピクチャにおいて前記第１のビデオビットストリームのランダムアクセスを実行するように構成される実行モジュールと、を含む、
ビデオビットストリームアクセス装置。

【請求項23】

実行されると、請求項１～６、７～１２、１３～１９のいずれか１項に記載の方法を実行するように構成されるコンピュータプログラムが記憶されている、
ことを特徴とするコンピュータ読み取り可能な記憶媒体。

【請求項24】

メモリとプロセッサとを含む電子装置であって、
前記メモリには、コンピュータプログラムが記憶されており、
前記プロセッサは、前記コンピュータプログラムを実行することによって請求項１～６、７～１２、１３～１９のいずれか１項に記載の方法を実行するように構成される、
電子装置。

【発明の詳細な説明】

【技術分野】

【0001】

(関連出願の相互参照)
本開示は、２０２１年１１月０６日に提出された発明名称が「ビデオビットストリームのカプセル化、復号、アクセス方法及び装置」である中国特許出願ＣＮ２０２１１１３０９７０１.Ｘに基づき当該特許出願についての優先権を主張し、それに開示された全ての内容は参照により本開示に組み込まれる。

【0002】

本開示の実施例は、通信分野に関し、具体的にはビデオビットストリームのカプセル化、復号、アクセス方法、及び装置に関する。

【背景技術】

【0003】

従来のビデオコーデックは、ブロック分割に基づく時間予測と空間予測を利用するハイブリッド符号化フレームワーク技術であり、現在のピクチャからのイントラ(Ｉ)予測を用いて空間予測を実現するとともに、ブロックレベルのインター(Ｐ)又は双方向インター(Ｂ)予測を用いて時間予測を実現している。通常、イントラ(Ｉ)符号化ブロックの符号化コストは、インター(Ｐ)符号化ブロックよりもかなり高くなり、インター(Ｐ)符号化ブロックの符号化コストは、双方向インター(Ｂ)符号化ブロックよりも高くなる。

【0004】

イントラ符号化ブロックのみからなるピクチャは、イントラ符号化ピクチャ、すなわちＩピクチャと呼ばれる。イントラランダムアクセスポイント(Intra Random Access Point、ＩＲＡＰと略称する)ピクチャは、Ｉピクチャであり、復号及び表示順でＩＲＡＰピクチャの後に続くピクチャは、復号順においてＩＲＡＰピクチャに先行するいずれかのピクチャをも参照しないことを保証する。

【0005】

図１は、関連技術におけるイントラランダムアクセスポイント(ＩＲＡＰ)の模式図である。図１に示すように、イントラランダムアクセスポイント(ＩＲＡＰ)ピクチャは、ビデオビットストリームに対してアクセスポイントを提供することができ、復号及び表示順でＩＲＡＰピクチャに後続する全てのピクチャはいずれも正確に復号されることができるからである。

【0006】

しかしながら、ＩＲＡＰピクチャが提供するビデオビットストリームランダムアクセス機能は、代価を必要となり、インター符号化Ｐピクチャ又は双方向インター符号化Ｂピクチャと比べて、イントラ符号化Ｉピクチャの符号化コスト及び占用されるビット数が通常かなり高いからである。

【0007】

デジタルオーディオ/ビデオ符号化/復号標準技術(Audio Video coding Standard Work group of China、ＡＶＳと略称される)ワークグループは、新世代ビデオ符号化標準(「ＡＶＳ３ビデオ符号化」と略称される)にライブラリピクチャ(library picture)及び参照ライブラリピクチャ(「ＲＬピクチャ」と略称される)に基づく大きなスパンビデオ符号化技術を導入した。

【0008】

ライブラリピクチャは、ＡＶＳ３ビデオ符号化においてランダムアクセスポイントを跨る時間相関性を有する長期参照ピクチャであり、ＲＬピクチャは、ＡＶＳ３ビデオ符号化においてライブラリピクチャのみを参照ピクチャとして用いてインター予測復号を行うＰピクチャ又はＢピクチャである。関連実験によって、ライブラリピクチャを参照ピクチャとしてインター予測又は双方向インター予測を行うことにより、ビデオ監視、ビデオ会議などの多くの応用シーンにおいてビデオ符号化効率を大幅に向上可能であることを証明した。

【0009】

関連技術においてライブラリピクチャを参照ピクチャとして用いるビデオ符号化方式では参照ピクチャサンプルを含むビデオビットストリームに対して効率的なアクセス及び処理を行うことができず、処理が複雑であるという問題に対して、解決策がまだ提案されていない。

【発明の概要】

【発明が解決しようとする課題】

【0010】

本開示の実施例は、関連技術においてライブラリピクチャを参照ピクチャとして用いるビデオ符号化方式では参照ライブラリピクチャサンプルを含むビデオビットストリームに対して効率的なアクセス及び処理を行うことができず、処理が複雑であるという問題を少なくとも解決するためのビデオビットストリームのカプセル化、復号、アクセス方法及び装置を提供する。

【課題を解決するための手段】

【0011】

本開示の１つの実施例によれば、
第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報をカプセル化するステップと、
前記メディアコンテナファイルに前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報をカプセル化するステップであって、前記ライブラリピクチャサンプルは、前記ＬＲＡＰサンプルの参照ピクチャサンプルであるステップと、を含むビデオビットストリームカプセル化方法を提供する。

【0012】

本開示の別の実施例によれば、
第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいて、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルを認識するステップと、
前記メディアコンテナファイルにおいて前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識するステップと、
前記ライブラリピクチャサンプルを復号するステップと、
前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号するステップと、を含むビデオビットストリーム復号方法を提供する。

【0013】

本開示の別の実施例によれば、
第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得し、前記ＬＲＡＰピクチャのライブラリピクチャを取得するステップと、
前記ライブラリピクチャを参照ピクチャとして用いて前記ＬＲＡＰピクチャを復号するステップと、
前記復号されたＬＲＡＰピクチャにおいて前記第１のビデオビットストリームのランダムアクセスを実行するステップと、を含むビデオビットストリームアクセス方法を提供する。

【0014】

本開示の別の実施例によれば、
第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報をカプセル化するように構成される第１のカプセル化モジュールと、
前記メディアコンテナファイルに前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報をカプセル化するように構成される第２のカプセル化モジュールであって、前記ライブラリピクチャサンプルは、前記ＬＲＡＰサンプルの参照ピクチャサンプルである第２のカプセル化モジュールと、を含むビデオビットストリームカプセル化装置を提供する。

【0015】

本開示の別の実施例によれば、
第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいて、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルを認識するように構成される第１の認識モジュールと、
前記メディアコンテナファイルにおいて前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識するように構成される第２の認識モジュールと、
前記ライブラリピクチャサンプルを復号するように構成される第１の復号モジュールと、
前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号するように構成される第２の復号モジュールと、を含むビデオビットストリーム復号装置を提供する。

【0016】

本開示の別の実施例によれば、
第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得し、前記ＬＲＡＰピクチャのライブラリピクチャを取得するように構成される取得モジュールと、
前記ライブラリピクチャを参照ピクチャとして用いて前記ＬＲＡＰピクチャを復号するように構成される第３の復号モジュールと、
前記復号されたＬＲＡＰピクチャにおいて前記第１のビデオビットストリームのランダムアクセスを実行するように構成される実行モジュールと、を含むビデオビットストリームアクセス装置を提供する。

【0017】

本開示のまた別の実施例によれば、メモリとプロセッサとを含み、前記メモリには、コンピュータプログラムが記憶されており、前記プロセッサは、前記コンピュータプログラムを実行することによって上記のいずれか１つの方法実施例におけるステップを実行するように構成される電子装置をさらに提供する。

【発明の効果】

【0018】

本開示の実施例によれば、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報をカプセル化し、前記メディアコンテナファイルに前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報をカプセル化し、前記ライブラリピクチャサンプルは、前記ＬＲＡＰサンプルの参照ピクチャサンプルであることにより、関連技術においてライブラリピクチャを参照ピクチャとして用いるビデオ符号化方式では参照ピクチャサンプルを含むビデオビットストリームに対して効率的なアクセス及び処理を行うことができず、処理が複雑であるという問題を解決することができる。

【0019】

ＬＲＡＰサンプルの情報を直接メディアコンテナファイルにカプセル化することにより、ランダムアクセスポイントとすることが可能なＬＲＡＰサンプル及びそれが参照するライブラリピクチャサンプルを容易に認識することができ、圧縮効率を満足しつつ伝送帯域幅を無駄にせず、処理の複雑さを低下させることができる。

【図面の簡単な説明】

【0020】

【図1】関連技術におけるイントラランダムアクセスポイント(ＩＲＡＰ)の模式図である。

【図2】本開示の実施例に係るビデオビットストリームのカプセル化方法における移動端末のハードウェア構造を示すブロック図である。

【図3】本開示の実施例に係るビデオビットストリームのカプセル化方法のフローチャートである。

【図4】本開示の実施例に係るライブラリランダムアクセスポイント(ＬＲＡＰ)の模式図である。

【図5】本開示の選択的な実施例に係るメディアコンテナファイルカプセル化方法のフローチャートである。

【図6】本開示の実施例に係るＬＲＡＰサンプルグループ及びＬＲＡＰサンプルグループ記述の模式図である。

【図7】本開示の実施例に係るビデオビットストリーム復号方法のフローチャートである。

【図8】本開示の選択的な実施例に係るビデオビットストリーム復号方法のフローチャートである。

【図9】本開示の実施例に係るビデオビットストリームアクセス方法のフローチャートである。

【図10】本開示の実施例に係るＬＲＡＰインデックスセグメントの模式図である。

【図11】本開示の実施例に係るＬＲＡＰピクチャに基づくランダムアクセスのフローチャート１である。

【図12】本開示の実施例に係るＬＲＡＰピクチャに基づくランダムアクセスのフローチャート２である。

【図13】本開示の実施例に係るビデオビットストリームカプセル化装置のブロック図である。

【図14】本開示の実施例に係るビデオビットストリーム復号装置のブロック図である。

【図15】本開示の実施例に係るビデオビットストリームアクセス装置のブロック図である。

【発明を実施するための形態】

【0021】

以下、本開示の実施例について、実施例と共に図面を参照しながら詳細に説明する。

【0022】

なお、本開示の明細書、特許請求の範囲及び上記図面における「第１」、「第２」等の用語は、類似する対象を区別するためのものであり、特定の順序又は前後順序を説明するためのものではない。

【0023】

本開示の実施例が提供する方法実施例は、移動端末、コンピュータ端末又は類似する演算装置で実行することができる。移動端末で実行することを例として、図２は、本開示の実施例に係るビデオビットストリームカプセル化方法の移動端末のハードウェア構造のブロック図であり、図２に示すように、移動端末は、１つ又は複数(図２では１つのみが示されている)のプロセッサ１０２(プロセッサ１０２は、マイクロプロセッサ(ＭＣＵ)又はプログラマブルロジックデバイス(ＦＰＧＡ)などの処理装置を含むがこれらに限定されない)と、データを記憶するメモリ１０４とを含むことができ、そのうち、上記移動端末は、通信機能用の伝送装置１０６及び入出力装置１０８をさらに含んでもよい。

【0024】

当業者であれば理解できるように、図２に示す構造は、単に例示的なものであり、上記移動端末の構造を限定するものではない。例えば、移動端末は、図２に示すものよりも多く又は少ない構成要素をさらに含んだり、図２に示すものと異なる構成を有したりすることができる。

【0025】

メモリ１０４は、コンピュータプログラム、例えば本開示の実施例におけるビデオビットストリームカプセル化方法に対応するコンピュータプログラムのようなアプリケーションソフトウェアのソフトウェアプログラム及びモジュールを記憶するために用いられ、プロセッサ１０２は、メモリ１０４に記憶されているコンピュータプログラムを実行することによって様々な機能応用及びサービスチェーンアドレスプールスライシング処理(service chain address pool slice processing)を実行し、すなわち、上記の方法を実現する。メモリ１０４は、高速ランダムアクセスメモリを含んでもよく、不揮発性メモリ、例えば１つ又は複数の磁気記憶装置、フラッシュメモリ又は他の不揮発性固体メモリを含んでもよい。

【0026】

幾つかの実施例では、メモリ１０４は、プロセッサ１０２に対して遠隔的に設けられるメモリをさらに含んでもよく、これらの遠隔メモリは、ネットワークを介して移動端末に接続することができる。上記ネットワークの具体例は、インターネット、イントラネット、ローカルエリアネットワーク、移動体通信網及びそれらの組み合わせを含むがこれらに限定されない。

【0027】

伝送装置１０６は、１つのネットワークを介してデータを送受信するために用いられる。上記のネットワークの具体例は、移動端末の通信サプライヤーが提供する無線ネットワークを含んでもよい。１つの具体例では、伝送装置１０６は、基地局を介して他のネットワーク装置に接続されてインターネットと通信可能なネットワークアダプタ(Network Interface Controller、ＮＩＣと略称される)を含んでもよい。１つの具体例では、伝送装置１０６は、インターネットと無線で通信を行う無線周波数(Radio Frequency、ＲＦと略称される)モジュールであってもよい。

【0028】

本実施例では、上記移動端末又はネットワークアーキテクチャで実行されるビデオビットストリームカプセル化方法を提供する。図３は、本開示の実施例に係るビデオビットストリームカプセル化方法のフローチャートであり、図３に示すように、当該フローは、以下のステップＳ３０２、Ｓ３０４を含む。

【0029】

ステップＳ３０２において、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報をカプセル化する。

【0030】

ステップＳ３０４において、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を前記メディアコンテナファイルにカプセル化し、前記ライブラリピクチャサンプルは、前記ＬＲＡＰサンプルの参照ピクチャサンプルである。

【0031】

上記のステップＳ３０２～Ｓ３０４により、関連技術においてライブラリピクチャを参照ピクチャとして用いるビデオ符号化方式では参照ピクチャサンプルを含むビデオビットストリームに対して効率的なアクセス及び処理を行うことができず、処理が複雑であるという問題を解決することができ、ＬＲＡＰサンプルの情報をメディアコンテナファイルに直接カプセル化することにより、ランダムアクセスポイントとすることが可能なＬＲＡＰサンプル及びそれが参照するライブラリピクチャサンプルを認識しやすくなり、圧縮効率を満足しつつ伝送帯域幅を無駄にせず、処理の複雑さを低減させる。

【0032】

１つの実施例では、前記メディアコンテナファイルは、前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を含むか、又は、前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含む同期サンプルデータボックスを含むか、又は、前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含むストリームアクセスポイント(Stream Access Point、ＳＡＰと略称される)サンプルグループを含むか、又は、第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を示すセグメントインデックスデータボックスを含む。

【0033】

別の実施形態では、前記メディアコンテナファイルは、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を含むか、又は、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含む同期サンプルデータボックスを含むか、又は、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むＳＡＰサンプルグループを含むか、又は、前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を示すセグメントインデックスデータボックスを含む。

【0034】

１つの選択的な実施例では、メディアコンテナファイルに、前記ＬＲＡＰサンプルのライブラリピクチャサンプルを含む第２のビデオビットストリームをカプセル化してもよい。

【0035】

１つの実施例では、前記ＬＲＡＰサンプルの情報は、ＬＲＡＰサンプルのインデックス、ＬＲＡＰサンプルのストリームアクセスポイントタイプ、ＬＲＡＰサンプルのライブラリピクチャサンプルの数、ＬＲＡＰサンプルのライブラリピクチャサンプルの番号のうちの少なくとも１つを含んでもよい。

【0036】

１つの実施例では、前記ライブラリピクチャサンプルの情報は、ライブラリピクチャサンプルに対応するトラック識別子、ライブラリピクチャサンプルの番号のうちの少なくとも１つを含んでもよい。

【0037】

本実施例におけるビデオビットストリームは、符号化ピクチャからなるバイナリデータストリームである。ビデオシーケンスは、ビデオビットストリームの最上位層シンタックス構造である。ビデオシーケンスは、１つのシーケンスヘッダから開始し、シーケンス終了コード又はビデオ編集コードは、１つのビデオシーケンスの終了を表す。シーケンスヘッダは、ビットストリームにおいて繰り返し出現することができ、繰り返しシーケンスヘッダと呼ばれる。各シーケンスヘッダのそれぞれの後に１つ又は複数の符号化ピクチャが続き、各ピクチャのそれぞれの前にピクチャヘッダが存在すべきである。符号化ピクチャは、ビットストリームにおいてビットストリーム順序で並べられ、ビットストリーム順序は、復号順と同様であるべきである。復号順は、表示順と異なっていてもよい。

【0038】

シーケンスヘッダにおける「ライブラリビットストリームフラグ」(ｌｉｂｒａｒｙ_ｓｔｒｅａｍ_ｆｌａｇ)は、ビデオ符号化ビットストリームの基本ストリームタイプを示すためのものであり、値が「０」であることは、現在のビットストリームが主ビットストリームであることを示す。主ビットストリームは、当該ビットストリーム以外のビットストリームから提供されるライブラリピクチャを参照して復号可能なビットストリームである。値が「１」であることは、現在のビットストリームがライブラリビットストリームであることを示す。ライブラリビットストリームは、ライブラリピクチャのビットストリームのみを含む。そのうち、ライブラリピクチャは、表示出力に用いられず、他のビットストリームにおけるピクチャに参照されることができる。

【0039】

シーケンスヘッダにおける「ライブラリピクチャ許可フラグ」(library_picture_enable_flag)は、主ビットストリームのビデオシーケンスにライブラリピクチャを参照ピクチャとして使用するインター予測ピクチャが存在しているか否かを示すものであり、値が「１」であることは、ビデオシーケンスにライブラリピクチャを参照ピクチャとして使用するインター予測ピクチャが存在し得ることを示し、値が「０」であることは、ビデオシーケンスにライブラリピクチャを参照ピクチャとして使用するインター予測ピクチャが存在すべきではないことを示す。

【0040】

シーケンスヘッダ又はピクチャヘッダにおける「ライブラリピクチャインデックスフラグ」(library_index_flag[list][rpls][i])及び「参照されるライブラリピクチャインデックス」(referenced_library_picture_index[list][rpls][i])は、それぞれ参照ピクチャキューにおける参照ピクチャがライブラリピクチャであるか否か、及び参照ピクチャとしてのライブラリピクチャインデックスを示すためのものである。

【0041】

ビデオシーケンスにライブラリピクチャを参照ピクチャとして使用するインター予測ピクチャ(Ｐピクチャ又はＢピクチャ)が存在し、かつ当該インター予測ピクチャの参照ピクチャキューにライブラリピクチャのみがある場合、当該インター予測ピクチャは、ライブラリピクチャのみを参照ピクチャとして使用してインター予測復号を行う参照ライブラリ(Reference Library、ＲＬと略称される)ピクチャである。

【0042】

インター予測ピクチャヘッダにおける「ランダムアクセス正確復号フラグ」(random_access_decodable_flag)は、現在のピクチャが、復号順が現在のピクチャに対応するシーケンスヘッダに後続するとともにランダムアクセス正確復号フラグの値が「１」であるピクチャのみを参照するか否かを示すためのものである。そのうち、対応するシーケンスヘッダは、復号順が現在のピクチャに先行する直近のシーケンスヘッダである。現在のピクチャのランダムアクセス正確復号フラグの値が０であると、それに対応するシーケンスヘッダにランダムアクセスが発生した場合、現在のピクチャを正確に復号できない可能性がある。

【0043】

ライブラリランダムアクセスポイント(ＬＲＡＰ)は、以下の特性を満足する参照ライブラリ(ＲＬ)ピクチャがライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャとして定義される。すなわち、参照ピクチャとしての全てのライブラリピクチャが得られると、復号順及び表示順で当該ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに後続する全てのピクチャを正確に復号することができる。

【0044】

ＬＲＡＰピクチャは、ライブラリピクチャのみを参照する時間予測ピクチャである。ＬＲＡＰピクチャは、インター予測Ｐピクチャとして符号化されてもよく、双方向インター予測Ｂピクチャとして符号化されてもよい。しかしながら、ＬＲＡＰピクチャは、従来の時間予測Ｐピクチャ又はＢピクチャと異なり、ビデオビットストリームにおけるランダムアクセスポイント(ＲＡＰ)を構成することができる。

【0045】

ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャは、復号順及び表示順でその後に続く全てのピクチャが、復号順又は表示順がＬＲＡＰピクチャに先行するいずれかのピクチャをも参照しないことを保証すべきである。

【0046】

ＬＲＡＰピクチャにおいてビデオビットストリームランダムアクセス動作を実行する場合、まず、それと関連付けられるライブラリピクチャを復号し、表示出力はしないが、参照に使用する必要がある。ランダムアクセス動作を実行する場合、ＬＲＡＰピクチャ及びそれと関連付けられるライブラリピクチャにアクセスすることにより、ＬＲＡＰピクチャ及び表示順でＬＲＡＰピクチャの後に続くピクチャを正確に復号することを保証することができる。

【0047】

ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャは、ライブラリランダムアクセスポイントタイプ(ＬＲＡＰ_Ｔｙｐｅ)を有し、かつ、ＬＲＡＰ_ｔｙｐｅが１つの非負整数であり、ＬＲＡＰピクチャがライブラリピクチャに依存しない場合にＬＲＡＰピクチャに対応するストリームアクセスポイントタイプ(ＳＡＰ_ｔｙｐｅ)を示すためのものであると定義される。ＬＲＡＰ_ｔｙｐｅが１～３の範囲内の値を取る場合、他のタイプ値は、保留される。

【0048】

そのうち、ストリームアクセスポイント(ＳＡＰ)のタイプは、復号順でＬＲＡＰピクチャに後続するとともに正確に復号可能なピクチャと、それらの表示順での配列関係に依存する。ストリームアクセスポイントタイプＳＡＰ_ｔｙｐｅの説明は、以下の通りである。

【0049】

タイプ１:「クローズドＧｏＰランダムアクセスポイント」に対応し、復号順でライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに後続する全てのピクチャを正確に復号できることを示す。

【0050】

タイプ２:「クローズドＧｏＰランダムアクセスポイント」であって、復号順でライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに後続する全てのピクチャを正確に復号できることを示す。同時に、ＬＲＡＰピクチャからのビデオシーケンス復号順での最初のピクチャは、表示順での最初のピクチャではない。

【0051】

タイプ３:「オープンＧｏＰランダムアクセスポイント」であって、復号順でライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに後続するが表示順でＬＲＡＰピクチャに先行する幾つかのピクチャを正確に復号できないことを示す。

【0052】

１つの例示的な実施例では、ビデオビットストリームに定義された基本ストリームは、
それ以外のビットストリームから提供されるライブラリピクチャを参照して復号出力することができるビデオビットストリームである主ビットストリームと、
ライブラリピクチャのビデオビットのみを含むライブラリビットストリームであって、ライブラリピクチャは、表示出力に用いられずに他のビットストリームにおけるピクチャに参照され得るライブラリビットストリームと、を含む。

【0053】

図４は、本開示の実施例に係るライブラリランダムアクセスポイント(ＬＲＡＰ)の模式図であり、図４に示すように、１つのビデオシーケンスは、シーケンスヘッダから開始し、その後に１つ又は複数の連続する符号化ピクチャが続いている。そのうち、ライブラリビットストリームのビデオシーケンスには、ライブラリピクチャしかが含まれない。主ビットストリームのビデオシーケンスは、Ｐピクチャ、Ｂピクチャ及びＲＬピクチャを含んでもよい。Ｐピクチャは、ライブラリピクチャと、表示順が現在のピクチャの前に位置する(過去の)複数の参照ピクチャとを有してもよい。

【0054】

Ｂピクチャは、ライブラリピクチャと、表示順が現在のピクチャに先行する(過去の)複数の参照ピクチャと、表示順が現在のピクチャに後続する(将来の)複数の参照ピクチャとを有してもよい。ＲＬピクチャは、ライブラリピクチャのみを参照ピクチャとすることができる。

【0055】

図４に示すように、主ビットストリームのｉ番目のビデオシーケンスのシーケンスヘッダの後の第１の復号ピクチャは、ＲＬピクチャであり、ＲＬ_[i,1]と標記され、ＲＬ_[i,1]は、ライブラリピクチャのみを参照ピクチャとして使用する。復号順がＲＬ_[i,1]ピクチャに後続する全てのピクチャの参照ピクチャの範囲を、ＲＬ_[i,1]ピクチャ、表示順がＲＬ_[i,1]ピクチャに後続するピクチャ、及び当該ＲＬ_[i,1]ピクチャが参照するライブラリピクチャに限定し、かつ全ての参照するライブラリピクチャがいずれも得られると、復号順でＲＬ_[i,1]ピクチャに後続する全てのピクチャはいずれも正確に復号することができる。そのため、当該ＲＬ_[i,1]ピクチャは、ビデオビットストリームにおける「ＬＲＡＰ_ｔｙｐｅ=１」のライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャである。

【0056】

図４に示すように、主ビットストリームのｉ番目のビデオシーケンスに別のＲＬピクチャが存在し、ＲＬ_[i,2]と標記され、ＲＬ_[i,2]は、ライブラリピクチャのみを参照ピクチャとして使用する。復号順がＲＬ_[i,2]ピクチャに後続する全てのピクチャの参照ピクチャの範囲を、ＲＬ_[i,2]ピクチャ、表示順がＲＬ_[i,2]ピクチャに後続するピクチャ、及び当該ＲＬ_[i,2]ピクチャが参照するライブラリピクチャに限定し、かつ全ての参照するライブラリピクチャがいずれも得られると、復号順で当該ＲＬ[ｉ，１]ピクチャに後続する全てのピクチャはいずれも正確に復号することができる。

【0057】

同時に、ＲＬ_[i,2]ピクチャがビデオシーケンスにおける表示順でのＲＬ_[i,2]ピクチャからの最初のピクチャでない(例えば、図６におけるピクチャＰ_[i,2]の表示順がＲＬ_[i,2]ピクチャに先行する)と、ＲＬ_[i,1]ピクチャは、ビデオビットストリームにおける「ＬＲＡＰ_ｔｙｐｅ=２」のライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャである。

【0058】

図４に示すように、主ビットストリームのｉ番目のビデオシーケンスに別のＲＬピクチャが存在し、ＲＬ_[i,3]と標記され、ＲＬ_[i,3]は、ライブラリピクチャのみを参照ピクチャとして使用する。例えば図４におけるピクチャＰ_[i,3]のように、復号順がＲＬ_[i,3]ピクチャに後続するが表示順がＲＬ_[i,3]ピクチャに先行するピクチャが幾つか存在し、ピクチャＰ_[i,3]が復号順又は表示順がＲＬ_[i,3]ピクチャに先行するピクチャを参照すると、ＲＬ_[i,3]ピクチャがビデオビットストリームランダムアクセスを実行する時、ピクチャＰ_[i,3]を正確に復号することができない。そのため、ＲＬ_[i,3]ピクチャは、ビデオビットストリームにおける「ＬＲＡＰ_ｔｙｐｅ=３」のライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャである。

【0059】

図４に示すように、主ビットストリームのｉ番目のビデオシーケンスに別のＲＬピクチャが存在し、ＲＬ_[i,4]と標記され、ＲＬ_[i,4]は、ライブラリピクチャのみを参照ピクチャとして使用する。例えば、図６におけるピクチャＰ_[i,4]のように、復号順及び表示順が共にＲＬ_[i,4]ピクチャに後続するピクチャが幾つか存在し、ピクチャＰ_[i,4]が復号順又は表示順がＲＬ_[i,4]ピクチャに先行するピクチャを参照すると、ＲＬ_[i,4]ピクチャからピクチャＰ_[i,4]を正確に復号することができず、ＲＬ_[i,4]ピクチャにおいてビデオビットストリームのランダムアクセスを行うことができない。そのため、ＲＬ_[i,4]ピクチャは、ビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャではない。

【0060】

国際標準化機構(International Standard Organization、ＩＳＯと略称される)基本メディアファイルフォーマット(ＩＳＯ Base Media File Format、ＩＳＯＢＭＦＦと略称される)
ＩＳＯ基本メディアファイルフォーマットは、時間ベースのメディアコンテナファイル(例えば、ビデオやオーディオ)の一般的な構造を定義し、ＭＰＥＧ－４のパート１４のコンテナフォーマット(ＭＰ４)と３ＧＰＰファイルフォーマット(３ＧＰ)などの他のメディアファイルフォーマットの基礎とすることができる。ＩＳＯ基本メディアファイルフォーマットは、メディアのローカル編集と再生、及びリアルタイムトランスポートプロトコル(Real-time Transport Protocol、ＲＴＰと略称される)とハイパーテキスト・トランスファー・プロトコル(Hyper Text Transfer Protocol、ＨＴＴＰと略称)に基づく動的適応ストリーム伝送を含む各種のストリーム伝送メカニズムによるネットワーク伝送に対応可能である。

【0061】

本実施例は、ビデオビットストリームデータのカプセル化及び処理に使用し、ビデオビットストリームをＩＳＯＢＭＦＦコンテナファイルにカプセル化させることができる。ＩＳＯ基本メディアファイルフォーマットは、若干のデータボックス(Ｂｏｘ)からなり、各データボックスはいずれもタイプ及び長さを有し、１つのデータオブジェクトと見なすことができる。

【0062】

１つのデータボックスは、別のデータボックスを含んでもよく、コンテナデータボックスと呼ばれる。ＩＳＯ基本メディアファイルには、１つのみのファイルタイプ「ｆｔｙｐ」のデータボックスがあり、ファイルフォーマットのフラグとして、ＩＳＯ基本メディアファイルには、１つのみのムービー「ｍｏｏｖ」データボックスがあり、メディアメタデータ情報を含む。ムービーデータボックスは、通常、１つ又は複数のトラックを含み、各トラックは、トラック「ｔｒａｋ」データボックスに貯留される。

【0063】

トラックは、メディアトラックやメタデータトラックなどの複数種類のタイプがある。ＩＳＯ基本メディアファイルのメディアデータは、メディアデータ「ｍｄａｔ」データボックスに含まれ、メディアデータの構造は、メタデータによって記述される。

【0064】

１つの例示的な実施例では、メディアコンテナファイルがビデオビットストリームをカプセル化するトラックタイプは、
そのサンプル及び/又はサンプルエントリにビデオビットストリーム符号化ピクチャにおける非ライブラリピクチャをカプセル化することによりビデオビットストリームにおける主ビットストリームを表すとともに、ライブラリビットストリームトラックを参照し得る主ビットストリームトラックと、
そのサンプル及び/又はサンプルエントリにビデオビットストリーム符号化ピクチャにおけるライブラリピクチャをカプセル化することによりビデオビットストリームにおけるライブラリビットストリームを表すとともに、主ビットストリームトラックが「ａ３ｌｒ」トラックを介して参照するライブラリビットストリームトラックとを含む。

【0065】

「ａ３ｌｒ」タイプのトラック参照は、主ビットストリームトラックに含まれてもよい。存在する場合、このトラック参照は、主ビットストリームトラックからＡＶＳ３ライブラリビットストリームトラックを参照する。

【0066】

メディアコンテナファイルの構文構造において、サンプルグループは、特定のグループ化基準に従ってメディアトラックにおけるサンプルをグループ化する。ＩＳＯ基本メディアファイルフォーマットにおけるサンプルグループデータボックス(Sample To Group Box)は、サンプルが属するサンプルグループを指示し、サンプルグループ記述データボックス(Sample Group Description Box)は、当該サンプルグループの関連記述を提供する。

【0067】

図５は、本開示の選択的な実施例に係るメディアコンテナファイルカプセル化方法のフローチャートである。図５に示すように、当該フローは、以下のステップＳ５０２を含む。

【0068】

ステップＳ５０２において、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報と、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報とを含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述をカプセル化する。

【0069】

上記のステップＳ５０２により、関連技術において参照ライブラリ(ＲＬ)ピクチャ又はサンプルを含むビットストリーム又はメディアコンテナファイルに対して効率的なアクセス及び処理を行うことができず、かつ不要な処理複雑さをもたらすという問題を解決することができる。

【0070】

１つの実施例では、上記のステップＳ５０２は、具体的には、前記メディアコンテナファイルにライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルグループを含ませるステップであって、前記サンプルグループは、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報を含むステップを含んでもよい。

【0071】

ライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルグループ
ライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルグループは、ビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプル、及び参照ピクチャサンプルとしてのライブラリピクチャサンプルの情報を示す。

【0072】

ライブラリランダムアクセスポイントサンプルグループのメンバー(ＬＲＡＰサンプルと呼ばれる)は、以下の条件を満たすべきである。

【0073】

ＬＲＡＰサンプルは、ライブラリピクチャサンプルを参照ピクチャサンプルとすることしかできなく、
参照となるライブラリピクチャサンプルを復号した後、ＬＲＡＰサンプルから復号を開始することにより、ＬＲＡＰサンプル及び表示順が当該ＬＲＡＰサンプルに後続する全てのサンプルを正確に復号することができる。

【0074】

ＬＲＡＰサンプルは、それが参照するライブラリピクチャサンプルと組み合わせて使用することしかできず、復号可能なサンプルシーケンスを作成するために、ライブラリピクチャサンプルとＬＲＡＰサンプル及び表示順でＬＲＡＰサンプルに後続するサンプルとを直列に接続する必要がある。

【0075】

構文:
class VisualLRAPEntry extend VisualSampleGroupEntry (‘lrap’)
{
unsigned int(3) LRAP_type;
unsigned int(3) entry_count;
unsigned int(2) reserved=0;
int i;
for (i=0;i<entry_count;i++) {
unsigned int(9) library_sample_number;
unsigned int(7) reserved=0;
}
}

【0076】

ここで、ＬＲＡＰ_ｔｙｐｅは、１つの非負整数であり、ＬＲＡＰサンプルがライブラリピクチャサンプルに依存しない場合にＬＲＡＰサンプルに対応すべきストリームアクセスポイントタイプ(ＳＡＰ_ｔｙｐｅ)を示すものである。ＬＲＡＰ_ｔｙｐｅが１～３の範囲内の値を取る場合、他のタイプ値は、保留される。

【0077】

ｅｎｔｒｙ_ｃｏｕｎｔは、１つの非負整数であり、グループにおいてＬＲＡＰサンプルが参照するライブラリピクチャサンプルの数を示すものである。ｅｎｔｒｙ_ｃｏｕｎｔの値が「００１」であることは、グループにおいてＬＲＡＰサンプルが参照するライブラリピクチャサンプルの数が１であることを示し、値「０００」及び「０１０」～「１１１」は保留される。ｅｎｔｒｙ_ｃｏｕｎｔの値が「０００」であると、以下の表は、空となり、この場合、サンプルグループは、ライブラリピクチャサンプルの情報を提供しない。

【0078】

ｌｉｂｒａｒｙ_ｓａｍｐｌｅ_ｎｕｍｂｅｒは、１つの非負整数であり、グループにおいてＬＲＡＰサンプルが参照するライブラリピクチャサンプルのサンプル番号を提供するものである。

【0079】

図６は、本開示の実施例に係るＬＲＡＰサンプルグループ及びＬＲＡＰサンプルグループ記述の模式図である。本実施例は、図６に示すように、ビデオビットストリームのライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルに対するアクセス及び処理を簡略化するために、ビデオビットストリームをカプセル化するメディアコンテナファイルに、グループタイプが「ｌｒａｐ」であるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルグループ及びＬＲＡＰサンプルグループ記述を定義する。

【0080】

ＩＳＯ基本メディアファイルフォーマットにおけるサンプルテーブルデータボックス(Sample Table Box)又は各ムービーフラグメントデータボックス(Movie Fragment Box)のトラックフラグメントデータボックス(Track Fragment Box)には、ＬＲＡＰサンプルグループ及びＬＲＡＰサンプルグループ記述が含まれる。そのうち、ＬＲＡＰサンプルグループデータボックスは、ビデオビットストリームにおける各ＬＲＡＰサンプルの測位情報(例えば、サンプルインデックス)、及び各ＬＲＡＰサンプルが属するＬＲＡＰサンプルグループエントリを提供する。

【0081】

ＬＲＡＰサンプルグループ記述データボックスは、同一のＬＲＡＰサンプルグループエントリにおけるＬＲＡＰサンプルの記述情報を提供し、少なくともＬＲＡＰサンプルのストリームアクセスポイントタイプ、ＬＲＡＰサンプルのライブラリピクチャサンプルの数、及びＬＲＡＰサンプルのライブラリピクチャサンプルの番号のうちの１つを含む。

【0082】

ＩＳＯ基本メディアファイルフォーマットにおける同期サンプルデータボックス「ｓｔｓｓ」は、ビデオビットストリームにおける同期サンプルのコンパクトマークを提供する。

【0083】

構文:
aligned(8) class SyncSampleBox
extends FullBox(‘stss’,version=0,0) {
unsigned int(32) entry_count;
int i;
for (i=0;i<entry_count;i++){
unsigned int(32) sample_number;
}
}

【0084】

１つの実施例では、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報、及び前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含む同期サンプルデータボックスをカプセル化する。

【0085】

上記のステップにより、関連技術において参照ライブラリ(ＲＬ)ピクチャ又はサンプルを含むビットストリーム又はメディアコンテナファイルに対して効率的なアクセス及び処理を行うことができず、かつ不要な処理複雑さをもたらすという問題を解決することができる。

【0086】

ＩＳＯ基本メディアファイルフォーマットにおけるストリームアクセスポイント(ＳＡＰ)は、メディアストリームのコンテナへのランダムアクセスを許可し、ＳＡＰサンプルグループは、サンプルを示されるＳＡＰタイプと標記する。

【0087】

構文:
aligned(8) class SyncSampleBox class SAPEntry() extends
SampleGroupDescriptionEntry(‘sap’)
{
unsigned int(1) dependent_flag;
unsigned int(3) reserved;
unsigned int(4) SAP_type;
}

【0088】

１つの実施例では、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに、前記ＳＡＰサンプルグループは、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報と、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報とを含むストリームアクセスポイント(ＳＡＰ)サンプルグループをカプセル化する。

【0089】

【0090】

図７は、本開示の実施例に係るビデオビットストリーム復号方法のフローチャートである。図７に示すように、当該プロセスは、以下のステップＳ７０２、Ｓ７０４、Ｓ７０６、Ｓ７０８を含む。

【0091】

ステップＳ７０２において、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいて、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルを認識する。

【0092】

本実施例では、上記のステップＳ７０２は、具体的には、前記メディアコンテナファイルにおけるＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を解析するステップを含んでもよく、前記ＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述が前記ＬＲＡＰサンプルの情報を含むため、ＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述に基づいて当該第１のビデオビットストリームにおけるＬＲＡＰサンプルを得ることができ、又は、前記メディアコンテナファイルにおける同期サンプルデータボックスを解析するステップを含んでもよく、前記同期サンプルデータボックスが前記ＬＲＡＰサンプルの情報を含むため、同期サンプルデータボックスに基づいて当該第１のビデオビットストリームにおけるＬＲＡＰサンプルを得ることができ、又は、前記メディアコンテナファイルにおけるストリームアクセスポイント(ＳＡＰ)サンプルグループを解析するステップを含んでもよく、前記ＳＡＰサンプルグループが前記ＬＲＡＰサンプルの情報を含むため、ストリームアクセスポイント(ＳＡＰ)サンプルグループに基づいて当該第１のビデオビットストリームにおけるＬＲＡＰサンプルを得ることができ、又は、前記メディアコンテナファイルにおけるセグメントインデックスデータボックスを解析するステップを含んでもよく、前記セグメントインデックスデータボックスが前記ＬＲＡＰサンプルの情報を示すため、セグメントインデックスデータボックスに基づいて当該第１のビデオビットストリームにおけるＬＲＡＰサンプルを得ることができる。

【0093】

ステップＳ７０４において、前記メディアコンテナファイルにおいて前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識する。

【0094】

本実施例では、上記のステップＳ７０４は、具体的には、前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を解析するステップ、又は、前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含む同期サンプルデータボックスを解析するステップ、又は、前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを解析するステップ、又は、前記メディアコンテナファイルにおける、前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を示すセグメントインデックスデータボックスを解析するステップを含んでもよく、前記ライブラリピクチャサンプルの情報に基づいて前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識することができる。

【0095】

ステップＳ７０６において、前記ライブラリピクチャサンプルを復号する。

【0096】

本実施例では、上記のステップＳ７０６は、具体的には、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報に基づいて、前記メディアコンテナファイルにカプセル化された第２のビデオビットストリームに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルを復号するステップを含んでもよい。

【0097】

ステップＳ７０８において、前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号する。

【0098】

上記のステップＳ７０２～Ｓ７０８により、関連技術においてライブラリピクチャを参照ピクチャとして用いるビデオ符号化方式では参照ライブラリピクチャサンプルを含むビデオビットストリームに対して効率的なアクセス及び処理を行うことができず、処理が複雑であり、ダウンロード量が大きくなければ復号を完成できないという問題を解決することができ、メディアコンテナファイルからランダムアクセスポイントとすることが可能なＬＲＡＰサンプル及びそれが参照するライブラリピクチャサンプルを直接認識することにより、ダウンロード量を低減した前提で復号を完成することができる。

【0099】

本開示の実施例では、前記ＬＲＡＰサンプルの情報は、ＬＲＡＰサンプルのインデックス、ＬＲＡＰサンプルのフローアクセスポイントタイプ、ＬＲＡＰサンプルのライブラリピクチャサンプルの数、ＬＲＡＰサンプルのライブラリピクチャサンプルの番号のうちの少なくとも１つを含んでもよい。

【0100】

本開示の実施例では、前記ライブラリピクチャサンプルの情報は、ライブラリピクチャサンプルに対応するトラック識別子(track identifier)、ライブラリピクチャサンプルの番号のうちの少なくとも１つを含んでもよい。

【0101】

図８は、本開示の選択的な実施例に係るビデオビットストリーム復号方法のフローチャートである。図８に示すように、当該プロセスは、以下のステップＳ８０２、Ｓ８０４、Ｓ８０６を含む。

【0102】

ステップＳ８０２において、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいてＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を解析することにより、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプル及び前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識する。

【0103】

ステップＳ８０４において、前記ライブラリピクチャサンプルを復号する。

【0104】

ステップＳ８０６において、前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号する。

【0105】

上記のステップＳ８０２～Ｓ８０６により、関連技術において参照ライブラリ(ＲＬ)ピクチャ又はサンプルを含むビットストリーム又はメディアコンテナファイルに対する効率的なアクセス及び処理を行うことができず、かつ不要な処理複雑さをもたらすという問題を解決することができる。

【0106】

１つの実施例では、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいて同期サンプルデータボックスを解析することにより、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプル及び前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識し、前記ライブラリピクチャサンプルを復号し、前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号することにより、関連技術において参照ライブラリ(ＲＬ)ピクチャ又はサンプルを含むビットストリーム又はメディアコンテナファイルに対して効率的なアクセス及び処理を行うことができず、不要な処理複雑さをもたらすという問題を解決することができる。

【0107】

１つの実施例では、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいてストリームアクセスポイント(ＳＡＰ)サンプルグループを解析することにより、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプル及び前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識し、前記ライブラリピクチャサンプルを復号し、前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号することにより、関連技術において参照ライブラリ(ＲＬ)ピクチャ又はサンプルを含むビットストリーム又はメディアコンテナファイルに対して効率的なアクセス及び処理を行うことができず、不要な処理複雑さをもたらすという問題を解決することができる。

【0108】

図９は、本開示の実施例に係るビデオビットストリームアクセス方法のフローチャートである。図９に示すように、当該フローは、以下のステップＳ９０２、Ｓ９０４、Ｓ９０６を含む。

【0109】

ステップＳ９０２において、第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得し、前記ＬＲＡＰピクチャのライブラリピクチャを取得する。

【0110】

１つの実施例では、上記のステップＳ９０２において第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得するステップは、第１のビデオビットストリームの符号化ビデオデータの、少なくとも１つのＬＲＡＰピクチャを含む第１のセグメントを受信するステップを含んでもよく、及び/又は、ステップＳ９０２において前記ＬＲＡＰピクチャのライブラリピクチャを取得するステップは、第２のビデオビットストリームの符号化ビデオデータの、ライブラリピクチャを含む第２のセグメントを受信するステップ、又は、前記第１のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャを含む第３のセグメントを受信するステップステップを含んでもよい。

【0111】

別の実施例では、上記のステップＳ９０２は、具体的には、前記第１のビデオビットストリームの符号化ビデオデータの第４のセグメントを受信するステップであって、前記第４のセグメントの第１のサブセグメントは、前記ライブラリピクチャを含み、前記第４のセグメントの第２のサブセグメントは、少なくとも１つのＬＲＡＰピクチャを含むステップを含んでもよく、前記第４のセグメントの第１のサブセグメントから前記ライブラリピクチャを取得することができ、前記第４のセグメントの第２のサブセグメントから前記ＬＲＡＰピクチャを取得することができる。

【0112】

また別の実施例では、上記のステップＳ９０２において、第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得する前記ステップは、具体的には、前記第１のビデオビットストリームの符号化ビデオデータの、前記インデックスセグメントは、ＬＲＡＰピクチャが前記第１のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップを含んでもよい。

【0113】

及び/又は、上記のステップＳ９０２において前記ＬＲＡＰピクチャのライブラリピクチャを取得する前記ステップは、具体的には、前記第１のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャが前記第１のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップ、又は、第２のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャが前記第２のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップを含んでもよい。

【0114】

ステップＳ９０４において、前記ライブラリピクチャを参照ピクチャとして用いて前記ＬＲＡＰピクチャを復号する。

【0115】

ステップＳ９０６において、前記復号されたＬＲＡＰピクチャにおいて前記第１のビデオビットストリームのランダムアクセスを実行する。

【0116】

上記のステップＳ９０２～Ｓ９０６により、関連技術においてライブラリピクチャを参照ピクチャとして用いるビデオ符号化方式では参照ピクチャサンプルを含むビデオビットストリームに対して効率的なアクセス及び処理を行うことができず、処理が複雑であるとともにアクセス頻度が低いという問題を解決することができ、メディアコンテナファイルからランダムアクセスポイントとすることが可能なＬＲＡＰピクチャ及びそれが参照するライブラリピクチャを直接認識することにおり、ダウンロード量を減少させた前提で復号を完了することができ、ダウンロード量を減少させることができ、圧縮効率を満足しつつ伝送帯域幅を無駄にせず、ビデオビットストリームのランダムアクセス頻度を増加させ、時間遅延を低減することができる。

【0117】

１つの選択的な実施例では、前記方法は、上記のステップＳ９０４の後に、前記第１のビデオビットストリームにおける復号順及び表示順で前記ＬＲＡＰピクチャに後続する少なくとも１つの非ランダムアクセスポイントピクチャを復号するステップをさらに含んでもよく、少なくとも１つの非ランダムアクセスポイントピクチャは、復号順又は表示順が前記ＬＲＡＰピクチャに先行するいずれのピクチャをも参照ピクチャとせず、ランダムアクセスの実現が容易となる。

【0118】

ＬＲＡＰセグメントインデックス(Segment Index)
メディアコンテナファイル構文構造では、セグメントインデックスは、セグメントにおける１つのメディアストリームのコンパクトインデックス情報を提供するためのものである。ＩＳＯ基本メディアファイルフォーマットにおけるセグメントインデックスデータボックス(Segment Index Box)は、１つのセグメント(segment)がどのように１つ又は複数のサブセグメント(subsegment)に分割されるかを記録している。サブセグメントは、サブセグメントのメディアレンダリング時間の間隔が当該サブセグメントのバイト範囲に対応すると定義される。セグメントインデックス情報は、インデックスされるメディアコンテンツと同じファイルにカプセル化されてもよいし、別個のファイルに格納されてもよい。

【0119】

定義:
ＬＲＡＰセグメントインデックスデータボックス(ＬＲＡＰ Segment Index Box)は、それが引用するサブセグメントにライブラリランダムアクセスポイント(ＬＲＡＰ)が存在することを指示し、かつ、サブセグメント内に引用されるメディアストリーム(トラックセグメント)がライブラリランダムアクセスポイント(ＬＲＡＰ)を含むと、サブセグメントがライブラリランダムアクセスポイント(ＬＲＡＰ)を含み、ライブラリランダムアクセスポイント(ＬＲＡＰ)から開始することを満足する。

【0120】

サブセグメントにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプル(ＬＲＡＰ_ｔｙｐｅタイプ１、２又はタイプ３)は、「ｌｒａｐ」グループタイプのサンプルグループのメンバーとして標記される。

【0121】

構文:
aligned(8) class LRAPSegmentIndexBox extends FullBox(‘lidx’,version,0) {
for(i=1;i<=reference_count;i++)
{
bit(1) reference_type;
unsigned int(31) referenced_size;
unsigned int(32) subsegment_duration;
bit(1) starts_with_LRAP;
unsigned int(3) LRAP_type;
unsigned int(28) reserved=0;
}
}

【0122】

ここで、ｓｔａｒｔｓ_ｗｉｔｈ_ＬＲＡＰは、参照されるサブセグメントがライブラリランダムアクセスポイント(ＬＲＡＰ)から開始するか否かを示す。ＬＲＡＰ_ｔｙｐｅは、サブセグメントにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)のＬＲＡＰ_ｔｙｐｅタイプを示す。

【0123】

ＬＲＡＰインデックスセグメント(ＩｎｄｅｘＳｅｇｍｅｎｔ)
動的適応ストリームメディア(Dynamic Adaptive Streaming over ＨＴＴＰ、ＤＡＳＨと略称される)技術は、オーディオ、ビデオ、テキストなどの異なるメディアフォーマットに対応可能であり、複数種類のビットレート、フレームレート、解像度の高品質ストリームメディアサービスを提供することができる。そのうち、メディアプレゼンテーション記述(Media Presentation Description、ＭＰＤと略称される)は、ＤＡＳＨクライアントがユーザにストリームメディアサービスを提供するために必要なメタデータを含み、かつ、異なる端末再生能力及びネットワーク帯域幅ニーズをカバーするために、期間(Period)、アダプテーションセット(Adaptation Set)、レプレゼンテーション(Representation)及びセグメント(Segment)を含む複数の階層に分けられている。

【0124】

セグメント(Segment)フォーマットは、メディアプレゼンテーション記述(ＭＰＤ)におけるＨＴＴＰ－ＵＲＬに関連付けられるリソースの構文及び語義を定義する。そのうち、インデックスセグメント(Index Segments)は、一連のＩＳＯ基本メディアファイルフォーマットデータボックスからなり、メディアセグメント(Media Segments)のインデックス情報を提供するためのものである。インデックスセグメントは、単一のメディアセグメントに関連付けられてもよいし、１つのレプレゼンテーション(Representation)における全てのメディアセグメントに関連付けられてもよい。

【0125】

図１０は、本開示の実施例に係るＬＲＡＰインデックスセグメントの模式図である。図１０に示すように、インデックスセグメントは、動的適応ストリームメディアにおける１つのレプレゼンテーション(Representation)の全てのメディアセグメントのインデックスを提供する。インデックスセグメントは、１つの「ｓｔｙｐ」タイプのデータボックスから開始し、レプレゼンテーション(Representation)における各メディアセグメントが１つ又は複数のセグメントインデックスデータボックスによってインデックスされ、各メディアセグメントのセグメントインデックスが順に接続され、最外層のセグメントインデックスデータボックスによってインデックスされる。

【0126】

図１０に示すように、そのうちの１つのメディアセグメントは、N個の連続するサブセグメントを含み、各サブセグメントは、１つの「ｌｉｄｘ」タイプのセグメントインデックスデータボックスによってインデックスされる。「ｌｉｄｘ」データボックスは、参照されるサブセグメントがライブラリランダムアクセスポイント(ＬＲＡＰ)から開始するか否か、及びサブセグメントにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)のＬＲＡＰ_ｔｙｐｅタイプを示す。

【0127】

ＬＲＡＰランダムアクセスについて、複数のユーザ動作は、ビデオビットストリームに対するランダムアクセス要求をトリガーすることができる。ブロードキャスト及びマルチキャストサービスにおいて、チャンネル切り替えは、別のチャンネルにおけるビデオビットストリームに対するランダムアクセス動作をトリガーする。適応ストリームメディアセッションにおいて、ドラッグ再生、早送り/早戻し再生などの特殊再生は、現在のレプレゼンテーション(Representation)におけるビデオビットストリームに対するランダムアクセス動作をトリガーする。ビットレート適応切替は、別のレプレゼンテーション(Representation)におけるビデオビットストリームに対するランダムアクセス動作をトリガーする。

【0128】

ビデオビットストリームに本実施例のライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを導入し、これによりランダムアクセス動作を実行することにより、イントラ符号化ランダムアクセスポイント(ＩＲＡＰ)ピクチャに比べて、低い符号化コストでランダムアクセス動作を実現することができる。

【0129】

ビデオビットストリームランダムアクセス要求は、通常、ビデオビットストリームにおける所望の位置(時間)を示す。

【0130】

好ましくは、ビデオビットストリームランダムアクセスに関連付けられたライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャは、時間的に最も近くかつ所望の位置より前又は所望の位置に現れるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャである。

【0131】

１つの実施例では、ライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルグループに含まれるサンプルを検索することにより、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプル、及び対応するライブラリピクチャサンプルを特定することができる。

【0132】

好ましくは、ビデオビットストリームランダムアクセスに関連付けられるセグメントは、少なくとも１つのライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを含むセグメントを指す。そのうち、１つのライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャは、時間的に最も近くかつ所望の位置より前又は所望の位置に現れるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャである。

【0133】

１つの実施例では、ライブラリランダムアクセスポイント(ＬＲＡＰ)セグメントインデックスに対応するセグメントを検索することにより、ビデオビットストリームランダムアクセスに関連付けられるセグメントを特定することができ、当該セグメントには、少なくとも１つのビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャが含まれる。

【0134】

好ましくは、ビデオビットストリームランダムアクセスに関連付けられるサブセグメントは、ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを開始とするサブセグメントを指す。そのうち、ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャは、時間的に最も近くかつ所望の位置より前又は所望の位置に現れるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャである。

【0135】

１つの実施例では、ライブラリランダムアクセスポイント(ＬＲＡＰ)セグメントインデックスに引用されるサブセグメントを検索することにより、ビデオビットストリームランダムアクセスに関連付けられるサブセグメントを特定することができ、当該サブセグメントには、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャが含まれる。

【0136】

図１１は、本開示の実施例に係るＬＲＡＰピクチャに基づくランダムアクセスのフローチャート１である。図１１に示すように、当該プローは、以下のステップＳ１１０２～Ｓ１１１６を含む。

【0137】

ステップＳ１１０２において、ストリームメディアセッションにおいて、メディアクライアント(例えば、ＤＡＳＨクライアント)は、インデックスセグメントの取得をサーバに要求し、当該インデックスセグメントは、レプレゼンテーション(Representation)における全てのメディアセグメントのインデックスを提供する。

【0138】

ステップＳ１１０４において、サーバは、インデックスセグメントをクライアントに返す。本実施例では、当該インデックスセグメントは、一連のＬＲＡＰセグメントインデックスデータボックス(ＬＲＡＰ Segment Index Box)からなり、メディアセグメントが引用するサブセグメントにライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャが存在するか否か、及びライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャのランダムアクセスポイントタイプ(ＬＲＡＰ_ｔｙｐｅ)を示す。

【0139】

ステップＳ１１０６において、クライアントは、ユーザが開始したビデオビットストリームランダムアクセス要求を受信する。クライアントは、要求に基づいてビデオビットストリームにおける所望の位置を確定する。好ましくは、インデックスセグメントが提供するライブラリランダムアクセスポイント(ＬＲＡＰ)セグメントインデックスを検索することにより、ビデオビットストリームランダムアクセスに関連付けられるセグメントを特定し、当該セグメントは、少なくとも１つのビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを含む。

【0140】

選択的に、インデックスセグメントが提供するライブラリランダムアクセスポイント(ＬＲＡＰ)セグメントインデックスによって、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)に対応するライブラリピクチャを特定することができる。

【0141】

選択的に、ライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルグループに含まれるサンプルを検索することにより、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルに対応するライブラリピクチャサンプルを特定することができる。

【0142】

ステップＳ１１０８において、クライアントは、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに対応するライブラリピクチャのメディアセグメントの取得をサーバに要求する。

【0143】

選択的に、クライアントは、同一のレプレゼンテーション(Representation)におけるメディアセグメントの取得をサーバに要求し、すなわち、ライブラリピクチャは、ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャと同じビデオビットストリームに符号化される。

【0144】

選択的に、クライアントは、異なるレプレゼンテーション(Representation)におけるメディアセグメントの取得をサーバに要求し、すなわち、ライブラリピクチャは、ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャと異なるビデオビットストリームに符号化される。

【0145】

ステップＳ１１１０において、サーバは、クライアントにメディアセグメントを返し、当該セグメントは、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに対応するライブラリピクチャを含む。

【0146】

ステップＳ１１１２において、クライアントは、前記ビデオビットストリームランダムアクセスに関連付けられるメディアセグメントの取得をサーバに要求する。

【0147】

ステップＳ１１１４において、サーバは、メディアセグメントをクライアントに返し、当該セグメントは、少なくとも１つのビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを含む。

【0148】

ステップＳ１１１６において、クライアントは、前記ライブラリピクチャを唯一の参照ピクチャとして用いて前記ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを復号し、前記復号されたライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャにランダムアクセス動作を実行する。

【0149】

好ましくは、復号順及び表示順で前記ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに後続する少なくとも１つの非ランダムアクセスポイントピクチャを復号し、非ランダムアクセスポイントピクチャは、復号順又は表示順がライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに先行するいずれのピクチャをも参照ピクチャとしない。

【0150】

図１２は、本開示の実施例に係るＬＲＡＰピクチャに基づくランダムアクセスのフローチャート２である。図１２に示すように、当該プローは、以下のステップＳ１２０２～Ｓ１２１６を含む。

【0151】

ステップＳ１２０２において、選択的に、ストリームメディアセッションにおいて、メディアクライアント(例えば、ＤＡＳＨクライアント)は、インデックスセグメントの取得をサーバに要求し、当該インデックスセグメントは、レプレゼンテーション(Representation)における全てのメディアセグメントのインデックスを提供する。

【0152】

ステップＳ１２０４において、サーバは、インデックスセグメントをクライアントに返す。本実施例では、当該インデックスセグメントは、一連のＬＲＡＰセグメントインデックスデータボックス(ＬＲＡＰ Segment Index Box)からなり、メディアセグメントが引用するサブセグメントにライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャが存在するか否か、及びライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャのランダムアクセスポイントタイプ(ＬＲＡＰ_ｔｙｐｅ)を示す。

【0153】

ステップＳ１２０６において、クライアントは、ユーザが開始したビデオビットストリームランダムアクセス要求を受信する。クライアントは、要求に基づいてビデオビットストリームにおける所望の位置を確定する。好ましくは、インデックスセグメントが提供するライブラリランダムアクセスポイント(ＬＲＡＰ)セグメントインデックスを検索することにより、ビデオビットストリームランダムアクセスに関連付けられるセグメント及びそのサブセグメントを特定し、サブセグメントは、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャから開始する。

【0154】

【0155】

【0156】

選択的に、インデックスセグメントが提供するライブラリランダムアクセスポイント(ＬＲＡＰ)セグメントインデックスを検索することにより、ビデオビットストリームランダムアクセスに関連付けられるセグメント及びそのサブセグメントを特定し、サブセグメントは、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに対応するライブラリピクチャを含む。

【0157】

ステップＳ１２０８において、クライアントは、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに対応するライブラリピクチャのサブセグメントの取得をサーバに要求する。

【0158】

ステップＳ１２１０において、サーバは、サブセグメントをクライアントに返し、サブセグメントは、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャに対応するライブラリピクチャを含む。

【0159】

ステップＳ１２１２において、クライアントは、前記ビデオビットストリームランダムアクセスに関連付けられるサブセグメントの取得をサーバに要求する。

【0160】

ステップＳ１２１４において、サーバは、サブセグメントをクライアントに返し、サブセグメントは、ビデオビットストリームランダムアクセスに関連付けられるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャから開始する。

【0161】

ステップＳ１２１６において、クライアントは、前記ライブラリピクチャを唯一の参照ピクチャとして用いて前記ライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを復号し、前記復号されたライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャにランダムアクセス動作を実行する。

【0162】

【0163】

本開示の実施例は、ビデオビットストリームカプセル化装置をさらに提供する。図１３は、本開示の実施例に係るビデオビットストリームカプセル化装置のブロック図である。

【0164】

図１３に示すように、当該装置は、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルに前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルの情報をカプセル化するように構成される第１のカプセル化モジュール１３２と、
前記メディアコンテナファイルに前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報をカプセル化するように構成される第２のカプセル化モジュールであって、前記ライブラリピクチャサンプルは、前記ＬＲＡＰサンプルの参照ピクチャサンプルである第２のカプセル化モジュール１３４と、を含む。

【0165】

１つの例示的な実施例では、前記メディアコンテナファイルは、前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を含むか、又は、
前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含む同期サンプルデータボックスを含むか、又は、
前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを含むか、又は、
前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を示すセグメントインデックスデータボックスを含む。

【0166】

１つの例示的な実施例では、前記メディアコンテナファイルは、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を含むか、又は、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含む同期サンプルデータボックスを含むか、又は、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを含むか、又は、
前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を示すセグメントインデックスデータボックスを含む。

【0167】

１つの例示的な実施例では、前記装置は、前記メディアコンテナファイルに第２のビデオビットストリームをカプセル化するように構成される第３のカプセル化モジュールであって、前記第２のビデオビットストリームには、前記ＬＲＡＰサンプルのライブラリピクチャサンプルが含まれる第３のカプセル化モジュールをさらに含む。

【0168】

１つの例示的な実施例では、前記ＬＲＡＰサンプルの情報は、ＬＲＡＰサンプルのインデックス、ＬＲＡＰサンプルのフローアクセスポイントタイプ、ＬＲＡＰサンプルのライブラリピクチャサンプルの数、ＬＲＡＰサンプルのライブラリピクチャサンプルの番号のうちの少なくとも１つを含む。

【0169】

１つの例示的な実施例では、前記ライブラリピクチャサンプルの情報は、ライブラリピクチャサンプルに対応するトラック識別子、ライブラリピクチャサンプルの番号のうちの少なくとも１つを含む。

【0170】

本開示の実施例は、ビデオビットストリーム復号装置をさらに提供する。図１４は、本開示の実施例に係るビデオビットストリーム復号装置のブロック図である。

【0171】

図１４に示すように、当該装置は、第１のビデオビットストリームがカプセル化されたメディアコンテナファイルにおいて、前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)サンプルを認識するように構成される第１の認識モジュール１４２と、
前記メディアコンテナファイルにおいて前記ＬＲＡＰサンプルのライブラリピクチャサンプルを認識するように構成される第２の認識モジュール１４４と、
前記ライブラリピクチャサンプルを復号するように構成される第１の復号モジュール１６６と、
前記ライブラリピクチャサンプルを参照ピクチャサンプルとして用いて前記ＬＲＡＰサンプルを復号するように構成される第２の復号モジュール１４８と、を含む。

【0172】

１つの例示的な実施例では、前記第１の認識モジュール１４２は、さらに、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を解析するか、又は、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルの情報を含む同期サンプルデータボックスを解析するか、又は、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを解析するか、又は、
前記メディアコンテナファイルにおける、前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルの情報を示すセグメントインデックスデータボックスを解析するように構成される。

【0173】

１つの例示的な実施例では、前記第２の認識モジュール１４４は、さらに、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を解析するか、又は、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含む同期サンプルデータボックスを解析するか、又は、
前記メディアコンテナファイルにおける、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを解析するか、又は、
前記メディアコンテナファイルにおける、前記セグメントインデックスデータボックスは、前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を示すセグメントインデックスデータボックスを解析するように構成される。

【0174】

１つの例示的な実施例では、前記第１の復号モジュール１４６は、さらに、前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報に基づいて、前記メディアコンテナファイルにカプセル化された第２のビデオビットストリームに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルを復号するように構成される。

【0175】

【0176】

【0177】

本開示の実施例は、ビデオビットストリームアクセス装置をさらに提供する。図１５は、本開示の実施例に係るビデオビットストリームアクセル装置のブロック図である。

【0178】

図１５に示すように、当該装置は、第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得し、前記ＬＲＡＰピクチャのライブラリピクチャを取得するように構成される取得モジュール１５２と、
前記ライブラリピクチャを参照ピクチャとして用いて前記ＬＲＡＰピクチャを復号するように構成される第３の復号モジュール１５４と、
前記復号されたＬＲＡＰピクチャにおいて前記第１のビデオビットストリームのランダムアクセスを実行するように構成される実行モジュール１５６と、を含む。

【0179】

１つの例示的な実施例では、前記取得化モジュール１５２は、さらに、前記第１のビデオビットストリームの符号化ビデオデータの、少なくとも１つのＬＲＡＰピクチャを含む第１のセグメントを受信するように構成される。

【0180】

１つの例示的な実施例では、前記取得化モジュール１５２は、さらに、第２のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャを含む第２のセグメントを受信するか、又は、
前記第１のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャを含む第３のセグメントを受信するように構成される。

【0181】

１つの例示的な実施例では、前記取得モジュール１５２は、さらに、前記第１のビデオビットストリームの符号化ビデオデータの第４のセグメントを受信するように構成される。ここで、前記第４のセグメントの第１のサブセグメントは、前記ライブラリピクチャを含み、前記第４のセグメントの第２のサブセグメントは、少なくとも１つのＬＲＡＰピクチャを含む。

【0182】

１つの例示的な実施例では、前記取得モジュール１５２は、さらに、前記第１のビデオビットストリームの符号化ビデオデータの、前記ＬＲＡＰピクチャが前記第１のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するように構成される。

【0183】

１つの例示的な実施例では、前記取得化モジュール１５２は、さらに、
前記第１のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャが前記第１のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するか、又は、
第２のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャが前記第２のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するように構成される。

【0184】

１つの例示的な実施例では、前記装置は、前記第１のビデオビットストリームにおける復号順及び表示順で前記ＬＲＡＰピクチャに後続する少なくとも１つの非ランダムアクセスポイントピクチャを復号するように構成される第４の復号モジュールであって、前記少なくとも１つの非ランダムアクセスポイントピクチャは、復号順又は表示順が前記ＬＲＡＰピクチャに先行するいずれのピクチャをも参照ピクチャとしない第４の復号モジュールをさらに含む。

【0185】

本願の実施例は、実行されると、上記のいずれか１つの方法実施例におけるステップを実行するように構成されるコンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体をさらに提供する。

【0186】

１つの例示的な実施例では、上記コンピュータ読み取り可能な記憶媒体は、ＵＳＢディスク、リードオンリーメモリ(Read-Only Memory、ＲＯＭと略称される)、ランダムアクセスメモリ(Random Access Memory、ＲＡＭと略称される)、リムーバブルハードディスク、磁気ディスク又は光ディスクなどの様々なコンピュータプログラムを記憶可能な媒体を含んでもよいがこれらに限定されない。

【0187】

本開示の実施例は、メモリとプロセッサとを含み、当該メモリには、コンピュータプログラムが記憶されており、当該プロセッサは、コンピュータプログラムを実行することによって上記のいずれか１つの方法実施例におけるステップを実行するように構成される電子装置をさらに提供する。

【0188】

１つの例示的な実施例では、上記電子装置は、上記プロセッサに接続される伝送装置と上記プロセッサに接続される入出力装置とをさらに含んでもよい。

【0189】

本実施例における具体的な例示は、上記の実施例及び例示的な実施形態に説明された例示を参照することができるので、本実施例ではその説明を省略する。

【0190】

当業者が理解できるように、上記本開示の各モジュール又は各ステップは、汎用のコンピューティング装置によって実現することができ、単一のコンピューティング装置に集中されたり、複数のコンピューティング装置で構成されたネットワークに分布されたりすることができ、コンピューティング装置が実行可能なプログラムコードによって実現することができ、これにより、それらを記憶装置に記憶してコンピューティング装置が実行することができ、かつ、ある場合では、示された又は説明されたステップをここでの順序と異なる順序で実行することができ、又は、それらをそれぞれ各集積回路モジュールに作成するか、又はそれらのうちの複数のモジュール又はステップを単一の集積回路モジュールに作成して実現することができることは言うまでもない。このように、本開示は、任意の特定のハードウェアとソフトウェアの組み合わせに限定されない。

【0191】

以上は、本開示の選択的な実施例に過ぎず、本願を限定するものではなく、当業者であれば、本開示に種々の変更や変化を加えることが可能である。本開示の原則内で行われるいかなる修正、均等置換、改良などは、いずれも本開示の保護範囲内に含まれるべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【手続補正書】

【提出日】2024-05-07

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

【請求項2】

前記メディアコンテナファイルは、
前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を含むか、又は、
前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含む同期サンプルデータボックスを含むか、又は、
前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを含むか、又は、
前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記第１のビデオビットストリームにおけるＬＲＡＰサンプルの情報を示すセグメントインデックスデータボックスを含むか、又は、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むＬＲＡＰサンプルグループ及び/又はＬＲＡＰサンプルグループ記述を含むか、又は、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含む同期サンプルデータボックスを含むか、又は、
前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を含むストリームアクセスポイント(ＳＡＰ)サンプルグループを含むか、又は、
前記第１のビデオビットストリームの符号化ビデオデータのセグメントに含まれる前記ＬＲＡＰサンプルのライブラリピクチャサンプルの情報を示すセグメントインデックスデータボックスを含む、
請求項１に記載の方法。

【請求項3】

前記メディアコンテナファイルに、前記ＬＲＡＰサンプルのライブラリピクチャサンプルを含む第２のビデオビットストリームをカプセル化するステップをさらに含む、
ことを特徴とする請求項１に記載の方法。

【請求項4】

前記ＬＲＡＰサンプルの情報は、ＬＲＡＰサンプルのインデックス、ＬＲＡＰサンプルのストリームアクセスポイントタイプ、ＬＲＡＰサンプルのライブラリピクチャサンプルの数、ＬＲＡＰサンプルのライブラリピクチャサンプルの番号のうちの少なくとも１つを含むか、或いは、
前記ライブラリピクチャサンプルの情報は、ライブラリピクチャサンプルに対応するトラック識別子、ライブラリピクチャサンプルの番号のうちの少なくとも１つを含む、
請求項１に記載の方法。

【請求項5】

【請求項6】

【請求項7】

【請求項8】

【請求項9】

【請求項10】

第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得し、前記ＬＲＡＰピクチャのライブラリピクチャを取得するステップと、
前記ライブラリピクチャを参照ピクチャとして用いて前記ＬＲＡＰピクチャを復号するステップと、
前記復号されたＬＲＡＰピクチャにおいて前記第１のビデオビットストリームのランダムアクセスを実行するステップと、を含む、
ことを特徴とするビデオビットストリームアクセス方法。

【請求項11】

前記第１のビデオビットストリームにおけるライブラリランダムアクセスポイント(ＬＲＡＰ)ピクチャを取得するステップは、
第１のビデオビットストリームの符号化ビデオデータの、少なくとも１つのＬＲＡＰピクチャを含む第１のセグメントを受信するステップ、又は、
前記第１のビデオビットストリームの符号化ビデオデータの、前記ＬＲＡＰピクチャが前記第１のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップを含む、
請求項１０に記載の方法。

【請求項12】

前記ＬＲＡＰピクチャのライブラリピクチャを取得する前記ステップは、
第２のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャを含む第２のセグメントを受信するステップ、又は、
前記第１のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャを含む第３のセグメントを受信するステップ、又は、
前記第１のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャが前記第１のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップ、又は、
第２のビデオビットストリームの符号化ビデオデータの、前記ライブラリピクチャが前記第２のビデオビットストリームの符号化ビデオデータのメディアセグメントに存在することを示すインデックスセグメントを受信するステップステップを含む、
請求項１０に記載の方法。

【請求項13】

【請求項14】

【請求項15】

メモリとプロセッサとを含む電子装置であって、
前記メモリには、コンピュータプログラムが記憶されており、
前記プロセッサは、前記コンピュータプログラムを実行することによって請求項１～１４のいずれか１項に記載の方法を実行するように構成される、
電子装置。

【国際調査報告】

知財求人

知財求人お知らせサービス

知財のニュースを調べる
- 知財ニュース
- 知財周辺ニュース
企業の特許を調べる
知財のセミナーを調べる
知財,特許事務所への求職・転職
特許事務所をさがす
弁理士試験を受ける
- 年の弁理士試験情報
- 弁理士試験の合格率など統計
知財の法律をしらべる
期限日をしらべる
- 今日に対して意見書・補正書の期限
- 今日に対して審査請求期限日
知財の判決をしらべる
コンテンツ・リンク
運営会社
プレスの皆様へ
- お問い合わせ
ユーザーの皆様
- お問い合わせ・フィードバック
広告掲載を希望の皆様へ
- 広告掲載について
- 求人広告の掲載について

IP Force 特許公報掲載プロジェクト 2022.1.31 β版