特表 2023-550535 適応型イントラリフレッシュメカニズムに基づく復号化、符号化

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2023-12-01

(54)【発明の名称】適応型イントラリフレッシュメカニズムに基づく復号化、符号化

(51)【国際特許分類】

   H04N 19/70 20140101AFI20231124BHJP

【ＦＩ】

H04N19/70

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2023539363

(86)(22)【出願日】2022-03-10

(85)【翻訳文提出日】2023-06-27

(86)【国際出願番号】 CN2022080113

(87)【国際公開番号】W WO2022194017

(87)【国際公開日】2022-09-22

(31)【優先権主張番号】202110298610.4

(32)【優先日】2021-03-19

(33)【優先権主張国・地域又は機関】CN

(81)【指定国・地域】

(71)【出願人】

【識別番号】508219313

【氏名又は名称】杭州海康威視数字技術股▲フン▼有限公司

(74)【代理人】

【識別番号】100110364

【弁理士】

【氏名又は名称】実広 信哉

(74)【代理人】

【識別番号】100133400

【弁理士】

【氏名又は名称】阿部 達彦

(72)【発明者】

【氏名】魏 ▲亮▼

(72)【発明者】

【氏名】▲陳▼ 方▲棟▼

(72)【発明者】

【氏名】王 莉

【テーマコード（参考）】

5C159

【Ｆターム（参考）】

5C159RC12

5C159SS19

(57)【要約】

本発明の実施例は、適応型イントラリフレッシュメカニズムに基づく復号化、符号化方法及び関連デバイスを開示し、動画符号化復号化の分野に属する。本発明の実施例において、現在フレームのビットストリームにおける拡張データに、適応型イントラリフレッシュ動画拡張ＩＤ及び仮想境界位置マーキング情報が新たに追加される。このように、当該仮想境界位置マーキング情報は、仮想境界の位置を示すことができ、且つ当該仮想境界は、少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるため、符号化側は、現在フレームのリフレッシュ領域を分割する時、実際の需要に応じて当該仮想境界を任意に設定し、当該仮想境界位置マーキング情報を通じて当該仮想境界の位置を示すことができ、それにより領域分割の柔軟性を効果的に向上させる。

【特許請求の範囲】

【請求項1】

現在フレームのビットストリームを受信するステップと、
前記現在フレームのビットストリームに拡張データが存在し、且つ前記拡張データに適応型イントラリフレッシュ動画拡張ＩＤが付加されている場合、前記拡張データに付加された仮想境界位置マーキング情報を取得するステップであって、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるステップと、
前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップと、
前記現在フレームのビットストリームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在しない場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するステップと、を含む、
ことを特徴とする適応型イントラリフレッシュメカニズムに基づく復号化方法。

【請求項2】

前記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、
前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界の画素位置を示すために用いられ、
前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界の画素位置を示すために用いられる、
ことを特徴とする請求項１に記載の方法。

【請求項3】

前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界のｘ座標であり、
前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界のｙ座標であり、
前記リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とし、幅は前記ｘ座標であり、高さは前記ｙ座標である矩形領域であり、
前記未リフレッシュ領域とは、前記現在フレームにおける前記リフレッシュ済み領域以外の他の領域である、
ことを特徴とする請求項２に記載の方法。

【請求項4】

前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップは、
前記第１の仮想境界位置マーキング情報の値及び前記第２の仮想境界位置マーキング情報の値がいずれも０よりも大きい場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートすると決定するステップと、
前記第１の仮想境界位置マーキング情報の値及び／又は前記第２の仮想境界位置マーキング情報の値が０に等しい場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するステップと、を含む、
ことを特徴とする請求項２に記載の方法。

【請求項5】

前記現在フレームが前記適応型イントラリフレッシュ技術をサポートし、且つ復号化順における前記現在フレームの前のフレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームはランダムアクセスポイントであると決定するステップをさらに含む、
ことを特徴とする請求項１に記載の方法。

【請求項6】

前記前のフレームが前記適応型イントラリフレッシュ技術をサポートしないことは、
前記前のフレームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在しないこと、又は、
前記前のフレームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在するが、前記前のフレームの第１の仮想境界位置マーキング情報及び／又は第２の仮想境界位置マーキング情報の値が０に等しいことを含む、
ことを特徴とする請求項５に記載の方法。

【請求項7】

前記現在フレームが前記適応型イントラリフレッシュ技術をサポートすると決定し、且つ前記現在フレームの第１の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が前記現在フレームの右側境界に等しいか又はそれを超えると決定し、且つ前記現在フレームの第２の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が前記現在フレームの下側境界に等しいか又はそれを超えると決定した場合、前記現在フレームがランダムアクセスのリカバリポイントであると決定するステップをさらに含む、
ことを特徴とする請求項２に記載の方法。

【請求項8】

前記第１の仮想境界位置マーキング情報の精度は、１つの最大符号化ユニットＬＣＵの幅であり、
前記第２の仮想境界位置マーキング情報の精度は、１つの前記ＬＣＵの高さである、
ことを特徴とする請求項２に記載の方法。

【請求項9】

現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップと、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤと前記現在フレームの仮想境界位置マーキング情報とを付加するステップであって、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるステップと、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームの前記拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤを付加せず、又は前記現在フレームの前記拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤを付加するが、前記現在フレームの前記拡張データに付加した前記仮想境界位置マーキング情報の値を、前記適応型イントラリフレッシュ技術をサポートするか否かを示すことができるようにするステップと、を含む、
ことを特徴とする適応型イントラリフレッシュメカニズムに基づく符号化方法。

【請求項10】

前記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、
前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界の画素位置を示すために用いられ、
前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界の画素位置を示すために用いられる、
ことを特徴とする請求項９に記載の方法。

【請求項11】

前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界のｘ座標であり、
前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界のｙ座標であり、
前記リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅が前記ｘ座標であり、高さが前記ｙ座標である矩形領域であり、前記未リフレッシュ領域とは、前記現在フレームにおける前記リフレッシュ済み領域以外の他の領域である、
ことを特徴とする請求項１０に記載の方法。

【請求項12】

前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤを付加するが、前記現在フレームの拡張データに付加した前記第１の仮想境界位置マーキング情報の値及び／又は前記第２の仮想境界位置マーキング情報の値を０とし、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに付加した前記第１の仮想境界位置マーキング情報の値を０よりも大きくし、且つ前記第２の仮想境界位置マーキング情報の値も０よりも大きくする、
ことを特徴とする請求項１０に記載の方法。

【請求項13】

前記現在フレームがランダムアクセスポイントである場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートし、且つ符号化順における前記現在フレームの前のフレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するステップと、
前記現在フレームがランダムアクセスのリカバリポイントである場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートし、且つ前記第１の仮想境界位置マーキング情報により示される仮想境界の画素位置が前記現在フレームの右側境界に等しいか又はそれを超え、且つ前記第２の仮想境界位置マーキング情報により示される仮想境界の画素位置が前記現在フレームの下側境界に等しいか又はそれを超えると決定するステップと、をさらに含む、
ことを特徴とする請求項１０に記載の方法。

【請求項14】

前記第１の仮想境界位置マーキング情報の精度は、１つのＬＣＵの幅であり、
前記第２の仮想境界位置マーキング情報の精度は、１つの前記ＬＣＵの高さである、
ことを特徴とする請求項１０に記載の方法。

【請求項15】

現在フレームのビットストリームを受信するための受信モジュールと、
前記現在フレームのビットストリームに拡張データが存在し、且つ前記拡張データに適応型イントラリフレッシュ動画拡張ＩＤが付加されている場合、前記拡張データに付加された仮想境界位置マーキング情報を取得し、ここで、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられ、
前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定し、
前記現在フレームのビットストリームの前記拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在しない場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するための処理モジュールと、を含む、
ことを特徴とする復号化装置。

【請求項16】

現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定し、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤと前記現在フレームの仮想境界位置マーキング情報とを付加し、ここで、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられ、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームの前記拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤを付加せず、又は前記現在フレームの前記拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤを付加するが、前記現在フレームの前記拡張データに付加した前記仮想境界位置マーキング情報の値を、前記適応型イントラリフレッシュ技術をサポートするか否かを示すことができるようにするための符号化モジュール、を含む、
ことを特徴とする符号化装置。

【請求項17】

プロセッサと、
プロセッサにより実行可能な命令を記憶するためのメモリと、を含む復号化デバイスであって、
前記プロセッサは、上記請求項１～８のいずれか１項に記載の方法のステップを実行するように構成される、
ことを特徴とする復号化デバイス。

【請求項18】

プロセッサと、
プロセッサにより実行可能な命令を記憶するためのメモリと、を含む符号化デバイスであって、
前記プロセッサは、上記請求項９～１４のいずれか１項に記載の方法のステップを実行するように構成される、
ことを特徴とする符号化デバイス。

【請求項19】

命令を記憶しているコンピュータ可読記憶媒体であって、前記命令がプロセッサにより実行されると、上記請求項１～８、又は上記請求項９～１４のいずれか１項に記載の方法のステップが実施される
ことを特徴とするコンピュータ可読記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施例は、動画符号化復号化の分野に関し、特に、適応型イントラリフレッシュメカニズムに基づく復号化、符号化のための方法及び関連デバイスに関する。

【背景技術】

【0002】

Ｉフレームのビットレートが大きすぎるため、Ｉフレームの復号化に要する時間が長いという問題を解決するために、イントラリフレッシュメカニズムがそれに応じて生まれた。イントラリフレッシュメカニズムの基本原理は、１つのＩフレームのビットレートをいくつかのＰフレームに分散させることである。符号化の過程において、１つの完全な画像フレームをリフレッシュ周期に基づいてＮ個の強制イントラ領域に分割し、当該画像フレームに対するＮ個のイントラリフレッシュフレームを順に符号化し、各イントラリフレッシュフレームは、前記Ｎ個の強制イントラ領域のうちの１つの強制イントラ領域を含み、このＮ個の強制イントラ領域の符号化モードは、強制イントラ（ｉｎｔｒａ）モードであり、各イントラリフレッシュフレーム内の他の領域の符号化モードは、インター（ｉｎｔｅｒ）モードの採用を許容され、このようにＩフレームのビットレートに対して各イントラリフレッシュフレームのビットレートが低減されるだけでなく、各イントラリフレッシュフレームのビットレートが比較的安定している。しかしながら、従来のシンタックスに基づいてイントラリフレッシュメカニズムを起動する過程は、いくぶん冗長である。

【発明の概要】

【発明が解決しようとする課題】

【0003】

本発明の実施例は、適応型イントラリフレッシュメカニズムに基づく復号化、符号化方法及び関連デバイスを提供し、イントラリフレッシュメカニズムの分割の適用の柔軟性を向上させることができる。前記技術的解決手段は以下のとおりである。

【課題を解決するための手段】

【0004】

一態様において、現在フレームのビットストリームを受信するステップと、前記現在フレームのビットストリームに拡張データが存在し、且つ前記拡張データに適応型イントラリフレッシュ動画拡張ＩＤが付加されている場合、前記拡張データに付加された仮想境界位置マーキング情報を取得するステップであって、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるステップと、前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップと、を含む、適応型イントラリフレッシュメカニズムに基づく復号化方法が提供される。

【0005】

上記方法に基づき、１つの可能な実現形態において、前記方法は、前記現在フレームのビットストリームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在しない場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するステップをさらに含む。

【0006】

上記方法に基づき、１つの可能な実現形態において、前記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界の画素位置を示すために用いられ、前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界の画素位置を示すために用いられる。

【0007】

上記方法に基づき、１つの可能な実現形態において、前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界のｘ座標であり、前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界のｙ座標であり、前記リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅が前記ｘ座標であり、高さが前記ｙ座標である矩形領域であり、前記未リフレッシュ領域とは、前記現在フレームにおける前記リフレッシュ済み領域以外の他の領域である。

【0008】

上記方法に基づき、１つの可能な実現形態において、前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップは、前記第１の仮想境界位置マーキング情報の値及び前記第２の仮想境界位置マーキング情報の値がいずれも０よりも大きい場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートすると決定するステップと、前記第１の仮想境界位置マーキング情報の値及び／又は前記第２の仮想境界位置マーキング情報の値が０に等しい場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートしないと決定するステップと、を含む。

【0009】

上記方法に基づき、１つの可能な実現形態において、前記方法は、前記現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ復号化順における現在フレームの前のフレームが適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームはランダムアクセスポイントであると決定するステップをさらに含み、ここで、前のフレームが適応型イントラリフレッシュ技術をサポートしないことは、前記前のフレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在しないこと、又は、前記前のフレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在するが、前のフレームの第１の仮想境界位置マーキング情報及び／又は第２の仮想境界位置マーキング情報の値が０に等しいことを含む。

【0010】

上記方法に基づき、１つの可能な実現形態において、前記方法は、前記現在フレームが適応型イントラリフレッシュ技術をサポートすると決定し、且つ前記現在フレームの第１の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が現在フレームの右側境界に等しいか又はそれを超えると決定し、且つ前記現在フレームの第２の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が現在フレームの下側境界に等しいか又はそれを超えると決定した場合、前記現在フレームがランダムアクセスのリカバリポイントであると決定するステップをさらに含む。

【0011】

上記方法に基づき、１つの可能な実現形態において、前記第１の仮想境界位置マーキング情報の精度は、１つの最大符号化ユニット（ｌａｒｇｅ ｃｏｄｉｎｇ ｕｎｉｔ、ＬＣＵ）の幅であり、前記第２の仮想境界位置マーキング情報の精度は、１つの前記ＬＣＵの高さである。

【0012】

上記方法に基づき、１つの可能な実現形態において、前記現在フレームがランダムアクセスのために用いられる場合、前記現在フレームを復号化する前に、前記方法は、１つの有効なシーケンスヘッダを取得するステップと、前記シーケンスヘッダに付加された情報に基づいて前記現在フレームを復号化するステップとをさらに含む。

【0013】

別の態様において、現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップと、前記現在フレームが適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤと前記現在フレームの仮想境界位置マーキング情報とを付加するステップであって、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるステップと、を含む、適応型イントラリフレッシュメカニズムに基づく符号化方法が提供される。

【0014】

上記方法に基づき、１つの可能な実現形態において、前記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界の画素位置を示すために用いられ、前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界の画素位置を示すために用いられる。

【0015】

上記方法に基づき、１つの可能な実現形態において、前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界のｘ座標であり、前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界のｙ座標であり、前記リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅が前記ｘ座標であり、高さが前記ｙ座標である矩形領域であり、前記未リフレッシュ領域とは、前記現在フレームにおける前記リフレッシュ済み領域以外の他の領域である。

【0016】

上記方法に基づき、１つの可能な実現形態において、前記現在フレームが適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤを付加せず、又は前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤを付加するが、前記現在フレームの拡張データに付加した第１の仮想境界位置マーキング情報の値及び／又は第２の仮想境界位置マーキング情報の値を０とする。

【0017】

上記方法に基づき、１つの可能な実現形態において、前記現在フレームが適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに付加した前記第１の仮想境界位置マーキング情報の値を０よりも大きくし、且つ前記第２の仮想境界位置マーキング情報の値も０よりも大きくする。

【0018】

上記方法に基づき、１つの可能な実現形態において、前記方法は、前記現在フレームがランダムアクセスポイントである場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ符号化順における現在フレームの前のフレームが適応型イントラリフレッシュ技術をサポートしないと決定するステップをさらに含む。

【0019】

上記方法に基づき、１つの可能な実現形態において、前記方法は、前記現在フレームがランダムアクセスのリカバリポイントである場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ前記第１の仮想境界位置マーキング情報により示される仮想境界の画素位置が前記現在フレームの右側境界に等しいか又はそれを超え、且つ前記第２の仮想境界位置マーキング情報により示される仮想境界の画素位置が前記現在フレームの下側境界に等しいか又はそれを超えると決定するステップをさらに含む。

【0020】

上記方法に基づき、１つの可能な実現形態において、前記第１の仮想境界位置マーキング情報の精度は、１つのＬＣＵの幅であり、前記第２の仮想境界位置マーキング情報の精度は、１つの前記ＬＣＵの高さである。

【0021】

別の態様において、現在フレームのビットストリームを受信するための受信モジュールと、前記現在フレームのビットストリームに拡張データが存在し、且つ前記拡張データに適応型イントラリフレッシュ動画拡張ＩＤが付加されている場合、前記拡張データに付加された仮想境界位置マーキング情報を取得し、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられ、前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するための処理モジュールと、を含む、復号化装置が提供される。

【0022】

上記装置に基づき、１つの可能な実現形態において、前記処理モジュールは、さらに、前記現在フレームのビットストリームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在しない場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するために用いられる。

【0023】

上記装置に基づき、１つの可能な実現形態において、前記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界の画素位置を示すために用いられ、前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界の画素位置を示すために用いられる。

【0024】

上記装置に基づき、１つの可能な実現形態において、前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界のｘ座標であり、前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界のｙ座標であり、前記リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅が前記ｘ座標であり、高さが前記ｙ座標である矩形領域であり、前記未リフレッシュ領域とは、前記現在フレームにおける前記リフレッシュ済み領域以外の他の領域である。

【0025】

上記装置に基づき、１つの可能な実現形態において、前記処理モジュールは、前記第１の仮想境界位置マーキング情報の値及び前記第２の仮想境界位置マーキング情報の値がいずれも０よりも大きい場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートすると決定し、前記第１の仮想境界位置マーキング情報の値及び／又は前記第２の仮想境界位置マーキング情報の値が０に等しい場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートしないと決定するために用いられる。

【0026】

上記装置に基づき、１つの可能な実現形態において、前記処理モジュールは、さらに、前記現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ復号化順における現在フレームの前のフレームが適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームはランダムアクセスポイントであると決定するために用いられ、ここで、前のフレームが適応型イントラリフレッシュ技術をサポートしないことは、前記前のフレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在しないこと、又は、前記前のフレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在するが、前のフレームの第１の仮想境界位置マーキング情報及び／又は第２の仮想境界位置マーキング情報の値が０に等しいことを含む。

【0027】

上記装置に基づき、１つの可能な実現形態において、前記処理モジュールは、さらに、前記現在フレームが適応型イントラリフレッシュ技術をサポートすると決定し、且つ前記現在フレームの第１の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が現在フレームの右側境界に等しいか又はそれを超えると決定し、且つ前記現在フレームの第２の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が現在フレームの下側境界に等しいか又はそれを超えると決定した場合、前記現在フレームがランダムアクセスのリカバリポイントであると決定するために用いられる。

【0028】

上記装置に基づき、１つの可能な実現形態において、前記第１の仮想境界位置マーキング情報の精度は、１つのＬＣＵの幅であり、前記第２の仮想境界位置マーキング情報の精度は、１つの前記ＬＣＵの高さである。

【0029】

上記装置に基づき、１つの可能な実現形態において、前記処理モジュールは、さらに、前記現在フレームがランダムアクセスのために用いられる場合、前記現在フレームを復号化する前に、１つの有効なシーケンスヘッダを取得し、前記シーケンスヘッダに付加された情報に基づいて前記現在フレームを復号化するために用いられる。

【0030】

別の態様において、現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するための符号化モジュールを含む符号化装置であって、前記符号化モジュールは、さらに、前記現在フレームが適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤと前記現在フレームの仮想境界位置マーキング情報とを付加するために用いられ、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられる、符号化装置が提供される。

【0031】

上記装置に基づき、１つの可能な実現形態において、前記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界の画素位置を示すために用いられ、前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界の画素位置を示すために用いられる。

【0032】

上記装置に基づき、１つの可能な実現形態において、前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界のｘ座標であり、前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界のｙ座標であり、前記リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅が前記ｘ座標であり、高さが前記ｙ座標である矩形領域であり、前記未リフレッシュ領域とは、前記現在フレームにおける前記リフレッシュ済み領域以外の他の領域である。

【0033】

上記装置に基づき、１つの可能な実現形態において、前記符号化モジュールは、さらに、前記現在フレームが適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤを付加せず、又は前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤを付加するが、前記現在フレームの拡張データに付加した第１の仮想境界位置マーキング情報の値及び／又は第２の仮想境界位置マーキング情報の値を０とするために用いられる。

【0034】

上記装置に基づき、１つの可能な実現形態において、前記符号化モジュールは、さらに、前記現在フレームが適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに付加した前記第１の仮想境界位置マーキング情報の値を０よりも大きくし、且つ前記第２の仮想境界位置マーキング情報の値も０よりも大きくするために用いられる。

【0035】

上記装置に基づき、１つの可能な実現形態において、前記符号化モジュールは、さらに、前記現在フレームがランダムアクセスポイントである場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ符号化順における現在フレームの前のフレームが適応型イントラリフレッシュ技術をサポートしないと決定するために用いられる。

【0036】

上記装置に基づき、１つの可能な実現形態において、前記符号化モジュールは、さらに、前記現在フレームがランダムアクセスのリカバリポイントである場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ前記第１の仮想境界位置マーキング情報により示される仮想境界の画素位置が前記現在フレームの右側境界に等しいか又はそれを超え、且つ前記第２の仮想境界位置マーキング情報により示される仮想境界の画素位置が前記現在フレームの下側境界に等しいか又はそれを超えると決定するために用いられる。

【0037】

上記装置に基づき、１つの可能な実現形態において、前記第１の仮想境界位置マーキング情報の精度は、１つのＬＣＵの幅であり、前記第２の仮想境界位置マーキング情報の精度は、１つの前記ＬＣＵの高さである。

【0038】

別の態様において、プロセッサと、プロセッサにより実行可能な命令を記憶するためのメモリとを含む復号化デバイスであって、前記プロセッサは、上記した適応型イントラリフレッシュメカニズムに基づく復号化方法におけるいずれかのステップを実行するように構成される、復号化デバイスが提供される。

【0039】

別の態様において、プロセッサと、プロセッサにより実行可能な命令を記憶するためのメモリとを含む符号化デバイスであって、前記プロセッサは、上記した適応型イントラリフレッシュメカニズムに基づく符号化方法におけるいずれかのステップを実行するように構成される、符号化デバイスが提供される。

【0040】

別の態様において、命令を記憶しているコンピュータ可読記憶媒体であって、前記命令がプロセッサにより実行されると、上記適応型イントラリフレッシュメカニズムに基づく復号化方法、又は適応型イントラリフレッシュメカニズムに基づく符号化方法におけるいずれかのステップが実施される、コンピュータ可読記憶媒体が提供される。

【0041】

別の態様において、命令を含むコンピュータプログラム製品であって、コンピュータで実行されると、コンピュータに上記適応型イントラリフレッシュメカニズムに基づく復号化方法、又は適応型イントラリフレッシュメカニズムに基づく符号化方法におけるいずれかのステップを実行させる、コンピュータプログラム製品が提供される。

【発明の効果】

【0042】

本発明の実施例にて提供される技術的解決手段による有益な効果は少なくとも以下を含む。現在フレームのビットストリームにおける拡張データに、適応型イントラリフレッシュ動画拡張ＩＤ及び仮想境界位置マーキング情報が新たに追加され、当該仮想境界位置マーキング情報は、仮想境界の位置を示すことができ、且つ当該仮想境界は、少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるため、符号化側は、現在フレームのリフレッシュ領域を分割するとき、実際の需要に応じて当該仮想境界を任意に設定することができ、続いて当該仮想境界位置マーキング情報を通じて当該仮想境界の位置を示せばよく、それによりリフレッシュ領域分割の柔軟性を向上させ、すなわち、本発明の実施例は、拡張データを通じて、リフレッシュ領域を適応的に分割することを実現する適応型イントラリフレッシュメカニズムを提供する。

【0043】

以下、本発明の実施例における技術的解決手段をより明確に説明するために、実施例の記述に使用する必要がある図面を簡単に紹介し、明らかに、以下の記述における図面は、本発明のいくつかの実施例にすぎず、当業者であれば、創造的な労力を費やさずに、さらにこれらの図面に基づいて他の図面を得ることができる。

【図面の簡単な説明】

【0044】

【図1】本発明の実施例にて提供されるイントラリフレッシュメカニズムの概略図である。

【図2】本発明の実施例にて提供されるイントラリフレッシュメカニズムを採用した画像シーケンスの概略図である。

【図3】本発明の実施例にて提供されるイントラリフレッシュメカニズムを採用した画像シーケンスの概略図である。

【図4】本発明の実施例にて提供される適応型イントラリフレッシュメカニズムに基づく符号化方法のフローチャートである。

【図5】本発明の実施例にて提供される適応型イントラリフレッシュメカニズムにおけるイントラリフレッシュフレームの領域分布の概略図である。

【図6】本発明の実施例にて提供される適応型イントラリフレッシュメカニズムに基づく復号化方法のフローチャートである。

【図7】本発明の実施例にて提供される復号化装置の構造の概略図である。

【図8】本発明の実施例にて提供される符号化装置の構造の概略図である。

【図9】本発明の実施例にて提供される端末の構造の概略図である。

【発明を実施するための形態】

【0045】

以下、本発明の実施例の目的、技術的解決手段及び利点をより明確にするために、図面を結合して本発明の実施形態についてさらに詳細に記述する。

【0046】

本発明の実施例にて提供される方法を解釈して説明する前に、まず、本発明の実施例に係る応用シーンを解釈して説明する。

【0047】

動画符号化復号化において、基準として参照される画像フレームは、Ｉフレームと呼ばれ、Ｉフレームは、キーフレームとも呼ばれる。Ｉフレームを符号化する時、圧縮率が低く、その目的は、その後に復号化する時、直接Ｉフレームのビットストリームに基づいて復号化してＩフレームを得ることができるようにすることで、他の画像フレームを参照する必要をなくすことである。符号化する時、前の画像フレームと現在画像フレームとの差分値に基づいて符号化される画像フレームがＰフレームと呼ばれ、その後にＩフレーム、復号化して得られた前の画像フレーム及びビットストリームにおける差分値に基づいて復号化することで現在画像フレームが得られるために、符号化されたＰフレームのビットストリームには前の画像フレームと現在画像フレームとの差分値が付加される。また、符号化する時、前の画像フレームと現在画像フレームとの差分値、及び現在画像フレームと後の画像フレームとの間の差分値に基づいて符号化される画像フレームがＢフレームと呼ばれ、その後にＩフレーム、復号化して得られた前の画像フレームと後の画像フレーム、及びビットストリームにおける差分値に基づいて復号化することで現在画像フレームが得られるために、符号化されたＢフレームのビットストリームには、前の画像フレームと現在画像フレームとの差分値、及び現在画像フレームと後の画像フレームとの差分値が付加される。符号化された１つのＩフレーム及びいくつかのＢフレーム又はいくつかのＰフレームからなるシーケンスを１つの画像シーケンスと呼ぶ。当該画像シーケンスは、ＩＰＰＰ又はＩＢＢＢシーケンスとも呼ばれる。

【0048】

復号化側で、ランダムアクセス方式でＩＰＰＰ又はＩＢＢＢシーケンスにアクセスする場合、通常、Ｉフレームのビットレートは、Ｐフレーム又はＢフレームのビットレートよりもはるかに大きいため、Ｉフレームの復号化時間は、Ｐフレーム又はＢフレームの復号化時間よりも長い。特に、弱いネットワーク環境では、Ｉフレームの復号化に要する時間がより長く、それにより動画の遅延が発生することがある。

【0049】

Ｉフレームの復号化に要する時間が長すぎることによる動画の遅延の発生を回避するために、現在、業界ではイントラリフレッシュメカニズムが提供される。当該イントラリフレッシュメカニズムの主要思想は、ＩフレームのビットレートをいくつかのＰフレームに分散させ、各Ｐフレームには、符号化モードが強制イントラモードである小さな領域があり、他の領域の符号化モードがインターモードの採用を許容され、最終的に各Ｐフレームのビットレートが元のＩフレームよりもかなり小さくなることである。また、イントラリフレッシュメカニズムでは、異なるＰフレームの強制イントラ領域が互いに交差しないように要求されるため、このようにいくつかのＰフレームを経ると、強制イントラモードに基づいて画像領域全体をリフレッシュすることができる。

【0050】

以下、その後の説明の便宜上、イントラリフレッシュメカニズムの原理について詳細に説明する。

【0051】

図１は、本発明の実施例にて提供されるイントラリフレッシュメカニズムの概略図である。図１のイントラリフレッシュメカニズムは、Ｉフレームのビットレートを、それぞれが強制イントラ領域である領域を有する４つのＰフレームに分散させる。ここで、

【数1】

でマーキングされた領域は、強制イントラ領域である。

【数2】

でマーキングされた領域は、符号化順における前のフレームのリフレッシュ済み領域であり、当該領域の符号化モードがインターモードの採用を許容されるので、現在フレームのインター領域とも呼ばれる。

【数3】

でマーキングされた領域は、未リフレッシュ領域であり、当該領域の符号化モードがインターモードの採用を許容される。

【0052】

図１に示すように、完全な画像フレームを４つの強制イントラ領域に分割し、リフレッシュ周期内に、それぞれ図１の左から右へ４フレームの画像である４つのイントラリフレッシュフレームが含まれる。リフレッシュ周期内の第１のフレームの画像について、当該画像は１つのイントラリフレッシュ領域と未リフレッシュ領域とを含み、第１のフレームの画像がリフレッシュ周期内の１フレーム目の画像であるので、第１のフレームの画像中のリフレッシュ済み領域は、現在画像フレーム中の強制イントラ領域のみを含む。リフレッシュ周期内の第２のフレーム画像について、当該画像は、第１のフレーム画像中のリフレッシュ済み領域、１つのイントラリフレッシュ領域、及び未リフレッシュ領域を含み、第２のフレーム画像中の第１のフレーム画像のリフレッシュ済み領域及び現在画像フレームに含まれるイントラリフレッシュ領域は、まとめて第２のフレーム画像のリフレッシュ済み領域と呼ばれる。リフレッシュ周期内の第３のフレーム画像について、当該画像は、第２のフレーム画像中のリフレッシュ済み領域、１つのイントラリフレッシュ領域、及び未リフレッシュ領域を含み、第３のフレーム画像中の第２のフレーム画像のリフレッシュ済み領域及び現在画像フレームに含まれるイントラリフレッシュ領域は、まとめて第３のフレーム画像のリフレッシュ済み領域と呼ばれる。リフレッシュ周期内の第４のフレーム画像について、当該画像は、第３のフレーム画像中のリフレッシュ済み領域、及び１つのイントラリフレッシュ領域を含み、第４のフレーム画像中の第３のフレーム画像のリフレッシュ済み領域及び現在画像フレームに含まれるイントラリフレッシュ領域は、まとめて第４のフレーム画像のリフレッシュ済み領域と呼ばれる。前には完全な画像を４つの強制イントラ領域に分割したので、第４のフレーム画像には未リフレッシュ領域がない。

【0053】

また、未リフレッシュ領域は、ダーティ（ｄｉｒｔｙ）領域とも呼ばれ、符号化順における前のフレームのリフレッシュ済み領域と現在フレームの強制イントラ領域は、まとめて現在フレームのクリーン（ｃｌｅａｎ）領域とも呼ばれ、両者の境界線が図１における境界線である。本発明の実施例に係る仮想境界は、ｃｌｅａｎ領域とｄｉｒｔｙ領域とを区別するための境界線でもあり、ただし、境界線の設定方式がより柔軟であり、折れ線の境界線であってもよく、垂直境界線に限定されない。本発明の実施例において、いずれかのイントラリフレッシュフレームについて、当該イントラリフレッシュフレームのリフレッシュ済み領域と未リフレッシュ領域との間の仮想境界とは、リフレッシュ済み領域と未リフレッシュ領域との間の境界線であり、当該境界線は当該イントラリフレッシュフレームのｃｌｅａｎ領域とｄｉｒｔｙ領域との間の境界線でもある。

【0054】

図２は、本発明の実施例にて提供されるイントラリフレッシュメカニズムを採用した画像シーケンスの概略図である。図２に示すように、オリジナル画像シーケンス（図２においてオリジナルシーケンスと略称される）におけるＩ２（Ｉフレーム）、Ｐ８（Ｐフレーム）、Ｐ９（Ｐフレーム）、Ｐ１０（Ｐフレーム）の４つのフレームを、Ｘ１、Ｘ２、Ｘ３、Ｘ４でマーキングされる４つのイントラリフレッシュフレームに置換して、イントラリフレッシュメカニズムに基づく画像シーケンス（図２においてイントラリフレッシュシーケンスと略称される）を得る。この４つのイントラリフレッシュフレームは、いずれも１つの強制イントラ領域である領域を有し、他の領域の符号化モードがインターモードの採用を許容されるので、これら４つのイントラリフレッシュフレームを、ビットレートが元のＩ２フレームのビットレートの１／４に近似する４つの「大きいＰフレーム」とみなすことができる。また、これら４つのイントラリフレッシュフレームがＩＲフレームと略称されてもよい。

【0055】

図２に示す画像シーケンスにおいて、ランダムアクセス方式では、オリジナル画像シーケンスにおけるＩ２フレームがランダムアクセスポイントであると仮定し、当該Ｉ２フレーム以降のフレームが独立して復号化することができるので、Ｐ８フレームは、Ｉ２フレームしか参照できず、Ｐ７フレームを参照することができない。しかしながら、イントラリフレッシュメカニズムに基づく画像シーケンス（図２においてイントラリフレッシュシーケンスと略称される）において、Ｘ１フレームがランダムアクセスポイントであり、Ｘ１フレーム中の未リフレッシュ領域中のインター符号化領域は、Ｐ７フレームを参照することができるが、正確に復号化できない（Ｐ７フレームはランダムアクセス時に取得されていないからである）ことがある。同様に、Ｘ２フレーム、Ｘ３フレームの未リフレッシュ領域も正確に復号化できないことがある。Ｘ１～Ｘ４フレームが全てリフレッシュされると、この場合、Ｘ４フレームのリフレッシュ済み領域のインター領域は、Ｘ１～Ｘ３の強制イントラ領域のビットストリームに基づいて復号化して得られ、Ｘ４フレームのリフレッシュ済み領域の強制イントラ領域は、強制イントラ復号化モードに基づいて得られるので、未リフレッシュ領域のないＸ４フレームは、完全で正確に復号化することができる。したがって、図２のＸ１、Ｘ２、Ｘ３、Ｘ４フレームは、１つのリフレッシュ周期であり、リフレッシュ周期において最後のフレームのみが完全で正確に復号化できるので、当該フレームをリカバリポイント（Ｒｅｃｏｖｅｒｙ Ｐｏｉｎｔ）と呼ぶ。

【0056】

なお、ランダムアクセスの場合、リカバリポイント及びそれ以降の画像フレームのみがユーザーに表示されるが、ランダムアクセスポイントが位置するリフレッシュ周期における他の画像は、正確に復号化できないことがあるので、いずれも表示されない。非ランダムアクセスの場合、全ての画像フレームが完全で正確に復号化できるので、全ての画像フレームがいずれもユーザーに表示される。

【0057】

また、イントラリフレッシュメカニズムに基づいて符号化されたビットストリームの復号化機能を保証するために、現在のイントラリフレッシュメカニズムは、復号化モードにおけるイントラモード／インターモード及びループフィルタに対して、以下の条件で制限する。

【0058】

条件１において、いずれかのイントラリフレッシュフレームについて、当該イントラリフレッシュフレームにおけるリフレッシュ済み領域のブロックは、同じリフレッシュ周期内の他のイントラリフレッシュフレームのリフレッシュ済み領域を参照して復号化することしかできず、他のイントラリフレッシュフレームの未リフレッシュ領域を参照して復号化することができず、ＴＭＶＰ（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、時間的動きベクトル予測）メカニズムにおける現在ブロックの参照フレームにおけるコロケーテッド（ｃｏ－ｌｏｃａｔｅｄ）ブロックは、参照フレームの未リフレッシュ領域にあってはならず、ここで、コロケーテッドブロックとは、参照フレームにおいて現在ブロックと同じ位置にある画像ブロックであり、すなわち、現在画像フレームの画像ブロックのＭＶ（ｍｏｔｉｏｎ ｖｅｃｔｏｒ、動きベクトル）情報が指す領域は、参照フレームの未リフレッシュ領域にあってはならない。なお、本発明の実施例において、現在ブロックと現在画像ブロックとは同じ概念であり、説明の便宜上、現在画像ブロックを現在ブロックと略称してもよい。

【0059】

条件２において、いずれかのイントラリフレッシュフレームについて、当該イントラリフレッシュフレームにおける未リフレッシュ領域のブロックの復号化の時に参照制限がない。

【0060】

条件３において、画像シーケンス内のイントラリフレッシュフレームではない画像フレームについて、当該画像フレームのブロックは、所在するランダムアクセス周期内のイントラリフレッシュフレームのリフレッシュ済み領域を参照して復号化することを許容されるが、所在するランダムアクセス周期内のイントラリフレッシュフレームの未リフレッシュ領域を参照して復号化することができず、ＴＭＶＰメカニズムにおける現在ブロックの参照フレームにおけるコロケーテッドブロックも参照フレームの未リフレッシュ領域にあってはならない。

【0061】

条件４において、いずれかのイントラリフレッシュフレームについて、ループフィルタは、当該イントラリフレッシュフレームのリフレッシュ済み領域と未リフレッシュ領域との境界線を越えることができず、すなわち、リフレッシュ済み領域と未リフレッシュ領域との間の仮想境界に対してループフィルタ操作を行わない。

【0062】

現在のＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、汎用動画符号化）規格におけるＧＤＲ（Ｇｒａｄｕａｌ Ｄｅｃｏｄｉｎｇ Ｒｅｆｒｅｓｈ、段階的復号リフレッシュ）技術は、イントラリフレッシュメカニズムを提案する。当該イントラリフレッシュメカニズムの具体的な内容は、以下のとおりである。

【0063】

まずリフレッシュ済み領域と未リフレッシュ領域とを垂直分割方式で分割する。垂直分割方式では、リフレッシュ済み領域と未リフレッシュ領域との間の仮想境界は、画像座標系のＹ軸に平行な境界線である。分割境界は、最小ＣＵ（ｃｏｄｉｎｇ ｕｎｉｔ、符号化ユニット）の辺（ＣＵの最小は８画素）に位置合わせされ、すなわち、リフレッシュ済み領域の幅が最小ＣＵの幅の整数倍であり、リフレッシュ済み領域の高さがイントラリフレッシュフレームの画像の高さである。

【0064】

次に、異なるイントラリフレッシュフレームにおける強制インター領域を、等間隔に分割し、且つ強制インター領域の幅＝画像フレームの全幅／リフレッシュ周期とする。リフレッシュ周期とは、正確に復号化して完全な画像フレームを得ることに必要なイントラリフレッシュフレームの数であり、例えば、図３のリフレッシュ周期は６である。ここで、リフレッシュ周期は、符号化側で設定することができ、例えば、符号化側は、イントラリフレッシュフレームのビットストリームの画像ヘッダパラメータｒｅｃｏｖｅｒｙ＿ｐｏｃ＿ｃｎｔで当該リフレッシュ周期を設定することができ、図３に示す画像シーケンスについて、ｒｅｃｏｖｅｒｙ＿ｐｏｃ＿ｃｎｔ＝６とすることにより、当該イントラリフレッシュフレームの所在するリフレッシュ周期が６であることを示すことができる。また、リフレッシュ順は、ビットストリームにおいて明確に示される必要がなく、デフォルトで左から右への順であり、復号化側は、デフォルトで各イントラリフレッシュフレームを左から右へのリフレッシュ順に復号化する。

【0065】

また、いずれかの画像フレームについて、符号化側は、さらに、画像フレームのビットストリームの画像ヘッダパラメータｇｄｒ＿ｐｉｃ＿ｆｌａｇに基づいて、現在画像フレームがイントラリフレッシュフレームであるか否かをマーキングすることができる。例えば、ｇｄｒ＿ｐｉｃ＿ｆｌａｇ＝１の際にしては、現在画像フレームがイントラリフレッシュフレームであることを示し、ｇｄｒ＿ｐｉｃ＿ｆｌａｇ＝０の際にしては、現在画像フレームがイントラリフレッシュフレームでないことを示す。

【0066】

さらに、ＶＣＣ規格におけるイントラリフレッシュメカニズムは同様に、上記条件１～条件４の４つの制限条件を含むが、ここではその説明が省略される。

【0067】

上述のＶＣＣ規格におけるイントラリフレッシュメカニズムにおける強制イントラ領域は、等間隔の垂直帯状領域となり、画像内容に応じて適応的に領域分割ができないため、柔軟性がない。また、ＶＣＣ規格におけるイントラリフレッシュメカニズムでは、リフレッシュ済み領域と未リフレッシュ領域との仮想境界を越えるループフィルタを許容しないため、当該仮想境界上の画質が悪いという問題がある。

【0068】

上記ＶＣＣ規格におけるイントラリフレッシュメカニズムで発生する問題点に基づいて、本発明の実施例は、適応型イントラリフレッシュメカニズムに基づく符号化復号化方法を提供し、当該方法は、より柔軟な強制イントラ領域分割方法を提供し、分割方式が符号化側で適用可能であり、本発明の実施例にて提供される方法により、画像内容に応じてリフレッシュ済み領域と未リフレッシュ領域とを適応的に分割することができ、強制イントラ領域の分割の柔軟性を向上させる。また、リフレッシュ済み領域と未リフレッシュ領域との間の仮想境界を、画像中のオブジェクト境界と可能な限り一致させることができ、それにより仮想境界をループフィルタできないことによる復号化後の画質への影響を回避する。

【0069】

本発明の実施例にて提供される方法は、画像内容に応じてリフレッシュ済み領域と未リフレッシュ領域とを適応的に分割することができるため、本発明の実施例に係るイントラリフレッシュフレームは、適応型イントラリフレッシュフレームと称されてもよく、その後の説明の便宜上、本発明の実施例に係る適応型イントラリフレッシュフレームをイントラリフレッシュフレーム又はリフレッシュフレームと略称する。

【0070】

以下、本発明の実施例にて提供される適応型イントラリフレッシュメカニズムに基づく符号化復号化方法を詳細に解釈して説明する。

【0071】

図４は、本発明の実施例にて提供される適応型イントラリフレッシュメカニズムに基づく符号化方法である。図４に示すように、当該方法は、以下のステップ４０１、４０２を含む。

【0072】

ステップ４０１において、符号化側は、現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定する。

【0073】

ユーザーが動画にアクセスする過程で、通常、ランダムアクセスのシーンが存在する。ランダムアクセスのシーンでは、復号化側は、ランダムアクセスポイントの前のビットストリームを取得していないので、ランダムアクセスポイントの後のビットストリームに基づいて復号化する必要があり、このようなシーンでは、復号化側による正確な復号化を可能にするためには、ランダムアクセスポイントの後のビットストリームが適応型イントラリフレッシュ技術をサポートすることが必要となる。

【0074】

上記シーンに基づき、符号化側は、以下の方式により現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定し得る。現在フレームがランダムアクセスポイントである場合、現在フレームが適応型イントラリフレッシュ技術をサポートするが、符号化順における現在フレームの前のフレームが適応型イントラリフレッシュ技術をサポートしないと決定する。前記現在フレームがランダムアクセスのリカバリポイントである場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートすると決定する。前記現在フレームがランダムアクセスポイントとランダムポイントアクセスのリカバリポイントとの間のいずれかのフレームの画像である場合、前記現在フレームが適応型イントラリフレッシュ技術をサポートすると決定する。

【0075】

現在フレームが適応型イントラリフレッシュ技術をサポートする場合、符号化側は現在フレームのリフレッシュ済み領域と未リフレッシュ領域とを決定する必要があり、それにより、その後に現在フレームのビットストリームを符号化する時、現在フレームのリフレッシュ済み領域と未リフレッシュ領域とを区別する仮想境界の位置を示す仮想境界位置マーキング情報をビットストリームに符号化できる。

【0076】

理解の便宜上、ここで、本発明の実施例にて提供される仮想境界を解釈して説明する。

【0077】

上記仮想境界は、現在フレームにおけるリフレッシュ済み領域の境界線であってもよいし、現在フレームにおける未リフレッシュ領域の境界線であってもよいし、分割して得られたリフレッシュ済み領域と未リフレッシュ領域との分割境界線であってもよい。これらの３つの仮想境界の例は、本質的に同じである。

【0078】

それ以後の実施例では、仮想境界が分割して得られたリフレッシュ済み領域と未リフレッシュ領域との分割境界線であることを例に説明する。すなわち、当該仮想境界位置マーキング情報は、現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域との間の仮想境界の位置を示すことができ、仮想境界の位置は、具体的に、現在フレームの水平方向における当該仮想境界の位置と、現在フレームの垂直方向における当該仮想境界の位置と、を含み得る。

【0079】

なお、本発明の実施例にて提供される適応型イントラリフレッシュ手段における仮想境界は、上記解釈に限定されず、仮想境界は、前述の３つの仮想境界例のいずれか１つであってもよい。

【0080】

ステップ４０２において、現在フレームが適応型イントラリフレッシュ技術をサポートする場合、符号化側は、現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤと現在フレームの仮想境界位置マーキング情報を付加し、仮想境界位置マーキング情報は仮想境界の位置を示すために用いられ、仮想境界は少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられる。

【0081】

なお、拡張データとは、符号化された現在フレームのビットストリームにおいて、画像ヘッダと画像データとの間にある一部のデータである。何らかの規格では、拡張データは、ＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ ｅｎｈａｎｃｅｍｅｎｔ ｉｎｆｏｒｍａｔｉｏｎ、補足強化情報）とも呼ばれる。

【0082】

現在、拡張データには、複数の動画拡張ＩＤを示すことができ、各動画拡張ＩＤにおいて、引き続き、いくつかの復号化パラメータを示すことができる。したがって、本発明の実施例では、拡張データにおいて新しい動画拡張識別子を拡張してもよく、拡張された動画拡張識別子は、適応型イントラリフレッシュ動画拡張ＩＤと呼ばれてもよい。当該適応型イントラリフレッシュ動画拡張ＩＤは、拡張データに仮想境界の位置に関するパラメータ（すなわち、仮想境界位置マーキング情報）がさらに付加されていることを復号化側に通知するために用いられ、それにより、その後に、復号化側は、現在フレームが適応型イントラリフレッシュメカニズムをサポートするか否かを決定することができ、さらに、仮想境界位置マーキング情報に基づいて現在フレームのビットストリームを復号化する。

【0083】

表１は、本発明の実施例にて提供される拡張データのシンタックス要素の概略表である。表１に示すように、本発明の実施例における拡張された適応型イントラリフレッシュ動画拡張ＩＤは「１１１０」である。このシーンでは、拡張データは、仮想境界の位置に関するパラメータを示すための「ａｉｒ＿ｐａｒａｍｅｔｅｒｓ＿ｅｘｔｅｎｓｉｏｎ」フィールドをさらに含む。

【表1】

【0084】

なお、上記表１は、本発明の実施例にて提供される拡張データのシンタックス要素の選択可能な例に過ぎず、本発明の実施例は、これらのシンタックス要素の具体的な表現形式を限定しない。さらに、表１における他のシンタックス要素の解釈は、関連する規格を参照することができ、本発明の実施例は、これを限定しない。

【0085】

１つの可能な実施形態において、上記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と、第２の仮想境界位置マーキング情報とを含み得る。ここで、第１の仮想境界位置マーキング情報は、現在フレームの水平方向における仮想境界の画素位置を示すために用いられ、第２の仮想境界位置マーキング情報は、現在フレームの垂直方向における仮想境界の画素位置を示すために用いられる。

【0086】

この場合、表２に示すように、上記表１のシンタックス要素ａｉｒ＿ｐａｒａｍｅｔｅｒｓ＿ｅｘｔｅｎｓｉｏｎ（）は、第１の仮想境界位置マーキング情報と、第２の仮想境界位置マーキング情報とを含み得る。表２は、本発明の実施例にて提供される別のシンタックス要素の概略表であり、表２に示すように、ａｉｒ＿ｐａｒａｍｅｔｅｒｓ＿ｅｘｔｅｎｓｉｏｎ（）は、ｅｘｔｅｎｓｉｏｎ＿ｉｄ（前述した適応型イントラリフレッシュ動画拡張ＩＤを識別するために用いられる）と、ａｉｒ＿ｂｏｕｎｄ＿ｘ（第１の仮想境界位置マーキング情報を識別するために用いられる）と、ａｉｒ＿ｂｏｕｎｄ＿ｙ（第２の仮想境界位置マーキング情報を識別するために用いられる）と、を含む。

【表2】

【0087】

なお、上記仮想境界位置マーキング情報の実施例は、列挙的なものに過ぎず、本発明の実施例にて提供される仮想境界位置マーキング情報の機能を限定するものではなく、現在フレームの水平方向における現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域との間の仮想境界の位置、及び現在フレームの垂直方向における当該仮想境界の位置を示すことができるマーキング情報は、いずれも本発明の実施例にて提供される仮想境界位置マーキング情報の範囲内にある。

【0088】

現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定した後、現在フレームのビットストリームを符号化することができる。具体的には、現在フレームが適応型イントラリフレッシュ技術をサポートしない場合、現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤを付加せず、又は現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤを付加するが、現在フレームの拡張データに付加した第１の仮想境界位置マーキング情報の値又は第２の仮想境界位置マーキング情報の値を０とする。

【0089】

それに応じて、現在フレームが適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤ及び前記現在フレームの仮想境界位置マーキング情報を付加し、且つ現在フレームの拡張データに付加した第１の仮想境界位置マーキング情報の値を０よりも大きくし、且つ第２の仮想境界位置マーキング情報の値も０よりも大きくする。

【0090】

例示的に、上記第１の仮想境界位置マーキング情報は、現在フレームの水平方向における仮想境界のｘ座標であり、第２の仮想境界位置マーキング情報は、現在フレームの垂直方向における仮想境界のｙ座標である。このようなシーンでは、現在フレームにおけるリフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅がｘ座標であり、高さがｙ座標である矩形領域であり、現在フレームにおける未リフレッシュ領域とは、現在フレームにおいてリフレッシュ済み領域以外の他の領域である。

【0091】

また、例示的に、第１の仮想境界位置マーキング情報の値は、現在フレームの水平方向における仮想境界の占める幅が何個のＬＣＵの幅であるかを示してもよい。第２の仮想境界位置マーキング情報の値は、現在フレームの垂直方向における仮想境界の占める高さが何個のＬＣＵの高さであるかを示してもよい。

【0092】

この場合、表２のａｉｒ＿ｂｏｕｎｄ＿ｘは、画像におけるリフレッシュ済み領域と未リフレッシュ領域との間の仮想境界のｘ座標を示し、当該ｘ座標は、ＬＣＵの幅を単位とする。表２のａｉｒ＿ｂｏｕｎｄ＿ｙは、画像中におけるリフレッシュ済み領域と未リフレッシュ領域との間の仮想境界のｙ座標を示し、当該ｙ座標は、ＬＣＵの高さを単位とする。

【0093】

例えば、第１の仮想境界位置マーキング情報の値が２であり、第２の仮想境界位置マーキング情報の値が３である場合、現在のリフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とし、２倍のＬＣＵの幅をｘ座標とし、３倍のＬＣＵの高さをｙ座標とする矩形領域であることを表す。

【0094】

このようなシーンでは、第１の仮想境界位置マーキング情報の精度は１つのＬＣＵの幅であり、第２の仮想境界位置マーキング情報の精度は１つのＬＣＵの高さである。

【0095】

なお、上記は、本発明の実施例にて提供される境界精度を例示的に説明する選択可能な実施例であり、本発明の実施例に係る境界精度の範囲を限定しない。ここで、境界精度は、リフレッシュ済み領域の幅精度と高さ精度とを含む。ここで、リフレッシュ済み領域の幅精度とは、リフレッシュ済み領域の最小幅であり、通常、リフレッシュ済み領域の実際の幅は、当該幅精度の整数倍に設定される。リフレッシュ済み領域の高さ精度とは、リフレッシュ済み領域の最低高さであり、通常、リフレッシュ済み領域の実際の高さは、当該高さ精度の整数倍に設定される。

【0096】

図５は、本発明の実施例にて提供される適応型イントラリフレッシュメカニズムにおけるイントラリフレッシュフレームの領域分布概略図である。図５に示すように、イントラリフレッシュフレームのリフレッシュ済み領域とは、座標（０，０）を左上隅とする、幅がｘ座標ＡｉｒＢｏｕｎｄＸであり、高さがｙ座標ＡｉｒＢｏｕｎｄＹである矩形領域であり、当該イントラリフレッシュフレームの未リフレッシュ領域とは、当該イントラリフレッシュフレームにおいてリフレッシュ済み領域以外の他の領域である。

【0097】

すなわち、図５のイントラリフレッシュフレームは、リフレッシュ済み領域と、未リフレッシュ領域とを含む。リフレッシュ済み領域は、現在画像又は他の画像のリフレッシュ済み領域のみを用いて復号化し、未リフレッシュ領域は、現在画像又は他の画像を用いて復号化してもよい。

【0098】

図５のＰｉｃｔｕｒｅＷｉｄｔｈＩｎＬｃｕは、画像幅をＬＣＵの幅で割った値を示し、ＰｉｃｔｕｒｅＨｅｉｇｈｔＩｎＬｃｕは、画像高さをＬＣＵの高さで割った値を示す。図５に示すように、ＡｉｒＢｏｕｎｄＸの値は、ＰｉｃｔｕｒｅＷｉｄｔｈＩｎＬｃｕ以下とすべきである。ＡｉｒＢｏｕｎｄＹの値は、ＰｉｃｔｕｒｅＨｅｉｇｈｔＩｎＬｃｕ以下とすべきである。

【0099】

さらに、上記ＡｉｒＢｏｕｎｄＸ、ＡｉｒＢｏｕｎｄＹは、復号化過程において、シンタックスにおける第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報に対して設定される２つの変数である。この２つの変数は、依然として画像におけるリフレッシュ済み領域のｘ座標とｙ座標とを示すために用いられる。具体的に、これら２つの変数の値については、その後に復号化側で詳細に説明し、ここでは詳しく説明しない。

【0100】

さらに、現在フレームがランダムアクセスのリカバリポイントである場合、符号化側は、現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ第１の仮想境界位置マーキング情報により示される仮想境界の画素位置が現在フレームの右側境界に等しいか又はそれを超え、且つ第２の仮想境界位置マーキング情報により示される仮想境界の画素位置が現在フレームの下側境界に等しいか又はそれを超えると決定する。それにより、復号化側は、その後、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とに基づいて、現在フレームがランダムアクセスのリカバリポイントであるか否かを判断することができる。

【0101】

以上のように、現在フレームのビットストリームにおける拡張データに、適応型イントラリフレッシュ動画拡張ＩＤ及び仮想境界位置マーキング情報が新たに追加され、当該仮想境界位置マーキング情報は、仮想境界の位置を示すことができ、且つ当該仮想境界は、少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるため、符号化側は、現在フレームのリフレッシュ領域を分割するとき、実際の需要に応じて当該仮想境界を任意に設定することができ、続いて当該仮想境界位置マーキング情報を通じて当該仮想境界の位置を示せばよく、それによりリフレッシュ領域分割の柔軟性を向上させ、すなわち、本発明の実施例は、拡張データを通じて、リフレッシュ領域を適応的に分割することを実現する適応型イントラリフレッシュメカニズムを提供する。

【0102】

以下、図６に示す実施例により、本発明の実施例にて提供されるイントラリフレッシュメカニズムに基づく復号化方法を詳細に解釈して説明する。図６に示すように、当該復号化方法は、ステップ６０１～ステップ６０３を含む。

【0103】

ステップ６０１において、現在フレームのビットストリームを受信する。

【0104】

符号化側は、図４に示す方法により符号化を行った後、各画像のビットストリームを復号化側に送信することができ、復号化側では、図６に示す実施例により画像の復号化を行う。

【0105】

ステップ６０２において、現在フレームのビットストリームに拡張データが存在し、且つ拡張データに適応型イントラリフレッシュ動画拡張ＩＤが付加されている場合、拡張データに付加された仮想境界位置マーキング情報を取得し、仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、仮想境界は、少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられる。

【0106】

適応型イントラリフレッシュ動画拡張ＩＤ及び仮想境界位置マーキング情報の関連解釈については、同様に符号化側の実施例におけるステップ４０１を参照することができ、ここではその説明が省略される。

【0107】

また、図４に示す実施例から分かるように、現在フレームのビットストリームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在しない場合、現在フレームが適応型イントラリフレッシュ技術をサポートしないと決定する。

【0108】

例えば、表２に示すシンタックス要素について、現在フレームのビットストリームの拡張データにおいて動画拡張ＩＤである「１１１０」が見つけられない場合、現在フレームが適応型イントラリフレッシュ技術をサポートしないと決定し、この場合、他の復号化方式により現在フレームのビットストリームを復号化することができ、本発明の実施例は、適応型イントラリフレッシュ技術をサポートしない場合の復号化過程を限定しない。

【0109】

ステップ６０３において、当該仮想境界位置マーキング情報に基づいて、現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定する。

【0110】

図４に示す実施例から分かるように、拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在する場合、現在フレームが適応型イントラリフレッシュ技術をサポートするとは限らない。したがって、ステップ６０２により仮想境界位置マーキング情報を取得した後、仮想境界位置マーキング情報に基づいて、現在フレームが適応型イントラリフレッシュ技術をサポートするか否かをさらに判断する必要がある。

【0111】

図４に示す実施例から分かるように、仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含む。ここで、第１の仮想境界位置マーキング情報は、現在フレームの水平方向における仮想境界の画素位置を示すために用いられ、第２の仮想境界位置マーキング情報は、現在フレームの垂直方向における仮想境界の画素位置を示すために用いられる。

【0112】

このようなシーンでは、ステップ６０３の実現過程は以下のとおりである。第１の仮想境界位置マーキング情報の値及び第２の仮想境界位置マーキング情報の値がいずれも０よりも大きい場合、現在フレームが適応型イントラリフレッシュ技術をサポートすると決定する。それに応じて、第１の仮想境界位置マーキング情報の値又は第２の仮想境界位置マーキング情報の値が０に等しい場合、現在フレームが適応型イントラリフレッシュ技術をサポートしないと決定する。

【0113】

例えば、表１及び表２に示すシンタックス要素について、拡張データを復号化する時に、ビットストリームに適応型イントラリフレッシュパラメータａｉｒ＿ｂｏｕｎｄ＿ｘ及びａｉｒ＿ｂｏｕｎｄ＿ｙが存在するか否かを判断する。これらの２つのパラメータが存在する場合、図５における現在フレームのＡｉｒＢｏｕｎｄＸの値をａｉｒ＿ｂｏｕｎｄ＿ｘの値に等しくし、現在フレームのＡｉｒＢｏｕｎｄＹの値をａｉｒ＿ｂｏｕｎｄ＿ｙの値に等しくする。これらの２つのパラメータが存在しない場合、現在フレームのＡｉｒＢｏｕｎｄＸの値を０とし、現在フレームのＡｉｒＢｏｕｎｄＹの値を０とする。

【0114】

ここで、現在フレームのＡｉｒＢｏｕｎｄＸ及びＡｉｒＢｏｕｎｄＹは、既に前述したように解釈して説明され、ここではその説明が省略される。

【0115】

現在フレームのＡｉｒＢｏｕｎｄＸ及びＡｉｒＢｏｕｎｄＹを得た後、ＡｉｒＢｏｕｎｄＸ及びＡｉｒＢｏｕｎｄＹがいずれも０よりも大きい場合、現在フレームが適応型イントラリフレッシュ技術をサポートすると決定する。ＡｉｒＢｏｕｎｄＸ及び／又はＡｉｒＢｏｕｎｄＹが０に等しい場合、現在フレームが適応型イントラリフレッシュ技術をサポートしないと決定する。

【0116】

さらに、復号化側は、現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ復号化順における現在フレームの前のフレームが適応型イントラリフレッシュ技術をサポートしないと決定した場合、現在フレームがランダムアクセスポイントであると決定する。ここで、前のフレームが適応型イントラリフレッシュ技術をサポートしないことは、前のフレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在しないこと、又は、前のフレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在するが、前のフレームの第１の仮想境界位置マーキング情報及び／又は第２の仮想境界位置マーキング情報の値が０に等しいことを含む。

【0117】

それに応じて、現在フレームが適応型イントラリフレッシュ技術をサポートすると決定し、且つ現在フレームの第１の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が現在フレームの右側境界に等しいか又はそれを超えると決定し、且つ現在フレームの第２の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が現在フレームの下側境界に等しいか又はそれを超えると決定した場合、現在フレームがランダムアクセスのリカバリポイントであると決定する。

【0118】

例えば、表１及び表２に示すシンタックス要素について、現在フレームの拡張データに、パラメータａｉｒ＿ｂｏｕｎｄ＿ｘ及びａｉｒ＿ｂｏｕｎｄ＿ｙが存在し、且つ両方の値がいずれも０よりも大きく、そして、現在フレームの復号化順における前のフレームのパラメータａｉｒ＿ｂｏｕｎｄ＿ｘ及びａｉｒ＿ｂｏｕｎｄ＿ｙが存在しないか、又は存在し、且つ少なくとも一方が０に等しい場合、現在フレームはランダムアクセスポイントであり、現在フレームからランダムアクセスを行うことが許容される。

【0119】

現在フレームの拡張データに、パラメータａｉｒ＿ｂｏｕｎｄ＿ｘ及びａｉｒ＿ｂｏｕｎｄ＿ｙが存在し、且つａｉｒ＿ｂｏｕｎｄ＿ｘの値がＰｉｃｔｕｒｅＷｉｄｔｈＩｎＬｃｕに等しく、ａｉｒ＿ｂｏｕｎｄ＿ｙの値がＰｉｃｔｕｒｅＨｅｉｇｈｔＩｎＬｃｕに等しい場合、現在フレームはリカバリポイントであり、現在フレームから以降の各フレーム画像はいずれも正確に復号化することができる。

【0120】

さらに、前記現在フレームがランダムアクセスに用いられる場合、前記現在フレームを復号化する前に、復号化側は有効なシーケンスヘッダを取得する必要がある。当該シーケンスヘッダに付加された情報に基づいて、前記現在フレームを復号化する。

【0121】

ここで、有効なシーケンスヘッダは、ビットストリームにおいて、現在フレームのビットストリームよりも前に位置し、且つ現在フレームのビットストリームに最も近いシーケンスヘッダであってもよいし、システムレイヤから受信したシーケンスヘッダであってもよい。シーケンスヘッダに付加された情報は、ビットストリームのプロファイル、レベル、各種の技術のイネーブルスイッチ、画像の解像度やフレームレートなどの復号化過程に使用が必要なシーケンスレベルの情報を含む。

【0122】

なお、本発明の実施例において、仮想境界の位置情報を任意に指定することができるので、本発明の実施例は、水平、垂直、及び斜めリフレッシュをサポートし、リフレッシュ方向は左上から右下までであってもよく、ここでは詳細な説明が省略される。

【0123】

以上のように、現在フレームのビットストリームにおける拡張データに、適応型イントラリフレッシュ動画拡張ＩＤ及び仮想境界位置マーキング情報が新たに追加され、当該仮想境界位置マーキング情報は、仮想境界の位置を示すことができ、且つ当該仮想境界は、少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるため、符号化側は、現在フレームのリフレッシュ領域を分割するとき、実際の需要に応じて当該仮想境界を任意に設定することができ、続いて当該仮想境界位置マーキング情報を通じて当該仮想境界の位置を示せばよく、それによりリフレッシュ領域分割の柔軟性を向上させ、すなわち、本発明の実施例は、拡張データを通じて、リフレッシュ領域を適応的に分割することを実現する適応型イントラリフレッシュメカニズムを提供する。

【0124】

図７は、本発明の実施例にて提供される復号化装置の構造の概略図である。図７に示すように、当該復号化装置７００は、
現在フレームのビットストリームを受信するための受信モジュール７０１と、
現在フレームのビットストリームに拡張データが存在し、且つ拡張データに適応型イントラリフレッシュ動画拡張ＩＤが付加されている場合、拡張データに付加された仮想境界位置マーキング情報を取得するための処理モジュール７０２であって、仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、仮想境界は、少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられる処理モジュール７０２と、を含み、
処理モジュール７０２は、さらに、仮想境界位置マーキング情報に基づいて、現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定する。

【0125】

上記装置に基づき、１つの可能な実現形態において、処理モジュールは、さらに、現在フレームのビットストリームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在しない場合、現在フレームが適応型イントラリフレッシュ技術をサポートしないと決定するために用いられる。

【0126】

上記装置に基づき、１つの可能な実現形態において、仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、第１の仮想境界位置マーキング情報は、現在フレームの水平方向における仮想境界の画素位置を示すために用いられ、第２の仮想境界位置マーキング情報は、現在フレームの垂直方向における仮想境界の画素位置を示すために用いられる。

【0127】

上記装置に基づき、１つの可能な実現形態において、第１の仮想境界位置マーキング情報は、現在フレームの水平方向における仮想境界のｘ座標であり、第２の仮想境界位置マーキング情報は、現在フレームの垂直方向における仮想境界のｙ座標であり、リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅がｘ座標であり、高さがｙ座標である矩形領域であり、未リフレッシュ領域とは、現在フレームにおいてリフレッシュ済み領域以外の他の領域である。

【0128】

上記装置に基づき、１つの可能な実現形態において、処理モジュールは、第１の仮想境界位置マーキング情報の値及び第２の仮想境界位置マーキング情報の値がいずれも０よりも大きい場合、現在フレームが適応型イントラリフレッシュ技術をサポートすると決定し、第１の仮想境界位置マーキング情報の値及び／又は第２の仮想境界位置マーキング情報の値が０に等しい場合、現在フレームが適応型イントラリフレッシュ技術をサポートしないと決定するために用いられる。

【0129】

上記装置に基づき、１つの可能な実現形態において、処理モジュールは、さらに、現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ復号化順における現在フレームの前のフレームが適応型イントラリフレッシュ技術をサポートしない場合、現在フレームはランダムアクセスポイントであると決定するために用いられ、ここで、前のフレームが適応型イントラリフレッシュ技術をサポートしないことは、前のフレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在しないこと、又は、前のフレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤが存在するが、前のフレームの第１の仮想境界位置マーキング情報及び／又は第２の仮想境界位置マーキング情報の値が０に等しいことを含む。

【0130】

上記装置に基づき、１つの可能な実現形態において、処理モジュールは、さらに、現在フレームが適応型イントラリフレッシュ技術をサポートすると決定し、現在フレームの第１の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が現在フレームの右側境界に等しいか又はそれを超えると決定し、且つ現在フレームの第２の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が現在フレームの下側境界に等しいか又はそれを超えると決定した場合、現在フレームがランダムアクセスのリカバリポイントであると決定するために用いられる。

【0131】

上記装置に基づき、１つの可能な実現形態において、第１の仮想境界位置マーキング情報の精度は、１つのＬＣＵの幅であり、第２の仮想境界位置マーキング情報の精度は、１つのＬＣＵの高さである。

【0132】

上記装置に基づき、１つの可能な実現形態において、処理モジュールは、さらに、現在フレームがランダムアクセスのために用いられる場合、現在フレームを復号化する前に、１つの有効なシーケンスヘッダを取得し、シーケンスヘッダに付加された情報に基づいて現在フレームを復号化するために用いられる。

【0133】

以上のように、現在フレームのビットストリームにおける拡張データに、適応型イントラリフレッシュ動画拡張ＩＤ及び仮想境界位置マーキング情報が新たに追加され、当該仮想境界位置マーキング情報は、仮想境界の位置を示すことができ、且つ当該仮想境界は、少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるため、符号化側は、現在フレームのリフレッシュ領域を分割するとき、実際の需要に応じて当該仮想境界を任意に設定することができ、続いて当該仮想境界位置マーキング情報を通じて当該仮想境界の位置を示せばよく、それによりリフレッシュ領域分割の柔軟性を向上させ、すなわち、本発明の実施例は、拡張データを通じて、リフレッシュ領域を適応的に分割することを実現する適応型イントラリフレッシュメカニズムを提供する。

【0134】

なお、上記実施例にて提供される復号化装置が適応型イントラリフレッシュメカニズムに基づく復号化方法を実施するときは、単に上記各機能モジュールの分割を例に説明するが、実際に利用する際に、需要に応じて、上記機能を異なる機能モジュールに割り当てて行わせ、すなわち、デバイスの内部構造を異なる機能モジュールに分割して、以上説明した機能の全部又は一部を行うようにしてもよい。また、上記実施例にて提供される復号化装置は、適応型イントラリフレッシュメカニズムに基づく復号化方法の実施例の思想と同じであり、その具体的な実現過程は、方法の実施例を詳しく参照されたく、ここではその説明が省略される。

【0135】

図８は、本発明の実施例にて提供される符号化装置の構造の概略図である。図８に示すように、当該符号化装置８００は、現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するための符号化モジュール８０１を含む。符号化モジュールは、さらに、現在フレームが適応型イントラリフレッシュ技術をサポートする場合、現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤと現在フレームの仮想境界位置マーキング情報とを付加するために用いられ、仮想境界位置マーキング情報は仮想境界の位置を示すために用いられ、仮想境界は少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられる。

【0136】

上記装置に基づき、１つの可能な実現形態において、仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、第１の仮想境界位置マーキング情報は、現在フレームの水平方向における仮想境界の画素位置を示すために用いられ、第２の仮想境界位置マーキング情報は、現在フレームの垂直方向における仮想境界の画素位置を示すために用いられる。

【0137】

上記装置に基づき、１つの可能な実現形態において、第１の仮想境界位置マーキング情報は、現在フレームの水平方向における仮想境界のｘ座標であり、第２の仮想境界位置マーキング情報は、現在フレームの垂直方向における仮想境界のｙ座標であり、リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅がｘ座標であり、高さがｙ座標である矩形領域であり、未リフレッシュ領域とは、現在フレームにおいてリフレッシュ済み領域以外の他の領域である。

【0138】

上記装置に基づき、１つの可能な実現形態において、符号化モジュールは、さらに、現在フレームが適応型イントラリフレッシュ技術をサポートしない場合、現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤを付加せず、又は現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤを付加するが、現在フレームの拡張データに付加した第１の仮想境界位置マーキング情報の値又は第２の仮想境界位置マーキング情報の値を０とするために用いられる。

【0139】

上記装置に基づき、１つの可能な実現形態において、符号化モジュールは、さらに、現在フレームが適応型イントラリフレッシュ技術をサポートする場合、現在フレームの拡張データに付加した第１の仮想境界位置マーキング情報の値を０よりも大きくし、第２の仮想境界位置マーキング情報の値も０よりも大きくするために用いられる。

【0140】

上記装置に基づき、１つの可能な実現形態において、符号化モジュールは、さらに、現在フレームがランダムアクセスポイントである場合、現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ符号化順における現在フレームの前のフレームが適応型イントラリフレッシュ技術をサポートしないと決定するために用いられる。

【0141】

上記装置に基づき、１つの可能な実現形態において、符号化モジュールは、さらに、現在フレームがランダムアクセスのリカバリポイントである場合、現在フレームが適応型イントラリフレッシュ技術をサポートし、且つ第１の仮想境界位置マーキング情報により示される仮想境界の画素位置が現在フレームの右側境界に等しいか又はそれを超え、且つ第２の仮想境界位置マーキング情報により示される仮想境界の画素位置が現在フレームの下側境界に等しいか又はそれを超えると決定するために用いられる。

【0142】

上記装置に基づき、１つの可能な実現形態において、第１の仮想境界位置マーキング情報の精度は、１つのＬＣＵの幅であり、第２の仮想境界位置マーキング情報の精度は、１つのＬＣＵの高さである。

【0143】

以上のように、現在フレームのビットストリームにおける拡張データに、適応型イントラリフレッシュ動画拡張ＩＤ及び仮想境界位置マーキング情報が新たに追加され、当該仮想境界位置マーキング情報は、仮想境界の位置を示すことができ、且つ当該仮想境界は、少なくとも現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるため、符号化側は、現在フレームのリフレッシュ領域を分割するとき、実際の需要に応じて当該仮想境界を任意に設定することができ、続いて当該仮想境界位置マーキング情報を通じて当該仮想境界の位置を示せばよく、それによりリフレッシュ領域分割の柔軟性を向上させ、すなわち、本発明の実施例は、拡張データを通じて、リフレッシュ領域を適応的に分割することを実現する適応型イントラリフレッシュメカニズムを提供する。

【0144】

なお、上記実施例にて提供される符号化装置が適応型イントラリフレッシュメカニズムに基づく符号化方法を実施するときは、単に上記各機能モジュールの分割を例に説明するが、実際に利用する際に、需要に応じて、上記機能を異なる機能モジュールに割り当てて行わせ、すなわち、デバイスの内部構造を異なる機能モジュールに分割して、以上説明した機能の全部又は一部を行うようにしてもよい。また、上記実施例にて提供される符号化装置は、適応型イントラリフレッシュメカニズムに基づく符号化方法の実施例の思想と同じであり、その具体的な実現過程は、方法の実施例を詳しく参照されたく、ここではその説明が省略される。

【0145】

図９は、本発明の実施例にて提供される端末９００の構造の概略図である。前述した実施例に係る復号化デバイス、復号化側、復号化装置、及び符号化デバイス、符号化側、符号化装置は、いずれも当該端末で実現することができる。具体的に、当該端末９００は、スマートフォン、タブレットコンピュータ、ＭＰ３プレーヤー（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ Ａｕｄｉｏ Ｌａｙｅｒ ＩＩＩ、動画専門家集団による圧縮規格のオーディオレイヤ３）、ＭＰ４（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ Ａｕｄｉｏ Ｌａｙｅｒ ＩＶ、動画専門家集団による圧縮規格のオーディオレイヤ４）プレーヤー、ノート型パソコン、又はデスクトップパソコンであってもよい。端末９００は、ユーザーデバイス、携帯端末、ラップトップ端末、デスクトップ端末などの他の名称で呼ばれることもある。通常、端末９００は、プロセッサ９０１とメモリ９０２とを含む。

【0146】

プロセッサ９０１は、例えば、４コアプロセッサ、８コアプロセッサなど、１つ又は複数の処理コアを含み得る。プロセッサ９０１は、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ、デジタル・シグナル・プロセッシング）、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ、フィールド・プログラマブル・ゲート・アレイ）、ＰＬＡ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ａｒｒａｙ、プログラマブル・ロジック・アレイ）のうち少なくとも１つのハードウェアの形態で実現され得る。プロセッサ９０１は、メインプロセッサとコプロセッサとをさらに含み得、メインプロセッサは、ウェイク状態のデータを処理するためのプロセッサであり、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、中央処理装置）とも呼ばれ、コプロセッサは、待機状態のデータを処理するための低消費電力プロセッサである。いくつかの実施例において、プロセッサ９０１に、ディスプレイに表示されるコンテンツのレンダリング及び描きを担うためのＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）を有し得る。いくつかの実施例において、プロセッサ９０１は、機械学習に関連する計算動作を処理するためのＡＩ（Ａｒｔｉｆｉｃｉａｌ Ｉｎｔｅｌｌｉｇｅｎｃｅ、アーティフィシャル・インテリジェンス）プロセッサをさらに含み得る。

【0147】

メモリ９０２は、非一時的であり得る１つ又は複数のコンピュータ可読記憶媒体を含み得る。メモリ９０２は、高速ランダムアクセスメモリ、及び１つ以上のディスク記憶デバイス、フラッシュメモリ記憶デバイスなどの不揮発性メモリをさらに含み得る。いくつかの実施例において、メモリ９０２内の非一時的コンピュータ可読記憶媒体は、本発明の方法の実施例にて提供される適応型イントラリフレッシュメカニズムに基づく復号化、符号化方法を実行するように、プロセッサ９０１により実行される少なくとも１つの命令を記憶するために用いられる。

【0148】

いくつかの実施例において、端末９００は、オプションで、周辺デバイスインタフェース９０３と、少なくとも１つの周辺デバイスとをさらに含む。プロセッサ９０１、メモリ９０２、及び周辺デバイスインタフェース９０３は、互いにバス又は信号線を介して接続され得る。各周辺デバイスは、バス、信号線、又は回路基板を介して周辺デバイスインタフェース９０３に接続され得る。具体的には、周辺デバイスは、無線周波数回路９０４、ディスプレイ９０５、カメラ部品９０６、音声回路９０７、測位部品９０８、及び電源９０９のうちの少なくとも１つを含む。

【0149】

周辺デバイスインタフェース９０３は、Ｉ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ、入力／出力）に関連する少なくとも１つの周辺デバイスをプロセッサ９０１及びメモリ９０２に接続するために用いられる。いくつかの実施例において、プロセッサ９０１、メモリ９０２、及び周辺デバイスインタフェース９０３は、同じチップ又は回路基板に集積化され、いくつかの他の実施例において、プロセッサ９０１、メモリ９０２、及び周辺デバイスインタフェース９０３のうちいずれか１つ又は２つは、別個のチップ又は回路基板で実現され得、本実施例はこれを限定しない。

【0150】

無線周波数回路９０４は、電磁信号とも呼ばれるＲＦ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ、無線周波数）信号を受信及び送信するために用いられる。無線周波数回路９０４は、電磁信号により通信ネットワーク及び他の通信デバイスと通信する。無線周波数回路９０４は、電気信号を電磁信号に変換して送信するか、又は受信した電磁信号を電気信号に変換する。オプションで、無線周波数回路９０４は、アンテナシステム、ＲＦトランシーバ、１つ又は複数の増幅器、チューナ、発振器、デジタルシグナルプロセッサ、符号化復号化チップセット、加入者識別モジュールカードなどを含む。無線周波数回路９０４は、少なくとも１つの無線通信プロトコルを介して他の端末と通信し得る。当該無線通信プロトコルは、メトロポリタンエリアネットワーク、各世代の移動通信ネットワーク（２Ｇ、３Ｇ、４Ｇ及び５Ｇ）、無線ローカルエリアネットワーク、及び／又はＷｉＦｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ、ワイヤレスフィデリティ）ネットワークを含むが、これらに限定されない。いくつかの実施例において、無線周波数回路９０４は、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ、近距離無線通信）に関連する回路をさらに含み得、本発明は、これを限定しない。

【0151】

ディスプレイ９０５は、ＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ、ユーザーインタフェース）を表示するために用いられる。当該ＵＩは、図形、テキスト、アイコン、動画、及びそれらの任意の組合せを含み得る。ディスプレイ９０５がタッチディスプレイである場合、ディスプレイ９０５は、さらに、ディスプレイ９０５の表面又は表面の上方のタッチ信号を収集する能力を有する。当該タッチ信号は、制御信号としてプロセッサ９０１に入力されて処理され得る。このとき、ディスプレイ９０５は、さらに、ソフトボタン及び／又はソフトキーボードとも呼ばれる仮想ボタン及び／又は仮想キーボードを提供するために用いられる。いくつかの実施例において、ディスプレイ９０５は、１つであってもよく、端末９００のフロントパネルに設置され、他の実施例において、ディスプレイ９０５は、少なくとも２つであってもよく、それぞれ端末９００の異なる表面に設置されるか、又は折り畳まれるように設計され、他の実施例において、ディスプレイ９０５は、端末９００の曲面又は折り畳み面に設置されたフレキシブルディスプレイであってもよい。さらには、ディスプレイ９０５は、矩形以外の不規則な図形、すなわち異形画面となるように設置されてもよい。ディスプレイ９０５は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ、液晶ディスプレイ）、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ－Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ、有機発光ダイオード）などの材質を用いて作製され得る。

【0152】

カメラ部品９０６は、画像又は動画を収集するために用いられる。オプションで、カメラ部品９０６は、フロントカメラ及びバックカメラを含む。通常、フロントカメラは、端末のフロントパネルに設置され、バックカメラは、端末の裏面に設置される。いくつかの実施例において、バックカメラは、少なくとも２つであり、それぞれメインカメラ、被写界深度カメラ、広角カメラ、望遠カメラのうちのいずれか１つであることで、メインカメラと被写界深度カメラとの融合による背景ぼかし機能、メインカメラと広角カメラとの融合によるパノラマ撮影及びＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ、バーチャルリアリティ）撮影機能、又は他の融合による撮影機能を実現する。いくつかの実施例において、カメラ部品９０６は、フラッシュランプをさらに含み得る。フラッシュランプは、単色温度フラッシュランプであってもよいし、二色温度フラッシュランプであってもよい。二色温度フラッシュランプとは、ウォームホワイトフラッシュランプとクールホワイトフラッシュランプとの組合せであり、異なる色温度での光線補正に使用し得る。

【0153】

音声回路９０７は、マイクロフォン及びスピーカーを含み得る。マイクロフォンは、ユーザー及び環境の音波を収集し、音波を電気信号に変換してプロセッサ９０１に入力して処理させるか、又は音声通信を可能にするように無線周波数回路９０４に入力するために用いられる。ステレオ集音又はノイズ低減の目的で、マイクロフォンは、複数であってもよく、端末９００の異なる箇所にそれぞれ設置される。また、マイクロフォンは、アレイマイクロフォンであってもよいし、全方位集音型マイクロフォンであってもよい。スピーカーは、プロセッサ９０１又は無線周波数回路９０４からの電気信号を音波に変換するために用いられる。スピーカーは、従来の薄膜スピーカーであってもよいし、圧電セラミックスピーカーであってもよい。スピーカーが圧電セラミックスピーカーである場合、電気信号を人間が聞こえる音波に変換することができるだけでなく、さらに、電気信号を測距などの用途のために人間が聞こえない音波に変換することができる。いくつかの実施例において、音声回路９０７は、ヘッドホンジャックをさらに含み得る。

【0154】

測位部品９０８は、ナビゲーション又はＬＢＳ（Ｌｏｃａｔｉｏｎ Ｂａｓｅｄ Ｓｅｒｖｉｃｅ、位置に基づくサービス）を可能にするために、端末９００の現在の地理的位置を測位するために用いられる。測位部品９０８は、米国のＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ、全地球測位システム）、中国の北斗システム、ロシアのグロナスシステム、又は欧州連合のガリレオシステムに基づく測位部品であってもよい。

【0155】

電源９０９は、端末９００における各部品に電力を供給するために用いられる。電源９０９は、交流電源、直流電源、一次電池、又は二次電池であってもよい。電源９０９が二次電池を含む場合、当該二次電池は、有線充電又は無線充電をサポートすることが可能である。当該充電池は、さらに、急速充電技術をサポートするために用いられる。

【0156】

いくつかの実施例において、端末９００は、１つ又は複数のセンサ９１０をさらに含む。当該１つ又は複数のセンサ９１０は、加速度センサ９１１、ジャイロセンサ９１２、圧力センサ９１３、指紋センサ９１４、光学センサ９１５、及び近接センサ９１６を含むが、これらに限定されない。

【0157】

加速度センサ９１１は、端末９００で構築された座標系の３つの座標軸における加速度の大きさを検出することができる。例えば、加速度センサ９１１は、重力加速度の３つの座標軸における成分を検出するために用いられる。プロセッサ９０１は、加速度センサ９１１により収集された重力加速度信号に基づき、ディスプレイ９０５をユーザーインタフェースの表示を横方向ビュー又は縦方向ビューで行うように制御することができる。加速度センサ９１１は、さらに、ゲーム又はユーザーの運動データの収集に使用し得る。

【0158】

ジャイロセンサ９１２は、端末９００の本体の方向及び回転角度を検出することができ、ジャイロセンサ９１２は、加速度センサ９１１と連携して端末９００に対するユーザーの３Ｄモーションを収集することができる。プロセッサ９０１は、ジャイロセンサ９１２が収集したデータに基づき、動作感知（ユーザーの傾斜操作によるＵＩの変更など）、撮影時の画像安定化、ゲーム制御、及び慣性航法などの機能を実現することができる。

【0159】

圧力センサ９１３は、端末９００の側面フレーム及び／又はディスプレイ９０５の下層に設置され得る。圧力センサ９１３は、端末９００の側面フレームに設置される場合、ユーザーによる端末９００に対する握り信号を検出することができ、プロセッサ９０１は圧力センサ９１３により収集された握り信号に基づき、左右手の識別又はショートカット操作を行う。圧力センサ９１３がディスプレイ９０５の下層に設置される場合、プロセッサ９０１は、ユーザーによるディスプレイ９０５に対する押圧操作に応じて、ＵＩ画面上の操作可能なコントロールに対する制御を実現する。操作可能なコントロールは、ボタンコントロール、スクロールバーコントロール、アイコンコントロール、メニューコントロールのうちの少なくとも１つを含む。

【0160】

指紋センサ９１４は、ユーザーの指紋を収集するために用いられ、プロセッサ９０１が指紋センサ９１４により収集された指紋に基づいてユーザーの身元を識別するか、又は指紋センサ９１４が収集した指紋に基づいてユーザーの身元を識別する。ユーザーの身元が信頼可能な身元であると識別されると、ユーザーは、スクリーンをアンロックすること、暗号化情報を見ること、ソフトウェアをダウンロードすること、支払い、及び設定を変更することなどを含む、関連する機密操作を実行することをプロセッサ９０１により許可される。指紋センサ９１４は、端末９００の正面、裏面、又は側面に設置され得る。端末９００に物理ボタン又はメーカーのＬｏｇｏが設置される場合、指紋センサ９１４は物理ボタン又はメーカーのＬｏｇｏと集積化され得る。

【0161】

光学センサ９１５は、周囲光の強度を収集するために用いられる。１つの実施例において、プロセッサ９０１は、光学センサ９１５により収集された周囲光の強度に基づき、ディスプレイ９０５の表示輝度を制御することができる。具体的には、周囲光の強度が高い場合、ディスプレイ９０５の表示輝度を上げ、周囲光の強度が低い場合、ディスプレイ９０５の表示輝度を下げる。別の実施例において、プロセッサ９０１は、さらに、光学センサ９１５により収集された周囲光の強度に基づき、カメラ部品９０６の撮影パラメータを動的に調整することができる。

【0162】

近接センサ９１６は、距離センサとも呼ばれ、通常、端末９００のフロントパネルに設置される。近接センサ９１６は、ユーザーと端末９００の正面との間の距離を収集するために用いられる。１つの実施例において、近接センサ９１６が、ユーザーと端末９００の正面との間の距離が徐々に小さくなることを検出すると、プロセッサ９０１はディスプレイ９０５を画面点灯状態から画面消灯状態に切り替えるように制御し、近接センサ９１６が、ユーザーと端末９００の正面との間の距離が徐々に大きくなることを検出すると、プロセッサ９０１はディスプレイ９０５を画面消灯状態から画面点灯状態に切り替えるように制御する。

【0163】

図９に示された構造は、端末９００に対する限定を構成するものではなく、図示よりも多くの部品若しくは少ない部品を含み、又は、特定の部品を組み合わせ、又は異なる部品配置を採用してもよいことは当業者に理解される。

【0164】

本発明の実施例は、非一時的コンピュータ可読記憶媒体をさらに提供し、前記記憶媒体における命令が端末のプロセッサにより実行されると、端末が上記実施例にて提供された適応型イントラリフレッシュメカニズムに基づく復号化、符号化方法を実行することができる。

【0165】

本発明の実施例は、端末上で実行されると、上記の実施例にて提供された適応型イントラリフレッシュメカニズムに基づく復号化、符号化方法を端末に実行させる、命令を含むコンピュータプログラム製品をさらに提供する。

【0166】

上記実施例を実現するステップの全部又は一部が、ハードウェアにより行われてもよいし、プログラムにより関連するハードウェアに行わせるように命令してもよく、前記プログラムは、例えば、リードオンリーメモリ、磁気ディスク、又は光ディスクなどであり得るコンピュータ可読記憶媒体に記憶され得ることは当業者に理解される。

【0167】

以上は、本発明の実施例の好ましい実施例に過ぎず、本発明の実施例を限定するものではなく、本発明の実施例の精神と原則内において行われたあらゆる修正、同等の置換、改良などは、いずれも本発明の保護範囲に含まれるべきである。

【符号の説明】

【0168】

７００ 復号化装置
７０１ 受信モジュール
７０２ 処理モジュール
８００ 符号化装置
８０１ 符号化モジュール
９００ 端末
９０１ プロセッサ
９０２ メモリ
９０３ 周辺デバイスインタフェース
９０４ 無線周波数回路
９０５ ディスプレイ
９０６ カメラ部品
９０７ 音声回路
９０８ 測位部品
９０９ 電源
９１０ センサ
９１１ 加速度センサ
９１２ ジャイロセンサ
９１３ 圧力センサ
９１４ 指紋センサ
９１５ 光学センサ
９１６ 近接センサ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【手続補正書】

【提出日】2023-06-27

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

現在フレームのビットストリームを受信するステップと、
前記現在フレームのビットストリームに拡張データが存在し、且つ前記拡張データに適応型イントラリフレッシュ動画拡張ＩＤが付加されている場合、前記拡張データに付加された仮想境界位置マーキング情報を取得するステップであって、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるステップと、
前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップと、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートし、且つ復号化順における前記現在フレームの前のフレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームはランダムアクセスポイントであると決定するステップと、
前記現在フレームのビットストリームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在しない場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するステップと、を含む、
ことを特徴とする適応型イントラリフレッシュメカニズムに基づく復号化方法。

【請求項2】

前記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、
前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界の画素位置を示すために用いられ、
前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界の画素位置を示すために用いられる、
ことを特徴とする請求項１に記載の方法。

【請求項3】

前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界のｘ座標であり、
前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界のｙ座標であり、
前記リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とし、幅は前記ｘ座標であり、高さは前記ｙ座標である矩形領域であり、
前記未リフレッシュ領域とは、前記現在フレームにおける前記リフレッシュ済み領域以外の他の領域である、
ことを特徴とする請求項２に記載の方法。

【請求項4】

前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップは、
前記第１の仮想境界位置マーキング情報の値及び前記第２の仮想境界位置マーキング情報の値がいずれも０よりも大きい場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートすると決定するステップと、
前記第１の仮想境界位置マーキング情報の値及び／又は前記第２の仮想境界位置マーキング情報の値が０に等しい場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するステップと、を含む、
ことを特徴とする請求項２に記載の方法。

【請求項5】

前記前のフレームが前記適応型イントラリフレッシュ技術をサポートしないことは、
前記前のフレームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在しないこと、又は、
前記前のフレームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在するが、前記前のフレームの第１の仮想境界位置マーキング情報及び／又は第２の仮想境界位置マーキング情報の値が０に等しいことを含む、
ことを特徴とする請求項２に記載の方法。

【請求項6】

前記現在フレームが前記適応型イントラリフレッシュ技術をサポートすると決定し、且つ前記現在フレームの第１の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が前記現在フレームの右側境界に等しいか又はそれを超えると決定し、且つ前記現在フレームの第２の仮想境界位置マーキング情報に基づいて仮想境界の画素位置が前記現在フレームの下側境界に等しいか又はそれを超えると決定した場合、前記現在フレームがランダムアクセスのリカバリポイントであると決定するステップをさらに含む、
ことを特徴とする請求項２に記載の方法。

【請求項7】

前記第１の仮想境界位置マーキング情報の精度は、１つの最大符号化ユニットＬＣＵの幅であり、
前記第２の仮想境界位置マーキング情報の精度は、１つの前記ＬＣＵの高さである、
ことを特徴とする請求項２に記載の方法。

【請求項8】

現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定するステップと、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤと前記現在フレームの仮想境界位置マーキング情報とを付加するステップであって、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられるステップと、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームの前記拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤを付加せず、
前記現在フレームがランダムアクセスポイントである場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートし、且つ符号化順における前記現在フレームの前のフレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するステップと、を含む、
ことを特徴とする適応型イントラリフレッシュメカニズムに基づく符号化方法。

【請求項9】

前記仮想境界位置マーキング情報は、第１の仮想境界位置マーキング情報と第２の仮想境界位置マーキング情報とを含み、
前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界の画素位置を示すために用いられ、
前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界の画素位置を示すために用いられる、
ことを特徴とする請求項８に記載の方法。

【請求項10】

前記第１の仮想境界位置マーキング情報は、前記現在フレームの水平方向における前記仮想境界のｘ座標であり、
前記第２の仮想境界位置マーキング情報は、前記現在フレームの垂直方向における前記仮想境界のｙ座標であり、
前記リフレッシュ済み領域とは、画像の左上隅の座標（０，０）を原点とする、幅が前記ｘ座標であり、高さが前記ｙ座標である矩形領域であり、前記未リフレッシュ領域とは、前記現在フレームにおける前記リフレッシュ済み領域以外の他の領域である、
ことを特徴とする請求項９に記載の方法。

【請求項11】

前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームの拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤを付加するが、前記現在フレームの拡張データに付加した前記第１の仮想境界位置マーキング情報の値及び／又は前記第２の仮想境界位置マーキング情報の値を０とする、
ことを特徴とする請求項９に記載の方法。

【請求項12】

前記現在フレームが前記適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに付加した前記第１の仮想境界位置マーキング情報の値を０よりも大きくし、且つ前記第２の仮想境界位置マーキング情報の値も０よりも大きくする、
ことを特徴とする請求項９に記載の方法。

【請求項13】

前記現在フレームがランダムアクセスのリカバリポイントである場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートし、且つ前記第１の仮想境界位置マーキング情報により示される仮想境界の画素位置が前記現在フレームの右側境界に等しいか又はそれを超え、且つ前記第２の仮想境界位置マーキング情報により示される仮想境界の画素位置が前記現在フレームの下側境界に等しいか又はそれを超えると決定するステップをさらに含む、
ことを特徴とする請求項９に記載の方法。

【請求項14】

前記第１の仮想境界位置マーキング情報の精度は、１つのＬＣＵの幅であり、
前記第２の仮想境界位置マーキング情報の精度は、１つの前記ＬＣＵの高さである、
ことを特徴とする請求項９に記載の方法。

【請求項15】

現在フレームのビットストリームを受信するための受信モジュールと、
前記現在フレームのビットストリームに拡張データが存在し、且つ前記拡張データに適応型イントラリフレッシュ動画拡張ＩＤが付加されている場合、前記拡張データに付加された仮想境界位置マーキング情報を取得し、ここで、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられ、
前記仮想境界位置マーキング情報に基づいて、前記現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定し、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートし、且つ復号化順における前記現在フレームの前のフレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームはランダムアクセスポイントであると決定し、
前記現在フレームのビットストリームの前記拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤが存在しない場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしないと決定するための処理モジュールと、を含む、
ことを特徴とする復号化装置。

【請求項16】

現在フレームが適応型イントラリフレッシュ技術をサポートするか否かを決定し、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートする場合、前記現在フレームの拡張データに適応型イントラリフレッシュ動画拡張ＩＤと前記現在フレームの仮想境界位置マーキング情報とを付加し、ここで、前記仮想境界位置マーキング情報は、仮想境界の位置を示すために用いられ、前記仮想境界は、少なくとも前記現在フレームにおけるリフレッシュ済み領域と未リフレッシュ領域とを区別するために用いられ、
前記現在フレームがランダムアクセスポイントである場合、前記現在フレームが前記適応型イントラリフレッシュ技術をサポートし、且つ符号化順における前記現在フレームの前のフレームが前記適応型イントラリフレッシュ技術をサポートしないと決定し、
前記現在フレームが前記適応型イントラリフレッシュ技術をサポートしない場合、前記現在フレームの前記拡張データに前記適応型イントラリフレッシュ動画拡張ＩＤを付加しないための符号化モジュール、を含む、
ことを特徴とする符号化装置。

【請求項17】

プロセッサと、
プロセッサにより実行可能な命令を記憶するためのメモリと、を含む復号化デバイスであって、
前記プロセッサは、上記請求項１～７のいずれか１項に記載の方法のステップを実行するように構成される、
ことを特徴とする復号化デバイス。

【請求項18】

プロセッサと、
プロセッサにより実行可能な命令を記憶するためのメモリと、を含む符号化デバイスであって、
前記プロセッサは、上記請求項８～１４のいずれか１項に記載の方法のステップを実行するように構成される、
ことを特徴とする符号化デバイス。

【請求項19】

命令を記憶しているコンピュータ可読記憶媒体であって、前記命令がプロセッサにより実行されると、上記請求項１～７、又は上記請求項８～１４のいずれか１項に記載の方法のステップが実施される
ことを特徴とするコンピュータ可読記憶媒体。

【国際調査報告】