特表2024-541036 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

青山学院大学 (神奈川県相模原市中央区淵野辺)

▶ 北京小米移動軟件有限公司の特許一覧

特表2024-541036信号の符号化および復号化方法、装置、ユーザイクイップメント、ネットワーク側デバイス並びに記憶媒体

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1a
1b
1c
2a
2b
3
4a
4b
5a
5b
6a
6b
7a
7b
7c
7d
8a
8b
9a
9b
10
11a
11b
12a
12b
12c
12d
12e
12f
13
14
15
16
17
18
19
20
21

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-11-06

(54)【発明の名称】信号の符号化および復号化方法、装置、ユーザイクイップメント、ネットワーク側デバイス並びに記憶媒体

(51)【国際特許分類】

G10L 19/00 20130101AFI20241029BHJP

G10L 19/008 20130101ALI20241029BHJP

【ＦＩ】

G10L19/00 400A

G10L19/008 200

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2024525517

(86)(22)【出願日】2021-11-02

(85)【翻訳文提出日】2024-04-26

(86)【国際出願番号】 CN2021128279

(87)【国際公開番号】W WO2023077284

(87)【国際公開日】2023-05-11

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ブルートゥース

(71)【出願人】

【識別番号】516180667

【氏名又は名称】北京小米移動軟件有限公司

【氏名又は名称原語表記】ＢｅｉｊｉｎｇＸｉａｏｍｉＭｏｂｉｌｅＳｏｆｔｗａｒｅＣｏ．，Ｌｔｄ．

【住所又は居所原語表記】Ｎｏ．０１８，Ｆｌｏｏｒ８，Ｂｕｉｌｄｉｎｇ６，Ｙａｒｄ３３，ＭｉｄｄｌｅＸｉｅｒｑｉＲｏａｄ，ＨａｉｄｉａｎＤｉｓｔｒｉｃｔ，Ｂｅｉｊｉｎｇ１０００８５，Ｃｈｉｎａ

(74)【代理人】

【識別番号】100079108

【弁理士】

【氏名又は名称】稲葉良幸

(74)【代理人】

【識別番号】100109346

【弁理士】

【氏名又は名称】大貫敏史

(74)【代理人】

【識別番号】100117189

【弁理士】

【氏名又は名称】江口昭彦

(74)【代理人】

【識別番号】100134120

【弁理士】

【氏名又は名称】内藤和彦

(74)【代理人】

【識別番号】100108213

【弁理士】

【氏名又は名称】阿部豊隆

(72)【発明者】

【氏名】ガオ，シュオ

(57)【要約】

本開示は、信号の符号化および復号化方法、装置、復号化側、符号化側並びに記憶媒体を提供し、通信技術分野に属する。該方法は、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得し、そして、異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定し、その後、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信することを含む。本開示によって提供される方法は、符号化の効率を向上させて符号化の難しさを軽減することができる。
【選択図】図１ａ

【特許請求の範囲】

【請求項1】

信号の符号化および復号化方法であって、符号化側に適用され、
サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得するステップと、
異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定するステップと、
各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、前記各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信するステップと、を含む、
ことを特徴とする信号の符号化および復号化方法。

【請求項2】

前記異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定するステップは、
前記サウンドチャネルベースのオーディオ信号の信号特徴に基づいて、サウンドチャネルベースのオーディオ信号の符号化モードを決定するステップと、
前記オブジェクトベースのオーディオ信号の信号特徴に基づいて、オブジェクトベースのオーディオ信号の符号化モードを決定するステップと、
前記シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定するステップと、を含む、
ことを特徴とする請求項１に記載の信号の符号化および復号化方法。

【請求項3】

【請求項4】

前記サウンドチャネルベースのオーディオ信号の信号特徴に基づいて、サウンドチャネルベースのオーディオ信号の符号化モードを決定するステップは、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数を取得するステップと、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さいか否かを判断するステップと、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値以上である場合、前記サウンドチャネルベースのオーディオ信号の符号化モードが、
前記サウンドチャネルベースのオーディオ信号を、サウンドチャネル数が前記サウンドチャネルベースのオーディオ信号のサウンドチャネル数より少ない第１の他のフォーマットのオーディオ信号に変換し、前記第１の他のフォーマットのオーディオ信号に対応する符号化カーネルを用いて前記第１の他のフォーマットのオーディオ信号を符号化することと、
入力された第１のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第１のコマンドライン制御情報に基づいて、前記サウンドチャネルベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化することであって、前記第１のコマンドライン制御情報が、前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、前記符号化する必要があるオブジェクト信号の数が１以上であり且つ前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さいことと、
入力された第２のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第２のコマンドライン制御情報に基づいて、前記サウンドチャネルベースのオーディオ信号における少なくとも一部のサウンドチャネル信号を符号化することであって、前記第２のコマンドライン制御情報が、前記サウンドチャネルベースのオーディオ信号に含まれるサウンドチャネル信号のうち符号化する必要があるサウンドチャネル信号を指示し、前記符号化する必要があるサウンドチャネル信号の数が１以上であり且つ前記サウンドチャネルベースのオーディオ信号に含まれるサウンドチャネル信号の合計数より少ないことと、のうちの少なくとも１つであると決定するステップと、を含む、
ことを特徴とする請求項２に記載の信号の符号化および復号化方法。

【請求項5】

各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得することは、
前記サウンドチャネルベースのオーディオ信号の符号化モードを用いて、前記サウンドチャネルベースのオーディオ信号を符号化することを含む、
ことを特徴とする請求項３または４に記載の信号の符号化および復号化方法。

【請求項6】

前記オブジェクトベースのオーディオ信号の信号特徴に基づいて、オブジェクトベースのオーディオ信号の符号化モードを決定するステップは、
前記オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得するステップと、
前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得するステップであって、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとはいずれも少なくとも１つのオブジェクトベースのオーディオ信号を含むステップと、
前記第１の種類のオブジェクト信号セットに対応する符号化モードを決定するステップと、
前記分析結果に基づいて前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定するステップであって、前記オブジェクト信号サブセットが少なくとも１つのオブジェクトベースのオーディオ信号を含むステップと、を含む、
ことを特徴とする請求項２に記載の信号の符号化および復号化方法。

【請求項7】

前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得するステップは、
前記オブジェクトベースのオーディオ信号のうち個別の操作処理を必要としない信号を第１の種類のオブジェクト信号セットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類するステップを含む、
ことを特徴とする請求項６に記載の信号の符号化および復号化方法。

【請求項8】

前記第１の種類のオブジェクト信号セットに対応する符号化モードを決定するステップは、
前記第１の種類のオブジェクト信号セットに対応する符号化モードが、前記第１の種類のオブジェクト信号セットにおけるオブジェクトベースのオーディオ信号に対して第１の事前レンダリング処理を行い、マルチチャネル符号化カーネルを用いて、第１の事前レンダリング処理された信号を符号化することであると決定するステップを含み、
前記第１の事前レンダリング処理は、前記オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をサウンドチャネルベースのオーディオ信号に変換することを含む、
ことを特徴とする請求項７に記載の信号の符号化および復号化方法。

【請求項9】

前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得するステップは、
前記オブジェクトベースのオーディオ信号のうち背景音に属する信号を第１の種類のオブジェクト信号セットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類するステップを含む、
ことを特徴とする請求項６に記載の信号の符号化および復号化方法。

【請求項10】

前記第１の種類のオブジェクト信号セットに対応する符号化モードを決定するステップは、
前記第１の種類のオブジェクト信号セットに対応する符号化モードが、前記第１の種類のオブジェクト信号セットにおけるオブジェクトベースのオーディオ信号に対して第２の事前レンダリング処理を行い、高次アンビソニックス（ＨＯＡ）符号化カーネルを用いて、第２の事前レンダリング処理された信号を符号化することであると決定するステップを含み、
前記第２の事前レンダリング処理は、前記オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をシーンベースのオーディオ信号に変換することを含む、
ことを特徴とする請求項９に記載の信号の符号化および復号化方法。

【請求項11】

前記第１の種類のオブジェクト信号セットは、第１のオブジェクト信号サブセットと第２のオブジェクト信号サブセットとを含み、
前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得するステップは、
前記オブジェクトベースのオーディオ信号のうち個別の操作処理を必要としない信号を第１のオブジェクト信号サブセットに分類し、前記オブジェクトベースのオーディオ信号のうち背景音に属する信号を第２のオブジェクト信号サブセットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類するステップを含む、
ことを特徴とする請求項６に記載の信号の符号化および復号化方法。

【請求項12】

前記第１の種類のオブジェクト信号セットに対応する符号化モードを決定するステップは、
前記第１の種類のオブジェクト信号セットにおける第１のオブジェクト信号サブセットに対応する符号化モードが、前記第１のオブジェクト信号サブセットにおけるオブジェクトベースのオーディオ信号に対して第１の事前レンダリング処理を行い、マルチチャネル符号化カーネルを用いて、第１の事前レンダリング処理された信号を符号化することであると決定するステップであって、前記第１の事前レンダリング処理は、前記オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をサウンドチャネルベースのオーディオ信号に変換することを含むステップと、
前記第１の種類のオブジェクト信号セットにおける第２のオブジェクト信号サブセットに対応する符号化モードが、前記第２のオブジェクト信号サブセットにおけるオブジェクトベースのオーディオ信号に対して第２の事前レンダリング処理を行い、ＨＯＡ符号化カーネルを用いて、第２の事前レンダリング処理された信号を符号化することであると決定するステップであって、前記第２の事前レンダリング処理は、前記オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をシーンベースのオーディオ信号に変換することを含むステップと、を含む、
ことを特徴とする請求項１１に記載の信号の符号化および復号化方法。

【請求項13】

前記オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得するステップは、
前記オブジェクトベースのオーディオ信号に対してハイパスフィルタリング処理を行うステップと、
ハイパスフィルタリング処理された信号に対して相関分析を行って、各オブジェクトベースのオーディオ信号の間の相互相関パラメータ値を決定するステップと、を含む、
ことを特徴とする請求項８または１０または１２に記載の信号の符号化および復号化方法。

【請求項14】

前記分析結果に基づいて前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定するステップは、
相関度に基づいて、正規化された相関度区間を設定するステップと、
前記オブジェクトベースのオーディオ信号の相互相関パラメータ値、及び正規化された相関度区間に基づいて、前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、前記少なくとも１つのオブジェクト信号サブセットに対応する相関度に基づいて、対応する符号化モードを決定するステップと、を含む、
ことを特徴とする請求項１３に記載の信号の符号化および復号化方法。

【請求項15】

前記オブジェクト信号サブセットに対応する符号化モードは、独立符号化モードまたは連携符号化モードを含む、
ことを特徴とする請求項１４に記載の信号の符号化および復号化方法。

【請求項16】

前記独立符号化モードには、時間領域処理方式または周波数領域処理方式が対応しており、
前記オブジェクト信号サブセットにおけるオブジェクト信号が音声信号または類似音声信号である場合、前記独立符号化モードは時間領域処理方式を採用し、
前記オブジェクト信号サブセットにおけるオブジェクト信号が音声信号または類似音声信号以外の他のフォーマットのオーディオ信号である場合、前記独立符号化モードは周波数領域処理方式を採用する、
ことを特徴とする請求項１５に記載の信号の符号化および復号化方法。

【請求項17】

各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得するステップは、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて、前記オブジェクトベースのオーディオ信号を符号化するステップを含み、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて、前記オブジェクトベースのオーディオ信号を符号化するステップは、
前記第１の種類のオブジェクト信号セットに対応する符号化モードを用いて、前記第１の種類のオブジェクト信号セットにおける信号を符号化するステップと、
前記第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、同一のオブジェクト信号符号化カーネルを用いて、前記第２の種類のオブジェクト信号セットにおける事前処理されたすべてのオブジェクト信号サブセットを、対応する符号化モードで符号化するステップと、を含む、
ことを特徴とする請求項１４に記載の信号の符号化および復号化方法。

【請求項18】

前記オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得するステップは、
前記オブジェクト信号の周波数帯域幅範囲を分析するステップを含む、
ことを特徴とする請求項８または１０または１２に記載の信号の符号化および復号化方法。

【請求項19】

前記分析結果に基づいて前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定するステップは、
異なる周波数帯域幅に対応する帯域幅区間を決定するステップと、
前記オブジェクトベースのオーディオ信号の周波数帯域幅範囲、及び異なる周波数帯域幅に対応する帯域幅区間に基づいて、前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、前記少なくとも１つのオブジェクト信号サブセットに対応する周波数帯域幅に基づいて、対応する符号化モードを決定するステップと、を含む、
ことを特徴とする請求項１８に記載の信号の符号化および復号化方法。

【請求項20】

前記分析結果に基づいて前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定するステップは、
前記オブジェクトベースのオーディオ信号に対応する符号化される周波数帯域幅範囲を指示する入力された第３のコマンドライン制御情報を取得するステップと、
前記第３のコマンドライン制御情報と前記分析結果を統合して前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定するステップと、を含む、
ことを特徴とする請求項１８に記載の信号の符号化および復号化方法。

【請求項21】

各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得するステップは、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて、前記オブジェクトベースのオーディオ信号を符号化するステップを含み、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて、前記オブジェクトベースのオーディオ信号を符号化するステップは、
前記第１の種類のオブジェクト信号セットに対応する符号化モードを用いて、前記第１の種類のオブジェクト信号セットにおける信号を符号化するステップと、
前記第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、異なるオブジェクト信号符号化カーネルを用いて、異なる事前処理されたオブジェクト信号サブセットを、対応する符号化モードで符号化するステップと、を含む、
ことを特徴とする請求項１８に記載の信号の符号化および復号化方法。

【請求項22】

前記シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定するステップは、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数を取得するステップと、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さいか否かを判断するステップと、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さい場合、前記シーンベースのオーディオ信号の符号化モードが、
オブジェクト信号符号化カーネルを用いて前記シーンベースのオーディオ信号の各オブジェクト信号を符号化することと、
入力された第４のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第４のコマンドライン制御情報に基づいて、前記シーンベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化することであって、前記第４のコマンドライン制御情報が、前記シーンベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、前記符号化する必要があるオブジェクト信号の数が１以上であり且つ前記シーンベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さいことと、のうちの少なくとも１つであると決定するステップと、を含む、
ことを特徴とする請求項２に記載の信号の符号化および復号化方法。

【請求項23】

前記シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定するステップは、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数を取得するステップと、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さいか否かを判断するステップと、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値以上である場合、前記シーンベースのオーディオ信号の符号化モードが、
前記シーンベースのオーディオ信号を、サウンドチャネル数が前記シーンベースのオーディオ信号のサウンドチャネル数より少ない第２の他のフォーマットのオーディオ信号に変換し、シーン信号符号化カーネルを用いて前記第２の他のフォーマットのオーディオ信号を符号化することと、
前記シーンベースのオーディオ信号に対して低次変換を行って、前記シーンベースのオーディオ信号を、次数が前記シーンベースのオーディオ信号の現在の次数より低い低次のシーンベースのオーディオ信号に変換し、シーン信号符号化カーネルを用いて前記低次のシーンベースのオーディオ信号を符号化することと、の少なくとも１つであると決定するステップと、を含む、
ことを特徴とする請求項２２に記載の信号の符号化および復号化方法。

【請求項24】

各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得するステップは、
前記シーンベースのオーディオ信号の符号化モードを用いて前記シーンベースのオーディオ信号を符号化するステップを含む、
ことを特徴とする請求項２２または２３に記載の信号の符号化および復号化方法。

【請求項25】

前記各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信するステップは、
前記第２の種類のオブジェクト信号セットに対する分類方式を指示する分類サイド情報パラメータを決定するステップと、
各フォーマットのオーディオ信号に対応するサイド情報パラメータを決定するステップであって、前記サイド情報パラメータが、対応するフォーマットのオーディオ信号に対応する符号化モードを指示するステップと、
前記分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とに対してコードストリーム多重化を行って符号化コードストリームを取得し、前記符号化コードストリームを復号化側に送信するステップと、を含む、
ことを特徴とする請求項４または６または２２に記載の信号の符号化および復号化方法。

【請求項26】

信号の符号化および復号化方法であって、復号化側に適用され、
符号化側から送信された符号化コードストリームを受信するステップと、
前記符号化コードストリームを復号化して混合フォーマットのオーディオ信号を取得するステップであって、前記混合フォーマットのオーディオ信号が、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含むステップと、を含む、
ことを特徴とする信号の符号化および復号化方法。

【請求項27】

前記方法は、
前記符号化コードストリームに対してコードストリーム解析を行って分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とを取得するステップをさらに含み、
前記分類サイド情報パラメータが、前記オブジェクトベースのオーディオ信号の第２の種類のオブジェクト信号セットに対する分類方式を指示し、前記サイド情報パラメータが、対応するフォーマットのオーディオ信号に対応する符号化モードを指示する、
ことを特徴とする請求項２６に記載の信号の符号化および復号化方法。

【請求項28】

前記符号化コードストリームを復号化して混合フォーマットのオーディオ信号を取得するステップは、
前記サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記サウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化するステップと、
前記分類サイド情報パラメータと、オブジェクトベースのオーディオ信号に対応するサイド情報パラメータとに基づいて、前記オブジェクトベースのオーディオ信号の符号化された信号パラメータ情報を復号化するステップと、
前記シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記シーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化するステップと、を含む、
ことを特徴とする請求項２７に記載の信号の符号化および復号化方法。

【請求項29】

前記分類サイド情報パラメータと、オブジェクトベースのオーディオ信号に対応するサイド情報パラメータとに基づいて、前記オブジェクトベースのオーディオ信号の符号化された信号パラメータ情報を復号化するステップは、
前記オブジェクトベースのオーディオ信号の符号化された信号パラメータ情報から、第１の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報と第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報とを決定するステップと、
前記第１の種類のオブジェクト信号セットに対応するサイド情報パラメータに基づいて、前記第１の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化するステップと、
前記分類サイド情報パラメータと、第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、前記第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化するステップと、を含む、
ことを特徴とする請求項２８に記載の信号の符号化および復号化方法。

【請求項30】

前記分類サイド情報パラメータと、第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、前記第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化するステップは、
前記分類サイド情報パラメータに基づいて前記第２の種類のオブジェクト信号セットの分類方式を決定するステップと、
前記第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、前記第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化するステップと、を含む、
ことを特徴とする請求項２９に記載の信号の符号化および復号化方法。

【請求項31】

前記分類サイド情報パラメータは、前記第２の種類のオブジェクト信号セットの分類方式が、相互相関パラメータ値に基づいて分類することであることを指示し、
前記第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、前記第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化するステップは、
同一のオブジェクト信号復号化カーネルを用いて、前記第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、第２の種類のオブジェクト信号セットにおけるすべての信号の符号化された信号パラメータ情報を復号化するステップを含む、
ことを特徴とする請求項３０に記載の信号の符号化および復号化方法。

【請求項32】

前記分類サイド情報パラメータは、前記第２の種類のオブジェクト信号セットの分類方式が、周波数帯域幅範囲に基づいて分類することであることを指示し、
前記第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、前記第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化するステップは、
異なるオブジェクト信号復号化カーネルを用いて、第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、第２の種類のオブジェクト信号セットにおける異なる信号の符号化された信号パラメータ情報を復号化するステップを含む、
ことを特徴とする請求項３０に記載の信号の符号化および復号化方法。

【請求項33】

前記方法は、
復号化されたオブジェクトベースのオーディオ信号を後処理するステップをさらに含む、
ことを特徴とする請求項２９～３２に記載の信号の符号化および復号化方法。

【請求項34】

前記サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記サウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化するステップは、
前記サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記サウンドチャネルベースのオーディオ信号に対応する符号化モードを決定するステップと、
前記サウンドチャネルベースのオーディオ信号に対応する符号化モードに基づいて、対応する復号化モードを用いて、前記サウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化するステップと、を含む、
ことを特徴とする請求項２８に記載の信号の符号化および復号化方法。

【請求項35】

前記シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記シーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化するステップは、
前記シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記シーンベースのオーディオ信号に対応する符号化モードを決定するステップと、
前記シーンベースのオーディオ信号に対応する符号化モードに基づいて、対応する復号化モードを用いて、前記シーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化するステップと、を含む、
ことを特徴とする請求項２８に記載の信号の符号化および復号化方法。

【請求項36】

信号の符号化および復号化に基づく装置であって、
サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得するための取得モジュールと、
異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定するための決定モジュールと、
各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、前記各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信するための符号化モジュールと、備える、
ことを特徴とする信号の符号化および復号化に基づく装置。

【請求項37】

信号の符号化および復号化に基づく装置であって、
符号化側から送信された符号化コードストリームを受信するための受信モジュールと、
前記符号化コードストリームを復号化して混合フォーマットのオーディオ信号を取得するための復号化モジュールであって、前記混合フォーマットのオーディオ信号が、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む復号化モジュールと、備える、
ことを特徴とする信号の符号化および復号化に基づく装置。

【請求項38】

通信装置であって、
前記装置は、プロセッサとメモリとを備え、前記メモリにはコンピュータプログラムが記憶され、前記プロセッサは前記メモリに記憶されているコンピュータプログラムを実行することにより、前記装置に請求項１～２５のいずれかに記載の方法を実行させる、
ことを特徴とする通信装置。

【請求項39】

通信装置であって、
前記装置は、プロセッサとメモリとを備え、前記メモリにはコンピュータプログラムが記憶され、前記プロセッサは前記メモリに記憶されているコンピュータプログラムを実行することにより、前記装置に請求項２６～３５のいずれかに記載の方法を実行させる、
ことを特徴とする通信装置。

【請求項40】

通信装置であって、
プロセッサとインターフェース回路とを備え、
前記インターフェース回路は、コード命令を受信して前記プロセッサに送信し、
前記プロセッサ、前記コード命令を実行することにより、請求項１～２５のいずれかに記載の方法を実行する、
ことを特徴とする通信装置。

【請求項41】

通信装置であって、
プロセッサとインターフェース回路とを備え、
前記インターフェース回路は、コード命令を受信して前記プロセッサに送信し、
前記プロセッサ、前記コード命令を実行することにより、請求項２６～３５のいずれかに記載の方法を実行する、
ことを特徴とする通信装置。

【請求項42】

命令が記憶されているコンピュータ読み取り可能な記憶媒体であって、前記命令が実行される場合、請求項１～２５のいずれかに記載の方法が実現される、
ことを特徴とするコンピュータ読み取り可能な記憶媒体。

【請求項43】

命令が記憶されているコンピュータ読み取り可能な記憶媒体であって、前記命令が実行される場合、請求項２６～３５のいずれかに記載の方法が実現される、
ことを特徴とするコンピュータ読み取り可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は通信技術分野に関し、特に信号の符号化および復号化方法、装置、符号化デバイス、復号化デバイス並びに記憶媒体に関する。

【背景技術】

【0002】

３Ｄオーディオは、より優れた三次元体験と空間没入感をユーザに提供できるため、広く適用されている。ここで、エンドツーエンドの３Ｄオーディオ体験を構築する場合、通常、収集側において混合フォーマットのオーディオ信号を収集し、混合フォーマットのオーディオ信号は、例えば、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも２つのフォーマットを含んでもよく、その後、収集した信号を符号化・復号化し、最後に、再生デバイスの能力（端末の能力など）に基づいて、バイノーラル信号またはマルチスピーカ信号にレンダリングして再生する。

【0003】

関連技術では、混合フォーマットのオーディオ信号を符号化する方法は、そのうちの各種類のフォーマットを、対応する符号化カーネルを用いて処理することであり、すなわち、サウンドチャネルベースのオーディオ信号をサウンドチャネル信号符号化カーネルで処理し、オブジェクトベースのオーディオ信号をオブジェクト信号符号化カーネルで処理し、シーンベースのオーディオ信号をシーン信号符号化カーネルで処理する。

【0004】

しかし、関連技術では、符号化時に、符号化側の制御情報、入力された混合フォーマットのオーディオ信号の特徴、異なるフォーマットのオーディオ信号の間の長所と短所、および再生側の実際の再生ニーズなどのパラメータ情報が考慮されていないため、混合フォーマットのオーディオ信号を符号化する効率は低い。

【発明の概要】

【発明が解決しようとする課題】

【0005】

本開示は、関連技術における符号化方法によるデータ圧縮率が低く、帯域幅を節約できないという技術的課題を解決するために、信号の符号化および復号化方法、装置、ユーザイクイップメント、ネットワーク側デバイス並びに記憶媒体を提供する。

【課題を解決するための手段】

【0006】

本開示の一態様の実施例によって提供される信号の符号化および復号化方法は、符号化側に適用され、
サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得するステップと、
異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定するステップと、
各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、前記各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信するステップと、を含む。

【0007】

本開示のもう１つの態様の実施例によって提供される信号の符号化および復号化方法は、復号化側に適用され、
符号化側から送信された符号化コードストリームを受信するステップと、
前記符号化コードストリームを復号化して混合フォーマットのオーディオ信号を取得するステップであって、前記混合フォーマットのオーディオ信号がサウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含むステップと、を含む。

【0008】

本開示のもう１つの態様の実施例によって提供される信号の符号化および復号化装置は、
サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得するための取得モジュールと、
異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定するための決定モジュールと、
各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、前記各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信するための符号化モジュールと、を備える。

【0009】

本開示のもう１つの態様の実施例によって提供される信号の符号化および復号化装置は、
符号化側から送信された符号化コードストリームを受信するための受信モジュールと、
前記符号化コードストリームを復号化して混合フォーマットのオーディオ信号を取得するための復号化モジュールであって、前記混合フォーマットのオーディオ信号がサウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む復号化モジュールと、を備える。

【0010】

本開示のもう１つの態様の実施例は通信装置を提供し、前記装置は、プロセッサとメモリとを備え、前記メモリにはコンピュータプログラムが記憶され、前記プロセッサは、前記メモリに記憶されているコンピュータプログラムを記憶することにより、前記装置に上記１つの態様の実施例によって提供される方法を実行させる。

【0011】

本開示のもう１つの態様の実施例は通信装置を提供し、前記装置は、プロセッサとメモリとを備え、前記メモリにはコンピュータプログラムが記憶され、前記プロセッサは、前記メモリに記憶されているコンピュータプログラムを記憶することにより、前記装置に上記もう１つの態様の実施例によって提供される方法を実行させる。

【0012】

本開示のもう１つの態様の実施例によって提供される通信装置は、プロセッサとインターフェース回路とを備え、
前記インターフェース回路は、コード命令を受信して前記プロセッサに送信し、
前記プロセッサは、前記コード命令を実行することにより、１つの態様の実施例によって提供される方法を実行する。

【0013】

【0014】

本開示のもう１つの態様の実施例によって提供されるコンピュータ読み取り可能な記憶媒体は命令を記憶し、前記命令が実行される場合、１つの態様の実施例によって提供される方法が実現される。

【0015】

本開示のもう１つの態様の実施例によって提供されるコンピュータ読み取り可能な記憶媒体は命令を記憶し、前記命令が実行される場合、もう１つの態様の実施例によって提供される方法が実現される。

【発明の効果】

【0016】

以上により、本開示の一実施例によって提供される信号の符号化および復号化方法、装置、符号化デバイス、復号化デバイス並びに記憶媒体では、まず、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得し、そして、異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定し、その後、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。このことから分かるように、本開示の実施例では、混合フォーマットのオーディオ信号を符号化する時、異なるフォーマットのオーディオ信号の特徴に基づいて、異なるフォーマットのオーディオ信号を再構成し分析し、異なるフォーマットのオーディオ信号に対して、自己適応符号化モードを決定し、そして、対応する符号化カーネルを用いて符号化することにより、より良い符号化効率を達成する。

【図面の簡単な説明】

【0017】

本開示の上記および／または付加的な態様と利点は、以下の図面と組み合わせた実施例に対する説明から明らかになり且つ容易に理解できるようになる。

【図1a】本開示の一実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図1b】本開示の一実施例によって提供される収集側のマイクロホン収集レイアウトの概略図である。

【図1c】本開示の一実施例によって提供される図１ｂの再生側に対応するスピーカー再生レイアウトの概略図である。

【図2a】本開示の一実施例によって提供されるもう１つの信号の符号化および復号化方法の概略フローチャートである。

【図2b】本開示の一実施例によって提供される信号符号化方法のフローチャートである。

【図3】本開示のさらなる実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図4a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図4b】本開示の一実施例によって提供されるオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートである。

【図5a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図5b】本開示の一実施例によって提供される別のオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートである。

【図6a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図6b】本開示の一実施例によって提供される別のオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートである。

【図7a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図7b】本開示のもう１つの実施例によって提供されるＡＣＥＬＰ符号化原理のブロック図である。

【図7c】本開示の一実施例によって提供される周波数領域符号化原理のブロック図である。

【図7d】本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを符号化する方法のフローチャートである。

【図8a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図8b】本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを符号化するもう１つの方法のフローチャートである。

【図9a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図9b】本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを符号化するもう１つの方法のフローチャートである。

【図10】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図11a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図11b】本開示の一実施例によって提供される信号復号化方法のフローチャートである。

【図12a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図12b-12d】それぞれ本開示の一実施例によって提供されるオブジェクトベースのオーディオ信号を復号化する方法のフローチャートである。

【図12e-12f】それぞれ本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを復号化する方法のフローチャートである。

【図13】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図14】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図15】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図16】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図17】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図18】本開示の一実施例によって提供される符号化および復号化装置の構造概略図である。

【図19】本開示のもう１つの実施例によって提供される符号化および復号化装置の構造概略図である。

【図20】本開示の一実施例によって提供されるユーザイクイップメントのブロック図である。

【図21】本開示の一実施例によって提供されるネットワーク側デバイスのブロック図である。

【発明を実施するための形態】

【0018】

ここで、例示的な実施例を詳しく説明し、その例は図面に示される。以下の説明は図面に関連する場合、別に表示がない限り、異なる図面における同じ数字は、同じ又は類似する要素を表す。以下の例示的な実施例で説明される実施形態は、本発明の実施例に一致するすべての実施形態を表すものではない。むしろ、それらは、添付の特許請求の範囲で詳しく説明される、本発明の実施例の一部の態様と一致する装置と方法の例に過ぎない。

【0019】

本開示の実施例で使用される用語は、特定の実施例を説明するための目的であり、本開示の実施例を限定するものではない。文脈では他の意味がはっきりと示されていない限り、本開示の実施例と添付の特許請求の範囲で使用される単数型の「一種」と「該」も複数型を含む。なお、本明細書で使用される「及び／又は」という用語は、関連し且つ列挙された１つ又は複数の項目の任意又はすべての可能な組み合わせを指し且つ含む。

【0020】

なお、本開示の実施例では、第１、第２、第３などの用語で様々な情報を説明する可能性があるが、これらの情報はこれらの用語に限定すべきではないことを理解されたい。これらの用語は、同一のタイプの情報を互いに区別することだけに使用される。例えば、本開示の実施例の範囲から逸脱しない限り、第１の情報は第２の情報と呼ぶこともでき、同様に、第２の情報は第１の情報と呼ぶこともできる。コンテキストによると、ここで使用される「の場合」という用語は、「・・・時」又は「・・・すると」又は「決定することに応答」こととして解釈することができる。

【0021】

以下、図面を参照して本開示の一実施例によって提供される符号化および復号化方法、装置、ユーザイクイップメント、ネットワーク側デバイス並びに記憶媒体を詳しく説明する。

【0022】

図１ａは、本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図１ａに示すように、該信号の符号化および復号化方法は以下のステップ１０１～１０３を含んでもよい。

【0023】

ステップ１０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0024】

ここで、本開示の一実施例では、該符号化側はＵＥ（ＵｓｅｒＥｑｕｉｐｍｅｎｔ、端末デバイス）または基地局であってもよく、ＵＥは、ユーザに音声および／またはデータ連通性を提供するデバイスであってもよい。端末デバイスはＲＡＮ（ＲａｄｉｏＡｃｃｅｓｓＮｅｔｗｏｒｋ、無線アクセスネットワーク）を介して１つまたは複数のコアネットワークと通信することができ、ＵＥは、例えばセンサデバイス、移動電話（又は「セルラ」電話とも呼ばれる）のようなモノのインターネット、およびモノのインターネットを有するコンピュータであってもよく、例えば、固定式、ポータブル、ポケット、ハンドヘルド、コンピュータ内蔵又は車載の装置であってもよい。例えば、ステーション（Ｓｔａｔｉｏｎ、ＳＴＡ）、加入者ユニット（ｓｕｂｓｃｒｉｂｅｒｕｎｉｔ）、加入者局（ｓｕｂｓｃｒｉｂｅｒｓｔａｔｉｏｎ）、移動局（ｍｏｂｉｌｅｓｔａｔｉｏｎ）、モバイル（ｍｏｂｉｌｅ）、リモート局（ｒｅｍｏｔｅｓｔａｔｉｏｎ）、アクセスポイント、リモート端末（ｒｅｍｏｔｅｔｅｒｍｉｎａｌ）、アクセス端末（ａｃｃｅｓｓｔｅｒｍｉｎａｌ）、ユーザ端末（ｕｓｅｒｔｅｒｍｉｎａｌ）またはユーザエージェント（ｕｓｅｒａｇｅｎｔ）。又は、ＵＥは無人航空機のデバイスであってもよい。又は、ＵＥは車載デバイスであってもよく、例えば、無線通信機能を備えるモバイルコンピュータ、又は外付けモバイルコンピュータを有する無線通信デバイスであってもよい。又は、ＵＥは道端デバイスであってもよく、例えば、無線通信機能を備える街灯、信号灯又は他の道端デバイスなどであってもよい。

【0025】

および、本開示の一実施例では、上記三種類のフォーマットのオーディオ信号は、具体的に、信号の収集フォーマットに基づいて分けられたものであり、且つ異なるフォーマットのオーディオ信号が主に適用されるシーンもそれぞれ異なる。

【0026】

具体的に、本開示の一実施例では、上記サウンドチャネルベースのオーディオ信号の主な適用シーンは、収集側と再生側において同じマイクロホン収集レイアウトとスピーカー再生レイアウトがそれぞれ事前に設定されているシーンであり、例えば、図１ｂは、本開示の一実施例によって提供される収集側のマイクロホン収集レイアウトの概略図であり、それは、５．０フォーマットのサウンドチャネルベースのオーディオ信号を収集することができる。図１ｃは本開示の一実施例によって提供される、図１ｂに対応する再生側のスピーカー再生レイアウトの概略図であり、それは、図１ｂの収集側によって収集される５．０フォーマットのサウンドチャネルベースのオーディオ信号を再生することができる。

【0027】

本開示のもう１つの実施例では、上記オブジェクトベースのオーディオ信号は、通常、独立したマイクロホンを用いて発声オブジェクトを録音し、その主な適用シーンは、再生側においてこのオーディオ信号に対して、音声のオンオフ、音量調整、音声と映像の方向調整、周波数帯域イコライゼーション処理などの独立した制御操作を行う必要があるシーンである。

【0028】

本開示のもう１つの実施例では、上記シーンベースのオーディオ信号の主な適用シーンは、収集側が所在する完全な音場を録音する必要があるシーンであり、例えばコンサートのライブ録音、サッカーの試合のライブ録音などである。

【0029】

ステップ１０２において、異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定する。

【0030】

ここで、本開示の一実施例では、上記「異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定する」ステップは、サウンドチャネルベースのオーディオ信号の信号特徴に基づいて、サウンドチャネルベースのオーディオ信号の符号化モードを決定するステップと、オブジェクトベースのオーディオ信号の信号特徴に基づいて、オブジェクトベースのオーディオ信号の符号化モードを決定するステップと、シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定するステップと、を含んでもよい。

【0031】

なお、本開示の一実施例では、異なるフォーマットのオーディオ信号に対して、信号特徴に基づいて、対応する符号化モードを決定する方法は異なる。ここで、各フォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定することについては、後続の実施例では詳しく説明する。

【0032】

ステップ１０３において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0033】

本開示の一実施例では、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得するステップは、
サウンドチャネルベースのオーディオ信号の符号化モードを用いて、前記サウンドチャネルベースのオーディオ信号を符号化するステップと、
オブジェクトベースのオーディオ信号の符号化モードを用いて、前記オブジェクトベースのオーディオ信号を符号化するステップと、
シーンベースのオーディオ信号の符号化モードを用いて、前記シーンベースのオーディオ信号を符号化するステップとを含んでもよい。

【0034】

さらに、本開示の一実施例では、上記各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込む時、決定された各フォーマットのオーディオ信号に対応するサイド情報パラメータを同時に符号化コードストリームに書き込み、ここで、該サイド情報パラメータは、対応するフォーマットのオーディオ信号に対応する符号化モードを指示する。

【0035】

また、本開示の一実施例では、各フォーマットのオーディオ信号に対応するサイド情報パラメータを符号化コードストリームに書き込んで復号化側に送信することにより、復号化側は各フォーマットのオーディオ信号に対応するサイド情報パラメータに基づいて各フォーマットのオーディオ信号に対応する符号化モードを決定し、そしてこの後に該符号化モードに基づいて各フォーマットのオーディオ信号に対して対応する復号化モードを用いて復号化することができる。

【0036】

なお、本開示の一実施例では、オブジェクトベースのオーディオ信号にとって、対応する符号化された信号パラメータ情報は、一部のオブジェクト信号を保留してもよい。シーンベースのオーディオ信号とサウンドチャネルベースのオーディオ信号にとって、その対応する符号化された信号パラメータ情報は、元のフォーマット信号を保留する必要がなく、他のフォーマット信号に変換する。

【0037】

以上により、本開示の一実施例によって提供される信号の符号化および復号化方法では、まず、混合フォーマットのオーディオ信号を取得し、該混合フォーマットのオーディオ信号は、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含み、そして、異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定し、その後、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。このことから分かるように、本開示の実施例では、混合フォーマットのオーディオ信号を符号化する時、異なるフォーマットのオーディオ信号の特徴に基づいて、異なるフォーマットのオーディオ信号を再構成し分析し、異なるフォーマットのオーディオ信号に対して、適応符号化モードを決定し、そして、対応する符号化カーネルを用いて符号化して、より良い符号化効率を達成する。

【0038】

図２ａは本開示の一実施例によって提供されるもう１つの信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図２ａに示すように、該信号の符号化および復号化方法は以下のステップ２０１～２０５を含んでもよい。

【0039】

ステップ２０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0040】

ステップ２０２において、混合フォーマットのオーディオ信号にサウンドチャネルベースのオーディオ信号が含まれていることに応答して、サウンドチャネルベースのオーディオ信号の信号特徴に基づいて、サウンドチャネルベースのオーディオ信号の符号化モードを決定する。

【0041】

ここで、本開示の一実施例では、サウンドチャネルベースのオーディオ信号の信号特徴に基づいて、サウンドチャネルベースのオーディオ信号の符号化モードを決定することは、
サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値（例えば、５であってもよい）より小さいか否かを判断することを含んでもよい。

【0042】

ここで、本開示の一実施例では、サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さい場合、サウンドチャネルベースのオーディオ信号の符号化モードが以下の方策１～２のうちの少なくとも１つであると決定する。

【0043】

方策１において、オブジェクト信号符号化カーネルを用いてサウンドチャネルベースのオーディオ信号における各オブジェクト信号を符号化する。

【0044】

方策２において、入力された第１のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、第１のコマンドライン制御情報に基づいて、サウンドチャネルベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化する。ここで、第１のコマンドライン制御情報は、サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、符号化する必要があるオブジェクト信号の数が１以上であり且つサウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さい。

【0045】

このことから分かるように、本開示の一実施例では、サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さいと決定された場合、サウンドチャネルベースのオーディオ信号におけるすべてまたは一部のオブジェクト信号を符号化し、これにより、符号化の難しさを大幅に低下させ、符号化効率を向上させることができる。

【0046】

また、本開示のもう１つの実施例では、サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値以上である場合、サウンドチャネルベースのオーディオ信号の符号化モードが以下の方策３～５のうちの少なくとも１つであると決定する。

【0047】

方策３において、サウンドチャネルベースのオーディオ信号を第１の他のフォーマットのオーディオ信号（例えばシーンベースのオーディオ信号またはオブジェクトベースのオーディオ信号であってもよい）に変換し、第１の他のフォーマットのオーディオ信号のサウンドチャネル数がサウンドチャネルベースのオーディオ信号のサウンドチャネル数以下であり、第１の他のフォーマットのオーディオ信号に対応する符号化カーネルを用いて、第１の他のフォーマットのオーディオ信号を符号化する。例示的に、本開示の一実施例では、当該サウンドチャネルベースのオーディオ信号が７．１．４フォーマットのサウンドチャネルベースのオーディオ信号（総サウンドチャネル数が１３）である時、該第１の他のフォーマットのオーディオ信号は、例えば、ＦＯＡ（ＦｉｒｓｔＯｒｄｅｒＡｍｂｉｓｏｎｉｃｓ、一次アンビソニックス）信号（総サウンドチャネル数が４）であってもよく、７．１．４フォーマットのサウンドチャネルベースのオーディオ信号をＦＯＡ信号に変換することで、符号化する必要がある信号総サウンドチャネル数を１３から４に変換することができ、これにより、符号化の難しさを大幅に低下させて、符号化効率を向上させることができる。

【0048】

方策４において、入力された第１のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、第１のコマンドライン制御情報に基づいて、サウンドチャネルベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化し、第１のコマンドライン制御情報は、前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、符号化する必要があるオブジェクト信号の数が１以上であり且つサウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さい。

【0049】

方策５において、入力された第２のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、第２のコマンドライン制御情報に基づいて、サウンドチャネルベースのオーディオ信号における少なくとも一部のサウンドチャネル信号を符号化する。ここで、第２のコマンドライン制御情報が、サウンドチャネルベースのオーディオ信号に含まれるサウンドチャネル信号のうち符号化する必要があるサウンドチャネル信号を指示し、該符号化する必要があるサウンドチャネル信号の数が１以上であり且つサウンドチャネルベースのオーディオ信号に含まれるサウンドチャネル信号の合計数以下である。

【0050】

このことから分かるように、本開示の一実施例では、サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が多いと決定された場合、該サウンドチャネルベースのオーディオ信号を直接符号化すると、符号化の難しさが高い。この時、サウンドチャネルベースのオーディオ信号における一部のオブジェクト信号のみを符号化してもよく、および／またはサウンドチャネルベースのオーディオ信号における一部のサウンドチャネル信号を符号化してもよく、および／または該サウンドチャネルベースのオーディオ信号をサウンドチャネル数の少ない信号に変換してから符号化してもよく、これにより、符号化難しさを大幅に低下させ、符号化効率を最適化することができる。

【0051】

ステップ２０３において、混合フォーマットのオーディオ信号にオブジェクトベースのオーディオ信号が含まれていることに応答して、オブジェクトベースのオーディオ信号の信号特徴に基づいて、オブジェクトベースのオーディオ信号の符号化モードを決定する。

【0052】

ステップ２０３についての詳しい説明は以下の実施例で説明する。

【0053】

ステップ２０４において、混合フォーマットのオーディオ信号にシーンベースのオーディオ信号が含まれていることに応答して、シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定する。

【0054】

本開示の一実施例では、シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定するステップは、
シーンベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値例えば５であってもよい）より小さいか否かを判断するステップを含んでもよい（。

【0055】

ここで、本開示の一実施例では、シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さい場合、シーンベースのオーディオ信号の符号化モードが以下の方策ａ～ｂのうちの少なくとも１つであると決定する。

【0056】

方策ａにおいて、オブジェクト信号符号化カーネルを用いてシーンベースのオーディオ信号の各オブジェクト信号を符号化する。

【0057】

方策ｂにおいて、入力された第４のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、第４のコマンドライン制御情報に基づいて、シーンベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化し、ここで、第４のコマンドライン制御情報が、シーンベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、符号化する必要があるオブジェクト信号の数が１以上であり且つシーンベースのオーディオ信号に含まれるオブジェクト信号の合計数以下である。

【0058】

このことから分かるように、本開示の一実施例では、シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さいと決定された場合、シーンベースのオーディオ信号のすべてまたは一部のオブジェクト信号を符号化し、これによって、符号化の難しさを大幅に低下させ、符号化効率を向上させることができる。

【0059】

本開示のもう１つの実施例では、シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値以上である場合、シーンベースのオーディオ信号の符号化モードが以下の方策ｃ～ｄのうちの少なくとも１つであると決定する。

【0060】

方策ｃにおいて、シーンベースのオーディオ信号を第２の他のフォーマットのオーディオ信号に変換し、第２の他のフォーマットのオーディオ信号のサウンドチャネル数がシーンベースのオーディオ信号のサウンドチャネル数以下であり、シーン信号符号化カーネルを用いて、第２の他のフォーマットのオーディオ信号を符号化する。

【0061】

方策ｄにおいて、シーンベースのオーディオ信号に対して低次変換を行って、シーンベースのオーディオ信号を、次数がシーンベースのオーディオ信号の現在の次数より低い低次のシーンベースのオーディオ信号に変換し、シーン信号符号化カーネルを用いて低次のシーンベースのオーディオ信号を符号化する。なお、本開示の一実施例では、シーンベースのオーディオ信号に対して低次変換を行う時、該シーンベースのオーディオ信号を他のフォーマットの信号に低次変換してもよい。例示的に、３次のシーンベースのオーディオ信号を低次５．０フォーマットのサウンドチャネルベースのオーディオ信号に変換しいてもよく、この時、符号化する必要がある信号総サウンドチャネル数は１６（（３＋１）＊（３＋１））から５に変えられ、これにより、符号化の難しさを大幅に低下させ、符号化効率を向上させる。

【0062】

このことから分かるように、本開示の一実施例では、シーンベースのオーディオ信号に含まれるオブジェクト信号の数が多いと決定された場合、該シーンベースのオーディオ信号を直接符号化すると、符号化の難しさが高い。この時、該シーンベースのオーディオ信号のみをサウンドチャネル数の少ない信号に変換してから符号化してもよく、および／または該シーンベースのオーディオ信号を低次信号に変換してから符号化してもよく、これにより、符号化難しさを大幅に低下させて、符号化効率を向上させることができる。

【0063】

ステップ２０５において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0064】

ここで、ステップ２０５についての紹介は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0065】

最後に、上記説明内容に基づいて、図２ｂは、本開示の一実施例によって提供される信号符号化方法のフローチャートであり、上記内容および図２ｂと組み合わせて分かるように、符号化側は混合フォーマットのオーディオ信号を受信すると、信号特徴分析により各フォーマットのオーディオ信号を分類し、その後、コマンドライン制御情報（即ち上記第１のコマンドライン制御情報、および／または第２のコマンドライン制御情報（以下の内容で説明される）、および／または第４のコマンドライン制御情報）に基づいて、各フォーマットのオーディオ信号に対して、対応する符号化カーネルを用いて対応する符号化モードで符号化し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0066】

【0067】

図３は、本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図３に示すように、該信号の符号化および復号化方法は、以下のステップ３０１～３０６を含んでもよい。

【0068】

ステップ３０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0069】

ステップ３０２において、混合フォーマットのオーディオ信号にオブジェクトベースのオーディオ信号が含まれていることに応答して、オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得する。

【0070】

ここで、本開示の一実施例では、該信号特徴分析は、信号の相互相関パラメータ値分析であってもよい。本開示のもう１つの実施例では、該特徴分析は、信号の周波数帯域幅範囲分析であってもよい。また、相互相関パラメータ値分析と周波数帯域幅範囲分析について、この後の実施例において詳しく説明する。

【0071】

ステップ３０３において、前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得し、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとはいずれも少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0072】

オブジェクトベースのオーディオ信号には、異なるタイプのオブジェクト信号が含まれる可能性があり、そして、異なるタイプのオブジェクト信号について、その後続の符号化モードは異なる。よって、本開示の一実施例では、該オブジェクトベースのオーディオ信号における異なるタイプのオブジェクト信号を分類して第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットを取得し、その後、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットに対して、対応する符号化モードをそれぞれ決定することができる。ここで、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットの分類方式についてこの後の実施例では詳しく説明する。

【0073】

ステップ３０４において、第１の種類のオブジェクト信号セットに対応する符号化モードを決定する。

【0074】

本開示の一実施例では、上記ステップ３０３における第１の種類のオブジェクト信号セットに対する分類方式が異なる場合、本ステップで決定された第１の種類のオブジェクト信号セットの符号化モードも異なる。ここで、「第１の種類のオブジェクト信号セットに対応する符号化モードを決定する」具体的な方法は、この後の実施例で説明する。

【0075】

ステップ３０５において、分析結果に基づいて第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定し、前記オブジェクト信号サブセットが少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0076】

ここで、ステップ３０２で採用される信号特徴分析方法が異なる場合、本ステップにおけるオブジェクトベースのオーディオ信号の分類方法、及び各オブジェクト信号サブセットに対応する符号化モードを決定する方法も異なる。

【0077】

具体的には、本開示の一実施例では、ステップ３０２で採用される信号特徴分析方法が信号の相互相関パラメータ値分析方法である場合、本ステップにおける第２の種類のオブジェクト信号セットの分類方法は、信号の相互相関パラメータ値に基づく分類方法であってもよく、各オブジェクト信号サブセットに対応する符号化モードを決定する方法は、信号の相互相関パラメータ値に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定することであってもよい。

【0078】

本開示のもう１つの実施例では、ステップ３０２で採用される信号特徴分析方法が、信号の周波数帯域幅範囲分析方法である場合、本ステップにおける第２の種類のオブジェクト信号セットの分類方法は、信号の周波数帯域幅範囲に基づく分類方法であってもよく、各オブジェクト信号サブセットに対応する符号化モードを決定する方法は、信号の周波数帯域幅範囲に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定することであってもよい。

【0079】

および、上記「信号の相互相関パラメータ値または信号の周波数帯域幅範囲に基づく分類方法」、「信号の相互相関パラメータ値または信号の周波数帯域幅範囲に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定すること」についての詳しい説明もこの後の実施例で説明する。

【0080】

ステップ３０６において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0081】

ここで、本開示の一実施例では、ステップ３０７における第２の種類のオブジェクト信号セットの分類方式が異なる場合、上記第２の種類のオブジェクト信号サブセットに対する符号化状況も異なる。

【0082】

これに基づいて、本開示の一実施例では、上記各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信することは、具体的には、
第２の種類のオブジェクト信号セットに対する分類方式を指示する分類サイド情報パラメータを決定するステップ１と、
各フォーマットのオーディオ信号に対応する、対応するフォーマットのオーディオ信号に対応する符号化モードを指示するサイド情報パラメータを決定するステップ２と、
分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とに対してコードストリーム多重化を行って符号化コードストリームを取得し、符号化コードストリームを復号化側に送信するステップ３と、を含んでもよい。

【0083】

ここで、本開示の一実施例では、分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータとを復号化側に送信することにより、復号化側は分類サイド情報パラメータに基づいて第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットに対応する符号化状況を決定し、且つ各オブジェクト信号サブセットに対応するサイド情報パラメータに基づいて各オブジェクト信号サブセットに対応する符号化モードを決定することができ、これにより、この後に該符号化状況と符号化モードに基づいて、オブジェクトベースのオーディオ信号に対して対応する復号化モードと復号化モードを用いて復号化することができ、および、復号化側は、各フォーマットのオーディオ信号に対応するサイド情報パラメータに基づいて、サウンドチャネルベースのオーディオ信号と、シーンベースのオーディオ信号に対応する符号化モードとを決定することができ、ひいてはサウンドチャネルベースのオーディオ信号とシーンベースのオーディオ信号の復号化を実現する。

【0084】

【0085】

図４ａは、本開示のもう１つの実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図４ａに示すように、該信号の符号化および復号化方法は、以下のステップ４０１～４０６を含んでもよい。

【0086】

ステップ４０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0087】

ステップ４０２において、混合フォーマットのオーディオ信号にオブジェクトベースのオーディオ信号が含まれていることに応答して、オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得する。

【0088】

ここで、ステップ４０１～４０２についての説明は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0089】

ステップ４０３において、オブジェクトベースのオーディオ信号のうち個別の操作処理を必要としない信号を第１の種類のオブジェクト信号セットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類し、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットがいずれも少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0090】

ステップ４０４において、第１の種類のオブジェクト信号セットに対応する符号化モードが、第１の種類のオブジェクト信号セットにおけるオブジェクトベースのオーディオ信号に対して第１の事前レンダリング処理を行い、マルチチャネル符号化カーネルを用いて、第１の事前レンダリング処理された信号を符号化することであると決定する。

【0091】

ここで、本開示の一実施例では、該第１の事前レンダリング処理は、オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をサウンドチャネルベースのオーディオ信号に変換することを含んでもよい。

【0092】

ステップ４０５において、分析結果に基づいて第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定し、オブジェクト信号サブセットが少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0093】

ステップ４０６において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0094】

ここで、ステップ４０５～４０６についての説明は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0095】

最後に、上記説明内容に基づいて、図４ｂは本開示の一実施例によって提供されるオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートであり、上記内容と図４ｂと組み合わせて分かるように、まずオブジェクトベースのオーディオ信号に対して特徴分析を行い、その後、オブジェクトベースのオーディオ信号を第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットに分類し、そして、第１の種類のオブジェクト信号セットに対して第１の事前レンダリング処理を行い且つマルチサウンドチャネル符号化カーネルを用いて符号化し、第２の種類のオブジェクト信号セットに対して、分析結果に基づいて分類して少なくとも１つのオブジェクト信号サブセット（例えばオブジェクト信号サブセット１、オブジェクト信号サブセット２・・・オブジェクト信号サブセットｎ）を取得し、その後、該少なくとも１つのオブジェクト信号サブセットをそれぞれ符号化する。

【0096】

【0097】

図５ａは、本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図５ａに示すように、該信号の符号化および復号化方法は以下のステップ５０１～５０６を含んでもよい。

【0098】

ステップ５０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0099】

ステップ５０２において、混合フォーマットのオーディオ信号にオブジェクトベースのオーディオ信号が含まれていることに応答して、オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得する。

【0100】

ここで、ステップ５０１～５０２についての説明は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0101】

ステップ５０３において、オブジェクトベースのオーディオ信号のうち背景音に属する信号を第１の種類のオブジェクト信号セットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類し、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットがいずれも少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0102】

ステップ５０４において、第１の種類のオブジェクト信号セットに対応する符号化モードが、第１の種類のオブジェクト信号セットにおけるオブジェクトベースのオーディオ信号に対して第２の事前レンダリング処理を行って、ＨＯＡ（ＨｉｇｈＯｒｄｅｒＡｍｂｉｓｏｎｉｃｓ、高次アンビソニックス）符号化カーネルを用いて、第２の事前レンダリング処理された信号を符号化することであると決定する。

【0103】

ここで、本開示の一実施例では、第２の事前レンダリング処理は、オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、オブジェクトベースのオーディオ信号をシーンベースのオーディオ信号に変換することであってもよい。

【0104】

ステップ５０５において、分析結果に基づいて第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定し、前記オブジェクト信号サブセットが少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0105】

ステップ５０６において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0106】

ここで、ステップ５０５～５０６についての説明は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0107】

最後に、上記説明内容に基づいて、図５ｂは本開示の一実施例によって提供される他のオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートであり、上記内容と図５ｂと組み合わせて分かるように、まずオブジェクトベースのオーディオ信号に対して特徴分析を行い、その後、オブジェクトベースのオーディオ信号を第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットに分類し、そして、第１の種類のオブジェクト信号セットに対して第２の事前レンダリング処理を行い且つＨＯＡ符号化カーネルを用いて符号化し、第２の種類のオブジェクト信号セットに対して、分析結果に基づいて分類して少なくとも１つのオブジェクト信号サブセット（例えばオブジェクト信号サブセット１、オブジェクト信号サブセット２・・・オブジェクト信号サブセットｎ）を取得し、その後、該少なくとも１つのオブジェクト信号サブセットをそれぞれ符号化する。

【0108】

【0109】

図６ａは本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は復号化側によって実行され、図６ａと、図４ａおよび図５ａとの実施例の相違点は、本実施例では、第１の種類のオブジェクト信号セットがさらに第１のオブジェクト信号サブセットと第２のオブジェクト信号サブセットに分けられることである。図６ａに示すように、該信号の符号化および復号化方法は以下のステップを含んでもよい。

【0110】

ステップ６０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0111】

ステップ６０２において、オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得する。

【0112】

ステップ６０３において、オブジェクトベースのオーディオ信号のうち個別の操作処理を必要としない信号を第１のオブジェクト信号サブセットに分類し、オブジェクトベースのオーディオ信号のうち背景音に属する信号を第２のオブジェクト信号サブセットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類し、第１の種類のオブジェクト信号サブセット、第２の種類のオブジェクト信号サブセットおよび第２の種類のオブジェクト信号セットにはいずれも少なくとも１つのオブジェクトベースのオーディオ信号が含まれる。

【0113】

ステップ６０４において、第１の種類のオブジェクト信号セットにおける第１のオブジェクト信号サブセットと第２のオブジェクト信号サブセットの符号化モードを決定する。

【0114】

ここで、本開示の一実施例では、第１の種類のオブジェクト信号セットにおける第１のオブジェクト信号サブセットに対応する符号化モードが、第１のオブジェクト信号サブセットにおけるオブジェクトベースのオーディオ信号に対して第１の事前レンダリング処理を行って、マルチチャネル符号化カーネルを用いて、第１の事前レンダリング処理された信号を符号化することであると決定し、第１の事前レンダリング処理は、オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をサウンドチャネルベースのオーディオ信号に変換することを含む。

【0115】

本開示の一実施例では、第１の種類のオブジェクト信号セットにおける第２のオブジェクト信号サブセットに対応する符号化モードが、第２のオブジェクト信号サブセットにおけるオブジェクトベースのオーディオ信号に対して第２の事前レンダリング処理を行って、ＨＯＡ符号化カーネルを用いて、第２の事前レンダリング処理された信号を符号化することであると決定し、第２の事前レンダリング処理は、オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、オブジェクトベースのオーディオ信号をシーンベースのオーディオ信号に変換することを含む。

【0116】

ステップ６０５において、分析結果に基づいて第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定し、前記オブジェクト信号サブセットが少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0117】

ステップ６０６において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0118】

また、ステップ６０１～６０６についての詳しい説明は上記実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0119】

最後に、上記説明内容に基づいて、図６ｂは本開示の一実施例によって提供される他のオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートであり、上記内容と図６ｂと組み合わせて分かるように、まずオブジェクトベースのオーディオ信号に対して特徴分析を行い、その後、オブジェクトベースのオーディオ信号を第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットに分類し、ここで、第１の種類のオブジェクト信号セットが、第１のオブジェクト信号サブセットと第２のオブジェクト信号サブセットを含み、第１のオブジェクト信号サブセットに対して第１の事前レンダリング処理を行い且つマルチサウンドチャネル符号化カーネルを用いて符号化し、第２のオブジェクト信号サブセットに対して第２の事前レンダリング処理を行い且つＨＯＡ符号化カーネルを用いて符号化し、第２の種類のオブジェクト信号セットに対して、分析結果に基づいて分類して少なくとも１つのオブジェクト信号サブセット（例えばオブジェクト信号サブセット１、オブジェクト信号サブセット２・・・オブジェクト信号サブセットｎ）を取得し、その後、該少なくとも１つのオブジェクト信号サブセットをそれぞれ符号化する。

【0120】

【0121】

図７ａは本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図７ａに示すように、該信号の符号化および復号化方法は以下ステップ７０１～７０７を含んでもよい。

【0122】

ステップ７０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0123】

ステップ７０２において、混合フォーマットのオーディオ信号にオブジェクトベースのオーディオ信号が含まれていることに応答して、オブジェクトベースのオーディオ信号に対してハイパスフィルタリング処理を行う。

【0124】

本開示の一実施例では、フィルタを用いてオブジェクト信号をハイパスフィルタリング処理してもよい。

【0125】

ここで、該フィルタのカットオフ周波数が２０Ｈｚ（ヘルツ）に設定される。該フィルタで使用されるフィルタ式は以下の式（１）に示すとおりである。

【数1】

ここで、ａ_１、ａ_２、ｂ_０、ｂ_１、ｂ_２はいずれも定数であり、例示的に、ｂ_０＝０．９９８１４９２、ｂ_１＝－１．９９６３００８、ｂ_２＝０．９９８１４９８、ａ_１＝１．９９６２９９０、ａ_２＝－０．９９６３０５６である。

【0126】

ステップ７０３において、ハイパスフィルタリング処理された信号に対して相関分析を行って、各オブジェクトベースのオーディオ信号の間の相互相関パラメータ値を決定する。

【0127】

ここで、本開示の一実施例では、上記相関分析は、具体的には以下の式（２）で計算可能である。

【数2】

【0128】

なお、上記「式（２）を用いて相互相関パラメータ値を計算する」方法は、本開示の一実施例によって提供される１つの選択可能な方式であり、そして、当分野においてオブジェクト信号間の相互相関パラメータ値を計算する他の方法も本開示に適用可能であることを理解されたい。

【0129】

ステップ７０４において、前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得し、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとがいずれも少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0130】

ステップ７０５において、第１の種類のオブジェクト信号セットに対応する符号化モードを決定する。

【0131】

ここで、ステップ７０４～７０５についての紹介は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0132】

ステップ７０６において、分析結果に基づいて第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定し、前記オブジェクト信号サブセットが少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0133】

本開示の一実施例では、第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定するステップは、
相関度に基づいて、正規化された相関度区間を設定し、信号の相互相関パラメータと正規化された相関度区間とに基づいて、少なくとも１つの第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、その後、オブジェクト信号セットに対応する相関度に基づいて、対応する符号化モードを決定するステップを含んでもよい。

【0134】

なお、該正規化された相関度区間の数は、相関度の区分方式によって決定され、本開示は相関度の区分方式について限定せず、異なる正規化された相関度区間の長さも限定せず、異なる相関度の区分方式に基づいて、対応する数の正規化された相関度区間および異なる区間の長さを設定してもよい。

【0135】

本開示の一実施例では、相関度を、弱い相関、実際の相関、顕著な相関、高度な相関という４種類の関度に区分し、表１は本開示の一実施例によって提供される正規化された相関度区間の分類表である。

【表1】

【0136】

上記内容に基づいて、一例として、相互相関パラメータ値が第１の区間にあるオブジェクト信号をオブジェクト信号セット１に分け、オブジェクト信号セット１が独立符号化モードに対応すると決定し、
相互相関パラメータ値が第２の区間にあるオブジェクト信号をオブジェクト信号セット２に分け、オブジェクト信号セット２が連携符号化モード１に対応すると決定し、
相互相関パラメータ値が第３の区間にあるオブジェクト信号をオブジェクト信号セット３に分け、オブジェクト信号セット３が連携符号化モード２に対応すると決定し、
相互相関パラメータ値が第４の区間にあるオブジェクト信号をオブジェクト信号セット４に分け、オブジェクト信号セット４が連携符号化モード３に対応すると決定する。

【0137】

ここで、本開示の一実施例では、第１の区間は［０．００～±０．３０）であってもよく、第２の区間は［±０．３０－±０．５０）であってもよく、第３の区間は［±０．５０－±０．８０）であってもよく、第４の区間は［±０．８０－±１．００］であってもよい。そして、オブジェクト信号の相互相関パラメータ値が第１の区間にある場合は、オブジェクト信号間の相関が弱いことを示し、この時、符号化の精度を確保するために、独立符号化モードを用いて符号化するべきである。オブジェクト信号間の相互相関パラメータ値が第２の区間、第３の区間、第４の区間にある場合は、オブジェクト信号間の相互相関が高いことを示し、この時、圧縮率を確保して、帯域幅を節約するために、連携符号化モードで符号化することができる。

【0138】

本開示の一実施例では、オブジェクト信号サブセットに対応する符号化モードは、独立符号化モードまたは連携符号化モードを含む。

【0139】

および、本開示の一実施例では、独立符号化モードには、時間領域処理方式または周波数領域処理方式が対応しており、
ここで、オブジェクト信号サブセットにおけるオブジェクト信号が音声信号または類似音声信号である場合、独立符号化モードは時間領域処理方式を採用し、
オブジェクト信号サブセットにおけるオブジェクト信号が音声信号または類似音声信号以外の他のフォーマットのオーディオ信号である場合、独立符号化モードは周波数領域処理方式を採用する。

【0140】

本開示の一実施例では、上記時間領域処理方式は、ＡＣＥＬＰ符号化モデルによって実現可能であり、図７ｂは、本開示の一実施例によって提供されるＡＣＥＬＰ符号化の原理ブロック図である。および、ＡＣＥＬＰエンコーダの原理は具体的に従来技術における説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0141】

本開示の一実施例では、上記周波数領域処理方式は、変換領域処理方式を含んでもよく、図７ｃは、本開示の一実施例によって提供される周波数領域符号化の原理のブロック図である。図７ｃを参照すると、まず変換モジュールによって、入力されたオブジェクト信号に対してＭＤＣＴ変換を行って周波数領域に変換し、ここで、ＭＤＣＴ変換の変換式と逆変換式はそれぞれ以下の式（３）と式（４）に示すとおりである。

【数3】

【0142】

その後、心理音響モデルを用いて、周波数領域に変換されたオブジェクト信号の各周波数帯域を調整し、量子化モジュールを用いてビット割り当てを通じて各周波数帯域包絡係数を量子化して量子化パラメータを得て、最後に、エントロピー符号化モジュールを用いて、量子化パラメータをエントロピー符号化して、符号化されたオブジェクト信号を出力する。

【0143】

ステップ７０７において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0144】

ここで、本開示の一実施例では、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得することは、
サウンドチャネルベースのオーディオ信号の符号化モードを用いて、前記サウンドチャネルベースのオーディオ信号を符号化することと、
オブジェクトベースのオーディオ信号の符号化モードを用いて、前記オブジェクトベースのオーディオ信号を符号化することと、
シーンベースのオーディオ信号の符号化モードを用いて、前記シーンベースのオーディオ信号を符号化することと、を含んでもよい。

【0145】

および、本開示の一実施例では、上記オブジェクトベースのオーディオ信号の符号化モードを用いて、オブジェクトベースのオーディオ信号を符号化することは、
第１の種類のオブジェクト信号セットに対応する符号化モードを用いて第１の種類のオブジェクト信号セットにおける信号を符号化することを含む。

【0146】

第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、同一のオブジェクト信号符号化カーネルを用いて、第２の種類のオブジェクト信号セットにおける事前処理されたすべてのオブジェクト信号サブセットを、対応する符号化モードで符号化する。そして、上記説明された内容に基づいて、図７ｄは本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを符号化する方法のフローチャートである。

【0147】

【0148】

図８ａは本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図８ａに示すように、該信号の符号化および復号化方法は以下のステップ８０１～８０６を含んでもよい。

【0149】

ステップ８０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0150】

ステップ８０２において、混合フォーマットのオーディオ信号にオブジェクトベースのオーディオ信号が含まれていることに応答して、オブジェクト信号の周波数帯域幅範囲を分析する。

【0151】

ステップ８０３において、前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得し、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとがいずれも少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0152】

ステップ８０４において、第１の種類のオブジェクト信号セットに対応する符号化モードを決定する。

【0153】

ステップ８０５において、分析結果に基づいて第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定し、前記オブジェクト信号サブセットが少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0154】

本開示の一実施例では、分析結果に基づいて第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定することは、
異なる周波数帯域幅に対応する帯域幅区間を決定することと、
前記オブジェクト信号の周波数帯域幅範囲、及び異なる周波数帯域幅に対応する帯域幅区間に基づいて、第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、少なくとも１つのオブジェクト信号サブセットに対応する周波数帯域幅に基づいて、対応する符号化モードを決定することと、を含む。

【0155】

ここで、信号の周波数帯域幅は、通常、狭帯域、広帯域、超広帯域及び全帯域を含む。狭帯域に対応する帯域幅区間は第１の区間であってもよく、広帯域に対応する帯域幅区間は第２の区間であってもよく、超広帯域に対応する帯域幅区間は第３の区間であってもよく、全帯域に対応する帯域幅区間は第４の区間であってもよい。これにより、オブジェクト信号の周波数帯域幅範囲が属する帯域幅区間を判断することにより第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得してもよい。その後、少なくとも１つのオブジェクト信号サブセットに対応する周波数帯域幅に基づいて、対応する符号化モードを決定し、ここで、狭帯域、広帯域、超広帯域および全帯域はそれぞれ狭帯域符号化モード、広帯域符号化モード、超広帯域符号化モードおよび全帯域符号化モードに対応している。

【0156】

なお、本開示の実施例では、異なる帯域幅区間の長さを限定せず、そして、異なる周波数帯域幅の間の帯域幅区間はオーバラップしてもよい。

【0157】

また、一例として、周波数帯域幅範囲が第１の区間にあるオブジェクト信号をオブジェクト信号サブセット１に分け、オブジェクト信号サブセット１が狭帯域符号化モードに対応すると決定し、
周波数帯域幅範囲が第２の区間にあるオブジェクト信号をオブジェクト信号サブセット２に分け、オブジェクト信号サブセット２が広帯域符号化モードに対応すると決定し、
周波数帯域幅範囲が第３の区間にあるオブジェクト信号をオブジェクト信号サブセット３に分け、オブジェクト信号サブセット３が超広帯域符号化モードに対応すると決定し、
周波数帯域幅範囲が第４の区間にあるオブジェクト信号をオブジェクト信号サブセット４に分け、オブジェクト信号サブセット４が全帯域符号化モードに対応すると決定してもよい。

【0158】

ここで、本開示の一実施例では、第１の区間は０～４ｋＨｚであってもよく、第２の区間は０～８ｋＨｚであってもよく、第３の区間は０～１６ｋＨｚであってもよく、第４の区間は０～２０ｋＨｚであってもよい。そして、オブジェクト信号の周波数帯域幅が第１の区間にある場合は、オブジェクト信号が狭帯域信号であることを示し、これにより、該オブジェクト信号に対応する符号化モードが、少ないビットで符号化する（即ち、狭帯域符号化モードを用いる）ことであると決定することができ、オブジェクト信号の周波数帯域幅が第２の区間にある場合は、オブジェクト信号が広帯域信号であることを示し、該オブジェクト信号に対応する符号化モードが、比較的多いビットで符号化する（即ち、広帯域符号化モードを用いる）ことであると決定することができ、オブジェクト信号の周波数帯域幅が第３の区間にある場合は、オブジェクト信号が超広帯域信号であることを示し、これにより、該オブジェクト信号に対応する符号化モードが、多いビットで符号化する（即ち超広帯域符号化モードを用いる）ことであると決定することができ、オブジェクト信号の周波数帯域幅が第４の区間にある場合は、オブジェクト信号が全帯域信号であることを示し、該オブジェクト信号に対応する符号化モードが、より多くのビットで符号化する（即ち全帯域符号化モードを用いる）ことであると決定することができる。

【0159】

これにより、異なる周波数帯域幅信号に対して異なるビットで符号化することにより、信号に対する圧縮率を確保でき、帯域幅を節約する。

【0160】

ステップ８０６において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0161】

【0162】

また、本開示の一実施例では、上記オブジェクトベースのオーディオ信号の符号化モードを用いてオブジェクトベースのオーディオ信号を符号化することは、
第１の種類のオブジェクト信号セットに対応する符号化モードを用いて第１の種類のオブジェクト信号セットにおける信号を符号化することと、
第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、異なるオブジェクト信号符号化カーネルを用いて、異なる事前処理されたオブジェクト信号サブセットを、対応する符号化モードで符号化することと、を含んでもよい。そして、上記説明内容に基づいて、図８ｂは本開示の一実施例によって提供される、第２の種類のオブジェクト信号セットを符号化するもう１つの方法のフローチャートである。

【0163】

【0164】

図９ａは本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図９ａに示すように、該信号の符号化および復号化方法は以下のステップ９０１～９０７を含んでもよい。

【0165】

ステップ９０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0166】

ステップ９０２において、混合フォーマットのオーディオ信号にオブジェクトベースのオーディオ信号が含まれていることに応答して、オブジェクト信号の周波数帯域幅範囲を分析する。

【0167】

ステップ９０３において、前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得し、前記第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとはいずれも少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0168】

ステップ９０４において、第１の種類のオブジェクト信号セットに対応する符号化モードを決定する。

【0169】

ステップ９０５において、オブジェクトベースのオーディオ信号に対応する符号化される周波数帯域幅範囲を指示する入力された第３のコマンドライン制御情報を取得する。

【0170】

ステップ９０６において、第３のコマンドライン制御情報と分析結果を統合して第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定する。

【0171】

ここで、本開示の一実施例では、第３のコマンドライン制御情報と分析結果を統合して第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定することは、
第３のコマンドライン制御情報により指示された周波数帯域幅範囲が分析結果から得られた周波数帯域幅範囲と異なる場合、第３のコマンドライン制御情報により指示された周波数帯域幅範囲で優先的に第２の種類のオブジェクト信号セットを分類し、分類結果に基づいて各オブジェクト信号セットに対応する符号化モードを決定することと、
第３のコマンドライン制御情報により指示された周波数帯域幅範囲が分析結果から得られた周波数帯域幅範囲と同じである場合、第３のコマンドライン制御情報により指示された周波数帯域幅範囲または分析結果から得られた周波数帯域幅範囲で第２の種類のオブジェクト信号セットを分類し、分類結果に基づいて各オブジェクト信号セットに対応する符号化モードを決定することと、を含んでも良い。

【0172】

例示的に、本開示の一実施例では、オブジェクト信号の分析結果が超広帯域信号であり、オブジェクト信号の第３のコマンドライン制御情報により指示された周波数帯域幅範囲が全帯域信号であると仮定する場合、第３のコマンドライン制御情報に基づいて該オブジェクト信号をオブジェクト信号サブセット４に分けて、該オブジェクト信号サブセット４に対応する符号化モードが全帯域符号化モードであると決定することができる。

【0173】

ステップ９０７において、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0174】

【0175】

および、本開示の一実施例では、上記オブジェクトベースのオーディオ信号の符号化モードを用いてオブジェクトベースのオーディオ信号を符号化することは、
第１の種類のオブジェクト信号セットに対応する符号化モードを用いて第１の種類のオブジェクト信号セットにおける信号を符号化することと、
第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、異なるオブジェクト信号符号化カーネルを用いて、異なる事前処理されたオブジェクト信号サブセットを、対応する符号化モードで符号化することと、を含んでもよい。そして、上記説明内容に基づいて、図９ｂは本開示の一実施例によって提供される、第２の種類のオブジェクト信号セットを符号化するもう１つの方法のフローチャートである。

【0176】

【0177】

図１０は本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は復号化側によって実行され、図１０に示すように、該信号の符号化および復号化方法は以下のステップ１００１～１００２を含んでもよい。

【0178】

ステップ１００１において、符号化側から送信された符号化コードストリームを受信する。

【0179】

ここで、本開示の一実施例では、該復号化側はＵＥまたは基地局であってもよい。

【0180】

ステップ１００２において、符号化コードストリームを復号化して、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0181】

【0182】

図１１ａは本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は復号化側によって実行され、図１１ａに示すように、該信号の符号化および復号化方法は以下のステップ１１０１～１１０５を含んでもよい。

【0183】

ステップ１１０１において、符号化側から送信された符号化コードストリームを受信する。

【0184】

ステップ１１０２において、符号化コードストリームに対してコードストリーム解析を行って分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とを取得する。

【0185】

ここで、分類サイド情報パラメータが、オブジェクトベースのオーディオ信号の第２の種類のオブジェクト信号セットに対する分類方式を指示し、サイド情報パラメータが、対応するフォーマットのオーディオ信号に対応する符号化モードを指示する。

【0186】

ステップ１１０３において、サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、サウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化する。

【0187】

ここで、本開示の一実施例では、サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、サウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化することは、サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、サウンドチャネルベースのオーディオ信号に対応する符号化モードを決定することと、サウンドチャネルベースのオーディオ信号に対応する符号化モードに基づいて、対応する復号化モードを用いてサウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化することと、を含んでもよい。

【0188】

ステップ１１０４において、シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、シーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化する。

【0189】

本開示の一実施例では、シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、シーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化することは、シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、シーンベースのオーディオ信号に対応する符号化モードを決定することと、シーンベースのオーディオ信号に対応する符号化モードに基づいて、対応する復号化モードを用いてシーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化することと、を含んでもよい。

【0190】

ステップ１１０５において、分類サイド情報パラメータと、オブジェクトベースのオーディオ信号に対応するサイド情報パラメータとに基づいて、オブジェクトベースのオーディオ信号の符号化された信号パラメータ情報を復号化する。

【0191】

ここで、ステップ１１０５の具体的な実現方法については、この後の実施例で説明する。

【0192】

最後に、上記説明に基づいて、図１１ｂは本開示の一実施例によって提供される信号復号化方法のフローチャートである。

【0193】

【0194】

図１２ａは本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は復号化側によって実行され、図１２ａに示すように、該信号の符号化および復号化方法は以下のステップ１２０１～１２０５を含んでもよい。

【0195】

ステップ１２０１において、符号化側から送信された符号化コードストリームを受信する。

【0196】

ステップ１２０２において、符号化コードストリームに対してコードストリーム解析を行って分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とを取得する。

【0197】

ステップ１２０３において、オブジェクトベースのオーディオ信号の符号化された信号パラメータ情報から、第１の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報と第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報とを決定する。

【0198】

ここで、本開示の一実施例では、オブジェクトベースのオーディオ信号に対応するサイド情報パラメータに基づいて、オブジェクトベースのオーディオ信号の符号化された信号パラメータ情報から、第１の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報と第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報とを決定することができる。

【0199】

ステップ１２０４において、第１の種類のオブジェクト信号セットに対応するサイド情報パラメータに基づいて、第１の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化する。

【0200】

具体的には、本開示の一実施例では、第１の種類のオブジェクト信号セットに対応するサイド情報パラメータに基づいて、第１の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化することは、第１の種類のオブジェクト信号セットに対応するサイド情報パラメータに基づいて第１の種類のオブジェクト信号セットに対応する符号化モードを決定し、第１の種類のオブジェクト信号セットに対応する符号化モードに基づいて、対応する復号化モードを用いて第１の種類のオブジェクト信号セットの符号化された信号パラメータ情報を復号化することを含んでもよい。

【0201】

ステップ１２０５において、分類サイド情報パラメータと、第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化する。

【0202】

本開示の一実施例では、分類サイド情報パラメータと、第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化する方法は、以下のステップａとステップｂを含む。

【0203】

ステップａにおいて、分類サイド情報パラメータに基づいて第２の種類のオブジェクト信号セットの分類方式を決定する。

【0204】

ここで、上記実施例の説明を参照して分かるように、第２の種類のオブジェクト信号セットの分類方式が異なる場合、対応する符号化状況も異なる。具体的には、本開示の一実施例では、第２の種類のオブジェクト信号セットの分類方式が信号の相互相関パラメータ値に基づく分類方法である場合、符号化側に対応する符号化状況は、同一の符号化カーネルを用いて、すべての前記オブジェクト信号セットを対応する符号化モードで符号化することである。

【0205】

本開示のもう１つの実施例では、第２の種類のオブジェクト信号セットの分類方式が、周波数帯域幅範囲に基づく分類方法である場合、符号化側に対応する符号化状況は、異なる符号化カーネルを用いて、異なるオブジェクト信号セットを対応する符号化モードで符号化することである。

【0206】

したがって、本ステップでは、まず、符号化中の符号化状況を決定するように、分類サイド情報パラメータに基づいて符号化中の第２の種類のオブジェクト信号セットの分類方式を決定する必要があり、この後、該符号化状況に基づいて復号化することができる。

【0207】

ステップｂにおいて、第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、第２の種類のオブジェクト信号セットにおける各オブジェクト信号サブセットに対応する符号化された信号パラメータ情報を復号化する。

【0208】

ここで、本開示の一実施例では、第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、第２の種類のオブジェクト信号セット内の各オブジェクト信号サブセットに対応する符号化された信号パラメータ情報を復号化することは、
まず、分類方式に基づいて符号化中の符号化状況を決定し、次に、符号化状況に基づいて、対応する復号化状況を決定し、その後、対応する復号化状況に基づいて、各オブジェクト信号サブセットに対応する符号化された信号パラメータ情報に対応する符号化モードに基づいて、対応する復号化モードを用いて各オブジェクト信号サブセットに対応する符号化された信号パラメータ情報を復号化することを含んでもよい。

【0209】

具体的に、本開示の一実施例では、分類サイド情報パラメータに基づいて、符号化中の符号化状況が、同一の符号化カーネルを用いてすべてのオブジェクト信号サブセットを対応する符号化モードで符号化することであると決定された場合、復号化プロセスの復号化状況が、同一の復号化カーネルを用いてすべてのオブジェクト信号サブセットに対応する符号化された信号パラメータ情報を復号化することであると決定する。ここで、復号化中に、具体的には、各オブジェクト信号サブセットに対応する符号化された信号パラメータ情報に対応する符号化モードに基づいて、対応する復号化モードを用いてオブジェクト信号サブセットに対応する符号化された信号パラメータ情報を復号化する。

【0210】

また、本開示のもう１つの実施例では、分類サイド情報パラメータに基づいて、符号化中の符号化状況が、異なる符号化カーネルを用いて異なるオブジェクト信号サブセットを対応する符号化モードで符号化することであると決定された場合、復号化プロセスの復号化モードが、異なる復号化カーネルを用いて各オブジェクト信号サブセットに対応する符号化された信号パラメータ情報をそれぞれ復号化することであると決定する。ここで、復号化中に、具体的には、各オブジェクト信号サブセットに対応する符号化された信号パラメータ情報に対応する符号化モードに基づいて、対応する復号化モードを用いて各オブジェクト信号サブセットに対応する符号化された信号パラメータ情報を復号化する。

【0211】

最後に、上記説明に基づいて、図１２ｂ、１２ｃ及び１２ｄはそれぞれ本開示の一実施例によって提供されるオブジェクトベースのオーディオ信号の復号化方法のフローチャートである。図１２ｅ、１２ｆはそれぞれ本開示の一実施例によって提供される第２の種類のオブジェクト信号セットの復号化方法のフローチャートである。

【0212】

【0213】

図１３は、本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は復号化側によって実行され、図１３に示すように、該信号の符号化および復号化方法は以下のステップ１３０１～１３０３を含んでもよい。

【0214】

ステップ１３０１において、符号化側から送信された符号化コードストリームを受信する。

【0215】

ステップ１３０２において、符号化コードストリームを復号化して混合フォーマットのオーディオ信号を取得し、前記混合フォーマットのオーディオ信号は、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む。

【0216】

ステップ１３０３において、復号化されたオブジェクトベースのオーディオ信号を後処理する。

【0217】

【0218】

図１４は本開示の一実施例によって提供されるもう１つの信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図１４に示すように、該信号の符号化および復号化方法は以下のステップ１４０１～１４０３を含んでもよい。

【0219】

ステップ１４０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0220】

ステップ１４０２において、混合フォーマットのオーディオ信号にサウンドチャネルベースのオーディオ信号が含まれていることに応答して、サウンドチャネルベースのオーディオ信号の信号特徴に基づいて、サウンドチャネルベースのオーディオ信号の符号化モードを決定する。

【0221】

【0222】

【0223】

方策１において、オブジェクト信号符号化カーネルを用いてサウンドチャネルベースのオーディオ信号における各オブジェクト信号を符号化する。

【0224】

【0225】

【0226】

【0227】

【0228】

【0229】

【0230】

【0231】

ステップ１４０３において、サウンドチャネルベースのオーディオ信号の符号化モードを用いてサウンドチャネルベースのオーディオ信号を符号化してサウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を取得し、且つサウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0232】

ここで、ステップ１４０３についての紹介は上記実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0233】

【0234】

図１５は本開示の一実施例によって提供されるもう１つの信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図１５に示すように、該信号の符号化および復号化方法は以下のステップ１５０１～１５０３を含んでもよい。

【0235】

ステップ１５０１において、シーンベースのオーディオ信号、オブジェクトベースのオーディオ信号、及びシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0236】

ステップ１５０２において、混合フォーマットのオーディオ信号にシーンベースのオーディオ信号が含まれていることに応答して、シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定する。

【0237】

本開示の一実施例では、シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定するステップは、
シーンベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値（例えば５であってもよい）より小さいか否かを判断するステップを含んでもよい。

【0238】

【0239】

方策ａにおいて、オブジェクト信号符号化カーネルを用いてシーンベースのオーディオ信号の各オブジェクト信号を符号化する。

【0240】

【0241】

【0242】

【0243】

【0244】

方策ｄにおいて、シーンベースのオーディオ信号に対して低次変換を行って、シーンベースのオーディオ信号を、次数がシーンベースのオーディオ信号の現在の次数より低い低次のシーンベースのオーディオ信号に変換し、シーン信号符号化カーネルを用いて低次のシーンベースのオーディオ信号を符号化する。なお、本開示の一実施例では、シーンベースのオーディオ信号に対して低次変換を行う時、該シーンベースのオーディオ信号を他のフォーマットの信号に低次変換してもよい。例示的に、３次のシーンベースのオーディオ信号を低次５．０フォーマットのサウンドチャネルベースのオーディオ信号に変換することができ、この時、符号化する必要がある信号総サウンドチャネル数は１６（（３＋１）＊（３＋１））から５に変えられ、これにより、符号化の難しさを大幅に低下させ、符号化効率を向上させる。

【0245】

【0246】

ステップ１５０３において、シーンベースのオーディオ信号の符号化モードを用いてシーンベースのオーディオ信号を符号化してシーンベースのオーディオ信号の符号化された信号パラメータ情報を取得し、シーンベースのオーディオ信号の符号化された信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。

【0247】

ここで、ステップ１５０３についての説明は上記実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0248】

以上により、本開示の一実施例によって提供される信号の符号化および復号化方法では、まず、シーンベースのオーディオ信号、オブジェクトベースのオーディオ信号、及びシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得し、そして、異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定し、その後、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。このことから分かるように、本開示の実施例では、混合フォーマットのオーディオ信号を符号化する時、異なるフォーマットのオーディオ信号の特徴に基づいて、異なるフォーマットのオーディオ信号を再構成し分析し、異なるフォーマットのオーディオ信号に対して、適応符号化モードを決定し、そして、対応する符号化カーネルを用いて符号化して、より良い符号化効率を達成する。

【0249】

図１６は、本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は復号化側によって実行され、図１６に示すように、該信号の符号化および復号化方法は以下のステップ１６０１～１６０３を含んでもよい。

【0250】

ステップ１６０１において、符号化側から送信された符号化コードストリームを受信する。

【0251】

ステップ１６０２において、符号化コードストリームに対してコードストリーム解析を行って分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とを取得する。

【0252】

ステップ１６０３において、サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、サウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化する。

【0253】

【0254】

図１７は本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は復号化側によって実行され、図１７に示すように、該信号の符号化および復号化方法は以下のステップ１７０１～１７０３を含んでもよい。

【0255】

ステップ１７０１において、符号化側から送信された符号化コードストリームを受信する。

【0256】

ステップ１７０２において、符号化コードストリームに対してコードストリーム解析を行って分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とを取得する。

【0257】

ステップ１７０３において、シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、シーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化する。

【0258】

【0259】

図１８は本開示の一実施例によって提供される信号の符号化および復号化方法の装置の構造概略図であり、符号化側に適用され、図１８に示すように、装置１８００は、
サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得するための取得モジュール１８０１と、
異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定するための決定モジュール１８０２と、
各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、前記各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信するための符号化モジュール１８０３と、を含んでもよい。

【0260】

以上により、本開示の一実施例によって提供される信号の符号化および復号化装置では、まず、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得し、そして、異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定し、その後、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。このことから分かるように、本開示の実施例では、混合フォーマットのオーディオ信号を符号化する時、異なるフォーマットのオーディオ信号の特徴に基づいて、異なるフォーマットのオーディオ信号を再構成し分析し、異なるフォーマットのオーディオ信号に対して、適応符号化モードを決定し、そして、対応する符号化カーネルを用いて符号化して、より良い符号化効率を達成する。

【0261】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記サウンドチャネルベースのオーディオ信号の信号特徴に基づいて、サウンドチャネルベースのオーディオ信号の符号化モードを決定し、
前記オブジェクトベースのオーディオ信号の信号特徴に基づいて、オブジェクトベースのオーディオ信号の符号化モードを決定し、
前記シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定する。

【0262】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さいか否かを判断し、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さい場合、前記サウンドチャネルベースのオーディオ信号の符号化モードが、
オブジェクト信号符号化カーネルを用いて前記サウンドチャネルベースのオーディオ信号における各オブジェクト信号を符号化することと、
入力された第１のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第１のコマンドライン制御情報に基づいて、前記サウンドチャネルベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化することであって、前記第１のコマンドライン制御情報が、前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、前記符号化する必要があるオブジェクト信号の数が１以上であり且つ前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さいことと、のうちの少なくとも１つであると決定する。

【0263】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さいか否かを判断し、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値以上である場合、決定前記サウンドチャネルベースのオーディオ信号の符号化モードが、
前記サウンドチャネルベースのオーディオ信号を、サウンドチャネル数が前記サウンドチャネルベースのオーディオ信号のサウンドチャネル数より少ない第１の他のフォーマットのオーディオ信号に変換し、前記第１の他のフォーマットのオーディオ信号に対応する符号化カーネルを用いて前記第１の他のフォーマットのオーディオ信号を符号化することと、
入力された第１のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第１のコマンドライン制御情報に基づいて、前記サウンドチャネルベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化することであって、前記第１のコマンドライン制御情報が、前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、前記符号化する必要があるオブジェクト信号の数が１以上であり且つ前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さいことと、
入力された第２のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第２のコマンドライン制御情報に基づいて、前記サウンドチャネルベースのオーディオ信号における少なくとも一部のサウンドチャネル信号を符号化することであって、前記第２のコマンドライン制御情報が、前記サウンドチャネルベースのオーディオ信号に含まれるサウンドチャネル信号のうち符号化する必要があるサウンドチャネル信号を指示し、前記符号化する必要があるサウンドチャネル信号の数が１以上であり且つ前記サウンドチャネルベースのオーディオ信号に含まれるサウンドチャネル信号の合計数より少ないことと、のうちの少なくとも１つであると決定する。

【0264】

選択可能に、本開示の一実施例では、前記符号化モジュールはさらに、
前記サウンドチャネルベースのオーディオ信号の符号化モードを用いて前記サウンドチャネルベースのオーディオ信号を符号化する。

【0265】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得し、
前記オブジェクトベースのオーディオ信号を分類して、第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとを取得し、前記第１の種類のオブジェクト信号セットと第２の種類のオブジェクト信号セットとはいずれも少なくとも１つのオブジェクトベースのオーディオ信号を含み、
前記第１の種類のオブジェクト信号セットに対応する符号化モードを決定し、
前記分析結果に基づいて前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定し、前記オブジェクト信号サブセットが少なくとも１つのオブジェクトベースのオーディオ信号を含む。

【0266】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記オブジェクトベースのオーディオ信号のうち個別の操作処理を必要としない信号を第１の種類のオブジェクト信号セットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類する。

【0267】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記第１の種類のオブジェクト信号セットに対応する符号化モードが、前記第１の種類のオブジェクト信号セットにおけるオブジェクトベースのオーディオ信号に対して第１の事前レンダリング処理を行い、マルチチャネル符号化カーネルを用いて、第１の事前レンダリング処理された信号を符号化することであると決定し、
ここで、前記第１の事前レンダリング処理は、前記オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をサウンドチャネルベースのオーディオ信号に変換することを含む。

【0268】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記オブジェクトベースのオーディオ信号のうち背景音に属する信号を第１の種類のオブジェクト信号セットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類する。

【0269】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記第１の種類のオブジェクト信号セットに対応する符号化モードが、前記第１の種類のオブジェクト信号セットにおけるオブジェクトベースのオーディオ信号に対して第２の事前レンダリング処理を行い、高次アンビソニックス（ＨＯＡ）符号化カーネルを用いて、第２の事前レンダリング処理された信号を符号化することであると決定し、
ここで、前記第２の事前レンダリング処理は、前記オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をシーンベースのオーディオ信号に変換することを含む。

【0270】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記オブジェクトベースのオーディオ信号のうち個別の操作処理を必要としない信号を第１のオブジェクト信号サブセットに分類し、前記オブジェクトベースのオーディオ信号のうち背景音に属する信号を第２のオブジェクト信号サブセットに分類し、残りの信号を第２の種類のオブジェクト信号セットに分類する。

【0271】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記第１の種類のオブジェクト信号セットにおける第１のオブジェクト信号サブセットに対応する符号化モードが、前記第１のオブジェクト信号サブセットにおけるオブジェクトベースのオーディオ信号に対して第１の事前レンダリング処理を行って、マルチチャネル符号化カーネルを用いて、第１の事前レンダリング処理された信号を符号化することであると決定し、前記第１の事前レンダリング処理が、前記オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をサウンドチャネルベースのオーディオ信号に変換することを含み、
前記第１の種類のオブジェクト信号セットにおける第２のオブジェクト信号サブセットに対応する符号化モードが、前記第２のオブジェクト信号サブセットにおけるオブジェクトベースのオーディオ信号に対して第２の事前レンダリング処理を行って、ＨＯＡ符号化カーネルを用いて、第２の事前レンダリング処理された信号を符号化することであると決定し、前記第２の事前レンダリング処理が、前記オブジェクトベースのオーディオ信号に対して信号フォーマット変換処理を行って、前記オブジェクトベースのオーディオ信号をシーンベースのオーディオ信号に変換することを含む。

【0272】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記オブジェクトベースのオーディオ信号に対してハイパスフィルタリング処理を行い、
ハイパスフィルタリング処理された信号に対して相関分析を行って、各オブジェクトベースのオーディオ信号の間の相互相関パラメータ値を決定する。

【0273】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
相関度に基づいて、正規化された相関度区間を設定し、
前記オブジェクトベースのオーディオ信号の相互相関パラメータ値、及び正規化された相関度区間に基づいて、前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、前記少なくとも１つのオブジェクト信号サブセットに対応する相関度に基づいて、対応する符号化モードを決定する。

【0274】

選択可能に、本開示の一実施例では、前記符号化モジュールは、
前記オブジェクト信号サブセットに対応する符号化モードが、独立符号化モードまたは連携符号化モードを含むことに用いられる。

【0275】

選択可能に、本開示の一実施例では、前記独立符号化モードには、時間領域処理方式または周波数領域処理方式が対応しており、
ここで、前記オブジェクト信号サブセットにおけるオブジェクト信号が音声信号または類似音声信号である場合、前記独立符号化モードは時間領域処理方式を採用し、
前記オブジェクト信号サブセットにおけるオブジェクト信号が音声信号または類似音声信号以外の他のフォーマットのオーディオ信号である場合、前記独立符号化モードは周波数領域処理方式を採用する。

【0276】

選択可能に、本開示の一実施例では、前記符号化モジュールはさらに、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて前記オブジェクトベースのオーディオ信号を符号化し、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて前記オブジェクトベースのオーディオ信号を符号化することは、
前記第１の種類のオブジェクト信号セットに対応する符号化モードを用いて前記第１の種類のオブジェクト信号セットにおける信号を符号化することと、
前記第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、同一のオブジェクト信号符号化カーネルを用いて、前記第２の種類のオブジェクト信号セットにおける事前処理されたすべてのオブジェクト信号サブセットを、対応する符号化モードで符号化することと、を含む。

【0277】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記オブジェクト信号の周波数帯域幅範囲を分析する。

【0278】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
異なる周波数帯域幅に対応する帯域幅区間を決定し、
前記オブジェクトベースのオーディオ信号の周波数帯域幅範囲、及び異なる周波数帯域幅に対応する帯域幅区間に基づいて、前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、前記少なくとも１つのオブジェクト信号サブセットに対応する周波数帯域幅に基づいて、対応する符号化モードを決定する。

【0279】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記オブジェクトベースのオーディオ信号に対応する符号化される周波数帯域幅範囲を指示する入力された第３のコマンドライン制御情報を取得し、
前記第３のコマンドライン制御情報と前記分析結果を統合して前記第２の種類のオブジェクト信号セットを分類して少なくとも１つのオブジェクト信号サブセットを取得し、分類結果に基づいて各オブジェクト信号サブセットに対応する符号化モードを決定する。

【0280】

選択可能に、本開示の一実施例では、前記符号化モジュールはさらに、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて前記オブジェクトベースのオーディオ信号を符号化し、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて前記オブジェクトベースのオーディオ信号を符号化することは、
前記第１の種類のオブジェクト信号セットに対応する符号化モードを用いて前記第１の種類のオブジェクト信号セットにおける信号を符号化することと、
前記第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、異なるオブジェクト信号符号化カーネルを用いて、異なる事前処理されたオブジェクト信号サブセットを、対応する符号化モードで符号化することと、を含む。

【0281】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さいか否かを判断し、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さい場合、前記シーンベースのオーディオ信号の符号化モードが、
オブジェクト信号符号化カーネルを用いて前記シーンベースのオーディオ信号の各オブジェクト信号を符号化することと、
入力された第４のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第４のコマンドライン制御情報に基づいて、前記シーンベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化することであって、ここで、前記第４のコマンドライン制御情報が、前記シーンベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、前記符号化する必要があるオブジェクト信号の数が１以上であり且つ前記シーンベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さいことと、の少なくとも１つであると決定する。

【0282】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さいか否かを判断し、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値以上である場合、前記シーンベースのオーディオ信号の符号化モードが、
前記シーンベースのオーディオ信号を、サウンドチャネル数が前記シーンベースのオーディオ信号のサウンドチャネル数より少ない第２の他のフォーマットのオーディオ信号に変換し、シーン信号符号化カーネルを用いて前記第２の他のフォーマットのオーディオ信号を符号化することと、
前記シーンベースのオーディオ信号に対して低次変換を行って、前記シーンベースのオーディオ信号を、次数が前記シーンベースのオーディオ信号の現在の次数より低い低次のシーンベースのオーディオ信号に変換し、シーン信号符号化カーネルを用いて前記低次のシーンベースのオーディオ信号を符号化することと、の少なくとも１つであると決定する。

【0283】

選択可能に、本開示の一実施例では、前記符号化モジュールはさらに、
前記シーンベースのオーディオ信号の符号化モードを用いて前記シーンベースのオーディオ信号を符号化する。

【0284】

選択可能に、本開示の一実施例では、前記符号化モジュールはさらに、
前記第２の種類のオブジェクト信号セットに対する分類方式を指示する分類サイド情報パラメータを決定し、
各フォーマットのオーディオ信号に対応するサイド情報パラメータを決定し、前記サイド情報パラメータが、対応するフォーマットのオーディオ信号に対応する符号化モードを指示し、
前記分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とに対してコードストリーム多重化を行って符号化コードストリームを取得し、前記符号化コードストリームを復号化側に送信する。

【0285】

図１９は本開示の一実施例によって提供される信号の符号化および復号化方法の装置の構造概略図であり、復号化側に適用され、図１９に示すように、装置１９００は、
符号化側から送信された符号化コードストリームを受信するための受信モジュール１９０１と、
前記符号化コードストリームを復号化して、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、およびシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得するための復号化モジュール１９０２と、を含んでもよい。

【0286】

【0287】

選択可能に、本開示の一実施例では、前記装置はさらに、
前記符号化コードストリームに対してコードストリーム解析を行って分類サイド情報パラメータと、各フォーマットのオーディオ信号に対応するサイド情報パラメータと、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報とを取得し、
ここで、前記分類サイド情報パラメータが、前記オブジェクトベースのオーディオ信号の第２の種類のオブジェクト信号セットに対する分類方式を指示し、前記サイド情報パラメータが、対応するフォーマットのオーディオ信号に対応する符号化モードを指示する。

【0288】

選択可能に、本開示の一実施例では、前記復号化モジュールはさらに、
前記サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記サウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化し、
前記分類サイド情報パラメータと、オブジェクトベースのオーディオ信号に対応するサイド情報パラメータとに基づいて、前記オブジェクトベースのオーディオ信号の符号化された信号パラメータ情報を復号化し、
前記シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記シーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化する。

【0289】

選択可能に、本開示の一実施例では、前記復号化モジュールはさらに、
前記オブジェクトベースのオーディオ信号の符号化された信号パラメータ情報から、第１の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報と第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報とを決定し、
前記第１の種類のオブジェクト信号セットに対応するサイド情報パラメータに基づいて、前記第１の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化し、
前記分類サイド情報パラメータと、第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、前記第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化する。

【0290】

選択可能に、本開示の一実施例では、前記復号化モジュールはさらに、
前記分類サイド情報パラメータに基づいて前記第２の種類のオブジェクト信号セットの分類方式を決定し、
前記第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、前記第２の種類のオブジェクト信号セットに対応する符号化された信号パラメータ情報を復号化する。

【0291】

選択可能に、本開示の一実施例では、前記分類サイド情報パラメータは、前記第２の種類のオブジェクト信号セットの分類方式が、相互相関パラメータ値に基づいて分類することであることを指示し、前記復号化モジュールはさらに、
同一のオブジェクト信号復号化カーネルを用いて、前記第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、第２の種類のオブジェクト信号セットにおけるすべての信号の符号化された信号パラメータ情報を復号化する。

【0292】

選択可能に、本開示の一実施例では、前記分類サイド情報パラメータは、前記第２の種類のオブジェクト信号セットの分類方式が周波数帯域幅範囲に基づいて分類することであることを指示し、前記復号化モジュールはさらに、
異なるオブジェクト信号復号化カーネルを用いて、第２の種類のオブジェクト信号セットの分類方式と第２の種類のオブジェクト信号セットに対応するサイド情報パラメータとに基づいて、第２の種類のオブジェクト信号セットにおける異なる信号の符号化された信号パラメータ情報を復号化する。

【0293】

選択可能に、本開示の一実施例では、前記装置はさらに、
復号化されたオブジェクトベースのオーディオ信号を後処理する。

【0294】

選択可能に、本開示の一実施例では、前記復号化モジュールはさらに、
前記サウンドチャネルベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記サウンドチャネルベースのオーディオ信号に対応する符号化モードを決定し、
前記サウンドチャネルベースのオーディオ信号に対応する符号化モードに基づいて、対応する復号化モードを用いて前記サウンドチャネルベースのオーディオ信号の符号化された信号パラメータ情報を復号化する。

【0295】

選択可能に、本開示の一実施例では、前記復号化モジュールはさらに、
前記シーンベースのオーディオ信号に対応するサイド情報パラメータに基づいて、前記シーンベースのオーディオ信号に対応する符号化モードを決定し、
前記シーンベースのオーディオ信号に対応する符号化モードに基づいて、対応する復号化モードを用いて前記シーンベースのオーディオ信号の符号化された信号パラメータ情報を復号化する。

【0296】

図２０は本開示の一実施例によって提供されるユーザイクイップメントＵＥ２０００のブロック図である。例えば、ＵＥ２０００は、モバイルフォン、コンピュータ、デジタル放送端末デバイス、メッセージ送受信装置、ゲームコンソール、タブレット端末、医療機器、フィットネス機器パーソナルデジタルアシスタントなどであってもよい。

【0297】

図２０を参照すると、ＵＥ２０００は、処理コンポーネント２００２、メモリ２００４、電源コンポーネント２００６、マルチメディアコンポーネント２００８、オーディオコンポーネント２０１０、入力／出力（Ｉ／Ｏ）インターフェース２０１２、センサコンポーネント２０１３、及び通信コンポーネント２０１６、のうちの１つ又は複数を含むことができる。

【0298】

処理コンポーネント２００２は通常、表示、電話呼び出し、データ通信、カメラ操作及び記録操作に関連する操作など、ＵＥ２０００の全般の操作を制御する。処理コンポーネント２００２は、上記方法の全てまたは一部のステップを完成するために、命令を実行するための１つ又は複数のプロセッサ２０２０を含むことができる。また、他のコンポーネントとのインタラクションを容易にするために、処理コンポーネント２００２は、１つ以上のモジュールを含むことができる。例えば、処理コンポーネント２００２は、マルチメディアコンポーネント２００８と処理コンポーネント２００２とのインタラクションを容易にするために、マルチメディアモジュールを含むことができる。

【0299】

メモリ２００４は、ＵＥ２０００上の操作をサポートするために、ＵＥ２０００において操作される如何なるアプリケーションプログラム又は方法の命令、連絡先データ、電話簿データ、メッセージ、写真、ビデオなど様々なタイプのデータを記憶するように構成される。メモリ２００４は、静的ランダムアクセスメモリ（ＳＲＡＭ）、電気的消去可能プログラマブル読み取り専用メモリ（ＥＥＰＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥＰＲＯＭ）、プログラマブル読み取り専用メモリ（ＰＲＯＭ）、読み取り専用メモリ（ＲＯＭ）、磁気メモリ、フラッシュメモリ、磁気ディスク、光ディスクなどの任意のタイプの揮発性または不揮発性の記憶装置またはそれらの組み合わせによって実現されてもよい。

【0300】

電源コンポーネント２００６は、ＵＥ２０００の様々なコンポーネントのために電力を提供する。電源コンポーネント２００６は、電源管理システム、少なくとも１つの電源、および他のＵＥ２０００のために電力を生成し、管理し、割り当てることに関連するコンポーネントを含むことができる。

【0301】

マルチメディアコンポーネント２００８は、前記ＵＥ２０００とユーザとの間に出力インターフェースを提供するスクリーンを含む。幾つかの実施例において、スクリーンは液晶ディスプレイ（ＬＣＤ）とタッチパネル（ＴＰ）を含むことができる。スクリーンがタッチパネルを含む場合、スクリーンは、ユーザからの入力信号を受信するように、タッチスクリーンとして実現することができる。タッチパネルは、タッチ、スライド及びタッチパネル上のジェスチャを感知するように、１つ又は複数のタッチセンサを含む。前記タッチセンサはタッチ又はスライド動作の境界だけではなく、前記タッチ又はスライド操作に関連する持続時間と圧力を検出する。幾つかの実施例において、マルチメディアコンポーネント２００８は１つのフロントカメラおよび／またはバックカメラを含む。ＵＥ２０００が撮影モードやビデオモードなどの操作モードにある場合、フロントカメラおよび／またはバックカメラは、外部のマルチメディアデータを受信することができる。各フロントカメラおよびバックカメラは、固定の光学レンズシステムであってもよく、または焦点距離および光学ズーム能力を備えてもよい。

【0302】

オーディオコンポーネント２０１０はオーディオ信号を出力及び／又は入力するように構成される。例えば、オーディオコンポーネント２０１０は１つのマイクロフォン（ＭＩＣ）を含み、ＵＥ２０００が、呼び出しモード、記録モード及び音声認識モードなどの操作モードである場合、マイクロフォンは外部オーディオ信号を受信するように構成される。受信されるオーディオ信号はさらにメモリ２００４に記憶するか又は通信コンポーネント２０１６を介して送信することができる。幾つかの実施例において、オーディオコンポーネント２０１０は、オーディオ信号を出力するための１つのスピーカーをさらに含む。

【0303】

Ｉ／Ｏインターフェース２０１２は処理コンポーネント２００２と周サイドインターフェースモジュールとの間にインターフェースを提供し、上記周サイドインターフェースモジュールはキーボード、クリックホイール、ボタンなどであってもよい。これらのボタンは、ホームボタン、音量ボタン、スタートボタン、およびロックボタンを含むことができるが、これらに限定されない。

【0304】

センサコンポーネント２０１３は、ＵＥ２０００のために様々な態様の状態評価を提供するために、少なくとも１つ又は複数のセンサを含む。例えば、センサコンポーネント２０１３は、ＵＥ２０００のオン／オフ状態、コンポーネントの相対的な位置決めを検出でき、例えば、前記コンポーネントはＵＥ２０００のディスプレイおよびキーパッドであり、センサコンポーネント２０１３は、ＵＥ２０００またはＵＥ２０００のコンポーネントの位置変更、ユーザがＵＥ２０００との接触が存在するか存在しないか、ＵＥ２０００の方位または加速／減速およびＵＥ２０００の温度変化を検出することもできる。センサコンポーネント２０１３は、任意の物理的接触がない場合、付近の物体の存在を検出するように構成される近接センサを含むこともできる。センサコンポーネント２０１３は、イメージングアプリケーションで使用するためのＣＭＯＳまたはＣＣＤイメージセンサのような光センサをさらに含むことができる。いくつかの実施例では、当該センサコンポーネント２０１３はまた、加速度センサ、ジャイロセンサ、磁気センサ、圧力センサまたは温度センサをさらに含んでもよい。

【0305】

通信コンポーネント２０１６は、ＵＥ２０００と他の装置との間の有線または無線方式の通信を容易にするように構成される。ＵＥ２０００は、通信規格に基づく無線ネットワーク、例えばＷｉＦｉ、２Ｇまたは３Ｇ、またはこれらの組み合わせにアクセスすることができる。例示的な一実施例では、通信コンポーネント２０１６は、ブロードキャストチャネルを介して外部放送管理システムからのブロードキャスト信号またはブロードキャスト関連情報を受信する。例示的な実施例では、前記通信コンポーネント２０１６は、短距離通信を容易にするために、近距離通信（ＮＦＣ）モジュールをさらに含む。例えば、ＮＦＣモジュールでは、無線周波数識別（ＲＦＩＤ）技術、赤外線データ協会（ＩｒＤＡ）技術、超広帯域（ＵＷＢ）技術、ブルートゥース（ＢＴ）技術、および他の技術に基づいて実現されてもよい。

【0306】

例示的な実施例では、ＵＥ２０００は、上記方法を実行するために、専用集積回路（ＡＳＩＣ）、デジタル信号プロセッサ（ＤＳＰ）、デジタル信号処理装置（ＤＳＰＤ）、プログラマブルロジックデバイス（ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他の電子部品、１つまたは複数のアプリケーションによって実現されてもよい。

【0307】

図２１は、本開示の一実施例によって提供されるネットワーク側デバイス２１００のブロック図である。例えば、ネットワーク側デバイス２１００は１つの基地局として提供され得る。図２１を参照すると、ネットワーク側デバイス２１００は少なくとも１つのプロセッサを含む処理コンポーネント２１１１、及びメモリ２１３２を始めとするメモリリソースをさらに含み、メモリリソースは、処理コンポーネント２１２２により実行可能な命令、例えばアプリケーションプログラムを記憶するために使用される。メモリ２１３２に記憶されているアプリケーションプログラムは、それじれ１組の命令に対応する１つまたは１つ以上のモジュールを含んでもよい。また、処理コンポーネント２１１５は命令を実行するように構成され、これにより、上記方法の前記基地局に適用される任意の方法を実行し、例えば、図１に示す方法である。

【0308】

ネットワーク側デバイス２１００は、ネットワーク側デバイス２１００の電源管理を実行するように構成される１つの電源コンポーネント２１２６と、ネットワーク側デバイス２１００をネットワークに接続するように構成される１つ有線又は無線ネットワークインターフェース２１５０と、１つの入力出力（Ｉ／Ｏ）インターフェース２１５８と、をさらに含んでもよい。ネットワーク側デバイス２１００は、メモリ２１３２に記憶されているオペレーティングシステム、例えばＷｉｎｄｏｗｓＳｅｒｖｅｒＴＭ、ＭａｃＯＳＸＴＭ、ＵｎｉｘＴＭ、ＬｉｎｕｘＴＭ、ＦｒｅｅＢＳＤＴＭ又は類似するものを操作することができる。

【0309】

上記本開示によって提供される実施例では、それぞれネットワーク側デバイス、ＵＥの角度から本開示の実施例によって提供される方法を紹介した。上記本開示の実施例によって提供される方法の各機能を実現するために、ネットワーク側デバイスとＵＥはハードウェア構造、ソフトウェアモジュールを含んでもよく、ハードウェア構造、ソフトウェアモジュール、またはハードウェア構造にソフトウェアモジュールを加える形で上記各機能を実現する。上記各機能における特定の機能はハードウェア構造、ソフトウェアモジュール、又はハードウェア構造にソフトウェアモジュールを加える方式で実行可能である。

【0310】

【0311】

本開示の一実施例は通信装置を提供する。通信装置は送受信モジュールと処理モジュールを含んでもよい。送受信モジュールは送信モジュール及び／又は受信モジュールを含んでもよく、送信モジュールは送信機能を実現するために使用され、受信モジュールは受信機能を実現するために使用され、送受信モジュールは送信機能及び／又は受信機能を実現することができる。

【0312】

通信装置は端末デバイス（例えば、前述した方法実施例における端末デバイス）であってもよく、端末デバイス内の装置であってもよく、端末デバイスと組み合わせて使用可能な装置であってもよい。又は、通信装置は、ネットワークデバイスであってもよく、ネットワークデバイス内の装置であってもよく、ネットワークデバイスと組み合わせて使用可能な装置であってもよい。

【0313】

本開示の実施例はもう１つの通信装置を提供する。通信装置は、ネットワークデバイスであってもよく、端末デバイス（前述した方法実施例内の端末デバイス）であってもよく、上記方法を実現するようにネットワークデバイスをサポートするチップ、チップシステム、またはプロセッサなどであってもよく、上記方法を実現するように端末デバイスをサポートするチップ、チップシステム、またはプロセッサなどであってもよい。該装置は、上記方法実施例において説明される方法を実現するために使用されてもよく、具体的には、上記方法実施例における説明を参照されたい。

【0314】

通信装置は１つまたは複数のプロセッサを含んでもよい。プロセッサは汎用プロセッサ又は専用プロセッサなどであってもよい。例えば、ベースバンドプロセッサ又は中央プロセッサであってもよい。ベースバンドプロセッサは、通信プロトコル及び通信データを処理するために使用されてもよく、中央プロセッサは、通信装置（例えばベースバンド、ベースバンドチップ、端末デバイス、端末デバイスチップ、ＤＵ又はＣＵなど）を制御し、コンピュータプログラムを実行し、コンピュータプログラムのデータを処理するために使用されてもよい。

【0315】

選択可能に、通信装置は、コンピュータプログラムを記憶可能な１つ又は複数のメモリをさらに含んでもよく、プロセッサは前記コンピュータプログラムを実行することで、通信装置に上記方法実施例で説明される方法を実行させる。選択可能に、前記メモリにはデータが記憶されてもよい。通信装置とメモリは独立して設置されてもよく、一体に統合されてもよい。

【0316】

選択可能に、通信装置は、送受信機、アンテナをさらに含んでもよい。送受信機は送受信ユニット、送受信機、又は送受信回路などと呼ばれてもよく、送受信機能を実現するために使用される。送受信機は受信機と送信機を含んでもよく、受信機は受信装置又は受信回路などと呼ばれてもよく、受信機能を実現するために使用され、送信機は送信装置又は送信回路などと呼ばれてもよく、送信機能を実現するために使用される。

【0317】

選択可能に、通信装置は１つまたは複数のインターフェース回路を含んでもよい。インターフェース回路は、コード命令を受信しプロセッサに伝送するために使用される。プロセッサは、前記コード命令を実行することで通信装置に上記方法実施例において説明される方法を実行させる。

【0318】

通信装置は端末デバイス（例えば前述した方法実施例における端末デバイス）である場合、プロセッサは図１～図４のいずれかに記載の方法を実行するために使用される。

【0319】

通信装置はネットワークデバイスである場合、送受信器は図５～図８のいずれかに記載の方法を実行するために使用される。

【0320】

１つの実現形態では、プロセッサは、受信と送信機能を実現するための送受信機を含んでもよい。例えば、該送受信機は送受信回路であってもよく、又はインターフェースであってもよく、又はインターフェース回路であってもよい。受信と送信機能を実現するための送受信回路、インターフェース又はインターフェース回路は分離したものであってもよく、一体に統合されたものであってもよい。上記送受信回路、インターフェース又はインターフェース回路は、コード／データの読み書きに使用可能であり、又は、上記送受信回路、インターフェース又はインターフェース回路は信号の伝送又は伝達に使用可能である。

【0321】

１つの実現形態では、プロセッサはコンピュータプログラムが記憶されてもよく、コンピュータプログラムがプロセッサにおいて実行されることにより、通信装置は上記いずれかの方法実施例で説明される方法を実行することができる。コンピュータプログラムはプロセッサに埋め込まれてもよく、この場合、プロセッサはハードウェアによって実現され得る。

【0322】

１つの実現形態では、通信装置は回路を含んでもよく、前記回路は、前述した方法実施例における送信または受信または通信の機能を実現することができる。本開示で説明されるプロセッサと送受信機は、集積回路（ｉｎｔｅｇｒａｔｅｄｃｉｒｃｕｉｔ、ＩＣ）、アナログＩＣ、高周波集積回路ＲＦＩＣ、混合信号ＩＣ、特定用途向け集積回路（ａｐｐｌｉｃａｔｉｏｎｓｐｅｃｉｆｉｃｉｎｔｅｇｒａｔｅｄｃｉｒｃｕｉｔ、ＡＳＩＣ）、印刷回路板（ｐｒｉｎｔｅｄｃｉｒｃｕｉｔｂｏａｒｄ、ＰＣＢ）、電子デバイスなどに集積することができる。該プロセッサと送受信機は、様々なＩＣプロセス技術により製造可能であり、例えば相補型金属酸化膜半導体（ｃｏｍｐｌｅｍｅｎｔａｒｙｍｅｔａｌｏｘｉｄｅｓｅｍｉｃｏｎｄｕｃｔｏｒ、ＣＭＯＳ）、Ｎ型金属酸化物半導体（ｎＭｅｔａｌ－ｏｘｉｄｅ－ｓｅｍｉｃｏｎｄｕｃｔｏｒ、ＮＭＯＳ）、Ｐ型金属酸化物半導体（ｐｏｓｉｔｉｖｅｃｈａｎｎｅｌｍｅｔａｌｏｘｉｄｅｓｅｍｉｃｏｎｄｕｃｔｏｒ、ＰＭＯＳ）、バイポーラトランジスタ（ｂｉｐｏｌａｒｊｕｎｃｔｉｏｎｔｒａｎｓｉｓｔｏｒ、ＢＪＴ）、バイポーラＣＭＯＳ（ＢｉＣＭＯＳ）、シリコンゲルマニウム（ＳｉＧｅ）、ガリウムヒ素（Ｇａｓ）などである。

【0323】

以上の実施例の説明における通信装置は、ネットワークデバイスまたは端末デバイス（前述した方法実施例における端末デバイス）であってもよく、しかし、本開示で説明される通信装置の範囲はこれに限らず、且つ通信装置の構造は制限されなくてもよい。通信装置は独立したデバイスまたは大きいデバイスの一部であってもよい。例えば前記通信装置は以下のとおりであってもよい。
（１）独立した集積回路ＩＣ、またはチップ、または、チップシステムまたはサブシステム、
（２）１つまたは複数のＩＣを有するセットであって、選択可能に、該ＩＣセットは、データ、コンピュータプログラムを記憶するための記憶部品を含んでもよいもの、
（３）ＡＳＩＣ、例えばモデム（Ｍｏｄｅｍ）、
（４）他のデバイスに組み込み可能なモジュール、
（５）受信機、端末デバイス、インテリジェント端末デバイス、セルラ電話、無線デバイス、ハンドヘルド、モバイルユニット、車載デバイス、ネットワークデバイス、クラウドデバイス、人工知能デバイスなど、
（６）その他。

【0324】

通信装置がチップまたはチップシステムである場合について、チップはプロセッサとインターフェースを含む。ここで、プロセッサの数は１つ又は複数であってもよく、インターフェースの数は複数であってもよい。

【0325】

選択可能に、チップはメモリをさらに含み、メモリは必要なコンピュータプログラムとデータを記憶するために使用される。

【0326】

当業者であれば分かるように、本開示の実施例において列挙された様々な例示的な論理ブロック（ｉｌｌｕｓｔｒａｔｉｖｅｌｏｇｉｃａｌｂｌｏｃｋ）とステップ（ｓｔｅｐ）は、電子ハードウェア、コンピュータソフトウェア、または両者の組み合わせによって実現可能である。このような機能がハードウェアによって実現されるか、それともソフトウェアによって実現されるかは、特定の応用とシステム全体の設計要件に応じたものである。当業者は特定の適用のそれぞれに対して、様々な方法を用いて前記機能を実現することができるが、このような実現は本開示の実施例の保護範囲を超えたものとして理解すべきではない。

【0327】

本開示の実施例は、サイドリンク時間長を決定するシステムをさらに提供し、該システムは、前述した実施例における端末デバイス（前述した方法実施例における第一端末デバイス）としての通信装置及びネットワークデバイスとしての通信装置を含み、又は、該システムは、前述した実施例における端末デバイス（前述した方法実施例における第一端末デバイス）としての通信装置及びネットワークデバイスとしての通信装置を含む。

【0328】

本開示は、命令が記憶されている読み取り可能な記憶媒体をさらに提供し、該命令はコンピュータによって実行される際に、上記いずれか１つの方法実施例の機能を実現する。

【0329】

本開示はコンピュータプログラム製品をさらに提供し、該コンピュータプログラム製品は、コンピュータにより実行される際に、上記いずれか１つの方法実施例の機能を実現する。

【0330】

上記実施例では、そのすべてまたは一部は、ソフトウェア、ハードウェア、ファームウェア又はその任意の組み合わせで実現可能である。ソフトウェアを用いて実現する際に、そのすべてまたは一部はコンピュータプログラム製品の形式で実現可能である。前記コンピュータプログラム製品は１つまたは複数のコンピュータプログラムを含む。コンピュータにおいて前記コンピュータプログラムをロードし且つ実行する際に、本開示の実施例の記載に従うフローまたは機能を全部又は部分的に生成する。前記コンピュータは、汎用コンピュータ、専用コンピュータ、コンピュータネットワーク、又はその他のプログラマブルデバイスであってもよい。前記コンピュータプログラムはコンピュータ読み取り可能な記憶媒体に記憶可能であり、又は１つのコンピュータ読み取り可能な記憶媒体からもう１つのコンピュータ読み取り可能な記憶媒体に伝送可能であり、例えば、前記コンピュータプログラムは、１つのウェブサイト、コンピュータ、サーバまたはデータセンタから、有線（例えば同軸ケーブル、光ファイバ、デジタルユーザライン（ｄｉｇｉｔａｌｓｕｂｓｃｒｉｂｅｒｌｉｎｅ、ＤＳＬ））または無線（例えば赤外線、無線、マイクロ波等）方式により、もう１つのウェブサイト、コンピュータ、サーバまたはデータセンタに伝送することができる。前記コンピュータ読み取り可能な記憶媒体は、コンピュータにアクセス可能な任意の使用可能なメディア、又は１つまたは複数の使用可能なメディア統合を含むサーバ、データセンタなどのデータストレージデバイスであってもよい。前記使用可能な媒体は、磁気媒体（例えば、フロッピーディスク、ハードディスク、磁気テープ）、光媒体（例えば、高密度デジタルビデオディスク（ｄｉｇｉｔａｌｖｉｄｅｏｄｉｓｃ、ＤＶＤ））、又は半導体媒体（例えば、ソリッドステートドライブ（ｓｏｌｉｄｓｔａｔｅｄｉｓｋ、ＳＳＤ））などであってもよい。

【0331】

当業者であれば分かるように、本開示に係る第１、第２などの様々な数字の番号は、説明を容易にするために行った区分であり、本開示の実施例の範囲を限定するものではなく、優先順位をも表す。

【0332】

本開示における「少なくとも１つ」は、「１つまたは複数」として説明されてもよく、複数とは、２つ、３つ、４つ又はそれ以上であってもよく、本開示で限定されない。本開示の実施例では、１つの技術的特徴について、「第１」、「第２」、「第３」、「Ａ」、「Ｂ」、「Ｃ」と「Ｄ」などにより、該種類の技術的特徴における技術的特徴を区別し、該「第１」、「第２」、「第３」、「Ａ」、「Ｂ」、「Ｃ」と「Ｄ」によって説明された技術的特徴の間には、優先順位又はサイズ順序がない。

【0333】

当業者は明細書を考慮し且つここで開示された発明を実践した後、本発明の他の実施形態を容易に想像し得る。本開示は本発明の如何なる変形、用途又は適応的な変化をカバーしようとしており、これらの変形、用途又は適応的変化は、本発明の一般的な原理を含み、かつ本開示の開示されていない当分野の技術常識又は慣用されている技術的手段を含む。明細書と実施例は単なる例示的なものとして見なされ、本開示の真の範囲と精神は以下の特許請求の範囲によって指摘される。

【0334】

なお、本開示は以上に説明され且つ図面に示される正確な構造に限定され、その範囲から逸脱しない限り、様々な修正と変更を行うことができる。本開示の範囲は添付の特許請求の範囲のみによって限定される。

【図1a】

【図1b】

【図1c】

【図2a】

【図2b】

【図3】

【図4a】

【図4b】

【図5a】

【図5b】

【図6a】

【図6b】

【図7a】

【図7b】

【図7c】

【図7d】

【図8a】

【図8b】

【図9a】

【図9b】

【図10】

【図11a】

【図11b】

【図12a】

【図12b】

【図12c】

【図12d】

【図12e】

【図12f】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【手続補正書】

【提出日】2024-04-26

【手続補正1】

【補正対象書類名】明細書

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【発明の詳細な説明】

【技術分野】

【0001】

本開示は通信技術分野に関し、特に信号の符号化および復号化方法、装置、符号化デバイス、復号化デバイス並びに記憶媒体に関する。

【背景技術】

【0002】

【0003】

【0004】

【発明の概要】

【発明が解決しようとする課題】

【0005】

【課題を解決するための手段】

【0006】

【0007】

【0008】

【0009】

【0010】

【0011】

【0012】

【0013】

【0014】

【0015】

【発明の効果】

【0016】

【図面の簡単な説明】

【0017】

【図1a】本開示の一実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図1b】本開示の一実施例によって提供される収集側のマイクロホン収集レイアウトの概略図である。

【図1c】本開示の一実施例によって提供される図１ｂの再生側に対応するスピーカー再生レイアウトの概略図である。

【図2a】本開示の一実施例によって提供されるもう１つの信号の符号化および復号化方法の概略フローチャートである。

【図2b】本開示の一実施例によって提供される信号符号化方法のフローチャートである。

【図3】本開示のさらなる実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図4a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図4b】本開示の一実施例によって提供されるオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートである。

【図5a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図5b】本開示の一実施例によって提供される別のオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートである。

【図6a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図6b】本開示の一実施例によって提供される別のオブジェクトベースのオーディオ信号に対する信号符号化方法のフローチャートである。

【図7a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図7b】本開示のもう１つの実施例によって提供されるＡＣＥＬＰ符号化原理のブロック図である。

【図7c】本開示の一実施例によって提供される周波数領域符号化原理のブロック図である。

【図7d】本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを符号化する方法のフローチャートである。

【図8a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図8b】本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを符号化するもう１つの方法のフローチャートである。

【図9a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図9b】本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを符号化するもう１つの方法のフローチャートである。

【図10】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図11a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図11b】本開示の一実施例によって提供される信号復号化方法のフローチャートである。

【図12a】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図12b-12d】それぞれ本開示の一実施例によって提供されるオブジェクトベースのオーディオ信号を復号化する方法のフローチャートである。

【図12e-12f】それぞれ本開示の一実施例によって提供される第２の種類のオブジェクト信号セットを復号化する方法のフローチャートである。

【図13】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図14】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図15】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図16】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図17】本開示のもう１つの実施例によって提供される符号化および復号化方法の概略フローチャートである。

【図18】本開示の一実施例によって提供される符号化および復号化装置の構造概略図である。

【図19】本開示のもう１つの実施例によって提供される符号化および復号化装置の構造概略図である。

【図20】本開示の一実施例によって提供されるユーザイクイップメントのブロック図である。

【図21】本開示の一実施例によって提供されるネットワーク側デバイスのブロック図である。

【発明を実施するための形態】

【0018】

【0019】

【0020】

【0021】

【0022】

【0023】

【0024】

【0025】

【0026】

【0027】

【0028】

【0029】

【0030】

【0031】

【0032】

【0033】

【0034】

【0035】

【0036】

【0037】

【0038】

【0039】

【0040】

【0041】

【0042】

【0043】

方策１において、オブジェクト信号符号化カーネルを用いてサウンドチャネルベースのオーディオ信号における各オブジェクト信号を符号化する。

【0044】

【0045】

【0046】

【0047】

【0048】

【0049】

【0050】

【0051】

【0052】

ステップ２０３についての詳しい説明は以下の実施例で説明する。

【0053】

【0054】

【0055】

【0056】

方策ａにおいて、オブジェクト信号符号化カーネルを用いてシーンベースのオーディオ信号の各オブジェクト信号を符号化する。

【0057】

【0058】

【0059】

【0060】

【0061】

【0062】

【0063】

【0064】

ここで、ステップ２０５についての紹介は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0065】

【0066】

【0067】

【0068】

【0069】

【0070】

【0071】

【0072】

【0073】

ステップ３０４において、第１の種類のオブジェクト信号セットに対応する符号化モードを決定する。

【0074】

【0075】

【0076】

【0077】

【0078】

【0079】

【0080】

【0081】

【0082】

【0083】

【0084】

【0085】

【0086】

【0087】

【0088】

ここで、ステップ４０１～４０２についての説明は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0089】

【0090】

【0091】

【0092】

【0093】

【0094】

ここで、ステップ４０５～４０６についての説明は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0095】

【0096】

【0097】

【0098】

【0099】

【0100】

ここで、ステップ５０１～５０２についての説明は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0101】

【0102】

【0103】

【0104】

【0105】

【0106】

ここで、ステップ５０５～５０６についての説明は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0107】

【0108】

【0109】

図６ａは本開示の一実施例によって提供される信号の符号化および復号化方法の概略フローチャートであり、該方法は符号化側によって実行され、図６ａと、図４ａおよび図５ａとの実施例の相違点は、本実施例では、第１の種類のオブジェクト信号セットがさらに第１のオブジェクト信号サブセットと第２のオブジェクト信号サブセットに分けられることである。図６ａに示すように、該信号の符号化および復号化方法は以下のステップを含んでもよい。

【0110】

【0111】

ステップ６０２において、オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得する。

【0112】

【0113】

【0114】

【0115】

【0116】

【0117】

【0118】

また、ステップ６０１～６０６についての詳しい説明は上記実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0119】

【0120】

【0121】

【0122】

【0123】

【0124】

本開示の一実施例では、フィルタを用いてオブジェクト信号をハイパスフィルタリング処理してもよい。

【0125】

【数1】

【0126】

【0127】

ここで、本開示の一実施例では、上記相関分析は、具体的には以下の式（２）で計算可能である。

【数2】

【0128】

【0129】

【0130】

ステップ７０５において、第１の種類のオブジェクト信号セットに対応する符号化モードを決定する。

【0131】

ここで、ステップ７０４～７０５についての紹介は前述した実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0132】

【0133】

【0134】

【0135】

【表1】

【0136】

【0137】

【0138】

本開示の一実施例では、オブジェクト信号サブセットに対応する符号化モードは、独立符号化モードまたは連携符号化モードを含む。

【0139】

【0140】

【0141】

【数3】

【0142】

【0143】

【0144】

【0145】

【0146】

【0147】

【0148】

【0149】

【0150】

【0151】

【0152】

ステップ８０４において、第１の種類のオブジェクト信号セットに対応する符号化モードを決定する。

【0153】

【0154】

【0155】

【0156】

なお、本開示の実施例では、異なる帯域幅区間の長さを限定せず、そして、異なる周波数帯域幅の間の帯域幅区間はオーバラップしてもよい。

【0157】

【0158】

【0159】

これにより、異なる周波数帯域幅信号に対して異なるビットで符号化することにより、信号に対する圧縮率を確保でき、帯域幅を節約する。

【0160】

【0161】

【0162】

【0163】

【0164】

【0165】

【0166】

【0167】

【0168】

ステップ９０４において、第１の種類のオブジェクト信号セットに対応する符号化モードを決定する。

【0169】

【0170】

【0171】

【0172】

【0173】

【0174】

【0175】

【0176】

【0177】

【0178】

ステップ１００１において、符号化側から送信された符号化コードストリームを受信する。

【0179】

ここで、本開示の一実施例では、該復号化側はＵＥまたは基地局であってもよい。

【0180】

【0181】

【0182】

【0183】

ステップ１１０１において、符号化側から送信された符号化コードストリームを受信する。

【0184】

【0185】

【0186】

【0187】

【0188】

【0189】

【0190】

【0191】

ここで、ステップ１１０５の具体的な実現方法については、この後の実施例で説明する。

【0192】

最後に、上記説明に基づいて、図１１ｂは本開示の一実施例によって提供される信号復号化方法のフローチャートである。

【0193】

【0194】

【0195】

ステップ１２０１において、符号化側から送信された符号化コードストリームを受信する。

【0196】

【0197】

【0198】

【0199】

【0200】

【0201】

【0202】

【0203】

ステップａにおいて、分類サイド情報パラメータに基づいて第２の種類のオブジェクト信号セットの分類方式を決定する。

【0204】

【0205】

【0206】

【0207】

【0208】

【0209】

【0210】

【0211】

【0212】

【0213】

【0214】

ステップ１３０１において、符号化側から送信された符号化コードストリームを受信する。

【0215】

【0216】

ステップ１３０３において、復号化されたオブジェクトベースのオーディオ信号を後処理する。

【0217】

【0218】

【0219】

【0220】

【0221】

【0222】

【0223】

方策１において、オブジェクト信号符号化カーネルを用いてサウンドチャネルベースのオーディオ信号における各オブジェクト信号を符号化する。

【0224】

【0225】

【0226】

【0227】

【0228】

【0229】

【0230】

【0231】

【0232】

ここで、ステップ１４０３についての紹介は上記実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0233】

【0234】

【0235】

ステップ１５０１において、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、及びシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得する。

【0236】

【0237】

【0238】

【0239】

方策ａにおいて、オブジェクト信号符号化カーネルを用いてシーンベースのオーディオ信号の各オブジェクト信号を符号化する。

【0240】

【0241】

【0242】

【0243】

【0244】

方策ｄにおいて、シーンベースのオーディオ信号に対して低次変換を行って、シーンベースのオーディオ信号を、次数がシーンベースのオーディオ信号の現在の次数より低い低次のシーンベースのオーディオ信号に変換し、シーン信号符号化カーネルを用いて低次のシーンベースのオーディオ信号を符号化する。なお、本開示の一実施例では、シーンベースのオーディオ信号に対して低次変換を行う時、該シーンベースのオーディオ信号を他のフォーマットの信号に低次変換してもよい。例示的に、３次のシーンベースのオーディオ信号を低次５．０フォーマットのサウンドチャネルベースのオーディオ信号に変換することができ、この時、符号化する必要がある信号総サウンドチャネル数は１６（（３＋１）＊（３＋１））から５に変えられ、これにより、符号化の難しさを大幅に低下させ、符号化効率を向上させる。

【0245】

【0246】

【0247】

ここで、ステップ１５０３についての説明は上記実施例の説明を参照されたく、本開示の実施例では詳しい説明を省略する。

【0248】

以上により、本開示の一実施例によって提供される信号の符号化および復号化方法では、まず、サウンドチャネルベースのオーディオ信号、オブジェクトベースのオーディオ信号、及びシーンベースのオーディオ信号のうちの少なくとも１つのフォーマットを含む混合フォーマットのオーディオ信号を取得し、そして、異なるフォーマットのオーディオ信号の信号特徴に基づいて、各フォーマットのオーディオ信号の符号化モードを決定し、その後、各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得し、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を符号化コードストリームに書き込んで復号化側に送信する。このことから分かるように、本開示の実施例では、混合フォーマットのオーディオ信号を符号化する時、異なるフォーマットのオーディオ信号の特徴に基づいて、異なるフォーマットのオーディオ信号を再構成し分析し、異なるフォーマットのオーディオ信号に対して、適応符号化モードを決定し、そして、対応する符号化カーネルを用いて符号化して、より良い符号化効率を達成する。

【0249】

【0250】

ステップ１６０１において、符号化側から送信された符号化コードストリームを受信する。

【0251】

【0252】

【0253】

【0254】

【0255】

ステップ１７０１において、符号化側から送信された符号化コードストリームを受信する。

【0256】

【0257】

【0258】

【0259】

【0260】

【0261】

【0262】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さいか否かを判断し、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さい場合、前記サウンドチャネルベースのオーディオ信号の符号化モードが、
オブジェクト信号符号化カーネルを用いて前記サウンドチャネルベースのオーディオ信号における各オブジェクト信号を符号化することと、
入力された第１のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第１のコマンドライン制御情報に基づいて、前記サウンドチャネルベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化することであって、前記第１のコマンドライン制御情報が、前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、前記符号化する必要があるオブジェクト信号の数が１以上であり且つ前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さいことと、のうちの少なくとも１つであると決定する。

【0263】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値より小さいか否かを判断し、
前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の数が第１の閾値以上である場合、決定前記サウンドチャネルベースのオーディオ信号の符号化モードが、
前記サウンドチャネルベースのオーディオ信号を、サウンドチャネル数が前記サウンドチャネルベースのオーディオ信号のサウンドチャネル数より少ない第１の他のフォーマットのオーディオ信号に変換し、前記第１の他のフォーマットのオーディオ信号に対応する符号化カーネルを用いて前記第１の他のフォーマットのオーディオ信号を符号化することと、
入力された第１のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第１のコマンドライン制御情報に基づいて、前記サウンドチャネルベースのオーディオ信号における少なくとも一部のオブジェクト信号を符号化することであって、前記第１のコマンドライン制御情報が、前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号のうち符号化する必要があるオブジェクト信号を指示し、前記符号化する必要があるオブジェクト信号の数が１以上であり且つ前記サウンドチャネルベースのオーディオ信号に含まれるオブジェクト信号の合計数より小さいことと、
入力された第２のコマンドライン制御情報を取得し、オブジェクト信号符号化カーネルを用いて、前記第２のコマンドライン制御情報に基づいて、前記サウンドチャネルベースのオーディオ信号における少なくとも一部のサウンドチャネル信号を符号化することであって、前記第２のコマンドライン制御情報が、前記サウンドチャネルベースのオーディオ信号に含まれるサウンドチャネル信号のうち符号化する必要があるサウンドチャネル信号を指示し、前記符号化する必要があるサウンドチャネル信号の数が１以上であり且つ前記サウンドチャネルベースのオーディオ信号に含まれるサウンドチャネル信号の合計数より少ないことと、のうちの少なくとも１つであると決定する。

【0264】

【0265】

【0266】

【0267】

【0268】

【0269】

【0270】

【0271】

【0272】

【0273】

【0274】

選択可能に、本開示の一実施例では、
前記オブジェクト信号サブセットに対応する符号化モードが、独立符号化モードまたは連携符号化モードを含む。

【0275】

【0276】

【0277】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記オブジェクト信号の周波数帯域幅範囲を分析する。

【0278】

【0279】

【0280】

選択可能に、本開示の一実施例では、前記符号化モジュールはさらに、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて前記オブジェクトベースのオーディオ信号を符号化し、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて前記オブジェクトベースのオーディオ信号を符号化することは、
前記第１の種類のオブジェクト信号セットに対応する符号化モードを用いて前記第１の種類のオブジェクト信号セットにおける信号を符号化することと、
前記第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、異なるオブジェクト信号符号化カーネルを用いて、異なる事前処理されたオブジェクト信号サブセットを、対応する符号化モードで符号化することと、を含む。

【0281】

【0282】

選択可能に、本開示の一実施例では、前記決定モジュールはさらに、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数を取得し、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さいか否かを判断し、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値以上である場合、前記シーンベースのオーディオ信号の符号化モードが、
前記シーンベースのオーディオ信号を、サウンドチャネル数が前記シーンベースのオーディオ信号のサウンドチャネル数より少ない第２の他のフォーマットのオーディオ信号に変換し、シーン信号符号化カーネルを用いて前記第２の他のフォーマットのオーディオ信号を符号化することと、
前記シーンベースのオーディオ信号に対して低次変換を行って、前記シーンベースのオーディオ信号を、次数が前記シーンベースのオーディオ信号の現在の次数より低い低次のシーンベースのオーディオ信号に変換し、シーン信号符号化カーネルを用いて前記低次のシーンベースのオーディオ信号を符号化することと、の少なくとも１つであると決定する。

【0283】

【0284】

【0285】

【0286】

【0287】

【0288】

【0289】

【0290】

【0291】

【0292】

【0293】

選択可能に、本開示の一実施例では、前記装置はさらに、
復号化されたオブジェクトベースのオーディオ信号を後処理する。

【0294】

【0295】

【0296】

【0297】

【0298】

【0299】

【0300】

【0301】

【0302】

【0303】

【0304】

【0305】

【0306】

【0307】

【0308】

【0309】

【0310】

【0311】

【0312】

【0313】

【0314】

【0315】

【0316】

【0317】

【0318】

【0319】

通信装置はネットワークデバイスである場合、送受信器は図５～図８のいずれかに記載の方法を実行するために使用される。

【0320】

【0321】

【0322】

【0323】

【0324】

【0325】

選択可能に、チップはメモリをさらに含み、メモリは必要なコンピュータプログラムとデータを記憶するために使用される。

【0326】

【0327】

【0328】

【0329】

【0330】

【0331】

【0332】

【0333】

【0334】

【手続補正2】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

【請求項2】

【請求項3】

【請求項4】

【請求項5】

【請求項6】

【請求項7】

【請求項8】

【請求項9】

【請求項10】

【請求項11】

【請求項12】

【請求項13】

【請求項14】

【請求項15】

【請求項16】

【請求項17】

【請求項18】

前記オブジェクトベースのオーディオ信号に対して信号特徴分析を行って分析結果を取得するステップは、
前記オブジェクトベースのオーディオ信号の周波数帯域幅範囲を分析するステップを含む、
ことを特徴とする請求項８または１０または１２に記載の信号の符号化および復号化方法。

【請求項19】

【請求項20】

【請求項21】

各フォーマットのオーディオ信号の符号化モードを用いて各フォーマットのオーディオ信号を符号化して、各フォーマットのオーディオ信号の符号化された後の信号パラメータ情報を取得するステップは、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて、前記オブジェクトベースのオーディオ信号を符号化するステップを含み、
前記オブジェクトベースのオーディオ信号の符号化モードを用いて、前記オブジェクトベースのオーディオ信号を符号化するステップは、
前記第１の種類のオブジェクト信号セットに対応する符号化モードを用いて、前記第１の種類のオブジェクト信号セットにおける信号を符号化するステップと、
前記第２の種類のオブジェクト信号セットにおけるオブジェクト信号サブセットを事前処理し、異なるオブジェクト信号符号化カーネルを用いて、異なる事前処理されたオブジェクト信号サブセットを、対応する符号化モードで符号化するステップと、を含む、
ことを特徴とする請求項１８に記載の信号の符号化および復号化方法。

【請求項22】

【請求項23】

前記シーンベースのオーディオ信号の信号特徴に基づいて、シーンベースのオーディオ信号の符号化モードを決定するステップは、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数を取得するステップと、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値より小さいか否かを判断するステップと、
前記シーンベースのオーディオ信号に含まれるオブジェクト信号の数が第２の閾値以上である場合、前記シーンベースのオーディオ信号の符号化モードが、
前記シーンベースのオーディオ信号を、サウンドチャネル数が前記シーンベースのオーディオ信号のサウンドチャネル数より少ない第２の他のフォーマットのオーディオ信号に変換し、シーン信号符号化カーネルを用いて前記第２の他のフォーマットのオーディオ信号を符号化することと、
前記シーンベースのオーディオ信号に対して低次変換を行って、前記シーンベースのオーディオ信号を、次数が前記シーンベースのオーディオ信号の現在の次数より低い低次のシーンベースのオーディオ信号に変換し、シーン信号符号化カーネルを用いて前記低次のシーンベースのオーディオ信号を符号化することと、の少なくとも１つであると決定するステップと、を含む、
ことを特徴とする請求項２に記載の信号の符号化および復号化方法。

【請求項24】

【請求項25】

【請求項26】

【請求項27】

【請求項28】

【請求項29】

【請求項30】

【請求項31】

【請求項32】

【請求項33】

前記方法は、
復号化されたオブジェクトベースのオーディオ信号を後処理するステップをさらに含む、
ことを特徴とする請求項２９～３２のいずれかに記載の信号の符号化および復号化方法。

【請求項34】

【請求項35】

【請求項36】

【請求項37】

【請求項38】

通信装置であって、
前記装置は、プロセッサとメモリとを備え、前記メモリにはコンピュータプログラムが記憶され、前記プロセッサは前記メモリに記憶されているコンピュータプログラムを実行することにより、前記装置に請求項１～４のいずれかに記載の方法を実行させる、
ことを特徴とする通信装置。

【請求項39】

通信装置であって、
前記装置は、プロセッサとメモリとを備え、前記メモリにはコンピュータプログラムが記憶され、前記プロセッサは前記メモリに記憶されているコンピュータプログラムを実行することにより、前記装置に請求項２６～３２のいずれかに記載の方法を実行させる、
ことを特徴とする通信装置。

【請求項40】

通信装置であって、
プロセッサとインターフェース回路とを備え、
前記インターフェース回路は、コード命令を受信して前記プロセッサに送信し、
前記プロセッサ、前記コード命令を実行することにより、請求項１～４のいずれかに記載の方法を実行する、
ことを特徴とする通信装置。

【請求項41】

通信装置であって、
プロセッサとインターフェース回路とを備え、
前記インターフェース回路は、コード命令を受信して前記プロセッサに送信し、
前記プロセッサ、前記コード命令を実行することにより、請求項２６～３２のいずれかに記載の方法を実行する、
ことを特徴とする通信装置。

【請求項42】

命令が記憶されているコンピュータ読み取り可能な記憶媒体であって、前記命令が実行される場合、請求項１～４のいずれかに記載の方法が実現される、
ことを特徴とするコンピュータ読み取り可能な記憶媒体。

【請求項43】

命令が記憶されているコンピュータ読み取り可能な記憶媒体であって、前記命令が実行される場合、請求項２６～３２のいずれかに記載の方法が実現される、
ことを特徴とするコンピュータ読み取り可能な記憶媒体。

【国際調査報告】

知財求人

青山学院大学 (神奈川県相模原市中央区淵野辺)

知財求人お知らせサービス

知財のニュースを調べる
- 知財ニュース
- 知財周辺ニュース
企業の特許を調べる
知財のセミナーを調べる
知財,特許事務所への求職・転職
特許事務所をさがす
弁理士試験を受ける
- 年の弁理士試験情報
- 弁理士試験の合格率など統計
知財の法律をしらべる
期限日をしらべる
- 今日に対して意見書・補正書の期限
- 今日に対して審査請求期限日
知財の判決をしらべる
コンテンツ・リンク
運営会社
プレスの皆様へ
- お問い合わせ
ユーザーの皆様
- お問い合わせ・フィードバック
広告掲載を希望の皆様へ
- 広告掲載について
- 求人広告の掲載について

IP Force 特許公報掲載プロジェクト 2022.1.31 β版