編碼器系統(tǒng)、解碼器系統(tǒng)、編碼方法和解碼方法
【專利說(shuō)明】
[0001] 本發(fā)明申請(qǐng)為申請(qǐng)日為2010年3月5日并于2011年9月15日進(jìn)入中國(guó)國(guó)家階 段的發(fā)明名稱為"基于自適應(yīng)地可選擇的左/右或中央/側(cè)邊立體聲編碼和參數(shù)立體聲編 碼的組合的高級(jí)立體聲編碼"的第201080012247. 5號(hào)發(fā)明專利申請(qǐng)的分案申請(qǐng)。
技術(shù)領(lǐng)域
[0002] 本申請(qǐng)?jiān)O(shè)及音頻編碼，具體地，設(shè)及組合基于參數(shù)和波形的編碼技術(shù)的立體聲音 頻編碼。
【背景技術(shù)】
[0003] 立體聲信號(hào)的左（L)和右佩聲道的聯(lián)合編碼與L和R的獨(dú)立編碼相比，使得能 夠更高效的編碼。用于聯(lián)合立體聲編碼的常見(jiàn)方法是中央/側(cè)邊（M/巧編碼。在此，通過(guò) 相加L和R信號(hào)來(lái)形成中央（M)信號(hào)，例如，M信號(hào)可W具有形式
[0004]
[0005] 同樣，通過(guò)相減兩個(gè)聲道L和R而形成側(cè)邊（巧信號(hào)，例如，S信號(hào)可W具有形式
[0006]
[0007] 在M/S編碼的情況下，對(duì)M和S信號(hào)而不是L和R信號(hào)進(jìn)行編碼。
[000引在MPEG(移動(dòng)圖像專家組）AAC(高級(jí)音頻編碼）標(biāo)準(zhǔn)（參見(jiàn)標(biāo)準(zhǔn)文件IS0/IEC13818-7)中，可WW時(shí)間變化和頻率變化的方式來(lái)選擇L/R立體聲編碼和M/S立體聲編碼。 因此，立體聲編碼器可W對(duì)于立體聲信號(hào)的一些頻帶應(yīng)用L/R編碼，而M/S編碼用于對(duì)立體 聲信號(hào)（頻率變化的）的其他頻帶進(jìn)行編碼。而且，編碼器可W在時(shí)間上在L/R和M/S編 碼之間切換（時(shí)間變化的）。在MPEGAAC中，在頻域中，更具體地在MDCT(改進(jìn)型的離散 余弦變換）域中執(zhí)行立體聲編碼。運(yùn)允許W頻率和時(shí)間變化的方式來(lái)自適應(yīng)地選擇L/R或 M/S編碼。在L/R和M/S立體聲編碼之間的選定可W基于評(píng)估側(cè)邊信號(hào)：當(dāng)側(cè)邊信號(hào)的能 量較低時(shí)，M/S立體聲編碼更高效，從而應(yīng)當(dāng)被使用?；蛘?，對(duì)于在兩種立體聲編碼方案之 間的選定，可W試驗(yàn)兩種編碼方案，并且選擇可W基于產(chǎn)生的量化工作（effort)、即所觀察 的感知賭。
[0009] 一種對(duì)于聯(lián)合立體聲編碼的替代方法是參數(shù)立體聲（P巧編碼。在此，在使用諸 如AAC編碼器的傳統(tǒng)音頻編碼器對(duì)縮混信號(hào)編碼后，立體聲信號(hào)作為單聲道縮混信號(hào)傳 送。縮混信號(hào)是L和R聲道的疊加。單聲道縮混信號(hào)與附加的時(shí)間變化和頻率變化的PS 參數(shù)組合傳送，該P(yáng)S參數(shù)例如是聲道間（即，在L和R之間）強(qiáng)度差I(lǐng)ID和聲道間交叉相 關(guān)（ICC)。在解碼器中，基于解碼的縮混信號(hào)和參數(shù)立體聲參數(shù)，重建近似于原始立體聲 信號(hào)的感知立體聲圖像的立體聲信號(hào)。為了重建，通過(guò)去相關(guān)器來(lái)生成縮混信號(hào)的去相關(guān) 版本。通過(guò)適當(dāng)?shù)娜V波器來(lái)實(shí)現(xiàn)運(yùn)樣的去相關(guān)器。在下文中描述了PS編碼和解碼： "Low Complexity Parametric Stereo Coding in MPEG-4",比Purnhagen, Proc. Of the 7th Int. Conference on Digital Audio Effects (DAFx ' 04), Naples, Italy, October 5-8, 2004, pagesl63-168。該文檔的公開(kāi)通過(guò)引用合并于此。
[0010] 環(huán)繞MPEG標(biāo)準(zhǔn)（參見(jiàn)文件IS0/IEC23003-1)利用PS編碼的概念。在環(huán)繞MPEG 解碼器中，基于較少的輸入聲道和控制參數(shù)來(lái)創(chuàng)建多個(gè)輸出聲道。通過(guò)級(jí)聯(lián)參數(shù)立體聲模 塊來(lái)構(gòu)造環(huán)繞MPEG解碼器和編碼器，該模塊在環(huán)繞MPEG中被稱為用于解碼器的0TT模塊 (一對(duì)二模塊）和用于編碼器的R-0TT模塊（逆一對(duì)二模塊）。0TT模塊通過(guò)伴隨PS參數(shù) 的單個(gè)輸入聲道（縮混信號(hào)）來(lái)確定兩個(gè)輸出聲道。0TT模塊對(duì)應(yīng)于PS解碼器，R-0TT模 塊對(duì)應(yīng)于PS編碼器?？蒞通過(guò)使用在解碼器側(cè)具有單個(gè)0TT模塊和在編碼器側(cè)具有單個(gè) R-0TT模塊的環(huán)繞MPEG來(lái)實(shí)現(xiàn)參數(shù)立體聲；運(yùn)也被稱為"環(huán)繞MPEG2-1-2"模式。比特流語(yǔ) 法可W不同，但是基礎(chǔ)理論和信號(hào)處理是相同的。因此，W下對(duì)于PS的所有引用還包括"環(huán) 繞MPEG2-1-2 "或基于環(huán)繞MPEG的參數(shù)立體聲。
[0011] 在PS編碼器（例如，在環(huán)繞MPEGPS編碼器中），除了縮混信號(hào)之外，可W確定和 發(fā)送殘余信號(hào)（RE巧。運(yùn)樣的殘余信號(hào)指示與通過(guò)其縮混和PS參數(shù)來(lái)表示原始聲道相關(guān)聯(lián) 的誤差。在解碼器中，可W使用殘余信號(hào)代替縮混信號(hào)的去相關(guān)版本。運(yùn)允許更好地重建原 始聲道L和R的波形。例如，在環(huán)繞MPEG標(biāo)準(zhǔn)（參見(jiàn)文件IS0/IEC23003-1)中和在下文中 描述了附加的殘余信號(hào)的使用："MPEGSurround-TheIS0/MPEGStandardforEfficient andCompatibleMulti-ChannelAudioCoding,J.Herreetal. ,AudioEngineering ConventionPaper7084,122ndConvention,May5-8, 2007。兩個(gè)文檔的公開(kāi)、特別是其中 對(duì)于殘余信號(hào)的評(píng)論通過(guò)引用合并于此。
[0012] 使用殘余的PS編碼對(duì)于聯(lián)合立體聲編碼而言是比M/S編碼更一般的方法：當(dāng)將 L/R信號(hào)變換為M/S信號(hào)時(shí)，M/S編碼執(zhí)行信號(hào)旋轉(zhuǎn)。此外，當(dāng)將L/R信號(hào)變換為縮混和殘 余信號(hào)時(shí)，使用殘余的PS編碼執(zhí)行信號(hào)旋轉(zhuǎn)。然而，在后一種情況下，信號(hào)旋轉(zhuǎn)是可變的， 并且依賴于PS參數(shù)。由于使用殘余的PS編碼的更一般的方法，使用殘余的PS編碼允許對(duì) 像拼接的單聲道信號(hào)那樣的某些類型的信號(hào)進(jìn)行比M/S編碼更高效的編碼。因此，所提出 的編碼器允許將參數(shù)立體聲編碼技術(shù)與基于波形的立體聲編碼技術(shù)高效地組合。
[0013] 經(jīng)常地，諸如MPEGAAC感知立體聲編碼器的感知立體聲編碼器可W在L/R立體聲 編碼和M/S立體聲編碼之間選定，其中，在后一種情況下，基于立體聲信號(hào)生成中央/側(cè)邊 信號(hào)。運(yùn)樣的選擇可W是頻率變化的，即，對(duì)于一些頻帶，可W使用L/R立體聲編碼，而對(duì)于 其他頻帶，可W使用M/S立體聲編碼。
[0014] 在L和R聲道實(shí)質(zhì)上是獨(dú)立信號(hào)的情況下，運(yùn)樣的感知立體聲編碼器通常不使用 M/S立體聲編碼，因?yàn)樵谠撉闆r下，與L/R立體聲編碼相比，運(yùn)樣的編碼方案不提供任何編 碼增益。編碼器將退回普通的L/R立體聲編碼，實(shí)質(zhì)上獨(dú)立地處理L和R。
[0015] 在相同的情況下，PS編碼器系統(tǒng)創(chuàng)建包含L和R聲道的縮混信號(hào)，運(yùn)防止了L和 R聲道的獨(dú)立處理。對(duì)于使用殘余信號(hào)的PS編碼，運(yùn)可W帶來(lái)與立體聲編碼相比而言較為 低效的編碼，在立體聲編碼中，L/R立體聲編碼或M/S立體聲編碼是自適應(yīng)地可選擇的。
[0016] 因此，存在下述情況，其中，PS編碼器勝過(guò)在L/R立體聲編碼和M/S立體聲編碼之 間自適應(yīng)選擇的感知立體聲編碼器，而在其他情況下，后一種編碼器勝過(guò)PS編碼器。

【發(fā)明內(nèi)容】

[0017] 本申請(qǐng)描述了基于將使用殘余的PS編碼與自適應(yīng)L/R或M/S感知立體聲編碼（例 如，在MDCT域中的AAC感知聯(lián)合立體聲編碼）組合的思想的一種音頻編碼器系統(tǒng)和一種編 碼方法。運(yùn)允許組合自適應(yīng)L/R或M/S立體聲編碼（例如，在MPEGAAC中使用）的優(yōu)點(diǎn)和 使用殘余信號(hào)的PS編碼（例如，在環(huán)繞MPEG中使用）的優(yōu)點(diǎn)。而且，本申請(qǐng)描述了對(duì)應(yīng)的 音頻解碼器系統(tǒng)和解碼方法。
[0018] 本申請(qǐng)的第一方面設(shè)及一種編碼器系統(tǒng)，用于將立體聲信號(hào)編碼為比特流信號(hào)。 根據(jù)所述編碼器系統(tǒng)的一個(gè)實(shí)施例，所述編碼器系統(tǒng)包括縮混級(jí)，用于基于所述立體聲信 號(hào)來(lái)生成縮混信號(hào)和殘余信號(hào)。所述殘余信號(hào)可W覆蓋所使用的音頻頻率范圍的全部或僅 一部分。另外，所述編碼器系統(tǒng)包括參數(shù)確定級(jí)，用于確定PS參數(shù)，諸如聲道間強(qiáng)度差和聲 道間交叉相關(guān)。優(yōu)選地，所述PS參數(shù)是頻率變化的。運(yùn)樣的縮混級(jí)和參數(shù)確定級(jí)通常是PS 編碼器的一部分。
[0019] 另外，所述編碼器系統(tǒng)包括在所述縮混級(jí)的下游的感知編碼裝置，其中，能夠選擇 兩個(gè)編碼方案：
[0020] -基于所述縮混信號(hào)和所述殘余信號(hào)的和W及基于所述縮混信號(hào)和所述殘余信號(hào) 的差的編碼，或者
[0021] -基于所述縮混信號(hào)和基于所述殘余信號(hào)的編碼。
[0022] 應(yīng)當(dāng)注意，在編碼基于所述縮混信號(hào)和所述殘余信號(hào)的情況下，可W對(duì)所述縮混 信號(hào)和所述殘余信號(hào)編碼，或可W對(duì)與其成比例的信號(hào)編碼。在編碼基于和與差的情況下， 則可W對(duì)所述和與差編碼，或可W對(duì)與其成比例的信號(hào)編碼。
[0023] 所述選擇可W是頻率變化的（和時(shí)間變化的），即，對(duì)于第一頻帶，可W選擇編碼 基于和信號(hào)與差信號(hào)，而對(duì)于第二頻帶，可W選擇編碼基于所述縮混信號(hào)和基于所述殘余 信號(hào)。
[0024] 運(yùn)樣的編碼器系統(tǒng)具有允許在L/R立體聲編碼和使用殘余的PS編碼之間切換 (優(yōu)選地W頻率變化的方式）的優(yōu)點(diǎn)：如果所述感知編碼裝置選擇（對(duì)于特定頻帶或?qū)τ?整個(gè)使用的頻率范圍）基于縮混和殘余信號(hào)的編碼，則所述編碼系統(tǒng)表現(xiàn)為像使用利用殘 余的標(biāo)準(zhǔn)PS編碼的系統(tǒng)那樣。然而，如果所述感知編碼裝置選擇（對(duì)于特定頻帶或?qū)τ谡?個(gè)所使用的頻率范圍）基于所述縮混信號(hào)和所述殘余信號(hào)的和信號(hào)W及基于所述縮混信 號(hào)和所述殘余信號(hào)的差信號(hào)，則在特定的情況下，所述和與差操作實(shí)質(zhì)上補(bǔ)償了在前的縮 混操作（除了可能不同的增益因子），W使得整個(gè)系統(tǒng)可W實(shí)際上執(zhí)行整個(gè)立體聲信號(hào)或 針對(duì)其頻帶的L/R編碼。例如，當(dāng)所述立體聲信號(hào)的L和R聲道是獨(dú)立的并且具有相同的 電平時(shí)，運(yùn)樣的情況出現(xiàn)，如下詳細(xì)所述。
[00巧]優(yōu)選地，所述編碼方案的適用是時(shí)間和頻率相關(guān)的。因此，優(yōu)選地，通過(guò)L/R編碼 方案來(lái)對(duì)所述立體聲信號(hào)的一些頻帶編碼，而通過(guò)使用殘余的PS編碼方案來(lái)對(duì)所述立體 聲信號(hào)的其他頻帶編碼。
[0026] 應(yīng)當(dāng)注意，在如上所述的編碼基于縮混信號(hào)并且基于殘余信號(hào)的情況下，可W通 過(guò)對(duì)于縮混信號(hào)和殘余信號(hào)的兩個(gè)相逆（除了可能不同的增益因子）的串行操作來(lái)形成輸 入到核屯、編碼器的實(shí)際信號(hào)。例如，縮混信號(hào)和殘余信號(hào)被饋送到M/S至L/R變換級(jí)，然后 該變換級(jí)的輸出被饋送到L/R至M/S變換級(jí)。產(chǎn)生的信號(hào)（然后用于編碼）對(duì)應(yīng)于縮混信 號(hào)和殘余信號(hào)（除了可能不同的增益因子之外）。
[0027] 下面的實(shí)施例利用運(yùn)種思想。根據(jù)所述編碼器系統(tǒng)的一個(gè)實(shí)施例，所述編碼器系 統(tǒng)包括如上所述的縮混級(jí)和參數(shù)確定級(jí)。而且，所述編碼器系統(tǒng)包括變換級(jí)（例如，作為如 上所述的編碼裝置的一部分）。變換級(jí)通過(guò)執(zhí)行縮混信號(hào)和殘余信號(hào)的變換來(lái)生成偽L/R 立體聲信號(hào)。變換級(jí)優(yōu)選地執(zhí)行和與差變換，其中，對(duì)所述縮混信號(hào)和所述殘余信號(hào)求和W 生成所述偽立體聲信號(hào)的一個(gè)聲道（可能所述和也乘W因子），并且彼此相減W生成所述 偽立體聲信號(hào)的另一個(gè)聲道（可能所述差也乘W因子）。優(yōu)選地，所述偽立體聲信號(hào)的第 一聲道（例如，偽左聲道）與所述縮混和殘余信號(hào)的和成比例，而第二聲道（例如，偽右聲 道）與所述縮混和殘余信號(hào)的差成比例。因此，來(lái)自所述PS編碼器的縮混信號(hào)DMX和殘余 信號(hào)RES可W根據(jù)下式轉(zhuǎn)換為偽立體聲信號(hào)Lp、化：
[0028] Lp=g〇)MX+RE巧
[0029] Rp=g〇)MX-RE巧
[0030] 在上式中，增益歸一化因子g具有例如值勞。
[0031] 所述偽立體聲信號(hào)優(yōu)選地由感知立體聲編碼器（例如，作為所述編碼裝置的一部 分）處理。對(duì)于編碼，能夠選擇L/R立體聲編碼或M/S立體聲編碼。自適應(yīng)L/R和M/S感 知立體聲編碼器可W是基于AAC的編碼器。優(yōu)選地，在L/R立體聲編碼和M/S立體聲編碼 之間的選擇是頻率變化的；因此，如上所述，所述選擇可W對(duì)于不同頻帶變化。而且，在L/R 編碼和M/S編碼之間的選擇優(yōu)選地是時(shí)間變化的。優(yōu)選地由所述感知立體聲編碼器進(jìn)行在 L/R編碼和M/S編碼之間的選定。
[0032] 具有M/S編碼的選項(xiàng)的運(yùn)樣的感知編碼器可W基于所述偽立體聲L/R信號(hào)來(lái)內(nèi)部 計(jì)算（偽）M和S信號(hào)（在時(shí)域或在所選擇的頻帶中）。運(yùn)樣的偽M和S信號(hào)對(duì)應(yīng)于縮混和 殘余信號(hào)（除了可能不同的增益因子）。因此，如果所述感知立體聲編碼器選擇M/S編碼， 則它實(shí)際上對(duì)所述縮混和殘余信號(hào)（它們對(duì)應(yīng)于所述偽M和S信號(hào)）編碼，就像在使用利 用殘余的標(biāo)準(zhǔn)PS編碼的系統(tǒng)中進(jìn)行的那樣。
[0033] 而且，在特殊情況下，所述變換級(jí)實(shí)質(zhì)上補(bǔ)償在前的縮混操作（除了可能不同的 增益因子之外），W使得整個(gè)編碼器系統(tǒng)可W實(shí)際上執(zhí)行整個(gè)立體聲信號(hào)的L/R編碼或?qū)?于其頻帶的L/R編碼（如果在感知編碼器中選擇L/R編碼）。運(yùn)是例如在所述立體聲信號(hào) 的L和R聲道是獨(dú)立的并且具有相同電平時(shí)的情形，如下將詳細(xì)所述。因此，如果對(duì)于給定 頻帶所述立體聲信號(hào)的左和右聲道實(shí)質(zhì)上是獨(dú)立的并且具有實(shí)質(zhì)上相同的電平，則對(duì)于該 頻帶，所述偽立體聲信號(hào)實(shí)質(zhì)上與所述立體聲信號(hào)對(duì)應(yīng)或成比例。
[0034] 因此，所述編碼器系統(tǒng)實(shí)際上允許在L/R立體聲編碼和使用殘余的PS編碼之間切 換，W便能夠適應(yīng)于給定立體聲輸入信號(hào)的屬性。優(yōu)選地，所述編碼方案的適用是時(shí)間和頻 率相關(guān)的。因此，優(yōu)選地，通過(guò)L/R編碼方案來(lái)對(duì)所述立體聲信號(hào)的一些頻帶編碼，而通過(guò) 使用殘余的PS編碼方案來(lái)對(duì)立體聲信號(hào)的其他頻帶編碼。應(yīng)當(dāng)注意，M/S編碼實(shí)質(zhì)上是使 用殘余的PS編碼的特殊情況（因?yàn)椋琇/R至M/S變換是PS縮混操作的特殊情況），因此，編 碼器系統(tǒng)也可W執(zhí)行整體的M/S編碼。
[0035] 具有在所述PS編碼器下游和所述L/R或M/S感知立體聲編碼器上游的變換級(jí)的 所述實(shí)施例具有可W使用傳統(tǒng)PS編碼器和傳統(tǒng)感知編碼器的優(yōu)點(diǎn)。盡管如此，由于此處的 特殊使用，可W適用所述PS編碼器或所述感知編碼器。
[0036] 新的概念通過(guò)使能PS編碼和聯(lián)合立體聲編碼的高效組合改善了立體聲編碼的性 能。
[0037] 根據(jù)一個(gè)替選實(shí)施例，如上所述的編碼裝置包括變換級(jí)，用于對(duì)于一個(gè)或更多個(gè) 頻帶（例如，對(duì)于整個(gè)使用的頻率范圍或僅對(duì)于一個(gè)頻率范圍）基于所述縮混信號(hào)和所述 殘余信號(hào)來(lái)執(zhí)行和與差變換?？蒞在頻域或時(shí)域中執(zhí)行所述變換。所述變換級(jí)生成針對(duì)所 述一個(gè)或更多個(gè)頻帶的偽左/右立體聲信號(hào)。所述偽立體聲信號(hào)的一個(gè)聲道對(duì)應(yīng)于所述 和，并且另一個(gè)聲道對(duì)應(yīng)于所述差。
[003引因此，在編碼基于所述和與差信號(hào)的情況下，所述變換級(jí)的輸出可W用于編碼，而 在編碼基于所述縮混信號(hào)和所述殘余信號(hào)的情況下，在所述編碼級(jí)的上游的信號(hào)可W用于 編碼。因此，該實(shí)施例不對(duì)所述縮混信號(hào)和殘余信號(hào)使用兩個(gè)串行的和與差變換，產(chǎn)生所述 縮混信號(hào)和殘余信號(hào)（除了可能不同的增益因子之外）。
[0039] 當(dāng)基于所述縮混信號(hào)和殘余信號(hào)來(lái)選擇編碼時(shí)，選擇立體聲信號(hào)的參數(shù)立體聲編 碼。當(dāng)基于所述和與差來(lái)選擇編碼時(shí)（即，基于偽立體聲信號(hào)的編碼），選擇立體聲信號(hào)的 L/R編碼。
[0040] 所述變換級(jí)可W是作為具有在L/R和M/S立體聲編碼之間的自適應(yīng)選擇的感知 編碼器的一部分的L/R至M/S變換級(jí)（與傳統(tǒng)的L/R至M/S變換級(jí)相比，可能增益因子不 同）。應(yīng)當(dāng)注意，在L/R和M/S立體聲編碼之間的選定應(yīng)當(dāng)反相。因此，當(dāng)所述選定裝置選 定M/S感知解碼時(shí)，選擇基于縮混信號(hào)和殘余信號(hào)的編碼（即，編碼信號(hào)不通過(guò)變換級(jí)），而 當(dāng)所述選定裝置選定L/R感知解碼時(shí)，選擇基于由所述變換級(jí)生成的所述偽立體聲信號(hào)的 編碼（即，編碼信號(hào)通過(guò)變換級(jí)）。
[0041] 根據(jù)如上所述的實(shí)施例的任何一個(gè)所述的編碼器系統(tǒng)可W包括附加的SBR(頻段 復(fù)制）編碼器。SBR是HFR(高頻重建）的一種形式。SBR編碼器確定用于在解碼器中音頻 信號(hào)的較高頻范圍的重建的側(cè)邊信息。感知編碼器僅對(duì)較低頻率范圍編碼，由此減小比特 率。優(yōu)選地，所述SBR編碼器連接到所述PS編碼器的上游。因此，所述SBR編碼器可W在 立體聲域中，并且生成用于立體聲信號(hào)的SBR參數(shù)。將結(jié)合附圖對(duì)此進(jìn)行詳細(xì)討論。
[0042] 優(yōu)選地，所述PS編碼器（即，縮混級(jí)和參數(shù)確定級(jí)）在過(guò)采樣頻域中運(yùn)行（如下 所述的PS解碼器也同樣優(yōu)選地在過(guò)采樣頻域中運(yùn)行）。對(duì)于時(shí)間至頻率變換，例如，可W在 PS編碼器上游使用具有QMF(正交鏡像濾波器）和奈奎斯特濾波器的復(fù)值混合濾波器組， 如在環(huán)繞MPEG標(biāo)準(zhǔn)中所述（參見(jiàn)文件IS0/IEC23003-1)。運(yùn)允許時(shí)間和頻率自適應(yīng)信號(hào) 處理，而無(wú)可聽(tīng)的失真?zhèn)蜗?。另一方面，?yōu)選地，在臨界采樣MDCT域（例如，如在AAC中所 述）中執(zhí)行自適應(yīng)L/R或M/S編碼，W便保證高效的量化信號(hào)表示。