本發(fā)明涉及多信道音頻信號處理方法及裝置，更具體地，涉及對N-N/2-N結(jié)構(gòu)更有效地處理多信道音頻信號的方法及裝置。
背景技術(shù)：
：MPEG環(huán)繞(MPEGSurround；MPS)是用于編碼5.1信道、7.1信道等多信道信號的音頻編解碼器，表示以高壓縮率壓縮多信道信號可傳輸?shù)木幋a及解碼技術(shù)。MPS在編碼及解碼過程中，具有向下兼容的限制事項。所以，通過MPS壓縮之后，傳輸?shù)浇獯a器的比特流，即使利用以前的音頻編解碼器，也要滿足以單一或立體聲方式可播放的限制事項。因此，即使增加構(gòu)成多信道信號的輸入信道個數(shù)，傳輸?shù)浇獯a器的比特流要包括被編碼的單一信號或立體聲信號。并且，解碼器可使通過比特流傳輸?shù)膯我恍盘柣蛄Ⅲw聲信號上混，可附加地接收附加信號。解碼器利用附加信息，可從單一信號或立體聲信號復(fù)原多信道信號。但是，要求使用5.1信道、7.1信道以上的多信道音頻信號，以現(xiàn)有MPS定義的結(jié)構(gòu)，處理多信道音頻信號時，對音頻信號的質(zhì)量具有問題。技術(shù)實現(xiàn)要素：技術(shù)課題本發(fā)明提供通過N-N/2-N結(jié)構(gòu)，處理多信道音頻信號的方法及裝置。技術(shù)方案根據(jù)本發(fā)明的一個實施例，多信道音頻信號處理方法，可包括以下步驟：識別從N信道的輸入信號生成的N/2信道的下混信號和殘余信號；將所述N/2信道的下混信號和殘余信號適用在第一矩陣；輸出經(jīng)所述第一矩陣被輸入到對應(yīng)于N/2個OTT框的N/2個去相關(guān)器中的第一信號，及沒有被輸入到N/2個去相關(guān)器中而是被傳達至第二矩陣的第二信號；通過所述N/2個去相關(guān)器從所述第一信號輸出去相關(guān)的信號；將所述去相關(guān)的信號和所述第二信號適用在所述第二矩陣；以及通過所述第二矩陣生成N信道的輸出信號。當(dāng)所述N信道的輸出信號中不包含LFE信道時，N/2個去相關(guān)器可對應(yīng)于所述N/2個OTT框。當(dāng)所述去相關(guān)器的個數(shù)超過以模塊演算的基準(zhǔn)值時，所述去相關(guān)器的索引可根據(jù)基準(zhǔn)值被反復(fù)地重新使用。當(dāng)所述N信道的輸出信號中包含LFE信道時，所述去相關(guān)器可使用N/2個中除了LFE信道個數(shù)以外的剩余個數(shù)，且所述LFE信道不使用OTT框的去相關(guān)器。當(dāng)不使用時域成形功能時，含有從所述第二信號、所述去相關(guān)器導(dǎo)出的去相關(guān)的信號、以及從所述去相關(guān)器導(dǎo)出的殘余信號的一個向量可被輸入到所述第二矩陣。當(dāng)使用時域成形功能時，由所述第二信號及所述去相關(guān)器導(dǎo)出的殘余信號對應(yīng)于構(gòu)成的直接信號的向量，以及由所述去相關(guān)器導(dǎo)出的去相關(guān)的信號對應(yīng)于構(gòu)成的擴散信號的向量可被輸入到所述第二矩陣。生成所述N信道的輸出信號的步驟是，當(dāng)使用子帶域時間處理STP時，將基于擴散信號和直接信號的標(biāo)度因子可適用在輸出信號的擴散信號部分，從而成形輸出信號的時域包絡(luò)。生成所述N信道的輸出信號的步驟是，當(dāng)使用引導(dǎo)的包絡(luò)成形GES時，按N信道的輸出信號的信道，可將直接信號部分的包絡(luò)整平并重新成形。所述第一矩陣的大小，根據(jù)應(yīng)用所述第一矩陣的下混信號的信道個數(shù)和去相關(guān)器的個數(shù)被決定，且所述第一矩陣的元素，可經(jīng)CLD參數(shù)或CPC參數(shù)被決定。根據(jù)本發(fā)明的其他實施例，多信道音頻信號處理方法，可包括以下步驟：識別N/2信道的下混信號和N/2信道的殘余信號；將所述N/2信道的下混信號和N/2信道的殘余信號輸入到N/2個OTT框中，來生成N信道的輸出信號，且所述N/2個OTT框互相不連接且被并列配置，所述N/2個OTT框中用于輸出LFE信道的OTT框，其(1)僅接收除了殘余信號以外的下混信號，(2)并在CLD參數(shù)和ICC參數(shù)中利用CLD參數(shù)，(3)不輸出經(jīng)去相關(guān)器被去相關(guān)的信號。根據(jù)本發(fā)明的一個實施例，多信道音頻信號處理裝置包括執(zhí)行多信道音頻信號處理方法的處理器，且所述多信道音頻信號處理方法可包括以下步驟：識別從N信道的輸入信號生成的N/2信道的下混信號和殘余信號；將所述N/2信道的下混信號和殘余信號適用在第一矩陣；輸出經(jīng)所述第一矩陣被輸入到對應(yīng)于N/2個OTT框的N/2個去相關(guān)器中的第一信號，及沒有被輸入到N/2個去相關(guān)器中而是被傳達至第二矩陣的第二信號；通過所述N/2個去相關(guān)器從所述第一信號輸出去相關(guān)的信號；將所述去相關(guān)的信號和所述第二信號適用在所述第二矩陣；以及通過所述第二矩陣生成N信道的輸出信號。當(dāng)所述N信道的輸出信號中不包含LFE信道時，N/2個去相關(guān)器可對應(yīng)于所述N/2個OTT框。當(dāng)所述去相關(guān)器的個數(shù)超過以模塊演算的基準(zhǔn)值時，所述去相關(guān)器的索引可根據(jù)基準(zhǔn)值被反復(fù)地重新使用。當(dāng)所述N信道的輸出信號中包含LFE信道時，所述去相關(guān)器可使用N/2個中除了LFE信道個數(shù)以外的剩余個數(shù)，且所述LFE信道不使用OTT框的去相關(guān)器。當(dāng)不使用時域成形功能時，含有從所述第二信號、所述去相關(guān)器導(dǎo)出的去相關(guān)的信號、以及從所述去相關(guān)器導(dǎo)出的殘余信號的一個向量可被輸入到所述第二矩陣。當(dāng)使用時域成形功能時，由所述第二信號和所述去相關(guān)器導(dǎo)出的殘余信號對應(yīng)于構(gòu)成的直接信號的向量，以及由所述去相關(guān)器導(dǎo)出的去相關(guān)的信號對應(yīng)于構(gòu)成的擴散信號的向量可被輸入到所述第二矩陣。生成所述N信道的輸出信號的步驟是，當(dāng)使用子帶域時間處理STP時，可將基于擴散信號和直接信號的標(biāo)度因子適用在輸出信號的擴散信號部分，從而將輸出信號的時域包絡(luò)成形。生成所述N信道的輸出信號的步驟是，當(dāng)使用引導(dǎo)的包絡(luò)成形GES時，按N信道的輸出信號的信道，可將直接信號部分的包絡(luò)整平并重新成形。所述第一矩陣的大小，可根據(jù)應(yīng)用所述第一矩陣的下混信號的信道個數(shù)和去相關(guān)器的個數(shù)被決定，且所述第一矩陣的元素，經(jīng)CLD參數(shù)或CPC參數(shù)被決定。根據(jù)本發(fā)明的其他實施例，多信道音頻信號處理裝置包括執(zhí)行多信道音頻信號處理方法的處理器，且所述多信道音頻信號處理方法可包括以下步驟：識別N/2信道的下混信號和N/2信道的殘余信號；將N/2信道的下混信號和N/2信道的殘余信號輸入到N/2個OTT框中，來生成N信道的輸出信號，且所述N/2個OTT框互相不連接且被并列配置，所述N/2個OTT框中用于輸出LFE信道的OTT框，其(1)僅接收除了殘余信號以外的下混信號，(2)并在CLD參數(shù)和ICC參數(shù)中利用CLD參數(shù)，(3)不輸出經(jīng)去相關(guān)器被去相關(guān)的信號。技術(shù)效果根據(jù)本發(fā)明的一個實施例，根據(jù)N-N/2-N結(jié)構(gòu)處理多信道音頻信號，可有效地處理在MPS定義的信道數(shù)更多信道個數(shù)的音頻信號。附圖說明圖1是示出根據(jù)一個實施例的3D音頻解碼器。圖2是示出根據(jù)一個實施例，在3D音頻解碼器處理的域。圖3是示出根據(jù)一個實施例的USAC3D編碼器和USAC3D解碼器。圖4是示出根據(jù)一個實施例的圖3的第一編碼單元詳細構(gòu)成的第一圖。圖5是示出根據(jù)一個實施例的圖3的第一編碼單元詳細構(gòu)成的第二圖。圖6是示出根據(jù)一個實施例的圖3的第一編碼單元詳細構(gòu)成的第三圖。圖7是示出根據(jù)一個實施例的圖3的第一編碼單元詳細構(gòu)成的第四圖。圖8是示出根據(jù)一個實施例的圖3的第二解碼單元詳細構(gòu)成的第一圖。圖9是示出根據(jù)一個實施例的圖3的第二解碼單元詳細構(gòu)成的第二圖。圖10是示出根據(jù)一個實施例的圖3的第二解碼單元詳細構(gòu)成的第三圖。圖11是示出根據(jù)一個實施例，體現(xiàn)圖3的示例。圖12是示出根據(jù)一個實施例，簡單表現(xiàn)圖11。圖13是示出根據(jù)一個實施例的圖12的第二編碼單元和第一解碼單元的詳細構(gòu)成。圖14是示出根據(jù)一個實施例，結(jié)合圖11的第一編碼單元和第二編碼單元，結(jié)合第一解碼單元和第二解碼單元的結(jié)果。圖15是示出根據(jù)一個實施例，簡單表現(xiàn)圖14。圖16是示出根據(jù)一個實施例，對N-N/2-N結(jié)構(gòu)的音頻處理方式。圖17是示出根據(jù)一個實施例，以樹形表現(xiàn)N-N/2-N結(jié)構(gòu)。圖18是示出根據(jù)一個實施例，對FCE結(jié)構(gòu)的編碼器和解碼器。圖19是示出根據(jù)一個實施例，對TCE結(jié)構(gòu)的編碼器和解碼器。圖20是示出根據(jù)一個實施例，對ECE結(jié)構(gòu)的編碼器和解碼器。圖21是示出根據(jù)一個實施例，對SiCE結(jié)構(gòu)的編碼器和解碼器。圖22是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)處理24信道音頻信號的過程。圖23是示出根據(jù)一個實施例，根據(jù)ECE結(jié)構(gòu)處理24信道音頻信號的過程。圖24是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)處理14信道音頻信號的過程。圖25是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)和SiCE結(jié)構(gòu)處理14信道音頻信號的過程。圖26是示出根據(jù)一個實施例，根據(jù)TCE結(jié)構(gòu)處理11.1信道音頻信號的過程。圖27是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)處理11.1信道音頻信號的過程。圖28是示出根據(jù)一個實施例，根據(jù)TCE結(jié)構(gòu)處理9.0信道音頻信號的過程。圖29是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)處理9.0信道音頻信號的過程。具體實施方式以下，參考附圖對本發(fā)明實施例進行詳細地說明。圖1是示出根據(jù)一個實施例的3D音頻解碼器。參考本發(fā)明，在編碼器下混多信道音頻信號，在解碼器上混下混信號，可復(fù)原多信道音頻信號。在以下圖2至圖29說明的實施例中，有關(guān)解碼器的內(nèi)容對應(yīng)于圖1。一方面，圖2至圖29顯示處理多信道音頻信號的過程，所以，在圖1可對應(yīng)于比特流、USAC3D解碼器、DRC-1、格式轉(zhuǎn)換(Formatconversion)中任何一個的構(gòu)成要素。圖2是示出根據(jù)一個實施例，在3D音頻解碼器處理的域。在圖1說明的USAC解碼器是用于核心域的譯碼，在時間域和頻率域中任何一個域處理音頻信號。并且，音頻信號為多頻帶時，DRC-1在頻率域處理音頻信號。一方面，格式轉(zhuǎn)換(Formatconversion)在頻率域處理音頻信號。圖3是示出根據(jù)一個實施例的USAC3D編碼器和USAC3D解碼器。參考圖3，USAC3D編碼器可都包括第一編碼單元301和第二編碼單元302?；蛘?，USAC3D編碼器可包括第二編碼單元302。類似地，USAC3D解碼器可包括第一解碼單元303和第二解碼單元304。或者，USAC3D解碼器可包括第一解碼單元303。在第一編碼單元301輸入N信道的輸入信號。之后，第一編碼單元301對N信道的輸入信號進行下混，可輸出M信道的下混信號。在這種情況下，N比M可具有大值。作為一個示例，N為偶數(shù)時，M可以是N/2。并且，N為奇數(shù)時，M可以是(N-1)/2+1。整理此，可表現(xiàn)為數(shù)學(xué)式1?！緮?shù)學(xué)式1】第二編碼單元302編碼M信道的下混信號，可生成比特流。作為一個示例，第二編碼單元302可編碼M信道的下混信號，可活用為一般的音頻編碼器。例如，第二編碼單元302為ExtendedHE-AAC的USAC編碼器時，第二編碼單元302可編碼24個信道信號并傳輸。只是，僅利用第二編碼單元302編碼N信道的輸入信號時，比起利用第一編碼單元301和第二編碼單元302編碼N信道的輸入信號，需要相對多個比特，也可發(fā)生音質(zhì)惡化。一方面，第一解碼單元303解碼第二編碼單元302生成的比特流，可輸出M信道的下混信號。由此，第二解碼單元304上混M信道的下混信號，可生成N信道的輸出信號。N信道的輸出信號與輸入在第一編碼單元301的N信道的輸入信號類似地被復(fù)原。作為一個示例，第二解碼單元304可解碼M信道的下混信號，可活用為一般的音頻編碼器。例如，第二解碼單元304為ExtendedHE-AAC的USAC編碼器時，第二解碼單元302可解碼24信道的下混信號。圖4是示出根據(jù)一個實施例的圖3的第一編碼單元詳細構(gòu)成的第一圖。第一編碼單元301可包括多個下混單元401。在這種情況下，輸入在第一編碼單元301的N信道的輸入信號，以每兩個成對的構(gòu)成之后，可輸入在下混單元401。由此，下混單元401可顯示TTO(Two-To-Two)框。下混單元401從輸入在2信道的輸入信號，提取空間線索的聲道電平差(ChannelLevelDifference；CLD)、道間相關(guān)性/連貫性(InterChannelCorrelation/Coherence；ICC)、內(nèi)部信道相位差(InterChannelPhaseDifference；IPD)、信道預(yù)測系統(tǒng)(ChannelPredictionCoefficient；CPC)或整體相位差(OverallPhaseDifference；OPD)，下混2信道(立體聲)的輸入信號，可生成1信道(單一)的下混信號。包括在第一編碼單元301的多個下混單元401，可顯示并列結(jié)構(gòu)。例如，在第一編碼單元301輸入N信道的輸入信號且N為偶數(shù)時，可需要N/2個包括在第一編碼單元301的，由TTO框體現(xiàn)的下混單元401。圖4的情況，第一編碼單元301通過N/2個TTO框，下混N信道的輸入信號，可生成M信道(N/2信道)的下混信號。圖5是示出根據(jù)一個實施例的圖3的第一編碼單元詳細構(gòu)成的第二圖。上述說明的圖4是在第一編碼單元301輸入N信道的輸入信號，N為偶數(shù)時，顯示第一編碼單元301的詳細構(gòu)成。并且，圖5是在第一編碼單元301輸入N信道的輸入信號，N為奇數(shù)時，顯示第一編碼單元301的詳細構(gòu)成。參考圖5，第一編碼單元301可包括多個下混單元501。在這種情況下，第一編碼單元301可包括(N-1)/2個下混單元501。并且，為了處理剩余一個信道信號，第一編碼單元301可包括延遲單元502。在這種情況下，將輸入在第一編碼單元301的N信道的輸入信號，以每2個信道成對的構(gòu)成之后，可輸入在下混單元501。下混單元501可顯示TTO框。下混單元501從輸入的2信道的輸入信號提取空間線索的CLD、ICC、IPD、CPC或OPD，下混2信道(立體聲)的輸入信號，可生成1信道(單一)的下混信號。從第一編碼單元301輸出的M信道的下混信號，根據(jù)下混信號501的個數(shù)和延遲單元502的個數(shù)被決定。并且，適用在延遲單元502的延遲值，可與適用在下混單元501的延遲值相同。如果，第一編碼單元301輸入信號的M信道的下混信號為PCM信號時，延遲值可根據(jù)以下數(shù)學(xué)式2被決定?！緮?shù)學(xué)式2】Enc_Delay＝Delay1(QMFAnalysis)+Delay2(HybridQMFAnalysis)+Delay3(QMFSynthesis)其中，Enc_Delay顯示適用在下混單元501和延遲單元502的延遲值。并且，Delay1(QMFAnalysis)顯示對MPS的64帶分析QMF時發(fā)生的延遲值，可以是288。并且，Delay2(HybridQMFAnalysis)顯示分析使用13分接頭(tap)濾波器的HybridQMF時發(fā)生的延遲值，可以是6*64＝384。其中，適用64的理由是因為對64帶執(zhí)行QMF分析之后，執(zhí)行HybridQMF分析。如果，第一編碼單元301輸出信號的M信道的下混信號為QMF信號時，延遲值可根據(jù)數(shù)學(xué)式3被決定?！緮?shù)學(xué)式3】Enc_Delay＝Delay1(QMFAnalysis)+Delay2(HybridQMFAnalysis)圖6是示出根據(jù)一個實施例的圖3的第一編碼單元詳細構(gòu)成的第三圖。并且，圖7是示出根據(jù)一個實施例的圖3的第一編碼單元詳細構(gòu)成的第四圖。如果，假設(shè)N信道的輸入信號由N’信道的輸入信號和K信道的輸入信號被構(gòu)成。在這種情況下，假設(shè)N’信道的輸入信號輸入在第一編碼單元301，K信道的輸入信號輸入不到第一編碼單元301。在這種情況下，由數(shù)學(xué)式4可決定輸入在第二編碼單元301的，對應(yīng)于M信道的下混信號的信道個數(shù)M?！緮?shù)學(xué)式4】在這種情況下，圖6顯示N’為偶數(shù)時的第一編碼單元301的結(jié)構(gòu)，圖7顯示N’為奇數(shù)時的第一編碼單元301的結(jié)構(gòu)。經(jīng)圖6，N’為偶數(shù)時，N’信道的輸入信號輸入在多個下混單元601，K信道的輸入信號可輸入在多個延遲單元602。其中，N’信道的輸入信號輸入在顯示N’/2個TTO框的下混單元601，K信道的輸入信號可輸入在K個延遲單元602。并且，經(jīng)圖7，N’為奇數(shù)時，N’信道的輸入信號可輸入在多個下混單元701和一個延遲單元702。并且，K信道的輸入信號可輸入在多個延遲單元702。其中，N’信道的輸入信號可輸入在顯示N’/2個TTO框的下混單元701和一個延遲單元702。并且，K信道的輸入信號可輸入在K個延遲單元702。圖8是示出根據(jù)一個實施例的圖3的第二解碼單元詳細構(gòu)成的第一圖。參考圖8，第二解碼單元304上混從第一解碼單元303傳達的M信道的下混信號，可生成N信道的輸出信號。第一解碼單元303可解碼包括在比特流的M信道的下混信號。在這種情況下，第二解碼單元304利用在圖3的從第二編碼單元301傳輸?shù)目臻g線索，上混M信道的下混信號，可生成N信道的輸出信號。作為一個示例，在N信道的輸出信號中N為偶數(shù)時，第二解碼單元304可包括多個去相關(guān)單元801和上混單元802。并且，在N信道的輸出信號中N為奇數(shù)時，第二解碼單元304可包括多個去相關(guān)單元801、上混單元802及延遲單元803。即，在N信道的輸出信號中N為奇數(shù)時，可與圖8示出不同不需要延遲單元803。在這種情況下，在去相關(guān)單元801生成去相關(guān)的信號的過程中，可發(fā)生附加的延遲，所以，延遲單元803的延遲值可與編碼器適用的延遲值不同。圖8顯示從第二解碼單元304導(dǎo)出的，N信道的輸出信號中，N為奇數(shù)的情況。在第二解碼單元304輸出的N信道的輸出信號為PCM信號時，延遲單元803的延遲值可根據(jù)以下數(shù)學(xué)式5被決定。【數(shù)學(xué)式5】Dec_Delay＝Delay1(QMFAnalysis)+Delay2(HybridQMFAnalysis)+Delay3(QMFSynthesis)+Delay4(Decorrelatorfilteringdelay)其中，Enc_Delay表示延遲單元803的延遲值。并且，Delay1表示根據(jù)QMF分析發(fā)生的延遲值、Delay2是根據(jù)混合QMF分析發(fā)生的延遲值、Delay3是根據(jù)QMF合成發(fā)生的延遲值。并且，Delay4表示在去相關(guān)單元801，根據(jù)適用去相關(guān)性濾波器發(fā)生的延遲值。并且，在第二解碼單元304輸出的N信道的輸出信號為QMF信號時，延遲單元803的延遲值，可根據(jù)以下數(shù)學(xué)式6被決定。【數(shù)學(xué)式6】Dec_Delay＝Delay3(QMFSynthesis)+Delay4(Decorrelatorfilteringdelay)首先，多個去相關(guān)單元801各個可生成輸入到第二解碼單元304的M信道的下混信號的去相關(guān)的信號。在多個去相關(guān)單元801各個生成的去相關(guān)的信號，可輸入在上混單元802。在這種情況下，與在MPS生成去相關(guān)的信號不同，多個去相關(guān)單元801可利用M信道的下混信號，生成去相關(guān)的信號。即，為了生成去相關(guān)的信號，利用從編碼器傳達的M信道的下混信號情況下，再現(xiàn)多信道信號的聲場時，可能不會發(fā)生音質(zhì)惡化。以下，對包括在第二解碼單元304的上混單元802的操作進行說明。輸入在第二解碼單元304的M信道的下混信號，可由m(n)＝[m0(n),m1(n),...,mM-1(n)]T定義。并且，利用M信道的下混信號生成的M個去相關(guān)的信號，可由定義。此外，通過第二解碼單元304輸出的N信道的輸出信號，可由y(n)＝[y0(n),y1(n),...,yM-1(n)]T定義。由此，第二解碼單元304可根據(jù)以下數(shù)學(xué)式7，生成N信道的輸出信號。【數(shù)學(xué)式7】其中，M(n)表示在n個樣品時間中，對M信道的下混信號，為了執(zhí)行上混的矩陣。在這種情況下，M(n)可由以下數(shù)學(xué)式8定義?！緮?shù)學(xué)式8】在數(shù)學(xué)式8，0時2x2零矩陣，Ri(n)是2x2矩陣如以下數(shù)學(xué)式9定義?！緮?shù)學(xué)式9】其中，Ri(n)的構(gòu)成要素可從編碼器傳輸?shù)目臻g線索被導(dǎo)出。從編碼器實際傳輸?shù)目臻g線索，可決定按幀單位的b索引，由樣品單位適用的Ri(n)可由相鄰的幀間內(nèi)插(interpolation)被決定?？筛鶕?jù)MPS方法，由以下數(shù)學(xué)式10決定。【數(shù)學(xué)式10】在數(shù)學(xué)式10，cL,R可從CLD導(dǎo)出。并且，α(b)和β(b)可從CLD和ICC導(dǎo)出。數(shù)學(xué)式10可根據(jù)定義在MPS的空間線索的處理方式被導(dǎo)出。并且，在數(shù)學(xué)式7，演算子顯示交錯(interlace)向量的各要素，用于生成新向量列的演算子。在數(shù)學(xué)式7中，可根據(jù)以下數(shù)學(xué)式11決定。【數(shù)學(xué)式11】通過這些過程，數(shù)學(xué)式7可由以下數(shù)學(xué)式12表現(xiàn)。【數(shù)學(xué)式12】在數(shù)學(xué)式12，為了明確地顯示輸入信號和輸出信號的處理過程，使用了{}。經(jīng)數(shù)學(xué)式11，M信道的下混信號和去相關(guān)的信號相互成對，可輸入上混矩陣的數(shù)學(xué)式12。即，經(jīng)數(shù)學(xué)式12，在每M信道的下混信號適用去相關(guān)的信號，可最小化上混過程的音質(zhì)歪曲，聲場效果也可最接近原信號的生成。以上說明的數(shù)學(xué)式12也可由以下數(shù)學(xué)式13表現(xiàn)。【數(shù)學(xué)式13】圖9是示出根據(jù)一個實施例的圖3的第二解碼單元詳細構(gòu)成的第二圖。參考圖9，第二解碼單元304解碼從第一解碼單元303傳達的M信道的下混信號，可生成N信道的輸出信號。M信道的下混信號由N’/2信道的音頻信號和K信道的音頻信號構(gòu)成時，第二解碼單元304也可反映在編碼器處理結(jié)果進行處理。例如，假設(shè)輸入在第二解碼單元304的M信道的下混信號滿足數(shù)學(xué)式4時，如圖9，第二解碼單元304可包括多個延遲單元903。在這種情況下，滿足數(shù)學(xué)式4的M信道的下混信號的N’為奇數(shù)時，第二解碼單元304可具有如圖9相同的結(jié)構(gòu)。如果，滿足數(shù)學(xué)式4的M信道的下混信號的N’為偶數(shù)時，在圖9的第二解碼單元304，可排除位于上混單元902下的一個延遲單元903。圖10是示出根據(jù)一個實施例的圖3的第二解碼單元詳細構(gòu)成的第三圖。參考圖10，第二解碼單元304上混從第一解碼單元303傳達的M信道的下混信號，可生成N信道的輸出信號。在這種情況下，在圖10示出的在第二解碼單元304的上混單元1002，可包括顯示OTT(One-To-Two)框的多個信號處理單元1003。在這種情況下，多個信號處理單元1003各個利用M信道的下混信號中1信道的下混信號，和在去相關(guān)單元1001生成的去相關(guān)的信號，可生成2信道的輸出信號。在上混單元1002由并列結(jié)構(gòu)布置的多個信號處理單元1003，可生成N-1信道的輸出信號。如果，N為偶數(shù)時，延遲單元1004可從第二解碼單元304被排除。由此，在上混單元1002由并列結(jié)構(gòu)布置的多個信號處理單元1003，可生成N信道的輸出信號。信號處理單元1003可根據(jù)數(shù)學(xué)式13進行上混。并且，在所有信號處理單元1003執(zhí)行的上混過程，可由如數(shù)學(xué)式12相同的一個上混矩陣表現(xiàn)。圖11是示出根據(jù)一個實施例，體現(xiàn)圖3的示例。參考圖11，第一編碼單元301可包括TTO框的多個下混單元1101和多個延遲單元1102。并且，第二編碼單元302可包括多個USAC編碼器1103。一方面，第一解碼單元303可包括多個USAC解碼器1106，第二解碼單元304可包括OTT框的多個上混單元304和多個延遲單元1108。參考圖11，第一編碼單元301利用N信道的輸入信號，可輸出M信道的下混信號。在這種情況下，M信道的下混信號可輸入在第二編碼單元302。在這種情況下，M信道的下混信號中，經(jīng)過TTO框下混單元1101的1信道的下混信號對，可在包括在第二編碼單元302的USAC編碼器1103，由立體聲形態(tài)被編碼。并且，M信道的下混信號中，不經(jīng)過TTO框的下混單元1101且經(jīng)過延遲單元1102的下混信號，在USAC編碼器1103可由單一形態(tài)或立體聲形態(tài)編碼。換句話說，M信道的下混信號中經(jīng)過延遲單元1102的1信道的下混信號，可在USAC編碼器1103由單一形態(tài)編碼。并且，M信道的下混信號中，經(jīng)過2個延遲單元1102的2個1信道的下混信號，在USAC編碼單元1103可由立體形態(tài)編碼。M個信道信號在第二編碼單元302被編碼，可由多個比特流被生成。并且，多個比特流通過多路轉(zhuǎn)換器單元1104，可由一個比特流被重定格式。在多路轉(zhuǎn)換器單元1104生成的比特流傳達至多路分配器單元1104，多路分配器單元1105可由對應(yīng)于包括在第一解碼單元303的USAC解碼器303的多個比特流，多路解編比特流。多路解編的多個比特流可分別輸入到包括在第一解碼單元303的USAC解碼器1106。并且，USAC解碼器303可根據(jù)包括在第二編碼單元302的USAC編碼器1103編碼方式解碼。由此，第一解碼單元303可從多個比特流輸出M信道的下混信號。之后，第二解碼單元304利用M信道的下混信號，可生成N信道的輸出信號。在這種情況下，第二解碼單元304利用OTT框的上混單元1107，可上混輸入的M信道的下混信號的一部分。具體地，M信道的下混信號中，1信道的下混信號輸入在上混單元1107，上混單元1107利用1信道的下混信號和去相關(guān)的信號，可生成2信道的輸出信號。作為一個示例，上混單元1107利用數(shù)學(xué)式13可生成2信道的輸出信號。一方面，多個上混單元1107各個利用對應(yīng)于數(shù)學(xué)式13的上混矩陣，執(zhí)行M次的上混，可使第二解碼單元304生成N信道的輸出信號。由此，數(shù)學(xué)式12要執(zhí)行M次的根據(jù)數(shù)學(xué)式13的上混才被導(dǎo)出，所以，數(shù)學(xué)式12的M可與包括在第二解碼單元304的上混單元1107的個數(shù)相同。并且，N信道的輸入信號中，在第一編碼單元301通過不是TTO框的下混單元1101的延遲單元1102，在M信道的下混信號包括K信道的音頻信號時，K信道的音頻信號可在第二解碼單元304不是OTT框的上混單元1107的延遲單元被處理。在這種情況下，通過上混單元1107輸出的輸出信號的信道個數(shù)可以是N-K。圖12是示出根據(jù)一個實施例，簡單表現(xiàn)圖11。參考圖12，N信道的輸入信號可輸入在以每2信道的成對，包括在第一編碼單元301的下混單元1201。下混單元1201可由TTO框構(gòu)成，下混2信道的輸入信號可生成1信道的下混信號。第一編碼單元301利用以并列布置的多個上混單元1201，可從N信道的輸入信號生成M信道的下混信號。根據(jù)本發(fā)明的一個實施例，N是比M大的正數(shù)，M可以是N/2。由此，包括在第二編碼單元302的立體聲類型的USAC編碼器1202，編碼從2個下混單元1201輸出的2個1信道的下混信號，可生成比特流。并且，包括在第一解碼單元303的立體聲類型的USAC解碼器1203，可從比特流的M信道的下混信號，復(fù)原2個1信道的下混信號。2個1信道下混信號，可分別輸入在顯示包括在第二解碼單元304的OTT框的2個上混單元1204。由此，上混單元1204利用1信道的下混信號和去相關(guān)的信號，可生成構(gòu)成N信道的輸出信號的2信道的輸出信號。圖13是示出根據(jù)一個實施例的圖12的第二編碼單元和第一解碼單元的詳細構(gòu)成。在圖13，包括在第二編碼單元302的USAC編碼器1302，可包括TTO框的下混單元1303、頻帶復(fù)制(SpectralBandReplication；SBR)單元1304及核心編碼單元1305。包括在第一編碼單元301的TTO框的下混單元1301，下混N信道的輸入信號中的2信道的輸入信號，可生成構(gòu)成M信道的下混信號的1信道的下混信號。根據(jù)下混單元1301的個數(shù)，可決定M信道的信道個數(shù)。由此，從包括在第一編碼單元301的2個下混單元1301輸出的2個1信道的下混信號，可輸入到包括在USAC編碼器1302的TTO框的下混單元1303。下混單元1303下混從2個下混單元1301輸出的1信道的下混信號對，可生成1信道的下混信號。為了編碼在下混單元1303生成的單一信號的高頻帶寬的參數(shù)，SBR單元1304在單一信號除了高頻帶，只可提取低頻帶寬。由此，核心編碼單元1305編碼相應(yīng)于核心帶寬的低頻帶寬的單一信號，可生成比特流。最終，根據(jù)本發(fā)明的一個實施例，從N信道的輸入信號為了生成包括M信道的下混信號的比特流，可連續(xù)地執(zhí)行TTO形態(tài)的下混過程。換句話說，TTO框的下混單元1301可下混N信道的輸入信號中，立體聲形態(tài)的2信道的輸入信號。并且，在2個下混單元1301各個輸出的結(jié)果，作為M信道的下混信號的一部分，可輸入在TTO框的下混單元1303。即，N信道的輸入信號中的4信道的輸入信號，可通過TTO形態(tài)的下混，連續(xù)地輸出1信道的下混信號。并且，在第二編碼單元302生成的比特流，可輸入在第一解碼單元302的USAC解碼器1306。在圖13，包括在第二編碼單元302的USAC解碼器1306，可包括核心解碼單元1307、SBR單元1308、OTT框的上混單元1309。核心解碼單元1307利用比特流，可輸出對應(yīng)于低頻帶寬的核心帶寬的單一信號。由此，SBR單元1308復(fù)制單一信號的低頻帶寬，可復(fù)原高頻帶寬。上混單元1309上混從SBR單元1308輸出的單一信號，可生成構(gòu)成M信道的下混信號的立體信號。由此，包括在第二解碼單元304的OTT框的上混單元1310，上混在第一解碼單元302生成的包括在立體信號的單一信號，可生成立體聲信號。最終，根據(jù)本發(fā)明的一個實施例，為了從比特流復(fù)原N信道的輸出信號，OTT形態(tài)的上混過程，可由并列的連續(xù)執(zhí)行。換句話說，OTT框的上混單元1309上混單一信號(1信道)，可生成立體聲信號。并且，構(gòu)成上混單元1309輸出信號的立體信號2個單一信號，可輸入在OTT框的上混單元1310。OTT框的上混單元1301上混輸入的單一信號，可輸出立體信號。即，通過連續(xù)地OTT形態(tài)的上混的單一信道，可生成4信道的輸出信號。圖14是示出根據(jù)一個實施例，結(jié)合圖11的第一編碼單元和第二編碼單元，結(jié)合第一解碼單元和第二解碼單元的結(jié)果。結(jié)合圖11的第一編碼單元和第二編碼單元，可體現(xiàn)如圖14示出的一個編碼單元1401。并且，結(jié)合圖11的第一解碼單元和第二解碼單元，顯示如在圖14示出的以一個解碼單元1402體現(xiàn)結(jié)果。圖14的編碼單元1401可在包括TTO框的下混單元1405、SBR單元1406及核心編碼單元1407的USAC編碼器，包括附加地含有TTO框的下混單元1404的編碼單元1403。在這種情況下，編碼單元1401可包括由并列結(jié)構(gòu)布置的多個編碼單元1403?；蛘?，編碼單元1403可對應(yīng)于包括TTO框的下混單元1404的USAC編碼器。即，根據(jù)本發(fā)明的一個實施例，編碼單元1403在N信道的輸入信號的4信道輸入信號，連續(xù)地適用TTO形態(tài)的下混，可生成1信道的單一信號。以相同的方式，圖14的解碼單元1402可在包括核心解碼單元1411、SBR單元1412及OTT框的上混單元1413的USAC解碼器，包括附加地含有OTT框的上混單元1404的解碼單元1410。在這種情況下，解碼單元1402可包括由并列結(jié)構(gòu)布置的多個解碼單元1410?；蛘?，解碼單元1410可對應(yīng)于包括OTT框的上混單元1404的USAC解碼器。即，根據(jù)本發(fā)明的一個實施例，解碼單元1410在單一信號連續(xù)地適用OTT形態(tài)的上混，可生成N信道的輸出信號中4信道的輸出信號。圖15是示出根據(jù)一個實施例，簡單表現(xiàn)圖14。在圖15，編碼單元1501可對應(yīng)于圖14的編碼單元1403。其中，編碼單元1501可對應(yīng)于修改的USAC編碼器。即，修改的USAC編碼器可在包括TTO框的下混單元1504、SBR單元1505及核心編碼單元1506的原來USAC編碼器，以附加包括TTO框的下混單元1503被體現(xiàn)。并且，在圖15，解碼單元1502可對應(yīng)于圖14的解碼單元1410。其中，解碼單元1502可對應(yīng)于修改的USAC解碼器。即，修改的USAC解碼器可在包括核心解碼單元1507、SBR單元1508及OTT框的上混單元1509的原來USCA解碼器，以附加包括OTT框的上混單元1510被體現(xiàn)。圖16是示出根據(jù)一個實施例，對N-N/2-N結(jié)構(gòu)的音頻處理方式。參考16，定義在MPEGSURROUND的結(jié)構(gòu)顯示變更的N-N/2-N結(jié)構(gòu)。MPEGSURROUND的情況，如表1可在解碼器執(zhí)行空間合成(spatialsynthesis)?？臻g合成通過輸入信號的混合正交鏡像濾波器分析組合(hybridQMF(QuadratureMirrorFilter)analysisbank)，在時間域可變換為非均勻(non-uniform)子帶域。其中，非均勻的意思對應(yīng)于混合。由此，解碼器在混合子帶運行。解碼器基于從編碼器傳達的空間參數(shù)(spatialparameter)執(zhí)行空間合成，可從輸入信號生成輸出信號。之后，解碼器利用混合正交鏡像濾波器分析組合(hybridQMFsynthesisbank)，可在混合子帶以時間域逆變換輸出信號?！颈?】圖16說明解碼器執(zhí)行的空間合成，通過混合的矩陣處理多信道音頻信號的過程?；镜?，MPEGSURROUND定義5-1-5結(jié)構(gòu)、5-2-5結(jié)構(gòu)、7-2-7結(jié)構(gòu)、7-5-7結(jié)構(gòu)，但本發(fā)明提議N-N/2-N結(jié)構(gòu)。N-N/2-N結(jié)構(gòu)的情況，N信道的輸入信號變換為N/2信道的下混信號之后，顯示從N/2信道的下混信號生成N信道的輸出信號的過程。根據(jù)本發(fā)明的一個實施例，解碼器上混N/2信道的下混信號，可生成N信道的輸出信號?；镜?，在本發(fā)明的N-N/2-N結(jié)構(gòu)，對N信道的個數(shù)沒有限制。即，N-N/2-N結(jié)構(gòu)不僅支持在MPS支持的信道結(jié)構(gòu)，而且也支持在MPS不支持的多信道音頻信號的信道結(jié)構(gòu)。在圖16，NumInCh表示下混信號的信道個數(shù)，NumOutCh表示輸出信號的信道個數(shù)。即，NumInCh是N/2個，NumOutCh是N個。在圖16，N/2信道的下混信號(X0～XNumInch-1)和殘余信號構(gòu)成輸入向量X。在圖16，NumInCh是N/2，所以從X0到XNumInCh-1表示N/2信道的下混信號。OTT(One-To-Two)框的個數(shù)為N/2個，所以，為了處理N/2信道的下混信號，輸出信號的信道個數(shù)的N為偶數(shù)。與對應(yīng)于矩陣M1的向量相乘的輸入向量X，表示包括N/2信道的下混信號的向量。在N信道的輸出信號不包括LFE信道時，可最大地使用N/2個的去相關(guān)器(decorrelator)。但是，輸出信號的信道個數(shù)N超過20時，可重新使用去相關(guān)器濾波器。為了保障去相關(guān)器輸出信號的正交性(orthogonality)，N為20時可活用的去相關(guān)器的個數(shù)有必要被限制為特定個數(shù)(ex.10個)，所以，可反復(fù)幾個去相關(guān)器的索引。由此，根據(jù)本發(fā)明的優(yōu)選地一個實施例，在N-N/2-N結(jié)構(gòu)中，輸出信號的信道個數(shù)N有必要小于限制的特定個數(shù)的二倍(ex.N<20)。如果，在輸出信號包括LFE信道時，N信道考慮LFE信道的個數(shù)，有必要由特定個數(shù)二倍稍微多的信號少數(shù)的信道(ex.N<24)構(gòu)成。并且，去相關(guān)器的輸出結(jié)果根據(jù)比特流，可被代替為特定頻率領(lǐng)域的殘余信號。LFE信道為OTT框的輸出中的一個時，對基于上混OTT框，不使用去相關(guān)器。在圖16中，從1到M(ex.NumInCh-NumLfe)被標(biāo)記的去相關(guān)器、對應(yīng)于去相關(guān)器的輸出結(jié)果(去相關(guān)的信號)、殘余信號對應(yīng)于相互不同的OTT框。d1～dM是去相關(guān)器(D1～DM)輸出結(jié)果的去相關(guān)的信號，res1～resM時去相關(guān)器(D1～DM)輸出結(jié)果的殘余信號。并且，去相關(guān)器D1～DM分別對應(yīng)于相互不同的OTT框。以下，定義在N-N/2-N結(jié)構(gòu)使用的向量和矩陣。在N-N/2-N結(jié)構(gòu)中，輸入到去相關(guān)器的輸入信號由向量vn,k被定義。向量vn，k可根據(jù)使用時域成形功能(termporalshapingtool)或不使用，不同地被決定。(1)不使用時域成形功能(termporalshapingtool)時不使用時域成形功能時，向量vn,k根據(jù)數(shù)學(xué)式14由對應(yīng)于向量xn,k和矩陣M1的被導(dǎo)出。并且，表示N次行的第一列的矩陣?！緮?shù)學(xué)式14】在這種情況下，在數(shù)學(xué)式14向量vn,k元素中，至不輸入到對應(yīng)于N/2個OTT框的N/2個的去相關(guān)器，可直接輸入到矩陣M2。由此，至可定義為直接信號(directsignal)。并且，在向量vn,k的單元中，除了至的剩余信號(至)，可輸入在對應(yīng)于N/2個OTT框的N/2個的去相關(guān)器。向量wn,k由直接信號、從去相關(guān)器輸出的去相關(guān)的信號(decorrelatedsignals)的d1～dM及從去相關(guān)器輸出的殘余信號res1～resM構(gòu)成。向量wn,k可由以下數(shù)學(xué)式15決定。【數(shù)學(xué)式15】在數(shù)學(xué)式15，由定義，kset表示滿足κ(k)＜mresProc(X)的所有k的集合。并且，表示信號輸入在去相關(guān)器DX時，從去相關(guān)器輸出的去相關(guān)的信號。特別地，表示OTT框為OTTx殘余信號為時，從去相關(guān)器輸出的信號。輸出信號的子帶對所有時隙n和所有混合子帶k，可由從屬的被定義。輸出信號yn,k可通過向量w和矩陣M2，由以下數(shù)學(xué)式16決定。【數(shù)學(xué)式16】其中，表示由NumOutCh行和NumInCh-NumLfe列構(gòu)成的矩陣M2。對0≤l＜L,0≤k＜K可由以下數(shù)學(xué)式17定義。【數(shù)學(xué)式17】其中，定義成并且，可根據(jù)以下數(shù)學(xué)式18被平滑?！緮?shù)學(xué)式18】其中，κ(k)表示第一行是混合帶k，第二行對應(yīng)于過程帶的函數(shù)。對應(yīng)于之前幀的最后參數(shù)集。一方面，yn,k表示通過混合合成濾波器組，可由時間域合成的混合子帶信號。其中，混合合層濾波器組是經(jīng)過奈奎斯特合成組(Nyquistsynthesisbanks)，組合QMF合成組(QMFsynthesisbank)，yn,k通過混合合成濾波器組，可在混合子帶域變換為時間域。(2)使用時域成形功能時如果，使用時域成形功能時，向量vn,k與上述說明相同，但向量wn,k可如同以下數(shù)學(xué)式19、數(shù)學(xué)式20，分為兩種向量?！緮?shù)學(xué)式19】【數(shù)學(xué)式20】表示不經(jīng)過去相關(guān)器，而直接輸入到矩陣M2的直接信號和從去相關(guān)器輸出的殘余信號，表示從去相關(guān)器輸出的去相關(guān)的信號。并且，被定義成kset表示滿足κ(k)＜mresProc(X)的所有k的集合。此外，在去相關(guān)器DX輸入輸入信號時，表示從去相關(guān)器DX輸出的去相關(guān)的信號。因定義在數(shù)學(xué)式19、數(shù)學(xué)式20的和最終輸出的信號可由和被區(qū)分。包括直接信號(directsignal)，包括擴散信號(diffusesignal)。即，是不通過去相關(guān)器，從直接輸入在矩陣M2的直接信號導(dǎo)出的結(jié)果，是從去相關(guān)器輸出，從輸入在矩陣M2的擴散信號導(dǎo)出的結(jié)果。如果，子帶域時間過程(SubbandDomainTemporalProcessing；STP)用于N-N/2-N結(jié)構(gòu)時，引導(dǎo)包絡(luò)成形(GuidedEnvelopeShaping；GES)被區(qū)分為用于N-N/2-N結(jié)構(gòu)，導(dǎo)出和在這種情況下，和可由數(shù)字流元素bsTempShapeConfig被識別。<STP被使用時>為了合成輸出信號的信道間的去相關(guān)程度，通過空間合成的去相關(guān)器，生成擴散信號。在這種情況下，生成的擴散信號可與直接信號混。通常，擴散信號的時間包絡(luò)不與直接信號的包絡(luò)匹配。在這種情況下，子帶域時間過程為了成形輸出信號的各個擴散信號部分的包絡(luò)，匹配從編碼器傳輸?shù)南禄煨盘柕臅r間形狀(termpoalshape)，而被使用。這些過程可由對直接信號和擴散信號的，如包絡(luò)比率計算或擴散信號的上位頻譜部分的成形的包絡(luò)推定被體現(xiàn)。即，在通過上混生成的輸出信號，可推定相應(yīng)于直接信號的部分和對應(yīng)于擴散信號部分的時間能量。成形因素可由相應(yīng)于直接信號的部分和對應(yīng)于擴散信號部分的時間能量包絡(luò)間的比率被計算。STP可由bsTempShapeConfig＝1傳訊。如果為bsTempShapeEnableChannel(ch)＝1時，通過上混生成的輸出信號的擴散信號部分，可通過STP被處理。一方面，對于生成輸出信號的空間上混，為了減少傳輸原本下混信號的延遲對齊(delayalignment)的必要性，空間上混的下混可由傳輸?shù)脑鞠禄煨盘柕慕浦?approximation)計算。對于N-N/2-N結(jié)構(gòu)，對(NumInCh-NumLfe)的直接下混信號，可由以下數(shù)學(xué)式21被定義?！緮?shù)學(xué)式21】其中，對于N-N/2-N結(jié)構(gòu)chd包括對應(yīng)于輸出信號的信道d的輸出信號的成對(pair-wise)?！颈?】結(jié)構(gòu)chdN-N/2-N{ch0,ch1}d＝0,{ch2,ch3}d＝1,...,{ch2d,ch2d+1,}d＝NumInCh-NumLfe下混的寬帶包絡(luò)和對各個上混信道的擴散信號部分的包絡(luò)，可利用歸一化直接能量，根據(jù)以下數(shù)學(xué)式22推定?！緮?shù)學(xué)式22】其中，BPsb表示帶通因素，GFsb表示光譜均勻因素(spectralflatteringfactor)。在N-N/2-N結(jié)構(gòu)存在對NumInCh-NumLfe的直接信號，所以，滿足0≤d＜(NumInCh-NumLfe)的直接信號能量的Edirect_norm,d，可由在MPEGSurround定義的5-1-5結(jié)構(gòu)相同的方式獲得。對最終包絡(luò)處理的標(biāo)度因子，可如以下數(shù)學(xué)式23被定義?！緮?shù)學(xué)式23】在數(shù)學(xué)式23，標(biāo)度因子可在N-N/2-N結(jié)構(gòu)0≤d＜(NumInCh-NumLfe)的情況下被定義。由此，在輸出信號的擴散信號部分適用標(biāo)度因子，使輸出信道的時間包絡(luò)實際上映射于下混信號的時間包絡(luò)。由此，在N信道的輸出信號的各個信道，由標(biāo)度因子處理的擴散信號部分可與直接信號部分混合。由此，按輸出信號的信道，可傳訊擴張信號部分是否由標(biāo)度因子被處理。(bsTempShapeEnableChannel(ch)＝1時，顯示擴張信號部分由標(biāo)度因子被處理)<GES被使用時>在上述說明的輸出信號的擴張信號部分執(zhí)行時域成形時，具有發(fā)生特定歪曲的可能性。因此，引導(dǎo)包絡(luò)成形(GuidedEnvolopeShaping；GES)解決歪曲問題的同時，可提高時間/空間質(zhì)量。在解碼器個別處理輸出信號的直接信號部分和擴張信號部分，但適用GES時，只可變更上混的輸出信號的直接信號部分。GES可復(fù)原合成輸出信號的寬帶包絡(luò)。GES在按輸出信號額各信道，對直接信號部分整平(flatterning)包絡(luò)，再成形(reshaping)過程之后，包括修改的上混過程。對再成形，可使用包括在比特流的參數(shù)寬帶包絡(luò)(parametricbroadbandenvelop)的附加信息。附加信息包括原本輸入信號的包絡(luò)和對下混信號包絡(luò)的包絡(luò)比率。在解碼器，包絡(luò)比率按輸出信號的信道，可適用在包括在幀的各個時隙的直接信號部分。因GES，按輸出信號的信道，擴散信號部分不被改變(alter)。如果，為bsTempShapeConfig＝2時，可進行GES過程。如果，可使用GES，輸出信號的擴張信號和直接信號根據(jù)以下數(shù)學(xué)式24，在混合子帶域可利用修改的后混合矩陣M2，分別合成?！緮?shù)學(xué)式24】因0≤k＜K及0≤n＜numSlots在數(shù)學(xué)式24，對輸出信號y的直接信號部分，提供直接信號和殘余信號，對輸出信號y的擴張信號部分提供擴張信號。整體上，經(jīng)GES只處理直接信號。GES處理的結(jié)果，可根據(jù)以下數(shù)學(xué)式25被決定?！緮?shù)學(xué)式25】GES依賴于樹結(jié)構(gòu)，經(jīng)除了LFE信道執(zhí)行空間合成的下混信號及解碼器，對于從下混信號上混的輸出信號的特定信道，可提取包絡(luò)。在N-N/2-N結(jié)構(gòu)中，輸出信號choutput可如以下表3被定義?！颈?】結(jié)構(gòu)choutputN-N/2-N0≤chout<2(NumInCh-NumLfe)并且，在N-N/2-N結(jié)構(gòu)中，輸入信號chinput可如以下表4被定義?！颈?】結(jié)構(gòu)chinputN-N/2-N0≤chinput＜(NumInCh-NumLfe)此外，在N-N/2-N結(jié)構(gòu)中，下混信號Dch(chouput)可如以下表5被定義。【表5】以下，對在所有時隙n和所有混合子帶k定義的矩陣和矩陣進行說明。這些矩陣是基于參數(shù)時隙和有效于過程帶的CLD、ICC、CPC參數(shù)，定義提供的參數(shù)時隙l和提供的過程帶m的及的插補版本。<矩陣M1(Pre-Matrix)的定義>在圖16的N-N/2-N結(jié)構(gòu)中，對應(yīng)于矩陣M1的說明下混信號如何輸入到在解碼器使用的去相關(guān)器。矩陣M1可由自由矩陣表現(xiàn)。矩陣M1的大小依賴于輸入在矩陣M1的下混信號的信道個數(shù)和在解碼器使用的去相關(guān)器的個數(shù)。相反地，矩陣M1的單元可從CLD和/或CPF參數(shù)導(dǎo)出。M1可由以下數(shù)學(xué)式26被定義?！緮?shù)學(xué)式26】因0≤l＜L，0≤k＜K在這種情況下，被定義為一方面，可由以下數(shù)學(xué)式27被平滑?！緮?shù)學(xué)式27】因0≤k＜K,0≤l＜L其中，在κ(k)和κkonj(k,x)，第一行是混合子帶k，第二行是處理帶，第三行是對特定混合子帶k，x的復(fù)共軛性(complexconjugation)的x*。并且，表示之前幀的最后參數(shù)組。用于矩陣M1的矩陣及Hl,m可如下定義。(1)矩陣R1矩陣可控制輸入到去相關(guān)器信號的個數(shù)。這不附加去相關(guān)的信號，所以，只由CLD和CPC的函數(shù)表現(xiàn)。矩陣可根據(jù)信道結(jié)構(gòu)不同的被定義。在N-N/2-N結(jié)構(gòu)中，為了使OTT框不被串接，輸入信號的所有信道，可在OTT框以2信道成對的輸入。由此，N-N/2-N結(jié)構(gòu)的情況，OTT框的個數(shù)是N/2。在這種情況下，矩陣依賴于包括輸入信號的向量xn,k的列大小(columnsize)和相同OTT框的個數(shù)。但是，基于OTT框的Lfe上混不需要去相關(guān)器，所以，在N-N/2-N結(jié)構(gòu)不考慮。矩陣的所有單元可以是1或0中任何一個。在N-N/2-N結(jié)構(gòu)中，可由以下數(shù)學(xué)式28被定義?！緮?shù)學(xué)式28】在N-N/2-N結(jié)構(gòu)中，所有OTT框表現(xiàn)不是串接的并列處理階段(parallelprocessingstage)。所以，在N-N/2-N結(jié)構(gòu)，所有OTT框不與任何其他OTT框連接。因此，矩陣可由單位矩陣INumInCh和單位矩陣INumInCh-NumLfe構(gòu)成。在這種情況下，單位矩陣IN可以是N*N大小的單位矩陣。(2)矩陣G1在MPEGSurround解碼之前，為了控制下混信號或從外部供給的下混信號，可適用由校正因子(correctionfactors)控制的數(shù)據(jù)流。校正因子可由矩陣適用在下混信號或從外部供給的下混信號。矩陣可保障參數(shù)表現(xiàn)的特征時間/頻率圖塊(timefrequencytile)的下混信號的級別，與在編碼器推定空間參數(shù)時獲得的下混信號的級別相同。這由3種情況區(qū)分，可由(i)沒有外部下混補償時(bsArbitraryDownmix＝0)、(ii)具有參數(shù)化的外部下混補償時(bsArbitraryDownmix＝1)及(iii)基于外部下混補償執(zhí)行殘余編碼時(bsArbitraryDownmix＝2)區(qū)分。如果，為bsArbitraryDownmix＝1時，解碼器不支持基于外部下混補償?shù)臍堄嗑幋a。并且，如果在N-N/2-N結(jié)構(gòu)不適用外部的下混補償(externaldownmixcompensation)時(bsArbitraryDownmix＝0)，在N-N/2-N結(jié)構(gòu)中，矩陣可由以下數(shù)學(xué)式29被定義?！緮?shù)學(xué)式29】其中，INumInch表示顯示NumInCh*NumInCh大小的單位矩陣，且ONumInCh表示顯示NumInCh*NumInCh大小的零矩陣。與此不同，如果在N-N/2-N結(jié)構(gòu)，適用外部補償(externaldownmixcompensation)時(bsArbitraryDownmix＝1)，對N-N/2-N結(jié)構(gòu)可由以下數(shù)學(xué)式30被定義。【數(shù)學(xué)式30】其中，由定義。一方面，在N-N/2-N結(jié)構(gòu)中，基于外部的下混補償適用參與編碼(residualcoding)時(bsArbitraryDownmix＝2)，可由以下數(shù)學(xué)式31被定義?！緮?shù)學(xué)式31】其中，可由定義。并且，α可更新。(3)矩陣H1在N-N/2-N結(jié)構(gòu)中，下混信號的信道個數(shù)可比5個多。因此，逆(inverse)矩陣H可以是對所有參數(shù)組和處理帶，具有與輸入信號的向量xn,k的列的個數(shù)相同大小的單位矩陣。<矩陣M2(post-matrix)的定義>在N-N/2-N結(jié)構(gòu)中，矩陣M2的為了再生成多信道的輸出信號，定義如何組合直接信號和去相關(guān)的信號?？捎梢韵聰?shù)學(xué)式32被定義?！緮?shù)學(xué)式32】因0≤l＜L，0≤k＜K其中，被定義為一方面，可由以下數(shù)學(xué)式33被平滑?！緮?shù)學(xué)式33】其中，在κ(k)和κkonj(k,x)，第一行是混合子帶k、第二行是處理帶、第三行是對特定混合子帶k的x復(fù)共軛性(complexconjugation)的x*。并且，表示之前幀的最后參數(shù)組。用于矩陣M2的矩陣的元素，可從OTT框的等值模型(equivalentmodel)計算。OTT框包括去相關(guān)器和混合單元。輸入在OTT框的單形態(tài)的輸入信號，分別傳達到去相關(guān)器和混合單元。混合單元利用通過單形態(tài)的輸入信號和去相關(guān)器輸出的去相關(guān)的信號及CLD、ICC參數(shù)，可生成立體聲形態(tài)的輸出信號。其中，CLD在立體聲域控制局部化(localization)，ICC控制輸出信號的立體聲寬(wideness)。由此，任意從OTT框輸出的結(jié)果，可由以下數(shù)學(xué)式34被定義?！緮?shù)學(xué)式34】OTT框由OTTX被標(biāo)記(0≤X＜numOttBoxes)，表示對于OTT框，在時隙l和參數(shù)帶m任意矩陣(Arbitrarymatrix)單元。在這種情況下，后增益矩陣可由以下數(shù)學(xué)式35被定義?！緮?shù)學(xué)式35】其中，被定義為及及一方面，可由(λ0＝-11/72因0≤m＜Mproc,0≤l＜L)定義。并且，由定義。在這種情況下，在N-N/2-N結(jié)構(gòu)中，可由以下數(shù)學(xué)式36定義?！緮?shù)學(xué)式36】其中，CLD和ICC可由以下數(shù)學(xué)式37定義?！緮?shù)學(xué)式37】在這種情況下，可由0≤X＜NumInCh,0≤m＜Mproc,0≤l＜L定義。<去相關(guān)器的定義>在N-N/2-N結(jié)構(gòu)中，去相關(guān)器在QMF子帶域可由混響濾波器(reverberationfilter)被執(zhí)行。混響濾波器在所有混合子帶，基于當(dāng)前相應(yīng)于何種混合子帶，顯示相互不同的濾波器特征。混響濾波器IIR格子濾波器。為了生成相互去相關(guān)直交信號，對相互不同的去相關(guān)器，IIR格子濾波器具有相互不同的濾波器系數(shù)。由去相關(guān)器執(zhí)行的去相關(guān)過程，以多種過程進行。首先，矩陣M1的輸出vn,k由全通過(all-pass)去相關(guān)濾波器組輸入。由此，被濾波的信號可成為能量成形。其中，能量成形使去相關(guān)的信號更接近的匹配到輸入信號，成形頻譜或時間包絡(luò)。輸入到任意去相關(guān)器的輸入信號是向量vn,k的一部分。為了保障通過多個去相關(guān)器導(dǎo)出的去相關(guān)的信號間的直交性，多個去相關(guān)器具有相互不同的濾波器系數(shù)。去相關(guān)濾波器以固定的頻率相關(guān)延遲(constantfrequency-dependentdelay)，由先行的多個全通過(All-pass(IIR))領(lǐng)域構(gòu)成。頻率軸使對應(yīng)于QMF分割頻率，可由相互不同領(lǐng)域分割。在各領(lǐng)域，延遲的長度和濾波器系數(shù)向量的長度相同。并且，因附加相位旋轉(zhuǎn)(additionalphaserotation)，具有分數(shù)延遲(fractionaldelay)的去相關(guān)器的濾波器系數(shù)，依賴于混合子帶索引。如上述，為了保障從去相關(guān)器輸出的去相關(guān)的信號間的直交性，去相關(guān)器的濾波器具有相互不同的濾波器系數(shù)。在N-N/2-N結(jié)構(gòu)中，需要N/2個去相關(guān)器。在這種情況下，在N-N/2-N結(jié)構(gòu)中，去相關(guān)器的個數(shù)可由10限制。在不存在Lfe模塊的N-N/2-N結(jié)構(gòu)中，OTT框的個數(shù)N/2超過10時，根據(jù)10基本模操作(basismodulooperation)，去相關(guān)器可對應(yīng)于超過10的OTT框的個數(shù)，重新使用。以下表6表示在N-N/2-N結(jié)構(gòu)的解碼器中的去相關(guān)器索引。參考圖6，N/2個去相關(guān)器以10單位反復(fù)索引。即，第0次去相關(guān)器和第10次去相關(guān)器，以具有相同的索引?！颈?】在N-N/2-N結(jié)構(gòu)的情況下，可由以下表7的語法被體現(xiàn)?！颈?】這種情況下，bsTreeConfig可由以下表8體現(xiàn)?！颈?】并且，在N-N/2-N結(jié)構(gòu)中，下混信號的信道個數(shù)bsNumInCh，可由以下表9被體現(xiàn)?！颈?】并且，在N-N/2-N結(jié)構(gòu)中，輸出信號中LFE信道的個數(shù)NLFE可由以下表10被體現(xiàn)?！颈?0】并且，在N-N/2-N結(jié)構(gòu)中，輸出信號的信道順序可根據(jù)輸出信號的信道個數(shù)即LFE信道的個數(shù)，如表11被體現(xiàn)?！颈?1】在表7中，bsHasSpeakerConfig是實際要播放的輸出信號的布局，在表11顯示具體化信道順序和其他布局與否的標(biāo)志。如果，bsHasSpeakerConfig＝＝1時，實際播放時的揚聲器布局的audioChannelLayout，可為了渲染被使用。并且，audioChannelLayout顯示實際播放時的揚聲器布局。如果，揚聲器包括LFE信道時，LFE信道與不是LFE信道的一起利用一個OTT框進行處理，且在信道列表中位于最后。例如，LFE信道在信道列表L、Lv、R、Rv、Ls、Lss、Rs、Rss、C、LFE、Cvr、LFE2位于最后。圖17是示出根據(jù)一個實施例，以樹形表現(xiàn)N-N/2-N結(jié)構(gòu)。在圖16示出的N-N/2-N結(jié)構(gòu)，如圖17可由樹形態(tài)表現(xiàn)。在圖17，所有OTT框基于CLD、ICC、殘余信號及輸入信號，可再生成2個信道的輸出信號。OTT框和對應(yīng)于此的CLD、ICC、殘余信號及輸入信號，可根據(jù)顯示在比特流的順序編號。經(jīng)圖17，多個OTT框存在N/2個。在這種情況下，多信道音頻信號處理裝置解碼器，利用N/2個OTT框可從N/2信道的下混信號生成N信道的輸出信號。其中，N/2個OTT框通過多個階層不被體現(xiàn)。即，OTT框按N/2信道的下混信號的各信道，并列地執(zhí)行上混。換句話說，任何一個OTT框不與其他OTT框連接。一方面，在圖17，左側(cè)圖是在N信道的輸出信號未包括LFE信道的情況，且右側(cè)圖顯示在N信道的輸出信號包括LFE信道的情況。在這種情況下，在N信道的輸出信號未包括LFE信道時，N/2個OTT框利用殘余信號res和下混信號M，可生成N信道的輸出信號。但是，在N信道的輸出信號包括LFE信道時，N/2個OTT框中，輸出LFE信道的OTT框，只可利用除了殘余信號的下混信號。不僅如此，在N信道的輸出信號包括LFE信道時，N/2個OTT框中不輸出LFE信道的OTT框，利用CLD和ICC上混下混信號，但是，輸出LFE信道的OTT框只利用CLD，可上混下混信號。并且，在N信道的輸出信號包括LFE信道時，N/2個OTT框中沒有輸出LFE信道的OTT框，通過去相關(guān)器生成去相關(guān)的信號，但是，輸出LFE信道的OTT框不執(zhí)行去相關(guān)過程，所以，不生成去相關(guān)的信號。圖18是示出根據(jù)一個實施例，對FCE結(jié)構(gòu)的編碼器和解碼器。參考圖18，四信道元素(FourChannelElement；FCE)對應(yīng)于下混4個信道的輸入信號生成1個信道的輸出信號，或者上混1個信道的輸入信號生成4個信道的輸出信號的裝置。FCE編碼器1801利用2個TTO框1803,1804和USAC編碼器1805，可從4個信道的輸入信號生成1個信道的輸出信號。TTO框1803,1804分別下混2個信道的輸入信號，可從4個信道的輸入信號生成1個信道的下混信號。USC編碼器1805可在下混信號的核心頻帶執(zhí)行編碼。并且，F(xiàn)CE解碼器1802由FCE編碼器1801執(zhí)行的操作頻帶執(zhí)行。FCE解碼器1802利用USAC解碼器1806和2個OTT框1807,1808，可從1個信道的輸入信號生成4個信道的輸出信號。OTT框1807,1808經(jīng)USAC解碼器1806分別上混被解碼的1個信道的輸入信號，可生成4個信道的輸出信號。USC解碼器1806可在FCE下混信號的核心頻帶執(zhí)行編碼。FCE解碼器1802利用如CLD、IPD、ICC的空間線索(spatialcue)，為了操作成參數(shù)化模式，可在低比特率執(zhí)行編碼。基于操作比特率和輸入信號的整個信道個數(shù)、參數(shù)的分辨率及量子化級別中至少一個，可變更參數(shù)化類型。FCE編碼器1801和FCE解碼器1802可從128kbps到48kbps，被廣泛地使用。FCE解碼器1802的輸出信號的信道個數(shù)(4個)，與輸入在FCE編碼器1801的輸入信號的信道個數(shù)(4個)相同。圖19是示出根據(jù)一個實施例，對TCE結(jié)構(gòu)的編碼器和解碼器。參考圖19，三信道元素(ThreeChannelElement；TCE)對應(yīng)于從3個信道的輸入信號生成1個信道的輸出信號，或者從1個信道的輸入信號生成3個信道的輸出信號的裝置。TCE編碼器1901可包括1個TTO框1903和1個QMF變換器1904及1個USAC編碼器1905。其中，QMF變換器可包括混合分析/合成器。在這種情況下，2個信道的輸入信號輸入在TTO框1903，1個信道的輸入信號可輸入在QMF變換器1904。TTO框1903下混2個信道的輸入信號，可生成1個信道的下混信號。QMF變換器1904可將1個信道的輸入信號變換成QMF域。TTO框1903的輸出結(jié)果和QMF變換器1904的輸出結(jié)果，可輸入在USAC編碼器1905。USAC編碼器1905可編碼由TTO框1903的輸出結(jié)果和QMF變換器1904的輸出結(jié)果輸入的2個信道的信號核心頻帶。經(jīng)圖19，輸入信號的信道個數(shù)為3個是奇數(shù)，所以，只有2個信道的輸入信號輸入在TTO框1903，剩余的1個信道的輸入信號跳過TTO框1903，可輸入在USAC編碼器1905。在這種情況下，TTO框190由參數(shù)化模式運行，所以，TCE編碼器1901主要適用在輸入信號的信道個數(shù)為11.1或9.0的情況。TCE解碼器1902可包括1個USAC解碼器1906、1個OTT框1907和1個QMF逆變換器1904。在這種情況下，從TCE編碼器1901輸入的1個信道的輸入信號，通過USAC解碼器1906被解碼。在這種情況下，USAC解碼器1906可在1個信道的輸入信號，對核心頻帶進行解碼。通過USAC解碼器1906輸出的2個信道的輸入信號，可分別由信道輸入在OTT框1907和QMF逆變換器1908。QMF逆變換器1908可包括混合分析/合成器。OTT框1907上混1個信道的輸入信號，可生成2個信道的輸出信號。并且，QMF逆變換器1908可將通過USAC解碼器1906輸出的2個信道的輸入信號中，剩余的1個信道的輸入信號，從QMF域逆變換為時間域或頻率域。TCE解碼器1902的輸出信號的信道個數(shù)(3個)，與輸入在TCE編碼器1901的輸入信號的信道個數(shù)(3個)相同。圖20是示出根據(jù)一個實施例，對ECE結(jié)構(gòu)的編碼器和解碼器。參考圖20，八信道元素(EightChannelElement；ECE)對應(yīng)于下混8個信道的輸入信號生成1個信道的輸出信號，或者上混1個信道的輸入信號生成8個信道的輸出信號的裝置。ECE編碼器2001利用6個TTO框2003～2008和USAC編碼器2009，可從8個信道的輸入信號生成1個信道的輸出信號。首先，8個信道的輸入信號，經(jīng)4個TTO框2003～2006分別由2個信道的輸入信號被輸入。由此，4個TTO框2003～2006各個下混2個信道的輸入信號，可生成1個信道的輸入信號。4個TTO框2003～2006的輸出結(jié)果輸入到連接在4個TTO框2003～2006的2個TTO框2007,2008。2個TTO框2007,2008在4個TTO框2003～2006的輸出信號中，分別下混2個信道的輸出信號，可生成1個信道的輸出信號。由此，2個TTO框2007,2008的輸出結(jié)果，輸入到連接在2個TTO框2007,2008的USAC編碼器2009。USAC編碼器2009編碼2個信道的輸入信號，可生成1個信道的輸出信號。最終，ECE編碼器2001利用由2階段的樹形態(tài)連接的TTO框，可從8個信道的輸入信號生成1個信道的輸出信號。換句話說，4個TTO框2003～2006和2個TTO框2007,2008，相互以串接形態(tài)連接，可由2個階層的樹構(gòu)成。ECE編碼器2001對輸入信號的信道結(jié)構(gòu)為22.2或14.0情況，可在48kbps模式或64kbps模式被使用。ECE解碼器2002利用6個OTT框2011～2016和USAC解碼器2010，可從1個信道的輸入信號生成8個信道的輸出信號。首先，在ECE編碼器2001生成的1個信道的輸入信號，可輸入到包括在ECE解碼器2002的USAC解碼器2010。由此，USAC解碼器2010解碼1個信道的輸入信號的核心頻帶，可生成2個信道的輸出信號。從USAC解碼器2010輸出的2個信道的輸出信號，以各個信道可輸入到OTT框2011和OTT框2012。OTT框2011上混1個信道的輸入信號，可生成2個信道的輸出信號。與此同時，OTT框2012上混1個信道的輸入信號，可生成2個信道的輸出信號。由此，OTT框2011,2012的輸出結(jié)果，可分別輸入在與OTT框2011,2012連接的OTT框2013～2016。OTT框2013～2016各個得到OTT框2011,2012輸出結(jié)果的2個信道輸出信號中1個信道的輸出信號輸入，可進行上混。即，OTT框2013～2016各個上混1個信道的輸入信號，可生成2個信道的輸出信號。由此，從4個OTT框2013～2016各個生成的輸出信號的信道個數(shù)是9個。最終，ECE解碼器2002利用以2階段的樹形態(tài)連接的OTT框，可從1個信道的輸入信號生成8個信道的輸出信號。換句話說，4個OTT框2013～2016和2個OTT框2011,2012，相互可由串接形態(tài)連接，以2個階層的樹構(gòu)成。ECE解碼器2002的輸出信號的信道個數(shù)(8個)，與輸入在ECE編碼器2001的輸入信號的信道個數(shù)(8個)相同。圖21是示出根據(jù)一個實施例，對SiCE結(jié)構(gòu)的編碼器和解碼器。參考圖21，六信道元素(SixChannelElement；SICE)對應(yīng)于從6個信道的輸入信號生成1個信道的輸出信號，或者從1個信道的輸入信號生成6個信道的輸出信號的裝置。SICE編碼器2101可包括4個TTO框2103～2106及1個USAC編碼器2107。在這種情況下，6個信道的輸入信號可輸入在3個TTO框2103～2106。由此，3個TTO框2103～2106各個下混6個信道的輸入信號中的2個信道的輸入信號，可生成1個信道的輸出信號。3個TTO框2103～2106中的2個TTO框，可與其他一個TTO框連接。圖21的情況，TTO框2103,2104可與TTO框2106連接。TTO框2103,2104的輸出結(jié)果，可輸入在TTO框2106。如圖21示出，TTO框2106下混2個信道的輸入信號，可生成1個信道的輸出信號。一方面，TTO框2105的輸出結(jié)果，沒有輸入在TTO框2106。即，TTO框2105的輸出結(jié)果跳過TTO框2106，輸入在USAC編碼器2107。USAC編碼器2107編碼TTO框2105和TTO框2106的輸出結(jié)果的2個信道的輸入信號的核心頻帶，可生成1個信道的輸出信號。SiCE編碼器2101的3個TTO框2103～2105和1個TTO框2106，構(gòu)成相互不同的階層。只是，與ECE編碼器2001不同，SiCE編碼器2101的3個TTO框2103～2105中的2個TTO框2103～2104，與1個TTO框2106連接，剩余的1個TTO框2105跳過TTO框2106。SiCE編碼器2101可在48kbps、64kbps，處理14.0信道結(jié)構(gòu)的輸入信號。SiCE解碼器2102可包括1個USAC解碼器2108、4個OTT框2109～2112。在SiCE編碼器2101生成的1個信道的輸出信號，可輸入在SiCE解碼器2102。由此，SiCE解碼器2102的USAC解碼器2108，解碼1個信道的輸入信號的核心頻帶，可生成2個信道的輸出信號。由此，從USAC解碼器2108生成的2個信道的輸出信號中，1個信道的輸出信號輸入在OTT框2109，剩余的1個信道的輸出信號跳過OTT框2109，直接輸入在OTT框2112。由此，OTT框2109上混從USAC解碼器2108傳達的1個信道的輸入信號，可生成2個信道的輸出信號。由此，從OTT框2109生成的2個信道的輸出信號中1個信道的輸出信號輸入在OTT框2110，剩余的1個信道的輸出信號可輸入在OTT框2111。之后，OTT框2110～2112上混1個信道的輸入信號，可生成2個信道的輸出信號。在以上圖18至圖21說明的FCE結(jié)構(gòu)、TCE結(jié)構(gòu)、ECE結(jié)構(gòu)、SiCE結(jié)構(gòu)的編碼器，利用多個TTO框可從N信道的輸入信號生成1個信道的輸出信號。在這種情況下，包括在FCE結(jié)構(gòu)、TCE結(jié)構(gòu)、ECE結(jié)構(gòu)、SiCE結(jié)構(gòu)編碼器的USAC編碼器的內(nèi)部，也可存在1個TTO框。一方面，ECE結(jié)構(gòu)、SiCE結(jié)構(gòu)的編碼器可由2個階層的TTO框構(gòu)成。此外，如TCE結(jié)構(gòu)、SiCE，輸入信號的信道個數(shù)為奇數(shù)時，存在跳過TTO框的情況。并且，F(xiàn)CE結(jié)構(gòu)、TCE結(jié)構(gòu)、ECE結(jié)構(gòu)、SiCE結(jié)構(gòu)的解碼器，利用多個OTT框可從1個信道的輸入信號生成N信道的輸出信號。在這種情況下，包括在FCE結(jié)構(gòu)、TCE結(jié)構(gòu)、ECE結(jié)構(gòu)、SiCE結(jié)構(gòu)解碼器的USAC解碼器的內(nèi)部，也可存在1個OTT框。一方面，ECE結(jié)構(gòu)、SiCE結(jié)構(gòu)的解碼器可由2個階層的OTT框構(gòu)成。此外，如TCE結(jié)構(gòu)、SiCE結(jié)構(gòu)，輸入信道的信道個數(shù)為奇數(shù)時，存在跳過OTT框的情況。圖22是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)處理24信道音頻信號的過程。具體地，圖22的情況下，作為22.2信道結(jié)構(gòu)可在128kbps和96kbps進行操作。參考圖22，24個信道的輸入信號可在6個FCE編碼器2201，各個輸入4個信道。由此，如圖18說明，F(xiàn)CE編碼器2201可從4個信道的輸入信號生成1個信道的輸出信號。由此，在圖22示出，通過從6個FCE編碼器2201各個輸出的比特流格式器，可將1個信道的輸出信號以比特流形態(tài)輸出。即，比特流可包括6個輸出信號。之后，比特流反格式器可從比特流導(dǎo)出6個輸出信號。6個輸出信號，可分別輸入在6個FCE解碼器2202。由此，如圖18說明，F(xiàn)CE解碼器2202可從1個信道的輸入信號生成4個信道的輸出信號。通過6個FCE解碼器2202，可生成總24個信道的輸出信號。圖23是示出根據(jù)一個實施例，根據(jù)ECE結(jié)構(gòu)處理24信道音頻信號的過程。圖23如在圖22說明的22.2信道結(jié)構(gòu)，假設(shè)24個信道的輸入信號被輸入的情況。但是，假設(shè)圖23的操作模式在比圖22更低的比特流的48kbps、64kbps操作。參考圖23，24個信道的輸入信號可分別由8個信道輸入在3個ECE編碼器2301。由此，如圖20說明，ECE編碼器2301可從8個信道的輸入信號生成1個信道的輸入信號。由此，在圖23示出，通過從3個ECE編碼器2301各個輸出的比特流格式器，可將1個信道的輸出信號以比特流形態(tài)輸出。即，比特流可包括3個輸出信號。之后，比特流反格式器可從比特流導(dǎo)出3個輸出信號。3個輸出信號，可分別輸入在3個ECE解碼器2302。由此，如圖20說明，ECE解碼器2302可從1個信道的輸入信號生成8個信道的輸出信號。通過3個FCE解碼器2302，可生成總24個信道的輸出信號。圖24是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)處理14信道音頻信號的過程。圖24顯示14個信道的輸入信號通過3個FCE編碼器2301和1個CPE編碼器2402，生成4個信道輸出信號的過程。在這種情況下，圖24顯示如128kbps、96kbps，在相對高的比特流操作的情況。3個FCE編碼器2401可分別從4個信道的輸入信號生成1個信道的輸出信號。并且，1個CPE編碼器2402下混2個信道的輸入信號，可生成1個信道的輸出信號。由此，比特流格式器可生成從3個FCE編碼器2401的輸出結(jié)果和1個CPE編碼器2402的輸出結(jié)果，包括4個輸出信號的比特流。一方面，比特流反格式器從比特流提取4個輸出信號之后，3個輸出信號傳達到3個FCE編碼器2403，剩余的1個輸出信號可傳達到1個CPE解碼器2404。由此，3個FCE解碼器2403可分別從1個信道的輸入信號生成4個信道的輸出信號。并且，1個CPE解碼器2404可從1個信道的輸入信號生成2個信道的輸出信號。即，通過3個FCE解碼器2403和1個CPE解碼器2404，可生成總14個輸出信號。圖25是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)和SiCE結(jié)構(gòu)，處理14信道音頻信號的過程。參考圖25，顯示ECE編碼器2501和SiCE編碼器2502處理14個信道的輸入信號。圖25與圖24不同，適用在相對低的比特率的情況(ex.48kbps，96kbps)。ECE編碼器2501可從14個信道的輸入信號中的8個信道的輸入信號，生成1個信道的輸出信號。并且，SiCE編碼器2502可從14個信道的輸入信號中的6個信道的輸入信號，生成1個信道的輸出信號。比特流格式器可利用ECE編碼器2501和SiCE編碼器2502的輸出結(jié)果的2個輸出信號，生成比特流。一方面，比特流反格式器可從比特流提取2個輸出信號。由此，2個輸出信號可分別輸入在ECE解碼器2503和SiCE解碼器2504。ECE解碼器2503利用1個信道的輸入信號生成8個信道的輸出信號，SiCE解碼器2504可利用1個信道的輸入信號生成6個信道的輸出信號。即，通過各個ECE解碼器2503和SiCE解碼器2504，可生成總14個輸出信號。圖26是示出根據(jù)一個實施例，根據(jù)TCE結(jié)構(gòu)處理11.1信道音頻信號的過程。參考圖26，4個CPE編碼器2601和1個TCE編碼器2602，可從11.1信道的輸入信號生成5個信道的輸出信號。圖26的情況，如128kbps、96kbps在相對高的比特率可處理音頻信號。4個CPE編碼器2601各個可從2個信道的輸入信號生成1個信道的輸出信號。一方面，1個TCE編碼器2602可從3個信道的輸入信號生成1個信道的輸出信號。4個CPE編碼器2601和1個TCE編碼器2602的輸出結(jié)果，可輸入在比特流格式器由比特流輸出。即，比特流可包括5個信道的輸出信號。一方面，比特流反格式器可從比特流提取5個信道的輸出信號。由此，5個輸出信號可輸入在4個CPE解碼器2603和1個TCE解碼器2604。由此，4個CPE解碼器2603分別可從1個信道的輸入信號，生成2個信道的輸出信號。一方面，TCE解碼器2604可從1個信道的輸入信號生成3個信道的輸出信號。由此，最終通過4個CPE解碼器2603和1個TCE解碼器2604，可輸出11個信道的輸出信號。圖27是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)處理11.1信道音頻信號的過程。圖27與圖26不同，可在相對低的比特率操作(ex.64kbps、48kbps)。參考圖27，通過3個FCE編碼器2701，可從12個信道的輸入信號生成3個信道的輸出信號。具體地，3個FCE編碼器2701各個可從12個信道的輸入信號中的4個信道的輸入信號，生成1個信道的輸出信號。由此，比特流格式器利用從3個FCE編碼器2701輸出的3個信道的輸出信號，可生成比特流。一方面，比特流反格式器可從比特流輸出3個信道的輸出信號。由此，3個信道的輸出信號分別可輸入在3個FCE解碼器2702。之后，F(xiàn)CE解碼器2702可利用1個信道的輸入信號，生成3個信道的輸出信號。由此，通過3個FCE解碼器2702，可生成12個信道的輸出信號。圖28是示出根據(jù)一個實施例，根據(jù)TCE結(jié)構(gòu)處理9.0信道音頻信號的過程。參考圖28，示出了處理9個信道的輸入信號的過程。圖28可在相對高的比特率(ex.128kbps、96kbps)處理9個信道的輸入信號。在這種情況下，基于3個CPE編碼器2801和1個TCE編碼器2802，可處理9個信道的輸入信號。3個CPE編碼器2801分別可從2個信道的輸入信號，生成1個信道的輸出信號。一方面，1個TCE編碼器2802可從3個信道的輸入信號生成1個信道的輸出信號。由此，總4個信道的輸出信號輸入在比特流格式器，可由比特流輸出。比特流反格式器可提取包括在比特流的4個信道的輸出信號。由此，4個信道的輸出信號可輸入在3個CPE解碼器2803和1個TCE解碼器2804。3個CPE解碼器2803各個可從1個信道的輸入信號生成2個信道的輸出信號。一方面，1個TCE解碼器2804可從1個信道的輸入信號生成3個信道的輸出信號。由此，可生成總9個信道的輸出信號。圖29是示出根據(jù)一個實施例，根據(jù)FCE結(jié)構(gòu)處理9.0信道音頻信號的過程。參考圖29，示出了處理9個信道的輸入信號的過程。圖29可在相對低的比特率(64kbps、48kbps)處理9個信道的輸入信號。在這種情況下，基于2個FCE編碼器2901和1個SCE編碼器2902，處理9個信道的輸入信號。2個FCE編碼器2901各個可從4個信道的輸入信號生成1個信道的輸出信號。一方面，1個SCE編碼器2902可從1個信道的輸入信號生成1個信道的輸出信號。由此，總3個信道的輸出信號輸入在比特流格式器，可由比特流輸出。比特流反格式器可提取包括在比特流的3個信道的輸出信號。由此，3個信道的輸出信號可輸入在2個FCE解碼器2903和1個SCE解碼器2904。2個FCE解碼器2903分別可從1個信道的輸入信號生成4個信道的輸出信號。一方面，1個SCE解碼器2904可從1個信道的輸入信號，生成1個信道的輸出信號。由此，可生成總9個信道的輸出信號。以下表12顯示執(zhí)行空間編碼(spatialcoding)時，根據(jù)輸入信號的信道個數(shù)的參數(shù)組構(gòu)成。其中，bsFreqRes表示與USAC編碼器個數(shù)相同的分析帶(analysis帶)的個數(shù)?！颈?2】USAC編碼器可編碼輸入信號的核心頻帶。USAC編碼器利用基于顯示信道元素(CPEs、SCEs)和與對象渲染的信道信號之間關(guān)系信息的元數(shù)據(jù)的信道和對象間的映射信息，可根據(jù)輸入信號的個數(shù)控制多個編碼器。以下表13顯示在USAC編碼器使用的比特率和采樣率。根據(jù)表13的采樣率可適當(dāng)?shù)卣{(diào)整頻帶復(fù)制(spectralbandreplication；SBR)的編碼參數(shù)?！颈?3】根據(jù)本發(fā)明實施例的方法，可通過多樣的計算機手段被執(zhí)行的程序命令形態(tài)被體現(xiàn)，可被記錄在計算機可判讀媒體。所述計算機可判讀媒體可包括程序名稱、數(shù)據(jù)文件、數(shù)據(jù)結(jié)構(gòu)等的單獨或者且組合。記錄在所述媒體的程序命令，為了本發(fā)明被特別地設(shè)計且構(gòu)成，但是，也可以是被計算機軟件從業(yè)者公知，能使用的。如上所示，本發(fā)明雖然經(jīng)有限的實施例和附圖進行了說明，但是，在本發(fā)明所屬領(lǐng)域的技術(shù)人員，均可以從此記載中進行多樣地修改和變形。所以，本發(fā)明的范圍不能局限于由說明的實施例被決定，且不僅是后述的權(quán)利要求，而且經(jīng)與此權(quán)利要求均等的被決定。當(dāng)前第1頁1 2 3