本發(fā)明涉及一種音頻信號處理方法和裝置。更具體地，本發(fā)明涉及一種對對象信號和聲道信號進行合成并且對合成的信號進行有效的雙耳渲染的音頻信號處理方法和裝置。

背景技術(shù)：

3d音頻統(tǒng)稱為一系列信號處理、發(fā)送、編碼和重放技術(shù)，這些技術(shù)通過向由傳統(tǒng)環(huán)繞音頻提供的水平面(2d)上的聲音場景提供與高度方向?qū)?yīng)的附加軸線來提供給出在三維空間中的存在感的聲音。具體地，3d音頻需要即使使用比傳統(tǒng)技術(shù)的揚聲器更大量或者更少量的揚聲器也能夠在不存在揚聲器的虛擬位置中形成聲音圖像的渲染技術(shù)。

3d音頻有望成為針對超高清tv(uhdtv)的音頻解決方案，并且，除了演變成高品質(zhì)信息娛樂空間的車輛中的聲音之外，還有望被應(yīng)用于劇場聲音、個人3dtv、平板計算機、無線通信終端和云游戲的各種領(lǐng)域。

同時，提供至3d音頻的聲音源可以包括基于聲道的信號和基于對象的信號。此外，聲音源可以是基于聲道的信號和基于對象的信號的混合類型，并且，通過這種配置，可以向用戶提供一種新類型的聽覺體驗。

執(zhí)行雙耳渲染以將這種3d音頻建模為傳遞至人的兩個耳朵的信號。用戶通過耳機或者耳塞從經(jīng)過雙耳渲染的雙聲道音頻輸出信號體驗三維感。雙耳渲染的具體原理描述如下。人通過兩個耳朵收聽聲音，并且從聲音識別聲音源的位置和方向。因此，如果可以將3d音頻建模為傳遞至人的兩個耳朵的音頻信號，那么可以在沒有大量揚聲器的情況下通過雙聲道音頻輸出來再現(xiàn)3d音頻的三維感。

傳遞至兩個耳朵的音頻信號由人體反射以到達耳膜。在該過程中，根據(jù)人體以不同的形式傳遞音頻信號。因此，傳遞至兩個耳朵的音頻信號顯著受人體(諸如耳朵形狀)影響。因此，人體特征顯著影響通過雙耳渲染傳遞三維感。因此，應(yīng)該在雙耳渲染過程中準確地反映出用戶的身體特征，從而準確地執(zhí)行雙耳渲染。

技術(shù)實現(xiàn)要素：

技術(shù)問題

本發(fā)明的實施例的目的是提供一種用立體聲播放多聲道信號和多對象信號的雙耳音頻信號處理裝置和方法。

具體地，本發(fā)明的實施例的目的是提供一種有效地反映出個人人體測量特征的雙耳音頻信號處理裝置和方法。

技術(shù)方案

根據(jù)本發(fā)明的實施例的音頻信號處理裝置包括：個性化處理器，該個性化處理器被配置為接收用戶信息并且基于用戶信息輸出用于控制雙耳渲染的雙耳參數(shù)；以及雙耳渲染器，該雙耳渲染器基于雙耳參數(shù)對源音頻執(zhí)行雙耳渲染。

此時，個性化處理器可以對基于關(guān)于實際測量的頭部相關(guān)傳輸函數(shù)(hrtf)的信息而生成的第一hrtf和通過模擬而估計的第二hrtf進行合成以生成個性化的hrtf。

此時，個性化處理器可以通過使用比根據(jù)第一hrtf的頻率響應(yīng)的第一參考值高的頻帶以及通過使用比根據(jù)第二hrtf的頻率響應(yīng)的第二參考值低的頻帶來生成個性化的hrtf。

此時，個性化處理器可以將通過比第一參考值高的頻帶的高通濾波器應(yīng)用于第一hrtf，并且可以將通過比第二參考值低的頻帶的低通濾波器應(yīng)用于第二hrtf。

此外，個性化處理器可以基于球狀頭部模型、雪人模型、時域有限差分法和邊界元法中的至少一種來估計第二hrtf。

此外，個性化處理器可以通過基于在耳道的入口與反射聲音的外耳的部分之間的距離來根據(jù)hrtf模擬頻率響應(yīng)的陷波并且通過應(yīng)用模擬的陷波來生成個性化的hrtf。

此外，個性化處理器可以確定在多個hrtf當中與和對應(yīng)于用戶信息的用戶的人體測量特征最相似的人體測量特征匹配的hrtf，并且可以生成確定的hrtf作為個性化的hrtf。

此時，用戶的人體測量特征可以包括關(guān)于多個身體部分的信息，并且個性化處理器基于分別分配給多個身體部分的權(quán)重來確定在多個hrtf當中與和用戶的人體測量特征最相似的人體測量特征匹配的hrtf。

此外，個性化處理器可以針對頻帶的每個特征或者時間帶的每個特征來分解單獨hrtf的分量，并且可以將用戶的人體測量特征應(yīng)用于針對頻帶的每個特征或者時間帶的每個特征而被分解的單獨hrtf的分量。

此時，用戶的人體測量特征可以包括關(guān)于多個身體部分的信息，并且個性化處理器可以分別將單獨hrtf分解成與多個身體部分匹配的多個分量，并且可以分別將分別與多個分量對應(yīng)的人體測量特征應(yīng)用于多個分量。

此時，個性化處理器可以將單獨hrtf分解成與外耳的形式匹配的分量和與另一身體部分匹配的分量，其中，其它身體部分可以是頭部或者軀干。

此外，個性化處理器可以通過波插值(wi)將單獨hrtf分解成與外耳的形式匹配的分量和與其它身體部分匹配的分量。

此外，個性化處理器可以將根據(jù)單獨hrtf生成的頻率響應(yīng)劃分成包絡(luò)部分和陷波部分，并且將用戶的人體測量特征應(yīng)用于包絡(luò)部分和陷波部分中的每一個以生成個性化的hrtf。

此時，個性化處理器可以根據(jù)用戶的人體測量特征來改變陷波部分的陷波的頻率、深度和寬度中的至少一個。

此外，個性化處理器可以通過將不同的權(quán)重分配給包絡(luò)部分和陷波部分中的相同的身體部分生來成個性化的hrtf。

此時，當將與外耳的形式對應(yīng)的人體測量特征應(yīng)用于陷波部分時，個性化處理器可以將比在將與外耳的形式對應(yīng)的人體測量特征應(yīng)用于包絡(luò)部分時被分配給外耳的形式的權(quán)重更大的權(quán)重分配給外耳的形式。

此外，個性化處理器可以基于用戶信息來提取用戶的人體測量特征。

此時，用戶信息可以是通過由用戶佩戴的可穿戴裝置來測量用戶的身體而獲得的信息。

此時，用戶信息可以是包含用戶的圖像的圖像信息，并且個性化處理器可以根據(jù)圖像信息為用戶的外耳的形式建模，或者根據(jù)圖像信息來估計用戶的頭部的形式。

此外，用戶信息可以是關(guān)于衣服或者配飾的大小的信息，并且個性化處理器可以基于關(guān)于衣服或者配飾的大小的信息來提取用戶的人體測量特征。

根據(jù)本發(fā)明的實施例的一種處理雙耳音頻信號的方法包括以下步驟：接收用戶信息；輸出雙耳參數(shù)以基于用戶信息來控制雙耳渲染；以及基于雙耳參數(shù)對源音頻執(zhí)行雙耳渲染。

有益效果

本發(fā)明的實施例提供了一種用立體聲播放多聲道信號和多對象信號的雙耳音頻信號處理裝置和方法。

具體地，本發(fā)明的實施例的提供了一種有效地反映出個人特征的雙耳音頻信號處理裝置和方法。

附圖說明

圖1是示出了根據(jù)本發(fā)明的實施例的雙耳音頻信號處理裝置的框圖。

圖2是示出了根據(jù)本發(fā)明的實施例的個性化處理器的框圖。

圖3是示出了根據(jù)本發(fā)明的實施例的用于提取用戶的人體測量特征的個性化處理器的框圖。

圖4示出了根據(jù)本發(fā)明的實施例的提取用戶的人體測量特征的耳機。

圖5是示出了根據(jù)本發(fā)明的實施例的個性化處理器的框圖，該個性化處理器分別將權(quán)重應(yīng)用于分別與多個身體部分對應(yīng)的人體測量特征。

圖6示出了個性化處理器，該個性化處理器在頭部相關(guān)傳輸函數(shù)(hrtf)的頻率特性方面區(qū)分包絡(luò)和陷波以反映出用戶的人體測量特征。

圖7示出了根據(jù)本發(fā)明的實施例的個性化處理器，該個性化處理器補償?shù)皖l帶的頻率響應(yīng)。

圖8示出了通過外耳反射從聲音源傳遞的聲音。

圖9示出了根據(jù)本發(fā)明的實施例的雙耳音頻信號處理裝置。

具體實施方式

在下文中，將參照附圖詳細描述本發(fā)明的實施例，以便本領(lǐng)域的技術(shù)人員可以容易地執(zhí)行本發(fā)明的實施例。然而，本發(fā)明可以被實施為各種不同的形式并且不限于本文所描述的實施例。為了清楚的描述本發(fā)明的實施例，在附圖中未示出與描述無關(guān)的實施例的一些部分。貫穿說明書，相似的附圖標記指代相似的元件。

當提及某個部分“包括”某些元件時，該部分可以進一步包括其它元件，除非另有規(guī)定。

本申請要求韓國專利申請第10-2014-0173420號的優(yōu)先權(quán)，該申請的實施例和描述被視為并入本文。

圖1是示出了根據(jù)本發(fā)明的實施例的雙耳音頻信號處理裝置的框圖。

根據(jù)本發(fā)明的實施例的雙耳音頻信號處理裝置10包括個性化處理器300和雙耳渲染器100。

個性化處理器300基于用戶信息來輸出待應(yīng)用于雙耳渲染器的雙耳參數(shù)值。此時，用戶信息可以是關(guān)于用戶的人體測量特征的信息。雙耳參數(shù)表示用于控制雙耳渲染的參數(shù)值。詳細地，雙耳參數(shù)可以是待應(yīng)用于雙耳渲染的頭部相關(guān)傳輸函數(shù)(hrtf)的設(shè)置值或者hrtf本身。在本發(fā)明中，hrtf包括雙耳房間傳輸函數(shù)(brtf)。此時，hrtf是通過建模將聲音從位于特定位置處的聲音源傳輸至人的兩個耳朵的過程而獲得的傳輸函數(shù)。詳細地，hrtf可以反映出人的頭部、軀干、耳朵等的影響。在特定實施例中，可以在無音室中測量hrtf。個性化處理器300可以包括數(shù)據(jù)庫形式的關(guān)于hrtf的信息。根據(jù)特定實施例，可以將個性化處理器300定位在雙耳音頻信號處理裝置10外部的單獨服務(wù)器中。

雙耳渲染器100基于雙耳參數(shù)值對源音頻進行雙耳渲染，并且輸出經(jīng)過雙耳渲染的音頻信號。此時，如上所述，雙耳參數(shù)值可以是hrtf的設(shè)置值或者hrtf本身。此外，源音頻可以是單聲道音頻信號或者包括一個對象的音頻信號。在另一實施例中，源音頻可以是包括多個對象的音頻信號或者多聲道信號。

參照圖2描述個性化處理器300的具體操作。

圖2是示出了根據(jù)本發(fā)明的實施例的個性化處理器的框圖。

根據(jù)本發(fā)明的實施例的個性化處理器300可以包括hrtf個性化單元330和個性化數(shù)據(jù)庫350。

個性化數(shù)據(jù)庫350存儲關(guān)于hrtf和人體測量特征的信息。詳細地，個性化數(shù)據(jù)庫350可以存儲關(guān)于與人體測量特征匹配的hrtf的信息。在特定實施例中，個性化數(shù)據(jù)庫350可以包括關(guān)于實際測量到的hrtf的信息。此外，個性化數(shù)據(jù)庫350可以包括關(guān)于通過模擬而估計的hrtf的信息。用于估計hrtf的模擬技術(shù)可以是基于人類頭部是球狀的假設(shè)執(zhí)行模擬的球狀頭部模型(shm)、基于人類頭部和軀干是球狀的假設(shè)執(zhí)行模擬的雪人模型、時域有限差分法(fdtdm)和邊界元法(bem)中的至少一種。shm模擬是基于人類頭部是球狀的假設(shè)進行的模擬方法。根據(jù)特定實施例，可以將個性化數(shù)據(jù)庫350定位在雙耳音頻信號處理裝置10外部的單獨服務(wù)器中。在特定實施例中，人體測量特征可以包括外耳的形式、軀干的形式和頭部的形式中的至少一種。此時，形式表示形狀和大小中的至少一個。因此，在該說明書中，測量特定身體部分的形式可以表示測量特定身體部分的形狀和大小。

hrtf個性化單元330接收用戶信息，并且輸出與用戶信息對應(yīng)的個性化的hrtf。詳細地，hrtf個性化單元330可以接收用戶的人體測量特征，并且可以輸出與用戶的人體測量特征對應(yīng)的個性化hrtf。此處，hrtf個性化單元330可以從個性化數(shù)據(jù)庫接收關(guān)于輸出個性化hrtf所需的hrtf和人體測量特征的信息。詳細地，hrtf個性化單元330可以從個性化數(shù)據(jù)庫350接收關(guān)于與人體測量特征匹配的hrtf的信息，并且可以基于接收到的關(guān)于與人體測量特征匹配的hrtf的信息來輸出與用戶的人體測量特征對應(yīng)的個性化的hrtf。例如，hrtf個性化單元330可以從存儲在個性化數(shù)據(jù)庫350中的人體測量特征數(shù)據(jù)當中檢索與用戶的人體測量特征最相似的人體測量特征數(shù)據(jù)。hrtf個性化單元330可以從個性化數(shù)據(jù)庫350提取與檢索到的人體測量特征數(shù)據(jù)匹配的hrtf，并且可以將提取到的hrtf應(yīng)用于雙耳渲染器。

將參照圖3和圖4描述提取用戶的人體測量特征的特定方法，并且將參照圖5至圖7描述輸出根據(jù)用戶的特征而被個性化的hrtf的特定方法。

圖3是示出了根據(jù)本發(fā)明的實施例的用于提取用戶的人體測量特征的個性化處理器的框圖。

根據(jù)本發(fā)明的實施例的個性化處理器300可以包括人體測量特征提取單元310。

人體測量特征提取單元310從表示用戶的特征的用戶信息提取用戶的人體測量特征。詳細地，用戶信息可以是圖像信息。此時，圖像信息可以包括視頻和靜態(tài)圖像中的至少一個。人體測量特征提取單元310可以從用戶輸入的圖像信息提取用戶的人體測量特征。此時，可以通過使用外部安裝的攝像頭，通過捕獲用戶的身體的圖像來獲得圖像信息。

此時，攝像頭可以是能夠測量距離信息的深度攝像頭。在特定實施例中，深度攝像頭可以通過使用紅外光來測量距離。在攝像頭是深度攝像頭的情況下，用戶信息可以包括關(guān)于外耳的特定信息。關(guān)于外耳的特定信息可以表示外耳的形式。外耳的形式包括外耳的大小、外耳的形狀和外耳的深度中的至少一個。因為反射路徑在音頻信號通過外耳反射時很短，所以外耳影響比受另一身體部分影響的頻帶更高的頻帶。受外耳影響的音頻頻帶為約4khz至16khz，并且形成頻譜陷波。即使外耳中很小的差異都會顯著影響頻譜陷波，并且外耳對高度感知有重要作用。因此，當用戶信息包括通過使用深度攝像頭而測量到的外耳信息時，個性化處理器300可以執(zhí)行更準確的個性化。

詳細地，可以通過使用安裝在無線通信終端中的攝像頭，通過捕獲用戶的身體的圖像來獲得圖像信息。此時，無線通信終端可以通過使用被包括在無線通信終端中的加速度計、陀螺儀傳感器和接近傳感器中的至少一個來捕獲用戶的身體的圖像。例如，當用戶將無線通信終端移動靠近用戶的耳朵以在無線通信終端上說話時，圖像信息可以是通過使用安裝在無線通信終端中的前置攝像頭捕捉到的用戶的耳朵的圖像。在另一特定實施例中，當在使無線通信終端接觸耳朵之后增加無線通信終端與耳朵之間的距離時，圖像信息可以是在不同的視角捕獲到的耳朵的多個圖像。此時，無線通信終端可以通過被包括在無線通信終端中的接近傳感器確定通信終端是否接觸耳朵。此外，無線通信終端可以通過使用加速度計和陀螺儀傳感器中的至少一個來檢測到耳朵的距離和旋轉(zhuǎn)角度中的至少一個。詳細地，在無線通信終端接觸耳朵之后，無線通信終端可以通過使用加速度計和陀螺儀傳感器中的至少一個來檢測到耳朵的距離和旋轉(zhuǎn)角度中的至少一個。無線通信終端可以基于到耳朵的距離和旋轉(zhuǎn)角度中的至少一個來生成圖像信息，該圖像信息是表示耳朵的形狀的三維立體圖像。

此外，可以通過使用提取距離和形式的射線掃描方法中的任意一種來提取圖像信息。詳細地，可以通過使用超聲波、近紅外光和太赫茲中的至少一個來掃描用戶的身體(包括耳朵)來獲得圖像信息。

此外，可以從包含用戶的多個圖像對用戶的外耳的形狀進行3d建模來獲得圖像信息。在特定實施例中，人體測量特征提取單元310可以從包含用戶的多個圖像對用戶的外耳的形狀進行3d建模。

人體測量特征提取單元310可以從包含用戶的圖像估計頭部大小。此時，人體測量特征提取單元310可以從包含用戶的圖像通過使用特定準則或者預(yù)設(shè)信息來估計頭部大小。此時，特定準則或者預(yù)設(shè)信息可以是已知對象的大小、衣服的大小、和不同的人之間的比例。已知對象的大小可以是無線通信終端的大小、路標的大小、建筑的大小、和車輛的大小中的至少一個。例如，人體測量特征提取單元310可以通過計算包含在圖像中的用戶頭部與無線通信終端之間的比例并且基于無線通信終端的預(yù)先存儲的大小來估計用戶的頭部大小。此外，人體測量特征提取單元310可以從估計的頭部大小估計外耳的形狀和大小以及耳間距離，即耳朵之間的距離。這是因為外耳的形狀和大小以及耳間距離(即耳朵之間的距離)與頭部的寬度對應(yīng)。在特定實施例中，可以從用戶的社交網(wǎng)絡(luò)服務(wù)(sns)賬戶獲得圖像?？梢詫D像預(yù)先存儲在用戶的無線通信終端中。該操作可以使用戶免于體驗測量用戶的身體和輸入測量到的信息所帶來的不便。

在另一特定實施例中，用戶信息可以是關(guān)于衣服或者配飾的大小的信息。此時，人體測量特征提取單元310可以基于關(guān)于衣服或者配飾的大小的信息來估計用戶的人體測量特征。詳細地，人體測量特征提取單元310可以基于關(guān)于衣服或者配飾的大小的信息來估計高度、頭部寬度、胸圍和肩寬中的至少一個。在特定實施例中，關(guān)于衣服或者配飾的大小的信息可以是上裝、下裝、帽子、眼鏡、頭盔和護目鏡中的至少一種的大小信息。與外耳的形式相比較，除了外耳之外的身體部分的人體測量特征對雙耳渲染過程的影響較小。因此，沒必要準確估計除了外耳之外的身體部分的人體測量特征。因此，可以通過將使用關(guān)于衣服或者配飾的大小的信息估計的值應(yīng)用于雙耳渲染來簡化人體測量特征提取過程。

在另一特定實施例中，hrtf個性化單元330可以基于用戶從多種模式當中選擇的任何一種模式來生成個性化的hrtf。例如，個性化處理器300可以從用戶接收用于選擇多種模式中的一種的用戶輸入，并且可以基于選擇的用戶模式來輸出經(jīng)過雙耳渲染的音頻。多種模式中的每一種模式可以確定待應(yīng)用于hrtf的耳間電平差(ild)、耳間時間差(itd)和頻譜陷波中的至少一個。詳細地，hrtf個性化單元330可以針對待用于hrtf的耳間電平差、耳間時間差和頻譜陷波水平權(quán)重接收用戶輸入。此時，耳間電平差、耳間時間差和頻譜陷波水平權(quán)重可以是用于衡量耳間電平差、耳間時間差和頻譜陷波水平權(quán)重的用戶輸入。

用于增強三維感的因素根據(jù)應(yīng)用了雙耳渲染的內(nèi)容而改變。例如，在飛行模擬游戲的情況下，感知高度差對用戶而言很重要。在賽車游戲的情況下，感知前空間和后空間對用戶而言很重要。此外，應(yīng)用于hrtf的頻譜陷波特征對感知高度很重要，并且耳間時間差和耳間電平差對水平感知很重要。因此，用戶可以通過選擇上述多種模式中的一種來選擇是否強調(diào)雙耳渲染期間的水平感知或者垂直感知。

此外，在特定實施例中，用于執(zhí)行內(nèi)容的應(yīng)用可以將為內(nèi)容優(yōu)化的模式輸入至hrtf個性化單元330。

在另一特定實施例中，用戶佩戴聲音輸出裝置可以測量用戶的耳朵的形式，并且可以將包括用戶的耳朵的形式的用戶信息輸入至個性化處理器300。將參照圖4詳細描述該操作。

圖4示出了根據(jù)本發(fā)明的實施例的提取用戶的人體測量特征的耳機。

根據(jù)本發(fā)明的實施例的聲音輸出裝置550可以測量用戶的耳朵的形式。詳細地，用戶佩戴的聲音輸出裝置550可以測量用戶的耳朵的形式。此時，聲音輸出裝置550可以是耳機或者耳塞。

詳細地，聲音輸出裝置550可以通過使用攝像頭或者深度攝像頭來測量用戶的耳朵的形式。在特定實施例中，上面關(guān)于使用攝像頭來測量用戶的身體參照圖3而描述的實施例可以應(yīng)用于聲音輸出裝置550。詳細地，聲音輸出裝置550可以通過拍攝用戶的耳朵來生成圖像。此時，聲音輸出裝置550可以使用生成的耳朵圖像來識別用戶。在特定實施例中，聲音輸出裝置550可以基于正佩戴聲音輸出裝置550的用戶的耳朵圖像來識別正佩戴聲音輸出裝置550的用戶。此外，聲音輸出裝置550可以將關(guān)于識別到的用戶的信息輸入至個性化處理器300。個性化處理器300可以根據(jù)識別到的用戶的hrtf集合來執(zhí)行雙耳渲染。詳細地，個性化處理器300可以針對與聲音輸出裝置550所生成的耳朵圖像匹配的用戶信息搜索數(shù)據(jù)庫，并且可以找到與聲音輸出裝置550所生成的耳朵圖像匹配的用戶。個性化處理器300可以根據(jù)與生成的耳朵圖像匹配的用戶的hrtf集合來執(zhí)行雙耳渲染。

在另一特定實施例中，聲音輸出裝置550可以基于生成的耳朵圖像來激活僅僅可用于特定用戶的函數(shù)。例如，當聲音輸出裝置550所生成的當前用戶的耳朵圖像與用戶的存儲的圖像匹配時，聲音輸出裝置550可以通過聲音輸出裝置550激活保密呼叫函數(shù)。此時，保密呼叫表示加密包括呼叫內(nèi)容的信號。這種方法可以防止竊聽。此外，當聲音輸出裝置550所生成的當前用戶的耳朵圖像與用戶的存儲的圖像匹配時，聲音輸出裝置550可以激活發(fā)布或者傳輸安全代碼的函數(shù)。此時，安全代碼表示用于在需要高級別安全性的交易(諸如金融交易)期間識別個人的代碼。此外，當聲音輸出裝置550所生成的當前用戶的耳朵圖像與用戶的存儲的圖像匹配時，聲音輸出裝置550可以激活隱藏應(yīng)用。此時，隱藏應(yīng)用可以表示可以在第一模式下執(zhí)行但無法在第二模式下執(zhí)行的應(yīng)用。在特定實施例中，隱藏應(yīng)用可以表示執(zhí)行對特定人的電話呼叫的應(yīng)用。另外，隱藏應(yīng)用可以表示播放年齡限制的內(nèi)容的應(yīng)用。

在另一特定實施例中，聲音輸出裝置550可以通過使用用于佩戴聲音輸出裝置550的帶(band)來測量正佩戴聲音輸出裝置550的用戶的頭部的大小。詳細地，聲音輸出裝置550可以通過使用用于佩戴聲音輸出裝置550的帶的松緊度來測量正佩帶聲音輸出裝置550的用戶的頭部的大小?？商娲?，聲音輸出裝置550可以基于帶的伸展階段值來測量頭部的大小。詳細地，帶的伸展階段值可以用于調(diào)整帶的長度，并且可以表示帶的長度。

聲音輸出裝置550可以基于從用戶的外耳反射的音頻信號來測量用戶的耳朵形式。詳細地，聲音輸出裝置550可以輸出某個音頻信號，并且可以接收從用戶的耳朵反射的音頻信號。此時，聲音輸出裝置550可以基于接收到的音頻信號來測量用戶的耳朵形式。在特定實施例中，聲音輸出裝置550可以接收對音頻信號的脈沖響應(yīng)以測量耳朵形式。此時，從聲音輸出裝置550輸出的音頻信號可以是預(yù)先設(shè)計為測量脈沖響應(yīng)的信號。詳細地，從聲音輸出裝置550輸出的音頻信號可以是偽噪聲序列或者正弦掃頻信號。從聲音輸出裝置550輸出的音頻信號可以是任意音樂信號。在從聲音輸出裝置550輸出的音頻信號是任意音樂信號的情況下，當用戶通過聲音輸出裝置550聽音樂時，聲音輸出裝置550可以測量用戶的耳朵形式。

個性化處理器300可以從聲音輸出裝置550接收從用戶的外耳反射的音頻信號，并且可以基于接收到的音頻信號來輸出個性化的hrtf。

將參照圖4描述基于從用戶的外耳反射的音頻信號來測量用戶的耳朵形式的聲音輸出裝置550的特定實施例。聲音輸出裝置550可以包括：揚聲器551，該揚聲器551輸出音頻信號；以及麥克風(fēng)553，該麥克風(fēng)553接收從外耳反射的音頻信號。用于最佳地從反射自外耳的音頻信號測量hrtf的麥克風(fēng)553的理想位置是在耳道571內(nèi)。詳細地，麥克風(fēng)553的最佳位置是耳道內(nèi)的耳膜。然而，很難將麥克風(fēng)安裝在用戶的耳道中，具體地，耳膜處。因此，需要將麥克風(fēng)553定位在耳道外，并且應(yīng)該根據(jù)麥克風(fēng)553的位置通過校正接收到的音頻信號來估計hrtf。詳細地，聲音輸出裝置550可以包括多個麥克風(fēng)553，并且個性化處理器300可以基于多個麥克風(fēng)553所接收到的音頻信號來生成個性化的hrtf。此時，個性化處理器300可以預(yù)先存儲關(guān)于多個麥克風(fēng)553的位置的信息或者可以通過用戶輸入或者聲音輸出裝置550接收信息。在另一特定實施例中，可以移動麥克風(fēng)553的位置。此時，個性化處理器300可以基于麥克風(fēng)553在不同位置處接收到的音頻信號來生成個性化的hrtf。

上述聲音輸出裝置550的實施例同樣可以被應(yīng)用于用戶戴佩戴的可穿戴裝置以便被使用。此時，可穿戴裝置可以是頭戴式顯示器(hmd)、可穿戴監(jiān)測器(scout)、護目鏡和頭盔中的任何一個。因此，用戶佩戴的可穿戴裝置可以測量用戶的身體，并且可以將包括身體的形式的用戶信息輸入至個性化處理器300。此時，用戶的身體的形式可以包括頭部的形式和耳朵的形式。

圖5是示出了根據(jù)本發(fā)明的實施例的個性化處理器的框圖，該個性化處理器分別將權(quán)重應(yīng)用于分別與多個身體部分對應(yīng)的人體測量特征。

如上所述，hrtf個性化單元330可以從個性化數(shù)據(jù)庫350接收關(guān)于與人體測量特征匹配的hrtf的信息，并且可以基于接收到的關(guān)于與人體測量特征匹配的hrtf的信息來輸出個性化的hrtf。例如，hrtf個性化單元330從存儲在個性化數(shù)據(jù)庫350中的人體測量特征數(shù)據(jù)當中檢索與用戶的人體測量特征最相似的人體測量特征數(shù)據(jù)。hrtf個性化單元330可以從個性化數(shù)據(jù)庫350提取與檢索到的人體測量特征數(shù)據(jù)匹配的hrtf，并且可以將提取到的hrtf應(yīng)用于雙耳渲染器。在本文中，人體測量特征與多個身體部分有關(guān)。因此，人體測量特征可以包括關(guān)于多個身體部分的信息。然而，用戶的身體的多個身體部分不同地影響傳遞至用戶的耳朵的聲音。詳細地，與胸圍相比較，頭部的寬度和軀干的寬度對傳遞至用戶的耳朵的聲音的影響更顯著。此外，與軀干的寬度相比較，外耳對傳遞至用戶的耳朵的聲音的影響更顯著。

因此，hrtf個性化單元330可以將重要級別分配給多個身體部分，并且可以基于分別分配給多個身體部分的重要級別來生成個性化的hrtf。在特定實施例中，hrtf個性化單元330可以基于分配給身體部分的重要級別從存儲在個性化數(shù)據(jù)庫350中的人體測量特征當中檢索與用戶的人體測量特征最相似的人體測量特征。為了方便闡釋，與用戶的人體測量特征最相似的人體測量特征被稱為匹配人體測量特征。詳細地，人體測量特征可以包括關(guān)于多個身體部分的信息，并且可以與單個hrtf匹配。此時，hrtf個性化單元330可以分別將重要級別分配給屬于人體測量特征的多個身體部分，并且可以基于分配給身體部分的重要級別從存儲在個性化數(shù)據(jù)庫350中的多個人體測量特征當中確定匹配人體測量特征。在特定實施例中，當hrtf個性化單元330確定匹配人體測量特征時，hrtf個性化單元330可以首先比較具有高重要級別的身體部分，例如，hrtf個性化單元330可以從存儲在個性化數(shù)據(jù)庫350中的多個人體測量特征當中確定與用戶的人體測量特征最相似的具有最高重要級別的身體部分的人體測量特征，作為匹配人體測量特征。在另一特定實施例中，hrtf個性化單元330可以選擇具有高重要級別的多個身體部分以從存儲在個性化數(shù)據(jù)庫350中的多個人體測量特征當中確定與用戶的人體測量特征最相似的具有高重要級別的多個身體部分的人體測量特征，作為匹配人體測量特征。

在特定實施例中，hrtf個性化單元330可以在沒有應(yīng)用關(guān)于多個身體部分當中具有相對較低的重要級別的身體部分的信息的情況下生成個性化的hrtf。詳細地，hrtf個性化單元330可以通過比較除了具有相對較低的重要級別的身體部分之外的多個身體部分來確定與用戶的人體測量特征最相似的人體測量特征。此時，具有相對較低的重要級別的身體部分可以表示具有等于或者低于某個準則的重要級別的身體部分。可替代地，具有相對較低的重要級別的身體部分可以表示具有最低重要級別的身體部分。

如圖5的實施例所示，hrtf個性化單元330可以包括：權(quán)重計算單元331，該權(quán)重計算單元331計算多個身體部分的權(quán)重；以及hrtf確定單元333，該hrtf確定單元333根據(jù)計算得到的權(quán)重來確定個性化的hrtf。

上面參照圖4和圖5所描述的是個性化處理器300通過使用單獨hrtf來生成個性化hrtf的實施例。單獨hrtf表示針對具有一個人體測量特征的對象測量或者模擬的hrtf數(shù)據(jù)集。個性化處理器300可以通過頻帶的每個特征或者時間帶的每個特征將單獨hrtf分解成一個或者多個分量，并且可以組合或者修改一個或者多個分量以生成個性化的hrtf，用戶的人體測量特征應(yīng)用于該個性化的hrtf。在實施例中，個性化處理器300可以將hrtf分解成耳廓相關(guān)傳輸函數(shù)(prtf)和不包括耳廓的頭部相關(guān)傳輸函數(shù)(heprtf)，并且可以組合和修改prtf和heprtf以生成個性化的hrtf。prtf表示建模通過從外耳反射而傳遞的聲音的傳輸函數(shù)，nphrtf表示建模通過從除了外耳之外的身體反射而傳遞的聲音的傳輸函數(shù)。在圖6中將描述該操作。

圖6示出了個性化處理器，該個性化處理器在頭部相關(guān)傳輸函數(shù)(hrtf)的頻率特性方面區(qū)分包絡(luò)和陷波以反映出用戶的人體測量特征。

hrtf個性化單元330可以根據(jù)頻率特性通過應(yīng)用用戶的人體測量特征來生成個性化的hrtf。詳細地，hrtf個性化單元330通過將根據(jù)hrtf生成的頻率響應(yīng)劃分成包絡(luò)部分和陷波部分并且將用戶的人體測量特征應(yīng)用于包絡(luò)部分和陷波部分中的每一個來生成個性化的hrtf。此時，hrtf個性化單元330可以根據(jù)用戶的人體測量特征來改變在根據(jù)hrtf的頻率響應(yīng)中的陷波的頻率、深度和寬度中的至少一個。在特定實施例中，hrtf個性化單元330可以通過將根據(jù)hrtf生成的頻率響應(yīng)劃分成包絡(luò)部分和陷波部分并且將不同的權(quán)重應(yīng)用于在頻率響應(yīng)的包絡(luò)部分和頻率響應(yīng)的陷波部分中的相同的身體部分來生成個性化的hrtf。

hrtf個性化單元330執(zhí)行該操作的原因在于，主要影響根據(jù)hrtf生成的頻率響應(yīng)的陷波部分的身體部分與主要影響包絡(luò)部分的身體部分不同。詳細地，用戶的外耳的形式主要影響根據(jù)hrtf生成的頻率響應(yīng)的陷波部分，并且頭部大小和軀干大小主要影響根據(jù)hrtf生成的頻率響應(yīng)的包絡(luò)部分。因此，當將人體測量特征應(yīng)用于頻率響應(yīng)的陷波部分時，hrtf個性化單元330可以將比在將人體測量特征應(yīng)用于頻率響應(yīng)的包絡(luò)部分時分配給外耳的形式的權(quán)重大的權(quán)重分配給外耳的形式。此外，當將人體測量特征應(yīng)用于頻率響應(yīng)的陷波部分時，hrtf個性化單元330可以將比在將人體測量特征應(yīng)用于頻率響應(yīng)的包絡(luò)部分時分配給軀干的形式的權(quán)重小的權(quán)重分配給軀干的形式。此外，當將人體測量特征應(yīng)用于頻率響應(yīng)的陷波部分時，hrtf個性化單元330可以將比在將人體測量特征應(yīng)用于頻率響應(yīng)的包絡(luò)部分時分配給頭部的形式的權(quán)重小的權(quán)重分配給頭部的形式。

另外，當將人體測量特征應(yīng)用于根據(jù)hrtf生成的頻率響應(yīng)的陷波部分時，hrtf個性化單元330可以將比應(yīng)用于軀干大小或者頭部大小的權(quán)重大的權(quán)重分配給外耳的形式。此外，當將人體測量特征應(yīng)用于頻率響應(yīng)的包絡(luò)部分時，hrtf個性化單元330可以將比應(yīng)用于外耳的形式的權(quán)重大的權(quán)重分配給軀干大小或者頭部大小。

此時，hrtf個性化單元330可以根據(jù)權(quán)重的分配不應(yīng)用與單獨頻率分量中的特定身體部分對應(yīng)的人體測量特征。例如，hrtf個性化單元330可以將與外耳的形式對應(yīng)的人體測量特征應(yīng)用于頻率的陷波部分，但是可以不將與外耳的形式對應(yīng)的人體測量特征應(yīng)用于頻率的包絡(luò)部分。此時，hrtf個性化單元330可以將與除了外耳之外的身體部分對應(yīng)的人體測量特征應(yīng)用于頻率的包絡(luò)部分。

將參照圖6描述個性化處理單元330的具體操作。

在圖6的實施例中，頻率分量分離單元335將根據(jù)hrtf生成的頻率響應(yīng)分離成包絡(luò)部分和陷波部分。

頻率包絡(luò)個性化單元337將用戶的人體測量特征應(yīng)用于根據(jù)hrtf生成的頻率響應(yīng)的包絡(luò)部分。如上所述，頻率包絡(luò)個性化單元337可以將比應(yīng)用于外耳的形式的權(quán)重大的權(quán)重分配給軀干大小或者頭部大小。

頻率陷波個性化單元339將用戶的人體測量特征應(yīng)用于根據(jù)hrtf生成的頻率響應(yīng)的陷波部分。如上所述，頻率陷波個性化單元339可以將比應(yīng)用于軀干大小或者頭部大小的權(quán)重大的權(quán)重分配給外耳的形式。

頻率分量合成單元341基于來自頻率包絡(luò)個性化單元337的輸出和來自頻率陷波個性化單元339的輸出來生成個性化的hrtf。詳細地，頻率分量合成單元341生成與頻率包絡(luò)個性化單元337所生成的頻率的包絡(luò)和頻率陷波個性化單元339所生成的頻率的陷波對應(yīng)的個性化的hrtf。

在特定實施例中，hrtf個性化單元330可以將hrtf分離成分別與多個身體部分對應(yīng)的多個分量，并且可以分別將與多個分量對應(yīng)的人體測量特征應(yīng)用于多個分量。詳細地，hrtf個性化單元330可以提取與分別對應(yīng)于多個身體部分的人體測量特征匹配的hrtf的分量。此時，包括單獨hrtf的分量可以表示從對應(yīng)的身體部分反射并且傳遞至用戶的耳朵的聲音。hrtf個性化單元330可以通過對多個提取到的分量進行合成來生成個性化的hrtf。詳細地，hrtf個性化單元330可以基于分別分配給多個分量的權(quán)重對多個提取到的分量進行合成。例如，hrtf個性化單元330可以提取與外耳的形式對應(yīng)的第一分量、與頭部大小對應(yīng)的第二分量、以及與胸圍對應(yīng)的第三分量。hrtf個性化單元330可以對第一分量、第二分量和第三分量進行合成以生成個性化的hrtf。在這種情況下，個性化數(shù)據(jù)庫350可以存儲分別與多個身體部分匹配的hrtf的分量。

具體地，hrtf個性化單元330可以將hrtf分離成與外耳的形式匹配的分量和與頭部的形式匹配的分量。此外，hrtf個性化單元330可以將hrtf分離成與外耳的形式匹配的分量和與軀干的形式匹配的分量。這是因為，當聲音從人體反射并且傳遞至耳朵時，由外耳反射的聲音的時域特性與由頭部的形式或者軀干的形式反射的聲音的時域特性顯著不同。

此外，hrtf個性化單元330可以通過使用倒頻譜的同態(tài)信號處理將頻率分量分離成與外耳的形式對應(yīng)的部分和與軀干的形式或者頭部的形式對應(yīng)的部分。在另一特定實施例中，hrtf個性化單元330可以通過低/高通濾波將頻率分量分離成與外耳的形式對應(yīng)的部分和與軀干的形式或者頭部的形式對應(yīng)的部分。在另一特定實施例中，hrtf個性化單元330可以通過波插值(wi)將頻率分量分離成與外耳的形式對應(yīng)的部分和與軀干的形式或者頭部的形式對應(yīng)的部分。此時，波插值可以包括快漸變波(rew)和慢漸變波(sew)。這是因為可以假設(shè)頻率響應(yīng)在外耳的情況下隨著方位角或者仰角的變化而快速變化并且頻率響應(yīng)在頭部或者軀干的情況下隨著方位角或者仰角的變化而緩慢變化。方位角或者仰角表示在聲音源與用戶兩個耳朵的中心之間的角度。

詳細地，當使用wi時，hrtf個性化單元330可以在具有空間/頻率軸線而不是時間/頻率軸線的三維表示中將根據(jù)hrtf的頻率響應(yīng)分離成sew和rew。詳細地，hrtf個性化單元330可以在具有頻率/仰角或者頻率/方位角作為軸線的三維表示中將根據(jù)hrtf的頻率響應(yīng)分離成sew和rew。hrtf個性化單元330可以通過使用與頭部的形式和軀干的形式對應(yīng)的人體測量特征來使sew個性化。hrtf個性化單元330可以通過使用與外耳的形式對應(yīng)的人體測量特征來使rew個性化。rew可以被表示為表示rew的參數(shù)，并且hrtf個性化單元330可以在參數(shù)階段使rew個性化。此外，可以將sew劃分成針對頭部的形式和軀干的形式的分量，并且hrtf個性化單元330可以根據(jù)與頭部的形式和軀干的形式對應(yīng)的人體測量特征來使sew個性化。這是因為可以假設(shè)基于頭部的形式和軀干的形式的分量屬于sew以及基于外耳的形式的分量屬于rew，如上所述。

如上所述，個性化數(shù)據(jù)庫350可以包括關(guān)于實際測量到的hrtf的信息。此外，個性化數(shù)據(jù)庫350可以包括通過模擬估計的hrtf的信息。hrtf個性化單元330可以基于關(guān)于實際測量到的hrtf的信息和關(guān)于通過模擬估計的hrtf的信息來生成個性化的hrtf。將參照圖7描述該操作。

圖7示出了根據(jù)本發(fā)明的實施例的個性化處理器，該個性化處理器補償?shù)皖l帶的頻率響應(yīng)。

hrtf個性化單元330通過對基于實際測量到的hrtf信息而生成的基于實際測量的hrtf和通過模擬估計的基于模擬的hrtf進行合成來生成個性化的hrtf。此時，基于實際測量的hrtf可以是通過上面參照圖5和圖6描述的實施例根據(jù)用戶的人體測量特征而生成的個性化的hrtf。此外，基于模擬的hrtf是通過數(shù)學(xué)公式或者模擬方法生成的。詳細地，基于模擬的hrtf是根據(jù)用戶的人體測量特征通過球狀頭部模型(shm)、雪人模型、時域有限差分法(fdtdm)、和邊界元法(bem)中的至少一種而生成的。在特定實施例中，hrtf個性化單元330可以通過組合基于實際測量的hrtf的中頻和高頻分量以及基于模擬的hrtf的低頻分量來生成個性化的hrtf。此時，中頻分量和高頻分量可以具有等于或者大于第一參考值的頻率值。此外，低頻分量可以具有等于或者小于第二參考值的頻率值。詳細地，第一參考值和第二參考值可以是相同的值。在特定實施例中，hrtf個性化單元330可以通過使用高通濾波器對基于實際測量的hrtf的頻率響應(yīng)進行濾波，并且通過使用低通濾波器對基于模擬的hrtf的頻率響應(yīng)進行濾波。這是因為由于在實際測量過程期間難以使用麥克風(fēng)來測量低頻分量，所以實際測量到的hrtf的頻率響應(yīng)的低頻分量與實際傳遞至用戶耳朵的聲音的低頻分量顯著不同。此外，這是因為通過模擬估計的hrtf的低頻分量與實際傳遞至用戶耳朵的聲音的低頻分量相似。

此外，在特定實施例中，hrtf個性化單元330可以通過諸如正交鏡像濾波器的濾波器組或者快速傅里葉變換(fft)來區(qū)分基于實際測量的hrtf和基于模擬的hrtf的處理頻帶。

在圖7的實施例中，hrtf個性化單元330包括基于模擬的hrtf生成單元343、基于實際測量的hrtf生成單元345和合成單元347。

基于模擬的hrtf生成單元343根據(jù)用戶的人體測量特征進行模擬以生成基于模擬的hrtf。

基于實際測量的hrtf生成單元345根據(jù)用戶的人體測量特征生成基于實際測量的hrtf。

合成單元347生成基于模擬的hrtf和基于實際測量的hrtf。詳細地，合成單元347可以對基于實際測量的hrtf的中頻和高頻分量以及基于模擬的hrtf的低頻分量進行合成以生成個性化的hrtf。在特定實施例中，合成單元347可以通過使用高通濾波器對基于實際測量的hrtf的頻率響應(yīng)進行濾波，并且通過使用低通濾波器對基于模擬的hrtf的頻率響應(yīng)進行濾波。

如上所述，被認為用于生成個性化的hrtf的用戶的人體測量特征可以包括外耳的形式。此外，外耳的形式顯著影響根據(jù)hrtf的頻率響應(yīng)的陷波。下面參照圖8描述一種基于外耳的形式來模擬根據(jù)hrtf的頻率響應(yīng)的陷波的方法。

圖8示出了通過外耳反射從聲音源傳遞的聲音。

hrtf個性化單元330可以基于外耳的形式來模擬根據(jù)hrtf的頻率響應(yīng)的陷波。此時，外耳的形式可以表示外耳的大小和形狀中的至少一個。此外，外耳的形式可以包括耳輪、耳輪邊界、耳輪壁、外耳邊界、對耳輪、外耳壁和耳輪腳的至少一個。hrtf個性化單元330可以基于耳道的入口與反射聲音的外耳的部分之間的距離來模擬根據(jù)hrtf的頻率響應(yīng)的陷波。詳細地，hrtf個性化單元330可以基于耳道的入口與反射聲音的外耳的部分之間的距離和聲音的速度來模擬根據(jù)hrtf的頻率響應(yīng)的陷波。詳細地，hrtf個性化單元330可以通過以下等式模擬根據(jù)hrtf的頻率響應(yīng)的陷波。

f(theta)＝c/(2*d(theta))

f(theta)表示根據(jù)hrtf的頻率響應(yīng)的陷波的頻率，theta表示仰角，并且c表示聲音速度，并且d(theta)表示耳道的入口與反射聲音的外耳的部分之間的距離。此時，仰角可以表示穿過聲音源的位置和反射聲音的外耳的部分的直線與水平參考平面之間的角度，如在向上方向上所測量到的。在特定實施例中，當角度等于或者大于90度時，仰角可以被表示為負數(shù)。

hrtf個性化單元330可以通過應(yīng)用模擬的陷波來生成個性化的hrtf。詳細地，hrtf個性化單元330可以基于模擬的陷波來生成陷波/峰值濾波器。hrtf個性化單元330可以應(yīng)用生成的陷波/峰值濾波器來生成個性化的hrtf。

在另一特定實施例中，個性化處理器300可以將陷波/峰值濾波器輸入至雙耳渲染器100，并且雙耳渲染器100可以通過陷波/峰值濾波器對源音頻進行濾波。

圖9示出了根據(jù)本發(fā)明的實施例的雙耳音頻信號處理裝置。

個性化處理器300接收用戶信息(s901)。此時，用戶信息可以包括關(guān)于用戶的人體測量特征的信息。此時，人體測量特征可以包括外耳的形式、軀干的形式和頭部的形式中的至少一種。此時，形式可以表示大小和形狀中的至少一個。此外，用戶信息可以指示由用戶選擇的多個雙耳渲染模式中的任何一種。此外，用戶信息可以指示通過用戶所執(zhí)行的應(yīng)用而選擇的多個雙耳渲染模式中的任何一種。詳細地，用戶信息可以是用于估計用戶的人體測量特征的圖像信息。在另一特定實施例中，用戶信息可以是關(guān)于衣服或者配飾的大小的信息。

雙耳參數(shù)表示用于控制雙耳渲染的參數(shù)值。此外，雙耳參數(shù)可以是雙耳hrtf的設(shè)置值或者hrtf本身。

個性化處理器300基于用戶信息來輸出雙耳參數(shù)值(s903)。此時，個性化處理器300可以從用戶信息提取用戶的人體測量特征。詳細地，個性化處理器300可以通過上面參照圖3和圖4描述的實施例從用戶信息提取用戶的人體測量特征。詳細地，個性化處理器300可以通過使用圖像信息來提取用戶的人體測量特征。在特定實施例中，個性化處理器300可以從包含用戶的外耳的多個圖像為外耳的形式建模。在另一特定實施例中，個性化處理器300可以從包含用戶的頭部的多個圖像為用戶的頭部的形式建模。此外，如上所述，個性化處理器300可以通過使用聲音輸出裝置來測量用戶耳朵的形式。具體地，聲音輸出裝置550可以基于從用戶的外耳反射的音頻信號來測量用戶的耳朵形式。此外，個性化處理器300可以通過使用可穿戴裝置來測量用戶身體的形式。此時，可穿戴裝置可以是頭戴式顯示器(hmd)、可穿戴監(jiān)測器(scout)、護目鏡和頭盔中的任何一個。

在另一特定實施例中，個性化處理器300可以從衣服或者配飾的大小提取用戶的人體測量特征。

詳細地，個性化處理器300可以通過上述實施例基于用戶信息來生成個性化的hrtf。詳細地，個性化處理器300可以通過對基于提取到的人體測量特征而生成的基于實際測量的hrtf和基于模擬的hrtf進行合成來生成個性化的hrtf。個性化處理器300可以通過使用比根據(jù)基于實際測量的hrtf的頻率響應(yīng)的第一參考值高的頻帶以及通過使用比根據(jù)基于模擬的hrtf的頻率響應(yīng)的第二參考值低的頻帶來生成個性化的hrtf。個性化處理器300可以基于在人的頭部是球狀的假設(shè)的基礎(chǔ)上執(zhí)行模擬的球狀頭部模型、在人的頭部和軀干是球狀的假設(shè)的基礎(chǔ)上執(zhí)行的模擬的雪人模型、時域有限差分法和邊界元法中的至少一種來估計基于模擬的hrtf。個性化處理器300可以基于耳道的入口與反射聲音的外耳的部分之間的距離來模擬根據(jù)hrtf的頻率響應(yīng)的陷波，并且可以通過應(yīng)用模擬的陷波來生成個性化的hrtf。

此外，個性化處理器300可以確定多個hrtf當中與和對應(yīng)于用戶信息的用戶的人體測量特征最相似的人體測量特征匹配的hrtf，并且可以生成確定的hrtf作為個性化的hrtf或者基于測量的hrtf。用戶的人體測量特征可以包括關(guān)于多個身體部分的信息，并且個性化處理器300可以基于分別分配給多個身體部分的權(quán)重來確定多個hrtf當中與和用戶的人體測量特征最相似的人體測量特征匹配的hrtf。

此外，個性化處理器300可以針對頻帶的每個特征或者時間帶的每個特征來分解單獨hrtf的分量，并且可以將用戶的人體測量特征應(yīng)用于針對頻帶的每個特征或者時間帶的每個特征而被分解的單獨hrtf的分量。詳細地，用戶的人體測量特征可以包括關(guān)于多個身體部分的信息，并且個性化處理器300可以將單獨hrtf分解成分別與多個身體部分匹配的多個分量，并且可以分別將與多個分量對應(yīng)的人體測量特征應(yīng)用于多個分量。在特定實施例中，個性化處理器300可以將單獨hrtf分解成與外耳的形式匹配的分量和與另一身體部分匹配的分量。此時，其它身體部分可以是頭部的形式或者軀干的形式。

此外，個性化處理器300可以通過波插值(wi)將單獨hrtf分解成與外耳的形式匹配的分量和與其它身體部分匹配的分量。詳細地，個性化處理器300可以通過波插值將單獨hrtf分解成sew和rew。此時，個性化處理器300可以通過使用與外耳的形式對應(yīng)的人體測量特征來使rew個性化。此外，個性化處理器300可以通過使用與頭部的形式和軀干的形式對應(yīng)的人體測量特征來使sew個性化。

在另一特定實施例中，個性化處理器300可以通過使用倒頻譜的同態(tài)信號處理將頻率分量分離成與外耳的形式對應(yīng)的部分和與另一身體部分的形式對應(yīng)的部分。在另一特定實施例中，個性化處理器300可以通過低/高通濾波將頻率分量分離成與外耳的形式對應(yīng)的部分和與另一身體部分的形式對應(yīng)的部分。此時，其它身體部分可以是頭部或者軀干。

此外，個性化處理器300通過將根據(jù)單獨hrtf生成的頻率響應(yīng)劃分成包絡(luò)部分和陷波部分并且將用戶的人體測量特征應(yīng)用于包絡(luò)部分和陷波部分中的每一個來生成個性化的hrtf。詳細地，個性化處理器可以根據(jù)用戶的人體測量特征來改變陷波部分的陷波的頻率、深度和寬度中的至少一個。個性化處理器300可以通過將不同的權(quán)重分配給相同的身體部分來生成個性化的hrtf。詳細地，當將人體測量特征應(yīng)用于頻率響應(yīng)的陷波部分時，hrtf個性化單元330可以將比在將人體測量特征應(yīng)用于頻率響應(yīng)的包絡(luò)部分時分配給外耳的形式的權(quán)重大的權(quán)重分配給外耳的形式。此外，當將人體測量特征應(yīng)用于頻率響應(yīng)的陷波部分時，hrtf個性化單元330可以將比在將人體測量特征應(yīng)用于頻率響應(yīng)的包絡(luò)部分時分配給軀干的形式的權(quán)重小的權(quán)重分配給軀干的形式。此外，當將人體測量特征應(yīng)用于頻率響應(yīng)的陷波部分時，hrtf個性化單元330可以將比在將人體測量特征應(yīng)用于頻率響應(yīng)的包絡(luò)部分時分配給頭部的形式的權(quán)重小的權(quán)重分配給頭部的形式。

雙耳渲染器100基于雙耳參數(shù)對源音頻執(zhí)行雙耳渲染(s905)。詳細地，雙耳渲染器100可以基于個性化的hrtf對源音頻執(zhí)行雙耳渲染。

雖然已經(jīng)通過使用具體的實施例對本發(fā)明進行了描述，但是，在不脫離本發(fā)明的精神和范圍的情況下，本領(lǐng)域的技術(shù)人員可以對其進行修改或者改變。即，雖然已經(jīng)描述了對多音頻信號進行雙耳渲染的實施例，但是本發(fā)明可以被相同地應(yīng)用并且擴展到不僅包括音頻信號還包括視頻信號的各種多媒體信號。因此，應(yīng)該將本領(lǐng)域的技術(shù)人員能夠容易地從本發(fā)明的詳細說明和實施例推知的任何衍生物視為落入本發(fā)明的權(quán)利范圍內(nèi)。