專利名稱:輸出音頻信號的顯示裝置和方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種顯示裝置,更具體地說,涉及一種輸出音頻信號的顯示裝置和方法,其響應(yīng)于三維(3D)圖像數(shù)據(jù)來輸出音頻信號。
背景技術(shù):
顯示裝置是具有顯示用戶可觀看圖像的功能的裝置。用戶通過顯示裝置觀看廣播。顯示裝置顯示用戶從廣播站傳送的廣播中選擇的廣播。目前的廣播趨勢正在全球性地從模擬廣播向數(shù)字廣播轉(zhuǎn)變。數(shù)字廣播是指傳輸數(shù)字視頻信號和音頻信號的廣播。在應(yīng)對外部噪音時,數(shù)字廣播比模擬廣播更為魯棒。因此在數(shù)字廣播中,數(shù)據(jù)的損失小,而且很容易校正錯誤。而且數(shù)字廣播提供了高分辨率和高清晰度的畫面。此外,與模擬廣播不同,數(shù)字廣播可以提供交互服務(wù)。此外,最近的很多研究是針對3D圖像進(jìn)行的,除了電腦制圖外,3D圖像技術(shù)甚至還在不同的技術(shù)和環(huán)境中得到了迅速的推廣和實踐應(yīng)用。
發(fā)明內(nèi)容
實施方式提供了一種輸出音頻信號的顯示裝置和方法,其輸出與3D圖像數(shù)據(jù)的深度信息相關(guān)的音頻信號。實施方式還提供了一種輸出音頻信號的顯示裝置和方法,其精確計算3D圖像數(shù)據(jù)的深度信息。本發(fā)明的目的并不限于上述內(nèi)容,本領(lǐng)域技術(shù)人員可通過以下的描述而清楚地理解其他在此未描述的目的。在一個實施方式中,一種在顯示裝置中輸出音頻信號的方法包括接收廣播信號; 檢測包括在所述廣播信號中的三維(3D)圖像的深度;基于檢測到的深度對與所述3D圖像對應(yīng)輸入的音頻信號進(jìn)行信號處理,并輸出經(jīng)過信號處理的音頻信號。在另一個實施方式中,顯示裝置包括顯示單元,其顯示包括在接收到的廣播信號中的三維(3D)圖像;音頻輸出單元,其輸出包括在接收到的廣播信號中的音頻信號;檢測器,其檢測所顯示的3D圖像的深度,以及控制器,其根據(jù)檢測到的深度來設(shè)置針對所述音頻信號的至少一個參數(shù)值,并基于所設(shè)置的參數(shù)值來對將要通過所述音頻輸出單元輸出的經(jīng)過了信號處理的音頻信號進(jìn)行控制。將在以下的附圖和描述中闡述一個及更多的實施方式的細(xì)節(jié)。其他特征將從說明書、附圖及權(quán)利要求中顯而易見地獲得。
圖1和圖2是用于說明3D圖像的格式的圖。圖3是根據(jù)一個實施方式的顯示裝置的框圖。
圖4是例示圖3的深度檢測器的詳細(xì)框圖。圖5-11是用于描述檢測3D圖像的深度的方法的圖。圖12和圖13是根據(jù)一個實施方式的顯示裝置的操作方法的流程圖。圖14和圖15是用于描述根據(jù)一個實施方式實現(xiàn)的立體聲音效的圖。
具體實施例方式下面將詳細(xì)參考本發(fā)明的實施方式進(jìn)行描述,在附圖中示出了這些實施方式的示例。在這種情況下,在附圖中例示并參考附圖進(jìn)行說明的本發(fā)明的結(jié)構(gòu)和操作被描述為至少一個實施方式。本發(fā)明的技術(shù)精神和本質(zhì)結(jié)構(gòu)不限于此。在說明書中,本發(fā)明使用的術(shù)語將盡量選用目前廣泛使用的通用術(shù)語。但是,術(shù)語也可以根據(jù)本領(lǐng)域技術(shù)人員的意圖或習(xí)慣、或出現(xiàn)的新科技而有所改變。此外,在特殊的情況下,也可能使用由申請人任意選取的術(shù)語。在這種情況下,由于術(shù)語的含義在本說明書的詳細(xì)描述中被具體加以說明,所以應(yīng)該從這些術(shù)語的含義的角度而不應(yīng)從這些術(shù)語的簡單命名來理解本發(fā)明。本發(fā)明涉及一種輸出音頻信號的顯示裝置和方法,更具體地說,描述了一種在顯示三維(3D)圖像或立體圖像的裝置(下文中,稱為立體圖像顯示裝置)中輸出音頻信號的方法。為了描述本發(fā)明,在下文中首先描述一幅立體圖像。對于3D圖像而言,存在基于兩個視角(perspective)的立體(有立體感)的圖像和基于三個視角的多視角圖像。立體圖像表示為一對左、右圖像,該對左、右圖像由彼此分開一定距離的左攝像機(jī)和右攝像機(jī)拍攝相同主體而獲得。同樣地,多視角圖像表示三個或更多個圖像,這三個或更多的圖像由彼此分開一定距離的或角度的三個或更多個攝像機(jī)拍攝而得到。立體圖像的傳輸格式包括單視頻流格式和多視頻流格式。
這里,單視頻流格式包括如圖1的(a)部分所示的并排格式、圖1的(b)部分所示的上/下格式、圖1的(c)部分所示的隔行格式、圖1的(d)部分所示的幀連續(xù)格式、圖1 的(e)部分所示的棋盤格式以及圖1的(f)部分所示的浮雕格式。圖1的(a)部分所示的并排格式對應(yīng)于對左圖像L和右圖像R水平進(jìn)行1/2子采樣的情況,將采樣的左圖像L和右圖像R分別放置于左側(cè)和右側(cè),從而生成一幅立體圖像。圖1的(b)部分所示的上/下模式對應(yīng)于對左圖像L和右圖像R垂直進(jìn)行1/2子采樣的情況,將采樣的左圖像L和右圖像R分別放置于上部和下部,從而生成一幅立體圖像。圖1的(c)部分所示的隔行模式對應(yīng)于對左圖像L和右圖像R垂直進(jìn)行1/2子采樣的情況,每一行交替放置一個采樣的左圖像L的像素和一個采樣的右圖像R的像素,從而生成一幅立體圖像。另選的是,圖1的(c)部分所示的隔行模式對應(yīng)于對左圖像L和右圖像R水平進(jìn)行1/2子采樣的情況,每隔一個像素交替放置一個采樣的左圖像L的像素和一個采樣的右圖像R的像素,從而生成一幅立體圖像。圖1的(d)部分所示的幀連續(xù)格式對應(yīng)于如下情況,即不對左圖像L和右圖像R 進(jìn)行1/2子采樣,而是以一幀為單位連續(xù)且交替地設(shè)置各個左圖像L和右圖像R,從而生成
5一幅立體圖像。圖1的(e)部分所示的棋盤格式對應(yīng)于分別對左圖像L和右圖像R進(jìn)行垂直方向上和水平方向上的1/2子采樣,每隔一個像素交替放置一個采樣的左圖像L的像素和一個采樣的右圖像R的像素,從而生成一幅立體圖像。此外,多視頻流格式具有圖2的(a)部分所示的全左/右格式、圖2的(b)部分所示的全左/半右格式、以及圖2的(c)部分所示的二維視頻/深度格式。圖2的(a)部分所示的全左/右格式對應(yīng)于順序發(fā)送左圖像L和右圖像R的情況。 圖2的(b)部分所示的全左/半右格式對應(yīng)于原樣發(fā)送左圖像L,并對右圖像R執(zhí)行在垂直方向或水平方向上的1/2子采樣以發(fā)送該采樣過的圖像的情況。圖2的(c)部分所示的二維視頻/深度格式,對應(yīng)于傳輸左圖像L和右圖像R之一以及用于生成另一個圖像的深度信息的情況。立體圖像或多視角圖像可以按照運(yùn)動圖像專家組(MPEG)類型或各種類型進(jìn)行壓縮和編碼然后發(fā)送。例如,一幅基于并排格式、上/下格式、隔行格式或棋盤格式的立體圖像可以按照H.沈4/高級視頻編碼(AVC)類型進(jìn)行壓縮和編碼然后發(fā)送。從而接收系統(tǒng)可以通過H. 264/AVC類型的逆操作對該立體圖像進(jìn)行解碼而得到3D圖像。此外,多視角圖像和基于全左/半右格式的左圖像中的其中之一被分配為一幅基礎(chǔ)層圖像,另一個被分配為一幅增強(qiáng)層圖像。隨后,基礎(chǔ)層圖像可以按照與單像 (monoscopic)圖像的編碼類型相同的類型來進(jìn)行編碼,而增強(qiáng)層圖像可以只用基礎(chǔ)層圖像和增強(qiáng)層圖像之間的相關(guān)性信息來進(jìn)行編碼并發(fā)送。這里,基礎(chǔ)層圖像的壓縮編碼類型的示例包括聯(lián)合圖像專家組(JPEG)、MPEG-l、MPEG-2和H. ^4/AVC類型。例如可以使用H. 264/ 多視圖視頻編碼(MVC)類型作為增強(qiáng)層圖像的壓縮編碼類型。此外,該立體圖像被分配為一幅基礎(chǔ)層圖像和一幅增強(qiáng)層圖像,但多視角圖像被分配為一幅基礎(chǔ)層圖像及多幅增強(qiáng)層圖像。可以根據(jù)攝像機(jī)的位置或排列的類型來確定將多視角圖像劃分為一幅基礎(chǔ)圖像和一幅或更多幅增強(qiáng)層圖像的標(biāo)準(zhǔn),或者可以任意地確定而無需特定標(biāo)準(zhǔn)。3D圖像通常基于兩眼的立體視角原理。兩眼之間的視差(即,根據(jù)兩眼間相互分開的大約65mm的間隔導(dǎo)致的雙眼視差)是允許感知三維的重要的因素,并且當(dāng)左右眼分別觀看相關(guān)的2D圖像時,大腦將兩幅不同的圖像融合而生成原始的深度敏感度和3D圖像真實敏感度。3D圖像的顯示主要分為立體類型、體積類型和全息類型。例如,應(yīng)用立體技術(shù)的 3D圖像顯示裝置是將深度信息加入到2D圖像之中并使觀察者基于該深度信息來感受到3D 結(jié)構(gòu)的生動性和真實敏感度的圖像顯示裝置。顯示3D圖像的類型主要包括佩戴眼鏡的類型和不用佩戴眼鏡的無眼鏡類型。這里,佩戴的眼鏡的類型分為無源類型和有源類型。該無源類型是使用偏振濾波器將一幅圖像劃分為左圖像L和右圖像R,并顯示劃分后的圖像的類型,S卩,用戶佩戴偏振眼鏡來觀看圖像的類型,該偏振眼鏡允許兩眼分別觀看左圖像L和右圖像R并包括所述偏振濾波器。有源類型是使用液晶顯示器(LCD)快門來劃分左眼和右眼的類型,即,通過順序地覆蓋左眼和右眼而劃分左圖像L和右圖像R的類型。這種有源類型是周期性重復(fù)時間分離畫面的類型,用戶佩戴眼鏡來觀看圖像,該眼鏡包括與上述周期同步的電子快門。該有源類型可以稱為時間分離類型或快門眼鏡類型。公認(rèn)的無眼鏡類型的代表類型包括雙凸透鏡類型和視差格柵類型,在雙凸透鏡類型中,一個包括具有圓柱形外形的垂直排列的透鏡陣列的雙凸透鏡的透鏡盤被設(shè)置在圖像面板前,而在視差格柵類型中,具有周期性狹縫的格柵層被設(shè)置在圖像面板的上部。圖3是表示根據(jù)一個實施方式的顯示裝置的構(gòu)造的圖。參照圖3,顯示裝置100包括調(diào)諧器101、信號處理器102、圖像處理器103、格式器 104、顯示單元105、包括光接收器107的眼鏡單元106、音頻處理器108、音頻輸出單元109、 用戶輸入接口 110、網(wǎng)絡(luò)接口 111、外部裝置接口 112、存儲單元113、深度檢測器114和控制器 115。參照圖4,深度檢測器114包括差異(disparity)圖生成單元1141、直方圖生成單元1142、比較單元1143和深度確定單元1144。下文中,將詳細(xì)描述圖3和圖4中的各個元件。調(diào)諧器101從通過天線接收到的RF廣播信號中選擇與由用戶選擇的頻道或所有預(yù)存的頻道相對應(yīng)的射頻(RF)廣播信號。此外,調(diào)諧器101將選擇的RF廣播信號轉(zhuǎn)換為中頻(IF)或基帶圖像/音頻信號。例如,當(dāng)選擇的RF廣播信號是數(shù)字廣播信號時,調(diào)諧器101將選擇的RF廣播信號轉(zhuǎn)換為數(shù)字IF(DIF)信號。當(dāng)選擇的RF廣播信號是模擬廣播信號時,該調(diào)諧器101將選擇的RF廣播信號轉(zhuǎn)換為模擬基帶圖像/音頻信號(CVBS/SIF)。也就是說,該調(diào)諧器101可以處理數(shù)字廣播信號或者模擬廣播信號。從調(diào)諧器101輸出的模擬基帶圖像/音頻信號 (CVBS/SIF)可以直接輸入到控制器115。而且,調(diào)諧器101可以接收依照先進(jìn)電視系統(tǒng)委員會的單載波的RF廣播信號,或者依照數(shù)字視頻廣播(DVB)類型的多載波的RF廣播信號。調(diào)諧器101從通過天線接收到的RF廣播信號中順序選擇用頻道存儲功能存儲的所有廣播頻道的RF廣播信號,以將選擇的信號轉(zhuǎn)換為IF或基帶圖像/音頻信號。這里,在廣播信號中包括的圖像包括3D圖像和2D圖像。因此,當(dāng)接收到2D圖像時,根據(jù)一個實施方式的顯示裝置控制格式器104,使得格式器104旁路該2D圖像,從而維持2D圖像和3D圖像之間的向后兼容性。3D圖像例如可以是圖1中各種格式中的一種。信號處理器102對從調(diào)諧器101接收到的廣播信號進(jìn)行處理。為此,信號處理器 102包括用于解調(diào)廣播信號的解調(diào)器(未示出)和用于解復(fù)用解調(diào)后的廣播信號的解復(fù)用器(未示出)。構(gòu)成信號處理器102的解調(diào)器接收由調(diào)諧器101轉(zhuǎn)換的DIF信號以執(zhí)行解調(diào)操作。例如,當(dāng)從調(diào)諧器101輸出的DIF信號是基于ATSC類型的時,該解調(diào)器執(zhí)行8_殘留邊帶(VSB)或7-VSB解調(diào)。此外,該解調(diào)器可以執(zhí)行信道解碼。為此,該解調(diào)器可以包括網(wǎng)格解碼器、去交織器和里德所羅門(舊)解碼器,從而執(zhí)行網(wǎng)格解碼、交織和RS解碼。例如,當(dāng)從調(diào)諧器101輸出的DIF信號是基于DVB類型時,該解調(diào)器執(zhí)行編碼正交頻分多址(COFDMA)解調(diào)。此外,該解調(diào)器可以執(zhí)行信道解碼。為此,該解調(diào)器可以包括卷積解碼器、去交織器、以及RS解碼器,從而執(zhí)行網(wǎng)格解碼、交織和RS解碼。該解調(diào)器可以執(zhí)行信道解碼,接著輸出流信號。這里,流信號可以是復(fù)用了圖像信號、音頻信號和數(shù)據(jù)信號的信號。例如,該流信號可以是復(fù)用了基于MPEG-2標(biāo)準(zhǔn)的圖像信號和基于杜比AC-3標(biāo)準(zhǔn)的音頻信號的MPEG-2傳輸流(TS)。具體地說,MPEG-2的TS可以包括一個4字節(jié)的頭和184字節(jié)的有效載荷。可以依據(jù)ATCS類型和DVB類型分別包括解調(diào)器。即,該解調(diào)器可以包括ATSC解調(diào)器和DVB解調(diào)器。從解調(diào)器輸出的流信號被輸入到解復(fù)用器。解復(fù)用器對輸入流進(jìn)行解復(fù)用。例如,當(dāng)輸入MPEG-2的TS流時,解復(fù)用器可以將 MPEG-2的TS流解復(fù)用為圖像信號、音頻信號和數(shù)據(jù)信號。這里,輸入到解復(fù)用器的流信號可以是從調(diào)諧器101、解調(diào)器或者外部設(shè)備接口 112輸出的流信號。圖像處理器103對解復(fù)用后的圖像信號進(jìn)行圖像處理。為此,圖像處理器103可以包括圖像解碼器和一個縮放器。圖像解碼器對解復(fù)用后的圖像信號進(jìn)行解碼,縮放器對解碼后的圖像信號的分辨率進(jìn)行縮放從而在顯示單元105上進(jìn)行顯示。圖像解碼器可以包括基于各種標(biāo)準(zhǔn)的解碼器。例如,圖像解碼器可以包括MPEG-2 解碼器、H. 264解碼器、MPEG-C解碼器(MPEG-C第三部分)、MVC解碼器和FTV解碼器中的至少一種。圖像處理器103執(zhí)行用于實現(xiàn)屏上顯示(OSD)的處理。為此,圖像處理器103可以進(jìn)一步包括OSD生成器(未示出)。因此,在輸出解碼后的3D圖像時,當(dāng)接收到來自外部的OSD請求時,圖像處理器103控制OSD生成器,使該OSD生成器生成OSD數(shù)據(jù)。此外,圖像處理器103將生成的OSD數(shù)據(jù)包括在解碼后的3D圖像數(shù)據(jù)中,并輸出該數(shù)據(jù)。格式器104從圖像處理器103接收包括3D圖像或OSD數(shù)據(jù)的圖像數(shù)據(jù),并依據(jù)顯示單元105的顯示格式來重新排列接收到的數(shù)據(jù)。顯示單元105從格式器104接收重新排列的圖像數(shù)據(jù)并在屏幕上輸出接收到的數(shù)據(jù)。用戶可以使用眼鏡單元106來觀看輸出到屏幕上的3D圖像。這里,格式器104生成關(guān)于輸出到顯示單元105上的3D圖像的同步信號Vsync。此外,格式器104通過紅外線 (IR)發(fā)射器將生成的同步信號Vsync輸出到包含在眼鏡單元106中的光接收器107中。可以在必要的時候包括該頂發(fā)射器,在這種情況下,根據(jù)系統(tǒng)環(huán)境,頂發(fā)射器可被構(gòu)造為格式器104的內(nèi)部配置模塊,或者可以被配置為一個單獨(dú)的外部配置模塊。在以上的描述中,雖然在圖3中未示出,但必要的時候,3D圖像相關(guān)的處理可以進(jìn)一步包括幀率轉(zhuǎn)換器(FRC)。FRC用于轉(zhuǎn)換輸入圖像的幀率。例如,F(xiàn)RC將60Hz的幀率轉(zhuǎn)換為120Hz的幀率或240Hz的幀率。這里,當(dāng)60Hz的幀率被轉(zhuǎn)換為120Hz的幀率時,同樣的第一幀可以被插入到第一幀和第二幀之間,或者從第一幀和第二幀預(yù)測的第三幀可以被插入到第一和第二幀之間。當(dāng)60Hz的幀率被轉(zhuǎn)換為240Hz的幀率時,可以進(jìn)一步地插入三個同樣的幀,或者插入三個預(yù)測的幀。這里,圖像處理器103和格式器104被配置為分離的模塊,但是,依據(jù)情況,圖像處理器103和格式器104可以被配置為一個一體的模塊,在這種情況下,F(xiàn)RC可以包括在一體的模塊中。音頻處理器108接收音頻信號并對接收到的音頻信號執(zhí)行一系列的信號處理操作。由音頻處理器108處理過的音頻信號通過音頻輸出單元107輸出。更具體地說,音頻處理器108根據(jù)由控制器108確定的第一組參數(shù)設(shè)置值和第二組參數(shù)設(shè)置值來對所述音頻信號進(jìn)行信號處理。這里,第一組包括中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù)中的至少一種,而第二組包括前級別參數(shù)、低頻效果 (LFE)級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)中的至少一種。為此,音頻處理器108可以包括用于對音頻信號進(jìn)行解碼的音頻解碼器、按照聲道來分離解碼后的音頻信號的聲道分離器、和對按照聲道分離后的音頻信號執(zhí)行3D處理的3D處理器。S卩,聲道分離器可以從包括在音頻信號中的右音頻信號和左音頻信號中提取環(huán)繞信號,并且3D處理器可以對提取的環(huán)繞信號執(zhí)行環(huán)繞效果處理。此外,聲道分離器可以從右音頻信號和左音頻信號中分離立體聲信號,并且3D處理器可以對分離的立體聲信號執(zhí)行用于給出環(huán)繞效果的3D處理。具體地說,音頻處理器108可以執(zhí)行串音消除來移除來自左音頻信號和右音頻信號的反信號,并基于觀眾的頭和耳朵的位置來對HRTF類型的音頻信號進(jìn)行信號處理。S卩,音頻處理器108從接收到的音頻信號中提取包含左音頻信號和右音頻信號的第二聲道的信號。音頻處理器108從提取的第二聲道的信號中分離出主要包括用戶語音的單聲道信號和主要包括外圍信號的立體聲信號。音頻處理器108通過應(yīng)用環(huán)繞算法來對分離的立體聲信號執(zhí)行3D處理。環(huán)繞算法包括使用HRTF類型技術(shù)的3D定位技術(shù)和用于在立體聲揚(yáng)聲器環(huán)境中實現(xiàn)環(huán)繞的串音消除。這里,音頻處理器108可以將音頻信號的聲道分離為后聲道和前聲道。另外,音頻處理器108可以將一個聲道分離為5. 1聲道等,當(dāng)信號為立體聲信號時,音頻處理器108可以將一個聲道劃分為左聲道和右聲道。這里,當(dāng)使用兩個揚(yáng)聲器來再現(xiàn)立體聲聲音時,被傳輸?shù)铰牨娪叶淖舐暤缆曇艉捅粋鬏數(shù)铰牨娮蠖挠衣暤缆曇舯环Q為串音。因此當(dāng)移除相應(yīng)的部分時,即使在普通的揚(yáng)聲器環(huán)境也可以進(jìn)行3D聲音定位。此外,最新的環(huán)繞算法可以對立體聲成分加入混響, 以實現(xiàn)比立體聲更廣的音域。在這種情況下,音頻處理器108根據(jù)控制器108確定的參數(shù)設(shè)置值來對音頻信號執(zhí)行信號處理。其中這些參數(shù)包括第一組參數(shù)以及第二組參數(shù),該第一組參數(shù)包括中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù),該第二組參數(shù)包括前級別參數(shù)、LFE級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)。該參數(shù)設(shè)置值是根據(jù)3D圖像的深度確定的。這里,第一組的參數(shù)設(shè)置值隨著3D 圖像深度的增大而成正比地增大,而第二組的參數(shù)設(shè)置值隨著3D圖像深度的增大而成反比地增大。也就是說,當(dāng)3D圖像的深度增大時,第一組的中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù)的設(shè)置值與增大的深度成正比地增大,第二組的前級別參數(shù)、LFE級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)的設(shè)置值與增大的深度成反比地減小。相反地,當(dāng)3D圖像的深度減小時,第一組的中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù)的設(shè)置值與減小的深度成正比地減小,而第二組的前級別參數(shù)、LFE級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)的設(shè)置值與減小的深度成反比地增大。中心級別參數(shù)是用來控制單聲道信號(即,語音信號)的級別的參數(shù)。前級別參數(shù)是用來控制前聲道的左/右信號的級別的參數(shù)。后級別參數(shù)是用來控制后聲道的左/右信號的級別的參數(shù)。第一擴(kuò)展強(qiáng)度參數(shù)是用來控制高頻波段的擴(kuò)展靈敏度大小的參數(shù),而第二擴(kuò)展強(qiáng)度參數(shù)是用來控制低頻波段的擴(kuò)展靈敏度大小的參數(shù)。LFE級別參數(shù)是用控制具有高頻效果的高音調(diào)的級別的參數(shù)?;祉懖糠謪?shù)是用來控制混響的大小以生成回音效果的參數(shù)。其中,后聲道可以為從顯示裝置100的后方輸出的音頻信號。前聲道可以為從顯示裝置100的前方輸出的音頻信號。中心聲道可以為從顯示裝置100的中心輸出的音頻信號。用戶輸出接口 110將用戶輸入的信號傳輸?shù)娇刂破?15,或?qū)⑿盘枏目刂破?15傳
輸給用戶。例如,用戶輸入接口 110可以從分離的遙控器接收用戶輸入信號(例如開/關(guān)電源、頻道選擇或屏幕設(shè)置),或通過多種通信類型(例如RF通信類型和頂通信類型)將信號從控制器115傳輸?shù)竭b控器。此外,例如,用戶輸入接口 110可以將從本地按鍵(未示出)(例如電源鍵、頻道鍵、音量鍵或設(shè)置鍵)輸入的用戶輸入信號傳輸?shù)娇刂破?15。用戶輸入接口 110可以將從感應(yīng)用戶動作的感測單元輸入的用戶輸入信號傳輸?shù)娇刂破?15,或者將信號從控制器115傳輸?shù)礁袦y單元。其中,感測單元可以包括觸摸傳感器、音頻傳感器、位置傳感器和運(yùn)動傳感器。網(wǎng)絡(luò)接口 111提供用于將顯示裝置100連接到包括因特網(wǎng)網(wǎng)絡(luò)的有線/無線網(wǎng)絡(luò)的接口。網(wǎng)絡(luò)接口 111可以包括用于接入到有線網(wǎng)絡(luò)的以太網(wǎng)終端。無線局域網(wǎng)(WLAN)、 Wi-Fi、無線寬帶(Wibro)、全球互通微波接入(Wimax)和高速下行鏈路分組接入(HSDPA)通信標(biāo)準(zhǔn)可以用作有線網(wǎng)絡(luò)的接入。網(wǎng)絡(luò)接口 111可以接收由因特網(wǎng)/內(nèi)容提供商或網(wǎng)絡(luò)運(yùn)營商通過網(wǎng)絡(luò)提供的內(nèi)容或數(shù)據(jù)。即,網(wǎng)絡(luò)接口 111可以通過網(wǎng)絡(luò)接收由因特網(wǎng)/內(nèi)容提供商提供的內(nèi)容(例如電影、廣告、游戲、視頻點播(VOD)和與上述內(nèi)容相關(guān)的廣播信號和信息)。此外,網(wǎng)絡(luò)接口 111 可以接收由網(wǎng)絡(luò)運(yùn)營商提供的固件的更新信息和更新文件。此外,網(wǎng)絡(luò)接口 111例如可以接入網(wǎng)際協(xié)議(IP) TV,接收已經(jīng)由IPTV的機(jī)頂盒處理過的圖像信號、音頻信號或數(shù)據(jù)信號以進(jìn)行雙向通信,網(wǎng)絡(luò)接口 111還將接收到的信號傳輸?shù)娇刂破?15。網(wǎng)絡(luò)接口 111可以將經(jīng)過控制器115處理的信號傳輸?shù)絀PTV的機(jī)頂
品.ο根據(jù)傳輸網(wǎng)絡(luò)的類型,IPTV可以包括ADSL-TV、VDSL-TV或FTTH-TV。IPTV可以包括使用DSL的電視、使用DSL的視頻、使用IP的電視(TVIP)或廣播電視(BTV)。此外,IPTV 可以包括全瀏覽電視或可以接入到因特網(wǎng)的因特網(wǎng)電視。外部裝置接口 112可以從連接到其上的外部裝置接收數(shù)據(jù)/發(fā)送數(shù)據(jù)到連接到其上的外部裝置。為此,外部裝置接口 112可以包括A/V輸入/輸出單元(未示出)或無線通信單元(未示出)。外部裝置接口 112可以按照有線或者無線方式接入外部裝置(例如數(shù)字多功能盤 (DVD)、藍(lán)光、游戲機(jī)、相機(jī)、便攜攝像機(jī)或計算機(jī)(例如筆記本計算機(jī)))。外部裝置接口 112 將通過與之連接的外部裝置輸出的外部圖像、音頻或數(shù)據(jù)信號傳輸給顯示裝置100的控制器115。此外,外部裝置接口 112可以向與之連接的外部裝置輸出經(jīng)過控制器115處理過的圖像、音頻或數(shù)據(jù)信號。為此,外部裝置接口 112可以包括A/V輸入/輸出單元(未示出) 或無線通信單元(未示出)。為了使外部設(shè)備的圖像和音頻信號輸入到顯示裝置100中,A/V輸入/輸出單元可以包括通用串行總線(USB)端子、復(fù)合視頻消隱同步(CVBQ端子、分量端子、S-視頻端子 (模擬)、數(shù)字可視接口(DVI)端子、高分辨率多媒體接口(HDMI)端子、RGB端子、和D-SUB 終端。無線通信單元可以與其他電子設(shè)備以無線方式進(jìn)行近場通信(NFC)。顯示裝置 110可以根據(jù)諸如藍(lán)牙、射頻標(biāo)識(RFID)、紅外線數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)、ZigBee、 或數(shù)字生活網(wǎng)絡(luò)聯(lián)盟(DLNA)之類的通信標(biāo)準(zhǔn)與其他電子設(shè)備網(wǎng)絡(luò)連接。此外,外部裝置接口 112可以通過上述端子中的至少一個接入多種機(jī)頂盒,并與機(jī)頂盒進(jìn)行輸入/輸出操作。存儲單元113可以存儲用于在控制器115中對各個信號進(jìn)行處理和控制的程序, 并存儲信號處理后的圖像、音頻或數(shù)據(jù)信號。存儲單元113可以臨時存儲輸入到外部裝置接口 112的圖像、音頻或數(shù)據(jù)信號。 此外,存儲單元113可以利用頻道存儲功能來存儲關(guān)于預(yù)定廣播頻道的信息(例如頻道圖 (channel map))0存儲單元113可以包括閃存類型、硬盤類型、微型多媒體卡、卡型存儲器(例如SD 或》)存儲器)、隨機(jī)存儲器(RAM)、和只讀存儲器(ROM)(例如,電可擦除可編程只讀存儲器 (EEPROM))中的至少一種存儲介質(zhì)。顯示裝置100可以對文件(例如移動圖像文件、靜止圖像文件、音樂文件、文檔文件等)進(jìn)行重放以為用戶提供重放過的文件。存儲單元113可以存儲多個音頻輸出單元109之間的距離信息、音頻輸出單元109 和聽眾之間的距離信息、關(guān)于每個聲道的增益信息等。深度檢測器114檢測3D圖像的深度。深度檢測器114可以通過包括在接收到的廣播信號中的附加信息數(shù)據(jù)來檢測3D 圖像的深度。S卩,接收到的廣播信號由圖像信號、音頻信號和附加信息信號構(gòu)成。接收到的附加信息信號可以包括接收到的圖像信號(具體地說,3D圖像)的深度信息。因此,深度檢測器114對由解復(fù)用器分離出的附加信息數(shù)據(jù)進(jìn)行分析,并且當(dāng)3D 圖像的深度信息存在于經(jīng)過分析的附加信息數(shù)據(jù)中時,深度檢測器114檢測深度信息并將檢測到的信息發(fā)送給控制器115。另外,當(dāng)3D圖像的深度信息未存在于經(jīng)過分析的附加信息數(shù)據(jù)中時,深度檢測器 114根據(jù)對接收到的圖像的分析結(jié)果來檢測深度。為此,深度檢測器114包括差異圖生成單元1141、直方圖生成單元1142、比較單元 1143和深度確定單元1144。差異圖生成單元1141對3D圖像進(jìn)行分析以生成差異圖。也就是說,3D圖像包括左圖像和右圖像。差異圖生成單元1141根據(jù)包括左圖像和右圖像的3D圖像來生成差異圖, 左圖像和右圖像之間具有雙眼視差。差異圖將由左圖像和右圖像之間的區(qū)別而確定的各個對象的差異表達(dá)為各個對象的亮度。3D圖像的匹配方法主要分為基于區(qū)域的方法、基于特征的方法和基于像素的方法?;趨^(qū)域的方法以區(qū)域為單位尋找進(jìn)行匹配的對應(yīng)點。即,基于區(qū)域的方法以區(qū)域為單位將3D圖像與特定大小的窗口相匹配,并且該基于區(qū)域的方法具有根據(jù)本地區(qū)域的大小的相關(guān)關(guān)系。因此,基于區(qū)域的方法考慮到匹配的準(zhǔn)確度和計算速度來確定合適的窗口大小。如圖7所示,在進(jìn)行塊匹配時,當(dāng)左和右圖像是水平的,左圖像和右圖像水平地移動一個匹配窗口大小,在一個相關(guān)性最強(qiáng)的位置上得到dx,從而預(yù)測差異。在離攝像機(jī)較遠(yuǎn)的對象中,顯示的立體圖像的差異就小,在離攝像機(jī)較近的對象中,顯示的立體圖像的差異就大。按照亮度級來表現(xiàn)差異區(qū)別得到差異圖(或,深度圖)。即,越近的對象顯示得越亮,越遠(yuǎn)的對象顯示得越暗,從而顯示出了目標(biāo)對象的距離信息。圖8和9示出了在3D圖像中的左和右圖像的示例,圖10示出了從圖8和9的圖像中提取的差異圖的一個示例。如圖10所示,近處的照明設(shè)備的亮度顯示地比后方的攝像機(jī)或?qū)懽峙_要更亮。很多種從立體圖像生成差異圖的方法已經(jīng)被提出,本發(fā)明不限于生成差異圖的特定方法。直方圖生成單元1142接收由差異圖生成單元1141生成的差異圖,并通過接收的差異圖生成直方圖。圖5示出了靠近攝像機(jī)的對象的差異圖,圖6示出了對應(yīng)于圖5的差異圖的直方圖。如圖5的(a)部分和(b)部分所示,可以看到一個球體正在接近攝像機(jī),因此在 (b)部分的球體的大小比在(a)部分的球體的大小更大,且在(b)部分的球體比在(a)部分的球體更亮。相應(yīng)地,如圖6的(a)和(b)部分所示,可以看到,直方圖的峰值出現(xiàn)在(a)部分的位置A,接著移動到(b)部分中的具有亮度增加了 W的更亮的值的位置B。也就是說, 隨著球體的接近,到球體的距離變得更短。因此,球體變得更亮,因此在圖6的(b)部分中, 與直方圖的B位置相對應(yīng)的亮度值的像素量增加。在這個實施方式中,利用這樣的特性來判斷一個對象是變得更近還是更遠(yuǎn),S卩,該特性為當(dāng)對象接近時,差異圖的直方圖的峰值點發(fā)生移動。也就是說,利用直方圖中的峰值點的移動特性來決定3D圖像的深度的增大或減小。為此,直方圖生成單元1142根據(jù)前一幀的差異圖來生成直方圖,并根據(jù)當(dāng)前幀的差異圖來生成直方圖。比較單元1143對直方圖生成單元1142生成的前一幀的直方圖和當(dāng)前幀的直方圖進(jìn)行比較,并將這兩幀的直方圖的比較結(jié)果傳送到深度確定單元1144。也就是說,使用兩幀的直方圖的峰值點之間的差異來計算變近或變遠(yuǎn)的對象的移動距離。此外,比較單元1143可以通過從當(dāng)前幀的直方圖中減去前一幀的直方圖來移除關(guān)于靜態(tài)部分的信息并且僅提取關(guān)于移動部分的信息,從而通過提取出的信息來確定峰值點的移動。深度確定單元1144通過比較單元1143的比較結(jié)果來確定3D圖形最終深度。由于差異圖的直方圖中的每個灰度值表示與攝像機(jī)之間的距離,因此深度確定單元1144可以計算基于在與當(dāng)前幀相對應(yīng)的直方圖中的峰值點的灰度值的距離值與基于在前一幀的直方圖中的峰值點的灰度值的距離值之間的差值,將該差值作為3D圖像的深度。這里,3D圖像的深度是當(dāng)前幀的直方圖中的峰值點與前一幀的直方圖中的峰值點間的移動距離??刂破?15控制顯示裝置110總體操作。例如,控制器115可以控制調(diào)諧器101,以使得調(diào)諧器101調(diào)諧與用戶所選的頻道或預(yù)定頻道相對應(yīng)的RF廣播。此外,控制器115可以根據(jù)通過用戶輸入接口 110輸入的用戶命令或內(nèi)部程序來控制顯示裝置100。例如,控制器115控制調(diào)諧器101,以根據(jù)通過用戶輸入接口 110接收到的特定頻道選擇命令來輸入選擇的頻道的信號。控制器115處理選擇的頻道的圖像、音頻和數(shù)據(jù)信號??刂破?15可以允許通過顯示單元105和音頻輸出單元109將用戶選擇的頻道信息與處理后的圖像或音頻信號一起輸出。作為另一示例,控制器115可以根據(jù)通過用戶輸入接口 110接收到的外部裝置圖像再現(xiàn)命令來允許通過顯示單元105和音頻輸出單元109輸出通過外部裝置接口 112輸入的和從外部裝置(例如,攝像機(jī)或便攜攝像機(jī))輸出的圖像信號或音頻信號??刂破?15可以控制顯示單元105以顯示圖像。例如控制器115可以執(zhí)行控制以使顯示單元105顯示通過調(diào)諧器101輸入的廣播圖像、通過外部裝置接口 112輸入的外部輸入圖像、通過網(wǎng)絡(luò)接口 111輸入的圖像或在存儲單元113中存儲的圖像。這里,顯示在顯示單元105上的圖像可以是運(yùn)動圖像或靜止圖像,以及2D圖像或者3D圖像??刂破?15生成關(guān)于由顯示單元105顯示的圖像中的特定對象的3D對象并對該 3D對象進(jìn)行顯示。例如,對象可以是訪問的網(wǎng)頁畫面(例如,報紙、雜志等)、電子節(jié)目指南 (EPG)、各種菜單、Widjet、窗件、靜止圖像、運(yùn)動圖像和文本中的至少一個??梢詫⒃?D對象處理為具有與在顯示單元105顯示的圖像的深度不同的深度。可以將該3D對象處理為使該3D對象比顯示單元105上顯示的圖像更突出。控制器115針對對音頻信號進(jìn)行信號處理的至少一個參數(shù)確定基于由深度檢測器114檢測到的3D圖像的深度的設(shè)置值,并進(jìn)行控制以基于所確定的設(shè)置值來對音頻信號進(jìn)行信號處理。由控制器115確定的參數(shù)包括的第一組參數(shù)和第二組參數(shù),該第一組參數(shù)包括中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù),該第二組參數(shù)包括前級別參數(shù)、 LFE級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)。具體地說,當(dāng)為了生成另一幅圖像而將深度信息與左圖像L和右圖像R之一一起發(fā)送時,控制器115基于深度檢測器114檢測到的深度信息來為參數(shù)確定設(shè)置值。深度是3D圖像的右圖像比3D圖像的左圖像突出的程度。也就是說,假設(shè)傳輸?shù)臄?shù)據(jù)是左圖像和深度信息,當(dāng)深度較大時,則表明對象的突出程度較大,而當(dāng)深度較小時, 則表明對象突出的程度較小。同理,當(dāng)傳輸?shù)臄?shù)據(jù)是右圖像時,用戶可以感覺到對象的深度的程度與左圖像不同。當(dāng)對象突出的程度較大時,則表明當(dāng)前顯示的3D圖像中存在有明顯的部分,但是當(dāng)對象突出的程度較小時,則表明當(dāng)前顯示的圖像中不存在明顯的部分。因此,控制器115根據(jù)深度來實現(xiàn)音頻信號的環(huán)繞聲效果。
在普通的環(huán)繞聲效果中,通過擴(kuò)寬音頻信號的方向性(也就是左方向性和右方向性)的信號的范圍來增強(qiáng)空間敏感度和立體聲敏感度。然而當(dāng)實現(xiàn)環(huán)繞聲效果時,降低了音頻信號的前方向性和后方向性的深度敏感度和位置敏感度。因此,控制器115能夠根據(jù)3D圖像的深度使音頻信號的左方向性和右方向性得到增強(qiáng)或使音頻信號的前方向性和后方向性得到增強(qiáng)。也就是說,當(dāng)3D圖像的深度較大時,則表示顯示在畫面上的對象突出的程度較大,并且在畫面上顯示有明顯的對象,并因此控制器115確定參數(shù)的設(shè)置值,以使前方向性和后方向性增強(qiáng)的程度比左方向性和右方向性大。此外,當(dāng)3D圖像的深度較小時,則表示顯示在畫面上的對象突出的程度較小,并且在畫面上沒有明顯的部分,因此控制器115確定參數(shù)的設(shè)置值,以使左方向性和右方向性增強(qiáng)的程度比3D定位大,從而實現(xiàn)寬音域和大的環(huán)繞聲效果。在這種情況下,隨著第一組參數(shù)中包括的中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù)的設(shè)置值的增大,增強(qiáng)了前方向性和后方向性。隨著第二組參數(shù)中包括的前級別參數(shù)、LFE級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)的設(shè)置值的增大,增強(qiáng)了左方向性和右方向性。從而,隨著檢測到的深度增大,控制器115增大屬于第一組參數(shù)的設(shè)置值。此外, 當(dāng)屬于第一組的參數(shù)的設(shè)置值增大時,控制器115與該增大對應(yīng)地減小屬于第二組的參數(shù)的設(shè)置值。此外,隨著檢測到的深度減小,控制器115增大屬于第二組的參數(shù)的設(shè)置值。此外,當(dāng)屬于第二組的參數(shù)的設(shè)置值增大時,控制器115與該增大相對應(yīng)地減小屬于第一組的參數(shù)的設(shè)置值。參考圖11,可見,當(dāng)圖11的(a)部分中的左圖像201和右圖像202之間的間隔“a” 小于圖11中(b)部分中的左圖像201和右圖像202之間的間隔“b”時,圖11的(a)部分的對象的深度a’小于圖11中(b)部分的對象的深度b’。如圖11所示,在前一幀的深度是a’而當(dāng)前幀的深度是b’時,控制器115根據(jù)深度從a’到b’的增大成比例地增大屬于第一組的參數(shù)的設(shè)置值。在這種情況下,同樣地,控制器115減小屬于第二組的參數(shù)的設(shè)置值。另一方面,在前一幀的深度是b’而當(dāng)前幀的深度是a’時,控制器115根據(jù)深度從 b’到a’的減小成比例地增大屬于第二組的參數(shù)的設(shè)置值。在這種情況下,同樣地,控制器 115減小屬于第一組的參數(shù)的設(shè)置值。圖12和圖13是示出根據(jù)一個實施方式的顯示裝置的操作方法的流程圖。圖14 和圖15是用于說明圖12和圖13的顯示裝置的操作方法的示例的圖。參考圖12,首先,在操作SlOl中,顯示裝置100接收3D圖像。這里,接收到的3D 圖像可以是來自外部裝置的外部輸入圖像、通過網(wǎng)絡(luò)從內(nèi)容提供商輸入的圖像、來自于由調(diào)諧器101接收到的廣播信號的廣播圖像、或存儲在存儲單元113中的圖像。控制器115可以確定接收到的圖像是否是3D圖像。例如,控制器115可以接收在輸入圖像流的元數(shù)據(jù)中或報頭中指示一幅圖像是否是3D圖像的信息,并基于接收到的信息來確定接收到的圖像是否是3D圖像。接下來,在操作S102中,顯示裝置100檢測接收到的3D圖像的深度。深度檢測器114檢測接收到的3D圖像的深度。例如,當(dāng)包含在接收到的廣播信號中的圖像是3D圖像時,深度檢測器114分析與該3D圖像相關(guān)的附加信息。此外,當(dāng)指示3D圖像的深度的信息包括在分析后的附加信息中時,深度檢測器114提取該信息以檢測該3D圖像的深度。此外,當(dāng)附加信息中沒有包含指示該3D圖像深度的信息時,深度檢測器114利用接收到的3D圖像來生成差異圖,并利用生成的差異圖來生成直方圖,并利用生成的直方圖的峰值點的值來檢測3D圖像的深度。顯示裝置100確定是否需要利用檢測出的深度進(jìn)行3D信號處理,當(dāng)需要進(jìn)行3D 信號處理時,在操作S103中,顯示裝置100響應(yīng)于檢測到的深度來對用于處理輸入音頻信號的至少一個參數(shù)值進(jìn)行設(shè)置。例如,當(dāng)深度沒有改變時,也就是說,當(dāng)前一幀的深度與當(dāng)前幀的深度是相同時, 控制器115確定不需要進(jìn)行3D信號處理,從而保持預(yù)設(shè)參數(shù)值與之前的相同。此外,當(dāng)深度改變時,也就是說,前一幀的深度值與當(dāng)前幀的深度值不同時,控制器115確定需要進(jìn)行3D信號處理,從而根據(jù)當(dāng)前幀的深度來改變預(yù)設(shè)參數(shù)值。在這里,檢測出的深度可以有特定的常量或特定的+/_值。例如,當(dāng)利用接收到的附加信息檢測出深度時,深度可以有特定的常量。在這種情況下,當(dāng)該常量小時,這表明3D圖像中包括的對象的突出程度小。當(dāng)該常量大時,這表明3D 圖像中包括的對象的突出程度大。當(dāng)利用直方圖中的峰值點檢測出深度時,深度可以具有特定的+/_值。也就是說,在當(dāng)前幀的深度比前一幀的深度大時,檢測到的深度具有特定的+值。 相反地,在當(dāng)前幀的深度比前一幀的深度小時,檢測到的深度值具有特定的-值。如上文所述,當(dāng)檢測到的深度有特定的常量時,控制器115按照與該常量對應(yīng)的方式為至少一個參數(shù)確定設(shè)置值。例如,存儲單元113可以存儲要根據(jù)與各深度對應(yīng)的常量值而確定的至少一個參數(shù)的設(shè)置值。當(dāng)設(shè)置值被存儲在存儲單元113中時,控制器115從存儲單元113中提取與檢測到的深度相對應(yīng)的設(shè)置值,并允許通過將提取的設(shè)置值應(yīng)用到音頻處理單元108來對接收到的音頻信號進(jìn)行信號處理。在這種情況下,確定的設(shè)置值根據(jù)深度而增大或減小。例如,當(dāng)深度是一個正值時,這表示3D圖像的深度增大,控制器115增大屬于第一組的參數(shù)的設(shè)置值,但減小屬于第二組的參數(shù)的設(shè)置值。相反地,當(dāng)深度是一個負(fù)值時,這表示3D圖像的深度減小,控制器115減小屬于第一組的參數(shù)的設(shè)置值,但增大屬于第二組的參數(shù)的設(shè)置值。當(dāng)控制器115確定了至少一個參數(shù)的設(shè)置值時,音頻處理器108在操作S104中通過應(yīng)用確定的設(shè)置值來對接收到的音頻信號進(jìn)行信號處理。對音頻信號的信號處理可以如下進(jìn)行。音頻處理器108用聲道將接收到的音頻信號分離。例如,音頻處理器108可以從音頻信號中分離出后聲道和前聲道。后聲道是從顯示裝置100的后方輸出的音頻信號,而前聲道是從顯示裝置100的前方輸出的音頻信號。另外,音頻處理器108可以將音頻信號分離為5. 1聲道等,或當(dāng)實現(xiàn)立體聲時,將音頻信號分離為左聲道和右聲道。
當(dāng)音頻信號按聲道被分離時,音頻處理器108通過對按聲道分離的音頻信號應(yīng)用所確定的參數(shù)的設(shè)置值來進(jìn)行信號處理。例如,如果深度大,音頻處理器108可以進(jìn)行信號處理以在輸出音頻信號時增強(qiáng)針對前方向性和后方向性的聲音。相反,如果深度小,音頻處理器108可以進(jìn)行信號處理以在輸出音頻信號時增強(qiáng)針對左方向性和右方向性的聲音。也就是說,如圖14所示,當(dāng)音頻處理器108增強(qiáng)音頻信號的前方向性和后方向性信號時,聽眾700 ( S卩,用戶)可以聽到增強(qiáng)了深度敏感度和位置敏感度的聲音,而不是增強(qiáng)了“加寬”的效果。換句話說,當(dāng)控制器115增大了包括中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù)中的至少一種的第一組參數(shù)的設(shè)置值,并減小了包括前級別參數(shù)、 LFE級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)中的至少一種的第二組參數(shù)的設(shè)置值,如圖14所述,則輸出的是增強(qiáng)了深度敏感度和位置敏感度的聲音。此外,如圖15所示,當(dāng)音頻處理器108增強(qiáng)了音頻信號的左方向性和右方向性信號時,聽眾800可以聽到增強(qiáng)了空間敏感度和立體聲敏感度的聲音,而不是增強(qiáng)了深度敏感度和位置敏感度的效果。換句話說,當(dāng)控制器115減小了包括中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù)中的至少一種的第一組的參數(shù)的設(shè)置值,并增大了包括前級別參數(shù)、LFE級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)中的至少一種的第二組的參數(shù)的設(shè)置值,如圖15 所示,輸出的是增強(qiáng)了空間敏感度和立體聲敏感度的聲音。如上所述,當(dāng)音頻處理器108對音頻信號進(jìn)行信號處理時,在操作S105中,通過音頻輸出單元109輸出經(jīng)過信號處理的音頻信號。根據(jù)本實施方式,提供了一種與現(xiàn)有標(biāo)準(zhǔn)化的立體聲技術(shù)不同的立體聲技術(shù),通過提供與3D圖像顯示裝置一致的立體聲技術(shù)來增強(qiáng)用戶的滿意度。下文中將對上述的深度檢測方法中的一種檢測直方圖的方法進(jìn)行說明。參考圖13,首先,在操作S201中生成一幅差異圖。差異圖生成單元1141通過使用在左圖像和右圖像之間的雙眼視差來根據(jù)3D運(yùn)動圖像生成差異圖,該3D運(yùn)動圖像包括組成3D圖像的左圖像和右圖像。差異圖用于將根據(jù)左圖像和右圖像之間的區(qū)別確定的各個對象的差異(其可以稱為深度)表達(dá)為各個對象的亮度。也就是說,在差異圖中表示的各個對象的亮度代表了相應(yīng)對象的深度。例如,當(dāng)差異圖中表示的一個對象很亮,這表明對應(yīng)對象的深度大,而當(dāng)差異圖中表示的一個對象很暗,這表明對應(yīng)對象的深度小。此外,差異圖生成單元1141為每一幀生成一幅差異圖,并將為每一幀生成的差異圖傳送給直方圖生成單元1142。接下來,在操作S202中,根據(jù)生成的差異圖來生成直方圖。直方圖生成單元1142使用圖5所示生成的差異圖來生成圖6所示的直方圖。直方圖生成單元1142利用發(fā)送來的針對每一幀的差異生成針對每一幀的直方圖。接下來,在操作S203,對生成的直方圖進(jìn)行比較。即,比較單元1143對由直方圖生成單元1142生成的前一幀的直方圖和當(dāng)前幀的直方圖進(jìn)行比較,并根據(jù)比較結(jié)果來輸出結(jié)果值。比較單元1143利用這樣的特性來判斷一個對象是變得更近還是更遠(yuǎn),即,該特性為當(dāng)對象接近時,差異圖的直方圖的峰值點發(fā)生移動。隨后,在操作S204中,利用基于比較結(jié)果的結(jié)果值來計算兩幀的峰值點之間的差值。為此,比較單元1143可以通過從當(dāng)前幀的直方圖減去前一幀的直方圖來移除關(guān)于靜態(tài)部分的信息并且僅提取關(guān)于移動部分的信息,從而通過提取出的信息來確定峰值點的移動。這里,由于差異圖的直方圖中的每個灰度值表示從攝像機(jī)到對象的距離,因此深度確定單元1144可以計算前一幀的直方圖的峰值點的灰度級值與當(dāng)前幀的直方圖的峰值點的灰度級值之間的差值。在操作S205中,當(dāng)計算差值時,將計算出的差值確定為當(dāng)前幀的深度。以上描述了根據(jù)一種實施方式的輸出音頻信號的方法和提供該方法的顯示裝置。 但是該實施方式可以應(yīng)用到包括本發(fā)明的基本內(nèi)容的、提供音頻輸出服務(wù)的系統(tǒng)中以及用于在計算機(jī)中執(zhí)行包括該系統(tǒng)的程序的計算機(jī)可讀記錄介質(zhì)中。根據(jù)實施方式,可提供一種與現(xiàn)有的標(biāo)準(zhǔn)化的立體聲技術(shù)不同的立體聲技術(shù),并且通過輸出與3D圖像數(shù)據(jù)的深度信息相關(guān)的音頻信號,可以提供生動的立體聲。雖然參照多個示例性實施方式對實施方式進(jìn)行了描述,但是應(yīng)該理解,本領(lǐng)域技術(shù)人員可以設(shè)計出落入本發(fā)明的原理的精神和范圍內(nèi)多種其他的修改例和實施方式。更具體地說,在說明書、附圖和權(quán)利要求的范圍內(nèi)可以存在對組成部分和/或主體排列組合的排列方式的各種變形例以及修改例。除了對于組成部分和/或排列方式的修改例和變型例以外,另選的用途對于本領(lǐng)域技術(shù)人員而言也是顯而易見的。
權(quán)利要求
1.一種在顯示裝置中輸出音頻信號的方法,該方法包括以下步驟 接收步驟,接收廣播信號;檢測深度的步驟,檢測包括在所述廣播信號中的三維(3D)圖像的深度; 信號處理步驟,基于檢測到的深度對與所述三維圖像對應(yīng)輸入的音頻信號進(jìn)行信號處理;以及輸出步驟,輸出經(jīng)過信號處理的音頻信號。
2.如權(quán)利要求1所述的方法,其中所述檢測深度的步驟包括以下步驟 從所述廣播信號中分離出附加信息數(shù)據(jù);以及檢測包括在所述附加信息數(shù)據(jù)中的、所述三維圖像的深度信息。
3.如權(quán)利要求1所述的方法,其中所述檢測深度的步驟包括以下步驟 根據(jù)差異圖來生成直方圖;對根據(jù)前一幀的差異圖生成的第一直方圖與根據(jù)當(dāng)前幀的差異圖生成的第二直方圖進(jìn)行比較;以及根據(jù)所述第一直方圖與所述第二直方圖的比較結(jié)果來檢測所述三維圖像的深度。
4.如權(quán)利要求3所述的方法,該方法還包括以下步驟利用來自所述三維圖像的左圖像和右圖像之間的雙眼視差來生成差異圖,所述三維圖像包括所述左圖像和所述右圖像。
5.如權(quán)利要求3所述的方法,其中所述三維圖像的深度是所述第一直方圖的峰值點與所述第二直方圖的峰值點之間的差值。
6.如權(quán)利要求1所述的方法,該方法還包括以下步驟確定用于對所述音頻信號進(jìn)行信號處理的至少一個參數(shù)的設(shè)置值, 其中所述參數(shù)包括第一組的參數(shù)和第二組的參數(shù),與所述三維圖像的深度增大/減小成正比地設(shè)置所述第一組的參數(shù),而與所述三維圖像的深度增大/減小成反比地設(shè)置所述第二組的參數(shù)。
7.如權(quán)利要求6所述的方法,其中所述第一組的參數(shù)包括中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)、和高頻參數(shù)中的至少一種,并且所述第二組的參數(shù)包括前級別參數(shù)、低頻效果(LFE)級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)中的至少一種。
8.如權(quán)利要求7所述的方法,其中設(shè)置至少一種參數(shù)的步驟包括以下步驟隨著所述三維圖像的深度增大而增大所述第一組的參數(shù)值,并且隨著所述三維圖像的深度增大而減小所述第二組的參數(shù)值;以及隨著所述三維圖像的深度減小而減小所述第一組的參數(shù)值,并且隨著所述三維圖像的深度減小而增大所述第二組的參數(shù)值。
9.一種顯示裝置,該顯示裝置包括顯示單元,其顯示包括在接收到的廣播信號中的三維(3D)圖像; 音頻輸出單元,其輸出包括在接收到的廣播信號中的音頻信號; 檢測器,其檢測所顯示的三維圖像的深度;以及控制器,其根據(jù)檢測到的深度來設(shè)置針對所述音頻信號的至少一種參數(shù)值,并基于所設(shè)置的參數(shù)值來對將要通過所述音頻輸出單元輸出的經(jīng)過了信號處理的音頻信號進(jìn)行控制。
10.如權(quán)利要求9所述的顯示裝置,其中所述深度檢測器從包括在接收到的廣播信號中的附加信息數(shù)據(jù)中檢測所述三維圖像的深度信息。
11.如權(quán)利要求9所述的顯示裝置,其中深度檢測器包括直方圖生成單元,其根據(jù)差異圖來生成直方圖;比較單元,其對根據(jù)所述直方圖生成的前一幀的第一直方圖與根據(jù)所述直方圖生成的當(dāng)前幀的第二直方圖進(jìn)行比較;以及深度確定單元,其根據(jù)所述第一直方圖與所述第二直方圖的比較結(jié)果來確定深度。
12.如權(quán)利要求11所述的顯示裝置,其中所述深度檢測器還包括差異圖生成單元,該差異圖生成單元利用組成所述三維圖像的左圖像和右圖像之間的雙眼視差來生成差異圖。
13.如權(quán)利要求11所述的顯示裝置,其中所述深度確定單元將所述第一直方圖的峰值點與所述第二直方圖的峰值點之間的差確定為深度。
14.如權(quán)利要求9所述的顯示裝置,其中所述控制器為第一組的參數(shù)和第二組的參數(shù)確定設(shè)置值,所述第一組的參數(shù)包括中心級別參數(shù)、后級別參數(shù)、第一擴(kuò)展強(qiáng)度參數(shù)和高頻參數(shù)中的至少一種,所述第二組的參數(shù)包括前級別參數(shù)、低頻效果(LFE)級別參數(shù)、第二擴(kuò)展強(qiáng)度參數(shù)和混響部分參數(shù)中的至少一種。
15.如權(quán)利要求14所述的顯示裝置,其中所述控制器與檢測到的深度的增大成正比地增大所述第一組的參數(shù)設(shè)置值,并與檢測到的深度的增大而成反比地減小所述第二組的參數(shù)設(shè)置值。
全文摘要
本發(fā)明公開了一種輸出音頻信號的顯示裝置和方法。該方法包括接收廣播信號,檢測包含在該廣播信號中的3D圖像的深度,基于檢測到的深度對與所述3D圖像對應(yīng)輸入的音頻信號進(jìn)行信號處理,并輸出經(jīng)過信號處理的音頻信號。
文檔編號H04N7/26GK102300109SQ201110159389
公開日2011年12月28日 申請日期2011年4月29日 優(yōu)先權(quán)日2010年4月29日
發(fā)明者李成逑, 金熙振 申請人:Lg電子株式會社