本發(fā)明涉及運(yùn)用在影像處理的一種電子裝置與方法，尤其涉及一種適于產(chǎn)生深度圖的電子裝置與方法。

背景技術(shù)：

隨著科技的發(fā)展，各式各樣的智能型電子裝置，例如平板型電腦、個人數(shù)字化助理、智能型手機(jī)、智能型相機(jī)等，如今都已經(jīng)具有拍攝三維影像的功能。更進(jìn)一步而言，搭配不同的后端演算功能，三維影像還可運(yùn)用于立體建模、動作辨識等用途。

在利用前述智能型電子裝置來針對特定場景拍攝三維影像時，該場景的深度信息是呈現(xiàn)立體視覺效果的一個重要依據(jù)。一般而言，由對應(yīng)的深度圖，運(yùn)算元件可以判斷該場景中的多個物件或特征的相對距離，進(jìn)而精確地呈現(xiàn)相關(guān)于該場景的立體影像。

然而，取得拍攝場景的深度圖仍是困難的。具體而言，受限于拍攝場景的環(huán)境、距離等因素，由所獲取的影像計算深度信息不總是正確的。因此，如何有效且較佳地取得拍攝場景的深度信息與深度圖，仍是本領(lǐng)域人員努力的目標(biāo)之一。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明提供適于產(chǎn)生深度圖的電子裝置與方法，其可適應(yīng)不同的拍攝場景而準(zhǔn)確且有效地取得該場景的深度信息與深度圖。

本發(fā)明的實(shí)施例提供一種適于產(chǎn)生深度圖的電子裝置。電子裝置包括投光裝置、第一攝像裝置、第二攝像裝置與處理裝置。投光裝置投影圖案化的不可見光于場景上。第一攝像裝置獲取可見光信息以產(chǎn)生前述場景的第一影像。第二攝像裝置獲取可見光信息與不可見光信息以產(chǎn)生前述場景的第二影像。處理裝置耦接投光裝置、第一攝像裝置與第二攝像裝置以接收第一影像與第二影像。處理裝置由第一影像與第二影像取得第一深度信息與第二深度信息，并且選擇性地由第一深度信息與第二深度信息產(chǎn)生前述場景的深度圖。更詳細(xì)而言，處理裝置包括第一深度信息單元與第二深度信息單元。第一深度信息單元比對第一影像的可見光影像與第二影像的可見光影像以取得第一深度信息。第二深度信息單元辨識第二影像中的不可見光影像以取得第二深度信息。

本發(fā)明的實(shí)施例提供一種深度圖產(chǎn)生方法，適于具有第一攝像裝置與第二攝像裝置的電子裝置。前述方法包括下列步驟。投影圖案化的不可見光于場景上。獲取前述場景的第一影像，其中第一影像包含可見光信息。獲取前述場景的第二影像，其中第二影像包含可見光信息與不可見光信息，并且不可見光信息包含由前述場景反射圖案化的不可見光所產(chǎn)生的影像信息。由第一影像與第二影像取得第一深度信息與第二深度信息。更詳細(xì)而言，取得第一深度信息與第二深度信息的步驟，包括比對第一影像的可見光影像與第二影像的可見光影像以取得第一深度信息，以及辨識第二影像中的不可見光影像以取得第二深度信息。選擇性地由第一深度信息與第二深度信息產(chǎn)生前述場景的深度圖。

本發(fā)明的實(shí)施例提供另一種適于產(chǎn)生深度圖的電子裝置。電子裝置包括投光裝置、第一攝像裝置、第二攝像裝置與處理裝置。投光裝置投影圖案化的紅外光于場景上。第一攝像裝置獲取紅綠藍(lán)(rgb)光信息以產(chǎn)生前述場景的第一影像。第二攝像裝置，獲取紅綠藍(lán)(rgb)光信息與紅外光信息以產(chǎn)生前述場景的第二影像。處理裝置耦接投光裝置、第一攝像裝置與第二攝像裝置以接收第一影像與第二影像。處理裝置由第一影像與第二影像取得第一深度信息與第二深度信息，并且選擇性地由第一深度信息與第二深度信息產(chǎn)生前述場景的深度圖。更詳細(xì)而言，處理裝置包括第一深度信息單元與第二深度信息單元。第一深度信息單元比對第一影像的紅綠藍(lán)(rgb)影像與第二影像的紅綠藍(lán)(rgb)影像以取得第一深度信息。第二深度信息單元辨識第二影像中的紅外光影像以取得第二深度信息。

本發(fā)明的實(shí)施例提供又一種適于產(chǎn)生深度圖的電子裝置。電子裝置包括投光裝置、第一攝像裝置、第二攝像裝置、第三攝像裝置與處理裝置。投光裝置投影圖案化的紅外光于場景上。第一攝像裝置獲取紅綠藍(lán)(rgb)光信息以產(chǎn)生前述場景的第一影像。第二攝像裝置獲取紅綠藍(lán)(rgb)光信息以產(chǎn)生前述場景的第二影像。第三攝像裝置獲取紅外光信息以產(chǎn)生前述場景的第三影像。處理裝置耦接投光裝置、第一攝像裝置、第二攝像裝置與第三攝像裝置以接收第一影像、第二影像與第三影像。處理裝置由第一影像、第二影像與第三影像取得第一深度信息與第二深度信息，并且選擇性地由第一深度信息與第二深度信息產(chǎn)生前述場景的深度圖。更詳細(xì)而言，處理裝置包括第一深度信息單元與第二深度信息單元。第一深度信息單元比對第一影像與第二影像以取得第一深度信息。第二深度信息單元辨識第三影像以取得第二深度信息。

基于上述，本發(fā)明實(shí)施例所提供的適于產(chǎn)生深度圖的電子裝置與方法，首先投影圖案化的不可見光于拍攝場景，然后利用成對的第一攝像裝置與第二攝像裝置來分別取得拍攝場景的第一影像與第二影像。通過第一影像與第二影像內(nèi)的可見光影像與不可見光影像來分別取得第一深度信息與第二深度信息，然后選擇性地依據(jù)第一深度信息與第二深度信息產(chǎn)生前述拍攝場景的深度圖，可以避免單一深度信息受外在環(huán)境因素或不同拍攝場景的影響而產(chǎn)生誤差，進(jìn)而影響前述場景的深度圖的準(zhǔn)確性。另一方面，攝像裝置的數(shù)量與設(shè)置形式還可對應(yīng)地調(diào)整而不限于前述成對的第一攝像裝置與第二攝像裝置。

為讓本發(fā)明的上述特征和優(yōu)點(diǎn)能更明顯易懂，下文特舉實(shí)施例，并配合附圖作詳細(xì)說明如下。

附圖說明

圖1為依據(jù)本發(fā)明一實(shí)施例所顯示的電子裝置的方框示意圖；

圖2為依據(jù)本發(fā)明一實(shí)施例所顯示的深度圖產(chǎn)生方法的流程圖；

圖3為依據(jù)本發(fā)明一實(shí)施例所顯示的處理裝置的方框示意圖；

圖4為依據(jù)本發(fā)明一實(shí)施例所顯示的從第一深度信息與第二深度信息產(chǎn)生深度圖的方法流程圖；

圖5a為依據(jù)本發(fā)明一實(shí)施例所顯示的評估單元的示意圖；

圖5b為依據(jù)本發(fā)明另一實(shí)施例所顯示的評估單元的示意圖；

圖6為依據(jù)本發(fā)明另一實(shí)施例所顯示的處理裝置的方框示意圖；

圖7a、圖7b與圖7c分別為依據(jù)本發(fā)明一實(shí)施例所顯示的電子裝置的運(yùn)作示意圖；

圖8為依據(jù)本發(fā)明一實(shí)施例所顯示的電子裝置的示意圖。

附圖標(biāo)記：

100、200：電子裝置；

120：投光裝置；

140：第一攝像裝置；

160：第二攝像裝置；

180：處理裝置；

181：影像信息純化單元；

182：第一深度信息單元；

184：第二深度信息單元；

186：評估單元；

1862：亮度計算單元；

1864：初步深度計算單元；

188：深度圖產(chǎn)生單元；；

190：第三攝像裝置；

fdi：第一深度信息；

sdi：第二深度信息；

fpi：第一先前影像；

spi：第二先前影像；

ep：曝光參數(shù)；

fldi：最終深度信息；

dm：深度圖；

rgb：紅綠藍(lán)(rgb)影像；

ir：紅外光影像；

m：灰階影像；

s120、s130、s140、s160、s162、s164、s180：深度圖產(chǎn)生方法的步驟；

s182、s184：從第一深度信息與第二深度信息產(chǎn)生深度圖的步驟。

具體實(shí)施方式

本發(fā)明的部分實(shí)施例接下來將會配合附圖來詳細(xì)描述，以下的描述所引用的元件符號，當(dāng)不同附圖出現(xiàn)相同的元件符號將視為相同或相似的元件。這些實(shí)施例只是本發(fā)明的一部分，并未揭示所有本發(fā)明的可實(shí)施方式。更確切的說，這些實(shí)施例只是本發(fā)明的裝置與方法的范例。

于本發(fā)明實(shí)施例中所提出的電子裝置與其方法，通過不同的方式來分別取得同一場景的多組深度信息，并且依據(jù)前述場景的環(huán)境條件或其他因素來評估該些深度信息，進(jìn)而準(zhǔn)確地取得前述場景的深度圖。

圖1為依據(jù)本發(fā)明一實(shí)施例所顯示的電子裝置的方框示意圖。參照圖1，于本實(shí)施例中，適于產(chǎn)生深度圖的電子裝置100包括投光裝置120、第一攝像裝置140、第二攝像裝置160以及處理裝置180。電子裝置100例如是數(shù)字相機(jī)、單反相機(jī)、數(shù)字?jǐn)z影機(jī)或是其他具有影像獲取功能的智能型手機(jī)、平板電腦、個人數(shù)字助理、筆記型電腦等電子裝置，但本發(fā)明不以此為限。

于本實(shí)施例中，投光裝置120可以投射圖案化的不可見光。換言之，投光裝置120可以依據(jù)一個預(yù)設(shè)圖案而以不可見光的形式來投影圖案于任意場景上。投光裝置120例如是不可見光源搭配光源遮罩的組合、不可見光源搭配繞射光學(xué)元件(diffractiveopticalelement,doe)的組合或者是可以投射不可見光的投光器。舉例而言，不可見光源例如是紅外光源(infraredlightsource,irlightsource)，而投光裝置120例如為紅外線投光器(irilluminator)或者是利用微機(jī)電系統(tǒng)(mems)諧振鏡片而實(shí)現(xiàn)的掃描式紅外線投影機(jī)(irprojector)，但本發(fā)明不以此為限。

于本實(shí)施例中，第一攝像裝置140、第二攝像裝置160包括感光元件，用以拍攝任意場景并且分別產(chǎn)生第一影像與第二影像。感光元件例如是電荷耦合元件(chargecoupleddevice，ccd)、互補(bǔ)性氧化金屬半導(dǎo)體(complementarymetal-oxidesemiconductor，cmos)元件或其他元件。更詳細(xì)而言，第一攝像裝置140與第二攝像裝置160內(nèi)的感光元件以陣列形式排列，并且覆蓋不同類型的拜爾濾鏡(bayerfilter)以獲取可見光信息和/或不可見光信息。

舉例而言，第一攝像裝置140的感光元件陣列上例如是覆蓋由紅色濾片、藍(lán)色濾片與綠色濾片所組成的拜爾濾鏡以獲取紅綠藍(lán)(rgb)光信息而產(chǎn)生第一影像。第二攝像裝置160的感光元件陣列上例如是覆蓋紅色濾片、藍(lán)色濾片、綠色濾片與紅外光濾片所組成的拜爾濾鏡以取得紅綠藍(lán)(rgb)光信息與紅外光信息而產(chǎn)生第二影像。值得注意的是，本發(fā)明的第一攝像裝置140與第二攝像裝置160不以前述設(shè)計為限。舉例來說，第一攝像裝置140及第二攝像裝置160包含下列幾種可能的組合，如紅綠藍(lán)相機(jī)(rgbcamera)與紅綠藍(lán)-紅外光相機(jī)(rgb-ircamera)的組合、紅綠藍(lán)相機(jī)與單色光-紅外光相機(jī)(mono-ircamera)的組合以及單色光相機(jī)(monocamera)與紅綠藍(lán)-紅外光相機(jī)的組合，并且為前述多種組合之一。

于本實(shí)施例中，處理裝置180可以例如是中央處理單元(centralprocessingunit，cpu)，或是其他可程序化的一般用途或特殊用途的微處理器(microprocessor)、數(shù)字信號處理器(digitalsignalprocessor，dsp)、可程序化控制器、特殊應(yīng)用集成電路(applicationspecificintegratedcircuits，asic)、可程序化邏輯裝置(programmablelogicdevice，pld)或其他類似裝置或這些裝置的組合。處理裝置180耦接投光裝置120、第一攝像裝置140與第二攝像裝置160以接收第一影像與第二影像。更詳細(xì)而言，處理裝置180含包括第一深度信息單元182與第二深度信息單元184。

于本實(shí)施例中，電子裝置100還例如是包括存儲器裝置(未顯示)。存儲器裝置耦接至第一攝像裝置140、第二攝像裝置160與處理裝置180，并且用以儲存第一影像與第二影像。存儲器裝置例如是任意型式的固定式或可移動式隨機(jī)存取存儲器(randomaccessmemory，ram)、只讀存儲器(read-onlymemory，rom)、快閃存儲器(flashmemory)、硬盤或其他類似裝置或這些裝置的組合。

以下即列舉實(shí)施例說明電子裝置100產(chǎn)生深度圖的詳細(xì)步驟。圖2為依據(jù)本發(fā)明一實(shí)施例所顯示的深度圖產(chǎn)生方法的流程圖。本實(shí)施例的深度圖產(chǎn)生方法適用于圖1所示的電子裝置100。參照圖1與圖2，利用投光裝置120投影圖案化的不可見光于一個場景上(步驟s120)。

更具體而言，于本實(shí)施例中，投光裝置120可以由不同的元件或元件組合來實(shí)現(xiàn)，例如是不可見光源與繞射光學(xué)元件或者是不可見光源與光源遮罩的組合。藉由繞射光學(xué)元件或光源遮罩，投光裝置120可以依據(jù)一個預(yù)設(shè)圖案而將圖案化的不可見光投影至一個場景上。換言之，一個由不可見光構(gòu)成的圖案會投影在前述場景上。值得注意的是，當(dāng)不可見光源為前述的紅外光源時，投光裝置120例如是紅外線投光裝置(irilluminator)或紅外線投影機(jī)(irprojector)，可依據(jù)預(yù)設(shè)圖案或使用者操作而將圖案化的紅外光投影至前述場景上。

參照圖1與圖2，接著，于本實(shí)施例中，利用第一攝像裝置140獲取前述場景的第一影像(步驟s130)，而第一影像包括可見光信息，并且利用第二攝像裝置160獲取前述場景的第二影像(步驟s140)，而第二影像包括可見光信息與不可見光信息。第一攝像裝置140與第二攝像裝置160分別由不同的視角來對同一場景進(jìn)行攝像，而前述場景即為投光裝置120投影不可見光的場景。于本實(shí)施例中，第一攝像裝置140獲取可見光信息而產(chǎn)生前述場景的第一影像，但第二攝像裝置160除了獲取可見光信息外，還獲取不可見光信息而產(chǎn)生前述場景的第二影像。不可見光信息包含由前述場景反射圖案化的不可見光所產(chǎn)生的影像信息。換言之，第二攝像裝置160還可以獲取由前述投光裝置120所投射的圖案化的不可見光在前述場景上反射的不可見光影像。

參照圖1與圖2，取得第一影像與第二影像后，于本實(shí)施例中，處理裝置180由第一影像與第二影像取得第一深度信息與第二深度信息(步驟s160)，然后選擇性地由第一深度信息與第二深度信息產(chǎn)生前述場景的深度圖(步驟s180)。

圖3為依據(jù)本發(fā)明一實(shí)施例所顯示的處理裝置的方框示意圖。參照圖3，在本發(fā)明的實(shí)施例中，處理裝置180還包括第一深度信息單元182、第二深度信息單元184、評估單元186與深度圖產(chǎn)生單元188，藉以根據(jù)第一攝像裝置140與第二攝像裝置160所產(chǎn)生的第一影像與第二影像來產(chǎn)生前述場景的深度圖dm。

更詳細(xì)而言，于本實(shí)施例中，處理裝置180利用第一深度信息單元182與第二深度信息單元184，由第一影像與第二影像取得第一深度信息與第二深度信息。參照圖1、圖2與圖3，當(dāng)處理裝置180由第一攝像裝置140與第二攝像裝置160接收第一影像與第二影像后，第一深度信息單元182比對第一影像的可見光影像與第二影像的可見光影像以取得第一深度信息fdi(步驟s162)。另一方面，第二深度信息單元184辨識第二影像的不可見光影像以取得第二深度信息sdi(步驟s164)。取得第一深度信息fdi與第二深度信息sdi后，處理裝置180進(jìn)一步地產(chǎn)生前述場景的深度圖dm。

在本發(fā)明的一實(shí)施例中，利用從不同視角攝取的可見光影像，第一深度信息單元182計算相關(guān)于前述場景的第一深度信息fdi。換句話說，第一深度信息單元182利用可見光影像之間的視差來計算前述場景的深度信息。詳細(xì)而言，處理裝置180或第一深度信息單元182首先由第一影像與第二影像中取得可見光影像，然后比較第一影像的可見光影像與第二影像的可見光影像之間的多個影像特征以取得前述場景的多個深度值來作為第一深度信息fdi。

在本發(fā)明的一實(shí)施例中，第二深度信息單元184則利用第二攝像裝置160所拍攝的圖案化的不可見光影像來取得第二深度信息sdi。詳細(xì)而言，投光裝置120是依據(jù)一個預(yù)設(shè)圖案來投影圖案化的不可見光，而第二攝像裝置160則攝取了由前述場景所反射的不可見光圖案。因此，處理裝置180由第二攝像裝置拍攝的第二影像取得不可見光影像信息后，第二深度信息單元184更進(jìn)一步地基于預(yù)設(shè)圖案來分析不可見光影像中的不可見光圖案，并且依據(jù)不可見光圖案的扭曲、歪斜、縮放、位移等情況來判斷前述場景的多個深度距離，進(jìn)而取得第二深度信息sdi。

圖4為依據(jù)本發(fā)明一實(shí)施例所顯示的從第一深度信息與第二深度信息產(chǎn)生深度圖的方法流程圖。參照圖3與圖4，在本實(shí)施例中，取得第一深度信息fdi與第二深度信息sdi后，評估單元186評估第一深度信息fdi與第二深度信息sdi的準(zhǔn)確度以產(chǎn)生前述場景的最終深度信息fldi(步驟s182)。最后，深度圖產(chǎn)生單元188由最終深度信息fldi產(chǎn)生前述場景的深度圖dm(步驟s184)。

評估單元186評估第一深度信息fdi與第二深度信息sdi以決定合適的最終深度信息fldi。在本發(fā)明的一實(shí)施例中，評估單元186評估第一深度信息fdi所包含的深度值與第二深度信息sdi所包含的深度值的準(zhǔn)確度。當(dāng)?shù)谝簧疃刃畔di與第二深度信息sdi在相對位置或相對像素的深度值相符合時，則保留前述深度值。相反而言，當(dāng)?shù)谝簧疃刃畔di與第二深度信息sdi在相對位置或相對像素的深度值不符合時，評估單元186例如是選擇第一深度信息fdi或第二深度信息sdi在相對位置或相對像素的深度值來進(jìn)行填補(bǔ)，或者是由第一深度信息fdi與第二深度信息sdi在相對位置或相對像素的深度值進(jìn)行計算以取得新的深度值來對前述相對位置或相對像素進(jìn)行填補(bǔ)。

換言之，在前述實(shí)施例中，評估單元186保留第一深度信息fdi與第二深度信息sdi相符的部分深度信息，并且針對第一深度信息fdi與第二深度信息sdi不相符的另一部分深度信息進(jìn)行填補(bǔ)，藉以產(chǎn)生前述場景的最終深度信息fldi。值得注意的是，決定最終深度信息fldi的方式并不限于此。

于本發(fā)明的另一實(shí)施例中，評估單元186依據(jù)前述場景的環(huán)境條件，選擇第一深度信息fdi與第二深度信息sdi的至少一個以取得前述場景的最終深度信息fldi。

詳細(xì)而言，基于可見光影像所取得的第一深度信息fdi以及基于不可見光影像所取得的第二深度信息sdi，隨著前述場景的環(huán)境條件不同而有不同的適用情形。具體而言，當(dāng)前述場景在戶外或者是前述場景離第一攝像裝置140、第二攝像裝置160太遠(yuǎn)時，第二攝像裝置160所拍攝的圖案化的不可見光影像較容易模糊不清，使得第二深度信息sdi較不精確。相對而言，對于不具有明顯影像特征或較白的場景而言，以視差的方式所取得的第一深度信息fdi較易產(chǎn)生誤差。因此，評估單元186需要理清前述場景的環(huán)境條件，才能較佳地去評估第一深度信息fdi與第二深度信息sdi以產(chǎn)生前述場景的最終深度信息fldi。

圖5a為依據(jù)本發(fā)明一實(shí)施例所顯示的評估單元的示意圖。參照圖5a，評估單元186包括亮度計算單元1862以及初步深度計算單元1864。于本實(shí)施例中，在產(chǎn)生最終深度信息fldi前，亮度計算單元1862首先計算前述場景的環(huán)境亮度。在本發(fā)明的一實(shí)施例中，亮度計算單元1862由電子裝置100內(nèi)部的曝光系統(tǒng)(未顯示)取得曝光參數(shù)ep，例如是曝光時間、光圈大小、感光度等，然后基于曝光參數(shù)ep計算前述場景的環(huán)境亮度，但本發(fā)明不限于此。

基于亮度計算單元1862所取得的環(huán)境亮度，評估單元186判斷前述場景是否位于戶外。若前述場景位于戶外，于本實(shí)施例中，評估單元186以第一深度信息fdi作為前述場景的最終深度信息fldi。于本發(fā)明的一實(shí)施例中，若亮度計算單元1862基于環(huán)境亮度判斷前述場景位于戶外，則處理裝置180關(guān)閉投光裝置120以停止投影圖案化的不可見光。具體而言，在戶外時，第二攝像裝置160所拍攝的圖案化的不可見光影像可能較模糊或不清晰。因此，評估單元186選擇以第一深度信息fdi作為前述場景的最終深度信息fldi，而處理裝置180關(guān)閉投光裝置120以節(jié)省電源消耗。

相對而言，若前述場景不位于戶外，則初步深度計算單元1864更由第一攝像裝置140在第一影像前對前述場景所獲取的第一先前影像與第二攝像裝置160在第二影像前對前述場景所獲取的第二先前影像，計算前述場景與第一攝像裝置140、第二攝像裝置160的估計距離，而評估單元186判斷估計距離是否大于距離閥值。

在本實(shí)施例中，第一攝像裝置140在獲取第一影像前，更獲取可見光信息以產(chǎn)生前述場景的第一先前影像fpi。另一方面，第二攝像裝置160在獲取第二影像前，更獲取可見光信息與不可見光信息以產(chǎn)生前述場景的第二先前影像spi。換言之，第一先前影像fpi與第二先前影像spi的取得時間早于第一影像與第二影像。于一實(shí)施例中，初步深度計算單元1864由第一先前影像fpi與第二先前影像spi的可見光影像計算前述場景與第一攝像裝置140、第二攝像裝置160的估計距離，但本發(fā)明不限于此。于另一實(shí)施例中，初步深度計算單元1864由第二先前影像spi的不可見光影像計算前述場景與第一攝像裝置140、第二攝像裝置160的估計距離。

為了減少計算估計距離的時間，第一先前影像fpi與第二先前影像spi可以是縮小后的影像。另一方面，初步深度計算單元1864還可以先行對第一先前影像fpi與第二先前影像spi進(jìn)行邊緣檢測后，僅對邊緣部分進(jìn)行深度估測來計算前述場景與第一攝像裝置140、第二攝像裝置160的估計距離，藉以降低計算估計距離的時間。

需要注意的是，在本發(fā)明的一實(shí)施例中，第一攝像裝置140與第二攝像裝置160的設(shè)置位置并不一致，而估計距離可能是考量設(shè)置位置差異后所得到的一個估算值，但不限于此。初步深度計算單元1864還可以是直接地計算前述場景與第一攝像裝置140的估計距離或者是前述場景與第二攝像裝置160的估計距離。

參照圖5a，于本實(shí)施例中，若評估單元186判斷估計距離大于距離閥值，則代表前述場景距離第一攝像裝置140與第二攝像裝置160是較遠(yuǎn)的。此時，評估單元186選擇以第一深度信息fdi作為前述場景的最終深度信息fldi。然而，若評估單元186判斷估計距離不大于距離閥值，則評估單元186至少基于第二深度信息sdi產(chǎn)生前述場景的最終深度信息fldi。

在本發(fā)明的一實(shí)施例中，初步深度計算單元1864還可依據(jù)第二先前影像spi的不可見光影像的完整度(不可見光影像的多寡)來決定是否基于第二深度信息sdi產(chǎn)生前述場景的最終深度信息fldi。詳細(xì)來說，當(dāng)不可見光影像的完整度較低時，代表前述場景與第一攝像裝置140、第二攝像裝置160距離較遠(yuǎn)，因而較不適合基于第二深度信息sdi來產(chǎn)生前述場景的最終深度信息fldi。

于本發(fā)明的實(shí)施例中，若評估單元186判斷估計距離不大于距離閥值，評估單元186直接以第二深度信息sdi作為前述場景的最終深度信息fldi，但本發(fā)明不限于此。圖5b為依據(jù)本發(fā)明一實(shí)施例所顯示的評估單元的示意圖。參照圖5b，于本實(shí)施例中，若評估單元186判斷估計距離不大于距離閥值，評估單元186合并第一深度信息fdi與第二深度信息sdi以產(chǎn)生前述場景的最終深度信息fldi。在本實(shí)施例中，評估單元186保留第一深度信息fdi與第二深度信息sdi相符的部分深度信息，并且針對第一深度信息fdi與第二深度信息sdi不相符的另一部分深度信息進(jìn)行填補(bǔ)，藉以產(chǎn)生前述場景的最終深度信息fldi。保留、填補(bǔ)深度信息的方式，請參照前述實(shí)施例，在此不再贅述。

深度圖產(chǎn)生單元188由最終深度信息fldi產(chǎn)生前述場景的深度圖dm，并且輸出深度圖dm。前述場景的深度圖dm例如是運(yùn)用以產(chǎn)生前述場景的立體影像。另一方面，前述場景的深度圖dm還可以是儲存于存儲器裝置。

圖6為依據(jù)本發(fā)明另一實(shí)施例所顯示的處理裝置的方框示意圖。參照圖6，相較于圖3所示的處理裝置180，在本實(shí)施例中，處理裝置180還包括影像信息純化單元181。影像信息純化單元181取得第二影像中的可見光影像后，首先分離第二影像中的不可見光信號留下可見光影像，然后傳輸濾除不可見光信號的第二影像中的可見光影像至第一深度信息單元182。具體而言，第二攝像裝置160可以取得同時包含不可見光信息與可見光信息所構(gòu)成的影像。為了避免可見光影像受到不可見光無用信息的干擾，在本實(shí)施例中，處理裝置180還包括影像信息純化單元181以優(yōu)先地分離第二影像中的不可見光無用信息留下可見光影像。其余元件與處理裝置180運(yùn)作情形，請參照前述圖3、圖4、圖5a、圖5b以及相關(guān)實(shí)施例，在此不再贅述。

圖7a、圖7b與圖7c分別為依據(jù)本發(fā)明一實(shí)施例所顯示的電子裝置的運(yùn)作示意圖。參照圖7a，在本實(shí)施例中，電子裝置100的投光裝置120主要是投影圖案化的紅外光于一個場景上。相對的，第一攝像裝置140獲取紅綠藍(lán)(rgb)光信息以產(chǎn)生前述場景的第一影像，而第二攝像裝置160獲取紅綠藍(lán)(rgb)光信息與紅外光信息以產(chǎn)生前述場景的第二影像。換言之，第一影像與第二影像中的可見光影像為紅綠藍(lán)(rgb)影像rgb。另一方面，第二影像中的不可見光影像為紅外光影像ir。

然而，值得注意的是，用于產(chǎn)生深度圖的可見光影像與不可見光影像并不限于此。參照圖7b，在本發(fā)明的另一實(shí)施例中，第一攝像裝置140獲取光強(qiáng)度信息以產(chǎn)生前述場景的第一影像，而第二攝像裝置160獲取紅綠藍(lán)(rgb)光信息與紅外光信息以產(chǎn)生前述場景的第二影像。換言之，在本實(shí)施例中，第一影像中的可見光影像為灰階影像m。

類似地，參照圖7c，在本發(fā)明的另一實(shí)施例中，第一攝像裝置140獲取紅綠藍(lán)(rgb)光信息以產(chǎn)生前述場景的第一影像，而第二攝像裝置160獲取光強(qiáng)度信息與紅外光信息以產(chǎn)生前述場景的第二影像。在本實(shí)施例中，第二影像中的可見光影像為灰階影像m。

由前實(shí)施例可知，可見光影像與不可見光影像并不局限于前述影像格式，并且可基于各影像格式對應(yīng)地調(diào)整并適用于前述電子裝置100。

圖8為依據(jù)本發(fā)明一實(shí)施例所顯示的電子裝置的示意圖。參照圖8，相較于電子裝置100，適于產(chǎn)生深度圖的電子裝置200還包括第三攝像裝置190。于本實(shí)施例中，第一攝像裝置140及第二攝像裝置160獲取紅綠藍(lán)(rgb)光信息以分別產(chǎn)生前述場景的第一影像與第二影像。另一方面，第三攝像裝置190獲取紅外光光信息以產(chǎn)生前述場景的第三影像。第一攝像裝置140、第二攝像裝置160與第三攝像裝置190例如是紅綠藍(lán)相機(jī)(rgbcamera)、紅綠藍(lán)相機(jī)(rgbcamera)與紅外光相機(jī)(ircamera)的組合，但本發(fā)明不以此為限。

于本實(shí)施例中，處理裝置180不需要對第一影像、第二影像與第三影像進(jìn)行可見光影像、不可見光影像的辨識與分離。第一深度信息單元182直接比對第一影像與第二影像以產(chǎn)生第一深度信息，而第二深度信息單元184辨識第三影像以產(chǎn)生第二深度信息。另一方面，處理裝置180的評估單元在產(chǎn)生前述場景的最終深度信息時，可利用第一攝像裝置140、第二攝像裝置160以及第三攝像裝置180分別獲取可見光信息、不可見光信息所產(chǎn)生的前述場景的第一先前影像、第二先前影像以及第三先前影像，進(jìn)一步地計算前述場景與第一攝像裝置140、第二攝像裝置160、第三攝像裝置180的估計距離。需要注意的是，第一先前影像、第二先前影像與第三先前影像的取得時間早于第一影像、第二影像與第三影像。

除了設(shè)置第三攝像裝置190所造成的運(yùn)作差異外，電子裝置200其余的元件結(jié)構(gòu)以及產(chǎn)生深度圖的詳細(xì)運(yùn)作流程，請參照前述電子裝置100的相關(guān)技術(shù)內(nèi)容，在此不再贅述。

綜上所述，本發(fā)明實(shí)施例所提供的適于產(chǎn)生深度圖的電子裝置與方法，首先投影圖案化的不可見光于拍攝場景，然后利用成對的第一攝像裝置與第二攝像裝置來分別取得拍攝場景的第一影像與第二影像。通過第一影像與第二影像內(nèi)的可見光影像與不可見光影像來分別取得第一深度信息與第二深度信息，然后進(jìn)一步地依據(jù)第一深度信息與第二深度信息產(chǎn)生前述拍攝場景的深度圖，可以避免單一深度信息受外在環(huán)境因素或不同拍攝場景的影響而產(chǎn)生誤差，進(jìn)而影響前述場景的深度圖的準(zhǔn)確性。另一方面，攝像裝置的數(shù)量與設(shè)置形式還可對應(yīng)地調(diào)整而不限于成對的第一攝像裝置與第二攝像裝置。

雖然本發(fā)明已以實(shí)施例揭示如上，然其并非用以限定本發(fā)明，任何所屬技術(shù)領(lǐng)域中普通技術(shù)人員，在不脫離本發(fā)明的精神和范圍內(nèi)，當(dāng)可作些許的更改與潤飾，均在本發(fā)明范圍內(nèi)。