本發(fā)明涉及攝像裝置、圖像處理方法以及圖像處理裝置。

背景技術(shù)：
近年來，一種對(duì)與入射光線的方向分布(directiondistribution)有關(guān)的信息進(jìn)行取入的攝像裝置即全光照相機(jī)(plenopticcamera)被提出(參照例如日本特表2009-532993號(hào)公報(bào))。該全光照相機(jī)在現(xiàn)有的攝像透鏡即主透鏡與攝像元件之間配置有通過將多個(gè)極小透鏡(以下稱作“微透鏡”)配置成網(wǎng)格狀而構(gòu)成的微透鏡陣列。構(gòu)成微透鏡陣列的各個(gè)微透鏡將通過主透鏡所聚光的光根據(jù)其所到來的角度而聚光到攝像元件內(nèi)的多個(gè)像素。全光照相機(jī)通過對(duì)采用各個(gè)微透鏡而聚光到攝像元件內(nèi)的各個(gè)像素的像(以下稱作“子圖像”)進(jìn)行合成，從而生成攝像圖像(以下稱作“光場(chǎng)圖像(lightfieldimage)”)。光場(chǎng)圖像，按照上述那樣通過不僅經(jīng)由現(xiàn)有技術(shù)的主透鏡還經(jīng)由微透鏡陣列而入射的光所生成。即，光場(chǎng)圖像除了具有現(xiàn)有技術(shù)的攝像圖像中所包含的二維空間信息之外，還具有現(xiàn)有技術(shù)的攝像圖像中未含有的信息，即表示從攝像元件來看是從哪個(gè)方向到來的光線的二維方向信息。全光照相機(jī)在利用這樣的二維方向信息進(jìn)行光場(chǎng)圖像的拍攝之后，采用該光場(chǎng)圖像的數(shù)據(jù)能夠重構(gòu)在拍攝時(shí)距離前方任意距離的面的像。即、全光照相機(jī)，即使在規(guī)定距離下未對(duì)焦便對(duì)光場(chǎng)圖像進(jìn)行拍攝了的情況下，在該拍攝之后，通過采用該光場(chǎng)圖像的數(shù)據(jù)便能夠隨意地制作如同在該規(guī)定距離下進(jìn)行對(duì)焦后拍攝出的圖像(以下稱作“重構(gòu)圖像”)的數(shù)據(jù)。具體而言，全光照相機(jī)將位于任意距離的面的一個(gè)點(diǎn)設(shè)定為關(guān)注點(diǎn)，計(jì)算來自該關(guān)注點(diǎn)的光經(jīng)由主透鏡以及微透鏡陣列被分配到攝像元件內(nèi)的哪個(gè)像素。在此，例如，假設(shè)攝像元件的各像素與構(gòu)成光場(chǎng)圖像的各像素對(duì)應(yīng)，則全光照相機(jī)，計(jì)算構(gòu)成光場(chǎng)圖像的各像素中、被分配來自該關(guān)注點(diǎn)的光的一個(gè)以上的像素的像素值的加法平均。該所計(jì)算出的值成為重構(gòu)圖像中的與關(guān)注點(diǎn)對(duì)應(yīng)的像素的像素值。按照這樣，重構(gòu)圖像的與關(guān)注點(diǎn)對(duì)應(yīng)的像素被重構(gòu)。全光照相機(jī)將與位于任意距離的面的各點(diǎn)對(duì)應(yīng)的各像素(構(gòu)成重構(gòu)圖像的各像素)分別依次設(shè)定為關(guān)注點(diǎn)，通過重復(fù)上述一系列的處理，從而生成重構(gòu)圖像的數(shù)據(jù)(重構(gòu)圖像的各像素的像素值的集合)。另外，在現(xiàn)有技術(shù)的全光照相機(jī)中，如圖14所示，由一種微透鏡構(gòu)成微透鏡陣列，并由這一種微透鏡對(duì)應(yīng)整個(gè)焦點(diǎn)范圍。因此，根據(jù)與被拍攝體之間的距離以及微透鏡的焦點(diǎn)距離的值的不同，該微透鏡的模糊(微透鏡模糊感(microlensblurring))變大，會(huì)在根據(jù)被拍攝的光場(chǎng)圖像生成高精細(xì)的重構(gòu)圖像時(shí)成為妨礙。另外，在將全光照相機(jī)薄型化的情況下，需要將主透鏡與微透鏡陣列之間的距離接近。然而，在將主透鏡與微透鏡陣列之間的距離接近的情況下，主透鏡與被拍攝體之間的距離的變化對(duì)應(yīng)的微透鏡模糊感的大小的變化會(huì)變大。例如，盡管在主透鏡與被拍攝體之間的距離為無限遠(yuǎn)的情況下，微透鏡模糊感足夠小，但隨著該距離從無限遠(yuǎn)接近，微透鏡模糊感變大?，F(xiàn)有技術(shù)文獻(xiàn)專利文獻(xiàn)1：日本特表2009-532993號(hào)公報(bào)

技術(shù)實(shí)現(xiàn)要素：
本發(fā)明的第一方案在于，一種攝像裝置，其特征在于，具備：攝像元件；主透鏡，其將來自被拍攝體的光向所述攝像元件的方向進(jìn)行聚光；微透鏡陣列，其由被配置在所述攝像元件與所述主透鏡之間、使透過了所述主透鏡的光在所述攝像元件上進(jìn)行成像的、焦點(diǎn)距離不同的多種微透鏡構(gòu)成；和圖像處理部，其在接受了與被拍攝的所述被拍攝體一側(cè)之間的距離的指定的情況下，相應(yīng)地基于所述距離對(duì)在所述攝像元件中通過所述多種微透鏡而成像的每個(gè)成像圖像進(jìn)行加權(quán)，使之構(gòu)成一個(gè)攝像圖像，所述多種微透鏡包括具有第1焦點(diǎn)距離的第1微透鏡、和具有與所述第1焦點(diǎn)距離相比所述焦點(diǎn)距離更長(zhǎng)的所述第2焦點(diǎn)距離的第2微透鏡，所述圖像處理部，使通過所述第1微透鏡而成像的第1成像圖像的第1加權(quán)值與所述距離成比例地變小，使通過所述第2微透鏡而成像的第2成像圖像的第2加權(quán)值與所述距離成比例地變大。本發(fā)明的第二方案在于，一種圖像處理方法，是攝像裝置執(zhí)行的圖像處理方法，該攝像裝置具備：攝像元件；主透鏡，其將來自被拍攝體的光向所述攝像元件的方向進(jìn)行聚光；微透鏡陣列，其由被配置在所述攝像元件與所述主透鏡之間、使透過了所述主透鏡的光在所述攝像元件上進(jìn)行成像的、焦點(diǎn)距離不同的多種微透鏡構(gòu)成，所述圖像處理方法的特征在于，包括如下步驟：在接受了與被拍攝的所述被拍攝體一側(cè)之間的距離的指定的情況下，相應(yīng)地基于所述距離對(duì)在所述攝像元件中通過所述多種微透鏡而成像的每個(gè)成像圖像進(jìn)行加權(quán)，使之構(gòu)成一個(gè)攝像圖像，所述多種微透鏡包括具有第1焦點(diǎn)距離的第1微透鏡、和具有與所述第1焦點(diǎn)距離相比所述焦點(diǎn)距離更長(zhǎng)的所述第2焦點(diǎn)距離的第2微透鏡，在所述使之構(gòu)成一個(gè)攝像圖像的步驟中，使通過所述第1微透鏡而成像的第1成像圖像的第1加權(quán)值與所述距離成比例地變小，使通過所述第2微透鏡而成像的第2成像圖像的第2加權(quán)值與所述距離成比例地變大。本發(fā)明的第三方案在于，一種圖像處理裝置，具備攝像部和圖像處理部，所述攝像部具有：攝像元件；主透鏡，其將來自被拍攝體的光向所述攝像元件的方向進(jìn)行聚光；和微透鏡陣列，其由被配置在所述攝像元件與所述主透鏡之間、使透過了所述主透鏡的光在所述攝像元件上進(jìn)行成像的、焦點(diǎn)距離不同的多種微透鏡構(gòu)成，所述圖像處理部在接受了與由所述攝像部拍攝到的圖像中的所述被拍攝體一側(cè)之間的距離的指定的情況下，相應(yīng)地基于所述距離對(duì)在所述攝像元件中通過所述多種微透鏡而成像的每個(gè)成像圖像進(jìn)行加權(quán)，使之構(gòu)成一個(gè)攝像圖像，所述多種微透鏡包括具有第1焦點(diǎn)距離的第1微透鏡、和具有與所述第1焦點(diǎn)距離相比所述焦點(diǎn)距離更長(zhǎng)的所述第2焦點(diǎn)距離的第2微透鏡，所述圖像處理部，使通過所述第1微透鏡而成像的第1成像圖像的第1加權(quán)值與所述距離成比例地變小，使通過所述第2微透鏡而成像的第2成像圖像的第2加權(quán)值與所述距離成比例地變大。本發(fā)明的第四方案在于，一種圖像處理方法，是對(duì)由攝像裝置拍攝到的圖像實(shí)施圖像處理的圖像處理方法，所述攝像裝置具備：攝像元件；主透鏡，其將來自被拍攝體的光向所述攝像元件的方向進(jìn)行聚光；和微透鏡陣列，其由被配置在所述攝像元件與所述主透鏡之間、使透過了所述主透鏡的光在所述攝像元件上進(jìn)行成像的、焦點(diǎn)距離不同的多種微透鏡構(gòu)成，所述圖像處理方法包括如下步驟：在接受了與由所述攝像裝置拍攝到的所述圖像中的所述被拍攝體一側(cè)之間的距離的指定的情況下，相應(yīng)地基于所述距離對(duì)在所述攝像元件中通過所述多種微透鏡而成像的每個(gè)成像圖像進(jìn)行加權(quán)，使之構(gòu)成一個(gè)攝像圖像，所述多種微透鏡包括具有第1焦點(diǎn)距離的第1微透鏡、和具有與所述第1焦點(diǎn)距離相比所述焦點(diǎn)距離更長(zhǎng)的所述第2焦點(diǎn)距離的第2微透鏡，在所述使之構(gòu)成一個(gè)攝像圖像的步驟中，使通過所述第1微透鏡而成像的第1成像圖像的第1加權(quán)值與所述距離成比例地變小，使通過所述第2微透鏡而成像的第2成像圖像的第2加權(quán)值與所述距離成比例地變大。附圖說明圖1是表示本發(fā)明的一實(shí)施方式所涉及的攝像裝置的硬件構(gòu)成的方框圖。圖2是表示構(gòu)成上述攝像裝置的攝像部中的光學(xué)系統(tǒng)的構(gòu)成例的示意圖。圖3是構(gòu)成上述攝像裝置的微透鏡陣列的主視圖。圖4是表示采用了構(gòu)成上述攝像裝置的微透鏡陣列的情況下的子圖像的示例圖。圖5是說明在上述攝像裝置中、將來自關(guān)注點(diǎn)的光分配給攝像元件內(nèi)的像素的樣態(tài)的圖。圖6是說明在構(gòu)成上述攝像裝置的主透鏡與重構(gòu)面之間的距離為Da的情況下的處理的圖。圖7是說明構(gòu)成上述攝像裝置的主透鏡與重構(gòu)面之間的距離為Dev的情況下的處理的圖。圖8是說明構(gòu)成上述攝像裝置的主透鏡與重構(gòu)面之間的距離為Db的情況下的處理的圖。圖9是表示構(gòu)成上述攝像裝置的主透鏡與重構(gòu)面之間的距離、與加權(quán)值之間的關(guān)系的一例的圖表。圖10是表示構(gòu)成上述攝像裝置的主透鏡與重構(gòu)面之間的距離、與加權(quán)值之間的關(guān)系的又一例的圖表。圖11是表示上述攝像裝置中的重構(gòu)處理的流程的流程圖。圖12是采用四種微透鏡構(gòu)成上述攝像裝置中的微透鏡陣列的情況下的微透鏡的配置例。圖13是采用三種微透鏡構(gòu)成上述攝像裝置中的微透鏡陣列的情況下的與各微透鏡對(duì)應(yīng)的加權(quán)值的關(guān)系的圖表。圖14是表示構(gòu)成現(xiàn)有的全光照相機(jī)的攝像部中的光學(xué)系統(tǒng)的構(gòu)成例的示意圖。具體實(shí)施方式以下，針對(duì)本發(fā)明的實(shí)施方式采用附圖進(jìn)行說明。圖1是表示本發(fā)明的一實(shí)施方式涉及的攝像裝置的硬件構(gòu)成的方框圖。攝像裝置1具備：CPU(CentralProcessingUnit，中央處理器)11、ROM(ReadOnlyMemory，只讀存儲(chǔ)器)12、RAM(RandomAccessMemory，隨機(jī)存取存儲(chǔ)器)13、總線14、輸入輸出接口15、攝像部16、輸入部17、輸出部18、存儲(chǔ)部19、通信部20、以及驅(qū)動(dòng)器21。CPU11根據(jù)在ROM12中記錄的程序、或者從存儲(chǔ)部19載入RAM13的程序執(zhí)行各種處理。在RAM13中適當(dāng)存儲(chǔ)CPU11在執(zhí)行各種處理時(shí)所需要的數(shù)據(jù)等。CPU11、ROM12以及RAM13經(jīng)由總線14而相互連接。另外，該總線14還連接有輸入輸出接口15。輸入輸出接口15連接有攝像部16、輸入部17、輸出部18、存儲(chǔ)部19、通信部20以及驅(qū)動(dòng)器21。攝像部16具備：主透鏡31、微透鏡陣列32、以及攝像元件33。關(guān)于攝像部16的詳細(xì)情況，參照?qǐng)D2詳細(xì)描述。輸入部17由未圖示的快門按鈕、用于決定主透鏡31與后述的重構(gòu)面之間的距離的操作按鈕等各種按鈕構(gòu)成，輸入與用戶的指示操作相應(yīng)的各種信息。輸出部18由監(jiān)視器、揚(yáng)聲器等構(gòu)成，對(duì)各種圖像、各種聲音進(jìn)行輸出。存儲(chǔ)部19由硬盤、DRAM(DynamicRandomAccessMemory，動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器)等構(gòu)成，對(duì)后述的光場(chǎng)圖像、重構(gòu)圖像等各種圖像的數(shù)據(jù)進(jìn)行存儲(chǔ)。通信部20對(duì)經(jīng)由包含互聯(lián)網(wǎng)在內(nèi)的網(wǎng)絡(luò)與其他裝置(未圖示)之間進(jìn)行的通信進(jìn)行控制。在驅(qū)動(dòng)器21中適當(dāng)安裝由磁盤、光盤、光磁盤、或者半導(dǎo)體存儲(chǔ)器等構(gòu)成的可移動(dòng)介質(zhì)22。通過驅(qū)動(dòng)器21從可移動(dòng)介質(zhì)22讀出的程序，根據(jù)需要被安裝在存儲(chǔ)部19中。另外，可移動(dòng)介質(zhì)22，與存儲(chǔ)部19同樣地還能夠?qū)υ诖鎯?chǔ)部19中存儲(chǔ)的圖像的數(shù)據(jù)等各種數(shù)據(jù)進(jìn)行存儲(chǔ)。以下針對(duì)構(gòu)成攝像部16的主透鏡31、微透鏡陣列32、以及攝像元件33進(jìn)行更詳細(xì)的說明。圖2是表示攝像部16中的光學(xué)系統(tǒng)的構(gòu)成例的示意圖。如圖2所示，作為構(gòu)成攝像部16的各要素，按與被拍攝體從近到遠(yuǎn)的順序依次配置主透鏡31、微透鏡陣列32以及攝像元件33。主透鏡31將來自被拍攝體的光向攝像元件33的方向進(jìn)行聚光。微透鏡陣列32，如上所述，被配置在主透鏡31與攝像元件33之間，使透過主透鏡31的光在攝像元件33上進(jìn)行成像。圖3是微透鏡陣列32的主視圖。如圖3所示，微透鏡陣列32由兩種微透鏡32A、32B構(gòu)成。這些微透鏡32A、32B分別為焦點(diǎn)距離不同的微小透鏡，被交替配置。另外，在圖2以及圖3中，將7個(gè)微透鏡配置成一行，但為了方便說明而示出簡(jiǎn)化后的構(gòu)成，實(shí)際上能夠配置更多的微透鏡。構(gòu)成微透鏡陣列32的多個(gè)微透鏡32A、32B，對(duì)經(jīng)由主透鏡31入射來的光進(jìn)行聚光，使子圖像在攝像元件33上進(jìn)行成像。由此，在攝像元件33中生成作為這些多個(gè)子圖像的集合的光場(chǎng)圖像。攝像元件33由例如CMOS(ComplementaryMetalOxideSemiconductor，互補(bǔ)金屬氧化物半導(dǎo)體)型的光電轉(zhuǎn)換元件等構(gòu)成。從主透鏡31經(jīng)由微透鏡陣列32向攝像元件33入射被拍攝體像。攝像元件33對(duì)被拍攝體像進(jìn)行光電轉(zhuǎn)換(拍攝)后在一定時(shí)間內(nèi)對(duì)圖像信號(hào)進(jìn)行蓄積，并將所蓄積的圖像信號(hào)作為模擬信號(hào)依次提供給未圖示的AFE(AnalogFrontEnd，模擬前端)。AFE對(duì)該模擬圖像信號(hào)實(shí)施A/D(Analog/Digital，模擬/數(shù)字)變換處理等各種信號(hào)處理。通過各種信號(hào)處理生成數(shù)字信號(hào)，并作為光場(chǎng)圖像的數(shù)據(jù)被從AFE適當(dāng)提供給CPU11(圖1)等。另外，圖2示出從在與主透鏡31的中心之間的距離為Da的位置設(shè)置的光源La向主透鏡31方向照射光的情況下的光線的樣態(tài)(圖2所示的實(shí)線)、和從在與主透鏡31的中心之間的距離為Db的位置設(shè)置的光源Lb向主透鏡31方向照射光的情況下的光線的樣態(tài)(圖2所示的虛線)。如圖2所示，在從光源La照射了光的情況下，通過微透鏡32A而聚光的光在攝像元件33的面進(jìn)行成像。另一方面，通過微透鏡32B而聚光的光，在比攝像元件33的面位于更后方的面S2進(jìn)行成像。因此，通過微透鏡32B而在攝像元件33中成像的子圖像成為產(chǎn)生了模糊(微透鏡模糊感)的狀態(tài)。另外，在從光源Lb照射了光的情況下，通過微透鏡32B而被聚光的光在攝像元件33的面進(jìn)行成像。另一方面，通過微透鏡32A而聚光的光，在比攝像元件33的面位于更前方的面S1進(jìn)行成像。因此，通過微透鏡32A而在攝像元件33中成像的子圖像變成產(chǎn)生了微透鏡模糊感的狀態(tài)。圖4是表示采用了微透鏡陣列32的情況下的子圖像的示例的圖。圖4中按照與主透鏡31從近到遠(yuǎn)的順序依次示出配置了透明的平面板P1、P2以及P3的情況下的子圖像I1、I2、I3以及I4。在此，在平面板P1、P2以及P3中分別以相同的顏色(例如黑色)顯示字符“A”、“B”以及“C”。子圖像I1以及I3是通過微透鏡32B成像的圖像。微透鏡32B由于與微透鏡32A相比焦點(diǎn)距離長(zhǎng)，因此，在此，焦點(diǎn)對(duì)準(zhǔn)在距離主透鏡31最遠(yuǎn)的平面板P3上顯示的字符“C”。作為其結(jié)果，子圖像I1以及I3中，字符“C”與其他字符相比被鮮明顯示。另一方面，子圖像I2以及I4是通過微透鏡32A成像的圖像。微透鏡32A與微透鏡32B相比焦點(diǎn)距離較短，因此，在此對(duì)焦在距離主透鏡31最近的平面板P1上顯示的字符“A”。作為其結(jié)果，子圖像I2以及I4中，字符“A”與其他字符相比被鮮明顯示。另外，子圖像I1～I(xiàn)4中，各個(gè)字符被顯示在不同的位置。這是因?yàn)楦魑⑼哥R被配置在不同的位置，會(huì)產(chǎn)生對(duì)對(duì)象物(在此為字符“A”、“B”、“C”)的視差。在此，考慮攝像裝置1根據(jù)光場(chǎng)圖像的數(shù)據(jù)生成重構(gòu)圖像的數(shù)據(jù)的情況。這種情況下，攝像裝置1的CPU11作為圖像構(gòu)成部發(fā)揮作用。以下，將CPU11所執(zhí)行的生成重構(gòu)圖像的數(shù)據(jù)的處理稱作重構(gòu)處理。具體而言，在輸入部17中接受了對(duì)主透鏡31與重構(gòu)對(duì)象的面(以下稱作重構(gòu)面。)之間的距離進(jìn)行指定的操作的情況下，攝像裝置1的CPU11相應(yīng)地將該重構(gòu)面的一個(gè)像素設(shè)定為關(guān)注點(diǎn)。然后，CPU11計(jì)算來自該關(guān)注點(diǎn)的光經(jīng)由主透鏡31以及微透鏡陣列32被分配給攝像元件33中的哪個(gè)像素。圖5是說明來自關(guān)注點(diǎn)的光被分配給攝像元件33內(nèi)的像素的樣態(tài)的圖。圖5中，將從透鏡的中心位置沿光軸方向延伸的直線L與重構(gòu)面Sr交叉的點(diǎn)作為中心位置，將位于從該中心位置向上方離開距離x的位置的點(diǎn)作為關(guān)注點(diǎn)P。以下，針對(duì)從該關(guān)注點(diǎn)P向構(gòu)成微透鏡32B的一個(gè)微透鏡32Bs入射的光被分配給攝像元件33內(nèi)的像素的樣態(tài)進(jìn)行說明。將圖5中的各距離按照以下方式進(jìn)行定義。a1：主透鏡31與重構(gòu)面Sr之間的距離b1：主透鏡31與主透鏡31的成像面Si之間的距離c1：主透鏡31與微透鏡陣列32之間的距離a2：主透鏡31的成像面Si與微透鏡陣列32之間的距離c2：微透鏡陣列32與攝像元件33之間的距離d：直線L與微透鏡32Bs的中心位置之間的距離x’：主透鏡31的焦點(diǎn)與直線L之間的距離x”：在攝像元件33上被分配的光到達(dá)的位置與直線L之間的距離另外，將主透鏡31的焦點(diǎn)距離作為fML。另外，在圖5中作為畫下劃線的要素的距離x、a1、c1、c2、d是預(yù)先規(guī)定的。另外，上述的各距離表示最短距離。該情況下，未預(yù)先規(guī)定的距離即b1、a2、x’、以及x”采用透鏡公式由以下的(1)～(4)式表示。a2＝c1-b1…(2)根據(jù)上述的式(4)，從關(guān)注點(diǎn)P向微透鏡32Bs入射的光被分配給攝像元件33內(nèi)的與距離x”對(duì)應(yīng)的像素。然后，CPU11針對(duì)關(guān)注點(diǎn)P計(jì)算通過各微透鏡分配的像素的位置，通過計(jì)算這些位置的像素值的加法平均，從而決定關(guān)注點(diǎn)P的像素值。攝像裝置1的CPU11將重構(gòu)圖像的各像素設(shè)定為關(guān)注點(diǎn)，通過執(zhí)行上述的運(yùn)算，從而生成重構(gòu)圖像的數(shù)據(jù)。在此，CPU11在計(jì)算被分配了來自關(guān)注點(diǎn)P的光的像素值的加法平均的情況下，基于通過輸入部17指定的距離(從重構(gòu)面Sr至主透鏡31的距離)，進(jìn)行在攝像元件33中通過多個(gè)微透鏡32A、32B成像的每個(gè)圖像的加權(quán)，構(gòu)成一個(gè)攝像圖像。以下，參照?qǐng)D6～圖8，針對(duì)進(jìn)行通過多個(gè)微透鏡32A、32B成像的每個(gè)圖像的加權(quán)的處理，進(jìn)行更詳細(xì)的說明。圖6是對(duì)主透鏡31與重構(gòu)面Sr之間的距離為Da的情況下的處理進(jìn)行說明的圖。圖7是對(duì)主透鏡31與重構(gòu)面Sr之間的距離為Dev的情況下的處理進(jìn)行說明的圖。圖8是對(duì)主透鏡31與重構(gòu)面Sr之間的距離為Db的情況下的處理進(jìn)行說明的圖。在此，設(shè)Dev為大于Da、小于Db的值。另外，在圖6～圖8中，將從透鏡的中心位置沿著光軸方向延伸的直線與重構(gòu)面Sr交叉的位置作為關(guān)注點(diǎn)P進(jìn)行說明。在圖6中，從關(guān)注點(diǎn)P照射的光在主透鏡31中產(chǎn)生折射，并向微透鏡陣列32入射。這種情況下，在微透鏡陣列32中，該光入射的區(qū)域成為圖6的微透鏡陣列32的主視圖所示的區(qū)域Aa。通過與該區(qū)域Aa對(duì)應(yīng)的微透鏡而成像的子圖像中所含的像素成為進(jìn)行加法平均的對(duì)象的像素。因而，CPU11對(duì)通過與該區(qū)域Aa對(duì)應(yīng)的微透鏡而成像的子圖像中所含的像素的值(像素值)乘以加權(quán)值進(jìn)行加權(quán)，計(jì)算被加權(quán)后的像素值的加法平均。具體而言，CPU11，在主透鏡31與重構(gòu)面Sr之間的距離為Da的情況下，將通過與區(qū)域Aa對(duì)應(yīng)的微透鏡32A而成像的子圖像的區(qū)域所對(duì)應(yīng)的像素的加權(quán)值設(shè)為1.0。另外，CPU11，在主透鏡31與重構(gòu)面Sr之間的距離為Da的情況下，將通過與區(qū)域Aa對(duì)應(yīng)的微透鏡32B而成像的子圖像的區(qū)域所對(duì)應(yīng)的像素的加權(quán)值設(shè)為0。在距離為Da的情況下，通過焦點(diǎn)距離短的微透鏡32A聚光的光，如圖6所示，在攝像元件33的面進(jìn)行成像。另一方面，通過焦點(diǎn)距離長(zhǎng)的微透鏡32B聚光的光，在比攝像元件33更靠后方的面S3進(jìn)行成像，因此在攝像元件33成像的子圖像中會(huì)產(chǎn)生微透鏡模糊感。這種情況下，攝像裝置1由于將與產(chǎn)生微透鏡模糊感的光對(duì)應(yīng)的像素的加權(quán)值設(shè)為比與在攝像元件33的面成像的光對(duì)應(yīng)的像素的加權(quán)值低來生成重構(gòu)圖像，因此能夠使重構(gòu)圖像成為高精細(xì)圖像。在圖7中，從關(guān)注點(diǎn)P照射的光在主透鏡31中產(chǎn)生折射，并入射至微透鏡陣列32。這種情況下，在微透鏡陣列32中，該區(qū)域Aev成為比圖6所示的區(qū)域Aa廣的區(qū)域。CPU11，對(duì)通過與該區(qū)域Aev對(duì)應(yīng)的微透鏡而成像的子圖像的區(qū)域中所含的像素的像素值乘以加權(quán)值來進(jìn)行加權(quán)，計(jì)算被加權(quán)后的像素值的加法平均。具體而言，CPU11，在主透鏡31與重構(gòu)面Sr之間的距離為Dev的情況下，將通過與區(qū)域Aev對(duì)應(yīng)的微透鏡32A、32B而成像的子圖像中所含的像素的加權(quán)值設(shè)為0.5。由各微透鏡32A聚光的光在比攝像元件33更靠前方的面S4進(jìn)行成像，由各微透鏡32B聚光的光在比攝像元件33更靠后方的面S5進(jìn)行成像。這種情況下，攝像裝置1通過將各個(gè)與各微透鏡32A、32B對(duì)應(yīng)的像素的加權(quán)值分別設(shè)為一半來進(jìn)行加法平均，從而能夠使重構(gòu)圖像成為高精細(xì)的圖像。在圖8中，從關(guān)注點(diǎn)P照射的光在主透鏡31中進(jìn)行折射，并入射至微透鏡陣列32。這種情況下，在微透鏡陣列32中，該光入射的區(qū)域成為圖8的微透鏡陣列32的主視圖所示的區(qū)域Ab。該區(qū)域Ab成為比圖7所示的區(qū)域Aev更廣的區(qū)域。CPU11，對(duì)通過與該區(qū)域Ab對(duì)應(yīng)的微透鏡而成像的子圖像的區(qū)域中所含的像素的像素值乘以加權(quán)值來進(jìn)行加權(quán)，并計(jì)算被加權(quán)后的像素值的加法平均。具體而言，CPU11，在主透鏡31與重構(gòu)面Sr之間的距離為Db的情況下，將通過與區(qū)域Ab對(duì)應(yīng)的微透鏡32A而成像的子圖像的區(qū)域中所含的像素的加權(quán)值設(shè)為0。另外，CPU11，在主透鏡31與重構(gòu)面Sr之間的距離為Db的情況下，將通過與區(qū)域Ab對(duì)應(yīng)的微透鏡32B而成像的子圖像的區(qū)域中所含的像素的加權(quán)值設(shè)為1.0。在距離為Db的情況下，通過焦點(diǎn)距離短的微透鏡32A聚光的光，如圖8所示，在比攝像元件33更靠前方的面S6進(jìn)行成像，因此在攝像元件33成像的子圖像中會(huì)產(chǎn)生微透鏡模糊感。另一方面，通過焦點(diǎn)距離長(zhǎng)的微透鏡32B而聚光的光在攝像元件33的面進(jìn)行成像。這種情況下，攝像裝置1由于將產(chǎn)生微透鏡模糊感的光所對(duì)應(yīng)的像素的加權(quán)值設(shè)為比在攝像元件33的面成像的光所對(duì)應(yīng)的像素的加權(quán)值低來生成重構(gòu)圖像，因此能夠使重構(gòu)圖像成為高精細(xì)的圖像。圖9是表示微透鏡32A、32B的加權(quán)值的關(guān)系的圖表。在圖9中，橫軸是主透鏡31與重構(gòu)面Sr之間的距離，縱軸是處于與通過微透鏡而成像的像對(duì)應(yīng)的位置的像素的加權(quán)值。另外，在圖9中，將與微透鏡32A對(duì)應(yīng)的像素的加權(quán)值Va用虛線表示，將與微透鏡32B對(duì)應(yīng)的像素的加權(quán)值Vb用實(shí)線表示。如圖9所示那樣，在距離為Da的情況下，Va為1，在Vb為0。另外，在距離為Db的情況下，Va為0，Vb為1。從而，若將Da與Db之間的任意距離設(shè)為Dx，則Va以及Vb分別由以下的式(5)、式(6)表示。即，攝像裝置1在通過輸入部17接受了距離Dx時(shí)，基于式(5)、式(6)來決定Va以及Vb。另外，攝像裝置1根據(jù)圖9所示的加權(quán)值的關(guān)系來決定與微透鏡32A對(duì)應(yīng)的像素的加權(quán)值和與微透鏡32B對(duì)應(yīng)的像素的加權(quán)值，但并不限于此，也可以如圖10所示，使各像素的加權(quán)值改變。即，在距離Dx為Da到D1的情況下，將Va設(shè)為1，將Vb設(shè)為0，在距離Dx為D2到Db的情況下，將Va設(shè)為0，將Vb設(shè)為1。另外，在距離Dx為D1到D2的情況下，基于式(7)、式(8)來計(jì)算Va以及Vb。這樣一來，由于與兩種微透鏡32A、32B對(duì)應(yīng)的加權(quán)值成為0的距離的范圍增加，因此能夠使采用通過兩種微透鏡32A、32B的每一個(gè)而成像的像所對(duì)應(yīng)的像素進(jìn)行運(yùn)算的情況減少，能夠減輕處理負(fù)荷。接著，針對(duì)CPU11所進(jìn)行的重構(gòu)處理的流程進(jìn)行說明。圖11是表示重構(gòu)處理的流程的流程圖。步驟S11中，CPU11獲取光場(chǎng)圖像的數(shù)據(jù)。步驟S12中，通過輸入部17受理對(duì)主透鏡31與重構(gòu)面之間的距離進(jìn)行指定的操作，將位于主透鏡31前方指定的距離的位置的面設(shè)定為重構(gòu)面。在步驟S13中，CPU11將構(gòu)成重構(gòu)面的一個(gè)像素設(shè)定為關(guān)注點(diǎn)P。另外，CPU11在將構(gòu)成重構(gòu)面的一個(gè)像素設(shè)定為關(guān)注點(diǎn)P的情況下，將尚未被設(shè)定為關(guān)注點(diǎn)P的像素設(shè)定為關(guān)注點(diǎn)P。在步驟S14中，CPU11計(jì)算從一個(gè)微透鏡被分配光的像素。即，CPU11從構(gòu)成微透鏡陣列32的微透鏡中選擇一個(gè)微透鏡，計(jì)算從在步驟S13中被設(shè)定的關(guān)注點(diǎn)P向被選擇的微透鏡入射的光被分配至攝像元件33的位置。然后，CPU11將在被計(jì)算出的位置存在的像素決定為被分配的像素。另外，CPU11在選擇一個(gè)微透鏡的情況下，選擇尚未被選擇的微透鏡。在步驟S15中，CPU11，基于在步驟S12中被指定的距離來決定被選擇的像素的加權(quán)值。在步驟S16中，CPU11判斷被分配的像素是否已全部確定，即、判斷是否針對(duì)所有微透鏡進(jìn)行了計(jì)算被分配的像素的位置的處理。CPU11，在該判定為是的情況下，處理過渡至步驟S17，在該判斷為否的情況下，處理過渡至步驟S14。在步驟S17中，CPU11，針對(duì)被分配了來自關(guān)注點(diǎn)P的光的像素的像素值，乘以在步驟S15中被決定的加權(quán)值，之后，計(jì)算被加權(quán)后的像素值的加法平均。在步驟S18中，CPU11判斷構(gòu)成重構(gòu)面的像素是否已全部被設(shè)定為關(guān)注點(diǎn)。CPU11在該判斷為是的情況下，處理過渡至步驟S19，在該判斷為否的情況下，處理過渡至步驟S13。在步驟S19中，CPU11對(duì)重構(gòu)圖像進(jìn)行顯示輸出。以上針對(duì)本實(shí)施方式的攝像裝置1的構(gòu)成以及處理進(jìn)行了說明。本實(shí)施方式中，攝像裝置1具備：攝像元件33；將來自被拍攝體的光向攝像元件33的方向進(jìn)行聚光的主透鏡31；由配置在攝像元件33與主透鏡31之間、使透過了主透鏡31的光在攝像元件33上進(jìn)行成像的、焦點(diǎn)距離不同的多種微透鏡32A、32B構(gòu)成的微透鏡陣列32；在接受了對(duì)與被拍攝的被拍攝體一側(cè)之間的距離的指定的情況下，相應(yīng)地基于該距離對(duì)在攝像元件33中通過多個(gè)微透鏡32A、32B而成像的每個(gè)圖像進(jìn)行加權(quán)，使之構(gòu)成一個(gè)攝像圖像的CPU11。例如，攝像裝置1，針對(duì)因微透鏡32A、32B中與攝像元件之間的焦點(diǎn)距離未對(duì)準(zhǔn)而微透鏡模糊感變大的像所對(duì)應(yīng)的圖像的像素值，抑制對(duì)重構(gòu)圖像的影響程度，從而能夠生成高精細(xì)的重構(gòu)圖像。另外，為了使攝像裝置1薄型化，即使在主透鏡31與微透鏡陣列32之間的距離接近的情況下，也能夠由焦點(diǎn)距離相對(duì)較短的微透鏡和焦點(diǎn)距離相對(duì)較長(zhǎng)的微透鏡構(gòu)成構(gòu)成該微透鏡陣列32的微透鏡，根據(jù)距離來進(jìn)行通過各個(gè)微透鏡而成像的圖像的加權(quán)，從而不管與被拍攝體之間的距離的變化如何，都能夠抑制微透鏡模糊感。從而，攝像裝置1與現(xiàn)有技術(shù)的全光照相機(jī)相比，能夠遍及更廣的距離范圍得到高精細(xì)的重構(gòu)圖像。另外，本發(fā)明并不限定于上述的實(shí)施方式，在能夠?qū)崿F(xiàn)本發(fā)明的目的的范圍內(nèi)的變形、改良等都包含于本發(fā)明中。例如，上述的實(shí)施方式中，雖然由兩種微透鏡32A、32B構(gòu)成微透鏡陣列32，但并不特別限定于此。例如，也可以將構(gòu)成微透鏡陣列32的微透鏡的種類設(shè)為三種以上。圖12是由四種微透鏡構(gòu)成微透鏡陣列的情況下的微透鏡的配置例。另外，在將構(gòu)成微透鏡陣列32的微透鏡的種類設(shè)為三種以上的情況下，也能夠?qū)Ω魑⑼哥R的加權(quán)值進(jìn)行適當(dāng)變更。圖13是表示在由三種微透鏡構(gòu)成微透鏡陣列的情況下的、與微透鏡對(duì)應(yīng)的加權(quán)值的關(guān)系的示例。例如，在上述的實(shí)施方式中，在生成重構(gòu)圖像的數(shù)據(jù)時(shí)采用的光場(chǎng)圖像的數(shù)據(jù)，采用由攝像裝置1本身拍攝的圖像數(shù)據(jù)，但并不特別限定于此。即、攝像裝置1也可以采用另外的攝像裝置1或者現(xiàn)有技術(shù)的另外的全光照相機(jī)所拍攝的光場(chǎng)圖像的數(shù)據(jù)來生成重構(gòu)圖像的數(shù)據(jù)。換言之，本發(fā)明不僅適用于具有攝像功能的攝像裝置1，還能夠普遍適用于即使不具有攝像功能也具有常規(guī)的圖像處理功能的電子設(shè)備。例如，本發(fā)明能夠適用于個(gè)人電腦、打印機(jī)、電視接收機(jī)、錄像機(jī)、導(dǎo)航裝置、便攜式電話、便攜式游戲機(jī)等。上述的一系列處理既能通過硬件來執(zhí)行，也能通過軟件來執(zhí)行。換言之，圖1的功能性構(gòu)成只不過為例示，并不特別進(jìn)行限定。即、只要在攝像裝置1中具備能夠?qū)⑸鲜龅囊幌盗刑幚碜鳛檎w來執(zhí)行的功能即可，為了實(shí)現(xiàn)該功能而使用什么樣的功能塊并不特別限定于圖1的例子。此外，1個(gè)功能塊可以由硬件單體構(gòu)成，也可以由軟件單體構(gòu)成，還可以由它們的組合來構(gòu)成。在通過軟件來執(zhí)行一連串處理的情況下，構(gòu)成該軟件的程序從網(wǎng)絡(luò)或記錄介質(zhì)安裝到計(jì)算機(jī)等。計(jì)算機(jī)可以是組合到專用硬件中的計(jì)算機(jī)。此外，計(jì)算機(jī)可以是通過安裝各種程序而能執(zhí)行各種功能的計(jì)算機(jī)、例如通用的個(gè)人計(jì)算機(jī)。含有這種程序的記錄介質(zhì)不僅可以由為了向用戶提供程序而與裝置主體單獨(dú)地配置的圖1的可移動(dòng)介質(zhì)22構(gòu)成，也可由以預(yù)先組合到裝置主體的狀態(tài)而提供給用戶的汜錄介質(zhì)等構(gòu)成?？梢苿?dòng)介質(zhì)22例如由磁盤(包括軟盤)、光盤、或者光磁盤等構(gòu)成。光盤例如由CD-ROM(CompactDisk-ReadOnlyMemory，光盤只讀存儲(chǔ)器)、DVD(DigitalVersatileDisk，數(shù)字通用光盤)等構(gòu)成。光磁盤由MD(Mini-Disk，小型磁盤)等構(gòu)成。此外，以預(yù)先組合到裝置主體的狀態(tài)而提供給用戶的記錄介質(zhì)，例如由記錄了程序的圖1的ROM12、或圖1的存儲(chǔ)部19中包含的硬盤等構(gòu)成。另外，在本說明書中，描述記錄到記錄介質(zhì)中的程序的步驟包括沿著其順序按時(shí)間序列被進(jìn)行的處理，當(dāng)然也包括未必一定按時(shí)間序列進(jìn)行處理而并行或單獨(dú)地執(zhí)行的處理。以上，對(duì)本發(fā)明的幾個(gè)實(shí)施方式進(jìn)行了說明，但是這些實(shí)施方式只不過是例示，并非限定本發(fā)明的技術(shù)范圍。本發(fā)明可以采取其他的各種實(shí)施方式，而且在不脫離本發(fā)明的主旨的范圍內(nèi)能夠進(jìn)行省略或置換等各種變更。這些實(shí)施方式及其變形包含于本說明書等所記載的發(fā)明范圍、主旨內(nèi)，并且包含于權(quán)利要求書所記載的發(fā)明及其等同范圍內(nèi)。