專利名稱：攝像模塊、圖像處理裝置及圖像記錄方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種攝像模塊、圖像處理裝置及圖像記錄方法。
背景技術(shù)：
以往，從臨近距離到無窮遠(yuǎn)的寬范圍內(nèi)的攝影，例如使用具有自動(dòng)對(duì)焦(AF)功能 的透鏡模塊。采用AF功能時(shí)，存在透鏡個(gè)數(shù)及零件個(gè)數(shù)增加、以及成本隨之增加的問題。尤 其是，用于數(shù)碼相機(jī)等的攝像模塊應(yīng)對(duì)薄型化和小型化的要求，傾向于使透鏡與攝像元件 之間的距離(焦點(diǎn)距離)盡可能縮短。此外，近年來被稱作EDoF (Extended Depth of Field，擴(kuò)展景深技術(shù))的技術(shù)發(fā) 展起來，該EDoF用于使固定焦點(diǎn)的透鏡與信號(hào)處理相結(jié)合，從而確保足夠的景深。AF用透 鏡能夠確保焦點(diǎn)位置處的解析度即可，與之相對(duì)，EDoF用固定焦點(diǎn)透鏡由于要確保景深， 存在解析度不夠的問題。例如，在用圖表表示景深和調(diào)制傳遞函數(shù)(Modulation Transfer Function :MTF)之間的關(guān)系時(shí)，AF用透鏡的情況下對(duì)應(yīng)于窄幅寬的圖表，與之相對(duì)，EDoF用 固定焦點(diǎn)透鏡的情況下對(duì)應(yīng)于寬幅寬的圖表。針對(duì)EDoF用固定焦點(diǎn)透鏡的這種透鏡特性， 通過信號(hào)處理彌補(bǔ)解析度的不足，但在該過程中存在S/N(信噪比)惡化的傾向。此外，彌 補(bǔ)景深也是存在極限的，一般，重視無窮遠(yuǎn)處的解析度地進(jìn)行透鏡設(shè)計(jì)。因此，難以在臨近 距離時(shí)獲得足夠的解析度。

發(fā)明內(nèi)容
根據(jù)實(shí)施方式，攝像模塊具有多個(gè)子攝像模塊。上述子攝像模塊具有攝像元件和 攝像透鏡。上述攝像元件對(duì)被攝體像進(jìn)行攝像。上述攝像透鏡使取自被攝體的光向上述攝 像原件入射。上述多個(gè)子攝像模塊中的至少兩個(gè)子攝像模塊具有使得到最佳焦點(diǎn)時(shí)的被攝 體距離相互不同的上述攝像透鏡。上述被攝體距離是上述子攝像模塊與上述被攝體之間的 距離。


圖1是本實(shí)施方式的攝像模塊的立體概略圖。圖2是影像傳感器部的上表面示意圖。圖3是表示各顏色用子攝像模塊的攝像透鏡所具有的MTF特性的例子的圖表。圖4是表示用于對(duì)由攝像模塊的攝像所得到的信號(hào)進(jìn)行處理的圖像處理裝置的 結(jié)構(gòu)的框圖。圖5是對(duì)由塊匹配單元實(shí)施的被攝體像彼此的對(duì)位進(jìn)行說明的圖。
圖6是說明FFT單元、被攝體距離推測(cè)單元、矩陣選擇單元及解析度復(fù)原單元中的 處理的順序的流程圖。圖7是表示實(shí)施方式的變形例的圖像處理裝置的結(jié)構(gòu)的框圖。
具體實(shí)施例方式下面參照附圖，對(duì)實(shí)施方式的攝像模塊、圖像處理裝置及圖像記錄方法進(jìn)行詳細(xì) 說明。另外，本實(shí)施方式并不限定本發(fā)明。圖1是實(shí)施方式的攝像模塊10的立體概略圖。攝像模塊10具有影像傳感器部11 和透鏡組件12。影像傳感器部11具有對(duì)被攝體像進(jìn)行攝像的四個(gè)攝像元件13。透鏡組件 12具有與攝像元件13對(duì)應(yīng)地配置在平面上的四個(gè)攝像透鏡14。攝像模塊10包括四個(gè)獨(dú)立的、具有攝像元件13和攝像透鏡14的子攝像模塊。各 子攝像模塊分擔(dān)被攝體像的各顏色成分地進(jìn)行攝像。攝像透鏡14使取自被攝體的光向攝 像元件13入射。攝像元件13將由攝像透鏡14取入的光轉(zhuǎn)換為信號(hào)電荷。圖2是影像傳感器部11的上表面示意圖。四個(gè)攝像元件13(1361、131 、138、1362) 配置成縱橫2X2的矩陣狀。紅色(I )光用的攝像元件13R、藍(lán)色(B)光用的攝像元件13B、 綠色(G)光用的兩個(gè)攝像元件13G1、13G2與拜耳排列相同，以G光用的兩個(gè)攝像元件13G1、 13G2斜向相對(duì)的方式配置。具有R光用的攝像元件13R的R用子攝像模塊對(duì)被攝體像的R成分進(jìn)行攝像。具 有B光用的攝像元件13B的B用子攝像模塊對(duì)被攝體像的B成分進(jìn)行攝像。具有G光用的 攝像元件13G1的Gl用子攝像模塊、和具有G光用的攝像元件13G2的G2用子攝像模塊對(duì) 被攝體像的作為同色成分的G成分進(jìn)行攝像。另外，所謂同色成分，不限定于波長(zhǎng)區(qū)域相同 的色光的情況，也包含波長(zhǎng)區(qū)域相近似而被認(rèn)為是大致相同的色光的情況。攝像模塊10通過采用具有透鏡組件12的結(jié)構(gòu)，使攝像透鏡14的焦點(diǎn)距離縮短。 由此，能夠使攝像元件13與攝像透鏡14之間的距離縮短。攝像模塊10通過使子攝像模塊 具有對(duì)于同一顏色成分的像素，可以避免相鄰像素間的、對(duì)于不同顏色成分的信號(hào)彼此的 干涉。由此，能夠減少混色，大幅提高靈敏度。此外，各子攝像模塊的攝像透鏡14由于對(duì)各 種顏色成分進(jìn)行了最優(yōu)化透鏡的設(shè)計(jì)，所以能夠大幅減輕軸上色差。攝像模塊10對(duì)應(yīng)于使 靈敏度提高，能夠使F值增大，因此，能夠保持與使各顏色用像素以拜耳排列混合存在攝像 元件內(nèi)的情況相同的噪聲水平，并且擴(kuò)大并加寬景深。這里，四個(gè)子攝像模塊中，以Gl用子攝像模塊為基準(zhǔn)子攝像模塊。在圖2所示的平 面中，設(shè)基準(zhǔn)子攝像模塊的G光用攝像元件13G1與R用子攝像模塊的R光用攝像元件13R 并列的方向?yàn)閄方向，設(shè)基準(zhǔn)子攝像模塊的G光用攝像元件13G1與B用子攝像模塊的B光 用攝像元件13B并列的方向?yàn)閅方向。X方向與Y方向相互垂直。圖2所示的虛線的交點(diǎn)表示假設(shè)各顏色成分的被攝體像的成像位置一致的情況 下的、各攝像元件13Gl、13R、i;3B、13G2的中心位置。當(dāng)以基于Gl用子攝像模塊產(chǎn)生的被攝 體像的成像位置為基準(zhǔn)時(shí)，R用子攝像模塊以被攝體像的成像位置相對(duì)于基準(zhǔn)向X方向位 移半個(gè)像素的量的方式配置。B用子攝像模塊以被攝體像的成像位置相對(duì)于基準(zhǔn)向Y方向 位移半個(gè)像素的量的方式配置。G2用子攝像模塊以被攝體像的成像位置相對(duì)于基準(zhǔn)向X方 向及Y方向分別位移半個(gè)像素的量的方式配置。通過將G用子攝像模塊中的一個(gè)作為基準(zhǔn)子攝像模塊，將可見度高的G成分的被攝體像作為基準(zhǔn)，可以減輕后述圖像處理中的精度差。圖3是表示各顏色用的子攝像模塊的攝像透鏡14所具有的MTF特性的例子的圖 表。圖中所示圖表表示對(duì)于Gl成分、R成分、G2成分、B成分，在l/2NyqUist下的被攝體距 離與MTF之間的關(guān)系。圖表的縱軸為MTF，橫軸為被攝體距離。MTF是表示正弦波物體的像 的調(diào)制相對(duì)于空間頻率的增加的函數(shù)。Gl用、R用、B用的各顏色子攝像模塊中設(shè)置的攝像透鏡14，每一個(gè)都設(shè)計(jì)為最佳 焦點(diǎn)在無窮遠(yuǎn)處。與之相對(duì)，G2用子攝像模塊中設(shè)置的攝像透鏡14，設(shè)計(jì)為例如最佳焦點(diǎn) 在30cm左右的臨近距離處。這樣，四個(gè)子攝像模塊中對(duì)被攝體像的綠色成分進(jìn)行攝像的Gl 用子攝像模塊和G2用子攝像模塊具有得到最佳焦點(diǎn)時(shí)的被攝體距離相互不同的攝像透鏡 14。圖4是表示用于對(duì)攝像模塊10攝像所得的信號(hào)進(jìn)行處理的圖像處理裝置的結(jié)構(gòu) 的框圖。圖像處理裝置大體分為前階段的影像傳感器部11和后階段的處理器20。影像傳 感器部11具有陰影修正單元15、失真修正單元16、矩陣選擇單元17及解析度復(fù)原單元18。 陰影修正單元15、失真修正單元16、矩陣選擇單元17及解析度復(fù)原單元18按照由四個(gè)子 攝像模塊獲得的61、62、1 、8圖像數(shù)據(jù)(RAW圖像)的每個(gè)實(shí)施信號(hào)處理。陰影修正單元15修正攝像透鏡14引起的亮度不均，尤其是修正被攝體像的中央 部與周邊部的光量差(陰影修正)。失真修正單元16修正攝像透鏡14引起的位置錯(cuò)位所 產(chǎn)生的被攝體像的畸變(失真)。處理器20具有高速傅立葉變換(Fast Fourier Transform ；FFT)單元21、被攝體 距離推測(cè)單元22、塊匹配單元23及逆馬賽克變換單元24。FFT單元21取入Gl、G2的RAW 圖像，執(zhí)行基于FFT的從實(shí)際空間向頻率空間的變換。被攝體距離推測(cè)單元22推測(cè)攝像模 塊10及被攝體之間的被攝體距離。影像傳感器部11的矩陣選擇單元17根據(jù)在被攝體距離推測(cè)單元22中推測(cè)的被 攝體距離，對(duì)于R、G、B各色選擇最佳解析度復(fù)原用矩陣。本實(shí)施方式中，解析度復(fù)原用矩陣 是能夠獲得與圖像復(fù)原算法相同效果的反卷積矩陣(deconvolution matrix) 0矩陣選擇 單元17從預(yù)先準(zhǔn)備的例如兩個(gè)解析度復(fù)原用矩陣中選擇最佳的解析度復(fù)原用矩陣。另外， 矩陣選擇單元17從至少兩個(gè)以上的解析度復(fù)原用矩陣中選擇最佳的解析度復(fù)原用矩陣即 可。解析度復(fù)原單元18根據(jù)矩陣選擇單元17選擇的解析度復(fù)原用矩陣，實(shí)施解析度 復(fù)原處理。解析度復(fù)原處理按照由四個(gè)子攝像模塊得到Gl、G2、R、B的圖像數(shù)據(jù)的每個(gè)實(shí) 施。解析度復(fù)原的效果依賴于復(fù)原時(shí)采用的算法。為了復(fù)原為與原被攝體像接近的圖像， 解析度復(fù)原處理例如采用Richards0n-Lucy(R-L)法。處理器20的塊匹配單元23對(duì)于經(jīng)過陰影修正單元15、失真修正單元16、矩陣選 擇單元17及解析度復(fù)原單元18的處理的G1、G2、R、B的各圖像數(shù)據(jù)，實(shí)施塊匹配(圖形匹 配)處理。塊匹配單元23對(duì)于各子攝像模塊得到的被攝體像彼此，進(jìn)行基于塊匹配處理的 對(duì)位。圖5是對(duì)基于塊匹配單元23的被攝體像彼此的對(duì)位進(jìn)行說明的圖。這里，圖中所 示的正方形的每一個(gè)都是表示像素。對(duì)于R像素、B像素、G2像素，用虛線表示被攝體像的成像位置一致的情況，對(duì)于Gl像素，用實(shí)線表示位移半個(gè)像素的量的狀態(tài)。R像素相對(duì)于 Gl像素向圖中橫向位移半個(gè)像素的量。B像素相對(duì)于Gl像素向圖中縱向位移半個(gè)像素的 量。G2像素相對(duì)于Gl像素向橫向及縱向分別位移半個(gè)像素的量。塊匹配單元23以使R像 素、B像素及G2像素以Gl像素的位置為基準(zhǔn)向規(guī)定方向位移半個(gè)像素的量的方式，進(jìn)行以 子像素(sub-pixel)為單位的對(duì)位。返回到圖4，逆馬賽克變換單元M通過對(duì)經(jīng)塊匹配處理得到的圖像實(shí)施逆馬賽克 變換處理，合成彩色圖像。逆馬賽克變換單元M通過實(shí)施像素插值處理，生成不足色成分 的信號(hào)值，所述像素插值處理可看作將經(jīng)塊匹配處理得到的圖像進(jìn)行拜耳(Bayer)排列。 本實(shí)施方式中，通過使由子攝像模塊攝像的被攝體像位移而合成彩色圖像，從而得到規(guī)定 的總像素?cái)?shù)。圖像處理裝置輸出如此合成的彩色圖像。另外，本實(shí)施方式中說明的處理的 過程是一個(gè)例子，也可以適當(dāng)追加其他處理，或者改變處理的順序等。圖像處理裝置不限定于通過配置子攝像模塊使被攝體像位移的情況。例如，也可 以以子像素單位進(jìn)行映射之后，適用雙線性插值或者雙立方插值等插值方法，生成拜耳排 列。該方法在物理地控制被攝體像的位移量比較困難的情況下，例如攝像元件的安裝誤差 或攝像模塊1的制造偏差等的影響較大之類的情況下是有用的，適于使攝像元件細(xì)微化的 情況。本實(shí)施方式的攝像模塊10相比現(xiàn)有的產(chǎn)品具有高靈敏度，因此，即使在不能得到子 像素單位的精度的情況下，也可以例如通過增采樣得到規(guī)定的總像素?cái)?shù)。圖6是對(duì)FFT單元21、被攝體距離推測(cè)單元22、矩陣選擇單元17以及解析度復(fù)原 單元18中的處理的順序進(jìn)行說明的流程圖。FFT單元21在步驟Sl中取入G1、G2的RAW圖 像時(shí)，在步驟S2中，執(zhí)行基于FFT的從實(shí)際空間向頻率空間的轉(zhuǎn)換。在步驟S3中，被攝體距離推測(cè)單元22推測(cè)被攝體距離。被攝體距離推測(cè)單元22 比較Gl及G2經(jīng)數(shù)值化后的空間頻率特性，將含有高頻成分多的一方的RAW圖像選擇為具 有鮮明輪廓的被攝體像。被攝體距離推測(cè)單元22將Gl選擇為含有高頻成分多的一方時(shí)， 推測(cè)為被攝體距離為無窮遠(yuǎn)。此外，被攝體距離推測(cè)單元22將G2選擇為含有高頻成分多 的一方時(shí)，推測(cè)為被攝體距離為臨近距離。被攝體距離推測(cè)單元22中，當(dāng)推測(cè)為被攝體距離為臨近距離時(shí)(步驟S4，是)，矩 陣選擇單元17對(duì)于將無窮遠(yuǎn)設(shè)定為最佳焦點(diǎn)的攝像透鏡14的R、G1、B的各像素?cái)?shù)據(jù)，選擇 用于實(shí)施臨近距離處的解析度復(fù)原的解析度復(fù)原用矩陣mma。ra(R)mma。ra(Gl)mma。ra 。另一方面，在被攝體距離推測(cè)單元22中，當(dāng)推測(cè)為被攝體距離為無窮遠(yuǎn)時(shí)(步驟 S4，否)，矩陣選擇單元17對(duì)于將臨近距離設(shè)定為最佳焦點(diǎn)的攝像透鏡14的G2的像素?cái)?shù) 據(jù)，選擇用于實(shí)施無窮遠(yuǎn)處的解析度復(fù)原的解析度復(fù)原用矩陣minf (G2)。解析度復(fù)原單元18根據(jù)在步驟S5或步驟S6中選擇的解析度復(fù)原用矩陣，在步驟 S7中實(shí)施解析度復(fù)原處理。當(dāng)選擇mma。ra(R)mma。ra(Gl)mma。ra 作為解析度復(fù)原用矩陣時(shí)，解 析度復(fù)原單元18對(duì)于R、G1、B的各像素?cái)?shù)據(jù)實(shí)施以臨近距離為瞄準(zhǔn)處的解析度復(fù)原處理， 并在步驟S8中輸出。解析度復(fù)原單元18也可以不對(duì)G2的圖像數(shù)據(jù)進(jìn)行處理，在步驟S8 中直接輸出即可。當(dāng)選擇minf (G2)作為解析度復(fù)原用矩陣時(shí)，解析度復(fù)原單元18對(duì)于G2的像素?cái)?shù) 據(jù)實(shí)施以無窮遠(yuǎn)為瞄準(zhǔn)處的解析度復(fù)原處理，并在步驟S8中輸出。解析度復(fù)原單元18也 可以不對(duì)R、G1、B的各圖像數(shù)據(jù)進(jìn)行處理，在步驟S8中直接輸出即可。
本實(shí)施方式的攝像模塊10通過設(shè)置最佳焦點(diǎn)不同的攝像透鏡14，實(shí)施基于根據(jù) 推測(cè)的被攝體距離選擇的解析度復(fù)原用矩陣的解析度復(fù)原處理，能夠在確保景深的同時(shí)， 獲得對(duì)應(yīng)于被攝體距離的足夠的解析度。此外，通過使用固定焦點(diǎn)的攝像透鏡14，能夠使攝 像模塊10薄型化以及小型化。由此，當(dāng)攝像模塊10薄型化以及小型化時(shí)，能夠進(jìn)行足夠景 深的高靈敏度的攝影。另外，被攝體距離推測(cè)單元22不限定于推測(cè)被攝體距離為臨近距離以及無窮遠(yuǎn) 的某一方。被攝體距離推測(cè)單元22也可以推測(cè)被攝體距離為至少兩個(gè)焦點(diǎn)距離范圍中的 任一個(gè)，或者，推測(cè)為三個(gè)以上的焦點(diǎn)距離范圍中的任一個(gè)。例如，在被攝體距離為臨近距 離和無窮遠(yuǎn)這兩種焦點(diǎn)距離范圍的基礎(chǔ)上，另外還可以推測(cè)Im至: 的焦點(diǎn)距離范圍的情 況。矩陣選擇單元17根據(jù)推測(cè)的被攝體距離的焦點(diǎn)距離范圍準(zhǔn)備三個(gè)以上的解析度復(fù)原 用矩陣，可以從中選擇最佳的解析度復(fù)原用矩陣。透鏡組件12可以使多個(gè)攝像透鏡14中的至少兩個(gè)是得到最佳焦點(diǎn)時(shí)被攝體距離 相互不同的透鏡，也可以使得到最佳焦點(diǎn)時(shí)的被攝體距離相互不同的攝像透鏡14為三個(gè) 以上。得到最佳焦點(diǎn)時(shí)的被攝體距離可以根據(jù)攝影用途、按被攝體距離的不同攝影頻度的 高低等，任意選擇。例如，臨近距離處的最佳焦點(diǎn)位置優(yōu)選設(shè)定在無窮遠(yuǎn)處的解析度不極端 低下的范圍內(nèi)。由此，可以確保足夠的景深。攝像模塊10不限定于包括各一個(gè)的R用及B用的子攝像模塊、和兩個(gè)G用的子攝 像模塊這四個(gè)子攝像模塊。構(gòu)成攝像模塊10的子攝像模塊也可以為多個(gè)，為四個(gè)以外。此 外，使得到最佳焦點(diǎn)的攝像透鏡14的被攝體距離相互不同不限定于G用的子攝像模塊彼此 的情況，也可以是任意的色光用的子攝像模塊彼此。對(duì)同色成分進(jìn)行攝像的多個(gè)子攝像模 塊彼此通過使被攝體距離相互不同，能夠利用被攝體距離的推測(cè)。圖7是表示本實(shí)施方式的變形例的圖像處理裝置的結(jié)構(gòu)的框圖。影像傳感器部11 具有在陰影修正單元15、失真修正單元16、矩陣選擇單元17及解析度復(fù)原單元18之外設(shè) 置的參數(shù)存儲(chǔ)單元19。參數(shù)存儲(chǔ)單元19中寫入影像傳感器部11的處理所需的參數(shù)，并對(duì) 其進(jìn)行保存。影像處理器部11將攝像模塊10的個(gè)體信息作為參數(shù)保存在參數(shù)存儲(chǔ)單元19 中。另外，個(gè)體信息例如為與透鏡等的零件制造誤差、零件彼此的組裝誤差等、以及不同制 品的個(gè)體差異相關(guān)的信息。陰影修正單元15參照保存在參數(shù)存儲(chǔ)單元19中的參數(shù)，對(duì)被攝體像進(jìn)行陰影修 正。失真修正單元16參照保存在參數(shù)存儲(chǔ)單元19中的參數(shù)，修正被攝體像的失真。由此， 能夠根據(jù)攝像模塊10的個(gè)體差進(jìn)行圖像處理。圖像處理裝置不限定于在影像傳感器部11內(nèi)實(shí)施從陰影處理到解析度復(fù)原處理 的結(jié)構(gòu)。圖像處理裝置也可以在處理器20內(nèi)實(shí)施從陰影處理到解析度復(fù)原處理中的一部 分或者全部。此外，圖像處理裝置不限定于在處理器20內(nèi)實(shí)施FFT、被攝體距離推測(cè)、塊匹 配處理及逆馬賽克變換處理的結(jié)構(gòu)。如果影像傳感器部11的電路規(guī)模和消耗功率能夠允 許，圖像處理裝置也可以在影像傳感器部11內(nèi)實(shí)施FFT、被攝體距離推測(cè)、塊匹配處理及逆 馬賽克變換處理中的一部分或者全部。以上說明了本發(fā)明的實(shí)施方式，但該實(shí)施方式僅是作為例子而公開，并不意在限 定本發(fā)明的范圍。該新穎的實(shí)施方式能夠以其他各種方式進(jìn)行實(shí)施，在不脫離本發(fā)明主旨 的范圍內(nèi)，可以進(jìn)行各種省略、置換以及變更。該實(shí)施方式或其變形，均包含在本發(fā)明的范圍和主旨內(nèi)，并包含在技術(shù)方案的范圍所記載的發(fā)明及其等同替代的范圍內(nèi)。
權(quán)利要求
1.一種攝像模塊，具有多個(gè)子攝像模塊，上述子攝像模塊具有對(duì)被攝體像進(jìn)行攝像的 攝像元件、和使取自被攝體的光向上述攝像元件入射的攝像透鏡，上述多個(gè)子攝像模塊中的至少兩個(gè)子攝像模塊，具有使得到最佳焦點(diǎn)時(shí)的、上述子攝 像模塊與上述被攝體之間的被攝體距離相互不同的上述攝像透鏡。
2.如權(quán)利要求1所述的攝像模塊，上述多個(gè)子攝像模塊分擔(dān)上述被攝體像的各顏色成 分進(jìn)行攝像，上述多個(gè)子攝像模塊中對(duì)上述被攝體像的同色成分進(jìn)行攝像的至少兩個(gè)子攝像模塊， 具有使得到上述最佳焦點(diǎn)時(shí)的上述被攝體距離相互不同的上述攝像透鏡。
3.如權(quán)利要求2所述的攝像模塊，上述同色成分是綠色成分。
4.如權(quán)利要求1所述的攝像模塊，上述多個(gè)子攝像模塊的上述攝像透鏡構(gòu)成透鏡組件。
5.如權(quán)利要求1所述的攝像模塊，將上述多個(gè)子攝像模塊中的一個(gè)子攝像模塊作為基 準(zhǔn)子攝像模塊，基于上述基準(zhǔn)子攝像模塊以外的子攝像模塊產(chǎn)生的上述被攝體像的成像位置，相對(duì)于 基于上述基準(zhǔn)子攝像模塊產(chǎn)生的上述被攝體像的成像位置發(fā)生位移。
6.如權(quán)利要求1所述的攝像模塊，還具有實(shí)施上述被攝體像的解析度復(fù)原處理的解析度復(fù)原單元、 推測(cè)上述被攝體像的上述被攝體距離的被攝體距離推測(cè)單元、和 根據(jù)上述被攝體距離推測(cè)單元中推測(cè)的上述被攝體距離選擇反卷積矩陣的矩陣選擇 單元，上述解析度復(fù)原單元根據(jù)上述矩陣選擇單元選擇的上述反卷積矩陣，按照每個(gè)由上述 子攝像模塊得到的圖像數(shù)據(jù)實(shí)施上述解析度復(fù)原處理。
7.如權(quán)利要求6所述的攝像模塊，上述被攝體距離推測(cè)單元根據(jù)使得到上述最佳焦點(diǎn) 時(shí)的上述被攝體距離相互不同的上述至少兩個(gè)子攝像模塊得到的上述圖像數(shù)據(jù)，推測(cè)上述 被攝體距離。
8.如權(quán)利要求7所述的攝像模塊，上述被攝體距離推測(cè)單元通過對(duì)由上述至少兩個(gè) 子攝像模塊得到的上述圖像數(shù)據(jù)經(jīng)數(shù)值化后的空間頻率特性進(jìn)行比較，推測(cè)上述被攝體距1 。
9.一種圖像處理裝置，具有解析度復(fù)原單元，對(duì)由多個(gè)子攝像模塊攝像得到的被攝體像實(shí)施解析度復(fù)原處理、 被攝體距離推測(cè)單元，推測(cè)上述子攝像模塊與被攝體之間的被攝體距離、和 矩陣選擇單元，根據(jù)在上述被攝體距離推測(cè)單元中推測(cè)的上述被攝體距離，選擇反卷 積矩陣，上述解析度復(fù)原單元根據(jù)由上述矩陣選擇單元選擇的上述反卷積矩陣，按照每個(gè)由上 述子攝像模塊得到的圖像數(shù)據(jù)實(shí)施上述解析度復(fù)原處理。
10.如權(quán)利要求9所述的圖像處理裝置，上述多個(gè)子攝像模塊含有得到最佳焦點(diǎn)時(shí)的 上述被攝體距離相互不同的至少兩個(gè)子攝像模塊，上述被攝體距離推測(cè)單元根據(jù)由上述至少兩個(gè)子攝像模塊得到的上述圖像數(shù)據(jù)，推測(cè) 上述被攝體距離。
11.如權(quán)利要求10所述的圖像處理裝置，上述被攝體距離推測(cè)單元通過對(duì)由上述至少 兩個(gè)子攝像模塊得到的上述圖像數(shù)據(jù)經(jīng)數(shù)值化后的空間頻率特性進(jìn)行比較，推測(cè)上述被攝 體距離。
12.如權(quán)利要求10所述的圖像處理裝置，在上述被攝體距離推測(cè)單元中，當(dāng)推測(cè)為上 述被攝體距離為臨近距離時(shí)，上述矩陣選擇單元對(duì)于由具有在無窮遠(yuǎn)處得到最佳焦點(diǎn)的上 述攝像透鏡的上述子攝像模塊得到的上述圖像數(shù)據(jù)，選擇用于實(shí)施在臨近距離處的上述解 析度復(fù)原處理的上述反卷積矩陣，在上述被攝體距離推測(cè)單元中，當(dāng)推測(cè)為上述被攝體距離為無窮遠(yuǎn)時(shí)，上述矩陣選擇 單元對(duì)于由具有在臨近距離處得到最佳焦點(diǎn)的上述攝像透鏡的上述子攝像模塊得到的上 述圖像數(shù)據(jù)，選擇用于實(shí)施在無窮遠(yuǎn)處的上述解析度復(fù)原處理的上述反卷積矩陣。
13.如權(quán)利要求12所述的圖像處理裝置，上述解析度復(fù)原處理單元對(duì)于根據(jù)上述矩陣 選擇單元選擇的上述反卷積矩陣實(shí)施上述解析度復(fù)原處理以外的上述圖像數(shù)據(jù)，不實(shí)施上 述解析度復(fù)原處理而輸出。
14.一種圖像記錄方法，通過多個(gè)子攝像模塊對(duì)被攝體像進(jìn)行攝像，上述多個(gè)子攝像模 塊中含有得到最佳焦點(diǎn)時(shí)的子攝像模塊與被攝體之間的被攝體距離相互不同的至少兩個(gè) 子攝像模塊，實(shí)施上述被攝體像的解析度復(fù)原處理，推測(cè)上述被攝體像的上述被攝體距離，根據(jù)推測(cè)的上述被攝體距離選擇反卷積矩陣，根據(jù)選擇的上述反卷積矩陣，按照每個(gè)由上述子攝像模塊得到的圖像數(shù)據(jù)實(shí)施上述解 析度復(fù)原處理。
15.如權(quán)利要求14所述的圖像記錄方法，通過上述多個(gè)子攝像模塊分擔(dān)上述被攝體像 的各顏色成分進(jìn)行攝像，通過得到上述最佳焦點(diǎn)時(shí)的上述被攝體距離相互不同的上述至少兩個(gè)子攝像模塊，對(duì) 上述被攝體像的同色成分進(jìn)行攝像。
16.如權(quán)利要求14所述的圖像記錄方法，根據(jù)由得到上述最佳焦點(diǎn)時(shí)的上述被攝體距 離相互不同的上述至少兩個(gè)子攝像模塊得到的上述圖像數(shù)據(jù)，推測(cè)上述被攝體距離。
17.如權(quán)利要求16所述的圖像記錄方法，通過對(duì)由上述至少兩個(gè)子攝像模塊得到的上 述圖像數(shù)據(jù)經(jīng)數(shù)值化后的空間頻率特性進(jìn)行比較，推測(cè)上述被攝體距離。
18.如權(quán)利要求16所述的圖像記錄方法，當(dāng)推測(cè)為上述被攝體距離為臨近距離時(shí)，對(duì) 于由在無窮遠(yuǎn)處得到最佳焦點(diǎn)的上述子攝像模塊得到的上述圖像數(shù)據(jù)，選擇用于實(shí)施在臨 近距離處的上述解析度復(fù)原處理的上述反卷積矩陣，當(dāng)推測(cè)為上述被攝體距離為無窮遠(yuǎn)時(shí)，對(duì)于由在臨近距離處得到最佳焦點(diǎn)的上述子攝 像模塊得到的上述圖像數(shù)據(jù)，選擇用于實(shí)施在無窮遠(yuǎn)處的上述解析度復(fù)原處理的上述反卷 積矩陣。
19.如權(quán)利要求18所述的圖像記錄方法，對(duì)于根據(jù)選擇的上述反卷積矩陣實(shí)施上述解 析度復(fù)原處理以外的上述圖像數(shù)據(jù)，不實(shí)施上述解析度復(fù)原處理。
20.如權(quán)利要求14所述的圖像記錄方法，將上述多個(gè)子攝像模塊中的一個(gè)子攝像模塊 作為基準(zhǔn)子攝像模塊，使基于上述基準(zhǔn)子攝像模塊以外的子攝像模塊產(chǎn)生的上述被攝體像的成像位置，相對(duì) 于基于上述基準(zhǔn)子攝像模塊產(chǎn)生的上述被攝體像的成像位置發(fā)生位移。
全文摘要
攝像模塊、圖像處理裝置及圖像記錄方法，根據(jù)實(shí)施方式，攝像模塊具有多個(gè)子攝像模塊。上述子攝像模塊具有攝像元件和攝像透鏡。上述多個(gè)輻攝像模塊中的至少兩個(gè)具有得到最佳焦點(diǎn)時(shí)的被攝體距離相互不同的上述攝像透鏡。
文檔編號(hào)H04N5/232GK102111544SQ20101060561
公開日2011年6月29日 申請(qǐng)日期2010年12月24日 優(yōu)先權(quán)日2009年12月24日
發(fā)明者小笠原隆行 申請(qǐng)人:株式會(huì)社東芝