專利名稱:攝像裝置以及信號處理裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及攝像裝置以及信號處理裝置。
背景技術(shù):
近年來的安裝于攝像裝置(例如數(shù)字照相機)的攝像部具有各種形式。例如,在專利文獻1中記載的攝像裝置具有可利用獨立的攝像光學(xué)系統(tǒng)拍攝運動圖像和靜止圖像的攝像部。在該專利文獻1中,獨立具備用于拍攝運動圖像的攝像光學(xué)系統(tǒng)和用于拍攝靜止圖像的攝像光學(xué)系統(tǒng),經(jīng)由一方的攝像光學(xué)系統(tǒng)得到的攝像信號與經(jīng)由另一方的攝像光學(xué)系統(tǒng)得到的攝像信號處于非同步的關(guān)系。而且,這些攝像信號被選擇性地輸入到攝像信號的處理部,進行信號處理。
并且,在專利文獻2中示出了如下結(jié)構(gòu)的攝像部可從不同的信道同時輸出攝像元件的垂直方向上相鄰的2個像素的攝像信號,所述攝像元件的攝像面上粘貼有Bayer排列的濾色器。而且,還存在如下結(jié)構(gòu)的攝像部可從不同的信道同時輸出攝像元件的水平方向上相鄰的2個像素的攝像信號,所述攝像元件的攝像面上粘貼有Bayer排列的濾色器。在具有這種結(jié)構(gòu)的攝像部中,從攝像元件的各信道輸出的攝像信號分別輸入到攝像信號的處理部,進行信號處理。
專利文獻1日本特開2003-23555號公報專利文獻2日本特開昭62-92587號公報今后,對于安裝在攝像裝置上的攝像部,考慮根據(jù)性能等采用上述的各種結(jié)構(gòu)。但是,數(shù)字照相機中的攝像信號用于AE、AF等處理。用于實現(xiàn)這些處理的信號處理裝置的結(jié)構(gòu)根據(jù)攝像部的結(jié)構(gòu)而有所不同,但優(yōu)選能夠利用同一結(jié)構(gòu)的信號處理裝置對應(yīng)多種攝像部。
發(fā)明內(nèi)容
本發(fā)明是鑒于上述情況而進行的,其目的在于,提供一種具備能夠?qū)?yīng)多種攝像部的通用性高的信號處理裝置的攝像裝置以及安裝在這種攝像裝置上的信號處理裝置。
為了達到上述目的,本發(fā)明的第一方式的攝像裝置,其對被攝體進行拍攝來得到圖像數(shù)據(jù),所述攝像裝置的特征在于,其包括攝像部,其可輸出第一攝像信號和第二攝像信號這2種攝像信號;第一運算部,其選擇性地對上述2種攝像信號進行處理,生成AE評價值;第二運算部,其選擇性地對上述2種攝像信號進行處理,生成亮度信號,根據(jù)該生成的亮度信號生成AF評價值;以及圖像處理部,其對上述2種攝像信號實施圖像處理,得到圖像數(shù)據(jù)。
此外,為了達到上述目的,本發(fā)明的第二方式的信號處理裝置,其對第一攝像信號和第二攝像信號這2種攝像信號進行處理,所述信號處理裝置的特征在于,其具有第一運算部,其選擇性地對上述2種攝像信號進行處理,生成AE評價值;第二運算部,其選擇性地對上述2種攝像信號進行處理,生成亮度信號,根據(jù)該生成的亮度信號生成AF評價值;以及圖像處理部,其對上述2種攝像信號實施圖像處理,得到圖像數(shù)據(jù)。
根據(jù)本發(fā)明,能夠提供具備可以對應(yīng)多種攝像部的通用性高的信號處理裝置的攝像裝置以及安裝在這種攝像裝置上的信號處理裝置。
圖1是示出本發(fā)明的一實施方式的攝像裝置的主要結(jié)構(gòu)的框圖。
圖2是示出Bayer排列的圖。
圖3是示出選擇部51的詳細結(jié)構(gòu)的圖。
圖4是示出Y生成部61的詳細結(jié)構(gòu)的圖。
圖5是用于說明攝像部10的第一構(gòu)成例的圖。
圖6是示出在使用圖5的攝像部的情況下,圖像處理部30和圖像處理部40的設(shè)定的圖。
圖7是示出在使用圖5的攝像部的情況下,AE評價值運算部50的設(shè)定的圖。
圖8是示出在使用圖5的攝像部的情況下,AF評價值運算部60的設(shè)定的圖。
圖9是示出與圖5所示的攝像部10對應(yīng)地利用圖像處理部30和圖像處理部40進行圖像處理的圖。
圖10是示出與圖5所示的攝像部10對應(yīng)地在AE評價值運算部50中進行與AE評價值運算相關(guān)的處理的時序圖。
圖11是示出與圖5所示的攝像部10對應(yīng)地在AF評價值運算部60進行與AF評價值運算相關(guān)的處理的時序圖。
圖12是用于說明攝像部10的第二構(gòu)成例的圖。
圖13是示出在使用圖12的攝像部的情況下,圖像處理部30和圖像處理部40的設(shè)定的圖。
圖14是示出在使用圖12的攝像部的情況下,AE評價值運算部50的設(shè)定的圖。
圖15是示出在使用圖12的攝像部的情況下,AF評價值運算部60的設(shè)定的圖。
圖16是示出與圖12所示的攝像部10對應(yīng)地在AE評價值運算部50中進行與AE評價值運算相關(guān)的處理的時序圖。
圖17是示出與圖12所示的攝像部10對應(yīng)地在AF評價值運算部60中進行與AF評價值運算相關(guān)的處理的時序圖。
圖18是用于說明攝像部10的第三結(jié)構(gòu)例的圖。
圖19是示出與圖18所示的攝像部10對應(yīng)地在AE評價值運算部50中進行與AE評價值運算相關(guān)的處理的時序圖。
圖20是示出與圖18所示的攝像部10對應(yīng)地在AF評價值運算部60中進行與AF評價值運算相關(guān)的處理的時序圖。
符號說明10、10a、10b攝像部;20、20a、20b前處理部;30、40圖像處理部;31,41低通濾波器(LPF);32、42尺寸調(diào)整(resize)部;33選擇部;34、43、53、63地址控制部;35、44、54、64 DMAIF;50AE評價值運算部;51選擇部;52、62累積部、60AF評價值運算部;61Y生成部、70數(shù)據(jù)總線;80存儲部;511、512觸發(fā)器(FF);513、514、611、615加法部;515、516、517、612、614選擇部;613行存儲器(line memory)。
具體實施例方式
下面,參照附圖,說明本發(fā)明的實施方式。
圖1是示出本發(fā)明的一實施方式所涉及的攝像裝置的主要結(jié)構(gòu)的框圖。圖1所示的攝像裝置由攝像部10、前處理部20、信號處理裝置(圖1中由圖像處理部30和圖像處理部40、AE評價值運算部50、以及AF評價值運算部60構(gòu)成)、數(shù)據(jù)總線70、以及存儲部80構(gòu)成。
攝像部10由至少一個攝像光學(xué)系統(tǒng)和配置于攝像光學(xué)系統(tǒng)后方的至少一個攝像元件構(gòu)成。攝像光學(xué)系統(tǒng)將來自未圖示的被攝體的光會聚到攝像元件上。攝像元件是例如CCD方式的攝像元件,接收來自未圖示的被攝體的光,輸出與所接收的光對應(yīng)的攝像信號。在該攝像元件的攝像面上粘貼有圖2所示的Bayer排列的濾色器。此處,本實施方式中的攝像部10可以使用后述的輸出各種方式的攝像信號的、各種結(jié)構(gòu)的攝像部。
前處理部20進行用于去除從攝像部10輸出的攝像信號中包含的噪聲成分的相關(guān)雙采樣(CDS)處理、攝像信號的放大處理、以及將攝像信號數(shù)字化的處理等各種前處理。
圖像處理部30和圖像處理部40對從前處理部20輸出的攝像信號實施預(yù)定的圖像處理,得到圖像數(shù)據(jù)。此處,在圖1中,作為圖像處理的例子,示出了進行尺寸調(diào)整處理的結(jié)構(gòu),該尺寸調(diào)整處理用于在未圖示的顯示裝置上進行圖像顯示,但也可以進行尺寸調(diào)整處理以外的圖像處理。如圖1所示,圖像處理部30由低通濾波器(LPF)31、尺寸調(diào)整部32、選擇部33、地址控制部34、以及DMAIF 35構(gòu)成。并且,圖像處理部40由LPF 41、尺寸調(diào)整部42、地址控制部43、以及DMAIF 44構(gòu)成。此處,由選擇部33、地址控制部34、DMAIF 35、地址控制部43、以及DMAIF 44構(gòu)成存儲處理部。
為了防止后級的尺寸調(diào)整處理引起的折疊失真,LPF 31和LPF 41除去從前處理部20輸入的攝像信號的高頻成分。尺寸調(diào)整部32和尺寸調(diào)整部42對從LPF 31和LPF 41輸入的攝像信號實施尺寸調(diào)整處理,得到圖像數(shù)據(jù)。選擇部33與尺寸調(diào)整部32和尺寸調(diào)整部42連接,選擇來自尺寸調(diào)整部32和尺寸調(diào)整部42中的某一方的圖像數(shù)據(jù),輸出給DMAIF35。地址控制部34和地址控制部43控制將圖像數(shù)據(jù)寫入到存儲部80時的寫入地址。DMAIF 35和DMAIF 44進行圖像數(shù)據(jù)的DMA傳送。
作為第一運算部的AE評價值運算部50按照每個顏色累積分割成多個區(qū)域的攝像面的各個區(qū)域所對應(yīng)的攝像信號(Bayer排列的情況下,為R、Gr、Gb、B的3種顏色4個成分),從而求出AE評價值。如圖1所示,AE評價值運算部50由選擇部51、累積部52、地址控制部53、以及DMAIF 54構(gòu)成。
選擇部51對前處理部20中處理的攝像信號進行處理后輸出,通過處理使得該攝像信號能夠在累積部52上按照每個顏色進行累積。圖3是示出選擇部5 1的詳細結(jié)構(gòu)的圖。如圖3所示,選擇部51由觸發(fā)器(FF)511和觸發(fā)器(FF)512、加法部513和加法部514、選擇部515和選擇部516、以及選擇部517構(gòu)成。
FF 511和FF 512將來自前處理部20的攝像信號僅保持1像素所對應(yīng)的量。作為第一加法部的加法部513將來自前處理部20的攝像信號和保持于FF 511的攝像信號相加,輸出到選擇部515上。作為第二加法部的加法部514將來自前處理部20的攝像信號和保持于FF 512的攝像信號相加,輸出到選擇部516上。
作為第一選擇部的選擇部515,根據(jù)選擇信號sel1的設(shè)定,選擇來自前處理部20的攝像信號和在加法部513中相加得到的攝像信號中的任意一個攝像信號,輸出到選擇部517上。此處,當選擇信號sel1為“0”時,選擇部515選擇來自前處理部20的攝像信號,當選擇信號sel1為“1”時,選擇部515選擇來自加法部513的攝像信號。作為第二選擇部的選擇部516,根據(jù)選擇信號sel 2的設(shè)定,選擇來自前處理部20的攝像信號和在加法部514中相加得到的攝像信號中的任意一個攝像信號,輸出到選擇部517上。此處,當選擇信號sel 2為“0”時,選擇部516選擇來自前處理部20的攝像信號,當選擇信號sel 2為“1”時,選擇部516選擇來自加法部514的攝像信號。作為第三選擇部的選擇部517,根據(jù)選擇信號sel 3的設(shè)定,選擇來自選擇部515的攝像信號和來自選擇部516的攝像信號中的任意一個攝像信號,輸出到累積部52上。此處,當選擇信號sel 3為“0”時,選擇部517選擇來自選擇部515的攝像信號,當選擇信號sel 3為“1”時,選擇部517選擇來自選擇部516的攝像信號。
作為AE評價值生成部的累積部52按照每個區(qū)域和每個顏色累積從選擇部51輸入的攝像信號,求出AE評價值。此處,累積部52例如構(gòu)成為能夠按照每個區(qū)域和每個顏色累積以Bayer排列的順序輸入的攝像信號。地址控制部53控制將AE評價值寫入到存儲部80時的寫入地址。DMAIF 54進行AE評價值的DMA傳送。
作為第二運算部的AF評價值運算部60根據(jù)前處理部20中處理的攝像信號生成亮度(Y)信號之后(對R、Gr、Gb、B分別乘以系數(shù)之后相加),將分割成多個區(qū)域的攝像面的各個區(qū)域所對應(yīng)的Y信號累積,從而求出AF評價值。該AF評價值運算部60由Y生成部61、累積部62、地址控制部63、以及DMAIF 64構(gòu)成。
Y生成部61根據(jù)從前處理部20輸出的2種攝像信號生成Y信號,輸出到累積部62。圖4是示出Y生成部61的詳細結(jié)構(gòu)的圖。如圖4所示,Y生成部61由加法部611、選擇部612、行存儲器613、選擇部614、以及加法部615構(gòu)成。
作為第三加法部的加法部611將在前處理部20中前處理后的2個像素所對應(yīng)量的攝像信號相加,輸出到選擇部612和選擇部614上。作為第四選擇部的選擇部612根據(jù)選擇信號sel 0的設(shè)定,選擇來自前處理部20的攝像信號和在加法部611中相加得到的攝像信號的任意一個攝像信號,輸出到行存儲器613上。此處,當選擇信號sel 0為“0”時,選擇部612選擇來自前處理部20的攝像信號,當選擇信號sel 0為“1”時,選擇部612選擇來自加法部611的攝像信號。
作為保持部的行存儲器613對于從選擇部612輸出的攝像信號僅保持1行所對應(yīng)的量。作為第五選擇部的選擇部614,根據(jù)選擇信號sel 1的設(shè)定,選擇來自前處理部20的攝像信號(圖4的“1”和“4”)、來自行存儲器613的攝像信號(圖4的“2”)以及來自加法部611的攝像信號(圖4的“3”)中的任意一個攝像信號,輸出到加法部615上。作為第四加法部的加法部615將從選擇部612輸出的2個攝像信號相加,生成Y信號,將所生成的Y信號輸出到累積部62上。
作為AF評價值生成部的累積部62,按照每個區(qū)域累積從Y生成部61輸出的Y信號,求出AF評價值。地址控制部63控制將AF評價值寫入到存儲部80時的寫入地址。DMAIF 64進行AF評價值的DMA傳送。
此處,在圖1所示的結(jié)構(gòu)中,圖像處理部30和圖像處理部40中的圖像處理、AE評價值運算部50中的AE評價值的運算、以及AF評價值運算部60中的AF評價值的運算可以同時進行。
數(shù)據(jù)總線70是用于分別傳送來自圖像處理部30和圖像處理部40的圖像數(shù)據(jù)、來自AE評價值運算部50的AE評價值、以及來自AF評價值運算部60的AF評價值的傳送路。存儲部80由例如SDRAM構(gòu)成,將經(jīng)由數(shù)據(jù)總線70傳送的圖像數(shù)據(jù)、AE評價值、AF評價值等各種數(shù)據(jù)臨時存儲。
下面,說明具有上述結(jié)構(gòu)的攝像裝置的動作。
首先,說明圖5所示的與輸出2種攝像信號的攝像部10對應(yīng)的動作。圖5所示的攝像部10具有信道1(ch1)和信道2(ch2)這兩個輸出信道。并且,圖5的攝像部10的結(jié)構(gòu)如下在1個水平期間(1H)內(nèi),從ch1輸出奇數(shù)行(Bayer排列的情況下為R、Gr的行)的攝像信號,作為第一攝像信號,從ch2輸出偶數(shù)行(Bayer排列的情況下為Gb、B的行)的攝像信號,作為第二攝像信號。
在圖1所示的攝像裝置中,使用圖5所示的攝像部10的情況下,不使用圖6、圖7、圖8的虛線所示的部分。因此,使選擇部33選擇來自尺寸調(diào)整部32的圖像數(shù)據(jù)。并且,在AE評價值運算部50內(nèi)的選擇部51中,將選擇部515的選擇信號sel 1和選擇部516的選擇信號sel 2均設(shè)定為“0”。此外,在AF評價值運算部60內(nèi)的Y生成部61中,將選擇部614的選擇信號sel 1設(shè)定為“1和4”。
圖9是示出與圖5所示的攝像部10對應(yīng)地利用圖像處理部30和圖像處理部40進行的圖像處理的圖。如上所述,在1個水平期間內(nèi),奇數(shù)行的攝像信號根據(jù)時鐘信號,1個像素1行地從攝像部10的ch1向前處理部20輸入1行所對應(yīng)的量。前處理部20對所輸入的攝像信號實施前處理,輸出到圖像處理部30中。圖像處理部30的LPF 31和尺寸調(diào)整部32對所輸入的攝像信號實施圖像處理,得到圖像數(shù)據(jù)。而且,選擇部33選擇該圖像數(shù)據(jù),輸出到DMAIF 35中。同時,在1個水平期間內(nèi),偶數(shù)行的攝像信號根據(jù)時鐘信號,1個像素1行地從攝像部10的ch2向前處理部20輸入1行所對應(yīng)的量。前處理部20對所輸入的攝像信號實施前處理,輸出到圖像處理部40中。圖像處理部40的LPF 41和尺寸調(diào)整部42對所輸入的攝像信號實施圖像處理,得到圖像數(shù)據(jù)。并且,將該圖像數(shù)據(jù)輸出到DMAIF 44中。
地址控制部34和地址控制部43控制利用DMAIF 35和DMAIF 44寫入圖像數(shù)據(jù)時的寫入地址。具體地說,控制寫入地址,使得來自尺寸調(diào)整部32的圖像數(shù)據(jù)和來自尺寸調(diào)整部42的圖像數(shù)據(jù)1行1行交替地寫入到存儲部80。由此,得到對攝像部10中取入的攝像信號實施圖像處理的結(jié)果。
圖10是示出與圖5所示的攝像部10對應(yīng)地在AE評價值運算部50中進行與AE評價值運算相關(guān)的處理的時序圖。圖10中示出垂直同步信號VD、水平同步信號HD、攝像部10的ch1中的輸出、攝像部10的ch2中的輸出、選擇部515的選擇信號sel 1、選擇部516的選擇信號sel 2、選擇部517的選擇信號sel 3、以及來自選擇部517的輸出。
若對攝像部10輸入了垂直同步信號VD,則開始讀出1幀攝像信號。之后,每次輸入水平同步信號HD時,奇數(shù)行的攝像信號根據(jù)時鐘信號,1個像素1行地從ch1向前處理部20輸入1行所對應(yīng)的量。前處理部20對所輸入的攝像信號實施前處理,輸出到選擇部51的FF511、加法部513、以及選擇部515。此處,選擇部515的選擇信號sel1設(shè)定為“0”,所以選擇部515選擇來自前處理部20的攝像信號,輸出到選擇部517中。
另一方面,偶數(shù)行的攝像信號根據(jù)時鐘信號,1個像素1行地從ch2向前處理部20輸入1行所對應(yīng)的量。前處理部20對所輸入的攝像信號實施前處理,輸出到選擇部51的FF 512、加法部514、以及選擇部516中。此處,選擇部516的選擇信號sel 2設(shè)定為“0”,所以選擇部516選擇來自前處理部20的攝像信號,輸出到選擇部517中。
如圖10所示,選擇部517的選擇信號sel 3在第奇數(shù)行的水平期間設(shè)為“0”,在第偶數(shù)行的水平期間設(shè)為“1”。由此,選擇部517在第奇數(shù)行的水平期間選擇來自ch1的攝像信號,輸出到累積部52中,在第偶數(shù)行的水平期間選擇來自ch2的攝像信號,輸出到累積部52中。即,選擇部517的輸出如圖10所示,攝像部10所取入的攝像信號以Bayer排列的順序輸入到累積部52中。從而可以在累積部52中運算AE評價值。
另外,運算出AE評價值之后,在地址控制部53的控制下,利用DMAIF 54將AE評價值寫入到存儲部80中。并且,通過對該AE評價值進行評價,確定攝影時的曝光條件。對于該方法,可以利用按照每個區(qū)域評價AF評價值的方法、重點評價畫面內(nèi)的部分區(qū)域的方法等公知技術(shù),因此,此處省略詳細說明。
圖11是示出與圖5所示的攝像部10對應(yīng)地在AF評價值運算部60進行與AF評價值運算相關(guān)的處理的時序圖。圖11中示出垂直同步信號VD、水平同步信號HD、攝像部10的ch1中的輸出、攝像部10的ch2中的輸出、選擇部612的選擇信號sel 0、選擇部614的選擇信號sel 1、以及加法部615的輸出。
若對攝像部10輸入了垂直同步信號VD,則開始讀出1攝像信號。之后,每次輸入水平同步信號HD時,奇數(shù)行的攝像信號根據(jù)時鐘信號,1個像素1行地從ch1向前處理部20輸入1行所對應(yīng)的量。前處理部20對所輸入的攝像信號實施前處理,輸出到Y(jié)生成部61的加法部611、選擇部612、以及選擇部614中。此處,選擇部614的選擇信號sel 1設(shè)定為“1和4”,所以選擇部614選擇來自前處理部20的攝像信號,輸出到加法部615中。
另一方面,偶數(shù)行的攝像信號根據(jù)時鐘信號,1個像素1行地從ch2向前處理部20輸入1行所對應(yīng)的量。前處理部20對所輸入的攝像信號實施前處理,輸出到Y(jié)生成部61的加法部611以及選擇部614中。此處,選擇部614的選擇信號sel 1設(shè)定為“1和4”,所以選擇部614選擇來自前處理部20的攝像信號,輸出到加法部615中。
加法部615對所輸入的攝像信號的各顏色乘以預(yù)定系數(shù)之后相加,從而生成Y信號,輸出到累積部62中。例如,NTSC形式的情況下,顏色信號和Y信號之間存在如下關(guān)系Y=0.3R+0.59G+0.11B。
另外,在上述式子中,G=(Gr+Gb)/2。這樣生成的Y信號在累積部62中按照每個區(qū)域累積,運算出AF評價值。
此外,運算出AF評價值之后,在地址控制部63的控制下,利用DMAIF 64將AF評價值寫入到存儲部80中。并且,根據(jù)該AF評價值對圖像的對比度進行評價,驅(qū)動鏡頭,從而將圖像對比度最高的攝影鏡頭的位置設(shè)為對焦位置。該方法屬于公知技術(shù),所以在此省略詳細說明。
接著,說明圖12所示的與輸出2種攝像信號的攝像部10對應(yīng)的動作。圖12所示的攝像部10具有信道1(ch1)和信道2(ch2)這2種輸出信道。而且,圖12的攝像部10的結(jié)構(gòu)如下在1個水平期間(1H)內(nèi),從ch1輸出奇數(shù)列像素(Bayer排列的情況下為R或Gb)的攝像信號,作為第一攝像信號,從ch2輸出偶數(shù)列像素(Bayer排列的情況下為Gr、B)的攝像信號,作為第二攝像信號。另外,圖12的情況下,在1個水平期間內(nèi)僅輸入相同顏色的攝像信號。
在圖1所示的攝像裝置中,使用圖12所示的攝像部10的情況下,不使用圖13、圖14、圖15的虛線所示的部分。因此,不使DMAIF 44動作。并且,在AE評價值運算部50內(nèi)的選擇部51中,選擇部515的選擇信號sel 1和選擇部516的選擇信號sel 2均設(shè)為“1”。另外,在AF評價值運算部60內(nèi)的Y生成部61中,將選擇部612的選擇信號sel 0設(shè)為“1”,將選擇部614的選擇信號sel 1設(shè)定“2和3”。
說明與圖12所示的攝像部10對應(yīng)地利用圖像處理部30和圖像處理部40進行的圖像處理。如上所述,奇數(shù)列的攝像信號根據(jù)時鐘信號,1個像素1個像素地從攝像部10的ch1輸入到前處理部20。前處理部20對所輸入的攝像信號實施前處理,輸出到圖像處理部30中。圖像處理部30的LPF 31和尺寸調(diào)整部32對所輸入的攝像信號實施圖像處理,得到圖像數(shù)據(jù)。然后,將該圖像數(shù)據(jù)輸出到選擇部33中。同時,偶數(shù)列的攝像信號根據(jù)時鐘信號,1個像素1個像素地從ch2輸入到前處理部20中。前處理部20對所輸入的攝像信號實施前處理,輸出到圖像處理部40中。圖像處理部40的LPF 41和尺寸調(diào)整部42對所輸入的攝像信號實施圖像處理,得到圖像數(shù)據(jù)。然后,將該圖像數(shù)據(jù)輸出到選擇部33中。
選擇部331個像素1個像素交替地選擇從尺寸調(diào)整部32和尺寸調(diào)整部42輸入的圖像數(shù)據(jù),輸出到DMAIF 35中。地址控制部34控制利用DMAIF 35寫入圖像數(shù)據(jù)時的寫入地址。具體地說,按照如下方式進行控制在通過選擇部33選擇預(yù)定像素(例如1行)所對應(yīng)量的圖像數(shù)據(jù)的時刻,所選擇的圖像數(shù)據(jù)按照所選擇的順序?qū)懭氲酱鎯Σ?0中。由此,得到對攝像部10所取入的攝像信號實施了圖像處理的結(jié)果。
圖16是示出與圖12所示的攝像部10對應(yīng)地在AE評價值運算部50中進行與AE評價值運算相關(guān)的處理的時序圖。圖16中示出垂直同步信號VD、水平同步信號HD、攝像部10的ch1中的輸出、攝像部10的ch2中的輸出、加法部513的輸出、加法部514的輸出、選擇部515的選擇信號sel 1、選擇部516的選擇信號sel 2、選擇部517的選擇信號sel 3、以及來自選擇部517的輸出。
若對攝像部10輸入了垂直同步信號VD,則開始讀出1幀攝像信號。之后,每次輸入水平同步信號HD時,奇數(shù)列的攝像信號根據(jù)時鐘信號,1個像素1個像素地從ch1輸入到前處理部20中。前處理部20對所輸入的攝像信號實施前處理,輸出到選擇部51的FF 511、加法部513、以及選擇部515中。加法部513將FF 511中保持的攝像信號和來自前處理部20的攝像信號相加,輸出到選擇部515中。由此,如圖16所示,R彼此以及Gb彼此相加。進而,選擇部515的選擇信號sel 1設(shè)定為“1”,所以選擇部515選擇來自加法部513的攝像信號,輸出到選擇部517中。
另一方面,偶數(shù)列的攝像信號根據(jù)時鐘信號,1個像素1個像素地從ch2輸入到前處理部20中。前處理部20對所輸入的攝像信號實施前處理,輸出到選擇部51的FF 512、加法部514、以及選擇部516中。加法部514將FF 512中保持的攝像信號和來自前處理部20的攝像信號相加,輸出到選擇部516中。由此,如圖16所示,Gr彼此以及B彼此相加。此外,選擇部516的選擇信號sel 2設(shè)定為“1”,所以選擇部516選擇來自加法部514的攝像信號,輸出到選擇部517中。
如圖16所示,選擇部517的選擇信號sel 3從第二個時鐘之后,每隔時鐘,交替設(shè)定“0”和“1”。因此,選擇部517的輸出如圖16所示,攝像部10所取入的攝像信號以Bayer排列的順序輸入到累積部52中。由此,可以在累積部52中運算AE評價值。
圖17是示出與圖12所示的攝像部10對應(yīng)地在AF評價值運算部60中進行與AF評價值運算相關(guān)的處理的時序圖。圖17中示出垂直同步信號VD、水平同步信號HD、攝像部10的ch1中的輸出、攝像部10的ch2中的輸出、加法部611的輸出、行存儲器613的輸出、選擇部612的選擇信號sel 0、選擇部614的選擇信號sel 1、以及加法部615的輸出。
若對攝像部10輸入垂直同步信號VD,則開始讀出1幀攝像信號。之后,每次輸入水平同步信號HD時,奇數(shù)列的攝像信號根據(jù)時鐘信號,1個像素1個像素地從ch1輸入到前處理部20中。前處理部20對所輸入的攝像信號實施前處理,輸出到Y(jié)生成部61的加法部611、選擇部612、以及選擇部614中。
另一方面,偶數(shù)列的攝像信號根據(jù)時鐘信號,1個像素1個像素地從ch2輸入到前處理部20中。前處理部20對所輸入的攝像信號實施前處理,輸出到Y(jié)生成部61的加法部611以及選擇部614中。
加法部611對來自ch1的攝像信號和來自ch2的攝像信號的各顏色乘以預(yù)定系數(shù)之后相加,輸出到選擇部612和選擇部614中。此處的系數(shù)以上述的用于求出Y信號的系數(shù)為基準。即,針對每個時鐘對加法部611輸入用于求出Y信號的4個成分中的2個成分,所以乘以與該2個成分對應(yīng)的系數(shù)之后相加。此外,選擇部612的選擇信號sel 0設(shè)為“1”,所以選擇部612選擇來自加法部611的攝像信號,輸出到行存儲器613中。若對行存儲器613輸入1行攝像信號,則從行存儲器613輸出攝像信號。
此處,選擇部614的選擇信號sel 1設(shè)定為“2和3”,所以選擇部614選擇來自加法部611的攝像信號和來自行存儲器613的攝像信號,輸出到加法部615中。如圖17所示,通過選擇來自加法部611的攝像信號和來自行存儲器613的攝像信號,從而收齊用于生成Y信號所需的各顏色的攝像信號。
加法部615將所輸入的攝像信號相加,從而生成Y信號,輸出到累積部62中。這樣生成的Y信號在累積部62中按照每個區(qū)域累積,運算出AF評價值。
接著,說明圖18的與攝像部10對應(yīng)的動作。圖18所示的攝像部10由攝像部10a和攝像部10b這兩個攝像部構(gòu)成,與此同時,前處理部20也由前處理部20a和前處理部20b構(gòu)成。
攝像部10a和攝像部10b分別由攝像光學(xué)系統(tǒng)、配置于攝像光學(xué)系統(tǒng)后方的攝像元件構(gòu)成。此處,攝像部10a和攝像部10b的攝像元件分別以圖2所示的Bayer排列輸出攝像信號。并且,前處理部20a對攝像部10a所得到的攝像信號進行前處理,前處理部20b對攝像部10b所得到的攝像信號進行前處理。
說明與圖18所示的攝像部10對應(yīng)地利用圖像處理部30和圖像處理部40進行的圖像處理。如上所述,攝像部10a和攝像部10b分別輸出Bayer排列的攝像信號,所以僅使圖像處理部30和圖像處理部40中的任意一方動作,即可進行圖像處理。或者,也可以像例如利用圖像處理部30進行靜止圖像攝影用的圖像處理、利用圖像處理部40進行運動圖像攝影用的圖像處理那樣使兩者進行完全不同的圖像處理。該情況下,圖像處理部30和圖像處理部40所得到的圖像數(shù)據(jù)各自獨立地存儲到存儲部80中。
圖19是示出與圖18所示的攝像部10對應(yīng)地在AE評價值運算部50中進行與AE評價值運算相關(guān)的處理的時序圖。如圖19所示,攝像部10a和攝像部10分別輸出Bayer排列的攝像信號,所以將選擇部515的選擇信號sel 1以及選擇部516的選擇信號sel 2均設(shè)定為“0”,將選擇部517的選擇信號sel 3設(shè)定為希望使用的信道,從而利用攝像部10a和攝像部10b的希望的一方進行AE評價值運算。
圖20是示出與圖18所示的攝像部10對應(yīng)地在AF評價值運算部60中進行與AF評價值運算相關(guān)的處理的時序圖。如圖19所示,攝像部10a和攝像部10b分別輸出Bayer排列的攝像信號,所以將選擇部612的選擇信號sel 0設(shè)定為希望使用的信道,將選擇部614的選擇信號sel 1設(shè)定為2、1或4,從而可以利用攝像部10a和攝像部10b的希望的一方進行AF評價值運算。
另外,當然圖19和圖20所示的選擇部的設(shè)定也可以應(yīng)用到輸出Bayer排列的攝像信號的攝像部僅有1個的情況。
如上述說明,根據(jù)第一實施方式,僅改變圖像處理部30、AE評價值運算部50、以及AF評價值運算部60內(nèi)部的各選擇部的設(shè)定,就能夠進行與結(jié)構(gòu)不同的多種攝像部10對應(yīng)的圖像處理、AE評價值運算、以及AF評價值運算。
以上,根據(jù)實施方式對本發(fā)明進行了說明,但本發(fā)明不限于上述的實施方式,在本發(fā)明的要旨的范圍內(nèi)可以進行各種變形和應(yīng)用。例如,上述的實施方式中,攝像部10可以輸出2種不同的攝像信號,但對于可以輸出3種以上不同的攝像信號的攝像部,也可以應(yīng)用上述實施方式的方法。
而且,上述的實施方式中包括各種階段的發(fā)明,通過所公開的多個構(gòu)成要件的適當組合,可以提取各種發(fā)明。例如,從實施方式中示出的全部構(gòu)成要件中刪除幾個構(gòu)成要件,也能夠解決上述課題,獲得上述效果的情況下,刪除該構(gòu)成要件的結(jié)構(gòu)也能作為發(fā)明提取。
權(quán)利要求
1.一種攝像裝置,該攝像裝置對被攝體進行拍攝來得到圖像數(shù)據(jù),所述攝像裝置的特征在于,所述攝像裝置包括攝像部,其可輸出第一攝像信號和第二攝像信號這2種攝像信號;第一運算部,其選擇性地對上述2種攝像信號進行處理,生成AE評價值;第二運算部,其選擇性地對上述2種攝像信號進行處理,生成亮度信號,根據(jù)該生成的亮度信號生成AF評價值;以及圖像處理部,其對上述2種攝像信號實施圖像處理,得到圖像數(shù)據(jù)。
2.根據(jù)權(quán)利要求1所述的攝像裝置,其特征在于,上述第一運算部具備第一加法部,其將連續(xù)輸出的2個像素所對應(yīng)量的上述第一攝像信號相加;第二加法部,其將連續(xù)輸出的2個像素所對應(yīng)量的上述第二攝像信號相加;第一選擇部,其選擇來自上述攝像部的第一攝像信號和來自上述第一加法部的攝像信號中的任意一個攝像信號;第二選擇部,其選擇來自上述攝像部的第二攝像信號和來自上述第二加法部的攝像信號中的任意一個攝像信號;第三選擇部,其選擇來自上述第一選擇部的攝像信號和來自上述第二選擇部的攝像信號中的任意一個攝像信號;以及AE評價值生成部,其根據(jù)來自上述第三選擇部的攝像信號,生成上述AE評價值。
3.根據(jù)權(quán)利要求1所述的攝像裝置,其特征在于,上述第二運算部具備第三加法部,其將來自上述攝像部的第一攝像信號和第二攝像信號相加;第四選擇部,其選擇來自上述攝像部的第一攝像信號和來自上述第三加法部的攝像信號中的任意一個攝像信號;保持部,其保持來自上述第四選擇部的攝像信號;第五選擇部,其選擇來自上述攝像部的第一攝像信號和第二攝像信號、來自上述保持部的攝像信號以及來自上述第三加法部的攝像信號中的任意一個攝像信號;第四加法部,其將來自上述第五選擇部的2個攝像信號相加,生成亮度信號;以及AF評價值生成部,其根據(jù)來自上述第四加法部的亮度信號,生成上述AF評價值。
4.根據(jù)權(quán)利要求1所述的攝像裝置,其特征在于,所述攝像裝置還具有存儲部,該存儲部存儲利用上述圖像處理部得到的圖像數(shù)據(jù),上述圖像處理部具備第一圖像處理部,其對上述第一攝像信號實施圖像處理,得到圖像數(shù)據(jù);第二圖像處理部,其對上述第二攝像信號實施圖像處理,得到圖像數(shù)據(jù);以及存儲處理部,其選擇性地將上述第一圖像處理部所得到的圖像數(shù)據(jù)和上述第二圖像處理部所得到的圖像數(shù)據(jù)寫入到上述存儲部中。
5.根據(jù)權(quán)利要求2所述的攝像裝置,其特征在于,在上述攝像部中像素排列成矩陣狀,且上述攝像部針對每一個時鐘1個像素1個像素地同時輸出相鄰2行的在垂直方向上相鄰的2個像素的攝像信號,分別作為上述第一攝像信號和上述第二攝像信號,在上述第一運算部中,上述第一選擇部選擇來自上述攝像部的第一攝像信號,上述第二選擇部選擇來自上述攝像部的第二攝像信號,上述第三選擇部每隔一行交替地選擇來自上述第一選擇部的第一攝像信號和來自上述第二選擇部的第二攝像信號。
6.根據(jù)權(quán)利要求3所述的攝像裝置,其特征在于,在上述攝像部中像素排列成矩陣狀,且上述攝像部針對每一個時鐘1個像素1個像素地同時輸出相鄰2行的在垂直方向上相鄰的2個像素的攝像信號,分別作為上述第一攝像信號和上述第二攝像信號,在上述第二運算部中,上述第五選擇部選擇來自上述攝像部的第一攝像信號和來自上述攝像部的第二攝像信號這兩個攝像信號。
7.根據(jù)權(quán)利要求4所述的攝像裝置,其特征在于,在上述攝像部中像素排列成矩陣狀,且上述攝像部針對每一個時鐘1個像素1個像素地同時輸出相鄰2行的在垂直方向上相鄰的2個像素的攝像信號,分別作為上述第一攝像信號和上述第二攝像信號,在上述圖像處理部中,上述存儲處理部將利用上述第一圖像處理部和上述第二圖像處理部分別得到的圖像數(shù)據(jù)每隔一行交替地寫入到上述存儲部中。
8.根據(jù)權(quán)利要求2所述的攝像裝置,其特征在于,在上述攝像部中像素排列成矩陣狀,且上述攝像部針對每一個時鐘1個像素1個像素地同時輸出1行上的水平方向相鄰的2個像素的攝像信號,分別作為上述第一攝像信號和上述第二攝像信號,在上述第一運算部中,上述第一選擇部選擇來自上述第一加法部的攝像信號,上述第二選擇部選擇來自上述第二加法部的攝像信號,上述第三選擇部每隔一個時鐘交替地選擇來自上述第一選擇部的攝像信號和來自上述第二選擇部的攝像信號。
9.根據(jù)權(quán)利要求3所述的攝像裝置,其特征在于,在上述攝像部中像素排列成矩陣狀,且上述攝像部針對每一個時鐘1個像素1個像素地同時輸出1行上的水平方向相鄰的2個像素的攝像信號,分別作為上述第一攝像信號和上述第二攝像信號,在上述第二運算部中,上述第四選擇部選擇來自上述第三加法部的攝像信號,上述第五選擇部選擇來自上述保持部的攝像信號和來自上述第三加法部的攝像信號這兩個攝像信號。
10.根據(jù)權(quán)利要求4所述的攝像裝置,其特征在于,在上述攝像部中像素排列成矩陣狀,且上述攝像部針對每一個時鐘1個像素1個像素地同時輸出1行上的水平方向相鄰的2個像素的攝像信號,分別作為上述第一攝像信號和上述第二攝像信號,在上述圖像處理部中,上述存儲處理部每隔一個時鐘交替地選擇利用上述第一圖像處理部和上述第二圖像處理部分別得到的圖像數(shù)據(jù),將該圖像數(shù)據(jù)寫入到上述存儲部中。
11.根據(jù)權(quán)利要求1所述的攝像裝置,其特征在于,上述攝像部具有攝像光學(xué)系統(tǒng),其具有第一攝像光學(xué)系統(tǒng)和第二攝像光學(xué)系統(tǒng);第一攝像元件,其接收來自上述第一攝像光學(xué)系統(tǒng)的光,輸出上述第一攝像信號;以及第二攝像元件,其接收來自上述第二攝像光學(xué)系統(tǒng)的光,輸出上述第二攝像信號,上述圖像處理部具有第一圖像處理部,其對上述第一攝像信號實施第一圖像處理;以及第二圖像處理部,其對上述第二攝像信號實施與上述第一圖像處理不同的第二圖像處理。
12.根據(jù)權(quán)利要求11所述的攝像裝置,其特征在于,上述第一攝像元件和上述第二攝像元件分別是靜止圖像攝影用的攝像元件和運動圖像攝影用的攝像元件,上述第一圖像處理和上述第二圖像處理分別是靜止圖像攝影用的圖像處理和運動圖像攝影用的圖像處理。
13.根據(jù)權(quán)利要求1~12中的任意一項所述的攝像裝置,其特征在于,在所述攝像裝置中同時進行上述第一運算部中的AE評價值的生成、上述第二運算部中的AF評價值的生成、以及上述圖像處理部中的圖像處理。
14.一種信號處理裝置,該信號處理裝置用于處理第一攝像信號和第二攝像信號這2種攝像信號,所述信號處理裝置的特征在于,所述信號處理裝置具有第一運算部,其選擇性地對上述2種攝像信號進行處理,生成AE評價值;第二運算部,其選擇性地對上述2種攝像信號進行處理,生成亮度信號,根據(jù)該生成的亮度信號生成AF評價值;以及圖像處理部,其對上述2種攝像信號實施圖像處理,得到圖像數(shù)據(jù)。
全文摘要
本發(fā)明提供一種攝像裝置以及信號處理裝置,其中,該攝像裝置具備能夠?qū)?yīng)多種攝像部的通用性高的信號處理裝置,該信號處理裝置安裝到這種攝像裝置。所述攝像裝置具有攝像部(10),其可輸出第一攝像信號和第二攝像信號這2種攝像信號;AE評價值運算部(50),其選擇性地處理2種攝像信號,生成AE評價值;AF評價值運算部(60),其選擇性地處理2種攝像信號,生成亮度信號,根據(jù)所生成的亮度信號,生成AF評價值;以及圖像處理部(30、40),其對2種攝像信號實施圖像處理,得到圖像數(shù)據(jù)。
文檔編號H04N5/232GK101094319SQ20071010554
公開日2007年12月26日 申請日期2007年5月25日 優(yōu)先權(quán)日2006年6月20日
發(fā)明者梁田崇志, 田中義信 申請人:奧林巴斯株式會社, 奧林巴斯映像株式會社