攝像裝置、圖像處理裝置、記錄有圖像文件的記錄介質(zhì)、記錄方法、圖像再現(xiàn)方法以及程序的制作方法
【專利摘要】提供能夠以更高畫質(zhì)使RAW數(shù)據(jù)顯影的攝像裝置、圖像處理裝置、記錄圖像文件的記錄介質(zhì)、記錄方法、圖像再現(xiàn)方法以及程序。具有：攝像部(11)，其生成圖像數(shù)據(jù)，該圖像數(shù)據(jù)是將從多個(gè)像素分別輸出的多個(gè)電信號(hào)中的從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的；以及圖像文件生成部(194)，其生成圖像文件，該圖像文件將攝像部(11)生成的圖像數(shù)據(jù)和與攝像部(11)的置換像素的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄。
【專利說明】攝像裝置、圖像處理裝置、記錄有圖像文件的記錄介質(zhì)、記錄方法、圖像再現(xiàn)方法以及程序

【技術(shù)領(lǐng)域】
[0001 ] 本發(fā)明涉及通過對(duì)被攝體攝像并進(jìn)行光電轉(zhuǎn)換來生成電子圖像數(shù)據(jù)的攝像裝置、對(duì)圖像數(shù)據(jù)實(shí)施圖像處理的圖像處理裝置、記錄有圖像文件的記錄介質(zhì)、圖像數(shù)據(jù)的記錄方法、記錄圖像數(shù)據(jù)的圖像文件的圖像再現(xiàn)方法以及程序。

【背景技術(shù)】
[0002]近年來，在數(shù)字相機(jī)或數(shù)字?jǐn)z像機(jī)等攝像裝置中，已知通過RAW數(shù)據(jù)的形式將攝像結(jié)果記錄于存儲(chǔ)卡等記錄介質(zhì)中的技術(shù)。這里，RAW數(shù)據(jù)是從攝像元件得到的攝像結(jié)果的圖像數(shù)據(jù)，是未執(zhí)行Y校正處理、白平衡調(diào)整處理和頻率特性的校正處理等用于顯示攝像結(jié)果的一系列畫質(zhì)校正處理的畫質(zhì)校正前的圖像數(shù)據(jù)。作為記錄這種RAW數(shù)據(jù)的攝像裝置，已知將畫質(zhì)校正前的RAW數(shù)據(jù)與確定攝影時(shí)的畫質(zhì)校正處理的畫質(zhì)指定信息對(duì)應(yīng)起來記錄的攝像裝置(參照專利文獻(xiàn)I)。
[0003]現(xiàn)有技術(shù)文獻(xiàn)
[0004]專利文獻(xiàn)
[0005]專利文獻(xiàn)I日本特開2007-334708號(hào)公報(bào)


【發(fā)明內(nèi)容】

[0006]發(fā)明要解決的課題
[0007]然而，在上述專利文獻(xiàn)I中記錄的RAW數(shù)據(jù)例如是使用周邊的其他像素的圖像數(shù)據(jù)對(duì)攝像元件的像素缺陷進(jìn)行插值后得到的數(shù)據(jù)。因此，如果通過個(gè)人計(jì)算機(jī)等其他圖像處理裝置對(duì)記錄于記錄介質(zhì)中的RAW數(shù)據(jù)進(jìn)行顯示用的畫質(zhì)校正處理并顯影，則其制約會(huì)影響畫質(zhì)。
[0008]本發(fā)明就是鑒于上述情況而完成的，其目的在于提供一種能夠以更高畫質(zhì)對(duì)RAW數(shù)據(jù)進(jìn)行顯影的攝像裝置、圖像處理裝置、圖像文件、記錄方法以及程序。
[0009]用于解決課題的手段
[0010]為了解決上述課題，達(dá)成目的，本發(fā)明的攝像裝置的特征在于，具有:攝像部，其生成圖像數(shù)據(jù)，該圖像數(shù)據(jù)是將從多個(gè)像素分別輸出的多個(gè)電信號(hào)中的從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的；以及圖像文件生成部，其生成圖像文件，該圖像文件將所述攝像部生成的所述圖像數(shù)據(jù)和與所述攝像部的所述置換像素的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄。
[0011]此外，本發(fā)明的攝像裝置的特征在于，在上述發(fā)明中，所述置換像素是以下像素中的任意一種以上的像素:像素存在缺陷的缺陷像素；檢測(cè)該攝像裝置的焦點(diǎn)時(shí)使用的檢測(cè)用像素；具有與構(gòu)成圖像的像素不同的濾色器(用于檢測(cè)特定的波長(zhǎng)的BPF(Band PassFilter:帶通濾波器)等)的像素；在邊緣提取中提取出的提取像素；以及使用其他圖像數(shù)據(jù)對(duì)像素信號(hào)進(jìn)行補(bǔ)充校正的校正對(duì)象的校正像素。近年來，攝像元件中存在具有各種功能的結(jié)構(gòu)，并非所有像素都能用于攝像，因此需要在圖像化時(shí)事先把握不用于圖像形成的像素?cái)?shù)據(jù)、不適于使用的像素?cái)?shù)據(jù)、圖像用以外的像素?cái)?shù)據(jù)。在把握了以上情況后，能夠進(jìn)行校正、代用或置換而再現(xiàn)良好的圖像。
[0012]此外，本發(fā)明的攝像裝置的特征在于，在上述發(fā)明中，所述校正像素是用于調(diào)整攝影參數(shù)的專用功能像素或與根據(jù)攝影條件確定的圖像區(qū)域相當(dāng)?shù)南袼亍?br> [0013]此外，本發(fā)明的圖像處理裝置對(duì)由具有攝像部的攝像裝置生成的圖像文件實(shí)施圖像處理，該攝像部具有多個(gè)像素，其特征在于，該圖像處理裝置具有圖像處理部，該圖像處理部取得圖像文件，根據(jù)由取得的所述圖像文件記錄的位置信息對(duì)圖像數(shù)據(jù)進(jìn)行畫質(zhì)校正處理，生成處理圖像數(shù)據(jù)，其中，所述圖像數(shù)據(jù)由所述攝像部生成，并且是將從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的，所述圖像文件將所述圖像數(shù)據(jù)和與所述攝像部的所述置換像素的位置有關(guān)的所述位置信息對(duì)應(yīng)起來記錄。
[0014]此外，本發(fā)明的圖像處理裝置的特征在于，在上述發(fā)明中，還具有顯示部，該顯示部再現(xiàn)顯示與所述處理圖像數(shù)據(jù)對(duì)應(yīng)的處理圖像。
[0015]此外，本發(fā)明的記錄介質(zhì)記錄由具有攝像部的攝像裝置生成的圖像文件，該攝像部具有多個(gè)像素，其特征在于，所述圖像文件記錄如下內(nèi)容:圖像數(shù)據(jù)，其由所述攝像部生成，并且是將從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的；以及位置信息，其與所述攝像部的所述置換像素的位置有關(guān)。
[0016]此外，本發(fā)明的記錄方法是由具有攝像部的攝像裝置執(zhí)行的記錄方法，該攝像部具有多個(gè)像素，其特征在于，執(zhí)行如下步驟:攝像步驟，生成圖像數(shù)據(jù)，該圖像數(shù)據(jù)是將從多個(gè)像素分別輸出的多個(gè)電信號(hào)中的從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的；以及圖像文件生成步驟，生成圖像文件，該圖像文件將在所述攝像步驟中生成的所述圖像數(shù)據(jù)和與所述攝像步驟中的所述置換像素的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄。
[0017]此外，本發(fā)明的圖像再現(xiàn)方法是由進(jìn)行圖像文件的圖像再現(xiàn)的圖像再現(xiàn)設(shè)備執(zhí)行的圖像再現(xiàn)方法，該圖像文件記錄圖像數(shù)據(jù)，其特征在于，該圖像再現(xiàn)方法具有以下步驟:取得步驟，取得與置換像素的位置有關(guān)的置換對(duì)象像素信息，該置換像素是構(gòu)成對(duì)應(yīng)于所述圖像數(shù)據(jù)的圖像、且被置換為其他像素的像素；確定步驟，根據(jù)在所述取得步驟中取得的所述置換對(duì)象像素信息，由從構(gòu)成對(duì)應(yīng)于所述圖像數(shù)據(jù)的圖像的多個(gè)像素中分別輸出的多個(gè)電信號(hào)確定所述置換像素；生成步驟，通過從所述多個(gè)圖像分別輸出的多個(gè)電信號(hào)對(duì)在所述確定步驟中確定出的所述置換像素進(jìn)行插值并生成插值圖像數(shù)據(jù)；以及再現(xiàn)步驟，對(duì)在所述生成步驟中生成的所述插值圖像數(shù)據(jù)進(jìn)行再現(xiàn)。
[0018]此外，本發(fā)明的程序的特征在于，使具有具備多個(gè)像素的攝像部的攝像裝置執(zhí)行如下步驟:攝像步驟，生成圖像數(shù)據(jù)，該圖像數(shù)據(jù)是將從多個(gè)像素分別輸出的多個(gè)電信號(hào)中的從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)得到的；以及圖像文件生成步驟，生成圖像文件，該圖像文件將在所述攝像步驟中生成的所述圖像數(shù)據(jù)和與所述攝像步驟中的所述置換像素的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄。
[0019]發(fā)明的效果
[0020]根據(jù)本發(fā)明，圖像文件生成部生成圖像文件，該圖像文件將RWA數(shù)據(jù)和與插值像素或置換像素的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄，因此具有如下效果:在對(duì)RAW數(shù)據(jù)進(jìn)行顯示用的畫質(zhì)校正處理時(shí)，能夠增加再現(xiàn)時(shí)的自由度并以高畫質(zhì)進(jìn)行顯影。

【專利附圖】

【附圖說明】
[0021]圖1是表示本發(fā)明的第I實(shí)施方式的攝像裝置的功能結(jié)構(gòu)的框圖。
[0022]圖2是表示本發(fā)明的第I實(shí)施方式的攝像裝置的攝像部的受光部和垂直模擬加法電路的結(jié)構(gòu)的一例的電路圖。
[0023]圖3是說明本發(fā)明的第I實(shí)施方式的攝像裝置的AF信號(hào)計(jì)算部進(jìn)行的瞳分割相位差法的概要的示意圖。
[0024]圖4是表示根據(jù)本發(fā)明的第I實(shí)施方式的攝像裝置的AF信號(hào)計(jì)算部進(jìn)行的瞳分割相位差法而由攝像部得到的圖像信號(hào)的圖。
[0025]圖5是說明本發(fā)明的第I實(shí)施方式的攝像裝置的AF信號(hào)計(jì)算部進(jìn)行的其他的瞳分割相位差法的概要的示意圖。
[0026]圖6是說明本發(fā)明的第I實(shí)施方式的攝像裝置的攝像部的像素排列的圖。
[0027]圖7是說明本發(fā)明的第I實(shí)施方式的攝像裝置的攝像部進(jìn)行的像素的插值方法的圖。
[0028]圖8是表示本發(fā)明的第I實(shí)施方式的攝像裝置的圖像文件生成部生成的圖像文件的結(jié)構(gòu)的一例的圖。
[0029]圖9是表示本發(fā)明的第I實(shí)施方式的攝像裝置執(zhí)行的處理的概要的流程圖。
[0030]圖10是表示圖9的動(dòng)態(tài)圖像時(shí)像素讀出處理的概要的流程圖。
[0031]圖11是示意性表示通過其他圖像處理裝置對(duì)由本發(fā)明的第I實(shí)施方式的攝像裝置拍攝到的RAW數(shù)據(jù)進(jìn)行顯影時(shí)的像素的圖像數(shù)據(jù)的圖。
[0032]圖12是表示本發(fā)明的第2實(shí)施方式的攝像裝置的功能結(jié)構(gòu)的框圖。
[0033]圖13是表示本發(fā)明的第2實(shí)施方式的攝像裝置執(zhí)行的處理的概要的流程圖。
[0034]圖14是表示本發(fā)明的第2實(shí)施方式的攝像裝置的顯示部顯示的圖像的一例的圖。
[0035]圖15是表示本發(fā)明的第2實(shí)施方式的攝像裝置進(jìn)行的HDR攝影的圖像的一例的圖。
[0036]圖16是表示本發(fā)明的第2實(shí)施方式的攝像裝置進(jìn)行的HDR攝影的圖像的另一例的圖。
[0037]圖17是表示本發(fā)明的第2實(shí)施方式的攝像裝置的圖像文件生成部生成的圖像文件的一例的圖。
[0038]圖18是示意性表示通過其他圖像處理裝置對(duì)由本發(fā)明的第2實(shí)施方式的攝像裝置拍攝到的RAW數(shù)據(jù)進(jìn)行顯影時(shí)的像素的圖像數(shù)據(jù)的圖。
[0039]圖19是表示本發(fā)明的第2實(shí)施方式的變形例的攝像裝置的圖像文件生成部生成的圖像文件的一例的圖。

【具體實(shí)施方式】
[0040]以下，參照附圖，說明用于實(shí)施本發(fā)明的方式(以下，稱作“實(shí)施方式”)。此外，本發(fā)明不限于該實(shí)施方式。進(jìn)而，在附圖的描述中，對(duì)于相同的部分賦予同一符號(hào)。
[0041](第I實(shí)施方式)
[0042]圖1是表示本發(fā)明的第I實(shí)施方式的攝像裝置的功能結(jié)構(gòu)的框圖。圖1所示的攝像裝置I具有主體部10和更換鏡頭部20，該更換鏡頭部20可自由拆裝于主體部10上，從規(guī)定的視野區(qū)域會(huì)聚光。
[0043]主體部10具有攝像部11、主體通信部12、時(shí)鐘部13、操作輸入部14、記錄部15、記錄介質(zhì)16、顯示部17、觸摸面板18、控制部19。
[0044]攝像部11通過CXD或CMOS傳感器等攝像元件構(gòu)成。攝像部11既可以是如具有拜爾排列的攝像元件那樣從I個(gè)像素輸出I個(gè)數(shù)據(jù)的攝像元件，也可以是具有層疊型的受光部且從I個(gè)像素輸出RGB這樣的多個(gè)數(shù)據(jù)的攝像元件。攝像部11在控制部19的控制下進(jìn)行驅(qū)動(dòng)。攝像部11經(jīng)由快門(未圖示)通過多個(gè)像素的受光面接受來自更換鏡頭部20的被攝體的光，生成光電轉(zhuǎn)換后的電信號(hào)作為畫質(zhì)校正前的圖像數(shù)據(jù)(RAW數(shù)據(jù))。具體而言，攝像部11生成圖像數(shù)據(jù)并將該圖像數(shù)據(jù)輸出給控制部19，其中，該圖像數(shù)據(jù)是將從多個(gè)像素分別輸出的多個(gè)電信號(hào)中的從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的。此時(shí)，攝像部11將與置換像素和對(duì)置換像素進(jìn)行插值后的攝像用像素各自的位置有關(guān)的位置信息(地址信息)輸出給控制部19。這里，置換像素指的是像素存在缺陷的缺陷像素、檢測(cè)攝像裝置I的焦點(diǎn)時(shí)的檢測(cè)用像素(以下，稱作“AF像素”)、為了獲得光源的特性和被攝體的顏色特性等而具有與構(gòu)成圖像的像素不同的濾色器(用于檢測(cè)特定的波長(zhǎng)的BPF等)的像素、使用在光學(xué)黑體提取中提取的OB圖像和在邊緣提取時(shí)提取的提取像素以及其他圖像數(shù)據(jù)對(duì)像素信號(hào)進(jìn)行補(bǔ)充校正的校正對(duì)象的校正像素中的任意一種像素。這里，校正像素是用于調(diào)整攝影參數(shù)的專用功能像素或與根據(jù)攝影條件確定的圖像區(qū)域相當(dāng)?shù)南袼?。此外，攝影參數(shù)是曝光值、快門速度、ISO靈敏度和白平衡。此外，攝影條件是被攝體深度信息、被攝體的亮度信息和被攝體的顏色信息。近些年來，攝像元件存在具有各種功能的結(jié)構(gòu)，并非所有像素都能夠用于攝像，因此需要在圖像化時(shí)預(yù)先把握不用于圖像形成的像素?cái)?shù)據(jù)、不適于使用的像素?cái)?shù)據(jù)、圖像用以外的像素?cái)?shù)據(jù)。在把握了以上內(nèi)容的基礎(chǔ)上，能夠進(jìn)行校正、代用或置換而再現(xiàn)良好圖像。此外，還可能存在由于攝影光學(xué)系統(tǒng)的問題而優(yōu)選不使用的像素，因此優(yōu)選這種像素在再現(xiàn)時(shí)不直接使用該信號(hào)，而進(jìn)行校正、代用或置換。
[0045]下面說明攝像部11的詳細(xì)結(jié)構(gòu)。攝像部11具有受光部111、垂直模擬加法電路112、水平數(shù)字加法電路113、AF用存儲(chǔ)器114。
[0046]受光部111上呈矩陣狀配置多個(gè)像素，接收來自更換鏡頭部20的被攝體的光并進(jìn)行光電轉(zhuǎn)換，輸出電信號(hào)。
[0047]垂直模擬加法電路112從受光部111中相加并讀出2個(gè)行的像素的值，將該2個(gè)行的加法像素值輸出給水平數(shù)字加法電路113。
[0048]水平數(shù)字加法電路113在2個(gè)列上將從垂直模擬加法電路112輸入的2個(gè)行的加法像素值相加，將4像素的加法像素值作為動(dòng)態(tài)圖像攝像時(shí)的加法像素值輸出給控制部19，并且作為AF像素的像素值輸出給AF用存儲(chǔ)器114并記錄。
[0049]圖2是表示受光部111和垂直模擬加法電路112的結(jié)構(gòu)的一例的電路圖。受光部Ill由呈矩陣狀配置的多個(gè)像素構(gòu)成，圖2中僅示出受光部111中的同色的2行的2個(gè)像素P (虛線)的結(jié)構(gòu)。
[0050]如圖2所示，各像素P通過光電二極管H)、轉(zhuǎn)發(fā)晶體管Tl、浮動(dòng)擴(kuò)散FD、重置晶體管T2、放大晶體管T3構(gòu)成。光電二極管ro根據(jù)接收的光產(chǎn)生電荷。光電二極管ro中產(chǎn)生的電荷被轉(zhuǎn)發(fā)晶體管Tl轉(zhuǎn)發(fā)給浮動(dòng)擴(kuò)散FD并被蓄積。通過重置晶體管T2設(shè)定浮動(dòng)擴(kuò)散FD的重置和蓄積期間，基于浮動(dòng)擴(kuò)散FD的信號(hào)電荷的電壓被放大晶體管T3放大。
[0051]行選擇開關(guān)T4基于行選擇信號(hào)而接通、斷開，經(jīng)由列線(Column line)CA將來自放大晶體管T3的信號(hào)電流輸出給CDS電路11a。I列的所有行選擇開關(guān)T4與共同的列線CA連接，同一行的所有行選擇開關(guān)T4同時(shí)接通，從而從同一行的全部像素P經(jīng)由各列線CA將信號(hào)供給到各CDS電路11a。
[0052]如上構(gòu)成的像素P在靜態(tài)圖像攝影時(shí)，通過未圖示的垂直掃描電路按照每條線選擇性接通行選擇開關(guān)T4。此外，像素P在動(dòng)態(tài)圖像攝像時(shí)，通過垂直掃描電路接通每條線的同一色的2行的行選擇開關(guān)T4。由此，像素P在動(dòng)態(tài)圖像攝影時(shí)，經(jīng)由列線CA輸出同一色的2行的像素P的像素值。
[0053]⑶S電路Ila去除同一色的2行的像素值的重置噪聲而進(jìn)行輸出。⑶S電路Ila的輸出經(jīng)由晶體管T5蓄積于電容器Cl中。在動(dòng)態(tài)圖像攝像時(shí)，在電容器Cl中蓄積2像素的像素值之和的電荷。電容器Cl的蓄積電荷經(jīng)由放大器Ilb被供給給模擬數(shù)字轉(zhuǎn)換部(ADC) 11c，并被轉(zhuǎn)換為數(shù)字信號(hào)后輸出給控制部19。這樣，從設(shè)置于各列線CA上的ADCIIc輸出同色的2行的像素P的加法像素值。另外，各ADCIIc的輸出通過未圖示的水平掃描電路被依次輸出。
[0054]另外，為了簡(jiǎn)化受光部111的結(jié)構(gòu)，并且使處理變得高速，需要使各像素的結(jié)構(gòu)和讀出的步驟等在像素間共同化。因此，攝像部11在動(dòng)態(tài)圖像攝影時(shí)，僅輸出同色的2行的像素P的加法像素值，無法輸出單一的像素P的像素值。此外，攝像部11在動(dòng)態(tài)圖像攝影時(shí)，在通過水平掃描電路完成了 2行的像素P的讀出后，進(jìn)行下2行的像素P的讀出。另外，每當(dāng)2行的像素P的讀出結(jié)束時(shí)，都重置這些行的各像素P。
[0055]返回圖1，繼續(xù)說明攝像裝置I的結(jié)構(gòu)。
[0056]主體通信部12是用于進(jìn)行與安裝于主體部10上的更換鏡頭部20的通信的通信接口。王體通彳目部12還包括與更換鏡頭部20的電觸點(diǎn)。
[0057]時(shí)鐘部13具有計(jì)時(shí)功能和攝影日期時(shí)間的判定功能。時(shí)鐘部13為了對(duì)由攝像部11攝像的圖像數(shù)據(jù)附加日期時(shí)間數(shù)據(jù)而向控制部19輸出日期時(shí)間數(shù)據(jù)。
[0058]操作輸入部14具有:電源開關(guān)，其作為操作輸入用的用戶接口，將攝像裝置I的電源狀態(tài)切換為接通狀態(tài)或斷開狀態(tài)；釋放開關(guān)，其受理用于賦予靜態(tài)圖像攝影的指示的靜態(tài)圖像釋放信號(hào)的輸入；模式轉(zhuǎn)盤開關(guān)，其切換攝像裝置I中設(shè)定的各種攝影模式；操作開關(guān)，其切換攝像裝置I的各種設(shè)定；選單開關(guān)，其將攝像裝置I的各種設(shè)定顯示于顯示部17上；再現(xiàn)開關(guān)，其將與記錄于記錄介質(zhì)16的圖像數(shù)據(jù)對(duì)應(yīng)的圖像顯示于顯示部17上；以及動(dòng)態(tài)圖像開關(guān)，其受理用于賦予動(dòng)態(tài)圖像攝影的指示的動(dòng)態(tài)圖像釋放信號(hào)的輸入。釋放開關(guān)能夠通過來自外部的按壓而進(jìn)退。釋放開關(guān)在被半按下的情況下，被輸入指示攝影準(zhǔn)備動(dòng)作的第I釋放信號(hào)。與此相對(duì)，在全部按下釋放開關(guān)的情況下，被輸入指示靜態(tài)圖像攝影的第2釋放信號(hào)。
[0059]記錄部15是使用易失性存儲(chǔ)器和非易失性存儲(chǔ)器構(gòu)成的。記錄部15暫時(shí)記錄經(jīng)由控制部19從攝像部11輸入的圖像數(shù)據(jù)和攝像裝置I的處理中的信息。此外，記錄部15記錄用于使攝像裝置I動(dòng)作的各種程序、攝像程序和程序的執(zhí)行中使用的各種數(shù)據(jù)和各種參數(shù)。此外，記錄部15記錄用于確定攝像裝置I的制造編號(hào)。
[0060]記錄介質(zhì)16是使用從攝像裝置I的外部安裝的存儲(chǔ)卡等構(gòu)成的。記錄介質(zhì)16經(jīng)由存儲(chǔ)器I/F(未圖示)以自由拆裝的方式安裝于攝像裝置I。在控制部19的控制下，在記錄介質(zhì)16中寫入記錄圖像數(shù)據(jù)的圖像文件，或讀出記錄于記錄介質(zhì)16的圖像文件圖像數(shù)據(jù)。此外，在本第I實(shí)施方式中，圖像文件記錄圖像數(shù)據(jù)和與攝像部11的置換像素的位置有關(guān)的位置信息，其中，該圖像數(shù)據(jù)由攝像部11生成，并且是將從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的。
[0061]顯示部17是使用由液晶或有機(jī)EL(Electro Luminescence)等構(gòu)成的顯示面板構(gòu)成的。顯示部17顯示與圖像數(shù)據(jù)對(duì)應(yīng)的圖像。這里，圖像的顯示包括將剛剛完成攝影后的圖像數(shù)據(jù)顯示規(guī)定時(shí)間(例如3秒)的記錄瀏覽顯示、再現(xiàn)記錄于記錄介質(zhì)16的圖像數(shù)據(jù)的再現(xiàn)顯示和按照時(shí)間序列依次顯示與由攝像部11連續(xù)生成的圖像數(shù)據(jù)對(duì)應(yīng)的實(shí)時(shí)取景圖像的實(shí)時(shí)取景顯示等。此外，顯示部17適當(dāng)顯示攝像裝置I的操作信息和與攝影有關(guān)的信息。
[0062]觸摸面板18設(shè)置于顯示部17的顯示畫面上。觸摸面板18檢測(cè)來自外部的物體的觸摸，輸出與檢測(cè)的觸摸位置對(duì)應(yīng)的位置信號(hào)。此外，觸摸面板18可以檢測(cè)用戶根據(jù)在顯示部17上顯示的信息而接觸的位置，按照該檢測(cè)到的接觸位置受理指示由攝像裝置I進(jìn)行的動(dòng)作的指示信號(hào)的輸入。通常，作為觸摸面板18，具有電阻膜方式、靜電電容方式、光學(xué)方式等。在本第I實(shí)施方式中，能夠應(yīng)用任意的方式的觸摸面板。
[0063]控制部19是使用CPU (Central Processing Unit)等構(gòu)成的。控制部19按照從操作輸入部14或觸摸面板18輸入的指示信號(hào)，向構(gòu)成攝像裝置I的各部分進(jìn)行控制信號(hào)和各種數(shù)據(jù)的發(fā)送，從而總括地控制攝像裝置I的動(dòng)作。
[0064]下面說明控制部19的詳細(xì)結(jié)構(gòu)。控制部19具有AF信號(hào)計(jì)算部191、圖像處理部192、圖像壓縮解壓縮部193、圖像文件生成部194、記錄控制部195。
[0065]AF信號(hào)計(jì)算部191根據(jù)從攝像部11輸入的圖像數(shù)據(jù)取得規(guī)定的區(qū)域的像素的圖像信號(hào)，根據(jù)取得的圖像信號(hào)的相位差，生成基于瞳分割相位差法的AF信號(hào)。AF信號(hào)計(jì)算部191經(jīng)由主體通信部12將AF信號(hào)輸出給更換鏡頭部20。另外，后面敘述AF信號(hào)計(jì)算部191的瞳分割相位差法的詳細(xì)情況。
[0066]圖像處理部192生成處理圖像數(shù)據(jù)，該處理圖像數(shù)據(jù)是對(duì)從攝像部11輸入的圖像數(shù)據(jù)(RAW數(shù)據(jù))進(jìn)行包括畫質(zhì)校正處理的各種圖像處理后得到的。具體地，圖像處理部192對(duì)圖像數(shù)據(jù)進(jìn)行至少包含調(diào)整圖像的明亮度的增益處理、校正灰度的灰度校正處理、邊緣處理、平滑化處理、白平衡處理、色校正處理、噪聲減少處理、Y校正處理和對(duì)應(yīng)于攝影模式的色相校正處理在內(nèi)的圖像處理，生成顯示用或記錄用的處理圖像數(shù)據(jù)。這里，圖像模式是通過人物攝影(肖像攝影)、風(fēng)景攝影、夜景攝影等場(chǎng)景來校正顯影的圖像的畫質(zhì)的模式。另外，在本第I實(shí)施方式中，圖像處理部192作為圖像處理裝置發(fā)揮功能。
[0067]圖像壓縮解壓縮部193按照規(guī)定的形式壓縮由圖像處理部192實(shí)施了圖像處理的處理圖像數(shù)據(jù)，將該壓縮后的壓縮圖像數(shù)據(jù)輸出給記錄介質(zhì)16。這里，作為規(guī)定的形式，具有 JPEG(Joint Photographic Experts Group:聯(lián)合圖像專家小組)方式、Mot1nJPEG方式和MP4(H.264)方式等。此外，圖像壓縮解壓縮部193取得記錄于記錄介質(zhì)16的圖像數(shù)據(jù)(壓縮圖像數(shù)據(jù))，將取得的圖像數(shù)據(jù)解壓縮并輸出給圖像文件生成部194或記錄部15。
[0068]圖像文件生成部194生成圖像文件，該圖像文件將畫質(zhì)校正前的圖像數(shù)據(jù)(RAW數(shù)據(jù))、處理圖像數(shù)據(jù)和壓縮圖像數(shù)據(jù)與攝影信息對(duì)應(yīng)起來記錄，該跟攝影信息包含:與攝像部11的置換像素和對(duì)置換像素進(jìn)行插值后的攝像用像素各自的位置有關(guān)的位置信息(地址信息)或表示包含各自的位置的范圍的范圍信息、攝像裝置I的攝影模式、圖像處理部192的圖像處理參數(shù)。另外，后面敘述圖像文件生成部194生成的圖像文件的詳細(xì)情況。這里，由于是補(bǔ)充不足的像素信息，因而使用了“插值”這一用語(yǔ)，也可以將進(jìn)行的處理改說為“置換”。
[0069]記錄控制部195將圖像文件生成部194生成的圖像文件記錄于記錄介質(zhì)16中。此夕卜，記錄控制部195使圖像文件生成部194生成對(duì)應(yīng)于從操作輸入部14或觸摸面板18輸入的指示信號(hào)的內(nèi)容的圖像文件。具體而言，記錄控制部195使圖像文件生成部194生成將RAW數(shù)據(jù)與攝影信息對(duì)應(yīng)起來記錄的圖像文件并將其記錄于記錄介質(zhì)16中。
[0070]還可以在具有以上的結(jié)構(gòu)的主體部10上進(jìn)一步設(shè)置聲音輸入輸出部、向被攝體發(fā)出輔助光(閃光)的輔助光發(fā)光部、具有經(jīng)由因特網(wǎng)與外部的圖像處理裝置進(jìn)行雙向通信的功能的通信部等。
[0071]接著，說明更換鏡頭部20。更換鏡頭部20具有光學(xué)系統(tǒng)21、驅(qū)動(dòng)部22、鏡頭通f目部23、操作部24、鏡頭記錄部25、鏡頭控制部26。
[0072]光學(xué)系統(tǒng)21是使用一個(gè)或多個(gè)透鏡和光圈構(gòu)成的。光學(xué)系統(tǒng)21從規(guī)定的視野區(qū)域聚集光。光學(xué)系統(tǒng)21具有使視場(chǎng)角改變的光學(xué)變焦功能和使焦點(diǎn)改變的對(duì)焦功能。
[0073]驅(qū)動(dòng)部22是使用DC電機(jī)或步進(jìn)電機(jī)等構(gòu)成的，通過使光學(xué)系統(tǒng)21的透鏡在光軸01上移動(dòng)，從而進(jìn)行光學(xué)系統(tǒng)21的焦點(diǎn)位置和視場(chǎng)角等的變更。此外，驅(qū)動(dòng)部22驅(qū)動(dòng)光學(xué)系統(tǒng)21的光圈。
[0074]鏡頭通信部23是在更換鏡頭部20連接于主體部10時(shí)，用于與主體部10的主體通信部12進(jìn)行通信的通信接口。
[0075]操作部24是設(shè)置于更換鏡頭部20的透鏡鏡筒的周圍的環(huán)，受理開始光學(xué)系統(tǒng)21的光學(xué)變焦的操作的操作信號(hào)的輸入或指示光學(xué)系統(tǒng)21的焦點(diǎn)位置的調(diào)整的指示信號(hào)的輸入。另外，操作部24可以是按壓式的開關(guān)等。
[0076]鏡頭記錄部25是使用Flash存儲(chǔ)器構(gòu)成的，記錄用于分別確定光學(xué)系統(tǒng)21的位置和動(dòng)作的控制用程序、光學(xué)系統(tǒng)21的鏡頭特性、焦距、亮度級(jí)數(shù)和各種參數(shù)。
[0077]鏡頭控制部26是使用CPU等構(gòu)成的。鏡頭控制部26根據(jù)操作部24的操作信號(hào)或來自主體部10的指示信號(hào)控制更換鏡頭部20的動(dòng)作。具體地，鏡頭控制部26根據(jù)操作部24的操作信號(hào)驅(qū)動(dòng)驅(qū)動(dòng)部22進(jìn)行光學(xué)系統(tǒng)21的焦點(diǎn)對(duì)準(zhǔn)、變焦變更或光圈值的變更。此外，鏡頭控制部26在更換鏡頭部20安裝于主體部10時(shí)，將更換鏡頭部20的焦點(diǎn)位置信息、焦距和識(shí)別更換鏡頭部20的固有信息等發(fā)送給主體部10。
[0078]接著，說明上述AF信號(hào)計(jì)算部191使用的瞳分割相位差法。圖3是說明AF信號(hào)計(jì)算部191使用的瞳分割相位差法的概要的示意圖。
[0079]如圖3所示，從被攝體Zl經(jīng)由各光路射入攝像裝置I的光學(xué)像通過光學(xué)系統(tǒng)21而在攝像部11的攝像元件的入射面上成像。作為AF檢測(cè)用的像素(以下，稱作AF像素)構(gòu)成2個(gè)攝像部(例如，R攝像部和L攝像部)，將各光路在射出瞳例如分割為右方向和左方向，將來自右方向的光(右光)和來自左方向的光(左光)分別射入R攝像部攝像部Ilp具體地,如放大圖3所示的攝像部11的一部分所示,通過使R攝像部11K、L攝像部Illj相對(duì)于光學(xué)系統(tǒng)21的光軸偏心,從而能夠使右光和左光分別射入R攝像部11K、L攝像部IL中。
[0080]在焦點(diǎn)對(duì)準(zhǔn)的情況下，來自被攝體的同一點(diǎn)的光射入R攝像部11K、L攝像部Ilp因此，通過在水平方向上配置的AF檢測(cè)用的多個(gè)R攝像部IIk得到的圖像信號(hào)與通過多個(gè)L攝像部Ik得到的圖像信號(hào)相同。
[0081 ] 與此相對(duì)，在未對(duì)焦的情況下，來自被攝體的同一點(diǎn)的光會(huì)射入根據(jù)焦點(diǎn)的偏移量而偏移后的位置的R攝像部Il1^PL攝像部IL中。因此，如圖4所示，通過在水平方向上配置的AF檢測(cè)用的多個(gè)R攝像部IIk得到的圖像信號(hào)(實(shí)線A1與通過多個(gè)L攝像部Il^得到的圖像信號(hào)(虛線)L2的相位錯(cuò)開，該相位的偏移量對(duì)應(yīng)于焦點(diǎn)的偏移量。這樣，AF信號(hào)計(jì)算部191根據(jù)由R攝像部11K、L攝像部Ik得到的圖像信號(hào)L1和圖像信號(hào)L2的相位差，生成驅(qū)動(dòng)焦點(diǎn)調(diào)整用的鏡頭的驅(qū)動(dòng)信號(hào)，經(jīng)由主體通信部12輸出給更換鏡頭部20，從而能夠?qū)崿F(xiàn)攝像裝置I的自動(dòng)對(duì)焦。
[0082]另外，在圖3中，示出了為了使AF像素和攝像用像素(通常像素)的結(jié)構(gòu)共同化，通過僅具有R攝像部IIk的像素(以下，稱作R像素)和僅具有L攝像部IL的像素(以下，稱作L像素)構(gòu)成AF像素的例子。另外，AF信號(hào)計(jì)算部191也可以如圖5所示，省略L像素，僅使用R像素作為AF像素，對(duì)通過多個(gè)攝像用像素(以下，也稱作N像素)得到的圖像信號(hào)的相位和通過R攝像部IIk得到的圖像信號(hào)的相位進(jìn)行比較，從而生成焦點(diǎn)調(diào)整用的驅(qū)動(dòng)信號(hào)。
[0083]接著，詳細(xì)說明攝像部11的像素排列。圖6是說明攝像部11的像素排列的圖。在圖6中，較密的影線表示配置藍(lán)色的濾色器的藍(lán)色的像素，較粗的影線表示配置紅色的濾色器的紅色的像素，無底色處表示配置綠色的濾色器的綠色的像素，具有切邊的框表示AF像素。另外，在圖6中，作為像素排列舉例說明的是拜爾排列，例如也可以應(yīng)用于蜂窩排列。
[0084]如圖6所示，在拜爾排列中，以水平和垂直2X2像素為單位重復(fù)相同的排列。即，2X2像素中斜向配置藍(lán)和紅的像素，剩余的斜向的2個(gè)像素配置綠的像素。在圖6中，A?G的符號(hào)用于指定像素，像素R是AF檢測(cè)用的R像素。另外，在圖3的像素R的位置配置用于獲得綠色的像素的綠色的濾色器。
[0085]攝像部11在靜態(tài)圖像攝影時(shí)將從各像素讀出的信號(hào)直接用作攝像圖像的各像素值，在攝像后進(jìn)行像素插值。另一方面，攝像部11在動(dòng)態(tài)圖像攝像時(shí)，將同色的4個(gè)像素的像素值相加，從而生成該顏色的I個(gè)像素。例如，攝像部11將綠色的像素D?G相加生成綠色的I個(gè)像素，將像素A、B、R、C相加生成該生成的像素的相鄰像素。這對(duì)于其他顏色而言也相同。然而，像素R并非N像素，因此若直接使用像素A、B、R、C構(gòu)成I個(gè)像素,則會(huì)產(chǎn)生畫質(zhì)劣化。于是，在本第I實(shí)施方式中，攝像部11利用其他的像素對(duì)AF像素插值，從而生成圖像數(shù)據(jù)(RAW數(shù)據(jù))。
[0086]圖7是說明攝像部11執(zhí)行的像素的插值方法的圖。另外，在圖7中，說明了僅使用R像素作為AF像素的例子,然而在僅使用L像素作為AF像素的情況下，以及使用R、L像素雙方作為AF像素的情況下同樣能夠應(yīng)用。
[0087]如圖7所示，攝像部11在進(jìn)行動(dòng)態(tài)圖像攝像的情況下，為了高速進(jìn)行通過同色的2行的2列像素生成I個(gè)像素的處理，在從受光部111中讀出圖像信號(hào)時(shí)，將同色的2行的像素相加并讀出。在通過A?G、R表示像素A?G、R的像素值的情況下，如圖7(a)和圖7(b)所示，對(duì)于綠色的像素，輸出加法像素值(D+F)、(E+G)、…、(A+R)、(B+C)、…。進(jìn)而，對(duì)于從攝像部11讀出的加法像素值，進(jìn)行同色的2列的像素加法，從而如圖7 (c)和圖7 (d)所不，可獲得加法像素值(D+E+F+G)、…、(A+B+R+C)、..。另外，如上所述，像素R是輸出僅基于從射出瞳的右方向射入的光的像素值的R像素。
[0088]在本第I實(shí)施方式中，I個(gè)像素由R攝像部I Ik和L攝像部IL構(gòu)成，若能夠?qū)攝像部IIk的像素值與L攝像部IL的像素值相加，則能夠根據(jù)這種AF像素獲得與N像素同等的像素值。即，在像素R的位置上，不僅設(shè)有R攝像部I Ik還設(shè)有L攝像部IL的情況下，估計(jì)L攝像部Ik的像素值，在對(duì)像素R的像素值上加入估計(jì)出的L攝像部Ik的像素值，從而能夠求出在像素R的位置上構(gòu)成N像素的情況下的像素值。
[0089]另外，攝像部11在動(dòng)態(tài)圖像攝像時(shí)，為進(jìn)行高速處理，進(jìn)行上述加法讀出，在動(dòng)態(tài)圖像攝像時(shí)無法進(jìn)行從受光部111中讀出單獨(dú)的像素的像素值等加法讀出以外的讀出。因此，攝像部11既無法直接讀出像素R的像素值，也無法直接求出像素R的2倍的像素值作為像素R的位置的N像素的值。因此，像素R的位置(參照?qǐng)D6)是被像素D?G圍出的中央的位置，將在該位置構(gòu)成N像素時(shí)的像素值估計(jì)為加法像素值(D+E+F+G)/4。進(jìn)而，R攝像部IIk與L攝像部IL的像素值為大致相同的值，設(shè)這些像素值的和為N像素的像素值，將加法像素值(D+E+F+G)/8作為像素R的位置的L攝像部IIl的像素值(圖7(c))。這樣，攝像部11將在加法像素值(A+B+R+C)上加入作為L(zhǎng)攝像部IIl的像素值的加法像素值(D+E+F+G) /8而得到的值，作為用N像素構(gòu)成所有像素A、B、R、C的情況下的加法像素值(圖7(d)) 0
[0090]另一方面，攝像部11為了進(jìn)行動(dòng)態(tài)圖像攝像時(shí)的AF處理，需要求出像素R的像素值(R攝像部的像素值)。圖像處理部192從攝像部11輸出加法像素值(A+R)，根據(jù)該加法像素值(A+R)估計(jì)并減去像素A的像素值，從而獲得像素R的像素值。像素A是與由像素D?G圍出的中央的像素接近的同色像素，因此將像素A的像素值估計(jì)為加法像素值(D+E+F+G)/4。這樣，攝像部11通過加法像素值(A+R)-加法像素值(D+E+F+G)/4來求出像素R的像素值(圖7(e))。
[0091]接著，說明圖像文件生成部194生成的圖像文件。圖8是表示圖像文件生成部194生成的圖像文件的結(jié)構(gòu)的一例的圖。
[0092]圖8所示的圖像文件FlOO是通過以EXIF為基準(zhǔn)的格式記錄RAW數(shù)據(jù)的文件，與EXIF同樣地設(shè)有文件頭,通過IFD(Image File Directory)被分配各種數(shù)據(jù)。
[0093]這里，圖像文件FlOO在文件先頭的字段Fl中記錄主圖像數(shù)據(jù)的再現(xiàn)所需的信息(主圖像數(shù)據(jù)IFD0)、該主圖像數(shù)據(jù)的攝影時(shí)的信息(攝影信息IFD1)。在本第I實(shí)施方式中，向主圖像數(shù)據(jù)分配RAW數(shù)據(jù)DR，主圖像數(shù)據(jù)的攝影時(shí)的信息被分配用于確定在RAW數(shù)據(jù)的攝影時(shí)使用的攝像裝置I的信息、攝影條件的信息。具體而言，被分配EXIF的對(duì)應(yīng)的信息，還被分配光圈、對(duì)焦距離、快門速度等的信息、圖像處理部192的畫質(zhì)校正模式等的信息和圖像處理的參數(shù)以及文件名、用戶名等EXIF中定義的信息。
[0094]此外，圖像文件FlOO的字段F2被分配由圖像壓縮解壓縮部193生成的以JPEG格式進(jìn)行了數(shù)據(jù)壓縮的縮略圖圖像數(shù)據(jù)，在字段F3記錄由該攝像裝置I的制造商獨(dú)自定義的信息(平文部制造商信息IFD)。圖像文件FlOO的這些先頭3個(gè)字段Fl?F3是通過EXIF的格式生成的，因而形成為通過能夠處理EXIF的文件的各種應(yīng)用也能夠再現(xiàn)分配給主圖像數(shù)據(jù)的RAW數(shù)據(jù)。
[0095]接著，圖像文件FlOO被分配主圖像數(shù)據(jù)的攝影時(shí)的圖像處理信息DS0A。具體而言，在字段F4中記錄RAW數(shù)據(jù)DR的攝影時(shí)的攝像裝置I的光圈的設(shè)定(例如，OEV，-1EV等的設(shè)定)、快門速度、攝影模式等。此外，依次記錄在攝影時(shí)得到的具體的參數(shù)。在本第I實(shí)施方式中，作為參數(shù)，首先記錄再現(xiàn)攝影時(shí)的圖像處理所需的參數(shù)，然后記錄各種在局部切取RAW數(shù)據(jù)DR時(shí)使用的基準(zhǔn)的參數(shù)(以下，稱作“切取用基準(zhǔn)信息”)。
[0096]S卩，圖像文件FlOO在字段F5上記錄再現(xiàn)攝影時(shí)的圖像處理所需的參數(shù)(以下，稱作“圖像處理信息”)。因此，關(guān)于光圈，在先頭側(cè)的字段F4上例如記錄為0EV，在接下來的字段F5的圖像處理信息DSOA上記錄具體的光圈值5.6等。此外，關(guān)于畫質(zhì)校正模式，在先頭側(cè)的字段F4上記錄自動(dòng)白平衡調(diào)整模式、人物攝影的攝影模式等，此外，在字段F5的圖像處理信息DSOA上記錄該自動(dòng)白平衡調(diào)整模式的各色信號(hào)的增益、對(duì)應(yīng)于攝影模式的顏色校正的參數(shù)等。
[0097]此外，圖像文件FlOO在字段F6上設(shè)定各種的切取用基準(zhǔn)信息DS0B。具體而言，在字段F6記錄根據(jù)對(duì)焦調(diào)整檢測(cè)的攝影時(shí)的對(duì)焦位置信息。這里，攝影時(shí)的對(duì)焦位置信息是在RAW數(shù)據(jù)DR的圖像上對(duì)焦的區(qū)域的位置信息。此外，記錄通過攝影時(shí)的對(duì)焦搜索處理檢測(cè)到的背景的對(duì)焦位置信息。在字段F6上記錄攝影時(shí)檢測(cè)到的臉部的位置信息。在攝像裝置I中，攝影時(shí)使用臉部的模板檢測(cè)由控制部19拍攝臉部的區(qū)域，將檢測(cè)到該臉部的區(qū)域設(shè)定給該臉部位置的信息。另外，攝像裝置I在用戶選擇人物攝影的攝影模式的情況下，以使得檢測(cè)到該臉部的區(qū)域?qū)沟姆绞竭M(jìn)行對(duì)焦調(diào)整，取得RAW數(shù)據(jù)DR。另外，在未檢測(cè)到臉部的情況下，在臉部的位置信息上記錄該情況。
[0098]此外，圖像文件FlOO記錄逆光位置的信息。這里，逆光位置的信息是在攝像結(jié)果中表示逆光的部分的位置信息，在進(jìn)行對(duì)焦搜索時(shí)檢測(cè)攝像結(jié)果的各部的對(duì)焦位置，根據(jù)該對(duì)焦位置的檢測(cè)結(jié)果，檢測(cè)被判斷為對(duì)I個(gè)物體進(jìn)行了攝影、并且對(duì)焦位置越位于身前側(cè)則亮度級(jí)別越低的區(qū)域，將該檢測(cè)到的區(qū)域的位置信息設(shè)定給逆光位置的信息。圖像文件FlOO還記錄飽和位置的信息。這里，飽和位置的信息是根據(jù)該攝像裝置I的動(dòng)態(tài)范圍而使得亮度級(jí)別飽和的區(qū)域的位置。攝像裝置I在攝影時(shí)使光圈可變，判定相對(duì)于該光圈的變化的各部分的亮度級(jí)別的變化，檢測(cè)飽和的區(qū)域。另外，將該檢測(cè)到的區(qū)域的位置信息設(shè)定為該飽和位置的信息。此外，圖像文件FlOO記錄攝影時(shí)的光軸中心的位置信息。這里，光軸中心的位置信息是根據(jù)用于確定鏡頭中所設(shè)置的鏡頭機(jī)種的信息而設(shè)定的。另外，根據(jù)這些逆光位置信息、飽和位置信息、光軸中心位置信息，也無法檢測(cè)對(duì)應(yīng)的位置信息的情況下，分別記錄該情況。圖像文件FlOO接下來被依次分配其他的各種參數(shù)，形成該主圖像數(shù)據(jù)的攝影時(shí)的攝影信息DS0。
[0099]此外，圖像文件FlOO接著記錄編輯處理的攝影信息DS1、DS2、...。這里，編輯處理的攝影信息DS1、DS2、..?是在編輯處理中設(shè)定的攝影信息，是與分配給攝影時(shí)的攝影信息DSO的再現(xiàn)攝影時(shí)的圖像處理信息DSOA對(duì)應(yīng)地設(shè)定的。關(guān)于攝影信息DS1、DS2、..?，對(duì)分配給攝影時(shí)的攝影信息DSO的字段F4上的光圈的設(shè)定、快門速度、攝影模式等攝影信息追加履歷的信息，形成先頭側(cè)的字段F7。此外，履歷的信息是將各攝影信息DS1、DS2、..?設(shè)定到圖像文件FlOO時(shí)的日期時(shí)間的信息。進(jìn)而，圖像文件FlOO在字段F8上記錄與被分配給前一個(gè)字段F7的攝影信息對(duì)應(yīng)的具體的圖像處理信息。
[0100]此外，圖像文件FlOO在字段F9上記錄與攝像部11的受光部111的AF像素的位置有關(guān)的AF像素的位置信息、和與對(duì)AF像素進(jìn)行插值后的攝像用像素有關(guān)的位置信息。
[0101]此外，圖像文件FlOO在該編輯處理的攝影信息DS1、DS2、..?的區(qū)域后接著被分配縮略圖圖像數(shù)據(jù)DT的再現(xiàn)所需的信息，在進(jìn)一步接下來的字段上被分配縮略圖圖像數(shù)據(jù)DT。此外，被分配作為主圖像數(shù)據(jù)的RAW數(shù)據(jù)DR。在圖像文件FlOO中，形成為能夠在接著該主圖像數(shù)據(jù)之后，追加與分配給攝影時(shí)的攝影信息DSO的切取用基準(zhǔn)信息(字段F6)DSOB對(duì)應(yīng)的信息即在編輯處理時(shí)設(shè)定的切取用基準(zhǔn)信息。另外，該追加的信息為與攝影時(shí)的攝影信息DSO同樣的字段結(jié)構(gòu)，并且與編輯處理時(shí)的攝影信息DS1、...同樣地設(shè)定履歷的信息。
[0102]這里，圖像文件FlOO的RAW數(shù)據(jù)DR的數(shù)據(jù)量占據(jù)整體的數(shù)據(jù)量的95〔 ％〕左右，但是，由于該RAW數(shù)據(jù)DR被分配給文件的末尾，因而僅再現(xiàn)從文件先頭處開始的5〔 ％〕左右，就能夠取得縮略圖圖像數(shù)據(jù)DT、攝影信息DS0、編輯處理的攝影信息DSl?DS2等。
[0103]這樣，在按照?qǐng)D8所示的格式，圖像文件生成部194在圖像文件FlOO中記錄攝像結(jié)果的情況下，基于記錄控制部195的指示，通過從攝像部11輸出的RAW數(shù)據(jù)DR、從記錄控制部195輸出的攝影信息DS和縮略圖圖像數(shù)據(jù)DT、由圖像壓縮解壓縮部193生成的基于JPEG的縮略圖圖像數(shù)據(jù)DT等，生成該圖像文件FlOO的數(shù)據(jù)并輸出給記錄介質(zhì)16。
[0104]接著，說明攝像裝置I執(zhí)行的處理。圖9是表示攝像裝置I執(zhí)行的處理的概要的流程圖。
[0105]如圖9所示，在對(duì)攝像裝置I接通電源后，控制部19判斷攝像裝置I是否被設(shè)定為攝影模式(步驟S101)。在控制部19判斷為攝像裝置I被設(shè)定為攝影模式的情況下(步驟SlOl 是”)，攝像裝置I轉(zhuǎn)移至后述的步驟S102。與此相對(duì)，在控制部19判斷為攝像裝置I未被設(shè)定為攝影模式的情況下(步驟SlOl 否”)，攝像裝置I轉(zhuǎn)移至后述的步驟S122。
[0106]在步驟S102中，控制部19使攝像部11執(zhí)行攝像，使顯示部17顯示對(duì)應(yīng)于從攝像部11輸入的圖像數(shù)據(jù)的實(shí)時(shí)取景圖像。此時(shí)，圖像處理部192對(duì)來自攝像部11的圖像數(shù)據(jù)實(shí)施與顯示部17的顯示像素?cái)?shù)對(duì)應(yīng)的間隔處理，然后向顯示部17輸出。
[0107]接著，在由操作輸入部14輸入了指示動(dòng)態(tài)圖像攝影的指示信號(hào)的情況下(步驟S103 是”)，攝像裝置I執(zhí)行在動(dòng)態(tài)圖像攝影時(shí)從攝像部11中每次同時(shí)讀出2行的動(dòng)態(tài)圖像時(shí)像素讀出處理(步驟S104)。
[0108]圖10是表示動(dòng)態(tài)圖像時(shí)像素讀出處理的概要的流程圖。如圖10所示，攝像部11將上述圖7所示的用于進(jìn)行運(yùn)算的變量L、M、N初始化為O (步驟S201)。
[0109]接著，攝像部11通過垂直模擬加法電路112，將隔著I行的2行的2個(gè)像素相加(步驟S202)。由此，例如可得到圖6的綠色像素D、F的加法像素值(D+F)、像素E、G的加法像素值(E+G)、...。
[0110]此后，在2行的2個(gè)像素為包含AF像素的2個(gè)像素的情況下(步驟S203:“是”)，攝像部11使變量L增加I (L = L+1)(步驟S204)，將加法像素值SI (L) = (A+R)暫時(shí)記錄于AF用存儲(chǔ)器114中(步驟S205)。在步驟S205之后，攝像部11轉(zhuǎn)移至步驟S206。
[0111]在2行的2個(gè)像素并非具有AF像素的2個(gè)像素的情況下(步驟S203 否”)，在受光部111的所有列的處理未結(jié)束的情況下(步驟S206:“否”)，攝像部11變更受光部111的列(步驟S207)，返回步驟S202。與此相對(duì)，在受光部111的所有列的處理結(jié)束的情況下(步驟S206:“是”)，攝像部11轉(zhuǎn)移至步驟S208。
[0112]接著，攝像部11通過水平數(shù)字加法電路113將間隔I列的4個(gè)像素相加(步驟S208)。由此，例如將加法像素值(D+F)與加法像素值(E+G)相加。
[0113]此后，在相加的4個(gè)像素包圍AF像素的情況下(步驟S209:“是”)，攝像部11使變量M增加I (步驟S210)，將加法像素值S2 (M) = (D+E+F+G)暫時(shí)記錄于AF用存儲(chǔ)器114中(步驟S211)。由此，包圍AF像素的所有4個(gè)像素的加法像素值被存儲(chǔ)于AF用存儲(chǔ)器114中。在步驟S211之后，攝像部11轉(zhuǎn)移至步驟S212。
[0114]在相加的4個(gè)像素不包圍AF像素的情況下(步驟S209 否”)，攝像部11轉(zhuǎn)移至步驟S212。
[0115]接著，在相加的4個(gè)像素包圍AF像素的情況下(步驟S212 是”)，攝像部11使變量N增加I (步驟S213)，將4個(gè)像素的加法結(jié)果(A+B+R+C)代入加法像素值S3 (N)中(步驟 S214)。
[0116]此后，攝像部11對(duì)S3 (N)加入S2 (M)/8 (例如，參照?qǐng)D7(d)，得到右邊的加法像素值(步驟S215)。在步驟S215之后，攝像部11轉(zhuǎn)移至步驟S216。
[0117]在步驟S212中，在相加的4個(gè)像素不包含AF像素的情況下(步驟S212 否”)，攝像部11轉(zhuǎn)移至步驟S216。
[0118]接著，在受光部111的所有行都結(jié)束的情況下(步驟S216:“是”)，攝像裝置I返回圖9的主程序。與此相對(duì)，在受光部111的所有行未結(jié)束的情況下(步驟S216:“否”)，攝像部11變更受光部111的行(步驟S217)，返回步驟S202。
[0119]返回圖9，繼續(xù)進(jìn)行步驟S105轉(zhuǎn)移的說明。在步驟S105中，控制部19使由同一色的4個(gè)像素包圍的像素為AF像素時(shí)的4個(gè)像素的加法像素值S2 (J)變?yōu)?/4,從而估計(jì)AF像素由N像素構(gòu)成時(shí)的像素值N(J)。
[0120]接著，AF信號(hào)計(jì)算部191從包含R像素的2個(gè)像素的加法值SI (J)中減去R像素由N像素構(gòu)成時(shí)的像素值N (J)(參照?qǐng)D7 (e))，從而估計(jì)R像素的像素值R (J)(步驟S106)。
[0121]此后，AF信號(hào)計(jì)算部191從AF像素由N像素構(gòu)成時(shí)的像素值N(J)中減去AF像素由R像素構(gòu)成時(shí)的像素值R(J)，從而估計(jì)AF像素由L像素構(gòu)成時(shí)的像素值L(J)(步驟S107)。
[0122]接著，AF信號(hào)計(jì)算部191檢測(cè)通過估計(jì)出的多個(gè)像素值R(J)而得到的圖像信號(hào)與通過估計(jì)出的多個(gè)像素值L(J)而得到的圖像信號(hào)之間的相關(guān)性(步驟S108)，并且檢測(cè)通過估計(jì)出的多個(gè)像素值R(J)而得到的圖像信號(hào)與通過估計(jì)出的多個(gè)像素值N(J)而得到的圖像信號(hào)之間的相關(guān)性(步驟S109)。
[0123]此后，鏡頭控制部26根據(jù)從AF信號(hào)計(jì)算部191輸入的AF信號(hào)，驅(qū)動(dòng)驅(qū)動(dòng)部22，從而通過相關(guān)性較高的一方進(jìn)行光學(xué)系統(tǒng)21的焦點(diǎn)對(duì)準(zhǔn)(步驟S110)。具體而言，AF信號(hào)計(jì)算部191在焦點(diǎn)對(duì)準(zhǔn)的相位差檢測(cè)中采用可獲得較高相關(guān)性的組合。例如，AF信號(hào)計(jì)算部191在通過像素值R(J)得到的圖像信號(hào)與通過多個(gè)像素值L(J)得到的圖像信號(hào)的相關(guān)性較高的情況下，檢測(cè)通過像素值R(J)得到的圖像信號(hào)與通過多個(gè)像素值L(J)得到的圖像信號(hào)之間的相位差，根據(jù)檢測(cè)到的相位差生成用于驅(qū)動(dòng)控制更換鏡頭部20的AF信號(hào)并輸出給鏡頭控制部26。該AF彳目號(hào)被輸出給鏡頭控制部26，鏡頭控制部26驅(qū)動(dòng)驅(qū)動(dòng)部22，進(jìn)行光學(xué)系統(tǒng)21的焦點(diǎn)對(duì)準(zhǔn)。
[0124]接著，圖像處理部192使用所取得的每個(gè)坐標(biāo)的顏色數(shù)據(jù)信息即焦點(diǎn)對(duì)準(zhǔn)后的4個(gè)加法像素值，生成動(dòng)態(tài)圖像攝像時(shí)的圖像，在實(shí)施了規(guī)定的圖像處理后，將對(duì)應(yīng)于處理圖像數(shù)據(jù)的圖像顯示于顯示部17上(步驟S111)。此外，圖像壓縮解壓縮部193對(duì)圖像處理部192生成的處理圖像數(shù)據(jù)實(shí)施編碼處理，然后將其記錄于記錄部152中(步驟S111)。
[0125]此后，在經(jīng)由操作輸入部14被輸入了結(jié)束動(dòng)態(tài)圖像攝影的指示信號(hào)的情況下(步驟S112 是”)，攝像裝置I轉(zhuǎn)移至后述的步驟S117。與此相對(duì)，在未經(jīng)由操作輸入部14被輸入結(jié)束動(dòng)態(tài)圖像攝影的指示信號(hào)的情況下(步驟S112 否”)，攝像裝置I返回步驟S105，繼續(xù)進(jìn)行動(dòng)態(tài)圖像攝影。
[0126]在步驟S103中，在不存在來自操作輸入部14的指示動(dòng)態(tài)圖像攝影的指示信號(hào)的情況下(步驟S103:“否”)，當(dāng)被輸入了指示靜態(tài)圖像攝影的指示信號(hào)時(shí)(步驟S113:“是”)，攝像裝置I執(zhí)行自動(dòng)調(diào)整焦點(diǎn)的AF處理(步驟S114)，執(zhí)行靜態(tài)圖像攝影(步驟SI 15)。此時(shí)，控制部19將從攝像部11輸入的圖像數(shù)據(jù)(RAW數(shù)據(jù)DR)記錄于記錄部15中。
[0127]接著，圖像處理部192從記錄部15取得圖像數(shù)據(jù)，對(duì)取得的圖像數(shù)據(jù)實(shí)施包括AF像素的插值在內(nèi)的圖像處理并生成處理圖像數(shù)據(jù)(步驟S116)。
[0128]此后，圖像文件生成部194生成圖像文件，該圖像文件將記錄于記錄部15中的RAW數(shù)據(jù)DR和處理圖像數(shù)據(jù)、與跟由圖像處理部192實(shí)施了插值處理的攝像部11的AF像素的位置有關(guān)的AF像素的位置信息以及跟用于對(duì)AF像素進(jìn)行插值的攝像用像素的位置有關(guān)的置換像素的位置信息對(duì)應(yīng)起來記錄(步驟S117)，并將生成的圖像文件記錄于記錄介質(zhì)16中(步驟S118)。由此，如圖11所示，攝像裝置I為了對(duì)應(yīng)于實(shí)時(shí)取景圖像而生成高速的圖像數(shù)據(jù)，但是，通過記錄為RAW數(shù)據(jù)DR，在通過其他的圖像處理裝置例如計(jì)算機(jī)對(duì)RAW數(shù)據(jù)DR進(jìn)行顯影時(shí)，通過使用AF像素的位置信息和置換了 AF像素的攝像用像素的位置信息，能夠生成進(jìn)行了更為自然且準(zhǔn)確的插值或置換和合成的圖像。另外，與靜態(tài)圖像攝影同樣地，圖像文件生成部194將記錄于記錄部15中的動(dòng)態(tài)圖像數(shù)據(jù)與AF像素的位置信息和插值像素的信息對(duì)應(yīng)起來，生成圖像文件。
[0129]接著，控制部19使顯示部17對(duì)與所記錄的處理圖像數(shù)據(jù)對(duì)應(yīng)的圖像進(jìn)行記錄瀏覽顯示(步驟SI 19)。
[0130]此后，在攝像裝置I的電源斷開的情況下(步驟S120 是”)，攝像裝置I結(jié)束本處理。與此相對(duì)，在攝像裝置I的電源未斷開的情況下(步驟S120:“否”)，攝像裝置I轉(zhuǎn)移至步驟S121。
[0131]接著，控制部19根據(jù)從操作輸入部14輸入的指示信號(hào)，受理將攝像裝置I的模式變更為攝影模式或再現(xiàn)模式的操作(步驟S121)。在步驟S121之后，攝像裝置I返回步驟
SlOlo
[0132]在步驟S113中，在未經(jīng)由操作輸入部14輸入指示靜態(tài)圖像攝影的指示信號(hào)的情況下(步驟SI 13 否”)，攝像裝置I轉(zhuǎn)移至步驟S120。
[0133]接著，說明攝像裝置I未被設(shè)定為攝影模式的情況(步驟SlOl 否”)。這種情況下，當(dāng)攝像裝置I被設(shè)定為再現(xiàn)模式時(shí)(步驟S122 是”)，控制部19使顯示部17顯示記錄于記錄介質(zhì)16上的圖像文件的一覽顯示(步驟S123)。具體地，控制部19使顯示部17顯示與圖像文件中包含的圖像數(shù)據(jù)對(duì)應(yīng)的縮略圖圖像的一覽顯示。
[0134]在選擇了圖像文件的情況下(步驟S124 是”)，控制部19使顯示部17再現(xiàn)與所選擇的圖像文件的圖像數(shù)據(jù)對(duì)應(yīng)的圖像(步驟S125)。此時(shí)，圖像處理部192使用記錄于圖像文件的RAW數(shù)據(jù)DR和插值像素的位置信息進(jìn)行圖像處理，從而進(jìn)行圖像數(shù)據(jù)的顯影。由此，在本第I實(shí)施方式中，圖像處理部192作為圖像處理裝置發(fā)揮功能。此后，攝像裝置I返回步驟S122。
[0135]在步驟S124中，未在規(guī)定時(shí)間(例如3秒)內(nèi)選擇圖像文件的情況下(步驟S124:“否”)，攝像裝置I轉(zhuǎn)移至步驟S126。
[0136]接著，在從操作輸入部14輸入了結(jié)束再現(xiàn)模式的指示信號(hào)的情況下(步驟S126:“是”)，攝像裝置I轉(zhuǎn)移到步驟S120。與此相對(duì)，在未經(jīng)由操作輸入部14輸入結(jié)束再現(xiàn)模式的指示信號(hào)的情況下(步驟S126 否”)，攝像裝置I返回步驟S123。
[0137]在步驟S122中，在攝像裝置I未被設(shè)定為再現(xiàn)模式的情況下(步驟S122 否”)，攝像裝置I返回步驟S101。
[0138]根據(jù)以上說明的本第I實(shí)施方式，圖像文件生成部194生成圖像文件F100，該圖像文件FlOO將由攝像部11生成的畫質(zhì)校正前的圖像數(shù)據(jù)和與攝像部11的AF像素以及對(duì)插值像素進(jìn)行插值的攝像用像素(N像素)各自的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄，因此，能夠在對(duì)RAW數(shù)據(jù)DR進(jìn)行顯示用的畫質(zhì)校正處理的后處理中以高畫質(zhì)對(duì)圖像進(jìn)行顯影。
[0139]進(jìn)而，根據(jù)本第I實(shí)施方式，為進(jìn)行動(dòng)態(tài)圖像時(shí)的高速處理，在從具有AF像素的攝像部11中將多個(gè)像素的像素值相加后輸出的情況下，也能夠通過簡(jiǎn)單的運(yùn)算處理，估計(jì)AF像素為通常像素時(shí)的加法像素值，能夠獲得高畫質(zhì)的動(dòng)態(tài)圖像。此外，這種情況下，通過簡(jiǎn)單的運(yùn)算處理，能夠取得AF像素的像素值，高精度地進(jìn)行焦點(diǎn)對(duì)準(zhǔn)。另外，簡(jiǎn)單的運(yùn)算處理指的是如下處理，即根據(jù)要進(jìn)行相加的多個(gè)像素是包含AF像素的像素還是包圍AF像素的像素，從而分別存儲(chǔ)加法結(jié)果，對(duì)所存儲(chǔ)的加法結(jié)果進(jìn)行簡(jiǎn)單的四則運(yùn)算，能夠?qū)崿F(xiàn)高速處理。
[0140]此外，在本第I實(shí)施方式中，圖像處理部192根據(jù)AF像素的位置信息和對(duì)AF像素進(jìn)行插值的攝像用像素的位置信息，進(jìn)行RAW數(shù)據(jù)DR的畫質(zhì)校正處理，生成處理圖像數(shù)據(jù)，但是，例如也能夠應(yīng)用在邊緣提取時(shí)提取的提取像素。這種情況下，圖像處理部192根據(jù)提取像素的位置信息，減小插值像素的權(quán)重，關(guān)注其周圍的像素，由此能夠以更高畫質(zhì)顯影圖像。進(jìn)而，在一般的噪聲減少處理中，判斷平坦部和邊緣部，然而也能夠根據(jù)提取像素的位置信息變更此時(shí)的判斷基準(zhǔn)。其結(jié)果，能夠防止圖像處理部192的噪聲減少處理導(dǎo)致的不必要的畫質(zhì)劣化。
[0141]此外，在本第I實(shí)施方式中，說明了僅使用R像素作為AF像素的例子，然而同樣能夠應(yīng)用于僅使用L像素的情況以及使用R、L像素雙方的情況。
[0142]此外，在本第I實(shí)施方式中，說明了使用具有接收來自水平左右方向的光的L攝像部lip R攝像部IIk的像素作為AF像素的例子,然而針對(duì)使用具有接收來自垂直上下方向的光的2個(gè)攝像部的像素作為AF像素的例子，也同樣能夠應(yīng)用，這是不言自明的。
[0143]此外，在本第I實(shí)施方式中，作為RAW數(shù)據(jù)記錄了畫質(zhì)校正前的圖像數(shù)據(jù)，但也可以記錄對(duì)置換像素插值后的圖像數(shù)據(jù)作為RAW數(shù)據(jù)，還可以將置換前的(畫質(zhì)校正前的)置換像素的數(shù)據(jù)另外記錄于圖像文件中。由此，可任意選擇是否對(duì)RAW數(shù)據(jù)DR進(jìn)行顯示用的畫質(zhì)校正處理?？赏ㄟ^各種方法進(jìn)行校正、代用、置換，能夠?qū)崿F(xiàn)與攝像裝置同等的畫質(zhì)，并且在具有另行進(jìn)行顯示用的畫質(zhì)校正處理的后處理的情況下，能夠使用這些信息以更高畫質(zhì)顯影。這里，僅說明了置換像素的數(shù)據(jù)的情況，但是，不僅能夠通過其他像素置換，還能夠根據(jù)圖像的圖案類推并進(jìn)行校正，將這些情況一并用置換這一用語(yǔ)進(jìn)行表現(xiàn)。
[0144]此外，在本第I實(shí)施方式中，校正了對(duì)焦用的像素(AF像素)，然而還存在將曝光調(diào)整用像素嵌入攝像元件中的例子以及嵌入閃光燈的光量控制用的像素、后述的校正曝光的像素的例子，它們都與本實(shí)施例同樣，該像素并非用于攝影和再現(xiàn)顯示用圖像的像素或像素?cái)?shù)據(jù)，無法直接使用，需要上述校正、代用、置換處理。因而，使文件具備表示該像素的位置的信息，對(duì)于在后工序中進(jìn)行處理時(shí)而言是很重要的。不僅如此，還可以將進(jìn)行何種置換和校正的信息放入文件。還可以使其具備例如圖7的置換規(guī)則、置換用像素的信息。通過制定這種共同規(guī)則，能夠在再現(xiàn)時(shí)在再現(xiàn)裝置中實(shí)施最佳的圖像處理。尤其在存在文件的轉(zhuǎn)交和傳輸?shù)那闆r下，需要通過不同的設(shè)備再現(xiàn)，該設(shè)備可能是PC或智能手機(jī)或TV，因而可以根據(jù)這些再現(xiàn)設(shè)備情況，進(jìn)行最佳的圖像調(diào)整。
[0145](第2實(shí)施方式)
[0146]接著，說明本發(fā)明的第2實(shí)施方式。本第2實(shí)施方式的攝像裝置的結(jié)構(gòu)與上述第I實(shí)施方式的攝像裝置不同。因此，在本第2實(shí)施方式中，在說明攝像裝置的結(jié)構(gòu)之后，說明本第2實(shí)施方式的攝像裝置執(zhí)行的處理。另外，以下，對(duì)與上述第I實(shí)施方式相同的結(jié)構(gòu)賦予同一符號(hào)進(jìn)行說明。
[0147]圖12是表示本發(fā)明的第2實(shí)施方式的攝像裝置的功能結(jié)構(gòu)的框圖。圖12所示的攝像裝置200具有主體部210、更換鏡頭部20。
[0148]主體部210具有攝像部11、主體通信部12、時(shí)鐘部13、操作輸入部14、記錄部15、記錄介質(zhì)16、顯示部17、觸摸面板18、被攝體分析部211、控制部212。
[0149]被攝體分析部211經(jīng)由控制部212根據(jù)由攝像部11生成的圖像數(shù)據(jù)分析作為插值對(duì)象的攝像部11的像素區(qū)域。具體地，被攝體分析部211根據(jù)在圖像數(shù)據(jù)中包含的亮度信息，分析被攝體的亮度和曝光狀態(tài)、例如曝光值極限狀態(tài)(過度曝光)、曝光不足狀態(tài)(曝光不足)或適當(dāng)曝光狀態(tài)的像素區(qū)域，將該分析結(jié)果輸出給控制部212。
[0150]控制部212是使用CPU等構(gòu)成的?？刂撇?12根據(jù)從操作輸入部14或觸摸面板18輸入的指示信號(hào)，對(duì)構(gòu)成攝像裝置200的各部分進(jìn)行控制信號(hào)和各種數(shù)據(jù)的轉(zhuǎn)發(fā)，從而總括地控制攝像裝置200的動(dòng)作。
[0151]說明控制部212的詳細(xì)結(jié)構(gòu)?？刂撇?12具有AF信號(hào)計(jì)算部191、圖像處理部192、圖像壓縮解壓縮部193、圖像文件生成部194、記錄控制部195、圖像合成部213。
[0152]圖像合成部213在攝像裝置200以HDR(High Dynamic Range)攝影模式進(jìn)行攝影的情況下，根據(jù)被攝體分析部211的分析結(jié)果和從攝像部11輸入的圖像數(shù)據(jù)，生成放大了動(dòng)態(tài)范圍的圖像數(shù)據(jù)。具體地，圖像合成部213使用從攝像部11輸入的2個(gè)圖像數(shù)據(jù)、例如在一部分像素動(dòng)態(tài)透鏡飽和的圖像數(shù)據(jù)(過度曝光圖像)和在一部分像素產(chǎn)生噪聲的圖像數(shù)據(jù)(曝光不足圖像)，利用其他像素置換產(chǎn)生噪聲的像素或飽和的像素，從而生成調(diào)整了動(dòng)態(tài)透鏡的圖像數(shù)據(jù)。
[0153]下面說明具有以上的結(jié)構(gòu)的攝像裝置200執(zhí)行的處理。圖13是表示攝像裝置200執(zhí)行的處理的概要的流程圖。
[0154]如圖13所示，在攝像裝置200被設(shè)定為攝像模式的情況下(步驟S301 是”)，控制部212經(jīng)由主體通信部12和鏡頭通信部23與更換鏡頭部20進(jìn)行鏡頭通信(步驟S302)。
[0155]接著，控制部212使攝像部11執(zhí)行攝像，使顯示部17顯示與從攝像部11輸入的圖像數(shù)據(jù)對(duì)應(yīng)的實(shí)時(shí)取景圖像(步驟S303)。此時(shí)，圖像處理部192在對(duì)來自攝像部11的圖像數(shù)據(jù)實(shí)施了與顯示部17的顯示像素?cái)?shù)對(duì)應(yīng)的間隔處理后，將其輸出給顯示部17。
[0156]接著，控制部212判斷是否從顯示部17的畫面外進(jìn)行了滑動(dòng)觸摸或半按下了操作輸入部14的釋放開關(guān)(步驟S304)。具體而言，控制部212根據(jù)觸摸面板18從顯示部17的畫面外檢測(cè)觸摸位置，判定該觸摸位置是否產(chǎn)生了時(shí)間性的變化，從而判斷是否被進(jìn)行了滑動(dòng)觸摸。在控制部212判斷為從顯示部17的畫面外進(jìn)行了滑動(dòng)觸摸或半按下了操作輸入部14的釋放開關(guān)的情況下(步驟S304 是”)，攝像裝置200轉(zhuǎn)移至后述的步驟S305。與此相對(duì)，在控制部212判斷為未從顯示部17的畫面外滑動(dòng)觸摸或半按下操作輸入部14的釋放開關(guān)的情況下(步驟S304 否”)，攝像裝置200轉(zhuǎn)移至后述的步驟S312。
[0157]在步驟S305中，控制部212使顯示部17顯示用于調(diào)整生成HDR圖像時(shí)的動(dòng)態(tài)透鏡的HDR條Ml。具體如圖14所示，控制部212將HDR條Ml重疊顯示于顯示部17顯示的實(shí)時(shí)取景圖像Wn(η =自然數(shù))上。進(jìn)而，控制部212使顯示部17將對(duì)HDR圖像的生成進(jìn)行重置的重置圖標(biāo)Al重疊于實(shí)時(shí)取景圖像Wn上進(jìn)行顯示。HDR條Ml例如顯示受理指示曝光過度側(cè)的圖像數(shù)據(jù)的指示信號(hào)的輸入的條位置上端圖標(biāo)Υ1、和受理指示曝光不足側(cè)的圖像數(shù)據(jù)的指示信號(hào)的輸入的條位置下端圖標(biāo)Υ2。
[0158]接著，在經(jīng)由觸摸面板18對(duì)條位置上端圖標(biāo)Yl進(jìn)行滑動(dòng)操作的情況下(步驟S306 是”)，以+側(cè)的圖像數(shù)據(jù)作為合成圖像的基準(zhǔn)，按照滑動(dòng)的移動(dòng)距離使曝光量增減(步驟S307)，將HDR的合成圖像顯示于顯示部17上(步驟S308)。例如圖15所示，圖像合成部213將+側(cè)的圖像Whl作為合成圖像的基準(zhǔn)，按照滑動(dòng)的移動(dòng)距離將彼此合成的圖像Whl和圖像Wul的曝光量增減為適當(dāng)，生成合成圖像1+1。在步驟S308之后，攝像裝置200轉(zhuǎn)移至后述的步驟S312。
[0159]在未經(jīng)由觸摸面板18對(duì)條位置上端圖標(biāo)Yl進(jìn)行滑動(dòng)操作的情況下(步驟S306:“否”)，在經(jīng)由觸摸面板18對(duì)條位置下端圖標(biāo)Υ2進(jìn)行滑動(dòng)操作時(shí)(步驟S309 是”)，以-側(cè)的圖像數(shù)據(jù)作為合成圖像的基準(zhǔn)，按照滑動(dòng)的移動(dòng)距離使曝光量增減(步驟S310)，將HDR的合成圖像顯示于顯示部17上(步驟S311)。例如圖16所示，圖像合成部213以-側(cè)的圖像Wumax為合成圖像的基準(zhǔn)，按照滑動(dòng)的移動(dòng)距離將彼此合成的圖像Whmax和圖像Wimax的曝光量增減為適當(dāng)，生成合成圖像Wn+2。在步驟S311之后，攝像裝置200轉(zhuǎn)移至后述的步驟S312。
[0160]在步驟S309中，在未經(jīng)由觸摸面板18對(duì)條位置下端圖標(biāo)Y2進(jìn)行滑動(dòng)操作的情況下(步驟S309 否”)，攝像裝置200轉(zhuǎn)移至步驟S312。
[0161]接著，控制部212判斷是否是觸摸了重置圖標(biāo)Al的情況、或在顯示部17進(jìn)行了實(shí)時(shí)取景圖像的顯示后不存在觸摸操作(步驟S312)。在由控制部212判斷為觸摸了重置圖標(biāo)Al的情況下，或在顯示部17進(jìn)行了實(shí)時(shí)取景圖像的顯示后不存在觸摸操作的情況下(步驟S312 是”)，攝像裝置200轉(zhuǎn)移至步驟S313。與此相對(duì)，在由控制部212判斷為未觸摸重置圖標(biāo)Al的情況下，或在顯示部17進(jìn)行了實(shí)時(shí)取景圖像的顯示后存在觸摸操作的情況下(步驟S312 否”)，攝像裝置200轉(zhuǎn)移至步驟S314。
[0162]在步驟S313中，圖像合成部213將根據(jù)適當(dāng)曝光的圖像數(shù)據(jù)按照±2級(jí)進(jìn)行了調(diào)整的2個(gè)圖像數(shù)據(jù)合成起來，生成合成圖像。此時(shí)，圖像合成部213也可以合成適當(dāng)曝光的圖像數(shù)據(jù)、-2階段的曝光的圖像數(shù)據(jù)和+2階段的曝光的圖像數(shù)據(jù)這3個(gè)圖像數(shù)據(jù)，生成合成圖像。
[0163]接著，在不存在操作輸入部14的釋放開關(guān)的半按下操作或觸摸，在顯示部17上顯示了 HDR條Ml后，經(jīng)過了規(guī)定時(shí)間(例如3秒)的情況下(步驟S314:“是”)，控制部212將HDR條Ml從顯示部17的實(shí)時(shí)取景圖像中刪除(步驟S315)。在步驟S315之后，攝像裝置200轉(zhuǎn)移至步驟S316。與此相對(duì)，在不存在操作輸入部14的釋放開關(guān)的半按下操作或觸摸，在顯示部17上顯示了 HDR條Ml之后，未經(jīng)過規(guī)定時(shí)間(例如3秒)的情況下(步驟S314 否”)，攝像裝置200執(zhí)行AE、AF處理(步驟S316)。
[0164]接著，在經(jīng)由操作輸入部14的釋放開關(guān)輸入了第2釋放信號(hào)的情況下(步驟S317 是”)，攝像裝置200執(zhí)行靜態(tài)圖像攝影(步驟S318)。此時(shí)，控制部212將從攝像部11輸入的2個(gè)圖像數(shù)據(jù)(RAW數(shù)據(jù)DR)記錄于記錄部15中。
[0165]此后，圖像文件生成部194生成圖像文件，該圖像文件將記錄于記錄部15的校正前的2個(gè)圖像數(shù)據(jù)(RAW數(shù)據(jù)DR)和作為RAW數(shù)據(jù)DR的由圖像合成部213生成的HDR圖像RAW數(shù)據(jù)、與在HDR圖像RAW數(shù)據(jù)中彼此將像素相加并進(jìn)行插值的像素的位置信息對(duì)應(yīng)起來記錄(步驟S319)。具體如圖17所示，圖像文件生成部194制作圖像文件。在該圖像文件的F200中，在字段F9上儲(chǔ)存校正前的2個(gè)RAW數(shù)據(jù)(第IRAW數(shù)據(jù)、第2RAW數(shù)據(jù))和HDR圖像數(shù)據(jù)。進(jìn)而，在字段F9上記錄與在HDR圖像RAW數(shù)據(jù)上彼此將像素相加并置換的像素的位置有關(guān)的位置信息。
[0166]接著，圖像文件生成部194將生成的圖像文件記錄于記錄介質(zhì)16中(步驟S320)。由此，如圖18所示，攝像裝置200為了對(duì)應(yīng)于實(shí)時(shí)取景圖像而生成高速的圖像數(shù)據(jù)，但是，通過記錄為RAW數(shù)據(jù)DR，從而在利用其他的圖像處理裝置、例如計(jì)算機(jī)使用RAW數(shù)據(jù)DR對(duì)HDR圖像顯影時(shí)，通過使用置換像素的位置信息((圖18(a)?圖18 (c))，從而能夠生成進(jìn)行了更為自然且準(zhǔn)確的置換、合成、校正等圖像處理的HDR圖像(圖18(d))。
[0167]此后，在攝像裝置200的電源斷開的情況下(步驟S321 是”)，攝像裝置200結(jié)束本處理。相對(duì)于此，在攝像裝置200的電源未斷開的情況下(步驟S321 否”)，攝像裝置I返回步驟S301。
[0168]在步驟S301中，攝像裝置200未設(shè)定為攝影模式的情況下(步驟S301 否”)，在攝像裝置200設(shè)定為再現(xiàn)模式時(shí)(步驟S322 是”)，控制部212使顯示部17再現(xiàn)記錄于記錄介質(zhì)16中的圖像文件的圖像數(shù)據(jù)(步驟S323)。此時(shí)，圖像處理部192可以根據(jù)儲(chǔ)存于圖像文件中的2個(gè)RAW數(shù)據(jù)和置換像素的位置信息，生成HDR圖像。由此，不必進(jìn)行攝影，因此即使圖像處理的時(shí)間比攝影時(shí)長(zhǎng)，也能增長(zhǎng)圖像處理的時(shí)間，能夠生成進(jìn)行了更為自然且正確的置換和合成等圖像處理的HDR圖像(例如參照?qǐng)D18)。
[0169]接著，在經(jīng)由操作輸入部14變更了圖像的情況下(步驟S324 是”)，控制部212向記錄介質(zhì)16記錄的下一個(gè)圖像文件變更(步驟S325)，攝像裝置200轉(zhuǎn)移至步驟S321。相對(duì)于此，在未經(jīng)由操作輸入部14變更圖像的情況下(步驟S324 否”)，攝像裝置I轉(zhuǎn)移至步驟S321。
[0170]在步驟S322中，攝像裝置200未設(shè)定為再現(xiàn)模式的情況下(步驟S322 否”)，攝像裝置200轉(zhuǎn)移至步驟S321。
[0171]根據(jù)以上說明的本第2實(shí)施方式，圖像文件生成部194生成圖像文件F200，該圖像文件F200將由攝像部11生成的畫質(zhì)校正前的圖像數(shù)據(jù)和與攝像部11的圖像處理的校正像素以及置換了校正像素的其他攝像用像素各自的位置有關(guān)的位置信息對(duì)應(yīng)起來，因此在對(duì)RAW數(shù)據(jù)DR進(jìn)行顯示用的畫質(zhì)校正處理時(shí)能夠以高畫質(zhì)顯影。
[0172]此外，在本第2實(shí)施方式中，將第IRAW數(shù)據(jù)和第2RAW數(shù)據(jù)記錄于I個(gè)圖像文件中，而例如圖19所示，也可以將記錄介質(zhì)16中的第IRAW數(shù)據(jù)和第2RAW數(shù)據(jù)的圖像文件的指定信息對(duì)應(yīng)起來記錄于記錄了 HDR的RAW數(shù)據(jù)DR的圖像文件F300中。由此，能夠減小I個(gè)圖像文件的容量。
[0173]此外，在本第2實(shí)施方式中，生成了圖像文件F200，該圖像文件F200將攝像部11的圖像處理的校正像素和與置換了校正像素的其他攝像用像素各自的位置有關(guān)的位置信息對(duì)應(yīng)起來，然而也可以將表示畫質(zhì)校正前的校正必要圖像部的數(shù)據(jù)(表示像素的數(shù)據(jù))記錄為RAW數(shù)據(jù)，還可以在畫質(zhì)校正后將表示校正后的圖像部的數(shù)據(jù)(表示像素的數(shù)據(jù))記錄為RAW數(shù)據(jù)。還可以并非按照每個(gè)像素進(jìn)行記錄，而是將表示區(qū)域的數(shù)據(jù)另行記錄于圖像文件中。這樣，只要記錄了已校正的部分和需要校正的部分，就能夠通過各種方法進(jìn)行該部分的畫質(zhì)的校正、圖像的代用、數(shù)據(jù)置換，能夠?qū)崿F(xiàn)與攝像裝置不同的畫質(zhì)。
[0174]此外，在本第2實(shí)施方式中，說明的是置換像素的數(shù)據(jù)的情況，然而不僅可以通過其他的像素進(jìn)行置換，還能夠根據(jù)圖像的圖案進(jìn)行類推并校正，將這樣的情況也一并用置換這一用語(yǔ)來表現(xiàn)。這里，校正的是HDR用的圖像部分，而此外也可以通過能夠校正需要置換的圖像部分的方式進(jìn)行記錄。無論何種情況，都與本實(shí)施例同樣地，該像素并非為進(jìn)行攝影和再現(xiàn)用圖像而能夠直接使用的像素?cái)?shù)據(jù)，需要進(jìn)行上述的校正、代用、置換處理。因而，使文件具備表示該像素的位置的信息對(duì)于在后工序中處理該文件時(shí)而言是很重要的。不僅如此，還可以將進(jìn)行何種置換和校正的信息放入文件中。可以使其具有置換規(guī)則、置換用像素的信息。通過制定這種共同規(guī)則，從而能夠在再現(xiàn)裝置進(jìn)行再現(xiàn)時(shí)實(shí)施最佳的圖像處理。尤其在存在文件的轉(zhuǎn)交和傳輸?shù)那闆r下，使用不同的設(shè)備進(jìn)行再現(xiàn)，而該不同的設(shè)備或?yàn)镻C或?yàn)橹悄苁謾C(jī)或?yàn)門V，因而可以根據(jù)這些再現(xiàn)設(shè)備的情況，進(jìn)行最佳的圖像調(diào)整。
[0175]此外，在本發(fā)明中，還可以通過進(jìn)行記錄圖像數(shù)據(jù)的圖像文件的圖像再現(xiàn)的圖像再現(xiàn)設(shè)備執(zhí)行處理。具體而言，圖像生成設(shè)備執(zhí)行如下步驟:取得步驟，取得與置換像素的位置有關(guān)的置換對(duì)象像素信息，該置換像素是構(gòu)成對(duì)應(yīng)于圖像數(shù)據(jù)的圖像、且被置換為其他像素的像素；確定步驟，根據(jù)在取得步驟中取得的置換對(duì)象像素信息，根據(jù)從構(gòu)成與圖像數(shù)據(jù)對(duì)應(yīng)的圖像的多個(gè)像素中分別輸出的多個(gè)電信號(hào)來確定置換像素；生成步驟，通過從多個(gè)圖像分別輸出的多個(gè)電信號(hào)對(duì)在確定步驟中確定的置換像素進(jìn)行插值，并生成插值圖像數(shù)據(jù)；以及再現(xiàn)步驟，對(duì)在生成步驟中生成的插值圖像數(shù)據(jù)進(jìn)行再現(xiàn)。由此，在對(duì)RAW數(shù)據(jù)進(jìn)行顯示用的畫質(zhì)校正處理時(shí)，能夠增加再現(xiàn)時(shí)的自由度，并以高畫質(zhì)再現(xiàn)圖像。進(jìn)而，通過對(duì)已校正的部分和需要校正的部分進(jìn)行插值，從而能夠通過各種方法進(jìn)行該部分的畫質(zhì)的校正、圖像的代用、數(shù)據(jù)置換，能夠通過不同于攝像裝置的畫質(zhì)進(jìn)行再現(xiàn)。這里，圖像生成設(shè)備是攝像裝置、包含智能手機(jī)的便攜設(shè)備、平板型便攜設(shè)備等電子設(shè)備、具有頭戴式顯示器和PC等的顯示監(jiān)視器的信息處理裝置。
[0176]此外，在本發(fā)明中，圖像處理部被組裝入控制部中，例如也可以獨(dú)立設(shè)置圖像處理部。進(jìn)而，還可以設(shè)置多個(gè)圖像處理部(圖像引擎)。
[0177]此外，在本發(fā)明中，圖像處理部作為圖像處理裝置而組裝入攝像裝置內(nèi)，但也可以獨(dú)立設(shè)置圖像處理部。
[0178]此外，在本發(fā)明中，將圖像文件記錄于記錄介質(zhì)中，但也可以經(jīng)由因特網(wǎng)將其輸出給其他的圖像處理裝置、例如具有圖像處理部的移動(dòng)電話和平板型便攜設(shè)備等電子設(shè)備。
[0179]此外，本發(fā)明的攝像裝置除了可應(yīng)用于緊湊型數(shù)字相機(jī)、數(shù)字單反相機(jī)以外，例如還能用于可安裝附件等的數(shù)字?jǐn)z像機(jī)和具有攝影功能的移動(dòng)電話和平板型便攜設(shè)備等的電子設(shè)備。
[0180]另外，在本說明書的流程圖的說明中，使用“首先”、“此后”、“接著”等表現(xiàn)來明確表示步驟間的處理的前后關(guān)系，而用于實(shí)施本發(fā)明所需要的處理的順序并不由這些表現(xiàn)而唯一地確定。即，在本說明書描述的流程圖的處理的順序可以在不產(chǎn)生矛盾的范圍內(nèi)進(jìn)行變更。
[0181]此外，由本發(fā)明的攝像裝置和圖像處理裝置執(zhí)行的程序是作為能夠安裝的形式或能夠執(zhí)行的形式的文件數(shù)據(jù)，記錄于CD-ROM、軟盤(FD)、CD-R、DVD (Digital VersatileDisk:數(shù)字通用光盤)、USB介質(zhì)、閃存等計(jì)算機(jī)可讀取的記錄介質(zhì)中提供的。
[0182]此外，由本發(fā)明的攝像裝置和圖像處理裝置執(zhí)行的程序還可以構(gòu)成為，儲(chǔ)存于與因特網(wǎng)等網(wǎng)絡(luò)連接的計(jì)算機(jī)上，以經(jīng)由網(wǎng)絡(luò)下載的方式進(jìn)行提供。進(jìn)而，還可以構(gòu)成為將由本發(fā)明的攝像裝置和圖像處理裝置執(zhí)行的程序經(jīng)由因特網(wǎng)等網(wǎng)絡(luò)提供或發(fā)布。
[0183]這樣，本發(fā)明還可包含以上未描述的各種實(shí)施方式，可以在由權(quán)利要求書確定的技術(shù)思想的范圍內(nèi)進(jìn)行各種設(shè)計(jì)變更等。
[0184]符號(hào)說明
[0185]1、200攝像裝置
[0186]10、210 主體部
[0187]11攝像部
[0188]12主體通信部
[0189]13時(shí)鐘部
[0190]14操作輸入部
[0191]15記錄部
[0192]16記錄介質(zhì)
[0193]17顯示部
[0194]18觸摸面板
[0195]19,212 控制部
[0196]20更換鏡頭部
[0197]21光學(xué)系統(tǒng)
[0198]22驅(qū)動(dòng)部
[0199]23鏡頭通信部
[0200]24操作部
[0201]25鏡頭記錄部
[0202]26鏡頭控制部
[0203]111受光部
[0204]112垂直模擬加法電路
[0205]113水平數(shù)字加法電路
[0206]114 AF用存儲(chǔ)器
[0207]191 AF信號(hào)計(jì)算部
[0208]192圖像處理部
[0209]193圖像壓縮解壓縮部
[0210]194圖像文件生成部
[0211]195記錄控制部
[0212]211被攝體分析部
[0213]213圖像合成部
【權(quán)利要求】
1.一種攝像裝置，其特征在于，具有: 攝像部，其生成圖像數(shù)據(jù)，該圖像數(shù)據(jù)是將從多個(gè)像素分別輸出的多個(gè)電信號(hào)中的從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的；以及 圖像文件生成部，其生成圖像文件，該圖像文件將所述攝像部生成的所述圖像數(shù)據(jù)和與所述攝像部的所述置換像素的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄。
2.根據(jù)權(quán)利要求1所述的攝像裝置，其特征在于， 所述置換像素是以下像素中的任意一種以上的像素:像素存在缺陷的缺陷像素；檢測(cè)該攝像裝置的焦點(diǎn)時(shí)使用的檢測(cè)用像素；具有與構(gòu)成圖像的像素不同的濾色器的像素；在邊緣提取中提取出的提取像素；以及使用其他圖像數(shù)據(jù)對(duì)像素信號(hào)進(jìn)行補(bǔ)充校正的校正對(duì)象的校正像素。
3.根據(jù)權(quán)利要求2所述的攝像裝置，其特征在于， 所述校正像素是用于調(diào)整攝影參數(shù)的專用功能像素或與根據(jù)攝影條件確定的圖像區(qū)域相當(dāng)?shù)南袼亍?br> 4.一種圖像處理裝置，其對(duì)具備具有多個(gè)像素的攝像部的攝像裝置生成的圖像文件實(shí)施圖像處理，其特征在于， 所述圖像處理裝置具有圖像處理部，該圖像處理部取得圖像文件，根據(jù)由取得的所述圖像文件記錄的位置信息對(duì)圖像數(shù)據(jù)進(jìn)行畫質(zhì)校正處理，生成處理圖像數(shù)據(jù)，其中，所述圖像數(shù)據(jù)由所述攝像部生成，并且是將從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的，所述圖像文件將所述圖像數(shù)據(jù)和與所述攝像部的所述置換像素的位置有關(guān)的所述位置信息對(duì)應(yīng)起來記錄。
5.根據(jù)權(quán)利要求4所述的圖像處理裝置，其特征在于， 所述圖像處理裝置還具有顯示部，該顯示部再現(xiàn)顯示與所述處理圖像數(shù)據(jù)對(duì)應(yīng)的處理圖像。
6.一種記錄介質(zhì)，其記錄由具備具有多個(gè)像素的攝像部的攝像裝置生成的圖像文件，其特征在于， 所述圖像文件記錄如下內(nèi)容: 圖像數(shù)據(jù)，其由所述攝像部生成，并且是將從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的；以及 位置信息，其與所述攝像部的所述置換像素的位置有關(guān)。
7.一種由具備具有多個(gè)像素的攝像部的攝像裝置執(zhí)行的記錄方法，其特征在于，執(zhí)行如下步驟: 攝像步驟，生成圖像數(shù)據(jù)，該圖像數(shù)據(jù)是將從多個(gè)像素分別輸出的多個(gè)電信號(hào)中的從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的；以及 圖像文件生成步驟，生成圖像文件，該圖像文件將在所述攝像步驟中生成的所述圖像數(shù)據(jù)和與所述攝像步驟中的所述置換像素的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄。
8.一種由進(jìn)行圖像文件的圖像再現(xiàn)的圖像再現(xiàn)設(shè)備執(zhí)行的圖像再現(xiàn)方法，該圖像文件記錄圖像數(shù)據(jù)，其特征在于，執(zhí)行如下步驟: 取得步驟，取得與置換像素的位置有關(guān)的置換對(duì)象像素信息，該置換像素是構(gòu)成對(duì)應(yīng)于所述圖像數(shù)據(jù)的圖像、且被置換為其他像素的像素； 確定步驟，根據(jù)在所述取得步驟中取得的所述置換對(duì)象像素信息，由從構(gòu)成對(duì)應(yīng)于所述圖像數(shù)據(jù)的圖像的多個(gè)像素中分別輸出的多個(gè)電信號(hào)確定所述置換像素； 生成步驟，通過從所述多個(gè)圖像分別輸出的多個(gè)電信號(hào)對(duì)在所述確定步驟中確定出的所述置換像素進(jìn)行插值并生成插值圖像數(shù)據(jù)；以及 再現(xiàn)步驟，對(duì)在所述生成步驟中生成的所述插值圖像數(shù)據(jù)進(jìn)行再現(xiàn)。
9.一種程序，其特征在于，使具備具有多個(gè)像素的攝像部的攝像裝置執(zhí)行如下步驟:攝像步驟，生成圖像數(shù)據(jù)，該圖像數(shù)據(jù)是將從多個(gè)像素分別輸出的多個(gè)電信號(hào)中的從作為置換對(duì)象的置換像素輸出的電信號(hào)置換為同時(shí)或在不同定時(shí)得到的不同的攝像用像素的電信號(hào)而得到的；以及 圖像文件生成步驟，生成圖像文件，該圖像文件將在所述攝像步驟中生成的所述圖像數(shù)據(jù)和與所述攝像步驟中的所述置換像素的位置有關(guān)的位置信息對(duì)應(yīng)起來記錄。
【文檔編號(hào)】G06T1/00GK104365082SQ201380027680
【公開日】2015年2月18日 申請(qǐng)日期:2013年3月13日 優(yōu)先權(quán)日:2012年5月31日
【發(fā)明者】松澤良紀(jì), 市川學(xué) 申請(qǐng)人:奧林巴斯映像株式會(huì)社