專利名稱：圖像再現(xiàn)裝置和方法、圖像捕捉裝置及其控制方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像再現(xiàn)裝置、圖像再現(xiàn)方法、圖像捕捉裝置及其控制方 法。更具體而言，本發(fā)明旨在以高于預(yù)先設(shè)置的基準(zhǔn)圖像速率的圖像速率 執(zhí)行圖像捕捉，以使得當(dāng)以基準(zhǔn)圖像速率來再現(xiàn)所捕捉圖像的生成的捕捉 圖像的圖像信號時，根據(jù)所捕捉圖像的運動來控制再現(xiàn)速度。
背景技術(shù)：
傳統(tǒng)上，在日本未審查專利申請公布No.2005-295423中，提出了一種 方法，其中，所捕捉圖像被臨時保存在存儲器中，并且還被記錄在記錄介 質(zhì)上，以使得可以以平滑運動來再現(xiàn)慢動作視頻。
艮P，在日本未審查專利申請公布No.2005-295423所公開的技術(shù)中，場 頻例如為240場每秒的圖像信號被生成，并且該圖像信號被順序存儲在存 儲器中，240場每秒的場頻高于視頻信號的常規(guī)場頻，即50場每秒或60 場每秒。此外，當(dāng)完成圖像捕捉時，存儲在該存儲器中的圖像信號被以視 頻信號的常規(guī)場頻來讀取，并且被記錄在諸如硬盤設(shè)備之類的記錄介質(zhì) 上。此外，當(dāng)用戶指示再現(xiàn)時，記錄在該記錄介質(zhì)上的圖像信號被以視頻 信號的常規(guī)場頻來再現(xiàn)。因此，可以獲得具有平滑運動的慢動作再現(xiàn)圖 像。
順便提及，當(dāng)使用日本未審査專利申請公布No.2005-295423的技術(shù) 時，因為所捕捉圖像的圖像信號被以較高速度來存儲在存儲器中，之后被 從存儲器讀取并被記錄在記錄介質(zhì)上，所以允許利用一次圖像捕捉來捕捉 圖像的時間受存儲器容量的限制。為此，如果存儲器具有較小容量，則難 以在存儲器中保存要以慢動作來再現(xiàn)的所捕捉圖像的圖像信號。例如，如 果開始在存儲器中寫入圖像信號的定時早于寫入要以慢動作再現(xiàn)的所捕捉 圖像場景的定時，則當(dāng)寫入要以慢動作再現(xiàn)的所捕捉圖像場景時，存儲器中將沒有空間，并且將無法保存該圖像信號。這導(dǎo)致了錯過寶貴的圖像捕 捉機會的問題。此外，如果增加存儲器的容量以使得可以容易地在存儲器 中保存要以慢動作再現(xiàn)的所捕捉圖像的圖像信號，則成本增加。另外，在 將所捕捉圖像的圖像信號存儲在存儲器中并在之后讀取該圖像信號并將其 記錄在記錄介質(zhì)上的方法中，在已經(jīng)讀取存儲在存儲器中的所有圖像捕捉 結(jié)果之前無法捕捉下一場景。為此，在以較短間隔重復(fù)所需場景的情況 下，可能會錯過捕捉所重復(fù)場景中的一些。
此外，如果在沒有介入存儲器的情況下將高速捕捉圖像的圖像信號記 錄在記錄介質(zhì)上，則即使在沒有根據(jù)存儲器容量來控制所捕捉圖像的記錄 定時的情況下，也可在記錄介質(zhì)上記錄要以慢動作再現(xiàn)的所捕捉圖像的圖 像信號。但是，如果以視頻信號的常規(guī)場頻來再現(xiàn)以這種方式記錄的圖像 信號，則所記錄的所有所捕捉圖像都被以慢動作來再現(xiàn)。因此，存在顯示 所需慢動作圖像的等待時間較長的情況
發(fā)明內(nèi)容
技術(shù)問題
考慮到上述幾點，本發(fā)明的一個特征是容易地獲取運動中的對象的慢 動作圖像。
為了解決上述問題，本發(fā)明的圖像再現(xiàn)裝置被配置為包括信號再現(xiàn) 單元，其對所捕捉圖像的圖像信號進行再現(xiàn)，該所捕捉圖像是通過以比預(yù) 設(shè)圖像速率高的圖像速率執(zhí)行圖像捕捉而被生成的；再現(xiàn)控制信息生成單 元，其使用運動檢測結(jié)果來生成再現(xiàn)控制信息，所述運動檢測結(jié)果是通過
使用從信號再現(xiàn)單元輸出的圖像信號執(zhí)行運動檢測而獲得的；信號處理單
元，其將從信號再現(xiàn)單元輸出的圖像信號的圖像速率轉(zhuǎn)換為所述預(yù)設(shè)圖像
速率；以及控制單元，其基于所述再現(xiàn)控制信息來控制從信號再現(xiàn)單元輸 出到信號處理單元的圖像信號的圖像速率，以隨著由所述運動檢測結(jié)果指 示的運動的增大而降低所捕捉圖像的再現(xiàn)速度。
此外，本發(fā)明的圖像再現(xiàn)方法被配置為包括信號再現(xiàn)步驟，對通過
以比預(yù)設(shè)圖像速率高的圖像速率執(zhí)行圖像捕捉而生成的所捕捉圖像的圖像信號進行再現(xiàn)；再現(xiàn)控制信息生成步驟，使用運動檢測結(jié)果來生成再現(xiàn)控
制信息，該運動檢測結(jié)果是通過使用要在信號再現(xiàn)步驟再現(xiàn)的圖像信號執(zhí)
行運動檢測而獲得的；信號處理步驟，將在信號再現(xiàn)步驟再現(xiàn)的圖像信號 的圖像速率轉(zhuǎn)換為所述預(yù)設(shè)圖像速率；以及再現(xiàn)控制步驟，基于所述再現(xiàn) 控制信息來控制在信號處理步驟中使用的、在信號再現(xiàn)步驟中再現(xiàn)的所述 圖像信號的圖像速率，以隨著在運動檢測中檢測到的運動的增大而降低所 捕捉圖像的再現(xiàn)速度。
本發(fā)明的圖像捕捉裝置被配置為包括圖像捕捉單元，其生成所捕捉 圖像的圖像信號，該所捕捉圖像是通過以比預(yù)設(shè)圖像速率高的圖像速率執(zhí) 行圖像捕捉而生成的；再現(xiàn)控制信息生成單元，其使用運動檢測結(jié)果來生 成再現(xiàn)控制信息，該運動檢測結(jié)果是通過使用由所述圖像捕捉單元生成的 所述圖像信號執(zhí)行運動檢測而獲得的，所述再現(xiàn)控制信息用于在再現(xiàn)所述 圖像信號期間隨著在運動檢測中檢測到的運動的增大而降低所捕捉圖像的 再現(xiàn)速度；以及輸出單元，其與所述圖像信號相對應(yīng)地輸出所述再現(xiàn)控制
"(曰息。
本發(fā)明的用于圖像捕捉裝置的控制方法被配置為包括圖像捕捉步 驟，生成所捕捉圖像的圖像信號，該所捕捉圖像是通過以比預(yù)設(shè)圖像速率 高的圖像速率執(zhí)行圖像捕捉而生成的；再現(xiàn)控制信息生成步驟，使用運動
檢測結(jié)果來生成再現(xiàn)控制信息，該運動檢測結(jié)果是通過使用在所述圖像捕 捉步驟中生成的所述圖像信號執(zhí)行運動檢測而獲得的，所述再現(xiàn)控制信息 用于在再現(xiàn)所述圖像信號期間隨著在運動檢測中檢測到的運動的增大而降
低所述所捕捉圖像的再現(xiàn)速度；以及輸出步驟，與所述圖像信號相對應(yīng)地 輸出所述再現(xiàn)控制信息。
根據(jù)本發(fā)明，可很容易地獲得運動中的對象的慢動作圖像。


圖1是圖示出圖像捕捉裝置的結(jié)構(gòu)的框圖。 圖2是圖示出校正處理單元的結(jié)構(gòu)的框圖。 圖3是圖示出相機信號處理單元的結(jié)構(gòu)的框圖。圖4是圖示出圖像組合單元和幀存儲單元的結(jié)構(gòu)的框圖。
圖5是用于說明圖像組合的示圖。 圖6是圖示出壓縮/擴展單元的結(jié)構(gòu)的框圖。 圖7是圖示出圖像再現(xiàn)裝置的結(jié)構(gòu)的框圖。 圖8是圖示出圖像記錄裝置的結(jié)構(gòu)的框圖。
圖9是用于說明在標(biāo)準(zhǔn)圖像捕捉模式下記錄所捕捉圖像時的處理的示圖。
圖10是用于說明在再現(xiàn)在標(biāo)準(zhǔn)圖像捕捉模式下記錄的所捕捉圖像時 的處理的示圖。
圖11是用于說明在高速圖像捕捉模式下記錄所捕捉圖像時的處理的 示圖。
圖12是用于說明在再現(xiàn)在高速圖像捕捉模式下記錄的所捕捉圖像時 的處理的示圖。
圖13是用于說明運動向量和加權(quán)系數(shù)設(shè)置信號之間的關(guān)系的示圖。
圖14是用于說明圖像信號和加權(quán)系數(shù)之間的關(guān)系的示圖。
圖15是作為示例圖示出加權(quán)系數(shù)的示圖。
圖16是用于說明對象的運動檢測的示圖。
圖17是圖示出判定值和所建議再現(xiàn)速度之間的關(guān)系的示圖。
圖18是在高速圖像捕捉模式下記錄所捕捉圖像時的時間圖。
圖19是在再現(xiàn)在高速圖像捕捉模式下記錄的所捕捉圖像時的時間圖。
圖20是在再現(xiàn)在高速圖像捕捉模式下記錄的所捕捉圖像時執(zhí)行運動 檢測并執(zhí)行再現(xiàn)控制的時間圖。
圖21是圖示出另一實施例的結(jié)構(gòu)的示圖。
具體實施例方式
以下，將參考

本發(fā)明的實施例。圖1是圖示出圖像捕捉裝置 的結(jié)構(gòu)的框圖。圖像捕捉裝置10被配置為能夠在作為操作模式的標(biāo)準(zhǔn)圖 像捕捉模式和高速圖像捕捉模式之間切換。標(biāo)準(zhǔn)圖像捕捉模式是在常規(guī)圖像捕捉期間的操作模式，其中，具有預(yù)先設(shè)置的基準(zhǔn)圖像速率的圖像信號 被生成。高速圖像捕捉模式是這樣的操作模式，其中，以高于標(biāo)準(zhǔn)圖像捕 捉模式的速度來執(zhí)行圖像捕捉以使得可以獲得具有高時間分辨率的慢動作 再現(xiàn)圖像，以生成具有高于基準(zhǔn)圖像速率并且是基準(zhǔn)圖像速率的整數(shù)倍的 圖像速率(以下稱為"高速圖像速率")的圖像信號。這里，術(shù)語基準(zhǔn)圖 像速率指的是在電視系統(tǒng)中使用的場速率或幀速率。當(dāng)圖像捕捉裝置10 處于標(biāo)準(zhǔn)圖像捕捉模式時，圖像捕捉裝置10生成基準(zhǔn)圖像速率的圖像信
號，例如，60場每秒的隔行掃描類型的圖像信號，或者60幀每秒的逐行 掃描類型的圖像信號。此外，當(dāng)圖像捕捉裝置10處于高速圖像捕捉模式 時，圖像捕捉裝置IO生成高速圖像速率的圖像信號，例如，240場每秒的 隔行掃描類型的圖像信號，或者240幀每秒的逐行掃描類型的圖像信號。 注意，在以下說明中，作為一個示例圖示了這樣一種情況，其中，60幀每 秒(60[*Sp的逐行掃描類型的圖像信號被生成作為基準(zhǔn)圖像速率的圖像 信號，并且四倍于基準(zhǔn)圖像速率的240幀每秒(240[Q)s])的逐行掃描類型 的圖像信號被生成作為高速圖像捕捉模式下的圖像信號。
此外，在圖1所示的圖像捕捉裝置的結(jié)構(gòu)中，不僅圖示了在標(biāo)準(zhǔn)圖像 捕捉模式和高速圖像捕捉模式下生成所捕捉圖像的圖像信號的情況，而且 還圖示了可將圖像信號記錄到記錄介質(zhì)62上或者可讀取記錄在記錄介質(zhì) 62上的圖像信號以顯示再現(xiàn)圖像或輸出再現(xiàn)圖像的圖像信號的情況。
在圖像捕捉裝置10中，透鏡單元11受以下將描述的控制單元81控制 而能夠改變焦距、孔徑和縮放，以收集在圖像捕捉單元12的圖像傳感器 121的圖像捕捉表面上的入射光。
圖像捕捉裝置10的圖像捕捉單元12被構(gòu)造為使用圖像傳感器121、 AFE (模擬前端)122、 ADC (模數(shù)轉(zhuǎn)換器)123和校正處理單元124。圖 像捕捉單元12的操作受以下將描述的控制單元81的控制。
由CMOS (互補金屬氧化物半導(dǎo)體)類型等的固態(tài)圖像捕捉元件來實 現(xiàn)圖像傳感器121。圖像傳感器121對形成在圖像捕捉表面上的光學(xué)圖像 執(zhí)行光電轉(zhuǎn)換處理，并輸出作為圖像捕捉結(jié)果的圖像捕捉信號。注意，圖 像傳感器121設(shè)有CDS (相關(guān)雙采樣)電路，并且該CDS電路對圖像捕捉信號執(zhí)行相關(guān)雙采樣處理以降低圖像捕捉信號中的噪聲。
此外，圖像傳感器121受控制單元81控制而切換其操作。當(dāng)操作模
式被設(shè)置為標(biāo)準(zhǔn)圖像捕捉模式時，圖像傳感器121生成基準(zhǔn)圖像速率(基 準(zhǔn)幀速率)的圖像捕捉信號，例如，60[Q)s]的圖像捕捉信號。此外，當(dāng)操 作模式被設(shè)置為高速圖像捕捉模式時，圖像傳感器121生成高速圖像速率 (高速幀速率)的圖像捕捉信號，該高速幀速率高于基準(zhǔn)幀速率并且是基 準(zhǔn)幀速率的整數(shù)倍，例如，240[fi)s]的圖像捕捉信號。注意，與輸出基準(zhǔn)幀 速率的圖像捕捉信號的情況相同，即使在輸出幀速率為240[fys]的圖像捕 捉信號的情況下，圖像傳感器121也從圖像捕捉表面上的有效圖像區(qū)域讀 取所有像素的圖像捕捉結(jié)果，并輸出圖像捕捉信號。此外，與以基準(zhǔn)幀速 率輸出圖像捕捉信號的情況相比，可以執(zhí)行行抽取(decimation)和像素 抽取的至少一個以減少一個畫面上的像素數(shù)目。
AFE (模擬前端)122對從圖像傳感器121輸出的圖像捕捉信號執(zhí)行 AGC (自動增益控制)處理以控制圖像捕捉信號的增益。ADC (模數(shù)轉(zhuǎn)換 器)123將經(jīng)AFE 122處理的模擬圖像捕捉信號轉(zhuǎn)換為數(shù)字圖像信號，并 將該數(shù)字圖像信號提供給校正處理單元124。
校正處理單元124對從ADC 123提供的圖像信號執(zhí)行各種校正處理。 圖2是圖示出校正處理單元124的結(jié)構(gòu)的框圖。校正處理單元124的電平 校正單元124a對從ADC 123提供的圖像信號執(zhí)行電平調(diào)節(jié)處理。像素校 正單元124b對電平調(diào)節(jié)處理之后獲得的圖像信號執(zhí)行像素缺陷校正處 理。白平衡調(diào)節(jié)單元124c對像素缺陷校正處理之后獲得的圖像信號執(zhí)行白 平衡調(diào)節(jié)處理，并以圖1所示的方式將經(jīng)過處理的圖像信號DV1提供給相 機信號處理單元20、記錄/再現(xiàn)處理單元61和檢測單元71。
在標(biāo)準(zhǔn)圖像捕捉模式和高速圖像捕捉模式下，相機信號處理單元20 對從圖像捕捉單元12提供的圖像信號DV1執(zhí)行相機信號處理，并將經(jīng)過 處理的圖像信號DV2輸出到圖像壓縮/擴展單元41、圖像輸出單元51和顯 示處理單元52。此外，以下將描述，在高速圖像捕捉模式下在未經(jīng)歷相機 信號處理的所捕捉圖像被記錄在記錄介質(zhì)62上的情況下，在再現(xiàn)所記錄 的所捕捉圖像期間，相機信號處理單元20對從記錄/再現(xiàn)處理單元61提供的圖像信號DV3執(zhí)行相機信號處理，并將經(jīng)過處理的圖像信號DV4輸出 到圖像輸出單元51和顯示處理單元52。
此外，相機信號處理單元20與幀存儲單元31相連接，幀存儲單元31 例如由SDRAM (同步動態(tài)隨機訪問存儲器)等構(gòu)成。當(dāng)圖像信號DV1或 圖像信號DV3具有與基準(zhǔn)幀速率不同的幀速率時，通過使用幀存儲單元 31，相機信號處理單元20將圖像信號DV1或圖像信號DV3轉(zhuǎn)換為基準(zhǔn)幀 速率的圖像信號。即，相機信號處理單元20輸出基準(zhǔn)幀速率的圖像信號 DV2禾B DV4，而無論圖像信號DV1或圖像信號DV3的幀速率為多少。
圖3是圖示出相機信號處理單元20的結(jié)構(gòu)的框圖。圖像組合單元21 被設(shè)計用于執(zhí)行圖像速率轉(zhuǎn)換的目的，以使得將圖像信號DV1或圖像信號 DV3轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號。當(dāng)操作模式被設(shè)置為標(biāo)準(zhǔn)圖像捕捉模 式時，圖像信號DV1具有基準(zhǔn)幀速率。因此，圖像組合單元21在沒有轉(zhuǎn) 換圖像信號DV1的幀速率的情況下，將從圖像捕捉單元12的校正處理單 元124提供的圖像信號DV1提供給像素插值單元22。此外，當(dāng)操作模式 被設(shè)置為高速圖像捕捉模式時，圖像組合單元21對從圖像捕捉單元12的 校正處理單元124提供的圖像信號DV1和在再現(xiàn)在高速圖像捕捉模式下記 錄在記錄介質(zhì)62上的所捕捉圖像期間從記錄/再現(xiàn)處理單元61提供的圖像 信號DV3執(zhí)行圖像速率轉(zhuǎn)換，以將所提供的圖像信號轉(zhuǎn)換為基準(zhǔn)幀速率的 圖像信號，并將得到的圖像信號提供給像素插值單元22。例如，圖像組合 單元21使用幀存儲單元31來執(zhí)行圖像組合以與圖像信號DV1或DV3的 基準(zhǔn)幀周期相對應(yīng)地組合幀圖像，以產(chǎn)生一個幀的圖像。這樣，圖像信號 DV1或DV3被轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號。
圖4是圖示出圖像組合單元21和幀存儲單元31的詳細結(jié)構(gòu)的框圖， 并圖示了通過使用幀存儲單元31并利用圖像信號的循環(huán)加算來執(zhí)行圖像 組合以將高速幀速率的圖像信號轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號的情況。
圖像組合單元21將從校正處理單元124提供的圖像信號DV1或從記 錄/再現(xiàn)處理單元61提供的圖像信號DV3提供給乘算電路211。乘算電路 211將圖像信號DV1或圖像信號DV3乘以由加權(quán)系數(shù)生成單元212生成 的加權(quán)系數(shù)，并將乘以加權(quán)系數(shù)的圖像信號提供給加算電路213。加算電路213將從乘算電路211提供的圖像信號與從幀存儲單元31的倉庫 (bank)讀取的圖像信號相加，并將加算處理之后獲得的圖像信號提供給 幀存儲單元31。
幀存儲單元31被構(gòu)造為使用倉庫312a、倉庫312b和信號切換單元 311、 313和314。注意，倉庫312a和倉庫312b具有能夠存儲一個幀的圖 像信號的存儲容量。
信號切換單元311將從加算電路213提供的圖像信號提供給倉庫312a 或倉庫312b。注意，用圖像信號Dfwa表示要被提供給倉庫312a的圖像信 號，并用圖像信號Dfwb表示要被提供給倉庫312b的圖像信號。
信號切換單元313將從倉庫312a讀取的圖像信號Dfra或從倉庫312b 讀取的圖像信號Dfrb提供給加算電路213。信號切換單元314將從倉庫 312a讀取的圖像信號Dfm或從倉庫312b讀取的圖像信號Dfrb提供給除算 電路214。
這里，在圖像組合單元21和幀存儲單元31中，信號切換單元313選 擇從一個倉庫讀取的圖像信號，例如從倉庫312a讀取的圖像信號Dfra， 并且信號切換單元311將作為所選圖像信號Dfm和從乘算電路211提供的 圖像信號之間的加算結(jié)果而獲得的圖像信號提供給倉庫312a作為圖像信號 Dfwa。這將使得倉庫312a存儲經(jīng)歷過循環(huán)加算的圖像信號。此外，在圖 像組合單元21和幀存儲單元31中，當(dāng)預(yù)定數(shù)目幀的循環(huán)加算完成時，使 用倉庫312b執(zhí)行循環(huán)加算，并且己經(jīng)對其完成預(yù)定數(shù)目幀的循環(huán)加算的 圖像信號被從倉庫312a讀取，并通過信號切換單元314被提供給除算電路 214。以這種方式執(zhí)行的循環(huán)加算將使得圖像組合單元21和幀存儲單元31 能夠在使用一個倉庫執(zhí)行針對一個基準(zhǔn)幀周期的循環(huán)加算的同時，針對該 基準(zhǔn)幀周期從另一倉庫讀取已經(jīng)完成了預(yù)定數(shù)目幀的循環(huán)加算的圖像信 號。所讀取的圖像信號可被提供給除算電路214作為基準(zhǔn)幀速率的圖像信 號。
除算電路214根據(jù)已經(jīng)與加權(quán)系數(shù)相加的幀的數(shù)目，對從幀存儲單元 31的信號切換單元314提供的圖像信號執(zhí)行除算處理。然后，已經(jīng)完成循 環(huán)加算的圖像信號被提供給像素插值單元22作為預(yù)定信號電平范圍內(nèi)的圖像信號。例如，當(dāng)考慮圖像信號DV1具有恒定信號電平的情況時，假設(shè)
對四個幀執(zhí)行循環(huán)加算，其中每一個幀具有加權(quán)系數(shù)"2"。于是，已經(jīng) 完成循環(huán)加算的圖像信號的信號電平是圖像信號DV1的信號電平的八倍。 為此，除算電路214根據(jù)已經(jīng)與加權(quán)系數(shù)相加的幀的數(shù)目來執(zhí)行除算處 理，并將已經(jīng)完成循環(huán)加算的圖像信號乘以(1/8)以獲得在預(yù)定信號電平 范圍內(nèi)的圖像信號。
加權(quán)系數(shù)生成單元212與幀計數(shù)器215相連接。幀計數(shù)器215生成一 計數(shù)值，該計數(shù)值指示出要被提供給乘算電路211的圖像信號所對應(yīng)的是 要經(jīng)歷循環(huán)加算的幀中的哪個幀，并將該計數(shù)值提供給加權(quán)系數(shù)生成單元 212。在對從校正處理單元124提供的圖像信號DV1執(zhí)行循環(huán)加算的情況 下，加權(quán)系數(shù)生成單元212基于從控制單元81提供的加權(quán)系數(shù)選擇值WS 生成對于要經(jīng)歷循環(huán)加算的各個幀而言都是相等的加權(quán)系數(shù)，并將這些加 權(quán)系數(shù)提供給乘算電路211。此外，在對從記錄/再現(xiàn)處理單元61提供的 圖像信號DV3執(zhí)行循環(huán)加算的情況下，加權(quán)系數(shù)生成單元212基于從控制 單元81提供的加權(quán)系數(shù)選擇值WS生成對于要經(jīng)歷循環(huán)加算的各個幀而 言都相等的加權(quán)系數(shù)，或者在各幀之間不同的加權(quán)系數(shù)，并將這些加權(quán)系 數(shù)提供給乘算電路211。
圖5是用于說明在圖像信號DV1或DV3的幀速率為基準(zhǔn)幀速率的四 倍的情況下的圖像組合的示圖。當(dāng)以上述方式使用圖像組合單元21和幀 存儲單元31來執(zhí)行圖像組合時，如圖5的部分(A)所示，基于從校正處 理單元124提供的圖像信號DV1和從記錄/再現(xiàn)處理單元61提供的圖像信 號DV3的圖像被使得例如四個幀(即，幀a到幀d)被組合了。如圖5的 部分(B)所示，產(chǎn)生了具有基準(zhǔn)幀速率的圖像的一個幀(a + b + c + d)。這樣，圖像信號DV1或DV3可被轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號。
圖3中的像素插值單元22使用去馬賽克(demosaic)處理將從圖像組 合單元21輸出的圖像信號轉(zhuǎn)換為由R、 G和B組成的三個平面的圖像信 號，并輸出這些圖像信號。輪廓校正單元23從所提供的圖像信號分離高 頻分量，并從高頻分量生成輪廓校正數(shù)據(jù)。顏色校正單元24從所提供的 圖像信號分離低頻分量，并對低頻分量執(zhí)行線性矩陣處理等以執(zhí)行顏色校正。
Y/拐點處理單元25將由輪廓校正單元23生成的輪廓校正信號與經(jīng)顏 色校正單元24處理的圖像信號組合，并對組合后的圖像信號執(zhí)行Y校正、 拐點處理等。顏色空間轉(zhuǎn)換單元26將經(jīng)Y/拐點處理單元25處理的圖像信 號轉(zhuǎn)換為亮度信號和色差信號的圖像信號。分辨率轉(zhuǎn)換單元27將所提供 的圖像信號轉(zhuǎn)換為具有預(yù)定顯示分辨率的圖像信號，并輸出得到的圖像信 號作為圖像信號DV2或圖像信號DV4。
圖1中的圖像壓縮/擴展單元41被配置為執(zhí)行以下處理使用所提供 的圖像信號來執(zhí)行運動檢測的處理，基于運動檢測結(jié)果對圖像信號進行壓 縮以生成編碼信號的處理，以及對編碼信號進行擴展以生成圖像信號的處 理。
在標(biāo)準(zhǔn)圖像捕捉模式下，在從控制單元81接收到記錄所捕捉圖像的 指令時，圖像壓縮/擴展單元41使用諸如MPEG (運動圖像專家組)之類 的運動圖像編碼方案對從相機信號處理單元20輸出的圖像信號DV2執(zhí)行 壓縮處理，并將編碼信號DW輸出到記錄/再現(xiàn)處理單元61。在高速圖像 捕捉模式下，在從控制單元81接收到記錄所捕捉圖像的指令時，圖像壓 縮/擴展單元41逐個宏塊地從圖像信號DV2檢測運動向量MV，并將該運 動檢測結(jié)果(即，運動向量MV)輸出給記錄/再現(xiàn)處理單元61或控制單 元81。
此外，在再現(xiàn)在標(biāo)準(zhǔn)圖像捕捉模式下記錄在記錄介質(zhì)62上的所捕捉 圖像期間，圖像壓縮/擴展單元41對從記錄/再現(xiàn)處理單元61提供的編碼 信號DR執(zhí)行擴展處理，并將所獲得的圖像信號DV5提供給圖像輸出單元 51或顯示處理單元52。
另外，當(dāng)從記錄/再現(xiàn)處理單元61提供圖像信號DV3時，圖像壓縮/ 擴展單元41使用圖像信號DV3執(zhí)行運動檢測，以逐個宏塊地從圖像信號 DV3檢測運動向量MV，并將該運動檢測結(jié)果(即，運動向量MV)輸出 到控制單元81。
圖6是圖示出圖像壓縮/擴展單元41的結(jié)構(gòu)的框圖。在圖像壓縮/擴展 單元41中，MV檢測器411順序地從圖像信號DV2檢測每一個宏塊的運動向量MV。在標(biāo)準(zhǔn)圖像捕捉模式下記錄期間，MV檢測器411將該運動 向量MV輸出給運動補償器412。此外，在高速圖像捕捉模式下記錄期 間，MV檢測器411將該運動向量MV輸出到記錄/再現(xiàn)處理單元61或控 制單元81。
在對運動圖像進行編碼期間，運動補償器412使用MV檢測器411所 檢測到的運動向量MV對存儲在圖像存儲器413中的圖像信號執(zhí)行運動補 償，并且生成并輸出用于編碼的預(yù)測值。此外，在對運動圖像進行解碼期 間，類似地，運動補償器412使用經(jīng)MV解碼器414解碼的運動向量MV 生成用于解碼的預(yù)測值。
在對運動圖像進行編碼期間，預(yù)測減法器415從自相機信號處理單元 20輸入的圖像信號DV2減去由運動補償器412生成的用于編碼的預(yù)測 值，并輸出預(yù)測誤差值。
DCT 416對預(yù)測減法器415的輸出信號執(zhí)行二維離散余弦變換，并輸 出作為該處理的結(jié)果而獲得的系數(shù)數(shù)據(jù)。量化器417對DCT 416所生成的 系數(shù)數(shù)據(jù)執(zhí)行量化處理，并且可變長度編碼器418對量化器417的輸出數(shù) 據(jù)執(zhí)行可變長度編碼處理。MV編碼器419對由MV檢測器411檢測到的 用于編碼的運動向量MV執(zhí)行編碼處理。復(fù)用器420對可變長度編碼器 418的輸出數(shù)據(jù)和MV編碼器419的輸出數(shù)據(jù)執(zhí)行復(fù)用處理，并輸出結(jié)果 作為編碼信號DW。
在編碼期間，反量化器(dequantizer) 421對量化器417的輸出數(shù)據(jù)執(zhí) 行反量化處理，并輸出得到的數(shù)據(jù)。此外，在解碼期間，反量化器421對 可變長度解碼器422的輸出數(shù)據(jù)執(zhí)行反量化處理并輸出得到的數(shù)據(jù)。
逆DCT 423以與DCT 416相反的方式對反量化器421的輸出數(shù)據(jù)進行 處理，并輸出得到的數(shù)據(jù)。加法器424將用于編碼或解碼的預(yù)測值與逆 DCT 423的輸出信號相加以生成圖像信號DV5。圖像存儲器413存儲并保 持該解碼后的圖像信號DV5以用于運動補償。
在解碼期間，解復(fù)用器426將從記錄/再現(xiàn)處理單元61輸出的編碼信 號DR分成與系數(shù)數(shù)據(jù)相對應(yīng)的一部分和與運動向量MV相對應(yīng)的一部 分，并輸出這些部分。MV解碼器414從解復(fù)用器426的此輸出數(shù)據(jù)解碼出運動向量MV，并將該運動向量MV輸出給運動補償器412?？勺冮L度 解碼器422從解復(fù)用器426的該輸出數(shù)據(jù)解碼出系數(shù)數(shù)據(jù)，并將該系數(shù)數(shù) 據(jù)輸出給反量化器421。
圖1的圖像輸出單元51是與外部設(shè)備相連接的接口。在標(biāo)準(zhǔn)圖像捕 捉模式和高速圖像捕捉模式下，圖像輸出單元51將從相機信號處理單元 20提供的圖像信號DV2輸出到外部設(shè)備作為輸出圖像信號DVont。注 意，外部設(shè)備例如是監(jiān)視器設(shè)備等。此外，在再現(xiàn)在標(biāo)準(zhǔn)圖像捕捉模式下 記錄在記錄介質(zhì)62上的所捕捉圖像期間，圖像輸出單元51將從圖像壓縮/ 擴展單元41提供的圖像信號DV5輸出到外部設(shè)備作為輸出圖像信號 DVout。另外，在再現(xiàn)在高速圖像捕捉模式下記錄在記錄介質(zhì)62上的所捕 捉圖像期間，圖像輸出單元51將從相機信號處理單元20輸出的圖像信號 DV4輸出給外部設(shè)備作為輸出圖像信號DVout。
顯示處理單元52與顯示單元53相連接，顯示單元53例如由LCD (液晶顯示器)構(gòu)成。在標(biāo)準(zhǔn)圖像捕捉模式和高速圖像捕捉模式下，顯示 處理單元52根據(jù)顯示單元53的顯示分辨率將從相機信號處理單元20輸出 的圖像信號DV2轉(zhuǎn)換為顯示圖像信號DH，并使用該顯示圖像信號DH來 驅(qū)動顯示單元53以使得在顯示單元53上顯示所捕捉圖像。此外，在再現(xiàn) 在標(biāo)準(zhǔn)圖像捕捉模式下記錄在記錄介質(zhì)62上的所捕捉圖像期間，顯示處 理單元52根據(jù)顯示單元53的顯示分辨率將從圖像壓縮/擴展單元41輸出 的圖像信號DV5轉(zhuǎn)換為顯示圖像信號DH，并使用該顯示圖像信號DH來 驅(qū)動顯示單元53以使得在顯示單元53上顯示再現(xiàn)圖像。另外，在再現(xiàn)在 高速圖像捕捉模式下記錄在記錄介質(zhì)62上的所捕捉圖像期間，顯示處理 單元52根據(jù)顯示單元53的顯示分辨率將從相機信號處理單元20輸出的圖 像信號DV4轉(zhuǎn)換為顯示圖像信號DH，并使用該顯示圖像信號DH來驅(qū)動 顯示單元53以使得在顯示單元53上顯示再現(xiàn)圖像或慢動作再現(xiàn)圖像。
記錄/再現(xiàn)處理單元61受控制單元81控制而執(zhí)行向記錄介質(zhì)62寫入 所捕捉圖像或從記錄介質(zhì)62讀取所捕捉圖像。記錄介質(zhì)62是隨機可訪問 的各種記錄介質(zhì)，或者難以隨機訪問的各種記錄介質(zhì)，例如磁帶。此外， 隨機可訪問的記錄介質(zhì)例如是硬盤設(shè)備、諸如閃存的半導(dǎo)體存儲器、諸如DVD (數(shù)字多功能盤)的光盤等。
在標(biāo)準(zhǔn)圖像捕捉模式下，記錄/再現(xiàn)處理單元61將從圖像壓縮/擴展單 元41輸出的編碼信號DW記錄到記錄介質(zhì)62上。此外，在高速圖像捕捉 模式下，記錄/再現(xiàn)處理單元61將從圖像捕捉單元12輸出的圖像信號DV1 記錄到記錄介質(zhì)62上。此時，記錄/再現(xiàn)處理單元61獲得從圖像壓縮/擴 展單元41通知的運動向量MV作為再現(xiàn)控制信息RJ，或者獲得由控制單 元81生成的再現(xiàn)控制信息RJ。記錄/再現(xiàn)處理單元61與圖像信號DY1相 關(guān)聯(lián)地記錄該再現(xiàn)控制信息RJ。再現(xiàn)控制信息RJ是用于執(zhí)行以下再現(xiàn)控 制的信息用于隨著所捕捉圖像中的對象的運動的增大而降低所捕捉圖像 的再現(xiàn)速度的再現(xiàn)控制，或者用于緩和再現(xiàn)圖像中的運動模糊的再現(xiàn)控 制。
在再現(xiàn)在標(biāo)準(zhǔn)圖像捕捉模式下記錄的所捕捉圖像期間，記錄/再現(xiàn)處理 單元61將從記錄介質(zhì)62讀取的編碼信號DR提供給圖像壓縮/擴展單元 41。此外，在再現(xiàn)在高速圖像捕捉模式下記錄的所捕捉圖像期間，記錄/再 現(xiàn)處理單元61從記錄介質(zhì)62讀取圖像信號以及與該圖像信號相對應(yīng)的再 現(xiàn)控制信息RJ，并將該圖像信號DV3和再現(xiàn)控制信息RJ分別輸出到相機 信號處理單元20和控制單元81。
另外，在再現(xiàn)在高速圖像捕捉模式下記錄的所捕捉圖像期間無法讀取 再現(xiàn)控制信息RJ的情況下，記錄/再現(xiàn)處理單元61將圖像信號DV3提供 給相機信號處理單元20和圖像壓縮/擴展單元41 。
檢測單元71從自圖像捕捉單元12輸出的圖像信號DV1中檢測用于一 個幀周期的孔徑調(diào)節(jié)、焦距調(diào)節(jié)和白平衡調(diào)節(jié)的必要信息KD，并通知控 制單元81。注意，該必要信息例如是在特定區(qū)域內(nèi)的像素值的累加加算 值，峰值等。
控制單元81與用戶接口單元82相連接。用戶接口單元82根據(jù)用戶操 作生成操作信號PS，并將該操作信號PS提供給控制單元81 。
控制單元81是例如由CPU (中央處理單元)、ROM (只讀存儲 器)、RAM (隨機訪問存儲器)等構(gòu)成的微控制器?？刂茊卧?1執(zhí)行記 錄在ROM等上的程序以生成控制信號CT從而使得圖像捕捉裝置10的操作可以成為根據(jù)基于用戶操作的操作信號PS的操作，并將控制信號CT提
供給各個部分以控制各個部分的操作。注意，在此實施例中，通過將程序
預(yù)先安裝在圖像捕捉裝置10中來提供程序，但是，取代預(yù)先安裝，可通 過將程序記錄在諸如光盤、磁盤或存儲卡之類的記錄介質(zhì)上來提供程序， 或者可通過經(jīng)由諸如因特網(wǎng)之類的網(wǎng)絡(luò)下載程序來提供該程序。
當(dāng)操作模式被設(shè)置為標(biāo)準(zhǔn)圖像捕捉模式時，控制單元81執(zhí)行控制以 便生成基準(zhǔn)幀速率的圖像信號DV1，并以該基準(zhǔn)幀速率顯示所捕捉圖像。 當(dāng)操作模式被設(shè)置為高速圖像捕捉模式時，控制單元81執(zhí)行控制以便生 成高速幀速率的圖像信號DV1，執(zhí)行圖像速率的轉(zhuǎn)換，并以基準(zhǔn)幀速率顯 示所捕捉圖像。
此外，當(dāng)操作模式是標(biāo)準(zhǔn)圖像捕捉模式時在確定已經(jīng)執(zhí)行記錄開始操 作的情況下，控制單元81還執(zhí)行控制以對已經(jīng)經(jīng)歷相機信號處理的基準(zhǔn) 幀速率的圖像信號執(zhí)行壓縮處理并將得到的圖像信號記錄到記錄介質(zhì)62 上。當(dāng)操作模式是高速圖像捕捉模式時在確定已經(jīng)執(zhí)行記錄開始操作的情 況下，控制單元81還執(zhí)行控制以生成再現(xiàn)控制信息RJ并將該再現(xiàn)控制信 息RJ與圖像信號DV1相對應(yīng)地記錄到記錄介質(zhì)62上，其中，該再現(xiàn)控制 信息RJ用于執(zhí)行用于隨著對象運動的增大而降低所捕捉圖像的再現(xiàn)速度 的再現(xiàn)控制，或者用于減輕再現(xiàn)圖像中的運動模糊的再現(xiàn)控制。注意，在 記錄操作期間在確定己執(zhí)行記錄終止操作的情況下，控制單元81執(zhí)行控 制以停止向記錄介質(zhì)62的記錄。
在確定已經(jīng)執(zhí)行針對在標(biāo)準(zhǔn)圖像捕捉模式下記錄在記錄介質(zhì)62上的 所捕捉圖像的再現(xiàn)操作的情況下，控制單元81執(zhí)行控制以從記錄介質(zhì)62 讀取所需的編碼信號，執(zhí)行解碼處理，并以基準(zhǔn)幀速率顯示再現(xiàn)圖像；或 者執(zhí)行控制以輸出基準(zhǔn)幀速率的再現(xiàn)圖像信號。
在確定已經(jīng)執(zhí)行針對在高速圖像捕捉模式下記錄在記錄介質(zhì)62上的 所捕捉圖像的再現(xiàn)操作的情況下，控制單元81執(zhí)行控制以從記錄介質(zhì)62 讀取所需圖像信號和與該圖像信號相關(guān)聯(lián)的再現(xiàn)控制信息RJ，并以基準(zhǔn)幀 速率顯示再現(xiàn)圖像；或者執(zhí)行控制以輸出基準(zhǔn)幀速率的再現(xiàn)圖像的圖像信 號。此外，控制單元81基于再現(xiàn)控制信息RJ，執(zhí)行用于隨著對象運動的增大而降低所捕捉圖像的再現(xiàn)速度的再現(xiàn)控制，或者用于減輕再現(xiàn)圖像中 的運動模糊的再現(xiàn)控制。
此外，在再現(xiàn)在高速圖像捕捉模式下記錄在記錄介質(zhì)62上的所捕捉 圖像期間在無法獲得再現(xiàn)控制信息RJ的情況下，控制單元81從讀取自記 錄介質(zhì)62的圖像信號生成再現(xiàn)控制信息RJ，并基于該再現(xiàn)控制信息RJ執(zhí) 行用于隨著對象運動的增大而降低所捕捉圖像的再現(xiàn)速度的再現(xiàn)控制，或 者用于減輕再現(xiàn)圖像中的運動模糊的再現(xiàn)控制。
注意，控制單元81還根據(jù)來自檢測單元71的信息KD執(zhí)行以下控 制，該控制用于執(zhí)行一個幀周期的透鏡單元11的孔徑調(diào)節(jié)和焦距調(diào)節(jié)并 使得校正處理單元124執(zhí)行一個幀周期的白平衡調(diào)節(jié)。
順帶提及，在上述實施例中，已經(jīng)說明了這樣一種圖像捕捉裝置，其 中，作為集成單元提供了透鏡單元11、圖像捕捉單元12、相機信號處理 單元20、圖像壓縮/擴展單元41、記錄/再現(xiàn)處理單元61等。但是，可作 為分立單元來提供透鏡單元11、圖像捕捉單元12、顯示處理單元52、顯 示單元53和檢測單元71以構(gòu)成圖像再現(xiàn)裝置或圖像記錄裝置。
圖7是圖示出圖像再現(xiàn)裝置90的結(jié)構(gòu)的框圖。注意，在圖7中，與圖 1相對應(yīng)的那些部分被賦予了相同標(biāo)號。
圖像再現(xiàn)裝置90包括用于從記錄介質(zhì)62讀取編碼信號、圖像信號等 的記錄/再現(xiàn)處理單元61，用于對所讀取的編碼信號DR執(zhí)行擴展處理的圖 像壓縮/擴展單元41，使用從記錄介質(zhì)62讀取的圖像信號DV3執(zhí)行信號處 理的相機信號處理單元20，幀存儲單元31，用于將從相機信號處理單元 20輸出的圖像信號DV4或者從圖像壓縮/擴展單元41輸出的圖像信號 DV5輸出到外部設(shè)備的圖像輸出單元51，控制各個部分的操作的控制單元 81，以及用戶接口單元82。
在圖像再現(xiàn)裝置90中，當(dāng)執(zhí)行對記錄在記錄介質(zhì)62上的編碼信號的 讀取時，記錄/再現(xiàn)處理單元61將所讀取的編碼信號DR提供給圖像壓縮/ 擴展單元41。注意，編碼信號是通過對基準(zhǔn)幀速率的圖像信號執(zhí)行壓縮處 理而獲得的信號。圖像壓縮/擴展單元41對從記錄/再現(xiàn)處理單元61提供 的編碼信號DR執(zhí)行擴展處理，并將所獲得的圖像信號DV5提供給圖像輸出單元51。
此外，在圖像再現(xiàn)裝置90中，當(dāng)執(zhí)行對記錄在記錄介質(zhì)62上的高速 幀速率的圖像信號的讀取時，記錄/再現(xiàn)處理單元61讀取圖像信號以及與 該圖像信號相對應(yīng)的再現(xiàn)控制信息RJ。相機信號處理單元20執(zhí)行將從記 錄/再現(xiàn)處理單元61提供的圖像信號DV3轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號的 處理或者相機信號處理。圖像輸出單元51輸出基準(zhǔn)幀速率的圖像信號 DV4作為輸出圖像信號DVoiit。此外，在圖像再現(xiàn)裝置90中，在基于再 現(xiàn)控制信息RJ執(zhí)行再現(xiàn)速度控制或者用于減輕運動模糊的控制的情況 下，控制單元81基于再現(xiàn)控制信息RJ控制相機信號處理單元20或記錄/ 再現(xiàn)處理單元61的操作，并且控制要被提供給相機信號處理單元20的圖 像信號DV3的幀速率或者在相機信號處理單元20的圖像組合單元21中使 用的加權(quán)系數(shù)。
此外，在圖像再現(xiàn)裝置90中，當(dāng)執(zhí)行對記錄在記錄介質(zhì)62上的高速 幀速率的圖像信號的讀取時在無法獲得再現(xiàn)控制信息RJ的情況下，記錄/ 再現(xiàn)處理單元61向相機信號處理單元20提供讀取的圖像信號DV3。相機 信號處理單元20執(zhí)行將從記錄/再現(xiàn)處理單元61提供的圖像信號DV3轉(zhuǎn) 換為基準(zhǔn)幀速率的圖像信號的處理或者相機信號處理。圖像輸出單元51 輸出基準(zhǔn)幀速率的圖像信號DV4作為輸出圖像信號DVout。此外，在圖像 再現(xiàn)裝置90中，在用于隨著對象運動的增大而降低所捕捉圖像的再現(xiàn)速 度的再現(xiàn)控制或者用于減輕再現(xiàn)圖像中的運動模糊的再現(xiàn)控制被執(zhí)行的情 況下，記錄/再現(xiàn)處理單元61將所讀取的圖像信號DV3提供給圖像壓縮/ 擴展單元41。圖像壓縮/擴展單元41使用圖像信號DV3執(zhí)行運動檢測，并 將獲得的運動向量MV提供給控制單元81?？刂茊卧?1基于運動向量 MV控制記錄/再現(xiàn)處理單元61的操作以使得要被提供給相機信號處理單 元20的圖像信號DV3的幀速率可被改變，從而隨著對象運動的增大而降 低所捕捉圖像的再現(xiàn)速度。此外，控制單元81基于運動向量MV控制在 相機信號處理單元20的圖像組合單元21中使用的加權(quán)系數(shù)以減輕再現(xiàn)圖 像中的運動模糊。
圖8是圖示出圖像記錄裝置91的結(jié)構(gòu)的框圖。注意，在圖8中，與圖1相對應(yīng)的那些部分被賦予相同標(biāo)號。
圖像記錄裝置91包括對圖像信號執(zhí)行各種相機信號處理的相機信 號處理單元20，幀存儲單元31，對圖像信號執(zhí)行壓縮處理以生成編碼信
號的圖像壓縮/擴展單元41，用于將編碼信號DW寫入到記錄介質(zhì)62中的 記錄/再現(xiàn)處理單元61，控制各個部分的操作的控制單元81，以及用戶接 口單元82。
在圖像記錄裝置91中，當(dāng)基準(zhǔn)幀速率的圖像信號DV1被記錄時，圖 像壓縮/擴展單元41對已經(jīng)經(jīng)歷使用相機信號處理單元20的相機信號處理 的、基準(zhǔn)幀速率的圖像信號DV2執(zhí)行壓縮處理，以生成編碼信號DW。記 錄/再現(xiàn)處理單元61執(zhí)行將由圖像壓縮/擴展單元41生成的編碼信號DW 寫入記錄介質(zhì)62的處理。
此外，當(dāng)高速幀速率的圖像信號DV1被記錄時，相機信號處理單元 20不僅執(zhí)行相機信號處理而且還使用幀存儲單元31執(zhí)行圖像組合，并將 高速幀速率的圖像信號DV1轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號。圖像壓縮/擴 展單元41使用從相機信號處理單元20輸出的、基準(zhǔn)幀速率的圖像信號 DV2來生成運動向量MV。記錄/再現(xiàn)處理單元61獲取由圖像壓縮/擴展單 元41生成的運動向量MV作為再現(xiàn)控制信息RJ，或者獲取由控制單元81 基于運動向量MV生成的再現(xiàn)控制信息RJ。然后，記錄/再現(xiàn)處理單元61 執(zhí)行與高速幀速率的圖像信號DV1相關(guān)聯(lián)地將該再現(xiàn)控制信息RJ寫入記 錄介質(zhì)62的處理。
接下來，將說明圖像捕捉操作、記錄所捕捉圖像的操作、以及再現(xiàn)記 錄的所捕捉圖像的操作。圖9圖示了當(dāng)操作模式被設(shè)置為標(biāo)準(zhǔn)圖像捕捉模 式時的處理。注意，在圖9和以下將描述的圖10-12中，為了闡明每一個 處理對應(yīng)于圖1和7中的哪個塊，各個處理被賦予相應(yīng)塊的標(biāo)號。
圖像捕捉裝置執(zhí)行圖像捕捉信號的生成以生成基準(zhǔn)幀速率(例如， 60[Qds])的圖像捕捉信號。圖像捕捉裝置執(zhí)行AFE/ADC處理以調(diào)節(jié)該圖 像捕捉信號的信號電平，并在之后將該圖像捕捉信號轉(zhuǎn)換為數(shù)字信號。圖 像捕捉裝置執(zhí)行校正處理以生成已經(jīng)歷信號電平或白平衡調(diào)節(jié)和像素缺陷 校正的圖像信號DV1。圖像捕捉裝置執(zhí)行相機信號處理以生成已經(jīng)歷輪廓校正、顏色校正、y校正、拐點校正等的圖像信號DV2。此外，圖像捕捉 裝置執(zhí)行顯示處理以將圖像信號DV2轉(zhuǎn)換為具有與顯示單元53相對應(yīng)的 顯示分辨率的顯示圖像信號DH。注意，圖像捕捉裝置執(zhí)行檢測處理以檢 測孔徑調(diào)節(jié)、焦距調(diào)節(jié)和白平衡調(diào)節(jié)所必需的信息。
圖像捕捉裝置執(zhí)行以上處理以在顯示單元53的屏幕上顯示所捕捉圖 像。因此，用戶可以通過觀看在顯示單元53的屏幕上顯示的圖像來檢査 捕捉了什么對象。此外，如果圖像捕捉裝置輸出輸出圖像信號DVout，則 可使用外部設(shè)備顯示所捕捉圖像。
接下來，所捕捉圖像被記錄，圖像捕捉裝置(圖像記錄裝置)執(zhí)行圖 像壓縮處理以生成編碼信號DW。另外，圖像捕捉裝置(圖像記錄裝置) 執(zhí)行將編碼信號DW記錄到記錄介質(zhì)62上的記錄處理。即，以基準(zhǔn)幀速 率捕捉的圖像信號DV1被編碼并記錄在記錄介質(zhì)62上。
圖10圖示了當(dāng)再現(xiàn)通過執(zhí)行圖9所示的處理而記錄在記錄介質(zhì)62上 的圖像時的處理。圖像捕捉裝置(圖像再現(xiàn)裝置)執(zhí)行再現(xiàn)處理以從記錄 介質(zhì)62讀取所需的編碼信號。圖像捕捉裝置(圖像再現(xiàn)裝置)執(zhí)行圖像 擴展處理以從編碼信號生成圖像信號DV5。另外，圖像捕捉裝置執(zhí)行顯示 處理以將圖像信號DV5轉(zhuǎn)換為具有與顯示單元53的顯示分辨率相對應(yīng)的 顯示分辨率的顯示圖像信號DH。圖像捕捉裝置(圖像再現(xiàn)裝置)執(zhí)行以 上處理以在顯示單元53的屏幕上顯示再現(xiàn)圖像。此外，如果圖像捕捉裝 置(圖像再現(xiàn)裝置)輸出輸出圖像信號DVout，則可使用外部設(shè)備顯示再 現(xiàn)圖像。
圖11圖示了操作模式被設(shè)置為高速圖像捕捉模式時的處理。 圖像捕捉裝置執(zhí)行圖像捕捉信號的生成以生成高速幀速率(例如， 240[Q)s])的圖像捕捉信號。圖像捕捉裝置執(zhí)行AFE/ADC處理以調(diào)節(jié)該圖 像捕捉信號的信號電平，并在之后將該圖像捕捉信號轉(zhuǎn)換為數(shù)字信號。圖 像捕捉裝置執(zhí)行校正處理以生成已經(jīng)歷信號電平或白平衡調(diào)節(jié)和像素缺陷 校正的圖像信號DV1。圖像捕捉裝置對高速幀速率的圖像信號DV1執(zhí)行 相機信號處理。在相機信號處理中，不僅執(zhí)行輪廓校正、顏色校正、y校 正、拐點校正等，而且還執(zhí)行用于將高速幀速率的圖像信號轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號的圖像組合，并生成基準(zhǔn)幀速率的圖像信號DV2。
此外，圖像捕捉裝置執(zhí)行顯示處理以將圖像信號DV2轉(zhuǎn)換為具有與顯 示單元53相對應(yīng)的顯示分辨率的顯示圖像信號DH。圖像捕捉裝置執(zhí)行以 上處理以即使在設(shè)置了高速圖像捕捉模式時也在顯示單元53的屏幕上顯 示所捕捉圖像。此外，如果圖像捕捉裝置輸出輸出圖像信號DVout，則可 使用外部設(shè)備顯示所捕捉圖像。注意，圖像捕捉裝置被設(shè)計為使得該幀速 率被設(shè)置為高于基準(zhǔn)幀速率，并且針對一個幀周期執(zhí)行孔徑調(diào)節(jié)、焦距調(diào) 節(jié)和白平衡調(diào)節(jié)處理。因此，與標(biāo)準(zhǔn)圖像捕捉模式相比，可以提高它們的 控制精度和速度。
接下來，當(dāng)所捕捉圖像被記錄時，圖像捕捉裝置(圖像記錄裝置)執(zhí) 行圖像壓縮處理以生成運動檢測結(jié)果，例如，運動向量MV。另外，運動 向量MV被設(shè)置為再現(xiàn)控制信息RJ，或者再現(xiàn)控制信息RJ被基于運動向 量MV來生成。另外，圖像捕捉裝置(圖像記錄裝置)執(zhí)行記錄處理以將 高速幀速率的圖像信號和再現(xiàn)控制信息RJ相互關(guān)聯(lián)地記錄到記錄介質(zhì)62 上。
圖12圖示了當(dāng)再現(xiàn)通過執(zhí)行圖ll所示的處理而記錄在記錄介質(zhì)62上 的圖像時的處理。圖像捕捉裝置(圖像再現(xiàn)裝置)執(zhí)行再現(xiàn)處理以從記錄 介質(zhì)62讀取所需的圖像信號DV3和與該圖像信號相關(guān)聯(lián)的再現(xiàn)控制信息 RJ。圖像捕捉裝置(圖像再現(xiàn)裝置)執(zhí)行再現(xiàn)控制處理以使得執(zhí)行以下慢 動作圖像的生成處理在一種慢動作圖像的生成處理中，使得基于再現(xiàn)控 制信息RJ來控制圖像信號DV3的幀速率，以隨著所捕捉圖像中的對象運 動的增大而降低再現(xiàn)速度；并且在另一種慢動作圖像的生成處理中，使用 相機信號處理而減輕了移動較大量的對象的模糊。圖像捕捉裝置(圖像再 現(xiàn)裝置)執(zhí)行相機信號處理以從圖像信號DV3生成已經(jīng)歷諸如輪廓校正、 顏色校正、y校正和拐點校正之類的處理的基準(zhǔn)幀速率的圖像信號DV4。 此外，圖像捕捉裝置(圖像再現(xiàn)裝置)在執(zhí)行相機信號處理以將圖像信號 DV3轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號時，執(zhí)行圖像組合以使得可以減輕運動 模糊。另外，圖像捕捉裝置執(zhí)行顯示處理以將圖像信號DV4轉(zhuǎn)換為具有與 顯示單元53相對應(yīng)的顯示分辨率的圖像信號。圖像捕捉裝置執(zhí)行以上處理以在顯示單元53的屏幕上顯示再現(xiàn)圖像。此外，如果圖像捕捉裝置
(圖像再現(xiàn)裝置)輸出輸出圖像信號DVout，則可使用外部設(shè)備來顯示再
現(xiàn)圖像。
此外，在與所需圖像信號DV3相關(guān)聯(lián)的再現(xiàn)控制信息RJ無法獲得的 情況下，用于隨著對象運動的增大而降低所捕捉圖像的再現(xiàn)速度的再現(xiàn)控 制或者用于減輕再現(xiàn)圖像中的運動模糊的再現(xiàn)控制被執(zhí)行，圖像捕捉裝置
(圖像再現(xiàn)裝置)在再現(xiàn)控制處理中使用圖像信號DV3來執(zhí)行運動檢測， 并使得執(zhí)行以下慢動作圖像的生成處理在一種慢動作圖像的生成處理 中，使得基于所獲得的運動向量來控制圖像信號DV3的幀速率，以隨著所 捕捉圖像中的對象運動的增大而降低再現(xiàn)速度；或者在另一種慢動作圖像 的生成處理中，使用相機信號處理而減輕了移動較大量的對象的模糊。
注意，圖像捕捉裝置(圖像再現(xiàn)裝置)的控制單元81可被配置為控 制記錄/再現(xiàn)處理單元61的操作以使得根據(jù)用戶所指定的再現(xiàn)速度來順序 再現(xiàn)記錄在記錄介質(zhì)62上的圖像信號。例如，在用戶指定1倍再現(xiàn)速度 的情況下，控制單元81執(zhí)行從記錄介質(zhì)62讀取圖像信號以使得圖像信號 DV3的幀速率可為240[^)s]，使用相機信號處理單元20順序執(zhí)行對圖像信 號DV3的四個連續(xù)幀的圖像組合，并執(zhí)行向基準(zhǔn)幀速率(即，60[fj)s])的 圖像信號的轉(zhuǎn)換。此外，在用戶指定1/2倍再現(xiàn)速度的情況下，控制單元 81執(zhí)行從記錄介質(zhì)62讀取圖像信號以使得圖像信號DV3的幀速率可為 120[*s]，使用相機信號處理單元20順序執(zhí)行對圖像信號DV3的四個連續(xù) 幀的圖像組合，并執(zhí)行向基準(zhǔn)幀速率(即，60[*s])的圖像信號的轉(zhuǎn)換。 此外，在用戶指定1/4倍再現(xiàn)速度的情況下，控制單元81執(zhí)行從記錄介質(zhì) 62對圖像信號的讀取以使得圖像信號DV3的幀速率可以等于基準(zhǔn)幀速 率，也就是60[fj s]。
此外，在用戶指定快進再現(xiàn)，S卩，再現(xiàn)速度大于1倍的情況下，控制 單元81通過根據(jù)再現(xiàn)速度執(zhí)行抽取來從記錄介質(zhì)62讀取圖像信號，以生 成基準(zhǔn)幀速率的圖像信號，其指示了具有所指定的再現(xiàn)速度的圖像。在這 種情況下，多個連續(xù)幀的圖像也可被組合以生成在快進再現(xiàn)中的一個幀的 圖像。接下來，將說明減輕再現(xiàn)圖像中的運動模糊的操作。在對圖像信號
DV3執(zhí)行圖像組合以將圖像信號DV3轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號的情 況下，例如，如上述圖5所示，在組合四個幀a到d的圖像以生成一個幀 (a + b + c + d)的圖像的情況下，對象的大運動量可能導(dǎo)致在幀a到d中 對象位置的很大差異。為此，如果通過給予相等的加權(quán)系數(shù)來執(zhí)行循環(huán)加 算，則移動較大量的對象的圖像會模糊。因而無法獲得高質(zhì)量的再現(xiàn)圖 像。
因此，控制單元81針對具有大運動量的部分確定用于生成在各幀之 間不同的加權(quán)系數(shù)的加權(quán)系數(shù)選擇值WS，以使得要經(jīng)歷循環(huán)加算的多個 幀包含具有大權(quán)重的幀以及在時間上遠離該幀且被給予小權(quán)重的幀?？刂?單元81將這些加權(quán)系數(shù)提供給相機信號處理單元20中的圖像組合單元21 的加權(quán)系數(shù)生成單元212。
圖13是用于說明要從控制單元81提供給圖像組合單元21的加權(quán)系數(shù) 生成單元212的加權(quán)系數(shù)選擇值的生成操作的示圖。
控制單元81根據(jù)通過使用圖像信號執(zhí)行運動檢測而獲得的運動幅 度，確定加權(quán)系數(shù)選擇值WS。例如，當(dāng)圖像壓縮/擴展單元41對圖像信 號DV1執(zhí)行壓縮處理時獲得的運動向量MV被用于設(shè)置加權(quán)系數(shù)選擇值 WS。具體而言，將運動向量MV的運動量的絕對值(以下稱為"運動向 量絕對值")MVm與閾值相比較，并根據(jù)比較結(jié)果確定加權(quán)系數(shù)選擇值 WS。無論要經(jīng)歷圖像組合的幀的數(shù)目為多少都可利用固定值來實現(xiàn)所述 閾值，或者可根據(jù)要經(jīng)歷圖像組合的幀的數(shù)目來改變閾值數(shù)目。例如，當(dāng) 要經(jīng)歷圖像組合的幀數(shù)目很大時，閾值數(shù)目被增加以使得可根據(jù)運動向量 絕對值MVm來設(shè)置許多加權(quán)系數(shù)。
圖13的部分(A)圖示了在以下情況中獲得的加權(quán)系數(shù)選擇值WS: 其中，例如，以240[Q)s]捕捉的所捕捉圖像被以四幀為單位地組合，并且 組合后的圖像被以60[f^s]再現(xiàn)，也就是，當(dāng)再現(xiàn)速度被設(shè)置為1倍速時。 注意，在圖13的部分(A)中，提供了兩個閾值Mtal和Mta2。
當(dāng)運動向量絕對值MVm小于閾值Mtal時，控制單元81將加權(quán)系數(shù) 選擇值WS設(shè)置為"WaO"。此外，當(dāng)運動向量絕對值MVm等于或大于閾值Mtal并且小于閾值Mta2時，控制單元81將加權(quán)系數(shù)選擇值WS設(shè) 置為"Wal"。另外，當(dāng)運動向量絕對值MVm等于或大于閾值Mtb2時， 控制單元81將加權(quán)系數(shù)選擇值WS設(shè)置為"Wa2"。
圖13的部分(B)圖示了在以下情況下獲得的加權(quán)系數(shù)選擇值WS: 其中，例如，以240[Q)s]捕捉的所捕捉圖像被以兩幀為單位地組合，并且 組合后的圖像被以60[Q)s]再現(xiàn)，也就是，當(dāng)再現(xiàn)速度被設(shè)置為1/2倍速 時。注意，在圖13的部分(B)中，提供了一個閾值Mtbl。
當(dāng)運動向量絕對值MVm小于閾值Mtbl時，控制單元81將加權(quán)系數(shù) 選擇值WS設(shè)置為"WbO"。此外，當(dāng)運動向量絕對值MVm等于或大于 閾值Mtbl時，控制單元81將加權(quán)系數(shù)選擇值設(shè)置為"Wbl"。
這里，針對每一個宏塊檢測運動向量MV。因此，如圖14所示，控制 單元81根據(jù)運動向量絕對值MVm為圖像信號DV3的每一個宏塊設(shè)置加 權(quán)系數(shù)選擇值WS。注意，在圖14中，作為示例圖示了這樣一種情況，其 中，在畫面外圍部分運動量較小，而在接近中心的部分，運動量逐漸變 大。針對在畫面外圍部分的宏塊，加權(quán)系數(shù)選擇值WS被設(shè)置為 "WaO"，而針對在接近中心的部分中的宏塊，加權(quán)系數(shù)選擇值WS被設(shè) 置為"Wal"。
圖像組合單元21的加權(quán)系數(shù)生成單元212針對在圖像組合所涉及的 周期內(nèi)的每一個幀，根據(jù)加權(quán)系數(shù)選擇值WS順序輸出加權(quán)系數(shù)。圖15 圖示了作為一個示例的加權(quán)系數(shù)。在圖15中，"XI"示出了在以下情況 中獲得的加權(quán)系數(shù)其中，以例如240[^DS]捕捉的所捕捉圖像經(jīng)歷以四幀 為單位的圖像組合，并且組合后的圖像被以60[Q)s]再現(xiàn)，也就是，再現(xiàn)速 度被設(shè)置為1倍速。在這種情況下，四個幀要經(jīng)歷圖像組合。因此，針對 要經(jīng)歷圖像組合的四個幀a到d設(shè)置加權(quán)系數(shù)。
此外，在圖15中，"X1/2"示出了在以下情況中獲得的加權(quán)系數(shù) 其中，以例如240飾s]捕捉的所捕捉圖像經(jīng)歷以兩幀為單位的圖像組合， 并且組合后的圖像被以60[fi)s]再現(xiàn)，也就是，當(dāng)再現(xiàn)速度被設(shè)置為1/2倍 速時。在這種情況下，兩個幀要經(jīng)歷圖像組合。因此，針對要經(jīng)歷圖像組 合的兩個幀a和b設(shè)置加權(quán)系數(shù)。
26加權(quán)系數(shù)生成單元212在加權(quán)系數(shù)選擇值WS為"WaO"時，為要經(jīng) 歷圖像組合的幀a、 b、 c和d設(shè)置加權(quán)系數(shù)"2"，并且在加權(quán)系數(shù)選擇值 WS為"WbO"時，為要經(jīng)歷圖像組合的幀a和b設(shè)置加權(quán)系數(shù)"2"。 即，沒有運動或者具有小運動量的部分的圖像被給予相等權(quán)重。因此，由 于即使在要經(jīng)歷圖像組合的幀之一的圖像上疊加了噪聲，執(zhí)行循環(huán)加算之 后獲得的圖像信號也被使用除算電路214來改變?yōu)樵陬A(yù)定信號電平范圍內(nèi) 的圖像信號，所以從圖像組合單元21輸出的圖像信號是在沒有運動的部 分中或者在具有小運動量的部分中已經(jīng)降低了噪聲的圖像信號。
當(dāng)加權(quán)系數(shù)選擇值WS為"Wal"時，加權(quán)系數(shù)生成單元212以幀的 順序為要經(jīng)歷圖像組合的幀a、 b、 c和d設(shè)置加權(quán)系數(shù)"1、 1、 3、 3"。 當(dāng)加權(quán)系數(shù)選擇值WS為"Wa2"時，加權(quán)系數(shù)生成單元212以幀的順序 為要經(jīng)歷圖像組合的幀a、 b、 c禾P d設(shè)置加權(quán)系數(shù)"1、 1、 2、 4"。此 外，當(dāng)加權(quán)系數(shù)選擇值WS為"WM"時，加權(quán)系數(shù)生成單元212以幀的 順序為要經(jīng)歷圖像組合的幀a和b設(shè)置加權(quán)系數(shù)"1、 3" 。 S卩，以下述方 式為具有大運動量的部分設(shè)置加權(quán)系數(shù)使得要經(jīng)歷圖像組合的幀包含具 有大權(quán)重的幀和在時間上遠離該幀且被給予小權(quán)重的幀。此外，為具有更 大運動量的部分設(shè)置加權(quán)系數(shù)以使得在具有大權(quán)重的幀和具有小權(quán)重的時 間上遠離的幀之間的權(quán)重差變得更大。為此，由于在時間上遠離被給予大 權(quán)重的幀的幀(即，對象位置很大程度上不同的幀)被給予了小權(quán)重，所 以與通過給予相等權(quán)重來執(zhí)行圖像組合的情況相比，可以獲得運動模糊降 低了的圖像信號。
注意，僅在用戶指定針對要經(jīng)歷圖像組合的各個幀設(shè)置在幀之間不同 的加權(quán)系數(shù)以使得可以降低運動模糊的處理的情況下，控制單元81才可 以執(zhí)行該處理。S卩，通常而言，可以向要經(jīng)歷圖像組合的幀給予相等的加 權(quán)系數(shù)。于是，與再現(xiàn)通過執(zhí)行標(biāo)準(zhǔn)圖像捕捉模式下的圖像捕捉而獲得的 圖像捕捉結(jié)果相似，可以再現(xiàn)通過執(zhí)行高速圖像捕捉而獲得的圖像捕捉結(jié) 果。
此外，控制單元81可被配置為在高速圖像捕捉模式下進行記錄期 間，在具有大運動量的部分中，執(zhí)行針對要經(jīng)歷圖像組合的各個幀設(shè)置在幀之間不同的加權(quán)系數(shù)的處理，以使得再現(xiàn)控制信息RJ可以包括加權(quán)系 數(shù)選擇值或加權(quán)系數(shù)。在這種情況下，在再現(xiàn)期間可容易地設(shè)置加權(quán)系
數(shù)。例如，即使是不具有根據(jù)運動向量MV設(shè)置加權(quán)系數(shù)的功能的圖像再 現(xiàn)裝置，也可以輸出運動模糊已經(jīng)降低的、基準(zhǔn)幀速率的圖像信號。
此外，控制單元81可被配置為使得在再現(xiàn)記錄在記錄介質(zhì)62上的所 捕捉圖像期間無法獲得再現(xiàn)控制信息RJ的情況下，圖像壓縮/擴展單元41 使用圖像信號DV3執(zhí)行運動檢測，并且根據(jù)通過該運動檢測獲得的運動向 量MV，加權(quán)系數(shù)選擇值WS被確定。
接下來，將說明根據(jù)對象的運動來控制再現(xiàn)速度的情況。響應(yīng)于用戶 指令，控制單元81確定所建議的再現(xiàn)速度SR，以使得可以隨所捕捉圖像 中的對象運動的增大而降低再現(xiàn)速度，并以在畫面上顯示(on-screen display)的方式在顯示單元53上顯示該所建議的再現(xiàn)速度SR。此外，在 用戶指示以所建議的再現(xiàn)速度SR再現(xiàn)的情況下，控制單元81控制各個部 分的操作以使得可以生成具有所建議的再現(xiàn)速度SR的圖像信號DV4。另 外，控制單元81還檢測由諸如搖攝和傾斜(pan and tilt)之類的相機工作 導(dǎo)致的運動對其沒有影響的背景的運動，并使用該背景運動來計算對象關(guān) 于背景的相對運動的幅度，以根據(jù)計算得到的對象相對運動的幅度來確定 所建議的再現(xiàn)速度SR。
圖16是用于說明確定所建議的再現(xiàn)速度的處理的示圖?？刂茊卧?1 設(shè)置在所捕捉圖像上的幀BF以使得可以相互區(qū)分背景的運動和所需對象 的運動，并將所捕捉圖像分成所需對象所處的中心部分和與背景部分相對 應(yīng)的外圍部分b。此外，控制單元81產(chǎn)生使用所捕捉圖像的圖像信號檢測 到的運動向量MV的絕對值，并計算指示出運動的幅度的運動向量絕對值 MVm。接下來，控制單元81將運動向量絕對值MVm分成幀BF內(nèi)部和幀 BF外部的部分并執(zhí)行加算。然后，控制單元81如式(1)所示地，從通過 將幀BF內(nèi)部的運動向量絕對值MVm相加而獲得的絕對值和減去通過將 幀BF外部的運動向量絕對值MVm相加而獲得的絕對值和，以計算指示 出所需對象關(guān)于背景的相對運動的幅度的判定值MU。
MU = 2X幀內(nèi)部的各個宏塊的運動向量絕對值)-i:(幀外部的各個宏塊的運動向量絕對值) ...(l)
接下來，控制單元81將判定值MU與閾值A(chǔ)Vtl和AVt2相比較，并 基于比較結(jié)果確定所建議的再現(xiàn)速度SR。圖17是圖示出在判定值和所建 議的再現(xiàn)速度之間的關(guān)系的示圖。
當(dāng)判定值MU小于閾值A(chǔ)Vtl時，控制單元81將所建議的再現(xiàn)速度 SR設(shè)置為"FrO" ， B卩，1倍速(XI)的再現(xiàn)速度。此外，當(dāng)判定值MU 等于或大于閾值A(chǔ)Vtl并且小于閾值A(chǔ)Vt2時，控制單元81將所建議的再 現(xiàn)速度SR設(shè)置為"Frl"。另外，當(dāng)判定值MU等于或大于閾值A(chǔ)Vt2 時，控制單元81將所建議的再現(xiàn)速度SR設(shè)置為"Fr2"。這里，在高速 幀速率的圖像信號DV1為240[fj)s]并且基準(zhǔn)幀速率為60[^)s]的情況下，當(dāng) 所建議的再現(xiàn)速度SR為"Fr2"時，控制單元81設(shè)置這樣一種再現(xiàn)速 度，針對該再現(xiàn)速度，從記錄介質(zhì)62對圖像信號的讀取被執(zhí)行以使得圖 像信號DV3的幀速率可以為60[*S]，并且針對該再現(xiàn)速度，圖像信號 DV3在沒有經(jīng)歷圖像組合的情況下被處理以產(chǎn)生再現(xiàn)圖像的圖像信號，即 1/4倍再現(xiàn)速度，作為所建議的再現(xiàn)速度SR。此外，當(dāng)所建議的再現(xiàn)速度 SR為"Frl"時，例如，控制單元81設(shè)置在l倍速和1/4倍速之間的中間 值，也就是l/2倍速，作為所建議的再現(xiàn)速度SR。
如果以這種方式設(shè)置所建議的再現(xiàn)速度SR，則當(dāng)對象關(guān)于背景的相 對運動的幅度較小時獲得1倍的再現(xiàn)速度，并隨著運動的增大而降低再現(xiàn) 速度。為此，如果以所建議的再現(xiàn)速度SR執(zhí)行再現(xiàn)，則可以以下述方式 自動改變再現(xiàn)速度當(dāng)對象關(guān)于背景的運動量較大時可以獲得對象慢慢動 作的運動再現(xiàn)圖像，而當(dāng)對象的運動量較小時對象的運動可以遵照實際運 動。因此，用戶沒有必要執(zhí)行以下操作當(dāng)對象的運動量較大時切換到慢 動作再現(xiàn)操作以使得用戶可以使用以慢動作播放的視頻來檢查對象的運 動，并且當(dāng)對象的運動量變小時，切換到1倍速度再現(xiàn)。這樣，可以極大 地提高用戶便利性。
此外，控制單元81可以在以高速圖像捕捉模式記錄期間執(zhí)行所建議 再現(xiàn)速度SR的設(shè)置，以使得再現(xiàn)控制信息RJ可以包括所建議的再現(xiàn)速度 SR。在這種情況下，可以很容易地在再現(xiàn)期間設(shè)置所建議的再現(xiàn)速度SR。例如，即使是沒有用于根據(jù)運動向量MV設(shè)置所建議的再現(xiàn)速度SR
的功能的圖像再現(xiàn)裝置，也可以根據(jù)對象運動自動改變再現(xiàn)速度。
此外，控制單元81還可以在以高速圖像捕捉模式記錄的圖像的再現(xiàn) 期間執(zhí)行所建議的再現(xiàn)速度SR的設(shè)置。在這種情況下，在以高速圖像捕 捉模式記錄期間，控制單元81根據(jù)圖像信號DV1在記錄介質(zhì)62上記錄再 現(xiàn)控制信息RJ，以使得該再現(xiàn)控制信息RJ可以包括所建議的再現(xiàn)速度 SR。此外，在以高速圖像捕捉模式記錄的圖像的再現(xiàn)期間，控制單元81 讀取圖像信號以及與該圖像信號相對應(yīng)的再現(xiàn)控制信息RJ，并控制要被提 供給相機信號處理單元20的幀速率，以使得可以獲得由該再現(xiàn)控制信息 RJ指示的所建議再現(xiàn)速度SR。
此外，控制單元81可被配置為使得在記錄在記錄介質(zhì)62上的所捕捉 圖像的再現(xiàn)期間無法獲得再現(xiàn)控制信息RJ的情況下，圖像壓縮/擴展單元 41使用圖像信號DV3執(zhí)行運動檢測，并且根據(jù)通過該運動檢測而獲得的 運動向量MV，所建議再現(xiàn)速度SR被確定，從而控制所捕捉圖像的再現(xiàn) 速度。
圖18是圖示出在使用圖像捕捉裝置10和圖像記錄裝置91記錄圖像信 號時的操作的時間圖。注意，在圖18中，圖示了這樣一種情況，其中， 基于運動向量MV來確定所建議再現(xiàn)速度SR，并且其中，與圖像信號相 對應(yīng)地記錄包括該所建議再現(xiàn)速度SR的再現(xiàn)控制信息RJ。
圖18的部分(A)是基準(zhǔn)幀速率(也就是，60飾s])的垂直同步信號 VD。圖18的部分(B)是圖像捕捉單元12用來生成圖像信號DV1的垂 直同步信號VDc。圖像捕捉裝置IO使得圖像傳感器121、 AFE 122、 ADC 123、校正處理單元124和檢測單元71與垂直同步信號VDc相同步地操作 以生成圖18的部分(C)所示的圖像信號DV1。注意，在圖18的部分 (C)中，連續(xù)數(shù)字表示各個幀。
圖18的部分(H)是在相機信號處理單元20、圖像壓縮/擴展單元 41、圖像輸出單元51、顯示處理單元52和顯示單元53中執(zhí)行的操作所基 于的基準(zhǔn)幀速率的垂直同步信號VDs。此外，假設(shè)垂直同步信號VDh和 VDs是與垂直同步信號VD相同步的信號。在標(biāo)準(zhǔn)圖像捕捉模式下，圖像捕捉單元12生成被設(shè)置在基準(zhǔn)幀速率
的、與垂直同步信號VDc相同步的圖像信號DVl的幀"0"的信號。由于 圖像信號DV1被設(shè)置在基準(zhǔn)幀速率，所以相機信號處理單元20執(zhí)行除圖 像組合之外的相機信號處理。從相機信號處理單元20輸出的圖像信號 DV2的幀"0"的信號通過顯示處理單元52而被提供給顯示單元53。因 此，如圖18的部分(J)所示，要被提供給顯示單元53的顯示圖像信號 DH或者來自圖像輸出單元51的輸出圖像信號DVout示出了圖像幀 "0，，。
在高速圖像捕捉模式下，圖像捕捉單元12生成60飾s]的四倍的 240[Q)s]的與垂直同步信號VDc相同步的圖像信號DV1的幀"1"、 "2"、…的信號。由于圖像信號DV1被設(shè)置在高速幀速率，所以相機信 號處理單元20執(zhí)行圖像組合，并執(zhí)行向基準(zhǔn)幀速率的圖像信號的轉(zhuǎn)換。
圖18的部分(D)到(G)是用于說明由相機信號處理單元20的圖像 組合單元21執(zhí)行的圖像組合的信號。圖18的部分(D)圖示了要寫在幀 存儲單元31的倉庫312a中的圖像信號DfWa，圖18的部分(E)圖示了要 從幀存儲單元31的倉庫312a讀取的圖像信號Dfm，圖18的部分(F)圖 示了要寫在幀存儲單元31的倉庫312b中的圖像信號D~b，并且圖18的 部分(G)圖示了要從幀存儲單元31的倉庫312b讀取的圖像信號Dfrb。
圖像組合單元21將幀"1"的信號存儲倉庫312a中。對于下一個幀， 圖像組合單元21讀取在倉庫312a中存儲的幀"1"的信號并將其與幀 "2"的信號相加。然后，循環(huán)加算幀"2'"的信號被存儲在倉庫312a 中。注意，在圖18的部分(D)到(G)中，用具有"'"符號的數(shù)字表示 已經(jīng)歷圖像組合的循環(huán)加算幀。
以這種方式，圖像組合單元21使用循環(huán)加算執(zhí)行圖像組合。當(dāng)針對 基準(zhǔn)幀周期的圖像組合完成時，即，當(dāng)通過對幀"1"到"4"執(zhí)行循環(huán)加 算而獲得的循環(huán)加算幀"4'"的信號被存儲在倉庫312a時，圖像組合單元 21將對圖像信號的寫入從倉庫312a切換到倉庫312b。此外，圖像組合單 元21讀取存儲在倉庫312a中的、在四幀的圖像組合之后獲得的信號，同 時與垂直同步信號VDs相同步地，使用除算電路將該信號恢復(fù)成在預(yù)定電平范圍內(nèi)的信號，并執(zhí)行諸如輪廓校正之類的相機信號處理。之后，得到
的信號通過顯示處理單元52而被提供給圖像輸出單元51或顯示單元53。
圖像組合單元21將幀"5"的信號存儲在倉庫312b中。對于下一個 幀，圖像組合單元21讀取在倉庫312b中存儲的幀"5"的信號并將其與 幀"6"的信號相加。然后，圖像組合單元21將循環(huán)加算幀"6'"的信號 存儲在倉庫312b中。當(dāng)通過對幀"5"到"8"執(zhí)行循環(huán)加算而獲得的循 環(huán)加算幀"8'"的信號被存儲在倉庫312b中時，圖像組合單元21切換倉 庫，其中，圖像信號要被寫入倉庫312a。然后，圖像組合單元21讀取存 儲在倉庫312b中的、四幀的圖像組合之后獲得的信號，同時在基準(zhǔn)幀周 期內(nèi)使用除算電路將該信號恢復(fù)成在預(yù)定信號電平范圍內(nèi)的信號，并執(zhí)行 諸如輪廓校正之類的處理。之后，得到的信號通過顯示處理單元52而被 提供給圖像輸出單元51或顯示單元53。隨后，以類似方式執(zhí)行處理。于 是，如圖18的部分(J)所示，即使在高速圖像捕捉模式中，也可以基準(zhǔn) 幀速率顯示或輸出圖像。
此外，在記錄操作期間，控制單元81在執(zhí)行壓縮處理之后，將在標(biāo) 準(zhǔn)圖像捕捉模式下生成的圖像信號(例如，幀"0"的信號)記錄在記錄 介質(zhì)62上，并在沒有執(zhí)行相機信號處理或壓縮處理的情況下，將在高速 圖像捕捉模式下生成的圖像信號(例如，幀"1" 、 "2"、...的信號)記 錄在記錄介質(zhì)62上。
另外，在高速圖像捕捉模式下，控制單元81使得圖像壓縮/擴展單元 41對從相機信號處理單元20輸出的圖像信號執(zhí)行處理，以基于由圖像壓 縮/擴展單元41生成的運動信息確定所建議再現(xiàn)速度SR，如圖18的部分 (I)所示。然后，控制單元81與在高速圖像捕捉模式下生成的圖像信號 相對應(yīng)地，將包括該所建議再現(xiàn)速度SR的再現(xiàn)控制信息RJ記錄在記錄介 質(zhì)62上。注意，盡管并未圖示，但在再現(xiàn)期間設(shè)置加權(quán)系數(shù)的情況下， 加權(quán)系數(shù)選擇值WS被包括在再現(xiàn)控制信息RJ中，并與圖像信號相對應(yīng) 地被記錄在記錄介質(zhì)62上。
圖19是圖示出在使用圖像捕捉裝置IO和圖像再現(xiàn)裝置90生成在記錄 介質(zhì)62上記錄的圖像時的操作的時間圖。注意，在圖19中，圖示了這樣
32一種情況，其中，用戶已經(jīng)指示以所建議再現(xiàn)速度再現(xiàn)。
圖19的部分(A)是基準(zhǔn)幀速率(也就是60[*S])的垂直同步信號 VD。圖19的部分(B)圖示了與圖像信號一起從記錄介質(zhì)62讀取的所建 議再現(xiàn)速度SR。圖19的部分(C)圖示了要從記錄介質(zhì)62讀取的圖像信 號的垂直同步信號VDr。此外，圖19的部分(I)是在相機信號處理單元 20、圖像壓縮/擴展單元41、圖像輸出單元51、顯示處理單元52和顯示單 元53中執(zhí)行的操作所基于的基準(zhǔn)幀速率的垂直同步信號VDs。
當(dāng)讀取的所建議再現(xiàn)速度SR是1倍速(XI)的"FrO"時，控制單 元81以記錄期間的幀速率設(shè)置圖像信號DV3， BP，以240[Q)s]的幀速率設(shè) 置圖像信號DV3，并將該圖像信號DV3提供給相機信號處理單元20。圖 19的部分(D)圖示了圖像信號DV3。
由于已經(jīng)在高速圖像捕捉模式下記錄圖像信號DV3，所以控制單元 81使得相機信號處理單元20執(zhí)行圖像組合以生成基準(zhǔn)幀速率的圖像信
號
圖19的部分(E)到(H)是用于說明由相機信號處理單元20的圖像 組合單元21執(zhí)行的圖像組合的信號。圖19的部分(E)圖示了要寫在幀 存儲單元31的倉庫312a中的圖像信號Dfwa，圖19的部分(F)圖示了要 從幀存儲單元31的倉庫312a讀取的圖像信號Dfra，圖19的部分(G)圖 示了要寫在幀存儲單元31的倉庫312b中的圖像信號DfWb，并且圖19的 部分(H)圖示了要從幀存儲單元31的倉庫312b讀取的圖像信號Dfrb。
圖像組合單元21以上述方式執(zhí)行圖像組合。當(dāng)一個基準(zhǔn)幀周期的圖 像組合完成時，S卩，當(dāng)通過對幀"1"到"4"執(zhí)行圖像組合而獲得的循環(huán) 加算幀"4'"的信號被存儲在倉庫312a中時，圖像組合單元21切換倉 庫，其中圖像信號要被從倉庫312a寫入倉庫312b。此外，在圖像組合 中，根據(jù)運動信息設(shè)置加權(quán)系數(shù)，并使用所設(shè)置的權(quán)重系數(shù)對要經(jīng)歷循環(huán) 加算的幀進行加權(quán)。此外，圖像組合單元21讀取在倉庫312a中存儲的在 四幀的圖像組合之后獲得的信號，同時與垂直同步信號VDs相同步地使用 除算電路將該信號恢復(fù)成在預(yù)定電平范圍內(nèi)的信號，并執(zhí)行諸如輪廓校正 之類的相機信號處理。之后，得到的信號通過顯示處理單元52而被提供給圖像輸出單元51或顯示單元53。圖19的部分(J)圖示了要提供給顯 示單元53的顯示圖像信號DH或者來自圖像輸出單元51的輸出圖像信號 DVout。
接下來，當(dāng)讀取的所建議再現(xiàn)速度SR為1/2倍速的"Frl (X1/2)" 時，控制單元81以記錄期間的幀速率的1/2倍的幀速率設(shè)置圖像信號 DV3，艮口，以120飾s]的幀速率設(shè)置圖像信號DV3，并將該圖像信號DV3 提供給相機信號處理單元20。此時，由于圖像信號DV3的幀速率高于基 準(zhǔn)幀速率，所以控制單元81還使得相機信號處理單元20執(zhí)行圖像組合以 生成基準(zhǔn)幀速率的圖像信號。
艮口，圖像組合單元21將幀"9"的信號存儲在倉庫312a中。對于下一 個幀，圖像組合單元21讀取在倉庫312a中存儲的幀"9"的信號并將其與 幀"10"的信號相加。然后，循環(huán)加算幀"10'"的信號被存儲在倉庫312a 中。
當(dāng)針對基準(zhǔn)幀周期的圖像組合完成時，g卩，當(dāng)通過對幀"9"和 "10"執(zhí)行圖像組合而獲得的循環(huán)加算幀"10'"的信號被存儲在倉庫312a 中時，圖像組合單元21切換倉庫，其中，圖像信號要被從倉庫312a寫入 倉庫312b。此外，圖像組合單元21讀取在倉庫312a中存儲的在兩個幀的 圖像組合之后獲得的信號，同時與垂直同步信號VDs相同步地使用除算電 路將該信號恢復(fù)成在預(yù)定電平范圍內(nèi)的信號，并執(zhí)行諸如輪廓校正之類的 處理。之后，得到的信號通過顯示處理單元52而被提供給圖像輸出單元 51或顯示單元53。
接下來，當(dāng)讀取的所建議再現(xiàn)速度SR為1/4倍速的"Fr2 (X1/4)" 時，控制單元81以記錄期間的幀速率的1/4倍的幀速率設(shè)置圖像信號 DV3，艮卩，以60[fi)s]的幀速率設(shè)置圖像信號，并將該圖像信號DV3提供 給相機信號處理單元20。此時，由于圖像信號DV3的幀速率為基準(zhǔn)幀速 率，所以控制單元81在不執(zhí)行圖像組合的情況下，在使用相機信號處理 單元20執(zhí)行諸如輪廓校正之類的相機信號處理之后，通過顯示處理單元 52將圖像信號DV3提供給圖像輸出單元51或顯示單元53。注意，相機信 號處理單元20被配置為使得當(dāng)圖像組合被執(zhí)行時，已經(jīng)執(zhí)行基準(zhǔn)幀周期的圖像組合的圖像信號在下一基準(zhǔn)幀周期被讀取。這樣，在圖像組合之后
獲得的信號關(guān)于圖像信號DV3延遲了一幀。因此，當(dāng)圖像信號DV3具有 基準(zhǔn)幀速率時，控制單元81控制要寫入倉庫312a或倉庫312b的圖像信號 DV3和要在下一個基準(zhǔn)幀周期讀取的所寫入圖像信號。即使所建議再現(xiàn)速 度SR被切換時，圖像的再現(xiàn)也被使用每一個幀的圖像信號DV3來順序執(zhí) 行。
以這種方式，如果以所建議再現(xiàn)速度SR執(zhí)行再現(xiàn)操作，則當(dāng)運動量 較小時使圖像信號DV3經(jīng)歷以四幀為單位的圖像組合以產(chǎn)生基準(zhǔn)幀速率的 圖像。因此，要顯示或輸出的圖像可自動成為1倍速的再現(xiàn)圖像。此外， 隨著運動的增大，圖像信號DV3的幀速率降低，并且要經(jīng)歷圖像組合的幀 的數(shù)目也減少。因此，要顯示或輸出的圖像可自動成為慢動作再現(xiàn)圖像。
此外，控制單元81在運動量較小時設(shè)置相等的加權(quán)系數(shù)，并且當(dāng)運 動量較大時，在要經(jīng)歷圖像組合的幀之間設(shè)置不同的加權(quán)系數(shù)以使得由圖 像組合導(dǎo)致的運動模糊可被降低。因此，具有較小運動量的部分是降低了 噪聲的圖像，并且具有較大運動量的部分是即使圖像組合被執(zhí)行也降低了 模糊的圖像。
圖20圖示了在使用從記錄介質(zhì)62讀取的圖像信號執(zhí)行運動檢測，設(shè) 置所建議再現(xiàn)速度并且用戶指示以該所建議再現(xiàn)速度再現(xiàn)的情況下的時間 圖。
圖20的部分(A)是基準(zhǔn)幀速率(也就是，60[fj)s])的垂直同步信號 VD。圖20的部分(B)圖示了從記錄介質(zhì)62讀取的圖像信號的垂直同步 信號VDr，并且該垂直同步信號VDr被設(shè)置在作為所記錄圖像信號的幀速 率的240[fj)s]的幀周期。此外，圖20的部分(I)是在相機信號處理單元 20、圖像壓縮/擴展單元41、圖像輸出單元51、顯示處理單元52和顯示單 元53中執(zhí)行的操作所基于的基準(zhǔn)幀速率的垂直同步信號VDs。
圖20的部分(D)圖示了要提供給相機信號處理單元和圖像壓縮/擴 展單元41的圖像信號DV3，并圖20的部分(C)圖示了通過使用圖像信 號DV3執(zhí)行運動檢測而確定的所建議再現(xiàn)速度SR。
記錄/再現(xiàn)處理單元61執(zhí)行從記錄介質(zhì)62對圖像信號的讀取，并與垂
35直同步信號VD和垂直同步信號VDr相同步地，將作為感興趣的幀的圖像 信號的一個幀的圖像信號DV3提供給相機信號處理單元20和圖像壓縮/擴 展單元41。圖像壓縮/擴展單元41使用與垂直同步信號VD和VDr相同步 地提供的感興趣的幀的圖像信號以及例如作為該幀之前的一個幀的基準(zhǔn)幀 的圖像信號來執(zhí)行運動檢測，并檢測到運動向量MV?？刂茊卧?1基于檢 測到的運動向量MV，確定所建議再現(xiàn)速度SR和包括該感興趣的幀的基 準(zhǔn)幀周期的加權(quán)系數(shù)選擇值WS。
例如，圖像壓縮/擴展單元41使用作為感興趣的幀的幀"1"的圖像信 號以及作為基準(zhǔn)幀的幀"0"的圖像信號來執(zhí)行運動檢測，并檢測運動向 量MV?？刂茊卧?1基于該運動向量MV確定包括幀"1"的基準(zhǔn)幀周期 的所建議再現(xiàn)速度SR。這里，當(dāng)基于檢測到的運動向量MV計算得到的 判定值MU小于閾值A(chǔ)Vtl時，控制單元81將包括幀"1"的基準(zhǔn)幀周期 的所建議再現(xiàn)速度SR設(shè)置為1倍速(XI)的"Fro"。由于針對1倍速 執(zhí)行圖像信號DV3的四個幀的圖像組合，所以控制單元81控制記錄/再現(xiàn) 處理單元61將幀"1"之后的三個幀的圖像信號提供給相機信號處理單元 20和圖像壓縮/擴展單元41。
圖20的部分(E)到(H)是用于說明由相機信號處理單元20的圖像 組合單元21執(zhí)行的圖像組合的信號。圖20的部分(E)圖示了要寫在幀 存儲單元31的倉庫312a中的圖像信號Dfwa，圖20的部分(F)圖示了要 從幀存儲單元31的倉庫312a讀取的圖像信號Dfm，圖20的部分(G)圖 示了要寫在幀存儲單元31的倉庫312b中的圖像信號D~b，并且圖20的 部分(H)圖示了要從幀存儲單元31的倉庫312b讀取的圖像信號Dfrb。
圖像組合單元21以上述方式執(zhí)行圖像組合。當(dāng)一個基準(zhǔn)幀周期的圖 像組合完成時，即，當(dāng)通過對幀"l"到"4"執(zhí)行圖像組合而獲得的循環(huán) 加算幀"4'"的信號被存儲在倉庫312a中時，圖像組合單元21切換倉 庫，其中圖像信號要被從倉庫312a寫入倉庫312b。此外，在圖像組合 中，根據(jù)基于檢測到的運動向量確定的加權(quán)系數(shù)選擇值WS來設(shè)置加權(quán)系 數(shù)，并使用所設(shè)置的權(quán)重系數(shù)對要經(jīng)歷循環(huán)加算的幀進行加權(quán)。此外，圖 像組合單元21讀取在倉庫312a中存儲的在四幀的圖像組合之后獲得的信號，同時針對下一個基準(zhǔn)幀周期與垂直同步信號VDs相同步地使用除算電 路將該信號恢復(fù)成在預(yù)定電平范圍內(nèi)的信號，并執(zhí)行諸如輪廓校正之類的
處理。之后，得到的信號通過顯示處理單元52而被提供給圖像輸出單元 51或顯示單元53。圖20的部分(J)圖示了要提供給顯示單元53的顯示 圖像信號DH或者要從圖像輸出單元51輸出的輸出圖像信號DVout。注 意，在確定加權(quán)系數(shù)選擇值WS時，要經(jīng)歷循環(huán)加算的第一幀的圖像信號 已經(jīng)存儲在倉庫中。為此，如果在根據(jù)加權(quán)系數(shù)選擇值WS選擇的運動系 數(shù)中向第一幀給予了相等系數(shù)，則可以調(diào)節(jié)用于第二和后續(xù)幀的運動系 數(shù)，并可以減輕運動模糊。例如，在圖15中，假設(shè)在加權(quán)系數(shù)選擇值WS 為"WaO"時設(shè)置了系數(shù)"1、 1、 1、 1"。在圖4所示的除算電路214 中，當(dāng)加權(quán)系數(shù)選擇值WS為"WaO"時，從幀存儲單元31提供的圖像信 號的信號電平被乘以1/4。這將使得在加權(quán)系數(shù)選擇值WS為"WaO"、
"Wal"和"Wa2"的任一個時，幀a的系數(shù)都可被設(shè)置為"1"。因此， 即使要經(jīng)歷循環(huán)加算的第一幀的圖像信號已經(jīng)存儲在倉庫中，也可降低在 沒有運動的部分或者具有小運動量的部分中的噪聲，或者在具有大運動量 的部分中的運動模糊。
接下來，使用作為感興趣的幀的幀"5"的圖像信號和作為基準(zhǔn)幀的 幀"4"的圖像信號來執(zhí)行運動檢測，并且基于檢測到的運動向量MV，確 定包括幀"5"的基準(zhǔn)幀周期的所建議再現(xiàn)速度SR為1倍速(XI)的
"Fro"。然后，使用倉庫312b執(zhí)行四幀的循環(huán)加算，并執(zhí)行顯示圖像信 號DH的生成和輸出圖像信號DVout的輸出。
接下來，使用作為感興趣的幀的幀"9"的圖像信號和作為基準(zhǔn)幀的 幀"8"的圖像信號來執(zhí)行運動檢測，并且基于檢測到的運動向量MV，確 定包括幀"8"的基準(zhǔn)幀周期的所建議再現(xiàn)速度SR。這里，當(dāng)判定值MU 等于或大于閾值A(chǔ)Vtl并小于閾值A(chǔ)Vt2時，包括幀"8"的基準(zhǔn)幀周期的 所建議再現(xiàn)速度SR被設(shè)置為1/2倍速"X1/2"的"Frl"。由于針對1/2 倍速執(zhí)行圖像信號DV3的兩幀的圖像組合，所以控制單元81控制記錄/再 現(xiàn)處理單元61以將幀"8"之后的一個幀的圖像信號提供給相機信號處理 單元20和圖像壓縮/擴展單元41 。圖像組合單元21執(zhí)行圖像組合。當(dāng)一個基準(zhǔn)幀周期的圖像組合完成
時，即，當(dāng)通過對幀"9"和"10"執(zhí)行圖像組合而獲得的循環(huán)加算幀 "圖像捕捉裝置10'"的信號被存儲在倉庫312a中時，圖像組合單元21切 換倉庫，其中，圖像信號被從倉庫312a寫入倉庫312b。在圖像組合時， 利用根據(jù)加權(quán)系數(shù)選擇值WS設(shè)置的加權(quán)系數(shù)來對要經(jīng)歷循環(huán)加算的幀進 行加權(quán)，其中，加權(quán)系數(shù)選擇值WS是基于檢測到的運動向量來確定的。 此外，圖像組合單元21讀取在倉庫312a中存儲的在兩幀的圖像組合之后 獲得的信號，同時針對下一個基準(zhǔn)幀周期與垂直同步信號VDs相同步地， 使用除算電路將該信號恢復(fù)成在預(yù)定電平范圍內(nèi)的信號，并執(zhí)行諸如輪廓 校正之類的處理。之后，得到的信號通過顯示處理單元52被提供給圖像 輸出單元51或顯示單元53。
此外，使用作為感興趣的幀的幀"13"的圖像信號和作為基準(zhǔn)幀的幀 "12"的圖像信號執(zhí)行運動檢測。當(dāng)基于檢測到的運動向量MV的判定值 MU等于或大于閾值A(chǔ)Vt2時，包括幀"13"的基準(zhǔn)幀周期的所建議再現(xiàn) 速度SR被設(shè)置為1/4倍速"X1/4"的"Fr2"。由于針對1/4倍速不執(zhí)行 圖像信號DV3的圖像組合，所以針對下一個基準(zhǔn)幀周期與垂直同步信號 VDs相同步地讀取在倉庫312a中存儲的幀"13"的圖像信號，并使該圖 像信號經(jīng)歷諸如輪廓校正之類的相機信號處理。之后，得到的信號通過顯 示處理單元52而被提供給圖像輸出單元51或顯示單元53。
以這種方式，使用從記錄介質(zhì)62讀取的圖像信號執(zhí)行運動檢測，并 基于運動檢測結(jié)果確定所建議再現(xiàn)速度SR或加權(quán)系數(shù)選擇值WS。這 樣，即使再現(xiàn)控制信息RJ未記錄在記錄介質(zhì)62上，也可在運動量較小時 以四幀為單位對圖像信號DV3執(zhí)行圖像組合，并獲得基準(zhǔn)幀速率的圖像。 因此，要顯示或輸出的圖像可自動成為1倍速的再現(xiàn)圖像。此外，隨著運 動的增大，圖像信號DV3的幀速率降低，并且要經(jīng)歷圖像組合的幀數(shù)目也 減少。因此，要顯示或輸出的圖像可自動成為慢動作再現(xiàn)圖像。
此外，當(dāng)運動量較小時，通過給予相等的加權(quán)系數(shù)來執(zhí)行圖像組合。 當(dāng)運動量較大時，設(shè)置在要經(jīng)歷圖像組合的幀之間不同的加權(quán)系數(shù)以使得 在組合之后獲得的圖像中可以降低運動模糊。因此，在再現(xiàn)圖像中具有小運動量的部分是降低了噪聲的圖像，并且具有大運動量的部分是即使圖像 組合被執(zhí)行也降低了模糊的圖像。
因此，根據(jù)上述實施例，根據(jù)所捕捉圖像中對象的運動來確定所建議 再現(xiàn)速度。這樣，如果以所建議再現(xiàn)速度執(zhí)行再現(xiàn)，當(dāng)對象的運動量較大 時，在沒有使用戶搜索對象的具有大運動量的所捕捉圖像被記錄的位置并 執(zhí)行慢動作再現(xiàn)的情況下，自動降低再現(xiàn)速度，并且顯示慢動作再現(xiàn)圖 像。從而提高了用戶便利性。
此外，如果預(yù)先開始在高速圖像捕捉模式下的記錄操作以使得可以在 沒有錯失圖像捕捉機會的情況下獲得具有高時間分辨率的慢動作再現(xiàn)圖 像，則在通過降低在高速圖像捕捉模式下記錄的所捕捉圖像的再現(xiàn)速度來 獲得慢動作再現(xiàn)圖像的情況下，以慢動作顯示具有所需運動的圖像的等待 時間變得極其長。但是，根據(jù)本發(fā)明，當(dāng)運動量較小時，例如以1倍速來 執(zhí)行再現(xiàn)。當(dāng)運動量較大時，再現(xiàn)速度被自動降低，從而得到慢動作再現(xiàn) 圖像。這可以避免以慢動作顯示具有所需運動的圖像的等待時間過長。
此外，針對基準(zhǔn)幀周期的圖像信號被根據(jù)圖像運動來加權(quán)并經(jīng)歷加算 處理，以使得高速幀速率的圖像信號被轉(zhuǎn)換為基準(zhǔn)幀速率的圖像信號。因 此，可以獲得這樣的高質(zhì)量慢動作圖像，其中，提高了靜止部分或具有小 運動量的部分的信噪(SN)比，并且其中，在具有大運動量的部分中防止 了模糊的發(fā)生。
此外，使用運動檢測來確定運動向量，并根據(jù)該運動向量的運動量確 定權(quán)重或所建議再現(xiàn)速度。這樣，就可以容易且可靠地確定權(quán)重或所建議 再現(xiàn)速度。
此外，在上述圖像捕捉裝置中，在標(biāo)準(zhǔn)圖像捕捉模式下，圖像信號
DV1經(jīng)歷壓縮處理并被存儲在記錄介質(zhì)中。這樣，可以節(jié)省要記錄的所捕 捉圖像的信號量。此外，根據(jù)由對圖像信號DV1執(zhí)行壓縮處理的圖像壓縮 /擴展單元41獲得的運動向量來生成再現(xiàn)控制信息RJ。這樣，不必單獨提 供用于生成再現(xiàn)控制信息RJ的運動檢測單元。因此，可以實現(xiàn)圖像捕捉 裝置的配置簡化和成本降低。
注意，上述圖像捕捉裝置不限于用于執(zhí)行所捕捉圖像的記錄和再現(xiàn)的那種裝置。例如，可以從圖像輸出單元51相互關(guān)聯(lián)地輸出高速幀速率的 圖像信號和再現(xiàn)控制信息RJ。
此外，在上述圖像捕捉裝置中，闡述了這樣一種情況，其中，使用基 準(zhǔn)幀速率的圖像信號來執(zhí)行相機信號處理或壓縮處理。但是，在相機信號 處理單元或圖像壓縮/擴展單元具有高處理能力以使得可以使用高速幀速率 的圖像信號來執(zhí)行相機信號處理或壓縮處理的情況下，己經(jīng)經(jīng)歷相機信號 處理的高速幀速率的圖像信號或者該信號可以經(jīng)歷壓縮處理，可以記錄在
記錄介質(zhì)62上或者從圖像輸出單元51輸出。
此外，在上述實施例中，在圖像壓縮/擴展單元41執(zhí)行壓縮處理時生 成的運動向量被用作對對象的運動檢測的結(jié)果。但是，運動檢測可使用許 多方法來執(zhí)行，例如，確定關(guān)于畫面上的運動平均量的偏差幅度的方法。
圖21是圖示出本發(fā)明另一個實施例的框圖。圖像捕捉裝置95設(shè)有用 于監(jiān)控和外部輸出的兩個系統(tǒng)的相機信號處理單元20a和20b。除了關(guān)于 兩個系統(tǒng)的相機信號處理單元20a和20b的配置不同之外，圖像捕捉裝置 95被以與圖像捕捉裝置IO相似的方式來構(gòu)造。
圖像捕捉裝置95例如經(jīng)由家庭網(wǎng)絡(luò)96而連接到顯示設(shè)備97。在圖像 捕捉裝置95中，控制單元81在連接時通過圖像輸出單元51執(zhí)行數(shù)據(jù)通信 以檢測顯示設(shè)備97的輸入的可允許最大幀速率(幀頻)。注意，對最大 幀速率的檢測是通過以下方式來執(zhí)行的在連接時執(zhí)行的在圖像捕捉裝置 95與顯示設(shè)備97之間的數(shù)據(jù)通信處理中，從顯示設(shè)備97獲得有關(guān)該顯示 設(shè)備97的再現(xiàn)控制信息。
控制單元81切換從用于外部輸出的相機信號處理單元20b輸出的圖 像信號DV2b和DV4b的幀速率，以使得所獲得的該最大幀速率的圖像信 號可從圖像輸出單元51輸出。
艮口，在顯示設(shè)備97的最大幀速率為60[Q)s](最大幀頻為60[Hz])的 情況下，以與相機信號處理單元20相似的方式控制相機信號處理單元20b 的操作以輸出60飾s]的圖像信號DV2b和DV4b。
在顯示設(shè)備97的最大幀速率為120飾s]的情況下，對于以240飾s]從 記錄介質(zhì)62再現(xiàn)的圖像信號DV3和在高速圖像捕捉模式下獲得的圖像信
40號DV1，兩個連續(xù)幀的循環(huán)加算被執(zhí)行，并且所生成的120[fi)S]的圖像信 號DV2b和DV4b被輸出到顯示設(shè)備97。
此外，對于以120飾s]從記錄介質(zhì)62再現(xiàn)的圖像信號DV3，幀速率被 降低，并且圖像信號DV3被使用相機信號處理單元20b來處理并被輸出到 顯示設(shè)備97。此外，對于以60[fi)s]從記錄介質(zhì)62再現(xiàn)的圖像信號DV3或 者以標(biāo)準(zhǔn)圖像捕捉模式從圖像捕捉單元12輸出的圖像信號DV1，相同幀 的圖像信號被交替使用倉庫312a和312b來重復(fù)輸出以將圖像信號DV3上 變頻為120[fj)s]，并且得到的圖像信號被輸出到顯示設(shè)備97。
注意，取代執(zhí)行簡單地重復(fù)相同幀的處理，上變頻處理可以使用各種 技術(shù)來實現(xiàn)，例如，基于使用運動向量的運動補償來執(zhí)行幀插值的情況。 此外，取代上變頻，圖像捕捉單元12的操作可被切換為生成120[Q)s]的圖 像信號DV1。
在監(jiān)控側(cè)的相機信號處理單元20a接收從記錄介質(zhì)62再現(xiàn)的圖像信號 DV3，并以顯示處理單元52和顯示單元53所支持的幀速率60[^)s]來輸出 圖像信號DV3。
注意，取代提供兩個系統(tǒng)的相機信號處理單元自身，可以提供僅僅兩 個系統(tǒng)的圖像組合單元21。但是，在這種情況下，首先執(zhí)行Y處理等，最 后再執(zhí)行圖像組合處理。
以這種方式，在以至少高于外部設(shè)備所支持的幀速率的幀速率從記錄 介質(zhì)再現(xiàn)在高速圖像捕捉模式下記錄的所捕捉圖像的情況下，取決于該外 部設(shè)備，幀速率被降低到該外部設(shè)備可支持的幀速率，并且所捕捉圖像被 輸出。因此，可以以更高的圖像質(zhì)量輸出圖像捕捉結(jié)果。
順帶提及，在經(jīng)由諸如家庭網(wǎng)絡(luò)之類的網(wǎng)絡(luò)傳輸圖像信號的情況下， 經(jīng)由該網(wǎng)絡(luò)從另一設(shè)備傳輸信號的情況也是可預(yù)測的。因此，在網(wǎng)絡(luò)的傳 輸速度較低的情況下，存在無法實時傳輸圖像信號的情況。因此，在將從 記錄介質(zhì)62讀取的圖像信號輸出到顯示設(shè)備97的情況下，動態(tài)地切換要 輸出到顯示設(shè)備97的圖像信號的幀速率以便與所建議再現(xiàn)速度兼容，以 防止圖像信號DV4b被以不必要高的幀速率輸出到顯示設(shè)備97。注意，除 了要輸出到顯示設(shè)備97的圖像信號的幀速率不同之外，本實施例被以與上述圖像捕捉裝置io相同的方式來配置。
在高速圖像捕捉模式下，控制單元81使用由圖像壓縮/擴展單元41檢 測到的運動向量來確定所建議再現(xiàn)速度。此外，在該確定的所建議再現(xiàn)速
度為1倍速的情況下，使用相機信號處理單元20b使幀速率為240[fi)s]的 圖像信號DV1的四個連續(xù)幀順序經(jīng)歷圖像組合，以生成幀速率為60飾s] 的圖像信號DV2b。該圖像信號DV2b被輸出到顯示設(shè)備97。
在所建議再現(xiàn)速度為1/2倍速的情況下，使用相機信號處理單元20b 使幀速率為240[Q)s]的圖像信號DV1的兩個連續(xù)幀順序經(jīng)歷圖像組合以生 成幀速率為120飾s]的圖像信號DV2b。該圖像信號DV4b被輸出到顯示設(shè) 備97。此外，在所建議再現(xiàn)速度為1/4倍速的情況下，相機信號處理單元 20b不降低幀速率為240飾s]的圖像信號DV1的幀速率，并且240飾s]的圖 像信號DV2b被輸出到顯示設(shè)備97。
在高速圖像捕捉模式下記錄在記錄介質(zhì)62上的所捕捉圖像的再現(xiàn)期 間，在用戶指示以1倍速再現(xiàn)的情況下，從記錄介質(zhì)62的讀取被執(zhí)行以 使得圖像信號DV3的幀速率可為240飾s]。此外，相機信號處理單元20b 根據(jù)所建議再現(xiàn)速度來轉(zhuǎn)換該所再現(xiàn)圖像信號DV3的幀速率。因此，在這 種情況下，在所建議再現(xiàn)速度為1倍速、1/2倍速和1/4倍速的情況下，相 機信號處理單元20b也分別生成幀速率為60飾s]、 120飾s]和240飾s]的圖 像信號DV4b，并將圖像信號DV4b輸出到顯示設(shè)備97。
在高速圖像捕捉模式下記錄在記錄介質(zhì)62上的圖像信號的再現(xiàn)期 間，在用戶指示以1/2倍速再現(xiàn)的情況下，從記錄介質(zhì)62的讀取被執(zhí)行以 使得圖像信號DV3的幀速率可為120[Qds]。此外，在所建議再現(xiàn)速度為1 倍速的情況下，圖像信號DV3的幀速率被使用相機信號處理單元20b來轉(zhuǎn) 換為60[*S]，并且得到的圖像信號DV3被輸出到顯示設(shè)備97。作為比 較，在所建議再現(xiàn)速度為1/2倍速和1/4倍速的情況下，幀速率為120[fJDS] 的圖像信號DV4b在幀速率未降低的情況下被輸出到顯示設(shè)備97。
在高速圖像捕捉模式下記錄在記錄介質(zhì)62上的圖像信號的再現(xiàn)期 間，在用戶指示以1/4倍速再現(xiàn)的情況下，從記錄介質(zhì)62的讀取被執(zhí)行以 使得圖像信號DV3的幀速率可為60飾s]。此外，60飾s]的圖像信號DV4b在降低了幀速率的情況下被輸出到顯示設(shè)備97。
在高時間分辨率慢動作圖像捕捉模式下記錄在記錄介質(zhì)62上的圖像
信號的再現(xiàn)期間，在用戶指示以所建議再現(xiàn)速度再現(xiàn)的情況下，由相機信
號處理單元20b執(zhí)行的圖像組合處理被中斷，并且從記錄介質(zhì)62再現(xiàn)的 幀速率的圖像信號DV4b被輸出到顯示設(shè)備97。
注意，在標(biāo)準(zhǔn)圖像捕捉模式下，也是在標(biāo)準(zhǔn)圖像捕捉模式下記錄在記 錄介質(zhì)62上的所捕捉圖像的再現(xiàn)期間，類似地，所建議再現(xiàn)速度可被檢 測，并且?guī)俾士筛鶕?jù)該所建議再現(xiàn)速度而被來動態(tài)改變。此外，在此標(biāo) 準(zhǔn)圖像捕捉模式下在幀速率之間的動態(tài)切換可通過將60[fps]的圖像信號上 變頻來執(zhí)行，或者可通過切換圖像傳感器121自身的操作頻率來執(zhí)行。
以這種方式，根據(jù)對象的運動來動態(tài)切換要輸出到外部設(shè)備的圖像信 號的幀速率。這可以充分地降低要發(fā)送給網(wǎng)絡(luò)的圖像信號的信號量，同時 確保實踐中足夠的圖像質(zhì)量。因此，即使在與另一設(shè)備共享網(wǎng)絡(luò)的情況 下，也可實時地傳輸圖像信號。
此外，可以不必根據(jù)所建議再現(xiàn)速度來動態(tài)改變要輸出到外部設(shè)備的 圖像信號的幀速率。可替代地，可以根據(jù)作為圖像信號的傳輸路徑的網(wǎng)絡(luò) 和/或根據(jù)外部設(shè)備來執(zhí)行動態(tài)切換，以便確保圖像信號的實時傳輸。
注意，可以在例如逐分組地向網(wǎng)絡(luò)發(fā)送圖像信號時，通過基于在請求 網(wǎng)絡(luò)發(fā)送分組之后獲得確認(rèn)的等待時間確定網(wǎng)絡(luò)中所謂的擁塞度并且對于 更高的擁塞將幀速率降低更多，而執(zhí)行根據(jù)網(wǎng)絡(luò)在幀速率之間的切換。
此外，可以在例如逐分組地向外部設(shè)備發(fā)送圖像信號時，通過對在請 求外部設(shè)備發(fā)送圖像信號之后獲得發(fā)送確認(rèn)的等待時間進行計數(shù)并且對于 更長的等待時間更大地降低幀速率，而執(zhí)行根據(jù)外部設(shè)備在幀速率之間的 切換。
注意，在上述實施例中，已經(jīng)描述了使用循環(huán)加算來降低圖像信號的 幀速率的情況。但是，本發(fā)明不限于此，可通過簡單地對多個幀的相應(yīng)圖 像信號執(zhí)行加算處理來降低幀速率。另外，在可以確保實踐中足夠的圖像 質(zhì)量的情況下，可以使用幀抽取來降低幀速率。
此外，在上述實施例中，已經(jīng)描述了這樣一種情況，其中，基準(zhǔn)幀速率被設(shè)置為60[Q)s]，并且其中，在高速圖像捕捉模式下，幀速率為基準(zhǔn)幀 速率四倍的240[fps]的圖像信號DV1被生成。但是，本發(fā)明不限于此，而 可被廣泛應(yīng)用于以各種幀速率執(zhí)行圖像捕捉的情況，例如，生成幀速率為 基準(zhǔn)幀速率三倍的圖像信號DV1的情況。
此外，在上述實施例中，已經(jīng)描述了這樣一種情況，其中，以1倍 速、1/2倍速和1/4倍速來再現(xiàn)通過在高速圖像捕捉模式下執(zhí)行圖像捕捉而 獲得的圖像。但是，本發(fā)明不限于此，而可被廣泛地應(yīng)用于例如以1/3倍 速再現(xiàn)圖像的情況以及其它情況。
另外，在上述實施例中，已經(jīng)描述了生成逐行掃描類型的圖像信號的 情況。但是，本發(fā)明不限于此，而可被廣泛地應(yīng)用于生成隔行掃描類型的 圖像信號的情況。
工業(yè)應(yīng)用性
本發(fā)明例如適合用于以高于視頻信號的常規(guī)圖像速率的圖像速率來執(zhí) 行圖像捕捉以生成圖像信號并使用該圖像信號來獲得慢動作再現(xiàn)圖像。
權(quán)利要求
1.一種圖像再現(xiàn)裝置，包括信號再現(xiàn)單元，該信號再現(xiàn)單元對所捕捉圖像的圖像信號進行再現(xiàn)，所述所捕捉圖像是通過以比預(yù)設(shè)圖像速率高的圖像速率執(zhí)行圖像捕捉而被生成的；再現(xiàn)控制信息生成單元，該再現(xiàn)控制信息生成單元使用運動檢測結(jié)果來生成再現(xiàn)控制信息，所述運動檢測結(jié)果是通過使用從所述信號再現(xiàn)單元輸出的所述圖像信號執(zhí)行運動檢測而獲得的；信號處理單元，該信號處理單元將從所述信號再現(xiàn)單元輸出的所述圖像信號的圖像速率轉(zhuǎn)換為所述預(yù)設(shè)圖像速率；以及控制單元，該控制單元基于所述再現(xiàn)控制信息來控制從所述信號再現(xiàn)單元提供給所述信號處理單元的所述圖像信號的圖像速率，以隨著由所述運動檢測結(jié)果指示的運動的增大而降低所述所捕捉圖像的再現(xiàn)速度。
2. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其中，所述再現(xiàn)控制信息 生成單元根據(jù)通過執(zhí)行所述運動檢測而獲得的運動向量的運動量來確定所 建議再現(xiàn)速度，并將該所建議再現(xiàn)速度設(shè)置為所述再現(xiàn)控制信息。
3. 根據(jù)權(quán)利要求2所述的圖像再現(xiàn)裝置，其中，所述再現(xiàn)控制信息 生成單元基于所述所捕捉圖像的中心部分區(qū)域和該所捕捉圖像的其余區(qū)域 之間的運動量之差與預(yù)設(shè)閾值之間的比較結(jié)果，來確定所述所建議再現(xiàn)速 度。
4. 根據(jù)權(quán)利要求2所述的圖像再現(xiàn)裝置，還包括擴展處理單元，該 擴展處理單元在所述圖像信號是已經(jīng)使用通過執(zhí)行運動檢測獲得的運動向 量而經(jīng)歷了壓縮處理的圖像信號的情況下，對該圖像信號執(zhí)行擴展處理，其中，所述再現(xiàn)控制信息生成單元使用在所述擴展處理中使用的運動 向量來生成所述再現(xiàn)控制信息。
5. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，還包括信號記錄單元，該 信號記錄單元將以比所述預(yù)設(shè)圖像速率高的圖像速率執(zhí)行圖像捕捉而生成 的所捕捉圖像的圖像信號記錄在記錄介質(zhì)上，其中，所述再現(xiàn)控制信息生成單元使用在所述信號記錄單元上記錄的 圖像信號來生成所述再現(xiàn)控制信息，其中，所述信號記錄單元將由所述再現(xiàn)控制信息生成單元生成的再現(xiàn) 控制信息與所述圖像信號相關(guān)聯(lián)地記錄在所述記錄介質(zhì)上，其中，所述信號再現(xiàn)單元再現(xiàn)所述圖像信號和所述再現(xiàn)控制信息，并且其中，所述控制單元基于由所述信號再現(xiàn)單元再現(xiàn)的所述再現(xiàn)控制信 息，控制從所述信號再現(xiàn)單元輸出的圖像信號的圖像速率。
6. —種圖像再現(xiàn)方法，包括信號再現(xiàn)步驟，對通過以比預(yù)設(shè)圖像速率高的圖像速率執(zhí)行圖像捕捉 而生成的所捕捉圖像的圖像信號進行再現(xiàn)；再現(xiàn)控制信息生成步驟，使用運動檢測結(jié)果來生成再現(xiàn)控制信息，所 述運動檢測結(jié)果是通過使用要在所述信號再現(xiàn)步驟再現(xiàn)的圖像信號執(zhí)行運 動檢測而獲得的；信號處理步驟，將在所述信號再現(xiàn)步驟再現(xiàn)的所述圖像信號的圖像速 率轉(zhuǎn)換為所述預(yù)設(shè)圖像速率；以及再現(xiàn)控制步驟，基于所述再現(xiàn)控制信息來控制在所述信號處理步驟中 使用的、在所述信號再現(xiàn)步驟中再現(xiàn)的所述圖像信號的圖像速率，從而隨 著在運動檢測中檢測到的運動的增大而降低所述所捕捉圖像的再現(xiàn)速度。
7. —種圖像捕捉裝置，包括圖像捕捉單元，該圖像捕捉單元生成所捕捉圖像的圖像信號，該所捕 捉圖像是通過以比預(yù)設(shè)圖像速率高的圖像速率執(zhí)行圖像捕捉而生成的；再現(xiàn)控制信息生成單元，該再現(xiàn)控制信息生成單元使用運動檢測結(jié)果 來生成再現(xiàn)控制信息，該運動檢測結(jié)果是通過使用由所述圖像捕捉單元生 成的所述圖像信號執(zhí)行運動檢測而獲得的，所述再現(xiàn)控制信息用于在再現(xiàn) 所述圖像信號期間隨著在運動檢測中檢測到的運動的增大而降低所述所捕 捉圖像的再現(xiàn)速度；以及輸出單元，該輸出單元與所述圖像信號相對應(yīng)地輸出所述再現(xiàn)控制信息。
8. 根據(jù)權(quán)利要求7所述的圖像捕捉裝置，其中，所述再現(xiàn)控制信息 生成單元根據(jù)通過執(zhí)行所述運動檢測而獲得的運動向量的運動量來確定所 建議再現(xiàn)速度，并將該所建議再現(xiàn)速度設(shè)置為所述再現(xiàn)控制信息。
9. 根據(jù)權(quán)利要求8所述的圖像捕捉裝置，其中，所述再現(xiàn)控制信息 生成單元基于所述所捕捉圖像的中心部分區(qū)域和該所捕捉圖像的其余區(qū)域 之間的運動量之差與預(yù)設(shè)閾值之間的比較結(jié)果，來確定所述所建議再現(xiàn)速 度。
10. 根據(jù)權(quán)利要求7所述的圖像捕捉裝置，還包括信號處理單元，該 信號處理單元將由所述圖像捕捉單元生成的所述圖像信號轉(zhuǎn)換為所述預(yù)設(shè) 圖像速率，其中，所述再現(xiàn)控制信息生成單元使用由所述信號處理單元轉(zhuǎn)換為所 述預(yù)設(shè)圖像速率的圖像信號來執(zhí)行運動檢測。
11. 根據(jù)權(quán)利要求7所述的圖像捕捉裝置，還包括圖像壓縮單元，該 圖像壓縮單元使用運動檢測結(jié)果來壓縮所述圖像信號的信號量，該運動檢 測結(jié)果是通過使用所述圖像信號執(zhí)行運動檢測而獲得的，其中，所述再現(xiàn)控制信息生成單元使用由所述圖像壓縮單元獲得的運 動檢測結(jié)果來生成所述再現(xiàn)控制信息。
12. —種用于圖像捕捉裝置的控制方法，包括圖像捕捉步驟，生成所捕捉圖像的圖像信號，該所捕捉圖像是通過以 比預(yù)設(shè)圖像速率高的圖像速率執(zhí)行圖像捕捉而生成的；再現(xiàn)控制信息生成步驟，使用運動檢測結(jié)果來生成再現(xiàn)控制信息，該 運動檢測結(jié)果是通過使用在所述圖像捕捉步驟中生成的所述圖像信號執(zhí)行 運動檢測而獲得的，所述再現(xiàn)控制信息用于在再現(xiàn)所述圖像信號期間隨著 在運動檢測中檢測到的運動的增大而降低所述所捕捉圖像的再現(xiàn)速度；以 及輸出步驟，與所述圖像信號相對應(yīng)地輸出所述再現(xiàn)控制信息。
全文摘要
本發(fā)明涉及圖像再現(xiàn)裝置、圖像再現(xiàn)方法、圖像捕捉裝置及其控制方法。在本發(fā)明中，為了再現(xiàn)以比預(yù)設(shè)圖像速率高的圖像速率執(zhí)行圖像捕捉而生成的所捕捉圖像的圖像信號，將要再現(xiàn)的圖像信號提供給將圖像信號轉(zhuǎn)換為預(yù)設(shè)圖像速率的信號處理單元，并且基于使用所捕捉圖像的運動檢測結(jié)果生成的再現(xiàn)控制信息來控制要再現(xiàn)的該圖像信號的圖像速率，以根據(jù)所檢測到的運動的增大而降低所捕捉圖像的再現(xiàn)速度。從而輸出慢動作再現(xiàn)圖像的圖像信號。
文檔編號H04N5/765GK101611624SQ20088000389
公開日2009年12月23日 申請日期2008年1月31日 優(yōu)先權(quán)日2007年2月1日
發(fā)明者宮腰大輔 申請人:索尼株式會社