信號處理方法和信號處理電路的制作方法

文檔序號：7676022閱讀：216來源：國知局

專利名稱：信號處理方法和信號處理電路的制作方法
技術領域：
本發(fā)明涉及一種信號處理方法和信號處理電路，用于獲得具有高分辨率的信號，同時控制利用空間像素移位方法的信號處理中所產生的問題，所述問題的示例是在固體成像設備中拍攝具有高色度的對象時所產生的莫爾效應。
背景技術：
使用空間像素移位方法的三板型固體成像設備通常包括用于G (綠色)、B (藍色)、R (紅色)信號的固體成像元件(CCD等)，其中按照如下方式放置CCD:例如，用于R和B的CCD相對于用于G的CCD在水
平方向上移位半個像素。
根據這種放置方式，可以解釋為與不采用空間像素移位方法的情況相比，空間像素移位方法中以雙倍采樣頻率對對象進行成像。觀察從用于
各個顏色的CCD所獲得的信號，根據采樣定理，所包含的頻率為采樣頻率一半(換句話說，大于或等于奈奎斯特頻率的頻率)的任何高頻分量都是偽信號，稱作重疊分量。這種放置方式使R和B信號的相位相對于G 信號移位180度，并使所包括的重疊分量的相位以類似的方式移位以180度。
作為空間像素移位方法中的高頻分量替換處理，在各個信號中，以各個顏色所共有的高頻分量(其中減小了重疊分量)替換包括每個顏色的重疊分量在內的高頻分量。更具體地，與亮度信號相似，根據各個顏色信號產生各個顏色的公共信號，并將公共信號的高頻分量用作各個顏色所共有的高頻分量。例如，以R信號表示具有R和B的相位的信號，且對R信號和G信號應用公式((G + R) /2)，來產生公共信號。因此，在G信號中所包括的重疊分量與在R和B信號中所包括的重疊分量反相相加，從而抵消了各個重疊分量。將這樣獲得的公共信號的高頻分量用于高頻分量替換處理，在所述高頻分量替換處理中，將公共信號的高頻分量與每個顏色的低頻分量相加。結果，所獲得的每一個信號都具有減小了其中的重疊分量的高頻分量。
然而，在對象具有高色度的情況下，例如，當拍攝接近綠色的對象(包
括其頻率大于或等于奈奎斯特頻率的高頻分量)時，由用于R和B的CCD 所獲得的信號與由用于G的CCD所獲得的信號相比非常小。所以，使用由用于R和B的CCD所獲得的信號不能抵消由于用于G的CCD中的采樣處理的誤操作所產生的高頻分量的重疊分量。因此，公共高頻分量仍然包括重疊分量，導致莫爾效應的產生。
為了解決這種上述問題，專利文件1所公開的信號處理電路根據來自用于G和R的CCD的、用于產生公共高頻分量的信號的電平，在色度較高時，減小要與每個顏色的低頻分量相加的公共高頻分量的比率，來控制莫爾效應的產生。
專利文件l:日本專利申請未審公開2004-3251
發(fā)明內容
本發(fā)明所要解決的問題
然而，根據控制莫爾效應的傳統(tǒng)方法，當對象的色度較高時，減小信號中包括的高頻分量。換句話說，對象的色度越高，高頻分量中的分辨率就不可避免地犧牲得越多。
此外，由于公共高頻分量與每個顏色的低頻分量相加，所以與包括高頻分量在內的部分相近的部分更接近于無彩色。
解決問題的手段
為了解決上述問題，本發(fā)明主要的特征在于根據采樣處理前各個信號的幅度形狀的局部相似性來產生各個信號所共有的公共高頻分量，已對所述公共高頻分量進行了調整以抵消重疊分量，調整所產生的公共高頻分量的比率，以與原始信號的平衡相一致，并將調整后的高頻分量與每個信號的低頻分量相加。本發(fā)明的效果
根據本發(fā)明，可以控制莫爾效應，可以控制高頻分量向無彩色的轉變，而且即使在對象具有高色度的情況下，也可以提供具有高分辨率的信號。此外，在對象具有低色度的情況下，也可以沒有任何問題地提供具有高分辨率的信號，因為在這種情況下，保持了高頻分量替換處理(其中使用傳統(tǒng)的空間像素移位方法)的效果。
此外，本發(fā)明涉及一種簡單的信號處理方法，不必根據圖像特征等以復雜的方式選擇恰當?shù)奶幚?。因此，可以提供構造簡單但具有滿意效果的信號處理電路。

圖1是示出了根據本發(fā)明優(yōu)選實施例的信號處理電路的框圖。
圖2示出了根據優(yōu)選實施例的信號處理電路中的公共高頻分量計算器的構造。
圖3示出了根據優(yōu)選實施例的信號處理電路中的調整值設置器的構造。
圖4示出了對象的示例。圖5示出了對象的示例。
圖6示出了根據優(yōu)選實施例的信號處理電路中的信號波形和采樣位置。
圖7示出了根據優(yōu)選實施例的信號處理電路中的信號波形和采樣位置。
圖8示出了根據優(yōu)選實施例的信號處理電路中的信號波形。
圖9示出了根據優(yōu)選實施例的信號處理電路中的信號波形和采樣位置。
圖10示出了根據優(yōu)選實施例的信號處理電路中的信號波形和采樣位置。
圖11示出了根據優(yōu)選實施例的信號處理電路中的信號波形和采樣位置。圖12示出了根據優(yōu)選實施例的信號處理電路中的信號波形和采樣位圖13示出了根據優(yōu)選實施例的信號處理電路中的信號波形。
t考符號描述
謂
101
102
103 110
115
116
117 120
125
126
131
132
133
200
201
202
203
300
301
302
303 401，
高頻分量產生器 G電平計算器 B電平計算器 R電平計算器
501
組元設置器
公共信號調整值計算器每個顏色調整值計算器公共高頻分量計算器公共信號計算器公共高頻分量分離器 G高頻分量調整器 B高頻分量調整器 R高頻分量調整器低頻分量分離器 G低頻分量分離器 B低頻分量分離器 R低頻分量分離器高頻分量加法器 G高頻分量加法器 B高頻分量加法器 R高頻分量加法器對象
具體實施方式
以下，將參考附圖來描述本發(fā)明的優(yōu)選實施例。優(yōu)選實施例
在本發(fā)明的優(yōu)選實施例中，在用于處理視頻信號的信號處理電路中實現(xiàn)本發(fā)明。圖1是示出了根據本發(fā)明優(yōu)選實施例的信號處理電路的框圖。
圖2示出了作為根據優(yōu)選實施例的信號處理電路一部分的公共高頻分量計算器的構造。圖3示出了作為根據優(yōu)選實施例的信號處理電路一部分的調整值設置器的構造。圖4和5示出了對象的示例。圖6-13示出了每個顏色的信號波形和采樣位置。
按照如下方式獲得信號分別被稱為顏色信號G、 B和R:在用于獲得視頻信息的G (綠色)、B (藍色)和R (紅色)CCD中，空間像素移位方法，將用于R和B的CCD相對于用于G的CCD在水平方向上移位半個像素。
根據本優(yōu)選實施例的信號處理設備包括低頻分量分離器200、高頻分量產生器100和高頻分量加法器300。低頻分量分離器200從各個顏色信號中分離低頻分量LG、LB和LR。高頻分量產生器100產生高頻分量HG、 HB和HR，其中各個信號的重疊分量從所述高頻分量中移除。高頻分量加法器300將所產生的各個顏色的高頻分量與低頻分量相加，從而產生各個顏色信號outG、 outB和outR,在所述顏色信號中高頻分量已被替換。在圖像信號的情況下，具有大于或等于閾值的頻率的分量稱作高頻分量，而具有小于閾值的頻率的分量稱作低頻分量。閾值的示例是略微低于奈奎斯特頻率的頻率。然而，所述閾值被有限地用于圖像信號。在諸如音頻信號之類的任何其他信號中，設置專用的閾值。
高頻分量產生器100包括用于各個顏色的電平計算器101 、 102和103 、調整值設置器110、公共高頻分量計算器120以及用于各個顏色的高頻分量調整器131、 132和133。用于各個顏色的電平計算器101、 102和103 計算各個顏色中的小區(qū)域的DC值。從中提取信號R、 G和B的高頻分量的空間位置被稱作目標位置，將包括目標位置及其鄰區(qū)在內的空間區(qū)域稱作小區(qū)域。各個顏色的小區(qū)域的DC值被稱作DC一G、 DC一B禾t1DC一R。
調整值設置器110設置用于調整各個顏色的信號的第一調整值—— 增益G1、 B1和R1以及第二調整值——增益G2、 B2禾BR2。后文中，第一調整值統(tǒng)稱為增益X1，而第二調整值統(tǒng)稱為增益X2。公共高頻分量計算器120計算各個顏色所共有的公共高頻分量HY。高頻分量調整器131、 132和133根據高頻分量HY，產生各個顏色的高頻分量HG、 HB和HR。公共高頻分量計算器120包括公共信號計算器125和公共高頻分量分離器126，如圖2所示。公共信號計算器125根據各個顏色的各個顏色信號G、 B和R和第一調整值增益XI來計算公共信號Y，所述公共信號Y 用作各個顏色的參考值。公共高頻分量分離器126從公共信號Y中分離公共高頻分量HY。
調整值設置器110包括組元設置器115、公共信號調整值計算器116 和每個顏色調整值計算器117，如圖3所示。組元設置器115設置根據各個顏色的DC值DC_G、 DC—B和DC—R計算第一和第二調整值增益XI 和增益X2時所使用的信號。公共信號調整值計算器116計算第一調整值增益X1。每個顏色調整值計算器117計算第二調整值增益X2。第二調整值增益X2是表示公共高頻分量HY與每個顏色相加時的相加比率的調整值。
以下描述了這樣構造的、根據本優(yōu)選實施例的信號處理電路的操作。以下給出的描述基于在拍攝圖5中所示的對象501時所獲得的信號的假設，所述對象501具有高色度，且包括由黑色和綠色構成的色條圖案，所述色條圖案包括頻率大于或等于奈奎斯特頻率的高頻分量。所述奈奎斯特頻率表示在CCD沒有被移位的情況下的奈奎斯特頻率。
如圖9所示，在采樣前的信號G、 B和R中，信號G的采樣點分別標以黑色的三角，信號R和B的采樣點分別標以黑色的圓點。在使用空間像素移位方法的三板型固體成像設備中，在其相位彼此移位180度之后，采樣各個信號G、 B和R。所以，采樣后信號G以及信號R和B中的每一個都包括重疊分量的偽信號，如圖10所示。
將信號G、 B和R提供給用于各個顏色的電平計算器101、 102和103 以及低頻分量分離器200的用于各個顏色的低頻分量分離器201、 202和 203。用于各個顏色的低頻分量分離器201、 202和203從所提供的信號G、 B和R中提取低頻分量LG、 LB和LR，并將所提取的分量提供給高頻分量加法器300的用于各個顏色的高頻分量加法器301、 302和303。用于各個顏色的電平計算器101、 102和103計算所提供的信號R、 G和B的信號電平。計算DC值DC—G、 DC—B和DC—R，作為信號電平。換句話說，計算信號R、 G和B的小區(qū)域中的DC值，作為DC值DC—G、 DC—B和 DC一R，如圖11所示。用于各個顏色的電平計算器101、 102和103將計算后的DC值DC—G、 DC—B和DC—R提供給調整值設置器110。
調整值設置器110的組元設置器115執(zhí)行以下處理。在通過采用了空間像素移位方法的三板型固體成像設備獲得視頻信號的情況下，信號G的相位通常與其他信號(R和B)的相位相差180度。所以，具有此特征的三板型固體成像設備中的組元設置器115首先選擇信號G的DC值，作為設置第一和第二調整值時所使用的主調整DC值。然后，組元設置器115 選擇在為其他信號的DC值DC—R和DC—B (其相位相對于信號G的相位移位180度)設置調整值時所使用的副調整DC值。例如，選擇其中噪聲較小的DC值作為所述副調整DC值。此外，組元設置器115將副調整DC 值(在這種情況下為DC值DC—R)的電平與主調整DC值(在這種情況下為DC值DC—G)的電平作比較，并設置電平較大的DC值作為大電平 DC值Large,并設置電平較小的DC值作為小電平DC值Small。
在所述選擇和設置處理之后，組元設置器115將大電平DC值Large、小電平DC值Small和變量Sel提供給公共信號調整值計算器116，并將大電平DC值Large和小電平DC值Small提供給每個顏色調整值計算器117。此時，組元設置器115在待輸出的變量Sel中提供表示所選信號(在這種情況下為R)的標記，作為副調整DC值的來源，以及提供表示大電平DC 值Large的信號(在這種情況下為信號G)。當獲得了包括大綠色區(qū)域且具有高色度的對象501 (見圖5)的圖像時，大電平DC值Large被用作主調整DC值(-DC值DC—G)，而小電平DC值Small被用作副調整DC值bDC 值DC一R)。所以，在變量Sd中提供表示選擇信號R作為副調整DC值的來源的標記和表示選擇G信號作為大電平DC值Large的來源的標記。
公共信號調整值計算器116計算信號R、 G和B的第一調整值增益 XI。第一調整值增益X1是用于信號計算中的信號電平調整的調整值，類似于低色度時公共信號計算器125計算公共信號Y的情況。通過這樣設置的第一調整值增益XI來調整信號R、 G和B的信號電平，以便接近無彩色(每個信號的平衡狀態(tài))。第一調整值增益X1是基于采樣前信號R、 G 和B的幅度形狀中的局部相似性來設置的。更具體地，如下設置第一調整值增益X1。
公共信號調整值計算器116讀取從組元設置器115提供的變量Sel中的標記，并由此確認作為主調整DC值、副調整DC值、大電平DC值Large 和小電平DC值Small的來源的信號。然后，公共信號調整值計算器116 將作為大電平DC值Large的信號的第一調整值增益XI設置為"1"，并將作為小電平DC值Small的信號的DC值的第一調整值增益XI設置為 Large/Sma11。此外，公共信號調整值計算器116將既不用于大電平DC值 Large又不用于小電平DC值Small的信號的DC值的第一調整值增益XI 設置為"0"。當獲得了包括大綠色區(qū)域且具有高色度的對象501的圖像時，表示主調整DC值的信號G的第一調整值增益Gl設置為"1 "，表示副調整DC值的信號R的第一調整值增益Rl設置為Large/Small,而剩余信號 B的第一調整值增益Bl設置為"0"。公共信號調整值計算器116將計算后的第一調整值增益X1提供給公共高頻分量計算器120。
將第一調整值增益XI和信號G、 B和R提供給公共高頻分量計算器 120的公共信號計算器125。使用所提供的這些值和信號，公共信號計算器125計算用作各個顏色信號的共有值(參考值)的公共信號Y。當獲得了包括大綠色區(qū)域且具有高色度的對象501 (見圖5)的圖像時，采樣前信號G (大電平DC值Large的來源)和信號R (小電平DC值Small的來源)的幅度彼此局部相似，且在小區(qū)域中，信號R的幅度小于信號G的幅度。
所以，如圖12所示，R信號與第一調整值增益Rl (= "Large/Small") 相乘，G信號與第一調整值增益G1 (="1")相乘，而B信號與第一調整值增益B1 (="0")相乘，以便產生公共信號Y，所產生的公共信號Y具有與其中重疊分量被抵消的低色度的情況下相同的狀態(tài)。如前所述，用于提取信號R、 G和B的高頻分量的空間位置稱作目標位置，且包括目標位置及其鄰區(qū)在內的空間區(qū)域稱作小區(qū)域。公共信號計算器125將所產生的公共信號Y提供給公共高頻分量分離器126。公共高頻分量分離器126使用濾波器等來提取公共信號Y的高頻分量，即公共高頻分量HY。將DC值DC—G、 DC—B和DC—R從用于各個顏色的電平計算器101 、 102和103提供給調整值設置器110的每個顏色調整值計算器117。此外，將大電平DC值Large和小電平DC值Small從用于各個顏色的電平計算器101、 102和103經由組元設置器115提供給每個顏色調整值計算器117。每個顏色調整值計算器117根據所提供的這些值來設置第二調整值增益 X2。
第二調整值增益X2是施加與第一調整值增益XI相反的作用的調整值，并且設置用于產生調整后的高頻分量HG、 HB和HR。更具體地，第二調整值增益X2將其電平已經基于第一調整值增益XI增大后的信號的高頻分量的比率再次返回到與相關顏色的原始顏色平衡(各個顏色分量的平衡)相對應的比率。
更具體地，當獲得了包括大綠色區(qū)域且具有高色度的對象501的圖像時，每個顏色調整值計算器117基于以下計算公式來計算第二調整值增益 X2。
土曾益G2 = (DC—G/Large) = 1
增益B2 = (DC—B/Large)
增益R2 = (DC_R/Large) = (Small/Large)
當產生公共高頻分量HY時，公共高頻分量計算器120使用信號R代替信號B (第一調整值增益B1: "0")。然而，在第二調整值增益X2的計算中，假設在信號B中相似地產生公共高頻分量(其中增大第一調整值增益B1的信號電平以便抵消重疊分量)，每個顏色調整值計算器117以與計算第二調整值增益R2相似的方式計算第二調整值增益B2。
公共高頻分量計算器120的公共高頻分量分離器126將所提取的公共高頻分量HY提供給用于各個顏色的高頻分量調整器131、 132和133。調整值設置器110的每個顏色調整值計算器117將所設置的第二調整值增益 X2提供給用于各個顏色的高頻分量調整器131、 132和133。
用于各個顏色的高頻分量調整器131、 132和133將所提供的公共高頻分量HY與第二調整值增益X2相乘，從而計算調整后的高頻分量HG、 HB和HR。即使在獲得了包括大綠色區(qū)域且具有高色度的對象501的圖像時，也將公共高頻分量HY乘以每個顏色的第二調整值增益X2;由此，可以獲得各個顏色的調整后高頻分量HG、 HB和HR (其中保持了原始顏色平衡)。用于各個顏色的高頻分量調整器131、 132和133將計算出的調整后高頻分量HG、 HB和HR提供給高頻分量加法器300的、與相關顏色相對應的、用于各個顏色的高頻分量加法器301、 302、 303。用于各個顏色的高頻分量加法器301、 302和303將所提供的調整后高頻分量HG、 HB和HR與低頻分量LG、 LB和LR相加，從而產生輸出信號outG、 outB 和outR，將其輸出到信號處理電路外部。
如前所述，在根據本優(yōu)選實施例的信號處理電路中，執(zhí)行以下處理
利用基于第一調整值增益X1進行了調整的各個顏色信號，產生其中重疊分量被抵消的公共信號Y;
基于第二調整值增益X2來調整所產生的公共信號Y的公共高頻分量HY，以具有原始顏色平衡；以及
將由前述調整而獲得的高頻分量HG、 HB和HR與各個信號G、 B和R的低頻分量LG、 LB和LR相加。
因而，即使當獲得了包括大綠色區(qū)域且具有高色度的對象501的圖像時，根據本優(yōu)選實施例的信號處理電路也可以獲得可控制其中重疊分量的信號，且高頻分量在保持高分辨率的同時也不會轉變?yōu)闊o彩色，如圖13 所示。
此外，根據本優(yōu)選實施例的信號處理電路可以沒有任何問題地處理在拍攝圖4中所示的對象401時所獲得的信號，所述對象401包括由黑色和白色構成的色條圖案，且具有低色度，所述色條圖案包括頻率大于或等于奈奎斯特頻率的高頻分量。如前所述，所述奈奎斯特頻率表示在CCD沒有被移位的情況下的奈奎斯特頻率。
在對圖4中所示的對象401成像時獲得的信號還以與前述信號相似的方式進行表示，如圖6所示。由此獲得的采樣后信號G、 R和B的每一個都包括重疊分量的偽信號，如圖7所示。然而，在本優(yōu)選實施例的操作中，以與前述方式相同的方式移除偽信號。以下，給出詳細描述。
省略了對與前述操作相似的操作的描述，但引述由該操作獲得的各個值。小區(qū)域中的DC值DC—G、 DC一B和DC一R基本相同。所以，假定Large =DC—G且Small = DC—R，用于產生公共信號Y的第一調整值增益XI如下
增益B1 =0;
增益Rl = (Large/Small) = 1 。
由此獲得的公共信號Y與根據傳統(tǒng)方法獲得的公共信號Y基本相等。此外，用于調整從各個顏色的公共信號Y中獲得的公共高頻分量HY 的第二調整值增益X2如下
增益G2 = (DC—G/Large) = 1; 增益B2 = (DC—B/Large) = 1; 增益R2 = (DC—R/Large) = 1 。
由此獲得的高頻分量與根據傳統(tǒng)方法獲得的高頻分量基本相等。所以，如圖8所示，當對具有低色度的對象401成像時，由傳統(tǒng)顏色信號產生其中重疊分量被抵消的公共信號Y，且根據傳統(tǒng)方法將公共信號 Y的調整后高頻分量HG、 HB和HR相加。因此，可以獲得可控制其中重疊分量的高分辨率信號。更具體地，可以提供高分辨率信號，同時沒有任何問題地保持高頻分量替換處理(其中使用傳統(tǒng)的空間像素移位方法)的效果。
在本優(yōu)選實施例的描述中，固體成像元件的示例是CCD。然而，也可以使用除CCD以外的成像元件，例如CMOS。此外，在此描述中，由固體成像元件獲得的信號是R、 G和B;然而，也可以是例如C (青色)、 M (品紅色)和Y (黃色)之類的補色信號。此描述中的固體成像元件的示例是三板型固體成像元件；然而，只要可以獲得相似的效果，固體成像元件也可以具有包括單板、雙板、四板或更多板在內的拜耳陣列(Bayer array)。在此描述中，固體成像元件的移位方向是水平方向；然而，移位方向也可以為垂直方向，或者既包括水平方向也包括垂直方向。在此描述中，固體成像元件移位半個像素。然而，可以重新排列拜耳陣列中的顏色順序，或者可以使用至少雙板，然后固體成像元件以1/n (n是整數(shù))像素移位，以便抵消重疊分量，其中仍可以獲得相似的效果。
在圖3所示的組元設置器115中，信號R被用作其相位相對于信號G 的相位移位180度的信號的示例。然而，也可以使用例如信號B或信號R與B進行組合的混合信號。此外，可以按照根據需要進行切換的方式來使用這些信號。
在圖3所示的公共信號調整值計算器116中，參考在拍攝具有高色度的對象501的情況下的第一調整值增益X1，顯示出較大值的信號電平被
用作參考值(共有值)，如下增益G1 = 1; 增益B1 =0;
增益Rl = (Large/Small) = 1 。
然后，使顯示出較小值的信號與大值信號(參考值)相一致。
然而，也可以在將小值信號的信號電平設置為參考值之后，使大值信號的信號電平與小值信號的信號電平(參考值)相一致。此外，可以基于大值信號和小值信號來計算作為參考值的信號電平，以使兩信號的信號電平都與計算出的參考值相一致。作為計算參考值的方法，可以計算兩信號的中間電平或平均值，作為參考值。在將平均值計算作為參考值的情況下，可以對各個信號進行加權。
在圖11所示的示例中，小區(qū)域被設置為覆蓋五到六個采樣位置的區(qū) 域；然而，也可以具有更多或更少采樣位置。此外，不必僅由水平區(qū)域組成小區(qū)域，也可由垂直區(qū)域或水平和垂直兩種方向的區(qū)域組成小區(qū)域。小區(qū)域的形狀不受限制。
在由于噪聲等使得所使用的信號可能不可靠的情況下，可以在用于各個顏色的電平計算器101、 102和103中作出將不可靠信號的電平設置為相對低這種調整。
在由于噪聲等使得所使用的信號可能不可靠的情況下，可以在調整值設置器110中調整各個調整值。例如，可以調整第一調整值增益X1和第二調整值增益X2，以便減小第一調整值增益XI和第二調整值增益X2對產生公共信號Y的影響，并減小調整后高頻分量HG、 HB和HR。
在對所使用的信號進行預處理(諸如使用低通濾波器、帶通濾波器等的濾波處理)的情況下，可以將濾波后的信號用于各個顏色的電平計算器 101、 102和103的輸入，以便有效地利用所述信號。在對所使用的信號進行后處理(諸如使用低通濾波器、帶通濾波器等的濾波處理)的情況下，可以將濾波后的信號用于各個顏色的電平計算器101、 102和103的輸入，以便有效地利用所述信號，或者將濾波后的信號用作其輸出。
用于各個顏色的低頻分量分離器201、 202和203分別用于不同的顏色；然而，可以使用公用操作設備，所述公用操作設備也可以應用于電平計算器101、 102和103、高頻分量調整器131、 132和133以及高頻分量加法器301、 302和303。
信號處理電路示出了諸如攝像機之類的成像設備的電路的一部分。因此，并未描述攝像機等中通常執(zhí)行的各種處理。待輸入的信號G、 B和R 可以是預處理信號G、 B和R。作為預處理的示例，在先信號的數(shù)據可以按照預保持(pre-hold)的方式用作未進行采樣處理的、與空間位置相對應的數(shù)據，或者可以使用諸如濾波處理之類的另一種插值處理。所述處理可以是數(shù)字處理或模擬處理。
示意性地示出了圖1 3所示的操作設備，以便所述操作設備的操作易于理解。只要可以找到適用于本發(fā)明的操作和信號，所找到的操作和信號就可應用于本發(fā)明。
在上述優(yōu)選實施例中，在用于處理視頻信號的信號處理電路中實施本發(fā)明；然而，也可以類似地在用于處理音頻信號的信號處理電路中實施本發(fā)明。所以，本發(fā)明適用于通過攝像機、音頻解碼器等的音頻采集。
當對包括右耳音頻信號和左耳音頻信號在內的立體聲音頻信號執(zhí)行下述處理對采樣和稀疏相位進行移位，并對相移后的音頻信號進行合成 (等價于空間像素移位方法)時，可以使表觀采樣間隔和稀疏間隔變窄。在這種情況下，當以各個信號所共有的公共高頻分量(其中減小了重疊分量)替代包括這兩種音頻信號的重疊分量在內的高頻分量時，可以控制重疊分量。然而，在音頻信號之一的信號電平顯著小于另一音頻信號的信號電平的情況下，使用信號電平較小的音頻信號不能抵消信號電平較大的音頻信號中的高頻分量的重疊分量，結果，公共高頻分量仍然包括重疊分量。因此，在合成后的音頻信號中將產生由重疊分量所導致的吱嘎聲等。在將專利文件1所公開的信號處理電路應用于音頻信號的情況下，可以或多或少地控制這種吱嘎聲；然而，信號電平更不平衡的音頻信號將導致包括更少高頻分量在內的音頻信號。當信號電平更加失衡時，高頻分量中的分辨率也將犧牲得更多，這將導致音頻局部準確性的惡化。在針對不可避免地發(fā)生上述不便的這種音頻信號，實施本發(fā)明時，可以在不犧牲高頻分量的分辨率的情況下，控制吱嘎聲。在針對2聲道音頻信號，實施本發(fā)明的情
況下，優(yōu)選地，成對配置低頻分量分離器200、電平檢測器102 103、高頻分量調整器131 133和高頻分量加法器300，以用于右耳和左耳音頻信號。除2聲道音頻信號以外，本發(fā)明也可以類似地應用于5. l聲道音頻信號之類的多聲道音頻信號。
工業(yè)實用性
在根據本法明的、用于執(zhí)行高頻分量替換處理(其中采用空間像素移位方法)的信號處理方法中，可以提供具有高分辨率的信號，在所述信號中，即使在對象具有高色度的情況下，也可以控制莫爾效應，并控制高頻分量向無彩色轉變。此外，在具有低色度的對象中，也可以沒有任何問題地提供具有高分辨率的信號，因為在這種情況下，保持了高頻分量替換處理(其中使用傳統(tǒng)的空間像素移位方法)的效果。此外，本發(fā)明涉及一種簡單的信號處理方法，不必根據圖像特征等以復雜的方式選擇恰當?shù)奶?理。因此，根據本發(fā)明，可以提供構造簡單但具有滿意效果的信號處理電路。有利地，此信號處理方法可用于照相機、攝像機等。
在對像素進行稀疏處理的圖像壓縮編碼處理中，當對信號(其中，對稀疏像素的相位進行移位)進行壓縮、編碼和解碼時，根據本發(fā)明的信號處理方法同樣是適用的。因此，有利地，本發(fā)明可用于視頻解碼器等。
此外，可以將本發(fā)明應用于音頻信號，并且有效地應用于通過攝像機、音頻解碼器等的音頻采集。
權利要求
1.一種信號處理方法，用于處理通過空間像素移位方法獲得的、具有彼此不同的相位的至少兩個信號，所述信號處理方法包括低頻分量分離步驟，用于分離各個信號的低頻分量；公共高頻分量計算步驟，用于將信號的信號電平調整到各個信號中的均衡狀態(tài)，然后，從調整后的信號中分離出公共高頻分量；高頻分量調整步驟，用于通過將公共高頻分量的信號電平調整到各個信號的原始信號電平，產生針對每一信號的調整后的高頻分量；以及高頻分量疊加步驟，用于將在高頻分量調整步驟中進行了調整的調整后的高頻分量與在低頻分量分離步驟中分離出的低頻分量相加。
2. 根據權利要求1所述的信號處理方法，進一步包括第一調整值設置步驟，用于針對每一信號設置第一調整值，所述第一調整值用于將各個信號的信號電平調整到各個信號中的均衡狀態(tài)；以及第二調整值設置步驟，用于針對每一信號設置第二調整值，所述第二調整值用于將已由第一調整值調整到均衡狀態(tài)的各個信號的信號電平調整到原始信號電平，其中在公共高頻分量計算步驟中，基于第一調整值將各個信號的信號電平調整到各個信號中的均衡狀態(tài)，以及在高頻分量調整步驟中，基于第二調整值將公共高頻分量的信號電平調整到各個信號的原始信號電平。
3. 根據權利要求2所述的方法，其中高頻分量計算步驟包括公共信號計算步驟，用于計算具有己由第一調整值調整到各個信號中的均衡狀態(tài)的各個信號的共有值的公共信號；以及公共高頻分量分離步驟，用于從公共信號中分離公共高頻分量。
4. 根據權利要求2所述的信號處理方法，進一步包括組元設置步驟，用于設置作為信號之一的第一信號的信號電平、以及作為信號中的另一個的第二信號的信號電平，其中在第一調整值設置步驟中，基于第一和第二信號的信號電平來設置第一調整值，以及在第二調整值設置步驟中，基于第一和第二信號的信號電平來設置第二調整值。
5. 根據權利要求4所述的信號處理方法，其中信號電平是第一和第二信號的DC電平。
6. 根據權利要求4所述的信號處理方法，其中在組元設置步驟中，將包括用于提取第一和第二信號的空間位置及其鄰區(qū)在內的空間區(qū)域中的信號電平設置為第一和第二信號的信號電平。
7. 根據權利要求6所述的信號處理方法，其中在組元設置步驟中，將空間區(qū)域中的信號電平的平均值設置為第一和第二信號的信號電平。
8. 根據權利要求6所述的信號處理方法，其中在組元設置步驟中，將空間區(qū)域中的信號電平的加權平均值設置為第一和第二信號的信號電平。
9. 根據權利要求2所述的信號處理方法，其中在第一調整值設置步驟中，基于第一和第二信號的信號電平，設置第一和第二信號的信號電平的參考值，且將使得第一和第二信號的信號電平與參考值一致的調整值設置為第一調整值。
10. 根據權利要求9所述的信號處理方法，其中在第一調整值設置步驟中，將第一和第二信號的信號電平中較高的一個設置為參考值。
11. 根據權利要求9所述的信號處理方法，其中在第一調整值設置步驟中，將第一和第二信號的信號電平中較低的一個設置為參考值。
12. 根據權利要求9所述的信號處理方法，其中在第一調整值設置步驟中，將第一和第二信號的信號電平的中間值設置為參考值。
13. 根據權利要求4所述的信號處理方法，其中在組元設置步驟中，基于第一和第二信號的低頻分量，設置第一和第二信號的信號電平。
14. 根據權利要求4所述的信號處理方法，其中在組元設置步驟中，基于第一和第二信號的任意頻帶分量，設置第一和第二信號的信號電平。
15. 根據權利要求4所述的信號處理方法，其中在組元設置步驟中，從第一和第二信號中移除噪聲，且基于從其中移除了噪聲的第一和第二信號，設置第一和第二信號的信號電平。
16. 根據權利要求4所述的信號處理方法，其中在組元設置步驟中，由于基于信號中包括的噪聲，信號可靠性較低，所以調整第一和第二信號的信號電平，以降低包括噪聲的信號對第一和第二調整值的影響。
17. 根據權利要求9所述的信號處理方法，其中在第一調整值設置步驟中，基于以下計算公式設置第一調整值第一調整值=(參考值/每個信號的信號電平)。
18. 根據權利要求17所述的信號處理方法，其中在第二調整值設置步驟中，基于以下計算公式設置第二調整值第二調整值=(每個信號的信號電平/參考值)。
19. 根據權利要求2所述的信號處理方法，其中在第一和第二調整值設置步驟中，由于基于信號中包括的噪聲，信號可靠性較低，所以調整第一和第二調整值，以降低包括噪聲的信號對第一和第二調整值的影響。
20. 根據權利要求4所述的信號處理方法，其中第一和第二信號的相位彼此相差180度。
21. 根據權利要求4所述的信號處理方法，其中第一信號是包括具有彼此相等相位的一個或更多個信號在內的第一組信號，以及第二信號是包括具有彼此相等相位的一個或更多個信號在內的第二組信號。
22. 根據權利要求21所述的信號處理方法，其中在第一調整值設置步驟中，根據組成第一組信號的每一個信號來設置第一調整值，以及在第二調整值設置步驟中，根據組成第二組信號的每一個信號來設置第二調整值。
23. 根據權利要求21所述的信號處理方法，其中第一和第二信號是圖像信號，以及第一組信號是綠色信號，且第二組信號是紅色和藍色信號。
24. —種信號處理設備，用于處理通過空間像素移位方法獲得的、具有彼此不同的相位的至少兩個信號，所述信號處理設備包括低頻分量分離裝置，用于分離各個信號的低頻分量；公共高頻分量計算裝置，用于將信號的信號電平調整到各個信號中的均衡狀態(tài)，然后，從調整后的信號中分離出公共高頻分量；高頻分量調整裝置，用于通過將公共高頻分量的信號電平調整到各個信號的原始信號電平，產生針對每一信號的調整后的高頻分量；以及高頻分量疊加裝置，用于將在高頻分量調整裝置中進行了調整的調整后的高頻分量與在低頻分量分離裝置中分離出的低頻分量相加。
25. 根據權利要求24所述的信號處理設備，進一步包括第一調整值設置裝置，用于針對每一信號設置第一調整值，所述第一調整值用于將各個信號的信號電平調整到各個信號中的均衡狀態(tài)；以及第二調整值設置裝置，用于針對每一信號設置第二調整值，所述第二調整值用于將已由第一調整值調整到均衡狀態(tài)的各個信號的信號電平調整到原始信號電平，其中公共高頻分量計算裝置基于第一調整值將各個信號的信號電平調整到各個信號中的均衡狀態(tài)，以及高頻分量調整裝置基于第二調整值將公共高頻分量的信號電平調整到各個信號的原始信號電平。
26. 根據權利要求25所述的信號處理設備，其中高頻分量計算裝置包括公共信號計算裝置，用于計算具有已由第一調整值調整到各個信號中的均衡狀態(tài)的各個信號的共有值的公共信號；以及公共高頻分量分離裝置，用于從公共信號中分離公共高頻分量。
27. 根據權利要求25所述的信號處理設備，進一步包括組元設置裝置，用于設置作為信號之一的第一信號的信號電平、以及作為信號中的另一個的第二信號的信號電平，其中第一調整值設置裝置基于第一和第二信號的信號電平來設置第一調整值，以及第二調整值設置裝置基于第一和第二信號的信號電平來設置第二調整值。
28. 根據權利要求27所述的信號處理設備，其中信號電平是第一和第二信號的DC電平。
29. 根據權利要求27所述的信號處理設備，其中組元設置裝置將包括用于提取第一和第二信號的空間位置及其鄰區(qū)在內的空間區(qū)域中的信號電平設置為第一和第二信號的信號電平。
30. 根據權利要求29所述的信號處理設備，其中組元設置裝置將空間區(qū)域中的信號電平的平均值設置為第一和第二信號的信號電平。
31. 根據權利要求29所述的信號處理設備，其中組元設置裝置將空間區(qū)域中的信號電平的加權平均值設置為第一和第二信號的信號電平。
32. 根據權利要求25所述的信號處理設備，其中第一調整值設置裝置基于第一和第二信號的信號電平，設置第一和第二信號的信號電平的參考值，然后，將使得第一和第二信號的信號電平與參考值一致的調整值設置為第一調整值。
33. 根據權利要求32所述的信號處理設備，其中第一調整值設置裝置將第一和第二信號的信號電平中較高的一個設置為參考值。
34. 根據權利要求32所述的信號處理設備，其中第一調整值設置裝置將第一和第二信號的信號電平中較低的一個設置為參考值。
35. 根據權利要求32所述的信號處理設備，其中第一調整值設置裝置將第一和第二信號的信號電平的中間值設置為參考值。
36. 根據權利要求27所述的信號處理設備，其中組元設置裝置基于第一和第二信號的低頻分量，設置第一和第二信號的信號電平。
37. 根據權利要求27所述的信號處理設備，其中組元設置裝置基于第一和第二信號的任意頻帶分量，設置第一和第二信號的信號電平。
38. 根據權利要求27所述的信號處理設備，其中組元設置裝置從第一和第二信號中移除噪聲，并基于從其中移除了噪聲的第一和第二信號，設置第一和第二信號的信號電平。
39. 根據權利要求27所述的信號處理設備，其中由于基于信號中包括的噪聲，信號可靠性較低，所以組元設置裝置調整第一和第二信號的信號電平，以降低包括噪聲的信號對第一和第二調整值的影響。
40. 根據權利要求32所述的信號處理設備，其中第一調整值設置裝置基于以下計算公式設置第一調整值第一調整值=(參考值/每個信號的信號電平)。
41. 根據權利要求40所述的信號處理設備，其中第二調整值設置裝置基于以下計算公式設置第二調整值第二調整值=(每個信號的信號電平/參考值)。
42. 根據權利要求25所述的信號處理設備，其中由于基于信號中包括的噪聲，信號可靠性較低，所以第一和第二調整值設置裝置調整第一和第二調整值，以降低包括噪聲的信號對第一和第二調整值的影響。
43. 根據權利要求27所述的信號處理設備，其中第一和第二信號的相位彼此相差180度。
44. 根據權利要求27所述的信號處理設備，其中第一信號是包括具有彼此相等相位的一個或更多個信號在內的第一組信號，以及第二信號是包括具有彼此相等相位的一個或更多個信號在內的第二組信號。
45. 根據權利要求44所述的信號處理設備，其中第一調整值設置裝置根據組成第一組信號的每一個信號來設置第一調整值，以及第二調整值設置裝置根據組成第二組信號的每一個信號來設置第二調整值。
46. 根據權利要求44所述的信號處理設備，其中第一和第二信號是圖像信號，以及第一組信號是綠色信號，且第二組信號是紅色和藍色信號。
全文摘要
本發(fā)明提出了一種信號處理方法和信號處理電路，產生調整后的信號所共有的公共高頻分量，并將所產生的公共高頻分量調整為與原始信號的平衡相對應的比率，其中基于采樣前的信號幅度的局部相似性進行調整從而抵消其中的重疊分量，來產生所述調整后的信號分量。將調整后的高頻分量與每個信號的低頻分量相加。
文檔編號H04N9/09GK101411206SQ200780010550
公開日2009年4月15日申請日期2007年3月23日優(yōu)先權日2006年3月24日
發(fā)明者千秋久子申請人:松下電器產業(yè)株式會社

完整全部詳細技術資料下載