專利名稱：一種對(duì)動(dòng)態(tài)圖像中人臉遮擋的方法
技術(shù)領(lǐng)域：
本發(fā)明涉及計(jì)算機(jī)視覺和圖像處理領(lǐng)域，尤其是對(duì)動(dòng)態(tài)圖像中人臉遮擋的技術(shù)。
背景技術(shù)：
在某些特殊的應(yīng)用領(lǐng)域，需要對(duì)動(dòng)態(tài)圖像中的人臉進(jìn)行遮擋(或加馬賽克)。如為了保護(hù)新聞中受采訪者的隱私，需要將受采訪者的臉部圖像進(jìn)行遮擋處理(或模糊處理)， 通常做法是在圖像中的人臉位置設(shè)定一個(gè)區(qū)域，該區(qū)域內(nèi)的圖像按照一定的塊大小求取均值，達(dá)到模糊的效果。然而，由于受采訪者是活動(dòng)的，所以在進(jìn)行新聞后期制作時(shí)，需要?jiǎng)討B(tài)地調(diào)整模糊區(qū)域，若采用手工操作，則一方面制作人員的工作量較大，另一方面也存在技術(shù)風(fēng)險(xiǎn)，即由于窗口覆蓋不完全而暴露了受采訪者隱私，或者模糊區(qū)域過大影響新聞圖像質(zhì)量。為了自動(dòng)地完成對(duì)動(dòng)態(tài)圖像中的人臉進(jìn)行遮擋，首先需要利用自動(dòng)人臉檢測(cè)技術(shù)，即采用一定的策略對(duì)圖像進(jìn)行搜索，以確定其中人臉的位置、大小，然后再對(duì)該部分圖像進(jìn)行模糊處理。自動(dòng)人臉檢測(cè)難點(diǎn)表現(xiàn)在兩大方面，一方面由于人臉內(nèi)在的變化所引起人臉具有相當(dāng)復(fù)雜的細(xì)節(jié)變化，不同的外貌如臉形、膚色等，不同的表情如眼、嘴的開與閉等；人臉的遮擋，如眼鏡、頭發(fā)和頭部飾物以及其他外部物體等。另一方面由于外在條件變化所引起由于成像角度的不同造成人臉的多姿態(tài)，如平面內(nèi)旋轉(zhuǎn)、深度旋轉(zhuǎn)以及上下旋轉(zhuǎn)，其中深度旋轉(zhuǎn)影響較大；光照的影響，如圖像中的亮度、對(duì)比度的變化和陰影等；圖像的成像條件，如攝像設(shè)備的焦距、成像距離，圖像獲得的途徑等等。

發(fā)明內(nèi)容
本發(fā)明目的在于提供一種自動(dòng)實(shí)現(xiàn)對(duì)動(dòng)態(tài)圖像中人臉進(jìn)行遮擋(或加馬賽克)的方法。I.膚色區(qū)域分割膚色是人臉的重要信息，不依賴于面部的細(xì)節(jié)特征，對(duì)于旋轉(zhuǎn)、表情變化等情況都能適用，具有相對(duì)的穩(wěn)定性并且和大多數(shù)背景物體的顏色相區(qū)別。對(duì)于彩色圖像，在確定了膚色模型之后，可以首先進(jìn)行膚色檢測(cè)，在檢測(cè)出膚色像素后，根據(jù)它們?cè)谏壬系南嗨菩院涂臻g上的相關(guān)性分割出可能的人臉區(qū)域。對(duì)于一些簡單的情況，僅根據(jù)膚色像素的聚類特性即可完成區(qū)域分割。對(duì)于較復(fù)雜的情況，膚色分割則需要考慮兩方而的問題由于光照和臉部器官的影響，人臉可能被割裂為若干互不連通的膚色區(qū)域；人臉區(qū)域可能與其它類膚色區(qū)域連接在一起。聚類-歸并-驗(yàn)證策略是這類問題較常用的解決方法首先將膚色像素按照較為嚴(yán)格的色度一致性和幾何約束條件聚類為區(qū)域，然后按照一定規(guī)則進(jìn)行歸并，歸并后或歸并過程中再利用其它特征進(jìn)行驗(yàn)證。膚色區(qū)域分割方法的優(yōu)勢(shì)在于系統(tǒng)的運(yùn)行速度快，受姿態(tài)、尺寸、表情等變化的影
4響小，適合于適合于對(duì)實(shí)時(shí)性要求較高的應(yīng)用，但對(duì)光照條件和圖像采集設(shè)備的特性敏感， 易受環(huán)境因素干擾。因此，適合人臉區(qū)域的粗定位。2.基于模板匹配的人臉驗(yàn)證在膚色區(qū)域分割出來之后，需要利用區(qū)域的幾何特征或灰度特征，驗(yàn)證該區(qū)域是否是人臉，以排除色彩類似膚色的區(qū)域?；谀０迤ヅ涞姆椒ㄊ窃趫D像灰度特征上直接比較目標(biāo)模板和候選圖像區(qū)域之間地相似性，而基于幾何特征的匹配方法是比較從圖像中抽取的一定特征的相似性，對(duì)人臉檢測(cè)而言，特征包括眼睛、鼻子、嘴巴等。模板匹配的方法具有簡單、直觀的特點(diǎn)，與幾何特征匹配方法相比具有較強(qiáng)的適應(yīng)性。生成模板最主要的工作是圖像的尺度變換和灰度分布標(biāo)準(zhǔn)化，主要考慮表征圖像灰度分布的兩個(gè)參量-灰度的平均值和方差，將它們調(diào)整到給定值，以消除采集時(shí)光照等因素對(duì)人臉圖像的影響。對(duì)于模板匹配，這種灰度分布標(biāo)準(zhǔn)化方法比常用的直方圖均衡化方法更有效，原因在于它一致化了均值和方差這兩個(gè)關(guān)鍵數(shù)字特征。選取若干副正面端正的人臉圖像，剪切出人臉區(qū)域作為人臉樣本，經(jīng)尺度標(biāo)準(zhǔn)化 (36X36)和灰度分布標(biāo)準(zhǔn)化后，將所有人臉樣本取灰度平均，得到大小為36X36的正面端正的原始平均人臉模板?？紤]到雙眼在人臉特征中的重要性，拷貝原始平均人臉模板的雙眼部分，剪切出大小為36X12的眼睛區(qū)域，對(duì)其進(jìn)行灰度分布標(biāo)準(zhǔn)化后作為雙眼模板。將原始人臉模板分別按照I : 0.9，1 : I和I : I. I的長、寬比拉伸，分別對(duì)它們進(jìn)行灰度分布標(biāo)準(zhǔn)化后作為人臉模板，以適應(yīng)不同形狀的人臉。使用各個(gè)模板對(duì)所有可能尺度和形狀(長寬比)的圖像進(jìn)行匹配，將滿足一定條件并達(dá)到匹配度閾值的圖像作為人臉，使用相關(guān)系數(shù)作為模板匹配的判斷依據(jù)。3.人臉遮擋方法(I)創(chuàng)建膚色分割區(qū)域通過膚色分割得到了若干個(gè)可能是人臉區(qū)域的圖像位置、大小，則每個(gè)可能人臉區(qū)域就是模板匹配的一個(gè)被搜索區(qū)域。(2)通過區(qū)域掃描進(jìn)行模板匹配對(duì)于每個(gè)被搜索區(qū)域進(jìn)行掃描，經(jīng)過灰度分布標(biāo)準(zhǔn)化預(yù)處理后，首先使用雙眼模板進(jìn)行匹配，對(duì)相關(guān)系數(shù)超過給定閾值的搜索區(qū)域，則再使用各種尺度的人臉模板進(jìn)行匹配，將相關(guān)度最大并大于人臉閾值的掃描區(qū)域標(biāo)記為人臉位置，并保存此時(shí)該區(qū)域的位置、 大小。(3)對(duì)人臉區(qū)域進(jìn)行模糊處理對(duì)人臉區(qū)域即模板匹配的圖像已知位置、大小，將該區(qū)域內(nèi)的圖像按照一定的塊大小求取均值，達(dá)到模糊處理或加馬賽克的效果。


圖I為本發(fā)明方法流程圖。圖2為膚色區(qū)域分割流程圖。圖3為原始彩色圖像。
圖4為膚色分割后的圖像。圖5為可能的人臉區(qū)域。圖6為驗(yàn)證的人臉區(qū)域。
具體實(shí)施例方式實(shí)施例I 本發(fā)明方法流程如圖I所示，膚色區(qū)域分割流程如圖2所示，包括如下步驟(I)讀入原始彩色圖像，如圖3所示；(2)掃描圖像，獲取該彩色圖像每一像素R、G、B分量值，根據(jù)式⑴計(jì)算其灰度值，并計(jì)算整幅圖像中每種灰度值的數(shù)目，取前5%的像素，求得光線補(bǔ)償系數(shù)，并用此系數(shù)調(diào)整每個(gè)像素點(diǎn)的R、G、B值；Gray = RXO. 3+GXO. 59+BXO. 11(I)(3)對(duì)每個(gè)像素根據(jù)式(2)轉(zhuǎn)換到Y(jié)CbCr色彩空間下，計(jì)算其Y、Cb、Cr值；
權(quán)利要求
1.一種對(duì)動(dòng)態(tài)圖像中人臉遮擋的方法，其特征在于包括如下步驟(1)通過膚色分割得到若干個(gè)可能是人臉區(qū)域的圖像位置、大小，則每個(gè)可能人臉區(qū)域就是模板匹配的一個(gè)被搜索區(qū)域；(2)對(duì)于每個(gè)被搜索區(qū)域進(jìn)行掃描，經(jīng)過灰度分布標(biāo)準(zhǔn)化預(yù)處理后，使用雙眼模板進(jìn)行匹配，對(duì)相關(guān)系數(shù)超過給定閾值的搜索區(qū)域，則再使用各種尺度的人臉模板進(jìn)行匹配，將相關(guān)度最大并大于人臉閾值的掃描區(qū)域標(biāo)記為人臉位置，并保存此時(shí)該區(qū)域的位置、大??；(3)對(duì)人臉區(qū)域即模板匹配的圖像已知位置、大小，將該區(qū)域內(nèi)的圖像按照一定的塊大小求取均值，達(dá)到模糊處理或加馬賽克的效果。
2.根據(jù)權(quán)利要求I所述的對(duì)動(dòng)態(tài)圖像中人臉遮擋的方法，其特征在于膚色分割包括如下步驟(1)讀入原始彩色圖像；(2)掃描圖像，獲取該彩色圖像每一像素R、G、B分量值，計(jì)算其灰度值，并計(jì)算整幅圖像中每種灰度值的數(shù)目，取前5 %的像素，求得光線補(bǔ)償系數(shù)，并用此系數(shù)調(diào)整每個(gè)像素點(diǎn)的R、G、B值；(3)對(duì)每個(gè)像素轉(zhuǎn)換到Y(jié)CbCr色彩空間下，計(jì)算其Y、Cb、Cr值；(4)如果Y在[125，188]之間，則Cb、Cr保持不變，否則根據(jù)式(3) (6)調(diào)整其Cb、 Cr值；
3.根據(jù)權(quán)利要求I所述的對(duì)動(dòng)態(tài)圖像中人臉遮擋的方法，其特征在于生成人臉模板包括如下步驟(3)(4)(5)(1)選取若干副正面端正的人臉圖像，剪切出人臉區(qū)域作為人臉樣本，經(jīng)尺度標(biāo)準(zhǔn)化 (36X36)和灰度分布標(biāo)準(zhǔn)化后，將所有人臉樣本取灰度平均，得到大小為36X36的正面端正的原始平均人臉模板；(2)考慮到雙眼在人臉特征中的重要性，拷貝原始平均人臉模板的雙眼部分，剪切出大小為36X12的眼睛區(qū)域，對(duì)其進(jìn)行灰度分布標(biāo)準(zhǔn)化后作為雙眼模板；⑶將原始人臉模板分別按照I : 0.9，1 : I和I : I. I的長、寬比拉伸，分別對(duì)它們進(jìn)行灰度分布標(biāo)準(zhǔn)化后作為人臉模板，以適應(yīng)不同形狀的人臉。
4.根據(jù)權(quán)利要求I所述的對(duì)動(dòng)態(tài)圖像中人臉遮擋的方法，其特征在于基于模板匹配的人臉驗(yàn)證依據(jù)如下設(shè)人臉模板的灰度矩陣為T [M] [N]，灰度均值與方差分別為μ 1和στ，被驗(yàn)證圖像的灰度矩陣為R[M] [N]，灰度均值與方差分別為，則它們之間的相關(guān)系數(shù)為
全文摘要
本發(fā)明涉及計(jì)算機(jī)視覺和圖像處理領(lǐng)域，公開一種對(duì)動(dòng)態(tài)圖像中人臉遮擋的方法，首先創(chuàng)建膚色分割區(qū)域，通過膚色分割得到若干個(gè)可能是人臉區(qū)域的圖像位置、大小。然后通過區(qū)域掃描進(jìn)行模板匹配，驗(yàn)證人臉區(qū)域。最后對(duì)人臉區(qū)域進(jìn)行模糊處理，達(dá)到加馬賽克的效果。該方法運(yùn)行速度快，受姿態(tài)、尺寸、表情等變化的影響小，適合于對(duì)實(shí)時(shí)性要求較高的應(yīng)用領(lǐng)域。
文檔編號(hào)G06K9/62GK102592141SQ20121000179
公開日2012年7月18日 申請(qǐng)日期2012年1月4日 優(yōu)先權(quán)日2012年1月4日
發(fā)明者張敏 申請(qǐng)人:南京理工大學(xué)常熟研究院有限公司