專利名稱:基于人臉圖像的信息檢索方法及系統(tǒng)的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及移動(dòng)通信領(lǐng)域,尤其涉及利用手機(jī)進(jìn)行信息檢索的方法及系統(tǒng)。
背景技術(shù):
隨著互聯(lián)網(wǎng)的快速發(fā)展,基于互聯(lián)網(wǎng)的數(shù)據(jù)搜索已被人們廣泛使用。典型的應(yīng)用是通過網(wǎng)頁來向搜索引擎提交要搜索的關(guān)鍵詞,由搜索引擎服務(wù)器檢索到相關(guān)的數(shù)據(jù)信息,并將搜索結(jié)果返回給用戶。隨著手機(jī)智能化程度的提高及操作系統(tǒng)的升級,無線通信技術(shù)的成熟,手機(jī)上集成有拍照攝影、瀏覽網(wǎng)頁、在線收看視頻、查看圖片等多種功能。由于手機(jī)的便捷性,人們更青睞在空暇時(shí)間通過手機(jī)來瀏覽網(wǎng)頁、觀看比賽視頻或者搜索信息等。在這個(gè)信息爆炸的 時(shí)代,人們在瀏覽圖片或者觀看視頻時(shí)經(jīng)常會(huì)遇到陌生的人物圖像信息,如果想要了解此人物的更多信息,則需要詢問身邊的朋友或者進(jìn)行文字搜索,這樣既浪費(fèi)用戶的時(shí)間,又難以獲得理想的檢索結(jié)果。由于人物圖像數(shù)據(jù)不具備文字信息的明確指向性,不能為用戶提供明確的關(guān)鍵字以供檢索,故傳統(tǒng)用于手機(jī)的信息檢索方法有待進(jìn)一步改進(jìn)。
發(fā)明內(nèi)容
本發(fā)明的目的是提供一種基于人臉圖像的信息檢索方法,該方法便于用戶快速檢索在應(yīng)用程序中出現(xiàn)的陌生人的相關(guān)信息,且檢索更為方便快捷,富有人性化。本發(fā)明的另一目的是提供一種基于人臉圖像的信息檢索系統(tǒng),該系統(tǒng)基于人臉圖像識(shí)別技術(shù),對移動(dòng)終端應(yīng)用程序上出現(xiàn)的陌生人圖像進(jìn)行智能檢索,從而為用戶提供了精準(zhǔn)便捷的檢索服務(wù)。為了實(shí)現(xiàn)上述目的,本發(fā)明采用的技術(shù)方案是—種基于人臉圖像的信息檢索方法,適用于移動(dòng)終端,該方法包括以下步驟圖像采集模塊從所述移動(dòng)終端的當(dāng)前應(yīng)用程序中獲取人臉快照數(shù)據(jù);對所述圖像采集模塊獲取的人臉快照數(shù)據(jù)進(jìn)行特征值提取以得到特征值向量;將所述特征值向量發(fā)送至數(shù)據(jù)處理服務(wù)器上以對所述特征值向量進(jìn)行檢索匹配,并將匹配結(jié)果返回至移動(dòng)終端。較佳地,所述數(shù)據(jù)處理服務(wù)器上預(yù)先存儲(chǔ)有用于匹配所述特征值向量的特征值參照量,所述特征值參照量為預(yù)先學(xué)習(xí)訓(xùn)練建立的。較佳地,所述當(dāng)前應(yīng)用程序?yàn)橐曨l播放程序、圖片瀏覽程序或者網(wǎng)頁瀏覽程序。較佳地,所述匹配結(jié)果為文字信息或者包含相關(guān)搜索信息的URL地址,如果返回的是文字信息,則直接顯示在手機(jī)上;如果返回URL地址,則自動(dòng)引導(dǎo)手機(jī)訪問該URL地址。本發(fā)明還提供一種基于人臉圖像的信息檢索系統(tǒng),包括移動(dòng)終端及數(shù)據(jù)處理服務(wù)器,其特征在于,所述移動(dòng)終端包括圖像采集模塊,用于從所述移動(dòng)終端的當(dāng)前應(yīng)用程序中獲取人臉快照數(shù)據(jù);特征提取模塊,用于對所述圖像采集模塊獲取的人臉快照數(shù)據(jù)進(jìn)行特征值提取以得到特征值向量;應(yīng)用處理模塊,用于將所述特征值向量發(fā)送至數(shù)據(jù)處理服務(wù)器,并從數(shù)據(jù)處理服務(wù)器接收匹配結(jié)果;所述數(shù)據(jù)處理服務(wù)器包括特征庫模塊,用于存儲(chǔ)特征值參照量;檢索模塊,用于將所述應(yīng)用處理模塊傳來的所述特征值向量與所述特征值參照量進(jìn)行匹配以生成匹配結(jié)果。較佳地,所述特征庫模塊上存儲(chǔ)的特征值參照量為預(yù)先學(xué)習(xí)訓(xùn)練建立的。 較佳地,所述當(dāng)前應(yīng)用程序?yàn)橐曨l播放程序、圖片瀏覽程序或者網(wǎng)頁瀏覽程序。較佳地,所述匹配結(jié)果為文字信息或者包含相關(guān)搜索信息的URL地址,如果返回的是文字信息,則直接顯示在手機(jī)上;如果返回URL地址,則自動(dòng)引導(dǎo)手機(jī)訪問該URL地址。本發(fā)明的有益效果是與現(xiàn)有技術(shù)相比,本發(fā)明基于人臉圖像的信息檢索方法及系統(tǒng),利用成熟的人臉識(shí)別技術(shù)對移動(dòng)終端應(yīng)用程序中的陌生人圖像或者照片進(jìn)行人臉識(shí)另IJ,并將人臉識(shí)別的特征與存儲(chǔ)在數(shù)據(jù)處理服務(wù)器上的特征參照量進(jìn)行匹配,從而提供該陌生人相關(guān)的檢索信息,便于用戶快速的了解應(yīng)用程序中出現(xiàn)的陌生人的相關(guān)信息,且該檢索方式快捷方便,準(zhǔn)確性高,操作極為人性化,有利于提升用戶操作手機(jī)的滿意度。
圖I為本發(fā)明基于人臉圖像的信息檢索方法的步驟流程圖;圖2是本發(fā)明基于人臉圖像的信息檢索系統(tǒng)的原理方框圖。
具體實(shí)施例方式下面結(jié)合附圖和優(yōu)選實(shí)施例對本發(fā)明作進(jìn)一步的描述,但本發(fā)明的實(shí)施方式不限于此。本發(fā)明基于人臉圖像的信息檢索方法及系統(tǒng),在移動(dòng)終端運(yùn)行應(yīng)用程序的過程中,對應(yīng)用程序中出現(xiàn)的陌生人物利用人臉識(shí)別技術(shù)提取該人物的人臉圖像的特征量,進(jìn)而對該人臉圖像進(jìn)行檢索匹配,為移動(dòng)終端用戶提供該人物相關(guān)的搜索信息,以方便用戶利用人物圖像進(jìn)行智能化信息檢索。參照圖1,本發(fā)明基于人臉圖像的信息檢索方法,包括以下步驟步驟S10,圖像采集模塊從所述移動(dòng)終端的當(dāng)前應(yīng)用程序中獲取人臉快照數(shù)據(jù);所述當(dāng)前應(yīng)用程序?yàn)橐曨l播放程序、圖片瀏覽程序或者網(wǎng)頁瀏覽程序。例如,用戶在通過手機(jī)的視頻播放程序觀看比賽錄像時(shí),錄像中出現(xiàn)了用戶不熟悉的陌生運(yùn)動(dòng)員面孔,則用戶通過快捷鍵觸發(fā)圖像采集模塊來獲取當(dāng)前幀畫面數(shù)據(jù)上的人臉快照數(shù)據(jù),具體為,圖像采集模塊基于人臉檢測及定位技術(shù)對當(dāng)前幀畫面數(shù)據(jù)上的人臉進(jìn)行定位裁剪,從而去除不相關(guān)區(qū)域的多余圖像數(shù)據(jù),形成用于后續(xù)步驟中比對的人臉快照數(shù)據(jù),以提高數(shù)據(jù)處理的效率及比對的精準(zhǔn)度。步驟S20,對所述圖像采集模塊獲取的人臉快照數(shù)據(jù)進(jìn)行特征值提取以得到特征
值向量;對步驟SlO獲取的人臉快照數(shù)據(jù)進(jìn)行特征值提取,具體可采用特征分析的方法,將人臉基準(zhǔn)點(diǎn)的相對比率和其他描述人臉臉部特征的形狀參數(shù)或者類別參數(shù)等一起構(gòu)成特征值向量,此處人臉特征提取方法為本領(lǐng)域技術(shù)人員的公知技術(shù),在此不再贅述。步驟S30,將所述特征值向量發(fā)送至數(shù)據(jù)處理服務(wù)器上以對所述特征值向量進(jìn)行檢索匹配,并將匹配結(jié)果返回至移動(dòng)終端。數(shù)據(jù)處理服務(wù)器上預(yù)先存儲(chǔ)有用于匹配所述特征值向量的特征值參照量,所述特征值參照量為預(yù)先學(xué)習(xí)訓(xùn)練建立的。將所述特征值向量與數(shù)據(jù)庫中的特征參照量進(jìn)行匹配,設(shè)置若特征值向量與特征參照量的匹配近似度超過預(yù)定閾值,認(rèn)定二者匹配,將與該人臉圖像對應(yīng)的人物數(shù)據(jù)或者包含該人物的相關(guān)搜索信息的URL地址返回給移動(dòng)終端,手機(jī)可以直接對人物數(shù)據(jù)進(jìn)行顯示或者訪問包含搜索信息的URL地址;若特征值向量與特征參照量的匹配近似度未達(dá)到預(yù)定閾值,則返回?zé)o法檢索到此人的提示信息給手機(jī)。這樣用戶在通過手機(jī)觀看視頻、瀏覽網(wǎng)頁或者查看圖片的同時(shí)就能快捷地檢索到相關(guān)人物的信息,不僅操作方便,而且檢索路徑可靠,信息相關(guān)性高。本發(fā)明還提供一種基于人臉圖像的信息檢索系統(tǒng),參照圖2,該系統(tǒng)包括移動(dòng)終端 10及數(shù)據(jù)處理服務(wù)器20,移動(dòng)終端10包括圖像采集模塊11,用于從所述移動(dòng)終端10的當(dāng)前應(yīng)用程序中獲取人臉快照數(shù)據(jù);特征提取模塊12,用于對所述圖像采集模塊11獲取的人臉快照數(shù)據(jù)進(jìn)行特征值提取以得到特征值向量;應(yīng)用處理模塊13,用于將所述特征值向量發(fā)送至數(shù)據(jù)處理服務(wù)器20,并從數(shù)據(jù)處理服務(wù)器20接收匹配結(jié)果;所述數(shù)據(jù)處理服務(wù)器20包括特征庫模塊21,用于存儲(chǔ)特征值參照量,所述特征值參照量為預(yù)先學(xué)習(xí)訓(xùn)練建立的,以作為對提取的人臉快照數(shù)據(jù)的特征值向量進(jìn)行檢索匹配的參照量;檢索模塊22,用于將所述應(yīng)用處理模塊13傳來的所述特征值向量與所述特征值參照量進(jìn)行匹配以生成匹配結(jié)果。檢索模塊22上可設(shè)置匹配的預(yù)定閾值,若特征值向量與特征參照量的匹配近似度超過預(yù)定閾值,則認(rèn)定二者匹配,將與該人臉圖像對應(yīng)的人物數(shù)據(jù)或者包含該人物的相關(guān)搜索信息的URL地址返回給移動(dòng)終端,手機(jī)可以直接對人物數(shù)據(jù)進(jìn)行顯示或者訪問包含搜索信息的URL地址;若特征值向量與特征參照量的匹配近似度未達(dá)到預(yù)定閾值,則返回?zé)o法檢索到此人的提示信息給手機(jī)。這樣用戶在通過手機(jī)觀看視頻、瀏覽網(wǎng)頁或者查看圖片的同時(shí)就能快捷地檢索到相關(guān)人物的信息,不僅操作方便,而且檢索路徑可靠,信息相關(guān)性高。所述當(dāng)前應(yīng)用程序?yàn)橐曨l播放程序、圖片瀏覽程序或者網(wǎng)頁瀏覽程序,所述移動(dòng)終端為手機(jī)、PDA等智能終端。本發(fā)明基于人臉圖像的信息檢索方法及系統(tǒng),利用成熟的人臉識(shí)別技術(shù)對移動(dòng)終端應(yīng)用程序中的陌生人圖像或者照片進(jìn)行人臉識(shí)別,并將人臉識(shí)別的特征與存儲(chǔ)在數(shù)據(jù)處理服務(wù)器上的特征參照量進(jìn)行匹配,從而提供該陌生人相關(guān)的檢索信息,便于用戶快速的了解應(yīng)用程序中出現(xiàn)的陌生人的相關(guān)信息,且該檢索方式快捷方便,準(zhǔn)確性高,操作極為人性化,有利于提升用戶操作手機(jī)的滿意度。以上是對本發(fā)明的較佳實(shí)施進(jìn)行了具體說明,但本發(fā)明創(chuàng)造并不限于所述實(shí)施例,熟悉本領(lǐng)域的技術(shù)人員在不違背本發(fā)明精神的前提下還可做作出種種的等同變形或替 換,這些等同的變形或替換均包含在本申請權(quán)利要求所限定的范圍內(nèi)。
權(quán)利要求
1.一種基于人臉圖像的信息檢索方法,適用于移動(dòng)終端,其特征在于,該方法包括以下步驟 圖像采集模塊從所述移動(dòng)終端的當(dāng)前應(yīng)用程序中獲取人臉快照數(shù)據(jù); 對所述圖像采集模塊獲取的人臉快照數(shù)據(jù)進(jìn)行特征值提取以得到特征值向量; 將所述特征值向量發(fā)送至數(shù)據(jù)處理服務(wù)器上以對所述特征值向量進(jìn)行檢索匹配,并將匹配結(jié)果返回至移動(dòng)終端。
2.如權(quán)利要求I所述的基于人臉圖像的信息檢索方法,其特征在于 所述數(shù)據(jù)處理服務(wù)器上預(yù)先存儲(chǔ)有用于匹配所述特征值向量的特征值參照量,所述特征值參照量為預(yù)先學(xué)習(xí)訓(xùn)練建立的。
3.如權(quán)利要求I所述的基于人臉圖像的信息檢索方法,其特征在于 所述當(dāng)前應(yīng)用程序?yàn)橐曨l播放程序、圖片瀏覽程序或者網(wǎng)頁瀏覽程序。
4.如權(quán)利要求I所述的基于人臉圖像的信息檢索方法,其特征在于 所述匹配結(jié)果為文字信息或者包含相關(guān)搜索信息的URL地址,如果返回的是文字信息,則直接顯不在手機(jī)上;如果返回URL地址,則自動(dòng)引導(dǎo)手機(jī)訪問該URL地址。
5.一種基于人臉圖像的信息檢索系統(tǒng),包括移動(dòng)終端及數(shù)據(jù)處理服務(wù)器,其特征在于,所述移動(dòng)終端包括 圖像采集模塊,用于從所述移動(dòng)終端的當(dāng)前應(yīng)用程序中獲取人臉快照數(shù)據(jù); 特征提取模塊,用于對所述圖像采集模塊獲取的人臉快照數(shù)據(jù)進(jìn)行特征值提取以得到特征值向量; 應(yīng)用處理模塊,用于將所述特征值向量發(fā)送至數(shù)據(jù)處理服務(wù)器,并從數(shù)據(jù)處理服務(wù)器接收匹配結(jié)果; 所述數(shù)據(jù)處理服務(wù)器包括 特征庫模塊,用于存儲(chǔ)特征值參照量; 檢索模塊,用于將所述應(yīng)用處理模塊傳來的所述特征值向量與所述特征值參照量進(jìn)行匹配以生成匹配結(jié)果。
6.如權(quán)利要求5所述的基于人臉圖像的信息檢索系統(tǒng),其特征在于所述特征庫模塊上存儲(chǔ)的特征值參照量為預(yù)先學(xué)習(xí)訓(xùn)練建立的。
7.如權(quán)利要求5所述的基于人臉圖像的信息檢索系統(tǒng),其特征在于所述當(dāng)前應(yīng)用程序?yàn)橐曨l播放程序、圖片瀏覽程序或者網(wǎng)頁瀏覽程序。
8.如權(quán)利要求5所述的基于人臉圖像的信息檢索系統(tǒng),其特征在于 所述匹配結(jié)果為文字信息或者包含相關(guān)搜索信息的URL地址,如果返回的是文字信息,則直接顯不在手機(jī)上;如果返回URL地址,則自動(dòng)引導(dǎo)手機(jī)訪問該URL地址。
全文摘要
本發(fā)明公開了一種基于人臉圖像的信息檢索方法及系統(tǒng),適用于移動(dòng)終端,該方法包括圖像采集模塊從移動(dòng)終端的當(dāng)前應(yīng)用程序中獲取人臉快照數(shù)據(jù);對圖像采集模塊獲取的人臉快照數(shù)據(jù)進(jìn)行特征值提取以得到特征值向量;將特征值向量發(fā)送至數(shù)據(jù)處理服務(wù)器上以對特征值向量進(jìn)行檢索匹配,并將匹配結(jié)果返回至移動(dòng)終端。本發(fā)明利用成熟的人臉識(shí)別技術(shù)對移動(dòng)終端應(yīng)用程序中的陌生人圖像或者照片進(jìn)行人臉識(shí)別,并將人臉識(shí)別的特征與存儲(chǔ)在數(shù)據(jù)處理服務(wù)器上的特征參照量進(jìn)行匹配,從而提供該陌生人相關(guān)的檢索信息,便于用戶快速的了解應(yīng)用程序中出現(xiàn)的陌生人的相關(guān)信息,且該檢索方式快捷方便,準(zhǔn)確性高,操作極為人性化,有利于提升用戶操作手機(jī)的滿意度。
文檔編號G06K9/00GK102968473SQ20121045741
公開日2013年3月13日 申請日期2012年11月14日 優(yōu)先權(quán)日2012年11月14日
發(fā)明者曾元清, 劉健 申請人:廣東歐珀移動(dòng)通信有限公司