專(zhuān)利名稱(chēng):視頻摘要系統(tǒng)的制作方法
技術(shù)領(lǐng)域:
視頻摘要系統(tǒng)
技術(shù)領(lǐng)域:
本實(shí)用新型涉及一種視頻摘要系統(tǒng),尤其是應(yīng)用于視頻監(jiān)控系統(tǒng)的視頻摘要系統(tǒng)。
技術(shù)背景如今,視頻監(jiān)控系統(tǒng)在全球范圍內(nèi)廣泛用于加強(qiáng)公共安全、調(diào)查和防范違法與犯罪活動(dòng)以及預(yù)防損失等方面。它同樣可作為一種改善員工工作業(yè)績(jī)的有效工具。雖然視頻監(jiān)控領(lǐng)域的技術(shù)在不斷發(fā)展,但是監(jiān)控視頻錄像仍是一項(xiàng)高成本,耗費(fèi)時(shí)間的任務(wù),它往往需要一個(gè)龐大的團(tuán)隊(duì)來(lái)查看和分析捕獲的視頻。傳統(tǒng)的視頻監(jiān)控系統(tǒng)中,隨著監(jiān)控節(jié)點(diǎn)的增多,對(duì)監(jiān)控視頻的瀏覽和回顧更加消耗人力。一般視頻可以選擇拖放,一遍查看不同時(shí)間段的視頻,或者采用加速播放來(lái)提高視頻的瀏覽速度,但由于監(jiān)控視頻的時(shí)間非常長(zhǎng),即使采用這些方式也提高不了多大的瀏覽速度,而大幅度的跳過(guò)播放片段,或提高播放速度又很有可能漏掉需要的信息,所以建立一種能夠快速瀏覽監(jiān)控視頻的系統(tǒng),以便快速找到需要的視頻內(nèi)容是非常有實(shí)用價(jià)值的。
發(fā)明內(nèi)容針對(duì)上述問(wèn)題,本實(shí)用新型提出一種視頻摘要系統(tǒng),該視頻摘要系統(tǒng)通過(guò)建立視頻剪輯,提供簡(jiǎn)短的視頻摘要,將完整的視頻以濃縮片的形式完整地顯示出來(lái)。該系統(tǒng)包括電連接的摘要處理模塊,將接收到的視頻源文件制作為視頻摘要,輸入模塊,與摘要處理模塊電連接,接入并讀取視頻源文件,并將其傳送給所述摘要處理模塊,數(shù)據(jù)庫(kù)模塊,與摘要處理模塊電連接,用于存儲(chǔ)所述摘要處理模塊中生成的數(shù)據(jù),輸出模塊,與數(shù)據(jù)庫(kù)模塊電連接,用于播放和導(dǎo)出制作的視頻摘要;當(dāng)所述輸入模塊讀取視頻源文件后,將所述視頻源文件里面的視頻信息傳遞給摘要處理模塊,所述摘要處理模塊根據(jù)所述視頻信息制作視頻摘要,并通過(guò)輸出模塊輸出。其中的核心模塊為摘要處理模塊,其進(jìn)一步包括相互電連接的目標(biāo)檢測(cè)模塊,目標(biāo)跟蹤模塊和摘要生成模塊。其中的目標(biāo)檢測(cè)模塊采用混合高斯模型處理,將其中的運(yùn)動(dòng)目標(biāo)提取為一個(gè)一個(gè)的運(yùn)動(dòng)塊;所述目標(biāo)跟蹤模塊與目標(biāo)檢測(cè)模塊電連接,將前述的運(yùn)動(dòng)塊進(jìn)行處理后,與前一幀中相對(duì)應(yīng)的運(yùn)動(dòng)塊進(jìn)行匹配,實(shí)現(xiàn)目標(biāo)的跟蹤,并將跟蹤結(jié)果以及背景數(shù)據(jù)等以列表形式存入所述數(shù)據(jù)庫(kù)模塊中。所述摘要生成模塊根據(jù)存入所述數(shù)據(jù)庫(kù)模塊中的數(shù)據(jù)列表采用多線(xiàn)程方式,將運(yùn)動(dòng)塊不同時(shí)間的視頻截圖同時(shí)顯示于同一畫(huà)面中, 這樣就可以將一段時(shí)間之內(nèi)的視頻內(nèi)容濃縮地顯示于同一幀中,當(dāng)這些濃縮后的視頻幀連貫起來(lái),便可以形成整段視頻的摘要。采用這種視頻摘要系統(tǒng)既提高了瀏覽速度,又不會(huì)漏掉重要信息。還可以將視頻源文件和視頻摘要之間設(shè)置相關(guān)鏈接,當(dāng)查看到需要的信息時(shí),可直接點(diǎn)擊視頻摘要,以鏈接到相關(guān)的視頻源文件進(jìn)行詳細(xì)查看。所述目標(biāo)跟蹤模塊可進(jìn)一步包括跟蹤處理模塊,用以計(jì)算前述提取的運(yùn)動(dòng)塊的多個(gè)參數(shù),比如運(yùn)動(dòng)塊的坐標(biāo)、質(zhì)心,運(yùn)動(dòng)塊的長(zhǎng)、寬、高等,然后將其與前一幀中存在的塊所計(jì)算的參數(shù)進(jìn)行逐一匹配,找到連續(xù)幀之間的塊與塊的對(duì)應(yīng)關(guān)系,實(shí)現(xiàn)目標(biāo)的跟蹤。所述目標(biāo)跟蹤模塊還可進(jìn)一步包括預(yù)測(cè)濾波器,采用預(yù)測(cè)濾波器修正跟蹤結(jié)果中目標(biāo)的坐標(biāo),使相互遮擋的運(yùn)動(dòng)塊能繼續(xù)跟蹤。處理過(guò)程中的背景信息以及跟蹤信息均存入所述數(shù)據(jù)庫(kù)模塊。隨著播放時(shí)間的不同,播放的目標(biāo)會(huì)變換,所以所述摘要生成模塊可進(jìn)一步包括一個(gè)播放處理模塊,采用目標(biāo)輪詢(xún)方式處理運(yùn)動(dòng)塊的坐標(biāo),以實(shí)現(xiàn)運(yùn)動(dòng)塊的播放切換;采用顏色混合方式對(duì)運(yùn)動(dòng)塊重疊部分的透明化處理。。為了方便用戶(hù)的輸入、輸出以及查閱等操作,可在該視頻摘要系統(tǒng)中加入在線(xiàn)輸入模塊和離線(xiàn)輸入模塊,導(dǎo)出模塊,以及摘要管理模塊,方便用戶(hù)輸入視頻源文件,輸出視頻摘要,和查詢(xún)管理所剪輯的視頻摘要。本實(shí)用新型的視頻摘要系統(tǒng),可用于制作安防監(jiān)控系統(tǒng),公路交通系統(tǒng)等各個(gè)方面,將龐大的監(jiān)控?cái)?shù)據(jù)進(jìn)行濃縮,可直接從濃縮的摘要系統(tǒng)中鏈接到視頻源文件,方便了視頻信息的管理。而且提高了瀏覽速度,使查找有用信息的時(shí)間大大縮短,同時(shí)又不會(huì)遺漏重要fn息。
圖1為本實(shí)用新型的系統(tǒng)連接示意圖;圖2為本實(shí)用新型的主要模塊連接示意圖;圖3為本實(shí)用新型的摘要處理模塊連接示意圖;圖4為本實(shí)用新型的摘要管理模塊連接示意圖。
具體實(shí)施方式參見(jiàn)圖1,本視頻摘要系統(tǒng)包括電連接的輸入模塊1,摘要處理模塊2,數(shù)據(jù)庫(kù)模塊 3和輸出模塊4,其中摘要處理模塊2為核心模塊,用于將接收到的視頻源文件制作為視頻摘要,輸入模塊1用于接入并讀取需要制作摘要的視頻源文件,并將其傳送給所述的摘要處理模塊2。所述數(shù)據(jù)庫(kù)模塊3用于存儲(chǔ)所述摘要處理模塊2中生成的數(shù)據(jù),所述輸出模塊 4用于將制作的摘要進(jìn)行播放或?qū)С?。參?jiàn)圖2,所述的摘要處理模塊2其進(jìn)一步包括相互電連接的目標(biāo)檢測(cè)模塊21,目標(biāo)跟蹤模塊22和摘要生成模塊23 ;其中的目標(biāo)檢測(cè)模塊21采用混合高斯模型處理,將其中的運(yùn)動(dòng)目標(biāo)提取為一個(gè)一個(gè)的運(yùn)動(dòng)塊;所述目標(biāo)跟蹤模塊22與目標(biāo)檢測(cè)模塊21電連接, 將前述的運(yùn)動(dòng)塊進(jìn)行處理后,與前一幀中相對(duì)應(yīng)的運(yùn)動(dòng)塊進(jìn)行匹配,實(shí)現(xiàn)目標(biāo)的跟蹤,并將跟蹤結(jié)果以及背景數(shù)據(jù)等以列表形式存入所述數(shù)據(jù)庫(kù)模塊3中。其中目標(biāo)檢測(cè)模塊21用于將其中的運(yùn)動(dòng)目標(biāo)提取為一個(gè)一個(gè)的運(yùn)動(dòng)塊。近年來(lái), 混合高斯模型在復(fù)雜背景建模方面得到了廣泛的使用,本目標(biāo)檢測(cè)模塊21也是采用混合高斯模型對(duì)視頻中的運(yùn)動(dòng)目標(biāo)進(jìn)行檢測(cè),能準(zhǔn)確地將運(yùn)動(dòng)目標(biāo)提取為運(yùn)動(dòng)塊。傳統(tǒng)混合高斯模型的算法描述如下首先,為圖像中的每一個(gè)像素點(diǎn)建立K個(gè)高
4斯模型,K 一般取值為3-5。通過(guò)對(duì)K個(gè)模型的權(quán)值的分析,來(lái)確定一個(gè)像素值是屬于背景或前景目標(biāo),使模型能夠克服環(huán)境中的干擾因素,如樹(shù)葉搖動(dòng)、水波蕩漾等。設(shè)Xt表示像素點(diǎn)在t時(shí)刻的值。則Xt的概率函數(shù)可以表示為
權(quán)利要求1.一種視頻摘要系統(tǒng),其特征在于所述系統(tǒng)包括電連接的摘要處理模塊,將接收到的視頻源文件制作為視頻摘要,輸入模塊,與摘要處理模塊電連接,接入并讀取視頻源文件,并將其傳送給所述摘要處理模塊,數(shù)據(jù)庫(kù)模塊,與摘要處理模塊電連接,用于存儲(chǔ)所述摘要處理模塊中生成的數(shù)據(jù),輸出模塊,與數(shù)據(jù)庫(kù)模塊電連接,用于播放和導(dǎo)出制作的視頻摘要;當(dāng)所述輸入模塊讀取視頻源文件后,將所述視頻源文件里面的視頻信息傳遞給摘要處理模塊,所述摘要處理模塊根據(jù)所述視頻信息制作視頻摘要,并通過(guò)輸出模塊輸出。
2.如權(quán)利要求1所述的視頻摘要系統(tǒng),其特征在于所述摘要處理模塊進(jìn)一步包括相互電連接的目標(biāo)檢測(cè)模塊,將接收到的視頻源文件采用混合高斯模型處理,并將其中的運(yùn)動(dòng)目標(biāo)提取為一個(gè)運(yùn)動(dòng)塊;目標(biāo)跟蹤模塊,將所述目標(biāo)檢測(cè)模塊中的運(yùn)動(dòng)塊,進(jìn)行處理后并與上一幀中相對(duì)應(yīng)的運(yùn)動(dòng)塊進(jìn)行匹配,實(shí)現(xiàn)目標(biāo)的跟蹤,并將跟蹤結(jié)果及背景數(shù)據(jù)以列表形式存入所述數(shù)據(jù)庫(kù)模塊;摘要生成模塊,根據(jù)所述數(shù)據(jù)庫(kù)模塊中的數(shù)據(jù)列表,采用多線(xiàn)程方式,將運(yùn)動(dòng)塊不同時(shí)間的視頻截圖同時(shí)顯示于同一畫(huà)面。
3.如權(quán)利要求2所述的視頻摘要系統(tǒng),其特征在于所述混合高斯模型中的方差采用固定方差,并且在運(yùn)動(dòng)目標(biāo)檢測(cè)過(guò)程中對(duì)檢測(cè)結(jié)果進(jìn)行分析,動(dòng)態(tài)調(diào)整高斯模型的參數(shù),提高算法對(duì)環(huán)境的適應(yīng)能力。
4.如權(quán)利要求2所述的視頻摘要系統(tǒng),其特征在于所述目標(biāo)跟蹤模塊進(jìn)一步包括跟蹤處理模塊,與目標(biāo)檢測(cè)模塊電連接,用于確定所述運(yùn)動(dòng)塊的屬性參數(shù),并將其與前一幀中存在的運(yùn)動(dòng)塊對(duì)應(yīng)的參數(shù)進(jìn)行匹配,實(shí)現(xiàn)目標(biāo)的跟蹤。
5.如權(quán)利要求4所述的視頻摘要系統(tǒng),其特征在于所述屬性參數(shù)包括運(yùn)動(dòng)塊的坐標(biāo)、 質(zhì)心、大小、顏色中的一元或多元。
6.如權(quán)利要求2所述的視頻摘要系統(tǒng),其特征在于所述目標(biāo)跟蹤模塊進(jìn)一步包括預(yù)測(cè)濾波器,采用預(yù)測(cè)濾波器修正跟蹤結(jié)果中目標(biāo)的坐標(biāo),使相互遮擋的運(yùn)動(dòng)塊能繼續(xù)跟蹤。
7.如權(quán)利要求6所述的視頻摘要系統(tǒng),其特征在于所述預(yù)測(cè)濾波器為卡爾曼濾波器。
8.如權(quán)利要求2所述的視頻摘要系統(tǒng),其特征在于所述摘要生成模塊進(jìn)一步包括播放處理模塊,采用目標(biāo)輪詢(xún)方式處理運(yùn)動(dòng)塊的坐標(biāo),以實(shí)現(xiàn)運(yùn)動(dòng)塊的播放切換;采用顏色混合方式對(duì)運(yùn)動(dòng)塊重疊部分的透明化處理。
9.如權(quán)利要求1所述的視頻摘要系統(tǒng),其特征在于所述輸出模塊進(jìn)一步包括摘要播放模塊,接收由數(shù)據(jù)庫(kù)模塊導(dǎo)入的視頻摘要,并將其導(dǎo)出;原視頻播放模塊,接收由數(shù)據(jù)庫(kù)模塊導(dǎo)入的用于制作摘要的視頻源文件,并將其導(dǎo)出;導(dǎo)出模塊,接收由數(shù)據(jù)庫(kù)模塊導(dǎo)入的摘要屬性報(bào)告或文件查詢(xún)報(bào)表,并將其導(dǎo)出。
10.如權(quán)利要求1所述的視頻摘要系統(tǒng),其特征在于所述輸入模塊進(jìn)一步包括在線(xiàn)輸入模塊,接入并讀取實(shí)時(shí)在線(xiàn)的視頻源文件,并將其傳送給所述摘要處理模塊,離線(xiàn)輸入模塊,接入并讀取離線(xiàn)的視頻源文件,并將其傳送給所述摘要處理模塊。
專(zhuān)利摘要本實(shí)用新型是一種可應(yīng)用于視頻監(jiān)控系統(tǒng)的視頻摘要系統(tǒng),該系統(tǒng)包括摘要處理模塊,輸入模塊,數(shù)據(jù)庫(kù)模塊和輸出模塊,當(dāng)所述輸入模塊讀取視頻源文件后,將所述視頻源文件里面的視頻信息傳遞給摘要處理模塊,所述摘要處理模塊根據(jù)所述視頻信息制作視頻摘要,并通過(guò)輸出模塊輸出。其中的核心模塊為摘要處理模塊,將視頻中的運(yùn)動(dòng)目標(biāo)提取為的運(yùn)動(dòng)塊,進(jìn)行處理后,與前一幀中相對(duì)應(yīng)的運(yùn)動(dòng)塊進(jìn)行匹配,實(shí)現(xiàn)目標(biāo)的跟蹤,并將運(yùn)動(dòng)塊在不同時(shí)間的位置同時(shí)顯示于同一幀畫(huà)面中,這樣就可以將一段時(shí)間之內(nèi)的視頻內(nèi)容濃縮地顯示于同一幀中,當(dāng)這些濃縮后的視頻幀連貫起來(lái),便可以形成整段視頻的摘要。
文檔編號(hào)G06F17/30GK202003350SQ20102066053
公開(kāi)日2011年10月5日 申請(qǐng)日期2010年12月14日 優(yōu)先權(quán)日2010年12月14日
發(fā)明者周勇, 李斐, 閻琳 申請(qǐng)人:廣東鑫程電子科技有限公司