1.一種基于模態(tài)感知特征學(xué)習(xí)的rgbt目標(biāo)跟蹤方法,其特征是構(gòu)建目標(biāo)跟蹤模型用于rgbt目標(biāo)跟蹤任務(wù),包括以下步驟:
2.根據(jù)權(quán)利要求1所述的基于模態(tài)感知特征學(xué)習(xí)的rgbt目標(biāo)跟蹤方法,其特征是步驟s2.3中,用通道聚合與分發(fā)機(jī)制實(shí)現(xiàn)通道特征增強(qiáng),具體如下:
3.根據(jù)權(quán)利要求1所述的基于模態(tài)感知特征學(xué)習(xí)的rgbt目標(biāo)跟蹤方法,其特征是步驟s2.3中,空間特征相似度感知采用空間相似度計(jì)算機(jī)制,通過(guò)相似性學(xué)習(xí)來(lái)產(chǎn)生感知實(shí)例的殘差,具體如下:
4.根據(jù)權(quán)利要求1所述的基于模態(tài)感知特征學(xué)習(xí)的rgbt目標(biāo)跟蹤方法,其特征是步驟s2.6中,通過(guò)約束損失實(shí)現(xiàn)三分支相互關(guān)聯(lián),具體如下:
5.根據(jù)權(quán)利要求1所述的基于模態(tài)感知特征學(xué)習(xí)的rgbt目標(biāo)跟蹤方法,其特征是步驟s4.2中更新策略為:根據(jù)三分支預(yù)測(cè)頭輸出的置信度得分,將目標(biāo)跟蹤狀態(tài)分為穩(wěn)態(tài)、暫穩(wěn)態(tài)和非穩(wěn)態(tài),穩(wěn)態(tài)定義為m個(gè)連續(xù)幀的置信度評(píng)分大于0.9的狀態(tài),一旦達(dá)到穩(wěn)定狀態(tài),將當(dāng)前目標(biāo)模板更新取代初始目標(biāo)模板;如果置信度分?jǐn)?shù)在0.7~0.9之間,則認(rèn)為跟蹤器處于暫穩(wěn)態(tài),目標(biāo)模板在此時(shí)間段內(nèi)保持不變;如果置信度小于0.7且累計(jì)達(dá)到n次,則跟蹤器處于非穩(wěn)態(tài),當(dāng)前目標(biāo)模板重置為第一幀的初始目標(biāo)模板。