1.基于圖像與聲音識(shí)別的校園安全防范系統(tǒng),其特征在于:包括以下模塊:
2.根據(jù)權(quán)利要求1所述的基于圖像與聲音識(shí)別的校園安全防范系統(tǒng),其特征在于:圖像識(shí)別模塊對(duì)采集的視頻數(shù)據(jù)以及聲音數(shù)據(jù)進(jìn)行處理;
3.根據(jù)權(quán)利要求2所述的基于圖像與聲音識(shí)別的校園安全防范系統(tǒng),其特征在于:步驟s203中,圖像預(yù)處理具體為:
4.根據(jù)權(quán)利要求2所述的基于圖像與聲音識(shí)別的校園安全防范系統(tǒng),其特征在于:步驟s3中,通過(guò)卷積神經(jīng)網(wǎng)絡(luò)提取特征具體為:
5.根據(jù)權(quán)利要求2所述的基于圖像與聲音識(shí)別的校園安全防范系統(tǒng),其特征在于:步驟s4中,使用yolo識(shí)別模型對(duì)圖像幀中的動(dòng)作進(jìn)行識(shí)別具體為:
6.根據(jù)權(quán)利要求2所述的基于圖像與聲音識(shí)別的校園安全防范系統(tǒng),其特征在于:完成對(duì)視頻數(shù)據(jù)以及聲音數(shù)據(jù)處理后,進(jìn)行特征融合;特征融合具體為:將從圖像和聲音數(shù)據(jù)中提取的特征進(jìn)行融合,形成一個(gè)綜合的特征向量或表示,用于捕捉圖像和聲音之間的相關(guān)性和互補(bǔ)性。
7.根據(jù)權(quán)利要求6所述的基于圖像與聲音識(shí)別的校園安全防范系統(tǒng),其特征在于:使用融合后的特征向量訓(xùn)練機(jī)器學(xué)習(xí)或深度學(xué)習(xí)模型,具體為:
8.根據(jù)權(quán)利要求7所述的基于圖像與聲音識(shí)別的校園安全防范系統(tǒng),其特征在于:危害行為判斷:當(dāng)模型識(shí)別出事件同時(shí)出現(xiàn)在圖像和聲音數(shù)據(jù)中,那么數(shù)據(jù)處理單元判斷危害行為存在,需要制止。