雙流運(yùn)動(dòng)建模-循環(huán)一致性對齊小樣本動(dòng)作識別算法
摘要:針對不同場景下動(dòng)作時(shí)空分布不同導(dǎo)致視頻對齊困難,進(jìn)而影響視頻識別準(zhǔn)確度問題,提出對雙流特征進(jìn)行運(yùn)動(dòng)建模和循環(huán)一致性對齊的小樣本動(dòng)作識別方法,能夠在全局幀和局部塊雙尺度特征建模和對齊高維運(yùn)動(dòng)表示。首先基于雙流特征設(shè)計(jì)了運(yùn)動(dòng)建??蚣?,重塑視頻序列中動(dòng)作表示的時(shí)空聯(lián)系,實(shí)現(xiàn)對視頻動(dòng)作的準(zhǔn)確定位和語義性捕獲;然后,為幫助模型學(xué)習(xí)動(dòng)作間時(shí)空對應(yīng)關(guān)系,引入循環(huán)一致性對齊機(jī)制,利用軟最近鄰查詢的方法,高效對齊視頻動(dòng)作,顯著改善了視頻動(dòng)作的錯(cuò)位問題;最后,結(jié)合基于注意力機(jī)制的時(shí)域交叉匹配模塊,對動(dòng)作類別進(jìn)行推理分類。(剩余8614字)
試讀結(jié)束
-
-
- 燕山大學(xué)學(xué)報(bào)
- 2025年01期