注意力機(jī)制特征增強(qiáng)交互融合多模態(tài)情感分析
摘要: 針對(duì)當(dāng)前多模態(tài)情感分析中模態(tài)特征提取與融合存在的局限性,設(shè)計(jì)一種融合注意力機(jī)制的增強(qiáng)交互融合模型。通過(guò)子網(wǎng)絡(luò)提取各模態(tài)關(guān)鍵特征,利用跨模態(tài)交叉注意力強(qiáng)化特征表達(dá)并減少模態(tài)間干擾,計(jì)算各模態(tài)間的權(quán)重系數(shù)表示增強(qiáng)模態(tài)的情感貢獻(xiàn)度,將增強(qiáng)后的高層特征和低層特征進(jìn)行融合。在公開(kāi)數(shù)據(jù)集CH-SIMS和CMU-MOSI上的實(shí)驗(yàn)結(jié)果表明,使用該模型所得平均精度AP分別為82.83%、81.5... (共7頁(yè))
開(kāi)通會(huì)員,享受整站包年服務(wù)