首页|期刊导航|计算机应用研究|基于对抗鲁棒增强的多模态谣言检测方法

基于对抗鲁棒增强的多模态谣言检测方法OA

Adversarial robustness enhanced multimodal rumor detection method

中文摘要英文摘要

针对现有谣言检测数据集模态单一和谣言检测模型面对多模态对抗攻击时鲁棒性较弱的局限性,构建了大规模的多模态谣言数据集MuRumor.该数据集共包含19 733条博文、658 557条评论、12 365个用户,涵盖了文本、图像、评论、用户、社交上下文五个维度的特征数据.在此基础上,提出了基于对抗鲁棒增强的多模态谣言检测模型AR-MRD.该模型引入了文本风格弱化、评论过滤和图像对抗训练机制,并结合评论辅助跨模态一致性机制,实现对多模态特征的高效融合,并显著提升了模型对跨模态对抗攻击的抵抗力.实验结果表明,AR-MRD的准确率达到92.4%,超越了现有的检测方法,并且在对抗性条件下保持了最低的攻击成功率,能够有效抵御文本、图像和评论中的篡改行为.

To address the limitations of existing rumor detection datasets being unimodal and the weak robustness of rumor de-tection models against multimodal attacks,this paper constructed a large-scale multimodal rumor dataset,MuRumor.This dataset contained 19 733 posts,658 557 comments,and 12 365 users,covering text,image,comment,user,and social con-text features.Subsequently,it proposed an adversarial robustness-enhanced multimodal rumor detection(AR-MRD)model.The model introduced text style weakening,comment filtering,and image adversarial training mechanisms,combined with a comment-assisted cross-modal consistency mechanism,achieving efficient fusion of multimodal features and significantly impro-ving the model's resistance to cross-modal adversarial attacks.Experimental results show that AR-MRD achieves an accuracy of 92.4%,surpassing existing detection methods,and maintains the lowest attack success rate under adversarial conditions,indicating its effectiveness in defending against tampering attacks on text,image,and comment modalities.

李婧;陈欣雨;唐瑞;王文贤;王海舟

四川大学 网络空间安全学院,成都 610065||四川大学 网络空间安全研究院,成都 610065||数据安全防护与智能治理教育部重点实验室,成都 610065四川大学 网络空间安全学院,成都 610065||四川大学 网络空间安全研究院,成都 610065||数据安全防护与智能治理教育部重点实验室,成都 610065四川大学 网络空间安全学院,成都 610065||四川大学 网络空间安全研究院,成都 610065||数据安全防护与智能治理教育部重点实验室,成都 610065四川大学 网络空间安全学院,成都 610065||四川大学 网络空间安全研究院,成都 610065||数据安全防护与智能治理教育部重点实验室,成都 610065四川大学 网络空间安全学院,成都 610065||四川大学 网络空间安全研究院,成都 610065||数据安全防护与智能治理教育部重点实验室,成都 610065

信息技术与安全科学

社交媒体谣言多模态谣言检测对抗攻击跨模态融合鲁棒性

social media rumormultimodal rumor detectionadversarial attackcross-modal fusionrobustness

《计算机应用研究》 2026 (9)

2597-2604,8

国家重点研发计划资助项目(2022YFC3303101)中央高校基本科研业务费专项资金资助项目(SCU2024D012)

10.19734/j.issn.1001-3695.2026.01.0005

评论