首页|期刊导航|计算机工程与应用|多任务局部进化学习——消减负迁移与参数冗余

多任务局部进化学习——消减负迁移与参数冗余OA

Multi-Task Local Evolutionary Learning:Reducing Negative Transfer and Parameter Redundancy

中文摘要英文摘要

为缓解多任务学习中因任务相关性较低而导致的参数负迁移问题,提出一种基于仿生进化学习的局部进化学习(local evolutionary learning,LEL)方法.该方法通过构建局部进化单元,结合任务之间的相关性信息,在模型训练过程中实现参数的局部进化与更新,从而避免不同任务之间的无效参数干扰.当新任务引入时,LEL依据任务相关性动态激活已有进化单元,并选择适应性演化策略以优化各子任务的学习过程.与现有多任务学习模型相比,所提出方法可在保持高相关任务参数共享的同时,有效抑制低相关任务之间的负迁移现象.在多个真实数据集上的实验结果验证了所提方法在提升任务间协同学习能力、提高模型泛化性能及减少冗余参数方面的有效性.

Local evolutionary learning(LEL)is proposed to mitigate parameter negative transfer caused by low inter-task correlation in multi-task learning(MTL).Drawing on bionic evolutionary learning,LEL constructs local evolutionary units that incorporate inter-task correlation information to perform localized evolution and parameter updates during model training,thereby avoiding ineffective parameter interference among tasks.Upon introduction of a new task,LEL dynami-cally activates existing units according to their correlation with the new task,and applies adaptive evolutionary strategies to optimize the learning process of each subtask.Compared with existing MTL models,LEL preserves parameter sharing among highly correlated tasks while effectively reducing negative transfer between low-correlation tasks.Experimental results on multiple real-world datasets demonstrate that LEL enhances collaborative learning ability,improves generaliza-tion performance,and reduces parameter redundancy.

孟庆鑫;虎倩;雷霞;刘建伟

中国石油大学(北京)人工智能学院,北京 102249中国传媒大学 计算机与网络空间安全学院,北京 100024中国传媒大学 媒体融合与传播国家重点实验室,北京 100024中国石油大学(北京)人工智能学院,北京 102249

信息技术与安全科学

多任务学习负迁移深度学习局部进化学习

multi-task learningnegative transferdeep learninglocal evolutionary learning

《计算机工程与应用》 2026 (16)

160-169,10

国家自然科学基金青年科学基金项目(62406299).

10.3778/j.issn.1002-8331.2506-0152

评论