Knowledge Commons of Institute of Automation,CAS
一种基于随机权神经网络的类增量学习与记忆融合方法 | |
李德鹏; 曾志刚 | |
发表期刊 | 自动化学报 |
ISSN | 0254-4156 |
2023 | |
卷号 | 49期号:12页码:2467-2480 |
摘要 | 连续学习(Continual learning, CL)多个任务的能力对于通用人工智能的发展至关重要.现有人工神经网络(Artificial neural networks, ANNs)在单一任务上具有出色表现,但在开放环境中依次面对不同任务时非常容易发生灾难性遗忘现象,即联结主义模型在学习新任务时会迅速地忘记旧任务.为了解决这个问题,将随机权神经网络(Random weight neural networks, RWNNs)与生物大脑的相关工作机制联系起来,提出一种新的再可塑性启发的随机化网络(Metaplasticity-inspired randomized network, MRNet)用于类增量学习(Class incremental learning, Class-IL)场景,使得单一模型在不访问旧任务数据的情况下能够从未知的任务序列中学习与记忆融合.首先,以前馈方式构造具有解析解的通用连续学习框架,用于有效兼容新任务中出现的新类别;然后,基于突触可塑性设计具备记忆功能的权值重要性矩阵,自适应地调整网络参数以避免发生遗忘;最后,所提方法的有效性和高效性通过5个评价指标、5个基准任务序列和10个比较方法在类增量学习场景中得到验证. |
关键词 | 连续学习 灾难性遗忘 随机权神经网络 再可塑性启发 |
DOI | 10.16383/j.aas.c220312 |
引用统计 | |
文献类型 | 期刊论文 |
条目标识符 | http://ir.ia.ac.cn/handle/173211/55767 |
专题 | 学术期刊_自动化学报 |
推荐引用方式 GB/T 7714 | 李德鹏,曾志刚. 一种基于随机权神经网络的类增量学习与记忆融合方法[J]. 自动化学报,2023,49(12):2467-2480. |
APA | 李德鹏,&曾志刚.(2023).一种基于随机权神经网络的类增量学习与记忆融合方法.自动化学报,49(12),2467-2480. |
MLA | 李德鹏,et al."一种基于随机权神经网络的类增量学习与记忆融合方法".自动化学报 49.12(2023):2467-2480. |
条目包含的文件 | 下载所有文件 | |||||
文件名称/大小 | 文献类型 | 版本类型 | 开放类型 | 使用许可 | ||
AAS-CN-2022-0312.pdf(2718KB) | 期刊论文 | 出版稿 | 开放获取 | CC BY-NC-SA | 浏览 下载 |
个性服务 |
推荐该条目 |
保存到收藏夹 |
查看访问统计 |
导出为Endnote文件 |
谷歌学术 |
谷歌学术中相似的文章 |
[李德鹏]的文章 |
[曾志刚]的文章 |
百度学术 |
百度学术中相似的文章 |
[李德鹏]的文章 |
[曾志刚]的文章 |
必应学术 |
必应学术中相似的文章 |
[李德鹏]的文章 |
[曾志刚]的文章 |
相关权益政策 |
暂无数据 |
收藏/分享 |
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。
修改评论