针对深度学习的“失忆症”,科学家提出基于相似性加权交错学习,登上PNAS

访客2年前AI生活311

近日,美国科学院院报(PNAS)刊登了一篇论文,“Learning in deep neural networks and brains with similarity-weighted interleaved learning”,由加拿大皇家学会会士、知名神经科学家 Bruce McNaughton 的团队发表。他们的工作发现,通过将旧信息与新信息进行相似性加权交错训练,深度网络可以快速学习新事物,不仅降低了遗忘率,而且使用的数据量大幅减少。

 

论文作者还作出一个假设:通过跟踪最近活跃的神经元和神经动力学吸引子(attractor dynamics)的持续兴奋性轨迹,可以在大脑中实现相似性加权交错。这些发现可能会促进神经科学和机器学习的进一步发展。

相关文章

企业微信携手上海财经大学共建创新实践中心,打造高校数字化建设标杆

企业微信携手上海财经大学共建创新实践中心,打造高校数字化建设标杆

教育部今年发布的《教育部高等教育司2023年工作要点》强调,要加快高等教育数字化转型,打造高等教育教学新形态,鼓励各高校探索数字化改革试点。7...

蔚来自动驾驶没有内斗

蔚来自动驾驶没有内斗

位于硅谷中心区、占地近8000平的蔚来办公室里,正在举办一场盛大的Party。 这是风尘仆仆而来的李斌,为蔚来北美当家人伍丝丽(Padmas...

2019年图灵奖得主:计算机业的两位大元老!

2019年图灵奖得主:计算机业的两位大元老!

图灵奖获得者:帕特里克·汉拉汉(右)和艾德文·卡特姆(左) 北京时间3月18日晚,ACM(国际计算机协会)正式宣布,将2019图灵...

齐向东出席数字中国建设峰会:以“三个零”举措筑牢数字政法安全防线

4月28日,在第六届数字中国建设峰会“数字福建:数字政法”分论坛上,奇安信集团董事长齐向东在演讲时表示,人工智能作为数字政法建设的“利器”,需...

华为开学焕新季优惠多多,高效学习全家桶助力有为青年入手正当时

华为开学焕新季优惠多多,高效学习全家桶助力有为青年入手正当时

又到一年开学焕新季,广大学子即将走进校园,同时作为新学年的伊始,同学们即将迎来全新的挑战,你有没有做好准备呢?除了学习之外,看电影、打游戏、剪...

5G领航扬帆未来|山东5G+北斗融合数字孪生: 联通科技赋能 守护水利安澜

5G领航扬帆未来|山东5G+北斗融合数字孪生: 联通科技赋能 守护水利安澜

在山东,崇山峻岭之间,数以千计的小型水库星罗棋布。这些水库大多修建于20世纪50到70年代,信息化监控薄弱,一旦遇到极端天气灾害,管理设施短...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。