#今日论文推荐# AI也有健忘症?英国41岁教授专访:解决灾难性遗忘
#今日论文推荐# AI也有健忘症?英国41岁教授专访:解决灾难性遗忘
众所周知,AI在经过训练之后可以很好地完成「考试范围内」的任务,但是这些算法却不能像人类那样不断用新信息更新知识库。
为了学习哪怕是一个新的东西,算法也必须从头开始训练,而代价就是忘记它之前已经学习过的几乎所有内容。如此带来的问题就是——「灾难性遗忘」(Catastrophic Forgetting)。
就像你遇到一个新朋友,你唯一能知道她名字的方法就是重启你的大脑。
之所以会出现这种情况,要归咎于神经网络学习新事物的方式。这些算法的学习需要改变神经元之间的连接强度,然而这同时也代表了过去的知识,因此过多地改变连接就会导致遗忘。
生物神经网络已经进化了数亿年的策略,以确保重要信息保持稳定。但是今天的人工神经网络很难在新旧知识之间取得良好的平衡。当网络看到新数据时,它们的连接很容易被覆盖,这可能导致突然而严重的无法识别过去的信息。
1. 您在哲学方面的学习对你思考研究的方式产生了哪些影响呢?
哲学教会你的是,「如何提出合理的论点」和「如何分析他人的论点?」
我的实验室受到这个问题的启发:如果我们不能做 X,我们怎么能做 Y?
我们会随着时间的推移而学习,但神经网络不会,他的知识量是固定的。那么如果人类未来要想制造通用人工智能,这是必须解决的基本问题。
论文题目:Selective Replay Enhances Learning in Online Continual Analogical Reasoning
详细解读:https://www.aminer.cn/research_report/62eccdc67cb68b460ffc397d
https://www.aminer.cn/research_report/62eccdc67cb68b460ffc397d
AMiner链接:https://www.aminer.cn/?f=cs
本文来自互联网用户投稿,文章观点仅代表作者本人,不代表本站立场,不承担相关法律责任。如若转载,请注明出处。 如若内容造成侵权/违法违规/事实不符,请点击【内容举报】进行投诉反馈!
