关闭广告

中科院突破:AI实现持续学习不忘旧知

科技行者940人阅读


这项由中科院计算技术研究所、中科院大学和美团公司合作完成的研究发表于2025年9月,论文编号为arXiv:2509.22072v2。研究团队由杨万里、孙飞、唐瑞等多位研究者组成,其中孙飞博士为通讯作者。这项研究彻底颠覆了学界对一种常用AI训练方法的认知,就像发现了一个被误用多年的"万能工具"其实威力无穷。

当我们学习新知识时,大脑会在不遗忘旧知识的基础上吸收新信息。然而,现在的大型语言模型(比如ChatGPT这类AI系统)在学习新知识时却面临一个严重问题:它们要么无法有效学习新内容,要么学会了新知识却忘记了之前掌握的技能。这就像一个学生在学数学时把语文全忘了,或者学了语文却怎么也记不住数学。

长期以来,研究人员认为传统的"微调"方法(可以理解为给AI补课的一种方式)不适合用来教AI新知识。他们转而开发了各种复杂的新方法,就像医生放弃了常见药物转而研制昂贵的特效药。然而,这项研究发现,问题的根源不在于"微调"方法本身有缺陷,而是过去的使用方式完全错了。

研究团队通过深入分析发现,过去的研究者在使用微调方法时,采用了一种类似"填鸭式"的教学方式:让AI反复学习同一个知识点

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

美媒:美两架军机坠入南海或与燃油无关

北京晚报 浏览 737

打进四强,萨巴伦卡解锁生涯新成就!

网球之家 浏览 16678

恒大公告中许家印妻子成第三方 二人被指"技术性离婚"

每日经济新闻 浏览 87187

普京:俄不拒绝谈判 但西方应先停止供武

环球网资讯 浏览 16208

俄将讨论批准从远东线路向中国供气的法律草案

环球网资讯 浏览 18483

郑丽文喊出新口号 提醒2300万岛民:赖清德想跑就能跑

博览历史 浏览 13477

认真生活的18个锦囊妙计:

黎贝卡的异想世界 浏览 2084

2024年第二周销量:大众领先 特斯拉重回榜单

车市红点 浏览 12695

半两财经|首款eSIM手机发售 国内运营商加速“无卡化”

北青网-北京青年报 浏览 894

有品味的中年女人,穿衣都有4个共同点,看看你掌握了几个

静儿时尚达人 浏览 545

“泰坦”号背后:人类的深海探索到哪儿了?

新京报 浏览 16067

刘亦菲慷慨捐款150万助力香港,助力灾后重建与心理支持

茶韵浮生 浏览 264

又一位香港老戏骨离世

皮皮电影 浏览 656

卫星图像显示以军坦克集结加沙城周围

环球网资讯 浏览 1692

NBA战报:勇士主场105-141惨败鹈鹕,库里仅15分

懂球帝 浏览 12893

初夏穿什么?当然选杨采钰的法式风!

瑞丽网 浏览 18993

今年最好的大银幕电影,没有之一

电影最TOP 浏览 772

胡杏儿曝肚中宝宝现重为4.5斤 有机会将回TVB拍剧

网易娱乐 浏览 26824

林更新在香港冒雨跑步,又高又瘦很自律,腿上有一块淤青 ​​​

素素娱乐 浏览 11050

生成式AI开启大航海时代,但不能靠一个模型走天下

创业邦 浏览 11192

海南离岛小车堵到转"∞"圈:多名新能源车主弃车保返

潇湘晨报 浏览 80128
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1