关闭广告

苏州大学突破:8B模型实现长文理解媲美GPT-4o

科技行者3939人阅读


当我们阅读一本厚厚的小说时,大脑会自动筛选重要情节,忽略无关细节。然而,人工智能在处理长文本时却常常"迷失在细节中",就像一个初读者被海量信息淹没,难以抓住关键要点。现在,苏州大学的研究团队找到了解决这个问题的巧妙方法,他们提出的"语境降噪训练"技术,让AI模型学会了像经验丰富的读者一样,在冗长文本中精准定位关键信息。

这项由苏州大学唐泽成、季百倍、李俊涛等研究人员主导的突破性研究,于2025年1月发表在机器学习顶级预印本平台arXiv上(论文编号:arXiv:2510.05862v1)。令人振奋的是,通过他们的训练方法,一个仅有80亿参数的开源模型在处理长文本任务时,竟然达到了与GPT-4o相当的表现水平。这就好比一个刚入学的学生,通过特殊的学习方法,在阅读理解能力上追平了博士生。

长文本处理一直是AI领域的"老大难"问题。传统的语言模型在面对超长文档时,往往会被无关信息干扰,就像在嘈杂的派对上试图听清某个特定的对话一样困难。研究团队发现,这些模型虽然能"看到"整篇文档,却无法有效区分哪些内容真正重要,哪些只是"噪音"。

为了解决这个问题,研究人员开发了一种名为"语

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

100小时极寒挑战,董明珠图啥?

中国新闻周刊 浏览 3424

迪丽热巴的脸,又被审判了

科学发掘 浏览 885

小米成立新公司,要造电池?

电动知家 浏览 908

限时换新价11.98万 第三代蓝电E5 PLUS正式上市

网易汽车 浏览 3721

特斯拉撞树后打不开车门 5人被困燃烧的车内身亡

每日经济新闻 浏览 4026

春天别总傻傻穿一身黑,看看这些日常穿搭,高级舒适又优雅

静儿时尚达人 浏览 919

女子98万买新房交付前感觉被坑了:设计师都"惊呆"了

1818黄金眼 浏览 15966

装腔鸭王长发男,民间小赛都在比什么?

Vista氢商业 浏览 1651

表现不稳,世体:巴萨对巴尔德和孔德当前展现的水平感到担忧

懂球帝 浏览 3879

搭载华为智驾,奥迪「6系」电车上市,售价30.98万元起|最前线

36氪 浏览 1112

欧盟行业代表:中方出手反制欧盟 法国这一次受伤最重

澎湃新闻 浏览 31574

准美术生持枪闯海湖庄园被击毙:来自特朗普铁粉家庭

新民周刊 浏览 38796

穿出巴黎女人的姿态,要几步?

时尚COSMO 浏览 2344

法媒:阿什拉夫等伤员会前往慕尼黑,为队友加油助威

懂球帝 浏览 947

曼联官方:召回小将惠特利,为北安普顿出场25次打进3球

懂球帝 浏览 3162

涨工资,落地!

国是直通车 浏览 3343

邮报:利物浦体能教练正帮维尔茨提升身体素质,从而适应激烈对抗

直播吧 浏览 4832

陈伟霆透露何穗生产过程经历,坦言不太顺利

今古深日报 浏览 1188

蓝色系的裙装穿搭,色调干净、不张扬不浮夸,定格初夏温柔感

静儿时尚达人 浏览 259

特朗普宣布延长停火 伊朗表态

界面新闻 浏览 1274

媒体:34岁印度穆斯林后裔拿下纽约 令特朗普感到畏惧

南风窗 浏览 33828
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1