关闭广告

苏州大学突破:8B模型实现长文理解媲美GPT-4o

科技行者2428人阅读


当我们阅读一本厚厚的小说时,大脑会自动筛选重要情节,忽略无关细节。然而,人工智能在处理长文本时却常常"迷失在细节中",就像一个初读者被海量信息淹没,难以抓住关键要点。现在,苏州大学的研究团队找到了解决这个问题的巧妙方法,他们提出的"语境降噪训练"技术,让AI模型学会了像经验丰富的读者一样,在冗长文本中精准定位关键信息。

这项由苏州大学唐泽成、季百倍、李俊涛等研究人员主导的突破性研究,于2025年1月发表在机器学习顶级预印本平台arXiv上(论文编号:arXiv:2510.05862v1)。令人振奋的是,通过他们的训练方法,一个仅有80亿参数的开源模型在处理长文本任务时,竟然达到了与GPT-4o相当的表现水平。这就好比一个刚入学的学生,通过特殊的学习方法,在阅读理解能力上追平了博士生。

长文本处理一直是AI领域的"老大难"问题。传统的语言模型在面对超长文档时,往往会被无关信息干扰,就像在嘈杂的派对上试图听清某个特定的对话一样困难。研究团队发现,这些模型虽然能"看到"整篇文档,却无法有效区分哪些内容真正重要,哪些只是"噪音"。

为了解决这个问题,研究人员开发了一种名为"语

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

蒋欣节目中直言自己没人追,理想型竟然是他!

青史楼兰 浏览 2396

获皮奥利称赞!小法回应:很感谢他,去年曾联系他并聊了两个小时

直播吧 浏览 3488

"上海第一黄鱼面馆"塌房 当着执法队员面使用过期香干

潇湘晨报 浏览 30011

阿维塔通报“南宁15辆车连撞事故”:辅助驾驶功能未激活,事故因驾驶员导致

红星资本局 浏览 1585

在场-40遭20岁超星碾压:33岁奥迪14中5吞惨烈一战 重返NBA搁浅?

颜小白的篮球梦 浏览 2730

MIT所长涉嫌图片操纵,《自然》发布关注声明

知识分子 浏览 3229

坦克400预售:新增激光雷达,支持高阶辅助驾驶

IT之家 浏览 2729

Amazon和UCLA团队突破传统界限,开启无监督智能训练新纪元

科技行者 浏览 1708

这条裙子,今年悄悄火遍全网,冬天穿好有氛围

黎贝卡的异想世界 浏览 2126

中国信达“新帅”落定 宋卫刚出任总裁

21金融圈 浏览 1697

60+女性穿搭指南来了:4招告别“大妈感”,解锁冬日优雅气质

静儿时尚达人 浏览 1660

存款“搬家”到股市?央行最新报告详解五组利率比价关系 资产配置调整和市值变化影响金融资产结构

财联社 浏览 2561

光伏重大资产重组终止

21世纪经济报道 浏览 1867

前央视主持人水均益直播 额头顶"中国人"纸条否认移民

极目新闻 浏览 8025

潮汕三兄弟造“电驴”,9个月狂揽148亿

雷达财经 浏览 1371

女孩被篮球砸头后确诊癔症自残失禁 母亲:我也不理解

上游新闻 浏览 8550

太强了!“宁王”净赚722亿元,分红361亿元,曾毓群能分到多少?

数字财经智库 浏览 659

今年,北京要把奥林匹克塔打造成机器人餐厅!

北京商报 浏览 1403

摩尔线程:股票价格可能存在短期上涨过快出现的下跌风险

网易财经 浏览 1985

女孩引产遭拒生女婴被医生"送人" 抱养方称捡弃婴露馅

澎湃新闻 浏览 9123

卡位AI算力基建狂潮,鸿辉光通加快实现向光器件隐形龙头的蜕变

第一财经资讯 浏览 3306
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1