DeepSeek联合北大发布DSpark框架:大模型推理速度提升60%–85%
6月27日,联合理速DeepSeek团队与北京大学联合发布《DSpark》研究论文,发布该成果聚焦于推测解码(Speculative Decoding)领域,框架提出了一种革新性的大模度提方法以大幅加速大语言模型的推理过程。
针对现有并行“草稿生成”技术中因Token间关联性薄弱导致拒绝率升高及验证算力浪费的型推问题,DSpark创新性地引入了半自回归架构。升–通过在并行生成主干中嵌入轻量级顺序模块,联合理速该框架有效强化了Token间的发布依赖关系,从而显著提升了草稿生成的框架质量。
此外,大模度提DSpark构建了“基于置信度的型推动态验证机制”。该机制能够根据请求的升–成功概率及系统实时负载,自适应地调整验证长度,联合理速进而最小化无效计算开销。发布离线测试数据显示,框架该方法大幅增加了可接受的生成长度;而在DeepSeek-V4线上部署中,相较于基线模型,推理速度实现了60%–85%的显著提升,并有效缓解了高并发场景下的吞吐量衰减问题。
为促进行业技术演进,论文已同步开源模型检查点及训练框架DeepSpec,旨在推动社区在相关方向的深入研究。
(责任编辑:娱乐)
推荐文章
-
北京商报讯记者 蔺雨葳)7月15日,比亚迪官方发布公告披露最新智能驾驶进展:截至目前,比亚迪搭载辅助驾驶系统的车型累计保有量已突破 333万辆。数据显示,6月份比亚迪辅助驾驶车型销量达到 176,31 ...[详细]
-
上海市气象台于今日早晨8时正式发布高温橙色预警信号。气象数据显示,预计今日上海最高气温将攀升至39℃。受南到西南风3~4级影响,沿江沿海地区风力稍大,但气流带来的并非清凉,而是“热烘烘”的闷热感。查看
...[详细]
-
茅山亮相第四届香港文博会: 以道文化为纽带,探索中华文化国际传播新表达
5月15日,第四届香港国际文化创意博览会以下简称“香港文博会”)在中国香港亚洲国际博览馆盛大开幕。句容茅山风景区紧扣“遇事不决 来趟茅山”主题,携道文化展示、养生互动及文创体验等多维内容亮相,向全球客
...[详细]
-
面对消费者追求健康饮食与现有标签晦涩难懂之间的矛盾,世界卫生组织驻华代表近期指出,推行食品包装正面标签是解决不健康饮食问题的高性价比方案。所谓“食品包装正面标签”,即印于包装显眼处的直观标识。它通过图 ...[详细]
-
世界杯决赛门票价格不断上涨:最低3.4万元,最贵高达146万元
“本以为各类离谱票价我们早已见怪不怪,可国际足联此次世界杯决赛门票定价,还是超出了预期底线。”法国《队报》在报道决赛球票时发出了如此感慨。▲国际足联主席 因凡蒂诺 在现场观看 世界杯 比赛 图据IC
...[详细]
-
IT之家 7 月 15 日讯 —— 据中国民航局官网消息,2026 年全国民航年中工作电视电话会议今日在北京召开。民航局局长宋志勇在会议上通报了上半年行业运行数据及无人机管理进展:上半年,全行业运输生
...[详细]
-
新华社 华盛顿 7月14日电据美国阿克西奥斯新闻网站14日援引三名知情人士消息,美国总统特朗普当日在白宫战情室召开紧急会议,深入讨论针对伊朗的大规模进攻计划。美方官员透露,此次行动规模将远超当前围绕霍
...[详细]
-
澳大利亚SBS电视网正式宣布,已拿下冰岛与葡萄牙合拍的犯罪惊悚剧《冷港》Cold Harbour)的独家播放权,并确定该剧将于7月15日在SBS On Demand流媒体平台上线。剧情简介:跨越三国的
...[详细]
-
据齐鲁电视台报道,近年来NFC果汁深受消费者青睐。然而,不少打着“鲜榨”“100%果汁”及“NFC果汁”旗号的菠萝汁、西瓜汁、山竹汁,在电商平台单品销量动辄高达几十万件,其价格却低得令人难以置信。记者
...[详细]
-
上周日,温网男单决赛落下帷幕。新科法网冠军、德国名将亚历山大·兹维列夫在抢七先胜一盘的大好局面下未能守住优势,被卫冕冠军、意大利选手辛纳连扳三盘逆转,遗憾摘银。兹维列夫因此成为公开赛年代以来,继两位前
...[详细]
热点阅读

马赛体育总监:市场给出的结论是格林伍德不值8000万至1亿欧
互联网大厂不香了?AI创业公司正在「吸走」年轻人
一级致癌物却撑起千亿市场:槟榔的灰色生意,为何禁而不止?
