DeepSeek发布DSpark推理加速框架,显著提升大模型生成速度与效率


当业界普遍聚焦于模型智能水平的发布比拼时,DeepSeek持续关注更具实际价值的推理提升挑战:如何显著提升大语言模型的推理速度。
2026年6月28日,加速DeepSeek在开源平台正式发布其全新推理加速框架DSpark,框架并同步公开相关论文。显著型生该框架旨在突破高并发场景下大语言模型推理效率的大模度效关键瓶颈。
本研究由DeepSeek与北京大学联合完成,成速DeepSeek创始人梁文锋参与其中并列名作者。发布项目开源了DSpark的推理提升全部模型权重,并配套发布面向推测解码的加速算法训练代码库DeepSpec。
论文首先指出当前大语言模型的框架核心制约因素:其自回归生成机制要求每生成一个新词元,都必须基于全部已生成词元执行一次完整前向计算。显著型生随着输出长度增加,大模度效延迟呈非线性上升,成速导致GPU资源利用率偏低,发布用户响应时间延长。这一问题在实时对话助手、多轮智能体协作等对延迟高度敏感的服务场景中尤为突出。
目前主流优化路径主要有两类:一类依托自回归结构的草稿模型,另一类采用并行架构的草稿模型。二者虽各有尝试,但在生成质量与系统效率之间难以兼顾,且普遍缺乏对运行负载动态变化的适应能力。
针对上述局限,DeepSeek提出DSpark推测解码框架,采用半自回归生成架构——既保留并行主干带来的高吞吐特性,又引入轻量级串行模块,逐词元注入前缀依赖信息。该模块提供两种实现方式:一种是仅依赖前一词元的马尔可夫头,另一种是通过循环状态持续累积完整前缀信息的RNN头。
实验验证显示,在同等模型深度条件下,仅两层Transformer结构的DSpark,在全部测试任务中均超越五层结构的DFlash模型所达到的接受长度。
目前,DSpark已集成至DeepSeek-V4在线服务系统,并基于真实用户请求流量完成性能实测。结果表明,在保持相同吞吐量的前提下,相较现有生产环境基线系统MTP-1,用户端文本生成速度提升幅度达60%至85%。
此外,DSpark已在多个第三方模型上完成适配验证。以Qwen3系列模型为例,在4亿参数、8亿参数与14亿参数三种规格下,相比自回归草稿方案,单轮平均可接受词元长度分别提升30.9%、26.7%与30%;相比并行草稿方案,则分别提升16.3%、18.4%与18.3%。
(责任编辑:综合)
-
世界杯|四场淘汰赛都在最后时刻分出胜负,阿根廷队绝杀英格兰队挺进决赛
仿佛重演了此前对阵埃及时的惊险剧本,阿根廷队再次在伤停补时阶段完成致命一击。北京时间7月16日,世界杯半决赛激战正酣,阿根廷队以2比1逆转击败英格兰队,成功锁定决赛席位,将与西班牙队展开冠军争夺。英格
...[详细]
-
三堵墙、百日期、生态壁垒⋯⋯印奇硬闯硬件红海 拆解阶跃智能体终端的理想与现实
每经记者:郑欣蔚 每经编辑:魏文艺台风过境后的上海,潮湿晚风中涌动着人工智能AI)行业的新变量。7月13日晚,阶跃星辰在“阶跃终端品牌暨新一代智能体战略发布会”上,由董事长印奇定调:AI智能体的时代已
...[详细]
-
科技早报 | 长鑫科技超级豪华战配名单来袭;美团、青桔、哈啰单车多地调价
第二代豆包手机要来了7月15日,国家网信办发布第7批提供手机端侧生成式人工智能服务已备案信息的公告。此次备案名单涵盖苹果智能、华为小艺、vivo蓝心、小米澎湃及努比亚豆包手机大模型等主流产品。此前,7 ...[详细]
-
业界唯⼀⼀机五投:奕境X9官宣搭载HUAWEI XSCENE车载激光投影
IT之家 7 月 15 日讯,奕境汽车近日持续预热其首款车型——奕境 X9。官方确认,新车将搭载 HUAWEI XSCENE 车载激光投影系统,采用行业首批激光光源,并支持 LCoS 技术以实现高清晰
...[详细]
-
2026年盛夏,全球影视市场上演了一场极具时代隐喻的行业对撞。同样取材于荷马史诗《奥德赛》,同样锁定七月档期上线,却呈现出截然不同的两种工业形态:一边是克里斯托弗·诺兰执导、耗资2.5亿美元、集结好莱
...[详细]
-
7月15日,国务院新闻办公室举行新闻发布会,全面通报2026年上半年国民经济运行情况。数据显示,中国经济在复杂环境中展现出强劲韧性,主要指标保持在合理区间,高质量发展步伐稳健。宏观总量:GDP同比增长
...[详细]
-
国家统计局于7月15日最新公布的数据显示,经初步核算,2026年上半年我国国内生产总值GDP)达到695,704亿元。按不变价格计算,这一数据较上年同期实现4.7%的同比增长,展现出经济基本盘的稳固与 ...[详细]
-
近期东南亚局势动荡,菲律宾与马来西亚因沙巴领土及海洋权益问题公开决裂。两国前高官接连在媒体上相互驳斥,展开激烈的舆论交锋。这场危机的导火索,源于菲律宾两年前单方面向联合国相关机构提交的大陆架划界申请。
...[详细]
-
风波未平,新浪又起。距大S离世已逾一年,本应归于平静的家庭事务,却因一份存于智能手机备忘录中的手写文字,再次引爆遗产归属的激烈争议。据台媒最新披露,该份特殊记录全文曝光。然而,徐氏家族对外口径高度统一
...[详细]
-
©️镜象娱乐文丨徐行2026年7月14日晚,暑期档沉寂已久的大盘被一部《功夫女足》彻底点燃。上映仅4天,该片票房已突破7.5亿元大关:首日斩获2.6亿,上映27分钟即破亿,并连续4天单日票房稳定在1亿
...[详细]

世界杯决赛用球等纪念品将拍卖
顶流导演恋情被曝!和小13岁女友街头秀恩爱,反倒迎来全网祝福声
感动!18年前汶川地震获救的少年,18年后在洪水中救人
媒体:87版《红楼梦》刘姥姥扮演者沙玉华去世
