游乐游手机版
首页/科技数码/文章详情

DeepSeek新论文提出流形约束超连接框架,梁文锋参与

时间:2026-01-04 15:49
DeepSeek团队近期发布了一篇题为《mHC: Manifold-Constrained Hyper-Connections》(《mHC:流形约束超连接》)的论文,正式推出全新网

DeepSeek研究团队近日发布了一篇题为《mHC: Manifold-Constrained Hyper-Connections》(《流形约束超连接》)的论文,正式推出全新网络架构——mHC。该设计致力于解决大模型训练中普遍存在的不稳定性难题,有望为未来基础模型架构的升级提供关键思路。

论文作者名单中,DeepSeek创始人兼CEO梁文锋作为联合作者参与,核心研发工作由解振达、魏毅轩与曹焕琪主导完成。

DeepSeek 新论文提出“流形约束超连接”(mHC)框架,梁文锋参与撰写

论文链接:https://www.php.cn/link/df4940468534f2c23ad26a7e9c1aba46

据论文披露,mHC通过引入严格的数学约束机制(例如由双随机矩阵定义的流形结构),将传统超连接模块中潜在的信号放大效应从高达3000倍大幅压缩至仅约1.6倍,从而在根本上抑制了梯度爆炸与数值震荡,显著增强训练鲁棒性,同时不牺牲模型表达能力。实测表明,在27B参数规模模型上,采用mHC后推理准确率提升约7%,而训练耗时仅增加6.7%,达成了“低开销、高回报”的协同优化目标。

结合文中提到的“内部多轮大规模验证”以及DeepSeek过往产品迭代节奏,业界普遍预期其下一代旗舰模型V4或将支持长达100万token的上下文窗口,深度适配国产AI加速芯片,并初步集成多模态理解与生成能力。发布时间预计锁定在2026年2月初,借势春节用户活跃高峰集中展示技术突破。

源码地址:点击下载

来源:https://www.php.cn/faq/1931411.html?uid=1246273
上一篇奥迪A6L优惠超16万,S8降幅近25万,豪华运动兼得 下一篇雷军直播亲拆小米SU7回应质疑并现场抽奖送15台新车
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
谷歌升级Google Cloud机密计算产品
科技数码 · 2026-07-07

谷歌升级Google Cloud机密计算产品

IT之家 7 月 6 日消息,谷歌宣布对旗下 Google Cloud 机密计算(Confidential Computing)产品进行升级,新增基于英伟达 Blackwell GPU 的机密虚拟机、开源 AI 提示词加密工具 Prompt Encryption SDK,同步升级 Confident

谷歌要放大招? Gemini 3.5 Pro传7月17日发布,前端碾压Fable 5
科技数码 · 2026-07-07

谷歌要放大招? Gemini 3.5 Pro传7月17日发布,前端碾压Fable 5

谷歌在大模型竞赛中憋出一张重磅底牌。据泄露信息,Gemini 3 5 Pro将于7月17日正式发布,其前端与视觉代码生成能力据称出现跨越式跃升,在多项测试中压制Anthropic的Fable 5,但在硬核推理与复杂工程任务上仍落后于对手。这款姗姗来迟的旗舰模型背后,是一次更为彻底的技术重构。据科技媒

年电池续航最长的荣耀手机别错过
科技数码 · 2026-07-07

年电池续航最长的荣耀手机别错过

在挑选2026年电池续航最长的手机时,许多人关注的不仅仅是实验室测试中的几分钟优势,更看重一天高强度使用后还能剩下多少电量。按照这个标准来看,荣耀X80 Pro Max确实很有代表性,它将大容量电池与真实日常场景紧密结合,是该需求下非常值得优先考虑的一款机型。荣耀X80 Pro Max直接搭载了一块

年高性价比手机推荐 同预算选机更看重长期体验
科技数码 · 2026-07-07

年高性价比手机推荐 同预算选机更看重长期体验

在2026年性价比高的手机推荐榜单中,同价位机型往往更看重长期使用的综合体验。如果仅仅追求低价,很容易忽视续航、耐用性、屏幕素质与通信质量这些日常高频使用的核心维度。荣耀X80 Pro Max的主要竞争力,在于将11000mAh超大电池、军工级防护、万级亮度屏幕以及AI智能体验,全部集成到2000元

小米17系列销量超550万台 Ultra版约23.07万部
科技数码 · 2026-07-07

小米17系列销量超550万台 Ultra版约23.07万部

探讨小米17系列最新销量表现。据数码博主曝光的行业追踪数据,截至2026年第26周(即6月22日至6月28日),小米17系列全系累计销量已成功突破550万台大关。 具体数据方面,系列总销量约为554 01万台。其中,定位顶配的小米17 Ultra贡献了约23 07万部。值得关注的是,面向中端市场的1