2000 Tokens/s!寒序科技推出国产LPU推理芯片:让权重不再“搬家”

快科技
2026-09-01 11:24:45

  寒序科技今日正式公布uHBM与uLPU推理计算架构,成为国内首家将MRAM磁存储与计算单元深度整合的芯片公司。其核心思路是:与其把存储和计算之间的路修得更宽,不如让权重直接“住”在计算单元旁边。

  大模型推理进入Decode阶段后,每生成一个Token,数十亿颗权重都要被反复读取。寒序科技的方案是将模型权重长期驻留在Persistent MRAM阵列中,在同一颗Compute-Memory Die内完成矩阵-向量运算,系统只传递低维激活向量。

2000 Tokens/s!寒序科技推出国产LPU推理芯片:让权重不再“搬家”

  首代uHBM架构片内权重读出带宽设计值最高24TB/s。面向4B多模态主干模型,uLPU的Decode性能目标超过2000 Tokens/s。

  产品形态方面,寒序规划了从uHBM-Die、uLPU-Chip到Module、2U Tray和Rack的完整路线。

2000 Tokens/s!寒序科技推出国产LPU推理芯片:让权重不再“搬家”

  端侧产品uLPU Edge由uHBM与NPU协同,面向机器人等物理AI场景;云端uLPU Cloud通过UCIe实现片间扩展,借助112G/224G SerDes构建机柜级系统。首代完整工程产品已进入流片前收敛阶段。

  寒序科技成立于2023年8月,孵化于北京大学应用磁学中心。其验证芯片SpinPU-ED01已回片,集成120个MRAM Bank,实测片上访存带宽密度达0.105 TB/(mm²·s),并完成端到端模型推理与连续24小时稳定运行。

2000 Tokens/s!寒序科技推出国产LPU推理芯片:让权重不再“搬家”

  值得一提的是,24TB/s和2000 Tokens/s目前仍是架构设计值,完整性能、功耗和模型兼容性还需等首代工程产品流片实测才能确定。

  寒序科技方面表示,验证芯片回答了“这条路能不能走”,接下来两年的核心任务是把架构真正做成可量产的产品。

2000 Tokens/s!寒序科技推出国产LPU推理芯片:让权重不再“搬家”

【版权提示】每日芯片网倡导尊重与保护知识产权。未经许可,任何人不得复制、转载、或以其他方式使用本网站的内容。如发现本站文章存在版权问题,烦请提供版权疑问、身份证明、版权证明、联系方式等发邮件至 1069823586@qq.com,我们将及时沟通与处理。

猜你喜欢

直击车窗夹手痛点!泰矽微发布TSP007车规级电容防夹专用芯片

泰矽微正式发布车规级电容防夹专用芯片TSP007。该芯片面向汽车智能开闭件应用,可为电动车门、前备箱、电动尾门、车窗等开闭机构提供电容式主动防夹单芯片解决方案。据泰矽微介绍,TSP007基于公司已验证

芯片

1天前

长鑫利润率反超三星SK海力士:存储芯片企业全球最高

据《日经亚洲》引用FactSet数据,2026年第二季度,长鑫存储息税前利润率达到82%,一举超过SK海力士(76%)、三星电子半导体业务(70%),成为当期全球盈利水平最高的存储芯片厂商,同期长鑫营

首发高通最强芯片!小米18 Pro Max跑分出炉:多核成绩突破1.2万分

继小米18Fold折叠屏之后,小米18系列新成员即将登场。日前小米18ProMax现身Geekbench跑分网站。该机全球首发高通第六代骁龙8超级至尊版旗舰平台,其单核成绩为3582分,多核成绩为12

存储芯片价格已经涨够了 铠侠率先刹车:报价不再大涨

内存、闪存两大存储芯片已经涨了一年整了,内存整体涨幅5-10倍,闪存3-5倍之间,大家都在担心价格还会继续大涨,但铠侠已经率先出来喊话涨够了。铠侠就是之前的东芝存储芯片部门,是NAND闪存的发明人,也

跟苹果新机抢风头!小米 18 Fold今日首销:首发玄戒O3芯片 10999元起

小米18Fold今天正式迎来全渠道开售,选这个时间点的用意十分耐人寻味,刚好卡着苹果官宣首款折叠屏iPhoneDuo的隔天发售,摆明了要和刚发布的苹果新旗舰正面对标竞争,这款产品本身也是小米迄今为止冲

存储芯片大涨苹果也扛不住了!iPhone 17涨价800元 起售价6799元

今日,苹果正式发布iPhone18Pro系列、首款折叠屏手机iPhoneDuo等多款新品。不过,就在新机亮相的同时,上一代iPhone17标准版也迎来价格调整,两档存储版本均上涨800元。其中,iPh

iPhone 17

2天前