头文字d
超节点、超集群、TPU方案涌现 算力“拼系统”时代产业最关心Token性价比|WAIC观察_我的网站

一 | 以学促干谱新篇 砥砺奋进新征程 蓓蕾学前教育集团党支部12月主题活动 不忘初心 砥砺前行 为提供党员教师的政治素养,有效落实党的二十届三中全会精神。

二 | 杭州市蓓蕾学前教育集团党支部开展了12月主题党日系列活动,让党员在学习中凝心聚力、领略宋韵文化、感悟理解习近平总书记的思想与实践。 01 凝心聚力,深入学习会议精神 2024年12月,杭州市蓓蕾学前教育集团党支部在党员固定日当天组织开展了深入学习党的二十届三中全会精神的活动。

三 | 活动中,党员教师们集中观看了关于党的二十届三中全会的专题视频,党员教师结合各自的教学工作实际,展开了热烈的讨论和交流。

四 | 老师们表示,通过学习,他们对党的二十届三中全会精神有了更加深刻的认识和理解。

五 | 党的二十届三中全会提出的关于进一步深化改革的决策部署,让我们深感责任重大,使命光荣。作为教育工作者,我们不仅要将全会精神融入到日常教学中,还要通过言传身教,引导学生们树立正确的世界观、人生观和价值观。 财联社7月21日讯(记者 付静)“我们真正关注的是Token性价比:在保证模型效果和服务质量的前提下,以更低的综合成本生成更多高质量Token。”2026世界人工智能大会(WAIC)期间,云天励飞-U(688343.SH)方面在接受财联社记者采访时表示。 当下,模型层面训推规模迈向万卡,应用侧C端多款智能体涌现,AI进化为生产生活“搭子”,B端的人工智能真实场景落地也在加速。

六 | 2024 (党支部书记带领全体党员集中学习党的二十届三种全会精神) 活动照片 (各园区党员教师自主学习党的二十届三中全会精神) 02 探秘德寿宫,领略南宋皇家风韵 “德寿宫前春昼长,宫中花开宫外香”,党员老师们齐聚德寿宫,感受宋韵文化! 走进德寿宫,犹如推开了一扇窗,往窗内一瞥,那便是千年风华。在这些需求的带动下,产业链频频传递出“算力供不应求”信号。 财联社记者多方采访获悉,算力进入“拼系统”时代,构建超节点、超集群已经成为主流做法,且收获了下游各行业的积极反应。与此同时,TPU路线正在同步发力,华东地区首座国产TPU千卡智算集群已经落成。多种方案涌现背后,产业最关心的则是Token性价比。 “超节点是未来几年重点方向” 下游已给出积极反应 WAIC期间,华为昇腾950超节点(Atlas 950 SuperPoD)真机、超节点集群Atlas 950 SuperCluster、首个全国产十万卡AI超集群曙光8000(登峰)真机、燧原科技与中兴通讯(000063.SZ)联合打造的正交架构方案“云燧ESL64-O”超节点、阿里云磐久AL128超节点服务器、沐曦股份-U(688802.SH)新一代AI超节点曦景S600、摩尔线程-U(688795.SH)MTT C256超节点、壁仞科技(06082.HK)分布式解耦架构超节点方案、百度智能云超节点“天池”等格外吸睛。 华为昇腾950超节点 图片来源:财联社记者/摄 “云燧 ESL64-O”超节点 图片来源:受访者供图 中兴超节点方案 图片来源:受访者供图 中国电子云则发布了自研的翎枢6020轻量型、翎枢6032平衡型、翎枢6064性能型三款超节点产品。拾级而上,步入宫门,漫步于鳞次栉比、雕梁画栋的重华宫和慈福宫之间,流连忘返于让人眼花缭乱、目不暇接的古玩器物和壁画雕刻彩绘之中,被宋韵文化深深洗礼。 中国电子信息产业集团有限公司首席科学家、中国电子云总工程师朱国平介绍,翎枢超节点将千百张GPU融合为单一逻辑超级单卡,通过Tbps级超高带宽、百纳秒级超低时延、统一内存编址提升算力释放效率。德寿宫这一缕小小的璀璨光华,连接起的是南宋那个慷慨激昂、气壮山河的时代,以及宋韵杭州城市文化血脉里的那抹深深的记忆。翎枢超节点覆盖20-64卡黄金算力区间,相比其他超节点方案,优势在于成本更低、生态开放,可兼容现有风冷、液冷机房。 现在看到的南宋德寿宫遗址博物馆,是在德寿宫考古遗址之上新建立和修复的一座博物馆。真正的德寿宫埋藏在地下,怀着那份好奇,党员老师们走入了德寿宫通往地下室的秘密通道。

七 | 黄土满地,到处都是残垣断壁,这个地下宫殿不仅向我们展示着南宋时期的鼎盛与辉煌,更是无声地诉说着那千年的历史一去不复返。

八 | 所幸随着现代数字科技的发展,弥补了我们的那份遗憾,通过全息投影我们还可以欣赏到虚拟现实技术融合的古今穿越,通过现代技术沉浸式演绎,仿佛身处古代!星河璀璨、光影婆娑,虚虚实实间犹如一梦千年! 03 解读《习近平在浙江》, 习近平总书记的小故事 党支部邀请著名学者洪正邦教授,为党员教师带来“《习近平在浙江》的深层解读与习近平总书记的小故事”专题讲座。 洪教授介绍了《习近平在浙江》一书的主要内容,包括习近平总书记在浙江工作期间的重要思想、实践探索和取得的重要成就。并讲述了习近平总书记在浙江工作时,如何亲自带领各地市和省直有关部门的主要负责人,指导对口扶贫工作的感人故事。

九 | 云天励飞方面也告诉财联社记者,公司未来三年计划推出DeepVerse100P、DeepVerse100D和DeepVerse100L三款芯片,分别针对Prefill、Decode Attention和Decode FFN进行优化,未来在此基础上构建面向万卡异构集群的分离式AI推理基础设施。分享了习近平总书记在日常生活中严以律己、为政清廉的廉洁风范。 财联社记者采访获悉,产业链下游已对超节点、超集群产品有了积极反应。洪教授生动而感人的讲述,让党员老师们深受启发。中科曙光(603019.SH)方面提供的数据显示,曙光8000集群正式上线首周即需求爆满,应用满载运行,目前日均处理作业数突破15万个,单日处理作业峰值超过50万个。

十 | 截至目前,曙光8000已完成近千项超智融合应用适配,覆盖大模型训练、高通量推理、科学计算等多个万卡级规模场景。 上线后快速满载,意味着科研机构、企业和开发者对超大规模、高质量算力的现实需求正在加速释放,也表明十万卡级算力已开始持续承接更加广泛的科研和产业任务。 据悉,曙光8000采用全球首创的高密度机柜结构,单个计算单元算力密度较其他超节点提升20倍,在有限空间内实现更高算力部署;自研scaleFabric类IB原生RDMA高速互连技术,实现十万卡规模稳定互连。大家纷纷表示,通过这次讲座,不仅更加深入地了解了习近平总书记的思想与实践,还从小故事中汲取了宝贵的精神力量。 图文编辑:何与欣 吴亚男 审核:冯晓玲 盛于蓝 主编:金环。 另据媒体报道,华为昇腾384超节点目前已商用落地750多套,规模应用于互联网、运营商、金融、教育、医疗、交通、制造等行业。 一位算力从业者告诉财联社记者,内部连接是超节点及算力集群发展面临的核心问题。“超节点架构、超节点内部的连接,这可能是我们现在包括未来几年重点(攻克)方向,核心是要解决GPU或TPU之间高速互联的问题,通过交换芯片提供单个节点大容量,比如可以提供64卡、128卡这种超大规模的连接,在这个基础上组建更大的千卡、万卡集群。” 据悉,在AI算力基础设施与数据中心网络架构中,Scale-Up、Scale-Out和Scale-Across分别为三种不同层次的扩展模式:Scale-Up(纵向扩展)聚焦于超节点内部的紧密耦合,Scale-Out(横向扩展)侧重于集群之间的规模扩张,Scale-Across(跨域互联)则致力于数据中心之间的广域协同,旨在打破单数据中心的物理极限。 “Scale-Out相对来说更成熟,Scale-Up的挑战更大,这是我们要重点解决的。

十一 | 现在单个GPU Scale-Up领域的带宽都达到TB的级别,单交换机的交换容量可能要达到100T以上。解决了这个问题之后,才能组成大规模的集群。大规模集群要为芯片解决的,就是把极限带宽提高。”前述从业者介绍。

十二 | 财联社记者也从中兴通讯方面获悉,针对AI大模型规模化落地的网络升级要求,其构建的智能算力网络底座,主要聚焦Scale-Out机间网络(优化单集群内部通信效率,实现稳定降本、调优增效)与Scale-Across跨域互联(实现跨数据中心、跨地域的算力资源高效调度)两大核心场景。 TPU路线同步发力 产业最关心Token性价比 除了近几年持续热门的GPU路线,财联社记者还了解到,杭州电信、中兴通讯与中昊芯英联合打造了华东地区(杭州)首座国产TPU千卡智算集群,该集群亦是中国电信体系内首个大规模国产TPU集群部署项目。 “选择做千卡集群而不是万卡集群,是因为我们想把它做成试验田。我们先把千卡级的软件栈系统集成到千卡集群上,在Token Factory上能提供不错的服务,在服务逐步做透的情况下逐步开展二期、三期。未来,我们也希望逐步从千卡向万卡集群迈进,在万卡集群上运行国产模型的训练推理,而且满足所有商用需求所需要的性价比。

十三 | ”中昊芯英创始人、CEO杨龚轶凡告诉财联社记者。 谈及GPU与TPU两条路线如何选择,中国电信杭州分公司智算中心总经理王良表示,“并不见得每个芯片都是全能选手,不同芯片在不同场景下有独特的长处,比如TPU擅长做张量运算,我们评估推理能力是TPU的长处。” 王良还介绍,“上述TPU千卡集群落地后运行得很好,尤其是今年的Token风口起来以后,市场上对Token的需求量很大。最近(我们)和中昊芯英测试完PD分离,这一技术把TPU的优势进一步放大,已经比较满足当初的设计目标。” 据悉,该集群基于“泰则®”智算平台构建,将面向大模型训练、AI推理、科学计算等场景提供全自主算力支撑,该集群二期规划今年9月上线投产。“ 王良进一步谈到,调优将是一项非常重要的工作。他介绍,“现在所有的大模型厂商、芯片厂商,都是拿出百米冲刺的速度在跑马拉松,芯片厂商每年都会发布一个新版本,而大模型厂商每个季度都会发一个新版本,这里面的适配工作量是很大的。

十四 | 我们在持续的调优工作中发现,从年初到现在,TPU集群通过调优实现了超过10倍的效率提升。原来每百万Token的成本如果是100元,现在就差不多能降到10元以下。” WAIC期间,多位受访的算力产业人士均谈及了Token成本问题。 对于模型厂商、AI应用企业和算力运营方而言,真正影响商业化效率的是在一定时间和成本条件下,能够稳定生成多少有效Token。 财联社记者另从AI基础设施及智算云提供商九章云极方面了解到,AI从技术竞赛迈向规模交付,主要面临四个核心卡点:算力成本高企、多芯片计价割裂、GPU利用率困于30%红线、研发缺乏标准化体系。 据悉,九章智算云在全球范围内已部署12个数据中心,算力总规模约22 EFLOPS,配备6600余张GPU卡,具备日产64亿词元(Token)的生产能力。从产出量看,DeepSeek-V4是当前产出最大的模型,日产24.5亿TOKEN,占比38%,随后依次为KIMI 2.5、Qwen-3.5、GLM-5、MiniMax-2.5。其弹性算力体系,已使得某头部模型厂商的项目综合成本最高节省了82.1%。 云天励飞方面则告诉财联社记者,降低Token成本是一项系统工程,从底层的IP、EDA、芯片设计和封装测试,到服务器、互联、软件栈和算力平台,再到模型及应用,各环节都会影响最终的Token生成效率。 据了解,目前国内主流大模型的公开API价格已明显分层。

十五 | 根据不同模型能力和服务方式,常规文本模型的输入价格大致为每百万Token几角钱至十余元,输出价格大致为每百万Token一两元至数十元。

十六 | “现在的问题不是将百万Token成本价格从2毛降到1毛,更多的是提升Token价值,这是算力基建和模型要协力解决的问题。

十七 | 如果价值的问题可以解决,定价2块或10块大家都不觉得贵。”前述算力从业者也表示。

十八 | (财联社记者 付静)。
Current article:http://u78by05.yinkataizengquge.bond/x2o1l/n48n0.html
Published on:20:56:43

淘宝
职来职往