中国电信联合中科院等实现国产算力跨架构大模型推理技术突破
创始人
2025-12-12 21:42:00
0

今日,中国电信研究院联合中国科学院计算技术研究所、华为昇腾、沐曦等机构,在中国电信云网融合技术中试验证平台上,成功完成了业界首个面向国产算力的跨架构大模型推理技术验证。该技术攻关由中国电信研究院牵头,启动了“Triton统一跨架构推理框架”项目,通过自主研发的Triton跨架构编译器与统一大模型算子库,实现了算子源码在英伟达、昇腾、沐曦三类芯片上的无缝运行。

在本次技术验证中,已完成10余款主流开源模型在三类芯片上的端到端推理测试。核心指标表现优异,平均迁移时间不超过3天,效率较传统适配模式提升超过80%;精度误差控制在0.5%以内,确保了模型推理的可靠性;在同等延迟约束下,系统吞吐达到各芯片原生算子库的90%以上,实现了性能与适配效率的双重优化。框架还内置了benchmark与Profiling工具,能够一键生成跨芯片性能对比报告,为业务方提供选芯决策支撑。

相关内容

热门资讯

特斯拉Roadster量产再跳... 近日,特斯拉首席设计师弗朗茨·冯·霍尔茨豪森在一档节目中透露,新款Roadster即将到来,尽管没有...
腾势Z9GT硬核品质:重撞后车... 近日,一段修车店老板发布的视频展示了腾势Z9GT在经历重度撞击后的车辆状况。视频中,腾势Z9GT车身...
AI模型价格战升级:Anthr... Anthropic于8月10日宣布,其人工智能模型ClaudeSonnet5将维持首发期推广优惠价,...
奔驰AMG GT SUV曝光:... 近日,梅赛德斯AMG官方发布了全新纯电SUV的预告图,该车型有望被命名为AMG GT SUV,基于A...
小米汽车座椅新选择:零重力or... 近日,小米汽车针对网友关于前排两款特色座椅的疑问进行了解答,提供了详细的选装思路。官方建议,若车主经...
宇树科技科创板申购中签率仅0.... 8月10日,宇树科技首次公开发行股票并在科创板上市的网上发行申购情况及中签率公布。本次发行价格为15...
AI智能体威胁升级,OpenA... 8月11日,OpenAI宣布扩展其网络防御服务Daybreak,以应对AI智能体带来的威胁。Dayb...
Anthropic联手麦格理、... 8月11日,人工智能研究公司Anthropic宣布与资产管理企业麦格理和新加坡主权财富基金GIC建立...
架起巴西和中国人民相知相亲的桥... 巴西与中国虽相距万里,但两国人民对美好生活的共同向往、对文化传承的共同珍视、对友谊合作的共同追求,让...
中外专家参访红山文化古迹 2026世界红山文化大会于8月5日至8月6日在辽宁朝阳召开,海内外专家学者齐聚一堂。大会召开前,专家...