中国电信联合中科院等实现国产算力跨架构大模型推理技术突破
创始人
2025-12-12 21:42:00
0

今日,中国电信研究院联合中国科学院计算技术研究所、华为昇腾、沐曦等机构,在中国电信云网融合技术中试验证平台上,成功完成了业界首个面向国产算力的跨架构大模型推理技术验证。该技术攻关由中国电信研究院牵头,启动了“Triton统一跨架构推理框架”项目,通过自主研发的Triton跨架构编译器与统一大模型算子库,实现了算子源码在英伟达、昇腾、沐曦三类芯片上的无缝运行。

在本次技术验证中,已完成10余款主流开源模型在三类芯片上的端到端推理测试。核心指标表现优异,平均迁移时间不超过3天,效率较传统适配模式提升超过80%;精度误差控制在0.5%以内,确保了模型推理的可靠性;在同等延迟约束下,系统吞吐达到各芯片原生算子库的90%以上,实现了性能与适配效率的双重优化。框架还内置了benchmark与Profiling工具,能够一键生成跨芯片性能对比报告,为业务方提供选芯决策支撑。

相关内容

热门资讯

专访资深政法记者刘海陵:笔锋铸... 刘海陵的新闻人生,是改革开放的生动缩影,是法治进步的忠实见证,更是新闻理想的永恒传承。世纪之交,香江...
38岁身家过亿房地产老总家中遭... 南京市江宁区一身家过亿的房地产老总刘某,在家中遭人杀害,事发16年后,这处“凶宅”于5月7日进行第二...
粤超第三轮球票今日14时开始预... 随着“五一”小长假结束2026年冠旭电子cleer·广东省城市足球超级联赛(粤超)21城全部亮相5月...
记者帮|广州50万粉“捡瓶小狗... 昨日,羊城晚报“记者帮”报道《广州50万粉丝“捡瓶小狗”,疑被“毒狗团伙”盯上,目前只能被迫困在家中...
彩旗飘飘,锣鼓喧天!广州天河石... 农历三月廿三是传统的妈祖诞民俗节日,又叫天后诞,石牌人称娘妈诞。5月9日上午,广州市天河区石牌村开启...
【在希望的田野上】新技术新装备... 央视网消息(新闻联播):农忙时节,各地因地制宜,广泛采用新技术、新装备、新方法节本增效,为丰产丰收打...
老挝官员:老中铁路不仅象征着两... 老挝官员:老中铁路不仅象征着两国友好关系,也为两国人民带来巨大红利
视频丨日本有识之士:高市政权种... 日本高市早苗内阁推动的设立“国家情报局”相关法案8日在日本参议院全体会议进入审议阶段。日本有识之士认...