英伟达Blackwell架构突破AI推理成本,效率提升10倍!
创始人
2026-02-13 14:33:59
0

2月13日,英伟达宣布其Blackwell架构在AI推理领域的“token经济学”取得重大进展。通过软硬件协同设计,Blackwell优化了硬件处理复杂AI推理负载的效率,有效解决了模型参数膨胀导致的算力成本激增问题。数据显示,Blackwell平台将单位Token生成成本降低至Hopper架构的十分之一。

Blackwell平台已吸引多家推理服务提供商,包括Baseten、DeepInfra、FireworksAI及TogetherAI等,开始利用该平台托管开源模型。这些企业结合开源智能模型、Blackwell硬件优势及自研优化推理栈,实现了跨行业成本缩减。例如,SentientLabs在多智能体工作流中成本效率提升了25%至50%;游戏领域的Latitude等公司也实现了更低延迟和更可靠响应。

Blackwell的核心优势在于其旗舰系统GB200NVL72,采用72个芯片互联配置,配备高达30TB高速共享内存,完美契合“混合专家”架构需求,高效拆分Token批次并行处理。在Blackwell取得成功的同时,英伟达正研发下一代“VeraRubin”平台,计划通过引入针对预填充阶段的CPX等专用机制,进一步提升基础设施效率。

相关内容

热门资讯

奔驰2026年将推16款新车,... 今日,奔驰宣布将在今年内发起密集的产品攻势,未来三个月将发布七款重磅新车,覆盖从入门级到旗舰级全线产...
Jeep Avenger改款曝... 今日,汽车媒体CarScoops分享了一组Jeep旗下最小SUV Avenger的改款原型车在欧洲进...
四川购车新政:报废旧车换新能源... 近日,四川省发改委和财政厅联合发布了《四川省2026年实施大规模设备更新和消费品以旧换新政策措施》。...
广州市荔湾区侨联举办第四届海外... 在2026年马年新春到来之际,近日,广州市荔湾区侨联联合荔湾区文广旅体局,举办第四届“侨见美荔 马跃...
中青漫评丨创意赋能春运,让归途... 2026年春运大幕开启,这场被誉为“人类最大规模周期性迁徙”的出行保障工作,正以更具质感的服务供给,...
理想汽车联手警方捣毁假冒充电桩... 近日,理想汽车法务部联合公安机关和市场监督管理局开展专项执法行动,成功捣毁一处制售假冒理想品牌充电桩...
零跑汽车全国招募经销商,202... 2月13日,零跑汽车宣布启动全国经销商招募计划,旨在扩大其销售网络。招募要求中提到,经销商需具备至少...
Waymo无人驾驶车忘关门?D... 近日,Waymo无人驾驶汽车在六座城市运营中遇到了现实问题:乘客忘记关门导致车辆无法继续运行。为解决...
联合国成立AI专家组,中国科学... 2月12日,联合国秘书长古特雷斯宣布,联合国大会已任命新设立的“人工智能问题独立国际科学小组”40名...
揭秘春运最忙“声音天团”:10... “您好,请问有什么可以帮您?”戴亚蕾的声音平稳、清晰地通过话筒传出。她的眼睛盯着屏幕上弹出的工单,手...