AI芯片新突破:Taalas硬连线技术让AI模型速度提升10倍
创始人
2026-02-21 10:07:00
0

2月21日,AI芯片初创公司Taalas宣布推出“硬连线”技术,旨在解决大模型的延迟与成本问题。该公司通过将AI模型直接固化在硅片中,实现了计算与存储的融合,消除了数据传输的“内存墙”障碍。Taalas的ASIC路线与Cerebras或Groq的集成SRAM加速路径不同,其首款产品HC1专为Meta的Llama3.18B模型设计,采用台积电6nm工艺制造,芯片面积达到815mm²。

Taalas的HC1芯片在性能上表现出色,每秒Token生成数(TPS)提升了10倍,生产成本降低至20分之一。尽管芯片面积巨大,但仅容纳了80亿参数的模型,与当前万亿参数的前沿模型相比显得容量有限。为了解决单芯片容量不足的问题,Taalas采用了集群化扩展策略,通过30芯片的集群配置,实现了高达12000TPS/User的吞吐速度,为用户提供近乎零延迟的体验。然而,由于模型权重被硬连线在硅片中,一旦制造完成便无法更改模型参数,这给Taalas的商业模式带来了独特挑战。

相关内容

热门资讯

【新春走基层·走进西海固】杨河... 【新春走基层·走进西海固】今天是大年初三。听说宁夏西吉县吉强镇杨河村的农民作家史静波要搞“文学雅集”...
OpenAI下调2030年算力... 2月21日,OpenAI向投资者透露,公司已将2030年的算力目标调降至6000亿美元,较之前CEO...
特朗普宣布签署行政令:加征10... 当地时间2月20日,美国总统特朗普在其社交媒体平台“真实社交”发文称,他刚刚在椭圆形办公室签署了一项...
广西三江:戏台庆典展风情 2月20日,广西三江侗族自治县斗江镇周牙村周村屯举办戏台落成庆典,当地民众以姑巴回门、文艺展演、多耶...
热气腾腾的中国年|春暖大湾区 2019年2月,《粤港澳大湾区发展规划纲要》正式发布。7年来,粤港澳大湾区三向奔赴、携手并进,经过一...
强冷空气携大风沙尘降温来袭 会... 昨天,强冷空气携大风沙尘降温来袭。这股强冷空气将持续多长时间?天气变化是否会影响假期返程?来看气象分...
大学生起诉OpenAI:Cha... 近日,大学生达里安·德克鲁斯起诉OpenAI公司,指控其ChatGPT产品导致其精神错乱。据诉讼文件...
微软教程涉盗版哈利·波特引发版... 2月21日,科技媒体ArsTechnica报道,微软在遭到舆论强烈反弹后,删除了Azure官方博客上...
AI芯片新突破:Taalas硬... 2月21日,AI芯片初创公司Taalas宣布推出“硬连线”技术,旨在解决大模型的延迟与成本问题。该公...
广州明起迎返程高峰 多个高速路段将有车流聚集,地铁广州南站将加开夜间大站快车羊城晚报全媒体记者严艺文,通讯员交通宣、李庆...