腾讯混元发布超小模型HY-1.8B-2Bit:手机也能跑大语言模型
创始人
2026-02-10 12:33:41
0

今日,腾讯混元宣布推出一款面向消费级硬件场景的“极小”模型HY-1.8B-2Bit,该模型等效参数量仅为0.3B,内存占用仅600MB,相较于常用手机应用更为轻量。HY-1.8B-2Bit基于2比特量化感知训练(QAT)产出,相较于原始精度模型等效参数量降低6倍,同时在真实端侧设备上生成速度提升2—3倍,显著提升了使用体验。该模型继承了Hunyuan-1.8B-Instruct的全思考能力,能够灵活应对不同复杂性的任务,为用户提供简洁或详细的思维链。

腾讯混元通过数据优化、弹性拉伸量化以及训练策略创新三个方法来提升HY-1.8B-2Bit的全科能力。在部署方面,该模型提供了gguf-int2格式的模型权重与bf16伪量化权重,实际模型大小直降6倍,仅有300MB,适合端侧设备部署。HY-1.8B-2Bit已在Arm等计算平台上完成适配,可部署于启用ArmSME2技术的移动设备上,并实现高效运行。在MacBook M4芯片和天玑9500上的测试显示,该模型在首字时延和生成速度上均实现了显著加速。混元团队未来将重点转向强化学习与模型蒸馏等技术路径,以期进一步缩小低比特量化模型与全精度模型之间的能力差距。

相关内容

热门资讯

北汽极狐阿尔法T7即将预售,华... 8月7日,北汽极狐宣布其新车型阿尔法T7将于8月26日开始预售。这款新车型在6月已经出现在工信部的申...
奇瑞风云A9L新能源车上市,1... 今日,奇瑞风云新能源官方宣布2027款奇瑞风云A9L正式上市,新车限时红包价13.99万元起。奇瑞风...
张朝阳:AI无法取代真人交流,... 8月7日,搜狐创始人张朝阳在接受界面新闻采访时强调,真人互动和真实内容是AI无法替代的。他认为,尽管...
小鹏MONAL03产能翻倍!9... 今日,小鹏汽车MONA系列研发负责人姜文对外透露,MONAL03的锁单用户对交付进度表达了关注。姜文...
零跑A10创纪录:135天量产... 今日,零跑汽车宣布,零跑A10自上市135天以来,第10万台量产车正式下线,创下了零跑品牌十万台下线...
挪威7月汽车销量:小鹏汽车首进... 近日,易车根据挪威官方机构和本土汽车协会的数据,发布了2026年7月挪威汽车市场的销量盘点。在这次的...
千问App升级:智能助理新功能... 今日,千问App宣布推出一系列新功能,包括思考研究、定时任务、办公助理、语音通话和智能体广场等,同时...
中国动力电池巨头宁德时代全球市... 8月7日,据SNE Research最新数据显示,2026年1至6月全球动力电池装车总量达608.5...
鸿蒙智行享界G9预售开启,43... 8月5日,鸿蒙智行首款科技豪华硬派SUV享界G9正式开启预售,预售价区间43.98万至55.98万元...
AI设计新病毒成功!斯坦福团队... 8月7日,美国斯坦福大学研究人员利用人工智能技术在实验室设计出16种新型病毒,这些病毒能够感染细菌,...