阿里云发布多模态交互开发套件,AI硬件设备新突破
创始人
2026-01-08 12:51:57
0

今日,阿里云在通义智能硬件展上发布了全新的多模态交互开发套件,该套件集成了千问、万相、百聆三款通义基础大模型,并预置了十多款Agent和MCP工具,覆盖生活休闲、工作效率等领域。这些工具不仅能够听和看,还能思考并与物理世界交互,适用于AI眼镜、学习机、陪伴玩具、智能机器人等多种硬件设备。阿里云宣称,该开发套件为硬件企业和解决方案商提供了一个低开发门槛、响应速度快、场景丰富的平台。

在芯片层面,该套件适配了30多款主流ARM、RISC-V和MIPS架构终端芯片平台,满足市面上绝大多数硬件设备的快速接入需求。未来,通义大模型将与玄铁RISC-V实现软硬全链路的协同优化,以提高在RISC-V架构上的部署和推理性能。在模型优化层面,阿里云针对多模态交互场景推出了专有模型,全面支持全双工语音、视频、图文等交互方式,端到端语音交互时延低至1秒,视频交互时延低至1.5秒。

此外,该套件预置了MCP工具与Agent,接入了阿里云百炼平台生态,用户可以添加其他开发者提供的MCP和Agent模板,并通过A2A协议兼容三方Agent,扩展应用的能力边界。阿里云还展示了面向智能穿戴设备、陪伴机器人、具身智能等领域的解决方案,如基于千问VL、百聆CosyVoice等模型的AI眼镜,实现了同声传译、拍照翻译、多模态备忘录、录音转写等功能。在家庭陪伴机器人场景中,解决方案能够实时监测异常状况并推送告警信息,同时支持基于关键词的视频查找、定位和对话交互。

相关内容

热门资讯

极氪009焕新上市:8万元权益... 5月8日,极氪汽车宣布焕新极氪009将于5月19日上市。焕新极氪009已在北京车展开启预售,推出七座...
小鹏AI驾驶突破半数里程,智能... 5月8日,小鹏汽车发布最新报告,宣布其第二代VLA(智能辅助驾驶系统)在首月推送后取得了显著成绩。智...
本田销量暴跌72%!广汽本田产... 近日,广汽集团发布的2026年4月产销数据显示,广汽本田单月销量仅5100辆,同比大幅下滑72.42...
“车企锁电降配遭严查:8家被约... 5月8日,央视网报道了新能源汽车“锁电”问题的最新动态。2026年3月,全国12315平台关于车企O...
乐道L80智能SUV 5月15... 5月8日,乐道汽车宣布其智能双舱大五座旗舰SUV——乐道L80将于5月15日上市。预售期间整车购买价...
保时捷TaycanTurboG... 5月8日,保时捷在纽博格林北环赛道上刷新了量产豪华电动车的圈速纪录。保时捷研发车手Lars Kern...
特斯拉Model Y全球首获N... 5月8日,美国国家公路交通安全管理局(NHTSA)宣布,2026款特斯拉Model Y成为全球首款通...
散场仅用60分钟、护航频获赞!... 散场仅用60分钟!5月5日,时代少年团“加冠礼”演唱会“加冠”广州站在广州南沙大湾区文化体育中心落下...
多方联动,破解视力残障夫妇离婚... “感谢你们的帮助,为我们解决了这一难题。”近日,阿容(化名)将一面印有“为民办实事,调解暖人心”的锦...
“五一”假期广州地铁日均客流近... 文/羊城晚报全媒体记者 严艺文 通讯员 梁恺文 代慧子 周干图/通讯员提供5月6日,广州地铁发布数据...