谷歌MRT2模型发布:实时音乐合奏新体验,低延迟更接近真实演奏
创始人
2026-06-05 14:40:36
0次

6月4日,谷歌Magenta团队发布了MagentaRealTime2(MRT2)模型,同时免费提供了乐器应用Jam和DAW插件MRT2。MRT2是一款定位于与用户“即兴合奏”的本地实时音乐模型,包含两种规模的模型:mrt2_base(24亿参数)和mrt2_small(2.3亿参数)。谷歌强调,这两个版本都针对苹果Apple Silicon芯片进行了优化,特别是mrt2_small能够在搭载M1及后续芯片的Apple电脑上实时运行。

MRT2的最大变化在于其“低延迟”特性。相较于上一代MagentaRealTime需要TPU或高性能GPU,控制延迟约3秒,MRT2改为逐帧生成,每帧40毫秒,实际控制延迟降低至约200毫秒,仅为前代的十五分之一。这使得模型对输入变化的反应速度显著提升,更接近真实乐器的演奏体验。MRT2支持文本和音频风格提示,以及MIDI音符与鼓开关控制,能够持续跟随音符输入变化,并在Auto-Strum模式下自动决定拨弦或起音时机。

技术层面,MRT2基于SpectroStream音频编解码器处理48kHz立体声音频,并以25Hz帧率生成音频标记。交互方面,谷歌推出的Jam应用允许用户输入音乐风格描述后模型开始生成音乐,同时支持音高调整。输入设备包括鼠标点击、MacBook键盘和MIDI键盘,使得实时控制更接近传统电子乐器和数字编曲工作流。对于习惯在成熟编曲环境中工作的创作者,MRT2插件提供了接入路径,允许在常用的DAW中调用MagentaRealTime2。

相关内容

热门资讯

半小时就能配齐一台机器人,深圳... 编者按:健康完备的经济生态,是推动高质量发展的重要保障。即日起,南方日报、南方+推出“解码广东经济生...
护航开学季,河源海事多措并举保... 金秋九月,新学期如期开启。为有效应对开学季学生水路返程高峰,切实防范化解水上交通安全风险,保障辖区学...
2026广马来了!9月2日10... 广州马拉松赛组委会今日(9月1日)发布消息,2026广州马拉松赛将于9月2日10点开启报名。记者了解...
救援,救援!再难也要继续 在吉隆口岸核心受灾区搜救队伍度过了风雨交加的一晚队员们为应对可能突然而至的泥石流只能穿衣而眠天亮之后...
新华视点|深耕特色产业 激活乡... 近年来,各地立足资源禀赋,因地制宜发展特色种养、农光互补等乡村产业。通过建好基地、延伸链条、带动就近...
潮涌湾区,文通四海 第六届粤港... 羊城晚报全媒体记者梁善茵、熊安娜、李娇娇、阎回、谢婉莹报道:由广东省作家协会主办的第六届粤港澳大湾区...
净环境、畅通行、排隐患!广州城... 9月1日,广州中小学、幼儿园迎来秋季新学期。开学前夕,广州市城市管理和综合执法局统筹各区城管部门,聚...
高端访谈|愿同中国持续巩固永久... 新华社比什凯克9月1日电 高端访谈|愿同中国持续巩固永久全面战略伙伴关系——访哈萨克斯坦总统托卡耶夫...
西藏吉隆:巡逻在撤离村庄的党员... 8月26日上午,因尼泊尔一侧发生泥石流灾害,造成我方一侧通往吉隆口岸的道路、通信、电力中断。西藏吉隆...
一颗“粤芯”,如何撬动大湾区集... 8月28日,粤芯半导体技术股份有限公司(下称“粤芯半导体”)取得中国证监会IPO注册批文,成为创业板...