CrabNote螃蟹笔记

AI音乐周刊 W.A 009

AI音乐周刊 W.A 009

AI音乐周刊 W.A 009 AI音乐周刊 W.A 009 Modified January 5 • 硬件创新: 尽管 Humane Pin 等早期尝试受挫,但 2026 年将迎来 AI 戒指等新形态,试图将交互从指尖转移到耳畔。 • 核心愿景: 通过音频优先设计,让设备从“工具”转变为“伴侣”,旨在减少屏幕成瘾,重塑人机交互逻辑。 这一变革意味着未来的交互将不再依赖视觉焦点,家庭、汽车乃至用户身体都将成为随时待命的语音控制表面。 Saving Country Music 2026 AI 音乐政策 知名音乐媒体 Saving Country Music 宣布自 2026 年起实施严厉的 AI 音乐披露与审核政策,旨在保护人类创作者的权益与音乐行业的完整性。 • 披露义务: 所有提交至该平台的音乐必须明确标注是否使用 AI 创作。SCM 将在所有乐评和报道中同步披露此类信息。 • 准入红线: 若歌词中有 50% 以上由 AI 生成,或包含 任何(1% 以上) 由 AI 衍生的音频,该作品将失去乐评和编辑报道的资格。 • 允许范围: 政策并不排斥 AI 工具作为“数字词典”辅助查阅或押韵,但核心歌词必须由人类创作,且不得含有 AI 生成的声音。 • 行业呼吁: SCM 敦促 Billboard、RIAA 及格莱美等机构建立类似的分级与标签体系(如标注“AI Clean”),将 AI 作品与人类作品区隔。 • 执行节奏: 政策设 60 天宽限期,将于 3 月 1 日正式全面执行。 这一举措标志着音乐媒体在 AI 浪潮下,正通过建立透明度机制来抵御技术对人类艺术生态的潜在冲击。 AI人声修音神器 Vovious 链接:https://www.vovious.com/ Vovious 是 Double Pi 公司针对现代音乐制作打造的创新 AI 调音软件。其核心优势在于: • 极致自然: 利用 AI 技术在复杂调音场景下规避人工痕迹,音质表现被认为在部分维度超越了 Melodyne。 • 无缝集成: 原生支持 ARA 协议与 DAW 集成,实现非线性的实时协作,告别繁琐的音频捕捉流程。 • 全能适配: 无论是大幅度升调还是精细的情绪修正,都能提供接近真人的音频输出,完美适配从个人创作者到顶级录音室的多样需求。 ComfyUI 插件:FL Song Gen 音乐生成节点 Github:https://github.com/filliptm/ComfyUI FL SongGen FL Song Gen 是一款基于腾讯 SongGeneration (LeVo) 模型开发的 ComfyUI 插件,能够直接在工作流中通过文本生成包含人声与伴奏的完整歌曲。 核心功能特性: • 全曲生成: 支持从歌词直接生成完整曲目,单曲时长最高可达 4分30秒。 • 音轨分离: 自动输出独立的人声 (Vocals) 与 背景音乐 (BGM) 双轨道,方便后期混音。 • 结构化歌词: 支持按段落(前奏、主歌、副歌、间奏、尾奏)进行精细化创作。 • 高度可控性: ◦ 风格参考: 支持通过参考音频进行风格迁移(Style Transfer)。 ◦ 参数调节: 可通过文本描述控制性别、音色、流派、情绪及 BPM(每分钟节拍数)。 ◦ 预设系统: 内置流行、摇滚、爵士等多种风格预设。 • 便捷性: 首次使用时模型将自动下载,无缝集成至 ComfyUI 节点环境。 论文 JAM: 具有细粒度可控性和审美对齐的微型流匹配歌曲生成器 论文:https://arxiv.org/abs/2507.20880 演示:https://declare lab.github.io/jamify 虽然扩散模型和流匹配模型在文本转音频领域取得了进展,但在音乐和歌曲生成方面仍有提升空间。现有的开源“歌词转歌曲”模型(如DiffRhythm)缺乏音乐家所需的词级细粒度控制。JAM是首个通过流匹配技术实现词级时间与时长控制的模型。为了使生成的歌曲更符合人类审美,研究者采用了直接偏好优化(DPO)技术进行迭代改进,无需人工标注。此外,研究者还发布了公共评估数据集JAME。结果显示,JAM在音乐特定属性上优于现有模型。 ACappellaSet:用于源分离与AI辅助排练工具的多语言阿卡贝拉数据集 演示:https://phyllisju.github.io/acappella demo/ 论文:https://openreview.net/pdf?id=rAPN9Ir7jt 阿卡贝拉(无伴奏合唱)由于人声风格多样且伴随人声打击乐(VP),给音频源分离带来了挑战。本文推出了 ACappellaSet,包含由3个专业团体录制的55首专业歌曲。实验表明,在该数据集上微调HTDemucs模型能显著提升人声打击乐的分离效果(SDR从5.22 dB提升至7.62 dB)。该研究旨在支持AI驱动的数据增强及异步阿卡贝拉排练工具的开发。 SongEcho:通过实例自适应元素级线性调制的翻唱歌曲生成 论文:https://openreview.net/forum?id=TEKOayiQg2 翻唱歌曲在保留原曲旋律的同时赋予其新的情感。本文将翻唱任务重新定义为条件生成任务,即在原曲旋律和文本提示下同时生成新的人声与伴奏。SongEcho 引入了实例自适应元素级线性调制(IA EiLM),通过改进条件注入机制(EiLM)实现精确的时间对齐,并提出条件细化机制(IACR)增强表现力。此外,研究者构建了高质量数据集 Suno70k。实验证明,该方法在参数量不到竞品30%的情况下,生成效果更佳。 MuseControlLite:基于轻量化调节器的多功能音乐生成 演示:https://musecontrollite.github.io/web/ 论文:https://openreview.net/forum?id=VK47MdCjBH 本文提出了一个轻量化机制,用于微调文本转音乐模型,使其能够精确控制随时间变化的音乐属性。研究发现,在处理与时间相关的条件(如旋律)时,旋转位置嵌入(RoPE)至关重要。通过在解耦交叉注意层中加入RoPE,控制准确率从56.6%提升至61.1%,且训练参数仅为85M(比现有技术少6.75倍)。该模型支持属性控制、音频修补(Inpainting)和音频扩展(Outpainting)。 SonicMaster:迈向可控的一站式音乐修复与母带处理 论文:https://arxiv.org/abs/2508.03448 Github:https://github.com/AMAAI Lab/SonicMaster 业余录音常伴有混响、失真、底噪等问题。SonicMaster 是首个统一的生成式音乐修复与母带模型,支持文本控制。用户可以通过自然语言指令进行针对性增强。研究者通过模拟19种退化函数(涵盖均衡、动态、混响等)构建了专用数据集,并利用流匹配框架学习从劣质音频到高质量音频的映射。客观指标和主观听感均证明其优于基准模型。 基于BERT与半监督学习的实用自动钢琴缩编 论文:https://arxiv.org/abs/2512.21324 钢琴缩编(将管弦乐等多声部乐曲改写为钢琴谱)非常耗时。本文提出一种基于半监督学习的方法,旨在利用大量未标注的古典音乐数据。研究将该任务分为“音乐简化”和“和声化”两步,并基于 MidiBERT 框架实现了解决方案。结果显示,该方法生成的样本具有很高的实用性,仅需少量人工后期调整即可达到专业水准。 MR DAW:混合现实中的协作数字音频工作站 论文:https://arxiv.org/abs/2601.00326 传统的数字音频工作站(DAW)常将音乐家限制在桌子前,且远程协作存在延迟问题。本文探讨了利用混合现实(MR)建立实时远程协作环境的可能性。研究开发了 MR DAW 系统,允许多个地理位置分散的用户控制同一个共享的DAW实例。音乐家可以自由移动,并使用物理脚踏板进行协作循环录音(Looping)。通过对20名音乐家的调研,研究勾勒出了“音乐元宇宙”中协作的未来。 用于表现力歌声合成的潜在流匹配 论文:https://arxiv.org/abs/2601.00217 基于cVAE的歌声合成模型在推理效率上表现优秀,但由于训练和推理时的潜空间分布不完全匹配,往往导致颤音(vibrato)等细粒度表现力缺失。本文提出 FM Singer,在潜空间引入条件流匹配(CFM)。该方法通过求解常微分方程(ODE)来优化潜空间样本,从而在保持并行解码效率的同时,显著提升了歌声的表现力。在韩语和中文数据集上的实验显示,其在梅尔倒谱畸变(MCD)和音高误差等指标上均有明显改善。 参考资料 https://www.forbes.com/sites/virginieberger/2025/12/29/nine predictions for the music industry in 2026 how ai reshapes licensing and power/ https://techcrunch.com/2026/01/01/openai bets big on audio as silicon valley declares war on screens/ https://savingcountrymusic.com/saving country musics new policy on ai music for 2026/ https://x.com/Machinedelusion/status/2006201412154245602?s=20 https://x.com/fundwotsai2001/status/2006745129609212192?s=20 • 硬件创新: 尽管 Humane Pin 等早期尝试受挫,但 2026 年将迎来 AI 戒指等新形态,试图将交互从指尖转移到耳畔。 • 核心愿景: 通过音频优先设计,让设备从“工具”转变为“伴侣”,旨在减少屏幕成瘾,重塑人机交互逻辑。 这一变革意味着未来的交互将不再依赖视觉焦点,家庭、汽车乃至用户身体都将成为随时待命的语音控制表面。 Saving Country Music 2026 AI 音乐政策 知名音乐媒体 Saving Country Music 宣布自 2026 年起实施严厉的 AI 音乐披露与审核政策,旨在保护人类创作者的权益与音乐行业的完整性。 • 披露义务: 所有提交至该平台的音乐必须明确标注是否使用 AI 创作。SCM 将在所有乐评和报道中同步披露此类信息。 • 准入红线: 若歌词中有 50% 以上由 AI 生成,或包含 任何(1% 以上) 由 AI 衍生的音频,该作品将失去乐评和编辑报道的资格。 • 允许范围: 政策并不排斥 AI 工具作为“数字词典”辅助查阅或押韵,但核心歌词必须由人类创作,且不得含有 AI 生成的声音。 • 行业呼吁: SCM 敦促 Billboard、RIAA 及格莱美等机构建立类似的分级与标签体系(如标注“AI Clean”),将 AI 作品与人类作品区隔。 • 执行节奏: 政策设 60 天宽限期,将于 3 月 1 日正式全面执行。 这一举措标志着音乐媒体在 AI 浪潮下,正通过建立透明度机制来抵御技术对人类艺术生态的潜在冲击。 AI人声修音神器 Vovious 链接:https://www.vovious.com/ Vovious 是 Double Pi 公司针对现代音乐制作打造的创新 AI 调音软件。其核心优势在于: • 极致自然: 利用 AI 技术在复杂调音场景下规避人工痕迹,音质表现被认为在部分维度超越了 Melodyne。 • 无缝集成: 原生支持 ARA 协议与 DAW 集成,实现非线性的实时协作,告别繁琐的音频捕捉流程。 • 全能适配: 无论是大幅度升调还是精细的情绪修正,都能提供接近真人的音频输出,完美适配从个人创作者到顶级录音室的多样需求。 ComfyUI 插件:FL Song Gen 音乐生成节点 Github:https://github.com/filliptm/ComfyUI FL SongGen FL Song Gen 是一款基于腾讯 SongGeneration (LeVo) 模型开发的 ComfyUI 插件,能够直接在工作流中通过文本生成包含人声与伴奏的完整歌曲。 核心功能特性: • 全曲生成: 支持从歌词直接生成完整曲目,单曲时长最高可达 4分30秒。 • 音轨分离: 自动输出独立的人声 (Vocals) 与 背景音乐 (BGM) 双轨道,方便后期混音。 • 结构化歌词: 支持按段落(前奏、主歌、副歌、间奏、尾奏)进行精细化创作。 • 高度可控性: ◦ 风格参考: 支持通过参考音频进行风格迁移(Style Transfer)。 ◦ 参数调节: 可通过文本描述控制性别、音色、流派、情绪及 BPM(每分钟节拍数)。 ◦ 预设系统: 内置流行、摇滚、爵士等多种风格预设。 ◦ 风格参考: 支持通过参考音频进行风格迁移(Style Transfer)。 ◦ 参数调节: 可通过文本描述控制性别、音色、流派、情绪及 BPM(每分钟节拍数)。 ◦ 预设系统: 内置流行、摇滚、爵士等多种风格预设。 • 便捷性: 首次使用时模型将自动下载,无缝集成至 ComfyUI 节点环境。 论文 JAM: 具有细粒度可控性和审美对齐的微型流匹配歌曲生成器 论文:https://arxiv.org/abs/2507.20880 演示:https://declare lab.github.io/jamify 虽然扩散模型和流匹配模型在文本转音频领域取得了进展,但在音乐和歌曲生成方面仍有提升空间。现有的开源“歌词转歌曲”模型(如DiffRhythm)缺乏音乐家所需的词级细粒度控制。JAM是首个通过流匹配技术实现词级时间与时长控制的模型。为了使生成的歌曲更符合人类审美,研究者采用了直接偏好优化(DPO)技术进行迭代改进,无需人工标注。此外,研究者还发布了公共评估数据集JAME。结果显示,JAM在音乐特定属性上优于现有模型。 ACappellaSet:用于源分离与AI辅助排练工具的多语言阿卡贝拉数据集 演示:https://phyllisju.github.io/acappella demo/ 论文:https://openreview.net/pdf?id=rAPN9Ir7jt 阿卡贝拉(无伴奏合唱)由于人声风格多样且伴随人声打击乐(VP),给音频源分离带来了挑战。本文推出了 ACappellaSet,包含由3个专业团体录制的55首专业歌曲。实验表明,在该数据集上微调HTDemucs模型能显著提升人声打击乐的分离效果(SDR从5.22 dB提升至7.62 dB)。该研究旨在支持AI驱动的数据增强及异步阿卡贝拉排练工具的开发。 SongEcho:通过实例自适应元素级线性调制的翻唱歌曲生成 论文:https://openreview.net/forum?id=TEKOayiQg2 翻唱歌曲在保留原曲旋律的同时赋予其新的情感。本文将翻唱任务重新定义为条件生成任务,即在原曲旋律和文本提示下同时生成新的人声与伴奏。SongEcho 引入了实例自适应元素级线性调制(IA EiLM),通过改进条件注入机制(EiLM)实现精确的时间对齐,并提出条件细化机制(IACR)增强表现力。此外,研究者构建了高质量数据集 Suno70k。实验证明,该方法在参数量不到竞品30%的情况下,生成效果更佳。 MuseControlLite:基于轻量化调节器的多功能音乐生成 演示:https://musecontrollite.github.io/web/ 论文:https://openreview.net/forum?id=VK47MdCjBH 本文提出了一个轻量化机制,用于微调文本转音乐模型,使其能够精确控制随时间变化的音乐属性。研究发现,在处理与时间相关的条件(如旋律)时,旋转位置嵌入(RoPE)至关重要。通过在解耦交叉注意层中加入RoPE,控制准确率从56.6%提升至61.1%,且训练参数仅为85M(比现有技术少6.75倍)。该模型支持属性控制、音频修补(Inpainting)和音频扩展(Outpainting)。 SonicMaster:迈向可控的一站式音乐修复与母带处理 论文:https://arxiv.org/abs/2508.03448 Github:https://github.com/AMAAI Lab/SonicMaster 业余录音常伴有混响、失真、底噪等问题。SonicMaster 是首个统一的生成式音乐修复与母带模型,支持文本控制。用户可以通过自然语言指令进行针对性增强。研究者通过模拟19种退化函数(涵盖均衡、动态、混响等)构建了专用数据集,并利用流匹配框架学习从劣质音频到高质量音频的映射。客观指标和主观听感均证明其优于基准模型。 基于BERT与半监督学习的实用自动钢琴缩编 论文:https://arxiv.org/abs/2512.21324 钢琴缩编(将管弦乐等多声部乐曲改写为钢琴谱)非常耗时。本文提出一种基于半监督学习的方法,旨在利用大量未标注的古典音乐数据。研究将该任务分为“音乐简化”和“和声化”两步,并基于 MidiBERT 框架实现了解决方案。结果显示,该方法生成的样本具有很高的实用性,仅需少量人工后期调整即可达到专业水准。 MR DAW:混合现实中的协作数字音频工作站 论文:https://arxiv.org/abs/2601.00326 传统的数字音频工作站(DAW)常将音乐家限制在桌子前,且远程协作存在延迟问题。本文探讨了利用混合现实(MR)建立实时远程协作环境的可能性。研究开发了 MR DAW 系统,允许多个地理位置分散的用户控制同一个共享的DAW实例。音乐家可以自由移动,并使用物理脚踏板进行协作循环录音(Looping)。通过对20名音乐家的调研,研究勾勒出了“音乐元宇宙”中协作的未来。 用于表现力歌声合成的潜在流匹配 论文:https://arxiv.org/abs/2601.00217 基于cVAE的歌声合成模型在推理效率上表现优秀,但由于训练和推理时的潜空间分布不完全匹配,往往导致颤音(vibrato)等细粒度表现力缺失。本文提出 FM Singer,在潜空间引入条件流匹配(CFM)。该方法通过求解常微分方程(ODE)来优化潜空间样本,从而在保持并行解码效率的同时,显著提升了歌声的表现力。在韩语和中文数据集上的实验显示,其在梅尔倒谱畸变(MCD)和音高误差等指标上均有明显改善。 参考资料 https://www.forbes.com/sites/virginieberger/2025/12/29/nine predictions for the music industry in 2026 how ai reshapes licensing and power/ https://techcrunch.com/2026/01/01/openai bets big on audio as silicon valley declares war on screens/ https://savingcountrymusic.com/saving country musics new policy on ai music for 2026/ https://x.com/Machinedelusion/status/2006201412154245602?s=20 https://x.com/fundwotsai2001/status/2006745129609212192?s=20 🏆 本文作者:智音Brook 链接:https://mp.weixin.qq.com/s/VI4HKOHD3rV1zRTnaAbM5Q 本文作者:智音Brook 链接:https://mp.weixin.qq.com/s/VI4HKOHD3rV1zRTnaAbM5Q 🙌 本周资讯聚焦 AI 对 2026 年音乐生态的颠覆。 宏观层面,Forbes 预测版权管理将从“预先许可”转向“事后风控”,流媒体或推行分级版税制。 硬件端,OpenAI 联手 Jony Ive 押注音频优先设备,硅谷正掀起“去屏幕化”交互革命。 行业规范上,Saving Country Music 率先出台硬核政策,严禁高比例 AI 作品入选乐评。 工具端:AI 调音神器 Vovious 挑战 Melodyne,实现极高自然度;ComfyUI 插件 FL Song Gen 则基于腾讯 LeVo 模型,为创作者提供全曲生成与音轨分离的强大工作流。 本周资讯聚焦 AI 对 2026 年音乐生态的颠覆。 宏观层面,Forbes 预测版权管理将从“预先许可”转向“事后风控”,流媒体或推行分级版税制。 硬件端,OpenAI 联手 Jony Ive 押注音频优先设备,硅谷正掀起“去屏幕化”交互革命。 行业规范上,Saving Country Music 率先出台硬核政策,严禁高比例 AI 作品入选乐评。 工具端:AI 调音神器 Vovious 挑战 Melodyne,实现极高自然度;ComfyUI 插件 FL Song Gen 则基于腾讯 LeVo 模型,为创作者提供全曲生成与音轨分离的强大工作流。 Forbes对于2026年音乐产业的九大预测 Forbes于2025年12月29日发布一篇文章,预测2026年音乐产业的一些变化 到 2026 年,音乐产业的变革核心将由“法律监管”转向“市场经济规律”。AI 不仅改变了创作,更深度重构了授权、估值与分配机制。 1. 版权保护失效: 随着 Anna's Archive 等大规模数据泄露,溯源变得极难。授权将从“预先许可”转向“事后风险管理”。 2. 市场两极分化: 法律保护难见实效,人类创作者将转向追求“独特性”与“稀缺性”的市场,而功能性音乐将被廉价 AI 占领。 3. 独立出版商联盟: 为抗衡 AI 巨头,独立出版商将结成集体谈判组织,争取至少 50% 的收益分成。 4. 存量版权溢价: 拥有大型曲库的机构将把“清洁数据训练”视为高端授权业务,以获取高额预付款。 5. 主流艺人持观望态度: UMG 等推出的 AI 授权平台参与度将低预期(不足百人),知名艺人因担心品牌贬值而拒绝授权声音。 6. 私募股权与作者冲突: 私募基金控制的版权组织(如 BMI)为追求规模收入,可能在未获作者同意下打包 AI 授权,引发法律冲突。 7. 确权诉讼爆发: 已出售曲库的艺人将起诉唱片公司,争夺 AI 环境下“声音与肖像权”的控制权。 8. AI 估值变量: 曲库收购估值将把“AI 开发潜力”作为核心指标。 9. 分级版税制: 流媒体平台将采用 AI 监测,实行“纯人造、AI 辅助、全 AI 生成”三级版税,全 AI 作品可能面临零报酬。 总结: 2026 年的音乐产业将更加透明也更加残酷,市场将先于监管给出关于公平与生存的答案。 OpenAI 正大力押注语音 AI 据最新报道,该公司已重组团队,计划在 2026 年初发布更自然、支持实时插话的全新语音模型,并联手苹果前设计总监 Jony Ive 开发首款语音优先的硬件设备(如眼镜或无屏音箱)。 行业整体趋势: • 巨头布局: Meta 已推出强化听觉的智能眼镜,谷歌测试“语音搜索综述”,特斯拉则将 Grok 接入车载系统,将空间转化为控制界面。