跳到主要内容

研究进展

相关研究与后续进展

同一研究事件下的公开文章与后续进展。

arXiv

PEACE 首次实现 DSP 效果器代码与音频的联合嵌入,在混响检索上以 53.5% R@10 超过预训练 AFx-Rep 的 28.3%

该工作提出 PEACE,首个将 Faust 效果器代码与处理后音频映射到同一空间的联合嵌入:音频端沿用 AFx-Rep,代码端分别采用微调 T5 与在 Faust 编译器 Box API 中间表示上运行的消息传递图神经网络 BoxGraph,用 SLAP 的非对比式 BYOL 目标训练;在 20 万训练对、21 种 Faust 效果器、1–3 级串联链上,两种代码编码器在混合长度链检索上大致持平,T5 在单效果器画廊与更长链上略优,BoxGraph 在参数全掩码的链拓扑检索中更强(17.4% 对 12.4% R@1),并在训练中未见的专业插件混响基准上取得 53.5% R@10,高于预训练 AFx-Rep 的 28.3%。