Skip to content
Hot eventLive

LiveSynth:流式神经合成器实现乐器克隆与文本生成乐器

1 reports1 sources2 hr ago updated

Get the story

AI overview

2026年10月12日,arXiv Audio and Speech 发布一手论文,介绍 LiveSynth——一款流式神经合成器,支持零样本乐器克隆与文本生成乐器,可实时交互演奏。系统以无反馈因果 Transformer 为核心,以 MIDI 事件与 CLAP 音色嵌入为条件,以 100 Hz 输出连续音频潜变量,再由因果变分自编码器解码为音频。此外,LiveSynth 支持逐帧音色渐变与 MIDI 条件 dropout,以实现自主续写。目前公开信息仅涉及该论文本身,未见后续独立验证或产品化进展。

Generated from reports · updated 2 hr ago

Timeline

Follow the coverage from different angles.

Oct 12, 2026
  1. arXiv · Audio and Speech
    LiveSynth:用于乐器克隆与文本生成乐器的流式神经合成器

    LiveSynth 是一款流式神经合成器,支持零样本乐器克隆与文本生成乐器,可实时交互演奏。系统以无反馈因果 Transformer conditioned on MIDI 事件与 CLAP 音色嵌入,以 100 Hz 输出连续音频潜变量,再由因果变分自编码器解码为音频,并支持逐帧音色渐变与 MIDI 条件 dropout 实现自主续写。

Heat trend

There is not enough continuous observation data to draw a trend yet.