从Neural ODE到连续Normalizing Flows 作者: wyli 时间: 2025-11-08 分类: 生成模型,基础模型 606 次阅读 评论 Neural ODE通过神经网络建模隐藏状态变换的导数,从而构建隐藏状态连续变换模型。Neural ODE的建模方法应用归一化流模型,就可把离散归一化流变为连续归一化流,显著提升了模型表达力。- 阅读剩余部分 -
生成式建模的流匹配 作者: wyli 时间: 2024-08-25 分类: 生成模型,基础模型 1370 次阅读 3 条评论 扩散模型的性能虽优越,但是其限制了采样概率路径的空间。同时,扩散模型不仅拥有较长的训练时间,还需要通过蒸馏等方法提高采样效率。与之相比,连续正则化流CNFs能够建模任意的概率路径,但受限于无可扩展的CNF训练算法。为了解决CNFs模型训练的不稳定性,流匹配FM是一个基于回归固定条件概率路径向量场的Simulation-Free训练方法,为CNFs模型训练提供了等效梯度。该方法不仅拥有较好的样本质量,且训练与推理效率得到了很大的提升。- 阅读剩余部分 -