跳到主要内容
检索

# 离散分布匹配蒸馏

1 篇关联报道

订阅更新
  1. arXiv

    GRN生成图像从50步压到2步:FastGRN在ImageNet上追平教师FID,单图快12.7倍

    离散token图像生成器GRN每张图要跑50步细化,步数一减样本就崩。FastGRN把GRN自身的均匀状态腐蚀当作离散扩散核,用两个后验网络直接算出逐token的反向KL梯度,再配合窗口匹配、过采样与非均匀采样,让2步学生模型在ImageNet上追平79次网络调用的教师FID,单图快12.7倍。

已读完全部报道