PixelMoE 表明标准 LLM 式 MoE(Token-Choice 路由、细粒度专家、共享专家、偏置负载均衡)可直接迁移到像素空间扩散,在激活参数量相当的条件下持续优于稠密基线,并在 ImageNet-1K 上取得 FID 1.47(256×256)与 1.53(512×512)。
值得关注:对“像素空间扩散能否高效扩展”这一开放问题给出了肯定证据:把 LLM 领域成熟的 MoE 稀疏扩展范式迁移过来即可,无需为扩散专门设计路由。 与既有脉络的关系:已有卡片《像素空间文生图扩散模型训练的实证研究》关注的是*…