SuTI

当前的对象驱动的文生图模型,例如DreamBooth,是通过微调一个‘专家模型’完成的,然而对每个对象都需要微调一个模型造成了计算资源和存储的困难。因此,文章提出了SuTI,一个对象驱动的文生图模型,利用上下文学习的方法而非针对对象的微调。 SuTI采用了学徒学习,即一个学徒模型通过在由大量对象的专家模型生成的数据中进行学习,进而模仿专家模型的行为。具体来说,作者从网络中获取上百万个图片集合,每个集合都对应某个特定对象,然后使用这些图片集合训练大量的专家模型,从而学徒模型SuTI能够模仿专家模型的行为。 SuTI模型采用的结构是Re-Imagen的结构。