SDFusion 是一个用于生成3D资产的多模态AI框架,可以将图像、文本或形状作为输入进行处理,并且可以更好地控制生成过程。该系统由伊利诺伊大学厄巴纳香槟分校和Snap Research的研究人员基于生成模型的协作范式研发,是一种基于扩散的3D资产生成模型,对3D 对象可以通过生成式 3D 和 2D模型的交互进行额外的纹理处理。SDFusion...
AI综述:该论文探讨了现有的大规模文本生成和基于文本编辑图像的方法在生成和编辑结果上存在的一致性问题,并提出了一种名为MasaCtrl的调整自由的方法,以同时实现一致的图像生成和复杂的非刚性图像编辑。该方法将现有的扩散模型中的自注意力转化为互注意力,以查询源图像中相关的本地内容和纹理,以实现一致性。同时,该...