PhotoVerse--本地部署--几秒钟内生成高质量的定制图像

PhotoVerse介绍

个性化文本到图像的生成工具使用户能够根据自己的特定概念和提示创建个性化图像。然而，现有方法面临着调整时间长、存储要求高、每个身份需要多个输入图像，以及在保持身份和可编辑性方面的限制等问题。

为了解决这些问题，来自字节跳动、北京航空航天大学和新加坡国立大学的研究团队提出了 PhotoVerse，该方法在文本和图像领域采用双分支调节机制，可对图像生成过程进行有效控制。此外，为了加强训练过程中的身份保护，该研究还引入了面部身份损失作为新的组成部分。

值得注意的是，PhotoVerse 不需要测试时间调整，只需依赖目标身份的单张面部照片，大大降低了与图像生成相关的资源成本。经过一个训练阶段，就能在几秒钟内生成高质量的图像。此外，该方法还能生成包含各种场景和风格的多样化图像。

项目地址：https://photoverse2d.github.io/

论文地址：https://arxiv.org/abs/2309.05793