阿里妈妈开源AI图像修复模型 可按语言描述添加移除物体或变换风格
发布时间：2024-10-01 02:52 浏览量：2
【太平洋科技快讯】近日，阿里巴巴集团旗下阿里妈妈创意团队宣布，成功开源一款名为FLUX-Controlnet-Inpainting的AI图像修复模型。据了解，该模型结合了FLUX.1-dev模型和ControlNet的优势。FLUX.1-dev模型以其高质量的图像生成能力著称，而ControlNet则擅长控制图像修复过程。
FLUX-Controlnet-Inpainting模型在1200万张laion2B图像和阿里内部数据集上进行了训练，分辨率高达768x768，能够实现对损坏或缺失图像部分的高质量修复，其中最大的亮点是能够理解用户的语言描述，根据描述进行图像修复，包括添加、移除物体或改变图像风格。
阿里妈妈创意团队表示，FLUX-Controlnet-Inpainting模型目前处于Alpha测试阶段，未来将持续优化性能，并计划发布更新版本。目前，该模型已在Hugging Face平台开源，用户可通过pip安装diffusers库，并从GitHub克隆项目代码进行体验。