OminiControl:基于FLUX.1的通用的控制框架 通过参考图像来控制图像生成的结果

OminiControl是一个为Diffusion Transformer模型如FLUX设计的最小但功能强大的通用控制框架。它支持主题驱动控制和空间控制(如边缘引导和图像修复生成)。OminiControl的设计非常精简,仅引入了基础模型0.1%的额外参数,同时保持了原始模型结构。这个项目由新加坡国立大学的学习与视觉实验室开发,代表了人工智能领域中图像生成和控制技术的最新进展。

在线体验:https://huggingface.co/spaces/Yuanshi/OminiControl

模型地址:https://github.com/Yuanshi9815/OminiControl

OminiControl:基于FLUX.1的通用的控制框架 通过参考图像来控制图像生成的结果

  • 主题驱动控制:支持根据主题或条件生成图像。
  • 空间控制:支持边缘引导和图像修复等空间控制任务。
  • 极简设计:仅引入极少量额外参数,保持模型原始结构。
  • 高兼容性:与FLUX等Diffusion Transformer模型兼容。
  • 易于使用:提供详细的快速开始指南和示例。
  • 灵活的应用场景:可用于图像生成、图像修复等多种应用。