FreeControl:无需训练即可控制任何文本到图像扩散模型的空间控制方法
站长网2024-02-21 11:19:560阅
划重点:
⭐️ FreeControl 提供一种无需训练即可控制任何文本到图像扩散模型的空间控制方法
⭐️ 支持多个条件、架构和检查点同时进行控制生成
⭐️ 通过结构和外观引导,实现对生成图像的控制
在最新的研究中,研究人员提出了一种名为 FreeControl 的方法,可以实现对文本到图像生成模型的空间控制,而无需进行训练。这项研究支持同时控制多个条件、架构和检查点,为生成过程提供了更大的灵活性。通过结构引导和外观引导,FreeControl 能够促进生成图像与指导图像的结构对齐,以及在具有和不具有控制的情况下生成的图像之间的外观对齐。
FreeControl 方法包括分析阶段和合成阶段。在分析阶段,FreeControl 通过查询文本到图像模型生成尽少一张种子图像,然后从生成的图像中构建线性特征子空间。在合成阶段,FreeControl 利用子空间中的引导来促进与指导图像的结构对齐,以及在有控制和无控制情况下生成的图像之间的外观对齐。
研究人员展示了使用 T2I 扩散模型进行可控生成的定性结果。他们展示了支持任何条件生成的能力,并通过提供代码和相关工作的引用,展示了 FreeControl 方法的有效性和广泛适用性。
FreeControl 有助于对许多不同的架构和检查点进行方便的免训练控制,允许大多数现有免训练方法失败的具有挑战性的输入条件,并通过基于训练的方法实现有竞争力的合成质量。
项目网址:https://top.aibase.com/tool/freecontrol
论文网址:https://arxiv.org/pdf/2312.07536.pdf
0000
评论列表
共(0)条相关推荐
百度百家号打击自媒体利用AI传播违规内容 封禁违规账号489个
百度百家号发布《打击自媒体利用AI传播违规内容治理的公告》称,近期经过平台审核,发现部分作者利用AIGC(生成式人工智能)创作虚假新闻等违规内容,严重影响用户体验。针对这一现象,百家号平台采取了一系列措施,对相关违规内容进行了下线处理,对涉嫌违规行为的账号进行了封禁或禁言的处罚。截止2023年11月30日,平台已清理AI生成违规内容15660条,已封禁相关违规账号489个。0000微软首席经济学家警告:尽管存在风险 但人工智能可以帮助人类过得更好
微软公司首席经济学家MichaelSchwarz日前表示,人工智能(AI)在不择手段的人手中将是危险的。Schwarz在瑞士日内瓦举行的世界经济论坛小组会议上说:「我相信人工智能会被坏人利用,是的,它将造成真正的损害。在垃圾邮件发送者的手中,它可以通过影响选举等方式造成很大的破坏。」他说,人工智能「显然」必须受到监管,但立法者应该谨慎行事,等到该技术造成「真正的伤害」时再进行。站长网2023-05-05 17:40:440000又一个本土茶饮品牌火了,这次出圈竟然是靠“敲木鱼”!
近日,一个诞生于2020年的广东本土茶饮品牌,在520期间,凭借买茶赠木鱼的周边营销走进消费者的视野。据网友种草笔记上分享的购买规则,当天凡是购买当家茶饮,3.8元即可获得一款桃花木鱼:“每天敲一敲,心想事成,功德无量”这款周边让不少消费者心甘情愿掏出钱包,为其买单。站长网2023-05-25 18:20:130000相机制造商应对 AI 生成图片的崛起:通过嵌入数字签名来验证真实照片
站长之家(ChinaZ.com)1月2日消息:随着AI生成图片在世界各地变得越来越普遍,相机制造商正在采取行动来应对这一挑战。他们计划通过在照片中嵌入数字签名来验证图片的真实性。例如,尼康(Nikon)计划为摄影记者和其他专业摄影师提供带有认证技术的无反相机。据《日经亚洲》报道,这项技术将嵌入抗篡改的数字签名,包括照片拍摄的日期和时间、位置以及摄影师信息。0000AI网站生成器10web计划将AI建站引入WordPress
划重点1.🚀10web通过整合Llama2、GPT-4和StableDiffusion等生成AI模型,致力于提高WordPress网站建设的易用性。2.💰公司以每个网站或流量收费的方式实现盈利,计划引入支付系统,让用户从中收费,并从中抽取佣金。3.📈基于亚美尼亚丰富而廉价的工程师人才,10web正取得成功,并计划在未来一年内实现2500万美元的年度重复收入。站长网2024-02-23 18:11:370003