Align Your Steps:低步数推理保持高质量结果 适用于SD 1.5和SDXL
划重点:
- 通过优化采样计划提升生成模型效率和质量
- 可适用于多种数据合成基准测试,包括图像、视频等
- 用户友好的插拔式优化计划应用,提升生成过程中的稳定性和质量
在深度学习领域,扩散模型(DMs)作为生成建模的前沿方法已经得到广泛应用。然而,DMs 的一个关键缺点是其较慢的采样速度,这主要是由于需要通过大型神经网络进行多次顺序函数评估。
本文提出了一种名为 “步调齐整(Align Your Steps)” 的全新方法,旨在为 DMs 优化采样计划,从而实现高质量输出。该技术适用于SD1.5和SDXL,低步数的同时保持高质量结果。通过利用随机微积分方法,针对不同的求解器、训练的 DMs 和数据集找到最佳的采样计划。在多个图像、视频以及二维数据合成基准测试中,优化计划几乎在所有实验中优于先前手工制定的计划。这一方法展示了采样计划优化的潜力,特别是在少步骤合成领域。
通过严格的定量实验,发现优化计划在标准图像生成基准测试中显著提升图像质量,无论使用哪种流行的采样器都能得到一致的改进。此外,研究还针对文本到图像模型进行了用户研究,结果显示使用优化计划生成的图像更受欢迎。
下面展示了一些文本到图像的例子,对比展示了使用优化计划与实践中使用的两种最流行计划(EDM 和 Time-Uniform)的效果。
此外,在视频生成方面进行了研究,发现使用优化计划可以在视频生成过程中产生更加稳定的视频,减少随时间推移的颜色失真。
产品入口:https://top.aibase.com/tool/align-your-steps
在线colab:https://colab.research.google.com/drive/1cIwbbO4HRP1aUQ8WcbQBaT8p3868k7BC?usp=sharing
适用于SDXL的ComfyUI工作流:https://openart.ai/workflows/KrmAPmuIWMzztrE7Qkrc
计算机工程年薪中位数57万!全球毕业5年薪资最高16大专业曝光,STEM工作数暴涨
【新智元导读】全世界薪水最高的专业是哪个?最新研究显示,计算机工程专业是当前最赚钱的工作,年薪中位数达到57万。毕业5年后,收入最高的大学专业都有哪些?首选的应该是,工程师。最近,纽约联储对员工开启的一项研究显示:毕业五年后,收入最高的前16个大学专业的中,工程学学位就占据了9席。计算机工程年薪位列第一其中,计算机工程专业排名第一,年薪中位数为80,000美元(约57万)。站长网2024-03-17 18:19:230000微软 Copilot 即将集成GPT-4 Turbo等OpenAI最新工具
要点:微软宣布其人工智能助手Copilot将整合OpenAI最新的工具,包括强化版的GPT-4Turbo,以提升应用的实用性。GPT-4Turbo相较于原版有更大的“上下文窗口”(128K),能够保留更多信息,且具有更新的知识截止日期,使其能够处理更长的用户提示,提供更深入、明智的见解。站长网2023-12-06 10:58:460000小米汽车备案xiaomiev.com网站:已获批准生产 2024年上半年正式上市
小米汽车最新进展来了。快科技8月23日消息,近日,小米汽车科技有限公司登记备案xiaomiev.com”网站域名。公司成立于2021年11月,法定代表人为雷军,注册资本10亿人民币,经营范围包括技术开发、新能源车整车制造、汽车整车及零部件的技术研发、道路机动车辆生产等,由小米科技有限责任公司全资持股。站长网2023-08-24 16:51:320000谷歌更新隐私政策 扩大抓取网络数据权利以构建AI产品
谷歌更新了其隐私政策,声明保留在互联网上抓取数据以构建其AI工具(如Google翻译、巴德和云AI能力)的权利。更新后相关的谷歌隐私政策如下:谷歌使用信息来改进我们的服务,并开发惠及用户和公众的新产品、功能和技术。例如,我们使用公开可用的信息来帮助训练谷歌的AI模型,并构建产品和功能,如Google翻译、Bard和云AI能力。站长网2023-07-05 19:13:310000Google与美国国防部合作开发AI助手显微镜,协助医生诊断癌症
文章概要:1.美国国防部与Google合作开发了一款名为增强现实显微镜(ARM)的AI助手显微镜,用于帮助医生诊断癌症。2.这款显微镜能够在玻片上标识癌症的位置,显示病变程度,并生成黑白热图,有望成为病理学家的重要工具。3.目前已经有13台ARM,初步研究表明其潜力巨大,但仍需进行严格测试和验证。站长网2023-09-20 15:23:050000