支持Animatediff所有控制方式!AnimateLCM 4步推理即可生成视频
站长网2024-02-02 17:06:311阅
又有团队开卷视频生成了!这个项目在视频生成方面非常优秀。它使用了一致性模型(Consistency Model, CM)的启发,简化了预训练的图像扩散模型以加速采样过程。这一模型还成功扩展到了潜在一致性模型(Latent Consistency Model, LCM),用于条件图像生成,最终形成了AnimateLCM。
项目地址:https://top.aibase.com/tool/animatelcm
AnimateLCM能够在很少的步骤中生成高质量的视频。相比直接在原始视频数据集上应用一致性学习,该项目提出了一种解耦的一致性学习策略,分别对图像生成的基础知识和运动生成的基础知识进行提炼。这种策略提高了训练效率并提升了生成视频的视觉质量。
此外,为了结合稳定扩散社区中的即插即用适配器来实现各种功能,比如使用ControlNet进行可控制的视频生成,该项目提出了一种高效的策略。这个策略不仅可以将现有的适配器调整到文本条件视频一致性模型中,还可以从零开始训练适配器,而不会影响采样速度。
在基于图像的视频生成和基于布局的视频生成中,AnimateLCM都取得了优异的成绩。从演示来看视频效果也很不错,支持现有 SD 生态 Animatediff 的所有控制方式,将LCM用在视频生成只需要4步推理就可以生成视频。目前,AnimateLCM暂未发布代码和权重,期待能够尽快上代码。
0001
评论列表
共(0)条相关推荐
茶百道就改标签日期致歉:第一时间关闭涉事门店
近日,有媒体揭露了茶百道在武汉和长沙的两家门店存在擅自篡改原料赏味期标签的违规行为。据悉,茶百道在接到相关报道后,立即采取行动,第一时间关闭了涉事门店,并积极配合当地市场监管部门的调查与整改工作。茶百道表示,公司对于此类违规行为零容忍,将严格追究相关责任人的责任。站长网2024-03-20 15:23:130000剧综营销2023:既巧妙,又有效
王家卫执导的首部电视剧《繁花》、迷雾剧场回归的《三大队》、丁黑导演和张若昀二搭的《鸣龙少年》……岁末年初,各大视频平台纷纷拿出“压箱底”的王牌项目,为过去一年画上一个热闹圆满的句号。对广告主来说,2023年是从逆风状态切换到复苏阶段的一年。QuestMobile显示,2023年前三个季度的互联网广告市场规模都同比去年实现了增长。精品剧综持续涌现、广告主预算恢复下,剧综投放整体“变中向好”:0000AI大模型应用的初熟场景,可能是教育
2023年的中概股没有什么新闻——全球科技行业的C位被AI大模型抢走了,北美的几家科技巨头风光无限,投资者纷纷传诵着英伟达的高端GPU如何不可替代、微软的OfficeCopilot如何打开了生成式AI的商业化道路,以及苹果、亚马逊如何在自身的核心产品当中应用AI大模型。这场大戏十分风光,可惜风光都是别人的,与中概股科技公司无关。站长网2023-08-26 16:04:480000ChatGPT企业版火爆,四个月内吸引260家企业入驻
**划重点:**1.📈OpenAI旗舰产品ChatGPT企业版在四个月内迅速获得260家企业用户。2.🔒企业版ChatGPT提供数据加密和隐私保护功能,满足企业特定需求,灵活定价。3.💡企业用户总计超过15万员工,Microsoft鼓励员工使用以提供更高隐私和安全性的企业版本。0000“人形机器人第一股”诞生!优必选上市首日市值逼近390亿港元,人形机器人加速驶向商业化
史上第一次!人形机器人在港交所现场同人类一起敲锣。这架势,这阵仗吸引了无数关注,成为在场所有人类的焦点。现场,熊猫机器人优悠走上舞台,为优必选创始人、董事长兼CEO递上锣锤。更令人瞩目的是,优必选全新一代工业版人形机器人WalkerS首次亮相,手持另一个锣锤走向舞台中央,与周剑一起敲响开市锣。自此,全球“人形机器人第一股”诞生,来自中国,来自优必选。0000