Lightricks发布LongAnimatediff 解决单次生成视频长度问题
站长网2023-12-25 17:39:350阅
Lightricks公司最近发布了LongAnimatediff项目,这一次主要解决的问题是Animatediff一次只能生成16帧视频的限制。而LongAnimatediff则包括两个模型,一个可以最多一次生成64帧的视频,另一个可以生成32帧的视频,而且32帧那个效果更好。
目前,Animatediff一次只能生成16帧的视频,更多的帧数是通过上下文叠加的方式实现的。然而,这种方法存在着生成时间过长后,视频一致性迅速下降,画面崩坏的问题。
项目地址:https://github.com/Lightricks/LongAnimateDiff/
LongAnimatediff项目提供了两个模型,其中一个可以最多一次生成64帧的视频,另一个可以生成32帧的视频。32帧那个效果更好一些。
使用LongAnimatediff的方法很简单,只需直接去Huggingface下载模型,然后用ComfyUI加载就可以了。需要注意的是,64帧模型的Motion_scale要调整到1.28,而32帧的Motion_scale要调整到1.15。
在进行了对比测试之后,发现32帧的模型在生成非正方形内容的画面时会出现拉伸的情况。而64帧模型在生成64帧的画面时会出现崩坏,但生成32帧的画面时则没有问题,且效果也很好。因此,目前推荐使用64帧的模型。
0000
评论列表
共(0)条相关推荐
苹果客服回应发现石油触发定位:不会自动触发
近日,短视频平台上掀起了一股“发现石油”的热潮,众多视频下方纷纷涌现出“发现石油”的评论,引发广泛关注。这一现象的起源是一位网友在评论区留言“我发现大量石油”,随后其iPhone手机竟自动启动了定位功能。这一现象让许多网友开始怀疑iPhone是否会在收集、发送用户的位置信息。站长网2024-04-25 18:18:080000贾跃亭:第二品牌将大规模放量 FF91核心AI技术赋能
在FF公司总部举办的首届股民社区日活动中,贾跃亭公布了FF的第二品牌车型计划,旨在打造一款结合人工智能技术的豪华汽车,称之为“AI未来之车、AI人民之车”。他强调,他只关注那些真正对公司有益的建议和股民的意见,并表示股东的支持和他们共同的梦想是支撑FF至今的关键。站长网2024-07-23 10:17:090000前沿科技她力量|中关村论坛科技女性创新论坛嘉宾风采展示
2023中关村论坛即将开幕。5月28日,由全国妇联、科技部、中国科协、北京市政府主办,北京市妇联承办的科技女性创新论坛作为平行论坛之一将举办,这是中关村论坛首次开设女性平行论坛。论坛以“前沿科技她力量”为年度主题,将邀请诺贝尔奖获得者、中国科学院院士在内的国内外前沿科技领域优秀女科技工作者,围绕人工智能、生命科学等热点议题展开讨论。今天起,“前沿科技她力量”专栏将陆续推出嘉宾介绍。站长网2023-05-24 06:59:230000马斯克发文反对美国禁止TikTok:违背言论和表达自由
快科技4月20日消息,当地时间4月19日,特斯拉CEO马斯克在社交媒体平台X发文明确反对美国禁止TikTok,其表示:我认为TikTok不应在美国被禁,尽管相关禁令可能会让X平台受益,这样的做法有悖于言论和表达自由”。今年3月13日,美国众议院投票通过了一项保护美国人免受外国对手控制应用程序侵害法”的法案。站长网2024-04-20 13:55:320000未来7年内,生成式 AI 将在12个垂直领域企业市场创造至少4500亿美元价值
全球技术情报公司ABIResearch预计,未来7年内,生成式AI将为12个不同垂直领域的企业市场带来超过4500亿美元的收入。尽管生成式AI已经在企业垂直领域中有了数百个应用案例,但其采用将分为三个阶段。目前的阶段是内部聚焦,通过提供生成工具来增加员工的生产力。第二个阶段将对外部服务产生更大的影响,企业将能够开始构建围绕生成式AI的产品或服务。站长网2023-07-27 18:06:090000