Lightricks发布LongAnimatediff 解决单次生成视频长度问题
站长网2023-12-25 17:39:350阅
Lightricks公司最近发布了LongAnimatediff项目,这一次主要解决的问题是Animatediff一次只能生成16帧视频的限制。而LongAnimatediff则包括两个模型,一个可以最多一次生成64帧的视频,另一个可以生成32帧的视频,而且32帧那个效果更好。
目前,Animatediff一次只能生成16帧的视频,更多的帧数是通过上下文叠加的方式实现的。然而,这种方法存在着生成时间过长后,视频一致性迅速下降,画面崩坏的问题。

项目地址:https://github.com/Lightricks/LongAnimateDiff/
LongAnimatediff项目提供了两个模型,其中一个可以最多一次生成64帧的视频,另一个可以生成32帧的视频。32帧那个效果更好一些。
使用LongAnimatediff的方法很简单,只需直接去Huggingface下载模型,然后用ComfyUI加载就可以了。需要注意的是,64帧模型的Motion_scale要调整到1.28,而32帧的Motion_scale要调整到1.15。
在进行了对比测试之后,发现32帧的模型在生成非正方形内容的画面时会出现拉伸的情况。而64帧模型在生成64帧的画面时会出现崩坏,但生成32帧的画面时则没有问题,且效果也很好。因此,目前推荐使用64帧的模型。
0000
评论列表
共(0)条相关推荐
FF称2024年主要重点是提高产量 将发布“中美汽车产业桥梁战略”
在今天举行的公司2023年第四季度及全年财务业绩电话会议上,FF管理层分享了2023年的主要里程碑、业务增长举措以及2024年的重要计划。FF表示,2024年的主要重点是提高产量。站长网2024-05-29 18:18:120000产业级AI原生应用的「超级外挂」,应用已在200+行业场景落地
今年AI领域的热门词汇,非”AI原生应用”莫属。而现在,这个浪潮之巅的方向,又一件神兵利器有了成绩单证明——百度智能云千帆AppBuilder。作为百度智能云推出的产业级AI原生应用开发平台,AppBuilder致力于打通大模型到业务的最后一公里。短短推出半年以后,AppBuilder公布了成绩单:服务客户数已突破10万,应用已在200行业场景落地;站长网2024-06-08 12:43:050001Zoom 推出 Zoom IQ 功能:采用 OpenAI、Anthropic 等多个 AI 模型提升协作效率
视频会议软件Zoom日前推出了ZoomIQ的重要功能,这是一个智能助手,通过生成式人工智能提升协作能力,释放人们的潜力。现在,这些功能已通过免费试用提供给选择计划的客户。Zoom会议摘要和Zoom团队聊天撰写功能将帮助团队提高生产力,平衡工作日的优先事项,并更有效地协作。站长网2023-06-12 22:57:140000苹果招募生成式AI人才 提供数十个大模型岗位
根据最新的招聘信息,苹果正在扩大其生成式人工智能领域的专业团队,并计划将这项技术应用于iPhone和iPad等产品。这一举措显示出苹果对生成式人工智能的强烈兴趣,并致力于不断提升其在移动设备上的性能。通过在全球各地设立办公室并招聘数十个岗位,苹果正在积极投入于大语言模型的研究。这些职位的主要职责是根据用户的简单提示生成文本、图像或代码。站长网2023-08-07 09:06:010000人工智能安全研究公司 CEO 称 Rishi Sunak 的全球 AI 安全峰会可能收效甚微
一位受邀参加下个月RishiSunak国际人工智能安全峰会的高管警告说,这次会议可能收效甚微,并指责强大的科技公司试图「操纵」这场具有里程碑意义的会议。人工智能安全研究公司Conjecture的首席执行官ConnorLeahy表示,他相信政府首脑准备同意一种监管方式,允许企业继续开发「上帝般」的人工智能,几乎不受限制。站长网2023-10-24 21:25:070000