Meta推全新视频生成模型FlowVid 保持视频高度一致性
要点:
Meta清华校友联手提出的视频生成模型FlowVid,通过V2V模型在1.5分钟内生成一段4秒的视频,标志着AI视频生成领域的新进展。
FlowVid采用空间条件和源视频中的时间光流信息,实现了视频合成的高度一致性,通过对第一帧进行光流变换编码,使得视频帧之间保持时间连贯性。
在用户研究中,FlowVid在及时对齐和整体视频质量方面表现出色,取得了45.7%的偏好率,远超其他V2V模型如CoDeF、Rerender和TokenFlow。
近期,Meta与清华校友合作提出的FlowVid视频生成模型在AI领域引起了瞩目。该模型采用V2V技术,在短短1.5分钟内生成一段4秒的视频,标志着AI视频生成领域的新突破。
FlowVid通过利用空间条件和源视频中的时间光流信息,解决了V2V合成面临的时间连贯性难题。其核心思想是通过光流技术,对首帧进行扭曲以匹配后续帧,结合空间-时间条件,纠正光流估计的不足,实现视频合成的高度一致性。
论文地址:https://arxiv.org/pdf/2312.17681.pdf
项目地址:https://top.aibase.com/tool/flowvid
用户研究表明,FlowVid在及时对齐和整体视频质量方面表现出色。相较于其他V2V模型如CoDeF、Rerender和TokenFlow,FlowVid获得了显著的偏好率,达到45.7%。这一优越性归功于FlowVid的解耦设计,通过编辑-传播过程,使用先进的I2I模型编辑第一帧,并在整个视频中编辑内容,从而实现了更长视频的生成。
研究人员还对FlowVid进行了与其他模型的定性比较,显示其在视频生成中的强大效果。这标志着AI视频生成模型迎来了元年,而FlowVid则在其中扮演着改变游戏规则的重要角色。总体而言,FlowVid的出现为AI视频生成领域带来了新的可能性,使得生成高一致性视频变得更加轻松和高效。
微软CEO在英国和欧盟调查中称与OpenAI合作“有利于竞争”
划重点:-🤝微软首席执行官萨蒂亚・纳拉表示,微软与人工智能公司OpenAI的合作是为了在人工智能领域与已整合参与者展开竞争。-🧐纳德拉认为监管机构可能会对这种合作关系产生竞争关注,但他认为合作对于促进竞争是必要的。-💼微软最近超越苹果成为全球最有价值的公司,纳德拉对公司的成功感到自豪,并表示将继续关注未来发展。站长网2024-01-17 11:29:100000时代的眼泪 童年经典漫画杂志《知音漫客》宣布即将休刊
根据某宝店铺的预购信息页面显示,实体漫画期刊《知音漫客》《漫客绘心》《漫客绘意》将于2023年5月至10月期间休刊。资料显示,《知音漫客》是中国大陆的一本文学漫画杂志,由知音文化传媒股份有限公司出版。该杂志以漫画的形式展现文学作品,内容涵盖了小说、诗歌、散文、戏剧等多种文学形式,同时还有一些漫画专栏和读者来信互动环节。站长网2023-05-17 17:19:510000贾跃亭旗下FF推出AI产品「FF aiPal Beta」 可提供生活服务
今日,贾跃亭旗下法拉第未来(FF)发文称,作为行业先驱和第一家集成ChatGPT技术的汽车制造商,FF推出了另一项革命性产品:FFaiPalBeta,这是出行领域的GenerativeAI产品,利用大语言模型(LLM)的先进技术,提供令人耳目一新的个性化人工智能体验。站长网2023-11-16 18:07:550000提前对齐,视频问答新SOTA!北大全新Video-LLaVA视觉语言大模型,秒懂视频笑点
【新智元导读】最近,来自北京大学等机构研究者提出了一种全新视觉语言大模型——Video-LLaVA,使得LLM能够同时接收图片和视频为输入。Video-LlaVA在下游任务中取得了卓越的性能,并在图片、视频的13个基准上达到先进的性能。这个结果表明,统一LLM的输入能让LLM的视觉理解能力提升。站长网2023-11-23 14:13:390000东方甄选与淘宝背后的“权力游戏”
8月29日,东方甄选终于在淘宝开启直播卖货,一些股东对此期盼已久;傍晚18点左右,销售额已突破1亿元。促成东方甄选选择进入淘宝生态的原因有很多,与抖音的摩擦、行业的变化、淘宝的接纳……但从东方甄选CEO孙东旭在2023财年年报的业绩交流会上的表述看,东方甄选是在产品力、组织力、内容力、供应链都达到一定水准后,做出的选择。站长网2023-08-30 09:18:590000