视频生成模型Motion-I2V:支持控制视频运动轨迹
Motion-I2V是一种新型的视频生成模型,可以像Runway的运动笔刷一样控制视频生成。它能够从一张静态图片生成连贯且可控制的视频,效果惊人!这个技术还能对生成视频进行运动控制,例如可以生成一辆车在道路上行驶的视频,而且还能控制车辆的行驶方向和速度等细节。
项目地址:https://top.aibase.com/tool/motion-i2v
Motion-I2V的主要功能特点包括:
1、图像到视频的自动转换,能够将静态图像自动转换成连贯的动态视频,通过模拟图像中对象的自然运动,使静态图像“活”起来。
2、显式运动建模,通过两个阶段的处理,首先预测图像中物体的运动轨迹,然后根据这些轨迹生成动态视频,这种方法明确考虑物体的移动方式,使生成的视频更加自然和真实。
3、Motion-I2V还支持用户精确控制视频中的运动轨迹和运动区域,为用户提供了比传统方法更高的可控性。生成的视频不仅在视觉上连贯,而且用户可以通过简单的操作控制视频内容,使得生成的视频既满足特定的视觉要求,又能反映用户的创意意图。
4、Motion-I2V还支持将一个视频转换为另一个风格的视频,而无需额外的训练样本,这一功能基于其先进的运动增强和时间注意力技术。
工作原理是将整个图像到视频的转换过程分为两个步骤,并且在这两个步骤中明确地考虑了物体的移动情况。
第一步骤是预测图片中物体的移动轨迹,通过一个特别设计的预测器来实现,它能够基于当前的图片和一些指令来预测出物体的移动方式。
第二步骤是根据这些轨迹将图片中的内容“拖动”到视频的每一帧中去,从而创建出连贯的视频。与其他类似技术相比,Motion-I2V的优势在于它生成的视频不仅看起来更连贯,而且用户还可以更精确地控制视频中的运动情况。
此外,这个技术还能够做到从一个视频转换到另一个视频,而不需要额外的训练数据,这是通过在第二步骤中引入的一种新技术实现的。
快手已组建大模型研发团队:推进在搜索、AIGC 辅助生成图文视频、推荐方面的应用
站长之家(ChinaZ.com)5月23日消息:快手港交所公告,收入由2022年同期的211亿元增加19.7%至2023年第一季度的252亿元,主要是由于在线营销服务、直播及电商业务的增长。第一季度调整后净利润4200万元,去年同期亏损37.22亿元。本季度,快手首次实现上市后的集团层面整体盈利。站长网2023-05-23 09:23:530000船长与舵:百度的AI路线图
“如果要问现在百度的核心业务是什么,不是搜索、不是广告、不是云计算,而是文心一言。”作为国内大模型的头部玩家,百度文心一言的团队规模并不大,包括技术、产品、运营、市场等岗位在内,仅百余人左右。百度世界大会上,以大模型为代表的AI技术开启了对旗下应用的全面重构,对很多百度人而言,如果能够转岗到文心一言,“这几年就算值了”。0000HiDream.ai创始人梅涛:做视觉生成模型比扎堆做 LLM 机会更大
近日,HiDream.ai创始人梅涛在接受AI科技评论采访时表示,做一家对标MJ和SD的公司,比扎堆做LLM机会更大。据悉,梅涛曾在微软和京东工作多年,积累了丰富的技术和商业经验。他创办HiDream.ai的目标是在视觉基础模型领域超越国外的StableDiffusion和Midjourney,并实现全球市场的影响力。站长网2023-07-21 22:58:320001支付宝与华为合作 启动鸿蒙原生应用开发
支付宝与华为终端宣布合作,启动鸿蒙原生应用开发,进一步完善鸿蒙生态布局。双方合作将满足用户在不同终端和场景下的智慧生活服务需求。据悉,支付宝作为数字支付和数字互联开放平台,已服务8000万商家和10亿消费者。华为表示,鸿蒙原生应用的开发体现了鸿蒙原生应用的新发展。双方将在数字化服务等领域拓展合作,共建新生态,服务国内用户和市场。0000上万位创作者,一起聊出了今年的抖音出圈攻略
这个国庆,“江寻千(九月)”又一次火了。在带火打铁花这项非遗传承后,“江寻千(九月)”讲述了自己成为确山铁花千年来第一位女传人的故事。截至发稿前,这条视频抖音获赞超233万。现如今,短视频在为打铁花这项千年传承赋予更多魅力的同时,也吸引到越来越多网友的喜爱。有网友评论:“铁树银花落,万点星辰开。”站长网2024-10-10 03:29:000000