快手出品!DragAnything:拖动锚点精准控制视频物体和镜头运动
划重点:
⭐️ 快手科技联合浙江大学研究团队提出了 DragAnything 方法,利用实体表示实现了对任何物体的运动控制。
⭐️ 对比现有的运动控制方法,DragAnything 在用户友好性、对象多样性和多对象控制方面具有优势。
⭐️ 在实验中,DragAnything 在 FVD、FID 和用户调查方面取得了 state-of-the-art 的表现,尤其在对象运动控制方面超过了以前的方法。
快手科技联合浙江大学、新加坡国立大学表演实验室研究团队提出了一种名为 DragAnything 的新方法,通过实体表示实现了对任何物体的运动控制。
DragAnything可以实现用户轨迹交互,并具有SAM功能。包括可以精确控制物体的运动,生成高质量视频,用户只需在交互过程中绘制一条轨迹。另外DragAnything可实现对前景、背景和相机等不同元素的多样化运动控制。
研究团队通过分析发现,DragNUWA 的像素运动轨迹并不能很好地代表物体的整体运动,因为单个点无法表示整个实体。此外,他们还观察到,在 DragNUWA 合成的视频中,距离拖动点较近的像素展示了更大的运动,这并不符合他们对物体整体运动的期望。因此,他们提出了 DragAnything 方法,通过实体表示实现了对整个物体的运动控制,解决了这些问题。
与现有的运动控制技术相比,DragAnything 有几个显著的优势:
首先,基于轨迹的操作方式对用户更友好,尤其是在获取其他辅助信号(如遮罩、深度图等)较为繁琐时。用户只需在互动中绘制一条线(即轨迹)即可。
其次,DragAnything实体识别技术能够处理任何对象,这意味着它可以控制包括背景在内的各种实体的运动。
最后,这种实体识别技术还可以同时对多个对象实现不同的运动控制。
大量实验表明,该技术在 FVD、FID 和用户体验研究方面均达到了行业领先水平,特别是在对象运动控制方面,该方法比之前的技术(例如 DragNUWA)在人类评估中提高了26%。
DragAnything 方法在视频生成领域取得了显著进展,为实现对任何物体的精确运动控制提供了新的思路和方法。
产品入口:https://top.aibase.com/tool/draganything
914种高熵合金(HEA)合金相速查
高熵合金(HEA)以其独特的成分和优异的性能应用于航空航天、核能、医药、船舶和海洋工程等领域。“增材研究”整理了2004年至今,914种高熵合金(HEA)以及合金相。其中包括:481个固溶体(SS)相,54个金属间相(IM),97个非晶相(AM),282个固溶体(SS)相金属间相(IM)。不同的生产和成形工艺会产生高熵合金相的变化,因此“增材研究”提供的高熵合金统一为冶炼状态下的结果。站长网2023-05-25 07:33:390001504,Gateway,Time-out
快科技6月23日消息,今日,一加手机公布一加Ace3Pro全新绿野素青配色,采用超柔韧亲肤皮革”材质,首创松脉树纹工艺”。官方表示,一加Ace3Pro绿野素青通过30项严苛耐脏污测试验证,无惧户外风雨、紫外线,超柔韧亲肤皮革常用于高端跑车内饰,质感更高级。站长网2024-06-24 02:07:530000Nvidia发布GeForce RTX增强版,为AI PC数字助手提供支持
划重点:⭐️Nvidia推出新的RTX技术,为新的GeForceRTXAI笔记本电脑提供动力⭐️ProjectG-Assist技术演示为PC游戏和应用提供上下文感知的帮助⭐️NvidiaACE数字人物平台首个PCNIM首次亮相,为数字人物提供支持站长网2024-06-03 13:11:010000巨人网络与阿里云达成合作 共建“游戏+AI”智算平台
今日,巨人网络与阿里云宣布达成“游戏AI”全面合作。根据合作备忘录,阿里云与巨人网络将共建“游戏AI”智算平台。基于巨人网络的游戏研发平台、阿里云通义千问大模型以及AIGC产品能力,双方开展全面合作,打造AI在游戏领域的场景落地标杆项目。站长网2023-07-14 20:07:470000打开男人的钱包,这款App上线第3个月收入超200万
不过最近,编辑部发现一个“含男量”很高的App,成绩意外地还不错。连续两个月下载量逼近百万,变美App盯上男性用户?Umax-BecomeHot是一款颜值打分器App。用户上传脸部照片,系统通过分析给用户颜值打分,然后针对性指出需要改进的地方并督促用户改进,最终让用户实现颜值飞升。站长网2024-03-06 11:13:230000