快手出品!DragAnything:拖动锚点精准控制视频物体和镜头运动
划重点:
⭐️ 快手科技联合浙江大学研究团队提出了 DragAnything 方法,利用实体表示实现了对任何物体的运动控制。
⭐️ 对比现有的运动控制方法,DragAnything 在用户友好性、对象多样性和多对象控制方面具有优势。
⭐️ 在实验中,DragAnything 在 FVD、FID 和用户调查方面取得了 state-of-the-art 的表现,尤其在对象运动控制方面超过了以前的方法。
快手科技联合浙江大学、新加坡国立大学表演实验室研究团队提出了一种名为 DragAnything 的新方法,通过实体表示实现了对任何物体的运动控制。
DragAnything可以实现用户轨迹交互,并具有SAM功能。包括可以精确控制物体的运动,生成高质量视频,用户只需在交互过程中绘制一条轨迹。另外DragAnything可实现对前景、背景和相机等不同元素的多样化运动控制。

研究团队通过分析发现,DragNUWA 的像素运动轨迹并不能很好地代表物体的整体运动,因为单个点无法表示整个实体。此外,他们还观察到,在 DragNUWA 合成的视频中,距离拖动点较近的像素展示了更大的运动,这并不符合他们对物体整体运动的期望。因此,他们提出了 DragAnything 方法,通过实体表示实现了对整个物体的运动控制,解决了这些问题。
与现有的运动控制技术相比,DragAnything 有几个显著的优势:
首先,基于轨迹的操作方式对用户更友好,尤其是在获取其他辅助信号(如遮罩、深度图等)较为繁琐时。用户只需在互动中绘制一条线(即轨迹)即可。
其次,DragAnything实体识别技术能够处理任何对象,这意味着它可以控制包括背景在内的各种实体的运动。
最后,这种实体识别技术还可以同时对多个对象实现不同的运动控制。
大量实验表明,该技术在 FVD、FID 和用户体验研究方面均达到了行业领先水平,特别是在对象运动控制方面,该方法比之前的技术(例如 DragNUWA)在人类评估中提高了26%。

DragAnything 方法在视频生成领域取得了显著进展,为实现对任何物体的精确运动控制提供了新的思路和方法。
产品入口:https://top.aibase.com/tool/draganything
损失过亿!唯品会崩溃遭P0级故障:负责人被免职
快科技6月5日消息,今年3月29日,唯品会崩了”登上热搜,由于崩溃时间太长,影响了很多消费者无法正常下单,唯品会官方对此回应称,因系统短时故障,主站加购”等功能或出现异常。今日,唯品会发布关于329机房宕机故障处理公告”,公告称,3月29日(00:14-12:01)南沙IDC冷冻系统故障,导致机房设备温度快速升高宕机,造成线上商城停止服务。站长网2023-06-06 10:35:340000基于百川大模型 我国首个AI儿科医生上岗
快科技2月14日消息,据报道,国家儿童医学中心首都医科大学附属儿童医院开展了国内首次AI儿科医生多学科专家”的双医并行多学科会诊。此次会诊,除了多科室的知名专家,还有一位特殊专家由北京儿童医院与百川智能、小儿方健康科技联合研发,以BaichuanM1大模型为底座打造的AI儿科医生”。0000继淘宝京东之后 抖音支持仅退款
继淘宝和京东之后,抖音电商也宣布推出发货后极速退款服务。这一服务旨在提高消费者在抖音平台上的购物体验,减少退货过程中商家退款时长。这一服务适用于抖音平台内所有的小店商家,商家无法自主开通或关闭该服务。0000华为鸿蒙HarmonyOS 4小艺语音助手支持 AI 大模型能力
华为将在8月4日发布鸿蒙HarmonyOS4系统。根据华为余承东的预热,华为手机的小艺语音助手已升级支持AI大语言模型,可以像AI聊天机器人一样根据要求写出微博文案。此前,华为已经针对开发者公布了HarmonyOS4.0,以便于开发者提前进行适配,也因此被曝光出了一些新系统的特性。站长网2023-08-02 10:30:500000小米13 Ultra今日正式开售 售价5999元起
今日10点,影像旗舰小米13Ultra将正式全渠道开售,12GB256GB版本售价5999元,16GB512GB版本售价6499元,16GB1TB版本售价7299元。有黑色、白色、橄榄绿三种颜色可选。小米13Ultra搭载第二代骁龙8移动平台,CPU实现了35%的性能提升和40%的能效提升,AdrenoGPU实现了25%的性能提升和45%的能效提升。站长网2023-04-21 08:22:380002