trackgo专题

trackgo 学习笔记

还没开源         可控视频生成仍然是一项极具挑战性的任务。首要挑 战是精确控制,包括管理目标运动对象及其轨迹。现有 方法往往难以实现对这些元素的精确控制。例如, DragAnything(Wu 等人,2024 年)利用中心点和高斯 图引导目标对象沿着预定义的路径移动。然而,它无法 有效控制部分或细粒度物体的移动。另一种方法是 Boximator(Wang 等人,2024a),它利

勇夺三项SOTA!北航爱诗科技联合发布灵活高效可控视频生成方法TrackGo!

论文链接:https://arxiv.org/pdf/2408.11475 项目链接:https://zhtjtcz.github.io/TrackGo-Page/ ★ 亮点直击 本文引入了一种新颖的运动可控视频生成方法,称为TrackGo。该方法为用户提供了一种灵活的运动控制机制,通过结合 masks 和箭头,实现了在复杂场景中的精确操控,包括涉及多个对象、细粒度对象部件和复