Boximator是字节跳动发布的一款视频编辑工具，它通过简单的操作允许用户控制视频中主体的运动轨迹。这款工具的创新之处在于其直观的交互方式，用户可以选择需要运动的物体并绘制其结束位置和运动路径，物体将严格按照这些指示运动。Boximator支持轨迹控制、多主体操作、路线定制，并且可以作为插件与SD视频模型兼容使用。

核心功能：

1. 轨迹控制：

• 用户可以通过圈选方式设定视频中主体的运动轨迹。

2. 多主体支持：

• 支持同时圈选多个主体，并为每个主体设置不同的运动路径。

3. 路线定制：

• 用户可以为视频中的主体设置具体的移动路线。

4. 插件兼容性：

• 与SD视频模型兼容，可作为插件使用。

5. 用户友好：

• 操作简单直观，无需复杂的视频编辑知识。

6. 高度兼容：

• 可作为插件与当前流行的SD视频模型配合使用。

7. 创新交互：

• 创新的圈选交互方式，使视频编辑更直观便捷。

应用场景：

• 视频内容制作：

• 提供新的手段给视频创作者制作动态视频。

• 动画创作：

• 简化动画制作者设计人物或物体运动轨迹的流程。

• 教育演示：

• 教师可利用Boximator制作直观的动态教学材料。

使用方法：使用Boximator时，用户首先圈出图片中的主体，然后圈出其要移动到的位置，即可生成主体从起点到终点移动的视频。支持设置移动路线，并支持圈选多个主体。

技术亮点：Boximator采用了硬性约束（hard box）和软性约束（soft box）两种机制，允许用户在视频的某一帧中选取特定对象，并指定该对象在未来画面中的位置、形状或运动轨迹。训练过程中，通过冻结原始权重并仅训练控制模块，保留了原模型的知识。

评估结果：实验证明，Boximator在视频质量评估标准FVD上达到了行业领先水平，并且在引入框选约束后，视频质量得到了进一步的提升。用户评估显示，用户更倾向于选择Boximator生成的视频效果。

资源链接：

• Boximator论文：https://arxiv.org/abs/2402.01566

• Boximator演示：https://boximator.github.io/#Demo

• Boximator项目：https://boximator.github.io/

Boximator作为一个创新的视频合成工具，为用户提供了一种新的视频编辑和内容创作方式，尤其适用于需要精细控制视频中物体运动的场景。