PhysicEdit:利用视频先验进行物理感知的图像编辑
编辑图像是源图像与目标编辑图像之间的一系列状态转换。然而,现有范式在编辑过程中并未显式包含任何转换先验。
这在涉及因果动力学(例如折射、变形)的编辑中尤为突出。
为了建模这种物理信息,我们利用视频中丰富的先验知识,引入PhysicEdit🔥
TL;DR:我们在一个包含推理轨迹和固定长度转换查询的精选视频数据集上微调QwenImage Edit,以实现坚实的物理感知图像编辑!
在此过程中,我们引入了一个很酷的数据集"PhysicTran38K",包含五个物理领域的38K条转换轨迹,并设计了一种方法,利用该数据集为QwenImage Edit提供监督。
欢迎点击了解更多⬇️
这在涉及因果动力学(例如折射、变形)的编辑中尤为突出。
为了建模这种物理信息,我们利用视频中丰富的先验知识,引入PhysicEdit🔥
TL;DR:我们在一个包含推理轨迹和固定长度转换查询的精选视频数据集上微调QwenImage Edit,以实现坚实的物理感知图像编辑!
在此过程中,我们引入了一个很酷的数据集"PhysicTran38K",包含五个物理领域的38K条转换轨迹,并设计了一种方法,利用该数据集为QwenImage Edit提供监督。
欢迎点击了解更多⬇️