首页
用于无监督视频分解的可变形精灵
返回

用于无监督视频分解的可变形精灵

2022-12-19 科技信息 By:佚名
最佳答案当人们观察动态场景的视频时,他们不会看到随着时间推移出现的一组不相交的像素,而是在 3D 场景中移动的高级对象。受这一观察的启发,最近的一篇论文提出了一种新方法,将复杂动态场景的视频分解为一组持续运动组。研究人员提出了整个视频中运动组的表示,称为 Deformable Sprites。Deformable Spr...

当人们观察动态场景的视频时,他们不会看到随着时间推移出现的一组不相交的像素,而是在 3D 场景中移动的高级对象。受这一观察的启发,最近的一篇论文提出了一种新方法,将复杂动态场景的视频分解为一组持续运动组。

研究人员提出了整个视频中运动组的表示,称为 Deformable Sprites。Deformable Sprites 表示仅根据视频中存在的图像和运动提示拟合视频,无需任何用户输入。此外,该方法可以处理带有移动相机和铰接或可变形物体的视频。

该方法支持诸如一致的视频编辑或 2D 运动雕塑效果等应用。对标准视频对象分割基准的评估表明,所提出的方法获得了有竞争力的结果。

我们描述了一种从输入视频中提取动态场景的持久元素的方法。我们将每个场景元素表示为由三个组件组成的 \emph{Deformable Sprite}:1)整个视频的 2D 纹理图像,2)元素的每帧掩码,以及 3)映射纹理的非刚性变形图像到每个视频帧。由此产生的分解允许诸如一致的视频编辑之类的应用。Deformable Sprites 是一种针对单个视频进行优化的视频自动编码器模型,不需要在大型数据集上进行训练,也不依赖于预训练模型。此外,我们的方法不需要对象掩码或其他用户输入,并且发现比以前的工作更广泛的移动对象。我们在标准视频数据集上评估我们的方法,并在各种互联网视频上展示定性结果。

猜你喜欢
dnf卡片怎么合成在哪里(dnf卡片合成在哪)

dnf卡片怎么合成在哪里(dnf卡片合成在哪)

12-18 0 阅读
大青沟属于哪里(大青沟)

大青沟属于哪里(大青沟)

12-18 0 阅读
帕金森有什么症状(什么是帕金森病)

帕金森有什么症状(什么是帕金森病)

12-18 0 阅读
兰州石油化工学校(关于兰州石油化工学校的介绍)

兰州石油化工学校(关于兰州石油化工学校的介绍)

12-19 0 阅读
谷歌Nest音频评测

谷歌Nest音频评测

12-18 0 阅读
我们来了2(关于我们来了2的介绍)

我们来了2(关于我们来了2的介绍)

12-19 0 阅读
热门推荐
dnf卡片怎么合成在哪里(dnf卡片合成在哪)

dnf卡片怎么合成在哪里(dnf卡片合成在哪)

12-18 0 阅读
大青沟属于哪里(大青沟)

大青沟属于哪里(大青沟)

12-18 0 阅读
帕金森有什么症状(什么是帕金森病)

帕金森有什么症状(什么是帕金森病)

12-18 0 阅读
兰州石油化工学校(关于兰州石油化工学校的介绍)

兰州石油化工学校(关于兰州石油化工学校的介绍)

12-19 0 阅读
谷歌Nest音频评测

谷歌Nest音频评测

12-18 0 阅读
我们来了2(关于我们来了2的介绍)

我们来了2(关于我们来了2的介绍)

12-19 0 阅读
tuiii什么意思(tui什么意思网络语言)

tuiii什么意思(tui什么意思网络语言)

12-18 0 阅读
考军校身高180体重多少标准(身高180体重多少标准)

考军校身高180体重多少标准(身高180体重多少标准)

12-18 0 阅读
了凡四训 净空法师(关于了凡四训 净空法师的介绍)

了凡四训 净空法师(关于了凡四训 净空法师的介绍)

12-18 0 阅读
电视是等离子好还是液晶的好啊(等离子电视和液晶电视哪个好)

电视是等离子好还是液晶的好啊(等离子电视和液晶电视哪个好)

12-18 0 阅读