不二如是 发表于 2024-4-30 11:00:00

PhysDreamer：让3D物体符合物理规律动起来

本帖最后由 不二如是 于 2024-4-29 09:55 编辑



在线学习：

https://www.bilibili.com/video/BV1Kb421e7NE

在创建沉浸式虚拟体验时，实现真实物体交互至关重要。然而，针对新型交互合成真实的3D 物体动态仍然是一项重大挑战。

与无条件或文本条件的动态生成不同，动作条件的动态需要感知物体的物理材料特性，并基于这些特性（如物体刚度）来进行3D 运动预测。

然而，由于缺乏物质真实数据，估计物理材料特性是一个尚未解决的问题，因为为真实物体测量这些特性非常困难。

研究提出了 PhysDreamer，这是一种利用视频生成模型学习的物体动态先验知识的物理学方法。通过提炼这些先验知识，PhysDreamer 可以合成对新型交互（如外部力或代理操作）的真实物体响应。

简单的说，PhysDreamer通过视频生成模型学习不同物体的动力学规律，然后以符合物理规律的方式给3D物体添加运动效果。 如示例，戳一朵花，PhysDreamer可以接近真实的还原花会运动的方向过程。

论文地址：**** Hidden Message *****

sunshine_8205 发表于 2024-4-30 13:12:49

{:5_106:}

快速收敛 发表于 2024-4-30 13:29:02

{:10_327:}

天下乐 发表于 2024-4-30 15:11:42

谢谢分享~！
页: [1]
查看完整版本: PhysDreamer：让3D物体符合物理规律动起来