3DHM框架:一图片可模仿任意视频动作 360度无死角
加州大学伯克利分校的研究人员最近发布了一个名为3DHM的框架,能够让一张图片动起来,模仿任意视频动作,即使是视频中的衣服也能够运动得非常真实。这一框架无需标注数据,通过从单个图像完成纹理图来合成3D人体运动,然后渲染3D人体以模仿视频中actor的动作。这种方法使得他们能够在生成具有生动纹理的真人图像上取得良好的效果。
AI「脑补」画面太强了!李飞飞团队新作ZeroNVS,单个视图360度全场景生成
利用3D感知扩散模型训练模型,然后对单个物体进行SDS蒸馏的研究数不胜数。能够真正做到「场景级」的画面生成,从未实现。他还曾在谷歌研究院担任学生研究员。