#论文 arxiv速递| 上海科技大学、字节等发布HiFi4G：基于紧致高斯抛雪球算法的高保真人体行为绘制
【HiFi4G: High-Fidelity Human Performance Rendering via Compact Gaussian Splatting】
作者单位：上海科技大学、字节跳动、 DGENE、NeuDim
文章链接：[2312.03461] HiFi4G: High-Fidelity Human Performan...
项目主页：HiFi4G: High-Fidelity Human Performance Rendering ...
近期，我们看到了真实动听体建模和渲染取得的巨大进步。然而，如何高效地绘制逼真的人类行为并将其集成到栅格化流水线中仍旧具有寻衅性。在本文中，我们提出了Hi Fi4G，一种显式的、紧凑的基于高斯的方法，用于从密集的视频中绘制高保真的人类性能。我们的核心直觉是将3D高斯表示与非刚性跟踪结合起来，实现了紧凑且压缩友好的表示。
我们首先提出了一种双图机制来获取运动先验，用粗粒度的形变图进行有效的初始化，用细粒度的高斯图来实行后续的约束。然后，我们利用具有自适应时空正则项的4D高斯优化方案来有效地平衡非刚性先验和高斯更新。我们还提出了一种带有残差补偿的配套压缩方案，用于在各种平台上的沉浸式体验。它实现了大约25倍的压缩率，每帧存储不到2MB。大量的实验证明了我们方法的有效性，在优化速率、渲染质量和存储开销方面显著优于现有方法。
以上内容来自小六的机器人SLAM学习圈（6年积累，全国最大的机器人SLAM互换社区，为SLAM行业从业者供应从入门、学习、互换、求职、线下链接、互助、咨询、答疑等一系列的做事）知识星球逐日更新内容
推举教程
发顶会顶刊不再难！
多传感器领悟SLAM、天生式AI、3DGS、NeRF、标定等方向
BOSS：用了机器人仿真，立省几十万
自动驾驶中的GNSS、RTK到底多主要？
重大变革！
NeRF和3D高斯喷溅如何重塑SLAM？
15讲全部上线！
2024最炸裂的新技能！
3D Gaussian Splatting（全网独家）
太强了！
天下第一款开源的自动驾驶一体化框架Autoware！
（附互换群）
如何从零开始搭一套自己的SLAM系统？
17讲全部上线！
全网首个详解深度学习特色开源算法SuperPoint和SuperGlue（附互换群）
最炸裂的机器人AI技能教程都在这了！