Projects›Research · 论文

StreetSurf: Extending Multi-view Implicit Surface Reconstruction to Street Views

Jianfei Guo, Nianchen Deng, Xinyang Li, Yeqi Bai, Botian Shi, Chiyu Wang, Chenjing Ding, Dongliang Wang, Yikang Li

arXiv2023

bibtex

@article{guo2023streetsurf,
  title   = {StreetSurf: Extending Multi-view Implicit Surface Reconstruction to Street Views},
  author  = {Guo, Jianfei and Deng, Nianchen and Li, Xinyang and Bai, Yeqi and Shi, Botian
            and Wang, Chiyu and Ding, Chenjing and Wang, Dongliang and Li, Yikang},
  journal = {arXiv preprint arXiv:2306.04988},
  year    = {2023}
}

§1摘要

多视图隐式表面重建在物体中心场景已经相当成熟，但街景是另一回事：相机沿轨迹前进、视角受限、尺度从路面纹理跨到天际线。StreetSurf 把场景解耦为近景 / 远景 / 天空三个分支，各自选用合适的表示与采样策略，使 LiDAR-free 的纯视觉街景重建也能得到干净的表面几何；同时支持融合 LiDAR 以进一步收紧几何。

§2方法要点

近景：cuboid 内的多分辨率哈希网格 SDF，沿行车轨迹拉伸的收缩空间；
远景：hyper-cuboid NeRF++ 风格背景分支；
天空：方向性 radiance，干脆不给几何；
监督：光度 + 单目法向先验 + （可选）LiDAR 深度；
产物：可直接 marching cubes 出街区级 mesh，服务下游仿真（见 neuralsim）。

§3后续

StreetSurf 的 LiDAR-only 分支成为 ReSimAD 的重建底座；完整代码在 neuralsim 中长期维护。