Mip-NeRF

发布时间 2023-12-19 17:19:51作者: klaycsu

Mip-NeRF: A Multiscale Representation for Anti-Aliasing Neural Radiance Fields

  • high-resolution的时候,相机距离物体较近,捕捉的细节更多,需要高频信息;离远的看,我们看到的是更blurry、smoothing的图片。
  • 联合PE的作用,就是:不同尺度的视图需要不同的傅里叶特征,高频对于近距离图high-re是必要的,但远程视图低频傅里叶足够表达
  • 为什么使用PE,图像是个二维分布,图像的频率(也就是空间频率,区别时序信号的时间对应频率)也就是二维傅里叶分布。可以知道,对于轮廓、颜色变化明显的地方,频率是高的
  • nerf的PE频率是固定的,也就是不管相机远近,该点的频率都是L级别的傅里叶特征。

nerf的缺点

nerf

mip-map

参考 https://blog.csdn.net/qq_42428486/article/details/118856697

这种动态的设置,使得nerf处理远景自动过滤高频信息,缓解了锯齿现象(即去除了景象中的高频分量),处理近景时恢复对高频信息的处理。