初学者必备，NeRF学习笔记洞察一切！

---

神经辐射场究竟是什么

辐射场：由光源发出的光线在场景中的传播和反射过程中所形成的能量分布。通俗来说就是一个函数，记录了空间某个位置处向某个方向的辐射信息，辐射信息（或者说能量分布）其实就是颜色、亮度、阴影等信息。这里的方向需要额外留意，它是nerf实现真实重建的重要因素之一！

由此引出神经辐射场的概念。
神经辐射场：用神经网络储存空间位置向任意方向的辐射。原文中的描述如下：

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

更加规范的公式表达如下：

输入3D位置(x,y,z)和2D的视角方向()，输出是颜色和体密度

NeRF具体的网络结果参考原文如下：

• 3D坐标x输入第一个网络fσ，包含8层全连接层，每层256个神经元，ReLU激活；
• 网络fσ输出体密度σ和一个256维向量，该向量与视角方向d送入fc（一层，128通道，ReLU激活）预测RGB；

由上面可知，NeRF是隐式建模，因为模型是储存在MLP里面的，模型就是MLP的参数，这和以往点云和mesh建模不同（点云/mesh是可以直接看到模型的）。NeRF必须查询一个个的三维点，然后渲染成一章图像。这种查看方式或者说渲染方式就叫体渲染。

在看体渲染之前。我们先看一下网络的效果如何：

可以看出，不同视角下颜色是不同的！这是NeRF相对于传统重建非常重要的优势之一~

NeRF的核心：体渲染

下面进入NeRF的第二个核心要点——体渲染。体渲染就是用来将颜色和密度渲染成2D图像的方法！

示意图如下：图a展示了从相机光心位置发出射线，射线上有采样点，将采样点和方向送入MLP获得颜色和体密度。图c展示的的就是沿射线的体密度分布曲线，是通过采样获得的，对曲线进行积分就能获得像素的颜色。这个过程就是体渲染

总结一下体渲染步骤：

• 从相机光心发出穿透每个像素的射线，射线上取三维采样点；
• 将采样点坐标和视角方向送入MLP计算颜色和体密度；
• 按体密度积分（堆叠）颜色信息，形成2D图像

体渲染的公式如下：

当然实际使用的是离散版本公式：

Scenario

一个AI生成游戏资产的工具

56 查看详情

隐式重建流程

在讲完神经辐射场和体渲染后，现在开始完整的重建流程~

在形成一个完成的pipeline之前，还有以下两个问题需要解决：

为了解决上述两个问题，NeRF提出了位置编码和分层采样过程

位置编码：

论文直观展示了位置编码的效果对比：

可以看出，去掉位置编码，模型无法表达高频的几何和纹理信息~

多层采用：

训练流程如下：

实验和总结

评价指标：

实验设置：

实验结果可以看出，各种材质的小球上面的散光也可以很好的表现出来~

消融实验：

总结

文提出的神经辐射场，从相机光心发出穿过像素的采样射线，在射线上取点，将其三维位置和视角方向用一个MLP映射到体密度和颜色，然后用体渲染堆叠采样射线上的体密度和颜色，获得像素值。像素值与GT图像求误差后反向传播，优化MLP参数。本文用这样的隐式重建方法实现了照片级的具有真实感的模型重建和渲染。

缺陷：

• 渲染、训练速度慢；
• 对视角数量和分布有较高要求；
• 难以拓展到有背景的或者较大的场景。

原文链接：https://mp.weixin.qq.com/s/ctDBTaLWuHTM9MONrAor4g

以上就是初学者必备，NeRF学习笔记洞察一切！的详细内容，更多请关注其它相关文章！

# 云和  # 新建区营销推广哪个好  # 高端网站建设原理有哪些  # 如何做好病毒营销推广  # 宿州网络营销推广哪里有  # 南开区律师网站建设费用  # 学习seo有前途吗  # 象山seo电话  # 孝昌县seo关键词排名优化如何  # 推广产品营销手段包括哪些  # 美团外卖seo优化  # 技术  # 小红  # 两周  # 隐式  # 一言  # 或者说  # 可以看出  # 光心  # 学习笔记  # 之作  # 自动驾驶 

相关栏目： 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894 】

相关推荐： 微幼科技晨检机器人与人工晨检相比，有何优势  微软AR/VR专利提出使用时间复用谐振驱动产生双极性电源  V社谈AI制作游戏被ban：为确保开发者有素材所有权  业内领先 四川大学华西第四医院甲状腺乳腺外科成功进入手术机器人时代  Snow Kylin登陆中国列车，打造全球首条元宇宙专列  机构研选 | 虚拟电厂是电力物联网升级版 智能电网望迎来高速发展  百亿量化私募：量化投资进入“精耕细作”时代 AI带来行业新变革  硅谷人工智能研究院创始人皮埃罗·斯加鲁菲：Transformer模型演讲  调查：过半数艺术家认为 AI 作图无法帮助他们的工作  亚太地区 70% 的企业高管正探索生成式 AI 应用或已经进行投资  聚焦人工智能大模型、AIGC 徐汇十余场重磅论坛等你来  人工智能在交通领域的革新：智能解决方案彻底改变交通方式  建立元宇宙产业联盟：移动、咪咕、华为、小米等加入  周鸿祎：360智脑开放API接口 AI大模型将赋能百行千业  2025年深圳举办的SUSECON 创新峰会开始接受报名  生成式人工智能进入产业应用！但再“聪明”仍是工具，最终目的是服务于人  开创全新虚拟现实体验的Pimax Crystal VR头显  掌阅科技申请阅爱聊商标 掌阅科技申请AI相关商标  小岛秀夫不反对使用AI 但认为人类应该凌驾于AI  360发布AI数字人广场，可同孙悟空、爱因斯坦等古今中外角色对话  五款 AI 网站构建器，任何人都能快速构建网站  鉴智机器人发布基于地平线征程5的标准视觉感知产品  中兴通讯无人机高空基站助力北京门头沟受灾乡镇保障应急通信  苹果AR头显商标与华为撞车，在中国或改名  如布AI口袋学习机S12 将亮相综艺节目《好样的！国货》  今年，全球客服中心支出将增长 16.2%，迎接对话式 AI 的浪潮，根据 Gartner 报告  再也不怕「视频会议」尬住了！谷歌CHI顶会发布新神器Visual Captions：让图片做你的字幕助手  鹅厂机器狗抢起真狗「饭碗」！会撒欢儿做游戏，遛人也贼6  扎克伯格吐槽苹果Vision Pro：社交落后Meta太多，无法建设元宇宙  美图发布国内首个“懂美学的”AI视觉大模型MiracleVision  一次购买全年省心，入手科沃斯这几台机器人，省下时间就是金钱  拓普龙7188ML：轻便壁挂式工控机箱，为人工智能应用场景提供有力保障  阿里大文娱CTO郑勇：生成式AI将引发内容行业巨变，*制作机会挑战并存  特斯拉首发人形机器人“擎天柱”亮相世界人工智能大会  AI绘画，还需要懂数学？  AI人工智能软件，婚纱设计师的必备利器  微软Xbox称VR和AR还需要时间 先玩大的  换流站无线物联网络为新型电力系统铺设“数字之路”  行业首发「超级智绘」AI故事集，TCL实业推进AI技术应用  苹果在韩举办首届中小企业智能制造论坛，加速推动工业4.0发展  美图秀秀发布七款 AI 工具：修图一样修视频、打造电影级上镜脸  亚马逊确认今年不会举办 re:MARS 机器人和人工智能大会  联想创投携手12家被投企业MWC展示元宇宙、机器人等技术  IBM将模拟计算用于人工智能，重塑AI计算  生成式人工智能如何改变云安全的游戏规则  令人惊叹！AI模型能够以iPhone照片为基础创作诗歌  7条线路感受智慧美好生活，“2025 世界人工智能大会民营企业社会开放日”主题活动启动  AI 助手 Copilot 上线，微软 Win11 Dev 预览版 Build 23493 发布  人工智能和神经网络有什么联系与区别？  自研4D激光雷达L1 + GPT大语言模型 宇树Unitree Go2四足机器人有啥黑科技？ 

 2023-12-26