本人的科研方向是三维重建与对抗生成，Nerf让人惊叹
争取搞清楚每一个数学公式和每一行代码
- 颠覆传统三维重建方法之nerf(一)---概述
- 颠覆传统三维重建方法之nerf(二)---工作流程与基本原理
- 颠覆传统三维重建方法之nerf(三)---光线的数学表示与光线采样
- 颠覆传统三维重建方法之nerf(四)---NeRF最核心公式推导-光线成像模型
- 颠覆传统三维重建方法之nerf(五)---相机小孔成像模型的逆变换
- 颠覆传统三维重建方法之nerf(六)---pytorch-nerf项目介绍
- 颠覆传统三维重建方法之nerf(七)---pytorch-nerf数据格式与数据加载
- 颠覆传统三维重建方法之nerf(八)---pytorch-nerf模型创建1之概述
- 颠覆传统三维重建方法之nerf(九)---pytorch-nerf模型创建2之位置编码
- 颠覆传统三维重建方法之nerf(十)---pytorch-nerf模型创建3之创建NeRF
- 颠覆传统三维重建方法之nerf(十一)---pytorch-nerf模型训练1之概述
- 颠覆传统三维重建方法之nerf(十二)---pytorch-nerf模型训练2之计算光线
- 颠覆传统三维重建方法之nerf(十三)---pytorch-nerf模型训练3之渲染(光线成像)
- 颠覆传统三维重建方法之nerf(十四)---pytorch-nerf模型训练4之损失函数
- 颠覆传统三维重建方法之nerf(十五)---pytorch-nerf模型测试与推理
- 颠覆传统三维重建方法之nerf(十六)---pytorch-nerf总结
三. 读instant-ngp 源码系列
四. 读NeuMan
- neuman简介
- neuman环境搭建
- neuman数据准备
- neuman运行demo
- neuman的数据预处理
- neuman的train.py代码框架
- neuman训练数据加载
- neuman背景训练
- neuman人体训练
- neuman推理之渲染360度人体动作
- neuman推理之渲染测试视角
- neuman推理之渲染新的指定动作
- neuman推理之多人合并一起渲染
- mip-NeRF
- instant-ngp
- Block-NeRF
- Plenoctree
- Plenoxels
- Neus
- KeypointNeRF
- point-NeRF
- 训练更快
- PixelNeRF
- IBRNet
- 压缩模型
- AdaNeRF
- 自适应采样用于神经辐射场实时渲染
- https://mp.weixin.qq.com/s/XJTrg-iAOC8PQLjsnmL1oQ
- NeRF++
-
NGP
- hash编码的nerf，几秒钟就完成训练。
- https://github.com/NVlabs/instant-ngp
-
NeuMan
- 基于Nerf的从单个视频实现人体三维重建。
- 总结：根据已知人体动作使得重建人物运动，不再是简单的360转动场景，人物跳舞了。
- https://github.com/apple/ml-neuman
-
InstantAvatar
- 从 60 秒单目视频中学习数字人化 7194 身
- 项目主页：https://tijiang13.github.io/InstantAvatar/
- 论文：https://arxiv.org/pdf/2212.10550.pdf
- 介绍：https://mp.weixin.qq.com/s/4Ad72-s--jL0AWkkGE7gAw
-
ELICIT
- 单张图片生成数字人
- 总结：连视频或者图像集合都不需要，直接从单张图像重建。
- https://elicit3d.github.io/
- https://mp.weixin.qq.com/s/76-klqy_kiExjAyh2CVQvA
-
4D-Facial-Avatars
- 头部位姿和面部表情重建
- 总结：直接可以重建动态表情，不是静态模型。
- https://github.com/gafniguy/4D-Facial-Avatars
- https://blog.51cto.com/u_15717531/5477328
-
AD-NeRF
- 由音频驱动的nerf，实现Talking Head。
- 总结：音频驱动，三维重建人物可以说话了。
- https://yudongguo.github.io/ADNeRF/
- https://github.com/YudongGuo/AD-NeRF
-
CLIP-NeRF
- 文字-图像驱动的NeRF操作
- 总结：用文字或者图像就能驱动图像变成三维模型
- https://cassiepython.github.io/clipnerf/
- https://mp.weixin.qq.com/s/DDt6rVGk4inBFkDnlgBpQA
-
NeRFFaceEditing
-
FENeRF
-
MoFaNeRF
-
SURF-GAN
- 在StyleGAN中注入可控三维感知，NeRF-GAN用于可编辑人像合成
- https://github.com/jgkwak95/SURF-GAN
- https://mp.weixin.qq.com/s/QcLsHTKEEgB53Z0oi7kaPA
-
ENeRF
-
StyleNeRF
- 结合了NeRF和StyleGAN
- https://github.com/facebookresearch/StyleNeRF
-
StylizedNeRF
-
HumanNeRF
- 专注人体三维重建
- https://grail.cs.washington.edu/projects/humannerf/
- https://github.com/chungyiweng/humannerf
-
DiffRF:
- 跟扩散模型的结合
- Rendering-guided 3D Radiance Field Diffusion
- https://sirwyver.github.io/DiffRF/
-
NeRF-SLAM
-
NeRF-Art
- 如何把一个正常人变成僵尸风格？用NeRF-Art就可以做到！
- 论文：https://arxiv.org/abs/2212.08070
- 代码：https://github.com/cassiePython/NeRF-Art
- https://mp.weixin.qq.com/s/UlAQLMzAvWNKHi4c6u7ckA
-
非刚体NeRF
-
ClimateNeRF
- 它可以渲染出真实的天气效果，包括雾霾、雪和洪水
- https://arxiv.org/pdf/2211.13226.pdf
- https://mp.weixin.qq.com/s/6KVUMSk-gLpBtNd9kqjeZw