GAMES Webinar 2023 – 292期(基于神经辐射场的三维重建) | 崔兆鹏(浙江大学)，姚遥(南京大学)
【GAMES Webinar 2023-292期】(几何专题-基于神经辐射场的三维重建)
报告嘉宾：崔兆鹏(浙江大学)
报告时间：2023年9月14号星期四晚上8:00-8:30（北京时间）
报告题目：3D Editing and Perception with Neural Radiance Fields
报告摘要：
Neural-based 3D modeling and rendering methods, exemplified by Neural Radiance Fields (NeRF), have recently garnered significant attention in fields such as computer vision and computer graphics. In comparison to traditional explicit point cloud or mesh-based representations, neural representations have shown increased success in detail expression, model compactness, and realistic rendering. However, these implicit representations cannot be directly applied to other 3D tasks like 3D editing and online perception. In this talk, I will first introduce our recent works on learning compositional neural radiance fields that support both 3D geometric and texture editing. Then, I will present our latest works on online 3D perception using neural radiance fields with various input signals.
讲者简介：
崔兆鹏，浙江大学计算机科学与技术学院 “百人计划”研究员、博士生导师，国家级青年人才计划入选者。2017年在加拿大西蒙弗雷泽大学获得博士学位。2017年至2020年在瑞士苏黎世联邦理工学院计算机视觉和几何实验室任高级研究员。研究方向为三维计算机视觉，主要从事基于视觉信息的三维感知和理解，具体包括三维重建、运动恢复结构、多视角立体几何、三维场景理解、同时定位与地图构建、视频图像编辑等。近年来在计算机视觉、机器人、计算机图形学、机器学习等领域的顶级期刊和会议（TPAMI、CVPR、ICCV、SIGGRAPH、NeurIPS）上发表论文40余篇，曾获ICRA 2020 机器视觉最佳论文提名和IROS 2021安全、安保和救援机器人最佳论文提名。
讲者主页：http://www.cad.zju.edu.cn/home/zhpcui/
报告嘉宾：姚遥(南京大学)
报告时间：2023年9月14号星期四晚上8:30-9:00（北京时间）
报告题目：NeILF: Neural Incident Light Field for Multi-view Geometry and Material Estimation
报告摘要：
Recovering 3D information from multi-view images has traditionally focused on geometry reconstruction but often overlooked surface material and scene lighting. In this talk, I will first review commonly used multi-view geometry reconstruction methods, including matching-based multi-view stereo (MVS) and neural radiance field (NeRF) based approaches. Then, I will introduce our latest work on neural incident light field (NeILF), which further decomposes the out-going radiance into surface material and incident lights to the surface via differentiable physically based rendering and inter-reflection between surfaces. Our approach creates a fully 5D light field capable of modeling illuminations of any static scenes, enabling generalized multi-view BRDF estimation and realistic relighting of reconstructed 3D asserts.
讲者简介：
姚遥，南京大学智能科学与技术学院副教授，2022年国家级人才计划青年项目（海外）入选者。曾任苹果公司高级研究员，Altizure创始团队核心成员（被苹果收购）。2015年于南京大学获学士学位，2019年于香港科技大学获博士学位。主要研究方向为三维计算机视觉，包括三维重建、可微渲染及三维内容生成。代表工作包括MVSNet系列工作、BlendedMVS数据集及NeILF系列工作，文章总引用数逾两千，曾获2020年国际模式识别大会最佳学生论文奖。
讲者主页：https://yoyo000.github.io
主持人简介：
曹明伟，安徽大学计算机科学与技术学院，副教授，分别于2014年5月和2017年6月获得合肥工业大学、计算机软件与理论专业硕士学位和计算机应用技术专业博士学位。目前以第一作者身份在IEEE TII, IEEE TITS, IVC等国际期刊和计算机学报等国内期刊发表和录用论文40余篇。申请和授权发明专利30余项。独立开发的三维重建系统已被多家企业所采用。自从事三维重建研究工作以来，系统性地实现了多视图几何领域的多种基础算法，构造了具有16万行C++代码的基础算法库。担任IEEE TII,IEEE TITS和计算机学报等30余个期刊的审稿人。同时，他也是IEEE会员，中国计算机学会会员，中国图像图形学会会员，中国图像图形学会类脑视觉专委会委员，中国图像图形学会三维视觉专委会委员，GAMES执行委员。
GAMES主页的“使用教程”中有 “如何观看GAMES Webinar直播？”及“如何加入GAMES微信群？”的信息；
GAMES主页的“资源分享”有往届的直播讲座的视频及PPT等。
观看直播的链接：http://webinar.games-cn.org
