GAMES Webinar 2024 – 332期(3D人-物-场景建模) | 陈昭熹(南洋理工大学),李昊(西北工业大学),胡寿康(Sony AI研究院)
【GAMES Webinar 2024-332期】(VR&AR专题-3D人-物-场景建模)
报告嘉宾:陈昭熹(南洋理工大学)
报告时间:2024年7月18号星期四晚上8:00-8:45(北京时间)
报告题目:从二维图像中生成大规模三维场景
报告摘要:
为满足元宇宙中对3D创意工具不断增长的需求,三维场景生成最近受到了相当多的关注。考虑到创建3D资产所需的成本和劳动力,3D内容创作的最终目标将是从海量的互联网二维图像中学习三维生成模型。最近的大部分工作聚焦在以物体为中心的内容生成上,能够从2D图像中学习到无边界、大规模3D场景的生成模型还鲜有探索。本报告将介绍系列工作SceneDreamer和CityDreamer,分别聚焦于自然场景和城市场景,旨在从图像中学习3D大规模场景的生成模型,在保证高质量三维一致性的同时,支持多样风格变换与自由轨迹相机漫游。
讲者简介:
陈昭熹,南洋理工大学(MMLab@NTU)博士生三年级,由刘子纬教授指导。本科毕业于清华大学。他的研究兴趣为三维计算机视觉,尤其在三维数字内容生成和神经渲染方面,曾在ICCV,ECCV,CVPR,NeurIPS, SIGGRAPH Asia,TPAMI, ICLR上发表多篇学术论文。
讲者主页:https://frozenburning.github.io/
报告嘉宾:李昊(西北工业大学)
报告时间:2024年7月18号星期四晚上8:45-9:30(北京时间)
报告题目:可泛化3DGS的现状和未来
报告摘要:
为满足自动驾驶、虚拟现实等领域的需求,三维重建以及新视角合成最近受到越来越多的关注。考虑到上述领域的实时性需求,泛化3D-GS的最终目标是在给定稀疏图片的输入下,实现快速而准确的新视角合成。围绕这一点,最近已有大量工作从实时性、Pose-free和语义感知等多个层面加速泛化3D-GS的实用性。本报告将介绍上述系列工作,并尝试梳理泛化3D-GS的发展脉络和浅谈其发展前景。
讲者简介:
李昊目前是西北工业大学二年级博士生,师从张鼎文老师和韩军伟老师 (IEEE Fellow)。他同时在Baidu VIS部门实习,师从吴陈铭博士和王井东老师 (IEEE Fellow)。并曾在之江实验室和中科院自动化所等研究所和企业实习。此外,他在TIP, CVPR,ECCV等顶级期刊和会议发表发表多篇论文并获得Highlight和Oral等奖项。他的主要研究方向是基础模型和三维计算机视觉,尤其是泛化NeRF/3D-GS方面的应用。
讲者主页:https://lifuguan.github.io
报告嘉宾:胡寿康(Sony AI研究院)
报告时间:2024年7月18号星期四晚上9:30-10:15(北京时间)
报告题目:Towards 3D Human Avatar Creation in real-world settings
报告摘要:
为满足日益增长的数字创作和虚拟现实场景需求,3D 数字人创作最近受到了非常多的关注。考虑到目前3D 数字人创作很多是基于比较理想或者耗费较大的实验室数据采集环境,最近不少工作开始考虑偏向于现实应用in-the-wild场景的3D 数字人创作。本报告将介绍两篇偏向于现实生活场景下的单张图片和单目视频3D 数字人创作工作SHERF和GauHuman, 同时也介绍我们最近收集的用于in-the-wild 3D 数字人创作的10k单目视频数据集WildAvatar.
讲者简介:
胡寿康博士目前是Sony AI研究员。曾在南洋理工大学(MMLab@NTU)刘子纬教授课题组做博后,博士毕业于香港中文大学,由刘循英教授指导。其兴趣为3D计算机视觉与语音交叉的多模态生成、重建、和感知研究,如数字人创作和4D多媒体数字内容生成等,致力于提升通用智能体的多模态信息融合与处理能力。曾在CVPR, ICCV, ECCV, ICASSP, INTERSPEECH, TASLP, ICLR, AISTATS, TMLR等国际顶级会议和期刊发表文章,研究成果获得ICASSP最佳学生论文奖和INTERSPEECH最佳学生论文提名奖。
讲者主页:https://skhu101.github.io/
主持人简介:
丁二锐,百度视觉技术部总监,华中科技大学“湖北产业教授”,正高级工程师。长期从事计算机视觉及图形学研发工作,已发表论文60余篇,曾获ICDAR 2019最佳论文奖、IEEE FG 2023最佳学生论文奖。在图文跨模态、弱/半监督上的工作先后获国家技术发明奖二等奖、中国专利银奖、中国电子学会科技进步一等奖、地理信息科技进步一等奖。
GAMES主页的“使用教程”中有 “如何观看GAMES Webinar直播?”及“如何加入GAMES微信群?”的信息;
GAMES主页的“资源分享”有往届的直播讲座的视频及PPT等。
观看直播的链接:https://live.bilibili.com/h5/24617282