GAMES Webinar 2022 – 247期(图像修复) | 郭青(新加坡南洋理工大学),任文琦(中山大学)

【GAMES Webinar 2022-247期】(视觉专题-图像修复)

报告嘉宾:郭青(新加坡南洋理工大学)

报告时间:2022年9月15号星期四晚上20:00-20:30(北京时间)

报告题目:基于孪生滤波网络的高保真图像修复技术

报告摘要:

图像修复(Image Inpainting)是计算机视觉及图像处理领域的基础问题,其主要目的是根据输入图像对其中缺失的像素进行填充并复原。近年来,国内外学者主要将图像修复形式化为图像生成问题,并利用前沿的生成对抗网络(Generative adversarial network, GAN)来实现高真实性和自然性的图像修复效果。然而,这类生成方法主要优势在于补全区域的自然性而忽略修复图像的保真性,即与真实场景的一致性。为了解决这一问题,团队首先提出了基于预测滤波网络的图像修复方法,该方法通过一个核预测网络自适应地对不同像素生成滤波核并通过缺失区域的相邻像素对缺失像素进行有效重建。该方法对缺失较小区域能够实现高保真度的复原效果,然而却不能对较大缺失区域进行补全。为此,团队进一步提出了结合预测滤波网络与生成网络的图像复原方法,即利用自适应滤波对小缺失区域和图像细节进行修复并利用生成网络实现大缺失区域的语义复原。该方法能够有效克服原预测滤波网络存在的问题,然而并没有解决生成网络产生结果的保真性问题。为了解决这一问题,团队进一步提出了孪生滤波(Siamese Filtering)方法,其基本思路是同时对输入图像缺失的语义信息和图像细节信息通过滤波方式利用邻近上下文信息进行有效补全。该方法利用单一网络框架同时实现了多层次语义和图像细节的修复,其生成结果在多个不同场景(例如人脸、自然场景及敦煌壁画修复)的数据集上超越了前沿方法。

讲者简介:

郭青博士2019年毕业天津大学智能与计算学部获得工学博士学位。同年加入新加坡南洋理工大学聘为博士后研究员,并于2020年获得瓦伦堡-NTU校长博士后资助(Top 1%)。郭青博士主要从事计算机视觉及人工智能安全相关方向的研究包括面向视频目标跟踪的对抗样本攻击与防御,基于视觉复原的智能模型鲁棒性提升等,以第一作者及通讯作者在NeurIPS,CVPR, ICCV, ECCV, AAAI, IJCAI,IJCV,TIP,TIFS等会议及期刊上发表论文20余篇。郭青博士目前是TPAMI,TIP,TIFS,PR,NeurIPS, CVPR, ICCV, ECCV 等顶级期刊与会议审稿人,AAAI 2023 Senior PC,同时也是捷克自然科学基金评审专家。

个人主页:https://tsingqguo.github.io/


报告嘉宾:任文琦(中山大学)

报告时间:2022年9月15号星期四晚上20:30-21:00(北京时间)

报告题目:面向超高分辨率图像视频的实时增强研究

报告摘要:

近年来大多数图像复原和增强网络的参数量与计算量都趋于增加,但是随着4K超高清视频的普及,这些方法不利于在超高分辨率图像视频上的真实应用。针对这一问题,本次报告主要介绍了几种可用于实时处理4K超高分辨率图像视频的轻量级图像复原网络结构。分别从双边网格映射、分片并行网络、网络架构搜索等模型出发介绍了几种4K超高清图像视频实时复原网络结构,以及这些模型在图像视频去模糊、去雾、HDR重建等任务中的应用。

讲者简介:

任文琦,中山大学网络空间安全学院“百人计划”副教授。主要研究方向为计算机图像视频处理。在本领域内国际主要期刊和会议IEEE TPAMI、TIP、TIFS、IJCV、CVPR、ICCV、NeurIP等发表CCF-A类学术论文50余篇,谷歌学术引用5985次,5篇论文入选ESI高被引论文。担任《中国图象图形学报》编委,北京图象图形学会理事,人工智能与计算机视觉领域的多个顶级学术期刊和会议审稿人。主持国家基金2项,及多项腾讯、百度等企业项目。积极促进研究成果产业化。获中国计算机学会优秀博士论文奖,北京市“科技新星”计划,微软亚洲研究院“铸星计划”,2022年度百度发布的全球高潜力AI华人青年学者榜。

个人主页:https://sites.google.com/view/wenqiren/homepage


主持人简介:

崔兆鹏,浙江大学计算机学院CAD&CG国家重点实验室“百人计划”研究员、博士生导师。2017年在加拿大西蒙弗雷泽大学获得博士学位。2017年至2020年在瑞士苏黎世联邦理工学院计算机视觉和几何实验室任高级研究员。研究方向为三维计算机视觉,主要从事基于视觉信息的三维感知和理解,具体包括三维重建、运动恢复结构、多视角立体几何、三维场景理解、同时定位与地图构建、视频图像编辑等。近年来在计算机视觉、机器人、计算机图形学、机器学习等领域的顶级期刊和会议(TPAMI、CVPR、ICCV、SIGGRAPH、NeurIPS、ICRA、IROS)上发表论文40余篇,曾获ICRA 2020 最佳机器视觉论文提名和IROS 2021最佳安全、安保和救援机器人论文提名。

 

GAMES主页的“使用教程”中有 “如何观看GAMES Webinar直播?”及“如何加入GAMES微信群?”的信息;
GAMES主页的“资源分享”有往届的直播讲座的视频及PPT等。
观看直播的链接:http://webinar.games-cn.org

You may also like...