近日,计算机视觉国际顶级会议CVPR(IEEE Conference on Computer Vision and Pattern Recognition)所举办的国际图像视频复原和增强大赛(NTIRE 2022)陆续公布竞赛结果,通信工程学院李娇娇副教授带领的参赛队伍CVIA_SSR在光谱重建挑战赛(Challengeon Spectral Recovery)中荣膺全球季军,并受邀在7th NTIRE:New Trends in Image Restoration and Enhancement workshop and challenges的线上研讨会上作专题报告。
NTIRE 2022 Challengeon Spectral Recovery比赛结果
NTIRE 2022 Challengeon Spectral Recovery获奖证书
CVPR NTIRE 2022 Challengeon Spectral Recovery线上研讨会报告
据悉,CVPR是IEEE国际计算机视觉与模式识别会议IEEE Conference on Computer Vision and Pattern Recognition的缩,是计算机视觉国际三大顶会(CVPR, ICCV, ECCV)之一。该会议历来受国际学术界和工业界的重视,是国际计算机视觉研究机构研究实力排名的重要依据。CVPR在最新的Google Scholar热门出版物排行中排名第4,H5中位数627,在理工类出版物中仅次于Nature, Science等杂志。
GoogleScholar热门出版物排名
NTIRE是近年来计算机图像恢复领域最具影响力的全球性赛事之一,致力于推动退化图像内容恢复、缺失信息填补等图像处理关键问题的演进,面向实际工程应用场景提出优秀解决方案。其中,光谱重建赛道旨在通过单张RGB图像作为输入,通过构建深度神经网络生成对应的具有31通道的高光谱图像。NTIRE已成功举办六届挑战赛,是国际范围内最具影响力的视频和图像复原竞赛。本次光谱重建竞赛由苏黎世联邦理工学院作为主办方,吸引了来自包括西安电子科技大学、清华大学、哈佛大学、苏黎世联邦理工学院以及小米在内的世界各国知名高校、公司以及研究院所的240多个团队参加。
光谱重建是多光谱和高光谱影像处理中的难题,算法成果在医学、科研、工业和农业应用中都有广泛而深入的影响。在本届比赛中,官方所发布数据集具有曝光条件差、经历压缩以及噪声等退化过程的特点,为重建带来了极大的挑战。在一个多月的紧张赛程中,CVIA_SSR团队的杜松乘、武超雄、冷奕泓三名研究生,完成了算法设计以及模型验证,创新提出了具有非局部净化的深度密集残差通道再校准网络,首先通过所构造的非局部净化模块对严重退化的输入进行预处理操作,再由多个深度残差通道再校准块提升网络提取深度特征的能力以及增强网络的泛化能力,最终取得了全球季军(第三)的成绩。更为重要的是,在官方额外发布的验证数据上,团队所提算法的鲁棒性和泛化性能领先于前两名,论证了其在实际课题问题中具有更高的应用价值。
目前,workshop论文与实验代码均以开源,链接如下:
参赛方案论文:
https://openaccess.thecvf.com/content/CVPR2022W/NTIRE/papers/Li_DRCR_Net_Dense_Residual_Channel_Re-Calibration_Network_With_Non-Local_Purification_CVPRW_2022_paper.pdf
方案实现代码:
https://github.com/jojolee6513/DRCR-net
团队所提新型网络的Poster
据了解,此次比赛难度较往届有所提升,加之比赛时间紧迫,给参赛团队带来了极大的挑战。杜松乘、武超雄、冷奕泓三位研究生集中投入了大量时间调整算法、修改代码、测试性能,在指导老师的组织下高效地进行交流和协作,共同完成了创新网络的设计与试验,取得了全球季军(第三)的优秀成绩。
杜松乘,2021年获得西安电子科技大学学士学位,正在西安电子科技大学通信工程学院攻读硕士学位。目前以学生一作身份在IEEE TGRS(中科院2区)发表期刊论文1篇,在CVPR Workshop发表会议论文1篇;荣获2021年硕士研究生入学奖学金。研究方向为光谱超分辨率以及深度学习。
武超雄,目前于西安电子科技大学通信工程学院攻读博士学位,目前以学生一作身份在IEEE TNNLS(中科院1区)、IEEE TGRS(中科院2区)、Remote Sens.(中科院2区)、CVPR Workshop、IGARSS等国际知名期刊/会议发表论文6篇。荣获2020学年硕士研究生国家奖学金,2018-2020学年一等学业奖学金;荣获2020、2019学年西安电子科技大学“优秀研究生”荣誉称号。主要研究方向为光谱超分辨率以及深度学习。
冷奕泓,2022年获得西安电子科技大学学士学位,目前保研至西安电子科技大学通信工程学院。本科期间,荣获国家奖学金、一等奖学金;荣获“优秀毕业生”“十佳学长”“优秀学生干部”等称号。主要研究方向为无监督光谱超分辨率以及深度学习。
指导教师团队简介:
参赛团队CVIA_SSR的指导教师团队由李娇娇副教授、宋锐教授和李云松院长组成,李娇娇副教授、宋锐教授为通信工程学院图像传输与处理研究所(图像所)骨干成员,李云松院长为图像所负责人。比赛过程中,李娇娇老师作为团队智库为队员出谋划策,宋锐老师提供了充足的实验条件,李云松院长则在比赛瓶颈时期提供了宝贵的策略和建议,三位老师高度重视、联合行动,构成了参赛团队的坚实后盾,为此次成绩的取得提供了保障。
图像所是ISN国家重点实验室成员单位,负责人为李云松教授。图像所在遥感图像智能处理方面有多年积累,不仅注重理论和技术的创新,而且注重成果的落地应用,科研成果在载人航天、探月、火星探测等工程中都有实际应用。通信工程学院一直大力支持人工智能技术在通信领域的结合和应用,重视学院老师在科研工作上的创新与突破。比赛期间,学院和ISN国家重点实验室领导一直为团队提供技术支持和问题协助,保障了团队的科研条件,给予了充足的资金和计算资源,为团队专注于算法研究提供了坚实的科研平台和环境。