联系我们
意见反馈

关注公众号

获得最新科研资讯

神经网络与图像处理实验室

简介

分享到
实验室简介

俞文心 / Wenxin Yu

计算机科学与技术学院 ,西南科技大学科技创新与基地建设处 副处长 教授 博士生导师

电子邮件: yuwenxin@swust.edu.cn

办公地址: 东五四楼430办公室

研究方向: 芯片布局布线EDA软件算法优化,多视点图像处理,图像立体匹配,神经网络,模式识别,视频编解码等

社会兼职: IEEE会员,ACM会员,IEICE会员,CCF会员

主讲课程: 图形图像新技术专题讲座,智能识别技术与实践,程序综合设计

教育经历

2014/4 - 2015/3,早稻田大学,信息生产系统研究中心,博士后,合作导师:Satoshi Goto
2010/9 - 2014/4,早稻田大学,多媒体视频系统,博士,导师:Satoshi Goto
2008/9 - 2010/7,早稻田大学,多媒体视频系统,硕士,导师:Satoshi Goto
2002/5 - 2006/7,上海交通大学,电子信息工程,学士

导师简介:

俞文心,博士,教授,博士研究生导师,九三学社社员,西南科技大学科学技术发展部科技创新与基地建设处副处长,九三学社绵阳市西科大基层委副主委,四川省学术技术带头人后备人选,四川省海外高层次留学人才,中国计算机学会多媒体技术专委会执行委员,四川省大数据与智能系统工程技术研究中心办公室主任,四川省教科文卫工会高校系统省级劳模创新工作室负责人。自2002年保送进入上海交通大学电子信息工程系,一直从事视频和图像处理方面的学习与研究。2008年至2015年于日本早稻田大学信息生产系统研究院LSI系统专业攻读硕士学位,博士学位以及作为博士后研究员期间,师从IEEE life fellow后藤敏(Goto Satoshi)教授,一直对视频和图像处理前沿方向进行探索性研究,并重点研究3-D图像综合,立体图像匹配等方面的问题。主要涉及的研究领域包括:神经网络、图像增强修复、3D多视点图像的合成填补技术、EDA(芯片布局布线算法优化)、立体匹配技术、低电力消耗视频解码算法。近年,在国外期刊和国际会议上公开发表学术论文50余篇,其中40余篇被SCI/EI检索,其中有40余篇是中国计算机协会推荐杂志或会议。先后承担和参与各类科研项目20余项,其中参与和完成海外国家级项目5项(日本教育部,日本科学技术振兴机构),项目总资金超过7亿日元,国内国家级项目3项,省部级项目近20项,地市级重点项目1项,横向项目多项。

本课题组现有40余名小组成员。

基于语义感知变换的图像修复

图像修复是一项重要的计算机视觉任务,旨在通过自动填充缺失或损坏的图像区域,使图像恢复完整和无缺陷。现有的方法主要依赖于卷积神经网络(CNN)在理解高级语义方面的优势。然而,最近的研究表明,将Transformer模型应用于视觉领域可以解决卷积核无法关注到远距离信息的问题。论文提出了一种全新的语义感知的Transformer模型,该模型不仅包含了之前视觉Transformer中的自注意力模块,还引入了一个用于感知整个数据集的语义特征的注意力模块。此外,论文对VQ-VAE模型做出改进,设计Quantized Semantic Vector Memory(QSVM)来实现对整个数据集中的图像的高级特征的提取和保存。通过在不同数据集上进行的实验,论文验证了其方法的有效性和优越性,与现有的先进方法相比取得了更好的修复效果。

                                              图1 论文中提出模型的结构图

                                                                 图2 参会现场海报展示

                                  图3 参会现场与其他参会人员进行像学术讨论                                   

                                  

访问量:1708