联系我们
意见反馈

关注公众号

获得最新科研资讯

智能图形图像分析与处理课题组

简介 研究方向为基于深度学习的图形图像的分析与处理、计算光谱成像等

分享到
实验室简介

智能图形图像分析与处理课题组团队创建于2012年,前身是上海理工大学图形图像与颜色科学实验室。团队依托上海理工大学出版印刷与艺术设计学院和现代出版印刷国家级实验教学示范中心,长期围智能图形图像分析与处理、三维点云分类、三维点云分割、RGB图像重建高光谱图像、高光谱图像超分辨率与医学图像领域开展理论研究和技术攻关,构建了完整的“理论-技术-产品”三位一体的科研模式。

一、我们的目标和方向

我们的主要目标是提高图形图像的分析与处理能力,实现智能化、自动化的图像分析,以及提升图像处理的效果和效率。在我们的研究中,我们主要致力于通过深度学习的方法探索和研究新的技术,以解决图形图像处理中的各种问题。我们的研究方向主要包括:

1、智能图像识别与分类:利用深度学习、机器学习等技术,对图像进行高精度识别和分类,提高自动化水平。
2、图像(包含高光谱图像)超分辨率重建:通过算法优化和技术创新,提高图像分辨率,为后续应用提供更清晰、更详细的图像数据。
3、RGB图像重建高光谱图像:利用此技术,将RGB图像转化为高光谱图像,从而提供更多的光谱信息,以便进行更精确的图像分析和处理。
4、三维建模与渲染:利用计算机视觉和图形学技术,实现三维场景的建模、渲染,以及虚拟现实应用。
5、医学图像处理与分析:针对医学影像进行高精度分割、识别,以及疾病辅助诊断等应用。

2024年新媒体技术专业本科春季招生宣传-欢迎同学们积极报考

专业介绍

新媒体技术是我国高等教育综合改革的阶段性成果,是高等教育与时俱进地适应媒体技术发展和人才需求的改革。该专业培养面向新媒体与内容产业应用需求,具备传播学、计算机、人工智能、大数据、媒体技术等专业技术知识的高水平、创新型、复合型人才。经过学习和培养,毕业生具备基于市场需求和用户响应的媒体技术集成、方案设计和开发能力,可以在网络传媒、移动传媒、新闻出版等各类相关媒体单位从事与媒体产业相关的媒体数据挖掘、智能传播、数字产品开发与方案设计、内容创意、生产制作、营运管理工作,有良好的就业与发展前景。

 

专业特色
本专业依托上海理工大学的工科背景和出版印刷与艺术设计学院的优秀师资力量而建设,教师来自复旦大学、上海交通大学、同济大学等985学校,具有博士学位的教师占比100%。本专业在强化学生理论学习的基础上,还十分重视学生技术应用能力的培养,与澎湃新闻、上观新闻、凤凰传媒、PPTV、网络游戏协会、爱奇艺等上海乃至全国有名的媒体单位建立产学研合作,为学生动手能力的培养、综合素质的提高以及未来的实习就业提供良好的条件。

 

主要课程
新媒体技术概论、新媒体与社交网络、数据库技术、计算机网络、计算机图形学、数字图像处理、色彩学、图像复制原理与技术、移动媒体程序设计、大数据技术、智能传媒、数据分析与处理、交互设计技术、跨媒体技术与应用、增强现实技术与应用、游戏设计与开发、媒体制作、计算广告等。

 

就业方向
本专业毕业生就业面广,学生可以在网络传媒、移动传媒、新闻出版等各类相关媒体单位从事与媒体产业相关的数据挖掘与分析、技术开发与方案设计、内容创意、生产制作、营运管理工作,有良好的就业与发展前景。

 

授予学位:工学学士

回放视频网址:https://m.edudata.cn/livestream/detail?channelId=4582620&userid=37264f297cc26e0000000000&nickname=%E6%B8%B8%E5%AE%A21706798855

寻求产研科创项目合作

       课题组一直从事基于深度学习技术的3D图形与图像处理分析、VR/AR应用设计开发研究。近三年在3D点云、光谱重建、基于深度学习方法的高光谱图像分类等方面取得了一些初步成果,发表论文19篇(7 篇高水平 SCI 检索论文其中6篇中科院2区,1篇ESI高被引/热点论文),申请国家发明专利 25 项授权11项,申请软件著作权 6 项已授权5项。

       我们愿与相关企业分享科研成果, 共促科创合作;还可以为满足企业用户的特定需求提供定制化的解决方案。我们始终致力于为产业界提供最先进、最有效的技术解决方案。我们相信,通过与高校和企业的紧密合作,我们可以共同推动图形图像、视频处理与分析、VR/AR技术的发展,提高企业用户产品质量和生产效率,为产业的可持续发展做出贡献。

      如有项目合作需求请联系我们!
E-mail:wangwenju@usst.edu.cn
 

基于深度学习的3D点云的处理与分析

背景: 随着3D扫描技术的普及和发展,大量的三维点云数据被广泛应用于计算机视觉、机器人技术、虚拟现实等领域。然而,点云数据的处理和分析面临着诸多挑战,包括噪声、不规则采样、形状不确定性等问题。深度学习技术的崛起为解决这些问题提供了强大的工具,能够从点云中学习复杂的特征,实现更准确、高效的点云处理与分析。

科研方向: 本科研方向旨在探索利用深度学习技术对3D点云进行处理和分析。通过构建深度学习模型,该方向旨在提高点云数据的特征提取、分类、分割等任务的准确性,并推动点云在工程、医学、地理信息系统等领域的广泛应用。

关键研究:

点云特征学习: 设计深度学习模型,能够从点云数据中学习鲁棒的局部和全局特征,以提高点云的表达能力和信息提取效率。

点云分类与识别: 利用深度学习技术,实现对点云中物体的自动分类和识别,推动3D场景理解和感知的发展。

点云分割与重建: 研究深度学习模型,用于点云的语义分割和重建,提高点云数据在建模和可视化方面的质量。

点云对齐与匹配: 探索深度学习在点云对齐和匹配问题上的应用,提高多源点云数据的一致性和配准精度。

噪声和不确定性处理: 研究处理点云数据中的噪声和不确定性的深度学习方法,提高点云数据的稳健性和鲁棒性。

意义与前景: 基于深度学习的3D点云处理与分析是促进3D感知技术发展的重要方向。该研究方向不仅有助于提高对真实世界中复杂场景的理解能力,还为自动驾驶、机器人导航、虚拟现实等领域的应用提供了技术支持。随着深度学习技术的不断进步,这一领域有望在实际工程和科研应用中取得更多创新成果。

基于深度学习技术的医学图像处理与分析

研究背景:    医学图像处理与分析在现代医学领域中扮演着至关重要的角色。随着医学影像获取技术的飞速发展,大量医学图像数据涌现,如CT、MRI、X光等。然而,如何高效地处理和分析这些复杂的医学图像数据,为医学诊断和治疗提供更精准的支持,成为当前医学科研的热点之一。

科研方向: 本科研方向旨在深入研究并利用深度学习技术,对肺部、脑部等医学图像进行高效处理与精准分析,帮助医生更准确地定位病变、诊断疾病,并提供个性化的治疗方案。

关键研究:

图像分割与标注: 利用深度学习技术对肺小结节、脑部医学图像进行精准分割,提取感兴趣区域,为后续疾病诊断和治疗方案设计提供有力支持。

疾病诊断与分类: 基于深度学习算法,建立医学图像与疾病之间的关联模型,实现疾病自动诊断与分类,为医生提供辅助决策。

多模态图像融合: 结合不同医学影像模态,通过深度学习实现多模态图像的融合与综合分析,提高医学信息的全面性和准确性。

数据增强与迁移学习: 针对医学图像数据相对有限的问题,探索数据增强和迁移学习等方法,提高深度学习模型的泛化能力和适应性。

可解释性与模型解释: 研究深度学习模型的可解释性,使医生能够理解模型的决策过程,提高医学图像处理结果的信任度。

意义与前景: 通过深度学习技术在肺小结节等医学图像处理与分析领域的研究,将加速医学科研与临床实践的融合,提高医学图像的处理效率和分析准确性,为疾病的早期筛查、定量分析和个性化治疗提供更为可靠的支持,有望在医学影像学、放射学和临床医学等多个领域取得创新性成果。

已有成果:

1.基于注意力机制和残差网络的肺小结节分类方法,国家发明专利已申请(SHLG2198P),殷淑雅,王文举,叶芳,陈怡楠,朱琳,于红,单位:上海理工大学,上海胸科医院

2.基于3D DIRLEAN的肺小结节良恶性分类方法,国家发明专利已申请(SHLG2199P),叶芳,王文举,殷淑雅,朱琳,陈怡楠,于红,单位:上海理工大学,上海胸科医院

3.深度学习注意力模型的肺小结节良恶性检测软件V1.0,申请人:上海理工大学,已申请(2023R11L2416107)

4.基于加宽倒置残差注意力网络模型的肺小结节良恶分类器软件V1.0,申请人:上海理工大学,已申请(2023R11L2416069)

基于深度学习技术的计算光谱成像

科研背景: 计算光谱成像是一种利用计算方法对光谱信息进行重构和分析的先进技术。光谱成像在许多领域,如生物医学、环境监测和农业等方面都具有广泛的应用。深度学习技术的快速发展为计算光谱成像提供了新的可能性,可以通过学习复杂的光谱特征,实现更准确、高效的光谱图像处理。

科研方向概述: 本科研方向致力于利用深度学习技术对计算光谱成像进行更加精细和智能的处理。通过深度学习模型的训练和优化,实现从光学信号到高质量光谱图像的重建和分析。

关键研究:

光谱图像重建: 利用深度学习技术,对损失、噪声等问题进行建模,提高计算光谱成像的重建质量,以获取更真实和准确的光谱信息。

光谱特征学习: 设计深度学习模型,能够自动学习和提取光谱中的关键特征,包括但不限于峰值、波形、谱线形状等,从而提高光谱分析的准确性。

多模态信息融合: 探索将光学信号与其他传感器获取的信息进行融合,如红外、热成像等,以增强计算光谱成像的多样性和全面性。

实时光谱分析: 优化深度学习模型,使其能够在实时场景中进行光谱成像处理,满足对实时监测和反馈的需求。

异常检测与分类: 利用深度学习进行异常光谱模式的检测与分类,提高计算光谱成像在故障检测、医学诊断等领域的应用能力。

意义与前景: 基于深度学习技术的计算光谱成像研究将推动光学成像领域的技术进步,实现更高效、更智能的光谱信息获取和分析。该研究方向有望在医学、环境监测、食品安全等领域产生重要影响,为光学成像技术的发展和应用带来新的突破。

      我们课题组希望深度学习支持的从单幅RGB图像进行光谱重建的技术能够在现实任务中得到更多的应用。但目前仍存在一些问题,这是我们课题组未来的研究重点方向。

 

 

 

访问量:622