近日，由计算机学院明锐副教授指导，2023级计算机科学与技术专业本科生肖仪贤参与的研究取得了重要突破，在中国科学院SCI一区TOP期刊《Pattern Recognition》上发表了题为《SSDFusion: A scene-semantic decomposition approach for visible and infrared image fusion》的研究论文。
图1 论文摘要
该论文围绕可见光与红外图像融合这一研究领域展开，提出了一种基于场景语义分解的可见光和红外图像融合新方法SSDFusion。采用多级编码器－融合网络，通过创新的场景语义分解和融合策略，分别提取和融合场景相关和语义相关的组件，并将融合的语义注入场景特征中，既丰富了融合特征中的上下文信息，又保持了融合图像的保真度。研究还引入元特征嵌入技术，将编码器－融合网络与下游应用网络连接起来，显著提升了网络在语义提取、融合效果优化以及语义分割等任务上的性能。
图2 研究方法详细架构图
实验结果表明，该方法在增强语义分割任务结果的同时，实现了先进的图像融合性能，弥合了基于特征分解的图像融合与高级视觉应用之间的差距，为多模态图像融合提供了更有效的范式。
图3 与其他前沿方法在图像融合与语义分割任务上对比
近年来，计算机与大数据学院始终遵循威尼斯87978797“立足福州、面向市场、注重质量、突出应用”办学宗旨，通过导师制构建科研育人平台，鼓励本科生深入参与前沿课题研究，以期全面提升学生的其新与实践能力。未来，学院将持续深化科教融合，通过高水平科研项目，进一步推动本科生成长为应用型人才。
（计算机学院 黄静雯 王美清 肖仪贤 通讯员 黄昆畅）
【责任编辑 罗晓华】