本申请公开了一种多特征融合的红外船舶图像修复方法、装置、设备及介质,方法包括获取第一图像数据和真实图像数据,对第一图像数据进行手工特征提取和深度特征提取,获得手工特征数据和深度特征数据;将手工特征数据与深度特征数据进行融合,获得融合特征;将融合特征输入卷积神经网络模型对第一图像数据进行修复,获得第二图像数据;根据第二图像数据与真实图像数据,获得重建损失函数,根据重建损失函数对卷积神经网络模型进行优化,获得红外船舶图像修复模型;根据红外船舶图像修复模型对红外船舶图像进行修复。本申请在复杂场景和极端条件下具有较强的修复鲁棒性,能够稳定恢复红外图像细节并提升整体修复质量。
背景技术
红外成像技术因其在低光照和复杂气象条件下的出色表现,受到广泛关注和应用。相比于可见光成像,红外成像能够在多种不利条件下捕获物体的热辐射特征,具有更强的抗干扰能力和环境适应性。在海上应用中,红外成像尤其能够在夜间、雾霾等复杂条件下确保对船舶的稳定观测,提升模型的泛化能力和鲁棒性。然而,红外图像在实际应用中往往面临损伤、噪声干扰、低分辨率等问题。这些挑战导致图像质量下降,影响后续 目标识别或检测的准确性。因此,对红外图像进行有效的修复显得尤为关键。
相关技术中,利用手工特征进行图像修复,手工特征利用经典图像处理算子提取几何和纹理细节信息,提供丰富且直接的视觉特征,特别在复杂细节捕获上具有独特优势,但是通过手工特征进行图像修复的缺点在于精度低、速度慢。
近些年,基于深度学习的红外舰船分类方法受到了学者广泛关注,研究人员已经利用深度卷积神经网络模型实现了比传统手工特征分类模型精度更高、速度更快的红外舰船图像特征提取,并且深度卷积神经网络模型还能够端到端地进行训练和测试,极大简化了设计流程,减轻了手工特征提取的负担。
然而,单一依赖深度特征可能导致信息缺失、数据需求大、解释性差等缺陷,导致现有的红外图像修复方法在复杂场景和极端条件下存在无法稳定恢复红外图像细节,修复质量差的问题。
实现思路