一种基于开放域的跨模态遥感图像目标分割方法及装置
2025-02-22 08:28
No.1342775127766736896
技术概要
PDF全文
本技术提供一种基于开放域的跨模态遥感图像目标分割方法及装置,涉及遥感图像分割技术领域。该方法包括:对俯瞰遥感大图进行数据处理,获得文本引导遥感图像数据集;基于物体掩码标注获得前景标签数据以及背景标签数据;根据文本引导遥感图像数据集,通过开放域图像分割模型进行图像分割预测,获得分类预测结果;根据分类损失、图像特征重构损失和文本特征重构损失,对开放域图像分割模型进行参数优化,获得优化开放域图像分割模型;将待分割标注遥感图像输入优化开放域图像分割模型,获得遥感图像分割结果。本发明是一种开放性的分割类别灵活且分割目标精准的跨模态遥感图像目标分割方法。
背景技术
遥感图像是通过遥感技术获取的地表图像数据。遥感技术主要利用卫星、飞机或其他飞行器上搭载传感器,从远距离收集关于地表物体的信息。获益于超高空的俯视拍摄距离,遥感图像成像结果可以覆盖大范围区域,对成像结果的准确识别可以被广泛应用于环境监测、资源管理、城市规划、农业调查等领域。 不同于自然图像中物体清晰的边界与显著的特点;遥感图像中,地物之间的特征十分模糊,相关从业者难以直接辨别遥感图像中目标物体。即使辅以专业图像处理工具,受限于具体图像处理方法差别与操作者主观认识偏差,最终识别结果也会产生差异。导致遥感图像的分析往往有着较高的专业门槛,极大限制上述以遥感图像分析为基础的领域的发展速度。 近年来,数据驱动的建模方法由于不需要人为指定数据映射而得到重视与发展,基于数据驱动的图像处理方法也由于其灵活性与鲁棒性开始得到广泛关注。语义分割模型作为典型的数据驱动模型被广泛应用于图像分析领域。该类方法主要思路首先是建立图像分割掩码与标签间一一对应的大规模数据集,然后通过数据集训练模型来学习掩码与标签间的映射关系,实现对给定图像的像素级分类用于后续分析。该类方法为图像分析领域的发展做出了重要贡献。 但在实际应用与分析遥感图像时,传统语义分割模型无法有效识别遥感目标图像中常见小而分散的物体边界。该类典型方法,如U-Net,DeepLab等,仅关注目标前景的准确识别。然而,在遥感图像中,常常存在大量小而分散的前景对象,且背景与前景之间的分界即前景的边缘处模糊不清。这种情况下,上述方法由于缺乏对背景有效的约束和监督信息,导致对前景目标的边缘识别效果较差。 基于单模态的模型由于缺乏图像模态外的信息,其识别结果受限于训练时见到的数据类别而不具有扩展性。受遥感图像中环境复杂性与地物的多样性的影响,在实际使用时目标物不属于训练集中已定义的类别这一情况时常存在。针对该种情况,上述模型只能重新进行数据标注与训练,导致模型灵活性不足,同时还增加了模型更新和维护的复杂度。现有遥感检测模型受限于输入只有图像数据,模型无法学习物体间空间位置关系。而实际使用时,遥感图像分辨率极大,同一类别往往存在大量目标物,使用者往往只关注其中某一部分。因此,现有方案对同种类别所有目标的统一识别后,还需使用者进行人为查找其感兴趣目标,缺乏实用性。 在现有技术中,缺乏一种开放性的分割类别灵活且分割目标精准的跨模态遥感图像目标分割方法。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
王宏  刘科成  温兆堃  李江昀  张天翔  庄培显  袁立
技术所属: 北京科技大学
相关技术
变压器呼吸器变色检测方法、装置、系统及电子设备 变压器呼吸器变色检测方法、装置、系统及电子设备
基于机器视觉和AR的虫害检测与管理系统 基于机器视觉和AR的虫害检测与管理系统
一种电路板的故障快速检测方法、系统及存储介质 一种电路板的故障快速检测方法、系统及存储介质
遥感影像检测方法、装置、电子设备及存储介质 遥感影像检测方法、装置、电子设备及存储介质
一种基于在网计算的流表压缩方法 一种基于在网计算的流表压缩方法
一种基于分段信道估计的通感一体化系统干扰消除方法 一种基于分段信道估计的通感一体化系统干扰消除方法
一种基于上半身姿态的驾驶员情绪状态检测方法及系统 一种基于上半身姿态的驾驶员情绪状态检测方法及系统
一种引入RBU的轻量化皮革表面缺陷显著目标检测方法 一种引入RBU的轻量化皮革表面缺陷显著目标检测方法
一种基于金字塔的SAR图像相干斑抑制方法 一种基于金字塔的SAR图像相干斑抑制方法
一种考虑多层级特征的多类别点云异常检测方法及系统 一种考虑多层级特征的多类别点云异常检测方法及系统
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利