基于多尺度特征融合的对动物图像的零样本分类方法
2025-02-26 14:10
No.1344310723953827840
技术概要
PDF全文
本技术公开了一种基于多尺度特征融合的对动物图像的零样本分类方法,该方法包括:通过利用ResNet101第三层与第四层的不同尺度特征,在零样本分类任务中进行局部特征的挖掘;将第三层与第四层特征输入多尺度特征增强模块,增强特征判别性;设立跨层融合模块,通过学习对方层的特征产生交互,增强模型泛化能力;将同层的特征融合,并输入到属性关注模块。本发明充分利用了不同层的特征信息,减少了零样本分类任务中,模型对可见类的偏见,提升了广义零样本和零样本分类的准确性。
背景技术
零样本学习(Zero-shot learning,ZSL)是机器学习领域中一项关键的研究方向。传统监督学习通常要求在训练阶段接触到所有可能的类别样本数据,但在现实中,获取所有类别的样本数据是不可行的。这导致了一个重要的挑战:当模型在实际应用中遇到未见过的类别时,传统方法会失效,因为它们无法从已有数据中学习到关于新类别的信息。在实际场景中,新类别的样本数据可能极其有限甚至不存在。例如,一个动物识别模型可能在训练阶段只接触到猫和狗的图像数据,但在现实中可能会遇到斑马、大象等模型未见过的动物。这种情况下,传统的监督学习模型无法正确分类或识别这些新类别。 为解决这一问题,零样本学习的出现成为了必然。其核心思想是通过利用已知类别的信息来辅助模型对未见类别进行推断和分类。这种方式被视为一种泛化能力的体现,即使在没有直接观测到的类别情况下,模型也能做出合理的推断。为了实现这一目标,研究者们尝试了多种方法和技术。零样本学习的一个关键思路是基于属性的方法。这种方法认为每个类别都可以由一组属性描述,例如,动物可以由毛发颜色、体型大小等属性来刻画。通过利用已知类别的属性信息,模型可以推断出新类别的属性,从而实现对未知类别的识别。另一个重要的思路是生成式模型,如生成对抗网络(GANs)。生成式模型可以生成类似于训练数据的新样本,即使没有直接观测到的类别,也能通过生成模型生成该类别的样本,帮助模型学习新类别的特征。 零样本学习可以解决传统监督学习中局限性和数据稀缺性的问题。并且零样本学习还有其自身的势。人类在面对未知概念时,常常能够基于已有知识进行推断和归纳。零样本学习试图模仿人类的认知过程,尤其是在面对新概念时的推断能力。 零样本分类任务中,局部信息捕获和挖掘十分重要。局部信息通常与特定类别或属性相关联。在零样本分类中,即使没有见过某个类别的样本,局部信息仍然可以提供关于该类别特征的重要线索。局部信息如纹理、形状、边缘等,能有助于提供更具体和细致的图像描述,通过这些信息,模型可以更好地理解图像内容,并将其与已知类别进行关联。并且局部信息能够提供更具判别性的特征,有助于区分不同类别之间的差异。在零样本分类中,这些特征可以帮助模型准确地识别和归类未知类别,并提高模型的泛化能力。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
周哲贤  肖亮  谢国森
技术所属: 南京理工大学
相关技术
变压器呼吸器变色检测方法、装置、系统及电子设备 变压器呼吸器变色检测方法、装置、系统及电子设备
基于机器视觉和AR的虫害检测与管理系统 基于机器视觉和AR的虫害检测与管理系统
一种电路板的故障快速检测方法、系统及存储介质 一种电路板的故障快速检测方法、系统及存储介质
遥感影像检测方法、装置、电子设备及存储介质 遥感影像检测方法、装置、电子设备及存储介质
一种基于在网计算的流表压缩方法 一种基于在网计算的流表压缩方法
一种基于分段信道估计的通感一体化系统干扰消除方法 一种基于分段信道估计的通感一体化系统干扰消除方法
一种基于上半身姿态的驾驶员情绪状态检测方法及系统 一种基于上半身姿态的驾驶员情绪状态检测方法及系统
一种引入RBU的轻量化皮革表面缺陷显著目标检测方法 一种引入RBU的轻量化皮革表面缺陷显著目标检测方法
一种基于金字塔的SAR图像相干斑抑制方法 一种基于金字塔的SAR图像相干斑抑制方法
一种考虑多层级特征的多类别点云异常检测方法及系统 一种考虑多层级特征的多类别点云异常检测方法及系统
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利