基于注意力机制的局部感知点云表示学习预训练方法及装置
2025-02-23 08:09
No.1343132746511556608
技术概要
PDF全文
本申请公开了基于注意力机制的局部感知点云表示学习预训练方法及装置,涉及点云表示学习技术领域,包括:通过对三维模型表面进行点云数据采样确定预训练数据集;预训练数据集为点云形状的数据集;基于转换器模型结构及预设局部感知自注意力机制确定待训练模型,利用待训练模型、掩码建模的预训练策略对预训练数据集进行数据处理;基于数据处理结果、待训练模型进行局部与全局的特征提取,利用特征提取结果及待训练模型中的密度感知倒角距离损失计算机制确定训练损失,得到预训练后模型;采集目标产品的点云数据确定微调数据集,利用预训练后模型及微调数据集进行特征提取与点云分类,完成微调,得到目标模型。本申请提高了点云特征提取的质量。
背景技术
随着计算设备和深度学习的快速发展,点云数据逐渐成为感知领域中不可或缺的一环,点云表示学习也受到越来越多关注。受限于其数据标注的困难性,以及点云具有的无序性,这现有方案中采用转换器(Transformer)模型结构进行点云感知、点云理解任务。 然而,由于Transformer模型结构的预训练点云模型对局部特征感知较弱,这使得在现有方案中,针对作为点云表示学习中重要一环的局部特征提取的表现较差。虽然在视觉中已有许多工作对局部自注意力进行研究,但在点云中少有相关研究,并且由于其空间连续性的性质,视觉中相关的方法并不直接适用。同时Transformer由于其对序列长度的二次复杂度,限制了将Transformer应用在更大规模点云数据的能力。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
武红强  余嘉玮  上官文  王少华  黄必清
技术所属: 浪潮云洲工业互联网有限公司  清华大学
相关技术
变压器呼吸器变色检测方法、装置、系统及电子设备 变压器呼吸器变色检测方法、装置、系统及电子设备
基于机器视觉和AR的虫害检测与管理系统 基于机器视觉和AR的虫害检测与管理系统
一种电路板的故障快速检测方法、系统及存储介质 一种电路板的故障快速检测方法、系统及存储介质
遥感影像检测方法、装置、电子设备及存储介质 遥感影像检测方法、装置、电子设备及存储介质
一种基于在网计算的流表压缩方法 一种基于在网计算的流表压缩方法
一种基于分段信道估计的通感一体化系统干扰消除方法 一种基于分段信道估计的通感一体化系统干扰消除方法
一种基于上半身姿态的驾驶员情绪状态检测方法及系统 一种基于上半身姿态的驾驶员情绪状态检测方法及系统
一种引入RBU的轻量化皮革表面缺陷显著目标检测方法 一种引入RBU的轻量化皮革表面缺陷显著目标检测方法
一种基于金字塔的SAR图像相干斑抑制方法 一种基于金字塔的SAR图像相干斑抑制方法
一种考虑多层级特征的多类别点云异常检测方法及系统 一种考虑多层级特征的多类别点云异常检测方法及系统
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利