本技术的一种基于姿态蒸馏的低分辨率人体姿态估计方法、设备及介质,其步骤包括构建成对的人体姿态估计数据集;获得预训练和微调后的预训练模型,作为姿态蒸馏中的教师模型;构建姿态蒸馏器;构建低分辨率人体姿态检测模型;在成对的高低分辨率训练集上,使用姿态蒸馏器分解出教师模型所获的人体姿态特征,并分阶段指导低分辨率网络学习不同层次的人体姿态特征;利用训练完成的低分辨率人体姿态估计模型进行人体姿态估计预测,得到人体姿态估计预测结果。通过本发明提出的姿态蒸馏器将教师模型的人体姿态特征在不同尺度上分解并传递给学生模型,从而提高学生模型在低分辨率环境下的检测能力。
背景技术
人体姿态估计是计算机视觉的一个重要分支,它旨在从图像或视频中检测人体的关节位置、方向和姿态。该技术在人体动作识别、行为分析和人机交互等应用场景中具有重要的作用。近年来,基于深度学习的人体姿态估计方法不断涌现,显著提升了预测的准确性。
然而,当图像分辨率降低时,人体姿态估计面临着巨大的挑战。由于低分辨率图像缺乏细节信息,图像中的人体结构和关键点变得模糊不清,使得现有模型难以提取到有效的人体姿态特征。这就导致了现有的人体姿态估计网络模型在低分辨率图像上表现不佳,严重影响了算法的检测性能。
针对低分辨率图像上人体姿态特征提取的困难,现有的方法主要采用两种策略:一是利用多尺度特征融合技术,通过结合不同分辨率的特征图,增强人体姿态特征的表达能力;二是利用特征超分辨率技术,通过对低分辨率特征图进行上采样,恢复人体姿态特征的细节信息。然而,这些方法也存在一些问题,如计算开销大、计算复杂度高、过度处理引入噪声等,从而降低了网络模型的实用性,影响了网络模型的预测精度。
实现思路