一种基于多模态融合的驾驶状态识别方法及系统
2025-02-24 14:04
No.1343584409676423168
技术概要
PDF全文
本技术属于智能交通技术领域,公开了一种基于多模态融合的驾驶状态识别方法及系统。本发明通过非侵入性的生理手环采集驾驶员的手腕运动信息,其中手腕运动信息与传统的生理信号和驾驶绩效数据等结合,提升了驾驶状态识别的准确性和鲁棒性。本发明提出了一种特征动态加权模型,该模型利用LSTM模块捕捉时间序列中的长期依赖关系,利用交叉注意力机制模块对不同模态间的特征进行加权,使得各个特征的动态重要性能够根据不同驾驶状态发生调整,利用Transformer模块实现不同模态数据的深度交互和特征增强。本发明利用XGBoost模型,并基于加权后的多模态特征进行驾驶状态分类,能够准确区分不同的驾驶状态。
背景技术
疲劳驾驶和分心驾驶是导致重大事故最常见的两种原因。在多种交通方式并存的情况下,对驾驶人的驾驶状态进行准确检测,可以极大地提高城市道路交通的安全性和道路运行效率。目前主流研究依赖视觉特征、脑电、眼电、肌电等来识别不良驾驶状态,但这些数据采集设备价格高昂且与身体接触影响正常操作,以及易受光照和遮挡物等影响,几乎不适用。 疲劳驾驶行为和分心驾驶行为是两种常见的不良驾驶行为。疲劳驾驶通常由于驾驶员休息不充分、长时间驾驶或夜间驾驶等原因产生的,其表现包括注意力不集中、反应迟缓、频繁打哈欠和眨眼等现象。分心驾驶是由于驾驶员习惯性地接打电话、抽烟等行为导致的,这些行为同样导致注意力分散和反应迟缓。上述现象都极易导致交通事故的发生。因此,快速准确地检测驾驶员的不良驾驶行为,对于保障驾驶员、乘客及行人的安全至关重要。 尽管现有技术中曾提出一些驾驶状态识别方法,然而这些方法往往由于特征关联性差、采集设备具有侵入性、数据源单一、特征融合精度低等原因,导致最终识别效果不佳。 在特征关联性方面,现有技术对不同特征的贡献没有进行有效评估,导致不同特征的处理权重不合理,将所有特征都作为输入,输入到识别模型中,影响了模型的准确度。 在采集设备侵入性方面,传统的生理检测设备成本高昂且舒适性低,可能会干扰驾驶员的驾驶行为,进而影响其状态识别。此外,使用脑电设备或生理信号传感器的组合进行不良驾驶状态检测时,需要在驾驶员身上贴上许多电极或传感器,这可能是侵入性的。实际驾驶中的许多动作都会在测量信号中产生伪迹,影响不良驾驶状态检测的准确性。 在数据源来源方面,现有的不良驾驶状态识别系统主要依靠单一信号来源作为输入,从而导致了较高的误报率和漏报率。尽管许多研究者曾提出利用传感器来获取多模态信息,从而综合检测驾驶员的不良驾驶状态。然而,由于许多数据采集困难、算法识别复杂、检测结果易受外部因素的影响等原因,给不良驾驶状态识别带来了极大的挑战。 在特征融合精度方面,现有的不良驾驶状态识别方法往往未能有效融合来自不同来源的特征,导致识别精度不高。此外,许多方法未充分评估各特征的重要性,导致特征处理权重分配不合理,直接将所有特征均匀输入到模型中,从而影响了模型的准确性。更重要的是,现有技术在实时性和计算效率上存在不足,难以满足实际应用需求。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
管德永  宋新宇  王可  王奇  赵文丽  王睿
技术所属: 山东科技大学
相关技术
一种服务开发方法、装置、设备及存储介质 一种服务开发方法、装置、设备及存储介质
一种高精度双层优化方法的神经网络搜索架构构建方法 一种高精度双层优化方法的神经网络搜索架构构建方法
跨总线域的设备对宿主机空间DMA访问方法及相关设备 跨总线域的设备对宿主机空间DMA访问方法及相关设备
一种客户信息定期维护方法及系统 一种客户信息定期维护方法及系统
代码发布方法、装置、计算机设备和可读存储介质 代码发布方法、装置、计算机设备和可读存储介质
一种基于统一管理平台的子应用数据获取方法及装置 一种基于统一管理平台的子应用数据获取方法及装置
利用深度学习的BIM模型错误自动检测系统 利用深度学习的BIM模型错误自动检测系统
一种基于智能反射面的室内T型走廊场景路径损耗的分析方法 一种基于智能反射面的室内T型走廊场景路径损耗的分析方法
模型评估任务处理方法及装置 模型评估任务处理方法及装置
基于大数据的异常信号智能识别方法 基于大数据的异常信号智能识别方法
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利