深度学习在多模态情绪识别中的应用
2025-02-15 09:38
No.1340255945024086016
技术概要
PDF全文
本文介绍了一种基于深度学习的多模态情绪识别技术。该技术首先对不同模态数据进行预处理,然后利用密集交互神经网络对数据进行特征提取,形成特征矩阵。最后,通过情绪识别神经网络对特征矩阵进行分析,实现情绪识别。
背景技术
近年来,对于情绪识别问题,研究人员采用了各种各样的数据源进行识别,包括脑电,眼动追踪、面部表情及语言等信号。各种模态数据在构建情感模型中各有特点。其中,使用脑电信号构建情感模型,准确率高、稳定性好,已经得到国内外科研人员的广泛认可,并开展了深入的研究。但在实际应用中,采集脑电信号的过程繁琐且成本高。使用其他信号,如面部表情或语言对话等,采集便利,但区分能力弱容易伪装。使用多个模态数据融合的情绪识别研究正越来越得到关注。国际上不同实验室的研究结果表明,同时采集的不同模态的信号反映了情绪的不同侧面。因此,使用多模态数据融合的方法进行情绪识别,可以大大提高情绪识别系统的准确率。 目前,多模态数据融合的情绪识别方法,针对采用的各种模态的数据,设计了各式各样的多模态数据融合情绪识别模型。然而,尽管目前有很多种多模态数据融合的情绪识别神经网络模型,但大多模型的设计依赖于某个模态数据本身,无法变更为其他模态。此外,大多数模型的设计依赖于模态数量,无法根据实际情况增减模态数量。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
吕宝粮赵志炜刘伟
技术所属: 上海零唯一思科技有限公司.
相关技术
一种服务开发方法、装置、设备及存储介质 一种服务开发方法、装置、设备及存储介质
一种高精度双层优化方法的神经网络搜索架构构建方法 一种高精度双层优化方法的神经网络搜索架构构建方法
跨总线域的设备对宿主机空间DMA访问方法及相关设备 跨总线域的设备对宿主机空间DMA访问方法及相关设备
一种客户信息定期维护方法及系统 一种客户信息定期维护方法及系统
代码发布方法、装置、计算机设备和可读存储介质 代码发布方法、装置、计算机设备和可读存储介质
一种基于统一管理平台的子应用数据获取方法及装置 一种基于统一管理平台的子应用数据获取方法及装置
利用深度学习的BIM模型错误自动检测系统 利用深度学习的BIM模型错误自动检测系统
一种基于智能反射面的室内T型走廊场景路径损耗的分析方法 一种基于智能反射面的室内T型走廊场景路径损耗的分析方法
模型评估任务处理方法及装置 模型评估任务处理方法及装置
基于大数据的异常信号智能识别方法 基于大数据的异常信号智能识别方法
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利