多模态大模型融合多光谱图像的风电机舱火灾预警方法
2025-02-27 12:34
No.1344648919971536896
技术概要
PDF全文
本申请公开了一种多模态大模型融合多光谱图像的风电机舱火灾预警方法,涉及火灾预警领域,该方法利用可见光图像和红外图像进行图像融合得到风电机舱在不同工作状态下的样本融合图像,样本融合图像融合了不同光谱模态下的图像特征进行优势互补,能够更好的表征风电机舱在当前工作状态下的图像特征,然后对样本融合图像进行图像标注和文字描述构建火灾常识图文数据集,并对预训练的VILA多模态大模型进行参数调整,使得搭建得到的风电机舱火灾预警模型能够理解风电机舱火灾预警基本常识,从而可以根据目标对搜索进行动态调整,有利于提高风电机舱在火灾预警状态下的异常目标的识别定位准确性,可以提高火灾预警的准确性。
背景技术
风力发电是新能源发电领域中非常具有前景的重要分支,受到国家的重要关注和重视。风电机组系统结构复杂,且风电机舱中的设备长时间处于高速旋转和高振动状态,风电机舱内容易出现润滑油脂泄露、齿轮箱过热、电缆过流绝缘降低等问题,这些问题都容易产生烟雾甚至明火,导致设备发生火灾,威胁风电场的安全稳定运行。因此对风电机舱中的上述问题进行监测有利于在火灾早期就定位到火灾特征从而及时发出预警,能够辅助电站运维人员开展设备消防安全工作,最大程度的减少火灾给风电机组系统带来的损失。 随着计算机视觉和自然语言处理技术的融合和发展,具备自然语言理解和图像识别的多模态大模型开始崭露头角,并在风电场的火灾监控系统中取得了初步的应用。但是由于风电机舱环境复杂且背景噪声较多,现有在利用多模态大模型推理识别火灾特征时,容易出现幻觉缺陷,检测和预警准确性不够理想。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
刘洋  朱珉  张潮海  邓军  谢志成  周海滨
技术所属: 南京航空航天大学
相关技术
变压器呼吸器变色检测方法、装置、系统及电子设备 变压器呼吸器变色检测方法、装置、系统及电子设备
基于机器视觉和AR的虫害检测与管理系统 基于机器视觉和AR的虫害检测与管理系统
一种电路板的故障快速检测方法、系统及存储介质 一种电路板的故障快速检测方法、系统及存储介质
遥感影像检测方法、装置、电子设备及存储介质 遥感影像检测方法、装置、电子设备及存储介质
一种基于在网计算的流表压缩方法 一种基于在网计算的流表压缩方法
一种基于分段信道估计的通感一体化系统干扰消除方法 一种基于分段信道估计的通感一体化系统干扰消除方法
一种基于上半身姿态的驾驶员情绪状态检测方法及系统 一种基于上半身姿态的驾驶员情绪状态检测方法及系统
一种引入RBU的轻量化皮革表面缺陷显著目标检测方法 一种引入RBU的轻量化皮革表面缺陷显著目标检测方法
一种基于金字塔的SAR图像相干斑抑制方法 一种基于金字塔的SAR图像相干斑抑制方法
一种考虑多层级特征的多类别点云异常检测方法及系统 一种考虑多层级特征的多类别点云异常检测方法及系统
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利