一种应用于事实纠错的分块词性提示方法
2025-02-27 18:33
No.1344739235802128384
技术概要
PDF全文
事实错误纠正旨在识别和纠正给定语句中的事实错误。现有的大多数方法都依赖于语言模型掩码器,通过掩码语句中的令牌来识别事实错误。然而,这种方法往往无法确保被掩码词块的成分完整性,从而导致更正偏离原始语句。为了解决这个问题,我们提出了一种基于Chunking的方法和用于FEC的词性信息提示,其目的是识别和纠正与声明内容一致的事实错误。具体来说,我们首先描述了一个基于Chunking的掩码模块,该模块可将语句分块为多个跨度,同时保留每个跨度的成分完整性,然后标记每个跨度的词性信息,并将其与跨度边界预测模块预测的证据跨度相结合,形成一个提示,使用该提示给基于T5的校正器为每个基于跨度的掩码语句生成校正,最后使用校正评分来选择最终校正。
背景技术
事实纠错(FEC)的目的是识别和纠正特定声明中的事实错误和不准确之处,从而提高事实声明的准确性和可靠性;随着现实世界中声明的增多,纠正由大型语言模型(LLMs)产生的事实错误或错误信息(例如幻觉)并提供相应纠正证据的需求也在不断增加,为了提高这项任务的效率,有人提出了自动FEC方法,以自动识别和纠正事实错误的证据。 现有的FEC方法大多采用语言模型掩码器来识别声明中可能存在的事实错误,然后用给定的证据或文件进行纠正;然而,这些方法主要侧重于使用标记级掩码策略进行校正,这往往会导致校正结果与原始声明不一致;例如“US AirwaysFlight1549[mask].”是一个被标记级语言模型掩码器掩码的声明,这往往会导致校正与原始声明构成不一致,即使其校正是正确的,例如“USAirways Flight1549crashed.”;因此,为了保持更正与原声明之间的一致性,有必要确保更正不偏离原声明的构成要素。 大多数虚假声明是通过将文本跨度替换为原始声明中的特定成分而生成的,例如,虚假声明“Boeing787Dreamlinerisaboat.”是通过将“boat”替换为“plane”而生成的;现有的基于掩码的FEC方法大多根据证据生成修正,而不考虑掩码跨度的词性信息,如“Boeing787Dreamlinerisatwin-enginejetairliner.”,这样很容易引入不必要的信息或新的错误;因此,为了提高纠错的有效性和准确性,必须考虑掩码跨度的词性信息,即从证据中选择与掩码跨度的词性信息更一致的“plane”,而不是“twin-enginejetairliner”。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
朱晓峰  姜淑芹  邓振云  邵杰
技术所属: 电子科技大学(深圳)高等研究院
相关技术
一种服务开发方法、装置、设备及存储介质 一种服务开发方法、装置、设备及存储介质
一种高精度双层优化方法的神经网络搜索架构构建方法 一种高精度双层优化方法的神经网络搜索架构构建方法
跨总线域的设备对宿主机空间DMA访问方法及相关设备 跨总线域的设备对宿主机空间DMA访问方法及相关设备
一种客户信息定期维护方法及系统 一种客户信息定期维护方法及系统
代码发布方法、装置、计算机设备和可读存储介质 代码发布方法、装置、计算机设备和可读存储介质
一种基于统一管理平台的子应用数据获取方法及装置 一种基于统一管理平台的子应用数据获取方法及装置
利用深度学习的BIM模型错误自动检测系统 利用深度学习的BIM模型错误自动检测系统
一种基于智能反射面的室内T型走廊场景路径损耗的分析方法 一种基于智能反射面的室内T型走廊场景路径损耗的分析方法
模型评估任务处理方法及装置 模型评估任务处理方法及装置
基于大数据的异常信号智能识别方法 基于大数据的异常信号智能识别方法
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利