公共安全标准网
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210896790.0 (22)申请日 2022.07.28 (71)申请人 武汉轻工大 学 地址 430000 湖北省武汉市汉口常青花园 学府南路68号 (72)发明人 李雅琴 屈唯佳 袁操 曾山  (74)专利代理 机构 深圳市世纪恒程知识产权代 理事务所 4 4287 专利代理师 陈满谊 (51)Int.Cl. G06F 40/30(2020.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 文本摘要生成方法、 装置、 设备以及存储介 质 (57)摘要 本申请公开了一种文本摘要生成方法、 装 置、 设备以及存储介质, 属于自然语言处理技术 领域。 文本摘要生成方法包括以下步骤: 获取输 入文本; 所述输入文本包括多个语句; 将多个预 设标志分别插入至多个所述语句中, 得到多个目 标语句; 将多个目标语句输入至预训练模型 BART, 得到 所述预训练模型B ART输出的多个表示 向量; 根据多个所述表示向量, 得到各个所述表 示向量的重要性得分; 根据所述重要性得分与所 述目标语句, 生成摘要文本。 本申请可提高生成 的文本摘要的准确性。 权利要求书2页 说明书9页 附图3页 CN 115422941 A 2022.12.02 CN 115422941 A 1.一种文本摘要生成方法, 其特 征在于, 所述方法包括: 获取输入文本; 所述输入文本包括多个 语句; 将多个预设标志分别插 入至多个所述语句中, 得到多个目标语句; 将多个目标语句输入至预训练模型BA RT, 得到所述预训练模型BA RT输出的多个表示向 量; 根据多个所述表示向量, 得到各个所述表示向量的重要性得分; 根据所述重要性得分与所述目标语句, 生成摘要 文本。 2.根据权利要求1所述的文本摘要生成方法, 其特征在于, 所述将多个预设标志分别插 入至多个所述语句中, 得到多个目标语句, 包括: 将第一预设标志插 入至每一个所述语句中第一个字符 之前; 将第二预设标志插入至每一个所述语句中最后一个字符之后, 得到多个所述目标语 句。 3.根据权利要求1所述的文本摘要生成方法, 其特征在于, 所述BART模型包括嵌入层, 将多个目标语句输入至预训练模型BART, 得到所述预训练模型BART输出的多个表示 向量, 包括: 将多个目标语句输入至预训练模型BART中的嵌入层; 所述嵌入层对所述目标语句进行词嵌入操作, 得到多个所述表示向量。 4.根据权利要求2所述的文本摘要生成方法, 其特征在于, 所述嵌入层对所述目标语句 进行词嵌入操作, 得到多个所述表示向量, 包括: 判断所述目标语句是否为第奇数个目标语句; 若是, 则选择第一分段嵌入方式对所述目标语句进行词嵌入, 得到多个所述表示向量。 5.根据权利要求4所述的文本摘要生成方法, 其特征在于, 所述判断所述目标语句是否 为第奇数个表示向量之后, 所述方法还 包括: 若否, 则选择第二分段嵌入方式对所述目标语句进行嵌入, 得到多个所述表示向量。 6.根据权利要求1所述的文本摘要生成方法, 其特征在于, 所述将多个目标语句输入至 预训练模型BART, 得到所述预训练模型BART输出的多个表示向量, 包括: 将多个目标语句输入至预训练模型BA RT, 得到所述预训练模型BA RT输出的多个表示向 量和多个上 下文信息向量; 所述根据多个所述表示向量, 得到各个所述表示向量的重要性得分, 包括: 根据多个所述表示向量以及多个所述上下文信息向量, 得到所述输入文本的整体信 息; 针对每个所述语句, 将所述表示向量与所述整体信息进行关联度比对, 得到关联度比 对结果, 并将所述关联度比对结果作为各个所述表示向量的重要性得分。 7.根据权利要求1所述的文本摘要生成方法, 其特征在于, 所述根据所述重要性得分与 所述目标语句, 生成摘要 文本, 包括: 筛选出所述重要性得分大于或者等于预设阈值的所述表示向量对应的所述目标语句, 得到筛选语句; 根据所有所述筛 选语句, 得到所述摘要 文本。 8.一种文本摘要生成装置, 其特 征在于, 所述装置包括:权 利 要 求 书 1/2 页 2 CN 115422941 A 2文本获取模块, 用于获取输入文本; 所述输入文本包括多个 语句; 标志插入模块, 用于将多个预设标志分别插 入至多个所述语句中, 得到多个目标语句; 向量生成模块, 用于将多个目标语句输入至预训练模型BART, 得到所述预训练模型 BART输出的多个表示向量; 评分模块, 用于根据多个所述表示向量, 得到各个所述表示向量的重要性得分; 摘要生成模块, 用于根据所述重要性得分与所述目标语句, 生成摘要 文本。 9.一种文本摘要生成设备, 其特征在于, 包括: 处理器, 存储器以及存储在所述存储器 中的文本摘要生成程序, 所述文本摘要生成程序被所述处理器运行时实现如权利要求1 ‑7 中任一项所述文本摘要生成方法的步骤。 10.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质上存储有文本摘 要生成程序, 所述文本摘要生成程序被处理器执行时实现如权利要求 1至7任一项 所述的文 本摘要生成方法。权 利 要 求 书 2/2 页 3 CN 115422941 A 3

PDF文档 专利 文本摘要生成方法、装置、设备以及存储介质

文档预览
中文文档 15 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 文本摘要生成方法、装置、设备以及存储介质 第 1 页 专利 文本摘要生成方法、装置、设备以及存储介质 第 2 页 专利 文本摘要生成方法、装置、设备以及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-03-03 12:14:25上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。