(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210926234.3 (22)申请日 2022.08.03 (71)申请人 珠海高凌信息科技股份有限公司 地址 519060 广东省珠海市南屏科技工业 园屏东一路1号 (72)发明人 刘立峰　吕鑫　刁海峰　王坤　 田巍　 (74)专利代理 机构 广州嘉权专利商标事务所有 限公司 4 4205 专利代理师 陈嘉乐 (51)Int.Cl. G06F 40/30(2020.01) G06F 40/284(2020.01) G06F 16/35(2019.01) G06N 3/08(2006.01) (54)发明名称 有害短信分析方法、 装置和存 储介质 (57)摘要 本申请公开了有害短信分析方法、 装置和存 储介质， 包括对中文语料进行预处理， 获得不同 的所述中文语料对应的不同序列； 使用盘古模型 提取每个序列的词嵌入向量； 采用LS TM对所述词 嵌入向量进行深层特征提取， 获得每一个序列对 应的文本深层语义特征； 将所述文本深层语义特 征经过全连接层和Softmax分类器， 进行模型的 训练和测试。 本申请通过盘古大模 型和迁移学习 技术， 减少所需的有标签的有害短信数据量， 训 练所需要的时间和计算资源也大大减少， 具有更 好的适应性， 能在短时间内生 成可靠的有害短信 检测分析模 型， 提高了通信网有害短信的分析效 率。 权利要求书2页 说明书7页 附图3页 CN 115455977 A 2022.12.09 CN 115455977 A 1.有害短信分析 方法， 其特 征在于， 所述方法包括： 对中文语料进行 预处理， 获得不同的所述中文语料对应的不同序列； 使用盘古模型提取每 个序列的词嵌入向量； 采用LSTM对所述词嵌入向量进行深层特征提取， 获得每一个序列对应的文本深层语义 特征； 将所述文本深层语义特 征经过全连接层和Softmax分类 器， 进行模型的训练和 测试。 2.根据权利要求1所述的有害短信分析方法， 其特征在于， 所述对中文语料进行预处 理， 包括： 针对每条所述中文语料， 通过生成数据字典进行文本字符化， 获得不同的所述中文语 料对应的不同序列； 在每一个序列中， 用字符标识作为当前序列的第一个标记， 通过字符标识对当前序列 进行分割， 最后得到每条中文语料的词向量序列。 3.根据权利要求1所述的有害短信分析方法， 其特征在于， 所述对中文语料进行预处理 后， 所述方法还 包括： 根据所述中文语料 是否包含有害短信对所述中文语料打上相应标签。 4.根据权利要求1所述的有害短信分析方法， 其特征在于， 所述方法还包括对所述盘古 模型进行 预训练， 包括： 向所述盘古模型输入中文语料训练集、 测试集和训练超参数； 使用所述中文语料训练集训练所述盘古模型； 判断所述盘古模型的准确率是否达到预设值， 若是， 则输出所述盘古模型， 若否， 则调 整所述训练超参数并继续训练所述盘古模型。 5.根据权利要求4所述的有害短信分析方法， 其特征在于， 所述方法还包括： 若所述盘 古模型的准确率达到预设值， 则判断所述训练超参数 的调整次数是否达到预设调整次数， 若是， 则输出 所述盘古模型。 6.根据权利要求1所述的有害短信分析方法， 其特征在于， 将所述文本深层语义特征经 过全连接层和Softmax分类 器， 包括： 将所述文本深层语义特征输入Softmax分类器进行归一化概率预测， 获得概率预测向 量； 根据所述 概率预测向量进行语料性质分析， 确定是否含有 有害短信。 7.根据权利要求6所述的有害短信分析方法， 其特征在于， 所述方法还包括： 若根据所 述概率预测向量进行语料性质分析， 确定含有有害短信， 则自动屏蔽所述有害短信并通知 用户。 8.有害短信分析装置， 其特 征在于， 所述装置包括： 第一模块， 用于对中文语料进行 预处理， 获得不同的所述中文语料对应的不同序列； 第二模块， 用于使用盘古模型提取每 个序列的词嵌入向量； 第三模块， 用于采用LSTM对所述词嵌入向量进行深层特征提取， 获得每一个序列对应 的文本深层语义特 征； 第四模块， 用于将所述文本深层语义特征经过全连接层和 Softmax分类器， 进行模型的 训练和测试。权　利　要　求　书 1/2 页 2 CN 115455977 A 29.有害短信分析装置， 其特 征在于， 所述装置包括： 至少一个处 理器； 至少一个存 储器， 所述存 储器用于存 储至少一个程序； 当至少一个所述程序被至少一个所述处理器执行时实现如权利要求1 ‑7中任一项所述 的有害短信分析 方法。 10.存储介质， 其特征在于， 所述存储介质存储有处理器可执行的程序， 所述处理器可 执行的程序被处 理器执行时实现如权利要求1 ‑7中任一项所述的有 害短信分析 方法。权　利　要　求　书 2/2 页 3 CN 115455977 A 3