公共安全标准网
文库搜索
切换导航
文件分类
频道
联系我们
问题反馈
文件分类
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210700085.9 (22)申请日 2022.06.20 (71)申请人 北京邮电大 学 地址 100876 北京市海淀区西土城路10号 申请人 北京海联捷讯科技股份有限公司 (72)发明人 陈春丽 马康佳 罗红 孙岩 杨雪梅 (74)专利代理 机构 北京金咨知识产权代理有限 公司 11612 专利代理师 王紫腾 (51)Int.Cl. G06F 16/25(2019.01) G06F 21/62(2013.01) (54)发明名称 一种应用于多网管平台运维数据的ETL系统 及方法 (57)摘要 本发明提供一种应用于多网管平台运维数 据的ETL系统及方法, 所述系统包括: 安全认 证组 件, 用于获取目标网管平台发送的鉴权令牌; 接 口调用组件, 配置目标网管平台的接口参数; 数 据转换组件, 获取目标网管平台传入 数据的核心 词组, 确定当前核心词组是否存在历史数据, 若 当前核心词组不是历史数据, 则计算所述核心词 组与预设的推荐映射表中的各待选词组的匹配 值, 将匹配值最高的待选词组作为核心词组的映 射词组; 数据持久化组件, 若数据转换组件确定 当前核心词组是历史数据, 则根据历史数据对当 前核心词组的存储位置, 将传入 数据存储到对应 位置, 若数据转换组件确定当前核心词组不是历 史数据, 则将传入数据存储到核心词组对应的映 射词组的存 储位置。 权利要求书2页 说明书8页 附图5页 CN 115145986 A 2022.10.04 CN 115145986 A 1.一种应用于多网管平台运维数据的ETL系统, 其特 征在于, 所述系统包括: 安全认证组件, 用于向目标网管平台发送鉴权令牌请求, 获取目标网管平台发送的鉴 权令牌; 接口调用组件, 用于确定当前鉴权令牌是否可用, 若可用, 则配置目标网管平台的接口 参数, 基于 接口参数建立与目标网管平台的数据连接, 获取 数据; 数据转换组件, 获取目标网管平台传入数据的核心词组, 确定当前核心词组是否存在 历史数据, 若当前核心词组不是历史数据, 则计算所述核心词组与预设的推荐映射表中的 各待选词组的匹配值, 将匹配值 最高的待选词组作为所述核心词组的映射词组; 数据持久化组件, 若数据转换组件确定当前核心词组是历史数据, 则根据历史数据对 当前核心词组的存储位置, 将传入数据存储到对应位置, 若数据转换组件确定当前核心词 组不是历史数据, 则将传入数据存 储到所述核心词组对应的映射词组的存 储位置。 2.根据权利要求1所述的应用于多网管平台运维数据的ETL系统, 其特征在于, 所述核 心词组包括至少一个核心词, 所述待选词组中包括至少一个待选词, 在数据转换组件的计 算所述核心词组与预设的推荐映射表中的各待选词组的匹配值步骤中, 分别计算每个核心 词组中的每个核心词 与待选词组中的每个待选词的匹配值, 得到核心词组与各个待选词组 的匹配值。 3.根据权利要求2所述的应用于多网管平台运维数据的ETL系统, 其特征在于, 所述待 选词组中的每个待选词均预设有分值参数, 若核心词与待选词相同, 则计入该待选词的分 值参数, 将核心词组中的每个核心词与同一待选词组中的每个待选词的匹配分值相加, 得 到匹配值。 4.根据权利要求3所述的应用于多网管平台运维数据的ETL系统, 其特征在于, 在数据 转换组件中预设的推荐映射表中的各待选词分为一级词、 二级词和三级词, 一级词、 二级词 和三级词分别设置有不同的分值参数, 一级词的分值参数>二级词的分值参数>三级词的 分值参数。 5.根据权利要求1 ‑4任一项所述的应用于多网管平台运维数据的ETL系统, 其特征在 于, 在安全认证组件向目标网管平台发送鉴权令牌请求, 获取目标网管平台发送的鉴权令 牌的步骤 还包括: 获取所述鉴权令牌的持续时间, 根据所述鉴权令牌的持续时间设置请求间隔时长, 所 述安全认证组件每隔请求间隔时长向目标网管平台发送鉴权 令牌请求。 6.根据权利要求1所述的应用于多网管平台运维数据的ETL系统, 其特征在于, 在将匹 配值最高的待选词组作为所述核心词组的映射词组的步骤中, 将所述核心词组对应的映射 词组以及核心词发送至运维端, 确定运维端是否对映射词组发出更改指令, 若运维端发出 更改指令, 则根据更改指令更改所述核心词组对应的映射词组。 7.根据权利要求1所述的应用于多网管平台运维数据的ETL系统, 其特征在于, 所述数 据转换组件的处 理步骤还包括: 获取目标网管平台的传入数据的源头资源, 将源头资源与预设的资源id映射表中的待 匹配资源进 行匹配, 若匹配成功, 则将匹配出的待匹配 资源的资源id赋给该源头 资源, 若匹 配失败, 则为该源头资源生成唯一的资源id, 记录 到资源id映射表中。 8.根据权利要求1所述的应用于多网管平台运维数据的ETL系统, 其特征在于, 数据持权 利 要 求 书 1/2 页 2 CN 115145986 A 2久化组件的将传入数据存储到所述核心词组对应的映射词组的存储位置步骤还包括, 将处 理过的核心词组加入历史数据, 并同步更新数据转换组件的历史数据。 9.根据权利要求1所述的应用于多网管平台运维数据的ETL系统, 其特征在于, 所述数 据持久化组件的步骤 还包括: 将传入数据的数据单位 转换为统一的数据单位。 10.一种应用如权利要求1 ‑9任一项所述系统的应用于多网管平台运维数据的ETL方 法, 所述方法的步骤 包括: 安全认证, 向目标网管平台发送鉴权 令牌请求, 获取目标网管平台发送的鉴权 令牌; 接口调用, 确定当前鉴权令牌是否可用, 若可用, 则配置目标网管平台的接口参数, 基 于接口参数建立与目标网管平台的数据连接, 获取 数据; 数据转换, 获取目标网管平台传入数据的核心词组, 确定当前核心词组是否存在历史 数据, 若当前核心词组不是历史数据, 则计算所述核心词组与预设的推荐映射表中的各待 选词组的匹配值, 将匹配值 最高的待选词组作为所述核心词组的映射词组; 数据持久化, 若数据转换组件确定当前核心词组是历史数据, 则根据历史数据对当前 核心词组的存储位置, 将传入数据存储到对应位置, 若数据转换组件确定当前核心词组不 是历史数据, 则将传入数据存 储到所述核心词组对应的映射词组的存 储位置。权 利 要 求 书 2/2 页 3 CN 115145986 A 3
专利 一种应用于多网管平台运维数据的ETL系统及方法
文档预览
中文文档
16 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共16页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 SC 于
2024-02-07 12:38:37
上传分享
举报
下载
原文档
(541.5 KB)
分享
友情链接
GB-T 14049-2008 额定电压10kV架空绝缘电缆.pdf
T-SHZSAQS 00143—2022 竞技场测试法评定湖羊性情技术规程.pdf
GB/T 19104-2021 过氧乙酸溶液.pdf
GB-T 41263-2022 工控系统动态重构主动防御体系架构规范.pdf
GB/T 39188-2020 电动门窗通用技术要求.pdf
GB-T 21062.1-2007 政务信息资源交换体系 第1部分:总体框架.pdf
GB-T 39201-2020 高铝粉煤灰提取氧化铝技术规范.pdf
专利 政企数据融通的数联网系统.PDF
NB-T 10869—2021 水电工程移民安置生活污水处理技术规范.pdf
DB34-T 3699-2020 智慧社区 公共安全 安全技术防范建设规范 安徽省.pdf
GB-T 38664.1-2020 信息技术 大数据 政务数据开放共享 第1部分:总则.pdf
民航 MH-T 6016-2017 航空食品车.pdf
腾讯安全 政务大数据平台数据安全体系建设指南V1.0.pdf
GBT 50064-2014 交流电气装置的过电压保护和绝缘配合设计规范.pdf
RB-T 065-2021 认证认可行业标准体系构建指南.pdf
GB-T 36717-2018 节能评估技术导则 尿素项目.pdf
JR-T 0137-2017 银行经营管理指标数据元.pdf
T-ACEF 034—2022 城镇供水管网数字化技术指南.pdf
美创 数据安全解决方案简介.pdf
T-CEC 676—2022 电化学储能电站检修规程.pdf
交流群
-->
1
/
16
评价文档
赞助2元 点击下载(541.5 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。