公共安全标准网
文库搜索
切换导航
文件分类
频道
联系我们
问题反馈
文件分类
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 20221072310 3.5 (22)申请日 2022.06.24 (71)申请人 深圳微众信用科技股份有限公司 地址 518000 广东省深圳市南 山区粤海街 道深圳国际软件园一期 8栋202室 (72)发明人 练刚 欧阳张鹏 赵彦晖 耿心伟 曾源 (74)专利代理 机构 广州三环 专利商标代理有限 公司 44202 专利代理师 黄禹强 (51)Int.Cl. G06F 21/60(2013.01) G06F 21/62(2013.01) (54)发明名称 数据源的管理方法、 管理装置、 电子设备及 存储介质 (57)摘要 本申请提供了一种数据源的管 理方法、 管 理 装置、 电子设备及存储介质。 数据源的管理方法 包括: 获取原始数据; 读取原始数据, 对原始数据 进行筛选处理以获取明细数据, 并将明细数据写 入数据明细层; 及读取数据明细层的明细数据, 对明细数据进行分类处理以获取服务数据, 并将 服务数据写入数据服务层。 本申请中, 通过将不 同处理后的数据分别存储到不同的存储层级中, 提高了数据的处理和分析效率, 另外, 将筛选处 理得到的明细数据写入数据明细层进行存储, 保 证了原始数据的安全性。 再对明细数据进行分类 处理获取服务数据, 使 得服务数据能够满足不同 需要方的需要, 进而保证服务数据的隔离性和安 全性。 权利要求书2页 说明书10页 附图2页 CN 115168880 A 2022.10.11 CN 115168880 A 1.一种数据源的管理方法, 其特 征在于, 包括: 获取原始数据; 读取所述原始数据, 对所述原始数据进行筛选处理以获取明细数据, 并将所述明细数 据写入数据明细 层; 及 读取所述数据明细层的所述明细数据, 对所述明细数据进行分类处理以获取服务数 据, 并将所述 服务数据写入数据服 务层。 2.根据权利要求1所述的管理方法, 其特 征在于, 所述获取原 始数据, 包括: 收集所述原 始数据并存 储于原始数据层; 及 从所述原 始数据层获取 所述原始数据。 3.根据权利要求1所述的管理方法, 其特征在于, 所述对所述原始数据进行筛选处理以 获取明细数据, 包括: 对所述原始数据进行数据清洗处理, 以将满足第 一预设条件的所述原始数据作为第 一 预处理数据; 及 对所述第一预处理数据进行脱敏处理, 以使所述第一预处理数据满足第二预设条件, 并将满足所述第二预设条件的所述第一预处 理数据作为所述明细数据。 4.根据权利要求3所述的管理方法, 其特征在于, 所述对所述原始数据进行数据清洗处 理, 以将满足第一预设条件的所述原 始数据作为第一预处 理数据, 包括: 计算所述原 始数据的缺失值; 对所述缺失值大于第一预设阈值的所述原 始数据进行删除处 理; 及 对所述缺失值小于或等于所述第 一预设阈值的所述原始数据进行填充处理, 以获取所 述第一预处 理数据。 5.根据权利要求1所述的管理方法, 其特征在于, 所述对所述明细数据进行分类处理以 获取服务数据, 包括: 将所述明细数据按照多个预设的数据主题划分至不同的主题域, 将划分后的所述明细 数据作为所述 服务数据, 每 个所述数据主题对应一个分析 领域。 6.根据权利要求1所述的管理方法, 其特征在于, 在所述读取所述数据明细层的所述明 细数据, 对所述明细数据进行分类处理以获取服务数据, 并将所述服务数据写入数据服务 层之后, 还 包括: 将所述数据服 务层的所述 服务数据作为目标 数据; 及 将所述目标 数据写入数据运用层, 以从所述数据运用层查询和/或导出 所述目标 数据。 7.根据权利要求6所述的管理方法, 其特征在于, 在所述将所述目标数据写入数据运用 层之前, 还 包括: 根据预设维度信 息对所述明细数据进行预聚合处理, 以获取不同维度信 息的所述明细 数据的组合, 并将所述预聚合处 理后的所述明细数据作为所述目标 数据。 8.一种源数据的管理装置, 其特 征在于, 包括: 获取模块, 用于获取原 始数据; 第一处理模块, 用于读取所述原始数据, 对所述原始数据进行筛选处理以获取明细数 据, 并将所述明细数据写入数据明细 层; 及 第二处理模块, 用于读取所述数据明细层的所述明细数据, 对所述明细数据进行分类权 利 要 求 书 1/2 页 2 CN 115168880 A 2处理以获取服 务数据, 并将所述 服务数据写入数据服 务层。 9.一种电子设备, 其特征在于, 包括处理器和存储器, 所述处理器和存储器相互连接, 其中, 所述存储器用于存储计算机程序, 所述计算机程序包括程序指 令, 所述处理器被配置 用于调用所述 程序指令, 执 行如权利要求1至7任一项所述的管理方法。 10.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质存储有计算机程 序, 所述计算机程序包括程序指令, 所述程序指令被处理器执行时使所述处理器执行如权 利要求1至7任一项所述的管理方法。权 利 要 求 书 2/2 页 3 CN 115168880 A 3
专利 数据源的管理方法、管理装置、电子设备及存储介质
文档预览
中文文档
15 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 思考人生 于
2024-02-07 20:38:32
上传分享
举报
下载
原文档
(509.3 KB)
分享
友情链接
JY-T 0568-2020 电感耦合等离子体质谱分析方法通则.pdf
齐齐哈尔市民用建筑节能管理办法.pdf
GB-T 28827.7-2022 信息技术服务 运行维护 第7部分:成本度量规范.pdf
GB 4824-2019 工业、科学和医疗设备 射频骚扰特性 限值和测量方法.pdf
ISO IEC 27040-2015.pdf
MT-T 635-2020 矿井巷道通风摩擦阻力系数测定方法.pdf
GB-T 28456-2012 IPsec协议应用测试规范.pdf
资产管理 数据资产确权登记导则.pdf
GB-T 33134-2016 信息安全技术 公共域名服务系统安全要求.pdf
JR-T 0185—2020 《商业银行应用程序接口安全管理规范》.pdf
T-CSAE 81—2018 能量回馈式整车动力学控制系统 性能要求及台架试验方法.pdf
GB/T 39975-2021 氮化铝陶瓷散热基片.pdf
GB 7231-2003 工业管道的基本识别色、识别符号和安全标识.pdf
GB-T 15843.3-2016 信息技术 安全技术 实体鉴别 第3部分:采用数字签名技术的机制.pdf
GB-T 37033.1-2018 信息安全技术 射频识别系统密码应用技术要求 第1部分:密码安全保护.pdf
GB-T 20647.3-2006 社区服务指南 第3部分:文化、教育、体育服务.pdf
数据安全和个人信息保护社会责任指南2.1实施.pdf
T-CIIA 023—2022 科学数据 云平台运维流程与要求.pdf
GB-T 22719.1-2008 交流低压电机散嵌绕组匝间绝缘 第1部分:试验方法.pdf
GB-T 8061-2022 杠杆千分尺.pdf
交流群
-->
1
/
15
评价文档
赞助2元 点击下载(509.3 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。