公共安全标准网
文库搜索
切换导航
文件分类
频道
联系我们
问题反馈
文件分类
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210504864.1 (22)申请日 2022.05.10 (71)申请人 兴业银行股份有限公司 地址 350000 福建省福州市湖东路154 号 申请人 兴业数字金融服 务(上海)股份有限 公司 (72)发明人 俞鹏 周刚慧 李红玥 周启华 何星 李兴华 姚佳佳 邢展伟 (74)专利代理 机构 上海段和段律师事务所 31334 专利代理师 李源 (51)Int.Cl. G06F 16/2455(2019.01) G06F 16/2458(2019.01) G06Q 10/10(2012.01)G06F 16/22(2019.01) G06F 16/21(2019.01) (54)发明名称 基于标准化元数据体系的数据管理方法和 系统 (57)摘要 本发明提供了一种基于标准化元数据体系 的数据管理方法和系统, 包括: 步骤1: 对多源系 统及当前数据平台的数据进行调研整理, 得到元 数据信息; 步骤2: 将元数据信息导入预设标准化 元数据管理体系中, 得到统计信息任务; 步骤3: 根据统计信息, 获取表与字段统计信息; 步骤4: 将表与字段统计信息通过业务导入审批流程和 测试流程; 步骤5: 对元数据信息进行开发脚本自 动补全表、 字段注释、 表别名, 以及规范数据开发 脚本格式; 步骤6: 对表与字段统计信息的查看功 能进行数据开发; 步骤7: 校验数据开发脚本; 步 骤8: 根据数据下发版本维护并管理元数据管理 体系。 本发 明提供了数据加工辅助开发提示与校 验功能, 保证 了文档的准确性和时效性。 权利要求书2页 说明书6页 附图1页 CN 114969115 A 2022.08.30 CN 114969115 A 1.一种基于标准 化元数据体系的数据管理方法, 其特 征在于, 包括: 步骤1: 对多源系统及当前 数据平台的数据进行调研整理, 得到元 数据信息; 步骤2: 将元 数据信息导入预设标准 化元数据管理体系中, 得到统计信息任务; 步骤3: 根据统计信息, 通过任务调度平台按预设配置频率拉起批量, 得到表与字段统 计信息; 步骤4: 将表与字段统计信息通过业 务导入审批流 程, 在审批 完成后进入测试流 程; 步骤5: 读入测试后的元数据信息到WEB端开发工具内存中缓存, 进行开发脚本自动补 全表、 字段注释、 表别名, 以及规范 数据开发脚本格式; 步骤6: 对表与字段统计信息的查看功能进行数据开发, 并分析数据开发时的生产 数据 场景; 步骤7: 校验数据开发脚本, 通过扫描脚本中关键字, 结合元数据统计信息根据开发经 验配置异常和关注点的程序提 示; 步骤8: 根据数据下发版本维护并管理元 数据管理体系。 2.根据权利要求1所述的基于标准化元数据体系的数据管理方法, 其特征在于, 所述步 骤2包括如下步骤: 步骤2.1: 通过预设标准化元数据管理体系, 基于元数据信息形成元数据基本信息表、 元数据版本信息表、 表统计信息表和字段统计信息表; 步骤2.2: 进行元数据表映射, 得到表别名、 表统计信息列, 根据元数据字段自定义统计 规则, 得到统计结果和字段统计信息列。 3.根据权利要求1所述的基于标准化元数据体系的数据管理方法, 其特征在于, 所述步 骤3包括如下步骤: 步骤3.1: 读取 元数据管理体系自动对应的统计信息sql脚本; 步骤3.2: 配置并确定定时任务由调度平台根据批量窗口定时拉起生成的定时任务脚 本; 步骤3.3: 将统计执 行得到的统计信息生成写入元 数据管理体系中。 4.根据权利要求1所述的基于标准化元数据体系的数据管理方法, 其特征在于, 所述步 骤4包括如下步骤: 步骤4.1: 通过 前台展示元 数据统计信息; 步骤4.2: 导出生产环境统计信息, 并发起 业务审批; 步骤4.3: 导出生产统计信息, 并将统计信息导入元 数据管理体系中。 5.根据权利要求1所述的基于标准化元数据体系的数据管理方法, 其特征在于, 所述步 骤7包括如下步骤: 步骤7.1: 对异常数据 开发场景进行程序校验, 输入为DDL/DML关键字和统计信息, 输出 为经验性 提示信息; 步骤7.2: 配置随实际开发过程中异常场景不断抽象并扩展数据 校验功能, 包括单表操 作异常到多表关联异常经验性扩展。 6.一种基于标准 化元数据体系的数据管理系统, 其特 征在于, 包括: 模块M1: 对多源系统及当前 数据平台的数据进行调研整理, 得到元 数据信息; 模块M2: 将元 数据信息导入预设标准 化元数据管理体系中, 得到统计信息任务;权 利 要 求 书 1/2 页 2 CN 114969115 A 2模块M3: 根据统计信息, 通过任务调度平台按预设配置频率拉起批量, 得到表与字段统 计信息; 模块M4: 将表与字段统计信息通过业 务导入审批流 程, 在审批 完成后进入测试流 程; 模块M5: 读入测试后的元数据信息到WEB端开发工具内存中缓存, 进行开发脚本自动补 全表、 字段注释、 表别名, 以及规范 数据开发脚本格式; 模块M6: 对表与字段统计信息的查看功能进行数据开发, 并分析数据开发时的生产数 据场景; 模块M7: 校验数据开发脚本, 通过扫描脚本中关键字, 结合元数据统计信息根据开发经 验配置异常和关注点的程序提 示; 模块M8: 根据数据下发版本维护并管理元 数据管理体系。 7.根据权利要求6所述的基于标准化元数据体系的数据管理系统, 其特征在于, 所述模 块M2包括: 模块M2.1: 通过预设标准化元数据管理体系, 基于元数据信息形成元数据基本信息表、 元数据版本信息表、 表统计信息表和字段统计信息表; 模块M2.2: 进行元数据表映射, 得到表别名、 表统计信息列, 根据元数据字段自定义统 计规则, 得到统计结果和字段统计信息列。 8.根据权利要求6所述的基于标准化元数据体系的数据管理系统, 其特征在于, 所述模 块M3包括: 模块M3.1: 读取 元数据管理体系自动对应的统计信息sql脚本; 模块M3.2: 配置并确定定时任务由调度平台根据批量窗口定时拉起生成的定时任务脚 本; 模块M3.3: 将统计执 行得到的统计信息生成写入元 数据管理体系中。 9.根据权利要求6所述的基于标准化元数据体系的数据管理系统, 其特征在于, 所述模 块M4包括: 模块M4.1: 通过 前台展示元 数据统计信息; 模块M4.2: 导出生产环境统计信息, 并发起 业务审批; 模块M4.3: 导出生产统计信息, 并将统计信息导入元 数据管理体系中。 10.根据权利要求6所述的基于标准化元数据体系的数据管理系统, 其特征在于, 所述 模块M7包括: 模块M7.1: 对异常数据开发场景进行程序校验, 输入为DDL/DML关键字和统计信息, 输 出为经验性 提示信息; 模块M7.2: 配置随实际开发过程中异常场景不断抽象并扩展数据校验功能, 包括单表 操作异常到多表关联异常经验性扩展。权 利 要 求 书 2/2 页 3 CN 114969115 A 3
专利 基于标准化元数据体系的数据管理方法和系统
文档预览
中文文档
10 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共10页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-18 00:14:01
上传分享
举报
下载
原文档
(438.3 KB)
分享
友情链接
GB-T 18788-2008 平板式扫描仪通用规范.pdf
DB43-T 2106-2021 麦穗鱼池塘健康养殖技术规程 湖南省.pdf
GB-T 43806-2024 资产管理系统通用技术要求.pdf
GB-T 41570-2022 流程生产能效计量技术规范.pdf
DB4413-T 35-2023 金线莲栽培技术规范 惠州市.pdf
GB-T 24487-2022 氧化铝.pdf
Q-GDW 12108-2021 电力物联网全场景安全技术要求.pdf
GY-T 337-2020 广播电视网络安全等级保护定级指南.pdf
GB-T 40660-2021 信息安全技术 生物特征识别信息保护基本要求.pdf
DB1303-T 314-2021 计量标准器具 现场使用要求 秦皇岛市.pdf
DB53-T1033-2021 公路隧道监控量测技术规程 云南省.pdf
DB3713-T 248—2021 蓝莓水肥一体化栽培技术规程 临沂市.pdf
GB-T 30057-2013 国际货运代理合同规范.pdf
GB-T 21832.2-2018 奥氏体-铁素体型双相不锈钢焊接钢管 第2部分:流体输送用管.pdf
GB-T 2362-1990 小模数渐开线圆柱齿轮基本齿廓.pdf
T-BJQC 201905-2023 智能网联汽车信息安全测试方法和判定准则.pdf
GB-T 28181-2022 公共安全视频监控联网系统信息传输、交换、控制技术要求.pdf
奇安信 红蓝攻防构建实战化网络安全防御体系.pdf
GB-T 6728-2017 结构用冷弯空心型钢.pdf
GB-T 37933-2019 信息安全技术 工业控制系统专用防火墙技术要求.pdf
交流群
-->
1
/
3
10
评价文档
赞助2元 点击下载(438.3 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。