公共安全标准网
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210503335.X (22)申请日 2022.05.10 (71)申请人 国泰君安证券股份有限公司 地址 200041 上海市 静安区南京西路768号 国泰君安大厦20层 (72)发明人 俞枫 曾宏祥 毛梦非 王厦 冯一欣 吴康 叶璞钰 朱晓云 (74)专利代理 机构 上海智信专利代理有限公司 31002 专利代理师 王洁 郑暄 (51)Int.Cl. G06F 16/215(2019.01) G06F 16/23(2019.01) G06F 16/2455(2019.01) (54)发明名称 基于动态优先级实现高速数据补维处理的 方法、 装置、 处 理器及其计算机可读存 储介质 (57)摘要 本发明涉及一种基于动态优先级实现高速 数据补维处理的方法, 包括以下步骤: 搭建动态 补维系统; 根据动态补维系统进行补维, 补维操 作模块获取实时处理数据流内的数据, 根据获取 的数据查找补维数据缓存, 若补维数据缓存命中 且没有被污染, 则补维操作模块根据补维相关数 据完成补维操作并将结果放入实时处理数据流; 若缓存没有命中, 则将数据放入待补维队列, 设 置待补维处理模块监控所述的待补维队列; 若缓 存命中且污染标识模块指示数据被污染, 则查找 补维策略, 根据补维策略进行补维处理。 采用了 本发明的基于动态优先级实现高速数据补维处 理的方法、 装置、 处理器及其计算机可读存储介 质, 通过单独的待补维队列实时刷新缓存, 提高 补维效率, 保证补维准确度。 权利要求书2页 说明书6页 附图1页 CN 114840512 A 2022.08.02 CN 114840512 A 1.一种基于动态优先级实现高速数据补维处理的方法, 其特征在于, 所述的方法包括 以下步骤: (1)搭建动态补维系 统, 所述的动态补维系统包括原始数据源、 补维数据缓存、 补维操 作模块和实时处理数据流, 所述的补维数据缓存包括补维相关缓存数据、 污染标识模块和 污染时间; (2)根据动态补维系统进行补维, 补维操作模块获取实时处理数据流内的数据, 根据获 取的数据查找补维数据缓存, 若补维数据缓存命中且没有被污染, 则继续步骤(3); 若缓存 没有命中, 则继续 步骤(4); 若缓存 命中且污染标识模块指示数据被污染, 则继续 步骤(5); (3)补维操作模块 根据补维相关数据完成补维操作并将结果 放入实时处 理数据流; (4)将数据放入待补维队列, 设置待补维处理模块监控所述的待补维队列, 若待补维队 列内有数据, 则待补维处 理模块对数据进行处 理; (5)查找补维策略, 根据补维策略进行补维处 理。 2.根据权利要求1所述的基于动态优先级实现高速数据补维处理 的方法, 其特征在于, 所述的步骤(4)的待补维处 理模块对数据进行处 理的步骤具体包括以下处 理过程: 根据数据查询原始数据源内的相关数据, 完成补维并将结果放入所述实时处理数据 流, 若所述原始数据源内没有相关数据, 则将该数据加入所述补维数据缓存中补维相关缓 存数据内。 3.根据权利要求1所述的基于动态优先级实现高速数据补维处理 的方法, 其特征在于, 所述的步骤(5)中的补维策略包括速度优先和准确度优先, 如果补维策略为速度优 先, 则使 用被污染的数据进行补维; 如果补维策略为 准确度优先, 则继续 步骤(4)。 4.根据权利要求3所述的基于动态优先级实现高速数据补维处理 的方法, 其特征在于, 所述的步骤(5)中的补维策略还包括判断时间t内的数据速度优先的策略, 若污染时间在判 断时间t内, 则使用被污染的数据进行补维, 否则继续 步骤(4)。 5.根据权利要求1所述的基于动态优先级实现高速数据补维处理 的方法, 其特征在于, 所述的步骤(1)的污染标识模块内包含污染标识信息, 根据补维相关缓存数据与原始数据 源是否发生变化 来进行判断, 所述的污染标识信息包括已经污染和没有污染。 6.根据权利要求5所述的基于动态优先级实现高速数据补维处理 的方法, 其特征在于, 所述的动态补维系统还 包括监控模块, 用于监控原 始数据源的变更。 7.根据权利要求6所述的基于动态优先级实现高速数据补维处理 的方法, 其特征在于, 在原始数据源发生变化时, 监控模块将补维数据缓存中对应补维相关缓存 数据的污染标识 模块进行刷新, 如果污染标识模块内的污染标识信息为已经污染, 则不作操作; 如果污染标 识信息为没有污染, 则改变污染标识信息为已经污染, 并记录改变时间形成污染时间。 8.一种用于实现基于动态优先级的高速数据补维处理的装置, 其特征在于, 所述的装 置包括: 处理器, 被配置成执 行计算机可 执行指令; 存储器, 存储一个或多个计算机可执行指令, 所述的计算机可执行指令被所述的处理 器执行时, 实现权利要求 1至7中任一项 所述的基于动态优先级实现高速数据补维处理的方 法的各个步骤。 9.一种用于实现基于动态优先级的高速数据补维处理的处理器, 其特征在于, 所述的权 利 要 求 书 1/2 页 2 CN 114840512 A 2处理器被配置成执行计算机可执行指令, 所述的计算机可执行指令被所述的处理器执行 时, 实现权利要求 1至7中任一项 所述的基于动态优先级实现高速数据补维处理的方法的各 个步骤。 10.一种计算机可读存储介质, 其特征在于, 其上存储有计算机程序, 所述的计算机程 序可被处理器执行以实现权利要求1至7中任一项所述的基于动态优先级实现高速数据补 维处理的方法的各个步骤。权 利 要 求 书 2/2 页 3 CN 114840512 A 3
专利 基于动态优先级实现高速数据补维处理的方法、装置、处理器及其计算机可读存储介质
文档预览
中文文档
10 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共10页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 SC 于
2024-02-24 00:46:26
上传分享
举报
下载
原文档
(336.1 KB)
分享
友情链接
DB35-T 994-2017 燃气工业锅炉节能监测方法 福建省.pdf
GB-T 35580-2017 建设项目水资源论证导则.pdf
GB-T 27648-2011 重要湿地监测指标体系.pdf
信通院 大数据平台安全研究报告.pdf
T-CACM 1292—2019 中医内科临床诊疗指南 面瘫病.pdf
GB-T 5169.24-2018 电工电子产品着火危险试验 第24部分:着火危险评定导则 绝缘液体.pdf
DB52-T 1179-2017 磷矿开采磷石膏充填采矿技术规范 贵州省.pdf
专利 一种变压器散热器的散热片加工固定装置.PDF
T-NIFA 28—2023 网上银行服务 应用安全规范.pdf
T-CITS 0004—2023 高性能医用冷藏箱技术要求及检测方法.pdf
GB-T 26775-2011 车载音视频系统通用技术条件.pdf
GB-T 18884.1-2015 家用厨房设备 第1部份:术语.pdf
GB-T 41620-2022 科学技术研究项目评价实施指南 应用研究项目.pdf
GB-T 711-2017 优质碳素结构钢热轧钢板和钢带.pdf
T-ASCQ 001—2022 波束形成定向扩声系统技术规范.pdf
DL-T 294.3-2019 发电机灭磁及转子过电压保护装置技术条件 第3部分 转子过电压保护.pdf
RB-T 065-2021 认证认可行业标准体系构建指南.pdf
GB-Z 19717-2005 基于多用途互联网邮件扩展 MIME的安全报文交换.pdf
GB-T 36092-2018 信息技术 备份存储 备份技术应用要求.pdf
GB-T 22024-2008 气雾剂级正丁烷 A-17.pdf
1
/
10
评价文档
赞助2元 点击下载(336.1 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。