公共安全标准网
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210352750.X (22)申请日 2022.03.31 (71)申请人 北京泰迪熊移动科技有限公司 地址 100085 北京市海淀区信息路甲28号7 层D座07A3 6 (72)发明人 信恒涛  (74)专利代理 机构 北京乐知新创知识产权代理 事务所(普通 合伙) 11734 专利代理师 刘欢欢 (51)Int.Cl. G06F 16/22(2019.01) G06F 16/23(2019.01) G06F 16/21(2019.01) (54)发明名称 一种数据处 理方法、 装置及电子设备 (57)摘要 本申请提供了一种数据处理方法、 装置及电 子设备; 所述方法包括: 响应于第一数据库中第 一数据表的参数满足条件, 更新第一数据表的分 片策略; 基于更新后的分片策略, 将所述第一数 据库的数据迁移到第二数据库。 本申请提供的数 据库中数据表的分片方法, 可以节约人力成本, 提高分片效率, 在保证数据库性能的同时保证数 据迁移的准确性。 权利要求书2页 说明书10页 附图3页 CN 114676141 A 2022.06.28 CN 114676141 A 1.一种数据处 理方法, 其特 征在于, 所述方法包括: 响应于第一数据库中第一数据表的参数满足条件, 更新第一数据表的分片 策略; 基于更新后的分片策略, 将所述第一数据库的数据迁移到第二数据库。 2.根据权利要求1所述的方法, 其特征在于, 所述响应于第 一数据库中第 一数据表的参 数满足条件, 包括: 所述第一数据库中的至少一个数据表达 到数据量阈值; 和/或, 所述第一数据库达 到性能阈值。 3.根据权利要求1所述的方法, 其特征在于, 所述基于更新后的分片策略, 将所述第一 数据库的数据迁移到第二数据库, 包括: 基于所述第一数据表的当前分片策略、 当前分片数量、 所述第一数据表分片在预设周 期内的增长 速度, 确定所述更新后的分片策略。 4.根据权利要求3所述的方法, 其特 征在于, 所述确定所述更新后的分片策略, 包括: 确定所述预设周期内的增长速度与 预设的时间间隔的积与数据量阈值之商得到的值, 与当前分片数量的和为更新后的所述第一数据表的分片数量。 5.根据权利要求1所述的方法, 其特征在于, 所述基于更新后的分片策略, 将所述第一 数据库的数据迁移到第二数据库, 包括: 将更新分片策略之前的第一数据库的原始数据与更新分片策略之后的新增数据全部 写入第二数据库。 6.根据权利要求5所述的方法, 其特征在于, 所述将更新分片策略之前的第 一数据库的 原始数据与更新分片策略之后的新增数据全部写入第二数据库, 包括: 根据更新后的分片策略, 在第二数据库中, 建立与所述第一数据表对应的第二数据表 分片; 启动针对数据表 的双写操作模式, 在所述双写操作模式下, 所述新增数据同时被写入 所述第一数据表和所述第二数据表分片; 将更新分片策略之前的所述第一数据库的原始数据按照更新后的分片策略同步到所 述第二数据库。 7.根据权利要求1所述的方法, 其特征在于, 所述基于更新后的分片策略, 将所述第一 数据库的数据迁移到第二数据库之后, 所述方法包括: 对迁移完成后的所述第二数据库基于数据量、 分片键与唯一键进行迁移结果检验, 并 生成迁移报告。 8.根据权利要求7所述的方法, 其特征在于, 对迁移完成后的所述第 二数据库基于数据 量、 分片键与唯一键进行迁移结果检验, 并生成迁移报告, 包括: 分别比对所述第 一数据库的数据量与所述第 二数据库的数据量之间的差异、 所述第 一 数据库的数据 表的分片 键与所述第二数据库的数据表的分片键之 间的差异、 所述第一数据 库的数据的唯一键与所述第二数据库的唯一键之间的差异, 得到比对结果; 将所述比对结果输出至 迁移报告。 9.一种数据处 理装置, 其特 征在于, 所述装置包括: 分片策略模块, 用于响应于第一数据库中第一数据表的参数满足条件, 更新第一数据权 利 要 求 书 1/2 页 2 CN 114676141 A 2表的分片策略; 数据迁移模块, 用于基于更新后的分片策略, 将所述第一数据库的数据迁移到第二数 据库。 10.一种电子设备, 其特 征在于, 所述电子设备包括: 至少一个处 理器; 以及与所述至少一个处 理器通信连接的存 储器; 其中, 所述存储器存储有可被所述至少一个处理器执行的指令, 所述指令被所述至少 一个处理器执行, 以使所述至少一个处 理器能够执 行权利要求1 ‑8中任一项所述的方法。 11.一种计算机可读存储介质, 其特征在于, 所述存储介质包括一组计算机可执行指 令, 当所述指令被执 行时用于执 行权利要求1 ‑8任一项所述的数据处 理方法。权 利 要 求 书 2/2 页 3 CN 114676141 A 3

PDF文档 专利 一种数据处理方法、装置及电子设备

文档预览
中文文档 16 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共16页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种数据处理方法、装置及电子设备 第 1 页 专利 一种数据处理方法、装置及电子设备 第 2 页 专利 一种数据处理方法、装置及电子设备 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-24 00:46:20上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。