公共安全标准网
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210724590.7 (22)申请日 2022.06.23 (71)申请人 北京元年科技股份有限公司 地址 100191 北京市海淀区知春路68号领 航科技大厦三层 (72)发明人 王雪原 李彤  (74)专利代理 机构 北京汇知杰知识产权代理有 限公司 1 1587 专利代理师 李洁 魏文浩 (51)Int.Cl. G06F 16/2455(2019.01) G06F 16/26(2019.01) G06F 16/28(2019.01) (54)发明名称 多引擎可视化数据流实现方法、 装置、 设备 及存储介质 (57)摘要 本申请提供了一种多引擎可视化数据流实 现方法、 装置、 设备及计算机 可读存储介质。 该多 引擎可视化数据流实现方法, 包括: 获取配置文 件和目标数据; 解析配置文件, 得到对应的配置 属性信息; 其中, 配置属性信息至少包括至少两 种开源计算引擎的标识; 根据至少两种开源计算 引擎的标识, 接入对应的至少两种开源计算引 擎; 利用至少两种开源计算引擎对目标数据进行 数据处理。 根据本申请实施例, 能够提高数据处 理的灵活性。 权利要求书2页 说明书11页 附图2页 CN 115114333 A 2022.09.27 CN 115114333 A 1.一种多引擎可视化数据流实现方法, 其特 征在于, 包括: 获取配置文件和目标 数据; 解析所述配置文件, 得到对应的配置属性信 息; 其中, 所述配置属性信息至少包括至少 两种开源计算引擎的标识; 根据所述至少两种开源计算引擎的标识, 接入 对应的至少两种开源计算引擎; 利用所述至少两种开源计算引擎对所述目标 数据进行 数据处理。 2.根据权利要求1所述的多引擎可视化数据流实现方法, 其特征在于, 所述配置属性信 息还包括至少 两种数据结构的标识; 在所述解析所述配置文件, 得到对应的配置属 性信息 之后, 所述方法还 包括: 基于所述至少两种数据结构的标识, 确定对应的至少两种数据结构; 利用所述至少两种数据结构对所述目标 数据进行 数据分析。 3.根据权利要求2所述的多引擎可视化数据流实现方法, 其特征在于, 所述配置属性信 息还包括数据流标识、 数据流名称和数据流 步骤; 其中, 每个所述数据流步骤包括步骤的输入标识、 步骤的输出标识、 步骤所用开源计算 引擎的标识、 步骤所用数据结构的标识; 其中, 所述步骤所用开源计算引擎的标识为所述至少两种开源计算引擎的标识中的一 种; 所述步骤所用数据结构的标识为所述至少两种数据结构的标识中的一种。 4.根据权利要求3所述的多引擎可视化数据流实现方法, 其特征在于, 所述利用所述至 少两种开源计算引擎对所述目标数据进行数据处理和所述利用所述至少两种数据结构对 所述目标 数据进行 数据分析, 包括: 在第一数据流步骤, 利用第一开源计算引擎对第一目标数据进行数据处理, 利用第一 数据结构对数据处 理后的第一目标 数据进行 数据分析; 在第二数据流步骤, 利用第二开源计算引擎对第二目标数据进行数据处理, 利用第二 数据结构对数据处 理后的第二目标 数据进行 数据分析; 其中, 所述第一开源计算引擎和所述第二开源计算引擎为不同种开源计算引擎; 所述 第一数据结构和所述第二数据结构为 不同种数据结构。 5.根据权利要求4所述的多引擎可视化数据流实现方法, 其特征在于, 所述第 一开源计 算引擎和所述第二 开源计算引擎 为Spark引擎、 Fl ink引擎中不同种开源计算引擎。 6.根据权利要求4所述的多引擎可视化数据流实现方法, 其特征在于, 所述第 一数据结 构和所述第二数据结构为DataFrame 数据结构、 DataSet数据结构中不同种数据结构。 7.根据权利要求1至6任一项所述的多引擎可视化数据流实现方法, 其特征在于, 获取 所述配置文件, 包括: 在前端设备生成所述配置文件后, 通过后端设备传递所述配置文件以获取所述配置文 件。 8.一种多引擎可视化数据流实现装置, 其特 征在于, 包括: 获取模块, 用于获取配置文件和目标 数据; 解析模块, 用于解析所述配置文件, 得到对应的配置属性信息; 其中, 所述配置属性信 息至少包括至少两种开源计算引擎的标识; 接入模块, 用于根据所述至少两种开源计算引擎的标识, 接入对应的至少两种开源计权 利 要 求 书 1/2 页 2 CN 115114333 A 2算引擎; 数据处理模块, 用于利用所述至少两种开源计算引擎对所述目标 数据进行 数据处理。 9.一种电子设备, 其特征在于, 所述电子设备包括: 处理器以及存储有计算机程序指令 的存储器; 所述处理器执行所述计算机程序指令时实现如权利要求1 ‑7任意一项所述的多引擎可 视化数据流实现方法。 10.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质上存储有计算机 程序指令, 所述计算机程序指令被处理器执行时实现如权利要求1 ‑7任意一项所述的多引 擎可视化数据流实现方法。权 利 要 求 书 2/2 页 3 CN 115114333 A 3

.PDF文档 专利 多引擎可视化数据流实现方法、装置、设备及存储介质

文档预览
中文文档 16 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共16页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 多引擎可视化数据流实现方法、装置、设备及存储介质 第 1 页 专利 多引擎可视化数据流实现方法、装置、设备及存储介质 第 2 页 专利 多引擎可视化数据流实现方法、装置、设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 00:14:20上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。