说明:收录各省市地方标准 提供单次或批量下载
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210021444.8 (22)申请日 2022.01.10 (71)申请人 中国民航信息网络股份有限公司 地址 100085 北京市顺 义区后沙峪镇裕民 大街7号 (72)发明人 王钊 周中雨 刘文建 赵荣霞 张金 (74)专利代理 机构 北京集佳知识产权代理有限 公司 11227 代理人 李伟 (51)Int.Cl. G06F 16/23(2019.01) G06F 16/25(2019.01) G06Q 30/02(2012.01) G06Q 50/30(2012.01) (54)发明名称 数据处理方法及装置、 存 储介质及电子设备 (57)摘要 本发明提供一种数据处理方法及装置、 存储 介质及电子设备, 该方法包括: 从业务服务器集 群中拉取各个数据文件; 对各个数据文件进行解 析处理, 得到与每个数据文件对应的数据对象, 并对各个数据对象执行存入数据库的操作; 读取 数据库中的各个数据对象, 并基于各个接口分析 属性, 对读取到的各个数据对象进行分析处理, 得到每个接口分析属性的流量分析信息。 通过 从 业务服务集群中拉取数据文件, 对 数据文件进行 解析后, 得到对应的数据对象, 并根据各个接口 分析属性对 数据对象进行分析处理, 从而得到每 个接口分析属性的流量分析信息, 由此, 可以有 效分析业务服务集群被调用的情况, 为研发人员 提供优化系统的重要分析 数据。 权利要求书2页 说明书11页 附图5页 CN 114372069 A 2022.04.19 CN 114372069 A 1.一种数据处 理方法, 其特 征在于, 包括: 从业务服务器集群中拉取各个数据文件, 其中, 所述数据文件中包含业务服务器的服 务接口被调用时生成的调用信息; 对各个所述数据文件进行解析处理, 得到与每个所述数据文件对应的数据对象, 并对 各个所述数据对象执 行存入数据库的操作; 读取所述数据库中的各个数据对象, 并基于预设的各个接口分析属性, 对读取到的各 个数据对象进行分析处 理, 得到每 个所述接口分析属性的流 量分析信息 。 2.根据权利要求1所述的方法, 其特征在于, 所述从业务服务器集群中拉取各个数据文 件, 包括: 在解析服 务器中创建文件 存放目录; 使所述解析服务器与 所述业务服务器集群中的每个业务服务器建立连接, 并将成功与 所述解析服务器建立连接的业 务服务器确定为目标业 务服务器; 应用所述 解析服务器从每 个所述目标业 务服务器的文件拉取目录中拉取 数据文件; 将拉取到的各个数据文件保存至所述文件 存放目录中。 3.根据权利要求2所述的方法, 其特征在于, 所述对各个所述数据文件进行解析处理, 得到与每 个所述数据文件 对应的数据对象, 包括: 从所述文件存放目录中读取数据文件, 并将读取到的各个数据文件进行分组处理, 得 到多个文件分组, 其中, 每 个所述文件分组包 含至少一个数据文件; 对于每个所述文件分组, 为所述文件分组分配解析线程, 并使用所述解析线程对所述 文件分组中的每 个数据文件进行解析, 得到所述文件分组中的每 个数据文件的数据对象。 4.根据权利要求3所述的方法, 其特征在于, 所述使用所述解析线程对所述文件分组中 的每个数据文件进行解析, 得到所述文件分组中的每 个数据文件的数据对象, 包括: 对于每个所述数据文件, 使用所述数据文件的解析线程对所述数据文件进行解析, 得 到所述数据文件中的调用信息, 并对所述调用信息中的各项数据进行筛选, 将通过筛选的 各项数据封装成所述数据文件的数据对象。 5.根据权利要求1所述的方法, 其特征在于, 所述对各个所述数据对象执行存入数据库 的操作, 包括: 将各个所述数据对象进行分组, 得到多个数据对象集合, 其中, 所述数据对象集合中数 据对象的数量小于或等于预设数量; 对于每个所述数据对象集合, 将所述数据对象集合存入所述数据库中, 并确定所述数 据对象集 合是否成功存 入所述数据库; 当确定所述数据对象集合存入所述数据库失败时, 将所述数据对象集合中的各个数据 对象逐一存入所述数据库中, 并在数据对 象存入所述数据库失败时, 在预设的解析日志中 记录存入所述数据库失败的数据对象的信息; 当确定所述数据对象集合存入所述数据库成功时, 确定所述数据对象集合中的各个数 据对象均已存 入所述数据库中。 6.一种数据处 理装置, 其特 征在于, 包括: 拉取单元, 用于从业务服务器集群 中拉取各个数据文件, 其中, 所述数据文件中包含业 务服务器的服 务接口被调用时生成的调用信息;权 利 要 求 书 1/2 页 2 CN 114372069 A 2解析处理单元, 用于对各个所述数据文件进行解析处理, 得到与每个所述数据文件对 应的数据对象, 并对各个所述数据对象执 行存入数据库的操作; 读取单元, 用于读取所述数据库中的各个数据对象, 并基于预设的各个接口分析属性, 对读取到的各个数据对象进行分析处理, 得到每个所述接口分析属性对应的流量分析信 息。 7.根据权利要求6所述的装置, 其特 征在于, 所述拉取 单元, 包括: 存放子单 元, 用于在解析服 务器中创建文件 存放目录; 建立连接子单元, 用于使所述解析服务器与所述业务服务器集群中的每个业务服务器 建立连接, 并将成功与所述 解析服务器建立连接的业 务服务器确定为目标业 务服务器; 拉取子单元, 用于应用所述解析服务器从每个所述目标业务服务器的文件拉取目录中 拉取数据文件; 保存子单 元, 用于将拉取到的各个数据文件保存至所述文件 存放目录中。 8.根据权利要求7 所述的装置, 其特 征在于, 所述 解析处理单元, 包括: 第一分组子单元, 用于从所述文件存放目录中读取数据文件, 并将读取到的各个数据 文件进行分组 处理, 得到多个文件分组, 其中, 每 个所述文件分组包 含至少一个数据文件; 分配子单元, 用于对于每个所述文件分组, 为所述文件分组分配解析线程, 并使用所述 解析线程对所述文件分组中的每个数据文件进 行解析, 得到所述文件分组中的每个数据文 件的数据对象。 9.一种存储介质, 其特征在于, 所述存储介质包括存储的指令, 其中, 在所述指令运行 时控制所述存 储介质所在的设备 执行如权利要求1~5任意 一项所述的数据处 理方法。 10.一种电子设备, 其特征在于, 包括存储器, 以及一个或者一个以上的指令, 其中一个 或者一个以上指令存储于存储器中, 且经配置以由一个 或者一个以上 处理器执行如权利要 求1~5任意 一项所述的数据处 理方法。权 利 要 求 书 2/2 页 3 CN 114372069 A 3
专利 数据处理方法及装置、存储介质及电子设备
文档预览
中文文档
19 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共19页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 人生无常 于
2024-03-18 11:20:02
上传分享
举报
下载
原文档
(667.9 KB)
分享
友情链接
GB-T 24405.2-2010 - ISO IEC 20000-2-2005 信息技术 服务管理 第2部分:实践规则.pdf
CNCERT 2020年上半年我国互联网网络安全监测数据分析报告.pdf
GB-T 24915-2020 合同能源管理技术通则.pdf
GB-T 42467.6-2023 中医临床名词术语 第6部分:妇科学.pdf
企业安全运营实践研究报告 freebuf 2021版.pdf
DB3302-T 165-2018 杨梅矮化早果丰产栽培技术规程 宁波市.pdf
DB37-T 4319—2021 水利物联网终端技术规范 山东省.pdf
T-CAS ES000000001—2022 工业品质量分级评价规则 通则.pdf
GB-T 41505-2022 电子信息制造企业绿色供应链管理规范.pdf
T-ISAS 004—2021 沙棘果油.pdf
GB-T 43696-2024 网络安全技术 零信任参考体系架构.pdf
河南省政务数据安全管理暂行办法.pdf
TB-T 2231.2-2018 铁道车辆制动系统 第2部分:货车.pdf
GB-T 30257-2013 节能量测量和验证技术要求 通风机系统.pdf
DB12-T 669-2016 绿色供应链标准化工作指南 天津市.pdf
GB-T 32456-2015 橡胶塑料机械用电磁加热节能系统通用技术条件.pdf
GB-T 22836-2008 纸浆 纤维帚化率的测定.pdf
GB-T 29246-2017 信息安全管理体系 概述与词汇.pdf
T-COS 013—2023 装甲车辆动力及传动系统试验要求.pdf
奇安信 大中型政企机构网络安全风险分析报告.pdf
1
/
3
19
评价文档
赞助2.5元 点击下载(667.9 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。