说明:收录各省市地方标准 提供单次或批量下载
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210020547.2 (22)申请日 2022.01.10 (71)申请人 安捷中科 (北京) 数据科技有限公司 地址 100013 北京市东城区北三环东路3 6 号环球贸易中心E座8层801-80 3室 (72)发明人 黄思源 刘革菲  (74)专利代理 机构 北京汉之知识产权代理事务 所(普通合伙) 11479 代理人 高园园 (51)Int.Cl. G06F 16/21(2019.01) G06F 16/23(2019.01) G06F 16/2453(2019.01) G06F 16/2455(2019.01) G06F 16/25(2019.01) (54)发明名称 时序实时数据库数据存储和处理的方法、 系 统及电子设备 (57)摘要 本发明提供一种时序实时数据库数据存储 和处理的方法、 系统及电子设备, 所述方法包括: 将采集的实时数据或时序性数据写入内存数据 库, 形成快照数据引擎; 将所述快照数据引擎中 的满足预设时长的数据转存到历史数据库中, 形 成历史数据引擎; 通过一计算引擎对 所述快照数 据引擎和/或历史数据引擎中的数据进行计算, 并与外部 数据库交互。 本发明可以将针对最新采 集写入的数据形成的快照库(热数据)和针对后 期历史查询读取的历史库, 以及混合二者数据二 次加工计算的计算结果缓存库(热数据)等过程 库, 设计为存储和处理分离, 并各自优化形成对 应的存储和处理数据引擎, 提高处 理性能。 权利要求书2页 说明书8页 附图4页 CN 114328468 A 2022.04.12 CN 114328468 A 1.一种时序实时数据库数据存 储和处理的方法, 其特 征在于: 包括: 将采集的实时数据或时序性数据写入内存数据库, 形成快照数据引擎; 将所述快照数据引擎中的满足预设时长的数据转存到历史数据库中, 形成历史数据引 擎; 通过一计算引擎对所述快照数据引擎和/或历史数据引擎中的数据进行计算, 并与外 部数据库交 互。 2.根据权利要求1所述的时序实时数据库 数据存储和处理 的方法, 其特征在于: 所述将 采集的实时数据或时序性数据写入内存数据库, 形成快照数据引擎包括: 接口层接收采集数据写入请求; 将所述采集数据写入请求发送至实时任务调度引擎, 所述实时任务调度引擎通过并行 处理任务调度算法对所述采集数据写入请求进行调度; 数据处理引擎基于所述实时任务调度引擎的调度对采集数据进行数据透明压缩或解 压缩; 将所述采集数据进行 无损压缩后写入内存数据库, 形成快照数据引擎。 3.根据权利要求1所述的时序实时数据库 数据存储和处理 的方法, 其特征在于: 在接收 到数据查询请求时, 首先从所述快照数据引擎中检索结果数据, 若所述快照数据引擎中未 检索到结果数据, 则继续从所述历史数据引擎中检索结果数据。 4.根据权利要求3所述的时序实时数据库 数据存储和处理 的方法, 其特征在于: 将检索 到的所述结果数据缓存到所述快照数据引擎的缓存区, 以供调用。 5.根据权利要求1所述的时序实时数据库 数据存储和处理 的方法, 其特征在于: 所述将 所述快照数据引擎中的满足预设时长的数据转存到历史数据库中包括: 将所述满足预设时长的数据分类型批量规格化整合并无损压缩后按列式存储方式写 入磁盘。 6.根据权利要求5所述的时序实时数据库 数据存储和处理 的方法, 其特征在于: 在将所 述满足预设时长的数据分类型批量规格化整合并无损压缩后按列式存储方式写入磁盘之 前, 还包括: 将所述满足预设时长的数据写入预写式日志。 7.根据权利要求1所述的时序实时数据库 数据存储和处理 的方法, 其特征在于: 所述计 算引擎中内置多个预设数学计算函数、 场景计算模型以及用于与外部数据库交互的数据交 换模型。 8.一种时序实时数据库数据存 储和处理的系统, 其特 征在于: 包括: 快照数据引擎, 通过将采集的实时数据或时序性数据写入内存数据库形成; 历史数据引擎, 通过将所述快照数据引擎中的满足预设时长的数据转存到历史数据库 中形成; 计算引擎, 对所述快照数据引擎和/或历史数据引擎中的数据进行计算, 并与外部数据 库交互。 9.根据权利要求8所述的时序实时数据库 数据存储和处理 的方法, 其特征在于: 所述快 照数据引擎中包括: 数据缓存区, 写入 采集的实时数据或时序性数据; 查询分析器, 在接收到数据查询请求时, 首先从所述快照数据引擎中检索结果数据, 若权 利 要 求 书 1/2 页 2 CN 114328468 A 2所述快照数据引擎中未检索到结果数据, 则继续从所述历史数据引擎中检索结果数据; 查询结果缓存区, 缓存检索到的所述结果数据。 10.一种电子设备, 其特征在于: 包括存储器, 用于存储计算机程序; 处理器, 用于运行 所述计算机程序以实现如权利要求1至7任一项所述的时序实时数据库数据存储和处理的 方法。权 利 要 求 书 2/2 页 3 CN 114328468 A 3

.PDF文档 专利 时序实时数据库数据存储和处理的方法、系统及电子设备

文档预览
中文文档 15 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 时序实时数据库数据存储和处理的方法、系统及电子设备 第 1 页 专利 时序实时数据库数据存储和处理的方法、系统及电子设备 第 2 页 专利 时序实时数据库数据存储和处理的方法、系统及电子设备 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 11:20:17上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。