logo好方法网

一种数据仓库数据监控方法、仓库系统和电子设备


技术摘要:
本申请是关于一种数据仓库数据监控方法、仓库系统和电子设备。该方法包括:定时同步源数据到数据仓库;统计当天同步的源数据的监控指标;通过时序算法计算历史同步数据的参考值;通过所述监控指标和所述历史同步数据的参考值计算数据波动区间;根据所述数据波动区间与  全部
背景技术:
数据仓库是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集。 它是单个数据存储,出于分析性报告和决策支持目的而创建。目前业界数据仓库提供数据 的同步和数据的存储功能的数据仓库,一般分为三个部分:源数据库、数据仓库和调度系 统。通过调度系统定时调用任务实现数据的同步、转换和加载。现有的数据仓库都是将源数 据库的数据通过数据同步工具直接将数据同步到数据仓库,存储在仓库中,之后对数据进 行再加工处理,为各种数据分析和决策提供数据支持。目前的数据仓库的系统并不对同步 的数据进行校验处理,所以数据可靠性得不到保证。
技术实现要素:
为克服相关技术中存在的问题,本申请提供一种数据仓库数据监控方法、仓库系 统和电子设备,能提升数据仓库数据的可靠性,可以快速发现数据仓库数据同步后的数据 问题。 根据本申请实施例的第一方面,提供一种数据仓库数据监控方法,包括定时同步 源数据到数据仓库; 统计当天同步的源数据的监控指标; 通过时序算法计算历史同步数据的参考值; 通过所述监控指标和所述历史同步数据的参考值计算数据波动区间; 根据所述数据波动区间与预设的数据波动区间的比较结果来生成监控报告。 根据本申请实施例的第二方面,提供一种数据仓库系统,包括同步模块、统计模 块、参考值计算模块、波动区间计算模块和监控模块; 同步模块,用于定时同步源数据到数据仓库; 统计模块,用于统计当天同步的源数据的监控指标; 参考值计算模块,用于通过时序算法计算历史同步数据的参考值; 波动区间计算模块,用于通过所述监控指标和所述历史同步数据的参考值计算数 据波动区间; 监控模块,用于根据所述波动区间与预设的数据波动区间的比较结果来生成监控 报告。 根据本申请实施例的第三方面,提供一种电子设备,包括: 处理器;以及 存储器,其上存储有可执行代码,当所述可执行代码被所述处理器执行时,使所述 处理器执行如上所述的方法。 4 CN 111597088 A 说 明 书 2/6 页 本申请的实施例提供的技术方案可以包括以下有益效果:通过时序算法分析历史 同步数据与实际的当天同步的源数据的统计值进行比较,并配置波动区间来实现数据自动 校验,可以提升数据仓库数据的可靠性,可以快速发现数据仓库数据同步后的数据问题。 应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不 能限制本申请。 附图说明 通过结合附图对本申请示例性实施方式进行更详细的描述,本申请的上述以及其 它目的、特征和优势将变得更加明显,其中,在本申请示例性实施方式中,相同的参考标号 通常代表相同部件。 图1是根据本申请一示例性实施例示出的一种数据仓库数据监控方法的流程示意 图; 图2是根据本申请一示例性实施例示出的一种数据仓库系统结构示意图; 图3是根据本申请一示例性实施例示出的一种电子设备的结构示意图。
下载此资料需消耗2积分,
分享到:
收藏