一种数据量监控方法、系统、设备及存储介质与流程

未命名 08-23 阅读:126 评论:0


1.本技术涉及计算机技术领域,特别是涉及一种数据量监控方法、系统、设备及存储介质。


背景技术:

2.随着信息技术的发展和金融市场业务量的增长,公司运营生产业务系统受益于大数据技术的同时,也越发依赖于大数据系统的精确性和稳定性。
3.在目前的数据治理过程中,如需监控数据库中表的数据量时,一般只会将今天的数据量和设置好的上限下限系数进行比较,如果数据量不在系数范围内,则进行报警。但在这种方法中,固定的上下限系数也让数据量监控过程存在监控告警误报、漏报等问题,缺乏监控精确性。
4.因此,如何实现精确监控数据量,是本领域技术人员亟待解决的技术问题。


技术实现要素:

5.基于上述问题,本技术提供了一种数据量监控方法、系统、设备及存储介质,用以提高数据监控的准确性。
6.为解决上述问题,本技术实施例提供的技术方案如下:本技术第一方面提供了一种数据量监控方法,包括:获取目标监控规则,所述目标监控规则包括用于计算统计日期集合和阈值区间的参数;基于所述目标监控规则和目标日期确定统计日期集合;基于所述统计日期集合和所述目标监控规则确定阈值区间;比对目标日期的数据量与所述阈值区间,响应于所述目标日期的数据量与所述阈值区间不匹配,生成告警指令。
7.可选的,所述目标监控规则包括阈值计算统计长度参数,所述基于所述目标监控规则和目标日期确定统计日期集合,包括:基于阈值计算统计长度参数和目标日期确定统计开始日期和统计截止日期,根据所述统计开始日期和所述统计截止日期确定统计日期集合。
8.可选的,所述目标监控规则包括阈值计算统计长度参数和计算统计辅助参数,所述基于所述目标监控规则和目标日期确定统计日期集合,包括:基于阈值计算统计长度参数、目标日期和计算统计辅助参数,确定统计开始日期和统计截止日期,所述计算统计辅助参数包括阈值计算统计偏移参数,和/或,阈值计算统计间隔参数;根据所述统计开始日期和所述统计截止日期确定统计日期集合。
9.可选的,所述目标监控规则包括统计规则和统计参数,所述基于所述统计日期集合和所述目标监控规则确定阈值区间,包括:
获取所述统计日期集合对应的数据量集合,基于统计规则和统计参数筛选所述数据量集合,得到阈值统计基准值;基于阈值统计基准值和阈值计算系数计算得到阈值区间。
10.可选的,所述生成告警指令之后,还包括:响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;响应于所述告警指令的消息类型为短信类型,将所述告警指令发送给对应的告警联系人,将所述告警指令调整为已完成状态。
11.可选的,所述生成告警指令之后,还包括:响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;响应于所述告警指令的消息类型为弹窗类型,结合告警联系人信息将所述告警指令推送至弹窗消息数据表,将告警消息表中所述告警指令调整为已完成状态;响应于弹窗消息数据表中的所述告警指令已推送给所述告警联系人信息对应的客户端,将所述弹窗消息数据表中的所述告警指令调整为已完成状态。
12.本技术第二方面提供了一种数据量监控系统,包括:目标监控规则获取单元,用于获取目标监控规则,所述目标监控规则包括用于计算统计日期集合和阈值区间的参数;统计日期集合确定单元,用于基于所述目标监控规则和目标日期确定统计日期集合;阈值区间确定单元,用于基于所述统计日期集合和所述目标监控规则确定阈值区间;告警指令生成单元,用于比对目标日期的数据量与所述阈值区间,响应于所述目标日期的数据量与所述阈值区间不匹配,生成告警指令。
13.可选的,所述系统还包括:第一消息类型判断单元,用于响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;第一推送单元,用于响应于所述告警指令的消息类型为弹窗类型,结合告警联系人信息将所述告警指令推送至弹窗消息数据表,将告警消息表中所述告警指令调整为已完成状态;第二推送单元,用于响应于弹窗消息数据表中的所述告警指令已推送给所述告警联系人信息对应的客户端,将所述弹窗消息数据表中的所述告警指令调整为已完成状态。
14.可选的,所述系统还包括:第二消息类型判断单元,用于响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;第三推送单元,用于响应于所述告警指令的消息类型为短信类型,将所述告警指令发送给对应的告警联系人,将所述告警指令调整为已完成状态。
15.本技术第三方面提供了一种电子设备,包括:存储器,处理器,及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现前述第一方面中任一项所述的数据量监控方法。
16.本技术第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质中存
储有指令,当所述指令在终端设备上运行时,使得所述终端设备执行如前述第一方面中任意一项所述的数据量监控方法。
17.相较于现有技术,本技术具有以下有益效果:通过获取目标监控规则,所述目标监控规则包括用于计算统计日期集合和阈值区间的参数;基于所述目标监控规则和目标日期确定统计日期集合;基于所述统计日期集合和所述目标监控规则确定阈值区间;比对目标日期的数据量与所述阈值区间,响应于所述目标日期的数据量与所述阈值区间不匹配,生成告警指令,从而根据不同动态的监控参数条件来监控表中数据量。根据预设的目标监控规则中包含的参数计算当前所需的阈值区间,与需要判断的目标日期的数据量进行比对,而不是如现有技术中仅根据预先设置的上下限数值进行监控,本技术提供的方案能更灵活更精准的监控表数据的变化,以适应不同业务场景监控的需求,从而提高监控的准确性。
附图说明
18.为更清楚地说明本实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
19.图1为本技术实施例所提供的一种数据量监控方法流程图;图2为本技术实施例所提供的一种数据量监控系统结构图。
具体实施方式
20.为了使本技术领域的人员更好地理解本技术方案,下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本技术一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本技术保护的范围。
21.为便于理解本技术实施例提供的技术方案,下面将先对本技术实施例涉及的背景技术进行说明。
22.正如前文所述,随着信息技术的发展和金融市场业务量的增长,公司运营生产业务系统受益于大数据技术的同时,也越发依赖于大数据系统的稳定性。在目前的数据治理过程中,已经积累了一套基于静态阈值的脚本巡检数据监控方法,即当前监控数据库中表的数据量时,一般只会将今天的数据量和设置好的上限下限系数进行比较,如果数据量不在系数范围内,则进行报警,但这种方法中暴露出的监控告警误报、漏报问题也给数据监控带来了很大挑战。为进一步提高数据监控的系统化、自动化以及精确化,将数据治理的风险降到最低,需要实现动态阈值数据监控。
23.本技术实施例提供的方法由后台系统执行,例如可以由数据监控后台服务器执行。所述数据监控后台服务器可以是一台服务器设备,也可以是由多台服务器组成的服务器集群。
24.为了解决这一问题,在本技术实施例提供了数据量监控方法、系统、设备及存储介质。通过获取目标监控规则,所述目标监控规则包括用于计算统计日期集合和阈值区间的
参数;基于所述目标监控规则和目标日期确定统计日期集合;基于所述统计日期集合和所述目标监控规则确定阈值区间;比对目标日期的数据量与所述阈值区间,响应于所述目标日期的数据量与所述阈值区间不匹配,生成告警指令,从而根据不同动态的监控参数条件来监控表中数据量。开发动态阈值数据监控将提高数据监控的执行频率,更早更快地发现数据问题,为产品运营生产稳定性提供强力保障;提高数据监控自动化程度和告警精确度,帮助数据治理运维人员减轻监控告警人工处理的工作量,提高监控告警的处理效率。
25.为了便于理解本技术实施例提供的数据量监控方法,下面对本技术的场景示例进行说明。
26.以下通过一个实施例,对本技术提供的一种数据量监控方法进行说明。参见图1,该图1为本技术实施例提供的一种数据量监控方法的流程图,该方法流程的执行主体为服务器,进一步的,主体可以为服务器中的监控系统,该方法包括:s101:获取目标监控规则。
27.所述目标监控规则包括用于计算统计日期集合和阈值区间的参数。在实际应用场景中,该目标监控规则的参数可以是由用户灵活配置的;例如,所述目标监控规则包括的参数可以为统计长度n,统计偏移l,统计间隔m,统计规则,统计参数中的一种或多种的组合。其中,例如下表1,表1为本技术实施例提供的目标监控规则明细表,统计长度n为统计样本的区间长度,时间单位调度日历的工作日,如20个工作日或20天;统计偏移l为统计区间的偏移长度,时间单位调度日历的工作日,如5个工作日或5天;统计间隔m为统计样本的是间隔,时间单位调度日历的工作日(m《n),如三个工作日或三天,统计规则包括当日累积或批次增量;统计参数包括最大最小值、平均数和中位数。需要说明的是上述参数以及参数的具体内容仅仅为举例说明,在实际应用场景中可以对参数进行适应性调整,上述举例不对保护范围产生影响。
28.表1. 目标监控规则明细表;s102:基于所述目标监控规则和目标日期确定统计日期集合。
29.所述目标监控规则包括阈值计算统计长度参数,在一种可能的实现方式中,所述基于所述目标监控规则和目标日期确定统计日期集合,包括步骤a1-a2:步骤a1:基于阈值计算统计长度参数确定统计开始日期和统计截止日期。
30.其中阈值计算统计长度参数为表1中的n数据列,用于表征在目标日期前,用于计算阈值的时间采样区间长度。
31.对应上述表1,当用户选中case-1中的目标监控规则配置,则目标日期前的第20个
工作日为统计开始时间,目标日期为统计截止时间。
32.例如,若今天8月3日,当用户选中case-1中的目标监控规则配置,即取7月13日为统计开始时间,8月3日为统计截止时间。
33.步骤a2:根据所述统计开始日期和所述统计截止日期确定统计日期集合。
34.组合所述统计开始日期和所述统计截止日期,得到统计日期集合。即统计日期集合的范围确定公式可以为d-(n+l)≤date≤d-l,其中d为目标日期,date为统计日期集合。
35.在一种可能的实现方式中,所述基于所述目标监控规则和目标日期确定统计日期集合,包括b1-b2:步骤b1:基于阈值计算统计长度参数和计算统计辅助参数,确定统计开始日期和统计截止日期。
36.所述计算统计辅助参数包括阈值计算统计偏移参数,和/或,阈值计算统计间隔参数。
37.对应上述表1,当用户选中case-3中的目标监控规则配置,则目标日期前的第(20+5)个工作日为统计开始时间,目标日期为统计截止时间。
38.步骤b2:根据所述统计开始日期和所述统计截止日期确定统计日期集合。
39.在一种可能的实现方式中,对应上述表1,当用户选中case-4中的目标监控规则配置,则目标日期前的第20个工作日为统计开始时间,目标日期为统计截止时间。而后,根据已经确定的统计开始时间和统计截止时间形成的时间区间,从中每隔3个工作日取1个时间样本,将获取到的若干个时间样本组合形成统计日期集合。
40.对应上述表1,当用户选中case-5中的目标监控规则配置,则目标日期前的第(20+5)天为统计开始时间,目标日期为统计截止时间。而后,根据已经确定的统计开始时间和统计截止时间形成的时间区间,从中每隔3天取1个时间样本,将获取到的若干个时间样本组合形成统计日期集合。
41.s103:基于所述统计日期集合和所述目标监控规则确定阈值区间。
42.所述目标监控规则包括阈值计算统计长度参数和计算统计辅助参数在一种可能的实现方式中,所述基于所述统计日期集合和所述目标监控规则确定阈值区间,包括c1-c3:步骤c1:获取所述统计日期集合对应的数据量集合。
43.获取上述s102步骤中确定的每个统计日期对应的数据量集合。例如,若已确定统计日期集合为7月13日到8月3日,则获取7月13日到8月3日之间的数据。
44.步骤c2:基于统计规则和统计参数筛选所述数据量集合,得到阈值统计基准值。
45.其中,统计规则对应表1中的倒数第二列的数据,统计参数对应表1中的最后一列的数据,所述统计规则和所述统计参数均用于对数据量集合的筛选条件,所述统计规则对应对数据更新模式的筛选,所述统计参数对应对数据类型的筛选。
46.步骤c3:基于阈值统计基准值和阈值计算系数计算得到阈值区间。
47.对应上述表1举例说明如下:若选定所述目标监控规则对应case-1的配置时:若统计时刻的最新批次为3,则目标日期至前20个工作日之间每个工作日第三个批次的数据更新量作为样本,取最大值和最小值作为阈值统计基准值,与当天表数据量进行比较。
48.若选定所述目标监控规则对应case-2的配置时:若统计时刻的最新批次为3,则目标日期至前20个工作日之间每个工作日截止第三个批次的累计数据更新量作为样本,取平均值作为阈值统计基准值,与当天表数据量进行比较。
49.若选定所述目标监控规则对应case-3的配置时:若统计时刻的最新批次为3,则统计日前5个工作日至前(20+5)个工作日之间每个工作日第三个批次的数据更新量作为样本,取中位数与当天表数据量进行比较。
50.若选定所述目标监控规则对应case-4的配置时:若统计时刻的最新批次为3,则目标日期至前20个工作日之间,每隔3个工作日取1个时间样本,然后取每个时间样本的第三个批次的数据更新量作为样本,取中位数作为阈值统计基准值,与当天表数据量进行比较。
51.若选定所述目标监控规则对应case-5的配置时:统计日前5个天至前(20+5)天之间,每隔3天取1个时间样本,然后取每个时间样本的第三个批次的数据更新量作为样本,取中位数作为阈值统计基准值,与当天表数据量进行比较。
52.在实际应用场景中,假如今天8月3日,规则调度日历选的自然日,当用户选中的目标监控规则为case-1中的配置,后端sql以日期字段分组,取7月13日到8月3日之间的数据,每天第三个批次的数据更新量count(1),一共得到20个count(1)的值,然后根据统计参数为最大最小值,选出这20个count(1)中的最大值和最小值,作为阈值统计的基准值。分别乘以阈值系数再与8月3日当天的count(1)的值比较,如果8月3日当天的count(1)的值超过阈值范围则在监控报警页面生产报警记录,用户可对该报警进行处理。
53.在一种可能的实现方式中,动态阈值数据监控的核心算法为比较目标时间数据量与动态阈值的大小关系来进行监控告警,具体模型可以表述为: (1)其中,公式(1)中的f代表动态阈值统计计算函数,可以是求最大值、求最小值、求中位数、求平均数四种统计计算函数;sl代表阈值下限计算系数,su代表阈值上限计算系数;d代表监控执行目标日期,n代表阈值计算统计长度,l代表阈值计算统计偏移,m代表阈值计算统计间隔;count代表目标日期数据量计算函数。
54.需要说明的是上述参数以及参数的具体内容仅仅为举例说明,在实际应用场景中可以对参数进行适应性调整,上述举例不对保护范围产生影响。在一种可能的实现方式中,可以通过监控系统中的规则管理模块来进行数据监控规则的增删改查,主要就是定义和查询,实现对包括但不限于动态阈值统计计算函数、阈值下限计算系数、阈值上限计算系数、阈值计算统计长度、阈值计算统计偏移、阈值计算统计间隔、规则执行目标日期、目标日期数据量计算函数、目标数据源、目标数据表等参数的动态管理。
55.s104:比对目标日期的数据量与所述阈值区间,响应于所述目标日期的数据量与所述阈值区间不匹配,生成告警指令。
56.在实际应用场景中,对于目标日期的数据量的获取可以由系统中的外部数据获取模块实现,包含kafka(高吞吐量的开源流处理平台)消息数据获取、api接口数据(application programming interface,应用程序编程接口)获取和数据库数据获取三个子模块。其中,kafka由apache软件基金会开发的一个开源流处理平台,由scala和java编写。在本案实例中,数据库数据获取服务应用管理了十多种不同数据源,包括mysql(关系型
数据库管理系统)数据库、oracle(oracle database,甲骨文公司提供的以分布式数据库为核心的关系数据库管理系统)数据库、达梦数据库,供规则服务模块调用获取目标数据表的数据量,以此计算生成动态阈值,和当前时间数据量进行比较。此模块将外部数据获取与规则查询、规则执行等过程解耦,避免了逻辑的混乱,增加了代码的复用性。
57.在一种可能的实现方式中,所述生成告警指令之后,还包括步骤d10-d20:步骤d10:响应于所述告警指令为未完成状态,判断所述告警指令的消息类型。
58.在实际应用场景中,上述步骤中生成的告警指令可以写入告警消息数据表中,负责管理告警消息数据表的告警服务模块定时轮询告警消息数据表,获取状态为未完成的告警消息,并判断消息类型。
59.步骤d20:响应于所述告警指令的消息类型为短信类型,将所述告警指令发送给对应的告警联系人,将所述告警指令调整为已完成状态。
60.如果是短信类型的消息,则调用短信消息发送服务,发送给对应的告警联系人,并且在发送成功后将告警消息表中该条消息状态改为完成。
61.在一种可能的实现方式中,所述生成告警指令之后,还包括步骤d11-步骤d31:步骤d11:响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;步骤d21:响应于所述告警指令的消息类型为弹窗类型,结合告警联系人信息将所述告警指令推送至弹窗消息数据表,将告警消息表中所述告警指令调整为已完成状态。
62.如果是弹窗类型的消息,则结合告警联系人生成弹窗消息推送至弹窗消息数据表,推送完成后,将告警消息表中该条消息状态改为完成。
63.步骤d31:响应于弹窗消息数据表中的所述告警指令已推送给所述告警联系人信息对应的客户端,将所述弹窗消息数据表中的所述告警指令调整为已完成状态。
64.同时,用户端会定时轮询后台弹窗消息接口,此接口会扫描弹窗消息数据表,获取状态为未完成的弹窗消息并返回给用户端,返回成功后,讲弹窗消息表中该条消息状态改为已完成。
65.综上,开发动态阈值数据监控将提高数据监控的执行频率,更早更快地发现数据问题,为产品运营生产稳定性提供强力保障;提高数据监控自动化程度和告警精确度,帮助数据治理运维人员减轻监控告警人工处理的工作量,提高监控告警的处理效率。开发动态阈值数据监控需要对应的技术方法来支撑阈值计算和监控告警。本发明讲述了一种基于动态阈值的数据监控技术方法,该技术方法具备多源多表、动静结合、配置灵活、告警精确的特点。
66.本发明相对于静态阈值数据监控而言,增加了动态阈值,对数据阈值监控形成了高效的技术解决方案;基于规则服务、数据服务、告警服务的解耦设计,使得层次清晰,同时支持结合静态阈值和动态阈值,过程处理高效,模块高可用、扩展更灵活,该技术方法具备多源多表、动静结合、配置灵活、告警精确的特点。
67.以上为本技术实施例所提供的数据量监控方法的一些具体实现方式,基于此,本技术还提供了对应的用于数据量监控的系统。下面将从功能模块化的角度对本技术实施例所提供的系统进行介绍。图2为本技术实施例所提供的一种数据量监控系统结构图。
68.所述系统包括:目标监控规则获取单元201,用于获取目标监控规则,所述目标监控规则包括用于
计算统计日期集合和阈值区间的参数;统计日期集合确定单元202,用于基于所述目标监控规则和目标日期确定统计日期集合;阈值区间确定单元203,用于基于所述统计日期集合和所述目标监控规则确定阈值区间;告警指令生成单元204,用于比对目标日期的数据量与所述阈值区间,响应于所述目标日期的数据量与所述阈值区间不匹配,生成告警指令。
69.可选的,所述系统还包括:第一消息类型判断单元,用于响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;第一推送单元,用于响应于所述告警指令的消息类型为弹窗类型,结合告警联系人信息将所述告警指令推送至弹窗消息数据表,将告警消息表中所述告警指令调整为已完成状态;第二推送单元,用于响应于弹窗消息数据表中的所述告警指令已推送给所述告警联系人信息对应的客户端,将所述弹窗消息数据表中的所述告警指令调整为已完成状态。
70.可选的,所述系统还包括:第二消息类型判断单元,用于响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;第三推送单元,用于响应于所述告警指令的消息类型为短信类型,将所述告警指令发送给对应的告警联系人,将所述告警指令调整为已完成状态。
71.本技术实施例还提供了对应的设备以及计算机存储介质,用于实现本技术实施例所提供的数据量监控方法方案。
72.可选的,所述统计日期集合确定单元具体用于:基于阈值计算统计长度参数和目标日期确定统计开始日期和统计截止日期,根据所述统计开始日期和所述统计截止日期确定统计日期集合。
73.可选的,所述统计日期集合确定单元具体用于:基于阈值计算统计长度参数、目标日期和计算统计辅助参数,确定统计开始日期和统计截止日期,所述计算统计辅助参数包括阈值计算统计偏移参数,和/或,阈值计算统计间隔参数;根据所述统计开始日期和所述统计截止日期确定统计日期集合。
74.可选的,所述阈值区间确定单元具体用于:获取所述统计日期集合对应的数据量集合,基于统计规则和统计参数筛选所述数据量集合,得到阈值统计基准值;基于阈值统计基准值和阈值计算系数计算得到阈值区间。
75.其中,所述设备包括存储器和处理器,所述存储器用于存储指令或代码,所述处理器用于执行所述指令或代码,以使所述设备执行本技术任一实施例所述的数据量监控方法。
76.所述计算机存储介质中存储有代码,当所述代码被运行时,运行所述代码的设备实现本技术任一实施例所述的数据量监控方法。
77.需要说明的是,本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实
施例公开的系统或装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
78.应当理解,在本技术中,“至少一个(项)”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系,例如,“a和/或b”可以表示:只存在a,只存在b以及同时存在a和b三种情况,其中a,b可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b或c中的至少一项(个),可以表示:a,b,c,“a和b”,“a和c”,“b和c”,或“a和b和c”,其中a,b,c可以是单个,也可以是多个。
79.还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
80.结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(ram)、内存、只读存储器(rom)、电可编程rom、电可擦除可编程rom、寄存器、硬盘、可移动磁盘、cd-rom、或技术领域内所公知的任意其它形式的存储介质中。
81.对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本技术。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本技术的精神或范围的情况下,在其它实施例中实现。因此,本技术将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

技术特征:
1.一种数据量监控方法,其特征在于,包括:获取目标监控规则,所述目标监控规则包括用于计算统计日期集合和阈值区间的参数;基于所述目标监控规则和目标日期确定统计日期集合;基于所述统计日期集合和所述目标监控规则确定阈值区间;比对目标日期的数据量与所述阈值区间,响应于所述目标日期的数据量与所述阈值区间不匹配,生成告警指令。2.根据权利要求1所述的方法,其特征在于,所述目标监控规则包括阈值计算统计长度参数,所述基于所述目标监控规则和目标日期确定统计日期集合,包括:基于阈值计算统计长度参数和目标日期确定统计开始日期和统计截止日期,根据所述统计开始日期和所述统计截止日期确定统计日期集合。3.根据权利要求1所述的方法,其特征在于,所述目标监控规则包括阈值计算统计长度参数和计算统计辅助参数,所述基于所述目标监控规则和目标日期确定统计日期集合,包括:基于阈值计算统计长度参数、目标日期和计算统计辅助参数,确定统计开始日期和统计截止日期,所述计算统计辅助参数包括阈值计算统计偏移参数,和/或,阈值计算统计间隔参数;根据所述统计开始日期和所述统计截止日期确定统计日期集合。4.根据权利要求1所述的方法,其特征在于,所述目标监控规则包括统计规则和统计参数,所述基于所述统计日期集合和所述目标监控规则确定阈值区间,包括:获取所述统计日期集合对应的数据量集合,基于统计规则和统计参数筛选所述数据量集合,得到阈值统计基准值;基于阈值统计基准值和阈值计算系数计算得到阈值区间。5.根据权利要求1所述的方法,其特征在于,所述生成告警指令之后,还包括:响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;响应于所述告警指令的消息类型为短信类型,将所述告警指令发送给对应的告警联系人,将所述告警指令调整为已完成状态。6.根据权利要求1所述的方法,其特征在于,所述生成告警指令之后,还包括:响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;响应于所述告警指令的消息类型为弹窗类型,结合告警联系人信息将所述告警指令推送至弹窗消息数据表,将告警消息表中所述告警指令调整为已完成状态;响应于弹窗消息数据表中的所述告警指令已推送给所述告警联系人信息对应的客户端,将所述弹窗消息数据表中的所述告警指令调整为已完成状态。7.一种数据量监控系统,其特征在于,所述系统包括:目标监控规则获取单元,用于获取目标监控规则,所述目标监控规则包括用于计算统计日期集合和阈值区间的参数;统计日期集合确定单元,用于基于所述目标监控规则和目标日期确定统计日期集合;阈值区间确定单元,用于基于所述统计日期集合和所述目标监控规则确定阈值区间;告警指令生成单元,用于比对目标日期的数据量与所述阈值区间,响应于所述目标日
期的数据量与所述阈值区间不匹配,生成告警指令。8.根据权利要求7所述的系统,其特征在于,所述系统还包括:第一消息类型判断单元,用于响应于所述告警指令为未完成状态,判断所述告警指令的消息类型;第一推送单元,用于响应于所述告警指令的消息类型为弹窗类型,结合告警联系人信息将所述告警指令推送至弹窗消息数据表,将告警消息表中所述告警指令调整为已完成状态;第二推送单元,用于响应于弹窗消息数据表中的所述告警指令已推送给所述告警联系人信息对应的客户端,将所述弹窗消息数据表中的所述告警指令调整为已完成状态。9.一种电子设备,其特征在于,包括:存储器,处理器,及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现如权利要求1-6任一项所述的数据量监控方法。10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,当所述指令在终端设备上运行时,使得所述终端设备执行如权利要求1-6任一项所述的数据量监控方法。

技术总结
本申请公开了一种数据量监控方法、系统、设备及存储介质,通过获取目标监控规则,所述目标监控规则包括用于计算统计日期集合和阈值区间的参数;基于所述目标监控规则和目标日期确定统计日期集合;基于所述统计日期集合和所述目标监控规则确定阈值区间;比对目标日期的数据量与所述阈值区间,响应于所述目标日期的数据量与所述阈值区间不匹配,生成告警指令,从而根据不同动态的监控参数条件来监控表中数据量。根据预设的目标监控规则中包含的参数计算当前所需的阈值区间,与需要判断的目标日期的数据量进行比对,本申请提供的方案能更灵活更精准的监控表数据的变化,以适应不同业务场景监控的需求,从而提高监控的准确性。从而提高监控的准确性。从而提高监控的准确性。


技术研发人员:孙杰 陈亚龙 高超 陈凯
受保护的技术使用者:中债金融估值中心有限公司
技术研发日:2023.07.20
技术公布日:2023/8/21
版权声明

本文仅代表作者观点,不代表航家之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)

航空之家 https://www.aerohome.com.cn/

飞机超市 https://mall.aerohome.com.cn/

航空资讯 https://news.aerohome.com.cn/

分享:

扫一扫在手机阅读、分享本文

相关推荐