一种数据校验方法、系统、电子设备及存储介质与流程

1.本发明涉及计算机技术，尤其涉及一种数据校验方法、系统、电子设备及存储介质。


背景技术：

2.数据质量对于数据仓库等项目的成功至关重要，为了持续监控数据质量，通常需要对数据进行校验。
3.现有技术中通常基于程序校验，以及基于结构化查询语言(structured query language，sql)校验。
4.基于程序校验是指在if、if-else和then语句的帮助下，使用一些已知的编程语言进行的验证。然而存在1)校验相关的操作必须由了解编程语言的人员来进行操作，对操作者要求较高；2)使用代码对文档相关的数据进行校验难度较高；3)若校验功能写在程序项目里，则校验功能的维护和修改将会变得异常麻烦；4)使用传统的编程语言，很难处理复杂的业务规则；5)代码维护的成本较高等问题。
5.基于sql校验为使用来自数据库的sql查询进行的校验。存在1)校验的功能是基于sql语句进行开发的，校验相关的操作必须由了解sql语句的人员来进行操作，对操作者要求较高；2)面对复杂的校验时，sql校验语句会较长，并且难以理解；3)基于sql校验的工具必须连接数据库才能进行，增加了额外的开销等问题。


技术实现要素：

6.本发明提供一种数据校验方法、系统、电子设备及存储介质，以实现提高数据校验的便利性和灵活性。
7.根据本发明的一方面，提供了一种数据校验方法，该方法包括：
8.通过数据采集模块根据数据规则管理平台配置的预设数据源信息，采集初始待校验数据；
9.通过数据解析模块根据所述初始待校验数据的数据类型，将所述初始待校验数据转化为目标待校验数据；
10.通过数据配置模块根据所述数据规则管理平台配置的预设数据结构信息将所述目标待校验数据封装为待校验数据实体；
11.通过核心处理模块获取由规则模块生成的数据校验规则，并根据所述数据校验规则校验所述待校验数据实体；其中，所述核心处理模块基于drools数据规则引擎构建。
12.根据本发明的另一方面，提供了一种数据校验系统，该系统包括：
13.数据采集模块，用于根据数据规则管理平台配置的预设数据源信息，采集初始待校验数据；
14.数据解析模块，用于根据所述初始待校验数据的数据类型，将所述初始待校验数据转化为目标待校验数据；
15.数据配置模块，用于根据所述数据规则管理平台配置的预设数据结构信息将所述目标待校验数据封装为待校验数据实体；
16.核心处理模块，用于获取规则模块生成的数据校验规则，并根据所述数据校验规则校验所述待校验数据实体；其中，所述核心处理模块基于drools数据规则引擎构建。
17.根据本发明的另一方面，提供了一种电子设备，所述电子设备包括：
18.至少一个处理器；以及
19.与所述至少一个处理器通信连接的存储器；其中，
20.所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明任一实施例所述的数据校验方法。
21.根据本发明的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本发明任一实施例所述的数据校验方法。
22.本发明实施例的技术方案，通过数据规则管理平台将各模块所需的数据信息和规则信息统一进行管理配置，提高信息维护管理效率，并且无需涉及代码，降低管理配置对于操作人员的技术难度，扩大数据校验方法的适用范围。将与数据相关的信息，例如为预设数据源信息、预设数据结构信息、预设数据结构信息，以及与规则相关的信息，例如为数据校验规则均进行抽象，使得数据和规则均可从各个抽象维度进行配置，提高数据获取、数据校验规则生成、待校验数据实体生成以及数据校验的灵活性。由于drools数据规则引擎的特性，通过将目标待校验数据封装为待校验数据实体，便于基于drools数据规则引擎构建的核心处理模块根据数据校验直接处理，提高数据校验的针对性。通过数据解析模块，将不同类型的数据解析成通用数据结构的目标待校验数据，使得不同类型的初始待校验数据均能采用核心处理模块进行校验，提高核心处理模块的复用性。
23.应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
附图说明
24.图1为本发明实施例一提供的一种数据校验方法的流程图；
25.图2为本发明实施例二提供的一种数据校验方法的流程图；
26.图3为本发明实施例三提供的一种数据校验系统的结构示意图；
27.图4为用来实施本发明实施例的电子设备的结构示意图。
具体实施方式
28.为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
29.需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第
二”、“目标”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
30.实施例一
31.图1为本发明实施例一提供的一种数据校验方法的流程图，本实施例可适用于基于drools数据规则引擎进行数据校验的情况，该方法可以由本发明实施例所提供的数据校验系统来执行，该系统可以由软件和/或硬件的方式实现。参见图1，本实施例提供的数据校验方法，包括：
32.步骤110、通过数据采集模块根据数据规则管理平台配置的预设数据源信息，采集初始待校验数据。
33.其中，数据规则管理平台用于对数据信息以及校验规则预先进行配置，从而达到对数据信息和校验规则进行统一管理和维护的效果。
34.预设数据源信息可包含数据存储的位置以及数据存储的类型等，数据采集模块通过数据源信息可知所需获取的初始待校验数据的数据获取位置以及数据获取类型，便于从数据存储位置中按照数据类型准确地获取对应的初始待检验数据，其中，若数据类型不同，获取的方式可能不同，数据类型可包括单种整体类型，例如日志数据、mysql数据、hive数据等离线数据，以及kafka等流式实时数据；也可包括单种整体类型中的细分类型，例如日志数据中的不同类型日志，本实施例对此不进行限制。
35.其中，初始待校验数据为从数据存储位置中直接获取的待校验数据。
36.步骤120、通过数据解析模块根据初始待校验数据的数据类型，将初始待校验数据转化为目标待校验数据。
37.根据对初始待检验数据进行统一解析，将不同类型的数据，解析成通用的数据结构，即将数据格式进行统一，解析方式可为针对不同数据类型确定对应的解析规则，并根据解析规则进行解析，本实施例对此不进行限制。将解析后得到的待校验数据确定为目标待校验数据。
38.步骤130、通过数据配置模块根据数据规则管理平台配置的预设数据结构信息将目标待校验数据封装为待校验数据实体。
39.其中，预设数据结构信息为校验数据的结构信息，例如包含数据类型、表名、字段名称、字段类型、字段间的关联，例如是否可构成字段组合，以及字段作用，例如表明该字段是否用于校验等。
40.将目标待校验数据按照预设的实体格式，封装成实体，例如根据目标待校验数据包含的字段以及该字段是否用于校验，将用于校验的字段的内容按照实体结构进行填充，封装为待校验数据实体。其中，单种目标待校验数据通常对应单种待校验数据实体结构，单条目标待校验数据通常生成单个待校验数据实体，即为实体实例。
41.本实施例中，可选的，通过数据配置模块根据数据规则管理平台配置的预设数据结构信息将目标待校验数据封装为待校验数据实体，包括：
42.通过数据配置模块根据目标待校验数据的数据类型从预设数据结构信息中获取目标数据结构信息；
43.根据目标数据结构信息创建待校验数据实体的实体结构；
44.获取目标待校验数据的数据属性，并根据数据属性和实体结构将目标待校验数据封装为待校验数据实体。
45.其中，目标数据结构信息为与目标待校验数据相关的数据结构信息，不同数据类型对应的数据结构信息可能不相同，且同一数据类型对应的数据结构信息也可能存在差异，例如当数据类型均为日志时，目标待校验数据一对应的字段数量可能与目标待校验数据二对应的字段数量不一致。可预先在数据规则管理平台中配置数据类型与数据结构信息之间的关联关系，从而通过目标待校验数据的数据类型从预设数据结构信息中获取目标数据结构信息。
46.根据目标数据结构信息创建待校验数据实体的实体结构，可通过数据规则管理平台配置中预先设置的实体结构创建规则，结合具体的目标数据结构信息创建实体结构，例如根据实体结构创建规则创建初始实体结构；根据目标数据结构信息确定目标待校验数据包含的字段以及该字段是否用于校验的说明等，确定用于校验的字段；根据实体结构创建规则确定用于校验的字段与初始实体结构之间的关联关系，例如字段名与初始实体结构中属性名的关联关系等，以通过关联关系确定从目标待校验数据获取数据的位置，以及初始实体结构中需要填充数据的位置等。
47.目标待校验数据的数据属性为目标待校验数据字段中的具体字段内容，可由数据采集模块获取后传递至数据配置模块。根据数据属性和实体结构将目标待校验数据封装为待校验数据实体，可为将数据属性赋值至待校验数据实体的实体结构中，并进行封装，得到待校验数据实体。
48.由于目标待校验数据存在不可确定性，因此根据数据属性和实体结构将目标待校验数据封装为待校验数据实体，可根据目标待校验数据的具体情况动态构建待校验数据实体，无需由于提前构建固定待校验数据实体，导致待校验数据实体与目标待校验数据相关性较低以及增加更改难度，提高待校验数据实体创建的准确性和灵活性。
49.步骤140、通过核心处理模块获取由规则模块生成的数据校验规则，并根据数据校验规则校验待校验数据实体；其中，核心处理模块基于drools数据规则引擎构建。
50.规则模块生成的数据校验规则用于对待校验数据实体进行校验，核心处理模块底层采用drools数据规则引擎，待校验数据实体为可供drools数据规则引擎进行校验的实体。
51.drools数据规则引擎为开源的规则引擎，用java语言编写，使用rete算法来计算规则，具有易获取、计算速度快、计算效率高等优点。
52.通过核心处理模块获取由规则模块生成的数据校验规则，使得核心处理模块可根据数据校验规则对待校验数据实体进行校验，得到待校验数据实体的校验结果。
53.本实施例中，可选的，通过核心处理模块获取由规则模块生成的数据校验规则，包括：
54.通过核心处理模块将数据校验规则动态写入与核心处理模块关联的预设格式的规则文件内。
55.其中预设格式的规则文件可为drl格式的文件，通过将数据校验规则动态写入与核心处理模块关联的预设格式的规则文件内，便于drools数据规则引擎可直接采用数据校验规则对待校验数据实体进行校验。并且由于数据校验规则存在不可确定性，因此通过将数据校验规则动态写入与核心处理模块关联的预设格式的规则文件内，无需由于提前写入固定规则导致数据校验规则与目标待校验数据相关性较低以及增加更改难度，提高数据校验规则确定的准确性和灵活性。
56.本实施例中，可选的，在根据数据校验规则校验待校验数据实体之后，还包括：
57.通过结果处理模块获取数据校验结果；
58.根据数据规则管理平台配置的预设结果处理信息和数据校验结果执行校验结果处理操作。
59.数据规则管理平台配置的预设结果处理信息可包括待校验数据实体校验后的结果处理操作信息，例如待校验数据实体校验成功需要做哪些后续操作，以及待校验数据实体校验失败后需要做哪些补救措施等。
60.结果处理模块从核心处理模块处获取数据校验结果，例如校验成功或校验失败。根据预设结果处理信息和数据校验结果执行校验结果处理操作，示例性的，若校验成功，执行数据的相关落盘操作；若校验失败，执行的相关报警操作等，本实施例对此不进行限制。
61.通过结果处理模块执行校验结果处理操作，便于及时对校验结果进行相应处理，提高数据校验的有效性。并且预设结果处理信息由数据规则管理平台配置，因此可根据不同的结果数据校验结果执行对应的校验结果处理操作，提高结果处理的针对性。
62.本实施例所提供的技术方案，通过数据规则管理平台将各模块所需的数据信息和规则信息统一进行管理配置，提高信息维护管理效率，并且无需涉及代码，降低管理配置对于操作人员的技术难度，扩大数据校验方法的适用范围。
63.将与数据相关的信息，例如为预设数据源信息、预设数据结构信息、预设数据结构信息，以及与规则相关的信息，例如为数据校验规则均进行抽象，使得数据和规则均可从各个抽象维度进行配置，提高数据获取、数据校验规则生成、待校验数据实体生成以及数据校验的灵活性。
64.由于drools数据规则引擎的特性，通过将目标待校验数据封装为待校验数据实体，便于基于drools数据规则引擎构建的核心处理模块根据数据校验直接处理，提高数据校验的针对性。
65.通过数据解析模块，将不同类型的数据解析成通用数据结构的目标待校验数据，使得不同类型的初始待校验数据均能采用核心处理模块进行校验，提高核心处理模块的复用性。
66.实施例二
67.图2为本发明实施例二提供的一种数据校验方法的流程图，本技术方案是针对通过规则模块生成数据校验规则的过程进行补充说明的。与上述方案相比，本方案具体优化为，通过规则模块生成数据校验规则，包括：通过规则模块根据数据规则管理平台配置的预设规则信息，确定与待校验数据实体关联的初始校验规则；其中，预设规则信息包括校验规则组合、对象多校验规则、对象单校验规则和基本校验操作中的至少一种；
68.根据核心处理模块的校验格式，处理初始校验规则，得到数据校验规则。
69.具体的，数据校验方法的流程图如图2所示：
70.步骤210、通过规则模块根据数据规则管理平台配置的预设规则信息，确定与待校验数据实体关联的初始校验规则；其中，预设规则信息包括校验规则组合、对象多校验规则、对象单校验规则和基本校验操作中的至少一种。
71.预设规则信息包括校验规则组合、对象多校验规则、对象单校验规则和基本校验操作中的至少一种，其中，基本校验操作可为大于等于、包含、小于等于基本逻辑校验操作；对象单校验规则为针对单个校验对象进行单种类型的校验的规则，例如为判断对象a是否大于100等；对象多校验规则为针对单个校验对象进行多种类型的校验的规则，例如为判断对象a是否既大于100，又小于200等；校验规则组合可为针对多个校验对象的校验规则组合，例如为判断对象a是否大于100，且是否同时满足对象b小于50等。其中，判断对象可为待校验数据实体中的属性内容，本实施例对此不进行限制。
72.通过规则模块根据数据规则管理平台配置的预设规则信息，确定与待校验数据实体关联的初始校验规则，其中，初始校验规则为根据预设规则信息以及目标待校验数据直接确定的校验规则，例如目标待校验数据包含待校验字段a，则初始校验规则可为判断字段a中数值是否既大于100，又小于200，其中，初始校验规则的规则内容可通过数据规则管理平台中通过对预设规则信息的设置确定。
73.步骤220、根据核心处理模块的校验格式，处理初始校验规则，得到数据校验规则。
74.规则模块将初始校验规则，按照核心处理模块预先规定的语法格式，进行拼接等操作，得到对应数据校验规则。
75.本发明实施例中，预设规则信息包括校验规则组合、对象多校验规则、对象单校验规则和基本校验操作中的至少一种，可通过对不同预设规则信息的配置，确定初始校验规则，提高初始校验规则确定的多样性和灵活性。并且根据核心处理模块的校验格式，将初始校验规则转化为数据校验规则，便于后续核心处理模块直接进行处理，提高数据校验规则获得的有效性。
76.实施例三
77.图3为本发明实施例三提供的一种数据校验系统的结构示意图。该系统可以由硬件和/或软件的方式来实现，可执行本发明任意实施例所提供的一种数据校验方法，具备执行方法相应的功能模块和有益效果。如图3所示，该系统包括：
78.数据采集模块310，用于根据数据规则管理平台配置的预设数据源信息，采集初始待校验数据；
79.数据解析模块320，用于根据所述初始待校验数据的数据类型，将所述初始待校验数据转化为目标待校验数据；
80.数据配置模块330，用于根据所述数据规则管理平台配置的预设数据结构信息将所述目标待校验数据封装为待校验数据实体；
81.核心处理模块340，用于获取规则模块350生成的数据校验规则，并根据所述数据校验规则校验所述待校验数据实体；其中，所述核心处理模块基于drools数据规则引擎构建。
82.在上述各技术方案的基础上，可选的，所述数据配置模块330，包括：
83.目标数据结构信息获取单元，用于通过数据配置模块330根据所述目标待校验数
据的数据类型从所述预设数据结构信息中获取目标数据结构信息；
84.实体结构创建单元，用于根据所述目标数据结构信息创建所述待校验数据实体的实体结构；
85.数据实体封装单元，用于获取所述目标待校验数据的数据属性，并根据所述数据属性和所述实体结构将所述目标待校验数据封装为待校验数据实体。
86.在上述各技术方案的基础上，可选的，所述规则模块350，包括：
87.初始校验规则确定单元，用于通过所述规则模块350根据所述数据规则管理平台配置的预设规则信息，确定与所述待校验数据实体关联的初始校验规则；其中，所述预设规则信息包括校验规则组合、对象多校验规则、对象单校验规则和基本校验操作中的至少一种；
88.数据校验规则获得单元，用于根据所述核心处理模块340的校验格式，处理所述初始校验规则，得到所述数据校验规则。
89.在上述各技术方案的基础上，可选的，所述核心处理模块340，包括：
90.规则写入单元，用于通过所述核心处理模块340将所述数据校验规则动态写入与所述核心处理模块340关联的预设格式的规则文件内。
91.在上述各技术方案的基础上，可选的，还包括结果处理模块360，所述结果处理模块360用于：
92.通过获取数据校验结果；
93.根据所述数据规则管理平台配置的预设结果处理信息和所述数据校验结果执行校验结果处理操作。
94.实施例四
95.图4示出了可以用来实施本发明实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本发明的实现。
96.如图4所示，电子设备10包括至少一个处理器11，以及与至少一个处理器11通信连接的存储器，如只读存储器(rom)12、随机访问存储器(ram)13等，其中，存储器存储有可被至少一个处理器执行的计算机程序，处理器11可以根据存储在只读存储器(rom)12中的计算机程序或者从存储单元18加载到随机访问存储器(ram)13中的计算机程序，来执行各种适当的动作和处理。在ram 13中，还可存储电子设备10操作所需的各种程序和数据。处理器11、rom 12以及ram 13通过总线14彼此相连。输入/输出(i/o)接口15也连接至总线14。
97.电子设备10中的多个部件连接至i/o接口15，包括：输入单元16，例如键盘、鼠标等；输出单元17，例如各种类型的显示器、扬声器等；存储单元18，例如磁盘、光盘等；以及通信单元19，例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
98.处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(cpu)、图形处理单元(gpu)、各种专用的人工智能
(ai)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(dsp)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理，例如数据校验方法。
99.在一些实施例中，数据校验方法可被实现为计算机程序，其被有形地包含于计算机可读存储介质，例如存储单元18。在一些实施例中，计算机程序的部分或者全部可以经由rom 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到ram 13并由处理器11执行时，可以执行上文描述的数据校验方法的一个或多个步骤。备选地，在其他实施例中，处理器11可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行数据校验方法。
100.本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、现场可编程门阵列(fpga)、专用集成电路(asic)、专用标准产品(assp)、芯片上系统的系统(soc)、负载可编程逻辑设备(cpld)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
101.用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器，使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
102.在本发明的上下文中，计算机可读存储介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。备选地，计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦除可编程只读存储器(eprom或快闪存储器)、光纤、便捷式紧凑盘只读存储器(cd-rom)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
103.为了提供与用户的交互，可以在电子设备上实施此处描述的系统和技术，该电子设备具有：用于向用户显示信息的显示装置(例如，crt(阴极射线管)或者lcd(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
104.可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界
面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(lan)、广域网(wan)、区块链网络和互联网。
105.计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与vps服务中，存在的管理难度大，业务扩展性弱的缺陷。
106.应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本发明的技术方案所期望的结果，本文在此不进行限制。
107.上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

技术特征：
1.一种数据校验方法，其特征在于，包括：通过数据采集模块根据数据规则管理平台配置的预设数据源信息，采集初始待校验数据；通过数据解析模块根据所述初始待校验数据的数据类型，将所述初始待校验数据转化为目标待校验数据；通过数据配置模块根据所述数据规则管理平台配置的预设数据结构信息将所述目标待校验数据封装为待校验数据实体；通过核心处理模块获取由规则模块生成的数据校验规则，并根据所述数据校验规则校验所述待校验数据实体；其中，所述核心处理模块基于drools数据规则引擎构建。2.根据权利要求1所述的方法，其特征在于，通过数据配置模块根据所述数据规则管理平台配置的预设数据结构信息将所述目标待校验数据封装为待校验数据实体，包括：通过数据配置模块根据所述目标待校验数据的数据类型从所述预设数据结构信息中获取目标数据结构信息；根据所述目标数据结构信息创建所述待校验数据实体的实体结构；获取所述目标待校验数据的数据属性，并根据所述数据属性和所述实体结构将所述目标待校验数据封装为待校验数据实体。3.根据权利要求1所述的方法，其特征在于，通过所述规则模块生成数据校验规则，包括：通过所述规则模块根据所述数据规则管理平台配置的预设规则信息，确定与所述待校验数据实体关联的初始校验规则；其中，所述预设规则信息包括校验规则组合、对象多校验规则、对象单校验规则和基本校验操作中的至少一种；根据所述核心处理模块的校验格式，处理所述初始校验规则，得到所述数据校验规则。4.根据权利要求1所述的方法，其特征在于，通过核心处理模块获取由规则模块生成的数据校验规则，包括：通过所述核心处理模块将所述数据校验规则动态写入与所述核心处理模块关联的预设格式的规则文件内。5.根据权利要求1-4任一项所述的方法，其特征在于，在根据所述数据校验规则校验所述待校验数据实体之后，还包括：通过结果处理模块获取数据校验结果；根据所述数据规则管理平台配置的预设结果处理信息和所述数据校验结果执行校验结果处理操作。6.一种数据校验系统，其特征在于，包括：数据采集模块，用于根据数据规则管理平台配置的预设数据源信息，采集初始待校验数据；数据解析模块，用于根据所述初始待校验数据的数据类型，将所述初始待校验数据转化为目标待校验数据；数据配置模块，用于根据所述数据规则管理平台配置的预设数据结构信息将所述目标待校验数据封装为待校验数据实体；核心处理模块，用于获取规则模块生成的数据校验规则，并根据所述数据校验规则校
验所述待校验数据实体；其中，所述核心处理模块基于drools数据规则引擎构建。7.根据权利要求6所述的系统，其特征在于，所述数据配置模块，包括：目标数据结构信息获取单元，用于通过数据配置模块根据所述目标待校验数据的数据类型从所述预设数据结构信息中获取目标数据结构信息；实体结构创建单元，用于根据所述目标数据结构信息创建所述待校验数据实体的实体结构；数据实体封装单元，用于获取所述目标待校验数据的数据属性，并根据所述数据属性和所述实体结构将所述目标待校验数据封装为待校验数据实体。8.根据权利要求6所述的系统，其特征在于，所述规则模块，包括：初始校验规则确定单元，用于通过所述规则模块根据所述数据规则管理平台配置的预设规则信息，确定与所述待校验数据实体关联的初始校验规则；其中，所述预设规则信息包括校验规则组合、对象多校验规则、对象单校验规则和基本校验操作中的至少一种；数据校验规则获得单元，用于根据所述核心处理模块的校验格式，处理所述初始校验规则，得到所述数据校验规则。9.一种电子设备，其特征在于，所述电子设备包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-5中任一项所述的数据校验方法。10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现权利要求1-5中任一项所述的数据校验方法。

技术总结
本发明公开了一种数据校验方法、系统、电子设备及存储介质。该方法包括：通过数据采集模块根据数据规则管理平台配置的预设数据源信息，采集初始待校验数据；通过数据解析模块根据初始待校验数据的数据类型，将初始待校验数据转化为目标待校验数据；通过数据配置模块根据数据规则管理平台配置的预设数据结构信息将目标待校验数据封装为待校验数据实体；通过基于Drools数据规则引擎构建的核心处理模块获取由规则模块生成的数据校验规则，并根据数据校验规则校验待校验数据实体。通过运行本发明实施例所提供的技术方案，使得数据和规则均可从各个抽象维度进行配置，提高数据获取、数据校验规则生成、待校验数据实体生成以及数据校验的灵活性。据校验的灵活性。据校验的灵活性。


技术研发人员：陈培文
受保护的技术使用者：九识（苏州）智能科技有限公司
技术研发日：2023.05.15
技术公布日：2023/8/13