一种多源场景下电网运行数据的处理系统及方法与流程

1.本发明涉及电网运行数据处理技术领域，尤其涉及一种多源场景下电网运行数据的处理系统及方法。


背景技术：

2.本部分的陈述仅仅是提供了与本发明相关的背景技术信息，不必然构成在先技术。
3.随着电网的快速发展，目前进入了特高压交直流互联的智能电网时代。通过对智能电网中的运行数据进行分析，可以为电网优化提供依据，提高电网的运行效率。然而，庞大而又复杂的电网运行数据对现有信息通信技术提出了严峻的挑战。电网运行数据难以快速动态分析，主要有以下几个原因：数据分布在多个服务、数据库及文件中，难以汇总；各数据服务间数据模型差异较大，难以整合分析；创建指标流程较为复杂，难以快速创建指标；指标分析过程中，无法智能化的统计指标数据，只能通过添加代码或者人工手动计算的方式实现，且没有可视化的界面。
4.因此，如何实现多源场景下的电网数据高效整合分析成为现有技术亟待解决的技术问题。


技术实现要素：

5.针对现有技术存在的不足，本发明的目的是提供一种多源场景下电网运行数据的处理系统及方法，能够对电网数据进行整合、汇总和分析。通过对多数据源数据进行格式化分析、建模从而实现指标的快速建立，能够直观的看到指标数据，快速实现多源场景下的数据处理。
6.为了实现上述目的，本发明是通过如下的技术方案来实现：
7.本发明第一方面提供了一种多源场景下电网运行数据的处理系统，包括：
8.数据采集模块，用于采集各个数据源场景下的电网运行数据；
9.数据管理模块，用于对数据采集模块的电网运行数据根据数据源进行整合和分类；其中，分类类型包括数据库链接、文件数据和服务总线数据；
10.维护模块，用于对电网运行数据和指标信息进行维护。
11.指标创建模块，用于确定指标维度并创建指标体系，对指标对应的电网运行数据进行自动分析；其中，创建指标体系的具体步骤为：根据任务需要设置指标创建规则，并选择创建方式；基于创建方式识别创建指标的数据源；考虑与数据源的匹配情况，根据指标创建规则选择字段，形成指标体系。
12.进一步的，维护模块中，维护类型包括数据源维护，类型维护和指标维护；其中，类型维护包括对指标类型、评价对象类型、维度类型的数据维护。
13.更进一步的，数据源维护包括确定数据源信息和管理数据源信息。
14.更进一步的，所述指标维护包括维护指标基本信息，配置字段类型及字段含义。
15.更进一步的，指标创建模块中，创建指标体系后对指标进行试计算，根据维护模块配置的指标基本信息，进行指标数据的试计算，根据计算结果对指标体系进行修改或确认。
16.进一步的，指标创建模块中，确定指标维度步骤包括：将分散在各个场景下的数据源的维度信息进行整合，形成适应于绝大部分指标处理的标准维度，将剩余无法处理的指标创建自定义维度。
17.进一步的，所述创建方式包括根据数据库创建、根据查询语句创建或根据指标创建。
18.更进一步的，所述维度类型的数据维护包括标准维度维护和自定义维度维护，其中，标准维度维护步骤包括：建立数据库，根据数据源选择对应维度的字段，保存对应关系并存入数据库；自定义维度维护步骤包括：根据自定义信息内容建立自定义表，对表内维度信息进行更新，形成新的自定义表。
19.进一步的，还包括可视化模块，用于将分析后的分析结果进行分类展示。
20.本发明第二方面提供了一种多源场景下电网运行数据的处理方法，包括以下步骤：
21.获取多源场景下的电网运行数据，并对各个数据源的电网运行数据进行整合分类；
22.对整合分类后的电网运行数据进行维护；
23.确定指标维度并创建指标体系，利用指标体系对维护后的电网运行数据根据指标维度进行分析；
24.将分析结果进行分类并进行可视化展示。
25.以上一个或多个技术方案存在以下有益效果：
26.本发明公开了一种多源场景下电网运行数据的处理系统及方法，能够通过本发明的系统和方法对多个来源的数据进行整合和分类管理，并且将创建了指标体系，将采集的数据直接根据对应的指标维度进行分析，实现了电网运行数据采集、整理和分析的一体化处理，提高了数据处理的速度和性能，节省了大量的时间和人力资源。
27.本发明附加方面的优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
28.构成本发明的一部分的说明书附图用来提供对本发明的进一步理解，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。
29.图1为本发明实施例一中多源场景下电网运行数据的处理系统的电网运行数据的处理流程图；
30.图2为本发明实施例一中创建指标体系流程图；
31.图3为本发明实施例一中维度维护流程图。
具体实施方式
32.应该指出，以下详细说明都是示例性的，旨在对本发明提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本发明所属技术领域的普通技术人员通常
理解的相同含义。
33.应当说明的是，本发明实施例中，涉及到电网运行数据等相关的数据，当本发明以上实施例运用到具体产品或技术中时，需要获得用户许可或者同意，且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
34.需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本发明的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合；
35.实施例一：
36.本发明实施例一提供了一种多源场景下电网运行数据的处理系统，包括数据采集模块、数据管理模块、指标创建模块、维护模块和可视化模块，通过该处理系统实现电网运行数据的指标分析过程，如图1所示，包括对数据源和指标规则进行维护，创建指标体系，配置指标分析周期以及数据量，之后将指标数据按指标体系进行分析，将分析结果进行数据展示。
37.数据管理模块，用于对数据采集模块的电网运行数据根据数据源进行整合和分类。其中，分类类型包括数据库链接、文件数据和服务总线数据。针对数据源分散问题，数据源管理模块对各数据源信息、连接进行收集整理，使系统内能够管理、使用、分析其数据。
38.数据采集模块，用于获取各个数据源场景下的电网运行数据，例如：符合运行分析中实现对发电量、发受电量的分析。需要通过数据管理模块中的数据链接获取某数据源中发电站信息、发电机信息、发电量信息、受电量信息等，从而进行后续分析。
39.维护模块，用于对电网运行数据和指标信息进行维护。维护类型包括数据源维护，类型维护和指标维护。
40.在一种具体的实施方式中，数据源维护包括确定数据源场景来源和数据管理方式，目前电网信息数据分散在多个服务、数据库及文件中，本实施例将各数据源信息统一管理，支持oracle、mysql、dm、gbase、kingbase等关系型数据库，数据服务及数据文件。
41.指标维护包括维护指标基本信息(主要配置选择的字段属于指标列、维度列还是数据期列)，配置字段类型(数据源来自数据库可自动带出每个字段的类型，其他文件或主线只有数据没有字段的具体属性，后台会根据字段属性做不同的判断，如int类型和string需要分开处理)及字段含义。每个选择的字段信息均对应数据源中某列内容，系统会自动带入字段基本信息，因此需要将该字段代表的含义配置好，即可使用。配置维度列时应注意与维度数据相匹配，配置周期列应注意该列数据为日期。
42.类型维护包括对指标类型、评价对象类型、维度类型的数据维护。维护步骤包括：输入指标(评价对象、维度)类型、输入指标(评价对象、维度)编码。所述维度维护包括标准维度维护和自定义维度维护，如图3所示，标准维度维护步骤包括：建立数据源连接，根据数据源选择对应维度的字段，保存对应关系并存入数据库；自定义维度维护步骤包括：根据自定义信息内容建立自定义表，对表内维度信息进行更新，形成新的自定义表。
43.指标创建模块，用于确定指标维度并创建指标体系，对指标对应的电网运行数据进行自动分析。
44.在一种具体的实施方式中，确定指标维度步骤包括：将分散在各个场景下的数据
源的维度信息进行整合，形成适应于绝大部分指标处理的标准维度，将剩余无法处理的指标创建自定义维度。创建指标体系的具体步骤，如图2所示：
45.(1)根据任务需要设置指标创建规则，并选择创建方式。
46.其中，创建方式包括根据数据库创建、根据查询语句创建以及根据指标创建三种。
47.(2)基于创建方式识别创建指标的数据源。
48.其中，根据数据库创建、根据查询语句时需要选择创建指标的数据源。根据指标创建会根据选择的指标自动识别数据源。
49.(3)考虑与数据源的匹配情况，根据指标创建规则选择字段，形成指标体系。
50.其中，根据指标创建的规则选择字段，选择字段时要考虑与数据的匹配情况，如选择维度字段时，应考虑该字段是否与选择的维度数据匹配。具体规则如下：创建指标时数据列一共分为三种：指标列、维度列、数据期列，其中指标列和维度列为必要条件，数据期列为非必要条件(若要根据数据期分析数据，则该列为必要)。
51.(4)创建指标体系后对指标进行试计算，根据维护模块配置的指标基本信息，进行指标数据的试计算，根据计算结果对指标体系进行修改或确认。
52.需要具体说明的是，选择的字段信息和指标类型信息和指标维度信息等均是经过维护模块维护后的信息，如采用更新后的指标函数进行计算分析。
53.在一种具体的实施方式中，指标分析是对指标维护信息的具象处理，指标分析可一次性处理多个具备相同维度、相同数据期的指标，根据要求可自主配置分析的过程以及对数据的处理方法，最终形成定时任务的形式抽取数据、分析数据。
54.可视化模块，用于将分析后的分析结果进行分类展示。
55.例：需分析半年内发电量变化。步骤如下：一、获取发电量所在数据库的连接信息，二、选择通过数据库创建指标，三、选择指标字段：发电量、发电站、所属地区、时间，四、设置指标信息：发电量—指标列，发电站—维度列(若发电站维度不存在则需要添加发电站维度信息，添加步骤如下：1、选择发电站信息表，2、将发电站信息表中发电站名称或id设置为维度列)，所属地区—维度列(若不存在，操作步骤发电站)，时间—周期列，五、设置发电量信息(如济南市发电量统计)，六、试计算，可选择地区或者发电站名称可查看当前地区、发电站的发电信息。若符合要求可选择创建指标，若不符合，则返回步骤二，七、指标分析：选择刚创建的发电量的指标，配置统计周期(多久进行一次统计)、统计时间(考虑数据量可能过大，提供选择统计时间)。配置完成后，系统即可周期性分析发电量数据。
56.实施例二：
57.本发明实施例二提供了一种多源场景下电网运行数据的处理方法，包括：
58.获取多源场景下的电网运行数据，并对各个数据源的电网运行数据进行整合分类；
59.对整合分类后的电网运行数据进行维护；
60.确定指标维度并创建指标体系，利用指标体系对维护后的电网运行数据根据指标维度进行分析；
61.将分析结果进行分类并进行可视化展示。
62.以上实施例二中涉及的各步骤与方法实施例一相对应，具体实施方式可参见实施例一的相关说明部分。
63.上述虽然结合附图对本发明的具体实施方式进行了描述，但并非对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

技术特征：
1.一种多源场景下电网运行数据的处理系统，其特征在于，包括：数据采集模块，用于采集各个数据源场景下的电网运行数据；数据管理模块，用于对数据采集模块的电网运行数据根据数据源进行整合和分类；其中，分类类型包括数据库链接、文件数据和服务总线数据；维护模块，用于对电网运行数据和指标信息进行维护。指标创建模块，用于确定指标维度并创建指标体系，对指标对应的电网运行数据进行自动分析；其中，创建指标体系的具体步骤为：根据任务需要设置指标创建规则，并选择创建方式；基于创建方式识别创建指标的数据源；考虑与数据源的匹配情况，根据指标创建规则选择字段，形成指标体系。2.如权利要求1所述的多源场景下电网运行数据的处理系统，其特征在于，维护模块中，维护类型包括数据源维护，类型维护和指标维护；其中，类型维护包括对指标类型、评价对象类型、维度类型的数据维护。3.如权利要求2所述的多源场景下电网运行数据的处理系统，其特征在于，数据源维护包括确定数据源场景来源和数据管理方式。4.如权利要求2所述的多源场景下电网运行数据的处理系统，其特征在于，所述指标维护包括维护指标基本信息，配置字段类型及字段含义。5.如权利要求2所述的多源场景下电网运行数据的处理系统，其特征在于，所述维度类型的数据维护包括标准维度维护和自定义维度维护，其中，标准维度维护步骤包括：建立数据库，根据数据源选择对应维度的字段，保存对应关系并存入数据库；自定义维度维护步骤包括：根据自定义信息内容建立自定义表，对表内维度信息进行更新，形成新的自定义表。6.如权利要求1所述的多源场景下电网运行数据的处理系统，其特征在于，指标创建模块中，创建指标体系后对指标进行试计算，根据维护模块配置的指标基本信息，进行指标数据的试计算，根据计算结果对指标体系进行修改或确认。7.如权利要求1所述的多源场景下电网运行数据的处理系统，其特征在于，指标创建模块中，确定指标维度步骤包括：将分散在各个场景下的数据源的维度信息进行整合，形成适应于绝大部分指标处理的标准维度，将剩余无法处理的指标创建自定义维度。8.如权利要求1所述的多源场景下电网运行数据的处理系统，其特征在于，所述创建方式包括根据数据库创建、根据查询语句创建或根据指标创建。9.如权利要求1所述的多源场景下电网运行数据的处理系统，其特征在于，还包括可视化模块，用于将分析后的分析结果进行分类展示。10.一种多源场景下电网运行数据的处理方法，其特征在于，包括以下步骤：获取多源场景下的电网运行数据，并对各个数据源的电网运行数据进行整合分类；对整合分类后的电网运行数据进行维护；确定指标维度并创建指标体系，利用指标体系对维护后的电网运行数据根据指标维度进行分析；将分析结果进行分类并进行可视化展示。

技术总结
本发明公开了一种多源场景下电网运行数据的处理系统及方法，涉及电网运行数据处理技术领域。包括数据采集模块，用于采集各个数据源场景下的电网运行数据；数据管理模块，用于对数据采集模块的电网运行数据根据数据源进行整合和分类；指标创建模块，用于确定指标维度并创建指标体系，对指标对应的电网运行数据进行自动分析；维护模块，用于对电网运行数据和指标信息进行维护。本发明通过对多数据源数据进行指标体系创建和格式化分析，从而实现指标的快速建立，能够对电网数据进行整合、汇总和分析，快速实现多源场景下的数据处理。快速实现多源场景下的数据处理。快速实现多源场景下的数据处理。


技术研发人员：黄学辉 李宗政 李长川 陈磊 刘滕飞 樊海波 周易平 王豪
受保护的技术使用者：金现代信息产业股份有限公司
技术研发日：2023.06.07
技术公布日：2023/8/14