电力企业业扩监控及数据流处理技术

摘要：本文利用业扩监控及数据流处理技术，构建了电力企业一张图管控模式，为电网公司改善营商环境、精益化管理方提供了坚强支撑，不断提升了电力营销业务的流程化、规范化、自动化，提高了电力企业精益化管理水平。

关键词：电力公司；业扩报装；业扩监控；数据流处理技术；一张图管控

1供电企业业扩现状

随着电力企业持续深度改革及“放管服”推进，我国电力公司目前业务庞大，电力营销与电力基建业务相对割裂，很多业务沟通存在部门壁垒现象长期存在，这给业扩报装全流程业务造成很多困难，导致工单传达的及时性和中间环节的流转易产生灰色地带，难以监管，也很难进行业务考核与跟踪。传统业扩流程如图1所示。用电客户根据用电属性、改变用电性质或者负荷超过原核定量向电力企业业务受理部门提出“用电申请”后，受理部门对用户的用电设备、用电地点、用电性质、电力负荷等需求进行登记，随后受理部门转出客户“用电申请单”到电力勘测部门进行实地现场勘察，并报送设计部门进行方案确定，供电方案确定后提交电力审核部门进行审核审批，审批通过后结合客户需求在受理规定期限内对客户进行答复，并有供电财务部门收取相关费用，同时，设计部门进行具体设计，审查部门进行审查，设计审查通过后通知电力施工部门进行施工，施工完成后提交竣工验收申请，验收合格后，由供电公司合同部门负责与客户签订供用电合同，并给装表人员办理“新装客户用电工作传票”，最后由电力安装部门通知电工负责给客户安装检定的计量表，并进行供送电测试，装表接电任务完成安装部门通知受理部门进行用户信息档案建立，并随机进行客户回访。业务扩充是电力企业进行电力供应和销售的受理环节，属于售前服务功能。

2业扩数据流处理技术

2.1业扩数据流采集

由于供电企业信息数据量大，业务部门庞杂，为更好实现电力业扩等业务规范、简便、高效，需要对业扩数据进行高效处理。电力企业业扩数据流处理采用高性能、高可能Flume分布式日志收集系统对业扩数据从进行采集，并通过分布式、高吞吐量Kafka订阅消息系统及时传送到数据处理中心。整个系统主要由Agent层、Collector层、Store层三层结构构成。Agent层是基础进程层，负责客户端日志信息的收集；Collector层处于电力公司中心服务器，其功能是接收基础进程层日志，并按照路由规则把日志写入映射的Store层中；Store层主要存储永久或者临时日志，并把日志流导向各应用服务器。所有层数据均采用均衡化处理，避免信息流堵塞。电力业扩数据流处理采用Kafka消息系统，Kafka是基于LinkedIn活动流及电力运营数据处理管道（pipeline）进行消息系统应用。）Kafka维护按类区分消息，电力业扩管理部门利用计算机通过网络发消息到kafka集群，向kafka主题消息，各子业务部门、用户根据主题信息进行注册、接收主题消息后，各子业务部门按照业务属性进行同步业扩流程工作跟进，并及时通过工作OA系统进行业务进程沟通[1]。

2.2业扩数据流读写处理

Kafka消息应用Driver端和checkpoint方式读取高级API并进行重构数据优化封装，具有高可用性，避免服务宕机故障，并将数据进行冗余处理。对于低级API数据读取则直接进行分区抽取数据直接处理方式，可有效避免数据额外冗余现象，大大降低占用数据应用资源，处理效率较高。数据写入是在不同应用程序线程池中绑定独立数据生产对象，有利于减少服务交互网络开销和占用内存对象。写入封装利用多线程并行、小批量发送模式优化封装，有效提高了吞吐率和kafka消息队列写入效率。电力业扩数据批处理采用引擎spark上Sparkstreaming构件的流数据处理框架。系统把流式计算分解成多批量的SparkJob，并进行SparkDAG图分解和任务集集中调度，流处理具备可扩展、容错、高吞吐特性，很好的满足了电力业扩数据流实时处理场景需求[2]。

2.3组件化扩展

基于SOA架构的扩展功能具有松耦合、标准化、构建化、流程化、服务化模式，很好的顺应了电力业扩业务模式变迁及技术更新应用，SOA核心是服务，是建模-开发-装配-运行-管理全生命周期企业级架构。SOA主要采用SCA（ServiceComponentArchitecture）服务构件编程模型、SDO（ServiceDataObject）服务数据模型和BPEL（BusinessProcessExecutionLanguage）服务编排流程，很好的实现网络构建以及XML标准流程服务Web接口。组件化扩展预制性、灵活性、封装性、通用性、互操作性较好，在电力企业应用前景较好。如图2所示SOA业务结构。

3电力业扩监控及数据流处理应用

电力企业通过一张图管控，可以及时了解每张工单当前的运行情况，并制定相应的责任清单。一张图中可以进行工作单起止时间的筛选以及各类实用化条件，有利于业务操作人员导出明细清单进行自查。通过大数据中心打通各系统数据通过数据中心直接采集营销、计划、基建、物资等业扩全流程数据，在同一系统中展示了业扩各专业环节的工作全貌，提供了不同色块的可控、预警和超时告警人性化标注功能。“业扩一张图”中工单不同状态的数量均可下钻清单，并且通过清单进一步进入到对应的“工单一张图”，用跨专业数据集成和直观图形化的设计原则，解决了业扩及配套工单监控和溯源难的问题。监控覆盖用电咨询、业扩及配套项目全流程。利用数据处理中心服务器短信平台每日通报数据，业扩工单实现闭环管理，实时监控功能系统协同短信平台，利用多个短信发送模板将每日已超时预警高压工单逐单按照超时期限给工单主人、业扩专责、分管主任、分管领导4级发送告警和提级督办短信，加强业务部门协调，提高了工作效率。办电一张图多平台上线监控业扩全过程信息可应用于多维度应用场景。大屏端适用于交流展示；电脑端适用于业务操作人员进行明细清单下载及工单过程追溯；移动端适用于管理人员随时查看本单位或部门指标情况，三位一体，全方位进行监管。业扩监控加快了各环节、跨部门的工作协同，着力于监管业扩配套时限长、难跟踪、精准筛查业扩工单超时、随意中止等问题。另外，工单全流程公开透明，极大缩短客户现有办电时间，改善客户体验，减少客户投诉[3]。

4结论

业扩监控及数据流处理技术为电网公司改善营商环境、精益化管理方提供了坚强支撑，通过对营销域业务特别是获得电力的运营监控，实现营销业务的优化与完善，对服务功能及程序进行重新整合，对新业务需求不断补充，构建信息高度共享、流程运转通畅、科学规范统一的业务应用，不断提升了电力营销业务的流程化、规范化、自动化，提高了电力企业精益化管理水平。

参考文献

[1]张舟.内部控制在供电企业业扩报装业务流程中的应用研究-基于风险管理的视角[J].河南科技,2014,203(10):255-256.

[2]王颖.供电企业业扩报装管理系统设计与实现[D].2015.

[3]马敏.电力业扩报装分析预测系统在电力行业的应用与研究[J].大众用电,2015,276(S2):60-63.

作者：张卓 单位：广州供电局稽查中心