南方电网贵州计量云:2000万用户数据洪峰的秒级响应
南网贵州计量云以ADMQ与AMDC承接2000万用户数据洪峰,结算平稳、抢修响应提升至分钟级。
案例概述
中国南方电网有限责任公司是关系国家能源安全和国民经济命脉的特大型国有重点骨干企业,供电区域覆盖广东、广西、云南、贵州、海南五省区,供电人口超过2.72亿。贵州电网作为南方电网的重要组成部分,服务省内超过2000万电力用户。
电费结算是电力系统的核心业务之一。每月1日零点,2000万用户的计量数据会集中上传,形成持续性的数据洪峰,传统集中式架构在海量数据、极致时效和系统韧性三者之间难以兼顾,面临扛不住、算不快、易卡顿等问题,而计费、线损分析、负荷预测等核心业务容不得半点差错。为应对上述挑战,贵州电网采用“一主两域、云边协同”架构建设计量自动化系统3.0:数据分析域部署于云端,专注深度数据挖掘与智能分析;采集监控域下沉至省侧边缘集群,负责海量数据的实时接入与处理。金蝶天燕以ADMQ分布式消息队列与AMDC分布式缓存参与该项目建设,为数据流转与查询加速提供中间件层面的核心支撑。
客户需求
削峰填谷与高可靠数据传输
每月电费结算日及用电高峰时段,2000万用户计量数据会形成突发性数据洪峰,峰值流量可达60万条/秒。系统需要具备削峰填谷能力,缓冲突发流量并按处理能力有序释放,避免后端系统被冲垮;电费结算、远程费控等关键业务要求数据从边缘到云端传输过程中不丢失、不重复,确保云边数据一致性。
海量数据秒级查询响应
计量系统涉及百亿级历史数据与实时查询,传统架构下关联查询响应长达分钟级,无法满足监控大屏实时刷新、业务人员即时分析等场景需求,系统需要将核心查询响应时间压缩至秒级甚至毫秒级,支撑故障抢修、负荷预测等业务的高效决策。
云边协同与系统韧性保障
系统采用“一主两域、云边协同”架构,边缘集群与云端之间需要高效协同;当网络波动或中断时,边缘侧仍需独立提供数据服务,保障核心业务不中断。系统需要具备跨域智能路由、本地缓存自治和故障自动切换能力,提升整体韧性。
产品与方案
方案整体思路
针对上述需求,金蝶天燕提供以ADMQ分布式消息队列与AMDC分布式缓存为核心的双核中间件解决方案,以“削峰稳传、秒级响应、云边自治”为核心目标:通过ADMQ构建云边协同的数据传输总线,实现2000万用户计量数据的削峰填谷与高可靠流转;通过AMDC构建分布式缓存层,将百亿级数据查询从分钟级提速至秒级。二者协同形成“传得稳、查得快、断不断”的计量数据处理底座。
分布式消息队列ADMQ——数据洪流的“减压阀”与“调度中枢”
ADMQ是一款金融级分布式消息中间件,支持多租户、跨集群数据复制,具备计算存储分离、队列与流模型结合、国密SSL传输等特性。在本项目中承担三大核心职能:
· 削峰填谷:通过缓冲池机制承接每月结算日及高峰时段的突发流量,峰值处理能力达60万条/秒,按后端处理能力有序释放,后端无需常年维持冗余算力。
· 可靠传输:通过持久化存储和重试机制实现日均40亿条数据的稳定传输,确保云边数据一致、消息不丢失。
· 多域协同:支持跨域智能路由,实现边缘采集监控域与云端数据分析域的直接协同,降低传输延迟和运维复杂度。
分布式缓存AMDC——百亿数据查询的“秒级加速器”
AMDC兼容Redis协议,支持多数据类型存储、发布/订阅模式、Lua脚本及数据持久化,具备高可用集群、自动故障切换与数据迁移能力。在本项目中作为查询加速层:通过预缓存热点用户档案、计费规则、实时负荷曲线等核心数据,将百亿级关联查询从分钟级提速至3秒内,监控大屏实现毫秒级刷新;缓存层承担绝大部分高频热点访问,有效消除PB级存储系统的IO瓶颈;支持边缘侧本地缓存能力,当云端网络波动或中断时,边缘集群仍可独立提供数据服务。
双核协同,赋能计量数字化转型
ADMQ与AMDC在“一主两域、云边协同”架构中深度配合:ADMQ负责海量计量数据的稳定传输与削峰调度,确保数据“传得稳”;AMDC负责热点数据的快速查询与边缘自治,确保业务“查得快”。二者协同使故障抢修响应从小时级提升至分钟级,让运维从“救火”转向创新,推动数据成为业务核心引擎。
客户价值
计量自动化系统3.0上线后,电费结算平稳运行,成功承接2000万用户实时数据洪峰:ADMQ以60万条/秒的峰值处理能力完成削峰填谷,日均40亿条数据的传输不丢不重,保障了计费、远程费控等关键业务的数据一致性。
AMDC将百亿级关联查询从分钟级提速至3秒内,监控大屏实现毫秒级刷新,故障抢修响应从小时级提升至分钟级;云边协同与边缘本地缓存自治使网络异常时核心业务仍可不中断,显著增强了系统韧性,推动计量数据从业务记录转变为支撑分析决策与运维创新的核心引擎。
