业务背景
中国电建集团江西省电力建设有限公司旗下智信能源科技有限公司(简称:智信能科)专注于低碳能源技术与数字化运营服务,致力于解决新型能源体系中各类能源资产在运营过程中所面临的难点与痛点。
随着公司业务规模的持续扩大,智信能科需管理的电站数量不断增多,随之产生的数据量也急剧增长。为应对这一挑战,智信能科亟需构建一套高性能、高可靠的数据中台系统,以实现数据的实时采集、存储、计算与服务化管理,从而全面提升能源资产的智能化运营水平。
业务挑战
在电站数据规模急剧扩张的背景下,原有系统面临着性能、成本与安全的严峻考验
01
性能与安全双重压力
系统需支持每秒 400 万测点的数据实时写入与处理,传统 MySQL 关系型数据库难以满足海量时序数据极高要求。同时,开源属性意味着在技术安全与数据保障方面存在挑战。
02
存储成本控制困难
持续不断产生的海量时序数据,意味着持续增高的存储成本支出,数据库亟需提升压缩存储能力,有效降低存储成本与硬件资源开销。
03
实时数据处理能力不足
原有数据库 MySQL 难以应对流式数据计算需求,无法实现对电站数据的实时分析与响应。
04
运维管理复杂度高
原有系统属于开源版本,因而缺乏便捷专属的图形化运维工具,增加了系统维护与数据管理的难度。
05
国产系统适配与扩展需求
需全面适配现有软硬件国产环境,并支持集群化部署,以确保系统的高可用性与良好的扩展能力。
解决方案
1. 高性能数据接入
采用多节点 KaiwuDB 集群架构,充分突破传统 MySQL 在处理时序数据上的性能瓶颈,实现了每秒 30 万行的数据写入性能,有效满足 400 万测点的实时接入需求。2. 集群化部署与高可用保障
部署多副本数据库集群,采用 raft 协议保障数据一致性,具备系统故障自愈,自适应切换能力。通过多节点集群部署实现系统的高可用与弹性扩展,确保系统长期稳定运行。3. 实时流式计算
KaiwuDB 内置的流式计算引擎,通过实时汇聚电站数据并进行流水线化分析,将结果推送到 BI 端,通过轻量化投入即可达到满足业务场景的大数据分析水平,显著提升数据响应效率。4. 高压缩比存储
KaiwuDB 的在线周期数据压缩,能够通过参数配置选择不同的压缩算法,包括 gzip、lz4、lz0、Xz、zstd 等算法,数据库存储压缩比达到 1:10,大幅降低存储成本。5. 可视化运维管理
提供图形化数据库操作管理工具,涵盖了数据库连接、数据库管理、模式管理、表管理等多个功能模块。简化数据管理、系统监控与日常运维流程,有效降低运维复杂度。
客户收益
批量数据高效管理
目前已经接入 10 个电站的实时测点数据,数据量达 1TB,为后续大规模电站接入奠定基础;高压缩比存储显著减少 32% 的硬件资源投入。
可靠性与扩展性保障
通过集群部署保障系统高可用与扩展能力,满足持续发展的业务需求。底层数据库技术安全可控,数据安全性显著提升。
实时分析能力增强
依托流式计算实现数据实时处理与分析,支持高速查询量。此外,还能够适配复杂 SQL,支持对电站运行状态的即时监控与智能判断。
运维管理优化
图形化、可视化工具提升数据管理与运维效率,增强系统的可维护性与操作便捷性。