山东能源｜19.95 万人集团的影像报销系统高可用改造

企业概况

山东能源集团是山东省能源行业的国有资本投资公司、我国能源行业的重要骨干企业，承担着保障能源安全、优化能源布局与能源结构的主体责任。拥有从业人员 19.95 万人、权属企业 608 家，其中 8 家上市公司、5 家新三板挂牌公司，分布在国内 22 个省（区）及境外 17 个国家（地区）。2024 年完成营业收入 8560 亿元，位居中国煤炭 50 强第 1 位、中国企业 500 强第 23 位、世界 500 强第 75 位。

业务痛点

• 系统高可用缺失，应用、数据库、存储集中部署在单一机房且未做集群化冗余，单点服务故障即引发业务灾难，如单机数据库宕机会使整体影像报销系统无法访问
• 系统容灾能力为零，区域性故障直接导致业务瘫痪
• 数据库访问未分层，高频访问的「近 3 个月报销影像」与低频的「5 年前数据」竞争调阅资源，调阅延迟从 1 秒飙升至 10 秒
• 降级与容错空白，小故障容易演变成雪崩，如某次网络波动导致上传失败率达 40%，员工反复重试使服务端请求量暴增 3 倍，进一步压垮应用

解决方案

• 对影像报销系统实施高可用与容灾改造：应用与数据库集群化冗余部署，消除单点
• 建立跨机房容灾能力，区域性故障不再导致整体不可用
• 按访问频度对影像数据分层存储，高频近期影像与低频历史数据分离，避免调阅资源竞争
• 补齐降级与容错机制，在网络波动等异常场景下限制重试风暴，防止小故障演变为雪崩

实现效果

• 影像报销系统从单机房单点部署转为集群化冗余部署，单节点故障不再导致整体不可用
• 影像数据按访问频度分层后，近期报销影像的调阅延迟恢复正常水平
• 降级与容错机制上线后，网络波动等异常不再因重试风暴放大为服务端过载