工作内容:ES 集群稳定性治理 & 运维平台功能开发 & ES 内核开发 & 值班
技术架构:Spring Boot + SpringCloud Alibaba + MySQL + MQ + Elasticsearch+多线程
技术亮点&疑难解决:
(1)ES SLA 巡检框架迭代开发(稳定性治理):参与 Elasticsearch SLA 巡检框架迭代开发,基于 Crane+Mafka+线程池
实现分布式巡检任务调度与执行,开发 ES 索引分片文档数阈值巡检功能,实现按 SLA 等级自动风险上报机制,并优化 CPU
Busy 风险重复上报问题。
(2)ES 集群宿主机一键替换系统优化(容灾能力建设):参与 Eagle 平台宿主机故障一键替换功能开发,对接容器平台
HULK 实现自动化节点替换,设计并实现 Region 选择算法与机房分配算法,优化替换流程风险卡控逻辑,支持跨 Region
机器申请,显著提升一键替换成功率并减少人工介入。
(3)平台稳定性保障与线上问题排查:定期参与 Oncall 值班,处理 CPU Busy、磁盘不足、慢查询、容灾不足等集群异常;
参与排查 Elasticsearch 进程异常退出无法自动拉起问题。
(4)运维工具与平台能力建设:开发集群资源治理工具,定期统计无 AppKey 或无机器集群并自动通知 SRE,对接 RDS 平
台 OpenAPI,提供集群周知成员查询能力