项目背景:某业务系统需支撑高频数据上报与实时查询,原同步架构耦合严重、高峰期易丢数据,且运维依赖人工操作效率低。
你的职责:主导异步任务上报链路重构。使用 PHP/Go 构建业务接口,将上报任务异步化写入 Kafka 解耦;消费端用 Go 消费并落库 ClickHouse,配合 Redis 缓存与 MySQL 存储;编写 Python/Shell 脚本实现日常数据校验与部署自动化。
结果产出:实现异步任务上报 Kafka 稳定流转,系统吞吐量提升 60%,高峰期零丢数;CK 查询响应耗时降至秒级;自动化脚本减少人工运维工时 70%,整体交付稳定获客户认可,具备完整远程协作与交付能力。