项目名称: 华为E+IOC营销分析 & 管道预测系统重构
项目时间: 2023/08 – 至今
项目角色: 数据架构负责人
技术栈: Hive、Spark、PySpark、SQL
项目描述:
华为对公营销核心系统,承载商机量化研判与经营预测。针对数据链路混乱、亿级ETL性能瓶颈等问题,主导完成全量数据架构重构。
工作内容:
设计ODS/DWD/DWS/DM四层数仓架构与全链路ETL方案,完成分布式计算资源调度规划,从0到1搭建完整数仓体系。
诊断并优化亿级数据SQL慢查询,核心作业性能提升50%以上。
落地AI辅助开发(Claude Code+GLM5.1),实现SQL自动重构与质量规则编写,团队效率提升30%。
项目成果: 系统2个月准时上线,获华为项目经理及业务方高度认可,获职级晋升。