数仓开发:主导多数据源医疗数据平台模型设计开发,拉通业务深度梳理新旧及迁移数据关系,编写 DDL 构建五层数仓架构,并规范化核心指标集成PowerBI建立动态监视体系。支持两个系统上线,形成TB级数据资产。
ELT管道构建:抽取、集成HDFS数据,基于存储过程(SP)集成清洗、转换、核对功能搭建 ETL管道。
Workflow编排:基于 AWS Step Functions 设计分布式工作流,编写调度底层lambda函数与Glue脚本,串联Glue与SP实现数据分布并行处理,结果加密存储S3并自动分发邮件组
AWS运维:AWS集群及数据库日常运维,定时pipeline流转队列设计,子账户体系设计(权限隔离、自动赋权);更新 10 +技术文档,系统沉淀项目技术资产,显著提升项目可维护性。