职责:数仓建模 + 指标体系建设 + 数据治理
在Ubuntu 系统Arm架构下完成部署大数据管理平台和Docker;
负责存算平台整体交付,完成多种数据存储与计算组件选型与部署(HDFS、S3、ClickHouse、ES、Redis、达梦等);
基于FlinkSQL实现数据清洗加工落库到Dameng,;
在缺乏真实业务数据情况下,基于业务场景构建模拟数据与演示方案,支撑系统功能验证与交付;
负责多厂商(6家)平台使用培训与数据接入链路技术支持,输出数据接入与使用规范
成果:
完成多类型数据存储与计算平台交付,支撑多源异构数据统一管理;
构建数据处理链路(采集→清洗→计算→落库),满足业务数据处理需求;
支撑多厂商系统接入,实现数据共享与接口调用能力;