1、数据资源体系建设项目(北京博易数通技术有限公司)
核心职责:主导军地一体三级数据资源体系架构,设计标准规范体系和数据治理框架,参与制定覆盖数据采集、汇聚、治理、服务、管控流程等45项数据标准规范,构建纵向贯通、横向联通的PB级数据资源池与运行机制,提升数据保障能力55%+。
关键技术:以“云边协同+湖仓一体”数据架构为基础,通过DAMA数据管理体系构建数据治理标准体系框架,采用湖仓一体架构,集成Iceberg、Hadoop、Flink、Spark等关键技术,打通233单位500+类异构数据源链路,形成了支撑某部业务需求的统一数据服务平台,降低数据采集集成成本约70%,查询响应速度提升5倍。
个人成长:掌握数据资源体系级及安全体系设计,运用DAMA数据管理体系,沉淀数据治理方法论。
2、某数据中台项目(北京博易数通技术有限公司)
核心职责:提出基于边缘计算的数据融合治理框架,研制多级数据协同组件,打通总部—末端数据链路,解决10类异构数据集成难题,缩短数据链路延迟至秒级;同时运用知识图谱构建保障知识学习体系和对保障实体进行重要性评估。
关键技术:采用Flink/Spark分布式计算、Kafka实时管道、Hadoop架构、Hive数仓、知识图谱以及容器化技术,支撑总部—末端实时数据同步。
个人成长:攻克边缘计算+数据中台的技术融合,形成实时数据管道,探索一套可复制数据中台建设路径,获得科学技术进步二等奖。