航空经营数据看板与ETL优化

企业服务数据服务案例ID：249036

孙某某

10 年经验· comac

微信扫码沟通，客服可协助直接对接工程师；如当前档期不合，也可继续推荐相似案例作者。

案例介绍

面向航材共享与销售经营分析，承担从SAP、Oracle、MySQL等数据源到数据看板的ETL链路建设，使用DataWorks完成离线同步，并将CSV、Parquet数据文件存储至OSS。针对K8s环境中约40个全量刷新任务运行困难的问题，将计算链路优化为DuckDB+Parquet模式，统一任务数据源，并完善环境隔离、定时调度、失败告警、数据回写和质量校准，提高了全量计算效率与数据稳定性。

案例图片

共 6 张

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

查看该工程师的更多案例 >

相似案例推荐

物联网

具备完整全栈开发能力，负责物联网项目后台设备数据接入服务、平

物联网

具备完整全栈开发能力，负责物联网项目后台设备数据接入服务、平

贵州省烟草综合系统

贵州省烟草综合系统

搭建全省烟草公司智慧平台，提高烟草行业信息化水平、优化业务流

企业CMS网站

企业CMS网站

CostBOM 是一个基于 Springboot 框架深度定

数据仓库

数据仓库数据仓库（DW）是面向分析的**专用数据存储平台

智慧工地

项目采用 spring cloud alibaba 微服务

航空经营数据看板与ETL优化

企业服务 · 数据服务案例ID：249036

联系该工程师

微信扫码，建群沟通

作者：孙某某 - 10年经验- comac

案例介绍

面向航材共享与销售经营分析，承担从SAP、Oracle、MySQL等数据源到数据看板的ETL链路建设，使用DataWorks完成离线同步，并将CSV、Parquet数据文件存储至OSS。针对K8s环境中约40个全量刷新任务运行困难的问题，将计算链路优化为DuckDB+Parquet模式，统一任务数据源，并完善环境隔离、定时调度、失败告警、数据回写和质量校准，提高了全量计算效率与数据稳定性。

案例图片

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

航空经营数据看板与ETL优化

查看该工程师的更多案例

相似案例推荐

物联网

具备完整全栈开发能力，负责物联网项目后台设备数据接入服务、平
物联网

具备完整全栈开发能力，负责物联网项目后台设备数据接入服务、平
贵州省烟草综合系统

搭建全省烟草公司智慧平台，提高烟草行业信息化水平、优化业务流
企业CMS网站

CostBOM 是一个基于 Springboot 框架深度定
数据仓库

数据仓库数据仓库（DW）是面向分析的**专用数据存储平台
智慧工地

项目采用 spring cloud alibaba 微服务

发布任务

企业点击发布任务，工程师会在任务下报名，招聘专员也会在 1 小时内与您联系确认。

点击发布任务

1小时精推人才

需求方专属客服，免费梳理匹配

需求方客服微信二维码

扫码加微信 · 客服人工对接

更多案例联系该工程师

客服看中这位工程师了？客服帮你 1 小时对接沟通 → ×