机构板块重构

企业服务 数据服务 案例ID:179817
似然
1 年经验· 迈特望
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

1、数据导⼊导出:
(1)通过 DataX将机构数据导⼊到 hive 集群中;
(2)将计算完的业务指标通过sftp上传到基础模块;
(3)利⽤ DACP数据坊完成调度任务。
2、离线数仓:
(1)根据业务设计数仓分层结构,主要分为 STAGE、ODS、DWD、ST、SPLIT层;
(2)落地负责主题的各层建模与分析计算⼯作;
(3)对数据进⾏ ETL 操作,通过拉链表解决历史快照的问题;

机构板块重构

企业服务 · 数据服务 案例ID:179817
联系该工程师
微信扫码,建群沟通
作者: 似然 - 1年经验- 迈特望

案例介绍

1、数据导⼊导出:
(1)通过 DataX将机构数据导⼊到 hive 集群中;
(2)将计算完的业务指标通过sftp上传到基础模块;
(3)利⽤ DACP数据坊完成调度任务。
2、离线数仓:
(1)根据业务设计数仓分层结构,主要分为 STAGE、ODS、DWD、ST、SPLIT层;
(2)落地负责主题的各层建模与分析计算⼯作;
(3)对数据进⾏ ETL 操作,通过拉链表解决历史快照的问题;

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×