交通行业数据集市

企业服务 数据服务 案例ID:169685
我不知道
5 年经验· 中国电信云计算公司
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

交通行业数据集市
项目描述:
为了提升研发人员对政企单位交通类需求的处理速度,部门领导决定在电信自有数据仓库基础上,根据交通行业客户的各类需求,开发对应的交通行业数据集市。包括职住、出行OD、通勤、人口分布等各类宽表。
整个集市以电信数据仓库为数据源,按照各主题需求,通过hive+spark的方式进行数据处理,生成对应的hive表。
集市项目部署在azkanban调度系统上,以事件依赖的形式依次触发并按天执行。
我的职责:
编写设计文档,主持设计评审;
优化OD算法,超速算法,出行算法等集市内核心算法;
支撑测试、平台等部门,协助程序测试及上线部署;
负责集市的版本更新和日常运营等。

交通行业数据集市

企业服务 · 数据服务 案例ID:169685
联系该工程师
微信扫码,建群沟通
作者: 我不知道 - 5年经验- 中国电信云计算公司

案例介绍

交通行业数据集市
项目描述:
为了提升研发人员对政企单位交通类需求的处理速度,部门领导决定在电信自有数据仓库基础上,根据交通行业客户的各类需求,开发对应的交通行业数据集市。包括职住、出行OD、通勤、人口分布等各类宽表。
整个集市以电信数据仓库为数据源,按照各主题需求,通过hive+spark的方式进行数据处理,生成对应的hive表。
集市项目部署在azkanban调度系统上,以事件依赖的形式依次触发并按天执行。
我的职责:
编写设计文档,主持设计评审;
优化OD算法,超速算法,出行算法等集市内核心算法;
支撑测试、平台等部门,协助程序测试及上线部署;
负责集市的版本更新和日常运营等。

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×