H
大数据开发
北京数势云创有限公司 · 5年经验
日薪：
￥500/8h
地点：
北京 海淀
时间：
下班后周六周日可工作日远程
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
熟练使用数据开发平台,使用数据平台进行同步导入,数据开发,指标加工,数据运维,以及对平
台问题排查和定位。
熟练掌握 Hadoop 及底层框架,了解 Hadoop 底层机制如 Yarn,MapReduce.了解 Yarn 的资源
申请流程和 MapReduce 的任务执行流程。
熟悉 Hive 架构，能够使用 Hql 语句进行 Hive 的数据分析，熟悉 Hive 的调优方案。
熟练掌握 Kimball 建模理论，对维度建模有一定的了解，有数据建模建设经验，有数据模型
分层设计思路和实践。
熟练掌握 Flume 日志收集系统以及拦截器操作，了解 Sqoop,能够使用 Sqoop 实现数据在多
框架之间的迁移。
熟练使用 FineBI，对数据进行可视化展示。
熟悉 Spark 架构与提交流程。
掌握 Linux 操作系统命令。
台问题排查和定位。
熟练掌握 Hadoop 及底层框架,了解 Hadoop 底层机制如 Yarn,MapReduce.了解 Yarn 的资源
申请流程和 MapReduce 的任务执行流程。
熟悉 Hive 架构，能够使用 Hql 语句进行 Hive 的数据分析，熟悉 Hive 的调优方案。
熟练掌握 Kimball 建模理论，对维度建模有一定的了解，有数据建模建设经验，有数据模型
分层设计思路和实践。
熟练掌握 Flume 日志收集系统以及拦截器操作，了解 Sqoop,能够使用 Sqoop 实现数据在多
框架之间的迁移。
熟练使用 FineBI，对数据进行可视化展示。
熟悉 Spark 架构与提交流程。
掌握 Linux 操作系统命令。
项目经验
项目名称：沃尔玛 O2O 控制塔
该项目为沃尔玛 O2O 订单数据统计分析项目，本项目主要通过分析订单数据，统计全国
不同渠道的订单量、拒签量、商品销量、单均出库时长、单均配送时长、拣货人效排名等指
标，同时根据渠道场景、地区、门店等维度去分析订单情况，将分析处理的落地到自研 BI
中制作仪表盘，运营人员根据告警和归因适度调整策略，保证订单作业高效运作。
技术架构：
Hdfs+DolphinScheduler +doris +自研 BI（数据开发平台）
责任描述：
1. 参与需求评审会，结合需求文档，梳理技术口径，进行数仓模型层设计和开发。
2. doris 表结构设计，设计事物事实表、维表、指标表等。
3. 编写 dorisSql 脚本，进行脚本调优并自测，最后提交测试。
4. 确保上线任务能顺利、按时进行，对失败或者未触发的任务进行分析及处理。
5. 将分析处理的数据落地到 BI 中，接入业务使用 。
项
该项目为沃尔玛 O2O 订单数据统计分析项目，本项目主要通过分析订单数据，统计全国
不同渠道的订单量、拒签量、商品销量、单均出库时长、单均配送时长、拣货人效排名等指
标，同时根据渠道场景、地区、门店等维度去分析订单情况，将分析处理的落地到自研 BI
中制作仪表盘，运营人员根据告警和归因适度调整策略，保证订单作业高效运作。
技术架构：
Hdfs+DolphinScheduler +doris +自研 BI（数据开发平台）
责任描述：
1. 参与需求评审会，结合需求文档，梳理技术口径，进行数仓模型层设计和开发。
2. doris 表结构设计，设计事物事实表、维表、指标表等。
3. 编写 dorisSql 脚本，进行脚本调优并自测，最后提交测试。
4. 确保上线任务能顺利、按时进行，对失败或者未触发的任务进行分析及处理。
5. 将分析处理的数据落地到 BI 中，接入业务使用 。
项
团队情况
整包服务：
其他开发
负责人：
大数据开发
团队成员：
后端工程师
案例展示 全部案例 >
H
有团队 · 可整包
大数据开发 · 5年经验 · 北京数势云创有限公司
0
累计接单
0
用户评价
0
被收藏
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
熟练使用数据开发平台,使用数据平台进行同步导入,数据开发,指标加工,数据运维,以及对平
台问题排查和定位。
熟练掌握 Hadoop 及底层框架,了解 Hadoop 底层机制如 Yarn,MapReduce.了解 Yarn 的资源
申请流程和 MapReduce 的任务执行流程。
熟悉 Hive 架构，能够使用 Hql 语句进行 Hive 的数据分析，熟悉 Hive 的调优方案。
熟练掌握 Kimball 建模理论，对维度建模有一定的了解，有数据建模建设经验，有数据模型
分层设计思路和实践。
熟练掌握 Flume 日志收集系统以及拦截器操作，了解 Sqoop,能够使用 Sqoop 实现数据在多
框架之间的迁移。
熟练使用 FineBI，对数据进行可视化展示。
熟悉 Spark 架构与提交流程。
掌握 Linux 操作系统命令。
台问题排查和定位。
熟练掌握 Hadoop 及底层框架,了解 Hadoop 底层机制如 Yarn,MapReduce.了解 Yarn 的资源
申请流程和 MapReduce 的任务执行流程。
熟悉 Hive 架构，能够使用 Hql 语句进行 Hive 的数据分析，熟悉 Hive 的调优方案。
熟练掌握 Kimball 建模理论，对维度建模有一定的了解，有数据建模建设经验，有数据模型
分层设计思路和实践。
熟练掌握 Flume 日志收集系统以及拦截器操作，了解 Sqoop,能够使用 Sqoop 实现数据在多
框架之间的迁移。
熟练使用 FineBI，对数据进行可视化展示。
熟悉 Spark 架构与提交流程。
掌握 Linux 操作系统命令。
项目经验
项目名称：沃尔玛 O2O 控制塔
该项目为沃尔玛 O2O 订单数据统计分析项目，本项目主要通过分析订单数据，统计全国
不同渠道的订单量、拒签量、商品销量、单均出库时长、单均配送时长、拣货人效排名等指
标，同时根据渠道场景、地区、门店等维度去分析订单情况，将分析处理的落地到自研 BI
中制作仪表盘，运营人员根据告警和归因适度调整策略，保证订单作业高效运作。
技术架构：
Hdfs+DolphinScheduler +doris +自研 BI（数据开发平台）
责任描述：
1. 参与需求评审会，结合需求文档，梳理技术口径，进行数仓模型层设计和开发。
2. doris 表结构设计，设计事物事实表、维表、指标表等。
3. 编写 dorisSql 脚本，进行脚本调优并自测，最后提交测试。
4. 确保上线任务能顺利、按时进行，对失败或者未触发的任务进行分析及处理。
5. 将分析处理的数据落地到 BI 中，接入业务使用 。
项
该项目为沃尔玛 O2O 订单数据统计分析项目，本项目主要通过分析订单数据，统计全国
不同渠道的订单量、拒签量、商品销量、单均出库时长、单均配送时长、拣货人效排名等指
标，同时根据渠道场景、地区、门店等维度去分析订单情况，将分析处理的落地到自研 BI
中制作仪表盘，运营人员根据告警和归因适度调整策略，保证订单作业高效运作。
技术架构：
Hdfs+DolphinScheduler +doris +自研 BI（数据开发平台）
责任描述：
1. 参与需求评审会，结合需求文档，梳理技术口径，进行数仓模型层设计和开发。
2. doris 表结构设计，设计事物事实表、维表、指标表等。
3. 编写 dorisSql 脚本，进行脚本调优并自测，最后提交测试。
4. 确保上线任务能顺利、按时进行，对失败或者未触发的任务进行分析及处理。
5. 将分析处理的数据落地到 BI 中，接入业务使用 。
项
团队情况
服务范围：
团队构成：
负责人(大数据开发)
|
核心队员：后端工程师
立即沟通
