ID：291606
全力升级打怪的Allen
大数据开发工程师
- 公司信息：
- 上海大时信息科技有限公司
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 可工作日驻场（离职原因）
- 所在区域：
- 上海
- 浦东
技术能力
大数据：
1、熟练 Hadoop 生态圈，如 HDFS, Yarn, Spark, Hive, HBase,Zookeeper, Kafka等。
2、熟练使用 Python, Hive 的完成开发工作。熟悉 Spark-Streaming流式计算。
Java相关：
1、使用 Spring Boot, MyBatis 框架,完成电力数据的推送。
2、熟练使用 Idea, Git 开发工具,熟练掌握 Hive SQL 语句编写,有 Oracle 数据库的开发经验。
项目经验
味全云数仓项目
项目描述：使用腾讯的 EMR 集群，构建味全的云数仓项目，打通多个数据源，实现云数
据仓库的构建。
相关技术：Hive, Presto, Python, Shell, Spark 等
项目职责：
1、 数据接入 ODS,以及数仓中各层(DWD,DIM,ADS)的 ETL 清洗；
2、 将工作流程整理成规范型的操作文档，形成指导手册;
3、 和味全进行业务沟通,数据的校验,标签上线。
上海市异常电力统计项目
项目描述：使用 Spark 实现上海市的异常电力数据统计，并推送数据到数据中台。
相关技术：Spring Boot, Spark, Scala, Shell 等
项目职责：
1、 通过 Spark 计算上海异常电力的数值，并实现 Oracle 校验数据；
2、 将业务知识形成脑图，便于操作;
3、 通过 Spring Boot 调取 API 推送数据到数据中台。
相似人才推荐
-
500元/天后端开发工程师华为概要：爬虫、web开发、RPA、机器学习、java后端。熟悉Java、Python 、Javascrip具
-
1000元/天高级爬虫红包雨概要：1) 具备互联网产品前后端开发经验 2) 具备系统的计算机理论基础，有Python、Vue、Jav
-
500元/天后端开发工程师国家电网概要：掌握 JAVA 开发语言，有良好的编码习惯，具备良好的面向对象思想，熟悉常用的 Java 集合 熟
-
1500元/天项目经理青岛慧涵信息科技有限公司概要：15年开发经验全栈，微信小程序，支付宝小程序，app ，目前在职，有团队，现任团队经理。团队包括产 -
500元/天Lead Software Engineer晨星资讯(深圳)有限公司概要：熟练掌握Python(flask,gevent, orm, pandas)后端开发，有hadoop
-
600元/天ERP工程师万新（厦门）新材料有限公司概要：Sqlsever、powerBI、EXCEL、VBA、Python、Django、FineRepor -
600元/天高级研发工程师容联云通讯概要：1. 熟悉常用的 Java API，包括集合框架、I/O、Socket、JDBC、XML、反射等。
-
600元/天高级工程师北京某公司概要：熟练掌握Java基础及面向对象OOP编程思想，熟悉使用Lambda表达式，Stream流进行代码处
