搁浅
算法工程师
杭州中奥科技有限公司 · 6年经验
日薪：
￥600/8h
地点：
合肥 全区
时间：
下班后
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
1.熟悉的Java Python 代码开发
2.熟悉Linux 操作系统环境
3.熟悉MySQL、Oracle 数据库
4.熟悉hiveSQL开发，熟悉在hiveSQL开发的调优和问题排查
5.熟悉DataX、FlinkCDC等ETL工具。
6.熟悉阿里大数据平台dataworks 获得阿里云大数据ACP 证书
7.熟悉Hadoop 整个框架的组件，掌握Hadoop 集群的搭建hdfs 读写机制 yarn 的工作原理等
8.熟悉 zookeeper 选举机制
9.熟悉Kafka 消息队列以及组件对接
10.熟悉 spark， 理解 spark 工作机制、RDD 的任务划分及操作，熟悉 sparkStreaming 流式计
算。
11.项目数据流程开发文档输出，初级数据工程师的带教，有一定小团队的带队经验。
软件工程专业 目前已工作六年 开发过程做过组长、后升职项目经理 目前仍在开发一线
2.熟悉Linux 操作系统环境
3.熟悉MySQL、Oracle 数据库
4.熟悉hiveSQL开发，熟悉在hiveSQL开发的调优和问题排查
5.熟悉DataX、FlinkCDC等ETL工具。
6.熟悉阿里大数据平台dataworks 获得阿里云大数据ACP 证书
7.熟悉Hadoop 整个框架的组件，掌握Hadoop 集群的搭建hdfs 读写机制 yarn 的工作原理等
8.熟悉 zookeeper 选举机制
9.熟悉Kafka 消息队列以及组件对接
10.熟悉 spark， 理解 spark 工作机制、RDD 的任务划分及操作，熟悉 sparkStreaming 流式计
算。
11.项目数据流程开发文档输出，初级数据工程师的带教，有一定小团队的带队经验。
软件工程专业 目前已工作六年 开发过程做过组长、后升职项目经理 目前仍在开发一线
项目经验
拱墅经济管理平台：
1、IRS云上数据，excel，接口数据，爬虫数据等数据源的数据对接工作，主要是与第三方公司以及客户对接数据，并将获取到的数据通过ETL工具同步到MySQL
2、对各类数据按照业务逻辑进行开发，可复用数据的抽取成表
3、异源数据通过DataX同步MySQL数据库后，按照数据更新情况增量或全量通过数据集成抽取到dataworks建立ods层。
4、数据格式统一化标准建立，清洗完成落到dwd层。
5、按照业务需求通过dataworks平台各类数据完成HiveSQL开发，轻高度的sql开发完成DWS层的数据汇总，各类数据关联维度形成宽表。
6、根据大屏指标的业务需求完成指标计算的SQL开发落地ADS层。
7、各项调度任务运维工作
8、项目开发过程安排初级工程师的任务分配、对初级工程师完成的SQL调优以及不足技能点的带教工作。
微信机器人开发：
开发自动回复微信机器人并多地部署
1、IRS云上数据，excel，接口数据，爬虫数据等数据源的数据对接工作，主要是与第三方公司以及客户对接数据，并将获取到的数据通过ETL工具同步到MySQL
2、对各类数据按照业务逻辑进行开发，可复用数据的抽取成表
3、异源数据通过DataX同步MySQL数据库后，按照数据更新情况增量或全量通过数据集成抽取到dataworks建立ods层。
4、数据格式统一化标准建立，清洗完成落到dwd层。
5、按照业务需求通过dataworks平台各类数据完成HiveSQL开发，轻高度的sql开发完成DWS层的数据汇总，各类数据关联维度形成宽表。
6、根据大屏指标的业务需求完成指标计算的SQL开发落地ADS层。
7、各项调度任务运维工作
8、项目开发过程安排初级工程师的任务分配、对初级工程师完成的SQL调优以及不足技能点的带教工作。
微信机器人开发：
开发自动回复微信机器人并多地部署
搁浅
算法工程师 · 6年经验 · 杭州中奥科技有限公司
0
累计接单
0
用户评价
0
被收藏
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
1.熟悉的Java Python 代码开发
2.熟悉Linux 操作系统环境
3.熟悉MySQL、Oracle 数据库
4.熟悉hiveSQL开发，熟悉在hiveSQL开发的调优和问题排查
5.熟悉DataX、FlinkCDC等ETL工具。
6.熟悉阿里大数据平台dataworks 获得阿里云大数据ACP 证书
7.熟悉Hadoop 整个框架的组件，掌握Hadoop 集群的搭建hdfs 读写机制 yarn 的工作原理等
8.熟悉 zookeeper 选举机制
9.熟悉Kafka 消息队列以及组件对接
10.熟悉 spark， 理解 spark 工作机制、RDD 的任务划分及操作，熟悉 sparkStreaming 流式计
算。
11.项目数据流程开发文档输出，初级数据工程师的带教，有一定小团队的带队经验。
软件工程专业 目前已工作六年 开发过程做过组长、后升职项目经理 目前仍在开发一线
2.熟悉Linux 操作系统环境
3.熟悉MySQL、Oracle 数据库
4.熟悉hiveSQL开发，熟悉在hiveSQL开发的调优和问题排查
5.熟悉DataX、FlinkCDC等ETL工具。
6.熟悉阿里大数据平台dataworks 获得阿里云大数据ACP 证书
7.熟悉Hadoop 整个框架的组件，掌握Hadoop 集群的搭建hdfs 读写机制 yarn 的工作原理等
8.熟悉 zookeeper 选举机制
9.熟悉Kafka 消息队列以及组件对接
10.熟悉 spark， 理解 spark 工作机制、RDD 的任务划分及操作，熟悉 sparkStreaming 流式计
算。
11.项目数据流程开发文档输出，初级数据工程师的带教，有一定小团队的带队经验。
软件工程专业 目前已工作六年 开发过程做过组长、后升职项目经理 目前仍在开发一线
项目经验
拱墅经济管理平台：
1、IRS云上数据，excel，接口数据，爬虫数据等数据源的数据对接工作，主要是与第三方公司以及客户对接数据，并将获取到的数据通过ETL工具同步到MySQL
2、对各类数据按照业务逻辑进行开发，可复用数据的抽取成表
3、异源数据通过DataX同步MySQL数据库后，按照数据更新情况增量或全量通过数据集成抽取到dataworks建立ods层。
4、数据格式统一化标准建立，清洗完成落到dwd层。
5、按照业务需求通过dataworks平台各类数据完成HiveSQL开发，轻高度的sql开发完成DWS层的数据汇总，各类数据关联维度形成宽表。
6、根据大屏指标的业务需求完成指标计算的SQL开发落地ADS层。
7、各项调度任务运维工作
8、项目开发过程安排初级工程师的任务分配、对初级工程师完成的SQL调优以及不足技能点的带教工作。
微信机器人开发：
开发自动回复微信机器人并多地部署
1、IRS云上数据，excel，接口数据，爬虫数据等数据源的数据对接工作，主要是与第三方公司以及客户对接数据，并将获取到的数据通过ETL工具同步到MySQL
2、对各类数据按照业务逻辑进行开发，可复用数据的抽取成表
3、异源数据通过DataX同步MySQL数据库后，按照数据更新情况增量或全量通过数据集成抽取到dataworks建立ods层。
4、数据格式统一化标准建立，清洗完成落到dwd层。
5、按照业务需求通过dataworks平台各类数据完成HiveSQL开发，轻高度的sql开发完成DWS层的数据汇总，各类数据关联维度形成宽表。
6、根据大屏指标的业务需求完成指标计算的SQL开发落地ADS层。
7、各项调度任务运维工作
8、项目开发过程安排初级工程师的任务分配、对初级工程师完成的SQL调优以及不足技能点的带教工作。
微信机器人开发：
开发自动回复微信机器人并多地部署
立即沟通
