ID：284955
用户7299397569
资深数据工程师
- 公司信息：
- 平安普惠企业管理咨询有限公司
- 工作经验：
- 8年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 周六
- 周日
- 所在区域：
- 北京
- 海淀
技术能力
从事大数据相关开发工作8年，熟练掌握大数据平台的搭建运维以及各种组建的使用，擅长离线Hive开发，数据仓库从0-1，Spark的各种应用，包括Spark 底层Api、SparkSQL、SparkStreaming对接kafka等，熟练操作HBase、ElasticSearch，以及两者联合使用（es作为hbase的二级索引等），熟悉Flink相关应用开发，利用Flink+Kafka实现实时数仓等
项目经验
1.数据仓库从传统SQLServer迁移到大数据平台，包括整个集群的搭建运维以及离线数据仓库从0-1整个实现；
2.使用java实现从Kafka实时消费数据，写入明细数据到HBase，并将部分字段写入ElasticSearch实现HBase二级索引，最终达到数据实时查询，实时统计等功能；
3.使用flink cdc实现数据在kafka中构建实时数仓，做相关指标统计等。
相似人才推荐
-
500元/天算法研究员杭州数政科技有限公司概要：机器学习算法，如线性回归、决策树，,逻辑回归，贝叶斯等。数据分析pandas,numpy,sql等。
-
500元/天数据采集汽车制造业概要：python数据采集！python数据采集！python数据采集！ 重要的事情说三遍 帮你搞定数据
-
600元/天技术支持工程师杭州分叉智能科技有限公司概要：数据库: 应用和操作当前主流数据库，例如MySQL/SQLserver/MongoDB/Redis等
-
500元/天TD金川概要：熟练Python编程及调用其基本库和其他第三方库(numpy、pandas、sklearn、open -
700元/天研究助理香港中文大学概要：熟悉各类计算机视觉相关深度学习方法，熟悉各类互联网公司面试题。 + 天池 ICME-2022 安全
-
500元/天无无概要：作为一名资深的技术顾问，我拥有丰富的技术知识和实践经验，专注于爬虫开发、网页制作和数据分析等多个关键
-
500元/天uibot无概要：uibot RPA 办公自动化机器人，模拟操作，例如微信群发，表格读和写入，网页抓取，自动填写，各种
-
500元/天后端工程师西安瑞杰开发概要：本人主流编程语言为C和Python，网站开发主要采用Python中的大型框架，有网站开发经历，做过一
