---

大数据开发工程师
上海朋数信息科技有限公司 · 5年经验
---
日薪: ¥500/8h
地点: 上海 浦东
时间: 下班后周六周日
ID:252058 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Kafka Solr Java Python MySQL MongoDB Spark HBase ZooKeeper Ansible Linux Spring Boot Spring MyBatis Hadoop
熟练使用Java Python 等编程语言,了解 scala。
熟悉Spring SpringBoot Mybatis等开源项目,能够合理进行技术选型,善于解决问题。
熟悉HDFS和MapReduce的实现原理,具有一定的Hadoop集群维护能力。
熟练使用Spark内存计算框架。
熟练使用MongoDB,Hbase等NoSql数据库以及Solr搜索引擎。
熟练使用Kafka Zookeeper等大数据框架。
熟练掌握Mysql关系型数据库,具有一定的Sql优化能力。
熟练使用kettle工具用于数据同步,并对job进行维护。
熟练使用ansible tower进行自动化部署任务。
熟练使用Linux系统及常用命令。
熟悉docker容器化技术。

项目:大数据基础服务设施建设
项目描述:该项目主要为公司搭建大数据基础服务平台,把数据存储到Hadoop分布式文件系统上,使用Saprk或Java程序对数据进行清洗工作,并提供对数据的实时同步,备份等服务。为风控以及报告业务提供API接口。
责任描述:
使用Java对MongoDB中数据进行ETL。
实时同步MongoDB上的数据到Mysql关系型数据库。
实时同步Mysql上的数据到Mysql。
提供操作Solr以及Hbase的各种API。
使用ansible进行自动化部署。
使用docker进行一系列测试工作。
--- ID:252058 复制

---

大数据开发工程师 · 5年经验 · 上海朋数信息科技有限公司
城市上海 浦东 日薪500元/8h 时间 下班后周六周日
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Kafka Solr Java Python MySQL MongoDB Spark HBase ZooKeeper Ansible Linux Spring Boot Spring MyBatis Hadoop
熟练使用Java Python 等编程语言,了解 scala。
熟悉Spring SpringBoot Mybatis等开源项目,能够合理进行技术选型,善于解决问题。
熟悉HDFS和MapReduce的实现原理,具有一定的Hadoop集群维护能力。
熟练使用Spark内存计算框架。
熟练使用MongoDB,Hbase等NoSql数据库以及Solr搜索引擎。
熟练使用Kafka Zookeeper等大数据框架。
熟练掌握Mysql关系型数据库,具有一定的Sql优化能力。
熟练使用kettle工具用于数据同步,并对job进行维护。
熟练使用ansible tower进行自动化部署任务。
熟练使用Linux系统及常用命令。
熟悉docker容器化技术。

项目经验

项目:大数据基础服务设施建设
项目描述:该项目主要为公司搭建大数据基础服务平台,把数据存储到Hadoop分布式文件系统上,使用Saprk或Java程序对数据进行清洗工作,并提供对数据的实时同步,备份等服务。为风控以及报告业务提供API接口。
责任描述:
使用Java对MongoDB中数据进行ETL。
实时同步MongoDB上的数据到Mysql关系型数据库。
实时同步Mysql上的数据到Mysql。
提供操作Solr以及Hbase的各种API。
使用ansible进行自动化部署。
使用docker进行一系列测试工作。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏