张全飞-Jasper

大数据高级开发工程师
去哪儿网/深信服 · 3年经验
张全飞-Jasper
日薪: ¥1000/8h
地点: 深圳 福田
时间: 下班后周六周日
ID:198431 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Spring Boot Spring MyBatis Kafka Hadoop Spark Flink HBase 机器学习 Kubernetes Docker
掌握的技术包括如下四大类:
1.Hadoop、Hbase、Storm、Phoenix、Kafka、Spark、Flink 等大数据相关技术;
2.Spring、Springmvc、SpringBoot、Mybatis 等应用开发相关的技术框架;
3.Docker、kubernetes、ambari(HDP)、CDH等大数据平台搭建相关的技术;
4.Kmean、Knn、SVM 支持向量机、决策树、神经网络等机器学习相关的算法。

《数据湖治理》

将 HBase、Hive、HDFS 等组件的有效元数据实时同步到该平台中并进行集中式管理。主要功能包括:数据的血缘关系、数据的预览、数据检索、数据目录等,并且整合 ranger 到这个平台下面,进行对元数据的安全管理。此外开发出针对这个项目的批量创建数据目录和打标签工具。

《数据监听》
监控业务数据库所有数据的变化,将变化的数据推送给消息总线,避免轮询数据库造成的数据库压力。主要功能包括:抓取并解析 binlog,用户订阅,消息推送,负载均衡(topic 分区,机器均衡启动数据源),高可用(某台机器节点宕机,其他节点会启动这个节点上面的数据源等任务)

《大数据平台搭建与开发》
使用到的主要技术是 ambari。 主要做了 ambari 的搭建与开发,自定义 ambari 服务:将其他服务整合到 ambari 里面,通过ambari 进行集中式的监控和管理。
张全飞-Jasper ID:198431 复制

张全飞-Jasper

大数据高级开发工程师 · 3年经验 · 去哪儿网/深信服
城市深圳 福田 日薪1000元/8h 时间 下班后周六周日
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Spring Boot Spring MyBatis Kafka Hadoop Spark Flink HBase 机器学习 Kubernetes Docker
掌握的技术包括如下四大类:
1.Hadoop、Hbase、Storm、Phoenix、Kafka、Spark、Flink 等大数据相关技术;
2.Spring、Springmvc、SpringBoot、Mybatis 等应用开发相关的技术框架;
3.Docker、kubernetes、ambari(HDP)、CDH等大数据平台搭建相关的技术;
4.Kmean、Knn、SVM 支持向量机、决策树、神经网络等机器学习相关的算法。

项目经验

《数据湖治理》

将 HBase、Hive、HDFS 等组件的有效元数据实时同步到该平台中并进行集中式管理。主要功能包括:数据的血缘关系、数据的预览、数据检索、数据目录等,并且整合 ranger 到这个平台下面,进行对元数据的安全管理。此外开发出针对这个项目的批量创建数据目录和打标签工具。

《数据监听》
监控业务数据库所有数据的变化,将变化的数据推送给消息总线,避免轮询数据库造成的数据库压力。主要功能包括:抓取并解析 binlog,用户订阅,消息推送,负载均衡(topic 分区,机器均衡启动数据源),高可用(某台机器节点宕机,其他节点会启动这个节点上面的数据源等任务)

《大数据平台搭建与开发》
使用到的主要技术是 ambari。 主要做了 ambari 的搭建与开发,自定义 ambari 服务:将其他服务整合到 ambari 里面,通过ambari 进行集中式的监控和管理。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏