技术能力

1、熟悉hbase、hive、impala、flume、kafka、storm、spark、spark streaming、spark SQL 、Elasticsearch等大数据框架；
2、掌握的编程语言有java、scala、python、shell，能编写简单的运维脚本；
3、熟悉微信小程序和爬虫开发；
4、熟悉web网站开发和各种框架，例如ssm、ssh、springboot、angular4、bootstrap、jQuery、echarts等前端框架；
5、熟悉redis、hbase等nosql数据库；
6、熟悉MySQL、Oracle等关系型数据库；
7、熟悉常见的机器学习算法，能根据不同的场景选用合适的算法模型；
8、有较强的分析和解决问题的能力，能帮助客户理清需求和发掘新的需求；
9、熟悉系统平台上软件的维护和升级；
10、有一定的编写技术文档的文字能力；

项目经验

2017年9月-2018年8月 项目名称：数据质量稽查项目
项目介绍：该项目目的是为了定时检查数据，起到告警监控的效果。其中涉及到大的技术或者框架包括Angular4 和springboot。底层依赖外部存储介质MySQL、ElasticSearch、hdfs，计算引擎依赖 spark1.6.0。测量结果如果超出用户在创建模型时设置的阀值，页面会显示“告警”信息，同时后台也会调用邮件服务先相关人员发送邮件告警，及时处理有问题的数据。
主要职责：
1、项目架构设计、搭建；
2、与业务方沟通需求；
3、模块开发；
4、项目部署测试；
5、项目汇报；
6、文档编写；
2017年2月-2017年9月 项目名称：广州网络运营数据应用平台研究项目
项目介绍：网络运营数据应用研究项目主要功能是为了实现与电信客户通信行为相关的数据采集、处理、存储、建模和应用全流程的客户行为挖掘分析及验证，协助构建电信客户通信行为标签库及验证，帮助企业更加深入了解客户的行为，从而进行精准营销。
主要职责：
1、数据采集并整合；
2、根据业务方需求编写代码；
3、测试完成后部署到生产系统；
4、解决平台日常出现的问题故障；
2016年12月-2017年2月 项目名称：防范通讯信息诈骗电话能力提升及应用支撑项目
项目介绍：防范通讯信息诈骗电话能力提升及应用支撑项目，主要是对防范通讯信息诈骗系统平台及各应用模块进行数据安全性、可靠性、一致性的测试，完成测试方案制定、系统性能迭代测试、结果分析以及提出解决方案完成相应工具手段的部署，提升系统可靠性。
主要职责：
1、模块开发；
2、平台日常运维；
3、项目管理；
4、编写文档；
2015年6月-2017年2月　项目名称：广州人才服务中心信息管理系统
项目介绍：该系统包括ERP平台上的OA系统、CRM系统和cms系统，项目整体架构采用java语言编写ssh架构语言编写，其中包括用户管理、系统管理、流程审批、后台管理、内容管理、前端展示等等；
主要职责：
1、模块开发；
2、需求设计；
3、接口对接，项目联调；
4、平台运维；

团队情况