【项目经验一】
项目名称：神龙大数据平台二期(2018.12-2019.07)
开发环境：IDEA、JDK1.8
主要技术：SpringBoot、MyBatis、Redis、SpringMVC、MySQL、ImPala、Kettle、Jenkins、
项目介绍：
该项目是在神龙汽车公司已有大数据平台基础上进行的二期项目开发，项目使用Kettle加Sqoop对各个子系统的数据进行采集入库到Hadoop平台。使用SpringBoot加Jdbc的方式开发RESTFul接口供前端调用ImPala数据库中的数据。
报表模块分为车辆健康预警模块、定保客户招揽模块、网点评价模块、车辆全生命周期查询、备件经营模块、售后经营报表、回厂时间预测模型、保客流失预警模型、数字营销报表。
职责描述：
1、负责将业务系统数据采集到大数据平台，业务系统包括CWEB、BPVN、BVVN、NGIC、DMS。
2、负责Kettle作业的开发设计与监控,数据抽取过程中状态写入Mysql数据库表。
3、负责后端接口开发和前后端接口调试。

【项目经验二】
项目名称：智网大数据平台(2018.07-2018.12)
开发环境：SecurceCRT、Centos7.2
主要技术：Shell、Jenkins
项目介绍：
在大数据时代的环境下，公司需要有效利用多源、多结构数据，安全地进行数据加工和增值，建设公司自有数据能力并进行转化。因此公司对于大数据平台的数据生产（汇聚存储多源数据、自动化清洗与入库）、分析加工能力（公司经营分析报告、公司数据洞察报告）、数据安全（严格保证数据安全、多租户环境用户控制）和能力开放（多样化对外开放能力、平台能力模块化租赁）四个方面有极高的需求。
职责描述：
1、编写shell脚本每天定时采集接口机数据并入库到Impala数据库中。接口机数据包括JPO、AMSP、廊坊。
2、负责在线商店、TBOSS等结构化数据采集到Impala数据库中。
3、编写shell脚本对AMSP数据进行数据清洗操作。
4、编写shell脚本对接口机数据、入库后Impala表中的数据进行监控。
5、通过Jenkins对服务器之间的脚本进行作业调度与监控。
6、周期性检查每天的数据是否都入库，对于缺失的数据采取对应的措施。