oracle、mysql、hive等数据库搭建与使用
shell、python编程,编写脚本
掌握kettle转换,加载,清洗
熟悉linux环境与搭建
FineReport报表工具使用
了解PowerDesigner建模工具
大数据sql代码编写,以及平台的搭建
redais,kafka,flink,hbas,hive,nginx中间件的搭建
深圳迅策科技有限公司
中信项目
1.使用客户提供的数据平台进行脚本和调度配置以及每日的跑批,整理巡检快报,数据核对
2. 按照业务系统和主题梳理mapping映射,详细的梳理每层级字段的取值源系统字段
3.参与需求文档、设计方案的讨论及评审以及整理验收文档
4.日常运维以及根据客户的需求进行部署一些软件程序,编写shell脚本
民生项目
1.对公司数据中台服务,nginx、kafka、flink的部署,功能测试以及后续的升级和优化,漏洞扫描及处理
2.使用moia进行调度配置,api接口以及各平台信号调用测试与连通,将数据从源系统经过加工清洗到集市层, 得到客户所需要的主题数据
3.上线文档,部署文档以及验收的各类文档的整理
4.对客户各个系统之间信号的调试
招商项目
1.对公司数据中台服务、CDH大数据平台、调度平台的部署,功能测试以及后续的升级和优化,漏洞的检测和升 级
2. 负责每个月人行,中保登,统信,受托,风险监控,指标采集的报送
3.平时需求的上线文档,部署文档以及验收文档等各类文档的整理
4.日常运维,对客户新增需求的需求文档参与、设计方案的讨论及评审以及整理验收文档