大数据项目组业务运维
各分公司,各个业务产生的数据,按规则需求采集数据, 其中需要用到vpn、ssh、FTP、sftp、bash、python加密码、解密等;
按规则处理,对数据进行清洗、 存储等, 并持续优化;
存储到hdfs和入库到hive里面,提供其他应用查看调用;
相关文档的编写、以及其他相关的任务;
公司业务运维
测试服务器、生产服务器的安装、部署、更新,apache、nginx、tomcat、mysql、redis、Jenkins、git服务等应用软件的安装、调试与优化等;
负责处理系统方面日常变更、控制突发情况,对疑难问题进行分析并解决;
运用Git、Jenkins、docker等持续集成工具,完善的代码版本管理与自动化部署,提高应用调整的操作效率,增强系统可用性;
保障服务与数据库的稳定运行,检查并消除系统安全隐患;
负责数据备份、数据监控、应急响应、故障排除、编写数据分析报告等;
公司各个IT相关的各云平台账号管理;