负责日志的自动采集,清洗,可视化等全链路的数据流程开发。首先通过flume组件进行原始日志的清洗,清洗出具体的key value数据格式,存储到Hdfs分布式文件系统中,然后使用spark进行清洗后的数据统计和结构开发,将清洗后的数据写入oracle数据库中,然后使用前端vue进行数据可视化
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者