日志大数据清洗分析系统

基本信息

案例ID:177369

技术顾问:长安城 - 4年经验 - 支付宝

联系沟通

微信扫码,建群沟通

项目名称:日志大数据清洗分析系统

所属行业:文化娱乐 - 旅游

->查看更多案例

案例介绍

负责日志的自动采集,清洗,可视化等全链路的数据流程开发。首先通过flume组件进行原始日志的清洗,清洗出具体的key value数据格式,存储到Hdfs分布式文件系统中,然后使用spark进行清洗后的数据统计和结构开发,将清洗后的数据写入oracle数据库中,然后使用前端vue进行数据可视化

相似案例推荐

其他人才的相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系聘用方端客服
联系聘用方端客服