海贼王

高级java工程师
奥飞集团 · 5年经验
海贼王
日薪: ¥800/8h
地点: 上海 全区
时间: 下班后周六周日
ID:111113 复制

2
接单数
0
评价数
0
收藏数
100%
五星率

AI 技能提取 | Java Spring MyBatis CSS Elasticsearch Hadoop Spark
精通java语言
熟悉大数据生态圈,熟悉hadoop和spark的批量处理和流式处理
对搜索技术elasticsearch有良好的认识,为公司的开发自主查询系统
熟悉javaweb开发,熟练使用spring mybatis等框架,对mvc,多线程开发有深刻的认识,前端js,css也可以胜任!

Java + Hadoop + Hive + HBase(软件环境)该项目是一个日志分析系统,首先使用Shell脚本每天定时将日志数据导入到HDFS中,通过分布式hadoop集群处理网站每天产生的日志文件,分析出网站的浏览量PV,访客数UV(其中包括新访客数和新访客比例),每天访问网站的IP数、跳出率、平均访问时长/访问页数、重点用户等信息,统计每天注册成为网站会员人数等。将MapReduce清洗后的数据使用HBase存储,使其能够使用ip、时间查询,使用Hive对数据进行分析处理,将Hive处理后的数据使用Sqoop导入到MySQL中,提供视图工具供用户使用,给网站管理人员用于决策,其中明细数据使用HBase查询、指标使用MySQL。

已被预约 2 次,预约方未评价,系统默认 ★ 5星 好评。
海贼王 ID:111113 复制

海贼王

高级java工程师 · 5年经验 · 奥飞集团
城市上海 全区 日薪800元/8h 时间 下班后周六周日
2
累计接单
100%
五星好评率
0
用户评价
0
被收藏

信用行为

2
接单数
0
评价数
0
收藏数
100%
五星率

技术能力

AI 技能提取 | Java Spring MyBatis CSS Elasticsearch Hadoop Spark
精通java语言
熟悉大数据生态圈,熟悉hadoop和spark的批量处理和流式处理
对搜索技术elasticsearch有良好的认识,为公司的开发自主查询系统
熟悉javaweb开发,熟练使用spring mybatis等框架,对mvc,多线程开发有深刻的认识,前端js,css也可以胜任!

项目经验

Java + Hadoop + Hive + HBase(软件环境)该项目是一个日志分析系统,首先使用Shell脚本每天定时将日志数据导入到HDFS中,通过分布式hadoop集群处理网站每天产生的日志文件,分析出网站的浏览量PV,访客数UV(其中包括新访客数和新访客比例),每天访问网站的IP数、跳出率、平均访问时长/访问页数、重点用户等信息,统计每天注册成为网站会员人数等。将MapReduce清洗后的数据使用HBase存储,使其能够使用ip、时间查询,使用Hive对数据进行分析处理,将Hive处理后的数据使用Sqoop导入到MySQL中,提供视图工具供用户使用,给网站管理人员用于决策,其中明细数据使用HBase查询、指标使用MySQL。

用户评价 (0)

该用户已被预约 2 次,预约方未评价,系统默认 ★ 5星 好评。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • ✓ 支付宝企业信用分 优秀 评级
  • ✓ 市场份额约占全行业三分之一
  • ✓ 程序员兼职行业全能首选平台
查看平台资质详情
收藏