王浩
大数据开发工程师 & 爬虫工程师
腾讯 · 3年经验
日薪：
￥500/8h
地点：
北京 昌平
时间：
下班后周六周日
信用行为
0
接单数
0
评价数
1
收藏数
技术能力
掌握大数据相关的技术栈：Hadoop、spark、hive、kafka、hdfs等，有过海量数据处理的经验，并掌握hive、spark优化
数据库：mysql、redis
搜索引擎ES
开发语言：python、go
基于linux开发、熟悉shell脚本及linux命令，及sql语言
爬虫相关技术：scrapy
数据库：mysql、redis
搜索引擎ES
开发语言：python、go
基于linux开发、熟悉shell脚本及linux命令，及sql语言
爬虫相关技术：scrapy
项目经验
1、三角兽科技有限公司流批数据处理平台的搭建
搭建的实时流和批处理平台，用大数据相关技术处理解析日志，并以可视化看板形式展现各种指标。
2、三角兽科技有限公司分布式爬虫系统的搭建
稳定爬取百度贴吧、豆瓣、B站等各大网站
3、腾讯微视搜索相关垂类数据开发
包括用户搜索、微剧搜索、影视综搜索、直播搜索、发布器推荐和搜索等实时数据链路开发
4、腾讯视频与微视合作的短带长视频开发，负责数据部分开发
5、腾讯看点和微视合作的短视频优化项目，负责数据部分开发
6、腾讯微视搜索质量指标体系的搭建
搭建的实时流和批处理平台，用大数据相关技术处理解析日志，并以可视化看板形式展现各种指标。
2、三角兽科技有限公司分布式爬虫系统的搭建
稳定爬取百度贴吧、豆瓣、B站等各大网站
3、腾讯微视搜索相关垂类数据开发
包括用户搜索、微剧搜索、影视综搜索、直播搜索、发布器推荐和搜索等实时数据链路开发
4、腾讯视频与微视合作的短带长视频开发，负责数据部分开发
5、腾讯看点和微视合作的短视频优化项目，负责数据部分开发
6、腾讯微视搜索质量指标体系的搭建
案例展示 全部案例 >
王浩
大数据开发工程师 & 爬虫工程师 · 3年经验 · 腾讯
0
累计接单
0
用户评价
1
被收藏
信用行为
0
接单数
0
评价数
1
收藏数
技术能力
掌握大数据相关的技术栈：Hadoop、spark、hive、kafka、hdfs等，有过海量数据处理的经验，并掌握hive、spark优化
数据库：mysql、redis
搜索引擎ES
开发语言：python、go
基于linux开发、熟悉shell脚本及linux命令，及sql语言
爬虫相关技术：scrapy
数据库：mysql、redis
搜索引擎ES
开发语言：python、go
基于linux开发、熟悉shell脚本及linux命令，及sql语言
爬虫相关技术：scrapy
项目经验
1、三角兽科技有限公司流批数据处理平台的搭建
搭建的实时流和批处理平台，用大数据相关技术处理解析日志，并以可视化看板形式展现各种指标。
2、三角兽科技有限公司分布式爬虫系统的搭建
稳定爬取百度贴吧、豆瓣、B站等各大网站
3、腾讯微视搜索相关垂类数据开发
包括用户搜索、微剧搜索、影视综搜索、直播搜索、发布器推荐和搜索等实时数据链路开发
4、腾讯视频与微视合作的短带长视频开发，负责数据部分开发
5、腾讯看点和微视合作的短视频优化项目，负责数据部分开发
6、腾讯微视搜索质量指标体系的搭建
搭建的实时流和批处理平台，用大数据相关技术处理解析日志，并以可视化看板形式展现各种指标。
2、三角兽科技有限公司分布式爬虫系统的搭建
稳定爬取百度贴吧、豆瓣、B站等各大网站
3、腾讯微视搜索相关垂类数据开发
包括用户搜索、微剧搜索、影视综搜索、直播搜索、发布器推荐和搜索等实时数据链路开发
4、腾讯视频与微视合作的短带长视频开发，负责数据部分开发
5、腾讯看点和微视合作的短视频优化项目，负责数据部分开发
6、腾讯微视搜索质量指标体系的搭建
立即沟通
