ID：218899
胡晓海
爬虫工程师
- 公司信息：
- 谷科技
- 工作经验：
- 3年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 北京
- 海淀
技术能力
技能:
熟悉python
善于各类爬虫包括app和网站
熟悉报告分析以及制作
熟悉numpy，matplotlib和pandas
熟悉http，tcp和udp
熟悉群控系统开发
熟悉adb，uiautomator2，selenium等使用
熟悉mysql和sql，mongodb
熟悉Linux常用命令
熟悉线程，进程和协程
熟悉客户端和服务器之间的互动
熟悉基本爬虫框架
熟悉反反爬虫应对措施
了解js，css和jq
项目经验
作品:
1.获取爱奇艺综艺和电视剧数据
2.获取腾讯综艺和电视剧数据
3.B站爬虫系统开发
4.编写数据报告
5.获取芒果综艺和电视剧数据
6.获取优酷电视剧和综艺数据
7.实时监测B站综艺数据并且获取入库
8.电视剧和综艺数据入库清洗
9.抖音群控爬虫系统开发
10.微信公众号和其他APP数据获取
案例展示
-
综艺数据
这两张图片仅仅时工作中的一个小角落.因为我们需要每日的数据爬去达到百万级,在这里就展示这两张用户的基本数据.爬去下来的数据通过清洗后入库,为后续的每日报表以及业务提供需求
-
爱奇艺和芒果数据
芒果,爱奇艺,B站,抖音,百度,360等网站上的综艺数据以及电视剧数据,包括弹幕,用户,评论进行每日爬去并且更新入库,后续通过分词形成词云图
相似人才推荐
-
500元/天软件工程师sdt概要：掌握 C/C++、 Python 编程。 熟练使用 linux 操作系统， 熟悉 linux 开发平 -
700元/天软件部经理，技术总监河南省863软件孵化器概要：熟悉JAVA、PHPC和C++语言，熟悉音视频开发。 熟悉BS系统和CS系统、互联网平台开发经验。 -
500元/天技术经理武汉源启科技股份有限公司概要：从事.net开发工作6年时间，从初级程序员到技术经理。工作语言C#，熟悉html、JavaScrip
-
800元/天资深软件开发工程师上海华为技术有限公司概要：编程语言：Golang / C / C++ / Python 缓存&存储：Redis /
-
700元/天架构师神州数码概要：稍后pc补充稍后pc补充稍后pc补充稍稍后pc补充稍后pc补充稍后pc补充稍后pc补充稍后pc补充稍
-
600元/天软件工程师（主要做QT上位机）盛铂科技(上海)有限公司概要：本人性格稳重，工作认真专注，有着良好的编程习惯，能够独立完成项目。自学能力强，拥有Linux环境下的
-
500元/天总控系统开发工程师上海杰销自动化科技有限公司概要：IT技能 1. 精通Python基本操作，熟练掌握的Python库，具有面向对象的设计思想和逻辑思
-
500元/天软件工程师河北恩科信息科技有限公司概要：Java开发人员。编写Web项目，包括后台管理，后台接口。 多开发后台管理方向的项目，进行后台架构
