ID：156781
包先生
爬虫工程师
- 公司信息：
- 湖南豪之天信息技术有限公司
- 工作经验：
- 2年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 所在区域：
- 北京
- 海淀
技术能力
熟悉Scrapy框架，能实现Scrapy-Redis的分布式爬取
具有一定的反爬，反反爬经验，能处理一些懒加载，验证码登录的问题
熟悉selenium，appium
熟悉逆向JS
熟练使用Xpath，正则表达式，能使用BS4， CSS选择器
对MySql， mongodb，Redis熟练掌握
熟悉python语言
有小程序开发经验
熟悉linux系统，熟悉TCP协议
能独立解决验证码/IP封禁/JS动态加载
项目经验
抖音数据爬取
项目简介：抓取目标的粉丝数，获赞数，视频等主页上需要的数据
开发环境：Appium+fiddler+requests+font解密工具
责任描述：1.使用fiddler找到与目标主页相关的URL接口
2.爬取视频需使用Appium模拟用户向下刷新出更多视频
3.爬取粉丝数，获赞数这些主页上的数据需要用font解密工具找到字体加密的映射表后使用正则替换才能拿到正确的数据
4.也可逆向JS找到signature的加密方式来获取相应需求的数据
相似人才推荐
-
500元/天后端开发工程师亚信科技（南京）有限公司概要：团队成员均有4~5年的开发工作经验，技术栈丰富有保障，团队成员涉足领域广泛。 技能：SpringB
-
1000元/天产品经理保密概要：精通 Java; 精通掌握 C,Objective-C,熟悉 C++,熟练使用 iOS SDK 以
-
500元/天爬虫工程师湖南通证概要：具有良好pythonWeb开发能力,掌握微信小程序及微信公众号开发,了解并使用过微信支付平台与微信开
-
700元/天研发工程师百度概要：有扎实的计算机基础，熟悉常用的数据结构，算法，设计模式； 熟练掌握python语言，良好的编码风
-
500元/天自然语言处理工程师nokia上海贝尔科技有限公司概要：1.掌握并且熟练实用机器学习算法，朴素贝叶斯，SVM，GBDT，逻辑回归，随机森林，聚类算法等 2
-
500元/天爬虫工程师Scount概要：两年互联网行业工作经验，其中一年爬虫经验，有匡威，耐克，淘宝，知乎等网站的数据抓取经历。了解chro -
500元/天全栈开发工程师贵州天逸轩网络科技有限公司概要：具备项目对接，客户需求分析，功能整理，数据库设计，流程设计，最终才开始进行编程阶段。程序完成时进行系
-
800元/天爬虫工程师，全栈，微信小程序公众号，APP推广网页上海xx网络科技有限公司概要：Python语言，全栈开发，有彩票、管理系统、微信小程序、微信公众号开发经验，爬虫经验，数据处理、可
