ID：259988
zq 身份已认证
爬虫工程师
- 公司信息：
- 重庆今有鱼责任有限公司
- 工作经验：
- 9年
- 兼职日薪：
- 800元/8小时
- 兼职时间：
- 可工作日远程
- 所在区域：
- 重庆
- 全区
技术能力
1、熟悉python、熟练运用scrapy框架
2、熟悉javascript，能进行js逆向工程
3、熟练运用docker进行分布式爬虫部署
4、精通玩也抓取原理及技术细节，精通xpath，css，正则表达式，从结构化的和非结构化的数据中获取信息，对网页抓取、信息抽取、去重、清洁、匹配经验丰富
5、熟悉mongodb，mysql数据库
项目经验
1、运用伪分布式爬虫，爬取了京东所有商品信息。
2、运用代理池，cookie池，爬取了智联招聘所有招聘信息
3、运用js逆向技术，实现了企业信用系统的自动登录
4、运用js逆向技术，实现了美团登录的关键参数的逆向工作
案例展示
-
京东
本项目独自一人完成。获取京东商城的信息不难，难的如何快速获取全部信息，该网站每类商品下分成若干页，每页由两小页构成，前小页可以直接由url直接获取，而第二小页则是ajax请求。
-
美团h5Fingerprint
本作品的目的是实现meituan快速登录，构建cookie池。在本项目中，我只负责h5Fingerprint参数的逆向工作
相似人才推荐
-
500元/天爬虫开发工程师长沙职通文化传播有限公司概要：1，主要使用语言python，熟悉Java、JavaScript语言， 2，熟练掌握MySQL数据
-
2000元/天总架构师&研发总监九次方大数据集团有限公司概要：1、数据中台、业务中台、AI中台，数据变现、数据运营成功经验 2、有一群“玩”数据的小伙伴，曾经把
-
500元/天我我概要：c语言，web前端，简单的java应用 .............................
-
1000元/天软件工程师理邦精密仪器股份有限公司概要：目前学习C#4年时间，主要从事winform，WPF，webservice等项目开发，熟悉TCP，U
-
500元/天博士生无概要：本人目前是博士在读，研究的方向是人工智能。对python较为熟悉，能够熟练应用。除了python外，
-
500元/天开发工程师绵阳富临精工概要：从事系统开发差不多有四年了，十分热爱开发，从刚开始的纯后端到现在已经算是全栈开发工程师。出来就在一个
-
500元/天学生中学概要：一个中学学生， 会一些黑客基础知识， 可以做一些简单的渗透， 会用C语言或c++语言， 可以
-
500元/天人工智能工程师泽梓投资有限公司概要：熟练使用python、pytorch、numpy、pyechart、pandas、java、mysq
