忙里偷闲
爬虫工程师
贵州贝思特智能科技有限公司 · 2年经验
日薪：
￥500/8h
地点：
贵阳 全区
时间：
可工作日驻场（自由职业原因）
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
负责设计开发分布式网络爬虫系统，进行多平台信息抓取和分析工作；
根据业务需求，实现大规模文本、图片数据抓取、清洗、存储等工作；
根据业务需求通过抓包技术,包括代理、selenium、验证码处理等；
根据业务需求获取各大平台cookies实现模拟登录和模拟请求接口获取数据。
根据业务需求，实现大规模文本、图片数据抓取、清洗、存储等工作；
根据业务需求通过抓包技术,包括代理、selenium、验证码处理等；
根据业务需求获取各大平台cookies实现模拟登录和模拟请求接口获取数据。
项目经验
网易云新闻的网址进行抓包分析。
用scrapy框架对网易云新闻的标题和正文进行爬取。
用 xpath 和正则表达式对网页中元素进行定位。
将定位后的信息编写代码逻辑进行爬取和数据清洗处理。
将处理的数据进行数据库存储。
用scrapy框架对网易云新闻的标题和正文进行爬取。
用 xpath 和正则表达式对网页中元素进行定位。
将定位后的信息编写代码逻辑进行爬取和数据清洗处理。
将处理的数据进行数据库存储。
团队情况
整包服务：
其他开发
负责人：
爬虫工程师
团队成员：
后端工程师
忙里偷闲
有团队 · 可整包
爬虫工程师 · 2年经验 · 贵州贝思特智能科技有限公司
0
累计接单
0
用户评价
0
被收藏
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
负责设计开发分布式网络爬虫系统，进行多平台信息抓取和分析工作；
根据业务需求，实现大规模文本、图片数据抓取、清洗、存储等工作；
根据业务需求通过抓包技术,包括代理、selenium、验证码处理等；
根据业务需求获取各大平台cookies实现模拟登录和模拟请求接口获取数据。
根据业务需求，实现大规模文本、图片数据抓取、清洗、存储等工作；
根据业务需求通过抓包技术,包括代理、selenium、验证码处理等；
根据业务需求获取各大平台cookies实现模拟登录和模拟请求接口获取数据。
项目经验
网易云新闻的网址进行抓包分析。
用scrapy框架对网易云新闻的标题和正文进行爬取。
用 xpath 和正则表达式对网页中元素进行定位。
将定位后的信息编写代码逻辑进行爬取和数据清洗处理。
将处理的数据进行数据库存储。
用scrapy框架对网易云新闻的标题和正文进行爬取。
用 xpath 和正则表达式对网页中元素进行定位。
将定位后的信息编写代码逻辑进行爬取和数据清洗处理。
将处理的数据进行数据库存储。
团队情况
服务范围：
团队构成：
负责人(爬虫工程师)
|
核心队员：后端工程师
立即沟通
