Major.周
爬虫工程师
创业公司 · 2年经验
日薪：
￥500/8h
地点：
广州 海珠
时间：
下班后
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
1.熟悉Python、计算机网络，熟悉使用多线程，熟悉Scrapy等常用爬虫框架；
2.熟悉Linux操作、正则表达式、Mysql、MongoDB、Redis等常用数据库及缓存；
3.能解决封账号、封IP、验证码识别等问题。
2.熟悉Linux操作、正则表达式、Mysql、MongoDB、Redis等常用数据库及缓存；
3.能解决封账号、封IP、验证码识别等问题。
项目经验
1.大众点评数据采集项目：开发大众点评爬虫脚本，采集16个城市人均100元以上的日料店基本信息，字段包括店铺名称、评价数、人均消费价格、推荐菜、团购优惠、店铺评分、地址、营业时间等，在开发大众点评爬虫脚本时，需要解决字体反爬、IP封禁、Cookie加密等问题，最后成功采集到了16个城市的上万条数据。
2.链家网数据采集项目：开发链家网爬虫脚本，采集北上广深各个小区的房价、户数等信息，在过程中需通过多线程的方式来提高爬虫效率，最后成功采集上万条小区数据
2.链家网数据采集项目：开发链家网爬虫脚本，采集北上广深各个小区的房价、户数等信息，在过程中需通过多线程的方式来提高爬虫效率，最后成功采集上万条小区数据
案例展示 全部案例 >
Major.周
爬虫工程师 · 2年经验 · 创业公司
0
累计接单
0
用户评价
0
被收藏
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
1.熟悉Python、计算机网络，熟悉使用多线程，熟悉Scrapy等常用爬虫框架；
2.熟悉Linux操作、正则表达式、Mysql、MongoDB、Redis等常用数据库及缓存；
3.能解决封账号、封IP、验证码识别等问题。
2.熟悉Linux操作、正则表达式、Mysql、MongoDB、Redis等常用数据库及缓存；
3.能解决封账号、封IP、验证码识别等问题。
项目经验
1.大众点评数据采集项目：开发大众点评爬虫脚本，采集16个城市人均100元以上的日料店基本信息，字段包括店铺名称、评价数、人均消费价格、推荐菜、团购优惠、店铺评分、地址、营业时间等，在开发大众点评爬虫脚本时，需要解决字体反爬、IP封禁、Cookie加密等问题，最后成功采集到了16个城市的上万条数据。
2.链家网数据采集项目：开发链家网爬虫脚本，采集北上广深各个小区的房价、户数等信息，在过程中需通过多线程的方式来提高爬虫效率，最后成功采集上万条小区数据
2.链家网数据采集项目：开发链家网爬虫脚本，采集北上广深各个小区的房价、户数等信息，在过程中需通过多线程的方式来提高爬虫效率，最后成功采集上万条小区数据
立即沟通
