ID:215769

beta 身份已认证

爬虫工程师

  • 公司信息:
  • 南京车链有限公司
  • 工作经验:
  • 1年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 南京
  • 全区

技术能力

1.勤奋认真,对工作兢兢业业
2.好的沟通和理解需求的能力,能对上级交代的任务准确无误完成
3.熟练掌握爬虫requests. scrapy. scrapy-redis爬虫流程.掌握正则表达式。xpath提取网页资源方法。
4.熟悉各个网站常见反爬策略,能根据网页分析出常见反爬手段
5.熟悉前端代码,可以分析目标网站真实request地址和response内容,使用代理试水网站反爬虫级别,检
测是否有投毒数据。

项目经验

豆瓣读书爬虫。可以爬下豆瓣读书标签下的所有图书,按评分排名依次存储,存储到Excel中,可方便大家筛选搜罗,比如筛选评价人数>1000的高分书籍;可依据不同的主题存储到Excel不同的Sheet ,采用User Agent伪装为浏览器进行爬取,并加入随机延时来更好的模仿浏览器行为,避免爬虫被封。
Python爬虫代理IP池(proxy pool)。
等等

案例展示

  • 英雄联盟官网皮肤图片爬取

    英雄联盟官网皮肤图片爬取

    爬取英雄联盟的全皮肤,分析网页找出要用的数据进行数据筛选,然后通过Python的模块进行爬取目标数据,该功能为自己开发。

  • 豆瓣TOP250榜单爬取

    豆瓣TOP250榜单爬取

    爬取豆瓣TOP250榜单,影视图片+影视评分以及影视片名,通过XPATH进行数据的获取与筛选,该功能模块均为本人开发。

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系聘用方端客服
联系聘用方端客服