ID:426195

Tìng

爬虫

  • 公司信息:
  • 广东蕾特恩科技发展有限公司
  • 工作经验:
  • 6年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 可工作日远程
  • 所在区域:
  • 北京
  • 海淀

技术能力

6年相关工作经验,有项目经验,良好的编码习惯,熟悉多线程爬虫,scrapy-redis分布式爬虫,熟悉scrapy框架,能够解决常见反爬虫问题
对各种反爬技术如js、css加密、封ip、验证码等有破解经验
熟悉正则表达式、xpath、css、Selenium、pyppeteer、PlayWright等爬取工具
熟悉PHP语言以及ThinkPHP框架,有后台开发经验
有海外电商独立站爬取经验、海外短剧APP爬取实战经验,熟练使用ADB、Frida、Jadx等工具
拥有FastGPT AI平台搭建经验。

项目经验

抖音&小红书好评检测
项目简介:公司小程序任务需要,对用户上传抖音&小红书分享口令进行周期性爬取,以达成监控作品时效性是否有效,从而发放相关积分,爬取作品内容包括点赞数、收藏数、分享数、作者账号基本信息等,定时30 天内每天爬取更新状态,并将爬取数据同步至MySQL 数据库,对接企业微信机器人,每次爬取情况输出。
相关技术:requests、json、re、MySQL、playwright、JS 逆向、验证码处理、ip代理等
职责:
1、分析各相关数据接口参数情况,根据上传口令解析真实url
2、构造相关接口参数并请求获取数据
3、从接口返回数据中提取同时清洗相关字段数据保存
4、定期维护爬虫,及时响应处理问题

案例展示

  • 抖音&小红书好评检测

    抖音&小红书好评检测

    项目简介:公司小程序任务需要,对用户上传抖音&小红书分享口令进行周期性爬取,以达成监控作品时效性是否有效,从而发放相关积分,爬取作品内容包括点赞数、收藏数、分享数、作者账号基本信息等,定时30 天内每天爬取更新状态,并将爬取数据同步至MySQL 数据库,对接企业微信机器人

  • 海外电商数据获取

    海外电商数据获取

    项目简介:公司电商系统需要,系统店铺商品数据需要每日新增商品数据,运营提供Shopify、Shopline、Shoplazza等各类海外独立站电商平台,通过爬虫程序批量提取商品信息,经数据清洗、结构化处理后入库,保障电商系统商品数据实时可用。 相关技术:requests、cur

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服