ID:402262

爬虫工程师

  • 公司信息:
  • 小米
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 周六
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 长沙
  • 全区

技术能力

精通 Python 爬虫与数据采集技术,擅长运用 Requests、BeautifulSoup 等库构建高效采集流程,可精准解析网页结构,突破反爬限制获取数据。熟悉 js 逆向,能分析、还原加密逻辑,处理动态渲染页面数据;掌握 app 逆向,通过抓包、反编译等手段,挖掘移动端数据接口,为多场景数据采集项目提供技术支撑,助力高效获取与整理目标信息 。

项目经验

多平台数据采集项目经验:深度参与多平台数据采集项目,涵盖 ZW 论文、bilibili 评论、网易云音乐评论及淘宝数据采集。运用 Python 爬虫技术,针对不同平台特性,如 bilibili 动态渲染页面,通过 js 逆向解析评论接口;处理网易云音乐加密数据,借助 app 逆向与加密算法还原;针对淘宝反爬机制,配置代理池、控制请求频率,精准采集多维度数据,沉淀跨平台数据采集与反爬应对经验 。
多平台数据采集实践:主导多平台数据采集项目,覆盖 ZW 论文、bilibili、网易云音乐、淘宝。以 Python 为核心,结合爬虫框架,攻克各平台反爬:解析 bilibili 评论的 js 加密逻辑,突破网易云音乐 app 数据传输限制,应对淘宝复杂验证。通过构建灵活采集策略,精准获取论文元数据、平台用户评论等信息,为数据分析、舆情研究提供稳定数据源,锤炼多场景数据采集与逆向工程能力 。
跨平台数据采集项目:负责跨平台数据采集系列项目,涉及 ZW 论文、bilibili 评论、网易云音乐评论、淘宝数据抓取。基于 Python 技术栈,运用 Requests、Scrapy 等工具,针对不同平台架构,开展 js 逆向(如 bilibili 动态评论加载)、app 逆向(网易云音乐接口解析 ),破解淘宝反爬策略。实现高效、稳定的数据采集流程,累计获取海量多元数据,支撑后续分析应用,展现从需求分析到技术落地的全流程把控力 。

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服