ID:417038

青铃白泽、

暂无

  • 公司信息:
  • 暂无
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 周六
  • 周日
  • 可工作日远程
  • 可工作日驻场(自由职业原因)
  • 所在区域:
  • 南昌
  • 全区

技术能力

技术能力:
✔ JS逆向:协议分析、加密参数还原、自动化脚本
✔ Python爬虫:Scrapy、Requests、Selenium,playwright
✔ 电商平台数据采集,第三方游戏账号交易平台,公开数据大批量采集
✔ 验证码处理与自动化识别(极验,网易易盾...)
✔ 安全防护对抗:瑞数、加速乐等
✔ 字节系评论与直播弹幕采集
✔mcp agent全自动爬虫

经验较为丰富,交付稳定

项目经验

1.抖音直播弹幕实时采集(WebSocket + Protobuf + X-Bogus签名)
- Python:requests(获取直播间 room_id 与 cookie)、websocket-client(WSS长连接收包/回包)、gzip(解压)、protobuf(消息反序列化)、loguru(日志输出)
- JS逆向与签名:execjs 调用本地 JS 生成 signature(X-Bogus);crypto-js(MD5 生成 X-MS-STUB)
- 协议解析:Protobuf(douyin.proto + 生成 douyin_pb2.py)
2.云南省建设监管公共服务平台企业数据采集(滑块校验 + 加密参数逆向 + Excel落地)
- Python:requests.Session(会话维持/接口请求)、pandas(Excel导出)
- JS逆向与复用:execjs 调用本地 JS(复用站点加密逻辑)
- 加密算法:RSA(JSEncrypt 分段加密生成 params)、AES(CryptoJS AES-ECB + Pkcs7,用于滑块点位与验证码头)
- 风控处理:滑块验证码 blockPuzzle 识别(打码平台返回滑动距离 x)、二次校验后换取业务数据、翻页抓取与去重
3.赢商大数据项目库采集与结构化落地(项目列表 + 项目详情)
- 语言与运行:Python、asyncio(异步采集)
- 动态渲染采集:Playwright(自动化浏览器渲染、页面元素等待、翻页与详情抓取)
- 爬虫工程化:Scrapy + scrapy-playwright(任务调度、请求队列、可扩展管道)
- 反爬与登录态处理:浏览器登录态复用(storage_state 会话保持)、请求头/UA配置、限速与低并发控制
- 数据落地:CSV 结构化输出(字段清洗、断点续写/追加写入)

案例展示

  • 赢商大数据项目库采集与结构化落地

    赢商大数据项目库采集与结构化落地

    - 语言与运行:Python、asyncio(异步采集) - 动态渲染采集:Playwright(自动化浏览器渲染、页面元素等待、翻页与详情抓取) - 爬虫工程化:Scrapy + scrapy-playwright(任务调度、请求队列、可扩展管道) - 反爬与登录态处理:

  • 云南省建设监管公共服务平台企业数据采集

    云南省建设监管公共服务平台企业数据采集

    使用技术(技术栈) - Python:requests.Session(会话维持/接口请求)、pandas(Excel导出) - JS逆向与复用:execjs 调用本地 JS(复用站点加密逻辑) - 加密算法:RSA(JSEncrypt 分段加密生成 params)、A

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服