゛染

爬虫工程师
精彩纵横 · 5年经验
゛染
日薪: ¥500/8h
地点: 南昌
时间: 可工作日远程
ID:440251 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | 高并发 Python 深度学习 Selenium 分布式 RabbitMQ Elasticsearch MySQL Redis MongoDB 小程序 WebSocket
精通 Python 爬虫开发,熟练掌握 Scrapy、Selenium、Playwright 等主流框架。擅长应对各类复杂反爬策略,包括 JS 逆向分析、字体加密解密、滑块/点选验证码识别(对接 OCR 或深度学习模型)、IP 代理池高并发调度及 Cookie 池维护。
熟悉 App 逆向(Frida/Xposed)及小程序抓包,能处理 WebSocket 实时数据流采集。具备大规模分布式爬虫经验,熟练使用 Redis、RabbitMQ 进行任务队列管理,结合 MySQL/MongoDB/Elasticsearch 进行海量数据存储与清洗。能独立交付从数据采集、清洗到 API 接口封装的全套解决方案,代码规范,注释清晰,售后稳定。

某大型电商平台竞品数据采集系统
项目背景:客户需实时监控全网 5000+ SKU 的价格变动及评论数据,用于市场分析。
我的职责:负责核心爬虫架构设计与反爬突破。针对目标站点的动态渲染和指纹检测,采用 Playwright + 随机指纹浏览器方案绕过检测;设计分布式调度策略,利用 Redis 去重,配合代理池实现多线程并发采集。
结果产出:实现了日均 10 万+ 条数据的稳定抓取,数据采集成功率维持在 98% 以上,且未触发目标站点封禁。最终交付了清洗后的结构化 Excel/CSV 文件及自动化更新脚本,帮助客户提升了 30% 的市场调研效率。
゛染 ID:440251 复制

゛染

爬虫工程师 · 5年经验 · 精彩纵横
城市南昌 日薪500元/8h 时间 可工作日远程
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | 高并发 Python 深度学习 Selenium 分布式 RabbitMQ Elasticsearch MySQL Redis MongoDB 小程序 WebSocket
精通 Python 爬虫开发,熟练掌握 Scrapy、Selenium、Playwright 等主流框架。擅长应对各类复杂反爬策略,包括 JS 逆向分析、字体加密解密、滑块/点选验证码识别(对接 OCR 或深度学习模型)、IP 代理池高并发调度及 Cookie 池维护。
熟悉 App 逆向(Frida/Xposed)及小程序抓包,能处理 WebSocket 实时数据流采集。具备大规模分布式爬虫经验,熟练使用 Redis、RabbitMQ 进行任务队列管理,结合 MySQL/MongoDB/Elasticsearch 进行海量数据存储与清洗。能独立交付从数据采集、清洗到 API 接口封装的全套解决方案,代码规范,注释清晰,售后稳定。

项目经验

某大型电商平台竞品数据采集系统
项目背景:客户需实时监控全网 5000+ SKU 的价格变动及评论数据,用于市场分析。
我的职责:负责核心爬虫架构设计与反爬突破。针对目标站点的动态渲染和指纹检测,采用 Playwright + 随机指纹浏览器方案绕过检测;设计分布式调度策略,利用 Redis 去重,配合代理池实现多线程并发采集。
结果产出:实现了日均 10 万+ 条数据的稳定抓取,数据采集成功率维持在 98% 以上,且未触发目标站点封禁。最终交付了清洗后的结构化 Excel/CSV 文件及自动化更新脚本,帮助客户提升了 30% 的市场调研效率。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • ✓ 支付宝企业信用分 优秀 评级
  • ✓ 市场份额约占全行业三分之一
  • ✓ 程序员兼职行业全能首选平台
查看平台资质详情
收藏