仙九

python爬虫工程师
AL · 3年经验
仙九
日薪: ¥1500/8h
地点: 北京 海淀
时间: 可工作日驻场(自由职业原因)
ID:414032 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | 分布式 Python MySQL Redis MongoDB Selenium
我专注于 Python 爬虫开发与数据采集,熟练掌握 Scrapy、BeautifulSoup、Selenium、Requests 等核心爬虫框架与库,能高效完成动态页面抓取、数据解析与存储。熟悉 反爬虫策略破解(如 IP 代理池搭建、User-Agent 模拟、验证码识别),保障爬虫稳定性;熟练运用 MongoDB、MySQL 进行数据持久化,结合 Redis 实现分布式爬虫调度。此外,具备 多线程/异步爬虫 开发经验(如  aiohttp  +  asyncio ),能大幅提升抓取效率;熟悉 数据清洗与预处理(Pandas、Numpy),为后续分析提供高质量数据。曾独立完成多个垂直领域(电商、新闻、招聘)的数据采集项目,对爬虫架构设计、性能优化有深刻理解。

针对某电商平台,设计分布式爬虫(Scrapy + Redis),每日抓取 5000+ 商品价格、销量、评论数据。通过 IP 代理池 + 随机动态 User-Agent 规避反爬,结合 Selenium 模拟登录 突破动态渲染限制。数据存储于 MySQL,通过定时任务(Celery)实现自动化采集,最终输出价格波动报表,助力客户优化定价策略,提升市场竞争力。
仙九 ID:414032 复制

仙九

python爬虫工程师 · 3年经验 · AL
城市北京 海淀 日薪1500元/8h 时间 可工作日驻场(自由职业原因)
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | 分布式 Python MySQL Redis MongoDB Selenium
我专注于 Python 爬虫开发与数据采集,熟练掌握 Scrapy、BeautifulSoup、Selenium、Requests 等核心爬虫框架与库,能高效完成动态页面抓取、数据解析与存储。熟悉 反爬虫策略破解(如 IP 代理池搭建、User-Agent 模拟、验证码识别),保障爬虫稳定性;熟练运用 MongoDB、MySQL 进行数据持久化,结合 Redis 实现分布式爬虫调度。此外,具备 多线程/异步爬虫 开发经验(如  aiohttp  +  asyncio ),能大幅提升抓取效率;熟悉 数据清洗与预处理(Pandas、Numpy),为后续分析提供高质量数据。曾独立完成多个垂直领域(电商、新闻、招聘)的数据采集项目,对爬虫架构设计、性能优化有深刻理解。

项目经验

针对某电商平台,设计分布式爬虫(Scrapy + Redis),每日抓取 5000+ 商品价格、销量、评论数据。通过 IP 代理池 + 随机动态 User-Agent 规避反爬,结合 Selenium 模拟登录 突破动态渲染限制。数据存储于 MySQL,通过定时任务(Celery)实现自动化采集,最终输出价格波动报表,助力客户优化定价策略,提升市场竞争力。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏