ID：393910
夏虫
后端数据分析师
- 公司信息：
- 卓沃科技
- 工作经验：
- 4年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 可工作日驻场（离职原因）
- 可工作日驻场（自由职业原因）
- 所在区域：
- 广州
- 天河
技术能力
作为Python爬虫工程师，我专注于高效采集、解析和存储网络数据，支持业务决策与数据分析。主要负责设计分布式爬虫架构、突破反爬机制（如IP代理、请求头模拟）、优化数据清洗流程，并确保爬虫的稳定性和合规性。
技术能力：
精通Requests/Scrapy框架，熟悉异步爬虫（Aiohttp）及Selenium自动化；
掌握XPath/BeautifulSoup解析技术，熟悉正则表达式与JSON数据处理；
具备反爬对抗经验（验证码识别、User-Agent轮换、代理IP池搭建）；
熟练使用MongoDB/MySQL存储数据，了解分布式爬虫（Scrapy-Redis）；
熟悉数据清洗（Pandas）及基础数据分析，能编写高效稳定的爬虫系统。
通过技术为业务提供高质量数据支持，助力数据驱动型决策。
项目经验
电商平台商品数据爬取与分析系统
技术栈：Scrapy、Selenium、MongoDB、Redis、Pandas
项目描述：针对大型电商平台某东，设计高并发爬虫系统，突破反爬机制（IP封禁、动态加载、验证码），稳定抓取百万级商品数据（价格、销量、评论）。
核心贡献：
使用Scrapy-Redis搭建分布式爬虫，提升爬取效率3倍以上；
结合Selenium处理动态渲染页面，破解Ajax数据加载；
部署IP代理池（付费代理+自建代理）及随机UA策略，降低封禁率至5%以下；
数据存储至MongoDB，并利用Pandas清洗分析，输出竞品价格趋势报告，支撑运营决策。
相似人才推荐
-
500元/天软件开发工程师思佰益必智信息技术(大连)有限公司概要：我是90后，在校所学软件工程专业，毕业后也干这行；接触学习并使用过，Python，C/C++，PHP
-
500元/天开发工程师信盈达概要：1.精通 Python 生态工具：Scrapy、Requests、Beautiful Soup、Se
-
800元/天MCSE MCDBA 安全 编程退休概要：从事计算机网络工作多年，数据库，网络，编程。从Basic，Dbase3,FoxBase,ASP,Ph
-
500元/天java工程师 python工程师 前端工程师合肥云茂软件技术有限公司概要：熟练使用java python等后端语言 熟练使用html css js 熟练使用前端框架如 v
-
1000元/天技术副总监圣火科技集团概要：作为一名 Python 工程师，我熟练掌握 Python 全栈开发技术。在后端，借助 Django、
-
500元/天Python工程师深圳市长城网信息科技股份有限公司概要：熟练使用Requests、Scrapy、Selenium等框架，支持动态渲染（如Headless C
-
500元/天后端工程师无概要：精通 Python，熟悉面向对象编程思想，能够独立完成复杂的项目开发。熟悉playwright的使用
-
1000元/天高级云计算研发工程师天津麒麟信息技术有限公司概要：熟悉c、c++、javascript、pyhon等开发语言，熟悉openstack的部署结构，有多年
