Simon
高级爬虫工程师
华为技术有限公司 · 3年经验
日薪：
￥700/8h
地点：
厦门 全区
时间：
下班后周六周日可工作日远程
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
- 熟练掌握Python、Scrapy、BeautifulSoup、Selenium等爬虫技术栈。
- 精通网络协议（HTTP/HTTPS）、数据解析（HTML/XML/JSON）及数据存储（SQL/NoSQL数据库）。
- 有分布式爬虫框架（如Scrapy Cluster、PySpider）的开发和运维经验。
- 熟悉数据处理和分析工具（如Pandas、NumPy、Spark）。
- 具备扎实的计算机网络、操作系统、并发编程等基础知识。
- 精通网络协议（HTTP/HTTPS）、数据解析（HTML/XML/JSON）及数据存储（SQL/NoSQL数据库）。
- 有分布式爬虫框架（如Scrapy Cluster、PySpider）的开发和运维经验。
- 熟悉数据处理和分析工具（如Pandas、NumPy、Spark）。
- 具备扎实的计算机网络、操作系统、并发编程等基础知识。
项目经验
- 设计并实现了一个高并发分布式爬虫系统，用于采集和处理超过1000万条网页数据，极大提升了数据采集效率。
- 通过实施代理池和请求随机化技术，成功解决了多个目标网站的反爬虫机制问题。
- 领导开发了一个实时数据监控系统，通过数据抓取和分析，为业务部门提供了精准的数据支持和决策依据。
- 通过实施代理池和请求随机化技术，成功解决了多个目标网站的反爬虫机制问题。
- 领导开发了一个实时数据监控系统，通过数据抓取和分析，为业务部门提供了精准的数据支持和决策依据。
Simon
高级爬虫工程师 · 3年经验 · 华为技术有限公司
0
累计接单
0
用户评价
0
被收藏
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
- 熟练掌握Python、Scrapy、BeautifulSoup、Selenium等爬虫技术栈。
- 精通网络协议（HTTP/HTTPS）、数据解析（HTML/XML/JSON）及数据存储（SQL/NoSQL数据库）。
- 有分布式爬虫框架（如Scrapy Cluster、PySpider）的开发和运维经验。
- 熟悉数据处理和分析工具（如Pandas、NumPy、Spark）。
- 具备扎实的计算机网络、操作系统、并发编程等基础知识。
- 精通网络协议（HTTP/HTTPS）、数据解析（HTML/XML/JSON）及数据存储（SQL/NoSQL数据库）。
- 有分布式爬虫框架（如Scrapy Cluster、PySpider）的开发和运维经验。
- 熟悉数据处理和分析工具（如Pandas、NumPy、Spark）。
- 具备扎实的计算机网络、操作系统、并发编程等基础知识。
项目经验
- 设计并实现了一个高并发分布式爬虫系统，用于采集和处理超过1000万条网页数据，极大提升了数据采集效率。
- 通过实施代理池和请求随机化技术，成功解决了多个目标网站的反爬虫机制问题。
- 领导开发了一个实时数据监控系统，通过数据抓取和分析，为业务部门提供了精准的数据支持和决策依据。
- 通过实施代理池和请求随机化技术，成功解决了多个目标网站的反爬虫机制问题。
- 领导开发了一个实时数据监控系统，通过数据抓取和分析，为业务部门提供了精准的数据支持和决策依据。
立即沟通
