技术:爬虫,自动化测试,接口开发,Diango,flask 掌握Python,熟悉Scrapy、Scrapy-redis、Selenium爬虫框架Pyquery、Requests、lxml。 Linux操作、正则表达式、Xpath、CSS选择器和动态JS逆向,以及HTTP传输协
项目:如何用Scrapy来采集天气信息(从新浪天气频道采集) 淘宝模拟登录 天猫商品数据爬虫 爬取豆瓣排行榜电影数据 多线程+代理池爬取天天基金网、股票数据 新浪微博爬虫分享(一天可抓取 1300 万条数据) 新浪微博分布式爬虫 Python爬虫,京东自动登录,在线抢购商
案例: 新浪微博分布式爬虫