上海市信息中心
个人
已顺利交付
1 个项目
ID:206001
研发经理
15年
600元/8小时
技术:擅长python爬虫,对多线程,分布式爬虫,反爬,代理池等相关技术有一定研究,能使用requests,Beautifulsoup,pyppeteer,selenium,redis,mongodb等爬虫相关技术。
项目:爬取过豆瓣的所有电影信息,图书信息。爬取过当当网的所有图书信息,利用多线程爬取总共近5000w的图书信息,并成功通过当当网的反爬机制。爬取过同花顺的所有A股上市交易行情数据,财务报表数据,股票各类相关交易信息等,成功通过同花顺网站的js加密反爬技术,相关交易数据达亿级。