中软国际
个人
ID:283623
python开发
5年
500元/8小时
技术:熟练掌握urllib、requests请求库的用法。
熟练使用xpath,css,re库分析解析并提取数据。
熟知UA,cookie,ip限制,防盗链、js动态加载等反爬机制。
熟练使用scrapy爬虫框架,进行代理ip,UA等设置,使用splash,selenuim进行页
项目:政通传媒项目
1、陕西省各个区县领导及机构信息网页分析,解析获取需求中的数据内容
2、搭建ccgp招中标爬虫日志系统等相关工作
3、解决招中标数据及机构领导数据抓取过程中遇到的技术难题等
4、设计ccgp爬虫异常数据统计逻辑,并将统计数据自动导入excel表格
5、对北