ID：231002
Cyz
无
- 公司信息：
- 无
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 其他
- 全区
技术能力
使用语言python，主要做爬虫和web开发。熟练使用scrapy框架爬虫，能够进行全站数据爬取 深度爬取 和增量式爬取。了解mysql和redis工作原理并能熟练使用。熟悉Django框架，做过爬虫项目和Django项目
项目经验
网易新闻不同板块的爬取，使用了scrapy+selenium，对网易新闻不同板块实现了异步高效的爬取。中国空气质量爬取，该项目当中的网站使用了js混淆，js加密等反爬机制，通过使用pyexecjs模拟js代码，对该网站中的加密解密过程进行模拟，获取到了解密后的数据
案例展示
-
网易不同模块新闻爬取
该项目中使用了scrapy框架+selenium对网易新闻不同板块发起请求，抓取动态数据，经过解析后在scrapy管道中写入mysql进行数据持久化
-
中国空气质量数据爬取
该项目中，网站使用了js混淆和js加密，并且网站携带的ajax请求参数也是动态加密的，因此，我先定位到了ajax请求参数的加密方法，将其粘贴到了Code.js文件中，发现网站ajax请求返回的数据也是加密的，因此在定位到了返回数据的解密方法，最后使用pyexecjs模拟js代码，
相似人才推荐
-
800元/天资深全栈工程师微软（中国）概要：从事C# .net 8年，做事高效，有丰富的.net开发需求分析到软件设计编码架构经验。 掌握分布
-
500元/天后端工程师杭州博彦信息技术有限公司概要：熟练掌握Spring、SpringMVC、MyBatis、Hibernate、MyBatis-Plu
-
500元/天开发工程师厦门书生概要：WEB开发，c# ,javascript ,css,JQUERY, MSSQL WEB开发，c#
-
500元/天科研助理南京大学概要：前端了解Vue框架，使用mpvue框架完成小程序开发； 后端熟悉Python和JAVA，熟悉Spr
-
500元/天开发兼系统维护红蚂蚁装饰股份有限公司概要：精通PHP后端开发 熟悉java后端开发，H5页面编写 精通MySQL sql语句编写并优化，熟
-
500元/天全栈浪潮概要：熟练使用后端框架：ssm、springboot、springcloud，数据库：mysql 、ora
-
600元/天中级后端软件工程师xjkj概要：常用开发语言为 python，了解 C/C++,JAVA 等编程语言，熟悉 Linux 环境及相关工 -
1000元/天技术经理杭州奥海科技有限公司概要：多年 Java 软件开发和系统架构经验，熟悉 Java 各类常用框架。spring ，mybatis
