ID：279161
阿卜杜萨垃木
python开发
- 公司信息：
- 新疆科技
- 工作经验：
- 3年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 可工作日驻场（离职原因）
- 所在区域：
- 北京
- 海淀
技术能力
熟悉各种python开发，网络爬虫，大数据分析
2 年计算机后端开发经验，熟练掌握 C++，java 等计算机语言，了解 Bootstrap、AngularJS 等主流前端框架，可独立使用 MySQL 搭建数据库，多次参加全国编程类大赛。
项目经验
项目名称：分布式爬虫爬取北京市企业信用信息网
项目描述：
这个项目是通过scrapy-redis搭建分布式爬虫爬取企业信用信息网公布栏，爬取列表页每一项下的子页获取数据
我的职责
首先爬取首页后通过xpath匹配每个的信息块的span后构建请求，并通过scrapy.Request发送请求，用xpath匹配需要的信息。
同时循环创建下一页请求的form表单，通过scrapy.FormRequest发送POST请求。所有爬取的信息缓存到redis数据库中，
最后通过编写python脚本将redis数据库中数据读取出来加入mysql数据库。
其他爬取的网站：搜狐新闻、豆瓣、腾讯新闻网。
相似人才推荐
-
500元/天算法工程师重庆劢齐医疗科技概要：1、熟悉python、c++。 2、熟悉pytorch框架，对目标检测、语义分割、GAN等网络模型
-
500元/天python工程师工贸概要：扎实的Python编程基础，具有良好的代码风格。 熟练使用MySql等关系数据库，掌握数据库表设计
-
500元/天python爬虫大学生概要：1.Python中re、requests、beautifulSoup等库的熟练使用 2.Pytho
-
500元/天python后端工程师广西财经学院概要：技术体系主要在于三方面： 1、后端开发方面，后端开发的能力主要是熟练的掌握了通过python的dj
-
500元/天python开发慧科讯业（北京）网络科技有限公司概要：1.对Python爬取数据较为熟练，善于处理爬取后的数据以及处理反爬，例如封ip问题等。 2.掌握
-
500元/天python工程师无概要：Python，爬虫，js逆向，数据分析 1.Python基础扎实，熟悉常用的类库，能运用模块化、面
-
600元/天高级python开发工程师河南锐派网络科技有限公司概要：多年的编程经验,会多种编程语言: python,javascript,delphi,html,lu
-
500元/天python自学成才概要：技术的学习在于应用到实际解决问题，简便工作，在应用中学习，在学习中成长，成长了更有利于解决问题。
