ID：297836
陳情
python工程师
- 公司信息：
- 湖南依铭信息有限公司
- 工作经验：
- 2年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 可工作日驻场（离职原因）
- 可工作日驻场（自由职业原因）
- 所在区域：
- 长沙
- 全区
技术能力
掌握Python 爬虫技术 熟悉python主流类库使用，熟悉Scrapy requests Selenium等框架
熟悉Mysql 熟悉正则表达式 Xpath CssSelector beautifulsoup等网页信息解析技术。
熟悉Htpp协议，了解TCP/IP协议 熟悉Linux系统
.......
项目经验
项目名称：分布式爬虫爬取北京市企业信用信息网
项目描述：
项目介绍
这个项目是通过scrapy-redis搭建分布式爬虫爬取企业信用信息网公布栏，爬取列表页每一项下的子页获取数据
我的职责
首先爬取首页后通过xpath匹配每个的信息块的span后构建请求，并通过scrapy.Request发送请求，用xpath匹配需要的信息。
同时循环创建下一页请求的form表单，通过scrapy.FormRequest发送POST请求。所有爬取的信息缓存到redis数据库中，
最后通过编写python脚本将redis数据库中数据读取出来加入mysql数据库。
其他爬取的网站：搜狐新闻、豆瓣、腾讯新闻网
相似人才推荐
-
1500元/天Python设计师百度概要：Python设计师资深设计师Python设计师资深设计师Python设计师资深设计师Python设计 -
600元/天高级php工程师 python工程师欧菲斯集团股份有限公司概要：熟悉Python、 php、 java，并具备良好的编程风格，以及能够撰写良好的技术文档 深入理解
-
500元/天python工程师温氏概要：基本语法和数据类型：了解Python的基本语法，如变量、函数、循环和条件语句，以及不同类型的数据，如
-
600元/天Python爬虫开发工程师中电金信概要：有3年以上爬虫开发经验，爬过facebook、Instagram、youtube、twitter、t
-
500元/天python程序员无概要：python爬虫程序员，熟悉scrapy框架，JavaScript逆向，MySQL，破解多种反爬手段
-
500元/天python工程师多益网络概要：熟悉掌握 python、java、c++、c的开发语言，掌握 Flask、Django 框架，掌握
-
1200元/天python 系统开发工程师Intel概要：1、熟悉后台开发，主要技术栈是python，团队成员技术栈不一，但是能完整的开发一个产品。 2、熟
-
700元/天高级Python开发工程师腾讯概要：能够使用 python 进行运维及辅助工具开发，曾为阿里云开发过数据库高可用的运维工具 能够使用
