ID：120529
18
python 后端
- 公司信息：
- 人人优活科技
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 深圳
- 全区
技术能力
熟悉django的开发流程，
使用各种数据提取手段，js xpath 正则可以制定完整的爬虫方案，优化爬取效率
熟悉爬虫scrapy框架搭建分布式爬取
mysql数据的索引优化
Nginx加wsgi部署项目
项目经验
项目：淘宝页面抓取
职责：负责页面分析，抓取工作，将数据进行存储
技术名词：mongodb,selenim,chrome/phantomJS,xpath,scrapy
项目流程：1.搜索关键字：利用selenium驱动浏览器搜索关键字，得到查询后的商品列表
2.分析页面并完成分页：得到商品的页码数，模拟翻页，得到后续的商品列表
3.采用MongoDB作为本地数据库，将要提取的数据，保存在mongodb中，同时每次下载前会检查请求指纹，防止重复下载，避免资源浪费；
4.分析提取商品内容：利用PyQuery分析源码，解析得到商品列表
评价列表
该用户已被预约 1 次，预约方未评价，系统默认 5星 好评。
相似人才推荐
-
600元/天python工程师时代互联科技有限公司概要：1，python语言 2，正则表达式 3，HTML网页解析 4，xpath语法, css选择器
-
500元/天python工程师无概要：python程序的后端，编程； 会爬虫，urllib，scrapy，等一些框架和模块，能够反爬虫，
-
500元/天高级python开发工程师极视角概要：熟悉flask/tornado/django框架； 熟悉celery,rabbitamq异步处理耗
-
500元/天Python工程师某初创公司概要：1.熟悉Linux系统，掌握JavaScript 、Python、Go等语言； 2.了解多线程
-
500元/天python 数据库某信息科技公司概要：python 爬虫， 数据文档处理，数据库开发
-
800元/天Python研发工程师国际商业机器（中国）投资有限公司概要：专注Python开发，可以快速搭建后台，接口，API，爬虫，数据统计和分析，数据清洗以及处理。完活快
-
500元/天Python研发工程师中国飞机强度研究所概要：擅长数据抓取、清洗、分析及可视化： 数据抓取常用：scrpy/requests； 数据清洗、分析
-
500元/天python 爬虫工程师xxxxx概要：熟悉Python 语言，熟练使用Python常用模块 熟悉Linux系统，了解常用的shell
