猿急送>

其他Python兼职程序员

ID：139020

Skyline

Python Web后端+爬虫工程师

公司信息：
湖南湖湘商贸股份有限公司

工作经验：
2年

兼职日薪：
800元/8小时

兼职时间：
下班后
周六
周日

所在区域：
其他
全区

技术能力

Python技能:
1.Python基础扎实，有良好的编码习惯及编码风格，能熟悉运用装饰、单例等主流的设计模式.
2.熟悉 MVC、Python常用第三方库，并能阅读官方文档。
3.掌握 Python网络编程，Python办公自动化，邮件操作。
4.熟练使用 Python文件操作，字符串解析，RE正则表达式。

WEB技能:
1.熟练使用 Django、Flask后端框架进行开发。
2.了解 Python 后端框架Tornado开发。
3.熟悉 HTML、CSS、Ajax、Bootstrap前端技术栈。

数据库技能:
1.熟悉 SQL语句，Python操作MYSQL关系数据库。
2.熟悉 Python操作MongoDB、Redis等非关系型数据库。

爬虫技能：
1.熟悉 Requests库，了解URLLIB、URLLIB2库。
2.熟练 RE正则、XPATH、BEAUTIFULSOUP网页信息抽取技术。
3.熟练使用 Scrapy爬虫框架，以及Scrapy-redis分布式策略。
4.熟悉常见的爬虫反爬虫策略。

项目经验

2017/09 -- 2017/10：生鲜贴吧/论坛数据采集（爬虫）

开发工具： Pycharm + Scrapy + Mysql
责任描述：1. 分析网页的URL的跳转，设计存储字段模型；
2. 负责分析数据爬取过程，编写爬虫文件；
3. 使用scrapy框架进行爬取网页，使用re+xpath进行数据的提取；
4. 对爬取到的内容在piplines文件里进行编码与保存；
5. 运用第三方ip代理池，防止ip被封；
6. 对settings文件的设置实现随机下载延迟以及对中间件；
7. 对抓取的数据进行抽取、清洗、去重，并存储到MySQL数据库中；
项目描述：
深度爬取垂直领域论坛，分别提取出多类产品潜在客户信息、清洗、入库并定时发送营销信息

2017/06 -- 2017/11：湘村购（网站）

责任描述：1. 参与了用户信息、商品信息数据库的设计。使用mysql数据库，严格遵守数据库三范式的设计模式，减少不必要的冗余。
2. 使用AJAX实现用户中心物品更新及订单匹配功能。
3. 使用装饰器完成状态验证；
4. 购物车模块，将用户存放的数据存储在cookie中。
5. 订单模块，若用户交易完成后，与后台数据库做交互，做相应的数据库操作，减除数据库中商品的数量。
项目描述：湘村购是一个C2B模式的本地生鲜电商平台，通过自建物流，支持送货上门，旨在建立一条从田间地头到百姓餐桌的生鲜管道，网站使用 Nginx + UWSGI + Django框架实现

2017/06 -- 2017/08：天猫商城生鲜产品数据采集（爬虫）

开发工具： Pycharm + Scrapy + Mysql
责任描述：
1. 采用 requests实现爬取。
2. 用 xpath 提取想要的节点，分别为产品的名字，价格，折扣，销量。以列表形式存储。
3. 根据分析出下一页的链接规则，运用re去获取数字，添加到url中继续爬取，下一页面直到获取不到。
4. 把爬取的内容存入本地磁盘，也可存入数据库
项目描述：根据业务要求，收集各类水果和海鲜商品的天猫商城销售情况，型号折扣以及价格的趋势。

2017/01 -- 2017/05：鲜居阁（网站）

开发工具： Mysql + Ngnix + Django + uwsig
责任描述：1. 用户注册\登录；购物车接口。
2. 参与了用户信息、商品信息数据库的设计。
3. 对用户注册、登录及密码等信息进行增、删、改、查处理；注册时对用户名等信息进行唯一性校验。
4. 运用手机验证码完成对用户密码修改的验证服务。
5. 利用中间件实现用户登录页面自动跳转功能。
项目描述：湖南鲜居是一家移动互联网与社区相结合的平台服务创业型公司，打造针对小区的共享经济生态社区平台。

2016/07 -- 2016/12：玖草生物科技商城（网站）

开发工具： Pycharm + Django
责任描述：1. 参与了用户信息、商品信息数据库的设计。
2. 对用户注册、登录及密码等信息进行增、删、改、查处理；
3. 注册时对用户名等信息进行唯一性校验。
4. 利用中间件实现用户登录页面自动跳转功能。
5. 使用ajax技术时间购物车界面的动态显示与服务器存储。
项目描述：玖草是一个保健品和滋补品网上销售平台，产品包括中药、保健茶等中医常见滋补用品。