空濛
Python工程师
南通玲珑软件技术有限公司 · 3年经验
日薪：
￥500/8h
地点：
上海 闵行
时间：
可工作日驻场（自由职业原因）
信用行为
0
接单数
0
评价数
1
收藏数
技术能力
脚本技能
1. 熟练掌握Python语言，熟悉常用的开源库.
2. 熟练掌握HTML、CSS、Javascript、jQuery以及AJAX等前端技术。
框架技能
3. 熟悉掌握Django、Flask、tornado框架。
4. 熟练掌握Scrapy框架及其高级特性，以及编写各类中间件。
5. 熟练掌握scrapy-redis分布式组件，了解各组件工作机制。
数据库技能
熟悉Redis、MySQL、Mongodb数据库操作和特点,并且了解MySQL数据库的优化。
爬虫技能
7. 熟练HTTP/HTTPS协议，TCP/IP网络协议。
8. 熟悉Python 多线程、多协程爬虫及其机制。
9. 熟练使用urllib、urllib2、requests等网络模块。
10 熟练使用Xpath与lxml、BeautifulSoup、re、json模块进行数据提取。
11 了解Tesseract机器图像识别系统，并处理简单的文字验证码。
12 熟练使用Selenium+PhantomJS(headless)实施动态HTML抓取。
1. 熟练掌握Python语言，熟悉常用的开源库.
2. 熟练掌握HTML、CSS、Javascript、jQuery以及AJAX等前端技术。
框架技能
3. 熟悉掌握Django、Flask、tornado框架。
4. 熟练掌握Scrapy框架及其高级特性，以及编写各类中间件。
5. 熟练掌握scrapy-redis分布式组件，了解各组件工作机制。
数据库技能
熟悉Redis、MySQL、Mongodb数据库操作和特点,并且了解MySQL数据库的优化。
爬虫技能
7. 熟练HTTP/HTTPS协议，TCP/IP网络协议。
8. 熟悉Python 多线程、多协程爬虫及其机制。
9. 熟练使用urllib、urllib2、requests等网络模块。
10 熟练使用Xpath与lxml、BeautifulSoup、re、json模块进行数据提取。
11 了解Tesseract机器图像识别系统，并处理简单的文字验证码。
12 熟练使用Selenium+PhantomJS(headless)实施动态HTML抓取。
项目经验
项目名称：七件事生活
项目开发环境：Django + MySQL + Nginx + Whoosh + uWSGI
项目描述：七件事生活网是围绕武汉人们日常生活的打造的网上生鲜超市，旨在将柴米油盐酱醋茶与高科技互联网结合实现便利的网上购买新鲜蔬菜和现实配送等服务。本项目主要为前台的页面展示和后台的管理。
项目模块：
1、用户信息 （注册、登录、密码等）
2、商品展示 （产品信息的维护与展示）
3、购物车模块（用户对产品的临时储存，增删结转）
4、用户订单管理（服务器对于用户提交的订单进行审核，并实现对订单的增
删改管理）
5、商品搜索（用户能够通过关键字来搜索到自己想要的物品）
6、支付模块 （调用第三方接口，完成支付）
负责模块：购物车模块和商品展示模块
责任描述：
1、参与了数据库的设计
2、通过装饰器判别是否登录，利用Ajax实现用户可以在购物车中删除商品、
增加商品数量等功能
3、从数据库查询相应商品数据并展示，Ajax技术完成数据异步加载
项目二：海外(英国)投资置业及学生公寓短租
项目名称：洋房东爬虫
开发环境：Ubuntu、scrapy框架、scrapy-redis分布式组件、Redis3.2
项目简介：这个项目是对英国置业及各大学府公寓房源信息抓取，采用scrapy-redis分布式实现。Windows 10 做为Master端，管理多个Linux Slave端爬虫集群。分布式使用Redis做为缓存数据库，利用Redis的高并发和I/O读写来实现高速下载。抓取过程中发现商品信息及图片均为JS动态加载的，导致信息抓取不完整，故采用开启下载中间件，利用selenium + PhamtonJS的方式发送请求，待数据加载完毕后返回提取
自主爬取的网站：新浪、斗鱼、百度贴吧、拉勾
项目开发环境：Django + MySQL + Nginx + Whoosh + uWSGI
项目描述：七件事生活网是围绕武汉人们日常生活的打造的网上生鲜超市，旨在将柴米油盐酱醋茶与高科技互联网结合实现便利的网上购买新鲜蔬菜和现实配送等服务。本项目主要为前台的页面展示和后台的管理。
项目模块：
1、用户信息 （注册、登录、密码等）
2、商品展示 （产品信息的维护与展示）
3、购物车模块（用户对产品的临时储存，增删结转）
4、用户订单管理（服务器对于用户提交的订单进行审核，并实现对订单的增
删改管理）
5、商品搜索（用户能够通过关键字来搜索到自己想要的物品）
6、支付模块 （调用第三方接口，完成支付）
负责模块：购物车模块和商品展示模块
责任描述：
1、参与了数据库的设计
2、通过装饰器判别是否登录，利用Ajax实现用户可以在购物车中删除商品、
增加商品数量等功能
3、从数据库查询相应商品数据并展示，Ajax技术完成数据异步加载
项目二：海外(英国)投资置业及学生公寓短租
项目名称：洋房东爬虫
开发环境：Ubuntu、scrapy框架、scrapy-redis分布式组件、Redis3.2
项目简介：这个项目是对英国置业及各大学府公寓房源信息抓取，采用scrapy-redis分布式实现。Windows 10 做为Master端，管理多个Linux Slave端爬虫集群。分布式使用Redis做为缓存数据库，利用Redis的高并发和I/O读写来实现高速下载。抓取过程中发现商品信息及图片均为JS动态加载的，导致信息抓取不完整，故采用开启下载中间件，利用selenium + PhamtonJS的方式发送请求，待数据加载完毕后返回提取
自主爬取的网站：新浪、斗鱼、百度贴吧、拉勾
空濛
Python工程师 · 3年经验 · 南通玲珑软件技术有限公司
0
累计接单
0
用户评价
1
被收藏
信用行为
0
接单数
0
评价数
1
收藏数
技术能力
脚本技能
1. 熟练掌握Python语言，熟悉常用的开源库.
2. 熟练掌握HTML、CSS、Javascript、jQuery以及AJAX等前端技术。
框架技能
3. 熟悉掌握Django、Flask、tornado框架。
4. 熟练掌握Scrapy框架及其高级特性，以及编写各类中间件。
5. 熟练掌握scrapy-redis分布式组件，了解各组件工作机制。
数据库技能
熟悉Redis、MySQL、Mongodb数据库操作和特点,并且了解MySQL数据库的优化。
爬虫技能
7. 熟练HTTP/HTTPS协议，TCP/IP网络协议。
8. 熟悉Python 多线程、多协程爬虫及其机制。
9. 熟练使用urllib、urllib2、requests等网络模块。
10 熟练使用Xpath与lxml、BeautifulSoup、re、json模块进行数据提取。
11 了解Tesseract机器图像识别系统，并处理简单的文字验证码。
12 熟练使用Selenium+PhantomJS(headless)实施动态HTML抓取。
1. 熟练掌握Python语言，熟悉常用的开源库.
2. 熟练掌握HTML、CSS、Javascript、jQuery以及AJAX等前端技术。
框架技能
3. 熟悉掌握Django、Flask、tornado框架。
4. 熟练掌握Scrapy框架及其高级特性，以及编写各类中间件。
5. 熟练掌握scrapy-redis分布式组件，了解各组件工作机制。
数据库技能
熟悉Redis、MySQL、Mongodb数据库操作和特点,并且了解MySQL数据库的优化。
爬虫技能
7. 熟练HTTP/HTTPS协议，TCP/IP网络协议。
8. 熟悉Python 多线程、多协程爬虫及其机制。
9. 熟练使用urllib、urllib2、requests等网络模块。
10 熟练使用Xpath与lxml、BeautifulSoup、re、json模块进行数据提取。
11 了解Tesseract机器图像识别系统，并处理简单的文字验证码。
12 熟练使用Selenium+PhantomJS(headless)实施动态HTML抓取。
项目经验
项目名称：七件事生活
项目开发环境：Django + MySQL + Nginx + Whoosh + uWSGI
项目描述：七件事生活网是围绕武汉人们日常生活的打造的网上生鲜超市，旨在将柴米油盐酱醋茶与高科技互联网结合实现便利的网上购买新鲜蔬菜和现实配送等服务。本项目主要为前台的页面展示和后台的管理。
项目模块：
1、用户信息 （注册、登录、密码等）
2、商品展示 （产品信息的维护与展示）
3、购物车模块（用户对产品的临时储存，增删结转）
4、用户订单管理（服务器对于用户提交的订单进行审核，并实现对订单的增
删改管理）
5、商品搜索（用户能够通过关键字来搜索到自己想要的物品）
6、支付模块 （调用第三方接口，完成支付）
负责模块：购物车模块和商品展示模块
责任描述：
1、参与了数据库的设计
2、通过装饰器判别是否登录，利用Ajax实现用户可以在购物车中删除商品、
增加商品数量等功能
3、从数据库查询相应商品数据并展示，Ajax技术完成数据异步加载
项目二：海外(英国)投资置业及学生公寓短租
项目名称：洋房东爬虫
开发环境：Ubuntu、scrapy框架、scrapy-redis分布式组件、Redis3.2
项目简介：这个项目是对英国置业及各大学府公寓房源信息抓取，采用scrapy-redis分布式实现。Windows 10 做为Master端，管理多个Linux Slave端爬虫集群。分布式使用Redis做为缓存数据库，利用Redis的高并发和I/O读写来实现高速下载。抓取过程中发现商品信息及图片均为JS动态加载的，导致信息抓取不完整，故采用开启下载中间件，利用selenium + PhamtonJS的方式发送请求，待数据加载完毕后返回提取
自主爬取的网站：新浪、斗鱼、百度贴吧、拉勾
项目开发环境：Django + MySQL + Nginx + Whoosh + uWSGI
项目描述：七件事生活网是围绕武汉人们日常生活的打造的网上生鲜超市，旨在将柴米油盐酱醋茶与高科技互联网结合实现便利的网上购买新鲜蔬菜和现实配送等服务。本项目主要为前台的页面展示和后台的管理。
项目模块：
1、用户信息 （注册、登录、密码等）
2、商品展示 （产品信息的维护与展示）
3、购物车模块（用户对产品的临时储存，增删结转）
4、用户订单管理（服务器对于用户提交的订单进行审核，并实现对订单的增
删改管理）
5、商品搜索（用户能够通过关键字来搜索到自己想要的物品）
6、支付模块 （调用第三方接口，完成支付）
负责模块：购物车模块和商品展示模块
责任描述：
1、参与了数据库的设计
2、通过装饰器判别是否登录，利用Ajax实现用户可以在购物车中删除商品、
增加商品数量等功能
3、从数据库查询相应商品数据并展示，Ajax技术完成数据异步加载
项目二：海外(英国)投资置业及学生公寓短租
项目名称：洋房东爬虫
开发环境：Ubuntu、scrapy框架、scrapy-redis分布式组件、Redis3.2
项目简介：这个项目是对英国置业及各大学府公寓房源信息抓取，采用scrapy-redis分布式实现。Windows 10 做为Master端，管理多个Linux Slave端爬虫集群。分布式使用Redis做为缓存数据库，利用Redis的高并发和I/O读写来实现高速下载。抓取过程中发现商品信息及图片均为JS动态加载的，导致信息抓取不完整，故采用开启下载中间件，利用selenium + PhamtonJS的方式发送请求，待数据加载完毕后返回提取
自主爬取的网站：新浪、斗鱼、百度贴吧、拉勾
立即沟通
相似人才推荐：
北京python高级开发工程师 (内蒙古嘉讯网络科技有限责任公司) ，3年经验 ，500元/天
海外Python开发 (日本广岛大学) ，2年经验 ，500元/天
上海linux python 应用工程师 (3cors) ，6年经验 ，500元/天
广州python工程师 (广州悦然生物有限公司) ，2年经验 ，500元/天
南京全栈开发 (某运维行业企业) ，9年经验 ，1000元/天
深圳高级Python工程师 (深圳市腾讯计算机系统有限公司) ，5年经验 ，1000元/天
深圳Python程序设计师 (深圳科诗特软件公司) ，3年经验 ，500元/天
成都Python爬虫工程师，项目经理 (平安科技) ，8年经验 ，500元/天
