技术:熟练掌握python开发,能使用python完成爬虫及web后端开发相关工作; 熟悉linux开发环境及常用命令; 熟悉MVC开发模式,掌握使用Django框架进行项目开发,了解Flask、Tornado; 掌握request,Scrapy ,scrapy-redis分布式
项目:淘宝分布式数据采集系统 项目介绍: 本项目主要用于采集淘宝PC端及APP端搜索关键词获取各类排序商品列表及详细数据,是用于给另一个网站项目提供页面搜索功能的后台程序,类似于看店宝网站VIP会员的搜索功能。 技术选型: 1.考虑到后期可能存在的高并发情况,采用scrapy-
案例: 淘宝分布式数据采集系统优客居
技术:python,shell,openstack开发,数据分析,OpenStack是 模仿亚马逊 AWS 使用python开发的 IssA层实现框架,openstack遵循Apache2.0协议,使我兴奋的是它的WEB管理模块 horizon,是使用Django开发的,站在巨人的肩膀
项目:OpenStack是 模仿亚马逊 AWS 使用python开发的 IssA层实现框架,openstack遵循Apache2.0协议,使我兴奋的是它的WEB管理模块 horizon,是使用Django开发的,站在巨人的肩膀上,也许我可以对其进行二次开发 1.Openstack云管
案例: 云管平台开发