技术:1,会python爬虫,主要会使用scrapy框架,requests模块,xpath和正则提取数据,js加密处理,模拟登陆处理 2,会python后端开发,熟练使用django开发框架,主要使用mysql和redis存储数据和做消息队列
项目:1,云通信小号业务,主要负责开发查询模块和分页模块,权限功能 2,vos落地结算,主要负责设计后端接口,用于统计每日几千万条话单数据中的通话时间,计费成本,计费金额等统计 3,京东全网数据采集,主要采用requests模块抓取小分类的所有url放入redis,然后采用scra
案例: 云通信小号业务