项目简介:
根据业务要求,收集各类商品的天猫与京东销售情况,型号折扣及价格的趋势。
责任描述:
1.使用scrapy框架;
2.使用XPath,正则进行页面分析并提取数据;
3.使用MySQL进行信息存储;
模块介绍:
1.spider模块:处理url地址和需要的数据
2.下载中间件模块:设置代理ip和User-Agent;
3.管道模块:与数据库交互并保存数据
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者