采集系统-爬虫项目
项目描述:
该项目是为了给集团大数据提供招标数据开发的爬虫项目,主要采用了selenium框架去实现对网站数据的获取、整理、存库,针对每个不同的网站进行定制化的开发爬虫代码,再通过定时任务获取一定时间段内的该网站的招标数据,大概有一千多个网站需要爬取其中的招标信息。
职责描述:
1、 主要负责其中的四百多个网站的爬虫代码开发,
2、 日常的项目部署工作和对接数据清洗的同事,根据数据清洗同事的意见修改开发的网站代码
一个集采集、展示、分析(比较)、预测于一体的农产品数据平台,
1.三年工作经验,上线过七个项目。 2.熟练使用 htm
网站主要功能是数据经纬度转换为天地图的点位和路径,包括重叠路
使用python编写的自动化爬虫脚本,展示的是爬取小说网站内
项目名称:资源开发 ERP 项目描述:当前主要是建设公司的
项目名称:资源开发 ERP 项目描述:当前主要是建设公司的
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者