采集系统-爬虫项目

企业服务 · 数据服务 案例ID: 215464
联系该工程师
微信扫码，建群沟通
作者： Camellia - 4年经验- 北京东方国信股份科技有限公司

案例介绍

采集系统-爬虫项目
项目描述：
该项目是为了给集团大数据提供招标数据开发的爬虫项目，主要采用了selenium框架去实现对网站数据的获取、整理、存库，针对每个不同的网站进行定制化的开发爬虫代码，再通过定时任务获取一定时间段内的该网站的招标数据，大概有一千多个网站需要爬取其中的招标信息。
职责描述：
1、 主要负责其中的四百多个网站的爬虫代码开发，
2、 日常的项目部署工作和对接数据清洗的同事，根据数据清洗同事的意见修改开发的网站代码

案例图片

采集系统-爬虫项目

采集系统-爬虫项目

采集系统-爬虫项目

查看该工程师的更多案例

相似案例推荐

发布任务

企业点击发布任务，工程师会在任务下报名，招聘专员也会在 1 小时内与您联系确认。
点击发布任务

1小时精推人才

需求方专属客服，免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
微信沟通 联系需求方端客服 看中这位工程师了？客服帮你 1 小时对接沟通 → ×