爬虫，数据采集，数据处理

人工智能 其他 案例ID：160919
小头里
3 年经验· 上海空眼
微信扫码沟通，客服可协助直接对接工程师；如当前档期不合，也可继续推荐相似案例作者。

案例介绍

scrapy-redis设计爬虫：


分布式爬取社交网站数据
scrapy，redis，mysql，python
requests模块请求网页数据
selenium模拟浏览器登录
用scrapy-redis框架特性实现数据去重及数据增量

案例图片

共 2 张
爬虫，数据采集，数据处理 爬虫，数据采集，数据处理
查看该工程师的更多案例 >

相似案例推荐

单耳连接器云图
单耳连接器云图
基于数据库的平台结构数字模型构建技术，构建平台结构系统仿真数
动态配置中心
动态配置中心
在日常开发工作，经常有一些动态数据需要能够快速开发使用及方便
日志审计分析
日志审计分析
管理审核系统日志 统一日志管理 日志数据采集、存储、实时
安检门软件
安检门软件
无感检测通道门： 1、金属探测； 2、易燃易爆气体浓度检
动环智能监控系统
动环智能监控系统
负责从前端设备获取遥测和遥信数据，并对设备进行遥控和遥调:
222
222
您已在“基本信息”中填写过联系方式，需求方如选中您简历，会通

爬虫，数据采集，数据处理

人工智能 · 其他 案例ID：160919
联系该工程师
微信扫码，建群沟通
作者： 小头里 - 3年经验- 上海空眼

案例介绍

scrapy-redis设计爬虫：


分布式爬取社交网站数据
scrapy，redis，mysql，python
requests模块请求网页数据
selenium模拟浏览器登录
用scrapy-redis框架特性实现数据去重及数据增量

案例图片

爬虫，数据采集，数据处理

爬虫，数据采集，数据处理

查看该工程师的更多案例

相似案例推荐

  • 单耳连接器云图

    单耳连接器云图

    基于数据库的平台结构数字模型构建技术，构建平台结构系统仿真数

  • 动态配置中心

    动态配置中心

    在日常开发工作，经常有一些动态数据需要能够快速开发使用及方便

  • 日志审计分析

    日志审计分析

    管理审核系统日志 统一日志管理 日志数据采集、存储、实时

  • 安检门软件

    安检门软件

    无感检测通道门： 1、金属探测； 2、易燃易爆气体浓度检

  • 动环智能监控系统

    动环智能监控系统

    负责从前端设备获取遥测和遥信数据，并对设备进行遥控和遥调:

  • 222

    222

    您已在“基本信息”中填写过联系方式，需求方如选中您简历，会通

发布任务

企业点击发布任务，工程师会在任务下报名，招聘专员也会在 1 小时内与您联系确认。
点击发布任务

1小时精推人才

需求方专属客服，免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了？客服帮你 1 小时对接沟通 → ×