网站数据采集

企业服务 数据服务 案例ID：185274
尘世风
8 年经验· 浩鲸智能科技有限公司
微信扫码沟通，客服可协助直接对接工程师；如当前档期不合，也可继续推荐相似案例作者。

案例介绍

使用feapder框架，对js逆向，获取ApiKey，历史Redis去重技术对数据进行去重，采用多线程采集数据，最后数据存放在mongodb中。

案例图片

共 2 张
网站数据采集 网站数据采集
查看该工程师的更多案例 >

相似案例推荐

政府端App
政府端App
政府端App目前包含数据看板 + 食品快检两个部分，其中数据
数据分析
数据分析
全栈开发。将用到的企业全部的系统数据库数据同步到一个数据库下
业务监控平台
业务监控平台
该项目主要包含新增角色管理模块，用于配置角色操作权限；基础数
Bom处理软件
Bom处理软件
项目基于Python、PySide2进行开发，设计可进行位号
***全域智治系统
***全域智治系统
本人负责全部前端开发，此项目工作量挺大的，包括pc端和移动端
筑友云APP
筑友云APP
项目描述： 这是一个为方便采集劳务人员信息以及查询考勤和工

网站数据采集

企业服务 · 数据服务 案例ID：185274
联系该工程师
微信扫码，建群沟通
作者： 尘世风 - 8年经验- 浩鲸智能科技有限公司

案例介绍

使用feapder框架，对js逆向，获取ApiKey，历史Redis去重技术对数据进行去重，采用多线程采集数据，最后数据存放在mongodb中。

案例图片

网站数据采集

网站数据采集

查看该工程师的更多案例

相似案例推荐

  • 政府端App

    政府端App

    政府端App目前包含数据看板 + 食品快检两个部分，其中数据

  • 数据分析

    数据分析

    全栈开发。将用到的企业全部的系统数据库数据同步到一个数据库下

  • 业务监控平台

    业务监控平台

    该项目主要包含新增角色管理模块，用于配置角色操作权限；基础数

  • Bom处理软件

    Bom处理软件

    项目基于Python、PySide2进行开发，设计可进行位号

  • ***全域智治系统

    ***全域智治系统

    本人负责全部前端开发，此项目工作量挺大的，包括pc端和移动端

  • 筑友云APP

    筑友云APP

    项目描述： 这是一个为方便采集劳务人员信息以及查询考勤和工

发布任务

企业点击发布任务，工程师会在任务下报名，招聘专员也会在 1 小时内与您联系确认。
点击发布任务

1小时精推人才

需求方专属客服，免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例 联系该工程师
微信沟通 客服 看中这位工程师了？客服帮你 1 小时对接沟通 → ×