案例介绍
项目描述：起初公司招聘信息渠道并不完善，而公司业务与国家工信部之间合作针对职业教育发展做平台，数据的来源需要比较完善因此基于全国各大招聘信息，企业信息，进行数据分析操作。
项目技术：scrapy、scrapy-redis、aiosync、selenium、pyexcejs、nodejs、crawlab；
项目负责：
负责招聘网站的拓展与评估；
负责全国各大招聘网站爬虫脚本开发与维护；
负责企业信息采集，实现途径各大招聘网站注册信息进行采集
负责解决各个网站对应的反爬措施含验证码，cookies，post参数等风控问题
负责项目整体维护升级管理，纳入crawlab爬虫管理系统，优化定时采集策略；
项目总结：
网站数量过多难以维护，通过托于爬虫管理系统crawlab进行定时采集，邮箱发送是否采集失败；
部分网站出现有反人类验证码，需要通过自动化工具解决；
部分网站有加密参数，一般有先考虑小程序或者app入口是否存在加密参数，如果有就会采用对网站加密参数进行逆向。
案例图片
相似案例推荐
其他人才的相似案例推荐
-
喜阅小程序
喜阅小程序，记录亲子阅读。 包含阅读计划，阅读打卡，结束书
-
智慧民政通
智慧民政通使用了Vue全家桶，配合高德地图api接口，主要方
-
商龙进销存
商龙进销存管理系统是为商业贸易型企业提供了完美的解决方案,包
-
水电表信息管理
售后服务肳而通过热切割亲热让他温热让他我热热特瑞特一售后服务
-
气象预测管理系统
1、项目介绍：用vue搭建的一个可以预测全国各个地区站点未来
-
协同OA系统
这是一个企业内部的协同OA系统，其中包含登陆，企业组织架构，
-
秒影工场天机平台
秒影启量是以创新模式与技术赋能的短视频创意生产平台，需求方提
-
产业大数据招商平台
平台的算法模型主要实现四个大的目标：一是企业推荐符合本地产业
-
数据处理分析项目
因与公司签订有保密协议，相关信息无法提供！ 因与公司签订有
-
mes
移动端mes管理系统 旨在提高车间工作效率，降低出错率，减
-
表格处理 数据分析
表格处理 数据分析 表格处理 数据分析 表格处理
-
数字化办公系统
就是针对企业的办公流程，办公特点，办公特色，定制化开发的系统
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
