豆包数据采集

企业服务 · 数据服务 案例ID: 247151
联系该工程师
微信扫码,建群沟通
作者: 李俊伟 - 10年经验- 北京零一万物科技有限公司

案例介绍

项目概述:

该项目旨在采集AI智能 头部企业智能工作数据, 进行样品竞品数据对比, 增加本项目人工智能数据的准确性;

工作职责:
1. 逆向目标网站的风控机制, 解决代理IP识别为高风险&爬虫的标签;
2. 分析目标网站风控拦截机制, 解决固定行为下被识别为自动化工作采集特征, 增加拟人的行为方式
3. 分析目标网站, 在增加拟人行为和代理IP使用情况下, 仍被拦截; 增加canva 指纹机制的功能;
4. 编写Flask后端接口文件, 实现数据问题上传和下载的功能;
5. 采集数据,整理数据格式, 保存到redis库,供下游使用;

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
微信沟通 联系需求方端客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×