基本信息

案例ID:138721

技术顾问:abingtech - 9年经验 - 保密

联系沟通

微信扫码,建群沟通

项目名称:amazon分布式采集平台

所属行业:人工智能 - 机器人

->查看更多案例

案例介绍

该项目电子商务公司开发,目的是采集amazon的跟卖链接,通过客户给定的种子链接,采用广度优先的算法进行分布式采集,采用redis+mysql+springboot技术,对爬虫进行分布式部署,突破防爬机制是采用采用忆牛云代理,形成自己的稳定代理IP池。

相似案例推荐

其他人才的相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系招聘专员
联系招聘专员