基本信息

案例ID:227852

技术顾问:chuan - 3年经验 - 中文集团(北京)

联系沟通

微信扫码,建群沟通

项目名称:京东等电商爬虫

所属行业:医疗健康 - 专业细分服务

->查看更多案例

案例介绍

案例内容包含京东、阿里、药师帮等网站内容关于药品部分的数据爬虫;
案例以多线程实现数据采集,mongo数据库去重,最终数据进入hbase库中
其中药师帮等网站实现js逆向获取密码加密方式,另外配置有单独的代理函数、日志文件处理、去重等

相似案例推荐

其他人才的相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服