《豆瓣top250爬虫工程》

基本信息

案例ID:124056

技术顾问:图灵 - 1年经验 - 无

联系沟通

微信扫码,建群沟通

项目名称:《豆瓣top250爬虫工程》

所属行业:企业服务 - 数据服务

->查看更多案例

案例介绍

本项目的主要功能包括:
1,爬取豆瓣TOP250的书籍
2,将爬取到的数据存储到mysql
3,将程序编译为界面化程序
4,将界面化程序编译为可执行文件

关键点:
1、伪装请求报头(request header)
2、减轻访问频率,速度
3、使用代理IP

我在作品中的角色:所有代码编写者,项目规划设计者

相似案例推荐

其他人才的相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系聘用方端客服
联系聘用方端客服