!너희들 모두를 참아라

python金牌讲师
广西清之督教育发展有限公司 · 1年经验
!너희들 모두를 참아라
日薪: ¥500/8h
地点: 其他 全区
时间: 下班后
ID:299455 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Redis 分布式 MySQL MongoDB HTML Selenium Django JavaScript CSS jQuery Ajax Linux
熟练使用MySQL数据库,熟悉Redis,MongoDB等NoSQL数据库;
熟练使用XPath、re、json模块进行数据提取;
熟练使用Selenium+PhantomJS实现动态HTML抓取;
熟练掌握Scrapy框架、了解scrapy-redis分布式组件;
掌握常见的爬虫、反爬虫知识及应对措施;熟悉Django框架、熟悉Linux 系统;
熟悉JavaScript、Ajax、JQuery、CSS、HTML等WEB前端技术;

2022.06.-2022.08
项目名称:抓取新浪微博数据(利用移动端抓取数据)
过程:
1.分析url,找到正确的首页start_url,
2.引擎从调度器中抽取start_url用于抓取数据;
3.引擎把url封装成request传给下载器;
4.下载器把资源下载下来并封装成应答包Response;
5.解析Response,把item交给实体管道Pipeline进行下一步处理;
6.若解析了url则交给调度器等待抓取。
!너희들 모두를 참아라 ID:299455 复制

!너희들 모두를 참아라

python金牌讲师 · 1年经验 · 广西清之督教育发展有限公司
城市其他 全区 日薪500元/8h 时间 下班后
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Redis 分布式 MySQL MongoDB HTML Selenium Django JavaScript CSS jQuery Ajax Linux
熟练使用MySQL数据库,熟悉Redis,MongoDB等NoSQL数据库;
熟练使用XPath、re、json模块进行数据提取;
熟练使用Selenium+PhantomJS实现动态HTML抓取;
熟练掌握Scrapy框架、了解scrapy-redis分布式组件;
掌握常见的爬虫、反爬虫知识及应对措施;熟悉Django框架、熟悉Linux 系统;
熟悉JavaScript、Ajax、JQuery、CSS、HTML等WEB前端技术;

项目经验

2022.06.-2022.08
项目名称:抓取新浪微博数据(利用移动端抓取数据)
过程:
1.分析url,找到正确的首页start_url,
2.引擎从调度器中抽取start_url用于抓取数据;
3.引擎把url封装成request传给下载器;
4.下载器把资源下载下来并封装成应答包Response;
5.解析Response,把item交给实体管道Pipeline进行下一步处理;
6.若解析了url则交给调度器等待抓取。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏