生而自由 爱而无畏

数据仓库工程师,ETL开发工程师
中国证券监督管理委员会 · 8年经验
生而自由 爱而无畏
日薪: ¥600/8h
地点: 北京 丰台
时间: 下班后周六周日
ID:306481 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Selenium 高并发 分布式 JavaScript Python MySQL Redis MongoDB Docker HTML CSS Linux
1 掌握 python基础知识,面向对象逻辑思维;
2 熟悉HTML+CSS;
3 掌握正则re解析,bs4解析,xpath解析;
4 requests动态爬取数据;
5 高并发(多进程,多线程,协程)爬取数据;
6 熟练运用selenium模块;
7 熟悉mysql,MongoDB和Redis三大主流数据库;
8 了解代理池原理;
9 掌握scrapy原理,熟练使用scrapy爬取数据;
10 熟悉分布式爬虫;
11 掌握JavaScript语法;
12 熟悉逆向爬虫的原理;(目前正在练习中,涉及到逆向爬虫的冬冬暂时还搞不定,请谅解)
13 掌握 Linux 系统的命令以及docker命令和 shell 的编写;

1. 对中国证券监督管理委员会官网政务信息中的政策公开规章数据和主动公开目录中的各项指标数据进行爬取。(公司项目)
说明:利用requests动态异步爬取网页内容。

2. 对中国古诗文网中的诗文,名句,古籍数据进行爬取。
说明:需要绕过登录验证,登录后利用bs4或者xpath爬取数据。

3. 对北京地区链家历年二手房成交记录进行爬取。
说明:需要绕过登陆验证后,在获取数据信息

4. 基于selenium模块开发12306自动抢票程序。
生而自由 爱而无畏 ID:306481 复制

生而自由 爱而无畏

数据仓库工程师,ETL开发工程师 · 8年经验 · 中国证券监督管理委员会
城市北京 丰台 日薪600元/8h 时间 下班后周六周日
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Selenium 高并发 分布式 JavaScript Python MySQL Redis MongoDB Docker HTML CSS Linux
1 掌握 python基础知识,面向对象逻辑思维;
2 熟悉HTML+CSS;
3 掌握正则re解析,bs4解析,xpath解析;
4 requests动态爬取数据;
5 高并发(多进程,多线程,协程)爬取数据;
6 熟练运用selenium模块;
7 熟悉mysql,MongoDB和Redis三大主流数据库;
8 了解代理池原理;
9 掌握scrapy原理,熟练使用scrapy爬取数据;
10 熟悉分布式爬虫;
11 掌握JavaScript语法;
12 熟悉逆向爬虫的原理;(目前正在练习中,涉及到逆向爬虫的冬冬暂时还搞不定,请谅解)
13 掌握 Linux 系统的命令以及docker命令和 shell 的编写;

项目经验

1. 对中国证券监督管理委员会官网政务信息中的政策公开规章数据和主动公开目录中的各项指标数据进行爬取。(公司项目)
说明:利用requests动态异步爬取网页内容。

2. 对中国古诗文网中的诗文,名句,古籍数据进行爬取。
说明:需要绕过登录验证,登录后利用bs4或者xpath爬取数据。

3. 对北京地区链家历年二手房成交记录进行爬取。
说明:需要绕过登陆验证后,在获取数据信息

4. 基于selenium模块开发12306自动抢票程序。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • ✓ 支付宝企业信用分 优秀 评级
  • ✓ 市场份额约占全行业三分之一
  • ✓ 程序员兼职行业全能首选平台
查看平台资质详情
收藏