emm.

爬虫工程师
重庆信息技术有限公司 · 1年经验
emm.
日薪: ¥500/8h
地点: 重庆 全区
时间: 下班后周六周日可工作日远程可工作日驻场(离职原因)可工作日驻场(自由职业原因)
ID:301335 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Python 分布式 Redis Selenium HTML CSS TCP/IP HTTP
1.熟悉HTTP/HTTPS协议,TCP/IP网络协议
2.熟悉Python 多线程爬虫及其机制
3.熟练使用Python urllib、urllib2、requests等网络模块
4.熟练使用Python lxml、BeautifulSoup、re、json模块进行数据提取
5.熟悉XPath语法规则和各CSS Selector的使用
6.了解Tesseract机器图像识别系统,并处理简单的文字验证码
7.熟练使用Selenium+PhantomJS实施动态HTML抓取
8.熟练掌握Scrapy框架,以及编写各类中间件
9.熟练掌握scrapy-redis分布式框架,了解各组件工作机制

爬虫与数据分析项目
1、根据需要爬取的数据进行需求分析,分析目标网站的网站结构和一些反爬手段,通过requests、scrapy、scrapy-redis、xpath等技术手段编写爬虫程序进行内容抓取
2、对抓取到的数据进行清洗过滤,结构化存到数据库,根据爬取过程中遇到的一些反爬手段,优化自己的程序
3、对爬取到的数据,通过matplotlib生成直方图、条形图、散点图、饼图、词云等,多维度展示分析数据,并撰写数据分析报告,供需求方对数据有直观的了解
emm. ID:301335 复制

emm.

爬虫工程师 · 1年经验 · 重庆信息技术有限公司
城市重庆 全区 日薪500元/8h 时间 下班后周六周日可工作日远程可工作日驻场(离职原因)可工作日驻场(自由职业原因)
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Python 分布式 Redis Selenium HTML CSS TCP/IP HTTP
1.熟悉HTTP/HTTPS协议,TCP/IP网络协议
2.熟悉Python 多线程爬虫及其机制
3.熟练使用Python urllib、urllib2、requests等网络模块
4.熟练使用Python lxml、BeautifulSoup、re、json模块进行数据提取
5.熟悉XPath语法规则和各CSS Selector的使用
6.了解Tesseract机器图像识别系统,并处理简单的文字验证码
7.熟练使用Selenium+PhantomJS实施动态HTML抓取
8.熟练掌握Scrapy框架,以及编写各类中间件
9.熟练掌握scrapy-redis分布式框架,了解各组件工作机制

项目经验

爬虫与数据分析项目
1、根据需要爬取的数据进行需求分析,分析目标网站的网站结构和一些反爬手段,通过requests、scrapy、scrapy-redis、xpath等技术手段编写爬虫程序进行内容抓取
2、对抓取到的数据进行清洗过滤,结构化存到数据库,根据爬取过程中遇到的一些反爬手段,优化自己的程序
3、对爬取到的数据,通过matplotlib生成直方图、条形图、散点图、饼图、词云等,多维度展示分析数据,并撰写数据分析报告,供需求方对数据有直观的了解
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏