ID：277923
真实伤害
爬虫工程师
- 公司信息：
- 晨飞网络科技有限公司
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 可工作日驻场（自由职业原因）
- 所在区域：
- 其他
- 全区
技术能力
1.使用多线程，协程获取网页数据
2.使用selenium框架，进行自动化操纵
3.mysql数据库，mongodb数据库和非关系型数据库redis
4.使用scrapy框架，进行增量式爬虫获取数据，并将数据进行持久化存储
5.pc端逆向
6.app端逆向
项目经验
1.使用协程爬取某盗版网站电影，这里仅限于盗版网站，像腾讯、爱奇艺这样正规的视频网站中的vip付费电影资源没法获取。
2.使用selenium框架实现用户自动登录功能
3.scrapy框架实现分布式、增量式爬虫
4.pc端逆向
包含b站刷播放，获取今日头条某专栏的资讯信息，央视频刷播放
5.app端逆向
JNI开发、b站刷播放量和完播率、得物搜索功能、知乎关键字搜索功能、抖音获取评论信息、flask框架，qt5
案例展示
-
协程爬电影
该项目自己独立完成，工时半天左右。视频下载看似简单，其中涉及到众多技术。其中包括，文件解析、协程、文件解密、视频合并等操作。具体请看作品图片展示部分。
-
爬取免费代理ip
免费代理ip可用性存在很大的不确定性，实际生活中对需要大量代理服务的往往需要付费。一般使用隧道代理，这里并不重要。重要的是一些重要的思想，包含多线程，窗机爱你服务器向外提供接口等。具体请看作品图片
相似人才推荐
-
500元/天IT经理用友网络概要：钉钉+氚云 低代码开发，擅长精准了解用户需求，深挖客户诉求。用信息化手段满足客户实际业务管理需要。
-
800元/天算法工程师bilibili概要：在研究生期间从事深度学习对医学影像进行分割并发表相关论文 在工作期间主要负责图像识别以及人脸识别相
-
500元/天无无概要：1. 掌握SQL语言，能在MySQL的环境下对数据进行增删改查 2. 掌握Excel技能，能使用数
-
500元/天无无概要：通过各种专业的省、国家计算机考试有二级计算机、一级计算机考试。可写一级或者二级 2、熟悉各种语
-
2000元/天策划部门广西南宁图美广告设计有限公司概要：记忆能力比较丰富还有设计创新能力也比较好平时也喜欢自己创新一下东西，平时也比较喜欢玩ps兴趣爱好吧，
-
500元/天无无概要：本人有一定的js基础，目前专攻python技术，现已掌握并不断学习python爬虫、scrapy框架
-
500元/天暂无暂无概要：国家211院校的学校在读大学生 热爱算法，学校ACM实验室成员，讲解能力较强，通俗易懂，可以让学习
-
500元/天无无概要：使用python爬虫对各打网站进行数据的爬取，能使用spark等大数据工具对数据进行分析、处理 了
