April
其他
- 公司信息：
- 其他
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 所在区域：
- 其他
- 全区
技术能力
熟悉多线程多进程分布式等，对爬虫任务调度有很好的解决办法采集数据频率高，数据量大，范围广，能做深度抓取。爬虫遇到性能瓶颈，如何分析瓶颈并解决。熟悉并能解决常见的反爬措施，比如常见的图片验证，滑动验证，拼图，短信验证等。常见的封IP，封header等。比如给爬虫投毒喂假数据如何识别。熟悉数据结构和算法，拿到数据可以进行一些基础的清洗，比如如何在内存容量有限的情况下清洗亿万数据；比如如何从提取目标数据等。甚至可以做一些舆情分析，数据分析等。熟悉常用的数据库和nosql数据库，对数据存储有一定见解，如何设计数据库和表结构等，数据库优化等。
项目经验
熟悉多线程多进程分布式等，对爬虫任务调度有很好的解决办法采集数据频率高，数据量大，范围广，能做深度抓取。爬虫遇到性能瓶颈，如何分析瓶颈并解决。熟悉并能解决常见的反爬措施，比如常见的图片验证，滑动验证，拼图，短信验证等。常见的封IP，封header等。比如给爬虫投毒喂假数据如何识别。熟悉数据结构和算法，拿到数据可以进行一些基础的清洗，比如如何在内存容量有限的情况下清洗亿万数据；比如如何从提取目标数据等。甚至可以做一些舆情分析，数据分析等。熟悉常用的数据库和nosql数据库，对数据存储有一定见解，如何设计数据库和表结构等，数据库优化等。
案例展示
-
某狗音乐爬取
熟悉多线程多进程分布式等，对爬虫任务调度有很好的解决办法采集数据频率高，数据量大，范围广，能做深度抓取。爬虫遇到性能瓶颈，如何分析瓶颈并解决。熟悉并能解决常见的反爬措施，比如常见的图片验证，滑动验证，拼图，短信验证等。常见的封IP，封header等。比如给爬虫投毒喂假数据如何识别
-
某易云音乐爬取
熟悉多线程多进程分布式等，对爬虫任务调度有很好的解决办法采集数据频率高，数据量大，范围广，能做深度抓取。爬虫遇到性能瓶颈，如何分析瓶颈并解决。熟悉并能解决常见的反爬措施，比如常见的图片验证，滑动验证，拼图，短信验证等。常见的封IP，封header等。比如给爬虫投毒喂假数据如何识别
相似人才推荐
-
2000元/天software engineersoftbank概要：机器人项目: 遗传算法，PSO算法,CMA-ES算法，机器人控制，机器人多智能体系统。 数据分析:
-
1000元/天计算机视觉算法工程师小红书概要：5年计算机视觉工作经验，涉及目标检测，图像分类、图像生成等。 使用语言python，c++, 有模
-
700元/天软件摩托罗拉概要：团队成员人数： 5人 团队合作年限： >3年 团队成员教育程度： 5名大学毕业 团
-
800元/天软件工程师北京嘉禾美康信息技术有限公司概要：1.VS 平台研发 2.C++底层开发。 3.数据库操作，Sqlite3,MySql,Oracl
-
500元/天无无概要：计算机科学与技术硕士研究生，从事深度学习的计算机视觉，无监督学习的单目深度估计，双目立体匹配等。发表
-
700元/天系统集成开发工程师联想概要：曾就职于联想，现就职于PwC，主要角色是IT项目经理。熟练使用敏捷项目管理工具，根据团队规模与技能划
-
1500元/天大数据算法工程师厦门市雅基软件有限公司概要：• 有比较扎实的JAVA基础，熟练掌握面向对象思想、集合、IO流、多线程、网络编程及反射，熟悉JDB
-
1000元/天软件主管山东博科生物产业有限公司概要：熟练掌握java、c#、python等方向开发 Java采用ssm框架进行基础搭建，基本用其来开发
