ID：140989
翔宇
高级爬虫工程师
- 公司信息：
- 科达集团
- 工作经验：
- 2年
- 兼职日薪：
- 600元/8小时
- 兼职时间：
- 下班后
- 所在区域：
- 北京
- 海淀
技术能力
1.熟练使用re,xpath,beautifulsoup这些工具匹配元素
2.精通队列，多进程，多线程来提高抓取效率
3.精通scrapy框架进行抓取
4.熟悉numpy，panads模块进行数据分析
5.能够应对各种反爬策略并进行解决这些问题
项目经验
您好，我在公司担任爬虫工程师的角色，目前我们做的项目是一款针对于区块链的app开发，我在项目中主要负责抓取app中所需要的数据，比如资讯数据，快讯数据，微博推特数据，还有针对于数字货币的实时数据，整个项目需要用到的技术点有队列，多进程，多线程来提升抓取效率，xpath,beautifulsoup,re这些匹配工具，还有维护ip池来进行程序稳定抓取。
相似人才推荐
-
600元/天高级软件工程师展讯通讯概要：1.多年移动开发经验，从事android以及ios开发，主导多款app的开发以及上线和维护 2.有
-
1000元/天大数据工程师北京思特奇概要：掌握java，熟练使用springboot架构，精通后台开发，也可以开发非web程序； 掌握had
-
1200元/天人工智能 深度学习 计算机视觉阿里巴巴概要：本人本科和硕士均毕业于浙江大学，毕业以后入职阿里巴巴旗下阿里云下面的人工智能事业部工作已3年，职级为
-
600元/天iOS开发工程师上海科匠信息科技有限公司概要：3年iOS开发，4年项目管理，服务器运维，有硬件技术。有稳定完整的团队。团队成员经验均在3年以上，开 -
800元/天售前曙光概要：熟练高性能计算任何场景需求和运维部署、掌握linux系统，精通python、shell语言，参与过H
-
800元/天大数据工程师深圳市筑龙信息技术优先公司概要：1 大数据 对apache hadoop 和cdh hadoop 较为了解，善于设计大数据库平台架
-
500元/天高级软件工程师元铂概要：研究生专业为人工智能、计算机视觉，掌握的编程语言有：Python、C#、C++（C）、Java、Ja -
800元/天Android工程师 -- 全栈开发--物联网工程深圳市销邦科技概要：物联网工程专业毕业，对于物联网相关的项目感兴趣，目前从事于RFID射频识别中间件项目的开发工作。
