ID：279427
帅2016哥MO 身份已认证
数据采集开发
- 公司信息：
- 上海逸迅
- 工作经验：
- 2年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 其他
- 全区
技术能力
熟悉python全栈开发，熟悉爬虫开发，熟悉数据分析，熟悉大数据hadoop hive spark flink flume kafka等开发，熟悉java全栈ssh框架开发，熟悉mysql等常用数据库，熟悉报表制作，自我学习能力强，乐于学习新的技术
项目经验
1，某网站数据爬取，js反爬，解密，数据清洗，数据入库到数据库，表创建。2，大数据开发环境搭建，hive脚本开发优化，性能调优。3运用datax，编写python脚本做数据清理传输。
案例展示
-
12306自动抢票
负责编写车站代码，通过selenium实现自动登录，选择车票，自动占座抢票，本项目用python代码进行实现。
-
代理池爬取罗卜投研
通过多线程队列的方式获取代理ip，用redis保存可以的代理ip，本项目使用的是python语言实现抓取。
-
考古加网站解混淆爬虫
通过js逆向实现解OB混淆反爬虫网站考古加，通过json、mysql、mongodb等方式实现数据存储，本项目用python进行实现。
相似人才推荐
-
1000元/天项目总监天美工作室概要：熟练掌握 JAVA Pypthon html JS C++，并且可以独自一人完成各种小项目和其他算法
-
500元/天kjhkgkjh概要：您所从事的顾问角色所具备的技术能力。不少于100字，建议200字以上，将获得优先展示。 注意：
-
500元/天无上海理工大学概要：基本熟练对python的使用加上对算法有一定了解，拿过蓝桥杯省赛二等奖、 能够对JAVA、C语言进
-
500元/天pyhton工程师美团概要：10年pythobn,易语言 ,js逆向,web解密,scrapy等框架,各类验证码算法,政务平台类 -
500元/天爬虫工程师璨宇概要：主要语言：python。已掌握的技术有爬虫，数据分析。爬虫中了解ruquests模块，urllib模
-
2000元/天算法工程师叮咚买菜概要：nlp，图神经网络，神经网络，传统机器学习，时间序列应用 nlp，图神经网络，神经网络，传统机器学习
-
500元/天学生宜兴电大概要：熟悉C/C++，C#，Python语法，会用Python编写网页爬虫程序扒取固定的网页数据，图片，视
-
500元/天学生暂无概要：亲爱的审核大大您好，我想成为您这边的爬虫技术人员，简单介绍一下自己的职业技能 熟悉整个爬虫的设计及实
