ID：283121
旺仔
爬虫工程师
- 公司信息：
- 金财互联
- 工作经验：
- 2年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 可工作日驻场（自由职业原因）
- 所在区域：
- 广州
- 天河
技术能力
⚫ 编辑 scrapy 爬虫框架，爬取公司提供的 MySQL 数据库里面的数
据爬取，处理上百万数据条，其中包括爬取后的清洗、重新入库
⚫ 编辑 selenium 自动化爬取一些国外内等电商平台
⚫ 编辑 Appium 自动化爬取 app 小红书、app 抖音等搜索公司相关
资料，对博主的后台数据采集
⚫破解一些网站加密，APP数据解密，APP逆向破解
⚫ 技术方面的讨论、包括和项目负责人讨论增量同步、编辑 python
自动脚本上传 Linux 按天自动运行
⚫ 数据爬取主要运用 xpath、re、selenium、appium、mitmproxy
接口监控等其主要处理 js 加密（常见加密方式）、Ajax 等反爬虫、
代理服务数据爬取（反爬虫）
⚫ 参与前后端接口 post 数据上传
⚫ 参与 Django 基本框架项目学习（post、get）请求、分页
项目经验
⚫ 参与接口监控数据稳定、爬取速度的稳定
⚫破解一些网站加密，APP数据解密，APP逆向破解
⚫fiddler数据抓包数据分析微博APP数据，爬取博主发布的一些数据。
抖音APP的博主店铺数据等
案例展示
-
爬虫
参与数据爬取、可视化，主要是利于 scrapy 获取各地区的招聘数 据包括公司、医院等数据、可视化部分主要是利于 pyecharts 柱 形图（Bar）、地图（Map）、pandas 数据预处理。
-
数据采集
这个是爬取一些网站的基本信息，一般对文字保存为JSON数据，图片、视频类是保存本地(具体保存数据安客户要求)
相似人才推荐
-
1300元/天风控算法工程师百度概要：1. 熟练掌握python语言，掌握深度学习、机器学习、强化学习等各种算法，以及相关算法在工程上的应 -
800元/天AI算法工程师阿里-摩酷实验室概要：精通python语言； 精通人脸识别、目标识别、目标分割、Image Caption、图像描述、文 -
1000元/天资深数据开发国金证券概要：从事多个报表平台从零到一的搭建和开发，精通帆软报表，tableau报表工具开发和维护工作。精通各类数
-
600元/天算法工程师顺网科技概要：五年计算机视觉算法研发经验，熟悉深度学习框架 tensorflow/pytorch ，以及部署框架n
-
600元/天算法工程师深圳智磊科技有限公司概要：1.熟练掌握多种经典机器学习算法的原理，如：KNN、线性回归、逻辑回归、K-means 聚类、SVM
-
500元/天全栈开发工程师智昕网络概要：全栈开发工程师（UI设计、前端开发、后端开发） 熟练JAVA、PHP、Python等语言； 能独
-
2000元/天软件项目负责人北京盈泰福科技有限责任公司概要：专业硬件、软件工程师小团队，代写程序，代设计原理图、PCB，承接单片机程序编写，熟悉51及stm32
-
1000元/天数据仓库开发友邦概要：Informatica/ETL/DataMart/数据仓库/数据库/SQL/PL SQL/存储过程/
