啦啦
爬虫工程师 · 5年经验 · 贝壳
0
累计接单
0
用户评价
2
被收藏
技术能力
工作经历1
1.参与设计数据模型。
2. 搭建爬虫所需ip池以及设备池。
3.破解滑动验证码以及点触验证码进行自动化登录。
4. 维护广点通，快手，头条等媒体平台的上传人群包，下载报表自动化工具。
5. 开发B站，虎牙平台传包和报表下载工具。
6. 爬取淘宝直播，抖音直播相关数据支撑数据平台产品。
7. 开发京东，淘宝，天猫，拼多多到抖音小店的一键铺货工具。
7. 数据平台产品：http://data.livedesk.cn
8. 电商平台产品：http://distribution.livedesk.cn
工作经历2
1. 根据业务需求，提出intend，并设计数据模型。
2. 根据数据模型，制定数据采集策略。
3. 处理采集过程中遇到的反爬虫措施，验证码，流量限制，JS混淆加密等。
4. 将采集的数据进行清洗，去重等预处理。
5. 将预处理后的数据进行归档，并存储到数据库中。
6. 持续维护并更新现有数据，对抓取策略不断优化。
7. 项目接口：https://qa.s-knowledge-cn.com/api/question?q=张艺兴&key=jamlive
1.参与设计数据模型。
2. 搭建爬虫所需ip池以及设备池。
3.破解滑动验证码以及点触验证码进行自动化登录。
4. 维护广点通，快手，头条等媒体平台的上传人群包，下载报表自动化工具。
5. 开发B站，虎牙平台传包和报表下载工具。
6. 爬取淘宝直播，抖音直播相关数据支撑数据平台产品。
7. 开发京东，淘宝，天猫，拼多多到抖音小店的一键铺货工具。
7. 数据平台产品：http://data.livedesk.cn
8. 电商平台产品：http://distribution.livedesk.cn
工作经历2
1. 根据业务需求，提出intend，并设计数据模型。
2. 根据数据模型，制定数据采集策略。
3. 处理采集过程中遇到的反爬虫措施，验证码，流量限制，JS混淆加密等。
4. 将采集的数据进行清洗，去重等预处理。
5. 将预处理后的数据进行归档，并存储到数据库中。
6. 持续维护并更新现有数据，对抓取策略不断优化。
7. 项目接口：https://qa.s-knowledge-cn.com/api/question?q=张艺兴&key=jamlive
项目经验
个人项目1--验证码识别服务
1.识别并获取图形验证码的内容(数字+字母大小写)。
2. 识别并获取滑动验证码的缺口位移以及轨迹。
3. 识别并获取点触验证码的坐标。
4. 链接：http://8.140.131.97:6003
个人项目2--抖音快手签名注册服务
1.通过接口获得抖音注册过的设备信息。
2.通过接口获抖音app签名。
3.通过接口获得快手注册过的did。
4. 通过接口获快手app签名。
5. 链接：http://8.140.131.97:6001
公司项目1--星赏
1.参与设计数据模型。
2. 搭建爬虫所需ip池以及设备池。
3. 爬取淘宝直播，抖音直播相关数据支撑数据平台产品。
4. 开发京东，淘宝，天猫，拼多多一键铺货工具支撑电商平台产品。
5. 数据平台产品：http://data.livedesk.cn
6. 电商平台产品：http://distribution.livedesk.cn
公司项目2--DMP工具
1.破解滑动验证码以及点触验证码进行自动化登录。
2. 维护广点通，快手，头条等媒体平台的报表下载自动化工具
3. 维护广点通，快手，头条等媒体平台的上传人群包自动化工具。
4. 开发B站，虎牙平台传包和报表下载工具。
1.识别并获取图形验证码的内容(数字+字母大小写)。
2. 识别并获取滑动验证码的缺口位移以及轨迹。
3. 识别并获取点触验证码的坐标。
4. 链接：http://8.140.131.97:6003
个人项目2--抖音快手签名注册服务
1.通过接口获得抖音注册过的设备信息。
2.通过接口获抖音app签名。
3.通过接口获得快手注册过的did。
4. 通过接口获快手app签名。
5. 链接：http://8.140.131.97:6001
公司项目1--星赏
1.参与设计数据模型。
2. 搭建爬虫所需ip池以及设备池。
3. 爬取淘宝直播，抖音直播相关数据支撑数据平台产品。
4. 开发京东，淘宝，天猫，拼多多一键铺货工具支撑电商平台产品。
5. 数据平台产品：http://data.livedesk.cn
6. 电商平台产品：http://distribution.livedesk.cn
公司项目2--DMP工具
1.破解滑动验证码以及点触验证码进行自动化登录。
2. 维护广点通，快手，头条等媒体平台的报表下载自动化工具
3. 维护广点通，快手，头条等媒体平台的上传人群包自动化工具。
4. 开发B站，虎牙平台传包和报表下载工具。
立即沟通
