带着雪儿去看雪

python高级爬虫工程师
视野数科 · 8年经验
带着雪儿去看雪
日薪: ¥800/8h
地点: 北京
时间: 下班后可工作日远程
ID:431949 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Python
拥有八年Python爬虫开发经验,深耕Web与App端数据采集领域,具备从协议破解到客户端逆向的全链路攻坚能力。
Web端:精通各类反爬机制的绕过策略,包括动态参数加密(如RSA/AES混淆、请求签名)、Cookie/Session生命周期管理、复杂验证码(滑块、点选、无感验证)的识别与模拟,以及JS代码混淆与VMP虚拟化保护的还原分析。
App端:擅长主流加固方案的脱壳处理,能够熟练运用Frida、Xposed进行动态Hook与调用跟踪,借助Unidbg实现模拟执行与算法还原;同时具备SO层二进制文件逆向能力,可深度分析Native层加密逻辑,配合抓包工具实现对单向、双向认证等网络对抗场景的突破。
长期实战中,我不仅积累了丰富的反爬对抗经验,更形成了高效的问题诊断与方案落地思路,能够针对不同业务场景定制高稳定性、高隐蔽性的采集方案,持续保障数据链路的可用性与时效性。

项目一:乡村振兴业务板块采集清洗
项目背景:配合公司乡村振兴业务板块
责任描述:
1.负责农机补贴、全国投资,环评等相关数据全量数据采集和增量采集运维
2.主要破解sm相关加密和验证码识别
3.把爬取到的数据清洗去重入库(上千万)

项目二:证照信息采集
项目背景:采集各个维度证照数据,并结合企业数据,进行网站展示
责任描述:
1.本项目主要采集证照相关网站
2.增量采集,实时抓取
3.使用代理ip,伪造header、破解瑞数等技术来大批量获取数据
4.数据清洗,去重,更新到公司相关证照库

项目三:风险处罚采集数据采集清洗
项目背景:配合公司项目需要,降低企业风险
责任描述:
1.采集总量八千个左右各个部委处罚网站数据,并对增量数据更新
2.进行持续采集,自动采集新处罚的公司
3.主要运用到的技术加速乐、极验,对称和非对称加密,瑞数等
带着雪儿去看雪 ID:431949 复制

带着雪儿去看雪

python高级爬虫工程师 · 8年经验 · 视野数科
城市北京 日薪800元/8h 时间 下班后可工作日远程
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Python
拥有八年Python爬虫开发经验,深耕Web与App端数据采集领域,具备从协议破解到客户端逆向的全链路攻坚能力。
Web端:精通各类反爬机制的绕过策略,包括动态参数加密(如RSA/AES混淆、请求签名)、Cookie/Session生命周期管理、复杂验证码(滑块、点选、无感验证)的识别与模拟,以及JS代码混淆与VMP虚拟化保护的还原分析。
App端:擅长主流加固方案的脱壳处理,能够熟练运用Frida、Xposed进行动态Hook与调用跟踪,借助Unidbg实现模拟执行与算法还原;同时具备SO层二进制文件逆向能力,可深度分析Native层加密逻辑,配合抓包工具实现对单向、双向认证等网络对抗场景的突破。
长期实战中,我不仅积累了丰富的反爬对抗经验,更形成了高效的问题诊断与方案落地思路,能够针对不同业务场景定制高稳定性、高隐蔽性的采集方案,持续保障数据链路的可用性与时效性。

项目经验

项目一:乡村振兴业务板块采集清洗
项目背景:配合公司乡村振兴业务板块
责任描述:
1.负责农机补贴、全国投资,环评等相关数据全量数据采集和增量采集运维
2.主要破解sm相关加密和验证码识别
3.把爬取到的数据清洗去重入库(上千万)

项目二:证照信息采集
项目背景:采集各个维度证照数据,并结合企业数据,进行网站展示
责任描述:
1.本项目主要采集证照相关网站
2.增量采集,实时抓取
3.使用代理ip,伪造header、破解瑞数等技术来大批量获取数据
4.数据清洗,去重,更新到公司相关证照库

项目三:风险处罚采集数据采集清洗
项目背景:配合公司项目需要,降低企业风险
责任描述:
1.采集总量八千个左右各个部委处罚网站数据,并对增量数据更新
2.进行持续采集,自动采集新处罚的公司
3.主要运用到的技术加速乐、极验,对称和非对称加密,瑞数等
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏