🧑💻 关于我:多年全能型工程师,主攻复杂数据采集、安全逆向与高并发后端架构。提供从数据挖掘到商业落地的全套技术解决方案。
🛠️ 核心业务承接:
1. 爬虫与数据治理:高并发分布式爬虫系统设计、大规模海量数据采集与清洗。
2. 安全逆向突破:Web端逆向(各类安全防护、验证码突破)、Android端逆向(APP脱壳、协议分析、API提取)。
3. 全栈/后端开发:高性能后端API设计、企业级网站与APP全栈研发(从需求到交付)。
💡 服务优势:代码规范、架构解耦、交付准时。期待与您的合作,欢迎带需求/暗号私聊,可长期做技术顾问。
(注意:黑灰产、非法需求、包括但不限于: 抢票、秒杀、绕过VIP、竞对采集、外挂软件等均勿扰!)
🛠️ 核心项目经验 (Project Experience)
1. 大厂核心算法逆向与 AI 全量重算(XHS / 抖音 / 唯品会)
项目描述:针对主流电商、社交平台的高强度安全防护(如 JSVMP、复杂签名、动态令牌等),利用传统逆向与前沿 AI 自动化相结合的方式进行算法破译。
核心技术:JS逆向、JSVMP 破解、AI 算法重算、补环境、Unidbg、Frida RPC。
技术成果:
1. 抖音端:针对 Web 评论及 `a_bogus` 等核心加密参数,采用“补环境 + AI 重算”双方案成功破解 JSVMP。
2. XHS / 唯品会端:全量逆向 Web 端加密参数,利用 Python 配合 AI 成功实现纯算法还原与重算;
3. 针对 APP 端 Sign 加密,同时落地了 Unidbg 模拟执行与 Frida RPC双套高可用方案。
2. 政企政务平台反爬对抗与算法纯算(税务 / 药监 / 国家电网)
项目描述:突破国家级、省级政企公开数据平台的顶级商业反爬系统,为企业级数据采集提供底层解密支撑。
核心技术:瑞数 6 代 / 变种瑞数、阿里 WAF 对抗、AI 算法重算、自动化补环境。
技术成果:
成功攻克国家药监局、税务资质、国家电网等高难度站点,实现“阿里 WAF + 瑞数 6 代”的纯算法重算。
结合 AI 分析与动态补环境技术,实现对变种瑞数系统的自动化解析,保证全天候稳定穿透。
3. 亿级分布式数据采集集群与反爬中台设计
项目描述:针对企业服务、税务、本地生活(美团、京东、抖音)等领域进行全品类、大规模海量数据抓取。
核心技术:Scrapy、Feapder、分布式架构设计、高性能异步体系、反爬中台架构。
技术成果:
架构设计:独立研发了反爬中台系统 Mimic,大幅提升分布式爬虫集群的灵活性与对抗扩展能力。
海量采集:自研轻量级异步采集框架,构建高可用采集集群,实现每日亿级数据量的稳定采集,保障数据新鲜度与完整度。
数据落地:完成全品类 SKU 数据采集,成功构建千万级商品知识库,数据准确率高达 99%+。
简历直通车(技术实力在线证明)
AI 逆向成果分享:[点击查看飞书文档](https://www.google.com/search?q=https://my.feishu.cn/wiki/Hv6BwdC7jiuTelk3MescwUoonYn) *(密码: 16W581@8)*
唯品会 APP 纯算逆向方案:[点击查看飞书文档](https://www.google.com/search?q=https://my.feishu.cn/wiki/PEVCwHwGSihdE3kgQiicDS76nae) *(密码: @98c8489)*
| 角色 | 职位 |
| 负责人 | Python工程师 | 高级爬虫工程师| 后端工程师 |
| 队员 | 产品经理 |
| 队员 | UI设计师 |
| 队员 | iOS工程师 |
| 队员 | 安卓工程师 |
| 队员 | 前端工程师 |
| 队员 | 后端工程师 |
功能介绍:BTC 量化模型训练与模拟实盘回测,为了研究 加密货币市场 BTC 量化交易研究与AI大模型之间的链接而设计,主要包含有以下功能,此系统为我个人全栈开发: 1. 采集存储交易所相关OHLCV数据,通过 LSTM、Transformer 等对数据特征进行提取和训练
该作品主用用于自媒体对咨询、新闻媒体的舆情监控,我的角色是是爬虫工程师|后端工程师。 1. 主要就是从各大新闻媒体网站、APP等采集相关新闻媒体数据进行ETL,解析、清洗、入库等数据处理流程,保障大数据采集支持。 2. 另外提供实时监控媒体舆情的数据可视化面板,快速根