本作品为某电商运营团队量身打造的竞品数据采集系统,核心难点在于目标平台对请求接口实施了多层签名校验,包括 AES 加密与时间戳哈希的组合签名机制,导致常规抓包重放直接触发风控拦截。本人负责整个项目的技术方案设计与代码实现:首先基于客户提供的 JS 文件和抓包数据进行静态逆向分析,定位签名参数在混淆代码中的生成入口,通过算法还原,将整个加密链路用 Python 完整复现。随后基于 Scrapy 框架搭建了一套兼容签名机制的高并发爬虫,集成代理 IP 自动轮换与请求频率控制模块,实现日采数十万条商品数据并稳定运行。最终交付物为 Docker 容器镜像及配套使用文档,客户即拉即用,无需配置 Python 环境。该项目展现的能力包括前端加密逆向还原、高并发爬虫架构设计、反爬对抗策略以及标准化的工程交付。