长期深耕数据采集与自动化方向,具备从逆向破解、数据采集清洗到可视化报表与流程自动化的完整落地能力,技术栈覆盖逆向工程、数据采集、Java+Vue全栈开发及RPA流程自动化。
项目一:多电商平台后台数据采集——针对淘宝、京东、拼多多、抖音等主流电商平台,逆向破解各平台店铺、商品等接口的加密签名体系(如Token生成、请求体加密等),通过Chrome DevTools + Fiddler + Frida动态Hook定位加密入口,还原各种签名逻辑,搭建自动化采集框架,结合代理IP池与请求头轮转策略,日均稳定采集20万+条商品数据;实现多平台数据格式统一清洗与去重,落地MySQL数据表存储,累计数据量超千万级。
项目二:企业数据报表系统(Vue+Java前后端)——前端使用Vue + Element UI构建数据看板与报表管理页面,后端使用Spring Boot + MyBatis实现数据接口与权限控制。集成ECharts实现多维度可视化图表,开发定时任务模块完成每日报表数据自动计算与推送;通过SQL索引优化与数据预聚合,将百万级数据查询响应时间从8秒降至500ms以内。系统已支撑业务部门10+个核心报表线上运行。
项目三:微信公众号内容采集与监控系统——针对微信公众平台的反爬机制,通过抓包分析完整还原登录及请求流程,破解关键请求参数生成逻辑;采用requests + httpx模拟微信内置浏览器环境,实现多账号Cookie池管理与轮转,突破单账号请求频率限制。系统日均采集100+篇公众号文章,经LLM清洗后自动生成舆情日报并推送至企业微信群。
项目四:企业RPA流程自动化系统——基于Python + 影刀RPA构建RPA自动化系统,模拟人工操作完成多系统间的数据填报、审批流转、报表下载等重复性业务流程。针对企业内网系统及部分SaaS平台,通过DOM元素定位与页面状态机控制实现自动化作业;开发任务调度中心,支持定时触发、异常重试、执行日志追踪与结果推送。已完成财务对账、流程审批、销售数据汇总、供应链单据录入等多条核心流程自动化。