本项目针对某第三方航空票务平台，开发基于浏览器自动化的数据采集系统，实现特定航线航班动态、实时票价及余票信息的定时监控与抓取。
我在本项目中负责自动化框架的搭建与反爬对抗，主要工作包括：
自动化框架搭建：采用Playwright驱动Chromium浏览器，模拟真实用户操作流程（输入出发地/目的地、选择日期、触发查询），有效解决动态加载数据的抓取难题。
指纹伪装与反爬突破：针对目标站点的Web端风控，配置了Stealth插件规避WebDriver特征检测；结合自建高质量代理IP池，实现单IP单会话的隔离运行，成功绕过Cloudflare五秒盾及高频滑块验证码。
页面解析与异常处理：使用XPath与CSS Selector精准提取异步渲染的航班数据，并设计了完善的元素等待机制与异常重试逻辑，确保长时运行不断线。
该系统稳定实现7x24小时全天候监控，数据完整率达99%以上。